性能遠低於預期,傳OpenAI放棄開發平價版GPT-4 Arrakis

2023-12-5 21 12/5
性能遠低於預期,傳OpenAI放棄開發平價版GPT-4 Arrakis

據報導,兩位知情人士今日稱,人工智慧初創公司OpenAI已經停止開發新的人工智慧模型Arrakis。早在去年年底,即聊天機器人ChatGPT引起全球轟動後,OpenAI的工程師們就開始研究一種新的人工智慧模型,內部代號為「Arrakis」。

按照OpenAI的設計初衷,Arrakis將具有與GPT-4一樣的能力,但部署成本更低,因為它的部分設計採用了所謂的「分散」原則。

這意味著,只有神經網路的一部分被用來處理使用者輸入。而在傳統的“密集模型”中,整個神經網路都是活躍的。當前,Google的Path AI項目就使用了“分散”原則。

但兩位知情人士現在表示,OpenAI於今年年中取消了Arrakis項目,因為該模型的運行效率並沒有預期的那樣高。OpenAI的開發團隊意識到,Arrakis的性能遠不及GPT-4。

目前尚不清楚,為什麼「分散」原則在早期的測試中效表現良好,但在後來的開發中卻失敗了。

當前的大型語言模型,即生成式人工智慧,依賴於巨大的計算能力來運行其複雜的數學模型,企業必須購買大量的高性能晶片,成本非常高。因此,越來越多的公司,包括亞馬遜、Google、阿里巴巴、Meta和OpenAI等,都在設計自己的特定人工智慧晶片。

但分析公司CCS Insight上週表示,生成式人工智慧已被過度炒作。隨著相關成本的增加,以及監管的呼聲越來越高,這項新興的技術將於2024年遇冷。

 

  • 延伸閱讀:GPT-4 也難逃「反轉魔咒」,大型語言模型先天就有缺陷:知道A=B,無法反推B=A
  • 延伸閱讀:論文投稿前先問GPT-4給不給過!史丹佛實測5000篇論文,大多數意見和評審相同,還能給出人想不到的回饋
  • 延伸閱讀:ChatGPT App重大進化!能看、能聽、還會說,多模態GPT-4V能力細節同時公布