ChatGPT運行每天或花費70萬美元 微軟開發(fā)自主芯片嘗試降低成本

新浪科技訊 北京時間4月21日早間消息,據(jù)報道,芯片行業(yè)研究公司SemiAnalysis首席分析師迪倫·帕特爾(Dylan Patel)表示,由于ChatGPT運行在價格昂貴的計算基礎(chǔ)設(shè)施之上,OpenAI每天為運行ChatGPT投入的成本可能高達70萬美元。

  帕特爾指出,ChatGPT需要龐大的算力,才能基于用戶的輸入信息做出反饋,包括撰寫求職信、生成教學(xué)計劃,以及幫助用戶優(yōu)化個人資料等。他表示:“大部分成本都來自于昂貴的服務(wù)器。”

  此外,帕特爾最初的估計基于OpenAI的GPT-3模型,而在采用最新的GPT-4模型之后,ChatGPT現(xiàn)在的運行成本可能更高。

  對此,OpenAI尚未對此做出回應(yīng)。

  帕特爾和SemiAnalysis的另一位分析師阿夫扎爾·艾哈邁德(Afzal Ahmad)表示,此前外界已經(jīng)注意到,訓(xùn)練ChatGPT背后的大語言模型可能要花費上億美元,但運營費用,或者說人工智能推理的成本,以任何合理的部署規(guī)模來看都遠遠超過了訓(xùn)練成本。他們指出:“事實上,按周來看,ChatGPT的推理成本超過了訓(xùn)練成本。”

  過去幾年,使用OpenAI語言模型的公司也一直在承擔(dān)高昂的價格。創(chuàng)業(yè)公司Latitude開發(fā)了一款基于用戶輸入信息生成故事情節(jié)的人工智能地下城游戲。該公司首席執(zhí)行官尼克·沃爾頓(Nick Walton)表示,運行該模型,以及相應(yīng)的購買亞馬遜AWS云服務(wù)器的費用2021年達到每月20萬美元。因此,沃爾頓最終決定改用AI21 Labs支持的語言軟件提供商。這幫助他將公司的人工智能成本降低了一半,至每月10萬美元。

  沃爾頓在接受采訪時表示:“我們會開玩笑說,我們有人類員工和人工智能員工,在這兩類員工身上花費的成本大致相同。我們每個月在人工智能上花掉數(shù)十萬美元,而且我們也不是一家大型初創(chuàng)公司,所以這是一筆巨大的開支?!?/p>

  近期有報道稱,為了降低生成式人工智能模型的運行成本,微軟正在開發(fā)一款代號為“雅典娜”的人工智能芯片。該項目于2019年啟動。在此幾年前,微軟與OpenAI達成了10億美元的投資協(xié)議,要求OpenAI僅在微軟的Azure云服務(wù)器上運行其模型。

  微軟啟動這一芯片項目的背后有兩方面思考。知情人士透露,微軟高管意識到,他們在自主芯片開發(fā)方面落后于谷歌和亞馬遜。與此同時,微軟正在尋找更便宜的方案去替代英偉達的GPU芯片。

  目前,微軟大約有300多名員工正在開發(fā)這款芯片。消息人士稱,該芯片最早可能在明年發(fā)布,供微軟和OpenAI內(nèi)部使用。微軟拒絕對此消息置評。

(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責(zé)任。
任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )

贊助商
2023-04-21
ChatGPT運行每天或花費70萬美元 微軟開發(fā)自主芯片嘗試降低成本
新浪科技訊 北京時間4月21日早間消息,據(jù)報道,芯片行業(yè)研究公司SemiAnalysis首席分析師迪倫·帕特爾(Dylan Patel)表示,由于ChatGPT運行在價格昂貴的計算基礎(chǔ)設(shè)施之上,OpenAI每天為運行ChatGPT投入的成本可能高達70萬美元?! ∨撂貭栔赋?,ChatGPT需要龐大的算力,才能基于用...

長按掃碼 閱讀全文