智譜AI推出國產(chǎn)大模型GLM-4 中文能力比肩GPT-4

1月16日消息,智譜AI今天發(fā)布全自研第四代基座大模型GLM-4,性能相比前一代GLM-3提升60%、中文能力比肩GPT-4。

智譜AI CEO張鵬介紹,GLM-4的整體性能相比上一代大幅提升,逼近GPT-4。它可以支持更長的上下文,具備更強的多模態(tài)能力。同時,它的推理速度更快,支持更高的并發(fā),大大降低推理成本。

除此之外,GLM-4大幅提升了智能體能力,GLM-4 All Tools 實現(xiàn)自主根據(jù)用戶意圖,自動理解、規(guī)劃復雜指令,自由調(diào)用網(wǎng)頁瀏覽器、Code Interpreter代碼解釋器和多模態(tài)文生圖大模型以完成復雜任務。GLMs 個性化智能體定制功能亦同時上線,用戶用簡單的提示詞指令就能創(chuàng)建屬于自己的 GLM 智能體。

中文能力比肩GPT-4

在基礎能力方面,GLM-4在各項評測集上的最終得分如下:

MMLU:81.5,達到GPT-4的94%水平;

GSM8K:87.6 ,達到GPT-4的95%水平;

MATH :47.9,達到GPT-4的91%水平;

BBH :82.3,達到GPT-4的99%水平;

HellaSwag :85.4,達到GPT-4 的90%水平;

HumanEval:72,達到GPT-4的100%水平。

指令跟隨能力方面, GLM-4在IFEval Prompt提示詞跟隨中文方面達到和GPT-4的88%水平,指令跟隨(中文)方面達到 90%水平。

對齊能力上,基于AlignBench數(shù)據(jù)集,GLM-4超過了GPT-4的6月13日版本,逼近GPT-4最新11月6日版本的效果。GLM-4在中文推理、邏輯推理方面的能力,還有待進一步提升。

GLM-4可以支持128k的上下文窗口長度,單次提示詞可以處理的文本可以達到300頁。同時,在needle test(大海撈針)測試中,128K文本長度內(nèi)GLM-4 模型均可做到幾乎100%的精度召回,并未出現(xiàn)長上下文全局信息因為失焦而導致的精度下降問題。

同時,多模態(tài)能力方面,GLM-4在文生圖(CogView3)和多模態(tài)理解都得到了增強。CogView3效果超過開源最佳的Stable Diffusion XL,逼近DALLE?3。

此外,GLM-4的All Tools能力全新發(fā)布。

GLM-4實現(xiàn)了自主根據(jù)用戶意圖,自動理解、規(guī)劃復雜指令,自由調(diào)用網(wǎng)頁瀏覽器、Code Interpreter代碼解釋器和文生圖CogView3模型。

同時,GLM-4 通過代碼解釋器,會自動調(diào)用代碼解釋器進行復雜的方程或者微積分求解。對比GSM8K、Math以及Math23K三個數(shù)據(jù)集上的結(jié)果,GLM-4 All Tools取得和GPT-4 All Tools相當?shù)男Ч?/p>

GLM-4的All Tools能力完全自動,而且可以處理各種任務,比如包括文件處理、數(shù)據(jù)分析、圖表繪制等復雜任務,支持處理 Excel、PDF、PPT 等格式的文件。

GLMs上線 大模型開源基金共建生態(tài)

GLMs個性化智能體定制能力也同步上線。

基于GLM-4模型的強大能力,張鵬介紹介紹,用戶只要登錄智譜清言官方網(wǎng)站,用簡單的提示詞指令就能創(chuàng)建屬于自己的GLM智能體。

用戶可以通過全新上線的智能體中心分享自己創(chuàng)建的各種智能體。GLM模型智能體的推出標志著任何人都能夠自由運用GLM-4模型并挖掘它的潛力,沒有任何編程基礎也能夠?qū)崿F(xiàn)大模型的便捷開發(fā)。這是智譜AI為降低大模型使用門檻所做的最新努力。

此前,智譜AI分別聯(lián)合CCF中國計算機學會、中國中文信息學會社會媒體處理專委會發(fā)起了CCF-智譜大模型基金、SMP-智譜大模型交叉學科基金,用于支持大模型理論、算法、模型、應用等相關(guān)研究和跨領(lǐng)域交叉創(chuàng)新。去年兩支基金為來自全國三十余所高校參與的41個研究項目累計提供了超1000萬元現(xiàn)金和算力資源的科研支持。

2024年智譜AI也將發(fā)起開源開放的大模型開源基金。

據(jù)介紹,該計劃包括三個“1000”:智譜AI將為大模型開源社區(qū)提供1000張卡,助力開源開發(fā);提供1000萬元的現(xiàn)金用來支持與大模型相關(guān)的開源項目;為優(yōu)秀的開源開發(fā)者提供1000億免費API tokens。

張鵬表示,大模型開源基金的目的在于推動大模型研發(fā)的大進展,促進大模型整個開源生態(tài)的大繁榮。面對全球的大模型創(chuàng)業(yè)者,智譜AI也將“Z計劃”進一步升級,聯(lián)合生態(tài)伙伴發(fā)起總額10億人民幣的大模型創(chuàng)業(yè)基金用于支持大模型原始創(chuàng)新,覆蓋大模型算法、底層算子、芯片優(yōu)化、行業(yè)大模型和超級應用等方向。

極客網(wǎng)企業(yè)會員

免責聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2024-01-16
智譜AI推出國產(chǎn)大模型GLM-4 中文能力比肩GPT-4
GLM-4性能相比前一代GLM-3提升60%、中文能力比肩GPT-4。

長按掃碼 閱讀全文