讓AI像人類一樣操作電腦!Anthropic上新Claude 3.5 Sonnet模型新能力

10月23日消息,OpenAI競爭對手Anthropic宣布推出升級版的Claude 3.5 Sonnet和新款Claude 3.5 Haiku。

根據(jù)Anthropic介紹,升級版Claude 3.5 Sonnet獲得了一項革命性的新技能:能夠像人類一樣操作電腦。同時,升級版Claude 3.5 Sonnet模型各項能力均超越之前版本,尤其在代碼方面取得了特別顯著的進(jìn)步,進(jìn)一步鞏固其行業(yè)領(lǐng)先地位。

新款Claude 3.5 Haiku則在許多評估中與Anthropic之前最大的型號Claude 3 Opus的性能相匹配,其成本和速度與上一代Haiku相同。

升級后的Claude 3.5 Sonnet現(xiàn)在可供所有用戶使用。從今天開始,開發(fā)者可以在Anthropic API、Amazon Bedrock和Google Cloud的Vertex AI上使用計算機(jī)測試版進(jìn)行構(gòu)建。新的Claude 3.5 Haiku將于本月晚些時候發(fā)布。

升級版Claude 3.5 Sonnet:超強(qiáng)編碼能力,公測“計算機(jī)使用”功能

據(jù)介紹,升級版Claude 3.5 Sonnet在業(yè)界基準(zhǔn)測試中表現(xiàn)卓越,在SWE-bench Verified編碼測試的得分由33%躍升至49%,超越所有目前公開可用的模型。在TAU-bench(評估模型靈活運(yùn)用工具和API綜合能力的基準(zhǔn)測試)中,其零售領(lǐng)域得分從62.6%提高到69.2%,航空領(lǐng)域從36.0%提高到46.0%。性能全面提升的同時,Claude 3.5 Sonnet的成本與之前版本保持一致。

另外,Anthropic早期的客戶反饋表明,升級后的Claude 3.5 Sonnet代表了人工智能編碼的重大飛躍。GitLab測試了DevSecOps任務(wù)的模型,發(fā)現(xiàn)它提供了更強(qiáng)的推理能力(跨用例高達(dá)10%),沒有增加延遲,使其成為支持多步驟軟件開發(fā)過程的理想選擇。

同時,Anthropic在Claude 3.5 Sonnet公測版中引入了一項突破性的新功能:計算機(jī)使用。通過API接入,開發(fā)人員可以指導(dǎo)Claude使用計算機(jī),就像人們看屏幕、移動光標(biāo)、單擊按鈕和輸入文本一樣。

Anthropic表示,Claude 3.5 Sonnet是第一個在公測中提供“計算機(jī)使用”的AI模型。該功能現(xiàn)階段是實(shí)驗(yàn)性的,預(yù)計隨著時間的推移,這種能力會迅速提高。

Anthropic介紹,在“計算機(jī)使用”能力上,沒有制作特定的工具來幫助Claude完成個人任務(wù),而是教它一般的計算機(jī)技能,讓它能夠使用為人類設(shè)計的各種標(biāo)準(zhǔn)工具和軟件程序。開發(fā)人員可以使用這個新興功能來自動化重復(fù)流程,構(gòu)建和測試軟件,并執(zhí)行研究等開放式任務(wù)。

Anthropic構(gòu)建了一個API,允許Claude感知計算機(jī)界面并與之交互。開發(fā)人員可以集成此API,使Claude能夠?qū)⒅噶睿ɡ?,“使用我的計算機(jī)和在線數(shù)據(jù)填寫此表單”)轉(zhuǎn)換為計算機(jī)命令(例如,檢查電子表格;移動光標(biāo)打開web瀏覽器;導(dǎo)航到相關(guān)網(wǎng)頁;使用這些網(wǎng)頁中的數(shù)據(jù)填寫表單等等)。

效果方面,在評估人工智能模型像人一樣使用計算機(jī)的能力的OSWorld上,Claude 3.5 Sonnet在屏幕截圖(screenshot-only)類別中的得分為14.9%,明顯高于次佳人工智能系統(tǒng)的7.8%。當(dāng)提供更多步驟來完成任務(wù)時,Claude的得分為22.0%。

不過Anthropic也強(qiáng)調(diào),Claude 3.5 Sonnet目前使用計算機(jī)的能力并不完美。人們毫不費(fèi)力地執(zhí)行的一些操作——滾動、拖動、縮放——目前給都Claude帶來了挑戰(zhàn),鼓勵開發(fā)人員從低風(fēng)險任務(wù)開始探索。

據(jù)悉,Asana、Canva、Cognition、DoorDash、Replit和瀏覽器公司已經(jīng)開始探索這些功能,執(zhí)行需要幾十個甚至幾百個步驟才能完成的任務(wù)。例如,Replit正在使用Claude 3.5 Sonnet的“計算機(jī)使用”和UI導(dǎo)航功能來開發(fā)一個關(guān)鍵功能,該功能在為Replit Agent產(chǎn)品構(gòu)建應(yīng)用程序時對其進(jìn)行評估。

下面是Claude 最新演示的 AI 操作電腦的視頻截圖

在這個演示中,Claude瀏覽了不同的標(biāo)簽頁,收集了所需信息,并填寫了一個表單,所有電腦操作均由Claude生成。

Claude 3.5 Haiku:最快速模型

新推出的Claude 3.5 Haiku是Anthropic下一代速度最快的模型。在與Claude 3 Haiku相同的成本和相似的速度下,Claude 3.5 Haiku在每個技能集上都有所提高,甚至在許多智能基準(zhǔn)上超過了Anthropic上一代最大的型號Claude 3 Opus。

Claude 3.5 Haiku在編碼任務(wù)上表現(xiàn)得尤為出色。例如,它在SWE bench Verified上的得分為40.6%,超過初代版Claude 3.5 Sonnet和GPT-4o。

憑借低延遲、改進(jìn)的指令遵循和更準(zhǔn)確的工具使用,Claude 3.5 Haiku非常適合面向用戶的產(chǎn)品、專門的子代理任務(wù),以及從大量數(shù)據(jù)(如購買歷史、定價或庫存記錄)中生成個性化體驗(yàn)。

Anthropic介紹,Claude 3.5 Haiku將于本月晚些時候提供,并隨后提供圖像輸入能力。

Anthropic是由前OpenAI員工創(chuàng)立的公司,亞馬遜是Anthropic的重要投資者。今年3月,亞馬遜宣布已完成對 Anthropic 的 40 億美元投資,以深化推進(jìn)生成式 AI 技術(shù)的發(fā)展。

Anthropic于2023年3月發(fā)布了Claude 3系列模型Claude 3 Haiku、Claude 3 Sonnet、 Claude 3 Opus,此后便按照各型號進(jìn)行能力升級迭代。今年6月,Anthropic發(fā)布最強(qiáng)大模型Claude 3.5 Sonnet,擁有相比前代模型2倍的推理速度和1/5的調(diào)用成本。(果青)

(免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實(shí),并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負(fù)任何法律責(zé)任。
任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實(shí)內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實(shí),溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 )

贊助商
2024-10-23
讓AI像人類一樣操作電腦!Anthropic上新Claude 3.5 Sonnet模型新能力
OpenAI競爭對手Anthropic宣布推出升級版的Claude 3.5 Sonnet和新款Claude 3.5 Haiku。根據(jù)Anthropic介紹,升級

長按掃碼 閱讀全文