極客網(wǎng)·極客觀察8月8日,大模型風(fēng)起云涌,正在從虛擬世界進入現(xiàn)實世界。谷歌DeepMind日前推出 Robotic Transformer 2(簡稱RT-2)大語言模型,讓人類可以通過純語言命令優(yōu)化機器人控制,邁出了重要一步。
不同于此前的大模型,這是一個“視覺-語言-動作”(vision-language-action,簡稱VLA)模型。業(yè)界認為,谷歌此舉是想打造可以適應(yīng)人類環(huán)境的通用機器人,類似于機器人瓦力或者C-3PO。
谷歌RT-2無需針對特定任務(wù)專門訓(xùn)練
當人類需要學(xué)習(xí)某項任務(wù)時,往往會通過閱讀和觀察來實現(xiàn)。RT-2有點類似,它用到了大語言模型(也就是驅(qū)動ChatGPT的技術(shù))。RT-2從網(wǎng)上尋找文本和圖片,然后訓(xùn)練模型,即使沒有針對特定任務(wù)專門訓(xùn)練過,RT-2也可以識別模式和動作。
舉個例子,按谷歌的說法,在沒有經(jīng)過特別訓(xùn)練的前提下,RT-2可以識別并扔掉垃圾。RT-2會理解垃圾是什么,了解如何處理,然后完成一系列動作。RT-2甚至知道食品包裝紙或香蕉皮也是垃圾。
谷歌工程師甚至說,向RT-2下達一條命令,讓它撿起已經(jīng)滅絕的動物,RT-2機器人可以從三個雕像中找出恐龍。
放在以前,如果想讓AI處理垃圾——無論是識別垃圾、撿起垃圾還是扔掉,都要專門訓(xùn)練。RT-2不太一樣,它從網(wǎng)絡(luò)數(shù)據(jù)中獲得大量知識,已經(jīng)知道垃圾是什么,能夠識別垃圾,不需要專門訓(xùn)練。
又比如要讓AI機器人撿起蘋果,先要訓(xùn)練機器人,讓它知道蘋果的一切,比如蘋果是如何生長的,它的物理特點有什么;不只如此,還要在環(huán)境中識別蘋果,不能將蘋果和紅球混淆;還有最重要的,AI要知道如何將蘋果撿起來。
谷歌RT-2是打造通用機器人的一大步
一般來說科學(xué)家會用大量人工獲取的數(shù)據(jù)點來訓(xùn)練機器人AI,為了覆蓋每一種可能場景,訓(xùn)練時會消耗大量時間和成本?,F(xiàn)實世界紛繁多變,機器人助手如果想變得實用,必須正確應(yīng)對那些不太可能編程的場景。
在開發(fā)RT-2時,DeepMind深入挖掘變形AI模型的優(yōu)點,這種模型擁有很強的概括能力。RT-2借鑒了谷歌早期開發(fā)的AI,比如PaLI-X和PaLM-E。有了RT-2模型,機器人可以處理攝像頭圖像,對應(yīng)該執(zhí)行的動作進行預(yù)測。
谷歌發(fā)現(xiàn),如果是訓(xùn)練過的任務(wù),RT-2試驗6000多次后效果便與RT-1一樣好。如果是沒有訓(xùn)練過的任務(wù),RT-2的表現(xiàn)比RT-1好一倍。簡單來說,谷歌認為RT-2在學(xué)習(xí)新場景新任務(wù)時表現(xiàn)更好,雖然它仍不完美。
DeepMind的目標是打造通用機器人,但谷歌也承認還有很多研究工作要做,不過RT-2應(yīng)該是正確的研究方向。如果RT-2真的能變得完美,人類可以向機器人下達“文字命令”,讓機器人按指令行動。
谷歌RT-2可以像人類一樣將學(xué)到的知識用于新場景
RT-2最大的突破在于,它從網(wǎng)絡(luò)數(shù)據(jù)中學(xué)習(xí)基本概念和構(gòu)想,然后將學(xué)到的知識用來指揮機器人完成動作,讓機器理解甚至“說出”它們的操作語言。
要讓機器人在多變的環(huán)境中執(zhí)行通用任務(wù),它必須管理好復(fù)雜抽象任務(wù)。如果是之前沒有遇到的過的環(huán)境,更是需要機器人正確應(yīng)對。
聊天機器人純粹在虛擬世界運行,機器人不一樣,它存在于真實世界。機器人要理解抽象概念,在實際、物理環(huán)境中應(yīng)用。
在RT-2出現(xiàn)之前,機器人依賴復(fù)雜系統(tǒng)堆棧來運行,也就是高級推理系統(tǒng)與低級操作系統(tǒng)聯(lián)合作戰(zhàn),讓機器人正常運轉(zhuǎn),這種方法有些笨重!RT-2簡單一些,它將復(fù)雜推理與動作輸出整合到一個模型。
RT-2的最大特點在于:它從語言和視覺訓(xùn)練數(shù)據(jù)中學(xué)習(xí)概念,將概念變成機器人動作,即使是之前沒有訓(xùn)練過的任務(wù),它的處理能力也更強。簡言之,RT-2可以像人類一樣,將以前學(xué)到的概念應(yīng)用于新場景。
谷歌的研究似乎在告訴人類,AI正在以更快的速度影響機器人。開發(fā)多功能通用型機器人是人類的一個夢想,希望RT-2能帶來突破。(小刀)
- MWC25觀察:移動產(chǎn)業(yè)迎“三變”,華為AI-Centric 5.5G獻“三策”
- AI又進化了,程序員職業(yè)真的到了崩潰邊緣?
- 雷軍拿到1小時首富體驗卡,小米潛力還未完全釋放?
- 深度思考:現(xiàn)在的AI模型真的在進行推理嗎?
- AI重塑硅谷創(chuàng)業(yè)法則:自我造血盈利快,不再依賴風(fēng)險投資
- 京東“整頓”外賣行業(yè),“良性內(nèi)卷”照進現(xiàn)實
- “卷贏”已死,“共贏”當立!中企出海的生死抉擇
- 2025美國科技企業(yè)繼續(xù)裁員:已裁12000多人,Meta裁了5%
- 電影導(dǎo)演們,準備迎接AI風(fēng)暴吧!
- ARM與高通業(yè)績預(yù)期不樂觀:AI未能拉升PC和手機銷量
免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準確性及可靠性,但不保證有關(guān)資料的準確性及可靠性,讀者在使用前請進一步核實,并對任何自主決定的行為負責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負任何法律責(zé)任。任何單位或個人認為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。