探索集體智能？阿里推出多智能體雙向協(xié)調(diào)網(wǎng)絡(luò)BicNet

過(guò)去十年中，人工智能取得了長(zhǎng)足的進(jìn)步，在圖像和語(yǔ)音識(shí)別上已經(jīng)在某種程度上超越了人類。而通過(guò)反饋獎(jiǎng)勵(lì)，單個(gè)的AI智能體也能在雅達(dá)利這樣的視頻游戲和圍棋中戰(zhàn)勝人類。

但人類真正的智能還包括了社會(huì)和集體智能，這也是實(shí)現(xiàn)通用智能必不可少的。就像雖然單個(gè)螞蟻的智能有限，但通過(guò)協(xié)作它們能狩獵，能筑巢，能發(fā)動(dòng)戰(zhàn)爭(zhēng)。毫無(wú)疑問(wèn)，人工智能的下一個(gè)挑戰(zhàn)就是讓大規(guī)模的AI智能體學(xué)習(xí)人類水平的協(xié)作與競(jìng)爭(zhēng)。

協(xié)作的一個(gè)例子就是星際這樣的即時(shí)戰(zhàn)略游戲。雷鋒網(wǎng)(公眾號(hào)：雷鋒網(wǎng))消息，最近阿里巴巴與倫敦大學(xué)的研究人員們，就在一篇論文中展示了如何用星際爭(zhēng)霸作為測(cè)試場(chǎng)景，讓智能體協(xié)同工作，在多對(duì)一和多對(duì)多中打敗敵人。

掩護(hù)攻擊

這項(xiàng)研究主要關(guān)注星際中的微管理任務(wù)，每個(gè)玩家控制自己的單位，在不同的地形條件下殲滅對(duì)手。星際這樣的游戲?qū)τ?jì)算機(jī)來(lái)說(shuō)可能是最困難的，因?yàn)樗鼈兊膹?fù)雜程度比圍棋要高得多。這種大型多智能體系統(tǒng)學(xué)習(xí)面臨的主要挑戰(zhàn)是，參數(shù)空間會(huì)隨著參與人數(shù)的增加而呈指數(shù)級(jí)增長(zhǎng)。

研究人員讓多智能體把星際中的戰(zhàn)斗當(dāng)作零和隨機(jī)游戲來(lái)學(xué)習(xí)。為了形成可擴(kuò)展且有效的通訊協(xié)議，研究者引入了一個(gè)多智能體雙向協(xié)調(diào)網(wǎng)絡(luò)BiCNet，智能體可以通過(guò)它來(lái)交流。另外，研究中還引入了動(dòng)態(tài)分組和參數(shù)共享的概念，來(lái)解決擴(kuò)展性問(wèn)題。

邊打邊跑策略

BiCNet可以處理不同地形下的不同類型的戰(zhàn)斗，且對(duì)戰(zhàn)時(shí)雙方都有不同數(shù)量的AI智能體。

分析顯示，在沒(méi)有任何諸如人類示范或標(biāo)簽數(shù)據(jù)的監(jiān)督時(shí)，BiCNet也能學(xué)習(xí)各類協(xié)調(diào)策略，而這些策略與經(jīng)驗(yàn)豐富的玩家所展現(xiàn)出來(lái)的很相似，比如在不引發(fā)沖突的情況下移動(dòng)，邊打邊跑等基本策略，以及 掩護(hù)攻擊與適度集中火力等高級(jí)技巧。

另外，BiCNet還可以輕易適應(yīng)異構(gòu)智能體任務(wù)。在實(shí)驗(yàn)中，研究者根據(jù)不同的場(chǎng)景對(duì)網(wǎng)絡(luò)進(jìn)行了評(píng)估，發(fā)現(xiàn)它表現(xiàn)優(yōu)異，在大規(guī)?，F(xiàn)實(shí)應(yīng)用中有潛在價(jià)值。

研究中還發(fā)現(xiàn)，指定的獎(jiǎng)勵(lì)與學(xué)習(xí)策略之間存在很強(qiáng)的相關(guān)性。研究人員計(jì)劃進(jìn)一步研究這種關(guān)系，研究 策略如何在智能體網(wǎng)絡(luò)中傳遞，以及是否會(huì)出現(xiàn)特定的語(yǔ)言。另外，雙方都通過(guò)深度多智能體模型來(lái)操作時(shí)，納什均衡的的探討也很有意義。

生成海報(bào)

免責(zé)聲明：本網(wǎng)站內(nèi)容主要來(lái)自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁(yè)或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書(shū)面權(quán)利通知或不實(shí)情況說(shuō)明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開(kāi)相關(guān)鏈接。