※ 本文轉寄自 ptt.cc, 文章原始頁面
[新聞] 谷歌通用AI智能體發布,3D遊戲玩法要變天
谷歌通用AI智能體發布,3D遊戲玩法要變天了
https://www.qbitai.com/2024/03/127840.html
10秒內完成簡單任務
西風發自凹非寺
谷歌DeepMind號稱打造出了首個能在廣泛3D虛擬環境和電玩遊戲中遵循自然語言指令的
通用AI智能體 。
名為 SIMA ,不是NPC,是可以成為玩家拍檔,幫忙工作打雜的那種。
例如,在《模擬山羊3》(Goat Simulator 3)當駕駛開開車:
https://tinyurl.com/mtt9efxd
在《幸福工廠》(Satisfactory)挖礦石:
https://tinyurl.com/37anxy7s
在《瓦爾海姆》(Valheim)中尋找水源:
https://tinyurl.com/3fpn9x7n
在《無人深空》(No Man's Sky)駕駛太空船射擊小行星收集資源:
https://tinyurl.com/5dyb4nvr
https://tinyurl.com/sc67sxhz
SIMA全名為Scalable Instructable Multiworld Agent,顧名思義可擴展、可指導、多世
界。
之前,GoogleDeepMind在AI+遊戲方面也做過許多工作,像是推出能和人類玩家打PK、會
玩《星海爭霸II》的AlphaStar系統。
而SIMA被DeepMind稱作是一個“新的里程碑”,主打從適用單一遊戲轉向通用多種遊戲,
且可遵循語言指令。
SIMA一公開,網友們也是討論熱烈。
讓它們替我完成無聊繁瑣的任務,這樣我就可以直接做有趣的部分,而不必花幾個小
時培育chocobos獲取隨機召喚。
嗯…《最終幻想》(Final Fantasy)玩家無疑了。
專業《模擬山羊》玩家在此刻也懵了
最近這一連串的AI進展也是整的網友們措不及防,直呼「慢一點」
10秒內完成的簡單任務
接下來再來看一波SIMA的表現。
為了讓SIMA接觸到更多遊戲環境,開發團隊表示目前已與八家遊戲工作室合作,在九款不
同的電玩遊戲上訓練和測試了SIMA。
目前的SIMA已在600個基本技能上進行了評估。
基本操作、互動、使用選單都會:
https://tinyurl.com/5ezm7r2h
簡單的任務,10秒內可完成。
各種場景都能適應:
https://tinyurl.com/atbpkshj
除此之外,GoogleDeepMind還發布了一份技術報告,一起來看看裡面都有啥。
未見過的遊戲也會玩
SIMA的整體架構是將預先訓練視覺模型與自監督學習的Transformer結合。
從使用者接收語言指令,並從環境中獲取圖像觀察結果,然後將它們映射為鍵盤和滑鼠動
作。
具體架構如下圖:
https://tinyurl.com/uk6aap99
開發人員收集了一個既包括精選研究環境又包括商業電玩遊戲的大型多樣化遊戲資料集。
此外,他們還用Unity創造的新環境,名為「the Construction Lab」。 在這個環境中,
智能體需要使用積木來建構雕塑,這考驗了它們對物體的操縱能力和對物理世界的理解。
資料收集包含多種方法,例如讓不同成對的人類玩家的互動,其中一名玩家觀察並指導另
一名玩家,以此來捕獲語言指令;讓玩家自由玩遊戲,觀察他們的操作,並記錄下一個可
能導致其遊戲行為的指令。
透過在不同的遊戲世界中學習,SIMA能夠將語言與遊戲行為結合。
不需要存取遊戲原始碼,也不需要自訂API,僅需要兩個輸入:螢幕上的圖像和用戶提供
的簡單的自然語言指令。
然後SIMA就會使用鍵盤和滑鼠輸出來控制遊戲角色以執行這些指令,這項操作與人類類似
,也意味著SIMA有潛力與任何虛擬環境互動。
在評估測試中,研究人員表示SIMA在九個3D遊戲集上接受訓練,表现顯著優於僅在單個游
戲上單獨訓練的智能體。
而且SIMA在未訓練過的遊戲中的表現和專門使用該遊戲資料集訓練過的智能體表現一樣好
。
也就是說,SIMA在全新環境中具備泛化能力。
此外測試結果也顯示,SIMA的效能依賴語言。 在一個控制測試中,智能體沒有接受任何
語言訓練或指令,它就會出現無目的的操作,不遵循指令。
而且,跟人類玩家比較,SIMA水平還是差一點。
更多細節,有興趣的家人們可以查看技術報告。
參考連結:
[1]https://deepmind.google/discover/blog/sima-generalist-ai-agent-for-3d-virtual-environments/
[2]https://storage.googleapis.com/deepmind-media/DeepMind.com/Blog/sima-generalist-ai-agent-for-3d-virtual-environments/Scaling%20Instructable%20Agents%20Across%20Many%20Simulated
%20Worlds.pdf
--
※ 發信站: 批踢踢實業坊(ptt.cc), 來自: 114.38.22.144 (臺灣)
※ 文章網址: https://www.ptt.cc/bbs/C_Chat/M.1710507775.A.699.html
18 則留言
jackliao1990 作者的近期文章
19C_Chat
[討論] 腦機介面術後 玩家玩《文明6》到凌晨6點https://twitter.com/neuralink/status/1770563939413496146?s=20 馬斯克旗下的腦機介面公司Neuralink分享了首位接受其手術的患者的狀況 。 這位患者八年前因為潛水事故導致脊髓受
13C_Chat
[新聞] 實測英偉達AI遊戲引擎:與NPC即時聊天實測英偉達AI遊戲引擎:與NPC即時聊天,中文流暢爆了 https://www.qbitai.com/2024/03/124892.html 克雷西發自國際莊 賽博朋克拉麵店開飆中文 黃院士在《Cyberpunk2077》裡搞的智能NPC,
24C_Chat
Re: [情報] 實教二年級11卷雷茶柱承認對綾小路清隆有好感,唯一阻止這感情的原因是年齡 天澤和綾小路在射箭比賽中全力以赴。綾小路僅以1分優勢戰勝她。 天澤威脅要傷害朝比奈好讓南雲與她私下見面,天澤把南雲逼到牆角並揚言要摧毀他,也 可能是想為八神報仇。綾小路阻止了她。 有棲
26C_Chat
[情報] 實教二年級11卷雷星之宮說路哥是鬼牌,而日和抽到了鬼牌。 雙方面談時,堀北第二次問茶柱關於路哥的事,茶柱要她先搞定毒奶。 坂柳龍園約好學期末考試誰輸誰退學。 樁和雪確定是姊妹。 坂柳要去見山村但拿不出勇氣,路哥於是牽起她的手但強調僅限今天。 疑似被強迫入學的
推
推
→
推
→
推
推
噓
→
→
推
→
推
推
推
→
推
→