天天看點

商湯聯合釋出通才AI智能體通關《我的世界》,像人類一樣生存,探索和創造

作者:雷峰網

在AI發展程序中有一個非常有趣卻有違常識的現象,“一些對人類而言相對困難的任務,例如下棋,對 AI 來說卻相對容易實作;而在開放世界中與環境互動、進行規劃和決策等對人類來說較簡單的事,AI 卻面臨巨大挑戰”,這就是莫拉維克悖論。

不過,現在GITM 成功打破了這一悖論限制,在複雜且類似于現實世界的環境中取得突破,能夠像人類一樣生存,探索和創造了!

在緊密模拟真實世界的暢銷遊戲《我的世界》(Minecraft) 中,由商湯科技聯合清華大學、上海人工智能實驗室等機構研究者們共同提出的通才 AI 智能體 Ghost in the Minecraft (GITM),不但能夠玩轉《我的世界》,且比以往所有智能體都有更加優秀表現。

商湯聯合釋出通才AI智能體通關《我的世界》,像人類一樣生存,探索和創造

"Ghost in the Minecraft"(GITM)

像人類一樣生存,探索和創造

此研究在向通用人工智能(AGI)方向邁出了重要一步。

廣泛的任務覆寫:GITM 在《我的世界》内主世界的所有技術挑戰上實作了100%的任務覆寫率(成功解鎖了完整的科技樹的262個物品),而此前所有智能體的總和隻能覆寫30%。(以往所有智能體方法包括OpenAI和DeepMind在内總共隻解鎖了78個)

商湯聯合釋出通才AI智能體通關《我的世界》,像人類一樣生存,探索和創造

高任務成功率:在最受關注的 “擷取鑽石” 任務上,GITM取得了67.5%的成功率,相比于目前最佳成績(OpenAI VPT)提高了47.5%。

商湯聯合釋出通才AI智能體通關《我的世界》,像人類一樣生存,探索和創造

極高的訓練效率:GITM的訓練效率也達到新高度。環境互動步數隻需已有方法的萬分之一,單一CPU節點訓練2天即可完成,遠遠低于之前OpenAI VPT所需的6480個GPU天或DeepMind DreamerV3所需的17個GPU天。

商湯聯合釋出通才AI智能體通關《我的世界》,像人類一樣生存,探索和創造

通才 AI 智能體 "Ghost in the Minecraft"(GITM)玩轉《我的世界》遊戲,生存模式白手起家,拿到主世界的所有物品,挖鑽石不在話下,還能制作附魔書!

商湯聯合釋出通才AI智能體通關《我的世界》,像人類一樣生存,探索和創造

GITM 面對各類地形、環境、白天黑夜場景,甚至遇到怪物也能自如應對

GITM還可以進一步應用在《我的世界》更加複雜的任務中,比如生存所需的避難所、農田、鐵傀儡,創造自動化裝置所需的紅石電路、進入下界所需的下界傳送門等。

商湯聯合釋出通才AI智能體通關《我的世界》,像人類一樣生存,探索和創造

這些任務展示了 GITM 強大的能力和可擴充性,使得智能體能夠在《我的世界》中長時間生存、發展,探索更加進階的世界。

通用人工智能突破加速AI産業化革命

研發攻克《我的世界》中所有技術挑戰的 AI 智能體GITM,目的是建構一個具備自主學習和掌握整個真實世界技能的通用人工智能方向。

GITM打破了傳統以RL為基礎的架構,采用大型語言模型(LLM)作為智能體核心的新範式。

商湯聯合釋出通才AI智能體通關《我的世界》,像人類一樣生存,探索和創造

項目首頁:https://github.com/OpenGVLab/GITM

這一創新也有助于推動通用人工智能(AGI)的研究目标加速實作,發展出能夠在開放世界環境中像人一樣進行感覺、了解和互動的智能體,并為機器人和自動駕駛等産業帶來巨大突破和進步,有效解決現實世界中複雜環境和各類長尾問題,推動AI技術更大規模的産業落地。

得益于“大模型+大算力”推進AGI(通用人工智能)發展的戰略布局,以及全棧大模型研發體系,商湯科技得以在多模态、多任務通用大模型領域快速發展,以“日日新SenseNova”大模型體系為核心,不斷助力創新技術快速應用于智能汽車、智慧生活、智慧商業和智慧城市等領域,持續提升産業智能化滲透率。

同時,商湯也積極從産業應用中不斷積累Know-How,如早在2016年就開始布局智能汽車領域,并不斷探索和解決自動駕駛應用中大量的規劃和決策問題。2022年中,商湯基于OpenDILab決策AI平台開發的AI模型DI-star在《星際争霸》中戰勝了曾經的大中華區冠軍,展示出強大的決策AI能力,有效推動自動駕駛打破規則限制,實作更高效的規劃控制。今天,GITM的成功将推動自動駕駛等應用處理複雜任務的能力更上一層樓,打破更高的技術天花闆。

雷峰網