英偉達成立最壕AI實驗室:JimFan領銜,專攻具身智能
英偉達最新大動作來了——通用具身智能體。
這則消息是由英偉達高級科學家Jim Fan透露,他表示:
Jim Fan還強調,2024年將是屬于機器人、游戲AI和模擬的一年。
而隨著這兩天英偉達市值暴漲,Jim Fan還補充了一條X說道:
嗯,有錢,很壕。
相關成果展示
Jim Fan在發布這條職業履新消息之際,也順帶把英偉達此前在具身智能所做的相關工作盤點了一波。
例如被評為“2023年英偉達十大項目”之一的Eureka——
用GPT-4生成獎勵函數,教會機器人完成了三十多個復雜任務:比如,快速轉個筆,打開抽屜和柜子、拋球和接球。
使用GPU加速的物理模擬進行訓練,速度比實時快1000倍!
再如Voyager,把GPT-4放進《我的世界》——
在游戲中點亮科技樹的速度是此前方法的15.3倍,同時獲得的獨特物品是此前的3.3倍,探索范圍是2.3倍。
更關鍵的是,Voyager完全借助游戲畫面推理,一切操作與反饋通過文本和游戲的Javascript API進行。
它也是第一個LLM驅動、能熟練玩《我的世界》的智能體。
除此之外,還包括斬獲了NeurIPS 2022最佳論文的MineDojo。
這項研究提出一個由3個智能體組成的“具身GPT-3”,可以感知無限世界并在其中行動。
MineDojo是一個將《我的世界》變成 AGI 研究游樂場的開放框架。
團隊收集了100000個 YouTube 視頻、Wiki頁面和Reddit帖子,用于訓練《我的世界》智能體。
還有像VIMA這樣的研究:第一個帶有機械臂的多模態LLM,為機器人學習引入了“多模態提示”。
被黃仁勛帶火的具身智能
其實Jim Fan領隊搞通用具身智能體并不是非常意外的一件事情。
早在去年,黃仁勛便公開表達他對下一代人工智能的觀點:
而從去年至今,無論是高校還是產業,具身智能相關的研究可謂是層出不窮。
最為典型的便是斯坦福大學的家務機器人,驚呆了一眾網友。
那么Jim Fan團隊將在今年再帶來什么成果,是值得期待一波了。
- 免責聲明
- 本文所包含的觀點僅代表作者個人看法,不代表新火種的觀點。在新火種上獲取的所有信息均不應被視為投資建議。新火種對本文可能提及或鏈接的任何項目不表示認可。 交易和投資涉及高風險,讀者在采取與本文內容相關的任何行動之前,請務必進行充分的盡職調查。最終的決策應該基于您自己的獨立判斷。新火種不對因依賴本文觀點而產生的任何金錢損失負任何責任。