輝達(NVIDIA)今天(19日)宣布推出NVIDIA Isaac GR00T N1.5,這是 NVIDIA 針對人形推理和技能的開放、通用、完全可自訂基礎模型的首次更新;NVIDIA Isaac GR00T-Dreams,產生合成運動數據的藍圖;以及 NVIDIA Blackwell 系統來加速人形機器人的發展。

人形機器人和機器人開發商 Agility Robotics、Boston Dynamics、Fourier、Foxlink、Galbot、Mentee Robotics、NEURA Robotics、General Robotics、Skild AI 和小鵬機器人正在採用NVIDIA Isaac™ 平台技術來推進人形機器人的開發和部署。

全站首選:就是要核武? 不跟美國妥協了! 伊朗 : 無論談判如何 濃縮鈾活動都會繼續

NVIDIA 創辦人兼執行長黃仁勳表示:「物理人工智慧和機器人技術將帶來下一場工業革命。「從機器人的 AI 大腦到用於實踐的模擬世界,再到用於訓練基礎模型的 AI 超級計算機,NVIDIA 為機器人發展歷程的每個階段提供了構建模組。 」

全新 Isaac GR00T 資料 產生藍圖縮小資料差距
Isaac GR00T-Dreams 在黃仁勳的 COMPUTEX 主題演講中進行展示,它是一個藍圖,有助於產生大量合成運動數據(又稱神經軌跡),物理 AI開發人員可以使用這些數據來教機器人新的行為,包括如何適應不斷變化的環境。

開發人員可以先為他們的機器人進行 Cosmos Predict世界基礎模型(WFM) 的後期訓練。然後,GR00T-Dreams 使用單一影像作為輸入,產生機器人在新環境中執行新任務的影片。然後,藍圖提取動作標記(壓縮的、可消化的資料片段),用於教導機器人如何執行這些新任務。

GR00T-Dreams 藍圖是對Isaac GR00T-Mimic 藍圖的補充,後者於 3 月在 NVIDIA GTC 大會上發布。雖然 GR00T-Mimic 使用NVIDIA OmniverseNVIDIA Cosmos平台來增強現有數據,但 GR00T-Dreams 使用 Cosmos 來產生全新的數據。

全新Isaac GR00T 模型推動人形機器人開發
NVIDIA Research使用 GR00T-Dreams 藍圖產生合成訓練數據,在短短 36 小時內開發出GR00TN1.5(GR00T N1 的更新版),而手動收集人類數據則需要近三個月的時間。

GR00T N1.5 可以更好地適應新環境和工作空間配置,並透過使用者指示識別物件。此次更新顯著提高了模型在常見物料處理和製造任務(如分類或放置物品)的成功率。

GR00T N 型號的早期採用者包括 AeiRobot、Foxlink、Lightwheel 和 NEURA Robotics。 AeiRobot 採用這些模型使 ALICE4 能夠理解自然語言指令並在工業環境中執行複雜的拾取和放置工作流程。Foxlink Group正在利用它們來提高工業機器人機械手的靈活性和效率,而Lightwheel則利用它們來驗證合成數據,以便在工廠中更快地部署人形機器人。NEURA Robotics 正在評估這些模型,以加速其家庭自動化系統的開發。

新的機器人模擬和數據生成框架 加速訓練流程
開發高技能的人形機器人需要大量不同的數據,捕獲和處理這些數據的成本很高。機器人需要在物理世界中進行測試,這可能會帶來成本和風險。

為了幫助縮小數據和測試差距,NVIDIA 推出以下類比技術:

NVIDIA Cosmos Reason是一種新型 WFM,它使用思路鏈推理來幫助為物理 AI 模型訓練提供準確、高品質的合成數據現已在Hugging Face上推出。

GR00T-Dreams 中使用的Cosmos Predict 2即將登陸 Hugging Face,其特點是性能增強,可產生高品質的世界並減少幻覺。

NVIDIA Isaac GR00T-Mimic是一個藍圖,僅使用少量人類演示即可為機器人操作生成大量合成運動軌跡。

開源實體 AI 資料集,現包含 24,000 條用於開發 GR00T N 模型的高品質人形機器人運動軌跡。

NVIDIA Isaac Sim™ 5.0是一個類比和合成資料生成框架,即將在 GitHub 上公開發布

NVIDIA Isaac Lab 2.2一個開源機器人學習框架,它將支援新的評估環境,幫助開發人員測試 GR00T N 模型。

富士康和 Foxlink 正在使用 GR00T-Mimic 藍圖進行合成運動操縱生成,以加速其機器人訓練流程。 Agility Robotics、Boston Dynamics、Fourier、Mentee Robotics、NEURA Robotics 和小鵬機器人正在使用 NVIDIA Isaac Sim 和 Isaac Lab 模擬和訓練他們的人形機器人。Skild AI 正在使用類比框架開發通用機器人智能,而 General Robotics 正在將其整合到其機器人智慧平台中。

面向機器人開發人員的通用 Blackwell 系統
全球系統製造商正在建立NVIDIA RTX PRO™ 6000工作站和伺服器,提供單一架構,可輕鬆運行包括訓練、合成資料生成、機器人學習和模擬在內的每個機器人開發工作負載。

思科戴爾科技、惠普企業、聯想超微宣布,推出搭載 NVIDIA RTX PRO 的伺服器。戴爾科技、惠普企業和聯想宣布推出搭載 NVIDIA RTX PRO 6000 Blackwell 的工作站

NVIDIA表示,當需要更多運算來運行大規模訓練或資料產生工作負載時,開發人員可以利用 NVIDIA Blackwell 系統(例如 GB200 NVL72)可在領先的雲端供應商和NVIDIA 雲端合作夥伴上使用NVIDIA DGX™ Cloud——以實現高達 18 倍的資料處理效能。

NVIDIA進一步表示,開發人員可以將他們的機器人基礎模型部署到即將推出的 NVIDIA Jetson Thor 平台,從而實現加速機器人推理和運行時效能。