NVIDIA 今日宣布推出全球首個開放式、可完全自訂的基礎模型 NVIDIA Isaac GR00T N1，提供通用人形機器人推理能力和技能。同時還提供模擬框架與藍圖，例如用於產生合成資料的 NVIDIA Isaac GR00T Blueprint，以及與 Google DeepMind 及 Disney Research 共同開發中、專門用於開發機器人的開源物理引擎 Newton。
NVIDIA 釋出 Isaac GR00T N1 人形機器人模型
GR00T N1 現已推出，是 NVIDIA 預先訓練並提供給全球機器人開發人員的完全可客製化模型系列中的第一款，可加速推動全球受勞動力短缺之苦的產業進行轉型。估計全球勞動力短缺人數超過 5000 萬人。
NVIDIA 創辦人暨執行長黃仁勳表示：「通用機器人的時代已經來臨。有了 NVIDIA Isaac GR00T N1 及全新的資料產生與機器人學習架構，各地的機器人開發人員將開闢人工智慧時代的下一個重要領域。」
GR00T N1 推動人形機器人開發者社群的發展
GR00T N1 基礎模型採用雙系統架構，靈感來自於人類的認知原理。「系統 1」是快速思考的動作模型，反映人類的反射或直覺。「系統 2」是一個緩慢思考的模型，用於深思熟慮，做出有條理的決策。
在視覺語言模型的支援下，系統 2 會對身處的環境和收到的指令進行推理以規劃行動。然後系統 1 會將這些計畫轉換為機器人身上精確連續的動作。系統 1由人類示範的資料及 NVIDIA Omniverse 平台所產生的大量合成資料訓練而成。
GR00T N1 可以輕鬆用於處理一般任務，像是用一或兩隻手臂抓取、移動東西，以及將東西從一隻手臂換到另一隻手臂，或是執行需要長上下文與一般技能組合的多步驟任務。這些功能可以用在搬運材料、包裝和檢查等情況。
開發人員和研究人員可針對特定的人形機器人或任務，使用真實或合成資料對 GR00T N1 進行後期訓練。
黃仁勳在他的 GTC 大會主題演講中，展示了 1X 的人形機器人利用建構在 GR00T N1 上的後期訓練手段，自主執行整理家務的工作。1X 與 NVIDIA 合作訓練 AI，讓這款機器人擁有自主能力。
1X Technologies 執行長 Bernt Børnich 表示：「人形機器人的未來在於適應能力與學習能力。NVIDIA 的 GR00T N1 模型為機器人的推理和技能提供了重大突破。只需極少的後期訓練資料，我們便能夠在 NEO Gamma 上進行全面部署。這進一步實現我們的使命，也就是創造出不是工具，而是能夠以有意義、無法估計的方式協助人類、陪伴人類的機器人。」
全球其他率先使用 GR00T N1 的人形機器人開發商有 Agility Robotics、Boston Dynamics、Mentee Robotics 和 NEURA Robotics。
NVIDIA、Google DeepMind 與 Disney Research 聚焦於物理學
NVIDIA 宣布與 Google DeepMind 及 Disney Research 合作開發的開源物理引擎 Newton，可以讓機器人學習如何更高精準度處理複雜任務。
Newton 採用 NVIDIA Warp 框架開發，將針對機器人學習進行最佳化，並且相容於 Google DeepMind 的 MuJoCo 和 NVIDIA Isaac Lab 等模擬框架。這三家公司還計畫讓 Newton 能夠使用迪士尼的物理引擎。
Google DeepMind 與 NVIDIA 正在合作開發 MuJoCo-Warp，預計可以將機器人機器學習工作負載加速 70 倍以上，並且將透過 Google DeepMind 的 MJX 開源函式庫及 Newton 提供給開發人員使用。
Disney Research 將成為首批使用 Newton 推動開發該單位機器人角色平台的公司之一，這個平台將用於驅動下一代娛樂用途機器人，例如於黃仁勳的 GTC 主題演講中與他一同登台、以《星際大戰》為靈感所開發出栩栩如生的 BDX 機器人。
華特迪士尼幻想工程研發部門資深副總裁 Kyle Laughlin 表示：「BDX 機器人只是一個開始。迪士尼致力於以世界前所未見的方式讓更多角色變得更加逼真寫實，而這次與 Disney Research、NVIDIA 和 Google DeepMind 合作，正是這個願景的重點。這次合作將讓迪士尼創造出比過去更加生動迷人的新一代機器人角色，並且以只有迪士尼才能做到的方式與賓客產生聯繫。」
NVIDIA 與 Disney Research 及 Intrinsic 共同宣布展開更多合作，為機器人資料工作流程構建 OpenUSD 管道和最佳做法。
用更多資料推動機器人後期訓練
大型、多樣化、高品質的資料集對開發機器人來說十分重要，然而獲得這些資料的成本卻不低。對於人形機器人而言，真人示範資料受限於一個人一天只有 24 個小時的活動作息。
今天發表用於產生合成操控動作的 NVIDIA Isaac GR00T Blueprint，就有助於解決這個難題。這個藍圖以 Omniverse 和 NVIDIA Cosmos Transfer 世界基礎模型為基礎，讓開發人員只要投入少數的真人示範資料，就能為操控任務產生海量合成動作資料。
NVIDIA 使用這個藍圖的第一批組件，在短短 11 個小時裡便產生出 78 萬個合成軌跡，這相當於 6500 個小時或連續 9 個月的真人示範資料。NVIDIA 接著將合成資料加上真實資料，相較於只使用真實資料，GR00T N1 的效能提高了 40%。
NVIDIA 將發布 GR00T N1 資料集，作為更大的開源實體 AI 資料集的一部分，以進一步為開發者社群提供寶貴的訓練資料。這份資料集也在 GTC 大會上公布，目前可在 Hugging Face 上取得。
上市時程
NVIDIA GR00T N1 訓練資料和任務評估情境現在可從 Hugging Face 及 GitHub 下載。用於產生合成操作動作的 NVIDIA Isaac GR00T Blueprint，現在同樣能夠在 build.nvidia.com 上以互動展示的形式提供，或是從 GitHub 下載。
同樣今日在 GTC 大會發表的 NVIDIA DGX Spark 個人 AI 超級電腦，為開發人員提供一站式系統，可擴充 GR00T N1 的功能以用於新的機器人、任務和環境，無需自行撰寫大量程式。
Newton 物理引擎預計將於今年稍後推出。
如要瞭解更多資訊，歡迎觀賞 NVIDIA GTC 主題演講，並報名參加這些重要的人形機器人開發者日會議：
- 人形機器人製造入門，深入探討 NVIDIA Isaac GR00T。
- 深入瞭解迪士尼的機器人角色平台，瞭解 Disney Research 如何利用 BDX 機器人重新定義娛樂用途機器人技術。
- 推出 Mujoco-Warp 和 Newton：Google DeepMind 與 NVIDIA 如何助力開發機器人開發以更深入研究這些新技術，還有 Google 如何部署 AI 模型來訓練 AI 支援的人形機器人執行現實世界的任務。
