英伟达发布全球首个开源人形机器人基础模型

卢鸰 2025-03-19 09:14

美国时间3月18日,英伟达(NVIDIA)宣布推出一系列全新技术,助力人形机器人开发。其中,包括全球首个开源且完全可定制的基础模型NVIDIA Isaac GR00T N1,该模型可赋能通用人形机器人实现推理及各项技能。

其他技术包括仿真框架和蓝图,如用于生成合成数据的NVIDIA Isaac GR00T Blueprint,以及和Google DeepMind及 Disney Research 共同开发的、专为机器人开发而构建的开源物理引擎 Newton。

已推出的GR00T N1是NVIDIA一系列可完全定制模型中的首个模型。NVIDIA将对这一系列模型进行预训练,并面向全球机器人开发者发布。对于受全球劳动力短缺困扰的行业而言(劳动力缺口预计超过 5000万),这一模型的推出将有助于加速这些行业的转型。

NVIDIA创始人兼CEO黄仁勋表示:“通用机器人时代已经到来,借助 NVIDIA Isaac GR00T N1以及新的数据生成和机器人学习框架,全球机器人开发者将开启AI时代的全新篇章。”

GR00T N1推动人形机器人开发者社区发展

受人类认知原理的启发,GR00T N1基础模型采用双系统架构。“系统1”是一个快速思考的动作模型,反映人类的本能反应或直觉。“系统2”是慢思考模型,用于进行经过深度思考的决策制定。

系统2由视觉语言模型提供支持,它会对所处环境和接收到的指令进行推理,从而规划行动。系统1随后将这些规划转化为精确、连续的机器人运动。系统1基于人类演示数据和 NVIDIA Omniverse™ 平台生成的海量合成数据进行训练。

GR00T N1可轻松适应并完成通用任务,如单手或双手抓取、移动物体,将物体从一只手臂转移到另一只手臂,或执行需要长语境和通用技能组合的多步骤任务。这些功能可应用于物品搬运、包装和检查等各种使用场景中。

开发者和研究人员可以使用真实数据或合成数据针对特定人形机器人或任务对 GR00T N1进行后训练。

在GTC主题演讲中,黄仁勋展示了1X的人形机器人自主执行室内清理任务的过程,该过程利用了基于GR00T N1的后训练策略。该款机器人的自主能力是 1X与NVIDIA AI训练协作的成果。

“人形机器人的未来开发重点在于适应能力和学习能力,”1X Technologies 首席执行官Bernt Børnich表示,“NVIDIA的GR00T N1模型在机器人推理和技能方面实现了重大突破。我们仅需最少量的后训练数据,就能在 NEO Gamma 上全面部署,这进一步推进了我们的使命——我们创造的机器人不是工具,而是伙伴,可以为人类提供有意义、有无限价值的帮助。”

全球其他优先使用GR00T N1 的领先机器人公司包括 Agility Robotics、波士顿动力、Mentee Robotics 和 NEURA Robotics。

三方共同开发开源物理引擎Newton

NVIDIA宣布与Google DeepMind和Disney Research合作,共同开发开源物理引擎Newton,可让机器人学习如何以更高的精度处理复杂任务。

Newton基于NVIDIA Warp 框架构建,将针对机器人学习进行优化,并与 Google DeepMind MuJoCo 和 NVIDIA Isaac™ Lab 等仿真框架兼容。此外,三家公司还计划让 Newton能够利用迪士尼的物理引擎。

Google DeepMind正在和NVIDIA合作开发MuJoCo-Warp,预计将机器人机器学习工作负载处理速度提升至70倍以上,并将通过Google DeepMind的MJX 开源库和Newton提供给开发者。

Disney Research将成为首批使用 Newton以推动其机器人角色平台发展的公司之一,该平台为下一代娱乐机器人提供支持,比如此次GTC主题演讲中和黄仁勋一起登台、以星球大战® 为灵感设计的富有表现力的 BDX 机器人,就是该平台的成果。

“BDX 机器人只是一个开始。我们致力于以前所未有的方式,为更多角色赋予生命,而与 Disney Research、NVIDIA 和 Google DeepMind 的合作是实现这一愿景的关键。”Walt Disney 想象工程研发部门高级副总裁 Kyle Laughlin说。“此次合作将使我们能够创造出比以往更具表现力、更具吸引力的新一代机器人角色,并以迪士尼独有的方式与我们的游客建立联系。”

NVIDIA 还将和Disney Research及Intrinsic进一步合作,为机器人数据流构建 OpenUSD 管线和最佳实践。

相关推荐
打开APP看全部推荐