英伟达开源物理引擎Newton,加速机器人研发
在2024年9月27日至10月2日于韩国首尔举行的机器人学习大会(CoRL)上,英伟达重磅发布多项开源技术,全面加速物理AI与人形机器人研发进程。这些成果涵盖开源物理引擎、推理模型、仿真框架及全新AI基础设施,为全球开发者和科研机构提供一体化机器人开发平台。 首先,英伟达正式开源其物理引擎Newton,该引擎由英伟达、谷歌DeepMind与迪士尼研究院联合开发,基于NVIDIA Warp与OpenUSD构建,由Linux基金会管理,具备GPU加速能力。Newton专为复杂机器人动作仿真设计,支持在雪地、碎石路面等非结构化环境中进行高精度模拟,已获苏黎世联邦理工学院、北京大学、光轮智能、Style3D等机构采用,助力机器人从仿真环境安全迁移到现实世界。 其次,英伟达推出新一代开源机器人推理模型Isaac GR00T N1.6,集成其专为物理AI打造的推理视觉语言模型Cosmos Reason。该模型具备接近人类的常识理解与任务分解能力,可将模糊指令转化为可执行计划,实现移动与操作一体化控制。例如,机器人可自主推开重门或完成复杂抓取任务。该模型即将上线Hugging Face,配套的物理AI数据集下载量已超480万次,被Franka Robotics、LG电子、Figure AI、宇树科技等多家企业评估应用。 第三,英伟达发布全新Cosmos世界基础模型(WFM)更新版——Cosmos Predict 2.5,整合三款模型为单一高效系统,支持生成最长30秒的多视角视频,模型体积仅为前代的1/3.5,生成速度与质量显著提升。该模型可基于真实3D场景与空间控制输入(如深度图、分割图)生成逼真合成数据,大幅加速AI训练。 第四,NVIDIA Isaac Lab 2.3版本推出灵巧抓取工作流,通过自动化课程体系在仿真中训练多指机械臂,逐步提升难度。波士顿动力Atlas机器人已借助该系统显著提升抓取能力。为解决仿真评估碎片化问题,英伟达联合光轮智能推出开源评估框架Isaac Lab Arena,支持大规模、标准化的技能测试。 最后,英伟达发布全新AI基础设施:GB200 NVL72机架系统、RTX PRO服务器与Jetson Thor边缘计算平台,分别面向大规模训练、开发工作负载与机器人端实时推理。Meta、DeepMind、Figure AI、银河通用、宇树科技等均已采用。 目前,近半数CoRL论文引用英伟达技术,斯坦福、CMU、苏黎世联邦理工等顶尖机构正借助其平台推进机器人研究。英伟达正以开放生态推动机器人从“仿真学习”迈向“真实落地”,为通用人工智能时代的人形机器人发展奠定坚实基础。