英伟达发布Cosmos 3开放权重模型，支持交互式世界模拟

近日，英伟达宣布扩充Cosmos 3世界模型开发平台，新增四个基于Cosmos 3 Nano的开放权重检查点，每个均拥有160亿可训练参数，并采用OpenMDW 1.1许可，支持商用与非商用。四款模型面向交互世界模拟与多传感器多视角驾驶场景，覆盖机器人操控、自动驾驶数据生成和闭环仿真。其中，Transfer-Auto可离线生成同步多相机视频与LiDAR数据，通过世界场景图、文本提示和高清地图控制调节场景结构、交通运动与外观；Sim-Auto是在其基础上蒸馏出的流式变体，能以更少去噪步数持续输出同步相机与LiDAR观测，适合长程交互闭环。Sim-Transfer则把物理仿真器的空间控制转换为机器人策略可消费的彩色图像，同时保留物理与真实状态由仿真器处理。Sim-Bimanual根据双臂机器人动作直接预测环境变化，支持YAM、AgiBot等本体，并允许视角变化与操作在同一控制序列中切换。平台采用混合Transformer骨干，将文本处理与视觉生成通过注意力连接，并以压缩视频潜变量、滚动历史和键值缓存实现分段流式生成。英伟达还开放后训练配方，供开发者基于自有相机布局、LiDAR配置和环境进行适配。此举有望为自动驾驶、具身智能与模拟训练提供开放基座，但模型在策略学习评估中的忠实度与边界仍需继续验证。