NVIDIA发布开放世界模型Cosmos 3,推动物理AI专门化落地
2026/08/06 21:00阅读量 2
NVIDIA推出开放世界模型系列Cosmos 3,以单一模型族覆盖视觉理解、世界生成与动作预测,并在多项基准中排名第一。该系列基于开放许可,搭配Omniverse与OpenUSD生态,正被机器人、自动驾驶和视觉AI企业广泛采用。
事件概述
NVIDIA于2026年7月与200多家公司及机构签署公开信,主张AI领导力取决于开放生态能否渗透至每个行业,而非单一前沿模型。在此背景下,开放世界模型成为物理AI发展的关键:物理AI不仅需要识别外观,还必须理解物理环境、预测后果,并根据场景生成合理行动。
Cosmos 3核心信息
NVIDIA Cosmos 3是基于混合Transformer架构的开放世界基础模型系列,将视觉推理、世界生成和动作预测统一到一个模型族中,开发者无需为每项能力分别维护模型。
- Cosmos 3 Super(64B):用于高保真世界建模。
- Cosmos 3 Nano(16B):面向高效推理与后训练。
- Cosmos 3 Edge(4B):支持设备端视觉推理和机器人策略部署,可运行于NVIDIA RTX GPU、DGX系统及Jetson Thor平台。
模型权重以Linux基金会OpenMDW 1.1许可发布,允许团队基于自有数据和硬件进行后训练。基准测试方面,Cosmos 3在Artificial Analysis开放权重文生图/图生视频、PAI-Bench世界生成、Physics-IQ图生视频、RoboLab机器人策略以及VANTAGE-Bench视觉理解等榜单中均排名第一。
配套生态:Omniverse与OpenUSD
Omniverse库与OpenUSD提供构建仿真环境的能力,支持物理AI团队在真实部署前进行训练、测试和验证,并可减少因资产、传感器配置或环境条件变化而导致的重复工作。
行业采用现状
采用Cosmos 3的企业包括:
- 机器人:Doosan Robotics、LG Electronics、Samsung Electronics、Skild AI。
- 自动驾驶:理想汽车(Li Auto)、小米(Xiaomi)、Afari。
- 视觉AI:Centific、Fogsphere、Linker Vision、Milestone Systems、Yuan。
此外,NVIDIA Cosmos Coalition已扩展至日本,当地机器人及制造业企业计划为工厂、物流、农业、建筑、医疗和交通领域开发开放世界模型。
