NVIDIA发布开放世界模型Cosmos 3,推动物理AI专门化落地

2026/08/06 21:00阅读量 2

NVIDIA推出开放世界模型系列Cosmos 3,以单一模型族覆盖视觉理解、世界生成与动作预测,并在多项基准中排名第一。该系列基于开放许可,搭配Omniverse与OpenUSD生态,正被机器人、自动驾驶和视觉AI企业广泛采用。

事件概述

NVIDIA于2026年7月与200多家公司及机构签署公开信,主张AI领导力取决于开放生态能否渗透至每个行业,而非单一前沿模型。在此背景下,开放世界模型成为物理AI发展的关键:物理AI不仅需要识别外观,还必须理解物理环境、预测后果,并根据场景生成合理行动。

Cosmos 3核心信息

NVIDIA Cosmos 3是基于混合Transformer架构的开放世界基础模型系列,将视觉推理、世界生成和动作预测统一到一个模型族中,开发者无需为每项能力分别维护模型。

  • Cosmos 3 Super(64B):用于高保真世界建模。
  • Cosmos 3 Nano(16B):面向高效推理与后训练。
  • Cosmos 3 Edge(4B):支持设备端视觉推理和机器人策略部署,可运行于NVIDIA RTX GPU、DGX系统及Jetson Thor平台。

模型权重以Linux基金会OpenMDW 1.1许可发布,允许团队基于自有数据和硬件进行后训练。基准测试方面,Cosmos 3在Artificial Analysis开放权重文生图/图生视频、PAI-Bench世界生成、Physics-IQ图生视频、RoboLab机器人策略以及VANTAGE-Bench视觉理解等榜单中均排名第一。

配套生态:Omniverse与OpenUSD

Omniverse库与OpenUSD提供构建仿真环境的能力,支持物理AI团队在真实部署前进行训练、测试和验证,并可减少因资产、传感器配置或环境条件变化而导致的重复工作。

行业采用现状

采用Cosmos 3的企业包括:

  • 机器人:Doosan Robotics、LG Electronics、Samsung Electronics、Skild AI。
  • 自动驾驶:理想汽车(Li Auto)、小米(Xiaomi)、Afari。
  • 视觉AI:Centific、Fogsphere、Linker Vision、Milestone Systems、Yuan。

此外,NVIDIA Cosmos Coalition已扩展至日本,当地机器人及制造业企业计划为工厂、物流、农业、建筑、医疗和交通领域开发开放世界模型。

准备好启动您的定制项目了吗?

现在咨询,即可获得免费的业务梳理与技术架构建议方案。