NVIDIA Isaac ROS 5.0 发布：引入 AI Agent 能力，加速开源机器人开发

事件概述

NVIDIA 于 9 月 22 日在加拿大多伦多举行的 ROSCon 大会上发布了 Isaac ROS 5.0。此次更新旨在通过引入 AI Agent 能力和扩展开源物理 AI 库，帮助开发者更高效地构建、定制和部署具备感知、推理和行动能力的复杂机器人应用。Isaac ROS 是基于 ROS 的 GPU 加速软件包集合，目前服务于近 130 万 ROS 用户。

核心信息

1. 引入 AI Agent 工作流与标准化接口

• AI Agent 集成：Isaac ROS 5.0 引入了面向 AI Agent 的工作流和技能（Skills），使 AI 能够协助开发者完成重复性任务、导航代码库并快速生成应用。Agent-ready 的文档降低了 AI 理解工具链的门槛。
• ROS Lyrical 支持：新增对 ROS Lyrical 和 Ubuntu 24.04 的支持。NVIDIA 与开源机器人联盟（OSR Alliance）合作，向 ROS Lyrical 贡献了标准数据处理接口，利用 CUDA 实现跨硬件（包括 GPU）的高效数据加速。
• 专用 Skills 增强：
  • FoundationStereo 微调 Skill：允许 AI Agent 根据特定摄像头和环境调整立体视觉模型，提升感知精度。
  • FoundationPose 推理库：作为物体姿态估计和跟踪的基础模型，其推理速度提升至原来的 5.5 倍。
  • 抓取与放置（Pick and Place）：将检测、深度估计和姿态输出整合为独立的 Agent-ready Skill，提高开发灵活性。

2. 生态系统合作与应用落地
多个合作伙伴已基于 Isaac ROS 5.0 推出解决方案或优化现有产品：

• RealSense (AgenticROS)：连接 Isaac ROS 与 NVIDIA Nemotron 开放模型及 NemoClaw 蓝图，使 AI Agent 能与 ROS 机器人交互；同时优化了 D585 Pro 等 3D 立体深度相机及针对 Jetson Thor 的 SDK。
• Intrinsic (Open Machine Tending Solution)：其开源工业机器人套件内置 NVIDIA FoundationPose 支持，实现开箱即用的物体注册、跟踪和姿态估计，减少了对刚性夹具的需求。
• Seeed Studio (reBot Arm)：结合 NVIDIA Jetson Thor，实现了加速感知、空间理解和运动规划，支持对象定位和自主抓取。
• Magna：使用 Isaac ROS 进行模块化 GPU 加速感知和数据收集，并结合 Isaac Sim 进行硬件在环测试，加速智能制造部署。
• Flexiv (Rizon 4)：将 Isaac ROS 集成至自适应机器人，打通从 Isaac Sim 仿真测试到实体机器人部署的路径，应用于汽车工厂焊接场景。
• Ekumen：利用 GPU 加速的 isaac_ros_cumotion 包改进 Nav2 栈，实现精确对接、3D 障碍物检测和实时运动规划，路径规划耗时缩短至 2-5 毫秒。
• Ouster (Stereolabs ZED)：集成 ZED 立体相机，提供 GPU 加速的实时物体检测、建图和导航能力。

3. 边缘计算平台支持

• Jetson 系列全覆盖：Isaac ROS 5.0 支持从入门级的 NVIDIA Jetson Orin Nano 到高性能的 Jetson Thor 设备，确保物理 AI 堆栈在边缘端的实时性能。
• 端到端部署：该平台整合了 ROS、加速感知/导航、AI 模型及应用逻辑，支持从开发到部署的全流程，满足日益复杂的机器人负载需求。