互联网

NVIDIA发布Isaac ROS 5.0,推动智能代理式开源机器人开发

来源:NVIDIA Blog    作者:      2026年09月28日 13:47

导语:NVIDIA发布Isaac ROS 5.0,为ROS机器人开发生态加入AI代理能力,并扩展开源物理AI库及NVIDIA Jetson平台部署支持。

为了构建和部署能够在动态环境中感知、推理和行动的复杂机器人应用,开发者需要新的物理AI模型和工具。

ROS是一套开放框架,由Open Robotics发起,用于帮助人们构建机器人。NVIDIA Isaac ROS 5.0是一组基于ROS构建的GPU加速软件包,于加拿大多伦多举行的ROSCon大会期间发布。该版本旨在帮助人类和AI代理共同构建机器人。

新版本引入了智能代理式工作流和平台支持,帮助开发者更快地构建、定制和部署机器人应用。

ROS为现代机器人开发提供了重要的开源基础,为开发者构建和连接机器人应用提供通用工具、库和标准。

NVIDIA Isaac ROS将NVIDIA加速计算、物理AI模型和面向生产环境的库带给近130万名ROS用户,帮助开发者利用免费、熟悉且开源的工具构建高性能机器人应用。

将AI代理引入机器人开发

AI代理正在改变软件构建方式,帮助开发者自动化重复任务、浏览复杂代码库,并更快地将想法转化为可运行的应用。Isaac ROS 5.0将这些能力引入机器人开发。

Isaac ROS 5.0支持ROS Lyrical和Ubuntu 24.04,为开发者采用最新ROS平台提供了路径,同时继续利用NVIDIA加速计算能力处理高负载机器人工作。

NVIDIA与Open Source Robotics Alliance合作,为ROS Lyrical贡献了一套标准数据处理接口,帮助机器人软件在包括GPU在内的不同计算硬件之间高效运行。

这套接口面向整个ROS社区,为加速高负载机器人应用提供一致方式,CUDA则提供了GPU加速的实际示例。

新的NVIDIA Isaac技能用于设置和操作机器人,可提供开发者和AI代理能够复用的工作流,以完成机器人开发任务。面向代理的文档也让AI代理更容易理解Isaac ROS的工具和工作流程,从而更快地将开发者意图转化为可运行的应用。

新的FoundationStereo微调技能可以让AI代理帮助开发者根据摄像头、环境和机器人应用调整立体视觉模型,使开发者能够针对特定传感器配置获得更准确的感知效果。

FoundationPose现在提供了面向代理的推理库,使机器人能够以最高快5.5倍的速度感知和跟踪物体的位置与方向。

此外,抓取与放置这一连接检测、深度估计和姿态输出的常见工作流程,现在也以独立的面向代理技能形式提供,为机器人开发者提供超出Isaac ROS本身的更多灵活性。

加速开源机器人生态

AgenticROS是一个由三维感知技术公司RealSense支持的开源项目。它将Isaac ROS与NVIDIA Nemotron开源模型和NVIDIA NemoClaw蓝图连接起来,使AI代理能够与基于ROS的机器人交互。

RealSense还在优化其最新的原生AI三维立体深度摄像头,包括RealSense D585 Pro,以及面向Isaac ROS和NVIDIA Jetson Thor边缘AI平台的开源软件开发套件,帮助开发者构建感知、导航和操作应用。

Intrinsic的Open Machine Tending Solution是一款用于数控机床上下料的参考应用,属于新发布的Intrinsic Core。后者是一套开源的预配置运行时服务与能力组件,旨在加速工业机器人应用开发。

该解决方案内置对NVIDIA FoundationPose的兼容能力,可以直接实现物体注册、跟踪和姿态估计。借助FoundationPose感知流程,机器人能够动态检测和处理零部件,从而减少对刚性、昂贵的实体夹具和专用系统集成的需求。

Seeed Studio正在将NVIDIA Isaac ROS与reBot Arm结合使用,通过NVIDIA Jetson Thor实现加速感知、空间理解和运动规划。

Magna正在将NVIDIA Isaac ROS用作机器人感知、同步数据采集和NVIDIA Isaac GR00T模型部署的模块化GPU加速基础,并结合Isaac Sim硬件在环测试,将智能自动化从研究环境引入真实制造和移动出行场景。

Prefix.dev的Pixi软件包管理工具让机器人开发环境更容易实现可复现。它将ROS与NVIDIA CUDA平台结合,帮助开发者更轻松地设置和共享加速机器人工作流。

作为Isaac ROS合作伙伴,Foxglove通过其网页和桌面工具帮助开发者可视化和调试实时ROS应用。这些工具已集成到Isaac ROS教程中,并支持三维主题、nvblox网格和rosbag等数据。

Flexiv正在将Isaac ROS集成到其Rizon 4自适应机器人中,为开发者提供NVIDIA加速的机器人能力,并提供从NVIDIA Isaac Sim应用测试到实体机器人部署的简化路径。

Ekumen正在现有ROS和Nav2软件栈中使用GPU加速的Isaac ROS软件包,以提升精确对接、三维障碍物检测、视觉定位和实时运动规划能力,并在Isaac Sim中验证每项应用。

Ekumen使用Isaac ROS的cuMotion模块,在GPU上为仓储机械臂规划无碰撞路径,耗时约2至5毫秒。

Ouster将其Stereolabs ZED立体摄像头与NVIDIA Isaac ROS集成,为机器人应用提供GPU加速的感知能力。这一集成简化了实时物体检测、建图和导航开发,同时保持与ROS生态的互操作性。

将完整的物理AI技术栈带到机器人上

开发者和AI代理构建的应用最终需要在机器人上运行。

NVIDIA Jetson是一套可扩展计算平台,用于在边缘侧以实时性能运行物理AI技术栈,将ROS、加速感知与导航、AI模型和机器人应用逻辑结合在一起。

Isaac ROS 5.0支持从入门级NVIDIA Jetson Orin Nano到高性能Jetson Thor设备的可扩展计算,为机器人工作负载不断复杂化时提供从开发到部署的路径。

Mentee Robotics将NVIDIA Isaac ROS作为其MenteeBot人形机器人的感知和AI基础,使机器人能够实时理解视觉信息并执行学习到的行为。

Universal Robots已将NVIDIA Isaac ROS集成到其AI Accelerator软件开发套件中,帮助系统集成商更快部署先进的感知和运动能力。该方案由边缘侧的NVIDIA Jetson提供支持,使机器人能够适应位置不够精确的零部件,减少对昂贵夹具的依赖。

ROBOTIS正在将Isaac ROS集成到其AI Worker机器人中。该机器人利用GPU加速的物体感知能力,支持抓取、放置和对齐等视觉引导操作任务。

FieldAI的机器人基础模型可以完全在机器人本地运行,不依赖云连接。该公司正在Jetson设备上集成Isaac ROS,以提高机器人本地AI技术栈的效率。

Noble Machines正在Jetson上使用NVIDIA Isaac ROS,加速通用机器人在工业应用中的开发。

NVIDIA表示,通过结合开放机器人生态、加速计算和新的代理式开发工作流,Isaac ROS 5.0帮助开发者同时应对物理AI的两个方面:构建能力更强的机器人应用,并让这些应用能够高效地在现实物理世界中运行。

(文章为作者独立观点,不代表艾瑞网立场)
  • 合作伙伴

  • 官方微信
    官方微信

    新浪微博
    邮件订阅
    第一时间获取最新行业数据、研究成果、产业报告、活动峰会等信息。
     关于艾瑞| 业务体系| 加入艾瑞| 服务声明| 信息反馈| 联系我们| 合作伙伴| 友情链接

Copyright© 沪公网安备 31010402000581号沪ICP备15021772号-10

扫一扫,或长按识别二维码

关注艾瑞网官方微信公众号