跳到正文
NVIDIA:Newsroom·· 2 小时前精选AI 评分66

NVIDIA 在 GTC Berlin 扩展 Isaac 开放机器人平台,Agile Robots 发布基于 Isaac GR00T 的 Agile ONE SN 参考人形

NVIDIA Advances Isaac Platform for General-Purpose Robotics With New Reference Humanoid, Frameworks, Simulation Pipelines and Data

AI 导读

NVIDIA 在 GTC Berlin 宣布大幅扩展 Isaac 开放机器人开发平台,新增参考人形、数据集与运行时,并更新机器人学习框架。

推荐理由

官方在 GTC Berlin 宣布 Isaac 平台扩展,给出参考人形、数据集与开源工作流的具体构成,可了解机器人开发全栈现状。

正文 · AI 翻译

新闻摘要: 

  • Agile Robots 发布 Agile ONE SN,这是一个基于 NVIDIA Isaac GR00T 和 NVIDIA Jetson Thor 构建的人形参考平台,并计划集成 NVIDIA Halos 安全栈,为开发者和研究人员提供一个用于前沿人形机器人开发与验证的完整平台。
  • NVIDIA Isaac 平台新增 Isaac OS 运行时、用于机器人学习的 Isaac Lab 3.0,以及开源参考工作流,将 ChatGPT Astra 与 NVIDIA Isaac 和 Cosmos 在 NVIDIA DGX Station 上结合,以加速机器人数据生成、训练和评估。
  • 欧洲机器人生态系统,包括 ABB Robotics、Flexion、Hexagon Robotics、Humanoid、KUKA、NEURA Robotics、Sereact 和 Universal Robots 等领军企业,正在基于 NVIDIA 的开放机器人平台构建,以推进自主机器人系统。 
     

GTC Berlin——NVIDIA 今日宣布大幅扩展 NVIDIA Isaac™ 开放机器人开发平台,新增人形参考机器人、数据集和运行时,并对其机器人学习框架进行了更新。

这些技术共同为开发者提供了一条从数据到部署的集成路径,以更快地将通用机器人带入现实世界。

“通用机器人技术正以非凡的速度发展——机器人的 ChatGPT 时刻正快速临近,”NVIDIA 创始人兼首席执行官黄仁勋表示。“借助 NVIDIA Isaac 这一全栈开放机器人平台,我们正在为开发者提供模型、数据、仿真工具和计算系统,将物理 AI 带入全球最大的行业。”

Agile ONE SN——面向研究的前沿人形参考平台
Agile Robots 发布了 Agile ONE SN,这是一款全栈参考人形机器人,预配置了 NVIDIA Isaac GR00T,并由 NVIDIA Jetson Thor™ 边缘 AI 平台提供动力。

机器人研究人员和开发者常常难以集成将机器人技能从开发推进到物理世界所需的独立仿真、训练和部署工具。Agile ONE SN 将这些工具和工作流统一到一个平台上,将设置时间从数周缩短至数天。

Agile ONE SN 特点:

  • Agile ONE S 人形本体,高 1.40 米(4.59 英尺),重 40 千克(88 磅),具有 31 个自由度,每臂有效载荷 3 千克。
  • 双 WUJI Hand 2 五指手,每只手提供 20 个自由度、1kHz 力控和触觉感知,用于灵巧操作
  • NVIDIA Jetson Thor 板载计算,提供 2,070 FP4 teraflops 算力和 128GB 统一内存,用于板载推理和实时控制。
  • 多模态传感,包括头部和腕部摄像头、激光雷达传感器和惯性测量单元,帮助机器人感知周围环境并与之交互。
  • NVIDIA Isaac GR00T 平台,包括 GR00T 基础模型、从数据采集到部署的完整工作流,以及用于协调运动的全身控制。
  • 安全能力,计划将机器人本体安全协议与面向机器人技术的 NVIDIA Halos 全栈安全系统集成。
     

“人形机器人的突破在于规模化实用性:一台可适应的机器能够学习多种技能,并在为人类建造的环境中工作,”Agile Robots 创始人兼首席执行官陈兆鹏表示。“今天,Agile Robots 推出了 Agile ONE SN,这是一款全栈、开放的参考人形机器人,基于 NVIDIA Isaac GR00T 构建,由 Jetson Thor 提供动力,为开发者提供了一个现成系统,用于创建、训练和验证让人形机器人投入工作所需的能力。”

Agile ONE SN 计划于 2027 年初上市,旨在推进前沿人形机器人的研究与开发,并已引起斯坦福大学和苏黎世联邦理工学院等领先机构的兴趣。

全新 NVIDIA 技术加速机器人学习——从数据到部署
全新 NVIDIA 技术帮助开发者生成训练数据、扩展机器人学习、构建仿真环境并部署机器人应用,从而缩短解决方案的交付时间。

  • SimReady Central Library提供超过 2,000 个仿真就绪的机器人和工厂资产,而 Human 1M Dataset 则包含多样化的人类活动、同步三视角视频和 3D 手部追踪。两者均可在 Hugging Face 上获取,完整的 Human 1M Dataset 可供 Cosmos Coalition 合作伙伴访问。
  • NVIDIA Isaac Lab 3.0 现已正式发布,提供开源、面向智能体的学习框架,可使用多 GPU 工作流以及包括 Newton 和 NVIDIA PhysX™ 在内的物理引擎,从桌面到数据中心训练和优化机器人策略。
  • NVIDIA Isaac OS 是一个基于 NVIDIA Holoscan 构建的开源运行时框架,连接 AI、传感器、控制器和机器人硬件,实现从仿真到物理机器人的确定性实时性能。
  • NVIDIA 正在发布三个面向 NVIDIA DGX Station™ 的开源参考工作流,帮助开发者通过强化学习优化 GR00T 1.7 模型,在 NVIDIA Isaac Lab 中训练 灵巧操作技能,并使用 ChatGPT Astra 对 NVIDIA Cosmos™ 世界模型进行后训练以生成合成数据。
  • NVIDIA Halos 提供基于 NVIDIA IGX Thor™ 构建的全栈安全平台,帮助自动驾驶汽车和机器人从开发阶段迈向更安全的规模化实际部署。
     

SimReady Central Library 在 Hugging Face 上包含来自 Comau、FANUC、ForgeCAD、Franka Robotics、LG Electronics、Palatial、Robotiq、Standard Bots、Universal Robots 和 Vertiv 的仿真就绪资产。

NVIDIA 在 DGX Station 上运行的开源机器人学习参考工作流将获得来自 1X、Agile Robots、Humanoid、Maven Robotics、Mentee、MicroAGI、Rhoda、Sereact 和 Skild AI 的解决方案支持。

机器人合作伙伴正在将 NVIDIA Halos 集成到其安全架构中,包括 Agile Robots、Agility、Dexory、FORT Robotics 和 KION,用于仓库机器人安全。SICK 正在评估 Halos,以推进工业机器人的动态安全,帮助其应对固定区域之外不断变化的条件。

Advantech 与 NexCOBOT 正在开发基于 NVIDIA IGX 的工业计算平台,而 Reynolds & Moore、Accenture 和 TÜV SÜD 正在加速认证流程,以推动工业物理 AI 的安全部署。

欧洲机器人领导者基于 NVIDIA 开放技术进行构建
ABB Robotics 正在将 NVIDIA Omniverse™ 库与 RobotStudio HyperReality 集成,以便在安装前对各类行业的机器人系统进行仿真和虚拟调试。KUKA Group 正在其 Visual Components FactoryLens 中使用 Omniverse 库,为工厂仿真工作流添加实时渲染。Sereact 正在使用 Isaac GR00T 与 Cosmos Transfer 训练和后训练其用于货物搬运的 Cortex 平台,运行在 Universal Robots 工业机械臂上。

利用 Jetson Thor、Holoscan Sensor Bridge、Halos 和 NVIDIA Isaac OS,Humanoid 正在工业试点前开发和验证机器人行为,Hexagon Robotics 正在构建 AEON 感知能力,包括远程操作视频、定位、建图和物体姿态检测,而 Bear Robotics 正在加速 KR1 的感知和模型执行,同时通过 Kino-2 为仓库、退货和工业工作流后训练 Isaac GR00T。

Toyota Material Handling Europe 和 SoftServe 使用 Omniverse 与 NVIDIA Isaac Sim™ 框架开发自主物料搬运解决方案,将部署时间缩短了多达 50%。Idealworks 正在使用 NVIDIA 开放模型和 Jetson 为工厂中的自主移动机器人开发记忆能力。Analog Devices Inc. (ADI) 正在使用 NVIDIA Jetson AGX Orin™ 和 cuVSLAM 库构建自主移动机器人。

Hugging Face 与 Pollen Robotics 正在使用 NVIDIA Isaac Lab、Isaac Sim 和 Newton 构建 Microduck,这是一款小型开源机器人,旨在帮助开发者和学生训练、修改和分享新的物理行为。Franka Robotics 正在使用 NVIDIA NIM™ 微服务和 Isaac Sim,将自然语言请求转化为其 Franka FR3 Duo 机器人系统上的动作。Bellboy 正在使用 Jetson 和 GR00T 为其首款机器人队友 Billie 提供动力,该机器人基于 Bellboy 的物理 AI 基础设施构建,已在 Marriott、Hilton、IHG 和 OYO 运营的酒店中部署。

Flexion 正在使用 Isaac Lab 和 Newton 扩展 Reflect 的学习能力,Reflect 是其统一机器人智能模型,结合推理和全身运动,以在机器人身体上实现复杂操作。Schaeffler 正在贡献其执行器技术,作为 Newton 的独家基础组件,帮助借助 NVIDIA Isaac Lab 和 Isaac Sim 加速人形机器人开发。

NEURA Robotics 正在使用 Isaac Sim 和 Isaac Lab 生成合成训练数据,并在仿真中为 Neuron AI 训练机器人技能,Neuron AI 是其多模态基础模型。

观看 GTC Berlin 主题演讲 由 Huang 发表,并 探索会议。

来源:NVIDIA:Newsroom · nvidianews.nvidia.com