英伟达Project GR00T和Jetson Thor加速人形机器人技术发展

Gábor Bíró 2024年3月26日
4 阅读时间

人工智能计算领域的领导者英伟达(NVIDIA)宣布Project GR00T,正大幅加强其在人形机器人领域的投入。该计划旨在创建一个通用基础模型,专门为人形机器人设计。结合NVIDIA Isaac机器人平台的重大更新和新的计算平台,该项目标志着英伟达正大力推动未来更强大、更智能、更通用的人形机器人的发展。但这在技术上意味着什么?这是一场真正的变革,还是一种战略营销手段?

英伟达Project GR00T和Jetson Thor加速人形机器人技术发展
来源: Own

核心组件:GR00T模型和Jetson Thor

该计划的核心是 GR00T (通用机器人00技术) 模型。与传统的机器人编程或特定任务的AI模型不同,基础模型在大量多样化数据(可能包括模拟、视频演示和远程操作数据)上进行训练,以获得广泛的通用技能。对于GR00T而言,这意味着使机器人能够理解自然语言命令,观察和模仿人类动作(学习复杂的协调性和灵活性),并更有效、更安全地与不可预测的现实世界互动。目标是提供一个基础智能,供机器人公司根据其特定硬件和目标应用进行微调。

要在机器人上直接运行这些先进模型,需要巨大的计算能力。为了解决这个问题,NVIDIA推出了 Jetson Thor 计算机,专为人形机器人设计。Jetson Thor 基于 NVIDIA 强大的 Thor 系统级芯片 (SoC) 构建,该芯片最初是为要求严苛的汽车应用而开发的。Jetson Thor 旨在处理人形机器人操作所需的复杂实时处理。这包括处理来自众多传感器(摄像头、激光雷达、力传感器、关节编码器)的数据,运行复杂的 AI 模型(如 GR00T)进行感知和决策,以及执行复杂的运动规划和控制算法——所有这些都在移动机器人的功率和尺寸限制之内。

生态系统:Isaac 平台更新

NVIDIA 明白,仅有硬件和基础模型是不够的。Project GR00T 与 NVIDIA Isaac™ 机器人平台 的重大升级深度集成,为开发、训练和部署这些先进机器人提供了必要的工具:

  • Isaac Sim: 增强的模拟能力至关重要。在现实世界中训练机器人,尤其是人形机器人,速度慢、成本高且可能存在危险。Isaac Sim 允许开发人员创建逼真的虚拟环境,以大规模安全地训练 GR00T 和其他 AI 模型,生成大量的合成数据,并在物理部署之前测试机器人在无数场景下的行为。
  • Isaac Lab: Isaac Lab 专门用于强化学习 (RL),可能在 Isaac Sim 中提供专门的工具和环境,优化通过模拟中的试错来训练机器人。
  • OSMO: 一种新的计算编排服务。训练大型基础模型和运行数千个并行模拟需要在不同的计算资源(云、本地集群)上管理复杂的工作流程。OSMO 旨在简化此过程,高效扩展开发流程。
  • 生成式 AI 工具: 该平台不仅将生成式 AI 模型用于核心 GR00T 智能,还可能用于生成逼真的模拟、创建多样化的训练数据,并使机器人能够生成更自然和更符合上下文的运动序列。

这套全面的套件旨在为构建复杂机器人的公司提供端到端的解决方案,显著降低入门门槛并加速开发周期。

战略意义:炒作与现实

NVIDIA 进军人形机器人领域具有重要的战略意义。通过提供核心 AI 模型 (GR00T)、强大的车载计算机 (Jetson Thor) 以及开发/模拟工具 (Isaac),NVIDIA 将自己定位为新兴人形机器人产业的基础赋能平台提供商——类似于淘金热期间提供“镐和铲子”。与 Agility Robotics、Apptronik、Boston Dynamics、Figure AI、Sanctuary AI、Unitree Robotics 和 XPENG Robotics 等领先人形机器人公司(正如 NVIDIA 宣布的那样)的合作增加了可信度,并表明了广泛的行业兴趣。

这是一场有保证的革命吗? 潜力是巨大的。一个标准化、强大的平台可以极大地加速进步,使机器人公司能够专注于硬件创新和特定应用的特性,而不是重新发明 AI 轮子。然而,仍然存在重大挑战。人形机器人硬件(驱动、电源效率、稳健性、成本)仍在发展中。创建一个真正“通用”的 AI 模型,使其在复杂的现实世界中可靠且安全地运行,是一项巨大的任务,远远超出当前的能力。NVIDIA 也有明显的商业动机:AI 越复杂,训练和运行它们所需的 GPU 和计算平台就越强大(也越有利可图)。因此,虽然 GR00T 代表着一项认真且可能具有变革意义的努力,但它也是一项与 NVIDIA 核心业务战略交织在一起的长期押注。眼前的直接影响可能更多的是赋能研究人员和开发人员,而不是明天就部署大批能干的人形机器人。

结论:

NVIDIA 的 Project GR00T 和相关的 Jetson Thor 平台代表着对推进人形机器人技术的重大承诺。通过旨在提供基础 AI 模型以及必要的硬件和软件生态系统,NVIDIA 寻求加速更智能、更具适应性的机器人的开发。虽然通用人形机器人的愿景仍然遥远,但这项计划提供了强大的工具,可以大大缩短实现这一愿景的路径,巩固 NVIDIA 在具身人工智能未来中的核心作用。

Gábor Bíró 2024年3月26日