IoT Worlds
humanoid robots
人工智能

Nvidia 面向仿人机器人的新基础模型

仿人机器人正变得越来越实用。 在 GTC 开发者大会上,Nvidia 推出了 Project GR00T(读作地面机器人)。

它利用英伟达™(NVIDIA®)公司提供的 GPU 加速仿真来训练其仿人机器人,并通过少量的演示进行模仿学习,从而通过模仿获得技能。Isaac Lab提供强化学习,而OSMO 则作为计算协调服务,从视频数据中生成机器人动作。

什么是 GR00T 项目?

Nvidia 首席执行官黄仁勋在 2024 年 GPU 技术大会(GTC)的主题演讲中介绍了通用机器人 00 技术(GR00T),这是他们在机器人技术和 “具身人工智能 “方面的最新成果。 Nvidia 表示,GR00T 可以让机器人理解自然语言,同时通过观察他人执行特定动作来模仿动作–根据 Nvidia 的说法,这应该可以让机器人获得协调性、灵巧性和其他必要的技能,以适应真实世界的环境并与之互动。

Nvidia 在演讲中展示了多个由 GR00T 芯片驱动的仿人机器人,这些机器人来自Agility RoboticsApptronikFourier IntelligenceUnitree Robotics等公司,它们正在执行各种任务,旨在展示其作为学习设备的强大功能以及更安全的人机交互。

Nvidia 的 Jetson Thor 计算平台为这些演示提供了动力,该平台专为解决仿人机器人所需的复杂任务而设计。 该片上系统基于Nvidia 的 Blackwell 架构,可为仿人机器人提供高达 800 Teraflops 的人工智能性能,为其提供足够的处理能力来运行多模态生成模型和其他人工智能系统。

Nvidia 不仅发布了最新的计算机,还发布了一套用于仿人机器人的软件和硬件:Isaac ManipulatorIsaac Perceptor以及预训练模型、库和参考硬件将使开发人员能够创建更强大、更快速、更安全的机器人。

Nvidia 最近发布了 Isaac 机器人平台的升级版,它将使基于 GR00T 构建的仿人机器人能够使用生成式人工智能进行学习和适应。 该系统包括用于强化学习的 Isaac Lab、OSMO 计算协调服务和用于创建仿人机器人基础模型的工具;此外,Isaac Arms 可提高机器人手臂的性能,而 Isaac Perceptor 可处理多摄像头 3D 计算机视觉。

了解最佳人工智能课程,请点击此处!

GR00T 的目标是什么?

Nvidia 希望通过 “GR00T 项目“来提高仿人机器人的能力。”GR00T 项目“是其 “通用机器人 00 技术”(与漫威的邪恶太空树无关)的基础模型。 这种创新模式可帮助机器人理解自然语言,通过观察动作来模仿动作,并快速学习协调、灵巧和其他技能,这些技能对于在真实世界中进行导航、适应和互动至关重要。 首席执行官黄仁勋在 GTC 开发者大会的主题演讲中展示了这些优势,并演示了一些 GR00T 机器人完成通常会挑战其他机器人的任务。 在 GTC 的主题演讲中,首席执行官黄仁勋展示了这些机器人执行其他机器人技术难以完成的任务。

Nvidia Isaac 机器人平台为开发人员提供了设计、模拟和部署人工智能机器人的全方位工具包。 这包括 Isaac Lab 中的 GPU 加速强化学习;OSMO 计算协调服务管理真实和合成机器人开发工作流;以及名为 Isaac Manipulator 和 Isaac Perceptor 的预训练模型,它们分别提供更快的机械臂性能和增强的多摄像头 3D 计算机视觉。

Nvidia 提供自己的计算能力,将 Jetson Thor 作为人形计算机的首选,让 GR00T 栩栩如生。 Nvidia 在当面简报会上表示,Jetson Thor 配备了 Blackwell 图形架构和变压器引擎,能够提供 800 Teraflops 的 8 位人工智能性能,可以无缝运行仿真工作流和 GR00T 等生成式人工智能模型。

Nvidia 将其平台定位为仿人机器人的完美计算环境,并与Figure AI1X TechnologiesAgility Robotics合作,提供基于该平台的解决方案。 除了支持 GR00T 从 Apptronik 的阿波罗 使用 Nvidia 技术的机器人 Apollo 将通过快速观察人类演示来学习新任务,而不是单靠复杂的编程,这也是 Nvidia 的 “体现式人工智能 “战略的一部分,该战略旨在创造具有人工智能的强大计算机,使其能够感知、理解现实世界的环境并与之互动。

了解最佳人工智能课程,请点击此处!

GR00T 的技术是什么?

GR00T项目,即通常所说的 “通用机器人00技术”,将使机器人能够通过观察人类的动作来模仿人类的动作,从而向人类学习。 这样,机器人就能迅速获得协调性、灵巧性、适应性和其他必要的技能,以便在现实环境中航行,而无需经过多年的严格训练,也不用冒着被其他机器起义的风险。

Nvidia 首席执行官黄仁勋在 GTC 2024 主题演讲中展示了 GR00T 如何帮助仿人机器人变得更智能、功能更强大,并举例说明了采用该技术的仿人机器人通过观察人类的动作来学习如何移动头部和手臂,然后再自主复制这些动作。 根据 Nvidia 的说法,这种学习将使机器人系统功能更强、成本更低。

Nvidia 最近发布了 Jetson Thor,这是一款经过优化的片上系统,可满足基于 GR00T 的仿人机器人开发对性能、功耗和尺寸的要求。 该计算机采用英伟达™(NVIDIA®)公司的Blackwell架构图形处理器以及人工智能变压器引擎,可提供800 Teraflops的性能,使机器人开发人员的机器人设计过程更加轻松。

NVIDIA Isaac 是一个机器人平台,旨在为机器人体现提供端到端的开发和仿真生态系统,包括用于强化学习的 NVIDIA Isaac Lab 以及提供训练仿真和硬件在环验证服务的 OSMO 计算协调服务。 此外,Isaac 平台还增加了新模块,如提供快速机械臂性能的 Isaac Manipulator 以及提供多摄像头 3D 视觉功能的 Isaac Perceptor。

Nvidia 声称,其 GR00T 和 Isaac 平台将开创一个体现型人工智能时代,届时智能、自适应机器人将无处不在。 Nvidia 希望开发人员能够利用其软件、工具和硬件来创建适合各种用途的机器人–利用开源算法和 API,使针对特定机器人或任务的软件开发变得更加简单。

了解最佳人工智能课程,请点击此处!

GR00T 有何影响?

Nvidia 的 GR00T 项目在机器人技术和嵌入式人工智能(AI)领域脱颖而出。人工智能 作为多模态生成基础模型的大脑,机器人能够理解人类语言,并通过观察人类来模仿动作–快速学习协调、灵巧和其他必要技能,以适应现实生活环境并与之互动。 在 GTC 主题演讲中,首席执行官黄仁勋展示了由 GR00T 驱动的仿人机器人,并成功执行了各种任务。

Nvidia 设计了 Jetson Thor 片上系统,专门用于帮助利用 GR00T 构建仿人机器人。 其模块化架构可在提供安全、直观的人机交互的同时管理复杂性,并对性能、功耗和尺寸进行优化,同时拥有 800 Teraflops 的 8 位人工智能性能,足以运行 GR00T 等多模态生成模型。

Nvidia 还宣布更新 Isaac 平台,使人工智能机器人的设计和部署变得更容易,包括新模块,如 Manipulator 和 Perceptor(为机械臂和移动机器人提供最先进的灵巧性和模块化人工智能),以及 Isaac Lab(可在 GPU 加速的虚拟环境中实现快速并行仿真)。

Figure AIAgility RoboticsBoston DynamicsApptronikSanctuary AI已经与 Nvidia 合作,将其技术整合到自己的产品中。 Nvidia 将在本次展会上展示两个这样的合作伙伴关系;这些进展应能加快人工智能在现实工作环境中的部署,并让更多人有机会接触到人工智能。

您准备好拥有自己的人形机器人舰队了吗? 今天就联系我们吧!

Related Articles

WP Radio
WP Radio
OFFLINE LIVE