0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

NVIDIA发布人形机器人重磅更新!Isaac GR00T Blueprint厉害在哪?

Felix分析 来源:电子发烧友网 作者:吴子鹏 2025-01-08 18:14 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

电子发烧友网报道(文/吴子鹏)在备受瞩目的CES 2025上,NVIDIA在机器人领域宣布了重磅更新——Isaac GR00T Blueprint,帮助开发者更高效、高质量地打造人形机器人。同时,NVIDIA创始人兼CEO黄仁勋在CES 2025上还宣布了NVIDIA“人形机器人朋友圈”——NVIDIA将会在人形机器人领域和包括中国公司小鹏、宇树在内的科技公司开展合作,共同推动人形机器人产业发展。

Isaac GR00T Blueprint让模仿学习更高效

人形机器人是一个全球关注的科技热点,在中国市场,人形机器人是新质生产力的代表之一。统计数据显示,‌2023年全球人形机器人市场规模约为21.6亿美元,预计到2029年将达到324亿美元‌‌。到2035年,全球人形机器人的出货量可能超过100万台,达到140万台。

在人形机器人开发领域,NVIDIA Isaac机器人开发平台得到了很多开发者的认可,成为这些开发者开发人形机器人的得力帮手。NVIDIA Isaac是一个由NVIDIA加速库、应用框架和AI模型组成的AI机器人开发平台,可加速自主移动机器人 (AMR)、机械手和机械臂以及人形机器人等AI机器人的开发。

NVIDIA Isaac包含了一系列的AI机器人开发工具和开发示例,其中参考应用NVIDIA Isaac Sim允许开发者在基于物理的虚拟环境中设计、模拟、测试和训练基于AI的机器人和自主机器。NVIDIA Isaac Sim基于NVIDIA Omniverse 构建,支持开发者构建自己的自定义模拟器或将核心Isaac Sim技术集成到现有测试和验证管线中。

随着Isaac GR00T Blueprint发布,NVIDIA Isaac平台的性能得到了进一步强化,Blueprint可帮助开发者生成海量的合成运动数据,以便通过模仿学习来训练人形机器人。如下图所示,Isaac GR00T Blueprint通过GR00T-Teleop、GR00T-Mimic和GR00T-Gen工具流能够帮助开发者高效完成人形机器人的模仿学习,可以更好地融入人类世界。
Isaac GR00T Blueprint应用框图

模仿学习也被称为基于演示的学习(Learning By Demonstration),主要强调的是通过大量的参考数据,让人形机器人等机器可以与环境进行交互。一般而言,模仿学习主要包括行为克隆(Behavior Cloning)和逆向强化学习(Inverse Reinforcement Learning),无论是哪种技术路径,都需要大量的数据作为参考,然而在真实世界中收集这些广泛、高质量的数据集既繁琐又耗时,而且成本往往高得令人却步。

Isaac GR00T Blueprint解决了这一痛点,开发者只需少量人类示范,就能轻松生成海量的合成数据集。在这个应用框架下,GR00T-Teleop用于借助虚拟现实设备捕捉人类演示动作,并生成金标准;GR00T-Mimic用于将捕捉到的示范生成更大的合成运动数据集;GR00T-Gen用于通过域随机化和3D提升技术,指数级扩增这个数据集。

Isaac GR00T Blueprint融合了NVIDIA Cosmos

在Isaac GR00T Blueprint的GR00T-Gen工具流中,NVIDIA Omniverse和NVIDIA Cosmos是指数级扩增数据集的关键。NVIDIA Cosmos是NVIDIA在CES 2025上最新发布的“世界基础模型”,拥有一系列开放的预训练世界基础模型,专为生成具有物理感知的视频和物理AI开发所需的世界状态而设计。
NVIDIA Cosmos应用演示

黄仁勋表示:“与大型语言模型一样,世界基础模型是推进机器人和自动驾驶汽车(AV)开发的基础,但并非所有开发人员都有专业知识和资源来训练自己开发的方案。”“我们创建了Cosmos,以使物理AI更加普惠,并让每个开发人员都能接触到通用机器人技术。”

NVIDIA Cosmos是专为物理AI而构建的,据悉开发者可以基于NVIDIA Cosmos完成以下操作:
·视频搜索与理解:使开发者能够轻松从视频数据中找到特定的训练场景。例如,他们可以搜索描绘雪地道路状况或仓库拥堵情况的视频。
·基于物理仿真合成逼真数据:使用Cosmos模型在NVIDIA Omniverse平台上开发的3D场景中生成逼真的视频。
·物理AI模型的开发和评估:无论是在基础模型上构建自定义模型,还是测试其在特定模拟场景下的表现,都可以使用Cosmos进行强化学习以改进模型。
·预见和“多元宇宙”模拟:使用Cosmos和Omniverse生成AI模型可能出现的每一种可能结果,帮助其选择最佳和最准确的路径。

NVIDIA Cosmos的模型基于1800万亿个数据单元进行训练,其中包括200万小时的自动驾驶、机器人、无人机拍摄的视频以及合成数据。在人形机器人开发方面,NVIDIA Cosmos让数据稀缺性不再是人形机器人开发的关键挑战,开发者通过Cosmos上的文本、图像和视频到世界模型功能,就可以模拟各种逼真的任务场景,并完成人形机器人在这一场景下的训练学习。显然,NVIDIA Cosmos将显著缩短通用人形机器人的开发周期,让通用人形机器人早日普及。

NVIDIA已经宣布第一批采用NVIDIA Cosmos的生态伙伴,包括1X、Agile Robots、Agility、Figure AI、Foretellix、Fourier、Galbot、Hillbot、IntBot、Neura Robotics、Skild AI、Virtual Incision、Waabi和XPENG等人形机器人公司。

结语

Isaac GR00T Blueprint的推出解决了当前困扰人形机器人开发者的关键难题——如何获取海量数据完成人形机器人的模仿学习。通过整合GR00T-Teleop、GR00T-Mimic和GR00T-Gen工作流,Isaac GR00T Blueprint让开发者只需少量人类示范,就能轻松生成海量的合成数据集。在Isaac GR00T Blueprint应用框架下,最新发布的NVIDIA Cosmos则是数据指数级扩增的关键。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    NVIDIA 发布面向学术研究的 NVIDIA Isaac GR00T 人形机器人参考平台

    新闻摘要: · NVIDIA 宣布推出一款基于 NVIDIA Isaac GR00T 平台打造的开放的人形
    的头像 发表于 06-02 16:13 103次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>发布</b>面向学术研究的 <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> <b class='flag-5'>GR00T</b> <b class='flag-5'>人形</b><b class='flag-5'>机器人</b>参考平台

    黄仁勋联手宇树推出1.8米人形机器人H2+

    2026年6月1日,英伟达GTC台北大会上,黄仁勋扔出了一个让全场笑出声的重磅消息:英伟达与宇树科技合作推出新一代人形机器人参考设计H2+,也叫Isaac
    的头像 发表于 06-02 10:58 466次阅读

    NVIDIA 携手全球机器人领导者,将物理 AI 带入现实世界

    基于 NVIDIA 技术,大规模开发并部署物理 AI。 NVIDIA 发布全新 NVIDIA Cosmos 世界模型、NVIDIA
    的头像 发表于 03-17 11:22 852次阅读
    <b class='flag-5'>NVIDIA</b> 携手全球<b class='flag-5'>机器人</b>领导者,将物理 AI 带入现实世界

    NVIDIA Jetson模型赋能AI在边缘端落地

    Isaac GR00T 等模型以及千问大模型、Gemma、Mistral AI、GPT-OSS、PI 等社区模型的通用平台。
    的头像 发表于 03-16 16:27 823次阅读
    <b class='flag-5'>NVIDIA</b> Jetson模型赋能AI在边缘端落地

    NVIDIA Isaac Lab推动机器人技术突破

    Isaac Lab 是 Isaac Gym 的替代版本,该框架已将 GPU 原生机器人仿真扩展至大规模多模态学习的全新领域。Isaac Lab 整合了 GPU 并行的物理真实的仿真、逼
    的头像 发表于 10-21 11:20 1452次阅读

    NVIDIA 发布三大利器,推动人形机器人迈向新纪元

    电子发烧友网综合报道 在节前的机器人学习大会(CoRL)上,NVIDIA 发布了一系列突破性技术,包括开源物理引擎 Newton、机器人基础模型 I
    的头像 发表于 10-13 04:42 6134次阅读

    NVIDIA 利用全新开源模型与仿真库加速机器人研发进程

    科研人员及开发者打造功能更强大、适应性更强的机器人。   全新的 NVIDIA Isaac GR00T 开源基础模型将为机器人赋予接近人类的
    的头像 发表于 09-30 09:52 3289次阅读
    <b class='flag-5'>NVIDIA</b> 利用全新开源模型与仿真库加速<b class='flag-5'>机器人</b>研发进程

    最新发布!泰科机器人发布首款自研双足人形机器人

    泰科机器人凭借十多年的技术积淀与持续创新,已成功推出多款高性能人形机器人四肢的解决方案。今天,泰科机器人再次迎来重大突破——首款自主研发的双足人形
    的头像 发表于 09-02 14:34 3864次阅读
    最新<b class='flag-5'>发布</b>!泰科<b class='flag-5'>机器人</b><b class='flag-5'>发布</b>首款自研双足<b class='flag-5'>人形</b><b class='flag-5'>机器人</b>

    发力人形机器人赛道,傅利叶重磅推出陪伴机器人GR-3

    8月6日,在北京举办的世界机器人大会上,上海傅利叶智能科技公司正式发布了首款主打交互陪伴、具备可触摸特性的全尺寸人形机器人Care-bot GR
    的头像 发表于 08-20 09:12 6621次阅读
    发力<b class='flag-5'>人形</b><b class='flag-5'>机器人</b>赛道,傅利叶<b class='flag-5'>重磅</b>推出陪伴<b class='flag-5'>机器人</b><b class='flag-5'>GR</b>-3

    傅利叶人形机器人GR-3正式发布,主打交互陪伴,可触摸

    电子发烧友网综合报道8月6日,上海傅利叶智能科技有限公司在北京正式发布其GRx系列第三代智能人形机器人Care-bot GR-3,该机器人
    的头像 发表于 08-07 14:00 3944次阅读

    利用NVIDIA Cosmos模型训练通用机器人

    机器人领域的一大核心挑战在于如何让机器人掌握新任务,而无需针对每个新任务和环境耗费大量精力收集和标注数据集。NVIDIA 的最新研究方案通过生成式 AI、世界基础模型(如 NVIDIA
    的头像 发表于 08-05 16:22 2383次阅读
    利用<b class='flag-5'>NVIDIA</b> Cosmos模型训练通用<b class='flag-5'>机器人</b>

    NVIDIA Jetson + Isaac SDK 人形机器人方案全面解析

    NVIDIA Jetson + Isaac SDK 人形机器人方案全面解析 一、方案概述 Jetson 硬件平台 :提供 AI + GPU 运算能力,配合多传感器、视觉、传动控制体系
    的头像 发表于 07-30 16:12 2637次阅读

    NVIDIA Jetson + Isaac SDK 在人形机器人领域的方案详解

    NVIDIA Jetson + Isaac SDK 在人形机器人领域的 方案详解 ,涵盖芯片型号、软件平台、开发工具链、应用场景与典型客户等。 一、方案概述:Jetson +
    的头像 发表于 07-30 16:05 4197次阅读

    NVIDIA助力构建人形机器人全身遥操作仿真平台

    清华大学与银河通用机器人联合研发,推出了专为人形机器人全身仿真遥操作设计的平台 OpenWBT_Isaac。该平台依托 NVIDIA
    的头像 发表于 07-28 15:01 2412次阅读

    通过NVIDIA Cosmos模型增强机器人学习

    扩展。基于 NVIDIA Cosmos 构建的 NVIDIA Isaac GR00T-Dreams blueprint,可以通过单张图像和语
    的头像 发表于 07-14 11:49 1450次阅读
    通过<b class='flag-5'>NVIDIA</b> Cosmos模型增强<b class='flag-5'>机器人</b>学习