0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

NVIDIA Isaac Lab 2.3新增功能助力简化机器人学习

NVIDIA英伟达企业解决方案 来源:NVIDIA英伟达企业解决方案 2025-10-21 10:50 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

基于真实世界演示训练机器人策略,不仅成本高、速度慢,还容易出现过拟合问题,进而限制其在不同任务与环境中的泛化能力。而仿真优先的方法可简化开发流程、降低风险与成本,同时部署到真实环境也将更安全、适应性更强。

最新的Isaac Lab 2.3早期开发者预览版,通过先进的全身控制、强化的模仿学习和更优的运动能力,提升了人形机器人的性能。此次更新还扩展了遥操作的数据收集功能,可支持 Meta Quest VR 和 Manus 手套等设备,加速了演示数据集的创建。此外,新版本引入了基于运动规划器的工作流,用于在操作任务中生成数据。

新增强化学习与模仿学习:Isaac Lab 2.3 为灵巧操作任务推出了多项新功能,包括用于感知和本体感知的字典观察空间,以及自动域随机化(ADR)和群体训练(PBT)的技术,以提高强化学习训练的可扩展性。

Isaac Lab 2.3 还新增了带吸盘夹具的基准测试环境,可支持吸盘与传统夹具两种操作模式。本次更新在基于管理器的工作流中加入了针对 CPU 端平面夹具的支持,以强化模仿学习功能。

优化升级的灵巧操作遥操作功能:Isaac Lab 2.3 新增对宇树 G1 机器人的遥操作支持,可对宇树三指灵巧手和 Inspire 五指灵巧手进行动作映射。灵巧动作映射指将人手姿态转换为机器人手部关节位置的过程,可实现高效的人机技能迁移,提升接触密集型手部任务的执行表现,并为训练稳健的操作策略生成丰富的演示数据。本次更新还针对傅利叶 GR1T2、宇树 G1 等双臂机器人,改进了上半身控制。

引入无碰撞运动规划技术,助力操作数据生成:在最新版的 Isaac Lab 中,开发者可以使用 Isaac Lab Mimic 中的 SkillGen 来生成演示。SkillGen 工作流能生成自适应、无碰撞的操作演示。它将人工提供的子任务片段与 GPU 加速运动规划相结合,使得只需少量的人工演示,就能学习现实世界中接触密集型操作任务。

移动机器人的端到端导航:开发者现可利用 Isaac Lab 中的移动工作流对NVIDIA COMPASS进行后训练。NVIDIA COMPASS 是基于视觉的通用移动工作流,适配不同类型机器人与多样环境。该工作流包括三个环节:在 Isaac Sim 中进行合成数据生成、训练移动模型,以及最终部署到NVIDIA Jetson Orin或NVIDIA Thor。通过 Cosmos Transfer 技术优化合成数据,可以有效缩小仿真与现实的差距。

人形机器人移动操作的合成数据生成:移动操作是指移动与操作的协同执行:机器人在移动机身(行走或滚动)的同时,对物体实施动作(抓取、推动或拉动),形成全身协同作业体系。该工作流通过整合导航与全身控制器(WBC),生成移动与操作协同合作的机器人任务演示数据。借助这一方案,机器人能够执行复杂且连续的任务,例如从桌面抓取物体、穿越空间,再将物体放置到其他位置。

策略评估框架:NVIDIA 正与光轮智能共同开发NVIDIA Isaac Lab – Arena。这是一款用于可扩展仿真实验的开源策略评估框架。借助该框架的 API,开发者无需自行搭建系统,即可简化并执行复杂的大规模评估任务。这意味着开发者既能专注于策略迭代,也能向社区贡献评估方法,进而加速机器人研究领域的研发进程。

基础设施支持:Isaac Lab 2.3 现支持搭载 NVIDIA GB10 Grace Blackwell 超级芯片的 NVIDIA RTX PRO Blackwell 服务器与 DGX Spark 系统。无论是 RTX PRO 还是 DGX Spark,均为研究人员提供了卓越平台,可支撑从训练、合成数据生成到机器人学习与仿真等各类机器人开发工作负载的实验、原型开发与运行。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    213

    文章

    31442

    浏览量

    223646
  • NVIDIA
    +关注

    关注

    14

    文章

    5687

    浏览量

    110116
  • 仿真
    +关注

    关注

    55

    文章

    4535

    浏览量

    138663

原文标题:在 NVIDIA Isaac Lab 2.3 中使用全身控制和增强遥操作,简化机器人学习

文章出处:【微信号:NVIDIA-Enterprise,微信公众号:NVIDIA英伟达企业解决方案】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    基于NVIDIA Isaac Lab拓展多模态机器人学习

    构建强大的智能机器人需要在复杂环境中进行测试。然而,在现实世界中收集数据不仅成本高昂、耗时漫长,还常常伴随高风险。针对关键危险场景(例如高速碰撞或硬件故障)进行安全训练几乎是不可能的。更严重的是,现实世界的数据往往偏向“正常”运行条件,导致机器人在面对突发状况时缺乏应对能
    的头像 发表于 03-09 16:26 949次阅读
    基于<b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> <b class='flag-5'>Lab</b>拓展多模态<b class='flag-5'>机器人学习</b>

    NVIDIA Isaac Lab推动机器人技术突破

    Isaac LabIsaac Gym 的替代版本,该框架已将 GPU 原生机器人仿真扩展至大规模多模态学习的全新领域。
    的头像 发表于 10-21 11:20 1345次阅读

    NVIDIA 发布三大利器,推动人形机器人迈向新纪元

    电子发烧友网综合报道 在节前的机器人学习大会(CoRL)上,NVIDIA 发布了一系列突破性技术,包括开源物理引擎 Newton、机器人基础模型 Isaac GROOT N1.6以及全
    的头像 发表于 10-13 04:42 5984次阅读

    NVIDIA 利用全新开源模型与仿真库加速机器人研发进程

    科研人员及开发者打造功能更强大、适应性更强的机器人。   全新的 NVIDIA Isaac GR00T 开源基础模型将为机器人赋予接近人类的
    的头像 发表于 09-30 09:52 3207次阅读
    <b class='flag-5'>NVIDIA</b> 利用全新开源模型与仿真库加速<b class='flag-5'>机器人</b>研发进程

    NVIDIA Isaac Lab多GPU多节点训练指南

    NVIDIA Isaac Lab 是一个适用于机器人学习的开源统一框架,基于 NVIDIA Isaac
    的头像 发表于 09-23 17:15 2628次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> <b class='flag-5'>Lab</b>多GPU多节点训练指南

    NVIDIA Jetson + Isaac SDK 人形机器人方案全面解析

    NVIDIA Jetson + Isaac SDK 人形机器人方案全面解析 一、方案概述 Jetson 硬件平台 :提供 AI + GPU 运算能力,配合多传感器、视觉、传动控制体系 Isaa
    的头像 发表于 07-30 16:12 2454次阅读

    NVIDIA Jetson + Isaac SDK 在人形机器人领域的方案详解

    NVIDIA Jetson + Isaac SDK 在人形机器人领域的 方案详解 ,涵盖芯片型号、软件平台、开发工具链、应用场景与典型客户等。 一、方案概述:Jetson + Isaac
    的头像 发表于 07-30 16:05 3924次阅读

    NVIDIA助力构建人形机器人全身遥操作仿真平台

    清华大学与银河通用机器人联合研发,推出了专为人形机器人全身仿真遥操作设计的平台 OpenWBT_Isaac。该平台依托 NVIDIA Isaac
    的头像 发表于 07-28 15:01 2282次阅读

    NVIDIA展示机器人领域的研究成果

    在今年的机器人科学与系统会议 (RSS) 上,NVIDIA 研究中心展示了一系列推动机器人学习的研究成果,展示了在仿真、现实世界迁移和决策制定领域的突破。
    的头像 发表于 07-23 10:43 1648次阅读

    NVIDIA Isaac Lab可用环境与强化学习脚本使用指南

    Lab 是一个适用于机器人学习的开源模块化框架,其模块化高保真仿真适用于各种训练环境,Isaac Lab 同时支持模仿学习(模仿人类)和强
    的头像 发表于 07-14 15:29 2628次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> <b class='flag-5'>Lab</b>可用环境与强化<b class='flag-5'>学习</b>脚本使用指南

    通过NVIDIA Cosmos模型增强机器人学习

    通用机器人的时代已经到来,这得益于机械电子技术和机器人 AI 基础模型的进步。但目前机器人技术的发展仍面临一个关键挑战:机器人需要大量的训练数据来掌握诸如组装和检查之类的技能,而手动演
    的头像 发表于 07-14 11:49 1273次阅读
    通过<b class='flag-5'>NVIDIA</b> Cosmos模型增强<b class='flag-5'>机器人学习</b>

    NVIDIA Isaac Sim和Isaac Lab现已推出早期开发者预览版

    NVIDIA 发布了机器人仿真参考应用 Isaac Sim 和机器人学习框架 Isaac Lab
    的头像 发表于 07-04 14:23 2029次阅读

    NVIDIA Isaac Sim 4.5.0与lsaac Lab 2.0的安装教程

    Isaac Sim 和 Isaac Lab 目前开放下载的版本是 Isaac Sim 4.5.0 以及 Isaac
    的头像 发表于 06-19 15:00 3290次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> Sim 4.5.0与lsaac <b class='flag-5'>Lab</b> 2.0的安装教程

    NVIDIA Isaac Sim与NVIDIA Isaac Lab的更新

    在 COMPUTEX 2025 上,NVIDIA 宣布了机器人仿真参考应用 NVIDIA Isaac Sim 和机器人学习框架
    的头像 发表于 05-28 10:06 2396次阅读

    盘点#机器人开发平台

    图,电子技术资料网站具身智能机器人****开发平台——Fibot广和通发布机器人开发平台-电子发烧友网NVIDIA Isaac 英伟达综合性机器人
    发表于 05-13 15:02