0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

NVIDIA Isaac Sim和Isaac Lab现已推出早期开发者预览版

NVIDIA英伟达企业解决方案 来源:NVIDIA英伟达企业解决方案 2025-07-04 14:23 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

NVIDIA 发布了机器人仿真参考应用Isaac Sim和机器人学习框架Isaac Lab的开发者预览版。开发者现在可以通过 GitHub 访问早期版本,抢先体验先进功能,用于在基于物理的仿真环境中构建、训练和测试 AI 驱动的机器人。

Isaac Sim 的更新

Isaac Sim 是基于NVIDIA Omniverse构建的参考应用,使开发者能够在基于物理的仿真环境中开发、仿真和测试 AI 驱动的机器人。Isaac Sim 5.0 的主要更新包括以下:

开源可用性

Isaac Sim 专用的扩展程序正在一个新的公共 Github 库中开源,这将允许开发者构建和运行 Isaac Sim。此资源库将作为社区的早期访问版,通过公共开发分支提供新功能的访问权限。但是,Omniverse Kit 的组件仍是非开源的,目前不接受外部贡献。

此公共开发分支将通过修复错误不断更新。当所有组件通过 NVIDIA 的质量保证标准后,将为官方 5.0 版本提供二进制发布版本。

先进的合成数据生成流程

Isaac Sim 引入了几个新的扩展程序,进一步扩展了合成数据生成能力,以用于训练、测试和验证 AI 驱动的机器人。

MobilityGen 将作为 Isaac Sim 中的扩展程序提供,支持生成各种基于物理的数据和感知模型训练数据,例如占用地图、机器人状态、位姿、速度和图像。

Grasp 数据生成将作为新教程推出,其介绍的工作流支持自动生成抓取候选项,仿真每次抓取尝试,并记录用于训练和评估的成功指标。

新的NVIDIA Omniverse Replicatorwriter 针对NVIDIA Cosmos Transfer输入进行了优化,使开发者能够轻松生成并导出高质量合成数据。它支持独立工作流和脚本编辑器,并可以无缝集成到现有的 Isaac Sim 合成数据生成脚本中。

Isaac Sim 中的新工作流现在可以支持大规模物理环境的合成数据生成。其中包括触发多样化真实场景的 Incident Simulation,以及自动标记事件数据以丰富训练数据集的 Caption Generation,二者共同增强了对用于视觉 AI 模型开发的场景的理解。此外,现有的 Actor 和 Object Simulation 工作流已经过优化,可进一步提高合成数据的质量和效率。

新的机器人模型

Isaac Sim 5.0 引入新的机器人模型和导入工具,使仿真设置更快、更一致,并更接近真实世界行为。

新的机器人模式将 OpenUSD 中的机器人定义标准化,该模式已被 NVIDIA 的扩展机器人资产库采用,其中包含新的机器人模型。机器人导入器现在使用新的机器人模式,新的 Robot Import Wizard 提供了一个简化的分步流程,用于装配和导入用于仿真的机器人。

Isaac Sim 5.0 中的新模式还支持通过 OpenUSD 模式定义的新关节摩擦模型,包括执行器和摩擦参数,该模型由 NVIDIA 与海克斯康和 maxon 合作开发。这些模型能够确保仿真中关节和电机的驱动更接近真实世界的系统动态,从而缩小仿真与现实之间的差距。

改进的传感器仿真

Isaac Sim 在传感器仿真方面取得了重大进步,使定义和测试传感器模型变得比以往更容易,具有更高的真实感和可控性。

新的 OmniSensor USD 架构将直接在 USD 中定义 RTX 传感器,同时引入一种新的深度传感器模型,这种模型能够仿真出具有详细差异伪影的逼真立体深度。此外,资产库也得到扩展,包含了多种新的传感器模型。

标准化的 ROS 2 接口和 ZMQ 桥接器

Isaac Sim 5.0 全面支持 ROS 2 Jazzy Jalisco,兼容标准化的 ROS 2 仿真接口,以及用于运动规划工作流的更新版 MoveIt 2 教程。此外,新的 ZeroMQ 桥接器便于 Isaac Sim 与外部系统之间的通信,还可以作为开发自定义中间件桥接器的参考示例。

Isaac Lab 的更新

Isaac GR00T N1 部署在 Isaac Lab 中的傅利叶 GR1 人形机器人上,用于双手操作任务

Isaac Lab 是专为训练和评估机器人学习策略而构建的开源框架。Isaac Lab 2.2 的更新支持以下功能:

增强的合成动作生成:利用Isaac GR00T-Mimic的双臂训练环境,放大收集的数据以用于机器人操作。

Omniverse Fabric 集成:Isaac Lab 现在支持 Fabric,可加快加载时间,更高效地执行物理仿真和传感器数据采集。

张量化吸盘夹具:提供灵活的动态抓取仿真,这对于准确的强化学习和操作任务至关重要。

开始开发

从 Github 下载源代码,即可开始使用 Isaac Sim 5.0 和 Isaac Lab 2.2 的早期开发版。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    214

    文章

    31700

    浏览量

    224670
  • NVIDIA
    +关注

    关注

    14

    文章

    5732

    浏览量

    110362
  • GitHub
    +关注

    关注

    3

    文章

    489

    浏览量

    18820

原文标题:Isaac Sim 和 Isaac Lab 现已推出早期开发者预览版

文章出处:【微信号:NVIDIA-Enterprise,微信公众号:NVIDIA英伟达企业解决方案】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    NVIDIA 携手全球机器人领导,将物理 AI 带入现实世界

    基于 NVIDIA 技术,大规模开发并部署物理 AI。 NVIDIA 发布全新 NVIDIA Cosmos 世界模型、NVIDIA
    的头像 发表于 03-17 11:22 843次阅读
    <b class='flag-5'>NVIDIA</b> 携手全球机器人领导<b class='flag-5'>者</b>,将物理 AI 带入现实世界

    借助NVIDIA Isaac Sim与World Labs Marble加速机器人仿真环境构建

    的虚拟世界。将开源机器人参考框架 NVIDIA Isaac Sim 与生成式模型,比如 World Labs 推出的 Marble 等相结合,即可通过文本或图像提示,为机器人
    的头像 发表于 12-24 10:28 1816次阅读

    基于NVIDIA Isaac开发的机器人调酒师ADAM亮相国际赛场

    基于 NVIDIA Isaac开发的机器人调酒师 ADAM,为维加斯黄金骑士队的冰球粉丝带来了身临其境的未来式服务体验。
    的头像 发表于 12-24 10:05 706次阅读

    NVIDIA Omniverse基于Container的部署推流方案

    为了让客户能够高效安装和部署 NVIDIA Omniverse 及 NVIDIA Isaac 平台,NVIDIA 现已
    的头像 发表于 12-17 10:17 1089次阅读
    <b class='flag-5'>NVIDIA</b> Omniverse基于Container的部署推流方案

    仅使用智能手机在NVIDIA Isaac Sim中重建场景

    使用 iPhone 拍摄照片,到利用 3DGUT 进行 3D 场景重建,再到将重建的场景导入 NVIDIA Isaac Sim 并添加机器人。若要跳过重建步骤(步骤 1–3),直接在 Isaa
    的头像 发表于 11-10 14:03 1282次阅读

    NVIDIA Isaac Lab推动机器人技术突破

    Isaac LabIsaac Gym 的替代版本,该框架已将 GPU 原生机器人仿真扩展至大规模多模态学习的全新领域。Isaac Lab
    的头像 发表于 10-21 11:20 1436次阅读

    NVIDIA 利用全新开源模型与仿真库加速机器人研发进程

    科研人员及开发者打造功能更强大、适应性更强的机器人。   全新的 NVIDIA Isaac GR00T 开源基础模型将为机器人赋予接近人类的推理能力,使其能够拆解复杂指令,并借助已有知识与常识执行任务
    的头像 发表于 09-30 09:52 3289次阅读
    <b class='flag-5'>NVIDIA</b> 利用全新开源模型与仿真库加速机器人研发进程

    NVIDIA Isaac Lab多GPU多节点训练指南

    NVIDIA Isaac Lab 是一个适用于机器人学习的开源统一框架,基于 NVIDIA Isaac
    的头像 发表于 09-23 17:15 2774次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> <b class='flag-5'>Lab</b>多GPU多节点训练指南

    NVIDIA Isaac Sim仿真平台助力他山科技实现触觉传感技术突破

    触觉感知作为机器人与环境交互的核心能力之一,正成为突破人机协作精度瓶颈的关键。他山科技基于 NVIDIA Isaac Sim 仿真平台,融合其业界领先的触觉传感器产品,构建了一套高精度、高频率的触觉
    的头像 发表于 09-06 15:30 2304次阅读

    NVIDIA DRIVE AGX Thor开发者套件重磅发布

    这款由 NVIDIA DriveOS 7 驱动的开发者套件能够帮助开发者们打造出更安全的智能汽车和交通解决方案。
    的头像 发表于 09-04 11:20 1753次阅读

    NVIDIA Jetson + Isaac SDK 人形机器人方案全面解析

    SDK + Isaac Sim :专为机器人打造的软件开发平台,支持 ROS、实时感知、动作规划和 AI 强化学习 二、Jetson 芯片系列对比 型号 GPU (CUDA) CPU AI级别
    的头像 发表于 07-30 16:12 2627次阅读

    NVIDIA Jetson + Isaac SDK 在人形机器人领域的方案详解

    NVIDIA Jetson + Isaac SDK 在人形机器人领域的 方案详解 ,涵盖芯片型号、软件平台、开发工具链、应用场景与典型客户等。 一、方案概述:Jetson + Isaac
    的头像 发表于 07-30 16:05 4178次阅读

    NVIDIA助力构建人形机器人全身遥操作仿真平台

    清华大学与银河通用机器人联合研发,推出了专为人形机器人全身仿真遥操作设计的平台 OpenWBT_Isaac。该平台依托 NVIDIA Isaac S
    的头像 发表于 07-28 15:01 2404次阅读

    NVIDIA Isaac Lab可用环境与强化学习脚本使用指南

    NVIDIA Isaac Sim 是一款基于 NVIDIA Omniverse 构建的参考应用,使开发者能够在基于物理的虚拟环境中模拟和测试
    的头像 发表于 07-14 15:29 2829次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> <b class='flag-5'>Lab</b>可用环境与强化学习脚本使用指南

    NVIDIA Isaac Sim 4.5.0与lsaac Lab 2.0的安装教程

    Isaac SimIsaac Lab 目前开放下载的版本是 Isaac Sim 4.5.0
    的头像 发表于 06-19 15:00 3563次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> <b class='flag-5'>Sim</b> 4.5.0与lsaac <b class='flag-5'>Lab</b> 2.0的安装教程