0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

NVIDIA黄仁勋宣布全新版本的Isaac软件开发套件 对机器人开发平台统一

工程师邓生 来源:快科技 作者:上方文Q 2019-12-19 09:19 次阅读

在苏州举办的GTC CHINA 2019大会上,NVIDIA创始人兼CEO黄仁勋宣布了全新版本的Isaac(应该取自艾萨克·牛顿)软件开发套件(SDK),建立了一个统一的机器人开发平台,提供更新的AI感知、仿真、操控功能。

Isaac SDK套件包括提供应用程序框架的Isaac Robotics Engine,预先构建的深度神经网络模型、算法、库、驱动程序和API Isaac GEM,用于室内物流的参考应用程序,以及提供导航功能的Isaac Sim(首个版本)。

NVIDIA表示,全新的Isaac SDK可以大大加快研究人员、开发人员、初创企业和制造商开发和测试机器人的速度,使机器人能够通过仿真获得由人工智能技术驱动的感知和训练功能,从而可以在各种环境和情况下对机器人进行测试和验证,从而节省成本。

为了加快AI机器人的开发速度,Isaac SDK包含了各种基于摄像头的感知深度神经网络,比如:

- 对象检测:识别用于导航、交互或操控的对象

- 自由空间分割:检测和分割外部世界,例如确定人行道在哪里,以及机器人可以在哪里行驶

- 3D姿态估计:了解目标的位置和方向,从而实现诸如机械臂拾取物体的任务

- 2D人体姿态估计:将姿态估计应用于人,这对于与人互动的机器人(例如配送机器人)和协作机器人(专门设计用于与人合作)非常重要

Isaac SDK的对象检测也通过ResNet深度神经网络进行了更新,可以使用NVIDIA的迁移学习工具包对其进行训练,添加新对象进行检测和训练新模型变得更容易,这些新模型能以较高的准确度启动并运行。

借助新版SDK,还可以使用Isaac Sim训练机器人,并将所生成的软件部署到在现实世界中运行的真实机器人中,大大加快机器人的开发速度,从而实现综合数据的训练。

通过仿真,开发人员可以在困难或异常等极端情况下对机器人进行测试,以进一步加强对它的训练。将这些结果输入训练管道,使神经网络可以基于真实和模拟数据来提高准确性。

全新SDK也提供了多机器人仿真,可将多个机器人放入仿真环境中进行测试,以便它们学会彼此相关的工作。各个机器人可以在共享的虚拟环境中移动时,运行独立版本的Isaac导航软件堆栈。

最后,如果开发人员已经开发了自己代码的机器人,全新Isaac SDK也能集成他们的工作,并有基于C编程语言的新API,开发人员可以将自己的软件堆栈连接到Isaac SDK,并最大程度地减少编程语言转换,为用户提供通过C API访问路由的Isaac功能。

C-API访问权限同时支持开发人员在其他编程语言中使用Isaac SDK。

Isaac WebSight

Isaac项目上,NVIDIA已经与清华、北大等国内多所高校、科研机构和企业达成了合作。

在发布会现场,黄仁勋还演示了一款名为“Leonardo”的物体操纵机器人,体现了快速平滑的动作、6D姿态感知、交互式行为生成,在模拟和现实世界中通过学习,成为一个真正意义上的机器人。

Leonardo的仿真训练空间名为Isaac Gym,模拟了RGB、景深摄像头和Franka机器人传动装置。尽管是模拟世界,它依然遵循真实物理规则,并运行于NVIDIA GPU PhysX 5.0物理引擎之上。

责任编辑:wv

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    206

    文章

    27033

    浏览量

    201395
  • NVIDIA
    +关注

    关注

    14

    文章

    4592

    浏览量

    101706
收藏 人收藏

    评论

    相关推荐

    AMD Vitis™ Embedded嵌入式软件开发套件的功能和特性概述

    Vitis Embedded 是一款独立的嵌入式软件开发套件,主要用于为 AMD 自适应 SoC 和 FPGA 中的 AMD 嵌入式处理子系统(基于 ARM 的子系统和 AMD MicroBlaze)开发并编译 C/C++ 软件
    的头像 发表于 04-08 10:50 318次阅读
    AMD Vitis™ Embedded嵌入式<b class='flag-5'>软件开发套件</b>的功能和特性概述

    NVIDIA Isaac机器人平台升级,加速AI机器人技术革新

    NVIDIA Isaac机器人平台近期实现重大升级,通过引入最新的生成式AI技术和先进的仿真技术,显著加速了AI机器人技术的发展步伐。该平台
    的头像 发表于 03-27 10:36 194次阅读

    NVIDIA入局人形机器人Isaac平台迎来重要更新

    NVIDIA Isaac 机器人平台利用最新的生成式 AI 和先进的仿真技术,加速 AI 机器人技术的发展。
    的头像 发表于 03-26 09:07 421次阅读
    <b class='flag-5'>NVIDIA</b>入局人形<b class='flag-5'>机器人</b>!<b class='flag-5'>Isaac</b><b class='flag-5'>平台</b>迎来重要更新

    NVIDIA DOCA 2.5 长期支持版本发布

    开放的软件开发套件和运行环境,同时驱动 NVIDIA DOCA 开发者社区和生态合作的长足发展。 此次发布,NVIDIA DOCA 2.5 新版本
    的头像 发表于 12-26 18:25 198次阅读
    <b class='flag-5'>NVIDIA</b> DOCA 2.5 长期支持<b class='flag-5'>版本</b>发布

    使用 NVIDIA Isaac 仿真并定位 Husky 机器人

    了 ZED 2 摄像头。驾驶 Husky 机器人使用的是 Isaac ROS 2 的最新版本,其中包括用于机器人定位(NVIDIA
    的头像 发表于 12-26 18:05 375次阅读
    使用 <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> 仿真并定位 Husky <b class='flag-5'>机器人</b>

    车规MCU的软件开发套件

    费用。 对于项目预算有限、非平台化的小项目,非AUTOSAR(Non-AUTOSAR)软件开发是一个不错的选择。虽然很多大客户有自
    的头像 发表于 10-27 16:05 1070次阅读
    车规MCU的<b class='flag-5'>软件开发套件</b>

    奥比中光3D相机矩阵助力更强机器人开发

    近日,奥比中光将视觉生态产品矩阵集成到新版本NVIDIA Isaac Sim平台,助力全球超过百万名机器人
    的头像 发表于 10-24 11:38 538次阅读

    NVIDIA Isaac 平台先进的仿真和感知工具助力 AI 机器人技术加速发展

    在 ROSCon 2023 上,NVIDIA 发布了  NVIDIA Isaac Robotics  平台的重大更新。该平台可为全球
    的头像 发表于 10-20 02:00 448次阅读
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> <b class='flag-5'>平台</b>先进的仿真和感知工具助力 AI <b class='flag-5'>机器人</b>技术加速发展

    NVIDIA Jetson 计算平台赋能森云智能推出 GMSL3 摄像头开发套件

    的 GMSL3 摄像头产品,能有效解决摄像头高速率传输和无损无延时的需求。同时依托 NVIDIA Jetson 上的软件驱动技术,将 GMSL3 摄像头与 Jetson 平台进行深度集成,发布了全球首款 GMSL3 摄像头的
    的头像 发表于 09-26 18:35 395次阅读
    <b class='flag-5'>NVIDIA</b> Jetson 计算<b class='flag-5'>平台</b>赋能森云智能推出 GMSL3 摄像头<b class='flag-5'>开发套件</b>

    搭载KaihongOS的工业平板、机器人、无人机等产品通过3.2版本兼容性测评,持续繁荣OpenHarmony生态

    兼容性证书 新行业拓展新场景 深开鸿作为3.2版本先行示范单位、OpenHarmony发行版厂商,充分发挥生态共建的带头作用,积极拓展新行业、新场景,开展新版本在工业平板、机器人、无人机产品上的适配
    发表于 08-17 18:02

    基于 NVIDIA Jetson 使用硬件在环设计机器人

    Isaac 平台 应用于这些领域的。 NVIDIA Isaac 平台NVIDIA
    的头像 发表于 06-14 18:35 390次阅读
    基于 <b class='flag-5'>NVIDIA</b> Jetson 使用硬件在环设计<b class='flag-5'>机器人</b>

    使用 NVIDIA Isaac Sim、ROS 和 Nimbus 开发机器人环境

    随着现实场景中部署的自主机器人越来越多,对高保真多机器人仿真环境的需求也在迅速增长。本文将回顾笔者过去在 Cogniteam 使用的仿真多机器人的方法、目前使用  NVIDIA
    的头像 发表于 06-07 08:45 418次阅读
    使用 <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> Sim、ROS 和 Nimbus <b class='flag-5'>开发</b>多<b class='flag-5'>机器人</b>环境

    COMPUTEX2023 | NVIDIA Isaac AMR 助力移动机器人实现高级自动化

    了一个可用于打造新一代自主移动机器人(AMR)车队的全新平台NVIDIA 创始人兼首席执行官黄仁勋在 COMPUTEX 上的主题演讲中宣布I
    的头像 发表于 06-04 02:25 457次阅读
    COMPUTEX2023 | <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> AMR 助力移动<b class='flag-5'>机器人</b>实现高级自动化

    奥比中光将接入 NVIDIA Omniverse开发平台

    Omniverse是一个开放的开发平台,用于构建和运行元宇宙应用。在奥比中光3D相机集成到Omniverse后,使用NVIDIA Isaac Sim(一种
    的头像 发表于 05-31 09:03 643次阅读

    使用 ROS 2 MoveIt 和 NVIDIA Isaac Sim 创建逼真的机器人模拟

    项目中使用 NVIDIA Isaac Sim 。项目的目标是提高对操纵的感知,并通过 PickNik 的商业机器人开发平台 MoveIt S
    的头像 发表于 05-12 10:45 583次阅读
    使用 ROS 2 MoveIt 和 <b class='flag-5'>NVIDIA</b> <b class='flag-5'>Isaac</b> Sim 创建逼真的<b class='flag-5'>机器人</b>模拟