0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

将Jetson AGX Orin开发者套件转化为任何Jetson Orin模块

NVIDIA英伟达企业解决方案 来源:NVIDIA英伟达企业解决方案 作者:NVIDIA英伟达企业解 2022-09-30 11:03 次阅读

随着 Jetson Orin Nano 在本次 GTC 大会的发布,整个 Jetson Orin 模块阵容现已揭晓。凭借高达 40 TOPS 的 AI 性能,Orin Nano 模块为入门级 AI 设定了新标准,正如 Jetson AGX Orin 已经通过 275 TOPS 的服务器级计算重新定义了机器人技术和其他自主边缘用例一样。

所有 Jetson Orin 模块和 Jetson AGX Orin 开发套件均基于单一 SoC 架构,配备 NVIDIA Ampere 架构 GPU、高性能 CPU最新加速器。这种共享架构意味着您可以为一个 Jetson Orin 模块开发软件,然后轻松将其部署到任何其他模块。

您现在可以开始使用 Jetson AGX Orin 开发者工具套件开发任何 Jetson Orin 模块。开发者工具套件能够本地模拟任何模块的性能,让您从现在开始并缩短上市时间。通过配置硬件特性和时钟以匹配目标模块的特性,开发者工具套件可以准确地模拟任何 Jetson Orin 模块的性能。

开发团队受益于这种简单性,即只需要一种类型的开发者工具套件,而不用管哪些模块是针对生产的。这也简化了 CI / CD 基础架构。无论您是针对机器人、视频分析还是任何其他用例进行开发,这一开发者工具套件的功能都会带来许多好处。

将 Jetson AGX Orin 开发者套件

转化为任何 Jetson Orin 模块

只需一步,您就可以将 Jetson AGX Orin 开发者套件转换为任何一个 Jetson Orin 模块。我们为此过程提供了闪存配置文件。

在 Jetson AGX Orin 开发工具套件上模拟 Jetson Orin 模块,遵循其中提到的相同步骤使用刷写实用程序来刷写 Jetson AGX Orin 开发者工具套件。将您的开发者工具套件置于强制恢复模式后,使用 flash.sh 命令行工具使用新映像对其进行闪存。例如,以下命令使用其默认配置刷新开发者工具套件:

$ sudo ./flash.sh jetson-agx-orin-devkit mmcblk0p1

您使用的确切命令应修改为适合您正在模拟的目标 Jetson Orin 模块的闪存配置名称。例如,要模拟 Jetson Orin NX 16GB 模块,请使用以下命令:

$ sudo ./flash.sh jetson-agx-orin-devkit-as-nx-16gb mmcblk0p1

表 1 列出了 Jetson Orin 模块和适用于每个模块的 flash.sh 命令。

46df847a-3fe8-11ed-b1c7-dac502259ad0.jpg

表 1 Jetson Orin 模块的 flash.sh 命令

从 5.0.2 版本开始,NVIDIA JetPack 中尚未包含 Jetson Orin Nano 模块的 Flash 配置。在下载这些新配置并按照下载文件中的说明在 NVIDIA JetPack 5.0.2 之上应用覆盖补丁后,可以使用这些新配置。

有关用于仿真的闪存配置的更多信息,请参阅以下链接:

https://docs.nvidia.com/jetson/archives/r35.1/DeveloperGuide/text/SD/EmulationSupport.html

闪存完成后,完成初始启动和配置。然后,您可以使用 SDK Manager 安装其余的 NVIDIA JetPack 组件,或者只需在运行的开发者工具套件上使用软件包管理器:

sudo apt updatesudo apt install nvidia-jetpack

现在您已经运行了开发者工具套件并安装了 NVIDIA JetPack。您的 Jetson AGX Orin 开发者套件现在可以模拟指定的 Jetson Orin 模块的性能和功率。

准确模拟任何 Jetson Orin 模块

本机模拟非常准确,因为它将开发者工具套件配置为与目标模块可用的时钟频率、GPU 和 CPU 内核数量以及硬件加速器相匹配。

例如,在模拟 Jetson Orin NX 16GB 模块时:

开发者套件 GPU 配置有 1024 个 CUDA 内核和 32 个 Tensor 内核,最大频率为 918 MHz。

CPU 复合体配置有八个运行频率为 2 GHz 的 Arm Cortex-A78AE 内核。

DRAM 配置为 16 GB,带宽为 102 GB/s。

该系统提供与 Jetson Orin NX 16GB 模块支持的相同电源配置文件。

470e9972-3fe8-11ed-b1c7-dac502259ad0.png

图 1可用的电源模式

从桌面顶部菜单打开 Jetson Power 图形用户界面,您会看到系统已根据正在模拟的目标模块进行了准确的配置。可以通过运行以下命令来配置最大时钟,Jetson Power 图形用户界面将显示更改。

sudo jetson_clocks

图 2 显示了当 Jetson AGX 开发者套件闪存到模拟的 Jetson AGX-Orin 64GB 模块时,与闪存到模拟 Jetson Orin NX 16GB 模块时相比配置了最大时钟后的 Jetson Power 图形用户界面。

47991ad4-3fe8-11ed-b1c7-dac502259ad0.png

图 2开发者套件上显示的 Jetson Power 图形用户界面闪烁以模拟 Jetson AGX Orin 64GB(左)和选择 MAXN 电源模式的 Jetson Orin NX 16GB(右)

通过运行 NVIDIA JetPack 提供的各种示例,您可以看到性能已调整为与正在模拟的模块相匹配。例如,在配置 Jetson AGX Orin 开发者套件进行仿真后,与 VPI 库一起打包的基准测试示例可用于显示 Jetson AGX Orin 64GB、Jetson Orin NX 16GB 和 Jetson Orin Nano 8GB 模块的 CPU、GPU 和 PVA 性能相应的模块。

要运行 VPI 基准测试示例,请使用以下命令:

cd /opt/nvidia/vpi2/samples/05-benchmarksudo cmake .sudo makesudo ./vpi_sample_05_benchmark 

VPI 基准测试示例以毫秒为单位输出高斯算法的延迟。表 2 显示了每个目标模块的结果。

4886b1cc-3fe8-11ed-b1c7-dac502259ad0.jpg

表 2 目标模块的延迟(毫秒)

同样,您可以运行多媒体样本进行编码和解码。

要解码,请运行以下命令:

cd /usr/src/jetson_multimedia_api/samples/00_video_decodesudo makesudo ./video_decode H264 --disable-rendering --stats --max-perf 

要进行编码,请运行以下命令:

cd /usr/src/jetson_multimedia_api/samples/01_video_encodesudo makesudo ./video_encode input.yuv 1920 1080 H264 out.h264 -fps 30 1 -ifi 1000 -idri 1000 --max-perf --stats

表 3 显示了使用 H.264 1080P 30FPS 视频流运行这些编码和解码样本后的 FPS 数。

48dc80c0-3fe8-11ed-b1c7-dac502259ad0.jpg

表 3 运行编码和解码样本后的 FPS 数 * Jetson Orin Nano 不包括 NVEncoder。对于表 3,Jetson Orin Nano 的编码是在 CPU 上使用 ffmpeg 完成的。使用四个 CPU 核心时,达到 110 FPS。当使用两个 CPU 核心时,实现了 73 的 FPS,而当使用一个 CPU 核心时,实现了 33 的 FPS。

为了证明仿真的准确性,我们在 Jetson AGX Orin 开发者套件上运行了一些 AI 模型基准测试,模拟为 Jetson AGX Orin 32GB 。然后,我们将其与在实际 Jetson AGX Orin 32GB 模块上运行相同基准测试所获得的结果进行比较。从结果中可以看出,模拟性能和实际性能之间的差异微不足道。

尽管 Jetson AGX Orin 开发者套件包括 32GB 模块,但它提供了相同级别的性能,并且配备了 275 个 TOPS,与 Jetson AGX Orin 64GB 相匹配。Jetson AGX Orin 64 GB 仿真不需要特殊的闪存配置,但您必须使用适当的闪存配置在 Jetson AGX Orin 开发者套件上仿真 Jetson AGX Orin 32GB。

4919ed66-3fe8-11ed-b1c7-dac502259ad0.png

表 4 真实和仿真 Jetson AGX Orin 模块之间的性能比较

对任何 Jetson Orin 模块进行端到端开发

您可以在模拟 Jetson Orin 模块的同时使用整个 Jetson 软件堆栈。NVIDIA DeepStreamNVIDIA IsaacNVIDIA Riva 等框架在仿真模式下工作,而 TAO Toolkit 等工具在 NGC 的预处理模型中的性能符合预期。软件堆栈与仿真无关,性能与被仿真目标的性能精确匹配。

4941c8fe-3fe8-11ed-b1c7-dac502259ad0.png

图 4 NVIDIA Jetson 软件堆栈

如果您正在开发机器人用例或开发视觉 AI 工作流,您现在可以使用 Jetson AGX Orin 开发者套件和仿真模式对任何 Jetson Orin 模块进行端到端开发。

使用 NVIDIA Isaac ROS 为任何 Jetson Orin 模块开发机器人应用程序。只需使用正确的闪存配置来闪存并启动 ROS 开发。图 5 显示了在 Jetson AGX Orin 开发者套件上运行 Isaac ROS Stereo Disparity DNN ,模拟为 Jetson Orin Nano 8GB 。

497dc35e-3fe8-11ed-b1c7-dac502259ad0.gif

图 5 NVIDIA Isaac ROS Stereo Disparity DNN 在模拟为 Jetson Orin Nano 8GB 的 Jetson AGX Orin 开发者套件上运行

在 Jetson AGX Orin 开发套件上使用 DeepStream 开发视觉 AI 工作流,适用于任何 Jetson Orin 模块。

图 6 显示了在 Jetson AGX Orin 开发者套件上使用 DeepStream 运行人员检测的 IVA 工作流,模拟为 Jetson Orin Nano 8GB ,具有四个 H.265 1080P 30FPS 流。

5da6fb2a-3fe8-11ed-b1c7-dac502259ad0.gif

图 6DeepStream 视觉工作流运行 Jetson AGX Orin 开发者套件上的人员和车辆检测,模拟为 Jetson Orin Nano 8GB

使用 Jetson AGX Orin 开发者套件更快地进入市场

有了仿真支持,您可以通过在 Jetson AGX Orin 开发者套件上启动和完成应用程序开发以便更快地投入生产。我们还将在即将推出的 NVIDIA JetPack 5.0.2 网络研讨会中做出详细介绍。

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • NVIDIA
    +关注

    关注

    14

    文章

    4579

    浏览量

    101640
  • 开发软件
    +关注

    关注

    1

    文章

    24

    浏览量

    12855

原文标题:All in One!一个开发者套件解决六个NVIDIA Jetson Orin模块开发

文章出处:【微信号:NVIDIA-Enterprise,微信公众号:NVIDIA英伟达企业解决方案】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    全球三十多家NVIDIA技术合作伙伴于Computex发布首批Jetson AGX Orin生产系统

    本周,全球30多家领先的技术合作伙伴在Computex上发布了首批基于NVIDIA Jetson AGX Orin的生产系统。
    的头像 发表于 05-24 12:01 2435次阅读
    全球三十多家NVIDIA技术合作伙伴于Computex发布首批<b class='flag-5'>Jetson</b> <b class='flag-5'>AGX</b> <b class='flag-5'>Orin</b>生产系统

    可适配NVIDIA Jetson Orin NX和Orin Nano的工业级准系统,研华EPC-R7300助力产品开发

    2023 年, 工业嵌入式AI解决方案供应商研华科技发布工业准系统 EPC-R7300,该产品适用于NVIDIA®Jetson Orin™NX及JetsonOrin™Nano模块。利用强大
    发表于 04-26 16:47 796次阅读
    可适配NVIDIA <b class='flag-5'>Jetson</b> <b class='flag-5'>Orin</b> NX和<b class='flag-5'>Orin</b> Nano的工业级准系统,研华EPC-R7300助力产品<b class='flag-5'>开发</b>

    Jetson AGX Orin工具包降低AI部署时间和成本

      Nvidia Jetson AGX ORIN 开发者工具包的有效性今天在NVIDIA GTC 宣布。该平台是世界上功能最强大、结构最紧凑、能源效率最高的人工智能超级计算机,用于先进
    的头像 发表于 04-06 14:26 1481次阅读

    NVIDIA Jetson AGX Orin提升边缘AI标杆

    最新发布的 NVIDIA Jetson AGX Orin 提升边缘 AI 标杆,使我们在最新一轮行业推理基准测试中的领先优势更加明显。
    的头像 发表于 04-09 08:24 1216次阅读

    移远通信5G通信模组与英伟达Jetson AGX Orin平台完成联调

    上海,2022年5月24日 – 全球领先的物联网整体解决方案供应商移远通信今日宣布,其5G通信模组已经成功与英伟达Jetson AGX Orin平台完成联调。
    的头像 发表于 05-24 17:10 1800次阅读

    基于Jetson AGX Orin的边缘AI和嵌入式计算系统

    硬件设计师在这场技术盛会上展示基于 Jetson AGX Orin 的边缘 AI 和嵌入式计算系统。
    的头像 发表于 05-25 11:05 1541次阅读

    Jetson Orin开发套件安装开发环境的详细步骤

    上一篇文章已经为 Jetson Orin 开发套件配置好 Ubuntu 20.04 L4T(Linux for Tegra)桌面级操作系统,但是如下列所需要的开发资源并未安装。
    的头像 发表于 07-06 09:35 2841次阅读

    NVIDIA Isaac Nova Orin的特性介绍

    Isaac Nova Orin 是一款先进的计算和传感器平台,可加速 AMR 开发和部署;Isaac Nova Orin 由多达两台 Jetson
    的头像 发表于 08-19 14:34 903次阅读

    NVIDIA推出全新Jetson Orin Nano系统级模组

    NVIDIA 推出全新Jetson Orin Nano 系统级模组,扩充了NVIDIA Jetson产品阵容。全新Jetson Orin N
    的头像 发表于 09-22 09:54 954次阅读

    利用开发工具包为所有六个NVIDIA Jetson Orin模块开发

      Orin Nano 模块拥有多达 40 个 AI 性能 TOPS ,为入门级 AI 设定了新标准,正如 Jetson AGX Orin
    的头像 发表于 10-12 09:16 1280次阅读
    利用<b class='flag-5'>开发</b>工具包为所有六个NVIDIA <b class='flag-5'>Jetson</b> <b class='flag-5'>Orin</b><b class='flag-5'>模块</b><b class='flag-5'>开发</b>

    开发者们好评如潮,NVIDIA Jetson AGX Orin 是怎么做到的?

    。 在前段时间举办的 NVIDIA Jetson AGX Orin 开发套件用户回馈 活动中,来自全国各地的开发者们纷纷踊跃参与,分享了他们
    的头像 发表于 12-15 19:35 840次阅读

    GTC23 | 使用 NVIDIA Jetson Orin Nano 开发套件开发 AI 机器人及智能视觉系统

    Nano  系列的入门。这款开发套件紧凑的设计、众多的连接器以及高达 40 TOPS 的 AI 性能,非常适合将您富有远见的概念转化为现实。 这款开发套件由一个 Jetson
    的头像 发表于 03-29 03:40 1020次阅读

    Jetson Orin Nano纳米刷机介绍

    NVIDIA Jetson Orin Nano 系列模型以最小的 Jetson 外形提供高达 40 TOPS 的 AI 算力,性能在 7W 至 15W 之间,算力相当于当是 NVIDIA Je
    的头像 发表于 04-01 09:55 2184次阅读

    NVIDIA 推出 Jetson AGX Orin 工业级模块助力边缘 AI

    Jetson 边缘 AI 和机器人平台 ,您可以在此类复杂的环境中部署 AI 和传感器融合算法。 NVIDIA 在 COMPUTEX 2023 上发布了全新 Jetson AGX Orin
    的头像 发表于 06-05 10:45 784次阅读
    NVIDIA 推出 <b class='flag-5'>Jetson</b> <b class='flag-5'>AGX</b> <b class='flag-5'>Orin</b> 工业级<b class='flag-5'>模块</b>助力边缘 AI

    利用 NVIDIA Jetson 将 AI 学习延展至边缘

    NVIDIA Jetson Orin Nano 和 Jetson AGX Orin 开发者
    的头像 发表于 06-13 20:55 375次阅读
    利用 NVIDIA <b class='flag-5'>Jetson</b> 将 AI 学习延展至边缘