0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Jetson 百万开发者故事 | Jetson 开发者突破百万,从 TK1 到 Orin 我都经历了啥

NVIDIA英伟达 来源:未知 2023-04-04 01:45 次阅读

苏州泛科特机器人公司 CTO & 知乎 UP 主袁博融硕士毕业于多特蒙德工业大学电气工程与信息技术专业,深耕机器人及自动化等领域,同时也是 NVIDIA 的忠实用户,在 Jetson 开发者突破百万这一里程碑时刻,袁博融老师分享了他使用 NVIDIA Jetson 进行开发的故事与经验。

初识 NVIDIA Jetson 平台

袁博融老师是在硕士毕业前才接触 NVIDIA Jetson 的。那时刚完成论文答辩,有了些空闲时间,便趁着教育优惠还没到期入手了一套NVIDIA Jetson TX1

袁博融老师表示一开始也没有明确的开发目标,只是当一个和树莓派差不多的实验平台进行操作。但使用下来,他发现 Jetson 的配置显然比树莓派好得多,有 GPU 和 CUDA,还有 Ubuntu 系统,可以做 ROS 开发。在这一使用阶段,他在 Jetson 上面安装了 Jupyter,主要是用 OpenAI Gym 跑强化学习,做 RealSense 相机的测试。那时候在 Jetson上装 librealsense 还需要重新编译内核,现在已经方便多了。在这块板子上他学会了使用TensorRT,见识到了其在 AI 应用上的潜力。后来有了 TX2 和 Jetson Nano,这块板子的使命就结束了。

NVIDIA 在 Jetson 系统上做了很长时间的积累。Jetson 所使用的 Tegra SoC,初代产品 Tegra APX 2500 在 2008 年就已经发布,甚至比 GeForce 100 系还早。而 Jetson 平台的第一代产品 TK1 则在此 6 年之后才推出。他后来还收藏了搭载 Tegra K1 的 Yellowstone 平板,其性能不输 Jetson Nano。

上图是谷歌为 Tango 项目所开发的套件,发布于 2014 年。除了性能强大之外,它还搭载了 IMU,鱼眼相机,以及基于结构光的深度相机。即便系统几年前已不再更新,现在仍能在上面运行最新版的 RTAB-Map,可作为 VSLAM 开发的参考。Tango 项目实际只持续了 5 年,但极大促进了移动设备在环境感知、3D 重建、室内导航及增强现实等领域的技术发展,也为之后的 ARCore 奠定了基础。

NVIDIA Jetson 平台

成为机器人开发的好帮手

最近一两年,袁老师和他的团队的开发主要基于 Jetson Nano 和 Xavier NX,这两款模块具有较高的性价比与相互兼容的引脚设计。袁老师在知乎专栏中也和大家分享了一些有意思的应用,比如自制 3D 相机和运行 AI 围棋,这些都得益于 Jetson 强大的通用算力。

另外由于其小尺寸低功耗和兼容引脚设计,甚至还能用来做一些更加不同寻常的应用。比如矽递科技推出了 Jetson Mate 载板,可以同时搭载 4 块 Jetson Nano 或 Xavier NX。于是他也使用 4 块 Xavier NX 搭建了一台 Jetson 集群,还在其中设法嵌入了一个小尺寸无线路由。借助这台集群,可以方便地进行很多技术试验,比如 K8S 和 MinIO,MPI 并行计算,还有 ROS2 的 DDS 通信测试。

be5da5ea-d246-11ed-bfe3-dac502259ad0.jpg

作为机器人开发者,为了方便进行 SLAM 开发和测试,袁老师和他的团队搭建了一套手持 SLAM 平台。上面搭载了 Livox 激光雷达、GigE 相机、GNSS 模块、电池和触摸屏,使用Xavier NX作为主控。Xavier NX 不仅可以满足整套 SLAM 系统的实时运算,还为传感器提供了 PTP 同步服务。

be748bde-d246-11ed-bfe3-dac502259ad0.jpg

袁老师及团队还在开发一款使用 Xavier NX 作为主控的托盘搬运机器人。与众不同的是,他们在这台机器人上使用 DreamVu 的 PAL 全景深度相机作为主传感器。值得一提的是,DreamVu 也是 NVIDIA 生态圈的合作伙伴之一。两个团队正在一起为托盘搬运机器人开发更好且更具性价比的感知方案。

be8fa982-d246-11ed-bfe3-dac502259ad0.jpg

使用单个 PAL 相机就能实现 360° 的水平感知与 110° 的垂直感知覆盖,消除了所有盲区,这是其它传感器所无法提供的。而其得以实现也离不开 NVIDIA Jetson 的算力支持。使用单块 Xavier NX,就可以实时完成图像矫正、深度估计、目标检测,以及可通行区域检测。

不可错过的 NVIDIA Jetson 平台

随着更多的开发者加入,以及大家对 Jetson 平台有了更深的了解,袁老师及团队还将进一步挖掘其潜力。Jetson 最独特的优势在于提供了强大的通用算力。在机器人领域除了 AI 算法,还有很多算法可以并行化,这些都可以在 Jetson 上使用 GPU 或专有电路加速。NVIDIA 也提供Isaac平台以方便进行机器人应用开发。当 Orin 平台带来更强算力后,机器人领域也可能出现新的技术革命,相信我们很快就能见证全新一代机器人的出现。

“作为一名早期开发者,很开心看到 Jetson 系列在这几年内飞速发展,成为边缘计算领域最具吸引力的平台,让开发者们的各种奇思妙想得以实现。”袁老师表达了自己对于 NVIDIA Jetson 平台迅速发展的祝贺。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 英伟达
    +关注

    关注

    22

    文章

    3327

    浏览量

    87768

原文标题:Jetson 百万开发者故事 | Jetson 开发者突破百万,从 TK1 到 Orin 我都经历了啥

文章出处:【微信号:NVIDIA_China,微信公众号:NVIDIA英伟达】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    鸿蒙开发者预览版如何?

    、原生智能、原生互联,6大极致原生体验。 初步阅读了鸿蒙的源码后,基本上可以确定是全自研底座,已经看不到Android的身影。作为开发者,如果想往鸿蒙方向发展,就需要系统性学起。鸿蒙的知识体系如下
    发表于 02-17 21:54

    鸿蒙系统优缺点,能否作为开发者选择

    星河版已经是纯血鸿蒙,但是它的发展一些周期。生态圈的建立难度大,各大厂商加入鸿蒙原生开发需要时间累积。 鸿蒙开发人才空缺,由于鸿蒙作为一款新型的系统,程序员们都是0学起。所以市面上很少有鸿蒙
    发表于 02-16 21:00

    您有一份OpenHarmony开发者论坛2023年度总结,请查收~

    体验用户,并迅速在论坛开启 OpenHarmony 技术交流。 通过开发者们在论坛进行提问、答疑、分享技术文章、技术资料等方式为论坛沉淀丰富的 OpenHarmony 技术知识。 对此
    发表于 01-26 17:27

    HarmonyOS SDK,助力开发者打造焕然一新的鸿蒙原生应用

    、部署和维护的全生命周期。HarmonyOS SDK 基于开发者开发所需要的功能和特性提供六大领域:应用框架领域提供包括 ArkTS、 ArkUI 等移动应用开发的基础设施,帮助
    发表于 01-19 10:31

    有奖征文第一弹 | 携手百万开发者 共创 AI 新未来

    携手百万开发者,共创 AI 新未来 NVIDIA 百万中国开发者故事有奖征文 活动已于 12 月 14 日拉开帷幕。 现正在火热进行中! 超
    的头像 发表于 12-22 17:15 151次阅读
    有奖征文第一弹 | 携手<b class='flag-5'>百万</b><b class='flag-5'>开发者</b> 共创 AI 新未来

    欢迎加入飞腾派开发者社区,感谢每一位开发者

    ://bbs.elecfans.com/group_1708 飞腾派开发者社区部分内容截图 回顾合作历程,2023年开始,华秋 · 电子发烧友就与飞腾建立了密切的合作关系,双方团队共同努力,实现许多
    发表于 12-11 16:11

    鸿蒙原生应用/元服务开发-开发者如何进行真机测试

    前提条件:已经完成鸿蒙原生应用/元服务开发,已经能相对熟练使用DevEco Studio,开发者自己有鸿蒙4.0及以上的真机设备。 真机测试具体流程如下 1.手机打开开发者模式 2.在
    发表于 11-30 09:46

    利用 NVIDIA Jetson 实现生成式 AI

    近日,NVIDIA 发布了 Jetson 生成式 AI 实验室(Jetson Generative AI Lab),使开发者能够通过 NVIDIA Jetson 边缘设备在现实世界中探
    的头像 发表于 11-07 21:25 486次阅读
    利用 NVIDIA <b class='flag-5'>Jetson</b> 实现生成式 AI

    Banana Pi为何选择rk3588开发Jetson Nano引脚兼容的嵌入式产品

    引言: 当Banana PI&armsom决定采用RK3588芯片开发一款与Jetson Nano引脚兼容的产品时,这意味着一次重要的技术决策,为开发者和制造商提供更大的灵活
    发表于 11-02 12:30

    开发者福利月】听开发者故事,享节日福利

    以 1024 之名 向开发者致敬 感谢你们用键盘和屏幕构建出了 一个又一个令人惊叹的数字世界 开发者们,节日快乐! 听见你的故事 开发者们冷静沉着的外表下藏着一颗充满热情的心,在上篇文
    的头像 发表于 10-24 15:45 158次阅读
    【<b class='flag-5'>开发者</b>福利月】听<b class='flag-5'>开发者</b><b class='flag-5'>故事</b>,享节日福利

    armsom:为何选择rk3588开发Jetson Nano引脚兼容的嵌入式产品

    引言: 当armsom决定采用RK3588芯片开发一款与Jetson Nano引脚兼容的产品时,这意味着一次重要的技术决策,为开发者和制造商提供更大的灵活性。这篇文章将解释我们选择R
    发表于 10-18 17:35

    各位开发者期待已久的开源鸿蒙开发者手机已经开放购买啦!!

    各位开发者期待已久的开源鸿蒙开发者手机已经开放购买啦!! “开源鸿蒙开发者手机”,本质上是手机形态的开发板,为广大 OpenHarmony 开发者
    发表于 10-10 18:32

    开发者使用 NVIDIA Jetson 让 AI 驱动维修机器人

    《星球大战》中的维修机器人(Pit Droid)。《星球大战》系列电影深受人们的喜爱,影片中的维修机器人负责修理和维护在整个系列中穿梭的飞梭赛车(Podracers)。 这位边缘 AI 领域的“绝地武士”使用 NVIDIA Jetson Orin Nano
    的头像 发表于 08-15 18:35 356次阅读

    NVIDIA JETSON载板设计开发教程 NVIDIA SDK Manager对载板进行自定义

    NVIDIA SDK Manager 是在 NVIDIA Jetson 开发者套件 上安装 NVIDIA JetPack SDK 的必备工具。它提供了一种简单易行的方法,可在几分钟内完成开发环境
    的头像 发表于 07-28 17:10 1328次阅读
    NVIDIA <b class='flag-5'>JETSON</b>载板设计<b class='flag-5'>开发</b>教程 NVIDIA SDK Manager对载板进行自定义

    利用 NVIDIA Jetson 将 AI 学习延展至边缘

    NVIDIA Jetson Orin Nano 和 Jetson AGX Orin 开发者套件现为符合条件的学生、教育工作者和研究人员提供折
    的头像 发表于 06-13 20:55 381次阅读
    利用 NVIDIA <b class='flag-5'>Jetson</b> 将 AI 学习延展至边缘