0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AI自动生成机器人控制代码,新的蓝海赛道已经显现

E4Life 来源:电子发烧友网原创 作者:周凯扬 2023-10-06 08:55 次阅读
电子发烧友网报道(文/周凯扬)作为最考验场景适用度和成本控制的应用之一,机器人市场在随着进一步接入高性能AI芯片,再度开启了新的蓝海赛道。比如人形机器人已经有了接入大语言模型的趋势,我们也已经在不少行业展会上看到了类似的demo。

机器人市场的白刃战已经不再仅仅是运动控制系统和视觉感知系统的比拼了,谁能在新时代把握AI算力的红利,就有可能率先抢下这一蓝海市场的第一块蛋糕。而赋予这一红利的前提,恰恰就是机器人AI芯片以及相关的软件开发平台。

接入大语言模型,AI自动生成代码

作为AI芯片领域的龙头,英伟达的Jetson AGX Orin在去年一经发布,就获得了机器人行业生态的追捧。200TOPS@INT8的算力相比上一代的Jetson Nano、Jetson Xavier都有了数倍的提升。而上一代产品仍是当时乃至现在的主流产品,Jetson的开发生态拥有100万开发者和6000多家公司,小米的Cyberone、宇树的B1等产品都在使用Jetson硬件作为感知计算平台。

不过Jetson AGX Orin面向的依然是行业级的市场,面对消费级的产品,仍需要入门级与中端级的产品来替代原先的Nano和Xavier。因此英伟达随即又发布了全新的Jetson Orin Nano和Jetson Orin NX,根据配置不同,最高算力分别可至40TOPS和100TOPS。

与Jetson AGX Orin一同更新的Metropolis、Omniverse Isaac和TAO的工具套件,进一步减少了AI部署所需的时间成本,又能解决感知、自然语言理解等机器人开发过程中的挑战。自去年第四季度英伟达开始供货以来,今年新发布的一众机器人产品纷纷用上了这颗芯片,而其作用也不再只是用于感知计算。

以国产机器人厂商宇树为例,他们发布的Unitree Go2 EDU版本可以选配英伟达Jetson Orin高算力模组,以提供额外的40到100TOPS算力,结合来看选配的最低是8GB的Jetson Orin Nano,以及16GB的Jetson Orin NX。Unitree Go2也接入了GPT,在与人进行问答交互时也更加智能,并非程序式的反应。

这对于陪伴型机器人来说,或许意味着跨世代的进步,在接入GPT后,一切交互活动都会变得人性化。在理解指令语义后,也能通过GPT的代码生成能力自动生成机器人的控制代码,从而在无需额外编程的情况下,触发更为复杂的动作指令。而目前Jetson是接入大模型最为全面的机器人硬件平台,故而为国产机器人厂商结合国产大模型也提供了支持。

AI定制化需求与开发平台易用性

地平线虽是国产自动驾驶芯片的龙头厂商,但这家名字里带了Robotics的公司,也在稳步推进着机器人的开发。在去年,地平线推出了国内首个软硬一体的机器人开发平台Horizon Hobot Platform,以及基于最新旭日X3芯片打造的旭日X3派开发板。

Hobot平台除了包括旭日3芯片外,还包括机器人操作系统TogetherROS,机器人参考算法Boxs等。旭日3集成了全新的伯努利2.0 BPU架构,可以提供5TOPS的算力。而TogetherROS在兼容ROS2通用操作系统的同时,对旭日芯片进行了底层优化,提高了部分CV算子的性能。除了与传感器和软件厂商达成合作以外,地平线也与不少机器人本体厂商紧密合作,诸如松灵机器人、智科特机器人等。

而今年地平线推出了全新的RDK系列机器人开发者套件,基于此原先的旭日X3派升级成了RDK X3,上半年也发布了集成度更高的RDK X3模组,四核Cortex-A53的CPU主频升级至1.5GHz,可以满足机器人开发者客户更多的定制化需求。

而在7月的地平线2023机器人开发者创享日上,地平线又发布了RDK X3 2.0以及RDK Ultra。RDK Ultra则是地平线为机器人开发准备的一套高性能、大算力套件,其端侧推理算力可达96TOPS,同时配备了8核Cortex-A55 CPU提供高性能处理能力。同时为了更好地降低开发者的适配与学习成本,RDK Ultra的硬件接口甚至兼容Jetson Orin系列开发板。

与此同时,基于下一代芯片旭日5的RDK X5套件也已经在开发过程中了,预计将于2024年面世。地平线也透露了该平台的一些性能指标,比如8TOPS的BPU算力,8核Cortex A55的CPU将主频进一步提升至1.8GHz,且这次更是配备了Arm Mali GPU

在机器人开发者创享日上,同样获得升级的还有TogetherROS。升级到2.0版本的TogetherROS引入了更多的算法与应用实例,其中包括了一众因为算力升级而得以实现的复杂算法,比如BEV视觉3D感知、深度学习视觉巡线等等。

为了对机器人应用进行更有针对性的开发,地平线也推出了Node Hub,通过将SLAM、目标检测、定位和自主导航等功能节点化,从而使得不同类型的机器人只需将这些节点串联起来即可完成应用开发,譬如需要SLAM、自主导航和运动控制的物流机器人,或是需要运动规划和目标检测的分拣机器人等等。

AI计算的同时兼顾可靠性与实时性

另一个常常被大家忽略的硬件平台,同样可以助力AI机器人的开发,那就是AMD/赛灵思的Versal AI Edge系列。该系列通过标量引擎、自适应引擎和智能引擎的结合,提供了一个比GPU提供更高AI能耗比的平台。在通用的控制嵌入式计算上,双核Cortex-A72和双核Cortex-R5F足以满足Linux应用和实时控制的需求,而自适应引擎则用于支持各种传感器的融合算法。

其智能引擎由AI引擎和DSP引擎构成,每个AI引擎都由多个引擎块构成2D阵列,而每个引擎块都包含了一个VLIW的单指令多数据向量处理器,主频高达1.3GHz,且专门针对机器学习和高级信号处理进行了优化,足以满足机器人实时控制的低时延。

值得一提的是,AMD提供的这一AI引擎分为两种,一种是同时平衡ML和DSP负载的AIE引擎,一种是专注于ML的AIE-ML引擎,前者的高级信号处理能力更高,而后者的机器学习推理性能更高。这也是为何Versal AI Edge在智能引擎中加入了一个独立的DSP引擎,这样一来无论是机器人AI应用中的深度学习,还是感知计算中的信号处理,都能在单一平台上完成。

不过从用例来看,Versal AI Edge系列还是更适合用于行业级的机器人,诸如工业协作机器人、医用手术机器人等等。这类应用往往需要数量大于消费级机器人的异构传感器输入,且对于预测性维护、远程诊断之类的机器学习应用需求更高。况且从其标量引擎的配置和自适应引擎对TSN网络的支持上来看,也是为了在工业、医疗等环境中实现ROS下最快的响应速度。

写在最后

对于机器人市场来说,追求小型化、低功耗、高算力的AI计算芯片必然是未来几年的大势所趋。与之匹配的电机/电机控制芯片以及传感器,也已经开启了新一轮的技术升级,目标即形成感知层、计算层和执行层的完美融合。单从技术积累来看,自动驾驶芯片厂商很有可能是率先吃到甜头的厂商,但它们不少仍需要更多的精力来接入不同的AI模型,才能跟上新的交互潮流。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    206

    文章

    27064

    浏览量

    201451
  • 英伟达
    +关注

    关注

    22

    文章

    3334

    浏览量

    87812
  • AI芯片
    +关注

    关注

    17

    文章

    1658

    浏览量

    34414
收藏 人收藏

    评论

    相关推荐

    【开源项目】Emo:基于树莓派 4B DIY 能笑会动的桌面机器人

    复杂的功能,我们采用 Python 的 multiprocessing 包,这使机器人能够同时执行多个任务,从而提高运行效率。 我们已经为你编写好项目代码,你只需克隆到本地即可使用。 git
    发表于 12-26 15:18

    LabVIEW的六轴工业机器人运动控制系统

    LabVIEW开发六轴工业机器人运动控制系统 本项目开发了一个高效的工业机器人控制系统,重点关注于运动学算法和轨迹规划算法的实现和测试。LabVIEW作为一个关键技术,在项目中扮演了核
    发表于 12-21 20:03

    ROS让机器人开发更便捷,基于RK3568J+Debian系统发布!

    ,以及包管理。它也提供用于获取、编译、编写、和跨计算机运行代码所需的工具和库函数。图1 随着工业智能化的快速发展,智能机器人设备已成为工业自动化体系的佼佼者,而智能机器人设备核心—RO
    发表于 11-30 16:01

    AI语音机器人,企业营销新选择

    机器人AI
    jf_86111705
    发布于 :2023年09月25日 17:11:01

    教你做个PID控制巡线机器人

    在本项目中,我们将学习如何使用带PID控制器的线跟随机器人使用Arduino Nano来解决迷宫。
    发表于 09-25 06:54

    ai人工智能机器人

    的运营成本、人力成本还在不断提高(如:办公场地的租金、员工的工资、社保公积金、节假日福利等)。 如今的智能电话机器人,每天的电话拨打量可达800-1000通,相比人工提高了3-5倍,大大缩短了名单的筛选
    发表于 09-21 11:09

    ai机器人打电话助力各行业

    机器人AI
    jf_86111705
    发布于 :2023年09月07日 18:20:45

    ai机器人

    人工智能AI机器人
    jf_86111705
    发布于 :2023年08月22日 16:06:28

    ai智能机器人

    机器人AI
    jf_86111705
    发布于 :2023年08月21日 15:59:56

    编程变得简单:在代码生成中利用自动机器人的力量

    编程一直以来都是一项需要深入学习和不断提升的技能。然而,随着自动机器人的出现,编程正在变得越来越简单。利用自动机器人的力量,我们能够快速生成
    的头像 发表于 08-21 08:08 447次阅读
    编程变得简单:在<b class='flag-5'>代码</b><b class='flag-5'>生成</b>中利用<b class='flag-5'>自动</b>化<b class='flag-5'>机器人</b>的力量

    ai语音机器人

    机器人AI
    jf_86111705
    发布于 :2023年08月18日 15:05:25

    编程变得简单:在代码生成中利用自动机器人的力量

    编程一直以来都是一项需要深入学习和不断提升的技能。然而,随着自动机器人的出现,编程正在变得越来越简单。利用自动机器人的力量,我们能够快速生成
    的头像 发表于 08-18 13:36 609次阅读

    GPT生成控制代码,四足机器人终于迎来智能交互

    采用GPT的代码生成能力自行生成控制方案等,甚至市面上已经开始出现落地产品。   四足机器人  
    的头像 发表于 07-20 01:13 1453次阅读

    如何快速地让机器人投入生产

    步进电机,我们可以提供的是几个半转或1/4,1/8转。 而机器人电脑,自动处理这些数据,我们要处理的是手指的空间位置,也就是xyz坐标。 然后处理夹具的开关。 所以,我们日常程序必须备份。这些程序可以
    发表于 06-06 16:18

    浅谈儿童陪护机器人

    儿童陪护机器人越来越受到人们的关注,其中转动控制是其重要组成部分之一。步进电机芯片作为一种常用的控制芯片,被广泛应用于儿童陪护机器人中的转动控制
    发表于 05-11 15:12