0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

底层硬件加大模型,智能机器狗拓展更多落地应用

Robot Vision 来源:电子发烧友 作者:Sisyphus 2024-03-29 00:11 次阅读

电子发烧友网报道(文/李宁远)在生成式AI、大模型已经席卷了各行各业的当下,人形机器人是最受备受关注的机器人类型。在人形机器人或者说仿生双足机器人之前,仿生四足机器人也是备受关注的存在。

四足机器人,更为人熟悉的名字是机器狗,在很多舞台上我们已经见到过机器狗灵活的表演。这些多足机器人可以代替人类在很多环境中完成机动作业,是高敏捷性、快速运动的代表机器人类型。

离线大模型+机器狗

当前,机器人正在与人工智能技术深度融合,仿生四足机器人也不例外。虽然现在机器人的控制、计算、多模态感知融合等方面还有很大挑战需要克服,但是我们也看到了人工智能功能正在机器人身上得到初步应用。

去年宇树科技发布的Go2就搭载了大模型用于强化交互,今年不久前,西北工业大学光电智能研究院宣布联合中国电信人工智能研究院在探索离线具身智能应用方面就取得了阶段性进展。

西北工业大学团队将机器狗搭载离线大模型,应用在智能导盲场景,开发出离线大模型具身智能导盲机器狗,验证了其智能人机交互、智能乘梯引导、智能过街引导、智能室内引导等功能。

根据相关报道,该机器狗使用的是InternLM2大模型,这是商汤科技与上海AI实验室联合香港中文大学、复旦大学发布的大模型。InternLM2庞大的训练基础和优越的性能表现在同类模型中是比较突出的,同时它也保持了开源和商用免费授权。

在该应用中,西北工业大学团队结合目前最新的大模型量化压缩和加速推理技术,成功将1.8B的大模型部署到了机器狗的计算平台上。1.8B离线大模型与机器狗内置的2Nano+1NX边缘算力验证了离线具身智能的可行性。

据悉,该项目会进一步与电信星辰大模型相结合,探索在线与离线相融合的分布式异构具身智能机器人方案。

灵活的机器狗,强大的底层硬件

除去大模型给终端应用带来的智能化决策和计划生成,机器狗作为高敏捷性、快速运动的代表机器人类型,离不开底层硬件赋予它基础性能。

目前机器狗配置,已经是相当豪华。在感知上,各类传感器加持的机器狗已经可以感知周围的各种环境。以小米的CyberDog2为例,深度摄像头、RGB摄像头、语言摄像头、触摸传感、激光雷达、超声波、ToF均有搭载。4D激光雷达现在也开始应用在机器狗上,这些传感配置让机器狗既能看到也能感知。

在核“芯”的配置上,同样以小米的CyberDog2为例,NVIDIA Jetson Xavier NX加全志MR813也是很经典的机器人方案,CyberDog2还额外加了一颗全志R329协处理器

高算力保证机器狗可以流畅地处理从传感器系统捕获的大量数据,使其能够更精准地进行机器狗的避障及路径选择,并处理智能交互相关数据。MR813,在扫地机器人中常见的型号,主要负责算法执行、运动控制、电源系统管理等工作,由它驱动机器狗身上的电机做出高精度的动作响应。另一个协处理器则主要处理语音交互。

仿生四足机器人能实现灵活的运动,全面的感知以及智能的交互,背后是这些强大基础底层硬件与人工智能技术融合合力推动的。

小结

随着具身智能概念越来越热,还会有不少AI大模型在机器人终端上落地的进展。基础且强大的底层硬件构建起了灵巧敏捷的四足机器人,AI大模型和四足机器人的融合落地会进一步拓宽机器狗的应用场景。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器狗
    +关注

    关注

    3

    文章

    167

    浏览量

    9866
  • 大模型
    +关注

    关注

    2

    文章

    1532

    浏览量

    1126
收藏 人收藏

    评论

    相关推荐

    机器人:AI大模型终端落地的第三大方向?

    电子发烧友网报道(文/吴子鹏)前有AI落地难,如今AI大模型落地也遇到了一些挑战。虽然各大企业推出了非常多的行业垂直大模型,不过这些模型
    的头像 发表于 03-24 10:22 3766次阅读

    人形机器人成为车圈“新宠”?

    现在的人形机器人不仅形态更接近人类,而且具备更多的智慧。随着大型AI模型的不断推进,人工智能正在加速人形通用机器人的量产和
    发表于 02-22 09:22 219次阅读
    人形<b class='flag-5'>机器</b>人成为车圈“新宠”?

    中国大模型落地应用案例集

    近日,中国信通院联合上海人工智能实验室成立的大模型测试验证与协同创新中心牵头,首次面向全国范围征集全行业优秀应用实践,并形成《2023大模型落地应用案例集》(以下简称“《案例集》”)。
    的头像 发表于 01-19 08:27 555次阅读
    中国大<b class='flag-5'>模型</b><b class='flag-5'>落地</b>应用案例集

    【爱芯派 Pro 开发板试用体验】基于爱芯派 Pro 开发板的警用安防智能机器人设计

    特征可以完成更多任务。在落地应用中安防智能机器人有两大技术难点,一是如何保证 SLAM 技术在动态导航中的稳定性和准确性;二是如何保证在光照强弱不一、恶劣天气情况,以及多移动目标等复杂
    发表于 01-14 21:56

    「元生智能」获千万融资 原小天才团队牵手云从科技进军银发赛道

    并行的思路,推动居家养老看护赛道全新技术的升级。2024年起,元生智能将携手云从科技,共同推动大模型在居家养老看护情景落地拓展各类护理场景,特别是多模态技术,特别是人机交互在语音和视
    发表于 01-05 11:48

    机器人拥抱AI大模型已成共识!

    目前普遍的共识是,机器人拥抱AI大模型的过程就是具身智能机器人的实现过程,融合AI大模型的具身智能
    发表于 12-22 17:08 262次阅读

    人工智能模型、应用场景、应用部署教程超详细资料

    人工智能是IC行业近几年的热词,目前此技术已经有很多成熟的模型落地案例。在此跟大家做个分享,更多详细资料,请自行搜索:【展锐坦克邦】,坦克邦-智算天地集算法
    发表于 11-13 14:49

    增强底层芯片性能 助力机器人实现通用智能

    的推进,机器人有了一丝能通用智能化的潜力。   机器人通用智能化创新落地核芯硬件底座  
    的头像 发表于 09-06 01:06 966次阅读

    机器,视觉

    机器视觉DIY机器
    700
    发布于 :2023年08月24日 00:17:18

    AI大模型引发算力变革,英特尔与百度联合发起飞桨+文心大模型硬件生态共创计划 ,加速大模型开发与落地

    ,与众多人工智能专家学者和开发者深入交流,展示了英特尔AI的端到端能力。 同时,英特尔正式宣布与百度联合发起飞桨+文心大模型硬件生态共创计划,双方将共同推进在英特尔硬件上与飞桨+文心大
    的头像 发表于 08-19 11:15 644次阅读
    AI大<b class='flag-5'>模型</b>引发算力变革,英特尔与百度联合发起飞桨+文心大<b class='flag-5'>模型</b><b class='flag-5'>硬件</b>生态共创计划 ,加速大<b class='flag-5'>模型</b>开发与<b class='flag-5'>落地</b>

    安谋科技与百度联合发起飞桨+文心大模型硬件生态共创计划

    近年来,安谋科技与百度飞桨已经在底层架构和硬件层面进行了长期深入的技术合作。安谋科技自研“周易”NPU已经在物联网、智能终端、智能汽车等领域全面落地
    的头像 发表于 08-18 14:57 616次阅读

    白海科技与百川智能顺势而为、携手共进,助力领域大模型应用快速落地

    的解决方案。 作为国内领先的开源大模型提供商,百川智能的开源基础模型为国内企业落地模型应用、开发大模型
    的头像 发表于 08-08 14:23 755次阅读

    软通动力与百度达成战略签约,共筑大模型产业化落地

    7月18日,软通动力与百度在京举行战略合作签约仪式,双方将基于百度智能云文心千帆大模型平台为核心的产品/解决方案,在市场拓展、集成开发、实施交付、运营运维等领域开展深度合作,共同推动大模型
    的头像 发表于 07-18 22:35 356次阅读
    软通动力与百度达成战略签约,共筑大<b class='flag-5'>模型</b>产业化<b class='flag-5'>落地</b>

    软通动力与百度智能云合作 共同探索大模型产业落地

    软通动力正与百度智能云紧密合作积极探索,持续推进大模型产业落地,满足不同领域的智能化需求,支持企业快速形成智能化解决方案,提高核心竞争力。
    的头像 发表于 05-19 09:34 565次阅读