0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

ML与传感,软硬件结合的传感技术又将升级机器人感知能力

Simon观察 来源:电子发烧友网 作者:李宁远 2022-03-30 17:21 次阅读

在传统的工业机器人传感器的种类与数量已经不少了,压力、温度、速度等等方面都少不了传感器提供的关键数据。随着机器人的升级换代,机器人与人在同一环境里协作、合作的趋势愈发明显。不仅是在工业场景中,日常生活中机器与人类共存的案例也多了起来。这意味着机器人传感与感知的能力越来越重要。

机器人系统的性能,尤其是偏智能化的性能,在很大程度上取决于传感系统提供关键的数据,尤其是ML和AI系统开始在机器人应用中普及后。现在各种精密的传感器,再加上能够将传感器数据进行深度融合整理的系统让机器人拥有了出色的感知,机器人与人共同协作不再是不可能实现的事。

ML与AI,传感数据融合边缘化处理

机器学习ML在机器人行业流行的时间并不短,但真正开始应用还是近几年的事情,离整个行业开始广泛应用还需时日。机器深度学习分训练和推理,训练过程通常在云中离线进行,需要将大量的传感器数据反馈到神经网络中。训练完成后的AI系统可以在协作机器人中完成检测物品、识别人员等等应用。

(机器人感知,TI


在ML执行算法的推理阶段需要融合传感器数据做出判断,而且这个过程几乎是实时的,只有实时融合传感器数据做出推理才能达到机器的协作性,云计算的速度肯定是不能满足协作要求的实时低延迟响应。所以ML和AI系统需要放在边缘。

中心化的AI模型相当依赖高集成度的处理芯片,而且必须要在底层芯片设计上就考虑好算法模型在不同场景中有限的部署条件,包括算力、功耗和硅片面积的分配。在大量的数据中筛选高质量的传感器数据并不一件容易的事情,在芯片上执行深度学习任务需要芯片的硬件传感器的持续优化。

推理引擎不仅需要丰富的外设来连接各种传感器,还需要可以支撑机器视觉算法的高性能处理能力。国产的边缘AI芯片在机器人应用上走得并不慢,不管是在移动机器人上应用广泛的地平线旭日系列,还是在机器视觉上取得突破的嘉楠勘智系列,可以看到国产芯片在性能、功耗、灵活性和成本之间找到了一个较为平衡的点。SoC也是一个不错的选择,集成式的SoC可以让单芯片的方案不局限于运行ML和AI,在整个传感器组件的融合上也能出一份力。

(勘智系列,嘉楠)


协作机器人与移动机器人融合传感技术应用

协作机器人在部署前需要预见并定义在物理空间内可能与人员之间发生的碰撞,如果考虑到激光等其他传感,在虚拟空间上同样需要预见可能出现的干扰。高水平的环境感知能力必须做到充分的冗余度,来做到快速检测并防止可能发生的碰撞。这极度依赖于各类传感器提供的大量环境数据信息,并且处理芯片能快速通过ML推理实现实时的判断。

(协作机器人,TI)


机器人内部的温湿度传感同样重要,不仅要对工作环境还要对机器人组件内部进行温湿度监控,否则电机在重负载下的发热与功耗是一大隐患。目前几乎所有用于机器人的传感器件都是温度敏感元件并且设置了热补偿,该趋势大大提升了传感应用的稳定性。

移动机器人的传感应用就更多了,定位、绘图、导航、识别每个功能都离不开传感数据的融合与处理。超声波、IMU、红外、激光雷达、毫米波雷达都是为机器人系统提供环境数据的器件,配合ML推理进行深度的环境分析,移动机器人可以达到实时感知周围任何目标的智能程度。

基于DLP技术的3DToF通过灵活的结构光在分辨率的提升上可以做到更小的尺寸,这类传感不仅能让机器在定位地图构建上更精确更深度,还能将分辨率提高数个级别,结合AI与ML能达到很高的定位精度;振动传感器这一类用于检测机器人内部器件的传感,在传感技术融合的升级过程中将预测的准确性再次做了提高;毫米波雷达更不用说,作为取代传统机器人移动传感的先进技术,在融合IMU或者GNSS后,结合ML几乎可以完成机器人移动功能的所有需求……

小结

各种精密传感器的融合只是传感技术升级的开始,现在机器学习与AI技术也开始与传感器件开始融合,对传感器数据进行汇总、筛选、训练、判断。技术与硬件深度融合的机器人传感系统开始拥有了出色的实时感知能力,在机器人行业铺开应用也许已指日可待。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2526

    文章

    48251

    浏览量

    741036
  • 机器人
    +关注

    关注

    206

    文章

    27126

    浏览量

    201635
  • ML
    ML
    +关注

    关注

    0

    文章

    140

    浏览量

    34314
收藏 人收藏

    评论

    相关推荐

    实现机器人自主感知避障,传感的多样选择

    要的角色。   为了让机器人能够高效、安全地完成任务,感知避障环节显得尤为关键。其实应用在传统的机器人传感器的种类与数量已经不少,压力、温度、速度等等方面都少不了
    的头像 发表于 05-07 00:20 2117次阅读

    其利天下技术·搭载无刷电机的扫地机器人的前景如何?

    于部分消费者来说,扫地机器人仍然是一笔不小的开支。 4.扫地机器人的未来发展前景 展望未来,搭载无刷电机的扫地机器人有望在多个方面实现突破。随着传感
    发表于 05-05 15:03

    未来已来,多传感器融合感知是自动驾驶破局的关键

    驾驶的关键的是具备人类的感知能力,多传感器融合感知正是自动驾驶破局的关键。昱感微的雷视一体多传感器融合方案就好像一双比人眼更敏锐的眼睛,可以为自动驾驶系统提供更丰富更精准的视觉语言——
    发表于 04-11 10:26

    软硬件结合优势凸显,华曦达北交所IPO把握发展机遇

    深圳市华曦达科技股份有限公司(董事长:李波)是一家具备软硬件产品综合研发能力,并主要为全球运营商布局家庭业务提供智能终端和系统平台的国家级高新技术企业。基于自身发展需求,华曦达已向北交所提交IPO
    的头像 发表于 01-04 17:40 278次阅读

    机器人会用到哪些传感

    机器人会用到哪些传感器  机器人是一种能够自主行动并感知环境的自动化设备。为了实现这一目标,机器人通常需要使用各种不同类型和功能的
    的头像 发表于 01-03 15:59 1480次阅读

    高动态人形机器人“夸父”通过OpenHarmony 3.2 Release版本兼容性测评

    深圳开鸿数字产业发展有限公司(以下简称”深开鸿“)OpenHarmony生态建设能力和在新兴行业领域的技术创新实力,也标志着OpenHarmony在新兴行业领域又向前迈进了一步。 夸父人形机器人由深开
    发表于 12-20 09:31

    人形机器人各类传感器市场拆析

    以特斯拉人形机器人为例分析,其感知交互系统自身硬件占总硬件成本的 8%。其中,力矩传感器、编码器、视觉
    发表于 12-19 14:06 438次阅读
    人形<b class='flag-5'>机器人</b>各类<b class='flag-5'>传感</b>器市场拆析

    无缝连接和扭矩传感给工业机器人带来的转变

    ,但在更多应用场景里,小型工业机器人的数量增加得更为迅速,而且可完成的任务也更加多样。   工业机器人升级背后的无缝连接   工业机器人技术
    的头像 发表于 11-29 00:15 924次阅读

    软硬件融合的概念和内涵

    跟很多朋友交流,当提到软硬件融合的时候,他们会这么说:“软硬件融合,难道不是显而易见吗?我感觉在二三十年前就已经有这个概念了。”在他们的想法里,其实:软硬件融合等同于软硬件协同,甚至等
    的头像 发表于 10-17 14:36 582次阅读
    <b class='flag-5'>软硬件</b>融合的概念和内涵

    使用Arduino和PAJ7620手势传感器制作手势控制机器人

    使用Arduino和PAJ7620手势传感器制作手势控制机器人,简单程序即可实现。小小的传感器可以识别各种手势。它采用内置的空间传感器,可以感知
    发表于 09-27 06:17

    单片机到底是如何软硬件结合

      不知道大家有没有疑惑,为什么软件能控制硬件?反正当年我学习51的时候,有这个疑惑。今天我们就暂停软件开发,分析单片机到底是如何 软硬件结合 的。并通过一个基本的程序,分析单片机程序的编译,运行
    的头像 发表于 08-08 09:31 952次阅读
    单片机到底是如何<b class='flag-5'>软硬件</b><b class='flag-5'>结合</b>的

    利用进化的传感器和AI,扩大感知能力

    对于所有生物来说,对于外界情况的感知能力都是其赖以生存不可缺少的能力。人类通过视觉、听觉、味觉、嗅觉和触觉的五感来收集信息,并发挥高度的智慧来认知和理解周边状况,进行高度的行动和判断。总体来看,人类
    的头像 发表于 06-28 17:06 514次阅读
    利用进化的<b class='flag-5'>传感</b>器和AI,扩大<b class='flag-5'>感知能力</b>

    【科普】干货!带你从0了解移动机器人(四) ——移动机器人导航技术

    移动机器人导航是指移动机器人确定自己在地图参考系中的位置后,自动规划出通往地图参考系中某个目标位置路径并沿着该路径到达目标位置点的能力,是移动机器人行动能力的关键。 基于整个智能制造的
    发表于 06-28 09:52

    【科普】干货!带你从0了解移动机器人(三) ——自主导航系统及上位机软件设计与实现

    随着机器人技术的不断发展,我们可以在许多简单重复,危险的岗位上看到机器人的身影,移动机器人凭借其在复杂环境下工作,具有自行感知、自行规划、
    发表于 06-28 09:36

    STM32单片机到底是如何实现软硬件结合

    本文分析 STM32 单片机到底是如何实现软硬件结合的,接着分析单片机程序如何编译、运行。
    发表于 05-16 09:54 830次阅读
    STM32单片机到底是如何实现<b class='flag-5'>软硬件</b><b class='flag-5'>结合</b>?