0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

多传感器融合技术的应用方案

双目立体视觉 来源:双目立体视觉 作者:双目立体视觉 2022-03-25 15:40 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

“INDEMIND:随着机器人的应用领域不断拓展,对机器人的环境感知能力的要求也在不断提升,而要解决环境感知问题,传感器技术则是最重要的应用支撑技术之一,它对于机器人的意义亦如人眼对于人,但与人眼不同的是,它的构成主要由传感器和算法组成,并伴随着机器人发展,已从单传感器向多传感器融合迭代。”

由于机器人不断渗透到各行各业,面对的外部环境越来越复杂,对机器人的精度、稳定性、智能化提出了新的要求,而单传感器或采用多个(种)传感器却仅是从多个侧面孤立地获取目标信息的方式,前者不仅效率较低下,且获取的信息量有限,而后者不断增加传感器的做法,更会增加系统的复杂度,对平台算力要求提高,且割断了各传感器信息间的内在联系,丢失了信息经有机组合后可能蕴含的深层有效信息,造成信息资源浪费,甚至可能导致决策失误。

在多重因素影响下,发展多传感器融合技术便表现出了它的必然性。事实上,多传感器融合技术从字面上可知并非另辟蹊径,而是在采用多个(种)传感器的基础上,进一步开拓和完善而来,原理是借助算法对感知相关要素信息的冗余或互补信息进行分析、建模、解算、融合、估计和补偿,最终输出更为准确、丰富、可靠的信息。

多传感器融合技术的应用,对于系统的容错能力、信息精度、信息的可信度&丰富度都有了明显提升,这对于机器人的意义无比重要。目前,市面上多传感器融合技术多是以激光雷达为主导的技术方案,并根据架构组成,又主要分为两种。

一种是以单线激光雷达主导+IMU+里程计或其它传感器的融合方案,采用松/紧耦合方式,有着简单、成熟的技术优势,是市面上较为常见的融合技术方案,然而这类方案的缺点在于,一是环境适应能力较差,对于环境特征单一的长走廊等场景,误差较高,容易偏离路径,二是重定位能力差,运行过程中一旦丢失位置,难以重新定位。

另一种是以多线激光雷达为主导的融合方案,与其它传感器采用松/紧耦合方式组合,得益于多线激光雷达,可获取到环境物体的三维信息,使得这类方案的环境感知能力得到显著提升,且在功能表现上,同样有着激光雷达精度高和稳定性高的特点,然而需要提到的是,多线激光雷达在保留了传统优势的同时,也有着激光雷达类似的局限性,且一旦出现故障,会导致整个系统宕机,目前这类方案主要应用于大多数商用机器人,不过其高昂的成本也让大多数企业难以承受。

因此,在此背景下,行业一方面在进一步完善激光雷达方案的同时,另一方面也在探索视觉方案。目前,以视觉为主导的融合技术方案,在市面上虽然还相对较少,但随着计算机视觉技术多年来的发展,已经有了成熟方案,INDEMIND的多传感器融合技术便是其中之一。

与激光雷达方案不同,INDEMIND多传感器融合技术在实现上,设计了以视觉传感器为主导的标准化、模块化的多传感器融合架构,通过遵循INDEMIND的标准定义接口,可快速加入IMU、里程计、激光、GNSS等多种传感器,实现“积木式”加装,结合双目立体视觉技术,能够实现高精度、高稳定性、低成本的3D环境感知,走出了不同于激光雷达方案的All IN ONE新路径。

众多周知,信息量丰富是视觉的优势,但也导致对算力要求的大幅提升。由于需要处理的环境信息量巨大,对于平台的算力要求极高,同时视觉受环境光线影响严重,如何解决这些难题,是走通视觉方案的关键。

因此,INDEMIND在研发过程中,对它们进行了长期针对性解决。

• 降低算力要求

算法&硬件优化:采用增量优化的方式,分段处理,并在区段间建立先验信息,有效降低了平台计算压力,提高计算效率。

硬件加速:在硬件上,对于视觉处理采用neon加速、GPU加速、DSP加速等方式,提升计算性能,降低算力要求。

• 提高性能

传感器更丰富:基于INDEMIND多传感器融合架构,可融合超过4种以上的传感器,通过紧耦合方式组合,对于环境的容忍度更高,能够保障在部分传感器出现异常的同时,系统仍能保持正常运行,提高鲁棒性。

误差补偿:为了提升精度,INDEMIND对系统中的视觉、IMU、里程计等每个传感器都进行了实时误差建模、估计及补偿,能够有效保障在实时运行过程中的精度和稳定性。

野值判定与剔除:由于传感器较多,视觉、激光、里程计、IMU等不同传感器产生的噪点,对于系统的稳定性和精度影响较大,因此,INDEMIND对于各个传感器的数据,进行了野值判定及剔除,进一步增进系统对于原始传感器数据的容错能力,提升最终的稳定性和精度。

与此同时,基于INDEMIND立体视觉技术,可获取丰富的3D环境信息,配合上层决策,对于实现智能避障、路径规划、人机交互提供了必要的前提条件。

目前,经过长期验证,搭载INDEMIND多传感器融合技术的测试机器人,定位精度可达厘米级,<5cm(RMS),达到激光融合方案的同等精度水平。在智能避障方面,能够实现三维立体避障,精度<1%,结合INDEMIND智能决策引擎技术,可实现策略化避障,提升安全决策水平。同时,在交互方面,基于智能决策引擎技术,能够根据指令实现目标跟踪、指定区域作业等多种个性化功能,提升机器人人机、物机交互能力。

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2573

    文章

    54368

    浏览量

    786058
  • 测试
    +关注

    关注

    8

    文章

    6027

    浏览量

    130718
  • 机器人
    +关注

    关注

    213

    文章

    30580

    浏览量

    219572
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    传感器技术与物联网IOT技术如何融合发展

    : 一、技术融合路径:从数据采集到智能决策 传感技术升级:物联网的“神经末梢” 微型化与集成化 :MEMS(微机电系统)传感器将温度、压力、
    的头像 发表于 11-05 09:40 238次阅读

    动态追踪+传感器融合:矿山皮带智能监测的突破之道 #人工智能 #AI

    传感器
    jf_60804796
    发布于 :2025年09月02日 10:38:41

    变压振动温度传感器模态监测技术解析与应用展望

    功能,构建起变压健康状态的"立体感知网络",为电力系统的安全稳定运行提供关键技术保障。【模态检测技术原理】传感器采用三参数协同检测
    的头像 发表于 09-01 13:49 466次阅读
    变压<b class='flag-5'>器</b>振动温度<b class='flag-5'>传感器</b>的<b class='flag-5'>多</b>模态监测<b class='flag-5'>技术</b>解析与应用展望

    汽车传感器融合技术的发展与挑战

    来源:本文编译自semiengineering作者:ANNMUTSCHLER在汽车设计领域,传感器融合正变得日益流行且复杂。它将多种类型的传感器集成到单个芯片或封装中,并智能地将数据路由到所需之处
    的头像 发表于 08-29 11:56 1757次阅读
    汽车<b class='flag-5'>传感器</b><b class='flag-5'>融合</b><b class='flag-5'>技术</b>的发展与挑战

    机器人竞技幕后:磁传感器芯片激活 “精准感知力”

    地磁基准的惯性导航系统可持续提供可靠数据。实测显示,搭载昆泰芯 KTM59 系列融合传感器的机器人,在复杂动态环境中定位可靠性达 99.7%,较单一传感器方案提升 27%。 磁
    发表于 08-26 10:02

    霍尔传感器在智慧小区燃气联网监测中的应用方案与解析

    燃气表叶轮/涡轮结构,支持宽温域(-40℃~+85℃)和抗应力设计‌。 ‌传感器融合‌:霍尔传感器与温度传感器、压力
    发表于 08-13 11:05

    基于传感器融合的切割深度动态补偿与晶圆 TTV 协同控制

    影响,单一传感器获取的信息存在局限性,难以实现切割深度的精确动态补偿与 TTV 的有效控制 。传感器融合技术通过整合
    的头像 发表于 07-21 09:46 374次阅读
    基于<b class='flag-5'>多</b><b class='flag-5'>传感器</b><b class='flag-5'>融合</b>的切割深度动态补偿与晶圆 TTV 协同控制

    物理量传感器自动化测试解决方案

    方案旨在为各类传感器(包括压力传感器、位移传感器、速度传感器、倾角传感器等)提供一套完整的自动
    的头像 发表于 07-16 17:10 1716次阅读
    <b class='flag-5'>多</b>物理量<b class='flag-5'>传感器</b>自动化测试解决<b class='flag-5'>方案</b>

    AGV机器人如何实现毫秒级避障?深度解析传感器融合的核心技术

    一、AGV传感器融合实时避障系统介绍 1.简介 传感器融合技术是机器人实现全覆盖避障的关键,其
    的头像 发表于 05-28 14:21 963次阅读
    AGV机器人如何实现毫秒级避障?深度解析<b class='flag-5'>多</b><b class='flag-5'>传感器</b><b class='flag-5'>融合</b>的核心<b class='flag-5'>技术</b>

    求助,关于传感器融合库的使用问题求解

    试验,找到了一些问题点,希望能得到官方的技术支持。 问题1:原先我水平旋转传感器,航向角的误差很大,比如说误差30度。通过我反复测试后发现是陀螺仪零漂的问题,motionfx库设置静态时校准零漂,但是当
    发表于 04-27 08:59

    融合视觉传感器厂商锐思智芯完成B轮融资

    领域的芯片研发及整体方案提供商,核心技术为其独创的Hybrid Vision融合视觉传感技术,核心产品是
    的头像 发表于 04-16 18:21 637次阅读

    ADI传感器进军人形机器人等,多款方案受关注

    、Voyager4无线数据采集模块、压力变送器集成芯片及工厂校准系统等,展示了ADI在工业、汽车以及人形机器人、低空经济等方面的传感器技术和产品实力。   锂电热失控监测, 传感器
    的头像 发表于 04-02 17:11 2272次阅读
    ADI<b class='flag-5'>传感器</b>进军人形机器人等,多款<b class='flag-5'>方案</b>受关注

    康谋应用 | 基于传感器融合的海洋数据采集系统

    在海洋监测与无人艇控制领域,数据采集面临数据噪声误差、融合协同等挑战。本文康谋深度剖析基于传感器融合的海洋数据采集系统交付案例,详细解析其方案
    的头像 发表于 03-12 09:40 855次阅读
    康谋应用 | 基于<b class='flag-5'>多</b><b class='flag-5'>传感器</b><b class='flag-5'>融合</b>的海洋数据采集系统

    BEVFusion —面向自动驾驶的多任务传感器高效融合框架技术详解

    BEVFusion 技术详解总结——面向自动驾驶的多任务传感器高效融合框架原始论文:*附件:bevfusion.pdf介绍(Introduction)背景:自动驾驶系统配备了多种
    的头像 发表于 02-26 20:33 5969次阅读
    BEVFusion —面向自动驾驶的多任务<b class='flag-5'>多</b><b class='flag-5'>传感器</b>高效<b class='flag-5'>融合</b>框架<b class='flag-5'>技术</b>详解

    如何利用传感器融合改进工业 4.0 生产的流程和物流

    添加(融合)第二种传感器技术的信息来克服。添加人工智能 (AI) 和机器学习 (ML) 功能可以增强传感器融合的能力。 在实施
    的头像 发表于 01-26 21:32 1153次阅读
    如何利用<b class='flag-5'>传感器</b><b class='flag-5'>融合</b>改进工业 4.0 生产的流程和物流