0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

SLAM成为应用传感器融合的绝佳示例

CEVA 来源:CEVA 作者:CEVA 2022-04-01 10:18 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

众所周知,传感器在配合使用时效果最佳。对于同步定位与地图构建 (SLAM) 来说更是如此。SLAM 在 AR/VR 领域扮演着重要的角色,可以根据用户的姿势调整场景,避免无人机机器人这样的应用在使用过程中的碰撞,用途广泛。SLAM市场预计到2023年将增长至4.65亿美元,年复合增长率为36%,为大多数开发者提供了绝佳机遇。

手机上将 SLAM 应用于室内导航可能会在规模庞大的基础平台市场中占据主导地位。GPS 不能在室内工作,基于信标的导航只能在具有信标基础设施的区域工作。而 SLAM 则可以在任何提供室内地图的地方工作,符合大多数楼宇自控管理系统的低成本期望。将该区域的场景与用户在该区域行走时的姿势和运动融合到了一起,使得在此处应用 SLAM 成为了应用传感器融合的绝佳示例。

开箱即用的方案

我将首先描述如何在我们的 CEVA SensPro Sensor Hub DSP 硬件的基础上,结合我们的 SLAM 和 MotionEngine 软件模块,集成并测试这个解决方案,以调节和管理运动输入。我们需要一个摄像头和惯性测量传感器,一个 CPU 和 DSP 。我们将 CPU 用来承载MotionEngine 和 SLAM 框架,并用 DSP 来执行 SLAM 算法来减轻任务负担。

为了更简单的解释,我将首先从 OrbSLAM 算法开始,这是一种广泛使用的执行开放源代码的算法。它将执行三个主要功能。跟踪做(视觉的)逐帧注册,并在当前地图上定位新的帧。构图将点添加到地图,并通过创建和求解一组复杂的线性方程进行局部优化。循环闭合通过在返回到曾经到达过的点上进行修正来进行全局优化。这是通过求解一组大型线性方程式来实现的。

其中一些功能可以非常有效地运行在CPU内核的主机应用程序内,同时还有你的应用程序所特有的控制和管理功能。某些功能必须在 DSP 处理器中运行才实用或获得竞争优势。例如,跟踪在可能在CPU 中管理 1 帧/秒 (fps),其中特征提取占算法运行时间的 40%。相比之下,DSP 实现可管理 30帧/秒 (fps),这种分辨率对于视频和 IMU 之间的细粒度关联非常重要。

这种优势的原因很容易理解。DSP 实现提供了非常高的并行处理能力,提供定点数/浮点数支持,这在跟踪和求解线性方程中至关重要。此外,还有一个特殊指令集来加速特征提取。主机和 DSP 之间的简单链接可以将 DSP 看作加速器,从而将密集型计算分流到 SensPro。

视觉融合 IMU

我们提供了两个关键组件:使用 CEVA-SLAM SDK 产品的视觉SLAM 和 CEVA MotionEngine 软件,该软件可以非常精确地处理六个自由度中的三个自由度的IMU输入。IMU 和视频信息的融合取决于迭代算法,该算法通常是根据应用要求定制的。最后一步将视觉数据与运动数据联系起来,以生成精确的定位和映射估计值。 CEVA 提供成熟的视觉SLAM 和 IMU MotionEngine软件作为开发融合算法的坚实基础。构成这样的算法密集型功能将在DSP上运行最快,比如我们的SensPro2平台。

测试原型

构建原型平台后,将如何去测试?有多个 SLAM 数据集可用。Kitti 就是其中一个,EuroC 是另一个。在下面的例子中,我展示了 OpenCV 的实现与我们的 CEVA-SLAM SDK 实现的精度比较。您会想对您的产品做类似的分析。

融合您自己的方法

正如我前面提到的,构建 SLAM 平台有许多方法。也许您不想从 OrbSLAM 开始,或者您想融合自研的算法或是差异化的算法。SensPro Sensor Hub DSP 均可支持。

原文标题:CEVA凭借SensPro Sensor Hub DSP协助客户有效实现传感器融合

文章出处:【微信公众号:CEVA】欢迎添加关注!文章转载请注明出处。

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2573

    文章

    54368

    浏览量

    786051
  • CEVA
    +关注

    关注

    1

    文章

    191

    浏览量

    77054
  • SLAM
    +关注

    关注

    24

    文章

    456

    浏览量

    33187

原文标题:CEVA凭借SensPro Sensor Hub DSP协助客户有效实现传感器融合

文章出处:【微信号:CEVA-IP,微信公众号:CEVA】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    有哪些常见的传感器数据失真原因?

    路问题,结合工业常用传感器(如 CT/PT、温度、压力、液位传感器)的特性,具体原因及场景示例如下: 一、维度 1:传感器自身硬件故障(核心内在原因)
    的头像 发表于 09-24 11:53 1053次阅读

    汽车传感器融合技术的发展与挑战

    来源:本文编译自semiengineering作者:ANNMUTSCHLER在汽车设计领域,传感器融合正变得日益流行且复杂。它将多种类型的传感器集成到单个芯片或封装中,并智能地将数据路由到所需之处
    的头像 发表于 08-29 11:56 1757次阅读
    汽车<b class='flag-5'>传感器</b><b class='flag-5'>融合</b>技术的发展与挑战

    机器人竞技幕后:磁传感器芯片激活 “精准感知力”

    2025 世界人形机器人运动会于 8 月 17 日圆满收官,赛场上机器人在跑步、跳跃、抓取等项目中的精彩表现,背后是运动控制、环境感知等技术的迭代升级。而在这些技术中,磁传感器芯片凭借独特优势,成为
    发表于 08-26 10:02

    什么是照度传感器和接近传感器

    近年来,照度传感器和接近传感器在我们身边各类设备中的应用越来越广泛。除了单独使用照度传感器和接近传感器外,将这些传感器组合使用的情况也在不断
    的头像 发表于 08-22 14:46 2478次阅读
    什么是照度<b class='flag-5'>传感器</b>和接近<b class='flag-5'>传感器</b>

    VirtualLab:CMOS传感器仿真

    CMOS传感器由于其从每个像素单独提取信息的能力以及其低成本和低功耗,已成为图像传感器的主导技术。后者主要归因于近年来CMOS像素尺寸的快速缩小。然而,小的特征尺寸也使器件功能逼近极限,因为具有非常
    发表于 06-16 08:49

    AGV机器人如何实现毫秒级避障?深度解析多传感器融合的核心技术

    一、AGV多传感器融合实时避障系统介绍 1.简介 传感器融合技术是机器人实现全覆盖避障的关键,其原理仿效人脑综合处理信息的方式:通过协调多种传感器
    的头像 发表于 05-28 14:21 963次阅读
    AGV机器人如何实现毫秒级避障?深度解析多<b class='flag-5'>传感器</b><b class='flag-5'>融合</b>的核心技术

    【「# ROS 2智能机器人开发实践」阅读体验】视觉实现的基础算法的应用

    结合IMU(惯性测量单元)进行多传感器融合。 三、总结与展望 技术融合趋势 机器人视觉与SLAM的结合(如视觉惯性里程计VIO)是当前研究热点,未来可能进一步结合语义
    发表于 05-03 19:41

    求助,关于传感器融合库的使用问题求解

    试验,找到了一些问题点,希望能得到官方的技术支持。 问题1:原先我水平旋转传感器,航向角的误差很大,比如说误差30度。通过我反复测试后发现是陀螺仪零漂的问题,motionfx库设置静态时校准零漂,但是当
    发表于 04-27 08:59

    融合视觉传感器厂商锐思智芯完成B轮融资

    近日,融合视觉传感器研发商锐思智芯(AlpsenTek)宣布完成B轮融资,本轮投资方包括智慧互联产业基金、浦耀信晔、中车时代投资、智宸投资、毅岭资本等多家机构。 「锐思智芯」是一家新型融合视觉
    的头像 发表于 04-16 18:21 637次阅读

    VirtualLab:CMOS传感器仿真

    CMOS传感器由于其从每个像素单独提取信息的能力以及其低成本和低功耗,已成为图像传感器的主导技术。后者主要归因于近年来CMOS像素尺寸的快速缩小。然而,小的特征尺寸也使器件功能逼近极限,因为具有非常
    发表于 04-07 11:30

    康谋应用 | 基于多传感器融合的海洋数据采集系统

    在海洋监测与无人艇控制领域,数据采集面临数据噪声误差、融合协同等挑战。本文康谋深度剖析基于多传感器融合的海洋数据采集系统交付案例,详细解析其方案架构、系统搭建等内容,展现如何提升数据采集质量,从而推动无人艇自主航行及算法训练!
    的头像 发表于 03-12 09:40 855次阅读
    康谋应用 | 基于多<b class='flag-5'>传感器</b><b class='flag-5'>融合</b>的海洋数据采集系统

    如何利用传感器融合改进工业 4.0 生产的流程和物流

    作者:Jeff Shepard 投稿人:DigiKey 北美编辑 传感器融合将来自多个传感器的数据汇集在一起,让用户更详细、更细致地了解系统运行情况或环境。许多情况下,某种传感器技术的
    的头像 发表于 01-26 21:32 1153次阅读
    如何利用<b class='flag-5'>传感器</b><b class='flag-5'>融合</b>改进工业 4.0 生产的流程和物流

    京瓷发布全球首款“摄像头-激光雷达”融合传感器

    近日,京瓷株式会社在传感器技术领域取得了重大突破,成功开发出全球首款独特的“摄像头-激光雷达(Camera-LiDAR)”融合传感器。这款传感器将摄像头与激光雷达的光轴完美对齐,并创新
    的头像 发表于 01-20 14:08 1490次阅读

    传感器有几种感应方式?

    包括: 机械: 可以采用任何合适的机械/电气开关,但是由于操作机械开关需要一定的力,所以通常使用微型开关。 气动: 这些接近传感器通过破坏或扰乱气流来工作。气动接近传感器是接触式传感器示例
    的头像 发表于 01-16 18:27 886次阅读
    <b class='flag-5'>传感器</b>有几种感应方式?

    雨量水位数据采集终端机RTU:多传感器融合,水文监测数据远程查看

    传感器融合的雨量水位数据采集终端机RTU,正以其卓越的性能和全面的数据采集能力,成为水文监测领域的得力助手。让我们共同迎接精准监测的新时代,为保护水资源、保障人民生命财产安全贡献力量。
    的头像 发表于 12-13 09:49 938次阅读
    雨量水位数据采集终端机RTU:多<b class='flag-5'>传感器</b><b class='flag-5'>融合</b>,水文监测数据远程查看