0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

SLAM成为应用传感器融合的绝佳示例

CEVA 来源:CEVA 作者:CEVA 2022-04-01 10:18 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

众所周知,传感器在配合使用时效果最佳。对于同步定位与地图构建 (SLAM) 来说更是如此。SLAM 在 AR/VR 领域扮演着重要的角色,可以根据用户的姿势调整场景,避免无人机机器人这样的应用在使用过程中的碰撞,用途广泛。SLAM市场预计到2023年将增长至4.65亿美元,年复合增长率为36%,为大多数开发者提供了绝佳机遇。

手机上将 SLAM 应用于室内导航可能会在规模庞大的基础平台市场中占据主导地位。GPS 不能在室内工作,基于信标的导航只能在具有信标基础设施的区域工作。而 SLAM 则可以在任何提供室内地图的地方工作,符合大多数楼宇自控管理系统的低成本期望。将该区域的场景与用户在该区域行走时的姿势和运动融合到了一起,使得在此处应用 SLAM 成为了应用传感器融合的绝佳示例。

开箱即用的方案

我将首先描述如何在我们的 CEVA SensPro Sensor Hub DSP 硬件的基础上,结合我们的 SLAM 和 MotionEngine 软件模块,集成并测试这个解决方案,以调节和管理运动输入。我们需要一个摄像头和惯性测量传感器,一个 CPU 和 DSP 。我们将 CPU 用来承载MotionEngine 和 SLAM 框架,并用 DSP 来执行 SLAM 算法来减轻任务负担。

为了更简单的解释,我将首先从 OrbSLAM 算法开始,这是一种广泛使用的执行开放源代码的算法。它将执行三个主要功能。跟踪做(视觉的)逐帧注册,并在当前地图上定位新的帧。构图将点添加到地图,并通过创建和求解一组复杂的线性方程进行局部优化。循环闭合通过在返回到曾经到达过的点上进行修正来进行全局优化。这是通过求解一组大型线性方程式来实现的。

其中一些功能可以非常有效地运行在CPU内核的主机应用程序内,同时还有你的应用程序所特有的控制和管理功能。某些功能必须在 DSP 处理器中运行才实用或获得竞争优势。例如,跟踪在可能在CPU 中管理 1 帧/秒 (fps),其中特征提取占算法运行时间的 40%。相比之下,DSP 实现可管理 30帧/秒 (fps),这种分辨率对于视频和 IMU 之间的细粒度关联非常重要。

这种优势的原因很容易理解。DSP 实现提供了非常高的并行处理能力,提供定点数/浮点数支持,这在跟踪和求解线性方程中至关重要。此外,还有一个特殊指令集来加速特征提取。主机和 DSP 之间的简单链接可以将 DSP 看作加速器,从而将密集型计算分流到 SensPro。

视觉融合 IMU

我们提供了两个关键组件:使用 CEVA-SLAM SDK 产品的视觉SLAM 和 CEVA MotionEngine 软件,该软件可以非常精确地处理六个自由度中的三个自由度的IMU输入。IMU 和视频信息的融合取决于迭代算法,该算法通常是根据应用要求定制的。最后一步将视觉数据与运动数据联系起来,以生成精确的定位和映射估计值。 CEVA 提供成熟的视觉SLAM 和 IMU MotionEngine软件作为开发融合算法的坚实基础。构成这样的算法密集型功能将在DSP上运行最快,比如我们的SensPro2平台。

测试原型

构建原型平台后,将如何去测试?有多个 SLAM 数据集可用。Kitti 就是其中一个,EuroC 是另一个。在下面的例子中,我展示了 OpenCV 的实现与我们的 CEVA-SLAM SDK 实现的精度比较。您会想对您的产品做类似的分析。

融合您自己的方法

正如我前面提到的,构建 SLAM 平台有许多方法。也许您不想从 OrbSLAM 开始,或者您想融合自研的算法或是差异化的算法。SensPro Sensor Hub DSP 均可支持。

原文标题:CEVA凭借SensPro Sensor Hub DSP协助客户有效实现传感器融合

文章出处:【微信公众号:CEVA】欢迎添加关注!文章转载请注明出处。

审核编辑:汤梓红

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2578

    文章

    55875

    浏览量

    795683
  • CEVA
    +关注

    关注

    1

    文章

    201

    浏览量

    77342
  • SLAM
    +关注

    关注

    24

    文章

    461

    浏览量

    33463

原文标题:CEVA凭借SensPro Sensor Hub DSP协助客户有效实现传感器融合

文章出处:【微信号:CEVA-IP,微信公众号:CEVA】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    自动驾驶传感器融合与后融合技术上有何区别?

    成为非常重要的技术方向。 简单来说,融合的目的就是将不同传感器捕捉到的碎片化信息拼凑成一张完整且准确的周围世界地图。而在实现这一目标的过程中,行业内逐渐分化出了两种主要的路径,即前融合
    的头像 发表于 05-10 09:09 214次阅读
    自动驾驶<b class='flag-5'>传感器</b>前<b class='flag-5'>融合</b>与后<b class='flag-5'>融合</b>技术上有何区别?

    自动驾驶多传感器融合,到底提前融合了什么?

    [首发于智驾最前沿微信公众号]自动驾驶里的多传感器融合,本质是把不同来源的信息拼在一起,让系统对环境的理解更完整。摄像头提供颜色和语义,激光雷达提供三维结构,毫米波雷达提供距离和速度,这些信息如果
    的头像 发表于 04-16 09:16 709次阅读
    自动驾驶多<b class='flag-5'>传感器</b>前<b class='flag-5'>融合</b>,到底提前<b class='flag-5'>融合</b>了什么?

    ROS2 SLAM建图与导航实战--基于米尔RK3576开发板

    teleop_twist_keyboard teleop_twist_keyboard 第二章:机器人建模与仿真集成 2.1 URDF/Xacro基础与传感器配置 URDF (Unified Robot Description
    发表于 03-12 17:55

    ICU-X0201 Hello Chirp示例应用用户指南

    ICU-X0201 Hello Chirp示例应用用户指南 在嵌入式产品中集成超声传感器时,开发合适的应用程序是关键的一环。InvenSense的ICU-X0201 Hello Chirp示例应用为
    的头像 发表于 12-26 10:25 667次阅读

    振动温度监测传感器:智能设备健康管理

    文章由山东华科信息技术有限公司提供在工业设备智能化升级的浪潮中,振动温度监测传感器凭借其双参数同步采集能力,成为设备状态感知的核心器件。该类传感器通过融合振动加速度检测与温度监测功能,
    的头像 发表于 12-16 09:31 695次阅读
    振动温度监测<b class='flag-5'>传感器</b>:智能设备健康管理

    通用型液位超声波传感器GPLUS:设计与应用的绝佳之选

    通用型液位超声波传感器GPLUS:设计与应用的绝佳之选 在电子工程师的日常设计工作中,液位监测是一个常见且关键的需求。今天,我要为大家介绍一款来自SSI Technologies, LLC(安费诺
    的头像 发表于 12-11 14:25 611次阅读

    从单一传感器到多技术融合 蓝鹏打造工业测量一站式解决方案

    1X1X0.5mm(长X宽X深)缺陷。 从单一传感器的精准应用,到多技术融合的系统级方案,蓝鹏以多品类传感器技术储备为根基,以自研高精度测量产品为核心,构建起覆盖光电、激光、视觉、X射线及多
    发表于 12-08 14:57

    振动传感器:原理、技术与实用指南

    量与振动加速度成正比。 示例: 某压电式振动传感器在加速度为 10g 时,输出电荷为 100pC。 电容式振动传感器 原理: 通过改变电容极板间的距离或相对面积来响应振动,从而导致电容值的变化。 数据: 一款高精度电容式振动
    的头像 发表于 11-04 10:11 835次阅读
    振动<b class='flag-5'>传感器</b>:原理、技术与实用指南

    有哪些常见的传感器数据失真原因?

    路问题,结合工业常用传感器(如 CT/PT、温度、压力、液位传感器)的特性,具体原因及场景示例如下: 一、维度 1:传感器自身硬件故障(核心内在原因)
    的头像 发表于 09-24 11:53 3231次阅读

    汽车传感器融合技术的发展与挑战

    来源:本文编译自semiengineering作者:ANNMUTSCHLER在汽车设计领域,传感器融合正变得日益流行且复杂。它将多种类型的传感器集成到单个芯片或封装中,并智能地将数据路由到所需之处
    的头像 发表于 08-29 11:56 2169次阅读
    汽车<b class='flag-5'>传感器</b><b class='flag-5'>融合</b>技术的发展与挑战

    机器人竞技幕后:磁传感器芯片激活 “精准感知力”

    2025 世界人形机器人运动会于 8 月 17 日圆满收官,赛场上机器人在跑步、跳跃、抓取等项目中的精彩表现,背后是运动控制、环境感知等技术的迭代升级。而在这些技术中,磁传感器芯片凭借独特优势,成为
    发表于 08-26 10:02

    什么是照度传感器和接近传感器

    近年来,照度传感器和接近传感器在我们身边各类设备中的应用越来越广泛。除了单独使用照度传感器和接近传感器外,将这些传感器组合使用的情况也在不断
    的头像 发表于 08-22 14:46 3261次阅读
    什么是照度<b class='flag-5'>传感器</b>和接近<b class='flag-5'>传感器</b>

    如何选择酒精传感器

    鉴于可用技术、其应用及其性能特征的细微差别,选择适合您的特定需求的酒精传感器可能是一个复杂的过程。本指南将通过探索酒精传感器的类型、其原理、应用以及表格格式的比较分析,帮助您浏览选项并做出明智的决定
    的头像 发表于 07-21 11:37 1684次阅读
    如何选择酒精<b class='flag-5'>传感器</b>

    需要将lsm6ds3tr-c传感器集成到展锐平台android系统,请问有示例文档吗?

    您好,我现在需要将lsm6ds3tr-c传感器集成到展锐平台android系统,请问有示例文档吗
    发表于 06-18 08:28

    VirtualLab:CMOS传感器仿真

    CMOS传感器由于其从每个像素单独提取信息的能力以及其低成本和低功耗,已成为图像传感器的主导技术。后者主要归因于近年来CMOS像素尺寸的快速缩小。然而,小的特征尺寸也使器件功能逼近极限,因为具有非常
    发表于 06-16 08:49