0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

传感技术进一步扩大环境感知的应用机会

CEVA 来源:CEVA 作者:CEVA 2021-09-18 10:21 次阅读

移动计算推动了产品机会的爆发——智能手机、可穿戴设备、可听设备、运动相机等等。传感技术将进一步扩大必须具有环境感知的应用机会。现在,对于运输、机器人、家庭自动化、智能城市、工厂和仓库管理中许多可能的应用来说,通过视觉、雷达或激光雷达传感来进行物体识别和碰撞警告,通过超声波传感器实现短距离的接近侦测,通过IMU进行运动和姿势检测,基于声学的危险声音检测已经很普遍了。说实话,这个清单是无穷无尽的。我们拥有建立一个由智能传感驱动的未来主义的、几乎是科幻小说的世界所需要的所有原材料。但是怎么做呢?

从感知到运动

想一想一个在机场周围移动的机器人助手。帮助乘客办理登机手续,找到他们的登机口,获得航班的详细信息。这个机器人必须在机场内自由移动,不能撞到在各个方向行走或奔跑的人,或可能是静止的或有时可能移动的物体。这个机器人助手应该知道如何在一个不断变化的环境中进行智能导航。而且,它必须在一定的可能性范围内,能够理解并响应自然语言的语音命令。我们将在下面讨论这个问题。

光学和接近传感器是智能导航技术的一个起点。这些传感器信息输入到一个被称为SLAM的复杂算法中,并生成一个不断移动变化的的空间的点阵云图且随之变化更新。弱光条件下,SLAM技术正越来越多地被航位推算所加强,因为在弱光条件下,光学的效果较差。这种方法从一个已知的位置追踪运动,从车轮运动、加速计和其他传感器中获取信息。同时,接近传感器提供输入,避免撞上一个物体或一个人。我们已经有多个传感器向算法提供信息,以构建地图和定位机器人助手在地图中的位置。

基于摄像头的SLAM需要高精度的线性方程求解,矢量DSP平台很适合。基于超声波的接近感测必须从降噪开始,在回声和其他杂波中定位最近的物体,然后进行范围(和方向)计算。这种信号处理非常适合于标量DSP。

从声音到行动

一位乘客看到一个助手,就叫它过来:“嘿,Airbot!” 首先,助理必须识别这个命令和它的来源。这一步需要一些复杂的音频处理,尤其是在机场航站楼这样的嘈杂环境中。识别触发语音命令是任何智能音箱中都会有的基本人工智能。机器人还可以通过beamforming“”波束成形技术检测语音命令的来源方向。这个技术需要更多的信号处理,从多个麦克风在稍微不同的时间检测到的识别命令中找出方向。

我们的机器人助手”滑行”到乘客身边,沿途避开其他障碍物,在几英尺远的地方停下来,问道:“我能为你做些什么?” 它在屏幕上展示了一系列它知道如何回答的问题,然后乘客说,“我想办理登机手续”。我们的机器人首先必须做一些更多的信号处理,以减少该音频信号的噪音,部分通过波束成形,部分通过回声消除。然后,它必须识别这个命令。

自然语言处理(NLP)可以在云端处理,但机场网络有很大的负荷。因此,NLP必须在本地处理,以便快速响应。机器人应快速响应,以提供令人满意的用户体验。它要求乘客直接看着它的屏幕,拍一张照片,然后要求乘客插入一个图片ID,如护照身份页。然后它可以比较这些图片以增加安全性,这需要一个强大的可编程神经网络引擎。

办理登机手续的剩余步骤?那就有传统的嵌入式处理就够了。

将一切结合起来

智能传感设备必须使用一个支持同时处理多个传感器的平台。它应该为前端信号处理提供强大的标量DSP支持,为基于图像的计算和SLAM提供矢量DSP支持。对语音和视觉人工智能的神经网络支持,也是一个矢量DSP,但对神经网络有特殊的扩展,同时在SDK中有丰富的软件编译器和库,为你提供这些技术领域的所有基础支持。

CEVA的 “SensPro2 ”是传感平台提供动力的方案之一。基于CEVA在视觉、音频、SLAM和人工智能方面的强大背景,SensPro2是一款用于多任务传感和多传感器的人工智能(包括摄像头、雷达、激光雷达、飞行时间、麦克风和惯性测量单元)的高度可扩展和增强的第二代高性能传感器控制中心SensorHub DSP。

责任编辑:haq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2525

    文章

    48129

    浏览量

    740182
  • 智能手机
    +关注

    关注

    66

    文章

    18069

    浏览量

    177076
  • 机器人
    +关注

    关注

    206

    文章

    27052

    浏览量

    201431

原文标题:传感器,到处都是传感器。现在我该怎么办?

文章出处:【微信号:CEVA-IP,微信公众号:CEVA】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    卓驭科技与高通合作宣布进一步推动汽车行业智能驾驶技术的发展

    今日,深圳市卓驭科技有限公司(以下简称:卓驭科技)与高通技术公司宣布扩展双方的技术合作,利用基于Snapdragon Ride平台的全新智能驾驶产品,进一步推动汽车行业智能驾驶技术的发
    的头像 发表于 04-25 16:25 593次阅读
    卓驭科技与高通合作宣布<b class='flag-5'>进一步</b>推动汽车行业智能驾驶<b class='flag-5'>技术</b>的发展

    未来已来,多传感器融合感知是自动驾驶破局的关键

    驾驶的关键的是具备人类的感知能力,多传感器融合感知正是自动驾驶破局的关键。昱感微的雷视体多传感器融合方案就好像
    发表于 04-11 10:26

    三星携手红帽进一步扩大CXL存储生态系统

    2023年12月27日——三星宣布,与开源软件提供商红帽(Red Hat)携手,首次成功在真实用户环境中验证了Compute Express Link(CXL)内存技术的运行,这将进一步扩大
    的头像 发表于 12-27 10:34 271次阅读

    有什么方法可以进一步提高AD7714的分辨率啊?

    级放大再加给AD7714时,测得人分辨率还要低些。由于是用干电池得到AD7714的输入信号,该信号相对来说很稳定,而且板上的噪声也不是太大。请问各位大虾,还有什么方法可以进一步提高AD7714的分辨率啊?不胜感激!
    发表于 12-25 06:33

    【ELF 1开发板试用】板载资源测试4:体验温湿度传感

    ,对比数据,进一步理解传感器检测技术。2、从测试过程中理解了ELF 1开发板命令行操作方式。3、从测试过程中进一步熟悉了ELF 1开发板板载资源。总之,飞凌嵌入式ELF1开发板资源丰富
    发表于 12-18 11:09

    ad9106如何将波形频率设置为进一步降低到10Hz?

    你好,我有个小问题。我使用100m时钟芯片。每个时钟只有10ns,ad9106寄存器的最小输出波形只有100Hz。如何将波形频率设置为进一步降低到10Hz?我已将配置设置为相关寄存器的最大值。拍
    发表于 12-01 06:12

    请问如何进一步减小DTC控制系统的转矩脉动?

    如何进一步减小DTC控制系统的转矩脉动?
    发表于 10-18 06:53

    STM8在待机模式如何进一步降低功耗?

    有什么方法可以进一步降低待机模式的功耗
    发表于 10-12 07:23

    复合集流体产业化进程进一步提速

    复合集流体产业化进程进一步提速。
    的头像 发表于 09-21 09:52 874次阅读
    复合集流体产业化进程<b class='flag-5'>进一步</b>提速

    工业应用中的精密倾斜感知

    较小的尺寸、低廉的成本和易于集成而广受欢迎。MEMS 技术的最新进展进一步降低了噪声、尺寸和功耗。根据所使用的算法,倾角计主要分为两类:• 静态倾角计主要用于静态应用,例如天线或平台稳定和监测、建筑结构
    发表于 09-08 07:03

    16保存多对关联关系的更进一步分析

    编程语言代码
    充八万
    发布于 :2023年07月26日 01:42:57

    深度学习传感器融合技术在自动驾驶汽车感知与定位中的应用研究

    为了实现自主决策和驾驶控制,无人驾驶汽车(AV)配备了传感器,利用5G等通信技术进一步进步,既可以感知周围环境,也可以
    发表于 06-07 11:34 0次下载
    深度学习<b class='flag-5'>传感</b>器融合<b class='flag-5'>技术</b>在自动驾驶汽车<b class='flag-5'>感知</b>与定位中的应用研究

    RISC-V CPU启动进一步分析(1)#操作系统

    操作系统
    学习硬声知识
    发布于 :2023年06月01日 13:44:34

    系统调用的进一步讲解(2)#操作系统

    操作系统
    学习硬声知识
    发布于 :2023年05月19日 19:44:11

    什么是智能感知技术?智能感知技术与人工智能的关系

    智能感知技术是指将物理世界的信号通过摄像头、麦克风或者其他传感器的硬件设备,借助语音识别、图像识别等前沿技术,映射到数字世界,再将这些数字信息进一步
    发表于 05-12 11:44 5928次阅读
    什么是智能<b class='flag-5'>感知</b><b class='flag-5'>技术</b>?智能<b class='flag-5'>感知</b><b class='flag-5'>技术</b>与人工智能的关系