0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

激光雷达、单目摄像头、双目摄像头原理和优缺点

不止技术 2022-03-26 15:58 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

单目摄像头定位最大的优点是便宜,定位有多种思路,比较典型的有两种

1)间接定位

运动主体可以通过识别一些不动的物体作为参照,间接进行定位。但这个对于机器人来说非常难。因为外界的环境通过摄像头传入机器人的都是数字化的信息,具体就是像素点,数字化的信息通过识别物体的方式进行定位,是一件非常吃力的事情。

有一个变种的方案很方便实施,就是二维码方案,机器人识别二维码是非常容易的,通过知晓二维码的宽度(只有知晓先验大小,才能判断远近),与不同二维码所代表的地标位置,机器人可以仅仅通过单目2D摄像头方便的推算出自己的绝对位姿。以前的VR设备,如HTC VIVE,多采用这种方式实现定位。这个方案不方便之处在于要提前部署二维码。

2)单目SLAM

单目SLAM要做到比较鲁棒的定位,需要两个阶段, 分为前端的视觉里程计和后端的回环机制。该方案的问题包含初始化尺度问题和实际工程实施中计算量实时性问题。

尺度问题,是由2D成像理论内在特点决定的,因为没有深度信息,大小和远近是可以成比例缩放的, 反映到单目SLAM, 在初始化阶段,必须运动主体有平移的动作,来确定一个尺度基准,这个尺度基准是无法与测量单位“m,cm,mm”对应的,只是自己的一个单位, 后续的建图和定位都是基于这个单位来进行, 建立的地图和定位理论上可以等比例缩放。

计算量问题,在于SLAM算法本身的复杂性,勉强在嵌入式设备上跑,计算资源基本耗尽。在实践中可以从算法并行计算方面进行探索,或者选择高性能的计算平台。

单目SLAM 分为特征点法和直接法,考虑到对周遭环境的鲁棒性,一般采用特征点法,就是采用人工设计的角点,作为连续帧进行地标匹配。角点肯定是稀疏的,所以建图只是作为定位的辅助地标来做使用, 不能指导避障和导航。

主动光深度摄像头(3D)

这种摄像头在2D摄像头的基础上,增加红外发射和接收装置,在2D RGB像素上增加深度(距离)信息。比较有名的产品有微软的Kinect,苹果最新手机产品IphoneX会配备这种摄像头,提供给用户VR使用体验和增强人脸识别FaceId的准确度。

深度摄像头在定位方面主要是深度SLAM方案。 相对于单目SLAM, 因为每个像素有了深度信息, 这样尺度问题就不存在了,不需要运动主体做平移运动来做初始化动作。有了深度信息,理论上建图是可以做稠密图,可以做三维建模。

它的缺点也很明显,除了跟2D一样算法计算量偏大,红外主动光非常容易受到其它强光的影响, 这样在室外基本就退化成一个2D摄像头了。 对于一些透光介质,如玻璃,深度信息是无法得到的。

双目摄像头

两个摄像头,光心距离固定。双目摄像头通过视差,可以间接得到两个摄像头共视像素的深度信息。双目摄像头比较像人的眼睛, 人可以通过双眼,直接估计出眼前物体的相对远近。对于计算机来说,通过同一时刻两个摄像头分别拍的两帧图像,根据视差的几何关系,可以算出像素的深度,达到跟主动光深度摄像头一样的效果。

相比主动光深度摄像头, 它的优点是受环境光线的影响比较小,可以在室外自动驾驶汽车上应用。缺点是像素的深度信息不能直接获取,需要不小的运算量通过视差几何关系计算获得。

双目摄像头本质上就是一个深度摄像头,只是获取深度信息的手段不同,所以定位也可以应用深度SLAM方案。

激光雷达

激光雷达是目前定位选择的主流传感器,带自主导航的室内扫地机的商用产品,一般都会配备激光雷达。在自动驾驶领域,高精地图的采集及定位应用, 使用的是多线激光雷达方案。

激光雷达分为单线和多线, 单线雷达只能扫描一个平面的障碍,所以直接出来的是一个2D地图。 多线雷达(有16线,32线,64线)产品,通过多个扫描面的组合,可以给出丰富的环境3D点云。

激光雷达定位, 主要是激光SLAM算法,跟视觉SLAM一样,也分前端雷达里程计和后端回环检测矫正。

激光SLAM对CPU的消耗,是远远低于视觉SLAM的,鲁棒性更好,更加稳定。以2D激光SLAM为例,它可以在任意时刻得到某个特定高度水平面的2D障碍轮廓,所以在做前端里程计的时候,连续两帧,计算局部的地图轮廓匹配,可以使用相对比较少的计算量获取相对位移。

激光扫描出的点有准确度很高的深度信息,这样在做后端回环优化的时候,不需要优化某个位姿下的观测值(扫描的点云), 而直接优化位姿。

对于视觉SLAM, 不论是单目SLAM 通过三角测量算出的点云深度,还是深度SLAM中获取到的点深度, 有很大噪声在里面,所以优化要对观测点和位姿一起优化调整。

激光做定位的缺点是受环境如雨、雾的影响比较大,对于透明介质也无法得到准确的深度信息。

pYYBAGHf_HGAdR4UAABmk5nJBnA777.png

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 移动机器人
    +关注

    关注

    2

    文章

    802

    浏览量

    34705
  • 激光雷达
    +关注

    关注

    977

    文章

    4377

    浏览量

    195354
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    车载双目摄像头如何“看见”世界?

    源自:网络 车载双目摄像头(也称立体视觉摄像头,Stereo Camera)模仿人眼的视觉机制,通过两个略有间距的摄像头同时拍摄同一场景,比较两幅图像之间的差异,从而计算出深度信息。
    的头像 发表于 11-13 09:17 650次阅读
    车载<b class='flag-5'>双目</b><b class='flag-5'>摄像头</b>如何“看见”世界?

    索尼4K超高清摄像头模块——FCB-ER8530

    摄像头
    szxuanzhan
    发布于 :2025年08月13日 17:12:43

    创世SD NAND贴片卡:智能摄像头存储难题的完美解决方案 #人工智能 #智能摄像头 #摄像头

    摄像头
    深圳市雷龙发展有限公司
    发布于 :2025年08月05日 11:17:13

    罗森伯格打造车载摄像头应用解决方案

    罗森伯格开发了小型摄像头连接器,专为激光雷达/毫米波雷达以及内外摄像头应用(包括环视、前视、后视和电子后视镜摄像头)的高数据传输需求而设计。
    的头像 发表于 08-04 11:38 1059次阅读

    红外摄像头模组是什么?科技时代的眼睛

    在现代科技迅速发展的背景下,红外摄像头模组逐渐成为各类智能设备中的重要组成部分。无论是在安防监控、智能家居还是汽车领域,红外摄像头模组以其独特的功能和优越的性能,正在改变我们的生活方式。本文将
    的头像 发表于 07-31 10:07 687次阅读
    红外<b class='flag-5'>摄像头</b>模组是什么?科技时代的眼睛

    庐山派K230可以直接使用usb摄像头吗,可以的话摄像头有啥要求吗?

    庐山派K230可以直接使用usb摄像头吗,可以的话摄像头有啥要求吗
    发表于 06-24 07:07

    一文聊聊自动驾驶摄像头

    双目、环视鱼眼、红外补光)在视场角和深度估计方式上各有侧重,对于摄像头来说,高分辨率、高帧率、宽动态范围和低光性能成为其设计的核心指标。
    的头像 发表于 05-05 09:59 860次阅读
    一文聊聊自动驾驶<b class='flag-5'>摄像头</b>

    社区安装IPC摄像头,跟安装一般安防监控摄像头有什么区别?

    为了保护社区或其他公共场所的安全,往往需要安装监控摄像头。但随着越来越多的公共安全事件发生,传统只单纯拍摄和记录画面的监控摄像头已不能满足社区安防的需求,需要更多功能的安防监控摄像头来进行更智能化
    的头像 发表于 04-03 10:00 1596次阅读
    社区安装IPC<b class='flag-5'>摄像头</b>,跟安装一般安防监控<b class='flag-5'>摄像头</b>有什么区别?

    使用RTSP摄像头执行多摄像头多目标Python演示,缺少输出帧是怎么回事?

    使用 RTSP 摄像头执行 多摄像头多目标 Python 演示 。 现场视频每 5 秒出现一次启动和抖动,但帧缺失。 输出生产低 FPS (1 至 0.3 FPS)。 人员检测发生在各种位置,因为实时视频缺少帧。
    发表于 03-06 07:55

    兆易创新网络摄像头解决方案

    根据Omdia估计,2023年全球安防摄像头市场(高清模拟摄像头、网络摄像头、防爆摄像头和热成像摄像头)总体发货量约为1.9亿台,预计到20
    的头像 发表于 02-27 15:39 1721次阅读
    兆易创新网络<b class='flag-5'>摄像头</b>解决方案

    京瓷发布全球首款“摄像头-激光雷达”融合传感器

    近日,京瓷株式会社在传感器技术领域取得了重大突破,成功开发出全球首款独特的“摄像头-激光雷达(Camera-LiDAR)”融合传感器。这款传感器将摄像头激光雷达的光轴完美对齐,并创新
    的头像 发表于 01-20 14:08 1490次阅读

    激光雷达+摄像头融合传感器,有没有搞头?

    摄像头、毫米波雷达等,由于各个传感器的位置不同,提供的数据也不同,所以包括数据融合,时间同步等问题。   最近在CES上,京瓷展示了一套独特的方案,似乎可以解决这些问题。   世界上第一个实现光轴对齐的摄像头+
    的头像 发表于 01-17 00:19 4779次阅读
    <b class='flag-5'>激光雷达</b>+<b class='flag-5'>摄像头</b>融合传感器,有没有搞头?

    车载摄像头的EMC问题案例

    一前言 如今,车载摄像头已经不再仅仅是一个辅助设备,而是逐渐成为了智能驾驶系统中不可或缺的一部分。360度全景监控、行车记录仪以及自动驾驶辅助功能,车载摄像头的应用范围不断拓展,技术也在不断创新
    的头像 发表于 12-18 11:11 2019次阅读
    车载<b class='flag-5'>摄像头</b>的EMC问题案例

    安防监控摄像头气密性测试案例-连拓精密#摄像头气密检测设备

    摄像头
    连拓精密科技
    发布于 :2024年12月11日 15:00:21

    多光谱火焰检测摄像头

    随着工业化进程的加快,火灾安全问题日益受到重视。传统的火焰检测技术主要依赖于温度传感器和烟雾探测器,但这些方法在某些情况下存在响应慢、误报率高等缺陷。为了解决这些问题,多光谱火焰检测摄像头应运而生
    的头像 发表于 12-11 10:50 1093次阅读
    多光谱火焰检测<b class='flag-5'>摄像头</b>