0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

雪天环境的激光雷达点云实时处理网络研究

3D视觉工坊 来源:数理之家 作者:董亚微 2022-11-25 09:57 次阅读

激光雷达是一种主动传感器,其发射的脉冲光波后利用返回的脉冲计算其与周围物体之间的距离。这种特性,使得激光雷达无论在白天还是夜间,都可以对周围的场景进行详细的3D测量。在现在很多的数据集中,都可以很容易地找到此类测量值,如逐帧点云,这些数据通常以10Hz的频率进行采样,并已用于3D对象检测、语义分割和建图。

尽管与毫米波雷达相比,激光雷达提供了更精确的3D测量,但在恶劣的天气条件下,测量结果很容易退化。与可以透过雾、雪花和雨滴的毫米波雷达不同,激光雷达受到空气中粒子的极大影响。特别是在降雪期间,脉冲信号撞击雪花并得到重影的测量返回传感器,如图1a和1b所示。对于地图构建等应用来说,移除这些测量值、揭示场景的基本几何结构至关重要。这篇文章提出一种雪天环境的激光雷达点云实时处理网络,在去噪方面得到了性能提升,速度也比当前的SOTA算法提升了52倍。

01 方法

1.1 预处理

第一步,将点云转换为距离图像。给定数据集中第k个点云中的点,其对应的强度值,我们可以得到下面的值。

是点到激光雷达中心的距离,是倾角,是方位角。通过离散激光雷达视场(FOV)内的倾角和方位角,我们可以将点云内的每个点投影到球面坐标上,可以得到距离图像

,其中,是索引帧,是垂直分辨率,是水平分辨率。

第二步,是将距离图像压缩到适当的比例。如图1所示,一个很关键的问题是重影测量主要集中在25米的距离内,但激光雷达的最大距离很容易超过150米。我们需要增强车辆周围的点的重要性,并且同时维持点的顺序,因为雪花的强度值几乎都是0,而场景中通常都是具有正的强度值,所以可以提升噪声与场景之间的对比度。最后,要明确,不是每个像素都有对应的值,因为有些方向的点事缺少的,比如天空和一些透明的点。1.2 网络结构本文的网络结构是在参考文献[12]的MWCNN基础上对部分关键点进行了修改。首先,使用残差模块替换所有具有两个环卷积层的卷积层;然后在每个残差模块的第一个ReLU激活函数之后放置一个dropout层,使网络规范化。最后,大幅度减少channel数。最终,设计的网络可以生成对应的残差图

可以满足

1.3 损失函数设为FFT的真值,是基于Haar的DWT。然后可以设计三个新的损失函数:

总损失函数为

02 结果

如表所示,相对于基准而言,本文所提出的网络,在去噪方面可以有同样甚至更好的性能;在召回率比DSOR低0.0310时,准确率和IoU明显高于其他所有的方法。速度比DSOR方法提升了52倍,比DROR方法提升了158倍。考虑到激光雷达的采样频率一般是10Hz,那这种方法应该是能够满足实时工作的最佳方案。

03 结论

这篇文章提出了一种专门用于恶劣天气条件下点云去噪的深度卷积神经网络-LiSnowNet。这种网络可以在没有任何标记数据的情况下进行训练,与最先进的方法相比,可以在7ms内处理10万个点,在降噪方面效果很好。可以提高下游任务的质量,例如雪天的地图构建。

审核编辑:郭婷


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2522

    文章

    47984

    浏览量

    739689
  • 激光雷达
    +关注

    关注

    958

    文章

    3628

    浏览量

    186517

原文标题:IROS2022 | 雪天环境的激光点云处理

文章出处:【微信号:3D视觉工坊,微信公众号:3D视觉工坊】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    激光雷达测距能力的测试原理简析

    激光雷达是一种通过发射激光束来检测目标位置,在进行各种处理后获得目标信息的雷达装置。
    的头像 发表于 12-21 09:25 490次阅读
    <b class='flag-5'>激光雷达</b>测距能力的测试原理简析

    测绘用激光雷达芯片有哪些

    、机器人技术等领域。而激光雷达芯片则是实现这些功能的核心组件。 一、激光雷达芯片的种类 发射芯片:负责产生激光脉冲,通常采用高速脉冲调制器或直接调制器。 接收芯片:负责接收反射回来的光信号,并进行放大、滤波和数字化
    的头像 发表于 12-13 15:30 427次阅读

    单线激光雷达和多线激光雷达区别

    只发射一条激光束,而多线激光雷达则同时发射多条激光束。单线激光雷达通常使用旋转镜和激光二极管的组合来扫描周围
    的头像 发表于 12-07 15:48 2344次阅读

    解析应用实时激光雷达全景分割的中心聚焦网络

    本文提出了一种新的中心对焦网络(CFNet)。具体来说,本文提出了一种中心对焦特征编码(CFFE)模块,它通过移动激光雷达点并填充中心点,显式地建模了原始激光雷达点与虚拟实例中心之间的关系。
    发表于 11-30 10:30 225次阅读
    解析应用<b class='flag-5'>实时</b><b class='flag-5'>激光雷达</b>全景分割的中心聚焦<b class='flag-5'>网络</b>

    小米2D激光雷达拆解图讲解

    本文档的主要内容详细介绍的是小米的2D激光雷达拆解图和讲解。
    发表于 09-22 08:07

    一文通过AEC-Q102车规级芯片测试认证了解激光雷达核心技术及行业格局

    激光雷达平台为小鹏汽车进行了一系列定制化开发,最终提供的车规级量产版本在量程、FOV、密度等多个核心指标上都做到了业内领先水平。 长城将搭载ibeoNEXT激光雷达,欲实现中国首
    发表于 09-19 13:35

    激光雷达的基本构成 激光雷达前景分析

    激光雷达的基本构成 激光雷达前景分析 激光雷达基本构成 激光雷达是利用激光信号进行测距的设备,其基本构成包括
    的头像 发表于 08-23 16:28 2237次阅读

    激光雷达的基本构成 激光雷达由那些部分组成

    、航空航天、地质勘探等领域中得到广泛应用。激光雷达的基本构成包括激光器、光学系统、探测器和数据处理单元等四个部分。 一、激光激光器是
    的头像 发表于 08-23 16:14 5239次阅读

    机械激光雷达的组成包括哪些?

    能够通过激光雷达实时检测和扫描,获得高精度的环境地图,从而在行驶过程中做出正确的决策。本文将详细介绍机械激光雷达的组成,并逐一探索每个部分的功能和原理,以期更好地了解机械
    的头像 发表于 08-23 16:14 1526次阅读

    固态激光雷达通常分为哪三种类型?mems固态激光雷达

    、速度、角度等信息。固态激光雷达因其具有高度可靠性、精度高、反应速度快等优点而被广泛应用于自动驾驶、智能交通、环境监测、机器人导航等领域。常见的固态激光雷达有三种类型,分别是:飞秒激光雷达
    的头像 发表于 08-22 16:45 1847次阅读

    简述激光雷达的结构原理分类及特点 TIM320激光雷达的工作原理

    和信号处理系统。其主要由三个部分组成: 光源系统、探测器和信号处理部分。接下来,我们将从结构原理、分类及特点和 TIM320激光雷达的工作原理三个方面进行详细的分析。 激光雷达的结构原
    的头像 发表于 08-22 16:45 2310次阅读

    激光雷达的结构与种类

    一、激光雷达的结构 激光雷达的关键部件按照信号处理的信号链包括控制硬件DSP(数字信号处理器)、激光驱动、
    的头像 发表于 07-14 11:14 1353次阅读
    <b class='flag-5'>激光雷达</b>的结构与种类

    激光雷达是什么 激光雷达介绍

    激光雷达投入实际应用前需要在雨、雾、光、尘等特殊环境中进行大量的测试。 在自然环境条件下,所需要的测试场景可遇不可求且无法复现,无法满足激光雷达大量真实
    的头像 发表于 07-14 11:11 3458次阅读

    一文详解激光雷达

    激光雷达投入实际应用前需要在雨、雾、光、尘等特殊环境中进行大量的测试。在自然环境条件下,所需要的测试场景可遇不可求且无法复现,无法满足激光雷达大量真实
    的头像 发表于 07-05 11:13 1625次阅读
    一文详解<b class='flag-5'>激光雷达</b>

    一文解析激光雷达结构

    激光雷达激光探测及测距系统,是通过发射激光束来探测目标位置、速度等特征量的雷达系统。按扫描维度,激光雷达可分为一维
    发表于 05-10 09:58 5795次阅读
    一文解析<b class='flag-5'>激光雷达</b>结构