0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

雪天环境的激光雷达点云实时处理网络研究

3D视觉工坊 来源:数理之家 作者:董亚微 2022-11-25 09:57 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

激光雷达是一种主动传感器,其发射的脉冲光波后利用返回的脉冲计算其与周围物体之间的距离。这种特性,使得激光雷达无论在白天还是夜间,都可以对周围的场景进行详细的3D测量。在现在很多的数据集中,都可以很容易地找到此类测量值,如逐帧点云,这些数据通常以10Hz的频率进行采样,并已用于3D对象检测、语义分割和建图。

尽管与毫米波雷达相比,激光雷达提供了更精确的3D测量,但在恶劣的天气条件下,测量结果很容易退化。与可以透过雾、雪花和雨滴的毫米波雷达不同,激光雷达受到空气中粒子的极大影响。特别是在降雪期间,脉冲信号撞击雪花并得到重影的测量返回传感器,如图1a和1b所示。对于地图构建等应用来说,移除这些测量值、揭示场景的基本几何结构至关重要。这篇文章提出一种雪天环境的激光雷达点云实时处理网络,在去噪方面得到了性能提升,速度也比当前的SOTA算法提升了52倍。

01 方法

1.1 预处理

第一步,将点云转换为距离图像。给定数据集中第k个点云中的点,其对应的强度值,我们可以得到下面的值。

是点到激光雷达中心的距离,是倾角,是方位角。通过离散激光雷达视场(FOV)内的倾角和方位角,我们可以将点云内的每个点投影到球面坐标上,可以得到距离图像

,其中,是索引帧,是垂直分辨率,是水平分辨率。

第二步,是将距离图像压缩到适当的比例。如图1所示,一个很关键的问题是重影测量主要集中在25米的距离内,但激光雷达的最大距离很容易超过150米。我们需要增强车辆周围的点的重要性,并且同时维持点的顺序,因为雪花的强度值几乎都是0,而场景中通常都是具有正的强度值,所以可以提升噪声与场景之间的对比度。最后,要明确,不是每个像素都有对应的值,因为有些方向的点事缺少的,比如天空和一些透明的点。1.2 网络结构本文的网络结构是在参考文献[12]的MWCNN基础上对部分关键点进行了修改。首先,使用残差模块替换所有具有两个环卷积层的卷积层;然后在每个残差模块的第一个ReLU激活函数之后放置一个dropout层,使网络规范化。最后,大幅度减少channel数。最终,设计的网络可以生成对应的残差图

可以满足

1.3 损失函数设为FFT的真值,是基于Haar的DWT。然后可以设计三个新的损失函数:

总损失函数为

02 结果

如表所示,相对于基准而言,本文所提出的网络,在去噪方面可以有同样甚至更好的性能;在召回率比DSOR低0.0310时,准确率和IoU明显高于其他所有的方法。速度比DSOR方法提升了52倍,比DROR方法提升了158倍。考虑到激光雷达的采样频率一般是10Hz,那这种方法应该是能够满足实时工作的最佳方案。

03 结论

这篇文章提出了一种专门用于恶劣天气条件下点云去噪的深度卷积神经网络-LiSnowNet。这种网络可以在没有任何标记数据的情况下进行训练,与最先进的方法相比,可以在7ms内处理10万个点,在降噪方面效果很好。可以提高下游任务的质量,例如雪天的地图构建。

审核编辑:郭婷


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2578

    文章

    55869

    浏览量

    795636
  • 激光雷达
    +关注

    关注

    983

    文章

    4607

    浏览量

    197432

原文标题:IROS2022 | 雪天环境的激光点云处理

文章出处:【微信号:3D视觉工坊,微信公众号:3D视觉工坊】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    激光雷达+视觉组合方案

    成本低廉、部署灵活。激光雷达则采用主动探测方式,可输出厘米级精度的三维数据,精准构建场景的空间结构,其测距与定位稳定性极强,完全不受强光、暗光或光线剧烈变化的环境干扰,安全冗余度高
    的头像 发表于 05-21 16:00 92次阅读
    <b class='flag-5'>激光雷达</b>+视觉组合方案

    万线激光雷达是依托什么技术实现的?

    [首发于智驾最前沿微信公众号]在自动驾驶领域,当谈论激光雷达时,线束多少一直是其关键指标,从最初的16线、64线到后来的128线,线数越高,意味着扫描出的越密集,看得也越清楚。就在最近,速腾聚创
    的头像 发表于 04-28 09:06 634次阅读
    万线<b class='flag-5'>激光雷达</b>是依托什么技术实现的?

    简析当下无人机激光雷达行业的技术瓶颈

    目前无人机激光雷达的核心瓶颈集中在性能、功耗、成本、环境适应性、数据处理与集成五大方面。无人机激光雷达当前最大矛盾是 “高性能、小体积、低功耗、低成本” 难以同时满足,加上恶劣
    的头像 发表于 03-31 14:44 290次阅读
    简析当下无人机<b class='flag-5'>激光雷达</b>行业的技术瓶颈

    固态激光雷达参数以及避障视频

    获取扫描的数据、实时画面、设备信息,并可设置设备工作模式等。其通信参数如下表: 表 3 激光雷达串口规格 项目最小值典型值最大值单位备注[/td]8 位数据位, 波特率/15000
    发表于 03-27 14:14

    为什么自动驾驶激光雷达云中间是黑洞?

    [首发于智驾最前沿微信公众号]不知道大家看到激光雷达探测到的时,有没有注意到一个现象,那就是在三维云图像中会有一个圆形的“真空带”中心。 无论车辆周边的交通
    的头像 发表于 02-24 09:17 511次阅读
    为什么自动驾驶<b class='flag-5'>激光雷达</b><b class='flag-5'>点</b>云中间是黑洞?

    如何解决激光雷达云中“鬼影”和“膨胀”问题?

    [首发于智驾最前沿微信公众号]之前在聊激光雷达“鬼影”和“膨胀”的文章中( 相关阅读: 激光雷达云中“鬼影”和“膨胀”是什么原因导致的
    的头像 发表于 01-02 09:30 761次阅读
    如何解决<b class='flag-5'>激光雷达</b><b class='flag-5'>点</b>云中“鬼影”和“膨胀”问题?

    激光雷达为什么会出现吸现象?

    相信各位在开车时一定遇到过这么一个场景,有一个很小的障碍物在车前,当障碍物非常靠近车辆时,你在驾驶位置上是完全看不到的,这就是俗称的“盲区”。对于激光雷达来说,也会出现类似的问题,当障碍物离激光雷达足够近时,它也会出现“盲区”,这一现象被称为“吸
    的头像 发表于 12-31 16:28 3718次阅读

    激光雷达云中“鬼影”和“膨胀”是什么原因导致的?

    、位置,从而生成三维。基于这一原理,激光雷达能够为自动驾驶系统提供对前方障碍物清晰、精准的感知能力。 但在实际应用中,当激光束照射到如车牌金属层、铝合金交通标志牌或反光胶贴等反射率
    的头像 发表于 12-23 09:01 1069次阅读
    <b class='flag-5'>激光雷达</b><b class='flag-5'>点</b>云中“鬼影”和“膨胀”是什么原因导致的?

    中科亿海微SoM模组——激光雷达控制板

    控制板主要是用于控制线阵激光器,并高效地采集和处理大量的激光数据,具备强大的数据处理能力和高
    的头像 发表于 10-31 18:16 587次阅读
    中科亿海微SoM模组——<b class='flag-5'>激光雷达</b>控制板

    【CIE全国RISC-V创新应用大赛】+基于MUSE Pi Pro的3d激光里程计实现

    激光里程计系统。 硬件组成 ​__MUSE Pi Pro开发板__​:搭载高性能RISC-V处理器 ​__速腾聚创Airy 96线激光雷达__​:高分辨率3D激光雷达 ​__集成IMU
    发表于 10-24 17:02

    自动驾驶里的激光雷达有何作用?

    判断周围物体的空间位置与几何形状。假期闲叙,就和大家简单聊聊激光雷达激光雷达到底是什么 激光雷达通常由激光发射器、接收器(光电探测器)、光学扫描或发散系统、时间/频率测量电路和
    的头像 发表于 10-10 07:15 1455次阅读
    自动驾驶里的<b class='flag-5'>激光雷达</b>有何作用?

    自动驾驶激光雷达可以安装在哪些位置?

    为了让自动驾驶汽车在各种复杂环境中都能精准感知周围情况,激光雷达(LiDAR)作为重要的环境感知传感器,发挥着不可替代的作用。激光雷达能够发射数十万乃至数百万束
    的头像 发表于 09-08 09:19 1250次阅读

    全固态激光雷达为什么迟迟未来?其技术难点是什么?

    [首发于智驾最前沿微信公众号]激光雷达(LiDAR)作为自动驾驶车辆环境感知的“第三只眼”,能够发射激光脉冲并接收反射光,实时构建周围物体的三维
    的头像 发表于 07-11 09:02 1426次阅读

    海伯森面阵固态激光雷达产品概述

    HPS-3D160 Pr0、HPS-3D640面阵固态激光雷达基于ToF(Time-of-Flight)原理,集成了精密的红外镜头和激光照明系统,内置高性能处理器及专业的数学算法,通过一次拍摄即可生成3D
    的头像 发表于 06-23 10:07 1408次阅读
    海伯森面阵固态<b class='flag-5'>激光雷达</b>产品概述

    第三方激光雷达ASIC方案,能改变行业格局吗?

    电子发烧友网报道(文/梁浩斌)在激光雷达行业的早期,由于需要大量的信号处理,包括控制电机、脉冲生成、激光发射、接收器控制、滤波、生成等,
    的头像 发表于 06-07 01:11 8382次阅读
    第三方<b class='flag-5'>激光雷达</b>ASIC方案,能改变行业格局吗?