0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

基于结构光的高精度开源三维重建系统

3D视觉工坊 来源:arxiv2022 作者:汪皓东 2022-11-06 20:13 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

许多面向建筑领域的机器人作业都需要获得高精度的三维表面信息以完成类似于自动水泥抛光汇总石膏喷涂等作业。然而,目前在市场上消费级深度相机并不能满足其毫米级的精度要求。本文中提出了一个基于结构光的解决方案SL sensor,能够达到5hz的发布频率的同时生成高保真的点云(基于PSP方法)。通过与其他深度相机的实验-Azure Kinetic和RealSencse L515,验证了其在精度和准确度方面均有较好的优势。为了使SL Sensor成为机器人应用实验平台,我们为其添加了一个运动补偿机制使得其能够在线性运动期间也能够正常工作(传统PSP方法仅在静态环境下能够使用)。通过场景实验表明SL Sensor 能够重建出高精度的石灰喷涂表面。

系统介绍

(一)硬件系统

c0dd0f62-5d26-11ed-a3b6-dac502259ad0.png

硬件系统结构 硬件系统包含两个工业CMOS彩色摄像头(1440×1080)和一个DLP投影仪(912×1140)。摄像机和投影仪是由Versavis板完成触发与时间同步。另外额外的IMU为未来的运动补偿策略做准备。其测量范围为设备前方0.3-1.0m的区域。

(二)软件系统

c0ff35d8-5d26-11ed-a3b6-dac502259ad0.png

软件系统结构 软件系统在机器人操作系统(ROS)的框架规范下编写,这确保了它可以轻松地与其他ROS社区的功能组件完成交互与集成。 整个三维重建流程分为四个节点,其在较有效率的零拷贝指针来传递进程之间的图像的同时保证了各个部分的模块性。部分Decoder与Triangular节点继承了SLStudio中的代码。

分析评估c0ad7ca2-5d26-11ed-a3b6-dac502259ad0.png

(一)静态精度测试

c134f650-5d26-11ed-a3b6-dac502259ad0.png

c14de0e8-5d26-11ed-a3b6-dac502259ad0.png

c19a3b50-5d26-11ed-a3b6-dac502259ad0.png

c1ae69cc-5d26-11ed-a3b6-dac502259ad0.png

(二)运动滑轨实验

c1c3fe4a-5d26-11ed-a3b6-dac502259ad0.png

c203482a-5d26-11ed-a3b6-dac502259ad0.png

(三)喷涂场景实验

c226d0d8-5d26-11ed-a3b6-dac502259ad0.png

c2666568-5d26-11ed-a3b6-dac502259ad0.png

c2b74d5c-5d26-11ed-a3b6-dac502259ad0.png

c2da4ac8-5d26-11ed-a3b6-dac502259ad0.png

总结c0ad7ca2-5d26-11ed-a3b6-dac502259ad0.png

在这项工作中,我们提出了一种结构光三维重建解决方案。与现有传感器解决方案相比,我们的SL Sensor集成了ROS中间件框架上的现有机器人软件,以定制化实现3D扫描。我们分别介绍了了软件架构、硬件设置和校准程序,并验证传感器达到毫米级精度。我们将其与常用的传感器进行了比较,实验结构表明我们的传感器达到了精细化施工应用的精度要求。之后我们验证了我们的运动补偿策略的有效性-在线性运动下高精度PSP扫描,并展示了我们的传感器在真实环境运动下根据实际情况进行模式切换的能力。未来的工作将扩展SL Sensor的扫描能力由线性运动到任意6自由度运动。可能的解决方案包括更稳健的运动补偿策略或自适应模式投影,当传感器处于静态并切换到当检测到运动时,另一种模式更能适应运动场景。此外,可能研究多方法点云配准以减少扫描过程中的错误积累,以获得更准确的点云合并结果。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    213

    文章

    30580

    浏览量

    219583
  • 摄像机
    +关注

    关注

    3

    文章

    1751

    浏览量

    62873
  • 投影仪
    +关注

    关注

    4

    文章

    896

    浏览量

    44863

原文标题:SL-Sensor:基于结构光的高精度开源三维重建系统(arxiv2022)

文章出处:【微信号:3D视觉工坊,微信公众号:3D视觉工坊】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    OFDR技术与三维重构的协同价值

    概述OFDR分布式频域反射技术具有光纤传感器体积小、重量轻、测试精度高的特性,能够精准捕捉结构各位置的微小应变或温度变化。三维重构软件可作为连接数据与实际应用的
    的头像 发表于 11-14 17:36 1113次阅读
    OFDR技术与<b class='flag-5'>三维</b>重构的协同价值

    一文读懂 | 三维视觉领域国家级制造业单项冠军——先临三维的品牌布局

    先临三维科技股份有限公司成立于2004年,是三维视觉领域国家级制造业单项冠军、国家专精特新“小巨人”企业。公司专注于高精度三维视觉软、硬件的研发和应用,致力于成为具有全球影响力的
    的头像 发表于 11-11 14:55 274次阅读
    一文读懂 | <b class='flag-5'>三维</b>视觉领域国家级制造业单项冠军——先临<b class='flag-5'>三维</b>的品牌布局

    奥比中旗下新拓三维发布两款3D扫描双旗舰新品

    近日,奥比中光子公司新拓三维发布两款3D扫描双旗舰新品——微米级精度蓝光三维扫描仪XTOM-MATRIX 12M,以及自动化检测中心XTOM-STATION,以“高精度、高效率、自动化
    的头像 发表于 10-16 15:03 494次阅读

    奥比中参与制定首个光学三维测量国家标准

    。该标准由国家市场监督管理总局、国家标准化管理委员会于今年5月30日批准发布,将于9月1日正式实施。 这是 我国首个专门针对光学三维坐标测量系统检测的国家标准 ,填补了该领域检测规范的技术空白,为结构
    的头像 发表于 07-08 09:28 1461次阅读

    航天宏图全栈式3DGS实景三维重建系统解决方案

    “实景三维中国”作为国家推进数字中国建设、提升空间地理信息服务能力的重要战略性工程,正在深度融入低空经济、智能交通、智慧城市、数字文旅和应急指挥等关键领域。三维重建是实现真实世界“实景三维”数字化
    的头像 发表于 06-27 09:28 1075次阅读
    航天宏图全栈式3DGS实景<b class='flag-5'>三维重建</b><b class='flag-5'>系统</b>解决方案

    激光三维扫描技术:无喷粉条件下高反光表面三维重建的光学原理与应用

    高反光表面的三维重建是工业检测、文化遗产保护等领域的关键技术瓶颈。传统激光扫描依赖喷粉增强漫反射,但会对精密器件或文物造成不可逆损伤。本文通过融合结构调制、偏振分析及多视角协同技术,构建无喷粉测量
    的头像 发表于 06-25 10:19 613次阅读

    无人机伏电站智能巡检系统中应用的技术都有哪些?

    与导航技术、多传感器融合检测、边缘计算与AI诊断以及智能机库与自主作业等。 其中高精度定位与导航技术,首先是通过三维重建与航线规划,利用激光雷达等技术生成电站三维模型,并据此自动规划最优巡检路径,覆盖组件、逆
    的头像 发表于 06-25 09:17 559次阅读
    无人机<b class='flag-5'>光</b>伏电站智能巡检<b class='flag-5'>系统</b>中应用的技术都有哪些?

    非接触式激光三维扫描应对镜面反射表面的无喷粉测量方案:原理与创新

    偏折术、多角度偏振编码与结构动态调制的无喷粉测量方案,通过光学原理创新与算法优化,实现镜面表面的高精度三维重建。 测量原理与技术挑战 非接触式激光
    的头像 发表于 06-24 13:10 399次阅读
    非接触式激光<b class='flag-5'>三维</b>扫描应对镜面反射表面的无喷粉测量方案:原理与创新

    VirtualLab:光学系统三维可视化

    摘要 为了对光学系统的性质有一个基本的了解,对其组件的可视化和传播的提示是非常有帮助的。为此,VirtualLab Fusion提供了一个工具来显示光学系统三维视图。这些工具可以
    发表于 05-30 08:45

    奥比中助力创想三维登顶世界消费级3D扫描仪市场

    Lite及Raptor Pro提供基于自研多核异构三维重建芯片技术的软硬件引擎,助力战略合作伙伴创想三维登顶世界消费级3D扫描仪市场。
    的头像 发表于 04-11 11:38 1261次阅读

    使用DLP LightCrafter4500投影结构进行三维重建遇到的疑问求解

    使用DLP LightCrafter4500 投影结构进行三维重建,遇到以下问题: (1)投影自己的图片,如何使投影出的图片和原图片的亮度一致。它是可以设定LED的亮度,我投影出来的图片亮度很
    发表于 03-03 06:29

    结构三维成像方面DLP LightCrafter 4500如何连续投射彩色图?

    结构三维成像方面,DLP LightCrafter 4500 如何连续投射彩色图?一般我们生成张不同相移的灰度图,然后合成24bit,依次投射灰度图,但是这样并不是一张RGB彩色
    发表于 02-25 08:23

    三维测量在医疗领域的应用

    技术可以对CT(计算机断层扫描)、MRI(磁共振成像)等医学影像进行三维重建,生成病灶或器官的三维模型。 这些模型为医生提供了更为直观、立体的视觉信息,有助于医生更准确地了解患者的解剖结构和病变情况。 医学影像分析 : 通过
    的头像 发表于 12-30 15:21 1091次阅读

    三维激光测量系统的优势

    在现代工业和科学研究中,精确的测量技术是至关重要的。随着技术的进步,三维激光测量系统(3D Laser Measurement Systems)已经成为测量领域的一个重要分支。这种系统以其高精
    的头像 发表于 12-30 15:03 1133次阅读

    三维测量技术在工业中的应用

    中不可或缺的一部分。 一、三维测量技术的工作原理 三维测量技术,也称为三维扫描技术,是一种通过捕捉物体表面点的三维坐标信息来重建物体
    的头像 发表于 12-30 15:01 1163次阅读