电子发烧友网 > 工业控制 > 正文

利用TI DLP®技术驱动结构光系统实现箱拣精度

2020年02月04日 15:34 次阅读

  在工业环境中,每天需要处理不同形状、尺寸、材料和光学特性(如反射比、吸收等)的零件。这些零件必须以特定的方向挑选和放置,然后进行加工。将这些零件随机从存放的环境(容器或其他)中自动挑选并放置的活动通常被称为箱拣。但这对机器人末端执行器(一种连接到机械臂末端的设备)提出了挑战,它需要准确地知道要抓取物体的3D位置、尺寸及其想方向。为了做到在箱子外壁和箱内其他物体周围准确导航,机器人的机器视觉系统除了需要获取2D相机信息外,还需要获取深度信息。

  对于箱拣来说,捕获物体3D影像的难题可以由结构光技术解决。基于结构光技术的3D扫描仪/相机通过将一系列图案投射到被扫描的物体上而工作,并且用相机或传感器来捕获图案失真。然后三角剖分算法计算数据并输出3D点云。图像处理软件(如MVTech开发的Halcon)计算物体位置和机械臂的最佳进场路线(图1)。

  

利用TI DLP®技术驱动结构光系统实现箱拣精度

  图1:使用Halcon将管接头与其各自的3D模型进行匹配的示例(来源:MVTech开发的Halcon)

  DLP技术通过安装在半导体芯片顶部的微镜矩阵(也称为数字微镜器件,DMD)提供高速图案投射能力,如图2所示。DMD上的每个像素表示投影图像中的一个像素,并允许像素精确图像投影。微镜在~ 3us时可以转换,以通过投影透镜将入射光反射到物体上或光块上。前者可以在投影场景中获得明亮像素,而后者可以创建暗像素。DLP技术也具备独特的优势,能够使用各种光源(如灯、LED激光)在宽波长范围(420 nm – 2500 nm)内投射图案。

  用于箱拣的由DLP技术驱动的结构光具备多种优势:

  •   抗环境光照能力强。工厂的光照条件,如低曝光和不同照明区域之间的高对比度,导致传感器曝光不足或会对机器视觉系统产生干扰的闪光灯,对需要机器视觉的应用(如箱拣)来说是一大挑战。由DLP技术驱动的结构光本身具有主动照明,这使得它能够抵抗这些条件。
  •   无活动部件。结构光系统可以立即捕获整个场景,不再需要将光束扫过物体或通过光束移动物体(如在扫描解决方案中)。结构光系统保护在宏观尺度内不使用活动部件,这使其能够免受机械磨损。
  •   实时3D图像采集。DLP芯片中的微镜以高速度控制,可提供高达32kHz的自定义图案投影。除此之外,DLP控制器提供触发输出和输入,可用于使相机和其他设备与投影图案序列保持同步。这些功能有助于实现允许同时扫描和挑选的实时3D图像采集。
  •   投影图案的高对比度和高分辨率。由于每块微镜可以将光反射到目标或吸收表面上,因而可以获得高对比度,使得能够在不受物体表面属性影响情况下进行准确的点检测。再加上使用具有2560 x 1600块镜子的高分辨率DLP芯片,可以探测到微米级的物体。
  •   适用于物体参数。与使用衍射光学元件的系统相比,可编程图案和各种点编码方案(如相移或格雷编码)使结构光系统更适合对象参数。
  •   加快开发时间。尽管机器人提供较高的重复性,但在非结构化环境中,箱拣需要精确性。因为在这种环境下,每次从储存箱中取出一个物体时,所拣选的物体的位置和方向都会发生变化。成功应对这一挑战需要可靠的工艺流程——从机器视觉到计算软件,再到机器人的灵巧性和抓取器。使所有东西协同工作可能是一项耗费大量开发时间的挑战。

  

利用TI DLP®技术驱动结构光系统实现箱拣精度

  图2:DLP芯片包含数百万个可在高速下单独控制并反射光线以产生投影图案的微镜。

  TI的DLP技术评估模块能够将结构光快速植入机器视觉工作流程。为了演示这种能力,工厂自动化与控制系统工程师以一定的距离和角度将DLP LightCrafter 4500评估板安装至单色相机。DLP评估板由相机通过一根互相连接的触发电缆触发;如图3所示。

  

利用TI DLP®技术驱动结构光系统实现箱拣精度

  图3:结构光设置,包括DLP产品LightCrafter 4500(左)、灰点前视红外线Flea3相机(右)和校准(后)。

  电路板和相机都通过USB连接到PC,且整个设置都用于校准板。使用DLP®技术为3D机器视觉应用程序精确生成点云的参考设计中软件之后会被用于校准相机和投影仪的参数,如焦距、焦点、镜头失真、相对于校准板的相机平移和旋转。参考设计用户指南逐步介绍了此过程。

  只有当相机相对于DLP产品板移动时,才需要重新校准。

  在完成设置之后,可以创建真实目标的点云。这些云由软件以任意文件格式输出,然后由Halcon的HDevelop平台上开发的一些简短代码来读取和显示。图4显示了一个点云,该点云对装满咖啡杯的箱子的深度信息进行了颜色编码。

  

利用TI DLP®技术驱动结构光系统实现箱拣精度

  图4:在Halcon HDevelop(右)中显示的箱子中,捕捉到的杯子(左)和由DLP驱动的多个杯子的结构光获取的点云

  Halcon的表面匹配可以通过比较点云和杯子的3D CAD模型来确定杯子的3D姿态。这样一来,机械臂现在就可以“看到”物体,并且可以计算出机械臂的最佳进场路线,使其能够避开非结构化和不断变化的环境中的障碍物,从而从箱中挑选出物体。

下载发烧友APP

打造属于您的人脉电子圈

关注电子发烧友微信

有趣有料的资讯及技术干货

关注发烧友课堂

锁定最新课程活动及技术直播

电子发烧友观察

一线报道 · 深度观察 · 最新资讯
收藏 人收藏
分享:

评论

相关推荐

对话FPGA原厂——既聊技术,也谈市场

感谢大家对Mil往期FPGA直播的支持!最后一期,大家要继续加油哟!关于直播中,Mill老师有提到的FPGA众筹,为大家
发烧友学院发表于 2019-05-22 00:00 4306次阅读
对话FPGA原厂——既聊技术,也谈市场

为AB类放大器改用D类放大器而担忧?其实不必如此

常规的D类音频放大器采用约400 kHz的开关频率,需要使用8.2-µH或10-µH的电感器才能获得....
发表于 2020-02-04 16:32 242次阅读
为AB类放大器改用D类放大器而担忧?其实不必如此

机器视觉技术在新的一年会有什么挑战

在视觉2020年全球调查分析中发布了首个调查结果,该报告说明了机器视觉技术在2020年及未来的主要热....
发表于 2020-02-04 11:31 16次阅读
机器视觉技术在新的一年会有什么挑战

微型数据转换器如何通过更小尺寸为您带来更多价值

本文将讨论如何显著减少PCB占用空间,增加通道密度以及最大限度地发挥其他组件和功能与TI微型数据转换....
发表于 2020-02-04 09:46 224次阅读
微型数据转换器如何通过更小尺寸为您带来更多价值

采用TI电量计实现动态血糖监测仪超长运作

人体血糖值的偏高或偏低都有可能导致严重的健康威胁,因此监测血糖水平是重中之重。目前全球已有1.5亿人....
发表于 2020-01-25 17:48 306次阅读
采用TI电量计实现动态血糖监测仪超长运作

合作阿里巴巴和科大讯飞,友杰智新获得数千万融资

友杰智新于2019年12月获得数千万Pre-A轮融资,本轮由同威资本领投,驰星创投与天使轮投资方招商....
发表于 2020-01-16 11:52 872次阅读
合作阿里巴巴和科大讯飞,友杰智新获得数千万融资

TI多种无线充电方案在不同场景中的应用

前文提到过,无线充电发送器的电源Vin可能来自AC/DC电源适配器或USB 端口(5V 至 20 V....
发表于 2020-01-15 10:03 732次阅读
TI多种无线充电方案在不同场景中的应用

2023年中国机器视觉市场规模达197亿 5G商...

据中商产业研究院整理,2018年中国机器视觉市场规模已超过100亿元,预计2019将达到125亿元,....
发表于 2020-01-15 09:30 1921次阅读
2023年中国机器视觉市场规模达197亿 5G商...

TI MSP430 F22xx系列混合信号微控制...

TI公司的MSP430 F22xx系列是超低功耗混合信号微控制器,集成了两个16位计时器,通用串行通....
发表于 2020-01-07 16:24 855次阅读
TI MSP430 F22xx系列混合信号微控制...

机器视觉对于物联网来说是什么位置

将检查设备的机器视觉元素连接到物联网,可为正在对工厂性能进行分析的企业系统提供更多数据。
发表于 2020-01-07 14:02 386次阅读
机器视觉对于物联网来说是什么位置

TI TRF7970A的主要特性及应用范围

TRF7970A是用于13.56 MHz RFID /近场通信系统的集成模拟前端和数据成帧设备。内置....
发表于 2020-01-06 17:44 795次阅读
TI TRF7970A的主要特性及应用范围

大数据智能化成就了哪一些就业

一个城市的产业发展与所需人才结构息息相关。“热专业”的背后,正凸显出近年来重庆产业变迁。
发表于 2020-01-06 11:40 116次阅读
大数据智能化成就了哪一些就业

如何选择最合适的机器视觉照明

机器视觉系统中的照明系统是极其重要的一部分,它的好坏直接影响着后面的图像处理。在听了一位日本光源专家....
发表于 2020-01-06 09:02 172次阅读
如何选择最合适的机器视觉照明

TI丰富的产品组合为运算放大器设计提供选择

作为一个寻求运算放大器(op amp)的设计工程师,可以有很多选择。另外,随着如今生产周期不断缩短,....
发表于 2020-01-01 17:56 820次阅读
TI丰富的产品组合为运算放大器设计提供选择

小间距LED显示屏技术的特点及应用解析

小间距LED显示技术的推进打破了LED显示屏只能用于户外领域的定律,随着画质细腻程度的不断提升,以及....
发表于 2020-01-01 11:34 120次阅读
小间距LED显示屏技术的特点及应用解析

小间距LED显示屏技术的特点及应用解析

随着画质细腻程度的不断提升,以及低亮高灰等技术难题的破解,小间距LED显示屏在室内工程显示领域,特别....
发表于 2020-01-01 11:31 124次阅读
小间距LED显示屏技术的特点及应用解析

机器视觉的应用解决方案及面临的挑战

让我们先从软件的角度看机器视觉的开发与集成过程:首先借助高效便捷的配置软件VBAI(应用于自动检测的....
发表于 2019-12-31 16:54 1223次阅读
机器视觉的应用解决方案及面临的挑战

《机器人与智能系统》第六期正式出刊

本期重点关注:明星企业创始人谈如何让机器人更实用、更好用;机器视觉助推OLED产业转型升级;AI时代....
发表于 2019-12-30 11:31 247次阅读
《机器人与智能系统》第六期正式出刊

采用“系列优先”的方法进行运算放大器设计

在此技术文章中,您将了解到此新的运算放大器系列如何满足各种项目需要,减少印刷电路板(PCB)的空间,....
发表于 2019-12-30 09:09 308次阅读
采用“系列优先”的方法进行运算放大器设计

机器视觉处理为了实现什么目的

下一代利用计算机视觉和机器学习技术的机器人,具有“查看”周围环境,“分析”动态场景或变化的条件以及“....
发表于 2019-12-27 14:51 852次阅读
机器视觉处理为了实现什么目的

机器视觉在快递自动分拣中有什么应用

自动分拣机器在接受运送指令后,通过视觉扫描技术,按照商品的品种、材质、重量以及发往的地点进行快速的分....
发表于 2019-12-19 15:21 381次阅读
机器视觉在快递自动分拣中有什么应用

西门子机器视觉系统有哪一些类型

机器视觉就是用机器代替人眼来做测量和判断。
发表于 2019-12-18 15:25 219次阅读
西门子机器视觉系统有哪一些类型

贸泽正式推出TI全面认证的CC3235MODx双...

贸泽电子 (Mouser Electronics) 即日起开始分销 Texas Instrument....
发表于 2019-12-18 15:05 323次阅读
贸泽正式推出TI全面认证的CC3235MODx双...

机器视觉系统技术简介!(干货分享建议收藏)

机器视觉是一个相当新兴的研究领域。机器视觉发展到现在已有15年的历史。机器视觉作为一种应用系统,其功能特点是随着工...
发表于 2019-12-17 17:07 359次阅读
机器视觉系统技术简介!(干货分享建议收藏)

嵌入式视觉系统给制造业带来了什么益处

机器视觉长期以来用于工业自动化系统中,以通过取代传统上的人工检查来提高生产质量和产量。
发表于 2019-12-16 14:22 187次阅读
嵌入式视觉系统给制造业带来了什么益处

指哪看哪的视觉芯片是怎么一回事

AI视觉芯片与摄像头的关系是——芯片做的是大脑,摄像头做的是眼睛。
发表于 2019-12-16 14:14 112次阅读
指哪看哪的视觉芯片是怎么一回事

TI杯2019年全国大学生电子设计竞赛颁奖典礼圆...

TI杯2019年全国大学生电子设计竞赛颁奖典礼在北京国家会议中心圆满落幕
发表于 2019-12-16 11:04 1551次阅读
TI杯2019年全国大学生电子设计竞赛颁奖典礼圆...

思普泰克智能制造检测设备检测密封橡胶圈毛刺案例!

密封橡胶圈是一种重要的工业产品,在产品出厂前必须进行质量检测。目前质量检测主要依靠人工检测人工检测存在速度慢、劳...
发表于 2019-12-13 16:50 157次阅读
思普泰克智能制造检测设备检测密封橡胶圈毛刺案例!

革新者的进化 ,2019节卡新品全球发布

12月13日, “革新者的进化—2019节卡新品发布会”于深圳机场凯悦酒店隆重举行。JAKA节卡机器....
发表于 2019-12-13 14:54 247次阅读
革新者的进化 ,2019节卡新品全球发布

谈谈机器视觉检测设备检测O型密封圈尺寸!

  O型密封圈是一种最常见的密封件,具有结构简单、成本低廉、密封性能良好、安装使用方便等特点,是一种具有很强适...
发表于 2019-12-12 14:30 168次阅读
谈谈机器视觉检测设备检测O型密封圈尺寸!

光程研创推出基于GeSi工艺平台的ToF技术传感...

光学和电子技术领先厂商─光程研创(Artilux)将于2020年美国消费电子展(CES)中,展出名为....
发表于 2019-12-11 17:58 448次阅读
光程研创推出基于GeSi工艺平台的ToF技术传感...

色彩视觉的应用让机器视觉检测设备更加强大!

机器视觉检测设备
发表于 2019-12-11 15:14 137次阅读
色彩视觉的应用让机器视觉检测设备更加强大!

TI工业驱动控制系统,支持数字与模拟位置传感器

TI推出业内首款支持数字与模拟位置传感器的工业驱动控制片上系统(soc),全新C2000 Delfi....
发表于 2019-12-10 14:45 147次阅读
TI工业驱动控制系统,支持数字与模拟位置传感器

嵌入式视觉与标准机器视觉系统之间的区别

“嵌入式视觉”与标准机器视觉系统之间的明显区别有时并不容易。进行分类的一种方法是将它们分解为三个部分....
发表于 2019-12-09 14:04 210次阅读
嵌入式视觉与标准机器视觉系统之间的区别

从TI新产品用例看智能汽车照明趋势

在最近的一场有关智能汽车照明的会议中,TI公司在LED照明中几款最新产品的用例,体现出当前智能汽车照....
发表于 2019-12-02 12:35 3249次阅读
从TI新产品用例看智能汽车照明趋势

浅谈TI霍尔传感器技术在TWS耳机里的应用

在TWS蓝牙耳机充电仓之中,往往放置了多块磁铁用以吸附耳机与仓盖,每一块磁铁的极性朝向都会影响到霍尔....
发表于 2019-12-01 11:01 2624次阅读
浅谈TI霍尔传感器技术在TWS耳机里的应用

机器视觉的下一个发展空间会将是嵌入式吗

历经多年积累,机器视觉技术或许正在面临一个黄金发展期。一旦成本下降、性能提升、应用增多,就如无线网络....
发表于 2019-11-29 11:32 350次阅读
机器视觉的下一个发展空间会将是嵌入式吗

国内机器视觉企业有哪些?从光源、镜头、工业相机到...

近些年中国已经逐渐成为全球机器视觉行业最大的应用市场。资料显示,2018年中国机器视觉市场规模首次超....
发表于 2019-11-27 16:22 3857次阅读
国内机器视觉企业有哪些?从光源、镜头、工业相机到...

怎样为机器视觉自动化检测系统选择合适的控制器

机器视觉系统主要研究用计算机来模拟人的视觉功能,通过摄像机等得到图像,然后将它转换成数字化图像信号,....
发表于 2019-11-26 16:17 179次阅读
怎样为机器视觉自动化检测系统选择合适的控制器

机器视觉系统对光源有没有很大的依赖性

机器视觉系统应用的光源其中最重要的任务是使用需要检测的物件的特征和不需要被检测图像特征之间产生最大的....
发表于 2019-11-26 16:15 182次阅读
机器视觉系统对光源有没有很大的依赖性

机器视觉技术使水果蔬菜自动化分类成为可能

枣子是地中海地区重要的膳食组成部分。当地枣子品种繁多,其中一种椰枣(Madjoul),个头大,肉质多....
发表于 2019-11-25 14:36 1215次阅读
机器视觉技术使水果蔬菜自动化分类成为可能

北京市海淀区与旷视正式签署战略合作协议

此次战略合作协议的签署,是双方深入合作的开端。旷视将持续发挥深度学习、物联感知、城市大脑、机器视觉等....
发表于 2019-11-24 10:09 1461次阅读
北京市海淀区与旷视正式签署战略合作协议

机器视觉3D成像技术大全!

3D成像关键技术,主要有四种关键技术:立体视觉、结构光3D成像、激光三角形测量、后面三个是主动成像,需要外加光源...
发表于 2019-11-19 15:28 398次阅读
机器视觉3D成像技术大全!

机器视觉系统应用于标签外观视觉检查!

机器视觉系统可以快速获取大量信息,而且易于自动处理,也易于同设计信息以及加工控制信息集成,因此,在现代自动化生...
发表于 2019-11-18 16:13 392次阅读
机器视觉系统应用于标签外观视觉检查!

商豪威科技推出全局快门图像传感器,可获得更好的光...

近日,据报道,2019年11月11日,全球排名前列的数字成像解决方案商豪威科技,宣布推出新款全局快门....
发表于 2019-11-17 09:34 819次阅读
商豪威科技推出全局快门图像传感器,可获得更好的光...

机器视觉市场大混战,嵌入式3D感知芯片即将入局

近几年,在机器视觉领域内,一直出现大公司并购、整合小的技术公司的情况,镁客君此前做过一张表格,统计了....
发表于 2019-11-15 11:33 344次阅读
机器视觉市场大混战,嵌入式3D感知芯片即将入局

机器视觉定位技术将助力工业机器人产业的发展

对于传统意义上的工业自动化,工业机器人在控制系统的指挥下,重复特定的动作流程完成加工。换言之,产品加....
发表于 2019-11-15 09:30 233次阅读
机器视觉定位技术将助力工业机器人产业的发展

机器视觉技术在工业制造中的应用

当前制造业面临的巨大难题在于劳动力成本的不断上升,产能需求越来越大,避免通过技术升级予以解决。工业机....
发表于 2019-11-13 09:43 392次阅读
机器视觉技术在工业制造中的应用

工业机器人在制造业中的应用将有着巨大影响

机器视觉让设备变得更智能化在行业市场发展水平不断提高的今天,更多的企业重视并实际引进高新技术,机器视....
发表于 2019-11-13 09:40 485次阅读
工业机器人在制造业中的应用将有着巨大影响

机器视觉入门学习资料分享

畸变的校正一般用黑白分明的方格图像来进行,过程并不复杂。一般如果畸变小于2%,人眼观察不到;若畸变小....
发表于 2019-11-13 09:14 1360次阅读
机器视觉入门学习资料分享

大联大世平集团推出基于NXP和TI技术的汽车防眩...

致力于亚太地区市场的领先半导体元器件分销商---大联大控股宣布,其旗下世平推出基于恩智浦(NXP)S....
发表于 2019-11-12 10:08 330次阅读
大联大世平集团推出基于NXP和TI技术的汽车防眩...

“2020深圳慕展“ 倒计时1周年,品牌关键字正...

华南国际智能制造、先进电子及激光技术博览会 (以下简称:深圳慕展)已于今年10月在深圳华丽收官。从呈....
发表于 2019-11-11 09:39 229次阅读
“2020深圳慕展“ 倒计时1周年,品牌关键字正...

比利时imec开发出新型单片薄膜图像传感器

红外探测器应用非常广泛,而imec的新技术将极大地扩展其应用可能,包括安防监视、生物识别、虚拟/增强....
发表于 2019-11-09 10:05 231次阅读
比利时imec开发出新型单片薄膜图像传感器

智能制造更应该“智”在哪里?

尽管瑕疵检测十分重要,无论是企业还是政府都为之投入了大量的人力物力,但随着工业产品精密度越来越高,瑕....
发表于 2019-11-08 16:29 1575次阅读
智能制造更应该“智”在哪里?

ARM与DSP的数据通信有什么方法?

DSP对数字信号和数值算法具有强大的运算处理能力,因而在信号采集与处理中被广泛应用,但其在任务管理、实时控制、...
发表于 2019-10-31 06:17 208次阅读
ARM与DSP的数据通信有什么方法?

请问投影图像反复规律性偏移是什么可能原因导致的?

大家好,我是从事3D打印行业的,最近碰到一个很头疼的问题向大家请教。 我们的3D打印机是DLP技术,投影仪的...
发表于 2019-10-29 22:52 201次阅读
请问投影图像反复规律性偏移是什么可能原因导致的?

汪成龙:资深视觉工程师分享LabVIEW技能进阶之路

嘉宾介绍:汪成龙,资深LabVIEW视觉工程师,使用LabVIEW开发了大量视觉检测、运动控制、数据采集方面软件...
发表于 2019-10-22 14:04 9368次阅读
汪成龙:资深视觉工程师分享LabVIEW技能进阶之路

labview视觉检测结果无输出

我最近做了一个用labview检测物体尺寸的程序,实际运行时可以采集到数据并输出结果的。但重启电脑后再次打开软件,视觉...
发表于 2019-10-22 11:41 344次阅读
labview视觉检测结果无输出