侵权投诉

工业机器人视觉检测系统研究

新机器视觉 2020-09-24 10:28 次阅读

工业机器人视觉检测系统研究

基于视觉的工业机器人定位抓取技术在现代化工业进程中起到极其重要的作用,本文在定位抓取的基础上研究了云端激光打标系统中与计算机视觉相关的机器人检测系统内容,将国产某型号六自由度工业机器人与视觉引导技术相结合应用于目标正反面区分。该系统经实验验证,能够识别带黑色标记的目标工件并定位抓取,完成了区分工件正反面的规定任务,具有工厂生产的实际意义。

就目前来说,国内外针对视觉抓取系统的研究方向主要有1)手眼标定方法2)特征提取算法3)与深度学习相结合的视觉抓取方法。手眼标定技术目前发展比较成熟,产生了深远的影响,比如早期Tsai-Lenz、Navy等手眼标定算法。YingWang等设计的清障机器人通过单双目结合组成混合视觉系统对目标物进行特征提取。在数据引导的方法下,SergryLevine将深度学习技术应用到机器人区分任务中,利用相机拍摄到的图像训练卷积神经网络来预测机械手在空间的运动,该方法能够有效并且实时控制机器人,成功掌握新的抓取目标,最后通过连续伺服矫正错误。而国内视觉抓取系统的研究偏向于几何引导的方法,王朋强将双目视觉系统和机械臂结合,实现了对目标的识别定位以及抓取。在国家的支持下,国内也已有许多家公司以及科研单位在机器视觉领域取得了一系列成果,逐步的将机器视觉技术引入到对机器人的控制当中。

1机器人视觉检测系统  

机器人视觉检测系统在计算机端对智能相机采集到的工作区域的图像进行预处理,快速地识别并定位图像中的目标工件,根据相机标定参数,结合目标工件的像素坐标计算出六自由度工业机器人坐标系中的位置坐标,并将坐标信息发送给机器人控制器,机器人执行命令程序实现抓取动作。系统检测任务利用视觉软件来完成,通过计算机处理,只选择反面朝上工件作为目标工件。

2相机标定  

相机标定是一种利用所拍摄到工作区域的二维图像信息来建立其与目标工件三维空间位置坐标对应关系的技术,是识别并定位目标物的基础也是最重要的工作之一。基于视觉的工业机器人检测系统使用的是单目相机,标定的目的是寻找相机的内外参数。一般来说,相机的标定可以分为两种方法:自标定和依赖于参照物标定。相机自标定是通过拍摄周围物体,依据数字图像处理相关方法以及几何计算来调节相机参数,标定结果往往误差较大,不适用于高精度的应用场合。依靠参照物的相机标定相比自标定方法精度更高,通过相机成像,依据数字图像处理方法,空间计算相机的内外参数。本文采用依赖于参照物的方式进行相机标定。

图1标定九宫格模板图  

图2相机标定结果图
  3目标定位检测  

目标检测定位是机器人实现自动抓取的基础,目前存在两种目标检测的算法:基于模板匹配和基于特征匹配。考虑本文所研究的机器人抓取系统的应用场景,目标为统一铝制名片盒(盒面为矩形),故本文采用基于模板匹配的目标检测定位方法,计算获取目标工件的中心点坐标及其姿态。

4目标工件中心点坐标  

基于模板匹配的目标检测定位方法主要是将一个包含目标形状的图像与相机采集图像进行匹配,其中获取目标工件(名片盒)中心点位置坐标的步骤如下:

(1)   设置学习区域。在图像中设置学习的感兴趣区域,包括区域的大小和位置信息,使该区域尽可能贴近围绕目标工件模型即名片盒子的边缘,选择该区域作为模板区域。

(2)   设置搜索参数。针对名片盒在目标区域内的摆放位置是任意姿态的情况,需要设置搜索限制角度参数,该角度参数是搜索过程中允许旋转的最大限度。

(3)   设置模型位置参考点。名片盒模型中心点是机器手臂要抓取的位置点,学习区域贴近名片盒边缘,故可将学习区域的中心位置点作为模型位置的中心点。

5学习掩膜区分工件正反面  

本文的研究目标是利用标记区分待激光打印名片盒的正反面,如图7所示将名片盒背面做黑色标记,以此区分工件的正反面,机器人抓取工作区域内的带黑色标记名片盒,在激光打标区设定位置翻转手臂,使名片盒正面朝上后完成激光打标任务。

6机器人抓取运动  

本研究所用的六自由度工业机器人开发模式采用WinCE嵌入式系统标准开发模式:在宿主计算机上进行程序开发,通过以太网将可执行程序下载到GUC一体化嵌入式运动控制器中使用,程序中包含IO指令、控制指令、移动指令、演算指令等。

常用的指令如:

JUMP跳转指令;

CALL调用子程序指令;

IFELSEWHILEPAUSE判断暂停语句。示教器通过编程,使用这些指令来控制

机器人的运动从而完成期望的系列动作

7实验分析  

本研究的工业机器人视觉检测系统使用国产某型号六自由度工业机器人、某型号工业智能相机和激光打标机,通过以太网进行数据通讯,通过智能相机的配套软件图形化开发平台进行图片处理,实现机器人的检测抓取动作。为了验证本文所研究的使用带掩膜学习模板进行带黑色标记的工件区分系统的实际效果及可行性,做出以下实验。本系统可准确的完成图像采集、显示、相机标定、模板采集、目标定位、机器人控制的模块功能。

8总结  

工业机器人视觉检测系统的研究目的在于有针对性的提升工厂生产效率。当工厂收到云端新订单任务,MES系统进行计划排产。本文基于一套云端激光打标系统进行研究,结合计算机视觉技术知识,利用带掩膜学习模板进行目标匹配的方法实现了对规则的目标工件正反面区分,达到预期检测效果。本文所研究的机器人检测系统可以应用在实际的生产环境中,选择正确的工件,提高加工产品的效率和质量。总的来说,基于视觉的工业机器人检测系统是机器视觉技术和机器人控制技术的结合,是工业领域生产过程由自动化向数字化、智能化发展的必经之路。

原文标题:论文分享 | 工业机器人视觉检测系统研究

文章出处:【微信号:vision263com,微信公众号:新机器视觉】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
分享:

评论

相关推荐

戴森未来 5 年将在机器人、人工智能和电池领域投资 27.5 亿英镑

据国外媒体报道,戴森未来 5 年里将向新技术投资 27.5 亿英镑(约合 240.5 亿元),以首次....
的头像 工程师邓生 发表于 11-29 11:18 249次 阅读
戴森未来 5 年将在机器人、人工智能和电池领域投资 27.5 亿英镑

戴森计划在人工智能、机器人和能源储存领域进行投资

 11月29日消息,据外媒报道,自从研发电动汽车的计划取消后,家电品牌戴森(Dyson)正对其产品路....
的头像 电子魔法师 发表于 11-29 10:04 324次 阅读
戴森计划在人工智能、机器人和能源储存领域进行投资

Ebusco与Rocsys合作,用机器人实现巴士站充电的自动化

据外媒报道,电动巴士与仓库充电桩供应商Ebusco正与机器人充电枪供应商Rocsys合作,想利用机器....
的头像 电子魔法师 发表于 11-29 09:55 166次 阅读
Ebusco与Rocsys合作,用机器人实现巴士站充电的自动化

可用于室内科研底盘的机器人

随着科技的进步与发展,生活中也随处可见机器人的踪影。机器人主要有轮式、履带式、腿式、跳跃式、蛇形式、....
的头像 电子魔法师 发表于 11-29 09:52 174次 阅读
可用于室内科研底盘的机器人

或许人工智能远没有你想象的聪明

27日,世界5g大会举行未来信息通信技术及国际战略研讨会,是一场大牛们的“华山论剑”。因为都是业界泰....
的头像 电子魔法师 发表于 11-29 09:37 537次 阅读
或许人工智能远没有你想象的聪明

人工智能技术会发展成为邪恶的机器人吗

人们对于人工智能可能存在潜在危险的猜测并不局限在科幻小说领域。许多权威技术专家预测,随着人工智能系统....
的头像 电子魔法师 发表于 11-29 09:28 218次 阅读
人工智能技术会发展成为邪恶的机器人吗

雅迪电动车投资成立新能源公司,持股49%

1、雅迪电动车投资成立新能源公司,持股49% 企查查App显示,11月26日,上海懂锂新能源科技有限....
的头像 Les 发表于 11-28 09:18 311次 阅读
雅迪电动车投资成立新能源公司,持股49%

【米尔FZ3深度学习计算卡试用体验】在米尔FZ3深度学习计算卡上跑自己的系统

在米尔FZ3深度学习计算卡上跑自己的系统米尔FZ3深度学习计算卡本质上是一块利用Zynq跑自定义的系统,并在其中加入FPGA深...
发表于 11-27 21:21 204次 阅读
【米尔FZ3深度学习计算卡试用体验】在米尔FZ3深度学习计算卡上跑自己的系统

松灵机器人与北理工共建实验室,拓展机器人底盘技术应用场景

11月26日上午,松灵机器人联手北京理工大学(下称北理工)无人平台与动力学生创新基地设立的地面无人车....
的头像 Les 发表于 11-27 18:30 263次 阅读
松灵机器人与北理工共建实验室,拓展机器人底盘技术应用场景

“千言”机器人开始引入知识图谱,强化机器人的知识构建能力

每逢双十一等大促,各大平台的竞争归根到底是服务和体验的比拼。为专注好服务,苏宁金融科技打造的千言智能....
的头像 工程师邓生 发表于 11-27 18:23 464次 阅读
“千言”机器人开始引入知识图谱,强化机器人的知识构建能力

节卡机器人提供食品行业应用解决方案:生产事半功倍

相较于3C电子、汽车制造等行业先进的智能制造发展水平,目前食品行业在包装工序多数还是人力完成称量、装....
的头像 Les 发表于 11-27 16:39 139次 阅读
节卡机器人提供食品行业应用解决方案:生产事半功倍

京东数科关联公司申请仿生机器人相关专利

11月27日消息,据天眼查公开信息显示,近日,京东数科海益信息科技有限公司新增多条仿生机器人相关专利....
的头像 工程师邓生 发表于 11-27 16:04 498次 阅读
京东数科关联公司申请仿生机器人相关专利

对于人工智能技术不能太乐观,也不能过于悲观

据麦肯锡全球研究院的研究,截至2030年,人工智能每年将额外创造13万亿美元的价值。
的头像 如意 发表于 11-27 16:01 526次 阅读
对于人工智能技术不能太乐观,也不能过于悲观

如何打造高性能激光SLAM自动叉车

在传统工厂物流中,叉车为物料的搬运与流转做出了划时代的贡献,但是随着人工智能时代的到来,人+传统叉车....
的头像 Les 发表于 11-27 15:56 143次 阅读
如何打造高性能激光SLAM自动叉车

中国市场工业机器人销量连续七年世界第一

11月23日,CRIA发布了2019年中国工业机器人市场统计数据。数据显示,2019年中国工业机器人....
的头像 机器人峰会 发表于 11-27 15:42 193次 阅读
中国市场工业机器人销量连续七年世界第一

青岛宝佳:机器人智造的颠覆者

机器人是制造业皇冠顶端的明珠,其研发、制造、应用是衡量一个国家科技创新和高端制造业水平的重要标志。青....
的头像 机器人峰会 发表于 11-27 15:38 250次 阅读
青岛宝佳:机器人智造的颠覆者

绿的谐波是如何突围海外巨头垄断的?

绿的谐波传动科技有限公司,是国家工信部公布的第一批小巨人之一。今年在科创板上市。 走进苏州绿的谐波传....
的头像 机器人峰会 发表于 11-27 15:35 190次 阅读
绿的谐波是如何突围海外巨头垄断的?

立镖机器人正在不断推进全球化战略

作为智能分拣机器人全球首创者,立镖分拣机器人的应用场景和市场正在不断加速扩张,近期,立镖机器人海外销....
的头像 新战略机器人 发表于 11-27 15:25 244次 阅读
立镖机器人正在不断推进全球化战略

倍加福推出了最新一代VOS智能视觉传感器

定位、导航、分拣移动机器人各项功能的实现可以说都离不开传感器的作用,而伴随着移动机器人应用领域的不断....
的头像 新战略机器人 发表于 11-27 15:21 211次 阅读
倍加福推出了最新一代VOS智能视觉传感器

杭州打造国内最大潜入式AGV机器人停车场

停车机器人应用规模不断扩大。 集合先进建设技术和智慧停车技术打造的停车产业旗舰项目未来停车场蜻蜓公园....
的头像 新战略机器人 发表于 11-27 15:19 185次 阅读
杭州打造国内最大潜入式AGV机器人停车场

全球制造业高端化竞争趋势日益明显

由国务院发布的《中国制造2025》致力于实现中国由制造大国向制造强国迈进,其核心就是要抢占新一轮国际....
的头像 我快闭嘴 发表于 11-27 14:14 291次 阅读
全球制造业高端化竞争趋势日益明显

节卡协作机器人在食品行业的应用有哪些?

相较于3C电子、汽车制造等行业先进的智能制造发展水平,目前食品行业在包装工序多数还是人力完成称量、装....
的头像 高工机器人 发表于 11-27 14:02 170次 阅读
节卡协作机器人在食品行业的应用有哪些?

消毒机器人在疫情防控中起了重要作用

为防止疫情蔓延,医院、机尝体育场等大型公共场所都纷纷使用消毒机器人执行清洁工作。除此之外,工厂、办公....
的头像 电子魔法师 发表于 11-27 11:58 382次 阅读
消毒机器人在疫情防控中起了重要作用

钱江机器人的“进口替代”新逻辑

工业机器人是典型的机电一体化产品,其性能的优异与否直接取决于控制器、伺服系统、减速器三大件。而其中控....
的头像 高工机器人 发表于 11-27 11:53 320次 阅读
钱江机器人的“进口替代”新逻辑

10月机器人产量仍在攀升,下游行业提振显著

近日,国家统计局发布了2020年10月工业机器人统计数据:10月份,全国规模以上工业企业的工业机器人....
的头像 高工机器人 发表于 11-27 11:51 302次 阅读
10月机器人产量仍在攀升,下游行业提振显著

预计未来几年AMR市场增速将高于AGV

AMR(Autonomous Mobile Robot),即自主移动机器人,由于不需要电线、磁条或对....
的头像 高工机器人 发表于 11-27 11:48 244次 阅读
预计未来几年AMR市场增速将高于AGV

人工智能音箱:小度在家智能屏X8评测

科技改变生活,21世纪以来,人工智能、大数据、语音识别、人脸识别等先进技术不断走入人们的生活,正在潜....
发表于 11-27 11:40 530次 阅读
人工智能音箱:小度在家智能屏X8评测

工业机器人产业企业纷纷进入内部转型期

近日,哈工智能宣布公司与中国同辐签署了合作框架协议,拟在医疗健康产业、医疗智能化领域展开全面的合作,....
的头像 高工机器人 发表于 11-27 11:37 211次 阅读
工业机器人产业企业纷纷进入内部转型期

箱式仓储机器人的新战事

在智能搬运、拣选、分拣等仓储物流的关键环节,满足多重需求的货箱到人的箱式仓储机器人脱颖而出。 由于箱....
的头像 高工机器人 发表于 11-27 11:34 259次 阅读
箱式仓储机器人的新战事

移动机器人产业链的“新故事”

高工机器人产业研究所(GGII)数据显示,2019年全球移动机器人市场规模139.5亿元人民币,同比....
的头像 高工机器人 发表于 11-27 11:25 814次 阅读
移动机器人产业链的“新故事”

腾讯公布移动机器人领域新进展

11月20日,腾讯公布了其在移动机器人研究方面的新进展:四足移动机器人 Jamoca 和自平衡轮式移....
的头像 高工机器人 发表于 11-27 11:21 666次 阅读
腾讯公布移动机器人领域新进展

2020年中国并联机器人行业调研报告

并联机器人(DELTA)在上世纪90年代才真正引起广泛注意,具有刚度高、速度快、柔性强、重量轻等优点....
的头像 高工机器人 发表于 11-27 11:19 230次 阅读
2020年中国并联机器人行业调研报告

蓝芯科技获中国机器人产品认证证书

近日,蓝芯科技的机器人产品获得中国机器人产品认证(CR)证书。 中国机器人产品认证又称CR认证(Ch....
的头像 高工机器人 发表于 11-27 11:16 308次 阅读
蓝芯科技获中国机器人产品认证证书

AI视觉提供商深视科技完成数千万元Pre-A轮融资

近日,工业 AI 视觉产品与解决方案提供商上海深视科技完成数千万元人民币 Pre-A 轮融资。本轮融....
的头像 高工机器人 发表于 11-27 11:01 467次 阅读
AI视觉提供商深视科技完成数千万元Pre-A轮融资

业绩增长超80%,国产伺服科技借势而上

危与机往往是互相转化的。2020年开年的疫情,虽然对诸多传统行业造成了沉重的打击;但由于井喷的防疫物....
的头像 高工机器人 发表于 11-27 10:58 719次 阅读
业绩增长超80%,国产伺服科技借势而上

156家企业参选高工机器人2020金球奖

2020年12月21-23日,由高工机器人举办,以穿越战略迷局 谋定智造大计为主题的【利元亨总冠名】....
的头像 高工机器人 发表于 11-27 10:56 386次 阅读
156家企业参选高工机器人2020金球奖

大华股份拟向华睿科技转让机器人业务相关资产组

11月16日,大华股份发布公告,拟以4027.50万元人民币的价格将公司及全资子公司浙江大华机器人技....
的头像 高工机器人 发表于 11-27 10:53 299次 阅读
大华股份拟向华睿科技转让机器人业务相关资产组

NLP到底该怎么搞?

CMU、华盛顿大学、南加州大学、MIT、MILA、密歇根大学、爱丁堡大学、DeepMind、伯克利、....
的头像 深度学习自然语言处理 发表于 11-27 10:39 122次 阅读
NLP到底该怎么搞?

卷积神经网络CNN的简单理论介绍

好久不见各位亲们,从上半年毕业到现在各方面开始步入正常轨迹,也开始有时间写点文章了,后续开始陆续更新....
的头像 自然语言处理爱好者 发表于 11-27 10:34 135次 阅读
卷积神经网络CNN的简单理论介绍

Ebusco与Rocsys合作,利用机器人技术实现巴士站充电的自动化

据外媒报道,电动巴士与仓库充电桩供应商Ebusco正与机器人充电枪供应商Rocsys合作,想利用机器....
发表于 11-27 10:18 93次 阅读
Ebusco与Rocsys合作,利用机器人技术实现巴士站充电的自动化

基于深度学习YOLO系列算法的图像检测

目前,基于深度学习算法的一系列目标检测算法大致可以分为两大流派: 两步走(two-stage)算法:....
的头像 新机器视觉 发表于 11-27 10:15 147次 阅读
基于深度学习YOLO系列算法的图像检测

码垛机器人在农业生产方面的应用

随着工业化进程的不断加速,农业劳动力逐步向社会其它产业转移,更多人愿意从事工业、贸易、第三产业等行业....
发表于 11-27 10:06 150次 阅读
码垛机器人在农业生产方面的应用

深度学习的GPU共享工作

当前机器学习训练中,使用GPU提供算力已经非常普遍,对于GPU-based AI system的研究....
的头像 新机器视觉 发表于 11-27 10:06 140次 阅读
深度学习的GPU共享工作

在5G、芯片等赛道中,聪明公司已开始引领下一轮增长

每个时代都自有机遇可循,即便是 2020 年 一个在席卷全球的疫情中充满变量的年份。 在 2020 ....
的头像 DeepTech深科技 发表于 11-27 09:59 1042次 阅读
在5G、芯片等赛道中,聪明公司已开始引领下一轮增长

电影里的磁性球体机器人成真?

提起机器人,很多人都会直觉地联想到机械状的人形,或者是像波士顿动力狗一般的四足仿生机器人。它们模拟人....
的头像 DeepTech深科技 发表于 11-27 09:51 347次 阅读
电影里的磁性球体机器人成真?

机器人视觉处理的四个阶段战略

第一代机器人,如第一批消费级机器人吸尘器,相对来说比较简单,自我导航和执行任务的能力有限。这些机器人....
的头像 新机器视觉 发表于 11-27 09:40 501次 阅读
机器人视觉处理的四个阶段战略

你见过可将任何物体变成机器人的新型电磁喷雾吗?

近日,香港城市大学生物医学工程系(BME)副教授申亚京博士与中国科学院深圳先进技术研究院(SIAT)....
的头像 DeepTech深科技 发表于 11-27 09:17 291次 阅读
你见过可将任何物体变成机器人的新型电磁喷雾吗?

使用光流 + CNN的方法来预测车辆的速度

导读 使用光流 + CNN的方法来预测车辆的速度,用PyTorch实现,有代码。 代码:https:....
的头像 新机器视觉 发表于 11-27 09:05 170次 阅读
使用光流 + CNN的方法来预测车辆的速度

SK 电讯推出人工智能半导体芯片,深度学习速度比 GPU 快 1.5 倍

据韩联社报道,韩国电信运营商 SK 电讯(SKTelecom)本周三表示,该公司推出了一款用于数据中....
的头像 工程师邓生 发表于 11-26 16:51 479次 阅读
SK 电讯推出人工智能半导体芯片,深度学习速度比 GPU 快 1.5 倍

MOS模块在电摩电机控制器,无人物流机器人和AGV应用DEMO方案分享

MOS模块在电摩电机控制器,无人物流机器人和AGV应用DEMO方案...
发表于 11-26 15:53 145次 阅读
MOS模块在电摩电机控制器,无人物流机器人和AGV应用DEMO方案分享

未来AGV机器人发展具有哪些技术优势

AGV机器人是指配备有电磁或光学等自动导引装置,它可以沿着规定的导引路径行驶,具有安全保护以及各种移....
的头像 牵手一起梦 发表于 11-26 15:02 301次 阅读
未来AGV机器人发展具有哪些技术优势

机器人制造中常用的传感器技术有哪些?

传感器(Sensor)是一种常见的却又很重要的器件,它是感受规定的被的各种量并按一定规律将其转换为有用信号的器件或装置。对于传感...
发表于 11-25 07:28 101次 阅读
机器人制造中常用的传感器技术有哪些?

Hi3861制作的蜘蛛机器人模型

用的是Hi3861+pca9685+电源模块
发表于 11-24 16:09 603次 阅读
Hi3861制作的蜘蛛机器人模型

微型智能机器人手指关节使用超声波电机的优势

超声波电机一般安装在机器人手指关节处,机器人的关节驱动离不开伺服系统,机器人关节越多,对柔性及精准度就越高,所需的超声电...
发表于 11-24 11:30 130次 阅读
微型智能机器人手指关节使用超声波电机的优势

如何实现移动机器人的设计?

 移动机器人利用导航技术,获得机器人的目前所处的位置,结合传感器技术对周围外界环境(障碍物等)作实时探测,并根据环境提供...
发表于 11-23 15:08 0次 阅读
如何实现移动机器人的设计?

机器人未来设想

对于机器人得几个场景的回忆!曾经在星球大战里面见到了各种机器人,一下子把人们带到了太空的科幻之境界。而后来又出现了机器人...
发表于 11-22 22:37 101次 阅读
机器人未来设想

焊接机器人的结构与原理

焊接机器人的原理:焊接机器人是一种高度自动化的设备,焊接机器人的基本工作原理是示教再现,即由用户导引机器人,一步步按实...
发表于 11-16 16:18 202次 阅读
焊接机器人的结构与原理

【送书福利】机器人时代已来!送你几本机器人学硬核好书

21世纪是机器人的时代。从学术研究到工程应用,机器人引起了学界和工业界越来越多的关注和兴趣。这种日益浓厚的兴趣也来源于机器...
发表于 11-16 16:14 1843次 阅读
【送书福利】机器人时代已来!送你几本机器人学硬核好书

【米尔FZ3深度学习计算卡试用体验】一 开箱

收到了漂亮的米尔FZ3B开发板,激动 开始有一个简约封面的包装盒 里面有缓冲垫海绵,保护里面的开发板 初见 除了...
发表于 11-13 15:23 404次 阅读
【米尔FZ3深度学习计算卡试用体验】一 开箱