0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

基于3D相机组装家具

广州虹科电子科技有限公司 来源:广州虹科电子科技有限公 作者:广州虹科电子科技 2022-08-08 14:07 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

虹科智能感知事业部专注于智能感知与机器视觉领域,已经和ID‍‍‍‍‍‍‍‍‍S,Blickfeld和Gidel等有着重要地位的国际公司展开深度的技术合作。我们的解决方案包括3D激光雷达,工业相机,视觉处理平台,图像采集卡及视觉系统集成等。虹科的工程师积极参与国内外专业协会和联盟的活动,我们非常重视技术培训和积累,公司定期与国内外专家团队进行交流和培训。

相信大家都经历过一件事:组装新家具。把零件按顺序排列好,查看安装说明,发现要花费的时间比预期要长!

新加坡南洋理工大学(NTU Singapore)的科学家们研制了一种机器人,可以独立组装椅子的各个零件。该机器人由一个HK Ensenso N35 3D相机和两个能抓取物体的机器臂组成。‍‍‍‍‍‍‍‍‍

应用

为了帮助机器人组装宜家的椅子,来自“机械与航空工程学院”的团队用三个不同的开源库对算法进行编码。机器人的硬件设计是为了模拟人们如何安装物体:“眼睛”为3D摄像头,“手臂”为能够在六个轴上运动的工业机械臂。每只机械臂都有抓手来抓取物体。手腕上安装了力传感器,以确定“手指”的握力以及它们使物体相互接触的强度。

机器人开始组装过程时,会拍摄地面上各部件的3D图像,生成各部件估计位置的地图,由HK Ensenso 3D相机完成。相机的工作原理是模仿人类视觉的“投影纹理立体视觉”(stereo vision)。两台相机从两个不同的位置获取同一场景的图像。虽然摄像机看到的场景内容是相同的,但根据摄像机的投影射线得到的物体位置不同。特殊的匹配算法比较两幅图像,搜索相应的点,并在视差图中可视化所有点的位移。虹科提供软件可以确定每个单独的图像像素或物体点的三维坐标,以便于完成椅子的组装。

难点

难点是在混乱的环境中尽可能精确、快速、可靠地定位组件。虹科3D相机依赖大功率投影仪足以满足这些需求。即使在艰难的光线条件下,投影仪也能通过图像掩模在物体表面产生高对比度的纹理。投射的纹理补充了宜家椅子组件上薄弱或不存在的物体表面结构。

这个应用利用了虹科N35系列相机中独有的FlexView投影仪技术,投影在组件物体表面上的模式可以改变表面上的纹理,检测得到的深度信息非常精确完整,该项技术是通过获取同一目标场景的不同纹理的多幅图像融合成一帧图像得到。另一个优势是HK Ensenso软件提供机器人手眼标定功能。使用一个标定板,它确保相机坐标系(在这种情况下是相机是静止的)的位置是相对于基础坐标系(组件的位置)确定的。这使得机器人的手能够准确地对图像信息做出反应,并准确地到达目的地。

“对于一个机器人来说,把椅子精确的拼凑比人为工作更复杂”南洋理工大学的Pham Quang Cuong教授解释道。“必须分解成不同的步骤,比如识别不同的椅子部件在哪里,抓住这些部件所需要的力量,以及确保机械手臂在移动时不会相互碰撞。通过相当大的工程努力,我们开发了算法,使机器人能够自行组装椅子。”结果是南洋理工大学的机器人只用了8分55秒就安装好宜家的“斯第芬”椅子。

前景

据Pham Quang Cuong教授介绍,人工智能将使这一应用在未来更加独立和有前途:“我们希望在这种方法中融入更多的人工智能,使机器人更加自主,这样它就可以通过人类演示或阅读安装手册,甚至从组装产品的图片中学习组装椅子的不同步骤。”

新加坡南洋理工大学的科学家开发的机器人被用于对机敏操作的研究,这是一个需要精确控制专用机器人手或手指的力量和运动的机器人领域。这需要所有硬件和软件组件的完美交互。使用虹科3D相机进行三维图像处理是解决问题的关键。它在准确性上、经济和速度方面都令人信服。

这标志着家具组装的真正进步,且不止于此。

虹科Ensenso N35

快速和精确的3D视觉

●GigE接口-灵活多样

● 紧凑,坚固的铝外壳

● IP65/67

●全局曝光CMOS传感器和点图案激光器,可选蓝色或红外led

●最大帧率(3D):10

●工作距离最远3000mm(N35)且可调节

●输出单个3D点云

●提供手眼标定步骤指引,易于设置

●带有标定板的机器人手眼标定集成功能

●可集成uEye工业摄像头的软件,例如,捕捉附加的颜色信息或条形码

●灵活的数据和帧率的采样和叠加

审核编辑 :李倩

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2578

    文章

    55756

    浏览量

    795033
  • 3D
    3D
    +关注

    关注

    9

    文章

    3030

    浏览量

    115759
  • 机器视觉
    +关注

    关注

    166

    文章

    4850

    浏览量

    126684

原文标题:【虹科案例】基于3D相机组装家具

文章出处:【微信号:Hongketeam,微信公众号:广州虹科电子科技有限公司】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    TOFcam-660 3D相机:技术详解与应用指南

    TOFcam-660 3D相机:技术详解与应用指南 在当今科技飞速发展的时代,3D相机技术在诸多领域展现出巨大的应用潜力。TOFcam-660作为一款成本优化的
    的头像 发表于 05-10 16:15 687次阅读

    探索ESPROS TOF>frame 611:小型化3D TOF相机的卓越之选

    探索ESPROS TOFframe 611:小型化3D TOF相机的卓越之选 在当今的电子科技领域,3D相机技术正不断发展,为众多应用场景带来了新的可能。ESPROS Photonic
    的头像 发表于 05-10 13:50 252次阅读

    TOFcam-635:小型化3D相机的技术解析

    TOFcam-635:小型化3D相机的技术解析 在当今科技飞速发展的时代,3D相机技术在众多领域展现出巨大的应用潜力。今天要为大家介绍一款名为TOFcam - 635的小型化
    的头像 发表于 05-10 13:50 250次阅读

    工业3D相机常见参数及分类的通用术语解读

    工业相机是专门为工业应用设计的图像采集设备,具有高精度、高速度、高稳定性和环境适应性强的特点。其核心作用是通过图像处理和分析,为工业自动化提供关键数据支持。工业3D相机
    的头像 发表于 12-24 10:41 516次阅读
    工业<b class='flag-5'>3D</b><b class='flag-5'>相机</b>常见参数及分类的通用术语解读

    iDS iToF Nion 3D相机,开启高性价比3D视觉新纪元!

    一、友思特新品 友思特 iDS uEye Nion iTof 3D相机将 120 万像素的卓越空间分辨率与可靠的深度精度相结合—即使在极具挑战性的环境中也能确保获取精细的 3D 数据。 其外壳达到
    的头像 发表于 12-15 14:59 638次阅读
    iDS iToF Nion <b class='flag-5'>3D</b><b class='flag-5'>相机</b>,开启高性价比<b class='flag-5'>3D</b>视觉新纪元!

    2025 3D机器视觉的发展趋势

    迭代与应用拓展成为市场的主要推动力:·技术升级:视觉系统从单一任务的2D相机向多功能3D相机进化。过去用2D
    的头像 发表于 12-10 17:25 1474次阅读
    2025 <b class='flag-5'>3D</b>机器视觉的发展趋势

    3D传感器到立体相机,解锁工业应用新可能

    3D传感器是实现深度感知的核心技术。这些传感器广泛应用于多种常见的3D视觉技术中,例如立体相机、激光雷达(LiDAR)、飞行时间(ToF)相机和激光三角测量。通常根据应用场景和技术要求
    的头像 发表于 11-28 17:03 2101次阅读
    从<b class='flag-5'>3D</b>传感器到立体<b class='flag-5'>相机</b>,解锁工业应用新可能

    玩转 KiCad 3D模型的使用

    “  本文将带您学习如何将 3D 模型与封装关联、文件嵌入,讲解 3D 查看器中的光线追踪,以及如何使用 CLI 生成 PCBA 的 3D 模型。  ”   在日常的 PCB 设计中,我们大部分
    的头像 发表于 09-16 19:21 1.2w次阅读
    玩转 KiCad <b class='flag-5'>3D</b>模型的使用

    AD 3D封装库资料

     AD  PCB 3D封装
    发表于 08-27 16:24 8次下载

    Zivid3D相机安装使用教程

    Zivid3D相机小巧便携,重量轻,分辨率高,速度快,适合高反光透明物体。本文介绍Zivid 3D相机的操作流程,帮助用户掌握其功能。从硬件连接、软件安装到参数设置,重点涵盖点云生成、
    的头像 发表于 08-26 15:34 826次阅读
    Zivid<b class='flag-5'>3D</b><b class='flag-5'>相机</b>安装使用教程

    3D 工业相机解析:轴向、平面、重复、线性精度到底哪个更重要?

    3D 工业相机选型时,“精度” 往往是用户最先关注的指标,但面对参数表上的 “轴向精度 ”“平面精度”“重复精度”“线性精度”,很多工程师都会陷入困惑:这些参数到底代表什么?为什么同一台设备会有多个精度数值?在实际检测中,哪个参数才是决定成败的关键?
    的头像 发表于 07-29 17:18 2346次阅读
    <b class='flag-5'>3D</b> 工业<b class='flag-5'>相机</b>解析:轴向、平面、重复、线性精度到底哪个更重要?

    3D工业相机价格是?这种3D工业相机性价比最高

    3D 工业相机市场,一场价格与质量的博弈已然展开。企业在选择时面临着艰难困境,国际品牌筑起高高的价格壁垒,国产品牌又深陷低价低质的怪圈。我们该如何为打破这一局面?
    的头像 发表于 07-29 11:25 1359次阅读
    <b class='flag-5'>3D</b>工业<b class='flag-5'>相机</b>价格是?这种<b class='flag-5'>3D</b>工业<b class='flag-5'>相机</b>性价比最高

    国产品牌的3D工业相机为什么更受欢迎?

    早期在视觉检测领域,国际品牌如基恩士和康耐视凭借先发优势,积累了深厚的研发经验,迅速占领3D工业相机的全球市场。如今,这一格局正发生显著变化——中国本土品牌强势崛起
    的头像 发表于 07-25 10:26 1119次阅读
    国产品牌的<b class='flag-5'>3D</b>工业<b class='flag-5'>相机</b>为什么更受欢迎?

    3D AD库文件

    3D库文件
    发表于 05-28 13:57 6次下载

    2025年3D工业相机选型及推荐

    3D工业相机的选型
    的头像 发表于 05-21 16:49 2230次阅读
    2025年<b class='flag-5'>3D</b>工业<b class='flag-5'>相机</b>选型及推荐