0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

机器人基于3D相机组装家具

广州虹科电子 来源:广州虹科电子 作者:广州虹科电子 2022-08-08 17:40 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

相信大家都经历过一件事:组装新家具。把零件按顺序排列好,查看安装说明,发现要花费的时间比预期要长!

新加坡南洋理工大学(NTU Singapore)的科学家们研制了一种机器人,可以独立组装椅子的各个零件。该机器人由一个HK Ensenso N35 3D相机和两个能抓取物体的机器臂组成。

应用

为了帮助机器人组装宜家的椅子,来自“机械与航空工程学院”的团队用三个不同的开源库对算法进行编码。机器人的硬件设计是为了模拟人们如何安装物体:“眼睛”为3D摄像头,“手臂”为能够在六个轴上运动的工业机械臂。每只机械臂都有抓手来抓取物体。手腕上安装了力传感器,以确定“手指”的握力以及它们使物体相互接触的强度。

机器人开始组装过程时,会拍摄地面上各部件的3D图像,生成各部件估计位置的地图,由HK Ensenso 3D相机完成。相机的工作原理是模仿人类视觉的“投影纹理立体视觉”(stereo vision)。两台相机从两个不同的位置获取同一场景的图像。虽然摄像机看到的场景内容是相同的,但根据摄像机的投影射线得到的物体位置不同。特殊的匹配算法比较两幅图像,搜索相应的点,并在视差图中可视化所有点的位移。虹科提供软件可以确定每个单独的图像像素或物体点的三维坐标,以便于完成椅子的组装。

难点

难点是在混乱的环境中尽可能精确、快速、可靠地定位组件。虹科3D相机依赖大功率投影仪足以满足这些需求。即使在艰难的光线条件下,投影仪也能通过图像掩模在物体表面产生高对比度的纹理。投射的纹理补充了宜家椅子组件上薄弱或不存在的物体表面结构。

这个应用利用了虹科N35系列相机中独有的FlexView投影仪技术,投影在组件物体表面上的模式可以改变表面上的纹理,检测得到的深度信息非常精确完整,该项技术是通过获取同一目标场景的不同纹理的多幅图像融合成一帧图像得到。另一个优势是HK Ensenso软件提供机器人手眼标定功能。使用一个标定板,它确保相机坐标系(在这种情况下是相机是静止的)的位置是相对于基础坐标系(组件的位置)确定的。这使得机器人的手能够准确地对图像信息做出反应,并准确地到达目的地。

“对于一个机器人来说,把椅子精确的拼凑比人为工作更复杂”南洋理工大学的Pham Quang Cuong教授解释道。“必须分解成不同的步骤,比如识别不同的椅子部件在哪里,抓住这些部件所需要的力量,以及确保机械手臂在移动时不会相互碰撞。通过相当大的工程努力,我们开发了算法,使机器人能够自行组装椅子。”结果是南洋理工大学的机器人只用了8分55秒就安装好宜家的“斯第芬”椅子。

前景

据Pham Quang Cuong教授介绍,人工智能将使这一应用在未来更加独立和有前途:“我们希望在这种方法中融入更多的人工智能,使机器人更加自主,这样它就可以通过人类演示或阅读安装手册,甚至从组装产品的图片中学习组装椅子的不同步骤。”

新加坡南洋理工大学的科学家开发的机器人被用于对机敏操作的研究,这是一个需要精确控制专用机器人手或手指的力量和运动的机器人领域。这需要所有硬件和软件组件的完美交互。使用虹科3D相机进行三维图像处理是解决问题的关键。它在准确性上、经济和速度方面都令人信服。

这标志着家具组装的真正进步,且不止于此。

虹科Ensenso N35

快速和精确的3D视觉

●GigE接口-灵活多样

● 紧凑,坚固的铝外壳

● IP65/67

●全局曝光CMOS传感器和点图案激光器,可选蓝色或红外led

● 最大帧率(3D):10

●工作距离最远3000mm(N35)且可调节

● 输出单个3D点云

● 提供手眼标定步骤指引,易于设置

●带有标定板的机器人手眼标定集成功能

● 可集成uEye工业摄像头的软件,例如,捕捉附加的颜色信息或条形码

● 灵活的数据和帧率的采样和叠加

审核编辑:汤梓红
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    213

    文章

    30619

    浏览量

    219685
  • 3D相机
    +关注

    关注

    0

    文章

    135

    浏览量

    8907
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    人形机器人 3D 视觉路线之争:激光雷达、双目和 3D - ToF 谁更胜一筹?

    电子发烧友网报道(文 / 吴子鹏)在人形机器人的设计方案中,3D 视觉技术是实现环境感知与智能化决策的核心支撑之一。它能够助力人形机器人完成环境感知与建模、动态目标检测与跟踪、物体操作与精细控制等
    的头像 发表于 04-15 00:14 3531次阅读

    中国科学院研发3D手型微纳机器人

    微纳机器人是工作在微米至纳米尺度的“智能微型机器”,在精准医疗、环境修复等领域应用前景广阔。然而,当前微纳机器人多采用单一材料体系,功能扩展受限,复杂环境下的多刺激协同控制与多步操作成为科研挑战。为此,科研团队提出新思路,采用多
    的头像 发表于 11-13 14:49 163次阅读

    奥比中光领跑韩国机器人3D视觉市场

    近日,国际权威行业研究机构Interact Analysis发布《韩国商用及工业移动机器人3D视觉市场分析》报告(以下简称“报告”)。数据显示,奥比中光在韩国商用和工业移动机器人3D
    的头像 发表于 10-23 16:27 483次阅读

    普渡科技推出3D感知AI扫地机器人PUDU MT1 Max

    在持续探索机器人技术与真实场景深度融合的进程中,普渡机器人以场景驱动创新,正式推出PUDU MT1 Max 3D感知AI扫地机器人。它在MT1的基础上全面进阶,搭载
    的头像 发表于 08-25 15:47 903次阅读

    奥比中光发布最新一代3D激光雷达及双目深度相机

    近日,世界机器人大会现场,奥比中光发布最新一代3D激光雷达及双目深度相机,以“场景拓展”与“极限感知”为核心优势,进阶全领域能力矩阵,刷新机器人性能上限,为各类
    的头像 发表于 08-15 15:05 1133次阅读

    奥比中光发布面向机器人领域的全新感知产品矩阵

    8月8日,在北京举办的2025世界机器人大会上,奥比中光以“灵机宜动”为主题,发布面向机器人领域的全新感知产品矩阵。其中,Pulsar ME450是国内首款支持多种扫描模式的dToF 3D激光雷达;Gemini 345Lg是专为
    的头像 发表于 08-12 11:28 1767次阅读

    工业机器人的特点

    的基础,也是三者的实现终端,智能制造装备产业包括高档数控机床、工业机器人、自动化成套生产线、精密仪器仪表、智能传感器、汽车自动化焊接线、柔性自动化生产线、智能农机、3D 打印机等领域。而智能制造装备中工业
    发表于 07-26 11:22

    基于NVIDIA AI的3D机器人感知与地图构建系统设计

    机器人必须感知和理解其 3D 环境,才能安全高效地行动。这一点在非结构化或陌生空间中的自主导航、对象操作和远程操作等任务尤为重要。当前机器人感知技术的进展,越来越多地体现在通过统一的实时工作流与强大的感知模块,实现
    的头像 发表于 07-04 14:31 826次阅读
    基于NVIDIA AI的<b class='flag-5'>3D</b><b class='flag-5'>机器人</b>感知与地图构建系统设计

    2025年3D工业相机选型及推荐

    3D工业相机的选型
    的头像 发表于 05-21 16:49 1160次阅读
    2025年<b class='flag-5'>3D</b>工业<b class='flag-5'>相机</b>选型及推荐

    开源项目!基于Arduino控制的六足机器人

    代码前需根据实际机器人尺寸调整上述参数,校准流程详见步骤2。 步骤8:展示架 3D打印灰色金属质感PLA支架(模型文件),通过8颗螺丝组装。注意钻孔时避免材料开裂,安装时防止支架扭曲变形。 通过以上
    发表于 03-03 11:25

    海康机器人3D检测案例入选实数融合典型案例

    伏行业高精度3D检测案例”凭借其卓越的技术实力和应用效果脱颖而出,成功入选数字化转型通用工具产品应用案例名单。 这一荣誉的获得,不仅是对海康机器人在实数融合技术领域的深度探索和创新的肯定,更是对其在推动行业数字化转
    的头像 发表于 02-14 16:09 1101次阅读

    Captic借助奥比中光3D相机实现机器人高速拣选

    Captic,位于比利时的创新型人工智能初创公司,致力于通过人工智能机器人和检测系统帮助企业应对劳动力短缺的挑战。Captic凭借奥比中光3D相机开发先进AI视觉系统,进一步扩展了自动化应用的功能,不仅显著提升了工厂的生产效率,
    的头像 发表于 02-11 10:08 765次阅读

    禾赛科技推出面向机器人领域的迷你3D激光雷达

    近日,在拉斯维加斯举行的 CES 2025 国际消费电子展上,禾赛面向机器人领域的迷你 3D 激光雷达 JT 系列产品正式面向全球发布。全新产品迷你型 3D 激光雷达 JT 系列发布即交付,已向客户交付超过 2 万颗。
    的头像 发表于 01-10 09:05 1265次阅读

    开源项目!能够精确地行走、跳舞和执行复杂动作的机器人—Tillu

    学习者和爱好者的理想伙伴。 创新设计 Tillu的设计灵感来自广受欢迎的Otto DIY机器人,其设计过程包括在Fusion 360中进行CAD建模和精确的3D打印,以实现从坚固的伺服驱动腿部到模块化
    发表于 01-02 17:24

    禾赛将推出机器人领域迷你3D激光雷达

    据传感器专家网获悉,2025年1月7日至10日,禾赛将参加在拉斯维加斯举行的国际消费类电子产品展CES 2025。在本届CES上,禾赛计划于1月7日隆重推出其最新产品——全新迷你型高性能3D激光雷达
    的头像 发表于 12-11 09:12 821次阅读
    禾赛将推出<b class='flag-5'>机器人</b>领域迷你<b class='flag-5'>3D</b>激光雷达