0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

MIT让机器人像人类一样通过触摸和周围环境交互

hl5C_deeptechch 来源:DeepTech深科技 作者:DeepTech深科技 2021-01-27 10:46 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

人类能够通过触摸找到周围的物体并明确其某些属性,这一技能对盲人来说尤其重要,而没有视觉障碍的人同样在日常生活中频繁用到这一点,例如在口袋中摸索并抓住一样东西。

近日,麻省理工学院(MIT)的研究人员进行了一项技术研究,旨在将这种人类能力复制到机器人上,从而使其通过触摸即可了解对象的位置并可实时估计对象的姿态。该研究成果预先发表在 arXiv 上,论文着重强调了不再局限于视觉、音频处理而只需通过触摸就能与其周围的环境进行交互的机器人的优势。

f0d1430a-5fda-11eb-8b86-12bb97331649.jpg

图 | 帮助机器人通过触觉感知来定位物体

“我们的研究目标是想证明,机器人通过高分辨率的触觉感应,甚至首次接触就可以准确定位已知的对象。与以前在触觉定位方面的工作相比,我们的方法有了重要的飞跃,因为我们不依赖于任何其他外部感应方式(例如视觉)或以前收集的与被操纵对象有关的触觉数据。恰恰相反,我们的技术是在模拟中直接训练的,它第一次触摸就可以定位已知对象,这在实际的机器人应用中至关重要,因为在真实的机器人中,实时数据收集成本很高或根本不可行。” 进行该项研究的研究人员之一 Maria Bauza 表示。

由于这项技术是在模拟中得到过训练,因此 Bauza 及其同事不再需要大量的数据收集。这些研究人员最初开发了一个框架,该框架可模拟给定对象与触觉传感器之间的接触,因此假设机器人有权访问与其交互的对象有关的数据(例如其 3-D 形状、特性等)。这些接触会被描绘为深度图像,可显示出对象穿透触觉传感器的程度。

随后,他们使用先进的机器学习技术进行计算机视觉和表征学习,将机器人收集的真实触觉观察结果与模拟生成的一组接触信息进行匹配。根据模拟数据集中的每次接触与实际或观察到的接触的匹配可能性,对其进行加权,最终框架会获得对象的可能姿势的概率分布。

Bauza 说道:“我们的方法将被绘为深度图像的接触编码到一个嵌入式空间中,这极大地简化了计算成本,可以做到实时执行。由于它可以产生有意义的姿势分布,因此可以轻松地与其他感知系统结合使用。例如,在多触点场景中,多个触觉传感器同时触摸一个对象,我们必须将所有的观察结果都整合到对象的姿态估计中。”

本质上,这种方法可以根据对象的 3D 形状模拟出接触信息。但他们发现,在利用这种技术仔细触摸对象时并不需要收集任何以前的触觉数据。也就是说,有了这项技术,机器人的触觉传感器可以在首次触摸到对象时就生成可能的姿势判断。

Bauza 表示,他们意识到触觉感知具有高度鉴别性,并能产生高度精确的姿势估计。“视力有时会受到遮挡的影响,但触觉感应却不会。因此,如果机器人触碰到了某个独特对象的一部分,且这种接触与其他的不同,那么我们的算法可以轻松识别出这一接触及对象的姿态。”

由于许多接触对象不具备的独特区域(即它们的放置方式可能导致最终的接触极其类似),因此 Bauza 及其同事开发的方法可以预测的是姿势分布,而不是单个姿势估计。这与此前开发的只收集单个姿势估计的对象姿态估计方法形成了鲜明的对比。而且,该框架预测的分布信息可以直接与外部信息进行合并,从而能够进一步减少对象姿态预测的不确定性。

值得注意的是,他们还观察到,同时使用多个手指接触对象,并同时对多个接触进行组合,也可以迅速减少对象姿态估计的不确定性。

参与这项研究的另一位研究员 Alberto Rodriguez 表示,“感应触摸能力最近在业界引起了极大了研究兴趣,而我们主要是通过结合三个因素来实现这一点的:(1)一种分辨率高但并不昂贵的感应技术,该技术使用小型相机来捕获触摸表面的变形(例如 GelSight 感应);(2)将此传感技术紧密结合到机器人手指(例如 GelSlim 手指)中;(3)基于深度学习的计算框架,来有效处理高分辨率触觉图像,从而通过已知零件完成触觉定位。”

总之,该研究小组设计的这项技术可以让机器人实时、高水平地估计其正在操作的对象的姿态,这样一来,就让机器人能够对其具体动作的影响做出更准确的预测,从而可以提高其在操作任务时的表现。这对工业当中根据物品形状的模型进行组装的制造商来说极具价值。

在未来的工作中,Bauza 团队计划扩展这一框架,使其能够涵盖有关对象的视觉信息。理想情况下,他们还希望将其技术转变为一种视觉 - 触觉传感系统,从而能够以更高的精度来估算对象的姿态。

“我们正在进行的另一项研究与这种方法密切相关,目的是探索触觉感知方法在复杂操作任务中的运用。现在我们正在学习能让机器人执行精确地抓放操作的模型,以实现稳定地抓握,帮助提高感知水平,改善触觉定位。” Bauza 表示。

原文标题:不再局限于视觉!MIT研发新技术让机器人通过触摸即可与周围环境进行交互

文章出处:【微信公众号:DeepTech深科技】欢迎添加关注!文章转载请注明出处。

责任编辑:haq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 机器人
    +关注

    关注

    213

    文章

    30617

    浏览量

    219682

原文标题:不再局限于视觉!MIT研发新技术让机器人通过触摸即可与周围环境进行交互

文章出处:【微信号:deeptechchina,微信公众号:deeptechchina】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    超能同事上线:人形机器人如何重塑未来工作场景?

    以富唯智能为代表的创新企业,通过“知识驱动的具身智能工业机器人技术框架”,给出了极具前瞻性的解决方案。该框架融合自研体化控制器、零代码编程与任务规划大模型GRID,构建出“大脑、小脑、躯干、世界模型、虚实融合仿真器”五大核心模
    的头像 发表于 11-11 17:41 632次阅读
    超能同事上线:人形<b class='flag-5'>机器人</b>如何重塑未来工作场景?

    RK3576机器人核心:三屏异显+八路摄像头,重塑机器人交互与感知

    。· 多屏显示:显示配送状态、路径信息及简单的触摸操作界面,方便工作人员监控与交互。 开启您的下机器人项目综上所述,瑞芯微RK3576凭借其卓越的多屏支持、强大的多摄像头接入能力和
    发表于 10-29 16:41

    再掀语音交互革命,广和通AI解决方案加速机器人听觉进化

    机器人世界里,感知是智能化的第步,是机器人获取环境信息,学习适应并自主决策的前提。听觉作为五感之,深度融合AI,可帮助
    的头像 发表于 08-26 17:44 634次阅读

    傅利叶人形机器人GR-3正式发布,主打交互陪伴,可触摸

    的设计灵感深受动画电影《超能陆战队》中治疗机器人“大白”的影响,主打陪伴属性,旨在通过日常互动、社交交流与情绪陪伴,构建人与机器人之间的情感纽带。GR-3拥有两个明确的应用目标:是社
    的头像 发表于 08-07 14:00 2962次阅读

    天吃透条产业链:具身智能(AI+机器人

    01 产业链全景图 02 具身智能简介 简单来说,具身智能就是给人工智能赋予个实体,它能够像人类一样在现实世界中行动、感知和学习,而不是仅仅局限于虚拟世界。打个比方,你有
    的头像 发表于 06-19 09:21 1278次阅读
    <b class='flag-5'>一</b>天吃透<b class='flag-5'>一</b>条产业链:具身智能(AI+<b class='flag-5'>机器人</b>)

    详细介绍机场智能指路机器人的工作原理

    周围环境变化。激光雷达和摄像头持续检测前方是否有障碍物,旦发现障碍物,导航系统会立即调整路径,引导机器人避开障碍物,确保行走安全。同时,机器人会根据实时的人流情况,动态调整行走速度
    发表于 05-10 18:26

    什么是机器人?追踪机器人技术的发展和未来

    个可编程的机器,能够感知,处理信息,并自主或在定程度上的人类指导下执行任务。与传统工具不同,机器人可以适应
    的头像 发表于 04-24 19:21 4056次阅读

    人形机器人像一样去感知,这家国产芯片公司选择从信号链入手

    电子发烧友网报道(文/吴子鹏)人形机器人的感知系统,作为其与物理世界交互的关键窗口,极大程度上决定了机器人的智能化水平与应用价值。借助多模态传感器融合,人形机器人有望实现比肩甚至超越
    的头像 发表于 04-10 00:09 2733次阅读
    <b class='flag-5'>让</b>人形<b class='flag-5'>机器人像</b>人<b class='flag-5'>一样</b>去感知,这家国产芯片公司选择从信号链入手

    AI机器人运动控制方案

    AI机器人具备感知、思考和行动能力,通过传感器感知周围环境信息,利用人工智能算法对数据进行分析处理以理解环境和任务,进而自主地做出决策并通过
    的头像 发表于 03-03 13:51 415次阅读
    AI<b class='flag-5'>机器人</b>运动控制方案

    为什么要费这么大劲机器人像一样,而不是更实用的形态?

    为什么要费这么大劲机器人像一样,而不是更实用的形态? 将机器人设计成人形(即仿人机器人)的意义可以从多个角度探讨,涉及技术、社会、心理和
    的头像 发表于 02-10 10:03 1039次阅读

    【「具身智能机器人系统」阅读体验】2.具身智能机器人的基础模块

    非常重要的地位。 先说这个自主机器人的计算系统。计算系统是自主机器人的关键部件。自主机器人通过智能计算系统与物理世界交互,自主地完成任务。通
    发表于 01-04 19:22

    【「具身智能机器人系统」阅读体验】+两本互为支持的书

    书则是介绍视觉处理的执行体,该执行体力图以更人性化的方式来执行和处理问题,即以具身的形式,而非传统的机械式的生硬形式来充当执行体。 也就是说是以人体特征的机器人的形式来感知周围环境、熟悉
    发表于 01-01 15:50

    【「具身智能机器人系统」阅读体验】2.具身智能机器人大模型

    。 多模态融合的创新与突破 机器人控制技术的另个重要突破在于多模态大模型的应用。相比于仅通过文字进行人机交互的传统方法,现代机器人能够融合
    发表于 12-29 23:04

    【「具身智能机器人系统」阅读体验】+数据在具身人工智能中的价值

    嵌入式人工智能(EAI)将人工智能集成到机器人等物理实体中,使它们能够感知、学习环境并与之动态交互。这种能力使此类机器人能够在人类社会中有效
    发表于 12-24 00:33

    《具身智能机器人系统》第1-6章阅读心得之具身智能机器人系统背景知识与基础模块

    Intelligence)这概念有了深入理解。本书开篇和大部分书籍文章一样,都是立足宏观角度,先把视角引申到世界经济形势。书中阐述具身智能机器人有望成为继计算机、智能手机后的新
    发表于 12-19 22:26