0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Google的AI教会机器人学会了新的技能

独爱72H 来源:教育新闻网 作者:教育新闻网 2020-05-07 22:37 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

(文章来源:教育新闻网)
谷歌和加州大学伯克利分校的研究人员在本周在预印本服务器Arxiv.org上发表的两篇论文中描述了新的AI机器学习技术,这些技术使机器人能够适应从未见过的任务并抓住被遮挡的物体。第一项研究详细介绍了X射线,该算法在部署到机器人上时可以搜索对象的堆以掌握目标对象,而第二项研究则提出了一种策略适应技术,可以“教”机器人技能,而无需从头开始进行模型训练。

抓机器人是一个非常困难的挑战。例如,机器人努力执行所谓的“机械搜索”,即当他们不得不从一堆其他对象中识别并拾取一个对象时。大多数机器人不是特别适应性强,并且缺乏足够功能强大的AI模型来指导机械手进行机械搜索。X射线和策略调整步骤可以构成产品包装系统的基础,该产品包装系统可以在无需人工监督的情况下发现,拾取和放下各种物体。

有关X射线的研究的合著者指出,由于缺乏合适的模型,机械搜索(在大量对象中找到对象)仍然具有挑战性。X射线结合了遮挡推断和假设预测来解决该问题,它可用来估计与对象最相似的边界框(对象周围矩形边框的坐标)的占用率分布,同时考虑各种平移和旋转。

X-Ray假定堆中至少有一个完全或部分被未知对象遮挡的目标对象,并且每个时间步最多可以抓取一个对象。以RGB图像和目标对象为输入,它可以预测场景的占用率分布和分割蒙版,并计算几种潜在的抓握动作,以最高的成功概率执行该动作。为了训练和验证X射线,研究人员生成了10,000个增强深度图像的语料库,这些图像标记有矩形框目标对象的对象占用分布。他们从Thingiverse上的1296个3D CAD模型的开放源数据集中进行采样,选择了10个大小相同,体积较小但厚度较小的盒子目标,因此它们更有可能被遮挡。这使他们总共获得了100,000张图像。

在这10,000张图片中,约有8,000张被保留用于培训,其余的则留作测试。使用一千个包含模拟对象(盖子,多米诺骨牌和长笛)的其他图像来评估X射线对看不见的形状,对象,长宽比和比例尺的概括。在涉及带有吸盘和平行颚式抓爪的真实ABB YuMi机器人的物理实验中,研究人员要求X射线将物体装满垃圾箱,然后将垃圾箱倾倒在目标物体的顶部。在最初包含25个对象的堆中,系统在20次试验中以5个动作的中位数提取了目标对象,成功率为100%。

合著者将精力放在未来的工作上,以提高X射线的训练效率,并分析数据集大小以及用于生成训练分布的平移和旋转次数的影响。他们还计划根据目标对象可见性的奖励来探索强化学习策略。

在这两篇论文的最新文章中,合著者试图开发一种能够不断适应新的现实环境,物体和条件的系统。与大多数机器人相反,后者仅需训练一次即可部署,而适应能力却很少。研究人员对机器学习模型进行了预训练,以在608,000次尝试抓取的语料库中抓取一系列对象,然后他们执行的任务是使用向其起始位置右移10厘米的抓手抓取对象。系统练习了一段时间(经过800次尝试)并将这些尝试记录到新数据集(目标数据集)中之后,新尝试在50%的时间内与原始数据集进行了混合,调整模型。

在五个不同的场景中重复了这些步骤-预训练,尝试新任务和微调。一方面,刺眼的光线阻碍了机器人的摄像头。在另一种情况下,棋盘图案的背景使模型难以识别对象。最后,实验人员让机器人抓住训练中看不到的透明瓶子(众所周知,透明物体很难抓住机器人,因为它们有时会混淆深度传感器),并捡拾坐在高反射金属板上的物体。

研究人员报告说,在实验中,该模型成功地在苛刻的灯光下63%的时间,透明瓶子的74%的时间,棋盘垫板的时间的86%的时间,抓手扩展的88%的时间成功地捕获了物体,和91%的时间使用偏置夹持器。而且,他们说,机器人适应新情况只需要花费1-4个小时的练习时间(相比之下,学习如何掌握的时间大约为6,000个小时),并且性能不会随着所适应的模型而降低。
(责任编辑:fqj)

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 谷歌
    +关注

    关注

    27

    文章

    6259

    浏览量

    111982
  • AI
    AI
    +关注

    关注

    91

    文章

    41141

    浏览量

    302609
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    基于NVIDIA Isaac Lab拓展多模态机器人学

    构建强大的智能机器人需要在复杂环境中进行测试。然而,在现实世界中收集数据不仅成本高昂、耗时漫长,还常常伴随高风险。针对关键危险场景(例如高速碰撞或硬件故障)进行安全训练几乎是不可能的。更严重的是,现实世界的数据往往偏向“正常”运行条件,导致机器人在面对突发状况时缺乏应对能
    的头像 发表于 03-09 16:26 956次阅读
    基于NVIDIA Isaac Lab拓展多模态<b class='flag-5'>机器人学</b>习

    中兴通讯推动具身智能机器人行业创新发展

    近日,由中兴通讯主办、上海市计算机学会与上海交通大学计算机学院协办的“2026年具身智能机器人学术研讨会”在上海顺利举行。本次研讨会以“人机共生,智塑未来”为主题,汇聚清华大学、上海交通大学
    的头像 发表于 02-27 11:10 957次阅读

    禾赛科技欲做物理AI的基础设施建设者

    近日,禾赛科技 CEO 李一帆公开发表了题为《Infra For Physical AI:从汽车到机器人的变与不变》的演讲。作为激光雷达领域的领军人物,同时也是机器人学科博士,李一帆结合多年硬科技创业经历,分享了其对技术商业化、
    的头像 发表于 12-17 13:47 644次阅读

    WER 2025世锦赛暨能力风暴教育机器人高峰论坛在沪举行

    重塑各行各业,教育领域正站在深刻变革的前沿。世界教育机器人大赛(WER),被誉为"教育机器人界奥运会"的顶级赛事,由世界教育机器人学会主办,本次汇聚来自中国、中国香港、中国澳门、英国、墨西哥、菲律宾、马来西亚等三十余个国家和地区
    的头像 发表于 12-16 15:12 338次阅读
    WER 2025世锦赛暨能力风暴教育<b class='flag-5'>机器人</b>高峰论坛在沪举行

    广和通具身智能开发平台Fibot实现双臂机器人叠衣服

    叠衣服、整理家务……这些看似简单的日常任务,对机器人而言却是巨大的技术挑战。如何让机器人快速学会叠衣服?广和通具身智能开发平台Fibot以坚实的硬件基础、高效易上手的开发框架和精准的算法能力,仅需3小时即
    的头像 发表于 12-11 13:43 1610次阅读

    共筑智能教育新生态,维视智造亮相“科技赋能智创未来”论坛

    2025年11月1日,西安市人工智能机器人学会“科技赋能智创未来”论坛在西安文理学院顺利召开。作为学会理事单位、西安市智能制造产学研合作联盟首批签约企业,陕西维视智造股份有限公司受邀参加。
    的头像 发表于 11-05 11:38 314次阅读
    共筑智能教育新生态,维视智造亮相“科技赋能智创未来”论坛

    NVIDIA开源物理引擎与OpenUSD加速机器人学

    开发能在工厂、医院和公共空间与人类协同作业的机器人是一项巨大的技术挑战。这类机器人需具备与人类接近的灵巧性、感知能力、认知能力和全身协调性,以便于实时应对充满不确定性的真实环境。
    的头像 发表于 10-13 11:15 1195次阅读

    NVIDIA 发布三大利器,推动人形机器人迈向新纪元

    电子发烧友网综合报道 在节前的机器人学习大会(CoRL)上,NVIDIA 发布了一系列突破性技术,包括开源物理引擎 Newton、机器人基础模型 Isaac GROOT N1.6以及全新 AI
    的头像 发表于 10-13 04:42 5988次阅读

    英伟达发布机器人 “新大脑”,黄仁勋:人形机器人三年普及

    完成如 “烤面包” 这样的复杂任务。结合 Omniverse 仿真平台,训练效率提高了10倍,大大缩短了机器人学习和适应现实环境的时间。 英伟达创始人兼首席执行官黄仁勋在链博会上发表演讲时指出,物理 AI 将推动 AI 从虚拟世
    的头像 发表于 08-25 18:34 538次阅读

    易控智驾与中科院端到端自动驾驶方案入选CoRL 2025

    近日,旨在分享和探讨机器人技术与机器学习交叉领域最新进展的国际顶级机器人学习会议CoRL 2025 (Conference on Robot Learning)论文接收结果揭晓。
    的头像 发表于 08-18 14:43 2523次阅读
    易控智驾与中科院端到端自动驾驶方案入选CoRL 2025

    NVIDIA展示机器人领域的研究成果

    在今年的机器人科学与系统会议 (RSS) 上,NVIDIA 研究中心展示了一系列推动机器人学习的研究成果,展示了在仿真、现实世界迁移和决策制定领域的突破。
    的头像 发表于 07-23 10:43 1649次阅读

    NVIDIA Isaac Lab可用环境与强化学习脚本使用指南

    Lab 是一个适用于机器人学习的开源模块化框架,其模块化高保真仿真适用于各种训练环境,Isaac Lab 同时支持模仿学习(模仿人类)和强化学习(在尝试和错误中进行学习),为所有机器人具身提供了灵活的训练方法。它能够为各种训练场景提供用户友好的环境,帮助增加或更新
    的头像 发表于 07-14 15:29 2631次阅读
    NVIDIA Isaac Lab可用环境与强化学习脚本使用指南

    通过NVIDIA Cosmos模型增强机器人学

    通用机器人的时代已经到来,这得益于机械电子技术和机器人 AI 基础模型的进步。但目前机器人技术的发展仍面临一个关键挑战:机器人需要大量的训练
    的头像 发表于 07-14 11:49 1277次阅读
    通过NVIDIA Cosmos模型增强<b class='flag-5'>机器人学</b>习

    NVIDIA Isaac Sim和Isaac Lab现已推出早期开发者预览版

    NVIDIA 发布了机器人仿真参考应用 Isaac Sim 和机器人学习框架 Isaac Lab 的开发者预览版。开发者现在可以通过 GitHub 访问早期版本,抢先体验先进功能,用于在基于物理的仿真环境中构建、训练和测试 AI
    的头像 发表于 07-04 14:23 2033次阅读

    NVIDIA Isaac Sim与NVIDIA Isaac Lab的更新

    在 COMPUTEX 2025 上,NVIDIA 宣布了机器人仿真参考应用 NVIDIA Isaac Sim 和机器人学习框架 NVIDIA Isaac Lab 的更新,以加速各种形态机器人的开发。
    的头像 发表于 05-28 10:06 2400次阅读