0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

用现实世界的SLAM技术打造《机器人总动员》里的瓦力WALL·E

旷视MEGVII 来源:Megvii旷视科技 作者:Megvii旷视科技 2020-09-26 09:40 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

还记得《机器人总动员》里的瓦力WALL·E吗?

那个穿梭于城市之间

能运能抗,能上能下

还偶尔卖萌歪头杀的小可爱!

你是否有好奇过

它是如何看见世界的呢?

点击下方空白区域查看答案

其实小旷也不知道瓦力怎么看见世界:)

但小旷想告诉你

现实世界里的SLAM技术可以做到!

背景小知识实时定位与地图构建(Simultaneous Localization and Mapping,SLAM)技术是机器人导航控制领域一项极为重要的基础技术,虽然近年来SLAM领域发展迅猛,但算法在各类环境下的鲁棒性问题仍然有待探索,这其中数据集扮演着关键角色。 如上视频是一个典型的SLAM工作:利用视频序列同时估计相机姿态和构建环境地图,视频源于Direct Sparse Visual-Inertial Odometry using Dynamic Marginalization, Lukas von Stumberg, Vladyslav Usenko, Daniel Cremers, 2018 IEEE International Conference on Robotics and Automation (ICRA)

在不久前的CVPR2020 SLAM挑战赛上,旷视研究院SLAM组以绝对优势包揽了挑战赛全部赛道冠军!

这不仅再次证明旷视在SLAM领域所具备的国际顶尖水平,也反映了旷视在机器人建图定位方面的业界领先水平!

而SLAM技术的突破,也让“瓦力”离现实更进一步哦~

旷视研究院 SLAM 组在此次比赛中包揽了Mono Track和Stereo Track两个赛道冠军

那么问题来了,旷视是如何成为双料冠军的呢?

本次挑战赛完全基于超难数据集TartanAir开展,TartanAir包含大量风格迥异、环境变量多元的场景,同时相机的各种极端运动模式,也对SLAM算法鲁棒性提出了巨大挑战!

TartanAir 数据示例,官网:http://theairlab.org/tartanair-dataset/

旷视研究院SLAM组,采用SuperPoint和SuperGlue进行特征提取和匹配,同时融合多种视觉特征,独创根据环境进行动态阈值调整策略,结合全局闭环修正精度,最终达成目标。

如上为双目测试集上的部分结果,更详细的技术方案解析,欢迎阅读(戳可直接跳转)《在超难数据集TartanAir上登顶CVPR 2020 SLAM挑战赛,旷视用了这样的方案》了解!

而在比赛之外,大家或许早已见识过旷视SLAM技术。

旷视全新一代机器人MegBot-S800 AMR,基于业内首创的激光视觉融合导航技术打造:额定负载800KG,相当于一次可以扛起10个成年人!360°激光雷达覆盖、VSLAM 技术加持;具备低矮物体检测、智能绕障能力;拥有更精准的定位能力和更强大的环境适应性!

MegBot-S800 AMR

在9月8日举办的2020服贸会海淀之夜上,MegBot-S800 AMR就作为“侍应生”,穿梭于复杂的会场和宾客之中,顺利完成了递送酒水物品的任务!

当然,机器人的未来远不止于此。旷视也将在 SLAM 领域带来更多突破和惊喜,让“瓦力”走向现实!

责任编辑:xj

原文标题:看旷视CVPR2020 SLAM冠军团队如何打造 “WALL·E”

文章出处:【微信公众号:Megvii旷视科技】欢迎添加关注!文章转载请注明出处。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • SLAM
    +关注

    关注

    24

    文章

    459

    浏览量

    33423
  • 旷视科技
    +关注

    关注

    1

    文章

    154

    浏览量

    12174

原文标题:看旷视CVPR2020 SLAM冠军团队如何打造 “WALL·E”

文章出处:【微信号:megvii,微信公众号:旷视MEGVII】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    基于米尔RK3576核心板的国产割草机器人解决方案

    在智慧庭院与机器人产业高速发展的今天,割草机器人正经历从“随机碰撞式”向“规划自主式”的深刻变革。与此同时,在国产化替代、供应链自主可控的产业政策推动下,国内整机厂商对高算、低功耗、国产自主可控
    发表于 04-24 17:31

    为什么说关节扭矩传感器是高端机器人的“触觉神经”?

    “盲动”变成“感知运动” 普通机器人靠编码器控制位置,只能“按死命令走”。而关节扭矩传感器实时测量每个关节受到的扭转,精度可达0.01牛米,采样频率高达1000赫兹(每秒反馈1000次)。这相当于
    发表于 04-17 17:27

    为何你的机器人手臂“知觉”存在偏差?探秘传感器的奥秘

    ,甚至安装时的小角度偏差都算出来,最后实现精准的重力补偿,让传感器只反馈我们关心的“外部”。整个过程不需要啥昂贵的校准设备,核心就是数学和编程。我会尽量大白话把原理说透,再附上能直接运行的Python代码。不管你是学机器人
    发表于 04-13 15:25

    NVIDIA 携手全球机器人领导者,将物理 AI 带入现实世界

    基于 NVIDIA 技术,大规模开发并部署物理 AI。 NVIDIA 发布全新 NVIDIA Cosmos 世界模型、NVIDIA Isaac 仿真框架以及 NVIDIA Isaac GR00T N 系列模型,加速迈向智能机器人
    的头像 发表于 03-17 11:22 606次阅读
    NVIDIA 携手全球<b class='flag-5'>机器人</b>领导者,将物理 AI 带入<b class='flag-5'>现实</b><b class='flag-5'>世界</b>

    再谈低温烧结银的应用:从春晚四家机器人出镜的幕后推手说起

    、芯片封装、功率模块的关键支撑;而低温烧结银正从实验室走向机器人、新能源、第三代半导体等产业核心,成为高端电子互连的 隐形推手。 一、春晚四家机器人:幕后推手与技术硬核 1 四家机器人
    发表于 02-17 14:07

    打造机器人母生态!一年开发者数量翻倍,地瓜机器人发布具身智能大算开发平台

    增长200%,个人开发者数量翻倍。   作为机器人芯片公司,地瓜机器人已经打造了两大系列产品:旭日X系列主打高性价比,面向泛消费机器人;S系列则聚焦具身智能与人形
    的头像 发表于 11-27 09:16 8226次阅读
    <b class='flag-5'>打造</b><b class='flag-5'>机器人</b>母生态!一年开发者数量翻倍,地瓜<b class='flag-5'>机器人</b>发布具身智能大算<b class='flag-5'>力</b>开发平台

    RK3576机器人核心:三屏异显+八路摄像头,重塑机器人交互与感知

    ?RK3576的强大并非偶然,其架构设计完美契合了现代机器人的核心需求:· 强大的异构计算与AI能力:内置的NPU为机器人的视觉AI算法(如SLAM、行为识别、手势交互)提供了强劲的算
    发表于 10-29 16:41

    小萝卜机器人的故事

    经过我的申请, 马老师发放了, 小萝卜机器人的, 开发权限, 原来的小萝卜公司, 因为经营不善倒闭, 作为科研产品, 几个技术对此惋惜, 自掏腰包, 要让小萝卜机器人, 再生, 每次听到小萝卜说
    发表于 10-23 05:24

    机器人竞技幕后:磁传感器芯片激活 “精准感知

    2025 世界人形机器人运动会于 8 月 17 日圆满收官,赛场上机器人在跑步、跳跃、抓取等项目中的精彩表现,背后是运动控制、环境感知等技术的迭代升级。而在这些
    发表于 08-26 10:02

    工业机器人的特点

    好的程序,机器人的产出很稳定。 此外,工业机器人的使用是实现自动化生产的关键一步。麦肯锡预计自动化可以使全球生产年化增长率达0.8%至1.4%。相对而言,1850-1910年间的蒸汽机革命带来的不过是
    发表于 07-26 11:22

    “结构光+ToF”双剑合璧,这家公司技术融合开启机器人全场景感知时代​

    过程中,3D 视觉感知是底层核心技术之一,它通过实时捕捉、解析三维环境信息,赋予智能体空间理解与交互能力。 在接受电子发烧友网专访时,光鉴科技创始、CEO 朱表示,机器人是具身智能
    的头像 发表于 05-21 00:53 7817次阅读
    “结构光+ToF”双剑合璧,这家公司<b class='flag-5'>用</b><b class='flag-5'>技术</b>融合开启<b class='flag-5'>机器人</b>全场景感知时代​

    盘点#机器人开发平台

    地瓜机器人RDK X5开发套件地瓜机器人RDK X5开发套件产品介绍 旭日5芯片10TOPs算-电子发烧友网机器人开发套件 Kria KR260
    发表于 05-13 15:02

    树莓派“复活”我的世界爬行者,现实版“噩梦”机器人诞生!

    关系增添了新意。利用我们喜爱的单板计算机(SBC),Lopez打造了一款依赖于树莓派的爬行者机器人,并且甚至集成了人工智能。别担心,这个爬行者机器人并不会真的爆炸。
    的头像 发表于 05-07 17:31 781次阅读
    树莓派“复活”我的<b class='flag-5'>世界</b>爬行者,<b class='flag-5'>现实</b>版“噩梦”<b class='flag-5'>机器人</b>诞生!

    【「# ROS 2智能机器人开发实践」阅读体验】视觉实现的基础算法的应用

    与地图构建:让机器人理解环境 第8章聚焦SLAM(同步定位与地图构建)技术,介绍了SLAM Toolbox和Cartographer两大主流框架。我的学习体会如下:
    发表于 05-03 19:41

    【「# ROS 2智能机器人开发实践」阅读体验】机器人入门的引路书

    ROS的全称:Robot Operating System 机器人操作系统 ROS的 目的 :ROS支持通用库,是通信总线,协调多个传感器 为了解决机器人各厂商模块不通用的问题,让机器人
    发表于 04-30 01:05