0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

人形机器人感知系统的特点:多模态感知、高精度、实时性

Carol Li 来源:电子发烧友 作者:李弯弯 2024-07-30 01:05 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

电子发烧友网报道(文/李弯弯)感知系统是人形机器人实现智能交互和自主行动的关键组成部分。该系统通常包括多种传感器算法,用于收集、处理和分析来自外部环境的信息。不同企业所采用的感知系统会有所不同,如优必选、小米科技、宇树科技等。

人形机器人感知系统包括哪些传感器和算法

人形机器人感知系统包括各种传感器,如视觉传感器:通过模拟人类双眼视觉系统的观测原理,利用双目相机、深度相机、激光雷达等获取周围环境的真实空间信息。例如,特斯拉在人形机器人上采用纯视觉方案,使用三颗摄像头实现低成本的环境感知。

位置传感器:如IMU(惯性测量单元),用于测量机器人的运动及姿态信息。关节力控传感器:包括一维压力传感器和一维力矩传感器,用于测量关节的力和力矩信息。特斯拉在每个线性关节和旋转关节上分别放置这些传感器,以实现高精度的运动控制。

手腕和脚踝传感器:采用六维力矩传感器,提供手腕和脚踝的力和力矩信息。这些传感器对于提高机器人的灵巧性和稳定性至关重要。

触觉传感器:增加手部触觉传感器可以提高机器人手部的灵巧性能。特斯拉在手部使用了10个触觉传感器,而其他厂商也在探索基于视觉方案的触觉传感器。

算法方面,如视觉感知算法,包括双目三维环境感知、3D点云配准、位姿估计算法等,用于实现对外界环境的真实刻画及数字模型的重建。

数据融合算法:将来自不同传感器的数据进行融合,提高感知系统的准确性和鲁棒性。

一般来说,人形机器人的感知系统会采用多模态感知,通过集成多种传感器,实现视觉、位觉、触觉等多模态感知,以获取更全面的环境信息,另外还需要高精度和实时性,采用高精度传感器和算法,可以确保感知系统能够准确感知外部环境的变化,感知系统需要具备高实时性,以确保机器人能够及时响应环境变化。

市面上的人形机器人都采用怎样的感知技术

目前市面上已经有多款人形机器人,如优必选的人形机器人Walker X,它的感知系统主要由高性能伺服关节、多维力觉、多目立体视觉、全向听觉、惯性及测距等全方位的感知技术构成。

具体来看,Walker X拥有41个高性能伺服关节,这些关节不仅具备高转矩(4.5Nm-200Nm)和高转速(30rpm-90rpm)的特点,还通过精确的控制算法实现了快速而稳定的运动。这些伺服关节是Walker X感知系统的重要组成部分,为机器人的四肢提供了灵活而有力的支持。

Walker X具备多维力觉感知能力,能够实时感知机器人四肢与外界环境的接触力大小和方向。这种感知能力使得Walker X能够在复杂环境中进行柔顺的物理交互,确保人机交互的安全性。

Walker X采用了多目立体视觉技术,通过多个摄像头捕捉周围环境的三维信息。这种技术使得Walker X能够实时感知物体的位置、形状和大小等信息,为机器人的导航、避障和物体识别等任务提供了重要的支持。

另外,Walker X的全向听觉系统能够实时感知来自四面八方的声音信息。通过先进的音频处理算法,Walker X能够准确识别语音指令、环境噪音等信息,并与用户进行自然的语言交互。

Walker X还配备了惯性和测距传感器,用于实时感知自身的姿态、速度和位置等信息。这些传感器能够确保Walker X在行走、导航等任务中的稳定性和准确性。

小米科技的人形机器人CyberOne,其感知系统由多个传感器和先进的算法组成,使得机器人能够实时感知周围环境,进行自主运动及决策。该系统集成了多种感知技术,包括视觉、听觉、力觉等,确保机器人在各种复杂环境中都能做出准确的反应。

视觉感知方面,CyberOne搭载了自研的Mi-Sense深度视觉模组,结合AI算法,使其具有完整的三维空间感知能力。该视觉系统能够对真实世界进行三维虚拟重建,为机器人的导航、避障和物体识别等任务提供重要支持。同时,通过深度学习计算机视觉技术,CyberOne能够实现人物身份识别、手势识别、表情识别等功能,从而与人类进行更自然的交互。

听觉感知方面,CyberOne具备全向听觉系统,能够实时感知来自四面八方的声音信息。结合自研的MiAI环境语意识别引擎和MiAI语音情绪识别引擎,CyberOne能够识别85种环境音和6大类45种人类情绪,实现更智能的交互体验。

力觉感知方面,CyberOne具备多维力觉感知能力,能够实时感知机器人四肢与外界环境的接触力大小和方向,确保人机交互的安全性。CyberOne还配备了惯性和测距传感器,用于实时感知自身的姿态、速度和位置等信息,确保机器人在行走、导航等任务中的稳定性和准确性。

宇树科技人形机器人Unitree G1的感知系统是其实现智能化交互和高效任务执行的核心部分。视觉感知方面,Unitree G1搭载了Intel RealSense D435摄像机和LIVOX-MID360 3D激光雷达,这些先进的视觉传感器共同构成了G1的全方位探测与感知能力。通过这些传感器,G1能够实现360°的探测感知,极大地增强了其对周围环境的理解和适应性。

传感器配置方面,Unitree G1配备Intel RealSense D435摄像机,这是一款高性能的RGB-D摄像机,能够提供深度信息和彩色图像,帮助G1识别物体和人员,以及构建周围环境的三维模型。Unitree G1还配备LIVOX-MID360 3D激光雷达,这款激光雷达能够扫描周围的环境,为G1提供精确的距离测量和障碍物检测,确保机器人在复杂环境中的安全导航。

写在最后

目前而言,随着人工智能技术的发展,人形机器人的感知系统将更加智能化,能够更好地理解和响应人类的需求。未来的感知系统也将更加模块化,可以根据不同的应用场景和需求进行灵活配置和扩展。同时,随着传感器和算法的不断发展,人形机器人感知系统的成本将逐渐降低,人形机器人也将会更加普及和实用。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2579

    文章

    56021

    浏览量

    796435
  • 算法
    +关注

    关注

    23

    文章

    4819

    浏览量

    98988
  • 感知系统
    +关注

    关注

    1

    文章

    88

    浏览量

    16490
  • 人形机器人
    +关注

    关注

    8

    文章

    1129

    浏览量

    18602
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    打破定点作业局限,JetArm Pro融合感知、移动与抓取的模态机器人方案

    并动态响应的模态机器人。当“手眼合一”的精准操作与“移动底盘”的空间自由度深度融合,JetArmPro便从传统的定点作业中解放出来,开启了一系列贴近真实场景的智
    的头像 发表于 06-08 19:14 295次阅读
    打破定点作业局限,JetArm Pro融合<b class='flag-5'>感知</b>、移动与抓取的<b class='flag-5'>多</b><b class='flag-5'>模态</b><b class='flag-5'>机器人</b>方案

    揭秘人形机器人成本构成:这三个核心零部件,决定了它能走多远

    、重量轻、高动态响应、高精度 。 痛点:如果伺服系统不够灵敏,机器人走路就会像“僵尸”一样僵硬、迟缓,甚至容易摔倒。如果扭矩(力量)不够,它连一瓶水都拿不起来。 一句话总结:没有高性能的伺服
    发表于 06-01 17:54

    基于振动马达技术的人形机器人解决方案:从执行到感知的协同系统构建

    人形机器人解决方案正在从传统机械控制系统,向“高精度执行 + 多维感知融合”的方向快速演进。在这一过程中,振动马达技术逐渐从辅助反馈元件,升
    的头像 发表于 06-01 10:15 110次阅读
    基于振动马达技术的<b class='flag-5'>人形</b><b class='flag-5'>机器人</b>解决方案:从执行到<b class='flag-5'>感知</b>的协同<b class='flag-5'>系统</b>构建

    人形机器人关节扭矩传感器的详细应用场景及解决方案

    详细应用场景 高精度力控与柔顺操作(上肢与手部) 场景描述:机器人需要抓取鸡蛋、拧螺丝、装配精密零件或使用人类工具。若仅靠位置控制,极易损坏物体或自身。 传感器作用 :实时感知末端工具
    发表于 05-20 17:40

    人形机器人执行、感知系统技术及市场解析

    电子发烧友网站提供《人形机器人执行、感知系统技术及市场解析.pdf》资料免费下载
    发表于 05-20 11:02 53次下载

    机器人关节高精度感知核心是什么?

    人形、四足等复杂机器人的运动控制中,关节的动态姿态感知直接决定了整机平衡控制的精度与稳定性。ER-MIMU-M02 作为一款高性能 MEMS 惯性测量单元,凭借其优异的零偏稳定性、高
    的头像 发表于 05-07 14:53 167次阅读

    一文厘清:具身智能与人形机器人的技术边界与差异

    模态感知实时运动控制、环境建模、自主决策、在线学习等模块,可搭载于复合机器人、AMR、机械臂、四足机器人等任意硬件本体,强调适应
    的头像 发表于 04-29 11:23 554次阅读

    为什么说关节扭矩传感器是高端机器人的“触觉神经”?

    “盲动”变成“感知运动” 普通机器人靠编码器控制位置,只能“按死命令走”。而关节扭矩传感器实时测量每个关节受到的扭转力,精度可达0.01牛米,采样频率高达1000赫兹(每秒反馈1000
    发表于 04-17 17:27

    模态感知大模型驱动的密闭空间自主勘探系统的应用与未来发展

        模态感知大模型驱动的密闭空间自主勘探系统    北京华盛恒辉模态
    的头像 发表于 12-29 11:27 588次阅读

    高精度机器人控制的核心——基于 MYD-LT536 开发板的精密运动控制方案

    集成方案; 开发者可直接对接上层 ROS 框架,实现机器人同步控制与智能路径规划。 三、典型应用:高精度装配机器人控制系统 在某高端电
    发表于 11-14 15:48

    【应用方案】全场景落地!艾为芯让人形机器人更“懂”世界

    电子针对人形机器人多模感知需求,推出系统级解决方案,覆盖高精度感知、高能效供电与高保真交互,为
    的头像 发表于 11-05 19:29 998次阅读
    【应用方案】全场景落地!艾为芯让<b class='flag-5'>人形</b><b class='flag-5'>机器人</b>更“懂”世界

    RK3576机器人核心:三屏异显+八路摄像头,重塑机器人交互与感知

    。· 多路MIPI-CSI接口:原生支持接入多个摄像头,为构建目视觉系统打下坚实基础,满足机器人全方位感知需求。 RK3576在机器人领域
    发表于 10-29 16:41

    人形机器人重复定位精度:工业柔性制造的“定海神针”

    人形机器人重复定位精度已不再是一个孤立的性能参数,而是集成感知、决策、控制与仿真的系统级能力体现。随着工业场景对柔性制造的需求日益提升,高重
    的头像 发表于 09-10 16:55 1018次阅读
    <b class='flag-5'>人形</b><b class='flag-5'>机器人</b>重复定位<b class='flag-5'>精度</b>:工业柔性制造的“定海神针”

    机器人竞技幕后:磁传感器芯片激活 “精准感知力”

    2025 世界人形机器人运动会于 8 月 17 日圆满收官,赛场上机器人在跑步、跳跃、抓取等项目中的精彩表现,背后是运动控制、环境感知等技术的迭代升级。而在这些技术中,磁传感器芯片凭借
    发表于 08-26 10:02

    智能制造工业机器人技术发展趋势

    全面监控制造状态。 长期以来,大型部件制造信息感知依赖人工,机器人视觉感知系统应用后,人为干
    的头像 发表于 07-31 09:43 1285次阅读
    智能制造工业<b class='flag-5'>机器人</b>技术发展趋势