这项技术让可穿戴设备在剧烈运动、水下等复杂环境中,依然能实现精准手势识别和机械臂控制,为虚拟现实、康复医疗、工业救援等领域打开了新大门。
直击痛点:运动干扰是手势识别的“敌人”
智能手表、运动手环等可穿戴设备早已融入生活,但传统惯性测量单元(IMU)始终绕不开一个核心问题——抗干扰能力弱。
当你跑步时,前臂的自然摆动会产生运动伪影;乘坐交通工具时,环境振动会干扰信号;甚至简单的姿势变化,都可能因为重力矢量改变导致设备方向偏移。
这些干扰信号要么和手势信号频率相近,要么幅度更大,很容易“淹没”真实指令,而且不同人的动作习惯差异大,进一步降低了识别准确率,让运动场景下的人机交互沦为“摆设”。
在工业作业、康复训练等专业场景中,这个问题更显致命。想象一下,救援人员在奔跑中想控制无人机探查险情,却因信号干扰频频误操作;康复患者试图通过手势控制辅助器械,却被身体晃动影响指令传递——传统设备的局限性,一直制约着人机交互的实用性。
双重创新:硬件+AI打造“抗干扰神器”
为了攻克这一难题,研究团队给出了“硬件革新+算法优化”的双重解决方案,让可穿戴传感器兼具“灵活性”与“智慧脑”。
迷你可拉伸传感器
薄如纸片,戴感舒适,集成了六通道 IMU、肌电信号(EMG)模块、蓝牙微控制器单元和可拉伸电池,能够无线捕获和传输手势信号。
这款传感器尺寸仅1.8×4.5平方厘米,厚度2毫米,拉伸性超过20%,贴在前臂完全不影响活动。它采用四层精巧设计,每层各司其职:第一层为电池层,充放电60次后仍能稳定工作,库仑效率接近100%;第二层包含天线匹配单元和EMG采集模块,使用了三层电极结构,确保信号采集的稳定性;第三层集成了六通道 IMU 和蓝牙微控制器单元,用于信号处理和无线传输。在开放环境中,蓝牙在20米距离内信号稳定,连续运行30分钟最高温度仅27.7℃,佩戴1小时皮肤温度保持34.5℃,安全无负担。

系统整体结构与性能
深度学习算法
抗干扰的核心,在于背后的AI“大脑”。团队构建了包含19种前臂手势,以及跑步、高频振动、姿势变化等干扰信号的复合数据集,训练深度学习网络。最终选定的LeNet-5卷积神经网络表现最优,召回率超0.92,精确度超0.93,特异性更是高达0.99。
针对不同人的个体差异,研究团队还引入迁移学习技术:只需每个手势提供2个样本(坐姿和躺姿各一个)进行微调,就能将手势识别准确率从51%提升至92%以上,数据收集时间也从2分钟缩短到6秒,大幅降低了使用门槛。
场景实测:跑步、水下都能精准控设备
这项技术的实力,在真实场景测试中得到了充分验证。在实时控制测试中,系统采用滑动窗口机制实现连续手势识别:手势信号无线传输延迟约1毫秒,AI模型预测仅需1毫秒,收到三个连续相同预测后,机械臂275毫秒内就能做出响应。即便测试者在跑步机上剧烈跑步,前臂晃动剧烈,系统仍能精准控制机械臂完成抓取小瓶等精细动作。

具有运动伪影的实时机械臂控制
更令人惊喜的是其水下应用潜力。研究团队利用海浪模拟器获取各种海浪干扰信号,构建专属数据集训练模型。测试中,潜水员在海浪干扰下,能精准控制水下机器人开展目标跟踪、沉船检查等任务。而海水还能降低电极-皮肤阻抗,进一步提升肌电信号质量,让水下交互更顺畅。
未来可期:重塑多领域人机交互模式
这项抗干扰人机交互技术的突破,不仅解决了可穿戴设备的“老大难”问题,更在多个领域展现出变革性潜力。在医疗康复领域,它能让肢体活动不便的患者,在日常活动中精准控制康复器械,助力功能恢复;在工业场景中,工人可在高动态作业环境下免手持控制工具,提升作业安全性与效率;在消费电子领域,未来的智能手表、VR设备将摆脱静止状态的使用限制,运动中切歌、跑步时操控设备都能精准响应。
从实验室到真实场景,从陆地到水下,这项由华人团队主导的研究,用“硬件+AI”的创新思路,打破了人机交互的环境限制。随着技术的进一步完善,或许不久后,我们就能在任何场景下,与智能设备实现“心有灵犀”的顺畅沟通。
来源:上海宏勃生物科技发展有限公司
-
传感器
+关注
关注
2573文章
54353浏览量
785760 -
手势识别
+关注
关注
8文章
232浏览量
48714 -
惯性测量单元
+关注
关注
2文章
68浏览量
10934
发布评论请先 登录
DS4-PPB级异味传感器精准感知,洞察无形气味风险
新型生物传感器问世:使用手机即可检测皮质醇水平,比医院检测还准
机器人竞技幕后:磁传感器芯片激活 “精准感知力”
同济大学:仿生纳米通道气凝胶晶体管,突破生物传感灵敏度极限
华中科技大学:研发新型荧光传感器,实现肉类腐败可视化监测
北京理工大学生命学院:研发新型电化学生物传感器,聚焦血糖监测技术突破
上海交通大学:在高稳定纳米光学生物分子传感器方向取得进展
上海大学:可于复杂生物环境中实时监测生物标志物的即用型OECT生物传感器
贸泽开售STMicroelectronics新型生物传感器ST1VAFE3BX
清华大学深圳国际研究生院、新加坡国立大学:研发新型的超材料生物传感器件最新设计制备
一种高灵敏的化学检测系统

加州大学圣地亚哥分校:研发新型传感器,实现阿摩尔级生物分子精准检测
评论