0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

关于实感技术的分析和应用介绍

英特尔物联网 来源:djl 2019-09-16 10:17 次阅读

当你以为实感技术只是让机器拥有更多花哨的功能,它已经开始无微不至地关注你的健康,当你以为只有背背佳才能帮你矫正坐姿,已有神器远远超越它的地位。且看英特尔实感技术如何化身大白,帮你拥有完美身形。

实感技术无疑是今年CES舞台上的闪耀明星。科叔在CES主题演讲中骑着的Segway平衡车就装有全新的英特尔实感ZR300摄像头,拥有“视觉”的它不仅可以成为你的代步工具,还能变成机器人为你端茶倒水,或与其他智能产品互动。此外,同期登台的Yuneec无人机Typhoon H也同样搭载英特尔实感技术,从而获得实时跟随主人,记录主人运动中飒爽英姿的能力。

实感技术能让设备具有人类一样的感知能力。据英特尔实感技术相关负责人Achntya Bhowmik透露,目前英特尔一方面是缩小实感摄像头的尺寸,让其能适用于手机、手表等随身智能设备,另一方面则是打造一系列软件库,让实感技术可以做更多事情,比如手势识别、脸部识别、背景移除、3D扫描+打印、机器人人物识别以及无人机避障、增强现实应用、虚拟装饰掩饰等应用场景延伸。

随着实感技术的普及与广泛应用,游戏体验将更加真实,机器人将更能知冷知热,手机、电脑将更加炫酷而又实用。除此之外,还有更多让人意想不到的日常生活应用!

科再奇在CES上展示了Ninebot公司的Segway个人平衡车,它可以变成一个机器人

无论是学生还是普通上班族,我们坐在桌前的时间越来越多,而其中对着电脑的时间更是占了一大部分,而正确的坐姿往往并不舒服和自由,久而久之不良坐姿则会对我们的肩颈腰椎造成巨大伤害。除了背背佳,你天天面对的电脑可是提醒你保持正确坐姿的最佳监督者,其中的秘密就是CES大热的实感技术。奥妙就在文中揭晓。

本文首先介绍英特尔实感设备的组成结构以及该设备是如何获得现实场景下的三维数据。针对本课题,利用英特尔实感技术官方SDK提取出用户面部大约70个特征点的三维数据。这些特征点的三维数据就是本文坐姿检测算法的基础。在获得用户面部70多个点的三维数据之后,计算出用户此时头部的转动及俯仰角度,头部与计算机显示屏之间的距离,并投入使用;支持向量机(SVM)行训练和识别实验,实现了对“歪头”、“驼背”、“仰视过大”、“俯视过大”、“距离屏幕过近”等不良坐姿的判定,并经过多次实验验证。通过与MySQL数据库的结合,将坐姿特征、每日不同坐姿的时间长度记录下来,进行数据分析,生成报表给到用户,从而达到完整的检测、提醒、矫正目的。

实时坐姿 检测算法 硬 件及开发环境

实感技术是英特尔推出的深度摄像头,最新一代设备是全VGA分辨率(640 x 480 60fps)的深度摄像头,另外具有1080p分辨率的RGB摄像头,在拍摄1080p画面的时候传输速率为30fps,检测范围在0.2米至1.2米之间,根据不同的使用场景和算法,检测距离也不一样。目前已有多款笔记本电脑配置实感摄像头,本文采用的是开发版本的实感摄像头,为开发人员而设,如下图所示。


开发款摄像头

开发款的基本尺寸是150mm x 30mm x 58mm,根据官方介绍开发需要的环境配置如下:

具备USB 3.0接口,根据实际测试,台式机最好使用后置USB3.0接口,保证足够稳定的供电

官方建议使用第四代以及之后的酷睿系列CPU

在本次开发过程中使用的是第三代Core i5 CPU

需要注意的是,目前英特尔实感技术SDK仅支持Windows 8.1以及之后的Windows操作系统,而且是64位,暂不支持Mac OS 以及Linux

坐 姿检测系统设计

整套坐姿检测系统的设计流程如下图所示。

关于实感技术的分析和应用介绍

坐姿检测系统流程图

坐姿检测系统一共分为五个主要部分,分别是用户信息的录入,设备初始化以及图像预处理,紧接着就是最核心的实时坐姿检测,进而将坐姿信息进行统计,并在适当的时候进行结果展示与提醒。其中实时坐姿检测模块是本文的重点研究方向,设计流程如下图所示。

关于实感技术的分析和应用介绍

实时坐姿检测模块流程图

在实时坐姿检测中,如果开启目光跟踪技术,则利用目光跟踪技术进行校正,进行辅助判断,以增强系统的稳定性和准确性。

算 法判定

用户的头部运动以及头部状态是主要的特征提取空间,通过实感技术在三维坐标中,对头部的仰角(PITCH,绕X轴旋转)、偏航角(YAW,绕Y轴旋转)、翻滚角(ROLL,绕Z轴旋转)、高度信息、空间位置信息进行坐标变换提取,将转换过的数据进行卡尔曼滤波,获得较为准确的数据进行坐姿比对,并且头部信息各项参数满足一定指标,则判定该用户的坐姿是端正的,如下图所示。

用户坐标系

当欧拉角的翻滚角ROLL的绝对值大于10度的时候,可以认为用户左右歪头幅度过大,是错误的坐姿,需要进行提醒。准确来说,当ROLL值为正10度以上的时候,用户头部向右倾斜角度过大,当值为负10度以上的时候,用户头部向左倾斜角度过大;当欧拉角的YAW的绝对值大于18度的时候,可以认为用户头部的左右转头扭头的幅度过大。这样的错误坐姿经常出现在程序员群体中,因为很多程序员都是用两台显示器或多台显示器,由于桌子不够大,用户与显示器之间距离过近,在观看显示器的时候需要大幅度的扭头,对颈肩部造成额外负担,属于不良坐姿。当YAW值大于正18度的时候,用户头部向右旋转幅度过大,当YAW值小于负18度的时候,用户头部向左旋转的幅度过大;当欧拉角的PITCH值加5之后的绝对值大于25度,则可以判定用户的头部俯仰程度过大,属于不正确坐姿。通常情况下,用户在使用电脑的时候显示器都会略低于用户的头部高度,而最适宜的坐姿也不是头部一定要平视显示器,而是稍微低一点点头,这样有助于减轻肩部脊椎的压力,适合长时间工作。更准确地说,当欧拉角的PITCH值大于20度,用户是仰起头在看显示器画面,出现这种情况的典型错误坐姿就是手托下巴抬头看显示器,如下图所示,在阅读长段文字或者浏览视频内容的时候经常会出现这样的坐姿,而当欧拉角的PITCH值小于负30度的时候,用户低头幅度过大,可以判定用户坐姿不正确,这种情况下对脊柱的损伤较为严重,出现这种不良坐姿的多为佩戴眼镜的用户。


手托下巴的错误坐姿

另外一种典型的错误坐姿就是距离显示器过近,通过实感技术的深度信息,可以快速获得用户的头部、肩部相对于摄像头的距离,并且可以精确获得用户的眼睛距离摄像头的距离信息,因此可以快速判断用户是否距离显示器过近。本文实验的显示器尺寸是17寸,用户与显示器的最佳距离在70厘米至80厘米,小于70厘米的时候距离显示器过近,通常这样的情况都是因为驼背造成的,而反过来,不但会对视力造成严重损伤,也会加重驼背的情况。正确坐姿如下图所示。


正确坐姿

实 验结果分析

实验组数为4组,每组一名同学,共四人,实验结果数据如下:

第一组,实验天数5天

关于实感技术的分析和应用介绍

第二组,实验天数5天

关于实感技术的分析和应用介绍

第三组,实验天数5天

关于实感技术的分析和应用介绍

第四组,实验天数5天

关于实感技术的分析和应用介绍

通过对不同实验对象的测试数据进行分析,可以发现,算法的准确率在90%以上,相比于传统的智能硬件识别方法的40%,准确率有了大幅提升。但是在实验中也发现,第二组的检测准确率较低,通过对测试同学的身高、视力等信息进行了解,还发现另外一个重要因素,用户平时使用的桌子大小、座椅高低对用户的坐姿会造成很大影响,一套合适的座椅书桌也是非常有必要的。

E nding来啦~

本文设计了一种利用英特尔实感摄像头完成的实时坐姿检测算法,适用人群为需要长时间坐在电脑前工作的白领或者程序员群体,综合分析用户头部、眼部的数据,准确判断用户当前坐姿是否端正,相比于传统的智能硬件解决方案,省去了单独佩戴智能硬件设备的繁琐,并且极大提高了检测准确度,达到了90%以上,同时极低的误警率也保证了在实际应用场景中不会干扰到用户的正常工作。在算法和整体系统软件的设计上,仍有一定的优化改进空间,在对图像信息进行处理之前,可以采用更好的图像降噪算法,用户面部特征数据在处理的时候可以进行滤波处理,以减少采集数据误差及跳变对检测造成的影响。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 显示器
    +关注

    关注

    21

    文章

    4736

    浏览量

    137834
  • 图像处理
    +关注

    关注

    26

    文章

    1224

    浏览量

    55814
  • 实感技术
    +关注

    关注

    0

    文章

    8

    浏览量

    7794
收藏 人收藏

    评论

    相关推荐

    高通量测序技术及原理介绍

    的原理、流程以及应用领域等方面进行介绍。 一、高通量测序技术原理 高通量测序技术的原理主要包括DNA文库构建、测序方法选择、DNA样本扩增、测序仪的使用以及数据分析等几个重要步骤。下面
    的头像 发表于 02-03 14:46 2102次阅读

    关于太阳能光伏接线盒的几种类型介绍

    电子发烧友网站提供《关于太阳能光伏接线盒的几种类型介绍.doc》资料免费下载
    发表于 11-02 11:32 0次下载
    <b class='flag-5'>关于</b>太阳能光伏接线盒的几种类型<b class='flag-5'>介绍</b>

    关于相位锁定环(PLL)频率合成器的设计和分析

    本篇文章是关于相位锁定环(PLL)频率合成器的设计和分析,重点讨论了相位噪声和频率噪声的测量、建模和仿真方法。文章以设计一个假想的PLL频率合成器为例,详细介绍了设计过程和步骤。从规格选择、电路配置
    的头像 发表于 10-26 15:30 581次阅读
    <b class='flag-5'>关于</b>相位锁定环(PLL)频率合成器的设计和<b class='flag-5'>分析</b>

    自抗扰控制技术介绍

    本文简单介绍了自抗扰控制技术和它是如何从经典PID控制技术演变出新型实用控制技术的基本想法和关键技术。自抗扰控制器(Auto/Active
    发表于 09-28 06:04

    RFID技术和防冲撞算法分析

    论文详细介绍了 RFID 技术, 并针对 RFID 技术中不可避免的碰撞问题进行分析。提出一种动态调整二进制搜索树防冲撞算法, 可以有效解决 RFID 标签冲突问题。在时间复杂度和空间
    发表于 09-22 06:04

    有源功率因数校正技术介绍

    本书系统地介绍了功率因数校正电路的原理和应用技术。书中详细介绍了单相功率因数校正电路原理及控制方法(包括CCM单相Boost 型功率因数校正电路、CRM单相Boost型功率因数校正电路、交错并联
    发表于 09-19 07:12

    焊线封装技术介绍

    焊线封装是半导体封装过程中的一种关键技术,用于连接芯片和外部电路。随着半导体技术的进步,焊线封装也经历了多种技术的发展和创新。以下是关于焊线封装技术
    的头像 发表于 09-13 09:31 809次阅读
    焊线封装<b class='flag-5'>技术</b><b class='flag-5'>介绍</b>

    气象监测——关于气象监测站的介绍

    气象监测——关于气象监测站的介绍
    的头像 发表于 09-04 10:02 373次阅读

    请问关于m052的UID的介绍在哪里呀?

    如题,想知道关于m052的UID的介绍,但是在手册上没有找到,谁知道在哪呀?
    发表于 08-24 07:59

    关于农林气象站的基本介绍

    关于农林气象站的基本介绍
    的头像 发表于 08-23 16:58 248次阅读

    关于ELL外测液位计和“微振动分析技术

    ELL外测液位计为智能化的现场变送器式仪表,仪表主机安装在被测容器附近,测量探头安装在容器外壁上。测量探头发射和接收声纳信号,穿透容器壁在液体中形成回波,实现测距。 “微振动分析”是迄今为止最强
    的头像 发表于 08-21 15:30 181次阅读

    AMBA AHB Trace Macrocell(HTM)技术参考手册

    本前言介绍AMBA AHB Trace Macrocell(HTM)技术参考手动(TRM)。它包含以下部分: •关于这本书,见第xvi页 •第xx页上的反馈。
    发表于 08-02 07:44

    介绍pyverilog分析工具的使用

    pyverilog是一个非常强大的verilog分析工具,本节介绍pyverilog的使用
    的头像 发表于 07-26 17:04 1525次阅读
    <b class='flag-5'>介绍</b>pyverilog<b class='flag-5'>分析</b>工具的使用

    RF MEMS开关技术分析

    从驱动方式和机械结构的角度介绍了不同的RF MEMS开关类型,分析了各类MEMS开关的性能及优缺点,分析了MEMS开关在制作和发展中面临的牺牲层技术、封装
    的头像 发表于 05-23 14:29 550次阅读
    RF MEMS开关<b class='flag-5'>技术</b><b class='flag-5'>分析</b>

    关于Multisim仿真伏安特性分析仪的介绍

      伏安特性分析仪简称IV分析仪,专门用来测量二极管的伏安特性曲线、晶体管三极管的输出特性曲线,以及MOS场效应管的输出特性曲线。   IV分析仪相当于实验室的晶体管图示仪,需要将晶体管与连接
    发表于 04-27 16:28