0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

新版本ARKit对利用iPhone X前置结构光摄像头进行眼动追踪的支持

0wvm_ARchan_TT 来源:未知 作者:李倩 2018-07-02 15:05 次阅读

在ARKit 2.0发布之后不久,不少开发者发现了新版本ARKit对利用iPhone X前置结构光摄像头进行眼动追踪的支持。

类似的功能我们在过去也见识过(不会写程序怎么当好艺术家?跳出iPhone X屏幕的3D立体视觉效果)

该艺术效果的开发者就是利用了前置景深摄像头获取眼球位置,根据位置实时改变动画呈现角度。

但严格意义来说,这并不算是眼动追踪,只是对眼球位置的识别,换言之如果头部和手机的相对位置不改变,眼球转动时画面不发生变化。

而ARKit 2下眼动追踪的效果效果就非常惊艳了

转动眼睛,屏幕中的十字光标便会随着注视点的移动而移动,响应速度和精确度都很不错

通过眨眼睛(忍不住想眨眼了怎么办,会不会误触)完成点击选择,操纵手机全程不需要动手,在很多场景中可以说是非常方便了。得益于红外方案,即便是在黑暗中也能实现眼动追踪。

手机眼球追踪

用眼动追踪来控制手机,是不少开发者一直以来都在设想的。

去年年初发布的ZTE Hawkeye加入的眼球追踪利用前置摄像机检测用户的虹膜运动,上下或左右滑动控制屏幕。

滑动的功能能方便人们在手上没空的情况下简单的操作手机,但是对于一些使用群体(肢体残障)来说,他们渴望功能更加强大的眼动追踪方案。

一般而言,有两种跟踪眼球的方案,即普通摄像头和红外摄像头。

普通摄像头方便小型化,低成本但是精度低,红外方案体积大,造价高,同时精度高。

但随着技术的发展,优缺点不能一刀切,针对普通摄像头方案,2016年麻省理工开设的“Eye tracking for everyone”就利用了卷积神经网络(CNN)预测用户对手机或者平板的注视位置,只使用普通摄像机的情况下让精度变为1.34cm到2.12cm。

尽管精度上有所提高,但从目前的市场情况可见虽然该技术还并没有成熟。

红外摄像头则一直都是主流的眼动追踪识别方案

例如Tobii眼动仪采用的技术就是通过识别用户眼球上角膜、瞳孔产生的反射图像,使用两个图像传感器分别采集眼睛与反射图像,通过图像处理算法和一个三维眼球模型精确地计算出眼球、注视点在空间中的具体位置。

解决了小型化问题的True-Depth相机模组是否也采用了相似地技术原理呢?

6月20日,开发者Andrew Zimmer在Twitter发布了一个demo,展示ARKit 2对眼睛注视点位置的实时追踪效果,随着Andrew眼球的转动,注视点点的移动在屏幕上画出一条连贯的曲线。在图中,颜色越暖(橘色、红色),代表注视时间越长。注视点位置的检测精确,识别轨迹流畅连贯,在未来的人机交互中潜力巨大。

有相当数量的患者由于操作不便,与信息时代脱节。其中有不少唯一与设备相互动的渠道就是眼睛,眼球追踪加入智能手机的交互模式同样也能造福健全人,让我们在手上没空的情况下操作手机比如做饭看菜谱、开车看导航。

不过同时,技术也带来了很大的隐私问题。相信大家都有同感,在网上浏览过某一类商品之后,pc和手机app的各种广告和弹窗中会根据你的浏览内容推荐一堆类似商品。当未来的APP知道了你因为感兴趣而长时间注视的内容,内容推送会更加精确,人们的注视内容信息会被拿去贩卖,更无隐私可言了。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • iPhone
    +关注

    关注

    28

    文章

    13124

    浏览量

    200095
  • 摄像头
    +关注

    关注

    59

    文章

    4555

    浏览量

    92666
  • 结构光
    +关注

    关注

    0

    文章

    74

    浏览量

    13072

原文标题:ARKit 2眼动追踪,人机交互新模式

文章出处:【微信号:ARchan_TT,微信公众号:AR酱】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    摄像头的主要结构和组件

    消费者提供最优秀的产品。 3、镜头摄像头镜头由透镜结构组成,透镜从材质上分塑胶透镜和玻璃透镜。玻璃透镜又分镀膜和不镀膜。镀膜镜片可以增加通量减少反光,使成像清晰,画质明亮鲜艳。镜头决定
    发表于 04-14 11:38

    如何利用摄像头将处于摄像头正下方的物体进行拍照

    有一个难题,摄像头处于视频模式,当物体进入到摄像头的视野内后,再进行图片的保存;物体缓慢的进入过程中,不保存。在以上方法中,不能采用红外等传感器,如何利用图像处理的方法
    发表于 06-13 11:19

    【转载分享】USB摄像头采集图像

    `如果你有USB摄像头,就是随便的那种。平时QQ视频的就可以了(笔记本上自带的摄像头,也可以),那你就可以用LabVIEW进行图像采集了。注意:由于LabVIEW8.6是个神奇的版本
    发表于 03-02 11:36

    利用CreateCaptureWindowA和picturebox 进行USB摄像头采集

    在VB 和VC当中调用摄像头时候,大多都是用的图像控件,也就是picturebox,另外捕捉摄像头时候大多是capCreateCaptureWindowA。那么,在LabVIEW怎么利用相同
    发表于 03-02 14:09

    请问有iPhone X的原深感摄像头相关元器件的数据参数吗?

    face ID问题,想知道iPhone X的原深感摄像头相关元器件的数据参数。
    发表于 02-26 10:42

    使用的是XC16认为pps.h新版本中不受支持怎么回事

    我使用的是XC16 V.1.24,它是UPART的“PPS.H”报头。然而,当我切换到v1.25或最新版本时,我得到了“No.file or directory”Errorso i,认为pps.h新版本中不受
    发表于 05-07 13:58

    追踪能提供全新人机互动体验

    强大的电脑芯片、高效的红外LED以及新型的摄像传感器,让先前复杂的追踪系统如今能够适应消费类电子应用的各种需要。借助这些系统,电子设备可以检测用户的眼球运动,从而识别用户的下一步意
    发表于 05-18 08:30

    【大联大友尚安森美半导体感光芯片USB双目摄像头模组试用体验】开箱初体验

    `之前一直对双目摄像头抱有很大的兴趣,特别是看到朋友公司开发的带人追踪的裸3D显示系统。当然他们使用的是intel的Intel RealSense D415/D435/D435i系
    发表于 08-24 14:56

    回收手机摄像头专业优势收购手机摄像头

    回收手机摄像头专业优势收购手机摄像头深圳帝欧电子高价专业回收iphone、iphoneSE、iphone6s、iphone6splus、
    发表于 12-24 17:51

    回收三星手机摄像头

    三星手机摄像头长期大量收购 长期高价优势回收三星手机摄像头【帝欧赵生***QQ1816233102/879821252/1714434248邮箱dealic@163.com】摄像头回收就来帝欧电子
    发表于 12-25 17:58

    回收vivo摄像头高价收购vivo摄像头

    !帝欧现金紧急求购vivo手机全新摄像头!深圳龙华高价回收vivo手机高清摄像头,现紧急求购vivo各型号手机后置摄像头前置摄像头!帝欧电
    发表于 04-21 17:16

    什么是追踪追踪如何运作?

    什么是追踪追踪如何运作?
    发表于 06-17 06:11

    LIN总线协议最新版本

    LIN总线协议最新版本是V2.2,历史版本有V1.0,V1.2,V1.3,V2.0,V2.1,具体每个版本的差别以后再详细评论。LIN的硬件比较简单,有些人认为LIN同RS232,485类似,直接用
    发表于 08-19 09:17

    深圳回收华为手机摄像头 专业收购华为手机摄像头

    g7plus、华为荣耀7X、华为荣耀V10、荣耀、荣耀畅玩系列、HUAWEIMate系列、HUAWEInova系列、HUAWEI麦芒系列、华为袭畅享系列......帝欧电子本公司长期收购手机摄像头,苹果手机
    发表于 12-13 14:13

    苹果iPhone 13或将支持新版本的WiFi 6E

    苹果的iPhone 12支持WIFI 6,根据外媒消息,苹果的下一代iPhoneiPhone 13很大概率可能会支持
    的头像 发表于 12-25 11:59 3192次阅读