0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

眼动追踪读取用户微表情,用于新的交互方式

0wvm_ARchan_TT 来源:未知 作者:胡薇 2018-05-03 17:06 次阅读

眼动追踪一直都是VR和AR头显中比较受关注的技术,这也应该是大家比较熟悉的一个技术。头戴显示器的很多显示效果都对眼动追踪技术有要求,比如建立在眼动追踪基础上的中心渲染,既可以减小处理器渲染的计算量,也可以在某种程度上解决纱窗效应问题。更近一步地说,眼动追踪同样可以用于读取用户微表情,用于新的交互方式。

作为一个大家都知道它在悄悄研发AR头显的公司,苹果的头显计划中当然也少不了眼动追踪方案,最近,苹果的一份专利公开,展示了苹果最近对于眼动追踪的研究。

在这次公布的专利中,并没有特别说明头显的种类,也就是说,无论AR还是VR头显设备, 只要头显具备合适的支撑框架和镜片,专利中说明的眼动追踪系统都是可以使用的。

苹果的专利显示,眼球跟踪系统包括眼球跟踪摄像头 (如红外线摄像头),、照明源以及热镜。其中眼球跟踪摄像头位于用户的脸侧, 并指向两边的镜片, 照明源 (如近红外光源)向用户的眼睛发出近红外光一类的光线, 而热镜位于镜片和用户的眼睛之间,接近镜片表面的地方。

这个眼动追踪系统的原理可以解释为:照明源发出的近红外光照射用户的眼睛,近红外光从用户的眼睛部分反射到热镜表面,而热镜是一种分色滤镜,可以反射近红外光, 同时允许可见光通过。热镜反射的近红外光被用户脸侧的近红外摄像机捕捉到,生成眼球位置的图像,由此可以分析检测用户眼睛的位置和移动。

其中,为了使眼睛跟踪摄像头可以接收到眼球位置的图像, 可以采用两种不同的相机位置。第一种就是前面提到的,将摄像头放在脸侧,通过热镜的反射接收图像方案。第二种方案则是用摄像头直接在镜片的位置。由于第二种方案对用户体验有妨碍,最终的方案选用了将摄像头置于脸侧的方案,因此,光传播路线变得更加复杂。

文中所提到的热镜可以是镜片,也可以由具有分光特性的涂层代替,后者可以直接涂在显示镜片的表面。而近红外摄像机无论是在鼻侧还是在脸外侧都是可以的。

另外,专利中也提到了设计中眼球跟踪系统提供的功能,最基础的是可以用来跟踪用户眼睛的位置和移动;在进一步的设计中, 眼睛跟踪系统也可以用于跟踪用户的瞳孔膨胀,或其他特征。专利中已经实现的功能有:通过眼睛注视点来进行交互,在一个案例中,眼睛注视某一个选项一定时间后,系统会自动选择该选项;此外,系统会根据瞳孔放大的情况自动调整VR或AR图像的亮度。

需要说明的是,这不是苹果第一次提交眼动追踪系统的专利,早在16年,苹果就提交过一份利用MEMS微机电系统)控制的眼动追踪系统。这个系统主要包括一个追踪摄像头,一个MEMS设备和处理器。相机负责拍摄眼睛的图像,而MEMS装置控制相机的视角方向,处理器接收来自相机的眼睛的图像,确定相机图像内的眼睛的位置,并控制MEMS以保持相机指向眼睛。在另一个案例中,MEMS装置可以用来控制相机的可调焦距,处理器可以确定眼睛图像的聚焦状况,控制MEMS设备以保持相机始终聚焦。

和之前的方案相比,最近通过的专利采用的方案不需要摄像头的移动,同时不会影响用户的视野,处理模块的计算量更小,同时更加节能、高效。

就现有的几份专利来看,最近公开的这个方案的优越性可以说毋庸置疑。但由于苹果对头显研发一贯的保密态度,我们也很难确定它的选择,最终的结果可能还是需要等到2020年才能见分晓。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 眼动追踪
    +关注

    关注

    0

    文章

    17

    浏览量

    6711
  • ar头显
    +关注

    关注

    0

    文章

    64

    浏览量

    7519

原文标题:苹果眼动追踪专利公开

文章出处:【微信号:ARchan_TT,微信公众号:AR酱】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    人机交互的三个阶段 人机交互的常用方式

    交互经历的三个阶段:命令行界面交互阶段、图形用户界面交互阶段、自然和谐的人机交互阶段。
    的头像 发表于 03-13 17:25 480次阅读

    鸿蒙开发丨设备内 UIAbility 的几种交互方式

    UIAbility 组件间交互(设备内) 在设备内,UIAbility(用户界面能力)是系统调度的最小单元,它们负责展示用户界面和执行相关的业务逻辑。设备内的不同功能模块之间的交互是应
    的头像 发表于 02-02 10:42 176次阅读
    鸿蒙开发丨设备内 UIAbility 的几种<b class='flag-5'>交互</b><b class='flag-5'>方式</b>

    帕克西脸部动作追踪在各个领域的应用与影响

    帕克西脸部动作追踪采用先进的AI技术,能够实时捕捉和跟踪用户的面部动作和表情。无论是喜怒哀乐,都可以被精确地捕捉并表达出来。这项技术不仅具有高精度的识别能力,还能够处理头部及面部微表情
    的头像 发表于 11-28 10:49 106次阅读
    帕克西脸部动作<b class='flag-5'>追踪</b>在各个领域的应用与影响

    人机交互的多种可能 人机交互的三种方式

    除了视觉界面,触觉界面也是一种重要的人机交互方式。触觉界面使用触摸技术,例如触摸屏、手势识别和数字板等,让用户可以与计算机进行更自然的交互。这种交互
    的头像 发表于 08-26 11:34 3437次阅读

    面部表情识别技术在社交互动中的应用

    面部表情识别技术在社交互动中具有广泛的应用。通过识别和理解面部表情,可以改善社交互动的质量和效果。本文将探讨面部表情识别技术在社
    的头像 发表于 08-24 18:18 435次阅读

    面部表情识别技术在人机交互中的应用

    面部表情识别技术在人机交互中具有广泛的应用。通过识别和理解用户的面部表情,可以实现更加智能、个性化和自然的人机交互。本文将探讨面部
    的头像 发表于 08-21 18:01 384次阅读

    人机交互设计原则是什么 人机交互常用的交互方式

    用户能够轻松地理解和操作界面,实现预期的功能。   2. 可视化(Visual cues):使用适当的视觉元素,如色彩、图标、标签、布局等,引导用户识别、理解和操作界面。   3. 一致性(Consistency):保持界面元素和
    发表于 08-16 15:14 2007次阅读

    人机交互的重要接口是什么 人机交互方式有哪五种

     人机交互的重要接口是指人类用户与计算机系统之间进行交互和沟通的方式和工具。以下是几个常见的人机交互接口:   1. 图形
    的头像 发表于 08-15 14:16 5235次阅读

    面部表情识别研究:解读情绪的密码

    面部表情是我们日常交流和表达情感的重要方式。它们是情绪的直观反映,通过我们的眼睛、嘴唇、面部肌肉的运动等表达出来。然而,理解这些表情并不简单。这就是面部表情识别技术发挥作用的地方。 面
    的头像 发表于 08-14 18:09 525次阅读

    面部表情识别在社交媒体中的应用

    等方面。 首先,面部表情识别可以用于情感分析。通过对面部表情的识别和分析,可以判断出用户的情绪状态,从而进行更加智能化和个性化的交互和推荐。
    的头像 发表于 08-09 16:04 318次阅读

    面部表情识别的挑战和前景

    的主要挑战之一。不同的人具有不同的面部特征和表情表达方式,这增加了面部表情识别的难度。为了解决这个问题,需要建立更加全面和丰富的表情库,提高算法的适应性和鲁棒性。 其次,面部
    的头像 发表于 08-02 18:21 527次阅读

    面部表情识别在人机交互中的应用

    表情分析、人机交互等方面。 面部表情识别在人机交互中有着广泛的应用,其中最重要的应用就是情感识别。通过面部表情识别技术,可以快速准确地识别
    的头像 发表于 08-02 18:03 562次阅读

    人机交互方式有哪些?

    人机交互方式有多种多样,以下列举出比较常见的方式
    的头像 发表于 06-08 15:12 4158次阅读
    人机<b class='flag-5'>交互</b>的<b class='flag-5'>方式</b>有哪些?

    面部表情识别应用方法

    面部表情识别是指通过计算机技术和图像处理技术来识别人脸表情的过程。面部表情是人类情感表达的重要方式之一,可以反映出人类的情绪、心理和个性特征。面部
    的头像 发表于 04-20 18:16 2704次阅读

    未来手势交互将成为新一代“触屏”

    追踪是改善用户在不同技术领域和平台体验的一个重要组成部分。手部追踪技术在未来可以帮助用户“解放双手”,人机互动不再需要通过手柄控制,实现真正的解放双手,让
    的头像 发表于 04-14 15:47 280次阅读