电子发烧友网综合报道,在混合现实(MR)设备的交互体验中,注视追踪(Gaze Tracking)不仅是提升沉浸感的核心技术之一,更是实现自然人机交互、优化渲染效率与节能控制的重要基础。近期苹果公司公布了一项关于注视追踪技术的重大专利,该技术能够结合直接眼球视图与特殊透镜捕捉的反射图像。
双视图融合:突破传统眼动追踪局限
当前Apple Vision Pro所采用的注视追踪系统主要依赖于直接成像——即通过红外摄像头捕捉用户瞳孔与角膜的反射点来推算视线方向。然而,这一方法在实际使用中仍面临诸多挑战:例如用户佩戴角度偏移、镜片遮挡、强光干扰或快速眼动造成的图像模糊等问题,都会显著影响追踪精度。
苹果新专利提出了一种“双视图”方案:在保留直接眼球成像的同时,引入通过特殊光学镜片反射形成的眼部图像作为辅助数据源。具体而言,当红外光源照射用户眼睛时,系统不仅捕获眼球表面的直接影像,还同步获取其在镜片上的反射图像。这种复合图像可在单帧内呈现眼球的多角度视图,从而有效增强微光信号的可见度,并扩展有效追踪视野。
该设计巧妙地利用了平面与曲面反射镜片对红外光的选择性反射特性,在不增加额外摄像头的前提下,实现了更全面的眼部信息采集。这不仅有助于解决因头部姿态变化或佩戴偏移导致的部分眼部区域被遮挡的问题,也显著提升了系统在复杂光照环境下的鲁棒性。
除了硬件层面的创新,该专利还引入了多项先进图像处理与建模技术。例如,采用连拍成像技术以减少快速眼动带来的运动模糊;运用光度立体法构建高保真的虹膜-瞳孔-角膜三维几何模型。这些技术共同作用,使得系统能够更精确地解析眼球细微运动,进而实现更精准的注视点定位。
从Vision Pro到XR眼镜
值得注意的是,尽管专利图示更贴近头显形态,但其说明文本明确指出:“该系统可集成于眼镜式头戴显示设备”,并详细描述了“类似传统眼镜的框架结构与双透明镜片设计”。这意味着,这项注视追踪技术并非仅服务于高端头显,也是苹果面向未来轻量化XR眼镜产品的重要技术储备。
随着苹果计划在后续推出更便携的MR眼镜设备,如何在有限空间内实现高性能眼动追踪成为关键难题。而此次专利所展示的“单摄像头+反射镜片”方案,恰好在精度、体积之间取得了平衡,为未来消费级XR眼镜的落地提供了可行路径。
除了眼动追踪技术,苹果围绕三维交互、虚拟化身、自动测量、呼吸追踪等交互维度的专利布局,例如一项名为“使用混合传感器方法进行控制器接合检测”的专利中显示,苹果融合图像识别、接近传感器与运动传感器,智能判断用户是否握持控制器,实现输入模式自动切换;此外,一项名为“有选择地使用传感器获取上下文数据”的专利提出根据语音语义分析结果动态启用摄像头等传感器,以获取上下文信息辅助任务执行。
可以看出,苹果正系统性构建一个以高精度感知、自然交互与沉浸内容为核心的MR生态体系,构建下一代空间计算平台的关键拼图。可以期待,苹果在MR领域的技术积累正逐步转化为产品竞争力。

双视图融合:突破传统眼动追踪局限
当前Apple Vision Pro所采用的注视追踪系统主要依赖于直接成像——即通过红外摄像头捕捉用户瞳孔与角膜的反射点来推算视线方向。然而,这一方法在实际使用中仍面临诸多挑战:例如用户佩戴角度偏移、镜片遮挡、强光干扰或快速眼动造成的图像模糊等问题,都会显著影响追踪精度。
苹果新专利提出了一种“双视图”方案:在保留直接眼球成像的同时,引入通过特殊光学镜片反射形成的眼部图像作为辅助数据源。具体而言,当红外光源照射用户眼睛时,系统不仅捕获眼球表面的直接影像,还同步获取其在镜片上的反射图像。这种复合图像可在单帧内呈现眼球的多角度视图,从而有效增强微光信号的可见度,并扩展有效追踪视野。
该设计巧妙地利用了平面与曲面反射镜片对红外光的选择性反射特性,在不增加额外摄像头的前提下,实现了更全面的眼部信息采集。这不仅有助于解决因头部姿态变化或佩戴偏移导致的部分眼部区域被遮挡的问题,也显著提升了系统在复杂光照环境下的鲁棒性。
除了硬件层面的创新,该专利还引入了多项先进图像处理与建模技术。例如,采用连拍成像技术以减少快速眼动带来的运动模糊;运用光度立体法构建高保真的虹膜-瞳孔-角膜三维几何模型。这些技术共同作用,使得系统能够更精确地解析眼球细微运动,进而实现更精准的注视点定位。

从Vision Pro到XR眼镜
值得注意的是,尽管专利图示更贴近头显形态,但其说明文本明确指出:“该系统可集成于眼镜式头戴显示设备”,并详细描述了“类似传统眼镜的框架结构与双透明镜片设计”。这意味着,这项注视追踪技术并非仅服务于高端头显,也是苹果面向未来轻量化XR眼镜产品的重要技术储备。
随着苹果计划在后续推出更便携的MR眼镜设备,如何在有限空间内实现高性能眼动追踪成为关键难题。而此次专利所展示的“单摄像头+反射镜片”方案,恰好在精度、体积之间取得了平衡,为未来消费级XR眼镜的落地提供了可行路径。
除了眼动追踪技术,苹果围绕三维交互、虚拟化身、自动测量、呼吸追踪等交互维度的专利布局,例如一项名为“使用混合传感器方法进行控制器接合检测”的专利中显示,苹果融合图像识别、接近传感器与运动传感器,智能判断用户是否握持控制器,实现输入模式自动切换;此外,一项名为“有选择地使用传感器获取上下文数据”的专利提出根据语音语义分析结果动态启用摄像头等传感器,以获取上下文信息辅助任务执行。
可以看出,苹果正系统性构建一个以高精度感知、自然交互与沉浸内容为核心的MR生态体系,构建下一代空间计算平台的关键拼图。可以期待,苹果在MR领域的技术积累正逐步转化为产品竞争力。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。
举报投诉
发布评论请先 登录
相关推荐
热点推荐
边缘AI的发展为更智能、更可持续的技术铺平道路
StéphaneHenry,意法半导体边缘AI解决方案副总裁人工智能(AI)正成为一股变革性力量,深刻塑造着我们的日常生活。从实时监测健康状况的可穿戴设备,到优化行车安全的自动驾驶,人工智能正在彻底改变着我们与世界互动的方式。智能工业设备可以自主制定维护检修计划。随着设备线上线下无缝运行,线上线下的界限正日益模糊。这样的未来并非远在天边,而是已然到来。这场变
VITURE旗舰XR眼镜Beast正式发布
5月20日,全球领先的XR眼镜品牌VITURE在北京举办「520·看见心动」新品发布会,正式发布2026年全新旗舰XR智能眼镜VITURE Beast。产品以"够大·够亮·够灵&quo
NXP 产品包装革新:轻量级卷轴的引入
NXP 产品包装革新:轻量级卷轴的引入 一、通知概述 NXP 在 2014 年 3 月 30 日发布了编号为 201403006I 的客户信息通知,该通知于 2014 年 4 月 30 日生效
NVIDIA RTX加速的计算机现可直接连接到Apple Vision Pro
Innoactive XR 流媒体解决方案的 Immersive for Autodesk VRED,传输至 Apple Vision Pro。
谷歌XR生态加速落地:Galaxy XR上线月入60+应用,Project Aura明年发售
了其在XR领域的最新进展,包括Galaxy XR功能的更新、Project Aura的更新、AI智能眼镜的更新,以及为开发者带来的Android X
三星出击!首款XR头显Galaxy XR登场,AI智能眼镜蓄势待发
表示,今天标志我们承诺的XR和AI十年的开始。 16GB+骁龙XR2+ Gen 2!4.3K Micro-OLED Galaxy XR具备三大技术特点:一是以AI
【CW32】uart_obj_fw 轻量级串口框架
轻量级跨平台串口通信框架,专为资源受限的嵌入式设备设计。单个对象RAM占用最小68字节左右(不算缓冲区),ROM占用1-2k字节左右,功能支持裁剪,资源占用小并不代表低性能,该库参考了freeRTOS
vivo MR也来了!中国XR赛道的“Vision时刻”,轻量化+AI成破局利刃
电子发烧友网报道(文/莫婷婷)今年,尽管AR市场增速超过VR市场,VR头显市场也并非毫无进展,市场创新依旧。特别是备受关注的苹果 Vision Pro即将升级2代产品,业内对于该产品是否会升
谷东智能如何攻克AI+AR眼镜产业痛点
自苹果公司发布Vision Pro后,有关苹果公司正大力投资研发 AI+AR 眼镜的消息过去 1 年中不断传出,海外知名记者马克・古尔曼指出
灵犀微光推动AR眼镜在文旅场景中的落地
Meta即将发布的高端智能眼镜Hypernova,再次把轻量级AR眼镜推向了公众视野。据公开信息,Meta此次重点押注“阵列光波导”技术方案。
小米AI眼镜×商汤日日新 商汤“日日新”大模型交互平台「商量」已探索性接入小米AI眼镜
程度:据国内XR Vision报道,小米AI眼镜首销3天销量或已接近5万副,创下了中国AI眼镜最快销售纪录。 作为小米长期生态合作伙伴,商汤“日日新”大模型交互平台「商量」已探索性接入
基于米尔瑞芯微RK3576开发板部署运行TinyMaix:超轻量级推理框架
本文将介绍基于米尔电子MYD-LR3576开发平台部署超轻量级推理框架方案:TinyMaix
摘自优秀创作者-短笛君
TinyMaix 是面向单片机的超轻量级的神经网络推理库,即 TinyML
发表于 07-25 16:35
如何在RK3576开发板上运行TinyMaix :超轻量级推理框架--基于米尔MYD-LR3576开发板
本文将介绍基于米尔电子MYD-LR3576开发平台部署超轻量级推理框架方案:TinyMaix摘自优秀创作者-短笛君TinyMaix是面向单片机的超轻量级的神经网络推理库,即TinyML推理库,可以
轻量级≠低效能:RK3506J核心板如何用性价比感动用户?
瑞芯微 RK3506J凭借多核异构架构设计与国产化供应链整合,以轻量级硬件资源实现工业级性能输出,重新定义了控制芯片的性价比边界,为工业控制芯片领域带来了全新的解决方案与发展方向。
【awinic inside】艾为芯 + 全彩刻蚀光波导!雷鸟AI眼镜 X3 Pro震撼上市
近日,雷鸟创新发布雷鸟AI眼镜X3pro,该眼镜是全彩刻蚀光波导AR眼镜。雷鸟X3Pro突破芯片、交互、空间计算、重量与光学显示五大核心技术
Vision Pro只是开始?苹果新专利为轻量级XR眼镜铺平道路
评论