对于VR/AR设备来说,显示技术和内容生态可能是最为重要的两个元素,但同样不可忽视的还有设备中集成的一系列传感器。这些传感器的存在是设备交互的关键,而VR/AR的本质其实就是人机交互的创新,没有了这些传感器,这些虚拟现实与寻常的显示设备并无二致,毫无创新性可言。那么如今的VR/AR设备中,有哪些传感器正在频繁露面呢?我们不妨以在游戏VR设备上玩转市场的索尼为例。
图像传感器
索尼在前不久发布了PSVR2,并声称支持了注视点渲染技术。这种渲染技术专注于渲染人注视点范围内的场景,通过降低周边视觉的成像质量来降低设备负载。毕竟VR/AR设备说到底还是移动设备,其功耗和性能都相对有限,但在这样的定位下,VR/AR往往需要更高的帧数。况且与人眼一样,我们其实无需对视觉死角内的场景付出过多关注,所以注视点渲染技术减轻GPU负担的方案正在席卷整个业界。
那么这一技术是如何实现的呢?答案就是眼动追踪。眼动追踪有多种实现手段,但对于VR/AR设备来说,该技术主要利用光源对眼镜进行照射来产生反射,并使用图像传感器来采集光源在角膜和瞳孔上的反射,从而通过角度等参数来计算眼动的向量,最终判断人的视线方向。

Tobii Eye Tracker 5 / Tobii
比如Tobii的眼动仪就采用了近红外光源,并利用两个图像传感器、先进的图像处理算法和三维眼球模型来计算眼睛和视线的位置。而索尼的PSVR2也配备了两个红外摄像头,分别完成两个眼睛的眼动追踪,另有四个摄像头来完成控制器与头显的跟踪。
眼动追踪不仅可以用于注视点渲染,也为VR/AR创造了另一重数据输入,这对于游戏或者视频内容的创作者来说,也就多了一重交互方式,方便他们用眼动数据来创造面部表情追踪、注视反馈和视线锁定目标等功能。
运动传感器
为了进一步提升沉浸感,VR/AR设备中往往还加入了陀螺仪、磁力计和加速度计等运动传感器,陀螺仪主要用于确定角度和姿势输入,而磁力计主要用磁场强度等参数来定位设备位置,而加速度计则顾名思义用来测量加速度。这些传感器不仅分布在头戴设备上,也集成在了控制器上。

运动传感器完成姿势识别 / 索尼
索尼在去年底公开了一份专利,其中就提到了如何用这些运动传感器来完成人体姿势的识别匹配。索尼称目前许多定位方案需要摄像头或激光之类的视觉追踪,所以除了头戴设备和控制器上的传感器以外,还需要在使用区域内部署额外的距离传感器,且中间不能存在障碍物。

PSVR2 Sense控制器 / 索尼
而索尼的这项专利减少了追踪设备的数量,仅使用头显和控制器上的运动传感器就能重构真实的人体模型。该技术根据陀螺仪、磁力计和加速度计的数据来在数据库中找到正确的匹配,最终确定姿势和动作。不过从索尼的PSVR2和PSVR2 Sense控制器的规格来看,两者仍然在采用三轴陀螺仪+三轴加速度计的六轴运动感知系统。

BMX160绝对方向传感器 / 博世
当然了,目前更常见的是IMU和绝对方向传感器这样的高集成方案,比如博世的BMI270和BMX160。BMX绝对方向传感器集成了一个3轴数字加速度计、16位数字陀螺仪和地磁传感器,即便在三者同时运行时也只有1585μA的低功耗,非常适合作为AR/VR可穿戴设备的传感器融合方案。
小结
传感器其实本来就是针对特定工作而生的元件,如今在元宇宙概念为AR/VR焕发的第二春下,专为虚拟现实场景准备的传感器也将迎来新一轮爆发式增长。考虑到还有苹果、微软和腾讯等大厂的入局,及时把握这一轮增长,AR/VR与传感器厂商都能从中获益。
图像传感器
索尼在前不久发布了PSVR2,并声称支持了注视点渲染技术。这种渲染技术专注于渲染人注视点范围内的场景,通过降低周边视觉的成像质量来降低设备负载。毕竟VR/AR设备说到底还是移动设备,其功耗和性能都相对有限,但在这样的定位下,VR/AR往往需要更高的帧数。况且与人眼一样,我们其实无需对视觉死角内的场景付出过多关注,所以注视点渲染技术减轻GPU负担的方案正在席卷整个业界。
那么这一技术是如何实现的呢?答案就是眼动追踪。眼动追踪有多种实现手段,但对于VR/AR设备来说,该技术主要利用光源对眼镜进行照射来产生反射,并使用图像传感器来采集光源在角膜和瞳孔上的反射,从而通过角度等参数来计算眼动的向量,最终判断人的视线方向。

Tobii Eye Tracker 5 / Tobii
比如Tobii的眼动仪就采用了近红外光源,并利用两个图像传感器、先进的图像处理算法和三维眼球模型来计算眼睛和视线的位置。而索尼的PSVR2也配备了两个红外摄像头,分别完成两个眼睛的眼动追踪,另有四个摄像头来完成控制器与头显的跟踪。
眼动追踪不仅可以用于注视点渲染,也为VR/AR创造了另一重数据输入,这对于游戏或者视频内容的创作者来说,也就多了一重交互方式,方便他们用眼动数据来创造面部表情追踪、注视反馈和视线锁定目标等功能。
运动传感器
为了进一步提升沉浸感,VR/AR设备中往往还加入了陀螺仪、磁力计和加速度计等运动传感器,陀螺仪主要用于确定角度和姿势输入,而磁力计主要用磁场强度等参数来定位设备位置,而加速度计则顾名思义用来测量加速度。这些传感器不仅分布在头戴设备上,也集成在了控制器上。

运动传感器完成姿势识别 / 索尼
索尼在去年底公开了一份专利,其中就提到了如何用这些运动传感器来完成人体姿势的识别匹配。索尼称目前许多定位方案需要摄像头或激光之类的视觉追踪,所以除了头戴设备和控制器上的传感器以外,还需要在使用区域内部署额外的距离传感器,且中间不能存在障碍物。

PSVR2 Sense控制器 / 索尼
而索尼的这项专利减少了追踪设备的数量,仅使用头显和控制器上的运动传感器就能重构真实的人体模型。该技术根据陀螺仪、磁力计和加速度计的数据来在数据库中找到正确的匹配,最终确定姿势和动作。不过从索尼的PSVR2和PSVR2 Sense控制器的规格来看,两者仍然在采用三轴陀螺仪+三轴加速度计的六轴运动感知系统。

BMX160绝对方向传感器 / 博世
当然了,目前更常见的是IMU和绝对方向传感器这样的高集成方案,比如博世的BMI270和BMX160。BMX绝对方向传感器集成了一个3轴数字加速度计、16位数字陀螺仪和地磁传感器,即便在三者同时运行时也只有1585μA的低功耗,非常适合作为AR/VR可穿戴设备的传感器融合方案。
小结
传感器其实本来就是针对特定工作而生的元件,如今在元宇宙概念为AR/VR焕发的第二春下,专为虚拟现实场景准备的传感器也将迎来新一轮爆发式增长。考虑到还有苹果、微软和腾讯等大厂的入局,及时把握这一轮增长,AR/VR与传感器厂商都能从中获益。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。
举报投诉
-
传感器
+关注
关注
2578文章
55811浏览量
795398 -
vr
+关注
关注
34文章
9696浏览量
157663
发布评论请先 登录
相关推荐
热点推荐
onsemi AR0820AT:高性能8.3 MP CMOS图像传感器的卓越之选
在当今的电子科技领域,图像传感器对于汽车、机器人等多个行业的发展起着至关重要的作用。onsemi推出的AR0820AT CMOS图像传感器,以其出色的性能和丰富的功能,成为了众多应用场景中的理想选择。
ON Semiconductor AR0132AT:1/3 英寸 CMOS 数字图像传感器深度解析
在当今的电子设备领域,图像传感器的性能对于众多应用的成功至关重要。ON Semiconductor 的 AR0132AT 作为一款 1/3 英寸 CMOS 数字图像传感器,凭借其卓越的特性和广泛
AR0830图像传感器:低功耗高性能之选
在当今的电子设备中,图像传感器的性能和功耗是工程师们关注的重点。onsemi的AR0830图像传感器,作为Hyperlux LP产品家族的一员,凭借其出色的性能和低功耗特性,在众多应用领域展现出了巨大的潜力。
onsemi AR0234CS:高性能全局快门CMOS图像传感器解析
在电子设备飞速发展的今天,图像传感器作为关键组件,其性能直接影响着设备的成像质量和应用范围。onsemi的AR0234CS图像传感器凭借其卓越的性能和丰富的功能,在众多领域展现出了强大的竞争力。
onsemi AR2020图像传感器:低功耗高性能的理想之选
在当今的图像传感领域,对高分辨率、低功耗且具备出色性能的传感器需求愈发迫切。onsemi的AR2020图像传感器,作为Hyperlux LP产品家族的一员,凭借其先进的技术和卓越的特性
使用安森美图像传感器的AR与VR头戴设备系统应用方案
增强现实(AR)与虚拟现实(VR)头显标志着人机交互领域的重大飞跃,其打造的沉浸式体验远超传统屏幕交互模式。AR 头显通过同步定位与地图构建(SLAM)、深度感知及计算机视觉等核心技术,将三维物体
探索 onsemi AR0246:1/4 英寸 2MP CMOS 数字图像传感器的卓越性能
在当今的电子世界中,图像传感器的性能对于众多应用领域至关重要。onsemi 的 AR0246 图像传感器凭借其出色的特性,在安全、物联网、汽车 DVR 等领域展现出巨大的潜力。今天,我们就来深入了解一下这款 1/4 英寸 2MP
onsemi AR0235CS图像传感器:工业视觉领域的新选择
在电子工程领域,图像传感器是许多应用的核心组件,特别是在工业检测、扫描等需要捕捉清晰图像的场景中。今天我们要介绍的是安森美(onsemi)的一款高性能图像传感器——AR0235CS,它在设计和性能上都有诸多亮点,值得工程师们深入
onsemi AR0544:高性能5MP CMOS数字图像传感器的卓越之选
在当今的图像传感领域,高性能、低功耗的图像传感器需求日益增长。onsemi的AR0544数字图像传感器便是一款满足这些需求的杰出产品。本文将深入剖析
onsemi AR0145CS Hyperlux™ 图像传感器技术解析与应用指南
安森美 AR0145CS Hyperlux™ SG图像传感器是1/4.3“ CMOS数字图像传感器,有源像素阵列为1280(H)x800(V)。安森美 AR0145CS采用创新型全局快
无刷电机用霍尔元件AR43F
无刷电机用霍尔元件AR43F
AR43F系列高温单极性霍尔效应集成传感器是由内部电压稳压单元、霍尔电压发生器、差分放大器、温度补偿单元、施密特触发器
发表于 11-19 15:19
TDK推出新型TMR定制传感器解决方案
TDK株式会社重磅推出新型TMR传感器作为TDK广泛一系列面向玩家及游戏设备厂商的定制传感解决方案,赋予游戏键盘、手柄、鼠标、摄像头、AR/VR设备、方向盘及踏板极致性能和非凡游戏体验
新品上市:九轴姿态传感器!
在智能穿戴、无人机、机器人、VR/AR等高速发展的智能设备领域,精准、稳定、实时的姿态感知能力已成为产品竞争力的关键。HLK-AS201-9九轴姿态传感器模块,采用纯国产方案,凭借其高度集成、高精度解算、强抗干扰能力,成为工业与
如何选择酒精传感器
鉴于可用技术、其应用及其性能特征的细微差别,选择适合您的特定需求的酒精传感器可能是一个复杂的过程。本指南将通过探索酒精传感器的类型、其原理、应用以及表格格式的比较分析,帮助您浏览选项并做出明智的决定
VR/AR吃下的传感器红利
评论