0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

VR/AR吃下的传感器红利

E4Life 来源:电子发烧友原创 作者:Leland 2022-01-18 09:39 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

对于VR/AR设备来说,显示技术和内容生态可能是最为重要的两个元素,但同样不可忽视的还有设备中集成的一系列传感器。这些传感器的存在是设备交互的关键,而VR/AR的本质其实就是人机交互的创新,没有了这些传感器,这些虚拟现实与寻常的显示设备并无二致,毫无创新性可言。那么如今的VR/AR设备中,有哪些传感器正在频繁露面呢?我们不妨以在游戏VR设备上玩转市场的索尼为例。

图像传感器

索尼在前不久发布了PSVR2,并声称支持了注视点渲染技术。这种渲染技术专注于渲染人注视点范围内的场景,通过降低周边视觉的成像质量来降低设备负载。毕竟VR/AR设备说到底还是移动设备,其功耗和性能都相对有限,但在这样的定位下,VR/AR往往需要更高的帧数。况且与人眼一样,我们其实无需对视觉死角内的场景付出过多关注,所以注视点渲染技术减轻GPU负担的方案正在席卷整个业界。

那么这一技术是如何实现的呢?答案就是眼动追踪。眼动追踪有多种实现手段,但对于VR/AR设备来说,该技术主要利用光源对眼镜进行照射来产生反射,并使用图像传感器来采集光源在角膜和瞳孔上的反射,从而通过角度等参数来计算眼动的向量,最终判断人的视线方向。

Tobii Eye Tracker 5 / Tobii

比如Tobii的眼动仪就采用了近红外光源,并利用两个图像传感器、先进的图像处理算法和三维眼球模型来计算眼睛和视线的位置。而索尼的PSVR2也配备了两个红外摄像头,分别完成两个眼睛的眼动追踪,另有四个摄像头来完成控制器与头显的跟踪。

眼动追踪不仅可以用于注视点渲染,也为VR/AR创造了另一重数据输入,这对于游戏或者视频内容的创作者来说,也就多了一重交互方式,方便他们用眼动数据来创造面部表情追踪、注视反馈和视线锁定目标等功能。

运动传感器

为了进一步提升沉浸感,VR/AR设备中往往还加入了陀螺仪、磁力计和加速度计等运动传感器,陀螺仪主要用于确定角度和姿势输入,而磁力计主要用磁场强度等参数来定位设备位置,而加速度计则顾名思义用来测量加速度。这些传感器不仅分布在头戴设备上,也集成在了控制器上。

运动传感器完成姿势识别 / 索尼

索尼在去年底公开了一份专利,其中就提到了如何用这些运动传感器来完成人体姿势的识别匹配。索尼称目前许多定位方案需要摄像头或激光之类的视觉追踪,所以除了头戴设备和控制器上的传感器以外,还需要在使用区域内部署额外的距离传感器,且中间不能存在障碍物。

PSVR2 Sense控制器 / 索尼

而索尼的这项专利减少了追踪设备的数量,仅使用头显和控制器上的运动传感器就能重构真实的人体模型。该技术根据陀螺仪、磁力计和加速度计的数据来在数据库中找到正确的匹配,最终确定姿势和动作。不过从索尼的PSVR2和PSVR2 Sense控制器的规格来看,两者仍然在采用三轴陀螺仪+三轴加速度计的六轴运动感知系统。

BMX160绝对方向传感器 / 博世

当然了,目前更常见的是IMU和绝对方向传感器这样的高集成方案,比如博世的BMI270和BMX160。BMX绝对方向传感器集成了一个3轴数字加速度计、16位数字陀螺仪和地磁传感器,即便在三者同时运行时也只有1585μA的低功耗,非常适合作为AR/VR可穿戴设备的传感器融合方案。

小结

传感器其实本来就是针对特定工作而生的元件,如今在元宇宙概念为AR/VR焕发的第二春下,专为虚拟现实场景准备的传感器也将迎来新一轮爆发式增长。考虑到还有苹果、微软和腾讯等大厂的入局,及时把握这一轮增长,AR/VR与传感器厂商都能从中获益。
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2573

    文章

    54363

    浏览量

    785789
  • vr
    vr
    +关注

    关注

    34

    文章

    9692

    浏览量

    156536
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    ON Semiconductor AR0132AT:1/3 英寸 CMOS 数字图像传感器深度解析

    在当今的电子设备领域,图像传感器的性能对于众多应用的成功至关重要。ON Semiconductor 的 AR0132AT 作为一款 1/3 英寸 CMOS 数字图像传感器,凭借其卓越的特性和广泛
    的头像 发表于 11-28 10:30 206次阅读
    ON Semiconductor <b class='flag-5'>AR</b>0132AT:1/3 英寸 CMOS 数字图像<b class='flag-5'>传感器</b>深度解析

    AR0830图像传感器:低功耗高性能之选

    在当今的电子设备中,图像传感器的性能和功耗是工程师们关注的重点。onsemi的AR0830图像传感器,作为Hyperlux LP产品家族的一员,凭借其出色的性能和低功耗特性,在众多应用领域展现出了巨大的潜力。
    的头像 发表于 11-28 09:24 251次阅读

    onsemi AR0234CS:高性能全局快门CMOS图像传感器解析

    在电子设备飞速发展的今天,图像传感器作为关键组件,其性能直接影响着设备的成像质量和应用范围。onsemi的AR0234CS图像传感器凭借其卓越的性能和丰富的功能,在众多领域展现出了强大的竞争力。
    的头像 发表于 11-27 14:16 176次阅读

    onsemi AR2020图像传感器:低功耗高性能的理想之选

    在当今的图像传感领域,对高分辨率、低功耗且具备出色性能的传感器需求愈发迫切。onsemi的AR2020图像传感器,作为Hyperlux LP产品家族的一员,凭借其先进的技术和卓越的特性
    的头像 发表于 11-27 14:10 152次阅读

    使用安森美图像传感器ARVR头戴设备系统应用方案

    增强现实(AR)与虚拟现实(VR)头显标志着人机交互领域的重大飞跃,其打造的沉浸式体验远超传统屏幕交互模式。AR 头显通过同步定位与地图构建(SLAM)、深度感知及计算机视觉等核心技术,将三维物体
    的头像 发表于 11-27 13:48 2265次阅读
    使用安森美图像<b class='flag-5'>传感器</b>的<b class='flag-5'>AR</b>与<b class='flag-5'>VR</b>头戴设备系统应用方案

    onsemi AR0235CS图像传感器:工业视觉领域的新选择

    在电子工程领域,图像传感器是许多应用的核心组件,特别是在工业检测、扫描等需要捕捉清晰图像的场景中。今天我们要介绍的是安森美(onsemi)的一款高性能图像传感器——AR0235CS,它在设计和性能上都有诸多亮点,值得工程师们深入
    的头像 发表于 11-26 15:36 175次阅读
    onsemi <b class='flag-5'>AR</b>0235CS图像<b class='flag-5'>传感器</b>:工业视觉领域的新选择

    onsemi AR0544:高性能5MP CMOS数字图像传感器的卓越之选

    在当今的图像传感领域,高性能、低功耗的图像传感器需求日益增长。onsemi的AR0544数字图像传感器便是一款满足这些需求的杰出产品。本文将深入剖析
    的头像 发表于 11-26 15:18 201次阅读
    onsemi <b class='flag-5'>AR</b>0544:高性能5MP CMOS数字图像<b class='flag-5'>传感器</b>的卓越之选

    onsemi AR0145CS Hyperlux™ 图像传感器技术解析与应用指南

    安森美 AR0145CS Hyperlux™ SG图像传感器是1/4.3“ CMOS数字图像传感器,有源像素阵列为1280(H)x800(V)。安森美 AR0145CS采用创新型全局快
    的头像 发表于 11-24 11:21 297次阅读
    onsemi <b class='flag-5'>AR</b>0145CS Hyperlux™ 图像<b class='flag-5'>传感器</b>技术解析与应用指南

    如何在CYUSB2014和AR0144CS图像传感器之间建立通信?

    我们正在尝试在 CYUSB2014 和 AR0144CS 图像传感器之间建立通信。 我们不会使用 UVC 框架,因为设备的枚举不应该在设备管理的 Windows 摄像头下进行。 因此我们考虑
    发表于 05-19 08:28

    如何将CYUSB2014与传感器AR0144CS连接起来?

    我们正在尝试将 CYUSB2014 与传感器 AR0144CS 连接起来。 我参考了AN65974来实现从属fifo接口通信。 在这里,我的疑问是,由于它是一个传感器接口,赛普拉斯 FX3 应该充当
    发表于 05-19 06:11

    TDK推出全新SmartMotion PositionSense传感器

    运动传感器,作为监测人与物体运动的核心元件,已成为现代生活中不可或缺的一部分,广泛应用于智能手机、可穿戴设备、AR/VR耳机及导航系统等设备中。传感器的应用场景持续扩展,帮助用户在繁忙
    的头像 发表于 05-13 15:44 856次阅读

    CX3上的AR0245传感器的探头控制分辨率错误怎么解决?

    你好。我正在开发一款使用 AR0234CS 传感器和 CX3( CYUSB3065-BZXI )芯片的相机,并努力获得正确的视频流分辨率。 该传感器能够以 120 fps 提供 1920 x
    发表于 05-12 07:02

    晶体晶振在AR/VR设备中的作用

    AR/VR 的奇妙世界里,每一次精彩呈现都离不开精准频率的技术支撑。晶体晶振,作为 AR/VR 设备的核心元件,在其中默默发挥着无可替代的关键作用。
    的头像 发表于 05-09 09:30 3460次阅读
    晶体晶振在<b class='flag-5'>AR</b>/<b class='flag-5'>VR</b>设备中的作用

    AR0820 CMOS数字图像传感器数据手册

    电子发烧友网站提供《AR0820 CMOS数字图像传感器数据手册.pdf》资料免费下载
    发表于 03-04 15:03 1次下载

    AR0820 安森美图像传感器

    传感器
    jf_97060913
    发布于 :2025年03月04日 10:36:29