0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

分析 丨ToF传感器的XR应用和主要厂商

芯查查 来源:芯查查 作者:芯查查 2024-02-05 16:49 次阅读

苹果MR头显Vision Pro被业界关注,另有消息称华为在2024年规划2款产品,一个是与Vision Pro、Quest和PICO方案类似的MR头显,预计2024年Q3或者Q4发布;另一个是与魅族MYVU衍射光波导AR眼镜类似的产品,发布时间晚于MR头显。

苹果和华为入局能否推动XR(包括AR、VR、MR)行业进一步发展?根据网传的华为MR调研显示,苹果Vision Pro第一代销量主要起到“教育”用户的作用,根据大致的供货数据显示大约40多万台,销量不大的另一个原因是屏幕供应商、索尼的产能不足影响。第二代Vision Pro可能在2025年推出,是一款低配版或标准版,销量为几百万台,第三代产品的销量可能超过千万台。与苹果MR头显类似,华为的第一代头显销量也不会太大。

XR应用培养用户群体需要良好的产品沉浸式体验,底层硬件不可获取,其中,ToF(Time of Flight)传感器是一种比较重要的元器件,影响XR产品的感知和交互功能,下面将介绍ToF传感器的XR应用和主要厂商

ToF是更适合XR应用的3D成像技术

ToF传感器在XR应用中用于提供精确的深度感知、环境扫描功能,主要用途包括:

l 空间映射(mapping)和追踪:帮助MR头戴设备创建用户周围环境的3D模型,实现精准的空间定位和6自由度追踪,使得虚拟内容可以准确地融入现实世界并与之交互。

l 环境理解和避障:实时感知环境中物体的位置和形状,以便系统能够在安全的距离内放置虚拟对象或进行交互设计,避免用户碰撞真实物体。

l 手势识别:ToF传感器可用于捕捉手部动作,实现无需手持控制器的自然手势交互。

ToF传感器的作用之一是3D成像,分别针对空间定位与建模、动态手势识别以及对环境深度信息的全面理解与反应。实际上还有其他2种成像技术,包括立体视觉(stereo vision)、结构光(structured light)。

wKgaomXAoRSAF6UIAADruO_wCik39.webp

图注:与其他3D成像技术相比,ToF更适用于3D映射(图源:Yole)

立体视觉的3D成像分辨率高、精度高、抗强光干扰性强、成本低,但是算法非常复杂、容易受到环境因素干扰、依赖环境光源、暗光场景表现不佳、模组尺寸相对较大等。

结构光有效识别距离相对较短,模组结构比较复杂,成像容易受强光干扰,成本也相对较高,但是其通过一次成像就可以得到深度信息,能耗低、成像分辨率高,非常适合对安全级别要求较高的3D人脸识别、3D人脸支付等方面的应用。

ToF技术虽然成像精度和深度图分辨率比结构光低、功耗较高,优势在于识别距离更远,可做到0.4米到5米甚至更远的中远距离识别,抗干扰性强,使ToF技术不仅应用于3D人脸识别、3D建模等方面,还适用于SLAM、手势识别、体感游戏、AR/VR等,应用更加广泛。

wKgZomXAoRaAMeuXAADA4tsh2Dg49.webp

图注:iToF和dToF在移动终端上design win案例(图源:Yole)

ToF根据发射光源的调制方式,有iToF和dToF之分。iToF发射连续波或短脉冲的调制近红外光,并测量反射光的相位差来确定距离。由于相位与光程成正比,因此可以根据接收到信号的相位变化计算出目标物体的距离。适合中远距离测距,但对环境光噪声敏感,需要复杂的信号处理算法以消除干扰。dToF发送的是超短光脉冲,然后精确测量这些脉冲从发射到接收的时间间隔,从而直接计算出绝对距离,其抗干扰能力强,能够实现快速准确的实时深度探测,适用于动态场景。

wKgaomXAoRaAEXNBAACfojUsxn858.webp

图注:传华为2024年发布的MR设备采用的3D传感器方案,其中dToF未确定是否采用。

主流产品形态:dToF阵列和多域dToF

ToF产品形态有dToF Array和dToF Multizone之分,两者在设计和应用上存在一定的区别:dToF Array是一系列并排排列或矩阵排列的多个dToF传感器单元,可以独立工作或协同工作,每个单元都能进行单独的光脉冲发射和接收,获取不同点位的深度信息。优势是能够提供大范围或高分辨率的深度数据采集,特别适合于需要大面积覆盖或者需要较高精度的3D扫描、空间感知和物体识别场景。

wKgZomXAoRaAajIbAAB1aLa36Gs20.webp

图注:dToF Multizone能更好适应复杂环境条件,也适用于XR设备和无人机导航,但实际ToF产品形态取决于功耗和成本等具体需求

dToF Multizone是单个dToF传感器被划分为多个区域,虽然物理上可能仍然是一个整体,但功能上却能实现多区域独立操作。每个区域可能会有不同的光源发射策略(例如不同的波长或强度)以及各自的接收器来处理反射信号。调整各个区域的工作参数,dToF Multizone技术可以更好地适应复杂的环境条件,比如减小干扰、区分距离相近或材质不同的目标,并且可以在单个硬件模块上实现更精细化的距离测量,提高系统抗干扰能力和测距准确性。

总结来说,dToF Array强调的是多个传感器单元的集成和同时工作以提高空间分辨率或覆盖面积,而dToF Multizone则是在单一传感器内部实现分区控制和优化,目的是增强对复杂环境和多种目标的适应性及测量精准度。

wKgaomXAoReADVlmAAD-IBk1sxs92.webp

图注:海外ToF主要厂商

wKgZomXAoReAZZcmAAH77IA9HyI46.webp

图注:国内ToF芯片/模组厂商
ToF传感器产品示例ADI:提供全面的ToF产品和方案

ADI提供各种ToF产品和解决方案,包括高分辨率CMOS成像芯片(1MP)、深度计算和毫米级精度处理、激光驱动器电源管理,以及有助于快速实施ToF和iToF解决方案的开发工具和软件/固件。

产品示例:结合ADTF3175 ToF模块和ADSD3500 ToF深度图像信号处理器,为深度相机提供完整的解决方案。

艾迈斯欧司朗:业界唯一拥有3种3D成像技术的厂商

艾迈斯欧司朗是目前唯一拥有3D传感三种主流技术(结构光、双目立体视觉和ToF)的传感器领导厂商,可提供更小尺寸、低功耗、高精度的整体解决方案。其新的3D dToF系统将高功率VCSEL、点阵光学系统和高灵敏度SPAD等一流技术组合在一起,准确测量场景中各物体的景深,并转换为精确的场景重建,让虚拟现实体验更具身临其境的真实感。

产品示例:红外OSLON®黑色系列SFH 4715S/ 4715AS和SYNIOS®系列等,提供红外照明光源,可以最大程度确保虚拟现实3D场景体验的流畅性。

英飞凌:拥有400多项ToF专利

自2015年宣布在消费领域推出第一代的ToF产品至今,英飞凌在ToF领域已经有400多项专利。英飞凌ToF技术在强光情况下能较好规避太阳光干扰,SBI专利技术能去掉不需要的光信息,让有效的光信息通过,在强光下能得到比较好的物体深度信息。

产品示例:英飞凌REAL3™ ToF 3D技术可以用于机器人移动时对整个场景的建图、定位,实现精准避障,并给上层的路径规划算法,提供更多数据输入。

芯视界:自研单光子dToF芯片性能远超索尼

芯视界研发单光子直接ToF(SPAD dToF)技术和应用,拥有芯片级的光电转换器件设计和单光子检测成像技术,主营基于单光子探测的一维和三维ToF传感器。产品广泛应用于扫地机、无人机、手机、AR/VR和自动驾驶激光雷达等。

产品示例:单光子探测技术的3D ToF深度传感器—VI4331,该传感器分辨率高达240×96,支持水平120度广视场角,拥有30fps高帧率,适用于扫地机室内建模与避障、行为检测、安检监控等。

聚芯微:累计出货3亿颗芯片

聚芯微自研3D ToF芯片和光学感知芯片。其3D ToF芯片具有比较先进的近红外增强NIR+、低噪声信号链、低功耗数字电路设计。截止2023年,聚芯微已累计出货超3亿颗。

产品示例:BSI 5um VGA iToF 传感器,已获主流手机客户订单并量产。此外,3D dToF图像传感器芯片SIF7010是其第一款3D堆叠dToF,小尺寸、低成本、低功耗,可实现更好的全场景Auto-Focus、背景虚化人像模式、电影模式等,适用于场景建模和AR/VR应用。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2526

    文章

    48093

    浏览量

    740066
  • 芯片
    +关注

    关注

    447

    文章

    47788

    浏览量

    409131
  • TOF
    TOF
    +关注

    关注

    9

    文章

    435

    浏览量

    35902
  • XR
    XR
    +关注

    关注

    0

    文章

    354

    浏览量

    8889
收藏 人收藏

    评论

    相关推荐

    简单的家用环境监测传感器

    项目作者:黄桃味的酸奶本文来自全志XR806开发板评测活动文章,作者使用XR806开发板制作一个简单的家用环境监测传感器,可以获取当前的温度、湿度、气压、海拔这四个参数,同时能够通过外部的屏幕实时
    发表于 03-25 11:25

    意法半导体的多区飞行时间(ToF传感器系列介绍

    VL53L5、VL53L7、VL53L8都是基于意法半导体(ST)的FlightSense技术的多区飞行时间(ToF传感器
    的头像 发表于 02-28 09:53 279次阅读
    意法半导体的多区飞行时间(<b class='flag-5'>ToF</b>)<b class='flag-5'>传感器</b>系列介绍

    多区飞行时间(ToF)传感器的特点

    ‍‍‍‍‍‍‍‍ VL53L5、VL53L7、VL53L8都是基于ST的FlightSense技术的多区飞行时间(ToF传感器
    的头像 发表于 02-25 09:41 284次阅读
    多区飞行时间(<b class='flag-5'>ToF</b>)<b class='flag-5'>传感器</b>的特点

    混合ToF弥补单一ToF不足实现全面深度传感

    电子发烧友网报道(文/李宁远)ToF,广为人知的传感技术,已经在各个领域中应用得十分广泛。ToF的测距原理其实并不复杂,通过给目标连续发送光信号或脉冲,然后用传感器接收从物体返回的光,
    的头像 发表于 02-20 01:12 2014次阅读

    基于Crazyflie和TOF传感器的自旋停效果实现

    今天小编给大家带来的是新加坡的Maker Chathuranga Liyanage使用TOF传感器让Crazyflie实现高度自保持的项目。
    的头像 发表于 01-25 18:20 1502次阅读
    基于Crazyflie和<b class='flag-5'>TOF</b><b class='flag-5'>传感器</b>的自旋停效果实现

    ToF4M Unit高精度距离传感器单元

    Time-of-Flight(ToF)是一种用于测量物体距离的技术。它通过测量光或其他波的往返时间来确定物体与传感器之间的距离。在光学ToF传感器中,通常会发射一个光脉冲,然后测量这个
    的头像 发表于 11-25 08:29 490次阅读
    <b class='flag-5'>ToF</b>4M Unit高精度距离<b class='flag-5'>传感器</b>单元

    全志XR806实现简单的家用环境监测传感器

    的当下,能够联网上报信息的功能不可或却. 2.硬件选型 2.1硬件选型 本次小项目的核心是XR806开发板.显示部分使用2.8寸 ST7789显示屏. 环境状态获取使用的是BMP280和ATH20传感器
    发表于 11-03 10:19

    什么是ToF传感器ToF的分类

    无论是AR眼镜和手机领域,sensor都在其中被大量使用。思考了很久,还是决定陆续写一些传感器相关的文章,主要包括基础知识扫盲、测试内容和规范、调试经验等。受限于本人的技术积累,仅供大家参考。
    的头像 发表于 11-01 10:51 6668次阅读
    什么是<b class='flag-5'>ToF</b><b class='flag-5'>传感器</b>?<b class='flag-5'>ToF</b>的分类

    ST超低功耗飞行时间 (ToF) 传感器:解锁智能生活新场景

      点击上方  “ 意法半导体中国” , 关注我们 ‍‍‍‍‍‍‍‍ 未来,ToF在接近检测传感器、人体存在检测和激光自动对焦等领域的应用中不可估量。作为主要ToF技术和方案提供商,
    的头像 发表于 10-20 01:35 334次阅读
    ST超低功耗飞行时间 (<b class='flag-5'>ToF</b>) <b class='flag-5'>传感器</b>:解锁智能生活新场景

    tof原理介绍 ToF传感器的优缺点

    ToF传感器使用微小的发射器发射红外光或者激光,其中产生的光会从任何物体反弹并返回到传感器。根据光的发射与被物体反射后返回传感器之间的时间差,传感器
    发表于 08-23 11:21 2699次阅读
    <b class='flag-5'>tof</b>原理介绍 <b class='flag-5'>ToF</b><b class='flag-5'>传感器</b>的优缺点

    ToF传感器的原理及优缺点分析

    ToF传感器使用微小的发射器发射红外光或者激光,其中产生的光会从任何物体反弹并返回到传感器。根据光的发射与被物体反射后返回传感器之间的时间差,传感器
    发表于 08-22 09:52 3105次阅读
    <b class='flag-5'>ToF</b><b class='flag-5'>传感器</b>的原理及优缺点<b class='flag-5'>分析</b>

    具有光流和ToF传感器的自主Crazyflie

    电子发烧友网站提供《具有光流和ToF传感器的自主Crazyflie.zip》资料免费下载
    发表于 06-27 14:39 0次下载
    具有光流和<b class='flag-5'>ToF</b><b class='flag-5'>传感器</b>的自主Crazyflie

    Melexis ToF传感器助力实现汽车和工业功能安全应用

    Melexis推出ToF传感器新品MLX75027RTI,助力汽车和工业客户满足功能安全要求,进一步巩固其在3D传感技术领域的地位。
    发表于 06-25 09:56 220次阅读

    如何将ToF传感器与IMX8MP处理连接起来?

    我正在尝试将 ToF 传感器与 IMX8MP 处理连接起来。我的主机开发 PC 是 Ubuntu 操作系统,所以有人可以指导我使用交叉编译工具链,我可以使用它在我的主机 PC 上进
    发表于 06-08 06:31

    ToF传感器究竟有多神奇?

    ToF是飞行时间(Time of Flight)的缩写,ToF传感器的工作原理与声纳探测非常相似,它是通过测量光从物体上反射所需的时间来进行物体的定位和通信。ToF
    的头像 发表于 05-18 09:48 4808次阅读
    <b class='flag-5'>ToF</b><b class='flag-5'>传感器</b>究竟有多神奇?