0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

关于iPhone8给这个市场带来的冲击和发展

半导体科技评论 来源:djl 2019-09-05 17:28 次阅读

深度感知与iPhone 8

今年是iPhone诞生的第十年。按照苹果的传统,大家都相信今年发布的新iPhone会有很大的技术革新。而根据供应链的消息,苹果早在今年年初就开始布局3D深度感知元件,可见深度感知非常可能是iPhone 8技术突破之一。

手机为什么需要深度感知?因为使用深度感知配合摄像头,可以做人脸的精确3D建模。大家知道,随着人工智能的崛起,面部识别技术越来越成熟,SenseTime、海康威视等不少公司都提供了基于深度学习人工智能的面部识别解决方案,目前这些方案已经在门禁系统、保安监视系统甚至ATM机中使用。然而,基于传统二维摄像头的人脸识别存在很大问题,即无法区分真实三维人脸与二维照片,因此这样的身份认证系统容易被一张照片破解,如之前爆出的支付宝刷脸支付被照片骗过认证就是这样的问题。

而一旦拥有人脸的3D建模,这个安全漏洞就被补上了。而且,使用高精度人脸3D建模,人脸识别的准确度也可以大大提高。iPhone 8如果使用刷脸解锁,其用户体验比起指纹认证更方便,更快速,同时也会引起一大波手机厂商跟风。

深度感知除了用在前置摄像头的位置用于刷脸认证之外,还可以用在后置摄像头,用于AR/VR应用。AR/VR应用中往往需要对周围环境和手势做3D建模,因此也需要深度感知。结合前不久苹果刚在WWDC发布的ARKit,在未来的iPhone使用后置深度感知也不无可能。

深度传感主流技术

目前,有三种主流深度传感技术:结构光,ToF以及摄像头阵列。结构光技术精度高,但是对于使用环境有较多限制,最有可能用在前置摄像头做高精度3D人脸建模,即用于刷脸;ToF精度一般,对于环境光容忍度较好,适用于中等大小空间的建模以及动态姿势/手势建模;摄像头阵列精度较差,但可以用于大尺度宽阔空间3D建模。

结构光技术

关于iPhone8给这个市场带来的冲击和发展

结构光技术常使用激光作为光源,并用光源把设计好的图样投影到目标上。根据目标深度变化,反射光的图样会发生变化,通过比较入射参考图样和反射图样就能估计深度。图样分为时变图样和形变图样,时变图样在不同时间投射不同的图样并扫描整个空间,形变图样则一次投射图样到整个空间,而每个地方投射的图样略有不同并计算深度分布。时变图样计算较简单,但扫描时间长,而形变图样计算较复杂,但是可以一次计算整个空间的深度分布。

ToF

ToF系统中,光源发射一束光,传感器检测到反射光并记录光从ToF传感器入射至物体到从物体反射回ToF传感器的时间间隔,即光的飞行时间。通过将非常时间乘以光速就可以知道目标物体在空间中的深度信息。ToF传感器的光学系统与传统RGB摄像头很接近,只是ToF传感器输出的是深度信息而非RGB摄像头输出的光强。

关于iPhone8给这个市场带来的冲击和发展

基于脉冲的ToF传感器系统

移动设备中常用的计算飞行时间的方法是通过调制光源(如周期性地改变光源的强度),并且检测反射光相当于入射光的调制相位变化。相位变化测量目前已经有成熟的混频技术可以实现。

关于iPhone8给这个市场带来的冲击和发展

基于调制光的ToF传感器。激光光源以方波形式调制,通过将反射光与入射参考光做混频可以估计飞行时间。

基于调制的ToF有一个主要问题,即距离混叠。当入射光和反射光调制相位差为φ时,我们可以估计飞行距离d=(c/4πf)φ, 其中c是光速,f是光源调制频率。然而,相位是一个周期函数。一个典型的φ-d图如下图所示。我们可以看到φ-d仅仅在一小段范围内单调。因此如果探测到的相位是60度,实际的相位除了可能等于60度以外还可能等于420度(60+360),780度(60+360*2),等等。故此,d也不能完全确定,除非d的距离范围事先给定并且落在φ-d的一段单调区间内,因此基于调制光的ToF测量范围有限。此外,基于调制光的ToF的精度和测量范围还是一对矛盾。想要深度测量范围大,则需要较低的调制频率;如果想要深度测量精度高,则需要较高的调制频率。这就进一步限制了基于调制光ToF的性能。一种流行的提高测量范围的技术是先后使用两个不同的调制频率并将两次结果结合起来来估计深度,不过这会增加ToF测量的延迟。另外,LED光源所支持的调制频率上限较低,因此深度测量精度也较激光要差。

关于iPhone8给这个市场带来的冲击和发展

相位-距离图,相位-距离关系仅仅在一小段距离里是单调的,因此会造成混叠。

摄像头阵列

摄像头阵列通常使用在不同位置的多个摄像头来拍摄多帧图像,并且根据多帧图像间的细微差别来估计深度。在CV领域,专业术语叫做“立体视觉”。目前,最简单但也是用得最多的摄像头阵列就是双摄像头,其中两个摄像头的位置稍有距离以模仿人眼。空间中每一个点在双摄像头拍摄到的两帧图像上都略有区别,根据几何学我们可以计算该点的深度。

关于iPhone8给这个市场带来的冲击和发展

摄像头阵列部署方便,成本也很低,但是主要难点在于如何找到同一个点在多帧图像上的位置(专业术语叫做“匹配点”)。目前基于深度学习的算法可以帮助找匹配点,但是需要的计算量非常大,在移动设备上会消耗许多电池电量。

技术比较

总体性能而言,深度感知最关键的性能是精确性。在这方面,结构光最强,而摄像头阵列通常最弱。

另一个重要指标是深度测量范围。结构光的测量范围最小,而ToF的测量范围则取决于发射光的强度以及光源类型。摄像头阵列的测量范围取决于摄像头间的距离。对于通常的摄像头阵列,其测量范围通常在10m以上,也就是说没法测量距离很近物体的深度。

此外,还有深度图的分辨率指标。结构光分辨率比ToF更好,因为结构光的发射图样可以被光学元件精确控制。理论上说,摄像头阵列也有很高的分辨率,但是这基于每一个点都能被完美匹配的基础上。在通常无法完美匹配的情况下,摄像头阵列的分辨率会下降。

最后,我们还要考虑环境亮度。结构光需要工作在较暗的环境中。ToF传感器对于环境亮度容忍度较好,而且随着背景消除技术的发展ToF能工作的环境亮度范围正在越来越广。摄像头阵列只能工作在较亮的环境下。在黑暗的环境下,摄像头阵列拍摄的图像质量变差,因此匹配点搜索变得更加困难,深度感知算法性能也会变得更差。

中国半导体厂商的机会

深度感知解决方案包括多个部件,如激光光源、光学元件以及传感器芯片等,另外模组也有机会。中国大陆半导体厂商总体在深度传感产业链中参与度还不高,在光学元件方面有驭光等初创公司在开发衍射元件,另外在模组方面,奥比中光则是深度感知方面较为领先。随着深度传感器市场逐渐打开以及半导体行业往中国大陆移动,可望在大陆在整体产业链方面能继续发力。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 移动设备
    +关注

    关注

    0

    文章

    455

    浏览量

    54202
  • 分辨率
    +关注

    关注

    2

    文章

    982

    浏览量

    41536
  • 传感器系统
    +关注

    关注

    0

    文章

    35

    浏览量

    12717
收藏 人收藏

    评论

    相关推荐

    冲击电流测试的测试步骤是什么

    探讨冲击电流测试的原理、方法、应用场景及其重要性。 首先,我们需要了解冲击电流测试的基本原理。在电力系统中,当电器设备接通电源时,由于电源电压的瞬间变化,会产生一个短暂的、高幅值的冲击电流。
    的头像 发表于 03-18 11:16 99次阅读
    <b class='flag-5'>冲击</b>电流测试的测试步骤是什么

    ADE7753换档冲击问题如何解决?

    出现问题是,从小电流档向大电流档转换时,电流RMS值会有一个比较大的冲击值,持续大约0.5-1S钟, 这个时候的功率也是有很大的冲击,请问如何避免这种冲击出现? 输入端无信号输入的
    发表于 12-27 06:46

    变压器冲击合闸是在高压侧还是低压侧进行?

    变压器冲击合闸是在高压侧还是低压侧进行? 变压器冲击合闸是在高压侧进行的。本文将为您提供关于变压器冲击合闸的详尽、详实和细致的信息。我们将探讨变压器
    的头像 发表于 12-25 14:40 327次阅读

    示波器探头会串入冲击信号:如何解决这个问题?

    示波器探头是电子工程师常用的测试工具,但在测试过程中,有时探头会串入冲击信号,导致测试结果错误。为了更好地解决这个问题,我们需要了解探头的机理,找到问题的源头,并采取有效的措施进行调试。
    的头像 发表于 12-22 13:52 162次阅读
    示波器探头会串入<b class='flag-5'>冲击</b>信号:如何解决<b class='flag-5'>这个</b>问题?

    如何评估ADA4610的偏置电流噪声输出端带来了多大的噪声?

    请结合ada4610的数据手册和如下原理图,评估偏置电流噪声输出端带来多大的噪声影响?
    发表于 11-13 06:52

    全球FPGA市场现状和发展前景展望

    全球FPGA市场现状和发展前景展望 当今,半导体市场格局已成三足鼎立之势,FPGA,ASIC和ASSP三分天下。市场统计数据表明,FPGA已经逐步侵蚀ASIC和ASSP的传统
    发表于 11-08 17:19

    STVD软件怎么STM8下载程序?

    STVD这个软件怎么STM8下载程序
    发表于 10-30 08:12

    STM8系列单片机开发与应用

    8位单片机历经30多年的发展历程,虽然受到16位、32位单片机的冲击市场占有率不断下降,但产销量仍不断扩大,竞争也更加激烈。诸多半导体公司纷纷推出更具
    发表于 10-10 06:36

    K9无线充电10W充电器PCBA无线快充方案SOP16封装外置SOP8和SOT23-6的MOS

    适用于带无线充功能的手机,如三星S8、S9,苹果iPhone88Plus、iPhoneX。 小米MIX2、小米MIX3、华为MateRS、Mate20pro、Mate20 RS等手机。 额定输出功率为
    发表于 09-07 21:05

    iPhone 15何时会发布?又会带来哪些改变与升级呢?

    随着苹果秋季发布会的临近,重头戏依旧是在iPhone上,那么本次的iPhone 15何时会发布?又会带来哪些改变与升级呢?
    的头像 发表于 09-05 15:20 786次阅读

    京瓷带来面向MICS市场的SAW滤波器 为医疗设备发展贡献力量

    为了创造更美好的社会,实现医疗的进一步发展与生活品质的提高,京瓷不断推进先进技术的研究,致力于开发应用于医疗设备的元器件。 此次京瓷带来了面向MICS市场的SAW滤波器,该产品主要安装在植入型起搏器
    的头像 发表于 06-30 10:27 406次阅读
    京瓷<b class='flag-5'>带来</b>面向MICS<b class='flag-5'>市场</b>的SAW滤波器 为医疗设备<b class='flag-5'>发展</b>贡献力量

    iPhone供应商宣布退出印度市场

    据公开资料显示,纬创的工厂位于距离印度“硅谷”班加罗尔以东50公里的约20万平方米的地方。该工厂拥有iphone8生产线,拥有数万名员工,其中工程师达数千人。这是苹果全球产业链的重要一环。
    的头像 发表于 06-07 09:19 1090次阅读

    冷热冲击试验箱厂家哪家好

    冷热冲击试验箱用来做一些复合性材料的高温、低温快速变化的试验,可以用来检测符合性材料在温度骤变的环境下发生的热胀冷缩效应和化学变化。在自然环境中,很多东西都会受到温度变化带来的热胀冷缩引起的性能
    的头像 发表于 05-31 14:18 1107次阅读
    冷热<b class='flag-5'>冲击</b>试验箱厂家哪家好

    冷热冲击测试,温度冲击测试是什么?有什么作用?

    冷热冲击/温度冲击是什么测试,怎么做冷热冲击/温度冲击测试,冷热冲击/温度冲击怎么进行制定。
    的头像 发表于 05-27 11:14 834次阅读

    助力电子产业高质量发展,华秋在行动

    经历了三年会展低谷期后,随着展会逐步放开,积极参展依然是不少企业的优先选择。企业亟须更多的新品和亮眼的产品来引领市场发展,展会带来的新产品也正是市场的“强心剂”。作为值得信赖的电子产
    发表于 03-30 18:21