0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

多图详解安森美领先的成像技术,助您推进视觉产品创新

安森美 来源:未知 2023-08-02 19:10 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

本文作者:安森美智能感知事业群工业感知部应用工程高级经理Open.Kai

在当今数字化时代,视觉产品的需求与日俱增,在自主移动机器人 (AMR)、仓库机器人、无人机、农业、工厂检查和安防/监控等应用场景,会实施基于机器视觉人工智能 (AI) 与先进技术来执行关键功能。要想提高现有的目标检测和识别能力,需要解决在不利光照条件下,对运动中的对象和更远距离的精细细节捕获图像的难题。而安森美(onsemi)先进的CMOS图像传感器技术正是推动这一领域不断创新的关键,这些技术不仅能够提高图像传感器的灵敏度和分辨率,还能够通过更加智能的传感器片上多帧合成以及压缩技术来获得低系统带宽需求的高动态范围影像,还实现了HDR运动补偿、LED闪烁抑制、运动唤醒等功能。在这样一个竞争激烈的市场中,利用领先的CMOS图像传感器技术的企业将能够更好地满足市场需求,提高产品的竞争力和市场份额。因此,深入了解和应用这一技术已经成为了企业推进视觉产品创新的必要手段。

安森美最新推出的AR0822是一颗集eHDR运动补偿(Motion Compensation)运动唤醒(Wake on Motion)几大硬核功能于一体的八百万像素的4K图像传感器芯片。下面让我们来了解一下这些专业名词吧:

1什么是HDR?HDR = High Dynamic Range,高动态范围,也有叫WDR(Wide Dynamic Range)的,其实是不同厂家不同的叫法,实际上都是一样的。

动态范围计算公式:

ad4007f2-3124-11ee-9e74-dac502259ad0.pngad5c01b4-3124-11ee-9e74-dac502259ad0.png

Smax:最大可测量到的信号,即像素饱和信号值,也就是像素的满井电荷;

Smin:最小可侦测到的信号,即SNR=1时的信号值,也就是全黑场景下的读出噪声;也就是

ad685810-3124-11ee-9e74-dac502259ad0.pngad4007f2-3124-11ee-9e74-dac502259ad0.png

多次曝光是如何来提升动态范围的呢?

ad87d500-3124-11ee-9e74-dac502259ad0.png

T1=Long exposure time,T2=Short exposure time.

2为什么需要HDR?
  • 自然界的光线强度从0.0001cd/m2弱星光到超过100Kcd/m2的夏季太阳直射光,整个亮度的动态范围约180dB。人眼能分辨出来的最大动态范围约120dB。
  • 当今相机的应用场景存在不少动态范围的挑战:
  • 怎么样才能更好的处理高亮度场景呢?

这三个维度基本上就代表了目前主流的HDR技术方向。

adb4a184-3124-11ee-9e74-dac502259ad0.png

  • 我们来看看目前主流的几种实现HDR的技术:

  • 多次曝光

  • 大小像素

  • 超级曝光

addf9772-3124-11ee-9e74-dac502259ad0.gif多次曝光ae00d0f4-3124-11ee-9e74-dac502259ad0.png

多次曝光技术,通过长曝光来捕捉低亮度处的细节,通过中、短曝光来捕捉中高亮度处的图像。在常规像素设计的情况下,通过多次曝光技术就可以达到120dB(3次曝光)甚至140dB(4次曝光)的动态范围。然而一般的多次曝光技术存在不足:对于运动的物体会有运动伪色影,特别是对于LED光源,有时它能被短曝光时间捕捉到,有时候则不能,那就导致了LED闪烁不清的问题。典型的脉冲光源是LED交通灯、交通标志和汽车尾灯。

addf9772-3124-11ee-9e74-dac502259ad0.gif大小像素ae34f10e-3124-11ee-9e74-dac502259ad0.png

这类设计的芯片上同时存在大像素和小像素,大像素来捕捉低光信息,小像素来捕捉高光信息。由于大小像素是同时曝光的,这种设计避免了运动伪影问题。然而这种技术存在大像素QE损失,以及由于大小像素QE不同、串扰等影响产生的色彩问题,需要使用者花费大量的资源和成本来进行校正,给用户带来了很大的挑战。大小像素技术是利用大像素和小像素感应光线的比例来实现HDR,目前半导体制作技术能力不允许任意的扩大或者缩小像素物理尺寸,所以大小像素技术能达到动态范围也是有限的。

在现在成本以及小型化压力下,要将同样分辨率的芯片做小,就需要使用更小的像素,大小像素方案比单像素方案更难去缩小像素尺寸。注:大小像素技术是安森美的专利,在2009年由美光公司获得。

addf9772-3124-11ee-9e74-dac502259ad0.gif超级曝光,即我们在Hyperlux系列采用的技术ae8af55e-3124-11ee-9e74-dac502259ad0.png

通过增加额外的电路,当像素电容饱和时候,溢出的电荷继续转移到外挂的电容存储中去,从而实现了超大的满井电荷,动态范围能达到单次曝光110dB,多次曝光能达到150dB。这种方式在110dB下没有LED 闪烁问题和运动伪影问题,同时还有非常好的低光照性能。

看了这么多的HDR技术,那么安森美AR0822是怎么样的技术呢?为什么说它是eHDR呢?通常多次曝光的sensor会发送每一次曝光的数据给到后端处理器来进行合成,而3次曝光就需要发送3帧数据。当今应用对图像传感器的分辨率要求越来越高,4K 800万能提供更多的细节,可是,3张800万像素的图片的数据量多大呢?如果是多相机的应用方案呢?处理器能提供多大的带宽呢?aec6856a-3124-11ee-9e74-dac502259ad0.png

ad4007f2-3124-11ee-9e74-dac502259ad0.png如果采用传统的HDR 数据传输方式,4K 3次曝光需要超过10Gbps,这对SERDES以及线缆的挑战十分巨大。

AR0822 是eHDR(embedded High Dynamic Range),多次曝光合成是在sensor内部进行完成的,通过内部智能拟合以及压缩功能,可以将3次曝光的20bit数据压缩成12bit数据,然后再传输给后端平台,极大的降低了系统的数据带宽。

ad4007f2-3124-11ee-9e74-dac502259ad0.pngAR0822 支持多种多次曝光合成线性化拟合功能,DLO(Digital Lateral Overflow)以及SCMAX(Smooth Combination Max),我们称其智能拟合,这种模式降低了多次曝光合成时的亮度临界区域的噪声。aef1e4e4-3124-11ee-9e74-dac502259ad0.png还记得我们前面说的多次曝光HDR的一个不足吗?对,就是运动伪影以及LED 闪烁,AR0822 片上HDR合成还加入了运动补偿(Motion compensation)功能来减轻这些问题:

af292346-3124-11ee-9e74-dac502259ad0.png

运动补偿包含运动捕捉和运动纠正两个模块,运动捕捉模块来捕捉T1和T2之间的运动值(对每一个pixel进行motion mask的计算),运动纠正模块使用motion mask来对T1数据进行运动补偿。

af49e9fa-3124-11ee-9e74-dac502259ad0.png

ad4007f2-3124-11ee-9e74-dac502259ad0.png例图:上路实拍,可以看出AR0822出色的HDR效果,以及极好的低亮度性能。注:图片截取自视频流。

更值得一提的是,AR0822除了eHDR外,还具备WOM(Wake on Motion)功能:b03b79a0-3124-11ee-9e74-dac502259ad0.pngAR0822可以运行在极低的帧率下,当检测到画面ROI区域中有运动发生,则去唤醒SOC,恢复sensor运行到正常模式。b0601d78-3124-11ee-9e74-dac502259ad0.png

ad4007f2-3124-11ee-9e74-dac502259ad0.png而其杰出的motion detect ROI 则进一步降低功耗:我们对画面进行运动捕捉block 分区,只关注开启区域的运动检测,像典型的可视门铃,上图中场景内存在树木花草,一旦有什么“风吹草动”或者小动物经过,很可能系统就开启误报,而可编程的运动捕捉区域,可以很好的降低这种误报。配合PIR,通过sensor自带的运动捕捉和超级低功耗模式,可以让整机系统电池使用时间延长50倍。

先进的CMOS图像传感器技术的发展,将不断推动视觉产品的创新和进步。无论是在工业自动化、汽车安全、医疗诊断等领域,这一技术都将扮演着越来越重要的角色。安森美的AR0822传感器集eHDR、运动补偿、运动唤醒几大硬核功能于一体,解决工程师在设计视觉系统时所面临的动态范围、运动伪影、LED闪烁、功耗等复杂挑战,实现更多创新。

点击视频了解AR0822更多信息

点个星标,茫茫人海也能一眼看到我

b08a2fb4-3124-11ee-9e74-dac502259ad0.gif

b0fd933c-3124-11ee-9e74-dac502259ad0.jpg

点赞、在看,记得两连~」


原文标题:多图详解安森美领先的成像技术,助您推进视觉产品创新

文章出处:【微信公众号:安森美】欢迎添加关注!文章转载请注明出处。


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 安森美
    +关注

    关注

    33

    文章

    2153

    浏览量

    95835

原文标题:多图详解安森美领先的成像技术,助您推进视觉产品创新

文章出处:【微信号:onsemi-china,微信公众号:安森美】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    安森美Hyperlux ID解锁机器视觉应用新可能

    深度感知是现实机器视觉应用中不可或缺的关键功能。安森美 (onsemi) 的Hyperlux ID 间接飞行时间 (iToF) 深度传感器,凭借更少、更小、更简单的器件,即可实现高精度深度感知。本系列文章将深度拆解安森美Hype
    的头像 发表于 04-21 13:41 168次阅读
    <b class='flag-5'>安森美</b>Hyperlux ID解锁机器<b class='flag-5'>视觉</b>应用新可能

    安森美浅谈机器视觉应用发展趋势和深度感知的技术难题

    深度感知是现实机器视觉应用中不可或缺的关键功能。安森美 (onsemi) 的 Hyperlux ID 间接飞行时间 (iToF) 深度传感器,凭借更少、更小、更简单的器件,即可实现高精度深度感知
    的头像 发表于 04-03 15:34 322次阅读
    <b class='flag-5'>安森美</b>浅谈机器<b class='flag-5'>视觉</b>应用发展趋势和深度感知的<b class='flag-5'>技术</b>难题

    安森美智能感知方案亮相Vision China 2026

    随着全球制造业加速迈向高端化、智能化,机器视觉作为“工业之眼”,其在精度、速度及复杂环境下的适应性被赋予了更高期待。在这场全球视觉风向标盛会Vision China 2026上,安森美(onsemi)通过一系列革新性
    的头像 发表于 03-26 16:05 865次阅读

    安森美PRISM平台助力成像应用上市时间缩短六个月

    安森美 (onsemi) 推出的 Premie r图像传感器模块参考设计(PRISM) 平台,是一套预先优化的子系统解决方案,旨在简化数字成像产品的开发流程。 PRISM 为创新者提供
    的头像 发表于 03-18 16:43 521次阅读
    <b class='flag-5'>安森美</b>PRISM平台助力<b class='flag-5'>成像</b>应用上市时间缩短六个月

    借助安森美PRISM模块简化成像产品原型构建流程

    本教程围绕安森美(onsemi) 图像传感器模块参考设计(PRISM)展开,聚焦成像设备从设计到制造的全流程优化需求,系统介绍 PRISM 方案的核心架构、功能模块、性能特性及生态接入方式,为成像
    的头像 发表于 03-16 16:30 669次阅读
    借助<b class='flag-5'>安森美</b>PRISM模块简化<b class='flag-5'>成像</b><b class='flag-5'>产品</b>原型构建流程

    安森美CMO讲述我们与中国速度的共生故事

    藏在每一次与客户并肩攻克的系统级难题中,藏在对差异化创新的执着里,更藏在我们深耕生态协同的行动中。 基因里的创新“偏执”,安森美的“远方”与“脚下” 新春伊始,我们问了自己一个问题:“安森美
    的头像 发表于 03-09 16:15 659次阅读

    安森美系列功率器件产品助力突破AI数据中心能效瓶颈

    随着 AI 算力需求的爆发式增长,数据中心正面临功率密度激增、能耗加剧及行业效率标准日趋严苛的多重考验。作为功率器件领域的领导厂商,安森美(onsemi)如何助力客户突破能效瓶颈,以下通过安森美专家的核心回复,快速聚焦公司的技术
    的头像 发表于 01-24 17:04 2411次阅读

    安森美热门技术与重点产品十问十答

    年终干货来啦!回顾这一年,安森美(onsemi)收到超工程师小伙伴的技术问询,从新品选型到散热优化、从替代型号查找到手册工具获取,大家的困惑我们都记在心里。
    的头像 发表于 01-05 13:47 805次阅读
    <b class='flag-5'>安森美</b>热门<b class='flag-5'>技术</b>与重点<b class='flag-5'>产品</b>十问十答

    安森美vGaN技术解锁极致功率密度与效率

    安森美 (onsemi) 的垂直氮化镓 (vGaN) 晶体管是新一代功率器件,能够以高频率处理极高电压, 效率显著优于传统的硅芯片。 这项技术在行业内处于领先水平。 安森美的这个先进设
    的头像 发表于 12-17 15:45 667次阅读

    安森美图像传感器在机器视觉的应用

    下面的框图展示了采用安森美 (onsemi) 推荐产品的机器视觉方案,该方案集成了多种图像感知和深度感知技术,运用了安森美的全局和卷帘快门传
    的头像 发表于 10-13 15:20 1630次阅读
    <b class='flag-5'>安森美</b>图像传感器在机器<b class='flag-5'>视觉</b>的应用

    安森美如何推动具身智能机器人发展

    安森美为机器人应用提供关键的感知和电源产品,比如HyperluxTM系列图像传感器(包含用于机器人视觉系统的高分辨率iToF 深度成像解决方案),以及可实现先进电机控制的
    的头像 发表于 09-04 10:06 2916次阅读
    <b class='flag-5'>安森美</b>如何推动具身智能机器人发展

    安森美PCIM Asia 2025亮点前瞻

    PCIM Asia 2025即将火热开启,从汽车电动化的澎湃动力到工业场景的智能高效,再到AI数据中心稳定供电,安森美(onsemi)带着创新技术阵容强势来袭。
    的头像 发表于 08-28 11:30 2368次阅读
    <b class='flag-5'>安森美</b>PCIM Asia 2025亮点前瞻

    安森美荣膺2025人工智能行业优秀创新产品

    技术突破,斩获维科杯·OFweek 2025人工智能行业优秀创新产品奖。这款产品以其创新的Combo架构、高能效、高可靠性及系统友好性,成
    的头像 发表于 08-12 17:55 2007次阅读

    安森美为小米的YU7电动SUV系列提供产品技术支持

    安森美 为小米 的YU7 电动 SUV 系列 提供 产品技术支持   安森美EliteSiC 技术使车辆的续航里程超越同级别车型    
    的头像 发表于 08-05 18:08 2312次阅读
    <b class='flag-5'>安森美</b>为小米的YU7电动SUV系列提供<b class='flag-5'>产品</b>和<b class='flag-5'>技术</b>支持

    安森美与舍弗勒扩大合作加速电动汽车创新

    安森美(onsemi,美国纳斯达克股票代号:ON)宣布扩大与领先的驱动技术公司舍弗勒(Schaeffler)合作,双方在一项新的设计中标项目中采用安森美的下一代碳化硅 MOSFET E
    的头像 发表于 08-04 10:31 1322次阅读