0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

CMOS图像传感器为自动驾驶汽车提供视觉感知

感知芯视界 来源:安森美 作者:安森美 2024-02-27 09:28 次阅读

来源:安森美,谢谢

编辑:感知芯视界 Link

要实现全自动驾驶汽车,需要整合来自多种传感器信息,其中摄像头的信息可能是最重要的。这些摄像头必须能够在各种条件下连续捕捉最微小的细节,以确保车辆乘客和其他道路使用者的安全。本文将探讨在选择图像传感器时需要注意的关键特性,以便为自动驾驶汽车提供所需的出色功能组合。

图像传感器负责将光子转化为电子,然后存储为数字图像数据。如今,图像传感器广泛应用于各种摄像头视觉应用,包括智能工厂、医学成像和汽车领域。图像传感器的选择取决于给定应用所需的性能水平。在决定使用哪种图像传感器时,首先需要了解所需的帧率、预期的照明条件和所需的系统容限,但如果缺乏视觉系统方面的工程专业知识,可能会让这个过程变得艰巨。好在有几种标准可以用来比较不同图像传感器的性能。

01传感器分辨率和灵敏度

在测量精度至关重要的应用中,传感器分辨率是一项关键指标,因为它决定了捕捉图像的感光表面行和列上的像素数量。所需的最小像素数量取决于图像中需要检测的最小特征。虽然理论上每个维度只需 2 个像素即可解析物体的单个特征,但对比度不足和图像噪声意味着实际应用中至少需要 4 或 5 个重叠像素,才能完全解析一个特征。

灵敏度衡量传感器将光子转化为电子的效率,在几乎所有应用中都很重要。它衡量传感器识别可用图像所需的时间和照度(照明)。灵敏度还受到传感器噪声的影响,因此信噪比 (SNR) 是一项重要指标。具有高信噪比的传感器可在低光条件下提供更高质量的图像。灵敏度在监控和医疗应用中尤为重要,因为这些应用即使在低光条件下也需要高质量的图像。虽然图像传感器资料手册提供了灵敏度指标,但有时很难比较不同制造商生产的传感器的灵敏度。自动驾驶汽车即使在低光(近乎黑暗)的条件下,也需要高水平的细节,因此在选择图像传感器时,必须仔细考虑分辨率和灵敏度这两项关键指标。

02动态范围和帧率

动态范围是指一个像素的最小(噪声)信号与其最大阱容之间的比值,它定义了图像中存在多少不同亮度级别。在具有极端光照条件的应用中,这是一个特别重要的特性。动态范围指标基于欧洲机器视觉协会 (EMVA)1288 标准,并以分贝 (dB) 为单位,因此可以轻松地根据大多数传感器资料手册进行比较。

帧率是传感器的速度指标,以每秒读取的图像(帧)数 (fps) 来衡量。在捕捉快速移动物体的应用中,高帧率非常重要,因为需要较短的曝光时间,以防止出现模糊和减少运动伪影。随着传感器像素数量增加,可实现的最大帧率会降低。例如,使用低质量的视频图形阵列 (VGA) 图像传感器可以实现更高的帧率,而使用全分辨率 2000 万像素传感器则无法达到同样的效果。支持“感兴趣区域”(ROI) 的传感器可以将高帧率与高分辨率结合起来。这类传感器会确定图像中要进行处理的一个或多个区域,而忽略图像的其他所有区域。这有效降低了整体图像分辨率,因而能够实现更高的帧率。与标准汽车一样,自动驾驶车辆在高速行驶过程中会遇到各种光照条件,因此在选择图像传感器时,高动态范围和高帧率是至关重要的特性。

03运动与色彩

CMOS 图像传感器使用的两种读出方法是卷帘快门和全局快门。卷帘快门法在曝光时逐行读出传感器的像素,因此是一种非常快速的技术。与使用全局快门的传感器相比,它每个像素使用的晶体管数量更少、噪声更小、灵敏度更高,且成本更低。建议在需要高动态范围的应用中使用卷帘快门传感器。在全局快门读出方法中,每个像素会同时曝光,因此像素行之间没有捕捉延迟。然而,这种方法既昂贵又难以实现。

在测量记录和存在检测等应用中,可以接受采用黑白图像传感器,但现在许多应用都需要彩色图像。不过,黑白传感器也具有一些优势。为了使传感器提供彩色图像,需要在像素级别以拜尔模式排列 RGB 滤光片。不过,拜耳色彩插值会导致细节和整体测量精度降低。因此,只有在应用需要色彩信息时,才需要使用彩色传感器。显然,自动驾驶汽车应用需要捕捉彩色图像并使用卷帘快门传感器。

04像素大小

有一种误解是,像素越大,图像质量就越好。虽然较大的像素有更多面积可用于收集光线,但并不意味着可以获得更高质量的图像。需要注意的是,分辨率和像素噪声指标等因素在决定图像质量方面也起着重要作用。较小的像素往往具有较低的暗信号不均匀性 (DSNU);在较高温度下,暗信号不均匀性会限制低光性能。在某些情况下,像素较小的传感器性能会优于像素较大的传感器。在设计摄像头系统时,必须考虑在速度、灵敏度和图像质量特性之间取得良好的平衡,以实现出色的性能。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • CMOS
    +关注

    关注

    58

    文章

    5163

    浏览量

    233368
  • 图像传感器
    +关注

    关注

    68

    文章

    1737

    浏览量

    128868
  • 测量
    +关注

    关注

    10

    文章

    4225

    浏览量

    109741
  • 自动驾驶汽车

    关注

    4

    文章

    374

    浏览量

    40701
收藏 人收藏

    评论

    相关推荐

    未来已来,多传感器融合感知自动驾驶破局的关键

    驾驶的关键的是具备人类的感知能力,多传感器融合感知正是自动驾驶破局的关键。昱感微的雷视一体多传感器
    发表于 04-11 10:26

    LabVIEW开发自动驾驶的双目测距系统

    达到950以上,而在其他较弱纹理区域也能维持在900左右。误差率低至5%以下,甚至在特征点明显的标志物上可达到2%左右。 基于LabVIEW的双目测距系统在自动驾驶中具有广泛的应用前景,它可以为车辆提供
    发表于 12-19 18:02

    传感器自动驾驶中的应用

    传感器自动驾驶中的应用
    的头像 发表于 11-27 17:06 339次阅读
    <b class='flag-5'>传感器</b>在<b class='flag-5'>自动驾驶</b>中的应用

    自动驾驶传感器攻击研究

    对于现今的自动驾驶汽车来说,由于传感器的增加和感知网络等软件的存在,使得自动驾驶汽车在信息安全上
    的头像 发表于 11-03 15:00 308次阅读
    <b class='flag-5'>自动驾驶</b><b class='flag-5'>传感器</b>攻击研究

    自动驾驶中的多感知源/单感知源提升方案

    自动驾驶中的视觉感知是车辆在不同交通条件下安全、可持续地行驶的关键部分。然而,在大雨和雾霾等恶劣天气下,视觉感知性能受到多种降级效应的极大影
    发表于 10-23 10:26 181次阅读
    <b class='flag-5'>自动驾驶</b>中的多<b class='flag-5'>感知</b>源/单<b class='flag-5'>感知</b>源提升方案

    安森美与英伟达合作,将Hyperlux传感器引入NVIDIA DRIVE平台,提升自动驾驶汽车的机器视觉性能

    比人眼更好的视觉能力,从而大大提高安全系数。 无需更改曝光设置,从而大大减少视觉盲区,使自动驾驶汽车能几乎在第一时间做出决策。 安森美 (onsemi) 今日宣布,其 Hyperlux
    的头像 发表于 09-21 14:10 313次阅读

    如何实现自动驾驶系统传感器的实时在线标定设计

    自动驾驶车辆上通常会安装多个传感器作为感知输入源,而首先来说它们之间的坐标关系是需要确定的,那么,传感器标定就是自动驾驶的基本需求。
    发表于 09-13 09:13 388次阅读
    如何实现<b class='flag-5'>自动驾驶</b>系统<b class='flag-5'>传感器</b>的实时在线标定设计

    自动驾驶中激光雷达和视觉感知的区别

    视觉自动驾驶方案从产品分析,目前特斯拉的产品还处于L2的阶段,从今年第一季度的财报上看纯视觉自动驾驶方案是这样解释:目前道路交通系统是基于人类视觉
    发表于 08-08 12:49 1015次阅读
    <b class='flag-5'>自动驾驶</b>中激光雷达和<b class='flag-5'>视觉</b><b class='flag-5'>感知</b>的区别

    自动驾驶传感器标定任务有哪些内容 自动驾驶传感器如何标定的呢

    传感器标定是自动驾驶感知&规划任务的基础。第一,各个传感器各自感知的结果需要统一到车体系融合表达,比如Mono3D
    发表于 08-01 12:29 282次阅读
    <b class='flag-5'>自动驾驶</b><b class='flag-5'>传感器</b>标定任务有哪些内容 <b class='flag-5'>自动驾驶</b><b class='flag-5'>传感器</b>如何标定的呢

    浅析自动驾驶视觉感知算法

    环境感知自动驾驶的第一环,是车辆和环境交互的纽带。一个自动驾驶系统整体表现的好坏,很大程度上都取决于感知系统的好坏。目前,环境感知技术有两
    发表于 07-25 10:36 386次阅读
    浅析<b class='flag-5'>自动驾驶</b><b class='flag-5'>视觉</b><b class='flag-5'>感知</b>算法

    一文详解自动驾驶传感器标定

    来源:汽车自动驾驶技术 在自动驾驶系统中,传感器是系统能感知周围环境的决定性因素。在传感器装车后
    的头像 发表于 07-14 10:10 571次阅读

    自动驾驶汽车激光雷达传感器指南

    该系统设计多样性的关键在于不同的传感器类型、冗余和重叠传感器,以提高汽车视觉精度。主要的自动驾驶汽车
    的头像 发表于 06-28 11:24 1098次阅读
    <b class='flag-5'>自动驾驶</b><b class='flag-5'>汽车</b>激光雷达<b class='flag-5'>传感器</b>指南

    自动驾驶,需要多少传感器

    来源:半导体行业观察,谢谢 编辑:感知芯视界 由于传感器的成本从 15 美元到 1,000 美元不等,汽车制造商开始质疑车辆至少在部分时间内需要多少传感器才能实现完全
    的头像 发表于 06-07 09:51 601次阅读

    传感器融合与自动驾驶的关键技术

    为了使车辆能够自动驾驶,必须借助传感器感知周围环境:摄像头、雷达、超声波和LiDAR传感器等。、 大众甲壳虫看上去很美,但它并不能识别周围的环境。对于
    发表于 06-06 10:48 1次下载
    <b class='flag-5'>传感器</b>融合与<b class='flag-5'>自动驾驶</b>的关键技术

    自动驾驶中的传感器

    自动驾驶功能是存在很大帮助的。 摄像头是将光学组件获得的光信号,投射到图像传感器上,完成由光信号到电信号的转换,然后再转换为数字图像信号,最后进行信号的算法处理。基于
    发表于 06-02 16:34 0次下载
    <b class='flag-5'>自动驾驶</b>中的<b class='flag-5'>传感器</b>