0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

自动驾驶汽车的视觉传感器摄像头介绍

电子工程师 来源:四维图新NavInfo 作者:四维图新NavInfo 2021-03-05 09:30 次阅读

对于自动驾驶汽车来说,传感器有很多种,而视觉传感器“摄像头”就属于传感器中价格相对便宜且功能很重要的一种,被称为“智能汽车之眼”。今天小编先带大家对摄像头作一个基础介绍。

01摄像头定义

摄像头(CAMERA或WEBCAM)又称为电脑相机、电脑眼、电子眼等,是一种视频输入设备,它就像我们人的眼睛一样,可以将看到的真实环境记录,以数据形式存储。

说起摄像头大家其实并不陌生,因为我们生活中经常在使用,比如手机数码相机、电脑上的摄像头,汽车上的摄像头,还有马路上交通违章摄像头,小区、银行和商场监控摄像头等等。

02摄像头原理

摄像头一般具有视频摄像和静态图像捕捉等基本功能,它借由镜头采集图像(光信号)后,由摄像头内的感光组件电路及控制组件对图像进行处理并转换成电脑所能识别的数字信号,然后借由并行端口USB连接输入到电脑后由软件再进行图像还原。

摄像头原理图:机械工业出版社《自动驾驶改变未来》

03摄像头组件

摄像头的主要组件有:

3.1镜头组

镜头组(lens),由光学镜片、滤光片和保护膜等组成。

透镜分两类,有塑胶透镜(Plastic)及玻璃透镜(Glass)。

3.2图像传感器(ImageSensor),可以分为两类:CCD与CMOS传感器。

CCD(ChargeCoupled Device):电荷耦合器件,可直接将光学信号转换为模拟电流信号,电流信号经过放大和模数转换,实现图像的获取、存储、传输、处理和复现。一般是用于摄影摄像方面的高端技术元件。

CMOS(ComplementaryMetal-OxideSemiconductor):中文学名为互补金属氧化物半导体,它本是计算机系统内一种重要的芯片,保存了系统引导最基本的资料。CMOS的制造技术和一般计算机芯片没什么差别,主要是利用硅和锗这两种元素所做成的半导体,使其在CMOS上共存着带N(带-电)和P(带+电)级的半导体,这两个互补效应所产生的电流即可被处理芯片记录和解读成影像。后来发现CMOS经过加工也可以作为数码摄影中的图像传感器。

CCD与CMOS传感器,两者都是利用感光二极管(photodiode)进行光电转换,将图像转换为数字数据,而其主要差异是数字数据传送的方式不同。CCD传感器中每一行中每一个像素的电荷数据都会依次传送到下一个像素中,由最底端部分输出,再经由传感器边缘的放大器进行放大输出;而在CMOS传感器中,每个像素都会邻接一个放大器及A/D转换电路,用类似内存电路的方式将数据输出。

简单讲CMOS的信号是以“点”为单位的电荷信号,而CCD是以“行”为单位的电流信号。

3.3 DSP芯片(数字信号处理器

DSP芯片,也称数字信号处理器,是一种具有特殊结构的微处理器。DSP的功能主要是通过一系列复杂的数学算法运算,对由CMOS传感器来的数字图像信号进行优化处理,并把处理后的信号通过USB等接口传到PC设备,是摄像头的核心设备。

04摄像头参数

4.1像素(Resolution)是由一个数字序列表示图像中的一个最小单位。如下面四维图新logo就是由一个个小方格子像素组成的。

4.2分辨率

分辨率是用于度量位图图像内数据量多少的一个参数,表示成dpi(DotsPerInch,每英寸点或像素数)。它是衡量摄像头的一个重要指标之一,通常来说摄像头的最高分辨率越高(即像素点数量),拍摄出来的图像品质就越好。

方便了解,我们直观对比一下最高分辨率对图像的影响。

30万像素CMOS的分辨率为640×480=307200像素;

100万像素(720p)的分辨率为1280x720=921600像素;

200万像素(1080p)的分辨率为1920x1080=2073600像素;

800万像素是1080p的四倍面积,被称为4K;

1600万像素是1080p的8倍面积,被称为8K。

仍以上面四维图新logo为例,像素低的如左图,像素高的如右图,我们可以发现最高分辨率越高,像素数越多,图像越清晰。

4.3色域

色域(ColorGamut或ColorSpace)是对一种颜色进行编码的方法,也指一个技术系统能够产生的颜色的总和。最常用的两种图像格式是RGB24和I420。

RGB24:RGB即代表红、绿、蓝三个通道的颜色变化以及它们相互之间的叠加来得到各式各样的颜色,这个标准几乎包括了人类视力所能感知的所有颜色,是目前运用最广的颜色系统之一。RGB24图像每个像素用8bit(比特位)表示,RGB24一帧的大小size=width×heigth×3 Byte(字节)。最多可表现256级浓淡,从而可以再现256*256*256种颜色。

I420:是YUV格式之一,YUV模型是根据一个亮度(Y分量)和两个色度(UV分量)来定义颜色空间。I420(即YUV标准格式4:2:0)的数据量是 size=width×heigth×1.5 Byte(字节)。

其它格式还有:RGB565,RGB444,YUV42等。

4.4自动白平衡调整

定义:要求在不同色温环境下,照白色的物体,屏幕中的图像应也是白色的。色温表示光谱成分,光的颜色。色温低表示长波光成分多。当色温改变时,光源中三基色(红、绿、蓝)的比例会发生变化,需要调节三基色的比例来达到彩色的平衡。

4.5彩色深度

反映对色彩的识别能力和成像的色彩表现能力,实际就是A/D转换器的量化精度,是指将信号分成多少个等级。常用色彩位数(bit)表示。彩色深度越高,获得的影像色彩就越艳丽动人。市场上的摄像头均已达到24位,有的甚至是32位。

4.6图像噪音

指的是图像中的杂点干扰。表现为图像中有固定的彩色杂点。如下图中红色方框中的黄色像素点即为图像噪音。

图像噪音样式

4.7视角

镜头中心点到成像平面对角线两端所形成的夹角就是镜头视角,对于相同的成像面积,镜头焦距越短,其视角就越大。这个与人的眼睛成像是相同的,我们可以试着将手掌(如下图黄色方框)放于眼前正前方10厘米处和30厘米处,10厘米时的视角(蓝色线夹角)大于30厘米的视角(橘黄色线夹角)。

相同成像面积时的镜头视角图

4.8帧率

帧率FPS(FramesPer Second)是指画面每秒传输帧数,通俗来讲就是指动画或视频的画面数,即每秒拍摄了多少张照片。比如我们目前看到的大部分电影都是采用24fps(或者23.98fps)拍摄和放映,也就是每秒拍摄/放映24张照片。

五、摄像头在自动驾驶中的应用

上述说了这么多摄像头的原理和基础参数,那么摄像头是如何帮助自动驾驶工作的呢?

简单来说,摄像头就是扮演了“车的眼睛”。

我们以前也提过,自动驾驶其实就是让车拥有人脑的工作,而驾驶过程中,我们人会根据看到的景象进行感知,同时形成认知并传递给大脑,大脑会根据感知到的结果进行分析和决策,从而让手和脚去操作。

听起来挺简单的原理,其实是个十分复杂的过程,举个例子,比如说我们打开搜索网站搜索“桌子”,会发现有很多种的样子。

我们会发现,不管桌子是方是圆,是黑是白,那么我们人类强大的大脑会迅速地知道它是一张桌子。

但如果换作计算机,我们就需要通过摄像头作为输入,通过AI算法让汽车知道这是什么。

结语:

ADAS层面,其实我们目前汽车的一些功能如行人探测与防撞预警、车道保持和偏离预警等功能都有摄像头的参与,而目前针对L3及以上自动驾驶的功能,摄像头更是重要的传感器之一。

原文标题:新·知丨自动驾驶传感器那点事之 摄像头基础介绍

文章出处:【微信公众号:四维图新NavInfo】欢迎添加关注!文章转载请注明出处。

责任编辑:haq

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2515

    文章

    47696

    浏览量

    738690
  • 摄像头
    +关注

    关注

    59

    文章

    4558

    浏览量

    92668
  • 自动驾驶
    +关注

    关注

    773

    文章

    12894

    浏览量

    162930

原文标题:新·知丨自动驾驶传感器那点事之 摄像头基础介绍

文章出处:【微信号:realnavinfo,微信公众号:四维图新NavInfo】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    CMOS图像传感器自动驾驶汽车提供视觉感知

    和其他道路使用者的安全。本文将探讨在选择图像传感器时需要注意的关键特性,以便为自动驾驶汽车提供所需的出色功能组合。 图像传感器负责将光子转化为电子,然后存储为数字图像数据。如今,图像
    的头像 发表于 02-27 09:28 163次阅读

    传感器自动驾驶中的应用

    传感器自动驾驶中的应用
    的头像 发表于 11-27 17:06 293次阅读
    <b class='flag-5'>传感器</b>在<b class='flag-5'>自动驾驶</b>中的应用

    自动驾驶传感器攻击研究

    对于现今的自动驾驶汽车来说,由于传感器的增加和感知网络等软件的存在,使得自动驾驶汽车在信息安全上相较于其它
    的头像 发表于 11-03 15:00 289次阅读
    <b class='flag-5'>自动驾驶</b><b class='flag-5'>传感器</b>攻击研究

    自动驾驶传感器前处理介绍

    摄像头前处理流程 •自动驾驶HDR:为适应自动驾驶所处的高动态范围环境,先进的图像传感器采用同时多曝光和/或拆分像素设计。组合不同曝光可将固有动态范围(80-100dB)扩展至目标动态
    的头像 发表于 10-04 10:42 268次阅读

    车载摄像头的工作原理、分类及仿真验证

    目前,车载摄像头传感器是主流的自动驾驶系统传感器之一,视觉感知的方案也是大多数汽车厂商的感知融合
    的头像 发表于 08-24 11:14 3023次阅读
    车载<b class='flag-5'>摄像头</b>的工作原理、分类及仿真验证

    什么是车载摄像头?车载摄像头与雷达技术对比有哪些优势

    自动驾驶车辆中,感知系统主要由摄像头、毫米波雷达、激光雷达感器构成。摄像头作为主要的环境感知传感器起着非常重要的作用, 可以实现 360° 全面
    发表于 07-04 11:42 2864次阅读
    什么是车载<b class='flag-5'>摄像头</b>?车载<b class='flag-5'>摄像头</b>与雷达技术对比有哪些优势

    自动驾驶汽车激光雷达传感器指南

    该系统设计多样性的关键在于不同的传感器类型、冗余和重叠传感器,以提高汽车视觉精度。主要的自动驾驶汽车
    的头像 发表于 06-28 11:24 959次阅读
    <b class='flag-5'>自动驾驶</b><b class='flag-5'>汽车</b>激光雷达<b class='flag-5'>传感器</b>指南

    车载摄像头的结构分析

    车载摄像头自动驾驶之眼  车载摄像头被誉为“自动驾驶之眼”,是ADAS系统、汽车自动驾驶领域的
    的头像 发表于 06-14 15:23 2002次阅读
    车载<b class='flag-5'>摄像头</b>的结构分析

    车辆完全自动驾驶需要多少传感器

    特斯拉正在走一条不同的道路。2021年,特斯拉宣布,Model 3和Model Y将实施特斯拉视觉摄像头自动驾驶技术战略,2022年将实施于Model S和Model X。该公司还决定拆除超声波
    发表于 06-12 15:56 137次阅读
    车辆完全<b class='flag-5'>自动驾驶</b>需要多少<b class='flag-5'>传感器</b>

    自动驾驶技术环境感知篇:基于视觉相关技术介绍

    。 在本文会介绍下车载摄像头的基础知识以及视觉算法的基本原理,另外还会对自动驾驶视觉技术的几大经典场景做一个
    发表于 06-06 11:16 0次下载
    <b class='flag-5'>自动驾驶</b>技术环境感知篇:基于<b class='flag-5'>视觉</b>相关技术<b class='flag-5'>介绍</b>

    传感器融合与自动驾驶的关键技术

    为了使车辆能够自动驾驶,必须借助传感器来感知周围环境:摄像头、雷达、超声波和LiDAR传感器等。、 大众甲壳虫看上去很美,但它并不能识别周围的环境。对于
    发表于 06-06 10:48 0次下载
    <b class='flag-5'>传感器</b>融合与<b class='flag-5'>自动驾驶</b>的关键技术

    自动驾驶中的传感器

    对比Radar、Lidar、Sonar来讲,Camera最接近人眼识别原理,在自动驾驶传感器中担任重要角色。摄像头可以拥有较广的视场角、较大的分辨率,还可以提供颜色和纹理等信息。这些信 息对于实现
    发表于 06-02 16:34 0次下载
    <b class='flag-5'>自动驾驶</b>中的<b class='flag-5'>传感器</b>

    自动驾驶常用传感器介绍

    摄像头自动驾驶核心传感器,是实现自动驾驶众多规划、控制的基础,相比于激光雷达和毫米波雷达,最大的优势在于可以识别车辆周边的环境信息和纹理信息,能够“看到”目标的类型、信号灯 的颜色
    发表于 06-01 11:40 0次下载
    <b class='flag-5'>自动驾驶</b>常用<b class='flag-5'>传感器</b><b class='flag-5'>介绍</b>

    自动驾驶常见传感器的应用解析

    智能传感器:智能传感器是无人驾驶车辆的“眼睛”。汽车正在向一台安全联网的自动驾驶机器人快速演进,进行环境感知、规划决策,最终实现安全抵达目的
    发表于 04-18 12:55 1119次阅读

    松下宣布了最新的图像传感器技术,将用于汽车自动驾驶车载摄像头

    日本松下于3月29日宣布,已开发出新的有机CMOS图像传感器技术,无论光源类型如何,都能实现准确的色彩再现。未来将广泛应用在各个领域,包括用于自动驾驶的车载摄像头、商业广播摄像头、安全
    的头像 发表于 04-07 06:58 373次阅读