0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

AI处理器为自动驾驶汽车提供增强图像信号处理

星星科技指导员 来源:嵌入式计算设计 作者:Saumitra Jagdale 2022-10-19 11:57 次阅读

尽管人工智能处理器取得了进步,但系统的图像信号处理能力还不足以平衡自动驾驶汽车的需求。ISP硬件技术的持续改进可以弥合行业的这一差距。

安巴雷拉最近推出了基于人工智能的图像信号处理器(AISP)。更多地谈论ISP(图像信号处理器),它用于对信号输出执行后处理,以执行各种特征提取算法,然后进行分类。

人工智能在增强图像信号处理方面发挥着重要作用,图像信号处理是通过将ISP硬件集成到其片上系统上来完成的。它利用不同类型的神经网络来解决各种图像处理任务,从简单的二元分类到实例分割。

Ambarella 的低功耗片上系统 (SoC) 具有多种优势,例如在强大的深度神经网络的帮助下实现高质量视频压缩和高级图像处理的高效机制。因此,它有助于智能摄像机从高分辨率视频流中提取有价值的数据。

ISP的基本方法非常适合安全和汽车行业,在这些行业中,低光区域需要全彩色视觉。由于传统相机系统在低光照环境中捕获嘈杂的视频,在高对比度情况下捕获暗影或高光位过曝,这两种情况都不理想,并导致AI应用丢失不利的细节。与传统相机相比,AISP可以在非常低的勒克斯水平和最小的噪声下提供彩色成像。它还通过提供新级别的高动态范围(HDR)来提供更自然的色彩再现并减少外部照明,与传统ISP相比,这是100倍的高级。

AISP 的一些主要功能包括:

支持主流传感器

可在不同的照明条件(包括白天、夜晚和 HDR 场景)之间实现无缝切换

与 CVflow 引擎上的其他 AI 算法并行运行

支持高级操作模式以适应特定于应用程序的用例

自动驾驶汽车的AISP应用

AISP最初是在CV2 SoC上演示的。这些更新将在安巴雷拉的整个CVflow SoC系列产品中以高达4K的视频分辨率提供。在最近的更新中,推出了CV3 AI域控制器SoC,该SoC适用于具有单摄像头和多摄像头ADAS的车辆的自动驾驶,驾驶员监控系统可实现精确准确的生态系统。舱内解决方案以及具有盲点检测功能的单通道和多通道电子后视镜将进一步增强功能。

随着所有汽车制造商都专注于制造自动驾驶汽车,对基于摄像头的SoC和计算机视觉技术的需求急剧增加。因此,Ambarella可能适合这项工作,因为除了作为一家人工智能芯片公司之外,它还“在基于摄像头的SoC和增强的计算机视觉功能方面拥有深厚的技术知识”。

这项技术的应用视角是在典型的安全摄像头中,试图在夜间识别车牌。在传统相机上,拍摄的图像会很嘈杂,车牌上的文本是不可读的,即使是最好的AI算法也是如此。使用黑白视频,有关汽车颜色的所有信息都将丢失。通过使用Ambarella的AISP技术,我们甚至可以在AI处理之前从源头恢复颜色,因此可以清楚地读取车牌并识别汽车的颜色。这种AISP技术通过使用低成本传感器降低了构建高质量相机的总系统成本,因此非常适合自动驾驶汽车。

审核编辑:郭婷

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 处理器
    +关注

    关注

    68

    文章

    18275

    浏览量

    222160
  • 人工智能
    +关注

    关注

    1776

    文章

    43845

    浏览量

    230601
收藏 人收藏

    评论

    相关推荐

    未来已来,多传感融合感知是自动驾驶破局的关键

    巨大的进展;自动驾驶开始摒弃手动编码规则和机器学习模型的方法,转向全面采用端到端的神经网络AI系统,它能模仿学习人类司机的驾驶,遇到场景直接输入传感数据,再直接输出转向、制动和加速
    发表于 04-11 10:26

    视频处理器的作用 视频处理器的功能有哪些

    视频处理器是一种专门用来处理视频信号的器件或组件。它的主要作用是对输入的视频信号进行处理和优化,从而提高画质、
    的头像 发表于 02-01 17:23 939次阅读

    LabVIEW开发自动驾驶的双目测距系统

    达到950以上,而在其他较弱纹理区域也能维持在900左右。误差率低至5%以下,甚至在特征点明显的标志物上可达到2%左右。 基于LabVIEW的双目测距系统在自动驾驶中具有广泛的应用前景,它可以为车辆提供
    发表于 12-19 18:02

    机器视觉之图像增强图像处理

    一、图像处理技术概述1.定义对原始获取图像进行一系列的运算处理,称为图像处理
    的头像 发表于 10-26 08:07 459次阅读
    机器视觉之<b class='flag-5'>图像</b><b class='flag-5'>增强</b>和<b class='flag-5'>图像</b><b class='flag-5'>处理</b>

    机器视觉之图像增强图像处理

    对原始获取图像进行一系列的运算处理,称为图像处理图像处理是机器视觉技术的方法基础,包括
    发表于 10-23 10:43 229次阅读
    机器视觉之<b class='flag-5'>图像</b><b class='flag-5'>增强</b>和<b class='flag-5'>图像</b><b class='flag-5'>处理</b>

    农机自动驾驶显示系统组成部分以及配置

    不开农机自动驾驶系统这个概念的。 农机自动驾驶主要是通过软硬件同步协调一致达到自动驾驶的目的,硬件部分包括:电动方向盘、卫星信号接收、角度
    发表于 10-17 17:52

    自动驾驶传感器前处理介绍

    摄像头前处理流程 •自动驾驶HDR:为适应自动驾驶所处的高动态范围环境,先进的图像传感器采用同时多曝光和/或拆分像素设计。组合不同曝光可将固有动态范围(80-100dB)扩展至目标动态
    的头像 发表于 10-04 10:42 291次阅读

    【KV260视觉入门套件试用体验】八、VITis AI自动驾驶多任务执行MultiTask V3

    是一种模型,旨在同时执行自动驾驶场景中的不同任务,同时实现优异的性能和效率。这些任务包括对象检测、分割、车道检测、可行驶区域分割和深度估算,这些都是自动驾驶感知模块的重要组成部分。 三、代码实现
    发表于 09-26 16:43

    银牛视觉AI处理器采用芯原创新的ISP IP

    芯原股份今日宣布3D视觉与人工智能(AI)解决方案提供商银牛微电子(简称“银牛”)在其量产的NU4100视觉AI处理器中采用了芯原低延迟、低功耗的双通道
    的头像 发表于 09-21 11:12 542次阅读

    ARM马里图像信号处理器(ISP)对比表

    马里的互联网服务供应商家族商业、工业和消费设备带来了下一代图像处理能力。 这些解决方案各种物联网、汽车和嵌入式使用案例
    发表于 08-25 07:07

    LiDAR如何为自动驾驶汽车提供关键距离传感

    如果您正在设计自动驾驶汽车应用,您就会知道 LiDAR(光检测和测距)的重要性。LiDAR 是执行自动驾驶汽车距离传感的关键光学技术,是高级驾驶
    的头像 发表于 06-28 10:47 658次阅读
    LiDAR如何为<b class='flag-5'>自动驾驶</b><b class='flag-5'>汽车</b><b class='flag-5'>提供</b>关键距离传感

    NVIDIA 自动驾驶实验室:如何通过 AI 分割模型增强自动驾驶安全性

    编辑注:NVIDIA 自动驾驶实验室系列视频,将以工程技术为重点的视角关注实现自动驾驶汽车的各个挑战以及 NVIDIA DRIVE AV 软件团队如何应对这些问题。 对于自动驾驶
    的头像 发表于 06-16 11:45 456次阅读
    NVIDIA <b class='flag-5'>自动驾驶</b>实验室:如何通过 <b class='flag-5'>AI</b> 分割模型<b class='flag-5'>增强</b><b class='flag-5'>自动驾驶</b>安全性

    自动驾驶中的雷达信号处理

    和其他发动机控制单元传感器来获得。 音频、图像和阵列处理技术可以应用于获取的信号,以提取信息,用于自动控制车辆动态或提醒司机车辆周围即将发生的危 险。虽然有多种技术应用于
    发表于 06-07 14:28 1次下载
    <b class='flag-5'>自动驾驶</b>中的雷达<b class='flag-5'>信号</b><b class='flag-5'>处理</b>

    自动驾驶技术概述

    自动驾驶汽车,通过技术实现车辆自动驾驶,目的是减少驾驶疲劳、增强驾驶安全。
    发表于 06-01 14:50 1次下载
    <b class='flag-5'>自动驾驶</b>技术概述

    探讨自动驾驶系统感知系统

    车辆自身信息与周围环境信息,经过处理器对采集到的数据信息进行分析计算和处理,从而做出决策控制执行系统实现车辆加减速和转向等动作。SAE将自动驾驶分为L0-L5共6个等级,L0为没有加入自动驾驶
    的头像 发表于 05-17 11:10 923次阅读
    探讨<b class='flag-5'>自动驾驶</b>系统感知系统