0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

关于自动驾驶视觉芯片的DNN之争

高工智能汽车 来源:cg 2019-02-05 10:16 次阅读

近日,日本科技巨头东芝公司宣布开发了一款新的硬件平台,采用了深度神经网络(DNN)技术,用于改进先进的驾驶员辅助系统(ADAS)的图像处理。

该公司将把DNN硬件与传统的图像处理技术结合起来,从2019年9月开始,这款名为Visconti 5图像识别处理器的样品将出货。

东芝的DNN技术使用了一种模拟人类大脑神经网络的算法,官方宣称其识别处理将与人类大脑一样准确,甚至更好。该算法将允许系统识别不同的道路交通状况和各种障碍和道路标记,从各个方向和接近实时处理。

深度学习的实质,是通过构建具有很多隐层的机器学习模型和海量的训练数据,来学习更有用的特征,从而最终提升分类或预测的准确性。

作为机器学习的一个细分领域,其动机在于建立、模拟人脑进行分析学习的神经网络,它模仿人脑的机制来解释数据,例如图像,声音和文本。

与基于传统机器学习的图像识别相比,DNN在采集更多信息的同时,能够对更大范围的目标提供更准确的检测和识别。

特斯拉为例,第一代基于Mobileye的芯片,就是首个使用了DNN技术算法的案例。不过当时,ADAS和半自动驾驶的主要部分是由Mobileye的芯片和算法处理的。

上图所示的过程是特斯拉当时自动驾驶系统工作原理的高级图。其中包括一些算法函数,如运动分割、自我运动、摄像机求解等,但真正有趣的部分是基于DNN的函数,涉及到可行驶区域空间像素标记、全局路径规划、通用对象检测和信号检测。

在Mobileye的基础之上,特斯拉对道路上的车辆进行了三维建模,通过DNN进行不同侧面、前后两侧的训练,直到能够检测到合理的精度,从而构建出相同的三维模型。

不过有消息称,当时特斯拉很多基于DNN的功能都处于休眠状态,直到特斯拉认为它们可以启动为止。从采用第二代计算平台英伟达到如今特斯拉宣布自研芯片即将投产,背后是芯片处理能力、DNN算法之间的协同。

众所周知,自动驾驶汽车对芯片计算能力的要求比传统早期汽车芯片提高了100倍。这包括需要处理来自汽车周围多个摄像头、雷达和激光雷达传感器的输入,分析数据,并使用这些数据做出驾驶决策。

东芝在声明中指出,“这种趋势将增加对更先进和更有能力的系统的需求。”例如,欧盟支持的安全标准,2020年版的欧洲新车评估计划(Euro NCAP)增加了避免交叉路口碰撞的测试。深度学习被用来解决许多传统编程方法无法解决的复杂问题。

马斯克透露特斯拉自研AI芯片的筹备已有两三年时间,通过自行设计芯片,公司能够专注于自己的需求,进而保证算法开发和落地效率。

特斯拉正在研发的名为“Hardware 3”硬件版本的核心就是这颗芯片,将用于Model S、Model X以及Model 3,性能将大幅超越目前其采用的英伟达芯片。

目前,在高等级自动驾驶系统方面,深度学习为图像中的目标识别提供了一种不错的解决方案。但背后需要芯片的支持。

芯片制造商英伟达(Nvidia)去年10月发布了一份有关自动驾驶芯片计算能力的报告。一辆装有10个高分辨率摄像头的汽车每秒产生2 Gigapixels的数据,每秒处理这些数据需要250万亿次操作。

三年前,东芝与日本汽车零部件供应商Denso合作,共同开发了一种名为深度神经网络专利(DNN - IP)的人工智能技术,以帮助开发ADAS技术。

近年来,不断有新的AI视觉芯片公司涌现,就是看到了图像传感器和摄像头将在自动驾驶汽车的发展中发挥关键作用。

东芝目前已经提供了TMPV75和TMPV76系列的图像识别处理器,它们集成了RISC类型的媒体处理引擎(MPEs),以提高图像数据处理性能。该处理器能够实时处理1到4台摄像机的输入图像,并允许最多连接8台摄像机。

ARM等其他芯片制造巨头也在加大进军自动驾驶汽车领域。今年9月,ARM推出了Cortex-A76AE (Automotive Enhanced),这是ARM专门为自动驾驶汽车设计的CPU架构。

对于Cortex-A76AE, ARM对A76平台进行了显著的重新设计,增加了一种名为Split-Lock的功能,从而增加了安全性。简单地说,split - lock允许两个CPU内核以锁定步进(都执行相同的任务)或分割模式(执行不同的任务和应用程序)进行操作。

视觉处理芯片是自动驾驶芯片阵列中重要的一环,由于可以同雷达等传感器形成互补,基于深度学习的视觉识别处理,在道路、交通标志、障碍物、行人等识别中重要性愈发凸显。

而在刚刚开幕的2019年CES上,大陆集团和采埃孚就宣布了基于NVIDIA DRIVE的Level 2+自动驾驶解决方案,将于2020年开始生产。

作为一个L2+级自动驾驶解决方案,集成了高性能NVIDIA Xavier™系统级芯片(SoC)处理器和最新的NVIDIA驱动软件来处理深层神经网络(款)感知以及完成环视相机传感器、座舱内视觉数据的处理。

因此各大厂商也都在争相占领高地,NVIDIA和英特尔旗下的Mobileye目前是市场翘楚,占据了较大的份额,二者在汽车芯片领域,都是新生。其它传统汽车芯片厂商,正在迎头赶上。

不过,自动驾驶视觉处理芯片的赛跑,才刚刚开始,领头羊、传统势力、新入局者各自的节奏都不一样的,但市场一致——我们目力所及的汽车,ADAS还远未普及。

谁能掌握真正的话语权,在于占领足够大的市场,而这些故事,将会在接下来的5-10年完成。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 自动驾驶
    +关注

    关注

    773

    文章

    13049

    浏览量

    163232
  • dnn
    dnn
    +关注

    关注

    0

    文章

    56

    浏览量

    8952

原文标题:自动驾驶视觉芯片的DNN之争 | GGAI视角

文章出处:【微信号:ilove-ev,微信公众号:高工智能汽车】欢迎添加关注!文章转载请注明出处。

收藏 人收藏

    评论

    相关推荐

    自动驾驶激光雷达及非硅15W高导热绝缘氮化硼材料介绍

    来源|十一号组织历史不成熟的经验表明:技术路线的收敛,往往是新技术大规模落地的标志。按照这种经验审视自动驾驶技术,会遗憾地得出自动驾驶落地还遥遥无期的悲观结论,毕竟自动驾驶一是不缺自信、二不缺技术
    的头像 发表于 04-24 10:00 138次阅读
    <b class='flag-5'>自动驾驶</b>激光雷达及非硅15W高导热绝缘氮化硼材料介绍

    未来已来,多传感器融合感知是自动驾驶破局的关键

    驾驶的关键的是具备人类的感知能力,多传感器融合感知正是自动驾驶破局的关键。昱感微的雷视一体多传感器融合方案就好像一双比人眼更敏锐的眼睛,可以为自动驾驶系统提供更丰富更精准的视觉语言——
    发表于 04-11 10:26

    高通自动驾驶靠软件开发革新力压英伟达自动驾驶芯片

    抛开价格不谈,英伟达自动驾驶芯片毫无疑问是最强的,设计范围在2019年底确定的Orin至今仍是量产最强的自动驾驶芯片,但除了奔驰外的欧美大厂更倾向于选择高通平台
    的头像 发表于 02-20 13:50 874次阅读
    高通<b class='flag-5'>自动驾驶</b>靠软件开发革新力压英伟达<b class='flag-5'>自动驾驶</b><b class='flag-5'>芯片</b>

    LabVIEW开发自动驾驶的双目测距系统

    LabVIEW开发自动驾驶的双目测距系统 随着车辆驾驶技术的不断发展,自动驾驶技术正日益成为现实。从L2级别的辅助驾驶技术到L3级别的受条件约束的
    发表于 12-19 18:02

    自动驾驶“十问十答”

    说起自动驾驶, 大家现在已经不陌生, 但是关于自动驾驶你又了解多少呢? 今天小编总结了关于自动驾驶的 “十问十答” , 带你了解更多
    的头像 发表于 11-29 07:40 297次阅读
    <b class='flag-5'>自动驾驶</b>“十问十答”

    【KV260视觉入门套件试用体验】八、VITis AI自动驾驶多任务执行MultiTask V3

    是一种模型,旨在同时执行自动驾驶场景中的不同任务,同时实现优异的性能和效率。这些任务包括对象检测、分割、车道检测、可行驶区域分割和深度估算,这些都是自动驾驶感知模块的重要组成部分。 三、代码实现
    发表于 09-26 16:43

    自动驾驶中激光雷达和视觉感知的区别

    视觉自动驾驶方案从产品分析,目前特斯拉的产品还处于L2的阶段,从今年第一季度的财报上看纯视觉自动驾驶方案是这样解释:目前道路交通系统是基于人类视觉
    发表于 08-08 12:49 1014次阅读
    <b class='flag-5'>自动驾驶</b>中激光雷达和<b class='flag-5'>视觉</b>感知的区别

    自动驾驶芯片的低功耗设计

    的前装标配。当前我国量产乘用车的自动驾驶级别也在从L2向L3+过渡,甚至很多科技公司已经开始研发L4级别的自动驾驶芯片及其解决方案。随着市场对汽车自动驾驶等级需求的提高,汽车搭载的
    发表于 08-04 10:09 395次阅读
    <b class='flag-5'>自动驾驶</b><b class='flag-5'>芯片</b>的低功耗设计

    浅析自动驾驶视觉感知算法

    环境感知是自动驾驶的第一环,是车辆和环境交互的纽带。一个自动驾驶系统整体表现的好坏,很大程度上都取决于感知系统的好坏。目前,环境感知技术有两大主流技术路线
    发表于 07-25 10:36 386次阅读
    浅析<b class='flag-5'>自动驾驶</b><b class='flag-5'>视觉</b>感知算法

    关于自动驾驶的等级划分

    自动驾驶汽车减少事故和拥堵,作为安全舒适的移动手段熟悉我们的生活。好像马上就能到达那个时代了。现在,许多汽车已经开始安装 各种技术来实现其自动驾驶过程。与交通情况协调发展的自动驾驶技术。
    发表于 06-06 14:51 0次下载
    <b class='flag-5'>关于</b><b class='flag-5'>自动驾驶</b>的等级划分

    自动驾驶技术环境感知篇:基于视觉相关技术介绍

    在前面的文章介绍了环境感知中不同雷达的作用,一个标准的自动驾驶解决方案需要雷达与视觉技术的配合使用。视觉技术其实是仿生理学的解决方案,因为现实世界中司机驾驶车辆就是依靠
    发表于 06-06 11:16 1次下载
    <b class='flag-5'>自动驾驶</b>技术环境感知篇:基于<b class='flag-5'>视觉</b>相关技术介绍

    自动驾驶架构

    传感器测量的数据。不同处理器、 视觉芯片的数据汇总到自动驾驶运算平台进行大规模运算,最后给执行层发出指令。执行层则对应电子刹车、电子助力转向、 电子车身稳定系统等。
    发表于 06-01 16:09 0次下载
    <b class='flag-5'>自动驾驶</b>架构

    自动驾驶技术概述

    自动驾驶汽车,通过技术实现车辆自动驾驶,目的是减少驾驶疲劳、增强驾驶安全。 自动驾驶汽车按自动
    发表于 06-01 14:50 1次下载
    <b class='flag-5'>自动驾驶</b>技术概述

    00021 阿克曼ROS自动驾驶小车,让自动驾驶触手可及! #自动驾驶 #机器人 #编程

    自动驾驶
    学习电子知识
    发布于 :2023年05月22日 19:42:03