0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

关于自动驾驶视觉芯片的DNN之争

高工智能汽车 来源:cg 2019-02-05 10:16 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

近日,日本科技巨头东芝公司宣布开发了一款新的硬件平台,采用了深度神经网络(DNN)技术,用于改进先进的驾驶员辅助系统(ADAS)的图像处理。

该公司将把DNN硬件与传统的图像处理技术结合起来,从2019年9月开始,这款名为Visconti 5图像识别处理器的样品将出货。

东芝的DNN技术使用了一种模拟人类大脑神经网络的算法,官方宣称其识别处理将与人类大脑一样准确,甚至更好。该算法将允许系统识别不同的道路交通状况和各种障碍和道路标记,从各个方向和接近实时处理。

深度学习的实质,是通过构建具有很多隐层的机器学习模型和海量的训练数据,来学习更有用的特征,从而最终提升分类或预测的准确性。

作为机器学习的一个细分领域,其动机在于建立、模拟人脑进行分析学习的神经网络,它模仿人脑的机制来解释数据,例如图像,声音和文本。

与基于传统机器学习的图像识别相比,DNN在采集更多信息的同时,能够对更大范围的目标提供更准确的检测和识别。

特斯拉为例,第一代基于Mobileye的芯片,就是首个使用了DNN技术算法的案例。不过当时,ADAS和半自动驾驶的主要部分是由Mobileye的芯片和算法处理的。

上图所示的过程是特斯拉当时自动驾驶系统工作原理的高级图。其中包括一些算法函数,如运动分割、自我运动、摄像机求解等,但真正有趣的部分是基于DNN的函数,涉及到可行驶区域空间像素标记、全局路径规划、通用对象检测和信号检测。

在Mobileye的基础之上,特斯拉对道路上的车辆进行了三维建模,通过DNN进行不同侧面、前后两侧的训练,直到能够检测到合理的精度,从而构建出相同的三维模型。

不过有消息称,当时特斯拉很多基于DNN的功能都处于休眠状态,直到特斯拉认为它们可以启动为止。从采用第二代计算平台英伟达到如今特斯拉宣布自研芯片即将投产,背后是芯片处理能力、DNN算法之间的协同。

众所周知,自动驾驶汽车对芯片计算能力的要求比传统早期汽车芯片提高了100倍。这包括需要处理来自汽车周围多个摄像头、雷达和激光雷达传感器的输入,分析数据,并使用这些数据做出驾驶决策。

东芝在声明中指出,“这种趋势将增加对更先进和更有能力的系统的需求。”例如,欧盟支持的安全标准,2020年版的欧洲新车评估计划(Euro NCAP)增加了避免交叉路口碰撞的测试。深度学习被用来解决许多传统编程方法无法解决的复杂问题。

马斯克透露特斯拉自研AI芯片的筹备已有两三年时间,通过自行设计芯片,公司能够专注于自己的需求,进而保证算法开发和落地效率。

特斯拉正在研发的名为“Hardware 3”硬件版本的核心就是这颗芯片,将用于Model S、Model X以及Model 3,性能将大幅超越目前其采用的英伟达芯片。

目前,在高等级自动驾驶系统方面,深度学习为图像中的目标识别提供了一种不错的解决方案。但背后需要芯片的支持。

芯片制造商英伟达(Nvidia)去年10月发布了一份有关自动驾驶芯片计算能力的报告。一辆装有10个高分辨率摄像头的汽车每秒产生2 Gigapixels的数据,每秒处理这些数据需要250万亿次操作。

三年前,东芝与日本汽车零部件供应商Denso合作,共同开发了一种名为深度神经网络专利(DNN - IP)的人工智能技术,以帮助开发ADAS技术。

近年来,不断有新的AI视觉芯片公司涌现,就是看到了图像传感器和摄像头将在自动驾驶汽车的发展中发挥关键作用。

东芝目前已经提供了TMPV75和TMPV76系列的图像识别处理器,它们集成了RISC类型的媒体处理引擎(MPEs),以提高图像数据处理性能。该处理器能够实时处理1到4台摄像机的输入图像,并允许最多连接8台摄像机。

ARM等其他芯片制造巨头也在加大进军自动驾驶汽车领域。今年9月,ARM推出了Cortex-A76AE (Automotive Enhanced),这是ARM专门为自动驾驶汽车设计的CPU架构。

对于Cortex-A76AE, ARM对A76平台进行了显著的重新设计,增加了一种名为Split-Lock的功能,从而增加了安全性。简单地说,split - lock允许两个CPU内核以锁定步进(都执行相同的任务)或分割模式(执行不同的任务和应用程序)进行操作。

视觉处理芯片是自动驾驶芯片阵列中重要的一环,由于可以同雷达等传感器形成互补,基于深度学习的视觉识别处理,在道路、交通标志、障碍物、行人等识别中重要性愈发凸显。

而在刚刚开幕的2019年CES上,大陆集团和采埃孚就宣布了基于NVIDIA DRIVE的Level 2+自动驾驶解决方案,将于2020年开始生产。

作为一个L2+级自动驾驶解决方案,集成了高性能NVIDIA Xavier™系统级芯片(SoC)处理器和最新的NVIDIA驱动软件来处理深层神经网络(款)感知以及完成环视相机传感器、座舱内视觉数据的处理。

因此各大厂商也都在争相占领高地,NVIDIA和英特尔旗下的Mobileye目前是市场翘楚,占据了较大的份额,二者在汽车芯片领域,都是新生。其它传统汽车芯片厂商,正在迎头赶上。

不过,自动驾驶视觉处理芯片的赛跑,才刚刚开始,领头羊、传统势力、新入局者各自的节奏都不一样的,但市场一致——我们目力所及的汽车,ADAS还远未普及。

谁能掌握真正的话语权,在于占领足够大的市场,而这些故事,将会在接下来的5-10年完成。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 自动驾驶
    +关注

    关注

    791

    文章

    14673

    浏览量

    176634
  • dnn
    dnn
    +关注

    关注

    0

    文章

    61

    浏览量

    9451

原文标题:自动驾驶视觉芯片的DNN之争 | GGAI视角

文章出处:【微信号:ilove-ev,微信公众号:高工智能汽车】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    没有地图,纯视觉自动驾驶就只能摸瞎吗?

    [首发于智驾最前沿微信公众号]最近在一篇讨论高精度地图的文章中,有位小伙伴提到一个非常有趣的观点“如果人在陌生的目的地,只依托纯视觉(眼睛)去辨别道路,若没有导航,就只能摸瞎”。对于纯视觉自动驾驶
    的头像 发表于 11-27 17:22 1223次阅读
    没有地图,纯<b class='flag-5'>视觉</b><b class='flag-5'>自动驾驶</b>就只能摸瞎吗?

    VLA能解决自动驾驶中的哪些问题?

    [首发于智驾最前沿微信公众号]很多从事自动驾驶的小伙伴应该对VLA这个概念已经非常熟悉了。VLA即“Visual-Language-Action”(视觉—语言—动作)模型,它的核心是将视觉信息
    的头像 发表于 11-25 08:53 186次阅读
    VLA能解决<b class='flag-5'>自动驾驶</b>中的哪些问题?

    不同等级的自动驾驶技术要求上有何不同?

    谈到自动驾驶,不可避免地会涉及到自动驾驶分级,美国汽车工程师学会(SAE)根据自动驾驶系统与人类驾驶员参与驾驶行为程度的不同,将
    的头像 发表于 10-18 10:17 2417次阅读

    自动驾驶汽车是如何准确定位的?

    [首发于智驾最前沿微信公众号]随着自动驾驶技术的快速发展,车辆的精准定位成为安全驾驶与路径规划的核心基础。相比于传统人类驾驶依赖路标和视觉判断,自动
    的头像 发表于 06-28 11:42 887次阅读
    <b class='flag-5'>自动驾驶</b>汽车是如何准确定位的?

    卡车、矿车的自动驾驶和乘用车的自动驾驶在技术要求上有何不同?

    [首发于智驾最前沿微信公众号]自动驾驶技术的发展,让组合辅助驾驶得到大量应用,但现在对于自动驾驶技术的宣传,普遍是在乘用车领域,而对于卡车、矿车的自动驾驶发展,却鲜有提及。其实在卡车、
    的头像 发表于 06-28 11:38 726次阅读
    卡车、矿车的<b class='flag-5'>自动驾驶</b>和乘用车的<b class='flag-5'>自动驾驶</b>在技术要求上有何不同?

    SONY FCB-CR8530,如何重塑自动驾驶视觉感知格局?

    自动驾驶技术快速发展的当下,车辆对周围环境的精准感知是确保安全与高效运行的关键。凯茉锐电子SONY FCB-CR8530摄像机凭借其卓越性能,正逐渐成为自动驾驶领域视觉感知系统的核心组件。
    的头像 发表于 06-25 17:54 473次阅读

    自动驾驶是为了“增强人”,还是为了“替代人”?

    ?在这场看似简单的“增强人”与“替代人”之争中,其实折射出自动驾驶不同发展阶段的技术演进、市场需求与社会伦理等。要深入理解这一话题,我们需要从自动驾驶的技术路径谈起,逐步剖析它在不同阶段的目标与挑战,再回到“增
    的头像 发表于 06-25 11:07 496次阅读

    自动驾驶视觉方案到底有哪些弊端?

    [首发于智驾最前沿微信公众号]随着人工智能与传感器技术的快速发展,自动驾驶汽车逐步走入公众视野。其中,关于感知系统的技术路线选择,始终是大家争论的焦点。尤其是“纯视觉方案”,也就是主要依赖摄像头进行
    的头像 发表于 06-23 09:27 709次阅读
    <b class='flag-5'>自动驾驶</b>纯<b class='flag-5'>视觉</b>方案到底有哪些弊端?

    视觉自动驾驶会有哪些安全问题?

    强调视觉系统的先进性。纯视觉自动驾驶是指在车辆自动驾驶系统中仅依赖摄像头而不使用激光雷达或毫米波雷达等主动传感器。特斯拉率先倡导这一路线,宣称模拟人类
    的头像 发表于 06-16 09:56 589次阅读
    纯<b class='flag-5'>视觉</b>的<b class='flag-5'>自动驾驶</b>会有哪些安全问题?

    视觉自动驾驶如何理解路边画报上的人?

    行业来说,其实是一个值得深思的问题。随着自动驾驶技术下沉到消费市场,基于纯视觉自动驾驶系统就是依托于车载摄像头来识别路况,如果遇到了类似海报上的人,尤其是遇到了与真人大小类似的人物海报,自动
    的头像 发表于 05-19 09:16 525次阅读

    自动驾驶安全基石:ODD

    电子发烧友网综合报道 自动驾驶ODD(Operational Design Domain)即设计运行域,是指自动驾驶系统被设计为安全、有效运行的具体条件范围。它定义了自动驾驶汽车在哪些环境、场景
    的头像 发表于 05-19 03:52 5810次阅读

    自动驾驶大模型中常提的Token是个啥?对自动驾驶有何影响?

    近年来,人工智能技术迅速发展,大规模深度学习模型(即大模型)在自然语言处理、计算机视觉、语音识别以及自动驾驶等多个领域取得了突破性进展。自动驾驶作为未来智能交通的重要方向,其核心技术之一便是对海量
    的头像 发表于 03-28 09:16 989次阅读

    NVIDIA Halos自动驾驶汽车安全系统发布

    NVIDIA 整合了从云端到车端的安全自动驾驶开发技术套件,涵盖车辆架构到 AI 模型,包括芯片、软件、工具和服务。 物理 AI 正在为自动驾驶和机器人开发技术的交叉领域释放新的可能性,尤其是加速了
    的头像 发表于 03-25 14:51 970次阅读

    2024年自动驾驶行业热点技术盘点

    感知轻地图以及纯视觉等。这些技术的出现,也代表着自动驾驶正从概念走向现实,今天就给大家来盘点2024年自动驾驶行业出现的那些技术热点!   城市NOA:迈向精细化驾驶的关键路径 城市N
    的头像 发表于 01-14 10:48 1158次阅读