0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Nullmax打造一套强大的平台化BEV-AI整体技术架构

Nullmax纽劢 来源:Nullmax纽劢 2023-05-26 15:54 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

在高阶智能驾驶不断上车的今天,行泊一体已经成为了汽车行业的量产共识,如何在实现极致性能体验的同时,进一步降低硬件成本,并且大幅提升开发部署的效率,是行泊一体加速落地的关键。

传统的行泊一体方案,行泊功能一般来自两套系统,芯片、传感器各为阵营,不仅性能受限,也带来了多余的硬件成本。面向当下和未来,行泊一体显然需要更加「现代化」的深度融合:传感器深度复用,芯片资源完全共享,并通过强大的软件算法实现功能的整合升级。而这,也对底层的技术架构提出了更高要求。

这套架构既要能够支持行车、泊车的各种传感器,基于单颗SOC为主的域控制器打造功能完整的行泊一体应用,还要提供丰富多样的算法选择,满足不同算力和算子情况下的各种行车、泊车任务要求,最好还能实现充分的技术共用和模块复用,让所有方案的开发、部署和升级变得高效便捷。

为此,Nullmax打造了这样一套强大的平台化BEV-AI整体技术架构,为「现代化」的全场景行泊一体应用提供至关重要的技术支撑,推动高阶智驾加速走向普及。

自动驾驶「新基建」

在智能驾驶时代,汽车最明显的标志是硬件的变化,更高算力的芯片、更多数量的传感器,通常意味着更大的智能化潜力。这些硬件如同自动驾驶功能的基础设施,而用来驱动这些硬件高效协同并提供丰富功能的BEV-AI技术架构,就是自动驾驶的「新基建」工程。

对于自动驾驶来说,感知是整个系统的最上游,当传感器的类型和数量显著增加时,如何融合所有传感器持续输入的多模态、不同视角数据,并实时输出下游所需的一系列任务结果,是自动驾驶的核心问题。并且在应用中,感知环节常常会消耗掉车上的大部份算力,所以感知其实也是技术架构的核心所在。

在感知环节,系统需要融合不同视角相机的视觉数据,以及毫米波雷达、激光雷达等传感器的数据,在模型设计和工程实现上都具有很大挑战。常规的后融合处理方式,每个传感器对应一个神经网络,无法充分挖掘多传感器融合的优势,而且计算量大、耗时长。此外,如果多个任务简单地共享一个主干网络,则容易出现各个任务难以同时获得优异性能的情况。

所以在2020年,Nullmax构建了基于BEV的感知基础架构,为自动驾驶提供融合更准、速度更快的感知模型。它可以有效融合空间和时序信息,对360度的多传感器数据进行高效融合,也能自动搜寻最优的网络设计,支持多传感器、多任务的协同工作。

并且在2022年,Nullmax应用BEV-Transformer完成了这套架构的改造升级,形成了平台化的BEV-AI自动驾驶整体技术架构。它在技术底层考虑行车、泊车的特点,将任务范围从感知延伸到下游的规划,提供全场景、端到端、可成长的完整应用。

在深入使用Transformer基础上,Nullmax BEV-AI技术架构还整合了大量BEV-CNN的成果,能在面向不同算力、算子的多核异构SOC时能够提供最优的算法选择。它可同时输出3D和2D的感知结果,既能为红绿灯检测等适合2D感知的任务提供2D输出,也可以为动态障碍物检测等任务输出3D结果,然后用进行2D校验,在系统层面形成鲁棒的设计。

基于这套先进的BEV-AI整体技术架构,Nullmax可以快速完成各项功能和任务的开发,并形成一套性能拔尖、易于部署、持续升级的一体化量产方案。

面面俱到的完整BEV架构

为了满足自动驾驶全链的开发迭代需求,Nullmax的BEV-AI架构涵盖了六个方面的主要内容:BEV 3D车道线检测,BEV 3D目标检测,BEV局部地图,BEV规划,云端自动化4D真值标注,车端感知、预测、规划的量产部署。 复杂路口的BEV 3D目标检测 BEV 3D目标检测为自动驾驶提供360°的动态障碍物检测能力,并融合时序信息对各类目标进行准确预测。BEV 3D车道线检测为车辆输出实时的车道情况,BEV局部地图在车端实时构建媲美高精地图的高精度局部地图,二者能够在任意常规道路条件下,输出自动驾驶所需的静态场景深刻理解。然后以此为基础,BEV规划可以用端到端方式输出行车的轨迹和速度,实现复杂场景下的自动驾驶应用,而不依赖高精地图。 路口场景的BEV规划

云端的自动化4D真值标注,用来完成3D空间信息+时间信息的3D bunding-box真值标注,以及车道线、Local Map等方面的标注,支持BEV-AI的高效开发和迭代。最终,Nullmax BEV-AI整体架构根据实际需求,形成能在车端实时运行、易于部署的感知、预测、规划一系列量产应用。

为了让这套BEV-AI技术架构具备平台化特点,满足实际应用中的不同量产需求,Nullmax还攻克了三个方面的难点。一是融合多个摄像头数据的同时,不进行单个摄像头的独自处理和多个摄像头结果的复杂后处理,以节省算力、提升融合效果;二是在算法层面实现图像空间到BEV空间的信息转换;三是支持任意摄像头,且不过度依赖相机的外参,从而适配所有传感配置。

简单来说,Nullmax的BEV-AI,采取多相机联合工作方式,输入任意数量相机的图像,直接统一输出BEV视角下的三维信息,因而无需为每个相机进行单独的处理。同时,Nullmax利用cross-attention机制实现2D图像到3D空间的关联,为BEV-AI架构打造了一系列基于Transformer的BEV检测、分割方法,并通过multi-camera cross attention等方式,实现了不过度依赖相机参数的2D和3D关联。

归功于这些深入的工作,Nullmax的BEV-AI技术架构为行泊一体等量产应用带来了巨大的平台化优势和产品优势。

大幅提升的BEV量产优势

在实际应用中,芯片平台、传感器配置、功能定义、技术指标的细微差异,都可能会为自动驾驶的开发工作带来巨大变动,尤其是复杂的行泊一体量产应用。因此通过平台化的技术架构提升量产效率,意义重大。

Nullmax BEV-AI架构能够支持所有的芯片平台,提供高中低不同算力平台下的行泊一体量产应用。尤其是在备受欢迎的德州仪器TDA4、英伟达Orin芯片上,基于BEV-AI技术架构的行泊一体方案,有的已经完成交付,有的正在交付。

在最低8T算力的情况下,BEV-AI就可以实现包括高速NOA在内的基础行泊一体,如果算力达到16T,那么行泊车体验还会进一步升级。当算力达到100T以上,那么BEV-AI架构可以提供城市道路的领航辅助功能,实现全场景的行泊一体。

同时,Nullmax BEV-AI架构还能够支持所有的自动驾驶产品。无论是完整的行泊一体,还是单独的行车、泊车功能,又或者是上游的行泊车感知,BEV-AI架构能够按需裁剪,适配任务需求,并且可以支持任意的传感器配置。

夜间基于8T算力和4颗侧视相机的BEV周视感知

通常来说,不同的车辆在传感器的类型、数量和参数上会存在普遍差异,比如相机的焦距、像素、FOV、安装位置、朝向等情况就各不相同。Nullmax的BEV-AI架构可以适配这些传感器层面的差异,无需大幅修改算法,即可提供应用。

除此之外,Nullmax BEV-AI架构还具有平台产品化的特点,让架构平台的技术优势形成了面向部署优化、超远距离感知的产品优点。这让基于BEV-AI架构的量产方案,在部署时能能取得更好的应用体验,并在资源占用、感知帧率、系统延时等关键指标上表现更佳,尤其是面对中低算力芯片平台的时候。

而且更远距离的感知,也能为自动驾驶提供更高的安全性。相比于业内BEV方案通常数十米远的感知距离,Nullmax BEV-AI架构可以轻松实现更远距离的有效感知,满足量产功能的所有性能指标。

正是凭借BEV-AI架构在平台化和产品化方面带来的这些优势,Nullmax不仅快速完成了各种量产应用的高质量开发和交付,并且方案整体达到了行业领先的技术水准。

结语

在汽车向着高阶智驾发展的过程中,先进的技术架构将为自动驾驶的落地带来全方位的优势,不论是量产方案的本身还是技术应用的过程,都不例外。Nullmax BEV-AI架构将继续作为行泊一体「现代化」路上的「新基建」,加速全场景自动驾驶应用的落地。

审核编辑:彭静
声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 传感器
    +关注

    关注

    2577

    文章

    55507

    浏览量

    793964
  • 硬件
    +关注

    关注

    12

    文章

    3633

    浏览量

    69172
  • AI
    AI
    +关注

    关注

    91

    文章

    41128

    浏览量

    302608
  • LLM
    LLM
    +关注

    关注

    1

    文章

    350

    浏览量

    1394

原文标题:Nullmax BEV-AI架构,加速行泊一体「现代化」 | Nullmax进化学

文章出处:【微信号:Nullmax,微信公众号:Nullmax纽劢】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    Nullmax智能前视体机方案加速推动L2级ADAS普惠落地

    作为领先的 AI 科技公司,Nullmax 凭借卓越的视觉感知技术、全栈软件算法能力与平台战略布局,构建了覆盖高中低不同配置需求的辅助驾驶
    的头像 发表于 03-16 14:58 456次阅读

    Nullmax 2025年度智能驾驶领域专利布局回顾

    回归技术本源,夯实创新基础。2025年,Nullmax以前沿研究、专利布局与工程实践为核心,在多项关键技术领域实现了单点爆破与系统性沉淀,持续构建并完善了一套可复用、可组合的通用
    的头像 发表于 01-30 16:10 991次阅读
    <b class='flag-5'>Nullmax</b> 2025年度智能驾驶领域专利布局回顾

    Lenovo推出Agentic AI和Lenovo xIQ平台,全面加速企业AI部署,规模交付全生命周期混合AI解决方案

    Lenovo xIQ ——一套旨在简化、加速并实现企业级AI规模运营的全新AI原生交付平台。此次升级将Lenovo成熟的Hybrid
    的头像 发表于 01-08 14:51 992次阅读

    乐鑫推出私有智能体平台:兼容主流大模型,打造多模态 AI 能力

    在其自有AWS账户中完成部署和管理。随着大语言模型(LLM)和AI智能体技术的不断发展,越来越多的设备厂商希望借助一套简化、可量产的统平台
    的头像 发表于 12-16 18:03 747次阅读
    乐鑫推出私有<b class='flag-5'>化</b>智能体<b class='flag-5'>平台</b>:兼容主流大模型,<b class='flag-5'>打造</b>多模态 <b class='flag-5'>AI</b> 能力

    Nullmax亮相GTM 2025全球科技出行大会

    由亿欧汽车主办的 GTM 2025 第八届全球科技出行大会在上海举行。Nullmax 副总裁张帆出席并发表《大模型时代下,Nullmax 的智驾进阶之路》主题演讲,阐述了 Nullmax 对智驾
    的头像 发表于 12-12 17:25 1099次阅读
    <b class='flag-5'>Nullmax</b>亮相GTM 2025全球科技出行大会

    AI科技公司Nullmax完成C1轮千万美元融资

    2025年12月5日,AI 科技公司 Nullmax 宣布完成 C1 轮融资,某国内头部车规级芯片公司作为战略投资者增资千万美元。本轮融资充分体现了资本市场与产业核心生态伙伴对 Nullmax
    的头像 发表于 12-12 17:24 2759次阅读

    浅谈研华iEMS.AI Agent能源智能体管理平台

    近日,研华 iEMS.AI Agent能源智能体专题直播圆满落幕!这场聚焦工业级智能升级的分享,带大家解锁了 AI 驱动的全新可能 —— 它不只是一套能碳AI管理工具,更是
    的头像 发表于 11-24 15:31 997次阅读
    浅谈研华iEMS.<b class='flag-5'>AI</b> Agent能源智能体管理<b class='flag-5'>平台</b>

    如何搭建一套安防监控管理平台

    构建一套现代化的安防监控管理平台,本质上是建设个集数据采集、传输、处理、存储、分析与应用于体的综合型技术中枢。其
    的头像 发表于 09-04 16:19 1113次阅读
    如何搭建<b class='flag-5'>一套</b>安防监控管理<b class='flag-5'>平台</b>?

    分支多、云也多,网络又慢又烧钱?一套方案全搞定!

    、成本控制与运维效率的多重压力。面对这些挑战,是否有一套网络架构能够“全搞定”?答案是肯定的。基于行业实践与技术演进,我们逐渐形成了一套以SD-WAN+云网融合
    的头像 发表于 08-28 14:25 1316次阅读
    分支多、云也多,网络又慢又烧钱?<b class='flag-5'>一套</b>方案全搞定!

    Nullmax荣获2025汽车行业年度优秀解决方案奖

    近日,Nullmax“双击”出手,连续将两项荣誉收入囊中,从前沿的端到端新架构设计,到成熟的辅助驾驶平台方案,赢得技术创新与落地能力的双重
    的头像 发表于 08-13 13:52 754次阅读

    黑芝麻智能携手Nullmax打造辅助驾驶主流量产方案

    智能携手Nullmax打造的辅助驾驶主流量产方案正式发布。该方案面向8-15万元级别主流车型,基于单颗黑芝麻智能武当C1236跨域计算芯片,集成Nullmax全栈自研的软件技术
    的头像 发表于 06-26 18:36 1763次阅读
    黑芝麻智能携手<b class='flag-5'>Nullmax</b><b class='flag-5'>打造</b>辅助驾驶主流量产方案

    ArkUI-X跨平台技术落地-华为运动健康()

    Android 和 iOS上面进行复用,实现“一套代码,三端运行”。 在健康二级页面上,数据来自于运动健康内部的“数据平台”,但是目前运动健康在三端上的“数据平台”有各自单独的实现(运动健康“数据
    发表于 06-18 22:53

    一套Linux系统,撑起整个芯片设计平台?CFA团队教你如何搭好EDA智算平台技术底座

    在半导体行业,Linux 是我们再熟悉不过的操作系统。作为芯片研发者日常工作的主战场,它承载着EDA工具、AI训练环境、脚本自动流程的运转。而随着AI和EDA算力技术的迅猛发展,我们
    发表于 05-07 14:44

    华为AI WAN SPN打造行业数智新体验

    近日,在云网智联大会 “确定性网络/广域高性能网络论坛”上,华为数据通信产品线SPN解决方案首席架构师魏家道发表《AI WAN SPN融合承载网络确定性承载技术》主题演讲——通过AI
    的头像 发表于 05-07 09:53 1313次阅读

    Nullmax亮相2025上海车展汽车智能峰会

    日前, 2025上海车展汽车智能峰会的端到端自动驾驶专题论坛上,Nullmax 首席科学家成二康博士发表《端到端 - One Model Decoder 架构设计》主题演讲,重点讲解
    的头像 发表于 05-06 10:37 1586次阅读
    <b class='flag-5'>Nullmax</b>亮相2025上海车展汽车智能<b class='flag-5'>化</b>峰会