0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

5nm旗舰AI SoC芯片首秀!多传感器融合+算法支持 安霸竞逐边缘AI和汽车市场

章鹰观察 来源:电子发烧友原创 作者:章鹰 2022-01-05 17:10 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

随着5GAI、大数据、云计算和生物识别等新一代信息技术的快速发展,安防市场进入了一个全新的发展阶段。特别是新产品的不断涌现,有效地支撑了智慧安防的建设。比如8K高清摄像机,生物识别一体机、智能存储等都在通过技术赋能,向实战领域迈进。据YoleDevelopment统计,自2019年开始,安防市场一直保持着30%的年复合增长率,安防监控的高清化、智能化趋势未来仍将加速,预测未来三到五年,3MP到8MP的高清监控设备增幅将十分显著,并且超高分辨率需求已经拓展到8K。

随着视频监控技术的推陈出新,视频监控多媒体处理芯片也在不断更新换代。在近期的安博会上,人工智能与边缘计算芯片厂商安霸带来了基于5nm的8K AI视觉芯片CV5,支持8K高清摄像机、安防相机和汽车摄像系统应用,让人耳目一新。

图:安霸中国区总经理冯羽涛

“作为迄今为止性能最强的 ISP 迭代,CV5支持 8K 60fps 视频录制、或四路独立的 4K视频流,辅以强大的AI 新功能、全新的CPU内核,且5nm制程节点带来了极高的能效比。” 安霸中国区总经理冯羽涛对记者表示,“CV5 在原始图像处理性能上得到了进一步加强,支持大量物理相机传感器接口,可同时支持多达14个传感器。单颗处理能力可以达到3200万,每秒60帧。”

图:安霸的CV5系列产品

中国安防市场最新的发展趋势是什么?安霸为何要开发5nm的AI Soc芯片赋能安防和汽车市场应用?安霸收购Oculii 公司(下称“傲酷)带来了哪些协同优势?对安防客户和未来汽车客户的最大益处是什么?安霸中国区总经理冯羽涛、安霸中国区市场营销副总裁郄建军就这些热点问题接受电子发烧友的访问。

安防市场高清化、智能化带动AI SoC芯片的需求攀升

“中国安防市场最大的变化是AI智能化。传统安防多年来做的监控主要是忠实地还原场景,不漏帧不掉帧且不失真,24×7全都记录并保存,为了保证将来有任何需要时可以往回调。而这几年往AI智能方向变化。”安霸中国区总经理冯羽涛直言。

IDC的调研数据显示,中国2019年AI摄像头出货量为684万个,较2018年增长147.80%,预计2022年其出货量将达到3,458万个,年均复合增长率71.63%。Omdia估计中国市场2019年AI摄像头(部署深度学习算法)的出货量将占网络摄像头出货量的10%,预测2024年将达到63%。AI拓宽了安防市场,视频分析带来市场增量。AI技术在算法、芯片等方面的技术创新赋予了视频新的价值。这块的蓝海市场未来将快速发展。

安霸作为一家AI视觉感知芯片和高清监控摄像机业界的技术领导者,很早就洞悉了安防市场的趋势。冯羽涛介绍说:“从2017年至今,近4年内安霸共推出了6个系列10纳米的SoC。包括CV2、CV22、CV25、CV25M、S6LM和CV28M。比如CV2S芯片专为高性能监控摄像头设计,具有先进的计算机视觉功能,提供业界领先的图像处理、立体视觉功能、4Kp60视频编码和经过优化的CVflow计算机视觉。“

他特别指出:“今年在安博会期间,安霸主推的旗舰产品CV5/CV52系列是第一代5纳米芯片,开发工作、整体解决方案都已推出,目前已有客户在设计中,预计2022年将会有量产产品。”

据悉,作为AI视觉SoC供应商,安霸的芯片覆盖了多个市场、产品和应用,其中汽车和安防是安霸这些年重点聚焦的行业,同时在无人机、穿戴式相机、虚拟现实相机及运动相机等应用上均有涉足。十几年来,安霸已经落地量产出货超过数亿颗芯片。

图:安霸AI SoC芯片CV2系列展示

5nm的AI Soc芯片引领业界 支持领域从安防超清摄像头向汽车摄像系统延伸

政策支持超高清技术发展,IPC SoC 由高清走向 4K/8K。安防已经从模数时代满足人眼态势监看的“看得见”阶段,演进到满足分辨细节目标的“看得清”阶段,清晰度的不断提升,从高清进一步向 4K和8K 超高清。

行业数据显示,IPC SoC 出货量不断增加。随着行业的不断发展,对摄像头清晰度要求不断提高,主流产品清晰度从 200 万像素、400 万像素到 800 万像素(4K 分辨率)不断提高。超高清解决公共场所大视角监控问题。对于机场、火车站等大面积、人员集中的公共场所来说,大视角技术的运用越来越得到重视。

“基于用户希望芯片运算能力提升的同时功耗下降,我们采用最先进5 nm制程,芯片的低功耗和高算力得以实现。“冯羽涛分析指出,”与智能机上的芯片组不同,CV5 在摄像头操作和 AI 视觉处理任务上有着特殊的优化。芯片内置高画质的ISP + 性能领先的深度学习加速 + 高效率的视频编码,均是安霸自有IP。支持所有主流CMOS图像传感器,复杂光线场景下看得更清、看得更远。CV5可支持 8K 视频录制或 4 路独立图像输入的 4K 视频流录制。新 SoC 芯片 CV5 将推动智能汽车摄像系统、消费级无人机、运动相机和 360°全景相机,以及机器人视觉系统的进一步发展。”

图:安霸中国区市场营销副总裁郄建军

安霸中国区市场营销副总裁郄建军补充道,智能驾驶未来技术发展一定是多传感器融合的趋势,比如智能汽车中域控制器里面的芯片是把几个传感器的东西融到一块,但现在的做法还是后融合多,视频提取目标、雷达提取目标、激光雷达提取目标,三个目标融合一个目标,这种融合效率并不高。但是前融合就不同了,雷达的点云和摄像机的像素点一一对应,做到像素和点云的前融合,而且在芯片里融合就好了。这种不是二选一,而是一加一的办法,效率就很高,误检率、漏检率也会降低。所以点云层面的前融合恰恰是下一步融合最好的潮流,而现在安霸做的就是在芯片里做前融合,做像素和点云融合,这一点非常关键也很领先。

据悉,早在今年10月,安霸宣布与 Oculii(傲酷)公司达成最终收购协议。“为什么安霸与傲酷合并?我们觉得视觉+毫米波雷达尤其是高精度毫米波雷达,这两个互补以后,其实覆盖得很好。当然如果有厂家想再加激光雷达,再加超声波等,我们也都可以支持,但我觉得最经济、最好的方式是视觉+雷达。” 安霸中国区总经理冯羽涛建议。

4D成像雷达算法公司傲酷是一家全球领先的高精度、高清晰、4D成像雷达算法公司,安霸和傲酷进行了合并,将基于4D高精度的雷达算法整合到安霸的开放AI平台里,与之携手将视觉感知+多重感知传感器融合到安霸未来的芯片内。CV5芯片已经是两者结合开发的芯片,通过与现有的 AI 视觉芯片相结合,更好地服务于汽车和 AIoT 物联网终端应用,包括安防和移动机器人。

安霸半导体首席执行官 Fermi Wang 早前对媒体表示:“CV5 的问世让安霸半导体可为下一代智能汽车、消费类相机和机器人视觉提供全新革命性解决方案。 将性能卓越的 CVflow AI 引擎与 8K 视频录制和多路 4K 视频流录制集于一身,让摄像机拥有优秀的图像处理和新颖的人工智能。”

CVflow是安霸特有的进行AI处理的硬件加速引擎。安霸CV5 SoC里自带CVflow,并提供一整套工具,不论你研发神经网络用的是Caffe、TensorFlow还是PyTorch,这些新的算法框架安霸都可以支持,让客户和合作伙伴能够去找到特别的领域。

CV5 处理器的设计,与其前身非常相似。不过单线程和通用计算性能的大幅提升,得益于从四核 Cortex-A53 升级为 1.6GHz 的双核 Cortex-A76 。同时该 SoC 考虑到了与外围设备连接所需的各种输入 / 输出接口,比如提供了对现有的 LPDDR4X / 新一代 LPDDR5 内存的支持。除了ISP部分,新的 HDR 功能,其有助于极大地改善动态捕捉的范围,这对消费类设备和车载平台都至关重要。视频编码方面,CV5 缺乏了对 AV1 开源编码的支持,仅限于 H.264 和 H.265 / HEVC,但这对于一款视觉 AI 处理器来说影响不大。

在要求严格的汽车视频流远程处理应用中,CV5 可支持多路视频流编码,涵盖前置 ADAS、驾驶员监控、车舱监控及侧视摄像头。借助于 CVflow 人工智能引擎,CV5 可同时运行高级驾驶员辅助系统(ADAS)算法(如车道偏离、前方碰撞预警)以及驾驶员监控算法(如驾驶员疲劳驾驶检测)等。多路高分辨率视频捕捉与先进的人工智能处理的完美结合,可支持 ADAS 摄像头在远距离以更高精度识别目标物体。

本文由电子发烧友原创,转载请注明以上来源。如需入群交流,请添加微信elecfans999,投稿爆料采访需求,请发邮箱huangjingjing@elecfans.com。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • AI
    AI
    +关注

    关注

    90

    文章

    38303

    浏览量

    297391
  • 5nm
    5nm
    +关注

    关注

    1

    文章

    342

    浏览量

    26578
  • 安霸
    +关注

    关注

    3

    文章

    50

    浏览量

    13426
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    RK3576驱动高端显控系统升级:屏拼控与AI视觉融合解决方案

    系统依赖工控主机、外接显卡和解码,存在功耗高、延迟大的问题。而瑞芯微 RK3576 打造的新一代 AI 多媒体平台,凭借 “三屏异显 + 八路摄像头输入 + AI
    发表于 11-21 17:51

    【「AI芯片:科技探索与AGI愿景」阅读体验】+AI芯片的需求和挑战

    景嘉微电子、海光信息技术、上海复旦微电子、上海壁仞科技、上海燧原科技、上海天数智芯半导体、墨芯人工智能、沐曦集成电路等。 在介绍完这些云端数据中心的AI芯片之后,还为我们介绍了边缘AI
    发表于 09-12 16:07

    RK3576助力智慧防:8路高清采集与AI识别

    :多路实时监控,结合人脸识别门禁。 • 城市交通:路口多角度监控+车辆检测。 • 工业园区:重点区域实时巡检。5. 未来趋势随着AI算法边缘计算的
    发表于 08-22 17:41

    AI 边缘计算网关:开启智能新时代的钥匙​—龙兴物联

    在数字化浪潮的当下,AI 边缘计算网关正逐渐崭露头角,成为众多行业转型升级的关键力量。它宛如一座智能桥梁,一端紧密连接着各类物理设备,如传感器、摄像头、工业机器等,负责收集丰富的数据信息;另一端则
    发表于 08-09 16:40

    Arm 公司面向汽车市场的 ​Arm Zena​ 深度解读

    面向汽车市场的 ​ Arm Zena ​ 深度解读 Arm Zena 是 Arm 公司面向智能汽车领域推出的核心计算平台,属于其“平台优先”战略的关键布局。作为 Arm 计算子系统(CSS)在
    的头像 发表于 05-29 09:51 2109次阅读

    XMOS为普及AI应用推出基于软件定义SoC模态AI传感器融合接口

    模态传感信号AI处理为智算中心和边缘智能开启感知智能的新篇章
    的头像 发表于 05-12 17:51 404次阅读
    XMOS为普及<b class='flag-5'>AI</b>应用推出基于软件定义<b class='flag-5'>SoC</b>的<b class='flag-5'>多</b>模态<b class='flag-5'>AI</b><b class='flag-5'>传感器</b><b class='flag-5'>融合</b>接口

    【米尔MYC-YM90X路飞龙DR1开发板】路科技 SALDRAGON开发板介绍

    ,适用于工业控制中的高速运动控制或汽车电子中的自动驾驶传感器融合。 生态与工具链支持 路科技提供完整的开发工具链(如TangDynasty
    发表于 04-28 17:57

    在ISC West上推出下一代前端模态AI技术

    近日,Ambarella (下称“”,纳斯达克股票代码:AMBA, AI 视觉感知芯片公司)在美国拉斯维加斯西部防展(ISC West
    的头像 发表于 04-03 09:57 734次阅读

    **【技术干货】Nordic nRF54系列芯片传感器数据采集与AI机器学习的完美结合**

    【技术干货】nRF54系列芯片传感器数据采集与AI机器学习的完美结合 近期收到不少伙伴咨询nRF54系列芯片的应用与技术细节,今天我们整理几个核心问题与解答,带你快速掌握如何在nRF
    发表于 04-01 00:00

    FPGA+AI王炸组合如何重塑未来世界:看看DeepSeek东方神秘力量如何预测......

    FPGA的硬件加速能力处理传感器数据。• 低功耗设计:针对边缘设备和物联网应用,开发低功耗的FPGA解决方案,以满足严格的功耗限制。 4.借助先进的开发工具• AI驱动的开发工具:利用AI
    发表于 03-03 11:21

    AI赋能边缘网关:开启智能时代的新蓝海

    功耗的AI边缘计算平台;对于算法企业,要研发更轻量化、更精准的边缘AI模型;对于系统集成商,则要构建完整的
    发表于 02-15 11:41

    比亚迪荣获2024年汽车市场“三冠王”

    2025年伊始,各大车企纷纷揭晓了2024年度的销量成绩单,其中比亚迪的表现尤为抢眼。作为新能源汽车行业的领军者,比亚迪再次以卓越的成绩震撼了全球汽车市场。 在2024年全年,比亚迪凭借出色的市场
    的头像 发表于 02-10 09:22 920次阅读

    2024中国新能源汽车市场十大亮点

    中国新能源汽车市场快速增长,已成为中国汽车产业发展的引擎。2024年以来,国家和地方层面相继推出了一系列政策措施,旨在加速汽车产业转型升级、鼓励消费、以旧换新,彰显了国家对新能源产业发展的坚定决心
    的头像 发表于 02-08 11:23 2965次阅读
    2024中国新能源<b class='flag-5'>汽车市场</b>十大亮点

    发布N1-655前端生成式AI芯片

    Ambarella(下称“”,纳斯达克股票代码:AMBA,AI 视觉感知芯片公司)在 CES 上发布了 N1-655 前端生成式 AI
    的头像 发表于 01-09 10:29 1520次阅读

    2025年电动汽车市场前景乐观

    近日,根据标普全球移动(S&P Global Mobility)的最新分析,尽管当前电动汽车市场面临一些挑战,如部分车企正在调整电动汽车目标以及美国7500美元联邦税收优惠的不确定性,但2025年
    的头像 发表于 01-06 14:01 1121次阅读