0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

飞凌微CEO邵科:车载视觉处理新品助力智驾视觉系统升级,端侧AI应用加速落地

章鹰观察 来源:电子发烧友 作者:章鹰 2024-10-31 01:17 次阅读

2024年,算力仍然是大模型持续迭代的根本动力,AI走向端侧是大势所趋。咨询机构IDC在今年7月发布最新预测,2024年全球AI智能手机出货量将达到2.34亿部,高于之前2月预测的1.7亿部。开源证券表示,AI终端出货量的增长及多模态AI模型能力的突破,或驱动AI应用商业化空间开启。

wKgaoWciCAeACZRvAACnSqX-7ic548.jpg
图:飞凌微首席执行官兼思特威副总裁邵科


“端侧AI有三种发展路径:一类是端侧采集数据,在云端处理,实效性不太高;二是在端侧采集数据,同时在本地中央计算来处理AI数据;三是挑战较大的,在端侧采集数据,同时在端侧处理。我们认为,端侧AI落地中有四大潜力应用场景,包括智能车载、智能家居物联网机器视觉等。” 飞凌微首席执行官兼思特威副总裁邵科表示。

今年以来,以特斯拉为首的纯视觉实现自动驾驶呼声渐高,华为推出的激光雷达+摄像头的方案在L2+、L3等高阶智驾方案也纷纷上车。可以说,在打造轻算力的AI终端和高阶智驾的ADAS功能中,图像传感器协同的ISP和轻算力视觉处理SoC都是端侧视觉方案的重要组成部分,国内新锐飞凌微公司在这些领域推出了哪些最新产品?为何会获得业界的普遍关注?为此,电子发烧友专访了飞凌微首席执行官兼思特威副总裁邵科。

全球车载摄像头市场规模持续增长!飞凌微首发三颗新品,定位智驾视觉处理

2024年,全球及中国市场汽车电动化、智能化进展迅速,带动车载摄像头市场爆发。据Yole预测,2023年至2029年,全球车载摄像头市场规模将从57亿美元增至84亿美元。

随着汽车行业向着更先进的ADAS和自动驾驶方向发展,汽车需要更多的摄像头来捕捉足够的道路信息以提高安全性和便利性。麦姆斯咨询创始人兼CEO王懿表示,当前,CIS主要应用于L1级别至L2级别的ADAS(高级驾驶辅助系统)、倒车影像等,2021年全球生产的汽车中,平均每辆汽车的CIS使用量约为2.7颗,预计到2027年,该数字将上升至4.8颗。而高端汽车的CIS使用量通常超过10颗。

“在智能汽车上,视觉图像传感器应用越来越广泛。典型应用场景包括前视、侧视、后视、环视摄像头系统,驾驶员监控系统和乘员监控系统、电子后视镜等。随着现在应用落地越来越多,对摄像头的规格提出更高的要求,包括更高的分辨率、更好的成像性能,还有多个摄像头的组合应用。” 飞凌微首席执行官兼思特威副总裁邵科表示。

邵科认为,汽车应用的新趋势给图像传感器厂商带来两大挑战:一、图像性能要求日益提高;二是处理性能要求提高,端侧有很大空间去做高性能的图像处理或者做视觉的预处理,帮助系统实现更好的落地。为此,基于市场的迫切需求和应用方案的考虑,飞凌微推出M1、M1Pro和M1Max三款产品。M1是一款用于车载上面的高性能ISP,而M1Pro和M1Max两款产品用于车载的端侧视觉感知预处理的轻量级SoC。
wKgaoWciCBWAU9nHAAIfhDBAtos648.jpg
作为飞凌微的首款车载高性能Camera ISP产品,邵科介绍说M1具备三大优势:1、首先可以接1颗800万像素的图像数据或接两颗300万像素的图像数据,灵活实现在车载的ADAS、车载舱内双目视觉、前视双目摄像头等多种车载视觉应用场景;2、高动态范围,支持最多4帧HDR合成,动态范围可达144dB,能够有效保留并且凸显画面的明暗部细节,保障车载摄像头在复杂光线场景下图像捕获的准确性;3、暗光效果佳,内置高性能暗光降噪和图像增强算法,支持高分辨率RGB-IR图像处理,显著提升实时影像的清晰度,提高智驾视觉系统的识别效率。在电子后视镜应用当中,M1可以搭配思特威图像传感器SC320AT,高性能ISP配合3MP CIS,为驾驶员提供更广阔清晰的视野,提升夜间和复杂交通环境下的驾驶体验和安全性。

值得关注的是,在封装尺寸规格方面,M1提供9mm*9mm(QFN)、7mm*7mm(BGA)两种类型,有利于形成结构小型化的车载摄像头方案。

在车载轻算力视觉处理SoC芯片领域,飞凌微推出了两款旗舰产品M1Pro和M1Max。M1Pro的优势在于内置了0.8TOPS@INT8轻算力自研NPU、Arm Cortex-A7 CPU、1Gb DDR3L内存。邵科指出,这款产品集成了CPU和自研NPU的算力,在处理图像效果的同时做一些轻量级的AI应用,包括人脸识别和姿态识别等,为车载视觉系统后端处理减负。
wKgZoWciCB-AQTBaAAF9BX9MzKQ697.jpg
以舱内DMS应用方案为例,M1Pro可搭配思特威2MP图像传感器SC232AT,在图像传感器以及SoC内置ISP的双重驱动下,实现全局快门模式下动态范围的显著提升。同时,M1Pro支持运行DMS识别算法和结果输出,有效提升整体DMS系统的实时性,使智驾系统完成即时响应,从而保障驾驶安全。

为了适应不同的应用需求,除了M1Pro外,飞凌微推出了M1Max,其算力是M1Pro的两倍,M1Max在核心模块配置方面进行了相应升级,包括1.5TOPS@INT8轻算力自研NPU、Arm Cortex -A7×2 CPU、2Gb DDR3L内存等能够在端侧处理更多数据。

邵科认为,作为思特威旗下全资子公司品牌,飞凌微此次推出的M1系列车规级视觉处理芯片,M1、M1Pro以及M1Max均具备优异的图像处理性能、低功耗、小封装尺寸、功能安全、信息安全等优势,与思特威车载图像传感器搭配,形成极具成本优势的高性能智驾全场景视觉解决方案,节省厂商系统开发成本和调试周期,为智驾车载视觉系统的跨越式升级注入强劲动力。

AI大潮下,飞凌微未来产品走向

为什么要成立飞凌微?邵科表示:“飞凌微原来定位偏数字SoC,与思特威原有产品和技术有共通性,但是在技术、工艺平台和应用方案中发挥的作用有差异,独立运作后更加有利于运营新产品线,有利于未来的产品研发和业务发展。”

2024年8月,飞凌微(上海)电子科技有限公司作为思特威(688213)全资子公司正式官宣并独立运作,致力于先进视觉处理芯片技术的研发与设计。当下,飞凌微围绕汽车电子等领域研发了一系列端侧高性能智能视觉处理芯片。公司通过与国内外知名汽车制造商、Tier 1供应商以及算法方案商等上下游产业伙伴的紧密合作,持续推进智驾视觉技术的商业化进程,加快构建未来出行的新生态。

“视觉应用非常广泛,我们先做车载CIS,到现在图像传感器和SoC结合起来,变成新的应用方案,从纯粹的视觉处理到加入AI处理,做端侧感知和预处理。”邵科表示,“未来公司会从车载向机器人、物联网等方向拓展,以性能更优异的端侧视觉解决方案,支撑更多细分应用的进一步升级。”

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 图像传感器
    +关注

    关注

    68

    文章

    1858

    浏览量

    129386
  • ISP
    ISP
    +关注

    关注

    6

    文章

    474

    浏览量

    51651
  • 智驾芯片
    +关注

    关注

    0

    文章

    22

    浏览量

    33
收藏 人收藏

    评论

    相关推荐

    智电子加入桨技术伙伴计划,携手PaddleX为视觉模组产品赋能添“智”

    PaddleX,配合桨星河社区AlStudio,全面探索AI在边缘的应用场景。双方将进一步加速AI技术在边缘设备中的
    的头像 发表于 11-01 08:07 81次阅读
    <b class='flag-5'>凌</b>智电子加入<b class='flag-5'>飞</b>桨技术伙伴计划,携手PaddleX为<b class='flag-5'>视觉</b>模组产品赋能添“智”

    康耐视AI视觉系统助力自动化精准检测

    凭借高精度图像分析、物体表面识别检测、精准定位等功能,视觉系统为自动化流程的高效运行提供了关键技术支持。
    的头像 发表于 10-25 10:32 112次阅读

    车规级视觉处理芯片M1系列:高性能、低功耗、小封装尺寸

    电子发烧友网报道(文/李弯弯)近日,思特威(SmartSens)正式宣布全资子公司品牌——微电子(Flyingchip,简称“”)
    的头像 发表于 08-14 09:11 4594次阅读

    思特威正式发布子品牌,首发产品定位智视觉处理

    近日,技术先进的CMOS图像传感器供应商思特威(SmartSens,股票代码688213)正式宣布全资子公司品牌——微电子(Flyingchip™,以下简称“
    发表于 08-09 10:01 906次阅读
    思特威正式发布子品牌<b class='flag-5'>飞</b><b class='flag-5'>凌</b><b class='flag-5'>微</b>,首发产品定位智<b class='flag-5'>驾</b><b class='flag-5'>视觉</b><b class='flag-5'>处理</b>

    思特威正式发布子品牌,首发产品定位智视觉处理

    M1车载视觉处理芯片系列正式亮相,包括M1(Camera ISP)以及M1Pro(Cam
    的头像 发表于 08-08 11:45 362次阅读
    思特威正式发布子品牌<b class='flag-5'>飞</b><b class='flag-5'>凌</b><b class='flag-5'>微</b>,首发产品定位智<b class='flag-5'>驾</b><b class='flag-5'>视觉</b><b class='flag-5'>处理</b>

    阿丘科技CEO黄耀在VisionCon大会发表精彩演讲,深度解析AI+工业视觉发展与趋势

    制造业转型升级”,吸引了来自全球的顶尖企业和科研机构代表,共同探讨和展示最新的技术成果与行业趋势。阿丘科技CEO黄耀围绕AI技术在工业视觉领域的最新应用成果和未来发展
    的头像 发表于 06-07 08:24 958次阅读
    阿丘科技<b class='flag-5'>CEO</b>黄耀在VisionCon大会发表精彩演讲,深度解析<b class='flag-5'>AI</b>+工业<b class='flag-5'>视觉</b>发展与趋势

    CCD机器视觉系统的工作原理和特性

    随着科技的飞速发展,机器视觉技术已成为工业自动化、质量检测、智能监控等领域的重要支撑。CCD机器视觉系统作为机器视觉技术的核心组成部分,以其高清晰度、高可靠性、实时性强等特点,得到了广泛应用。本文将
    的头像 发表于 06-06 16:27 1083次阅读

    机器视觉系统与运动控制系统的区别

      在工业自动化和智能制造的浪潮中,机器视觉系统和运动控制系统作为两大关键技术,各自扮演着不可或缺的角色。它们虽然都是为了实现更高效、更精确的自动化操作,但在技术原理、功能定位、应用领域等方面却存在显著的区别。本文将从多个维度出发,详细探讨机器
    的头像 发表于 06-06 14:10 657次阅读

    机器视觉系统的工作原理和应用领域

      随着科技的飞速发展,机器视觉系统已成为工业自动化领域不可或缺的一部分。机器视觉系统,顾名思义,就是使用机器来模拟和实现人类视觉的功能,通过图像摄取装置将被摄取目标转换成图像信号,进而利用这些信号
    的头像 发表于 06-06 14:04 779次阅读

    AI视觉检测系统在多方面实现技术创新

    电子发烧友网报道(文/李弯弯)AI视觉检测系统是一种基于AI技术的视觉分析系统,它通过模拟人类
    的头像 发表于 05-24 00:16 3189次阅读

    机器视觉系统五个模块介绍

    典型的机器视觉系统由五个主要模块组成:照明、镜头、相机、图像采集和视觉处理器。让我们看一下这五个结构的目的、特征和工作原理。机器视觉系统:照明照明是影响机器
    的头像 发表于 05-09 17:13 721次阅读
    机器<b class='flag-5'>视觉系统</b>五个模块介绍

    机器视觉系统的组成部分

    一般来说,一个完整的机器视觉系统由光学系统(光源、镜头、工业相机)、图像采集单元、图像处理单元、执行器和人机界面等模块组成。各功能模块缺一不可、相辅相成。1.照明(光源)照明是影响机器视觉系统
    的头像 发表于 04-29 14:51 1049次阅读
    机器<b class='flag-5'>视觉系统</b>的组成部分

    机器人视觉系统深度解析

    从功能上来看,典型的机器视觉系统可以分为:图像采集部分、图像处理部分和运动控制部分。
    发表于 03-05 11:39 437次阅读
    机器人<b class='flag-5'>视觉系统</b>深度解析

    友思特新品 | 世界上第一个夜间和全天候摄像的汽车门控视觉系统

    友思特新品车载门控视觉系统,可以实现任意天气条件下全天候的道路检测和安全感知,扩大清晰的能见范围,成为您出行驾驶和道路监控的“精明双眼”。
    的头像 发表于 02-27 13:49 349次阅读
    友思特<b class='flag-5'>新品</b> | 世界上第一个夜间和全天候摄像的汽车门控<b class='flag-5'>视觉系统</b>

    立体视觉系统的设计方案

    电子发烧友网站提供《立体视觉系统的设计方案.pdf》资料免费下载
    发表于 11-06 10:17 0次下载
    立体<b class='flag-5'>视觉系统</b>的设计方案