0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

如何克服边缘视觉的带宽限制?

控制工程中文版 来源:控制工程中文版 2023-05-19 11:08 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

把一个相机连接到一台边缘计算机/嵌入式计算机上,然后在云端进行数据处理或存储——这就是“边缘视觉”的概念。近年来,边缘视觉正被广泛应用于自动化产线质检、汽车图像采集和智能工厂等场景中。

伴随着人们对图像质量的要求提高,以及视觉传感器技术突飞猛进的发展,现场产生海量和庞大数据,也给视觉数据的边缘传输和上云带来了严峻挑战。

01

亟待攻克的带限制瓶颈

在工业视觉领域,整个行业都在追求更多像素、更高帧率、更高的空间以及时间分辨率。然而,很多用户会反馈1 GigE相机的一个输出已经不够用,只能连接到PLC,急需相机有更多输出通道,以便将图像数据传输到云服务器。

90901de2-f5ef-11ed-90ce-dac502259ad0.png

如上图所示,棕色的点是图像传感器,点连接的线代表行业中常见的典型接口(如PCIe 3.0是蓝线,CoaXPress v2 x4是红线)。可以发现,当图像传感器高于某条线时,该接口的带宽就已经不够去传输该图像传感器的数据了。

现如今,图像传感器取得了巨大进步,市面上有很多图像传感器,带宽速度比10GigE、CoaXPress v1快很多,甚至比100千兆接口更快,能提供一万帧、1亿或更多像素和速度远高于150GB/s的带宽。虽然接口取得了一些进步,带宽速度越来越快,但挑战仍然存在——即使有链接聚合也很难能跟上传感器的发展速度,电脑GPUCPU性能也远远落后于其他领域。

909b4aa0-f5ef-11ed-90ce-dac502259ad0.png

想要解决这个问题,如果用高分辨率的高速传感器,也将面临很多瓶颈。比如摄像头接口、GPU和CPU的桥接接口、CPU的负载或处理能力,以及计算机上送云端的带宽,往往在最好的情况下才能达到1G。

90bb75f0-f5ef-11ed-90ce-dac502259ad0.png

此外,如果现场有多个摄像头,情况会变得更糟。假如有多个10GigE相机、CoaXPress或100 GigE相机,以100 GigE相机为例,速度大概是96千兆比特乘每秒以摄像机的数量。但大多数情况下,用户电脑的最大带宽接口PCIe 3.0,其带宽也只有48千兆比特每秒,远远无法满足需求。

02

用图像采集卡压缩预处理

面对这个困境,用户常见的解决方案是在多摄像头和CPU架构之间放置一个图像采集卡,用于压缩以及预处理。例如从图像提取一定区域的ROI,即可减少总数据带宽。

9100ff12-f5ef-11ed-90ce-dac502259ad0.png

然而,在实际应用中,用户对图像采集卡的需求还有许多:

通常需要高带宽的相机接口、多相机接口、超高精度的同步,以及可定制的IOs来控制外围设备;

在处理过程中,需要能够实时并行处理,并且需要低延迟、有一个大的DRAM,从而计算复杂的算法,需要很多个千兆比特每秒的内存访问带宽;

对系统开发人员而言,图像采集卡需要满足灵活、易于使用的要求。为保障开发便捷性,开放的FPGA也必不可少,可以将一些特定IP放在图像采集卡上,通过集成开发环境实现快速的算法和方案开发;

与此同时,用户对于系统集成的紧凑设计和被动冷却性能,也提出了更严苛的要求...

03

可靠的一体化边缘视觉解决方案

能否能将图像采集卡和计算机很好地合二为一?虹科的HK-Gidel FantoVision 40给出了答案。

这是一款开创性的小型计算机,可与高达4 x 10GigE Vision或 4 X CoaXPress 2.0相机连接进行图像采集和处理。创新架构将高端图像采集与实时图像处理和/或压缩相结合,使用Nvidia Jetson 嵌入式计算机,并在Intel Arria 10 FPGA上进行可选的预处理/压缩。

HK-Gidel FantoVision的另一个显著特点,是其开放式体系结构支持GPU和FPGA上的嵌入式AI/图像处理。软件工程师可以使用CUDA C/C++和NVIDIA的库,在GPU上编写算法。此外,使用新颖的ProcVision套件,在FPGA上开发和部署可选的预处理块,既简单又快速。

该产品的多个HK-Gidel FantoVision单元可以相互连接,可提供独特且可扩展的拓扑结构。使用InfiniVision 开放式框架抓取器流程,100多个传感器可同步处理

现如今,HK-Gidel FantoVision为高带宽、低延迟应用的新型紧凑、经济高效、可扩展的视觉和成像解决方案开辟了道路。尤其适用于需要高分辨率、高速度的交通监测、面板检测等场景。

例如交通检测应用中有多个摄像机在拍摄高分辨率图像,HK-Gidel FantoVision 可以通过图像采集卡提取ROI区域甚至是车牌,在GPU上布署算法做车牌识别,最后将识别的车牌号码传到云端上,从而不需要很多带宽。





审核编辑:刘清

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 嵌入式
    +关注

    关注

    5186

    文章

    20159

    浏览量

    328997
  • plc
    plc
    +关注

    关注

    5045

    文章

    14447

    浏览量

    483651
  • 图像传感器
    +关注

    关注

    68

    文章

    2052

    浏览量

    131926
  • 视觉传感器
    +关注

    关注

    3

    文章

    272

    浏览量

    23778

原文标题:如何克服边缘视觉的带宽限制?

文章出处:【微信号:控制工程中文版,微信公众号:控制工程中文版】欢迎添加关注!文章转载请注明出处。

收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    高清编码器:重塑视觉体验的幕后英雄

    : 高清编码器 。它如同一位隐形的“视觉艺术家”,用算法与算力将原始视频数据压缩成高效传输的数字信号,让高清内容突破带宽限制,触达全球每一个角落。 技术突破:从“清晰”到“极致”的跨越 传统编码技术常面临画质与效
    的头像 发表于 12-04 08:40 143次阅读
    高清编码器:重塑<b class='flag-5'>视觉</b>体验的幕后英雄

    边缘智能网关有什么好用可靠的推荐?

    在工业4.0与物联网技术深度融合的当下,企业数字化转型正面临关键挑战:海量设备产生的数据需实时处理以支撑决策,但云端集中计算模式因带宽限制、隐私风险及高延迟问题逐渐显现瓶颈。边缘智能网关作为连接
    的头像 发表于 11-21 11:51 114次阅读

    工业视觉网关:RK3576赋能多路检测与边缘AI

    1080P@30fps。前端 RGA 做尺寸/色彩统一,减少后端负载。高效硬件编解码内置 VPU 支持 H.264/H.265,显著降低带宽与存储压力;结合 RTSP 实现低延迟内网推流,便于大屏与质检台查看。边缘
    发表于 10-16 17:56

    FPGA测试DDR带宽跑不满的常见原因及分析方法

    在 FPGA 中测试 DDR 带宽时,带宽无法跑满是常见问题。下面我将从架构、时序、访问模式、工具限制等多个维度,系统梳理导致 DDR 带宽跑不满的常见原因及分析方法。
    的头像 发表于 10-15 10:17 577次阅读

    边缘智能网关在水务行业中的应用—龙兴物联

    海量实时数据的上云带宽需求。 保障供水安全:‌ 快速响应突发污染,最大限度减少影响范围。 管网泄漏监测与定位‌ 应用:‌ 在供水管网部署压力、流量、声波振动传感器,边缘网关实时分析数据流。 优势
    发表于 08-02 18:28

    一篇文章读懂麦科信DP系列高压差分探头

    )。低至5mVrms超低底噪(DP700在10X档5MHz带宽限制下),双量程设计为不同测试电压提供更佳信噪比。采用高阻设计和低输入电容设计,最小化负载效应,测量精度达±2%。5MHz带宽限制功能有效抑制
    发表于 07-07 20:45

    使用示波器的自定义滤波器功能助力电源纹波测试

    经常使用示波器测试的工程师都知道,示波器一般是具备带宽限制功能,即低通滤波设置,可以将一台大带宽示波器变为小带宽,减小宽带噪声影响,用以测试评估低频信号情况。
    的头像 发表于 06-19 11:29 1630次阅读
    使用示波器的自定义滤波器功能助力电源纹波测试

    基础篇-Buck电路纹波测试方法(实用)

    ,一种比较精确的说法就是:纹波就是直流成分中叠加的交流成分。 2 纹波测试方法 2.1 带宽限制 带宽限制:开启20MHz带宽。 纹波电压的频率等同于芯片开关频率,为了防止探头拾取到环境中的高频
    发表于 04-17 11:16

    记忆示波器设置有哪些常见错误?

    测信号通道一致。 触发电平设置不当 错误:触发电平设置在信号噪声范围内,导致误触发。 解决方案: 调整触发电平至信号稳定区域,或使用触发电平锁定功能。 四、带宽限制错误 未启用示波器带宽限制 错误
    发表于 04-14 15:29

    英飞凌边缘AI平台通过Ultralytics YOLO模型增加对计算机视觉的支持

    对计算机视觉的支持,扩大了当前对音频、雷达和其他时间序列信号数据的支持范围。在增加这项支持后,该平台将能够用于开发低功耗、低内存的边缘AI视觉模型。这将给诸多应用领域的机器学习开发人员带来极大的便利,例如工厂可以借此实现对零件的
    的头像 发表于 03-11 15:11 661次阅读
    英飞凌<b class='flag-5'>边缘</b>AI平台通过Ultralytics YOLO模型增加对计算机<b class='flag-5'>视觉</b>的支持

    AI赋能边缘网关:开启智能时代的新蓝海

    。这一变革不仅带来了技术架构的革新,更为产业发展开辟了新的增长空间。 传统边缘网关受限于计算能力和算法支持,往往只能完成数据采集和简单处理,大量原始数据需要回传云端处理,导致响应延迟和带宽压力。AI技术
    发表于 02-15 11:41

    开源项目 ! 利用边缘计算打造便携式视觉识别系统

    景而言,边缘计算是一项变革性的技术。 边缘计算助力视觉识别的原因: 实时响应 数据在本地处理,消除了与云服务相关的延迟问题。 减少带宽使用 仅传输已处理的数据,降低了
    发表于 12-16 16:31

    AI模型部署边缘设备的奇妙之旅:如何在边缘端部署OpenCV

    图像的质量,使得图像更适合人类观察或者为后续的分析做准备。 方法:通常涉及像素级别的操作,比如调整亮度、对比度、颜色校正、滤波(如高斯模糊、中值滤波去噪)、边缘检测、形态学变换(膨胀、腐蚀)等。 计算机视觉
    发表于 12-14 09:31