0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

TS高速数字化仪板卡数据采集与存储的优化策略

Sophia_wff 来源:Sophia_wff 作者:Sophia_wff 2024-07-19 10:56 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

板卡式数字化仪,也成为ADC板卡,目前广泛应用于科研、工业、医疗等领域的数据采集设备。它的工作就是将模拟信号转换为数字信号,供计算机进行处理和分析。而在使用这些数字化仪板卡的过程中,我们的用户可能会遇到一些疑问,例如:

“如何处理多张数字化仪板卡上多通道同步采回来的大量数据?”

“我想使用连续高速的流模式进行采集,但我不太确定我是否应该把所有的原始数据都保存到硬盘,以及我需要什么样的电脑配置才能完成这个保存?”

“数字化仪是如何将采集到的数据直接高速传输到PC环境中?”

本文将针对以上这类问题进行解答,以帮助用户更好地理解和使用数字化仪。

一、问题背景

首先,我们需要明确一点,这些疑问并不是没有理由的。我们的高速采集卡在连续采集的过程中,确实会产生的非常大的数据量,尤其当用户使用多张采集卡同步采集时,这个数据量还会进一步翻倍。

举例来说,250 MS/s采样率、16 bit分辨率的4通道板卡,1秒钟就会生成2 GB的数据量,再增加一张相同的卡就会变成4 GB的数据量。顺带一提,我们单张采集卡最高使用PCIe Gen2 x8接口,能做到3.4 GB/s的持续数据流速度。

下面,我们会针对这个问题分情况进行讨论。

(一)总数据量较少

如果需要持续采集时间较短,总数据量能控制在工控机系统内存(RAM)容量大小范围内,那确实可以不执行额外的优化动作,以最大化节省测试程序的开发时间。

在这种条件下,不管是先运算处理后保存,还是直接保存,由于有充足内存空间作为缓冲,对CPU和硬盘速度的要求都较低,主流PC级别的性能即可满足需求。

(二)总数据量较多

而如果是更长时间的采集,我们一般推荐两种优化处理方式:第一种是快速处理,并少量存储;第二种是少量处理,并快速存储。

wKgaomaZ1dCAPrTdAAILLvaxGdM558.png


1.快速处理,少量存储

整体实现思路如下:尽可能立即把生成的数据进行分析,然后仅保留核心结果数据进行存储,大量的原始数据在处理完后直接丢弃以释放内存空间,并降低存储性能的要求。

由于分析处理涉及到的处理算法可能较为复杂,对于CPU而言,大概率会存在并行处理的能力瓶颈,因此我们更加推荐用CUDA专业卡进行高速的并行运算。在专业计算卡RDMA特性的帮助下,CUDA GPU可以不经过CPU直接从数字化仪板卡中获取数据并处理,最后把关键结果返回到CPU和内存中,CPU再进一步将结果保存到硬盘或转发至其他需要的位置即可。

使用这种优化方式的一类典型用户就是射电天文学课题组,他们希望能够不断采集最新的,来自太空的无线电波。他们就会倾向于直接将数据流式传输到GPU,并通过GPU完成滤波、高速的FFT以及分析处理,找到关键的频域信息结果再保存。

此外,在用户想要持续扫描和分析类似信号(比如信号监视,雷达等)的其他应用,这个思路也同样适用。典型的应用还包括处理激光雷达系统、扫描声学显微镜和医学成像系统(核磁共振、超声、PET扫描仪、OCT等)收集的大量数据。


2.少量处理,快速存储

整体实现思路如下:尽可能减少处理甚至不作不处理,直接存储归档,供日后分析处理。

这种方式对存储容量和速度有很高的要求,即使是最新的nvme固态也无法承受长时间大量数据的持续写入,因此一般需要使用RAID阵列进行存储。针对容量要求更大的场景,可能还会需要通过高速以太网,传输至专门的存储服务器进行保存。

核心的注意事项有两点:

(1)保证存储速度能赶上数据生成速度

(2)保证可用存储空间能存下预计生成的数据

使用这种优化方法的客户通常是专注于某个细分领域的研发工程团队,整个测试过程产生的数据量可以高达几十个TB。

根据我们的统计,比较常见的场景包括质量控制(他们希望长时间监控某些参数以验证系统是否始终符合要求)、航空航天和国防工业(监视、跟踪和分析物体或系统的变化)和通信等领域。此外,我们也见过有一些客户需求是想要连续存储扫描系统中的原始超声信号。在完成存储后,用户就会先后使用不同的算法来处理数据,然后从中提取特定信息,并试着寻找其他潜在内容。


三、TS高速数字化仪

TS数字化仪采样率高达5GS/s,可支持128个通道同步采集,具有8/12/14/16位模拟分辨率,符合目前最常用的行业标准,包含LXI、PCIe、PXIe,配套软件可以使用产品示波器、数据记录仪、数据采集系统、频谱分析仪、逻辑分析仪、码型发生器、数据流系统(FIFO)和瞬态记录仪等多种仪器功能。

wKgZomaZ1dGAZSIIAAPOW_-Yado785.png


四、结论

总的来说,数字化仪作为一种强大的数据采集设备,能够帮助用户高效地处理和分析大量数据。若想要发挥它的最大作用,用户需要选择恰当的数据处理和存储方式,而这具体取决于用户的实际项目需要,以及被采集信号的特性。希望本文能够帮助用户更好地理解和使用数字化仪,提高数据采集和处理的效率。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • adc
    adc
    +关注

    关注

    100

    文章

    7392

    浏览量

    553790
  • 数据采集
    +关注

    关注

    40

    文章

    7804

    浏览量

    119841
  • 数字化
    +关注

    关注

    8

    文章

    10310

    浏览量

    66538
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    科技推出JY-9819 PXI Express高速数字化

    JY-9819 PXI Express 高速数字化具备高速度、高质量的数据采集能力。其 4 个输入通道均支持高达 250 MS/s 的采样
    的头像 发表于 11-19 09:17 524次阅读

    高速分切机PLC数据采集远程监控系统方案

    某包装印刷企业为提升生产精度、优化生产流程、降低人工运维成本,推进智能化工厂建设,需对车间多台高速分切机实现实时数据采集、远程监控与集中管理。 现场高速分切机涵盖不同品牌、不同使用年限
    的头像 发表于 11-06 15:41 204次阅读
    <b class='flag-5'>高速</b>分切机PLC<b class='flag-5'>数据采集</b>远程监控系统方案

    设计资料:基于PCIe3.0X16的的100G光纤采集存储设备

    光纤数据采集存储板, 光纤采集存储设备, 医疗影像, VU3P板卡, 高速光纤
    的头像 发表于 10-28 10:06 271次阅读
    设计资料:基于PCIe3.0X16的的100G光纤<b class='flag-5'>采集</b><b class='flag-5'>存储</b>设备

    坤驰科技——双通道3GS/s高速数据采集

    、模拟带宽10M至8GHz、14bit垂直分辨率以及8GB板载内存 上位机支持 上位机可提供板卡的 控制、数据采集数据上传与存储功能 ,具备专业可视
    的头像 发表于 09-18 16:07 334次阅读
    坤驰科技——双通道3GS/s<b class='flag-5'>高速</b><b class='flag-5'>数据采集</b>卡

    Spectrum推出多通道GHz数字化,最高支持12通道

    Spectrum仪器今日宣布推出全新旗舰数字化产品。该系列设备具备12位分辨率,最高可支持6通道10 GS/s或12通道5 GS/s的高速数据采集。新型DN6.33x
    的头像 发表于 09-17 17:35 622次阅读

    破解设备数据孤岛:盘古信息MOM系统驱动工业数字化转型

    盘古信息MOM不仅解决设备数据采集的技术难题,更构建了从数据采集到价值转化的完整闭环。通过四大核心能力,助力工业企业打破“经验驱动”的传统模式,真正实现数据定义生产、智能优化决策的
    的头像 发表于 05-12 17:41 521次阅读
    破解设备<b class='flag-5'>数据</b>孤岛:盘古信息MOM系统驱动工业<b class='flag-5'>数字化</b>转型

    数字化能源管理系统平台有什么功能

    数字化能源管理系统平台具有多种功能,主要包括数据采集与处理、实时监测、能源分析、节能优化、设备管理、安全管理以及报表与可视等,以下是具体介绍: 1.
    的头像 发表于 04-25 09:29 635次阅读

    MES系统数据采集功能:自动设备数据采集

    车间设备数据采集是实现工厂数字化转型的重要一步。通过采集、分析设备的运行数据,我们可以更好地了解设备的状态和生产情况,从而优化生产流程、提高
    的头像 发表于 04-24 13:43 426次阅读
    MES系统<b class='flag-5'>数据采集</b>功能:自动<b class='flag-5'>化</b>设备<b class='flag-5'>数据采集</b>

    科技高速PXIe数字化JY-9827介绍

    JY-9827是一款高速PXIe数字化,支持9-bit分辨率和1.2 GS/s的采样率。该模块采用高速、大容量数据缓冲技术和
    的头像 发表于 04-10 16:47 947次阅读

    数据采集平台与数字孪生的关系

    数据采集平台和数字孪生之间存在着紧密且相互依存的关系,数据采集平台是实现数字孪生的基础和关键支撑,而数字孪生则为
    的头像 发表于 03-01 09:07 696次阅读
    <b class='flag-5'>数据采集</b>平台与<b class='flag-5'>数字</b>孪生的关系

    智能工厂的数字化应用场景

    本文探讨了智能工厂中的数字化场景,包括设备互联与数据采集、生产计划与排程优化、自动立体仓库和智能物流系统。通过这些数字化技术,智能工厂实现
    的头像 发表于 12-30 09:32 1477次阅读
    智能工厂的<b class='flag-5'>数字化</b>应用场景

    如何优化EEPROM的数据存储策略

    。它广泛应用于需要存储少量数据的场合,如微控制器、传感器和嵌入式系统中。优化EEPROM的数据存储策略
    的头像 发表于 12-16 17:21 2029次阅读

    可与MES系统集成的数据采集监控平台

    可与MES系统集成的数据采集监控平台,在制造业中扮演着至关重要的角色。这类平台通过实时采集各类数据源,对数据进行整合和统一管理,为MES系统提供准确、实时的
    发表于 12-16 15:08

    注塑机实现数据采集数字化转型

    注塑机实现数据采集数字化转型是当前制造业转型升级的重要一环。以下是对注塑机数据采集数字化转型的详细阐述: 一、注塑机数据采集的重要性 注塑机作为塑料加工行业的核心设备,其运行状态的实时监控和
    的头像 发表于 12-16 14:34 983次阅读

    装备动态数据自动采集设备与RFID:驱动数字化车场转型的力量

    一、系统功能精粹概览 在数字化车辆管理的广阔天地中,装备动态数据自动采集设备,尤其是结合RFID技术的运用,占据着举足轻重的地位。其核心价值体现在以下几个维度: 系统精髓:该系统能够敏捷捕捉设备
    的头像 发表于 12-13 14:09 881次阅读
    装备动态<b class='flag-5'>数据</b>自动<b class='flag-5'>采集</b>设备与RFID:驱动<b class='flag-5'>数字化</b>车场转型的力量