0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

工业互联网时代,我们为什么需要一个时序数据库?

格创东智 2019-01-28 13:02 次阅读
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

时间是公平的,时间也是不公平的。


公平在于时间对于所有人都是一样,不偏不倚;不公平在于随着时间的推移,事物发展的结果有可能大不相同。摩尔定律告诉我们,当事物进入正常轨道后,其发展的速度将呈现出指数级的增长。芯片如此,网络如此,数据亦如此。

图片 1.png

于是,当互联网进入下半场:工业互联网or产业互联网时代后,联所能连,万物互联,同一时间,诸多因素争相进入指数级发展轨道,形成了互联网不能承受又不能不承受之重。


人生若只如初见,何事秋风悲画扇。


对于格创东智所处的工业互联网领域来说,一个非常明显的特点就是汇聚大量工业数据,而工业数据的一个非常明显的特点就是和时间有关。


一般而言,工业数据的典型特点包括

>>>>

产生频率快

工业数据采集基本为秒级,部分高频数据采集为毫秒or微秒级,每一个采集点一秒钟内可产生多条数据

>>>>

严重依赖于采集时间

每一条数据均要求对应唯一的时间

>>>>

测点多、信息量大、数据结构相对简单

常规的实时监测系统均有成千上万的监测点,监测点每秒钟都产生数据,每天产生几十GB的数据量


工业数据是IT界“只如初见”的新问题,但是,在工业界,这早就不是问题。


在传统的工业数据采集和工业监控领域(SCADA),都需要对联网的设备进行监控,并对监控采样到的数据进行持久化。在工业领域早就有专门的数据库来完成这个任务了。


这个专门的数据库就叫做:实时数据库(此处应有掌声)。工业领域的实时数据库具有数据采集、实时数据缓存、数据回写(向设备发送指令)、采样数据归档存盘等主要功能。目前工业领域实时数据库基本上被国外厂家所垄断,价格昂贵。以著名的PI数据库为例,基础版本(只有5000个测点)就需要大约10万美元,每个数据采集接口需要6000美元。于是,不知道有多少工业版的IoT项目都被扼杀在“摇篮中”,被“秋风悲画扇”了……


上帝关门,必然开窗。


所幸,接物联网的东风,时序数据库Time Series Database,TSDB)应运而“升”。

先看看维基百科上的解释:

图片 2.png

勉强翻译一下:“时序列数据库就是用来存储时序列(time-series)数据并以时间(时间点或时间区间)建立索引的软件。


简而言之,时序数据库全称为时间序列数据库。时间序列数据库主要用于指处理带时间标签(按照时间的顺序变化,即时间序列化)的数据,带时间标签的数据也称为时间序列数据。


规范言之,时间序列数据(Time Series Data,TSD)可以用一个二元函数来表示

TSD =Metric(Timestamp,Measurement),其中:

Metric代表可以唯一标识的数据序列;

Timestamp代表时间戳;

Measurement代表被测量;


简单的说,就是这类数据描述了某个被测量的主体在一个时间范围内的每个时间点上的测量值。它普遍存在于电力、化工行业等行业以及IT基础设施、运维监控系统和物联网等各类型实时监测中。


用来存储、管理、查询、处理上述二元函数数据的数据库,则可以称之为时序数据库。


时序数据库主要以解决下面几个问题:

  • 时序数据的写入:如何支持每秒钟上千万上亿数据点的写入。

  • 时序数据的查询:又如何支持在秒级对上亿数据的分组聚合运算。

  • 时序数据的存储:解决由海量数据存储带来的成本敏感问题。

  • 时序数据的生命周期管理:工业数据的价值主要体现在及时性,因此,工业数据的生命周期管理是时序数据库的核心使命。


各位看官,麻烦度娘一下,关键字:互联网监控系统,大家就会发现小米、饿了吗等互联网巨头也都在用时序数据库实现企业级的互联网监控系统。更别提目前所有国内外主流工业互联网平台了,几乎都是采用时序数据库来承接海量涌入的工业数据。


看到这里,估计已经有很多“杠精”跃跃欲试了:凭什么强大的Oracle、PostgreSQL 等传统关系型数据库搞不定时序数据?凭什么不用HBase、MongoDB、Cassandra等先进的分布式数据库来解决工业数据问题?有什么深刻技术理由非要用这个2017年才火爆起来的时序数据库呢?请继续关注格物汇的后续精彩文章!


本文作者:格创东智首席架构师王锦博士(转载请注明作者及来源)


声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 实时数据库
    +关注

    关注

    0

    文章

    39

    浏览量

    11122
  • 智能制造
    +关注

    关注

    48

    文章

    6141

    浏览量

    79474
  • 工业互联网
    +关注

    关注

    28

    文章

    4383

    浏览量

    95995
  • 工业大数据
    +关注

    关注

    0

    文章

    72

    浏览量

    8157
收藏 人收藏
加入交流群
微信小助手二维码

扫码添加小助手

加入工程师交流群

    评论

    相关推荐
    热点推荐

    工业互联网的重要价值

    工业互联网作为新代信息通信技术与工业经济深度融合的新型基础设施、应用模式和工业生态,其重要价值体现在经济、产业、社会和技术四
    的头像 发表于 11-20 09:51 177次阅读

    工业互联网架构是怎么样的

    ,具体解析如下: 、网络层:连接物理与数字世界的桥梁 网络层是工业互联网的基础,负责实现人、机、物、系统之间的泛在互联数据高效传输。其核
    的头像 发表于 10-18 09:37 309次阅读

    工业互联网中的智能网关有什么功能

    工业互联网中的智能网关是连接物理设备与工业互联网的核心组件,具备数据采集、协议转换、边缘计算、安全防护、远程管理等多重功能,是实现
    的头像 发表于 10-14 11:00 315次阅读
    <b class='flag-5'>工业</b><b class='flag-5'>互联网</b>中的智能网关有什么功能

    工业互联网平台与数据中台的关系

    工业互联网平台与数据中台在工业数字化转型中扮演不同角色,但二者通过技术融合与能力互补形成协同效应,共同推动工业企业的智能化升级。以下从定义、
    的头像 发表于 09-26 09:45 278次阅读

    工业互联网如何破除“数据孤岛”

    工业互联网通过技术融合、标准统、生态协作和安全保障四大核心策略,系统性破解“数据孤岛”问题,实现数据在设备、系统、企业间的自由流动与价值挖
    的头像 发表于 08-27 09:16 563次阅读

    数字化转型为什么需要工业互联网

    数字化转型需要工业互联网,是因为工业互联网通过连接设备、数据和流程,为制造业及
    的头像 发表于 06-21 09:12 529次阅读

    鲲云科技入选AII工业互联网应用案例

    )重磅发布 “2023-2024 年工业互联网应用案例”,鲲云科技凭借 “基于可重构数据流AI芯片的智慧工地监管平台” 成功入选,成为推动工地安全监管数字化转型的标杆范例。
    的头像 发表于 06-16 17:12 1115次阅读

    工业互联网工业联网有什么区别

    工业互联网工业联网(IIoT)在概念、侧重点、应用范围、技术架构、数据价值等方面存在定区别
    的头像 发表于 06-12 09:32 1315次阅读

    研华科技亮相2025工业互联网大会

    研华科技受邀出席工业互联网大会,研华(中国)工业联网事业群总经理蔡奇男参与《人工智能时代工业
    的头像 发表于 05-23 15:27 825次阅读

    TDengine 发布时序数据分析 AI 智能体 TDgpt,核心代码开源

    组成部分,标志着时序数据库在原生集成 AI 能力方面迈出了关键步。 TDgpt 是内嵌于 TDengine 中的时序数据分析 AI 智能体,具备时序数据预测、异常检测、
    的头像 发表于 03-27 10:30 563次阅读
    TDengine 发布<b class='flag-5'>时序数据</b>分析 AI 智能体 TDgpt,核心代码开源

    文解析工业互联网

    电子发烧友网站提供《文解析工业互联网.pptx》资料免费下载
    发表于 02-20 16:42 1次下载

    数据库是哪种数据库类型?

    数据库种部署在虚拟计算环境中的数据库,它融合了云计算的弹性和可扩展性,为用户提供高效、灵活的数据库服务。云数据库主要分为两大类:关系型
    的头像 发表于 01-07 10:22 804次阅读

    时序数据库TDengine 2024年保持高增长,实现收入翻倍

    近日,时序数据库 (Time Series Database) TDengine 正式公布了 2024 年重大成就和发展成绩盘点。在这年中,TDengine 以持续创新的技术能力、迅猛增长的市场
    的头像 发表于 01-02 13:50 798次阅读
    <b class='flag-5'>时序数据库</b>TDengine 2024年保持高增长,实现收入翻倍