【节能学院】浅谈打造泛在电力物联网大数据平台-电子发烧友网

摘要：随着社会经济和信息化的发展，物联网服务平台也得到了迅猛的发展，这也标志着大数据技术时代接踵而来，并且渗透到了我们生活中的各个方面，由于人们对于信息化服务的要求也在不断提高，而大数据技术具有复杂性和多样性的特点，进而物联网服务平台的发展就需要要有效借助大数据技术。本文分析了大数据技术以及物联网服务平台的含义，找出了两者之间的关系，并对泛在电力物联网大数据平台的运用进行了探究。

关键词：泛在电力物联网；大数据平台；能源物联网平台

大数据技术在物联网产业中的应用价值

现如今，物联网的架构主要包括：感知层、网络层和应用层。感知层能够采集信息、识别物体等感知功能，从而形成大量数据。比如微博每天评论功能可以达到1.2亿条评论，上传新的短片和视频近800万个，将这样庞大的数据的信息汇集在一起，能够形成PB级别的数据量，物联网产业凭借PB级别的数据量，能够掌握消费者的整体用户细习惯。物联网的网络层能够实现数据信息的传输和交流，网络层是基于感知层收集到的数据，进行分析、加工，挖掘用户的喜好、习惯，从众多的信息中找到共性，并对产品做出调整和优化，来满足不同用户的需求，实现定制化服务，而这也是物联网应用大数据技术的目的。从物联网产业的角度来讲，大数据技术可以为物联网提供从客户到决策方面的各类商业信息，进而促使物联网产业不断发展。

大数据与物联网的关系

大数据丰富物联网应用

大数据发展下的物联网，让大数据的价值得到了很好的体现，在物联网技术应用中，通过搭建遥感勘测、智能建筑、智能运输、检测保护等信息手段，收集大数据，然后对收集的数据进行分析，把有用的数据筛选出来形成有价值以及有用的信息，实现其作用。一家顶级汽车公司，通过使用遥感技术来识别车主的身份，该技术可以有效记忆车主的重量、开车姿势等一系列的信息，如果出现和这些数据不吻合的人驾驶车辆，传感器就会把信息反馈给车主，避免车辆被盗。大数据技术是物联网中必不可少的技术手段，不仅仅是收集各种数据，对数据进行分析处理以后，找出问题来完善物联网系统，它也使得物联网的应用更加的丰富多彩。

物联网促进大数据

我们目前正处于大数据时代，物联网的发展，产生数据的终端由PC向包含PC在内的智能手机，平板电脑等多样化的终端，以及利用各行业、各领域的感知设备，快速入网并且汇总在一起，物联网中传感器把各种各样的信息转化成电信号，然后利用网络输送到上层应用系统，物联网在很短的时间内就能够产生大量的信息，在全世界的物联网上，进而产生大量的数据。大量的非结构化的数据快速增长的趋势已经在悄然形成。然而这些数据的增长并不是线性的，它是随着越来越多的传感器的研究、制造、使用，数据量会产生一种不可阻挡的指数性增长趋势。

构建相适应的大数据平台

随着泛在电力物联网的加快建设，现有的互联网大数据技术平台将遇到巨大的挑战，因为电力数据规模将增加几个数量级，数据分析的量也更多，实时性要求也更高。因此，需要进一步加大信息技术的创新力度，构建和完善适应泛在电力物联网建设需求的大数据平台。

这个新一代的大数据平台，要有以下几个特点：充分利用泛在电力物联网的数据特点，在技术上做各种优化，大幅度提高数据插入、查询的性能，降低电网运营成本；需要能实时处理各种数据插入、查询请求，提升电网运行效率；需要是水平扩展的，随着数据量的增加，只需要增加服务器扩容即可；支持边缘计算与云计算的边缘协同；需要是易于维护的，降低对运维人员的要求；需要是开放的，有业界流行的标准SQL接口，便于各种应用集成；需要通过Python、R或其他接口来方便集成各种机器学习、人工智能算法。

当前，国内外诸多互联网企业已经注意到物联网兴起后，传统的大数据技术正面临新的考验和挑战，并开始着手研发新一代大数据平台。相信随着泛在电力物联网建设不断加快，必将构建新一代的能源电力大数据平台，从而进一步挖掘和利用好电网的数据资源，提升电网运营的效率和效益，保障电网安全稳定运行，为社会提供新的应用和服务。

泛在电力物联网的数据量将大幅增加

电力行业历来重视数据和信息技术，从上世纪80年代起，就采用实时数据库处理发电以及电网采集的各种数据。但随着电网规模的扩大，数据采集量的大幅增加，传统的实时数据库和IT架构已经无法满足海量数据的处理需求。最近几年，电力行业开始采用互联网行业的大数据平台技术，较典型的就是将Kafka、Hadoop、HBase、Spark、Redis等技术集成在一起处理海量数据。比如智能电表的用电信息采集系统、电费的计算等，都采用这类方案。

从配网的情况来看，即使采集点和采集频率不显著增加，但以D5000、CC2000为代表的主流产品，受限于历史数据处理能力，依然只能围绕实时采集数据、历史断面数据构建应用，拓扑分析技术无法在时间维度纵向扩展。

电网数据采集及监控系统（SCADA）作为物联网的一部分，不但要看实时数据，还需要看历史数据，不单需要实时监控，更需要故障预警、趋势分析、运营指标分析、效率分析等。通过快速存取、分析高频采集数据，将为电网的运行提供更准确的数据决策支撑。

另一方面，泛在电力物联网与通用的物联网一样，不仅会存在云端的数据中心，也会存在边缘节点。这些边缘节点具备一定的计算和存储能力，能进行数据的预处理和缓存，大幅缓解数据中心平台的压力，而且能更好地保证边缘节点覆盖的区域有更好的数据实时响应能力，更好地支撑本地业务实时智能化决策与执行。但是边缘计算与云计算需要通过紧密协同才能更好地满足各种需求场景的匹配，从而提高边缘计算和云计算的应用价值。

采集点的增加和采集频次提高，能带来什么样的效益呢？以智能电表为例，如果将所有电表的数据采集频次提高到1次/15分钟，电网将实现对每个台区线损的实时监测，而不是现在的T-1模式，从而对异常线损实时处理。同时，对输电线路故障实时监测，再也无需客户上报，大大提升运维效率和服务质量。

以Hadoop体系为代表的互联网大数据解决方案，主要处理的是互联网领域的非结构化数据，比如爬虫数据、微博与微信数据等。但是，泛在电力物联网的数据与互联网数据有显著不同的特点，表现在几个方面：数据都是时序的，由传感器和设备不断产生，形成一个数据流；除视频、图像外，都是结构化的数据；数据是机器日志类型的，不会有删除或更新的动作；数据是有保留时长的，到期删除；数据流量是平稳可预测，知道测点数、采集频率，能较为准确估算流量大小；数据需要进行实时计算、分析；数据的分析、计算一般都是基于某一个时间段和地域进行；数据量巨大，一天产生几百亿条记录。

除数据特征不一样之外，在数据处理上，泛在电力物联网与典型的互联网相比，还有不一样的需求。比如插值计算、数学函数计算以及某个具体时间点的断面数据等。而且这些数据的处理往往与采集设备的管理直接挂钩，需要依据采集设备的归属、地域以及其他属性进行各种分类统计。

概述

Acrel-EIoT能源物联网开放平台是一套基于物联网数据中台，建立统一的上下行数据标准，为互联网用户提供能源物联网数据服务的平台。用户仅需购买安科瑞物联网传感器，选配网关，自行安装后扫码即可使用手机和电脑得到所需的行业数据服务。

该平台提供数据驾驶舱、电气安全监测、电能质量分析、用电管理、预付费管理、充电桩管理、智能照明管理、异常事件报警和记录、运维管理等功能，并支持多平台、多语言、多终端数据访问。

应用场所

本平台适用于公寓出租户、连锁小超市、小型工厂、楼管系统集成商、小型物业、智慧城市、变配电站、建筑楼宇、通信基站、工业能耗、智能灯塔、电力运维等领域。

组网结构

平台功能

可定制驾驶舱

可定制化的驾驶舱：可根据客户的行业特性，行业需求，经过培训的工程或调试人员自行绘制客户所需的驾驶舱页面。

例如下图所示的智慧物业驾驶舱，内容有：预付费、充电桩、电梯、空调、照明等设备管理、能耗统计、收益统计、运维情况等。其中百度地图可以选配成BIM建筑模型，任何传感器报警时可以在BIM模型中预警显示。

电力集抄

电力集抄模块可以实现对各种监测数据的查询、分析、预警及综合展示，以保证配电室的环境友好。在智能化方面实现供配电监控系统的遥测、遥信、遥控控制，对系统进行综合检测和统一管理；在数据资源管理方面，可以显示或查询供配电室内各设备运行（包括历史和实时参数，并根据实际情况进行日报、月报和年报查询或打印，提高工作效率，节约人力资源。

变压器监控

配电图

能耗分析

能耗分析模块采用自动化、信息化技术，实现从能源数据采集、过程监控、能源介质消耗分析、能耗管理等全过程的自动化、科学化管理，使能源管理、能源生产以及使用的全过程有机结合起来，运用先进的数据处理与分析技术，进行离线生产分析与管理，实现全厂能源系统的统一调度，优化能源介质平衡、有效利用能源，提高能源质量、降低能源消耗，达到节能降耗和提升整体能源管理水平的目的。