安科瑞电气股份有限公司 上海嘉定 201801

摘要：本文首先对电力大数据及其技术优势进行分析，在此基础上，从可视化、数据分析、数据库索引、数据治理、ETL等几个方面,对电力大数据分析技术及应用进行论述。期望通过本文的研究能够对促进电力大数据的应用与发展有所帮助。

关键词：电力大数据；技术；应用

       近年来，在国家政策的大力扶持下，电力行业获得快速发展，由此使得相关的行业数据发生爆发式增长，在这一背景下，电力大数据技术应运而生。通过该技术的应用，促使电力行业的整体生产经营水平获得进一步提升。借此，下面就电力大数据分析技术及应用展开探讨。

       电力大数据是大数据技术在电力行业的实践应用，涉及产、输、变、配、用、调等多个环节。电力大数据由两类数据组合而成，一类是结构化数据，另一类是非结构化数据。近年来，随着国家逐步加大智能发电的建设力度，以及对物联网技术的应用，使得电力行业中非结构化数据的比重持续增长，在量级上己经超过结构化数据。电力大数据具备大数据技术的“5V”特征，即数据量大、数据类型多、处理速度快、准确性高和价值大。电力大数据中的关键技术有数据挖掘、数据可视化、高性能计算和统计分析。

       电力系统具有复杂且庞大的架构，其中涵盖的内容非常之多，在电力系统中引入大数据技术后，为智能发电的顺利实现提供了强有力的支撑，各种数据信息的共享，使电力生产精细化管理成为可能。借助电力大数据，业务和技术人员能够在较短的时间内，对电力设备当前的运行参数与以往的运行数据进行整合、分析，为电力设备的稳定、可靠、经济运行提供保障。同时，通过电力大数据，还能为生产运行过程中的风险防范提供指导依据。

       电力大数据能够对各种不同类型的数据信息进行分析，通过对该技术的运用，可以设计出与用电需求相符的生产计划，从而为电力用户提供较为准确和经济的产品和服务，有助于节能减排目标的实现。

       所谓的图表可视化具体是指以为基础的图形和表格，对相关数据进行直观展示的方法。在图表可视化的前提下，对数据进行获取的过程中，可在相对较短的时间内，找到其中存在的问题，并借助数据的规律，对问题进行解决处理。对图表可视化系统进行构建时，需要使用以下三种可视化展示方法：折线图、柱状图、表格，其中折线图能够对某个时间段内，数据随时间变化的趋势进行描述柱状图则可通过柱状体的长度对数据的差异情况进行展示；表格的作用是对数据进行详细记录，相关的数据资源可通过搜索的方式进行获取。

       SVG是现阶段较为流行的一种图像文件格式，具体是指能够进行缩放的矢量化图形。对于不同的电力数据，SVG可以不同的颜色进行显示，由此可使数据变得直观化。在这种可视化方法下，需要对某个特定区域内的电力数据进行掌握，按照相关的参数和指标，赋予电力数据不同的颜色，并用颜色的深浅程度对电力数据的实际情况进行表示。当需要对某个时间段内，各生产单位的情况进行了解时，便可使用不同的色块进行直观呈现，如果要对其中某个数据进行调用，则可借助SVG来完成控制，由此可使数据资源的查询和使用变得更加方便。

       在电力体制改革进程不断加快的推动下，我国的发电方式越来越多，除常规的火力发电之外，水力发电、风力发电、太阳能发电、核电等，都得到了快速发展，由此使得发电领域呈现出多样化的态势。因此，通过运用电力大数据中的分析技术，可将常规电能与清洁型电能之间存在的关联性进行、具体地分析，借此来发现二者的契合点，为电力资源合并工作的开展提供依据。以风电并网为例，在合并时，会对电网的运行造成一定的影响，如谐波、线损等等，由此将会导致电网的运行可靠性下降。通过电力大数据的运用，能够对各种影响因素进行分析，据此制定出合理可行的应对策略，确保风电并网安全有序进行。

       Hadoop（海杜普）的Hive是一个较为典型的数据库系统，其能够对数据进行提取、转化、加载、查询、分析和存储。但在实际应用中发现，Hive在索引方面略显不足，很难具体地搜索电力大数据，从而导致系统的CPU资源浪费，电力大数据的分析效率也随之下降。由于电力大数据本身所具备的多维区间查询特征，从而使其在各个维度的查询上都相对比较固定，因此，可依托电力大数据进行多维索引。如，某电力系统采用的索引方式为以单位和时间两种代码为标准，通过多维度可以辅助电力大数据进行索引，由此能够将各种无用的数据信息全部滤除掉，索引效率随之提升。利用电力大数据多维索引可以构建相应的系统，该系统能够对Hive命令进行使用，并在引入解析技术的前提下，对相关的代码进行快速解析，从而进一步丰富了可索引的维度区间，由此获得的数据可存储到Hadoop当中进行处理，提高数据的利用效率。

       谐波是电网安全、稳定、可靠运行的主要影响因素之一，电力行业对谐波的治理非常重视。大体上可将谐波产生的来源归纳为以下几个方面：电源端、输配电过程、电力设备等。谐波会使各种仪表及计量装置产生误差，高次谐波还会对断路器的正常开断造成影响。因此，在对谐波进行治理时，可对电力大数据进行合理应用，依托相关数据，分析谐波源的特性，预测谐波风险，为谐波治理提供详实可靠的依据。在谐波风险分析中，电力大数据的具体应用如下：

       谐波监测数据可存储在开源数据库当中，为使从数据库中抽取的数据能够实现共享，可以引入MySQL对数据抽取结果进行存储；以相关元件和参数指标对数据表进行划分，额定电压单独成表，有功与无功功率合并在同一个数据表中，基波与谐波电流存储在同一个数据表中，这样可以为数据查询提供便利。在数据提取的过程中，基于Hadoop的虚拟机，采用Spark从开源数据库中提取数据。

       可在电力大数据中，引入与谐波计算有关的频谱文件，通过对基波和谐波电流的计算，生成谐波含量。在MySQL中，数据的传输过程如图1所示。