摘要:电力行业是我国的基础性行业,是国民经济建设的基础。而且随着人们生活水平的提高,对于电力的需求越来越大。随着这种需求的增大,电网的负担也越来越大,管理中出现的问题也越来越多。所以,我们应该采取科学合理的管理系统,随着信息技术的广泛使用,数据挖掘技术被应用到电网运营监控中,给电力管理带来了一定的便利,促进了电力行业的发展。
关键词:数据挖掘技术;电力行业;过程监控;应用
1导言
数据挖掘技术在电网运营监控中的应用可以给电力企业的管理带来很大的便利,作为信息技术的产物,数据挖掘技术给我们带来了有利的影响。不仅是在电网运营监控中,在其他很多数据处理的工作中,该项技术也可以被很好的应用,进而提高管理的效率,促进行业的现代化发展,从而带动国民经济的良好发展。
2数据挖掘技术的概述
数据挖掘(Data M ining),简称 DM ,是一种基于现代化计算机信息技术基础上的数据处理技术。该技术主要是可以实现自动的有效数据的筛选。在数据库的基础上,可以自动的智能的将有效的信息筛选出。而这种作用可以分为两个方面,一方面,数据挖掘可以在大量的,纷繁复杂的数据中将有价值的数据筛选出来,另一方面,数据挖掘可以在不完全的模糊的数据中提取出对我们有价值的潜在的数据。可以说,它是所有信息处理工作的第一步,任何的信息处理工作都需要对有效信息进行一次筛选,这样可以节省一定的时间,提高信息处理的效率。比如数据的统计分析,知识的发现。
3电力监控数据分析的特点
3.1数据冗余量大、类型繁杂多样,价值密度相对较低。以无人机、人力巡线、电力工况实时采集为手段获取的动态数据序列,类型复杂多样,从文本、声音、图片到视频,数据量大,格式难以标准化处理,对电力系统数据分析构成了一定的限制。
3.2数据规模相对较大,传统手段难以快速处理。电力运营监控系统涉及数据采集、信息传输与分析、设备故障排查诊断、故障影响风险评估等诸多方面,数据采集信息量巨大,且规范指标相对较多,当前传统数据分析软硬件难以快速运算处理,必须依靠云计算、分布式处理系统等符合大数据条件的信息并行处理技术。
3.3数据资源共享整合程度较低,影响了行业整体规划分析的精准度。由于当前各电力运营监控系统相互分散独立,数据控制中心同各基础节点之间通信标准存在差异,数据的共享利用程度相对较低,存在多源异构壁垒,难以满足现代智能化、数字化集成的要求。针对上述问题,可采用基于大数据背景的相关信息处理技术来尝试解决,即数据挖掘技术与分布式并行计算技术。其中,数据挖掘(Data mining)即从多源数据信息中,通过BP神经网络、模糊集、机器学习、统计分析等方法来检索数据背后的资源,有助于发现电力系统数据的潜在规律;分布式并行计算,即针对海量庞大的电力运营状态数据,将其分割为许多小模块区间,分别交由不同的高性能计算机来进行分布式处理,按照运行方式的差异,划分为计算机集群系统与网络系统,由于分布式运算本身内部工序分层进行,存在异构,但各层内部对外公开,通过API/SDK等相互调用管理,有助于对大量电力运营状态数据快速进行分类异构处理,提升电力安全监督的效率。
4数据挖掘的需求
图1
4.1 主要业务
人力资源管理信息系统建设的核心是全面支撑人资集约化,主要体现在 ERP 系统中,对人力资源各个模块的管理,最终实现人事和劳动等相关方面的报表的数据统计。其实分析数据挖掘在电网运营管理中的主要业务,就是需要从 ERP 系统的各个管理方面入手。而在系统中,除了人力资源管理,最重要的就是财务的管理。员工的工资,成本管理,资产监控等模块的财务统计分析是财务管理中的数据挖掘统计的需求。进行财务的系统管理可以提高企业的财务运转的能力,提高企业的运营效益。另一方面,物资管理也是企业管理的一个重要部分,而物资集约化管理也是主要业务之一。这其中包括了物资的计划、采购、库存、配送和废旧回收,一定程度上对业务的标准进行了完善,对业务的具体执行方法进行了统一规范。这样使企业的整个管理体系更加完善。
4.2 运营监控平台概述
要想实现数据挖掘的功能模块的全面实现,就需要使用大量的数据。所以需要在电力企业的所有管理系统中提取数据,主要是ERP 系统,生产管理系统,物资分析评估等。进行完数据的提取后,就要对物料的使用情况进行分析。对地区的各个等级的电网系统的各方面的物资使用情况分别进行分析,而且根据不同等级地区的不同特点,各个模块所包含的内容也有所不同,但都包含公司代码,维修日期,电压等级等基本的参数。根据需要,我们以时间为顺序进行数据挖掘,可以实现对数据的统计分析和预测分析等多种分析方式。
4.3 系统需求
系统的需求分为功能需求和非功能需求。在功能需求中终端客户可以根据一定的条件进行检索,在自动检索中,要根据不同的检索形式,不同的检索要求设置不同的程序算法。而且根据数据挖掘的功能和要达到的目的来设置过滤的数据条件,对数据进行筛选。除了这些基础的设置,我们还要采取一定的系统支持,主要采用ETL 系统支持,最终选用合适的展现的终端,终端可以根据对清晰度的要求来自行选择,整个系统就可以进行自动的运算与执行,达到我们所要求的目的。而系统的非功能需求就是指除了系统的基本运行之外的,主要是单个系统与国家电网数据仓库的结合,完成不同层次的数据库的建设。而在建设中主要要遵守通用性原则和适应性原则以及高效性的原则,这样就可以实现不同背景下的不同客户的需求,并且在一定程度上缩短工作时间,提高工作效率。
5数据挖掘技术的应用
5.1 构建系统框架
在电力企业的运营监控平台内,通过数据挖掘技术,将各层面、各角度的数据信息进行整合,并在数据通道的连接作用下,传导到数据处理中心,利用显示终端设备对其进行分析与处理。在这一数据处理的过程中,主要覆盖了源数据、数据仓库、显示终端这三个部分,并在其连接与配合的作用下,发挥出系统的功能优势,构建起了科学的数据系统框架。源数据在经由数据通道传导到终端显示设备,并完成数据挖掘处理的这一过程,可以对所有涵盖的信息资料进行筛选,并从中剔除无效数据,精选出具有优势指导性的数据内容,实现在终端设备上的合理利用。在数据挖掘技术的作用下,使企业在监控过程中的信息处理效率得到强化,并完成了整体系统管理工作中的核心环节,实现了运行信息的高效整合。值得注意的是,在对挖掘、筛选出的数据信息进行分析处理的工作中,要根据实际情况对终端处理系统进行选择,在系统监测、营运分析、协调控制、综合管理、全景展示这五个方面,对筛选的数据资料进行处理,在完成不同的工作内容的同时,满足过程监控中的不同需求。
5.2 建立数据仓库
数据仓库作为系统框架下的内容,属于非功能性需求,但也在具体的监控工作中发挥着一定的作用。在结构上由操作数据存储(ODS)与数据仓库/数据挖掘(DW/DM)两部分组成。在功能上,ODS 将业务国际内容作为基础,并通过实体-联系(E-R)模型对其操作过程进行处理,形成事物数据与主数据两部分。在结构上,ODS 层应与原系统保持一致性,在表格的设计中,将两者的数据内容进行整合,以满足监控工作中的特殊需要。DW/DM 在结构上,属于多维度的数据库,在不同的数据需求内容中,表现出差异性的工作方式。然而,在基本的概念内容上,所有维度中的根数据关系都以包含的关系为设计基础,使检索和应用具有较高的简便性。
5.3 设计数据挖掘的模型与过程
在完成整体框架结构的设计工作后,为了保证数据挖掘工作的顺利展开,应当对数据挖掘的计算方法进行确认,并重点关注选择的方法与设计的科学性,使系统能正常的发挥功能作用。在数据挖掘的过程中,可以根据流程顺序将其划分为具体的两个部分,即从数据源传输到 ODS 层、从 ODS层传导到 DW/DM 层,这个两个步骤下的传导都是在 ETL工具的作用下实现的。从系统的角度进行分析,在完成数据传输的过程中,需要在数据源、映衬关系、数据目标,三点要素的共同作用下完成。在内容上,数据源是待处理的数据信息,总量大,种类丰富,但其中包含了有效信息与无用信息;映衬关系是进行数据处理过程中的计算方法,指代实现数据目标的筛选过程;数据目标是指通过数据计算剔除无效数据之后得到的具体数据表格,其中,只会对有效数据源进行规则陈列。
6大数据时代电力监控系统的数据处理
6.1 监控数据的类型
6.1.1 基础型数据
电力运营监控系统中的基础数据是指在系统运行过程中形成的基础数据信息,其主要内容有电流大小、电能大小以及电流稳定性等。
6.1.2 电力企业的运营数据
运营数据是指电力企业的生产过程中形成的数据信息,其中包括电力销售量、电量交易价格以及用电数据等。电力企业通过对这些数据的分析处理,可以发现电力系统运行过程中需要着重关注的问题。
6.1.3 电力企业管理数据
管理数据主要是指 ERP、协同办公等数据,这些数据通常只能在特定的条件下同步与共享,对这些数据的分析处理能够方便各部门供电服务工作的有序开展。
6.2 对于监测异动数据的处理
在电力系统运行时,异常情况的产生会进一步形成异常数据,所以,必须要及时对异常数据进行处理,这样有利于提升电力企业供电服务以及电力管理的工作效率,对发现的问题及时采取措施解决。电力系统出现数据异常通常表现在以下几个方面:①业务方面的异动。业务方面出现的异动一般是指在电力业务方面,部分电力数据出现异常的变化,进而产生问题。②接口方面的异动。在数据传输时,如果发现数据接口产生异常,接口就会发生异动。③数据质量方面的异动。按照配置规则,及时并准确地对数据接入进行校验,针对校验结果,形成的异动信息。
7电力企业一体化整合集成平台
在十九大提出的“推动信息化与工业化深度融合”的背景下,各个电力企业都积极融入大数据时代,通过信息化手段提升电力企业的核心业务模式。电力系统信息化与智能电网建设相辅相成,电网信息化在大数据时代的背景下已逐渐显现出顽强的生命力与较大的发展潜力,许多电力企业通过建立集团统一的信息化生产管理平台,在信息化的基础上,逐步将大数据处理统一应用于集团层面,建立了完备的统一生产系统与多业务平台。这种生产系统与多业务平台从本质上来说均属于大数据时代背景下的数据集成分析处理平台。从系统架构层面看,无论是涉及数据存储的数据架构,还是涉及数据分析处理的技术和应用架构及上层业务架构,均与大数据的抽取与集成、分析、解释技术密切相关。因此,大数据时代的电力企业信息化建设需要分别从上述角度进行深入考虑,使大数据集成和分析平台高效、易用并且可扩展。
8结语
在电网运营监控的建设过程中,应用数据挖掘技术,可以通过构建系统框架、建立数据仓库、设计数据挖掘的模型与过程,实现对电力行业过程监控的升级,实现电力企业管理内容与科学性提升的同时,提升了管理的效率水平,为加快电力行业的现代化建设作出了显著贡献。
参考文献:
[1]赖晨捷. 数据挖掘技术在电厂厂级监控信息系统中的应用实施[D].上海交通大学,2014.
[2]申培培. 数据挖掘技术在电力精益生产管控系统的应用研究[D].华北电力大学,2014.
[3]许林生. 基于数据挖掘的电力调度管理系统设计与实现[D].电子科技大学,2013.
论文作者:刘祥波,李毅,陈科成,徐延波
论文发表刊物:《电力设备》2019年第5期
论文发表时间:2019/7/8
标签:数据论文; 数据挖掘论文; 系统论文; 电力论文; 技术论文; 信息论文; 电力企业论文; 《电力设备》2019年第5期论文;