2.国网甘肃省电力公司信息通信公司 甘肃兰州 730030)
摘要:为贯彻落实国家大数据战略,加快构建全球能源互联网和全面建成“一强三优”现代公司目标,甘肃公司以全业务数据中心建设为契机,在公司范围内全面开展自服务大数据治理工作。
本论文主要通过对自服务电网大数据治理体系的研究,实现电网生产数据、运营数据、管理数据和外部数据等大数据平台数据的自助管理、监控和查询。
关键词:自服务电网大数据;生产数据;管理数据;
1自助服务电网大数据体系研究
(1)研究自服务电网大数据治理演进的需求、技术发展趋势
通过对各业务部门、信息部门的调研,了解实际工作中常出现的数据质量问题,并通过对业务需求的深入分析,确认自服务电网大数据治理工作总体方向;结合业务部门实际工作需求,梳理具有代表性的融合类业务项目进行专项治理,制定具体实施方案与可视化展示需求;结合业务部门需求,深化需求分析管理,确认业务规则,规范指标体系,从正向反向双向提升数据质量;建立完善健全的可视化工具支撑,制作业务数据全息全景图,建立灵活的查询和取数平台,并通过深度挖掘和超级用户培训提升大数据资产价值以及用户服务质量。
(2)研究自主服务电网大数据治理总体架构和规范体系
承接公司传统组织架构以及业务流程运行模式,确定全新数据治理工作组织结构以及各级岗位职责,固化业务流程;结合公司实际工作情况,制定自服务电网大数据治理核心领域的管理办法,明确认责机制、考核机制以及日常管理规范;在原业务系统不同数据规范的基础上,制定企业级统一数据标准,并建立数据标准的管理机制,保障数据的一致性。
2 自服务电网大数据治理关键技术研究
(1)研究基于 SG-CIM 模型的电网大数据自动关联技术
分析和梳理电网业务需求,减少电力系统安全分区对信息关联的影响,研究不同系统和应用间的信息集成。构建一体化平台,提高实时数据传输速度。以全业务数据中心为依托集成跨系统信息,针对电网领域各类业务系统问的模型表达和数据关联提供统一的标准和规范,确定数据关联的门限值,建立数据、任务及节点三者间的对应关系。优化数据放置策略及调度机制,降低数据转移和关联成本,提出数据仓库构建、数据映射和数据关联等过程实施方案。
(2)研究基于数据热度分析的电网大数据脏数据细粒度自动识别技术
研究基于前端工单信息分析和后台数据访问信息分析的电网大数据热度多维度评估及计算方法,研究数据热度分析技术;设计基于数据热度分析的电网大数据脏数据判别方法和业务规则;研究利用数据完整性、合规性、一致性等电网大数据质量业务规则判别的电网大数据脏数据判别技术;突破电网大数据自动关联匹配技术、脏数据细粒度自动识别技术。
(3)研究企业数据资产库自动构建技术
研究数据库内元数据自动标识技术,解决传统数据治理的问题。
期刊文章分类查询,尽在期刊图书馆构建一个具有管理、开发、共享和使用功能的自服务的大数据治理平台,能够实现对数据的找、供、用、治,从而一站式的解决传统数据治理在大数据时代的各种难题,为实现及时高效精准的大数据分析目标提供支撑。开展企业数据库自动构建技术及应用研究,实现“数据源”、“数据传输”、“数据应用”全业务、全数据、全流程的数据治理机制。
(4)研究多维度实时的数据资产信息展示技术
研究公司数据战略需求,分析公司业务体系,从技术、经济、市场等多层次深入分析业务开展的外部环境,根据公司业务特点和数据特点,明确数据资产信息展示的多个维度。从作业、模型、物理资源等多方面进行全面的数据资产盘点,在数据及时性、问题数据量等多个维度上制定信息评价指标。研究数据资产可视化,对数据进行业务化展示及管理,使企业经营管理者可以有效掌握数据类资产的质量状况、使用状况、数据分布等情况。
3 自服务电网大数据治理框架建设
理论体系设计以元数据管理为核心,利用数据技术实现对数据的有效控制,并通过建立专门的大数据治理中心,明确组织职责、固化工作流程、细化制度章程,有效支撑自服务电网大数据治理核心领域建设,实现电网大数据的全寿命、全流程、全过程监控。
(1)基于全业务数据中心的数据治理研究
基于全业务数据中心建设成果基础上开展自服务电网大数据治理体系研究与应用。实现面向全业务范围、全数据类型、全时间维度数据的统一存储、管理与服务。
(2)自服务电网大数据治理核心领域管理
自服务电网大数据治理核心领域从五个方面具体实施,包括数据标准管理、元数据管理、数据质量管理、数据模型管理和自服务数据管理。全面优化业务流程,实现数据的自助管理、监控和查询功能。
(3)自服务电网大数据治理保障体系设计
保障体系的设计从组织架构、业务流程以及制度章程三方面实现对五个核心领域管理内容(数据标准、数据质量、元数据、数据模型、自服务数据管理)的支撑,确保整改流程的闭环可控。
(4)用户自服务数据管理
通过统一的可视化360°数据视图提供给业务人员、技术人员,帮助用户从多角度认识企业大数据,打通业务与数据的关系壁垒,帮助用户快速找到所需数据。
4 结语
国网甘肃电力公司通过开展自助服务式数据治理体系建设,结合实际情况,设计了自服务电网大数据治理体系,有效推进了数据治理系统的深化应用,强化了数据质量、数据安全、数据生命周期和数据架构的管理,丰富了数据应用内容。使得数据治理工作持续化、常态化推进,从而提升电力企业数据管理及应用水平。
参考文献:
[1]尹蕊,余仰淇,王满意,黄文思,许元斌. 大数据环境下的电力数据质量评价模型与治理体系研究[J]. 自动化技术与应用,2017,36(04):137-141.
[2]DAMA 数据管理知识体系指南,DAMA International著马欢、刘晨等译,2017.
作者简介:
孙沛,男,汉族,江苏省沛县人,1983年7月,电力信息与通信,硕士研究生,高级工程师,兰州大学
论文作者:孙沛1,袁昊2,金铭3,柴京4,郝婷5
论文发表刊物:《电力设备》2018年第32期
论文发表时间:2019/5/16
标签:数据论文; 电网论文; 业务论文; 技术论文; 公司论文; 数据管理论文; 信息论文; 《电力设备》2018年第32期论文;