CN105139296A - 一种电网业务数据全生命周期质量管理系统 - Google Patents

一种电网业务数据全生命周期质量管理系统 Download PDF

Info

Publication number
CN105139296A
CN105139296A CN201510655614.8A CN201510655614A CN105139296A CN 105139296 A CN105139296 A CN 105139296A CN 201510655614 A CN201510655614 A CN 201510655614A CN 105139296 A CN105139296 A CN 105139296A
Authority
CN
China
Prior art keywords
data
quality
module
data quality
electrical network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510655614.8A
Other languages
English (en)
Inventor
陈晓东
潘留兴
刘敏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
State Grid Corp of China SGCC
State Grid Jiangsu Electric Power Co Ltd
Jiangsu Electric Power Information Technology Co Ltd
Original Assignee
State Grid Corp of China SGCC
State Grid Jiangsu Electric Power Co Ltd
Jiangsu Electric Power Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by State Grid Corp of China SGCC, State Grid Jiangsu Electric Power Co Ltd, Jiangsu Electric Power Information Technology Co Ltd filed Critical State Grid Corp of China SGCC
Priority to CN201510655614.8A priority Critical patent/CN105139296A/zh
Publication of CN105139296A publication Critical patent/CN105139296A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Remote Monitoring And Control Of Power-Distribution Networks (AREA)

Abstract

本发明公开了一种电网业务数据全生命周期质量管理系统，包括：电网业务数据采集模块，用于在电网业务系统的各个阶段部署信息采集点，作为数据质量检查模块的输入；数据质量检查模块，用于数据稽查以及数据过程处理检查；数据质量报告模块，负责根据数据质量检查模块的结果信息，向数据质量管理人员报告数据质量情况；数据质量问题处理模块，依据问题的严重级别启动相应的问题处理过程；数据质量问题总结模块，用于记录和总结数据质量问题处理的全过程，最终形成数据质量智能知识库。本发明解决了电网业务异常数据的溯源和定位问题，实现了数据质量的全程监控。

Description

一种电网业务数据全生命周期质量管理系统
技术领域
本发明属于计算机技术领域，涉及一种数据质量管理系统，尤其是涉及一种电网业务数据全生命周期质量管理系统。
背景技术
现阶段随着电力信息化建设的进程，数据正逐渐成为电力企业发展的基础保障。数据不仅能为电力企业决策管理提供基础信息，还能促进电力企业日常经营的正常开展。因此，电网业务数据存在质量问题，势必会影响企业的发展。目前电网业务数据质量问题可以分为以下三类：
（1）电力公司各业务部门对数据理解差异所导致的数据质量问题。由于电力企业各业务系统建设目标和出发点不同，团队的划分，理解同一业务的差异等多种原因导致对数据理解的不一致，从而造成数据质量问题。
（2）电力信息化过程中技术环节的异常所导致的数据质量问题。信息化过程包括数据创建、获取、传输、加载、使用、回收等技术环节，任一环节的异常都会造成数据质量问题。
（3）各流程设置不当所导致的数据质量问题。电网业务系统的建设往往更注重功能的实现，而忽视配套流程的制定和跟进，从而造成数据质量问题。
上述数据质量问题严重影响了电力公司的成本控制、管理与跟踪、数据安全以及服务质量等方面。因此，对电网业务数据进行全生命周期质量监控是推动电力企业更快更好发展的前提和保障。
发明内容
针对上述电网业务数据质量问题，本发明的目的是提供一种电网业务数据全生命周期质量管理系统，实现了对电网业务数据创建、获取、传输、加载、使用以及回收等各个阶段的数据质量全程监控。
本发明的目的通过以下技术方案实现：
一种电网业务数据全生命周期质量管理系统，其特征在于：该系统包括数据质量信息采集模块、数据质量检查模块、数据质量报告模块、数据质量问题处理模块、数据质量问题总结模块和数据质量智能知识库；数据质量信息采集模块依次与数据质量检查模块、数据质量报告模块、数据质量问题处理模块、数据质量问题总结模块连接，数据质量问题总结模块用于记录和总结数据质量问题处理的全过程，并将数据存入数据质量智能知识库，数据质量信息采集模块与数据质量智能知识库连接。
进一步，所述数据质量信息采集模块，用于在电网业务系统的各个阶段部署信息采集点，作为数据质量检查模块的输入；数据质量信息采集模块将信息采集点前移部署到电网业务系统与外部业务系统的接口上，及时发现数据传输中的问题，保障电网业务系统的数据质量；同时在电网业务系统的数据处理的过程中部署信息采集点，支持对数据质量的全程监控。
所述数据质量检查模块用于数据稽查以及数据过程处理检查；数据质量检查模块根据元数据库中预先配置的规则、算法和质量检查度量，对数据和数据处理过程的正确性、合理性进行多角度的检查稽核，及时发现数据质量问题。
所述数据质量报告模块根据数据质量检查模块的结果信息，向数据质量管理人员报告数据质量情况；根据检查环节的结果信息，以告警的形式生成数据质量问题检查报告。
所述数据质量问题处理模块依据问题的严重级别启动相应的问题处理过程；将报告环节生成的检查报告发送给源数据所在业务系统的管理人员，由其解决发现的数据质量问题。
所述数据质量智能知识库存储数据质量管理过程中对质量问题的识别、诊断和处理结果的记录信息，作为解决数据质量问题的知识共享。
本发明在电力系统数据处理主要阶段设置数据质量监控点，实现了从底层源系统数据创建、数据获取、数据传输、数据加载、数据使用直至数据回收的数据质量全程监控。
本发明的有益效果在于，解决了电网业务异常数据的溯源和定位问题，节省了电力公司大量的人力、物力和财力投入，提高了员工的工作效率，实现了数据质量的全程监控。
附图说明
图1为本发明实施中所构建的数据智能管理系统的结构框图。
具体实施方式
为进一步解释本发明的技术方案，下面结合附图详细说明本发明。
如图1所示，一种电网业务数据全生命周期质量管理系统，该系统包括数据质量信息采集模块、数据质量检查模块、数据质量报告模块、数据质量问题处理模块、数据质量问题总结模块和数据质量智能知识库；数据质量信息采集模块依次与数据质量检查模块、数据质量报告模块、数据质量问题处理模块、数据质量问题总结模块连接，数据质量问题总结模块用于记录和总结数据质量问题处理的全过程，并将数据存入数据质量智能知识库，数据质量信息采集模块与数据质量智能知识库连接。
数据质量信息采集模块，将信息采集点前移部署到电网业务系统与外部业务系统的接口上，及时发现数据传输中的问题，保障电网业务系统的数据质量；同时在电网业务系统的数据处理的主要过程中部署信息采集点，支持对数据质量的全程监控。
数据质量检查模块，根据元数据库中预先配置的规则、算法和质量检查度量，对数据和数据处理过程的正确性、合理性等进行多角度的检查稽核，及时发现数据质量问题。
数据质量报告模块，根据检查环节的结果信息，以告警的形式生成数据质量问题检查报告。
数据质量问题处理模块，主要是将报告环节生成的检查报告发送给源数据所在业务系统的管理人员，由其解决发现的数据质量问题。
数据质量智能知识库，作为解决数据质量问题的知识共享，主要是存储数据质量管理过程中对质量问题的识别、诊断和处理结果的记录信息。
本发明在电力系统数据处理主要阶段设置数据质量监控点，实现了从底层源系统数据创建、数据获取、数据传输、数据加载、数据使用直至数据回收的数据质量全程监控。
本发明的工作原理详述如下：
首先在电力数据处理的主要环节上设置数据采集点，启动数据质量检查模块对数据及其处理过程进行检查稽核；然后针对数据质量检查环节的结果信息，由数据质量报告模块以告警的形式生成检查报告；接着数据质量问题处理模块根据问题的严重级别，对数据质量问题进行处理；最后，总结与记录数据质量问题，并形成数据质量智能知识库。

Claims (6)

1.一种电网业务数据全生命周期质量管理系统，其特征在于：该系统包括数据质量信息采集模块、数据质量检查模块、数据质量报告模块、数据质量问题处理模块、数据质量问题总结模块和数据质量智能知识库；数据质量信息采集模块依次与数据质量检查模块、数据质量报告模块、数据质量问题处理模块、数据质量问题总结模块连接，数据质量问题总结模块用于记录和总结数据质量问题处理的全过程，并将数据存入数据质量智能知识库，数据质量信息采集模块与数据质量智能知识库连接。
2.根据权利要求1所述的电网业务数据全生命周期质量管理系统，其特征在于：所述数据质量信息采集模块，用于在电网业务系统的各个阶段部署信息采集点，作为数据质量检查模块的输入；数据质量信息采集模块将信息采集点前移部署到电网业务系统与外部业务系统的接口上，及时发现数据传输中的问题，保障电网业务系统的数据质量；同时在电网业务系统的数据处理的过程中部署信息采集点，支持对数据质量的全程监控。
3.根据权利要求1所述的电网业务数据全生命周期质量管理系统，其特征在于：所述数据质量检查模块用于数据稽查以及数据过程处理检查；数据质量检查模块根据元数据库中预先配置的规则、算法和质量检查度量，对数据和数据处理过程的正确性、合理性进行多角度的检查稽核，及时发现数据质量问题。
4.根据权利要求1所述的电网业务数据全生命周期质量管理系统，其特征在于：所述数据质量报告模块根据数据质量检查模块的结果信息，向数据质量管理人员报告数据质量情况；根据检查环节的结果信息，以告警的形式生成数据质量问题检查报告。
5.根据权利要求1所述的电网业务数据全生命周期质量管理系统，其特征在于：所述数据质量问题处理模块依据问题的严重级别启动相应的问题处理过程；将报告环节生成的检查报告发送给源数据所在业务系统的管理人员，由其解决发现的数据质量问题。
6.根据权利要求1所述的电网业务数据全生命周期质量管理系统，其特征在于：所述数据质量智能知识库存储数据质量管理过程中对质量问题的识别、诊断和处理结果的记录信息，作为解决数据质量问题的知识共享。
CN201510655614.8A 2015-10-12 2015-10-12 一种电网业务数据全生命周期质量管理系统 Pending CN105139296A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510655614.8A CN105139296A (zh) 2015-10-12 2015-10-12 一种电网业务数据全生命周期质量管理系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510655614.8A CN105139296A (zh) 2015-10-12 2015-10-12 一种电网业务数据全生命周期质量管理系统

Publications (1)

Publication Number Publication Date
CN105139296A true CN105139296A (zh) 2015-12-09

Family

ID=54724631

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510655614.8A Pending CN105139296A (zh) 2015-10-12 2015-10-12 一种电网业务数据全生命周期质量管理系统

Country Status (1)

Country Link
CN (1) CN105139296A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108073686A (zh) * 2016-11-18 2018-05-25 埃森哲环球解决方案有限公司 具有通用元数据存储库的闭环统一元数据架构
CN110399363A (zh) * 2019-06-25 2019-11-01 云南电网有限责任公司玉溪供电局 一种问题数据全生命周期数据质量管理方法及系统
CN111143623A (zh) * 2019-12-31 2020-05-12 科技谷（厦门）信息技术有限公司 一种大数据环境下的数据质量监控方法
CN113537824A (zh) * 2021-08-03 2021-10-22 南方电网数字电网研究院有限公司 一种电网数据全链路监控系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6922684B1 (en) * 2000-08-31 2005-07-26 Ncr Corporation Analytical-decision support system for improving management of quality and cost of a product
CN101894319A (zh) * 2010-06-28 2010-11-24 中国烟草总公司湖南省公司 一种烟草企业数据质量管理系统及方法
CN102708149A (zh) * 2012-04-01 2012-10-03 河海大学 数据质量管理方法和系统
CN104134121A (zh) * 2014-07-30 2014-11-05 国家电网公司 一种电网信息系统业务数据可视化的实现方法
CN104462314A (zh) * 2014-11-28 2015-03-25 国家电网公司 电网数据处理方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6922684B1 (en) * 2000-08-31 2005-07-26 Ncr Corporation Analytical-decision support system for improving management of quality and cost of a product
CN101894319A (zh) * 2010-06-28 2010-11-24 中国烟草总公司湖南省公司 一种烟草企业数据质量管理系统及方法
CN102708149A (zh) * 2012-04-01 2012-10-03 河海大学 数据质量管理方法和系统
CN104134121A (zh) * 2014-07-30 2014-11-05 国家电网公司 一种电网信息系统业务数据可视化的实现方法
CN104462314A (zh) * 2014-11-28 2015-03-25 国家电网公司 电网数据处理方法及装置

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108073686A (zh) * 2016-11-18 2018-05-25 埃森哲环球解决方案有限公司 具有通用元数据存储库的闭环统一元数据架构
CN108073686B (zh) * 2016-11-18 2022-01-25 埃森哲环球解决方案有限公司 具有通用元数据存储库的闭环统一元数据架构
CN110399363A (zh) * 2019-06-25 2019-11-01 云南电网有限责任公司玉溪供电局 一种问题数据全生命周期数据质量管理方法及系统
CN110399363B (zh) * 2019-06-25 2023-02-28 云南电网有限责任公司玉溪供电局 一种问题数据全生命周期数据质量管理方法及系统
CN111143623A (zh) * 2019-12-31 2020-05-12 科技谷（厦门）信息技术有限公司 一种大数据环境下的数据质量监控方法
CN113537824A (zh) * 2021-08-03 2021-10-22 南方电网数字电网研究院有限公司 一种电网数据全链路监控系统

Similar Documents

Publication Publication Date Title
WO2021196521A1 (zh) 远程运维管理系统及方法
Yan et al. A fog computing solution for advanced metering infrastructure
US20150067410A1 (en) Hardware failure prediction system
US20170185971A1 (en) Maintenance method for facility
CN105139296A (zh) 一种电网业务数据全生命周期质量管理系统
CN104766151A (zh) 一种用于电力交易数据仓库的质量管控方法及其管控系统
CN110543767A (zh) 一种针对开源组件漏洞自动化监控方法及系统
CN107491371B (zh) 一种监控部署的方法以及装置
CN104268061A (zh) 一种适用于虚拟机的存储状态监控机制
CN105243004A (zh) 一种故障资源检测方法及装置
US11526406B2 (en) Method and system for implementing a backup validation engine
CN103348557B (zh) 现场响应系统
CN111444067A (zh) 一种基于规则引擎的配置化系统监控方法、装置及设备
CN105183619A (zh) 一种系统故障预警方法和系统
CN103856354A (zh) 一种集群存储系统日志统一管理实现方法
CN109660389A (zh) 一种it资产管理方法及装置
CN112711493A (zh) 一种场景化根因分析应用
CN111628924B (zh) 电子邮件的发送方法、系统、存储介质以及电子设备
Wu et al. An Auxiliary Decision‐Making System for Electric Power Intelligent Customer Service Based on Hadoop
CN105488656A (zh) 一种电网分县局继电保护管理系统功能模块动态配置技术
CN104539449A (zh) 一种故障信息处理方法与相关装置
CN104063294A (zh) 一种Linux系统备份和恢复方法
CN116071049A (zh) 储能设备故障排除方法、装置、计算机设备和存储介质
CN110968456A (zh) 分布式存储系统中故障磁盘的处理方法及装置
CN117806899A (zh) 数据监控分析方法、装置、服务器、运维系统及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20151209