CN108052637B - 电网时标量测数据接入全生命周期实时图文监控方法 - Google Patents
电网时标量测数据接入全生命周期实时图文监控方法 Download PDFInfo
- Publication number
- CN108052637B CN108052637B CN201711388434.3A CN201711388434A CN108052637B CN 108052637 B CN108052637 B CN 108052637B CN 201711388434 A CN201711388434 A CN 201711388434A CN 108052637 B CN108052637 B CN 108052637B
- Authority
- CN
- China
- Prior art keywords
- data
- time
- access
- real
- monitoring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 41
- 238000000034 method Methods 0.000 title claims abstract description 19
- 238000005259 measurement Methods 0.000 title claims abstract description 10
- 238000009826 distribution Methods 0.000 claims abstract description 12
- 230000008859 change Effects 0.000 claims abstract description 7
- 230000005540 biological transmission Effects 0.000 claims abstract description 4
- 238000002955 isolation Methods 0.000 claims abstract description 4
- 230000009466 transformation Effects 0.000 claims abstract description 4
- 238000006243 chemical reaction Methods 0.000 claims description 13
- 230000000694 effects Effects 0.000 claims description 11
- 238000013075 data extraction Methods 0.000 claims description 7
- 230000002688 persistence Effects 0.000 claims description 7
- 238000012360 testing method Methods 0.000 claims description 6
- 230000008569 process Effects 0.000 claims description 5
- 239000003086 colorant Substances 0.000 claims description 4
- 230000036541 health Effects 0.000 claims description 4
- 238000013500 data storage Methods 0.000 claims description 3
- 238000013211 curve analysis Methods 0.000 abstract description 2
- 230000004888 barrier function Effects 0.000 description 2
- 238000013523 data management Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
- G06F16/258—Data format conversion from or to a database
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/25—Integrating or interfacing systems involving database management systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/06—Energy or water supply
Landscapes
- Engineering & Computer Science (AREA)
- Databases & Information Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- General Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Water Supply & Treatment (AREA)
- Tourism & Hospitality (AREA)
- Strategic Management (AREA)
- General Business, Economics & Management (AREA)
- Primary Health Care (AREA)
- Marketing (AREA)
- Human Resources & Organizations (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本发明属于电力系统数据库技术领域，公开了一种电网时标量测数据接入全生命周期实时图文监控方法。本发明按照统一数据编码规范规定的数据格式生成规范化的测点信息，以数据采集点为中心，根据定义唯一测点名称标识，建立统一的主网设备与配网设备模型树，打破主网设备模型树与配网设备模型树之间的孤立，建立输变配一直到采集点模型之间的关系，将实时采集数据接入时序数据库，将接入状态信息以接入监控日志的形式记录到关系数据库，分别按不同的方式进行图文展示。本发明以图文的方式更好地展示了数据流转的真实性、时效性、完整性，同时可以对流转变化状态进行曲线分析和历史反演。
Description
技术领域
本发明属于电力系统数据库技术领域，具体是涉及一种电网时标量测数据接入全生命周期实时图文监控方法。
背景技术
近年来，随着大数据时代的来临以及智能电网的全面建设提升，各业务系统所产生的实时数据规模越来越庞大，企业对打破信息壁垒，统一数据管理的需求越来越强烈。
建设数据中心，能够有效解决信息壁垒的问题，但是其功能主要是数据管理，例如过滤、统计等，对每个数据的来源以及其流转的过程则无法进行监控。因此，数据的真实性、时效性、完整性仍无法得到有效保证。
发明内容
本发明目的是：针对现有技术的不足，提供一种电网时标量测数据接入全生命周期实时图文监控方法。该方法以图文的方式更好地展示了数据流转的真实性、时效性、完整性，同时可以对流转变化状态进行曲线分析和历史反演。
具体地说，本发明是采用以下技术方案实现的，包括以下步骤：
1）按照统一数据编码规范规定的数据格式生成规范化的测点信息，以数据采集点为中心，根据定义唯一测点名称标识；
2）建立统一的主网设备与配网设备模型树，打破主网设备模型树与配网设备模型树之间的孤立，建立输变配一直到采集点模型之间的关系；
3）将实时采集数据接入时序数据库，将接入状态信息以接入监控日志的形式记录到关系数据库；
4）分别按以下方式进行图文展示：
以地图形式将整个区域的数据接入情况和各个子区域的数据接入情况实时动态展示出来，以不同颜色告警各个子区域的接入健康状况；
以驾驶舱仪表的形式将测点的总体活跃度和各个子区域接入数据测点的活跃度展示出来，实时提示接入变化状况；
以时间为轴线，数据接入量和接入情况为断面，以曲线图形式实时展现相应的数据接入状况，通过波动提示接入异常，配合异常记录数据快速分析异常原因，并通过选择时间段，拖动曲线图的时间轴，回溯整体或相应的数据接入状况。
进一步而言，所述步骤3）中接入监控日志，包括以下内容：日志编号、任务编号、当前接入次数、预计接入次数、接入的测点数、新增测点数、数据文件大小、文件时间、文件标识、文件名称、接入开始时间及接入结束时间。
进一步而言，所述步骤3）中将实时采集数据接入时序数据库，包括以下步骤：
数据抽取：利用数据总线服务，将分布在不同地域的不同系统的实时采集数据抽取到数据接入服务器；
数据转换：利用不同的数据转换插件，将抽取进来的数据解析转换成符合规范的时序数据库数据格式的数据；
数据持久：利用时序数据库提供的写入功能，将转换好的数据保存到时序数据库中。
进一步而言，在将实时采集数据接入时序数据库的过程中，进行以下监控：
数据抽取监控：监控数据链路是否畅通，数据提供的频率是否正常，提供的数据量是否正常；
数据转换监控：监控数据文件内容是否完整，格式是否符合规范，转换是否正常；
数据持久监控：监控测点数据量，数据入库是否正常。
本发明的有益效果如下：本发明基于图文技术，实时监控不同区域不同系统不同数据的接入过程，直观展示数据接入运行情况，提供不同类型的监控画面，能够有效直观了解数据接入全过程，从而为数据接入的真实性、时效性、完整性护航。
附图说明
图1 是本发明实施例的系统结构示意图。
具体实施方式
下面结合实施例并参照附图对本发明作进一步详细描述。
实施例1：
本发明的一个实施例，公开了一种电网时标量测数据接入全生命周期实时图文监控方法，主要包括以下步骤：
1）定义实时数据测点标识。按照统一数据编码规范规定的数据格式生成规范化的测点信息。以数据采集点为中心，根据省份、地区、系统对象等定义唯一测点名称标识。
2）建立统一的主、配网设备模型树，打破主网设备模型树与配网设备模型树之间的孤立，建立输、变、配一直到采集点模型之间的关系。
3）关系数据库和时序数据库的数据接入。将实时采集数据接入时序数据库；将接入状态信息以接入监控日志的形式记录到关系数据库。接入监控日志，具体包括以下内容：日志编号、任务编号、当前接入次数、预计接入次数、接入的测点数、新增测点数、数据文件大小、文件时间、文件标识、文件名称、接入开始时间及接入结束时间，如下表所示：
4）分别按以下方式进行图文展示：
通过地图的展现形式将整个区域的数据接入情况和每个地市的数据接入情况实时动态展示出来，包括接入系统、接入的数据量等，并以不同颜色告警每个地市的接入健康状况，例如绿色表示健康、红色表示中断等。如可以显示一张包含所有数据接入的区域地图，不间断侦测每条数据物理链路，将链路的实时状态以不同颜色标示某区域的数据链路是畅通还是中断，可以实时统计所有区域所有系统数据接入指标（例如：测点总数等），在指定页面位置显示所有区域指标合计，当鼠标移到某个区域时，提示框显示该区域的指标统计。
通过驾驶舱仪表的展现形式，展现测点的总体活跃度和每个地市局接入数据测点的活跃度，实时提示接入变化状况。如将平台后台实时监测所有测点的活跃率和各个系统的数据测点活跃率，以仪表的形式显示出来，当鼠标移到全景区域地图的某个区域上时，仪表显示该区域的所有接入数据测点的活跃率和属于该的各个系统的数据测点活跃率。
以时间为轴线，数据接入量和接入情况为断面，以曲线图形式实时展现每个系统的数据接入状况。通过波动提示接入异常，配合异常记录数据快速分析异常原因。可以提供区域选择栏，根据需要选择不同的监控区域，在页面上划分不同的部分，显示独立的曲线图和数据列表，分别模拟监控区域的各自系统的数据接入实况，曲线图和列表监控数据随着时间的变化而实时变化。
通过选择时间段，拖动曲线图的时间轴，回溯整体或每个地市的数据接入状况，实现历史数据曲线反演。即在流水线运行展现的界面上，提供日期选择，曲线图提供时间轴的拖拽功能，实现不同日期，不同时间点的数据接入实况回播。
本实施例还提供条件查询方式，了解某类测点或某具体测点的数据接入情况，以便及时发现问题解决问题，根据不同的组合条件，查询所需要了解的测点数据，通过已经接入测点数据的详细，为接入监控提供具体的分析依据。
为了实现将实时采集数据接入时序数据库，本实施例采取如图1所示的系统结构，包括数据抽取层、数据转换层和数据持久层的三层结构：
数据抽取层：利用数据总线服务，将分布在不同地域的不同系统的采集数据抽取到数据接入服务器。
数据转换层：利用不同的数据转换插件，将抽取进来的数据解析转换成符合规范的时序库数据格式数据。
数据持久层：利用时序数据库提供的写入功能，将转换好的数据保存到时序数据库中。
对应数据接入服务技术架构，数据接入监控也分为三层：
数据抽取监控：主要监控数据链路是否畅通，数据提供的频率是否正常，提供的数据量是否正常。
数据转换监控：主要监控数据文件内容是否完整，格式是否符合规范，转换是否正常。
数据持久监控：主要监控测点数据量，数据入库是否正常。
虽然本发明已以较佳实施例公开如上，但实施例并不是用来限定本发明的。在不脱离本发明之精神和范围内，所做的任何等效变化或润饰，同样属于本发明之保护范围。因此本发明的保护范围应当以本申请的权利要求所界定的内容为标准。
Claims (4)
1.一种电网时标量测数据接入全生命周期实时图文监控方法，其特征在于，包括以下步骤：
1）按照统一数据编码规范规定的数据格式生成规范化的测点信息，以数据采集点为中心，根据定义唯一测点名称标识；
2）建立统一的主网设备与配网设备模型树，打破主网设备模型树与配网设备模型树之间的孤立，建立输变配一直到采集点模型之间的关系；
3）将实时采集数据接入时序数据库，将接入状态信息以接入监控日志的形式记录到关系数据库；
4）分别按以下方式进行图文展示：
以地图形式将整个区域的数据接入情况和各个子区域的数据接入情况实时动态展示出来，以不同颜色告警各个子区域的接入健康状况；
以驾驶舱仪表的形式将测点的总体活跃度和各个子区域接入数据测点的活跃度展示出来，实时提示接入变化状况；
以时间为轴线，数据接入量和接入情况为断面，以曲线图形式实时展现相应的数据接入状况，通过波动提示接入异常，配合异常记录数据快速分析异常原因，并通过选择时间段，拖动曲线图的时间轴，回溯整体或相应的数据接入状况。
2.根据权利要求1中所述的电网时标量测数据接入全生命周期实时图文监控方法，其特征在于，所述步骤3）中接入监控日志，包括以下内容：日志编号、任务编号、当前接入次数、预计接入次数、接入的测点数、新增测点数、数据文件大小、文件时间、文件标识、文件名称、接入开始时间及接入结束时间。
3.根据权利要求1中所述的电网时标量测数据接入全生命周期实时图文监控方法，其特征在于，所述步骤3）中将实时采集数据接入时序数据库，包括以下步骤：
数据抽取：利用数据总线服务，将分布在不同地域的不同系统的实时采集数据抽取到数据接入服务器；
数据转换：利用不同的数据转换插件，将抽取进来的数据解析转换成符合规范的时序数据库数据格式的数据；
数据持久：利用时序数据库提供的写入功能，将转换好的数据保存到时序数据库中。
4.根据权利要求3中所述的电网时标量测数据接入全生命周期实时图文监控方法，其特征在于，在将实时采集数据接入时序数据库的过程中，进行以下监控：
数据抽取监控：监控数据链路是否畅通，数据提供的频率是否正常，提供的数据量是否正常；
数据转换监控：监控数据文件内容是否完整，格式是否符合规范，转换是否正常；
数据持久监控：监控测点数据量，数据入库是否正常。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711388434.3A CN108052637B (zh) | 2017-12-20 | 2017-12-20 | 电网时标量测数据接入全生命周期实时图文监控方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201711388434.3A CN108052637B (zh) | 2017-12-20 | 2017-12-20 | 电网时标量测数据接入全生命周期实时图文监控方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN108052637A CN108052637A (zh) | 2018-05-18 |
| CN108052637B true CN108052637B (zh) | 2021-09-21 |
Family
ID=62130652
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201711388434.3A Active CN108052637B (zh) | 2017-12-20 | 2017-12-20 | 电网时标量测数据接入全生命周期实时图文监控方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN108052637B (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112632127B (zh) * | 2020-12-29 | 2022-07-15 | 国华卫星数据科技有限公司 | 设备运行实时数据采集及时序的数据处理方法 |
| CN114036161A (zh) * | 2021-11-05 | 2022-02-11 | 神华国华（印尼）南苏发电有限公司 | 基于PowerBuilder的实时数据展示方法及装置 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102184209A (zh) * | 2011-04-29 | 2011-09-14 | 中国电力科学研究院 | 一种基于cim电网模型接口的仿真数据接入方法 |
| CN103886104A (zh) * | 2014-04-11 | 2014-06-25 | 江苏瑞中数据股份有限公司 | 一种适用于电力系统的分布式实时数据库管理系统及实现方法 |
| CN104317855A (zh) * | 2014-10-15 | 2015-01-28 | 江苏瑞中数据股份有限公司 | 一种基于实时数据库的计量生产实时监控方法 |
| CN104318481A (zh) * | 2014-05-04 | 2015-01-28 | 国家电网公司 | 一种面向电网运行的全息时标量测数据萃取转换方法 |
| CN105574075A (zh) * | 2015-11-24 | 2016-05-11 | 江苏瑞中数据股份有限公司 | 一种应用于能耗监控领域的数据混合存储方法 |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7995062B2 (en) * | 2008-03-04 | 2011-08-09 | International Business Machines Corporation | Methods for utilizing human perceptual systems for processing event log data |
-
2017
- 2017-12-20 CN CN201711388434.3A patent/CN108052637B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102184209A (zh) * | 2011-04-29 | 2011-09-14 | 中国电力科学研究院 | 一种基于cim电网模型接口的仿真数据接入方法 |
| CN103886104A (zh) * | 2014-04-11 | 2014-06-25 | 江苏瑞中数据股份有限公司 | 一种适用于电力系统的分布式实时数据库管理系统及实现方法 |
| CN104318481A (zh) * | 2014-05-04 | 2015-01-28 | 国家电网公司 | 一种面向电网运行的全息时标量测数据萃取转换方法 |
| CN104317855A (zh) * | 2014-10-15 | 2015-01-28 | 江苏瑞中数据股份有限公司 | 一种基于实时数据库的计量生产实时监控方法 |
| CN105574075A (zh) * | 2015-11-24 | 2016-05-11 | 江苏瑞中数据股份有限公司 | 一种应用于能耗监控领域的数据混合存储方法 |
Non-Patent Citations (1)
| Title |
|---|
| 面向智能电网应用的电力大数据关键技术;彭小圣 等;《中国电机工程学报》;20150121;全文 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN108052637A (zh) | 2018-05-18 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN105868373B (zh) | 电力业务信息系统关键数据处理方法及装置 | |
| CN112699175A (zh) | 一种数据治理系统及其方法 | |
| CN104700191A (zh) | 基于智能移动终端的农产品质量安全地理信息监督管理方法及系统 | |
| CN105574593B (zh) | 基于云计算和大数据的轨道状态静态检控系统及方法 | |
| CN112199433A (zh) | 一种用于城市级数据中台的数据治理系统 | |
| CN109254901B (zh) | 一种指标监测方法及系统 | |
| CN105205185B (zh) | 监控系统与管理信息系统间数据交互及数据建模的方法 | |
| CN107835107A (zh) | 一种基于电网计量拓扑和WebGis的计量展示系统 | |
| CN102591321A (zh) | 监视控制系统 | |
| CN110968624A (zh) | 一种动物疫病监测数据统计分析地理信息系统及实现方法 | |
| CN111985716B (zh) | 一种客运信息可视化的客运量预测系统 | |
| CN108694448A (zh) | Phm平台 | |
| CN108052637B (zh) | 电网时标量测数据接入全生命周期实时图文监控方法 | |
| CN117194919A (zh) | 一种生产数据分析系统 | |
| CN106407468B (zh) | 一种描述事物空间属性并基于所述描述进行查找的方法 | |
| CN114036157A (zh) | 输电线路树障监控方法、装置、计算机设备和存储介质 | |
| CN102902614B (zh) | 一种动态监测及智能引导方法 | |
| CN113506098A (zh) | 基于多源数据的电厂元数据管理系统及方法 | |
| CN107844564A (zh) | 一种通用可扩展变电站在线监测系统及其运行方法 | |
| CN112231386A (zh) | 铁路科研数据可视化交互方法及系统、设备及存储介质 | |
| CN115982213A (zh) | Bi数据分析方法、系统及存储介质 | |
| CN113901092B (zh) | 一种用于赛场运行监测的文件管理方法及系统 | |
| CN112784129A (zh) | 一种泵站设备运维数据监管平台 | |
| CN112765232A (zh) | 核电厂重大设备的数据管理方法及系统 | |
| Sedek et al. | Design and implementation of big data visualization for student housing analysis |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |