CN113537824A - 一种电网数据全链路监控系统 - Google Patents
一种电网数据全链路监控系统 Download PDFInfo
- Publication number
- CN113537824A CN113537824A CN202110886449.2A CN202110886449A CN113537824A CN 113537824 A CN113537824 A CN 113537824A CN 202110886449 A CN202110886449 A CN 202110886449A CN 113537824 A CN113537824 A CN 113537824A
- Authority
- CN
- China
- Prior art keywords
- monitoring
- data
- module
- power grid
- monitoring module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012544 monitoring process Methods 0.000 title claims abstract description 263
- 238000007726 management method Methods 0.000 claims abstract description 97
- 238000000034 method Methods 0.000 claims abstract description 47
- 230000008569 process Effects 0.000 claims abstract description 47
- 230000002159 abnormal effect Effects 0.000 claims abstract description 41
- 230000006870 function Effects 0.000 claims abstract description 29
- 238000012423 maintenance Methods 0.000 claims abstract description 23
- 238000012545 processing Methods 0.000 claims abstract description 18
- 238000004458 analytical method Methods 0.000 claims abstract description 16
- 238000004364 calculation method Methods 0.000 claims abstract description 16
- 238000003860 storage Methods 0.000 claims description 13
- 238000013480 data collection Methods 0.000 claims description 11
- 238000013500 data storage Methods 0.000 claims description 7
- 238000001914 filtration Methods 0.000 claims description 7
- 230000036541 health Effects 0.000 claims description 4
- 230000003993 interaction Effects 0.000 claims description 3
- 210000001503 joint Anatomy 0.000 claims description 3
- 238000012800 visualization Methods 0.000 claims description 2
- 238000009826 distribution Methods 0.000 description 7
- 230000000007 visual effect Effects 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 229910052751 metal Inorganic materials 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 150000002739 metals Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008439 repair process Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000013024 troubleshooting Methods 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
- G06Q50/06—Electricity, gas or water supply
Abstract
本发明提供一种电网数据全链路监控系统，包括针对电网数据的监控管理平台，监控管理平台对接用于存储电网数据的数据中心，监控管理平台包括：首页模块，其对监控管理平台的功能整体情况进行展示；应用监控模块，其对电网数据采集过程中的链路数据流转情况进行监控和展示；数据监控模块，其对电网数据的采集链路进行实时质量监控和展示；作业监控模块，其对各类电网数据的加工、计算和分析作业进程同时进行监控和展示；平台监控模块，其对监控管理平台的资源运行使用情况进行实时监控和展示；系统管理模块，其集成各类日志监控功能；个人工作台模块，其将异常类信息告警展示给系统运维人员，并接收系统运维人员的数据处理操作。
Description
技术领域
本发明涉及数据处理技术领域，特别涉及一种电网数据全链路监控系统。
背景技术
目前我国电力供应总体偏紧张，部分地区、部分时段缺电比较严重，随着我国电网规模不断扩大及电网复杂性不断增加，需对各个用电地区的用电量、用电高峰时段等电网数据进行用电分析，得出合理的供电方案并实施以缓解电力供应紧张的局面。为此，电网系统通常先从各个用电地区的电网中采集其运行时产生的电网数据，再将采集到的电网数据传输给数据中心，然后利用数据分析系统对数据中心中的电网数据进行全面的用电分析。
但是，由于目前电网的业务系统数量众多，电网系统需采集的电网数据量非常庞大，导致在采集电网数据的过程中时常出现电网数据采集不完整、电网数据采集质量低等问题，因此需对电网数据进行从生产到应用直至退役的全链路监控，以尽量避免出现电网数据采集不完整、电网数据采集质量低等问题，但目前电网系统通常只配套有用于监控基础数据的监控管理平台，其对业务系统数量众多的电网数据的实时监控能力不足，难以实现电网数据从生产到应用直至退役的全链路监控。
发明内容
本发明要解决的技术问题是如何实现对电网数据的全链路监控。
为解决上述技术问题，本发明提供一种电网数据全链路监控系统，包括针对电网数据的监控管理平台，所述监控管理平台对接用于存储电网数据的数据中心，所述监控管理平台包括如下功能模块：
首页模块，其对监控管理平台的功能整体情况进行展示；
应用监控模块，其根据数据中心的应用，对电网数据采集过程中的链路数据流转情况进行监控和展示；
数据监控模块，其对电网数据的采集链路进行实时质量监控和展示；
作业监控模块，其对各类电网数据的加工、计算和分析作业进程同时进行监控和展示；
平台监控模块，其对监控管理平台的资源运行使用情况进行实时监控和展示；
系统管理模块，其集成各类日志监控功能，供系统运维人员及时查询数据异常情况、作业异常情况和/或数据计算过程中产生的异常情况；
个人工作台模块，其将异常类信息告警展示给系统运维人员，并接收系统运维人员的数据处理操作。
优选地，包括信息展示设备，所述信息展示设备与所述监控管理平台进行信息交互，所述监控管理平台的各个功能模块将其监控情况展示在信息展示设备的展示界面上。
优选地，所述监控管理平台的功能整体情况包括平台概况、数据资产情况、数据应用情况、数据质量情况、监控可视化和异常预警。
优选地，所述应用监控模块包括应用总览模块、重点应用监控模块、重点应用链路实时监控模块、依赖关系查询模块和依赖关系展示模块。
优选地，所述数据监控模块包括数据总览模块、元数据监控模块、采集网络监控模块、数据采集效率分析模块、接口数量监控模块、数据采集质量监控模块、贴源层数据存储量监控模块、数据过滤情况监控模块、数据波动值监控模块、数据流转过程监控模块、数据供给监控模块和数据服务监控模块。
优选地，所述作业监控模块包括作业总览模块、数据采集进程监控模块、源端数据采集程序监控模块、贴源服务进程健康模块、数据供给程序监控模块和异常作业监控模块。
优选地，所述平台监控模块包括集群监控模块、平台存储量监控模块和服务器管理模块。
优选地，所述系统管理模块包括数据配置模块、配置信息管理模块、告警通知配置模块、数据源监控日志管理模块、数据采集链路日志管理模块、作业监控日志管理模块、数据计算分析监控日志管理模块、数据供给一致性监控日志管理模块、数据访问监控日志管理模块、规则管理模块、链路配置管理模块、账号管理模块和权限管理模块。
本发明具有以下有益效果：首页模块能展示监控管理平台的功能整体情况；应用监控模块对电网数据采集过程中的链路数据流转情况进行监控和展示，能进一步提升系统运维人员对数据采集链路的监控力度，减少因数据采集异常问题而影响数据质量；数据监控模块对电网数据的采集链路进行实时质量监控和展示，能使系统运维人员及时发现电网数据采集过程中的各个异常环节，有效地提升数据采集质量；作业监控模块对各类电网数据的加工、计算和分析作业进程同时进行监控和展示，能使系统运维人员同时监控各类电网数据的作业进程，有效保证数据完整性、准确性和一致性；平台监控模块对监控管理平台的资源运行使用情况进行实时监控和展示，能使系统运维人员对监控管理平台资源的运行使用情况进行实时有效监控；系统管理模块集成各类日志监控功能，能方便系统运维人员及时查询数据异常情况、作业异常情况和/或数据计算过程中产生的异常情况，方便排查处理问题，为监控管理平台不间断运行提供了保障；个人工作台模块将异常类信息告警展示给系统运维人员，并接收系统运维人员的数据处理操作，以便系统运维人员及时对异常数据、作业进行处理。综上，本发明提供的电网数据全链路监控系统实现了对电网数据的全链路监控。
具体实施方式
以下结合具体实施方式对本发明创造作进一步详细说明。
本实施例提供一种电网数据全链路监控系统，该系统包括针对电网数据的监控管理平台，该监控管理平台对接用于存储电网数据的数据中心，该监控管理平台包括如下功能模块：首页模块、应用监控模块、数据监控模块、作业监控模块、平台监控模块、系统管理模块和个人工作台模块。本实施例中，电网数据全链路监控系统包括信息展示设备，信息展示设备与监控管理平台进行信息交互，监控管理平台的各个功能模块将其监控情况展示在信息展示设备的展示界面上。
(一)首页模块
首页模块对监控管理平台的功能整体情况进行展示。监控管理平台的功能整体情况包括平台概况、数据资产情况、数据应用情况、数据质量情况、监控可视化信息和异常预警信息，其中：
平台概况包括数据中心的集群总存储量、CPU情况、总内存、集群规模、作业数量、异常作业数、接入系统数和集群存储使用情况；
数据资产情况包括数据中心的数据资产分布情况和各系统数据接入情况；
数据应用情况包括数据中心的应用分布情况和应用使用情况；
数据质量情况包括数据中心对应的电网公司的总体质量得分和各子公司质量得分；
监视可视化信息包括监控大厅、多维展示信息和多方式导出信息；
异常预警信息包含多维度展示预警信息列表，包含ID、预警标题、预警内容、预警类型、预警级别、时间及预警操作功能，并支持多信息查询功能及导出功能，历史告警标签展示对应的历史告警信息。
(二)应用监控模块
应用监控模块根据数据中心的应用，对电网数据采集过程中的链路数据流转情况进行监控和展示，从而能进一步提升数据采集链路监控力度，减少因数据采集异常问题而影响数据质量。应用监控模块包括应用总览模块、重点应用监控模块、重点应用链路实时监控模块、依赖关系查询模块和依赖关系展示模块，其中：
应用总览模块对数据中心应用的总体情况进行监控，展示应用信息，根据应用类型、应用分布和业务区域分布对应用的作业汇总情况进行分析统计和展示；
重点应用监控模块对预设的重点应用的作业信息进行监控，根据重点应用的不同类型和不同状态对重点应用的作业汇总情况进行分析统计和展示；
重点应用链路实时监控模块对预设的重点应用的数据链路作业进行监控，以企业运管为试点，实现对企业运管的数据全链路实时监控，实时监控到数据链路各环节作业的执行情况；
依赖关系查询模块类似搜索引擎的界面，通过用户输入的关键字快速查询作业、指标、数据表之间的依赖关系，支持模糊匹配；
依赖关系展示模块展示作业、指标、数据表之间的依赖关系图，并能显示各节点作业的执行状态。
(三)数据监控模块
数据监控模块对电网数据的采集链路进行实时质量监控和展示，从而能及时发现电网数据采集过程中的各个异常环节，有效地提升数据采集质量。数据监控模块包括数据总览模块、元数据监控模块、采集网络监控模块、数据采集效率分析模块、接口数量监控模块、数据采集质量监控模块、贴源层数据存储量监控模块、数据过滤情况监控模块、数据波动值监控模块、数据流转过程监控模块、数据供给监控模块和数据服务监控模块，其中：
数据总览模块展示数据采集质量情况、数据供给质量情况和数据访问情况；
元数据监控模块提供查询、采集异常预警等功能，对数据采集过程中的源端库表结构、字段等进行监控；
采集网络监控模块对采集过程中的网络情况进行监控，展示采集网络相关信息，对相关网络协议进行统计，展示有在监听的服务状态；
数据采集效率分析模块对源端数据采集最大速率、最小速率、平均速率等进行监控，并提供趋势分析；
接口数量监控模块对电网数据采集过程中的接口数量进行监控，包括对接口数量平均值、最大值和最小值进行监控；
数据采集质量监控模块以采集字段为单位，对各源端系统库表、字段数据的采集数据完整性、准确性及一致性进行监控，支撑监控结果的多维度展现，其中：数据完整性监控具体是对数据采集源端、目标端的数据完整性进行监控，及时发现数据采集不完整的情况；数据准确性监控具体是根据数据质量规则，监控全域数据采集过程的准确性；数据一致性监控具体是对数据采集源端、目标端的数据一致性进行监控，及时发现数据一致性问题；
贴源层数据存储量监控模块对贴源层数据存储量进行监控，包括对数据存储量平均值、最大值和最小值进行监控，并提供趋势图对监控结果进行展示，其中，贴源层数据是指存储在贴源层(ODS，Operational Data Store)的数据，存储在贴源层的数据与原系统保持一致，贴源层将采集公司所有的系统产生的数据以及外部数据(包括合作数据以及爬虫获得的数据)汇总到一起；
数据过滤情况监控模块对数据加工过滤情况进行监控，比对数据过滤前后数量的一致性；
数据波动值监控模块对数据波动情况进行监控，提供数据波动趋势展示功能和数据波动异常告警功能，该波动情况监控包括阈值监控、平均值监控、历史最大值监控和历史最小值监控；
数据流转过程监控模块记录各数据在数据中心加工计算过程，以及每一个环节的运算状态，并支持可视化展示数据流转过程；
数据供给监控模块包括供数情况监控模块、数据供给网络监控模块和数据供给质量监控模块，其中：供数情况监控模块对电网所提供的数据趋势进行监控分析，包括对电网数据的平均值、最大值和最小值进行监控，并提供数据趋势图供用户进行分析；数据供给网络监控模块对电网数据供给过程中的网络情况进行监控，和展示服务网络相关信息，对相关网络协议进行统计，展示有在监听的服务状态；数据供给质量监控模块监控对外供给数据的及时性、完整性、准确性、一致性等，并支撑监控结果的多维度可视化展示；
数据服务监控模块包括数据访问情况获取模块、数据访问频次记录模块和数据访问热度计算模块，其中：数据访问情况获取模块以数据为维度，获取某个数据的访问对象、访问单位、下载量、问题反映情况等；数据访问频次记录模块记录某个数据的点赞、访问量，吐槽量等累计统计数据访问频次；数据访问热度计算模块通过数据的访问情况和访问频次，结合时间维度计算数据访问热度。
(四)作业监控模块
作业监控模块对各类电网数据的加工、计算和分析作业进程同时进行监控和展示，从而能同时监控各类电网数据的作业进程，有效保证数据完整性、准确性和一致性。作业监控模块包括作业总览模块、数据采集进程监控模块、源端数据采集程序监控模块、贴源服务进程健康模块、数据供给程序监控模块和异常作业监控模块，其中：
作业总览模块展示数据中心数据作业总体情况，作业总体情况包括作业总数、作业分布情况、异常作业数和作业时长分布；
数据采集进程监控模块对数据采集过程跟踪情况、协议、接口状态等进行监控，提供状态展示、预警等功能；
源端数据采集程序监控模块对源端数据采集程序运行状态进行监控，具体监控采集程序是否正常输入输出、预期情况是否符合要求等；
贴源服务进程健康模块对贴源服务过程的跟踪情况、协议等进行监控，提供状态展示、预警等功能；
数据供给程序监控模块对数据供给程序运行状态进行监控，具体监控程序是否正常输入输出、预期情况是否符合要求等；
异常作业监控模块对异常作业进行监控列出当前所有异常作业清单明细信息，对于特殊类型的异常作业支持自动重调功能，并能根据异常作业消缺情况，同步刷新异常作业清单。
(五)平台监控模块
平台监控模块对监控管理平台的资源运行使用情况进行实时监控和展示，从而能对监控管理平台资源的运行使用情况进行有效监控。平台监控模块包括集群监控模块、平台存储量监控模块和服务器管理模块，其中：
集群监控模块对数据中心集群进行监控，具体包括集群负载率监控、计算节点状态监控和集群资源分布监控；
平台存储量监控模块对平台总体存储量、已用存储量、可用存储量进行监控，并通过饼状图百分比显示；
服务器管理模块包括服务器台账清单展示模块和服务器台账录入模块，其中：服务器台账清单展示模块支持台账基本信息的多条件查询，服务器台账基本信息包括区分裸金属或虚拟机的主机类型、所在机房和机位信息、机器型号信息、所需集群、IP地址和用途说明；服务器台账录入模块支持服务器台账的新增、编辑、删除功能。
(六)系统管理模块
系统管理模块集成各类日志监控功能，供系统运维人员及时查询数据异常情况、作业异常情况和/或数据计算过程中产生的异常情况，从而能方便系统运维人员及时查询数据异常情况、作业异常情况和/或数据计算过程中产生的异常情况，方便排查处理问题，为监控管理平台不间断运行提供了保障。系统管理模块包括数据配置模块、配置信息管理模块、告警通知配置模块、数据源监控日志管理模块、数据采集链路日志管理模块、作业监控日志管理模块、数据计算分析监控日志管理模块、数据供给一致性监控日志管理模块、数据访问监控日志管理模块、规则管理模块、链路配置管理模块、账号管理模块和权限管理模块，其中：
数据配置模块包括数据源监控配置模块、数据采集链路配置模块、数据作业监控配置模块、数据计算分析监控配置模块、数据供给监控配置模块、数据一致性监控配置模块和数据访问监控配置模块，数据配置模块配置监控对象类型、监控时间段、配置供给触发规则、产生告警时间、处理人、监控心跳等；
配置信息管理模块为数据监控配置信息提供管理功能，用于管控数据源监控配置模块、数据采集链路配置模块、数据作业监控配置模块、数据计算分析监控配置模块、数据供给监控配置模块、数据一致性监控配置模块和数据访问监控配置模块这7个模块提供的数据监控配置信息的查询、新建、删除、修改等；
告警通知配置模块支持邮件、短信等多种告警通知方式，可对邮件服务协议、短信服务协议等通信协议进行配置；
数据源监控日志管理模块支持对数据采集过程、元数据以及端数据采集程序进行监控，并产生对应的日志信息，日志信息包括监控对象、系统名称、数据源IP、数据源采集状态、日志采集时间和运行情况说明；
数据采集链路日志管理模块对源端数据采集趋势、网络监控、接口数量等进行监控管理，在采集过程中，链路中所有的节点都会产生日志信息，日志信息包括监控对象、数据源、表名称、采集数量、采集时间、状态和处理情况；
作业监控日志管理模块支持对贴源层数据存储量、服务程序、数据文件规则等校验情况进行监控，数据作业具备自动化特征，人工配置启动后可以自动运行，但是外在的干扰会导致作业调度失败，在作业监控过程中，产生的日志信息包括监控对象、任务名称、调度开始时间、终止时间、问题类型和问题说明；
数据计算分析监控日志管理模块主要是对数据过滤情况和数据波动值情况进行监控，产生的日志信息包括数据处理状态、差异情况说明和日志记录时间；
数据供给一致性监控日志管理模块对数据供给程序、供数情况监控、数据供给网络等进行监控，在监控的过程中产生的日志信息包括监控对象名称、监控状态、监控时间、异常类型和日志说明；
数据访问监控日志管理模块支持对数据访问情况、数据访问频次、数据访问热度等进行监控，在监控过程中，数据到达一定的程度后会记录在日志中，并记录数据数量的变化趋势，以提供用户查看，数据访问监控日志的信息包括访问对象、访问热度、记录时间和日志说明；
规则管理模块为数据链路提供质量规则检查，为数据监控配置提供告警规则检查，支持规则的新增、修改、删除、发布、下架、立即执行、导出等功能；
链路配置管理模块为重点应用链路、数据流转过程监控提供链路管理和配置，支持链路的新增、删除、修改、发布、下架等功能；
账号管理模块与统一安全管控平台(4A平台)对接，支持用户和角色的增删改查功能，管理用户-角色的对应关系；
权限管理模块通过维护系统各功能点的角色权限设置，使已授权的不同用户只能访问自己的资源或系统功能点。
(七)个人工作台模块
个人工作台模块为系统运维人员搭建，将异常类信息告警展示给系统运维人员，并接收系统运维人员的数据处理操作，以便系统运维人员及时对异常数据、作业进行处理。个人工作台模块集成数据资产管理平台的工单功能，提供工单处理功能，运维人员可以进行提交工单、处理工单、确认问题修复、查看工单处理详情等操作。
综上，本发明提供的电网数据全链路监控系统利用其首页模块、应用监控模块、数据监控模块、作业监控模块、平台监控模块、系统管理模块和个人工作台模块实现了对电网数据的全链路监控。
如上所述仅为本发明创造的实施方式，不以此限定专利保护范围。本领域技术人员在本发明创造的基础上作出非实质性的变化或替换，仍落入专利保护范围。
Claims (8)
1.一种电网数据全链路监控系统，包括针对电网数据的监控管理平台，所述监控管理平台对接用于存储电网数据的数据中心，其特征是，所述监控管理平台包括如下功能模块：
首页模块，其对监控管理平台的功能整体情况进行展示；
应用监控模块，其根据数据中心的应用，对电网数据采集过程中的链路数据流转情况进行监控和展示；
数据监控模块，其对电网数据的采集链路进行实时质量监控和展示；
作业监控模块，其对各类电网数据的加工、计算和分析作业进程同时进行监控和展示；
平台监控模块，其对监控管理平台的资源运行使用情况进行实时监控和展示；
系统管理模块，其集成各类日志监控功能，供系统运维人员及时查询数据异常情况、作业异常情况和/或数据计算过程中产生的异常情况；
个人工作台模块，其将异常类信息告警展示给系统运维人员，并接收系统运维人员的数据处理操作。
2.根据权利要求1所述的电网数据全链路监控系统，其特征是，包括信息展示设备，所述信息展示设备与所述监控管理平台进行信息交互，所述监控管理平台的各个功能模块将其监控情况展示在信息展示设备的展示界面上。
3.根据权利要求1所述的电网数据全链路监控系统，其特征是，所述监控管理平台的功能整体情况包括平台概况、数据资产情况、数据应用情况、数据质量情况、监控可视化和异常预警。
4.根据权利要求1所述的电网数据全链路监控系统，其特征是，所述应用监控模块包括应用总览模块、重点应用监控模块、重点应用链路实时监控模块、依赖关系查询模块和依赖关系展示模块。
5.根据权利要求1所述的电网数据全链路监控系统，其特征是，所述数据监控模块包括数据总览模块、元数据监控模块、采集网络监控模块、数据采集效率分析模块、接口数量监控模块、数据采集质量监控模块、贴源层数据存储量监控模块、数据过滤情况监控模块、数据波动值监控模块、数据流转过程监控模块、数据供给监控模块和数据服务监控模块。
6.根据权利要求1所述的电网数据全链路监控系统，其特征是，所述作业监控模块包括作业总览模块、数据采集进程监控模块、源端数据采集程序监控模块、贴源服务进程健康模块、数据供给程序监控模块和异常作业监控模块。
7.根据权利要求1所述的电网数据全链路监控系统，其特征是，所述平台监控模块包括集群监控模块、平台存储量监控模块和服务器管理模块。
8.根据权利要求1所述的电网数据全链路监控系统，其特征是，所述系统管理模块包括数据配置模块、配置信息管理模块、告警通知配置模块、数据源监控日志管理模块、数据采集链路日志管理模块、作业监控日志管理模块、数据计算分析监控日志管理模块、数据供给一致性监控日志管理模块、数据访问监控日志管理模块、规则管理模块、链路配置管理模块、账号管理模块和权限管理模块。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110886449.2A CN113537824A (zh) | 2021-08-03 | 2021-08-03 | 一种电网数据全链路监控系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110886449.2A CN113537824A (zh) | 2021-08-03 | 2021-08-03 | 一种电网数据全链路监控系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113537824A true CN113537824A (zh) | 2021-10-22 |
Family
ID=78090301
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110886449.2A Pending CN113537824A (zh) | 2021-08-03 | 2021-08-03 | 一种电网数据全链路监控系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113537824A (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114143221A (zh) * | 2021-11-29 | 2022-03-04 | 重庆富民银行股份有限公司 | 一个基于全链路监控的服务资产管理方法、平台及存储介质 |
Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101706909A (zh) * | 2009-11-18 | 2010-05-12 | 山东浪潮齐鲁软件产业股份有限公司 | 一种面向企业数据集成的全面数据质量管理方法 |
| CN102708149A (zh) * | 2012-04-01 | 2012-10-03 | 河海大学 | 数据质量管理方法和系统 |
| CN104699735A (zh) * | 2014-11-20 | 2015-06-10 | 国家电网公司 | 企业级数据中心的数据处理方法及装置 |
| CN105139296A (zh) * | 2015-10-12 | 2015-12-09 | 国家电网公司 | 一种电网业务数据全生命周期质量管理系统 |
| CN106203828A (zh) * | 2016-07-11 | 2016-12-07 | 浪潮软件集团有限公司 | 一种基于数据全生命周期管理的数据管理平台 |
| CN107135119A (zh) * | 2017-04-18 | 2017-09-05 | 国网福建省电力有限公司 | 一种业务响应跟踪及接口状态监控开发系统 |
| CN108183927A (zh) * | 2017-11-22 | 2018-06-19 | 链家网（北京）科技有限公司 | 一种分布式系统中链路调用的监控方法及系统 |
| CN108512726A (zh) * | 2018-03-29 | 2018-09-07 | 上海连尚网络科技有限公司 | 一种数据监控的方法及设备 |
| CN109962792A (zh) * | 2017-12-22 | 2019-07-02 | 南京欣网互联网络科技有限公司 | 一种基于大数据的全链路监控系统 |
| CN110442628A (zh) * | 2019-07-09 | 2019-11-12 | 恩亿科(北京)数据科技有限公司 | 一种数据监控方法、系统和计算机设备 |
| CN111125152A (zh) * | 2019-12-26 | 2020-05-08 | 积成电子股份有限公司 | 一种基于数据处理过程模型的全链路数据管控方法 |
| CN111740860A (zh) * | 2020-06-15 | 2020-10-02 | 中国工商银行股份有限公司 | 日志数据传输链路监控方法及装置 |
| CN111752808A (zh) * | 2020-07-01 | 2020-10-09 | 浪潮云信息技术股份公司 | 一种用于数据共享交换业务运行监控系统的实现方法 |
| CN112597203A (zh) * | 2020-12-28 | 2021-04-02 | 恩亿科(北京)数据科技有限公司 | 基于大数据平台的通用数据监控方法和系统 |
-
2021
- 2021-08-03 CN CN202110886449.2A patent/CN113537824A/zh active Pending
Patent Citations (14)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101706909A (zh) * | 2009-11-18 | 2010-05-12 | 山东浪潮齐鲁软件产业股份有限公司 | 一种面向企业数据集成的全面数据质量管理方法 |
| CN102708149A (zh) * | 2012-04-01 | 2012-10-03 | 河海大学 | 数据质量管理方法和系统 |
| CN104699735A (zh) * | 2014-11-20 | 2015-06-10 | 国家电网公司 | 企业级数据中心的数据处理方法及装置 |
| CN105139296A (zh) * | 2015-10-12 | 2015-12-09 | 国家电网公司 | 一种电网业务数据全生命周期质量管理系统 |
| CN106203828A (zh) * | 2016-07-11 | 2016-12-07 | 浪潮软件集团有限公司 | 一种基于数据全生命周期管理的数据管理平台 |
| CN107135119A (zh) * | 2017-04-18 | 2017-09-05 | 国网福建省电力有限公司 | 一种业务响应跟踪及接口状态监控开发系统 |
| CN108183927A (zh) * | 2017-11-22 | 2018-06-19 | 链家网（北京）科技有限公司 | 一种分布式系统中链路调用的监控方法及系统 |
| CN109962792A (zh) * | 2017-12-22 | 2019-07-02 | 南京欣网互联网络科技有限公司 | 一种基于大数据的全链路监控系统 |
| CN108512726A (zh) * | 2018-03-29 | 2018-09-07 | 上海连尚网络科技有限公司 | 一种数据监控的方法及设备 |
| CN110442628A (zh) * | 2019-07-09 | 2019-11-12 | 恩亿科(北京)数据科技有限公司 | 一种数据监控方法、系统和计算机设备 |
| CN111125152A (zh) * | 2019-12-26 | 2020-05-08 | 积成电子股份有限公司 | 一种基于数据处理过程模型的全链路数据管控方法 |
| CN111740860A (zh) * | 2020-06-15 | 2020-10-02 | 中国工商银行股份有限公司 | 日志数据传输链路监控方法及装置 |
| CN111752808A (zh) * | 2020-07-01 | 2020-10-09 | 浪潮云信息技术股份公司 | 一种用于数据共享交换业务运行监控系统的实现方法 |
| CN112597203A (zh) * | 2020-12-28 | 2021-04-02 | 恩亿科(北京)数据科技有限公司 | 基于大数据平台的通用数据监控方法和系统 |
Non-Patent Citations (1)
| Title |
|---|
| 徐敏等: "基于数据中台的数据全链路监控研究与应用", 《现代计算机》, pages 66 - 69 * |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114143221A (zh) * | 2021-11-29 | 2022-03-04 | 重庆富民银行股份有限公司 | 一个基于全链路监控的服务资产管理方法、平台及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112488558A (zh) | 一种基于工业互联网的能耗监控及分析系统 | |
| CN111815132B (zh) | 一种电力监控系统网络安全管理信息发布方法及系统 | |
| CN105631522A (zh) | It系统运维管理系统 | |
| CN107612779B (zh) | 调度数据网二次安全防护网络设备及业务运行监视系统 | |
| CN105553733A (zh) | 资源监控管理系统 | |
| CN105389675A (zh) | 业务流程管理系统 | |
| CN112749060A (zh) | 一种电力系统服务总线监视方法 | |
| CN105450660A (zh) | 业务资源安全控制系统 | |
| CN113537824A (zh) | 一种电网数据全链路监控系统 | |
| CN116027722A (zh) | 一种能耗监控管理系统 | |
| CN111966663A (zh) | 一种多元用户侧综合能源数据服务系统 | |
| CN111160598A (zh) | 一种基于动态能耗基准的能源预测与能耗管控方法及系统 | |
| CN113848843A (zh) | 一种基于智能优化节能系统的自诊断分析系统 | |
| CN103457753A (zh) | 一种运维保障中的能耗管控实现方法 | |
| CN111953926A (zh) | 视频会议系统 | |
| CN115001948B (zh) | 基于数据分析的设备健康状态检测方法及相关装置 | |
| CN115840656A (zh) | 一种基于故障自愈的应用程序自动化运维方法和系统 | |
| CN116246765A (zh) | 一种医疗设备全生命周期智能维保管理方法及系统 | |
| CN116155687A (zh) | 一种远程运维管系统 | |
| CN115097797A (zh) | 一种基于互联网分布式能源云管控系统 | |
| CN114462651A (zh) | 一种基于工业大数据的设备智慧管理平台 | |
| Wu et al. | Characteristics and development prospect of computer automatic patrol inspection technology | |
| CN103455863A (zh) | 信息系统能耗管控平台 | |
| WO2024040702A1 (zh) | 数控机床时间-能量效率评估与控制方法、系统及装置 | |
| Xu et al. | Research and Design of Energy Data Acquisition System in Electric Porcelain Enterprises |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |