CN114756722B - 一种多元数据集中管理控制系统及方法 - Google Patents

一种多元数据集中管理控制系统及方法 Download PDF

Info

Publication number
CN114756722B
CN114756722B CN202210436487.2A CN202210436487A CN114756722B CN 114756722 B CN114756722 B CN 114756722B CN 202210436487 A CN202210436487 A CN 202210436487A CN 114756722 B CN114756722 B CN 114756722B
Authority
CN
China
Prior art keywords
data
processed
electric power
stability
index
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210436487.2A
Other languages
English (en)
Other versions
CN114756722A (zh
Inventor
陈良汉
段海宁
翁炜城
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhuhai Hongrui Information Technology Co Ltd
Original Assignee
Zhuhai Hongrui Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhuhai Hongrui Information Technology Co Ltd filed Critical Zhuhai Hongrui Information Technology Co Ltd
Priority to CN202210436487.2A priority Critical patent/CN114756722B/zh
Publication of CN114756722A publication Critical patent/CN114756722A/zh
Application granted granted Critical
Publication of CN114756722B publication Critical patent/CN114756722B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying
    • G06F16/90335Query processing
    • G06F16/90348Query processing by searching ordered data, e.g. alpha-numerically ordered data
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/906Clustering; Classification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/06Energy or water supply

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Economics (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Water Supply & Treatment (AREA)
  • Computational Linguistics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Remote Monitoring And Control Of Power-Distribution Networks (AREA)

Abstract

本发明公开了一种多元数据集中管理控制系统及方法,所述管理控制系统包括数据采集模块、稳定性分类模块、上传数据处理模块和数据上传控制模块,所述数据采集模块按照预设频率从电力终端处获取某次采集的电力数据,按照电力数据的种类对该次采集的的电力数据进行分类得到k种待处理数据,所述稳定性分类模块获取该次采集的各种待处理数据的特征信息,对每种待处理数据进行稳定性分类,所述上传数据处理模块根据待处理数据的稳定性情况以及异常情况对待处理数据进行处理得到上传数据,所述数据上传控制模块将该次采集的电力数据的上传数据上传到电力数据库。

Description

一种多元数据集中管理控制系统及方法
技术领域
本发明涉及数据管理技术领域,具体为一种多元数据集中管理控制系统及方法。
背景技术
电力是以电能作为动力的能源。它将自然界的一次能源通过发电动力装置转化成电力,再经输电、变电和配电将电力供应到各用户。电力行业作为一种先进的生产力和基础产业,对促进国民经济的发展和社会进步起到了重要作用,与社会经济和社会发展有着十分密切的关系。因此,需要对电力数据进行存储监控达到有效保障电力的正常运行。
现有技术中,电力运行过程中会产生很多的数据,将这些数据进行存储时需要消耗很大的资源。
发明内容
本发明的目的在于提供一种多元数据集中管理控制系统及方法,以解决上述背景技术中提出的问题。
为了解决上述技术问题,本发明提供如下技术方案:一种多元数据集中管理控制系统,所述管理控制系统包括数据采集模块、稳定性分类模块、上传数据处理模块和数据上传控制模块,所述数据采集模块按照预设频率从电力终端处获取某次采集的电力数据,按照电力数据的种类对该次采集的电力数据进行分类得到k种待处理数据,所述稳定性分类模块获取该次采集的各种待处理数据的特征信息,对每种待处理数据进行稳定性分类,所述上传数据处理模块在某种待处理数据的稳定性分类为第一类时,如果该次采集中电力数据类型所对应的电力数据存在异常,直接将该种待处理数据的原数据作为上传数据,否则,那么将该种待处理数据进行处理后作为上传数据,在某种待处理数据的稳定性分类为第二类,直接将该种待处理数据的原数据作为上传数据,所述数据上传控制模块将该次采集的电力数据的上传数据上传到电力数据库。
进一步的,所述稳定性分类模块包括稳定性指数计算模块和稳定性指数比较模块,所述稳定性指数计算模块计算某种待处理数据的稳定性指数
Figure 100002_DEST_PATH_IMAGE002
,其中,m为历史采集到包含该种待处理数据的电力数据的次数,n为历史采集到包含该种待处理数据的电力数据时该种待处理数据出现异常的次数,
Figure 100002_DEST_PATH_IMAGE004
为历史第i次采集该种待处理数据出现异常时其他出现异常的电力数据的种类数,
Figure 100002_DEST_PATH_IMAGE006
为历史第i次采集该种待处理数据出现异常时所采集到的电力数据的种类数,
Figure 100002_DEST_PATH_IMAGE008
为历史第i次采集该种待处理数据出现异常时所采集到的电力数据数目,
Figure 100002_DEST_PATH_IMAGE010
,所述稳定性指数比较模块将某种待处理数据的稳定性指数与稳定性阈值进行比较,如果某种待处理数据的稳定性指数大于稳定性阈值,那么该种待处理数据的稳定性分类为第一类,否则,该种待处理数据的稳定性分类为第二类。
进一步的,所述管理控制系统还包括修正判断模块,所述修正判断模块包括上传指数计算模块、上传指数判断模块、修改指数计算模块和修改指数排序选取模块,所述上传指数计算模块采集该次采集的电力数据的上传指数
Figure 100002_DEST_PATH_IMAGE012
,其中,d为该次采集的电力数据中将原数据作为上传数据的电力数据的个数,c为该次采集到的电力数据的总个数,所述上传指数判断模块将上传指数与上传阈值进行比较,如果上传指数大于上传阈值,那么直接将上传数据上传到电力数据库,否则修改指数计算模块计算某个进行处理后作为上传数据的待处理数据的修改指数
Figure 100002_DEST_PATH_IMAGE014
,其中,x为最近采集的电力数据包含该种待处理数据种类的次数,v为最近采集的电力数据上传到电力数据库过程中对该种待处理数据进行处理后再上传的次数,b为该次采集到的电力数据中该种待处理数据的总个数,所述修改指数排序选取模块将各种待处理数据按照修改指数从大到小的顺序排序,按照排序的顺序依次将某一个待处理数据还原为该种待处理数据的原数据作为上传数据后该次采集的电力数据的上传指数,直到上传指数大于上传阈值。
进一步的,所述管理控制系统还包括静态处理模块,所述静态处理模块将某种待处理数据进行处理后作为上传数据时,将该次采集的电力数据中的该种待处理数据处理为静态数据后作为上传数据,其中,静态数据为某种待处理数据的预设数据,将该次采集的电力数据中的静态数据进行去重处理。
一种多元数据集中管理控制方法,所述管理控制方法包括以下步骤:
按照预设频率从电力终端处获取某次采集的电力数据,按照电力数据的种类对该次采集的电力数据进行分类得到k种待处理数据;
获取该次采集的各种待处理数据的特征信息,对每种待处理数据进行稳定性分类,
如果某种待处理数据的稳定性分类为第一类,
如果该次采集中电力数据类型所对应的电力数据存在异常,直接将该种待处理数据的原数据作为上传数据,否则,那么将该种待处理数据进行处理后作为上传数据;
如果某种待处理数据的稳定性分类为第二类,直接将该种待处理数据的原数据作为上传数据;
将该次采集的电力数据的上传数据上传到电力数据库。
进一步的,所述对每种待处理数据进行稳定性分类包括:
计算某种待处理数据的稳定性指数
Figure 93350DEST_PATH_IMAGE002
,其中,m为历史采集到包含该种待处理数据的电力数据的次数,n为历史采集到包含该种待处理数据的电力数据时该种待处理数据出现异常的次数,
Figure 434333DEST_PATH_IMAGE004
为历史第i次采集该种待处理数据出现异常时其他出现异常的电力数据的种类数,
Figure 162117DEST_PATH_IMAGE006
为历史第i次采集该种待处理数据出现异常时所采集到的电力数据的种类数,
Figure 87086DEST_PATH_IMAGE008
为历史第i次采集该种待处理数据出现异常时所采集到的电力数据数目,
Figure 558518DEST_PATH_IMAGE010
如果某种待处理数据的稳定性指数大于稳定性阈值,那么该种待处理数据的稳定性分类为第一类,
否则,该种待处理数据的稳定性分类为第二类。
进一步的,所述将该次采集的各个待处理数据的上传数据上传到电力数据库之前还包括:
采集该次采集的电力数据的上传指数
Figure 754007DEST_PATH_IMAGE012
,其中,d为该次采集的电力数据中将原数据作为上传数据的电力数据的个数,c为该次采集到的电力数据的总个数,
如果上传指数大于上传阈值,那么直接将上传数据上传到电力数据库,
否则,计算某个进行处理后作为上传数据的待处理数据的修改指数
Figure 918272DEST_PATH_IMAGE014
,其中,x为最近采集的电力数据包含该种待处理数据种类的次数,v为最近采集的电力数据上传到电力数据库过程中对该种待处理数据进行处理后再上传的次数,b为该次采集到的电力数据中该种待处理数据的总个数,
将各种待处理数据按照修改指数从大到小的顺序排序,按照排序的顺序依次将某一个待处理数据还原为该种待处理数据的原数据作为上传数据后该次采集的电力数据的上传指数,直到上传指数大于上传阈值。
进一步的,所述将该种待处理数据进行处理后作为上传数据包括:
将该次采集的电力数据中的该种待处理数据处理为静态数据后作为上传数据,其中,静态数据为某种待处理数据的预设数据。
进一步的,所述将该种待处理数据进行处理后作为上传数据包括:
将该次采集的电力数据中的静态数据进行去重处理。
与现有技术相比,本发明所达到的有益效果是:本发明通过对该次采集获取到的电力数据以及相应的历史电力数据进行分析,判断是否要将电力数据进行处理后才上传,从而达到了在上传多元种类数据过程汇总节省传输和存储电力数据所消耗的资源的技术效果,同时在节省资源时保障数据处理方式的合理性,便于后续在电力数据库内对多元种类数据进行分析和追溯。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1是本发明一种多元数据集中管理控制系统的模块示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,本发明提供技术方案:一种多元数据集中管理控制系统,所述管理控制系统包括数据采集模块、稳定性分类模块、上传数据处理模块和数据上传控制模块,所述数据采集模块按照预设频率从电力终端处获取某次采集的电力数据,按照电力数据的种类对该次采集的电力数据进行分类得到k种待处理数据,所述稳定性分类模块获取该次采集的各种待处理数据的特征信息,对每种待处理数据进行稳定性分类,所述上传数据处理模块在某种待处理数据的稳定性分类为第一类时,如果该次采集中电力数据类型所对应的电力数据存在异常,直接将该种待处理数据的原数据作为上传数据,否则,那么将该种待处理数据进行处理后作为上传数据,在某种待处理数据的稳定性分类为第二类,直接将该种待处理数据的原数据作为上传数据,所述数据上传控制模块将该次采集的电力数据的上传数据上传到电力数据库。
所述稳定性分类模块包括稳定性指数计算模块和稳定性指数比较模块,所述稳定性指数计算模块计算某种待处理数据的稳定性指数
Figure 832002DEST_PATH_IMAGE002
,其中,m为历史采集到包含该种待处理数据的电力数据的次数,n为历史采集到包含该种待处理数据的电力数据时该种待处理数据出现异常的次数,
Figure 841546DEST_PATH_IMAGE004
为历史第i次采集该种待处理数据出现异常时其他出现异常的电力数据的种类数,
Figure 655656DEST_PATH_IMAGE006
为历史第i次采集该种待处理数据出现异常时所采集到的电力数据的种类数,
Figure 725243DEST_PATH_IMAGE008
为历史第i次采集该种待处理数据出现异常时所采集到的电力数据数目,
Figure 126269DEST_PATH_IMAGE010
,所述稳定性指数比较模块将某种待处理数据的稳定性指数与稳定性阈值进行比较,如果某种待处理数据的稳定性指数大于稳定性阈值,那么该种待处理数据的稳定性分类为第一类,否则,该种待处理数据的稳定性分类为第二类。
所述管理控制系统还包括修正判断模块,所述修正判断模块包括上传指数计算模块、上传指数判断模块、修改指数计算模块和修改指数排序选取模块,所述上传指数计算模块采集该次采集的电力数据的上传指数
Figure 142766DEST_PATH_IMAGE012
,其中,d为该次采集的电力数据中将原数据作为上传数据的电力数据的个数,c为该次采集到的电力数据的总个数,所述上传指数判断模块将上传指数与上传阈值进行比较,如果上传指数大于上传阈值,那么直接将上传数据上传到电力数据库,否则修改指数计算模块计算某个进行处理后作为上传数据的待处理数据的修改指数
Figure 375164DEST_PATH_IMAGE014
,其中,x为最近采集的电力数据包含该种待处理数据种类的次数,v为最近采集的电力数据上传到电力数据库过程中对该种待处理数据进行处理后再上传的次数,b为该次采集到的电力数据中该种待处理数据的总个数,所述修改指数排序选取模块将各种待处理数据按照修改指数从大到小的顺序排序,按照排序的顺序依次将某一个待处理数据还原为该种待处理数据的原数据作为上传数据后该次采集的电力数据的上传指数,直到上传指数大于上传阈值。
所述管理控制系统还包括静态处理模块,所述静态处理模块将某种待处理数据进行处理后作为上传数据时,将该次采集的电力数据中的该种待处理数据处理为静态数据后作为上传数据,其中,静态数据为某种待处理数据的预设数据,将该次采集的电力数据中的静态数据进行去重处理。
一种多元数据集中管理控制方法,所述管理控制方法包括以下步骤:
按照预设频率从电力终端处获取某次采集的电力数据,按照电力数据的种类对该次采集的电力数据进行分类得到k种待处理数据;不同元种类的电力数据更新频率不一样,以预设频率从电力终端获取电力数据时很可能会出现多次采集到某一种类的电力数据的情况,比如,如果在预设频率内,电力数据a更新了3次,那么采集到的电力数据中就包括了3个电力数据a;
获取该次采集的各种待处理数据的特征信息,对每种待处理数据进行稳定性分类,
所述对每种待处理数据进行稳定性分类包括:
计算某种待处理数据的稳定性指数
Figure 317450DEST_PATH_IMAGE002
,其中,m为历史采集到包含该种待处理数据的电力数据的次数,n为历史采集到包含该种待处理数据的电力数据时该种待处理数据出现异常的次数,
Figure 2510DEST_PATH_IMAGE004
为历史第i次采集该种待处理数据出现异常时其他出现异常的电力数据的种类数,
Figure 557119DEST_PATH_IMAGE006
为历史第i次采集该种待处理数据出现异常时所采集到的电力数据的种类数,
Figure 644024DEST_PATH_IMAGE008
为历史第i次采集该种待处理数据出现异常时所采集到的电力数据数目,
Figure 258676DEST_PATH_IMAGE010
;当
Figure DEST_PATH_IMAGE016
越小,说明该种待处理数据的出现异常的几率较大,数据的异常波动性相对较大,当
Figure DEST_PATH_IMAGE018
越小时,说明该种待处理数据出现异常时,其他种类出现异常的情况的几率较小,那么在这种情况下,必须得保留原数据,便于后续对待处理数据进行追溯或者分析;同时,本申请中采用
Figure DEST_PATH_IMAGE020
作为
Figure 8195DEST_PATH_IMAGE018
的权重值是考虑到在不同的种类数据更新频率不一样从而会导致预审频率内采集到的数据量不一样,将其作为权重值使得后续的判断结果更加准确;
当某种待处理数据的稳定性指数越高,说明该种待处理数据发生异常的次数相对较多,
如果某种待处理数据的稳定性指数大于稳定性阈值,那么该种待处理数据的稳定性分类为第一类,
否则,该种待处理数据的稳定性分类为第二类;
如果某种待处理数据的稳定性分类为第一类,
如果该次采集中电力数据类型所对应的电力数据存在异常,直接将该种待处理数据的原数据作为上传数据,否则,那么将该种待处理数据进行处理后作为上传数据;所述将该种待处理数据进行处理后作为上传数据包括:
将该次采集的电力数据中的该种待处理数据处理为静态数据后作为上传数据,其中,静态数据为某种待处理数据的预设数据,然后将该次采集的电力数据中的静态数据进行去重处理;
如果某种待处理数据的稳定性分类为第二类,直接将该种待处理数据的原数据作为上传数据;这里的原数据指的是原始数据,采集的是某个数据,就直接上传该个数据;
将该次采集的电力数据的上传数据上传到电力数据库;比如,预设频率内采集到3个电力数据a、1个电力数据b、2个电力数据c、1个电力数据e,分析后,电力数据b、电力数据c、电力数据e是直接将电力数据的原数据上传,电力数据a是进行处理后作为上传数据,那么在上传的时候,上传数据为1个电力数据b、2个电力数据c、1个电力数据e和1个电力数据a的静态数据;
所述将该次采集的各个待处理数据的上传数据上传到电力数据库之前还包括:
采集该次采集的电力数据的上传指数
Figure 163233DEST_PATH_IMAGE012
,其中,d为该次采集的电力数据中将原数据作为上传数据的电力数据的个数,c为该次采集到的电力数据的总个数,本申请中考虑到如果对数据处理过多会影响后续对电力数据的追溯或者分析,所以本申请在上传之前计算了下上传指数,如果上传指数较小,说明进行处理后再上传的数据较多,那么有可能会出现影响后续对电力数据进行追溯或者分析的情况,因此需要对原先处理为静态数据的进行修正,判断是否要以原数据上传;
如果上传指数大于上传阈值,那么直接将上传数据上传到电力数据库,
否则,计算某个进行处理后作为上传数据的待处理数据的修改指数
Figure 806441DEST_PATH_IMAGE014
,其中,x为最近采集的电力数据包含该种待处理数据种类的次数,v为最近采集的电力数据上传到电力数据库过程中对该种待处理数据进行处理后再上传的次数,b为该次采集到的电力数据中该种待处理数据的总个数,本申请考虑到如果说某种数据被处理后上传的次数越多,会导致数据断层比较大,影响后续的数据分析,同时,如果某种待处理数据在该次采集到的电力数据中数据个数比较多的情况下,在上传过程中占用的资源会比较多,并且有效数据率会比较低,如果某种待处理数据在该次采集到的电力数据中数据个数比较少的情况下,在上传过程中占用的资源会比较少,数据有效率比较高,
将各种待处理数据按照修改指数从大到小的顺序排序,按照排序的顺序依次将某一个待处理数据还原为该种待处理数据的原数据作为上传数据后该次采集的电力数据的上传指数,直到上传指数大于上传阈值。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。
最后应说明的是:以上所述仅为本发明的优选实施例而已,并不用于限制本发明,尽管参照前述实施例对本发明进行了详细的说明,对于本领域的技术人员来说,其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (7)

1.一种多元数据集中管理控制系统,其特征在于,所述管理控制系统包括数据采集模块、稳定性分类模块、上传数据处理模块和数据上传控制模块,所述数据采集模块按照预设频率从电力终端处获取某次采集的电力数据,按照电力数据的种类对该次采集的电力数据进行分类得到k种待处理数据,所述稳定性分类模块获取该次采集的各种待处理数据的特征信息,对每种待处理数据进行稳定性分类,所述上传数据处理模块在某种待处理数据的稳定性分类为第一类时,如果该次采集中电力数据类型所对应的电力数据存在异常,直接将该种待处理数据的原数据作为上传数据,否则,那么将该种待处理数据进行处理后作为上传数据,在某种待处理数据的稳定性分类为第二类时,直接将该种待处理数据的原数据作为上传数据,所述数据上传控制模块将该次采集的电力数据的上传数据上传到电力数据库;
所述稳定性分类模块包括稳定性指数计算模块和稳定性指数比较模块,所述稳定性指数计算模块计算某种待处理数据的稳定性指数
Figure DEST_PATH_IMAGE002
,其中,m为历史采集到包含该种待处理数据的电力数据的次数,n为历史采集到包含该种待处理数据的电力数据时该种待处理数据出现异常的次数,
Figure DEST_PATH_IMAGE004
为历史第i次采集该种待处理数据出现异常时其他出现异常的电力数据的种类数,
Figure DEST_PATH_IMAGE006
为历史第i次采集该种待处理数据出现异常时所采集到的电力数据的种类数,
Figure DEST_PATH_IMAGE008
为历史第i次采集该种待处理数据出现异常时所采集到的电力数据数目,
Figure DEST_PATH_IMAGE010
,所述稳定性指数比较模块将某种待处理数据的稳定性指数与稳定性阈值进行比较,如果某种待处理数据的稳定性指数大于稳定性阈值,那么该种待处理数据的稳定性分类为第一类,否则,该种待处理数据的稳定性分类为第二类。
2.根据权利要求1所述的一种多元数据集中管理控制系统,其特征在于:所述管理控制系统还包括修正判断模块,所述修正判断模块包括上传指数计算模块、上传指数判断模块、修改指数计算模块和修改指数排序选取模块,所述上传指数计算模块采集该次采集的电力数据的上传指数
Figure DEST_PATH_IMAGE012
,其中,d为该次采集的电力数据中将原数据作为上传数据的电力数据的个数,c为该次采集到的电力数据的总个数,所述上传指数判断模块将上传指数与上传阈值进行比较,如果上传指数大于上传阈值,那么直接将上传数据上传到电力数据库,否则修改指数计算模块计算某个进行处理后作为上传数据的待处理数据的修改指数
Figure DEST_PATH_IMAGE014
,其中,x为最近采集的电力数据包含该种待处理数据种类的次数,v为最近采集的电力数据上传到电力数据库过程中对该种待处理数据进行处理后再上传的次数,b为该次采集到的电力数据中该种待处理数据的总个数,所述修改指数排序选取模块将各种待处理数据按照修改指数从大到小的顺序排序,按照排序的顺序依次将某一个待处理数据还原为该种待处理数据的原数据作为上传数据后该次采集的电力数据的上传指数,直到上传指数大于上传阈值。
3.根据权利要求2所述的一种多元数据集中管理控制系统,其特征在于:所述管理控制系统还包括静态处理模块,所述静态处理模块将某种待处理数据进行处理后作为上传数据时,将该次采集的电力数据中的该种待处理数据处理为静态数据后作为上传数据,其中,静态数据为某种待处理数据的预设数据,将该次采集的电力数据中的静态数据进行去重处理。
4.一种多元数据集中管理控制方法,其特征在于:所述管理控制方法包括以下步骤:
按照预设频率从电力终端处获取某次采集的电力数据,按照电力数据的种类对该次采集的电力数据进行分类得到k种待处理数据;
获取该次采集的各种待处理数据的特征信息,对每种待处理数据进行稳定性分类,
如果某种待处理数据的稳定性分类为第一类,
如果该次采集中电力数据类型所对应的电力数据存在异常,直接将该种待处理数据的原数据作为上传数据,否则,那么将该种待处理数据进行处理后作为上传数据;
如果某种待处理数据的稳定性分类为第二类,直接将该种待处理数据的原数据作为上传数据;
将该次采集的电力数据的上传数据上传到电力数据库;
所述对每种待处理数据进行稳定性分类包括:
计算某种待处理数据的稳定性指数
Figure 122296DEST_PATH_IMAGE002
,其中,m为历史采集到包含该种待处理数据的电力数据的次数,n为历史采集到包含该种待处理数据的电力数据时该种待处理数据出现异常的次数,
Figure 481514DEST_PATH_IMAGE004
为历史第i次采集该种待处理数据出现异常时其他出现异常的电力数据的种类数,
Figure 198934DEST_PATH_IMAGE006
为历史第i次采集该种待处理数据出现异常时所采集到的电力数据的种类数,
Figure 328564DEST_PATH_IMAGE008
为历史第i次采集该种待处理数据出现异常时所采集到的电力数据数目,
Figure 80619DEST_PATH_IMAGE010
如果某种待处理数据的稳定性指数大于稳定性阈值,那么该种待处理数据的稳定性分类为第一类,
否则,该种待处理数据的稳定性分类为第二类。
5.根据权利要求4所述的一种多元数据集中管理控制方法,其特征在于:所述将该次采集的各个待处理数据的上传数据上传到电力数据库之前还包括:
采集该次采集的电力数据的上传指数
Figure 339300DEST_PATH_IMAGE012
,其中,d为该次采集的电力数据中将原数据作为上传数据的电力数据的个数,c为该次采集到的电力数据的总个数,
如果上传指数大于上传阈值,那么直接将上传数据上传到电力数据库,
否则,计算某个进行处理后作为上传数据的待处理数据的修改指数
Figure 544016DEST_PATH_IMAGE014
,其中,x为最近采集的电力数据包含该种待处理数据种类的次数,v为最近采集的电力数据上传到电力数据库过程中对该种待处理数据进行处理后再上传的次数,b为该次采集到的电力数据中该种待处理数据的总个数,
将各种待处理数据按照修改指数从大到小的顺序排序,按照排序的顺序依次将某一个待处理数据还原为该种待处理数据的原数据作为上传数据后该次采集的电力数据的上传指数,直到上传指数大于上传阈值。
6.根据权利要求5所述的一种多元数据集中管理控制方法,其特征在于:所述将该种待处理数据进行处理后作为上传数据包括:
将该次采集的电力数据中的该种待处理数据处理为静态数据后作为上传数据,其中,静态数据为某种待处理数据的预设数据。
7.根据权利要求6所述的一种多元数据集中管理控制方法,其特征在于:所述将该种待处理数据进行处理后作为上传数据包括:
将该次采集的电力数据中的静态数据进行去重处理。
CN202210436487.2A 2022-04-25 2022-04-25 一种多元数据集中管理控制系统及方法 Active CN114756722B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210436487.2A CN114756722B (zh) 2022-04-25 2022-04-25 一种多元数据集中管理控制系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210436487.2A CN114756722B (zh) 2022-04-25 2022-04-25 一种多元数据集中管理控制系统及方法

Publications (2)

Publication Number Publication Date
CN114756722A CN114756722A (zh) 2022-07-15
CN114756722B true CN114756722B (zh) 2022-10-04

Family

ID=82333138

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210436487.2A Active CN114756722B (zh) 2022-04-25 2022-04-25 一种多元数据集中管理控制系统及方法

Country Status (1)

Country Link
CN (1) CN114756722B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115407677B (zh) * 2022-09-23 2023-06-02 北京德元方惠科技开发有限责任公司 一种基于大数据的信息储存系统及方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108132423A (zh) * 2017-12-14 2018-06-08 武汉大学 一种基于状态转移概率电力系统监测数据失真的快速定位方法
EP3712777A1 (en) * 2017-11-13 2020-09-23 Hitachi, Ltd. Data classification device
CN111724278A (zh) * 2020-06-11 2020-09-29 国网吉林省电力有限公司 一种面向电力多元负荷用户的精细分类方法及系统
CN112150304A (zh) * 2020-08-13 2020-12-29 国电南瑞科技股份有限公司 电网运行状态轨迹稳定性预判方法、系统及存储介质
CN113987031A (zh) * 2021-11-15 2022-01-28 国网信通亿力科技有限责任公司 一种电力大数据的数据异常判别方法
CN114048362A (zh) * 2022-01-11 2022-02-15 国网电子商务有限公司 基于区块链的电力数据异常检测方法、装置和系统
CN114358152A (zh) * 2021-12-21 2022-04-15 国网江苏省电力有限公司苏州供电分公司 一种智能电力数据异常检测方法及系统

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8463452B2 (en) * 2008-07-29 2013-06-11 Enmetric Systems, Inc. Apparatus using time-based electrical characteristics to identify an electrical appliance

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3712777A1 (en) * 2017-11-13 2020-09-23 Hitachi, Ltd. Data classification device
CN108132423A (zh) * 2017-12-14 2018-06-08 武汉大学 一种基于状态转移概率电力系统监测数据失真的快速定位方法
CN111724278A (zh) * 2020-06-11 2020-09-29 国网吉林省电力有限公司 一种面向电力多元负荷用户的精细分类方法及系统
CN112150304A (zh) * 2020-08-13 2020-12-29 国电南瑞科技股份有限公司 电网运行状态轨迹稳定性预判方法、系统及存储介质
CN113987031A (zh) * 2021-11-15 2022-01-28 国网信通亿力科技有限责任公司 一种电力大数据的数据异常判别方法
CN114358152A (zh) * 2021-12-21 2022-04-15 国网江苏省电力有限公司苏州供电分公司 一种智能电力数据异常检测方法及系统
CN114048362A (zh) * 2022-01-11 2022-02-15 国网电子商务有限公司 基于区块链的电力数据异常检测方法、装置和系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
用户侧用电数据特征提取与异常检测研究;赵嫚;《中国优秀硕士学位论文全文数据库 工程科技Ⅱ辑》;20210515;全文 *
电力系统暂态稳定评估方法研究现状及展望;谢彦祥,肖汉;《电工电气》;20201115;全文 *

Also Published As

Publication number Publication date
CN114756722A (zh) 2022-07-15

Similar Documents

Publication Publication Date Title
CN109740648B (zh) 电力负荷异常数据识别方法、装置和计算机设备
CN108694470B (zh) 一种基于人工智能的数据预测方法及装置
CN109861206B (zh) 一种基于支持向量机的暂态功角稳定故障筛选系统及方法
CN110610121B (zh) 基于曲线聚类的小时级源荷功率异常数据辨识与修复方法
CN114756722B (zh) 一种多元数据集中管理控制系统及方法
CN111709554A (zh) 一种配电网净负荷联合预测的方法及系统
CN111881961A (zh) 基于数据挖掘的配电网故障风险等级预测方法
JP7422272B2 (ja) 産業オートメーション制御システムまたは電力システムからのデータの保存を促進するための方法および装置
CN115794578A (zh) 一种电力系统的数据管理方法、装置、设备及介质
CN114417971A (zh) 一种基于k近邻密度峰值聚类的电力数据异常值检测算法
CN114817178A (zh) 工业互联网数据存储方法、系统、存储介质及电子设备
CN110597792A (zh) 基于同期线损数据融合的多级冗余数据融合方法及装置
CN110807174B (zh) 一种基于统计分布的污水厂厂群出水分析及异常识别方法
CN107666403B (zh) 一种指标数据的获取方法及装置
CN117592656A (zh) 基于碳数据核算的碳足迹监控方法及系统
CN117131391A (zh) 基于智慧能源平台的企业能耗分析与告警方法
CN108319573B (zh) 一种基于能源统计数据异常判断和修复的方法
CN114819391B (zh) 基于历史数据集时间跨度优化的光伏发电功率预测方法及系统
CN114330440B (zh) 基于模拟学习判别的分布式电源负荷异常识别方法及系统
CN115313522A (zh) 一种考虑新能源出力预测偏差的备用容量配置方法及系统
CN116150132A (zh) 一种企业物联数据处理方法、终端设备及存储介质
CN114693067A (zh) 一种异常用电用户识别方法
CN113902485A (zh) 一种专变电力用户行业识别方法、装置及设备
CN113657475A (zh) 基于分类的用电量预测方法
CN111967918A (zh) 一种基于支持向量回归算法的预测电价的系统模型

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CB03 Change of inventor or designer information
CB03 Change of inventor or designer information

Inventor after: Liu Zhiyong

Inventor after: Chen Lianghan

Inventor after: Duan Haining

Inventor after: Weng Weicheng

Inventor before: Chen Lianghan

Inventor before: Duan Haining

Inventor before: Weng Weicheng