CN111694822A - 一种低压配网运行状态数据采集系统及其采集方法 - Google Patents
一种低压配网运行状态数据采集系统及其采集方法 Download PDFInfo
- Publication number
- CN111694822A CN111694822A CN202010367866.1A CN202010367866A CN111694822A CN 111694822 A CN111694822 A CN 111694822A CN 202010367866 A CN202010367866 A CN 202010367866A CN 111694822 A CN111694822 A CN 111694822A
- Authority
- CN
- China
- Prior art keywords
- data
- data information
- distribution network
- low
- voltage distribution
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims description 11
- 238000004140 cleaning Methods 0.000 claims abstract description 30
- 238000012544 monitoring process Methods 0.000 claims abstract description 14
- 230000009467 reduction Effects 0.000 claims abstract description 8
- 230000008859 change Effects 0.000 claims description 30
- 239000011159 matrix material Substances 0.000 claims description 13
- 230000011218 segmentation Effects 0.000 claims description 4
- 239000000284 extract Substances 0.000 claims description 3
- 238000000605 extraction Methods 0.000 claims description 3
- 238000009499 grossing Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 abstract description 5
- 230000007547 defect Effects 0.000 abstract description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 238000013480 data collection Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/21—Design, administration or maintenance of databases
- G06F16/215—Improving data quality; Data cleansing, e.g. de-duplication, removing invalid entries or correcting typographical errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2433—Query languages
- G06F16/244—Grouping and aggregation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
- G06Q50/06—Electricity, gas or water supply
Abstract
本发明公开了一种低压配网运行状态数据采集系统,包括数据读取模块,用于读取低压配网运行状态数据信息;数据清洗模块,用于对读取的数据信息进行清洗处理,去除无效数据;数据归约模块,用于对数据信息进行精简;数据发送模块,用于将处理后的数据信息发送至低压配网运行状态监控系统。本发明能够改进现有技术的不足,提高了监测结果的实时性。
Description
技术领域
本发明涉及电力系统监控技术领域,尤其是一种低压配网运行状态数据采集系统及其采集方法。
背景技术
低压配网是电力系统与用户直接相连的部分,其运行的稳定性与用户的用电质量息息相关。所以,对于低压配网运行状态的监控十分必要。现有技术中,为了保证低压配网监测的准确性,监测数据量大,导致数据传输效率低,监测结果实时性差。
发明内容
本发明要解决的技术问题是提供一种低压配网运行状态数据采集系统及其采集方法,能够解决现有技术的不足,提高了监测结果的实时性。
为解决上述技术问题,本发明所采取的技术方案如下。
一种低压配网运行状态数据采集系统,包括:
数据读取模块,用于读取低压配网运行状态数据信息;
数据清洗模块,用于对读取的数据信息进行清洗处理,去除无效数据;
数据归约模块,用于对数据信息进行精简;
数据发送模块,用于将处理后的数据信息发送至低压配网运行状态监控系统。
一种上述的低压配网运行状态数据采集系统的采集方法,包括以下步骤:
A、数据读取模块读取低压配网运行状态数据信息;
B、数据清洗模块对读取的数据信息进行清洗处理,去除无效数据;
C、数据归约模块提取经过清洗的数据信息的数据特征,根据数据特征对数据信息进行分割和合并;
D、数据发送模块将处理后的数据信息发送至低压配网运行状态监控系统。
作为优选,步骤B中,对读取的数据信息进行清洗处理包括以下步骤,
B1、根据数据信息的种类进行分类;
B2、提取不同类别数据信息中线性相关的数据段,组成清洗操作参考数据段;
B3、对数据信息进行清洗操作;
B4、对比清洗操作前后的清洗操作参考数据段的变化,组成变化序列函数,在变化序列函数中标记变化特征点,对清洗后的数据信息进行校正,保证变化特征点变化趋势的单调性;
变化特征点的选择方式为,变化特征点的相邻变化序列函数在设定长度下具有大于设定值的线性相关度,且变化特征点处连续可导。
作为优选,步骤C中,提取经过清洗的数据信息的数据特征包括以下步骤,
C11、提取与变化特征点相关的数据信息的数据特征;
C12、将步骤C11提取的数据特征进行归一化,根据归一化的特征值对未在步骤C11中进行特征提取的数据信息进行特征值比对,将比对出的相似特征直接作为特征值进行提取,组成特征值矩阵。
作为优选,步骤C中,对数据信息进行分割和合并包括以下步骤,
C21、对特征值矩阵进行正规化;
C22、将步骤C21得到的特征值矩阵的特征矩阵作为数据分割点,对数据进行分割;
C23、将分割后数据段的端点相似度大于阈值的数据段端点进行合并,对合并后的数据段进行平滑处理。
采用上述技术方案所带来的有益效果在于:
通过对采集的数据进行清洗、归约等一系列具有针对性的处理,可以有效压缩数据量、保留有效数据,提高数据传输和监测的效率和实时性。通过使用清洗操作参考数据段对数据清洗进行校准,可以降低由于数据清洗对数据有效性的损失。然后通过提取与变化特征点相关的数据信息的数据特征,可以在不增加额外计算量的前提下获得特征值矩阵,然后实现对数据信息的快速分割和合并,从而降低数据处理的运算量,提高处理效率。
附图说明
图1是本发明一个具体实施方式的系统原理图。
具体实施方式
参照图1,本发明一个具体实施方式包括:
数据读取模块1,用于读取低压配网运行状态数据信息;
数据清洗模块2,用于对读取的数据信息进行清洗处理,去除无效数据;
数据归约模块3,用于对数据信息进行精简;
数据发送模块4,用于将处理后的数据信息发送至低压配网运行状态监控系统。
一种上述的低压配网运行状态数据采集系统的采集方法,包括以下步骤:
A、数据读取模块1读取低压配网运行状态数据信息;
B、数据清洗模块2对读取的数据信息进行清洗处理,去除无效数据;
C、数据归约模块3提取经过清洗的数据信息的数据特征,根据数据特征对数据信息进行分割和合并;
D、数据发送模块4将处理后的数据信息发送至低压配网运行状态监控系统。
步骤B中,对读取的数据信息进行清洗处理包括以下步骤,
B1、根据数据信息的种类进行分类;
B2、提取不同类别数据信息中线性相关的数据段,组成清洗操作参考数据段;
B3、对数据信息进行清洗操作;
B4、对比清洗操作前后的清洗操作参考数据段的变化,组成变化序列函数,在变化序列函数中标记变化特征点,对清洗后的数据信息进行校正,保证变化特征点变化趋势的单调性;
变化特征点的选择方式为,变化特征点的相邻变化序列函数在设定长度下具有大于设定值的线性相关度,且变化特征点处连续可导。
步骤C中,提取经过清洗的数据信息的数据特征包括以下步骤,
C11、提取与变化特征点相关的数据信息的数据特征;
C12、将步骤C11提取的数据特征进行归一化,根据归一化的特征值对未在步骤C11中进行特征提取的数据信息进行特征值比对,将比对出的相似特征直接作为特征值进行提取,组成特征值矩阵。
步骤C中,对数据信息进行分割和合并包括以下步骤,
C21、对特征值矩阵进行正规化;
C22、将步骤C21得到的特征值矩阵的特征矩阵作为数据分割点,对数据进行分割;在分割处设置分割标识,分割标识为以分割路径和分割路径上数据帧的散列值作为自变量的函数;
C23、将分割后数据段的端点相似度大于阈值的数据段端点进行合并,对合并后的数据段进行平滑处理;端点相似度为对应分割标识的相似度。
以上显示和描述了本发明的基本原理和主要特征和本发明的优点。本行业的技术人员应该了解,本发明不受上述实施例的限制,上述实施例和说明书中描述的只是说明本发明的原理,在不脱离本发明精神和范围的前提下,本发明还会有各种变化和改进,这些变化和改进都落入要求保护的本发明范围内。本发明要求保护范围由所附的权利要求书及其等效物界定。
Claims (5)
1.一种低压配网运行状态数据采集系统,其特征在于包括:
数据读取模块(1),用于读取低压配网运行状态数据信息;
数据清洗模块(2),用于对读取的数据信息进行清洗处理,去除无效数据;
数据归约模块(3),用于对数据信息进行精简;
数据发送模块(4),用于将处理后的数据信息发送至低压配网运行状态监控系统。
2.一种权利要求1所述的低压配网运行状态数据采集系统的采集方法,其特征在于包括以下步骤:
A、数据读取模块(1)读取低压配网运行状态数据信息;
B、数据清洗模块(2)对读取的数据信息进行清洗处理,去除无效数据;
C、数据归约模块(3)提取经过清洗的数据信息的数据特征,根据数据特征对数据信息进行分割和合并;
D、数据发送模块(4)将处理后的数据信息发送至低压配网运行状态监控系统。
3.根据权利要求2所述的低压配网运行状态数据采集系统的采集方法,其特征在于:步骤B中,对读取的数据信息进行清洗处理包括以下步骤,
B1、根据数据信息的种类进行分类;
B2、提取不同类别数据信息中线性相关的数据段,组成清洗操作参考数据段;
B3、对数据信息进行清洗操作;
B4、对比清洗操作前后的清洗操作参考数据段的变化,组成变化序列函数,在变化序列函数中标记变化特征点,对清洗后的数据信息进行校正,保证变化特征点变化趋势的单调性;
变化特征点的选择方式为,变化特征点的相邻变化序列函数在设定长度下具有大于设定值的线性相关度,且变化特征点处连续可导。
4.根据权利要求3所述的低压配网运行状态数据采集系统的采集方法,其特征在于:步骤C中,提取经过清洗的数据信息的数据特征包括以下步骤,
C11、提取与变化特征点相关的数据信息的数据特征;
C12、将步骤C11提取的数据特征进行归一化,根据归一化的特征值对未在步骤C11中进行特征提取的数据信息进行特征值比对,将比对出的相似特征直接作为特征值进行提取,组成特征值矩阵。
5.根据权利要求4所述的低压配网运行状态数据采集系统的采集方法,其特征在于:步骤C中,对数据信息进行分割和合并包括以下步骤,
C21、对特征值矩阵进行正规化;
C22、将步骤C21得到的特征值矩阵的特征矩阵作为数据分割点,对数据进行分割;
C23、将分割后数据段的端点相似度大于阈值的数据段端点进行合并,对合并后的数据段进行平滑处理。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010367866.1A CN111694822A (zh) | 2020-04-30 | 2020-04-30 | 一种低压配网运行状态数据采集系统及其采集方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010367866.1A CN111694822A (zh) | 2020-04-30 | 2020-04-30 | 一种低压配网运行状态数据采集系统及其采集方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111694822A true CN111694822A (zh) | 2020-09-22 |
Family
ID=72477000
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010367866.1A Pending CN111694822A (zh) | 2020-04-30 | 2020-04-30 | 一种低压配网运行状态数据采集系统及其采集方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111694822A (zh) |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2007072347A2 (en) * | 2005-12-22 | 2007-06-28 | Koninklijke Philips Electronics N.V. | System and method for processing video |
CN102819562A (zh) * | 2012-07-04 | 2012-12-12 | 国家基础地理信息中心 | 一种地理空间信息网络化标报的方法 |
CN103606057A (zh) * | 2013-11-29 | 2014-02-26 | 国家电网公司 | 一种用电服务质量监管系统和方法 |
CN104679834A (zh) * | 2015-02-06 | 2015-06-03 | 北京工商大学 | 一种时序数据清洗方法及系统 |
US20160182771A1 (en) * | 2014-12-23 | 2016-06-23 | Electronics And Telecommunications Research Institute | Apparatus and method for generating sensory effect metadata |
CN108120437A (zh) * | 2017-12-08 | 2018-06-05 | 中国科学院光电研究院 | 一种基于地磁场强度序列特征点对齐的行人路径匹配方法 |
CN109470954A (zh) * | 2018-11-08 | 2019-03-15 | 吉铁磊 | 一种基于大数据的电网运行状态监测系统及其监测方法 |
CN109740872A (zh) * | 2018-12-18 | 2019-05-10 | 国网山西省电力公司长治供电公司 | 一种台区运行状态的诊断方法及系统 |
CN110503570A (zh) * | 2019-07-16 | 2019-11-26 | 国网江苏省电力有限公司滨海县供电分公司 | 一种异常用电数据检测方法、系统、设备、存储介质 |
CN210051840U (zh) * | 2019-02-20 | 2020-02-11 | 广东电网有限责任公司 | 配电网故障的检测装置和系统 |
-
2020
- 2020-04-30 CN CN202010367866.1A patent/CN111694822A/zh active Pending
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2007072347A2 (en) * | 2005-12-22 | 2007-06-28 | Koninklijke Philips Electronics N.V. | System and method for processing video |
CN102819562A (zh) * | 2012-07-04 | 2012-12-12 | 国家基础地理信息中心 | 一种地理空间信息网络化标报的方法 |
CN103606057A (zh) * | 2013-11-29 | 2014-02-26 | 国家电网公司 | 一种用电服务质量监管系统和方法 |
US20160182771A1 (en) * | 2014-12-23 | 2016-06-23 | Electronics And Telecommunications Research Institute | Apparatus and method for generating sensory effect metadata |
CN104679834A (zh) * | 2015-02-06 | 2015-06-03 | 北京工商大学 | 一种时序数据清洗方法及系统 |
CN108120437A (zh) * | 2017-12-08 | 2018-06-05 | 中国科学院光电研究院 | 一种基于地磁场强度序列特征点对齐的行人路径匹配方法 |
CN109470954A (zh) * | 2018-11-08 | 2019-03-15 | 吉铁磊 | 一种基于大数据的电网运行状态监测系统及其监测方法 |
CN109740872A (zh) * | 2018-12-18 | 2019-05-10 | 国网山西省电力公司长治供电公司 | 一种台区运行状态的诊断方法及系统 |
CN210051840U (zh) * | 2019-02-20 | 2020-02-11 | 广东电网有限责任公司 | 配电网故障的检测装置和系统 |
CN110503570A (zh) * | 2019-07-16 | 2019-11-26 | 国网江苏省电力有限公司滨海县供电分公司 | 一种异常用电数据检测方法、系统、设备、存储介质 |
Non-Patent Citations (2)
Title |
---|
冷喜武;陈国平;蒋宇;张家琪;曹越峰;: "智能电网监控运行大数据分析系统的数据规范和数据处理", 电力系统自动化, no. 19, 10 October 2018 (2018-10-10), pages 240 - 249 * |
韩晓霞;崔浩;孙钰珊;: "顾及曲线走向及局部面积特征的矢量数据压缩算法", 北京测绘, no. 06, 25 December 2017 (2017-12-25), pages 10 - 13 * |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2008535327A (ja) | 適応型データ圧縮、多次元予測、複数符号復号の改善による改良により前処理されたロスレスデータ変換の方法および装置 | |
CN105719275A (zh) | 一种并行组合的图像缺陷分割方法 | |
CN114461854A (zh) | 一种基于向量数据库的监控视频人物检索方法及系统 | |
CN115037543A (zh) | 一种基于双向时间卷积神经网络的异常网络流量检测方法 | |
CN104637045A (zh) | 一种基于超级像素层次特征的图像像素标号方法 | |
CN112770116B (zh) | 用视频压缩编码信息提取视频关键帧的方法 | |
CN111694822A (zh) | 一种低压配网运行状态数据采集系统及其采集方法 | |
CN106656201B (zh) | 一种基于采样数据幅频特性的压缩方法 | |
CN103136518A (zh) | 指纹图像自动识别系统预处理算法 | |
CN115865099B (zh) | 基于霍夫曼编码的多类型数据分段压缩方法及系统 | |
CN113726824B (zh) | 一种基于图像特征的诈骗网站查找方法及系统 | |
CN113838045B (zh) | 一种改进骨刺去除算法的pcb覆铜线路骨架轮廓提取方法 | |
CN104751459A (zh) | 多维特征的相似性度量优化方法及图像匹配方法 | |
Wang et al. | Fingerprint Refinement Model Based on Improved OPTA | |
Hou et al. | A multiple features video copy detection algorithm based on a SURF descriptor | |
CN113283744A (zh) | 一种轻量级用电异常特征指纹库设计和更新方法 | |
Liu et al. | Automatic seal image retrieval method by using shape features of Chinese characters | |
CN208768165U (zh) | 一种高清网络摄像机 | |
CN108229486A (zh) | 一种纤维识别分割方法 | |
CN116740532A (zh) | 一种基于yolov5算法的轻量化行人检测方法 | |
CN115269583B (zh) | 一种用于大数据处理的无监督清洗方法 | |
CN110110781B (zh) | 基于优质邻接点的子空间聚类方法 | |
CN111680911B (zh) | 一种火电厂在线能耗计算系统及其计算方法 | |
CN101520898A (zh) | 一种基于位运算的地图图像细化和线跟踪方法 | |
Chen et al. | An Improved Algorithm for Enhancing Fingerprint Image Quality |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |