CN117271987B - 一种配电设备环境状态数据智能采集处理方法 - Google Patents
一种配电设备环境状态数据智能采集处理方法 Download PDFInfo
- Publication number
- CN117271987B CN117271987B CN202311567783.7A CN202311567783A CN117271987B CN 117271987 B CN117271987 B CN 117271987B CN 202311567783 A CN202311567783 A CN 202311567783A CN 117271987 B CN117271987 B CN 117271987B
- Authority
- CN
- China
- Prior art keywords
- time sequence
- sequence data
- data segment
- data
- environmental state
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000007613 environmental effect Effects 0.000 title claims abstract description 104
- 238000003672 processing method Methods 0.000 title claims abstract description 18
- 238000000354 decomposition reaction Methods 0.000 claims abstract description 21
- 238000005192 partition Methods 0.000 claims abstract description 16
- 238000012545 processing Methods 0.000 claims abstract description 14
- 238000000034 method Methods 0.000 claims description 30
- 238000010606 normalization Methods 0.000 claims description 14
- 238000011156 evaluation Methods 0.000 claims description 11
- 238000013507 mapping Methods 0.000 claims description 5
- 238000005070 sampling Methods 0.000 claims description 5
- 238000012512 characterization method Methods 0.000 abstract description 2
- 238000004458 analytical method Methods 0.000 description 6
- 230000002159 abnormal effect Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000001932 seasonal effect Effects 0.000 description 3
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000012423 maintenance Methods 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000007405 data analysis Methods 0.000 description 1
- 238000003745 diagnosis Methods 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 238000005265 energy consumption Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000000737 periodic effect Effects 0.000 description 1
- 230000000750 progressive effect Effects 0.000 description 1
- 230000002035 prolonged effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/10—Pre-processing; Data cleansing
- G06F18/15—Statistical pre-processing, e.g. techniques for normalisation or restoring missing data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/27—Regression, e.g. linear or logistic regression
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/06—Energy or water supply
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2123/00—Data types
- G06F2123/02—Data types in the time domain, e.g. time-series data
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Business, Economics & Management (AREA)
- Economics (AREA)
- Health & Medical Sciences (AREA)
- Probability & Statistics with Applications (AREA)
- Public Health (AREA)
- Water Supply & Treatment (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Complex Calculations (AREA)
Abstract
本发明涉及数据处理技术领域,具体涉及一种配电设备环境状态数据智能采集处理方法。本发明对环境状态时序数据均分获得时序数据段;在每个时序数据段与后一个时序数据段之间,通过数据波动的频率特征和数值特征获得初始相似数据段;在每个时序数据段与初始相似数据段之间,根据数据变化程度的相似性得到最终相似数据段;通过最终相似数据段的连续分布情况,获得环境状态时序数据中的划分区间;环境状态时序数据进行STL分解中,根据划分区间调整局部加权回归算法对应拟合窗口的大小,获得环境状态分量数据进行存储。本发明通过数据特征调整拟合窗口,使得存储的数据保存完整损失度低,数据特征表征更准确,存储的采集数据质量更优。
Description
技术领域
本发明涉及数据处理技术领域,具体涉及一种配电设备环境状态数据智能采集处理方法。
背景技术
采集配电设备环境状态数据对于确保配电设备的可靠性,安全性和高效性非常重要,通过采集环境状态数据,可以实时监测配电设备所处环境的多种参数条件,进而可以检测异常情况或潜在故障的预测,提供相应的预警和诊断能力。而由于环境数据的种类繁多且需要监测的时间长,因此合理地对采集数据处理存储成为了较为关注的问题之一。
由于环境状态数据在时序上具有较强的周期特征,因此为了便于数据分析会选择时序分解进行处理,根据分解得到的数据分量进行存储,但在通过STL分解过程中,由于环境数据的波动变化不同,在采用相同拟合窗口的局部加权回归算法进行平滑估计后,数据分量的数据特征会产生偏差,拟合效果较差,导致数据损失程度较高,存储的采集数据的质量较差,采集处理方法可信度低。
发明内容
为了解决现有技术中数据损失程度较高,存储的采集数据的质量较差,采集处理方法可信度低的技术问题,本发明的目的在于提供一种配电设备环境状态数据智能采集处理方法,所采用的技术方案具体如下:
本发明提供了一种配电设备环境状态数据智能采集处理方法,所述方法包括:
获得配电设备运行中的环境状态时序数据;将环境状态时序数据均匀划分为至少两个时序数据段;
在每个时序数据段与后一个时序数据段之间,根据数据波动的频率特征和数值特征的相似程度,获得每个时序数据段的初始相似数据段;根据每个时序数据段与初始相似数据段之间的数据变化程度的相似性,获得每个时序数据段的最终相似数据段;根据所有时序数据段对应的最终相似数据段的连续分布情况,获得环境状态时序数据中的划分区间;
根据环境状态时序数据中的划分区间,调整环境状态时序数据在进行STL分解中的局部加权回归算法对应拟合窗口的大小,获得环境状态分量数据进行存储。
进一步地,所述获得每个时序数据段的初始相似数据段,包括:
对于任意一个时序数据段,获得该时序数据段中的波动次数;将该时序数据段的波动次数与对应的时间长度的比值进行归一化处理,获得该时序数据段的频率特征;
计算该时序数据段中所有数据对应的数据值的平均值并进行归一化处理,获得该时序数据段的数值特征;
将该时序数据段的频率特征与数值特征加权求和,获得该时序数据段的相似评估指标;
当该时序数据段与后一个时序数据段对应的相似评估指标之间的差异小于或等于预设相似阈值时,将后一个时序数据段作为该时序数据段的初始相似数据段;预设相似阈值为正数。
进一步地,所述获得每个时序数据段的最终相似数据段,包括:
对于任意一个存在初始相似数据段的时序数据段,将该时序数据段中所有数据的数据值的平均值,作为平均数据值;计算该时序数据段中每个数据的数据值与平均数据值之间的差异,获得数值偏差度;将该时序数据段中所有数值偏差度的累加值,作为该时序数据段的环境变化特征值;
在该时序数据段与初始相似数据段之间,将频率特征的差异和数值特征的差异的和值进行反比例归一化,获得相似权重;
将该时序数据段与初始相似数据段之间的环境变化特征值的差异进行负相关映射并归一化处理,获得变化相似性;
将该时序数据段与初始相似数据段之间的相似权重与变化相似性的乘积,作为该时序数据段的环境变化相似指标;当该时序数据段的环境变化相似指标大于或等于预设变化相似阈值时,将该时序数据段的初始相似数据段作为该时序数据段的最终相似数据段;预设变化相似阈值为正数。
进一步地,所述获得环境状态时序数据中的划分区间,包括:
按照时序顺序遍历时序数据段,当时序数据段不存在最终相似数据段时,将对应的时序数据段作为一个划分区间;
当时序数据段存在最终相似数据段时,将对应的时序数据段和最终相似数据段作为一个初始区间,当初始区间中最后一个时序数据段满足更新条件时,更新初始区间;直至初始区间中最后一个时序数据段不满足更新条件,停止更新,将此时的初始区间作为一个划分区间;
当不存在未遍历的时序数据段时停止,获得环境状态时序数据中的所有划分区间。
进一步地,所述当初始区间中最后一个时序数据段满足更新条件时,更新初始区间,包括:
所述更新条件为:时序数据段存在最终相似数据段;
当初始区间中最后一个时序数据段存在最终相似数据段时,将最后一个时序数据段的最终相似数据段合并到初始区间中,获得更新后的初始区间。
进一步地,所述根据环境状态时序数据中的划分区间,调整环境状态时序数据在进行STL分解中的局部加权回归算法对应拟合窗口的大小,获得环境状态分量数据进行存储,包括:
对于环境状态时序数据中的任意一个划分区间,将该划分区间对应的时间长度作为该划分区间的区间大小,将区间大小与预设调整权重的乘积,作为该划分区间对应时序信息上的调整窗口大小;预设权重为归一化的值;
在对环境状态时序数据进行STL分解中,采用局部加权回归算法进行平滑估计时,将时间信息对应的调整窗口大小作为拟合窗口的大小,获得趋势项分量、季节项分量和残差分量进行存储。
进一步地,所述获得配电设备运行中的环境状态时序数据,包括:
按照预设采样频率获得配电设备运行中的环境状态数据;以时间为横轴,以环境状态数据的数据值为纵轴,构建特征时序空间;
将所有环境状态数据映射到特征时序空间中,获得环境状态时序数据。
进一步地,所述波动次数的获取方法包括:
将所有环境状态时序数据进行曲线拟合,获得波动曲线;对于任意一个时序数据段,统计在该时序数据段对应的波动曲线上的极大值数量和极小值数量;
将极大值数量与极小值数量中的最小值作为该时序数据段的波动次数;若极大值数量与极小值数量相等,则将极小值数量作为该时序数据段的波动次数。
进一步地,所述曲线拟合采用最小二乘法。
进一步地,所述预设调整权重设置为0.8。
本发明具有如下有益效果:
本发明考虑到环境状态随时间变化具有不同的数据变化特征,对环境状态时序数据进行分段分析,获得时序数据段,在每个时序数据段与后一个时序数据段之间分析数据变化的相似性,通过数据波动的频率特征和数值特征表征每个时序数据段的数据变化特征,对相似数据变化的时序数据段进行初步判断,进一步对每个时序数据段与初始相似数据段之间分析,考虑到数据变化程度也具有一定影响将初始相似数据进一步筛选,得到每个时序数据段的最终相似数据段。最终相似数据段可以表征数据变化特征的连续性,因此通过最终相似数据段的连续分布情况,对所有时序数据段重新进行划分,获得环境状态时序数据中的划分区间,并最终根据划分区间调整STL分解中的局部加权回归算法对应拟合窗口的大小,使得最终对环境状态时序数据在进行STL分解获得环境状态分量数据进行存储,本发明通过数据特征调整拟合窗口,使得存储的数据保存完整损失度低,存储的采集数据质量更优,得到数据特征表征更准确,使采集处理方法可信度高。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案和优点,下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其它附图。
图1为本发明一个实施例所提供的一种配电设备环境状态数据智能采集处理方法流程图。
具体实施方式
为了更进一步阐述本发明为达成预定发明目的所采取的技术手段及功效,以下结合附图及较佳实施例,对依据本发明提出的一种配电设备环境状态数据智能采集处理方法,其具体实施方式、结构、特征及其功效,详细说明如下。在下述说明中,不同的“一个实施例”或“另一个实施例”指的不一定是同一实施例。此外,一或多个实施例中的特定特征、结构或特点可由任何合适形式组合。
除非另有定义,本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。
下面结合附图具体的说明本发明所提供的一种配电设备环境状态数据智能采集处理方法的具体方案。
请参阅图1,其示出了本发明一个实施例提供的一种配电设备环境状态数据智能采集处理方法流程图,该方法包括:
S1:获得配电设备运行中的环境状态时序数据;将环境状态时序数据均匀划分为至少两个时序数据段。
在配电设备运行过程中可能受到温度、湿度和粉尘等多重环境因素的影响,使得配电设备中的电流产生振动,并导致配电设备在不同时间段用电量大小不同,影响设备的使用寿命。因此通过环境状态数据结合配电设备的振动特征,能够帮助优化配电设备的能耗,制定维护计划和采取对应的保养措施,提高设备的可用性并延长设备的寿命。因此需要对配电设备的环境状态数据进行采集,对于环境状态数据的数据量是海量的,且通常在采集时会对数据进行合理的压缩存储,在本发明实施例中,为了保留数据特征且减少压缩空间,采用STL分解进行分解压缩存储。
首先获得配电设备运行中的环境状态时序数据,优选地,按照预设采样频率获得配电设备运行中的环境状态数据,在本发明实施例中,预设采样频率设置为3秒/次,为了更好的通过环境状态对配电设备运行情况进行分析,采样的总时长设置为一天,即环境状态数据为配电设备运行一天的数据,具体数值实施者可根据具体实施环境进行调整。
由于环境状态数据会随着时间变化产生一定的周期变化,在本发明一个实施例中,以时间为横轴,以环境状态数据的数据值为纵轴,构建特征时序空间,将所有环境状态数据映射到特征时序空间中,获得环境状态时序数据,为了能够反映环境状态时序数据的变化特征,一般使用STL(Seasonal-Trend decomposition procedures based on Loess)分解法对环境状态时序数据进行分解,STL分解法是一种可以把时间序列分解为趋势项、季节项和残差项的方法,STL分解法包含一系列局部加权回归平滑器,计算速度比较快,可以应对非常大的时间序列数据。
在STL分解过程中,需要采用通过局部加权回归(Locally weighted regression,Loess)算法进行平滑估计,而Loess算法中的拟合窗口的大小选择不同,Loess算法的拟合效果也不同。当选择较大的Loess拟合窗口,使局部加权回归模型更关注邻近点的权重,从而减小离散点和异常点的影响,得到更平滑的分量数据,但窗口过大会导致局部的数据短期波动信息丢失,导致分解结果产生较大的偏差。当选择较小的Loess拟合窗口,可以更准确的表现出时序数据的短期波动特征,但对异常离群值非常敏感且无法较为客观的反映整体数据的变化特征。因此为了环境状态时序数据的数据特征能够更完整的存储,根据环境状态时序数据的数据变化特征进行拟合窗口的自适应调整。需要说明的是,STL分解过程和局部加权回归算法为本领域技术人员熟知的技术手段,在此不做赘述。
由于环境状态时序数据在不同的时间段上的数据波动变化不同,需要不同的拟合窗口,因此将环境状态时序数据均匀划分为至少两个时序数据段,通过时序数据段之间的相似差异情况进行分析。在本发明实施例中,将时间长度为一小时的环境状态时序数据作为一个时序数据段,时序数据段对应的时间长度是小于环境状态时序数据的,通过两个以上的时序数据段分析数据变化的一致性特征。
S2:在每个时序数据段与后一个时序数据段之间,根据数据波动的频率特征和数值特征的相似程度,获得每个时序数据段的初始相似数据段;根据每个时序数据段与初始相似数据段之间的数据变化程度的相似性,获得每个时序数据段的最终相似数据段;根据所有时序数据段对应的最终相似数据段的连续分布情况,获得环境状态时序数据中的划分区间。
在时间序列上,分析数据波动变化的相似性特征,对具有相同变化特征的数据采用相同且适合的拟合窗口大小进行拟合。首先考虑到数据波动向后的延续性,在每个时序数据段与后一个时序数据段之间进行分析,通过数据波动的频率特征和数值特征表征每个时序数据段的数据变化情况,通过这两个特征的相似程度,得到每个时序数据段的初始相似数据。
优选地,对于任意一个时序数据段,获得该时序数据段中的波动次数,波动次数能够反映数据的波动变化速率,当波动次数越多,说明数据变化越迅速,在本发明实施例中,将所有环境状态时序数据采用最小二乘法进行曲线拟合,获得波动曲线,通过波动曲线可以更清晰地反映数据的波动变化极值情况,以便后续根据极值得到更准确的波动次数。
对于任意一个时序数据段,统计在该时序数据段对应的波动曲线上的极大值数量和极小值数量,将极大值数量与极小值数量中的最小值作为该时序数据段的波动次数,若极大值数量与极小值数量相等,则将极小值数量作为该时序数据段的波动次数。通过极值的数量反映数据发生波动的次数,在本发明其他实施例中,也可通过波动曲线与数据值的平均值的相交情况得到波动次数,在此不做限制。将该时序数据段的波动次数与对应的时间长度的比值进行归一化处理,获得该时序数据段的频率特征。
计算该时序数据段中所有数据对应的数据值的平均值并进行归一化处理,获得该时序数据段的数值特征,数值特征反映了该时序数据段中所有数据值的整体变化大小。结合频率特征和数值特征,将该时序数据段的频率特征与数值特征加权求和,获得该时序数据段的相似评估指标,在本发明实施例中,相似评估指标的具体表达式为:
式中,表示为第/>个时序数据段的相似评估指标,/>表示为第/>个时序数据段的波动次数,/>表示为时序数据段的时间长度,/>表示为第/>个时序数据段中数据的总数量,表示为第/>个数据的数据值,/>和/>表示为预设加权权重,在本发明实施例中,/>设置为0.6,/>设置为0.4,具体数值实施者根据具体实施情况进行调整。/>表示为归一化函数,需要说明的是,归一化为本领域技术人员熟知的技术手段,归一化函数的选择可以为线性归一化或标准归一化等,具体的归一化方法在此不做限定。
其中,表示为第/>个时序数据段的频率特征,/> 表示为第/>个时序数据段的数值特征,结合数据的波动频率和数据的数据值波动获得相似评估指标,通过相似评估指标表征时序数据段中数据的变化特征。
进一步通过相似评估指标对时序数据段的变化相似进行初步判断,当该时序数据段与后一个时序数据段对应的相似评估指标之间的差异小于或等于预设相似阈值时,说明后一个时序数据段与该时序数据段的数据变化特征较为相似,数据变化还未发生改变,将后一个时序数据段作为该时序数据段的初始相似数据段,在本发明实施例中,预设相似阈值为正数,预设相似阈值设置为0.2,具体数值实施者可根据具体实施情况进行调整。
在完成初步判断后,由于在分析数据变化情况时仅用了数据值的平均值情况,使得存在部分相邻的时序数据段数据平均值较为相似,但是波动程度并不相同,因此通过波动程度进一步对相似数据段进行筛选。根据每个时序数据段与初始相似数据段之间的数据变化程度的相似性,获得每个时序数据段的最终相似数据段。
优选地,对于任意一个存在初始相似数据段的时序数据段,将该时序数据段中所有数据的数据值的平均值,作为平均数据值,计算该时序数据段中每个数据的数据值与平均数据值之间的差异,获得数值偏差度,通过数值偏差度可以反映每个数据与平均数据值的偏差情况,将该时序数据段中所有数值偏差度的累加值,作为该时序数据段的环境变化特征值,通过环境变化特征值,能够反映该时序数据段中数据的变化程度情况,当环境变化特征值越大,说明数据的波动程度越强,数据值的变化程度越大。在本发明实施例中,环境变化特征值的表达式为:
式中,表示为第/>个时序数据段的环境变化特征值,/>表示为第/>个时序数据段中数据的总数量,/>表示为第/>个数据的数据值,/>表示为第/>个数据的数据值,/>表示为绝对值提取函数,/>表示为以自然常数为底的指数函数。
在该时序数据段与初始相似数据段之间,将频率特征的差异和数值特征的差异的和值进行反比例归一化,获得相似权重,当特征之间的差异越小,则需要关注环境变化特征值之间的差异越多。将该时序数据段与初始相似数据段之间的环境变化特征值的差异进行负相关映射并归一化处理,获得变化相似性,通过变化相似性反映两个时序数据段中的数据变化程度之间的差异情况。在本发明实施例中,差异的计算方法均为差值绝对值。
将该时序数据段与初始相似数据段之间的相似权重与变化相似性的乘积,作为该时序数据段的环境变化相似指标,通过环境变化相似指标通过数据变化程度的差异进一步对相似性进行判断。
当该时序数据段的环境变化相似指标大于或等于预设变化相似阈值时,说明该时序数据段与对应的初始相似数据段在数据变化程度上也是相似的,将该时序数据段的初始相似数据段作为该时序数据段的最终相似数据段。在本发明实施例中,预设变化相似阈值为正数,预设变化相似阈值设置为0.8,具体数值实施者可根据具体实施情况进行调整。
通过每个时序数据段的最终相似数据段,可以表征每个时序数据段中数据变化的相似情况,对于存在相似的时序数据段可以选择相同的拟合窗口大小,且相似的时序数据段可能是连续分布的,因此进一步根据所有时序数据段对应的最终相似数据段的连续分布情况,获得环境状态时序数据中的划分区间。
优选地,按照时序顺序遍历时序数据段,即从第一个时序数据段开始进行划分区间的选择,当时序数据段不存在最终相似数据段时,说明此时的数据变化可能较为复杂,数据拟合也需要较小的拟合窗口进行分析,将对应的时序数据段作为一个划分区间。
当时序数据段存在最终相似数据段时,说明时序数据段中的数据变化是连续的,将对应的时序数据段和最终相似数据段作为一个初始区间,初始区间中的数据变化均为相似的,当初始区间中最后一个时序数据段满足更新条件时,更新初始区间,通过最后一个时序数据段中的数据变化是否为连续的情况,对初始区间不断扩展,在本发明一个实施例中,更新条件为:时序数据段存在最终相似数据段,即初始区间向后的数据变化具有连续相似性,扩展过程为,当初始区间中最后一个时序数据段存在最终相似数据段时,将最后一个时序数据段的最终相似数据段合并到初始区间中,获得更新后的初始区间。
直至初始区间中最后一个时序数据段不满足更新条件,初始区间中的数据变化不具有连续相似的时序数据段了,停止更新,将此时的初始区间作为一个划分区间。当不存在未遍历的时序数据段时停止,即所有的时序数据段均进行了划分区间的分配,获得环境状态时序数据中的所有划分区间。
至此,将环境状态时序数据划分为多个划分区间,每个划分区间对应一种数据变化特征,通过划分区间可以对拟合窗口进行调整。
S3:根据环境状态时序数据中的划分区间,调整环境状态时序数据在进行STL分解中的局部加权回归算法对应拟合窗口的大小,获得环境状态分量数据进行存储。
对于环境状态时序数据中的任意一个划分区间,所有划分区间的分析方法均相同,将该划分区间对应的时间长度作为该划分区间的区间大小,将区间大小与预设调整权重的乘积,作为该划分区间对应时序信息上的调整窗口大小,通过划分区间的大小,将具有相同变化特征的较长的划分区间给予更大的拟合窗口,减小对偏离点和异常点的关注,在本发明实施例中,预设权重为归一化的值,预设权重设置为1,具体数值实施者可根据具体实施情况进行调整。
在对环境状态时序数据进行STL分解中,采用局部加权回归算法进行平滑估计时,将时间信息对应的调整窗口大小作为拟合窗口的大小,获得趋势项分量、季节项分量和残差分量进行存储。在本发明实施例中,对趋势项分量、季节项分量和残差分量的压缩存储可采用不同的方案,对于趋势项,可以使用多项式拟合、曲线拟合或简化模型等方法表示来减少存储空间。对于季节项,可以使用LZW编码策略来压缩数据,对具有明显周期性的季节分量可以提高压缩存储效率。而对于此时的残差项,可采用算数编码等方法进行数据压缩存储,也可以选择去除残差项来进行数据压缩存储。
最终实现对环境状态数据的采集存储。
综上,本发明考虑到环境状态随时间变化具有不同的数据变化特征,对环境状态时序数据进行分段分析,获得时序数据段,在每个时序数据段与后一个时序数据段之间分析数据变化的相似性,通过数据波动的频率特征和数值特征表征每个时序数据段的数据变化特征,对相似数据变化的时序数据段进行初步判断,进一步对每个时序数据段与初始相似数据段之间分析,考虑到数据变化程度也具有一定影响将初始相似数据进一步筛选,得到每个时序数据段的最终相似数据段。最终相似数据段可以表征数据变化特征的连续性,因此通过最终相似数据段的连续分布情况,对所有时序数据段重新进行划分,获得环境状态时序数据中的划分区间,并最终根据划分区间调整STL分解中的局部加权回归算法对应拟合窗口的大小,使得最终对环境状态时序数据在进行STL分解获得环境状态分量数据进行存储,本发明通过数据特征调整拟合窗口,使得存储的数据保存完整损失度低,存储的采集数据质量更优,且采集处理方法可信度高,得到数据特征表征更准确。
需要说明的是:上述本发明实施例先后顺序仅仅为了描述,不代表实施例的优劣。在附图中描绘的过程不一定要求示出的特定顺序或者连续顺序才能实现期望的结果。在某些实施方式中,多任务处理和并行处理也是可以的或者可能是有利的。
本说明书中的各个实施例均采用递进的方式描述,各个实施例之间相同相似的部分互相参见即可,每个实施例重点说明的都是与其他实施例的不同之处。
Claims (6)
1.一种配电设备环境状态数据智能采集处理方法,其特征在于,所述方法包括:
获得配电设备运行中的环境状态时序数据;将环境状态时序数据均匀划分为至少两个时序数据段;
在每个时序数据段与后一个时序数据段之间,根据数据波动的频率特征和数值特征的相似程度,获得每个时序数据段的初始相似数据段;根据每个时序数据段与初始相似数据段之间的数据变化程度的相似性,获得每个时序数据段的最终相似数据段;根据所有时序数据段对应的最终相似数据段的连续分布情况,获得环境状态时序数据中的划分区间;
根据环境状态时序数据中的划分区间,调整环境状态时序数据在进行STL分解中的局部加权回归算法对应拟合窗口的大小,获得环境状态分量数据进行存储;
所述获得每个时序数据段的初始相似数据段,包括:
对于任意一个时序数据段,获得该时序数据段中的波动次数;将该时序数据段的波动次数与对应的时间长度的比值进行归一化处理,获得该时序数据段的频率特征;
计算该时序数据段中所有数据对应的数据值的平均值并进行归一化处理,获得该时序数据段的数值特征;
将该时序数据段的频率特征与数值特征加权求和,获得该时序数据段的相似评估指标;
当该时序数据段与后一个时序数据段对应的相似评估指标之间的差异小于或等于预设相似阈值时,将后一个时序数据段作为该时序数据段的初始相似数据段;预设相似阈值为正数;
所述获得每个时序数据段的最终相似数据段,包括:
对于任意一个存在初始相似数据段的时序数据段,将该时序数据段中所有数据的数据值的平均值,作为平均数据值;计算该时序数据段中每个数据的数据值与平均数据值之间的差异,获得数值偏差度;将该时序数据段中所有数值偏差度的累加值,作为该时序数据段的环境变化特征值;
在该时序数据段与初始相似数据段之间,将频率特征的差异和数值特征的差异的和值进行反比例归一化,获得相似权重;
将该时序数据段与初始相似数据段之间的环境变化特征值的差异进行负相关映射并归一化处理,获得变化相似性;
将该时序数据段与初始相似数据段之间的相似权重与变化相似性的乘积,作为该时序数据段的环境变化相似指标;当该时序数据段的环境变化相似指标大于或等于预设变化相似阈值时,将该时序数据段的初始相似数据段作为该时序数据段的最终相似数据段;预设变化相似阈值为正数;
所述获得环境状态时序数据中的划分区间,包括:
按照时序顺序遍历时序数据段,当时序数据段不存在最终相似数据段时,将对应的时序数据段作为一个划分区间;
当时序数据段存在最终相似数据段时,将对应的时序数据段和最终相似数据段作为一个初始区间,当初始区间中最后一个时序数据段满足更新条件时,更新初始区间;直至初始区间中最后一个时序数据段不满足更新条件,停止更新,将此时的初始区间作为一个划分区间;
当不存在未遍历的时序数据段时停止,获得环境状态时序数据中的所有划分区间;
所述当初始区间中最后一个时序数据段满足更新条件时,更新初始区间,包括:
所述更新条件为:时序数据段存在最终相似数据段;
当初始区间中最后一个时序数据段存在最终相似数据段时,将最后一个时序数据段的最终相似数据段合并到初始区间中,获得更新后的初始区间。
2.根据权利要求1所述一种配电设备环境状态数据智能采集处理方法,其特征在于,所述根据环境状态时序数据中的划分区间,调整环境状态时序数据在进行STL分解中的局部加权回归算法对应拟合窗口的大小,获得环境状态分量数据进行存储,包括:
对于环境状态时序数据中的任意一个划分区间,将该划分区间对应的时间长度作为该划分区间的区间大小,将区间大小与预设调整权重的乘积,作为该划分区间对应时序信息上的调整窗口大小;预设权重为归一化的值;
在对环境状态时序数据进行STL分解中,采用局部加权回归算法进行平滑估计时,将时间信息对应的调整窗口大小作为拟合窗口的大小,获得趋势项分量、季节项分量和残差分量进行存储。
3.根据权利要求1所述一种配电设备环境状态数据智能采集处理方法,其特征在于,所述获得配电设备运行中的环境状态时序数据,包括:
按照预设采样频率获得配电设备运行中的环境状态数据;以时间为横轴,以环境状态数据的数据值为纵轴,构建特征时序空间;
将所有环境状态数据映射到特征时序空间中,获得环境状态时序数据。
4.根据权利要求1所述一种配电设备环境状态数据智能采集处理方法,其特征在于,所述波动次数的获取方法包括:
将所有环境状态时序数据进行曲线拟合,获得波动曲线;对于任意一个时序数据段,统计在该时序数据段对应的波动曲线上的极大值数量和极小值数量;
将极大值数量与极小值数量中的最小值作为该时序数据段的波动次数;若极大值数量与极小值数量相等,则将极小值数量作为该时序数据段的波动次数。
5.根据权利要求4所述一种配电设备环境状态数据智能采集处理方法,其特征在于,所述曲线拟合采用最小二乘法。
6.根据权利要求2所述一种配电设备环境状态数据智能采集处理方法,其特征在于,所述预设调整权重设置为0.8。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311567783.7A CN117271987B (zh) | 2023-11-23 | 2023-11-23 | 一种配电设备环境状态数据智能采集处理方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311567783.7A CN117271987B (zh) | 2023-11-23 | 2023-11-23 | 一种配电设备环境状态数据智能采集处理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN117271987A CN117271987A (zh) | 2023-12-22 |
CN117271987B true CN117271987B (zh) | 2024-02-06 |
Family
ID=89220078
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311567783.7A Active CN117271987B (zh) | 2023-11-23 | 2023-11-23 | 一种配电设备环境状态数据智能采集处理方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117271987B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117909935B (zh) * | 2024-01-25 | 2024-08-20 | 上海环境集团再生能源运营管理有限公司 | 一种餐厨垃圾液态高温发酵稳定化处理方法 |
CN117913999B (zh) * | 2024-01-25 | 2024-07-12 | 广州华御电气设备有限公司 | 智能配电柜及智能配电方法 |
CN117951695B (zh) * | 2024-03-27 | 2024-06-11 | 南京中科齐信科技有限公司 | 一种工业未知威胁检测方法及系统 |
CN117975742B (zh) * | 2024-03-29 | 2024-06-18 | 大连禾圣科技有限公司 | 基于大数据的智慧城市交通管理系统及方法 |
CN118157170B (zh) * | 2024-05-13 | 2024-08-06 | 辽宁圣得科技发展有限公司 | 一种谷电电热储能系统 |
CN118171051B (zh) * | 2024-05-15 | 2024-08-06 | 国能信控互联技术有限公司 | 一种新能源场站发电设备实时数据的多层级治理方法 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104794484A (zh) * | 2015-04-07 | 2015-07-22 | 浙江大学 | 基于分段正交多项式分解的时序数据最近邻分类方法 |
CN108462939A (zh) * | 2018-03-26 | 2018-08-28 | 东北大学 | 一种地磁时序分析的室内定位方法 |
CN110297821A (zh) * | 2019-07-08 | 2019-10-01 | 中国地质大学(武汉) | 一种基于十六进制编码的时序数据聚集近似度量方法 |
CN112231193A (zh) * | 2020-12-10 | 2021-01-15 | 北京必示科技有限公司 | 时序数据容量预测方法、装置、电子设备及存储介质 |
CN113312058A (zh) * | 2021-06-22 | 2021-08-27 | 哈尔滨工程大学 | 一种智能合约二进制函数的相似性分析方法 |
CN113820132A (zh) * | 2021-08-30 | 2021-12-21 | 西安理工大学 | 基于多尺度散布熵构造阈值的故障报警方法 |
CN115659160A (zh) * | 2022-12-28 | 2023-01-31 | 北京中航路通科技有限公司 | 一种用于数字孪生模型优化的数据质量度量方法 |
CN115733498A (zh) * | 2023-01-10 | 2023-03-03 | 北京四维纵横数据技术有限公司 | 时序数据的压缩方法、装置、计算机设备及介质 |
CN115792479A (zh) * | 2023-02-08 | 2023-03-14 | 东营市建筑设计研究院 | 一种智能插座的用电智能监测方法及系统 |
CN116865269A (zh) * | 2023-09-01 | 2023-10-10 | 山东泰开电力电子有限公司 | 一种风电机组高谐波补偿方法及系统 |
-
2023
- 2023-11-23 CN CN202311567783.7A patent/CN117271987B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104794484A (zh) * | 2015-04-07 | 2015-07-22 | 浙江大学 | 基于分段正交多项式分解的时序数据最近邻分类方法 |
CN108462939A (zh) * | 2018-03-26 | 2018-08-28 | 东北大学 | 一种地磁时序分析的室内定位方法 |
CN110297821A (zh) * | 2019-07-08 | 2019-10-01 | 中国地质大学(武汉) | 一种基于十六进制编码的时序数据聚集近似度量方法 |
CN112231193A (zh) * | 2020-12-10 | 2021-01-15 | 北京必示科技有限公司 | 时序数据容量预测方法、装置、电子设备及存储介质 |
CN113312058A (zh) * | 2021-06-22 | 2021-08-27 | 哈尔滨工程大学 | 一种智能合约二进制函数的相似性分析方法 |
CN113820132A (zh) * | 2021-08-30 | 2021-12-21 | 西安理工大学 | 基于多尺度散布熵构造阈值的故障报警方法 |
CN115659160A (zh) * | 2022-12-28 | 2023-01-31 | 北京中航路通科技有限公司 | 一种用于数字孪生模型优化的数据质量度量方法 |
CN115733498A (zh) * | 2023-01-10 | 2023-03-03 | 北京四维纵横数据技术有限公司 | 时序数据的压缩方法、装置、计算机设备及介质 |
CN115792479A (zh) * | 2023-02-08 | 2023-03-14 | 东营市建筑设计研究院 | 一种智能插座的用电智能监测方法及系统 |
CN116865269A (zh) * | 2023-09-01 | 2023-10-10 | 山东泰开电力电子有限公司 | 一种风电机组高谐波补偿方法及系统 |
Non-Patent Citations (2)
Title |
---|
"A method for measuring similarity of time series based on series decomposition and dynamic time warping";Qingzhen Zhang etal;《Springer》;第6448-6463页 * |
"二次分解策略组合Infor...er的短期电力负荷预测方法";朱莉 等;《理论与方法》;第23-32页 * |
Also Published As
Publication number | Publication date |
---|---|
CN117271987A (zh) | 2023-12-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN117271987B (zh) | 一种配电设备环境状态数据智能采集处理方法 | |
CN109886430B (zh) | 一种基于工业大数据的设备健康状态评估与预测方法 | |
CN117421687B (zh) | 一种数字化电力环网柜运行状态监测方法 | |
CN116702081A (zh) | 基于人工智能的配电设备智能巡检方法 | |
CN105791051B (zh) | 基于人工免疫和k均值聚类的无线传感网异常检测方法及系统 | |
CN111310981B (zh) | 一种基于时间序列的水库水位趋势预测方法 | |
CN116828070B (zh) | 一种智慧电网数据优化传输方法 | |
JP2002532799A (ja) | 特にセメントキルンの技術プロセスにおけるセンサ予測のための事例ベース推論システムと方法および装置 | |
CN113435725A (zh) | 基于farima-lstm预测的电网主机动态阈值设定方法 | |
CN117459073B (zh) | 一种热泵系统运行数据的智能管理方法 | |
CN116418882B (zh) | 基于hplc双模载波通信的存储器数据压缩方法 | |
CN118134539B (zh) | 基于智慧厨房多源数据融合的用户行为预测方法 | |
CN117540238A (zh) | 一种工业数字化信息采集装置用数据安全管理方法 | |
CN117112514A (zh) | 基于对氯甲基苯乙烯生产数据的记录存储方法 | |
CN113961613A (zh) | 基于周期性过滤的线性预测方法 | |
CN117692012B (zh) | 一种智能睡袋温度数据远程监测传输方法 | |
CN117290685A (zh) | 一种基于历史数据的电厂电力设备专家诊断系统及方法 | |
CN118051800B (zh) | 基于云边协同的矿内监测数据智能处理方法 | |
CN117478148A (zh) | 基于模式分析的风电机组运行状态划分方法 | |
El Bakali et al. | Data-Based Solar Radiation Forecasting with Pre-Processing Using Variational Mode Decomposition | |
CN117608499A (zh) | 一种基于物联网的智慧交通数据优化存储方法 | |
CN114897248A (zh) | 一种基于人工智能的电网负荷预测方法 | |
CN117973899A (zh) | 基于大数据的土地开发与经营信息智能管理系统 | |
CN117543589A (zh) | 一种梯级水电安全集控系统调度方法 | |
CN115099544B (zh) | 基于信号去噪的智能电网负荷预测方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |