CN110399685A - 电容型设备缺陷等级预测方法及装置 - Google Patents
电容型设备缺陷等级预测方法及装置 Download PDFInfo
- Publication number
- CN110399685A CN110399685A CN201910690094.2A CN201910690094A CN110399685A CN 110399685 A CN110399685 A CN 110399685A CN 201910690094 A CN201910690094 A CN 201910690094A CN 110399685 A CN110399685 A CN 110399685A
- Authority
- CN
- China
- Prior art keywords
- data
- group
- capacitance type
- equipment
- new
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000007547 defect Effects 0.000 title claims abstract description 58
- 238000000034 method Methods 0.000 title claims abstract description 41
- 238000004422 calculation algorithm Methods 0.000 claims abstract description 27
- 238000007637 random forest analysis Methods 0.000 claims abstract description 21
- 238000012549 training Methods 0.000 claims abstract description 16
- 238000012545 processing Methods 0.000 claims abstract description 12
- 230000008569 process Effects 0.000 claims abstract description 7
- 238000004519 manufacturing process Methods 0.000 claims description 9
- 238000012876 topography Methods 0.000 claims description 9
- 239000003990 capacitor Substances 0.000 claims description 8
- 230000009466 transformation Effects 0.000 claims description 7
- 238000007781 pre-processing Methods 0.000 claims description 3
- 230000000875 corresponding effect Effects 0.000 description 36
- 230000002950 deficient Effects 0.000 description 19
- 238000010586 diagram Methods 0.000 description 14
- 238000004458 analytical method Methods 0.000 description 9
- 238000003066 decision tree Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000008901 benefit Effects 0.000 description 2
- 230000002596 correlated effect Effects 0.000 description 2
- 238000011156 evaluation Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012795 verification Methods 0.000 description 2
- 101100119135 Mus musculus Esrrb gene Proteins 0.000 description 1
- 230000006978 adaptation Effects 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 108090000623 proteins and genes Proteins 0.000 description 1
- 238000000611 regression analysis Methods 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/243—Classification techniques relating to the number of classes
- G06F18/24323—Tree-organised classifiers
Landscapes
- Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本申请公开了电容型设备缺陷等级预测方法及装置,获取所有电容型设备的数据包,对数据包内的所有数据进行预处理,获得新数据包;采用WOE编码对新数据包的所有数据进行编码,获得编码后数据;采用SMOTE算法对编码后数据进行拓展处理,获得拓展后数据;采用随机森林算法建立预测模型,利用拓展后数据和设备是否发生过故障,训练预测模型,得到最优预测模型;将电容型设备的实际数据输入到最优预测模型中进行预测,得到预测结果。对数据进行预处理,采用WOE编码对预处理后数据进行编码,采用随机森林算法建立预测模型,并训练预测模型,训练模型接近现实,使得电容型设备的数据输入到预测模型中得到的预测结果准确,实时性好。
Description
技术领域
本申请涉及电力设备管理技术领域,尤其涉及电容型设备缺陷等级预测方法及装置。
背景技术
在电力系统中,电容型设备属输变电设备,约占变电站设备总量的40%~50%,在电力系统设备中占有极其重要的地位。如果发生故障将会对整个变电站造成很大的影响,一些事故甚至还会危及到人员的人身安全和周边其他设备安全,造成很大的损失。因此,迫切需要一种能够准确识别电容型设备缺陷等级预测方法。
现有电容型设备缺陷等级预测方法是基于大量的历史缺陷数据,运用数理统计方法分析和预测电容型设备未来发生缺陷的概率,并根据预测结果做出相应的安全措施排除安全隐患。
但是,现有的缺陷预测方法只能通过回归分析或方差分析等数理统计方法针对雷电活动强度或者其他因素中的某单一因素对电容型设备进行分析。由于当前电网数据的爆发式增长,及各种传感器的层出不穷,造成电容型设备数据量庞大,数据特征复杂,数据质量参差不齐,直接应用传统的统计学方法很难获得理想的结果。为了提高电容型设备缺陷等级预测的准确率,提出了电容型设备缺陷等级预测方法及装置。
发明内容
本申请提出了电容型设备缺陷等级预测方法及装置,以解决现有的缺陷预测方法预测结果准确性低的技术问题。
为了解决上述技术问题,本申请公开了以下技术方案:
电容型设备缺陷等级预测方法,方法包括:获取所有电容型设备的数据包,对数据包内的所有数据进行预处理,获得新数据包;采用评分卡模型的WOE编码对新数据包的所有数据进行编码,获得编码后数据;采用SMOTE算法对编码后数据进行拓展处理,获得拓展后数据;采用随机森林算法建立预测模型,并利用拓展后数据和设备是否发生过故障,训练预测模型,得到最优预测模型;将电容型设备的实际数据输入到最优预测模型中进行预测,得到预测结果。
可选地,获取所有电容型设备的数据,对数据进行预处理,获得新数据包,包括:获取的大型电容型设备的数据包括至少9种数据;对缺失一类或几类数据的电容型设备的数据包进行人工填补,获得完整数据包;将数据包和完整数据包中的同一类数据进行格式统一,获得统一数据包,其中,统一数据包的同一类数据具有统一格式;计算统一数据包中同一类数据的聚类中心,计算同一类数据中各个数据与聚类中心的距离长度;当距离长度小于等于设定阈值时,数据为正确数据,无需人工修改;当距离长度大于设定阈值时,数据为错误数据,并将错误数据进行人工修改,获得新数据包。
可选地,采用评分卡模型的WOE编码对新数据包的所有数据进行编码,获得编码后数据,包括:将所有大型电容型设备分为三组,分别为第一组、第二组和第三组;将第一组数据和第二组数据组合为新一组,并将新一组中所有电容型设备的同一类数据中的相同数据归为一个基团,采用公式(1)计算所述基团针对所有缺陷等级的编码,形成第一编码字典;
其中,Wil表示第i个基团针对缺陷等级为l的编码,Bil表示数据的第i个基团中各数据对应的设备曾经发生过缺陷等级为l的数量,Gil表示数据的第i个基团中各数据对应的设备未发生过缺陷等级为l的数量,BTl表示数据中各数据对应的设备发生过缺陷等级为l的数量,GTl表示数据中各数据对应的设备未发生过缺陷等级为l的数量,s为非零常数;根据第一编码字典找到第三组中的电容型设备各类数据对应的基团,采用对应的基团编码替换电容型设备中对应数据,获得第三编码数据;将第一组和第三组数据组合为新二组,新二组采用公式(1)形成第二编码字典,并根据第二编码字典找到第二组中的电容型设备各类数据对应的基团,采用对应的基团编码替换电容型设备中对应数据,获得第二编码数据;将第二组和第三组数据组合为新三组,新三组采用公式(1)形成第三编码字典,并根据第三编码字典找到第三组中的电容型设备各类数据对应的基团,采用对应的基团编码替换电容型设备中对应数据,获得第一编码数据;将第一编码数据、第二编码数据和第三编码数据重新组合为一组数据。
可选地,采用SMOTE算法对编码后数据进行处理,获得拓展后数据,包括:寻找编码后数据中样本xi的k个近邻,N个近邻表示为xi(near),i∈{1,...,K},near∈{1,...,N};在xi(near),i∈{1,...,K},near∈{1,...,N}中任意选择一个xi(mm),通过随机数ζ1,进而合成一个新的样本表示为xi1=xi+ζ1·(xi(mm)-xi),随机数范围0到1;在xi(near),i∈{1,...,K},near∈{1,...,N}中重复N次任意选择一个xi(mm),得到针对xi(mm)生成的N的个新样本;上述步骤重复K次,获得拓展后数据。
可选地,数据包包括:设备ID,设备名称,供电局,设备类型,全路径,设备类型备注,投运日期,设备型号,生产厂家,生产日期,地形地貌,设备经度,设备纬度,设备海拔,变电站名称,运行状态,变电站经度,变电站纬度,电压等级,电压类型,生产日期的年、月、日,生产日期所属该年度的周,投运日期的年、月、日,投运日期所属该年度的周,投运年限,是否发生过故障,缺陷等级。
电容型设备缺陷等级预测装置,装置包括:预处理模块,用于获取所有电容型设备的数据包,对数据包内的所有数据进行预处理,获得新数据包;编码模块,用于采用评分卡模型的WOE编码对新数据包的所有数据进行编码,获得编码后数据;拓展模块,用于采用SMOTE算法对编码后数据进行拓展处理,获得拓展后数据;构建模型模块,用于采用随机森林算法建立预测模型,并利用拓展后数据和设备是否发生过故障,训练预测模型,得到最优预测模型;预测模块,用于将电容型设备的实际数据输入到最优预测模型中进行预测,得到预测结果。
有益效果:本申请提供了电容型设备缺陷等级预测方法,首先,获取所有电容型设备的数据包,对数据包内的所有数据进行预处理,获得新数据包;其次,采用评分卡模型的WOE编码对所述新数据包的所有数据进行编码,获得编码后数据;再次,采用SMOTE算法对所述编码后数据进行拓展处理,获得拓展后数据;然后,采用随机森林算法建立预测模型,并利用拓展后数据和所述设备是否发生过故障,训练所述预测模型,得到最优预测模型;最后,将电容型设备的实际数据输入到所述最优预测模型中进行预测,得到预测结果。由于数据量极为庞大,需要首先对数据进行清洗,将多余数据,重复数据进行删除,对数据格式进行统一,缺失数据进行填补,错误数据进行修改;然后对数据进行编码,采用编码输入预测模型,对预测模型进行训练,采用训练好的预测模型进行实时的预测目标设备。本申请中,对数据进行预处理,采用评分卡模型的WOE编码对预处理后数据进行编码,且采用随机森林算法建立预测模型,并训练预测模型,训练模型接近现实,使得电容型设备的数据输入到预测模型中得到的预测结果准确,实时性好。
附图说明
为了更清楚地说明本申请的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,对于本领域普通技术人员而言,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为申请提供的电容型设备缺陷等级预测方法的流程图;
图2为申请提供的电容型设备缺陷等级预测装置的结构示意图;
图3为申请提供的基于随机森林的故障发生特征重要性分析示意图;
图4为申请提供的基于评分卡模型信息量的故障发生特征重要性分析示意图;
图5为申请提供的设备型号故障比例示意图;
图6为申请提供的全路径故障比例示意图;
图7为申请提供的变电站名称故障比例示意图
图8为申请提供的地形地貌故障比例示意图。
具体实施方式
参见图1,为本申请提供的电容型设备缺陷等级预测方法的流程图,可知,本申请提供了电容型设备缺陷等级预测方法,方法包括:
S01:获取所有电容型设备的数据包,对数据包内的所有数据进行预处理,获得新数据包。
S011:获取的大型电容型设备的数据包括至少9种数据。
数据包包括:设备ID,设备名称,供电局,设备类型,全路径,设备类型备注,投运日期,设备型号,生产厂家,生产日期,地形地貌,设备经度,设备纬度,设备海拔,变电站名称,运行状态,变电站经度,变电站纬度,电压等级,电压类型,生产日期的年、月、日,生产日期所属该年度的周,投运日期的年、月、日,投运日期所属该年度的周,投运年限,是否发生过故障,缺陷等级。
全路径表示该大型电容设备的所属设备类别由大范围到小范围的依次描述。缺陷等级包括L个等级,并对各级故障进行编号。
S012:对缺失一类或几类数据的电容型设备的数据包进行人工填补,获得完整数据包。
缺失的数据根据重要性和缺失程度大致划分为四种:特征重要性高,缺失率低;特征重要性高,缺失率高;特征重要性低,缺失率低;特征重要性低,缺失率高。缺失率高的做删除处理,缺失率低且重要度高的使用特殊值进行补全(设定“无”或者“NULL”全局填充)。特征重要性高,不论缺失率如何,尽量保留特征,在这里采用补全法,关联补全法一般采用在正常数据集中(无任何缺失数据)匹配出一个和缺失值样本重合度高的样本,然后用正常数据集中的值补充缺失样本中的对应缺失值。
S013:将数据包和完整数据包中的同一类数据进行格式统一,获得统一数据包,其中,统一数据包的同一类数据具有统一格式。
统一格式包括统一时间、整数型和浮点数型变量以及字符编码的格式。
S014:计算统一数据包中同一类数据的聚类中心,计算同一类数据中各个数据与聚类中心的距离长度。
S015:当距离长度小于等于设定阈值时,数据为正确数据,无需人工修改;当距离长度大于设定阈值时,数据为错误数据,并将错误数据进行人工修改,获得新数据包。
S02:采用评分卡模型的WOE编码对新数据包的所有数据进行编码,获得编码后数据。
图3,为本申请提供的基于随机森林的故障发生特征重要性分析示意图;图4,为本申请提供的基于评分卡模型信息量的故障发生特征重要性分析示意图,参见图3和图4,可知,采用评分卡模型的WOE编码对新数据包的所有数据进行编码,获得编码后数据,包括如下步骤:
S021:将所有大型电容型设备分为三组,分别为第一组、第二组和第三组。
需要针对故障发生预测模型和缺陷等级预测模型分类讨论。WOE值的计算是针对二分类的,反映出每个特征的每个类别中“正样本对负样本占比”和“所有正样本对所有负样本占比”之间的差异,表明了特征的某个类别对计算目标的影响。
缺陷等级预测模型,是四分类模型,有四类缺陷等级(一般、紧急、重大和其他),无法直接进行WOE值计算,若使用二分类中计算的WOE值训练四分类模型,结果不好,甚至低于普通编码的效果。所以,在缺陷等级预测模型计算WOE值时,采用的是将四分类转化为二分类的思想,对输出变量“缺陷等级”构造四个计算目标,分别为“level_1”,“level_2”,“level_3”,“level_4”。如下:level_1:缺陷等级“紧急”所对应的值记为1,另外三种等级所对应的值为0;level_2:缺陷等级“重大”所对应的值记为1,另外三种等级所对应的值为0;level_3:缺陷等级“一般”所对应的值记为1,另外三种等级所对应的值为0;level_4:缺陷等级“其他”所对应的值记为1,另外三种等级所对应的值为0。
数据分箱就是将特征按照类型分类归纳,并以设定统一的值。每个输入变量都需要进行数据分箱,在数据分箱过程中,首先对数据进行匹配,然后将相同的类型设定为一个箱,其中箱的值为类型名,最后,用箱的值替代该箱中特征的值。本申请按照数据的类型直接分箱,故障发生预测模型和缺陷等级预测模型的分箱过程相同。
S022:将第一组数据和第二组数据组合为新一组,并将新一组中所有电容型设备的同一类数据中的相同数据归为一个基团,采用公式(1)计算所述基团针对所有缺陷等级的编码,形成第一编码字典;
其中,Wil表示第i个基团针对缺陷等级为l的编码,Bil表示数据的第i个基团中各数据对应的设备曾经发生过缺陷等级为l的数量,Gil表示数据的第i个基团中各数据对应的设备未发生过缺陷等级为l的数量,BTl表示数据中各数据对应的设备发生过缺陷等级为l的数量,GTl表示数据中各数据对应的设备未发生过缺陷等级为l的数量,s为非零常数。
S023:根据第一编码字典找到第三组中的电容型设备各类数据对应的基团,采用对应的基团编码替换电容型设备中对应数据,获得第三编码数据。
S024:将第一组和第三组数据组合为新二组,新二组采用公式(1)形成第二编码字典,并根据第二编码字典找到第二组中的电容型设备各类数据对应的基团,采用对应的基团编码替换电容型设备中对应数据,获得第二编码数据。
S025:将第二组和第三组数据组合为新三组,新三组采用公式(1)形成第三编码字典,并根据第三编码字典找到第三组中的电容型设备各类数据对应的基团,采用对应的基团编码替换电容型设备中对应数据,获得第一编码数据。
S026:将第一编码数据、第二编码数据和第三编码数据重新组合为一组数据。
S03:采用SMOTE算法对编码后数据进行拓展处理,获得拓展后数据。
S031:寻找编码后数据中样本xi的k个近邻,N个近邻表示为xi(near),i∈{1,...,K},near∈{1,...,N}。
S032:在xi(near),i∈{1,...,K},near∈{1,...,N}中任意选择一个xi(mm),通过随机数ζ1,进而合成一个新的样本表示为xi1=xi+ζ1·(xi(mm)-xi),随机数范围0到1。
S033:在xi(near),i∈{1,...,K},near∈{1,...,N}中重复N次任意选择一个xi(mm),得到针对xi(mm)生成的N的个新样本;上述步骤重复K次,获得拓展后数据。
S04:采用随机森林算法建立预测模型,并利用拓展后数据和设备是否发生过故障,训练预测模型,得到最优预测模型。
S05:将电容型设备的实际数据输入到最优预测模型中进行预测,得到预测结果。
随机森林:随机森林是指利用多棵决策树对样本数据进行训练、分类并预测的一种方法,它在对数据进行分类的同时,还可以给出各个变量(基因)的重要性评分,评估各个变量在分类中所起的作用。表1为缺陷等级预测模型分类评价。表1中,查准率是针对我们预测结果而言的,它表示的是预测为正的样例中有多少是真正的正样例。召回率是针对真实值而言的,它表示的是样本中的正例有多少被预测正确。F1值为F1度量公式得来,为加权调和平均。
表1 WOE-RF缺陷等级预测模型分类评价
(1)基于随机森林算法的故障发生特征重要性分析
随机森林算法在输出特征重要性的时候,利用袋外数据,对于每一棵决策树计算袋外数据误差err1;然后随机对袋外数据样本的特征i加入噪声干扰,再次计算袋外数据误差err2;得到特征i的重要性为∑(err2-err1)/N,其中N为决策树的棵数。它的原理是,判断加入噪声是否大幅度影响预测结果,若影响很大,则该特征重要。基于随机森林算法的故障发生特征重要性结果如图3,排名前十的特征如表2。
表2基于随机森林的故障发生特征重要性前十
由表2可知,排名前五的特征里,设备类型相关特征有三个,分别是设备类型、设备类型备注和全路径。设备类型重要性排名第一,设备类型备注和全路径分别排名第三和第四,因此,通过随机森林算法,可认为影响设备发生故障最重要的特征为设备类型的相关特征,另外,运行状态和电压类型也是其中较为重要的特征。
基于评分卡模型信息量的故障发生特征重要性分析
评分卡模型信息量即IV,每个箱的IV值计算是由WOE乘以该箱正常设备占比和故障设备占比的差,每个特征IV等于各箱IV的总和,即特征的重要性。通过计算可得到每个特征的IV值。基于评分卡模型信息量的故障发生特征重要性分析结果如图4,排名前十的特征分别如表3。
表3基于评分卡模型信息量的故障发生特征重要性前十
如表3可知,排名前五的特征中,全路径和设备型号两个特征与上述两种方法判断的结果重合。另外单独判断出的特征有:设备名称、生产厂家和投运日期年份。全路径和设备名称是与设备类型相关的特征,排名第一和第二,且数值上远高于其他特征。因此,通过评分卡模型信息量,可认为影响设备发生故障最重要的特征和随机森林方法判断的结果一致,为设备类型的相关特征(包括设备类型和全路径),和集成树特征重要性判断一致的有设备型号特征,另外,生产厂家和投运时间年份也被认为是较为重要的特征。
如下结合符合对几类数据进行验证
1)设备型号特征验证
对每种设备型号计算故障比例,,即每个不同设备型号的故障设备数与所有该型号设备数的比值。将前200名设备型号的故障比例排序输出,参见图5,为本申请提供的设备型号故障比例示意图。
从图5中可以看出,排名第1与排名第200的设备型号故障比例相差60%以上,差距较大,证明不同型号的设备发生故障的可能性也相差较大。因此,设备型号可以认为是影响设备发生故障的重要特征之一。
2)全路径特征验证
计算全路径故障比例,即每个不同全路径的故障设备数与所有该全路径设备数的比值。全路径故障比例前45,参见图6,为本申请提供的全路径故障比例示意图。
从图6中可以看出,排名第1与排名45的全路径故障比例相差40%以上,差距较大,证明不同全路径的设备发生故障的可能性也相差较大。因此,全路径可以认为是影响设备发生故障的重要特征。
3)变电站名称特征验证
计算变电站名称故障比例,变电站名称故障比例前200,参见图7,为本申请提供的变电站名称故障比例示意图。
从图7中可以看出,排名第1与排名200的变电站故障比例相差10%左右,有一定差距,证明不同变电站的设备发生故障的可能性也有差距,与设备型号和全路径相比,变电站的故障比例差距较小。但与其他非重要性特征相比,仍具有优势。因此,变电站名称也可以认为是影响设备故障的重要特征。
这里选择非重要特征地形地貌进行对比,地形地貌故障比例,参见图8,为本申请提供的地形地貌故障比例示意图。
从图8可知,排名第1与排名最后的地形地貌故障比例相差不到2%,说明地形地貌特征对设备发生故障的影响力较小。相较于地形地貌等非重要性特征,设备类型,全路径和变电站名称特征对设备发生故障的影响较大。
本申请提供了电容型设备缺陷等级预测方法,首先,获取所有电容型设备的数据包,对数据包内的所有数据进行预处理,获得新数据包;其次,采用评分卡模型的WOE编码对所述新数据包的所有数据进行编码,获得编码后数据;再次,采用SMOTE算法对所述编码后数据进行拓展处理,获得拓展后数据;然后,采用随机森林算法建立预测模型,并利用拓展后数据和所述设备是否发生过故障,训练所述预测模型,得到最优预测模型;最后,将电容型设备的实际数据输入到所述最优预测模型中进行预测,得到预测结果。由于数据量极为庞大,需要首先对数据进行清洗,将多余数据,重复数据进行删除,对数据格式进行统一,缺失数据进行填补,错误数据进行修改;然后对数据进行编码,采用编码输入预测模型,对预测模型进行训练,采用训练好的预测模型进行实时的预测目标设备。本申请中,对数据进行预处理,采用评分卡模型的WOE编码对预处理后数据进行编码,且采用随机森林算法建立预测模型,并训练预测模型,训练模型接近现实,使得电容型设备的数据输入到预测模型中得到的预测结果准确,实时性好。
本申请除了提供了电容型设备缺陷等级预测方法外,还提供了电容型设备缺陷等级预测装置,参见图2,为本申请提供了电容型设备缺陷等级预测装置的结构示意图,可知,该装置包括:预处理模块,用于获取所有电容型设备的数据包,对数据包内的所有数据进行预处理,获得新数据包;编码模块,用于采用评分卡模型的WOE编码对新数据包的所有数据进行编码,获得编码后数据;拓展模块,用于采用SMOTE算法对编码后数据进行拓展处理,获得拓展后数据;构建模型模块,用于采用随机森林算法建立预测模型,并利用拓展后数据和设备是否发生过故障,训练预测模型,得到最优预测模型;预测模块,用于将电容型设备的实际数据输入到最优预测模型中进行预测,得到预测结果。
本领域技术人员在考虑说明书及实践这里的申请后,将容易想到本申请的其它实施方案。本申请旨在涵盖本申请的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本申请的一般性原理并包括本申请未实用的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本申请的真正范围和精神由下面的权利要求指出。
应当理解的是,本申请并不局限于上面已经描述并在附图中示出的精确结构,并且可以在不脱离其范围进行各种修改和改变。本申请的范围仅由所附的权利要求来限制。
Claims (6)
1.电容型设备缺陷等级预测方法,其特征在于,所述方法包括:
S01:获取所有电容型设备的数据包,对所述数据包内的所有数据进行预处理,获得新数据包;
S02:采用评分卡模型的WOE编码对所述新数据包的所有数据进行编码,获得编码后数据;
S03:采用SMOTE算法对所述编码后数据进行拓展处理,获得拓展后数据;
S04:采用随机森林算法建立预测模型,并利用所述拓展后数据和所述设备是否发生过故障,训练所述预测模型,得到最优预测模型;
S05:将电容型设备的实际数据输入到所述最优预测模型中进行预测,得到预测结果。
2.根据权利要求1所述的方法,其特征在于,所述获取所有电容型设备的数据,对所述数据进行预处理,获得新数据包,包括:
S011:获取的大型电容型设备的数据包括至少9种数据;
S012:对缺失一类或几类数据的电容型设备的数据包进行人工填补,获得完整数据包;
S013:将所述数据包和所述完整数据包中的同一类数据进行格式统一,获得统一数据包,其中,所述统一数据包的同一类数据具有统一格式;
S014:计算所述统一数据包中同一类数据的聚类中心,计算同一类数据中各个数据与聚类中心的距离长度;
S015:当距离长度小于等于设定阈值时,所述数据为正确数据,无需人工修改;当距离长度大于设定阈值时,所述数据为错误数据,并将错误数据进行人工修改,获得新数据包。
3.根据权利要求1所述的方法,其特征在于,所述采用评分卡模型的WOE编码对所述新数据包的所有数据进行编码,获得编码后数据,包括:
S021:将所有大型电容型设备分为三组,分别为第一组、第二组和第三组;
S022:将第一组数据和第二组数据组合为新一组,并将所述新一组中所有电容型设备的同一类数据中的相同数据归为一个基团,采用公式(1)计算所述基团针对所有缺陷等级的编码,形成第一编码字典;
其中,Wil表示第i个基团针对缺陷等级为l的编码,Bil表示数据的第i个基团中各数据对应的设备曾经发生过缺陷等级为l的数量,Gil表示数据的第i个基团中各数据对应的设备未发生过缺陷等级为l的数量,BTl表示数据中各数据对应的设备发生过缺陷等级为l的数量,GTl表示数据中各数据对应的设备未发生过缺陷等级为l的数量,s为非零常数;
S023:根据所述第一编码字典找到第三组中的电容型设备各类数据对应的基团,采用对应的基团编码替换电容型设备中对应数据,获得第三编码数据;
S024:将第一组和第三组数据组合为新二组,所述新二组采用公式(1)形成第二编码字典,并根据所述第二编码字典找到第二组中的电容型设备各类数据对应的基团,采用对应的基团编码替换电容型设备中对应数据,获得第二编码数据;
S025:将第二组和第三组数据组合为新三组,所述新三组采用公式(1)形成第三编码字典,并根据所述第三编码字典找到第三组中的电容型设备各类数据对应的基团,采用对应的基团编码替换电容型设备中对应数据,获得第一编码数据;
S026:将所述第一编码数据、所述第二编码数据和所述第三编码数据重新组合为一组数据。
4.根据权利要求1所述的方法,其特征在于,所述采用SMOTE算法对所述编码后数据进行处理,获得拓展后数据,包括:
SO31:寻找编码后数据中样本xi的k个近邻,N个近邻表示为xi(near),i∈{1,...,K},near∈{1,...,N};
SO32:在xi(near),i∈{1,...,K},near∈{1,...,N}中任意选择一个xi(mm),通过随机数ζ1,进而合成一个新的样本表示为xi1=xi+ζ1·(xi(mm)-xi),随机数范围0到1;
SO33:在xi(near),i∈{1,...,K},near∈{1,...,N}中重复N次任意选择一个xi(mm),得到针对xi(mm)生成的N的个新样本;
SO34:上述步骤重复K次,获得拓展后数据。
5.根据权利要求2所述的方法,其特征在于,所述数据包包括:设备ID,设备名称,供电局,设备类型,全路径,设备类型备注,投运日期,设备型号,生产厂家,生产日期,地形地貌,设备经度,设备纬度,设备海拔,变电站名称,运行状态,变电站经度,变电站纬度,电压等级,电压类型,生产日期的年、月、日,生产日期所属该年度的周,投运日期的年、月、日,投运日期所属该年度的周,投运年限,是否发生过故障,缺陷等级。
6.电容型设备缺陷等级预测装置,其特征在于,所述装置包括:
预处理模块,用于获取所有电容型设备的数据包,对所述数据包内的所有数据进行预处理,获得新数据包;
编码模块,用于采用评分卡模型的WOE编码对所述新数据包的所有数据进行编码,获得编码后数据;
拓展模块,用于采用SMOTE算法对所述编码后数据进行拓展处理,获得拓展后数据;
构建模型模块,用于采用随机森林算法建立预测模型,并利用所述拓展后数据和所述设备是否发生过故障,训练所述预测模型,得到最优预测模型;
预测模块,用于将电容型设备的实际数据输入到所述最优预测模型中进行预测,得到预测结果。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910690094.2A CN110399685A (zh) | 2019-07-29 | 2019-07-29 | 电容型设备缺陷等级预测方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910690094.2A CN110399685A (zh) | 2019-07-29 | 2019-07-29 | 电容型设备缺陷等级预测方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110399685A true CN110399685A (zh) | 2019-11-01 |
Family
ID=68326440
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910690094.2A Pending CN110399685A (zh) | 2019-07-29 | 2019-07-29 | 电容型设备缺陷等级预测方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110399685A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111259953A (zh) * | 2020-01-15 | 2020-06-09 | 云南电网有限责任公司电力科学研究院 | 一种基于电容型设备缺陷数据的设备缺陷时间预测方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050096950A1 (en) * | 2003-10-29 | 2005-05-05 | Caplan Scott M. | Method and apparatus for creating and evaluating strategies |
CN106202335A (zh) * | 2016-06-28 | 2016-12-07 | 银江股份有限公司 | 一种基于云计算框架的交通大数据清洗方法 |
CN109977028A (zh) * | 2019-04-08 | 2019-07-05 | 燕山大学 | 一种基于遗传算法和随机森林的软件缺陷预测方法 |
-
2019
- 2019-07-29 CN CN201910690094.2A patent/CN110399685A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050096950A1 (en) * | 2003-10-29 | 2005-05-05 | Caplan Scott M. | Method and apparatus for creating and evaluating strategies |
CN106202335A (zh) * | 2016-06-28 | 2016-12-07 | 银江股份有限公司 | 一种基于云计算框架的交通大数据清洗方法 |
CN109977028A (zh) * | 2019-04-08 | 2019-07-05 | 燕山大学 | 一种基于遗传算法和随机森林的软件缺陷预测方法 |
Non-Patent Citations (7)
Title |
---|
余芳等: "基于信息熵的类别变量的数值化方法", 《电脑知识与技术》 * |
周胜利等: "基于评分卡――随机森林的云计算用户公共安全信誉模型研究", 《通信学报》 * |
张昊等: "基于改进随机森林的洗钱交易角色识别应用", 《计算机与现代化》 * |
陈强等: "关于零售评分模型部署方式的理论及实证研究", 《金融监管研究》 * |
霍小卫等: "可重构嵌入式软件缺陷优化预测仿真研究", 《计算机仿真》 * |
韩飞等: "基于不完备集双聚类的缺失数据填补算法", 《计算机工程》 * |
黎玉华: "信用评分卡综述", 《黑龙江科技信息》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111259953A (zh) * | 2020-01-15 | 2020-06-09 | 云南电网有限责任公司电力科学研究院 | 一种基于电容型设备缺陷数据的设备缺陷时间预测方法 |
CN111259953B (zh) * | 2020-01-15 | 2023-10-20 | 云南电网有限责任公司电力科学研究院 | 一种基于电容型设备缺陷数据的设备缺陷时间预测方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107508297B (zh) | 一种配网拓扑结构校验与维护方法 | |
CN106780130B (zh) | 一种含分布式光伏配电网的评价方法 | |
CN104200288B (zh) | 一种基于因素与事件间相关关系识别的设备故障预测方法 | |
CN113962659A (zh) | 一种基于云计算的智能电网大数据信息管理系统及方法 | |
CN108733966A (zh) | 一种基于决策树群的多维电能表现场状态检验方法 | |
CN108805710A (zh) | 一种基于区块链智能合约技术的分布式电能交易方法 | |
CN105471647B (zh) | 一种电力通信网故障定位方法 | |
CN109447459A (zh) | 一种考虑指标质量影响权重的电能质量综合评估方法 | |
CN113591256B (zh) | 一种山区输电线路杆塔雷击概率结果评估方法 | |
CN108336739A (zh) | 一种基于rbf神经网络的概率潮流在线计算方法 | |
CN112688428A (zh) | 一种基于物联网技术的10千伏电网同期线损治理方法 | |
CN104318317A (zh) | 一种基于分布式综合供能系统的黑启动方案优化方法 | |
CN106203833A (zh) | 电力通信网风险评估系统 | |
CN109359896A (zh) | 一种基于svm的电网线路故障风险预警方法 | |
CN104112062A (zh) | 基于插值方法的风资源分布的获取方法 | |
CN110399685A (zh) | 电容型设备缺陷等级预测方法及装置 | |
CN113327047B (zh) | 基于模糊综合模型的电力营销服务渠道决策方法及系统 | |
AU2019100631A4 (en) | Self-correcting multi-model numerical rainfall ensemble forecasting method | |
CN103345552A (zh) | 电力ict通信网可靠性的评估方法及系统 | |
CN111178690A (zh) | 基于风控评分卡模型的用电客户窃电风险评估方法 | |
CN110400019A (zh) | 一种基于数据挖掘的风电场功率预测优化方法 | |
CN105843941A (zh) | 日志校验方法及装置 | |
CN111343484A (zh) | 基于人工智能的iptv/ott智能质量告警方法 | |
Zheng et al. | Lightning risk assessment model for transmission lines with lift‐based improved analytic hierarchy process | |
CN108647275A (zh) | 孤岛检测状态的识别方法及装置、存储介质、处理器 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191101 |