CN116383612A - 基于温度数据的电力设备部件框的检测补全方法 - Google Patents

基于温度数据的电力设备部件框的检测补全方法 Download PDF

Info

Publication number
CN116383612A
CN116383612A CN202310669450.9A CN202310669450A CN116383612A CN 116383612 A CN116383612 A CN 116383612A CN 202310669450 A CN202310669450 A CN 202310669450A CN 116383612 A CN116383612 A CN 116383612A
Authority
CN
China
Prior art keywords
frame
equipment
component
component frame
power equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202310669450.9A
Other languages
English (en)
Other versions
CN116383612B (zh
Inventor
梁川
常娜
张爱军
朱怡良
陈灵紫
李红艳
胡怀林
罗集天
张坤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Tianbo Yunke Optoelectronics Co ltd
Original Assignee
Zhejiang Tianbo Yunke Optoelectronics Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Tianbo Yunke Optoelectronics Co ltd filed Critical Zhejiang Tianbo Yunke Optoelectronics Co ltd
Priority to CN202310669450.9A priority Critical patent/CN116383612B/zh
Publication of CN116383612A publication Critical patent/CN116383612A/zh
Application granted granted Critical
Publication of CN116383612B publication Critical patent/CN116383612B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00Radiation pyrometry, e.g. infrared or optical thermometry
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/10Complex mathematical operations
    • G06F17/16Matrix or vector computation, e.g. matrix-matrix or matrix-vector multiplication, matrix factorization
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/10Pre-processing; Data cleansing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • G06N3/096Transfer learning
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y04INFORMATION OR COMMUNICATION TECHNOLOGIES HAVING AN IMPACT ON OTHER TECHNOLOGY AREAS
    • Y04SSYSTEMS INTEGRATING TECHNOLOGIES RELATED TO POWER NETWORK OPERATION, COMMUNICATION OR INFORMATION TECHNOLOGIES FOR IMPROVING THE ELECTRICAL POWER GENERATION, TRANSMISSION, DISTRIBUTION, MANAGEMENT OR USAGE, i.e. SMART GRIDS
    • Y04S10/00Systems supporting electrical power generation, transmission or distribution
    • Y04S10/50Systems or methods supporting the power network operation or management, involving a certain degree of interaction with the load-side end user applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Mathematical Physics (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Computational Mathematics (AREA)
  • Pure & Applied Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Computing Systems (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Software Systems (AREA)
  • Evolutionary Biology (AREA)
  • Algebra (AREA)
  • Databases & Information Systems (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Radiation Pyrometers (AREA)

Abstract

本发明公开了基于温度数据的电力设备部件框的检测补全方法,包括以下步骤:S1、红外温度传感器采集电力设备温度数据,将电力设备温度数据进行标记和预处理,得到三维温度矩阵数据;S2、分别获得电力设备的设备框检测模型和部件框检测模型;S3、将未知设备类型的三维温度矩阵数据,输入设备框检测模型中,输出设备框;S4、根据斜率和相对位置系数,通过设备框生成部件框A;S5、将未知设备类型的三维温度矩阵数据,输入部件框检测模型中进行检测,输出部件框,然后筛选得到部件框B;S6、用部件框A对部件框B中缺失的部件框进行补全。本发明具有提高部件框检测全面性的特点。

Description

基于温度数据的电力设备部件框的检测补全方法
技术领域
本发明涉及一种电力设备检测方法,特别是一种基于温度数据的电力设备部件框的检测补全方法。
背景技术
目前电力设备故障诊断检测的工作中,需要通过电力设备各部件之间的温度差来判断电力设备是否存在故障,此时精准的找出电力设备各部件的就显得尤为重要。目前主要是以红外图片为研究对象,从中提取出温度数据进行模型训练,定位检测设备的部件框。
但是由于电力设备种类多,且多种设备间具有相似性,红外图片中又会包含多种伪彩色,而且拍摄环境也比较复杂,从而容易使得被拍摄设备被干扰严重,导致单纯的电力设备部件框的检测,通常会出现漏检的问题,不能精准定位电力设备中的各个部件,对电力设备的异常发热诊断不够准确,出现误判。
发明内容
本发明的目的在于,提供一种基于温度数据的电力设备部件框的检测补全方法。本发明具有提高部件框检测全面性的特点。
本发明的技术方案:基于温度数据的电力设备部件框的检测补全方法,包括以下步骤:
S1、数据采集和预处理:红外温度传感器采集电力设备温度数据,将电力设备温度数据进行标记和预处理,得到三维温度矩阵数据;
S2、搭建并训练电力设备的设备框检测模型和部件框检测模型:以YoloV4作为框架,以mobilenet0.25作为主干特征提取网络,SGD作为优化器,输入三维温度矩阵数据进行端到端的网络训练,分别获得电力设备的设备框检测模型和部件框检测模型;
S3、设备框检测模型处理:将未知设备类型的三维温度矩阵数据,输入设备框检测模型中进行检测,输出设备框,获得设备的类型、位置和置信度,只保留位于最中心的设备框;
S4、根据斜率和相对位置系数,通过设备框生成部件框A;
S5、部件框检测模型处理:将未知设备类型的三维温度矩阵数据,输入部件框检测模型中进行检测,输出部件框,获得设备部件框的类型、位置和置信度,然后筛选得到部件框B;
S6、用部件框A对部件框B中缺失的部件框进行补全。
前述的基于温度数据的电力设备部件框的检测补全方法中,步骤S1中的数据标记是标记温度矩阵中设备的位置和类型以及设备部件的位置和类型;将标记的设备的位置和类型数据输入到设备框检测模型进行训练,将标记的设备部件的位置和类型数据输入到部件框检测模型进行训练。
前述的基于温度数据的电力设备部件框的检测补全方法中,步骤S1中的预处理为:将电力设备温度数据提取得到640×480的二维数组温度矩阵,然后在深度方向上拼接成三维数组,对拼接后的三维数组作数据的归一化处理,并映射到0-255之间,再在上下各填充80行0,转换为640×640的三维温度矩阵数据。
前述的基于温度数据的电力设备部件框的检测补全方法中,步骤S2中,模型训练采用迁移学习的方法,共设置800次迭代,前300次迭代,冻结主干网络参数,batch_size设置为64,后500次迭代对整个网络权重值训练,batch_size设置为32,学习率采用余弦衰减方式,初始值设置为1e-2,最小学习率设置为1e-4,最后获得电力设备的设备框检测模型和部件框检测模型。
前述的基于温度数据的电力设备部件框的检测补全方法中,步骤S4,具体包括以下步骤:
a、对要检测的电力设备标注实际的设备框和部件框;
b、计算实际的同一电力设备中所有的部件框和设备框之间的斜率和相对位置系数,并获得所有标记数据的平均斜率和平均相对位置系数;
c、将电力设备的三维温度矩阵数据经设备框检测模型检测后,得到设备框坐标,根据平均斜率和平均相对位置系数,计算电力设备中各部件框的坐标,得到部件框A。
前述的基于温度数据的电力设备部件框的检测补全方法中,步骤b中部件框和设备框之间的斜率和相对位置系数的计算公式为:
Figure SMS_1
其中,令实际标注的设备框的左上角坐标为
Figure SMS_9
,设备框的右下角坐标为
Figure SMS_3
;部件框的左上角坐标为/>
Figure SMS_14
,部件框的右下角坐标为/>
Figure SMS_4
;/>
Figure SMS_10
为/>
Figure SMS_12
Figure SMS_17
所在直线的斜率;/>
Figure SMS_8
为/>
Figure SMS_16
和/>
Figure SMS_2
所在直线的相对位置系数;/>
Figure SMS_11
Figure SMS_6
和/>
Figure SMS_15
所在直线的斜率,/>
Figure SMS_7
为/>
Figure SMS_13
和/>
Figure SMS_5
所在直线的相对位置系数。
前述的基于温度数据的电力设备部件框的检测补全方法中,步骤c中的各部件框的坐标计算公式为:
Figure SMS_18
其中,令设备框模型检测的设备框的左上角坐标为
Figure SMS_36
,设备框的右下角坐标为/>
Figure SMS_21
,令部件框的左上角坐标为/>
Figure SMS_28
,部件框的右下角的坐标为/>
Figure SMS_25
Figure SMS_35
为/>
Figure SMS_27
和/>
Figure SMS_34
所在直线的斜率,/>
Figure SMS_24
为/>
Figure SMS_29
和/>
Figure SMS_19
所在直线的斜率;/>
Figure SMS_32
为所有标记的部件框和设备框/>
Figure SMS_22
的平均斜率、/>
Figure SMS_31
为所有相对位置系数/>
Figure SMS_26
的平均相对位置系数,/>
Figure SMS_30
为所有/>
Figure SMS_20
的平均斜率,/>
Figure SMS_33
为所有相对位置系数/>
Figure SMS_23
的平均相对位置系数。
前述的基于温度数据的电力设备部件框的检测补全方法中,步骤S5中的部件框B的筛选方法包括以下步骤:
a、保留置信度大于阈值0.5且同设备类型的部件框;
b、删除部件框的中心点不在设备框内的部件框;
c、将每种部件类型的部件框保留一个置信度最高的部件框,得到部件框B。
与现有技术相比,本发明的有益效果为:
本发明运用深度学习的方法检测出电力设备的设备框和电力设备的部件框位置,根据部件框和设备框相对位置不变性,用设备框生成的部件框,从而对模型推理中漏检的部件框进行补全,完整找到各电力设备的部件框,提高部件框检测的召回率。
附图说明
图1是本发明的流程图;
图2是套管的设备框和部件框的实际红外标记图;
图3是套管设备框和部件框的位置坐标图;
图4是套管部件框A的红外图;
图5是套管部件框检测模型检测的部件框B的红外图;
图6是套管补全后的部件框B图;
图7是隔离开关的设备框和部件框的实际红外标记图;
图8是隔离开关设备框和部件框的位置坐标图;
图9是隔离开关部件框A的红外图;
图10是隔离开关部件框检测模型检测的部件框B的红外图;
图11是隔离开关补全后的部件框B图。
具体实施方式
下面结合实施例对本发明作进一步的说明,但并不作为对本发明限制的依据。
实施例1:基于温度数据的电力设备部件框的检测补全方法,按照图1所示,包括以下步骤:
S1、数据采集和预处理:
红外温度传感器采集电力设备温度数据,将电力设备温度数据进行标记和预处理,提取得到640×480的二维数组温度矩阵,然后在深度方向上拼接成三维数组,对拼接后的三维数组作数据的归一化处理,并映射到0-255之间,再在上下各填充80行0,转换为640×640的三维温度矩阵数据;数据标记具体是标记温度矩阵中设备的位置和类型以及设备部件的位置和类型;将整理好的三维温度矩阵数据按7:1:2的比例随机划分为训练集、验证集和测试集。
S2、搭建并训练电力设备的设备框检测模型和部件框检测模型:
以YoloV4作为框架,以mobilenet0.25作为主干特征提取网络,SGD作为优化器,输入训练集、验证集和测试集进行端到端的网络训练。模型训练采用迁移学习的方法,共设置800次迭代,前300次迭代,冻结主干网络参数,batch_size设置为64,后500次迭代对整个网络权重值训练,batch_size设置为32,学习率采用余弦衰减方式,初始值设置为1e-2,最小学习率设置为1e-4,将标记的设备的位置和类型数据输入到设备框检测模型进行训练,将标记的设备部件的位置和类型数据输入到部件框检测模型进行训练,最后获得电力设备的设备框检测模型和部件框检测模型。
S3、设备框检测模型处理:将未知设备类型的三维温度矩阵数据,输入设备框检测模型中,输出设备框,获得设备的类型、位置和置信度信息,保留检测结果中位于红外热像图最中心的设备,其中红外热像图是温度矩阵的可视化呈现,温度矩阵中一个温度值对应红外热像图一个像素点的温度。根据检测结果中的位置信息,计算出各设备框中心点与红外热像图中心点的距离,保留距离最小的设备框和其对应的类型,即为设备框检测模型最终的检测结果。将设备类型、位置和置信度信息以列表的形式保存。
若经设备框检测模型处理后得知未知设备为套管,则以套管为例,进行后续的操作:
设备框检测模型处理后得到套管的设备框,设备框的坐标为[276,62,354,411],其中(276,62)为设备框的左上角坐标,(354,411)为设备框的右下角坐标。
S4、根据斜率和相对位置系数,通过套管设备框生成套管部件框A,具体计算步骤为:
a、对套管标注实际的设备框和部件框,如图2所示,其中,最大的标注框为设备框,在设备框内部的上部分、中间部分和下部分的3个小标注框为部件框;
b、计算套管中所有的部件框和设备框之间的斜率和相对位置系数,然后得到所有标记数据的平均相对斜率和平均相对位置系数。具体方法如下所示:令套管设备框的左上角坐标为
Figure SMS_37
,设备框的右下角坐标为/>
Figure SMS_38
;部件框的左上角坐标为/>
Figure SMS_39
,部件框的右下角坐标为/>
Figure SMS_40
;如图3所示。
根据公式1先计算出
Figure SMS_46
和/>
Figure SMS_43
所在直线的斜率/>
Figure SMS_53
和相对位置系数/>
Figure SMS_42
Figure SMS_54
和/>
Figure SMS_49
所在直线的斜率/>
Figure SMS_55
和相对位置系数/>
Figure SMS_44
,然后计算所有标注数据中/>
Figure SMS_57
Figure SMS_47
、/>
Figure SMS_52
和/>
Figure SMS_41
的平均值/>
Figure SMS_50
、/>
Figure SMS_45
、/>
Figure SMS_51
、/>
Figure SMS_48
,/>
Figure SMS_56
公式1
经计算,图2中套管设备框内部的上部分、中间部分和下部分的3个部件框的
Figure SMS_58
Figure SMS_59
、/>
Figure SMS_60
、/>
Figure SMS_61
分别为:
上部分:[ 0.4302526,0.20888039,27.20275201,0.13388763]
中间部分:[3.46318621,0.32164608,7.86961153,0.26671192]
下部分:[8.12985111,0.3126763,2.3139523,0.2756817 ]。
c、套管的三维温度矩阵数据经设备框检测模型检测后,如图4所示,得到设备框的左上角坐标为
Figure SMS_62
P 1(276,62),设备框的右下角坐标为/>
Figure SMS_63
P 4(354,411),根据设备框坐标和步骤a中计算的各部件框的平均斜率和平均相对位置系数,根据公式2计算出各部件框的左上角坐标为/>
Figure SMS_64
,部件框的右下角的坐标为/>
Figure SMS_65
Figure SMS_66
公式2
其中
Figure SMS_67
为/>
Figure SMS_68
和/>
Figure SMS_69
所在直线的斜率,/>
Figure SMS_70
为/>
Figure SMS_71
和/>
Figure SMS_72
所在直线的斜率。
计算取整得到套管设备框内部的3个部件框:上部分的部件框坐标为[292,69,343,126]、中间部分的部件框坐标为[301,148,333,247]、下部分的部件框坐标为[300,260,332,361],即为部件框A,如图4所示。
S5、部件框检测模型处理:将套管的三维温度矩阵数据,输入部件框检测模型中进行检测,输出部件框,获得设备部件框的类型、位置和置信度信息。
将得到的所有部件框进行筛选,保留置信度大于阈值0.5且同设备类型的部件框,然后删除部件框的中心点不在设备框内的部件框,最后,将每种部件类型的部件框保留一个置信度最高的部件框,得到部件框B。如图5所示,得到套管两个部件框,分别为套管上部分的部件框,坐标为[294,73,344,132];中间部分的部件框,坐标为[301,153,333,254];即为部件框B,但是缺失了套管下部分的部件框。
此时,经过筛选后得到的部件框B出现了缺失的情况,因此需要对部件框B中缺失的下部分的部件框进行补全。
S6、设备框B补全:根据设备框检测模型推理得到的设备框类型为套管,用套管的部件框A对检测到的套管部件框B中缺失的部件框进行补全,对比后找出部件框B中缺失的部件框为套管下部分的部件框,坐标为[300,260,332,361],补充到部件框B中,以补全后的部件框B作为最终的部件框输出结果。补充结果如图6所示,补全后的套管部件框B为:上部分的部件框,坐标为[294,73,344,132],中间部分的部件框,坐标为[301,153,333,254]和下部分的部件框,坐标为[300,260,332,361]。
经验证:在相同实验环境选取1200个套管测试数据,根据部件框检测模型直接检测得到的部件框召回率最高为95.21%,而在添加部件框补全方法后,部件框召回率可达99.35%。
因此,本方法可有效提高部件框的召回率。
实施例2:
基于温度数据的电力设备部件框的检测补全方法,按照图1所示,包括以下步骤:
S1、数据采集和预处理:
红外温度传感器采集电力设备温度数据,将电力设备温度数据进行标记和预处理,提取得到640×480的二维数组温度矩阵,然后在深度方向上拼接成三维数组,对拼接后的三维数组作数据的归一化处理,并映射到0-255之间,再在上下各填充80行0,转换为640×640的三维温度矩阵数据;数据标记具体是标记温度矩阵中设备的位置和类型以及设备部件的位置和类型;将整理好的三维温度矩阵数据按7:1:2的比例随机划分为训练集、验证集和测试集。
S2、搭建并训练电力设备的设备框检测模型和部件框检测模型:
以YoloV4作为框架,以mobilenet0.25作为主干特征提取网络,SGD作为优化器,输入训练集、验证集和测试集进行端到端的网络训练。模型训练采用迁移学习的方法,共设置800次迭代,前300次迭代,冻结主干网络参数,batch_size设置为64,后500次迭代对整个网络权重值训练,batch_size设置为32,学习率采用余弦衰减方式,初始值设置为1e-2,最小学习率设置为1e-4,将标记的设备的位置和类型数据输入到设备框检测模型进行训练,将标记的设备部件的位置和类型数据输入到部件框检测模型进行训练,最后获得电力设备的设备框检测模型和部件框检测模型。
S3、设备框检测模型处理:将未知设备类型的三维温度矩阵数据,输入设备框检测模型中,输出设备框,获得设备的类型、位置和置信度信息,保留检测结果中位于红外热像图最中心的设备,其中红外热像图是温度矩阵的可视化呈现,温度矩阵中一个温度值对应红外热像图一个像素点的温度。根据检测结果中的位置信息,计算出各设备框中心点与红外热像图中心点的距离,保留距离最小的设备框和其对应的类型,即为设备框检测模型最终的检测结果。将设备类型、位置和置信度信息以列表的形式保存。
若经设备框检测模型处理后得知未知设备为隔离开关,则以隔离开关为例,进行后续的操作:
设备框检测模型处理后得到隔离开关的设备框,设备框的坐标为[183,191,496,280],其中(183,191)为设备框的左上角坐标,(496,280)为设备框的右下角坐标。
S4、根据斜率和相对位置系数,通过隔离开关设备框生成隔离开关部件框A,具体计算步骤为:
a、对隔离开关标注实际的设备框和部件框,如图7所示,其中,最大的标注框为设备框,在设备框内部的左部分、中间部分和右部分的3个小标注框为部件框;
b、计算隔离开关中所有的部件框和设备框之间的斜率和相对位置系数,然后得到所有标记数据的平均相对斜率和平均相对位置系数。具体方法如下所示:
令隔离开关设备框的左上角坐标为
Figure SMS_73
,设备框的右下角坐标为/>
Figure SMS_74
;部件框的左上角坐标为/>
Figure SMS_75
,右下角坐标为/>
Figure SMS_76
;如图8所示。
根据公式1先计算出
Figure SMS_84
和/>
Figure SMS_77
所在直线的斜率/>
Figure SMS_91
和相对位置系数/>
Figure SMS_80
Figure SMS_85
和/>
Figure SMS_83
所在直线的斜率/>
Figure SMS_90
和相对位置系数/>
Figure SMS_82
,然后计算所有标注数据中/>
Figure SMS_89
Figure SMS_81
、/>
Figure SMS_87
和/>
Figure SMS_79
的平均值/>
Figure SMS_88
、/>
Figure SMS_86
、/>
Figure SMS_92
、/>
Figure SMS_78
Figure SMS_93
公式1
经计算,图7中隔离开关设备框内部的左部分、中间部分和右部分的3个部件框的
Figure SMS_94
、/>
Figure SMS_95
、/>
Figure SMS_96
、/>
Figure SMS_97
分别为:
左部分:[1.59722222,0.01637461,0.02319872,0.78683843]
中间部分:[0.23713306,0.3304129,0.06720749,0.46600185]
右部分:[0.0336377,0.69066939,0.85416667,0.02029716]。
c、隔离开关的三维温度矩阵数据经设备框检测模型检测后,如图9所示,得到设备框的左上角坐标为
Figure SMS_98
P 1(183,191),设备框的右下角坐标为/>
Figure SMS_99
P 4(496,280),根据设备框坐标和步骤a中计算的各部件框的平均斜率和平均相对位置系数,根据公式2计算出各部件框的左上角坐标为/>
Figure SMS_100
,部件框的右下角的坐标为/>
Figure SMS_101
Figure SMS_102
公式2
其中
Figure SMS_103
为/>
Figure SMS_104
和/>
Figure SMS_105
所在直线的斜率,/>
Figure SMS_106
为/>
Figure SMS_107
和/>
Figure SMS_108
所在直线的斜率。
计算取整,得到隔离开关设备框内部的3个部件框:左部分的部件框坐标为[188,199,249,274]、中间部分的部件框坐标为[281,219,352,268]、右部分的部件框坐标为[400,202,491,275],即为部件框A,如图9所示。
S5、部件框检测模型处理:将隔离开关的三维温度矩阵数据,输入部件框检测模型中进行检测,输出部件框,获得设备部件框的类型、位置和置信度信息。
将得到的所有部件框进行筛选,保留置信度大于阈值0.5且同设备类型的部件框,然后删除部件框的中心点不在设备框内的部件框,最后,将每种部件类型的部件框保留一个置信度最高的部件框,得到部件框B。如图10所示,得到隔离开关两个部件框,分别为隔离开关中间部分的部件框,坐标为[281,219,352,268];右部分的部件框,坐标为[400,202,491,275];即为部件框B,但是缺失了隔离开关左部分的部件框。
此时,经过筛选后得到的部件框B出现了缺失的情况,因此需要对部件框B中缺失的左部分的部件框进行补全。
S6、设备框B补全:根据设备框检测模型推理得到的设备框类型为隔离开关,用隔离开关的部件框A对检测到的隔离开关部件框B中缺失的部件框进行补全,对比后找出部件框B中缺失的部件框为隔离开关左部分的部件框,坐标为[188,199,249,274],补充到部件框B中,以补全后的部件框B作为最终的部件框输出结果。补充结果如图11所示,补全后的隔离开关部件框B为:左部分的部件框,坐标为[188,199,249,274];中间部分的部件框,坐标为[281,219,352,268]和右部分的部件框,坐标为[400,202,491,275]。
经验证:在相同实验环境选取1200个隔离开关测试数据,根据部件框检测模型直接检测得到的部件框召回率最高为94.35%,而在添加部件框补全方法后,部件框召回率可达98.96%。
因此,本方法可有效提高部件框的召回率。

Claims (8)

1.基于温度数据的电力设备部件框的检测补全方法,其特征在于:包括以下步骤:
S1、数据采集和预处理:红外温度传感器采集电力设备温度数据,将电力设备温度数据进行标记和预处理,得到三维温度矩阵数据;
S2、搭建并训练电力设备的设备框检测模型和部件框检测模型:以YoloV4作为框架,以mobilenet0.25作为主干特征提取网络,SGD作为优化器,输入三维温度矩阵数据进行端到端的网络训练,分别获得电力设备的设备框检测模型和部件框检测模型;
S3、设备框检测模型处理:将未知设备类型的三维温度矩阵数据,输入设备框检测模型中,输出设备框,获得设备的类型、位置和置信度,只保留位于最中心的设备框;
S4、根据斜率和相对位置系数,通过设备框生成部件框A;
S5、部件框检测模型处理:将未知设备类型的三维温度矩阵数据,输入部件框检测模型中,输出部件框,获得设备部件框的类型、位置和置信度,然后筛选得到部件框B;
S6、用部件框A对部件框B中缺失的部件框进行补全。
2.根据权利要求1所述的基于温度数据的电力设备部件框的检测补全方法,其特征在于:步骤S1中的数据标记是标记温度矩阵中设备的位置和类型以及设备部件的位置和类型;将标记的设备的位置和类型数据输入到设备框检测模型进行训练,将标记的设备部件的位置和类型数据输入到部件框检测模型进行训练。
3.根据权利要求1所述的基于温度数据的电力设备部件框的检测补全方法,其特征在于:步骤S1中的预处理为:将电力设备温度数据提取得到640×480的二维数组温度矩阵,然后在深度方向上拼接成三维数组,对拼接后的三维数组作数据的归一化处理,并映射到0-255之间,再在上下各填充80行0,转换为640×640的三维温度矩阵数据。
4.根据权利要求1所述的基于温度数据的电力设备部件框的检测补全方法,其特征在于:步骤S2中,模型训练采用迁移学习的方法,共设置800次迭代,前300次迭代,冻结主干网络参数,batch_size设置为64,后500次迭代对整个网络权重值训练,batch_size设置为32,学习率采用余弦衰减方式,初始值设置为1e-2,最小学习率设置为1e-4,最后获得电力设备的设备框检测模型和部件框检测模型。
5.根据权利要求1所述的基于温度数据的电力设备部件框的检测补全方法,其特征在于:步骤S4,具体包括以下步骤:
a、对要检测的电力设备标注实际的设备框和部件框;
b、计算实际的同一电力设备中所有的部件框和设备框之间的斜率和相对位置系数,并获得所有标记数据的平均斜率和平均相对位置系数;
c、将电力设备的三维温度矩阵数据经设备框检测模型检测后,得到设备框坐标,根据平均斜率和平均相对位置系数,计算电力设备中各部件框的坐标,得到部件框A。
6.根据权利要求5所述的基于温度数据的电力设备部件框的检测补全方法,其特征在于:步骤b中部件框和设备框之间的斜率和相对位置系数的计算公式为:
Figure QLYQS_7
其中,令实际标注的设备框的左上角坐标为/>
Figure QLYQS_2
,设备框的右下角坐标为/>
Figure QLYQS_16
;部件框的左上角坐标为/>
Figure QLYQS_4
,部件框的右下角坐标为/>
Figure QLYQS_10
;/>
Figure QLYQS_8
Figure QLYQS_15
和/>
Figure QLYQS_14
所在直线的斜率;/>
Figure QLYQS_17
为/>
Figure QLYQS_1
和/>
Figure QLYQS_9
所在直线的相对位置系数;
Figure QLYQS_5
为/>
Figure QLYQS_11
和/>
Figure QLYQS_6
所在直线的斜率,/>
Figure QLYQS_12
为/>
Figure QLYQS_3
和/>
Figure QLYQS_13
所在直线的相对位置系数。
7.根据权利要求6所述的基于温度数据的电力设备部件框的检测补全方法,其特征在于:步骤c中的各部件框的坐标计算公式为:
Figure QLYQS_33
其中,令设备框模型检测的设备框的左上角坐标为/>
Figure QLYQS_25
,设备框的右下角坐标为/>
Figure QLYQS_27
,令部件框的左上角坐标为/>
Figure QLYQS_24
,部件框的右下角的坐标为/>
Figure QLYQS_32
;/>
Figure QLYQS_34
为/>
Figure QLYQS_36
和/>
Figure QLYQS_21
所在直线的斜率,/>
Figure QLYQS_28
为/>
Figure QLYQS_18
Figure QLYQS_26
所在直线的斜率;/>
Figure QLYQS_20
为所有标记的部件框和设备框/>
Figure QLYQS_29
的平均斜率、/>
Figure QLYQS_22
为所有相对位置系数/>
Figure QLYQS_30
的平均相对位置系数,/>
Figure QLYQS_19
为所有/>
Figure QLYQS_35
的平均斜率,/>
Figure QLYQS_23
为所有相对位置系数/>
Figure QLYQS_31
的平均相对位置系数。
8.根据权利要求1所述的基于温度数据的电力设备部件框的检测补全方法,其特征在于:步骤S5中的部件框B的筛选方法包括以下步骤:
a、保留置信度大于阈值0.5且同设备类型的部件框;
b、删除部件框的中心点不在设备框内的部件框;
c、将每种部件类型的部件框保留一个置信度最高的部件框,得到部件框B。
CN202310669450.9A 2023-06-07 2023-06-07 基于温度数据的电力设备部件框的检测补全方法 Active CN116383612B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310669450.9A CN116383612B (zh) 2023-06-07 2023-06-07 基于温度数据的电力设备部件框的检测补全方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310669450.9A CN116383612B (zh) 2023-06-07 2023-06-07 基于温度数据的电力设备部件框的检测补全方法

Publications (2)

Publication Number Publication Date
CN116383612A true CN116383612A (zh) 2023-07-04
CN116383612B CN116383612B (zh) 2023-09-01

Family

ID=86981035

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310669450.9A Active CN116383612B (zh) 2023-06-07 2023-06-07 基于温度数据的电力设备部件框的检测补全方法

Country Status (1)

Country Link
CN (1) CN116383612B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080284649A1 (en) * 2003-12-22 2008-11-20 Abb Research Ltd. Method for Positioning and a Positioning System
CN109523027A (zh) * 2018-10-22 2019-03-26 新智数字科技有限公司 一种基于贝叶斯网络的锅炉运行数据监测方法和装置
CN112017173A (zh) * 2020-09-02 2020-12-01 西南交通大学 基于目标检测网络和结构化定位的电力设备缺陷检测方法
CN114088212A (zh) * 2021-11-29 2022-02-25 浙江天铂云科光电股份有限公司 基于温度视觉的诊断方法及诊断装置
CN114463299A (zh) * 2022-01-26 2022-05-10 浙江天铂云科光电股份有限公司 一种穿墙套管的红外图像检测方法
CN114898102A (zh) * 2022-05-26 2022-08-12 浙江天铂云科光电股份有限公司 基于Efficientdet电力设备智能检测方法
CN115827888A (zh) * 2022-11-17 2023-03-21 成都航天科工大数据研究院有限公司 一种复杂设备的故障预测方法

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080284649A1 (en) * 2003-12-22 2008-11-20 Abb Research Ltd. Method for Positioning and a Positioning System
CN109523027A (zh) * 2018-10-22 2019-03-26 新智数字科技有限公司 一种基于贝叶斯网络的锅炉运行数据监测方法和装置
CN112017173A (zh) * 2020-09-02 2020-12-01 西南交通大学 基于目标检测网络和结构化定位的电力设备缺陷检测方法
CN114088212A (zh) * 2021-11-29 2022-02-25 浙江天铂云科光电股份有限公司 基于温度视觉的诊断方法及诊断装置
WO2023092760A1 (zh) * 2021-11-29 2023-06-01 浙江天铂云科光电股份有限公司 基于温度视觉的诊断方法及诊断装置
CN114463299A (zh) * 2022-01-26 2022-05-10 浙江天铂云科光电股份有限公司 一种穿墙套管的红外图像检测方法
CN114898102A (zh) * 2022-05-26 2022-08-12 浙江天铂云科光电股份有限公司 基于Efficientdet电力设备智能检测方法
CN115827888A (zh) * 2022-11-17 2023-03-21 成都航天科工大数据研究院有限公司 一种复杂设备的故障预测方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
NICOLAS NADAI等: "Equipment Failure Prediction Based on Neural Network Analysis incorporating Maintainers Inspection Findings", 《IEEE》, pages 1 - 7 *
刘家宗: "基于点云数据输入的三维鲁棒修复技术", 《中国优秀硕士学位论文全文数据库信息科技辑》, no. 02, pages 138 - 1323 *

Also Published As

Publication number Publication date
CN116383612B (zh) 2023-09-01

Similar Documents

Publication Publication Date Title
US9165365B2 (en) Method and system for estimating attitude of camera
CN103252778B (zh) 用于估计机器人位置的设备及其方法
CN108960211B (zh) 一种多目标人体姿态检测方法以及系统
EP3033875B1 (en) Image processing apparatus, image processing system, image processing method, and computer program
WO2013168998A1 (en) Apparatus and method for processing 3d information
CN105574533B (zh) 一种图像特征提取方法和装置
CN111784778A (zh) 基于线性求解非线性优化的双目相机外参标定方法和系统
CN112258409A (zh) 一种用于无人驾驶的单目相机绝对尺度恢复方法及装置
CN110555908A (zh) 基于室内移动目标背景修复的三维重建方法
CN113807342A (zh) 基于图像获取设备信息的方法及相关装置
CN115359295A (zh) 一种解耦知识蒸馏金具目标检测方法及系统
KR100934904B1 (ko) 거리 추정 장치 및 추정 방법
CN116383612B (zh) 基于温度数据的电力设备部件框的检测补全方法
CN104573085B (zh) 图像检索方法、图像检索装置和终端
CN106709941A (zh) 一种用于光谱影像序列配准的关键点筛选方法
WO2018021657A1 (ko) 스테레오 매칭을 통한 깊이값의 신뢰도 측정 방법 및 장치
CN115239794B (zh) 道路积水面积检测方法、装置及电子设备
CN112434559A (zh) 一种机器人识别定位方法
CN110503627B (zh) 建筑物裂缝检测方法、装置、存储介质及计算机设备
CN113538411A (zh) 一种绝缘子缺陷检测方法及装置
US20200034984A1 (en) Learning template representation libraries
CN117173720B (zh) 适用于智慧能源单元的处理方法及装置
CN113627609B (zh) 一种基于仿射变换的网络度量方法和存储设备
CN113139454B (zh) 基于单张图像的道路宽度提取方法及装置
CN113052865B (zh) 一种基于图像相似度的输电线路小样本温度图像扩增方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant