CN112508905A - 一种金具锈蚀图像检测方法和计算机可读存储介质 - Google Patents

一种金具锈蚀图像检测方法和计算机可读存储介质 Download PDF

Info

Publication number
CN112508905A
CN112508905A CN202011389362.6A CN202011389362A CN112508905A CN 112508905 A CN112508905 A CN 112508905A CN 202011389362 A CN202011389362 A CN 202011389362A CN 112508905 A CN112508905 A CN 112508905A
Authority
CN
China
Prior art keywords
hardware
corrosion
detection method
image detection
feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202011389362.6A
Other languages
English (en)
Inventor
杨喆
何勇
郑耀华
原瀚杰
董承熙
罗建斌
董丽梦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Power Grid Co Ltd
Zhaoqing Power Supply Bureau of Guangdong Power Grid Co Ltd
Original Assignee
Guangdong Power Grid Co Ltd
Zhaoqing Power Supply Bureau of Guangdong Power Grid Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Power Grid Co Ltd, Zhaoqing Power Supply Bureau of Guangdong Power Grid Co Ltd filed Critical Guangdong Power Grid Co Ltd
Priority to CN202011389362.6A priority Critical patent/CN112508905A/zh
Publication of CN112508905A publication Critical patent/CN112508905A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/25Fusion techniques
    • G06F18/253Fusion techniques of extracted features
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Computing Systems (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Biophysics (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Molecular Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Health & Medical Sciences (AREA)
  • Evolutionary Biology (AREA)
  • Multimedia (AREA)
  • Quality & Reliability (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供一种金具锈蚀图像检测方法,包括以下步骤:S1.收集金具锈蚀照片,建立金具锈蚀数据库;S2.将数据库数据输入典型缺陷智能分析模块,提取缺陷信息;S3.建立Cascade网络,构建检测架构;S4.改进FPN层;S5.改进Anchor的密度和匹配;S6.将缺陷信息输入Cascade网络、FPN层和Anchor进行联合训练形成目标检测框架;S7.将无人机采集的金具图片信息输入目标检测框架得出检测结果。本发明还提供一种计算机可读存储介质。本发明不仅能够自动识别输电线路中的金具锈蚀,缩短了锈蚀检测时间,提升了工作的效率,且不会受到拍照时的光线影响,具有更高的检测精度。

Description

一种金具锈蚀图像检测方法和计算机可读存储介质
技术领域
本发明涉及图像检测技术领域,更具体地,涉及一种一种金具锈蚀图像检测方法和计算机可读存储介质。
背景技术
输电线路中,金具起着连接和固定裸导线、导线及绝缘子,传递机械载荷、电气负荷的重要作用。金具的锈蚀,会造成连接线路断开或掉落,引起停电跳闸的重大事故。我国高压输电线路距离长、沿线潮湿环境较多,使得输电线路中的连接金具、防护金具等部件容易受到锈蚀破坏,因此输电线路的锈蚀检测是输电线路缺陷检测的一个重要方面。
现有阶段通过人工目测的方式检测金具锈蚀,工作效率低、主观性大。其一,巡检人员在杆塔附近通过望远检测杆塔金具是否锈蚀,必须在现场完成检测工作,检测结果无证明材料,主观性大,复核成本高;其二,通过直升机/无人机拍摄巡检照片人工判别是否存在金具锈蚀缺陷,数据量巨大、检测效率低,检测人员容易产生视觉疲劳,导致主观错误。中国公开专利号CN110910341A,公开日期为2020年3月24日,该专利公开了一种输电线路锈蚀区缺陷检测方法及装置,该专利通过超红色法和阈值法识别实物锈蚀,识别速度慢,依靠图片颜色进行识别,易受到光线影响,准确性不高。
发明内容
本发明的目的在于克服现有锈蚀图片检测方法中检测识别速度慢,准确性低的缺点,提供一种金具锈蚀图像检测方法。本发明改进了锈蚀图像检测的方法,不仅能够自动识别输电线路中的金具锈蚀,还缩短了锈蚀检测时间,提升了工作的效率,节省时间和人力成本,降低主观性。
为解决上述技术问题,本发明采用的技术方案是:一种金具锈蚀图像检测方法,包括以下步骤方法:
S1.收集金具锈蚀照片,建立金具锈蚀数据库;
S2.将数据库数据输入典型缺陷智能分析模块,提取缺陷信息;
S3.建立Cascade网络,构建检测架构;
S4.改进FPN层,增强对小目标特征检测;
S5.改进Anchor的密度和匹配,增强小目标特征的敏感度;
S6.将缺陷信息输入Cascade网络、FPN层和Anchor进行联合训练形成多特征融合的目标检测框架;
S7.将无人机采集的金具图片信息输入目标检测框架得出金具锈蚀检测结果。
进一步的,所述步骤S1中,所述金具锈蚀照片为金具的可见光照片。将金属的锈蚀照片从无人机的可见光照片中筛选出,建立起锈蚀数据库。
进一步的,所述步骤S2中典型缺陷智能分析模块在数据中识别出待分析区域,在待分析区域中建立分析框,标注出缺陷,提取缺陷信息。步骤S2实现非机构数据即图片数据向结构化数据的转换,便于直接提取图片上的相关缺陷信息。
进一步的,所述步骤S3中建立的Cascade网络以Cascade R-CNN算法为基础,增加若干个级联过程。
进一步的,所述级联过程包括以下具体过程,级联采用的是R-CNN网络,每个级联的R-CNN网络设置不同的IOU阈值,对输入的proposal进行优化。增加了级联的Cascade网络在计算精度和效率上进行了提升,非常易于实施和端到端的trainning,特别是在更严格的评估指标下,实现最先进的单模型探测器。此外,Cascade R-CNN可以使用基于R-CNN框架的任何两级物体探测器构建,计算的边际增长具有一致的增益(2到4个点,意味着更严格的本地化指标),实现简单有效的检测架构。
进一步的,所述步骤S4中,根据不同阶段特征图的感受野和抽象程度改进FPN层。
进一步的,所述步骤S4中,改进的FPN层使用GAN对特征图的小目标特征生成一个和大目标特征相近的Super-resolved Feature,然后将Super-resolved Feature叠加在原来的小目标特征的特征图上。GAN能够将不同阶段的特征图对应的感受野和表达的抽象信息融合进入FPN层,增强对小目标特征表达来提升小目标特征的检测性能。
进一步的,所述步骤S5包括以下具体步骤:
S51.在数据训练中采用基于数据的特点增加小目标特征匹配的Anchor框的个数;
S52.增加小目标特征的训练权重,减少对大目标特征的bias
本技术方案中,增加负责小目标特征的Anchor的策略,可以在训练时对小目标特征的学习更加充分,使用比较宽松的匹配策略增强对小目标特征的敏感度。
进一步的,所述步骤S6中目标检测框架能够将图片分割成多层特征融合的多特征图,结合了低层的原始图像信息和高层的语义信息,根据语义信息进行锈蚀检测。本技术方案中,可以直接将无人机拍摄的可见光图片输入目标检测框架中,目标框架能够将可见光图片进行图像分析,根据其分割后的语义信息和原始图像信息检测出金具锈蚀信息,完成自动检测。
一种计算机可读存储介质,计算机可读存储介质内存储有计算机程序,计算机程序被处理器执行时上述的一种金具锈蚀图像检测方法。
与现有技术相比,本发明的有益效果是:
本发明改进了FPN层,增强对小目标特征检测,改进Anchor的密度和匹配,增强小目标特征的敏感度,并通过锈蚀数据库对Cascade网络、FPN层和Anchor进行联合训练,使得其构成的目标检测框架面对金具图片能够快速进行分割检测,得到金具锈蚀检测结果,缩短了锈蚀检测时间,提升了工作的效率,且不会受到拍照时的光线影响,具有更高的检测精度。
附图说明
图1为本发明一种金具锈蚀图像检测方法的流程示意图。
具体实施方式
下面结合具体实施方式对本发明作进一步的说明。其中,附图仅用于示例性说明,表示的仅是示意图,而非实物图,不能理解为对本专利的限制;为了更好地说明本发明的实施例,附图某些部件会有省略、放大或缩小,并不代表实际产品的尺寸;对本领域技术人员来说,附图中某些公知结构及其说明可能省略是可以理解的。
本发明实施例的附图中相同或相似的标号对应相同或相似的部件;在本发明的描述中,需要理解的是,若有术语“上”、“下”、“左”、“右”等指示的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作,因此附图中描述位置关系的用语仅用于示例性说明,不能理解为对本专利的限制,对于本领域的普通技术人员而言,可以根据具体情况理解上述术语的具体含义。
实施例1
如图1所示为本发明一种金具锈蚀图像检测方法的实施例。一种金具锈蚀图像检测方法包括以下具体步骤:
步骤一:在无人机拍摄的可见光图片里,筛选出金具锈蚀照片,建立金具锈蚀数据集。
步骤二:将数据库数据输入典型缺陷智能分析模块,基于智典型缺陷智能分析模块识别出数据中待分析区域,建立分析框,人工标注缺陷。实现非机构数据(图片)向结构化数据的转换,并提取图片上的相关缺陷信息。
步骤三:构建cascade网络,以CVPR2018的Cascade R-CNN算法为基础进行了改进,增加了多个强分类器的级联过程,通过级联的R-CNN网络,对每个级联的R-CNN网络设置不同的IOU阈值,对输入的proposal进行优化。增加了级联的Cascade网络在计算精度和效率上进行了提升,非常易于实施和端到端的trainning,特别是在更严格的评估指标下,实现最先进的单模型探测器。此外,Cascade R-CNN可以使用基于R-CNN框架的任何两级物体探测器构建,计算的边际增长具有一致的增益(3个增益点,即更严格的本地化指标),实现简单有效的检测架构。
步骤四:根据不同阶段特征图的感受野和抽象程度改进FPN层。改进的FPN层使用GAN对特征图的小目标特征生成一个和大目标特征相近的Super-resolved Feature,然后将Super-resolved Feature叠加在原来的小目标特征的特征图上。GAN能够将不同阶段的特征图对应的感受野和表达的抽象信息融合进入FPN层,增强对小目标特征表达来提升小目标特征的检测性能。
步骤五:改进anchor密度和匹配。在数据训练中采用基于数据的特点增加小目标特征匹配的Anchor框的个数,增加小目标特征的训练权重,减少网络对大目标特征的bias。可以在训练时对小目标特征的学习更加充分,可以使用比较宽松的匹配策略增强对小目标特征的敏感度。
步骤六:将缺陷信息输入Cascade网络、FPN层和Anchor进行联合训练形成多特征融合的目标检测框架。目标检测框架能够将图片分割成多层特征融合的多特征图,结合了低层的原始图像信息和高层的语义信息。
步骤七:将无人机采集的金具图片信息输入目标检测框架得出检测结果。目标检测框架能够对输入的金具图片进行处理分割,能够快速得到锈蚀检测结果,提高了目标检测的速度,且不会受到拍照时的光线影响,具有更高的检测精度和速度。
实施例2
本发明一种计算机可读存储介质的实施例。计算机可读存储介质内存储有计算机程序,计算机程序被处理器执行时实施例1中的一种金具锈蚀图像检测方法。
显然,本发明的上述实施例仅仅是为清楚地说明本发明所作的举例,而并非是对本发明的实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明权利要求的保护范围之内。

Claims (10)

1.一种金具锈蚀图像检测方法,其特征在于:包括以下步骤:
S1.收集金具锈蚀照片,建立金具锈蚀数据库;
S2.将数据库数据输入典型缺陷智能分析模块,提取缺陷信息;
S3.建立Cascade网络,构建检测架构;
S4.改进FPN层,增强对小目标特征检测;
S5.改进Anchor的密度和匹配,增强小目标特征的敏感度;
S6.将缺陷信息输入Cascade网络、FPN层和Anchor进行联合训练形成多特征融合的目标检测框架;
S7.将无人机采集的金具图片信息输入目标检测框架得出金具锈蚀检测结果。
2.根据权利要求1所述的一种金具锈蚀图像检测方法,其特征在于:所述步骤S1中,所述金具锈蚀照片为金具的可见光照片。
3.根据权利要求1所述的一种金具锈蚀图像检测方法,其特征在于:所述步骤S2中典型缺陷智能分析模块在数据中识别出待分析区域,在待分析区域中建立分析框,标注出缺陷,提取缺陷信息。
4.根据权利要求1所述的一种金具锈蚀图像检测方法,其特征在于:所述步骤S3中建立的Cascade网络以Cascade R-CNN算法为基础,增加若干个级联过程。
5.根据权利要求4所述的一种金具锈蚀图像检测方法,其特征在于:所述级联过程包括以下具体过程,级联采用的是R-CNN网络,每个级联的R-CNN网络设置不同的IOU阈值,对输入的proposal进行优化。
6.根据权利要求1所述的一种金具锈蚀图像检测方法,其特征在于:所述步骤S4中,根据不同阶段特征图的感受野和抽象程度改进FPN层。
7.根据权利要求6所述的一种金具锈蚀图像检测方法,其特征在于:所述步骤S4中,改进的FPN层使用GAN对特征图的小目标特征生成一个和大目标特征相近的Super-resolvedFeature,然后将Super-resolved Feature叠加在原来的小目标特征的特征图上。
8.根据权利要求1所述的一种金具锈蚀图像检测方法,其特征在于:所述步骤S5包括以下具体步骤:
S51.在数据训练中采用基于数据的特点增加小目标特征匹配的Anchor框的个数;
S52.增加小目标特征的训练权重,减少对大目标特征的bias。
9.根据权利要求6所述的一种金具锈蚀图像检测方法,其特征在于:所述步骤S6中目标检测框架能够将图片分割成多层特征融合的多特征图,结合了低层的原始图像信息和高层的语义信息,根据语义信息进行锈蚀检测。
10.一种计算机可读存储介质,其特征在于:计算机可读存储介质内存储有计算机程序,计算机程序被处理器执行时实现权利要求1-9任一所述的一种金具锈蚀图像检测方法。
CN202011389362.6A 2020-12-01 2020-12-01 一种金具锈蚀图像检测方法和计算机可读存储介质 Pending CN112508905A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011389362.6A CN112508905A (zh) 2020-12-01 2020-12-01 一种金具锈蚀图像检测方法和计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011389362.6A CN112508905A (zh) 2020-12-01 2020-12-01 一种金具锈蚀图像检测方法和计算机可读存储介质

Publications (1)

Publication Number Publication Date
CN112508905A true CN112508905A (zh) 2021-03-16

Family

ID=74968615

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011389362.6A Pending CN112508905A (zh) 2020-12-01 2020-12-01 一种金具锈蚀图像检测方法和计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN112508905A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113052832A (zh) * 2021-04-19 2021-06-29 广东电网有限责任公司肇庆供电局 一种输电线路的金具锈蚀图像检测方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111402226A (zh) * 2020-03-13 2020-07-10 浙江工业大学 一种基于级联卷积神经网络的表面疵点检测方法
CN111650204A (zh) * 2020-05-11 2020-09-11 安徽继远软件有限公司 基于级联目标检测的输电线路金具缺陷检测方法及系统
CN111832398A (zh) * 2020-06-02 2020-10-27 国网浙江嘉善县供电有限公司 一种无人机影像的配电线路杆塔导地线断股图像检测方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111402226A (zh) * 2020-03-13 2020-07-10 浙江工业大学 一种基于级联卷积神经网络的表面疵点检测方法
CN111650204A (zh) * 2020-05-11 2020-09-11 安徽继远软件有限公司 基于级联目标检测的输电线路金具缺陷检测方法及系统
CN111832398A (zh) * 2020-06-02 2020-10-27 国网浙江嘉善县供电有限公司 一种无人机影像的配电线路杆塔导地线断股图像检测方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
丘灵华等: "基于深度学习的输电线路绝缘子缺陷检测研究", 《计算机应用研究》, vol. 358, pages 358 - 360 *
方志丹等: ""基于层级识别模型的输电线路杆塔小金具缺陷识别方法"", 《电力信息与通信技术》, vol. 18, no. 9, pages 16 - 24 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113052832A (zh) * 2021-04-19 2021-06-29 广东电网有限责任公司肇庆供电局 一种输电线路的金具锈蚀图像检测方法及装置

Similar Documents

Publication Publication Date Title
CN111460995B (zh) 基于无人机的电力线路巡检方法及巡检系统
CN112734692A (zh) 一种变电设备缺陷识别方法及装置
CN110059539A (zh) 一种基于图像分割的自然场景文本位置检测方法
CN111832398A (zh) 一种无人机影像的配电线路杆塔导地线断股图像检测方法
CN109389322A (zh) 基于目标检测和长短时记忆模型的导地线断散股识别方法
Wang et al. Insulator defect recognition based on faster R-CNN
CN113077416A (zh) 一种基于图像处理的焊点焊接缺陷检测方法与系统
CN115546664A (zh) 一种基于级联网络的绝缘子自爆检测方法及系统
CN113485432A (zh) 一种基于无人机的光伏电站电致发光智能诊断系统及方法
CN115409814A (zh) 一种基于融合图像的光伏组件热斑检测方法及系统
CN116310274A (zh) 一种输变电设备的状态评估方法
CN116309303A (zh) 基于红外图像的电气设备缺陷检测方法、装置及相关设备
CN112508905A (zh) 一种金具锈蚀图像检测方法和计算机可读存储介质
CN111241905A (zh) 基于改进ssd算法的输电线路鸟窝检测方法
CN114119454A (zh) 用于输电线路烟雾检测的装置及方法
CN113642558A (zh) 耐张线夹压接缺陷的x射线图像识别方法及装置
CN113962929A (zh) 光伏电池组件缺陷检测方法、系统及光伏电池组件生产线
CN110929690B (zh) 一种基于深度神经网络的遥感影像路网提取方法
CN112683916A (zh) 集电线路杆塔小金具缺失或安装错误的识别方法及装置
CN116934696A (zh) 一种基于YOLOv7-Tiny模型改进的工业PCB缺陷检测方法及其装置
CN116385950A (zh) 一种小样本条件下电力线路隐患目标检测方法
CN115526869A (zh) 一种电力巡检图像中金具锈蚀检测及量化方法
CN114331987A (zh) 一种接线端子锈蚀全景监控图像的边缘侧轻量化处理方法
CN115311196A (zh) 一种多视觉融合的风力发电机叶片表面缺陷检测方法
CN110826473A (zh) 一种基于神经网络的绝缘子图像自动识别方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination