CN105023014A - 一种无人机巡检输电线路图像内的杆塔目标提取方法 - Google Patents

一种无人机巡检输电线路图像内的杆塔目标提取方法 Download PDF

Info

Publication number
CN105023014A
CN105023014A CN201510522578.8A CN201510522578A CN105023014A CN 105023014 A CN105023014 A CN 105023014A CN 201510522578 A CN201510522578 A CN 201510522578A CN 105023014 A CN105023014 A CN 105023014A
Authority
CN
China
Prior art keywords
image
brightness
electric force
pixel
force pole
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510522578.8A
Other languages
English (en)
Other versions
CN105023014B (zh
Inventor
方挺
韩家明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MAANSHAN AHUT INDUSTRIAL TECHNOLOGY RESEARCH INSTITUTE Co Ltd
Original Assignee
MAANSHAN AHUT INDUSTRIAL TECHNOLOGY RESEARCH INSTITUTE Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MAANSHAN AHUT INDUSTRIAL TECHNOLOGY RESEARCH INSTITUTE Co Ltd filed Critical MAANSHAN AHUT INDUSTRIAL TECHNOLOGY RESEARCH INSTITUTE Co Ltd
Priority to CN201510522578.8A priority Critical patent/CN105023014B/zh
Publication of CN105023014A publication Critical patent/CN105023014A/zh
Application granted granted Critical
Publication of CN105023014B publication Critical patent/CN105023014B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/46Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
    • G06V10/462Salient features, e.g. scale invariant feature transforms [SIFT]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种无人机巡检输电线路图像内的杆塔目标提取方法,属于模式识别与智能计算技术领域。本发明的杆塔目标提取方法,其步骤为:将航拍得到的图像由RGB色彩空间转换到HSI色度饱和度亮度空间,将HSI色度饱和度亮度空间的I分量图像经中值滤波后进行二值化处理得到电力杆塔轮廓的二值图像;采用改进的Susan角点检测方法对电力杆塔轮廓二值图像进行角点检测,并在电力杆塔轮廓二值图像中标记出所有角点的位置;基于不变矩的质心检测算法检测出角点序列的质心,并以此为中心,标注出电力杆塔在原图中的位置。通过使用本发明中的技术方案,可以对电力杆塔进行实时精确提取,且为杆塔上绝缘子、金具等电力部件的故障诊断提供了保证。

Description

一种无人机巡检输电线路图像内的杆塔目标提取方法
技术领域
本发明属于模式识别与智能计算技术领域,更具体地说,涉及一种无人机巡检输电线路图像内的杆塔目标提取方法。
背景技术
随着我国国民经济持续快速发展和城市建设规模日益扩大,高科技产业、金融、医疗卫生等行业快速密集发展,对电力能源的需求日益增强,而经济发展不仅使城乡电网负荷快速增长,也对供电的可靠性和供电质量提出了更高的要求。因此,电力公司需要对电力线路设备尤其是电力线和电力杆塔进行定期巡检,以保证电力传输系统的稳定安全运行和社会生产生活的正常进行。我国的电力线路走廊,经常需要穿越各种复杂的地理环境,频繁经过湖泊水库以及崇山峻岭等,因此,输电线路具有覆盖范围大、分布区域广、传输距离长、地理条件复杂多变及受环境气候影响显著等特点,从而给线路的日常运行、维护和检修带来极大挑战。
我国输电线路的巡视一般采用人工巡视方式,这种方法虽简单,但效率较低,周期较长,且需要配备大量光学设备和素质高、经验丰富的巡线人员,对人力、财力的要求较高。且当杆塔较高、周围地理环境较复杂时,人工巡线就更加困难,容易遗漏故障,造成巡线不彻底,从而使得人工巡线方式逐渐难以满足高压电网的运行维护要求。
从上世纪九十年代开始,欧美一些发达国家就已经尝试将无人机应用于输电线路抢修等工作。直升机巡检输电线路技术,具有安全快捷、受地域限制小、能快速发现故障等优点。我国从上世纪后期开始尝试直升机巡线作业,近几年来,我国加大了对无人机巡线技术的研发投入,2012年山东电力在全国率先实现了将无人机巡线纳入线路巡检常态化应用。2013年,由国家电网青海省电力公司检修公司承担的“高海拔地区输电线路无人巡检技术的应用研究”顺利通过国家电网公司的验收,并通过了青海省科技厅的鉴定。
电力杆塔是输电线路中的重要组成部分,其按作用可以分为:直线杆塔、跨越杆塔、耐张杆塔、转角杆塔、T接杆塔、终端杆塔、换位杆塔七种。杆塔是架空电力线路最主要的设备之一,用来支持导线、避雷线和各类连接金具,图像中杆塔区域的确定对于直升机巡检有着深远的意义。通过检测图像中的杆塔区域,可以给出检测各类部件的小范围区域,同时,每具杆塔在电力部门都备用详细的基建资料可供查询,其中包括其地理信息、各类线路部件安装数目和位置信息等等,依据这些信息我们可以更加准确地提取图像中各类部件包括绝缘子、电力线、引流线、地线、防震锤、间隔棒、悬垂线夹等的具体位置及其数量,并且进一步实现各类部件常见故障的智能诊断。
目前国内外关于电力杆塔图像识别方法的研究均较少,且由于电力杆塔的图像背景较为复杂,现有检测方法的适应性不强,对电力杆塔的识别精度相对较低,从而不能对电力杆塔中各部件的常见故障进行有效诊断。如,中国专利申请号为CN201210250850.8的专利公开了一种电力杆塔轮廓的快速图像识别方法,该申请案是基于改进的Harris角点检测方法,来实现对已知区域形状的轮廓图像中电力塔杆像素的检测,但由于航拍图像噪声大,harris角点检测对噪声较为敏感,不利于角点量的提取,且其对于图像几何尺度变化不具有不变性,即当图像的几何尺度发生变化时,Harris角点检测的性能则下降,从而导致对电力杆塔的识别精度降低。此外,角点检测的速度关系到后续工作的效率,而harris角点算法运行时间较长,不利于航拍图像的实时处理,使得图像的边缘变的模糊,易造成人眼视觉上的失真。
发明内容
1.发明要解决的技术问题
本发明的目的在于克服采用现有电力杆塔图像识别方法不能对输电线路中的电力杆塔图像进行有效提取,提取精度较低,且运行时间较长,导致不能对电力杆塔图像进行实时提取的不足,提供了一种无人机巡检输电线路图像内的杆塔目标提取方法。通过使用本发明中输电线路图像内的杆塔目标提取方法,可以对输电线路中的电力杆塔进行精确提取,且运行时间较短,能够实现对图像的实时处理,同时也为杆塔上绝缘子、金具等电力部件的故障诊断提供了预研基础。
2.技术方案
为达到上述目的,本发明提供的技术方案为:
本发明的一种无人机巡检输电线路图像内的杆塔目标提取方法,其步骤为:
步骤一、将航拍得到的图像由RGB色彩空间转换到HSI色度饱和度亮度空间,提取HSI色度饱和度亮度空间的I分量图像,并将该I分量图像经中值滤波后进行二值化处理得到电力杆塔轮廓的二值图像;
步骤二、基于Susan角点检测方法,结合电力杆塔在航拍图像中表现为可视的中轴对称多边形且呈角点密集分布的特征,采用经过改进的Susan角点检测方法对电力杆塔轮廓的二值图像进行角点检测,并在电力杆塔轮廓的二值图像中标记出所有角点的位置;
步骤三、采用基于不变矩的质心检测算法检测出上述角点序列的质心,并以此为中心,标注出电力杆塔在原图中的位置。
更进一步地,步骤一中将拍摄的图像由RGB色彩空间转换到HSI色度饱和度亮度空间的转换方程为:
H = θ B ≤ G 360 - θ B > G S = 1 - 3 * min ( R , G , B ) R + G + B I = R + G + B 3 - - - ( 1 ) ,
式(1)中,H、S、I分别为HSI色度饱和度亮度空间的色调分量、色饱和度分量和亮度分量, θ = cos - 1 { [ ( R - G ) + ( R - B ) ] / 2 ( R - G ) 2 + ( R - B ) ( G - B ) } .
更进一步地,步骤一中对提取的亮度I分量图像进行中值滤波时,选用3*3中值滤波模板遍历亮度I分量图像中的各像素点,对任一像素点,取以该像素点为中心3*3邻域内的亮度平均值重新给该像素点赋值,即实现了对亮度I分量图像的中值滤波。
更进一步地,步骤一中采用最大类间方差法对亮度I分量图像进行二值化处理,其具体步骤为:遍历亮度I分量图像中每个像素点的亮度值,取出各像素点的亮度值,假设亮度I分量图像中各像素点的亮度取值范围为0~m-1,此处m-1为亮度I分量图像中像素点的最大亮度,上述亮度范围内的亮度均值为μ,亮度为i的图像出现的概率为pi,给定亮度阈值T,该亮度阈值T将图像中的杆塔目标与背景分离为G0={0~T-1}和G1={T~m-1}两个亮度区间,且G0出现的概率为w0,G1出现的概率为w1,则G0和G1区间内的平均亮度μ0、μ1以及这两个区间的类间方差δ2(T)分别为:
{ μ 0 = Σ i = 0 T - 1 ip i w 0 = μ ( T ) w ( T ) , μ 1 = μ - μ ( T ) 1 - w ( T ) δ 2 ( T ) = w 0 ( μ 0 - μ ) 2 + w 1 ( μ 1 - μ ) 2 - - - ( 2 ) ,
上式中,且w0+w1=1,w0μ0+w1μ1=μ;
随着亮度阈值T在0~m-1亮度范围内逐步递增,使亮度阈值T取到0~m-1范围内的所有数值,求解出最大类间方差maxδ2(T),此时对应的T值即为亮度最佳分割阈值,将亮度值小于该T值的像素点的亮度值设为0,大于该T值的像素点的亮度值设为1,即得到电力杆塔轮廓的二值图像。
更进一步地,采用经过改进的Susan角点检测方法对电力杆塔轮廓的二值图像进行角点检测的具体步骤为:
步骤a、使用一个圆形窗口模版作为Susan角点检测的模板,该圆形模板的半径r=37个像素,且该圆形模板的中心为模板的核;
步骤b、使上述圆形模板在电力杆塔轮廓的二值图像上进行移动,对电力杆塔轮廓的二值图像上的每个像素点进行逐一检测,使待检测点处于圆形模板的核,给定阈值g,并将圆形模板内其他所有像素点的亮度值分别与待检测点的亮度值按照式(3)进行运算:
f ( r 1 → ( u , v ) , r 0 → ( x , y ) ) = e - ( I ( r 1 → ( u , v ) ) - I ( r 0 → ( x , y ) ) g ) 6
上述运算式中,为模板中心像素点,即待检测点的坐标,为模板内除其中心点以外的其他像素点的坐标,I(u,v)和I(x,y)分别为点的亮度值,阈值g的初始值取10,为待检测点的吸收核同值区;
步骤c、电力杆塔轮廓的二值图像上所有像素点的角点量按照式(4)进行计算:
R ( r 0 &RightArrow; ) = &lambda; - U S A N ( r 0 &RightArrow; ) i f ( U S A N ( r 0 &RightArrow; ) < &lambda; ) 0 i f ( U S A N ( r 0 &RightArrow; ) &GreaterEqual; &lambda; ) - - - ( 4 ) ,
上式中,角点响应函数阈值λ取USANMAX/2,USANMAX为电力杆塔轮廓的二值图像上所有像素点的吸收核同值区的最大值;
步骤d、将得到的电力杆塔轮廓的二值图像上所有像素点的角点量及角点坐标存储在与拍摄的原图像等长宽的M*N矩阵A中,使用10*10的模版遍历矩阵A中的每一个像素点的角点量值并进行局部极大值抑制,经过抑制后剩下的像素点即为杆塔轮廓连接处的角点,将矩阵A中所有像素点的角点量值按照以下运算重新赋值:
将所有像素点重新赋值后的角点量f(x,y)及角点坐标重新存储于M*N矩阵A*中,在电力杆塔轮廓的二值图像中标记出所有角点的位置。
3.有益效果
采用本发明提供的技术方案,与现有技术相比,具有如下显著效果:
(1)本发明的一种无人机巡检输电线路图像内的杆塔目标提取方法,结合输电线路图像的特点,选择合适的颜色空间及相配的空间分割策略,并根据输电线路中电力杆塔的成像特点,经长期的理论分析与实践,选择改进的Susan角点检测方法实现了对电力杆塔轮廓二值图像的角点检测,并采用基于不变矩的质心检测算法检测出上述角点序列的质心,从而标注出电力杆塔在原图中的位置。本发明实现了将电力杆塔从含有大量复杂背景的输电线路图像中识别并提取出来,提取精度较高,且运行速度快,能够进行实时提取,且为杆塔上绝缘子、金具等电力部件故障的精确诊断提供了有效保证。
附图说明
图1是本发明的一种无人机巡检输电线路图像内的杆塔目标提取方法的流程图;
图2是本发明实施例1中实际航拍得到的输电线路原图像;
图3是本发明实施例1中的电力杆塔轮廓的二值图像;
图4是本发明实施例1中将采用改进的Susan角点检测方法所检测出的电力杆塔的角点进行标记后的图像;
图5是本发明实施例1中基于不变矩的质心检测算法检测出角点序列的质心后所提取出的杆塔位置的结果图像。
具体实施方式
为进一步了解本发明的内容,现结合实施例对本发明作详细描述。
实施例1
电力杆塔在航拍图像中的特点表现为:(1)电力杆塔在航拍图像中占用较多的像素,且亮度值较大;(2)电力杆塔在航拍图像中表现为可视的中轴对称多边形;(3)电力杆塔轮廓连接点处表现为角点密集区域。
本实施例的一种无人机巡检输电线路图像内的杆塔目标提取方法,是结合电力杆塔在航拍图像中的以上特点所开发出来的,其流程如图1所示,其具体步骤为:
步骤一、电力杆塔在航拍图像中占用较多的像素,且杆塔整体亮度值相对于背景较大,因此,将拍摄的图像由RGB色彩空间转换到HSI色度饱和度亮度空间,提取HSI色度饱和度亮度空间的I分量图像,其中,将图像由RGB色彩空间转换到HSI色度饱和度亮度空间的转换方程为:
H = &theta; B &le; G 360 - &theta; B > G S = 1 - 3 * min ( R , G , B ) R + G + B I = R + G + B 3 - - - ( 1 ) ,
上式中,R、G、B分别为RGB色彩空间的三个分量,H、S、I分别为HSI色度饱和度亮度空间的色调分量、色饱和度分量和亮度分量,
对提取的亮度I分量图像进行中值滤波,具体操作为:选用3*3中值滤波模板遍历亮度I分量图像中的各像素点,对任一像素点,取以该像素点为中心3*3邻域内的亮度平均值重新给该像素点赋值,即实现了对亮度I分量图像的中值滤波。在图像传输过程中外部干扰和系统内部干扰会给图像带来很多的随机噪声干扰,对图像进行中值滤波后可以很好地消除分布在图像上的各类随机噪声,而又不影响人眼对图像的感觉。
将上述中值滤波后的亮度I分量图像采用最大类间方差法进行二值化处理,得到电力杆塔轮廓的二值图像,其具体步骤为:遍历亮度I分量图像中每个像素点的亮度值,取出各像素点的亮度值,假设亮度I分量图像中各像素点的亮度取值范围为0~m-1,此处m-1为亮度I分量图像中像素点的最大亮度,上述亮度范围内的亮度均值为μ,亮度为i的图像出现的概率为pi,给定亮度阈值T,该亮度阈值T将图像中的杆塔目标与背景分离为G0={0~T-1}和G1={T~m-1}两个亮度区间,且G0出现的概率为w0,G1出现的概率为w1,则G0和G1区间内的平均亮度μ0、μ1以及这两个区间的类间方差δ2(T)分别为:
{ &mu; 0 = &Sigma; i = 0 T - 1 ip i w 0 = &mu; ( T ) w ( T ) , &mu; 1 = &mu; - &mu; ( T ) 1 - w ( T ) &delta; 2 ( T ) = w 0 ( &mu; 0 - &mu; ) 2 + w 1 ( &mu; 1 - &mu; ) 2 - - - ( 2 ) ,
上式中,且w0+w1=1,w0μ0+w1μ1=μ。
随着亮度阈值T在0~m-1亮度范围内逐步递增,使亮度阈值T取到0~m-1范围内的所有数值,求解出最大类间方差maxδ2(T),此时对应的T值即为亮度最佳分割阈值,将亮度值小于该T值的像素点的亮度值设为0,大于该T值的像素点的亮度值设为1,即得到电力杆塔轮廓的二值图像,如图2和图3所示分别为本实施例中实际航拍得到的输电线路的原图像和电力杆塔轮廓的二值图像。
值得说明的是,特征提取、目标识别在一定程度上均依赖于图像分割质量的好坏,图像分割的质量决定了图像分析的最终效果。尽管针对图像分割已提出了许多算法,但由于图像本身的特殊性和复杂性以及背景的差异性,针对具体的应用领域有不同的需求,因此,不同应用领域对图像分割算法的要求也就有所不同。而本实施例中的最大类间方差法是根据输电线路及电力杆塔的成像特点,经过大量的对比研究所得出的最适于电力杆塔识别与提取的图像分割算法。
步骤二、基于Susan角点检测方法,结合电力杆塔在航拍图像中表现为可视的中轴对称多边形且呈角点密集分布的特征,采用经过改进的Susan角点检测方法对电力杆塔轮廓的二值图像进行角点检测,并在电力杆塔轮廓的二值图像中标记出所有角点的位置。采用上述改进的Susan角点检测方法对电力杆塔轮廓的二值图像进行角点检测的具体步骤为:
步骤a、使用一个圆形窗口模版作为Susan角点检测的模板,该圆形模板的半径r=37个像素,且该圆形模板的中心为模板的核。
步骤b、使上述圆形模板在电力杆塔轮廓的二值图像上进行移动,对电力杆塔轮廓的二值图像上的每个像素点进行逐一检测,使待检测点处于圆形模板的核,给定阈值g,并将圆形模板内其他所有像素点的亮度值分别与待检测点(模板中心像素点)的亮度值按照式(3)进行运算:
f ( r &RightArrow; 1 ( u , v ) , r &RightArrow; 0 ( x , y ) ) = e - ( I ( r &RightArrow; 1 ( u , v ) ) - I ( r &RightArrow; 0 ( x , y ) ) g ) 6
上述运算式中,为模板中心像素点,即待检测点的坐标,为模板内除其中心点以外的其他像素点的坐标,I(u,v)和I(x,y)分别为点的亮度值,阈值g的初始值取10,以保证算法正常启动不会陷入死循环。为待检测点的吸收核同值区。
步骤c、电力杆塔轮廓的二值图像上所有像素点的角点量按照式(4)进行计算:
R ( r 0 &RightArrow; ) = &lambda; - U S A N ( r 0 &RightArrow; ) i f ( U S A N ( r 0 &RightArrow; ) < &lambda; ) 0 i f ( U S A N ( r 0 &RightArrow; ) &GreaterEqual; &lambda; ) - - - ( 4 ) ,
上式中,角点响应函数阈值λ取USANMAX/2,USANMAX为电力杆塔轮廓的二值图像上所有像素点的吸收核同值区的最大值。
步骤d、将得到的电力杆塔轮廓的二值图像上所有像素点的角点量及角点坐标存储在与拍摄的原图像等长宽的M*N矩阵A中,使用10*10的模版遍历矩阵A中的每一个角点量值并进行局部极大值抑制,经过抑制后剩下的像素点即为杆塔轮廓连接处的角点,将矩阵A中所有像素点的角点量值按照以下运算重新赋值:
将所有像素点重新赋值后的角点量f(x,y)及角点坐标另外存储于M*N矩阵A*中,在电力杆塔轮廓的二值图像中标记出所有角点的位置,如图4所示。
步骤三、针对电力杆塔在图像中表现为角点密集区域,采用基于不变矩(几何矩)的质心检测算法检测出电力杆塔轮廓的二值图像中角点序列的质心,并以此为中心,标注出电力杆塔在原图中的位置。本实施例中几何矩mpq(p、q=0.1.2.3....)定义为:
m p q = &Sigma; y = 1 M &Sigma; x = 1 N x p y q f ( x , y ) - - - ( 6 ) ,
其中,第0阶矩为:
m 00 = &Sigma; y = 1 M &Sigma; x = 1 N f ( x , y ) ,
第1阶矩为:
m 10 = &Sigma; y = 1 M &Sigma; x = 1 N x f ( x , y ) ,
m 01 = &Sigma; y = 1 M &Sigma; x = 1 N y f ( x , y ) ,
质心的坐标Centroid为:Centroid(xc,yc)。
其中记录y轴正负方向y绝对值最大的角点与质心的距离作为矩形框的长,再记录x轴正负方向x绝对值最大的角点与质心的距离作为矩形框的宽。依据杆塔角点集的质心位置以及上述矩形框的长和宽,即可在电力杆塔轮廓的二值图像中标记出电力杆塔的位置,如图5所示。本实施例中采用经过改进的Susan角点检测方法对电力杆塔轮廓的二值图像进行角点检测,并通过采用基于不变矩的质心检测算法检测出电力杆塔轮廓的二值图像中角点序列的质心,从而可以将电力杆塔从背景复杂的输电线路图像中提取出来,提取精度较高,可以使图像中的背景对电力杆塔轮廓提取的干扰降到最低,从而为电力杆塔中绝缘子等部件的故障检测提供了基础。
本发明的一种无人机巡检输电线路图像内的杆塔目标提取方法是基于Qt平台开发的,可以直接提供给电力部门使用及二次开发,算法处理时间平均大约50ms,处理速度较快,可移植到视频实时处理系统中。

Claims (5)

1.一种无人机巡检输电线路图像内的杆塔目标提取方法,其特征在于:其步骤为:
步骤一、将航拍得到的图像由RGB色彩空间转换到HSI色度饱和度亮度空间,提取HSI色度饱和度亮度空间的I分量图像,并将该I分量图像经中值滤波后进行二值化处理得到电力杆塔轮廓的二值图像;
步骤二、基于Susan角点检测方法,结合电力杆塔在航拍图像中表现为可视的中轴对称多边形且呈角点密集分布的特征,采用经过改进的Susan角点检测方法对电力杆塔轮廓的二值图像进行角点检测,并在电力杆塔轮廓的二值图像中标记出所有角点的位置;
步骤三、采用基于不变矩的质心检测算法检测出上述角点序列的质心,并以此为中心,标注出电力杆塔在原图中的位置。
2.根据权利要求1所述的一种无人机巡检输电线路图像内的杆塔目标提取方法,其特征在于:步骤一中将拍摄的图像由RGB色彩空间转换到HSI色度饱和度亮度空间的转换方程为:
H = &theta; B &le; G 360 - &theta; B > G S = 1 - 3 * min ( R , G , B ) R + G + B I = R + G + B 3 - - - ( 1 ) ,
式(1)中,H、S、I分别为HSI色度饱和度亮度空间的色调分量、色饱和度分量和亮度分量, &theta; = cos - 1 { &lsqb; ( R - G ) + ( R - B ) &rsqb; / 2 ( R - G ) 2 + ( R - B ) ( G - B ) } .
3.根据权利要求2所述的一种无人机巡检输电线路图像内的杆塔目标提取方法,其特征在于:步骤一中对提取的亮度I分量图像进行中值滤波时,选用3*3中值滤波模板遍历亮度I分量图像中的各像素点,对任一像素点,取以该像素点为中心3*3邻域内的亮度平均值重新给该像素点赋值,即实现了对亮度I分量图像的中值滤波。
4.根据权利要求3所述的一种无人机巡检输电线路图像内的杆塔目标提取方法,其特征在于:步骤一中采用最大类间方差法对亮度I分量图像进行二值化处理,其具体步骤为:遍历亮度I分量图像中每个像素点的亮度值,取出各像素点的亮度值,假设亮度I分量图像中各像素点的亮度取值范围为0~m-1,此处m-1为亮度I分量图像中像素点的最大亮度,上述亮度范围内的亮度均值为μ,亮度为i的图像出现的概率为pi,给定亮度阈值T,该亮度阈值T将图像中的杆塔目标与背景分离为G0={0~T-1}和G1={T~m-1}两个亮度区间,且G0出现的概率为w0,G1出现的概率为w1,则G0和G1区间内的平均亮度μ0、μ1以及这两个区间的类间方差δ2(T)分别为:
&mu; 0 = &Sigma; i = 0 T - 1 ip i w 0 = &mu; ( T ) w ( T ) , &mu; 1 = &mu; - &mu; ( T ) 1 - w ( T ) &delta; 2 ( T ) = w 0 ( &mu; 0 - &mu; ) 2 + w 1 ( &mu; 1 - &mu; ) 2 - - - ( 2 ) ,
上式中,且w0+w1=1,w0μ0+w1μ1=μ;
随着亮度阈值T在0~m-1亮度范围内逐步递增,使亮度阈值T取到0~m-1范围内的所有数值,求解出最大类间方差maxδ2(T),此时对应的T值即为亮度最佳分割阈值,将亮度值小于该T值的像素点的亮度值设为0,大于该T值的像素点的亮度值设为1,即得到电力杆塔轮廓的二值图像。
5.根据权利要求4所述的一种无人机巡检输电线路图像内的杆塔目标提取方法,其特征在于:采用经过改进的Susan角点检测方法对电力杆塔轮廓的二值图像进行角点检测的具体步骤为:
步骤a、使用一个圆形窗口模版作为Susan角点检测的模板,该圆形模板的半径r=37个像素,且该圆形模板的中心为模板的核;
步骤b、使上述圆形模板在电力杆塔轮廓的二值图像上进行移动,对电力杆塔轮廓的二值图像上的每个像素点进行逐一检测,使待检测点处于圆形模板的核,给定阈值g,并将圆形模板内其他所有像素点的亮度值分别与待检测点的亮度值按照式(3)进行运算:
上述运算式中,为模板中心像素点,即待检测点的坐标,为模板内除其中心点以外的其他像素点的坐标,I(u,v)和I(x,y)分别为点的亮度值,阈值g的初始值取10,为待检测点的吸收核同值区;
步骤c、电力杆塔轮廓的二值图像上所有像素点的角点量按照式(4)进行计算:
R ( r 0 &RightArrow; ) = &lambda; - U S A N ( r 0 &RightArrow; ) i f ( U S A N ( r 0 &RightArrow; ) < &lambda; ) 0 i f ( U S A N ( r 0 &RightArrow; ) &GreaterEqual; &lambda; ) - - - ( 4 ) ,
上式中,角点响应函数阈值λ取USANMAX/2,USANMAX为电力杆塔轮廓的二值图像上所有像素点的吸收核同值区的最大值;
步骤d、将得到的电力杆塔轮廓的二值图像上所有像素点的角点量及角点坐标存储在与拍摄的原图像等长宽的M*N矩阵A中,使用10*10的模版遍历矩阵A中的每一个角点量值并进行局部极大值抑制,经过抑制后剩下的像素点即为杆塔轮廓连接处的角点,将矩阵A中所有像素点的角点量值按照以下运算重新赋值:
将所有像素点重新赋值后的角点量f(x,y)及角点坐标另外存储于M*N矩阵A*中,在电力杆塔轮廓的二值图像中标记出所有角点的位置。
CN201510522578.8A 2015-08-21 2015-08-21 一种无人机巡检输电线路图像内的杆塔目标提取方法 Active CN105023014B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510522578.8A CN105023014B (zh) 2015-08-21 2015-08-21 一种无人机巡检输电线路图像内的杆塔目标提取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510522578.8A CN105023014B (zh) 2015-08-21 2015-08-21 一种无人机巡检输电线路图像内的杆塔目标提取方法

Publications (2)

Publication Number Publication Date
CN105023014A true CN105023014A (zh) 2015-11-04
CN105023014B CN105023014B (zh) 2018-11-23

Family

ID=54412969

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510522578.8A Active CN105023014B (zh) 2015-08-21 2015-08-21 一种无人机巡检输电线路图像内的杆塔目标提取方法

Country Status (1)

Country Link
CN (1) CN105023014B (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105426824A (zh) * 2015-11-06 2016-03-23 天津航天中为数据系统科技有限公司 基于航拍图像的隐患目标分析方法及系统
CN105551032A (zh) * 2015-12-09 2016-05-04 国网山东省电力公司电力科学研究院 一种基于视觉伺服的杆塔图像采集系统及其方法
CN106295655A (zh) * 2016-08-03 2017-01-04 国网山东省电力公司电力科学研究院 一种用于无人机巡检图像的输电线路部件自动提取方法
CN107564056A (zh) * 2017-07-26 2018-01-09 西南交通大学 一种接触网支撑装置三维点云数据最优数据帧选取方法
CN107818303A (zh) * 2017-10-23 2018-03-20 中石化石油工程地球物理有限公司 无人机油气管线影像自动对比分析方法、系统及软件存储器
WO2018195955A1 (zh) * 2017-04-28 2018-11-01 深圳市大疆创新科技有限公司 一种基于飞行器的设施检测方法及控制设备
CN109299720A (zh) * 2018-07-13 2019-02-01 沈阳理工大学 一种基于轮廓片段空间关系的目标识别方法
CN110275455A (zh) * 2018-03-14 2019-09-24 佛山市顺德区美的电热电器制造有限公司 一种基于脑电信号的控制方法、中央控制设备、云服务器及系统
CN110570412A (zh) * 2019-09-06 2019-12-13 西安交通大学 一种零件误差视觉判断系统
CN110674763A (zh) * 2019-09-27 2020-01-10 国网四川省电力公司电力科学研究院 一种基于对称检验的输电通道杆塔图像识别方法及系统
CN111008983A (zh) * 2019-12-06 2020-04-14 国网湖南省电力有限公司 一种可用于输电线路树高监测装置的树冠多阈值分割方法及系统
CN111368854A (zh) * 2020-03-03 2020-07-03 东南数字经济发展研究院 一种批量提取航拍图像中颜色单一的同类目标轮廓的方法
CN111984034A (zh) * 2020-08-24 2020-11-24 广东电网有限责任公司 一种无人机电力巡线系统
CN112162565A (zh) * 2020-08-21 2021-01-01 云南电网有限责任公司昆明供电局 一种基于多机协同作业的不间断自主杆塔巡检方法
CN112327930A (zh) * 2020-11-27 2021-02-05 广东电网有限责任公司肇庆供电局 一种巡检路径确定方法和装置
CN115953486A (zh) * 2022-12-30 2023-04-11 国网电力空间技术有限公司 一种直流t型直线塔部件巡检图像自动编码方法
CN116758529A (zh) * 2023-08-21 2023-09-15 广东电网有限责任公司广州供电局 线路识别方法、装置和计算机设备
CN118052878A (zh) * 2024-02-23 2024-05-17 云南民族大学 一种无人机电力自动巡检中相对于杆塔位置的单目视觉估计方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110102852A1 (en) * 2009-10-30 2011-05-05 Xerox Corporation Susan-based corner sharpening
CN102393961A (zh) * 2011-06-29 2012-03-28 山东电力研究院 基于计算机视觉的飞行器输电线路实时检测跟踪方法
CN102831393A (zh) * 2012-07-19 2012-12-19 安徽工业大学 电力杆塔轮廓的快速图像识别方法
CN103218787A (zh) * 2013-04-23 2013-07-24 国家测绘地理信息局卫星测绘应用中心 多源异构遥感影像控制点自动采集方法
CN103268481A (zh) * 2013-05-29 2013-08-28 焦点科技股份有限公司 一种复杂背景图像中的文本提取方法
CN104483326A (zh) * 2014-12-19 2015-04-01 长春工程学院 基于深度信念网络的高压线绝缘子缺陷检测方法及系统
CN104601956A (zh) * 2015-01-15 2015-05-06 西安工程大学 基于固定翼无人机的输电线路在线监测系统及监测方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110102852A1 (en) * 2009-10-30 2011-05-05 Xerox Corporation Susan-based corner sharpening
CN102393961A (zh) * 2011-06-29 2012-03-28 山东电力研究院 基于计算机视觉的飞行器输电线路实时检测跟踪方法
CN102831393A (zh) * 2012-07-19 2012-12-19 安徽工业大学 电力杆塔轮廓的快速图像识别方法
CN103218787A (zh) * 2013-04-23 2013-07-24 国家测绘地理信息局卫星测绘应用中心 多源异构遥感影像控制点自动采集方法
CN103268481A (zh) * 2013-05-29 2013-08-28 焦点科技股份有限公司 一种复杂背景图像中的文本提取方法
CN104483326A (zh) * 2014-12-19 2015-04-01 长春工程学院 基于深度信念网络的高压线绝缘子缺陷检测方法及系统
CN104601956A (zh) * 2015-01-15 2015-05-06 西安工程大学 基于固定翼无人机的输电线路在线监测系统及监测方法

Cited By (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105426824A (zh) * 2015-11-06 2016-03-23 天津航天中为数据系统科技有限公司 基于航拍图像的隐患目标分析方法及系统
CN105426824B (zh) * 2015-11-06 2017-10-10 天津航天中为数据系统科技有限公司 基于航拍图像的隐患目标分析方法及系统
CN105551032B (zh) * 2015-12-09 2018-01-19 国网山东省电力公司电力科学研究院 一种基于视觉伺服的杆塔图像采集系统及其方法
CN105551032A (zh) * 2015-12-09 2016-05-04 国网山东省电力公司电力科学研究院 一种基于视觉伺服的杆塔图像采集系统及其方法
CN106295655B (zh) * 2016-08-03 2019-07-12 国网山东省电力公司电力科学研究院 一种用于无人机巡检图像的输电线路部件自动提取方法
CN106295655A (zh) * 2016-08-03 2017-01-04 国网山东省电力公司电力科学研究院 一种用于无人机巡检图像的输电线路部件自动提取方法
WO2018195955A1 (zh) * 2017-04-28 2018-11-01 深圳市大疆创新科技有限公司 一种基于飞行器的设施检测方法及控制设备
CN107564056A (zh) * 2017-07-26 2018-01-09 西南交通大学 一种接触网支撑装置三维点云数据最优数据帧选取方法
CN107564056B (zh) * 2017-07-26 2020-12-18 西南交通大学 一种接触网支撑装置三维点云数据最优数据帧选取方法
CN107818303A (zh) * 2017-10-23 2018-03-20 中石化石油工程地球物理有限公司 无人机油气管线影像自动对比分析方法、系统及软件存储器
CN107818303B (zh) * 2017-10-23 2021-06-15 中石化石油工程地球物理有限公司 无人机油气管线影像自动对比分析方法、系统及软件存储器
CN110275455B (zh) * 2018-03-14 2021-05-25 佛山市顺德区美的电热电器制造有限公司 一种基于脑电信号的控制方法、中央控制设备、云服务器及系统
CN110275455A (zh) * 2018-03-14 2019-09-24 佛山市顺德区美的电热电器制造有限公司 一种基于脑电信号的控制方法、中央控制设备、云服务器及系统
CN109299720A (zh) * 2018-07-13 2019-02-01 沈阳理工大学 一种基于轮廓片段空间关系的目标识别方法
CN109299720B (zh) * 2018-07-13 2022-02-22 沈阳理工大学 一种基于轮廓片段空间关系的目标识别方法
CN110570412B (zh) * 2019-09-06 2022-03-22 西安交通大学 一种零件误差视觉判断系统
CN110570412A (zh) * 2019-09-06 2019-12-13 西安交通大学 一种零件误差视觉判断系统
CN110674763B (zh) * 2019-09-27 2022-02-11 国网四川省电力公司电力科学研究院 一种基于对称检验的输电通道杆塔图像识别方法及系统
CN110674763A (zh) * 2019-09-27 2020-01-10 国网四川省电力公司电力科学研究院 一种基于对称检验的输电通道杆塔图像识别方法及系统
CN111008983A (zh) * 2019-12-06 2020-04-14 国网湖南省电力有限公司 一种可用于输电线路树高监测装置的树冠多阈值分割方法及系统
CN111368854A (zh) * 2020-03-03 2020-07-03 东南数字经济发展研究院 一种批量提取航拍图像中颜色单一的同类目标轮廓的方法
CN112162565A (zh) * 2020-08-21 2021-01-01 云南电网有限责任公司昆明供电局 一种基于多机协同作业的不间断自主杆塔巡检方法
CN111984034A (zh) * 2020-08-24 2020-11-24 广东电网有限责任公司 一种无人机电力巡线系统
CN112327930A (zh) * 2020-11-27 2021-02-05 广东电网有限责任公司肇庆供电局 一种巡检路径确定方法和装置
CN115953486A (zh) * 2022-12-30 2023-04-11 国网电力空间技术有限公司 一种直流t型直线塔部件巡检图像自动编码方法
CN115953486B (zh) * 2022-12-30 2024-04-12 国网电力空间技术有限公司 一种直流t型直线塔部件巡检图像自动编码方法
CN116758529A (zh) * 2023-08-21 2023-09-15 广东电网有限责任公司广州供电局 线路识别方法、装置和计算机设备
CN116758529B (zh) * 2023-08-21 2023-11-14 广东电网有限责任公司广州供电局 线路识别方法、装置和计算机设备
CN118052878A (zh) * 2024-02-23 2024-05-17 云南民族大学 一种无人机电力自动巡检中相对于杆塔位置的单目视觉估计方法
CN118052878B (zh) * 2024-02-23 2024-08-16 云南民族大学 一种无人机电力自动巡检中相对于杆塔位置的单目视觉估计方法

Also Published As

Publication number Publication date
CN105023014B (zh) 2018-11-23

Similar Documents

Publication Publication Date Title
CN105023014A (zh) 一种无人机巡检输电线路图像内的杆塔目标提取方法
CN111428748B (zh) 一种基于hog特征和svm的红外图像绝缘子识别检测方法
CN107341470B (zh) 一种基于航拍图像的输电线检测方法
CN101620676A (zh) 绝缘子轮廓的快速图像识别方法
CN108022235A (zh) 高压输电铁塔关键部件缺陷识别方法
CN109300118B (zh) 一种基于rgb图像的高压电力线路无人机巡检方法
CN105160669A (zh) 一种无人机巡检输电线路图像中绝缘子缺陷的检测和定位方法
CN103177241B (zh) 利用视频图像处理技术定位输电线路间隔棒的方法
CN107179479A (zh) 基于可见光图像的输电导线散股缺陷检测方法
CN108009551A (zh) 适用于电力作业机器人的电力刀闸分合位状态识别方法
CN109447036A (zh) 一种图像数字分割与识别方法及系统
CN113569956B (zh) 一种基于ai算法的山火灾害勘查识别方法
CN113515655A (zh) 一种基于图像分类的故障识别方法及装置
CN107818563A (zh) 一种输电线路分裂导线间距空间测量与定位方法
CN109523543A (zh) 一种基于边缘距离的导线断股检测方法
CN110390784A (zh) 一种基于深度学习的输电线路防外破监控系统
CN116245871A (zh) 基于改进yolox算法的输电线路异常目标检测方法
CN113902792A (zh) 基于改进RetinaNet网络的建筑物高度检测方法、系统和电子设备
CN104573650B (zh) 一种基于滤波响应的电线检测分类方法
CN114723959A (zh) 一种基于颜色边缘深度感知的火灾检测方法及系统
CN114581307A (zh) 用于目标追踪识别的多图像拼接方法、系统、设备及介质
CN109145905A (zh) 一种基于视觉显著性的输电线路配件检测方法
CN112651337A (zh) 应用于训练线路异物目标检测模型的样本集构建方法
Hao et al. Based on Surf feature extraction and insulator damage identification for capsule networks
CN114821444A (zh) 一种基于视觉感知的无人天车作业区域安全检测方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CP02 Change in the address of a patent holder
CP02 Change in the address of a patent holder

Address after: 243000 R & D Building 1, north side of Beijing Avenue, Ma'anshan demonstration park, Anhui Province

Patentee after: MAANSHAN AHUT INDUSTRIAL TECHNOLOGY RESEARCH INSTITUTE Co.,Ltd.

Address before: 243071 No. 578 Taibai Road, Ma'anshan economic and Technological Development Zone, Anhui

Patentee before: MAANSHAN AHUT INDUSTRIAL TECHNOLOGY RESEARCH INSTITUTE Co.,Ltd.