CN110276787B - 基于标志物图像检测的导线舞动监测方法 - Google Patents

基于标志物图像检测的导线舞动监测方法 Download PDF

Info

Publication number
CN110276787B
CN110276787B CN201910569675.0A CN201910569675A CN110276787B CN 110276787 B CN110276787 B CN 110276787B CN 201910569675 A CN201910569675 A CN 201910569675A CN 110276787 B CN110276787 B CN 110276787B
Authority
CN
China
Prior art keywords
image
marker
connected domain
value
minimum
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910569675.0A
Other languages
English (en)
Other versions
CN110276787A (zh
Inventor
夏娜
杨帆
张轮
于洋
吴振昊
周洋
洪韵晴
吴成
江惠鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Anhui Kampers Navigation Information Technology Co ltd
Intelligent Manufacturing Institute of Hefei University Technology
Original Assignee
Anhui Kampers Navigation Information Technology Co ltd
Intelligent Manufacturing Institute of Hefei University Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Anhui Kampers Navigation Information Technology Co ltd, Intelligent Manufacturing Institute of Hefei University Technology filed Critical Anhui Kampers Navigation Information Technology Co ltd
Priority to CN201910569675.0A priority Critical patent/CN110276787B/zh
Publication of CN110276787A publication Critical patent/CN110276787A/zh
Application granted granted Critical
Publication of CN110276787B publication Critical patent/CN110276787B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/77Retouching; Inpainting; Scratch removal
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/20Image enhancement or restoration using local operators
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/73Deblurring; Sharpening
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/13Edge detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/187Segmentation; Edge detection involving region growing; involving region merging; involving connected component labelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/246Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/60Analysis of geometric attributes
    • G06T7/62Analysis of geometric attributes of area, perimeter, diameter or volume
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10048Infrared image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20112Image segmentation details
    • G06T2207/20132Image cropping
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30232Surveillance

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Geometry (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种基于标志物图像检测的导线舞动监测方法,其步骤是将结构规则、轮廓明显、易于识别的标志物安装在输电导线的间隔棒上;然后在电力铁塔上或塔基上架设摄像机,对标志物进行拍摄,通过图像处理算法识别标志物,并计算其中心坐标,从而得到标志物的运动轨迹,达到实时监测导线舞动的效果。

Description

基于标志物图像检测的导线舞动监测方法
技术领域
本发明属于输电线路状态监测技术领域,具体地说是一种基于标志物图像识别的导线舞动监测方法。
背景技术
输电线路导线舞动是指覆冰不均匀的架空导线在大风作用下产生的低频、大幅度自激振动现象。导线舞动是长期以来影响电网输电线路安全的重要因素,它会造成输电线路跳闸、铁塔横担部分螺栓脱落以及铁塔横担、跳线、绝缘子、金具受损等危害,使得电网运行面临严峻考验。
现有的舞动监测方法主要是在导线上安装传感器,实时检测导线的舞动情况,但此类方法会给导线带来额外的负担和安全隐患,且传感器设备的供电也难以解决;基于图像识别的舞动检测方法主要是直接检测导线的边缘,提取图像中的导线,计算舞动幅度,但此类方法在复杂环境下,比如夜间、雾天、雨雪天气中,难以提取出导线边缘,图像识别通常会失效,导致无法检测出导线舞动结果。
发明内容
本发明为解决上述现有技术存在的不足之处,提出一种基于标志物图像检测的导线舞动监测方法,以期能通过在导线间隔棒上安装标志物并进行识别标其中心坐标,从而得到标志物的运动轨迹,以达到实时监测导线舞动的目的,并提高导线舞动识别率和检测精度。
为了达到上述目的,本发明所采用的技术方案为:
本发明一种基于标志物图像检测的导线舞动监测方法的特点在于,包括以下步骤:
步骤1、将标志物安装在输电线路导线的间隔棒上;所述标志物为黑色或黑白相间的几何图案;
步骤2、在电力铁塔上或塔基上架设摄像机用于对标志物进行拍摄,从而获取标志物视频数据;
步骤3、对所述标志物视频数据进行图像处理,识别所述标志物,并计算标志物的中心坐标;
步骤3.1、利用式(1)对所述标志物视频数据中任意一帧图像T的像素点T(x,y)所对应的R、G、B三通道的值{Hc(x,y)|c=r,g,b}进行去雾处理,得到去雾后的像素点T(x,y)所对应的R、G、B三通道的值{Jc(x,y)|c=r,g,b}:
Figure GDA0002803624370000021
式(1)中,A是全球大气光成分,c为变量,且c∈{r,g,b},L(x,y)是像素点T(x,y)处的环境光子参数,并有:
L(x,y)=min{[min(ρ×mav,0.9)×Mave(T)],M(T)} (2)
式(2)中,ρ为调节因子;M(T)为图像T的所有像素点分别所对应的R、G、B三通道的值{Hc(x,y)|c=r,g,b}中最小值的集合,(x,y)∈T;Mave(T)为最小值集合M(T)进行均值滤波后的值;mav为对最小值集合M(T)进行归一化后再取均值后的值;
步骤3.2、根据步骤3.1对所述图像T的中的所有像素点进行去雾处理,从而得到去雾后的图像;将所述去雾后的图像从RGB色度图转化成GRAY灰度图,并对GRAY灰度图进行中值滤波和二值化处理,从而得到处理后的图像T1
步骤3.3、修复图像缺损;
步骤3.3.1、区域增强操作:
定义一个带参考点的正方形或圆形作为模板E,与图像T1进行卷积计算,得到模板E在图像T1中的覆盖区域,从所述覆盖区域中选取最大像素点值,并将最大像素点值赋值给参考点在图像T1上所对应的像素值,从而得到区域增强操作后的图像T2
步骤3.3.2、区域裁剪操作:
将所述模板E与所述区域增强操作后的图像T2进行卷积计算,得到模板E在图像T2中的覆盖区域,选取所述模板E在所述图像T2中的覆盖区域中最小像素点值,并将最小像素点值赋值给参考点在图像T2所对应的像素值,从而得到缺损修复后的图像T3
步骤3.4、提取轮廓形成连通域;
对所述缺损修复后的图像T3进行轮廓点检测,得到k个连通域构成的连通域集合D={D1,D2,…,Di,…,Dk},其中,Di表示第i个连通域;i∈[1,k],k表示连通域的总数;
步骤3.5、基于周长和面积参数对连通域进行筛选;
步骤3.5.1、计算k个连通域的周长{Li|i=1,2,…,k}和面积{Si|i=1,2,…,k};将k个连通域的周长{Li|i=1,2,…,k}中的最小值记为Lmin和最大值记为Lmax,将k个连通域的面积{Si|i=1,2,…,k}中的最小值记为Smin和最大值记为Smax
初始化i=1,令第一轮连通域剔除数量m1=0;
步骤3.5.2、判断Li≥Lmin且Li≤Lmax且Si≥Smin且Si≤Smax是否成立,若成立,则直接执行步骤3.5.3;否则,将第i个连通域Di从连通域集合D中除去,再将m1+1赋给m1后,执行步骤3.5.3;
步骤3.5.3、将i+1赋值给i后,判断i>k是否成立,若成立,则表示得到更新后的连通域集合
Figure GDA0002803624370000031
并执行步骤3.6;其中,D′j表示更新后的连通域集合D′中第j个连通域,j∈[1,k-m1],否则,返回步骤3.5.2;
步骤3.6、利用几何学特征识别标志物;
步骤3.6.1、初始化j=1,令第二轮连通域剔除数量m2=0;
步骤3.6.2、绘制更新后的连通域集合D′中第j个连通域D′j的最小外接矩形,利用第j个连通域D′j及其最小外接矩形的几何学特征来识别标志物;
定义:矩形填充率是连通域的面积与其最小外接矩形面积之比;从而利用式(3)计算更新后的连通域集合D′中第j个连通域D′j的矩形填充率Rj
Figure GDA0002803624370000032
式(3)中,Sarea(j)是第j个连通域D′j的面积,Srectangle(j)是第j个连通域D′j的最小外接矩形的面积;
定义:矩形长宽比是第j个连通域D′j的最小外接矩形的长宽之比,从而利用式(4)计算更新后的连通域集合D′中第j个连通域D′j的矩形长宽比rj
Figure GDA0002803624370000033
式(4)中,Wrectangle(j)表示第j个连通域D′j的最小外接矩形的宽,Lrectangle(j)表示第j个连通域D′j的最小外接矩形的长;
步骤3.6.3、设定区间[R′-Δh,R′+Δh]和[r′-Δl,r′+Δl],其中Δh、Δl均为所设定的阈值,若
Figure GDA0002803624370000041
Figure GDA0002803624370000042
则将第j个连通域D′j从更新后的连通域集合D′中除去,再将m2+1赋给m2后,执行步骤3.6.4;否则,直接执行步骤3.6.4;
步骤3.6.4、将j+1赋值给j后,判断j>k-m1是否成立,若成立,则表示更新后的连通域集合D′中的(k-m1-m2)个连通域为标志物,并执行步骤3.7;否则,返回步骤3.6.2;
步骤3.7、计算标志物的中心;
以图像T的最左上角像素点为原点,与所述原点相邻的两条边分别作为x轴和y轴,从而建立图像坐标系;
将(k-m1-m2)个连通域的最小外接矩形的中心作为标志物的中心,从而得到(k-m1-m2)个中心坐标(x1,y1),(x2,y2),…,(xp,yp),…,
Figure GDA0002803624370000043
其中,(xp,yp)表示第p个标志物的中心坐标;p∈[1,k-m1-m2];
利用式(5)求出所有标志物的中心坐标的平均值作为图像T的标志物中心坐标,记为
Figure GDA0002803624370000044
Figure GDA0002803624370000045
步骤4、计算导线的舞动幅度;
令导线静止状态下标志物的中心坐标为(xini,yini)并作为监测的基准,利用式(6)计算图像T中标志物的位移,并作为导线舞动的幅度len:
Figure GDA0002803624370000046
式(6)中,α为空间映射系数,并有:
Figure GDA0002803624370000047
式(7)中,dtarget为标志物的实际宽度,npixel为标志物的宽度在图像T中所占的像素点个数。
与已有技术相比,本发明的有益效果为:
1、本发明在导线间隔棒上安装结构规则、轮廓明显、易于识别的标志物(例如圆形、三角形、同心圆、同心三角等),通过图像识别方法精确检测标志物的位移,从而得到导线舞动信息,提高了导线舞动监测的自动化和智能化;
2、本发明针对标志物图像的缺损,提出了区域增强和裁剪算法Field-E&C,以修复标志物图像的特征信息,从而提高了识别率;
3、本发明针对图像中的有雾的情况,提出了环境光子弱化滤波的去雾算法EPWFDA,提高了图像画面的质量,并提高了对标志物的识别率,从而保障了导线舞动检测的准确性;
4、本发明采用红外夜视摄像机,可以保证在夜晚或微光环境下对导线舞动的检测效果;
5、与传统的传感器测量方式相比,本发明具有非接触式检测,安装设备少,操作安全,检测精度高的特点。
附图说明
图1为本发明圆形标志物图;
图2为本发明三角形标志物图;
图3为本发明同心圆标志物图;
图4为本发明同心三角标志物图;
图5为本发明方法的流程图。
具体实施方式
本实施例中,如图5所示,一种基于标志物图像检测的导线舞动监测方法包括以下步骤:
步骤1、将标志物安装在输电线路导线的间隔棒上,建议安装在距离导线弧垂点最近的间隔棒上;标志物为黑色或黑白相间的几何图案,多采用结构规则、轮廓明显、易于识别的形态物体,例如如图1所示的圆形、如图2所示的三角形、如图3所示的同心圆、如图4所示的同心三角等;
步骤2、在电力铁塔上或塔基上架设摄像机用于对标志物进行拍摄,从而获取标志物视频数据;
步骤3、对标志物视频数据进行图像处理,识别标志物,并计算标志物的中心坐标;
步骤3.1、针对图像中可能存在雾气或雾霾导致画面质量不高的问题,提出一种环境光子弱化滤波的去雾算法(Environment Photon Weaken Filtering Based DefoggingAlgorithm,EPWFDA),对图像进行去雾处理,提高画面质量;
对图像采用如式(1)所示的雾图形成模型:
Hc(x,y)=Jc(x,y)t(x,y)+A(1-t(x,y)) (1)
式(1)中,Hc(x,y)为标志物视频数据中任意一帧图像T的像素点T(x,y)所对应的R、G、B三通道的值{Hc(x,y)|c=r,g,b},J(x)为去雾后的像素点T(x,y)所对应的R、G、B三通道的值{Jc(x,y)|c=r,g,b},A是全球大气光成分,它是一个可以事先确定的经验值,t(x,y)是大气光在图像T的像素点T(x,y)处的透射率,令L(x,y)=A(1-t(x,y)),它是环境光子参数,当画面上雾气越严重时,透射率t(x,y)越小,L(x,y)值越大;去雾后的图像可用式(2)表示为:
Figure GDA0002803624370000061
利用式(2)对标志物视频数据中任意一帧图像T的像素点T(x,y)所对应的R、G、B三通道的值{Hc(x,y)|c=r,g,b}进行去雾处理,得到去雾后的像素点T(x,y)所对应的R、G、B三通道的值{Jc(x,y)|c=r,g,b};
式(2)中,A是全球大气光成分,c为变量,且c∈{r,g,b},L(x,y)是像素点T(x,y)处的环境光子参数,并有:
L(x,y)=min{[min(ρ×mav,0.9)×Mave(T)],M(T)} (3)
式(3)中,ρ为调节因子;M(T)为图像T的所有像素点分别所对应的R、G、B三通道值{Hc(x,y)|c=r,g,b}中最小值的集合,(x,y)∈T;Mave(T)为对所有像素点对应的最小值集合M(T)进行均值滤波后的值;mav为对最小值集合M(T)进行归一化后再取均值后的值;
可见,L(x,y)的取值是M(x,y)滤波后的值进一步取小的结果。由式(3)可见,本发明采用环境光子弱化滤波的方法计算得到L(x,y),不仅能保证去雾的效果,而且能避免该值过大导致图像去雾后画面偏暗的问题;
步骤3.2、根据步骤3.1对图像T的中的所有像素点进行去雾处理,从而得到去雾后的图像;将去雾后的图像从RGB色度图转化成GRAY灰度图,并对GRAY灰度图进行中值滤波和二值化处理,从而得到处理后的图像;其中,中值滤波消除噪声干扰具体步骤为:
步骤3.2.1、将一个3*3的模板,将模板中心像素点与图像T的任意一个像素重合;
步骤3.2.2、将模板上对应的灰度值从小到大排成一列;
步骤3.2.3、将这些灰度值的中间值赋给模板中心位置对应图像T的像素;
步骤3.2.4、模板依次移向图像T每个像素点,重复步骤3.2.1至步骤3.2.3;
对灰度图进行二值化处理的如式(4)所示:
Figure GDA0002803624370000071
式(4)中,src(x,y)为灰度图的像素点(x,y)的灰度值,取值为0至255;M为二值化的阈值,可通过实验确定合适的取值;dst(x,y)为二值化后像素点(x,y)的灰度值,取值为0或255。由于标志物采用“黑白”的颜色结构,因此标志物在二值化后轮廓分明,形态清晰,而图像中大部分深色背景变为黑色,凸显了标志物的形态;
步骤3.3、修复图像缺损;
针对二值化后图像中标志物可能出现缺损、断裂的情况,提出一种区域增强和裁剪算法(Field Enhance and Cut,Field-E&C)来修复标志物的形态,具体步骤如下:
步骤3.3.1、区域增强操作:
定义一个带参考点的正方形或圆形作为模板E,与图像T1进行卷积计算,依次得到模板E在图像T1中的覆盖区域,从所述覆盖区域中选取最大像素点值,并将最大像素点值赋值给参考点在图像T1上所对应的像素值;得到区域增强操作后的图像T2;这样可以使图像中的高亮区域向外增长,达到区域增强、修复缺损和断裂的效果;
步骤3.3.2、区域裁剪操作:
将模板E与区域增强操作后的图像T2进行卷积计算,得到模板E在图像T2中的覆盖区域,选取模板E在图像T2中的覆盖区域中最小像素点值,并将最小像素点值赋值给参考点在图像T2所对应的像素值,从而得到缺损修复后的图像T3;这样可以使得图像中的高亮区域向内减小,达到区域裁剪、消除图像异常边缘的效果;
经过区域增强与裁剪算法处理后,既可以将图像中的断裂处修复,又可以保留图像中其他区域的画面质量不受影响。
步骤3.4、提取轮廓形成连通域;
对步骤3.3中缺损修复后的图像T3进行轮廓点检测,得到k个连通域构成的连通域集合D={D1,D2,…,Di,…,Dk},其中,Di表示第i个连通域;i∈[1,k],k表示连通域的总数;
步骤3.5、基于周长和面积参数对连通域进行筛选;
步骤3.5.1、计算k个连通域的周长{Li|i=1,2,…,k}和面积{Si|i=1,2,…,k};将k个连通域的周长{Li|i=1,2,…,k}中的最小值记为Lmin和最大值记为Lmax,将k个连通域的面积{Si|i=1,2,…,k}中的最小值记为Smin和最大值记为Smax
初始化i=1,令第一轮连通域剔除数量m1=0;
步骤3.5.2、判断Li≥Lmin且Li≤Lmax且Si≥Smin且Si≤Smax是否成立,若成立,则直接执行步骤3.5.3;否则,将第i个连通域Di从连通域集合D中除去,再将m1+1赋给m1后,执行步骤3.5.3;
步骤3.5.3、将i+1赋值给i后,判断i>k是否成立,若成立,则表示得到更新后的连通域集合
Figure GDA0002803624370000081
并执行步骤3.6;其中,D′j表示更新后的连通域集合D′中第j个连通域,j∈[1,k-m1],否则,返回步骤3.5.2;
步骤3.6、利用几何学特征识别标志物;
步骤3.6.1、初始化j=1,令第二轮连通域剔除数量m2=0;
步骤3.6.2、绘制更新后的连通域集合D′中第j个连通域D′j的最小外接矩形,利用第j个连通域D′j及其最小外接矩形的几何学特征来识别标志物;
定义:矩形填充率是连通域的面积与其最小外接矩形面积之比;从而利用式(3)计算更新后的连通域集合D′中第j个连通域D′j的矩形填充率Rj
Figure GDA0002803624370000082
式(3)中,Sarea(j)是第j个连通域D′j的面积,Srectangle(j)是第j个连通域D′j的最小外接矩形的面积;
定义:矩形长宽比是第j个连通域D′j的最小外接矩形的长宽之比,从而利用式(4)计算更新后的连通域集合D′中第j个连通域D′j的矩形长宽比rj
Figure GDA0002803624370000091
式(4)中,Wrectangle(j)表示第j个连通域D′j的最小外接矩形的宽,Lrectangle(j)表示第j个连通域D′j的最小外接矩形的长;
步骤3.6.3、设定区间[R′-Δh,R′+Δh]和[r′-Δl,r′+Δl],其中Δh、Δl均为所设定的阈值,若
Figure GDA0002803624370000092
Figure GDA0002803624370000093
则将第j个连通域D′j从更新后的连通域集合D′中除去,再将m2+1赋给m2后,执行步骤3.6.4;否则,直接执行步骤3.6.4;
步骤3.6.4、将j+1赋值给j后,判断j>k-m1是否成立,若成立,则表示更新后的连通域集合D′中的(k-m1-m2)个连通域为标志物,并执行步骤3.7;否则,返回步骤3.6.2;
步骤3.7、计算标志物的中心;
以图像T的最左上角像素点为原点,与所述原点相邻的两条边分别作为x轴和y轴,从而建立图像坐标系;
将(k-m1-m2)个连通域的最小外接矩形的中心作为标志物的中心,从而得到(k-m1-m2)个中心坐标(x1,y1),(x2,y2),…,(xp,yp),…,
Figure GDA0002803624370000094
其中,(xp,yp)表示第p个标志物的中心坐标;p∈[1,k-m1-m2];
利用式(5)求出所有标志物的中心坐标的平均值作为图像T的标志物中心坐标,记为
Figure GDA0002803624370000095
Figure GDA0002803624370000096
步骤4、计算导线的舞动幅度;
令导线静止状态下标志物的中心坐标为(xini,yini)并作为监测的基准,利用式(6)计算图像T中标志物的位移,并作为导线舞动的幅度len:
Figure GDA0002803624370000097
式(6)中,α为空间映射系数,并有:
Figure GDA0002803624370000101
式(7)中,dtarget为标志物的实际宽度,npixel为标志物的宽度在图像T中所占的像素点个数。

Claims (1)

1.一种基于标志物图像检测的导线舞动监测方法,其特征在于,包括以下步骤:
步骤1、将标志物安装在输电线路导线的间隔棒上;所述标志物为黑色或黑白相间的几何图案;
步骤2、在电力铁塔上或塔基上架设摄像机用于对标志物进行拍摄,从而获取标志物视频数据;
步骤3、对所述标志物视频数据进行图像处理,识别所述标志物,并计算标志物的中心坐标;
步骤3.1、利用式(1)对所述标志物视频数据中任意一帧图像T的像素点T(x,y)所对应的R、G、B三通道的值{Hc(x,y)|c=r,g,b}进行去雾处理,得到去雾后的像素点T(x,y)所对应的R、G、B三通道的值{Jc(x,y)|c=r,g,b}:
Figure FDA0002803624360000011
式(1)中,A是全球大气光成分,c为变量,且c∈{r,g,b},L(x,y)是像素点T(x,y)处的环境光子参数,并有:
L(x,y)=min{[min(ρ×mav,0.9)×Mave(T)],M(T)} (2)
式(2)中,ρ为调节因子;M(T)为图像T的所有像素点分别所对应的R、G、B三通道的值{Hc(x,y)|c=r,g,b}中最小值的集合,(x,y)∈T;Mave(T)为最小值集合M(T)进行均值滤波后的值;mav为对最小值集合M(T)进行归一化后再取均值后的值;
步骤3.2、根据步骤3.1对所述图像T的中的所有像素点进行去雾处理,从而得到去雾后的图像;将所述去雾后的图像从RGB色度图转化成GRAY灰度图,并对GRAY灰度图进行中值滤波和二值化处理,从而得到处理后的图像T1
步骤3.3、修复图像缺损;
步骤3.3.1、区域增强操作:
定义一个带参考点的正方形或圆形作为模板E,与图像T1进行卷积计算,得到模板E在图像T1中的覆盖区域,从所述覆盖区域中选取最大像素点值,并将最大像素点值赋值给参考点在图像T1上所对应的像素值,从而得到区域增强操作后的图像T2
步骤3.3.2、区域裁剪操作:
将所述模板E与所述区域增强操作后的图像T2进行卷积计算,得到模板E在图像T2中的覆盖区域,选取所述模板E在所述图像T2中的覆盖区域中最小像素点值,并将最小像素点值赋值给参考点在图像T2所对应的像素值,从而得到缺损修复后的图像T3
步骤3.4、提取轮廓形成连通域;
对所述缺损修复后的图像T3进行轮廓点检测,得到k个连通域构成的连通域集合D={D1,D2,…,Di,…,Dk},其中,Di表示第i个连通域;i∈[1,k],k表示连通域的总数;
步骤3.5、基于周长和面积参数对连通域进行筛选;
步骤3.5.1、计算k个连通域的周长{Li|i=1,2,…,k}和面积{Si|i=1,2,…,k};将k个连通域的周长{Li|i=1,2,…,k}中的最小值记为Lmin和最大值记为Lmax,将k个连通域的面积{Si|i=1,2,…,k}中的最小值记为Smin和最大值记为Smax
初始化i=1,令第一轮连通域剔除数量m1=0;
步骤3.5.2、判断Li≥Lmin且Li≤Lmax且Si≥Smin且Si≤Smax是否成立,若成立,则直接执行步骤3.5.3;否则,将第i个连通域Di从连通域集合D中除去,再将m1+1赋给m1后,执行步骤3.5.3;
步骤3.5.3、将i+1赋值给i后,判断i>k是否成立,若成立,则表示得到更新后的连通域集合D′={D′1,D′2,…,D′j,…,D′k-m1}并执行步骤3.6;其中,D′j表示更新后的连通域集合D′中第j个连通域,j∈[1,k-m1],否则,返回步骤3.5.2;
步骤3.6、利用几何学特征识别标志物;
步骤3.6.1、初始化j=1,令第二轮连通域剔除数量m2=0;
步骤3.6.2、绘制更新后的连通域集合D′中第j个连通域D′j的最小外接矩形,利用第j个连通域D′j及其最小外接矩形的几何学特征来识别标志物;
定义:矩形填充率是连通域的面积与其最小外接矩形面积之比;从而利用式(3)计算更新后的连通域集合D′中第j个连通域D′j的矩形填充率Rj
Figure FDA0002803624360000031
式(3)中,Sarea(j)是第j个连通域D′j的面积,Srectangle(j)是第j个连通域D′j的最小外接矩形的面积;
定义:矩形长宽比是第j个连通域D′j的最小外接矩形的长宽之比,从而利用式(4)计算更新后的连通域集合D′中第j个连通域D′j的矩形长宽比rj
Figure FDA0002803624360000032
式(4)中,Wrectangle(j)表示第j个连通域D′j的最小外接矩形的宽,Lrectangle(j)表示第j个连通域D′j的最小外接矩形的长;
步骤3.6.3、设定区间[R′-Δh,R′+Δh]和[r′-Δl,r′+Δl],其中Δh、Δl均为所设定的阈值,若
Figure FDA0002803624360000033
Figure FDA0002803624360000034
则将第j个连通域D′j从更新后的连通域集合D′中除去,再将m2+1赋给m2后,执行步骤3.6.4;否则,直接执行步骤3.6.4;
步骤3.6.4、将j+1赋值给j后,判断j>k-m1是否成立,若成立,则表示更新后的连通域集合D′中的(k-m1-m2)个连通域为标志物,并执行步骤3.7;否则,返回步骤3.6.2;
步骤3.7、计算标志物的中心;
以图像T的最左上角像素点为原点,与所述原点相邻的两条边分别作为x轴和y轴,从而建立图像坐标系;
将(k-m1-m2)个连通域的最小外接矩形的中心作为标志物的中心,从而得到(k-m1-m2)个中心坐标
Figure FDA0002803624360000035
其中,(xp,yp)表示第p个标志物的中心坐标;p∈[1,k-m1-m2];
利用式(5)求出所有标志物的中心坐标的平均值作为图像T的标志物中心坐标,记为
Figure FDA0002803624360000036
Figure FDA0002803624360000037
步骤4、计算导线的舞动幅度;
令导线静止状态下标志物的中心坐标为(xini,yini)并作为监测的基准,利用式(6)计算图像T中标志物的位移,并作为导线舞动的幅度len:
Figure FDA0002803624360000041
式(6)中,α为空间映射系数,并有:
Figure FDA0002803624360000042
式(7)中,dtarget为标志物的实际宽度,npixel为标志物的宽度在图像T中所占的像素点个数。
CN201910569675.0A 2019-06-27 2019-06-27 基于标志物图像检测的导线舞动监测方法 Active CN110276787B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910569675.0A CN110276787B (zh) 2019-06-27 2019-06-27 基于标志物图像检测的导线舞动监测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910569675.0A CN110276787B (zh) 2019-06-27 2019-06-27 基于标志物图像检测的导线舞动监测方法

Publications (2)

Publication Number Publication Date
CN110276787A CN110276787A (zh) 2019-09-24
CN110276787B true CN110276787B (zh) 2021-02-26

Family

ID=67963533

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910569675.0A Active CN110276787B (zh) 2019-06-27 2019-06-27 基于标志物图像检测的导线舞动监测方法

Country Status (1)

Country Link
CN (1) CN110276787B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112164021A (zh) * 2020-08-12 2021-01-01 中国科学院西安光学精密机械研究所 航天器载荷振动的图像测量方法及测量装置
CN112561968B (zh) * 2020-12-22 2022-09-02 济南信通达电气科技有限公司 一种基于单目视觉的输电导线舞动监测方法及装置
CN113870220B (zh) * 2021-09-28 2024-06-25 合肥工业大学 基于矩形图像检测的导线舞动在线监测方法及装置
CN114219696A (zh) * 2021-11-09 2022-03-22 国网江苏省电力有限公司盐城供电分公司 一种基于fpga和dsp的线路舞动实时视频监测系统

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101007984B1 (ko) * 2010-12-10 2011-01-19 윤홍식 송전선로의 수평 및 수직 진동량과 처짐량 측정시스템 및 그 방법
CN103778476A (zh) * 2013-07-03 2014-05-07 国家电网公司 一种基于视频分析的输电导线舞动实时监测与预测方法
CN104574390A (zh) * 2014-12-29 2015-04-29 华北电力大学(保定) 基于视频监测技术的输电导线舞动幅值及频率的计算方法
CN104933403A (zh) * 2015-05-18 2015-09-23 西安工程大学 一种基于间隔棒识别的导线舞动的监测方法
CN107121250A (zh) * 2017-04-27 2017-09-01 武汉大学 一种输电塔及输电线模态内共振分析系统及方法
CN107146223A (zh) * 2017-04-27 2017-09-08 武汉大学 一种输电塔及输电线位移耦合的分析系统及方法
CN107742307A (zh) * 2017-10-25 2018-02-27 哈尔滨理工大学 基于改进帧差法的输电线路舞动特征提取及参数分析方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102042885B (zh) * 2010-10-08 2012-05-23 电子科技大学 一种输电线路塔线体系状态监测装置
CN102143354B (zh) * 2010-12-16 2013-03-06 华北电力大学 基于视频图像处理的输电导线舞动识别计算方法
CN103093192B (zh) * 2012-12-28 2016-12-28 昆山市工业技术研究院有限责任公司 高压输电线舞动的识别方法
CN103442209B (zh) * 2013-08-20 2017-02-22 北京工业大学 一种输电线路的视频监控方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101007984B1 (ko) * 2010-12-10 2011-01-19 윤홍식 송전선로의 수평 및 수직 진동량과 처짐량 측정시스템 및 그 방법
CN103778476A (zh) * 2013-07-03 2014-05-07 国家电网公司 一种基于视频分析的输电导线舞动实时监测与预测方法
CN104574390A (zh) * 2014-12-29 2015-04-29 华北电力大学(保定) 基于视频监测技术的输电导线舞动幅值及频率的计算方法
CN104933403A (zh) * 2015-05-18 2015-09-23 西安工程大学 一种基于间隔棒识别的导线舞动的监测方法
CN107121250A (zh) * 2017-04-27 2017-09-01 武汉大学 一种输电塔及输电线模态内共振分析系统及方法
CN107146223A (zh) * 2017-04-27 2017-09-08 武汉大学 一种输电塔及输电线位移耦合的分析系统及方法
CN107742307A (zh) * 2017-10-25 2018-02-27 哈尔滨理工大学 基于改进帧差法的输电线路舞动特征提取及参数分析方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于图像处理的输电线路运行状态智能监控平台设计;邢晓强;《中国优秀硕士学位论文全文数据库 工程科技II辑》;20190215;正文全文 *

Also Published As

Publication number Publication date
CN110276787A (zh) 2019-09-24

Similar Documents

Publication Publication Date Title
CN110276787B (zh) 基于标志物图像检测的导线舞动监测方法
CN103442209B (zh) 一种输电线路的视频监控方法
CN107045629B (zh) 一种多车道线检测方法
CN106680285B (zh) 基于红外图像辅助的可见光图像识别绝缘子污秽状态方法
JP5551595B2 (ja) 滑走路監視システムおよび方法
CN111754466B (zh) 传输机皮带损伤状况的智能检测方法
CN111814686A (zh) 一种基于视觉的输电线路识别及异物入侵在线检测方法
CN108229342B (zh) 一种海面舰船目标自动检测方法
CN111402247A (zh) 一种基于机器视觉的输电线路上悬垂线夹缺陷检测方法
CN106373134B (zh) 一种基于线结构光三维测量的公路标线检测方法
CN112949484B (zh) 一种高速铁路落石实时检测方法
CN115631116B (zh) 基于双目视觉的飞行器电力巡检系统
CN110852320A (zh) 基于深度学习的输电通道异物入侵检测方法
CN110223332B (zh) 一种桥梁裂缝标定方法
CN116630321B (zh) 基于人工智能的桥梁健康智能监测系统
CN111008967B (zh) 一种绝缘子rtv涂层缺陷识别方法
CN116665080A (zh) 基于目标识别的无人机劣化绝缘子检测方法及系统
CN115760058A (zh) 用于车辆底盘腐蚀评估的agv系统
CN109800641B (zh) 基于阈值自适应二值化和连通域分析的车道线检测方法
CN108734709B (zh) 一种绝缘子凸缘形状参数识别与破坏检测方法
CN111307267A (zh) 一种基于同心圆检测的导线舞动监测方法
CN115984806B (zh) 道路标线破损动态检测系统
CN112001271A (zh) 一种工地道路保洁方法、装置和系统
CN108898080B (zh) 一种基于山脊线邻域评价模型的裂缝连接方法
CN116758423A (zh) 一种基于白点率法的输电线路异物检测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20201207

Address after: No.8, Huayuan Avenue, Baohe, Hefei, Anhui Province

Applicant after: INTELLIGENT MANUFACTURING INSTITUTE OF HFUT

Applicant after: Anhui Kampers Navigation Information Technology Co.,Ltd.

Address before: 230009 No. 8 Garden Avenue, Baohe District, Hefei City, Anhui Province

Applicant before: Anhui Kampers Navigation Information Technology Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant