CN105931216A - 一种基于图像处理技术的机场道面破损检测方法 - Google Patents

一种基于图像处理技术的机场道面破损检测方法 Download PDF

Info

Publication number
CN105931216A
CN105931216A CN201610210937.0A CN201610210937A CN105931216A CN 105931216 A CN105931216 A CN 105931216A CN 201610210937 A CN201610210937 A CN 201610210937A CN 105931216 A CN105931216 A CN 105931216A
Authority
CN
China
Prior art keywords
image
airfield pavement
theta
carries out
integral
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610210937.0A
Other languages
English (en)
Inventor
李红伟
曹晓光
张莉
徐盛辉
齐俊
刘迪
朱鸿宇
陈柯宇
向园
余林佳
龚国平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN201610210937.0A priority Critical patent/CN105931216A/zh
Publication of CN105931216A publication Critical patent/CN105931216A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30256Lane; Road marking

Landscapes

  • Engineering & Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本发明提供一种基于图像处理技术的机场道面破损检测方法,所述方法包括:采用GPS加惯性导航的综合定位技术对检测车辆进行位置定位,并控制千兆网工业相机进行图像采集,得到采集的图像数据和定位数据;对采集的图像进行预处理;对预处理后的图像中的机场道面图像进行不变矩形状特征提取,利用Adaboost分类器算法对提取的特征进行检测分类,确定图像特征内的道面破损。能够快速精确的对检测车辆进行定位,对采集的图像进行预处理能够有效去除图像受光照不均的影响和拉槽的干扰,快速准确的提取道面图像中的图像特征,从而快速准确的确定图像特征内的道面破损。

Description

一种基于图像处理技术的机场道面破损检测方法
技术领域
本发明涉及机场道面检测技术领域,特别是指一种基于图像处理技术的机场道面破损检测方法。
背景技术
近年来,机场道面在使用中不断经受各种复杂的应力,包括航空器起降时的冲击应力,航空器滑行时的摩擦力和扭转力,以及温度变化造成的温度应力等,长期下来会出现各种各样的破损。仅以水泥混凝土道面为例,常见的破损形式有:
一、水泥混凝土道面裂缝断板类病害,包括:
1、纵向、横向和斜向裂缝:跑道水泥混凝土板块在飞机轮载的反复作用下,产生疲劳并导致强度降低,通常出现在板块中部垂直于接缝位置。
2、破碎板和交叉裂缝:出现“纵向、横向和斜向裂缝”后,板块整体抗弯拉能力迅速下降。如不及时处置,在飞机轮载作用下裂缝逐渐加宽,裂缝周边常出现剥落、掉粒现象,并产生次生裂缝,进一步发展形成“破碎板和交叉裂缝”病害,严重影响和降低道面结构的整体性和承载能力。
3、角隅断裂:一般是由飞机轮载作用引起的,往往发生在飞机主起落架轮迹覆盖区域的板块位置,具有发展速度快、断裂后的角隅易下沉、错台现象较明显等特征。
二、水泥混凝土道面接缝类病害,包括:
1、嵌缝料损坏:指灌缝料出现剥落、挤出、缺失或其他失效现象,其主要原因是灌缝材料发生老化后弹性与粘附性下降,与缝壁粘接失效,失去封堵作用。
2、“接缝破碎”和“板角剥落”:指水泥混凝土板块边角位置产生少量碎粒的现象,碎粒如不及时清扫将对飞机运行构成安全隐患。
3、胀裂:是由于胀缝设置不合理或胀缝失效等原因引起的,“胀裂”后胀缝周边的板块易出现全厚度碎裂,结构承载能力基本丧失。
三、水泥混凝土道面竖向位移类病害,包括:
1、地表水沿接缝(裂缝)渗入基层,在飞机轮载反复作用下形成动水压力,将冲刷基层材料,导致基层中的细集料通过接缝(裂缝)被带到地表形成“唧泥”现象,随着细集料流失,板底出现“脱空”区域。此外,轮载反复作用下基层材料的累积塑性变形也是基层出现脱空的重要原因。
2、沉陷或错台:是由地基沉陷、基层脱空或者地基基础冻胀、融沉等引起的。“沉陷或错台”影响道面平整度,严重时将影响道面结构性能,以及飞机的滑行舒适性和安全。
发明内容
本发明要解决的技术问题是提供一种基于图像处理技术的机场道面破损检测方法,能够基于图像处理快速准确的机场道面破损。
为解决上述技术问题,本发明的实施例提供一种基于图像处理技术的机场道面破损检测方法,其特征在于,所述基于图像处理技术的机场道面破损检测方法包括:
采用GPS加惯性导航的综合定位技术对检测车辆进行位置定位,并控制千兆网工业相机进行图像采集,得到采集的图像数据和定位数据;
对采集的图像进行预处理,所述预处理包括对采集图像中机场道面图像增强、机场道面图像分割和机场道面拉槽角度的计算中的至少一种;
对预处理后的图像中的机场道面图像进行不变矩形状特征提取,利用Adaboost分类器算法对提取的特征进行检测分类,确定图像特征内的道面破损。
优选的,所述采用GPS加惯性导航的综合定位技术进行位置定位,并控制千兆网工业相机进行图像采集,包括:
利用差分GPS基站与检测车辆上的差分GPS移动站配合,结合MEMS惯导技术对检测车辆的位置和车辆姿态进行定位;
基于检测车辆的位置定位控制千兆网工业相机按照预先设定的间隔距离阈值进行图像采集。
优选的,所述对采集图像中机场道面图像增强,包括:
采用直方图均衡化方法对道面图像进行处理;
采用频域增强的方法对拉槽进行过滤。
优选的,所述对采集图像中机场道面图像分割,包括:
利用边缘检测算子和CB形态学对采集图像中机场道面图像分割。
优选的,所述对采集图像中机场道面拉槽角度的计算,包括:
利用LBP算子和Radon变换计算采集图像中机场道面拉槽角度。
优选的,所述对预处理后的图像中的机场道面图像进行不变矩形状特征提取,包括:
对预处理后的图像中的机场道面图像进行几何矩形状特征和正交矩形状特征提取。
优选的,对预处理后的图像中的机场道面图像进行几何矩形状特征提取,包括:
利用以下公式对预处理后的图像中的机场道面图像进行几何矩形状特征提取:
p+q阶原点矩:
m p q = ∫ ∫ ξ x p y q f ( x , y ) d x d y ; ( p , q = 0 , 1 , 2... )
p+q阶中心矩:
μ p q = ∫ ∫ ξ ( x - x 0 ) p ( y - y 0 ) q f ( x , y ) d x d y ; ( p , q = 0 , 1 , 2... )
其中,是亮度矩心,ξ是图像亮度函数f(x,y)定义的像素空间区域,{xpyq}为几何矩定义基本集。
优选的,对预处理后的图像中的机场道面图像进行正交矩形状特征提取,包括:
利用以下公式对预处理后的图像中的机场道面图像进行正交矩形状特征提取:
P阶Zernike矩定义为:
Z p q = p + 1 π ∫ 0 2 π ∫ 0 1 V p q * ( r , θ ) f ( r , θ ) r d r d θ
p=0,1,…∞;q=0,±1,…;且p-|q|是偶数.
其中,Zernike多项式
Vpq(r,θ)=Rpq(r)eiqθ
是单位圆x2+y2≤1上正交的一组完整复值函数,即Zernike多项式的正交条件如下:
∫ 0 2 π ∫ 0 1 V n l * ( r , θ ) V m k ( r , θ ) r d r d θ = π ( n + 1 ) δ n m δ l k
这里δnm,δlk表示Kronecker符号。
径向多项式Rnm(r)由下式给出:
R n m ( r ) = Σ s = 0 ( n - | m | ) / 2 ( - 1 ) s ( n - s ) ! s ! ( n - 2 s + | m | 2 ) ! ( n - 2 s - | m | 2 ) ! r n - 2 s
Rnm(r)满足如下关系:
∫ 0 1 R n l ( r ) R m l ( r ) r d r = 1 2 ( n + 1 ) δ m n
优选的,所述利用Adaboost分类器算法对提取的特征进行检测分类,确定图像特征内的道面破损,包括:
给定N个标记过的样本(x1,y1),(x2,y2),…,(xn,yn)。设置其迭代次数为T。
初始化权重w1,i=D(i),其中i=1,…,N。
对t=1,…,T
归一化权重:
q t , i = w t , i Σ i = 1 N w t , i
对每个特征j得到一个弱分类器h(xi,f,p,θ)形式为:
h j ( x ) = 1 , p j f j ( x ) < p j &theta; j 0 , e l s e
计算hj(x)的错误率:
&epsiv; j = &Sigma; i w i | h j ( x i ) - y i |
选择具有最小错误率的εt弱分类器ht,并加入到强分类器。
更新每个样本对应的权重
w t + 1 , i = w t , i &beta; t 1 - | h j ( x i ) - y i |
其中,
最后的强分类器为:
c ( x ) = 1 , &Sigma; t = 1 T a t h t ( x ) &GreaterEqual; 1 2 &Sigma; t = 1 T a t 0 , e l s e
其中,
优选的,所述对预处理后的图像中的机场道面图像进行不变矩形状特征提取,利用Adaboost分类器算法对提取的特征进行检测分类,确定图像特征内的道面破损之后,包括:
采用图像金字塔结构存储并管理采集的图像数据、定位数据和道面破损检测数据。
本发明的上述技术方案的有益效果如下:
上述方案中,利用GPS加惯性导航的综合定位技术对检测车辆进行位置定位,能够快速精确的对检测车辆进行定位,利用千兆网工业相机进行图像采集能够快速获取高质量的图像数据,对采集的图像进行预处理能够有效去除图像受光照不均的影响和拉槽的干扰,进行不变矩形状特征提取,利用Adaboost分类器算法对提取的特征进行检测分类,能够快速准确的确定图像特征内的道面破损。
附图说明
图1为本发明实施例的基于图像处理技术的机场道面破损检测方法流程图。
具体实施方式
为使本发明要解决的技术问题、技术方案和优点更加清楚,下面将结合附图及具体实施例进行详细描述。
如图1所示,本发明的实施例一种基于图像处理技术的机场道面破损检测方法,所述基于图像处理技术的机场道面破损检测方法包括:
步骤101:采用GPS加惯性导航的综合定位技术对检测车辆进行位置定位,并控制千兆网工业相机进行图像采集,得到采集的图像数据和定位数据。
其中,所述采用GPS加惯性导航的综合定位技术进行位置定位,并控制千兆网工业相机进行图像采集,可以包括:
利用差分GPS基站与检测车辆上的差分GPS移动站配合,结合MEMS惯导技术对检测车辆的位置和车辆姿态进行定位;
具体的,差分GPS移动站可以设置有精确的位置脉冲同步系统。差分GPS移动基于差分GPS和MEMS惯导技术敏感检测车的精确位置和车辆姿态,位置精度可以为2cm,姿态精度可以为0.1°;同时可以与车载计算机进行实时通信。
采用GPS加惯性导航的综合定位技术其性能指标可以下:
1基于差分GPS,使车辆位置精度优于2cm,车辆姿态精度优于0.1°。
2相机驱动脉冲发生时刻与差分GPS的数据解算时刻的同步误差小于2ms。
3综合时间误差、延迟误差和GPS定位误差,使相机照片的位置误差优于10cm。
4相机驱动脉冲发生速度根据车辆速度自动调整。
5GPS移动站的最高输出频率需达到100Hz。
基于检测车辆的位置定位控制千兆网工业相机按照预先设定的间隔距离阈值进行图像采集。
具体的,可以利用四台千兆网工业相机进行图像采集,千兆网工业相机可以选用大恒GT2050相机,并可以通过千兆网口传输数据。千兆网工业相机相机触发可以按照位置进行同步触发,即检测车行驶设定的距离之后,控制器触发相机拍摄一帧图片。车速变快,行驶设定距离所花费的时间变短,则相机的触发间隔也随之变短;车速变慢,行驶设定距离所花费的时间变长,则相机的触发间隔也随之变长。在相机进行照射前可以采用TenenGrad对焦算法、Vollath对焦算法和Squared-Gradient对焦算法中的至少一种进行对焦,并选取14-16帧之间的图像认定为清晰图像。
步骤102:对采集的图像进行预处理,所述预处理包括对采集图像中机场道面图像增强、机场道面图像分割和机场道面拉槽角度的计算中的至少一种。
其中,可以对采集的数据进行存储,在数据采集结束后,对采集的图像进行预处理。
优选的,所述对采集图像中机场道面图像增强,可以包括:
采用直方图均衡化方法对道面图像进行处理;
采用频域增强的方法对拉槽进行过滤;
对采集图像中机场道面图像分割,可以包括:
利用边缘检测算子和CB形态学对采集图像中机场道面图像分割;
对采集图像中机场道面拉槽角度的计算,可以包括:
利用LBP算子和Radon变换计算采集图像中机场道面拉槽角度。
步骤103:对预处理后的图像中的机场道面图像进行不变矩形状特征提取,利用Adaboost分类器算法对提取的特征进行检测分类,确定图像特征内的道面破损。
其中,对所述对预处理后的图像中的机场道面图像进行不变矩形状特征提取,包括:
对预处理后的图像中的机场道面图像进行几何矩形状特征和正交矩形状特征提取。
本发明实施例的基于图像处理技术的机场道面破损检测方法,利用GPS加惯性导航的综合定位技术对检测车辆进行位置定位,能够快速精确的对检测车辆进行定位,利用千兆网工业相机进行图像采集能够快速获取高质量的图像数据,对采集的图像进行预处理能够有效去除图像受光照不均的影响和拉槽的干扰,进行不变矩形状特征提取,利用Adaboost分类器算法对提取的特征进行检测分类,能够快速准确的确定图像特征内的道面破损。
(1)检测精度:可检测宽度方向最小尺寸≥2mm的道面异常,包括道面破损。
(2)道面破损检测响应速度:≤5秒
(3)单程检测宽度可以为:5m
(4)检测车时速可以为:50km
(5)单程宽度可以为:5m
本发明实施例的基于图像处理技术的机场道面破损检测方法,对采集的图像进行预处理过程中,采用直方图均衡化方法对道面图像进行处理,可以包括:
步骤201:列出原始图像的灰度级fj,j=0,1,…,L-1,其中L是灰度级的个数。
步骤202:统计各灰度级的像素数目nj,j=0,1,…,L-1。
步骤203:计算原始图像直方图各灰度级的频数Pf(fj)=nj/n,j=0,1,…,L-1,其中n为原始图像总的像素数目。
步骤204:计算累计分布函数
步骤205:应用以下公式计算映射输出图像的灰度级gi,i=0,1,…,P-1,P为输出图像灰度级的个数:
gi=INT[(gmax-gmin)C(f)+gmin+0.5]
其中,INT为取整符号。
步骤206:统计映射后各灰度级的像素数目ni,i=0,1,…,P-1。
步骤207:计算输出图像直方图
步骤208:用fj和gi的映射关系修改原始图像的灰度级,从而获得直方图近似为均匀分布的输出图像。
本实施例中,通过进行采用直方图均衡化方法对道面图像进行处理,增强了原始图像对比度,有利于后续拉槽角度的计算。
采用频域增强的方法对拉槽进行过滤,可以包括:
设函数f(x,y)与线性位不变算子h(x,y)的卷积结果是g(x,y),即有g(x,y)=h(x,y)*f(x,y),那么根据卷积定理在频域的性质有:
G(u,v)=H(u,v)F(u,v)
其中,G(u,v),H(u,v),F(u,v)分别是g(x,y),h(x,y),f(x,y)的傅里叶变换。
从线性系统理论的角度看,H(u,v)为转移函数。在具体的增强应用中,f(x,y)是给定的(所以F(u,v)可利用变换得到),需要确定的是H(u,v),这样具有所需特性的g(x,y)就可由式:G(u,v)=H(u,v)F(u,v)算出G(u,v),从而得到:
g(x,y)=F-1[H(u,v)F(u,v)]
根据以上的讨论,在频率域中进行增强是相当可观的,其主要步骤有:
(1)计算需增强图的傅立叶变换;
(2)将其与1个转移函数相乘;
(3)再将结果傅立叶反变换以得到增强的图。
常用频域增强方法有:低通滤波、高通滤波、带通和带阻滤波、同态滤波。
(a)低通滤波
图像中的边缘和噪声都对应图像傅立叶变换中的高频部分,所以如要在频域中削弱其影响就要设法减弱这部分频率的分量。根据式G(u,v)=H(u,v)F(u,v)我们需要选择1个合适的H(u,v)以得到削弱F(u,v)高频分量G(u,v)。
理想低通滤波器
1个2-D理想低通滤波器的转移函数满足下列条件:
H ( u , v ) = 1 , D ( u , v ) &le; D 0 0 , D ( u , v ) > D 0
其中,D0为1个非负整数。
(2)巴特沃斯低通滤波器
物理上可与实现的一种低通滤波器是巴特沃斯低通滤波器。一个阶为n,截断频率为D0的巴特沃斯低通滤波器的转移函数为:
H ( u , v ) = 1 1 + &lsqb; D ( u , v ) / D 0 &rsqb; 2 n
阶为1的巴特沃斯低通滤波器在高低频率间的过渡比较光滑,所以用巴特沃斯滤波器得到的输出图其振铃效应不明显。
(a)高通滤波
(b)理想高通滤波器
1个2-D理想高通滤波器的转移函数满足下列条件:
H ( u , v ) = 0 , D ( u , v ) &le; D 0 1 , D ( u , v ) > D 0
(1)巴特沃斯高通滤波器
一个阶为n,截断频率为D0的巴特沃斯高通滤波器的转移函数为:
H ( u , v ) = 1 1 + &lsqb; D 0 / D ( u , v ) &rsqb; 2 n
阶为1的巴特沃斯高通滤波器与巴特沃斯低通滤波器类似,高通的巴特沃斯滤波器在通过和滤掉的频率之间也没有不连续的分界。由于在高低频率间的过渡比较光滑,所以用巴特沃斯滤波器得到的输出图其振铃效应不明显。
(a)带通和带阻滤波
带通滤波器允许一定频率范围内的信号通过而阻止其它频率范围内的信号通过。与此相对应,带阻滤波器阻止一定频率范围内的信号通过而允许其它频率范围内的信号通过。一个用于消除以u0+v0为中心,D0为半径的区域内所有频率的理想带阻滤波器的转移函数为:
H ( u , v ) = 0 , D ( u , v ) &le; D 0 1 , D ( u , v ) > D 0
其中,D(u,v)=[(u-u0)2+(v-v0)2]1/2
考虑到傅立叶变换的对称性,为了消除不是以原点为中心的给定区域内率,带阻滤波器必须两两对称地工作,即上两式需要改成:
其中,
D1(u,v)=[(u-u0)2+(v-v0)2]1/2
D2(u,v)=[(u-u0)2+(v-v0)2]1/2
带阻滤波器也可设计成能除去以原点为中心的频率。这样一个放射对称的理想带阻滤波器的转移函数是:
H ( u , v ) = 1 , D ( u , v ) < D 0 - W / 2 0 , D 0 - W / 2 &le; D ( u , v ) &le; D 0 + W / 2 1 , D ( u , v ) > D 0 + W / 2
其中W为带的宽度,D0为放射中心。
类似的n阶放射对称的巴特沃斯带阻滤波器的转移函数为
H ( u , v ) = 1 1 + &lsqb; D ( u , v ) W D 2 ( u , v ) - D 0 2 &rsqb; 2 n
其中,W和D0同上。
带通滤波器和带阻滤波器是互补的。所以,如设HR(u,v)为带阻滤波器的转移函数,则对应的带通滤波器HP(u,v)只需将HR(u,v)翻转即可:
HP(u,v)=-[HR(u,v)-1]=1-HR(u,v)
本实施例中,通过采用频域增强的方法对拉槽进行过滤,能够有效去除平行拉槽。
利用边缘检测算子和CB形态学对采集图像中机场道面图像分割,可以包括:
在经典形态学中,对不含噪灰度图像进行边缘检测,常用的算子有以下三种:
G = ( f &CirclePlus; b ) - f
G=f-(fΘb)
G = ( f &CirclePlus; b ) - ( f &Theta; b )
其中,fΘb为结构元素b对信号f的腐蚀,为结构元素b对信号f的膨胀。
以上三种形态学边缘检测算子可以分别提取图像外边缘、内边缘和骑跨在实际欧氏边界上的边缘。
根据CB形态学定义,由于以上算子可改进如下:
G = ( f &CirclePlus; &part; b ) - f
G = f - ( f &Theta; &part; b )
G = ( f &CirclePlus; &part; b ) - ( f &Theta; &part; b )
上式在去噪和边缘定位精度方面均优于经典形态学边缘检测算子。
对于含噪图像,因此考虑引入开、闭运算来抑制噪声。CB形态学的腐蚀和开运算可滤除负噪声,膨胀和闭运算可滤除正噪声,以级联形式得到抗噪型边缘检测算子:
G = ( f &CircleTimes; b ) &CirclePlus; &part; b - ( f &CircleTimes; b ) &times; b
G = ( f &times; b ) &CircleTimes; &part; b - ( f &times; b ) &Theta; &part; b
G = ( f &CircleTimes; b ) &CirclePlus; &part; b - ( f &times; b ) &Theta; &part; b
CB形态运算结果还与连通分量的周围环境有关。一般来说,对小结构元素,周围环境要求较弱,但它可删除的分量较小,而对大结构元素则反之,因此引入多结构元素可进一步改善效果。通过多次实验证明,进行二次迭代即可达到较好效果。对于个别尺寸较大、噪声信号较强的可进行三次迭代。由CB形态学原理和经典形态学边缘检测算式可得下式:
G = &lsqb; ( f &Theta; &part; b 1 ) &CirclePlus; b 1 &rsqb; &CirclePlus; &part; b 2 - &lsqb; ( f &CirclePlus; &part; b 1 ) &Theta;b 1 &rsqb; &Theta; &part; b 2
G = &lsqb; ( f &Theta; &part; b 1 ) &CirclePlus; b 1 &CirclePlus; &part; b 2 &rsqb; &CirclePlus; &part; b 3 - &lsqb; ( f &CirclePlus; &part; b 1 ) &Theta;b 1 &Theta; &part; b 2 &rsqb; &Theta; &part; b 3
利用下式对采集图像中机场道面图像分割:
G = &lsqb; ( f &Theta; &part; b 1 ) &CirclePlus; b 1 &rsqb; &CirclePlus; &part; b 2 - &lsqb; ( f &CirclePlus; &part; b 1 ) &Theta;b 1 &rsqb; &Theta; &part; b 2
G = &lsqb; ( f &Theta; &part; b 1 ) &CirclePlus; b 1 &CirclePlus; &part; b 2 &rsqb; &CirclePlus; &part; b 3 - &lsqb; ( f &CirclePlus; &part; b 1 ) &Theta;b 1 &Theta; &part; b 2 &rsqb; &Theta; &part; b 3
利用LBP算子和Radon变换计算采集图像中机场道面拉槽角度,可以包括:
利用下式进行二维空间的Radon变换:
R { f ( x , y ) } = g ( t , &theta; ) = &Integral; - &infin; + &infin; &Integral; - &infin; - &infin; f ( x , y ) &delta; ( x cos &theta; + y sin &theta; - t ) d x d y
其中,0<t<+∞和0<θ<π,t代表沿着直线上的距离。
对道面图像进行0°~180°的投影;
(2)计算Radon变换域空间的一阶微分;
(3)计算Radon变换域空间微分后的累加和,累加和最大的角度为α,α经过下面的计算后,即为拉槽的倾斜角θ,拉槽方向为逆时针。
对道面图3-13(a),不经过LBP算法增强,直接利用Radon变换进行投影。由于机场道面背景的不同,直接利用Radon变换对原图进行拉槽角度测量时,有时候求得的角度值误差非常大,或者计算错误。LBP算法主要是用来描述图像纹理特征的,通过选取合适的P,R值可以达到图像增强的效果。加入LBP算法进行图像增强可以减少测量错误,提升测量的正确率。
本实施例中,LBP算法可以将图像从灰度0-255的区间映射到低维更窄的灰度值区间,达到图像增强的效果,并且可以去掉光照不均的影响,对在不同时间拍摄的机场跑道图像进行拉槽角度测量时,具有很强的鲁棒性。
本发明实施例的基于图像处理技术的机场道面破损检测方法,对预处理后的图像中的机场道面图像进行几何矩形状特征提取,可以包括:
利用以下公式对预处理后的图像中的机场道面图像进行几何矩形状特征提取:
p+q阶原点矩:
m p q = &Integral; &Integral; &xi; x p y q f ( x , y ) d x d y ; ( p , q = 0 , 1 , 2... )
p+q阶中心矩:
&mu; p q = &Integral; &Integral; &xi; ( x - x 0 ) p ( y - y 0 ) q f ( x , y ) d x d y ; ( p , q = 0 , 1 , 2... )
其中,是亮度矩心,ξ是图像亮度函数f(x,y)定义的像素空间区域,{xpyq}为几何矩定义基本集。
本实施例中,几何矩具有中心矩平移不变、尺度不变性和旋转不变性。
优选的,对预处理后的图像中的机场道面图像进行正交矩形状特征提取,可以包括:
利用以下公式对预处理后的图像中的机场道面图像进行正交矩形状特征提取:
P阶Zernike矩定义为:
Z p q = p + 1 &pi; &Integral; 0 2 &pi; &Integral; 0 1 V p q * ( r , &theta; ) f ( r , &theta; ) r d r d &theta;
p=0,1,…∞;q=0,±1,…;且p-|q|是偶数.
其中,Zernike多项式
Vpq(r,θ)=Rpq(r)eiqθ
是单位圆x2+y2≤1上正交的一组完整复值函数,即Zernike多项式的正交条件如下:
&Integral; 0 2 &pi; &Integral; 0 1 V n l * ( r , &theta; ) V m k ( r , &theta; ) r d r d &theta; = &pi; ( n + 1 ) &delta; n m &delta; l k
这里δnm,δlk表示Kronecker符号。
径向多项式Rnm(r)由下式给出:
R n m ( r ) = &Sigma; s = 0 ( n - | m | ) / 2 ( - 1 ) s ( n - s ) ! s ! ( n - 2 s + | m | 2 ) ! ( n - 2 s - | m | 2 ) ! r n - 2 s
Rnm(r)满足如下关系:
&Integral; 0 1 R n l ( r ) R m l ( r ) r d r = 1 2 ( n + 1 ) &delta; m n
本实施例中,正交矩具有无冗余、可重构的优点。
优选的,所述利用Adaboost分类器算法对提取的特征进行检测分类,确定图像特征内的道面破损,可以包括:
给定N个标记过的样本(x1,y1),(x2,y2),…,(xn,yn)。设置其迭代次数为T。
初始化权重w1,i=D(i),其中i=1,…,N。
对t=1,…,T
归一化权重:
q t , i = w t , i &Sigma; i = 1 N w t , i
对每个特征j得到一个弱分类器h(xi,f,p,θ)形式为:
h j ( x ) = 1 , p j f j ( x ) < p j &theta; j 0 , e l s e
计算hj(x)的错误率:
&epsiv; j = &Sigma; i w i | h j ( x i ) - y i |
选择具有最小错误率的εt弱分类器ht,并加入到强分类器。
更新每个样本对应的权重
w t + 1 , i = w t , i &beta; t 1 - | h j ( x i ) - y i |
其中,
最后的强分类器为:
c ( x ) = 1 , &Sigma; t = 1 T a t h t ( x ) &GreaterEqual; 1 2 &Sigma; t = 1 T a t 0 , e l s e
其中,
本实施例中,利用Adaboost分类器算法训练的错误率上界,随着迭代次数的增加,会逐渐下降;即使训练次数很多,也不会出现过拟合的问题,检测中异常道面图像会在前面的几个弱分类其的检测中被排除掉,只有正确的正常道面图像才能通过各个强分类器联合检测,能够提高正常道面的检测速度;解决异常道面图像过多,难以分类和训练的问题,保证正常道面图像通过率,减少异常道面图像的通过率。
本发明实施例的基于图像处理技术的机场道面破损检测方法,所述对预处理后的图像中的机场道面图像进行不变矩形状特征提取,利用Adaboost分类器算法对提取的特征进行检测分类,确定图像特征内的道面破损之后,包括:
采用图像金字塔结构存储并管理采集的图像数据、定位数据、FOD检测数据和道面破损检测数据。
原始图像数据与破损检测结果分别用三个文件存储相关信息,每行格式如下:
(1)原始GPS数据文件:GPS数据采集时间,经度,维度。
(2)原始图像数据文件:相机号,图像序列号,图像采集时间(原始图像按照年_月_日_时_分_秒_相机号_张数的格式进行命名)。
(4)破损检测结果文件:相机号,图像序列号,图像采集时间,破损类型。
使用入库工具对四个文件进行分析,对比,最终得到每一张图片的综合信息,把原始图像数据导入到服务器中,把相关图像信息导入到原始图像表中。
本方法共设计六张表对数据进行管理,其中虚拟道面的第3,4,5层为矢量图。
(1)原始图像表
图像序列号:年_月_日_时_分_秒_相机号_张数
数据字段包括图像序列号、图像日期、图像时间、方位角、图像中心点经度、图像中心点纬度、图像分辨率(每次标定,)、分类结果、描述文件地址、图像存储位置。
(2)1*1图像表
首先从原始图像数据表中读取图片,同一批图,如果出现重复采集的情况,原始图像数据库中会有不同图像有相同坐标位置,判断图像是否为感兴趣区,优先选择感兴趣区图像入库,如果都是或者都不是,将较新的图像入库。
(3)5*5图像表
将1*1图像降采样5倍再存入数据表中。
(4)虚拟道面的第3,4,5层图像表
虚拟数据表为事先画好的矢量图。
本实施例中,由于机场道面特殊的几何分布,其长宽比能达到在60∶1甚至更高,所以在显示机场道面全景时,无需使用真实图像,只需机场仿真图即可。则图像金字塔部分可采用虚实结合的技术,在金字塔下面几层使用真实图像显示,在金字塔顶端几层采用虚拟图像显示。虚拟图像较真实图像而言,结构简单、数据量小,在显示与调度上更加方便与快捷。
本发明实施例的基于图像处理技术的机场道面破损检测方法,机场道面按照其复杂程度,可以分为三类,分别为正常道面,带标志线道面和带轮胎印道面。
破损检测结果如下:
以不变矩为特征向量,以决策树为弱分类器,设置不同的迭代次数N,对测试样本进行测试,得到的结果不一样。随着迭代次数的增加,测试样本的错误识别率维持在7%附近,可见,Adaboost分类器的分类效果很明显。
对Adaboost分类器,以Hu矩为特征向量,设置不同的训练样本数、测试样本数和迭代次数N,对测试样本进行测试,得到的结果不一样,得到如下表5所示的识别结果:
表5Adaboost分类识别率
从上表5可以看到,Adaboost分类器有最高可以达到95%的正确识别率,并且几次的结果都比较稳定,没有出现过拟合现象,可以作为比较理想的分类器。
对Adaboost分类器,以Zernike矩为特征向量,设置不同的训练样本数、测试样本数和迭代次数N,对测试样本进行测试,得到的结果不一样,得到如下表6所示的识别结果:
表6Adaboost分类识别率
不管以Hu矩还是Zernike矩为Adaboost分类器的特征向量,对测试样本都能得到稳定且很高的正确识别。
以上所述是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明所述原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种基于图像处理技术的机场道面破损检测方法,其特征在于,所述基于图像处理技术的机场道面破损检测方法包括:
采用GPS加惯性导航的综合定位技术对检测车辆进行位置定位,并控制千兆网工业相机进行图像采集,得到采集的图像数据和定位数据;
对采集的图像进行预处理,所述预处理包括对采集图像中机场道面图像增强、机场道面图像分割和机场道面拉槽角度的计算中的至少一种;
对预处理后的图像中的机场道面图像进行不变矩形状特征提取,利用Adaboost分类器算法对提取的特征进行检测分类,确定图像特征内的道面破损。
2.根据权利要求1所述的基于图像处理技术的机场道面破损检测方法,其特征在于,所述采用GPS加惯性导航的综合定位技术进行位置定位,并控制千兆网工业相机进行图像采集,包括:
利用差分GPS基站与检测车辆上的差分GPS移动站配合,结合MEMS惯导技术对检测车辆的位置和车辆姿态进行定位;
基于检测车辆的位置定位控制千兆网工业相机按照预先设定的间隔距离阈值进行图像采集。
3.根据权利要求1所述的基于图像处理技术的机场道面破损检测方法,其特征在于,所述对采集图像中机场道面图像增强,包括:
采用直方图均衡化方法对道面图像进行处理;
采用频域增强的方法对拉槽进行过滤。
4.根据权利要求1所述的基于图像处理技术的机场道面破损检测方法,其特征在于,所述对采集图像中机场道面图像分割,包括:
利用边缘检测算子和CB形态学对采集图像中机场道面图像分割。
5.根据权利要求1所述的基于图像处理技术的机场道面破损检测方法,其特征在于,所述对采集图像中机场道面拉槽角度的计算,包括:
利用LBP算子和Radon变换计算采集图像中机场道面拉槽角度。
6.根据权利要求1所述的基于图像处理技术的机场道面破损检测方法,其特征在于,所述对预处理后的图像中的机场道面图像进行不变矩形状特征提取,包括:
对预处理后的图像中的机场道面图像进行几何矩形状特征和正交矩形状特征提取。
7.根据权利要求6所述的基于图像处理技术的机场道面破损检测方法,其特征在于,对预处理后的图像中的机场道面图像进行几何矩形状特征提取,包括:
利用以下公式对预处理后的图像中的机场道面图像进行几何矩形状特征提取:
p+q阶原点矩:
m p q = &Integral; &Integral; &xi; x p y q f ( x , y ) d x d y ; ( p , q = 0 , 1 , 2... )
p+q阶中心矩:
&mu; p q = &Integral; &Integral; &xi; ( x - x 0 ) p ( y - y 0 ) q f ( x , y ) d x d y ; ( p , q = 0 , 1 , 2... )
其中,是亮度矩心,ξ是图像亮度函数f(x,y)定义的像素空间区域,{xpyq}为几何矩定义基本集。
8.根据权利要求7所述的基于图像处理技术的机场道面破损检测方法,其特征在于,对预处理后的图像中的机场道面图像进行正交矩形状特征提取,包括:
利用以下公式对预处理后的图像中的机场道面图像进行正交矩形状特征提取:
P阶Zernike矩定义为:
Z p q = p + 1 &pi; &Integral; 0 2 &pi; &Integral; 0 1 V p q * ( r , &theta; ) f ( r , &theta; ) r d r d &theta;
p=0,1,...∞;q=0,±1,...;且p-|q|是偶数.
其中,Zernike多项式
Vpq(r,θ)=Rpq(r)eiqθ
是单位圆x2+y2≤1上正交的一组完整复值函数,即Zernike多项式的正交条件如下:
&Integral; 0 2 &pi; &Integral; 0 1 V n l * ( r , &theta; ) V m k ( r , &theta; ) r d r d &theta; = &pi; ( n + 1 ) &delta; n m &delta; l k
这里δnm,δlk表示Kronecker符号;
径向多项式Rnm(r)由下式给出:
R n m ( r ) = &Sigma; s = 0 ( n - | m | ) / 2 ( - 1 ) s ( n - s ) ! s ! ( n - 2 s + | m | 2 ) ! ( n - 2 s - | m | 2 ) ! r n - 2 s
Rnm(r)满足如下关系:
&Integral; 0 1 R n l ( r ) R m l ( r ) r d r = 1 2 ( n + 1 ) &delta; m n
9.根据权利要求8所述的基于图像处理技术的机场道面破损检测方法,其特征在于,所述利用Adaboost分类器算法对提取的特征进行检测分类,确定图像特征内的道面破损,包括:
给定N个标记过的样本(x1,y1),(x2,y2),…,(xn,yn)。设置其迭代次数为T;
初始化权重w1,i=D(i),其中i=1,…,N。
对t=1,…,T
归一化权重:
q t , i = w t , i &Sigma; i = 1 N w t , i
对每个特征j得到一个弱分类器h(xi,f,p,θ)形式为:
h j ( x ) = 1 , p j f j ( x ) < p j &theta; j 0 , e l s e
计算hj(x)的错误率:
&epsiv; j = &Sigma; i w i | h j ( x i ) - y i |
选择具有最小错误率的εt弱分类器ht,并加入到强分类器;
更新每个样本对应的权重
w t + 1 , i = w t , i &beta; t 1 - | h j ( x i ) - y i |
其中,
最后的强分类器为:
c ( x ) = 1 , &Sigma; t = 1 T a t h t ( x ) &GreaterEqual; 1 2 &Sigma; t = 1 T a t 0 , e l s e
其中,
10.根据权利要求1所述的基于图像处理技术的机场道面破损检测方法,其特征在于,所述对预处理后的图像中的机场道面图像进行不变矩形状特征提取,利用Adaboost分类器算法对提取的特征进行检测分类,确定图像特征内的道面破损之后,包括:
采用图像金字塔结构存储并管理采集的图像数据、定位数据和道面破损检测数据。
CN201610210937.0A 2016-04-05 2016-04-05 一种基于图像处理技术的机场道面破损检测方法 Pending CN105931216A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610210937.0A CN105931216A (zh) 2016-04-05 2016-04-05 一种基于图像处理技术的机场道面破损检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610210937.0A CN105931216A (zh) 2016-04-05 2016-04-05 一种基于图像处理技术的机场道面破损检测方法

Publications (1)

Publication Number Publication Date
CN105931216A true CN105931216A (zh) 2016-09-07

Family

ID=56840141

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610210937.0A Pending CN105931216A (zh) 2016-04-05 2016-04-05 一种基于图像处理技术的机场道面破损检测方法

Country Status (1)

Country Link
CN (1) CN105931216A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107192417A (zh) * 2017-07-21 2017-09-22 中国人民解放军空军工程大学 基于不中断交通的公路飞机跑道道面使用性能测试方法
CN108647593A (zh) * 2018-04-26 2018-10-12 东华大学 基于图像处理和svm的无人机路面破损分类检测方法
CN108992947A (zh) * 2018-08-17 2018-12-14 浙江大丰实业股份有限公司 舞台威压破坏度估算平台
CN110069972A (zh) * 2017-12-11 2019-07-30 赫克斯冈技术中心 自动探测真实世界物体
CN112666167A (zh) * 2020-12-22 2021-04-16 成都圭目机器人有限公司 一种评估水泥混凝土道面裂缝产生fod风险的方法和装置
CN113029126A (zh) * 2021-03-05 2021-06-25 成都国铁电气设备有限公司 车载接触网电分相线路标志检测装置和方法
CN114418957A (zh) * 2021-12-24 2022-04-29 广州大学 基于机器人视觉的全局和局部二值模式图像裂缝分割方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011065814A1 (en) * 2009-11-26 2011-06-03 Universiti Teknologi Malaysia Methods and system for recognizing wood species
CN102737252A (zh) * 2012-06-01 2012-10-17 西南交通大学 基于仿射不变矩的电气化铁路绝缘子片间异物污染故障检测方法
CN103413144A (zh) * 2013-07-29 2013-11-27 西北工业大学 基于局部全局特征联合决策的机场检测识别方法
CN104977313A (zh) * 2014-04-09 2015-10-14 四川省特种设备检验研究院 一种焊缝x射线图像缺陷检测与识别方法和装置
CN105069410A (zh) * 2015-07-24 2015-11-18 深圳市佳信捷技术股份有限公司 基于非结构化的道路识别方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011065814A1 (en) * 2009-11-26 2011-06-03 Universiti Teknologi Malaysia Methods and system for recognizing wood species
CN102737252A (zh) * 2012-06-01 2012-10-17 西南交通大学 基于仿射不变矩的电气化铁路绝缘子片间异物污染故障检测方法
CN103413144A (zh) * 2013-07-29 2013-11-27 西北工业大学 基于局部全局特征联合决策的机场检测识别方法
CN104977313A (zh) * 2014-04-09 2015-10-14 四川省特种设备检验研究院 一种焊缝x射线图像缺陷检测与识别方法和装置
CN105069410A (zh) * 2015-07-24 2015-11-18 深圳市佳信捷技术股份有限公司 基于非结构化的道路识别方法及装置

Non-Patent Citations (10)

* Cited by examiner, † Cited by third party
Title
亢洁 等: ""基于CB形态滤波的形态学纸病检测方法研究"", 《中华纸业》 *
庞玉红 等: ""基于神经网络和不变矩的路面破损图像识别"", 《机电产品开发与创新》 *
李春生 等: ""基于Zernike矩的图像不变性识别研究"", 《科技信息 科教前沿》 *
李海青 等: "《特种检测技术及应用》", 30 June 2006 *
李言俊 等: "《景象匹配与目标识别技术》", 31 August 2009 *
杨丹 等: "《MATLAB图像处理实例详解》", 31 July 2013 *
董贤军 等: ""CB 形态学的边缘检测算法研究"", 《计算机工程与应用》 *
谢剑斌 等: "《视觉感知与智能视频监控》", 31 March 2012 *
郑雪莲: ""CB形态学边缘检测方法"", 《中国优秀硕士学位论文全文数据库信息科技辑》 *
闫钧华 等: ""基于局部多特征的机场跑道检测算法"", 《仪器仪表学报》 *

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107192417A (zh) * 2017-07-21 2017-09-22 中国人民解放军空军工程大学 基于不中断交通的公路飞机跑道道面使用性能测试方法
CN107192417B (zh) * 2017-07-21 2019-07-12 中国人民解放军空军工程大学 基于不中断交通的公路飞机跑道道面使用性能测试方法
CN110069972A (zh) * 2017-12-11 2019-07-30 赫克斯冈技术中心 自动探测真实世界物体
CN110069972B (zh) * 2017-12-11 2023-10-20 赫克斯冈技术中心 自动探测真实世界物体
CN108647593A (zh) * 2018-04-26 2018-10-12 东华大学 基于图像处理和svm的无人机路面破损分类检测方法
CN108992947A (zh) * 2018-08-17 2018-12-14 浙江大丰实业股份有限公司 舞台威压破坏度估算平台
CN108992947B (zh) * 2018-08-17 2020-05-29 浙江大丰实业股份有限公司 舞台威亚破坏度估算平台
CN112666167A (zh) * 2020-12-22 2021-04-16 成都圭目机器人有限公司 一种评估水泥混凝土道面裂缝产生fod风险的方法和装置
CN113029126A (zh) * 2021-03-05 2021-06-25 成都国铁电气设备有限公司 车载接触网电分相线路标志检测装置和方法
CN114418957A (zh) * 2021-12-24 2022-04-29 广州大学 基于机器人视觉的全局和局部二值模式图像裂缝分割方法

Similar Documents

Publication Publication Date Title
CN105931216A (zh) 一种基于图像处理技术的机场道面破损检测方法
CN105160309B (zh) 基于图像形态学分割及区域生长的三车道检测方法
CN105931217A (zh) 一种基于图像处理技术的机场道面fod异物检测方法
CN109949361A (zh) 一种基于单目视觉定位的旋翼无人机姿态估计方法
CN102426019B (zh) 一种无人机景象匹配辅助导航方法及系统
CN107463890B (zh) 一种基于单目前视相机的前车检测与跟踪方法
CN104091369A (zh) 一种无人机遥感影像建筑物三维损毁检测方法
CN109460709A (zh) 基于rgb和d信息融合的rtg视觉障碍物检测的方法
CN104778721A (zh) 一种双目图像中显著性目标的距离测量方法
Salehi et al. Automatic moving vehicles information extraction from single-pass WorldView-2 imagery
CN103218605B (zh) 一种基于积分投影与边缘检测的快速人眼定位方法
CN107330925A (zh) 一种基于激光雷达深度图像的多障碍物检测和跟踪方法
CN104484668A (zh) 一种无人机多重叠遥感影像的建筑物轮廓线提取方法
CN103679205B (zh) 基于阴影假设和分层hog对称特征验证的前车检测方法
CN101329402B (zh) 基于改进Wedgelet的多尺度SAR图像边缘检测方法
CN107480585A (zh) 基于dpm算法的目标检测方法
CN104376595A (zh) 一种基于机载LiDAR和GIS协同的三维道路生成方法
CN104361340A (zh) 基于显著性检测和聚类的sar图像目标快速检测方法
CN108710909B (zh) 一种可变形旋转不变装箱物体清点方法
CN103729853A (zh) 三维gis辅助下的高分遥感影像建筑物倒损检测方法
JP6347064B2 (ja) レーザー計測結果解析システム
CN106803262A (zh) 利用双目视觉自主解算汽车速度的方法
CN105547287A (zh) 一种不规则天体导航视线信息提取方法
CN106096555A (zh) 三维面部检测的方法和装置
CN106778540A (zh) 停车检测准确的基于双层背景的停车事件检测方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20160907