CN102930300A - 一种飞机目标识别方法及系统 - Google Patents
一种飞机目标识别方法及系统 Download PDFInfo
- Publication number
- CN102930300A CN102930300A CN2012104774958A CN201210477495A CN102930300A CN 102930300 A CN102930300 A CN 102930300A CN 2012104774958 A CN2012104774958 A CN 2012104774958A CN 201210477495 A CN201210477495 A CN 201210477495A CN 102930300 A CN102930300 A CN 102930300A
- Authority
- CN
- China
- Prior art keywords
- matrix
- aircraft
- class
- training sample
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Analysis (AREA)
Abstract
本发明公开一种飞机目标识别方法及系统,方法包括:建立飞机图像数据库并从中提取训练样本,将其中所有图像用向量空间中的矩阵表示;计算矩阵中各向量间的欧氏距离,依此计算同类飞机间的相似度矩阵和不同类飞机间的相似度矩阵;根据相似度矩阵计算类内拉普拉斯矩阵和类间拉普拉斯矩阵;根据类内拉普拉斯矩阵和类间拉普拉斯矩阵构建图保留目标函数,利用广义特征值求解目标函数得到最优子空间;根据最优子空间计算训练样本的特征向量和待识别飞机的特征向量;计算待识别飞机的特征向量与训练样本的特征向量间的欧氏距离,依此利用最近邻分类法对待识别飞机的特征向量分类,得到识别结果。本发明在飞机存在大姿态变换的情况下,仍能保证高识别率。
Description
技术领域
本发明涉及模式识别和计算机视觉技术,尤其涉及一种飞机目标识别方法及系统。
背景技术
从二维图像中识别三维运动目标,一直是计算机视觉与模式识别的研究热点和技术难点。飞机作为一类典型的三维运动目标,分析其特征并对其进行机型的自动识别始终受到国内外学者的研究和关注。鉴于飞机飞行时所处的姿态、飞机与电荷耦合器件(CCD,Charge Coupled Device)相机的相对位置、飞机所处环境等多方面因素的影响,导致飞机图像上呈现出飞机发生相似变换、仿射变换、尺度变化、存在噪声、目标被遮挡等情况,从而造成提取飞机图像的不变量特征比较困难,飞机机型识别难度较大。
传统的飞机图像识别方法,主要是根据飞机图像的外形轮廓信息提取不变量特征,并结合各种分类器进行飞机机型的判定。截止目前对不变量特征提取的研究,产生了大量类别的不变量特征,如Hu矩、仿射矩、Zernike矩、小波矩、角点特征、SIFT特征等,这些特征被广泛应用于飞机图像识别的研究中,显示出各自的优势和不足。其中,Hu矩是由7个不变矩构成的一组特征量,这些特征量具有旋转、缩放和平移不变性;仿射矩是对于二维仿射变换具有不变性的特征量;角点特征是指,图像中目标边界上曲率超过一定阈值的局部极大值点;SIFT特征是一种基于尺度空间的,对图像平移、旋转、缩放、甚至仿射变换保持不变性的图像局部特征。
在这些不变量特征中,不同类别的不变量特征,对飞机在各种飞行情况下采集到的图像有不同的不变性容忍能力;如:仿射矩能够在飞机飞行时由于俯仰角和横滚角小角度变化导致的飞机图像畸变、扭曲情况下,保持不变;小波矩能够在飞机图像大小存在尺度变化时保持不变;SIFT特征能够在飞机图像存在仿射变化时保持不变,且具有较好的抗噪性能。因此,采用单一类别的不变量特征,容易满足某些特定应用环境的识别要求,而对其他应用环境的识别效果较差。如果单独利用某一类别的不变量特征,结合分类器,去构造在各种环境下都有较高识别率的飞机图像识别系统,是不可行的。
根据整体可由多个个体组成的原则,如果能将多个类别的不变量特征根据各种规则融合起来,则可以构造出较为通用的飞机图像识别系统,从而有效提高飞机在各种环境影响下的识别率。目前一种基于多不变量和多分类器融合的飞机识别方法,是将飞机图像的4种不变量特征:仿射矩、Zernike矩、小波矩、SIFT特征点梯度模值,结合支持向量机组成4种分类器,采用自适应权重投票法进行多分类器融合,以提高飞机机型识别率。该方法相比单一类别的不变量特征识别方法,对飞机在多环境影响下的识别率有了较大提高。但该方法在实现过程中针对不同飞机图像情况需要选择不变量特征和分类器、以及确定融合方式,整个过程不满足飞机识别中实时性的要求;并且该方法对于诸如图像中的飞机存在大姿态变换时,这些不变量的特征会存在多值性,因此对于这种情况,该识别方法的通用性会大大降低,存在识别率低下或失效的问题。
发明内容
有鉴于此,本发明的主要目的在于提供一种飞机目标识别方法及系统,以解决飞机存在大姿态变换时,现有识别方法存在识别率低下或失效的问题。
为达到上述目的,本发明的技术方案是这样实现的:
本发明提供一种飞机目标识别方法,该方法包括:
建立飞机图像数据库,从所述飞机图像数据库中提取训练样本,并将所述训练样本的所有图像用向量空间中的矩阵X表示;
计算所述矩阵X中各个向量之间的欧氏距离;
根据所述矩阵X中各个向量之间的欧氏距离,计算同类飞机间的相似度矩阵W和不同类飞机间的相似度矩阵Wp;
根据所述相似度矩阵计算类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp;
根据所述类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp构建图保留目标函数,并利用广义特征值求解所述目标函数,得到最优子空间;
根据所述最优子空间计算训练样本的特征向量以及待识别飞机的特征向量;
计算所述待识别飞机的特征向量与训练样本的特征向量之间的欧氏距离,并根据计算得到的欧氏距离利用最近邻分类法对所述待识别飞机的特征向量进行分类,得到识别结果。
所述建立飞机图像数据库包括:
采集各类飞机不同位置和旋转角度下的顶视图仿射图像,并采集各类飞机存在尺度变换、俯仰角变换、横滚角变换的顶视图仿射图像,根据采集的所述顶视图仿射图像建立飞机图像数据库。
所述计算同类飞机间的相似度矩阵W和不同类飞机间的相似度矩阵Wp,包括:
根据所述矩阵X中各个向量之间的欧氏距离、以及先验类别信息,通过以下方式计算同类飞机间的相似度矩阵W:
其中,表示同一类样本xi的k1个最近邻点的搜索集;
引入热能核函数并通过以下方式计算不同类飞机间的相似度矩阵Wp:
所述根据相似度矩阵计算类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp,包括:
通过以下方式计算类内拉普拉斯矩阵B:B=D-W,
通过以下方式计算类间拉普拉斯矩阵Bp:Bp=Dp-Wp;
所根据类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp构建图保留目标函数,并利用广义特征值求解所述目标函数,得到最优子空间,包括:
通过以下方式计算离散拉普拉斯约束方程:其中,Δ为二维拉普拉斯滤波器的离散近似,通过得到,D1为图像横向的修正诺埃曼Neuman近似矩阵,D2为图像纵向的修正Neuman近似矩阵,I1为与D1对应的大小相同的单位矩阵,I2为与D2对应的大小相同的单位矩阵,表示克罗内克积,a表示目标函数待求解的子空间;
根据建立的目标函数,通过广义特征值分解求解子空间基向量a,所述目标函数转换为:通过广义特征值分解,得到的最大l个特征值对应的l个特征向量A=[a1,a2,...,al]即为目标函数所需的最优子空间,0<l<m,m表示向量的维度。
所述根据最优子空间计算训练样本的特征向量以及待识别飞机的特征向量,包括:
将训练样本的图像Xtrain线性投影到所述最优子空间获取所述训练样本的特征向量,即Ytrain=ATXtrain,Ytrain表示训练样本的特征矩阵,AT表示A的转置;
将待识别飞机的图像Xtest线性投影到所述最优子空间获取所述待识别飞机的特征向量,即Y=ATXtest,其中,Y表示待识别飞机的特征矩阵,所述特征矩阵的维度为l×N,表示l维的N个待识别飞机图像的特征向量。
本发明还提供一种飞机目标识别系统,该系统包括:
数据库模块,用于存储飞机图像数据库;
训练样本模块,用于从所述飞机图像数据库中提取训练样本,并将所述训练样本的所有图像用向量空间中的矩阵X表示,计算所述矩阵X中各个向量之间的欧氏距离;根据所述矩阵X中各个向量之间的欧氏距离,计算同类飞机间的相似度矩阵W和不同类飞机间的相似度矩阵Wp;根据所述相似度矩阵计算类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp;根据所述类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp构建图保留目标函数,并利用广义特征值求解所述目标函数,得到最优子空间;根据所述最优子空间计算训练样本的特征向量;
识别模块,用于根据所述最优子空间计算待识别飞机的特征向量;计算所述待识别飞机的特征向量与训练样本的特征向量之间的欧氏距离,并根据计算得到的欧氏距离利用最近邻分类法对所述待识别飞机的特征向量进行分类,得到识别结果。
该系统还包括数据库建立模块,用于采集各类飞机不同位置和旋转角度下的顶视图仿射图像,并采集各类飞机存在尺度变换、俯仰角变换、横滚角变换的顶视图仿射图像,根据采集的所述顶视图仿射图像建立飞机图像数据库。
所述训练样本模块进一步用于,通过以下方式计算同类飞机间的相似度矩阵W和不同类飞机间的相似度矩阵Wp:
根据所述矩阵X中各个向量之间的欧氏距离、以及先验类别信息,通过以下方式计算同类飞机间的相似度矩阵W:
引入热能核函数并通过以下方式计算不同类飞机间的相似度矩阵Wp:
所述训练样本模块进一步用于,通过以下方式,根据相似度矩阵计算类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp:
通过以下方式计算类内拉普拉斯矩阵B:B=D-W,
通过以下方式计算类间拉普拉斯矩阵Bp:Bp=Dp-Wp;
所述训练样本模块进一步用于,通过以下方式,根据类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp构建图保留目标函数,并利用广义特征值求解所述目标函数,得到最优子空间:
通过以下方式计算离散拉普拉斯约束方程:其中,Δ为二维拉普拉斯滤波器的离散近似,通过得到,D1为图像横向的修正诺埃曼Neuman近似矩阵,D2为图像纵向的修正Neuman近似矩阵,I1为与D1对应的大小相同的单位矩阵,I2为与D2对应的大小相同的单位矩阵,表示克罗内克积,a表示目标函数待求解的子空间;
根据建立的目标函数,通过广义特征值分解求解子空间基向量a,所述目标函数转换为:通过广义特征值分解,得到的最大l个特征值对应的l个特征向量A=[a1,a2,...,al]即为目标函数所需的最优子空间,0<l<m,m表示向量的维度。
所述训练样本模块进一步用于,通过以下方式,根据最优子空间计算训练样本的特征向量:
将训练样本的图像Xtrain线性投影到所述最优子空间获取所述训练样本的特征向量,即Ytrain=ATXtrain,Ytrain表示训练样本的特征矩阵,AT表示A的转置。
所述识别模块进一步用于,通过以下方式,根据最优子空间计算待识别飞机的特征向量:
将待识别飞机的图像Xtest线性投影到所述最优子空间获取所述待识别飞机的特征向量,即Y=ATXtest,其中,Y表示待识别飞机的特征矩阵,所述特征矩阵的维度为l×N,表示l维的N个待识别飞机图像的特征向量,AT表示A的转置。
本发明所提供的一种飞机目标识别方法及系统,在飞机存在大姿态变换的情况下,仍能保证较高的识别率;且本发明能够满足飞机识别中实时性的要求,能够适应多种不同情况下的飞机目标识别,通用性较高。
附图说明
图1为本发明实施例的一种飞机目标识别方法的流程图;
图2为本发明实施例的图像集一中的飞机图像示意图;
图3为本发明实施例的图像集二中的飞机图像示意图;
图4为本发明实施例的一种飞机目标识别系统的结构示意图;
图5为本发明实施例的一种测试系统的结构示意图;
图6为本发明实施例中WMFA-SS与其他五种算法的识别率-特征维度示意图。
具体实施方式
下面结合附图和具体实施例对本发明的技术方案进一步详细阐述。
本发明实施例提供的一种飞机目标识别方法,如图1所示,主要包括:
步骤101,建立飞机图像数据库,从所述飞机图像数据库中提取训练样本,并将训练样本的所有图像用向量空间中的矩阵X表示。
其中,建立飞机图像数据库包括:采集各类飞机不同位置和旋转角度下的顶视图仿射图像,并采集各类飞机存在尺度变换、俯仰角变换、横滚角变换的顶视图仿射图像,根据采集的所述顶视图仿射图像建立飞机图像数据库。
下面以F22、F111、M2000、SU27这四类外形相似的飞机为例,详细说明飞机图像数据库的建立过程。
利用3DsMax软件采集各类飞机(本实施例中包括F22、F111、M2000、SU27这四类飞机)不同位置和旋转角度下的顶视图仿射图像(简称图像集一),包括:
首先采集飞机在图像存在上、下、左、右移动5个像素(本发明实施例并不仅限于5个像素,也可以为其他数值)的位置变换图像,这样每类飞机获得5幅图像(包括没发生移动的原图像、上移动5个像素的位置变换图像、下移5个像素的位置变换图像、左移5个像素的位置变换图像、右移5个像素的位置变换图像);
再对上述每幅图像进行20度为间隔(本发明实施例并不仅限于20度,也可以为其他数值)的360度旋转变换,这样每类飞机获得90(5×360/20)幅存在平移变换和旋转变换的图像,4类飞机一共获得360幅图像;
再对每幅图像进行预处理,即将灰度图像变为二值图像,图像大小统一变为48×48像素的图像,处理后所有图像为48×48像素的二值图像,如图2所示,图中(a)、(b)、(c)、(d)分别代表F22、F111、M2000、SU27的二值图像。
利用3DsMax软件采集各类飞机(本实施例中包括F22、F111、SU27这三类飞机)存在尺度变换、俯仰角变换、横滚角变换的顶视图仿射图像(简称图像集二),包括:
首先采集每类飞机的俯仰角和横滚角图像,从-20度到20度每隔5度(本发明实施例并不仅限于从-20度到20度,也可以为其他范围,也不仅限于5度的间隔,还可以为其他间隔)为间隔进行采集,这样每类飞机一共得到81(即9种俯仰角×9种横滚角)幅图像;
再对每一幅图像进行7种(本发明实施例并不仅限于7种,也可以为其他数值)尺度变换,即缩小或放大为原图的1/2、3/4、1、3/2、7/4、2倍(本发明实施例并不仅限于这些倍数,也可以为其他数值),最终每类飞机获得567(81×7)幅图像,并同时也对所有图像预处理成48×48的二值图像,如图3所示,图中(a)、(b)、(c)分别代表F22、F111、SU27的二值图像。
如此一来,数据库所包含的信息如下表所示:
从飞机图像数据库中提取训练样本,将训练样本的所有图像用向量空间中的矩阵X=[x1,x2,...,xN]表示,其中,N表示训练样本的飞机图像总数,该飞机图像集中的飞机类别为c类,每个向量xi的维度为48×48=2304,对应的类别标签ci∈{1,2,...,Nc},Nc是指训练样本中第c类飞机图像的总数。
在实际应用中,可以提取飞机图像数据库中的所有图像作为训练样本,也可以提取飞机图像数据库中的部分图像作为训练样本。例如:从飞机图像数据库的图像集一中选取200幅图像、数据库的图像集二中选取900幅图像作为训练样本。后续以提取飞机图像数据库中的所有图像作为训练样本为例进行说明。
对于数据库的图像集一,N为360,c为4,Nc为90,ci=1代表的飞机图像为F111,ci=2代表的飞机图像为F22,ci=3代表的飞机图像为M2000,ci=4代表的飞机图像为SU27;
对于数据库的图像集二,N为1701,c为3,Nc为576,ci=1代表的飞机图像为F111,ci=2代表的飞机图像为F22,ci=3代表的飞机图像为SU27。
步骤102,计算所述矩阵X中各个向量之间的欧氏距离。
欧氏距离也称作欧几里得距离,矩阵X中xi向量与xj向量的欧氏距离计算公式为:m表示xi和xj向量是m维空间。对应上述的飞机图像数据库举例,其m=2304,计算矩阵X中的各个向量的欧氏距离得到的是一个N×N的对称矩阵E,N是指矩阵X所表示的N个向量,xi和xj之间的欧氏距离用Dij表示。
步骤103,根据所述矩阵X中各个向量之间的欧氏距离,计算同类飞机间的相似度矩阵W和不同类飞机间的相似度矩阵Wp。
具体的:
根据矩阵X中各个向量之间的欧氏距离、以及先验类别信息计算同类飞机间的相似度矩阵W,计算公式为: 其中,是同一类样本xi的k1个最近邻点的搜索集;k1指的是距离xi这个点最近的k1个点,并且这k1个点都代表与xi同样型号的飞机,k1的取值是一个开放性的选择,通常为2到Nc-1之间,Nc是指第c类飞机图像的总数;先验类别信息是指,已知这幅飞机图像中的飞机具体是哪一个型号的飞机,例如是F22或SU27;
引入热能核函数计算不同类飞机间的相似度矩阵Wp,计算公式为: 其中,表示属于 的k2近邻的数据对集合。πc表示飞机型号的索引集合,例如:在上述图像集一中,πc为{1,2,3,4},分别表示F22、F111、M2000、SU27,图像集二中,πc为{1,2,3};因此,如果i∈π2表示xi是属于型号为2的飞机,即F111;是指xi属于这个类别,xj属于另外的一个类别。
ci是指xi这个点所表示的飞机型号类别,例如i=2是指x2这个点属于c2=1,即为型号1的飞机,i=200是指x200这个点属于c4=4,即为型号4的飞机;以图像集一中选取200幅图像为训练样本为例,当1≤i≤50时,ci=1,当51≤i≤100时,ci=2,当101≤i≤150时,ci=3,当151≤i≤200时,ci=4;表示从所有点中选取的两个点xi、xj必须是分属于不同类别的,并且xi、xj这两个点是离得最近的k2个点。
步骤104,根据所述相似度矩阵计算类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp。
具体的:
类内拉普拉斯矩阵B的计算公式为:B=D-W,
类间拉普拉斯矩阵Bp的计算公式为:Bp=Dp-Wp。
步骤105,根据所述类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp构建图保留目标函数,并利用广义特征值求解所述目标函数,得到最优子空间。
具体的:
计算离散拉普拉斯约束方程,其计算公式为:其中,Δ为二维拉普拉斯滤波器的离散近似,其计算公式为:D1为图像横向的修正诺埃曼(Neuman)近似矩阵,D2为图像纵向的修正Neuman近似矩阵,I1为与D1对应的大小相同的单位矩阵,I2为与D2对应的大小相同的单位矩阵,表示克罗内克(kronecker)积,a表示为最终目标函数待求解的子空间;
根据上述建立的目标函数,通过广义特征值分解求解子空间基向量a,上述目标函数可以转换为:通过广义特征值分解,求得的最大l个特征值对应的l个特征向量A=[a1,a2,...,al]即是目标函数所需的最优子空间。
步骤106,根据所述最优子空间计算训练样本的特征向量以及待识别飞机的特征向量。
具体的:
将训练样本的图像Xtrain线性投影到所述最优子空间获取所述训练样本的特征向量,即Ytrain=ATXtrain,Ytrain表示训练样本的特征矩阵,AT表示A的转置;
将待识别的飞机图像Xtest线性投影到此子空间获取其特征向量,计算公式为:Y=ATXtest,其中,Y即是待识别飞机的特征矩阵,其维度为l×N,表示l维的N个待识别飞机图像的特征向量。
本发明实施例的这种特征向量计算方法,也称为一种基于空间平滑的加权边缘鉴别分析(WMFA-SS)特征提取方法。
步骤107,计算所述待识别飞机的特征向量与训练样本的特征向量之间的欧氏距离,并根据计算得到的欧氏距离利用最近邻分类法对所述待识别飞机的特征向量进行分类,得到识别结果。
具体的:选取一个测试样本(即待识别飞机图像)的特征向量,计算该测试样本的特征向量与所有训练样本的特征向量之间的欧氏距离,从中选择最小的欧氏距离,将该测试样本的类别归为与其欧氏距离最小的训练样本的类别(训练样本的类别已知);
对于所有测试样本,都是按照上述这种方式来进行类别的确定。
需要说明的是,本发明对飞机的识别并不仅限于上述实施例所举的4类飞机,对于其他类型的飞机,根据本发明实施例的技术方案,也能很好的进行识别。
本发明实施例还提供一种飞机目标识别系统,如图4所示,该系统包括:数据库模块10、训练样本模块20和识别模块30。其中,
数据库模块10,用于存储飞机图像数据库;
训练样本模块20,用于从所述飞机图像数据库中提取训练样本,并将所述训练样本的所有图像用向量空间中的矩阵X表示,计算所述矩阵X中各个向量之间的欧氏距离;根据所述矩阵X中各个向量之间的欧氏距离,计算同类飞机间的相似度矩阵W和不同类飞机间的相似度矩阵Wp;根据所述相似度矩阵计算类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp;根据所述类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp构建图保留目标函数,并利用广义特征值求解所述目标函数,得到最优子空间;根据所述最优子空间计算训练样本的特征向量;
识别模块30,用于根据所述最优子空间计算待识别飞机的特征向量;计算所述待识别飞机的特征向量与训练样本的特征向量之间的欧氏距离,并根据计算得到的欧氏距离利用最近邻分类法对所述待识别飞机的特征向量进行分类,得到识别结果。
较佳的,该系统还包括数据库建立模块40,用于采集各类飞机不同位置和旋转角度下的顶视图仿射图像,并采集各类飞机存在尺度变换、俯仰角变换、横滚角变换的顶视图仿射图像,根据采集的所述顶视图仿射图像建立飞机图像数据库。
所述训练样本模块20进一步用于,通过以下方式计算同类飞机间的相似度矩阵W和不同类飞机间的相似度矩阵Wp:
根据所述矩阵X中各个向量之间的欧氏距离、以及先验类别信息,通过以下方式计算同类飞机间的相似度矩阵W:
引入热能核函数并通过以下方式计算不同类飞机间的相似度矩阵Wp:
所述训练样本模块20进一步用于,通过以下方式,根据相似度矩阵计算类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp:
通过以下方式计算类内拉普拉斯矩阵B:B=D-W,
通过以下方式计算类间拉普拉斯矩阵Bp:Bp=Dp-Wp;
所述训练样本模块20进一步用于,通过以下方式,根据类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp构建图保留目标函数,并利用广义特征值求解所述目标函数,得到最优子空间:
通过以下方式计算离散拉普拉斯约束方程:其中,Δ为二维拉普拉斯滤波器的离散近似,通过得到,D1为图像横向的修正Neuman近似矩阵,D2为图像纵向的修正Neuman近似矩阵,I1为与D1对应的大小相同的单位矩阵,I2为与D2对应的大小相同的单位矩阵,表示克罗内克积,a表示目标函数待求解的子空间;
根据建立的目标函数,通过广义特征值分解求解子空间基向量a,所述目标函数转换为:通过广义特征值分解,得到的最大l个特征值对应的l个特征向量A=[a1,a2,...,al]即为目标函数所需的最优子空间,0<l<m,m表示向量的维度。
所述训练样本模块20进一步用于,通过以下方式,根据最优子空间计算训练样本的特征向量:
将训练样本的图像Xtrain线性投影到所述最优子空间获取所述训练样本的特征向量,即Ytrain=ATXtrain,Ytrain表示训练样本的特征矩阵,AT表示A的转置。
所述识别模块30进一步用于,通过以下方式,根据最优子空间计算待识别飞机的特征向量:
将待识别飞机的图像Xtest线性投影到所述最优子空间获取所述待识别飞机的特征向量,即Y=ATXtest,其中,Y表示待识别飞机的特征矩阵,所述特征矩阵的维度为l×N,表示l维的N个待识别飞机图像的特征向量,AT表示A的转置。
为证明本发明实施例的识别方法及系统的可靠性,以及对于飞机存在多种姿态变换时仍具有较高的识别率,本发明实施例还提供了一种测试系统,如图5所示,该测试系统主要包括:数据库模块10、数据输入模块50、训练样本模块60和测试样本模块70。
数据库模块10,用于存储飞机图像数据库,所述飞机图像数据库的建立过程与前述实施例中相同,此处不再赘述;
数据输入模块50,其输入为所述飞机图像数据库中的图像,所述数据输入模块50用于对所述飞机图像数据库中的图像进行随机划分,划分为训练样本图像集和测试样本图像集;
训练样本模块60,其输入为训练样本图像集,输出为WMFA-SS子空间矩阵A和训练样本的特征向量Ytrain;训练样本模块60用于利用WMFA-SS特征提取方法训练出最优子空间矩阵A、以及通过将训练样本线性投影到此最优子空间A,获得其特征向量Ytrain;获得方法与前述实施例中相同,此处不再赘述;
测试样本模块70,其输入为测试样本图像集、由WMFA-SS特征提取方法得到的最优子空间A、以及训练样本的特征向量,输出为最终飞机识别的测试结果;
测试样本模块70将测试样本图像线性投影到由训练样本学习得到的子空间,子空间内的测试样本的表示即为测试样本的特征向量;然后,将训练样本的特征向量和测试样本的特征向量用最近邻分类方法进行分类,最终根据测试样本分类的结果与测试样本所表示的型号是否一致来计算最终的识别率。
较佳的,该测试系统还可以包括:结果输出模块、主界面、用户界面模块;其中,结果输出模块用于从所述测试样本模块70中读取所述飞机图像的识别结果,并在主界面上的图像结果显示区输出识别结果所对应的最佳特征维度;主界面用于实时显示训练样本模块60的训练过程及结果、测试图像的投影过程以及分类识别结果;用户界面模块,用于处理用户对界面的操作,包括移动、最大化、最小化窗口以及需训练图像和识别图像在所述主界面上的显示和更新。
通过上述测试系统,利用前述数据库的图像集一进行测试评价,评价的目的是为了证明本发明的识别方法及系统相比现有的识别方法和系统,对于大姿态旋转角度下的飞机识别具有更高的可识别性。测试中随机选取数据库的图像集一中的200幅图像用于训练样本模块进行训练,其余的160幅图像即用于测试样本模块进行测试。为了保证测试的客观性,所有测试系统都运行30次,最终选取了识别率最高的一次为识别率-特征维度关系图,即WMFA-SS算法与其他5种现有识别方法在不同特征维度下的识别率关系,如图6所示,并将30次识别率的平均值、方差和最大值列于图6中。WMFA-SS算法与其他五种算法的识别率比较如下表所示:
算法 | 识别率(均值±方差%) | 最高识别率(%) |
PCA+LDA | 70.1±7.37(3) | 74.4(3) |
PCA+MFA | 72.5±0.57(4) | 75.0(4) |
PCA+WMFA | 73.1±1.34(6) | 77.0(6) |
LDA-SS | 70.5±0.49(2) | 82.5(2) |
MFA-SS | 81.1±0.58(3) | 86.3(3) |
WMFA-SS | 85.4±0.78(3) | 90.0(3) |
上表中,PCA是指主成分分析,LDA是指线性鉴别分析,MFA是指边缘鉴别分析,WMFA是指加权边缘鉴别分析,LDA-SS是指基于空间平滑的线性鉴别分析,WMFA-SS是指基于空间平滑的加权边缘鉴别分析。
利用前述数据库的图像集二进行测试评价,评价目的是为了证明本发明的识别方法及系统相比现有的识别方法和系统,对于不同变换(尺度、俯仰旋转、横滚角旋转)下以及飞机部分被遮挡的情况下的飞机识别具有更高的可识别性。本测试随机选取数据库的图像集二中的900幅图像用于训练样本模块进行训练,其余的801幅图像即用于测试样本模块进行测试。现有飞机识别算法-基于多不变量和多分类器融合的飞机识别算法(MCF-MI)与本发明的识别率比较如下表所示:
算法 | 识别率(%) | 特征维度 |
MCF-MI | 92.18 | / |
WMFA-SS | 99.25 | 9 |
可以看出,本发明的识别系统对于不同变换下、以及飞机出现部分被遮挡情况下的识别率高于现有的识别算法MCF-MI。
综上所述,本发明实施例的飞机目标识别方法及系统,在飞机存在大姿态变换的情况下,仍能保证较高的识别率;且本发明能够满足飞机识别中实时性的要求,能够适应多种不同情况下的飞机目标识别,通用性较高。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。
Claims (13)
1.一种飞机目标识别方法,其特征在于,该方法包括:
建立飞机图像数据库,从所述飞机图像数据库中提取训练样本,并将所述训练样本的所有图像用向量空间中的矩阵X表示;
计算所述矩阵X中各个向量之间的欧氏距离;
根据所述矩阵X中各个向量之间的欧氏距离,计算同类飞机间的相似度矩阵W和不同类飞机间的相似度矩阵Wp;
根据所述相似度矩阵计算类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp;
根据所述类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp构建图保留目标函数,并利用广义特征值求解所述目标函数,得到最优子空间;
根据所述最优子空间计算训练样本的特征向量以及待识别飞机的特征向量;
计算所述待识别飞机的特征向量与训练样本的特征向量之间的欧氏距离,并根据计算得到的欧氏距离利用最近邻分类法对所述待识别飞机的特征向量进行分类,得到识别结果。
2.根据权利要求1所述飞机目标识别方法,其特征在于,所述建立飞机图像数据库包括:
采集各类飞机不同位置和旋转角度下的顶视图仿射图像,并采集各类飞机存在尺度变换、俯仰角变换、横滚角变换的顶视图仿射图像,根据采集的所述顶视图仿射图像建立飞机图像数据库。
5.根据权利要求4所述飞机目标识别方法,其特征在于,所根据类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp构建图保留目标函数,并利用广义特征值求解所述目标函数,得到最优子空间,包括:
通过以下方式计算离散拉普拉斯约束方程:其中,Δ为二维拉普拉斯滤波器的离散近似,通过得到,D1为图像横向的修正诺埃曼Neuman近似矩阵,D2为图像纵向的修正Neuman近似矩阵,I1为与D1对应的大小相同的单位矩阵,I2为与D2对应的大小相同的单位矩阵,表示克罗内克积,a表示目标函数待求解的子空间;
6.根据权利要求5所述飞机目标识别方法,其特征在于,所述根据最优子空间计算训练样本的特征向量以及待识别飞机的特征向量,包括:
将训练样本的图像Xtrain线性投影到所述最优子空间获取所述训练样本的特征向量,即Ytrain=ATXtrain,Ytrain表示训练样本的特征矩阵,AT表示A的转置;
将待识别飞机的图像Xtest线性投影到所述最优子空间获取所述待识别飞机的特征向量,即Y=ATXtest,其中,Y表示待识别飞机的特征矩阵,所述特征矩阵的维度为l×N,表示l维的N个待识别飞机图像的特征向量。
7.一种飞机目标识别系统,其特征在于,该系统包括:
数据库模块,用于存储飞机图像数据库;
训练样本模块,用于从所述飞机图像数据库中提取训练样本,并将所述训练样本的所有图像用向量空间中的矩阵X表示,计算所述矩阵X中各个向量之间的欧氏距离;根据所述矩阵X中各个向量之间的欧氏距离,计算同类飞机间的相似度矩阵W和不同类飞机间的相似度矩阵Wp;根据所述相似度矩阵计算类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp;根据所述类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp构建图保留目标函数,并利用广义特征值求解所述目标函数,得到最优子空间;根据所述最优子空间计算训练样本的特征向量;
识别模块,用于根据所述最优子空间计算待识别飞机的特征向量;计算所述待识别飞机的特征向量与训练样本的特征向量之间的欧氏距离,并根据计算得到的欧氏距离利用最近邻分类法对所述待识别飞机的特征向量进行分类,得到识别结果。
8.根据权利要求7所述飞机目标识别系统,其特征在于,该系统还包括数据库建立模块,用于采集各类飞机不同位置和旋转角度下的顶视图仿射图像,并采集各类飞机存在尺度变换、俯仰角变换、横滚角变换的顶视图仿射图像,根据采集的所述顶视图仿射图像建立飞机图像数据库。
11.根据权利要求10所述飞机目标识别系统,其特征在于,所述训练样本模块进一步用于,通过以下方式,根据类内拉普拉斯矩阵B和类间拉普拉斯矩阵Bp构建图保留目标函数,并利用广义特征值求解所述目标函数,得到最优子空间:
通过以下方式计算离散拉普拉斯约束方程:其中,Δ为二维拉普拉斯滤波器的离散近似,通过得到,D1为图像横向的修正诺埃曼Neuman近似矩阵,D2为图像纵向的修正Neuman近似矩阵,I1为与D1对应的大小相同的单位矩阵,I2为与D2对应的大小相同的单位矩阵,表示克罗内克积,a表示目标函数待求解的子空间;
12.根据权利要求11所述飞机目标识别系统,其特征在于,所述训练样本模块进一步用于,通过以下方式,根据最优子空间计算训练样本的特征向量:
将训练样本的图像Xtrain线性投影到所述最优子空间获取所述训练样本的特征向量,即Ytrain=ATXtrain,Ytrain表示训练样本的特征矩阵,AT表示A的转置。
13.根据权利要求11所述飞机目标识别系统,其特征在于,所述识别模块进一步用于,通过以下方式,根据最优子空间计算待识别飞机的特征向量:
将待识别飞机的图像Xtest线性投影到所述最优子空间获取所述待识别飞机的特征向量,即Y=ATXtest,其中,Y表示待识别飞机的特征矩阵,所述特征矩阵的维度为l×N,表示l维的N个待识别飞机图像的特征向量,AT表示A的转置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210477495.8A CN102930300B (zh) | 2012-11-21 | 2012-11-21 | 一种飞机目标识别方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201210477495.8A CN102930300B (zh) | 2012-11-21 | 2012-11-21 | 一种飞机目标识别方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102930300A true CN102930300A (zh) | 2013-02-13 |
CN102930300B CN102930300B (zh) | 2015-07-15 |
Family
ID=47645097
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201210477495.8A Active CN102930300B (zh) | 2012-11-21 | 2012-11-21 | 一种飞机目标识别方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102930300B (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104615987A (zh) * | 2015-02-02 | 2015-05-13 | 北京航空航天大学 | 一种基于误差反传神经网络的飞机残骸智能识别方法及系统 |
CN105243654A (zh) * | 2014-07-09 | 2016-01-13 | 北京航空航天大学 | 一种多飞机跟踪方法及系统 |
CN105335751A (zh) * | 2014-08-01 | 2016-02-17 | 深圳中集天达空港设备有限公司 | 一种基于视觉图像的泊位飞机前轮定位方法 |
CN105631431A (zh) * | 2015-12-31 | 2016-06-01 | 华中科技大学 | 一种可见光目标轮廓模型指导的飞机感兴趣区测谱方法 |
CN106127228A (zh) * | 2016-06-16 | 2016-11-16 | 北方工业大学 | 一种基于决策模板分类器融合的遥感图像船舶检测候选区鉴别方法 |
CN106407902A (zh) * | 2016-08-31 | 2017-02-15 | 西北工业大学 | 一种基于几何差异的飞机目标识别方法 |
CN111160122A (zh) * | 2019-12-11 | 2020-05-15 | 桂林长海发展有限责任公司 | 一种飞机机型识别方法、装置及存储介质 |
CN111861972A (zh) * | 2019-04-28 | 2020-10-30 | 奥菲(泰州)光电传感技术有限公司 | 目标状态识别系统 |
CN112967290A (zh) * | 2021-02-22 | 2021-06-15 | 中国人民解放军空军航空大学 | 一种可用于无人机对空中目标飞机敌友自动识别的方法 |
CN113361630A (zh) * | 2021-06-25 | 2021-09-07 | 成都飞机工业(集团)有限责任公司 | 一种基于曲面特征对比的零件异同自动识别方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101369316A (zh) * | 2008-07-09 | 2009-02-18 | 东华大学 | 基于全局和局部结构融合的图像特征提取方法 |
CN101986295A (zh) * | 2010-10-28 | 2011-03-16 | 浙江大学 | 基于流形稀疏编码的图像聚类的方法 |
-
2012
- 2012-11-21 CN CN201210477495.8A patent/CN102930300B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101369316A (zh) * | 2008-07-09 | 2009-02-18 | 东华大学 | 基于全局和局部结构融合的图像特征提取方法 |
CN101986295A (zh) * | 2010-10-28 | 2011-03-16 | 浙江大学 | 基于流形稀疏编码的图像聚类的方法 |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105243654A (zh) * | 2014-07-09 | 2016-01-13 | 北京航空航天大学 | 一种多飞机跟踪方法及系统 |
CN105243654B (zh) * | 2014-07-09 | 2019-10-01 | 北京航空航天大学 | 一种多飞机跟踪方法及系统 |
CN105335751A (zh) * | 2014-08-01 | 2016-02-17 | 深圳中集天达空港设备有限公司 | 一种基于视觉图像的泊位飞机前轮定位方法 |
CN105335751B (zh) * | 2014-08-01 | 2018-10-12 | 深圳中集天达空港设备有限公司 | 一种基于视觉图像的泊位飞机前轮定位方法 |
CN104615987B (zh) * | 2015-02-02 | 2017-12-26 | 北京航空航天大学 | 一种基于误差反传神经网络的飞机残骸智能识别方法及系统 |
CN104615987A (zh) * | 2015-02-02 | 2015-05-13 | 北京航空航天大学 | 一种基于误差反传神经网络的飞机残骸智能识别方法及系统 |
CN105631431A (zh) * | 2015-12-31 | 2016-06-01 | 华中科技大学 | 一种可见光目标轮廓模型指导的飞机感兴趣区测谱方法 |
CN106127228A (zh) * | 2016-06-16 | 2016-11-16 | 北方工业大学 | 一种基于决策模板分类器融合的遥感图像船舶检测候选区鉴别方法 |
CN106407902A (zh) * | 2016-08-31 | 2017-02-15 | 西北工业大学 | 一种基于几何差异的飞机目标识别方法 |
CN111861972A (zh) * | 2019-04-28 | 2020-10-30 | 奥菲(泰州)光电传感技术有限公司 | 目标状态识别系统 |
CN111160122A (zh) * | 2019-12-11 | 2020-05-15 | 桂林长海发展有限责任公司 | 一种飞机机型识别方法、装置及存储介质 |
CN112967290A (zh) * | 2021-02-22 | 2021-06-15 | 中国人民解放军空军航空大学 | 一种可用于无人机对空中目标飞机敌友自动识别的方法 |
CN113361630A (zh) * | 2021-06-25 | 2021-09-07 | 成都飞机工业(集团)有限责任公司 | 一种基于曲面特征对比的零件异同自动识别方法 |
Also Published As
Publication number | Publication date |
---|---|
CN102930300B (zh) | 2015-07-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102930300B (zh) | 一种飞机目标识别方法及系统 | |
CN105894047B (zh) | 一种基于三维数据的人脸分类系统 | |
Gu et al. | Recognition using regions | |
Chen et al. | A new off-line signature verification method based on graph | |
Zhu et al. | Logo matching for document image retrieval | |
US20070058836A1 (en) | Object classification in video data | |
CN104680127A (zh) | 手势识别方法及系统 | |
US20120301014A1 (en) | Learning to rank local interest points | |
Zhou et al. | Histograms of categorized shapes for 3D ear detection | |
CN105574505A (zh) | 一种多摄像机间人体目标再识别的方法及系统 | |
CN103942577A (zh) | 视频监控中基于自建立样本库及混合特征的身份识别方法 | |
CN102915435B (zh) | 一种基于人脸能量图的多姿态人脸识别方法 | |
Chen et al. | Recognizing human action from a far field of view | |
CN105447441A (zh) | 人脸认证方法和装置 | |
CN103279768A (zh) | 一种基于增量学习人脸分块视觉表征的视频人脸识别方法 | |
CN105574545B (zh) | 街道环境图像多视角语义切割方法及装置 | |
CN107886539B (zh) | 一种工业场景下高精度齿轮视觉检测方法 | |
CN106204651A (zh) | 一种基于改进的判决与生成联合模型的目标跟踪方法 | |
CN103226699A (zh) | 一种基于分离度差有监督局部保持投影的人脸识别方法 | |
He et al. | Scale space histogram of oriented gradients for human detection | |
CN103218606A (zh) | 一种基于人脸均值和方差能量图的多姿态人脸识别方法 | |
CN103839066A (zh) | 一种源于生物视觉的特征提取方法 | |
CN107784284A (zh) | 人脸识别方法及系统 | |
CN103942572A (zh) | 一种基于双向压缩数据空间维度缩减的面部表情特征提取方法和装置 | |
Yawen et al. | Research on vehicle detection technology based on SIFT feature |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |