CN103310220A - 一种三维舰船识别方法 - Google Patents

一种三维舰船识别方法 Download PDF

Info

Publication number
CN103310220A
CN103310220A CN2012100625390A CN201210062539A CN103310220A CN 103310220 A CN103310220 A CN 103310220A CN 2012100625390 A CN2012100625390 A CN 2012100625390A CN 201210062539 A CN201210062539 A CN 201210062539A CN 103310220 A CN103310220 A CN 103310220A
Authority
CN
China
Prior art keywords
dimensional
ship
identified
model
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2012100625390A
Other languages
English (en)
Inventor
王彦杰
陈杰
崔麦会
陈超
吴宏明
蒋玉峰
胡兵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
INFORMATION ENGINEERING TECHNOLOGY RESEARCH INSTITUTE NAVY ACADEMY OF ARMAMENT CHINESE PEOPLE'S LIBERATION ARMY
Original Assignee
INFORMATION ENGINEERING TECHNOLOGY RESEARCH INSTITUTE NAVY ACADEMY OF ARMAMENT CHINESE PEOPLE'S LIBERATION ARMY
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by INFORMATION ENGINEERING TECHNOLOGY RESEARCH INSTITUTE NAVY ACADEMY OF ARMAMENT CHINESE PEOPLE'S LIBERATION ARMY filed Critical INFORMATION ENGINEERING TECHNOLOGY RESEARCH INSTITUTE NAVY ACADEMY OF ARMAMENT CHINESE PEOPLE'S LIBERATION ARMY
Priority to CN2012100625390A priority Critical patent/CN103310220A/zh
Publication of CN103310220A publication Critical patent/CN103310220A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Image Analysis (AREA)

Abstract

本发明提供一种匹配运算量小,识别的时效性以及准确性高的三维舰船识别方法:建立已有舰船三维模型数据库;建立三维参考模型;初始化三维参考模型和已有舰船三维模型的姿态;旋转三维参考模型至与待识别舰船图像相同的姿态;根据三维参考模型旋转的角度调整已有舰船三维模型的姿态,得到当前姿态下的所有舰船三维模型的二维投影图像;提取待识别舰船图像的前景区域;提取待识别舰船图像前景区域和所有舰船二维投影图像的特征;将待识别舰船图像匹配至最相似的舰船类型。本发明直接将已有舰船三维模型旋转至待识别舰船图像的姿态,找到最佳匹配来识别三维舰船,从而降低识别匹配的运算量,并且避免了采样的间隔过大导致的舰船识别精确度低的缺陷。

Description

一种三维舰船识别方法
技术领域:
本发明涉及舰船目标的识别,尤其适用于基于三维模型进行舰船目标识别。
背景技术:
近年来,利用三维信息识别物体的方法颇受关注,是解决三维物体识别的必然趋势。在现有技术中,其中一种方法是从图像中提取具有仿射不变性的局部特征,并计算图像中所有局部特征的统计特性,来掩盖视角变化所带来的三维形变。另一种方法在局部特征提取的基础上,构建局部特征的几何模型,通过计算几何模型的仿射变形来纠正三维物体视角变化的影响。以上两种方法只适合区分类间距离较大、类内距离较小的物体类别,而不适合解决舰船型号类别区分问题,这是由于舰船本身体积较大并且不同型号的舰船目标差异较小难以区分。
目前,比较流行的三维物体识别方法是通过建立一组已有物体的可以自由旋转的三维物体模型,并将每一个已建立的三维物体模型旋转多个角度从而得到不同旋转角度下的二维投影图像,然后将待识别图像与每一个已建立的三维物体模型不同旋转角度下的二维投影图像进行匹配识别。这种方法应用于舰船识别的缺陷是需要将已有舰船三维模型的视角空间离散化,生成一组离散的已有舰船二维投影图像集合(例如以5°为间隔得到离散的二维投影图像集合),将待识别舰船图像与已有舰船二维投影图像进行匹配,大量的匹配运算影响识别的时效性;同时离散化的视角表示不能准确描述任意视角下的舰船姿态,降低了舰船识别的准确性。
发明内容:
本发明要解决的问题是提供一种匹配运算量小,识别的时效性以及准确性高的三维舰船识别方法。
本发明解决三维舰船目标的图像识别问题。舰船图像是对三维物体进行二维投影得到的,在识别过程中,因损失三维物体的空间结构信息造成以下困难,相同的舰船目标在不同视角下的二维投影图像差异很大,不同的目标在一些视角下的投影图像十分相似。本发明针对以上困难,解决三维模型与待识别图像的姿态匹配、待识别图像的舰船前景提取和图像的识别特征提取等问题。
本发明的原理是,直接将已有舰船三维模型旋转至待识别舰船图像的姿态,通过找到最佳匹配来识别三维舰船。
本发明的技术方案是,一种三维舰船识别方法,包括的步骤有:
建立已有舰船三维模型数据库;
建立三维参考模型;
将三维参考模型和数据库中的已有舰船三维模型调整至相同的初始姿态;
将三维参考模型旋转至与待识别舰船图像相同的姿态;
根据三维参考模型旋转的角度调整数据库中所有舰船三维模型的姿态,得到当前姿态下的所有舰船三维模型的二维投影图像;
提取待识别舰船图像的前景区域;
提取待识别舰船图像前景区域和所有舰船三维模型二维投影图像的特征;
对提取的特征进行匹配,将待识别舰船图像匹配至最相似的舰船类型,
根据待识别图像前景区域与所有舰船三维模型二维投影图像的特征向量的距离最小原则,将待识别舰船匹配至具有最小距离的已有舰船,从而完成了三维舰船的识别。
假设两幅舰船图像的特征向量分别为F1={f1i}和F2={f2i}(i=1,2,…,T;T为特征向量的维数);因此,特征向量间的距离可以表示为:
d ( F 1 , F 2 ) = Σ i = 1 T ( f 1 i - f 2 i ) 2
本发明通过建立三维参考模型,直接将已有舰船三维模型旋转至待识别舰船图像的姿态,找到最佳匹配来识别三维舰船。从而避免生成不同姿态下的已有舰船模型的二维投影集合,大大降低了识别匹配的运算量,并且避免了现有技术中采样的间隔过大,不能满足任意姿态的舰船精确识别。
然而,所述提取待识别舰船图像的前景区域的步骤,需要将舰船前景从图像背景中切分出来,舰船结构复杂,颜色与海洋背景十分接近,图像通常包含相混淆的背景,为舰船的图像前景切分带来困难。现有技术中,通常采用k-means或者N-cut等方法进行舰船图像的切分,其原理是根据不同的区域属性或者边缘属性,将图像切分成一组连通区域的集合,进而从中选择一组连通区域作为舰船前景。这类方法由于未能利用图像的标记信息(如图像的前景/背景种子点)有效指导图像前景的切分过程,同时,这类方法通常仅利用图像的单一属性作为切分依据,未能综合考虑多种影响切分结果的因素。因此,不能准确地获得舰船前景,结果如图6所示。
进而,本发明提供了一种基于图割切分获取舰船图像前景的方法,利用图像的前景/背景种子点标记信息为舰船前景切分提供约束,并且同时考虑舰船图像的区域和边缘属性,从而可以获得准确的舰船前景,保证舰船识别的准确性。
所述的一种基于图割切分获取舰船图像前景的方法,包括的步骤有:
i在舰船图像中标记前景和背景种子点;
ii建立舰船图像的无向图模型;
待识别舰船图像的像素集合为M,相邻的图像像素构成相邻像素对{p,q},待识别舰船图像中所有相邻像素对的集合为N。在8-邻域系统中,图像中的一个像素和8个像素相邻,该像素与相邻的8个像素均构成相邻像素对。
建立一个无向图G=<V,E>,V表示无向图中的节点,E表示无向图中连接节点的边;无向图中的节点V由两部分组成,一部分节点是待识别舰船图像中的所有像素点p∈M,另一部分节点称为S节点和T节点,分别表示图像的前景和背景标记节点。
因此有,V=M ∪{S,T}                                 (1)
图G的边集E由“n-连接”和“t-连接”两种类型的边组成。每一个像素对应两条“t-连接”边,分别与S节点和T节点相连;连接相邻两个像素间的边为“n-连接”。因此,图G的边集可表示为E=N∪∪p∈M{{p,S},{p,T}}       (2)
iii计算待识别舰船图像无向图的边权值;
在上一步图像前景/背景种子点标注的基础上设置无向图的边权值,无向图G的边权值如表1所示。
表1s-t图中边权重设定表
Figure BSA00000682264300031
对于n-连接,B{p,q}的计算以灰度梯度、拉普拉斯过零率、梯度方向、几何特性为依据,采用下式进行计算,其中,Ip和Iq为图像像素的灰度,σ为图像像素灰度的方差,dist(p,q)为像素p和像素q之间的距离:
B { p , q } = exp ( ( I p - I q ) 2 2 &sigma; 2 ) &CenterDot; 1 dist ( p , q ) - - - ( 3 )
当|Ip-Iq|<σ时,由于像素p和像素q较为相似,B{p,q}值较大,反之相反;其中B{p,q}为在相邻像素间进行切分的边界损失项,B{p,q}取值为正,当B{p,q}的值较大时表示像素p和像素q较为相似,不应将两像素切分开;而当B{p,q}的值趋近于0时,像素p和像素q差异较大,应该将两像素切分开。B{p,q}随着像素p和像素q之间的差异增大而减小。
对于t-连接,Rp(obj)和Rp(bkg)分别对应将像素p匹配到前景和背景的区域损失项,按下式(4)、(5)计算,Rp(·)可以是像素p的灰度值与前景或者背景像素灰度值分布模型的匹配程度,即
Rp(obj)=-ln Pr(Ip|obj),                      (4)
Rp(bkg)=-ln Pr(Ip|kbg)。                        (5)
假定Pr(Ip|obj)或Pr(Ip|bkg)服从前景种子点或背景种子点像素灰度值的高斯混合模型分布,有: Pr ( I p | &CenterDot; ) &Proportional; &Sigma; k = 1 K w k N ( I p | &mu; k , S k ) , - - - ( 6 )
其中, N ( I p | &mu; k , S k ) = ( 2 &pi; ) - d 2 | S k | - 1 2 exp ( - 1 2 ( I p - &mu; k ) T S k - 1 ( I p - &mu; k ) ) , - - - ( 7 )
&Sigma; k = 1 K w k = 1 - - - ( 8 )
K为高斯成分数,wk、μk、Sk分别为第k个高斯成分的权重、均值和协方差矩阵,
其中,λ为正实数,平衡边界和区域损失项对切分的影响。
iv计算无向图的最小边割集,将无向图分为两部分;
通过计算图G的最小S-T边割集来获得最优的图像切分结果,使最小S-T边割集的边权值之和最小,将无向图G切分为两部分;
v提取舰船前景图像;
最小边割集将图模型分为两部分,与节点S相连的像素点为图像切分的舰船前景区域,与节点T相连的像素点为图像切分的背景区域。
另外,所述提取待识别舰船图像前景区域和所有舰船三维模型二维投影图像的特征的步骤,需要提取舰船图像特征。目前,用来分类舰船的特征有很多种,包括颜色、纹理、长、宽、桅杆的数量等,经过提取后,都可以用来分类舰船。然而,颜色特征或纹理特征受光照条件以及图像质量的影响较大,而长、宽或桅杆的数量等特征过于简单,因此,以上单一提取或者综合提取的特征不易区分舰船型号之间的细微差距。
进而,本发明还提出了一种舰船图像形状特征提取方法,其原理是将Hu不变矩和Zernike不变矩特征融合起来,共同作为舰船识别的匹配特征。利用Hu不变矩描述舰船形状时,提取简便,并具有旋转、平移和尺度变化不变的优势。Zernike不变矩可使信息冗余达到最优化,Zernike多项式的递归性质使快速算法成为可能,并可提取形状的高频特征,描述舰船的细节轮廓。所述的一种舰船图像形状特征提取方法,包括如下步骤:
①提取Hu不变矩特征;
在直角坐标系下,对于N×M的数字图像的图像函数为f(x,y),定义(p+q )阶原点矩mpq和中心矩μpq分别为
m pq = &Sigma; x = 1 N &Sigma; y = 1 M x p y q f ( x , y ) , - - - ( 9 )
&mu; pq = &Sigma; x = 1 N &Sigma; y = 1 M ( x - x &OverBar; ) p ( y - y &OverBar; ) q f ( x , y ) - - - ( 10 )
其中,即为区域的矩心坐标,将(p+q)阶规格化中心矩记作ηpq,定义为
&eta; pq = &mu; pq &mu; 00 Y , Y = p + q 2 + 1 , p+q=2,3,…                           (11)
利用二阶和三阶规格化中心矩可导出以下7个不变矩组,即为Hu不变矩:
Φ1=η2002                      (12)
&Phi; 2 = ( &eta; 20 - &eta; 02 ) 2 + 4 &eta; 11 2 - - - ( 13 )
Φ3=(η30-3η12)2+(3η3103)2    (14)
Φ4=(η3012)2+(η2103)2      (15)
Φ5=(η30-3η12)(η3012)[(η3012)2-3(η2103)2]
                                    (16)
+(3η2103)(η2103)[3(η3012)2-(η2103)2]
Figure BSA00000682264300055
                                    (17)
Figure BSA00000682264300056
Φ7=(3η1230)(η3012)[(η3012)2-3(η2103)2]
                                    (18)
+(3η2103)(η2103)[3(η3012)2-(η1203)2]
②提取Zernike个变矩特征;
计算一幅给定图像的Zernike矩,需要将图像的中心移到坐标原点,将图像像素点映射到单位圆内。在极坐标系下,Zernike不变矩是图像在一组正交多项式{Vnm(x,y)}的投影,这组多项式的单位圆内{x2+y2≤1}是正交的。Zernike正交多项式{Vnm(x,y)}的形式是:Vnm(x,y)=Vnm(ρ,θ)=Rnm(ρ)ejmθ  (19)
式中,n为正整数或零;m为正或负整数;且满足n-|m|为偶数|m|≤n的条件限制;ρ为像素点(x,y)到坐标原点的矢量长度,即
Figure BSA00000682264300057
θ为x轴与ρ矢量在逆时针方向的夹角,即θ=tan-1(y/x)(-1<x,y<1);
Figure BSA00000682264300058
Rnm(ρ)为径向多项式,定义为:
R nm ( &rho; ) = &Sigma; s = 0 ( n - | m | ) / 2 ( - 1 ) s [ ( n - s ) ! ] &rho; n - 2 s s ! ( n + | m | 2 - s ) ! ( n - | m | 2 - s ) ! - - - ( 20 )
图像的像素值为f(ρ,θ),重复率为m的n阶Zernike矩Znm定义为
Z nm = n + 1 &pi; &Sigma; x &Sigma; y f ( x , y ) V nm ( x , y ) - - - ( 21 )
本发明选取Zernike零、一、二、三阶矩,共有六维特征,分别是Z00,Z11,Z20,Z22,Z31和Z33
③将提取的Hu不变矩和Zernike不变矩特征组合起来作为形状特征向量;
将Hu不变矩特征Φ1、Φ2、Φ3、Φ4、Φ5、Φ6、Φ7和Zernike不变矩特征Z00、Z11、Z20、Z22、Z31、Z33组合起来,得到十三维特征向量,作为待识别图像和所有
舰船模型二维投影图像的形状特征。
为了更好的实施本发明所述的一种三维舰船识别方法,可以分别采用本发明提出的一种基于图割切分获取舰船图像前景的方法进行提取待识别舰船图像的前景区域,或者采用本发明提出的一种舰船图像形状特征提取方法进行提取待识别舰船图像前景区域和所有舰船三维模型二维投影图像的特征;本领域的技术人员根据本发明披露的内容可以根据需要进行组合实施,但都属于本发明保护的范围。
附图说明
图1本发明实施例中建立已有舰船三维模型数据库的示意图;
图2本发明实施例中参考模型示例图;
图3本发明实施例中将三维参考模型和数据库中的已有舰船三维模型调整至相同的初始姿态示意图;
图4本发明实施例中根据待识别图像调整参考模型姿态示意图;
图5本发明实施例中将所有三维模型旋转至与参考模型相同的姿态示意图;
图6传统图像切分方法不足:(a)原始舰船图像;(b)K-means图像切分结果;(c)N-cut图像切分结果;
图7本发明实施例中利用图割方法获取舰船目标前景过程示意图;
图8本发明实施例中种子点标记示意图;
图9本发明实施例中舰船目标图像前景切分结果示意图;
图10本发明实施例中匹配结果示意图。
具体实施方式
下面结合附图和具体实施方式对本发明作进一步详细的说明。
建立已有舰船三维模型数据库;
具体地,建立一组可以自由旋转的已有舰船三维模型,能够展示任意视角下的舰船结构信息,构成舰船三维模型数据库。如图1中所示,为使用3DMax建立的两型已有舰船的三维模型,图中所示的是舰船模型在某一视角下的投影图像。
建立三维参考模型;
建立一个三维参考模型用于确定待识别舰船图像中的姿态,三维参考模型不是某一具体型号舰船的模型,而是所有型号舰船的抽象。如在3DMax下建立的三维参考模型可以是一个指明前部和顶部的几何体,图2中前部和顶部分别对应抽象舰船的前部和顶部。
将三维参考模型和数据库中的已有舰船三维模型调整至相同的初始姿态;
将三维参考模型和数据库中的已有舰船三维模型调整至相同的初始姿态。如图3所示,三维参考模型和数据库中的已有舰船三维模型均处于船头向正左方、船尾向正右方的姿态。
将三维参考模型旋转至与待识别舰船图像相同的姿态;
具体地,是与待识别舰船图像做比较,通过调整三维参考模型,使三维参考模型旋转至与待识别图像中舰船大致相同的姿态,记录三维参考模型分别绕x、y和z轴旋转的角度,即参考模型目前所处的姿态与初始化姿态所呈的角度。如图4所示,图中上方为输入待识别舰船图像,下方为将参考模型旋转至待识别图像中舰船大致相同的姿态,并记录参考模型分别绕x、y和z轴旋转的角度是0、3和37度。
根据三维参考模型旋转的角度调整数据库中所有舰船三维模型的姿态,得到当前姿态下的所有舰船三维模型的二维投影图像;
根据记录的参考模型旋转角度,将数据库中的所有舰船三维模型旋转至相应的角度,并渲染出相应角度下所有舰船三维模型的二维投影图像。如图5所示,分别将A型和B型舰船模型绕x、y和z轴旋转0、3和37度。
提取待识别舰船图像的前景区域;
舰船识别需要从图像中提取舰船的前景,将舰船前景从图像背景中切分出来。
提取待识别舰船图像前景区域和所有舰船三维模型二维投影图像的特征;
用来分类舰船的特征有很多种,包括颜色、纹理、长、宽、桅杆的数量等,经过提取后,都可以用来分类舰船。
对提取的特征进行匹配,将待识别舰船图像匹配至最相似的舰船类型。
根据待识别图像前景区域与所有舰船三维模型二维投影图像的特征向量的距离最小原则,将待识别舰船匹配至具有最小距离的已有舰船,从而完成了三维舰船的识别。
假设两幅舰船图像的特征向量分别为F1={f1i}和F2={f2i}(i=1,2,…,T;T为特征向量的维数);因此,特征向量间的距离可以表示为:
d ( F 1 , F 2 ) = &Sigma; i = 1 T ( f 1 i - f 2 i ) 2
将待识别舰船图像匹配至最相似的舰船类型步骤的匹配示例如图10所示。待识别图像特征向量与型号A和型号B舰船的二维投影图像特征向量间的距离分别是0.2107和1.0575,型号A的距离较小,将待识别图像匹配至型号A。
如图7所示,本发明给出了一种基于图割切分获取舰船图像前景的方法的具体实施例,包括的步骤有:
在待识别舰船图像中标记前景和背景种子点;
在待识别图像的前景区域和背景区域标注任意一组像素点作为前景和背景种子点,种子点可利用鼠标在图像中选择,如图7(a)所示,舰船图像的像素由小正方形表示,“O”和“B”分别表示已标注的前景和背景种子点。标注前景/背景种子点的具体示例如图8所示,图中“△”和“○”的标记点为在一次前景切分实验中选定的前景和背景种子点。
建立待识别舰船图像的无向图模型;
待识别舰船图像的像素集合为M,相邻的图像像素构成相邻像素对{p, q},待识别舰船图像中所有相邻像素对的集合为N。在8-邻域系统中,图像中的一个像素和8个像素相邻,该像素与相邻的8个像素均构成相邻像素对。
建立一个无向图G=<V,E>,V表示无向图中的节点,E表示无向图中连接节点的边;无向图中的节点V由两部分组成,一部分节点是待识别舰船图像中的所有像素点p∈M,另一部分节点称为S节点和T节点,分别表示图像的前景和背景标记节点。因此有,
V=M∪{S,T}                                (1)
如图7(b)所示,其中椭圆形表示图像像素,如像素点p和像素点q,S节点和T节点如图中底部和顶部的节点所示。
图G的边集E由“n-连接”和“t-连接”两种类型的边组成。每一个像素对应两条“t-连接”边,分别与S节点和T节点相连;连接相邻两个像素间的边为“n-连接”。因此,图G的边集可表示为
E=N∪∪p∈M{{p,S},{p,T}}                (2)
在图7(b)中,任意两个像素间的边为“n-连接”,如p和q间的边,任意一个像素均与S节点和T节点相连,如pS和pT。
计算待识别舰船图像无向图的边权值;
在上一步图像前景/背景种子点标注的基础上设置无向图的边权值,无向图G的边权值如表1所示。
表1s-t图中边权重设定表
Figure BSA00000682264300081
对于n-连接,B{p,q}的计算以灰度梯度、拉普拉斯过零率、梯度方向、几何特性为依据,采用下式进行计算,其中,Ip和Iq为图像像素的灰度,σ为图像像素灰度的方差,dist(p,q)为像素p和像素q之间的距离:
B { p , q } = exp ( ( I p - I q ) 2 2 &sigma; 2 ) &CenterDot; 1 dist ( p , q ) - - - ( 3 )
当|Ip-Iq|<σ时,由于像素p和像素q较为相似,B{p,q}值较大,反之相反;其中B{p,q}为在相邻像素间进行切分的边界损失项,B{p,q}取值为正,当B{p,q}的值较大时表示像素p和像素q较为相似,不应将两像素切分开;而当B{p,q}的值趋近于0时,像素p和像素q差异较大,应该将两像素切分开。B{p,q}随着像素p和像素q之间的差异增大而减小。
对于t-连接,Rp(obj)和Rp(bkg)分别对应将像素p匹配到前景和背景的区域损失项,按下式(4)、(5)计算,Rp(·)可以是像素p的灰度值与前景或者背景像素灰度值分布模型的匹配程度,即
Rp(obj)=-ln Pr(Ip|obj),                    (4)
Rp(bkg)=-ln Pr(Ip|bkg)。                    (5)
假定Pr(Ip|obj)或Pr(Ip|bkg)服从前景种子点或背景种子点像素灰度值的高斯混合模型分布,有
Pr ( I p | &CenterDot; ) &Proportional; &Sigma; k = 1 K w k N ( I p | &mu; k , S k ) , - - - ( 6 )
其中,
N ( I p | &mu; k , S k ) = ( 2 &pi; ) - d 2 | S k | - 1 2 exp ( - 1 2 ( I p - &mu; k ) T S k - 1 ( I p - &mu; k ) ) , - - - ( 7 )
&Sigma; k = 1 K w k = 1 . - - - ( 8 )
K为高斯成分数,wk、μk、Sk分别为第k个高斯成分的权重、均值和协方差矩阵。
λ为正实数,平衡边界和区域损失项对切分的影响。
具体示例如图7(c)所示,图中边中的数字为赋予每条边的权值。
计算待识别舰船图像无向图的最小边割集,将无向图分为两部分;
通过计算图G的最小S-T边割集来获得最优的图像切分结果,使最小S-T边割集的边权值之和最小,将无向图G切分为两部分,该过程如图7(d)所示。
在现有技术中,求最小S-T边割集的方法有很多,通常利用最大流方法将求解最小边割集问题转化为求解流经S节点和T节点的最大流问题,例如由科学出版社出版王树禾编写的《图论》以及机械工业出版社出版李明哲编写的《图论及其算法》。
提取舰船的前景图像。
最小边割集将图模型分为两部分,与节点S相连的像素点为图像切分的舰船前景区域,与节点T相连的像素点为图像切分的背景区域,如图7(d)所示。在示例中,图8的前景切分结果如图9所示。
另外,本发明给出了一种舰船图像形状特征提取方法的具体实施例,将Hu不变矩和Zernike不变矩特征融合起来,共同作为舰船识别的匹配特征。利用Hu不变矩描述舰船形状时,提取简便,并具有旋转、平移和尺度变化不变的优势。Zernike不变矩可使信息冗余达到最优化,Zernike多项式的递归性质使快速算法成为可能,并可提取形状的高频特征,描述舰船的细节轮廓。所述的一种舰船图像形状特征提取的方法,具体实施步骤如下:
提取Hu不变矩特征;
在直角坐标系下,对于N×M的数字图像的图像函数为f(x,y),定义(p+q)阶原点矩mpq和中心矩μpq分别为
m pq = &Sigma; x = 1 N &Sigma; y = 1 M x p y q f ( x , y ) , - - - ( 9 )
&mu; pq = &Sigma; x = 1 N &Sigma; y = 1 M ( x - x &OverBar; ) p ( y - y &OverBar; ) q f ( x , y ) - - - ( 10 )
其中,
Figure BSA00000682264300104
即为区域的矩心坐标,将(p+q)阶规格化中心矩记作ηpq,定义为
&eta; pq = &mu; pq &mu; 00 Y , Y = p + q 2 + 1 , p+q=2,3,…                              (11)
利用二阶和三阶规格化中心矩可导出以下7个不变矩组,即为Hu不变矩:
Φ1=η2002                         (12)
&Phi; 2 = ( &eta; 20 - &eta; 02 ) 2 + 4 &eta; 11 2 - - - ( 13 )
Φ3=(η30-3η12)2+(3η3103)2                     (14)
Φ4=(η3012)2+(η2103)2                       (15)
Φ5=(η30-3η12)(η3012)[(η3012)2-3(η2103)2]
                                                     (16)
+(3η2103)(η2103)[3(η3012)2-(η2103)2]
Φ6=η2002)[(η3012)2-(η2103)2]
                                                     (17)
+4η113012)(η2103)
Φ7=(3η1230)(η3012)[(η3012)2-3(η2103)2]
                                                     (18)
+(3η2103)(η2103)[3(η3012)2-(η1203)2]
在本具体实施例中,待识别图像和二维投影图像提取的Hu不变矩特征向量如表2所示。
表2Hu不变矩特征示例
Figure BSA00000682264300111
提取Zernike不变矩特征;
计算一幅给定图像的Zernike矩,需要将图像的中心移到坐标原点,将图像像素点映射到单位圆内。在极坐标系下,Zernike不变矩是图像在一组正交多项式{Vnm(x,y)}的投影,这组多项式的单位圆内{x2+y2≤1}是正交的。Zernike正交多项式{Vnm(x,y)}的形式是
Vnm(x,y)=Vnm(ρ,θ)=Rnm(ρ)ejmθ                 (19)
式中,n为正整数或零;m为正或负整数;且满足n-|m|为偶数|m|≤n的条件限制;ρ为像素点(x,y)到坐标原点的矢量长度,即θ为x轴与ρ矢量在逆时针方向的夹角,即θ=tan-1(y/x)(-1<x,y<1);Rnm(ρ)为径向多项式,定义为
R nm ( &rho; ) = &Sigma; s = 0 ( n - | m | ) / 2 ( - 1 ) s [ ( n - s ) ! ] &rho; n - 2 s s ! ( n + | m | 2 - s ) ! ( n - | m | 2 - s ) ! - - - ( 20 )
图像的像素值为f(ρ,θ),重复率为m的n阶Zernike矩Znm定义为
Z nm = n + 1 &pi; &Sigma; x &Sigma; y f ( x , y ) V nm ( x , y ) - - - ( 21 )
本发明选取Zernike零、一、二、三阶矩,共有六维特征,分别是Z00,Z11,Z20,Z22,Z31和Z33。在示例中,待识别图像和二维投影图像提取的Zernike不变矩特征向量如表3所示。
表3Zernike不变矩特征示例
Figure BSA00000682264300122
将提取的Hu不变矩和Zernike不变矩特征组合起来作为形状特征向量。
将Hu不变矩特征Φ1、Φ2、Φ3、Φ4、Φ5、Φ6、Φ7和Zernike不变矩特征Z00、Z11、Z20、Z22、Z31、Z33组合起来,得到十三维特征向量,作为待识别图像和所有舰船模型二维投影图像的形状特征。

Claims (3)

1.一种三维舰船识别方法,包括的步骤有:
建立已有舰船三维模型数据库;
建立三维参考模型;
将三维参考模型和数据库中的已有舰船三维模型调整至相同的初始姿态;
将三维参考模型旋转至与待识别舰船图像相同的姿态;
根据三维参考模型旋转的角度调整数据库中所有舰船三维模型的姿态,得到当前姿态下的所有舰船三维模型的二维投影图像;
提取待识别舰船图像的前景区域;
提取待识别舰船图像前景区域和所有舰船三维模型二维投影图像的特征;
对提取的特征进行匹配,将待识别舰船图像匹配至最相似的舰船类型。
2.根据权利要求1所述的一种三维舰船识别方法,其特征在于所述提取待识别舰船图像的前景区域采用一种基于图割切分获取舰船图像前景的方法,包括的步骤有:
i 在舰船图像中标记前景和背景种子点;
ii 建立舰船图像的无向图模型;
iii 计算待识别舰船图像无向图的边权值;
iv 计算无向图的最小边割集,将无向图分为两部分;
v 提取舰船前景图像。
3.根据权利要求1所述的一种三维舰船识别方法,其特征在于所述步骤提取待识别舰船图像前景区域和所有舰船三维模型二维投影图像的特征,采用一种舰船图像形状特征提取方法,包括如下步骤:
①提取Hu不变矩特征;
②提取Zernike不变矩特征;
③将提取的Hu不变矩和Zernike不变矩特征组合起来作为形状特征向量。
CN2012100625390A 2012-03-12 2012-03-12 一种三维舰船识别方法 Pending CN103310220A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2012100625390A CN103310220A (zh) 2012-03-12 2012-03-12 一种三维舰船识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2012100625390A CN103310220A (zh) 2012-03-12 2012-03-12 一种三维舰船识别方法

Publications (1)

Publication Number Publication Date
CN103310220A true CN103310220A (zh) 2013-09-18

Family

ID=49135415

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2012100625390A Pending CN103310220A (zh) 2012-03-12 2012-03-12 一种三维舰船识别方法

Country Status (1)

Country Link
CN (1) CN103310220A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020024147A1 (zh) * 2018-08-01 2020-02-06 深圳前海达闼云端智能科技有限公司 样本图像的集合的生成方法、装置、电子设备和存储介质
CN111328396A (zh) * 2017-11-15 2020-06-23 高通科技公司 用于图像中的对象的姿态估计和模型检索
CN114371807A (zh) * 2022-03-23 2022-04-19 超节点创新科技(深圳)有限公司 混合现实显示方法、三维扫描设备及存储介质

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
YURI Y. BOYKOV,MARIE-PIERRE JOLL: "Interactive Graph Cuts for Optimal Boundary & Region Segmentation of Objects in N-D Images", 《PROCEEDINGS OF "INTERNATION CONFERENCE ON COMPUTER VISION"》 *
于吉红,吕俊伟,白晓明: "一种基于组合不变矩的新的舰船图像目标识别方法", 《红外》 *
吉兵,单甘霖: "基于航迹插值和模型匹配的三维目标识别", 《电光与控制》 *
周尉刚: "PCNN和Zernike矩在遥感图像处理和目标识别的应用", 《中国优秀硕士学位论文全文数据库信息科技辑》 *
孙菲,梁菁,任杰,刘先康,魏存伟: "一种基于高阶谱特征的舰船目标识别方法", 《舰船科学技术》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111328396A (zh) * 2017-11-15 2020-06-23 高通科技公司 用于图像中的对象的姿态估计和模型检索
CN111328396B (zh) * 2017-11-15 2023-07-14 高通科技公司 用于图像中的对象的姿态估计和模型检索
WO2020024147A1 (zh) * 2018-08-01 2020-02-06 深圳前海达闼云端智能科技有限公司 样本图像的集合的生成方法、装置、电子设备和存储介质
CN114371807A (zh) * 2022-03-23 2022-04-19 超节点创新科技(深圳)有限公司 混合现实显示方法、三维扫描设备及存储介质
CN114371807B (zh) * 2022-03-23 2022-06-28 超节点创新科技(深圳)有限公司 混合现实显示方法、三维扫描设备及存储介质

Similar Documents

Publication Publication Date Title
Grabner et al. 3d pose estimation and 3d model retrieval for objects in the wild
Doumanoglou et al. Recovering 6D object pose and predicting next-best-view in the crowd
CN103727930B (zh) 一种基于边缘匹配的激光测距仪与相机相对位姿标定方法
Bazazian et al. Fast and robust edge extraction in unorganized point clouds
Zhu et al. Single image 3D object detection and pose estimation for grasping
CN108052942B (zh) 一种飞机飞行姿态的视觉图像识别方法
CN104021547A (zh) 肺部 ct 的三维配准方法
CN105160686B (zh) 一种基于改进sift算子的低空多视角遥感影像匹配方法
CN107292869B (zh) 基于各向异性高斯核和梯度搜索的图像斑点检测方法
Qian et al. Calculation method of surface shape feature of rice seed based on point cloud
CN105118059A (zh) 一种多尺度坐标轴夹角特征的点云快速配准方法
CN103210417A (zh) 使用连续b样条变形预处理轮胎表面的三维图像的方法
CN102262724A (zh) 目标图像特征点定位方法和目标图像特征点定位系统
CN103927511A (zh) 基于差异特征描述的图像识别方法
CN105574527A (zh) 一种基于局部特征学习的快速物体检测方法
CN103886619A (zh) 一种融合多尺度超像素的目标跟踪方法
Laube et al. Learnt knot placement in B-spline curve approximation using support vector machines
CN103530645A (zh) 基于局部二值模式和Zernike矩的纹理图像分类方法及系统
CN102663762B (zh) 医学图像中对称器官的分割方法
CN102708589B (zh) 一种基于特征聚类的三维目标多视点视图建模方法
CN103778619A (zh) 一种基于Zernike矩的图像匹配方法
Wuhrer et al. Semi-automatic prediction of landmarks on human models in varying poses
CN106682575A (zh) Elm算法的人眼点云特征定位
Ao et al. A repeatable and robust local reference frame for 3D surface matching
Huang et al. A low-dimensional binary-based descriptor for unknown satellite relative pose estimation

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20130918

WD01 Invention patent application deemed withdrawn after publication