CN104331711A - 基于多尺度模糊测度与半监督学习的sar图像识别方法 - Google Patents

基于多尺度模糊测度与半监督学习的sar图像识别方法 Download PDF

Info

Publication number
CN104331711A
CN104331711A CN201410674365.2A CN201410674365A CN104331711A CN 104331711 A CN104331711 A CN 104331711A CN 201410674365 A CN201410674365 A CN 201410674365A CN 104331711 A CN104331711 A CN 104331711A
Authority
CN
China
Prior art keywords
image block
region
represent
yardstick
sar
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410674365.2A
Other languages
English (en)
Other versions
CN104331711B (zh
Inventor
焦李成
唐旭
马文萍
王爽
侯彪
杨淑媛
马晶晶
郑喆坤
公茂果
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xidian University
Original Assignee
Xidian University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xidian University filed Critical Xidian University
Priority to CN201410674365.2A priority Critical patent/CN104331711B/zh
Publication of CN104331711A publication Critical patent/CN104331711A/zh
Application granted granted Critical
Publication of CN104331711B publication Critical patent/CN104331711B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G06F18/2155Generating training patterns; Bootstrap methods, e.g. bagging or boosting characterised by the incorporation of unlabelled data, e.g. multiple instance learning [MIL], semi-supervised techniques using expectation-maximisation [EM] or naïve labelling

Landscapes

  • Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种基于多尺度模糊测度与半监督学习的SAR图像识别方法,解决了现有技术SAR图像识别精度低的问题。其实现步骤为:通过切分原始SAR图像建立图像库,并从中挑选目标单一的图像块;提取图库内图像块的特征向量;将挑出的图像块分成若干类,并用对应的特征向量作为训练样本,训练半监督分类器,用此分类器对图像库分类;对用户输入的查询图像块,用已训练的分类器得到类别;根据混淆矩阵求取该图像块的类别集合,计算查询图像块与图像库中属于该集合的图像块之间的多尺度区域模糊相似度,并依照从大到小的顺序返回用户需要数量的图像块。本发明能纠正分类错误,信息识别精度高,可用于对多幅SAR图像同时进行解译。

Description

基于多尺度模糊测度与半监督学习的SAR图像识别方法
技术领域
本发明属于图像处理技术领域,涉及一种SAR图像信息的识别方法,可应用于对多幅SAR图像同时进行解译。
背景技术
因为SAR图像具有全天时、全天候的探测能力,尤其是相对光学图像对天气因素完全不依赖的特点,SAR图像的应用领域正在逐步的扩大,包括农业,地理监视,导航,军事等。SAR图像的融合,分割,去噪,变化检测等都是研究热点领域,而SAR图像识别则是这些研究领域的一个重要基础。传统的识别技术主要针对识别精度的问题,而且大多应用于单张SAR图像的小范围区域识别问题,如谱聚类集成的SAR分割方法,参见Zhang,Xiangrong,Licheng Jiao,Fang Liu,Liefeng Bo,and Maoguo Gong."Spectralclustering ensemble applied to SAR image segmentation."Geoscience and Remote Sensing,IEEE Transactions on 46,no.7(2008):2126-2136;又如基于遗传Bag-of-Words特征的SAR图像分类方法,参见Feng,Jie,L.C.Jiao,Xiangrong Zhang,and Dongdong Yang."Bag-of-visual-words based on clonal selection algorithm for SAR imageclassification."Geoscience and Remote Sensing Letters,IEEE 8,no.4(2011):691-695。但这些技术明显已不符合当下SAR图像数量海量增长的应用环境。
目前较为普遍的图像识别方法是基于内容的图像检索CBIR,该技术利用图像低层次的视觉特征完成在图像数据库中检索与查询图像在内容上一致或相似的图像集合过程。该技术包含一系列的图像处理方法,包括特征提取、相似性度量、用户反馈等。截至目前,已有很多成熟、著名的检索方法被提出,如SIMPLIcity检索系统,参见James Z.Wang,Jia Li,Gio Wiederhold.SIMPLIcity:Semantics-Sensitive Integrated Matching forPicture Llbraries.IEEE Trans.on Pattern Analysis and Machine Intelligence,2001,23(9):947-963;又如基于区域的模糊特征匹配检索方法,参见Y.Chen and J.Z.Wang,“Aregion-based fuzzy feature matching approach to content-based image retrieval,”PatternAnalysis and Machine Intelligence,IEEE Transactions on,vol.24,no.9,pp.1252–1267,2002。上述两种检索方法已成功的应用于海量的自然图像检索问题,但由于技术限制及SAR图像自身特点,将其直接应用在SAR图像识别中效果并不理想。2009年一种结合高斯混合模型分类的SAR图像检索系统被提出,即GMM检索系统,参见Hou,B.,Tang,X.,Jiao,L.,&Wang,S.(2009,October).SAR image retrieval based on Gaussian MixtureModel classification.In Synthetic Aperture Radar,2009.APSAR 2009.2nd Asian-PacificConference on(pp.796-799).IEEE,该方法面向SAR图像,在检索过程中有效的运用了纹理特征,但由于利用有监督分类方法使得其在现实问题中的推广化能力较低,同时因为该方法的相似度匹配技术并没有考虑SAR图像的特点,使得检索效果不甚理想。虽然该文章中给出了出色的实验结果,但这些结果依赖于有重叠的切割原始SAR图像建立图库,这种策略得到的图像块具有高度的集群特性,即同一类内的样本间距很小,不同类的样本间距很大,这样的数据分布与实际应用中的数据分布往往差异大,其实验结果不能充分的验证其方法的有效性。
发明内容
本发明目的在于针对上述已有技术存在的缺陷,根据SAR图像的特殊成像特点,在传统基于内容的图像检索的框架下,提出一种基于多尺度模糊测度与半监督学习的SAR图像识别方法,以减小实验数据与实际应用中数据分布的差异,提高实际应用中的识别精度。
实现本发明目的的技术方案是:使用平稳小波解析SAR图像中的纹理信息,使用纹理信息,利用高斯随机场半监督学习方法完成SAR图像库的分类工作,并采用多尺度模糊测度相似匹配算法完成SAR图像的相似度匹配。其具体实现步骤包括如下:
1)对原始SAR图像进行无重叠切分,以建立SAR图像库{p1,p2,…pτ,…,pN},从该图像库中按照目标单一原则挑选图像块其中l<<N,1≤τ≤N,N表示图库中的SAR图像块个数,l表示挑选出的SAR图像块个数,pτ表示图库中的某幅SAR图像块,表示挑选出的某幅SAR图像块,所述目标单一原则是指图像块中某目标占图像总面积的一半以上;
2)提取所有图像块的平稳小波三层变换的子带能量,作为图像块的特征向量 { f 1 , f 2 , . . . , f n ‾ } , 其中, n ‾ = 10 ;
3)将挑选出的SAR图像块按照语义内容分成{ci,1≤i≤k}类,其中k表示语义类别的个数,并用对应的特征向量作为训练样本,训练高斯随机场半监督分类器,利用该分类器对SAR图像库{p1,p2,…pτ,…,pN}进行分类,得到具有类标的SAR图像库;
4)对用户输入的查询图像块p',采用与步骤2)相同的方法提取其特征向量f',并用与步骤3)相同的训练样本及训练好的高斯随机场半监督分类器,得到查询图像块的类别数ci
5)根据步骤4)得到的类别数ci及经验混淆矩阵,计算查询图像块的类别集合{c}:
5a)在已分类的SAR图像库中,随机挑选训练样本训练高斯随机场半监督分类器,用该分类器进行100次随机分类试验,得到经验混淆矩阵Con∈Rk×k,该混淆矩阵Con是方阵,其中第i行第j列元素Con(i,j)表示属于ci类的样本被分为cj类的个数,1≤i≤k,1≤j≤k;
5b)对经验混淆矩阵进行列归一化,即将一列中的每个元素除以该列元素的总和,得到经验的后验概率矩阵ConP∈Rk×k
5c)设置阈值T,将后验概率矩阵中的第i行第j列ConP(i,j)与阈值T进行比较,当ConP(i,j)≤T时,将ConP(i,j)设置为0,反之ConP(i,j)保持不变,阈值T的大小根据期望的每一列的非零元素个数设定;
5d)根据查询图像块的类别数ci,在后验概率矩阵ConP中的第i列中查找非零元素的位置,最终得到类别集合{c};
6)计算查询图像块p'与图库中属于类别集合{c}中所有图像块的多尺度区域模糊相似度;
7)按照步骤6)得到的多尺度区域模糊相似度,以从大到小的顺序返回用户需要数量的图像,完成图像识别。
本发明与现有的技术相比具有以下优点:
1、本发明针对SAR图像特殊性,提出了多尺度区域模糊相似度,使得SAR图像相似度匹配结果更准确,提高了识别精度;
2、本发明由于采用经验混淆矩阵对类别数进行了扩展,使得分类错误可以得到纠正,有效的降低了分类错误对相似度匹配的影响;
3、本发明由于采用半监督学习方法对图库进行分类,减少了人工挑选训练样本的工作量,降低了人为主观因素对分类结果的影响。
仿真结果表明,本发明既保证识别精度又可满足大量SAR图像同时进行识别的应用场景。
附图说明
图1是本发明的实现流程示意图;
图2是本发明中用于建立SAR图像库的原始SAR图像;
图3是本发明在SAR图库中挑选出的SAR图像块样例图;
图4是本发明与GMM检索系统的整体性能比较图;
图5是本发明与GMM检索系统在各语义类别中的性能比较图。
具体实施方式
参照图1,本发明的具体实现步骤如下:
步骤1,建立SAR图像库{p1,p2,…pτ,…,pN},并按照目标单一原则挑选SAR图像块。
该步骤的具体实现如下:
1a)选用像素大小为7692×7666的2幅大尺寸SAR图像,作为建立图库的原始SAR图像,分别如图2(a),图2(b)所示;
1b)对所选用的2幅原始SAR图像进行无重叠的切分,切分后得到大小均为128×128的5718幅SAR图像块,用此建立SAR图像库{p1,p2,…pτ,…,pN},pτ表示图库中的某幅SAR图像块,N表示图库中的SAR图像块个数,1≤τ≤N,N=5718;
1c)在图像库中按照目标单一原则挑选SAR图像块其中l<<N,N表示图像库中的SAR图像块个数,l表示挑选出的SAR图像块个数,表示挑选出的某幅SAR图像块,所述目标单一原则是指图像块中某目标占图像总面积的一半以上。本发明在挑选时,共挑选了60幅SAR图像块,即l=60。
步骤2,对图库中所有图像块进行特征提取。
选用平稳小波三层变换的子带能量ξ作为图像块的特征向量其中,表示特征向量的维数,本实例选用但不限于10。对某一子带,能量定义为:
&xi; = ( &Sigma; n 1 = 1 m 1 &Sigma; n 2 = 1 m 2 b ( n 1 , n 2 ) 2 ) 1 2 / ( m 1 &times; m 2 ) - - - < 1 >
其中,m1×m2为子带大小,(n1,n2)表示该子带系数的索引,b(n1,n2)表示该子带中第n1行第n2列的系数值,其余9个子带的能量按照<1>式计算。
步骤3,对整个SAR图像库{p1,p2,…pτ,…,pN}分类,得到具有类标的SAR图像库。
该步骤的具体实现如下:
3a)在已挑选出的l幅SAR图像块中进行人工语义分类,本实例采用面积百分比的策略来判定图像类别,即若一副图像块p中,ci类目标物的总面积大小超过该图像总面积的50%,就规定该像块p为ci类,最终将l幅SAR图像块人为分成海洋、海床、住宅区、农田、池塘共5类,每一类12幅图像块,如图3所示,其中图3(a)是海洋,图3(b)是海床,图3(c)是住宅区,图3(d)是农田,图3(e)是池塘;
3b)根据每一类图像块,对应一组平稳小波三层变换的子带能量特征,得到5组特征向量,并将该5组特征向量作为训练样本,利用高斯随机场半监督学习分类器进行SAR图像库的分类:
3b1)用步骤1挑选出的60幅图像块的能量特征作为有标签样本{(x1,y1),…(xl,yl)},用SAR图像库中剩余的5658幅SAR图像块的能量特征作为无标签样本{xl+1,…xl+u},用有标签样本和无标签样本建立图G=(V,E),其中l<<u,u表示无标签样本的个数,l+u=N,N表示总样本的个数,V表示图G的顶点,E表示图G的边,且l=60,u=5658,N=5718;
3b2)按照公式<2>求得图G的相似矩阵W:
W = ( &omega; ~ i ~ , j ~ ) N &times; N , &omega; ~ i ~ , j ~ = exp ( - &Sigma; d ~ = 1 n &OverBar; ( x i ~ d ~ - x j ~ d ~ ) 2 &sigma; d ~ 2 ) - - - < 2 >
其中,表示相似矩阵W第行第列的元素,表示图像块特征向量的维数,表示样本的第维分量,表示样本的第维分量,是第维的超参数, 1 &le; i ~ &le; N , 1 &le; j ~ &le; N , 1 &le; d ~ &le; n &OverBar; , n &OverBar; = 10 ;
3b3)按照公式<3>构造图G的能量函数:
E ( f s ) = &infin; &Sigma; i ~ ( f s ( i ~ ) - y i ~ ) 2 + 1 2 &Sigma; i ~ , j ~ &omega; ~ i ~ , j ~ ( f s ( i ~ ) - f s ( j ~ ) ) 2 - - - < 3 >
其中,E(fs)表示图G的能量函数,表示有标签样本在图G上的实函数,表示无标签样本在图G上的实函数,表示的函数值,表示图G的相似矩阵W第行第列的元素, 1 &le; i ~ &le; N , 1 &le; j ~ &le; N ;
3b4)求解能量函数E(fs)的最优解argminE(fs),得到分类结果,即图像库中5718幅图像块的最终分类结果依次是海洋1869幅,海床434幅,住宅区1452幅,农田1205幅,池塘758幅,共计5718幅SAR图像块,这一步骤的目标是将SAR图像库变为有类标的SAR图像库,以减少相似度匹配的工作量,提高识别速度。
步骤4,对用户输入的查询图像块p'进行分类。
该步骤的具体实现如下:
4a)采用与步骤2相同的方法提取查询图像块p'的特征向量f';
4b)用与步骤3相同的训练样本及高斯随机场半监督分类器,得到查询图像块p'的类别数ci
步骤5,计算查询图像块p'的类别集合{c}。
为了降低分类错误对识别结果的影响,则需要根据步骤4得到的类别数ci及经验混淆矩阵对查询图像块p'的类别集合{c}进行计算,其具体步骤如下:
5a)在已分类的SAR图像库中,随机挑选训练样本训练高斯随机场半监督分类器,用该分类器进行100次随机分类试验,其中训练样本与测试样本的比例是1:99,从而得到经验混淆矩阵Con∈Rk×k,该混淆矩阵Con为一个方阵,其中第i行第j列元素Con(i,j)表示属于ci类的样本被分为cj类的个数,1≤i≤k,1≤j≤k,k表示语义类别个数,R表示实数域,表1给出了经验混淆矩阵Con∈Rk×k的样例,其中语义类别个数k=5,分别为海洋、海床、住宅区、农田、池塘,各数值表示属于ci类的样本被分为cj类的个数,例如第1行第1列的元素Con(1,1)表示属于海洋的样本被分为海洋的个数是1810;
表1 100次随机分类试验得到的混淆矩阵
Con∈Rk×k 海洋 海床 住宅区 农田 池塘
海洋 1810 0 0 0 29
海床 2 187 101 28 100
住宅区 0 6 1257 163 0
农田 0 0 11 1171 0
池塘 19 57 2 59 592
5b)对经验混淆矩阵Con∈Rk×k进行列归一化,即将其中一列的每个元素除以该列元素的总和,得到经验的后验概率矩阵ConP∈Rk×k
表2给出了后验概率矩阵ConP∈Rk×k的样例,其中语义类别个数k=5,分别为海洋、海床、住宅区、农田、池塘,各数值是对表1给出的经验混淆矩阵Con∈Rk×k进行列归一化得到的:
表2 经验的后验概率矩阵
Con∈Rk×k 海洋 海床 住宅区 农田 池塘
海洋 0.9885 0 0 0 0.0402
海床 0.0011 0.7480 0.0737 0.0196 0.1387
住宅区 0 0.0240 0.9168 0.1139 0
农田 0 0 0.0080 0.8183 0
池塘 0.0104 0.2280 0.0015 0.0482 0.8211
5c)设置阈值T,将后验概率矩阵ConP∈Rk×k中的第i行第j列元素ConP(i,j)与阈值T进行比较,当ConP(i,j)≤T时,将ConP(i,j)设置为0,反之ConP(i,j)保持不变,阈值T的大小根据期望的每一列的非零元素个数设定,本实例设T=0.01,表3给出了阈值处理后的后验概率矩阵ConP∈Rk×k的样例,其中语义类别个数k=5,分别为海洋、海床、住宅区、农田、池塘,各数值是对表2给出的后验概率矩阵ConP∈Rk×k进行阈值处理得到的:
表3 阈值处理后的后验概率矩阵
Con∈Rk×k 海洋 海床 住宅区 农田 池塘
海洋 0.9885 0 0 0 0.0402
海床 0 0.7480 0.0737 0.0196 0.1387
住宅区 0 0.0240 0.9168 0.1139 0
农田 0 0 0 0.8183 0
池塘 0.0104 0.2280 0 0.0482 0.8211
5d)根据查询图像块的类别数ci,在后验概率矩阵ConP中的第i列中查找非零元素的位置,最终得到类别集合{c}。
步骤6,计算查询图像块p'与图库中属于类别集合{c}中所有图像块的多尺度区域模糊相似度。
该步骤的具体实现如下:
6a)选取尺度集合s={ss1,…,ssa,…ssn},其中sn表示尺度个数,ssa表示某一尺度值,s1≤sa≤sn;
6b)对于图像块p与查询图像块p',分别以ssa×ssa区域大小为单位,计算离散小波一层变换的高频子带能量和灰度特征并用作为分割特征,利用自适应的k-means算法对分割特征进行聚类,从而得到ssa尺度下图像块p纹理区域集及查询图像块p'的纹理区域集,分别按如下表示: R 2 sa = { r 1 &prime; sa , r 2 &prime; sa , . . . , r o &prime; sa , . . . , r n &prime; sa } , 其中,分别表示图像块p与查询图像块p'在ssa尺度下利用纹理特征分割后的各区域,1≤h≤m,1≤o≤n,m表示图像块p的纹理区域的个数,n表示查询图像块p'的纹理区域的个数;
为了使k-means算法自适应的工作,本实例采用如下两种策略完成自适应的k-means分割:
6b1)对散度D(num)设定阈值Tnum=0.052,其中D(num)定义如下:
D ( num ) = &Sigma; i &OverBar; = 1 L min 1 &le; j &OverBar; &le; num ( X i &OverBar; - X ^ j &OverBar; ) 2 , 1 &le; i &OverBar; &le; L , 1 &le; j &OverBar; &le; num - - - < 4 >
式中,num表示聚类个数,L表示分割特征个数,表示某一分割特征向量,表示某一类的聚类中心,num的值从2开始递增,当D(num)<Tnum时,num停止递增,聚类个数num确定,反之num的值增加1;
6b2)对聚类个数num设置上限nummax=5,当num>nummax时,num停止递增,聚类个数num确定,反之num的值增加1;
6c)计算图像块p在ssa尺度下各纹理区域的模糊平均距离并计算查询图像块p'在ssa尺度下各纹理区域的模糊平均距离根据得到的纹理区域模糊平均距离计算图像块p各纹理区域与查询图像块p'各纹理区域在ssa尺度下的纹理模糊相似度
6c1)按照公式<5>计算图像块p在ssa尺度下各纹理区域模糊平均距离
其中,为图像块p中纹理区域的平均特征向量,为图像块p中纹理区域的平均特征向量,1≤h1,h2≤m,m表示图像块p的纹理区域的个数;
6c2)按照公式<6>计算查询图像块p'在ssa尺度下各纹理区域的模糊平均距离
其中,为查询图像块p'中纹理区域的平均特征向量,为查询图像块p'中纹理区域的平均特征向量,1≤o1,o2≤n,n表示查询图像块p'的纹理区域的个数;
6c3)按照公式<7>计算图像块p各纹理区域与查询图像块p'各纹理区域在ssa尺度下的纹理模糊相似度
其中,表示图像块p在ssa尺度下各纹理区域模糊平均距离,表示查询图像块p'在ssa尺度下各纹理区域的模糊平均距离;
6d)对于图像块p与查询图像块p',利用ssa尺度的Prewitt算子及二值分割法得到ssa尺度下图像块p的边缘区域集及查询图像块p'的边缘区域集 分别表示图像块p与查询图像块p'在ssa尺度下利用边缘特征分割后的各区域,其中v=1,2,z=1,2;
6d1)设定Prewitt算子:
其中gy表示垂直方向的边缘检测算子,gx分别表示水平方向的边缘检测算子;
6d2)根据Prewitt算子,分别计算图像块p垂直方向的边缘信息与水平方向的边缘信息:
G y = p &CircleTimes; g y , G x = p &CircleTimes; g x - - - < 9 >
其中,Gy表示图像块p垂直方向的边缘信息,Gx表示图像块p水平方向的边缘信息,表示线性卷积;
6d3)根据图像块p垂直方向的边缘信息Gy与水平方向的边缘信息Gx,计算图像块p的边缘特征fE
f E = ( G y ) 2 + ( G x ) 2 - - - < 10 >
利用二值分割法对边缘特征fE进行分割得到边缘区域集;
6e)计算图像块p在ssa尺度下各边缘区域模糊平均距离并计算查询图像块p'在ssa尺度下各边缘区域的模糊平均距离根据得到的边缘区域模糊平均距离计算图像块p各边缘区域与查询图像块p'各边缘区域在ssa尺度下的边缘模糊相似度
6e1)按照公式<11>计算图像块p在ssa尺度下各边缘区域模糊平均距离
其中,为图像块p中边缘区域的平均特征向量,为图像块p中边缘区域的平均特征向量;
6e2)按照公式<12>计算查询图像块p'在ssa尺度下各边缘区域模糊平均距离
其中,为查询图像块p'中边缘区域的平均特征向量,为查询图像块p'中边缘区域的平均特征向量;
6e3)按照公式<13>计算图像块p各边缘区域与查询图像块p'各纹理区域在ssa尺度下的边缘模糊相似度
其中,表示图像块p在ssa尺度下各边缘区域模糊平均距离,表示查询图像p'在ssa尺度下各边缘区域模糊平均距离;
6f)根据6c)和6e)得到的ssa尺度纹理模糊相似度和ssa尺度边缘模糊相似度计算图像块p与查询图像块p'在ssa尺度下的模糊相似度ufmsa
6f1)按照公式<14>计算图像块p与查询图像块p'在ssa尺度下的模糊相似度ufmsa
ufm sa = &rho; t ( &omega; t L &RightArrow; t sa + &rho; e ( &omega; e L &RightArrow; e sa ) ) - - - < 14 >
其中,ρt表示纹理区域模糊相似度的权值,ρe表示边缘区域模糊相似度的权值,且ρte=1,ωt表示纹理区域重要性因子,ωe表示边缘区域重要性因子;
6f2)按照公式<15>计算纹理区域的重要性因子ωt
&omega; t = [ ( 1 - &lambda; ) &omega; &RightArrow; at + &lambda; &omega; &RightArrow; bt ] T - - - < 15 >
其中,分别表示纹理区域的面积分布和中心分布权值,λ表示约束条件;
6f3)按照公式<16>计算边缘区域的重要性因子ωe
&omega; e = [ ( 1 - &lambda; ) &omega; &RightArrow; ae + &lambda; &omega; &RightArrow; be ] T - - - < 16 >
其中,分别表示边缘区域的面积分布和中心分布权值,λ表示约束条件;
6g)按步骤6b)至6f)的方法,计算出图像块p与查询图像块p'所有尺度下的模糊相似度ufm={ufms1,…,ufmsa,…,ufmsn};
6h)根据6g)得到的所有尺度下的模糊相似度ufm,计算查询图像块p'与图像块p的多尺度区域模糊相似度msufm:
msufm = &Sigma; i s = s 1 sn &omega; i s &CenterDot; ufm i s - - - < 17 >
其中,表示ssa尺度模糊相似度ufmsa的权值,并且
6l)重复步骤6a)至6h),计算出查询图像块p'与图库中属于类别集合{c}中所有图像块的多尺度区域模糊相似度。
步骤7,按照步骤6得到的多尺度区域模糊相似度,以从大到小的顺序返回用户需要数量的图像,完成图像识别。
本发明的效果可通过以下仿真进一步说明:
1.仿真条件
本实例仿真条件如下:CORE i53.2GHz PC Windows 7操作系统,Matlab2012运行平台。
2.仿真内容及结果
仿真1.从图像库中随机选取100幅SAR图像块,用本发明和现有GMM检索系统分别对选取的SAR图像块进行识别仿真,按照如下式<18>计算仿真结果的查准率precision:
precision=nc/ns    <18>
式中,nc表示系统返回的图像块中满足条件的图像块数目,ns表示系统返回的图像块数目,仿真结果如图4所示,图4中横轴表示方法返回的图像块数量,纵轴表示平均查准率。
从图4中可以看出,本发明的整体平均识别精度要优于现有GMM检索系统。
仿真2.从图像库中随机选取80幅SAR图像块,用本发明和GMM检索系统分别对选取的SAR图像块进行识别仿真,计算仿真结果中每一种语义类别的查准率,结果如图5所示,其中要求返回图像块数量为35。横轴表示各语义类别,纵轴表示查准率。
从图5中可以看出,每种语义类别,本发明的识别精度要优于现有GMM检索系统。
综上,在针对SAR图像识别问题上,本发明不论是整体查准率还是各语义类别的查准率,均优于现有的GMM检索系统。

Claims (9)

1.一种基于多尺度模糊测度与半监督学习的SAR图像识别方法,包括如下步骤:
1)对原始SAR图像进行无重叠切分,以建立SAR图像库{p1,p2,…pτ,…,pN},从该图像库中按照目标单一原则挑选图像块{p1,p2,…pθ,…,pl},其中l<<N,1≤τ≤N,1≤θ≤l,N表示图库中的SAR图像块个数,l表示挑选出的SAR图像块个数,pτ表示图库中的某幅SAR图像块,pθ表示挑选出的某幅SAR图像块,所述目标单一原则是指图像块中某目标占图像总面积的一半以上;
2)提取所有图像块的平稳小波三层变换的子带能量,作为图像块的特征向量其中, n &OverBar; = 10 ;
3)将挑选出的SAR图像块{p1,p2,…pθ,…,pl}按照语义内容分成{ci,1≤i≤k}类,其中k表示语义类别的个数,并用对应的特征向量作为训练样本,训练高斯随机场半监督分类器,利用该分类器对SAR图像库{p1,p2,…pτ,…,pN}进行分类,得到具有类标的SAR图像库;
4)对用户输入的查询图像块p',采用与步骤2)相同的方法提取其特征向量f',并用与步骤3)相同的训练样本及训练好的高斯随机场半监督分类器,得到查询图像块的类别数ci
5)根据步骤4)得到的类别数ci及经验混淆矩阵,计算查询图像块的类别集合{c}:
5a)在已分类的SAR图像库中,随机挑选训练样本训练高斯随机场半监督分类器,用该分类器进行100次随机分类试验,得到经验混淆矩阵Con∈Rk×k,该混淆矩阵Con是方阵,其中第i行第j列元素Con(i,j)表示属于ci类的样本被分为cj类的个数,1≤i≤k,1≤j≤k;
5b)对经验混淆矩阵进行列归一化,即将一列中的每个元素除以该列元素的总和,得到经验的后验概率矩阵ConP∈Rk×k
5c)设置阈值T,将后验概率矩阵中的第i行第j列ConP(i,j)与阈值T进行比较,当ConP(i,j)≤T时,将ConP(i,j)设置为0,反之ConP(i,j)保持不变,阈值T的大小根据期望的每一列的非零元素个数设定;
5d)根据查询图像块的类别数ci,在后验概率矩阵ConP中的第i列中查找非零元素的位置,最终得到类别集合{c};
6)计算查询图像块p'与图库中属于类别集合{c}中所有图像块的多尺度区域模糊相似度;
7)按照步骤6)得到的多尺度区域模糊相似度,以从大到小的顺序返回用户需要数量的图像,完成图像识别。
2.根据权利要求1所述的SAR图像识别方法,其中步骤6)所述的计算查询图像块p'与图库中属于类别集合{c}中所有图像块的多尺度区域模糊相似度,按如下步骤进行:
6a)选取尺度集合s={ss1,…,ssa,…ssn},其中sn表示尺度个数,ssa表示某一尺度值,s1≤sa≤sn;
6b)对于图像块p与查询图像块p',分别以ssa×ssa区域大小为单位,计算离散小波一层变换的高频子带能量和灰度特征并用作为分割特征,利用自适应的k-means算法进行聚类,得到ssa尺度下图像块p纹理区域集及查询图像块p'的纹理区域集其中,分别表示图像块p与查询图像块p'在ssa尺度下利用纹理特征分割后的各区域,1≤h≤m,1≤o≤n,m表示图像块p的纹理区域的个数,n表示查询图像块p'的纹理区域的个数;
6c)计算图像块p在ssa尺度下各纹理区域的模糊平均距离并计算查询图像块p'在ssa尺度下各纹理区域的模糊平均距离根据得到的纹理区域模糊平均距离计算图像块p各纹理区域与查询图像块p'各纹理区域在ssa尺度下的纹理模糊相似度
6d)对于图像块p与查询图像块p',利用ssa尺度的Prewitt算子及二值分割法得到ssa尺度下图像块p的边缘区域集及查询图像块p'的边缘区域集 分别表示图像块p与查询图像块p'在ssa尺度下利用边缘特征分割后的各区域,其中v=1,2,z=1,2;
6e)计算图像块p在ssa尺度下各边缘区域模糊平均距离并计算查询图像块p'在ssa尺度下各边缘区域的模糊平均距离根据得到的边缘区域模糊平均距离计算图像块p各边缘区域与查询图像块p'各边缘区域在ssa尺度下的边缘模糊相似度
6f)根据6c)和6e)得到的ssa尺度纹理模糊相似度和ssa尺度边缘模糊相似度计算图像块p与查询图像块p'在ssa尺度下的模糊相似度ufmsa
6g)按步骤6b)至6f)的方法,计算出图像块p与查询图像块p'所有尺度下的模糊相似度ufm={ufms1,…,ufmsa,…,ufmsn};
6h)根据6g)得到的所有尺度下的模糊相似度ufm,计算查询图像块p'与图像块p的多尺度区域模糊相似度msufm:
msufm = &Sigma; i s = s 1 sn &omega; i s &CenterDot; ufm i s ,
其中,表示ssa尺度模糊相似度ufmsa的权值,并且
6l)重复步骤6a)至6h),计算出查询图像块p'与图库中属于类别集合{c}中所有图像块的多尺度区域模糊相似度。
3.根据权利要求2所述的SAR图像识别方法,其中所述步骤6c)中计算图像块p在ssa尺度下各纹理区域模糊平均距离通过如下公式计算:
其中,为图像块p中纹理区域的平均特征向量,为图像块p中纹理区域的平均特征向量,1≤h1,h2≤m,m表示图像块p的纹理区域的个数。
4.根据权利要求2所述的SAR图像识别方法,其中所述步骤6c)中计算查询图像块p'在ssa尺度下各纹理区域的模糊平均距离通过如下公式计算:
其中,为查询图像块p'中纹理区域的平均特征向量,为查询图像块p'中纹理区域的平均特征向量,1≤o1,o2≤n,n表示查询图像块p'的纹理区域的个数。
5.根据权利要求2所述的SAR图像识别方法,其中所述步骤6c)中计算图像块p各纹理区域与查询图像块p'各纹理区域在ssa尺度下的纹理模糊相似度通过如下公式计算:
其中,表示图像块p在ssa尺度下各纹理区域模糊平均距离,表示查询图像块p'在ssa尺度下各纹理区域的模糊平均距离。
6.根据权利要求2所述的SAR图像识别方法,其中所述步骤6e)中计算图像块p在ssa尺度下各边缘区域模糊平均距离通过如下公式计算:
其中,为图像块p中边缘区域的平均特征向量,为图像块p中边缘区域的平均特征向量。
7.根据权利要求2所述的SAR图像识别方法,其中所述步骤6e)中计算查询图像块p'在ssa尺度下各边缘区域模糊平均距离通过如下公式计算:
其中,为查询图像块p'中边缘区域的平均特征向量,为查询图像块p'中边缘区域的平均特征向量。
8.根据权利要求2所述的SAR图像识别方法,其中所述步骤6e)中计算图像块p各纹理区域与查询图像块p'各边缘区域在ssa尺度下的边缘模糊相似度通过如下公式计算:
其中,表示图像块p在ssa尺度下各边缘区域模糊平均距离,表示查询图像p'在ssa尺度下各边缘区域模糊平均距离。
9.根据权利要求2所述的SAR图像识别方法,其中所述步骤6f)图像块p与查询图像块p'在ssa尺度下的模糊相似度ufmsa,通过如下公式计算:
ufm sa = &rho; t ( &omega; t L &RightArrow; t sa ) + &rho; e ( &omega; e L &RightArrow; e sa ) ,
其中,ρt表示纹理区域模糊相似度的权值,ρe表示边缘区域模糊相似度的权值,且ρte=1,ωt表示纹理区域重要性因子,ωe表示边缘区域重要性因子,ωt和ωe可通过如下公式计算:
&omega; t = [ ( 1 - &lambda; ) &omega; &RightArrow; at + &lambda; &omega; &RightArrow; bt ] T ,
&omega; e = [ ( 1 - &lambda; ) &omega; &RightArrow; ae + &lambda; &omega; &RightArrow; be ] T ,
其中,分别表示纹理区域的面积分布和中心分布权值,分别表示边缘区域的面积分布和中心分布权值,λ表示平衡因子,0≤λ≤1。
CN201410674365.2A 2014-11-21 2014-11-21 基于多尺度模糊测度与半监督学习的sar图像识别方法 Active CN104331711B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410674365.2A CN104331711B (zh) 2014-11-21 2014-11-21 基于多尺度模糊测度与半监督学习的sar图像识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410674365.2A CN104331711B (zh) 2014-11-21 2014-11-21 基于多尺度模糊测度与半监督学习的sar图像识别方法

Publications (2)

Publication Number Publication Date
CN104331711A true CN104331711A (zh) 2015-02-04
CN104331711B CN104331711B (zh) 2017-09-29

Family

ID=52406432

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410674365.2A Active CN104331711B (zh) 2014-11-21 2014-11-21 基于多尺度模糊测度与半监督学习的sar图像识别方法

Country Status (1)

Country Link
CN (1) CN104331711B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105488458A (zh) * 2015-11-20 2016-04-13 中国船舶重工集团公司第七0九研究所 一种基于图像空间结构分布的舰船目标特征表示方法
CN108681743A (zh) * 2018-04-16 2018-10-19 腾讯科技(深圳)有限公司 图像对象识别方法和装置、存储介质
CN110686591A (zh) * 2019-10-14 2020-01-14 潍坊中科晶上智能装备研究院有限公司 一种基于农机gps定位数据的农田作业面积测算方法
CN111563528A (zh) * 2020-03-31 2020-08-21 西北工业大学 基于多尺度特征学习网络与双边滤波的sar图像分类方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5488374A (en) * 1994-10-14 1996-01-30 Hughes Aircraft Company Multi-scale adaptive filter for interferometric SAR data
CN101046387A (zh) * 2006-08-07 2007-10-03 南京航空航天大学 利用景象匹配提高导航系统精度的方法及组合导航仿真系统
CN101329736A (zh) * 2008-06-20 2008-12-24 西安电子科技大学 基于特征选择和隐马尔科夫模型的图像分割方法
CN101551809B (zh) * 2009-05-13 2011-04-06 西安电子科技大学 基于高斯混合模型分类的sar图像检索方法
CN103455975A (zh) * 2012-05-29 2013-12-18 中国科学院电子学研究所 合成孔径雷达图像边缘增强的方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5488374A (en) * 1994-10-14 1996-01-30 Hughes Aircraft Company Multi-scale adaptive filter for interferometric SAR data
CN101046387A (zh) * 2006-08-07 2007-10-03 南京航空航天大学 利用景象匹配提高导航系统精度的方法及组合导航仿真系统
CN101329736A (zh) * 2008-06-20 2008-12-24 西安电子科技大学 基于特征选择和隐马尔科夫模型的图像分割方法
CN101551809B (zh) * 2009-05-13 2011-04-06 西安电子科技大学 基于高斯混合模型分类的sar图像检索方法
CN103455975A (zh) * 2012-05-29 2013-12-18 中国科学院电子学研究所 合成孔径雷达图像边缘增强的方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张鹏: "《基于统计模型的SAR图像降斑和分割方法研究》", 《中国博士学位论文全文数据库 信息科技辑》 *

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105488458A (zh) * 2015-11-20 2016-04-13 中国船舶重工集团公司第七0九研究所 一种基于图像空间结构分布的舰船目标特征表示方法
CN105488458B (zh) * 2015-11-20 2018-11-02 中国船舶重工集团公司第七0九研究所 一种基于图像空间结构分布的舰船目标特征表示方法
CN108681743A (zh) * 2018-04-16 2018-10-19 腾讯科技(深圳)有限公司 图像对象识别方法和装置、存储介质
US11227182B2 (en) 2018-04-16 2022-01-18 Tencent Technology (Shenzhen) Company Limited Method, apparatus, and storage medium for recognizing image object
CN110686591A (zh) * 2019-10-14 2020-01-14 潍坊中科晶上智能装备研究院有限公司 一种基于农机gps定位数据的农田作业面积测算方法
CN110686591B (zh) * 2019-10-14 2021-04-20 潍坊中科晶上智能装备研究院有限公司 一种基于农机gps定位数据的农田作业面积测算方法
CN111563528A (zh) * 2020-03-31 2020-08-21 西北工业大学 基于多尺度特征学习网络与双边滤波的sar图像分类方法
CN111563528B (zh) * 2020-03-31 2022-03-11 西北工业大学 基于多尺度特征学习网络与双边滤波的sar图像分类方法

Also Published As

Publication number Publication date
CN104331711B (zh) 2017-09-29

Similar Documents

Publication Publication Date Title
CN101551809B (zh) 基于高斯混合模型分类的sar图像检索方法
CN102496034B (zh) 基于直线单词的高空间分辨率遥感图像词袋分类方法
CN112446388A (zh) 一种基于轻量化二阶段检测模型的多类别蔬菜幼苗识别方法及系统
CN102810158B (zh) 一种基于多尺度语义模型的高分辨率遥感目标提取方法
CN105389550B (zh) 一种基于稀疏指引与显著驱动的遥感目标检测方法
CN103810704B (zh) 基于支持向量机和判别随机场的sar图像变化检测方法
CN103984746B (zh) 基于半监督分类与区域距离测度的sar图像识别方法
CN103810299A (zh) 基于多特征融合的图像检索方法
CN102129573A (zh) 基于字典学习和稀疏表示的sar图像分割方法
CN105608690A (zh) 一种基于图论和半监督学习相结合的图像分割方法
CN102324038A (zh) 一种基于数字图像的植物种类识别方法
CN106408030A (zh) 基于中层语义属性和卷积神经网络的sar图像分类方法
CN106096506A (zh) 基于子类类间判别双字典的sar目标识别方法
CN101710422B (zh) 基于全局流形原型聚类算法与分水岭算法的图像分割方法
CN101515328B (zh) 一种用于鉴别具有统计不相关性的局部保持投影方法
CN109635789B (zh) 基于强度比和空间结构特征提取的高分辨sar图像分类方法
CN103745233B (zh) 基于空间信息迁移的高光谱图像分类方法
CN105989336A (zh) 基于带权重的解卷积深度网络学习的场景识别方法
CN103605985A (zh) 一种基于张量全局-局部保持投影的数据降维方法
CN103839078A (zh) 一种基于主动学习的高光谱图像分类方法
CN103971106A (zh) 多视角人脸图像性别识别方法及装置
CN104298999A (zh) 基于递归自动编码的高光谱特征学习方法
CN104331711A (zh) 基于多尺度模糊测度与半监督学习的sar图像识别方法
CN103440508A (zh) 基于视觉词袋模型的遥感图像目标识别方法
CN103136545A (zh) 基于空间一致性的高分辨率遥感图像解析树自动提取方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant