CN103646389A - 一种基于几何模型的sar斜距图像同名点自动提取方法 - Google Patents

一种基于几何模型的sar斜距图像同名点自动提取方法 Download PDF

Info

Publication number
CN103646389A
CN103646389A CN201310098637.4A CN201310098637A CN103646389A CN 103646389 A CN103646389 A CN 103646389A CN 201310098637 A CN201310098637 A CN 201310098637A CN 103646389 A CN103646389 A CN 103646389A
Authority
CN
China
Prior art keywords
image
model
same place
point
sar
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201310098637.4A
Other languages
English (en)
Inventor
尤红建
王山虎
胡东辉
付琨
丁赤飚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute of Electronics of CAS
Original Assignee
Institute of Electronics of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Electronics of CAS filed Critical Institute of Electronics of CAS
Priority to CN201310098637.4A priority Critical patent/CN103646389A/zh
Publication of CN103646389A publication Critical patent/CN103646389A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Image Processing (AREA)

Abstract

本发明提供一种基于几何模型的SAR斜距图像同名点自动提取方法,克服了斜距图像间几何畸变较大时SIFT提取不到足量重复特征的问题,并基于改进的RANSAC算法,有效地筛选出正确的匹配点。首先利用载机航迹和DEM建立两幅图像间的成像几何关系,进而将一幅图像A变换到另一幅图像B的坐标上,得图像C;然后在采样的图像上采用尺度不变特征变换方法(SIFT)提取图像B和C之间的同名点,最后采用多模型随机抽样一致方法(RANSAC)筛选出正确的同名点,将图像C上的同名点坐标变换到图像A上,得图像A和B的同名点。

Description

一种基于几何模型的SAR斜距图像同名点自动提取方法
技术领域
本发明属于遥感图像处理领域,涉及一种基于几何模型的SAR斜距图像同名点自动提取方法。 
背景技术
稀疏控制点条件下,利用区域网平差方法拼接多条航带的SAR图像时,需要从存在较大视角差异的斜距图像上提取同名点。另外,同名点提取在图像配准、立体像对以及目标检测和识别等领域也具有重要应用。同名点提取可分为三个阶段:(1)特征检测与描述:检测图像中的点、线或面特征,并计算特征邻域的结构或形状信息形成描述子向量;(2)特征匹配:采用相似性度量准则计算描述子间的距离并得到匹配对;(3)匹配点筛选:根据几何约束条件筛选出正确的匹配点,即同名点。学者们提出了大量自动提取同名点的算法,SIFT是其中较为经典的一个,它具有旋转、尺度以及局部仿射和灰度不变性,因此广泛应用于计算机视觉、医学图像处理以及遥感图像处理等领域。 
针对相邻航带的斜距图像,不同视角和地形导致图像不同位置处存在不同的几何畸变,因此将SIFT应用于SAR斜距图像同名点提取时,存在两个问题:一是检测的特征点不容易匹配,二是正确的匹配点不容易筛选。可考虑使用具有仿射不变特性的ASIFT算法,但其通过构建仿射模板来模拟仿射变形,计算复杂度非常高。与自然场景图像不同,遥感图像通常记录了成像时的姿态信息,因此我们考虑利用SAR平台的飞行轨迹和DEM这些先验信息变换图像,进而减轻仿射变形的影响。变换后的图像间仍存在局部仿射变形,可利用SIFT提取同名点,但其提取的同名点中通常包含错误的,传统的RANSAC算法只能筛选出部分正确的,漏掉了大量正确的同名点,因此将该方法应用到SAR图像中时,急需结合SAR斜距图像的特性做相应的改进。 
发明内容
本发明的目的是提供一种基于几何模型的SAR斜距图像同名点自动提取方法,克服了斜距图像间几何畸变较大时SIFT提取不到足量重复特征的问题,并基于改进的RANSAC算法,有效地筛选出正确的匹配点。 
为达到上述目的,本发明的技术解决方案如下: 
该基于几何模型的SAR斜距图像同名点自动提取方法,首先利用载机航迹和DEM建立两 幅图像间的成像几何关系,进而将一幅图像A变换到另一幅图像B的坐标上,得图像C;然后在采样的图像上采用尺度不变特征变换方法(SIFT)提取图像B和C之间的同名点,最后采用多模型随机抽样一致方法(RANSAC)筛选出正确的同名点,将图像C上的同名点坐标变换到图像A上,得图像A和B的同名点。 
其中多模型随机抽样一致方法(RANSAC)筛选同名点采用以下方法: 
(1)设有n对匹配点,首先随机抽选4对点,计算匹配点对间的一次多项式变换模型; 
(2)利用变换模型测试其他匹配点对,如果符合模型则认为它为内点,如果内点数量小于设定的阈值,则开始下一次迭代; 
(3)利用所有内点,采用最小二乘拟合方法重新计算变换模型,计算变换模型与内点的错误率,并保留内点和模型参数,进行下一次迭代; 
(4)重复步骤(1)、(2)、(3)直到迭代次数k满足收敛条件,迭代结束,得到每次符合条件的迭代所保存的内点,剔除重复点,则得到最后筛选出来的匹配点对。 
本发明的有益效果: 
本发明基于SAR成像模型,将SIFT成功应用于SAR斜距图像同名点的自动提取:(1)利用SAR的几何模型改进SIFT算法,克服了斜距图像间几何畸变较大时SIFT提取不到足量重复特征的问题,(2)将多模型引入到RANSAC算法,增加了筛选后的正确点数量。 
附图说明
图1为本发明基于几何模型的SAR斜距图像同名点自动提取方法的流程示意图。 
图2为本发明第一步中相邻航带的成像几何关系图。 
图3为本发明第一步中图像变换前后示意图。图3(a)为第一幅图像B,图3(b)为第二幅图像A,图3(c)为第一幅图像B变换后的图像C。 
图4为本发明中第三步多模型RANSAC算法的流程图。 
图5为本发明与传统SIFT算法的结果对比图。 
具体实施方式
以下结合实施例和附图对本发明方法进一步说明。 
图1为本发明基于基于几何模型的SAR斜距图像同名点自动提取方法的流程示意图,具体步骤包括: 
第一步,利用载机航迹和DEM建立两幅图像间的成像几何关系,进而将一幅图像A变换到另一幅图像B的坐标上,得图像C; 
第二步,采用大尺度SIFT方法提取图像B和C之间的同名点; 
第三步,采用改进的RANSAC算法,即多模型RANSAC算法筛选出正确的同名点; 
第四步,将图像C上的同名点坐标变换到图像A上,得图像A和B的同名点。 
第一步中具体方法是: 
对机载SAR成像,通常需要对真实航迹进行运动补偿,使其为某个直角坐标下的一条直线并满足零多普勒条件。本方法选定东北天坐标系,如附图2所示,坐标原点可自定,飞机自西向东飞行且为右侧视成像,航迹均在与z轴垂直的平面内。设航迹L1的方向向量为(Ox,Oy,0),斜率为k1,截距为b1,α1为L1与x轴夹角,z1为飞行高度,L1对应的斜距图像为I1。航迹L2的方向向量为(Dx,Dy,0),斜率为k2,截距为b2,α2为航迹L2与x轴夹角,(Fx,Fy,z2)为航迹L2上任一点,z2为飞行高度,L2对应的斜距图像为I2。 
图像方位向上第i个点,对应航迹上第i个点,因此由图像I1上任一点的坐标(i1,j1)可得其对应的航迹L1上的点A的坐标(Ax,Ay,z1)。点A与其对应的地面点P之间的距离为R1=RA+j1r1,且两点的连线垂直于航迹L1,故由式(1)可求解点P的坐标(Px,Py,h)。式中,RA为图像I1的近端斜距,δr1为斜距分辨率,h由DEM给出。 
R 1 = ( A x - P x ) 2 + ( A y - P y ) 2 + ( z 1 - h ) 2 O x · ( A x - P x ) + O y · ( A y - P y ) = 0 - - - ( 1 )
解该方程得式(2) 
P y = A y - R 1 2 - ( z 1 - h ) 2 1 + k 1 2 = A y - cos α 1 · R 1 · sin θ 1 P x = A x - k 1 ( P y - A y ) = A x + k 1 · cos α 1 · R 1 · sin θ 1 - - - ( 2 )
其中,θ1为点P的视角。 
地面点P与其对应的航迹L2上的点B的连线垂直于L2,并且点B坐标满足L2的直线方程,故由方程(3)可求解点B坐标。 
( B x - F x ) / D x = ( B y - F y ) / D y D x · ( B x - P x ) + D y · ( B y - P y ) = 0 - - - ( 3 )
解该方程可得式(4) 
B x = ( P x + k 2 · P y - k 2 · b 2 ) / ( 1 + k 2 2 ) B y = ( k 2 · P x + k 2 2 · P y + b 2 ) / ( 1 + k 2 2 ) - - - ( 4 )
由航迹上的点与图像方位向上的点之间的对应关系以及斜距方程,可得点B在图像I2上的对应点,如式(5) 
i 2 = ( B x - F x ) 2 + ( B y - F y ) 2 / δ j 2 = ( R 2 - R B ) / δ r 2 - - - ( 5 )
其中,δ为航迹L2上相邻两点的间隔,δr2为图像I2的斜距分辨率,RB是近端斜距,  R 2 = ( B x - P x ) 2 + ( B y - P y ) 2 + ( z 2 - h ) 2 . 由式(2)、(4)和(5),可以计算图像I1上每点在图像I2上的对应点,重采样I2即可得变换后的图像。 
第二步中具体方法是:变换后的图像间仍存在局部仿射变形,传统的基于互相关的方法适合处理仅存在平移的情况,而SIFT算法具有旋转、尺度以及局部仿射和灰度不变性,且计算速度较快,因此我们选用其作为同名点提取的方法。SIFT首先检测图像高斯尺度空间中稳定的块点(blob),然后利用梯度方向直方图计算特征点主方向并形成描述子,最后采用欧式距离衡量描述子的相似性。 
SAR图像是相干处理得到的,因此图像上存在大量的乘性斑点噪声,影响了同名点提取算法的性能。可采用专门的滤波器降斑,然后用SIFT提取同名点,但这样会增加额外的滤波计算量。尺度空间建立时,高斯函数模糊图像的同时会减少斑点噪声,对图像的降采样相当于多视处理,会进一步减少斑点噪声。因此为了去除斑点噪声的影响,直接在大尺度上提取特征,可大大提高计算速度。 
第三步中具体方法是:根据相似性度量得到的匹配点中通常有错误的匹配点,需要从中筛选出正确的。目前有很多一致性检验方法,RANSAC算法是其中较为经典的一个,它计算简单高效,因此得到了广泛应用。它基于假设检验的原理,假定有n对匹配点,首先随机抽选m对点,计算匹配点集间变换模型的参数,m为计算模型参数所需的最小点数,如一次多项式模型需要4对点,然后统计符合该模型的匹配点数。重复该过程直到满足收敛条件,有最多匹配点数的模型保留下来,符合该模型的匹配点即为筛选出的匹配点。其中,收敛条件为k次采样至少有一次全是内点(正确的匹配点)的概率不小于η。设ε为内点概率,收敛条件满足式(8),迭代次数满足式(9)。ε是未知的,故每次迭代时用当前最大匹配点数在匹配点集中的比例代替。 
( 1 - &epsiv; m ) k < 1 - &eta; - - - ( 8 )
k > ln ( 1 - &eta; ) / ln ( 1 - &epsiv; m ) - - - ( 9 )
针对基本的RANSAC算法收敛速度较慢的问题,很多算法对其进行了改进,主要是利用先验信息产生更可能是内点的采样或较早去除不全是内点的采样。但这些算法都基于同样的假设:若一次采样中全是内点,则通过该采样计算的变换模型可以把所有内点筛选出来。SAR是侧视成像,图像近距和远距不同位置处几何畸变不同,即便是利用先验信息进行了变换,图像间仍不能只用一个模型就把所有内点筛选出来。因此我们引入多模型RANSAC算法,迭代中某次模型得到的内点数大于指定阈值,则保留这些匹配点,而不是仅保留有最多内点数的模型下的匹配点,这样就大大增多了筛选出的内点数量。 
图3给出了一个变换的示例,图3(a)为图像B,图3(b)为图像A,可以看出两幅图像间存在较严重的几何畸变,图3(c)为变换后的图像C,可以看出B和C之间的几何畸变大大减轻了,有利于后续同名点的自动提取。 
图4给出了本发明方法和传统的SIFT方法的结果对比图,可以看出,本发明方法提取的同名点数量明显多于传统的SIFT方法。 

Claims (2)

1.基于几何模型的SAR斜距图像同名点自动提取方法,其特征在于:首先利用载机航迹和DEM建立两幅图像间的成像几何关系,进而将一幅图像A变换到另一幅图像B的坐标上,得图像C;然后在采样的图像上采用尺度不变特征变换方法(SIFT)提取图像B和C之间的同名点,最后采用多模型随机抽样一致方法(RANSAC)筛选出正确的同名点,将图像C上的同名点坐标变换到图像A上,得图像A和B的同名点。
2.如权利要求1所述的基于几何模型的SAR斜距图像同名点自动提取方法,其特征在于:其中多模型随机抽样一致方法(RANSAC)筛选同名点采用以下方法:
(1)设有n对匹配点,首先随机抽选4对点,计算匹配点对间的一次多项式变换模型;
(2)利用变换模型测试其他匹配点对,如果符合模型则认为它为内点,如果内点数量小于设定的阈值,则开始下一次迭代;
(3)利用所有内点,采用最小二乘拟合方法重新计算变换模型,计算变换模型与内点的错误率,并保留内点和模型参数,进行下一次迭代;
(4)重复步骤(1)、(2)、(3)直到迭代次数k满足收敛条件,迭代结束,得到每次符合条件的迭代所保存的内点,剔除重复点,则得到最后筛选出来的匹配点对。
CN201310098637.4A 2013-03-26 2013-03-26 一种基于几何模型的sar斜距图像同名点自动提取方法 Pending CN103646389A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310098637.4A CN103646389A (zh) 2013-03-26 2013-03-26 一种基于几何模型的sar斜距图像同名点自动提取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310098637.4A CN103646389A (zh) 2013-03-26 2013-03-26 一种基于几何模型的sar斜距图像同名点自动提取方法

Publications (1)

Publication Number Publication Date
CN103646389A true CN103646389A (zh) 2014-03-19

Family

ID=50251599

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310098637.4A Pending CN103646389A (zh) 2013-03-26 2013-03-26 一种基于几何模型的sar斜距图像同名点自动提取方法

Country Status (1)

Country Link
CN (1) CN103646389A (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106920235A (zh) * 2017-02-28 2017-07-04 中国科学院电子学研究所 基于矢量底图匹配的星载光学遥感影像自动校正方法
CN108304883A (zh) * 2018-02-12 2018-07-20 西安电子科技大学 基于改进sift的sar图像匹配方法
CN109738896A (zh) * 2019-02-11 2019-05-10 黄河水利职业技术学院 一种基于sar影像匹配技术的地表形变监测方法
CN110097585A (zh) * 2019-04-29 2019-08-06 中国水利水电科学研究院 一种基于sift算法的sar影像匹配方法及系统
CN110188777A (zh) * 2019-05-31 2019-08-30 余旸 一种基于数据挖掘的多周期钢轨伤损数据对齐方法
CN112541950A (zh) * 2019-09-20 2021-03-23 杭州海康机器人技术有限公司 一种深度相机外参的标定方法、及装置
CN113066121A (zh) * 2019-12-31 2021-07-02 深圳迈瑞生物医疗电子股份有限公司 图像分析系统和识别重复细胞的方法
CN117687028A (zh) * 2024-02-02 2024-03-12 中国科学院空天信息创新研究院 一种基于干涉sar条纹图匹配的载机平台三维定位方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1426021A (zh) * 2002-12-19 2003-06-25 上海交通大学 遥感图像的非线性配准方法
JP2008185375A (ja) * 2007-01-29 2008-08-14 Mitsubishi Electric Corp Sar画像の3d形状算出装置及びsar画像の歪補正装置
CN101840517A (zh) * 2010-04-27 2010-09-22 武汉大学 一种基于影像配准的控制点影像库匹配方法及其装置
CN102073874A (zh) * 2010-12-29 2011-05-25 中国资源卫星应用中心 附加几何约束的航天三线阵ccd相机多影像立体匹配方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1426021A (zh) * 2002-12-19 2003-06-25 上海交通大学 遥感图像的非线性配准方法
JP2008185375A (ja) * 2007-01-29 2008-08-14 Mitsubishi Electric Corp Sar画像の3d形状算出装置及びsar画像の歪補正装置
CN101840517A (zh) * 2010-04-27 2010-09-22 武汉大学 一种基于影像配准的控制点影像库匹配方法及其装置
CN102073874A (zh) * 2010-12-29 2011-05-25 中国资源卫星应用中心 附加几何约束的航天三线阵ccd相机多影像立体匹配方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
M.ZULIANI ET AL.: "The MultiRANSAC Algorithm and Its Application to Detect Planar Homographies", 《IMAGE PROCESSING, 2005. ICIP 2005. IEEE INTERNATIONAL CONFERENCE ON》 *
YASUSHI KANAZAWA ET AL.: "Detection of Planar Regions with Uncalibrated Stereo using Distributions of Feature Points", 《BRITISH MACHINE VISION CONFERENCE》 *
杨朝辉 等: "基于SIFT特征的合成孔径雷达景象匹配方法", 《计算机应用》 *
王山虎 等: "基于大尺度双边SIFT 的SAR图像同名点自动提取方法", 《电子与信息学报》 *

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106920235A (zh) * 2017-02-28 2017-07-04 中国科学院电子学研究所 基于矢量底图匹配的星载光学遥感影像自动校正方法
CN106920235B (zh) * 2017-02-28 2020-06-26 中国科学院电子学研究所 基于矢量底图匹配的星载光学遥感影像自动校正方法
CN108304883A (zh) * 2018-02-12 2018-07-20 西安电子科技大学 基于改进sift的sar图像匹配方法
CN108304883B (zh) * 2018-02-12 2022-09-16 西安电子科技大学 基于改进sift的sar图像匹配方法
CN109738896A (zh) * 2019-02-11 2019-05-10 黄河水利职业技术学院 一种基于sar影像匹配技术的地表形变监测方法
CN110097585A (zh) * 2019-04-29 2019-08-06 中国水利水电科学研究院 一种基于sift算法的sar影像匹配方法及系统
CN110188777A (zh) * 2019-05-31 2019-08-30 余旸 一种基于数据挖掘的多周期钢轨伤损数据对齐方法
CN110188777B (zh) * 2019-05-31 2023-08-25 东莞先知大数据有限公司 一种基于数据挖掘的多周期钢轨伤损数据对齐方法
CN112541950A (zh) * 2019-09-20 2021-03-23 杭州海康机器人技术有限公司 一种深度相机外参的标定方法、及装置
CN113066121A (zh) * 2019-12-31 2021-07-02 深圳迈瑞生物医疗电子股份有限公司 图像分析系统和识别重复细胞的方法
CN117687028A (zh) * 2024-02-02 2024-03-12 中国科学院空天信息创新研究院 一种基于干涉sar条纹图匹配的载机平台三维定位方法
CN117687028B (zh) * 2024-02-02 2024-06-11 中国科学院空天信息创新研究院 一种基于干涉sar条纹图匹配的载机平台三维定位方法

Similar Documents

Publication Publication Date Title
CN103646389A (zh) 一种基于几何模型的sar斜距图像同名点自动提取方法
US11244197B2 (en) Fast and robust multimodal remote sensing image matching method and system
CN103679714B (zh) 一种基于梯度互相关的光学和sar图像自动配准方法
CN104766058B (zh) 一种获取车道线的方法和装置
CN103761524B (zh) 一种基于图像的线性目标识别与提取方法
CN103455797A (zh) 航拍视频中运动小目标的检测与跟踪方法
CN103914847A (zh) 基于相位一致性和sift的sar图像配准方法
CN102865859B (zh) 一种基于surf特征的航空序列图像位置估计方法
CN107481315A (zh) 一种基于Harris‑SIFT‑BRIEF算法的单目视觉三维环境重建方法
WO2016106955A1 (zh) 一种激光红外复合的地面建筑物识别及导航方法
CN103093459B (zh) 利用机载LiDAR点云数据辅助影像匹配的方法
CN106485690A (zh) 基于点特征的点云数据与光学影像的自动配准融合方法
CN101383899A (zh) 一种空基平台悬停视频稳像方法
CN103593832A (zh) 一种基于高斯二阶差分特征检测算子的图像拼接方法
CN104361590A (zh) 一种控制点自适应分布的高分辨率遥感影像配准方法
CN104268853A (zh) 一种红外图像与可见光图像配准方法
CN104574401A (zh) 一种基于平行线匹配的图像配准方法
CN103778436A (zh) 一种基于图像处理的行人姿态检测方法
CN103177444A (zh) 一种sar图像自动配准方法
CN111914695B (zh) 一种基于机器视觉的涌潮监测方法
CN109711256B (zh) 一种低空复杂背景无人机目标检测方法
CN102853835B (zh) 基于尺度不变特征变换的无人飞行器景象匹配定位方法
CN104021559A (zh) 基于互信息和Harris角点检测的图像配准方法
CN110580705B (zh) 一种基于双域图信号滤波检测建筑物边缘点的方法
CN105354863A (zh) 基于特征滤波和快速运动检测模板预测的自适应尺度图像序列目标跟踪方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140319