CN108830889B - 基于全局几何约束的遥感影像与基准影像的匹配方法 - Google Patents

基于全局几何约束的遥感影像与基准影像的匹配方法 Download PDF

Info

Publication number
CN108830889B
CN108830889B CN201810510431.0A CN201810510431A CN108830889B CN 108830889 B CN108830889 B CN 108830889B CN 201810510431 A CN201810510431 A CN 201810510431A CN 108830889 B CN108830889 B CN 108830889B
Authority
CN
China
Prior art keywords
remote sensing
image
sensing image
matching
reference image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810510431.0A
Other languages
English (en)
Other versions
CN108830889A (zh
Inventor
邸凯昌
辛鑫
刘斌
祝小勇
唐新明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute of Remote Sensing and Digital Earth of CAS
Original Assignee
Institute of Remote Sensing and Digital Earth of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Remote Sensing and Digital Earth of CAS filed Critical Institute of Remote Sensing and Digital Earth of CAS
Priority to CN201810510431.0A priority Critical patent/CN108830889B/zh
Publication of CN108830889A publication Critical patent/CN108830889A/zh
Application granted granted Critical
Publication of CN108830889B publication Critical patent/CN108830889B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/30Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30181Earth observation

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)

Abstract

本发明涉及一种基于全局几何约束的遥感影像与基准影像的匹配方法,其特征在于包括以下内容:构建遥感影像成像几何模型;读取参考影像数据和待匹配遥感影像,对参考影像数据预处理得到基准影像;对待匹配遥感影像进行预处理;将基准影像与待配准遥感影像进行仿射‑尺度不变特征变换匹配,提取特征点,并获取最小二乘匹配的初值;基于最小二乘匹配的初值通过全局约束最小二乘匹配模型进行最小二乘匹配,输出待配准遥感影像的辐射变形参数以及几何变形参数。

Description

基于全局几何约束的遥感影像与基准影像的匹配方法
技术领域
本发明是关于一种基于全局几何约束的遥感影像与基准影像的匹配方法,涉及摄影测量与遥感影像处理技术领域。
背景技术
在航空航天及深空摄影测量中,利用遥感影像进行几何定位,往往需要将影像纠正到统一的基准。遥感影像的纠正中需要建立几何模型,即为构建影像坐标与基准坐标系间的关系。几何模型可以由遥感影像获取时的轨道、姿态等测控参数获取,同时也可以由影像与基准数据间匹配建立的对应关系拟合获取。由于各种测量的系统误差及随机误差,例如卫星轨道和姿态测量误差、相机畸变等,导致利用测控星历数据获取的遥感影像几何模型计算存在一定偏差,使得卫星影像直接纠正后,影像之间存在着较大的空间不一致性及整体地形偏移等问题。例如不同传感器获取的多源遥感影像间、同一传感器不同时间获取的遥感影像间都存在着几何不一致性。因此需要将影像与空间参考数据进行配准,获取控制点进行影像模型的精化。遥感影像与基准数据的配准,可以为影像高精度几何处理提供精确的地面控制点,为几何模型的精化,仪器校正,自动校正等领域服务。同时也可以直接作为控制点进行遥感影像的纠正,因此为了充分利用多源遥感影像,实现不同数据源在定位精度、分辨率、覆盖范围等各方面的优势互补,将这些影像与参考影像进行配准,使其统一到一致的空间参考中则显得尤为重要。
传统的遥感影像与参考影像间的匹配,往往只顾及影像的灰度信息,例如利用SIFT、特征提取与匹配等常规的方案进行影像与影像间的匹配。在影像已经具有初始几何模型时,几何模型往往只用于获取初始匹配点或限定匹配搜索范围,并没有充分利用几何信息的约束来提高匹配的精度。在参考影像分辨率较高、影像质量较好情况下,遥感影像与参考影像间的匹配精度往往能达到较高精度,此时几何模型内部一致性约束下的精度低于影像间的匹配精度,几何模型全局约束不会提高匹配精度。然而在参考影像或参考数据信息量不足,分辨率较遥感影像更低的时候,遥感影像自身几何模型的一致性精度会优于影像匹配定位精度,此时利用遥感影像自身几何模型的全局约束进行匹配,将能提高匹配精度。
发明内容
针对上述问题,本发明的目的是提供一种能够提高遥感影像与参考数据的匹配精度的基于全局几何约束的遥感影像与基准影像的匹配方法。
为实现上述目的,本发明采取以下技术方案:一种基于全局几何约束的遥感影像与基准影像的匹配方法,其特征在于包括以下内容:构建遥感影像成像几何模型;读取参考影像数据和待匹配遥感影像,对参考影像数据预处理得到基准影像;对待匹配遥感影像进行预处理;将基准影像与待配准遥感影像进行仿射-尺度不变特征变换匹配,提取特征点,并获取最小二乘匹配的初值;基于最小二乘匹配的初值通过全局约束最小二乘匹配模型进行最小二乘匹配,输出待配准遥感影像的辐射变形参数以及几何变形参数。
进一步地,当参考影像数据只有DEM时,对DEM进行预处理构建基准影像,具体过程为:
2.1)在DEM上,逐像素计算在x与y方向的梯度;
2.2)根据梯度值,逐像素计算坡度S、坡向值A;
2.3)根据参考影像数据的头文件信息,创建与DEM相同大小的空影像,逐像素计算其对应的模拟辐射值信息并存入空影像,构建得到基准影像:
I=255×(cosAlt×cosS+sinAlt×sinS×cosAzi-A)
式中,I为基准影像各像素的模拟辐射值,Alt为遥感影像获取时的太阳高度角,Azi为遥感影像获取时的太阳方位角。
进一步地,当参考影像数据为DOM时,DOM即为基准影像。
进一步地,对待配准遥感影像进行预处理的具体过程为:
2.1)计算待配准遥感影像的直方图pr(rk),具体过程为:
a)将待配准遥感影像的灰度级归一化:
Figure BDA0001672255820000021
式中,L为灰度级层次数,rk为遥感影像第k级的灰度,k为遥感影像的灰度级别;
b)计算各灰度级出现的概率pr(rk):
Figure BDA0001672255820000022
式中,nk为像素值为k的像素的频数,pr(rk)为其出现的概率,N为遥感影像的像素总数。
2.2)将rk根据变换函数T(rk)进行变换得到的灰度级sk,将sk四舍五入为范围[0,L-1]内的整数:
Figure BDA0001672255820000023
式中,nj为灰度值为rj的像素数;
2.3)将步骤2.1)和2.2)计算出的sk与G(zq)进行匹配,具体过程为:
A)采用步骤2.1)计算基准影像的灰度级直方图pz(zq),并对q=0,1,2,…,L-1计算变换函数G的所有值,把G的值四舍五入为范围[0,L-1]内的整数,并将G存储在一个表中:
Figure BDA0001672255820000031
式中,zq为基准影像直方图匹配后第q级的灰度,zi为基准影像直方图匹配后第i级的灰度;
B)对每一个值sk,k=0,1,2,…,L-1,使用步骤A)存储的G值寻找相应的zq值,以使G(zq)最接近sk,并存储这些从s到z的映射,当满足给定sk的zq值多于一个时,按惯例选择最小的值;
C)使用步骤B)找到的映射将待配准遥感影像的每个变换后的像素值sk映射为基准影像的相应zq值,形成直方图匹配后的待配准遥感影像。
进一步地,计算待配准遥感影像所有灰度级sk的具体过程为:
a)将待配准遥感影像的灰度级归一化,若遥感图像的灰度级为0,1,…,L-1,则令:
Figure BDA0001672255820000032
式中,L为灰度级层次数,rk为遥感影像第k级的灰度,k为遥感影像的灰度级别;
b)计算各灰度级的像素频数
假设nk为灰度级为rk的像素个数,N为总的像素个数,令:
Figure BDA0001672255820000033
式中,nk为像素值为k的像素的频数,pr(rk)为其出现的概率;
c)计算第k级的灰度级
Figure BDA0001672255820000034
式中,nj为灰度值为rj的像素数。
进一步地,将基准影像与待配准遥感影像进行仿射-尺度不变特征变换匹配,提取特征点,并获取最小二乘匹配的初值的具体过程为:
3.1)采用仿射-尺度不变特征变换算法获得待配准遥感影像与基准影像之间的初始匹配点;
3.2)根据初始匹配点结合DEM计算有理函数模型精化参数
Figure BDA0001672255820000041
Figure BDA0001672255820000042
式中,(r,c)为像点坐标,(r′,c′)为地面点利用RFM反投影到像方的投影坐标,
Figure BDA0001672255820000043
Figure BDA0001672255820000044
为RFM精化参数;
3.3)在基准影像上提取特征点;
3.4)计算全局最小二乘匹配初值:将步骤3.3)中提取的特征点通过有理函数模型以及步骤3.2)计算得出的精化参数反投影至像方,得到特征点在待配准遥感影像上的像点坐标,作为全局最小二乘匹配的初值。
进一步地,在基准影像上提取特征点的具体过程为:
1)确定一个n×n大小的影像窗口,对窗口内的每一个像素点进行一阶差分运算,求得在x,y方向的梯度gx,gy
2)对梯度值进行高斯滤波:
Figure BDA0001672255820000045
Figure BDA0001672255820000046
式中,Ga为高斯卷积模板,σ取0.4,gx为灰度在x方向的梯度,gy为y方向的梯度;
3)计算矩阵M及兴趣值I:
Figure BDA0001672255820000047
I=det(M)-k·tr2(M)
式中,det是矩阵的行列式,tr是矩阵的迹,k是默认常数,取0.04;
4)选取兴趣值的局部极值点,并在设定窗口内取最大值作为特征点。
进一步地,基于最小二乘匹配初值通过全局约束最小二乘匹配模型进行最小二乘匹配,输出待配准遥感影像的辐射变形参数以及几何变形参数的具体过程为:
4.1)引入全局约束最小二乘匹配模型:
g1(x,y)+n1(x,y)=h0+h1g2(r,c)+n2(x,y)
r=a0+a1r′+a2c′+δr
c=b0+b1r′+b2c′+δc
式中,g1与g2为基准影像与待配准遥感影像连接点对应坐标位置的辐射值函数,n1与n2为基准影像与待配准遥感影像噪声的函数,(x,y)为连接点在基准影像上的坐标,h0,h1为基准影像与遥感影像间的辐射变形参数,a0,a1,a2,b0,b1,b2为几何变形参数,(r′,c′)为地面点利用RFM反投影到像方的投影坐标,(r,c)为反投影到像方的投影坐标精化后得到的像点坐标,δrc为模型误差;
4.2)根据全局约束最小二乘匹配模型建立误差方程:
vg=h0+h1g2(r,c)-g1(x,y)
vr=a0+a1r′+a2c′+δr-r
vc=b0+b1r′+b2c′+δc-c
式中,vg为方程在配准影像间辐射值的误差,vr为方程在列方向的误差,vc为方程在行方向的误差。
对上述误差方程进行一阶泰勒展开,得到线性化的误差方程:
Figure BDA0001672255820000051
Figure BDA0001672255820000052
Figure BDA0001672255820000053
式中,
Figure BDA0001672255820000054
为泰勒级数0次项,
Figure BDA0001672255820000055
分别表示列方向与行方向坐标的一阶偏导数;
即针对每个特征点,误差方程为:
v=Bx-L
其中,
Figure BDA0001672255820000056
x=(Δa0 Δa1 Δa2 Δb0 Δb1 Δb2 Δh0i Δh1i Δδri Δδci)T
Figure BDA0001672255820000057
式中,m为连接点的点对数,n为窗口大小;
4.3)对每个输入的匹配初值点代入线性化的误差方程,逐点计算法方程;
4.4)根据最小二乘原理通过对x=(BTB)-1BTL进行求解可以计算出所有未知数,并根据相关系数计算公式计算相关系数ρ2
Figure BDA0001672255820000061
判断平差后计算得出的相关系数,如所有点相关系数的和满足平差精度要求则输出平差结果,平差精度不满足要求,则重复步骤4.2)~4.4),迭代求解;
4.5)输出遥感影像的辐射变形参数以及几何变形参数,完成遥感影像与基准影像间的全局最小二乘匹配。
本发明由于采取以上技术方案,其具有以下优点:1、本发明提出了基于全局约束的遥感影像与基准影像的最小二乘配准方法,由于全局几何约束的引入,可以提升遥感影像与基准影像匹配的可靠性和精度。2、在匹配的同时,本发明对遥感影像几何模型进行了精化,使得本发明具有更良好的扩展性和更广泛的使用范围。综上所述,本发明可以广泛应用于遥感影像与基准影像的配准中。
附图说明
图1是本发明的待配准遥感影像与参考影像匹配方法流程示意图;
图2是本发明的3×3的窗口示意图。
具体实施方式
以下结合附图来对本发明进行详细的描绘。然而应当理解,附图的提供仅为了更好地理解本发明,它们不应该理解成对本发明的限制。
如图1所示,本发明提供的基于全局几何约束的遥感影像与基准影像的匹配方法,包括以下步骤:
1、构建遥感影像成像几何模型,目前常用的行星遥感影像成像几何模型主要分为严格成像几何模型和通用成像几何模型。
严格成像几何模型是具有严密理论基础的数学模型,它主要以共线方程为基础,可以准确地表达影像坐标与地面点空间坐标之间的严格几何关系。通用成像几何模型则回避了成像过程的复杂关系,采用数学模型来拟合像点坐标与物方点三维坐标之间的相互关系。常用的拟合模型有一般多项式模型、直接线性变换模型和有理函数模型等,其中,有理函数模型由于其拟合精度高、通用性好、应用方便等优点,成为了遥感影像通用几何模型中应用最广泛的一种数学模型。
以月球侦察轨道器(lunar reconnaissance orbiter,LRO)窄角相机(narrowangle camera,NAC)为例,详细说明本发明的严格成像几何模型和通用几何模型的构建过程。严格成像几何模型的构建一般包括内定向和外定向两个过程,而通用几何模型的构建则需要以构建的严格成像几何模型为基础,具体过程为:
1)构建LRO NAC严格成像几何模型
1.1)LRO NAC内定向
从LRO的IK辅助文件中获取NAC相机的内定向参数例如:焦距、行列方向中心坐标、像元尺寸和畸变参数等,然后根据LRO NAC的畸变模型如式(1),对NAC相机进行内定向。
xd=(sample-BORESIGHT_SAMPLE)*PIXEL_PITCH
r=xd
xc=xd/(1+k1*r2) (1)
式中,sample为像点在NAC EDR原始数据上的列坐标,BORESIGHT_SAMPLE为列方向的中心坐标,PIXEL_PITCH为列方向的像元尺寸,xd为包含畸变差的坐标(量测坐标),k1为径向畸变参数,r为像点到主点的距离,xc为纠正后像点在焦平面的坐标,单位为mm,由于NAC为CCD线阵扫描相机,因此行方向的同类参数yd=0,yc=0。
1.2)LRO NAC外定向
1.2.1)建立共线方程
内定向完成后,可以得到每个像素在焦平面上经过畸变改正后的坐标,外定向即建立焦平面坐标系与星固坐标系的关系,其严格成像几何模型可以用共线方程来表达:
Figure BDA0001672255820000071
式中,(xc,yc)是像点的焦平面坐标,f是焦距,(X,Y,Z)是对应的物方点在星固坐标系的坐标,(Xs,Ys,Zs)是摄影中心在星固坐标系的坐标,称为外方位元素的线元素,λ是一个比例因子,R是像空间坐标系到星固坐标系的旋转矩阵,由三个外方位角元素
Figure BDA0001672255820000072
组成。
1.2.2)初始外方位元素的读取
要对影像进行外定向,首先需要获取成像时刻的外方位元素。外方位元素从轨道测量得到的飞行器位置和姿态数据中获得,这些测得的数据作为辅助数据存储在LRO NAC影像的SPICE kernel文件中,所以每张影像的外方位元素可以从其对应SPICE kernel中读取。
1.2.3)内插每条扫描线的外方位元素
对于推扫式成像的轨道器影像,每一条扫描线都有相应的外方位元素。但是卫星轨道测量时间间隔大于各行影像扫描成像时间间隔,要获取每条扫描线的外方位元素需要采用内插的方式。一般采用三阶多项式建立相对于成像时间t的外方位元素函数,根据记录的每行CCD成像时间,可以插值得到每条扫描线的外方位元素。
Xs(t)=a0+a1t+a2t2+a3t3
Ys(t)=b0+b1t+b2t2+b3t3
Zs(t)=c0+c1t+c2t2+c3t3
Figure BDA0001672255820000081
ω(t)=e0+e1t+e2t2+e3t3
κ(t)=f0+f1t+f2t2+f3t3 (3)
式中,Xs(t),Ys(t),Zs(t)表示t时刻摄影中心在星固坐标系中的坐标,即外方位线元素;
Figure BDA0001672255820000082
ω(t),κ(t)表示t时刻焦平面在星固坐标系中的姿态角,即外方位角元素;a0...f3表示对应参数的多项式系数,这些系数可使用最小二乘法根据轨道测量数据求解。
1.2.4)通过共线方程和求得的外方位元素,可以将经过畸变校正的焦平面坐标转换成物方坐标,完成传感器严格成像几何模型的建立。
2)建立LRO NAC有理函数模型
LRO NAC有理函数模型的建立需要首先建立虚拟控制格网,再根据生成的虚拟控制点求解有理函数模型参数。
2.1)建立虚拟控制格网
建立虚拟控制格网时,需要把影像区域的高程分成若干个高程面,在像方以一定的间距生成影像的格网点坐标作为像方虚拟控制点,然后根据严格几何模型将格网点影像坐标投影到各个高程面上得到物方虚拟控制点。
2.2)有理函数模型参数的求解
有理多项式模型通过比值多项式建立起任意地面点坐标(lat,lon,h)和对应影像坐标(sample,line)之间的一一对应关系,表达形式如下所示:
Figure BDA0001672255820000083
Figure BDA0001672255820000084
式中,
NumL(P,L,H)=a1+a2L+a3P+a4H+a5LP+a6LH+a7PH+a8L2+a9P2
+a10H2+a11PLH+a12L3+a13LP2+a14LH2+a15L2P+a16P3+a17PH2
+a18L2H+a19P2H+a20H3
DenL(P,L,H)=b1+b2L+b3P+b4H+b5LP+b6LH+b7PH+b8L2+b9P2
+b10H2+b11PLH+b12L3+b13LP2+b14LH2+b15L2P+b16P3+b17PH2
+b18L2H+b19P2H+b20H3
Nums(P,L,H)=c1+c2L+c3P+c4H+c5LP+c6LH+c7PH+c8L2+c9P2
+c10H2+c11PLH+c12L3+c13LP2+c14LH2+c15L2P+c16P3+c17PH2
+c18L2H+c19P2H+c20H3
Dens(P,L,H)=d1+d2L+d3P+d4H+d5LP+d6LH+d7PH+d8L2+d9P2
+d10H2+d11PLH+d12L3+d13LP2+d14LH2+d15L2P+d16P3+d17PH2
+d18L2H+d19P2H+d20H3
式中,ai,bi,ci,di(i=1~20)为有理函数模型参数,b1和d1通常为1,(P,L,H)为归一化的地面坐标,(X,Y)为归一化的影像坐标,
归一化方式如下所示:
Figure BDA0001672255820000091
Figure BDA0001672255820000092
Figure BDA0001672255820000093
Figure BDA0001672255820000094
Figure BDA0001672255820000095
式中,LINE_SCALE,SAMP_SCALE,SAMP_OFF和LINE_OFF为像方坐标的归一化参数;LAT_OFF,LON_OFF,HEIGHT_OFF,LAT_SCALE,LON_SCALE,HEIGHT_SCALE为物方坐标归一化参数,lat为纬度,lon为经度,h为高程。
2.3)由2.1)中得到的虚拟控制点,通过最小二乘求解78个有理函数模型参数,由求解得到的有理函数模型参数,可以建立每张影像的有理函数模型。
2、读取参考影像数据和待匹配遥感影像,并对参考影像数据和待配准遥感影像数据分别进行预处理。
本发明中的参考影像数据是指已经具备了一定投影的影像产品,包含数字高程模型(Digital Elevation Model,DEM)和数字正射影像(Digital Orthophoto Map,DOM)。当参考影像数据分别只有DEM或DOM时,本发明采用不同的预处理方法进行处理,具体过程为:
2.1)参考影像数据只有DEM时,对DEM进行预处理,构建基准影像,具体过程为:
(1)在DEM上,逐像素计算各像素在x与y方向的梯度:
Figure BDA0001672255820000101
Figure BDA0001672255820000102
式中,e1,e2…e9为以所计算的DEM像素为中心,3×3的窗口内所对应的各个像素值,如图2所示为3×3的窗口示意图。
(2)根据梯度值,逐像素计算坡度、坡向值:
Figure BDA0001672255820000103
式中,S为坡度值,A为坡向值。
(3)根据遥感影像数据的头文件信息,得到遥感影像获取时的太阳方位角(Azi)与太阳高度角(Alt),创建与DEM相同大小的空影像,逐像素计算其对应的模拟辐射值信息,并存入空影像,构建得到基准影像。
I=255×(cosAlt×cosS+sinAlt×sinS×cosAzi-A) (9)
式中,I为计算得到的模拟基准影像各像素的模拟辐射值,Alt为遥感影像获取时的太阳高度角,Azi为遥感影像获取时的太阳方位角。
2.2)当参考影像数据为DOM时,DOM即为基准影像。
2.3)当参考影像数据为DOM时,将DOM作为参考将待配准遥感影像进行预处理,与DOM通过软件将进行直方图匹配处理,具体过程为:
(1)计算待配准遥感影像的直方图pr(rk),即遥感影像中灰度级rk出现的概率:
a)将待配准遥感影像的灰度级归一化。若遥感图像的灰度级为0,1,…,L-1,则令:
Figure BDA0001672255820000104
式中,L为灰度级层次数,rk为遥感影像第k级的灰度,k为遥感影像的灰度级别。
b)计算各灰度级的出现的概率pr(rk),与rk相对的pr(rk)图形即为直方图。
假设nk为灰度级为rk的像素个数,N为总的像素个数,令:
Figure BDA0001672255820000105
式中,nk为像素值为k的像素的频数,pr(rk)为其出现的概率,N为遥感影像的像素总数。
(2)将rk根据变换(映射)函数T(rk)进行变换,计算图像经过T(rk)变换后得到的灰度级sk,将sk四舍五入为范围[0,L-1]内的整数,从而将遥感影像中灰度级为rk的各像素映射到经过T(rk)变换的输出影像中灰度级为sk的对应像素得到。
Figure BDA0001672255820000111
式中,nj为灰度值为rj的像素数。
(3)将步骤(1)和(2)计算出的sk与G(zq)进行匹配,具体过程为:
A)采用步骤(1)的方法计算基准影像的灰度级直方图pz(zq),并采用公式(13)对q=0,1,2,…,L-1计算变换函数G的所有值,把G的值四舍五入为范围[0,L-1]内的整数,将G存储在一个表中。
Figure BDA0001672255820000112
式中,zq为基准影像直方图匹配后第q级的灰度,zi为基准影像直方图匹配后第i级的灰度。
B)对每一个值sk,k=0,1,2,…,L-1,使用步骤A)存储的G值寻找相应的zq值,以使G(zq)最接近sk,并存储这些从s到z的映射,当满足给定sk的zq值多于一个时,按惯例选择最小的值。
C)使用步骤B)找到的映射将待配准遥感影像的每个变换后的像素值sk映射为基准影像的相应zq值,形成直方图匹配后的待配准遥感影像。
3、将基准影像与遥感影像进行仿射-尺度不变特征变换匹配,提取特征点,获取最小二乘匹配初值,具体过程为:
3.1)将基准影像与待处理的遥感影像进行初始匹配
采用仿射-尺度不变特征变换(ASIFT)算法获得遥感影像与基准影像之间的初始匹配点,具体为:首先获取摄像机经度角和纬度角的采样序列,用来模拟所有可能由摄像机光轴造成的仿射变形来实现图像变换;然后将待匹配的遥感影像进行倾斜旋转变换生成模拟影像;最后将生成的模拟影像根据尺度不变特征变换(SIFT)算法进行特征点检测和基准影像匹配,最终获取遥感影像与基准影像间的初始匹配点。
3.2)计算有理函数模型精化参数
本发明采用像方的仿射变换来校正像方的反投影误差,引入精化参数(列参数以及行参数)对上述误差进行改正:
Figure BDA0001672255820000113
式中,(r,c)为像点坐标,(r′,c′)为地面点利用RFM反投影到像方的投影坐标,
Figure BDA0001672255820000114
Figure BDA0001672255820000121
为RFM精化参数。
3.3)在基准影像上提取特征点,本发明以Harris特征点为例,但不仅限于此,具体过程为:
1)确定一个n×n大小的影像窗口,对窗口内的每一个像素点进行一阶差分运算,求得在x,y方向的梯度gx,gy
2)对梯度值进行高斯滤波:
Figure BDA0001672255820000122
式中,Ga为高斯卷积模板,σ取0.4,gx为灰度在x方向的梯度,gy为y方向的梯度。
3)计算矩阵M及兴趣值I:
Figure BDA0001672255820000123
式中,det是矩阵的行列式,tr是矩阵的迹,k是默认常数,取0.04。
4)选取兴趣值的局部极值点,并在设定窗口内取最大值作为局部极值点。
局部极值点的数目可根据特征点数提取的数目要求,对所有的极值点进行降序排序,根据特征点提取的数目(num)要求(在此取特征点数目num=500个),选出降序排序的兴趣值中前num个点作为最后的结果,确定一个n×n大小的影像窗口。
3.4)计算全局最小二乘匹配初值
将步骤3.3)中提取的特征点通过步骤2得出的有理函数模型以及步骤3.2)计算得出的精化参数反投影至像方,得到特征点在影像上的像点坐标,作为全局最小二乘匹配的初值:
1)根据基准影像的头文件信息,将步骤3.3)提取的基准影像特征点计算至大地坐标:
Figure BDA0001672255820000124
式中,Y与X分别为特征点的纬度与经度坐标,Y0与X0分别为基准影像左上角点的纬度与经度坐标,fy,fx为特征点在基准影像上的行列号,Ry,Rx为基准影像在y方向以及x方向的分辨率。根据计算得出的经纬度坐标,在数字高程模型上提取对应经纬度的高程值Z。
(2)根据步骤2及步骤3.2)计算得出的RPC及精化参数,以及公式(4)、公式(14),通过(X,Y,Z)计算得出特征点在对应待配准遥感影像上的像点坐标(r,c)。
4、基于全局约束的最小二乘匹配,输出待匹配的遥感影像的辐射变形参数以及几何变形参数,具体过程为:
4.1)在求解遥感影像与基准影像配准参数的同时,解算有理函数模型精化参数,引入全局约束最小二乘匹配模型如下:
Figure BDA0001672255820000131
式中,g1与g2为基准影像与待配准遥感影像连接点对应坐标位置的辐射值函数,n1与n2为基准影像与待配准遥感影像噪声的函数,(x,y)为连接点在基准影像上的坐标,h0,h1为基准影像与遥感影像间的辐射变形参数,a0,a1,a2,b0,b1,b2为几何变形参数(精化参数),(r′,c′)为地面点利用RFM反投影到像方的投影坐标,(r,c)为反投影到像方的投影坐标精化后得到的像点坐标,δrc为模型误差。
4.2)根据全局约束最小二乘匹配模型建立误差方程如下:
Figure BDA0001672255820000132
式中,vg为方程在配准影像间辐射值的误差,vr为方程在列方向的误差,vc为方程在行方向的误差。
对公式(19)进行一阶泰勒展开,可以得到线性化的误差方程:
Figure BDA0001672255820000133
Figure BDA0001672255820000134
式中,
Figure BDA0001672255820000135
为泰勒级数0次项,
Figure BDA0001672255820000136
分别表示列方向与行方向坐标的一阶偏导数。
在求解匹配参数及精化参数过程中输入为步骤3计算得出的最小二乘匹配初值,以及以初值点为中心n×n大小的窗口内的所有点,将这些点作为输入的点,此处n取值为9。对于所有输入的点,采用线性化误差方程式(20)建立误差方程,对于步骤3计算得出的初值点,采用线性化误差方程式(21)建立误差方程,最后对建立的所有误差方程进行统一求解,得出匹配参数及有理函数模型精化参数。
4.3)对每个输入的匹配初值点按照公式(19)中的误差方程,逐点计算法方程。
4.4)对法方程求解,并对未知数进行改正,并判断平差后计算得出的相关系数,例如所有点相关系数的和满足要求(本次相关系数的和小于上一次迭代的相关系数的和),则输出平差结果,如平差精度不满足要求,则重复步骤4.2),4.3)和4.4),迭代求解,其中,相关系数ρ2
Figure BDA0001672255820000141
4.5)输出遥感影像的辐射变形参数以及几何变形参数,完成遥感影像与基准影像间的全局最小二乘匹配,通过解求得出的变形参数可以为大区域制图提供高精度控制点,与此同时,通过解求的参数可以将影像制作生成正射影像,为大区域制图提供基础。
上述各实施例仅用于说明本发明,其中方法的各实施步骤等都是可以有所变化的,凡是在本发明技术方案的基础上进行的等同变换和改进,均不应排除在本发明的保护范围之外。

Claims (6)

1.一种基于全局几何约束的遥感影像与基准影像的匹配方法,其特征在于包括以下内容:
构建遥感影像成像几何模型;
读取参考影像数据和待匹配遥感影像,对参考影像数据预处理得到基准影像;
对待匹配遥感影像进行预处理;
将基准影像与待配准遥感影像进行仿射-尺度不变特征变换匹配,提取特征点,并获取最小二乘匹配的初值;
基于最小二乘匹配的初值通过全局约束最小二乘匹配模型进行最小二乘匹配,输出待配准遥感影像的辐射变形参数以及几何变形参数,其中,
当参考影像数据为DOM时,DOM即为基准影像,对待配准遥感影像进行预处理的具体过程为:
2.1)计算待配准遥感影像的直方图pr(rk),具体过程为:
a)将待配准遥感影像的灰度级归一化:
Figure FDA0003591579250000011
式中,L为灰度级层次数,rk为遥感影像第k级的灰度,k为遥感影像的灰度级别;
b)计算各灰度级出现的概率pr(rk):
Figure FDA0003591579250000012
式中,nk为像素值为k的像素的频数,pr(rk)为其出现的概率,N为遥感影像的像素总数;
2.2)将rk根据变换函数T(rk)进行变换得到的灰度级sk,将sk四舍五入为范围[0,L-1]内的整数:
Figure FDA0003591579250000013
式中,nj为灰度值为rj的像素数;
2.3)将步骤2.1)和2.2)计算出的sk与G(zq)进行匹配,具体过程为:
A)采用步骤2.1)计算基准影像的灰度级直方图pz(zq),并对q=0,1,2,…,L-1计算变换函数G的所有值,把G的值四舍五入为范围[0,L-1]内的整数,并将G存储在一个表中:
Figure FDA0003591579250000014
式中,zq为基准影像直方图匹配后第q级的灰度,zi为基准影像直方图匹配后第i级的灰度;
B)对每一个值sk,k=0,1,2,…,L-1,使用步骤A)存储的G值寻找相应的zq值,以使G(zq)最接近sk,并存储这些从s到z的映射,当满足给定sk的zq值多于一个时,按惯例选择最小的值;
C)使用步骤B)找到的映射将待配准遥感影像的每个变换后的像素值sk映射为基准影像的相应zq值,形成直方图匹配后的待配准遥感影像。
2.根据权利要求1所述的基于全局几何约束的遥感影像与基准影像的匹配方法,其特征在于,当参考影像数据只有DEM时,对DEM进行预处理构建基准影像,具体过程为:
2.1)在DEM上,逐像素计算在x与y方向的梯度;
2.2)根据梯度值,逐像素计算坡度S、坡向值A;
2.3)根据参考影像数据的头文件信息,创建与DEM相同大小的空影像,逐像素计算其对应的模拟辐射值信息并存入空影像,构建得到基准影像:
I=255×(cosAlt×cosS+sinAlt×sinS×cosAzi-A)
式中,I为基准影像各像素的模拟辐射值,Alt为遥感影像获取时的太阳高度角,Azi为遥感影像获取时的太阳方位角。
3.根据权利要求1所述的基于全局几何约束的遥感影像与基准影像的匹配方法,其特征在于,计算待配准遥感影像所有灰度级sk的具体过程为:
a)将待配准遥感影像的灰度级归一化,若遥感图像的灰度级为0,1,…,L-1,则令:
Figure FDA0003591579250000021
式中,L为灰度级层次数,rk为遥感影像第k级的灰度,k为遥感影像的灰度级别;
b)计算各灰度级的像素频数
假设nk为灰度级为rk的像素个数,N为总的像素个数,令:
Figure FDA0003591579250000022
式中,nk为像素值为k的像素的频数,pr(rk)为其出现的概率;
c)计算第k级的灰度级
Figure FDA0003591579250000023
式中,nj为灰度值为rj的像素数。
4.根据权利要求1所述的基于全局几何约束的遥感影像与基准影像的匹配方法,其特征在于,将基准影像与待配准遥感影像进行仿射-尺度不变特征变换匹配,提取特征点,并获取最小二乘匹配的初值的具体过程为:
3.1)采用仿射-尺度不变特征变换算法获得待配准遥感影像与基准影像之间的初始匹配点;
3.2)根据初始匹配点结合DEM计算有理函数模型精化参数
Figure FDA0003591579250000031
Figure FDA0003591579250000032
式中,(r,c)为像点坐标,(r′,c′)为地面点利用RFM反投影到像方的投影坐标,
Figure FDA0003591579250000033
Figure FDA0003591579250000034
为RFM精化参数;
3.3)在基准影像上提取特征点;
3.4)计算全局最小二乘匹配初值:将步骤3.3)中提取的特征点通过有理函数模型以及步骤3.2)计算得出的精化参数反投影至像方,得到特征点在待配准遥感影像上的像点坐标,作为全局最小二乘匹配的初值。
5.根据权利要求4所述的基于全局几何约束的遥感影像与基准影像的匹配方法,其特征在于,在基准影像上提取特征点的具体过程为:
1)确定一个n×n大小的影像窗口,对窗口内的每一个像素点进行一阶差分运算,求得在x,y方向的梯度gx,gy
2)对梯度值进行高斯滤波:
Figure FDA0003591579250000035
Figure FDA0003591579250000036
式中,Ga为高斯卷积模板,σ取0.4,gx为灰度在x方向的梯度,gy为y方向的梯度;
3)计算矩阵M及兴趣值I:
Figure FDA0003591579250000037
I=det(M)-k·tr2(M)
式中,det是矩阵的行列式,tr是矩阵的迹,k是默认常数,取0.04;
4)选取兴趣值的局部极值点,并在设定窗口内取最大值作为特征点。
6.根据权利要求1所述的基于全局几何约束的遥感影像与基准影像的匹配方法,其特征在于,基于最小二乘匹配初值通过全局约束最小二乘匹配模型进行最小二乘匹配,输出待配准遥感影像的辐射变形参数以及几何变形参数的具体过程为:
4.1)引入全局约束最小二乘匹配模型:
g1(x,y)+n1(x,y)=h0+h1g2(r,c)+n2(x,y)
r=a0+a1r′+a2c′+δr
c=b0+b1r′+b2c′+δc
式中,g1与g2为基准影像与待配准遥感影像连接点对应坐标位置的辐射值函数,n1与n2为基准影像与待配准遥感影像噪声的函数,(x,y)为连接点在基准影像上的坐标,h0,h1为基准影像与遥感影像间的辐射变形参数,a0,a1,a2,b0,b1,b2为几何变形参数,(r′,c′)为地面点利用RFM反投影到像方的投影坐标,(r,c)为反投影到像方的投影坐标精化后得到的像点坐标,δrc为模型误差;
4.2)根据全局约束最小二乘匹配模型建立误差方程:
vg=h0+h1g2(r,c)-g1(x,y)
vr=a0+a1r′+a2c′+δr-r
vc=b0+b1r′+b2c′+δc-c
式中,vg为方程在配准影像间辐射值的误差,vr为方程在列方向的误差,vc为方程在行方向的误差;
对上述误差方程进行一阶泰勒展开,得到线性化的误差方程:
Figure FDA0003591579250000041
Figure FDA0003591579250000042
Figure FDA0003591579250000043
式中,
Figure FDA0003591579250000044
为泰勒级数0次项,
Figure FDA0003591579250000045
分别表示列方向与行方向坐标的一阶偏导数;
即针对每个特征点,误差方程为:
v=Bx-L
其中,
Figure FDA0003591579250000051
(i=0,1,...,m,j=1,2,...n)
x=(Δa0 Δa1 Δa2 Δb0 Δb1 Δb2 Δh0i Δh1i Δδri Δδci)T
Figure FDA0003591579250000052
式中,m为连接点的点对数,n为窗口大小;
4.3)对每个输入的匹配初值点代入线性化的误差方程,逐点计算法方程;
4.4)根据最小二乘原理通过对x=(BTB)-1BTL进行求解可以计算出所有未知数,并根据相关系数计算公式计算相关系数ρ2
Figure FDA0003591579250000053
判断平差后计算得出的相关系数,如所有点相关系数的和满足平差精度要求则输出平差结果,平差精度不满足要求,则重复步骤4.2)~4.4),迭代求解;
4.5)输出遥感影像的辐射变形参数以及几何变形参数,完成遥感影像与基准影像间的全局最小二乘匹配。
CN201810510431.0A 2018-05-24 2018-05-24 基于全局几何约束的遥感影像与基准影像的匹配方法 Active CN108830889B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810510431.0A CN108830889B (zh) 2018-05-24 2018-05-24 基于全局几何约束的遥感影像与基准影像的匹配方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810510431.0A CN108830889B (zh) 2018-05-24 2018-05-24 基于全局几何约束的遥感影像与基准影像的匹配方法

Publications (2)

Publication Number Publication Date
CN108830889A CN108830889A (zh) 2018-11-16
CN108830889B true CN108830889B (zh) 2022-05-31

Family

ID=64145435

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810510431.0A Active CN108830889B (zh) 2018-05-24 2018-05-24 基于全局几何约束的遥感影像与基准影像的匹配方法

Country Status (1)

Country Link
CN (1) CN108830889B (zh)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109903352B (zh) * 2018-12-24 2021-03-30 中国科学院遥感与数字地球研究所 一种卫星遥感影像大区域无缝正射影像制作方法
CN110020659A (zh) * 2019-03-29 2019-07-16 武汉九天高分遥感技术有限公司 一种基于二进小波的遥感影像多尺度边缘提取与匹配方法和系统
CN110473196B (zh) * 2019-08-14 2021-06-04 中南大学 一种基于深度学习的腹部ct图像目标器官配准方法
CN110555817B (zh) * 2019-09-10 2022-06-24 中国科学院遥感与数字地球研究所 一种遥感图像几何归一化方法和装置
CN110703245B (zh) * 2019-10-15 2021-08-17 北京理工大学 基于同名点匹配与dem辅助的地基sar多角度图像配准方法
CN110986998B (zh) * 2019-10-28 2021-09-14 武汉大学 一种基于有理函数模型的卫星视频相机在轨几何定标方法
CN111967365B (zh) * 2020-08-11 2023-09-15 中国人民解放军国防科技大学 影像连接点的提取方法和装置
CN112419350B (zh) * 2020-11-20 2023-06-02 武汉大学 基于地物边界信息的遥感影像自动化几何配准方法及系统
CN116503756B (zh) * 2023-05-25 2024-01-12 数字太空(北京)科技股份公司 基于地面控制点数据库建立地表纹理基准面的方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102213762A (zh) * 2011-04-12 2011-10-12 中交第二公路勘察设计研究院有限公司 基于rfm模型的多源星载sar影像自动匹配方法
CN102324106A (zh) * 2011-06-02 2012-01-18 武汉大学 一种顾及地表光谱信息的sfs三维重建加密稀疏dem方法
CN102693542A (zh) * 2012-05-18 2012-09-26 中国人民解放军信息工程大学 一种影像特征匹配方法
CN102750683A (zh) * 2012-06-18 2012-10-24 常州大学 Modis遥感影像中海面条带噪声和条状云的过滤方法
CN103310487A (zh) * 2013-06-21 2013-09-18 中国科学院遥感与数字地球研究所 一种基于时间变量的通用成像几何模型生成方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8175412B2 (en) * 2004-02-17 2012-05-08 Yeda Research & Development Co. Ltd. Method and apparatus for matching portions of input images

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102213762A (zh) * 2011-04-12 2011-10-12 中交第二公路勘察设计研究院有限公司 基于rfm模型的多源星载sar影像自动匹配方法
CN102324106A (zh) * 2011-06-02 2012-01-18 武汉大学 一种顾及地表光谱信息的sfs三维重建加密稀疏dem方法
CN102693542A (zh) * 2012-05-18 2012-09-26 中国人民解放军信息工程大学 一种影像特征匹配方法
CN102750683A (zh) * 2012-06-18 2012-10-24 常州大学 Modis遥感影像中海面条带噪声和条状云的过滤方法
CN103310487A (zh) * 2013-06-21 2013-09-18 中国科学院遥感与数字地球研究所 一种基于时间变量的通用成像几何模型生成方法

Also Published As

Publication number Publication date
CN108830889A (zh) 2018-11-16

Similar Documents

Publication Publication Date Title
CN108830889B (zh) 基于全局几何约束的遥感影像与基准影像的匹配方法
CN109903352B (zh) 一种卫星遥感影像大区域无缝正射影像制作方法
CN110388898B (zh) 构建虚拟控制点约束的多源多重覆盖遥感影像平差方法
KR101965965B1 (ko) 위성영상과 제공 rpc로부터 제작된 수치표고모델의 자동 오차보정 방법
CN108305237B (zh) 考虑不同光照成像条件的多立体影像融合制图方法
CN112017224B (zh) Sar数据区域网平差处理方法和系统
Chen et al. The geometrical comparisons of RSM and RFM for FORMOSAT-2 satellite images
Teo Bias compensation in a rigorous sensor model and rational function model for high-resolution satellite images
CN109977344B (zh) 一种星载夜光遥感影像的区域网平差方法
CN109709551B (zh) 一种星载合成孔径雷达影像的区域网平面平差方法
CN101216555B (zh) Rpc模型参数提取方法和几何纠正方法
CN110006452B (zh) 高分六号宽视场相机相对几何定标方法及系统
Habib et al. Comprehensive analysis of sensor modeling alternatives for high resolution imaging satellites
CN107564057B (zh) 顾及大气折光校正的高轨面阵光学卫星在轨几何标定方法
CN115187798A (zh) 一种多无人机高精度匹配定位方法
CN107341778A (zh) 基于卫星控制点库和dem的sar影像正射纠正方法
CN104361563B (zh) 基于gps的高光谱遥感图像几何精校正方法
CN110986998B (zh) 一种基于有理函数模型的卫星视频相机在轨几何定标方法
CN111145227A (zh) 一种地下隧道空间多视点云的可迭代整体配准方法
CN111798523A (zh) 星相机在轨定标定姿及遥感影像几何定位方法、系统
CN114241064B (zh) 一种遥感卫星内外方位元素实时几何定标方法
CN110030968B (zh) 一种基于星载立体光学影像的地面遮挡物仰角测量方法
CN109029379A (zh) 一种高精度小基高比立体测绘方法
CN117030620A (zh) 一种基于多源光学遥感卫星影像区域网平差的方法及装置
Wessel et al. Design of the DEM mosaicking and calibration processor for TanDEM-X

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant