CN107806861B - 一种基于本质矩阵分解的倾斜影像相对定向方法 - Google Patents

一种基于本质矩阵分解的倾斜影像相对定向方法 Download PDF

Info

Publication number
CN107806861B
CN107806861B CN201710824851.1A CN201710824851A CN107806861B CN 107806861 B CN107806861 B CN 107806861B CN 201710824851 A CN201710824851 A CN 201710824851A CN 107806861 B CN107806861 B CN 107806861B
Authority
CN
China
Prior art keywords
relative orientation
image
coordinate system
matrix
elements
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710824851.1A
Other languages
English (en)
Other versions
CN107806861A (zh
Inventor
闸旋
滕惠忠
申家双
李海滨
赵健
叶秋果
郭忠磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Pla 92859 Force
Original Assignee
Pla 92859 Force
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Pla 92859 Force filed Critical Pla 92859 Force
Priority to CN201710824851.1A priority Critical patent/CN107806861B/zh
Publication of CN107806861A publication Critical patent/CN107806861A/zh
Application granted granted Critical
Publication of CN107806861B publication Critical patent/CN107806861B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/02Picture taking arrangements specially adapted for photogrammetry or photographic surveying, e.g. controlling overlapping of pictures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/04Interpretation of pictures

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Peptides Or Proteins (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及一种基于本质矩阵分解的倾斜影像相对定向方法,其技术特点是包括以下步骤:计算本质矩阵E;由本质矩阵恢复摄像机矩阵P;将摄像机矩阵P转换为连续相对定向元素初始值;将连续相对定向元素初始值转换为独立向定向元素初始值;构建独立相对定向误差方程、最小二乘法求解独立相对定向元素改正数、更新独立相对定向元素进行最小二程迭代求解,实现倾斜影像相对定向功能。本发明基于本质矩阵分解获取连续相对方位元素初值并采用最小二乘迭代优化的相对定向的方法,解决了传统相对定向方法无法适应于倾斜影像相对定向的问题,满足了摄影测量关于相对定向的精度要求,适用于相对姿态较大、相对位置任意的倾斜航摄影像。

Description

一种基于本质矩阵分解的倾斜影像相对定向方法
技术领域
本发明属于摄影测量与遥感技术领域,涉及倾斜摄影测量影像的相对定向技术,尤其是一种基于本质矩阵分解的倾斜影像相对定向方法。
背景技术
当前,倾斜摄影测量数据后处理中,存在相对姿态较大、相对位置任意的影像的相对定向问题。传统摄影测量的相对定向方法,因其相对姿态小,相对位置固定,而采用0值等的经验值作为初值,进行最小二乘迭代求解,这种方式显然不使用于解决倾斜影像的相对定向问题。在计算机视觉领域,相对定向问题可描述为根据对同一场景的两幅不同视角的影像来恢复摄影瞬间两相机间的相对位置与姿态,即通过一个旋转矩阵和一个平移向量来描述其中一张影像的摄像机坐标系在另一张影像的摄像机坐标系中的方位和位置。相关计算机视觉领域学者发现两影像摄影瞬间对应的摄像机坐标系的相对位置与姿态信息包含于本质矩阵中,通过基于本质矩阵的奇异值分解实现相对定向。值得注意的是,基于本质矩阵分解法虽可以恢复得到相对姿态较大情况下的相对位置与姿态解,但存在以下两个问题:(1)计算机视觉与摄影测量领域在各自相对定向过程中对两影像相互位置关系描述十分接近但并非不完全一致,由计算机视觉中基于本质矩阵分解得到的相对定向结果必须转换为摄影测量中对应的相对定向元素,才能将其应用于解决倾斜影像的相对定向问题;(2)解算结果精度不高,不能满足摄影测量关于相对定向的精度要求。
发明内容
本发明的目的在于克服现有技术的不足,提供一种基于本质矩阵分解的倾斜影像相对定向方法,用以解决传统相对定向方法无法适应于倾斜影像相对定向的问题。
本发明解决现有的技术问题是采取以下技术方案实现的:
一种基于本质矩阵分解的倾斜影像相对定向方法,包括以下步骤:
步骤1、计算本质矩阵E;
步骤2、由本质矩阵恢复摄像机矩阵P;
步骤3、将摄像机矩阵P转换为连续相对定向元素初始值;
步骤4、将连续相对定向元素初始值转换为独立向定向元素初始值;
步骤5、构建独立相对定向误差方程、最小二乘法求解独立相对定向元素改正数、更新独立相对定向元素进行最小二程迭代求解,实现倾斜影像相对定向功能。
所述步骤1的计算方法为:由一定数量的同名像点求解得到两影像间的基础矩阵F,进而计算得到本质矩阵E。
所述步骤2的实现方法为:在归一化坐标下,给定本质矩阵E和第一幅影像摄像机矩阵P=[I|0],由本质矩阵的奇异值分解结果E=UWVT,得到四种可能的平移、旋转变换组合来组成第二幅影像对应的摄像机矩阵,将四种可能的摄像机矩阵带入下式:
Figure GDA0001539031830000021
解算z1、z2,求得z1、z2均满足大于零的约束,则对应的摄像机矩阵为唯一正确解,从而确定了摄像机矩阵唯一解的P=[Rcv|tcv];式中,z1、z2分别为点P在第一、二幅影像对应摄像机坐标系中的成像深度;K1、K2分别为第一、二幅影像的对应相机的标定矩阵;p1、p2分别表示某空间点P在第一、二幅影像图像坐标系下的齐次坐标;Rcv、tcv给出了由第二张影像摄像机坐标系到第一张影像摄像机坐标系的刚体变换的旋转矩阵与平移向量。
所述步骤3的实现方法为:
根据连续相对定向元素的定义,基线向量tph=B=(Bx,By,Bz)T1O2为由第一张影像像空间坐标系中心到第二张影像像空间坐标系中心的平移向量,在与实际基线长度相差一个缩放因子的情况下由by,bz计算得到;第二张影像像空间坐标系到第一张影像像空间坐标系的旋转矩阵为Rph,该旋转矩阵Rph由连续相对定向元素中三个角元素
Figure GDA0001539031830000022
ω,κ按αx-ω-κ转角系统构成,故空间点P在第一张影像像空间坐标系下的坐标向量1Pph可由第二张影像像空间坐标系中的坐标向量2Pph按下式转化得到:
1Pph=Rph 2Pph+tph
多视图几何中摄像机坐标系C-XYZ与摄影测量中的像空间坐标系S-xyz的相互关系由下式表示:
Pcv=DPph
其中,D矩阵为主对角线元素为1或-1的对角阵,表示如下:
Figure GDA0001539031830000031
进而有:D2Pph=RcvD1Pph+tcv
整理得:1Pph=DRcv TD2Pph-DRcv Ttcv
得到:
Figure GDA0001539031830000032
连续相对定向几何模型采用αx-ω-κ转角系统,相对定向角元素应满足
Figure GDA0001539031830000033
ω∈(-90°,90°)和κ∈[-180°,180°],由
Figure GDA0001539031830000034
得到Rph、tph后,依据
Figure GDA0001539031830000035
由Rph计算连续相对定向角元素
Figure GDA0001539031830000036
ω,κ;by,bz由基线向量tph=(Bx,By,Bz)T导出。
所述步骤4的实现方法包括如下过程:基线坐标系到左像空间坐标系的旋转矩阵
Figure GDA0001539031830000037
由连续相对定向元素解求独立相对定向元素和由独立相对定向元素解求连续相对定向元素。
所述基线坐标系到左像空间坐标系的旋转矩阵
Figure GDA0001539031830000038
过程为:
在左像空间坐标系下,记Z轴方向向量为ZL=(0,0,1)T,基线坐标系X Y Z三坐标轴轴方向单位向量分别为X、Y、Z;
X与基线方向平行,有
Figure GDA0001539031830000039
Y同时垂直于X、ZL,有
Figure GDA0001539031830000041
Z同时垂直于X、Y,有
Figure GDA0001539031830000042
将基线坐标系三轴单位向量组成由基线坐标系转换到左像空间坐标系的旋转矩阵
Figure GDA0001539031830000043
该旋转矩阵可视为由Bx,By,Bz作变量的函数矩阵M(Bx,By,Bz),表示如下:
Figure GDA0001539031830000044
所述由连续相对定向元素
Figure GDA0001539031830000045
解求独立相对定向元素(τ11,ε,τ22)过程为:
通过下式计算Rαy(0,τ11):
Figure GDA0001539031830000046
通过下式计算Rαy(ε,τ22):
Figure GDA0001539031830000047
最后由
Figure GDA0001539031830000048
转角系统定义如下公式,根据Rαy(0,τ11)的值计算τ11;根据Rαy(ε,τ22)的值计算ε,τ22
Figure GDA0001539031830000051
Figure GDA0001539031830000052
所述由独立相对定向元素(τ11,ε,τ22)解求连续相对定向元素
Figure GDA0001539031830000053
过程为:
通过下式计算By、Bz
Figure GDA0001539031830000054
通过下式计算
Figure GDA0001539031830000055
Figure GDA0001539031830000056
最后由αx-ω-κ转角系统定义如下公式,通过
Figure GDA0001539031830000057
的值计算
Figure GDA0001539031830000058
ω,κ:
Figure GDA0001539031830000061
本发明的优点和积极效果是:
1、本发明基于本质矩阵分解获取连续相对方位元素初值并采用最小二乘迭代优化的相对定向的方法,解决了传统相对定向方法无法适应于倾斜影像相对定向的问题,适用于相对姿态较大、相对位置任意的倾斜航摄影像。
2、本发明通过分析独立相对定向元素和连续相对定向元素的内在关系,给出独立、连续两种相对定向元素的直接转换方法;通过分析计算机视觉领域关于相对定向的数学模型,给出了由计算机视觉相对定向结果转换为摄影测量中相对定向元素的实现方法,提高了解算结果精度,满足了摄影测量关于相对定向的精度要求。
附图说明
图1为连续法相对定向几何模型;
图2为独立相对定向几何模型;
图3为计算机视觉中两相机相对位姿关系示意图;
图4为本发明的处理流程图;
图5为摄影测量中摄像机成像几何示意图;
图6a为影像1:A号相机(向左拍摄)的真实倾斜摄影影像缩略图;
图6b为影像2:B号相机(向后拍摄)的真实倾斜摄影影像缩略图;
图6c为影像3:C号相机(向右拍摄)的真实倾斜摄影影像缩略图;
图6d为影像4:D号相机(向前拍摄)的真实倾斜摄影影像缩略图;
图6e为影像5:E号相机(下视正射)的真实倾斜摄影影像缩略图。
具体实施方式
以下结合附图对本发明实施例做进一步详述:
一种基于本质矩阵分解的倾斜影像相对定向方法,给出了由计算机视觉中基于本质矩阵分解得到的相对定向结果直接转换为摄影测量中连续相对定向元素的方法,并视该转换结果为初值进行严密的相对定向迭代求解,以解决倾斜航摄影像的相对定向问题,本发明专利基于以下背景知识:
(1)摄影测量领域中相对定向几何模型
摄影测量的立体像对中两像片像空系之间的方位关系称为像对的相对方位,确定相对方位所需的元素称为相对方位元素,解算立体像对相对方位元素的工作叫做相对定向。进行立体像对的相对定向的目的是恢复摄影时立体像对间摄影光束的相互关系,使得同名光线对对相交。相对定向方式有两种:一种是独立法相对定向,以基线坐标系为基准的独立法相对定向,采用立体像对中两幅影像的像空间坐标系相对于基线坐标系的角元素运动实现相对定向,其定向元素为(τ11,ε,τ22);另一种是连续法相对定向,以左方像空间坐标系为基准的连续像对相对定向,采用右影像的直线运动和角运动实现相对定向,其定向元素为
Figure GDA0001539031830000071
(也可为
Figure GDA0001539031830000072
其中by=By/Bx,bz=Bz/Bx)。
(a)连续法相对定向几何模型
如图1所示,连续法相对定向以左方像空间坐标系为基准(选定左方像空间坐标系为摄测坐标系,此时
Figure GDA0001539031830000073
为单位阵),或左方像空间坐标系与选定的摄测坐标系之间的方位关系已知的条件下,求解右方像空间坐标系与所选定的摄测坐标系之间相对位置关系。在所选定的摄测坐标系下,向量t=(Bx,By,Bz)T为由左方像空间坐标系原点到右方像空间坐标系原点的平移向量,其中by,bz(by=By/Bx,bz=Bz/Bx)为连续相对方位元素中的线元素;右像空间坐标系到所选定的摄测坐标系的旋转矩阵为
Figure GDA0001539031830000074
Figure GDA0001539031830000075
为由连续相对方位元素中三个角元素
Figure GDA0001539031830000076
ω,κ构成,并采用如下式的αx-ω-κ转角系统,即
Figure GDA0001539031830000077
Figure GDA0001539031830000081
(b)独立法相对定向几何模型
独立法相对定向以摄影基线与左主核面为基准,如图2所示。以左、右影像摄影中心的连线向量为X轴,Z轴位于左主核面内,Y轴与左主核面垂直。
左像空间坐标系到基线坐标系的旋转矩阵为
Figure GDA0001539031830000082
Figure GDA0001539031830000083
由独立法相对方位元素前两个角元素τ11构成,并采用如下式的
Figure GDA0001539031830000084
转角系统,即
Figure GDA0001539031830000085
Figure GDA0001539031830000086
(2)计算机视觉中领域中成像几何及基础矩阵F
计算机视觉中的成像几何说明如下:投影中心C为摄像机坐标系原点,平面Z=f(f为焦距长度)称为图像平面,通常以图像平面左上角为原点建立图像坐标系,主点(x0,y0)为图像平面与主轴交点。摄像机坐标系C-XYZ的X、Y轴分别与图像坐标系轴平行。图1给出了世界坐标系W-XYZ下三维空间点P与图像平面上二维像点p之间的投影关系,可有如下式的透视投影方程表示。
Figure GDA0001539031830000091
其中z为点P在摄像机坐标系中的成像深度,p=(x,y,1)T表示像点p在图像坐标系下的齐次坐标,P=(X,Y,Z,1)T表示空间点P在世界坐标系下的齐次坐标,K为相机的标定矩阵。旋转矩阵
Figure GDA0001539031830000092
和平移向量COW给出了摄像机坐标系到世界坐标系的刚体变换,使得空间点P在世界坐标系下坐标P转换为摄像机坐标系下坐标CP,有:
Figure GDA0001539031830000093
图3给出了计算机视觉理论中对两相机相对位置关系的描述。假设某空间点P在第一(左)、二(右)幅影像图像坐标系下的齐次坐标分别为p1=(x1,y1,1)T与p2=(x2,y2,1)T,两摄像机已标定且世界坐标系与第一张影像的摄像机坐标系重合,则有:
Figure GDA0001539031830000094
其中,z1、z2分别为点P在第一、二幅影像对应摄像机坐标系中的成像深度;K1、K2分别为第一、二幅影像的对应相机的标定矩阵;旋转矩阵
Figure GDA0001539031830000095
和平移向量tcv2O1给出了由第二张影像摄像机坐标系到第一张影像摄像机坐标系的刚体变换,有:
2Pcv=Rcv 1Pcv+tcv (6)
其中,1Pcv2Pcv分别为点P在第一、二张影像摄像机坐标系下的坐标向量。进而得到两影像间的基础矩阵F:
F=K2 -TRcvK1 -1 (7)
基于以上技术,本发明的处理流程如图4所示,包括以下步骤:
步骤1、计算本质矩阵E
由一定数量的同名像点(8点以上),可求解得到两影像间的基础矩阵。进而可计算本质矩阵:
Figure GDA0001539031830000101
步骤2、由本质矩阵恢复摄像机矩阵P
在归一化坐标下,给定本质矩阵E和第一幅影像摄像机矩阵P=[I|0],由本质矩阵的奇异值分解结果E=UWVT,可以得到4种可能的平移、旋转变换组合来组成第二幅影像对应的摄像机矩阵,分别为:
Figure GDA0001539031830000102
其中,t为U的第三列;旋转矩阵R1′、R′2为以下四组旋转变换中满足行列式为1这一条件的两组旋转矩阵。
Figure GDA0001539031830000103
其中
Figure GDA0001539031830000104
对于倾斜航摄影像,所摄地物均位于相机前方,即地物成像深度z1、z2均应大于零。故将四种可能的摄像机矩阵带入下式,解算z1、z2,只要求得z1、z2均满足大于零的约束,则对应的摄像机矩阵为唯一正确解,即确定了摄像机矩阵唯一解的P=[Rcv|tcv]。
Figure GDA0001539031830000105
步骤3、转换为连续相对定向元素初始值
下面将介绍由摄像机矩阵P=[Rcv|tcv]导出连续相对定向元素的方法。
图1给出了摄影测量中连续相对定向几何模型,为与计算机视觉中相关概念统一及后续推导与符号标记方便,称图中左影像为第一张影像,右影像为第二张影像。则连续像对相对定向以第一张影像像空间坐标系为基准的,采用第二张影像的直线运动和角运动实现相对定向。
根据连续相对定向元素的定义,基线向量tph=(Bx,By,Bz)T1O2为由第一张影像像空间坐标系中心到第二张影像像空间坐标系中心的平移向量,在与实际基线长度相差一个缩放因子的情况下可由by,bz计算得到;第二张影像像空间坐标系到第一张影像像空间坐标系的旋转矩阵为Rph,由连续相对定向元素中三个角元素
Figure GDA0001539031830000111
ω,κ按αx-ω-κ转角系统构成,即
Figure GDA0001539031830000112
故空间点P在在第一张影像像空间坐标系下的坐标向量1Pph可由第二张影像像空间坐标系中的坐标向量2Pph按下式转化得到。
1Pph=Rph 2Pph+tph (12)
注意到多视图几何中摄像机坐标系C-XYZ与摄影测量中的像空间坐标系S-xyz在定义上仅存在坐标轴方向不同(各坐标轴均取像素单位作为长度单位),其相互关系可由下式表示。
Pcv=DPph (13)
其中,D矩阵为主对角线元素为1或-1的对角阵,其对角线元素具体取值依照实际情况确定。例如,通常情况下多视图几何中摄像机坐标系与摄影测量中的像空间坐标系(如图5所示),此时两坐标系除Y轴与Z轴方向相反外其他均一致,有:
Figure GDA0001539031830000113
进而有:
D2Pph=RcvD1Pph+tcv (15)
整理得:
1Pph=DRcv TD2Pph-DRcv Ttcv (16)
比较式(16)与式(12),有:
Figure GDA0001539031830000114
连续相对定向几何模型采用αx-ω-κ转角系统,因倾斜航摄影像为由空中向下摄影,故相对定向角元素应满足
Figure GDA0001539031830000115
ω∈(-90°,90°)和κ∈[-180°,180°]。依据式(17)得Rph后,再依据
Figure GDA0001539031830000121
由Rph计算连续相对定向角元素
Figure GDA0001539031830000122
ω,κ;即根据式(17)得tph后,而by,bz(by=By/Bx,bz=Bz/Bx)可由基线向量tph=(Bx,By,Bz)T导出。
步骤4、连续相对定向元素转换为独立向定向元素
在传统相对定向过程中,对航摄相片的姿态和拍摄顺序要求十分严格,故后期相对定向过程中无论是连续法相对定向几何模型还是连续法相对定向几何模型中均保证了相对基线向量(Bx,By,Bz)T中主分量max(Bx,By,Bz)T为Bx。但是由于倾斜摄影测量像对存在相对姿态较大、相对位置任意的问题,采用续法相对定向几何模型并不能保证其主分量max(Bx,By,Bz)T为Bx,而续法相对定向几何模型中By=Bz=0,仍能保证主分量max(Bx,By,Bz)T为Bx。故在后续处理倾斜摄影相对定向过程中采用独立法相对定向进行严密的相对定向迭代求解并进行精度指标统计,以验证本方法的正确性。
本部分分析推导了独立、连续相对定向元素的相互转换方法,不仅明确给出了连续相对定向元素转换为独立相对定向元素的转换方法,明确给出了独立相对定向元素转换为连续相对定向元素的转换方法。故在最终结果输出时,仍然能利用本部分结论,同时输出独立、连续定两种相对定向结果。
(a)基线坐标系到左像空间坐标系的旋转矩阵
Figure GDA0001539031830000123
左像空间坐标系下,记其Z轴方向向量为ZL=(0,0,1)T,基线坐标系X、Y、Z三坐标轴轴方向单位向量分别为X、Y、Z。
X与基线方向平行,有
Figure GDA0001539031830000124
由Y同时垂直于X、ZL,有
Figure GDA0001539031830000125
Z同时垂直于X、Y,有
Figure GDA0001539031830000131
至此,基线坐标系三轴单位向量在左像空间坐标系下的坐标已经求得,且该三单位向量可组成由基线坐标系转换到左像空间坐标系的旋转矩阵
Figure GDA0001539031830000132
同时,该旋转矩阵可看作由Bx,By,Bz三变量计算得到的函数矩阵,故记
Figure GDA0001539031830000133
(b)由连续相对定向元素解求独立相对定向元素
根据连续相对方位元素的定义,由式(2)、(21),有
Figure GDA0001539031830000134
根据连续和独立相对方位元素的定义,结合式(1)、(22),有
Figure GDA0001539031830000135
由连续相对定向元素
Figure GDA0001539031830000136
解求独立相对定向元素(τ11,ε,τ22)时:先由式(22)计算Rαy(0,τ11),然后根据式(2)计算τ11;再由式(23)计算Rαy(ε,τ22),最后根据式(2)计算ε,τ22
(c)由独立相对定向元素解求连续相对定向元素
对于基线向量,在采用连续法相对定向几何模型时,其在所选定基准摄测坐标系下表示为t=(Bx,By,Bz)T;在采用独立法相对定向几何模型时,其在基线坐标系下表示为
Figure GDA0001539031830000137
若记基线坐标系到所选定摄测坐标系的旋转矩阵为
Figure GDA0001539031830000138
Figure GDA0001539031830000141
由式(23),有
Figure GDA0001539031830000142
由独立法相对定向元素(τ11,ε,τ22,)解求连续法相对定向元素
Figure GDA0001539031830000143
时:先由式(24)计算By、Bz;然后由式(25)计算
Figure GDA0001539031830000144
最后根据式(1)计算
Figure GDA0001539031830000145
ω,κ。
步骤5、独立相对定向元素的严密解法
本步骤包含流程图4中构建独立相对定向误差方程、最小二乘法求解独立相对定向元素改正数、更新独立相对定向元素进行最小二程迭代求解过程。
两张像片的相对方位得到恢复时,其满足同名光线对对相交的条件,即满足如下的共面条件方程。
Figure GDA0001539031830000146
式中,(u v w)、(u′ v′ w′)分别为同名像点在第一、二张影像像空间辅助坐标系中的坐标。就独立相对定向而言,由于式(26)为非线性函数,需要以5个独立的独立相对定向元素作为未知数对共面条件方程线性化,得:
Figure GDA0001539031830000147
式中:Q0为用独立相对定向元素的初始值求得的Q值,dτ1,dκ1,dε,dτ2,dκ2为独立相对定向待定参数的改正数。
下面选取真是数据对本发明进行实验验证:
真实数据实验则选取一组某海岸带区域SWDC-5倾斜相机按倾斜航空摄影方式拍摄的影像,SWDC-5由一台下视正射与四台分别按飞行方向左、后、右、前倾斜拍摄的大面阵相机组成。选取了分别由同一台SWDC-5的5台相机在5个不同摄站摄取的具有一定重叠区域的影像进行相对定向实验,其编号分别为A、B、C、D、E,其中A、B、C、D四个倾斜相机焦距分别为82.162mm、82.111mm、81.992mm、82.324mm,E号下视正射相机焦距为50.7mm,像元大小均为0.006mm,像幅尺寸均为8167×6132像素。
针对真实数据,采用本专利方法解算相对定向元素,通过统计各立体像对相对定向后同名点上下视差中误差及最大值,来验证本文算法的适用性以及实际解算精度。
表1真实倾斜影像相对定向结果
Figure GDA0001539031830000151
针对图6a、图6b、图6c、图6d及图6e中的倾斜影像,五张影像相互组成10组同名相对,每组像对中影像间姿态相差大,采用以零为初值进行最小二乘迭代的传统方法在计算倾斜影像时计算不收敛,采用本专利方法进行相对定向元素解算结果列于上表。从表中相对定向结果可看出:针对10组同名像对,相对定向迭代解算可较快收敛(不超过5次),精度指标中同名点上下视差中误差和最大值均分别不超过1/3像素和2/3像素,证明了本专利方法的解算精度能够满足实际应用需求。
需要强调的是,本发明所述的实施例是说明性的,而不是限定性的,因此本发明包括并不限于具体实施方式中所述的实施例,凡是由本领域技术人员根据本发明的技术方案得出的其他实施方式,同样属于本发明保护的范围。

Claims (4)

1.一种基于本质矩阵分解的倾斜影像相对定向方法,其特征在于包括以下步骤:
步骤1、计算本质矩阵E;
步骤2、由本质矩阵恢复摄像机矩阵P;
步骤3、将摄像机矩阵P转换为连续相对定向元素初始值;
步骤4、将连续相对定向元素初始值转换为独立向定向元素初始值;
步骤5、构建独立相对定向误差方程、最小二乘法求解独立相对定向元素改正数、更新独立相对定向元素进行最小二程迭代求解,实现倾斜影像相对定向功能;
所述步骤1的计算方法为:由一定数量的同名像点求解得到两影像间的基础矩阵F,进而计算得到本质矩阵E;
所述步骤2的实现方法为:在归一化坐标下,给定本质矩阵E和第一幅影像摄像机矩阵P=[I|0],由本质矩阵的奇异值分解结果E=UWVT,得到四种可能的平移、旋转变换组合来组成第二幅影像对应的摄像机矩阵,将四种可能的摄像机矩阵带入下式:
Figure FDA0002195522660000011
解算z1、z2,求得z1、z2均满足大于零的约束,则对应的摄像机矩阵为唯一正确解,从而确定了摄像机矩阵唯一解的P=[Rcv|tcv];式中,z1、z2分别为点P在第一、二幅影像对应摄像机坐标系中的成像深度;K1、K2分别为第一、二幅影像的对应相机的标定矩阵;p1、p2分别表示某空间点P在第一、二幅影像图像坐标系下的齐次坐标;Rcv、tcv给出了由第二张影像摄像机坐标系到第一张影像摄像机坐标系的刚体变换的旋转矩阵与平移向量。
2.根据权利要求1所述的一种基于本质矩阵分解的倾斜影像相对定向方法,其特征在于:所述步骤3的实现方法为:
根据连续相对定向元素的定义,基线向量tph=B=(Bx,By,Bz)T1O2为由第一张影像像空间坐标系中心到第二张影像像空间坐标系中心的平移向量,在与实际基线长度相差一个缩放因子的情况下由by,bz计算得到;第二张影像像空间坐标系到第一张影像像空间坐标系的旋转矩阵为Rph,该旋转矩阵Rph由连续相对定向元素中三个角元素
Figure FDA0002195522660000021
ω,κ按αx-ω-κ转角系统构成,故空间点P在第一张影像像空间坐标系下的坐标向量1Pph可由第二张影像像空间坐标系中的坐标向量2Pph按下式转化得到:
1Pph=Rph 2Pph+tph
多视图几何中摄像机坐标系C-XYZ与摄影测量中的像空间坐标系S-xyz的相互关系由下式表示:
Pcv=DPph
其中,D矩阵为主对角线元素为1或-1的对角阵,表示如下:
Figure FDA0002195522660000022
进而有:D2Pph=RcvD1Pph+tcv
整理得:1Pph=DRcv TD2Pph-DRcv Ttcv
得到:
Figure FDA0002195522660000023
连续相对定向几何模型采用αx-ω-κ转角系统,相对定向角元素应满足
Figure FDA0002195522660000024
ω∈(-90°,90°)和κ∈[-180°,180°],由
Figure FDA0002195522660000025
得到Rph、tph后,依据
Figure FDA0002195522660000026
由Rph计算连续相对定向角元素
Figure FDA0002195522660000027
ω,κ;by,bz由基线向量tph=(Bx,By,Bz)T导出。
3.根据权利要求1所述的一种基于本质矩阵分解的倾斜影像相对定向方法,其特征在于:所述步骤4的实现方法包括如下过程:基线坐标系到左像空间坐标系的旋转矩阵
Figure FDA0002195522660000028
由连续相对定向元素解求独立相对定向元素和由独立相对定向元素解求连续相对定向元素。
4.根据权利要求3所述的一种基于本质矩阵分解的倾斜影像相对定向方法,其特征在于:
所述基线坐标系到左像空间坐标系的旋转矩阵
Figure FDA0002195522660000031
过程为:
在左像空间坐标系下,记Z轴方向向量为ZL=(0,0,1)T,基线坐标系X Y Z三坐标轴轴方向单位向量分别为X、Y、Z;
X与基线方向平行,有
Figure FDA0002195522660000032
Y同时垂直于X、ZL,有
Figure FDA0002195522660000033
Z同时垂直于X、Y,有
Figure FDA0002195522660000034
将基线坐标系三轴单位向量组成由基线坐标系转换到左像空间坐标系的旋转矩阵
Figure FDA0002195522660000035
该旋转矩阵可视为由Bx,By,Bz作变量的函数矩阵M(Bx,By,Bz),表示如下:
Figure FDA0002195522660000036
所述由连续相对定向元素
Figure FDA0002195522660000037
解求独立相对定向元素(τ11,ε,τ22)过程为:
通过下式计算Rαy(0,τ11):
Figure FDA0002195522660000038
通过下式计算Rαy(ε,τ22):
Figure FDA0002195522660000041
最后由
Figure FDA0002195522660000042
转角系统定义如下公式,根据Rαy(0,τ11)的值计算τ11;根据Rαy(ε,τ22)的值计算ε,τ22
Figure FDA0002195522660000043
Figure FDA0002195522660000044
所述由独立相对定向元素(τ11,ε,τ22)解求连续相对定向元素
Figure FDA0002195522660000045
过程为:
通过下式计算By、Bz
Figure FDA0002195522660000046
通过下式计算
Figure FDA0002195522660000047
Figure FDA0002195522660000048
最后由αx-ω-κ转角系统定义如下公式,通过
Figure FDA0002195522660000049
的值计算
Figure FDA00021955226600000410
ω,κ:
Figure FDA0002195522660000051
CN201710824851.1A 2017-09-14 2017-09-14 一种基于本质矩阵分解的倾斜影像相对定向方法 Active CN107806861B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710824851.1A CN107806861B (zh) 2017-09-14 2017-09-14 一种基于本质矩阵分解的倾斜影像相对定向方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710824851.1A CN107806861B (zh) 2017-09-14 2017-09-14 一种基于本质矩阵分解的倾斜影像相对定向方法

Publications (2)

Publication Number Publication Date
CN107806861A CN107806861A (zh) 2018-03-16
CN107806861B true CN107806861B (zh) 2020-03-06

Family

ID=61591461

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710824851.1A Active CN107806861B (zh) 2017-09-14 2017-09-14 一种基于本质矩阵分解的倾斜影像相对定向方法

Country Status (1)

Country Link
CN (1) CN107806861B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111457896B (zh) * 2020-04-20 2021-09-14 中国人民解放军空军航空大学 一种单像空间后方交会非迭代方法
CN111949925B (zh) * 2020-06-30 2023-08-29 中国资源卫星应用中心 基于罗德里格矩阵和最大凸包的影像相对定向方法及装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5399969A (en) * 1993-08-05 1995-03-21 General Electric Company Analyzer of gradient power usage for oblique MRI imaging
CN101876532B (zh) * 2010-05-25 2012-05-23 大连理工大学 测量系统中的摄像机现场标定方法
US8965057B2 (en) * 2012-03-02 2015-02-24 Qualcomm Incorporated Scene structure-based self-pose estimation
CN105953777B (zh) * 2016-04-27 2018-03-13 武汉讯图科技有限公司 一种基于深度图的大比例尺倾斜影像测图方法

Also Published As

Publication number Publication date
CN107806861A (zh) 2018-03-16

Similar Documents

Publication Publication Date Title
CN107945220B (zh) 一种基于双目视觉的重建方法
WO2018076154A1 (zh) 一种基于鱼眼摄像机空间位姿标定的全景视频生成方法
CN109272570B (zh) 一种基于立体视觉数学模型的空间点三维坐标求解方法
CN103106688B (zh) 基于双层配准方法的室内三维场景重建方法
CN101581569B (zh) 双目视觉传感系统结构参数的标定方法
WO2024045632A1 (zh) 基于双目视觉和imu的水下场景三维重建方法及设备
CN107680159B (zh) 一种基于投影矩阵的空间非合作目标三维重建方法
CN110874854B (zh) 一种基于小基线条件下的相机双目摄影测量方法
CN105043250B (zh) 一种基于至少两个公共标记点的双视角数据对齐方法
CN108629829B (zh) 一种球幕相机与深度相机结合的三维建模方法和系统
Chatterjee et al. Algorithms for coplanar camera calibration
CN107560603B (zh) 一种无人机倾斜摄影测量系统及测量方法
CN104359464A (zh) 基于立体视觉的移动机器人定位方法
CN111415375B (zh) 一种基于多鱼眼摄像机和双针孔投影模型的slam方法
CN112541973B (zh) 虚实叠合方法与系统
CN104504691B (zh) 基于低秩纹理的摄像机位置和姿态测量方法
CN112164119B (zh) 一种适用于狭小空间的环绕放置多摄像机系统标定方法
CN104167001B (zh) 基于正交补偿的大视场摄像机标定方法
CN101354796A (zh) 基于泰勒级数模型的全向立体视觉三维重建方法
CN111429571A (zh) 一种基于时空图像信息联合相关的快速立体匹配方法
US8509522B2 (en) Camera translation using rotation from device
Pathak et al. Dense 3D reconstruction from two spherical images via optical flow-based equirectangular epipolar rectification
CN111854636A (zh) 一种多相机阵列三维检测系统和方法
CN107806861B (zh) 一种基于本质矩阵分解的倾斜影像相对定向方法
CN112857328B (zh) 一种无标定摄影测量方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant