CN111080715A - 三个球和无穷远点的极线性质标定摄像机内参数的方法 - Google Patents

三个球和无穷远点的极线性质标定摄像机内参数的方法 Download PDF

Info

Publication number
CN111080715A
CN111080715A CN201911306857.5A CN201911306857A CN111080715A CN 111080715 A CN111080715 A CN 111080715A CN 201911306857 A CN201911306857 A CN 201911306857A CN 111080715 A CN111080715 A CN 111080715A
Authority
CN
China
Prior art keywords
image
point
vanishing
camera
points
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911306857.5A
Other languages
English (en)
Other versions
CN111080715B (zh
Inventor
杨丰澧
赵越
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yunnan University YNU
Original Assignee
Yunnan University YNU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yunnan University YNU filed Critical Yunnan University YNU
Priority to CN201911306857.5A priority Critical patent/CN111080715B/zh
Publication of CN111080715A publication Critical patent/CN111080715A/zh
Application granted granted Critical
Publication of CN111080715B publication Critical patent/CN111080715B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G06T7/85Stereo camera calibration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/10Complex mathematical operations
    • G06F17/11Complex mathematical operations for solving equations, e.g. nonlinear equations, general mathematical optimization problems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/10Complex mathematical operations
    • G06F17/16Matrix or vector computation, e.g. matrix-matrix or matrix-vector multiplication, matrix factorization

Abstract

三个球和无穷远点的极线性质标定摄像机内参数的方法,对于针孔摄像机采集的任意空间三个球做标定物的三幅图像分别做如下处理:提取每一幅图像的图像边缘点的像素坐标,基于提取的数据,计算出对应的球像方程;对于每幅图像,基于其球像方程,计算出对应的消失点,计算出消失线;对于每幅图像,确定正交消失点;基于所有图像的正交消失点,计算出对应的二次曲线方程,计算出摄像机的内参数。本发明的有益效果为该靶标制作简单,任意找三个球;对该靶标的物理尺度没有要求,无需知道球心在世界坐标系下的坐标;该靶标的图像边界点可以全部提取,提高曲线拟合的精确度,提高标定精度;该方法计算简单,只需要对球像方程特征值分解即可完成标定。

Description

三个球和无穷远点的极线性质标定摄像机内参数的方法
技术领域
本发明涉及计算机视觉领域,尤其是一种利用空间中的无穷远点的极线的性质求解针孔摄像机内参数的方法。
背景技术
计算机视觉的中心任务就是对图像进行理解,而它的最终目标是使计算机具有通过二维图像认知三维环境信息的能力。这种能力将不仅使机器能感知包括形状、姿态、运动等在内的三维环境中物体的几何信息,而且能对它们进行描述、存储、识别与理解。摄像机标定就是确定从三维空间点到它的二维图像点之间的映射关系,它是许多计算机视觉应用必不可少的步骤。为了确定这一映射过程,需要建立摄像机的几何成像模型,几何模型的参数称为摄像机参数,摄像机参数可分为内参数和外参数两类。内参数描述成像系统的成像几何特性,外参数描述成像系统关于世界坐标系的方向和位置。摄像机标定可分为传统标定、自标定和基于几何实体的标定。无论哪种标定方法,都旨在建立二维图像与摄像机内参数之间的约束关系,特别是线性约束关系,这是目前摄像机标定所追求的目标,也是目前计算机视觉领域研究的热点之一。
针孔摄像机成像模型简单,几何原理清晰,不需要一些特殊的镜面,在视觉领域中有重要的应用。文献“An algorithm for self calibration from several views”,(R.Hartley,In Proc.IEEE Conference on Computer Vision and PatternRecognition,pages 908–912,June 1994.)提出了一种针孔摄像机自标定方法,这类方法的优点是不需要使用标定块,缺点是必须获得图像之间的对应点。而在计算机视觉中,实现一个十分有效的寻找对应点的方法是很困难的。文献“Camera calibration by a singleimage of balls:From conics to the absolute conic”,(Teramoto H.and Xu G.,InProc.of 5th ACCV,2002,pp.499–506.)研究了在针孔摄像机下球像和绝对二次曲线的关系,通过最小化重投影误差非线性的标定内参数。而该方法需要一个好的初始化步骤,不然在最小化过程时会得到一个局部最小值。文献“Camera Calibration from Images ofSpheres”,(Hui Zhang and Kwan-Yee K.,IEEE Transactions on Pattern Analysis&Machine Intelligence.2007,29(3):499-502)研究了球像的对偶和绝对二次曲线的像的关系,并将该关系应用于摄像机的标定。文献“Interpreting Sphere Images Using theDouble-Contact Theorem”,(X.Ying,H.Zha,Springer Berlin Heidelberg,2006,3851(91):724-733)介绍了双接触原理,利用双接触原理可以确定三个球像与绝对二次曲线的像的关系,使用这个关系建立了针孔摄像机内参数的线性约束,通过此线性约束即可获得针孔摄像机的内参数。
球作为一种常见的几何体,其最重要的优点在于无自身遮挡,从任何一个方向看空间中一个球的封闭轮廓线是一个圆,并且它的投影轮廓线可全部提取。由于球具的视觉几何特性,因此利用球进行摄像机标定已成为近年来的一个研究方向。文献“Cameracalibration:a quick and easy way to determine the scale factor”,(M.A.Penna,IEEE Trans on Pattern Analysis and Machine Intelligence,vol.13,no.12,pp.1240-1245,Dec.1991.)首次提出了利用球像计算,通过在像平面上最小二乘拟合球像估计纵横比,但该方法的误差较大,不能得到精确解。文献“Camera calibration using spheres:Asemi-definite programming approach”,(Agrawal M.and Davis L.S.,In Proc.of IEEEInternational Conf.on Computer Vision,2003,pp.782–789.)研究了球图像的对偶形式与绝对二次曲线投影的对偶之间的代数关系,通过半正定规划算法确定摄像机内参数,但该方法计算复杂,且在边界拟合或椭圆提取不够好的情况下,该方法存在退化的情况。文献“Camera calibration from spheres images”,(Daucher D.,Dhome M.,in Proc.ECCV,1994,pp.449–454.)提出了一种非线性的估计摄像机的内参数的方法,且该方法需要经过多个步骤,首先,利用椭圆的两个主要轴的交点确定主点和纵横比,接下来,根据椭圆的系数方程确定焦距。然而,该方法会造成误差累计且只能估计部分摄像机内参数。
发明内容
本发明的发明目的在于:针对上述存在的问题,提供一种三个球和无穷远点的极线性质标定摄像机内参数的方法,通过该方法对摄像机内参数进行标定的方法制作简单,适用广泛,且稳定性好。
本发明采用如下技术方案如下:
三个球和无穷远点的极线性质标定摄像机内参数的方法,其特征在于,包括以下步骤:
A.对于针孔摄像机采集的任意以空间三个球做标定物的三幅图像分别做如下处理:提取每一幅图像的图像边缘点的像素坐标,基于提取的像素坐标,计算出对应的球像方程;所述球像为空间中的一个球与摄像机坐标系原点形成的正圆锥在垂直于Z轴平面的投影;
B.对于每幅图像,通过特征值分解得到轮廓圆所在支撑平面上的第一无穷远点与第二无穷远点,基于球像方程,计算出第一消失点与第二消失点,连接第一消失点和第二消失点,获得消失线;所述轮廓圆为空间中的一个球与摄像机坐标系原点形成的正圆锥,与空间中这个球的截交线形成的圆;
C.对于每幅图像,利用无穷远点关于圆的极限方向与该无穷远点的方向是正交的性质,获得两组正交消失点;
D.对于所有图像获得的正交消失点,通过SVD方法求解正交消失点对绝对二次曲线的像ω的线性约束获得ω,对ω进行分解再求逆,计算出摄像机的内参数。
更进一步的,所述步骤A具体方法包括:所述提取每幅图像的图像边缘点的像素坐标的方法为通过Matlab中的Edge函数提取。
更进一步的,所述步骤A中,根据像素坐标计算出球像方程的方法为:采用最小二乘法对像素坐标进行拟合,获得球像方程。
更进一步的,所述步骤B具体包括:
对于每幅图像,通过特征值分解得到轮廓圆所在支撑平面上的第一无穷远点与第二无穷远点,取一组球像方程构成矩阵方程,通过矩阵方程的特征向量确定第一无穷远点的像和第二无穷远点的像,所述第一无穷远点的像为第一消失点;所述第二无穷远点的像为第二消失点;连接第一消失点和第二消失点,获得消失线
更进一步的,所述一组球像方程为一幅图像中的两个球像方程。
的,所述步骤C具体方法如下:对于每幅图像,确定第一消失点与第二消失点关于第一球像的第一极线与第二极线,利用无穷远点关于圆的极线方向与该无穷远直线方向是正交的性质,获得第一极线方向上的消失点和第二极线方向上的消失点,获得第一正交消失点与第二正交消失点。
更进一步的,所述步骤D具体中,对绝对二次曲线像ω的线性约束获得ω的具体方法为:通过SVD方法计算正交消失点对绝对二次曲线的像ω的线性约束获得ω。
综上所述,由于采用了上述技术方案,本发明的有益效果是:
1、本发明采用的三个球和无穷远点的极线的性质标定摄像机内参数的方法中,该靶标制作简单,只需任意找三个球;
2、本发明采用的三个球和无穷远点的极线的性质标定摄像机内参数的方法中,对该靶标的物理尺度没有要求,无需知道球心在世界坐标系下的坐标;
3、本发明采用的三个球和无穷远点的极线的性质标定摄像机内参数的方法中,该靶标的图像边界点几乎可以全部提取,这样可以提高曲线拟合的精确度,从而提高标定精度;
4、本发明采用的三个球和无穷远点的极线的性质标定摄像机内参数的方法中,该方法是一个线性的算法,计算简单,仅仅只需要对球像方程特征值分解即可完成标定。
附图说明
本发明将通过例子并参照附图的方式说明,其中:
图1是用于求解针孔摄像机内参数的靶标示意图。
图2是靶标在图像平面上的投影。
具体实施方式
本说明书中公开的所有特征,或公开的所有方法或过程中的步骤,除了互相排斥的特征和/或步骤以外,均可以以任何方式组合。
本说明书(包括任何附加权利要求、摘要)中公开的任一特征,除非特别叙述,均可被其他等效或具有类似目的的替代特征加以替换。即,除非特别叙述,每个特征只是一系列等效或类似特征中的一个例子而已。
实施列一
本实施列公开了一种利用靶标求解针孔摄像机内参数的方法,该靶标是由空间中的球构成的,如图1所示,用此靶标完成针孔摄像机内参数的求解需要经过以下步骤:从图像中提取靶标图像边缘点,使用最小二乘法拟合获得球像。根据球像的射影不变量的性质获得消失点,从而估计消失线。在获得消失线的基础上,因为无穷远点关于圆的极线方向与该无穷远点的方向是正交的,从而确定该平面上两组正交消失点。利用正交消失点对摄像机内参数的约束求解摄像机内参数。具体的步骤包括:拟合靶标投影方程,估计消失线,确定正交消失点,求解针孔摄像机的内参数。利用本发明中的方法对针孔摄像机进行标定,具体步骤如下:
A.拟合靶标投影方程
利用Matlab程序中的Edge函数提取靶标图像边缘点的像素坐标,并用最小二乘法拟合获得球像的方程。
B.确认消失点,估计消失线
以空间中的三个球为标定物体,由于球的投影过程同构于球面轮廓的成像过程,而球面轮廓从不同的方向观察都是一个圆。如图1所示,若以空间中任意一点Ow为原点建立世界坐标系Ow-XwYwZw,其中Zw经过其中一个球S1的中心O1。那么三个球S1,S2和S3的轮廓圆C1,C2和C3与点Ow形成三个正圆锥Q1,Q2和Q3。若假设在世界坐标系下三个球的球心的齐次坐标分别是O1=[0 0 d1 1]T,O2=[nx ny nz 1]T和O3=[mx my mz 1]T,由于Q1,Q2和Q3是正圆锥,则三个轮廓圆C1,C2和C3的支撑平面π1,π2和π3的方程为:
Z1-d1=0,(1)
Figure BDA0002323394160000061
Figure BDA0002323394160000062
其中|d1|,
Figure BDA0002323394160000063
Figure BDA0002323394160000064
分别表示是世界坐标系原点Ow到平面π1,π2和π3之间的距离。
假设三个球S1,S2和S3的半径分别是r1,r2和r3,则三个球的方程可以写成:X1 2+Y1 2+(Z1-d1)2=r1 2,(4)
Figure BDA0002323394160000065
Figure BDA0002323394160000066
因为轮廓圆C1,C2和C3分别是三个球S1,S2和S3与平面π1,π2和π3相截的截口圆,则联立(1-6)式,三个正圆锥Q1,Q2和Q3在世界坐标系Ow-XwYwZw下可以分别表示为:
Figure BDA0002323394160000071
Figure BDA0002323394160000072
Figure BDA0002323394160000073
其中
Figure BDA0002323394160000074
一般来说,两个正圆锥的广义特征值分解满足下式:
Q1u1=λQ2u1,(10)
联立(7)式和(8)式,则通过Maple不难计算出Q1和Q2的其中一个广义特征值λ1及其对应的广义特征向量V1为:
Figure BDA0002323394160000075
又因为在世界坐标系下,平面OwXwYw的单位法向量为[0 0 1]T,则点V1=[-ny/nx 10]T是平面OwXwYw上的无穷远点。而平面OwXwYw平行于平面π1。因此,根据射影空间的性质,V1=[-ny/nx 1 0]T也是平面π1上的无穷远点。同理的,两个正圆锥Q1和Q3的广义特征向量中也封装了平面π1上的另外一个无穷远点V2=[-my/mx 1 0]T
用Matlab中的Edge函数提取3幅图像中的靶标图像边缘点的像素坐标,通过最小二乘法拟合得到相应的二次曲线方程,这里用cni表示第n(n=1,2,3)幅图像中的第i(i=1,2,3)个球像的系数矩阵。
给定一个点
Figure BDA0002323394160000081
在正圆锥Q1上,则有下式成立:
Figure BDA0002323394160000082
这里
Figure BDA0002323394160000083
从图1可以看出,若以三个正圆锥Q1,Q2和Q3的顶点作为原点建立摄像机坐标系Oc-XcYcZc。因此,摄像机坐标系和世界坐标系之间仅仅只有旋转变换,即Tn=[000]T。则
Figure BDA0002323394160000084
的像点有下式成立:
Figure BDA0002323394160000085
若假设球S1在垂直于Zc轴的图像平面π上的投影为cn1,根据射影变换的同素性,则图像点mn在球像cn1上,即有:mn Tcn1mn=0。(14)
因为KRn是3×3阶可逆矩阵,则联立(12-14)式,我们可得:
Figure BDA0002323394160000086
其中λcn1是非零比例因子。
同理的,若空间中球S2和S3的在图像平面π上的投影分别为cn2和cn3,则有下面的式子成立:
Figure BDA0002323394160000087
Figure BDA0002323394160000088
其中λcn2,λcn3是非零比例因子。
首先考虑矩阵对(cn1,cn2),代数上地,因为矩阵对(cn1,cn2)的广义特征向量等价于矩阵cn2 -1cn1的特征向量,从(15)和(16)式可知,下面的等式满足:
Figure BDA0002323394160000089
这里∝表示相差一个非零比例因子。由于二次曲线对(cn1,cn2)和正圆锥对
Figure BDA0002323394160000091
由一个非奇异的单应Hn=KRn所关联,即
Figure BDA0002323394160000092
从文献“EuclideanStructure form Confocal Conics:Theory and Aplication to Camera Calibration”,(P.Gurdjos,J.-S.Kim,and I.-S.Kweon,In Proceeding of IEEE Conference onComputer Vision and Pattern Recognition,2006,pp.1214-1221.)可知,两个正圆锥Q1和Q2的广义特征分解是射影不变量,即若wk(k=1,2,3)是矩阵Q1和Q2的广义特征向量,那么
Figure BDA0002323394160000093
一定是矩阵cn1和cn2的广义特征向量。则矩阵cn2 -1cn1的其中一个特征向量对应于无穷远点V1的像vn1。因为V1是平面π1上的无穷远点,则其像点vn1就是平面π1上消失点。同理的,对于二次曲线对(cn1,cn3),其广义特征向量对应于平面π1上的另外一个消失点vn2
在图像平面上,连接两个消失点vn1和vn2可以获得消失线ln∞,即:
λnlln∞=vn1×vn2,(19)
其中λnl是非零比例因子,×表示叉积。
C.确定正交消失点
如图2所示,已知平面π1上的两个消失点vn1和vn2,那么消失点vn1和vn2关于球像cn1的极线ln1和ln2可以被确定,即有:
λl1ln1=cn1·vn1,(20)
λl2ln2=cn1·vn2,(21)
其中λl1和λl2是非零比例因子。因为给定了消失线ln∞,那么直线ln1和ln2方向的消失点可以被获得:
λv1vn1′=ln1×ln∞,(22)
λv2vn2′=ln2×ln∞,(23)
其中λv1和λv2是非零比例因子。从文献“Calibrating a paracatadioptriccamera by the property of the polar of a point at infinity with respect to acircle”,(Zhao Y,Li Y,and Zheng B,Applied Optics,2018,57(15):4345–4352)可知,无穷远点V1和V2关于圆C1的极线方向与该无穷远直线的方向是正交的,那么{vn1,vn1′},{vn2,vn2′}是两组正交消失点(图2)。
D.求解摄像机的内参数
三幅透视图像可以获得六组正交消失点{v11,v11′},{v12,v12′},{v21,v21′},{v22,v22′},{v31,v31′},{v32,v32′}。其次,绝对二次曲线的像ω=K-TK-1,由正交消失点对绝对二次曲线的像ω的线性约束有:
Figure BDA0002323394160000101
通过SVD方法求解方程组(24)获得ω。最后,对ω进行Cholesky分解再求逆便可获得K,即获得了针孔摄像机的内参数。
实施列二
本实施列公开了一种利用空间三个球作为靶标线性确定针孔摄像机内参数的方法,如图1所示,包括以下步骤:
针对每一幅图像,执行以下操作:
基于空间中球的针孔摄像机标定采用的实验模板是空间中的球,如图1所示,三个球分别记为S1,S2和S3。利用本发明中的方法对用于实验的针孔摄像机进行标定,具体步骤如下:
A.拟合图像边界及靶标曲线方程
本发明采用的图像大小为1038×1048。用针孔摄像机拍摄靶标的3幅实验图像,读入图像,利用Matlab中的Edge函数提取靶标图像边缘点的像素坐标,并用最小二乘法拟合获得球像的方程。第n(n=1,2,3)幅图像中第i(i=1,2,3)个球像的方程的系数矩阵分别为cni,结果如下:
Figure BDA0002323394160000111
Figure BDA0002323394160000112
Figure BDA0002323394160000113
Figure BDA0002323394160000114
Figure BDA0002323394160000115
Figure BDA0002323394160000116
Figure BDA0002323394160000117
Figure BDA0002323394160000118
Figure BDA0002323394160000121
A.确认消失点,估计消失线
因为任意两幅球像方程cni,cnj(i,j=1,2,3,i≠j),矩阵对(cni,cnj)的广义特征向量等价于矩阵cnj -1cni的特征向量。因此,我们计算矩阵c12 -1c11,c13 -1c11,c22 -1c21,c23 -1c21,c32 -1c31,c33 -1c31,结果如下:
Figure BDA0002323394160000122
Figure BDA0002323394160000123
Figure BDA0002323394160000124
Figure BDA0002323394160000125
Figure BDA0002323394160000126
Figure BDA0002323394160000127
将(34)式特征值分解,则可得消失点v11的齐次坐标矩阵,结果如下:
v11=[0.99450726301704894 -0.10465570799376767 0.0015768927234963]T,(40)
将(35)式特征值分解,则可得消失点v12的齐次坐标矩阵,结果如下:
v12=[0.9262349441317514 -0.3769428033206873 0.0017179330582914]T,(41)
将(36)式特征值分解,则可得消失点v21的齐次坐标矩阵,结果如下:
v21=[0.2819945161167738 -0.9594155250144900 0.0009712060734723]T,(42)
将(37)式特征值分解,则可得消失点v22的齐次坐标矩阵,结果如下:
v22=[0.4510826786451655 -0.8924809765054265 0.0014572584612350]T,(43)
将(38)式特征值分解,则可得消失点v31的齐次坐标矩阵,结果如下:
v31=[0.7952536542122716 -0.6062736106657554 0.0019835504371010]T,(44)
将(39)式特征值分解,则可得消失点v32的齐次坐标矩阵,结果如下:
v32=[0.5091979698043946 -0.8606476734258553 0.0017348699504062]T。(45)
将(40)和(41)式带入(19)式,则可得消失线l1∞的齐次线坐标矩阵,结果如下:
l1∞=[0.0004146068632293 -0.0002479237601985 -0.2779365817977542]T,(46)
将(42)和(43)式带入(19)式,则可得消失线l2∞的齐次线坐标矩阵,结果如下:
l2∞=[-0.0005313334468269 0.00002715534250533 0.1811009838442204]T,(47)
将(44)和(45)式带入(19)式,则可得消失线l3∞的齐次线坐标矩阵,结果如下:
l3∞=[0.0006553321999455 -0.0003696418120671 -0.3757199155842185]T。(48)
B.确定正交消失点
已知消失点v11和v12,那么消失点v11和v12关于球像c11的极线l11和l12可以被确定,即将(40)和(41)带入(20)和(21)式,结果如下:
l11=[0.0004854968561186 -0.0003956333974114 0.9396050608465065]T,(49)
l12=[0.0003425390694950 -0.0005932493949851 1.0327684918371282]T,(50)
已知消失点v21和v22,那么消失点v21和v22关于球像c21的极线l21和l22可以被确定,即将(42)和(43)带入(20)和(21)式,结果如下:
l21=[-0.0000460957311525 -0.0015854653021968 1.3953687555875684]T,(51)
l22=[-0.0000162164680849 -0.0011007100606612 1.2694611674730331]T,(52)
已知消失点v31和v32,那么消失点v31和v32关于球像c31的极线l31和l32可以被确定,即将(44)和(45)带入(20)和(21)式,结果如下:
l31=[0.0001265238012564 -0.0007046877083103 1.1285805070246859]T,(53)
l32=[-0.00004129946513938 -0.0009505811324572 1.2413153114580466]T,(54)
因为已知消失线l1∞,将(46),(49)和(50)式带入(22)和(23)式,那么直线l11和l12方向的消失点v11′和v12′可以被确定,结果如下:
v11′=[-0.0013130790783350 -0.0020084350016925 -0.0000001672066332]T,(55)
v12′=[-0.0014664418874397 -0.0018234026129562 -0.0000005610345996]T,(56)
同理的,将(47),(51)和(52)式带入(22)和(23)式,l21和l22方向的消失点v21′和v22′可以被确定,结果如下:
v21′=[-0.0012861797722283 -0.0029008722120382 -0.0000033385580812]T,(57)
v22′=[-0.0010170145715238 -0.0029211327221107 -0.0000025458144312]T,(58)
将(48),(53)和(54)式带入(22)和(23)式,l31和l32方向的消失点v31′和v32′可以被确定,结果如下:
v31′=[-0.0016082245879101 -0.0018563128495302 -0.0000009787889767]T,(59)
v32′=[-0.0017496081726360 -0.00171093332519432 -0.0000013684184863]T,(60)
C.求解针孔摄像机的内参数
将(44-45)和(55-60)式代入(24)得到ω中元素的线性方程组,使用SVD分解求解该线性方程组得到ω的系数矩阵。结果如下:
Figure BDA0002323394160000141
最后,对(61)中的ω进行Cholesky分解再求逆便可获得K,结果如下:
Figure BDA0002323394160000151
其中纵横比rc=K(1,1)/K(2,2)(K(1,1)表示矩阵K的第1行第1列的元素,K(2,2)表示矩阵K的第2行第2列的元素),故=针孔摄像机的5个内参数分别为:rc=0.9076073129680438,fc=880.0551116105875735,s=0.9556989480694750,u0=320.8483611614465758,v0=239.9329598867570041。
本发明并不局限于前述的具体实施方式。本发明扩展到任何在本说明书中披露的新特征或任何新的组合,以及披露的任一新的方法或过程的步骤或任何新的组合。

Claims (7)

1.三个球和无穷远点的极线性质标定摄像机内参数的方法,其特征在于,包括以下步骤:
A.对于针孔摄像机采集的任意以空间三个球做标定物的三幅图像分别做如下处理:提取每一幅图像的图像边缘点的像素坐标,基于提取的像素坐标,计算出对应的球像方程;所述球像为空间中的一个球与摄像机坐标系原点形成的正圆锥在垂直于Z轴平面的投影;
B.对于每幅图像,通过特征值分解得到轮廓圆所在支撑平面上的第一无穷远点与第二无穷远点,基于球像方程,计算出第一消失点与第二消失点,连接第一消失点和第二消失点,获得消失线;所述轮廓圆为空间中的一个球与摄像机坐标系原点形成的正圆锥,与空间中这个球的截交线形成的圆;
C.对于每幅图像,利用无穷远点关于圆的极限方向与该无穷远点的方向是正交的性质,获得两组正交消失点;
D.对于所有图像获得的正交消失点,对绝对二次曲线的像ω线性约束获得ω,对ω进行Cholesky分解再求逆,计算出摄像机的内参数。
2.根据权利要求1所述的三个球和无穷远点的极线性质标定摄像机内参数的方法,其特征在于:所述步骤A具体方法包括:
所述提取每幅图像的图像边缘点的像素坐标的方法为通过Matlab中的Edge函数提取。
3.根据权利要求1所述的三个球和无穷远点的极线性质标定摄像机内参数的方法,其特征在于:所述步骤A中,根据像素坐标计算出球像方程的方法为:采用最小二乘法对像素坐标进行拟合,获得球像方程。
4.根据权利要求1所述的三个球和无穷远点的极线性质标定摄像机内参数的方法,其特征在于:所述步骤B具体包括:
对于每幅图像,通过特征值分解得到轮廓圆所在支撑平面上的第一无穷远点与第二无穷远点,取一组球像方程构成矩阵方程,通过矩阵方程的特征向量确定第一无穷远点的像和第二无穷远点的像,所述第一无穷远点的像为第一消失点;所述第二无穷远点的像为第二消失点;连接第一消失点和第二消失点,获得消失线。
5.根据权利要求4所述的三个球和无穷远点的极线性质标定摄像机内参数的方法,其特征在于:所述一组球像方程为一幅图像中的两个球像方程。
6.根据权利要求1所述的三个球和无穷远点的极线性质标定摄像机内参数的方法,其特征在于:所述步骤C具体方法如下:
对于每幅图像,确定第一消失点与第二消失点关于第一球像的第一极线与第二极线,利用无穷远点关于圆的极线方向与该无穷远直线方向是正交的性质,获得第一极线方向上的消失点和第二极线方向上的消失点,获得第一正交消失点与第二正交消失点。
7.根据权利要求1所述的三个球和无穷远点的极线性质标定摄像机内参数的方法,其特征在于:所述步骤D具体中,对绝对二次曲线的像ω的线性约束获得ω的具体方法为:通过SVD方法计算正交消失点对绝对二次曲线像ω的线性约束获得ω。
CN201911306857.5A 2019-12-18 2019-12-18 三个球和无穷远点的极线性质标定摄像机内参数的方法 Active CN111080715B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911306857.5A CN111080715B (zh) 2019-12-18 2019-12-18 三个球和无穷远点的极线性质标定摄像机内参数的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911306857.5A CN111080715B (zh) 2019-12-18 2019-12-18 三个球和无穷远点的极线性质标定摄像机内参数的方法

Publications (2)

Publication Number Publication Date
CN111080715A true CN111080715A (zh) 2020-04-28
CN111080715B CN111080715B (zh) 2022-04-12

Family

ID=70315307

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911306857.5A Active CN111080715B (zh) 2019-12-18 2019-12-18 三个球和无穷远点的极线性质标定摄像机内参数的方法

Country Status (1)

Country Link
CN (1) CN111080715B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113470117A (zh) * 2021-06-28 2021-10-01 上海交通大学 基于圆球逆透视投影的单位姿三维结构光标定系统及方法
CN113610926A (zh) * 2021-07-28 2021-11-05 北京航空航天大学 一种基于消失点正交性质的相机标定方法
CN113689507A (zh) * 2021-09-08 2021-11-23 云南大学 一种基于共焦二次曲线标定针孔摄像机的方法及系统

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005258953A (ja) * 2004-03-12 2005-09-22 Ntt Docomo Inc 魚眼カメラ、及び魚眼カメラにおけるキャリブレーション方法
US20100033567A1 (en) * 2008-08-08 2010-02-11 Objectvideo, Inc. Automatic calibration of ptz camera system
CN102252661A (zh) * 2011-04-02 2011-11-23 华南理工大学 一种应用于机器视觉的球状体三维定位方法
CN104217435A (zh) * 2014-09-11 2014-12-17 云南大学 两个相互遮挡的球线性确定拋物折反射摄像机内参数方法
CN105205824A (zh) * 2015-09-25 2015-12-30 北京航空航天大学 基于高精度辅助相机和球靶标的多摄像机全局校准方法
CN105279758A (zh) * 2015-10-22 2016-01-27 云南大学 使用双球的相切像与圆环点的像标定拋物折反射摄像机
CN105303570A (zh) * 2015-10-22 2016-02-03 云南大学 使用双球的相交像及圆环点的像标定拋物折反射摄像机
CN105354840A (zh) * 2015-10-22 2016-02-24 云南大学 使用相离的双球像与正交消失点标定拋物折反射摄像机
CN106327504A (zh) * 2016-09-22 2017-01-11 云南大学 利用单个球及圆环点的像标定拋物折反射摄像机的方法
CN106558081A (zh) * 2016-11-28 2017-04-05 云南大学 标定非中心轴对称系统的圆锥折反射摄像机的方法
CN107657645A (zh) * 2017-10-09 2018-02-02 云南大学 利用直线及圆的共轭直径的性质标定拋物折反射摄像机
CN108921904A (zh) * 2018-07-13 2018-11-30 云南大学 利用单个球及渐近线的性质标定针孔摄像机的方法
CN109325983A (zh) * 2018-10-18 2019-02-12 云南大学 利用无穷远点关于圆极线性质标定拋物折反射摄像机

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005258953A (ja) * 2004-03-12 2005-09-22 Ntt Docomo Inc 魚眼カメラ、及び魚眼カメラにおけるキャリブレーション方法
US20100033567A1 (en) * 2008-08-08 2010-02-11 Objectvideo, Inc. Automatic calibration of ptz camera system
CN102252661A (zh) * 2011-04-02 2011-11-23 华南理工大学 一种应用于机器视觉的球状体三维定位方法
CN104217435A (zh) * 2014-09-11 2014-12-17 云南大学 两个相互遮挡的球线性确定拋物折反射摄像机内参数方法
CN105205824A (zh) * 2015-09-25 2015-12-30 北京航空航天大学 基于高精度辅助相机和球靶标的多摄像机全局校准方法
CN105279758A (zh) * 2015-10-22 2016-01-27 云南大学 使用双球的相切像与圆环点的像标定拋物折反射摄像机
CN105303570A (zh) * 2015-10-22 2016-02-03 云南大学 使用双球的相交像及圆环点的像标定拋物折反射摄像机
CN105354840A (zh) * 2015-10-22 2016-02-24 云南大学 使用相离的双球像与正交消失点标定拋物折反射摄像机
CN106327504A (zh) * 2016-09-22 2017-01-11 云南大学 利用单个球及圆环点的像标定拋物折反射摄像机的方法
CN106558081A (zh) * 2016-11-28 2017-04-05 云南大学 标定非中心轴对称系统的圆锥折反射摄像机的方法
CN107657645A (zh) * 2017-10-09 2018-02-02 云南大学 利用直线及圆的共轭直径的性质标定拋物折反射摄像机
CN108921904A (zh) * 2018-07-13 2018-11-30 云南大学 利用单个球及渐近线的性质标定针孔摄像机的方法
CN109325983A (zh) * 2018-10-18 2019-02-12 云南大学 利用无穷远点关于圆极线性质标定拋物折反射摄像机

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
FENGLI YANG: "Calibration of camera intrinsic parameters based on the properties of the polar of circular points", 《RESEARCH ARTICLE》 *
Y.H. WU: "Camera calibration from the quasi-Affine invariance of two parallel circles", 《PROCEEDINGS OF THE EIGHTH EUROPEAN CONFERENCE ON COMPUTER VISION》 *
周辉峰等: "单目视觉测量球形体中心偏移校正方法", 《装备指挥技术学院学报》 *
潘海朗等: "基于模型的弹性连接体三维运动估计", 《南京理工大学学报(自然科学版)》 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113470117A (zh) * 2021-06-28 2021-10-01 上海交通大学 基于圆球逆透视投影的单位姿三维结构光标定系统及方法
CN113470117B (zh) * 2021-06-28 2022-12-27 上海交通大学 基于圆球逆透视投影的单位姿三维结构光标定系统及方法
CN113610926A (zh) * 2021-07-28 2021-11-05 北京航空航天大学 一种基于消失点正交性质的相机标定方法
CN113610926B (zh) * 2021-07-28 2024-04-12 北京航空航天大学 一种基于消失点正交性质的相机标定方法
CN113689507A (zh) * 2021-09-08 2021-11-23 云南大学 一种基于共焦二次曲线标定针孔摄像机的方法及系统
CN113689507B (zh) * 2021-09-08 2024-04-05 云南大学 一种基于共焦二次曲线标定针孔摄像机的方法及系统

Also Published As

Publication number Publication date
CN111080715B (zh) 2022-04-12

Similar Documents

Publication Publication Date Title
Usenko et al. The double sphere camera model
CN111080715B (zh) 三个球和无穷远点的极线性质标定摄像机内参数的方法
Zhou A new minimal solution for the extrinsic calibration of a 2D LIDAR and a camera using three plane-line correspondences
CN107886546B (zh) 利用球像及公共自极三角形标定抛物折反射摄像机的方法
Orghidan et al. Camera calibration using two or three vanishing points
Hansen et al. Online continuous stereo extrinsic parameter estimation
Knorr et al. Online extrinsic multi-camera calibration using ground plane induced homographies
CN108921904B (zh) 利用单个球及渐近线的性质标定针孔摄像机的方法
CN113744340A (zh) 用轴向视点偏移的非中心相机模型校准相机并计算点投影
Cao et al. Camera calibration using symmetric objects
Tao et al. A convenient and high-accuracy multicamera calibration method based on imperfect spherical objects
Takahashi et al. Mirror-based camera pose estimation using an orthogonality constraint
Kukelova et al. Hand-eye calibration without hand orientation measurement using minimal solution
CN111223148B (zh) 一种基于相同圆和正交性质标定摄像机内参数的方法
Yang et al. Camera calibration using projective invariants of sphere images
CN109035342B (zh) 利用一条直线及圆环点极线标定拋物折反射摄像机的方法
CN110148183B (zh) 利用球及极点极线标定摄像机的方法、存储介质和系统
CN107958468B (zh) 利用空间位置不同的三个球标定中心折反射摄像机的方法
CN109360247B (zh) 单个球的公共自极三角形及正交消失点标定抛物摄像机
CN109191528B (zh) 利用球像与圆环点极线的性质标定针孔摄像机的方法
CN113345033B (zh) 一种中心折反射摄像机内参数标定方法及系统
CN113048985B (zh) 已知相对旋转角度条件下的像机相对运动估计方法
CN110930461B (zh) 利用靶标求解针孔摄像机内参数的方法、存储介质和系统
CN113610926B (zh) 一种基于消失点正交性质的相机标定方法
CN111223149A (zh) 一种基于两个半径相同的分离圆的性质标定摄像机内参数的方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant