CN112053405B - 一种随动视觉系统光轴与转轴偏差标定及外参校正方法 - Google Patents
一种随动视觉系统光轴与转轴偏差标定及外参校正方法 Download PDFInfo
- Publication number
- CN112053405B CN112053405B CN202010851529.XA CN202010851529A CN112053405B CN 112053405 B CN112053405 B CN 112053405B CN 202010851529 A CN202010851529 A CN 202010851529A CN 112053405 B CN112053405 B CN 112053405B
- Authority
- CN
- China
- Prior art keywords
- rotation
- camera
- matrix
- vector
- relative
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/002—Measuring arrangements characterised by the use of optical techniques for measuring two or more coordinates
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/10—Complex mathematical operations
- G06F17/11—Complex mathematical operations for solving equations, e.g. nonlinear equations, general mathematical optimization problems
- G06F17/12—Simultaneous equations, e.g. systems of linear equations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F17/00—Digital computing or data processing equipment or methods, specially adapted for specific functions
- G06F17/10—Complex mathematical operations
- G06F17/16—Matrix or vector computation, e.g. matrix-matrix or matrix-vector multiplication, matrix factorization
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F7/00—Methods or arrangements for processing data by operating upon the order or content of the data handled
- G06F7/76—Arrangements for rearranging, permuting or selecting data according to predetermined rules, independently of the content of the data
- G06F7/78—Arrangements for rearranging, permuting or selecting data according to predetermined rules, independently of the content of the data for changing the order of data flow, e.g. matrix transposition or LIFO buffers; Overflow or underflow handling therefor
Abstract
Description
技术领域
本发明涉及计算机视觉技术领域,尤其是一种随动视觉系统光轴与转轴偏差标定及外参校正方法。
背景技术
云台视觉系统广泛应用于航空摄影、安防监控和运动跟踪等领域,但其在大尺度空间几何量视觉测量上的应用潜力还未得到充分开发。为在一个统一的参考系下获取精确的三维测量结果,要求在各转动位置处通过相机获取的测量结果通过空间转换变换到统一的参考系下,本质上是相机外参校正或者姿态估计的过程。
相机姿态估计方法常见的有基于合作目标的传统标定方法、基于对极几何和矩阵分解的运动恢复结构(StructurefromMotion,SfM)方法以及基于光流的直接法。传统标定方法通过建立合作目标上空间坐标已知的点与其图像点之间的对应关系来解耦和估计相机的内外参数。如经典的两步标定方法和基于平面棋盘格的高精度标定方法。运动恢复结构方法利用鲁棒的图像特征匹配和对极几何原理,在空间信息未知的条件下估计多帧图像序列对应的相机相对姿态以及图像特征对应的空间点坐标。直接法利用光流法中亮度恒定假设通过最小化光度误差来估计相机运动,避免了特征匹配中关键点和描述子的计算负担,但在光照变化或快速运动场景下不适用。
在借助于载体平台提供的附加角度信息情况下,可以预见相机姿态更精确的估计结果。在[Nagayoshi H,Pollefeys M.“Estimating Camera Pose Using TrajectoriesGenerated by Pan-Tilt Motion,”IEEE 2014 2nd International Conference on 3DVision[J].2014:561-568.]中提出了一种针对二维转台变焦视觉系统(pan-tilt-zoom,PTZ)相机网络自动外参标定的方法。通过对设置有标记物的某一相机执行在不同偏航角度下的翻转运动,利用另一相机观察该标记物的圆形轨迹并施加相应几何约束获得唯一的相机姿态估计。
针对转台视觉系统中转动相机扩大视场的应用特性,利用相机从多视角获取公共视场图像的匹配方法是不适用的。在要求任意转动相机的实际应用场合中上述方法无法实现在线实时外参校正。即便是在转台转角误差非常小的情况下,由于相机光心和光轴的虚拟性,简单代入转台转角信息校正相机外参的直接方法,其精度也是无法保证的。
发明内容
本发明的目的在于提供一种消除根据转角校正相机外参过程中的系统误差,标定过程快速、简单,标定结果精度高的随动视觉系统光轴与转轴偏差标定及外参校正方法。
为实现上述目的,本发明采用了以下技术方案:一种随动视觉系统光轴与转轴偏差标定及外参校正方法,该方法包括下列顺序的步骤:
(1)在世界坐标系Ow-XwYwZw下建立旋转前相机光心位置Oc的数学表达式,根据等效性在旋转前相机坐标系下建立旋转后相机光心位置Oc′的数学表达式;
(3)根据所述偏差参量和作为已知量的转台转角,建立所述旋转前相机光心位置Oc与所述旋转后相机光心位置Oc′之间的关系;
(4)根据轴角旋转模型和罗德里格斯公式,建立相机坐标系旋转前后之间的相对旋转矩阵;
(5)利用转台相对于该转轴进行多组等间隔转动,在等间隔转动的间隙利用双目立体视觉系统标定出旋转前后相机的相对位姿,构造第一超定线性方程组,执行最小二乘求解,得到偏差参量的单位方向向量构造第二超定线性方程组,执行最小二乘求解,得到相对于相机光心的旋转中心O对应的坐标向量
(6)利用欧氏空间中变换矩阵形式及相应的链式变换原理,将所述最小二乘求解所得偏差参量估计值代入变换关系式,执行任意转台转角下相机外参的校正。
在步骤(1)中,旋转前相机光心在世界坐标系下的位置Oc和旋转后相机光心在旋转前相机坐标系下的位置Oc′分别通过如下等式确定:
利用旋转矩阵的单位正交性,转变式(2)的形式为:
由向量关系:得:
由向量关系得:
在步骤(3)中,旋转中心O建立旋转前相机光心位置Oc与旋转后相机光心位置Oc′之间的关系:
在步骤(4)中,通过罗德里格斯公式直接得出相机坐标系在旋转前后的相对旋转矩阵:
其中,Rc′c表示旋转后相机相对于旋转前相机坐标系的旋转矩阵,θ表示转台转过的角度,I表示单位矩阵。
在步骤(5)中,所述多组等间隔转动的组数大于等于四组,转动角度间隔大于等于5°,且设置转动的组数与等间隔转动角度的组合保证双目立体视觉系统的公共视场大于等于静止相机视场的1/9。
在步骤(5)中,所述第一超定线性方程组按如下方式构造:
第一超定线性方程组的矩阵形式:
式中,
所述第二超定线性方程组按如下方式构造:
第二超定线性方程组的矩阵形式:
式中,
在步骤(6)中,按如下方式校正任意转角θ下的相机外参:
设Tcw,Tc′w分别表示相机转动前后相对于世界坐标系的变换矩阵,Tc′c表示相机转动后相对于相机转动前坐标系的变换矩阵,应用链式变换关系
Tc′w=Tc′cTcw (9)
式中,
由上述技术方案可知,本发明的有益效果为:第一,本发明严格推导了转台视觉系统中由于制造或安装误差造成的不可避免的轴系偏差模型,消除了根据转角校正相机外参过程中的系统误差,且可以很方便的将在一维上的模型和分析拓展到二维乃至三维。第二,本发明提供了一种参考的基于双目立体视觉对转台视觉系统轴系偏差模型进行标定的方法,具有标定过程快速、简单,标定结果精度高等特点。
附图说明
图1为本发明关于转台视觉系统中转台和相机轴系偏差的模型图;
图2为本发明的轴系偏差标定的示意图;
图3为本发明的方法流程图。
具体实施方式
如图1、3所示,一种随动视觉系统光轴与转轴偏差标定及外参校正方法,该方法包括下列顺序的步骤:
(1)在世界坐标系Ow-XwYwZw下建立旋转前相机光心位置Oc的数学表达式,根据等效性在旋转前相机坐标系下建立旋转后相机光心位置Oc的数学表达式;
(3)根据所述偏差参量和作为已知量的转台转角,建立所述旋转前相机光心位置Oc与所述旋转后相机光心位置Oc′之间的关系;
(4)根据轴角旋转模型和罗德里格斯公式,建立相机坐标系旋转前后之间的相对旋转矩阵;
(5)利用转台相对于该转轴进行多组等间隔转动,在等间隔转动的间隙利用双目立体视觉系统标定出旋转前后相机的相对位姿,构造第一超定线性方程组,执行最小二乘求解,得到偏差参量的单位方向向量构造第二超定线性方程组,执行最小二乘求解,得到相对于相机光心的旋转中心O对应的坐标向量
(6)利用欧氏空间中变换矩阵形式及相应的链式变换原理,将所述最小二乘求解所得偏差参量估计值代入变换关系式,执行任意转台转角下相机外参的校正。
在步骤(1)中,旋转前相机光心在世界坐标系下的位置Oc和旋转后相机光心在旋转前相机坐标系下的位置Oc′分别通过如下等式确定:
利用旋转矩阵的单位正交性,转变式(2)的形式为:
由向量关系:得:
由向量关系得:
在步骤(3)中,旋转中心O建立旋转前相机光心位置Oc与旋转后相机光心位置Oc′之间的关系:
在步骤(4)中,通过罗德里格斯公式直接得出相机坐标系在旋转前后的相对旋转矩阵:
其中,Rc′c表示旋转后相机相对于旋转前相机坐标系的旋转矩阵,θ表示转台转过的角度,I表示单位矩阵。
在步骤(5)中,所述多组等间隔转动的组数大于等于四组,转动角度间隔大于等于5°,且设置转动的组数与等间隔转动角度的组合保证双目立体视觉系统的公共视场大于等于静止相机视场的1/9。
在步骤(5)中,所述第一超定线性方程组按如下方式构造:
第一超定线性方程组的矩阵形式:
式中,
所述第二超定线性方程组按如下方式构造:
第二超定线性方程组的矩阵形式:
式中,
在步骤(6)中,按如下方式校正任意转角θ下的相机外参:
设Tcw,Tc′w分别表示相机转动前后相对于世界坐标系的变换矩阵,Tc′c表示相机转动后相对于相机转动前坐标系的变换矩阵,应用链式变换关系
Tc′w=Tc′cTcw (9)
式中,
如图2所示,静止相机1固定于三脚架2上,并在标定过程中保持静止。转动相机5固定于电控二维转台6上并随电控二维转台6一起绕其中一旋转轴旋转。设置多组等间隔转动并在转动间隙执行所述两相机之间的双目外参标定程序,在每一组的外参标定过程间移动棋盘格4,使之位于两相机的公共视场3中,并保证该公共视场始终不小于静止相机视场的1/9。
综上所述,本发明严格推导了转台视觉系统中由于制造或安装误差造成的不可避免的轴系偏差模型,消除了根据转角校正相机外参过程中的系统误差,且可以很方便的将在一维上的模型和分析拓展到二维乃至三维。本发明提供了一种参考的基于双目立体视觉对转台视觉系统轴系偏差模型进行标定的方法,具有标定过程快速、简单,标定结果精度高等特点。
Claims (6)
1.一种随动视觉系统光轴与转轴偏差标定及外参校正方法,其特征在于:该方法包括下列顺序的步骤:
(1)在世界坐标系Ow-XwYwZw下建立旋转前相机光心位置Oc的数学表达式,根据等效性在旋转前相机坐标系下建立旋转后相机光心位置Oc′的数学表达式;
(3)根据所述偏差参量和作为已知量的转台转角,建立所述旋转前相机光心位置Oc与所述旋转后相机光心位置Oc′之间的关系;
(4)根据轴角旋转模型和罗德里格斯公式,建立相机坐标系旋转前后之间的相对旋转矩阵;
(5)利用转台相对于该转轴进行多组等间隔转动,在等间隔转动的间隙利用双目立体视觉系统标定出旋转前后相机的相对位姿,构造第一超定线性方程组,执行最小二乘求解,得到偏差参量的单位方向向量构造第二超定线性方程组,执行最小二乘求解,得到相对于相机光心的旋转中心O对应的坐标向量
在步骤(5)中,所述第一超定线性方程组按如下方式构造:
第一超定线性方程组的矩阵形式:
式中,
在步骤(5)中,所述第二超定线性方程组按如下方式构造:
第二超定线性方程组的矩阵形式:
式中,
(6)利用欧氏空间中变换矩阵形式及相应的链式变换原理,将所述最小二乘求解所得偏差参量估计值代入变换关系式,执行任意转台转角下相机外参的校正;
在步骤(6)中,按如下方式校正任意转角θ下的相机外参:
设Tcw,Tc′w分别表示相机转动前后相对于世界坐标系的变换矩阵,Tc′c表示相机转动后相对于相机转动前坐标系的变换矩阵,应用链式变换关系
Tc′w=Tc′cTcw (9)
式中,
6.根据权利要求1所述的随动视觉系统光轴与转轴偏差标定及外参校正方法,其特征在于:在步骤(5)中,所述多组等间隔转动的组数大于等于四组,转动角度间隔大于等于5°,且设置转动的组数与等间隔转动角度的组合保证双目立体视觉系统的公共视场大于等于静止相机视场的1/9。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010851529.XA CN112053405B (zh) | 2020-08-21 | 2020-08-21 | 一种随动视觉系统光轴与转轴偏差标定及外参校正方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010851529.XA CN112053405B (zh) | 2020-08-21 | 2020-08-21 | 一种随动视觉系统光轴与转轴偏差标定及外参校正方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112053405A CN112053405A (zh) | 2020-12-08 |
CN112053405B true CN112053405B (zh) | 2022-09-13 |
Family
ID=73600968
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010851529.XA Active CN112053405B (zh) | 2020-08-21 | 2020-08-21 | 一种随动视觉系统光轴与转轴偏差标定及外参校正方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112053405B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113124763B (zh) * | 2021-04-22 | 2022-05-24 | 奥比中光科技集团股份有限公司 | 光轴检测系统的光轴标定方法、装置、终端、系统和介质 |
CN113379848A (zh) * | 2021-06-09 | 2021-09-10 | 中国人民解放军陆军军事交通学院军事交通运输研究所 | 基于双目ptz相机的目标定位方法 |
CN113538598B (zh) * | 2021-07-21 | 2022-03-25 | 北京能创科技有限公司 | 主动立体视觉系统标定方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106441094A (zh) * | 2016-09-10 | 2017-02-22 | 上海大学 | 自适应标定的视觉在线检测装置和方法 |
JP2017116280A (ja) * | 2015-12-21 | 2017-06-29 | 公立大学法人大阪市立大学 | カメラ較正システム、カメラ較正プログラム、及びカメラ較正方法 |
CN107655412A (zh) * | 2017-08-30 | 2018-02-02 | 合肥工业大学 | 一种具有自标定功能的球杆长度标定装置及使用方法 |
CN109029433A (zh) * | 2018-06-28 | 2018-12-18 | 东南大学 | 一种移动平台上基于视觉和惯导融合slam的标定外参和时序的方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6694281B2 (ja) * | 2016-01-26 | 2020-05-13 | 株式会社日立製作所 | ステレオカメラおよび撮像システム |
-
2020
- 2020-08-21 CN CN202010851529.XA patent/CN112053405B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017116280A (ja) * | 2015-12-21 | 2017-06-29 | 公立大学法人大阪市立大学 | カメラ較正システム、カメラ較正プログラム、及びカメラ較正方法 |
CN106441094A (zh) * | 2016-09-10 | 2017-02-22 | 上海大学 | 自适应标定的视觉在线检测装置和方法 |
CN107655412A (zh) * | 2017-08-30 | 2018-02-02 | 合肥工业大学 | 一种具有自标定功能的球杆长度标定装置及使用方法 |
CN109029433A (zh) * | 2018-06-28 | 2018-12-18 | 东南大学 | 一种移动平台上基于视觉和惯导融合slam的标定外参和时序的方法 |
Non-Patent Citations (4)
Title |
---|
A dynamic volume measurement system with structured light vision;Jiangyun Li et.al;《2016 31st Youth Academic Annual Conference of Chinese Association of Automation (YAC)》;20170105;第251-255页 * |
Autonomous active calibration of a dynamic camera cluster using next-best-view;Jason Rebello et.al;《2017 IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS)》;20171214;第1484-1489页 * |
二维旋转平台下的相机参数标定;顾国华等;《光学精密工程》;20170715(第07期);第207-216页 * |
基于自稳云台的实时目标跟踪系统的研究与实现;徐成禄;《中国优秀硕士学位论文全文数据库 信息科技辑》;20181215;第I138-885页 * |
Also Published As
Publication number | Publication date |
---|---|
CN112053405A (zh) | 2020-12-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112053405B (zh) | 一种随动视觉系统光轴与转轴偏差标定及外参校正方法 | |
CN110296691B (zh) | 融合imu标定的双目立体视觉测量方法与系统 | |
CN110728715B (zh) | 一种智能巡检机器人摄像机角度自适应调整方法 | |
CN105716542B (zh) | 一种基于柔性特征点的三维数据拼接方法 | |
US10290119B2 (en) | Multi view camera registration | |
CN106204574B (zh) | 基于目标平面运动特征的相机位姿自标定方法 | |
CN108648237A (zh) | 一种基于视觉的空间定位方法 | |
Zhang et al. | A universal and flexible theodolite-camera system for making accurate measurements over large volumes | |
CN109297436B (zh) | 双目线激光立体测量基准标定方法 | |
CN109272574B (zh) | 基于投影变换的线阵旋转扫描相机成像模型构建方法和标定方法 | |
CN111896221B (zh) | 虚拟坐标系辅助摄像机标定的旋转光学测量系统对准方法 | |
CN110987021B (zh) | 一种基于转台基准的惯性视觉相对姿态标定方法 | |
CN111415391A (zh) | 一种采用互拍法的多目相机外部方位参数标定方法 | |
CN112598706B (zh) | 无需精确时空同步的多相机运动目标三维轨迹重建方法 | |
CN113724337B (zh) | 一种无需依赖云台角度的相机动态外参标定方法及装置 | |
CN113205603A (zh) | 一种基于旋转台的三维点云拼接重建方法 | |
CN107038753B (zh) | 立体视觉三维重建系统及方法 | |
CN112150561A (zh) | 一种多相机标定方法 | |
CN114001651B (zh) | 一种基于双目视觉测量和先验检测数据的大型细长筒类构件位姿原位测量方法 | |
CN111915681B (zh) | 多组3d相机群的外参标定方法、装置、存储介质及设备 | |
CN112857328B (zh) | 一种无标定摄影测量方法 | |
CN108898550B (zh) | 基于空间三角面片拟合的图像拼接方法 | |
CN108257184B (zh) | 一种基于正方形点阵合作目标的相机姿态测量方法 | |
CN111652945A (zh) | 一种相机标定方法 | |
Wang et al. | Estimation of extrinsic parameters for dynamic binocular stereo vision using unknown-sized rectangle images |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |