CN102622744A - 一种基于多项式投影模型的长焦相机标定方法 - Google Patents
一种基于多项式投影模型的长焦相机标定方法 Download PDFInfo
- Publication number
- CN102622744A CN102622744A CN2012100135762A CN201210013576A CN102622744A CN 102622744 A CN102622744 A CN 102622744A CN 2012100135762 A CN2012100135762 A CN 2012100135762A CN 201210013576 A CN201210013576 A CN 201210013576A CN 102622744 A CN102622744 A CN 102622744A
- Authority
- CN
- China
- Prior art keywords
- projection
- image
- coordinate system
- point
- model
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Studio Devices (AREA)
Abstract
本发明公开了一种基于多项式投影模型的长焦相机标定方法。现有的方法多采用正交投影模型,对焦距参数限定较大,可适用范围窄。本发明采用一种新的投影模型来描述长焦相机的投影过程,将图像上的点转化到球面上,根据直线在球面上的投影性质进行内参优化。通过球面上点和标定板上点的投影关系,求出外参,最终对内参和外参进行联合优化。本发明对于不同焦距的长焦镜头具有普遍适用性,兼具抗干扰性强、实验设备简单、精度较高、灵活性较强的特点。
Description
技术领域
本发明涉及计算机视觉领域中长焦相机的参数标定方法,具体来说是根据多幅拍摄的标定板图像进行长焦镜头相机内参和外参求取的方法。
背景技术
长焦相机通常用于摄影测量领域,其主要特点是关注特定物体,对远处景物细节有放大功能。
长焦相机相对于普通相机有以下几个特点:
1)景深浅。由于长焦镜头关注的是远处景物的细节,所以只在有限范围内有清晰的成相;
2)视角小。比较窄的视角是由长焦距决定的,这样在有效的成相范围内,细节可以更加突出;
3)透视效果差。因为长焦相机存在将远处物体放大拉近的视觉效果,压缩了空间纵深距离,所以不满足透视。
基于长焦相机的这些特性,文献1(Stamatopoulos, C. “Orientation and calibration of long focal length cameras in digital close-range photogrammetry”. PhD thesis, Engineering - Geomatics, The University of Melbourne.2011)和文献2(Tetsu ONO, Shin-ichi AKAMATSU and Susumu HATTORI,”A Long Range Photogrammetric Method With Orthogonal Projection Model”,International Archives of Photgrammetry Remote Sensing and Spatial Information Science, volume 35, p1010-1015,2004)等利用正交投影模型描述长焦相机的成像来进行标定和测量。但是,该模型忽略了景物光轴方向的纵向深度,仅仅局限于视场很窄(<10o)的镜头,并不适用于不同焦距长度(焦距>50mm)的长焦相机。
实际上,长焦镜头的真实成像模型更近似于依据不同的焦距在近似透视和近似正交投影之间变化。根据文献3(D. Scaramuzza, A. Martinelli, and R. Siegwart, “A flexible technique for accurate omnidirectional camera calibration and structure from motion,”Proceedings of IEEE International Conference on Computer Vision Systems, 2006.)的分析,镜头的成像都可以用泰勒展开的多项式模型近似。分析发现,这一特性同样适用于长焦镜头。因此,为了更好地适用于不同的长焦相机,我们采用了灵活性较强的多项式投影模型来描述投影过程。
发明内容
针对现有标定方法的不足,针对长焦相机的特点,本发明的目的在于提供一种多项式的投影模型,用于描述长焦相机的成相,而不拘泥于相机的其他参数。本发明采用的技术方案的步骤如下:
一种基于多项式投影模型的长焦相机标定方法,该方法包括以下步骤:
(1)使用长焦相机拍摄一组棋盘格标定板图像,图像个数记为m,其中标定板格子的尺寸已知。以标定板为世界坐标系的 平面,依据标定板建立世界坐标系,已知标定板上方向直线个数为,方向直线个数为。则标定板上所有角点的世界坐标系坐标为:
利用三维空间直线投影在球面上为一个大圆的性质,对内参进行优化。
(5)利用多幅图像中图像点的重投影误差,对内参和每幅图像的外参进行全局优化。
本发明具有的有益效果是:本发明提出一种长焦相机的标定方法,针对长焦相机的特性,提出了基于多项式投影模型的标定方法。该算法兼顾了抗噪性能、操作复杂度要求低,不需要对环境做特殊的设置,且适合于不同参数的长焦相机标定。
附图说明
图1是本发明的总体流程图;
图2是相机成像系统不同坐标系关系示意图。
具体实施方式
下面结合附图和具体实施方式对本发明做进一步的描述。
图1给出了长焦相机标定方法的技术流程。该流程包括内参和外参的标定。
长焦相机标定包括以下五个部分:获取多幅成像清晰的棋盘格标定板图像;Harris角点提取:在每幅图像上标记标定板上所有角点位置,利用Harris角点提取方法,自动提取角点,得到图像上的对应点集; 内参计算:利用透视模型的内参计算方法得到焦距,图像中心和投影模型系数的初始结果,然后依据直线在球面上的投影特性对内参进行优化;外参计算:利用图像坐标系下点和世界坐标系下点之间的单应性矩阵得到的初始值,然后依据在球面上的投影误差进行优化;多幅图像全局优化:利用多幅图像中所有图像点的重投影误差,对所有的待标定参数进行全局优化。
1、拍摄多幅清晰的标定板图像。
使用长焦相机拍摄一组棋盘格标定板图像,格子的尺寸已知,要求图像上板子上的每个角点都清晰可见。以标定板为世界坐标系的平面,水平直线方向为正方向,竖直直线方向为正方向,由此建立世界坐标系。已知标定板上方向直线个数为,方向直线个数为,则标定板上所有角点的世界坐标系坐标为:
(1)
2、Harris角点提取。
(2)
Harris角点提取的具体方法参考文献4(J.Shi and C.Tomasi.”Good Feature to track”,Proc.IEEE Computer Society Conf. on Computer Vision and Pattern Recognition,pp.593-600,1994)。
3、内参计算。
如图2所示,长焦相机的从世界坐标系下的点到图像平面上像素坐标下的点的投影过程描述如下:
4)经过最后的仿射变换转化到像素坐标系下的。
(3)
针对长焦相机的特性,采用多项式的形式来表示其投影模型:
和之间存在的单应性矩阵,为外参和内参的耦合结果。为了得到内参的初始估计值,假设相机模型为透视模型。在透视模型下,,的估计值可以通过文献5(Z. Zhang, “A flexible new technique for camera calibration,” PAMI,vol. 22, no. 11, pp. 1330–1334, 2000.)中分解单应性矩阵的方法得到。
(8)
已知,球面上大圆的法向量可以通过对大圆上的点进行svd分解求得:
每个球面角点都分别属于一个水平方向和竖直方向的大圆,所以每个球面点到对应大圆的距离定义为:
4、外参计算。
5、多幅图像全局优化。
(14)
至此为止,长焦相机投影过程中相关的所有参数标定完毕。
Claims (4)
1.一种基于多项式投影模型的长焦相机标定方法,其特征在于该方法包括以下步骤:
步骤(1)使用长焦相机拍摄一组棋盘格标定板图像,图像个数记为m,其中标定板格子的尺寸已知;以标定板为世界坐标系的 平面,依据标定板建立世界坐标系,已知标定板上方向直线个数为,方向直线个数为;则标定板上所有角点的世界坐标系坐标为:
步骤(2)在图像上标记标定板上所有角点位置,根据Harris角点提取方法在一定的搜索窗口范围内对所有的角点进行精确定位,得到对应像素坐标系下的点集坐标,
利用三维空间直线投影在球面上为一个大圆的性质,对内参进行优化;
步骤(5)利用多幅图像中图像点的重投影误差,对内参和每幅图像的外参进行全局优化。
2.根据权利要求1所述的一种基于多项式投影模型的长焦相机标定方法,其特征在于:所述的步骤(3)计算内参的具体方法为:
设标定板为世界坐标系下平面,则世界坐标系下由标定板构成的点集和图像平面上像素坐标系下间存在单应性矩阵,为外参和内参的耦合结果;假设初始的投影模型为透视模型,可以依据现有的成熟方法通过分解得到,;通过,,得到对应的图像坐标系下的点坐标;
针对长焦相机,采用多项式投影模型,表示为:
为点和x轴之间的夹角,为对应的入射角;由此,可以得到反投影对应的坐标;根据空间中直线在球面上投影为一个大圆的特性,标定板上水平方向的条直线对应在球面上有个大圆,竖直方向上对应有个大圆;水平方向上大圆的法向量标记为,竖直方向上大圆的法向量标记为
已知,法向量可以通过对同一大圆上的点进行svd分解求得:
每个球面角点都分别属于一个水平方向和竖直方向的大圆,所以每个球面点到对应两个大圆的距离定义为:
。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012100135762A CN102622744A (zh) | 2012-01-17 | 2012-01-17 | 一种基于多项式投影模型的长焦相机标定方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012100135762A CN102622744A (zh) | 2012-01-17 | 2012-01-17 | 一种基于多项式投影模型的长焦相机标定方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102622744A true CN102622744A (zh) | 2012-08-01 |
Family
ID=46562647
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2012100135762A Pending CN102622744A (zh) | 2012-01-17 | 2012-01-17 | 一种基于多项式投影模型的长焦相机标定方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102622744A (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108288294A (zh) * | 2018-01-17 | 2018-07-17 | 视缘(上海)智能科技有限公司 | 一种3d相机群的外参标定方法 |
CN108447095A (zh) * | 2018-01-31 | 2018-08-24 | 潍坊歌尔电子有限公司 | 一种鱼眼相机标定方法和装置 |
WO2018196391A1 (zh) * | 2017-04-28 | 2018-11-01 | 华为技术有限公司 | 一种车载摄像机的外部参数标定方法及装置 |
CN109003308A (zh) * | 2018-06-27 | 2018-12-14 | 浙江大学 | 一种基于相位编码的特殊成像范围相机标定系统及方法 |
CN109615661A (zh) * | 2017-12-05 | 2019-04-12 | 西北工业大学 | 光场相机内参数标定装置及方法 |
CN109685851A (zh) * | 2018-10-08 | 2019-04-26 | 上海肇观电子科技有限公司 | 行走机器人的手眼标定方法、系统、设备及存储介质 |
CN111156997A (zh) * | 2020-03-02 | 2020-05-15 | 南京航空航天大学 | 一种基于相机内参在线标定的视觉/惯性组合导航方法 |
CN112070846A (zh) * | 2020-09-14 | 2020-12-11 | 北京华严互娱科技有限公司 | 基于视频的实时人体动作跟踪方法和系统 |
CN113012239A (zh) * | 2021-04-12 | 2021-06-22 | 山西省交通科技研发有限公司 | 一种车路协同路侧感知相机的焦距变化定量计算方法 |
CN113658264A (zh) * | 2021-07-12 | 2021-11-16 | 华南理工大学 | 基于距离信息的单幅图像相机焦距估计方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020186897A1 (en) * | 2001-04-02 | 2002-12-12 | Korea Advanced Institute Of Science And Technology | Camera calibration system using planar concentric circles and method thereof |
CN102037735A (zh) * | 2008-05-22 | 2011-04-27 | 通用汽车环球科技运作公司 | 用于车辆照相机的照相机外在参数的自标定 |
-
2012
- 2012-01-17 CN CN2012100135762A patent/CN102622744A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020186897A1 (en) * | 2001-04-02 | 2002-12-12 | Korea Advanced Institute Of Science And Technology | Camera calibration system using planar concentric circles and method thereof |
CN102037735A (zh) * | 2008-05-22 | 2011-04-27 | 通用汽车环球科技运作公司 | 用于车辆照相机的照相机外在参数的自标定 |
Non-Patent Citations (2)
Title |
---|
JUHO KANNALA ET AL.: "A Generic Camera Model and Calibration Method for Conventional, Wide-Angle, and Fish-Eye Lenses", 《IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE》, vol. 28, no. 8, 31 August 2006 (2006-08-31), pages 1335 - 1340 * |
谭晓波: "摄像机标定及相关技术研究", 《中国优秀硕士学位论文全文数据库》, 16 March 2006 (2006-03-16), pages 11 - 53 * |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018196391A1 (zh) * | 2017-04-28 | 2018-11-01 | 华为技术有限公司 | 一种车载摄像机的外部参数标定方法及装置 |
CN108805934A (zh) * | 2017-04-28 | 2018-11-13 | 华为技术有限公司 | 一种车载摄像机的外部参数标定方法及装置 |
CN108805934B (zh) * | 2017-04-28 | 2021-12-28 | 华为技术有限公司 | 一种车载摄像机的外部参数标定方法及装置 |
CN109615661A (zh) * | 2017-12-05 | 2019-04-12 | 西北工业大学 | 光场相机内参数标定装置及方法 |
CN108288294A (zh) * | 2018-01-17 | 2018-07-17 | 视缘(上海)智能科技有限公司 | 一种3d相机群的外参标定方法 |
CN108447095A (zh) * | 2018-01-31 | 2018-08-24 | 潍坊歌尔电子有限公司 | 一种鱼眼相机标定方法和装置 |
CN109003308A (zh) * | 2018-06-27 | 2018-12-14 | 浙江大学 | 一种基于相位编码的特殊成像范围相机标定系统及方法 |
CN109685851B (zh) * | 2018-10-08 | 2021-02-12 | 上海肇观电子科技有限公司 | 行走机器人的手眼标定方法、系统、设备及存储介质 |
CN109685851A (zh) * | 2018-10-08 | 2019-04-26 | 上海肇观电子科技有限公司 | 行走机器人的手眼标定方法、系统、设备及存储介质 |
CN111156997B (zh) * | 2020-03-02 | 2021-11-30 | 南京航空航天大学 | 一种基于相机内参在线标定的视觉/惯性组合导航方法 |
CN111156997A (zh) * | 2020-03-02 | 2020-05-15 | 南京航空航天大学 | 一种基于相机内参在线标定的视觉/惯性组合导航方法 |
CN112070846A (zh) * | 2020-09-14 | 2020-12-11 | 北京华严互娱科技有限公司 | 基于视频的实时人体动作跟踪方法和系统 |
CN113012239A (zh) * | 2021-04-12 | 2021-06-22 | 山西省交通科技研发有限公司 | 一种车路协同路侧感知相机的焦距变化定量计算方法 |
CN113012239B (zh) * | 2021-04-12 | 2023-03-14 | 山西省交通科技研发有限公司 | 一种车路协同路侧感知相机的焦距变化定量计算方法 |
CN113658264A (zh) * | 2021-07-12 | 2021-11-16 | 华南理工大学 | 基于距离信息的单幅图像相机焦距估计方法 |
CN113658264B (zh) * | 2021-07-12 | 2023-08-18 | 华南理工大学 | 基于距离信息的单幅图像相机焦距估计方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102622744A (zh) | 一种基于多项式投影模型的长焦相机标定方法 | |
CN105758426B (zh) | 移动机器人的多传感器的联合标定方法 | |
CN111750820B (zh) | 影像定位方法及其系统 | |
CN103247075B (zh) | 基于变分机制的室内环境三维重建方法 | |
Chatterjee et al. | Algorithms for coplanar camera calibration | |
US11216979B2 (en) | Dual model for fisheye lens distortion and an algorithm for calibrating model parameters | |
CN101887585B (zh) | 基于非共面特征点的摄像机标定方法 | |
CN102072706B (zh) | 一种多相机定位与跟踪方法及系统 | |
CN108629829B (zh) | 一种球幕相机与深度相机结合的三维建模方法和系统 | |
CN110008779B (zh) | 一种立体二维码处理方法及装置 | |
CN104318604A (zh) | 一种3d图像拼接方法及装置 | |
CN103268610A (zh) | 一种折反射全向相机的统一模型及其标定方法 | |
Jia et al. | Scene depth perception based on omnidirectional structured light | |
Xu et al. | 3D multi-directional sensor with pyramid mirror and structured light | |
Niu et al. | Calibration method for the relative orientation between the rotation axis and a camera using constrained global optimization | |
Tang et al. | Design of vertically aligned binocular omnistereo vision sensor | |
Streckel et al. | Lens model selection for visual tracking | |
McIlroy et al. | Kinectrack: Agile 6-dof tracking using a projected dot pattern | |
Fraser et al. | Automated target-free camera calibration | |
Wang et al. | Perspective 3-D Euclidean reconstruction with varying camera parameters | |
Dupont et al. | An improved calibration technique for coupled single-row telemeter and ccd camera | |
Castanheiro et al. | Modeling Hyperhemispherical Points and Calibrating a Dual-Fish-Eye System for Close-Range Applications | |
Miyagawa et al. | Motion and shape recovery based on iterative stabilization for modest deviation from planar motion | |
Boutteau et al. | Circular laser/camera-based attitude and altitude estimation: minimal and robust solutions | |
Groom et al. | On Depth Error from Spherical Camera Calibration within Omnidirectional Stereo Vision |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20120801 |