CN106408556A - 一种基于一般成像模型的微小物体测量系统标定方法 - Google Patents
一种基于一般成像模型的微小物体测量系统标定方法 Download PDFInfo
- Publication number
- CN106408556A CN106408556A CN201610345809.7A CN201610345809A CN106408556A CN 106408556 A CN106408556 A CN 106408556A CN 201610345809 A CN201610345809 A CN 201610345809A CN 106408556 A CN106408556 A CN 106408556A
- Authority
- CN
- China
- Prior art keywords
- calibration plate
- coordinate system
- calibration
- pixel
- coordinates
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 67
- 238000003384 imaging method Methods 0.000 title claims abstract description 35
- 238000005259 measurement Methods 0.000 title claims abstract description 21
- 239000011159 matrix material Substances 0.000 claims description 69
- 230000036544 posture Effects 0.000 claims description 60
- 238000013519 translation Methods 0.000 claims description 35
- 238000005457 optimization Methods 0.000 claims description 9
- 238000012897 Levenberg–Marquardt algorithm Methods 0.000 claims description 7
- 230000010363 phase shift Effects 0.000 claims description 7
- 238000004364 calculation method Methods 0.000 claims description 6
- 238000004422 calculation algorithm Methods 0.000 claims description 3
- 238000006073 displacement reaction Methods 0.000 abstract description 5
- 238000010586 diagram Methods 0.000 description 7
- 230000008569 process Effects 0.000 description 6
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Landscapes
- Length Measuring Devices By Optical Means (AREA)
Abstract
本发明公开了一种基于一般成像模型的微小物体测量系统标定方法,以标定板平面建立平面坐标系,用相机获取三幅不同姿态的标定板图像进行去模糊处理并通过椭圆拟合获取圆心的像素坐标。(3)利用一般成像模型找到相机获取的图像上每个像素在世界坐标系上对应的光线方程。(4)通过八步相移法和格雷码的方法得到标定板的相位,根据相位将相机获取的圆心坐标匹配到投影仪圆心坐标,并用(3)相同的方法找到每个像素对应的到投影仪的光线方程。(5)根据每个像素点分别在相机和投影仪下找到的光线求得交点即可获取物体的三维坐标。本发明对一般成像模型进行改进,并且使设备尽量简单、易于实现,同时又摆脱了依靠位移台获取精密位移距离的限制。
Description
技术领域
本发明涉及一种基于一般成像模型的微小物体测量系统标定方法,属于机器视觉中三维信息重构的领域。
背景技术
随着微纳米技术的发展,人们日常生活中的各种产品都在向着轻便的方向发展,这使得产品体积越来越小,微小物体的测量变得愈来愈重要,影响着工业技术的发展。
对于小物体的光栅投影测量,要求视场和景深小,所以传统的针孔摄像机不能准确获得三维物体的高度变化。相较于传统的显微镜,远心镜头又具有高分辨率、几乎零失真、增加自由度和恒定的放大率等无可比拟的优势。与针孔相机的透视投影不同,带有远心镜头的相机实现的是仿射投影。所以已有的很多针孔相机的标定方法都不能用来标定仿射相机。
一般成像模型是一种灵活的可以应用于多种相机设备的方法,但是一般成像模型参数多,计算过程繁琐,有方法对其简化但是又需要依靠精密位移台,增加成本的同时也增加了设备带来的误差。
发明内容
发明目的:针对利用一般成像模型标定远心镜头计算参数多、过程繁琐问题,本发明提供一种基于一般成像模型的微小物体测量系统标定方法,该方法利用标定板在某一方向上转动的不同姿态来简化标定参数,并通过LM非线性优化来提高标定的参数。同时提出自卷积盲去模糊的方法解决远心镜头景深小带来的离焦问题。
技术方案:为实现上述目的,本发明采用的技术方案为:
一种基于一般成像模型的微小物体测量系统标定方法,包括以下步骤:
步骤1:根据三角法固定带有远心镜头的摄像机和投影仪,在它们公共的工作距离内摆放一个圆形阵列的标定板,利用投影仪在标定板表面投射光栅条纹。同时对于摄像机的成像平面,建立以像素点为单位的图像坐标系u-v,坐标系的原点位于图像的左下角,横、纵像素轴分别为u轴和v轴。
步骤2:用摄像机拍摄某一姿态下的标定板图像及被标定板调制过的光栅图。记为第一幅标定板图像和第一组标定板光栅图。以标定板的左上角为坐标原点,标定板的水平线为X轴,竖直线为Y轴,垂直于XY平面的直线为Z轴,建立标定板平面坐标系XYZ,该坐标系为第一个标定板坐标系;通过一个简易的可升降旋转台控制标定板绕其平面坐标系Y轴转动,并在X轴、Y轴、Z轴方向上任意移动,然后用摄像机分别获取两幅不同姿态的标定板图像和对应的光栅图。分别记为第二、第三幅标定板图像和第二、第三组标定板光栅图。同时根据这两幅不同姿态的标定板和第一标定板坐标系的建立方法分别建立对应姿态的标定板坐标系,分别为第二、第三个标定板坐标系。
步骤3:采用自卷积的算法对步骤2获取的第一、第二、第三幅标定板图像进行去模糊处理,并对去模糊处理后的图像进行椭圆拟合获取三个姿态下标定板圆心的像素坐标。
步骤4:通过步骤3从摄像机获取的标定板二维图片中定位出三个姿态下标定板上圆心坐标。对步骤2中获取的第一、第二、第三组标定板光栅图采用八步相移法和格雷码的方法得到三个姿态下标定板上圆心坐标对应的标定板的相位。根据得到的标定板的相位将三个姿态下标定板上圆心坐标匹配到各个姿态下的投影仪圆心像素坐标。
步骤5:将第一、第二、第三个标定板坐标系中的任一一个坐标系作为世界坐标系。根据步骤3获取的三个姿态下标定板圆心的像素坐标利用一般成像模型找到相机获取的标定板图像上每个像素点在世界坐标系上对应的光线方程,即像素点在相机下的光线方程。根据步骤4获取的三个姿态下的投影仪圆心像素坐标利用一般成像模型找到投影仪对应的标定板图像上每个像素点在世界坐标系上对应的光线方程,即像素点在投影仪下的光线方程。
步骤6:根据步骤5得到的像素点在相机下的光线方程和像素点在投影仪下的光线方程求得交点,该交点即为物体的三维坐标。
所述步骤5中像素点在相机下的光线方程的求取方法:
步骤5.1:根据标定板圆心在对应的标定板坐标系下的坐标以及步骤3得到的标定板圆心的像素坐标获取三幅不同姿态下标定板图像的单应性矩阵。选取标定板图像上固定的像素坐标mc根据单应性矩阵得到同一像素点在三个姿态下相应的标定板坐标系下的坐标,记为Q1、Q2、Q3,Q1为像素坐标mc根据单应性矩阵得到同一像素点在第一个标定板坐标系的坐标,Q2为像素坐标mc根据单应性矩阵得到同一像素点在第二个标 定板坐标系的坐标,Q3为像素坐标mc根据单应性矩阵得到同一像素点在第二个标定板坐标系的坐标。
步骤5.2:将第一个标定板坐标系作为世界坐标系,根据同一像素点在世界坐标系下对应坐标的共线性以及旋转矩阵是单位正交阵的特性求得第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵和第三个标定板坐标系到第一个标定板坐标系的旋转平移矩阵。
步骤5.3:根据步骤5.2求得的第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵将Q2转化到世界坐标系下记为Qw2。根据步骤5.2求得的第三个标定板坐标系到第一个标定板坐标系的旋转平移矩阵将Q3转化到世界坐标系下记为Qw3。第一标定板坐标系下的坐标Q1直接记为Qw1。进而求得世界坐标系上的三点Qw1,Qw2,Qw3。
步骤5.4:根据步骤5.3求得的世界坐标系上的三点Qw1,Qw2,Qw3的坐标通过直线拟合获取像素点mc对应的射线lc,该射线lc即为像素点在相机下的光线方程。
所述步骤5.1中通过以下公式获取三幅不同姿态下标定板图像的单应性矩阵:
其中,(mu,mv,1)为圆心的像素坐标的齐次坐标,为像素坐标在第i个平面坐标上对应的齐次坐标。Hi为第i幅标定板图像的单应性矩阵。
对步骤5.2中求得的第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵和第三个标定板坐标系到第一个标定板坐标系的旋转平移矩阵采用Levenberg-Marquardt算法对其进行优化。
所述步骤5.2中Levenberg-Marquardt算法的优化方法:
步骤5.21,获取第一幅标定板图像任意圆心点的像素坐标根据第一幅标定板上任意圆心点的像素坐标对应的直线和Z=0平面的交点重新求得第一幅标定板图像上圆心的世界坐标
第一幅标定板图像上圆心的世界坐标公式:
直线的计算公式:
步骤5.22,根据第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵、第三个标定板坐标系到第一个标定板坐标系的旋转平移矩阵以及第一个姿态下圆心的世界坐标建立如下最小值优化模型:
其中,n为摆放标定板的姿态数,m为标定板上所取的圆心点数,pi代表第一个姿态下第i个圆心的世界坐标,表示第j个姿态下第i个圆心在相机上的像素坐标,Rj-1、Tj-1分别表示第j个姿态到第一个姿态的旋转矩阵和平移矩阵。表示第i个圆心像素点对应的拟合的光线和Z轴零平面的交点即反求得的第一个姿态下圆心的世界坐标。
步骤5.23,对步骤5.2中求得的第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵和第三个标定板坐标系到第一个标定板坐标系的旋转平移矩阵作为初始值。结合步骤5.21中第一幅标定板图像上圆心的世界坐标公式、直线的计算公式和步骤5.22中的最小值优化模型进行优化。
所述步骤6中根据步骤5得到的像素点在相机下的光线方程和像素点在投影仪下的光线方程求得交点的公式:
其中,mc表示相机上某一像素点;mp表示根据相位匹配得到的mc在投影仪上对应的像素点;lc表示像素点mc对应的光线;lp表示mc在投影仪下像素点mp对应的光线。
所述步骤4投影仪圆心像素坐标的求解方法:
从摄像机获取的标定板二维图片中定位出三个姿态下标定板上圆心坐标对步骤2中获取的第一、第二、第三组标定板光栅图采用八步相移法和格雷码的方法得到圆心坐标的垂直相位和水平相位再根据线性插值法得到投影仪上相应的点的投影仪圆心像素坐标
其中,表示投影仪上相应的点的像素坐标,即投影仪圆心像素坐标,表示从相机获取的标定板二维图片中定位出标定板上圆心坐标,表示圆心坐标在投影仪上相应的圆心坐标,Tv,Th分别是垂直和水平条纹光栅的周期数。W和H是条纹光栅图的宽和高。
有益效果:本发明提供的一种基于一般成像模型的微小物体测量系统标定方法,相比现有技术,具有以下有益效果:
本发明利用光栅投影测量进行微小物体的三维重构,基于一般成像模型提出了一种改进的标定方法,利用标定板围绕固定轴转动的不同姿态建立模型得到同一像素点在不同标定板上对应的世界坐标并进行优化从而最终获取每个像素点对应的光线。根据光栅投影得到的相位信息对投影仪进行匹配并用相同的方法标定投影仪的镜头。最后通过双目立体视觉的原理,找到每个像素点对应的世界坐标,获取最终物体的三维信息。同时,本发明利用自卷积盲去模糊的方法对相机获取的图像进行处理解决远心镜头景深小带来的离焦。因此本发明对一般成像模型进行改进,并且使设备尽量简单、易于实现,同时又摆脱了依靠位移台获取精密位移距离的限制。
附图说明
图1是发明的整个过程的流程图。
图2是标定板平面坐标系的示意图。
图3是标定板旋转台示意图。
图4是标定板三个摆放姿势的示意图。
图5是本发明所基于的一般成像模型系统示意图。
图6是盲去模糊前后效果图。
图7是相机获取的一幅相移图。
图8是钥匙的三维重构图。
具体实施方式
下面结合附图和具体实施例,进一步阐明本发明,应理解这些实例仅用于说明本发明而不用于限制本发明的范围,在阅读了本发明之后,本领域技术人员对本发明的各种等价形式的修改均落于本申请所附权利要求所限定的范围。
一种基于一般成像模型的微小物体测量系统标定方法,如图1所示,远心镜头的标定是微小物体三维测量技术中关键的一步,传统针孔模型的相机标定方法已经不能适用,为了实现对远心镜头的标定采用一般成像模型,但是由于一般成像模型存在参数过多,计算过程繁琐等问题,本发明提出了一种根据标定板在某一方向上旋转的三个姿态建立一般成像模型的方法,在windows操作系统下选用VS2015作为编程工具,对相机获取的图片进行处理最终得到微小物体的三维点云。从而简化了一般成像模型,并通过优化过程进一步提高了系统的标定精度。
具体包括以下步骤:
步骤1:对于摄像机的成像平面,建立以像素点为单位的图像坐标系u-v,坐标系的原点位于图像的左下角,横、纵像素轴分别为u轴和v轴。根据三角法固定带有远心镜头的摄像机和投影仪,在它们公共的工作距离内摆放一个圆形阵列的标定板,利用投影仪在标定板表面投射光栅条纹。
步骤2:如图2所示,以标定板的左上角为坐标原点,标定板的水平线为X轴,竖直线为Y轴,垂直于XY平面的直线为Z轴,建立标定板平面坐标系XYZ,该坐标系为第一个标定板坐标系。用摄像机拍摄此姿态下的标定板图像及被标定板调制过的光栅图。记为第一幅标定板图像和第一组标定板光栅图。
如图3所示,利用简易装置控制标定板绕平面坐标系Y轴转动,并在X轴、Y轴、Z轴方向上任意移动,然后用摄像机分别获取两幅不同姿态的标定板图像和对应的光栅图。分别记为第二、第三幅标定板图像和第二、第三组标定板光栅图。同时根据这两幅不同姿态的标定板和第一标定板坐标系的建立方法分别建立对应姿态的标定板坐标系, 分别为第二、第三个标定板坐标系。如图4所示,为标定板三个摆放姿势的示意图。
步骤3:采用自卷积的算法对步骤2获取的第一、第二、第三幅标定板图像进行去模糊处理,并对去模糊处理后的图像进行椭圆拟合获取三个姿态下标定板圆心的像素坐标。如图6所示是盲去模糊前后效果图。
步骤4:从摄像机获取的标定板二维图片中定位出三个姿态下标定板上圆心坐标。对步骤2中获取的第一、第二、第三组标定板光栅图采用八步相移法和格雷码的方法得到三个姿态下标定板上圆心坐标对应的标定板的相位。根据得到的标定板的相位将三个姿态下标定板上圆心坐标匹配到各个姿态下的投影仪圆心像素坐标。
所述步骤4投影仪圆心像素坐标的求解方法:
从摄像机获取的标定板二维图片中定位出三个姿态下标定板上圆心坐标对步骤2中获取的第一、第二、第三组标定板光栅图采用八步相移法和格雷码的方法得到圆心坐标的垂直相位和水平相位再根据线性插值法得到投影仪上相应的点的投影仪圆心像素坐标
其中,表示投影仪上相应的点的像素坐标,即投影仪圆心像素坐标,表示从相机获取的标定板二维图片中定位出标定板上圆心坐标,表示圆心坐标在投影仪上相应的圆心坐标,Tv,Th分别是垂直和水平条纹光栅的周期数。W和H是条纹光栅图的宽和高。
如图7所示,为其中一幅标定板调制过的光栅图。
步骤5:将第一、第二、第三个标定板坐标系中的任一一个坐标系作为世界坐标系。根据步骤3获取的三个姿态下标定板圆心的像素坐标利用一般成像模型找到相机获取的标定板图像上每个像素点在世界坐标系上对应的光线方程,即像素点在相机下的光线方程。根据步骤4获取的三个姿态下的投影仪圆心像素坐标利用一般成像模型找到投影仪对应的标定板图像上每个像素点在世界坐标系上对应的光线方程,即像素点在投影仪下 的光线方程。
所述步骤5中像素点在相机下的光线方程的求取方法:
步骤5.1:根据标定板圆心在对应的标定板坐标系下的坐标以及步骤3得到的标定板圆心的像素坐标根据公式1获取三幅不同姿态下标定板图像的单应性矩阵。选取标定板图像上固定的像素坐标mc根据单应性矩阵得到同一像素点在三个姿态下相应的标定板坐标系下的坐标,记为Q1、Q2、Q3,Q1为像素坐标mc根据单应性矩阵得到同一像素点在第一个标定板坐标系的坐标,Q2为像素坐标mc根据单应性矩阵得到同一像素点在第二个标定板坐标系的坐标,Q3为像素坐标mc根据单应性矩阵得到同一像素点在第二个标定板坐标系的坐标。
其中,(mu,mv,1)为圆心的像素坐标的齐次坐标,为像素坐标在第i个平面坐标上对应的齐次坐标。Hi为第i幅标定板图像的单应性矩阵。
步骤5.2:将第一个标定板坐标系作为世界坐标系,根据同一像素点在世界坐标系下对应坐标的共线性以及旋转矩阵是单位正交阵的特性求得第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵和第三个标定板坐标系到第一个标定板坐标系的旋转平移矩阵。
旋转矩阵R包含了三个自由分量,分别是倾斜角γ、偏离角β和旋转角α,其几何意义是围绕X轴、Y轴、Z轴旋转的角度。旋转矩阵R的表达式可描述如下:
由于标定板只在Y轴方向上发生了旋转,所以旋转矩阵可以表示为:
其中,为所设未知量。
用像素点mc对应的空间坐标可构成矩阵M:
保留矩阵M第三行,计算其三个子行列式,整理公式后可得到:
其中λ表示构造子矩阵时消除的行,Ci表示位置参数,表示相应的系数。
表1 位置参数及其相应参数
Table1 Pose parameters and corresponding coefficients
用最小二乘法可以求得Ci的最小二乘解。假设估计的最小二乘解为C′i,则它与表1中的实际Ci存在一个未知的缩放系数k:
kC′i=Ci,i=1,...,11。
于是根据表1的信息,可以得到以下公式:
利用旋转矩阵R是单位正交阵的特性:
通过上述公式计算出所有的移动参数即旋转矩阵和平移矩阵。
对步骤5.2中求得的第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵和第三个标定板坐标系到第一个标定板坐标系的旋转平移矩阵采用Levenberg-Marquardt算法对其进行优化。
Levenberg-Marquardt算法(LM)对其进行优化方法如下:
步骤5.21,获取第一幅标定板图像任意圆心点的像素坐标根据第一幅标定板上任意圆心点的像素坐标对应的直线和Z=0平面的交点重新求得第一幅标定板图 像上圆心的世界坐标
第一幅标定板图像上圆心的世界坐标公式:
直线的计算公式:
步骤5.22,根据第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵、第三个标定板坐标系到第一个标定板坐标系的旋转平移矩阵以及第一个姿态下圆心的世界坐标建立如下最小值优化模型:
其中,n为摆放标定板的姿态数,m为标定板上所取的圆心点数,pi代表第一个姿态下第i个圆心的世界坐标,表示第j个姿态下第i个圆心在相机上的像素坐标,Rj-1、Tj-1分别表示第j个姿态到第一个姿态的旋转矩阵和平移矩阵。表示第i个圆心像素点对应的拟合的光线和Z轴零平面的交点即反求得的第一个姿态下圆心的世界坐标。
步骤5.23,对步骤5.2中求得的第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵和第三个标定板坐标系到第一个标定板坐标系的旋转平移矩阵作为初始值。结合步骤5.21中第一幅标定板图像上圆心的世界坐标公式、直线的计算公式和步骤5.22中的最小值优化模型进行优化。
步骤5.3:对于某一像素点mc在三个姿态下相应的标定板坐标系下的坐标,记为Q1、Q2、Q3。根据步骤5.2求得的第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵将Q2转化到世界坐标系下记为Qw2。根据步骤5.2求得的第三个标定板坐标系到第 一个标定板坐标系的旋转平移矩阵将Q2转化到世界坐标系下记为Qw3。第一标定板坐标系下的Q1直接记为Qw1。进而求得世界坐标系上的三点Qw1,Qw2,Qw3。
Q2和Q3通过下式转化到以第一个姿态建立的世界坐标系下:
R1、R2分别是第二个平面和第三个平面到第一个平面的旋转矩阵。T1、T2分别是第二个平面和第三个平面到第一个平面的平移矩阵。
步骤5.4:根据步骤5.3求得的世界坐标系上的三点Qw1,Qw2,Qw3的坐标通过直线拟合获取像素点mc对应的射线lc,该射线lc即为像素点在相机下的光线方程。
步骤6:在微小物体三维测量系统中,投影仪在获得圆心点后标定方法与相机一样。因此可以根据步骤5得到的像素点在相机下的光线方程和像素点在投影仪下的光线方程通过公式13求得交点,该交点即为物体的三维坐标。
其中,mc表示相机上某一像素点;mp表示根据相位匹配得到的mc在投影仪上对应的像素点;lc表示像素点mc对应的光线;lp表示mc在投影仪下像素点mp对应的光线。
在实例中,通过本发明所使用的标定方法可以实现微小物体的三维测量,如图8所示,本发明成功重建了钥匙的三维电云,钥匙上的纹理清晰可见。并且实验发现,与真实值相比,本方法可以获得10um的测量精度,而且操作简便。
以上所述仅是本发明的优选实施方式,应当指出:对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
Claims (7)
1.一种基于一般成像模型的微小物体测量系统标定方法,其特征在于,包括以下步骤:
步骤1:根据三角法固定带有远心镜头的摄像机和投影仪,在它们公共的工作距离内摆放一个圆形阵列的标定板,利用投影仪在标定板表面投射光栅条纹;同时对于摄像机的成像平面,建立以像素点为单位的图像坐标系u-v,坐标系的原点位于图像的左下角,横、纵像素轴分别为u轴和v轴;
步骤2:用摄像机拍摄某一姿态下的标定板图像及被标定板调制过的光栅图;记为第一幅标定板图像和第一组标定板光栅图;以标定板的左上角为坐标原点,标定板的水平线为X轴,竖直线为Y轴,垂直于XY平面的直线为Z轴,建立标定板平面坐标系XYZ,该坐标系为第一个标定板坐标系;使控制标定板绕其平面坐标系Y轴转动,并在X轴、Y轴、Z轴方向上任意移动,然后用摄像机分别获取两幅不同姿态的标定板图像和对应的光栅图;分别记为第二、第三幅标定板图像和第二、第三组标定板光栅图;同时根据这两幅不同姿态的标定板和第一标定板坐标系的建立方法分别建立对应姿态的标定板坐标系,分别为第二、第三个标定板坐标系;
步骤3:采用自卷积的算法对步骤2获取的第一、第二、第三幅标定板图像进行去模糊处理,并对去模糊处理后的图像进行椭圆拟合获取三个姿态下标定板圆心的像素坐标;
步骤4:通过步骤3从摄像机获取的标定板二维图片中定位出三个姿态下标定板上圆心坐标;对步骤2中获取的第一、第二、第三组标定板光栅图采用八步相移法和格雷码的方法得到三个姿态下标定板上圆心坐标对应的标定板的相位;根据得到的标定板的相位将三个姿态下标定板上圆心坐标匹配到各个姿态下的投影仪圆心像素坐标;
步骤5:将第一、第二、第三个标定板坐标系中的任一一个坐标系作为世界坐标系;根据步骤3获取的三个姿态下标定板圆心的像素坐标利用一般成像模型找到相机获取的标定板图像上每个像素点在世界坐标系上对应的光线方程,即像素点在相机下的光线方程;根据步骤4获取的三个姿态下的投影仪圆心像素坐标利用一般成像模型找到投影仪对应的标定板图像上每个像素点在世界坐标系上对应的光线方程,即像素点在投影仪下的光线方程;
步骤6:根据步骤5得到的像素点在相机下的光线方程和像素点在投影仪下的光线方程求得交点,该交点即为物体的三维坐标。
2.根据权利要求1所述的基于一般成像模型的微小物体测量系统标定方法,其特征在于,所述步骤5中像素点在相机下的光线方程的求取方法:
步骤5.1:根据标定板圆心在对应的标定板坐标系下的坐标以及步骤3得到的标定板圆心的像素坐标获取三幅不同姿态下标定板图像的单应性矩阵;选取标定板图像上固定的像素坐标mc根据单应性矩阵得到同一像素点在三个姿态下相应的标定板坐标系下的坐标,记为Q1、Q2、Q3,Q1为像素坐标mc根据单应性矩阵得到同一像素点在第一个标定板坐标系的坐标,Q2为像素坐标mc根据单应性矩阵得到同一像素点在第二个标定板坐标系的坐标,Q3为像素坐标mc根据单应性矩阵得到同一像素点在第二个标定板坐标系的坐标;
步骤5.2:将第一个标定板坐标系作为世界坐标系,根据同一像素点在世界坐标系下对应坐标的共线性以及旋转矩阵是单位正交阵的特性求得第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵和第三个标定板坐标系到第一个标定板坐标系的旋转平移矩阵;
步骤5.3:根据步骤5.2求得的第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵将Q2转化到世界坐标系下记为Qw2;根据步骤5.2求得的第三个标定板坐标系到第一个标定板坐标系的旋转平移矩阵将Q3转化到世界坐标系下记为Qw3;第一标定板坐标系下的坐标Q1直接记为Qw1;进而求得像素坐标mc在世界坐标系上对应的三点Qw1,Qw2,Qw3;
步骤5.4:根据步骤5.3求得的世界坐标系上的三点Qw1,Qw2,Qw3的坐标通过直线拟合获取像素点mc对应的射线lc,该射线lc即为像素点在相机下的光线方程。
3.根据权利要求2所述的基于一般成像模型的微小物体测量系统标定方法,其特征在于,所述步骤5.1中通过以下公式获取三幅不同姿态下标定板图像的单应性矩阵:
其中,(mu,mv,1)为圆心的像素坐标的齐次坐标,为像素坐标在第i个平面坐标上对应的齐次坐标;Hi为第i幅标定板图像的单应性矩阵。
4.根据权利要求2所述的基于一般成像模型的微小物体测量系统标定方法,其特征在于:对步骤5.2中求得的第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵和第三个标定板坐标系到第一个标定板坐标系的旋转平移矩阵采用Levenberg-Marquardt算法对其进行优化。
5.根据权利要求4所述的基于一般成像模型的微小物体测量系统标定方法,其特征在于:所述步骤5.2中Levenberg-Marquardt算法的优化方法:
步骤5.21,获取第一幅标定板图像任意圆心点的像素坐标根据第一幅标定板上任意圆心点的像素坐标对应的直线和Z=0平面的交点重新求得第一幅标定板图像上圆心的世界坐标
第一幅标定板图像上圆心的世界坐标公式:
直线的计算公式:
步骤5.22,根据第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵、第三个标定板坐标系到第一个标定板坐标系的旋转平移矩阵以及第一个姿态下圆心的世界坐标建立如下最小值优化模型:
其中,n为摆放标定板的姿态数,m为标定板上所取的圆心点数,pi代表第一个姿态下第i个圆心的世界坐标,表示第j个姿态下第i个圆心在相机上的像素坐标,Rj-1、Tj-1分别表示第j个姿态到第一个姿态的旋转矩阵和平移矩阵;表示第i个圆心像素点对应的拟合的光线和Z轴零平面的交点即反求得的第一个姿态下圆心的世界坐标;
步骤5.23,对步骤5.2中求得的第二个标定板坐标系到第一个标定板坐标系的旋转平移矩阵和第三个标定板坐标系到第一个标定板坐标系的旋转平移矩阵作为初始值;结合步骤5.21中第一幅标定板图像上圆心的世界坐标公式、直线的计算公式和步骤5.22中的最小值优化模型进行优化。
6.根据权利要求1所述的基于一般成像模型的微小物体测量系统标定方法,其特征在于:所述步骤6中根据步骤5得到的像素点在相机下的光线方程和像素点在投影仪下的光线方程求得交点的公式:
其中,mc表示相机上某一像素点;mp表示根据相位匹配得到的mc在投影仪上对应的像素点;lc表示像素点mc对应的光线;lp表示mc在投影仪下像素点mp对应的光线。
7.根据权利要求1所述的基于一般成像模型的微小物体测量系统标定方法,其特征在于:所述步骤4投影仪圆心像素坐标的求解方法:
从摄像机获取的标定板二维图片中定位出三个姿态下标定板上圆心坐标对步骤2中获取的第一、第二、第三组标定板光栅图采用八步相移法和格雷码的方法得到圆心坐标的垂直相位和水平相位再根据线性插值法得到投影仪上相应的点的投影仪圆心像素坐标
其中,表示投影仪上相应的点的像素坐标,即投影仪圆心像素坐标,表示从相机获取的标定板二维图片中定位出标定板上圆心坐标,表示圆心坐标在投影仪上相应的圆心坐标,Tv,Th分别是垂直和水平条纹光栅的周期数;W和H是条纹光栅图的宽和高。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610345809.7A CN106408556B (zh) | 2016-05-23 | 2016-05-23 | 一种基于一般成像模型的微小物体测量系统标定方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610345809.7A CN106408556B (zh) | 2016-05-23 | 2016-05-23 | 一种基于一般成像模型的微小物体测量系统标定方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106408556A true CN106408556A (zh) | 2017-02-15 |
CN106408556B CN106408556B (zh) | 2019-12-03 |
Family
ID=58006287
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610345809.7A Active CN106408556B (zh) | 2016-05-23 | 2016-05-23 | 一种基于一般成像模型的微小物体测量系统标定方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106408556B (zh) |
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106971406A (zh) * | 2017-03-06 | 2017-07-21 | 广州视源电子科技股份有限公司 | 物体位姿的检测方法和装置 |
CN107894215A (zh) * | 2017-12-26 | 2018-04-10 | 东南大学 | 基于全自动曝光的高动态范围光栅投影三维测量方法 |
CN108180834A (zh) * | 2018-02-05 | 2018-06-19 | 中铁二十二局集团有限公司 | 一种工业机器人同三维成像仪位姿关系现场实时标定方法 |
CN108180868A (zh) * | 2017-12-29 | 2018-06-19 | 南京理工大学 | 一种基于条纹投影的实时三维显微成像系统 |
CN108447098A (zh) * | 2018-03-13 | 2018-08-24 | 深圳大学 | 一种远心移轴相机标定方法和系统 |
CN110045477A (zh) * | 2019-04-16 | 2019-07-23 | 中国科学院光电技术研究所 | 一种基于相位解析的光学元件自动对心方法 |
CN110084861A (zh) * | 2019-06-03 | 2019-08-02 | 易思维(杭州)科技有限公司 | 一种多相机视觉检测设备的标定方法 |
CN110161485A (zh) * | 2019-06-13 | 2019-08-23 | 同济大学 | 一种激光雷达与视觉相机的外参标定装置及标定方法 |
CN110849268A (zh) * | 2019-12-10 | 2020-02-28 | 南昌航空大学 | 一种快速的相位-高度映射标定方法 |
CN110926454A (zh) * | 2019-12-13 | 2020-03-27 | 中国科学院自动化研究所 | 基于双显微相机主动运动的微球孔姿态测量方法 |
CN110956151A (zh) * | 2019-12-10 | 2020-04-03 | 中南大学 | 基于结构光的轨道交通异物侵入检测方法及其系统 |
CN111311686A (zh) * | 2020-01-15 | 2020-06-19 | 浙江大学 | 一种基于边缘感知的投影仪失焦校正方法 |
CN112132890A (zh) * | 2020-11-26 | 2020-12-25 | 三代光学科技(天津)有限公司 | 一种扩大标定空间的数字光栅投影测量系统标定方法 |
CN112884847A (zh) * | 2021-03-02 | 2021-06-01 | 济南大学 | 一种双相机标定方法及系统 |
CN113188478A (zh) * | 2021-04-28 | 2021-07-30 | 伏燕军 | 一种远心显微三维测量系统混合标定方法 |
CN113296395A (zh) * | 2021-05-14 | 2021-08-24 | 珞石(山东)智能科技有限公司 | 一种特定平面内的机器人手眼标定方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012173243A (ja) * | 2011-02-24 | 2012-09-10 | Seiko Epson Corp | 3次元計測装置、および3次元計測方法 |
CN103528543A (zh) * | 2013-11-05 | 2014-01-22 | 东南大学 | 一种光栅投影三维测量中的系统标定方法 |
-
2016
- 2016-05-23 CN CN201610345809.7A patent/CN106408556B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012173243A (ja) * | 2011-02-24 | 2012-09-10 | Seiko Epson Corp | 3次元計測装置、および3次元計測方法 |
CN103528543A (zh) * | 2013-11-05 | 2014-01-22 | 东南大学 | 一种光栅投影三维测量中的系统标定方法 |
Non-Patent Citations (2)
Title |
---|
YONGKAI YIN等: "Fringe projection 3D microscopy with the general imaging model", 《OPTICS EXPRESS》 * |
郭涛等: "小视场环境下的摄像机标定", 《中国激光》 * |
Cited By (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106971406A (zh) * | 2017-03-06 | 2017-07-21 | 广州视源电子科技股份有限公司 | 物体位姿的检测方法和装置 |
CN106971406B (zh) * | 2017-03-06 | 2019-10-29 | 广州视源电子科技股份有限公司 | 物体位姿的检测方法和装置 |
CN107894215A (zh) * | 2017-12-26 | 2018-04-10 | 东南大学 | 基于全自动曝光的高动态范围光栅投影三维测量方法 |
CN107894215B (zh) * | 2017-12-26 | 2020-05-08 | 东南大学 | 基于全自动曝光的高动态范围光栅投影三维测量方法 |
CN108180868A (zh) * | 2017-12-29 | 2018-06-19 | 南京理工大学 | 一种基于条纹投影的实时三维显微成像系统 |
CN108180834A (zh) * | 2018-02-05 | 2018-06-19 | 中铁二十二局集团有限公司 | 一种工业机器人同三维成像仪位姿关系现场实时标定方法 |
CN108447098A (zh) * | 2018-03-13 | 2018-08-24 | 深圳大学 | 一种远心移轴相机标定方法和系统 |
CN110045477A (zh) * | 2019-04-16 | 2019-07-23 | 中国科学院光电技术研究所 | 一种基于相位解析的光学元件自动对心方法 |
CN110045477B (zh) * | 2019-04-16 | 2020-11-03 | 中国科学院光电技术研究所 | 一种基于相位解析的光学元件自动对心方法 |
CN110084861A (zh) * | 2019-06-03 | 2019-08-02 | 易思维(杭州)科技有限公司 | 一种多相机视觉检测设备的标定方法 |
CN110084861B (zh) * | 2019-06-03 | 2023-09-15 | 易思维(杭州)科技有限公司 | 一种多相机视觉检测设备的标定方法 |
CN110161485A (zh) * | 2019-06-13 | 2019-08-23 | 同济大学 | 一种激光雷达与视觉相机的外参标定装置及标定方法 |
CN110849268A (zh) * | 2019-12-10 | 2020-02-28 | 南昌航空大学 | 一种快速的相位-高度映射标定方法 |
CN110956151A (zh) * | 2019-12-10 | 2020-04-03 | 中南大学 | 基于结构光的轨道交通异物侵入检测方法及其系统 |
CN110849268B (zh) * | 2019-12-10 | 2021-07-06 | 南昌航空大学 | 一种快速的相位-高度映射标定方法 |
CN110926454A (zh) * | 2019-12-13 | 2020-03-27 | 中国科学院自动化研究所 | 基于双显微相机主动运动的微球孔姿态测量方法 |
CN111311686B (zh) * | 2020-01-15 | 2023-05-02 | 浙江大学 | 一种基于边缘感知的投影仪失焦校正方法 |
CN111311686A (zh) * | 2020-01-15 | 2020-06-19 | 浙江大学 | 一种基于边缘感知的投影仪失焦校正方法 |
CN112132890A (zh) * | 2020-11-26 | 2020-12-25 | 三代光学科技(天津)有限公司 | 一种扩大标定空间的数字光栅投影测量系统标定方法 |
CN112132890B (zh) * | 2020-11-26 | 2021-09-21 | 三代光学科技(天津)有限公司 | 一种扩大标定空间的数字光栅投影测量系统标定方法 |
CN112884847A (zh) * | 2021-03-02 | 2021-06-01 | 济南大学 | 一种双相机标定方法及系统 |
CN113188478A (zh) * | 2021-04-28 | 2021-07-30 | 伏燕军 | 一种远心显微三维测量系统混合标定方法 |
CN113296395A (zh) * | 2021-05-14 | 2021-08-24 | 珞石(山东)智能科技有限公司 | 一种特定平面内的机器人手眼标定方法 |
Also Published As
Publication number | Publication date |
---|---|
CN106408556B (zh) | 2019-12-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106408556B (zh) | 一种基于一般成像模型的微小物体测量系统标定方法 | |
CN111536902B (zh) | 一种基于双棋盘格的振镜扫描系统标定方法 | |
US11875537B2 (en) | Multi view camera registration | |
CN106595528B (zh) | 一种基于数字散斑的远心显微双目立体视觉测量方法 | |
JP4245963B2 (ja) | 較正物体を用いて複数のカメラを較正するための方法およびシステム | |
CN106056587B (zh) | 全视角线激光扫描三维成像标定装置及方法 | |
CN104616292B (zh) | 基于全局单应矩阵的单目视觉测量方法 | |
CN106500596B (zh) | 结构光全景测量系统的测量方法 | |
CN108288292A (zh) | 一种三维重建方法、装置及设备 | |
CN113841384B (zh) | 校准装置,用于校准的图表和校准方法 | |
JP6067175B2 (ja) | 位置測定装置及び位置測定方法 | |
CN113160339B (zh) | 一种基于沙姆定律的投影仪标定方法 | |
WO2018201677A1 (zh) | 基于光束平差的远心镜头三维成像系统的标定方法及装置 | |
CN113205603A (zh) | 一种基于旋转台的三维点云拼接重建方法 | |
Gao et al. | Flexible method for structured light system calibration | |
CN113936099A (zh) | 基于单目结构光和旋转平台的三维图像重建方法及系统 | |
CN115661226B (zh) | 镜面物体的三维测量方法、计算机可读存储介质 | |
Pathak et al. | Dense 3D reconstruction from two spherical images via optical flow-based equirectangular epipolar rectification | |
CN114792345B (zh) | 一种基于单目结构光系统的标定方法 | |
CN102881040A (zh) | 一种数码相机移动拍摄三维重建方法 | |
CN110619601B (zh) | 一种基于三维模型的图像数据集生成方法 | |
CN104596486A (zh) | 基于目标旋转对称特征的位姿测量方法 | |
CN113674347B (zh) | 基于相机和投影群阵列的三维形貌的变形测量装置及方法 | |
CN115147490A (zh) | 一种6d位姿估计数据集制作方法、装置及系统 | |
Liang et al. | An integrated camera parameters calibration approach for robotic monocular vision guidance |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |