CN104316083B - 一种虚拟多球体球心定位的tof深度相机三维坐标标定装置和方法 - Google Patents
一种虚拟多球体球心定位的tof深度相机三维坐标标定装置和方法 Download PDFInfo
- Publication number
- CN104316083B CN104316083B CN201410650844.0A CN201410650844A CN104316083B CN 104316083 B CN104316083 B CN 104316083B CN 201410650844 A CN201410650844 A CN 201410650844A CN 104316083 B CN104316083 B CN 104316083B
- Authority
- CN
- China
- Prior art keywords
- mtd
- msub
- tof depth
- dimensional
- coordinate
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C25/00—Manufacturing, calibrating, cleaning, or repairing instruments or devices referred to in the other groups of this subclass
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
- G01M11/00—Testing of optical apparatus; Testing structures by optical methods not otherwise provided for
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Manufacturing & Machinery (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
本发明涉及一种虚拟多球体球心定位的TOF深度相机三维坐标标定装置和方法，包括三维运动平移台，TOF深度相机，球体目标和背景板；充分利用球体目标在不同测量角度处的各向不变性，采用相互正交的三个一维运动平移台产生三维方向上的若干次运动，构成具有复杂形状的虚拟多球体目标，该目标在TOF深度相机的不同测量角度处不会产生多表面特征，易于对目标中心进行高精度定位，获取虚拟多球体目标的球心三维坐标测量值及空间位置后即可实现对TOF深度相机的三维坐标标定。本发明降低了单次TOF深度相机对球体目标中心点特征识别的难度和测量误差，有效提高TOF深度相机的三维测量精度，并能灵活设置虚拟标准球体的中心位置和球体个数，易于实现全过程高精度自动化标定。
Description
技术领域
本发明属于光学计量及标定技术领域，特别涉及一种虚拟多球体球心定位的无扫描激光三维TOF(Time-of-Flight)深度相机的标定装置和方法。
背景技术
随着光学测量和计算机视觉技术的日益改进和提升，先进制造技术的发展和产品需求的多样化对复杂物体表面的三维形貌信息的测量需求不断增长。作为新一代的光学三维测量技术，TOF深度相机能够实时获取空间目标的灰度信息及每个像素点对应的深度信息，具有实时性好、测量精度适中、体积小、重量轻等优势，被迅速应用于移动机器人的导航和地图创建、空间探测机器人、工业加工制造等领域。
为了消除由于空间坐标系和测量坐标系之间的不一致性引起的系统误差，三维坐标标定是TOF深度相机进行高精度光学三维测量中至关重要的一步，主要是通过获取标准物体目标的三维空间特征参数，进而求得TOF深度相机三维测量坐标到空间坐标的坐标变换关系完成三维坐标的标定。因而，选取的标准物体的空间位置及形状参数的高精度提取和识别是TOF深度相机进行高精度三维测量的重要保证，并且TOF深度相机标定使用的目标应当充满整个视场，才能得到TOF深度相机视场中心和边缘的三维坐标标定结果，由此产生了各种对三维成像相机的标定方法，主要有以下两类：
(1)基于平面标志物的三维坐标标定方式，如采用棋盘格的标定方式(1.Zhengyou,Zhang.A flexible new technique for camera calibration.TechnicalReport MSR-TR-98-71,Microsoft Research.1998.2.李兴东，陈超，李满天，孙立宁.飞行时间法三维摄像机标定与误差补偿.机械与电子.2013(11):37-40；3.潘华东.飞行时间法无扫描三维成像摄像机的机理和特性研究.浙江大学博士学位论文.2010.04；4.专利201210021469.4“基于TOF深度相机的三维注册方法”；5.Young Min Kim,Derek Chan,Christian Theobalt,Sebastian Thrun.Design and Calibration of a Multi-view TOFSensor Fusion System.Computer Vision and Pattern Recognition Workshops,2008.CVPRW’08.IEEE Computer Society Conference.June 23-28,2008.Anchorage,AK；6.Stefan Fuchs,Gerd Hirzinger.Extrinsic and Depth Calibration of TOF-cameras.Computer Vision and Pattern Recognition,2008.CVPR 2008.IEEEConference.June 23-28,2008.Anchorage,AK；7.Sung-Yeol Kim,Woon Cho,AndreasKoschan,and Mongi A.Abidi.Depth Data Calibration and Enhancement of Time-of-flight Video-plus-Depth Camera.Future of Instrumentation InternationalWorkshop(FIIW).November 7-8,2011.Oak Ridge,TN；8.Marvin Lindner,Ingo Schiller,Andreas Kolb,Reinhard Koch.Time-of-Flight Sensor Calibration for AccurateRange Sensing.Computer Vision and Image Understanding.2010(114):1318-1328；9.Miles Hansard,Radu Horaud,Michel Amat,Georgios Evangelidis.AutomaticDetection of Calibration Grids in Time-of-flight Images.Computer Vision andImage Understanding.2014(121):108-118)，或采用圆点阵列的标定方式(1.蔡珲.视觉测量中的摄像机标定与三维重建方法研究.哈尔滨工业大学硕士学位论文.2013.07；2.Jiyoung Jung,Yekeun Jeong,Jaesik Park,Hyowon Ha,James Dokyoon Kim,and In-SoKweon.A Novel 2.5D Pattern for Extrinsic Calibration of ToF and Camera FusionSystem.2011 IEEE/RSJ International Conference on Intelligent Robots andSystems.September 25-30,2011.San Francisco,CA,USA；3.Frederic Garcia,DjamilaAouada,Bruno Mirbach,andOttersten.Real-Time Distance-Dependent Mappingfor a Hybrid ToF Multi-Camera Rig.IEEE JOURNAL OF SELECTED TOPICS IN SIGNALPROCESSING,2012.6(5):425-436)，这些方法对多个角度放置的黑白相间平面棋盘格图形(或圆点阵列图形)进行多次拍摄，然后计算棋盘格的不同角度位置处的各个角点位置(或圆点阵列各个圆点中心位置)，再根据空间坐标变换关系实现对TOF深度相机的标定，该方法标定精度较高，应用较为广泛，但该方法采集次数多，每次数据处理过程较复杂，并且对多个角点的提取误差将直接累积到最终的标定结果中，标定精度难以进一步提高，进而直接影响TOF深度相机的三维测量精度；
(2)基于复杂特征立体标志物的三维坐标标定方式，如采用具有不同深度特征的立方块或多层台阶等立体物作为标准测量对象进行TOF深度相机的标定方法(1.Tsai,R.Aversatile camera calibration technique for high-accuracy 3D machine visionmetrology using off-the-shelf TV cameras and lenses.IEEE Journal of Roboticsand Automation.1987.RA-3(4):323-344；2.徐德，谭民，李原.机器人视觉测量与控制.国防工业出版社.2011.05；3.Filiberto Chiabrando,Roberto Chiabrando,Dario Piatti,Fulvio Rinaudo.Sensors for 3D Imaging:Metric Evaluation and Calibration of aCCD/CMOS Time-of-Flight Camera.Sensors.2009(9):10080-10096；4.Stuart Robson,J.-Angelo Beraldin,Andrew Brownhill and Lindsay MacDonald.Artefacts forOptical Surface Measurement.Proc.of SPIE Vol.8085,Videometrics,Range Imaging,and Applications XI,80850C.May 23,2011.Munich,Germany；5.专利201210352365.1“基于计算机视觉立方体标定的三维测量方法”)，相对于基于平面标志物的三维坐标标定方式，这类方法虽然能够直接采集得到复杂特征物体面型上不同位置处的不同深度信息，进而解算得到TOF深度相机的测量误差进行补偿，但由于需要同时对采集得到的复杂特征进行提取和识别，同时，目标偏离视场中心后，视场中获取的目标具有多个表面，数据计算量大且提取识别误差将累积到最终的标定结果中，TOF深度相机的三维坐标标定精度和测量精度也难以进一步提高。
由以上分析可以看出，在实际应用中，目前广泛采用的TOF深度相机三维坐标标定方法均存在如下不足之处：TOF深度相机单次采集时出现在视场中的目标特征数量较多，尤其是对于基于复杂特征立体标志物的三维坐标标定方式，目标偏离视场中心时，视场中获取的立体目标呈现多表面特征(如长方体目标在偏离视场中心后将被探测出多余表面形貌)，且该多表面特征随着测量角度的不同而变化，使得数据处理过程长，目标识别和特征提取复杂度高，由此直接导致了目标识别和特征提取的测量误差累积进入了标定结果中，大大影响TOF深度相机标定结果的准确性和重复性，从而限制了TOF深度相机的应用范围，这是目前现有标定方案本身的不足之处，也是当前TOF深度相机在实际应用中未能解决的重要问题。
发明内容
本发明的技术解决问题：克服上述已有的TOF深度相机标定方案中存在的不足，充分利用球体目标在不同测量角度处的各向不变性，提供一种虚拟多球体球心定位的TOF深度相机三维坐标标定装置和方法，该标定装置包括三维运动平移台，TOF深度相机，球体目标以及背景板；该方法利用相互正交的三个一维运动平移台，对X、Y、Z三个正交方向作出运动。通过设计合理的运动方式，每个运动位置处TOF深度相机视场中的单个球体目标组合，构成一个具有多个球体轮廓的虚拟多球体目标，该目标在不同测量角度处不会产生多表面特征，易于对球体目标中心进行高精度定位，获取球心的三维坐标测量值及空间位置即可求得三维坐标标定的坐标变换关系，实现对TOF深度相机的三维坐标标定。本发明充分利用球体目标在不同测量角度处的各向不变性，极大降低了单次TOF深度相机对球体目标中心点特征识别的难度和测量误差，有效提高TOF深度相机的三维测量精度，并能够灵活设置虚拟多球体目标的球心位置和球体个数，易于实现全过程高精度自动化标定。
本发明采用的技术解决方案是：一种虚拟多球体球心定位的TOF深度相机三维坐标标定装置，包括三维运动平移台，TOF深度相机，球体目标以及背景板。其中，三维运动平移台的连接方式为三个一维运动平移台在三维方向两两正交组合连接；TOF深度相机固定在运动平移台上，随三维运动平移台一起进行三维运动；背景板为平面板，与TOF深度相机的光轴垂直，球体目标固定于背景板上。
本发明还提供了虚拟多球体球心定位的TOF深度相机三维坐标标定方法，该方法包括以下步骤：
(1)首先确定空间坐标系OXYZ，三维平移台的三个平移轴定义为X、Y、Z三个方向，坐标原点O定位为TOF深度相机镜头中心，三维运动平移台安装底面定义为XZ平面，与TOF深度相机安装底面平行；Z方向为TOF深度相机光轴方向，与Z方向平移台平移轴运动方向平行；Y方向为三维运动平移台安装底面的垂直方向；X方向为右手坐标系定义的方向；空间坐标系OXYZ与TOF深度相机三维测量坐标系OcXcYcZc之间的三维坐标转换关系如下所示：
其中，xc，yc，zc表示空间任意一点在TOF深度相机三维测量坐标系下的坐标，xw，yw，zw表示该点在空间坐标系OXYZ下的坐标，nxx，nxy，nxz表示空间坐标系X轴在TOF深度相机三维测量坐标系下的方向向量，nyx，nyy，nyz表示空间坐标系Y轴在TOF深度相机三维测量坐标系下的方向向量，nzx，nzy，nzz表示空间坐标系Z轴在TOF深度相机三维测量坐标系下的方向向量，px，py，pz表示空间坐标系的坐标原点在TOF深度相机三维测量坐标系下的坐标；
(2)调整TOF深度相机和球体目标的初始位置，使得球体目标表面与TOF深度相机镜头表面紧贴，且保证TOF深度相机镜头光轴通过球体目标球心，球体目标半径为R，则初始位置球心位置坐标为Z0＝R；
(3)控制Z方向运动平移台带动TOF深度相机沿着Z方向运动，产生Z方向精确位移，到达Z方向确定位置sz，此时，球心位置变为Z1＝sz+R，Z方向运动完成；
(4)控制X方向运动平移台和Y方向运动平移台，带动TOF深度相机在sz位置处，在XY平面内进行遍历运动，形成虚拟多球体目标；在XY平面内运动中的每个位置处，球体目标的球心三维空间位置坐标可以由球体半径R以及运动平移台的运动位置唯一确定，如下式所示：
Pij(xij,yij,zij)＝Pij(sxij,syij,sz+R)
其中，i(i＝1,2,3,……)和j(j＝1,2,3,……)分别为TOF深度相机在XY平面内X方向和Y方向运动的位置序号；Pij(xij,yij,zij)为球体目标球心的三维空间位置坐标，即：球心在空间坐标系OXYZ下的三维坐标；sxij为X方向运动平移台在X方向产生的位移；syij为Y方向运动平移台在Y方向产生的位移；sz为Z方向运动平移台在Z方向产生的位移；R为球体目标的半径。
(5)TOF深度相机对球体目标进行三维球心定位测量，首先测量得到球体目标表面各个点的三维测量坐标值：pijk(xijk,yijk,zijk)，其中，k＝1,2,3……,N为球体目标表面测量点的序号，N为球体目标表面测量点的个数。然后对球体目标表面各个点的三维测量坐标值采用最小二乘拟合方法对球体目标的球心坐标进行高精度定位，得到球心在TOF深度相机三维测量坐标系OcXcYcZc下的坐标为：Pij’(xij’,yij’,zij’)，其中，i(i＝1,2,3,……)和j(j＝1,2,3,……)分别为对应的TOF深度相机在XY平面内X方向和Y方向运动的位置序号；
(6)遍历整个XY平面，得到该Z方向位置处所有的XY位置处球体目标球心的三维测量值与空间位置坐标。带入上述坐标转换关系中，解线性方程组即可实现对TOF深度相机的三维坐标的标定。
本发明与现有技术相比的优点在于：
(1)本发明充分利用相互正交的三轴高精度运动平移台产生三维方向上的若干次运动，每个运动位置处TOF深度相机视场中的单一球体目标组合起来，构成具有复杂形状的虚拟多球体目标，这是区别于现有TOF深度相机三维坐标标定技术的创新点之一；
(2)在本发明中，每个运动位置处TOF深度相机视场中仅有一个球体目标，并且背景简单，使得每次TOF深度相机对球体目标识别和提取的数据处理过程简单，并且球体目标在偏离视场中心位置不会产生多余表面，可以采用常规的球心拟合算法实现简单球目标的高精度球心定位，大大降低了目标特征提取识别的难度和误差，这是区别于现有TOF深度相机标定技术的创新点之二；
(3)本发明中，通过采用相互正交的三维高精度运动平移台的三维运动，构造了一个具有复杂形状的虚拟多球体目标，在TOF深度相机视场的不同位置，获取球体中心的三维测量结果与球心的三维空间位置，从而可以计算完成TOF深度相机的三维坐标标定，满足了TOF深度相机三维坐标标定的需求，降低了对复杂目标特征识别的误差，消除了多表面特征对目标识别的影响，提高了TOF深度相机的三维坐标标定精度，减小了由于空间坐标系和测量坐标系不对应引入的系统误差，进而提高了TOF深度相机的三维测量精度，而且测量过程和数据处理都明显简化，易于实现全程自动化标定，实用性强。
附图说明
图1是本发明装置的结构示意图；
图2是本发明装置中相互正交的三维运动平移台及其TOF深度相机的结构示意图；
图3是本发明中运动平移台3×3运动时球体目标在TOF深度相机视场中成像的示意图；
图4是本发明中运动平移台3×3运动后构成的虚拟多球体目标的结构示意图；
图5是本发明中虚拟多球体目标球心在XY平面内的空间位置坐标示意图；
图6是本发明中球体目标为整体有超过50％的部分是具有球面形状的目标的结构示意图。
具体实施方式
下面结合图和实施例对本发明的基于虚拟多立方体标准目标的TOF深度相机标定装置和方法进行详细描述：
本发明充分利用球体目标在不同测量角度处的各向不变性，采用相互正交的三个一维运动平移台产生三维方向上的若干次运动，通过设计合理的运动方式，构成一个具有复杂形状的虚拟多球体目标，该目标在TOF深度相机的不同测量角度处不会产生多表面特征，易于对目标中心进行高精度定位，获取虚拟多球体目标的球心三维坐标测量值及空间位置后即可实现对TOF深度相机的三维坐标标定。
如图1所示，本发明的装置由Z方向运动平移台1，X方向运动平移台2，Y方向运动平移台3，TOF深度相机4，球体目标5以及背景板6等构成。其中：如图2所示，X方向运动平移台2、Y方向运动平移台3和Z方向运动平移台1的连接方式为空间三维方向两两正交连接，Z方向运动平移台1的运动方向与TOF深度相机4的光轴方向平行，TOF深度相机4固定在Y方向运动平移台3上，TOF深度相机4的安装底面与Z方向运动平移台安装底面平行，TOF深度相机4随三个运动平移台一起进行三维运动；背景板6为平面板，与TOF深度相机4的光轴垂直，球体目标5固定于背景板6上。
下面详细说明本发明所述的方法：
(1)首先确定空间坐标系OXYZ，三维平移台的三个平移轴定义为X、Y、Z三个方向，坐标原点O定位为TOF深度相机4的镜头中心，三维运动平移台安装底面定义为XZ平面，与TOF深度相机4安装底面平行；Z方向为TOF深度相机4光轴方向，与Z方向平移台1平移轴运动方向平行；Y方向为三维运动平移台安装底面的垂直方向；X方向为右手坐标系定义的方向；空间坐标系OXYZ与TOF深度相机4三维测量坐标系OcXcYcZc之间的三维坐标转换关系如下所示：
其中，xc，yc，zc表示空间任意一点在TOF深度相机4三维测量坐标系下的坐标，(xw，yw，zw)表示该点在空间坐标系OXYZ下的坐标，nxx，nxy，nxz表示空间坐标系X轴在TOF深度相机4三维测量坐标系下的方向向量，nyx，nyy，nyz表示空间坐标系Y轴在TOF深度相机4三维测量坐标系下的方向向量，nzx，nzy，nzz表示空间坐标系Z轴在TOF深度相机4三维测量坐标系下的方向向量，px，py，pz表示空间坐标系的坐标原点在TOF深度相机4三维测量坐标系下的坐标；
(2)调整TOF深度相机4和球体目标5的初始位置，使得球体目标5表面与TOF深度相机4镜头表面紧贴，且保证TOF深度相机4的镜头光轴通过球体目标球心，球体目标5的半径为R，则初始位置球心位置坐标为Z0＝R；
(3)控制Z方向运动平移台1带动TOF深度相机4沿着Z方向运动，产生Z方向精确位移，到达Z方向确定位置sz，此时，球心位置为Z1＝sz+R，Z方向运动完成；
(4)控制X方向运动平移台2和Y方向运动平移台3，带动TOF深度相机4在sz位置处，在XY平面内进行遍历运动，形成虚拟多球体目标；在XY平面内运动中的每个位置处，球体目标5的球心三维空间位置坐标可以由球体半径R以及运动平移台的运动位置唯一确定，如下式所示：
Pij(xij,yij,zij)＝Pij(sxij,syij,sz+R)
其中，i(i＝1,2,3,……)和j(j＝1,2,3,……)分别为TOF深度相机4在XY平面内X方向和Y方向运动的位置序号；Pij(xij,yij,zij)为球体目标5球心的三维空间位置坐标，即：球心在空间坐标系OXYZ下的三维坐标；sxij为X方向运动平移台2在X方向产生的位移；syij为Y方向运动平移台3在Y方向产生的位移；sz为Z方向运动平移台1在Z方向产生的位移；R为球体目标5的半径。
(5)TOF深度相机4对球体目标5进行三维球心定位测量，首先测量得到球体目标5表面各个点的三维测量坐标值：pijk(xijk,yijk,zijk)，其中，k＝1,2,3……,N为球体目标5表面测量点的序号，N为球体目标5表面测量点的个数。然后对球体目标5表面各个点的三维测量坐标值采用最小二乘拟合方法对球体目标5的球心坐标进行高精度定位，得到球心在TOF深度相机4三维测量坐标系OcXcYcZc下的坐标为：Pij’(xij’,yij’,zij’)，其中，i(i＝1,2,3,……)和j(j＝1,2,3,……)分别为对应的TOF深度相机4在XY平面内X方向和Y方向运动的位置序号；
(6)遍历整个XY平面，得到该Z方向位置处所有的XY位置处球体目标5球心的三维测量值与空间位置坐标。带入上述坐标转换关系中，解线性方程组即可实现对TOF深度相机的三维坐标的标定。
可见，通过采用相互正交的三轴运动平移台的三维运动，构造了一个虚拟多球体组成的具有复杂形状的标准目标，在TOF深度相机4视场的不同位置，获取球体目标5中心的三维测量结果与球体目标5中心的精确空间位置，从而计算完成三维坐标标定，满足了TOF深度相机4三维坐标标定的需求，降低了复杂目标特征识别误差，提高了TOF深度相机4的三维坐标标定精度，而且测量过程和数据处理都明显简化，易于实现全程自动化标定，实用性强。
实施例1：
以TOF深度相机4在500mm距离位置处，X方向运动平移台2和Y方向运动平移台3组合进行XY平面内的3×3运动进行三维坐标标定为例，详细描述本发明介绍的标定装置和方法如下：
(1)首先确定空间坐标系OXYZ，三维平移台的三个平移轴定义为X、Y、Z三个方向，坐标原点O定位为TOF深度相机4的镜头中心，三维运动平移台安装底面定义为XZ平面，与TOF深度相机4安装底面平行；Z方向为TOF深度相机4光轴方向，与Z方向平移台1平移轴运动方向平行；Y方向为三维运动平移台安装底面的垂直方向；X方向为右手坐标系定义的方向；空间坐标系OXYZ与TOF深度相机4三维测量坐标系OcXcYcZc之间的三维坐标转换关系如下所示：
其中，(xc，yc，zc)表示空间任意一点在TOF深度相机4三维测量坐标系下的坐标，xw，yw，zw表示该点在空间坐标系OXYZ下的坐标，nxx，nxy，nxz表示空间坐标系X轴在TOF深度相机4三维测量坐标系下的方向向量，nyx，nyy，nyz表示空间坐标系Y轴在TOF深度相机4三维测量坐标系下的方向向量，nzx，nzy，nzz表示空间坐标系Z轴在TOF深度相机4三维测量坐标系下的方向向量，px，py，pz表示空间坐标系的坐标原点在TOF深度相机4三维测量坐标系下的坐标。
(2)调整TOF深度相机4和球体目标5的初始位置，使得球体目标5表面与TOF深度相机4镜头表面紧贴，且保证TOF深度相机4的镜头光轴通过球体目标球心，球体目标5的半径为R＝75mm，则初始位置球心位置坐标为Z0＝R＝75mm；
(3)控制Z方向运动平移台1带动TOF深度相机4沿着Z方向运动，产生Z方向精确位移，到达Z方向确定位置sz＝500mm，此时，球心位置为Z1＝sz+R＝575mm，Z方向运动完成；
(4)控制X方向运动平移台2和Y方向运动平移台3，带动TOF深度相机4在sz位置处，在XY平面内进行3×3遍历运动，形成虚拟多球体目标在TOF深度相机4视场内成像示意图如图3所示，虚拟多球体目标示意图如图4所示；在XY平面内运动中的每个位置处，球体目标5的球心三维空间位置坐标可以由球体半径R以及运动平移台的运动位置唯一确定，虚拟多球体目标球心在XY平面内的空间位置坐标示意图如图5所示，如下式所示：
Pij(xij,yij,zij)＝Pij(sxij,syij,sz+R)
其中，i(i＝1,2,3,……)和j(j＝1,2,3,……)分别为TOF深度相机4在XY平面内X方向和Y方向运动的位置序号；Pij(xij,yij,zij)为球体目标5球心的三维空间位置坐标，即：球心在空间坐标系OXYZ下的三维坐标；sxij为X方向运动平移台2在X方向产生的位移；syij为Y方向运动平移台3在Y方向产生的位移；sz为Z方向运动平移台1在Z方向产生的位移；R为球体目标5的半径。
(5)TOF深度相机4对球体目标5进行三维球心定位测量，首先测量得到球体目标5表面点的三维测量坐标值：pijk(xijk,yijk,zijk)，其中，k＝1,2,3……,N为球体目标5表面测量点的序号，N为球体目标5表面测量点的个数，这里，球体目标5表面的测量点的个数N≥4，本实施例中取N＝10，则k＝1,2,3,……,10；然后对球体目标5表面点的三维测量坐标值采用最小二乘拟合方法对球体目标5的球心坐标进行高精度定位，得到球心在TOF深度相机4三维测量坐标系OcXcYcZc下的三维坐标为：Pij’(xij’,yij’,zij’)，其中，i(i＝1,2,3)和j(j＝1,2,3)分别为对应的TOF深度相机4在XY平面内X方向和Y方向运动的位置序号；
(6)遍历整个XY平面，得到该Z方向位置处所有的XY位置处球体目标5球心的三维测量值与空间位置坐标。带入上述坐标转换关系中，解线性方程组即可实现对TOF深度相机4的三维坐标的标定。
本实施例中，X方向运动平移台2、Y方向运动平移台3和Z方向运动平移台1均采用高精度电控平移台，定位精度均优于0.05mm，其中，X方向运动平移台2行程优于2m，Y方向运动平移台3行程优于1m，Z方向运动平移台1行程优于0.4m；TOF深度相机4三维测量距离为0.5m～5m，三维测量精度为±10mm，球体目标5为半径R＝75mm的球体目标。由于电控平移台的定位精度远远高于TOF深度相机4的测量精度，因此运动平移台自身的定位误差可以忽略。标定实验结果表明，整个测量过程实现了全程自动化，并且采用本发明提供的标定方法标定后的TOF深度相机的测量精度由±10mm提高到了优于4.15mm，实现了TOF深度相机的自动化高精度三维坐标标定。
实施例2：
如图6所示，球体目标5为整体有超过50％的部分是具有球面形状的目标，本实施例的其他部件及工作原理均与实施例1相同。
总之，本发明降低了单次TOF深度相机对球体目标中心点特征识别的难度和测量误差，有效提高TOF深度相机的三维测量精度，并能够灵活设置虚拟标准球体的中心位置和球体个数，易于实现全过程高精度自动化标定。
提供以上实施例仅仅是为了描述本发明的目的，而并非要限制本发明的范围。本发明的范围由所附权利要求限定。不脱离本发明的精神和原理而做出的各种等同替换和修改，均应涵盖在本发明的范围之内。
Claims (4)
1.一种虚拟多球体球心定位的TOF深度相机三维坐标标定方法，其特征在于：所述的标定方法包括以下步骤：
(1)首先确定空间坐标系OXYZ，三维运动平移台的三个平移轴定义为X、Y、Z三个方向，坐标原点O定位为TOF深度相机镜头中心，三维运动平移台安装底面定义为XZ平面，与TOF深度相机安装底面平行；Z方向为TOF深度相机光轴方向，与Z方向平移台平移轴运动方向平行；Y方向为三维运动平移台安装底面的垂直方向；X方向为右手坐标系定义的方向；空间坐标系OXYZ与TOF深度相机三维测量坐标系OcXcYcZc之间的三维坐标转换关系如下所示：
<mrow>
<mfenced open = "[" close = "]">
<mtable>
<mtr>
<mtd>
<msub>
<mi>x</mi>
<mi>c</mi>
</msub>
</mtd>
</mtr>
<mtr>
<mtd>
<msub>
<mi>y</mi>
<mi>c</mi>
</msub>
</mtd>
</mtr>
<mtr>
<mtd>
<msub>
<mi>z</mi>
<mi>c</mi>
</msub>
</mtd>
</mtr>
<mtr>
<mtd>
<mn>1</mn>
</mtd>
</mtr>
</mtable>
</mfenced>
<mo>=</mo>
<mfenced open = "[" close = "]">
<mtable>
<mtr>
<mtd>
<mrow>
<msub>
<mi>nx</mi>
<mi>x</mi>
</msub>
</mrow>
</mtd>
<mtd>
<mrow>
<msub>
<mi>ny</mi>
<mi>x</mi>
</msub>
</mrow>
</mtd>
<mtd>
<mrow>
<msub>
<mi>nz</mi>
<mi>x</mi>
</msub>
</mrow>
</mtd>
<mtd>
<msub>
<mi>p</mi>
<mi>x</mi>
</msub>
</mtd>
</mtr>
<mtr>
<mtd>
<mrow>
<msub>
<mi>nx</mi>
<mi>y</mi>
</msub>
</mrow>
</mtd>
<mtd>
<mrow>
<msub>
<mi>ny</mi>
<mi>y</mi>
</msub>
</mrow>
</mtd>
<mtd>
<mrow>
<msub>
<mi>nz</mi>
<mi>y</mi>
</msub>
</mrow>
</mtd>
<mtd>
<msub>
<mi>p</mi>
<mi>y</mi>
</msub>
</mtd>
</mtr>
<mtr>
<mtd>
<mrow>
<msub>
<mi>nx</mi>
<mi>z</mi>
</msub>
</mrow>
</mtd>
<mtd>
<mrow>
<msub>
<mi>ny</mi>
<mi>z</mi>
</msub>
</mrow>
</mtd>
<mtd>
<mrow>
<msub>
<mi>nz</mi>
<mi>z</mi>
</msub>
</mrow>
</mtd>
<mtd>
<msub>
<mi>p</mi>
<mi>z</mi>
</msub>
</mtd>
</mtr>
<mtr>
<mtd>
<mn>0</mn>
</mtd>
<mtd>
<mn>0</mn>
</mtd>
<mtd>
<mn>0</mn>
</mtd>
<mtd>
<mn>1</mn>
</mtd>
</mtr>
</mtable>
</mfenced>
<mfenced open = "[" close = "]">
<mtable>
<mtr>
<mtd>
<msub>
<mi>x</mi>
<mi>w</mi>
</msub>
</mtd>
</mtr>
<mtr>
<mtd>
<msub>
<mi>y</mi>
<mi>w</mi>
</msub>
</mtd>
</mtr>
<mtr>
<mtd>
<msub>
<mi>z</mi>
<mi>w</mi>
</msub>
</mtd>
</mtr>
<mtr>
<mtd>
<mn>1</mn>
</mtd>
</mtr>
</mtable>
</mfenced>
</mrow>
其中，xc，yc，zc表示空间任意一点在TOF深度相机三维测量坐标系下的坐标，xw，yw，zw表示该点在空间坐标系OXYZ下的坐标，nxx，nxy，nxz表示空间坐标系X轴在TOF深度相机三维测量坐标系下的方向向量，nyx，nyy，nyz表示空间坐标系Y轴在TOF深度相机三维测量坐标系下的方向向量，nzx，nzy，nzz表示空间坐标系Z轴在TOF深度相机三维测量坐标系下的方向向量，px，py，pz表示空间坐标系的坐标原点在TOF深度相机三维测量坐标系下的坐标；
(2)调整TOF深度相机和球体目标的初始位置，使得球体目标表面与TOF深度相机镜头表面紧贴，且保证TOF深度相机镜头光轴通过球体目标球心，球体目标半径为R，则初始位置球心位置坐标为Z0＝R；
(3)控制Z方向运动平移台带动TOF深度相机沿着Z方向运动，产生Z方向精确位移，到达Z方向确定位置sz，此时，球心位置变为Z1＝sz+R，Z方向运动完成；
(4)控制X方向运动平移台和Y方向运动平移台，带动TOF深度相机在sz位置处，在XY平面内进行遍历运动，形成虚拟多球体目标；在XY平面内运动中的每个位置处，球体目标的球心三维空间位置坐标可以由球体半径R以及运动平移台的运动位置唯一确定，如下式所示：
Pij(xij,yij,zij)＝Pij(sxij,syij,sz+R)
其中，i和j分别为TOF深度相机在XY平面内X方向和Y方向运动的位置序号；Pij(xij,yij,zij)为球体目标球心的三维空间位置坐标，即：球心在空间坐标系OXYZ下的三维坐标；sxij为X方向运动平移台在X方向产生的位移；syij为Y方向运动平移台在Y方向产生的位移；sz为Z方向运动平移台在Z方向产生的位移；R为球体目标的半径；TOF深度相机对球体目标进行三维球心定位测量，首先测量得到球体目标表面各个点的三维测量坐标值：pijk(xijk,yijk,zijk)，其中，k＝1,2,3……,N为球体目标表面测量点的序号，N为球体目标表面测量点的个数；然后对球体目标表面各个点的三维测量坐标值采用最小二乘拟合方法对球体目标的球心坐标进行高精度定位，得到球心在TOF深度相机三维测量坐标系OcXcYcZc下的坐标为：Pij’(xij’,yij’,zij’)，其中，i＝1,2,3,……，j＝1,2,3,……分别为对应的TOF深度相机在XY平面内X方向和Y方向运动的位置序号；
(5)遍历整个XY平面，得到该Z方向位置处所有的XY位置处球体目标球心的三维测量值与空间位置坐标，带入上述坐标转换关系中，解线性方程组即实现对TOF深度相机的三维坐标的标定。
2.根据权利要求1所述的标定方法，其特征在于：所述三维运动平移台采用电控平移台实现三维运动。
3.根据权利要求1所述的标定方法，其特征在于：所述球体目标是标准球体。
4.根据权利要求1所述的标定方法，其特征在于：所述球体目标为整体有超过50％的部分是具有球面形状的目标。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410650844.0A CN104316083B (zh) | 2014-11-15 | 2014-11-15 | 一种虚拟多球体球心定位的tof深度相机三维坐标标定装置和方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410650844.0A CN104316083B (zh) | 2014-11-15 | 2014-11-15 | 一种虚拟多球体球心定位的tof深度相机三维坐标标定装置和方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN104316083A CN104316083A (zh) | 2015-01-28 |
| CN104316083B true CN104316083B (zh) | 2017-09-12 |
Family
ID=52371346
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410650844.0A Active CN104316083B (zh) | 2014-11-15 | 2014-11-15 | 一种虚拟多球体球心定位的tof深度相机三维坐标标定装置和方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104316083B (zh) |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106918336A (zh) * | 2015-12-25 | 2017-07-04 | 积晟电子股份有限公司 | 惯性测量模块及其惯性测量方法 |
| CN106501309B (zh) * | 2016-12-16 | 2024-03-26 | 中国科学院工程热物理研究所 | 用于抽运探测热反射系统的无物镜测量装置 |
| CN109751992B (zh) * | 2017-11-03 | 2021-07-20 | 北京凌宇智控科技有限公司 | 面向室内三维空间的定位校正方法、定位方法及其设备 |
| CN108759666B (zh) * | 2018-05-28 | 2020-06-23 | 武汉点睛三维科技有限公司 | 一种基于飞行时间三维相机的尺寸测量方法 |
| CN109079581B (zh) * | 2018-07-26 | 2020-04-24 | 大连理工大学 | 一种数控机床动态轮廓误差视觉测量装置 |
| CN111380668B (zh) * | 2018-12-27 | 2022-10-11 | 浙江舜宇智能光学技术有限公司 | 一种深度相机的精度检测系统及其精度检测方法 |
| CN110378901B (zh) * | 2019-08-16 | 2023-08-08 | 扬州大学 | 一种基于深度相机的球形花木中心测量与修剪控制方法 |
| KR102217282B1 (ko) * | 2019-08-22 | 2021-02-18 | (주)인스케이프 | Tof 기능을 포함하는 카메라 모듈의 검사 장치 |
| CN114347027B (zh) * | 2022-01-08 | 2022-12-13 | 天晟智享(常州)机器人科技有限公司 | 一种3d相机相对于机械臂的位姿标定方法 |
| CN117664025A (zh) * | 2023-12-01 | 2024-03-08 | 中国航空工业集团公司北京长城计量测试技术研究所 | 一种大尺寸非接触测量设备校准用曲面标准器及校准方法 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1399169A (zh) * | 2002-09-03 | 2003-02-26 | 东南大学 | 实现三维像机多视角数据采集及对齐复位的方法 |
| CN102609941A (zh) * | 2012-01-31 | 2012-07-25 | 北京航空航天大学 | 基于ToF深度相机的三维注册方法 |
| CN102663712A (zh) * | 2012-04-16 | 2012-09-12 | 天津大学 | 基于飞行时间tof相机的深度计算成像方法 |
Family Cites Families (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002202122A (ja) * | 2001-01-05 | 2002-07-19 | Olympus Optical Co Ltd | ２次元距離画像センサのキャリブレーション方法 |
| JP2010237189A (ja) * | 2009-03-11 | 2010-10-21 | Fujifilm Corp | ３次元形状測定方法および装置 |
-
2014
- 2014-11-15 CN CN201410650844.0A patent/CN104316083B/zh active Active
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1399169A (zh) * | 2002-09-03 | 2003-02-26 | 东南大学 | 实现三维像机多视角数据采集及对齐复位的方法 |
| CN102609941A (zh) * | 2012-01-31 | 2012-07-25 | 北京航空航天大学 | 基于ToF深度相机的三维注册方法 |
| CN102663712A (zh) * | 2012-04-16 | 2012-09-12 | 天津大学 | 基于飞行时间tof相机的深度计算成像方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN104316083A (zh) | 2015-01-28 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN104315995B (zh) | 基于虚拟多立方体标准目标的tof深度相机三维坐标标定装置和方法 | |
| CN104316083B (zh) | 一种虚拟多球体球心定位的tof深度相机三维坐标标定装置和方法 | |
| CN108844459B (zh) | 一种叶片数字化样板检测系统的标定方法及装置 | |
| Hu et al. | Extrinsic calibration of 2-D laser rangefinder and camera from single shot based on minimal solution | |
| CN106595528B (zh) | 一种基于数字散斑的远心显微双目立体视觉测量方法 | |
| CN103759670B (zh) | 一种基于数字近景摄影的物体三维信息获取方法 | |
| CN101876532B (zh) | 测量系统中的摄像机现场标定方法 | |
| Zhang et al. | A robust and rapid camera calibration method by one captured image | |
| Luna et al. | Calibration of line-scan cameras | |
| CN106990776B (zh) | 机器人归航定位方法与系统 | |
| CN104501779A (zh) | 基于多站测量的无人机高精度目标定位方法 | |
| CN104616292A (zh) | 基于全局单应矩阵的单目视觉测量方法 | |
| Kersten et al. | Comparative geometrical investigations of hand-held scanning systems | |
| CN109859272A (zh) | 一种自动对焦双目摄像头标定方法及装置 | |
| CN110378969A (zh) | 一种基于3d几何约束的汇聚式双目相机标定方法 | |
| Fernandez et al. | Planar-based camera-projector calibration | |
| CN110415286A (zh) | 一种多飞行时间深度相机系统的外参标定方法 | |
| CN102881040A (zh) | 一种数码相机移动拍摄三维重建方法 | |
| CN114078163A (zh) | 激光雷达与可见光相机的精确标定方法 | |
| CN112330740A (zh) | 一种基于单目视频的伪双目动态测距方法 | |
| Liu et al. | GWM-view: gradient-weighted multi-view calibration method for machining robot positioning | |
| He et al. | <? A3B2 twb. 26w?> Calibration method for a central catadioptric-perspective camera system | |
| Zou et al. | Flexible extrinsic parameter calibration for multicameras with nonoverlapping field of view | |
| Liu et al. | Flexible Calibration Method for A Quad-directional Stereo Vision Sensor Based on Unconstraint 3D Target | |
| Hwang et al. | Camera calibration and 3D surface reconstruction for multi-camera semi-circular DIC system |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |