CN104316083A - 一种虚拟多球体球心定位的tof深度相机三维坐标标定装置和方法 - Google Patents

一种虚拟多球体球心定位的tof深度相机三维坐标标定装置和方法 Download PDF

Info

Publication number
CN104316083A
CN104316083A CN201410650844.0A CN201410650844A CN104316083A CN 104316083 A CN104316083 A CN 104316083A CN 201410650844 A CN201410650844 A CN 201410650844A CN 104316083 A CN104316083 A CN 104316083A
Authority
CN
China
Prior art keywords
depth camera
dimensional
tof depth
target
coordinate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410650844.0A
Other languages
English (en)
Other versions
CN104316083B (zh
Inventor
敖磊
刘永奇
董鑫
熊胜军
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Academy of Opto Electronics of CAS
Original Assignee
Academy of Opto Electronics of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Academy of Opto Electronics of CAS filed Critical Academy of Opto Electronics of CAS
Priority to CN201410650844.0A priority Critical patent/CN104316083B/zh
Publication of CN104316083A publication Critical patent/CN104316083A/zh
Application granted granted Critical
Publication of CN104316083B publication Critical patent/CN104316083B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C25/00Manufacturing, calibrating, cleaning, or repairing instruments or devices referred to in the other groups of this subclass
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01MTESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
    • G01M11/00Testing of optical apparatus; Testing structures by optical methods not otherwise provided for

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Manufacturing & Machinery (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明涉及一种虚拟多球体球心定位的TOF深度相机三维坐标标定装置和方法,包括三维运动平移台,TOF深度相机,球体目标和背景板;充分利用球体目标在不同测量角度处的各向不变性,采用相互正交的三个一维运动平移台产生三维方向上的若干次运动,构成具有复杂形状的虚拟多球体目标,该目标在TOF深度相机的不同测量角度处不会产生多表面特征,易于对目标中心进行高精度定位,获取虚拟多球体目标的球心三维坐标测量值及空间位置后即可实现对TOF深度相机的三维坐标标定。本发明降低了单次TOF深度相机对球体目标中心点特征识别的难度和测量误差,有效提高TOF深度相机的三维测量精度,并能灵活设置虚拟标准球体的中心位置和球体个数,易于实现全过程高精度自动化标定。

Description

一种虚拟多球体球心定位的TOF深度相机三维坐标标定装置和方法
技术领域
本发明属于光学计量及标定技术领域,特别涉及一种虚拟多球体球心定位的无扫描激光三维TOF(Time-of-Flight)深度相机的标定装置和方法。
背景技术
随着光学测量和计算机视觉技术的日益改进和提升,先进制造技术的发展和产品需求的多样化对复杂物体表面的三维形貌信息的测量需求不断增长。作为新一代的光学三维测量技术,TOF深度相机能够实时获取空间目标的灰度信息及每个像素点对应的深度信息,具有实时性好、测量精度适中、体积小、重量轻等优势,被迅速应用于移动机器人的导航和地图创建、空间探测机器人、工业加工制造等领域。
为了消除由于空间坐标系和测量坐标系之间的不一致性引起的系统误差,三维坐标标定是TOF深度相机进行高精度光学三维测量中至关重要的一步,主要是通过获取标准物体目标的三维空间特征参数,进而求得TOF深度相机三维测量坐标到空间坐标的坐标变换关系完成三维坐标的标定。因而,选取的标准物体的空间位置及形状参数的高精度提取和识别是TOF深度相机进行高精度三维测量的重要保证,并且TOF深度相机标定使用的目标应当充满整个视场,才能得到TOF深度相机视场中心和边缘的三维坐标标定结果,由此产生了各种对三维成像相机的标定方法,主要有以下两类:
(1)基于平面标志物的三维坐标标定方式,如采用棋盘格的标定方式(1.Zhengyou,Zhang.A flexible new technique for camera calibration.Technical Report MSR-TR-98-71,Microsoft Research.1998.2.李兴东,陈超,李满天,孙立宁.飞行时间法三维摄像机标定与误差补偿.机械与电子.2013(11):37-40;3.潘华东.飞行时间法无扫描三维成像摄像机的机理和特性研究.浙江大学博士学位论文.2010.04;4.专利201210021469.4“基于TOF深度相机的三维注册方法”;5.Young Min Kim,Derek Chan,Christian Theobalt,Sebastian Thrun.Design and Calibration of a Multi-view TOF Sensor Fusion System.Computer Vision and Pattern Recognition Workshops,2008.CVPRW’08.IEEE ComputerSociety Conference.June 23-28,2008.Anchorage,AK;6.Stefan Fuchs,Gerd Hirzinger.Extrinsic and Depth Calibration of TOF-cameras.Computer Vision and Pattern Recognition,2008.CVPR 2008.IEEE Conference.June 23-28,2008.Anchorage,AK;7.Sung-Yeol Kim,Woon Cho,Andreas Koschan,and Mongi A.Abidi.Depth Data Calibration andEnhancement of Time-of-flight Video-plus-Depth Camera.Future of InstrumentationInternational Workshop(FIIW).November 7-8,2011.Oak Ridge,TN;8.Marvin Lindner,Ingo Schiller,Andreas Kolb,Reinhard Koch.Time-of-Flight Sensor Calibration for AccurateRange Sensing.Computer Vision and Image Understanding.2010(114):1318-1328;9.MilesHansard,Radu Horaud,Michel Amat,Georgios Evangelidis.Automatic Detection ofCalibration Grids in Time-of-flight Images.Computer Vision and Image Understanding.2014(121):108-118),或采用圆点阵列的标定方式(1.蔡珲.视觉测量中的摄像机标定与三维重建方法研究.哈尔滨工业大学硕士学位论文.2013.07;2.Jiyoung Jung,YekeunJeong,Jaesik Park,Hyowon Ha,James Dokyoon Kim,and In-So Kweon.A Novel 2.5DPattern for Extrinsic Calibration of ToF and Camera Fusion System.2011 IEEE/RSJInternational Conference on Intelligent Robots and Systems.September 25-30,2011.SanFrancisco,CA,USA;3.Frederic Garcia,Djamila Aouada,Bruno Mirbach,andOttersten.Real-Time Distance-Dependent Mapping for a Hybrid ToF Multi-Camera Rig.IEEE JOURNAL OF SELECTED TOPICS IN SIGNAL PROCESSING,2012.6(5):425-436),这些方法对多个角度放置的黑白相间平面棋盘格图形(或圆点阵列图形)进行多次拍摄,然后计算棋盘格的不同角度位置处的各个角点位置(或圆点阵列各个圆点中心位置),再根据空间坐标变换关系实现对TOF深度相机的标定,该方法标定精度较高,应用较为广泛,但该方法采集次数多,每次数据处理过程较复杂,并且对多个角点的提取误差将直接累积到最终的标定结果中,标定精度难以进一步提高,进而直接影响TOF深度相机的三维测量精度;
(2)基于复杂特征立体标志物的三维坐标标定方式,如采用具有不同深度特征的立方块或多层台阶等立体物作为标准测量对象进行TOF深度相机的标定方法(1.Tsai,R.A versatile camera calibration technique for high-accuracy 3D machine vision metrologyusing off-the-shelf TV cameras and lenses.IEEE Journal of Robotics and Automation.1987.RA-3(4):323-344;2.徐德,谭民,李原.机器人视觉测量与控制.国防工业出版社.2011.05;3.Filiberto Chiabrando,Roberto Chiabrando,Dario Piatti,Fulvio Rinaudo.Sensorsfor 3D Imaging:Metric Evaluation and Calibration of a CCD/CMOS Time-of-Flight Camera.Sensors.2009(9):10080-10096;4.Stuart Robson,J.-Angelo Beraldin,Andrew Brownhill andLindsay MacDonald.Artefacts for Optical Surface Measurement.Proc.of SPIE Vol.8085,Videometrics,Range Imaging,and Applications XI,80850C.May 23,2011.Munich,Germany;5.专利201210352365.1“基于计算机视觉立方体标定的三维测量方法”),相对于基于平面标志物的三维坐标标定方式,这类方法虽然能够直接采集得到复杂特征物体面型上不同位置处的不同深度信息,进而解算得到TOF深度相机的测量误差进行补偿,但由于需要同时对采集得到的复杂特征进行提取和识别,同时,目标偏离视场中心后,视场中获取的目标具有多个表面,数据计算量大且提取识别误差将累积到最终的标定结果中,TOF深度相机的三维坐标标定精度和测量精度也难以进一步提高。
由以上分析可以看出,在实际应用中,目前广泛采用的TOF深度相机三维坐标标定方法均存在如下不足之处:TOF深度相机单次采集时出现在视场中的目标特征数量较多,尤其是对于基于复杂特征立体标志物的三维坐标标定方式,目标偏离视场中心时,视场中获取的立体目标呈现多表面特征(如长方体目标在偏离视场中心后将被探测出多余表面形貌),且该多表面特征随着测量角度的不同而变化,使得数据处理过程长,目标识别和特征提取复杂度高,由此直接导致了目标识别和特征提取的测量误差累积进入了标定结果中,大大影响TOF深度相机标定结果的准确性和重复性,从而限制了TOF深度相机的应用范围,这是目前现有标定方案本身的不足之处,也是当前TOF深度相机在实际应用中未能解决的重要问题。
发明内容
本发明的技术解决问题:克服上述已有的TOF深度相机标定方案中存在的不足,充分利用球体目标在不同测量角度处的各向不变性,提供一种虚拟多球体球心定位的TOF深度相机三维坐标标定装置和方法,该标定装置包括三维运动平移台,TOF深度相机,球体目标以及背景板;该方法利用相互正交的三个一维运动平移台,对X、Y、Z三个正交方向作出运动。通过设计合理的运动方式,每个运动位置处TOF深度相机视场中的单个球体目标组合,构成一个具有多个球体轮廓的虚拟多球体目标,该目标在不同测量角度处不会产生多表面特征,易于对球体目标中心进行高精度定位,获取球心的三维坐标测量值及空间位置即可求得三维坐标标定的坐标变换关系,实现对TOF深度相机的三维坐标标定。本发明充分利用球体目标在不同测量角度处的各向不变性,极大降低了单次TOF深度相机对球体目标中心点特征识别的难度和测量误差,有效提高TOF深度相机的三维测量精度,并能够灵活设置虚拟多球体目标的球心位置和球体个数,易于实现全过程高精度自动化标定。
本发明采用的技术解决方案是:一种虚拟多球体球心定位的TOF深度相机三维坐标标定装置,包括三维运动平移台,TOF深度相机,球体目标以及背景板。其中,三维运动平移台的连接方式为三个一维运动平移台在三维方向两两正交组合连接;TOF深度相机固定在运动平移台上,随三维运动平移台一起进行三维运动;背景板为平面板,与TOF深度相机的光轴垂直,球体目标固定于背景板上。
本发明还提供了虚拟多球体球心定位的TOF深度相机三维坐标标定方法,该方法包括以下步骤:
(1)首先确定空间坐标系OXYZ,三维平移台的三个平移轴定义为X、Y、Z三个方向,坐标原点O定位为TOF深度相机镜头中心,三维运动平移台安装底面定义为XZ平面,与TOF深度相机安装底面平行;Z方向为TOF深度相机光轴方向,与Z方向平移台平移轴运动方向平行;Y方向为三维运动平移台安装底面的垂直方向;X方向为右手坐标系定义的方向;空间坐标系OXYZ与TOF深度相机三维测量坐标系OcXcYcZc之间的三维坐标转换关系如下所示:
x c y c z c 1 = nx x ny x nz x p x nx y ny y nz y p y nx z ny z nz z p z 0 0 0 1 x w y w z w 1
其中,xc,yc,zc表示空间任意一点在TOF深度相机三维测量坐标系下的坐标,xw,yw,zw表示该点在空间坐标系OXYZ下的坐标,nxx,nxy,nxz表示空间坐标系X轴在TOF深度相机三维测量坐标系下的方向向量,nyx,nyy,nyz表示空间坐标系Y轴在TOF深度相机三维测量坐标系下的方向向量,nzx,nzy,nzz表示空间坐标系Z轴在TOF深度相机三维测量坐标系下的方向向量,px,py,pz表示空间坐标系的坐标原点在TOF深度相机三维测量坐标系下的坐标;
(2)调整TOF深度相机和球体目标的初始位置,使得球体目标表面与TOF深度相机镜头表面紧贴,且保证TOF深度相机镜头光轴通过球体目标球心,球体目标半径为R,则初始位置球心位置坐标为Z0=R;
(3)控制Z方向运动平移台带动TOF深度相机沿着Z方向运动,产生Z方向精确位移,到达Z方向确定位置sz,此时,球心位置变为Z1=sz+R,Z方向运动完成;
(4)控制X方向运动平移台和Y方向运动平移台,带动TOF深度相机在sz位置处,在XY平面内进行遍历运动,形成虚拟多球体目标;在XY平面内运动中的每个位置处,球体目标的球心三维空间位置坐标可以由球体半径R以及运动平移台的运动位置唯一确定,如下式所示:
Pij(xij,yij,zij)=Pij(sxij,syij,sz+R)
其中,i(i=1,2,3,……)和j(j=1,2,3,……)分别为TOF深度相机在XY平面内X方向和Y方向运动的位置序号;Pij(xij,yij,zij)为球体目标球心的三维空间位置坐标,即:球心在空间坐标系OXYZ下的三维坐标;sxij为X方向运动平移台在X方向产生的位移;syij为Y方向运动平移台在Y方向产生的位移;sz为Z方向运动平移台在Z方向产生的位移;R为球体目标的半径。
(5)TOF深度相机对球体目标进行三维球心定位测量,首先测量得到球体目标表面各个点的三维测量坐标值:pijk(xijk,yijk,zijk),其中,k=1,2,3……,N为球体目标表面测量点的序号,N为球体目标表面测量点的个数。然后对球体目标表面各个点的三维测量坐标值采用最小二乘拟合方法对球体目标的球心坐标进行高精度定位,得到球心在TOF深度相机三维测量坐标系OcXcYcZc下的坐标为:Pij’(xij’,yij’,zij’),其中,i(i=1,2,3,……)和j(j=1,2,3,……)分别为对应的TOF深度相机在XY平面内X方向和Y方向运动的位置序号;
(6)遍历整个XY平面,得到该Z方向位置处所有的XY位置处球体目标球心的三维测量值与空间位置坐标。带入上述坐标转换关系中,解线性方程组即可实现对TOF深度相机的三维坐标的标定。
本发明与现有技术相比的优点在于:
(1)本发明充分利用相互正交的三轴高精度运动平移台产生三维方向上的若干次运动,每个运动位置处TOF深度相机视场中的单一球体目标组合起来,构成具有复杂形状的虚拟多球体目标,这是区别于现有TOF深度相机三维坐标标定技术的创新点之一;
(2)在本发明中,每个运动位置处TOF深度相机视场中仅有一个球体目标,并且背景简单,使得每次TOF深度相机对球体目标识别和提取的数据处理过程简单,并且球体目标在偏离视场中心位置不会产生多余表面,可以采用常规的球心拟合算法实现简单球目标的高精度球心定位,大大降低了目标特征提取识别的难度和误差,这是区别于现有TOF深度相机标定技术的创新点之二;
(3)本发明中,通过采用相互正交的三维高精度运动平移台的三维运动,构造了一个具有复杂形状的虚拟多球体目标,在TOF深度相机视场的不同位置,获取球体中心的三维测量结果与球心的三维空间位置,从而可以计算完成TOF深度相机的三维坐标标定,满足了TOF深度相机三维坐标标定的需求,降低了对复杂目标特征识别的误差,消除了多表面特征对目标识别的影响,提高了TOF深度相机的三维坐标标定精度,减小了由于空间坐标系和测量坐标系不对应引入的系统误差,进而提高了TOF深度相机的三维测量精度,而且测量过程和数据处理都明显简化,易于实现全程自动化标定,实用性强。
附图说明
图1是本发明装置的结构示意图;
图2是本发明装置中相互正交的三维运动平移台及其TOF深度相机的结构示意图;
图3是本发明中运动平移台3×3运动时球体目标在TOF深度相机视场中成像的示意图;
图4是本发明中运动平移台3×3运动后构成的虚拟多球体目标的结构示意图;
图5是本发明中虚拟多球体目标球心在XY平面内的空间位置坐标示意图;
图6是本发明中球体目标为整体有超过50%的部分是具有球面形状的目标的结构示意图。
具体实施方式
下面结合图和实施例对本发明的基于虚拟多立方体标准目标的TOF深度相机标定装置和方法进行详细描述:
本发明充分利用球体目标在不同测量角度处的各向不变性,采用相互正交的三个一维运动平移台产生三维方向上的若干次运动,通过设计合理的运动方式,构成一个具有复杂形状的虚拟多球体目标,该目标在TOF深度相机的不同测量角度处不会产生多表面特征,易于对目标中心进行高精度定位,获取虚拟多球体目标的球心三维坐标测量值及空间位置后即可实现对TOF深度相机的三维坐标标定。
如图1所示,本发明的装置由Z方向运动平移台1,X方向运动平移台2,Y方向运动平移台3,TOF深度相机4,球体目标5以及背景板6等构成。其中:如图2所示,X方向运动平移台2、Y方向运动平移台3和Z方向运动平移台1的连接方式为空间三维方向两两正交连接,Z方向运动平移台1的运动方向与TOF深度相机4的光轴方向平行,TOF深度相机4固定在Y方向运动平移台3上,TOF深度相机4的安装底面与Z方向运动平移台安装底面平行,TOF深度相机4随三个运动平移台一起进行三维运动;背景板6为平面板,与TOF深度相机4的光轴垂直,球体目标5固定于背景板6上。
下面详细说明本发明所述的方法:
(1)首先确定空间坐标系OXYZ,三维平移台的三个平移轴定义为X、Y、Z三个方向,坐标原点O定位为TOF深度相机4的镜头中心,三维运动平移台安装底面定义为XZ平面,与TOF深度相机4安装底面平行;Z方向为TOF深度相机4光轴方向,与Z方向平移台1平移轴运动方向平行;Y方向为三维运动平移台安装底面的垂直方向;X方向为右手坐标系定义的方向;空间坐标系OXYZ与TOF深度相机4三维测量坐标系OcXcYcZc之间的三维坐标转换关系如下所示:
x c y c z c 1 = nx x ny x nz x p x nx y ny y nz y p y nx z ny z nz z p z 0 0 0 1 x w y w z w 1
其中,xc,yc,zc表示空间任意一点在TOF深度相机4三维测量坐标系下的坐标,(xw,yw,zw)表示该点在空间坐标系OXYZ下的坐标,nxx,nxy,nxz表示空间坐标系X轴在TOF深度相机4三维测量坐标系下的方向向量,nyx,nyy,nyz表示空间坐标系Y轴在TOF深度相机4三维测量坐标系下的方向向量,nzx,nzy,nzz表示空间坐标系Z轴在TOF深度相机4三维测量坐标系下的方向向量,px,py,pz表示空间坐标系的坐标原点在TOF深度相机4三维测量坐标系下的坐标;
(2)调整TOF深度相机4和球体目标5的初始位置,使得球体目标5表面与TOF深度相机4镜头表面紧贴,且保证TOF深度相机4的镜头光轴通过球体目标球心,球体目标5的半径为R,则初始位置球心位置坐标为Z0=R;
(3)控制Z方向运动平移台1带动TOF深度相机4沿着Z方向运动,产生Z方向精确位移,到达Z方向确定位置sz,此时,球心位置为Z1=sz+R,Z方向运动完成;
(4)控制X方向运动平移台2和Y方向运动平移台3,带动TOF深度相机4在sz位置处,在XY平面内进行遍历运动,形成虚拟多球体目标;在XY平面内运动中的每个位置处,球体目标5的球心三维空间位置坐标可以由球体半径R以及运动平移台的运动位置唯一确定,如下式所示:
Pij(xij,yij,zij)=Pij(sxij,syij,sz+R)
其中,i(i=1,2,3,……)和j(j=1,2,3,……)分别为TOF深度相机4在XY平面内X方向和Y方向运动的位置序号;Pij(xij,yij,zij)为球体目标5球心的三维空间位置坐标,即:球心在空间坐标系OXYZ下的三维坐标;sxij为X方向运动平移台2在X方向产生的位移;syij为Y方向运动平移台3在Y方向产生的位移;sz为Z方向运动平移台1在Z方向产生的位移;R为球体目标5的半径。
(5)TOF深度相机4对球体目标5进行三维球心定位测量,首先测量得到球体目标5表面各个点的三维测量坐标值:pijk(xijk,yijk,zijk),其中,k=1,2,3……,N为球体目标5表面测量点的序号,N为球体目标5表面测量点的个数。然后对球体目标5表面各个点的三维测量坐标值采用最小二乘拟合方法对球体目标5的球心坐标进行高精度定位,得到球心在TOF深度相机4三维测量坐标系OcXcYcZc下的坐标为:Pij’(xij’,yij’,zij’),其中,i(i=1,2,3,……)和j(j=1,2,3,……)分别为对应的TOF深度相机4在XY平面内X方向和Y方向运动的位置序号;
(6)遍历整个XY平面,得到该Z方向位置处所有的XY位置处球体目标5球心的三维测量值与空间位置坐标。带入上述坐标转换关系中,解线性方程组即可实现对TOF深度相机的三维坐标的标定。
可见,通过采用相互正交的三轴运动平移台的三维运动,构造了一个虚拟多球体组成的具有复杂形状的标准目标,在TOF深度相机4视场的不同位置,获取球体目标5中心的三维测量结果与球体目标5中心的精确空间位置,从而计算完成三维坐标标定,满足了TOF深度相机4三维坐标标定的需求,降低了复杂目标特征识别误差,提高了TOF深度相机4的三维坐标标定精度,而且测量过程和数据处理都明显简化,易于实现全程自动化标定,实用性强。
实施例1:
以TOF深度相机4在500mm距离位置处,X方向运动平移台2和Y方向运动平移台3组合进行XY平面内的3×3运动进行三维坐标标定为例,详细描述本发明介绍的标定装置和方法如下:
(1)首先确定空间坐标系OXYZ,三维平移台的三个平移轴定义为X、Y、Z三个方向,坐标原点O定位为TOF深度相机4的镜头中心,三维运动平移台安装底面定义为XZ平面,与TOF深度相机4安装底面平行;Z方向为TOF深度相机4光轴方向,与Z方向平移台1平移轴运动方向平行;Y方向为三维运动平移台安装底面的垂直方向;X方向为右手坐标系定义的方向;空间坐标系OXYZ与TOF深度相机4三维测量坐标系OcXcYcZc之间的三维坐标转换关系如下所示:
x c y c z c 1 = nx x ny x nz x p x nx y ny y nz y p y nx z ny z nz z p z 0 0 0 1 x w y w z w 1
其中,(xc,yc,zc)表示空间任意一点在TOF深度相机4三维测量坐标系下的坐标,xw,yw,zw表示该点在空间坐标系OXYZ下的坐标,nxx,nxy,nxz表示空间坐标系X轴在TOF深度相机4三维测量坐标系下的方向向量,nyx,nyy,nyz表示空间坐标系Y轴在TOF深度相机4三维测量坐标系下的方向向量,nzx,nzy,nzz表示空间坐标系Z轴在TOF深度相机4三维测量坐标系下的方向向量,px,py,pz表示空间坐标系的坐标原点在TOF深度相机4三维测量坐标系下的坐标。
(2)调整TOF深度相机4和球体目标5的初始位置,使得球体目标5表面与TOF深度相机4镜头表面紧贴,且保证TOF深度相机4的镜头光轴通过球体目标球心,球体目标5的半径为R=75mm,则初始位置球心位置坐标为Z0=R=75mm;
(3)控制Z方向运动平移台1带动TOF深度相机4沿着Z方向运动,产生Z方向精确位移,到达Z方向确定位置sz=500mm,此时,球心位置为Z1=sz+R=575mm,Z方向运动完成;
(4)控制X方向运动平移台2和Y方向运动平移台3,带动TOF深度相机4在sz位置处,在XY平面内进行3×3遍历运动,形成虚拟多球体目标在TOF深度相机4视场内成像示意图如图3所示,虚拟多球体目标示意图如图4所示;在XY平面内运动中的每个位置处,球体目标5的球心三维空间位置坐标可以由球体半径R以及运动平移台的运动位置唯一确定,虚拟多球体目标球心在XY平面内的空间位置坐标示意图如图5所示,如下式所示:
Pij(xij,yij,zij)=Pij(sxij,syij,sz+R)
其中,i(i=1,2,3,……)和j(j=1,2,3,……)分别为TOF深度相机4在XY平面内X方向和Y方向运动的位置序号;Pij(xij,yij,zij)为球体目标5球心的三维空间位置坐标,即:球心在空间坐标系OXYZ下的三维坐标;sxij为X方向运动平移台2在X方向产生的位移;syij为Y方向运动平移台3在Y方向产生的位移;sz为Z方向运动平移台1在Z方向产生的位移;R为球体目标5的半径。
(5)TOF深度相机4对球体目标5进行三维球心定位测量,首先测量得到球体目标5表面点的三维测量坐标值:pijk(xijk,yijk,zijk),其中,k=1,2,3……,N为球体目标5表面测量点的序号,N为球体目标5表面测量点的个数,这里,球体目标5表面的测量点的个数N≥4,本实施例中取N=10,则k=1,2,3,……,10;然后对球体目标5表面点的三维测量坐标值采用最小二乘拟合方法对球体目标5的球心坐标进行高精度定位,得到球心在TOF深度相机4三维测量坐标系OcXcYcZc下的三维坐标为:Pij’(xij’,yij’,zij’),其中,i(i=1,2,3)和j(j=1,2,3)分别为对应的TOF深度相机4在XY平面内X方向和Y方向运动的位置序号;
(6)遍历整个XY平面,得到该Z方向位置处所有的XY位置处球体目标5球心的三维测量值与空间位置坐标。带入上述坐标转换关系中,解线性方程组即可实现对TOF深度相机4的三维坐标的标定。
本实施例中,X方向运动平移台2、Y方向运动平移台3和Z方向运动平移台1均采用高精度电控平移台,定位精度均优于0.05mm,其中,X方向运动平移台2行程优于2m,Y方向运动平移台3行程优于1m,Z方向运动平移台1行程优于0.4m;TOF深度相机4三维测量距离为0.5m~5m,三维测量精度为±10mm,球体目标5为半径R=75mm的球体目标。由于电控平移台的定位精度远远高于TOF深度相机4的测量精度,因此运动平移台自身的定位误差可以忽略。标定实验结果表明,整个测量过程实现了全程自动化,并且采用本发明提供的标定方法标定后的TOF深度相机的测量精度由±10mm提高到了优于4.15mm,实现了TOF深度相机的自动化高精度三维坐标标定。
实施例2:
如图6所示,球体目标5为整体有超过50%的部分是具有球面形状的目标,本实施例的其他部件及工作原理均与实施例1相同。
总之,本发明降低了单次TOF深度相机对球体目标中心点特征识别的难度和测量误差,有效提高TOF深度相机的三维测量精度,并能够灵活设置虚拟标准球体的中心位置和球体个数,易于实现全过程高精度自动化标定。
提供以上实施例仅仅是为了描述本发明的目的,而并非要限制本发明的范围。本发明的范围由所附权利要求限定。不脱离本发明的精神和原理而做出的各种等同替换和修改,均应涵盖在本发明的范围之内。

Claims (5)

1.一种虚拟多球体球心定位的TOF深度相机三维坐标标定装置,其特征在于包括:三维运动平移台,TOF深度相机,球体目标以及背景板;其中,三维运动平移台的连接方式为三个一维运动平移台在三维方向两两正交组合连接;TOF深度相机固定在运动平移台上,随三维运动平移台一起进行三维运动;背景板为平面板,与TOF深度相机的光轴垂直,球体目标固定于背景板上。
2.根据权利要求1所述的装置,其特征在于:所述三维运动平移台采用电控平移台实现三维运动。
3.根据权利要求1所述的装置,其特征在于:所述球体目标是标准球体。
4.根据权利要求1所述的装置,其特征在于:所述球体目标为整体有超过50%的部分是具有球面形状的目标。
5.一种虚拟多球体球心定位的TOF深度相机三维坐标标定方法,其特征在于:所述的标定方法包括以下步骤:
(1)首先确定空间坐标系OXYZ,三维平移台的三个平移轴定义为X、Y、Z三个方向,坐标原点O定位为TOF深度相机镜头中心,三维运动平移台安装底面定义为XZ平面,与TOF深度相机安装底面平行;Z方向为TOF深度相机光轴方向,与Z方向平移台平移轴运动方向平行;Y方向为三维运动平移台安装底面的垂直方向;X方向为右手坐标系定义的方向;空间坐标系OXYZ与TOF深度相机三维测量坐标系OcXcYcZc之间的三维坐标转换关系如下所示:
x c y c z c 1 = nx x ny x nz x p x nx y ny y nz y p y nx z ny z nz z p z 0 0 0 1 x w y w z w 1
其中,xc,yc,zc表示空间任意一点在TOF深度相机三维测量坐标系下的坐标,xw,yw,zw表示该点在空间坐标系OXYZ下的坐标,nxx,nxy,nxz表示空间坐标系X轴在TOF深度相机三维测量坐标系下的方向向量,nyx,nyy,nyz表示空间坐标系Y轴在TOF深度相机三维测量坐标系下的方向向量,nzx,nzy,nzz表示空间坐标系Z轴在TOF深度相机三维测量坐标系下的方向向量,px,py,pz表示空间坐标系的坐标原点在TOF深度相机三维测量坐标系下的坐标;
(2)调整TOF深度相机和球体目标的初始位置,使得球体目标表面与TOF深度相机镜头表面紧贴,且保证TOF深度相机镜头光轴通过球体目标球心,球体目标半径为R,则初始位置球心位置坐标为Z0=R;
(3)控制Z方向运动平移台带动TOF深度相机沿着Z方向运动,产生Z方向精确位移,到达Z方向确定位置sz,此时,球心位置变为Z1=sz+R,Z方向运动完成;
(4)控制X方向运动平移台和Y方向运动平移台,带动TOF深度相机在sz位置处,在XY平面内进行遍历运动,形成虚拟多球体目标;在XY平面内运动中的每个位置处,球体目标的球心三维空间位置坐标可以由球体半径R以及运动平移台的运动位置唯一确定,如下式所示:
Pij(xij,yij,zij)=Pij(sxij,syij,sz+R)
其中,i和j分别为TOF深度相机在XY平面内X方向和Y方向运动的位置序号;Pij(xij,yij,zij)为球体目标球心的三维空间位置坐标,即:球心在空间坐标系OXYZ下的三维坐标;sxij为X方向运动平移台在X方向产生的位移;syij为Y方向运动平移台在Y方向产生的位移;sz为Z方向运动平移台在Z方向产生的位移;R为球体目标的半径;TOF深度相机对球体目标进行三维球心定位测量,首先测量得到球体目标表面各个点的三维测量坐标值:pijk(xijk,yijk,zijk),其中,k=1,2,3……,N为球体目标表面测量点的序号,N为球体目标表面测量点的个数;然后对球体目标表面各个点的三维测量坐标值采用最小二乘拟合方法对球体目标的球心坐标进行高精度定位,得到球心在TOF深度相机三维测量坐标系OcXcYcZc下的坐标为:Pij’(xij’,yij’,zij’),其中,i=1,2,3,……,j=1,2,3,……分别为对应的TOF深度相机在XY平面内X方向和Y方向运动的位置序号;
(5)遍历整个XY平面,得到该Z方向位置处所有的XY位置处球体目标球心的三维测量值与空间位置坐标,带入上述坐标转换关系中,解线性方程组即实现对TOF深度相机的三维坐标的标定。
CN201410650844.0A 2014-11-15 2014-11-15 一种虚拟多球体球心定位的tof深度相机三维坐标标定装置和方法 Active CN104316083B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410650844.0A CN104316083B (zh) 2014-11-15 2014-11-15 一种虚拟多球体球心定位的tof深度相机三维坐标标定装置和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410650844.0A CN104316083B (zh) 2014-11-15 2014-11-15 一种虚拟多球体球心定位的tof深度相机三维坐标标定装置和方法

Publications (2)

Publication Number Publication Date
CN104316083A true CN104316083A (zh) 2015-01-28
CN104316083B CN104316083B (zh) 2017-09-12

Family

ID=52371346

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410650844.0A Active CN104316083B (zh) 2014-11-15 2014-11-15 一种虚拟多球体球心定位的tof深度相机三维坐标标定装置和方法

Country Status (1)

Country Link
CN (1) CN104316083B (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106501309A (zh) * 2016-12-16 2017-03-15 中国科学院工程热物理研究所 用于抽运探测热反射系统的无物镜测量装置
CN106918336A (zh) * 2015-12-25 2017-07-04 积晟电子股份有限公司 惯性测量模块及其惯性测量方法
CN108759666A (zh) * 2018-05-28 2018-11-06 武汉点睛三维科技有限公司 一种基于飞行时间三维相机的尺寸测量方法
CN109079581A (zh) * 2018-07-26 2018-12-25 大连理工大学 一种数控机床动态轮廓误差视觉测量装置
CN109751992A (zh) * 2017-11-03 2019-05-14 北京凌宇智控科技有限公司 面向室内三维空间的定位校正方法、定位方法及其设备
CN110378901A (zh) * 2019-08-16 2019-10-25 扬州大学 一种基于深度相机的球形花木中心测量与修剪控制方法
CN111380668A (zh) * 2018-12-27 2020-07-07 浙江舜宇智能光学技术有限公司 一种深度相机的精度检测系统及其精度检测方法
CN112415492A (zh) * 2019-08-22 2021-02-26 Enscape有限公司 具有tof功能的相机模块的检查装置
CN114347027A (zh) * 2022-01-08 2022-04-15 天晟智享(常州)机器人科技有限公司 一种3d相机相对于机械臂的位姿标定方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002202122A (ja) * 2001-01-05 2002-07-19 Olympus Optical Co Ltd 2次元距離画像センサのキャリブレーション方法
CN1399169A (zh) * 2002-09-03 2003-02-26 东南大学 实现三维像机多视角数据采集及对齐复位的方法
JP2010237189A (ja) * 2009-03-11 2010-10-21 Fujifilm Corp 3次元形状測定方法および装置
CN102609941A (zh) * 2012-01-31 2012-07-25 北京航空航天大学 基于ToF深度相机的三维注册方法
CN102663712A (zh) * 2012-04-16 2012-09-12 天津大学 基于飞行时间tof相机的深度计算成像方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002202122A (ja) * 2001-01-05 2002-07-19 Olympus Optical Co Ltd 2次元距離画像センサのキャリブレーション方法
CN1399169A (zh) * 2002-09-03 2003-02-26 东南大学 实现三维像机多视角数据采集及对齐复位的方法
JP2010237189A (ja) * 2009-03-11 2010-10-21 Fujifilm Corp 3次元形状測定方法および装置
CN102609941A (zh) * 2012-01-31 2012-07-25 北京航空航天大学 基于ToF深度相机的三维注册方法
CN102663712A (zh) * 2012-04-16 2012-09-12 天津大学 基于飞行时间tof相机的深度计算成像方法

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106918336A (zh) * 2015-12-25 2017-07-04 积晟电子股份有限公司 惯性测量模块及其惯性测量方法
CN106501309A (zh) * 2016-12-16 2017-03-15 中国科学院工程热物理研究所 用于抽运探测热反射系统的无物镜测量装置
CN106501309B (zh) * 2016-12-16 2024-03-26 中国科学院工程热物理研究所 用于抽运探测热反射系统的无物镜测量装置
CN109751992A (zh) * 2017-11-03 2019-05-14 北京凌宇智控科技有限公司 面向室内三维空间的定位校正方法、定位方法及其设备
CN108759666A (zh) * 2018-05-28 2018-11-06 武汉点睛三维科技有限公司 一种基于飞行时间三维相机的尺寸测量方法
CN109079581A (zh) * 2018-07-26 2018-12-25 大连理工大学 一种数控机床动态轮廓误差视觉测量装置
CN111380668A (zh) * 2018-12-27 2020-07-07 浙江舜宇智能光学技术有限公司 一种深度相机的精度检测系统及其精度检测方法
CN110378901A (zh) * 2019-08-16 2019-10-25 扬州大学 一种基于深度相机的球形花木中心测量与修剪控制方法
CN110378901B (zh) * 2019-08-16 2023-08-08 扬州大学 一种基于深度相机的球形花木中心测量与修剪控制方法
CN112415492A (zh) * 2019-08-22 2021-02-26 Enscape有限公司 具有tof功能的相机模块的检查装置
CN114347027A (zh) * 2022-01-08 2022-04-15 天晟智享(常州)机器人科技有限公司 一种3d相机相对于机械臂的位姿标定方法

Also Published As

Publication number Publication date
CN104316083B (zh) 2017-09-12

Similar Documents

Publication Publication Date Title
CN104315995B (zh) 基于虚拟多立方体标准目标的tof深度相机三维坐标标定装置和方法
CN104316083B (zh) 一种虚拟多球体球心定位的tof深度相机三维坐标标定装置和方法
CN109146980B (zh) 基于单目视觉的优化的深度提取和被动测距方法
Hu et al. Extrinsic calibration of 2-D laser rangefinder and camera from single shot based on minimal solution
CN101876532B (zh) 测量系统中的摄像机现场标定方法
CN108594245A (zh) 一种目标物运动监测系统及方法
Zhang et al. A robust and rapid camera calibration method by one captured image
CN105046715B (zh) 一种基于空间解析几何的线阵相机标定方法
CN109255818B (zh) 一种新型标靶及其亚像素级角点的提取方法
CN110415286B (zh) 一种多飞行时间深度相机系统的外参标定方法
CN107816942A (zh) 一种基于十字结构光视觉系统的平面二维尺寸测量方法
CN112017248B (zh) 一种基于点线特征的2d激光雷达相机多帧单步标定方法
CN102221331A (zh) 一种基于不对称双目立体视觉技术的测量方法
CN113028990B (zh) 一种基于加权最小二乘的激光跟踪姿态测量系统及方法
Wu et al. Monocular-vision-based method for online measurement of pose parameters of weld stud
CN113119129A (zh) 一种基于标准球的单目测距定位方法
CN102881040A (zh) 一种数码相机移动拍摄三维重建方法
CN113310433A (zh) 基于线结构光的虚拟双目立体视觉测量方法
CN208350997U (zh) 一种目标物运动监测系统
Higuchi et al. 3D measurement of large structure by multiple cameras and a ring laser
CN114078163A (zh) 激光雷达与可见光相机的精确标定方法
CN100370220C (zh) 结构光三维系统相对参数的单图像自定标方法
Jingjing et al. Research on autonomous positioning method of UAV based on binocular vision
CN113504385A (zh) 复数相机测速方法及测速装置
CN112330740A (zh) 一种基于单目视频的伪双目动态测距方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant