CN116379965A - 结构光系统标定方法、装置、结构光系统及存储介质 - Google Patents

结构光系统标定方法、装置、结构光系统及存储介质 Download PDF

Info

Publication number
CN116379965A
CN116379965A CN202310439635.0A CN202310439635A CN116379965A CN 116379965 A CN116379965 A CN 116379965A CN 202310439635 A CN202310439635 A CN 202310439635A CN 116379965 A CN116379965 A CN 116379965A
Authority
CN
China
Prior art keywords
projector
calibration
camera
frequency
grating
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310439635.0A
Other languages
English (en)
Inventor
吴朝明
曹春阳
颜苏东
吴涵标
张国荣
邓志高
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Huizhou Weimili Technology Co ltd
Original Assignee
Huizhou Weimili Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Huizhou Weimili Technology Co ltd filed Critical Huizhou Weimili Technology Co ltd
Priority to CN202310439635.0A priority Critical patent/CN116379965A/zh
Publication of CN116379965A publication Critical patent/CN116379965A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2504Calibration devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明公开了一种结构光系统标定方法、装置、结构光系统及存储介质,该方法包括:获取经过五频异步相移光栅条纹调制的柱体标定块图像,五频异步相移光栅条纹包括五种频率的正弦光栅条纹和一副白光图像;根据柱体标定块图像,对相机进行标定,并利用多频异步相移算法对投影仪进行标定,得到相机和投影仪的相关参数,五频异步相移光栅条纹中,主频光栅条纹采用四步相移,其余四种频率光栅条纹采用三步相移;根据应用场景下的相机外参和投影仪外参,计算出相机和投影仪之间的相对位姿;根据相机和投影仪之间的相对位姿以及几何模型映射,获取三维坐标。本发明提高了三维测量抗噪能力,针对工业电路板等轮廓复杂的物体可实现高效率、高精度的自动化标定。

Description

结构光系统标定方法、装置、结构光系统及存储介质
技术领域
本发明涉及一种结构光系统标定方法、装置、结构光系统、计算机设备及存储介质,属于工业三维光学测量领域。
背景技术
现如今,由于工业生产和制造水平的快速发展,中国对于工业零部件的自动化生产和加工质量提出了更高的要求,这就需要对工业零部件的外形轮廓进行更为精密的测量。作为一种新兴的快速测量方法,基于光栅投影的三维测量技术在实际应用中发展迅速,为数字化三维设计领域提供了新的技术途径。
标定板作为系统标定必不可少的工具,绝大多数基于平面标定板的系统标定虽然考虑了在相机视场内变换不同位姿进行标定,但未能考虑对视场空间的标定,并且需要人为频繁改变标定板位姿,操作繁琐。
系统标定主要涉及相机标定和投影仪标定,对于基于条纹投影的单目结构光系统是至关重要的,他决定了相位如何转换为三维几何表示,近年来出现了许多相关的标定方法和研究。作为两种主流的单目结构光标定方法,传统的逆相机法和八参数标定法都需要大量的条纹图像进行相位计算,操作复杂,且测量准确性和实现细节仍然有待提高和完善。
发明内容
有鉴于此,本发明提供了一种结构光系统标定方法、装置、结构光系统、计算机设备及存储介质,其提出的多频异步相移算法提高了三维测量抗噪能力,针对工业电路板等轮廓复杂的物体可实现高效率、高精度的自动化标定,设计的标定块保证了对整个视场空间的覆盖,减少了标定图像数量,且有效避免人为操作带来的误差。
本发明的第一个目的在于提供一种结构光系统标定方法
本发明的第二个目的在于提供一种结构光系统标定装置。
本发明的第三个目的在于提供一种结构光系统。
本发明的第四个目的在于提供一种计算机设备。
本发明的第五个目的在于提供一种存储介质。
本发明的第一个目的可以通过采取如下技术方案达到:
一种结构光系统标定方法,所述方法包括:
获取经过五频异步相移光栅条纹调制的柱体标定块图像,所述五频异步相移光栅条纹包括五种频率的正弦光栅条纹和一副白光图像;
根据柱体标定块图像,对相机进行标定,并利用多频异步相移算法对投影仪进行标定,得到相机和投影仪的相关参数,所述五频异步相移光栅条纹中,主频光栅条纹采用四步相移,其余四种频率光栅条纹采用三步相移。
进一步的,所述根据柱体标定块图像,对相机进行标定,并利用多频异步相移算法对投影仪进行标定,得到相机和投影仪的相关参数,具体包括:
利用柱体标定块图像进行相机标定,得到相机的内参、外参、畸变系数以及重投影误差,并保存每个柱体标定块上的圆点位置信息;
利用多频异步相移算法,计算出柱体标定块图像的绝对相位值,并根据每张图像的圆点位置和绝对相位图计算出每个圆点对应的投影仪像点坐标,根据投影仪像点坐标与柱体标定块圆点世界坐标的对应关系,计算投影仪的内参、外参、畸变系数以及重投影误差。
进一步的,所述五频异步相移光栅条纹中的主频光栅条纹为f1,其余四种频率光栅条纹分别为f2、f3、f4和f5
所述利用多频异步相移算法,计算出柱体标定块图像的绝对相位值,并根据每张图像的圆点位置和绝对相位图计算出每个圆点对应的投影仪像点坐标,具体包括:
利用四步相移算法计算主频光栅条纹f1的主值相位,计算公式如下:
Figure BDA0004193463590000021
其中,
Figure BDA0004193463590000022
为待计算的目标相位,In(x,y)为光栅图像任意一点(x,y)的实际光强值;
针对其余四种频率光栅条纹f2、f3、f4、f5的主值相位提取,通过三步相移算法计算,计算公式如下:
Figure BDA0004193463590000023
根据不同相移算法获取的主值相位,并通过五频外差算法计算主频光栅条纹f1的绝对相位,计算公式如下:
Figure BDA0004193463590000024
时,计算公式为:
Figure BDA0004193463590000031
Figure BDA0004193463590000032
时,计算公式为:
Figure BDA0004193463590000033
其中,
Figure BDA0004193463590000034
和φ1分别为主频光栅条纹f1对应的主值相位和展开相位值,/>
Figure BDA0004193463590000035
和φ2分别为光栅条纹f2对应的主值相位和展开相位值,m12为主频光栅条纹f1和光栅条纹f2合成的虚拟叠栅条纹对应的条纹级数,floor(·)为向下取整;
利用相位展开算法,计算出具有垂直条纹图像的绝对相位图φv(x,y),若投影仪的分辨率为Hp×Wp,投影图案的条纹数为nv,则相机像素(x,y)T对应于投影仪平面上的一条垂直线,坐标如下:
Figure BDA0004193463590000036
利用水平条纹图像中提取的绝对相位图,在投影仪平面上找到一条水平线的坐标,如下:
Figure BDA0004193463590000037
其中,φh(x,y)为具有水平条纹图像的绝对相位图,nh为投影条纹的水平条纹数。
进一步的,所述柱体标定块包括三个标定面,其中一个标定面为主标定面,另外两个标定面为侧标定面,每个标定面有9行11列共计99个白色圆形,其中包含94个直径为2.5mm的小圆和5个直径为5mm的大圆,且标定面背景色为黑色;
所述主标定面相对于参考面水平放置,两个侧标定面根据相机景深和柱体标定块的标定面长度设置倾斜特定角度,如下式:
Figure BDA0004193463590000041
其中,
Figure BDA0004193463590000042
为相机景深,l为柱体标定块的标定面长度。
进一步的,所述获取经过五频异步相移光栅条纹调制的柱体标定块图像之前,还包括:
使柱体标定块沿x轴方向、y轴方向水平移动,调节相机、投影仪高度、相对位置以及镜头焦距,使投影仪投射的五频异步相移光栅条纹能覆盖柱体标定块的标定面。
进一步的,所述方法还包括:
根据应用场景下的相机外参和投影仪外参,计算出相机和投影仪之间的相对位姿;
根据相机和投影仪之间的相对位姿以及几何模型映射,获取三维坐标。
进一步的,所述根据相机和投影仪之间的相对位姿以及几何模型映射,获取三维坐标,具体包括:
若相机和投影仪为水平布置,投影垂直条纹图像,根据具有垂直条纹图像的绝对相位图,得到横坐标;
通过相机标定得到的相机内外参数求解相机的投影矩阵Pc,如下式:
Figure BDA0004193463590000043
利用投影仪标定得到的投影仪内外参数求解投影仪的投影矩阵Pp,如下式:
Figure BDA0004193463590000044
给定相机像素点X=(x,y)T和投影仪对应的横坐标,则相机和投影仪的投影矩阵与世界坐标系的映射关系表示如下:
Figure BDA0004193463590000051
其中,xp为投影仪对应的横坐标。
本发明的第二个目的可以通过采取如下技术方案达到:
一种结构光系统标定装置,所述装置包括:
获取模块,用于获取经过五频异步相移光栅条纹调制的柱体标定块图像,所述五频异步相移光栅条纹包括五种频率的正弦光栅条纹和一副白光图像;
标定模块,用于根据柱体标定块图像,对相机进行标定,并利用多频异步相移算法对投影仪进行标定,得到相机和投影仪的相关参数,所述五频异步相移光栅条纹中,主频光栅条纹采用四步相移,其余四种频率光栅条纹采用三步相移。
本发明的第三个目的可以通过采取如下技术方案达到:
一种结构光系统,所述系统包括相机、投影仪、标定板、传送带部件和计算机,所述标定板为柱体标定块,标定板设置在传送带部件上,所述计算机分别与相机、投影仪和传送带部件连接;
所述投影仪,用于向标定板投射五频异步相移光栅条纹;
所述相机,用于采集经过五频异步相移光栅条纹调制的标定板图像;
所述传送带部件,用于带动标定板水平移动;
所述计算机,用于执行上述的结构光系统标定方法。
本发明的第四个目的可以通过采取如下技术方案达到:
一种计算机设备,包括处理器以及用于存储处理器可执行程序的存储器,其特征在于,所述处理器执行存储器存储的程序时,实现上述的结构光系统标定方法。
本发明的第五个目的可以通过采取如下技术方案达到:
一种存储介质,存储有程序,所述程序被处理器执行时,实现上述的结构光系统标定方法。
本发明相对于现有技术具有如下的有益效果:
1、本发明采用多频异步相移算法进行投影仪的标定,采用五种不同频率的光栅条纹,能够精准获取轮廓复杂物体的调制光栅,并提高了抗噪能力,为了避免五种频率光栅带来的相位计算复杂度,采用异步相移算法进行相位计算,大大提高了相位计算效率。
2、本发明采用包含三个标定面的柱体标定块,并将标定块固定于可水平移动的传送带装置,使得不同的标定点处在根据相机景深确定的视场空间,避免了人为改变标定板位姿带来的误差,使得对投影仪和相机的标定更为全面和精确,同时大大减少了标定图像数量,加快了标定速度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图示出的结构获得其他的附图。
图1为本发明实施例1的结构光系统示意图。
图2a为本发明实施例1的柱体标定块立体图。
图2b为本发明实施例1的柱体标定块正视图。
图2c为本发明实施例1的柱体标定块侧视图。
图2d为本发明实施例1的柱体标定块俯视图。
图3为本发明实施例1的结构光系统标定方法的简易流程图。
图4为本发明实施例1的结构光系统标定方法的详细流程图。
图5为本发明实施例1的投影仪标定流程图。
图6为本发明实施例2的结构光系统标定装置的结构框图。
图7为本发明实施例3的计算机设备的结构框图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部的实施例,基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例1:
如图1所示,本实施例提供了一种结构光系统,该系统包括相机1、投影仪2、标定板3、传送带部件(图中未示出)和计算机4,相机1为工业相机,可以连续采集标定板图像,投影仪2可以向标定板投射数字光栅条纹,标定板3设置在传送带部件上,通过传送带部件可以使标定板3水平移动,计算机4分别与相机1、投影仪2和传送带部件连接,可以对相机1采集的标定板图像进行处理。
如图2a~图2d所示,本实施例的标定板为柱体标定块,柱体标定块包括三个标定面,其中一个标定面位于中间,作为主标定面301,另外两个标定面位于左右两侧,分别为第一侧标定面302和第二侧标定面303,每个标定面有9行11列共计99个白色圆形,其中包含94个直径为2.5mm的小圆和5个直径为5mm的大圆,且标定面背景色为黑色。
主标定面301相对于参考面水平放置,即主标定面301与参考面平行,两个侧标定面(第一侧标定面302和第二侧标定面303)根据相机景深和柱体标定块的标定面长度设置倾斜特定角度,具体设置如下:
对于特定三维测量场景,选定好相机、投影仪以及标定板之后,查看选定的相机景深
Figure BDA0004193463590000073
测量柱体标定块的标定面长度l,则可确定侧标定面倾斜角度α表示为:
Figure BDA0004193463590000071
其中,
Figure BDA0004193463590000072
为相机景深,l为柱体标定块的标定面长度;本实施例中,第一侧标定面302和第二侧标定面303相对于参考面倾斜30°,即θ=30°。
如图3和图4所示,本实施例还提供了一种结构光系统标定方法,该方法主要通过上述结构光系统的计算机实现,包括以下步骤:
S401、获取经过五频异步相移光栅条纹调制的柱体标定块图像。
在获取经过五频异步相移光栅条纹调制的柱体标定块图像之前,先要对结构光系统进行初始化,具体包括:
控制传送带部件使柱体标定块沿x轴方向、y轴方向水平移动,调节相机、投影仪高度、相对位置以及镜头焦距,使投影仪投射的五频异步相移光栅条纹能覆盖柱体标定块的标定面;具体地,相机倾斜30°放置,使其光轴垂直于柱体标定块标定面,投影仪倾斜30°投射光栅条纹,调节相机、投影仪高度、相对位置以及镜头焦距,使柱体标定块在视野内呈现清晰完整的像。
初始化之后,制作五频异步相移光栅条纹,五频异步相移光栅条纹中的主频光栅条纹为f1,其余四种频率光栅条纹分别为f2、f3、f4和f5,f1的频率为1/115、f2的频率为1/90、f3的频率为1/76、f4的频率为1/57、f5的频率为1/48,主频光栅条纹采用四步相移,分别为0、π/2、π、3π/2,其余四种频率光栅条纹采用三步相移,分别为0、2π/3、4π/3,另外制作一副白光图像,使五频异步相移光栅条纹包括五种频率的正弦光栅条纹和一副白光图像;将制作好的五频异步相移光栅条纹烧录到投影仪进行投射,并设置好投影仪触发方式为内部触发,设置相机为连续采图模式,帧率为17;启动投影仪进行投射,同步触发触发相机连续采集17幅柱体标定块图像,控制传送带部件,在相机视场内移动柱体标定块到不同位置,重复采集柱体标定块图像,共采集三组图像数据,可以理解,采集的图像数据还可以是四组、五组等。
S402、根据柱体标定块图像,对相机进行标定,并利用多频异步相移算法对投影仪进行标定,得到相机和投影仪的相关参数。
相机标定:利用柱体标定块图像进行相机标定,得到相机的内参、外参、畸变系数以及重投影误差,并保存每个柱体标定块上的圆点位置信息。
投影仪标定:如上所述五频异步相移光栅条纹中,主频光栅条纹采用四步相移,其余四种频率光栅条纹采用三步相移,利用多频异步相移算法,计算出柱体标定块图像的绝对相位值,并根据每张图像的圆点位置和绝对相位图计算出每个圆点对应的投影仪像点坐标,根据投影仪像点坐标与柱体标定块圆点世界坐标的对应关系,使用相机标定方法计算投影仪的内参、外参、畸变系数以及重投影误差。
如图5所示,投影仪标定的具体过程如下:
1)利用四步相移算法计算主频光栅条纹f1的主值相位,计算公式如下:
Figure BDA0004193463590000081
其中,
Figure BDA0004193463590000082
为待计算的目标相位(包裹相位),In(x,y)为光栅图像任意一点(x,y)的实际光强值。
2)针对其余四种频率光栅条纹f2、f3、f4、f5的主值相位提取,通过三步相移算法计算,计算公式如下:
Figure BDA0004193463590000083
3)根据不同相移算法获取的主值相位,并通过五频外差算法计算主频光栅条纹f1的绝对相位,计算公式如下:
Figure BDA0004193463590000084
时,计算公式为:
Figure BDA0004193463590000091
Figure BDA0004193463590000092
时,计算公式为:
Figure BDA0004193463590000093
其中,
Figure BDA0004193463590000094
和φ1分别为主频光栅条纹f1对应的主值相位和展开相位值,/>
Figure BDA0004193463590000095
和φ2分别为光栅条纹f2对应的主值相位和展开相位值,m12为主频光栅条纹f1和光栅条纹f2合成的虚拟叠栅条纹对应的条纹级数,floor(·)为向下取整,从式中可以看出,当确定好适当的光栅条纹频率f1-f5,使得最终的叠栅条纹恰好在一个周期内覆盖整个视场,则此时叠栅条纹的条纹级数为零(即m12=0),则通过式(4)、(5)可以计算出绝对相位φ1、φ2
具体做法是利用多频外差原理依次将主值相位f1和f3、f2和f4、f3和f5进行作差得到过渡相位f13、f24、f35,再将过渡相位f13和f24、f24和f35分别作差得到过渡相位f1324、f2435,最终将过渡相位f1324和f2435再次作差得到最终展开的绝对相位。
4)利用相位展开算法,计算出具有垂直条纹图像的绝对相位图φv(x,y),若投影仪的分辨率为Hp×Wp,投影图案的条纹数为nv,则相机像素(x,y)T对应于投影仪平面上的一条垂直线,坐标如下:
Figure BDA0004193463590000096
5)利用水平条纹图像中提取的绝对相位图,在投影仪平面上找到一条水平线的坐标,如下:
Figure BDA0004193463590000101
其中,φh(x,y)为具有水平条纹图像的绝对相位图,nh为投影条纹的水平条纹数。
本实施例的结构光系统标定方法在完成相机和投影仪的标定后,可以在应用场景下进行三维测量,因此还可包括:
S403、根据应用场景下的相机外参和投影仪外参,计算出相机和投影仪之间的相对位姿。
S404、根据相机和投影仪之间的相对位姿以及几何模型映射,获取三维坐标。
通过在三维重建中只投影一组条纹图像来减少投影条纹图像的数量,假设相机和投影仪水平布置,只投影垂直条纹图像或者只投影水平条纹图像(2种情况结果相同),以投射垂直条纹图像为例,根据具有垂直条纹图像的绝对相位图,得到横坐标xp
通过相机标定得到的相机内外参数求解相机的投影矩阵Pc,如下式:
Figure BDA0004193463590000102
利用投影仪标定得到的投影仪内外参数求解投影仪的投影矩阵Pp,如下式:
Figure BDA0004193463590000103
给定相机像素点X=(x,y)T和投影仪对应的横坐标xp,则相机和投影仪的投影矩阵与世界坐标系的映射关系表示如下:
Figure BDA0004193463590000104
根据相机和投影仪的投影矩阵与世界坐标系的映射关系,只需要知道待测物体任意一点的像点坐标以及投影仪对应的横坐标,即可求解出对应的三维坐标,实现三维测量。
应当注意,尽管以特定顺序描述了上述实施例的方法操作,但是这并非要求或者暗示必须按照该特定顺序来执行这些操作,或是必须执行全部所示的操作才能实现期望的结果。相反,描绘的步骤可以改变执行顺序。附加地或备选地,可以省略某些步骤,将多个步骤合并为一个步骤执行,和/或将一个步骤分解为多个步骤执行。
实施例2:
如图6所示,本实施例提供了一种结构光系统标定装置,该装置包括获取模块601和标定模块602,各个模块的具体功能如下:
获取模块601,用于获取经过五频异步相移光栅条纹调制的柱体标定块图像,所述五频异步相移光栅条纹包括五种频率的正弦光栅条纹和一副白光图像。
标定模块602,用于根据柱体标定块图像,对相机进行标定,并利用多频异步相移算法对投影仪进行标定,得到相机和投影仪的相关参数,所述五频异步相移光栅条纹中,主频光栅条纹采用四步相移,其余四种频率光栅条纹采用三步相移。
进一步地,本实施例的结构光系统标定装置还可包括:
第一计算模块603,用于根据应用场景下的相机外参和投影仪外参,计算出相机和投影仪之间的相对位姿。
第二计算模块604,用于根据相机和投影仪之间的相对位姿以及几何模型映射,获取三维坐标。
上述各个模块的具体实现参见上述实施例1;需要说明的是,本实施例提供的装置仅以上述各功能模块的划分进行举例说明,在实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。
实施例3:
本实施例提供了一种计算机设备,如图7所示,其包括通过装置总线701连接的处理器702、存储器、输入装置703、显示器704和网络接口705,该处理器用于提供计算和控制能力,该存储器包括非易失性存储介质706和内存储器707,该非易失性存储介质706存储有操作装置、计算机程序和数据库,该内存储器707为非易失性存储介质中的操作装置和计算机程序的运行提供环境,处理器702执行存储器存储的计算机程序时,实现上述实施例1的结构光系统标定方法,如下:
获取经过五频异步相移光栅条纹调制的柱体标定块图像,所述五频异步相移光栅条纹包括五种频率的正弦光栅条纹和一副白光图像;
根据柱体标定块图像,对相机进行标定,并利用多频异步相移算法对投影仪进行标定,得到相机和投影仪的相关参数,所述五频异步相移光栅条纹中,主频光栅条纹采用四步相移,其余四种频率光栅条纹采用三步相移。
进一步地,还可包括:
根据应用场景下的相机外参和投影仪外参,计算出相机和投影仪之间的相对位姿;
根据相机和投影仪之间的相对位姿以及几何模型映射,获取三维坐标。
实施例4:
本实施例提供了一种存储介质,该存储介质为计算机可读存储介质,其存储有计算机程序,计算机程序被处理器执行时,实现上述实施例1的结构光系统标定方法,如下:
获取经过五频异步相移光栅条纹调制的柱体标定块图像,所述五频异步相移光栅条纹包括五种频率的正弦光栅条纹和一副白光图像;
根据柱体标定块图像,对相机进行标定,并利用多频异步相移算法对投影仪进行标定,得到相机和投影仪的相关参数,所述五频异步相移光栅条纹中,主频光栅条纹采用四步相移,其余四种频率光栅条纹采用三步相移。
进一步地,还可包括:
根据应用场景下的相机外参和投影仪外参,计算出相机和投影仪之间的相对位姿;
根据相机和投影仪之间的相对位姿以及几何模型映射,获取三维坐标。
需要说明的是,本实施例的计算机可读存储介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是但不限于电、磁、光、电磁、红外线、或半导体的装置、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
在本实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行装置、装置或者器件使用或者与其结合使用。而在本实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读存储介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行装置、装置或者器件使用或者与其结合使用的程序。计算机可读存储介质上包含的计算机程序可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读存储介质可以以一种或多种程序设计语言或其组合来编写用于执行本实施例的计算机程序,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Python、C++,还包括常规的过程式程序设计语言—诸如C语言或类似的程序设计语言。程序可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络,包括局域网(LAN)或广域网(WAN)连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
综上所述,本发明采用多频异步相移算法进行投影仪的标定,采用五种不同频率的光栅条纹,能够精准获取轮廓复杂物体的调制光栅,并提高了抗噪能力,为了避免五种频率光栅带来的相位计算复杂度,采用异步相移算法进行相位计算,大大提高了相位计算效率;此外,本发明采用包含三个标定面的柱体标定块,并将标定块固定于可水平移动的传送带装置,使得不同的标定点处在根据相机景深确定的视场空间,避免了人为改变标定板位姿带来的误差,使得对投影仪和相机的标定更为全面和精确,同时大大减少了标定图像数量,加快了标定速度。
以上所述,仅为本发明专利较佳的实施例,但本发明专利的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明专利所公开的范围内,根据本发明专利的技术方案及其发明专利构思加以等同替换或改变,都属于本发明专利的保护范围。

Claims (10)

1.一种结构光系统标定方法,其特征在于,所述方法包括:
获取经过五频异步相移光栅条纹调制的柱体标定块图像,所述五频异步相移光栅条纹包括五种频率的正弦光栅条纹和一副白光图像;
根据柱体标定块图像,对相机进行标定,并利用多频异步相移算法对投影仪进行标定,得到相机和投影仪的相关参数,所述五频异步相移光栅条纹中,主频光栅条纹采用四步相移,其余四种频率光栅条纹采用三步相移。
2.根据权利要求1所述的结构光系统标定方法,其特征在于,所述根据柱体标定块图像,对相机进行标定,并利用多频异步相移算法对投影仪进行标定,得到相机和投影仪的相关参数,具体包括:
利用柱体标定块图像进行相机标定,得到相机的内参、外参、畸变系数以及重投影误差,并保存每个柱体标定块上的圆点位置信息;
利用多频异步相移算法,计算出柱体标定块图像的绝对相位值,并根据每张图像的圆点位置和绝对相位图计算出每个圆点对应的投影仪像点坐标,根据投影仪像点坐标与柱体标定块圆点世界坐标的对应关系,计算投影仪的内参、外参、畸变系数以及重投影误差。
3.根据权利要求2所述的结构光系统标定方法,其特征在于,所述五频异步相移光栅条纹中的主频光栅条纹为f1,其余四种频率光栅条纹分别为f2、f3、f4和f5
所述利用多频异步相移算法,计算出柱体标定块图像的绝对相位值,并根据每张图像的圆点位置和绝对相位图计算出每个圆点对应的投影仪像点坐标,具体包括:
利用四步相移算法计算主频光栅条纹f1的主值相位,计算公式如下:
Figure FDA0004193463580000011
其中,
Figure FDA0004193463580000012
为待计算的目标相位,In(x,y)为光栅图像任意一点(x,y)的实际光强值;
针对其余四种频率光栅条纹f2、f3、f4、f5的主值相位提取,通过三步相移算法计算,计算公式如下:
Figure FDA0004193463580000013
根据不同相移算法获取的主值相位,并通过五频外差算法计算主频光栅条纹f1的绝对相位,计算公式如下:
Figure FDA0004193463580000021
时,计算公式为:
Figure FDA0004193463580000022
Figure FDA0004193463580000023
时,计算公式为:
Figure FDA0004193463580000024
其中,
Figure FDA0004193463580000025
和φ1分别为主频光栅条纹f1对应的主值相位和展开相位值,/>
Figure FDA0004193463580000026
和φ2分别为光栅条纹f2对应的主值相位和展开相位值,m12为主频光栅条纹f1和光栅条纹f2合成的虚拟叠栅条纹对应的条纹级数,floor(·)为向下取整;
利用相位展开算法,计算出具有垂直条纹图像的绝对相位图φv(x,y),若投影仪的分辨率为Hp×Wp,投影图案的条纹数为nv,则相机像素(x,y)T对应于投影仪平面上的一条垂直线,坐标如下:
Figure FDA0004193463580000027
利用水平条纹图像中提取的绝对相位图,在投影仪平面上找到一条水平线的坐标,如下:
Figure FDA0004193463580000028
其中,φh(x,y)为具有水平条纹图像的绝对相位图,nh为投影条纹的水平条纹数。
4.根据权利要求1所述的结构光系统标定方法,其特征在于,所述柱体标定块包括三个标定面,其中一个标定面为主标定面,另外两个标定面为侧标定面,每个标定面有9行11列共计99个白色圆形,其中包含94个直径为2.5mm的小圆和5个直径为5mm的大圆,且标定面背景色为黑色;
所述主标定面相对于参考面水平放置,两个侧标定面根据相机景深和柱体标定块的标定面长度设置倾斜特定角度,如下式:
Figure FDA0004193463580000031
其中,
Figure FDA0004193463580000032
为相机景深,l为柱体标定块的标定面长度。
5.根据权利要求1-4任一项所述的结构光系统标定方法,其特征在于,所述获取经过五频异步相移光栅条纹调制的柱体标定块图像之前,还包括:
使柱体标定块沿x轴方向、y轴方向水平移动,调节相机、投影仪高度、相对位置以及镜头焦距,使投影仪投射的五频异步相移光栅条纹能覆盖柱体标定块的标定面。
6.根据权利要求1-4任一项所述的结构光系统标定方法,其特征在于,所述方法还包括:
根据应用场景下的相机外参和投影仪外参,计算出相机和投影仪之间的相对位姿;
根据相机和投影仪之间的相对位姿以及几何模型映射,获取三维坐标。
7.根据权利要求6所述的结构光系统标定方法,其特征在于,所述根据相机和投影仪之间的相对位姿以及几何模型映射,获取三维坐标,具体包括:
若相机和投影仪为水平布置,投影垂直条纹图像,根据具有垂直条纹图像的绝对相位图,得到横坐标;
通过相机标定得到的相机内外参数求解相机的投影矩阵Pc,如下式:
Figure FDA0004193463580000033
利用投影仪标定得到的投影仪内外参数求解投影仪的投影矩阵Pp,如下式:
Figure FDA0004193463580000041
给定相机像素点X=(x,y)T和投影仪对应的横坐标,则相机和投影仪的投影矩阵与世界坐标系的映射关系表示如下:
Figure FDA0004193463580000042
其中,xp为投影仪对应的横坐标。
8.一种结构光系统标定装置,其特征在于,所述装置包括:
获取模块,用于获取经过五频异步相移光栅条纹调制的柱体标定块图像,所述五频异步相移光栅条纹包括五种频率的正弦光栅条纹和一副白光图像;
标定模块,用于根据柱体标定块图像,对相机进行标定,并利用多频异步相移算法对投影仪进行标定,得到相机和投影仪的相关参数,所述五频异步相移光栅条纹中,主频光栅条纹采用四步相移,其余四种频率光栅条纹采用三步相移。
9.一种结构光系统,其特征在于,所述系统包括相机、投影仪、标定板、传送带部件和计算机设备,所述标定板为柱体标定块,标定板设置在传送带部件上,所述计算机设备分别与相机、投影仪和传送带部件连接;
所述投影仪,用于向标定板投射五频异步相移光栅条纹;
所述相机,用于采集经过五频异步相移光栅条纹调制的标定板图像;
所述传送带部件,用于带动标定板水平移动;
所述计算机设备,包括处理器以及用于存储处理器可执行程序的存储器,其特征在于,所述处理器执行存储器存储的程序时,实现权利要求1-7任一项所述的相位高度映射方法,以及用于执行权利要求1-7任一项的结构光系统标定方法。
10.一种存储介质,存储有程序,其特征在于,所述程序被处理器执行时,实现权利要求1-7任一项所述的结构光系统标定方法。
CN202310439635.0A 2023-04-21 2023-04-21 结构光系统标定方法、装置、结构光系统及存储介质 Pending CN116379965A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310439635.0A CN116379965A (zh) 2023-04-21 2023-04-21 结构光系统标定方法、装置、结构光系统及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310439635.0A CN116379965A (zh) 2023-04-21 2023-04-21 结构光系统标定方法、装置、结构光系统及存储介质

Publications (1)

Publication Number Publication Date
CN116379965A true CN116379965A (zh) 2023-07-04

Family

ID=86967489

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310439635.0A Pending CN116379965A (zh) 2023-04-21 2023-04-21 结构光系统标定方法、装置、结构光系统及存储介质

Country Status (1)

Country Link
CN (1) CN116379965A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117168313A (zh) * 2023-11-03 2023-12-05 武汉工程大学 基于光栅投影三维重建的相位误差模型校正方法及系统

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117168313A (zh) * 2023-11-03 2023-12-05 武汉工程大学 基于光栅投影三维重建的相位误差模型校正方法及系统
CN117168313B (zh) * 2023-11-03 2024-01-23 武汉工程大学 基于光栅投影三维重建的相位误差模型校正方法及系统

Similar Documents

Publication Publication Date Title
CN110514143B (zh) 一种基于反射镜的条纹投影系统标定方法
CN109211264B (zh) 测量系统的标定方法、装置、电子设备及可读存储介质
CN109489585B (zh) 基于改进多频条纹结构光的三维测量方法
CA2378867C (en) Method and system for measuring the relief of an object
KR101604037B1 (ko) 카메라와 레이저 스캔을 이용한 3차원 모델 생성 및 결함 분석 방법
JP5943547B2 (ja) 非接触測定を行う装置および方法
CN110296667B (zh) 基于线结构光多角度投影的高反射表面三维测量方法
CN109307483B (zh) 一种基于结构光系统几何约束的相位展开方法
CN115345822A (zh) 一种面向航空复杂零件的面结构光自动化三维检测方法
WO2018201677A1 (zh) 基于光束平差的远心镜头三维成像系统的标定方法及装置
Yang et al. Flexible and accurate implementation of a binocular structured light system
CN109272555B (zh) 一种rgb-d相机的外部参数获得及标定方法
CN114111637A (zh) 一种基于虚拟双目的条纹结构光三维重建方法
CN116379965A (zh) 结构光系统标定方法、装置、结构光系统及存储介质
JP6035031B2 (ja) 複数の格子を用いた三次元形状計測装置
CN112132890A (zh) 一种扩大标定空间的数字光栅投影测量系统标定方法
CN112489109A (zh) 一种三维成像系统方法、装置及三维成像系统
CN116222425A (zh) 一种基于多目三维扫描装置的三维重建方法及系统
CN112985258B (zh) 一种三维测量系统的标定方法及测量方法
CN109506562A (zh) 一种用于太阳翼展开锁定深度检测的双目视觉测量装置
CN102034234A (zh) 一种多视图结构光系统自标定方法
JP4236202B2 (ja) モデリング装置およびカメラパラメータの計算方法
CN115222893A (zh) 基于结构光测量的大尺寸构件三维重建拼接方法
CN114565720A (zh) 一种基于线结构光旋转扫描的主动式三维重建系统及方法
CN115147490A (zh) 一种6d位姿估计数据集制作方法、装置及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination