CN116718133A - 近距离单点结构光三维测量方法 - Google Patents
近距离单点结构光三维测量方法 Download PDFInfo
- Publication number
- CN116718133A CN116718133A CN202310715170.7A CN202310715170A CN116718133A CN 116718133 A CN116718133 A CN 116718133A CN 202310715170 A CN202310715170 A CN 202310715170A CN 116718133 A CN116718133 A CN 116718133A
- Authority
- CN
- China
- Prior art keywords
- point
- laser
- image
- camera
- dimensional
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000691 measurement method Methods 0.000 title claims abstract description 19
- 238000005259 measurement Methods 0.000 claims abstract description 23
- 238000001514 detection method Methods 0.000 claims abstract description 12
- 230000008859 change Effects 0.000 claims abstract description 9
- 238000000034 method Methods 0.000 claims description 38
- 230000003287 optical effect Effects 0.000 claims description 19
- 238000012545 processing Methods 0.000 claims description 14
- 238000009434 installation Methods 0.000 claims description 12
- 238000000605 extraction Methods 0.000 claims description 7
- 238000004364 calculation method Methods 0.000 claims description 6
- 125000004122 cyclic group Chemical group 0.000 claims description 5
- 238000001914 filtration Methods 0.000 claims description 5
- 239000012535 impurity Substances 0.000 claims description 5
- 238000004458 analytical method Methods 0.000 claims description 4
- 238000005452 bending Methods 0.000 claims description 4
- 230000010363 phase shift Effects 0.000 claims description 4
- 238000005070 sampling Methods 0.000 claims description 4
- 230000001678 irradiating effect Effects 0.000 claims description 3
- 238000013507 mapping Methods 0.000 claims description 2
- 238000013178 mathematical model Methods 0.000 claims description 2
- 230000002441 reversible effect Effects 0.000 claims description 2
- 230000008901 benefit Effects 0.000 description 4
- 230000007547 defect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 238000002377 Fourier profilometry Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000012636 effector Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000010587 phase diagram Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000001314 profilometry Methods 0.000 description 1
- 230000003252 repetitive effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/521—Depth or shape recovery from laser ranging, e.g. using interferometry; from the projection of structured light
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/2433—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures for measuring outlines by shadow casting
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/46—Indirect determination of position data
- G01S17/48—Active triangulation systems, i.e. using the transmission and reflection of electromagnetic waves other than radio waves
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
- G06T7/593—Depth or shape recovery from multiple images from stereo images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T9/00—Image coding
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Electromagnetism (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Optics & Photonics (AREA)
- Multimedia (AREA)
- Computer Networks & Wireless Communication (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
本发明提出的一种近距离单点结构光三维测量方法，涉及工业检测多个领域。依据摄像机CCD和光源的相对位姿，对应像素的像素坐标和焦距f确定Q点的三维坐标，构建出待测物体的三维测量结构；被调制的结构光经摄像系统采集，传送至计算机图像处理软件获取待测目标物体表面的三维信息，计算目标物体与测距系统坐标原点之间的距离；图像处理软件将模糊后包含激光投影点的图像与不含激光投影点的图像做差分，获得完整时域编码的像素数量的编码值；采用空域编码结构光重建出对应的深度图，将多个不同的投射编码图案组合起来解码，并不断的进行二分，计算出高度并对其进行解调，得到被待测物高度调制相位变化的高度信息，最后解算出待测物的面形信息。
Description
技术领域
本发明涉及工业检测、文物数字化、人体测量等多个领域，特别适用于近距离目标定位的单点结构光三维测距系统。
背景技术
结构光三维测量技术是一种主动三维测量技术。三维技术结构光的类型分为很多种，主要包括双目立体
视觉和结构光三维视觉，还有其他的三维视觉技术，如由明暗恢复形状、纹理恢复形状、激光测距、莫尔阴影与散焦测距。结构光是目前三维测量最常用的技术，结构光三维视觉是基于光学三角法测量原理。它的原理是通过投影编码好的一些图案到物体上，相机采集相应的经过物体反射的像，根据标定好的一些信息，进行三维重建。结构光将光结构化有点结构光、线结构光以及简单的面结构光等。根据光学投射器所投射的光束模式的不同，结构光模式又可分为点结构光模式、线结构光模式、多线结构光模式、面结构光模式、相位法等。单点法结构光测距一次只照明一个点，计算该点的深度，由此得到的二维距离图像，需要通过逐点扫描物体进行测量。采用逐点扫描获得整个物体的三维形状，其图象摄取时间和图象处理量随被测物体的增大而急剧增加，难以完成实时三维形状检测。单点法与单线法结构光测距比较，单线法结构光测距增加了产生平面狭缝光的光学装置，只需进行一维扫描就可以得到景物的深度图象，图象摄取和处理时间与工作量大为减少。尽管如此，该方法仍然是非常低效的图象处理方法，它必须俘获并处理与不同位置光条纹相对应的系列图象以
得到特定场景的一幅全帧深度数据。所以单光条法的测量速度与单点法一样，在原理上受到限制。对于工业的产品测量、识别，检测来说，结构光方法是目前比较主流的方法。结构光方法拥有高精度、高密集点云、高速的优点，适用于三维重建、缺陷检测、智能抓取、人脸识别、视觉导航等一系列工作。通常结构光测量系统主要由结构光投射装置、摄像机、图像采集及处理系统组成。结构光测距将激光器或投影仪发出的光束，经光学系统形成某种形式的光,包括点、单线、多线、单圆、同心多圆、网格、十字交叉、灰度编码图案、彩色编码图案和随机纹理投影等投向景物,在景物上形成图案并由摄象机摄取，而后由图象根据三角法和传感器结构参数进行计算，得到景物表面的深度图象和三维坐标。如果有一个物体自身有高度差，相机拍摄时，就不能检测到正确的坐标。光面结构光中最常用的方法是投影光栅条纹到物体表面。当投影的结构光图案比较复杂时，为了确定物体表面点与其图像像素点之间的对应关系，需要对投射的图案进行编码，因而这类方法又称为编码结构光测量法。图案编码分为空域编码和时域编码。编码图象和编码图案对于空间中的遮挡比较敏感，易受噪声干扰，反光、照明等原因可能导致成像时部分区域等编码信息缺失；相较于时序编码结构光精度较低。在实际测量中，存在一些杂散光，在测量中属于噪声干扰。由于受景物表面特性不同而产生的模糊点影响发生译码错误，无法判断出光线的投影角，同时判断难度也增大。多灰度级编码方法尽管精度较高，但是没有用到每个相邻条纹的信息，投射图案的深度分辨率受到了限制。另外，不同灰度级边界是两种不连续区域的分界线，在拍摄到的图像上存在着亮的投影区域会向暗投影区扩散问题，影响识别的准确性。空域编码方法只需要一次投射就可获得物体深度图，适合于动态测量，但是目前分辨率和处理速度还无法满足实时三维测量要求，而且对译码要求很高。其中至关重要的一点就是系统的标定，包括系统几何参数的标定和CCD相机以及投影设备的内部参数标定，否
则很可能产生误差或者误差耦合。因为系统外部参数不标定则不可能由相位计算出正确的高度信息。目前结构光三维测量技术有多个分支，包括：激光扫描法、傅立叶变换轮廓术、相位测量轮廓术、彩色
编码条纹投影法、重复图案投射法和图案编码投射法等。其中，重复图案投射法将同一种图案重复多次投影到景物上，每次等间隔的减小条纹图案、点阵图案或网格图案。投射图案与图象图案间混淆问题严重，位置关系难以确定。现有技术比较经典的光学三维测量方法有：双目立体视觉、线激光扫描、格雷码结构光、相移结构光。立体匹配方法误匹配点较多，线激光方法扫描速度慢，相移结构光方法计算效率低，而格雷码方法基本具有以上方法的所有优势，唯一的缺点是解码精度为像素级，大大限制了测量精度的提高。在分辨率和处理速度上还不能满足三维视觉检测的要求，无法应用于具有复杂背景的环境中。
近年来，随着数字投影技术的发展，众多研究机构开始使用数字光学投影设备(LCD、DLP投影仪)来替代
物理光栅。数字投影设备体积普遍较大，在某些移动应用场合不方便使用。如使用机械手臂抓取作业时需要确定待抓取物相对于机械手臂末端执行器的位置，这时需要一种小型、低功耗的测距系统。激光光源波束发散小，指向性强，且小型激光点光源产生器体积与功耗都很小，非常适合于针孔摄像机一起组成小型近距离的结构光三维测距系统。
发明内容
本发明的目的是针对现有技术存在的不足之处，提供一种图象摄取和处理时间与工作量少，能够提高三维测量精度、抗干扰能力和稳定性，且适用于安装在移动装置上对近距离目标进行测距的小型、低功耗近距离单点结构光测距系统及近距离单点结构光三维测量方法。
本发明的上述目的可以通过以下技术方案予以实现：一种近距离单点结构光三维测量方法，其特征在于：基于单点结构光的测距原理，以可见光波段的点状激光光源作为结构光光源，将单点激光发射器和摄像机相对固定安装在支架上，形成近距离单点结构光测距系统，然后依据摄像机CCD和光源的相对位姿，对应像素的像素坐标和焦距f确定Q点的三维坐标，构建出待测物体的三维测量结构；将点状激光光束照射到目标物体上形成投影点，CCD采集相应的经过待测物体反射的图像，利用三角原理获得采样点的三维信息，确定被测物的尺寸参数，投射到待测物表面后被待测物的高度调制，被调制的结构光经摄像系统采集，传送至计算机内分析计算，得出被测物的三维面形数据，根据标定好的一些信息，进行三维重建；计算机通过图像处理软件采集摄像机连续捕获的彩色数字图像，检测摄像机图像中激光束在目标物体上的投影点和在彩色图像中检测目标物体上投射的激光点的中心像素位置，获取待测目标物体表面的三维信息，然后利用三维测量结构的三角光测距原理，计算目标物体与测距系统坐标原点之间的距离；图像处理软件采用激光点提取算法对图像做灰度化处理后，做高斯模糊，排除白噪声对检测结果的影响，将模糊后包含激光投影点的图像与不含激光投影点的图像做差分，并对差分图像做高斯滤波滤除杂点，求取峰值；若峰值大于设定阈值，查找具有相同编码值的像素，找到激光投影点，通过滑动窗口获取每个像素的编码值，将二进制像素编码转化为十进制，同时读取出待测物面形信息的变化数据，调制空间载波信号的结构光场的相位和振幅，通过其临域获得包含了一个完整时域编码的像素数量的编码值；采用空域编码结构光重建出对应的深度图，将多个不同的投射编码图案组合起来解码，并对每段区域不断的进行二分，直至投影的编码宽度等于CCD的像素宽度，根据三角法原理计算出高度，并对其进行解调，得到被待测物高度调制相位变化的高度信息，最后，解算出待测物的面形信息。
本发明相比于现有技术具有如下有益效果：
本发明基于单点结构光的测距原理，用点状激光光源作为照明光源，将单点激光发射器和摄像机相对固定安装在支架上形成立体视觉的三维测量结构光测距系统，从而实现了一种使用可见光波段点状激光光源的小型结构近距离三维光测距系统，且体积小、功耗低，成本低廉，便于安装在小型移动设备上实现近距离目标测距。以可见光波段的点状激光光源作为结构光光源，只需进行一维扫描就可以得到景物的深度图象，图象摄取和处理时间与工作量大为减少。
本发明采用结构光测距系统依据摄像机CCD和光源的相对位姿，对应像素的像素坐标和焦距f确定Q点的三维坐标，构建出待测物体的三维测量结构，将点状激光光束照射到目标物体上形成的投影点，CCD采集相应的经过待测物体反射的像，利用三角原理获得采样点的三维信息，确定被测物的尺寸参数，根据标定好的一些信息，进行三维重建；通过激光器发出的光束投射到物体上产生一个光点，光点经摄像机的镜头成像在摄像机的像平面上，形成一个三维点。摄像机的视线和光束在空间中于光点处相交，形成一种简单的三角几何关系。通过一定的标定可以得到这种三角几何约束关系，并由其可以唯一确定光点在某一已知坐标系中的空间位置。可以避免传统单相机-投影仪测量系统中标定投影仪的过程，提高三维测量精度,在标定比较好的情况下,在2.5m-4m之间可以达到毫米级的精度。
本发明通过图像处理软件采集摄像机连续捕获的彩色数字图像，检测摄像机图像中激光束在目标物体上的投影点和在彩色图像中检测目标物体上投射的激光点的中心像素位置，获取被测检测目标物体表面的三维信息，确定被测物的尺寸参数，测量信息量大大增加。这种将二维的结构光图案投射到物体表面上，这样不需要进行扫描就可以实现三维轮廓测量，测量速度很快。投射到待测物表面后被待测物的高度调制，被调制的结构光经摄像系统采集，传送至计算机内分析计算后可得出被测物的三维面形数据。然后利用三维三角测量结构的结构光测距原理，计算目标物体与测距系统坐标原点之间的距离；在彩色图像中检测目标物体上投射的激光点的中心像素位置，通过摄像机内外参数标定并结合系统安装参数得到根据解算所需的参数。一方面是在一幅图像中可以处理多条光条高图像的处理效率，另一方面可以实现物体表面的多光条覆盖，获得物体表面更大范围的深度信息，从而增加测量的信息量。同时由于每个图像像素点都可以获得三维数据，可以实现真正的全场测量，且分辨率高。
本发明图像处理软件采用激光点提取算法对图像做灰度化处理后，做高斯模糊，排除白噪声对检测结果的影响，将模糊后包含激光投影点的图像与不含激光投影点的图像做差分；然后对差分图像做高斯滤波滤除杂点，求取峰值；若峰值大于设定阈值，查找具有相同编码值的像素，找到激光投影点，通过滑动窗口获取每个像素的编码值；将二进制像素编码，转化为十进制，通过其临域获得包含了一个完整时域编码的像素数量的编码值；相减得到相位差，计算出被调制相位，得到截断相位图，将截断相位恢复为连续相位，该相位差则表征了被测物相对参考面的高度信息，再代入相位与高度转化公式(其中相应参数经过标定)，可以得到三维模型。然后对差分图像做高斯滤波滤除杂点，求取峰值；若峰值大于设定阈值，则找到激光投影点，通过滑动窗口获取每个像素的编码值；在投射相同数量编码图像的前提下，采用的灰度级数越多，解码的分辨率越高，同时也大大提高了其抗干扰能力和稳定性。这就使得在解码时能够将解码误差范围缩小在相邻一位，很大程度上减少了编码结构光方法在解码时的状态错乱，大大增强编码结构光方法的解码精度。不仅是减少工作量和提高测量，而且解码错误大为减少，比如：000，001，011，010，110，111，101，100即为一组Gray码，其对应的十进制数分别是：0,1,2,3,4,5,6,7；另一大优点是最大码组和最小码组之间也仅一位不同，即该编码序列“首尾相连”，因此又称循环码或反射码。
本发明应用于近距离目标测距的单点结构光三维测距系统。该系统由可见光波段单点激光发射器、彩色数字摄像机、安装支架和计算机组成，具有体积小、功耗低、成本低的特点。本发明的单点结构光三维测距系统可以安装在移动设备上，测量近距离目标物体的距离。
附图说明
图1是本发明近距离单点结构光测距系统的定位原理示意图。
图2是本发明在图像中检测激光点时相邻两帧图像差分后激光点理论效果图。
下面结合附图对本发明的基本原理和具体结构作进一步详细说明。
具体实施方式
参阅图1、图2。根据本发明，基于单点结构光的测距原理，以可见光波段的点状激光光源作为结构光光源，将单点激光发射器和摄像机相对固定安装在支架上形成近距离单点结构光测距系统，然后依据摄像机CCD和光源的相对位姿，对应像素的像素坐标和焦距f确定Q点的三维坐标，构建出待测物体的三维测量结构；将点状激光光束照射到目标物体上形成投影点，所述CCD采集相应的经过待测物体反射的图像，利用三角原理获得采样点的三维信息，确定被测物的尺寸参数，投射到待测物表面后被待测物的高度调制，被调制的结构光经摄像系统采集，传送至计算机内分析计算，得出被测物的三维面形数据，根据标定好的一些信息，进行三维重建；计算机通过图像处理软件采集摄像机连续捕获的彩色数字图像，检测摄像机图像中激光束在目标物体上的投影点和在彩色图像中检测目标物体上投射的激光点的中心像素位置，获取待测目标物体表面的三维信息，然后利用三维测量结构的三角光测距原理，计算目标物体与测距系统坐标原点之间的距离；图像处理软件采用激光点提取算法对图像做灰度化处理后，做高斯模糊，排除白噪声对检测结果的影响，将模糊后包含激光投影点的图像与不含激光投影点的图像做差分，并对差分图像做高斯滤波滤除杂点，求取峰值；若峰值大于设定阈值，查找具有相同编码值的像素，找到激光投影点，通过滑动窗口获取每个像素的编码值，将二进制像素编码转化为十进制，同时读取出待测物面形信息的变化数据，调制空间载波信号的结构光场的相位和振幅，通过其临域获得包含了一个完整时域编码的像素数量的编码值；采用空域编码结构光重建出对应的深度图，将多个不同的投射编码图案组合起来解码，并对每段区域不断的进行二分，直至投影的编码宽度等于CCD的像素宽度，根据三角法原理计算出高度，并对其进行解调，得到被待测物高度调制相位变化的高度信息，最后，解算出待测物的面形信息。
装支架用于安装激光发射器和摄像机，为了使安装后支架结构和强度应能保证激光发射器和摄像机的相对位置关系不发生变化，首先对激光发射器和摄像机进行标定，将激光发射器和彩色数字摄像机安装在安装支架的两端，激光发射器和摄像机相距不小于10cm，二者相对安装角度需满足摄像机能拍摄到激光发射器发射的激光束在目标物体上形成在空间中于光点处相交的投影点，按照合适的角度固定好激光发射器和摄像机，通过一定的标定可以得到三角几何约束关系，形成一种三角几何关系，并由其可以唯一确定光点，安装后二者位置和姿态保持相对固定状态将投影仪建模为逆向针孔模型。本实施例使用可见光波段的点状激光光源作为结构光光源，以区别于使用物理光栅或数字光学投影设备的结构光系统。
按图1中几何关系，近距离单点结构光测距系统包括：安装在支架上相对固定的小型可见光波段单点激光发射器和彩色数字摄像机CCD及计算机，基于可见光波段的单点激光发射器和彩色数字摄像机组成的三维结构光测距系统。
调整安装本测距系统的姿态将激光束指向被测目标，计算机采集摄像机CCD连续捕获的彩色数字图像，结合系统安装参数和摄像机CCD内外标定参数，得到解算所需的参数，通过图像处理软件控制单点激光器发射开光，在同一背景下得到包含激光投影点的图像和不含激光投影点的图像，并使用图像差分的检测方式，即在背景不变的情况下，用包含激光投影点的图像与不包含激光投影点的图像想减得到差分图像。
三维坐标的Q点为物点，且Q位于物坐标系XYZO1，且在XO1Z平面，激光光源系统投射到被测物体上的光点为Q，其像点Q0位于像坐标系x0y0z0中的像平面x0o0y0上，且x0o0z0与XO1Z共面；y0o0z0平面和o0z0轴上的投影分别为Q'、Qz和Q'z，通过系统安装标定得到投影角α。
然后图像处理软件按照常规方法标定摄像机的内外参数，结合系统安装参数解算所需的摄像机镜头焦距f、摄像机镜头光轴o0z0与O1O2之间的夹角β0和投影角α标定参数，通过几何解算，物点Q空间坐标的三坐标分别为：
X＝Zcotα
式中X、Y、Z为像素点的三坐标，O1是激光光源系统坐标中心，O2是摄像机镜头中心，x0、y0是Q点在摄像机CCD上对应像点的坐标，D是目标到单点结构光系统中心的距离，f、D、α、β0是标定常数。可以知道D是安装标定常数。
然后,图像处理软件通过标定摄像机内外参数并在图像中提取激光点的中心像素位置可以计算出β0，x0、y0，利用图1所示的结构光测距原理计算目标物体与测距系统坐标原点之间的距离
在以上单点结构光测距原理的基础上，在彩色图像中检测单点激光束投射到目标物体上形成的投影光点的中心像素位置是本发明需要解决的一个重要问题。本发明中，图像处理软件采用激光点的提取算法，主要基于以下两点假设：一、在激光点投影点附近的像素窗口(30×30)中，将投影点中心设为亮度极值点；二、测距时，将相邻两帧图像背景假设为是静止不变的，因此，当控制激光发射器发射与停止发射激光束时，可以分别得到包含激光投影点的图像与不含激光投影点的图像，对这两种图像做差分后，变化最剧烈的区域为激光点所在位置。在以上假设的基础上，激光点中心位置的提取步骤为：
实施测距时，将安装好的测距系统固定在移动设备上，计算机安装根据需要确定，如移动设备自带计算机可将信号接入移动设备的计算机进行数据采集与处理；基于单点结构光的测距原理，单点激光发射器将点状激光照射到目标物体上，通过计算机检测摄像机图像中该激光束在目标物体上的投影点。
移动设备的位置或者调整安装支架的姿态，将激光束指向被测目标，投影光栅图像到测量物体表面，计算机采集摄像机连续捕获的彩色数字图像，通过向被测物体投射编码图案，编程产生正弦条纹图，利用变形条纹图获取相位，获取相位的移相算法，产生四幅相位差pi/2的条纹，然后光栅经过物体面型调制之后被相机采集，由反正切函数计算所得采集四幅被调制条纹图和未被调制的四幅参考面的条纹，采集到的四幅受调制条纹图计算出被调制相位，得到的相位图是截断相位图，然后将该四幅条纹分时投影到被测物面具上，经过系统标定好的参数，通过一系列解相位，求解相位信息，再把相位转换到三维点云。
通过计算机编程产生正弦条纹，将该正弦条纹通过投影设备投影至被测物，利用CCD相机拍摄条纹受物体调制的弯曲程度，解调该弯曲条纹得到相位，再将相位转化为全场的高度；测量时，投影器向被测空间中投射随机分布的点状结构光，每次投影都通过相机CCD进行成像，将峰值点在图像中的位置作为激光投影点位置，峰值位置为激光投影点在图像中的位置，再进行光斑密度的稠密匹配，图像处理软件搜索匹配像素图像，查找具有相同编码值的像素，找到线激光在图像中的对应像素的激光点，将每个像素都对应唯一的一个长度为n的二进制编码，用M种不同的灰度层级进行循环编码，重建出光心与像素的射线，射线和激光平面的交点为待求的三维空间点，重建出对应的深度图。可以获得比单纯使用RGB影像进行三维重建更加可靠和精确的结果。
在可选的实施例中，采用二进制符号(0,1)，编码值的长度n＝2，可以得到一个长度为的循环序列：[0,0,1,1]。此时，得到4个长度为22的不同的编码：[0,0],[0,1],[1,1],[1,0]，在获得的结构光影像中，以4个像素的编码为[0,0,1,1]，假定一个结构光光斑或光束的宽度是一个像素，通过一个大小为2的滑动窗口，获取每个像素的编码值，然后将各灰度级用对应的一种颜色来取代，构成颜色编码图案。
图像处理软件控制单点激光器发射开光，根据所拍摄的序列图案进行解码，结合立体视觉极线约束确定的对应性关系，然后根据预先标定好的系统参数通过三角测量法计算三维坐标，在同一背景下得到包含激光投影点的图像和不含激光投影点的图像。
图像处理软件将多个不同的编码图案按时序先投射到物体表面，得到相应的编码图象序列，该编码序列首尾相连形成循环码或反射码，然后将编码图象序列组合起来进行解码，得到照到各象点所对应物点上的光线投射角，再由结构光法得到景物的深度图象。当深度图象的峰值超过设定阈值范围，又会重新开始。
任意两个相邻码组只有一位二进制数不同，最大码组和最小码组之间也仅一位不同，这就使得在解码时能够将解码误差范围缩小在相邻一位，大大增强编码结构光方法的解码精度。
图像处理软件在目标物体上检测激光投影点，并得到经过标定图1中涉及的参数x0、y0，得到条纹中心的投射角后，将α代入系统三维模型的数学模型，根据结构光测距原理和参数x0、y0、f、D、β0和α，计算目标距离，得到相位主值，同时设计一个周期所占像素列数，相位主值换成其在周期内的实际坐标，再将截断相位恢复为连续相位，基于参考平面的标定建立物体高度和相位差的映射关系，二者相减得到表征了被测物相对参考面的高度信息的相位差，得到条纹上的点的三维坐标值，再代入相位与高度相应参数，从而进行物体的重构，得到三维模型。
一个像素点的实际列坐标如下所示：
Pixel即该点在周期内的实际坐标，period即一个相位周期所占的像素列数，i是相位所在的周期数(通常对第一个相位周期用0来编码)。
以上对本发明实施例进行了详细介绍，本文中应用了具体实施方式对本发明进行了阐述，以上实施例的说明只是用于帮助理解本发明；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种近距离单点结构光三维测量方法，其特征在于：基于单点结构光的测距原理，以可见光波段的点状激光光源作为结构光光源，将单点激光发射器和摄像机相对固定安装在支架上，形成近距离单点结构光测距系统，然后依据摄像机CCD和光源的相对位姿，对应像素的像素坐标和焦距f确定Q点的三维坐标，构建出待测物体的三维测量结构；将点状激光光束照射到目标物体上形成投影点，CCD采集相应的经过待测物体反射的图像，利用三角原理获得采样点的三维信息，确定被测物的尺寸参数，投射到待测物表面后被待测物的高度调制，被调制的结构光经摄像系统采集，传送至计算机内分析计算，得出被测物的三维面形数据，根据标定好的一些信息，进行三维重建；计算机通过图像处理软件采集摄像机连续捕获的彩色数字图像，检测摄像机图像中激光束在目标物体上的投影点和在彩色图像中检测目标物体上投射的激光点的中心像素位置，获取待测目标物体表面的三维信息，然后利用三维测量结构的三角光测距原理，计算目标物体与测距系统坐标原点之间的距离；图像处理软件采用激光点提取算法对图像做灰度化处理后，做高斯模糊，排除白噪声对检测结果的影响，将模糊后包含激光投影点的图像与不含激光投影点的图像做差分，并对差分图像做高斯滤波滤除杂点，求取峰值；若峰值大于设定阈值，查找具有相同编码值的像素，找到激光投影点，通过滑动窗口获取每个像素的编码值，将二进制像素编码转化为十进制，同时读取出待测物面形信息的变化数据，调制空间载波信号的结构光场的相位和振幅，通过其临域获得包含了一个完整时域编码的像素数量的编码值；采用空域编码结构光重建出对应的深度图，将多个不同的投射编码图案组合起来解码，并对每段区域不断的进行二分，直至投影的编码宽度等于CCD的像素宽度，根据三角法原理计算出高度，并对其进行解调，得到被待测物高度调制相位变化的高度信息，最后，解算出待测物的面形信息。
2.根据权利要求1所述的近距离单点结构光三维测量方法，其特征在于：为了使安装后支架结构和强度应能保证激光发射器和摄像机的相对位置关系不发生变化，首先对激光发射器和摄像机进行标定，将激光发射器和彩色数字摄像机安装在安装支架的两端，激光发射器和摄像机相距不小于10cm，二者相对安装角度需满足摄像机能拍摄到激光发射器发射的激光束在目标物体上形成在空间中于光点处相交的投影点，按照合适的角度固定好激光发射器和摄像机，通过一定的标定可以得到三角几何约束关系，形成一种三角几何关系，并由其唯一确定光点，安装后二者位置和姿态保持相对固定状态将投影仪建模为逆向针孔模型。
3.根据权利要求1所述的近距离单点结构光三维测量方法，其特征在于：所述近距离单点结构光测距系统包括：安装在支架上相对固定的小型可见光波段单点激光发射器和彩色数字摄像机CCD及计算机，基于可见光波段的单点激光发射器和彩色数字摄像机组成的三维结构光测距系统。
4.根据权利要求1或2所述的近距离单点结构光三维测量方法，其特征在于：调整安装本测距系统的姿态将激光束指向被测目标，计算机采集摄像机CCD连续捕获的彩色数字图像，结合系统安装参数和摄像机CCD内外标定参数，得到解算所需的参数，通过图像处理软件控制单点激光器发射开光，在同一背景下得到包含激光投影点的图像和不含激光投影点的图像，并使用图像差分的检测方式，即在背景不变的情况下，用包含激光投影点的图像与不包含激光投影点的图像想减得到差分图像。
5.根据权利要求1所述的近距离单点结构光三维测量方法，其特征在于：三维坐标的Q点为物点，且Q位于物坐标系XYZO1，且在XO1Z平面，激光光源系统投射到被测物体上的光点为Q，其像点Q0位于像坐标系x0y0z0中的像平面x0o0y0上，且x0o0z0与XO1Z共面；y0o0z0平面和o0z0轴上的投影分别为Q′、Qz和Q′z，通过系统安装标定得到投影角α。
6.根据权利要求1所述的近距离单点结构光三维测量方法，其特征在于：图像处理软件按照标定摄像机的内外参数，结合系统安装参数解算所需的摄像机镜头焦距f、摄像机镜头光轴o0z0与O1O2之间的夹角β0和投影角α标定参数，通过几何解算，物点Q空间坐标的三坐标分别为：
X＝Z cotα
式中X、Y、Z为像素点的三坐标，O1是激光光源系统坐标中心，O2是摄像机镜头中心，x0、y0是Q点在摄像机CCD上对应像点的坐标，D是目标到单点结构光系统中心的距离，f、D、a、β0是标定常数。
7.根据权利要求1所述的近距离单点结构光三维测量方法，其特征在于：图像处理软件采用激光点的提取算法，在激光点投影点附近的像素窗口中，将投影点中心设为亮度极值点；测距时，将相邻两帧图像背景假设为是静止不变的，当控制激光发射器发射与停止发射激光束时，分别得到包含激光投影点的图像与不含激光投影点的图像，对这两种图像做差分后，变化最剧烈的区域为激光点所在位置。
8.根据权利要求1所述的近距离单点结构光三维测量方法，其特征在于：调整安装支架的姿态或者移动设备的位置，将激光束指向被测目标，投影光栅图像到测量物体表面，计算机采集摄像机连续捕获的彩色数字图像，通过向被测物体投射编码图案，编程产生正弦条纹图，利用变形条纹图获取相位，获取相位的移相算法，产生四幅相位差pi/2的条纹，然后光栅经过物体面型调制之后被相机采集，由反正切函数计算所得采集四幅被调制条纹图和未被调制的四幅参考面的条纹，采集到的四幅受调制条纹图计算出被调制相位，得到的相位图是截断相位图，然后将该四幅条纹分时投影到被测物面具上，经过系统标定好的参数，通过一系列解相位，求解相位信息，再把相位转换到三维点云。
9.根据权利要求1所述的近距离单点结构光三维测量方法，其特征在于：通过计算机编程产生正弦条纹，将该正弦条纹通过投影设备投影至被测物，利用CCD相机拍摄条纹受物体调制的弯曲程度，解调该弯曲条纹得到相位，再将相位转化为全场的高度；测量时，投影器向被测空间中投射随机分布的点状结构光，每次投影都通过相机CCD进行成像，将峰值点在图像中的位置作为激光投影点位置，峰值位置为激光投影点在图像中的位置，再进行光斑密度的稠密匹配，图像处理软件搜索匹配像素图像，查找具有相同编码值的像素，找到线激光在图像中的对应像素的激光点，将每个像素都对应唯一的一个长度为n的二进制编码，用M种不同的灰度层级进行循环编码，重建出光心与像素的射线，射线和激光平面的交点为待求的三维空间点，重建出对应的深度图。可以获得比单纯使用RGB影像进行三维重建更加可靠和精确的结果。
10.根据权利要求1所述的近距离单点结构光三维测量方法，其特征在于：图像处理软件在目标物体上检测激光投影点，并得到经过标定图1中涉及的参数x0、y0，得到条纹中心的投射角后，将α代入系统三维模型的数学模型，根据结构光测距原理和参数x0、y0、f、D、β0和α，计算目标距离，得到相位主值，同时设计一个周期所占像素列数，相位主值换成其在周期内的实际坐标，再将截断相位恢复为连续相位，基于参考平面的标定建立物体高度和相位差的映射关系，二者相减得到表征了被测物相对参考面的高度信息的相位差，得到条纹上的点的三维坐标值，再代入相位与高度相应参数，从而进行物体的重构，得到三维模型。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310715170.7A CN116718133A (zh) | 2023-06-16 | 2023-06-16 | 近距离单点结构光三维测量方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310715170.7A CN116718133A (zh) | 2023-06-16 | 2023-06-16 | 近距离单点结构光三维测量方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN116718133A true CN116718133A (zh) | 2023-09-08 |
Family
ID=87869399
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310715170.7A Pending CN116718133A (zh) | 2023-06-16 | 2023-06-16 | 近距离单点结构光三维测量方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116718133A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117274352A (zh) * | 2023-11-17 | 2023-12-22 | 四川川大智胜软件股份有限公司 | 一种三维重建系统、相位计算方法和三维重建方法 |
| CN117451657A (zh) * | 2023-10-23 | 2024-01-26 | 南京审计大学 | 一种烟气干扰环境下远距离长波红外线激光测量仪及测量方法 |
| CN118274741A (zh) * | 2024-05-31 | 2024-07-02 | 北京嘉盛智检科技有限公司 | 一种激光测量方法、系统、装置及存储介质 |
-
2023
- 2023-06-16 CN CN202310715170.7A patent/CN116718133A/zh active Pending
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN117451657A (zh) * | 2023-10-23 | 2024-01-26 | 南京审计大学 | 一种烟气干扰环境下远距离长波红外线激光测量仪及测量方法 |
| CN117274352A (zh) * | 2023-11-17 | 2023-12-22 | 四川川大智胜软件股份有限公司 | 一种三维重建系统、相位计算方法和三维重建方法 |
| CN117274352B (zh) * | 2023-11-17 | 2024-02-06 | 四川川大智胜软件股份有限公司 | 一种三维重建系统、相位计算方法和三维重建方法 |
| CN118274741A (zh) * | 2024-05-31 | 2024-07-02 | 北京嘉盛智检科技有限公司 | 一种激光测量方法、系统、装置及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US10902668B2 (en) | 3D geometric modeling and 3D video content creation | |
| CN116718133A (zh) | 近距离单点结构光三维测量方法 | |
| CN103900494B (zh) | 用于双目视觉三维测量的同源点快速匹配方法 | |
| Mouaddib et al. | Recent progress in structured light in order to solve the correspondence problem in stereovision | |
| Batlle et al. | Recent progress in coded structured light as a technique to solve the correspondence problem: a survey | |
| US8090194B2 (en) | 3D geometric modeling and motion capture using both single and dual imaging | |
| US7844079B2 (en) | System and technique for retrieving depth information about a surface by projecting a composite image of modulated light patterns | |
| US7256899B1 (en) | Wireless methods and systems for three-dimensional non-contact shape sensing | |
| CA1233234A (en) | Optical three-dimensional digital data acquisition system | |
| CN107917679B (zh) | 一种高亮、过暗区域动态检测、补偿的方法 | |
| CN107860337B (zh) | 基于阵列相机的结构光三维重建方法与装置 | |
| CN103940370B (zh) | 基于周期互质混合编码的目标物体三维信息获取方法 | |
| CN105303572B (zh) | 基于主被动结合的深度信息获取方法 | |
| US6219063B1 (en) | 3D rendering | |
| CN113465545A (zh) | 一种基于高速led阵列的三维测量系统及其测量方法 | |
| CN110595390B (zh) | 基于四棱锥反射镜条纹投影装置及三维重建成像系统 | |
| CN113345039B (zh) | 三维重建量化结构光相位图像编码方法 | |
| CN110618537B (zh) | 镀膜透镜装置及应用该镀膜透镜装置的三维重建成像系统 | |
| CN105096314A (zh) | 基于二值网格模板的结构光动态场景深度获取方法 | |
| US6512844B2 (en) | 3D rendering | |
| CN115290004B (zh) | 一种基于压缩感知与hsi的水下并行单像素成像方法 | |
| CN110595389A (zh) | 基于单目镜头的采集装置及三维重建成像系统 | |
| CN115824170A (zh) | 一种摄影测量与激光雷达融合测量海洋波浪的方法 | |
| CN110617780B (zh) | 激光干涉装置及应用该激光干涉装置的三维重建成像系统 | |
| CN112945086A (zh) | 一种基于空间序列及光强阈值分割的结构光编码方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |