CN115170434A - 一种用于线结构光3d相机的误差校正方法以及装置 - Google Patents

一种用于线结构光3d相机的误差校正方法以及装置 Download PDF

Info

Publication number
CN115170434A
CN115170434A CN202210898609.XA CN202210898609A CN115170434A CN 115170434 A CN115170434 A CN 115170434A CN 202210898609 A CN202210898609 A CN 202210898609A CN 115170434 A CN115170434 A CN 115170434A
Authority
CN
China
Prior art keywords
calibration plate
error correction
dimensional calibration
plane
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210898609.XA
Other languages
English (en)
Inventor
魏智鹏
贺旭阳
郭洋洋
吴伟康
夏彪
杨威
刘浩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangsu Jicui Intelligent Photoelectric System Research Institute Co ltd
Original Assignee
Jiangsu Jicui Intelligent Photoelectric System Research Institute Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangsu Jicui Intelligent Photoelectric System Research Institute Co ltd filed Critical Jiangsu Jicui Intelligent Photoelectric System Research Institute Co ltd
Priority to CN202210898609.XA priority Critical patent/CN115170434A/zh
Publication of CN115170434A publication Critical patent/CN115170434A/zh
Priority to PCT/CN2023/084251 priority patent/WO2024021654A1/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G06T5/80
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G06T7/85Stereo camera calibration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds

Abstract

本发明提供了一种用于线结构光3D相机的误差校正方法以及装置,有效解决了因误差导致的线结构光3D相机的点云扭曲问题,提高了线结构光3D相机的成像精度,方法包括以下步骤:将三维标定板放置于线结构光3D相机视野中的不同位置并发生相对于运动扫描三维标定板,得到不同位置下的多组点云数据;对得到的点云数据进行处理,计算获得每组点云数据对应的三维标定板的角点坐标;将因误差产生的相对运动方向所在直线与线结构光3D相机的激光面之间的倾角,作为误差模型校正参数,构建误差校正模型;通过三维标定板上角点间的空间向量约束关系求解误差校正模型参数;将误差校正模型用于被测物体的点云数据,得到无畸变的点云数据。

Description

一种用于线结构光3D相机的误差校正方法以及装置
技术领域
本发明涉及3D视觉技术领域,具体涉及一种用于线结构光3D相机的误差校正方法以及装置。
背景技术
随着机器视觉的快速发展,3D视觉技术的应用变得越来越普遍,现有的3D成像技术原理上主要有双目立体视觉法、激光三角法、结构光3D成像、飞行时间法ToF,光场成像法、全息投影技术。其中双目立体视觉法、线结构光3D、面结构光3D成像的精度较高,所以在工业领域这三种原理的3D相机被广泛应用。其中基于单线结构光的3D相机原理简单、测量精度高、成本低廉、稳定性高,故其具有重要的工程应用价值和较好的市场前景。
根据激光面与相对运动方向所在直线的夹角关系可将线结构光3D相机划分为垂直式和斜入式,对于垂直式单线结构光3D相机,线结构光3D相机拍到激光线轮廓后由激光线中心提取算法得到激光线的中心轮廓,再经过标定得到的转换矩阵运算后得到被测物体表面的单条3D轮廓线,最终由多条轮廓线组合成被测物体表面完整的3D点云。
单线结构光3D相机成像需要被测物体与相机之间产生相对运动,理想的安装位置需满足相对运动方向所在的直线完全垂直于激光面,但实际应用中3D相机安装很难保证达到理想的安装位置。由于机构件的加工误差和3D相机的安装误差,很难保证运动方向所在的直线完全垂直于激光面,线结构光3D相机的安装一旦有角度倾斜,将会导致采集到的点云产生扭曲,从而影响了三维测量系统的测量精度。因此,研究如何校正线结构光3D相机的安装误差,是提高线结构光3D测量系统可靠性与保证三维测量精度的重要手段。
发明内容
针对上述问题,本发明提供了一种用于线结构光3D相机的误差校正方法以及装置,有效解决了因误差导致的线结构光3D相机的点云扭曲问题,提高了线结构光3D相机的成像精度,为后续的高精度3D图像处理提供了保障。
其技术方案是这样的:一种用于线结构光3D相机的误差校正方法,其特征在于,包括以下步骤:
将三维标定板放置于线结构光3D相机视野中的不同位置,线结构光3D相机与三维标定板之间发生相对于运动扫描三维标定板,得到不同位置下的三维标定板的多组点云数据;
对得到的点云数据进行处理,计算获得每组点云数据对应的三维标定板的角点坐标;
将因误差产生的相对运动方向所在直线与线结构光3D相机的激光面之间的倾角,作为误差模型校正参数,构建误差校正模型;
通过三维标定板上角点间的空间向量约束关系求解误差校正模型参数;
将误差校正模型用于被测物体的点云数据,得到无畸变的点云数据。
进一步的,所述三维标定板包括一个正方形平面,所述正方形平面的四边分别连接有侧平面,所述正方形平面与所述侧平面之间构成有夹角。
进一步的,对得到的点云数据进行处理,计算获得每组点云数据对应的三维标定板的角点坐标,具体包括以下步骤:
对得到的点云数据进行滤波处理,将三维标定板的5个平面数据分离成5个独立的3D点集,采用基于RANSAC算法的平面拟合方法,经过拟合得到三维标定板的平面方程,表示为:
Anx+Bny+Cnz+Dn=0
其中An、Bn、Cn、Dn分别为平面n的平面参数,n为整数。
分别将正方形平面的四个角点周边的三个平面方程联立方程组,表示为:
Figure BDA0003770045270000021
A0、B0、C0、D0为角点周边第一个平面的平面参数;A1、B1、C1、D1为角点周边第二个平面的平面参数;A2、B2、C2、D2为角点周边第三个平面的平面参数;
依次求解角点周边的三个平面方程,得到正方形平面的四个角点的坐标,每组点云数据得到一组正方形平面的四个角点的坐标。
进一步的,线结构光3D相机拍摄三维标定板时,存在的对测量精度具有影响的倾角,包括线结构光3D相机绕世界坐标系的Z轴旋转α度形成的倾角和绕世界坐标系的X轴旋转β度形成的倾角,与世界坐标系的X轴之间的倾角α和与世界坐标系的Z轴之间的倾角β,世界坐标系的Y轴平行于线结构光3D相机拍摄三维标定板时的相对运动方向,构建误差校正模型表示为:
Figure BDA0003770045270000022
其中,[X Y Z]T为扭曲的点坐标,[X′ Y′ Z′]T为校正后的三维点坐标,α、β分别为误差校正模型参数。
进一步的,通过三维标定板上角点间的空间向量约束关系求解误差校正模型参数,包括以下步骤:
确定三维标定板上角点间的空间向量约束关系,包括三维标定板的正方形平面满足对角线向量内积为0以及三维标定板的正方形平面两对角线模长等于正方形平面边长的
Figure BDA0003770045270000036
倍;
设定单组三维标定板校正后对角线向量内积的平方为目标函数,目标函数通过角点坐标和误差校正模型参数进行表示;
采用拉格朗日乘数法求解目标函数,基于多组三维标定板的角点数据设置优化函数;将三维标定板的正方形平面满足对角线向量内积为0以及三维标定板的正方形平面两对角线模长等于正方形平面边长的
Figure BDA0003770045270000031
倍作为拉格朗日乘数法中的约束条件;
建立拉格朗日函数,令拉格朗日函数对于各个误差校正模型参数和拉格朗日乘数的一阶偏导数等于零,求解得到误差校正模型参数。
进一步的,所述的通过三维标定板上角点间的空间向量约束关系求解误差校正模型参数,包括:
令误差校正模型x1=cosα,x2=sinα,x3=sinβ,x4=cosβ,三维标定板的正方形平面的四个角点顺时针排列分别为A、B、C和D,校正后满足对角线向量内积为0,表示为:
Figure BDA0003770045270000032
且两对角线模长等于正方形平面边长的
Figure BDA0003770045270000033
倍,表示为:
Figure BDA0003770045270000034
式中L为三维标定板的正方形平面的边长;
设定单组三维标定板校正后对角线向量内积的平方为目标函数:
Figure BDA0003770045270000035
ΔXbd表示B、D两个点的X轴的坐标差值,ΔYbd表示B、D两个点的Y轴的坐标差值,ΔZbd表示B、D两个点的Z轴的坐标差值;ΔXac表示A、C两个点的X轴的坐标差值,ΔYac表示A、C两个点的Y轴的坐标差值,ΔZac表示A、C两个点的Z轴的坐标差值。
基于拉格朗日乘数法求解目标函数,设置优化函数为:
Figure BDA0003770045270000041
式中n为三维标定板不同位置下成像的次数,fi(x1,x2,x3,x4)为第i次成像时三维标定板的目标函数;
优化函数满足约束条件:
Figure BDA0003770045270000042
且满足
Figure BDA0003770045270000043
建立拉格朗日函数
Figure BDA0003770045270000044
Figure BDA0003770045270000045
式中λi称拉格朗日乘数;
分别对x1,x2,x3,x4,λi求偏导,并令导数为0,求得x1,x2,x3,x4为优化函数在满足约束条件下的极值点,作为误差校正模型参数。
一种计算机装置,其特征在于,其包括:包括处理器、存储器以及程序;
所述程序存储在所述存储器中,所述处理器调用存储器存储的程序,以执行上述的一种用于线结构光3D相机的误差校正方法。
一种计算机可读存储介质,其特征在于:所述计算机可读存储介质用于存储程序,所述程序用于执行上述的一种用于线结构光3D相机的误差校正方法。
本发明的用于线结构光3D相机的误差校正方法,设计了一个三维标定板,通过线结构光3D相机拍摄不同位置的三维标定板,进而获得三维标定板上的角点坐标,根据线结构光3D相机拍摄三维标定板时,实际可能存在的对测量精度具有影响的倾角设置了误差校正模型参数,依据误差校正模型参数构建了误差校正模型,然后通过三维标定板上的角点之间的空间向量约束求解得到误差校正模型参数,最终可以采用误差校正模型校正被测物体的点云数据,得到无畸变的点云数据,本发明的方法具有以下优点:
1、本发明设计的三维标定板结构简单,易于加工,且标定板通用性强,可重复利用。
2、采用本发明设计的三维标定板,仅需要基于空间中平面交线的交点作为特征角点,算法复杂度低、鲁棒性高、精度高。
3、本发明的方法操作简单,标定效率高,具有可操作性。有效解决了线结构光3D相机的安装误差导致的点云扭曲问题,提高了线结构光3D相机的成像精度,为后续的高精度3D图像处理提供了保障。
4、本发明的方法具有通用性和扩展性。可用于一般推扫式3D成像场合,方法具有通用性,同时可扩展为斜入式线结构光3D相机的应用场景。
附图说明
图1为本发明的一个实施例中的一种用于线结构光3D相机的误差校正方法的步骤示意图;
图2为实施例中的三维标定板的示意图;
图3为线结构光3D相机拍摄物品的示意图;
图4为实际中线结构光3D相机产生安装误差绕Z轴旋转α度的俯视示意图;
图5为实际中线结构光3D相机产生安装误差绕X轴旋转β度的示意图;
图6为一个实施例中计算机装置的内部结构图。
具体实施方式
线结构光3D相机在成像时需要相机与目标之间有相对运动,在搭建线结构光3D相机成像系统时大多都是靠机械工装约束使得相对运动方向所在的直线与3D相机Y轴所在的直线平行,这将对机械加工和安装精度有较高的要求,实际应用中实现难度大成本高。为此本发明在实施例中提供了一种用于线结构光3D相机的误差校正方法,包括以下步骤:
步骤1:将三维标定板放置于线结构光3D相机视野中的不同位置,线结构光3D相机与三维标定板之间发生相对于运动扫描三维标定板,得到不同位置下的三维标定板的多组点云数据;
步骤2:对得到的点云数据进行处理,计算获得每组点云数据对应的三维标定板的角点坐标;
步骤3:将因误差产生的相对运动方向所在直线与线结构光3D相机的激光面之间的倾角,作为误差模型校正参数,构建误差校正模型;
步骤4:通过三维标定板上角点间的空间向量约束关系求解误差校正模型参数;
步骤5:将误差校正模型用于被测物体的点云数据,得到无畸变的点云数据。
具体在本发明的一个实施例中,在步骤1中,在使用线结构光3D相机前,需要对于线结构光3D相机进行标定。
采用线结构光3D相机拍摄棋盘格标定板,提取图像中棋盘格标定板角点的像素坐标,通过像素坐标和三维世界坐标对应关系求出单应矩阵,进而得出相机的内参矩阵、镜头畸变参数、外参矩阵,最后通过最优化方法得到最优参数。像素坐标系和世界坐标系之间的关系如下:
Figure BDA0003770045270000061
式中fx=f/dx,fy=f/dy,f/dx表示使用像素来描述X轴方向焦距的长度,f/dy表示使用像素来描述Y轴方向焦距的长度,u0、v0表示实际光心坐标,单位也是像素,M即为相机内参,R、T为相机坐标系和世界坐标系之间的旋转矩阵和平移向量,称为外参。
图像畸变模型包括径向畸变和切向畸变,畸变模型如下所示:
Figure BDA0003770045270000062
式中ρ为坐标到原点的距离,k1,k2为径向畸变系数,p1,p2为切向畸变系数,(x,y)为理想状态下的坐标,(x′,y′)为带有畸变的坐标。
本步骤中采用张正友标定法,使用最大似然估计法优化标定结果,最后再将运算得到的结果作为初始值,使用LM最小二乘优化得出更为精确的内参和外参矩阵。
在步骤1中,在使用线结构光3D相机前,还需要对于线结构光3D相机进行激光面位姿标定。
线结构光3D相机中的激光器投射的扇形区域可看作一个光平面,如果我们知道了激光平面方程,就可以计算图像平面与激光平面的单应性矩阵。通过单应性矩阵即可计算得到被测物体表面的三维坐标,计算关系如下所示:
Figure BDA0003770045270000063
式中u′,v′为经过镜头畸变矫正后的像素坐标,s为比例因子,X、Z为相机坐标系下的三维坐标,
Figure BDA0003770045270000064
为单应性矩阵。
激光面的平面方程表示为:APx+BPy+CPz+DP=0,AP、BP、CP、DP为激光面的平面系数。
将背光棋盘格标定板放置于相机视野内的不同位置,分别拍摄一张背光标定板图像和一张带激光线的图像,使用COG算法提取激光中心线轮廓,再通过标定板坐标系和相机坐标系的转换关系
Figure BDA0003770045270000071
得到相机坐标系下的激光线三维点。理论上通过三个非共线点即可求解激光面方程,但是为了减小误差,我们采用多组激光线三维点拟合得到激光平面的平面系数。
见图2,本步骤中采用的三维标定板包括一个正方形平面1,正方形平面的四边分别连接有侧平面2,正方形平面1与侧平面之间2构成有夹角,本实施例中侧平面2均为长方形,正方形平面1与侧平面之间2的夹角取值在15-45度之间,角度参数的选择要满足两个要求:1)能够与中间的正方形平面区分开;2)当标定板在空间中有一定倾斜角度时可以保证图中的5个平面均能采集到足够多的3D点,本实施例中夹角选择的角度为30度。
在完成标定后,即可以将本实施中设计的三维标定板放置于线结构光3D相机视野中,线结构光3D相机与三维标定板之间发生相对于运动扫描三维标定板,即可以的到三维标定板的一组3D点云数据,将三维标定板放置于线结构光3D相机视野中其他位置,再次发生相对于运动扫描三维标定板,可以再获得一组三维标定板的3D点云数据,三维标定板调整多个不同的位置,即可以得到不同位置下的三维标定板的多组点云数据。
在本发明的一个实施例中,在步骤2中,对得到的点云数据进行处理,计算获得每组点云数据对应的三维标定板的角点坐标;具体包括以下步骤:
步骤201:对得到的点云数据进行滤波处理:扫描得到的点云数据可能会有一些的噪声,为了提高后续的标定精度故先对得到点云进行滤波,去除稀疏离群点。对于每个点,计算它与所有邻居点之间的平均距离。假设结果分布是具有平均数和标准差的高斯分布,所有平均距离在由全局距离平均数和标准差定义的区间之外的点都可以被视为稀疏离群点,将离群点从点云数据集中修剪掉。
步骤202:将三维标定板的5个平面数据分离成5个独立的3D点集。
步骤203:采用基于RANSAC算法的平面拟合方法,经过拟合得到三维标定板的5个平面的平面方程,表示为:
Anx+Bny+Cnz+Dn=0
其中An、Bn、Cn、Dn分别为平面n的平面参数,n为整数。
步骤204:三维标定板特征角点提取:分别将正方形平面的四个角点周边的三个平面方程联立方程组,表示为:
Figure BDA0003770045270000081
A0、B0、C0、D0为角点周边第一个平面的平面参数;A1、B1、C1、D1为角点周边第二个平面的平面参数;A2、B2、C2、D2为角点周边第三个平面的平面参数;
依次求解角点周边的三个平面方程,可以得到四个角点的坐标。
已知由于机构件的加工误差和3D相机的安装误差,很难保证运动方向所在的直线完全垂直于激光面,从而实际中存在因误差产生的相对运动方向所在直线与线结构光3D相机的激光面之间的倾角,为此实施例中分别分析几种倾角会对测量精度具有影响。
垂直式的线结构光3D相机扫描成像的示意图如图3所示:理想的线结构光3D相机的安装位置为运动方向所在的直线垂直于激光面,但是由于误差存在,存在以下3种情况:
情况1:当线结构光3D相机安装绕着图中世界坐标系的Z轴旋转α度时,俯视图如图4所示,AC所在的直线为实际激光线,A、C为存在倾角α误差时的成像点,B、D为理论上的成像点,从图中几何关系易知:
Figure BDA0003770045270000082
式中[X Y Z]T为扭曲的点坐标,[X′ Y′ Z′]T为校正后的三维点坐标。
情况2:当线结构光3D相机安装仅绕着图中的世界坐标系的Y轴旋转,仅相当于被测物体在线结构光3D相机视野中的不同位置,这对三维测量精度没有影响。
情况3:当线结构光3D相机安装仅绕着图中世界坐标系的X轴旋转β度时,其主视图如图5所示,AC所在的直线为实际激光线,A、C为存在倾角β误差时的成像点,B、D为理论上的成像点从图中几何关系易知:
Figure BDA0003770045270000083
式中[X Y Z]T为扭曲的点坐标,[X′ Y′ Z′]T为校正后的三维点坐标。
从而,在步骤3中,线结构光3D相机拍摄三维标定板时,存在的对测量精度具有影响的倾角,包括线结构光3D相机绕世界坐标系的Z轴旋转α度形成的倾角和绕世界坐标系的X轴旋转β度形成的倾角,世界坐标系的Y轴平行于线结构光3D相机拍摄三维标定板时的相对运动方向,构建误差校正模型表示为:
Figure BDA0003770045270000091
其中,[X Y Z]T为扭曲的点坐标,[X′ Y′ Z′]T为校正后的三维点坐标,α、β分别为误差校正模型参数。
对应的点坐标变换公式如下:
Figure BDA0003770045270000092
因为三维重构及三维标定板角点提取会存在一定的误差,所以对于误差校正模型参数α和β只能求最优解。
在本发明中,在步骤4中,包括以下步骤:
由于三维标定板中间为正方形平面,可以确定三维标定板上角点间的空间向量约束关系,包括三维标定板的正方形平面满足对角线向量内积为0以及三维标定板的正方形平面两对角线模长等于正方形平面边长的
Figure BDA0003770045270000093
倍;
设定单组三维标定板校正后对角线向量内积的平方为目标函数,目标函数通过角点坐标和误差校正模型参数进行表示;
采用拉格朗日乘数法求解目标函数,基于多组三维标定板的角点数据设置优化函数;将三维标定板的正方形平面满足对角线向量内积为0以及三维标定板的正方形平面两对角线模长等于正方形平面边长的
Figure BDA0003770045270000097
倍作为拉格朗日乘数法中的约束条件;
建立拉格朗日函数,令拉格朗日函数对于各个误差校正模型参数和拉格朗日乘数的一阶偏导数等于零,求解得到误差校正模型参数。
具体在一个实施例中,步骤4包括:
令误差校正模型x1=cosα,x2=sinα,x3=sinβ,x4=cosβ,三维标定板的正方形平面的四个角点顺时针排列分别为A、B、C和D,校正后满足对角线向量内积为0,表示为:
Figure BDA0003770045270000094
且两对角线模长等于正方形平面边长的
Figure BDA0003770045270000095
倍,表示为:
Figure BDA0003770045270000096
式中L为三维标定板的正方形平面的边长;
设定单组三维标定板校正后对角线向量内积的平方为目标函数:
Figure BDA0003770045270000101
ΔXbd表示B、D两个点的X轴的坐标差值,ΔYbd表示B、D两个点的Y轴的坐标差值,ΔZbd表示B、D两个点的Z轴的坐标差值;ΔXac表示A、C两个点的X轴的坐标差值,ΔYac表示A、C两个点的Y轴的坐标差值,ΔZac表示A、C两个点的Z轴的坐标差值。
基于拉格朗日乘数法求解目标函数,设置优化函数为:
Figure BDA0003770045270000102
式中n为三维标定板不同位置下成像的次数,fi(x1,x2,x3,x4)为第i次成像时三维标定板的目标函数,n可以设置10-20之间;
优化函数满足约束条件:
Figure BDA0003770045270000103
且满足
Figure BDA0003770045270000104
为寻找优化函数F(X)在约束条件下的极值点,先做拉格朗日函数,表示为:
Figure BDA0003770045270000105
式中λi称拉格朗日乘数;
然后分别对x1,x2,x3,x4,λi求偏导,并令导数为0,求得x1,x2,x3,x4,得到的x1,x2,x3,x4为优化函数在满足约束条件下的极值点,然后通过反三角函数计算得到误差校正模型参数α和β。
拉格朗日乘数法是一种寻找变量受一个或多个条件所限制的多元函数的极值的方法。这种方法将一个有n个变量与k个约束条件的最优化问题转换为一个有n+k个变量的方程组的极值问题,本发明中拉格朗日乘数法在计算误差校正模型参数时的应用,可得到较为精确的误差校正模型参数α和β的解。
在步骤5中,将已经计算得到误差校正模型参数α和β的误差校正模型用于被测物体的点云数据,可以得到无畸变的点云数据。
由于线结构光3D相机搭建时各个部件的加工和组装精度问题,很难保证空间中3D相机Y轴所在的直线与相对运动方向所在的直线平行,这将导致3D相机获得的点云产生畸变,畸变将影响到整个3D系统的定位及测量精度。
本实施例提供的方法,首先标定相机参数和激光面参数,标定完成后即可重构得到被测物体表面的单轮廓3D数据;相对运动扫描三维标定板,得到标定板表面3D点云数据;采用RANSAC算法拟合标定板表面的多个平面,计算相邻三个平面的交点作为三维标定板特征角点;根据激光三角法成像原理构建误差校正模型,采用拉格朗日乘数法求解校正模型参数,本方法针对基于线结构光3D相机的视觉系统提升测量系统的准确率与测量精度,具有重要实际意义。
在本发明的实施例中,还提供了一种计算机装置,其包括:包括处理器、存储器以及程序;
程序存储在存储器中,处理器调用存储器存储的程序,以执行上述的一种用于线结构光3D相机的误差校正方法。
该计算机装置可以是终端,其内部结构图可以如图6所示。该计算机装置包括通过总线连接的处理器、存储器、网络接口、显示屏和输入装置。其中,该计算机装置的处理器用于提供计算和控制能力。该计算机装置的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机装置的网络接口用于与外部的终端通过网络连接通信。该计算机程序被处理器执行时以实现用于线结构光3D相机的误差校正方法。该计算机装置的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机装置的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机装置外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
存储器可以是,但不限于,随机存取存储器(Random Access Memory,简称:RAM),只读存储器(Read Only Memory,简称:ROM),可编程只读存储器(Programmable Read-OnlyMemory,简称:PROM),可擦除只读存储器(Erasable Programmable Read-Only Memory,简称:EPROM),电可擦除只读存储器(Electric Erasable Programmable Read-Only Memory,简称:EEPROM)等。其中,存储器用于存储程序,处理器在接收到执行指令后,执行程序。
处理器可以是一种集成电路芯片,具有信号的处理能力。上述的处理器可以是通用处理器,包括中央处理器(Central Processing Unit,简称:CPU)、网络处理器(NetworkProcessor,简称:NP)等。该处理器还可以是其他通用处理器、数字信号处理器(DigitalSignal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
本领域技术人员可以理解,图6中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机装置的限定,具体的计算机装置可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在本发明的实施例中,还提供了一种计算机可读存储介质,计算机可读存储介质被配置成存储程序,程序被配置成执行上述的一种用于线结构光3D相机的误差校正方法。
本领域内的技术人员应明白,本发明实施例的实施例可提供为方法、计算机装置、或计算机程序产品。因此,本发明实施例可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明实施例可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明实施例是参照根据本发明实施例的方法、计算机装置、或计算机程序产品的流程图和/或框图来描述的。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理终端设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理终端设备的处理器执行的指令产生用于实现在流程图和/或中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理终端设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图中指定的功能。
以上对本发明所提供的在一种用于线结构光3D相机的误差校正方法、计算机装置、计算机可读存储介质的应用进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种用于线结构光3D相机的误差校正方法,其特征在于,包括以下步骤:
将三维标定板放置于线结构光3D相机视野中的不同位置,线结构光3D相机与三维标定板之间发生相对于运动扫描三维标定板,得到不同位置下的三维标定板的多组点云数据;
对得到的点云数据进行处理,计算获得每组点云数据对应的三维标定板的角点坐标;
将因误差产生的相对运动方向所在直线与线结构光3D相机的激光面之间的倾角,作为误差模型校正参数,构建误差校正模型;
通过三维标定板上角点间的空间向量约束关系求解误差校正模型参数;
将误差校正模型用于被测物体的点云数据,得到无畸变的点云数据。
2.根据权利要求1所述的一种用于线结构光3D相机的误差校正方法,其特征在于:所述三维标定板包括一个正方形平面,所述正方形平面的四边分别连接有侧平面,所述正方形平面与所述侧平面之间构成有夹角。
3.根据权利要求2所述的一种用于线结构光3D相机的误差校正方法,其特征在于:所述夹角的取值范围为15至45度。
4.根据权利要求2所述的一种用于线结构光3D相机的误差校正方法,其特征在于:对得到的点云数据进行处理,计算获得每组点云数据对应的三维标定板的角点坐标,具体包括以下步骤:
对得到的点云数据进行滤波处理,将三维标定板的5个平面数据分离成5个独立的3D点集,采用基于RANSAC算法的平面拟合方法,经过拟合得到三维标定板的平面方程,表示为:
Anx+Bny+Cnz+Dn=0
其中An、Bn、Cn、Dn分别为平面n的平面参数,n为整数;
分别将正方形平面的四个角点周边的三个平面方程联立方程组,表示为:
Figure FDA0003770045260000011
A0、B0、C0、D0为角点周边第一个平面的平面参数;A1、B1、C1、D1为角点周边第二个平面的平面参数;A2、B2、C2、D2为角点周边第三个平面的平面参数;
依次求解角点周边的三个平面方程,得到正方形平面的四个角点的坐标,每组点云数据得到一组正方形平面的四个角点的坐标。
5.根据权利要求4所述的一种用于线结构光3D相机的误差校正方法,其特征在于:所述的点云数据进行滤波处理,包括:
对于每个点,计算点与所有邻居点之间的平均距离,如果点的平均距离在由全局距离平均数和标准差定义的区间之外,则视为稀疏离群点,将稀疏离群点从点云数据集中去除。
6.根据权利要求4所述的一种用于线结构光3D相机的误差校正方法,其特征在于:线结构光3D相机拍摄三维标定板时,存在的对测量精度具有影响的倾角,包括线结构光3D相机绕世界坐标系的Z轴旋转α度形成的倾角和绕世界坐标系的X轴旋转β度形成的倾角,世界坐标系的Y轴平行于线结构光3D相机拍摄三维标定板时的相对运动方向,构建误差校正模型表示为:
Figure FDA0003770045260000021
其中,[X Y Z]T为扭曲的点坐标,[X′ Y′ Z′]T为校正后的三维点坐标,α、β分别为误差校正模型参数。
7.根据权利要求6所述的一种用于线结构光3D相机的误差校正方法,其特征在于:通过三维标定板上角点间的空间向量约束关系求解误差校正模型参数,包括以下步骤:
确定三维标定板上角点间的空间向量约束关系,包括三维标定板的正方形平面满足对角线向量内积为0以及三维标定板的正方形平面两对角线模长等于正方形平面边长的√2倍;
设定单组三维标定板校正后对角线向量内积的平方为目标函数,目标函数通过角点坐标和误差校正模型参数进行表示;
采用拉格朗日乘数法求解目标函数,基于多组三维标定板的角点数据设置优化函数;将三维标定板的正方形平面满足对角线向量内积为0以及三维标定板的正方形平面两对角线模长等于正方形平面的边长的
Figure FDA0003770045260000022
倍作为拉格朗日乘数法中的约束条件;
建立拉格朗日函数,令拉格朗日函数对于各个误差校正模型参数和拉格朗日乘数的一阶偏导数等于零,求解得到误差校正模型参数。
8.根据权利要求7所述的一种用于线结构光3D相机的误差校正方法,其特征在于:所述的通过三维标定板上角点间的空间向量约束关系求解误差校正模型参数,包括:
令误差校正模型x1=cosα,x2=sinα,x3=sinγ,x4=cosβ,三维标定板的正方形平面的四个角点顺时针排列分别为A、B、C和D,校正后满足对角线向量内积为0,表示为:
Figure FDA0003770045260000031
且两对角线模长等于正方形平面边长的
Figure FDA0003770045260000032
倍,表示为:
Figure FDA0003770045260000033
式中L为三维标定板的正方形平面的边长;
设定单组三维标定板校正后对角线向量内积的平方为目标函数:
Figure FDA0003770045260000034
ΔXbd表示B、D两个点的X轴的坐标差值,ΔYbd表示B、D两个点的Y轴的坐标差值,ΔZbd表示B、D两个点的Z轴的坐标差值;ΔXac表示A、C两个点的X轴的坐标差值,ΔYac表示A、C两个点的Y轴的坐标差值,ΔZac表示A、C两个点的Z轴的坐标差值;
基于拉格朗日乘数法求解目标函数,设置优化函数为:
Figure FDA0003770045260000035
式中n为三维标定板不同位置下成像的次数,fi(x1,x2,x3,x4)为第i次成像时三维标定板的目标函数;
优化函数满足约束条件:
Figure FDA0003770045260000036
且满足
Figure FDA0003770045260000037
建立拉格朗日函数
Figure FDA0003770045260000038
Figure FDA0003770045260000039
式中λi称拉格朗日乘数;
分别对x1,x2,x3,x4i求偏导,并令导数为0,求得x1,x2,x3,x4为优化函数在满足约束条件下的极值点,作为误差校正模型参数。
9.一种计算机装置,其特征在于,其包括:包括处理器、存储器以及程序;
所述程序存储在所述存储器中,所述处理器调用存储器存储的程序,以执行权利要求1所述的一种用于线结构光3D相机的误差校正方法。
10.一种计算机可读存储介质,其特征在于:所述计算机可读存储介质用于存储程序,所述程序用于执行权利要求1所述的一种用于线结构光3D相机的误差校正方法。
CN202210898609.XA 2022-07-28 2022-07-28 一种用于线结构光3d相机的误差校正方法以及装置 Pending CN115170434A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202210898609.XA CN115170434A (zh) 2022-07-28 2022-07-28 一种用于线结构光3d相机的误差校正方法以及装置
PCT/CN2023/084251 WO2024021654A1 (zh) 2022-07-28 2023-03-28 一种用于线结构光3d相机的误差校正方法以及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210898609.XA CN115170434A (zh) 2022-07-28 2022-07-28 一种用于线结构光3d相机的误差校正方法以及装置

Publications (1)

Publication Number Publication Date
CN115170434A true CN115170434A (zh) 2022-10-11

Family

ID=83476559

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210898609.XA Pending CN115170434A (zh) 2022-07-28 2022-07-28 一种用于线结构光3d相机的误差校正方法以及装置

Country Status (2)

Country Link
CN (1) CN115170434A (zh)
WO (1) WO2024021654A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024021654A1 (zh) * 2022-07-28 2024-02-01 江苏集萃智能光电系统研究所有限公司 一种用于线结构光3d相机的误差校正方法以及装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020208686A1 (ja) * 2019-04-08 2020-10-15 日本電気株式会社 カメラ校正装置、カメラ校正方法、及びプログラムが格納された非一時的なコンピュータ可読媒体
CN111932632A (zh) * 2020-07-13 2020-11-13 太仓中科信息技术研究院 一种机械零件三维重建中的相位校正方法
CN112634373B (zh) * 2020-12-01 2023-08-11 北京航天计量测试技术研究所 基于零膨胀陶瓷标定板的视觉测量系统动态校正方法
CN113902812A (zh) * 2021-10-13 2022-01-07 岱悟智能科技(上海)有限公司 一种基于多标定板的激光雷达与相机外参自动标定方法
CN114332191A (zh) * 2021-11-29 2022-04-12 盛景智能科技(嘉兴)有限公司 三维点云误差补偿方法及装置
CN114758006A (zh) * 2022-03-25 2022-07-15 中铁科工集团有限公司 基于三维标定板的多相机坐标系标定方法、装置及介质
CN115170434A (zh) * 2022-07-28 2022-10-11 江苏集萃智能光电系统研究所有限公司 一种用于线结构光3d相机的误差校正方法以及装置

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024021654A1 (zh) * 2022-07-28 2024-02-01 江苏集萃智能光电系统研究所有限公司 一种用于线结构光3d相机的误差校正方法以及装置

Also Published As

Publication number Publication date
WO2024021654A1 (zh) 2024-02-01

Similar Documents

Publication Publication Date Title
CN108053450B (zh) 一种基于多约束的高精度双目相机标定方法
CN109272574B (zh) 基于投影变换的线阵旋转扫描相机成像模型构建方法和标定方法
CN113494893B (zh) 一种三维激光扫描系统的标定方法、装置和计算机设备
CN111123242B (zh) 一种基于激光雷达和相机的联合标定方法及计算机可读存储介质
JP2020053008A (ja) 位置決め方法、ロボット及びコンピューター記憶媒体
CN110874854B (zh) 一种基于小基线条件下的相机双目摄影测量方法
CN109272555B (zh) 一种rgb-d相机的外部参数获得及标定方法
CN110349257B (zh) 一种基于相位伪映射的双目测量缺失点云插补方法
JP2000011172A (ja) 仮想環境生成方法および装置、並びに仮想環境生成プログラムを記録した記録媒体
CN115457147A (zh) 相机标定方法、电子设备及存储介质
CN115439571A (zh) 一种适用于线阵推扫式卫星影像核线影像生成方法及装置
CN112598747A (zh) 一种单目相机与投影仪的联合标定方法
WO2024021654A1 (zh) 一种用于线结构光3d相机的误差校正方法以及装置
WO2023010565A1 (zh) 单目散斑结构光系统的标定方法、装置及终端
Zexiao et al. Study on a full field of view laser scanning system
CN112115926B (zh) 基于遥感图像的建筑物体块模型构建方法及相关设备
CN113240746A (zh) 基于理想成像平面的散斑结构光标定方法和设备
CN110458951B (zh) 一种电网杆塔的建模数据获取方法及相关装置
Peng et al. Hybrid calibration procedure for structured light field system
CN115046497A (zh) 一种基于光栅投影测量系统的改进标定方法
JP4548228B2 (ja) 画像データ作成方法
CN110232715B (zh) 一种多深度相机自校准的方法、装置及系统
CN111862332A (zh) 一种卫星影像通用成像模型拟合误差的改正方法及系统
CN111383179B (zh) 镜头影像校正方法
CN114972013B (zh) 球面几何单次变换的鱼眼影像快速正射纠正方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination