CN111739104A - 一种激光标定系统的标定方法、装置以及激光标定系统 - Google Patents

一种激光标定系统的标定方法、装置以及激光标定系统 Download PDF

Info

Publication number
CN111739104A
CN111739104A CN202010590850.7A CN202010590850A CN111739104A CN 111739104 A CN111739104 A CN 111739104A CN 202010590850 A CN202010590850 A CN 202010590850A CN 111739104 A CN111739104 A CN 111739104A
Authority
CN
China
Prior art keywords
image
laser
camera
target
coordinates
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010590850.7A
Other languages
English (en)
Other versions
CN111739104B (zh
Inventor
王维林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Autel Intelligent Technology Corp Ltd
Original Assignee
Autel Intelligent Technology Corp Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Autel Intelligent Technology Corp Ltd filed Critical Autel Intelligent Technology Corp Ltd
Priority to CN202010590850.7A priority Critical patent/CN111739104B/zh
Priority claimed from CN202010590850.7A external-priority patent/CN111739104B/zh
Publication of CN111739104A publication Critical patent/CN111739104A/zh
Priority to PCT/CN2021/100796 priority patent/WO2021259151A1/zh
Application granted granted Critical
Publication of CN111739104B publication Critical patent/CN111739104B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image

Abstract

本发明实施例涉及激光标定技术领域,特别是涉及一种激光标定系统的标定方法、装置以及激光标定系统。激光标定系统的标定方法包括:获取相机在第一位置时标靶的第一图像;识别激光打在标靶时的第一激光线;在第一激光线中选定第一参考点,确定第一参考点的像素坐标并转换为相机坐标;获取相机在第二位置时标靶的第二图像,其中,第一位置和第二位置为相机相对于标靶所在的位置,并且第一位置和第二位置不相同;识别激光打在标靶时的第二激光线;在第二激光线中选定第二参考点,确定第二参考点的像素坐标并转换为相机坐标;根据第一参考点和第二参考点的相机坐标,确定激光平面的平面方程。通过上述方法实现对激光标定系统的标定,非常方便快捷。

Description

一种激光标定系统的标定方法、装置以及激光标定系统
技术领域
本发明实施例涉及激光标定技术领域,特别是涉及一种激光标定系统的标定方法、装置以及激光标定系统。
背景技术
在工业深度测量领域中,根据三角测量原理,用包括激光器和相机在内的激光测量设备对目标物体的深度信息进行测量,进行三维重构应用非常广泛。在工厂生产中,激光器和相机的安装位置有一定的工差,即使实验室对产品已经做了标定,由于工差和器件个体差异的存在,出厂前,激光测量设备必须进行重新标定。其中,激光器和相机的相对位置固定,激光平面在相机坐标系中的位置由激光平面方程表示,该激光平面方程的参数由激光在标定台上形成的激光线上的激光平面确定,因此对激光平面的标定尤为重要。
但是,本发明的发明人在实现本发明实施例的过程中,发现:目前是采用手工标定的方法对激光平面进行标定的,手工标定的标定时间长且操作复杂,很难适用于工厂大批量生产。
发明内容
鉴于上述问题,本发明实施例提供了一种激光标定系统的标定方法、装置以及激光标定系统,克服了上述问题或者至少部分地解决了上述问题。
根据本发明实施例的一个方面,提供了一种激光标定系统的标定方法,包括:获取所述相机在第一位置时所采集到的所述标靶的第一图像;根据所述第一图像,识别所述激光打在所述标靶时形成的第一激光线;在所述第一激光线中选定第一参考点,并且确定所述第一参考点在所述第一图像中的像素坐标;将所述第一参考点在所述第一图像中的像素坐标转换为相机坐标;获取所述相机在第二位置时所采集到的所述标靶的第二图像,其中,所述第一位置和第二位置为所述相机相对于所述标靶所在的位置,并且所述第一位置和第二位置不相同;根据所述第二图像,识别所述激光打在所述标靶时形成的第二激光线;在所述第二激光线中选定第二参考点,并且确定所述第二参考点在所述第二图像中的像素坐标;将所述第二参考点在所述第二图像中的像素坐标转换为相机坐标;根据所述第一参考点和第二参考点的相机坐标,确定所述激光器所输出的激光所在的激光平面在相机坐标系中的平面方程。
可选的,所述将所述第一参考点在所述第一图像中的像素坐标转换为相机坐标的步骤,进一步包括:获取所述相机在所述第一位置时的第一转换矩阵;根据所述第一转换矩阵和所述第一参考点在所述第一图像中的像素坐标,计算所述第一参考点的相机坐标;所述将所述第二参考点在所述第二图像中的像素坐标转换为相机坐标的步骤,进一步包括:获取所述相机在第二位置时的第二转换矩阵,其中,所述第一转换矩阵和第二转换矩阵用于将像素坐标转换为相机坐标;根据所述第二转换矩阵和所述第二参考点在所述第二图像中的像素坐标,计算所述第二参考点的相机坐标。
可选的,所述获取所述相机在所述第一位置时的第一转换矩阵的步骤,进一步包括:获取所述标靶上设置的多个标定点在所述第一图像中的像素坐标;根据所述多个标定点在第一图像中的像素坐标,获取所述多个标定点对应的第一相机坐标;获取所述相机在所述第一位置时所述多个标定点的第一世界坐标;根据所述多个标定点在所述第一图像中的像素坐标、第一世界坐标以及第一相机坐标,确定所述第一转换矩阵。
可选的,所述第一转换矩阵包括相机的内参矩阵A和第一外参矩阵V1,所述第一外参矩阵V1包括第一旋转矩阵R1和第一转移向量T1,所述根据所述多个标定点在所述第一图像的像素坐标、第一世界坐标以及第一相机坐标,确定所述第一转换矩阵的计算公式如下:
Figure BDA0002555464750000031
所述(u1,v1)为所述多个标定点在所述第一图像中的像素坐标,所述(X1,Y1,Z1)为所述多个标定点的第一世界坐标,所述(x1,y1,z1)为所述多个标定点的第一相机坐标,其中,所述内参矩阵A为已知数。
可选的,所述在所述第一激光线中选定第一参考点,并且确定所述第一参考点在所述第一图像中的像素坐标的步骤,进一步包括:从所述第一激光线选取至少两个第一拟合点,并且获取所述至少两个第一拟合点在所述第一图像中的像素坐标;根据所述至少两个第一拟合点在所述第一图像中的像素坐标,拟合所述第一激光线的像素直线方程;获取所述标靶上设置的多个标定点在所述第一图像中的像素坐标;根据所述多个标定点在所述第一图像中的像素坐标,拟合第一靶线的像素直线方程,其中,所述第一靶线是由所述多个标定点中至少两个标定点连接而成,并且所述第一靶线与所述第一激光线相交;将所述第一靶线与所述第一激光线的交点作为所述第一参考点,并且根据所述第一激光线的像素直线方程和第一靶线的像素直线方程,计算所述第一参考点在所述第一图像的像素坐标。
可选的,所述获取所述相机在所述第二位置时的第二转换矩阵,其中,所述第一转换矩阵和第二转换矩阵用于将像素坐标转换为相机坐标的步骤,进一步包括:获取所述标靶上设置的多个标定点在所述第二图像中的像素坐标;根据所述多个标定点在第二图像中的像素坐标,获取所述多个标定点对应的第二相机坐标;获取所述相机在所述第二位置时所述多个标定点的第二世界坐标;根据所述多个标定点在所述第二图像中的像素坐标、第二世界坐标以及第二相机坐标,确定所述第二转换矩阵。
可选的,所述第二转换矩阵包括相机的内参矩阵A和第二外参矩阵V2,所述第二外参矩阵V2包括第二旋转矩阵R2和第二转移向量T2,所述根据所述多个标定点在所述第二图像的像素坐标、第二世界坐标以及第二相机坐标,确定所述第二转换矩阵的计算公式如下:
Figure BDA0002555464750000041
所述(u2,v2)为所述多个标定点在所述第二图像中的像素坐标,所述(X2,Y2,Z2)为所述多个标定点的第二世界坐标,所述(x2,y2,z2)为所述多个标定点的第二相机坐标,其中,所述内参矩阵A为已知数。
可选的,所述在所述第二激光线中选定第二参考点,并且确定所述第二参考点在所述第二图像中的像素坐标的步骤,进一步包括:从所述第二激光线选取至少两个第二拟合点,并且获取所述至少两个第二拟合点在所述第二图像中的像素坐标;根据所述至少两个第二拟合点在所述第二图像中的像素坐标,拟合所述第二激光线的像素直线方程;获取所述标靶上设置的多个标定点在所述第二图像中的像素坐标;根据所述多个标定点在所述第二图像中的像素坐标,拟合第二靶线的像素直线方程,其中,所述第二靶线是由所述多个标定点中至少两个标定点连接而成,并且所述第二靶线与所述第二激光线相交;将所述第二靶线与所述第二激光线的交点作为所述第二参考点,并且根据所述第二激光线的像素直线方程和第二靶线的像素直线方程,计算所述第二参考点在所述第二图像的像素坐标。
根据本发明实施例的一个方面,提供了一种激光标定系统的标定装置,其特征在于,包括:第一获取模块,用于获取所述相机在第一位置时所采集到的所述标靶的第一图像;第一识别模块,用于根据所述第一图像,识别所述激光打在所述标靶时形成的第一激光线;第一确定模块,用于在所述第一激光线中选定第一参考点,并且确定所述第一参考点在所述第一图像中的像素坐标;第一转换模块,用于将所述第一参考点在所述第一图像中的像素坐标转换为相机坐标;第二获取模块,用于获取所述相机在第二位置时所采集到的所述标靶的第二图像,其中,所述第一位置和第二位置为所述相机相对于所述标靶所在的位置,并且所述第一位置和第二位置不相同;第二识别模块,用于根据所述第二图像,识别所述激光打在所述标靶时形成的第二激光线;第二确定模块,用于在所述第二激光线中选定第二参考点,并且确定所述第二参考点在所述第二图像中的像素坐标;第二转换模块,用于将所述第二参考点在所述第二图像中的像素坐标转换为相机坐标;第三确定模块,用于根据所述第一参考点和第二参考点的相机坐标,确定所述激光器所输出的激光所在的激光平面在相机坐标系中的平面方程。
可选的,所述第一转换模块包括:第一获取单元,用于获取所述相机在所述第一位置时的第一转换矩阵;第一计算单元,用于根据所述第一转换矩阵和所述第一参考点在所述第一图像中的像素坐标,计算所述第一参考点的相机坐标;第二转换模块包括:第二获取单元,获取所述相机在第二位置时的第二转换矩阵,其中,所述第一转换矩阵和第二转换矩阵用于将像素坐标转换为相机坐标;第二计算单元,根据所述第二转换矩阵和所述第二参考点在所述第二图像中的像素坐标,计算所述第二参考点的相机坐标。
可选的,所述第一获取单元具体用于:获取所述标靶上设置的多个标定点在所述第一图像中的像素坐标;根据所述多个标定点在第一图像中的像素坐标,获取所述多个标定点对应的第一相机坐标;获取所述相机在所述第一位置时所述多个标定点的第一世界坐标;根据所述多个标定点在所述第一图像中的像素坐标、第一世界坐标以及第一相机坐标,确定所述第一转换矩阵。
可选的,所述第一转换矩阵包括相机的内参矩阵A和第一外参矩阵V1,所述第一外参矩阵V1包括第一旋转矩阵R1和第一转移向量T1,所述根据所述多个标定点在所述第一图像的像素坐标、第一世界坐标以及第一相机坐标,确定所述第一转换矩阵的计算公式如下:
Figure BDA0002555464750000051
所述(u1,v1)为所述多个标定点在所述第一图像中的像素坐标,所述(X1,Y1,Z1)为所述多个标定点的第一世界坐标,所述(x1,y1,z1)为所述多个标定点的第一相机坐标,其中,所述内参矩阵A为已知数。
可选的,所述第一确定模块包括:第三获取单元,用于从所述第一激光线选取至少两个第一拟合点,并且获取所述至少两个第一拟合点在所述第一图像中的像素坐标;第一拟合单元,用于根据所述至少两个第一拟合点在所述第一图像中的像素坐标,拟合所述第一激光线的像素直线方程;第四获取单元,用于获取所述标靶上设置的多个标定点在所述第一图像中的像素坐标;第二拟合单元,用于根据所述多个标定点在所述第一图像中的像素坐标,拟合第一靶线的像素直线方程,其中,所述第一靶线是由所述多个标定点中至少两个标定点连接而成,并且所述第一靶线与所述第一激光线相交;第三计算单元,用于将所述第一靶线与所述第一激光线的交点作为所述第一参考点,并且根据所述第一激光线的像素直线方程和第一靶线的像素直线方程,计算所述第一参考点在所述第一图像的像素坐标。
可选的,所述第二获取单元包括:获取所述标靶上设置的多个标定点在所述第二图像中的像素坐标;根据所述多个标定点在第二图像中的像素坐标,获取所述多个标定点对应的第二相机坐标;获取所述相机在所述第二位置时所述多个标定点的第二世界坐标;根据所述多个标定点在所述第二图像中的像素坐标、第二世界坐标以及第二相机坐标,确定所述第二转换矩阵。
可选的,所述第二转换矩阵包括相机的内参矩阵A和第二外参矩阵V2,所述第二外参矩阵V2包括第二旋转矩阵R2和第二转移向量T2,所述根据所述多个标定点在所述第二图像的像素坐标、第二世界坐标以及第二相机坐标,确定所述第二转换矩阵的计算公式如下:
Figure BDA0002555464750000061
所述(u2,v2)为所述多个标定点在所述第二图像中的像素坐标,所述(X2,Y2,Z2)为所述多个标定点的第二世界坐标,所述(x2,y2,z2)为所述多个标定点的第二相机坐标,其中,所述内参矩阵A为已知数。
可选的,所述第二确定模块包括:第五获取单元,用于从所述第二激光线选取至少两个第二拟合点,并且获取所述至少两个第二拟合点在所述第二图像中的像素坐标;第三拟合单元,用于根据所述至少两个第二拟合点在所述第二图像中的像素坐标,拟合所述第二激光线的像素直线方程;第六获取单元,用于获取所述标靶上设置的多个标定点在所述第二图像中的像素坐标;第四拟合单元,用于根据所述多个标定点在所述第二图像中的像素坐标,拟合第二靶线的像素直线方程,其中,所述第二靶线是由所述多个标定点中至少两个标定点连接而成,并且所述第二靶线与所述第二激光线相交;第四计算单元,用于将所述第二靶线与所述第二激光线的交点作为所述第二参考点,并且根据所述第二激光线的像素直线方程和第二靶线的像素直线方程,计算所述第二参考点在所述第二图像的像素坐标。
根据本发明实施例的一个方面,提供了一种激光标定系统,包括:标靶;支架;激光器,固定于所述支架上,所述激光器所输出的激光打在所述标靶;相机,固定于所述支架上,所述相机用于拍摄所述标靶的图像;控制器,包括至少一个处理器以及存储器,所述存储器和相机均与所述至少一个处理器通信连接,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行上述激光标定系统的标定方法。
可选的,所述激光标定系统还包括补光灯和滤波片;所述补光灯固定于所述支架,所述补光灯用于向所述标靶输出照明光源,所述滤波片设置于所述相机的取景镜头上,其中,所述滤波片允许通过的光源的波长与所述补光灯所输出的照明光源的波长相同。
可选的,所述标靶上涂覆有反光材料。
可选的所述标靶划分若干标定点和背景区,其中,所述若干标定点和背景区的颜色不相同,所述反光材料涂覆于所述背景区。
可选的,所述激光标定系统还包括基台和位姿调整装置;所述标靶和位姿调整装置均设置于所述基台上,所述支架设置于所述位姿调整装置上,所述位姿调整装置用于调整所述支架的位置,以调整所述相机相对于所述标靶所在的位置。
可选的,所述位姿调整装置包括固定座和若干垫片;所述若干垫片叠置于所述基台上,所述固定座设置于所述若干垫片上,所述固定座设置有固定槽,所述支架的一端插接于所述固定槽内。
本发明实施例的有益效果是:区别于现有的激光标定系统的标定方法,本发明实施例通过获取所述相机在第一位置时所采集到的所述标靶的第一图像;根据所述第一图像,识别所述激光打在所述标靶时形成的第一激光线;在所述第一激光线中选定第一参考点,并且确定所述第一参考点在所述第一图像中的像素坐标;将所述第一参考点在所述第一图像中的像素坐标转换为相机坐标;获取所述相机在第二位置时所采集到的所述标靶的第二图像,其中,所述第一位置和第二位置为所述相机相对于所述标靶所在的位置,并且所述第一位置和第二位置不相同;根据所述第二图像,识别所述激光打在所述标靶时形成的第二激光线;在所述第二激光线中选定第二参考点,并且确定所述第二参考点在所述第二图像中的像素坐标;将所述第二参考点在所述第二图像中的像素坐标转换为相机坐标;根据所述第一参考点和第二参考点的相机坐标,确定所述激光器所输出的激光所在的激光平面在相机坐标系中的平面方程实现对所述激光标定系统的标定,非常方便快捷。
附图说明
一个或多个实施例通过与之对应的附图中的图片进行示例性说明,这些示例性说明并不构成对实施例的限定,附图中具有相同参考数字标号的元件表示为类似的元件,除非有特别申明,附图中的图不构成比例限制。
图1是本发明实施例提供的一种激光标定系统的示意图;
图2是本发明实施例提供的一种激光标定系统的各部件连接关系示意图;
图3是本发明实施例提供的一种激光标定系统的标定方法的流程示意图;
图4是本发明实施例提供的一种确定所述第一参考点在所述第一图像中的像素坐标的流程示意图;
图5是本发明实施例提供的标靶的示意图;
图6是本发明实施例提供的一种将所述第一参考点在所述第一图像中的像素坐标转换为相机坐标的流程示意图;
图7是本发明实施例提供的一种确定所述第二参考点在所述第二图像中的像素坐标的流程示意图;
图8是本发明实施例提供的一种将所述第二参考点在所述第二图像中的像素坐标转换为相机坐标的流程示意图;
图9是本发明实施例提供的一种激光标定系统的标定装置的示意图;
图10是本发明实施例提供的执行激光标定系统的标定方法的控制器的硬件结构示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
请参阅图1和图2,激光标定系统100包括标靶101、支架102、激光器103、相机104、控制器105、补光灯106、滤光片107、基台108以及位姿调整装置109。所述激光器103、相机104和补光灯106固定于所述支架102上,所述滤光片107设置于所述相机104的取景镜头上,所述滤光片107用于过滤进入所述相机104的光。所述激光器103所输出的激光打在所述标靶101。所述标靶101和位姿调整装置109均设置于所述基台108上,所述支架102设置于所述位姿调整装置109上,所述位姿调整装置109用于调整所述支架102的位置,以调整所述相机104和激光器103相对于所述标靶101所在的位置。所述控制器105分别与所述激光器103、相机104、补光灯106和滤光片107连接,所述控制器105用于控制所述激光器103、相机104、补光灯106和滤光片107开启或关闭以及控制所述相机104拍摄所述标靶101的图像。
对于上述标靶101,标靶101划分若干标定点1011和背景区1012,其中,所述若干标定点1011和背景区1012的颜色不相同,例如,所述若干标定点1011为黑色,则所述背景区1012为白色,或者所述若干标定点1011为白色,则所述背景区1012为黑色等等。在一些实施例中,所述背景区1012还可以涂覆反光材料,以增加背景区1012的反光功能,而标定点1011的反光功能弱于背景区1012的反光功能,使得标定点1011和背景区1012在相机中的成像区别更大,从而使得相机获得高质量的标靶101图像。
对于上述激光器103和相机104,由于激光器103和相机104均固定于支架102,激光器103和相机104的位置相对固定,当支架102移动时,相机104和激光器103同步移动。由于所述相机104和激光器103同步移动,因此,所述激光器103在相机104的相机坐标系中的位置不会变化,同理的,所述激光器103所输出的激光平面在相机坐标系的位置也不会变化。
值得说明的是:所述相机104的拍摄方向与所述激光器103所输出的激光所在的激光平面成固定夹角,可选的,该固定夹角范围为25-30度。当所述支架102在垂直方向运动时,所述标靶101与激光器103所输出的激光平面相交的交线的位置不相同,同样的,当所述标靶101在垂直方向运动时,所述标靶101与激光器103所输出的激光平面相交的交线的位置也不相同,因此,可以通过在垂直方向上移动所述支架,或者,在垂直方向上移动所述标靶101,来寻找激光平面与所述标靶101的不同交线,并且获取该交线在相机坐标系中的位置,然后根据交线的位置确定激光平面在相机坐标系中的参数,从而实现定标。
对于上述补光灯106和滤光片107,补光灯106用于向所述标靶101输出照明光源,滤光片107用于过滤进入相机104的光源。在一些实施例中,所述滤光片107允许通过的光源的波长与所述补光灯106所输出的照明光源和激光器所输出的激光的波长相同,使得只有所述补光灯106和激光器103所发出的光经过标靶101反射和散射后进入相机104,从而过滤掉环境其它干扰光,避免环境光对相机的成像产生影响,从而使得相机104获取到高质量的标靶图像。
在一些实施例中,为了实现相机104获得高质量的图像,可先关闭所述补光灯106,当所述标靶101上的标定点1011在相机104图像中消失时,开启激光,激光的漫反射进入相机104,而此时相机104就只抓取激光线的图像。
对于上述位姿调整装置109,位姿调整装置109包括固定座(图未示)和若干垫片(图未示),所述若干垫片叠置于所述基台108上,所述固定座设置于所述若干垫片上,所述固定座设置有固定槽(图未示),所述支架102的一端插接于所述固定槽内。通过增加或者减少所述垫片的数量,可调整所述支架102相对于所述标靶101的距离,从而调整所述支架102上固定的相机104相对于所述标靶101的位置。
可以理解的是:位姿调整装置109也不限定为上述方式,也可以为其它方式,此处不再一一赘述。
需要说明的是:由于激光器103和相机104的位置相对固定,激光器103所输出的激光平面在相机104的相机坐标系中的位置也是固定的,即使移动支架102,也不会影响激光平面在相机坐标系中的位置,因此,可以通过移动支架102或者移动标靶101来找出激光平面两条直线在相机坐标系的位置,并根据激光平面两条直线在相机坐标系的位置确定激光平面在相机坐标系中的参数,从而实现对激光标定系统进行标定,如下详细描述了对激光标定系统进行标定的过程。
实施例一
请参阅图3,图3是本发明实施例提供的一种激光标定系统的标定方法的流程示意图,该激光标定系统的结构和功能与上述激光标定系统的结构和功能均相同,此处不再一一赘述,所述方法包括以下步骤:
步骤S10,获取所述相机在第一位置时所采集到的所述标靶的第一图像。
第一位置是相机相对于标靶的位置,可以通过标靶不动,支架动来调整相机相对于标靶的位置,也可以通过标靶动,支架不动,来调整相机相对于标靶的位置。
第一图像包含标靶面向激光器的标靶靶面的图像,当激光器输出激光时,激光会在标靶靶面形成激光线,第一图像也会包含该激光线。而为了使第一图像包含该激光线,当相机位于第一位置时,启动激光器,再启动相机采集标靶的第一图像。步骤S20,根据所述第一图像,识别所述激光打在所述标靶时形成的第一激光线。
第一激光线是指激光在标靶平面上形成的线条。为了更好地采集第一激光线,可以先关闭所述补光灯,待所述标靶上的标定点在相机图像中消失时再开启激光,此时激光的漫反射进入相机,相机就只抓取包含激光线的第一图像。而在该第一图像由于只包含第一激光线,因此,从第一图像中识别出第一激光线更方便。当然,所述第一图像也可以是在补光灯开启的前提下采集到的图像,此时,第一图像包含标靶的全景,即包含标定点,又包含第一激光线。
值得说明的是:从第一图像中识别第一激光线的识别算法,可以采用现有算法实现,其不在本发明的保护范围之内。
步骤S30,在所述第一激光线中选定第一参考点,并且确定所述第一参考点在所述第一图像中的像素坐标。
第一参考点是位于第一激光线上的两点,第一参考点的像素坐标是指第一参考点在图像中的坐标,其可以通过图像坐标系,以及第一参考点在第一图像中的位置识别得到的。在一些实例中,所述第一参考点为所述第一激光线与所述标靶上的多个标定点的连线的交点,该交点的坐标可以通过标定点连成的直线的方程和第一激光线的方程来计算,请参阅图4,步骤S30包括:
步骤S301,从所述第一激光线选取至少两个第一拟合点,并且获取所述至少两个第一拟合点在所述第一图像中的像素坐标。
所述第一拟合点为所述第一激光线上的点,两个所述第一拟合点为不重叠的点,两点决定一条直线,因此,可以通过两个第一拟合点来确定第一激光线的像素直线方程。
步骤S302,根据所述至少两个第一拟合点在所述第一图像中的像素坐标,拟合所述第一激光线的像素直线方程。
其中,拟合所述第一激光线的像素直线方程如下:
y=ax+b
可以理解的是:通过增加所述第一拟合点的数量,可提高拟合所述第一激光线的精度。
步骤S303,获取所述标靶上设置的多个标定点在所述第一图像中的像素坐标。
需要说明的是,若所述第一图像为包含标靶和第一激光线的全景图像,则可从所述第一图像中直接获取所述标靶上设置的多个标定点在所述第一图像中的像素坐标。若所述第一图像为仅包含所述第一激光线的图像,则需要打开补光灯,重新获取所述相机在第一位置时所采集到的所述标靶的第一图像。
步骤S304,根据所述多个标定点在所述第一图像中的像素坐标,拟合第一靶线的像素直线方程,其中,所述第一靶线是由所述多个标定点中至少两个标定点连接而成,并且所述第一靶线与所述第一激光线相交。
标靶平面上的标定点的数量是多个的,多个标定点可按矩阵的方式排列,例如:按5*5矩阵排列、4*4矩阵排列等等。请参阅图5,当激光在标靶平面形成第一激光线L1时,第一激光线L1呈横向放置,与纵列的标定点连线形成第一靶线L2相交。
可以理解的是:当标定点可按矩阵的方式排列时,每一个纵列的标定点连线形成一条第一靶线,其中,第一靶线的数量为多条。当然,标定点的排列方式也可以为其它方式,不限定为矩阵方式,只要若干标定点连线形成的第一靶线与第一激光线相交即可。步骤305,将所述第一靶线与所述第一激光线的交点作为所述第一参考点,并且根据所述第一激光线的像素直线方程和第一靶线的像素直线方程,计算所述第一参考点在所述第一图像的像素坐标。
由于第一参考点既在第一激光线上也在第一靶线上,因此,可以将第一激光线的像素直线方程和第一靶线的像素直线方程组成方程组,通过解方程的方式,计算出第一参考点在所述第一图像的像素坐标。
可以理解的是:当第一图像为标靶的全景图像时,可以通过图像识别的方式识别第一激光线与第一靶线的交点,并且确定该交点的像素坐标。
步骤S40,将所述第一参考点在所述第一图像中的像素坐标转换为相机坐标。
当相机位于第一位置时,图像上的点的像素坐标和相机坐标的转换矩阵是相同的。因此,可以先确定该转换矩阵,当识别到第一参考点时,再根据该转换矩阵,将第一参考点的像素坐标转换为相机坐标,具体的,请参阅图6,步骤S40包括:
步骤S401,获取所述相机在所述第一位置时的第一转换矩阵。
在一些实施例中,所述获取所述相机在所述第一位置时的第一转换矩阵的步骤,具体包括:获取所述标靶上设置的多个标定点在所述第一图像中的像素坐标;根据所述多个标定点在第一图像中的像素坐标,获取所述多个标定点对应的第一相机坐标;获取所述相机在所述第一位置时所述多个标定点的第一世界坐标;根据所述多个标定点在所述第一图像中的像素坐标、第一世界坐标以及第一相机坐标,确定所述第一转换矩阵。
其中,可通过所述激光标定系统内置的图像处理软件根据所述多个标定点在第一图像中的像素坐标,获取所述多个标定点对应的第一相机坐标。所述图像处理软件可以是OpenCV或者Mathlab等。
需要说明的是:当相机位于第一位置时,标靶上各标定点的第一世界坐标是预先测定好的。
其中,所述第一转换矩阵包括相机的内参矩阵A和第一外参矩阵V1,所述第一外参矩阵V1包括第一旋转矩阵R1和第一转移向量T1,所述根据所述多个标定点在所述第一图像的像素坐标、第一世界坐标以及第一相机坐标,确定所述第一转换矩阵的计算公式如下:
Figure BDA0002555464750000141
所述(u1,v1)为所述多个标定点在所述第一图像中的像素坐标,所述(X1,Y1,Z1)为所述多个标定点的第一世界坐标,所述(x1,y1,z1)为所述多个标定点的第一相机坐标,其中,所述内参矩阵A为已知数。
步骤S402,根据所述第一转换矩阵和所述第一参考点在所述第一图像中的像素坐标,计算所述第一参考点的相机坐标。
其中,计算所述第一参考点的相机坐标的过程与确定第一转换矩阵的过程是相反的过程。所述第一参考点的相机坐标的计算公式如下:
Figure BDA0002555464750000151
所述(u3,v3)为步骤S30中确定的所述第一参考点在所述第一图像中的像素坐标,所述(X3,Y3,Z3)为所述第一参考点的世界坐标,所述(x3,y3,z3)为所述第一参考点的相机坐标,其中,所述内参矩阵A为已知数,所述第一旋转矩阵R1和第一转移向量T1由步骤S401获得。
由于所述第一参考点为所述第一靶线与所述第一激光线的交点,在一些实施例中,根据交比不变形原理,可通过所述第一参考点的像素坐标获取所述第一参考点的世界坐标。具体的,请参阅图5,图6中A、B、C、D为标定点,P1、P2、P3、P4和P5为所述第一参考点。P1A为P1点和A点的距离,AD为A点和D点的距离,根据交比不变形远离,P1A/AD在像素坐标中的比例和世界坐标中的比例相同,可以计算出P1点的世界坐标,同理可获得P2、P3、P4和P5点的世界坐标,即获得所述第一参考点的世界坐标。
进一步的,根据所述第一转换矩阵、所述第一参考点在所述第一图像中的像素坐标,所述第一参考点的世界坐标可计算所述第一参考点的相机坐标。
步骤S50,获取所述相机在第二位置时所采集到的所述标靶的第二图像,其中,所述第一位置和第二位置为所述相机相对于所述标靶所在的位置,并且所述第一位置和第二位置不相同。
所述第二位置为所述相机相对于所述标靶的位置,所述第一位置和第二位置不相同是指相机相对于标靶的位置不相同,而不是相机在世界坐标中的位置不相同。
需要说明的是:在采集第二图像时,也需要先启动激光器以使激光器所输出的激光打到标靶平面上形成第二激光线,从而使得所采集到的第二图像包含第二激光线。此外,由于第一位置和第二位置不相同,因此,标靶平面与激光平面相交的直线的位置不相同,该两条相交的直线就是第一激光线和第二激光线。
步骤S60,根据所述第二图像,识别所述激光打在所述标靶时形成的第二激光线。第二激光线是指激光在标靶平面上形成的线条。为了更好地采集第二激光线,可以先关闭所述补光灯,待所述标靶上的标定点在相机图像中消失时再开启激光,此时激光的漫反射进入相机,相机就只抓取包含激光线的第二图像。而在该第二图像由于只包含第二激光线,因此,从第二图像中识别出第二激光线更方便。当然,所述第二图像也可以是在补光灯开启的前提下采集到的图像,此时,第二图像包含标靶的全景,即包含标定点,又包含第二激光线。
值得说明的是:从第二图像中识别第二激光线的识别算法,可以采用现有算法实现,其不在本发明的保护范围之内。
步骤S70,在所述第二激光线中选定第二参考点,并且确定所述第二参考点在所述第二图像中的像素坐标。
所述第二参考点为所述第二激光线与所述标靶上的多个标定点的连线的交点。请参阅图7,步骤S70包括:
步骤S701,从所述第二激光线选取至少两个第二拟合点,并且获取所述至少两个第二拟合点在所述第二图像中的像素坐标。
所述第二拟合点为所述第二激光线上的点,所述第二拟合点的数量至少为两个。
步骤S702,根据所述至少两个第二拟合点在所述第二图像中的像素坐标,拟合所述第二激光线的像素直线方程。
其中,拟合所述第二激光线的像素直线方程如下:
y=ax+b
可以理解的是:通过增加所述第二拟合点的数量,可提高拟合所述第二激光线的精度。
步骤S703,获取所述标靶上设置的多个标定点在所述第二图像中的像素坐标。
需要说明的是,若所述第二图像为包含标靶和第二激光线的全景图像,则可从所述第二图像中直接获取所述标靶上设置的多个标定点在所述第二图像中的像素坐标。若所述第二图像为仅包含所述第二激光线的图像,则需要打开补光灯,重新获取所述相机在第二位置时所采集到的所述标靶的第二图像。
步骤S704,根据所述多个标定点在所述第二图像中的像素坐标,拟合第二靶线的像素直线方程,其中,所述第二靶线是由所述多个标定点中至少两个标定点连接而成,并且所述第二靶线与所述第二激光线相交。
标靶平面上的标定点的数量是多个的,多个标定点可按矩阵的方式排列,例如:按5*5矩阵排列、4*4矩阵排列等等。当激光在标靶平面形成第二激光线时,第二激光线呈横向放置,与纵列的标定点连线形成第二靶线相交。
步骤S705,将所述第二靶线与所述第二激光线的交点作为所述第二参考点,并且根据所述第二激光线的像素直线方程和第二靶线的像素直线方程,计算所述第二参考点在所述第二图像的像素坐标。
步骤S80,将所述第二参考点在所述第二图像中的像素坐标转换为相机坐标;
当相机位于第二位置时,图像上的点的像素坐标和相机坐标的转换矩阵是相同的。因此,可以先确定该转换矩阵,当识别到第二参考点时,再根据该转换矩阵,将第二参考点的像素坐标转换为相机坐标,具体的,请参阅图8,步骤S80包括:
步骤S801,获取所述相机在所述第二位置时的第二转换矩阵,其中,所述第一转换矩阵和第二转换矩阵用于将像素坐标转换为相机坐标。
在一些实施例中,所述获取所述相机在所述第二位置时的第二转换矩阵的步骤,其中,所述第一转换矩阵和第二转换矩阵用于将像素坐标转换为相机坐标,具体包括:获取所述标靶上设置的多个标定点在所述第二图像中的像素坐标;根据所述多个标定点在第二图像中的像素坐标,获取所述多个标定点对应的第二相机坐标;获取所述相机在所述第二位置时所述多个标定点的第二世界坐标;根据所述多个标定点在所述第二图像中的像素坐标、第二世界坐标以及第二相机坐标,确定所述第二转换矩阵。
其中,可通过所述激光标定系统内置的图像处理软件根据所述多个标定点在第二图像中的像素坐标,获取所述多个标定点对应的第二相机坐标。所述图像处理软件可以是OpenCV或者Mathlab等。
需要说明的是:当相机位于第二位置时,通过所述第二位置相对于所述第一位置的位移以及所述多个标定点的第一世界坐标可获得所述多个标定点的第二世界坐标。
其中,所述第二转换矩阵包括相机的内参矩阵A和第二外参矩阵V2,所述第二外参矩阵V2包括第二旋转矩阵R2和第二转移向量T2,所述根据所述多个标定点在所述第二图像的像素坐标、第二世界坐标以及第二相机坐标,确定所述第二转换矩阵的计算公式如下:
Figure BDA0002555464750000181
所述(u2,v2)为所述多个标定点在所述第二图像中的像素坐标,所述(X2,Y2,Z2)为所述多个标定点的第二世界坐标,所述(x2,y2,z2)为所述多个标定点的第二相机坐标,其中,所述内参矩阵A为已知数。
步骤S802,根据所述第二转换矩阵和所述第二参考点在所述第二图像中的像素坐标,计算所述第二参考点的相机坐标。
其中,计算所述第二参考点的相机坐标的过程与确定第二转换矩阵的过程是相反的过程。所述第二参考点的相机坐标的计算公式如下:
Figure BDA0002555464750000182
所述(u4,v4)为步骤S70中确定的所述第二参考点在所述第二图像中的像素坐标,所述(X4,Y4,Z4)为所述第二参考点的世界坐标,所述(x4,y4,z4)为所述第二参考点的相机坐标,其中,所述内参矩阵A为已知数,所述第二旋转矩阵R2和第二转移向量T2由步骤S801获得。
由于所述第二参考点为所述第二靶线与所述第二激光线的交点,在一些实施例中,根据交比不变形原理,可通过所述第二参考点的像素坐标获取所述第二参考点的世界坐标。具体的,可参考通过所述第一参考点的像素坐标获取所述第一参考点的世界坐标的方法,此处不再一一赘述。
进一步的,根据所述第二转换矩阵、所述第二参考点在所述第二图像中的像素坐标,所述第二参考点的世界坐标可计算所述第二参考点的相机坐标。
步骤S90,根据所述第一参考点和第二参考点的相机坐标,确定所述激光器所输出的激光所在的激光平面在相机坐标系中的平面方程。其中,计算激光平面在相机坐标系中的平面方程如下:
Ax+By+Cz+D=0
在本发明实施例中,通过获取所述相机在第一位置时所采集到的所述标靶的第一图像;根据所述第一图像,识别所述激光打在所述标靶时形成的第一激光线;在所述第一激光线中选定第一参考点,并且确定所述第一参考点在所述第一图像中的像素坐标;将所述第一参考点在所述第一图像中的像素坐标转换为相机坐标;获取所述相机在第二位置时所采集到的所述标靶的第二图像,其中,所述第一位置和第二位置为所述相机相对于所述标靶所在的位置,并且所述第一位置和第二位置不相同;根据所述第二图像,识别所述激光打在所述标靶时形成的第二激光线;在所述第二激光线中选定第二参考点,并且确定所述第二参考点在所述第二图像中的像素坐标;将所述第二参考点在所述第二图像中的像素坐标转换为相机坐标;根据所述第一参考点和第二参考点的相机坐标,确定所述激光器所输出的激光所在的激光平面在相机坐标系中的平面方程,可实现对所述激光标定系统的标定,非常快捷方便。
实施例二
请参阅图9,图9是本发明实施例提供的一种激光标定系统的标定装置的示意图,所述标定装置400包括第一获取模块401、第一识别模块402、第一确定模块403、第一转换模块404、第二获取模块405、第二识别模块406、第二确定模块407、第二转换模块408以及第三确定模块409。其中,第一获取模块401,用于获取所述相机在第一位置时所采集到的所述标靶的第一图像;第一识别模块402,用于根据所述第一图像,识别所述激光打在所述标靶时形成的第一激光线;第一确定模块403,用于在所述第一激光线中选定第一参考点,并且确定所述第一参考点在所述第一图像中的像素坐标;第一转换模块404,用于将所述第一参考点在所述第一图像中的像素坐标转换为相机坐标;第二获取模块405,用于获取所述相机在第二位置时所采集到的所述标靶的第二图像,其中,所述第一位置和第二位置为所述相机相对于所述标靶所在的位置,并且所述第一位置和第二位置不相同;第二识别模块406,用于根据所述第二图像,识别所述激光打在所述标靶时形成的第二激光线;第二确定模块407,用于在所述第二激光线中选定第二参考点,并且确定所述第二参考点在所述第二图像中的像素坐标;第二转换模块408,用于将所述第二参考点在所述第二图像中的像素坐标转换为相机坐标;第三确定模块409,用于根据所述第一参考点和第二参考点的相机坐标,确定所述激光器所输出的激光所在的激光平面在相机坐标系中的平面方程。
在一些实施例中,所述第一转换模块404包括:第一获取单元4041和第一计算单元4042。其中,第一获取单元4041,用于获取所述相机在所述第一位置时的第一转换矩阵;第一计算单元4042,用于根据所述第一转换矩阵和所述第一参考点在所述第一图像中的像素坐标,计算所述第一参考点的相机坐标。
在一些实施例中,所述第二转换模块408包括:第二获取单元4081和第二计算单元4082。其中,第二获取单元4081,获取所述相机在第二位置时的第二转换矩阵,其中,所述第一转换矩阵和第二转换矩阵用于将像素坐标转换为相机坐标;第二计算单元4082,根据所述第二转换矩阵和所述第二参考点在所述第二图像中的像素坐标,计算所述第二参考点的相机坐标。
在一些实施例中,所述第一获取单元4041具体用于:获取所述标靶上设置的多个标定点在所述第一图像中的像素坐标;根据所述多个标定点在第一图像中的像素坐标,获取所述多个标定点对应的第一相机坐标;获取所述相机在所述第一位置时所述多个标定点的第一世界坐标;根据所述多个标定点在所述第一图像中的像素坐标、第一世界坐标以及第一相机坐标,确定所述第一转换矩阵。
在一些实施例中,所述第一转换矩阵包括相机的内参矩阵A和第一外参矩阵V1,所述第一外参矩阵V1包括第一旋转矩阵R1和第一转移向量T1,所述根据所述多个标定点在所述第一图像的像素坐标、第一世界坐标以及第一相机坐标,确定所述第一转换矩阵的计算公式如下:
Figure BDA0002555464750000211
所述(u1,v1)为所述多个标定点在所述第一图像中的像素坐标,所述(X1,Y1,Z1)为所述多个标定点的第一世界坐标,所述(x1,y1,z1)为所述多个标定点的第一相机坐标,其中,所述内参矩阵A为已知数。
在一些实施例中,第一确定模块403包括:第三获取单元4031、第一拟合单元4032、第四获取单元4033、第二拟合单元4034以及第三计算单元4035。其中,第三获取单元4031,用于从所述第一激光线选取至少两个第一拟合点,并且获取所述至少两个第一拟合点在所述第一图像中的像素坐标;第一拟合单元4032,用于根据所述至少两个第一拟合点在所述第一图像中的像素坐标,拟合所述第一激光线的像素直线方程;第四获取单元4033,用于获取所述标靶上设置的多个标定点在所述第一图像中的像素坐标;第二拟合单元4034,用于根据所述多个标定点在所述第一图像中的像素坐标,拟合第一靶线的像素直线方程,其中,所述第一靶线是由所述多个标定点中至少两个标定点连接而成,并且所述第一靶线与所述第一激光线相交;第三计算单元4035,用于将所述第一靶线与所述第一激光线的交点作为所述第一参考点,并且根据所述第一激光线的像素直线方程和第一靶线的像素直线方程,计算所述第一参考点在所述第一图像的像素坐标。
在一些实施例中,所述第二获取单元4081具体用于:获取所述标靶上设置的多个标定点在所述第二图像中的像素坐标;根据所述多个标定点在第二图像中的像素坐标,获取所述多个标定点对应的第二相机坐标;获取所述相机在所述第二位置时所述多个标定点的第二世界坐标;根据所述多个标定点在所述第二图像中的像素坐标、第二世界坐标以及第二相机坐标,确定所述第二转换矩阵。
在一些实施例中,所述第二转换矩阵包括相机的内参矩阵A和第二外参矩阵V2,所述第二外参矩阵V2包括第二旋转矩阵R2和第二转移向量T2,所述根据所述多个标定点在所述第二图像的像素坐标、第二世界坐标以及第二相机坐标,确定所述第二转换矩阵的计算公式如下:
Figure BDA0002555464750000221
所述(u2,v2)为所述多个标定点在所述第二图像中的像素坐标,所述(X2,Y2,Z2)为所述多个标定点的第二世界坐标,所述(x2,y2,z2)为所述多个标定点的第二相机坐标,其中,所述内参矩阵A为已知数。
在一些实施例中,所述第二确定模块407包括:第五获取单元4071、第三拟合单元4072、第六获取单元4073、第四拟合单元4074以及第四计算单元4075。其中,第五获取单元4071,用于从所述第二激光线选取至少两个第二拟合点,并且获取所述至少两个第二拟合点在所述第二图像中的像素坐标;第三拟合单元4072,用于根据所述至少两个第二拟合点在所述第二图像中的像素坐标,拟合所述第二激光线的像素直线方程;第六获取单元4073,用于获取所述标靶上设置的多个标定点在所述第二图像中的像素坐标;第四拟合单元4074,用于根据所述多个标定点在所述第二图像中的像素坐标,拟合第二靶线的像素直线方程,其中,所述第二靶线是由所述多个标定点中至少两个标定点连接而成,并且所述第二靶线与所述第二激光线相交;第四计算单元4075,用于将所述第二靶线与所述第二激光线的交点作为所述第二参考点,并且根据所述第二激光线的像素直线方程和第二靶线的像素直线方程,计算所述第二参考点在所述第二图像的像素坐标。
在本发明实施例中,通过第一获取模块,获取所述相机在第一位置时所采集到的所述标靶的第一图像;通过第一识别模块,根据所述第一图像,识别所述激光打在所述标靶时形成的第一激光线;通过一确定模块,在所述第一激光线中选定第一参考点,并且确定所述第一参考点在所述第一图像中的像素坐标;通过第一转换模块,将所述第一参考点在所述第一图像中的像素坐标转换为相机坐标;通过第二获取模块,获取所述相机在第二位置时所采集到的所述标靶的第二图像,其中,所述第一位置和第二位置为所述相机相对于所述标靶所在的位置,并且所述第一位置和第二位置不相同;通过第二识别模块,根据所述第二图像,识别所述激光打在所述标靶时形成的第二激光线;通过第二确定模块,在所述第二激光线中选定第二参考点,并且确定所述第二参考点在所述第二图像中的像素坐标;通过第二转换模块,将所述第二参考点在所述第二图像中的像素坐标转换为相机坐标;通过第三确定模块,根据所述第一参考点和第二参考点的相机坐标,确定所述激光器所输出的激光所在的激光平面在相机坐标系中的平面方程,从而实现对所述激光标定系统的标定,非常方便快捷。
实施例三
请参阅图10,图10是是本发明实施例提供的执行激光标定系统的标定方法的控制器的硬件结构示意图。控制器105包括:一个或多个处理器1051以及存储器1052,图10中以一个存储器为例。
处理器1051和存储器1052可以通过总线或者其他方式连接,图10中以通过总线连接为例。
存储器1052作为一种非易失性计算机可读存储介质,可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块,如本发明实施例中的激光标定系统的标定方法对应的程序指令/模块(例如,附图9所示的各个模块)。处理器1051通过运行存储在存储器1052中的非易失性软件程序、指令以及模块,从而执行激光标定系统的标定装置的各种功能应用以及数据处理,即实现上述方法实施例的激光标定系统的标定方法。
存储器1052可以包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需要的应用程序;存储数据区可存储根据激光标定系统的标定装置的使用所创建的数据等。此外,存储器1052可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中,存储器1052可选包括相对于处理器1051远程设置的存储器,这些远程存储器可以通过网络连接至激光标定系统的标定装置。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
所述一个或者多个模块存储在所述存储器1052中,当被所述一个或者多个处理器1051执行时,执行上述任意方法实施例中的激光标定系统的标定方法。
上述产品可执行本发明实施例所提供的方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本发明实施例所提供的方法。
本发明实施例提供了一种非易失性计算机可读存储介质,所述非易失性计算机可读存储介质存储有计算机可执行指令,该计算机可执行指令被电子设备执行上述任意方法实施例中的激光标定系统的标定方法。
本发明实施例提供了一种计算机程序产品,包括存储在非易失性计算机可读存储介质上的计算程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时时,使所述计算机执行上述任意方法实施例中的激光标定系统的标定方法。
通过以上的实施方式的描述,本领域普通技术人员可以清楚地了解到各实施方式可借助软件加通用硬件平台的方式来实现,当然也可以通过硬件来实现。本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-Only Memory,ROM)或随机存储记忆体(Random Access Memory,RAM)等。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;在本发明的思路下,以上实施例或者不同实施例中的技术特征之间也可以进行组合,步骤可以以任意顺序实现,并存在如上所述的本发明的不同方面的许多其它变化,为了简明,它们没有在细节中提供;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (15)

1.一种激光标定系统的标定方法,所述激光标定系统包括激光器、相机、标靶和支架,所述激光器和相机均固定于所述支架,所述激光器所输出的激光打在所述标靶,其特征在于,所述方法包括:
获取所述相机在第一位置时所采集到的所述标靶的第一图像;
根据所述第一图像,识别所述激光打在所述标靶时形成的第一激光线;
在所述第一激光线中选定第一参考点,并且确定所述第一参考点在所述第一图像中的像素坐标;
将所述第一参考点在所述第一图像中的像素坐标转换为相机坐标;
获取所述相机在第二位置时所采集到的所述标靶的第二图像,其中,所述第一位置和第二位置为所述相机相对于所述标靶所在的位置,并且所述第一位置和第二位置不相同;
根据所述第二图像,识别所述激光打在所述标靶时形成的第二激光线;
在所述第二激光线中选定第二参考点,并且确定所述第二参考点在所述第二图像中的像素坐标;
将所述第二参考点在所述第二图像中的像素坐标转换为相机坐标;
根据所述第一参考点和第二参考点的相机坐标,确定所述激光器所输出的激光所在的平面在相机坐标系中的平面方程。
2.根据权利要求1所述的标定方法,其特征在于,
所述将所述第一参考点在所述第一图像中的像素坐标转换为相机坐标的步骤,进一步包括:
获取所述相机在所述第一位置时的第一转换矩阵;
根据所述第一转换矩阵和所述第一参考点在所述第一图像中的像素坐标,计算所述第一参考点的相机坐标;
所述将所述第二参考点在所述第二图像中的像素坐标转换为相机坐标的步骤,进一步包括:
获取所述相机在第二位置时的第二转换矩阵,其中,所述第一转换矩阵和第二转换矩阵用于将像素坐标转换为相机坐标;
根据所述第二转换矩阵和所述第二参考点在所述第二图像中的像素坐标,计算所述第二参考点的相机坐标。
3.根据权利要求2所述的标定方法,其特征在于,所述获取所述相机在所述第一位置时的第一转换矩阵的步骤,进一步包括:
获取所述标靶上设置的多个标定点在所述第一图像中的像素坐标;
根据所述多个标定点在第一图像中的像素坐标,获取所述多个标定点对应的第一相机坐标;
获取所述相机在所述第一位置时所述多个标定点的第一世界坐标;
获取所述多个标定点的世界坐标;
根据所述多个标定点在所述第一图像中的像素坐标、第一世界坐标以及第一相机坐标,确定所述第一转换矩阵。
4.根据权利要求3所述的标定方法,其特征在于,所述第一转换矩阵包括相机的内参矩阵A和第一外参矩阵V1,所述第一外参矩阵V1包括第一旋转矩阵R1和第一转移向量T1,所述根据所述多个标定点在所述第一图像的像素坐标、第一世界坐标以及第一相机坐标,确定所述第一转换矩阵的计算公式如下:
Figure FDA0002555464740000021
所述(u1,v1)为所述多个标定点在所述第一图像中的像素坐标,所述(X1,Y1,Z1)为所述多个标定点的第一世界坐标,所述(x1,y1,z1)为所述多个标定点的第一相机坐标,其中,所述内参矩阵A为已知数。
5.根据权利要求1-4中任意一项所述的标定方法,其特征在于,所述在所述第一激光线中选定第一参考点,并且确定所述第一参考点在所述第一图像中的像素坐标的步骤,进一步包括:
从所述第一激光线选取至少两个第一拟合点,并且获取所述至少两个第一拟合点在所述第一图像中的像素坐标;
根据所述至少两个第一拟合点在所述第一图像中的像素坐标,拟合所述第一激光线的像素直线方程;
获取所述标靶上设置的多个标定点在所述第一图像中的像素坐标;
根据所述多个标定点在所述第一图像中的像素坐标,拟合第一靶线的像素直线方程,其中,所述第一靶线是由所述多个标定点中至少两个标定点连接而成,并且所述第一靶线与所述第一激光线相交;
将所述第一靶线与所述第一激光线的交点作为所述第一参考点,并且根据所述第一激光线的像素直线方程和第一靶线的像素直线方程,计算所述第一参考点在所述第一图像的像素坐标。
6.根据权利要求2所述的标定方法,其特征在于,所述获取所述相机在所述第二位置时的第二转换矩阵的步骤,进一步包括:
获取所述标靶上设置的多个标定点在所述第二图像中的像素坐标;
根据所述多个标定点在第二图像中的像素坐标,获取所述多个标定点对应的第二相机坐标;
获取所述相机在所述第二位置时所述多个标定点的第二世界坐标;
获取所述多个标定点的世界坐标;
根据所述多个标定点在所述第二图像中的像素坐标、第二世界坐标以及第二相机坐标,确定所述第二转换矩阵。
7.根据权利要求6所述的标定方法,其特征在于,所述第二转换矩阵包括相机的内参矩阵A和第二外参矩阵V2,所述第二外参矩阵V2包括第二旋转矩阵R2和第二转移向量T2,所述根据所述多个标定点在所述第二图像的像素坐标、第二世界坐标以及第二相机坐标,确定所述第二转换矩阵的计算公式如下:
Figure FDA0002555464740000041
所述(u2,v2)为所述多个标定点在所述第二图像中的像素坐标,所述(X2,Y2,Z2)为所述多个标定点的第二世界坐标,所述(x2,y2,z2)为所述多个标定点的第二相机坐标,其中,所述内参矩阵A为已知数。
8.根据权利要求1、2、3、4、6和7中任意一项所述的标定方法,其特征在于,所述在所述第二激光线中选定第二参考点,并且确定所述第二参考点在所述第二图像中的像素坐标的步骤,进一步包括:
从所述第二激光线选取至少两个第二拟合点,并且获取所述至少两个第二拟合点在所述第二图像中的像素坐标;
根据所述至少两个第二拟合点在所述第二图像中的像素坐标,拟合所述第二激光线的像素直线方程;
获取所述标靶上设置的多个标定点在所述第二图像中的像素坐标;
根据所述多个标定点在所述第二图像中的像素坐标,拟合第二靶线的像素直线方程,其中,所述第二靶线是由所述多个标定点中至少两个标定点连接而成,并且所述第二靶线与所述第二激光线相交;
将所述第二靶线与所述第二激光线的交点作为所述第二参考点,并且根据所述第二激光线的像素直线方程和第二靶线的像素直线方程,计算所述第二参考点在所述第二图像的像素坐标。
9.一种激光标定系统的标定装置,其特征在于,包括:
第一获取模块,用于获取所述相机在第一位置时所采集到的所述标靶的第一图像;
第一识别模块,用于根据所述第一图像,识别所述激光打在所述标靶时形成的第一激光线;
第一确定模块,用于在所述第一激光线中选定第一参考点,并且确定所述第一参考点在所述第一图像中的像素坐标;
第一转换模块,用于将所述第一参考点在所述第一图像中的像素坐标转换为相机坐标;
第二获取模块,用于获取所述相机在第二位置时所采集到的所述标靶的第二图像,其中,所述第一位置和第二位置为所述相机相对于所述标靶所在的位置,并且所述第一位置和第二位置不相同;
第二识别模块,用于根据所述第二图像,识别所述激光打在所述标靶时形成的第二激光线;
第二确定模块,用于在所述第二激光线中选定第二参考点,并且确定所述第二参考点在所述第二图像中的像素坐标;
第二转换模块,用于将所述第二参考点在所述第二图像中的像素坐标转换为相机坐标;
第三确定模块,用于根据所述第一参考点和第二参考点的相机坐标,确定所述激光器所输出的激光所在的平面在相机坐标系中的平面方程。
10.一种激光标定系统,其特征在于,包括:
标靶;
支架;
激光器,固定于所述支架上,所述激光器所输出的激光打在所述标靶;
相机,固定于所述支架上,所述相机用于拍摄所述标靶的图像;
控制器,包括至少一个处理器以及存储器,所述存储器和相机均与所述至少一个处理器通信连接,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-8中任一项所述的方法。
11.根据权利要求10所述的激光标定系统,其特征在于,还包括补光灯和滤波片;
所述补光灯固定于所述支架,所述补光灯用于向所述标靶输出照明光源,所述滤波片设置于所述相机的取景镜头上,其中,所述滤波片允许通过的光源的波长与所述补光灯所输出的照明光源的波长相同。
12.根据权利要求10所述的激光标定系统,其特征在于,所述标靶上涂覆有反光材料。
13.根据权利要求12所述的激光标定系统,其特征在于,所述标靶的标靶平面划分标定点区域和背景区域,其中,所述标定点区域和背景区域的颜色不相同,所述反光材料涂覆于所述背景区域。
14.根据权利要求10-13中任意一项所述的激光标定系统,其特征在于,还包括基台和位姿调整装置;
所述标靶和位姿调整装置均设置于所述基台上,所述支架设置于所述位姿调整装置上,所述位姿调整装置用于调整所述支架的位置,以调整所述相机相对于所述标靶所在的位置。
15.根据权利要求14所述的激光标定系统,其特征在于,所述位姿调整装置包括固定座和若干垫片;
所述若干垫片叠置于所述基台上,所述固定座设置于所述若干垫片上,所述固定座设置有固定槽,所述支架的一端插接于所述固定槽内。
CN202010590850.7A 2020-06-24 2020-06-24 一种激光标定系统的标定方法、装置以及激光标定系统 Active CN111739104B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN202010590850.7A CN111739104B (zh) 2020-06-24 一种激光标定系统的标定方法、装置以及激光标定系统
PCT/CN2021/100796 WO2021259151A1 (zh) 2020-06-24 2021-06-18 一种激光标定系统的标定方法、装置以及激光标定系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010590850.7A CN111739104B (zh) 2020-06-24 一种激光标定系统的标定方法、装置以及激光标定系统

Publications (2)

Publication Number Publication Date
CN111739104A true CN111739104A (zh) 2020-10-02
CN111739104B CN111739104B (zh) 2024-05-03

Family

ID=

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112270719A (zh) * 2020-12-21 2021-01-26 苏州挚途科技有限公司 相机标定方法、装置及系统
CN113808214A (zh) * 2021-08-24 2021-12-17 东莞固高自动化技术有限公司 相机标定设备、相机生产系统、相机及其标定方法
WO2021259151A1 (zh) * 2020-06-24 2021-12-30 深圳市道通科技股份有限公司 一种激光标定系统的标定方法、装置以及激光标定系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102794763A (zh) * 2012-08-31 2012-11-28 江南大学 基于线结构光视觉传感器引导的焊接机器人系统标定方法
JP2013122434A (ja) * 2011-12-12 2013-06-20 Itt:Kk レーザーを用いた単眼カメラによる3次元形状位置計測装置,3次元形状位置計測処理方法および3次元形状位置計測処理プログラム
CN106056620A (zh) * 2016-06-13 2016-10-26 西南科技大学 用于线激光位置标定的标定板及线激光相机测量系统标定方法
WO2018228013A1 (zh) * 2017-06-12 2018-12-20 北京航空航天大学 一种基于前镀膜平面镜的结构光参数标定装置及方法
CN109211264A (zh) * 2017-07-06 2019-01-15 杭州海康机器人技术有限公司 测量系统的标定方法、装置、电子设备及可读存储介质
CN109946680A (zh) * 2019-02-28 2019-06-28 北京旷视科技有限公司 探测系统的外参数标定方法、装置、存储介质及标定系统
CN110031824A (zh) * 2019-04-12 2019-07-19 杭州飞步科技有限公司 激光雷达联合标定方法及装置
CN110118528A (zh) * 2019-04-29 2019-08-13 天津大学 一种基于棋盘靶标的线结构光标定方法
WO2019184885A1 (zh) * 2018-03-30 2019-10-03 杭州海康威视数字技术股份有限公司 一种相机外参标定方法、装置及电子设备

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013122434A (ja) * 2011-12-12 2013-06-20 Itt:Kk レーザーを用いた単眼カメラによる3次元形状位置計測装置,3次元形状位置計測処理方法および3次元形状位置計測処理プログラム
CN102794763A (zh) * 2012-08-31 2012-11-28 江南大学 基于线结构光视觉传感器引导的焊接机器人系统标定方法
CN106056620A (zh) * 2016-06-13 2016-10-26 西南科技大学 用于线激光位置标定的标定板及线激光相机测量系统标定方法
WO2018228013A1 (zh) * 2017-06-12 2018-12-20 北京航空航天大学 一种基于前镀膜平面镜的结构光参数标定装置及方法
CN109211264A (zh) * 2017-07-06 2019-01-15 杭州海康机器人技术有限公司 测量系统的标定方法、装置、电子设备及可读存储介质
WO2019184885A1 (zh) * 2018-03-30 2019-10-03 杭州海康威视数字技术股份有限公司 一种相机外参标定方法、装置及电子设备
CN109946680A (zh) * 2019-02-28 2019-06-28 北京旷视科技有限公司 探测系统的外参数标定方法、装置、存储介质及标定系统
CN110031824A (zh) * 2019-04-12 2019-07-19 杭州飞步科技有限公司 激光雷达联合标定方法及装置
CN110118528A (zh) * 2019-04-29 2019-08-13 天津大学 一种基于棋盘靶标的线结构光标定方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
周京博;李华;秦志英;黄风山;武哲;: "基于参考靶标的线结构光传感器标定", 光学学报, no. 04 *
潘燕;张伟;赵雨;楼向明;: "线结构光传感器参数现场标定方法", 自动化仪表, no. 09 *
陈文亮;董清亮;刘峰;王向军;吴凡路;: "三维空间中线结构光与相机快速标定方法", 红外技术, no. 01 *
魏一;刘彦呈;张银东;聂建辉;: "基于平面标靶的线结构光参数一体标定算法", 光电子.激光, no. 08 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021259151A1 (zh) * 2020-06-24 2021-12-30 深圳市道通科技股份有限公司 一种激光标定系统的标定方法、装置以及激光标定系统
CN112270719A (zh) * 2020-12-21 2021-01-26 苏州挚途科技有限公司 相机标定方法、装置及系统
CN112270719B (zh) * 2020-12-21 2021-04-02 苏州挚途科技有限公司 相机标定方法、装置及系统
CN113808214A (zh) * 2021-08-24 2021-12-17 东莞固高自动化技术有限公司 相机标定设备、相机生产系统、相机及其标定方法

Also Published As

Publication number Publication date
WO2021259151A1 (zh) 2021-12-30

Similar Documents

Publication Publication Date Title
WO2021259151A1 (zh) 一种激光标定系统的标定方法、装置以及激光标定系统
CN110276808B (zh) 一种单相机结合二维码测量玻璃板不平度的方法
CN110689581B (zh) 结构光模组标定方法、电子设备、计算机可读存储介质
CN107767422B (zh) 一种鱼眼镜头的校正方法、装置及便携式终端
CN207766424U (zh) 一种拍摄装置及成像设备
CN110910459B (zh) 一种对摄像装置的标定方法、装置及标定设备
CN111383279A (zh) 外参标定方法、装置及电子设备
CN112816949B (zh) 传感器的标定方法及装置、存储介质、标定系统
CN110779491A (zh) 一种水平面上目标测距的方法、装置、设备及存储介质
CN111220126A (zh) 一种基于点特征和单目相机的空间物体位姿测量方法
CN107941153B (zh) 一种激光测距优化标定的视觉系统
CN111263142A (zh) 一种摄像模组光学防抖的测试方法、装置、设备及介质
KR20150069927A (ko) 카메라 및 레이저 센서의 캘리브레이션 장치 및 캘리브레이션 방법
WO2014181581A1 (ja) キャリブレーション装置、キャリブレーションシステム、及び撮像装置
JP6645140B2 (ja) 画像のキャリブレーション装置及びキャリブレーション方法
CN112907647B (zh) 一种基于固定式单目摄像机的三维空间尺寸测量方法
US20240087167A1 (en) Compensation of three-dimensional measuring instrument having an autofocus camera
CN109741384B (zh) 深度相机的多距离检测装置及方法
US20120056999A1 (en) Image measuring device and image measuring method
CN112254638A (zh) 一种可俯仰调节的智能视觉3d信息采集设备
CN111739104B (zh) 一种激光标定系统的标定方法、装置以及激光标定系统
CN109682312B (zh) 一种基于摄像头测量长度的方法及装置
CN116718108A (zh) 双目相机
CN114331977A (zh) 多阵列三维测量系统的拼接标定系统、方法及装置
US20220124253A1 (en) Compensation of three-dimensional measuring instrument having an autofocus camera

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant