CN113643372B - 一种三维焊缝提取方法及系统 - Google Patents
一种三维焊缝提取方法及系统 Download PDFInfo
- Publication number
- CN113643372B CN113643372B CN202111207176.0A CN202111207176A CN113643372B CN 113643372 B CN113643372 B CN 113643372B CN 202111207176 A CN202111207176 A CN 202111207176A CN 113643372 B CN113643372 B CN 113643372B
- Authority
- CN
- China
- Prior art keywords
- dimensional
- point
- welding workpiece
- camera
- vector
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000605 extraction Methods 0.000 title claims abstract description 46
- 238000003466 welding Methods 0.000 claims abstract description 286
- 230000010363 phase shift Effects 0.000 claims abstract description 61
- 239000011159 matrix material Substances 0.000 claims abstract description 36
- 238000013459 approach Methods 0.000 claims abstract description 26
- 238000000034 method Methods 0.000 claims abstract description 26
- 238000005070 sampling Methods 0.000 claims description 38
- 238000004590 computer program Methods 0.000 claims description 10
- 238000012545 processing Methods 0.000 claims description 10
- 238000001914 filtration Methods 0.000 claims description 7
- 230000009467 reduction Effects 0.000 claims description 5
- 230000006870 function Effects 0.000 description 17
- 238000010586 diagram Methods 0.000 description 10
- 238000004422 calculation algorithm Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000003287 optical effect Effects 0.000 description 4
- 238000005457 optimization Methods 0.000 description 4
- 230000002146 bilateral effect Effects 0.000 description 3
- 238000013178 mathematical model Methods 0.000 description 3
- 239000011324 bead Substances 0.000 description 2
- 230000007547 defect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000000354 decomposition reaction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000002068 genetic effect Effects 0.000 description 1
- 238000011478 gradient descent method Methods 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 229910000679 solder Inorganic materials 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/75—Determining position or orientation of objects or cameras using feature-based methods involving models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/0014—Image feed-back for automatic industrial control, e.g. robot with camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/08—Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30152—Solder
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Robotics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
本发明提供一种三维焊缝提取方法及系统，包括：投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案；摄像机采集投射有上述图案的目标焊接工件表面的图像；分别对上述图像的格雷编码图案和相移编码图案进行解码，得到对应的解码结果；根据对应的解码结果、摄像机内外参数矩阵和投影仪内外参数矩阵，计算目标焊接工件对应点的三维坐标；根据目标焊接工件对应点的三维坐标，对目标焊接工件进行三维重建；提取三维重建模型表面的焊缝路径点，对焊缝路径点进行拟合，得到焊缝的三维位置模型；基于三维焊缝位置模型中焊缝路径点的单位方向向量，单位接近向量和单位法向量，确定焊缝的三维姿态模型。该方法可以实现对三维焊缝的精确提取。
Description
技术领域
本发明涉及焊接技术领域，尤其涉及一种三维焊缝提取方法及系统。
背景技术
随着工业技术的不断进步，焊接技术成为一项重要的金属热加工技术，同时在应用的过程中也对该项技术提出越来越高的要求。传统的人工焊接焊接质量受焊接人员的影响很大，难以保证焊接的品质，焊接自动化成为焊接的主要发展方向。
利用焊接机器人进行焊接是实现焊接自动化的途径之一。在利用焊接机器人进行焊接之前首先要完成对焊接工件的焊缝提取。本发明中的焊缝指焊接工件中未填充焊料的缝隙，如图1所示，图1中的1为本发明所述的焊缝。目前，焊缝提取的方法主要是利用双目结构光视觉传感器对焊接工件进行三维重建，进而提取焊接工件的焊缝。但该方法存在一定缺陷: 比如，双目结构光视觉传感器的体积大、成本高，提取精度低，不适用于大多数焊接机器人工作场景等。
发明内容
本发明提供一种三维焊缝提取方法及系统，用以解决现有技术中三维焊缝提取精度低和提取成本高等缺点的缺陷，可以保证对三维焊缝的精确提取。
第一方面，本发明提供了一种三维焊缝提取方法，包括：通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案；通过摄像机采集投射有所述格雷编码图案的所述目标焊接工件表面的图像和投射有所述相移编码图案的所述目标焊接工件表面的图像；对所述摄像机采集到的图像中的所述格雷编码图案进行解码，得到所述格雷编码对应的十进制数，对所述摄像机采集到的图像中的所述相移编码图案进行解码，得到所述相移编码对应的相位主值，根据所述十进制数和所述相位主值，确定所述摄像机采集到的图像中任意一点的绝对相位值；根据所述摄像机采集到的图像中任意一点的绝对相位值、所述摄像机的内外参数矩阵和所述投影仪的内外参数矩阵，确定所述目标焊接工件的对应点的三维坐标；根据所述目标焊接工件的对应点的三维坐标，对所述目标焊接工件进行三维重建，得到所述目标焊接工件的三维重建模型；提取所述三维重建模型表面的焊缝路径点，对所述焊缝路径点进行拟合，得到焊缝的三维位置模型；基于所述焊缝的三维位置模型中焊缝路径点的方向向量，接近向量和法向量，确定焊缝的三维姿态模型；其中，所述方向向量为单位向量，用于表征焊缝的三维曲线在各采样点处的切线方向；所述接近向量为单位向量，用于表征焊缝的三维曲线在各采样点处与所述焊缝垂直的方向；所述法向量为单位向量，用于表征所述方向向量与所述接近向量做向量积运算在各采样点处得到的方向。
根据本发明提供的三维焊缝提取方法，所述根据所述目标焊接工件的对应点的三维坐标，对所述目标焊接工件进行三维重建，得到所述目标焊接工件的三维重建模型，包括：根据所述目标焊接工件的对应点的三维坐标，得到所述目标焊接工件的三维点云；根据所述目标焊接工件的三维点云进行三维建模，得到所述目标焊接工件的三维重建模型。
根据本发明提供的三维焊缝提取方法，所述根据所述摄像机采集到的图像上任意一点的绝对相位值、所述摄像机内外参数矩阵和所述投影仪内外参数矩阵确定所述目标焊接工件任一点的三维坐标，包括：
根据所述摄像机采集到的图像上任意一点的绝对相位值，得到该点在所述投影仪平面内对应的直线的坐标；根据所述该点在所述投影仪平面内对应的直线的坐标、所述摄像机内外参数矩阵和所述投影仪内外参数矩阵得到所述目标焊接工件的对应点的三维坐标。根据本发明提供的三维焊缝提取方法，所述提取所述三维重建模型表面的焊缝路径点，包括：根据焊接工件表面先验形状信息，对所述三维重建模型表面进行拟合，得到拟合的目标焊接工件表面；计算所述目标焊接工件表面的三维点云中每个点到所述拟合的目标焊接工件表面的最近距离；根据所述最近距离得到所述焊缝路径点。
根据本发明提供的三维焊缝提取方法，所述根据焊接工件表面先验形状信息，对所述三维重建模型表面进行拟合，得到拟合的目标焊接工件表面之前，还包括：对所述三维重建模型表面的三维点云进行滤波处理，得到降噪后的三维点云。
根据本发明提供的三维焊缝提取方法，所述对所述摄像机采集到的图像中的所述格雷编码图案进行解码，得到所述格雷编码对应的十进制数，包括：对所述摄像机采集到的图像中的所述格雷编码图案二值化处理，对二值化处理后的格雷编码图案进行解码，得到所述格雷编码对应的二进制码；将所述二进制码进行转换，得到所述格雷编码对应的十进制数。
第二方面，本发明还提供了一种三维焊缝提取系统，包括：投影仪，用于通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案；摄像机，用于通过摄像机采集投射有所述格雷编码图案的所述目标焊接工件表面的图像和投射有所述相移编码图案的所述目标焊接工件表面的图像；工业计算机，用于对所述摄像机采集到的图像中的所述格雷编码图案进行解码，得到所述格雷编码对应的十进制数，对所述摄像机采集到的图像中的所述相移编码图案进行解码，得到所述相移编码对应的相位主值，根据所述十进制数和所述相位主值，确定所述摄像机采集到的图像中任意一点的绝对相位值；根据所述摄像机采集到的图像中任意一点的绝对相位值、所述摄像机的内外参数矩阵和所述投影仪的内外参数矩阵，确定所述目标焊接工件的对应点的三维坐标；根据所述目标焊接工件的对应点的三维坐标，对所述目标焊接工件进行三维重建，得到所述目标焊接工件的三维重建模型；提取所述三维重建模型表面的焊缝路径点，对所述焊缝路径点进行拟合，得到焊缝的三维位置模型；基于所述焊缝的三维位置模型中焊缝路径点的方向向量，接近向量和法向量，确定焊缝的三维姿态模型；其中，所述方向向量为单位向量，用于表征焊缝的三维曲线在各采样点处的切线方向；所述接近向量为单位向量，用于表征焊缝的三维曲线在各采样点处与所述焊缝垂直的方向；所述法向量为单位向量，用于表征所述方向向量与所述接近向量做向量积运算在各采样点处得到的方向。
第三方面，本发明还提供了一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述程序时实现如第一方面所述的三维焊缝提取方法的步骤。
第四方面，本发明还提供了一种非暂态计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如第一方面所述的三维焊缝提取方法的步骤。
第五方面，本发明还提供了一种计算机程序产品，其上存储有可执行指令，该指令被处理器执行时使处理器实现如第一方面所述的三维焊缝提取方法的步骤。
本发明提供的一种三维焊缝提取方法及系统，通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案；通过摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像；对摄像机采集到的图像中的格雷编码图案进行解码，得到格雷编码对应的十进制数，对摄像机采集到的图像中的相移编码图案进行解码，得到相移编码对应的相位主值，根据十进制数和相位主值，确定摄像机采集到的图像中任意一点的绝对相位值；根据摄像机采集到的图像中任意一点的绝对相位值、摄像机的内外参数矩阵和投影仪的内外参数矩阵，确定目标焊接工件的对应点的三维坐标；根据目标焊接工件的对应点的三维坐标，对目标焊接工件进行三维重建，得到目标焊接工件的三维重建模型；提取三维重建模型表面的焊缝路径点，对焊缝路径点进行拟合，得到焊缝的三维位置模型；基于焊缝的三维位置模型中焊缝路径点的方向向量，接近向量和法向量，确定焊缝的三维姿态模型；其中，方向向量为单位向量，用于表征焊缝的三维曲线在各采样点处的切线方向；接近向量为单位向量，用于表征焊缝的三维曲线在各采样点处与焊缝垂直的方向；法向量为单位向量，用于表征方向向量与接近向量做向量积运算在各采样点处得到的方向。通过对目标焊接工件进行三维重建，根据目标焊接工件的三维重建模型得到三维焊缝的位置模型和三维焊缝的姿态模型，可以实现对三维焊缝的精确提取。
附图说明
图1为本发明提供的一种三维焊缝结构示意图；
图2是本发明提供的一种三维焊缝提取方法实施例的流程示意图；
图3（a）是本发明提供的格雷编码示意图；
图3（b）是本发明提供的相移编码示意图；
图4（a）是本发明提供的摄像机采集投射有格雷编码图案的目标焊接工件表面的图像；
图4（b）是本发明提供的摄像机采集投射有相移编码图案的目标焊接工件表面的图像；
图5是本发明提供的相位主值图；
图6是本发明提供的相位展开原理图；
图7（a）是本发明提供的搭接焊缝的示意图；
图7（b）是本发明提供的角接焊缝的示意图；
图8 是本发明提供的单位向量
的计算原理图；
图9是本发明提供的三维焊缝位姿模型示意图；
图10是本发明提供的P点在不同坐标系下的相对位置图；
图11是本发明提供的一种三维焊缝提取系统实施例的结构示意图；
图12 是本发明提供的一种电子设备的实体结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明中的附图，对本发明中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
图2为本发明提供的一种三维焊缝提取方法实施例的流程示意图。如图2所示，该三维焊缝提取方法包括以下步骤：
S201，通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案；通过摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像。
在步骤S201中，投影仪首先向目标焊接工件表面投射ｎ幅格雷码图案，将测量视野划分为2n个条纹区域，每个条纹区域具有相同的格雷编码值。为了提高格雷编码的鲁棒性，对每个格雷编码图案增加了一个逆变换。然后投影仪向目标焊接工件表面投射标准的N步相移编码图案，保证格雷码编码图案的最小周期为相移编码图案周期的4倍。格雷编码图案和相移编码图案分别如图3（a）和图3（b）所示。其中，相移编码图案是正弦光栅图像，是根据公式1生成的。
其中，
为第
张图像中像素点
处的灰度值；
为所生成图像的宽度
等于投影仪分辨率的宽度；
表示生成的正弦光栅的幅度；
表示第
张图像的相位；
表示正弦光栅条纹的周期。在一组相移光栅图像中，只有相位
呈规律性变化。本实施例
中，可以采用四步相移法生成正弦光栅图像，四步相移法表示在这一组光栅中，相位
移
动四次，共生成四幅正弦光栅图像。
摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像分别如图4（a）和图4（b）所示。
S202，对摄像机采集到的图像中的格雷编码图案进行解码，得到格雷编码对应的十进制数，对摄像机采集到的图像中的相移编码图案进行解码，得到相移编码对应的相位主值，根据十进制数和相位主值，确定摄像机采集到的图像中任意一点的绝对相位值。
在步骤S202中，格雷编码与二进制编码一样都只用１和0组成。在一组二进制数的编码中，若任意两个相邻的代码只有一位二进制数不同，则称这种编码为格雷编码。并且在格雷码中，最大数与最小数之间也仅有一位数不同，即“首尾相连”。因此，格雷码可以与二进制码和十进制数相互转换。
相移法图像解码主要是通过采集多帧有一定相移的条纹图案来计算相位主值，用于细分具有相同格雷码值的区域。投影仪投射出的正弦光栅条纹投射到目标焊接工件表面后，摄像机采集到的投射有相移编码的目标焊接工件表面每一个像素点处的灰度值如公式2所示：
其中，
为采集到的第
张图像中像素点
处的灰度值，
第
张图像的
相位，
为经被测物体高度调制后的相位值。对相移编码图案进行解码，得到的相位
主值图如图5所示。
由于函数中
，
，
三个为未知数，因此通过至少三幅光栅条
纹可完成求解，利用四步相移法求得相位主值，相位主值的求解公式如公式3所示：
由于
被包裹在
之间，在不同周期中相位主值都相同，需要对包裹的
相位主值进行相位展开得到绝对相位值。格雷编码与相移编码相位展开原理如图6所示，使
用每一区域内的格雷编码值去确定不同周期的绝对相位值。利用相位展开公式可以计算绝
对相位值，相位展开公式可以表示为：
其中，
为绝对相位值，
为对应像素的格雷码值，
为相对相
位值即相位主值。
S203，根据摄像机采集到的图像中任意一点的绝对相位值、摄像机的内外参数矩阵和投影仪的内外参数矩阵，确定目标焊接工件的对应点的三维坐标；根据目标焊接工件的对应点的三维坐标，对目标焊接工件进行三维重建，得到目标焊接工件的三维重建模型。
在步骤S203中，根据摄像机采集到的目标焊接工件表面的图像上任意一点的绝对相位值可以得到在目标焊接工件表面任意一点的像素坐标，根据摄像机内外参数矩阵和投影仪内外参数矩阵可以对该点在目标焊接工件表面的像素坐标进行坐标变换，得到该点在世界坐标系下的坐标，即三维坐标。根据得到的目标焊接工件对应点的三维坐标可以对目标焊接工件进行三维重建，得到目标焊接工件的三维重建模型。
S204，提取三维重建模型表面的焊缝路径点，对焊缝路径点进行拟合，得到焊缝的三维位置模型。
在步骤S204中，可以根据焊缝先验形状信息预设点云提取算子，根据预设的点云提取算子提取三维重建模型表面的焊缝路径点。其中，焊缝先验形状信息可以包括V型焊缝、搭接焊缝和角接焊缝。V型焊缝、搭接焊缝和角接焊缝分别如图1、图7（a）和图7（b）所示。
为了保证拟合得到的焊缝曲线精度和平滑性，可以采用平滑三次B样条函数对焊
缝路径点进行最小二乘拟合。即给定
个控制点
和
个节点
，由这些控制点和节点可以定义三次B样条函数为：
其中，
是三次B样条的基函数, 
,
为样条函数的次数，三次B
样条函数的控制点可以通过优化目标函数得到，目标函数表示为：
其中，目标函数包括两部分，第一部分是接近函数用来度量原始数据和拟合数据
之间的接近程度，第二部分是正则项，用于惩罚函数的曲率，保证拟合曲线的光滑性，正则
项系数𝜆用于建立二者之间的权衡，通过优化目标函数使其值最小，可求得三次平滑B样条
拟合函数控制点
的最优解。可以利用拉格朗日优化方法，对目标函数所有
变量求偏导，这样即可将最小化目标函数的问题转换为求解方程组的问题，然后利用SVD分
解等方程组求解方法获得三次平滑B样条函数控制点的最优解。当然，也可以通过迭代式的
优化方法梯度下降法或者启发式优化方法如遗传算法、蚁群算法以及粒子群算法等求取最
优解。求得三次平滑B样条拟合函数控制点之后，就可以得到三次平滑B样条拟合函数，即空
间焊缝的位置模型。
S205，基于所述焊缝的三维位置模型中焊缝路径点的方向向量，接近向量和法向量，确定焊缝的三维姿态模型；其中，方向向量为单位向量，用于表征焊缝的三维曲线在各采样点处的切线方向；接近向量为单位向量，用于表征焊缝的三维曲线在各采样点处与所述焊缝垂直的方向；法向量为单位向量，用于表征方向向量与接近向量做向量积运算在各采样点处得到的方向。
在步骤S205中，单位方向向量，单位接近向量和单位法向量分别如公式7、公式8和公式10所示。
单位向量
的计算原理如图8所示，向量 v1 为由特征点 P1与P2确定的边缘
向量；向量 v2为由特征点 P3和P2确定的边缘向量。单位向量
为焊缝路径点在第
个
采样点处向量
与向量
平分线的单位向量，其表达式为：
单位法向量的计算原理根据右手定则，单位法向向量由单位方向向量与单位接近向量做向量积运算得到，计算公式如下：
三维焊缝姿态模型是在三维焊缝位置模型的焊缝路径点上建立的，将二者融合可以得到三维焊缝位姿模型。三维焊缝的位姿模型如图9所示，其中曲线代表对焊缝路径点进行拟合的得到的三维焊缝位置模型，各单位向量代表根据焊缝路径点确定的三维焊缝姿态模型。
根据本发明实施例提供的三维焊缝提取方法，通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案；通过摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像；对摄像机采集到的图像中的格雷编码图案进行解码，得到格雷编码对应的十进制数，对摄像机采集到的图像中的相移编码图案进行解码，得到相移编码对应的相位主值，根据十进制数和相位主值，确定摄像机采集到的图像中任意一点的绝对相位值；根据摄像机采集到的图像中任意一点的绝对相位值、摄像机的内外参数矩阵和投影仪的内外参数矩阵，确定目标焊接工件的对应点的三维坐标；根据目标焊接工件的对应点的三维坐标，对目标焊接工件进行三维重建，得到目标焊接工件的三维重建模型；提取三维重建模型表面的焊缝路径点，对焊缝路径点进行拟合，得到焊缝的三维位置模型；基于焊缝的三维位置模型中焊缝路径点的方向向量，接近向量和法向量，确定焊缝的三维姿态模型；其中，方向向量为单位向量，用于表征焊缝的三维曲线在各采样点处的切线方向；接近向量为单位向量，用于表征焊缝的三维曲线在各采样点处与焊缝垂直的方向；法向量为单位向量，用于表征方向向量与接近向量做向量积运算在各采样点处得到的方向。通过对目标焊接工件进行三维重建，根据目标焊接工件的三维重建模型得到三维焊缝的位置模型和三维焊缝的姿态模型，可以实现对三维焊缝的精确提取。
在一些可选的实施例中，根据目标焊接工件的对应点的三维坐标，对目标焊接工件进行三维重建，得到目标焊接工件的三维重建模型，可以包括：根据目标焊接工件的对应点的三维坐标，得到目标焊接工件的三维点云；根据目标焊接工件的三维点云进行三维建模，得到目标焊接工件的三维重建模型。
点云，也称三维点云，是指在逆向工程中通过测量仪器得到的产品外观表面的点数据集合，可以根据目标焊接工件对应点的三维坐标，得到目标焊接工件对应的三维点云。利用三维点云得到三维重建模型可以包括：点云配准、数据融合以及表面生成等过程。
在一些可选的实施例中，根据摄像机采集到的图像上任意一点的绝对相位值、摄像机内外参数矩阵和投影仪内外参数矩阵确定目标焊接工件任一点的三维坐标，可以包括：根据摄像机采集到的图像上任意一点的绝对相位值，得到该点在投影仪平面内对应的直线的坐标；根据该点在投影仪平面内对应的直线的坐标、摄像机内外参数矩阵和投影仪内外参数矩阵得到目标焊接工件的对应点的三维坐标。
假设目标焊接工件表面上的一点P在世界坐标系下坐标为
，点P在摄
像机采集到的目标焊接工件表面的图像上的绝对相位值为
，点P在摄像机采集到
的目标焊接工件表面的图像上像素坐标为
，则点P在摄像机采集到的目标焊接工件
表面的图像上对应该点在投影仪平面内目标焊接工件表面对应的直线的坐标为：
点P在世界坐标系、点P在摄像机采集到的目标焊接工件表面的图像上上以及点P在投影仪平面内目标焊接工件表面对应的直线的关系如图10所示。其中，点p＇为点P在摄像机采集到的目标焊接工件表面的图像上的对应点，Up为点P在投影仪平面内目标焊接工件表面对应的直线。
然后结合立体标定结果，即可求得空间中点P的三维坐标：
其中：
、
和
是已知的，
为摄像机内外参数矩阵通过标定得到，
为投影仪内外参数矩阵通过标定得到。因此，共有六个未知变量
，共有六个线性无关的方程，目标焊接工件上点
的三维坐标可以唯
一确定。令
则目标焊接工件上点P的三维坐标由下式计算得到：
在一些可选的实施例中，提取三维重建模型表面的焊缝路径点，可以包括：根据焊接工件表面先验形状信息，对三维重建模型表面进行拟合，得到拟合的目标焊接工件表面；计算所述目标焊接工件表面的三维点云中每个点到所述拟合的目标焊接工件表面的最近距离；根据最近距离得到焊缝路径点。
其中，焊接工件表面先验形状信息可以包括曲面和平面。如果三维重建模型表面是平面，确定该平面对应的平面方程，利用RANSAC算法对该平面方程进行拟合，建立该三维重建模型表面的数学模型；类似的，如果三维重建模型表面是曲面，确定该曲面对应的曲面方程，利用RANSAC算法对该曲面方程进行拟合，建立该三维重建模型表面的数学模型。三维重建模型表面的数学模型也就是得到的拟合的目标焊接工件表面。计算目标焊接工件表面的三维点云中每个点到拟合的目标焊接工件表面的最近距离，如果该点的最近距离大于预设的阈值，那么认为该点是焊缝路径点。
在一些可选的实施例中，根据焊接工件表面先验形状信息，对三维重建模型表面进行拟合，得到拟合的目标焊接工件表面之前，还包括：对三维重建模型表面的三维点云进行滤波处理，得到降噪后的三维点云。
其中，可以采用双边滤波算法对三维点云进行滤波，双边滤波是一种非线性滤波器，它可以达到保持边缘和降噪平滑的效果。双边滤波算法可以通过取邻近采样点的加权平均来修正当前采样点的位置，达到降噪的效果；同时该方法也会有选择地剔除部分与当前采样点差异过大的相邻采样点，从而达到保持原特征的目的。
在一些可选的实施例中，对摄像机采集到的图像中的格雷编码图案进行解码，得到格雷编码对应的十进制数，可以包括：对格雷编码图案进行二值化处理，对二值化处理后的格雷编码图案进行解码，得到格雷编码对应的二进制码；将二进制码进行转换，得到格雷编码对应的十进制数。其中，二值化处理就是将图像上的像素点的灰度值设置为0或255，也就是将整个图像呈现出明显的只有黑和白的视觉效果。对经过二值化处理的格雷编码利用公式16进行解码。
其中, 
表示二进制码, 
表示格雷码, 
表示对应码字的位数。
图11是本发明提供的一种三维焊缝提取系统实施例的结构示意图。如图11所示，该三维焊缝提取系统，包括：
投影仪，用于通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案；
摄像机，用于通过摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像；
工业计算机，用于对摄像机采集到的图像中的格雷编码图案进行解码，得到格雷编码对应的十进制数，对摄像机采集到的图像中的相移编码图案进行解码，得到相移编码对应的相位主值，根据十进制数和相位主值，确定摄像机采集到的图像中任意一点的绝对相位值；根据摄像机采集到的图像中任意一点的绝对相位值、摄像机的内外参数矩阵和投影仪的内外参数矩阵，确定目标焊接工件的对应点的三维坐标；根据目标焊接工件的对应点的三维坐标，对目标焊接工件进行三维重建，得到目标焊接工件的三维重建模型；提取三维重建模型表面的焊缝路径点，对焊缝路径点进行拟合，得到焊缝的三维位置模型；基于焊缝的三维位置模型中焊缝路径点的方向向量，接近向量和法向量，确定焊缝的三维姿态模型；其中，方向向量为单位向量，用于表征焊缝的三维曲线在各采样点处的切线方向；接近向量为单位向量，用于表征焊缝的三维曲线在各采样点处与所述焊缝垂直的方向；法向量为单位向量，用于表征所述方向向量与接近向量做向量积运算在各采样点处得到的方向。
可选地，工业计算机，还用于根据目标焊接工件的对应点的三维坐标，得到目标焊接工件的三维点云；根据目标焊接工件的三维点云进行三维建模，得到目标焊接工件的三维重建模型。
可选地，工业计算机，还用于根据摄像机采集到的图像上任意一点的绝对相位值，得到该点在投影仪平面内对应的直线的坐标；根据该点在投影仪平面内对应的直线的坐标、摄像机内外参数矩阵和投影仪内外参数矩阵得到目标焊接工件的对应点的三维坐标。
可选地，工业计算机，还用于根据焊接工件表面先验形状信息，对三维重建模型表面进行拟合，得到拟合的目标焊接工件表面；计算目标焊接工件表面的三维点云中每个点到拟合的目标焊接工件表面的最近距离；根据最近距离得到焊缝路径点。
可选地，工业计算机，还用于对三维重建模型表面的三维点云进行滤波处理，得到降噪后的三维点云。
可选地，工业计算机，还用于对摄像机采集到的图像中的格雷编码图案进行二值化处理，对二值化处理后的格雷编码图案进行解码，得到格雷编码对应的二进制码；将二进制码进行转换，得到格雷编码对应的十进制数。
图12是本发明提供的一种电子设备的实体结构示意图，如图12所示，该电子设备可以包括：处理器(processor)1201、通信接口(Communications Interface)1202、存储器(memory)1203和通信总线1204，其中，处理器1201，通信接口1202，存储器1203通过通信总线1204完成相互间的通信。处理器1201可以调用存储器1203中的逻辑指令，以执行三维焊缝提取方法，该方法包括：
通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案；通过摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像；对摄像机采集到的图像中的格雷编码图案进行解码，得到格雷编码对应的十进制数，对摄像机采集到的图像中的相移编码图案进行解码，得到相移编码对应的相位主值，根据十进制数和相位主值，确定摄像机采集到的图像中任意一点的绝对相位值；根据摄像机采集到的图像中任意一点的绝对相位值、摄像机的内外参数矩阵和投影仪的内外参数矩阵，确定目标焊接工件的对应点的三维坐标；根据目标焊接工件的对应点的三维坐标，对目标焊接工件进行三维重建，得到目标焊接工件的三维重建模型；提取三维重建模型表面的焊缝路径点，对焊缝路径点进行拟合，得到焊缝的三维位置模型；基于焊缝的三维位置模型中焊缝路径点的方向向量，接近向量和法向量，确定焊缝的三维姿态模型；其中，方向向量为单位向量，用于表征焊缝的三维曲线在各采样点处的切线方向；接近向量为单位向量，用于表征焊缝的三维曲线在各采样点处与焊缝垂直的方向；法向量为单位向量，用于表征方向向量与接近向量做向量积运算在各采样点处得到的方向。
此外，上述的存储器1203中的逻辑指令可以通过软件功能模块的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本发明各个实施例方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器（ROM，Read-Only Memory）、随机存取存储器（RAM，Random Access Memory）、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面，本发明还提供一种计算机程序产品，计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序，计算机程序包括程序指令，当程序指令被计算机执行时，计算机能够执行上述各方法所提供的三维焊缝提取方法，该方法包括：
通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案；通过摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像；对摄像机采集到的图像中的格雷编码图案进行解码，得到格雷编码对应的十进制数，对摄像机采集到的图像中的相移编码图案进行解码，得到相移编码对应的相位主值，根据十进制数和相位主值，确定摄像机采集到的图像中任意一点的绝对相位值；根据摄像机采集到的图像中任意一点的绝对相位值、摄像机的内外参数矩阵和投影仪的内外参数矩阵，确定目标焊接工件的对应点的三维坐标；根据目标焊接工件的对应点的三维坐标，对目标焊接工件进行三维重建，得到目标焊接工件的三维重建模型；提取三维重建模型表面的焊缝路径点，对焊缝路径点进行拟合，得到焊缝的三维位置模型；基于焊缝的三维位置模型中焊缝路径点的方向向量，接近向量和法向量，确定焊缝的三维姿态模型；其中，方向向量为单位向量，用于表征焊缝的三维曲线在各采样点处的切线方向；接近向量为单位向量，用于表征焊缝的三维曲线在各采样点处与焊缝垂直的方向；法向量为单位向量，用于表征方向向量与接近向量做向量积运算在各采样点处得到的方向。
又一方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各方法所提供的三维焊缝提取方法，该方法包括：
通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案；通过摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像；对摄像机采集到的图像中的格雷编码图案进行解码，得到格雷编码对应的十进制数，对摄像机采集到的图像中的相移编码图案进行解码，得到相移编码对应的相位主值，根据十进制数和相位主值，确定摄像机采集到的图像中任意一点的绝对相位值；根据摄像机采集到的图像中任意一点的绝对相位值、摄像机的内外参数矩阵和投影仪的内外参数矩阵，确定目标焊接工件的对应点的三维坐标；根据目标焊接工件的对应点的三维坐标，对目标焊接工件进行三维重建，得到目标焊接工件的三维重建模型；提取三维重建模型表面的焊缝路径点，对焊缝路径点进行拟合，得到焊缝的三维位置模型；基于焊缝的三维位置模型中焊缝路径点的方向向量，接近向量和法向量，确定焊缝的三维姿态模型；其中，方向向量为单位向量，用于表征焊缝的三维曲线在各采样点处的切线方向；接近向量为单位向量，用于表征焊缝的三维曲线在各采样点处与焊缝垂直的方向；法向量为单位向量，用于表征方向向量与接近向量做向量积运算在各采样点处得到的方向。
以上所描述的系统实施例仅仅是示意性的，其中作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行各个实施例或者实施例的某些部分的方法。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (9)
1.一种三维焊缝提取方法，其特征在于，包括：
通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案；通过摄像机采集投射有所述格雷编码图案的所述目标焊接工件表面的图像和投射有所述相移编码图案的所述目标焊接工件表面的图像；
对所述摄像机采集到的图像中的所述格雷编码图案进行解码，得到所述格雷编码对应的十进制数，对所述摄像机采集到的图像中的所述相移编码图案进行解码，得到所述相移编码对应的相位主值，根据所述十进制数和所述相位主值，确定所述摄像机采集到的图像中任意一点的绝对相位值；
根据所述摄像机采集到的图像中任意一点的绝对相位值、所述摄像机的内外参数矩阵和所述投影仪的内外参数矩阵，确定所述目标焊接工件的对应点的三维坐标；根据所述目标焊接工件的对应点的三维坐标，对所述目标焊接工件进行三维重建，得到所述目标焊接工件的三维重建模型；
提取所述三维重建模型表面的焊缝路径点，对所述焊缝路径点进行拟合，得到焊缝的三维位置模型；
基于所述焊缝的三维位置模型中焊缝路径点的方向向量，接近向量和法向量，确定焊缝的三维姿态模型；其中，所述方向向量为单位向量，用于表征焊缝的三维曲线在各采样点处的切线方向；所述接近向量为单位向量，用于表征焊缝的三维曲线在各采样点处与所述焊缝垂直的方向；所述法向量为单位向量，用于表征所述方向向量与所述接近向量做向量积运算在各采样点处得到的方向。
2.根据权利要求1所述的三维焊缝提取方法，其特征在于，所述根据所述目标焊接工件的对应点的三维坐标，对所述目标焊接工件进行三维重建，得到所述目标焊接工件的三维重建模型，包括：
根据所述目标焊接工件的对应点的三维坐标，得到所述目标焊接工件的三维点云；
根据所述目标焊接工件的三维点云进行三维建模，得到所述目标焊接工件的三维重建模型。
3.根据权利要求2所述的三维焊缝提取方法，其特征在于，所述根据所述摄像机采集到的图像上任意一点的绝对相位值、所述摄像机内外参数矩阵和所述投影仪内外参数矩阵确定所述目标焊接工件任一点的三维坐标，包括：
根据所述摄像机采集到的图像上任意一点的绝对相位值，得到该点在所述投影仪平面内对应的直线的坐标；
根据所述该点在所述投影仪平面内对应的直线的坐标、所述摄像机内外参数矩阵和所述投影仪内外参数矩阵得到所述目标焊接工件的对应点的三维坐标。
4.根据权利要求1所述的三维焊缝提取方法，其特征在于，所述提取所述三维重建模型表面的焊缝路径点，包括：
根据焊接工件表面先验形状信息，对所述三维重建模型表面进行拟合，得到拟合的目标焊接工件表面；
计算所述目标焊接工件表面的三维点云中每个点到所述拟合的目标焊接工件表面的最近距离；
根据所述最近距离得到所述焊缝路径点。
5.根据权利要求4所述的三维焊缝提取方法，其特征在于，所述根据焊接工件表面先验形状信息，对所述三维重建模型表面进行拟合，得到拟合的目标焊接工件表面之前，还包括：
对所述三维重建模型表面的三维点云进行滤波处理，得到降噪后的三维点云。
6.根据权利要求1所述的三维焊缝提取方法，其特征在于，所述对所述摄像机采集到的图像中的所述格雷编码图案进行解码，得到所述格雷编码对应的十进制数，包括：
对所述摄像机采集到的图像中的所述格雷编码图案进行二值化处理，对二值化处理后的格雷编码图案进行解码，得到所述格雷编码对应的二进制码；
将所述二进制码进行转换，得到所述格雷编码对应的十进制数。
7.一种三维焊缝提取系统，其特征在于，包括：
投影仪，用于通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案；
摄像机，用于通过摄像机采集投射有所述格雷编码图案的所述目标焊接工件表面的图像和投射有所述相移编码图案的所述目标焊接工件表面的图像；
工业计算机，用于对所述摄像机采集到的图像中的所述格雷编码图案进行解码，得到所述格雷编码对应的十进制数，对所述摄像机采集到的图像中的所述相移编码图案进行解码，得到所述相移编码对应的相位主值，根据所述十进制数和所述相位主值，确定所述摄像机采集到的图像中任意一点的绝对相位值；根据所述摄像机采集到的图像中任意一点的绝对相位值、所述摄像机的内外参数矩阵和所述投影仪的内外参数矩阵，确定所述目标焊接工件的对应点的三维坐标；根据所述目标焊接工件的对应点的三维坐标，对所述目标焊接工件进行三维重建，得到所述目标焊接工件的三维重建模型；提取所述三维重建模型表面的焊缝路径点，对所述焊缝路径点进行拟合，得到焊缝的三维位置模型；基于所述焊缝的三维位置模型中焊缝路径点的方向向量，接近向量和法向量，确定焊缝的三维姿态模型；其中，所述方向向量为单位向量，用于表征焊缝的三维曲线在各采样点处的切线方向；所述接近向量为单位向量，用于表征焊缝的三维曲线在各采样点处与所述焊缝垂直的方向；所述法向量为单位向量，用于表征所述方向向量与所述接近向量做向量积运算在各采样点处得到的方向。
8.一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1~6任一项所述的三维焊缝提取方法的步骤。
9.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1~6任一项所述的三维焊缝提取方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111207176.0A CN113643372B (zh) | 2021-10-18 | 2021-10-18 | 一种三维焊缝提取方法及系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111207176.0A CN113643372B (zh) | 2021-10-18 | 2021-10-18 | 一种三维焊缝提取方法及系统 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113643372A CN113643372A (zh) | 2021-11-12 |
| CN113643372B true CN113643372B (zh) | 2022-03-04 |
Family
ID=78427221
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111207176.0A Active CN113643372B (zh) | 2021-10-18 | 2021-10-18 | 一种三维焊缝提取方法及系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113643372B (zh) |
Families Citing this family (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN116408575B (zh) * | 2021-12-31 | 2024-06-04 | 广东美的白色家电技术创新中心有限公司 | 局部扫描、消除工件反光干扰的方法、装置和系统 |
| CN114119611B (zh) * | 2022-01-25 | 2022-04-01 | 季华实验室 | 焊缝参数识别方法、装置、电子设备及存储介质 |
| CN114723812B (zh) * | 2022-03-17 | 2024-09-27 | 上海交通大学 | 机器人磨具姿态确定方法、装置、设备及存储介质 |
| CN114972626B (zh) * | 2022-04-07 | 2024-09-13 | 福州大学 | 一种基于编码结构光双目视觉的焊缝三维重建系统及方法 |
| CN114952102A (zh) * | 2022-06-10 | 2022-08-30 | 上海汽车集团股份有限公司 | 一种植钉焊接防错机构以及植钉焊接防错方法 |
| WO2024113127A1 (zh) * | 2022-11-29 | 2024-06-06 | 电子科技大学 | 一种基于结构光和双目视觉的三维重建方法 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2132608A1 (de) * | 2007-02-19 | 2009-12-16 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Verfahren und vorrichtung zur steuerung von robotern zum schweissen von werkstücken |
| CN107912061A (zh) * | 2015-03-06 | 2018-04-13 | 伊利诺斯工具制品有限公司 | 用于焊接的传感器辅助头戴式显示器 |
| CN108555423A (zh) * | 2018-01-16 | 2018-09-21 | 中国计量大学 | 三维焊缝自动识别装置及方法 |
| CN112013792A (zh) * | 2020-10-19 | 2020-12-01 | 南京知谱光电科技有限公司 | 一种复杂大构件机器人面扫描三维重建方法 |
| CN113379902A (zh) * | 2021-06-30 | 2021-09-10 | 哈尔滨理工大学 | 一种基于激光扫描的焊缝形状的特征提取与三维重建方法 |
-
2021
- 2021-10-18 CN CN202111207176.0A patent/CN113643372B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP2132608A1 (de) * | 2007-02-19 | 2009-12-16 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Verfahren und vorrichtung zur steuerung von robotern zum schweissen von werkstücken |
| CN107912061A (zh) * | 2015-03-06 | 2018-04-13 | 伊利诺斯工具制品有限公司 | 用于焊接的传感器辅助头戴式显示器 |
| CN108555423A (zh) * | 2018-01-16 | 2018-09-21 | 中国计量大学 | 三维焊缝自动识别装置及方法 |
| CN112013792A (zh) * | 2020-10-19 | 2020-12-01 | 南京知谱光电科技有限公司 | 一种复杂大构件机器人面扫描三维重建方法 |
| CN113379902A (zh) * | 2021-06-30 | 2021-09-10 | 哈尔滨理工大学 | 一种基于激光扫描的焊缝形状的特征提取与三维重建方法 |
Non-Patent Citations (1)
| Title |
|---|
| 基于视觉传感的焊缝跟踪技术研究现状和发展趋势;范俊峰 等;《热加工工艺》;20170331;第46卷(第5期);6-10 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113643372A (zh) | 2021-11-12 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN113643372B (zh) | 一种三维焊缝提取方法及系统 | |
| Sagawa et al. | Grid-based active stereo with single-colored wave pattern for dense one-shot 3D scan | |
| JP6426968B2 (ja) | 情報処理装置およびその方法 | |
| CN112308963B (zh) | 一种无感三维人脸重建方法及采集重建系统 | |
| CN109945802B (zh) | 一种结构光三维测量方法 | |
| CN113920060A (zh) | 焊接机器人自主作业方法、装置、电子设备及存储介质 | |
| Song et al. | DOE-based structured-light method for accurate 3D sensing | |
| CN101432776A (zh) | 用于从二维图像进行三维物体重建的系统和方法 | |
| CN114526692B (zh) | 一种基于离焦度解包裹的结构光三维测量方法及装置 | |
| CN113587852A (zh) | 一种基于改进三步相移的彩色条纹投影三维测量方法 | |
| Tran et al. | A Structured Light RGB‐D Camera System for Accurate Depth Measurement | |
| Jaiswal et al. | 3D object modeling with a Kinect camera | |
| CN116912334B (zh) | 基于光栅条纹投影的相位映射高精度投影仪标定方法 | |
| CN117541537B (zh) | 基于全景点云融合技术的时空差异检测方法及其系统 | |
| Yu et al. | High-speed phase-shifting 3D profilometry on human face assisted by statistical model | |
| KR100837776B1 (ko) | 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치 및그 방법 | |
| CN112802084A (zh) | 基于深度学习的三维形貌测量方法、系统和存储介质 | |
| CN116753863A (zh) | 三维测量的方法、装置、电子设备及存储介质 | |
| Oishi et al. | Denoising of range images using a trilateral filter and belief propagation | |
| CN115830217A (zh) | 待建模物体三维模型点云的生成方法、装置和系统 | |
| CN115127481A (zh) | 条纹投影3d测量方法、终端设备及计算机可读存储介质 | |
| Ren et al. | 3-D shape measurement of rail achieved by a novel phase measurement profilometry based on virtual reference fringe generated by image interpolation | |
| Sioma | Filtering algorithms for 3D range image analysis | |
| Sheng et al. | Research on point-cloud collection and 3D model reconstruction | |
| Wang et al. | Depth perception of moving objects viaing structured light sensor with unstructured grid |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |