CN113643372B - 一种三维焊缝提取方法及系统 - Google Patents

一种三维焊缝提取方法及系统 Download PDF

Info

Publication number
CN113643372B
CN113643372B CN202111207176.0A CN202111207176A CN113643372B CN 113643372 B CN113643372 B CN 113643372B CN 202111207176 A CN202111207176 A CN 202111207176A CN 113643372 B CN113643372 B CN 113643372B
Authority
CN
China
Prior art keywords
dimensional
point
welding workpiece
camera
vector
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111207176.0A
Other languages
English (en)
Other versions
CN113643372A (zh
Inventor
范俊峰
邓赛
吴正兴
周超
景奉水
谭民
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute of Automation of Chinese Academy of Science
Original Assignee
Institute of Automation of Chinese Academy of Science
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Automation of Chinese Academy of Science filed Critical Institute of Automation of Chinese Academy of Science
Priority to CN202111207176.0A priority Critical patent/CN113643372B/zh
Publication of CN113643372A publication Critical patent/CN113643372A/zh
Application granted granted Critical
Publication of CN113643372B publication Critical patent/CN113643372B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • G06T7/75Determining position or orientation of objects or cameras using feature-based methods involving models
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • G06T1/0014Image feed-back for automatic industrial control, e.g. robot with camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00Three dimensional [3D] modelling, e.g. data description of 3D objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/08Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30152Solder

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Robotics (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Software Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明提供一种三维焊缝提取方法及系统,包括:投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案;摄像机采集投射有上述图案的目标焊接工件表面的图像;分别对上述图像的格雷编码图案和相移编码图案进行解码,得到对应的解码结果;根据对应的解码结果、摄像机内外参数矩阵和投影仪内外参数矩阵,计算目标焊接工件对应点的三维坐标;根据目标焊接工件对应点的三维坐标,对目标焊接工件进行三维重建;提取三维重建模型表面的焊缝路径点,对焊缝路径点进行拟合,得到焊缝的三维位置模型;基于三维焊缝位置模型中焊缝路径点的单位方向向量,单位接近向量和单位法向量,确定焊缝的三维姿态模型。该方法可以实现对三维焊缝的精确提取。

Description

一种三维焊缝提取方法及系统
技术领域
本发明涉及焊接技术领域,尤其涉及一种三维焊缝提取方法及系统。
背景技术
随着工业技术的不断进步,焊接技术成为一项重要的金属热加工技术,同时在应用的过程中也对该项技术提出越来越高的要求。传统的人工焊接焊接质量受焊接人员的影响很大,难以保证焊接的品质,焊接自动化成为焊接的主要发展方向。
利用焊接机器人进行焊接是实现焊接自动化的途径之一。在利用焊接机器人进行焊接之前首先要完成对焊接工件的焊缝提取。本发明中的焊缝指焊接工件中未填充焊料的缝隙,如图1所示,图1中的1为本发明所述的焊缝。目前,焊缝提取的方法主要是利用双目结构光视觉传感器对焊接工件进行三维重建,进而提取焊接工件的焊缝。但该方法存在一定缺陷: 比如,双目结构光视觉传感器的体积大、成本高,提取精度低,不适用于大多数焊接机器人工作场景等。
发明内容
本发明提供一种三维焊缝提取方法及系统,用以解决现有技术中三维焊缝提取精度低和提取成本高等缺点的缺陷,可以保证对三维焊缝的精确提取。
第一方面,本发明提供了一种三维焊缝提取方法,包括:通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案;通过摄像机采集投射有所述格雷编码图案的所述目标焊接工件表面的图像和投射有所述相移编码图案的所述目标焊接工件表面的图像;对所述摄像机采集到的图像中的所述格雷编码图案进行解码,得到所述格雷编码对应的十进制数,对所述摄像机采集到的图像中的所述相移编码图案进行解码,得到所述相移编码对应的相位主值,根据所述十进制数和所述相位主值,确定所述摄像机采集到的图像中任意一点的绝对相位值;根据所述摄像机采集到的图像中任意一点的绝对相位值、所述摄像机的内外参数矩阵和所述投影仪的内外参数矩阵,确定所述目标焊接工件的对应点的三维坐标;根据所述目标焊接工件的对应点的三维坐标,对所述目标焊接工件进行三维重建,得到所述目标焊接工件的三维重建模型;提取所述三维重建模型表面的焊缝路径点,对所述焊缝路径点进行拟合,得到焊缝的三维位置模型;基于所述焊缝的三维位置模型中焊缝路径点的方向向量,接近向量和法向量,确定焊缝的三维姿态模型;其中,所述方向向量为单位向量,用于表征焊缝的三维曲线在各采样点处的切线方向;所述接近向量为单位向量,用于表征焊缝的三维曲线在各采样点处与所述焊缝垂直的方向;所述法向量为单位向量,用于表征所述方向向量与所述接近向量做向量积运算在各采样点处得到的方向。
根据本发明提供的三维焊缝提取方法,所述根据所述目标焊接工件的对应点的三维坐标,对所述目标焊接工件进行三维重建,得到所述目标焊接工件的三维重建模型,包括:根据所述目标焊接工件的对应点的三维坐标,得到所述目标焊接工件的三维点云;根据所述目标焊接工件的三维点云进行三维建模,得到所述目标焊接工件的三维重建模型。
根据本发明提供的三维焊缝提取方法,所述根据所述摄像机采集到的图像上任意一点的绝对相位值、所述摄像机内外参数矩阵和所述投影仪内外参数矩阵确定所述目标焊接工件任一点的三维坐标,包括:
根据所述摄像机采集到的图像上任意一点的绝对相位值,得到该点在所述投影仪平面内对应的直线的坐标;根据所述该点在所述投影仪平面内对应的直线的坐标、所述摄像机内外参数矩阵和所述投影仪内外参数矩阵得到所述目标焊接工件的对应点的三维坐标。根据本发明提供的三维焊缝提取方法,所述提取所述三维重建模型表面的焊缝路径点,包括:根据焊接工件表面先验形状信息,对所述三维重建模型表面进行拟合,得到拟合的目标焊接工件表面;计算所述目标焊接工件表面的三维点云中每个点到所述拟合的目标焊接工件表面的最近距离;根据所述最近距离得到所述焊缝路径点。
根据本发明提供的三维焊缝提取方法,所述根据焊接工件表面先验形状信息,对所述三维重建模型表面进行拟合,得到拟合的目标焊接工件表面之前,还包括:对所述三维重建模型表面的三维点云进行滤波处理,得到降噪后的三维点云。
根据本发明提供的三维焊缝提取方法,所述对所述摄像机采集到的图像中的所述格雷编码图案进行解码,得到所述格雷编码对应的十进制数,包括:对所述摄像机采集到的图像中的所述格雷编码图案二值化处理,对二值化处理后的格雷编码图案进行解码,得到所述格雷编码对应的二进制码;将所述二进制码进行转换,得到所述格雷编码对应的十进制数。
第二方面,本发明还提供了一种三维焊缝提取系统,包括:投影仪,用于通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案;摄像机,用于通过摄像机采集投射有所述格雷编码图案的所述目标焊接工件表面的图像和投射有所述相移编码图案的所述目标焊接工件表面的图像;工业计算机,用于对所述摄像机采集到的图像中的所述格雷编码图案进行解码,得到所述格雷编码对应的十进制数,对所述摄像机采集到的图像中的所述相移编码图案进行解码,得到所述相移编码对应的相位主值,根据所述十进制数和所述相位主值,确定所述摄像机采集到的图像中任意一点的绝对相位值;根据所述摄像机采集到的图像中任意一点的绝对相位值、所述摄像机的内外参数矩阵和所述投影仪的内外参数矩阵,确定所述目标焊接工件的对应点的三维坐标;根据所述目标焊接工件的对应点的三维坐标,对所述目标焊接工件进行三维重建,得到所述目标焊接工件的三维重建模型;提取所述三维重建模型表面的焊缝路径点,对所述焊缝路径点进行拟合,得到焊缝的三维位置模型;基于所述焊缝的三维位置模型中焊缝路径点的方向向量,接近向量和法向量,确定焊缝的三维姿态模型;其中,所述方向向量为单位向量,用于表征焊缝的三维曲线在各采样点处的切线方向;所述接近向量为单位向量,用于表征焊缝的三维曲线在各采样点处与所述焊缝垂直的方向;所述法向量为单位向量,用于表征所述方向向量与所述接近向量做向量积运算在各采样点处得到的方向。
第三方面,本发明还提供了一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述程序时实现如第一方面所述的三维焊缝提取方法的步骤。
第四方面,本发明还提供了一种非暂态计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面所述的三维焊缝提取方法的步骤。
第五方面,本发明还提供了一种计算机程序产品,其上存储有可执行指令,该指令被处理器执行时使处理器实现如第一方面所述的三维焊缝提取方法的步骤。
本发明提供的一种三维焊缝提取方法及系统,通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案;通过摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像;对摄像机采集到的图像中的格雷编码图案进行解码,得到格雷编码对应的十进制数,对摄像机采集到的图像中的相移编码图案进行解码,得到相移编码对应的相位主值,根据十进制数和相位主值,确定摄像机采集到的图像中任意一点的绝对相位值;根据摄像机采集到的图像中任意一点的绝对相位值、摄像机的内外参数矩阵和投影仪的内外参数矩阵,确定目标焊接工件的对应点的三维坐标;根据目标焊接工件的对应点的三维坐标,对目标焊接工件进行三维重建,得到目标焊接工件的三维重建模型;提取三维重建模型表面的焊缝路径点,对焊缝路径点进行拟合,得到焊缝的三维位置模型;基于焊缝的三维位置模型中焊缝路径点的方向向量,接近向量和法向量,确定焊缝的三维姿态模型;其中,方向向量为单位向量,用于表征焊缝的三维曲线在各采样点处的切线方向;接近向量为单位向量,用于表征焊缝的三维曲线在各采样点处与焊缝垂直的方向;法向量为单位向量,用于表征方向向量与接近向量做向量积运算在各采样点处得到的方向。通过对目标焊接工件进行三维重建,根据目标焊接工件的三维重建模型得到三维焊缝的位置模型和三维焊缝的姿态模型,可以实现对三维焊缝的精确提取。
附图说明
图1为本发明提供的一种三维焊缝结构示意图;
图2是本发明提供的一种三维焊缝提取方法实施例的流程示意图;
图3(a)是本发明提供的格雷编码示意图;
图3(b)是本发明提供的相移编码示意图;
图4(a)是本发明提供的摄像机采集投射有格雷编码图案的目标焊接工件表面的图像;
图4(b)是本发明提供的摄像机采集投射有相移编码图案的目标焊接工件表面的图像;
图5是本发明提供的相位主值图;
图6是本发明提供的相位展开原理图;
图7(a)是本发明提供的搭接焊缝的示意图;
图7(b)是本发明提供的角接焊缝的示意图;
图8 是本发明提供的单位向量
Figure 60680DEST_PATH_IMAGE001
的计算原理图;
图9是本发明提供的三维焊缝位姿模型示意图;
图10是本发明提供的P点在不同坐标系下的相对位置图;
图11是本发明提供的一种三维焊缝提取系统实施例的结构示意图;
图12 是本发明提供的一种电子设备的实体结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图2为本发明提供的一种三维焊缝提取方法实施例的流程示意图。如图2所示,该三维焊缝提取方法包括以下步骤:
S201,通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案;通过摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像。
在步骤S201中,投影仪首先向目标焊接工件表面投射n幅格雷码图案,将测量视野划分为2n个条纹区域,每个条纹区域具有相同的格雷编码值。为了提高格雷编码的鲁棒性,对每个格雷编码图案增加了一个逆变换。然后投影仪向目标焊接工件表面投射标准的N步相移编码图案,保证格雷码编码图案的最小周期为相移编码图案周期的4倍。格雷编码图案和相移编码图案分别如图3(a)和图3(b)所示。其中,相移编码图案是正弦光栅图像,是根据公式1生成的。
Figure 335672DEST_PATH_IMAGE002
(公式1)
其中,
Figure 540389DEST_PATH_IMAGE003
为第
Figure 926239DEST_PATH_IMAGE004
张图像中像素点
Figure 267222DEST_PATH_IMAGE005
处的灰度值;
Figure 713116DEST_PATH_IMAGE006
为所生成图像的宽度 等于投影仪分辨率的宽度;
Figure 670708DEST_PATH_IMAGE007
表示生成的正弦光栅的幅度;
Figure 597600DEST_PATH_IMAGE008
表示第
Figure 58668DEST_PATH_IMAGE004
张图像的相位;
Figure 675463DEST_PATH_IMAGE009
表示正弦光栅条纹的周期。在一组相移光栅图像中,只有相位
Figure 854772DEST_PATH_IMAGE008
呈规律性变化。本实施例 中,可以采用四步相移法生成正弦光栅图像,四步相移法表示在这一组光栅中,相位
Figure 316846DEST_PATH_IMAGE008
移 动四次,共生成四幅正弦光栅图像。
摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像分别如图4(a)和图4(b)所示。
S202,对摄像机采集到的图像中的格雷编码图案进行解码,得到格雷编码对应的十进制数,对摄像机采集到的图像中的相移编码图案进行解码,得到相移编码对应的相位主值,根据十进制数和相位主值,确定摄像机采集到的图像中任意一点的绝对相位值。
在步骤S202中,格雷编码与二进制编码一样都只用1和0组成。在一组二进制数的编码中,若任意两个相邻的代码只有一位二进制数不同,则称这种编码为格雷编码。并且在格雷码中,最大数与最小数之间也仅有一位数不同,即“首尾相连”。因此,格雷码可以与二进制码和十进制数相互转换。
相移法图像解码主要是通过采集多帧有一定相移的条纹图案来计算相位主值,用于细分具有相同格雷码值的区域。投影仪投射出的正弦光栅条纹投射到目标焊接工件表面后,摄像机采集到的投射有相移编码的目标焊接工件表面每一个像素点处的灰度值如公式2所示:
Figure 898000DEST_PATH_IMAGE010
(公式2)
其中,
Figure 420117DEST_PATH_IMAGE011
为采集到的第
Figure 86722DEST_PATH_IMAGE012
张图像中像素点
Figure 355417DEST_PATH_IMAGE013
处的灰度值,
Figure 791077DEST_PATH_IMAGE014
Figure 421779DEST_PATH_IMAGE012
张图像的 相位,
Figure 824947DEST_PATH_IMAGE015
为经被测物体高度调制后的相位值。对相移编码图案进行解码,得到的相位 主值图如图5所示。
由于函数中
Figure 645135DEST_PATH_IMAGE016
Figure 184570DEST_PATH_IMAGE017
Figure 64801DEST_PATH_IMAGE018
三个为未知数,因此通过至少三幅光栅条 纹可完成求解,利用四步相移法求得相位主值,相位主值的求解公式如公式3所示:
Figure 692616DEST_PATH_IMAGE019
(公式3)
由于
Figure 50916DEST_PATH_IMAGE020
被包裹在
Figure 726748DEST_PATH_IMAGE021
之间,在不同周期中相位主值都相同,需要对包裹的 相位主值进行相位展开得到绝对相位值。格雷编码与相移编码相位展开原理如图6所示,使 用每一区域内的格雷编码值去确定不同周期的绝对相位值。利用相位展开公式可以计算绝 对相位值,相位展开公式可以表示为:
Figure 495990DEST_PATH_IMAGE022
(公式4)
其中,
Figure 624483DEST_PATH_IMAGE023
为绝对相位值,
Figure 35742DEST_PATH_IMAGE024
为对应像素的格雷码值,
Figure 300501DEST_PATH_IMAGE025
为相对相 位值即相位主值。
S203,根据摄像机采集到的图像中任意一点的绝对相位值、摄像机的内外参数矩阵和投影仪的内外参数矩阵,确定目标焊接工件的对应点的三维坐标;根据目标焊接工件的对应点的三维坐标,对目标焊接工件进行三维重建,得到目标焊接工件的三维重建模型。
在步骤S203中,根据摄像机采集到的目标焊接工件表面的图像上任意一点的绝对相位值可以得到在目标焊接工件表面任意一点的像素坐标,根据摄像机内外参数矩阵和投影仪内外参数矩阵可以对该点在目标焊接工件表面的像素坐标进行坐标变换,得到该点在世界坐标系下的坐标,即三维坐标。根据得到的目标焊接工件对应点的三维坐标可以对目标焊接工件进行三维重建,得到目标焊接工件的三维重建模型。
S204,提取三维重建模型表面的焊缝路径点,对焊缝路径点进行拟合,得到焊缝的三维位置模型。
在步骤S204中,可以根据焊缝先验形状信息预设点云提取算子,根据预设的点云提取算子提取三维重建模型表面的焊缝路径点。其中,焊缝先验形状信息可以包括V型焊缝、搭接焊缝和角接焊缝。V型焊缝、搭接焊缝和角接焊缝分别如图1、图7(a)和图7(b)所示。
为了保证拟合得到的焊缝曲线精度和平滑性,可以采用平滑三次B样条函数对焊 缝路径点进行最小二乘拟合。即给定
Figure 771803DEST_PATH_IMAGE026
个控制点
Figure 122012DEST_PATH_IMAGE027
Figure 62594DEST_PATH_IMAGE028
个节点
Figure 447439DEST_PATH_IMAGE029
,由这些控制点和节点可以定义三次B样条函数为:
Figure 89641DEST_PATH_IMAGE030
( 公式5)
其中,
Figure 927147DEST_PATH_IMAGE031
是三次B样条的基函数,
Figure 945788DEST_PATH_IMAGE032
,
Figure 919560DEST_PATH_IMAGE033
为样条函数的次数,三次B 样条函数的控制点可以通过优化目标函数得到,目标函数表示为:
Figure 732664DEST_PATH_IMAGE034
(公式6)
其中,目标函数包括两部分,第一部分是接近函数用来度量原始数据和拟合数据 之间的接近程度,第二部分是正则项,用于惩罚函数的曲率,保证拟合曲线的光滑性,正则 项系数𝜆用于建立二者之间的权衡,通过优化目标函数使其值最小,可求得三次平滑B样条 拟合函数控制点
Figure 57466DEST_PATH_IMAGE035
的最优解。可以利用拉格朗日优化方法,对目标函数所有 变量求偏导,这样即可将最小化目标函数的问题转换为求解方程组的问题,然后利用SVD分 解等方程组求解方法获得三次平滑B样条函数控制点的最优解。当然,也可以通过迭代式的 优化方法梯度下降法或者启发式优化方法如遗传算法、蚁群算法以及粒子群算法等求取最 优解。求得三次平滑B样条拟合函数控制点之后,就可以得到三次平滑B样条拟合函数,即空 间焊缝的位置模型。
S205,基于所述焊缝的三维位置模型中焊缝路径点的方向向量,接近向量和法向量,确定焊缝的三维姿态模型;其中,方向向量为单位向量,用于表征焊缝的三维曲线在各采样点处的切线方向;接近向量为单位向量,用于表征焊缝的三维曲线在各采样点处与所述焊缝垂直的方向;法向量为单位向量,用于表征方向向量与接近向量做向量积运算在各采样点处得到的方向。
在步骤S205中,单位方向向量,单位接近向量和单位法向量分别如公式7、公式8和公式10所示。
Figure 85990DEST_PATH_IMAGE036
(7)
Figure 897957DEST_PATH_IMAGE037
(8)
单位向量
Figure 632695DEST_PATH_IMAGE038
的计算原理如图8所示,向量 v1 为由特征点 P1与P2确定的边缘 向量;向量 v2为由特征点 P3和P2确定的边缘向量。单位向量
Figure 428481DEST_PATH_IMAGE038
为焊缝路径点在第
Figure 539657DEST_PATH_IMAGE039
个 采样点处向量
Figure 737289DEST_PATH_IMAGE040
与向量
Figure 908507DEST_PATH_IMAGE041
平分线的单位向量,其表达式为:
Figure 942322DEST_PATH_IMAGE042
(9)
单位法向量的计算原理根据右手定则,单位法向向量由单位方向向量与单位接近向量做向量积运算得到,计算公式如下:
Figure 578227DEST_PATH_IMAGE043
(10)
三维焊缝姿态模型是在三维焊缝位置模型的焊缝路径点上建立的,将二者融合可以得到三维焊缝位姿模型。三维焊缝的位姿模型如图9所示,其中曲线代表对焊缝路径点进行拟合的得到的三维焊缝位置模型,各单位向量代表根据焊缝路径点确定的三维焊缝姿态模型。
根据本发明实施例提供的三维焊缝提取方法,通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案;通过摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像;对摄像机采集到的图像中的格雷编码图案进行解码,得到格雷编码对应的十进制数,对摄像机采集到的图像中的相移编码图案进行解码,得到相移编码对应的相位主值,根据十进制数和相位主值,确定摄像机采集到的图像中任意一点的绝对相位值;根据摄像机采集到的图像中任意一点的绝对相位值、摄像机的内外参数矩阵和投影仪的内外参数矩阵,确定目标焊接工件的对应点的三维坐标;根据目标焊接工件的对应点的三维坐标,对目标焊接工件进行三维重建,得到目标焊接工件的三维重建模型;提取三维重建模型表面的焊缝路径点,对焊缝路径点进行拟合,得到焊缝的三维位置模型;基于焊缝的三维位置模型中焊缝路径点的方向向量,接近向量和法向量,确定焊缝的三维姿态模型;其中,方向向量为单位向量,用于表征焊缝的三维曲线在各采样点处的切线方向;接近向量为单位向量,用于表征焊缝的三维曲线在各采样点处与焊缝垂直的方向;法向量为单位向量,用于表征方向向量与接近向量做向量积运算在各采样点处得到的方向。通过对目标焊接工件进行三维重建,根据目标焊接工件的三维重建模型得到三维焊缝的位置模型和三维焊缝的姿态模型,可以实现对三维焊缝的精确提取。
在一些可选的实施例中,根据目标焊接工件的对应点的三维坐标,对目标焊接工件进行三维重建,得到目标焊接工件的三维重建模型,可以包括:根据目标焊接工件的对应点的三维坐标,得到目标焊接工件的三维点云;根据目标焊接工件的三维点云进行三维建模,得到目标焊接工件的三维重建模型。
点云,也称三维点云,是指在逆向工程中通过测量仪器得到的产品外观表面的点数据集合,可以根据目标焊接工件对应点的三维坐标,得到目标焊接工件对应的三维点云。利用三维点云得到三维重建模型可以包括:点云配准、数据融合以及表面生成等过程。
在一些可选的实施例中,根据摄像机采集到的图像上任意一点的绝对相位值、摄像机内外参数矩阵和投影仪内外参数矩阵确定目标焊接工件任一点的三维坐标,可以包括:根据摄像机采集到的图像上任意一点的绝对相位值,得到该点在投影仪平面内对应的直线的坐标;根据该点在投影仪平面内对应的直线的坐标、摄像机内外参数矩阵和投影仪内外参数矩阵得到目标焊接工件的对应点的三维坐标。
假设目标焊接工件表面上的一点P在世界坐标系下坐标为
Figure 646677DEST_PATH_IMAGE044
,点P在摄 像机采集到的目标焊接工件表面的图像上的绝对相位值为
Figure 972485DEST_PATH_IMAGE045
,点P在摄像机采集到 的目标焊接工件表面的图像上像素坐标为
Figure 493597DEST_PATH_IMAGE046
,则点P在摄像机采集到的目标焊接工件 表面的图像上对应该点在投影仪平面内目标焊接工件表面对应的直线的坐标为:
Figure 195842DEST_PATH_IMAGE047
(公式11)
点P在世界坐标系、点P在摄像机采集到的目标焊接工件表面的图像上上以及点P在投影仪平面内目标焊接工件表面对应的直线的关系如图10所示。其中,点p'为点P在摄像机采集到的目标焊接工件表面的图像上的对应点,Up为点P在投影仪平面内目标焊接工件表面对应的直线。
然后结合立体标定结果,即可求得空间中点P的三维坐标:
Figure 615508DEST_PATH_IMAGE049
(公式12)
其中:
Figure 623915DEST_PATH_IMAGE050
Figure 867203DEST_PATH_IMAGE051
Figure 644666DEST_PATH_IMAGE052
是已知的,
Figure 577855DEST_PATH_IMAGE053
为摄像机内外参数矩阵通过标定得到,
Figure 542400DEST_PATH_IMAGE054
为投影仪内外参数矩阵通过标定得到。因此,共有六个未知变量
Figure 852028DEST_PATH_IMAGE055
,共有六个线性无关的方程,目标焊接工件上点
Figure 483998DEST_PATH_IMAGE056
的三维坐标可以唯 一确定。令
Figure 322509DEST_PATH_IMAGE057
(公式13)
Figure 305509DEST_PATH_IMAGE058
(公式14)
则目标焊接工件上点P的三维坐标由下式计算得到:
Figure 714817DEST_PATH_IMAGE059
(公式15)
在一些可选的实施例中,提取三维重建模型表面的焊缝路径点,可以包括:根据焊接工件表面先验形状信息,对三维重建模型表面进行拟合,得到拟合的目标焊接工件表面;计算所述目标焊接工件表面的三维点云中每个点到所述拟合的目标焊接工件表面的最近距离;根据最近距离得到焊缝路径点。
其中,焊接工件表面先验形状信息可以包括曲面和平面。如果三维重建模型表面是平面,确定该平面对应的平面方程,利用RANSAC算法对该平面方程进行拟合,建立该三维重建模型表面的数学模型;类似的,如果三维重建模型表面是曲面,确定该曲面对应的曲面方程,利用RANSAC算法对该曲面方程进行拟合,建立该三维重建模型表面的数学模型。三维重建模型表面的数学模型也就是得到的拟合的目标焊接工件表面。计算目标焊接工件表面的三维点云中每个点到拟合的目标焊接工件表面的最近距离,如果该点的最近距离大于预设的阈值,那么认为该点是焊缝路径点。
在一些可选的实施例中,根据焊接工件表面先验形状信息,对三维重建模型表面进行拟合,得到拟合的目标焊接工件表面之前,还包括:对三维重建模型表面的三维点云进行滤波处理,得到降噪后的三维点云。
其中,可以采用双边滤波算法对三维点云进行滤波,双边滤波是一种非线性滤波器,它可以达到保持边缘和降噪平滑的效果。双边滤波算法可以通过取邻近采样点的加权平均来修正当前采样点的位置,达到降噪的效果;同时该方法也会有选择地剔除部分与当前采样点差异过大的相邻采样点,从而达到保持原特征的目的。
在一些可选的实施例中,对摄像机采集到的图像中的格雷编码图案进行解码,得到格雷编码对应的十进制数,可以包括:对格雷编码图案进行二值化处理,对二值化处理后的格雷编码图案进行解码,得到格雷编码对应的二进制码;将二进制码进行转换,得到格雷编码对应的十进制数。其中,二值化处理就是将图像上的像素点的灰度值设置为0或255,也就是将整个图像呈现出明显的只有黑和白的视觉效果。对经过二值化处理的格雷编码利用公式16进行解码。
Figure 466873DEST_PATH_IMAGE060
(公式16)
其中,
Figure 741865DEST_PATH_IMAGE061
表示二进制码,
Figure 946581DEST_PATH_IMAGE062
表示格雷码,
Figure 66853DEST_PATH_IMAGE063
表示对应码字的位数。
图11是本发明提供的一种三维焊缝提取系统实施例的结构示意图。如图11所示,该三维焊缝提取系统,包括:
投影仪,用于通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案;
摄像机,用于通过摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像;
工业计算机,用于对摄像机采集到的图像中的格雷编码图案进行解码,得到格雷编码对应的十进制数,对摄像机采集到的图像中的相移编码图案进行解码,得到相移编码对应的相位主值,根据十进制数和相位主值,确定摄像机采集到的图像中任意一点的绝对相位值;根据摄像机采集到的图像中任意一点的绝对相位值、摄像机的内外参数矩阵和投影仪的内外参数矩阵,确定目标焊接工件的对应点的三维坐标;根据目标焊接工件的对应点的三维坐标,对目标焊接工件进行三维重建,得到目标焊接工件的三维重建模型;提取三维重建模型表面的焊缝路径点,对焊缝路径点进行拟合,得到焊缝的三维位置模型;基于焊缝的三维位置模型中焊缝路径点的方向向量,接近向量和法向量,确定焊缝的三维姿态模型;其中,方向向量为单位向量,用于表征焊缝的三维曲线在各采样点处的切线方向;接近向量为单位向量,用于表征焊缝的三维曲线在各采样点处与所述焊缝垂直的方向;法向量为单位向量,用于表征所述方向向量与接近向量做向量积运算在各采样点处得到的方向。
可选地,工业计算机,还用于根据目标焊接工件的对应点的三维坐标,得到目标焊接工件的三维点云;根据目标焊接工件的三维点云进行三维建模,得到目标焊接工件的三维重建模型。
可选地,工业计算机,还用于根据摄像机采集到的图像上任意一点的绝对相位值,得到该点在投影仪平面内对应的直线的坐标;根据该点在投影仪平面内对应的直线的坐标、摄像机内外参数矩阵和投影仪内外参数矩阵得到目标焊接工件的对应点的三维坐标。
可选地,工业计算机,还用于根据焊接工件表面先验形状信息,对三维重建模型表面进行拟合,得到拟合的目标焊接工件表面;计算目标焊接工件表面的三维点云中每个点到拟合的目标焊接工件表面的最近距离;根据最近距离得到焊缝路径点。
可选地,工业计算机,还用于对三维重建模型表面的三维点云进行滤波处理,得到降噪后的三维点云。
可选地,工业计算机,还用于对摄像机采集到的图像中的格雷编码图案进行二值化处理,对二值化处理后的格雷编码图案进行解码,得到格雷编码对应的二进制码;将二进制码进行转换,得到格雷编码对应的十进制数。
图12是本发明提供的一种电子设备的实体结构示意图,如图12所示,该电子设备可以包括:处理器(processor)1201、通信接口(Communications Interface)1202、存储器(memory)1203和通信总线1204,其中,处理器1201,通信接口1202,存储器1203通过通信总线1204完成相互间的通信。处理器1201可以调用存储器1203中的逻辑指令,以执行三维焊缝提取方法,该方法包括:
通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案;通过摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像;对摄像机采集到的图像中的格雷编码图案进行解码,得到格雷编码对应的十进制数,对摄像机采集到的图像中的相移编码图案进行解码,得到相移编码对应的相位主值,根据十进制数和相位主值,确定摄像机采集到的图像中任意一点的绝对相位值;根据摄像机采集到的图像中任意一点的绝对相位值、摄像机的内外参数矩阵和投影仪的内外参数矩阵,确定目标焊接工件的对应点的三维坐标;根据目标焊接工件的对应点的三维坐标,对目标焊接工件进行三维重建,得到目标焊接工件的三维重建模型;提取三维重建模型表面的焊缝路径点,对焊缝路径点进行拟合,得到焊缝的三维位置模型;基于焊缝的三维位置模型中焊缝路径点的方向向量,接近向量和法向量,确定焊缝的三维姿态模型;其中,方向向量为单位向量,用于表征焊缝的三维曲线在各采样点处的切线方向;接近向量为单位向量,用于表征焊缝的三维曲线在各采样点处与焊缝垂直的方向;法向量为单位向量,用于表征方向向量与接近向量做向量积运算在各采样点处得到的方向。
此外,上述的存储器1203中的逻辑指令可以通过软件功能模块的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面,本发明还提供一种计算机程序产品,计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序,计算机程序包括程序指令,当程序指令被计算机执行时,计算机能够执行上述各方法所提供的三维焊缝提取方法,该方法包括:
通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案;通过摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像;对摄像机采集到的图像中的格雷编码图案进行解码,得到格雷编码对应的十进制数,对摄像机采集到的图像中的相移编码图案进行解码,得到相移编码对应的相位主值,根据十进制数和相位主值,确定摄像机采集到的图像中任意一点的绝对相位值;根据摄像机采集到的图像中任意一点的绝对相位值、摄像机的内外参数矩阵和投影仪的内外参数矩阵,确定目标焊接工件的对应点的三维坐标;根据目标焊接工件的对应点的三维坐标,对目标焊接工件进行三维重建,得到目标焊接工件的三维重建模型;提取三维重建模型表面的焊缝路径点,对焊缝路径点进行拟合,得到焊缝的三维位置模型;基于焊缝的三维位置模型中焊缝路径点的方向向量,接近向量和法向量,确定焊缝的三维姿态模型;其中,方向向量为单位向量,用于表征焊缝的三维曲线在各采样点处的切线方向;接近向量为单位向量,用于表征焊缝的三维曲线在各采样点处与焊缝垂直的方向;法向量为单位向量,用于表征方向向量与接近向量做向量积运算在各采样点处得到的方向。
又一方面,本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以执行上述各方法所提供的三维焊缝提取方法,该方法包括:
通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案;通过摄像机采集投射有格雷编码图案的目标焊接工件表面的图像和投射有相移编码图案的目标焊接工件表面的图像;对摄像机采集到的图像中的格雷编码图案进行解码,得到格雷编码对应的十进制数,对摄像机采集到的图像中的相移编码图案进行解码,得到相移编码对应的相位主值,根据十进制数和相位主值,确定摄像机采集到的图像中任意一点的绝对相位值;根据摄像机采集到的图像中任意一点的绝对相位值、摄像机的内外参数矩阵和投影仪的内外参数矩阵,确定目标焊接工件的对应点的三维坐标;根据目标焊接工件的对应点的三维坐标,对目标焊接工件进行三维重建,得到目标焊接工件的三维重建模型;提取三维重建模型表面的焊缝路径点,对焊缝路径点进行拟合,得到焊缝的三维位置模型;基于焊缝的三维位置模型中焊缝路径点的方向向量,接近向量和法向量,确定焊缝的三维姿态模型;其中,方向向量为单位向量,用于表征焊缝的三维曲线在各采样点处的切线方向;接近向量为单位向量,用于表征焊缝的三维曲线在各采样点处与焊缝垂直的方向;法向量为单位向量,用于表征方向向量与接近向量做向量积运算在各采样点处得到的方向。
以上所描述的系统实施例仅仅是示意性的,其中作为分离部件说明的模块可以是或者也可以不是物理上分开的,作为模块显示的部件可以是或者也可以不是物理模块,即可以位于一个地方,或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (9)

1.一种三维焊缝提取方法,其特征在于,包括:
通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案;通过摄像机采集投射有所述格雷编码图案的所述目标焊接工件表面的图像和投射有所述相移编码图案的所述目标焊接工件表面的图像;
对所述摄像机采集到的图像中的所述格雷编码图案进行解码,得到所述格雷编码对应的十进制数,对所述摄像机采集到的图像中的所述相移编码图案进行解码,得到所述相移编码对应的相位主值,根据所述十进制数和所述相位主值,确定所述摄像机采集到的图像中任意一点的绝对相位值;
根据所述摄像机采集到的图像中任意一点的绝对相位值、所述摄像机的内外参数矩阵和所述投影仪的内外参数矩阵,确定所述目标焊接工件的对应点的三维坐标;根据所述目标焊接工件的对应点的三维坐标,对所述目标焊接工件进行三维重建,得到所述目标焊接工件的三维重建模型;
提取所述三维重建模型表面的焊缝路径点,对所述焊缝路径点进行拟合,得到焊缝的三维位置模型;
基于所述焊缝的三维位置模型中焊缝路径点的方向向量,接近向量和法向量,确定焊缝的三维姿态模型;其中,所述方向向量为单位向量,用于表征焊缝的三维曲线在各采样点处的切线方向;所述接近向量为单位向量,用于表征焊缝的三维曲线在各采样点处与所述焊缝垂直的方向;所述法向量为单位向量,用于表征所述方向向量与所述接近向量做向量积运算在各采样点处得到的方向。
2.根据权利要求1所述的三维焊缝提取方法,其特征在于,所述根据所述目标焊接工件的对应点的三维坐标,对所述目标焊接工件进行三维重建,得到所述目标焊接工件的三维重建模型,包括:
根据所述目标焊接工件的对应点的三维坐标,得到所述目标焊接工件的三维点云;
根据所述目标焊接工件的三维点云进行三维建模,得到所述目标焊接工件的三维重建模型。
3.根据权利要求2所述的三维焊缝提取方法,其特征在于,所述根据所述摄像机采集到的图像上任意一点的绝对相位值、所述摄像机内外参数矩阵和所述投影仪内外参数矩阵确定所述目标焊接工件任一点的三维坐标,包括:
根据所述摄像机采集到的图像上任意一点的绝对相位值,得到该点在所述投影仪平面内对应的直线的坐标;
根据所述该点在所述投影仪平面内对应的直线的坐标、所述摄像机内外参数矩阵和所述投影仪内外参数矩阵得到所述目标焊接工件的对应点的三维坐标。
4.根据权利要求1所述的三维焊缝提取方法,其特征在于,所述提取所述三维重建模型表面的焊缝路径点,包括:
根据焊接工件表面先验形状信息,对所述三维重建模型表面进行拟合,得到拟合的目标焊接工件表面;
计算所述目标焊接工件表面的三维点云中每个点到所述拟合的目标焊接工件表面的最近距离;
根据所述最近距离得到所述焊缝路径点。
5.根据权利要求4所述的三维焊缝提取方法,其特征在于,所述根据焊接工件表面先验形状信息,对所述三维重建模型表面进行拟合,得到拟合的目标焊接工件表面之前,还包括:
对所述三维重建模型表面的三维点云进行滤波处理,得到降噪后的三维点云。
6.根据权利要求1所述的三维焊缝提取方法,其特征在于,所述对所述摄像机采集到的图像中的所述格雷编码图案进行解码,得到所述格雷编码对应的十进制数,包括:
对所述摄像机采集到的图像中的所述格雷编码图案进行二值化处理,对二值化处理后的格雷编码图案进行解码,得到所述格雷编码对应的二进制码;
将所述二进制码进行转换,得到所述格雷编码对应的十进制数。
7.一种三维焊缝提取系统,其特征在于,包括:
投影仪,用于通过投影仪向目标焊接工件表面分别投射格雷编码图案和相移编码图案;
摄像机,用于通过摄像机采集投射有所述格雷编码图案的所述目标焊接工件表面的图像和投射有所述相移编码图案的所述目标焊接工件表面的图像;
工业计算机,用于对所述摄像机采集到的图像中的所述格雷编码图案进行解码,得到所述格雷编码对应的十进制数,对所述摄像机采集到的图像中的所述相移编码图案进行解码,得到所述相移编码对应的相位主值,根据所述十进制数和所述相位主值,确定所述摄像机采集到的图像中任意一点的绝对相位值;根据所述摄像机采集到的图像中任意一点的绝对相位值、所述摄像机的内外参数矩阵和所述投影仪的内外参数矩阵,确定所述目标焊接工件的对应点的三维坐标;根据所述目标焊接工件的对应点的三维坐标,对所述目标焊接工件进行三维重建,得到所述目标焊接工件的三维重建模型;提取所述三维重建模型表面的焊缝路径点,对所述焊缝路径点进行拟合,得到焊缝的三维位置模型;基于所述焊缝的三维位置模型中焊缝路径点的方向向量,接近向量和法向量,确定焊缝的三维姿态模型;其中,所述方向向量为单位向量,用于表征焊缝的三维曲线在各采样点处的切线方向;所述接近向量为单位向量,用于表征焊缝的三维曲线在各采样点处与所述焊缝垂直的方向;所述法向量为单位向量,用于表征所述方向向量与所述接近向量做向量积运算在各采样点处得到的方向。
8.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1~6任一项所述的三维焊缝提取方法的步骤。
9.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1~6任一项所述的三维焊缝提取方法的步骤。
CN202111207176.0A 2021-10-18 2021-10-18 一种三维焊缝提取方法及系统 Active CN113643372B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111207176.0A CN113643372B (zh) 2021-10-18 2021-10-18 一种三维焊缝提取方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111207176.0A CN113643372B (zh) 2021-10-18 2021-10-18 一种三维焊缝提取方法及系统

Publications (2)

Publication Number Publication Date
CN113643372A CN113643372A (zh) 2021-11-12
CN113643372B true CN113643372B (zh) 2022-03-04

Family

ID=78427221

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111207176.0A Active CN113643372B (zh) 2021-10-18 2021-10-18 一种三维焊缝提取方法及系统

Country Status (1)

Country Link
CN (1) CN113643372B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116408575B (zh) * 2021-12-31 2024-06-04 广东美的白色家电技术创新中心有限公司 局部扫描、消除工件反光干扰的方法、装置和系统
CN114119611B (zh) * 2022-01-25 2022-04-01 季华实验室 焊缝参数识别方法、装置、电子设备及存储介质
CN114972626A (zh) * 2022-04-07 2022-08-30 福州大学 一种基于编码结构光双目视觉的焊缝三维重建系统及方法
CN114952102A (zh) * 2022-06-10 2022-08-30 上海汽车集团股份有限公司 一种植钉焊接防错机构以及植钉焊接防错方法
WO2024113127A1 (zh) * 2022-11-29 2024-06-06 电子科技大学 一种基于结构光和双目视觉的三维重建方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2132608A1 (de) * 2007-02-19 2009-12-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Verfahren und vorrichtung zur steuerung von robotern zum schweissen von werkstücken
CN107912061A (zh) * 2015-03-06 2018-04-13 伊利诺斯工具制品有限公司 用于焊接的传感器辅助头戴式显示器
CN108555423A (zh) * 2018-01-16 2018-09-21 中国计量大学 三维焊缝自动识别装置及方法
CN112013792A (zh) * 2020-10-19 2020-12-01 南京知谱光电科技有限公司 一种复杂大构件机器人面扫描三维重建方法
CN113379902A (zh) * 2021-06-30 2021-09-10 哈尔滨理工大学 一种基于激光扫描的焊缝形状的特征提取与三维重建方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2132608A1 (de) * 2007-02-19 2009-12-16 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Verfahren und vorrichtung zur steuerung von robotern zum schweissen von werkstücken
CN107912061A (zh) * 2015-03-06 2018-04-13 伊利诺斯工具制品有限公司 用于焊接的传感器辅助头戴式显示器
CN108555423A (zh) * 2018-01-16 2018-09-21 中国计量大学 三维焊缝自动识别装置及方法
CN112013792A (zh) * 2020-10-19 2020-12-01 南京知谱光电科技有限公司 一种复杂大构件机器人面扫描三维重建方法
CN113379902A (zh) * 2021-06-30 2021-09-10 哈尔滨理工大学 一种基于激光扫描的焊缝形状的特征提取与三维重建方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于视觉传感的焊缝跟踪技术研究现状和发展趋势;范俊峰 等;《热加工工艺》;20170331;第46卷(第5期);6-10 *

Also Published As

Publication number Publication date
CN113643372A (zh) 2021-11-12

Similar Documents

Publication Publication Date Title
CN113643372B (zh) 一种三维焊缝提取方法及系统
CN110363858B (zh) 一种三维人脸重建方法及系统
Sagawa et al. Grid-based active stereo with single-colored wave pattern for dense one-shot 3D scan
JP6426968B2 (ja) 情報処理装置およびその方法
CN112308963B (zh) 一种无感三维人脸重建方法及采集重建系统
CN109945802B (zh) 一种结构光三维测量方法
Song et al. DOE-based structured-light method for accurate 3D sensing
CN113920060A (zh) 焊接机器人自主作业方法、装置、电子设备及存储介质
CN111640158A (zh) 基于对应掩模的端到端的摄像头与激光雷达外参标定方法
CN114526692B (zh) 一种基于离焦度解包裹的结构光三维测量方法及装置
CN111275776A (zh) 投影增强现实方法、装置和电子设备
CN113362457A (zh) 一种基于散斑结构光的立体视觉测量方法及系统
CN109986201A (zh) 焊缝的跟踪检测方法、装置、存储介质以及激光焊接设备
Tran et al. A Structured Light RGB‐D Camera System for Accurate Depth Measurement
CN113587852A (zh) 一种基于改进三步相移的彩色条纹投影三维测量方法
Jaiswal et al. 3D object modeling with a Kinect camera
KR100837776B1 (ko) 2차원 영상을 3차원 영상으로 변환하는 영상 변환 장치 및그 방법
CN112802084A (zh) 基于深度学习的三维形貌测量方法、系统和存储介质
CN116753863A (zh) 三维测量的方法、装置、电子设备及存储介质
CN115830217A (zh) 待建模物体三维模型点云的生成方法、装置和系统
CN115127481A (zh) 条纹投影3d测量方法、终端设备及计算机可读存储介质
Sioma Filtering algorithms for 3D range image analysis
Wijenayake et al. An error correcting 3D scanning technique using dual pseudorandom arrays
CN113989428A (zh) 一种基于深度视觉的冶金库区全局三维重建方法及装置
Sheng et al. Research on point-cloud collection and 3D model reconstruction

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant