CN110555385A - 一种基于变步长曲率滤波的焊缝特征点求取方法 - Google Patents

Abstract

本发明提供一种基于变步长曲率滤波的焊缝特征点求取方法，包括采集焊缝图像；对采集的焊缝图像进行膨胀和腐蚀操作，并将膨胀和腐蚀后的二值图像转化为灰度图像；构造曲率求取模型，并利用构建出的曲率求取模型来对灰度图像进行边缘提取；对提取的灰度图像的边缘进行骨架提取，获得激光条纹线图像；在激光条纹线图像上，采用变步长搜索查找到焊缝的近特征点，并依据近特征点求取出焊缝特征点的坐标。本发明方法通过结合图形学和立体几何的方法，从图像的曲率入手，优化获取激光条纹线的轮廓信息，并采用变步长搜索法来寻找焊缝的近特征点，可实现精确获取焊缝的位置。

Description

一种基于变步长曲率滤波的焊缝特征点求取方法

技术领域

本发明涉及一种焊缝特征点求取方法，特别涉及一种基于变步长曲率滤波的焊缝特征点求取方法。

背景技术

目前，针对焊缝特征点的求取方法主要是采用基于激光条纹在焊缝处形成V型槽的图像，并根据V型槽的图像进行特征点求取。但是，现有技术对如何在V型槽的图像中高精度寻找焊缝点的位置存在较大的难度。目前常规的方法大多是采用直线拟合的方法，将交叉点作为最终的角点，而这样求取的角点存在较大的误差，并且会影响后续机器人焊接过程中路径的规划问题。

发明内容

本发明要解决的技术问题，在于提供一种基于变步长曲率滤波的焊缝特征点求取方法，通过该方法可实现精确获取焊缝的位置。

本发明是这样实现的：一种基于变步长曲率滤波的焊缝特征点求取方法，所述方法包括如下步骤：

步骤S1、使用拍摄设备采集焊缝图像；

步骤S2、对采集的焊缝图像进行膨胀和腐蚀操作，并将膨胀和腐蚀后的二值图像转化为灰度图像；

步骤S3、构造曲率求取模型，并利用构建出的曲率求取模型来对灰度图像进行边缘提取；

步骤S4、对提取的灰度图像的边缘进行骨架提取，获得激光条纹线图像；

步骤S5、在激光条纹线图像上，采用变步长搜索查找到焊缝的近特征点，并依据近特征点求取出焊缝特征点的坐标。

进一步地，在所述步骤S2中，在对采集的焊缝图像进行膨胀和腐蚀操作时，将结构元素设置为3×3的圆盘形结构元素。

进一步地，在所述步骤S2中，所述将膨胀和腐蚀后的二值图像转化为灰度图像具体为：

先将采集的焊缝图像转换为灰度原图，再将灰度原图乘以二值图像得到灰度图像。

进一步地，在所述步骤S3中，所述构造曲率求取模型具体包括如下步骤：

步骤A1、利用二维曲面的表达式来求取灰度图像的连续曲面，其中，二维曲面的表达式如下：

步骤A2、对灰度图像的连续曲面进行求导，获得连续的平均曲率H：

步骤A3、对于连续的平均曲率H，采用离散化的方式来求取离散的平均曲率H：

步骤A4、采用曲线拟合来替代离散的平均曲率H的求取，并通过曲线拟合来构造出曲率求取模型：

进一步地，所述步骤S4具体为：

对提取的灰度图像的边缘进行骨架提取，获取激光条纹线，在骨架提取的过程中，对于未连接的激光条纹线，则采用填充的方式进行连接；在骨架提取完成后，即获得激光条纹线图像。

进一步地，在所述步骤S5中，所述采用变步长搜索查找到焊缝的近特征点具体包括初选步骤和细选步骤；

所述初选步骤具体为：

设置激光条纹线最右边的像素点为起始点，以大步长a作为间隔，按顺序依次编号为1至n1；从起始点开始，计算夹角θ_i：

其中，u_i和v_i为拍摄设备坐标下的像素坐标，且u_i表示横坐标，v_i表示纵坐标；

将计算出的夹角θ_i与初选预设角进行比对，且如果θ_i大于初选预设角，则记录p_i+1为细选时的起点A，记录p_i+2为细选时的终点B，并结束初选步骤；如果θ_i小于等于初选预设角，则令i＝i+1，并重新计算和比对θ_i；

所述细选步骤具体为：

以A为起点，小步长b作为间隔，按顺序依次编号为1至n2；从起始点开始，计算夹角θ_j：

其中，u_j和v_j为拍摄设备坐标下的像素坐标，且u_j表示横坐标，v_j表示纵坐标；

若u_j<u_B，则记录A为近特征点，并结束细选步骤；

若u_j≥u_B，将夹角θ_j与细选预设角进行比对，且如果θ_j大于细选预设角，则记录p_j+1点为近特征点，并结束细选步骤；如果θ_j小于等于细选预设角，则令j＝j+1，并重新计算和比对θ_j。

进一步地，在所述步骤S5中，所述依据近特征点求取出焊缝特征点的坐标具体为：

以近特征点左右两侧的激光条纹线上的像素点构造直线进行直线拟合，求取拟合出的两条直线的交点，并将求出的交点作为焊缝特征点的坐标。

本发明具有如下优点：本发明方法通过结合图形学和立体几何的方法，从图像的曲率入手，优化获取激光条纹线的轮廓信息，并采用变步长搜索法来寻找焊缝的近特征点，可实现精确获取焊缝的位置。

附图说明

下面参照附图结合实施例对本发明作进一步的说明。

图1为本发明一种基于变步长曲率滤波的焊缝特征点求取方法的执行流程图。

图2为本发明中初选步骤的示意图。

图3为本发明中细选步骤的示意图。

图4为本发明中焊缝特征点提取的示意图。

具体实施方式

请参阅图1至图4所示，本发明一种基于变步长曲率滤波的焊缝特征点求取方法的较佳实施例，所述方法包括如下步骤：

步骤S1、使用拍摄设备(如照相机)采集焊缝图像；

步骤S2、对采集的焊缝图像进行膨胀和腐蚀操作，并将膨胀和腐蚀后的二值图像转化为灰度图像；

步骤S3、构造曲率求取模型，并利用构建出的曲率求取模型来对灰度图像进行边缘提取；

步骤S4、对提取的灰度图像的边缘进行骨架提取，获得激光条纹线图像；

步骤S5、在激光条纹线图像上，采用变步长搜索查找到焊缝的近特征点，并依据近特征点求取出焊缝特征点的坐标。

在所述步骤S2中，在对采集的焊缝图像进行膨胀和腐蚀操作时，将结构元素设置为3×3的圆盘形结构元素。

由于结构元素设置的越大，图像就会被腐蚀的越严重，为了确保能够获得比较清晰的轮廓信息，本发明将结构元素设置为3×3的圆盘形结构元素。

所谓的结构元素：是膨胀和腐蚀操作的最基本组成部分，用于测试输出图像，通常要比待处理的图像小很多；二维平面结构元素由一个数值为0或1的矩阵组成；结构元素的原点指定了图像中需要处理的像素范围，结构元素中数值为1的点决定结构元素的邻域像素在进行膨胀或腐蚀操作时是否需要参与计算。

在所述步骤S2中，所述将膨胀和腐蚀后的二值图像转化为灰度图像具体为：

先将采集的焊缝图像转换为灰度原图，再将灰度原图乘以二值图像得到灰度图像。所谓的灰度图像是指每个像素只有一个采样颜色的图像，这类图像通常显示为从最暗的黑色到最亮的白色的灰度。

图像曲率主要反映的是图像的弯曲程度，图像的梯度也反映的是图像的像素变化程度，但因为梯度域存在可不可积的问题，而曲率是一个标量场，不存在这样的问题，本发明的最大创新点就是要通过曲率来求取边缘。又由于曲率是三维空间的，因此，在二维图像中，我们只能通过构建来实现。

在所述步骤S3中，所述构造曲率求取模型具体包括如下步骤：

步骤A1、利用二维曲面的表达式来求取灰度图像的连续曲面，也就是说，需要将灰度图像输入到二维曲面的表达式中来求出灰度图像的连续曲面，其中，二维曲面的表达式如下：

步骤A2、对灰度图像的连续曲面进行求导，获得连续的平均曲率H：

步骤A3、对于连续的平均曲率H，由于在具体实现时，是很难直接求取连续的平均曲率的，因此，大部分连续的平均曲率都是通过离散化来获取平均曲率的，本发明中也采用离散化的方式来求取离散的平均曲率H：

步骤A4、由于离散的平均曲率H在具体实现时，其计算量是十分庞大的，通常情况下也比较难求解，因此在本发明中是采用曲线拟合来替代离散的平均曲率H的求取，并通过曲线拟合来构造出曲率求取模型：

所谓的曲线拟合，就是通过实验获得有限对测试数据(xi,yi)，利用这些数据来求取近似函数y＝f(x)，式中x为输出量，y为被测物理量；与插值不同的是，曲线拟合并不要求y＝f(x)的曲线通过所有离散点(xi,yi)，只要求y＝f(x)反映这些离散点的一般趋势，不出现局部波动即可。

所述步骤S4具体为：

对提取的灰度图像的边缘进行骨架提取，获取激光条纹线，在骨架提取的过程中，对于未连接的激光条纹线，则采用填充的方式进行连接；在骨架提取完成后，即获得激光条纹线图像。

在所述步骤S5中，所述采用变步长搜索查找到焊缝的近特征点具体包括初选步骤和细选步骤；将激光条纹线图像上的一段含有连续像素点的个数称为步长；

如图2所示，所述初选步骤具体为：

设置激光条纹线最右边的像素点为起始点，以大步长a作为间隔，按顺序依次编号为1至n1(即从1开始，按正整数的顺序依次编号下去，直至处理完整条激光条纹线)；

从起始点开始，计算夹角θ_i：

其中，u_i和v_i为拍摄设备坐标下的像素坐标，且u_i表示横坐标，v_i表示纵坐标，i表示编号的第i个像素点；

将计算出的夹角θ_i与初选预设角进行比对，且如果θ_i大于初选预设角，则记录p_i+1为细选时的起点A，记录p_i+2为细选时的终点B，并结束初选步骤；如果θ_i小于等于初选预设角，则令i＝i+1，并重新计算和比对θ_i(直到选出细选时的起点A和终点B才停止)；

我们将激光条纹线图像中的焊缝与真实的焊缝特征点之间相差一个小步长b的像素点定义为近特征点；

如图3所示，所述细选步骤具体为：

以A为起点，小步长b作为间隔，按顺序依次编号为1至n2(即从1开始，按正整数的顺序依次编号下去，直到编到终点B时结束)；从起始点开始，计算夹角θ_j：

其中，u_j和v_j为拍摄设备坐标下的像素坐标，且u_j表示横坐标，v_j表示纵坐标，j表示编号的第j个像素点；

若u_j<u_B，则记录A为近特征点，并结束细选步骤；

若u_j≥u_B，将夹角θ_j与细选预设角进行比对，且如果θ_j大于细选预设角，则记录p_j+1点为近特征点，并结束细选步骤；如果θ_j小于等于细选预设角，则令j＝j+1，并重新计算和比对θ_j。

在所述步骤S5中，所述依据近特征点求取出焊缝特征点的坐标具体为：

以近特征点左右两侧的激光条纹线上的像素点构造直线进行直线拟合，求取拟合出的两条直线的交点，并将求出的交点作为焊缝特征点的坐标(如图4所示)。所谓的直线拟合就是根据给定的点集(比如轮廓)来拟合出一条直线。

本发明方法通过结合图形学和立体几何的方法，从图像的曲率入手，优化获取激光条纹线的轮廓信息，并采用变步长搜索法来寻找焊缝的近特征点，可实现精确获取焊缝的位置。

虽然以上描述了本发明的具体实施方式，但是熟悉本技术领域的技术人员应当理解，我们所描述的具体的实施例只是说明性的，而不是用于对本发明的范围的限定，熟悉本领域的技术人员在依照本发明的精神所作的等效的修饰以及变化，都应当涵盖在本发明的权利要求所保护的范围内。

Claims (7)

1.一种基于变步长曲率滤波的焊缝特征点求取方法，其特征在于：所述方法包括如下步骤：

步骤S1、使用拍摄设备采集焊缝图像；

步骤S2、对采集的焊缝图像进行膨胀和腐蚀操作，并将膨胀和腐蚀后的二值图像转化为灰度图像；

步骤S3、构造曲率求取模型，并利用构建出的曲率求取模型来对灰度图像进行边缘提取；

步骤S4、对提取的灰度图像的边缘进行骨架提取，获得激光条纹线图像；

步骤S5、在激光条纹线图像上，采用变步长搜索查找到焊缝的近特征点，并依据近特征点求取出焊缝特征点的坐标。

2.根据权利要求1所述的一种基于变步长曲率滤波的焊缝特征点求取方法，其特征在于：在所述步骤S2中，在对采集的焊缝图像进行膨胀和腐蚀操作时，将结构元素设置为3×3的圆盘形结构元素。

3.根据权利要求1所述的一种基于变步长曲率滤波的焊缝特征点求取方法，其特征在于：在所述步骤S2中，所述将膨胀和腐蚀后的二值图像转化为灰度图像具体为：

先将采集的焊缝图像转换为灰度原图，再将灰度原图乘以二值图像得到灰度图像。

4.根据权利要求1所述的一种基于变步长曲率滤波的焊缝特征点求取方法，其特征在于：在所述步骤S3中，所述构造曲率求取模型具体包括如下步骤：

步骤A1、利用二维曲面的表达式来求取灰度图像的连续曲面，其中，二维曲面的表达式如下：

步骤A2、对灰度图像的连续曲面进行求导，获得连续的平均曲率H：

步骤A3、对于连续的平均曲率H，采用离散化的方式来求取离散的平均曲率H：

步骤A4、采用曲线拟合来替代离散的平均曲率H的求取，并通过曲线拟合来构造出曲率求取模型：

5.根据权利要求1所述的一种基于变步长曲率滤波的焊缝特征点求取方法，其特征在于：所述步骤S4具体为：

对提取的灰度图像的边缘进行骨架提取，获取激光条纹线，在骨架提取的过程中，对于未连接的激光条纹线，则采用填充的方式进行连接；在骨架提取完成后，即获得激光条纹线图像。

6.根据权利要求1所述的一种基于变步长曲率滤波的焊缝特征点求取方法，其特征在于：在所述步骤S5中，所述采用变步长搜索查找到焊缝的近特征点具体包括初选步骤和细选步骤；

所述初选步骤具体为：

设置激光条纹线最右边的像素点为起始点，以大步长a作为间隔，按顺序依次编号为1至n1；从起始点开始，计算夹角θ_i：

其中，u_i和v_i为拍摄设备坐标下的像素坐标，且u_i表示横坐标，v_i表示纵坐标；

将计算出的夹角θ_i与初选预设角进行比对，且如果θ_i大于初选预设角，则记录p_i+1为细选时的起点A，记录p_i+2为细选时的终点B，并结束初选步骤；如果θ_i小于等于初选预设角，则令i＝i+1，并重新计算和比对θ_i；

所述细选步骤具体为：

以A为起点，小步长b作为间隔，按顺序依次编号为1至n2；从起始点开始，计算夹角θ_j：

其中，u_j和v_j为拍摄设备坐标下的像素坐标，且u_j表示横坐标，v_j表示纵坐标；

若u_j<u_B，则记录A为近特征点，并结束细选步骤；

若u_j≥u_B，将夹角θ_j与细选预设角进行比对，且如果θ_j大于细选预设角，则记录p_j+1点为近特征点，并结束细选步骤；如果θ_j小于等于细选预设角，则令j＝j+1，并重新计算和比对θ_j。

7.根据权利要求1所述的一种基于变步长曲率滤波的焊缝特征点求取方法，其特征在于：在所述步骤S5中，所述依据近特征点求取出焊缝特征点的坐标具体为：

以近特征点左右两侧的激光条纹线上的像素点构造直线进行直线拟合，求取拟合出的两条直线的交点，并将求出的交点作为焊缝特征点的坐标。