CN110060270A - 一种适用于低成像质量多边形管状物体的边缘检测方法 - Google Patents

Abstract

本发明提供了一种适用于低成像质量多边形管状物体的边缘检测方法，其先通过将目标物体图像滤波处理来增强突出多边形管状物体，而后进行细化处理找到候选目标物体，对候选目标物体进行判别是否符合多边形条件，则对于符合条件的即为所需识别的目标物体，也就实现了在复杂环境中识别目标物体、检测目标物体，最后通过灰度轮廓曲线找到的波谷点就是目标物体的内、外边界，从而实现精确提取目标物体的内外侧边界，检测效果好，检测效率高。

Description

一种适用于低成像质量多边形管状物体的边缘检测方法

技术领域

本发明涉及机器视觉检测技术领域，具体为一种适用于低成像质量多边形管状物体的边缘检测方法。

背景技术

在钢材工厂自动打磨、自动焊接等环境中,待加工的工件需要做到被准确识别与定位，尤其是对于多边形管状钢材物体坡口切割、焊缝边缘检测，需要精确提取它的内外侧边界，以便于对多边形管状钢材物体的边缘打磨或自动焊接，然而在检测过程中，很多时候会受限于工厂特定环境,待加工的工件往往很难被拍摄出对比度高且清晰的图像，在实际情况下,外部环境往往非常复杂,不但光照不均,而且背景干扰严重，以及管道本身也极容易因为生锈而导致较差成像结果(如图1所示)，基于上述原因，也很难通过改变光照条件来提高成像质量。

在目前的机器视觉领域中,在提取物体边缘时往往采用经典的图像边缘提取方法,如Sobel,Canny方法等,但是这些方法仅在图像成像清晰、对比度高的环境下有效,而在对比度低、噪声干扰大的成像环境下,是无法有效地检测出完整的边缘的，如图2和图3所示,检测出的图像成像质量较低，所提取的边缘被检测为为断裂的噪声点,检测效果差。

发明内容

针对上述问题，本发明提供了一种适用于低成像质量多边形管状物体的边缘检测方法，其可在复杂环境中精确识别目标、检测目标、定位目标边缘，检测效果好，检测效率高。

其技术方案是这样的：其特征在于：其包括以下步骤：

S1、输入目标物体的图像，采用滤波器对图像进行滤波处理后，选取最大响应结果作为最终输出结果；

S2、对滤波后的图像进行细化处理：通过采用非极大值抑制NMS算法搜索出图像的局部最大极值点，得到细化后的单像素线条图像；

S3、采用大津法OTSU自适应阈值进行二值化处理得到二值化图像，随后对二值化图像进行形态学滤波操作，最后保留下来的曲线作为候选目标物体曲线；

S4、对经过所述S3的候选目标物体进行判别是否满足多边形条件：计算候选目标物体的轮廓点到其重心点的欧式距离，形成具有多个峰值的欧式距离曲线，若每个峰值之间的高度差值和峰值与峰值之间的距离差值均小于设定阈值，即判断所述候选目标物体曲线符合多边形条件，反之则不是，然后判断所述候选目标物体曲线是否为最后一个候选目标物体曲线，若是，结束检测，若不是，对下一个候选目标物体曲线重新进行判别是否满足多边形条件；

S5、将满足多边形条件的候选目标物体曲线作为多边形物体边缘之间的中心线，在所述中心线上做垂线，每条垂线的灰度轮廓曲线上的波谷点就是多边形管道物体的边界点；

S6、重复所述S5，直至遍历完整段中心线，得到多边形管道物体的所有边界点；

S7、判断是否完成最后一个候选目标物体曲线的边界点提取，若是，则结束检测，若不是，对下一个候选目标物体曲线进行重复所述S4、S5、S6，从而实现识别目标物体、检测目标物体、定位目标物体边缘。

其进一步特征在于：

所述S1中，输入的目标物体图像表示为f(x,y)，通过采用高斯二阶导数滤波器g(x,y)对图像进行滤波处理，

其中，所述滤波器

在滤波过程中不断改变滤波器方向，则将旋转了θ角度的滤波器表示为g(R_θ(x,y))，其中，旋转矩阵

目标物体图像f(x,y)通过与不断旋转的滤波器卷积滤波,最后选取最大响应结果作为最终的输出结果,输出结果记为rst(x,y)，

其中θ^*为：

则在得到图像滤波结果rst(x,y)的同时，还得到了图像的方向角度θ^*(x,y)；

进一步地，所述S1中，对目标物体图像进行多尺度滤波，得到多个响应结果，最大的响应结果rst*作为最终输出,表示为：

尺度范围σ∈[σ_min,σ_max]；

进一步地，所述S2中，采用图像的方向角度θ^*(x,y)作为细化时的搜索方向，搜索出图像的局部最大极值点；

进一步地，所述S3中，通过形态学的闭运算操作，使得单像素线条图像中未连接的间断曲线完整连接起来；通过形态学的开运算操作，滤除剩余的噪声；通过形态学的细化操作，进一步确保图像中的曲线是单像素曲线；

进一步地，所述S4中，所述候选目标物体的曲线长度为L∈(L_min,L_max)，对所述候选目标物体的曲线计算重心(x₀,y₀),

其中，xi,yi是当前候选目标物体曲线的x,y坐标,N是当前候选目标物体曲线的像素个数；

选定所述候选目标物体的曲线上的一个起始点，沿一个方向顺序依次计算所述候选目标物体上每个点到重心(x₀,y₀)的欧氏距离，从而判断所述候选目标物体的曲线是否符合多边形条件，如果满足，其中的重心(x₀,y₀)就是所需要计算的重心，且当前所述候选目标物体的曲线就是多边形物体边缘的中心线；

进一步地，所述S5中，在当前所述候选目标物体中心线其中一段上选取若干点,在对应点上沿着中心线法线方向作垂线其中将垂线的灰度轮廓曲线表示为在灰度轮廓曲线上的波谷点A_i和波谷点B_i，就是当前所述候选目标物体的外边界点和内边界点；

进一步地，所述S6中，在所述候选目标物体的中心线剩余段上重复做垂线，直至遍历完整段中心线，得到外边界集合l_inner＝{A_i,i＝1...N}，内边界集合l_outer＝{B_i,i＝1...N}，最后通过对l_inner和l_outer做直线拟合,得到物体内外边缘，从而完成定位目标物体边缘。

本发明的有益效果是，其先通过将目标物体图像滤波处理来增强突出多边形管状物体，而后进行细化处理找到候选目标物体，对候选目标物体进行判别是否符合多边形条件，则对于符合条件的即为所需识别的目标物体，也就实现了识别目标物体、检测目标物体，最后通过灰度轮廓曲线找到的波谷点就是目标物体的内、外边界，从而实现精确提取目标物体的内外侧边界，有效适用于低对比度背景复杂环境下的多边形管状钢材物体坡口切割、焊缝边缘检测。

附图说明

图1是现有的八边形管道边缘成像示意图；

图2是现有的sobel边缘检测的成像示意图；

图3是现有的Canny边缘检测的成像示意图；

图4是本发明的流程示意图；

图5是对图1的多尺度滤波结果成像示意图；

图6是NMS细化结果成像示意图；

图7是八边形物体的中心线绘制成像示意图；

图8是八边形物体的内外边界检测结果的成像示意图；

图9是八边形物体中八个角到重心距离的示意图；

图10是八边形轮廓到重心的欧式距离曲线示意图；

图11是在图5上做垂线的成像示意图；

图12是垂线的灰度轮廓曲线示意图。

具体实施方式

如图4所示，本发明包括以下步骤：

S1、输入目标物体的图像f(x,y)，通过采用高斯二阶导数滤波器g(x,y)对图像进行滤波处理，来增强突出多边形管状物体，

其中，所述滤波器

在滤波过程中不断改变滤波器方向，则将旋转了θ角度的滤波器表示为g(R_θ(x,y))，其中，旋转矩阵

因此，目标物体图像f(x,y)通过与不断旋转的滤波器卷积滤波,最后选取最大响应结果作为最终的输出结果,输出结果记为rst(x,y)，

其中θ^*为：

则通过上述公式，在得到图像滤波结果rst(x,y)的同时，还得到了图像的方向角度θ^*(x,y)。

且由于事先并不知道多边形管道管壁厚度,为了能够让滤波器对不同厚度的多边形管道都有较好的响应,对目标物体图像进行多尺度滤波(即多次滤波)，得到多个响应结果，最大的响应结果rst*作为最终输出,表示为：

尺度范围σ∈[σ_min,σ_max]，图5是对图1的多尺度滤波处理结果示意图。

S2、对滤波后的图像进行细化处理：通过采用非极大值抑制NMS算法得到细化后的图像，由于传统的NMS算法的思想是沿图像梯度方向搜索图像的局部最大极值点，而由于梯度的方向性较弱且易受噪声影响，则本发明中，采用图像的方向角度θ^*(x,y)作为细化时的搜索方向，搜索出图像的局部最大极值点，根据极值点得到细化后的图像，而最终得到的细化图像保持了单像素的线条,这样有利于后续分析，图6是NMS细化结果。

S3、细化后的目标物体前景与背景被较好地区分成了两类，采用大津法OTSU自适应阈值进行二值化处理，并分别采用闭运算、开运算、细化等一系列形态学滤波操作，通过形态学的闭运算操作可以使未连接的间断曲线完整连接起来，通过形态学的开运算操作可滤除剩余的噪声，通过形态学的细化操作可进一步确保图像中的曲线是单像素曲线，而依然保留下来的曲线作为候选目标物体曲线。

S4、对经过步骤S3的候选目标物体进行判别是否满足多边形条件：

候选目标物体的曲线长度为L∈(L_min,L_max)，即候选目标物体的曲线长度L在最大和最小设定的阈值范围内；

对所述候选目标物体的曲线计算重心(x₀,y₀),

其中，xi,yi当前候选目标物体曲线的x,y坐标,N是当前候选目标物体曲线的像素个数，本实施例中候选目标物体为八边形管状物体，则N＝8；

然后选定所述候选目标物体的曲线上的一个起始点，沿顺时针(或逆时针)顺序依次计算所述候选目标物体上每个轮廓点到重心(x₀,y₀)的欧氏距离，如图9所示，图中八边形管状物体的8个角到重心距离分别由1、2、3、4、5、6、7、8示意；由于待识别的八边形管状物体是一个对称的封闭(或近乎封闭)曲线,八个角到重心的距离最远,八条边到重心的距离最近,因此在欧氏距离曲线上形成了具有8个峰值的曲线,如图10所示，则根据这一特点，可作为判断候选目标物体曲线是否是八边形(或其他多边形)；接着通过判断距离曲线的峰值数量,每个峰值之间的高度差值小于设定阈值,即峰值高度接近；峰值与峰值之间的距离差值小于设定阈值,即峰值间距接近，由此判断该候选目标物体的曲线是否符合多边形条件，如果满足，其中的重心(x₀,y₀)就是所需要计算的重心，且符合上述条件的当前所述候选目标物体的曲线就是八边形管状物体边缘的中心线,如图7所示中，八边形管状物体白色区域中的连续的黑色线条即为八边形管状物体边缘的中心线；反之则不是，然后继续判断所述候选目标物体曲线是否为最后一个候选目标物体曲线，若是，结束检测，若不是，对下一个候选目标物体曲线重新进行判别是否满足多边形条件。

S5、将满足多边形条件的候选目标物体曲线作为八边形管状物体内外边缘之间的中心线l，在所述中心线上做垂线，每条垂线的灰度轮廓曲线上的波谷点就是多边形管道物体的边界点；

在当前所述候选目标物体中心线其中一段上选取若干点,每个点间隔距离为Δd,在对应点上沿着中心线法线方向作垂线其中第i个垂线记为将图11中多尺度滤波图像的第i个垂线的灰度轮廓曲线表示为如图12所示,其表现为类似高斯四阶导数形状，因此在灰度轮廓曲线上很容易找到波谷点A和波谷点B的位置，而波谷点A和波谷点B分别为八边形管道的外边界点和内边界点。

S6、重复步骤S5，直至遍历完整段中心线l，得到外边界集合l_inner＝{A_i,i＝1...N}，内边界集合l_outer＝{B_i,i＝1...N}，最后通过对l_inner和l_outer做直线拟合,得到物体内外边缘，从而完成定位目标物体边缘。

S7、判断是否完成最后一个候选目标物体曲线的边界点提取，若是，则结束检测，若不是，对下一个候选目标物体曲线进行重复所述S4、S5、S6，从而实现识别目标物体、检测目标物体、定位目标物体边缘。

通过图8可显示出本发明检测方法对八边形管道的实验结果，图中画出的两个白色线部分即为八边形管道内、外侧边缘，成像质量高，检测效果明显。

综上，本发明中的检测方法能够在一般工业环境下识别目标、检测目标、准确定位目标边缘，并可检测规则的多边形边缘,例如四边形,六边形,八边形等，更具有较好的鲁棒性，适用于低对比度背景复杂环境下的物体检测，为开放环境下的多边形管状物体的边缘打磨或自动焊接提供了可靠的视觉定位技术。

Claims (8)

1.一种适用于低成像质量多边形管状物体的边缘检测方法，其特征在于：其包括以下步骤：

S1、输入目标物体的图像，采用滤波器对图像进行滤波处理后，选取最大响应结果作为最终输出结果；

S2、对滤波后的图像进行细化处理：通过采用非极大值抑制NMS算法搜索出图像的局部最大极值点，得到细化后的单像素线条图像；

S3、采用大津法OTSU自适应阈值进行二值化处理得到二值化图像，随后对二值化图像进行形态学滤波操作，最后保留下来的曲线作为候选目标物体曲线；

S4、对经过所述S3的候选目标物体进行判别是否满足多边形条件：计算候选目标物体的轮廓点到其重心点的欧式距离，形成具有多个峰值的欧式距离曲线，若每个峰值之间的高度差值和峰值与峰值之间的距离差值均小于设定阈值，即判断所述候选目标物体曲线符合多边形条件，反之则不是，然后判断所述候选目标物体曲线是否为最后一个候选目标物体曲线，若是，结束检测，若不是，对下一个候选目标物体曲线重新进行判别是否满足多边形条件；

S5、将满足多边形条件的候选目标物体曲线作为多边形物体边缘之间的中心线，在所述中心线上做垂线，每条垂线的灰度轮廓曲线上的波谷点就是多边形管道物体的边界点；

S6、重复所述S5，直至遍历完整段中心线，得到多边形管道物体的所有边界点；

S7、判断是否完成最后一个候选目标物体曲线的边界点提取，若是，则结束检测，若不是，对下一个候选目标物体曲线进行重复所述S4、S5、S6，从而实现识别目标物体、检测目标物体、定位目标物体边缘。

2.根据权利要求1所述的一种适用于低成像质量多边形管状物体的边缘检测方法，其特征在于：所述S1中，输入的目标物体图像表示为f(x,y)，通过采用高斯二阶导数滤波器g(x,y)对图像进行滤波处理，

其中，所述滤波器

在滤波过程中不断改变滤波器方向，则将旋转了θ角度的滤波器表示为g(R_θ(x,y))其中，旋转矩阵

目标物体图像f(x,y)通过与不断旋转的滤波器卷积滤波,最后选取最大响应结果作为最终的输出结果,输出结果记为rst(x,y)，

其中θ^*为：

则在得到图像滤波结果rst(x,y)的同时，还得到了图像的方向角度θ^*(x,y)。

3.根据权利要求1所述的一种适用于低成像质量多边形管状物体的边缘检测方法，其特征在于：所述S1中，对目标物体图像进行多尺度滤波，得到多个响应结果，最大的响应结果rst*作为最终输出,表示为：

尺度范围σ∈[σ_min,σ_max]。

4.根据权利要求1所述的一种适用于低成像质量多边形管状物体的边缘检测方法，其特征在于：所述S2中，采用图像的方向角度θ^*(x,y)作为细化时的搜索方向，搜索出图像的局部最大极值点。

5.根据权利要求1所述的一种适用于低成像质量多边形管状物体的边缘检测方法，其特征在于：所述S3中，通过形态学的闭运算操作，使得单像素线条图像中未连接的间断曲线完整连接起来；通过形态学的开运算操作，滤除剩余的噪声；通过形态学的细化操作，进一步确保图像中的曲线是单像素曲线。

6.根据权利要求1所述的一种适用于低成像质量多边形管状物体的边缘检测方法，其特征在于：所述S4中，所述候选目标物体的曲线长度为L∈(L_min,L_max)，对所述候选目标物体的曲线计算重心(x₀,y₀),

其中，xi,yi是当前候选目标物体曲线的x,y坐标,N是当前候选目标物体曲线的像素个数；

选定所述候选目标物体的曲线上的一个起始点，沿一个方向顺序依次计算所述候选目标物体上每个点到重心(x₀,y₀)的欧氏距离，从而判断所述候选目标物体的曲线是否符合多边形条件，如果满足，其中的重心(x₀,y₀)就是所需要计算的重心，且当前所述候选目标物体的曲线就是多边形物体边缘的中心线。

7.根据权利要求1所述的一种适用于低成像质量多边形管状物体的边缘检测方法，其特征在于：所述S5中，在当前所述候选目标物体中心线其中一段上选取若干点,在对应点上沿着中心线法线方向作垂线其中将垂线的灰度轮廓曲线表示为在灰度轮廓曲线上的波谷点A_i和波谷点B_i，就是当前所述候选目标物体的外边界点和内边界点。

8.根据权利要求1所述的一种适用于低成像质量多边形管状物体的边缘检测方法，其特征在于：所述S6中，在所述候选目标物体的中心线剩余段上重复做垂线，直至遍历完整段中心线，得到外边界集合l_inner＝{A_i,i＝1...N}，内边界集合l_outer＝{B_i,i＝1...N}，最后通过对l_inner和l_outer做直线拟合,得到物体内外边缘，从而完成定位目标物体边缘。