CN108067725A - 一种新的机器人激光视觉焊缝检测系统及方法 - Google Patents

Abstract

本发明公开了一种新的机器人激光视觉焊缝检测系统，该系统包括焊接机器人、激光视觉传感器、多轴伺服控制器、伺服驱动器、PC组态平台和智能终端；其中，所述激光视觉传感器安装于焊接机器人末端，用于焊缝图像采集和焊缝图像检测；所述多轴伺服控制器和伺服驱动器置于焊接机器人内部，实现焊接机器人的自动焊接作业；所述智能终端位于PC组态平台，用于对本焊缝检测系统的智能控制；系统界面包括图像采集、图像处理、焊缝识别、机械控制。该系统解决了传统焊接行业中人工焊接效率低、精度低、对人有危害的问题，实现了激光视觉传感器引导机器人对焊缝的自动检测。

Description

一种新的机器人激光视觉焊缝检测系统及方法

技术领域

本发明涉及焊接工业中的焊缝检测技术，具体涉及一种新的机器人激光视觉焊缝检测系统及方法。

背景技术

焊接是一门材料连接技术，通过某种物理化学过程使分离的材料产生原子或者分子间的作用力而连接在一起，随着焊接技术的不断发展，它在生产中的应用日趋广泛，到目前为止已经成为一种重要的加工手段。从日常生活用品，如家用电器、水暖设备等的生产到飞机、潜艇、火箭、飞船等尖端科技产品都离不开高效率、现代化的焊接技术，进一步提高焊接质量、改善劳动条件、提高劳动生产率已经成为所有焊接工作者的强烈的愿望，而采用焊缝自动检测技术是实现上述的正确途径。

众所周知，焊工可以通过眼睛或者工业电视观察焊接熔池来对工件或焊枪进行调整并能达到很高的精度。但是这依赖于焊工个人的经验、带有主观性、劳动强度大、并受烟尘和弧光的影响，也会产生偏差。

发明内容

本发明目的在于克服传统的焊接工业中对焊工个人的经验依赖性强、带有主观性、劳动强度大、受烟尘和弧光的影响大等缺点，提供一种新的机器人激光视觉焊缝检测系统及方法，将焊缝图像检测与机器人运动控制技术相结合，有效地解决了焊缝自动检测问题。

为解决上述技术问题，本发明采用如下的技术方案：

一种新的机器人激光视觉焊缝检测系统，其特征在于，所述系统包括：焊接机器人、激光视觉传感器、多轴伺服控制器、伺服驱动器、PC组态平台和智能终端。所述激光视觉传感器安装于焊接机器人末端，用于焊缝图像采集和焊缝图像检测；所述多轴伺服控制器和伺服驱动器置于焊接机器人内部，实现焊接机器人的自动焊接作业；所述智能终端位于PC组态平台，用于对本焊缝检测系统的智能控制；系统界面包括图像采集、图像处理、焊缝识别、机械控制。

一种新的机器人激光视觉焊缝检测方法，其特征在于，具体包括以下步骤：

S1，激光视觉传感器采集焊缝图像；

S2，对焊缝图像进行噪声的小波滤除；

S3，对小波降噪后的图像进行二值化处理；

S4，激光条纹中心提取；

S5，检测焊缝位置；

S6，建立焊缝跟踪系统模型。

附图说明

图1为本发明的一种新的机器人激光视觉焊缝检测系统结构示意图。

图2是本发明中一种新的机器人激光视觉焊缝检测方法的流程图。

具体实施方式

下面结合附图及具体实施例对本发明进行更加详细与完整的说明。可以理解的是，此处所描述的具体实施例仅用于解释本发明，而非对本发明的限定。

如图1所示，本发明的一种新的机器人激光视觉焊缝检测系统包括焊接机器人、激光视觉传感器、多轴伺服控制器、伺服驱动器、PC组态平台和智能终端。所述激光视觉传感器安装于焊接机器人末端，用于焊缝图像采集和焊缝图像检测；所述多轴伺服控制器和伺服驱动器置于焊接机器人内部，实现焊接机器人的自动焊接作业；所述智能终端位于PC组态平台，用于对本焊缝跟踪系统的智能控制；系统界面包括图像采集、图像处理、焊缝识别、机械控制。

如图2所示，本发明的一种新的机器人激光视觉焊缝检测方法，具体包括以下步骤：

S1，激光视觉传感器采集焊缝图像；

S2，对焊缝图像进行噪声的小波滤除。小波变换先将图像进行分解，得到不同方向、不同频率的分量，对各分量处理后，再用小波逆变换重构并得到经处理后的图像；

S3，对小波降噪后的图像进行二值化处理。为了便于后续图像处理，需要对小波降噪后的图像进行二值化处理。二值化就是将大于一定阈值的像素点的值设为1，其余像素点的值设为0：

式中f(x，y)表示转换前像素点(x，y)的灰度值，g(x，y)表示经过转换后该像素点的值，T为二值化变换阈值；

S4，激光条纹中心提取。Steger算法(吴家勇，王平江，陈吉红，等.基于梯度重心法的线结构光中心亚像素提取方法[J].中国图象图形学报，2009，14(7)：1354-1360.)首先利用Hessian矩阵确定线条的法线方向，然后在其法线方向上利用泰勒展开求出光条纹中心的亚像素位置。在光条图像中，Hessian矩阵表示为：

式中g(x，y)表示二维图像，(x，y)表示图像上的一点，r_xx，r_xy表示高斯函数的二阶导数，r_yy表示二阶偏导数与图像的卷积。

激光条纹中心提取之后，通过Hough变换法提取直线。Hough变换利用图像坐标系与参数坐标系中点与线的对偶性，即：在图像坐标系下的一个点对应了参数坐标系中的一条直线；同样，参数坐标系的一条直线对应了图像坐标系下的一个点。这样在图像坐标系中呈现直线的所有点，它们的斜率和截距都是相同的，所以它们在参数坐标系下对应于同一个点。将图像坐标系下的各个点投影到参数坐标系下之后，会出现一些聚集点，这样的聚集点就对应差原始坐标系下的直线。

考虑到直线的斜率可能会接近无穷大，为了使变换有意义，将直线的方程用法线式表示：

x cos θ+y sin θ＝ρ

式中ρ是直线到坐标系原点的距离，θ是直线法线与x轴的夹角。这样，图像平面上的一条直线就对应到参数ρ-θ平面上的一个点，统计共线点的数量，可以检测出直线；

S5，检测焊缝位置。对于分布于焊缝两侧的激光条纹中心线，由于其ρ值和θ值都相同，用Hough变换法提取出的是同一条直线，因此需要与Hough变换前的激光条纹中心线进行比对，找到激光条纹中心线上的间断点，该间断点将焊缝两侧的激光条纹中心线分为两段，两条线段的最近端点为焊缝边缘点，其中心点即为所求焊缝中心位置。根据两个焊缝边缘点的间距还可求得焊缝宽度；

S6，建立焊缝跟踪系统模型。激光视觉建立焊缝跟踪系统的模型如下：O_CX_CY_CZ_c为摄像机坐标系，O_eX_eY_eZ_e为机械臂末端坐标系，O_wX_wY_wZ_w为机械臂基坐标系，O_gX_gY_gZ_g为世界坐标系，P点为当前可提取焊缝特征点，(u_p，v_p，1)^T为P点的图像像素坐标，记为P_u。摄像机内参数矩阵A、摄像机坐标系与机械臂末端坐标系的转换矩阵即手眼矩阵H_y、激光光平面在摄像机坐标系下的平面方程ax_p+by_p+c＝1，工件在机械臂末端的偏移向量t₇由标定得到。T₆为机械臂末端坐标系与机械臂基坐标系的转换矩阵，通过实时读取机械臂当前位姿计算得到。

按照该模型，对从焊缝图像上提取得到的焊缝特征点P(图像坐标为P_u)进行变换，即可得到其在机械臂基坐标系下的坐标P_w。为使焊枪能跟踪焊缝，还要根据P_w计算在旋转位姿R₆下机械臂末端点应到达的位置坐标P_e。具体变换步骤如下：

(1)计算图像上P点在摄像机坐标系下的坐标P_x，(x_p，y_p，1)^T：

P_x＝A^-1P_u

(2)结合摄像机坐标系下的激光光平面的平面方程ax_p+by_p+c＝1计算焊缝点在摄像机坐标系下的三维坐标P_c：

P_c＝P_x/(ax_p+by_p+c)

(3)计算P点在机械臂末端坐标系下的坐标P_m，(x_pm，y_pm，z_pm，1)^T：

(4)计算P点在机械臂基坐标系下的坐标P_w：

P_w＝T₆P_m

(5)计算在旋转位姿R₆下为使焊枪跟踪焊缝，机械臂末端应到达位置坐标P_e：

P_e＝P_w+R₆t_7。

Claims (2)

1.一种新的机器人激光视觉焊缝检测系统，其特征在于，所述系统包括：焊接机器人、激光视觉传感器、多轴伺服控制器、伺服驱动器、PC组态平台和智能终端；其中，所述激光视觉传感器安装于焊接机器人末端，用于焊缝图像采集和焊缝图像检测；所述多轴伺服控制器和伺服驱动器置于焊接机器人内部，实现焊接机器人的自动焊接作业；所述智能终端位于PC组态平台，用于对本焊缝检测系统的智能控制；系统界面包括图像采集、图像处理、焊缝识别、机械控制。

2.一种应用权利要求1所述的一种新的机器人激光视觉焊缝检测系统实现的一种新的机器人激光视觉焊缝检测方法，其特征在于，具体包括以下步骤：

S1，激光视觉传感器采集焊缝图像；

S2，对焊缝图像进行噪声的小波滤除；

S3，对小波降噪后的图像进行二值化处理；

S4，激光条纹中心提取；

S5，检测焊缝位置；

S6，建立焊缝跟踪系统模型。