CN1289252C - 焊缝自主跟踪方法 - Google Patents
焊缝自主跟踪方法 Download PDFInfo
- Publication number
- CN1289252C CN1289252C CN 200410067327 CN200410067327A CN1289252C CN 1289252 C CN1289252 C CN 1289252C CN 200410067327 CN200410067327 CN 200410067327 CN 200410067327 A CN200410067327 A CN 200410067327A CN 1289252 C CN1289252 C CN 1289252C
- Authority
- CN
- China
- Prior art keywords
- weld seam
- robot
- welding
- angle
- value
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Length Measuring Devices By Optical Means (AREA)
- Manipulator (AREA)
Abstract
一种焊接技术领域的焊缝自主跟踪方法，在普通室内光源照射下，使用焊缝斜前方CCD摄像机，持续获取枪尖前方一小段焊缝的图像，在主控计算机进行图像处理获取枪尖与焊缝间的偏差以及这小段焊缝的角度信息，根据这些信息控制机器人沿焊缝前进，并通过传感器上的伺服电机调整摄像机的取像方位，同时定时记录用焊缝偏差值修正后机器人坐标值以及用焊缝角度修正后伺服电机的角度值，生成焊缝在机器人基坐标系下的坐标以及摄像机在需要取像方位时伺服电机的角度值。本发明能够自动的生成曲线焊缝或折线焊缝在机器人基坐标系下坐标，且焊缝曲线可以是闭合的，另外能够在焊接时自动的把CCD摄像机调整到合适的取像位置，具有很高的实用价值。
Description
技术领域
本发明涉及的是一种用于焊接技术领域的焊缝跟踪方法，具体是一种焊缝自主跟踪方法。
背景技术
现在工业主要工作在示教再现的工作模式，在焊接新工件前需要依靠大量的人力对焊缝进行示教，这一点在小批量生产时尤为明显。另一方面示教的机器人不能感知工件尺寸、装夹位置等的变化，当这些因素变化时，焊接质量会下降。因此，依靠视觉自动的生成焊缝坐标具有重要的意义，能够提高生产效率和焊接质量，并有助于提高机器人弧焊的智能化水平。
经对现有技术文献的检索发现，熊震宇等人在《焊接学报》(2003，Vol24，No.5：37-41)上发表的“基于旋转电弧传感的空间位置曲线焊缝跟踪”。文中以理想状态的旋转电弧传感信号处理方法为基础，研究了平焊、横焊及立焊位置焊缝偏差的识别方法。采用了模糊控制方法，设计了机器人焊缝跟踪控制系统。该系统具有了空间曲线焊缝的自动跟踪的优点。但也有如下的不足，需要提前示教一条直线轨迹，且因为只在焊接时调整焊枪，调整过程会反映到焊道中去，会影响跟踪精度和焊道成型。
发明内容
本发明的目的在于克服现有技术中的不足，提供一种焊缝自主跟踪方法，使其能够自动的生成曲线焊缝或折线焊缝在机器人基坐标系下坐标，且焊缝曲线可以是闭合的，另外能够在焊接时自动的把CCD摄像机调整到合适的取像位置，具有很高的实用价值。
本发明是通过以下技术方案实现的，本发明在普通室内光源照射下，在把焊枪导引到焊缝的起始点后，使用焊缝斜前方CCD摄像机，不断的获取枪尖前方一小段焊缝的图像，在主控计算机进行图像处理获取枪尖与焊缝间的偏差以及这小段焊缝的角度等信息，根据这些信息控制机器人沿焊缝前进，并通过传感器上的伺服电机调整摄像机的取像方位，同时定时记录用焊缝偏差值修正后机器人坐标值以及用焊缝角度修正后伺服电机的角度值，生成焊缝在机器人基坐标系下的坐标以及摄像机在合适取像方位时伺服电机的角度值。当机器人沿焊缝走完一遍后，主控计算机控制机器人回到焊缝起点，并把减光和滤光片移到摄像机的前方，开始沿焊缝焊接。用此方法过对低碳钢曲线焊缝和锻铝曲线焊缝进行试验，结果表明该方法具有很高的实用价值。
以下对本发明方法作进一步说明，步骤如下：
(1)利用机器人自带的工具点校准方法，对焊接机器人控制点(例如，对于钨极氩弧焊，为钨极的尖端点)进行精确标定。
(2)对摄像机进行简单的标定。为简化所研究问题的难度，又不失实用性，在跟踪时工件将固定水平工作台上，焊枪与工件垂直。另外钨极尖与工件间的距离保持在5mm左右。在此基础上对摄像机进行简单的标定，标定枪尖点在图像上的位置点，单位为象素。标定在枪尖附近图像纵轴方向上单位象素对应的真实尺寸值，单位为毫米每像素。以及标定传感器中伺服电机的单位角度值所对应图像中的角度。
(3)当把焊枪调整到焊缝起始点后，对枪尖前方一小段图像进行处理，获得焊缝的中心线，并进行特征提取，求取焊缝偏差和焊缝角度。此外根据每桢图像处理后的特征判断焊缝是否结束。图像处理主要过程为滤波、自动阈值二值化、细化。当进行送丝时需要在二值化前在图像中去除焊丝所成的像。特征提取主要是对焊缝中心线进行直线拟合，求取该直线在图像纵轴方向上与枪尖点的距离，即焊缝偏差，规定枪尖点在焊缝下方时偏差为正；求取枪尖点处直线与图像横轴的夹角，即焊缝角度，规定枪尖点右面的一段焊缝斜向上时角度为正，斜向下时角度为负。一幅图像处理和特征提取完成后，直接进行下一幅图像的处理。
(4)根据焊缝偏差和角度，按偏差和角度的大小确定各自的步长，以增量的方式发送给机器人控制器，控制机器人沿焊缝运动及调整摄像机的取像方位。循环发送增量消除偏差并调整摄像机角度后，读取图像处理和特征提取的结果进行下一次控制。同时，从机器人控制器读出机器人的位置值以及传感器中的伺服电机的角度值，记录用焊缝偏差值修正后机器人坐标值以及用焊缝角度修正后伺服电机的角度值。
(5)步骤(3)、(4)同时运行，步骤(4)按步骤(3)的结果控制机器人，直到焊缝结束或手动停止跟踪。
(6)根据第一个记录的坐标值，控制机器人回到焊缝的起始点，准备焊接。
如果在传感器上放置半导体激光器，利用三角测量法获得焊缝的高度信息，自主跟踪三维曲线焊缝。
本发明应用在焊接机器人上，能够实现焊缝的自主跟踪，自动生成焊缝在机器人基坐标系下的坐标。可以使焊接机器人摆脱传统的示教工作模式，直接应用自主跟踪生成的焊缝坐标进行焊接，这对于提高小批量焊接生产的生产率和焊接质量具有很大的意义，而且特别适合极限环境(核电站、太空等)下的焊接。使用本发明可以生成曲线焊缝的坐标，且焊缝曲线可以是闭合的，这使得本发明适合大型闭合曲线焊缝的焊接。此外使用本发明为在焊接曲线焊缝时进行利用被动视觉进行熔透控制提供了便利，因为使用本发明对摄像机的取像位置规划后，焊接时熔池在摄像机中所成的像的方位基本不变。
具体实施方式
以下结合实施例对本发明方法作进一步的理解，实施例采用的焊接机器人伺服双目视觉传感器包括：伺服电机、同步带传动系统、两个小型CCD摄像机、气动系统、减光和滤光系统、内外两个空心轴、端盖及各种支架。同步带传动系统包括小齿轮、同步带和大齿轮，气动系统包括一个电磁气阀和两个气缸。减光及滤光系统包括减光镜片、滤光镜片以及镜片支架、连杆及滑杆和支架。其特点是CCD摄像机可绕焊枪作可控角度旋转以保持需要的取像方位以及自动加载或移开滤光片和减光片。传感器上的伺服电机作为机器人的外部轴受机器人的控制器管理，软件接口为主控计算机通过向机器人发送增量数据，控制机器人运动和CCD摄像机绕焊枪转动，且可以读取机器人的位姿值和传感器上伺服电机的角度值，控制周期为16mm。主控计算机和机器人控制器之间采用CAN总线进行通讯。CCD摄像机的镜头焦距为4.8mm。
跟踪时，规定在焊缝起点处，CCD摄像机位于y轴的正方向上，机器人控制焊枪在基坐标系y轴方向上，先沿正方向运动。
步骤(1)，利用工业机器人提供的工具点校准功能，对焊接机器人控制点(焊枪尖端点)进行精确标定。
步骤(2)，在跟踪时工件将固定水平工作台上，焊枪与工件垂直，钨极尖与工件间的距离保持在5mm左右，在此基础上对摄像机进行简单的标定，标定枪失点在图像上的位置点，标定在枪尖附近图像纵轴方向上单位象素对应的真实尺寸值，以及标定传感器中伺服电机的单位角度值所对应图像中的角度。标定后，标定结果写进程序中。
步骤(3)，用图像采集卡，把CCD摄像机的图像转化为数字图像，循环采集到内存中，图像大小可以300×400象素。在该图像中图像处理的区域为枪尖点前方一小段焊缝的图像，大小可以为140×140象素，获得焊缝的中心线，并进行特征提取，求取焊缝偏差和焊缝角度，根据每桢图像处理后的特征判断焊缝是否结束。把处理区域的图像和未处理区域的图像一起显示，这样可以直观的显示跟踪的效果。
步骤(4)，根据焊缝偏差和角度，以增量的方式发送给机器人控制器，控制机器人的基本策略是当焊缝偏差为零时，使机器人沿焊缝方向以恒定的速度V前进，当有偏差时，机器人向前运动的同时，在机器人基坐标系的x轴方向上，以速度Vx0消除焊缝偏差在x轴方向上的分量，焊缝偏差的方向与x轴的夹角由传感器中伺服电机的角度确定。为了提高消除偏差的速度与精度，当偏差在x轴上的分量较大时，把Vx0设定为较大值；当较小时，把Vx0设定为较小值。根据焊缝角度调整摄像机的角度使焊缝角度调整到±5°范围内，角度的步长同样采用当焊缝较大时，把步长设定为较大值的原则。
步骤(5)，(3)(4)同时运行，步骤(4)按步骤(3)的结果控制机器人，直到焊缝结束和手动停在跟踪；
步骤(6)，根据第一点记录点的坐标值，控制机器人回到焊缝的起始点，准备焊接。
本发明方法中的步骤(3)、(4)、(5)、(6)，均在主控计算机中用编程的方式实现。在步骤(4)中记录用焊缝偏差值修正后机器人坐标值以及用焊缝角度修正后伺服电机的角度值采用多媒体定时器技术，以200ms为时间间隔定时记录。步骤(5)中的步骤(3)和步骤(4)同时运行，在编程中采用多线程技术实现。
以本发明的方法，对低碳钢和锻铝的对接“S”型焊缝进行跟踪试验，缝隙宽度为1mm，生成的焊缝坐标值与实际焊缝坐标值的偏差小于0.3mm，焊缝在图像中与横轴的角度小于5°，选用大焦距的镜头可以进一步提高精度。该方法实用性好，获得的焊缝坐标精度高。
当使用摄像机位置不能运动的一般传感器时，只要在本发明方法中稍作改动，在步骤(2)中加上焊枪的轴线与摄像机的轴线在同一平面上且该平面与机器人基坐标系的x轴垂直的限定，并在(4)中不对传感器的伺服电机进行控。使用本方法也能自主跟踪一些曲线焊缝。
Claims (3)
1、一种焊缝自主跟踪方法，其特征在于，在普通室内光源照射下，使用焊缝斜前方CCD摄像机，持续获取枪尖前方一小段焊缝的图像，在主控计算机进行图像处理获取枪尖与焊缝间的偏差以及这小段焊缝的角度信息，根据这些信息控制机器人沿焊缝前进，并通过传感器上的伺服电机调整摄像机的取像方位，同时定时记录用焊缝偏差值修正后机器人坐标值以及用焊缝角度修正后伺服电机的角度值，生成焊缝在机器人基坐标系下的坐标以及摄像机在需要取像方位时伺服电机的角度值。
2、根据权利要求1所述的焊缝自主跟踪方法，其特征是，通过步骤对其作进一步限定：
(1)据“五点标定法”对焊接机器人控制点即焊枪尖端点进行精确标定；
(2)对摄像机进行简单的标定：包括标定枪尖点在图像上的位置点，在枪尖附近图像纵轴方向上单位象素对应的真实尺寸值，以及传感器中伺服电机的单位角度值所对应图像中的角度；
(3)对焊缝前方一小段图像进行处理，获得焊缝的中心线，并进行特征提取，求取焊缝偏差和焊缝角度，此外根据每桢图像处理后的特征判断焊缝是否结束；
(4)根据焊缝偏差和角度，以增量的方式发送给机器人控制器，控制机器人沿焊缝运动及调整摄像机的取像方位，并从机器人控制器读出机器人的位置值以及传感器中的伺服电机的角度值，记录用焊缝偏差值修正后机器人坐标值以及用焊缝角度修正后伺服电机的角度值；
(5)步骤(3)(4)同时运行，步骤(4)按步骤(3)的结果控制机器人，直到焊缝结束和手动停在跟踪；
(6)根据第一点记录点的坐标值，控制机器人回到焊缝的起始点，准备焊接。
3、根据权利要求1所述的焊缝自主跟踪方法，其特征是，或者在传感器上放置半导体激光器，利用三角测量法获得焊缝的高度信息，自主跟踪三维曲线焊缝。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 200410067327 CN1289252C (zh) | 2004-10-21 | 2004-10-21 | 焊缝自主跟踪方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN 200410067327 CN1289252C (zh) | 2004-10-21 | 2004-10-21 | 焊缝自主跟踪方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN1600488A CN1600488A (zh) | 2005-03-30 |
| CN1289252C true CN1289252C (zh) | 2006-12-13 |
Family
ID=34666579
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN 200410067327 Expired - Fee Related CN1289252C (zh) | 2004-10-21 | 2004-10-21 | 焊缝自主跟踪方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN1289252C (zh) |
Families Citing this family (31)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN100407222C (zh) * | 2006-09-14 | 2008-07-30 | 上海交通大学 | 基于局部图像处理的对接类型焊缝识别方法 |
| JP4933935B2 (ja) * | 2007-03-28 | 2012-05-16 | 株式会社神戸製鋼所 | 片面溶接装置および片面溶接方法 |
| CN101474733B (zh) * | 2009-01-16 | 2011-07-13 | 山东科技大学 | 集装箱顶部加强板焊接方法及焊接机器人 |
| CN101690989B (zh) * | 2009-09-28 | 2012-07-04 | 昆山华恒工程技术中心有限公司 | 电弧摆动焊缝跟踪机器人的焊缝跟踪方法 |
| CN102003955B (zh) * | 2010-09-17 | 2014-06-18 | 江门市蒙德电气股份有限公司 | 基于图像分析的位置检测传感装置及其位置检测方法 |
| CN102059435B (zh) * | 2010-12-14 | 2012-09-19 | 东南大学 | 带有线结构光型视觉传感器的纵缝焊接专机及其控制方法 |
| CN102284769A (zh) * | 2011-08-05 | 2011-12-21 | 上海交通大学 | 基于单目视觉传感的机器人初始焊位识别系统及方法 |
| JP5892168B2 (ja) * | 2011-08-10 | 2016-03-23 | 株式会社安川電機 | ロボットシステム |
| CN102950365A (zh) * | 2011-08-30 | 2013-03-06 | 昆山工研院工业机器人研究所有限公司 | 一种激光视觉传感头与焊枪手眼关系的补偿方法 |
| CN102922094B (zh) * | 2012-10-09 | 2014-12-10 | 上海工程技术大学 | 一种基于热输入的超小尺度焊缝跟踪方法 |
| CN103252560B (zh) * | 2013-03-22 | 2016-01-06 | 广西机电职业技术学院 | 基于激光视觉传感的焊缝自动跟踪方法 |
| CN104209629B (zh) * | 2013-06-05 | 2016-02-10 | 中国石油天然气集团公司 | 一种管道多点同步自动焊旋转电弧模糊控制跟踪方法 |
| CN104002021A (zh) * | 2014-06-06 | 2014-08-27 | 哈尔滨工业大学 | 用于多层多道焊道自动识别与跟踪的装置 |
| EP2963380B2 (de) * | 2014-07-04 | 2025-06-25 | Georg Fischer Rohrleitungssysteme AG | Berührungsloses Überprüfen einer Stumpfschweissung |
| CN104057202B (zh) * | 2014-07-11 | 2016-04-13 | 华南理工大学 | 基于fpga的远程监控移动式机器人自主焊接系统及方法 |
| CN104625311B (zh) * | 2015-01-24 | 2016-08-03 | 江苏智航新能源有限公司 | 一种跟踪焊缝位置的焊炬位移控制方法 |
| CN104985289B (zh) * | 2015-07-31 | 2017-04-12 | 华南理工大学 | 基于激光传感器的焊缝自动跟踪测试装置及其测试方法 |
| CN105798431B (zh) * | 2016-05-27 | 2018-09-21 | 天津智通机器人有限公司 | 弧焊机器人焊接的曲线在线焊缝跟踪方法 |
| CN107805698B (zh) * | 2016-08-09 | 2019-06-14 | 南通大学 | 一种焊后冲击机器人轨迹跟踪测控系统 |
| CN106392304B (zh) * | 2016-12-22 | 2019-02-15 | 河北省自动化研究所 | 一种激光辅助焊缝智能寻迹系统及方法 |
| CN106735749B (zh) * | 2016-12-22 | 2019-10-11 | 河北省自动化研究所 | 一种激光辅助焊缝智能寻迹系统 |
| CN107175406B (zh) * | 2017-05-19 | 2019-09-17 | 大族激光科技产业集团股份有限公司 | 焊接轨迹的控制方法和系统 |
| CN107442900A (zh) * | 2017-08-04 | 2017-12-08 | 淮安信息职业技术学院 | 一种激光视觉焊缝跟踪方法 |
| CN109483017A (zh) * | 2018-10-23 | 2019-03-19 | 东莞理工学院 | 一种基于图像识别的焊缝跟踪系统及其优化方法 |
| CN109243284A (zh) * | 2018-10-31 | 2019-01-18 | 西安长峰机电研究所 | 一种铝合金薄板拼焊焊缝示教式自动跟踪装置 |
| CN110328432A (zh) * | 2019-04-03 | 2019-10-15 | 广州文冲船厂有限责任公司 | 用于实现d型吊环自动焊的焊缝检测方法 |
| CN110315249A (zh) * | 2019-06-28 | 2019-10-11 | 中国地质大学（武汉） | 基于线激光扫描的空间直角折线焊缝拟合系统 |
| CN111375945B (zh) * | 2020-01-15 | 2023-07-21 | 吉林大学 | 焊缝轨迹自动识别的龙门式三轴焊接装置及焊接方法 |
| CN112746812A (zh) * | 2021-01-22 | 2021-05-04 | 安百拓（南京）建筑矿山设备有限公司 | 凿岩台车照明摄像随动系统、控制方法及凿岩台车 |
| CN114101851B (zh) * | 2021-12-30 | 2022-11-01 | 华中科技大学 | 一种用于阀体零件的多焊缝填充自调节方法、系统及装置 |
| CN114669935B (zh) * | 2022-04-28 | 2024-02-06 | 西门子（中国）有限公司 | 物料的焊接方法、装置和计算机可读介质 |
-
2004
- 2004-10-21 CN CN 200410067327 patent/CN1289252C/zh not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| CN1600488A (zh) | 2005-03-30 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN1289252C (zh) | 焊缝自主跟踪方法 | |
| CN112959329B (zh) | 一种基于视觉测量的智能控制焊接系统 | |
| Geng et al. | A novel seam extraction and path planning method for robotic welding of medium-thickness plate structural parts based on 3D vision | |
| CN111618396A (zh) | 基于视觉表征的多层多道焊接装置及焊接方法 | |
| CN105033419B (zh) | 基于熔池图像焊缝跟踪的移动式焊接机器人装置 | |
| CN104400279B (zh) | 基于ccd的管道空间焊缝自动识别与轨迹规划的方法 | |
| CN1319704C (zh) | 焊接机器人伺服双目视觉传感器 | |
| CN100460166C (zh) | 焊接机器人多功能双目视觉传感器及其标定方法 | |
| CN113102880A (zh) | 一种基于视觉示教的线激光焊缝自动跟踪系统及方法 | |
| Zhou et al. | Autonomous acquisition of seam coordinates for arc welding robot based on visual servoing | |
| CN105562975B (zh) | 自适应双目视觉传感的波纹板焊缝跟踪监测与控制系统 | |
| CN116175035A (zh) | 一种基于深度学习的钢结构高空焊接机器人智能焊接方法 | |
| CN111390351A (zh) | 焊枪位姿实时变化的自动焊接装置及焊接方法 | |
| CN112958959A (zh) | 一种基于三维视觉的自动化焊接和检测方法 | |
| CN106271081A (zh) | 三坐标直角机器人线激光焊缝自动跟踪系统及其跟踪方法 | |
| CN112191993A (zh) | 一种氩弧焊焊缝跟踪系统及方法 | |
| CN114654465A (zh) | 一种基于线激光结构光视觉传感的焊缝跟踪提取方法 | |
| CN102029463A (zh) | 基于视觉传感的管道mig/mag打底焊焊缝纠偏控制装置 | |
| CN111168288B (zh) | 一种双环焊缝激光视觉跟踪系统及跟踪方法 | |
| CN119681391B (zh) | 基于视觉传感的填丝gtaw横向填丝位置实时控制方法 | |
| CN117300301A (zh) | 一种基于单目线激光的焊接机器人焊缝跟踪系统与方法 | |
| CN115716154A (zh) | 一种多层多道焊缝自动寻位与实时监控的方法及装置 | |
| CN116571852A (zh) | 一种机器人螺柱自动焊接方法和系统 | |
| CN201511216U (zh) | 具有自动识别焊道功能的自动化焊接装置 | |
| CN119237886B (zh) | 机器人横向gtaw钢管对接焊丝、焊枪、电弧姿态控制方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| EE01 | Entry into force of recordation of patent licensing contract |
Assignee: Yizheng Shendi Industry Development Co., Ltd Assignor: Shanghai Jiao Tong University Contract fulfillment period: 2009.6.30 to 2014.6.30 contract change Contract record no.: 2009320001356 Denomination of invention: Method for autonomous tracking welding line Granted publication date: 20061213 License type: Exclusive license Record date: 2009.8.4 |
|
| LIC | Patent licence contract for exploitation submitted for record |
Free format text: EXCLUSIVE LICENSE; TIME LIMIT OF IMPLEMENTING CONTACT: 2009.6.30 TO 2014.6.30; CHANGE OF CONTRACT Name of requester: YIZHENG SHENDI INDUSTRY DEVELOPMENT CO., LTD. Effective date: 20090804 |
|
| C17 | Cessation of patent right | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20061213 Termination date: 20121021 |