CN102303190A - 线激光视觉跟踪平面对接焊缝方法 - Google Patents

线激光视觉跟踪平面对接焊缝方法 Download PDF

Info

Publication number
CN102303190A
CN102303190A CN201110220902A CN201110220902A CN102303190A CN 102303190 A CN102303190 A CN 102303190A CN 201110220902 A CN201110220902 A CN 201110220902A CN 201110220902 A CN201110220902 A CN 201110220902A CN 102303190 A CN102303190 A CN 102303190A
Authority
CN
China
Prior art keywords
coordinate
theta
laser
point
striation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201110220902A
Other languages
English (en)
Other versions
CN102303190B (zh
Inventor
白瑞林
孟伟
李龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangnan University
Original Assignee
Jiangnan University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangnan University filed Critical Jiangnan University
Priority to CN2011102209022A priority Critical patent/CN102303190B/zh
Publication of CN102303190A publication Critical patent/CN102303190A/zh
Application granted granted Critical
Publication of CN102303190B publication Critical patent/CN102303190B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明针对焊接现场的复杂情况,提出一种线激光视觉跟踪平面对接焊缝方法。搭建了焊缝跟踪系统,建立了系统各个部分的坐标系模型,采用棋盘格靶标和点激光器完成系统结构标定;线激光被动扫描焊缝,焊缝中心检测技术稳定准确定位激光焊缝中心;用户通过设定延时时间,灵活改变焊点和图像检测距离。该方法可以有效避免弧光,飞溅对图像质量的影响,有效抵抗激光条的微小断裂,在线稳定准确的实现平面对接焊缝的自动跟踪。对实现焊接自动化具有重要意义。

Description

线激光视觉跟踪平面对接焊缝方法
技术领域
本发明涉及一种线激光视觉跟踪平面对接焊缝方法,用于自动跟踪平面对接焊缝。
背景技术
焊接作为材料加工的一种重要手段在工业生产中得到广泛应用。由于诸多因素的推动,如焊接质量的稳定性、应用的灵活性、操作的安全性及经济性等,焊接过程自动化、机器人化已成为趋势。调查表明焊接机器人在制造业技术改造、提高焊接质量、减少工人劳动强度、改善焊接劳动条件等方面显示了比较高的优越性。随着机械、电力与材料等行业的发展,焊接技术已经成为一种非常重要的金属热加工技术。现代化生产对焊接技术提出了进一步的要求,提高效率、优化质量、改善劳动条件等成为必然,焊接自动化就是这种要求的具体体现。工业发达国家如美国、日本、德国的焊接自动化、机械化程度达60%~70%,而我国仅仅为20%~30%。因此,发展和应用新型焊接自动化技术对我国国民经济起到巨大的作用,而焊缝自动跟踪系统正是焊接自动化研究的一个重要方面。
目前,焊缝自动跟踪常用的方法是:给定轨迹的目标控制方式或监视焊接点的图像处理方法,前者费时费力,降低生产效率;后者增大了图像处理的难度,影响跟踪精度。主动视觉法是一种利用辅助光源,并基于三角测量原理的测量方法。其光路系统主要由CCD、带通滤光片、激光源和圆柱透镜组成,CCD和光源成已知角度刚性安装在机架上。在进行焊缝跟踪时,激光光源发出的光经过圆柱透镜形成一个平面光照射在工件表面上,这时在焊缝上形成一条宽度很窄的光带。光带经过反射或漫反射,通过带通滤光片,把不需要的波长光过滤掉,最后进入CCD摄像机成像。由于辅助光源是可控的,所获取的图像受环境的干扰可去掉,真实性好,不仅能检测出焊缝的中心位置,并且适合于不同的焊缝和各种焊接方法。
发明内容
本发明的目的是提供一种线激光视觉跟踪平面对接焊缝方法,实现在实际焊接现场利用激光扫描平面对接焊缝,视觉采集扫描图像,利用标定完成的坐标系转换关系,完成对平面对接焊缝的跟踪,实现焊接自动化。
按照本发明提供的技术方案,所述线激光视觉跟踪平面对接焊缝方法如下:
第一步,提取棋盘靶标角点,匹配角点及其世界坐标,标定焊接平面和图像平面的投影矩阵H1;
第二步,控制机器臂利用图像采集设备获取4个以上点激光器的像点,得到像点的图像坐标并记录相应位置的机器臂坐标,进一步得到机器臂坐标系到焊接平面的投影矩阵H2;
第三步,设定延时跟踪的延时时间Ts,平动平台的移动速度v,采集线激光光条进行细化处理,对细化后的光条投影,得到焊缝中心,利用矩阵H1,H2转换焊缝中心为机器臂坐标系,利用Ts*v对坐标值进行修正,将该坐标值放入轨迹缓存区;达到设定延时时间后,从轨迹缓存区取坐标送入机器臂焊枪控制器,控制焊枪跟踪焊缝,并实时刷新轨迹缓存区。
所述第一步的具体方法为:
2.1、利用改进的Harris算法提取棋盘靶标角点得到所有角点坐标m,对角点做霍夫变换,得到霍夫变换矩阵ρ(i,θ);
2.2、任意θ方向:
ρmax(θ)=max(ρ(i,θ)),i∈[1,N=R×C],ρmin(θ)=min(ρ(i,θ)),i∈[1,N=R×C];
2.3、任意θ方向,区间划分有两种方式:
①分ρ(θ)为C个区间,各个区间为:
[ ρ min ( θ ) - L ( θ ) 2 + j * L ( θ ) , ρ min ( θ ) - L ( θ ) 2 + ( j + 1 ) * L ( θ ) ] , j = 0,1 , . . . C - 1 ; L ( θ ) = ( ρ max ( θ ) - ρ min ( θ ) ) / C
②分ρ(θ)为R个区间,各个区间为:
[ ρ min ( θ ) - L ( θ ) 2 + j * L ( θ ) , ρ min ( θ ) - L ( θ ) 2 + ( j + 1 ) * L ( θ ) ] , j = 0,1 , . . . R - 1 ; L ( θ ) = ( ρ max ( θ ) - ρ min ( θ ) ) / R
记各个区间的中值为Mid(j);
所述第二步中按照给定的阈值自动选择其中一种区间划分方式;
2.4、各个区间的标准差D(θ,j),区间方差和
Figure BDA0000080833460000023
Dmin(θ)=D(θ0),在最佳投影方向θ0,D(θ)取得最小值;即D(θ)的最小值Dmin(θ)能够确定θ0;若在第一步中选择第一种区间划分方式获得的θ0为最佳列投影角θ0c,否则为最佳行投影角θ0r
2.5、对最佳投影角θ0c或θ0r列的ρ值利用K-means算法进行自动聚类,以Mid(j)为各类的初始聚类中心进行聚类;取各类均值,按大小排序完成行或列分类。
2.6、对各类内角点计算l=(X^2+Y^2),对l按照大小排序完成行或列分类;至此确定全部角点的行、列值,实现角点m和世界坐标M的完全匹配;
2.7、M=H1*m利用最小二乘解得到H1=Mm’(mm’)-1
第二步中标定机器臂坐标系和焊接平面之间投影矩阵H2的方法为:
3.1、利用点激光器标记焊枪枪头位置,采集点激光光斑,利用边缘算子得到光斑边缘,利用最小二乘法对边缘进行椭圆拟合,得到圆心坐标;移动机器臂得到至少4个激光光斑坐标矩阵mlaser同时记录相应的机器人坐标Mrt
3.2、Mrt=H1*H2*mlaser其中仅H2未知,解得H1*H2=Mrtmlaser’(mlasermlaser’)-1
所述第三步的具体方法为:
4.1、采集激光光条图像,采用自动双峰法对图像进行二值化,凸显光条,对光条区域为中心的8邻域,记中心点为p1,其邻域的8个点顺时针绕中心点分别为p2,p3,…,p9,其中p2在p1的上方,首先标记同时满足下列条件的边界点:
①2≤N(P1)≤6;
②S(P1)=1;
③P2*P4*P6=0;
④P4*p6*p8=0;
其中,N(P1)是p1的非零邻点的个数;S(p1)是以p2,p3,...,p9,p2为序时这些点的值从0到1变化次数;当对所有的边界点都检查完毕后,将所有的标记点除去;算法反复迭代直到没有点满足标记条件,完成光条细化;
4.2、激光光条在焊缝处出现断裂,把细化后的光条垂直投影,统计各个坐标位置投影点个数,检测符合条件的连续零区段,确定该区段端点,将端点对应到细化光条上的点,分别对对应点取x坐标和y坐标的均值,得到焊缝中心点m_dot,则该焊缝中心点在机器臂坐标系中的位置为Mrt_dot=H1*H2*m_dot
4.3、对Mrt_dot进行坐标修正,对平动平面运动方向平行的坐标Mrt_dot(θ)±Ts*v,符号由平动平台运动方向决定:当坐标方向和运动方向一致取加号,反之取减号;将修正完成的坐标点存入轨迹缓存区;
4.4、当达到延时时间后,处理器遵循先入先出的原则,取坐标送入机器臂焊枪控制器,开始实时跟踪焊缝,并刷新轨迹缓存区。
本发明线激光视觉跟踪平面对接焊缝方法与已有技术相比具有以下优点:本发明的延时跟踪技术,使得图像采集点和焊枪跟踪点隔离,从而避免了焊接现场烟尘,弧光对图像质量的影响,焊缝轨迹检测更加稳定;延时时间可由用户自行设定,可按需求自由改变图像采集点和焊枪跟踪点的隔离距离。投影中轴变换后的细化光条,可以在有效抵抗光条细微断裂的情况,更稳定的提取光条中心;标定技术,准确实现相机坐标系,焊缝平面坐标系,机器臂坐标系的转换,保证系统跟踪稳定可靠。
附图说明
图1线激光平面对接焊缝跟踪系统界面。
图2线激光平面对接焊缝系统结构图。
图3线激光平面对接焊缝系统标定原理图。
图4焊缝中心检测原理图。
图5标定所用的棋盘靶标示意图。
具体实施方式
为了提高平面对接焊缝焊接的自动化水平,本发明开发一种线激光视觉跟踪平面对接焊缝方法。该标定技术算法代码量小、运算速度快、精度高、实时性强、稳定性好,能够改善传统测量的弊端、降低成本,提高生产效率。
本发明利用带通滤光片和CCD采集激光光条扫描焊缝图像,采用中轴变换算法对光条进行细化,对细化后的骨架进行投影,通过检测连续零区段确定焊缝位置,通过对应连续零区域端点,确定焊缝中心;自动提取棋盘格角点坐标并匹配其自身对应世界坐标,完成相机和焊缝平面的标定,利用点激光器标记焊枪坐标,提取激光光点的图像坐标,记录与之对应的机器臂坐标,完成机器臂坐标系和焊缝平面坐标的标定;修订焊缝中心坐标存入轨迹缓冲区,达到延时时间后,从缓存区提取轨迹坐标送入机器臂焊枪控制器进行实时跟踪并刷新轨迹缓存区。
下面结合附图和实施例对本发明作进一步说明。
本发明所述焊缝中心检测包括利用带通滤光片和CCD采集激光光条扫描焊缝图像。采用中轴变换原理对激光光条进行细化处理,得到光条细化中心。对光条细化中心进行单向投影,统计各个像素坐标位置的投影像素点个数。查找统计数组的连续零区段,确定连续零区段的端点并对应到光条的细化中心。对光条的细化中心上的对应点取均值,确定焊缝中心。
本发明所述焊接系统标定包括焊接平面坐标系、图像坐标系的标定和机器臂坐标系、焊接平面坐标系。利用棋盘格角点的图像坐标和与其对应的世界坐标,采用最小二乘法,得到图像平面和焊接平面的投影矩阵;利用点激光器标记焊枪位置,移动机器臂得到四个以上的点激光光点的图像坐标和对应的机器臂坐标系,采用最小二乘法,得到机器臂坐标系和焊接平面的投影矩阵,完成系统标定。
本发明所述延时跟踪技术包括用户设定延时时间,处理器把采集到得光条中心利用投影矩阵转换为机器臂坐标系下的坐标放入轨迹缓存区,当达到延时时间后,处理器遵循先入先出的原则,取坐标送入机器臂焊枪控制器,开始实时跟踪焊缝,并刷新轨迹缓存区。
本发明的工作过程具体说明如下:
线激光平面对接焊缝跟踪系统包括如图1所示的上位机界面,如图2所示的硬件结构。
首先,搭建焊缝跟踪系统,包括:机器臂焊枪1及机器臂焊枪控制器,扫描焊缝的线激光器4,被动扫描的平动平台,图像采集设备2,主控制器;图像采集设备独立固定,图像采集设备通过带通滤光片3获取线激光光条图像,经主控制器得到焊缝中心图像坐标,根据标定参数转换为机器臂坐标送入机器臂焊枪控制器,控制机器臂焊枪进行焊接,如图2所示。其中机器臂焊枪为固定于机器臂上的焊接枪头。
所述线激光视觉跟踪平面对接焊缝方法如下:
第一步,提取棋盘靶标角点,匹配角点及其世界坐标,标定焊接平面和图像平面的投影矩阵H1;
第二步,控制机器臂利用图像采集设备获取4个以上点激光器的像点,利用图像处理方法得到像点的图像坐标并记录相应位置的机器臂焊枪坐标,得到机器臂坐标系到焊接平面的投影矩阵H2;
第三步,设定延时跟踪的延时时间Ts,平动平台的移动速度v,采集线激光光条进行细化处理,对细化的激光光条投影,得到焊缝中心,利用H1,H2转换焊缝中心为机器臂坐标系,利用Ts*v对坐标值进行修正,将该坐标值放入轨迹缓存区;达到设定延时时间后,从轨迹缓存区取坐标送入机器臂焊枪控制器,控制焊枪跟踪焊缝,并实时刷新轨迹缓存区。
所述提取棋盘靶标角点,匹配角点及其世界坐标,标定焊接平面和图像平面的投影矩阵H1包括以下步骤:
(2.1)、如图3,棋盘格标定板6放置于焊接平面7,镜头5采集棋盘标定板6上的棋盘靶标图像,棋盘靶标的具体样式如图5所示。利用改进的Harris算法提取棋盘靶标角点得到所有角点坐标m,对角点做霍夫变换,得到霍夫变换矩阵ρ(i,θ);
所述改进的Harris算法详见“白瑞林,李杜,赵晶晶,孟伟,温振市.一种实用的x型靶标亚像素角点提取方法[J].光学技术,2010,36(4):561-565.”
(2.2)、任意θ方向:
ρmax(θ)=max(ρ(i,θ)),i∈[1,N=R×C],ρmin(θ)=min(ρ(i,θ)),i∈[1,N=R×C]。
(2.3)、任意θ方向,区间划分有两种方式(第二步中按照给定的阈值自动选择其中一种区间划分方式):
①分ρ(θ)为C个区间,各个区间为:
[ ρ min ( θ ) - L ( θ ) 2 + j * L ( θ ) , ρ min ( θ ) - L ( θ ) 2 + ( j + 1 ) * L ( θ ) ] , j = 0,1 , . . . C - 1 ; L ( θ ) = ( ρ max ( θ ) - ρ min ( θ ) ) / C
②分ρ(θ)为R个区间,各个区间为:
[ ρ min ( θ ) - L ( θ ) 2 + j * L ( θ ) , ρ min ( θ ) - L ( θ ) 2 + ( j + 1 ) * L ( θ ) ] , j = 0,1 , . . . R - 1 ; L ( θ ) = ( ρ max ( θ ) - ρ min ( θ ) ) / R
记各个区间的中值为Mid(j)。
(2.4)、各个区间的标准差D(θ,j),“区间方差和”
Figure BDA0000080833460000053
则Dmin(θ)=D(θ0),在最佳投影方向θ0,D(θ)取得最小值。因此只要找到Dmin(θ)即可确定θ0。若在第一步中选择第一种区间划分方式获得的θ0为最佳列投影角θ0c,否则为最佳行投影角θ0r
(2.5)、对最佳投影角θ0c或θ0r列的ρ值利用K-means算法进行自动聚类,为了确保算法准确稳定聚类,以Mid(j)为各类的初始聚类中心进行聚类。取各类均值,按大小排序完成行或列分类。
(2.6)、对各类内角点计算l=(X^2+Y^2),对l按照大小排序完成行或列分类。至此可以全部确定全部角点的行列值,实现角点m和世界坐标M的完全匹配。
(2.7)、M=H1*m利用最小二乘解得到H1=Mm’(mm’)-1
所述标定机器臂坐标系和焊接平面7之间投影矩阵H2的方法包括以下步骤:
(3.1)、利用点激光器8标记机器臂焊枪位置,采集点激光光斑,利用边缘算子得到光斑边缘,利用最小二乘法对边缘进行椭圆拟合,得到圆心坐标。移动机器臂得到至少4个激光光斑坐标矩阵mlaser,同时记录相应的机器人坐标Mrt
(3.2)、Mrt=H1*H2*mlaser其中仅H2未知,解得H1*H2=Mrtmlaser’(mlasermlaser’)-1
所述激光光条中心检测及延时跟踪方法包括以下步骤:
(4.1)、采集激光光条图像,选择自动双峰法对图像进行二值化,凸显光条,对光条区域为中心的8邻域,记中心点为p1,其邻域的8个点顺时针绕中心点分别为p2,p3,……,p9,其中p2在p1的上方,首先标记同时满足下列条件的边界点:
①2≤N(P1)≤6;
②S(P1)=1;
③P2*P4*P6=0;
④P4*p6*p8=0;
其中,N(P1)是p1的非零邻点的个数;S(p1)是以p2,p3,……,p9,p2为序时这些点的值从0→1变化次数。当对所有的边界点都检查完毕后,将所有的标记点除去。算法反复迭代直到没有点满足标记条件,完成光条细化。
(4.2)、如图4,激光光条在待焊接工件12的焊缝处出现断裂,把细化的激光条10垂直投影,得到激光条投影曲线11,统计各个坐标位置投影点个数,检测符合条件的连续零区段(可以抵抗光条的细小断裂),确定该区段端点,将端点对应到细化光条上的点,分别对对应点取x坐标和y坐标的均值,得到焊缝中心点9m_dot,则该焊缝中心点在机器臂坐标系中的位置为Mrt_dot=H1*H2*m_dot
(4.3)、对Mrt_dot进行坐标修正,对平动平面运动方向平行的坐标Mrt_dot(θ)±Ts*v,符号由平动平台运动方向决定:当坐标方向和运动方向一致取加号,反之取减号。将修正完成的坐标点存入轨迹缓存区。
(4.4)、当达到延时时间后,处理器遵循先入先出的原则,取坐标送入机器臂焊枪控制器,开始实时跟踪焊缝,并刷新轨迹缓存区。
本发明针对焊接现场强烈弧光辐射、高温、烟尘、飞溅、表面状态和工件热变形等复杂情况,采用延时跟踪技术。首先利用点激光器标定焊枪位置,确定焊接机器人坐标系和待焊接平面坐标系的投影矩阵;然后利用棋盘格靶标确定图像坐标系和待焊接平面坐标系投影矩阵;设定图像采样处理频率,通过图像细化和光条投影算法获得焊缝中心的图像坐标,根据上述的投影矩阵,转化焊缝中心的图像坐标为焊接机器人坐标,存入轨迹缓存区。设定机器人的延时跟踪时间,当采样时间达到延时跟踪时间,从轨迹缓存区取出数据送给焊接机器人控制器,并刷新轨迹缓存区的数据。避免了焊点弧光辐射,对采集激光扫描图像的影响,获取的焊缝轨迹稳定准确。增加的系统的灵活性和智能性,具有广泛的实用价值。

Claims (4)

1.线激光视觉跟踪平面对接焊缝方法,其特征是:
第一步,提取棋盘靶标角点,匹配角点及其世界坐标,标定焊接平面和图像平面的投影矩阵H1;
第二步,控制机器臂利用图像采集设备获取4个以上点激光器的像点,得到像点的图像坐标并记录相应位置的机器臂坐标,进一步得到机器臂坐标系到焊接平面的投影矩阵H2;
第三步,设定延时跟踪的延时时间Ts,平动平台的移动速度v,采集线激光光条进行细化处理,对细化后的光条投影,得到焊缝中心,利用矩阵H1,H2转换焊缝中心为机器臂坐标系,利用Ts*v对坐标值进行修正,将该坐标值放入轨迹缓存区;达到设定延时时间后,从轨迹缓存区取坐标送入机器臂焊枪控制器,控制焊枪跟踪焊缝,并实时刷新轨迹缓存区。
2.如权利要求1所述的线激光视觉跟踪平面对接焊缝方法,所述第一步的具体方法为:
2.1、利用改进的Harris算法提取棋盘靶标角点得到所有角点坐标m,对角点做霍夫变换,得到霍夫变换矩阵ρ(i,θ);
2.2、任意θ方向:
ρmax(θ)=max(ρ(i,θ)),i∈[1,N=R×C],ρmin(θ)=min(ρ(i,θ)),i∈[1,N=R×C];
2.3、任意θ方向,区间划分有两种方式:
①分ρ(θ)为C个区间,各个区间为:
[ ρ min ( θ ) - L ( θ ) 2 + j * L ( θ ) , ρ min ( θ ) - L ( θ ) 2 + ( j + 1 ) * L ( θ ) ] , j = 0,1 , . . . C - 1 ; L ( θ ) = ( ρ max ( θ ) - ρ min ( θ ) ) / C
②分ρ(θ)为R个区间,各个区间为:
[ ρ min ( θ ) - L ( θ ) 2 + j * L ( θ ) , ρ min ( θ ) - L ( θ ) 2 + ( j + 1 ) * L ( θ ) ] , j = 0,1 , . . . R - 1 ; L ( θ ) = ( ρ max ( θ ) - ρ min ( θ ) ) / R
记各个区间的中值为Mid(j);
所述第二步中按照给定的阈值自动选择其中一种区间划分方式;
2.4、各个区间的标准差D(θ,j),区间方差和
Figure FDA0000080833450000013
Dmin(θ)=D(θ0),在最佳投影方向θ0,D(θ)取得最小值;即D(θ)的最小值Dmin(θ)能够确定θ0;若在第一步中选择第一种区间划分方式获得的θ0为最佳列投影角θ0c,否则为最佳行投影角θ0r
2.5、对最佳投影角θ0c或θ0r列的ρ值利用K-means算法进行自动聚类,以Mid(j)为各类的初始聚类中心进行聚类;取各类均值,按大小排序完成行或列分类。
2.6、对各类内角点计算l=(X^2+Y^2),对l按照大小排序完成行或列分类;至此确定全部角点的行、列值,实现角点m和世界坐标M的完全匹配;
2.7、M=H1*m利用最小二乘解得到H1=Mm’(mm’)-1
3.如权利要求1所述的线激光视觉跟踪平面对接焊缝方法,其特征是第二步中标定机器臂坐标系和焊接平面之间投影矩阵H2的方法为:
3.1、利用点激光器标记焊枪枪头位置,采集点激光光斑,利用边缘算子得到光斑边缘,利用最小二乘法对边缘进行椭圆拟合,得到圆心坐标;移动机器臂得到至少4个激光光斑坐标矩阵mlaser同时记录相应的机器人坐标Mrt
3.2、Mrt=H1*H2*mlaser其中仅H2未知,解得H1*H2=Mrtmlaser’(mlasermlaser’)-1
4.如权利要求1所述的线激光视觉跟踪平面对接焊缝方法,其特征是所述第三步的具体方法为:
4.1、采集激光光条图像,采用自动双峰法对图像进行二值化,凸显光条,对光条区域为中心的8邻域,记中心点为p1,其邻域的8个点顺时针绕中心点分别为p2,p3,…,p9,其中p2在p1的上方,首先标记同时满足下列条件的边界点:
①2≤N(P1)≤6;
②S(P1)=1;
③P2*P4*P6=0;
④P4*p6*p8=0;
其中,N(P1)是p1的非零邻点的个数;S(p1)是以p2,p3,...,p9,p2为序时这些点的值从0到1变化次数;当对所有的边界点都检查完毕后,将所有的标记点除去;算法反复迭代直到没有点满足标记条件,完成光条细化;
4.2、激光光条在焊缝处出现断裂,把细化后的光条垂直投影,统计各个坐标位置投影点个数,检测符合条件的连续零区段,确定该区段端点,将端点对应到细化光条上的点,分别对对应点取x坐标和y坐标的均值,得到焊缝中心点m_dot,则该焊缝中心点在机器臂坐标系中的位置为Mrt_dot=H1*H2*m_dot
4.3、对Mrt_dot进行坐标修正,对平动平面运动方向平行的坐标Mrt_dot(θ)±Ts*v,符号由平动平台运动方向决定:当坐标方向和运动方向一致取加号,反之取减号;将修正完成的坐标点存入轨迹缓存区;
4.4、当达到延时时间后,处理器遵循先入先出的原则,取坐标送入机器臂焊枪控制器,开始实时跟踪焊缝,并刷新轨迹缓存区。
CN2011102209022A 2011-08-03 2011-08-03 线激光视觉跟踪平面对接焊缝方法 Active CN102303190B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2011102209022A CN102303190B (zh) 2011-08-03 2011-08-03 线激光视觉跟踪平面对接焊缝方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2011102209022A CN102303190B (zh) 2011-08-03 2011-08-03 线激光视觉跟踪平面对接焊缝方法

Publications (2)

Publication Number Publication Date
CN102303190A true CN102303190A (zh) 2012-01-04
CN102303190B CN102303190B (zh) 2013-11-20

Family

ID=45377157

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011102209022A Active CN102303190B (zh) 2011-08-03 2011-08-03 线激光视觉跟踪平面对接焊缝方法

Country Status (1)

Country Link
CN (1) CN102303190B (zh)

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102794763A (zh) * 2012-08-31 2012-11-28 江南大学 基于线结构光视觉传感器引导的焊接机器人系统标定方法
CN103192165A (zh) * 2013-03-20 2013-07-10 黑龙江科技学院 基于视觉跟踪的六自由度焊接机器人
CN103286440A (zh) * 2013-06-17 2013-09-11 沈阳飞机工业(集团)有限公司 激光切割零件的快速定位方法
CN103878483A (zh) * 2012-12-20 2014-06-25 通用汽车环球科技运作有限责任公司 远程激光焊接
CN103955927A (zh) * 2014-04-26 2014-07-30 江南大学 一种基于激光视觉的角焊缝自动跟踪方法
CN104607848A (zh) * 2015-01-30 2015-05-13 上海气焊机厂有限公司 角型焊道定位方法
CN104613899A (zh) * 2015-02-09 2015-05-13 淮阴工学院 一种全自动的结构光手眼三维测量系统标定方法
CN104751912A (zh) * 2013-12-30 2015-07-01 中核武汉核电运行技术股份有限公司 一种基于视角修正的视频测量方法
WO2015120734A1 (zh) * 2014-02-17 2015-08-20 华南理工大学 基于机器视觉的焊接轨迹校正专用测试装置及方法
CN105157603A (zh) * 2015-07-29 2015-12-16 华南理工大学 一种线激光传感器及其三维坐标数据的计算方法
CN105171258A (zh) * 2015-08-12 2015-12-23 上海先德机械工程有限公司 钢板拼接直缝焊接方法及系统
CN105618976A (zh) * 2016-03-21 2016-06-01 江门健维自动化设备有限公司 一种智能焊缝系统
CN105783726A (zh) * 2016-04-29 2016-07-20 无锡科技职业学院 一种基于线结构光视觉检测的曲线焊缝三维重建方法
CN106346129A (zh) * 2016-11-23 2017-01-25 中国计量大学 一种基于激光焊缝跟踪传感器的机器人焊接运动控制方法
CN107160717A (zh) * 2017-06-22 2017-09-15 中国航空工业集团公司基础技术研究院 一种复合材料蒙皮结构机加工艺线的制备方法
CN107378246A (zh) * 2016-05-16 2017-11-24 大族激光科技产业集团股份有限公司 一种修正激光焊接轨迹的方法及系统
CN108596930A (zh) * 2018-04-23 2018-09-28 西安交通大学 基于天牛须算法和数学形态学的射线图像焊缝提取方法
CN109719438A (zh) * 2017-10-31 2019-05-07 无锡威卓智能机器人有限公司 一种工业焊接机器人焊缝自动跟踪方法
CN109746597A (zh) * 2017-11-08 2019-05-14 大族激光科技产业集团股份有限公司 应用相机跟踪焊缝的方法、系统以及焊接设备
CN109986201A (zh) * 2018-01-03 2019-07-09 大族激光科技产业集团股份有限公司 焊缝的跟踪检测方法、装置、存储介质以及激光焊接设备
CN111421233A (zh) * 2020-06-15 2020-07-17 蓝箭航天空间科技股份有限公司 航天运载器的发动机推力室焊接控制装置和方法
CN111683787A (zh) * 2018-08-01 2020-09-18 深圳配天智能技术研究院有限公司 一种自动焊接装置的标定件、标定组件以及标定系统
CN115055806A (zh) * 2022-08-11 2022-09-16 先富斯技术(武汉)有限公司 基于视觉跟踪的焊接轨迹跟踪方法及装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1508527A (zh) * 2002-12-17 2004-06-30 北京航空航天大学 一种透镜畸变参数的标定方法
CN101059340A (zh) * 2007-05-18 2007-10-24 东南大学 基于立体视觉和激光的车辆轮距测量方法
CN101377405A (zh) * 2008-07-11 2009-03-04 北京航空航天大学 一种空间圆姿态参数和几何参数的视觉测量方法
CN101377404A (zh) * 2008-07-11 2009-03-04 北京航空航天大学 一种基于角度约束的空间圆姿态识别二义性消除方法
CN101419708A (zh) * 2008-12-08 2009-04-29 北京航空航天大学 一种基于一维靶标的结构光参数标定方法
CN101419709A (zh) * 2008-12-08 2009-04-29 北京航空航天大学 一种用于摄像机标定的平面靶标特征点的自动匹配方法
CN101561931A (zh) * 2009-05-26 2009-10-21 上海大学 基于无迹卡尔曼滤波的摄像机标定方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1508527A (zh) * 2002-12-17 2004-06-30 北京航空航天大学 一种透镜畸变参数的标定方法
CN101059340A (zh) * 2007-05-18 2007-10-24 东南大学 基于立体视觉和激光的车辆轮距测量方法
CN101377405A (zh) * 2008-07-11 2009-03-04 北京航空航天大学 一种空间圆姿态参数和几何参数的视觉测量方法
CN101377404A (zh) * 2008-07-11 2009-03-04 北京航空航天大学 一种基于角度约束的空间圆姿态识别二义性消除方法
CN101419708A (zh) * 2008-12-08 2009-04-29 北京航空航天大学 一种基于一维靶标的结构光参数标定方法
CN101419709A (zh) * 2008-12-08 2009-04-29 北京航空航天大学 一种用于摄像机标定的平面靶标特征点的自动匹配方法
CN101561931A (zh) * 2009-05-26 2009-10-21 上海大学 基于无迹卡尔曼滤波的摄像机标定方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
杨文浩等: "嵌入式机器视觉实时定位与测量的方法", 《计算机工程与科学》, vol. 32, no. 7, 31 July 2010 (2010-07-31) *
王忠石等: "棋盘格模板角点的自动识别与定位", 《中国图象图形学报》, vol. 12, no. 4, 30 April 2007 (2007-04-30) *

Cited By (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102794763A (zh) * 2012-08-31 2012-11-28 江南大学 基于线结构光视觉传感器引导的焊接机器人系统标定方法
CN102794763B (zh) * 2012-08-31 2014-09-24 江南大学 基于线结构光视觉传感器引导的焊接机器人系统标定方法
CN103878483A (zh) * 2012-12-20 2014-06-25 通用汽车环球科技运作有限责任公司 远程激光焊接
CN103192165A (zh) * 2013-03-20 2013-07-10 黑龙江科技学院 基于视觉跟踪的六自由度焊接机器人
CN103286440A (zh) * 2013-06-17 2013-09-11 沈阳飞机工业(集团)有限公司 激光切割零件的快速定位方法
CN104751912A (zh) * 2013-12-30 2015-07-01 中核武汉核电运行技术股份有限公司 一种基于视角修正的视频测量方法
CN104751912B (zh) * 2013-12-30 2017-11-28 中核武汉核电运行技术股份有限公司 一种基于视角修正的视频测量方法
WO2015120734A1 (zh) * 2014-02-17 2015-08-20 华南理工大学 基于机器视觉的焊接轨迹校正专用测试装置及方法
CN103955927B (zh) * 2014-04-26 2016-12-07 江南大学 一种基于激光视觉的角焊缝自动跟踪方法
CN103955927A (zh) * 2014-04-26 2014-07-30 江南大学 一种基于激光视觉的角焊缝自动跟踪方法
CN104607848B (zh) * 2015-01-30 2016-04-27 上海气焊机厂有限公司 角型焊道定位方法
CN104607848A (zh) * 2015-01-30 2015-05-13 上海气焊机厂有限公司 角型焊道定位方法
CN104613899A (zh) * 2015-02-09 2015-05-13 淮阴工学院 一种全自动的结构光手眼三维测量系统标定方法
CN105157603A (zh) * 2015-07-29 2015-12-16 华南理工大学 一种线激光传感器及其三维坐标数据的计算方法
CN105157603B (zh) * 2015-07-29 2017-12-01 华南理工大学 一种线激光传感器
CN105171258A (zh) * 2015-08-12 2015-12-23 上海先德机械工程有限公司 钢板拼接直缝焊接方法及系统
CN105618976A (zh) * 2016-03-21 2016-06-01 江门健维自动化设备有限公司 一种智能焊缝系统
CN105783726A (zh) * 2016-04-29 2016-07-20 无锡科技职业学院 一种基于线结构光视觉检测的曲线焊缝三维重建方法
CN105783726B (zh) * 2016-04-29 2018-06-19 无锡科技职业学院 一种基于线结构光视觉检测的曲线焊缝三维重建方法
CN107378246A (zh) * 2016-05-16 2017-11-24 大族激光科技产业集团股份有限公司 一种修正激光焊接轨迹的方法及系统
CN106346129A (zh) * 2016-11-23 2017-01-25 中国计量大学 一种基于激光焊缝跟踪传感器的机器人焊接运动控制方法
CN106346129B (zh) * 2016-11-23 2017-11-14 中国计量大学 一种基于激光焊缝跟踪传感器的机器人焊接运动控制方法
CN107160717B (zh) * 2017-06-22 2019-03-19 中国航空工业集团公司基础技术研究院 一种复合材料蒙皮结构机加工艺线的制备方法
CN107160717A (zh) * 2017-06-22 2017-09-15 中国航空工业集团公司基础技术研究院 一种复合材料蒙皮结构机加工艺线的制备方法
CN109719438B (zh) * 2017-10-31 2021-01-26 无锡威卓智能机器人有限公司 一种工业焊接机器人焊缝自动跟踪方法
CN109719438A (zh) * 2017-10-31 2019-05-07 无锡威卓智能机器人有限公司 一种工业焊接机器人焊缝自动跟踪方法
CN109746597A (zh) * 2017-11-08 2019-05-14 大族激光科技产业集团股份有限公司 应用相机跟踪焊缝的方法、系统以及焊接设备
CN109986201A (zh) * 2018-01-03 2019-07-09 大族激光科技产业集团股份有限公司 焊缝的跟踪检测方法、装置、存储介质以及激光焊接设备
CN109986201B (zh) * 2018-01-03 2021-10-08 大族激光科技产业集团股份有限公司 焊缝的跟踪检测方法、装置、存储介质以及激光焊接设备
CN108596930A (zh) * 2018-04-23 2018-09-28 西安交通大学 基于天牛须算法和数学形态学的射线图像焊缝提取方法
CN111683787A (zh) * 2018-08-01 2020-09-18 深圳配天智能技术研究院有限公司 一种自动焊接装置的标定件、标定组件以及标定系统
CN111421233A (zh) * 2020-06-15 2020-07-17 蓝箭航天空间科技股份有限公司 航天运载器的发动机推力室焊接控制装置和方法
CN115055806A (zh) * 2022-08-11 2022-09-16 先富斯技术(武汉)有限公司 基于视觉跟踪的焊接轨迹跟踪方法及装置
CN115055806B (zh) * 2022-08-11 2022-11-18 先富斯技术(武汉)有限公司 基于视觉跟踪的焊接轨迹跟踪方法及装置

Also Published As

Publication number Publication date
CN102303190B (zh) 2013-11-20

Similar Documents

Publication Publication Date Title
CN102303190B (zh) 线激光视觉跟踪平面对接焊缝方法
CN104708239B (zh) 基于ccd的大型海洋管道起始点识别与定位方法
CN108747132B (zh) 自主移动焊接机器人视觉控制系统
CN104084669B (zh) 一种基于解耦检测的环缝视觉检测方法
CN105458462A (zh) 一种变间隙梯形焊缝多参数同步视觉检测跟踪方法
CN102794763B (zh) 基于线结构光视觉传感器引导的焊接机器人系统标定方法
CN204414117U (zh) 一种视觉定位焊接机器人
CN105300296B (zh) 一种激光拼焊曲面拼缝测量方法及其实现装置
CN105728972A (zh) 一种凹凸形变角焊缝自适应跟踪控制装置及其控制方法
CN109676243A (zh) 基于双线激光结构光的焊缝识别与跟踪系统及方法
Nele et al. An image acquisition system for real-time seam tracking
CN105303560B (zh) 机器人激光扫描式焊缝跟踪系统标定方法
CN102284769A (zh) 基于单目视觉传感的机器人初始焊位识别系统及方法
CN102699534A (zh) 基于扫描式激光视觉传感的厚板窄间隙深坡口激光自动化多层焊焊接方法
CN105458483B (zh) 焊后焊缝跟踪机器人自动纠偏及超声冲击系统
CN110524583A (zh) 基于嵌入式平台的焊缝寻位跟踪3d视觉传感器及跟踪方法
CN102279190B (zh) 一种激光焊接不等厚板焊缝表面缺陷图像检测方法
CN104384765A (zh) 基于三维模型与机器视觉的自动焊接方法及焊接装置
CN108127217B (zh) 螺旋板式换热器端面焊缝自动引导焊接的焊接装置和方法
CN103008881A (zh) 一种基于模板匹配的焊缝跟踪方法
CN112958973A (zh) 一种基于结构光三维视觉的中厚板机器人焊接视觉寻位装置
CN106271081A (zh) 三坐标直角机器人线激光焊缝自动跟踪系统及其跟踪方法
CN106392304A (zh) 一种激光辅助焊缝智能寻迹系统及方法
CN203973025U (zh) 一种基于解耦检测的环缝视觉检测装置
CN205496812U (zh) 一种凹凸形变角焊缝自适应跟踪控制装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20120104

Assignee: Xinje Electronic Co., Ltd.

Assignor: Jiangnan University

Contract record no.: 2015320000029

Denomination of invention: Method for visually tracking plane abut-jointed weld beam by linear laser

Granted publication date: 20131120

License type: Exclusive License

Record date: 20150212