CN105783726A - 一种基于线结构光视觉检测的曲线焊缝三维重建方法 - Google Patents
一种基于线结构光视觉检测的曲线焊缝三维重建方法 Download PDFInfo
- Publication number
- CN105783726A CN105783726A CN201610280356.4A CN201610280356A CN105783726A CN 105783726 A CN105783726 A CN 105783726A CN 201610280356 A CN201610280356 A CN 201610280356A CN 105783726 A CN105783726 A CN 105783726A
- Authority
- CN
- China
- Prior art keywords
- line
- structured light
- mechanical arm
- matrix
- weld
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/002—Measuring arrangements characterised by the use of optical techniques for measuring two or more coordinates
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
本发明提供了一种基于线结构光视觉检测的曲线焊缝三维重建方法,其可有效检测各种焊缝,可靠性高,方法简单,检测效率高;其包括机械臂、线结构光视觉系统,控制器控制连接所述机械臂,所述线结构光视觉系统包括摄像机、线结构光投射器,所述摄像机固定于所述机械臂末端,所述线结构光投射器固定于所述摄像机一侧,且投射于待焊工件表面,所述曲线焊缝三维重建方法的步骤包括系统标定、焊缝检测、焊缝重建,从而重建出完整的三维曲线焊缝。
Description
技术领域
本发明涉及计算机视觉测量技术领域,尤其是用于实现视觉引导下的焊缝检测与三维重建,为机器人自动焊接提供基础,具体为一种基于线结构光视觉检测的曲线焊缝三维重建方法。
背景技术
在智能制造领域,常常需要获取工业制造对象的三维信息,现有的三维检测装置,分为接触式和非接触式两类,而接触式检测装置效率不高,且容易在物体表面产生划痕,因此,近年来以机器视觉为代表的非接触式三维检测装置得到了较多的研究与应用,而通过研究,将焊接机器人配上机器视觉,可以对焊缝进行自动检测,且在视觉标定的基础上,可以实现焊缝的三维检测,为机器人自动焊接提供基础。
随着焊接机器人应用的越来越广泛,研究曲线焊缝的视觉检测与三维重建,以实现机器人自动焊接,在实际生产中具有重要意义,其中单目视觉通常只能得到二维平面信息,而要获得焊缝的三维信息需要采用立体视觉,常用的立体视觉系统有双目视觉和结构光视觉,其对焊缝的检测方法主要是:(1)、采用单目和结构光视觉检测焊缝,其将结构光投射到焊缝上,用单目摄像机拍摄焊缝图像,实现视觉引导的焊接;(2)、采用双目视觉,在自然光照的情况下检测焊缝信息,针对小曲率焊缝,将曲线分成若干段,每段以直线近似,得到焊缝的轨迹;(3)、采用线结构光和两台摄像机构成立体视觉,利用三维重建算法计算焊缝特征点的三维坐标;但上述这些方法大多是针对直线焊缝或小曲率焊缝,而对于曲率较大的复杂焊缝,尚未得到充分研究,如果采用双目视觉,就需要对两幅图像进行匹配,增加了焊缝检测算法的复杂性;或者通过视觉引导的实时焊接,但由于存在弧光、飞溅、电磁干扰等,给焊缝的可靠检测带来了影响,因而焊缝效率也不高。
发明内容
针对上述问题,本发明提供了一种基于线结构光视觉检测的曲线焊缝三维重建方法,其可有效检测各种焊缝,可靠性高,方法简单,检测效率高。
其技术方案是这样的:一种基于线结构光视觉检测的曲线焊缝三维重建方法,其包括机械臂、线结构光视觉系统,控制器控制连接所述机械臂,所述线结构光视觉系统包括摄像机、线结构光投射器,所述摄像机固定于所述机械臂末端,所述线结构光投射器固定于所述摄像机一侧,且投射于待焊工件表面,其特征在于:所述曲线焊缝三维重建方法的步骤如下:
(1)、系统标定:先采用基于靶标的方法标定所述摄像机内外参数,以及采用改进的Steger方法提取光条中心线,然后采用交比不变性原理或Plucker矩阵的方法标定线结构光平面方程,再采用求解CX=XD的方法实现手眼矩阵标定,即机械臂末端与摄像机间的矩阵标定;
(2)、焊缝检测:对所述摄像机采集的焊缝图像进行预处理,随后采用所述改进的Steger方法提取光条中心线,再结合所述待焊工件表面几何特征提取焊缝中心点,获得所述焊缝中心点在图像中的坐标;
(3)、焊缝重建:采用所述控制器操纵所述机械臂末端运动,系统实时读取所述机械臂末端的位姿信息,所述线结构光视觉系统在所述机械臂的带动下沿焊缝进行扫描,获得一组焊缝图像,根据所述步骤(2)中提取这组扫描图像的焊缝中心点,根据所述步骤(1)中标定的结果计算出这组焊缝中心点在所述机械臂基坐标系中的三维坐标,通过这组焊缝中心点的三维坐标,采用最小二乘法进行三维曲线拟合,从而重建出完整的三维曲线焊缝。
其进一步特征在于:
所述步骤(1)中的标定方法步骤是:
(1.1)、打开所述线结构光投射器,用所述控制器操纵并调整所述机械臂的位姿,将线结构光投射到标定靶标上,拍摄一幅带结构光的标定靶标图像;
(1.2)、关闭所述线结构光发射器,保持所述机械臂位姿不变,拍摄一幅不带结构光的标定靶标图像;
(1.3)、重复所述步骤(1.1)和(1.2),在至少3个不同位姿上,获得至少三组标定靶标图像,并从所述控制器上读取所述机械臂末端位姿;
(1.4)、对不带结构光的标定靶标图像,提取亚像素级靶标特征点,由至少3幅图像标定所述摄像机内部参数矩阵并获得每幅图像所对应的所述摄像机外部参数矩阵Rt,其中fu、fv分别为u轴和v轴的尺度因子,fs是u轴和v轴的不垂直因子,(u0,v0)为主点坐标,旋转矩阵R与平移向量t构成所述摄像机外部参数矩阵;
(1.5)、由同组的两幅图像相减,利用改进的Steger方法提取光条中心线,并获得光条方程,再求解光条在所述摄像机坐标系下的Plücker矩阵,由多条光条空间直线的Plücker矩阵,求解光平面在所述摄像机坐标系的平面方程,并通过非线性优化方法得到光平面方程在最大似然准则下的最优解;
(1.6)、在所述步骤(1.4)的基础上,结合手眼关系即所述摄像机与机械臂末端之间的位姿关系以及在所述摄像机坐标系中的结构光平面方程ax+by+cz=0,其中,Rm为旋转矩阵,pm为平移矩阵,a、b、c为结构光平面方程的参数,随后采用求解CX=XD的方法实现手眼矩阵标定,其中X即为Tm,C为所述摄像机在两个不同位姿处的外参数相对矩阵,D为所述机械臂末端在两个不同位姿处的位姿变换矩阵;
所述步骤(2)中焊缝检测的步骤是:
(2.1)、对线结构光投射到待焊工件表面形成的结构光条纹,采用改进的Steger方法提取光条中心线,并获得光条方程;
(2.2)、所述待焊工件包括两块金属板,所述金属板之间的位置关系为对接焊或者搭接焊或者T型焊,在光条中心线提取之后,结合所述金属板之间焊缝类型,从而确定焊缝中心点;
所述步骤(3)的焊缝重建步骤是:
(3.1)、设所述焊缝中心点的图像坐标为m=[u,v]T,在所述摄像机坐标系中的坐标为Mc=[xc,yc,zc]T,则该点在所述摄像机归一化成像平面上的坐标为Mc1=[xc1,yc1,1]T,有所述摄像机光轴中心与Mc1点的连线为由于所述焊缝中心点既在结构光平面上,又在所述摄像机光轴中心与成像平面上的成像点的连线上,联立直线方程和结构光平面方程ax+by+cz+1=0,即可求得所述焊缝特征点在所述摄像机坐标系中的三维坐标,即
(3.2)、由所述控制器读取所述机械臂末端的位姿,计算得机器人基坐标系与末端坐标系之间变换关系T6,从而计算得所述焊缝特征点在所述机器人基坐标系下的三维坐标Mb=[xb,yb,zb]T,即由得出机器人基坐标系下的一组焊缝特征点,通过采用最小二乘法进行三维曲线拟合,即可重建出完整的三维曲线焊缝。
本发明的有益效果是,通过将线结构光视觉系统刚性固定在机械臂末端,作为检测与测量的机器视觉装置,首先根据所采用的线结构光视觉系统的有关参数,以及其与机械臂末端之间的位姿关系预先标定,实现手眼矩阵标定;随之对焊缝图像处理后,提取光条中心线,可结合待焊工件表面不同的几何特征相应提取焊缝中心点,获得焊缝中心点在图像中的坐标;最后在线结构光视觉系统标定和机械臂末端的位姿信息的基础上,获得焊缝中心点在机械臂基坐标系中的三维坐标,通过该焊缝中心点的三维坐标,采用最小二乘法进行拟合,从而有效重建出完整的三维焊缝。
附图说明
图1是基于线结构光视觉的焊接机械臂结构示意图;
图2是待焊工件的焊缝接头类型示意图;
图3是线结构光在不同类型焊缝上的投影示意图;
图4是本发明的曲线焊缝三维重建的流程图。
具体实施方式
如图1~图4所示,一种基于线结构光视觉检测的曲线焊缝三维重建方法,其包括机械臂1、线结构光视觉系统,控制器2控制连接机械臂1,计算机3连接控制器2,线结构光视觉系统包括摄像机4、线结构光投射器5,摄像机4固定于机械臂1末端,线结构光投射器5固定于摄像机4一侧,且投射于待焊工件6表面,构成一种眼在手(Eye-in-Hand)系统,作为检测与测量的机器视觉装置,线结构光投射器5可以将单线或多线结构光投射到待焊工件表面,摄像机4是用于采集结构光投射图像,并将图像传送给由计算机3软硬件构成的图像处理系统;
曲线焊缝三维重建方法的步骤如下:
(1)、系统标定:根据线结构光视觉系统的有关参数,以及其与机械臂末端之间的位姿关系,采用基于靶标的方法标定摄像机内外参数后,采用交比不变性原理或Plucker矩阵的方法标定线结构光平面方程,最后采用求解CX=XD的方法实现手眼矩阵标定,即机械臂末端与摄像机间的矩阵标定;
其标定方法具体为:
设平面上的三维点为M=[x,y,z]T,其图像平面图上的二维点记为m=[u,v]T,相应的齐次坐标为与空间点M与图像点m之间的射影关系为:其中,s为比例因子,旋转矩阵R与平移向量t构成摄像机外部参数矩阵,A为摄像机内部参数矩阵,其中fu、fv分别为u轴和v轴的尺度因子,fs是u轴和v轴的不垂直因子,(u0,v0)为主点坐标;x,y,z是空间上三维点的坐标,u,v是平面上二维点的坐标;
(1.1)、打开线结构光投射器,用控制器操纵并调整机械臂的位姿,将线结构光投射到标定靶标上,拍摄一幅带结构光的标定靶标图像;
(1.2)、关闭线结构光发射器,保持机械臂位姿不变,拍摄一幅不带结构光的标定靶标图像;
(1.3)、重复步骤(1.1)和(1.2),在至少3个不同位姿上,获得至少三组标定靶标图像,并从控制器上读取机械臂末端位姿;
(1.4)、对不带结构光的标定靶标图像,提取亚像素级靶标特征点(也就是对于棋盘格靶标时提取角点,对于圆点阵靶标时提取圆点中心点),由至少3幅图像标定摄像机内部参数矩阵A,并获得每幅图像所对应的摄像机外部参数矩阵Rt;
(1.5)、由同组的两幅图像相减,利用改进的Steger方法提取光条中心线,并获得光条方程,再求解光条在摄像机坐标系下的Plücker矩阵,由多条光条空间直线的Plücker矩阵,求解光平面在摄像机坐标系的平面方程,并通过非线性优化方法得到光平面方程在最大似然准则下的最优解;
(1.6)、在步骤(1.4)的基础上,结合手眼关系即摄像机与机械臂末端之间的位姿关系以及在摄像机坐标系中的结构光平面方程ax+by+cz+1=0,其中,Rm为旋转矩阵,pm为平移矩阵,a、b、c为结构光平面方程的参数,随后采用求解CX=XD的方法实现手眼矩阵标定,其中X即为Tm,C为摄像机在两个不同位姿处的外参数相对矩阵,D为机械臂末端在两个不同位姿处的位姿变换矩阵。
(2)、焊缝检测:对摄像机采集的焊缝图像进行滤波、兴趣区提取等预处理,图像滤波主要是为了消除噪声,应根据噪声的选择合适的滤波方法,常用的方法有中值滤波、小波滤波等;兴趣区提取的目的是为了减少图像处理的计算量,通常先提取可能包含图像特征的区域,即兴趣区,这样可以大大提高后续图像处理的效率,常用兴趣区提取的方法是计算行或列方向上的灰度累加和最大值;随后采用Steger方法提取光条中心线,最后结合待焊工件表面几何特征提取焊缝中心点,获得焊缝中心点在图像中的坐标;
其焊缝检测具体为:
(2.1)、对线结构光投射到待焊工件表面形成的结构光条纹,其中光条的横截面上的光强呈抛物线或高斯分布,其灰度模型为根据改进的Steger方法用二维高斯函数的各阶导数作为模板卷积图像得到各阶微分,从而求得光条中心点f(0),光条中心点f(0)也就是光条截面上的灰度极大值点同时也是一阶导数过零点和二阶导数极小值点,其中二维高斯函数的各核函数如式:
(2.2)、待焊工件包括两块金属板,金属板之间的位置关系为对接焊或者搭接焊或者T型焊,如附图2中,(a)为对接焊,(b)为搭接焊,(c)为T型焊,根据焊缝种类的不同,线结构光光条在待焊工件表面投射形成了不同的位置及夹角关系的两条光条线段,如附图3(a),对于对接焊,两条光条线段在一条直线上,直线中部的间断处或“V”型区域为焊缝位置;如附图3(b),对于搭接焊,两条光条线段相互平行,焊缝位于两条平行线段距离最近的端点区域;如附图3(c),对于T型焊,两条光条线段相交,焊缝位于交点区域;如附图1,本实施例中的待焊工件焊接类型为对接焊,则在光条中心线提取之后,结合金属板之间焊缝类型,从而确定焊缝中心点。
(3)、焊缝重建:操纵控制器控制机械臂末端运动,通过计算机显示器观察,保持焊缝中心点处于图像中心区域,并实时读取机械臂末端的位姿信息,线结构光视觉系统在机械臂的带动下沿焊缝进行扫描,获得一组焊缝图像,根据步骤(2)提取这组扫描图像的焊缝中心点,根据所述步骤(1)中标定的结果计算出这组焊缝中心点在机械臂基坐标系中的三维坐标,以及为了提高曲线焊缝重建的精度,在焊缝曲率变化较大的位置,需要较为密集地采集图像;
其焊缝重建具体为:
焊缝中心点的图像坐标为m=[u,v]T,在摄像机坐标系中的坐标为Mc=[xc,yc,zc]T,则
该点在摄像机归一化成像平面上的坐标为Mc1=[xc1,yc1,1]T,有
摄像机光轴中心与Mc1点的连线为
由于焊缝中心点既在结构光平面上,又在摄像机光轴中心与成像平面上的成像点的连线上,联立直线方程(3.1.3)和结构光平面方程ax+by+cz+1=0,即求得焊缝特征点在摄像机坐标系中的三维坐标,如式(3.1.4)
由控制器读取机械臂末端的位姿,计算得机器人基坐标系与末端坐标系之间变换关系T6,进一步计算得焊缝特征点在机器人基坐标系下的三维坐标Mb=[xb,yb,zb]T
其中T6是机械臂末端第6个轴相对于机械臂基坐标系之间的变换矩阵;
最后由机器人基坐标系下的一组焊缝特征点,采用最小二乘法进行三维曲线拟合,从而重建出完整的三维曲线焊缝。
Claims (4)
1.一种基于线结构光视觉检测的曲线焊缝三维重建方法,其包括机械臂、线结构光视觉系统,控制器控制连接所述机械臂,所述线结构光视觉系统包括摄像机、线结构光投射器,所述摄像机固定于所述机械臂末端,所述线结构光投射器固定于所述摄像机一侧,且投射于待焊工件表面,其特征在于:所述曲线焊缝三维重建方法的步骤如下:
(1)、系统标定:先采用基于靶标的方法标定所述摄像机内外参数,以及采用改进的Steger方法提取光条中心线,然后采用交比不变性原理或Plucker矩阵的方法标定线结构光平面方程,再采用求解CX=XD的方法实现手眼矩阵标定,即机械臂末端与摄像机间的矩阵标定;
(2)、焊缝检测:对所述摄像机采集的焊缝图像进行预处理,随后采用所述改进的Steger方法提取光条中心线,再结合所述待焊工件表面几何特征提取焊缝中心点,获得所述焊缝中心点在图像中的坐标;
(3)、焊缝重建:采用所述控制器操纵所述机械臂末端运动,系统实时读取所述机械臂末端的位姿信息,所述线结构光视觉系统在所述机械臂的带动下沿焊缝进行扫描,获得一组焊缝图像,根据所述步骤(2)中提取这组扫描图像的焊缝中心点,根据所述步骤(1)中标定的结果计算出这组焊缝中心点在所述机械臂基坐标系中的三维坐标,通过这组焊缝中心点的三维坐标,采用最小二乘法进行三维曲线拟合,从而重建出完整的三维曲线焊缝。
2.根据权利要求1所述的一种基于线结构光视觉检测的曲线焊缝三维重建方法,其特征在于:所述步骤(1)中的标定方法步骤是:
(1.1)、打开所述线结构光投射器,用所述控制器操纵并调整所述机械臂的位姿,将线结构光投射到标定靶标上,拍摄一幅带结构光的标定靶标图像;
(1.2)、关闭所述线结构光发射器,保持所述机械臂位姿不变,拍摄一幅不带结构光的标定靶标图像;
(1.3)、重复所述步骤(1.1)和(1.2),在至少3个不同位姿上,获得至少三组标定靶标图像,并从所述控制器上读取所述机械臂末端位姿;
(1.4)、对不带结构光的标定靶标图像,提取亚像素级靶标特征点,由至少3幅图像标定所述摄像机内部参数矩阵并获得每幅图像所对应的所述摄像机外部参数矩阵Rt,其中fu、fv分别为u轴和v轴的尺度因子,fs是u轴和v轴的不垂直因子,(u0,v0)为主点坐标,旋转矩阵R与平移向量t构成所述摄像机外部参数矩阵;
(1.5)、由同组的两幅图像相减,利用所述改进的Steger方法提取光条中心线,并获得光条方程,再求解光条在所述摄像机坐标系下的Plücker矩阵,由多条光条空间直线的Plücker矩阵,求解光平面在所述摄像机坐标系的平面方程,并通过非线性优化方法得到光平面方程在最大似然准则下的最优解;
(1.6)、在所述步骤(1.4)的基础上,结合手眼关系即所述摄像机与机械臂末端之间的位姿关系以及在所述摄像机坐标系中的结构光平面方程ax+by+cz=0,其中,Rm为旋转矩阵,pm为平移矩阵,a、b、c为结构光平面方程的参数,随后采用求解CX=XD的方法实现手眼矩阵标定,其中X即为Tm,C为所述摄像机在两个不同位姿处的外参数相对矩阵,D为所述机械臂末端在两个不同位姿处的位姿变换矩阵。
3.根据权利要求1所述的一种基于线结构光视觉检测的曲线焊缝三维重建方法,其特征在于:所述步骤(2)中焊缝检测的步骤是:
(2.1)、对线结构光投射到所述待焊工件表面形成的结构光条纹,采用所述改进的Steger方法提取光条中心线,并获得光条方程;
(2.2)、所述待焊工件包括两块金属板,所述金属板之间的位置关系为对接焊或者搭接焊或者T型焊,在光条中心线提取之后,结合所述金属板之间焊缝类型,从而确定焊缝中心点。
4.根据权利要求2所述的一种基于线结构光视觉检测的曲线焊缝三维重建方法,其特征在于:所述步骤(3)的焊缝重建步骤是:
(3.1)、设所述焊缝中心点的图像坐标为m=[u,v]T,在所述摄像机坐标系中的坐标为Mc=[xc,yc,zc]T,则该点在所述摄像机归一化成像平面上的坐标为Mc1=[xc1,yc1,1]T,有所述摄像机光轴中心与Mc1点的连线为由于所述焊缝中心点既在结构光平面上,又在所述摄像机光轴中心与成像平面上的成像点的连线上,联立直线方程和结构光平面方程ax+by+cz+1=0,即可求得所述焊缝特征点在所述摄像机坐标系中的三维坐标,即
(3.2)、由所述控制器读取所述机械臂末端的位姿,计算得机器人基坐标系与末端坐标系之间变换关系T6,从而计算得所述焊缝特征点在所述机器人基坐标系下的三维坐标Mb=[xb,yb,zb]T,即由得出机器人基坐标系下的一组焊缝特征点,通过采用最小二乘法进行三维曲线拟合,即可重建出完整的三维曲线焊缝。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610280356.4A CN105783726B (zh) | 2016-04-29 | 2016-04-29 | 一种基于线结构光视觉检测的曲线焊缝三维重建方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610280356.4A CN105783726B (zh) | 2016-04-29 | 2016-04-29 | 一种基于线结构光视觉检测的曲线焊缝三维重建方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105783726A true CN105783726A (zh) | 2016-07-20 |
CN105783726B CN105783726B (zh) | 2018-06-19 |
Family
ID=56399111
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610280356.4A Active CN105783726B (zh) | 2016-04-29 | 2016-04-29 | 一种基于线结构光视觉检测的曲线焊缝三维重建方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105783726B (zh) |
Cited By (38)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106353115A (zh) * | 2016-08-28 | 2017-01-25 | 上海华测导航技术股份有限公司 | 一种钢结构的检测方法 |
CN106524945A (zh) * | 2016-10-13 | 2017-03-22 | 无锡科技职业学院 | 一种基于机械臂和结构光视觉的平面夹角在线测量方法 |
CN106826832A (zh) * | 2017-02-27 | 2017-06-13 | 广东工业大学 | 一种焊接机器人及其焊缝路径学习方法、系统 |
CN107138944A (zh) * | 2017-05-18 | 2017-09-08 | 哈尔滨工业大学 | 基于空间点误差修正的两工件自动对准方法 |
CN107578464A (zh) * | 2017-06-30 | 2018-01-12 | 长沙湘计海盾科技有限公司 | 一种基于线激光扫描的传送带工件三维轮廓测量方法 |
CN107685322A (zh) * | 2017-09-28 | 2018-02-13 | 李从宾 | 一种多自由度工业机器人的机械手 |
CN107876970A (zh) * | 2017-12-13 | 2018-04-06 | 浙江工业大学 | 一种机器人多层多道焊接焊缝三维检测及焊缝拐点识别方法 |
CN107941166A (zh) * | 2017-11-14 | 2018-04-20 | 中国矿业大学 | 一种视场可调的复合式三维扫描装置及方法 |
CN108088390A (zh) * | 2017-12-13 | 2018-05-29 | 浙江工业大学 | 一种焊接检测中基于双目线结构光的光条中心三维坐标获取方法 |
CN108335286A (zh) * | 2018-01-17 | 2018-07-27 | 南京理工大学 | 一种基于双线结构光的在线焊缝成型视觉检测方法 |
CN108717715A (zh) * | 2018-06-11 | 2018-10-30 | 华南理工大学 | 一种用于弧焊机器人的线结构光视觉系统自动标定方法 |
CN108731589A (zh) * | 2017-03-09 | 2018-11-02 | 佳能株式会社 | 测量装置、处理装置以及物品制造方法 |
CN108765419A (zh) * | 2018-06-20 | 2018-11-06 | 天津大学 | 结构光视觉焊缝图像信息自适应提取方法 |
CN109591011A (zh) * | 2018-11-29 | 2019-04-09 | 天津工业大学 | 复合材料三维结构件单边缝合激光视觉路径自动跟踪方法 |
CN109814124A (zh) * | 2019-01-28 | 2019-05-28 | 河北省科学院应用数学研究所 | 一种基于结构光3d传感器的机器人定位系统和方法 |
CN109827521A (zh) * | 2019-03-11 | 2019-05-31 | 烟台大学 | 一种快速多线结构光视觉测量系统标定方法 |
CN109822562A (zh) * | 2018-12-26 | 2019-05-31 | 浙江大学 | 一种基于sick系统的工件三维重建方法 |
CN109910016A (zh) * | 2019-04-22 | 2019-06-21 | 亿嘉和科技股份有限公司 | 基于多自由度机械臂的视觉采集标定方法、装置及系统 |
CN109986201A (zh) * | 2018-01-03 | 2019-07-09 | 大族激光科技产业集团股份有限公司 | 焊缝的跟踪检测方法、装置、存储介质以及激光焊接设备 |
CN110095069A (zh) * | 2019-04-22 | 2019-08-06 | 西南交通大学 | 一种高铁白车身装配质量检测系统和方法 |
CN110276296A (zh) * | 2019-06-21 | 2019-09-24 | 新疆大学 | 一种基于图像处理的结构光焊缝识别方法 |
CN110298878A (zh) * | 2018-03-21 | 2019-10-01 | 北京猎户星空科技有限公司 | 一种目标物体三维位姿的确定方法、装置及电子设备 |
CN111768441A (zh) * | 2020-06-29 | 2020-10-13 | 广东省航空航天装备技术研究所 | 监测柱状物体行进过程的方法、系统及计算机设备 |
CN112129809A (zh) * | 2020-08-13 | 2020-12-25 | 苏州赛米维尔智能装备有限公司 | 一种基于视觉引导的铜片热阻率检测装置及其检测方法 |
CN112223292A (zh) * | 2020-10-21 | 2021-01-15 | 湖南科技大学 | 结构件焊缝智能磨抛机器人在线打磨系统 |
CN112659123A (zh) * | 2020-12-14 | 2021-04-16 | 南京工程学院 | 一种基于线结构光视觉的双机器人曲线焊接协同规划方法 |
CN112676676A (zh) * | 2020-12-16 | 2021-04-20 | 武汉逸飞激光股份有限公司 | 极耳焊接方法 |
CN112834505A (zh) * | 2020-12-31 | 2021-05-25 | 芜湖哈特机器人产业技术研究院有限公司 | 管道工件涂膏的焊缝三维视觉检测定位装置及其检测定位方法 |
CN112958973A (zh) * | 2021-02-08 | 2021-06-15 | 西安知象光电科技有限公司 | 一种基于结构光三维视觉的中厚板机器人焊接视觉寻位装置 |
CN113063348A (zh) * | 2021-03-15 | 2021-07-02 | 南京工程学院 | 一种基于立体参考物的结构光自垂直弧形焊缝扫描方法 |
CN113418465A (zh) * | 2021-06-08 | 2021-09-21 | 长春汽车工业高等专科学校 | 一种基于激光三角测量法的三维扫描装置及扫描方法 |
CN113418927A (zh) * | 2021-06-08 | 2021-09-21 | 长春汽车工业高等专科学校 | 基于线结构光的汽车模具视觉检测系统及检测方法 |
WO2021208231A1 (zh) * | 2020-04-15 | 2021-10-21 | 上海工程技术大学 | 缝隙测量系统及测量方法 |
CN113664831A (zh) * | 2021-08-25 | 2021-11-19 | 山东大学 | 一种获取焊缝点云信息的焊接机器人系统及方法 |
CN114022650A (zh) * | 2022-01-07 | 2022-02-08 | 成都考拉悠然科技有限公司 | 一种基于点云拟合光平面调平的方法及设备 |
CN114234808A (zh) * | 2021-12-17 | 2022-03-25 | 湖南大学 | 回转类磁脉冲压接件变形区域的尺寸测量方法及装置 |
CN114406563A (zh) * | 2022-03-14 | 2022-04-29 | 无锡砺成智能装备有限公司 | 一种自动化焊接系统及焊接方法 |
CN114792337A (zh) * | 2022-03-04 | 2022-07-26 | 清华大学 | 一种焊接坡口尺寸和焊枪相对位姿高精度检测方法和装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS61250503A (ja) * | 1985-04-27 | 1986-11-07 | Nippon Kokan Kk <Nkk> | 電縫管の外面溶接部の位置検出方法 |
CN102303190A (zh) * | 2011-08-03 | 2012-01-04 | 江南大学 | 线激光视觉跟踪平面对接焊缝方法 |
CN103500321A (zh) * | 2013-07-03 | 2014-01-08 | 无锡信捷电气股份有限公司 | 基于双动态窗的视觉引导焊接机器人焊缝快速识别技术 |
CN103955927A (zh) * | 2014-04-26 | 2014-07-30 | 江南大学 | 一种基于激光视觉的角焊缝自动跟踪方法 |
-
2016
- 2016-04-29 CN CN201610280356.4A patent/CN105783726B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPS61250503A (ja) * | 1985-04-27 | 1986-11-07 | Nippon Kokan Kk <Nkk> | 電縫管の外面溶接部の位置検出方法 |
CN102303190A (zh) * | 2011-08-03 | 2012-01-04 | 江南大学 | 线激光视觉跟踪平面对接焊缝方法 |
CN103500321A (zh) * | 2013-07-03 | 2014-01-08 | 无锡信捷电气股份有限公司 | 基于双动态窗的视觉引导焊接机器人焊缝快速识别技术 |
CN103955927A (zh) * | 2014-04-26 | 2014-07-30 | 江南大学 | 一种基于激光视觉的角焊缝自动跟踪方法 |
Non-Patent Citations (1)
Title |
---|
王秀平等: "基于激光视觉引导的焊接机器人系统设计", 《煤炭技术》 * |
Cited By (53)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106353115A (zh) * | 2016-08-28 | 2017-01-25 | 上海华测导航技术股份有限公司 | 一种钢结构的检测方法 |
CN106524945A (zh) * | 2016-10-13 | 2017-03-22 | 无锡科技职业学院 | 一种基于机械臂和结构光视觉的平面夹角在线测量方法 |
CN106524945B (zh) * | 2016-10-13 | 2019-07-12 | 无锡科技职业学院 | 一种基于机械臂和结构光视觉的平面夹角在线测量方法 |
CN106826832A (zh) * | 2017-02-27 | 2017-06-13 | 广东工业大学 | 一种焊接机器人及其焊缝路径学习方法、系统 |
CN108731589A (zh) * | 2017-03-09 | 2018-11-02 | 佳能株式会社 | 测量装置、处理装置以及物品制造方法 |
CN107138944A (zh) * | 2017-05-18 | 2017-09-08 | 哈尔滨工业大学 | 基于空间点误差修正的两工件自动对准方法 |
CN107578464A (zh) * | 2017-06-30 | 2018-01-12 | 长沙湘计海盾科技有限公司 | 一种基于线激光扫描的传送带工件三维轮廓测量方法 |
CN107578464B (zh) * | 2017-06-30 | 2021-01-29 | 长沙湘计海盾科技有限公司 | 一种基于线激光扫描的传送带工件三维轮廓测量方法 |
CN107685322A (zh) * | 2017-09-28 | 2018-02-13 | 李从宾 | 一种多自由度工业机器人的机械手 |
CN107941166A (zh) * | 2017-11-14 | 2018-04-20 | 中国矿业大学 | 一种视场可调的复合式三维扫描装置及方法 |
CN107876970A (zh) * | 2017-12-13 | 2018-04-06 | 浙江工业大学 | 一种机器人多层多道焊接焊缝三维检测及焊缝拐点识别方法 |
CN108088390A (zh) * | 2017-12-13 | 2018-05-29 | 浙江工业大学 | 一种焊接检测中基于双目线结构光的光条中心三维坐标获取方法 |
CN109986201A (zh) * | 2018-01-03 | 2019-07-09 | 大族激光科技产业集团股份有限公司 | 焊缝的跟踪检测方法、装置、存储介质以及激光焊接设备 |
CN109986201B (zh) * | 2018-01-03 | 2021-10-08 | 大族激光科技产业集团股份有限公司 | 焊缝的跟踪检测方法、装置、存储介质以及激光焊接设备 |
CN108335286A (zh) * | 2018-01-17 | 2018-07-27 | 南京理工大学 | 一种基于双线结构光的在线焊缝成型视觉检测方法 |
CN108335286B (zh) * | 2018-01-17 | 2024-03-22 | 南京理工大学 | 一种基于双线结构光的在线焊缝成型视觉检测方法 |
CN110298878B (zh) * | 2018-03-21 | 2021-03-12 | 北京猎户星空科技有限公司 | 一种目标物体三维位姿的确定方法、装置及电子设备 |
CN110298878A (zh) * | 2018-03-21 | 2019-10-01 | 北京猎户星空科技有限公司 | 一种目标物体三维位姿的确定方法、装置及电子设备 |
CN108717715B (zh) * | 2018-06-11 | 2022-05-31 | 华南理工大学 | 一种用于弧焊机器人的线结构光视觉系统自动标定方法 |
CN108717715A (zh) * | 2018-06-11 | 2018-10-30 | 华南理工大学 | 一种用于弧焊机器人的线结构光视觉系统自动标定方法 |
CN108765419B (zh) * | 2018-06-20 | 2022-09-06 | 天津大学 | 结构光视觉焊缝图像信息自适应提取方法 |
CN108765419A (zh) * | 2018-06-20 | 2018-11-06 | 天津大学 | 结构光视觉焊缝图像信息自适应提取方法 |
CN109591011A (zh) * | 2018-11-29 | 2019-04-09 | 天津工业大学 | 复合材料三维结构件单边缝合激光视觉路径自动跟踪方法 |
CN109591011B (zh) * | 2018-11-29 | 2020-08-25 | 天津工业大学 | 复合材料三维结构件单边缝合激光视觉路径自动跟踪方法 |
CN109822562A (zh) * | 2018-12-26 | 2019-05-31 | 浙江大学 | 一种基于sick系统的工件三维重建方法 |
CN109814124A (zh) * | 2019-01-28 | 2019-05-28 | 河北省科学院应用数学研究所 | 一种基于结构光3d传感器的机器人定位系统和方法 |
CN109827521A (zh) * | 2019-03-11 | 2019-05-31 | 烟台大学 | 一种快速多线结构光视觉测量系统标定方法 |
CN110095069A (zh) * | 2019-04-22 | 2019-08-06 | 西南交通大学 | 一种高铁白车身装配质量检测系统和方法 |
CN109910016A (zh) * | 2019-04-22 | 2019-06-21 | 亿嘉和科技股份有限公司 | 基于多自由度机械臂的视觉采集标定方法、装置及系统 |
CN110276296A (zh) * | 2019-06-21 | 2019-09-24 | 新疆大学 | 一种基于图像处理的结构光焊缝识别方法 |
CN110276296B (zh) * | 2019-06-21 | 2023-04-28 | 新疆大学 | 一种基于图像处理的结构光焊缝识别方法 |
WO2021208231A1 (zh) * | 2020-04-15 | 2021-10-21 | 上海工程技术大学 | 缝隙测量系统及测量方法 |
CN111768441A (zh) * | 2020-06-29 | 2020-10-13 | 广东省航空航天装备技术研究所 | 监测柱状物体行进过程的方法、系统及计算机设备 |
CN112129809A (zh) * | 2020-08-13 | 2020-12-25 | 苏州赛米维尔智能装备有限公司 | 一种基于视觉引导的铜片热阻率检测装置及其检测方法 |
CN112129809B (zh) * | 2020-08-13 | 2023-12-29 | 苏州赛米维尔智能装备有限公司 | 一种基于视觉引导的铜片热阻率检测装置及其检测方法 |
CN112223292A (zh) * | 2020-10-21 | 2021-01-15 | 湖南科技大学 | 结构件焊缝智能磨抛机器人在线打磨系统 |
CN112659123A (zh) * | 2020-12-14 | 2021-04-16 | 南京工程学院 | 一种基于线结构光视觉的双机器人曲线焊接协同规划方法 |
CN112676676A (zh) * | 2020-12-16 | 2021-04-20 | 武汉逸飞激光股份有限公司 | 极耳焊接方法 |
CN112834505A (zh) * | 2020-12-31 | 2021-05-25 | 芜湖哈特机器人产业技术研究院有限公司 | 管道工件涂膏的焊缝三维视觉检测定位装置及其检测定位方法 |
CN112958973A (zh) * | 2021-02-08 | 2021-06-15 | 西安知象光电科技有限公司 | 一种基于结构光三维视觉的中厚板机器人焊接视觉寻位装置 |
CN113063348A (zh) * | 2021-03-15 | 2021-07-02 | 南京工程学院 | 一种基于立体参考物的结构光自垂直弧形焊缝扫描方法 |
CN113418927A (zh) * | 2021-06-08 | 2021-09-21 | 长春汽车工业高等专科学校 | 基于线结构光的汽车模具视觉检测系统及检测方法 |
CN113418465A (zh) * | 2021-06-08 | 2021-09-21 | 长春汽车工业高等专科学校 | 一种基于激光三角测量法的三维扫描装置及扫描方法 |
CN113664831A (zh) * | 2021-08-25 | 2021-11-19 | 山东大学 | 一种获取焊缝点云信息的焊接机器人系统及方法 |
CN113664831B (zh) * | 2021-08-25 | 2023-11-10 | 山东大学 | 一种获取焊缝点云信息的焊接机器人系统及方法 |
CN114234808B (zh) * | 2021-12-17 | 2022-10-28 | 湖南大学 | 回转类磁脉冲压接件变形区域的尺寸测量方法及装置 |
CN114234808A (zh) * | 2021-12-17 | 2022-03-25 | 湖南大学 | 回转类磁脉冲压接件变形区域的尺寸测量方法及装置 |
CN114022650B (zh) * | 2022-01-07 | 2022-04-12 | 成都考拉悠然科技有限公司 | 一种基于点云拟合光平面调平的方法及设备 |
CN114022650A (zh) * | 2022-01-07 | 2022-02-08 | 成都考拉悠然科技有限公司 | 一种基于点云拟合光平面调平的方法及设备 |
CN114792337A (zh) * | 2022-03-04 | 2022-07-26 | 清华大学 | 一种焊接坡口尺寸和焊枪相对位姿高精度检测方法和装置 |
CN114792337B (zh) * | 2022-03-04 | 2024-06-11 | 清华大学 | 一种焊接坡口尺寸和焊枪相对位姿高精度检测方法和装置 |
CN114406563A (zh) * | 2022-03-14 | 2022-04-29 | 无锡砺成智能装备有限公司 | 一种自动化焊接系统及焊接方法 |
CN114406563B (zh) * | 2022-03-14 | 2023-09-08 | 无锡砺成智能装备有限公司 | 一种自动化焊接系统及焊接方法 |
Also Published As
Publication number | Publication date |
---|---|
CN105783726B (zh) | 2018-06-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105783726A (zh) | 一种基于线结构光视觉检测的曲线焊缝三维重建方法 | |
CN210046133U (zh) | 基于激光结构光的焊缝视觉跟踪系统 | |
CN107876970B (zh) | 一种机器人多层多道焊接焊缝三维检测及焊缝拐点识别方法 | |
CN107764205B (zh) | 基于线结构光扫描高频电阻焊焊缝形貌三维检测装置及检测方法 | |
Klimentjew et al. | Multi sensor fusion of camera and 3D laser range finder for object recognition | |
CN114119553B (zh) | 一种以十字激光为基准的双目视觉异面圆孔检测方法 | |
CN101966617B (zh) | 用于焊接机器人连续运动的激光视觉焊件特征检测方法 | |
CN106971407A (zh) | 一种基于二维线结构光的焊缝三维重建方法 | |
CN102279190B (zh) | 一种激光焊接不等厚板焊缝表面缺陷图像检测方法 | |
CN109676243A (zh) | 基于双线激光结构光的焊缝识别与跟踪系统及方法 | |
CN103988231B (zh) | 用于校准车载的基于计算机的视觉系统的方法 | |
CN109470149B (zh) | 一种管路位姿的测量方法及装置 | |
CN104567758B (zh) | 立体成像系统及其方法 | |
CN105894499A (zh) | 一种基于双目视觉的空间物体三维信息快速检测方法 | |
CN113798634B (zh) | 空间环形焊缝示教与焊缝跟踪方法、系统及设备 | |
CN114792337B (zh) | 一种焊接坡口尺寸和焊枪相对位姿高精度检测方法和装置 | |
CN103049896A (zh) | 三维模型的几何数据和纹理数据自动配准算法 | |
CN108098134A (zh) | 一种新型激光视觉焊缝跟踪系统及方法 | |
CN112669379B (zh) | 一种基于辅助标记点的图像特征快速提取方法 | |
CN112365439A (zh) | 一种镀锌钢gmaw焊缝成形特征与焊枪方向同步实时检测方法 | |
CN104778716A (zh) | 基于单幅图像的卡车车厢体积测量方法 | |
Liu et al. | Seam tracking system based on laser vision and CGAN for robotic multi-layer and multi-pass MAG welding | |
CN109894779A (zh) | 一种机器视觉跟踪系统及方法 | |
CN109766784A (zh) | 基于单目图像的胶囊机器人交互控制方法 | |
CN114241134A (zh) | 一种基于人机交互的虚实融合三维物体快速碰撞检测系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |