CN102950365A - 一种激光视觉传感头与焊枪手眼关系的补偿方法 - Google Patents

一种激光视觉传感头与焊枪手眼关系的补偿方法 Download PDF

Info

Publication number
CN102950365A
CN102950365A CN2011102531321A CN201110253132A CN102950365A CN 102950365 A CN102950365 A CN 102950365A CN 2011102531321 A CN2011102531321 A CN 2011102531321A CN 201110253132 A CN201110253132 A CN 201110253132A CN 102950365 A CN102950365 A CN 102950365A
Authority
CN
China
Prior art keywords
reference point
sensing head
laser
coordinate system
relation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2011102531321A
Other languages
English (en)
Inventor
龚烨飞
朱伟
张弢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
INDUSTRIAL ROBOT RESEARCH Co Ltd OF KUNSHAN INDUSTRIAL TECHNOLOGY RESEARCH INSTITUTE
Kunshan Industrial Technology Research Institute Co Ltd
Original Assignee
INDUSTRIAL ROBOT RESEARCH Co Ltd OF KUNSHAN INDUSTRIAL TECHNOLOGY RESEARCH INSTITUTE
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by INDUSTRIAL ROBOT RESEARCH Co Ltd OF KUNSHAN INDUSTRIAL TECHNOLOGY RESEARCH INSTITUTE filed Critical INDUSTRIAL ROBOT RESEARCH Co Ltd OF KUNSHAN INDUSTRIAL TECHNOLOGY RESEARCH INSTITUTE
Priority to CN2011102531321A priority Critical patent/CN102950365A/zh
Publication of CN102950365A publication Critical patent/CN102950365A/zh
Pending legal-status Critical Current

Links

Images

Abstract

本发明涉及一种激光视觉传感头与焊枪手眼关系的补偿方法,包括摆放参考点;测量出参考点在空间参照坐标系B内的位置BPi,记录工具手在空间参照坐标系B下的实际位姿HBT,实际参考点位置HPiH BBPi;测量出参考点在图像平面坐标系I内的位置IPi,通过伪手眼参数关系H LT’与激光传感头三维测量模型参数关系L IT,计算获得伪参考点位置HPi’=H LT’·L IT;获得实际参考点位置和伪参考点位置的对应点集合HP={HPi,i=1...N}和HP’={HPi’,i=1...N},N≥3;利用刚体关系最小二乘估计法计算补偿量ΔT,并获得实际的手眼关系H LT=ΔT·H LT’。本发明不需要特殊的标定物,只需要从现场获取相应的点标定物即可进行,降低了标定成本;具有较高的补偿能力,能够保证最终激光视觉三维测量较好的精确度。

Description

一种激光视觉传感头与焊枪手眼关系的补偿方法
技术领域
本发明涉及焊接机器人三维测量技术应用领域,特别是涉及一种适用于6自由焊接机器人的激光视觉传感头与焊枪手眼关系的补偿方法。
背景技术
焊接传感是焊接自动化以及智能化的关键技术之一。其中,光学式传感器在适用工艺和对象方面(可适用如MIG/MAG,TIG,等离子、激光焊等多种焊接工艺,以及碳钢、铝合金等多种材料的焊接对象),检测精度与实时性(一般至少达到0.5mm精度级和50HZ)以及应用场合方面等都具有优势,是主导着焊缝跟踪技术未来发展的焊接传感器。而以激光为主动光源的视觉传感在实际应用中具有一定的优势,主要表现在其能够进行焊缝三维信息的测量,因此理论上可以对各种带有曲率的复杂焊缝进行检测,另外其三维测量能力与机器人焊接应用较为适应(机器人焊接一般要求能够进行多种位姿下的焊接),因此除了可以应用于焊缝跟踪,还可以应用于焊前焊缝校正,机器人焊缝自主编程,焊缝初始点导引定位,以及焊后的焊接质量无损检测等诸多实际应用场合。
为了能够获得传感器在机器人B坐标系下的精确的3D测量能力,必须完成对激光视觉传感头与焊枪之间的手眼关系的标定,通常的做法主要是采用基于摄像机外参数等式关系AX=XB的求解法来获得(Shiu等人在IEEETransactions on Robotics and Automation,1989,pp.6-29中所发表的“Calibration of wrist-mounted robotic sensors by solving homogeneoustransform equations of the form AX=XB”,Konstantinos Daniilidis在TheInternational Journal of Robotics,1999,pp.286-298中所发表的Hand-EyeCalibration Using Dual Quaternions.),但是上述方法存在着以下几点缺陷:
(1)、一般会采用棋盘等标定物来完成标定,但是一般焊接中所用的激光视觉传感器为了避免焊接中弧光的直接冲击,都需要引入滤光系统,因此摄像机无法很清晰甚至不能观察到如棋盘等常规标定物的特征;
(2)、为了求解最终的位置关系,一般需要从不同的角度完成对标定物的采样,这样不仅对于机器人的操作难度将加大,而且对于一般用于如焊缝跟踪场合的激光视觉传感器而言,其检测视野与景深都较小的特点,都会进一步放大上述不足;
(3)、基于AX=XB求解法的手眼标定方法需要同时利用到摄像机参数的标定,因此不仅标定起来的步骤较为繁琐(不利于传感头与焊枪经常调换的现场使用情况),并且求解关系AX=XB后,最终得到的结果对于噪声较为敏感(一般为平移部分),稳定性不够好。
发明内容
本发明目的是提供一种激光视觉传感头与焊枪手眼关系的补偿方法,该方法适用于6自由焊接机器人。
为达到上述目的,本发明采用的技术方案是:
一种激光视觉传感头与焊枪手眼关系的补偿方法,
建立相应的坐标系,包括代表了焊丝尖端位置所在的工具坐标系H、代表了传感头发射激光所在位置的激光坐标系L、代表了传感头接收到激光成像所在位置的图像平面坐标系I、代表了机器人运动工作的空间参照坐标系B;其包括以下步骤:
(1)、在焊接现场任意摆放一个参考点;
(2)、测量出所述的参考点在空间参照坐标系B内的位置BPi,记录工具手在空间参照坐标系B下的实际位姿H BT,并计算实际参考点位置HPiH BBPi
(3)、测量出所述的参考点在图像平面坐标系I内的位置IPi,通过机器人工具手焊丝尖端与校正前传感头激光初始位置的伪手眼参数关系H LT’与激光传感头三维测量模型参数关系L IT,计算获得伪参考点位置HPi’=HL T’·L IT;
(4)、重复步骤(2)、(3)N次,获得实际参考点位置和伪参考点位置的对应点集合HP={HPi,i=1...N}和HP’={HPi’,i=1...N},N≥3;
(5)、对HP、HP’利用刚体关系最小二乘估计法计算补偿量ΔT,并通过关系式获得实际的手眼关系H LT=ΔT·H LT’。
优选地,在步骤(1)中,所述的参考点为尖点标定物。
优选地,在步骤(2)中,当所述的参考点的位置不移动的情况下,所述的参考点在空间参照坐标系B内的位置B Pi只需要进行一次测量。
优选地,在步骤(3)中,传感头激光所选取的点前后不位于同一直线上。
由于上述技术方案运用,本发明与现有技术相比具有下列优点和效果:
1、该方法不需要特殊的标定物,只需要从现场获取相应的点标定物即可进行(一般与机器人工具手标定一起进行即可),因此降低了标定成本;
2、该方法具有较高的补偿能力,能够保证最终激光视觉测量较好的精确度。
附图说明
附图1为本发明中坐标系定义;
附图2为本发明中实际的手眼关系原理示意图;
附图3为本发明中传感头激光所选取的点的参考图。
具体实施方式
下面结合附图及实施例对本发明作进一步描述:
一种激光视觉传感头与焊枪手眼关系的补偿方法,
首先,建立相应的坐标系,包括代表了焊丝尖端位置所在的工具坐标系H、代表了传感头发射激光所在位置的激光坐标系L、代表了传感头接收到激光成像所在位置的图像平面坐标系I、代表了机器人运动工作的空间参照坐标系B,如图1所示,其中:1、线激光器;2、激光面;3、CCD图像平面;4、透镜;5、焊枪。
其包括以下步骤:
(1)、在焊接现场任意摆放一个参考点,一般可以采用进行机器人焊枪标定时所采用的尖点标定物,如螺钉等;
(2)、通过平移工具坐标系H直至与该参考点位置重合后,获取出该参考点在工具坐标系H内的位置BPi,图像的位置则是需要测量N次,如图3所示,位于CCD成像平面上不同位置,其中,对于尖点标定物位置不移动的情况,一般只需要测量一次即可,记录机器人阅读焊丝尖端所在的实际位置H BT,而剩余的N-1个数据则可通过阅读焊丝尖端所在不同的位置获取不同的H BT,并通过关系式获得HPiH BBPi
(3)、通过平移传感头测量出参考点在图像平面坐标系I内的位置IPi,即激光照射在该尖点位置处,且摄像机视野中,能够得到该尖点的激光成像光斑,进一步提取出该成像光斑中心在图像平面坐标系I中的位置,记录机器人阅读焊丝尖端与传感头初始位置关系H LT’,传感头发射激光所选取的点成像在图像平面坐标系I中的位置L IT,并通过关系式获得HPi’=H LT’·L IT,此外,而对于传感器测量而言,需要保证在图像区域中不同位置处进行成像,且尽量保证前后测量的点不要共线,且不同测量点位置应能够尽量地覆盖整个图像的有效成像区域,其典型的测量区域划分如图3所示;
(4)、重复步骤(2)、(3)N次,获得对应点集合HP={HPi,i=1...N}和HP’={HPi’,i=1...N},N≥3;
(5)、将HP、HP’利用刚体关系最小二乘估计法计算补偿量ΔT,并通过关系式获得实际的手眼关系H LT=ΔT·H LT’。最小二乘估计法可参见ArunKS等人在IEEE Trans Pattern Anal Machine Intelligence,1987,pp.698-700,Least-squares fitting of two 3-D point se中所提出的方法。
按照上述方法,首先采用预估手眼关系,并进行实验获得校正数据与相对应的误差值如表一所示;而通过补偿后的手眼关系,对相同的对应数据计算获得校正数据与相对应的误差值如表二所示;最终补偿前后的整体性能对比如表三所示。
表一H LT补偿前后测量精度对比
表二H LT补偿后测量精度
Figure BSA00000565020500042
表三补偿前后测量精度比较
Figure BSA00000565020500043
Figure BSA00000565020500051
上述实施例只为说明本发明的技术构思及特点,其目的在于让熟悉此项技术的人士能够了解本发明的内容并据以实施,并不能以此限制本发明的保护范围。凡根据本发明精神实质所作的等效变化或修饰,都应涵盖在本发明的保护范围之内。

Claims (4)

1.一种激光视觉传感头与焊枪手眼关系的补偿方法,其特征在于:
建立相应的坐标系,包括代表了焊丝尖端位置所在的工具坐标系H、代表了传感头发射激光所在位置的激光坐标系L、代表了传感头接收到激光成像所在位置的图像平面坐标系I、代表了机器人运动工作的空间参照坐标系B;其包括以下步骤:
(1)、在焊接现场任意摆放一个参考点;
(2)、测量出所述的参考点在空间参照坐标系B内的位置BPi,记录工具手在空间参照坐标系B下的实际位姿H BT,并计算实际参考点位置HPiH BBPi
(3)、测量出所述的参考点在图像平面坐标系I内的位置IPi,通过机器人工具手焊丝尖端与校正前传感头激光初始位置的伪手眼参数关系H LT’与激光传感头三维测量模型参数关系L IT,计算获得伪参考点位置HPi’=H LT’·L IT;(4)、重复步骤(2)、(3)N次,获得实际参考点位置和伪参考点位置的对应点集合HP={HPi,i=1...N}和HP’={HPi’,i=1...N},N≥3;
(5)、对HP、HP’利用刚体关系最小二乘估计法计算补偿量ΔT,并通过关系式获得实际的手眼关系H LT=ΔT·H LT’。
2.根据权利要求1所述的一种激光视觉传感头与焊枪手眼关系的补偿方法,其特征在于:在步骤(1)中,所述的参考点为尖点标定物。
3.根据权利要求1所述的一种激光视觉传感头与焊枪手眼关系的补偿方法,其特征在于:在步骤(2)中,当所述的参考点的位置不移动的情况下,所述的参考点在空间参照坐标系B内的位置BPi只需要进行一次测量。
4.根据权利要求1所示的一种激光视觉传感头与焊枪手眼关系的补偿方法,其特征在于:在步骤(3)中,传感头激光所选取的点前后不位于同一直线上。
CN2011102531321A 2011-08-30 2011-08-30 一种激光视觉传感头与焊枪手眼关系的补偿方法 Pending CN102950365A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2011102531321A CN102950365A (zh) 2011-08-30 2011-08-30 一种激光视觉传感头与焊枪手眼关系的补偿方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2011102531321A CN102950365A (zh) 2011-08-30 2011-08-30 一种激光视觉传感头与焊枪手眼关系的补偿方法

Publications (1)

Publication Number Publication Date
CN102950365A true CN102950365A (zh) 2013-03-06

Family

ID=47760076

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2011102531321A Pending CN102950365A (zh) 2011-08-30 2011-08-30 一种激光视觉传感头与焊枪手眼关系的补偿方法

Country Status (1)

Country Link
CN (1) CN102950365A (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105598600A (zh) * 2016-02-02 2016-05-25 上海理工大学 一种箱型件焊缝自主寻位及轨迹自动生成方法
CN106113050A (zh) * 2016-07-05 2016-11-16 昆山华恒机器人有限公司 工业机器人的示教方法、控制方法及装置、系统
CN106335061A (zh) * 2016-11-11 2017-01-18 福州大学 一种基于四自由度机器人的手眼关系标定方法
CN106514063A (zh) * 2015-09-15 2017-03-22 苏州中启维盛机器人科技有限公司 薄板焊接机器人
CN107378315A (zh) * 2017-06-24 2017-11-24 江苏瑞伯特视觉科技股份有限公司 一种机器人激光视觉传感检测软件系统
CN108032011A (zh) * 2017-12-13 2018-05-15 中国科学院自动化研究所 基于激光结构光焊缝初始点导引装置及方法
CN110788446A (zh) * 2019-11-15 2020-02-14 沈阳航空航天大学 基于激光传感器的变姿态实时焊缝跟踪方法
CN111318783A (zh) * 2020-03-27 2020-06-23 陕西丝路机器人智能制造研究院有限公司 一种标定船用管焊机器人焊枪与激光焊缝跟踪传感器的方法
CN114310957A (zh) * 2022-01-04 2022-04-12 中国科学技术大学 用于医疗检测的机器人系统及检测方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2150844A1 (en) * 1995-02-28 1996-08-29 John Goodfellow Method and apparatus for vision control of welding robots
CN1600488A (zh) * 2004-10-21 2005-03-30 上海交通大学 焊缝自主跟踪方法
CN101053953A (zh) * 2004-07-15 2007-10-17 上海交通大学 焊接机器人单目视觉传感器的手-眼关系快速标定方法
CN101774065A (zh) * 2010-03-17 2010-07-14 昆山工研院工业机器人研究所有限公司 机器人焊缝跟踪偏差补偿方法
CN101966617A (zh) * 2010-08-30 2011-02-09 东南大学 一种用于焊接机器人连续运动的视图模型简约描述方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2150844A1 (en) * 1995-02-28 1996-08-29 John Goodfellow Method and apparatus for vision control of welding robots
CN101053953A (zh) * 2004-07-15 2007-10-17 上海交通大学 焊接机器人单目视觉传感器的手-眼关系快速标定方法
CN1600488A (zh) * 2004-10-21 2005-03-30 上海交通大学 焊缝自主跟踪方法
CN101774065A (zh) * 2010-03-17 2010-07-14 昆山工研院工业机器人研究所有限公司 机器人焊缝跟踪偏差补偿方法
CN101966617A (zh) * 2010-08-30 2011-02-09 东南大学 一种用于焊接机器人连续运动的视图模型简约描述方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
刘苏宜 等: ""激光视觉机器人焊接中摄像机和手眼的同时标定"", 《华南理工大学学报(自然科学版)》 *
熊春山 等: ""手眼立体视觉的算法与实现"", 《机器人》 *

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106514063A (zh) * 2015-09-15 2017-03-22 苏州中启维盛机器人科技有限公司 薄板焊接机器人
CN105598600A (zh) * 2016-02-02 2016-05-25 上海理工大学 一种箱型件焊缝自主寻位及轨迹自动生成方法
CN105598600B (zh) * 2016-02-02 2018-06-19 上海理工大学 一种箱型件焊缝自主寻位及轨迹自动生成方法
CN106113050A (zh) * 2016-07-05 2016-11-16 昆山华恒机器人有限公司 工业机器人的示教方法、控制方法及装置、系统
CN106335061A (zh) * 2016-11-11 2017-01-18 福州大学 一种基于四自由度机器人的手眼关系标定方法
CN107378315A (zh) * 2017-06-24 2017-11-24 江苏瑞伯特视觉科技股份有限公司 一种机器人激光视觉传感检测软件系统
CN108032011A (zh) * 2017-12-13 2018-05-15 中国科学院自动化研究所 基于激光结构光焊缝初始点导引装置及方法
CN108032011B (zh) * 2017-12-13 2019-09-24 中国科学院自动化研究所 基于激光结构光焊缝初始点导引装置及方法
CN110788446A (zh) * 2019-11-15 2020-02-14 沈阳航空航天大学 基于激光传感器的变姿态实时焊缝跟踪方法
CN111318783A (zh) * 2020-03-27 2020-06-23 陕西丝路机器人智能制造研究院有限公司 一种标定船用管焊机器人焊枪与激光焊缝跟踪传感器的方法
CN111318783B (zh) * 2020-03-27 2021-12-03 陕西丝路机器人智能制造研究院有限公司 一种标定船用管焊机器人焊枪与激光焊缝跟踪传感器的方法
CN114310957A (zh) * 2022-01-04 2022-04-12 中国科学技术大学 用于医疗检测的机器人系统及检测方法

Similar Documents

Publication Publication Date Title
CN102950365A (zh) 一种激光视觉传感头与焊枪手眼关系的补偿方法
JP6484729B2 (ja) 無人航空機の奥行き画像の取得方法、取得装置及び無人航空機
Fan et al. A precise initial weld point guiding method of micro-gap weld based on structured light vision sensor
Zou et al. Real-time seam tracking control system based on line laser visions
CN102607457B (zh) 基于惯性导航技术的大尺寸三维形貌测量装置及方法
CN109604777A (zh) 基于激光结构光的焊缝视觉跟踪系统及方法
CN111922483B (zh) 基于学习的线结构光焊缝跟踪与增材路径纠偏装置及方法
CN110524583B (zh) 基于嵌入式平台的焊缝寻位跟踪3d视觉传感器及跟踪方法
CN108662987B (zh) 2d摄像式激光测量头的标定方法
Saeed et al. Weld pool surface depth measurement using a calibrated camera and structured light
JP2017531558A5 (zh)
KR20190124452A (ko) 용접비드 비전 검사 장치 및 용접 불량 검사방법
CN106737859B (zh) 基于不变平面的传感器与机器人的外部参数标定方法
WO2014198227A1 (zh) 用于自移动机器人的线激光测距方法
CN105303560A (zh) 机器人激光扫描式焊缝跟踪系统标定方法
CN111595949A (zh) 一种自适应不规则表面的激光超声成像检测系统及检测方法
JP2008302428A (ja) アーク溶接品質検査方法
CN101954557A (zh) 结构光焊缝图像跟踪的二维位置信息提取方法
CN111397529A (zh) 一种基于双目视觉结构光的复杂表面形状检测方法
CN109636859A (zh) 一种基于单相机的三维视觉检测的标定方法
JP6031368B2 (ja) ワークとの相関位置決め方法
CN113695715A (zh) 一种双传感集成式焊缝跟踪传感器及纠偏方法
Cai et al. A novel measurement system based on binocular fisheye vision and its application in dynamic environment
CN103954217B (zh) 基于条形光源的强镜面反射工件细窄坡口检测装置及方法
CN109238149B (zh) 车体姿态检测装置和接触线动态偏移量检测系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
AD01 Patent right deemed abandoned

Effective date of abandoning: 20130306

C20 Patent right or utility model deemed to be abandoned or is abandoned