CN1586833A - 焊接机器人单目视觉传感器及其手-眼关系快速标定方法 - Google Patents

焊接机器人单目视觉传感器及其手-眼关系快速标定方法 Download PDF

Info

Publication number
CN1586833A
CN1586833A CN 200410052857 CN200410052857A CN1586833A CN 1586833 A CN1586833 A CN 1586833A CN 200410052857 CN200410052857 CN 200410052857 CN 200410052857 A CN200410052857 A CN 200410052857A CN 1586833 A CN1586833 A CN 1586833A
Authority
CN
China
Prior art keywords
robot
coordinate system
welding robot
camera
welding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN 200410052857
Other languages
English (en)
Other versions
CN1331642C (zh
Inventor
林涛
朱振友
陈善本
陈文杰
陈希章
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jiaotong University
Original Assignee
Shanghai Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiaotong University filed Critical Shanghai Jiaotong University
Priority to CNB2004100528574A priority Critical patent/CN1331642C/zh
Publication of CN1586833A publication Critical patent/CN1586833A/zh
Application granted granted Critical
Publication of CN1331642C publication Critical patent/CN1331642C/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

一种用于焊接切割领域的焊接机器人单目视觉传感器及其手-眼关系快速标定方法,传感器的微型CCD摄像机、减光及滤光系统及电机驱动系统设置在安装支架上,减光及滤光系统中,减光镜片及滤光镜片重叠设置在镜片支架上,通过活动连杆与驱动臂相连接;电机驱动系统的驱动电机与减速装置连接,减光及滤光系统的驱动臂直接与减速装置输出轴相连。本发明通过在对摄像机内外参数标定同时,将世界坐标系与机器人本体坐标系重合的方法,在标定摄像机内外参数的同时,根据同一坐标在两个以上的坐标系下的坐标变换关系,将摄像机外参数在世界坐标系下的表示,转换为在焊接机器人末端控制点坐标系下来表示,完成焊接机器人的手眼关系标定。

Description

焊接机器人单目视觉传感器及其手-眼关系快速标定方法
技术领域
本发明涉及一种焊接机器人视觉传感器及其标定方法,具体是一种焊接机器人单目视觉传感器及其手-眼关系快速标定方法。用于焊接切割领域。
背景技术
目前,应用于焊接机器人上的传感方式多种多样,在这些传感方法之中,由于视觉传感方式具有信息量大、非接触、快速、高精度及自动化程度高等优点,受到广大焊接工作者的喜爱,目前已成为机器人焊接传感器方面的研究热点。视觉传感技术在焊接机器人上应用较多的是进行焊缝视觉跟踪及熔透控制等焊接过程智能控制方面的研究。目前国内外研究比较成熟的是采用激光或者结构光的视觉传感方式,这种传感方式需要外加特定的光源,存在着信息量不够丰富、功能单一、体积较大等不足之处。而对于焊接机器人进行路径导引控制时,常常采用手-眼视觉配置方式,这时对于焊接机器人的手-眼关系标定是关键环节。
经对现有技术文献检索分析,发现孙振国等人在《光学技术》(2001,Vol27,No.3:252-254,259)上发表的“新型智能球罐焊接机器人视觉传感器的研究”,该文献为实现智能球罐焊接机器人的自主运动与焊缝自动跟踪,研制了一种新型视觉传感器。该传感器以高分辨率线阵CCD芯片为核心,由光源、滤光片、透镜等光学系统及CCD驱动电路、光电信号处理电路等组成,其中光电处理电路全部由硬件实现。整个视觉传感系统可以避免焊接时弧光的干扰,实时、准确地检测出焊缝轨迹线偏差信号,但是需要外加特定光源,结构复杂,并且滤光片固定在摄像机前端不能移动,无法满足在自然光条件下使用。
检索中还发现,王敏等人在《华中科技大学学报》2001,Vol29,NO.3:45-47)上发表的“空间物体定位的机器人手眼视觉标定方法”,该文献提出了一种用于空间物体定位的机器人手-眼视觉标定新方法,采用一恒定变换矩阵描述末端执行器坐标系与机器人坐标系的对应关系,并假定在标定过程中,物体至摄像机的距离保持不变,将三维定位的问题简化为二维问题处理,极大地减少了计算量。该方法具有定位准确、可靠性高等优点,但是也存在着在标定过程中需要移动机器人末端执行器,进行多次取像及多次标定的不足之处。在实际生产应用中不能满足简便快速标定的要求。
发明内容
本发明的目的在于针对现有技术中存在的上述不足和缺陷,提供一种焊接机器人单目视觉传感器及其手-眼关系快速标定方法,使其实现了焊接机器人视觉传感器的多用途、外形小巧、大大简化了标定的计算量和复杂程度,具有较高的精度,完全满足焊接机器人的生产实际工作需要。
本发明是通过以下技术方案实现的,焊接机器人单目视觉传感器包括:微型CCD摄像机、减光及滤光系统、电机驱动系统及安装支架。其连接关系为:微型CCD摄像机、减光及滤光系统以及电机驱动系统都设置在安装支架上,其中微型CCD摄像机主要负责对焊接场景及被焊工件以及焊接熔池图像的采集;电机驱动系统包括驱动电机和减速装置,其中驱动电机与减速装置固定连接,由减速装置输出轴输出。通过电机控制接口电路,可以采用机器人控制器内的通用I/O对电机进行控制,实现由焊接机器人控制器直接驱动电机的功能。从而既可以在对焊接机器人进行示教作业时,由示教编程器对驱动电机进行控制,也可以通过主控计算机实现对驱动电机网络编程控制,从而满足在不同工作阶段驱动减光及滤光系统的工作要求;减光及滤光系统包括减光镜片、滤光镜片以及镜片支架、活动连杆、驱动臂,减光镜片及滤光镜片重叠设置在镜片支架上,通过活动连杆与驱动臂相连接,并且驱动臂直接与电机驱动系统的减速装置输出轴相连,可被输出轴驱动正/反向旋转;本发明整个传感器通过安装支架与焊接机器人末端的焊枪固定连接。
本发明传感器使用时,在开始焊接前阶段,由于电弧没有引燃,系统是采用自然光照明成像,这时控制驱动电机反转,带动减光及滤光系统中的驱动臂反转,通过活动连杆,将减光片及滤光片安装支架从摄像机前端移开,使摄像机可以直接拍摄被焊工件图像,实现对焊缝及焊接起始位置的识别确认,进行焊接机器人对初始焊接位置的识别及导引;在进行焊接过程阶段,由于电弧已经引燃,光照十分强烈,为了使摄像机能够清晰对焊接熔池成像,可控制驱动电机正转,带动减光及滤光系统中的驱动臂正转,通过活动连杆,将减光片及滤光片安装支架移到摄像机前端,从而使摄像机通过滤光片及减光片对焊接熔池成像,通过对熔池图像的处理可以进行焊接过程的焊缝跟踪及焊接熔透控制。从而实现了只采用单独一个摄像机来进行多种传感需求,简化了传感器的结构,满足实用性要求。
摄像机的安装位置固定以后,需要对摄像机的内外参数及焊接机器人的手眼关系参数进行标定,并且在摄像机与机器人手臂(焊枪)相对位置发生变化的时候,需要重新对机器人的手眼关系参数进行标定,可见,简便快速的焊接机器人手眼标定算法对于实际应用是十分必要的。
本发明焊接机器人单目视觉传感器的手-眼关系快速标定方法,通过在对摄像机内外参数标定同时,将世界坐标系与机器人本体坐标系重合的方法,在标定摄像机内外参数的同时,根据同一坐标在两个以上的坐标系下的坐标变换关系,将摄像机外参数在世界坐标系下的表示,转换为在焊接机器人末端控制点(手)坐标系下来表示,从而完成焊接机器人的手眼关系标定。
以下通过步骤对本发明作进一步的具体限定:
(1)根据“五点标定法”对焊接机器人控制点(焊枪尖端点)进行精确标定;
(2)对摄像机内外参数进行标定,并且在标定取像时刻记录机器人控制点的位置和姿态数据。其中,标定所获取的摄像机内参数是摄像机自身的成像几何模型固有参数,它对于某一摄像机来说,一经标定就不会再变。而外参数表征在标定取像时刻,摄像机坐标系与世界坐标系的相对位置关系。在对标定点的三维坐标获取过程中,采用机器人的控制点来间接获取的方式,通过这种方式可将世界坐标系与机器人本体坐标系重合,则标定摄像机时所获得的摄像机外参数,即为摄像机在标定时刻相对于机器人本体坐标系的相对位置关系,结合标定摄像机时刻的机器人控制点姿态数据,通过适当的坐标系变换,可快速标定机器人的手眼关系。
本发明传感器具有显著特点,传感器体积小巧,满足了焊接机器人在工作过程中的灵活性及机器人本体的持重限制要求。并且在焊接机器人的不同工作阶段,根据不同的工作需要,传感器可实现不同的功能,可以满足多种工作需要。所设计的机器人手-眼关系快速标定方法与传统的机器人手-眼关系标定方法相比较,省略了复杂的空间三维坐标测量仪等测量仪器,而且不必移动焊接机器人,降低了由于焊接机器人运动产生的标定误差。并且取像次数与对摄像机外参数的标定次数只是传统方法的一半,大大简化了标定的计算量和复杂程度,具有较高的精度和较大的使用价值,完全满足焊接机器人的生产实际工作需要。
附图说明
图1本发明传感器结构示意图
具体实施方式
如图1所示,本发明焊接机器人单目视觉传感器包括:微型CCD摄像机1、减光及滤光系统2、电机驱动系统3及安装支架4。其连接关系为:微型CCD摄像机1、减光及滤光系统2以及电机驱动系统3都设置在安装支架4上,减光及滤光系统2包括减光镜片5、滤光镜片6以及镜片支架7、活动连杆8、驱动臂9,减光镜片5及滤光镜片6重叠设置在镜片支架7上,通过活动连杆8与驱动臂9相连接,并且驱动臂9直接与电机驱动系统中的减速装置11输出轴相连,可被输出轴驱动正/反向旋转;电机驱动系统3包括驱动电机10和减速装置11,其中驱动电机10与减速装置11固定连接,由减速装置11输出轴输出。
本发明整个传感器通过安装支架4与焊接机器人末端的焊枪12固定连接。
以下对本发明方法的内容作进一步的理解:
对于焊接机器人手-眼关系的快速标定方法,其具体实现主要是根据空间不同坐标系之间的坐标变换关系。假设给定坐标系{A},{B}和{C},若已知{B}相对于{A}的描述为,{C}相对于{B}的描述为,则可获得如下公式(1):
T C A = T B A T C B = R B A p B 0 A 0 0 0 1 R C B p B C 0 0 0 0 1 = R B A R C B R B A p C 0 B + p B 0 A 0 0 0 1 - - - ( 1 )
根据摄像机标定时所求得的旋转矩阵R和平移矢量T,可以求得机器人本体坐标系Crob与摄像机坐标系Cc之间的描述,即相当于式(1)中的B AT已知;在摄像机标定取像时刻可以实时读取机器人手臂末关节坐标系Ch相对于机器人本体坐标系Crob的位置矢量和旋转角度,从而可以求得机器人手臂末关节坐标系Ch相对于机器人本体坐标系Crob的描述,即相当于式(1)中的C BT已知。即由摄像机坐标系、焊接机器人本体坐标系(世界坐标系)与机器人手臂末端(焊枪)坐标系这三个坐标系组成了一个闭合链环,从而可以求得机器人手臂末关节坐标系Ch相对于摄像机坐标系Cc的描述。则仅通过在一个位置进行一次取像标定,就可以实现在标定摄像机外参数的同时标定焊接机器人的“手-眼”关系。

Claims (6)

1、一种焊接机器人单目视觉传感器,包括:微型CCD摄像机(1)、减光及滤光系统(2)、电机驱动系统(3)及安装支架(4),其特征在于,微型CCD摄像机(1)、减光及滤光系统(2)以及电机驱动系统(3)都设置在安装支架(4)上,减光及滤光系统(2)包括:减光镜片(5)、滤光镜片(6)以及镜片支架(7)、活动连杆(8)、驱动臂(9),减光镜片(5)及滤光镜片(6)重叠设置在镜片支架(7)上,通过活动连杆(8)与驱动臂(9)相连接,电机驱动系统(3)包括:驱动电机(10)和减速装置(11),其中驱动电机(10)与减速装置(11)固定连接,由减速装置(11)输出轴输出,并且减光及滤光系统(2)的驱动臂(9)直接与减速装置(11)输出轴相连。
2、根据权利要求1所述的焊接机器人单目视觉传感器,其特征是,驱动臂(9)被减速装置(11)输出轴驱动正/反向旋转。
3、根据权利要求1所述的焊接机器人单目视觉传感器,其特征是,整个传感器通过安装支架(4)与焊接机器人末端的焊枪(12)固定连接。
4、一种焊接机器人单目视觉传感器的手-眼关系快速标定方法,其特征在于,通过在对摄像机内外参数标定同时,将世界坐标系与机器人本体坐标系重合的方法,在标定摄像机内外参数的同时,根据同一坐标在两个以上的坐标系下的坐标变换关系,将摄像机外参数在世界坐标系下的表示,转换为在焊接机器人末端控制点坐标系下来表示,从而完成焊接机器人的手眼关系标定。
5、根据权利要求4所述的焊接机器人单目视觉传感器的手-眼关系快速标定方法,其特征是,以下通过步骤对本发明作进一步的具体限定:
(1)根据“五点标定法”对焊接机器人控制点即焊枪尖端点进行精确标定;
(2)对摄像机内外参数进行标定,并且在标定取像时刻记录机器人控制点的位置和姿态数据,其中,标定所获取的摄像机内参数是摄像机自身的成像几何模型固有参数。
6、根据权利要求5所述的焊接机器人单目视觉传感器的手-眼关系快速标定方法,其特征是,所述的对摄像机内外参数进行标定,在对标定点的三维坐标获取过程中,采用机器人的控制点来间接获取的方式,通过这种方式将世界坐标系与机器人本体坐标系重合,则标定摄像机时所获得的摄像机外参数,即为摄像机在标定时刻相对于机器人本体坐标系的相对位置关系,结合标定摄像机时刻的机器人控制点姿态数据,通过坐标系变换,能快速标定机器人的手眼关系。
CNB2004100528574A 2004-07-15 2004-07-15 焊接机器人单目视觉传感器 Expired - Fee Related CN1331642C (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CNB2004100528574A CN1331642C (zh) 2004-07-15 2004-07-15 焊接机器人单目视觉传感器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CNB2004100528574A CN1331642C (zh) 2004-07-15 2004-07-15 焊接机器人单目视觉传感器

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CNB2007100076443A Division CN100480004C (zh) 2004-07-15 2004-07-15 焊接机器人单目视觉传感器的手-眼关系快速标定方法

Publications (2)

Publication Number Publication Date
CN1586833A true CN1586833A (zh) 2005-03-02
CN1331642C CN1331642C (zh) 2007-08-15

Family

ID=34602628

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB2004100528574A Expired - Fee Related CN1331642C (zh) 2004-07-15 2004-07-15 焊接机器人单目视觉传感器

Country Status (1)

Country Link
CN (1) CN1331642C (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100460166C (zh) * 2007-03-08 2009-02-11 上海交通大学 焊接机器人多功能双目视觉传感器及其标定方法
CN101224519B (zh) * 2008-01-31 2010-04-14 上海交通大学 基于视觉传感的弧焊机器人焊接监控系统
CN102151945A (zh) * 2011-01-28 2011-08-17 唐山开元焊接自动化技术研究所有限公司 多功能弧焊视觉监视装置和监视方法
CN102990181A (zh) * 2012-10-23 2013-03-27 廖怀宝 一种自动焊锡机器人焊点偏移程序文件补偿的方法
CN103231162A (zh) * 2013-04-17 2013-08-07 柳州市自动化科学研究所 机器人焊接质量视觉检测装置及其检测方法
CN103878774A (zh) * 2014-02-25 2014-06-25 西安航天精密机电研究所 一种基于机器人的视觉标定方法
CN104260112A (zh) * 2014-09-18 2015-01-07 西安航天精密机电研究所 一种机器人手眼定位方法
CN105499772A (zh) * 2016-01-26 2016-04-20 清华大学 一种薄壁细隙环纵缝的微束等离子焊接成形控制系统
CN105598600A (zh) * 2016-02-02 2016-05-25 上海理工大学 一种箱型件焊缝自主寻位及轨迹自动生成方法
CN106624418A (zh) * 2016-10-20 2017-05-10 北京工业大学 一种应用特征谱线焊接熔池流动监测方法
CN108226168A (zh) * 2018-01-14 2018-06-29 湘潭大学 单目多功能主被动视觉传感装置及其传感方法
CN108413896A (zh) * 2018-02-27 2018-08-17 博众精工科技股份有限公司 一种机械手标定方法
CN109472246A (zh) * 2014-06-15 2019-03-15 丁义荣 基于智能信息终端的指纹采集方法
CN109807936A (zh) * 2019-03-11 2019-05-28 上海交通大学 用于焊缝与熔池单目双位图像同步采集的机器人焊接视觉传感器
CN111189393A (zh) * 2020-01-21 2020-05-22 北京卫星制造厂有限公司 一种三维薄壁结构焊缝的高精度全局视觉测量方法

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110238820A (zh) * 2019-07-12 2019-09-17 易思维(杭州)科技有限公司 基于特征点的手眼标定方法

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4614868A (en) * 1984-10-12 1986-09-30 Caterpillar Industrial Inc. Fiber optic seam tracking apparatus
JP2660929B2 (ja) * 1989-04-19 1997-10-08 ファナック株式会社 Ccd固体撮像素子を用いたアークセンサ
JPH07116849A (ja) * 1993-10-26 1995-05-09 Fanuc Ltd 光軸調整手段を有した溶接センサ

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100460166C (zh) * 2007-03-08 2009-02-11 上海交通大学 焊接机器人多功能双目视觉传感器及其标定方法
CN101224519B (zh) * 2008-01-31 2010-04-14 上海交通大学 基于视觉传感的弧焊机器人焊接监控系统
CN102151945A (zh) * 2011-01-28 2011-08-17 唐山开元焊接自动化技术研究所有限公司 多功能弧焊视觉监视装置和监视方法
CN102990181A (zh) * 2012-10-23 2013-03-27 廖怀宝 一种自动焊锡机器人焊点偏移程序文件补偿的方法
CN102990181B (zh) * 2012-10-23 2014-05-21 廖怀宝 一种自动焊锡机器人焊点偏移程序文件补偿的方法
CN103231162A (zh) * 2013-04-17 2013-08-07 柳州市自动化科学研究所 机器人焊接质量视觉检测装置及其检测方法
CN103878774A (zh) * 2014-02-25 2014-06-25 西安航天精密机电研究所 一种基于机器人的视觉标定方法
CN109472246A (zh) * 2014-06-15 2019-03-15 丁义荣 基于智能信息终端的指纹采集方法
CN104260112A (zh) * 2014-09-18 2015-01-07 西安航天精密机电研究所 一种机器人手眼定位方法
CN104260112B (zh) * 2014-09-18 2016-05-18 西安航天精密机电研究所 一种机器人手眼定位方法
CN105499772B (zh) * 2016-01-26 2017-10-24 清华大学 一种薄壁细隙环纵缝的微束等离子焊接成形控制系统
CN105499772A (zh) * 2016-01-26 2016-04-20 清华大学 一种薄壁细隙环纵缝的微束等离子焊接成形控制系统
CN105598600A (zh) * 2016-02-02 2016-05-25 上海理工大学 一种箱型件焊缝自主寻位及轨迹自动生成方法
CN105598600B (zh) * 2016-02-02 2018-06-19 上海理工大学 一种箱型件焊缝自主寻位及轨迹自动生成方法
CN106624418A (zh) * 2016-10-20 2017-05-10 北京工业大学 一种应用特征谱线焊接熔池流动监测方法
CN106624418B (zh) * 2016-10-20 2019-03-22 北京工业大学 一种应用特征谱线焊接熔池流动监测方法
CN108226168A (zh) * 2018-01-14 2018-06-29 湘潭大学 单目多功能主被动视觉传感装置及其传感方法
CN108413896A (zh) * 2018-02-27 2018-08-17 博众精工科技股份有限公司 一种机械手标定方法
CN108413896B (zh) * 2018-02-27 2019-12-13 博众精工科技股份有限公司 一种机械手标定方法
CN109807936A (zh) * 2019-03-11 2019-05-28 上海交通大学 用于焊缝与熔池单目双位图像同步采集的机器人焊接视觉传感器
CN111189393A (zh) * 2020-01-21 2020-05-22 北京卫星制造厂有限公司 一种三维薄壁结构焊缝的高精度全局视觉测量方法
CN111189393B (zh) * 2020-01-21 2021-10-01 北京卫星制造厂有限公司 一种三维薄壁结构焊缝的高精度全局视觉测量方法

Also Published As

Publication number Publication date
CN1331642C (zh) 2007-08-15

Similar Documents

Publication Publication Date Title
CN100480004C (zh) 焊接机器人单目视觉传感器的手-眼关系快速标定方法
CN1331642C (zh) 焊接机器人单目视觉传感器
CN1319704C (zh) 焊接机器人伺服双目视觉传感器
CN1218806C (zh) 具有视觉焊缝自动跟踪功能的弧焊机器人控制平台
CN104057202B (zh) 基于fpga的远程监控移动式机器人自主焊接系统及方法
JP5070861B2 (ja) レーザ溶接装置およびその方法
CN102039471A (zh) 适用机器人焊接的紧凑型多功能视觉传感器
CN110370247A (zh) 一种巡线机器人行走装置
CN105487558A (zh) 基于移动机器人的目标跟随系统及方法
US6246476B1 (en) Method and apparatus for controlling a moveable object
CN110488309A (zh) 基于激光清除异物装置的目标标校方法
CN112882435A (zh) 一种适用于狭小空间的数据采集及图像处理控制系统及其方法
CN111486419A (zh) 一种无影灯自动定位的方法和装置
CN208468359U (zh) 一种十轴移动视觉机器人
CN105759390A (zh) 一种光纤自动定位与放置装置与方法
CN115661726A (zh) 一种轨道列车工件装配的自主视频采集与分析方法
CN108847611A (zh) 反射型激光清除异物装置除异物方法
CN1417006A (zh) 开放式工业机器人视觉控制平台
CN213182424U (zh) 一种基于openmv的视觉伺服移动机器人系统
CN219105611U (zh) 六足智能自动驾驶机械臂无死角扫描消毒小车
CN107464492B (zh) 基于三维扫描的包带机非接触式自动示教方法及系统装置
CN108808551A (zh) 反射型激光清除异物装置自动除异物方法
CN213633978U (zh) 用于样本检测设备的显微镜机构
CN208847932U (zh) 一种精准调焦装置
CN2510250Y (zh) 开放式工业机器人视觉控制平台

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20070815

Termination date: 20100715