CN113829338A - 一种基于坐标系伺服对准的结构光手眼标定方法 - Google Patents

一种基于坐标系伺服对准的结构光手眼标定方法 Download PDF

Info

Publication number
CN113829338A
CN113829338A CN202010588514.9A CN202010588514A CN113829338A CN 113829338 A CN113829338 A CN 113829338A CN 202010588514 A CN202010588514 A CN 202010588514A CN 113829338 A CN113829338 A CN 113829338A
Authority
CN
China
Prior art keywords
coordinate system
relative
robot
structured light
light camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010588514.9A
Other languages
English (en)
Other versions
CN113829338B (zh
Inventor
吴清潇
李思聪
欧锦军
王化明
段红旭
王爽
朱枫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenyang Institute of Automation of CAS
Original Assignee
Shenyang Institute of Automation of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenyang Institute of Automation of CAS filed Critical Shenyang Institute of Automation of CAS
Priority to CN202010588514.9A priority Critical patent/CN113829338B/zh
Publication of CN113829338A publication Critical patent/CN113829338A/zh
Application granted granted Critical
Publication of CN113829338B publication Critical patent/CN113829338B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1679Programme controls characterised by the tasks executed
    • B25J9/1692Calibration of manipulator
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/0095Means or methods for testing manipulators
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Abstract

本发明涉及三维手眼标定领域,面向结构光相机坐标系与机器人末端坐标系的三维标定;在机器人末端安装结构光传感器,借助特殊设计的标定块的几何信息,经过离线和在线两步估算方法,高精度地估算结构光相机坐标系的三维相对位姿关系;本发明具体为:借助标定块的特殊几何信息,操作者可以手动调整机器人末端姿态,带动相机运动采集图像,快速获得结构光相机坐标系的初始相对位姿;在获得初始相对位姿后,机器人可以通过包含指定路径的自动运行作业,带动相机采集图像,算法循环迭代地估算结构光相机坐标系的相对位姿,最后获得高精度的标定结果;该方法在焊缝跟踪、机器人自动打磨等基于结构光的机器人手眼视觉应用中具很高的实用性。

Description

一种基于坐标系伺服对准的结构光手眼标定方法
技术领域
本发明属于计算机视觉领域,具体的说涉及一种结构光相机坐标系和机器人末端坐标系的手眼标定方法。
背景技术
随着科学技术的发展和工业自动化水平的不断提高,机器人在各个行业中得到了广泛的应用,视觉与机器人的结合使得机器人多了一双“眼睛”,结构光作为一种主动视觉比相比传统2D平面视觉,鲁棒性更强,也可以获取三维数据;在焊缝跟踪或是机器人自动打磨项目中,结构光与机器人的结合更是得到了大量应用。因此,手眼标定是结构光机器人手眼视觉应用中必不可少的环节。传统三维手眼标定方法往往通过机器人带动相机运动,对标定板采集多组姿态下的图像,获得足够的标定数据,再经过矩阵拟合,姿态分解等步骤完成手眼标定;这类方法有诸多缺点:(1)姿态分解过程往往面临精度不足的问题;(2)当系统存在微小扰动时,拟合的矩阵经过姿态分解后的结果一致性较差;(3)标定过程中,机器人拍照姿态的选择对标定结果起到了至关重要的作用,标定精度过度依赖操作者的专业水平;
本发明着眼于传统手眼标定方法的不足,力求实现高精度、高可靠性、高易用性的结构光机器人手眼标定方法。通过直接并独立地估算x、y、z每一个轴的相对姿态,回避矩阵拟合与姿态分解的过程,从而得到高精度的相对位姿估算结果,并使结果具有高一致性,当视觉系统存在微小扰动时,标定鲁棒性较好;机器人拍照姿态的选择充分利用标定块的先验信息,通过机器人执行自动路径作业实现标定过程的高度自动化,最大可能地降低人为干预。多年来,中国科学院沈阳自动化所结合实际工程应用背景,在光电信息处理和机器人智能制造领域,取得了一系列研究成果。本发明是在已有的科研成果基础上,大胆创新,经过反复验证,提出了一种全新的结构光机器人手眼标定算法,在实际的工业生产中,具有重要意义。
发明内容
在机器人末端安装结构光传感器,借助特殊设计的标定块的几何信息,经过离线和在线两步估算方法,高精度地估算结构光相机坐标系与机器人末端坐标系的三维相对位姿关系。
本发明为实现上述目的所采用的技术方案是:
一种基于坐标系伺服对准的结构光手眼标定方法,通过标定块与安装在机器人末端的结构光相机,经过离线估算与在线估算,实现估算结构光相机坐标系的三维相对位姿,即结构光相机坐标系相对于机器人工具坐标系的位置和姿态,其中:
离线估算为:根据标定块的几何信息,通过调整机器人末端姿态带动结构光相机采集标定块图像并建立初始机器人工具坐标系,同时获取初始机器人工具坐标系相对于结构光相机坐标系的相对位姿;
在线估算为:机器人事先设定好运动路径,带动结构光相机采集标定块图像并实时建立当前时刻的机器人工具坐标系,结构光相机根据采集到的图像实时给机器人反馈在标定块用户坐标系下的运动坐标信息,机器人根据运动坐标信息的引导在原设定路径的基础上完成下一时刻的运动,循环迭代机器人工具坐标系在结构光相机坐标系下的相对位姿,直至与结构光坐标系下的相对位姿重合,停止迭代。
所述标定块为两相对侧面为直角梯形、上下底面为矩形的四棱柱,其中,上底面有三个不共线且每两个之间距离超过阈值的圆孔A、B、C,以及一个等腰三角形的凹槽;斜坡面有一个平行于斜坡的凹槽。
所述圆孔A、B、C用于建立标定块用户坐标系,以及离线估算相对姿态rx、rz;等腰三角形凹槽用于在离线估算时估算相对位置(tx,ty,tz)和相对姿态ry,在在线估算时估算相对位置(tx,ty,tz)和相对姿态rx、ry;平行于斜坡的凹槽用于在在线估算时估算相对姿态rz。
所述标定块的几何信息包括:一个带有等腰三角形的平面,平面上带有三个或以上不共线的圆孔,一个带有平行凹槽的斜坡面。
离线估算流程依次包括:估算相对姿态rz、估算相对姿态rx、估算相对姿态ry、估算相对位置(tx,ty,tz)。
相对姿态rz的估算:首先,机器人利用三个圆孔建立标定块用户坐标系,原点为圆孔A中心,x轴正向为从圆孔A中心到圆孔B中心,y轴正向为从圆孔A中心到圆孔C中心,坐标系符合右手定则,z轴垂直于标定块上表面向下,手动调整机器人末端姿态,使得结构光相机的激光线穿过孔A和B,此时结构光相机坐标系x轴与标定块用户坐标系x轴重合,得到相对姿态rz;
相对姿态rx的估算:在不改变rz的前提下,手动调整机器人末端,升高或降低标定块用户坐标系下的机器人z坐标,如果结构光相机坐标系和机器人工具坐标系存在相对姿态rx偏差,则激光线会偏离孔A和B所在的直线,调整机器人rx使得在升高或降低的过程中激光线始终穿过孔A和B,此时结构光相机坐标系z轴与标定块用户坐标系z轴平行,估算得到相对姿态rx。
相对姿态ry的估算:在不改变rx、rz的前提下,调整机器人末端使之沿着标定块用户坐标系Y轴平移距离YF,使得激光线与三角形凹槽的两边相交于点D、E;结构光计算出结构光相机坐标系x轴与过点D、E的直线构成的夹角,即相对姿态ry,机器人调整ry,此时结构光相机坐标系与标定块用户坐标系三个坐标轴平行,得到相对姿态ry;ry计算公式如下:
Figure BDA0002554645280000031
其中结构光相机坐标系下的D点测量坐标为(XD,ZD),E点测量坐标为(XE,ZE),θ为结构光相机坐标系x轴与过点D、E的直线构成的夹角;
相对位置(tx,ty,tz)的估算:由于三个坐标轴平行,则原点相对位置偏差可以用D、E中点F坐标XF、ZF与机器人平移量YF计算得到,即:
(tx,ty,tz)=(XF,YF,ZF)。
在线估算流程依次包括:循环迭代估算相对姿态ry,循环迭代估算相对姿态rz,循环迭代估算相对姿态rx,循环迭代估算相对姿态rz、ry、rx,估算相对位置(tx,ty,tz)。
循环迭代估算相对姿态ry:机器人沿标定块用户坐标系y轴运动,使得激光线与三角形凹槽的两边相交于点D、E,相机计算出相对姿态ry,反馈给机器人,机器人判断相对姿态ry是否小于允许误差,如果大于等于允许误差,机器人更新机器人工具坐标系ry后,再进行一次测量更新,直到小于允许误差,ry估算完毕,其中ry计算公式如下:
Figure BDA0002554645280000041
其中,θ为结构光相机坐标系x轴与过点D、E的直线构成的夹角;
循环迭代估算相对姿态rz:机器人沿标定块用户坐标系y轴运动,使得激光线与斜坡面平行凹槽的两边相交于点H、I,相机计算出相对姿态rz,反馈给机器人,机器人判断相对姿态rz是否小于允许误差,如果大于等于允许误差,机器人更新机器人工具坐标系rz后,再进行一次测量更新,直到小于允许误差,rz估算完毕;rz计算公式如下:
Figure BDA0002554645280000042
dy=tanα(ZI-ZH);
其中H点坐标为(XH,ZH),I点坐标为(XI,ZI),斜坡面与水平面夹角为α,水平凹槽两边距离为L;
循环迭代估算相对姿态rx:机器人沿标定块用户y轴运动,使得激光线与上表面三角形凹槽的两边相交于点J、K,机器人沿标定块用户坐标系z轴运动,使得激光线与上表面三角形凹槽的两边相交于点L、M,相机计算出相对姿态rx,反馈给机器人,机器人判断相对姿态rx是否小于允许误差,如果大于等于允许误差,机器人更新机器人工具坐标系rx后,再进行一次测量更新;如果小于允许误差,rx估算完毕;rx计算公式如下:
Figure BDA0002554645280000051
Figure BDA0002554645280000052
其中d1为交点J、K之间的距离,d2为交点L、M之间的距离,等腰三角形凹槽顶角角度为
Figure BDA0002554645280000053
机器人升高距离为h,γ为机器人工具坐标系rx;
循环迭代估算相对姿态rz、ry、rx:判断相对姿态rz、ry、rx,如果大于等于允许值,再次循环估算相对姿态rz、ry、rx,直到某个循环中分别首次得到的相对姿态同时小于允许值,则相对姿态估算完成;
估算相对位置(tx,ty,tz):在估算完rx、ry、rz之后,此时结构光坐标系与用户系的三个坐标轴均已对齐,不存在相对姿态偏差,只剩下原点相对位置偏移,计算公式为:
所述结构光相机坐标系、机器人工具坐标系,标定块用户坐标系,均为右手系,其中,结构光相机坐标系在结构光相机出厂时已经建立完毕,z轴为相机光轴在激光平面上的投影,x轴位于激光平面上垂直于z轴,y轴垂直于激光平面;标定块用户坐标系利用标定块上的三个圆孔建立;机器人工具坐标系建立在机器人末端,用来在标定过程中不断逼近结构光相机坐标系,并使之最终与结构光相机坐标系重合。
本发明具有以下有益效果及优点:
1.算法直接估计每个坐标轴姿态,避免了传统方法做矩阵姿态分解时精度不高的问题;
2.算法在线部分采用多次循环、逐渐逼近的方法估算坐标轴姿态,能够获得高精度的标定结果;
3.在线部分标定流程可以利用机器人作业自动执行,实现标定过程的高度自动化,降低了对操作者技术水平的依赖,标定结果也具有很好的一致性。
附图说明
图1为标定块上表面示意图;
图2为标定块斜坡面示意图;
图3为用户坐标系建立示意图;
图4为算法流程示意图;
图5为离线阶段位姿估算流程示意图;
图6a为离线阶段相对姿态ry计算示意图一;
图6b为离线阶段相对姿态ry计算示意图二;
图7为坐标系原点相对位置计算示意图;
图8为在线阶段位姿估算流程示意图;
图9a为在线阶段相对姿态rz计算示意图一;
图9b为在线阶段相对姿态rz计算示意图二;
图10为在线阶段相对姿态rx计算示意图。
具体实施方式
下面结合附图及实施例对本发明做进一步的详细说明。
1.标定块的设计与用户坐标系的建立
应用于机器人与结构光相机的三维手眼标定方法,利用一个经过特殊设计的标定块的几何信息,高精度地估算结构光相机坐标系的三维相对位姿关系;特殊设计的标定块主要包含一个上表面和斜坡面,其中上表面带有3个圆孔和一个等腰三角形凹槽,斜坡面带有一个平行凹槽;图1给出了标定块上表面示意图,3个圆孔用来建立机器人用户坐标系(标定块用户坐标系),也用来离线估算相对姿态rx、rz,等腰三角形凹槽在离线阶段用来估算相对位置(tx,ty,tz)和相对姿态ry,在线阶段用来估算相对位置(tx,ty,tz)和相对姿态rx、ry;图2给出了标定块斜坡面示意图,斜坡面主要用来在线估算相对姿态rz。
首先需要利用机器人在标定块上表面建立一个用户坐标系,如图3所示,原点建立在孔A中心,孔A到孔B的方向为x轴正向,孔A到孔C的方向为y轴正向,坐标系符合右手定则,z轴垂直上表面朝下。结构光相机光轴的方向为相机坐标系的z轴正向,x轴与z轴垂直并且位于激光平面上。
2.算法流程
算法主要包括离线和在线两部分,通过离线估算阶段获得结构光坐标系初始相对位姿,机器人以此建立初始工具坐标系;之后的在线阶段,视觉不断优化坐标系的估算精度,同时机器人不断更新工具坐标系,最后获得高精度的标定结果。流程如图4所示;
3.离线标定阶段
借助标定块的特殊几何信息,操作者可以手动调整机器人末端姿态带动相机运动采集图像,快速获得结构光相机坐标系的初始相对位姿;离线位姿估算流程依次包括:估算相对姿态rz、估算相对姿态rx、估算相对姿态ry、估算相对位置(tx,ty,tz),如图5所示;
相对姿态rz的估算:手动调整机器人末端姿态,使得结构光相机的激光线穿过孔A和B,此时相机x轴与用户系x轴对齐,相对姿态rz调整完毕。
相对姿态rx的估算:在不改变rz的前提下,手动调整机器人末端,适当升高和降低机器人z坐标,如果结构光坐标系和用户系存在相对姿态rx偏差,则激光线会偏离孔A和B所在的直线,调整机器人rx保证在升高或降低的过程中激光线始终穿过孔A和B,此时说明相机z轴与用户系z轴对齐,相对姿态rx调整完毕。
相对姿态ry的估算:在不改变rx、rz的前提下,调整机器人末端使之沿着Y轴平移YF,使得激光线与三角形的两边相交于点D、E,如图6a~图6b所示;结构光能够计算出相机x轴与过点D、E的直线构成的夹角,即相对姿态ry,机器人调整ry,此时相机坐标系与用户系三个坐标轴均已对齐,相对姿态ry调整完毕;这里ry计算公式如下:
Figure BDA0002554645280000071
其中D点坐标为(XD,ZD),E点坐标为(XE,ZE)。
相对位置(tx,ty,tz)的估算:由于三个坐标轴均已对齐,则原点相对位置偏差可以用D、E中点F坐标XF、ZF与机器人平移量YF计算得到,(tx,ty,tz)=(XF,YF,ZF),如图7所示;
4.在线标定阶段
在获得初始位姿后,机器人可以通过包含指定路径的自动运行作业带动相机采集图像,相机反馈给机器人坐标信息(机器人的运动坐标,即相对位移和旋转。这里指在机器人原固定示教路径上叠加视觉给的相对位移和旋转。)引导下次运动,以此来循环迭代地优化相机坐标系的相对位姿,最后获得高精度的标定结果。在线位姿估算流程依次包括:循环迭代估算相对姿态ry,循环迭代估算相对姿态rz,循环迭代估算相对姿态rx,循环迭代估算相对姿态rz、ry、rx,估算相对位置(tx,ty,tz),如图8所示;
相对姿态ry的估算:机器人延y轴运动,使得激光线与三角形的两边相交于点D、E,相机计算出相对姿态ry,反馈给机器人,机器人判断相对姿态ry是否小于允许误差,如果大于允许误差,机器人更新工具系ry后,再进行一次测量更新,直到小于允许误差,ry估算完毕,其中ry使用公式(1)计算得到。
相对姿态rz的估算:机器人延y轴运动,使得激光线与斜坡面平行凹槽的两边相交于点H、I,如图9a~图9b所示,相机计算出相对姿态rz,反馈给机器人,机器人判断相对姿态rz是否小于允许误差,如果大于允许误差,机器人更新工具系rz后,再进行一次测量更新,直到小于允许误差,rz估算完毕;rz计算公式如下:
Figure BDA0002554645280000081
dy=tanα(ZI-ZH) (3)
其中H点坐标为(XH,ZH),I点坐标为(XI,ZI),斜坡面与水平面夹角为α,水平凹槽两边距离为L;
相对姿态rx的估算:机器人延y轴运动,使得激光线与上表面三角形凹槽的两边相交于点J、K,机器人延z轴运动,使得激光线与上表面三角形凹槽的两边相交于点L、M,如图10所示,相机计算出相对姿态rx,反馈给机器人,机器人判断相对姿态rx是否小于允许误差,如果大于允许误差,机器人更新工具系rx后,再进行一次测量更新,直到小于允许误差,rx估算完毕;rx计算公式如下:
Figure BDA0002554645280000091
Figure BDA0002554645280000092
其中d1为交点J、K之间的距离,d2为交点L、M之间的距离,等腰三角形凹槽顶角角度为
Figure BDA0002554645280000093
机器人升高距离为h;
算法采用循环逼近的方式估算相对姿态,当rx、ry、rz存在偏差时,调整任意一组姿态,其他两组姿态也会产生变化;因此,当算法完成一次相对姿态估算时,要再次估算ry->rz->rx,判断姿态偏差,如果大于允许值,再次循环,直到某个循环中ry、rz、rx的首次测量偏差同时小于允许值,则相对姿态估算完成。在估算完rx、ry、rz之后,此时认为结构光坐标系与机器人工具系的三个坐标轴均已精确对齐,可以认为不存在相对姿态偏差,只剩下原点相对位置偏移;估算方法离线阶段的计算方式一致。
至此,结构光相机的三维相对位姿均已估算完毕,也成功引导机器人工具系最终建立在相机坐标系的位置,得到高精度的手眼标定结果。

Claims (9)

1.一种基于坐标系伺服对准的结构光手眼标定方法,其特征在于,通过标定块与安装在机器人末端的结构光相机,经过离线估算与在线估算,实现估算结构光相机坐标系的三维相对位姿,即结构光相机坐标系相对于机器人工具坐标系的位置和姿态,其中:
离线估算为:根据标定块的几何信息,通过调整机器人末端姿态带动结构光相机采集标定块图像并建立初始机器人工具坐标系,同时获取初始机器人工具坐标系相对于结构光相机坐标系的相对位姿;
在线估算为:机器人事先设定好运动路径,带动结构光相机采集标定块图像并实时建立当前时刻的机器人工具坐标系,结构光相机根据采集到的图像实时给机器人反馈在标定块用户坐标系下的运动坐标信息,机器人根据运动坐标信息的引导在原设定路径的基础上完成下一时刻的运动,循环迭代机器人工具坐标系在结构光相机坐标系下的相对位姿,直至与结构光坐标系下的相对位姿重合,停止迭代。
2.根据权利要求1所述的一种基于坐标系伺服对准的结构光手眼标定方法,其特征在于,所述标定块为两相对侧面为直角梯形、上下底面为矩形的四棱柱,其中,上底面有三个不共线且每两个之间距离超过阈值的圆孔A、B、C,以及一个等腰三角形的凹槽;斜坡面有一个平行于斜坡的凹槽。
3.根据权利要求2所述的一种基于坐标系伺服对准的结构光手眼标定方法,其特征在于,所述圆孔A、B、C用于建立标定块用户坐标系,以及离线估算相对姿态rx、rz;等腰三角形凹槽用于在离线估算时估算相对位置(tx,ty,tz)和相对姿态ry,在在线估算时估算相对位置(tx,ty,tz)和相对姿态rx、ry;平行于斜坡的凹槽用于在在线估算时估算相对姿态rz。
4.根据权利要求1所述的一种基于坐标系伺服对准的结构光手眼标定方法,其特征在于,所述标定块的几何信息包括:一个带有等腰三角形的平面,平面上带有三个或以上不共线的圆孔,一个带有平行凹槽的斜坡面。
5.根据权利要求1所述的一种基于坐标系伺服对准的结构光手眼标定方法,其特征在于,离线估算流程依次包括:估算相对姿态rz、估算相对姿态rx、估算相对姿态ry、估算相对位置(tx,ty,tz)。
6.根据权利要求5所述的一种基于坐标系伺服对准的结构光手眼标定方法,其特征在于,
相对姿态rz的估算:首先,机器人利用三个圆孔建立标定块用户坐标系,原点为圆孔A中心,x轴正向为从圆孔A中心到圆孔B中心,y轴正向为从圆孔A中心到圆孔C中心,坐标系符合右手定则,z轴垂直于标定块上表面向下,手动调整机器人末端姿态,使得结构光相机的激光线穿过孔A和B,此时结构光相机坐标系x轴与标定块用户坐标系x轴重合,得到相对姿态rz;
相对姿态rx的估算:在不改变rz的前提下,手动调整机器人末端,升高或降低标定块用户坐标系下的机器人z坐标,如果结构光相机坐标系和机器人工具坐标系存在相对姿态rx偏差,则激光线会偏离孔A和B所在的直线,调整机器人rx使得在升高或降低的过程中激光线始终穿过孔A和B,此时结构光相机坐标系z轴与标定块用户坐标系z轴平行,估算得到相对姿态rx;
相对姿态ry的估算:在不改变rx、rz的前提下,调整机器人末端使之沿着标定块用户坐标系Y轴平移距离YF,使得激光线与三角形凹槽的两边相交于点D、E;结构光计算出结构光相机坐标系x轴与过点D、E的直线构成的夹角,即相对姿态ry,机器人调整ry,此时结构光相机坐标系与标定块用户坐标系三个坐标轴平行,得到相对姿态ry;ry计算公式如下:
Figure FDA0002554645270000021
其中结构光相机坐标系下的D点测量坐标为(XD,ZD),E点测量坐标为(XE,ZE),θ为结构光相机坐标系x轴与过点D、E的直线构成的夹角;
相对位置(tx,ty,tz)的估算:由于三个坐标轴平行,则原点相对位置偏差可以用D、E中点F坐标XF、ZF与机器人平移量YF计算得到,即:
(tx,ty,tz)=(XF,YF,ZF)。
7.根据权利要求1所述的一种基于坐标系伺服对准的结构光手眼标定方法,其特征在于,在线估算流程依次包括:循环迭代估算相对姿态ry,循环迭代估算相对姿态rz,循环迭代估算相对姿态rx,循环迭代估算相对姿态rz、ry、rx,估算相对位置(tx,ty,tz)。
8.根据权利要求7所述的一种基于坐标系伺服对准的结构光手眼标定方法,其特征在于,
循环迭代估算相对姿态ry:机器人沿标定块用户坐标系y轴运动,使得激光线与三角形凹槽的两边相交于点D、E,相机计算出相对姿态ry,反馈给机器人,机器人判断相对姿态ry是否小于允许误差,如果大于等于允许误差,机器人更新机器人工具坐标系ry后,再进行一次测量更新,直到小于允许误差,ry估算完毕,其中ry计算公式如下:
Figure FDA0002554645270000031
其中,θ为结构光相机坐标系x轴与过点D、E的直线构成的夹角;
循环迭代估算相对姿态rz:机器人沿标定块用户坐标系y轴运动,使得激光线与斜坡面平行凹槽的两边相交于点H、I,相机计算出相对姿态rz,反馈给机器人,机器人判断相对姿态rz是否小于允许误差,如果大于等于允许误差,机器人更新机器人工具坐标系rz后,再进行一次测量更新,直到小于允许误差,rz估算完毕;rz计算公式如下:
Figure FDA0002554645270000032
dy=tanα(ZI-ZH);
其中H点坐标为(XH,ZH),I点坐标为(XI,ZI),斜坡面与水平面夹角为α,水平凹槽两边距离为L;
循环迭代估算相对姿态rx:机器人沿标定块用户y轴运动,使得激光线与上表面三角形凹槽的两边相交于点J、K,机器人沿标定块用户坐标系z轴运动,使得激光线与上表面三角形凹槽的两边相交于点L、M,相机计算出相对姿态rx,反馈给机器人,机器人判断相对姿态rx是否小于允许误差,如果大于等于允许误差,机器人更新机器人工具坐标系rx后,再进行一次测量更新;如果小于允许误差,rx估算完毕;rx计算公式如下:
Figure FDA0002554645270000041
Figure FDA0002554645270000042
其中d1为交点J、K之间的距离,d2为交点L、M之间的距离,等腰三角形凹槽顶角角度为
Figure FDA0002554645270000043
机器人升高距离为h,γ为机器人工具坐标系rx;
循环迭代估算相对姿态rz、ry、rx:判断相对姿态rz、ry、rx,如果大于等于允许值,再次循环估算相对姿态rz、ry、rx,直到某个循环中分别首次得到的相对姿态同时小于允许值,则相对姿态估算完成;
估算相对位置(tx,ty,tz):在估算完rx、ry、rz之后,此时结构光坐标系与用户系的三个坐标轴均已对齐,不存在相对姿态偏差,只剩下原点相对位置偏移,计算公式为:
(tx,ty,tz)=(XF,YF,ZF)。
9.根据权利要求1、3、5、6、8中任意一项所述的一种基于坐标系伺服对准的结构光手眼标定方法,其特征在于,所述结构光相机坐标系、机器人工具坐标系,标定块用户坐标系,均为右手系,其中,结构光相机坐标系在结构光相机出厂时已经建立完毕,z轴为相机光轴在激光平面上的投影,x轴位于激光平面上垂直于z轴,y轴垂直于激光平面;标定块用户坐标系利用标定块上的三个圆孔建立;机器人工具坐标系建立在机器人末端,用来在标定过程中不断逼近结构光相机坐标系,并使之最终与结构光相机坐标系重合。
CN202010588514.9A 2020-06-24 2020-06-24 一种基于坐标系伺服对准的结构光手眼标定方法 Active CN113829338B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010588514.9A CN113829338B (zh) 2020-06-24 2020-06-24 一种基于坐标系伺服对准的结构光手眼标定方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010588514.9A CN113829338B (zh) 2020-06-24 2020-06-24 一种基于坐标系伺服对准的结构光手眼标定方法

Publications (2)

Publication Number Publication Date
CN113829338A true CN113829338A (zh) 2021-12-24
CN113829338B CN113829338B (zh) 2023-06-20

Family

ID=78963480

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010588514.9A Active CN113829338B (zh) 2020-06-24 2020-06-24 一种基于坐标系伺服对准的结构光手眼标定方法

Country Status (1)

Country Link
CN (1) CN113829338B (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011152599A (ja) * 2010-01-26 2011-08-11 Ihi Corp ロボットのキャリブレーション方法および装置
US20180297198A1 (en) * 2015-10-22 2018-10-18 Canon Kabushiki Kaisha Teaching point correcting method, program, recording medium, robot apparatus, imaging point creating method, and imaging point creating apparatus
US20180304466A1 (en) * 2017-04-19 2018-10-25 Toyota Jidosha Kabushiki Kaisha Calibration system
CN108994844A (zh) * 2018-09-26 2018-12-14 广东工业大学 一种打磨操作臂手眼关系的标定方法和装置
CN110815204A (zh) * 2018-08-14 2020-02-21 中国科学院沈阳自动化研究所 一种工业机器人运动学标定方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011152599A (ja) * 2010-01-26 2011-08-11 Ihi Corp ロボットのキャリブレーション方法および装置
US20180297198A1 (en) * 2015-10-22 2018-10-18 Canon Kabushiki Kaisha Teaching point correcting method, program, recording medium, robot apparatus, imaging point creating method, and imaging point creating apparatus
US20180304466A1 (en) * 2017-04-19 2018-10-25 Toyota Jidosha Kabushiki Kaisha Calibration system
CN110815204A (zh) * 2018-08-14 2020-02-21 中国科学院沈阳自动化研究所 一种工业机器人运动学标定方法
CN108994844A (zh) * 2018-09-26 2018-12-14 广东工业大学 一种打磨操作臂手眼关系的标定方法和装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
刘伟军,董再励,郝颖明,朱枫: "基于立体视觉的移动机器人自主导航定位系统", 高技术通讯, no. 10 *
解则晓;陈文柱;迟书凯;牟楠;: "基于结构光视觉引导的工业机器人定位系统", 光学学报, no. 10 *

Also Published As

Publication number Publication date
CN113829338B (zh) 2023-06-20

Similar Documents

Publication Publication Date Title
CN111775146B (zh) 一种工业机械臂多工位作业下的视觉对准方法
Lei et al. A review of vision-aided robotic welding
CN111745267A (zh) 一种基于激光位移传感器的坡口焊缝实时跟踪系统及方法
CN108408080A (zh) 一种飞机翼身对接装配装置、方法及系统
CN104384765A (zh) 基于三维模型与机器视觉的自动焊接方法及焊接装置
CN108032011B (zh) 基于激光结构光焊缝初始点导引装置及方法
CN109318234A (zh) 一种适用于视觉伺服插拔作业的标定方法
CN113894481B (zh) 复杂空间曲线焊缝的焊接位姿调整方法及装置
CN103418950A (zh) 工业焊接机器人焊缝跟踪过程位姿自动调整方法
JP2021049607A (ja) ロボットに支持された部材の位置を調整するロボット装置の制御装置
CN112894209A (zh) 一种基于十字激光的管板智能焊接机器人自动平面校正方法
CN114643578A (zh) 一种提高机器人视觉引导精度的标定装置及方法
CN109128540B (zh) 一种t型接头激光焊接焦点轨迹确定方法
CN109900251A (zh) 一种基于视觉技术的机器人定位装置及方法
CN112958960B (zh) 一种基于光学靶标的机器人手眼标定装置
CN108817614A (zh) 一种弧焊机器人焊缝跟踪姿态调整方法
CN113829338B (zh) 一种基于坐标系伺服对准的结构光手眼标定方法
CN113641174A (zh) 一种滑移转向模块化机器人的自主对接控制方法
CN110039520B (zh) 一种基于图像对比的示教、加工系统
CN113664831B (zh) 一种获取焊缝点云信息的焊接机器人系统及方法
CN115770988A (zh) 一种基于点云环境理解的焊接机器人智能示教方法
CN212330878U (zh) 角度可调管道组对机器人
CN114812459A (zh) 一种大型零部件对接位姿检测方法
CN111889951A (zh) 角度可调管道组对机器人及管道组角度调节方法
Liu et al. A visual positioning and measurement system for robotic drilling

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant