CN113237434A - 一种基于阶梯形标定物的激光轮廓传感器eye-in-hand标定方法 - Google Patents

一种基于阶梯形标定物的激光轮廓传感器eye-in-hand标定方法 Download PDF

Info

Publication number
CN113237434A
CN113237434A CN202110445265.2A CN202110445265A CN113237434A CN 113237434 A CN113237434 A CN 113237434A CN 202110445265 A CN202110445265 A CN 202110445265A CN 113237434 A CN113237434 A CN 113237434A
Authority
CN
China
Prior art keywords
coordinate system
point
equation
matrix
robot
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110445265.2A
Other languages
English (en)
Other versions
CN113237434B (zh
Inventor
孙炜
苑河南
刘乃铭
刘权利
舒帅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hunan University
Original Assignee
Hunan University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hunan University filed Critical Hunan University
Priority to CN202110445265.2A priority Critical patent/CN113237434B/zh
Publication of CN113237434A publication Critical patent/CN113237434A/zh
Application granted granted Critical
Publication of CN113237434B publication Critical patent/CN113237434B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Manipulator (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明提出了一种阶梯型标定物和基于阶梯型标定物激光轮廓传感器手眼标定方法(eye‑in‑hand模式),涉及了激光轮廓传感器的手眼标定技术。本发明所用的阶梯形标定物特征明显,这些特征易于被传感器检测并提取,每次标定仅需对齐阶梯形标定物上的标记点,提取每个阶梯的角点并对这些角点利用RANSAC法拟合直线,利用直线修正激光轮廓传感器扫描的特征点数据,再根据这些点在机器人基坐标系下的坐标构建手眼方程,用这些数据求解手眼矩阵方程,该方法操作简单,仅需对标定物扫描一次就可以得到高精度的标定结果。

Description

一种基于阶梯形标定物的激光轮廓传感器eye-in-hand标定 方法
技术领域
本发明涉及机器人三维视觉领域,具体为一种基于阶梯形标定物的激光轮廓传感器eye-in-hand标定方法。
背景技术
在机器人学和数学中,手眼校准问题是确定机器人末端执行器和摄像机之间或机器人基坐与世界坐标系之间的转换的问题。实际使用的场景中常采用求解手眼标定问题,其中矩阵代表了机器人基坐标系的特征,矩阵代表了视觉传感器坐标系的特征,而和是未知的变换矩阵。特殊情况发生在的情况下,求解手眼标定的方程变为,这也是手眼标定求解方程的最普遍情况。例如在机械臂二维抓取的使用场景中,需要求解。
手眼系统分为两种,即eye-in-hand和eye-to-hand。与二维相机相比,三维传感器(例如激光轮廓传感器)标定方式的底层原理和二维相机的标定底层原理类似,但却不用求解。二维相机标定中存在像素坐标系到世界坐标系的变换过程,由二维相机拍摄的图片并不是相机坐标系下的图像,需要根据小孔成像的相机模型进行转化,所以与三维传感器的标定相比,二维相机的手眼标定过程更加复杂。三维传感器在工作过程中采集的点云数据均为传感器坐标系下的数据,可以直接使用而无需其他的转换,所以对于激光轮廓传感器而言,手眼标定问题被转化为求解。
在已存在的标定算法中,基于标准球的标定方法应用最为广泛,该方法通过用激光轮廓传感器扫描标准球,以标准球的球心作为定点,控制机器人多次扫描标准球,再根据球形标定物的特性根据勾股定理求取标准球的球心在传感器坐标系下的坐标,该方法至少需要机器人以不同的姿态四次扫描标准球,且对于每次激光轮廓传感器采集的数据都需要进行圆分割和拟合,计算繁琐且算法复杂度高,在实际标定的过程中,主要存在以下问题:
1.准确获取标准球球心在机器人基坐标系的坐标值难度较高;
2.在获取标准球球心在传感器坐标系下的坐标值(xs,ys,zs)过程中,需要根据建立坐标系并对判断ys值的正负,该过程易出错,且出错后将导致标定失败;
3.对每次激光轮廓传感器扫描标准球的原始数据。需要分割出圆弧区域并对圆弧区域进行拟合,该过程往往需要人工干预,自动化程度较低。
对于问题1,目前常用的解决方案是通过控制机械臂末端执行器接触标准球表面,从示教器上读取机器人末端执行器在机器人基坐表系下的坐标,多次重复,将获取的坐标值进行球拟合获取标准球在机器人基坐标系下的坐标。该方法存在着明显的缺陷,首先触碰标准球可能会导致标准球的位置发生改变,进而导致标准球的球心在机器人基坐标系下的坐标变化;其次,对于末端执行器为抓手的机器人,无法接触标准球表面,获取标准球的球心在机器人基坐标系下的坐标变得更加困难;最后,为了保证机器人不触碰标准球,往往在实际操作的过程中不会使末端执行器触碰到标准球。这就导致了标定精度不理想,标定结果不稳定。所以球型标定法虽然应用广泛,但该方法存在较多缺陷。首先,在实验数据采集的过程中,需要多次对标准球进行扫描,并且每次都需要对轮廓进行分割,分割出圆形区域,然后对圆形区域的数据进行拟合,增加了运算过程的复杂程度;对于每组采集得到的数据都需要对进行修正,若未修正,就会导致标定结果产生较大的偏差;此外受到噪声等因素的影响,球型标定法的标定结果鲁棒性较差,所以球型标定法较为繁琐。
为了解决上述问题,本发明提出了一种基于阶梯形标定物的改进的激光轮廓传感器手眼标定算法,本发明提出一种阶梯形标定物,结合本文提出的改进标定算法,仅需对标定物扫描一次就可以快速高精度的完后激光轮廓传感器和机器人之间的手眼关系,操作方便实用性强。
发明内容
本发明的目的在于解决现存的激光轮廓传感器标定算法精度低且标定过程繁琐的问题,提供了一种行之有效、科学合理的激光轮廓传感器标定物及改进的标定算法。
为了实现上述目的,本发明所提供的技术方案为以下内容:一种基于阶梯形标定物的激光轮廓传感器标定方法,其特征在于,包括以下步骤:
S1、标定机器人的工具坐标系,阶梯形标定物放置于机器人加工的工作台上,利用机器人以该阶梯形标定物标定用户坐标系;
S2、控制机器人使激光轮廓传感器的线激光对齐阶梯型标定物上的每一个标记点,扫描此时阶梯形标定物获取轮廓数据,提取扫描轮廓数据的每个特征点,该特征点为轮廓数据的角点,这些角点构成轮廓的特征点集;
S3、利用随机抽样一致算法对轮廓特征点集合进行直线拟合,并根据直线方程修正错误的特征点;
S4、根据轮廓特征点在用户坐标系下的坐标、轮廓特征点在机器人基坐标系下的坐标构建手眼矩阵方程;
S5、根据最小二乘法求解手眼矩阵方程的近似解,得到手眼矩阵完成线激光轮廓传感器的手眼标定。
进一步的,步骤S1、标定机器人的工具坐标系,阶梯形标定物放置于机器人加工的工作台上,利用机器人以该阶梯形标定物标定用户坐标系,具体方法如下:
利用机器人以该阶梯形标定物标定用户坐标系,由于标定物的尺寸已知,完成用户坐标系的标定后,根据尺寸关系可以推导出每个阶梯特征点在用户坐标系下的坐标,设某一特征点在用户坐标系下的坐标为(xu,yu,zu),用户坐标系相对于机器人基坐标系的齐次变换矩阵为
Figure BDA0003036651220000021
则该特征点在机器人的基坐标系下的坐标(xb,yb,zb)用下式(1)计算,式(1)中,
Figure BDA0003036651220000022
为齐次变换矩阵,对于每个齐次变换矩阵都可用式(2)表示,式中R3×3为旋转矩阵,t3×1为平移向量,式(2)中,x,y,z分别为平移向量沿x轴,y轴和z轴平移的数值,手眼标定的过程就是求取如式(2)所示的齐次变换矩阵,共存在12个未知量;
Figure BDA0003036651220000031
Figure BDA0003036651220000032
进一步的,步骤S2、控制机器人使激光轮廓传感器的线激光对齐阶梯型标定物上的每一个标记点,扫描此时阶梯形标定物获取轮廓数据,提取扫描轮廓数据的每个特征点,该特征点为轮廓数据的角点,这些角点构成轮廓的特征点集;阶梯形标定物的每一阶阶梯水平面的相同位置上有一个标记点,且标记点所处位置的尺寸均已知;控制机器人使激光轮廓传感器的线激光对齐阶梯型标定物上的每一个标记点;激光轮廓传感器的激光线照射标记点后,获取此处的轮廓数据,根据标定物的尺寸信息可得被激光线照射的阶梯上的每个角点在用户坐标系的坐标,对齐标记点便于建立机器人坐标系和传感器坐标系的关系;提取扫描轮廓的特征点,该特征点为轮廓数据的角点,根据最大距离法计算出这些角点,具体方法如下:
(a)设轮廓上共有k个轮廓数据点,设第i个数据的坐标为(xi,zi),若找到轮廓数据点索引1~k范围内的角点,对于该范围内每一个点(xi,zi)做如下式(3)运算,求取di,式(3)中sinθ,cosθ计算方式如式(4)和式(5)所示:
di=|(z1-zk)·cosθ+(x1-xk)·sinθ| (3)
Figure BDA0003036651220000033
Figure BDA0003036651220000034
(b)取di最大点,若di大于用户设定的阈值,则该点为角点,并保存该点,设该点的索引为l,则点(xl,zl)的索引l为分界将该轮廓数据分割为前后两个轮廓的子集合,继续递归搜索轮廓子集合的特征点直至检测所有角点,所述角点形成的集合称为特征点集;否则,判定该轮廓为直线,不存在角点,结束特征点搜索。
进一步的,步骤S3、利用随机抽样一致算法对轮廓特征点集合进行直线拟合,并根据直线方程修正错误的特征点;设利用RANSAC算法对特征点进行直线拟合得到直线ax+bz+c=0,计算特征点中每个点到拟合直线的距离df,若df大于用户设置的阈值Δs,则认为该点为离群点,将该点的x坐标带入拟合直线,对该点进行修正,修正后的点代替离群点形成新的特征点集,否则,不存在离群点,无需对特征点进行修正。
进一步的,步骤S4、根据轮廓特征点在用户坐标系下的坐标、轮廓特征点在机器人基坐标系下的坐标构建手眼矩阵方程;设轮廓特征点集中的某一点在机器人用户坐标系下的坐标为pu(xu,yu,zu),该点在传感器坐标系下的坐标为ps(xs,0,zs),该点在机器人基坐标系下的坐标为pb(xb,yb,zb)可以根据式(1)计算的出,则存在下式(6)关系:
Figure BDA0003036651220000041
上式(6)中,
Figure BDA0003036651220000042
表示机器人用户坐标系相对于基坐标系的齐次变换矩阵,
Figure BDA0003036651220000043
表示传感器坐标系相对于用户坐标系的齐次变换矩阵,该矩阵即为待求解的齐次变换矩阵,
Figure BDA0003036651220000044
在用户标定用户坐标系可直接获取,式中Ru
Figure BDA0003036651220000045
的旋转矩阵,该矩阵是3×3的矩阵,tu
Figure BDA0003036651220000046
的平移向量,它是3×1的矩阵;Rx
Figure BDA0003036651220000047
的旋转矩阵,该矩阵维数为3×3,tx
Figure BDA0003036651220000048
的平移向量,该矩阵的维数为3×1的,将上式(6)展开可得下式(7):
Figure BDA0003036651220000049
左乘
Figure BDA00030366512200000410
的逆矩阵
Figure BDA00030366512200000411
得到下式(8):
Figure BDA00030366512200000412
令式(8)等式左边展开得到式(9)如下所示
Figure BDA00030366512200000413
即得如下式(10):
Figure BDA0003036651220000051
将式(10)全部展开得到下式(11):
Figure BDA0003036651220000052
将式(11)得矩阵方程展开得到下式方程组:
Figure BDA0003036651220000053
上述方程式可以看出,该方程组存在9个未知量,即r11,r13,r21,r23,r31,r33,x,y,z,解出上述方程组的解,需要至少三组数据确定9个方程,解出9个未知量;将式(12)变型为矩阵方程AX=b的形式可得如下式所示:
Figure BDA0003036651220000054
如果特征点集中存在n个点,带入式(13)可得下式(14),式中
Figure BDA0003036651220000055
分别为第i个数据在传感器坐标系下的x值和z值:
Figure BDA0003036651220000056
式(14)即为激光轮廓传感器标定的手眼矩阵方程。
进一步的,步骤S5根据最小二乘法求解手眼矩阵方程的近似解,得到手眼矩阵完成线激光轮廓传感器的手眼标定,具体方法如下:
根据最小二乘法求解手眼矩阵方程的近似解,根据式(14)可知,当n>3时,矩阵方程的已知量不是方阵,故不存在解析解,此时使用最小二乘法求解矩阵法方程的近似解,令
Figure BDA0003036651220000061
Figure BDA0003036651220000062
将式(14)简写为下式(15):
AX=B (15)
根据矩阵论相关知识可知,式(15)的最小二乘解为下式(16):
X=(AT·A)-1·AT·B (16)
根据式(16)解得9个未知量,即r11,r21,r31,r13,r23,r33,x,y,z,未知量(r21,r22,r23)通过下式(17)通过向量叉乘求得:
(r12,r22,r32)=(r11,r21,r31)×(r13,r23,r33) (17)
至此解得矩阵
Figure BDA0003036651220000063
中全部的12个未知变量。
有益效果:与现有技术相比,本发明的技术方案具有以下优点与有益效果:
目前常用的基于标准球的激光轮廓传感器的标定算法标定过程较为繁琐,且标定结果的鲁棒性不佳。本发明提出的一种阶梯性的标定物配合本发明所述的改进的标定算法操作简便,无需获取定点在机器人基坐标系下的坐标值,仅需扫描一次就可以快速高精度的完成激光轮廓传感器和机器人的手眼标定,具有很强的工业应用潜力。
附图说明
图1为本发明实施例中标定物的实物图
图2为本发明实施例中标定物的三视图
图3为本发明实施例激光线扫描示意图
图4为本发明轮廓线特征点提取示意图
图5为本发明标定过程流程图
具体实施方式
接下来结合附图和具体实施方式对本发明进行详细的说明。本实施例是在本发明的技术方案的前提下,给出了详细的实施方式和具体的标定过成,但是本发明实施例不作为本发明的限制。
本发明提出一种基于阶梯形标定物的激光轮廓传感器标定方法,其特征在于,包括以下步骤:
S1、标定机器人的工具坐标系,阶梯形标定物放置于机器人加工的工作台上,利用机器人以该阶梯形标定物标定用户坐标系;
S2、控制机器人使激光轮廓传感器的线激光对齐阶梯型标定物上的每一个标记点,扫描此时阶梯形标定物获取轮廓数据,提取扫描轮廓数据的每个特征点,该特征点为轮廓数据的角点,这些角点构成轮廓的特征点集;
S3、利用随机抽样一致算法对轮廓特征点集合进行直线拟合,并根据直线方程修正错误的特征点;
S4、根据轮廓特征点在用户坐标系下的坐标、轮廓特征点在机器人基坐标系下的坐标构建手眼矩阵方程;
S5、根据最小二乘法求解手眼矩阵方程的近似解,得到手眼矩阵完成线激光轮廓传感器的手眼标定。
进一步的,步骤S1、标定机器人的工具坐标系,阶梯形标定物放置于机器人加工的工作台上,利用机器人以该阶梯形标定物标定用户坐标系,具体方法如下:
利用机器人以该阶梯形标定物标定用户坐标系,由于标定物的尺寸已知,完成用户坐标系的标定后,根据尺寸关系可以推导出每个阶梯特征点在用户坐标系下的坐标,设某一特征点在用户坐标系下的坐标为(xu,yu,zu),用户坐标系相对于机器人基坐标系的齐次变换矩阵为
Figure BDA0003036651220000071
则该特征点在机器人的基坐标系下的坐标(xb,yb,zb)用下式(1)计算,式(1)中,
Figure BDA0003036651220000072
为齐次变换矩阵,对于每个齐次变换矩阵都可用式(2)表示,式中R3×3为旋转矩阵,t3×1为平移向量,式(2)中,x,y,z分别为平移向量沿x轴,y轴和z轴平移的数值,手眼标定的过程就是求取如式(2)所示的齐次变换矩阵,共存在12个未知量;
Figure BDA0003036651220000073
Figure BDA0003036651220000074
进一步的,步骤S2、控制机器人使激光轮廓传感器的线激光对齐阶梯型标定物上的每一个标记点,扫描此时阶梯形标定物获取轮廓数据,提取扫描轮廓数据的每个特征点,该特征点为轮廓数据的角点,这些角点构成轮廓的特征点集;阶梯形标定物的每一阶阶梯水平面的相同位置上有一个标记点,且标记点所处位置的尺寸均已知;控制机器人使激光轮廓传感器的线激光对齐阶梯型标定物上的每一个标记点;激光轮廓传感器的激光线照射标记点后,获取此处的轮廓数据,根据标定物的尺寸信息可得被激光线照射的阶梯上的每个角点在用户坐标系的坐标,对齐标记点便于建立机器人坐标系和传感器坐标系的关系;提取扫描轮廓的特征点,该特征点为轮廓数据的角点,根据最大距离法计算出这些角点,具体方法如下:
(a)设轮廓上共有k个轮廓数据点,设第i个数据的坐标为(xi,zi),若找到轮廓数据点索引1~k范围内的角点,对于该范围内每一个点(xi,zi)做如下式(3)运算,求取di,式(3)中sinθ,cosθ计算方式如式(4)和式(5)所示:
di=|(z1-zk)·cosθ+(x1-xk)·sinθ| (3)
Figure BDA0003036651220000081
Figure BDA0003036651220000082
(b)取di最大点,若di大于用户设定的阈值,则该点为角点,并保存该点,设该点的索引为l,则点(xl,zl)的索引l为分界将该轮廓数据分割为前后两个轮廓的子集合,继续递归搜索轮廓子集合的特征点直至检测所有角点,所述角点形成的集合称为特征点集;否则,判定该轮廓为直线,不存在角点,结束特征点搜索。
进一步的,步骤S3、利用随机抽样一致算法对轮廓特征点集合进行直线拟合,并根据直线方程修正错误的特征点;设利用RANSAC算法对特征点进行直线拟合得到直线ax+bz+c=0,计算特征点中每个点到拟合直线的距离df,若df大于用户设置的阈值Δs,则认为该点为离群点,将该点的x坐标带入拟合直线,对该点进行修正,修正后的点代替离群点形成新的特征点集,否则,不存在离群点,无需对特征点进行修正。
进一步的,步骤S4、根据轮廓特征点在用户坐标系下的坐标、轮廓特征点在机器人基坐标系下的坐标构建手眼矩阵方程;设轮廓特征点集中的某一点在机器人用户坐标系下的坐标为pu(xu,yu,zu),该点在传感器坐标系下的坐标为ps(xs,0,zs),该点在机器人基坐标系下的坐标为pb(xb,yb,zb)可以根据式(1)计算的出,则存在下式(6)关系:
Figure BDA0003036651220000083
上式(6)中,
Figure BDA0003036651220000084
表示机器人用户坐标系相对于基坐标系的齐次变换矩阵,
Figure BDA0003036651220000085
表示传感器坐标系相对于用户坐标系的齐次变换矩阵,该矩阵即为待求解的齐次变换矩阵,
Figure BDA0003036651220000086
在用户标定用户坐标系可直接获取,式中Ru
Figure BDA0003036651220000087
的旋转矩阵,该矩阵是3×3的矩阵,tu
Figure BDA0003036651220000088
的平移向量,它是3×1的矩阵;Rx
Figure BDA0003036651220000089
的旋转矩阵,该矩阵维数为3×3,tx
Figure BDA00030366512200000810
的平移向量,该矩阵的维数为3×1的,将上式(6)展开可得下式(7):
Figure BDA0003036651220000091
左乘
Figure BDA0003036651220000092
的逆矩阵
Figure BDA0003036651220000093
得到下式(8):
Figure BDA0003036651220000094
令式(8)等式左边展开得到式(9)如下所示
Figure BDA0003036651220000095
即得如下式(10):
Figure BDA0003036651220000096
将式(10)全部展开得到下式(11):
Figure BDA0003036651220000097
将式(11)得矩阵方程展开得到下式方程组:
Figure BDA0003036651220000098
上述方程式可以看出,该方程组存在9个未知量,即r11,r13,r21,r23,r31,r33,x,y,z,解出上述方程组的解,需要至少三组数据确定9个方程,解出9个未知量;将式(12)变型为矩阵方程AX=b的形式可得如下式所示:
Figure BDA0003036651220000099
如果特征点集中存在n个点,带入式(13)可得下式(14),式中
Figure BDA0003036651220000101
分别为第i个数据在传感器坐标系下的x值和z值:
Figure BDA0003036651220000102
式(14)即为激光轮廓传感器标定的手眼矩阵方程。
进一步的,步骤S5根据最小二乘法求解手眼矩阵方程的近似解,得到手眼矩阵完成线激光轮廓传感器的手眼标定,具体方法如下:
根据最小二乘法求解手眼矩阵方程的近似解,根据式(14)可知,当n>3时,矩阵方程的已知量不是方阵,故不存在解析解,此时使用最小二乘法求解矩阵法方程的近似解,令
Figure BDA0003036651220000103
Figure BDA0003036651220000104
将式(14)简写为下式(15):
AX=B (15)
根据矩阵论相关知识可知,式(15)的最小二乘解为下式(16):
X=(AT·A)-1·AT·B (16)
根据式(16)解得9个未知量,即r11,r21,r31,r13,r23,r33,x,y,z,未知量(r21,r22,r23)通过下式(17)通过向量叉乘求得:
(r12,r22,r32)=(r11,r21,r31)×(r13,r23,r33) (17)
至此解得矩阵
Figure BDA0003036651220000105
中全部的12个未知变量。
所述阶梯形标定物的形状为阶梯形状并且每一级阶梯尺寸均已知,每个阶梯面上有用于激光轮廓传感器的激光线对齐的标记点;本实施例所用的标定物尺寸阶梯标定物的加工精度为0.1mm,阶梯标定物的长、宽、高分别为:9cm、9cm、9cm,每个阶梯的高度为1cm,且每个阶梯面上有两个三等分点。该标定物的实物图如图1所示,该标定物的三视图如图2所示,从左到右分别为该标定物的正视图、俯视图、左视图。俯视图中每个阶梯上有两个圆点,该圆点为标记点,这两个圆点处于每个阶梯的三等分点处,激光先对齐标记点的示意图如图3所示,实际扫描时,激光线扫描位置如图1线段AB所示;
提取扫描轮廓的特征点,该特征点为激光线、阶梯标定物每两个阶梯上相交部分的角点;激光线扫描阶梯形标定物成像结果为一条二维的折线,如图4所示,特征点为该折线上的角点,即图4中圆点标记处的位置;可以根据最大距离法计算出这些角点,激光轮廓传感器扫描提取特征点的示意图如图4所示,图中圆点为特征点。
在所用的传感器为LMI Gocator2430传感器,配合安川机器人对本发明所提出的改进的标定算法进行分析精度分析,并对比常用的标准球标定算法,实验结果如下表1所示:
表1标定实验结果
Figure BDA0003036651220000111
表1的实验结果表明,基于阶梯标定物的手眼标定误差为0.01~0.15mm,基于球形标定物的手眼标定误差为0.5~5mm,两者相比,阶梯标定物的手眼标定精度有明显提高,可以满足工业级要求。
以上所述实施例仅为本发明的一个应用场景,并非以此限制本发明的实施范围,故凡依本发明的原理所作的变换,均在本发明的保护范围内。

Claims (6)

1.一种基于阶梯形标定物的激光轮廓传感器标定方法,其特征在于,包括以下步骤:
S1、标定机器人的工具坐标系,阶梯形标定物放置于机器人加工的工作台上,利用机器人以该阶梯形标定物标定用户坐标系;
S2、控制机器人使激光轮廓传感器的线激光对齐阶梯型标定物上的每一个标记点,扫描此时阶梯形标定物获取轮廓数据,提取扫描轮廓数据的每个特征点,该特征点为轮廓数据的角点,这些角点构成轮廓的特征点集;
S3、利用随机抽样一致算法对轮廓特征点集合进行直线拟合,并根据直线方程修正错误的特征点;
S4、根据轮廓特征点在用户坐标系下的坐标、轮廓特征点在机器人基坐标系下的坐标构建手眼矩阵方程;
S5、根据最小二乘法求解手眼矩阵方程的近似解,得到手眼矩阵完成线激光轮廓传感器的手眼标定。
2.根据权利要求1所述一种基于阶梯形标定物的激光轮廓传感器标定方法,其特征在于步骤S1、标定机器人的工具坐标系,阶梯形标定物放置于机器人加工的工作台上,利用机器人以该阶梯形标定物标定用户坐标系,具体方法如下:
利用机器人以该阶梯形标定物标定用户坐标系,由于标定物的尺寸已知,完成用户坐标系的标定后,根据尺寸关系可以推导出每个阶梯特征点在用户坐标系下的坐标,设某一特征点在用户坐标系下的坐标为(xu,yu,zu),用户坐标系相对于机器人基坐标系的齐次变换矩阵为
Figure FDA0003036651210000011
则该特征点在机器人的基坐标系下的坐标(xb,yb,zb)用下式(1)计算,式(1)中,
Figure FDA0003036651210000012
为齐次变换矩阵,对于每个齐次变换矩阵都可用式(2)表示,式中R3×3为旋转矩阵,t3×1为平移向量,式(2)中,x,y,z分别为平移向量沿x轴,y轴和z轴平移的数值,手眼标定的过程就是求取如式(2)所示的齐次变换矩阵,共存在12个未知量;
Figure FDA0003036651210000013
Figure FDA0003036651210000021
3.根据权利要求2所述一种基于阶梯形标定物的激光轮廓传感器标定方法,其特征在于,步骤S2、控制机器人使激光轮廓传感器的线激光对齐阶梯型标定物上的每一个标记点,扫描此时阶梯形标定物获取轮廓数据,提取扫描轮廓数据的每个特征点,该特征点为轮廓数据的角点,这些角点构成轮廓的特征点集;阶梯形标定物的每一阶阶梯水平面的相同位置上有一个标记点,且标记点所处位置的尺寸均已知;控制机器人使激光轮廓传感器的线激光对齐阶梯型标定物上的每一个标记点;激光轮廓传感器的激光线照射标记点后,获取此处的轮廓数据,根据标定物的尺寸信息可得被激光线照射的阶梯上的每个角点在用户坐标系的坐标,对齐标记点便于建立机器人坐标系和传感器坐标系的关系;提取扫描轮廓的特征点,该特征点为轮廓数据的角点,根据最大距离法计算出这些角点,具体方法如下:
(a)设轮廓上共有k个轮廓数据点,设第i个数据的坐标为(xi,zi),若找到轮廓数据点索引1~k范围内的角点,对于该范围内每一个点(xi,zi)做如下式(3)运算,求取di,式(3)中sinθ,cosθ计算方式如式(4)和式(5)所示:
di=|(z1-zk)·cosθ+(x1-xk)·sinθ| (3)
Figure FDA0003036651210000022
Figure FDA0003036651210000023
(b)取di最大点,若di大于用户设定的阈值,则该点为角点,并保存该点,设该点的索引为l,则点(xl,zl)的索引l为分界将该轮廓数据分割为前后两个轮廓的子集合,继续递归搜索轮廓子集合的特征点直至检测所有角点,所述角点形成的集合称为特征点集;否则,判定该轮廓为直线,不存在角点,结束特征点搜索。
4.根据权利要求3所述一种基于阶梯形标定物的激光轮廓传感器标定方法,其特征在于,步骤S3、利用随机抽样一致算法对轮廓特征点集合进行直线拟合,并根据直线方程修正错误的特征点;设利用RANSAC算法对特征点进行直线拟合得到直线ax+bz+c=0,计算特征点中每个点到拟合直线的距离df,若df大于用户设置的阈值Δs,则认为该点为离群点,将该点的x坐标带入拟合直线,对该点进行修正,修正后的点代替离群点形成新的特征点集,否则,不存在离群点,无需对特征点进行修正。
5.根据权利要求4所述一种基于阶梯形标定物的激光轮廓传感器标定方法,其特征在于,步骤S4、根据轮廓特征点在用户坐标系下的坐标、轮廓特征点在机器人基坐标系下的坐标构建手眼矩阵方程;设轮廓特征点集中的某一点在机器人用户坐标系下的坐标为pu(xu,yu,zu),该点在传感器坐标系下的坐标为ps(xs,0,zs),该点在机器人基坐标系下的坐标为pb(xb,yb,zb)可以根据式(1)计算的出,则存在下式(6)关系:
Figure FDA0003036651210000031
上式(6)中,
Figure FDA0003036651210000032
表示机器人用户坐标系相对于基坐标系的齐次变换矩阵,
Figure FDA0003036651210000033
表示传感器坐标系相对于用户坐标系的齐次变换矩阵,该矩阵即为待求解的齐次变换矩阵,
Figure FDA0003036651210000034
在用户标定用户坐标系可直接获取,式中Ru
Figure FDA0003036651210000035
的旋转矩阵,该矩阵是3×3的矩阵,tu
Figure FDA0003036651210000036
的平移向量,它是3×1的矩阵;Rx
Figure FDA0003036651210000037
的旋转矩阵,该矩阵维数为3×3,tx
Figure FDA0003036651210000038
的平移向量,该矩阵的维数为3×1的,将上式(6)展开可得下式(7):
Figure FDA0003036651210000039
左乘
Figure FDA00030366512100000310
的逆矩阵
Figure FDA00030366512100000311
得到下式(8):
Figure FDA00030366512100000312
令式(8)等式左边展开得到式(9)如下所示
Figure FDA00030366512100000313
即得如下式(10):
Figure FDA0003036651210000041
将式(10)全部展开得到下式(11):
Figure FDA0003036651210000042
将式(11)得矩阵方程展开得到下式方程组:
Figure FDA0003036651210000043
上述方程式可以看出,该方程组存在9个未知量,即r11,r13,r21,r23,r31,r33,x,y,z,解出上述方程组的解,需要至少三组数据确定9个方程,解出9个未知量;将式(12)变型为矩阵方程AX=b的形式可得如下式所示:
Figure FDA0003036651210000044
如果特征点集中存在n个点,带入式(13)可得下式(14),式中
Figure FDA0003036651210000045
分别为第i个数据在传感器坐标系下的x值和z值:
Figure FDA0003036651210000046
式(14)即为激光轮廓传感器标定的手眼矩阵方程。
6.根据权利要求5所述一种基于阶梯形标定物的激光轮廓传感器标定方法,其特征在于,步骤S5根据最小二乘法求解手眼矩阵方程的近似解,得到手眼矩阵完成线激光轮廓传感器的手眼标定,具体方法如下:
根据最小二乘法求解手眼矩阵方程的近似解,根据式(14)可知,当n>3时,矩阵方程的已知量不是方阵,故不存在解析解,此时使用最小二乘法求解矩阵法方程的近似解,令
Figure FDA0003036651210000051
将式(14)简写为下式(15):
AX=B (15)
根据矩阵论相关知识可知,式(15)的最小二乘解为下式(16):
X=(AT·A)-1·AT·B (16)
根据式(16)解得9个未知量,即r11,r21,r31,r13,r23,r33,x,y,z,未知量(r21,r22,r23)通过下式(17)通过向量叉乘求得:
(r12,r22,r32)=(r11,r21,r31)×(r13,r23,r33) (17)
至此解得矩阵
Figure FDA0003036651210000052
中全部的12个未知变量。
CN202110445265.2A 2021-04-25 2021-04-25 一种基于阶梯形标定物的激光轮廓传感器eye-in-hand标定方法 Active CN113237434B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110445265.2A CN113237434B (zh) 2021-04-25 2021-04-25 一种基于阶梯形标定物的激光轮廓传感器eye-in-hand标定方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110445265.2A CN113237434B (zh) 2021-04-25 2021-04-25 一种基于阶梯形标定物的激光轮廓传感器eye-in-hand标定方法

Publications (2)

Publication Number Publication Date
CN113237434A true CN113237434A (zh) 2021-08-10
CN113237434B CN113237434B (zh) 2022-04-01

Family

ID=77129055

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110445265.2A Active CN113237434B (zh) 2021-04-25 2021-04-25 一种基于阶梯形标定物的激光轮廓传感器eye-in-hand标定方法

Country Status (1)

Country Link
CN (1) CN113237434B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113494893A (zh) * 2021-09-09 2021-10-12 深圳广成创新技术有限公司 一种三维激光扫描系统的标定方法、装置和计算机设备
CN117086885A (zh) * 2023-10-18 2023-11-21 深圳市信润富联数字科技有限公司 机械臂位置的校准方法及装置、存储介质、电子装置
JP7434356B2 (ja) 2019-04-05 2024-02-20 ブイエムアイ・ホラント・ビー.ブイ. 較正ツール及び方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080112828A1 (en) * 2006-11-09 2008-05-15 Advanced Medical Optics, Inc. Fluidics cassette for ocular surgical system
CN106695796A (zh) * 2016-11-02 2017-05-24 北京信息科技大学 基于ransac的便携式激光扫描测量臂手眼标定方法
CN108106535A (zh) * 2017-12-21 2018-06-01 长沙长泰机器人有限公司 一种基于机器人的线激光标定方法和线激光标定装置
CN108122257A (zh) * 2016-11-28 2018-06-05 沈阳新松机器人自动化股份有限公司 一种机器人手眼标定方法及装置
CN108759714A (zh) * 2018-05-22 2018-11-06 华中科技大学 一种多线激光轮廓传感器坐标系融合及转轴标定方法
CN108818536A (zh) * 2018-07-12 2018-11-16 武汉库柏特科技有限公司 一种机器人手眼标定的在线偏移修正方法及装置
CN110919658A (zh) * 2019-12-13 2020-03-27 东华大学 一种基于视觉和多坐标系闭环转换的机器人标定方法
CN110953988A (zh) * 2019-12-04 2020-04-03 易思维(杭州)科技有限公司 立体块及利用其对线结构光传感器精度进行评价的方法
CN112348864A (zh) * 2020-11-11 2021-02-09 湖南大学 一种融合线激光轮廓特征的三维点云自动配准方法
CN112549018A (zh) * 2020-11-03 2021-03-26 武汉数字化设计与制造创新中心有限公司 一种机器人线激光快速手眼标定方法

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080112828A1 (en) * 2006-11-09 2008-05-15 Advanced Medical Optics, Inc. Fluidics cassette for ocular surgical system
CN106695796A (zh) * 2016-11-02 2017-05-24 北京信息科技大学 基于ransac的便携式激光扫描测量臂手眼标定方法
CN108122257A (zh) * 2016-11-28 2018-06-05 沈阳新松机器人自动化股份有限公司 一种机器人手眼标定方法及装置
CN108106535A (zh) * 2017-12-21 2018-06-01 长沙长泰机器人有限公司 一种基于机器人的线激光标定方法和线激光标定装置
CN108759714A (zh) * 2018-05-22 2018-11-06 华中科技大学 一种多线激光轮廓传感器坐标系融合及转轴标定方法
CN108818536A (zh) * 2018-07-12 2018-11-16 武汉库柏特科技有限公司 一种机器人手眼标定的在线偏移修正方法及装置
CN110953988A (zh) * 2019-12-04 2020-04-03 易思维(杭州)科技有限公司 立体块及利用其对线结构光传感器精度进行评价的方法
CN110919658A (zh) * 2019-12-13 2020-03-27 东华大学 一种基于视觉和多坐标系闭环转换的机器人标定方法
CN112549018A (zh) * 2020-11-03 2021-03-26 武汉数字化设计与制造创新中心有限公司 一种机器人线激光快速手眼标定方法
CN112348864A (zh) * 2020-11-11 2021-02-09 湖南大学 一种融合线激光轮廓特征的三维点云自动配准方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7434356B2 (ja) 2019-04-05 2024-02-20 ブイエムアイ・ホラント・ビー.ブイ. 較正ツール及び方法
CN113494893A (zh) * 2021-09-09 2021-10-12 深圳广成创新技术有限公司 一种三维激光扫描系统的标定方法、装置和计算机设备
CN113494893B (zh) * 2021-09-09 2021-11-23 深圳广成创新技术有限公司 一种三维激光扫描系统的标定方法、装置和计算机设备
CN117086885A (zh) * 2023-10-18 2023-11-21 深圳市信润富联数字科技有限公司 机械臂位置的校准方法及装置、存储介质、电子装置
CN117086885B (zh) * 2023-10-18 2024-02-02 深圳市信润富联数字科技有限公司 机械臂位置的校准方法及装置、存储介质、电子装置

Also Published As

Publication number Publication date
CN113237434B (zh) 2022-04-01

Similar Documents

Publication Publication Date Title
CN113237434B (zh) 一种基于阶梯形标定物的激光轮廓传感器eye-in-hand标定方法
CN111775152B (zh) 基于三维测量引导机械臂抓取散乱堆叠工件的方法及系统
CN110014426B (zh) 一种利用低精度深度相机高精度抓取形状对称工件的方法
CN111775146B (zh) 一种工业机械臂多工位作业下的视觉对准方法
CN109443209B (zh) 一种基于单应性矩阵的线结构光系统标定方法
CN108106535B (zh) 一种基于机器人的线激光标定方法和线激光标定装置
CN110497373B (zh) 一种移动作业机器人的三维激光雷达与机械臂间的联合标定方法
CN110906863B (zh) 一种用于线结构光传感器的手眼标定系统及标定方法
CN108692688A (zh) 一种机器人测量-加工系统扫描仪坐标系自动标定方法
CN111504183A (zh) 线激光三维测量传感器与机器人相对位置的标定方法
CN106323286B (zh) 一种机器人坐标系与三维测量坐标系的变换方法
CN112361958B (zh) 一种线激光与机械臂标定方法
CN113379849A (zh) 基于深度相机的机器人自主识别智能抓取方法及系统
CN112614098A (zh) 一种基于增强现实的毛坯定位与加工余量分析方法
CN112873213B (zh) 一种提升六关节机器人工具坐标系标定精度的方法
CN112109072B (zh) 一种大型稀疏特征托盘精确6d位姿测量和抓取方法
CN114155302A (zh) 一种激光视觉扫描系统的标定方法及装置
CN114310880A (zh) 一种机械臂标定方法及装置
CN115284292A (zh) 基于激光相机的机械臂手眼标定方法及装置
CN112857215B (zh) 一种基于正二十面体的单目6d位姿估计方法
Zexiao et al. A novel approach for the field calibration of line structured-light sensors
CN113359461B (zh) 一种适用于仿生眼系统的运动学标定方法
CN113012238A (zh) 一种多深度相机快速标定与数据融合的方法
Liang et al. An integrated camera parameters calibration approach for robotic monocular vision guidance
CN112734843B (zh) 一种基于正十二面体的单目6d位姿估计方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant