CN114161411B - 一种基于视觉的多足机器人运动学参数标定方法 - Google Patents

一种基于视觉的多足机器人运动学参数标定方法 Download PDF

Info

Publication number
CN114161411B
CN114161411B CN202111372937.8A CN202111372937A CN114161411B CN 114161411 B CN114161411 B CN 114161411B CN 202111372937 A CN202111372937 A CN 202111372937A CN 114161411 B CN114161411 B CN 114161411B
Authority
CN
China
Prior art keywords
pose
camera
foot
robot
calibration
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111372937.8A
Other languages
English (en)
Other versions
CN114161411A (zh
Inventor
金波
王谦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University ZJU
Original Assignee
Zhejiang University ZJU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University ZJU filed Critical Zhejiang University ZJU
Priority to CN202111372937.8A priority Critical patent/CN114161411B/zh
Publication of CN114161411A publication Critical patent/CN114161411A/zh
Application granted granted Critical
Publication of CN114161411B publication Critical patent/CN114161411B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1628Programme controls characterised by the control loop
    • B25J9/1653Programme controls characterised by the control loop parameters identification, estimation, stiffness, accuracy, error analysis

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Manipulator (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明公开了一种基于视觉的多足机器人运动学参数标定方法。分别在机器人的机身和足端固定标定板,利用单目相机获得标定板的位姿,进而获得机器人机身与足端的相对位姿关系;根据机器人的关节角度数据,通过正运动学计算机身与足端的名义位姿关系,构建误差矩阵,利用最小二乘法估计运动学参数误差。本发明利用视觉技术依次对多足机器人的每条腿进行运动学参数标定,能够快速准确地完成运动学参数标定过程,可提高多足机器人足端的定位精度,从而改善多足机器人的行走效果。本方法仅需要单目相机和两块标定板即可完成多足机器人的运动学参数标定过程,无需专门的或昂贵的设备,成本较低,易于实现。

Description

一种基于视觉的多足机器人运动学参数标定方法
技术领域
本发明涉及机器人技术领域,特别是涉及一种基于视觉的多足机器人运动学参数标定方法。
背景技术
足式移动机器人相比于轮式移动机器人具有地形适应能力强、灵活性高等优点,因此被广泛应用于众多领域以替代人类完成各种复杂的工作。作为足式移动机器人的典型代表之一,六足机器人正逐渐成为机器人研究领域中的热点。
由于机器人的机械加工误差、安装误差、构件变形等原因,机器人的运动学参数存在一定的误差,包括各条腿关节长度、关节零位偏差等。这些尺寸上的误差会通过运动链传播,可能严重影响机器人足部的控制精度,从而影响足式机器人的行走效果。因此,对足式移动机器人开展运动学参数标定是十分重要的。
公开号为CN105808882A的发明专利申请公开了一种仿爬行类四足步行机器人运动参数的标定方法与装置,该方法建立了专用的标定装置,利用测量平台测量机器人的运动轨迹,通过计算其运动前后一系列的运动参数完成几何参数的标定。该方法需使用特制的标定平台,不具备通用性,并且标定平台的机械制造误差也会对标定过程产生影响。
公开号为CN107065558A的发明专利申请公开了一种基于机身姿态角度校正的六足机器人关节角度标定方法,该方法通过IMU获取六足机器人机身姿态角度,结合足式机器人系统运动学与逆运动学模型完成六足机器人支撑足各关节角度校正。该方法仅需要IMU和关节角度的数据即可完成标定,但容易受到足部打滑等因素的影响,且无法对关节角度之外的其他运动学参数进行标定。
发明内容
针对现有技术中存在的上述问题,本发明提供一种基于视觉的多足机器人运动学参数标定方法。该方法具有较高的精度,且成本较低,能够快速准确地完成多足机器人运动学参数地标定,从而保证多足机器人的运动轨迹精度。
一种基于视觉的多足机器人运动学参数标定方法,多足机器人包括机身和至少两条腿,每条腿包含至少两个串联的关节,腿的端部为足部,包括以下步骤:
(1)建立多足机器人的机身和各关节的坐标系,并建立运动学模型和误差模型;
(2)对相机进行标定,获得相机的内参矩阵;
(3)在机身和待标定的腿的足部上各固定一块标定板,将相机放置在合适的位置使得两块标定板均处在相机的视野范围内;
(4)控制正在标定的腿运动到工作范围内的一个随机位置,通过关节的编码器记录此时的关节角度;
(5)利用相机获得标定板在相机坐标系下的位姿,并通过坐标变换关系得到足部在机身坐标系下的位姿;
(6)利用当前的关节角度,通过正运动学计算出期望的足部位姿,并计算出期望的足部位姿与通过相机得到的足部位姿之间的误差;
(7)重复步骤(4)~(6),得到多足机器人腿部处于不同位置时的一组数据;
(8)计算平均位姿误差,若小于预设的阈值则跳转到步骤(10);否则执行步骤(9);
(9)通过最小二乘法计算出多足机器人运动学参数的误差,并对运动学参数进行补偿,之后继续执行步骤(4);
(10)将腿上的标定板更换到下一条待标定腿的足部,重复步骤(3)~(9),直至多足机器人的多条腿均已完成标定。
本申请中多足机器人腿的数量可以是2条或2条以上,不同腿的数量均适用于本申请方法。优选的,所述多足机器人有2条腿、4条腿或6条腿。一般2条、4条或6条腿的机器人居多。
优选的,所述机身为矩形,各条腿分布于矩形机身的四条边上。比如,对于4足机器人,则在矩形机身的轴向两侧的两条边的两端各设置一条腿。对于6足机器人,则在矩形机身的轴向两侧的两条边的两端及中间位置各设置一条腿。
本申请中每条腿上包含的关节数量并没有严格限制,一般机器人每条腿包含三个关节,从机身到足部依次为侧摆关节、髋关节和膝关节。
本申请中相机使用单目相机即可,在标定过程中标定板均处于相机的视野中。
进一步优选的,所述标定板使用ChArUco标记板,并使用OpenCV处理相机照片,识别和获取标定板的位姿。优选使用OpenCV中ArUco模块提供的相关函数进行标定板的识别及位姿提取,具体使用cv::aruco::interpolateCornersCharuco函数检测ChArUco板的角点;使用cv::aruco::estimatePoseCharucoBoard函数估计ChArUco板的位姿。
优选的,步骤(5)中,假设机身和足部的标定板对应的坐标系分别为{MB}和{MF},相机坐标系为{C},利用相机分别获得两块标定板在相机坐标系下的位姿,用齐次变换矩阵和/>表示;之后通过坐标变换关系得到足部在机身坐标系下的位姿:其中,/>和/>表示标定板相对于机身、足部的固定位置,/>表示利用相机得到的足部在机身坐标系下的位姿。
优选的,步骤(6)中,利用当前的关节角度,通过正运动学计算出期望的足部位姿
其中,q1,q2,q3为各关节的角度,为运动学参数,/>为各关节螺旋轴向量,s1=s2=s3=(0,0,0,0,0,1)T,“∧”符号(即公式中字母上带有符号“∧”)表示将一个运动旋量向量写成矩阵形式:如/>e为自然底数,/>为矩阵指数;
并计算出期望位姿与通过相机得到的位姿之间的误差Δe:
优选的,步骤(9)中,列出含有待辨识参数的方程,整理为y=Jx的形式:
其中x为待辨识参数误差列向量,y为位姿误差列向量,为辨识矩阵,n为数据组数,通过最小二乘法计算出多足机器人运动学参数的误差:x=(JTJ)-1JTy,用所求出的运动学参数误差对原有参数进行补偿:
和/>分别为补偿前后的运动学参数。
进一步优选的,步骤(7)中,得到n组多足机器人腿部处于不同位置时的数据,其中,n需要保证步骤(9)中的辨识矩阵非奇异,即n>=4,n大于等于4时就能确保计算的顺利进行,n如果小于4,则会造成计算过程可能进行不下去,无法得出最后的结果。当然,一般n取值越大,计算结果越精确,但相应的计算量也越大,当n大于30时计算结果趋于稳定,精度变化不明显,所以一般n取值在10~30范围内较为合适。
与现有技术相比,本发明的有益效果:
(1)本发明利用视觉技术依次对多足机器人的每条腿进行运动学参数标定,能够快速准确地完成运动学参数标定过程,可提高多足机器人足端的定位精度,从而改善多足机器人的行走效果。
(2)本方法仅需要单目相机和两块标定板即可完成多足机器人的运动学参数标定过程,无需专门的或昂贵的设备,成本较低,易于实现。
附图说明
图1为多足机器人运动学参数标定的流程图。
图2为六足机器人构型与坐标系示意图。
图3为标定过程的示意图。
具体实施方式
本发明多足机器人包括机身和至少两条腿,每条腿包含至少两个串联的关节,不同腿的数量均适用于本申请方法。机身为矩形,各条腿分布于矩形机身的四条边上。比如,对于4足机器人,则在矩形机身的轴向两侧的两条边的两端各设置一条腿。对于6足机器人,则在矩形机身的轴向两侧的两条边的两端及中间位置各设置一条腿。
以下实施方式中,以六足机器人且每条腿包含三个关节为例。
如图1所示为本申请六足机器人运动学参数标定的流程图。
如图2所示,本实施例所述的六足机器人包括机身和六条腿;六条腿分布于矩形机身的四条边上;每条腿包含三个关节,从机身到足部依次为侧摆关节、髋关节和膝关节。将六足机器人的每条腿视作三自由度的串联机器人,并依次对每条腿进行运动学参数标定。
所述的方法具体步骤如下:
步骤1:建立机器人机身、各个关节的坐标系,并建立运动学模型和误差模型。本实施例中采用局部指数积(POE)方法建立运动学模型和误差模型。
步骤2:对相机进行标定,获得相机的内参矩阵。本实施例中采用ChArUco标定板,使用OpenCV中提供的相关函数进行相机标定。
步骤3:如图3所示,在机器人机身和待标定的腿的足部上固定标定板,将相机放置在合适的位置使得两块标定板均处在相机的视野范围内。
步骤4:控制正在标定的腿运动到工作范围内的一个随机位置,通过关节的编码器记录此时的关节角度。
步骤5:假设机身和足部的标定板对应的坐标系分别为{MB}和{MF},相机坐标系为{C},利用相机分别获得两块标定板在相机坐标系下的位姿,用齐次变换矩阵和/>表示;之后通过坐标变换关系得到足部在机身坐标系下的位姿:其中,/>和/>表示标定板相对于机身、足部的固定位置。本实施例中采用ChArUco标定板,并使用OpenCV中ArUco模块提供的相关函数进行标定板的识别及位姿提取。具体使用cv::aruco::interpolateCornersCharuco函数检测ChArUco板的角点;使用cv::aruco::estimatePoseCharucoBoard函数估计ChArUco板的位姿。
步骤6:利用当前的关节角度,通过正运动学计算出期望的足部位姿并计算出期望位姿与通过相机得到的位姿之间的误差Δe;本实施例采用局部指数积方法进行运动学建模,具体公式如下:
其中,q1,q2,q3为各关节的角度,为运动学参数,/>为各关节螺旋轴向量,本实施例中,/>“∧”符号表示将一个运动旋量向量写成矩阵形式:
为矩阵指数;
步骤7:重复步骤4~6,得到n组机器人腿部处于不同位置时的数据;n需要保证后续的辨识矩阵非奇异,即n>=4。本实施例中取n=20。
步骤8:计算n组数据的平均位姿误差判断是否达到要求精度,若小于预设的阈值则跳转到步骤10;否则执行步骤9。
步骤9:列出含有待辨识参数的方程,整理为y=Jx的形式:
其中x为待辨识参数误差列向量,y为位姿误差列向量,为辨识矩阵。通过最小二乘法计算出机器人运动学参数的误差:x=(JTJ)-1JTy。用所求出的运动学参数误差对原有参数进行补偿:
和/>分别为补偿前后的运动学参数。
之后继续执行步骤4。
步骤10:将腿上的标定板更换到下一条待标定的腿上,重复步骤3~9,直至机器人的六条腿均已完成标定。

Claims (5)

1.一种基于视觉的多足机器人运动学参数标定方法,多足机器人包括机身和至少两条腿,每条腿包含至少两个串联的关节,腿的端部为足部,其特征在于,包括以下步骤:
(1)建立多足机器人的机身和各关节的坐标系,并建立运动学模型和误差模型;
(2)对相机进行标定,获得相机的内参矩阵;
(3)在机身和待标定的腿的足部上各固定一块标定板,将相机放置在合适的位置使得两块标定板均处在相机的视野范围内;
(4)控制正在标定的腿运动到工作范围内的一个随机位置,通过关节的编码器记录此时的关节角度;
(5)利用相机获得标定板在相机坐标系下的位姿,并通过坐标变换关系得到足部在机身坐标系下的位姿;
(6)利用当前的关节角度,通过正运动学计算出期望的足部位姿,并计算出期望的足部位姿与通过相机得到的足部位姿之间的误差;
(7)重复步骤(4)~(6),得到多足机器人腿部处于不同位置时的一组数据;
(8)计算平均位姿误差,若小于预设的阈值则跳转到步骤(10);否则执行步骤(9);
(9)通过最小二乘法计算出多足机器人运动学参数的误差,并对运动学参数进行补偿,之后继续执行步骤(4);
(10)将腿上的标定板更换到下一条待标定腿的足部,重复步骤(3)~(9),直至多足机器人的多条腿均已完成标定,
所述相机为单目相机,在标定过程中标定板均处于相机的视野中,
所述标定板使用ChArUco标记板,并使用OpenCV处理相机照片,识别和获取标定板的位姿,
步骤(5)中,假设机身和足部的标定板对应的坐标系分别为{MB}和{MF},相机坐标系为{C},利用相机分别获得两块标定板在相机坐标系下的位姿,用齐次变换矩阵和/>表示;之后通过坐标变换关系得到足部在机身坐标系下的位姿:其中,/>和/>表示标定板相对于机身、足部的固定位置,/>表示利用相机得到的足部在机身坐标系下的位姿,
步骤(6)中,利用当前的关节角度,通过正运动学计算出期望的足部位姿
其中,q1,q2,q3为各关节的角度,为运动学参数向量,/>为各关节螺旋轴向量,s1=s2=s3=(0,0,0,0,0,1)T,“^”符号表示将一个运动旋量向量写成矩阵形式,e为自然底数;并计算出期望位姿与通过相机得到的位姿之间的误差Δe:
步骤(9)中,列出含有待辨识参数的方程,整理为y=Jx的形式:
其中x为待辨识参数误差列向量,y为位姿误差列向量,为辨识矩阵,n为数据组数,通过最小二乘法计算出多足机器人运动学参数的误差:x=(JTJ)-1JTy,用所求出的运动学参数误差对原有参数进行补偿:
和/>分别为补偿前后的运动学参数。
2.如权利要求1所述基于视觉的多足机器人运动学参数标定方法,其特征在于,所述多足机器人有2条腿、4条腿或6条腿。
3.如权利要求1所述基于视觉的多足机器人运动学参数标定方法,其特征在于,所述机身为矩形,各条腿分布于矩形机身的四条边上。
4.如权利要求1所述基于视觉的多足机器人运动学参数标定方法,其特征在于,每条腿包含三个关节,从机身到足部依次为侧摆关节、髋关节和膝关节。
5.如权利要求1所述基于视觉的多足机器人运动学参数标定方法,其特征在于,步骤(7)中,得到n组多足机器人腿部处于不同位置时的数据,其中,n需要保证步骤(9)中的辨识矩阵非奇异,即n>=4。
CN202111372937.8A 2021-11-18 2021-11-18 一种基于视觉的多足机器人运动学参数标定方法 Active CN114161411B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111372937.8A CN114161411B (zh) 2021-11-18 2021-11-18 一种基于视觉的多足机器人运动学参数标定方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111372937.8A CN114161411B (zh) 2021-11-18 2021-11-18 一种基于视觉的多足机器人运动学参数标定方法

Publications (2)

Publication Number Publication Date
CN114161411A CN114161411A (zh) 2022-03-11
CN114161411B true CN114161411B (zh) 2023-09-01

Family

ID=80479668

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111372937.8A Active CN114161411B (zh) 2021-11-18 2021-11-18 一种基于视觉的多足机器人运动学参数标定方法

Country Status (1)

Country Link
CN (1) CN114161411B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114700953B (zh) * 2022-04-29 2023-09-08 华中科技大学 一种基于关节零位误差的粒子群手眼标定方法及系统
CN116787443B (zh) * 2023-07-26 2023-11-21 中国科学院宁波材料技术与工程研究所 基于单位对偶四元数的并联机构运动学标定方法和系统

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015066603A (ja) * 2013-09-26 2015-04-13 キヤノン株式会社 ロボット校正装置及びロボット校正方法、並びにロボット装置及びロボット装置の制御方法
CN108789404A (zh) * 2018-05-25 2018-11-13 哈尔滨工程大学 一种基于视觉的串联机器人运动学参数标定方法
CN110842914A (zh) * 2019-10-15 2020-02-28 上海交通大学 基于差分进化算法的手眼标定参数辨识方法、系统及介质
CN111360812A (zh) * 2018-12-26 2020-07-03 中国科学院沈阳自动化研究所 一种基于相机视觉的工业机器人dh参数标定方法及标定装置
CN111531547A (zh) * 2020-05-26 2020-08-14 华中科技大学 一种基于视觉测量的机器人标定及检测方法
CN112975973A (zh) * 2021-03-02 2021-06-18 中山大学 一种应用于柔性机器人的混合标定方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015066603A (ja) * 2013-09-26 2015-04-13 キヤノン株式会社 ロボット校正装置及びロボット校正方法、並びにロボット装置及びロボット装置の制御方法
CN108789404A (zh) * 2018-05-25 2018-11-13 哈尔滨工程大学 一种基于视觉的串联机器人运动学参数标定方法
CN111360812A (zh) * 2018-12-26 2020-07-03 中国科学院沈阳自动化研究所 一种基于相机视觉的工业机器人dh参数标定方法及标定装置
CN110842914A (zh) * 2019-10-15 2020-02-28 上海交通大学 基于差分进化算法的手眼标定参数辨识方法、系统及介质
CN111531547A (zh) * 2020-05-26 2020-08-14 华中科技大学 一种基于视觉测量的机器人标定及检测方法
CN112975973A (zh) * 2021-03-02 2021-06-18 中山大学 一种应用于柔性机器人的混合标定方法及装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
赵利军.面向六足步行机器人的行进区域障碍物视觉检测及应对规划研究.《中国博士学位论文全文数据库 信息科技辑》.2015,(第02期),全文. *

Also Published As

Publication number Publication date
CN114161411A (zh) 2022-03-11

Similar Documents

Publication Publication Date Title
CN114161411B (zh) 一种基于视觉的多足机器人运动学参数标定方法
CN108789404B (zh) 一种基于视觉的串联机器人运动学参数标定方法
CN104608129B (zh) 基于平面约束的机器人标定方法
CN109877840B (zh) 一种基于相机光轴约束的双机械臂标定方法
CN111531547B (zh) 一种基于视觉测量的机器人标定及检测方法
CN106338990A (zh) 基于激光跟踪仪的工业机器人dh参数标定与零位标定方法
CN108731591A (zh) 一种基于平面约束的机器人工具坐标系标定方法
CN110136204B (zh) 基于双侧远心镜头相机机床位置标定的音膜球顶装配系统
CN112318498B (zh) 一种考虑参数耦合的工业机器人标定方法
CN110919658B (zh) 一种基于视觉和多坐标系闭环转换的机器人标定方法
CN105834735A (zh) 一种基于激光跟踪仪的零部件自动装配方法
CN109176531A (zh) 一种串联型机器人运动学标定方法和系统
CN114310880A (zh) 一种机械臂标定方法及装置
CN112767493B (zh) Stewart平台运动学参数的机器视觉标定方法
CN111590566A (zh) 一种适用于全构型的空间机械臂运动学参数在轨标定方法
CN112958960B (zh) 一种基于光学靶标的机器人手眼标定装置
CN115816463B (zh) 基于关节全闭环和刚柔耦合模型的机器人精度提升方法和系统
CN113843804B (zh) 基于平面约束的机器人运动学标定方法及系统
CN114654466B (zh) 自动标定方法、装置、系统、电子设备及存储介质
Hvilshøj et al. Calibration techniques for industrial mobile manipulators: Theoretical configurations and best practices
CN112277002A (zh) 基于非完整位姿信息的机器人运动学标定装置及标定方法
CN115741720A (zh) 基于双目视觉技术及lm算法的机器人的零点标定系统及其方法
CN112894814B (zh) 一种基于最小二乘法的机械臂dh参数辨识方法
CN114029982A (zh) 一种相机在机器臂外的手眼标定装置及其标定方法
CN117283528A (zh) 一种并联机器人运动学模型在线学习方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant