CN114986515A - 一种位姿解耦的绝缘子更换机器人动态装配方法 - Google Patents

一种位姿解耦的绝缘子更换机器人动态装配方法 Download PDF

Info

Publication number
CN114986515A
CN114986515A CN202210786379.8A CN202210786379A CN114986515A CN 114986515 A CN114986515 A CN 114986515A CN 202210786379 A CN202210786379 A CN 202210786379A CN 114986515 A CN114986515 A CN 114986515A
Authority
CN
China
Prior art keywords
pin hole
insulator
pose
mechanical arm
pushing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210786379.8A
Other languages
English (en)
Inventor
姜勇
王洪光
王竣禾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenyang Institute of Automation of CAS
Original Assignee
Shenyang Institute of Automation of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenyang Institute of Automation of CAS filed Critical Shenyang Institute of Automation of CAS
Priority to CN202210786379.8A priority Critical patent/CN114986515A/zh
Publication of CN114986515A publication Critical patent/CN114986515A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1694Programme controls characterised by use of sensors other than normal servo-feedback from position, speed or acceleration sensors, perception control, multi-sensor controlled systems, sensor fusion
    • B25J9/1697Vision controlled systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J18/00Arms
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1679Programme controls characterised by the tasks executed
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02EREDUCTION OF GREENHOUSE GAS [GHG] EMISSIONS, RELATED TO ENERGY GENERATION, TRANSMISSION OR DISTRIBUTION
    • Y02E60/00Enabling technologies; Technologies with a potential or indirect contribution to GHG emissions mitigation

Landscapes

  • Engineering & Computer Science (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Manipulator (AREA)

Abstract

本发明涉及一种位姿解耦的绝缘子更换机器人动态装配方法。包括:步骤1:通过深度相机采集绝缘子表面点云图像,定位销孔平面,并提取其法向量作为销孔轴线方向;步骤2:根据销孔轴线方向和右手定则,确定机械臂末端的目标姿态;控制机械臂移动,调整推销工具的目标姿态;步骤3:通过柔顺控制算法对位置进行调整,使得推销工具将定位销推出销孔,完成位姿解耦动态装配。

Description

一种位姿解耦的绝缘子更换机器人动态装配方法
技术领域
本发明涉及柔顺装配领域,具体地说是一种位姿解耦的绝缘子更换机器人动态装配方法。
背景技术
机器人控制技术的发展使机器人可以完成多种精密装配任务。在这些装配任务中,作业平台和机器人底座之间的相对位置固定,机器人在柔顺装配方法的基础上,根据接触力的不同取值,做出不同动作。但当作业平台位于具有柔索特性的环境中时,机器人与作业平台之间会形成紧密的动力学刚柔耦合关系。柔索的位置会因受到机器人的挤压而产生复杂的动态变化,位置的动态变化又会反过来造成接触力具有瞬时变化的动态噪声,进而大大影响装配动作的柔顺性。因此人们将这类装配平台不固定,且位置受机器人运动影响的装配任务定义为动态装配任务,柔索装配环境是其中的典型应用场景。如何在动力学刚柔耦合的环境中保证装配动作的柔顺性,是动态装配任务中的关键科学问题。
在绝缘子更换任务中,需要首先将位于两片绝缘子中间起固定作用的绝缘销推出,在此之前需要将推销工具装配到销孔中。由于绝缘子位于具有柔索特性的输电线路上,因此这一装配任务可以被认为是动态装配任务。将推销工具简化成轴体模型,将销孔简化孔模型后,可以用轴孔装配的控制方法进行分析。在一般的轴孔装配任务中,通常可以采用基于物理建模的轴孔装配方法,基于被动柔顺控制、主动柔顺控制的柔顺装配方法以及力/位混合控制装配方法等。但是在这些装配任务中,装配环境模型一般都固定不变。
发明内容
本发明解决的是使用传统控制方法无法完成动态装配任务的问题。通过使用位姿解耦的装配方法,在深度视觉的参与下,提取点云法向量,进而是实现姿态调整,在这之后再单独对位置进行柔顺控制。
一种位姿解耦的绝缘子更换机器人动态装配方法,用于在具有柔索特性的输电线路上更换绝缘子时,将推销工具与销孔进行位姿解耦动态装配,包括以下步骤:
步骤1:通过深度相机采集绝缘子表面点云图像,定位销孔平面,并提取其法向量作为销孔轴线方向;
步骤2:根据销孔轴线方向和右手定则,确定机械臂末端的目标姿态;控制机械臂移动,调整推销工具的目标姿态;
步骤3:通过柔顺控制算法对位置进行调整,使得推销工具将定位销推出销孔,完成位姿解耦动态装配。
所述深度相机采集的绝缘子表面点云图像中包括定位销孔。
所述定位销孔平面包括:使用深度相机获取销孔一侧绝缘子表面平整区域点云,将该区域点云法向量当作销孔轴线方向。
提取绝缘子表面点云法向量是采用PCA算法。
使用PCA方法对点云的法向量进行估计,包括:
a.定义点集的中心点记为m,则有:
Figure BDA0003728856090000021
其中,销孔点云集合X={xi};
b.通过最小二乘法,令点集中的所有点到中心点的向量与法向量n的点积平方和最小,并通过优化的方式求解n,优化目标为:
Figure BDA0003728856090000022
将xi-m定义为yi,可以将上式改写为:
Figure BDA0003728856090000023
yiyi T=si
得到:
Figure BDA0003728856090000031
将上式中元素求和矩阵代替后,可以得到:
Figure BDA0003728856090000032
其中S为点集的协方差矩阵,其表示形式如下:
Figure BDA0003728856090000033
使用拉格朗日乘子法对带约束问题进行求解,则有:
L(n,λ)=nTSn-λ(nTn-1)
分别令L对n和λ求偏导,并令其等于0,则有:
Figure BDA0003728856090000034
Figure BDA0003728856090000035
求得最终的n为S矩阵中关于特征值λ的特征向量;
对S矩阵进行奇异值分解(SVD),即:
S=U∑VT
计算最小特征值对应的特征向量,即为法向量n。
所述根据销孔轴线方向和右手定则,确定机械臂末端的目标姿态,包括:
a.将提取到的孔轴线方向单位化,将其定义为目标姿态的z轴;
b.找到任意一个与z轴垂直的单位向量,将其定义为目标姿态的y轴;
c.根据右手定则得到目标姿态x轴。
所述控制机械臂移动调整推销工具的目标姿态包括:
计算机械臂末端连杆坐标系的当前姿态到目标姿态之间的期望旋转矩阵;
利用姿态控制算法按照期望旋转矩阵实现姿态调整;所述姿态控制算法包括角度控制,速度控制;
当机械臂末端到达目标姿态时,其末端的推销工具刚好对准销孔,推销工具轴线与销孔轴线一致。
所述对位置进行调整是采用柔顺控制算法实现推销工具向销孔方向的进给位置控制。
所述推销工具为在机械臂末端安装的推杆。
一种位姿解耦的绝缘子更换机器人动态装配系统,包括:深度相机、控制器、机械臂;
所述深度相机,用于采集绝缘子销孔图像发送给控制器;
所述控制器,用于根据销孔位置计算销孔轴线方向,获取机械臂末端的目标姿态和位置,控制机械臂带动末端的推销工具移动,将定位销推出销孔;
所述机械臂,末端安装有用于将定位销推出的推销工具。
本发明具有的有益效果及优点:
本发明方法通过位姿解耦控制,可以控制机械臂模块的相机采集销孔图像,控制器根据销孔轴线位置确定机械臂末端的目标姿态,从而控制机械臂末端带动推销工具移动至目标姿态,再采用柔顺控制算法对进给位置进行调整,将推销工具插入绝缘子上的销孔中,推出定位销,本发明方法提高了动态环境下装配的成功率。使控制流程更加透明化。
附图说明
图1孔装配中的绝缘子表面图。
图2为位姿解耦的动态装配方法框图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,下面结合附图对本发明的具体实施方法做详细的说明。在下面的描述中阐述了很多具体细节以便于充分理解本发明。但本发明能够以很多不同于在此描述的其他方式来实施,本领域技术人员可以在不违背发明内涵的情况下做类似改进,因此本发明不受下面公开的具体实施的限制。
除非另有定义,本文所使用的所有技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在发明的说明书中所使用的术语只是为了描述具体的实施例的目的,不是旨在于限制本发明。
如图1所示,为孔装配中的绝缘子表面图。
本发明需要的硬件设备为:机械臂、控制器、深度相机,深度相机用于拍摄绝缘子表面销孔图像发送给控制器,机械臂末端连接有推销装置(推杆),推销装置用于将销孔中的销子推出,控制器根据深度相机的机器视觉识别定位销孔的姿态并设置为目标姿态,并由目标姿态和机械臂基坐标系下末端坐标系姿态得到期望旋转矩阵,进而利用姿态控制算法,使得推销工具轴向和销孔轴向一致,最后在位置柔顺控制作用下,将推销工具插入绝缘子上的销孔中,完成装配推出销子。
如图2所示,本发明是一种位姿解耦的绝缘子更换机器人动态装配方法,其具体实施步骤如下:
步骤1:通过深度相机采集包括销孔的绝缘子表面点云,并提取其法向量看作孔轴线方向。
步骤2:将提取到的孔轴线方向作为机械臂目标姿态的z轴,并根据右手定则确认目标姿态中其他坐标轴的方向,定义为目标姿态。最后通过目标姿态与当前机械臂末端连杆坐标系之间的坐标变换得到期望旋转矩阵,进而实现姿态控制。
步骤3:然后通过柔顺控制算法对位置进行调整,使得机械臂末端的推销工具插入销孔,将定位销推出,完成装配。
步骤1在于使用深度相机获取销孔一侧绝缘子表面平整区域点云,然后鉴于此区域平面近乎与销孔轴线方向垂直,因此将此处点云法向量当作销孔轴线方向。点云法向量提取通过PCA算法得到。
使用PCA方法对点云的法向量进行估计。首先设点集X={xi},将点集的中心点记为m,则有:
Figure BDA0003728856090000061
由于一个平面的法向量与平面中所有的向量都是相互垂直的关系,因此根据相互垂直的向量点积等于0这个特征,我们可以找到点集所表示平面的法向量,并将其定义为n。在这里,通过最小二乘的思路,令点集中的所有点到中心点的向量与法向量n的点积平方和最小,并通过优化的方式求解n,优化目标为:
Figure BDA0003728856090000062
将xi-m定义为yi,可以将上式改写为:
Figure BDA0003728856090000063
yiyi T=si
得到:
Figure BDA0003728856090000064
将上式中元素求和矩阵代替后,可以得到:
Figure BDA0003728856090000065
其中S为点集的协方差矩阵,其表示形式如下:
Figure BDA0003728856090000066
使用拉格朗日乘子法对带约束问题进行求解,则有:
L(n,λ)=nTSn-λ(nTn-1)
分别令L对n和λ求偏导,并令其等于0,则有:
Figure BDA0003728856090000071
Figure BDA0003728856090000072
求得最终的n为S矩阵中关于特征值λ的特征向量。因此我们对S矩阵进行奇异值分解(SVD),即:
S=U∑VT
U中的列向量即为对角线位置特征值对应的特征向量,也就是矩阵S对应的特征向量。其中最大的特征值对应的特征向量为此点集中的点的主方向,而最小特征值对应的特征向量表示了与所有样本点所代表的方向都无关的方向。也就是我们需要找的法向量。
步骤2在于将提取到的孔轴线方向单位化后作为机械臂目标姿态的z轴,进而确定目标姿态坐标系方位。然后找到任意一个与z轴垂直的单位向量,将其定义为目标姿态的y轴,最后根据右手定则得到目标姿态x轴的表示形式。得到目标姿态的表示之后,通过坐标变换得到目标姿态与当前机械臂末端连杆坐标系之间期望旋转矩阵,然后利用姿态控制算法实现姿态调整。姿态控制算法有角度控制,速度控制等。
步骤3在于使用位置柔顺控制方法对轴体前进方向的进给位置进行控制。由于对销孔姿态在动态环境中变化不大,因此可以利用位姿解耦控制,即首先根据点云处理结果进行姿态控制,使得机械臂末端带动推销工具移动至销孔前端,使得推销工具轴线与销孔轴线一致。当机械臂末端姿态调整至目标姿态后,再单独对进给位置进行调整,使推销工具箱销孔方向前进,将定位销推出销孔。
柔顺控制算法可以采用例如:阻抗控制、导纳控制、力/位混合控制、强化学习控制等现有算法。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种位姿解耦的绝缘子更换机器人动态装配方法,其特征在于,用于在具有柔索特性的输电线路上更换绝缘子时,将推销工具与销孔进行位姿解耦动态装配,包括以下步骤:
步骤1:通过深度相机采集绝缘子表面点云图像,定位销孔平面,并提取其法向量作为销孔轴线方向;
步骤2:根据销孔轴线方向和右手定则,确定机械臂末端的目标姿态;控制机械臂移动,调整推销工具的目标姿态;
步骤3:通过柔顺控制算法对位置进行调整,使得推销工具将定位销推出销孔,完成位姿解耦动态装配。
2.根据权利要求1所述的一种位姿解耦的绝缘子更换机器人动态装配方法,其特征在于,所述深度相机采集的绝缘子表面点云图像中包括定位销孔。
3.根据权利要求1所述的一种位姿解耦的绝缘子更换机器人动态装配方法,其特征在于,所述定位销孔平面包括:使用深度相机获取销孔一侧绝缘子表面平整区域点云,将该区域点云法向量当作销孔轴线方向。
4.根据权利要求1所述的一种位姿解耦的绝缘子更换机器人动态装配方法,其特征在于,提取绝缘子表面点云法向量是采用PCA算法。
5.根据权利要求4所述的一种位姿解耦的绝缘子更换机器人动态装配方法,其特征在于,使用PCA方法对点云的法向量进行估计,包括:
a.定义点集的中心点记为m,则有:
Figure FDA0003728856080000011
其中,销孔点云集合X={xi};
b.通过最小二乘法,令点集中的所有点到中心点的向量与法向量n的点积平方和最小,并通过优化的方式求解n,优化目标为:
Figure FDA0003728856080000012
将xi-m定义为yi,可以将上式改写为:
Figure FDA0003728856080000021
yiyi T=si
得到:
Figure FDA0003728856080000022
将上式中元素求和矩阵代替后,可以得到:
Figure FDA0003728856080000023
其中S为点集的协方差矩阵,其表示形式如下:
Figure FDA0003728856080000024
使用拉格朗日乘子法对带约束问题进行求解,则有:
L(n,λ)=nTSn-λ(nTn-1)
分别令L对n和λ求偏导,并令其等于0,则有:
Figure FDA0003728856080000025
Figure FDA0003728856080000026
求得最终的n为S矩阵中关于特征值λ的特征向量;
对S矩阵进行奇异值分解(SVD),即:
S=U∑VT
计算最小特征值对应的特征向量,即为法向量n。
6.根据权利要求1所述的一种位姿解耦的绝缘子更换机器人动态装配方法,其特征在于,所述根据销孔轴线方向和右手定则,确定机械臂末端的目标姿态,包括:
a.将提取到的孔轴线方向单位化,将其定义为目标姿态的z轴;
b.找到任意一个与z轴垂直的单位向量,将其定义为目标姿态的y轴;
c.根据右手定则得到目标姿态x轴。
7.根据权利要求1所述的一种位姿解耦的绝缘子更换机器人动态装配方法,其特征在于,所述控制机械臂移动调整推销工具的目标姿态包括:
计算机械臂末端连杆坐标系的当前姿态到目标姿态之间的期望旋转矩阵;
利用姿态控制算法按照期望旋转矩阵实现姿态调整;所述姿态控制算法包括角度控制,速度控制;
当机械臂末端到达目标姿态时,其末端的推销工具刚好对准销孔,推销工具轴线与销孔轴线一致。
8.根据权利要求1所述的一种位姿解耦的绝缘子更换机器人动态装配方法,其特征在于,所述对位置进行调整是采用柔顺控制算法实现推销工具向销孔方向的进给位置控制。
9.根据权利要求1-8任意一项所述的一种位姿解耦的绝缘子更换机器人动态装配方法,其特征在于,所述推销工具为在机械臂末端安装的推杆。
10.一种位姿解耦的绝缘子更换机器人动态装配系统,其特征在于,包括:深度相机、控制器、机械臂;
所述深度相机,用于采集绝缘子销孔图像发送给控制器;
所述控制器,用于根据销孔位置计算销孔轴线方向,获取机械臂末端的目标姿态和位置,控制机械臂带动末端的推销工具移动,将定位销推出销孔;
所述机械臂,末端安装有用于将定位销推出的推销工具。
CN202210786379.8A 2022-07-04 2022-07-04 一种位姿解耦的绝缘子更换机器人动态装配方法 Pending CN114986515A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210786379.8A CN114986515A (zh) 2022-07-04 2022-07-04 一种位姿解耦的绝缘子更换机器人动态装配方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210786379.8A CN114986515A (zh) 2022-07-04 2022-07-04 一种位姿解耦的绝缘子更换机器人动态装配方法

Publications (1)

Publication Number Publication Date
CN114986515A true CN114986515A (zh) 2022-09-02

Family

ID=83019870

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210786379.8A Pending CN114986515A (zh) 2022-07-04 2022-07-04 一种位姿解耦的绝缘子更换机器人动态装配方法

Country Status (1)

Country Link
CN (1) CN114986515A (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106182004A (zh) * 2016-08-01 2016-12-07 上海交通大学 基于视觉引导的工业机器人自动销孔装配的方法
KR101798041B1 (ko) * 2016-06-29 2017-11-17 성균관대학교산학협력단 3차원 물체 인식 및 자세 추정 장치 및 그 방법
CN110223345A (zh) * 2019-05-14 2019-09-10 南京理工大学 基于点云的配电线路作业对象位姿估计方法
CN112060085A (zh) * 2020-08-24 2020-12-11 清华大学 一种基于视触多尺度定位的机器人操作位姿控制方法
CN113327298A (zh) * 2021-07-05 2021-08-31 深圳市拓普智造科技有限公司 基于图像实例分割和点云pca算法的一种抓取姿态估计方法
CN114434123A (zh) * 2022-02-24 2022-05-06 亿嘉和科技股份有限公司 一种空中线夹的机械臂定位拆卸方法、装置及存储介质

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101798041B1 (ko) * 2016-06-29 2017-11-17 성균관대학교산학협력단 3차원 물체 인식 및 자세 추정 장치 및 그 방법
CN106182004A (zh) * 2016-08-01 2016-12-07 上海交通大学 基于视觉引导的工业机器人自动销孔装配的方法
CN110223345A (zh) * 2019-05-14 2019-09-10 南京理工大学 基于点云的配电线路作业对象位姿估计方法
CN112060085A (zh) * 2020-08-24 2020-12-11 清华大学 一种基于视触多尺度定位的机器人操作位姿控制方法
CN113327298A (zh) * 2021-07-05 2021-08-31 深圳市拓普智造科技有限公司 基于图像实例分割和点云pca算法的一种抓取姿态估计方法
CN114434123A (zh) * 2022-02-24 2022-05-06 亿嘉和科技股份有限公司 一种空中线夹的机械臂定位拆卸方法、装置及存储介质

Similar Documents

Publication Publication Date Title
CN107738254B (zh) 一种机械臂坐标系的转换标定方法与系统
JP5606241B2 (ja) 人間型ロボットのための視覚認知システムおよび方法
Ott et al. A humanoid two-arm system for dexterous manipulation
Chaumette Potential problems of stability and convergence in image-based and position-based visual servoing
CN109877840B (zh) 一种基于相机光轴约束的双机械臂标定方法
Liu et al. An adaptive ball-head positioning visual servoing method for aircraft digital assembly
CN113459094B (zh) 一种工业机器人工具坐标系及零点自标定方法
Zhang Hand/eye calibration for electronic assembly robots
CN113858217B (zh) 多机器人交互的三维视觉位姿感知方法及系统
Zhang et al. Robotic curved surface tracking with a neural network for angle identification and constant force control based on reinforcement learning
CN111208730B (zh) 一种快速终端滑模阻抗控制算法
CN111203880A (zh) 基于数据驱动的图像视觉伺服控制系统及方法
Zou et al. An approach for peg-in-hole assembling based on force feedback control
Sun et al. A high-accuracy positioning method for mobile robotic grasping with monocular vision and long-distance deviation
Sebastián et al. Uncalibrated visual servoing using the fundamental matrix
Mohebbi et al. An eye-in-hand stereo visual servoing for tracking and catching moving objects
CN114986515A (zh) 一种位姿解耦的绝缘子更换机器人动态装配方法
Chen et al. An integrated two-pose calibration method for estimating head-eye parameters of a robotic bionic eye
Sefercik et al. Learning markerless robot-depth camera calibration and end-effector pose estimation
Rüther et al. The narcissistic robot: Robot calibration using a mirror
Bourquardez et al. Stability and performance of image based visual servo control using first order spherical image moments
CN113733098B (zh) 机械臂模型位姿计算方法、装置、电子设备和存储介质
Gandhi et al. Skeleton-based adaptive visual servoing for control of robotic manipulators in configuration space
WO2019114630A1 (zh) 一种获取机器人tcp坐标的方法和装置
CN114083530A (zh) 工件坐标系标定系统及方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination