CN110421558B - 面向配电网作业机器人的通用型遥操作系统及方法 - Google Patents

面向配电网作业机器人的通用型遥操作系统及方法 Download PDF

Info

Publication number
CN110421558B
CN110421558B CN201910544242.XA CN201910544242A CN110421558B CN 110421558 B CN110421558 B CN 110421558B CN 201910544242 A CN201910544242 A CN 201910544242A CN 110421558 B CN110421558 B CN 110421558B
Authority
CN
China
Prior art keywords
teleoperation
mechanical arm
equipment
robot
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910544242.XA
Other languages
English (en)
Other versions
CN110421558A (zh
Inventor
董二宝
祝晶
单晓峰
韩先国
唐旭明
庄智
陈宇涛
许旻
江广克
甄武东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
University of Science and Technology of China USTC
State Grid Corp of China SGCC
Huainan Power Supply Co of State Grid Anhui Electric Power Co Ltd
Original Assignee
University of Science and Technology of China USTC
State Grid Corp of China SGCC
Huainan Power Supply Co of State Grid Anhui Electric Power Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by University of Science and Technology of China USTC, State Grid Corp of China SGCC, Huainan Power Supply Co of State Grid Anhui Electric Power Co Ltd filed Critical University of Science and Technology of China USTC
Priority to CN201910544242.XA priority Critical patent/CN110421558B/zh
Publication of CN110421558A publication Critical patent/CN110421558A/zh
Application granted granted Critical
Publication of CN110421558B publication Critical patent/CN110421558B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00Controls for manipulators
    • B25J13/006Controls for manipulators by means of a wireless system for controlling one or several manipulators
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J13/00Controls for manipulators
    • B25J13/08Controls for manipulators by means of sensing devices, e.g. viewing or touching devices
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J19/00Accessories fitted to manipulators, e.g. for monitoring, for viewing; Safety devices combined with or specially adapted for use in connection with manipulators
    • B25J19/02Sensing devices
    • B25J19/021Optical sensing devices
    • B25J19/023Optical sensing devices including video camera means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B25HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25JMANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J9/00Programme-controlled manipulators
    • B25J9/16Programme controls
    • B25J9/1679Programme controls characterised by the tasks executed
    • B25J9/1689Teleoperation

Abstract

本发明公开了一种面向配电网作业机器人的通用型遥操作系统及其方法,主要包括操作主端、操作从端、控制机和网络,所述操作主端通过控制机和网络与操作从端相互通信连接;所述操作主端包括遥操作设备、虚拟现实设备;所述操作从端包括设置在机器人上的摄像机、机械臂;所述遥操作设备的操作通过控制机实时映射到远端机器人的机械臂上,实现机器人进行配电网作业的遥操作。本发明将立体视觉虚拟现实与异构遥操作控制系统相结合,更好地对场景信息进行三维感知,使机器人遥操作更加精确和快速,虚拟现实系统和遥操作系统都是预先配置好的跨底层的平台系统,互不干扰,具有良好的可替代性和通用性,便于广泛推广应用。

Description

面向配电网作业机器人的通用型遥操作系统及方法
技术领域
本发明涉及电力机器人技术领域,特别是涉及一种面向配电网作业机器人的通用型遥操作系统及方法。
背景技术
目前配电网作业大多采用绝缘手套作业法,要求操作人员攀爬高压铁塔或借助绝缘斗臂车进行不停电作业,人工带电作业稍有不慎就容易发生人身伤亡事故,给家庭和社会带来严重的损失。因此应运而生了配电网带电作业机器人,构型大多为双机械臂构型,通过操作人员操作控制机器人完成配电网作业。
对于操作者在绝缘斗臂车上的绝缘斗内操作的模式,操作员在空中运行机器臂,直接面对操作现场(高压电线),存在高压触电的危险,同时斗臂车要完全实现绝缘,对车况要求较高、代价过大;对于操作员在地面遥操作,机械臂随高空云台升入作业现场进行带电作业的模式,无法通过摄像头捕捉的现场信息充分了解工况,监控屏幕会丢失大量三维信息,临场感差,操作员很难通过屏幕准确知晓现场所有电缆间的位置关系,特别是机械臂操作时存在一定的遮挡关系,给实际操作带来更多隐形的危险。由于该模式采用主从操作方式,操作者的失误可能直接导致机械臂相互碰撞,从而造成重大损失。
因此亟需提供一种新型的面向配电网作业机器人的遥操作系统及方法来解决上述问题。
发明内容
本发明所要解决的技术问题是提供一种面向配电网作业机器人的通用型遥操作系统,能够更加精确、快速遥操作机器人。
为解决上述技术问题,本发明采用的一个技术方案是:提供一种面向配电网作业机器人的通用型遥操作系统,主要包括操作主端、操作从端、控制机和网络,所述操作主端通过控制机和网络与操作从端相互通信连接;
所述操作主端包括遥操作设备、虚拟现实设备;
所述操作从端包括设置在机器人上的摄像机、机械臂;
所述遥操作设备的操作通过控制机实时映射到远端机器人的机械臂上,实现机器人进行配电网作业的遥操作。
在本发明一个较佳实施例中,所述遥操作设备采用六自由度遥操作手柄,所述机械臂为六自由度机械臂。
在本发明一个较佳实施例中,所述摄像机采用双目相机。
为解决上述技术问题,本发明采用的另一个技术方案是:提供一种基于面向配电网作业机器人的通用型遥操作系统的遥操作方法,包括以下步骤:
S1:所述摄像机采集配电网作业现场信息,通过网络实时传输至控制机,控制机对接收的信息进行预处理后,发送至所述虚拟现实设备,使操作主端的操作人员看到现场立体场景;
S2:操作人员根据获得的现场立体场景信息,操作所述遥操作设备,遥操作设备的操作信息传送到控制机进行工作空间映射解算;
S3:所述控制机采用建模仿真的方法,对机械臂进行逆解运算得到对应的转动角度,并发送至机械臂执行,实现机械臂的遥操作。
在本发明一个较佳实施例中,步骤S1中,所述摄像机采集配电网作业现场的信息包括图像、视频。
在本发明一个较佳实施例中,步骤S2中,工作空间映射解算的具体步骤包括:
S2.1:将所述遥操作设备计量的空间位置坐标信息由控制机进行读取记录,并将该空间位置坐标信息的变化量映射到机械臂工作空间坐标系,机械臂末端新的空间位置坐标为:
Pt=k1·R·Δp+P0  (1)
其中,Pt为需要达到的目标坐标,P0是前一时刻的位置坐标,k1是比例系数,取值范围为0.1—1,R是两坐标系旋转矩阵,Δp是遥操作空间位置变化量;
S2.2:同时将所述遥操作设备计量的空间位姿信息由控制机进行读取记录,并将该空间位姿信息的变化量映射到机械臂工作空间坐标系,机械臂末端新的空间位置坐标为:
Rt=k2·Δr+R0  (2)
其中,Rt是目标姿态,R0是当前姿态,k2是比例系数,取值范围为0.1—1,Δr是遥操作位姿变化量。
在本发明一个较佳实施例中,步骤S3中,所述控制机采用建模仿真的方法,在仿真环境中进行机械臂仿真计算,通过逆解运算得到机械臂每个关节和末端的转动角度,在上个偏移位置的基础上,机械臂关节和末端将接收增量信息,然后增量式地移动到指定的位置。
本发明的有益效果是:本发明将立体视觉虚拟现实与异构遥操作控制系统相结合,为配网带电作业机器人提供了一种可以跨底层硬件平台的通用型遥操作系统;通过与虚拟现实的结合,使得操作人员的临场感和沉浸感显著提高,更好地对场景信息进行三维感知,不受环境和视线影响,使机器人遥操作更加精确和快速;虚拟现实系统和遥操作系统都是预先配置好的跨底层的平台系统,互不干扰,不随机械臂的改变而发生改变,无论机械臂采用何种构型何种驱动方式,该遥操作系统均能适用,具有良好的可替代性和通用性,便于广泛推广应用。
附图说明
图1是本发明面向配电网作业机器人的通用型遥操作系统及其方法的结构原理框图;
附图中各部件的标记如下:1、遥操作设备,2、虚拟现实设备,3、控制机,4、网络,5、摄像机,6、机械臂,7、力反馈设备。
具体实施方式
下面结合附图对本发明的较佳实施例进行详细阐述,以使本发明的优点和特征能更易于被本领域技术人员理解,从而对本发明的保护范围做出更为清楚明确的界定。
请参阅图1,本发明实施例包括:
一种面向配电网作业机器人的通用型遥操作系统,主要包括操作主端、操作从端、控制机和网络,所述操作主端通过控制机3和网络4与操作从端相互通信连接。本实施例中,控制机3采用两台计算机,资源占用小,也可采用一台计算机完成信息处理及传输。
所述操作主端包括遥操作设备1、虚拟现实设备2;优选的,所述遥操作设备1采用六自由度遥操作手柄,通过操作人员手持操作,所述虚拟现实设备2为VR头戴设备,可佩戴在操作人员头部。
所述操作从端包括设置在机器人上的摄像机5、机械臂6;本实施例中,所述机械臂6为六自由度机械臂,包括机械臂关节、机械臂末端。优选的,所述摄像机5采用双目相机,双目立体显示是对人类立体视觉形成原理的模拟和实现,立体视觉的核心是利用不同帧画面之间的不同,也就是视差,产生了立体感。
所述遥操作设备1的操作通过控制机3实时映射到远端机器人的机械臂6上,实现机器人进行配电网作业的遥操作。
本发明将立体视觉虚拟现实与异构遥操作控制系统相结合,为配网带电作业机器人提供了一种可以跨底层硬件平台的通用型遥操作系统;通过与虚拟现实的结合,使得操作人员的临场感和沉浸感显著提高,更好地对场景信息进行三维感知,不受环境和视线影响,使机器人遥操作更加精确和快速;虚拟现实系统和遥操作系统都是预先配置好的跨底层的平台系统,互不干扰,不随机械臂的改变而发生改变,无论机械臂采用何种构型何种驱动方式,该遥操作系统均能适用,具有良好的可替代性和通用性,便于广泛推广应用。
基于面向配电网作业机器人的通用型遥操作系统的遥操作方法,包括以下步骤:
S1:所述摄像机采集配电网作业现场信息,包括图像、视频,通过网络实时传输至控制机,控制机对接收的信息进行预处理后,发送至所述虚拟现实设备,使操作主端的操作人员看到现场立体场景;
S2:操作人员根据获得的现场立体场景信息操作所述遥操作设备,遥操作设备的操作信息包括空间位置坐标信息和空间位姿信息,传送到控制机进行工作空间映射解算;
工作空间映射解算的具体步骤包括:
S2.1:将所述遥操作设备所计量的空间位置坐标信息进行记录,通过其SDK接口由控制机进行读取获得,并将该空间位置坐标信息的变化量映射到机械臂工作空间坐标系,机械臂末端新的空间位置坐标为:
Pt=k1·R·Δp+P0  (1)
其中,Pt为需要达到的目标坐标,P0是前一时刻的位置坐标,k1是比例系数,取值为0.1—1,其取值大小决定位置移动的灵敏度,R是两坐标系旋转矩阵,Δp是遥操作空间位置变化量;
S2.2:同时将所述遥操作设备计量的空间位姿信息进行记录,通过其SDK接口由控制机进行读取获得,并将该空间位姿信息的变化量映射到机械臂工作空间坐标系,该坐标系为假定坐标系,与仿真环境中的内容一致,机械臂末端新的空间位置坐标为:
Rt=k2·Δr+R0  (2)
其中,Rt是目标姿态,R0是当前姿态,k2是比例系数,取值为0.1—1,其取值大小决定角度大小改变的灵敏度,Δr是遥操作位姿变化量。
本实施例中,所述遥操作设备六自由度遥操作手柄,操作人员操控六自由度遥操作手柄控制手柄末端的空间位姿。
另外,所述机器人还设置有力反馈设备,对应的所述遥操作设备具有力反馈功能,力反馈设备通过机械臂末端的力的情况,反馈到遥操作设备上,实现更加精确、快速遥操作机器人。
S3:所述控制机采用建模仿真的方法,对机械臂进行逆解运算得到对应的转动角度,并发送至机械臂执行,实现机械臂的遥操作。
新的空间位置和姿态获得以后,采用建模仿真的方法,在仿真环境v-rep中进行机械臂仿真计算,仿真环境中采用了6自由度机械臂伪逆算法进行机械臂逆解,计算出机械臂对应的6轴角度,即得到机械臂每个关节和末端的转动角度,将这些角度通过网络发送给机械臂执行,在上个偏移位置的基础上,机械臂关节和末端将接收增量信息,然后增量式地移动到指定的位置,实现机械臂的遥操作。因此,无论机械臂的构型和驱动方式如何,都不用更改遥操作手柄的构型和控制算法。
以断引线作业为例进行实施方式说明。工作人员首先在地面上对机械臂末端更换合适工具(如断线钳),将机械臂与PC客户端通讯设置好后放入斗臂车,上升到指定作业区域。与机器人配套的双目相机可以获得工作区域的实时场景三维信息,通过无线或者光纤通讯将视频信号传回PC客户端,PC客户端对传入的视频信号进行滤波和渲染,将处理好的信号输出至操作者的虚拟现实设备内,操作者就可以实时获得远端工作现场的三维信息,同时具有良好的临场感。操作者只需要根据虚拟现实设备里的实时信息,判断不同电线间的位置关系并靠近进行切断即可。由于遥操作手柄具有六自由度,所以机械臂的转动和移动都可以完成,由于遥操作手柄的操作与远端机械臂是实时映射,位移速度的快慢也可以根据操作者的需求实时调整,避免了危险的发生。
以上所述仅为本发明的实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (4)

1.一种基于面向配电网作业机器人的通用型遥操作系统的遥操作方法,其特征在于,所述面向配电网作业机器人的通用型遥操作系统,主要包括操作主端、操作从端、控制机和网络,所述操作主端通过控制机和网络与操作从端相互通信连接;
所述操作主端包括遥操作设备、虚拟现实设备,所述遥操作设备采用六自由度遥操作手柄,所述机械臂为六自由度机械臂,所述虚拟现实设备为VR头戴设备,所述机器人还设置有力反馈设备,对应的所述遥操作设备具有力反馈功能,力反馈设备通过机械臂末端的力的情况,反馈到遥操作设备上;
所述操作从端包括设置在机器人上的摄像机、机械臂;
所述遥操作设备的操作通过控制机实时映射到远端机器人的机械臂上,实现机器人进行配电网作业的遥操作;
所述遥操作方法包括以下步骤:
S1:所述摄像机采集配电网作业现场信息,通过网络实时传输至控制机,控制机对接收的信息进行预处理后,发送至所述虚拟现实设备,使操作主端的操作人员看到现场立体场景;
S2:操作人员根据获得的现场立体场景信息,操作所述遥操作设备,遥操作设备的操作信息传送到控制机进行工作空间映射解算;工作空间映射解算的具体步骤包括:
S2.1:将所述遥操作设备计量的空间位置坐标信息由控制机进行读取记录,并将该空间位置坐标信息的变化量映射到机械臂工作空间坐标系,机械臂末端新的空间位置坐标为:
Pt=k1·R·Vp+P0                         (1)
其中,Pt为需要达到的目标坐标,P0是前一时刻的位置坐标,k1是比例系数,取值范围为0.1-1,R是两坐标系旋转矩阵,△p是遥操作空间位置变化量;
S2.2:同时将所述遥操作设备计量的空间位姿信息由控制机进行读取记录,并将该空间位姿信息的变化量映射到机械臂工作空间坐标系,机械臂末端新的空间位置坐标为:
Rt=k2·Vr+R0                    (2)
其中,Rt是目标姿态,R0是当前姿态,k2是比例系数,取值范围为0.1-1,△r是遥操作位姿变化量;
S3:所述控制机采用建模仿真的方法,对机械臂进行逆解运算得到对应的转动角度,并发送至机械臂执行,实现机械臂的遥操作。
2.根据权利要求1所述的面向配电网作业机器人的通用型遥操作方法,其特征在于,步骤S1中,所述摄像机采集配电网作业现场的信息包括图像、视频。
3.根据权利要求1所述的面向配电网作业机器人的通用型遥操作方法,其特征在于,步骤S3中,所述控制机采用建模仿真的方法,在仿真环境中进行机械臂仿真计算,通过逆解运算得到机械臂每个关节和末端的转动角度,在上个偏移位置的基础上,机械臂关节和末端将接收增量信息,然后增量式地移动到指定的位置。
4.根据权利要求1所述的面向配电网作业机器人的通用型遥操作方法,其特征在于,所述摄像机采用双目相机。
CN201910544242.XA 2019-06-21 2019-06-21 面向配电网作业机器人的通用型遥操作系统及方法 Active CN110421558B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910544242.XA CN110421558B (zh) 2019-06-21 2019-06-21 面向配电网作业机器人的通用型遥操作系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910544242.XA CN110421558B (zh) 2019-06-21 2019-06-21 面向配电网作业机器人的通用型遥操作系统及方法

Publications (2)

Publication Number Publication Date
CN110421558A CN110421558A (zh) 2019-11-08
CN110421558B true CN110421558B (zh) 2023-04-28

Family

ID=68409386

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910544242.XA Active CN110421558B (zh) 2019-06-21 2019-06-21 面向配电网作业机器人的通用型遥操作系统及方法

Country Status (1)

Country Link
CN (1) CN110421558B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111438673B (zh) * 2020-03-24 2022-04-22 西安交通大学 基于立体视觉和手势控制的高空作业遥操作方法及系统
JP2023533922A (ja) * 2020-07-01 2023-08-07 北京術鋭機器人股▲ふん▼有限公司 主従運動の制御方法、ロボットシステム、設備および記憶媒体
CN112091974B (zh) * 2020-08-28 2022-02-11 国网安徽省电力有限公司淮南供电公司 配网带电作业机器人遥控操作系统及其控制方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106737668A (zh) * 2016-12-09 2017-05-31 南京理工大学 一种基于虚拟现实的带电作业机器人遥操作方法
CN107717994A (zh) * 2017-11-08 2018-02-23 西安交通大学 基于主从空间映射的主从异构机器人通用控制方法及系统

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011110620A (ja) * 2009-11-24 2011-06-09 Toyota Industries Corp ロボットの動作を制御する方法およびロボットシステム
CN106393049B (zh) * 2015-08-12 2019-03-12 哈尔滨理工大学 一种用于高危作业的机器人
CN105500345A (zh) * 2016-01-21 2016-04-20 烟台拓伟机械有限公司 分离式机器人拖动示教手柄及其示教方法
CN107363831B (zh) * 2017-06-08 2020-01-10 中国科学院自动化研究所 基于视觉的遥操作机器人控制系统及方法
CN107414827B (zh) * 2017-07-25 2021-01-26 电子科技大学 基于线性反馈控制器的六自由度机械臂自适应检测方法
CN107877517B (zh) * 2017-11-16 2021-03-30 哈尔滨工业大学 基于CyberForce遥操作机械臂的运动映射方法
CN108340388A (zh) * 2018-05-10 2018-07-31 山东大学深圳研究院 一种救援机器人的七自由度力反馈手柄及操作方法
CN109262609A (zh) * 2018-08-29 2019-01-25 南京理工大学 基于虚拟现实技术的机械臂远程控制系统及方法
CN109434870A (zh) * 2018-09-18 2019-03-08 国网江苏省电力有限公司盐城供电分公司 一种用于机器人带电作业的虚拟现实操作系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106737668A (zh) * 2016-12-09 2017-05-31 南京理工大学 一种基于虚拟现实的带电作业机器人遥操作方法
CN107717994A (zh) * 2017-11-08 2018-02-23 西安交通大学 基于主从空间映射的主从异构机器人通用控制方法及系统

Also Published As

Publication number Publication date
CN110421558A (zh) 2019-11-08

Similar Documents

Publication Publication Date Title
CN110421558B (zh) 面向配电网作业机器人的通用型遥操作系统及方法
CN108214445B (zh) 一种基于ros的主从异构遥操作控制系统
CN103302668B (zh) 基于Kinect的空间遥操作机器人的控制系统及其方法
CN111438673B (zh) 基于立体视觉和手势控制的高空作业遥操作方法及系统
CN106493708A (zh) 一种基于双机械臂和辅助臂的带电作业机器人控制系统
CN108284425A (zh) 一种带电作业机器人机械臂协作力反馈主从控制方法及系统
CN106737547A (zh) 一种带电作业机器人
CN110039547B (zh) 一种柔性机械臂遥操作的人机交互终端及方法
KR102001214B1 (ko) 가상 현실 기반 양팔로봇 교시 장치 및 방법
CN105364934A (zh) 液压机械臂遥操作控制系统和方法
CN109262609A (zh) 基于虚拟现实技术的机械臂远程控制系统及方法
Naceri et al. Towards a virtual reality interface for remote robotic teleoperation
CN108582119A (zh) 一种带电作业机器人力反馈主从控制方法及系统
CN206840057U (zh) 一种基于双机械臂和辅助臂的带电作业机器人控制系统
CN110682291B (zh) 一种基于vr的机器人遥操作系统及其遥操作方法
CN108582031A (zh) 一种基于力反馈主从控制的带电作业机器人支接引线搭接方法
CN206510017U (zh) 一种带电作业机器人
CN110977981A (zh) 一种机器人虚拟现实同步系统及同步方法
CN108527305A (zh) 一种基于虚拟现实技术的带电作业机器人力反馈主从控制方法及系统
CN110039561A (zh) 基于点云的带电作业机器人遥操作人员培训系统及方法
CN115060518A (zh) 一种基于数字孪生技术的挖掘机器人实验平台
CN108598990A (zh) 一种基于力反馈主从控制技术的带电作业机器人架空地线更换修补方法
CN207937787U (zh) 扩增实境仿真系统
CN215903514U (zh) 一种带电作业机械臂及带电作业机器人
US20240033928A1 (en) Coordinate mapping for motion control

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant