CN106355618B - 金具绝缘子定位系统、方法以及自动检修系统 - Google Patents

金具绝缘子定位系统、方法以及自动检修系统 Download PDF

Info

Publication number
CN106355618B
CN106355618B CN201610744240.1A CN201610744240A CN106355618B CN 106355618 B CN106355618 B CN 106355618B CN 201610744240 A CN201610744240 A CN 201610744240A CN 106355618 B CN106355618 B CN 106355618B
Authority
CN
China
Prior art keywords
label
unit
labels
coordinate
fitting insulator
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201610744240.1A
Other languages
English (en)
Other versions
CN106355618A (zh
Inventor
张云剑
李世成
王石刚
韩鸣晓
黄远征
梁庆华
莫锦秋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Jiaotong University
Original Assignee
Shanghai Jiaotong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiaotong University filed Critical Shanghai Jiaotong University
Priority to CN201610744240.1A priority Critical patent/CN106355618B/zh
Publication of CN106355618A publication Critical patent/CN106355618A/zh
Application granted granted Critical
Publication of CN106355618B publication Critical patent/CN106355618B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Insulators (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供一种金具绝缘子定位系统,用于检修执行器,金具绝缘子定位系统包括单目视觉单元与识别定位单元,单目视觉单元用于获取包含标志单元的金具绝缘子的图像,识别定位单元用于根据图像通过标志单元获得金具绝缘子在检修执行器的坐标系中的位姿,标志单元包括设定相对位置关系的多个标记。本发明还提供一种金具绝缘子定位方法与自动检修系统。本发明提供的金具绝缘子定位系统、方法以及自动检修系统,通过在金具绝缘子上设置形状相同大小不同的两个标记,使用单目视觉单元实现金具绝缘子定位,仅需要单目视觉单元,就能够实现高精度定位。

Description

金具绝缘子定位系统、方法以及自动检修系统
技术领域
本发明涉及计算机视觉领域,具体涉及金具绝缘子定位系统、方法以及自动检修系统。
背景技术
随着新一代智能变电站的扩大示范和推广建设,有效的减少了能源的消耗与浪费,实现了变电站性能的优化。其中隔离式断路器替代传统断路器与隔离开关的联合应用,维修要求大幅度降低,支持更精简、更紧凑的变电站布局以及更高的可用性,因此获得了广泛应用。
虽然隔离断路器的可靠性、稳定性相对以前的断路器和隔离开关性而言有了极大的提升,但是仍需要适时地安排人员检修。人工检修除了存在效率低下、劳动强度大的问题外,由于检修人员直接接触高压导线,存在很大的安全隐患。人工带电作业安全防护、遮蔽要求非常严格,稍不注意就会出现短路电流,造成重大的安全事故,引发人身伤亡事故。
为了满足新一代智能变电站现场检修与试验的需求,避免隔离断路器检修时需要同停其他电气设备,减少设备停电范围,缩短系统调试周期,有必要开展隔离断路器带电检修作业的自动化技术研究。
要使检修过程自动化,视觉在整个过程中,作为识别和确定金具位姿的关键环节,是自动化检修平台必不可少的关键组成环节。
典型的视觉系统三维定位的方案包括单目视觉和双目视觉两种,其中单目视觉仅依靠一台摄像机拍摄目标物体,通过目标物体的几何形状约束获取定位结果;双目视觉则是模拟人类的双眼,基于视差原理并利用成像设备从不同的位置获取被测物体的两幅图像,通过计算图像对应点间的位置偏差,来获取物体几何信息的方法。
通常情况下,双目视觉的优点在于定位精度高,但是随之而来的是对硬件更高的要求和更长的处理计算时间,双目视觉中的立体匹配问题也一直是研究的难点之一。与之相比,单目视觉只需要一台相机即可,同时处理速度也比双目视觉要快。
现有的单目视觉在工业领域的应用,有两种常用的应用场合,一种是针对定位目标和相机相对位置较为固定的情况,这种方案精度要求较高,拍照环境固定,背景、光照变化较小;另一种是针对移动机器人的单目视觉应用,这种方案精度要求低,拍照环境不固定,背景、光照变化大。
第一种单目视觉定位方案,能够达到高精度(um级别),但是对于环境要求高,一方面相机和标志单元相对位置固定,另一方面拍照环境为工业环境,背景光照情况固定。这是该方案保证高精度的重要原因。
第二种单目视觉方案定位精度低,主要是因为相机和目标物体的相对位置变化大,同时待测量目标物体轮廓不确定,导致计算结果变化范围大。
然而对于智能变电站,自动检修系统需要成本较低、能够高精度定位金具绝缘子的定位系统。
发明内容
鉴于现有技术中存在的问题,本发明的目的是提供一种金具绝缘子定位系统,通过在金具绝缘子上设置形状相同大小不同的两个标记,使用单目视觉单元实现金具绝缘子定位,仅需要单目视觉单元,就能够实现高精度定位。
本发明提供的金具绝缘子定位系统,处于典型的单目视觉和双目视觉定位方案之间,既要实现高精度,又要应对大变化范围的位姿不确定、环境不确定。
采用的方案是设计了具有已知几何关系的标志单元,标志单元具有已知高精度定位的轮廓特征,结合机器人坐标系标定、相机标定、手眼关系标定,有效规避了单目视觉中目标物体不确定引起的定位误差,获取到较高精度的结果。
本发明提供一种金具绝缘子定位系统,用于检修执行器,金具绝缘子定位系统包括单目视觉单元与识别定位单元,单目视觉单元用于获取包含标志单元的金具绝缘子的图像,识别定位单元用于根据图像通过标志单元获得金具绝缘子在检修执行器的坐标系中的位姿,标志单元包括设定相对位置关系的多个标记。
进一步地,标志单元包括形状相同大小不同的两个标记。
进一步地,两个标记间隔设置。
进一步地,标记为金属色。
进一步地,标记为圆形。
本发明还提供一种金具绝缘子定位方法,金具绝缘子上设置有标志单元,所述标志单元包括间隔设置的形状相同大小不同的两个标记,金具绝缘子定位方法包括以下步骤:
(1)使用标定好的单目视觉单元获取包含标志单元的金具绝缘子的图像;
(2)根据图像,识别两个标记,获得两个标记的中心点在单目视觉单元坐标系中的坐标;
(3)根据单目视觉单元与检修执行器坐标系之间的关系,进行坐标变换,获得两个标记的中心点在检修执行器坐标系中的坐标;
(4)根据两个标记的中心点坐标,得到并输出标志单元在检修执行器坐标系中的位姿。
进一步地,步骤(2)中根据图像,识别两个标记包括以下步骤:
(21)从图像中去除背景,获取感兴趣区域;
(22)两个标记为第一标记与第二标记,从感兴趣区域中选取高灰度值的点,获取包含第一标记的区域与第二标记的区域;
(23)根据包含第一标记的区域与包含第二标记的区域,获取第一标记与第二标记的轮廓线。
进一步地,步骤(2)中获得标志单元在单目视觉单元坐标系中的坐标包括以下步骤:
(24)根据步骤(23)中获取的轮廓线,获得第一标记的中心点与第二标记的中心点在单目视觉单元坐标系中的坐标。
进一步地,步骤(4)中根据两个标记的中心点坐标,得到并输出标志单元在检修执行器坐标系中的位姿包括以下步骤:
(25)两个标记为第一标记与第二标记,第一标记的中心点为金具绝缘子坐标系的原点;
(26)第一标记的中心点与第二标记点的中心点的连线为X轴;
(27)通过右手定则确定Y轴;
(28)第一标记点的法线方向为Z轴。
本发明还提供一种自动检修系统,包括控制器、检修执行器以及设置于检修执行器端部的上述金具绝缘子定位系统,控制器根据金具绝缘子定位系统获得的金具绝缘子在检修执行器的坐标系中的位姿,控制检修执行器对金具绝缘子进行检修操作。
与现有技术相比,本发明提供的金具绝缘子定位系统、方法以及自动检修系统,具有以下有益效果:通过在金具绝缘子上设置形状相同大小不同的两个标记,使用单目视觉单元实现金具绝缘子定位,仅需要单目视觉单元,就能够实现高精度定位。
附图说明
图1为包含标志单元的金具绝缘子的示意图;
图2为本发明的一个实施例的金具绝缘子定位系统的结构示意图;
图3为金具绝缘子定位方法的流程图;
图4为坐标转换示意图。
具体实施方式
本实施例为一种自动检修系统,包括控制器、检修执行器以及设置于检修执行器端部的金具绝缘子定位系统,控制器根据金具绝缘子定位系统获得的金具绝缘子在检修执行器的坐标系中的位姿,控制检修执行器对金具绝缘子进行检修操作。
检修执行器为操作臂或机器人。
金具绝缘子定位系统,用于检修执行器,金具绝缘子定位系统包括单目视觉单元与识别定位单元,单目视觉单元用于获取包含标志单元的金具绝缘子的图像,识别定位单元用于根据图像通过标志单元获得金具绝缘子在检修执行器的坐标系中的位姿。
图1示出了包含标志单元的金具绝缘子,标志单元包括形状相同大小不同的两个标记,标记为金属色,与金具绝缘子的黑色表面具有较大的反差,便于识别标记。
本实施例中,如图2所示,标记为圆形,由于圆形具有各向同性,更有利于规避误差,也就是标志单元具有已知高精度定位的轮廓特征。
两个标记为第一标记与第二标记,第一标记的半径大于第二标记的半径。
当然也可以采用其他形状的标记,例如矩形,只要预先已知标记几何尺寸即可。还可以采用不同数量的标记,例如三个设定相对位置关系的标记。
如图3所示,金具绝缘子定位方法包括以下步骤:
(1)使用标定好的单目视觉单元获取包含标志单元的金具绝缘子的图像,标志单元包括形状相同大小不同的两个标记;
(2)根据图像,识别两个标记,获得两个标记的中心点在单目视觉单元坐标系中的坐标;
(3)根据单目视觉单元与检修执行器坐标系之间的关系,进行坐标变换(如图4所示),获得两个标记的中心点在检修执行器坐标系中的坐标;
(4)根据两个标记的中心点坐标,得到并输出标志单元在检修执行器坐标系中的位姿。
对单目视觉单元进行单目视觉单元标定,获取单目视觉单元内参参数;进行手眼关系标定,即单目视觉单元和机器人工具坐标系之间的关系。
单目视觉单元,即相机参数包括相机的内外参数为(Focus,Kappa,Sx,Sy,Cx,Cy,ImageWidth,ImageHeight);其中Focus为焦距,Kappa为相机径向畸变,Sx为单元像素宽度,Sy为单元像素高度,Cx为图像中心X,Cy为图像中心Y,ImageWidth为图像宽度,ImageHeight为图像高度。
手眼关系参数,即机器人工具坐标系在相机坐标系中的位姿为(X,Y,Z,A,B,C),其中X为X轴向距离,Y为Y轴向距离,Z为Z轴向距离,A为绕Z轴旋转角度,B为绕Y轴旋转角度,C为绕X轴旋转角度,例如(-0.0894609036730047,0.00027579823989016,0.188439483774541,0.560955463516326,0.70207918447375,181.104759537347)。
步骤(2)中根据图像,识别两个标记包括以下步骤:
(21)从图像中去除背景,获取感兴趣区域;
(22)两个标记为第一标记与第二标记,从感兴趣区域中选取高灰度值的点,获取包含第一标记的区域与第二标记的区域;
(23)根据包含第一标记的区域与包含第二标记的区域,获取第一标记与第二标记的轮廓线。
步骤(2)中获得标志单元在单目视觉单元坐标系中的坐标包括以下步骤:
(24)根据步骤(23)中获取的轮廓线,获得第一标记的中心点与第二标记的中心点在单目视觉单元坐标系中的坐标。
具体地,步骤(21)从图像中去除背景,获取感兴趣区域包括以下步骤:
·将图像转化为灰度图;
·图像预处理,对图像使用直方图均衡化;
·阈值分割,选取出图像中的深色背景;
·对阈值分割结果进行联通区域处理;
·使用区域融合合并所有联通区域;
·区域填充,填充合并结果;
·使用原图和区域填充结果做差值,从原始图像中去除背景获取感兴趣区域。
步骤(22)从感兴趣区域中选取高灰度值的点,获取包含第一标记的区域与第二标记的区域包括以下步骤:
·对感兴趣区域进行阈值分割,选取出感兴趣区域高灰度值的点;
·对高灰度值的点进行联通区域处理,并填充联通区域;
·从填充后的联通区域选取出圆形区域;
·进行腐蚀后膨胀,去除噪声干扰。
步骤(23)根据包含第一标记的区域与包含第二标记的区域,获取第一标记与第二标记的轮廓线包括以下步骤:
·对圆形区域进行轮廓提取;
·对提取的轮廓进行腐蚀、膨胀与合并,选取出只包含标记轮廓的部分区域;
·取只包含标记轮廓的区域与原图的差值;
·提取亚像素轮廓,并选取其中闭合的轮廓曲线;
·根据两个标记间固定的几何关系选取出标记的轮廓线;
·对两个标记的轮廓线,分别进行椭圆拟合。
椭圆拟合示例数据如下:hv_Row_Big为椭圆中心所在行,hv_Column_Big为椭圆中心所在列,hv_Phi_Big为椭圆主轴方向,hv_Radius1_Big为长轴,hv_Radius2_Big为短轴,hv_StartPhi_Big为起点切线角度,hv_EndPhi_Big为结束点切线角度,hv_PointOrder_Big为沿着椭圆边界的点顺序(正反)。
步骤(4)中两个标记的中心点坐标,得到并输出标志单元在检修执行器坐标系中的位姿包括以下步骤:
(25)两个标记为第一标记与第二标记,第一标记的中心点为金具绝缘子坐标系的原点;
(26)第一标记的中心点与第二标记点的中心点的连线为X轴;
(27)通过右手定则确定Y轴;
(28)第一标记点的法线方向为Z轴。
输出位姿示例数据为(X,Y,Z,A,B,C),其中X为X轴向距离,Y为Y轴向距离,Z为Z轴向距离,A为绕Z轴旋转角度,B为绕Y轴旋转角度,C为绕X轴旋转角度,例如(-0.0894609036730047,0.00027579823989016,0.188439483774541,0.560955463516326,0.70207918447375,181.104759537347)。
以上详细描述了本发明的较佳具体实施例。应当理解,本领域的普通技术人员无需创造性劳动就可以根据本发明的构思做出诸多修改和变化。因此,凡本技术领域中技术人员依本发明的构思在现有技术的基础上通过逻辑分析、推理或者有限的实验可以得到的技术方案,皆应在由权利要求书所确定的保护范围内。

Claims (1)

1.一种金具绝缘子定位方法,其特征在于,金具绝缘子上设置有标志单元,所述标志单元包括间隔设置的形状相同大小不同的两个标记,所述金具绝缘子定位方法包括以下步骤:
(1)使用标定好的单目视觉单元获取包含标志单元的金具绝缘子的图像;
(2)根据所述图像,识别两个标记,获得两个标记的中心点在单目视觉单元坐标系中的坐标;
(3)根据单目视觉单元与检修执行器坐标系之间的关系,进行坐标变换,获得所述两个标记的中心点在检修执行器坐标系中的坐标;
(4)根据两个标记的中心点坐标,得到并输出标志单元在检修执行器坐标系中的位姿;
所述步骤(2)中根据所述图像,识别两个标记包括以下步骤:
(21)从所述图像中去除背景,获取感兴趣区域;
(22)两个标记为第一标记与第二标记,从感兴趣区域中选取高灰度值的点,获取包含第一标记的区域与第二标记的区域;
(23)根据所述包含第一标记的区域与所述包含第二标记的区域,获取所述第一标记与所述第二标记的轮廓线;
所述步骤(2)中获得所述标志单元在单目视觉单元坐标系中的坐标包括以下步骤:
(24)根据步骤(23)中获取的轮廓线,获得所述第一标记的中心点与所述第二标记的中心点在单目视觉单元坐标系中的坐标;
所述步骤(4)中根据两个标记的中心点坐标,得到并输出标志单元在检修执行器坐标系中的位姿包括以下步骤:
(41)两个标记为第一标记与第二标记,第一标记的中心点为金具绝缘子坐标系的原点;
(42)第一标记的中心点与第二标记点的中心点的连线为X轴;
(43)通过右手定则确定Y轴;
(44)第一标记点的法线方向为Z轴。
CN201610744240.1A 2016-08-26 2016-08-26 金具绝缘子定位系统、方法以及自动检修系统 Expired - Fee Related CN106355618B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610744240.1A CN106355618B (zh) 2016-08-26 2016-08-26 金具绝缘子定位系统、方法以及自动检修系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610744240.1A CN106355618B (zh) 2016-08-26 2016-08-26 金具绝缘子定位系统、方法以及自动检修系统

Publications (2)

Publication Number Publication Date
CN106355618A CN106355618A (zh) 2017-01-25
CN106355618B true CN106355618B (zh) 2018-12-25

Family

ID=57855549

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610744240.1A Expired - Fee Related CN106355618B (zh) 2016-08-26 2016-08-26 金具绝缘子定位系统、方法以及自动检修系统

Country Status (1)

Country Link
CN (1) CN106355618B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102778684A (zh) * 2012-07-16 2012-11-14 西安电子科技大学 基于fpga的嵌入式单目被动目标跟踪定位系统及方法
CN103868524A (zh) * 2013-12-23 2014-06-18 西安新拓三维光测科技有限公司 一种基于散斑图案的单目测量系统标定方法及装置
CN104596502A (zh) * 2015-01-23 2015-05-06 浙江大学 一种基于cad模型与单目视觉的物体位姿测量方法
CN105184829A (zh) * 2015-08-28 2015-12-23 华中科技大学 一种紧密空间目标检测和高精度质心定位方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102778684A (zh) * 2012-07-16 2012-11-14 西安电子科技大学 基于fpga的嵌入式单目被动目标跟踪定位系统及方法
CN103868524A (zh) * 2013-12-23 2014-06-18 西安新拓三维光测科技有限公司 一种基于散斑图案的单目测量系统标定方法及装置
CN104596502A (zh) * 2015-01-23 2015-05-06 浙江大学 一种基于cad模型与单目视觉的物体位姿测量方法
CN105184829A (zh) * 2015-08-28 2015-12-23 华中科技大学 一种紧密空间目标检测和高精度质心定位方法

Also Published As

Publication number Publication date
CN106355618A (zh) 2017-01-25

Similar Documents

Publication Publication Date Title
CN110850723B (zh) 一种基于变电站巡检机器人系统的故障诊断及定位方法
CN112767391A (zh) 融合三维点云和二维图像的电网线路部件缺陷定位方法
CN109300161A (zh) 一种基于双目视觉的定位方法及装置
CN109684709B (zh) 一种航空发动机叶片修复的自适应定位方法
CN114792319B (zh) 一种基于变电图像的变电站巡检方法及系统
EP3667903B1 (en) Photovoltaic panel recognition method, ground station, control apparatus, and unmanned aerial vehicle
CN111563961B (zh) 一种变电站的三维建模方法和相关装置
CN110617772A (zh) 一种非接触式线径测量装置及方法
CN109407115A (zh) 一种基于激光雷达的路面提取系统及其提取方法
Zhang et al. Slat-calib: Extrinsic calibration between a sparse 3d lidar and a limited-fov low-resolution thermal camera
CN109215075B (zh) 工业机器人物料抓取中工件的定位识别系统及方法
Nassu et al. A computer vision system for monitoring disconnect switches in distribution substations
CN110370287B (zh) 基于视觉引导的地铁列检机器人路径规划系统及方法
CN106355618B (zh) 金具绝缘子定位系统、方法以及自动检修系统
CN113269744A (zh) 一种应用于输电线路设备缺陷的红外智能识别方法及系统
Fang et al. A framework of power pylon detection for UAV-based power line inspection
Wang et al. Localization of substation fittings based on a stereo vision method
CN115761465A (zh) 一种用于水下环境电力作业的辅助方法、系统及装置
CN109244935A (zh) 一种基于vr视觉的高空机器人带电检修系统
CN108269284A (zh) 一种基于双目视觉的插座定位方法
Li et al. Intelligent control method of live working robot based on cloud and edge computing terminal
CN112630639A (zh) 一种高压开关柜手车触头啮合状态在线检测系统及方法
CN110992261A (zh) 一种输电线路无人机影像快速拼接的方法
Wang et al. Autonomous Collection System of Substation Patrol Robot
Tang et al. A dulcimer keys positioning method based on improved Roberts operator

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20181225

Termination date: 20210826

CF01 Termination of patent right due to non-payment of annual fee