CN110580717A - 一种针对电力杆塔的无人机自主巡检航线生成方法 - Google Patents

一种针对电力杆塔的无人机自主巡检航线生成方法 Download PDF

Info

Publication number
CN110580717A
CN110580717A CN201910753266.6A CN201910753266A CN110580717A CN 110580717 A CN110580717 A CN 110580717A CN 201910753266 A CN201910753266 A CN 201910753266A CN 110580717 A CN110580717 A CN 110580717A
Authority
CN
China
Prior art keywords
inspection
camera
point
coordinates
points
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910753266.6A
Other languages
English (en)
Other versions
CN110580717B (zh
Inventor
毛翔
张志鹏
陈龙
潘佳捷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chengdu Uav Intelligent Science & Technology Co ltd
Wuhan NARI Ltd
Original Assignee
Chengdu Best Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chengdu Best Intelligent Technology Co Ltd filed Critical Chengdu Best Intelligent Technology Co Ltd
Priority to CN201910753266.6A priority Critical patent/CN110580717B/zh
Publication of CN110580717A publication Critical patent/CN110580717A/zh
Application granted granted Critical
Publication of CN110580717B publication Critical patent/CN110580717B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20Instruments for performing navigational calculations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/04Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
    • G06Q10/047Optimisation of routes or paths, e.g. travelling salesman problem
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30232Surveillance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30244Camera pose

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Automation & Control Theory (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Economics (AREA)
  • Strategic Management (AREA)
  • Game Theory and Decision Science (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Development Economics (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种针对电力杆塔的无人机自主巡检航线生成方法,包括以下步骤:S1.判断电力杆塔的几何结构是否已知:若是,获取电力杆塔的部分巡检点三维坐标然后进行优化,并结合电力杆塔的几何结构,得到其它巡检点坐标;若否,获取电力杆塔所有巡检点的三维坐标;S2.根据位置约束条件,确定与电力杆塔巡检点数目相同且一一对应的多个巡航点;S3.在线生成包括多个巡航点的自主巡检航线。本发明有助于减少无人机巡检航线生成的计算量,节省了时间成本,提高了巡检航线的精确度,有利于提高无人机自主巡检航线生成的效率。

Description

一种针对电力杆塔的无人机自主巡检航线生成方法
技术领域
本发明涉及电力杆塔巡检,特别是涉及一种针对电力杆塔的无人机自主巡检航线生成方法。
背景技术
目前,我国的高压输电线路总长度已超过50万公里。这些电力传输线路常年暴露野外,人迹罕至,有些地方的自然环境异常复杂,暴露在这样环境中的输电线路不可避免地会遭受到来自各方面因素的影响,比如暴风雨、冰雪天气和雷击等恶劣的气候,鸟兽在线缆上的停歇筑巢对线缆造成的短路,以及来自周围人类的活动对线缆造成的破坏,为了保证输电线路的安全运行,各地区的电力公司都会制定相应的章程来保证对输电线路的定期巡视维护。传统的人工巡检作业费时费力,效率非常低,在巡检过程中存在各种安全隐患等问题,随着近年来无人机技术的不断发展,各地市的电力公司已经大量采用无人机对输电线路进行巡检,包括通道巡检,精细化巡检,树障巡检等方式。
精细化巡检方式主要是对电力杆塔进行巡检,目前利用无人机对电力杆塔的巡检方式主要有手动和自主巡检。手动巡检是以人工操纵无人机巡检为主,需要大量的人力去拍摄电力杆塔的主要结构进行缺陷巡检,但受困于恶劣的地形地貌和气候环境影响,人工巡检的效率低且存在极大的安全隐患。目前自主巡检方式一般是采用机器学习的方法,这种方法首先需要手动控制无人机进行巡检学习,记录需要巡检的位置,然后根据这些位置,利用一些航线规划算法生成巡检航线,以此进行自主巡检。但是目前这种自主巡检依然存在以下问题:
由于生成巡检的线路需要精度很高的巡检点位置,而目前的无人机的GPS定位精度较低,导致在巡检后,拍摄的部位、顺序均会有较大差异,导致后面的缺陷分析难度加大。
发明内容
本发明的目的在于克服现有技术的不足,提供一种针对电力杆塔的无人机自主巡检航线生成方法,降低了巡检航线生成的工作量,提高了巡检航线的精确度。
本发明的目的是通过以下技术方案来实现的:一种针对电力杆塔的无人机自主巡检航线生成方法,包括以下步骤:
S1.判断电力杆塔的几何结构是否已知:
若是,获取电力杆塔的部分巡检点三维坐标,并结合电力杆塔的几何结构,得到其它巡检点坐标然后进行优化;
若否,获取电力杆塔所有巡检点的三维坐标;
S2.根据位置约束条件,确定与电力杆塔巡检点数目相同且一一对应的多个巡航点,所述的巡检点指的是杆塔上需要检查缺陷的位置点,巡航点指的是无人机拍照时的位置点;
S3.在线生成包括多个巡航点的自主巡检航线。
所述步骤S1中,若已知电力杆塔的几何结构,获取电力杆塔的部分巡检点三维坐标然后进行优化,并结合电力杆塔的几何结构,得到其它巡检点坐标的具体步骤包括:
A1、获取对电力杆塔上若干个巡检点拍摄的多张图像和对应的数据;
A2、处理图像和对应的数据计算巡检点的三维坐标;
A3、由巡检点之间的结构信息引入额外的优化巡检点坐标方法;
A4、利用杆塔几何结构信息和几何测量方法计算其它多个巡检点坐标。
其中,所述步骤A1包括以下两种信息获取方式:
第一、选定电力杆塔上的若干个巡检点,对选定的巡检点进行整体拍照,每张拍摄的图像中都要含有所有选定的巡检点,拍摄的图像在两张以上;将拍摄每一张图像时对应的相机云台的姿态和相机的三维坐标作为各张图像对应的数据;拍摄时选定的各巡检点需靠近图像的中间位置,且各张图像之间的拍摄角度不同;
第二、选定电力杆塔上的若干个巡检点,分别对每一个巡检点拍摄两张以上图像;将拍摄每一张图像时对应的相机云台的姿态和相机的三维坐标作为各张图像对应的数据;对于每一个巡检点拍摄的照片中,巡检点需保持在图像的中间位置,且各张图像之间的拍摄角度不同。
其中,所述步骤A2包括:对于拍摄的图像,获取其中巡检点在图像中的像素坐标位置和对应云台的角度、相机的三维坐标:
获取巡检点在图像中的像素坐标:
方式一、在拍摄完图像之后,从存储卡中导出图像进行标注获取像素坐标;
方式二、在实时回传的视频图像上进行标注获取像素坐标;
计算选定的各个巡检点的三维坐标:对于任一巡检点,利用两张以上不同角度拍摄的巡检点分别获取的像素坐标以及拍摄图像对应的云台姿态、相机的经纬度、高度,通过相机成像原理以及最小二乘优化算法得到巡检点的三维坐标,具体地:
基于相机成像原理,利用云台姿态、拍摄时相机的三维坐标以及相机内参信息计算出巡检点的理论三维坐标;具体计算步骤如下:
计算大地坐标系转换到相机坐标系的旋转矩阵Rcw
其中下标cw代表大地坐标系转换到相机坐标系的简称,Rcwx(φ)、Rcwy(θ)、Rcwz(ψ)代表从相机坐标系到大地坐标系需要绕着x、y、z轴旋转的矩阵,φ、θ、分别为相机云台姿态的滚转角、俯仰角和偏航角,根据相机的初始朝向(一般相机的z轴指向正前方, x轴向右,y轴向下),Rcw还需左乘一个初始旋转Rcw0,此时:
Rcw=Rcw0·(Rcwx(φ)·Rcwy(θ)·Rcwz(ψ)),式中
由相机采集的图像获得巡检点的像素坐标Puv(u,v),经过相机标定得到相机的内参矩阵:
其中fx是由αf合并、fy是由βf合并,f为相机焦距,α,β是像素坐标在u、v坐标轴上缩放倍数,[cx,cy]T是原点的平移量;
则:
Pc(Xc,Yc,Zc)为相机坐标系下巡检点的归一化坐标,由上述等式求得:
利用求得的Rcw和Pc以及相机平移坐标(相机拍摄时的坐标)t(X0,Y0,Z0),求出巡检点在大地坐标系下的理论三维坐标Pw(Xw,Yw,Zw):
采用最小二乘优化算法得到巡检点的实际三维坐标,具体步骤如下:
利用两张以上对某个巡检点不同角度拍摄的图像分别计算得到的理论三维坐标;
利用每一张拍摄图像计算得到的理论三维坐标与该拍摄图像对应的相机三维坐标,计算出经过拍摄点和理论巡检点直线的方向向量;
由多张图像就计算出多条直线的方向向量;
利用实际巡检坐标点到多条直线距离最短建立数学模型,,最终利用最小二乘优化算法迭代出巡检点的实际位置,也就是多条直线的交叉处三维坐标,由此计算出任一巡检点实际坐标,重复上述步骤获得所有选定巡检点的实际三维坐标。
其中,所述步骤A3包括:在几何测量方法计算出所有巡检点坐标后,利用所有巡检点之间的结构信息以及相互之间的结构信息来优化坐标,即利用已知巡检点之间的结构信息,建立带约束的最小二乘优化算法问题,由此对所选的若干巡检点进行坐标优化,使得优化后的若干巡检点之间的长度等于实际长度,从而优化出更准确三维的坐标;上述带约束的最小二乘优化算法的目标函数如下:
式中,di,dj表示杆塔上两个实际巡检点坐标到各自经过拍摄点和理论巡检点直线的方向向量的距离,w·(L-|L′|)为额外引入的约束项,其中w为约束系数,L为在已知杆塔结构下的两个巡检点之间的实际距离,|L′|表示计算出的两个巡检点坐标之间的模长;该目标函数R的迭代结果会受w·(L-|L′|)约束项的影响,调整约束系数的大小,使得该目标函数迭代出的两巡检点的坐标之间的长度接近实际长度L,且跟实际坐标的差值会变小,最终达到对巡检点坐标的优化;对于选定的其它巡检点坐标同样使用该目标函数,从而完成对巡检点坐标进行优化的目标。
其中,利用上述计算出的杆塔中若干个巡检点坐标,在杆塔的三维结构中通过测量的方法,计算出其它多个巡检点的三维坐标。
所述步骤S1中,若未知电力杆塔几何结构,获取电力杆塔所有巡检点的三维坐标的具体步骤包括:
B1、获取对电力杆塔上所有巡检点拍摄的多张图像和对应的数据;
B2、处理图像和对应的数据计算所有巡检点的三维坐标;
所述步骤B1具体包括如下两种方式:
第一、确定电力杆塔上的所有巡检点,对巡检点进行整体拍照,每张拍摄的图像中都要含有所有的巡检点,拍摄的图像在两张以上;将拍摄每一张图像时对应的相机云台的姿态和相机的三维坐标作为各张图像对应的数据;拍摄时各巡检点需靠近图像的中间位置,且各张图像之间的拍摄角度不同;
第二、确定电力杆塔上的所有巡检点,分别对每一个巡检点拍摄两张以上图像;将拍摄每一张图像时对应的相机云台的姿态和相机的三维坐标作为各张图像对应的数据;对于每一个巡检点拍摄的照片中,巡检点需保持在图像的中间位置,且各张图像之间的拍摄角度不同。
所述步骤B2包括对于拍摄的图像,获取其中巡检点在图像中的像素坐标位置和对应云台的角度、相机的三维坐标:
获取巡检点在图像中的像素坐标:
方式一、在拍摄完图像之后,从存储卡中导出图像进行标注获取像素坐标;
方式二、在实时回传的视频图像上进行标注获取像素坐标;
计算所有巡检点的三维坐标:对于任一巡检点,利用两张以上不同角度拍摄的巡检点分别获取的像素坐标以及拍摄图像对应的云台姿态、相机的经纬度、高度,通过相机成像原理以及最小二乘优化算法得到巡检点的三维坐标,具体地:
基于相机成像原理,利用云台姿态、拍摄时相机的三维坐标以及相机内参信息计算出巡检点的理论三维坐标;具体计算步骤如下:
计算大地坐标系转换到相机坐标系的旋转矩阵Rcw
其中下标cw代表大地坐标系转换到相机坐标系的简称,Rcwx(φ)、Rcwy(θ)、Rcwz(ψ)代表从相机坐标系到大地坐标系需要绕着x、y、z轴旋转的矩阵,φ、θ、分别为相机云台姿态的滚转角、俯仰角和偏航角;根据相机的初始朝向,Rcw还需左乘一个初始旋转Rcw0,此时Rcw=Rcw0·(Rcwx(φ)·Rcwy(θ)·Rcwz(ψ));式中
由相机采集的图像获得巡检点的像素坐标Puv(u,v),经过相机标定得到相机的内参矩阵:
其中fx是由αf合并、fy是由βf合并,f为相机焦距,α,β是像素坐标在u、v坐标轴上缩放倍数,[cx,cy]T是原点的平移量;
则:
Pc(Xc,Yc,Zc)为相机坐标系下巡检点的归一化坐标,由上述等式求得:
利用求得的Rcw和Pc以及相机平移坐标t(X0,Y0,Z0),求出巡检点在大地坐标系下的理论三维坐标Pw(Xw,Yw,Zw):
采用最小二乘优化算法得到巡检点的实际三维坐标,具体步骤如下:
利用两张以上对某个巡检点不同角度拍摄的图像分别计算得到的理论三维坐标;
利用每一张拍摄图像计算得到的理论三维坐标与该拍摄图像对应的相机三维坐标,计算出经过拍摄点和理论巡检点直线的方向向量;
由多张图像就计算出多条直线的方向向量;
利用实际巡检坐标点到多条直线距离最短建立数学模型,最终利用最小二乘优化算法迭代出巡检点的实际位置,也就是多条直线的交叉处三维坐标,由此计算出任一巡检点实际坐标,利用上述方法即可算出所有巡检点的实际三维坐标。
所述步骤S2中,位置约束条件表示巡航点和巡检点之间的位置关系,该约束条件是变化的,视杆塔结构和实际情况进行预先设置而确定,每对巡航点和巡检点之间的位置约束条件都是相同的,便于快速确定对应的巡航点,实现在线生成自主巡检航线。
本发明的有益效果是:本发明有助于减少无人机巡检航线生成的计算量,节省了时间成本,提高了巡检航线的精确度,有利于提高无人机自主巡检航线生成的效率;在完成了自主巡检航迹生成,后续若还需要改变或增加巡检点的位置,该方法可以实时的计算出这些巡检点坐标,而不增加额外的计算量,并实时生成自主巡检航线,极大的增加了后续功能的拓展性和简易性;按照本发明生成的航线完成巡检任务后,所得到的电力杆塔主要部位拍摄的图像是按照一定顺序规则排列的,省去了后续整理图像的工序,节约了时间和人力物力,有效提升了巡检任务的效率。
附图说明
图1为本发明的方法流程图;
图2为巡检点的实际坐标计算原理图;
图3为实施例中电力杆塔的几何结构模型示意图;
图4为实施例中每个巡检点和其对应的巡航点位置之间的约束示意图。
具体实施方式
下面结合附图进一步详细描述本发明的技术方案,但本发明的保护范围不局限于以下所述。
如图1所示,一种针对电力杆塔的无人机自主巡检航线生成方法,包括以下步骤:
S1.判断电力杆塔的几何结构是否已知:
若是,获取电力杆塔的部分巡检点三维坐标,并结合电力杆塔的几何结构,得到其它巡检点坐标然后进行优化;
若否,获取电力杆塔所有巡检点的三维坐标;
S2.根据位置约束条件,确定与电力杆塔巡检点数目相同且一一对应的多个巡航点,所述的巡检点指的是杆塔上需要检查缺陷的位置点,巡航点指的是无人机拍照时的位置点;
S3.在线生成包括多个巡航点的自主巡检航线。
所述步骤S1中,若已知电力杆塔几何结构,获取电力杆塔的部分巡检点三维坐标然后进行优化,并结合电力杆塔的几何结构,得到其它巡检点坐标的具体步骤包括:
A1、获取对电力杆塔上若干个巡检点拍摄的多张图像和对应的数据;
A2、处理图像和对应的数据计算巡检点的三维坐标;
A3、由巡检点之间的结构信息引入额外的优化巡检点坐标方法;
A4、利用杆塔几何结构信息和几何测量方法计算其它多个巡检点坐标。
其中,所述步骤A1包括以下两种信息获取方式:
第一、选定电力杆塔上的若干个巡检点,对选定的巡检点进行整体拍照,每张拍摄的图像中都要含有所有选定的巡检点,拍摄的图像在两张以上;将拍摄每一张图像时对应的相机云台的姿态和相机的三维坐标作为各张图像对应的数据;拍摄时选定的各巡检点需靠近图像的中间位置,且各张图像之间的拍摄角度不同;
第二、选定电力杆塔上的若干个巡检点,分别对每一个巡检点拍摄两张以上图像;将拍摄每一张图像时对应的相机云台的姿态和相机的三维坐标作为各张图像对应的数据;对于每一个巡检点拍摄的照片中,巡检点需保持在图像的中间位置,且各张图像之间的拍摄角度不同。
其中,所述步骤A2包括:对于拍摄的图像,获取其中巡检点在图像中的像素坐标位置和对应云台的角度、相机的三维坐标:
获取巡检点在图像中的像素坐标:
方式一、在拍摄完图像之后,从存储卡中导出图像进行标注获取像素坐标;
方式二、在实时回传的视频图像上进行标注获取像素坐标;
计算选定的各个巡检点的三维坐标:对于任一巡检点,利用两张以上不同角度拍摄的巡检点分别获取的像素坐标以及拍摄图像对应的云台姿态、相机的经纬度、高度,通过相机成像原理以及最小二乘优化算法得到巡检点的实际三维坐标,具体地:
基于相机成像原理,利用云台姿态、拍摄时相机的三维坐标以及相机内参信息计算出巡检点的理论三维坐标;具体计算步骤如下:
计算大地坐标系转换到相机坐标系的旋转矩阵Rcw
其中下标cw代表大地坐标系转换到相机坐标系的简称,Rcwx(φ)、Rcwy(θ)、Rcwz(ψ)代表从相机坐标系到大地坐标系需要绕着x、y、z轴旋转的矩阵,φ、θ、分别为相机云台姿态的滚转角、俯仰角和偏航角,根据相机的初始朝向(一般相机的z轴指向正前方, x轴向右,y轴向下),Rcw还需左乘一个初始旋转Rcw0,此时:
Rcw=Rcw0·(Rcwx(φ)·Rcwy(θ)·Rcwz(ψ)),式中
由相机采集的图像获得巡检点的像素坐标Puv(u,v),经过相机标定得到相机的内参矩阵:
其中fx是由αf合并、fy是由βf合并,f为相机焦距,α,β是像素坐标在u、v坐标轴上缩放倍数,[cx,cy]T是原点的平移量;
则:
Pc(Xc,Yc,Zc)为相机坐标系下巡检点的归一化坐标,由上述等式求得:
利用求得的Rcw和Pc以及相机平移坐标(相机拍摄时的坐标)t(X0,Y0,Z0),求出巡检点在大地坐标系下的理论三维坐标Pw(Xw,Yw,Zw):
采用最小二乘优化算法得到巡检点的三维坐标,具体步骤如下:
利用两张以上对某个巡检点不同角度拍摄的图像分别计算得到的理论三维坐标;
利用每一张拍摄图像计算得到的理论三维坐标与该拍摄图像对应的相机三维坐标,计算出经过拍摄点和理论巡检点直线的方向向量;
由多张图像就计算出多条直线的方向向量;
利用实际巡检坐标点到多条直线距离最短建立数学模型,最终利用最小二乘优化算法迭代出巡检点的实际位置,也就是多条直线的交叉处三维坐标,由此计算出任一巡检点实际坐标,重复上述步骤获得所有选定巡检点的实际三维坐标。
其中,所述步骤A3包括:在几何测量方法计算出所有巡检点坐标后,利用所有巡检点之间的结构信息以及相互之间的结构信息来优化坐标,即利用已知巡检点之间的结构信息,建立带约束的最小二乘优化算法问题,由此对所选的若干巡检点进行坐标优化,使得优化后的若干巡检点之间的长度等于实际长度,从而优化出更准确三维的坐标;上述带约束的最小二乘优化算法的目标函数如下:
式中,di,dj表示杆塔上两个实际巡检点坐标到各自经过拍摄点和理论巡检点直线的方向向量的距离,w·(L-|L′|)为额外引入的约束项,其中w为约束系数,L为在已知杆塔结构下的两个巡检点之间的实际距离,|L′|表示计算出的两个巡检点坐标之间的模长;该目标函数R的迭代结果会受w·(L-|L′|)约束项的影响,调整约束系数的大小,使得该目标函数迭代出的两巡检点的坐标之间的长度接近实际长度L,且跟实际坐标的差值会变小,最终达到对巡检点坐标的优化;对于选定的其它巡检点坐标同样使用该目标函数,从而完成对巡检点坐标进行优化的目标。
其中,利用上述计算出的杆塔中若干个巡检点坐标,在杆塔的三维结构中通过测量的方法,计算出其它多个巡检点的三维坐标。
所述步骤S1中,若未知电力杆塔几何结构,获取电力杆塔所有巡检点的三维坐标的具体步骤包括:
B1、获取对电力杆塔上所有巡检点拍摄的多张图像和对应的数据;
B2、处理图像和对应的数据计算所有巡检点的三维坐标;
所述步骤B1具体包括如下两种方式:
第一、确定电力杆塔上的所有巡检点,对巡检点进行整体拍照,每张拍摄的图像中都要含有所有的巡检点,拍摄的图像在两张以上;将拍摄每一张图像时对应的相机云台的姿态和相机的三维坐标作为各张图像对应的数据;拍摄时各巡检点需靠近图像的中间位置,且各张图像之间的拍摄角度不同;
第二、确定电力杆塔上的所有巡检点,分别对每一个巡检点拍摄两张以上图像;将拍摄每一张图像时对应的相机云台的姿态和相机的三维坐标作为各张图像对应的数据;对于每一个巡检点拍摄的照片中,巡检点需保持在图像的中间位置,且各张图像之间的拍摄角度不同。
所述步骤B2包括对于拍摄的图像,获取其中巡检点在图像中的像素坐标位置和对应云台的角度、相机的三维坐标:
获取巡检点在图像中的像素坐标:
方式一、在拍摄完图像之后,从存储卡中导出图像进行标注获取像素坐标;
方式二、在实时回传的视频图像上进行标注获取像素坐标;
计算所有巡检点的三维坐标:对于任一巡检点,利用两张以上不同角度拍摄的巡检点分别获取的像素坐标以及拍摄图像对应的云台姿态、相机的经纬度、高度,通过相机成像原理以及最小二乘优化算法得到巡检点的三维坐标,具体地:
基于相机成像原理,利用云台姿态、拍摄时相机的三维坐标以及相机内参信息计算出巡检点的理论三维坐标;具体计算步骤如下:
计算大地坐标系转换到相机坐标系的旋转矩阵Rcw
其中下标cw代表大地坐标系转换到相机坐标系的简称,Rcwx(φ)、Rcwy(θ)、Rcwz(ψ)代表从相机坐标系到大地坐标系需要绕着x、y、z轴旋转的矩阵,φ、θ、分别为相机云台姿态的滚转角、俯仰角和偏航角;根据相机的初始朝向(一般相机的z轴指向正前方, x轴向右,y轴向下),Rcw还需左乘一个初始旋转Rcw0,此时:
Rcw=Rcw0·(Rcwx(φ)·Rcwy(θ)·Rcwz(ψ));式中
由相机采集的图像获得巡检点的像素坐标Puv(u,v),经过相机标定得到相机的内参矩阵:
其中fx是由αf合并、fy是由βf合并,f为相机焦距,α,β是像素坐标在u、v坐标轴上缩放倍数,[cx,cy]T是原点的平移量;
则:
Pc(Xc,Yc,Zc)为相机坐标系下巡检点的归一化坐标,由上述等式求得:
利用求得的Rcw和Pc以及相机平移坐标t(X0,Y0,Z0),求出巡检点在大地坐标系下的理论三维坐标Pw(Xw,Yw,Zw):
采用最小二乘优化算法得到巡检点的实际三维坐标,具体步骤如下:
利用两张以上对某个巡检点不同角度拍摄的图像分别计算得到的理论三维坐标;
利用每一张拍摄图像计算得到的理论三维坐标与该拍摄图像对应的相机三维坐标,计算出经过拍摄点和理论巡检点直线的方向向量;
由多张图像就计算出多条直线的方向向量;
利用实际巡检坐标点到多条直线距离最短建立数学模型,模型中z轴未知量约除,最终利用最小二乘优化算法迭代出巡检点的实际位置,也就是多条直线的交叉处三维坐标,由此计算出任一巡检点实际坐标,利用上述方法即可算出所有巡检点的实际三维坐标。
具体的计算原理如图2所示,图像1、图像2、图像3…是相机对同一巡检点在不同角度拍摄的若干图像,直线1、直线2、直线3…的方向向量是由相机拍摄图像时相机的三维坐标和通过相机成像原理计算出的巡检点坐标计算出的。所得到的若干条直线之间的交叉点位置就是该巡检点实际坐标位置。图中省略号表示所拍摄图像有若干张,具体数量取决于对巡检点拍摄的张数(两张以上),直线数量与图像张数相同。
所述步骤S2中,位置约束条件表示巡航点和巡检点之间的位置关系,该约束条件是变化的,视杆塔结构和实际情况进行预先设置而确定,每对巡航点和巡检点之间的位置约束条件都是相同的,便于快速确定对应的巡航点,实现在线生成自主巡检航线。
在本申请的实施例中,图3是电力杆塔的几何结构模型,图中A、B、C、D、E、F、G、H、I为杆塔的其中9个巡检点,与之对应的巡航点分别为A′、B′、C′、D′、E′、F′、G′、H′。在已知电力杆塔结构的无人机自主巡检航线的生成方法中,额外的优化巡检点坐标方法表示利用其中若干或所有巡检点之间的实际长度为约束条件,调整巡检点的实际三维坐标,从而达到优化的目的。几何测量方法是利用已知的杆塔三维结构,也就是已知巡检点到其它巡检点的长度等信息,由计算出的任意若干个巡检点实际三维坐标去计算其它多个巡检点三维坐标。
图4是每个巡检点和其对应的巡航点位置之间的约束图示,其中巡检点和巡航点安全距离的长度为8m,以巡航点为圆心半径r=0.5m的球形为巡航点的范围,由于在实际巡检过程中,可能会产生定位不准和特定巡航位置会有障碍物遮挡等因素导致巡检拍摄失败,该约束条件设置了巡航点的球形范围,使得巡航点位置选择更自由,生成的自主巡检航线更可靠。电力杆塔中每对巡检点和巡航点之间的约束条件一致。
综上,本发明有助于减少无人机巡检航线生成的计算量,节省了时间成本,提高了巡检航线的精确度,有利于提高无人机自主巡检航线生成的效率;在完成了自主巡检航迹生成,后续若还需要改变或增加巡检点的位置,该方法可以实时的计算出这些巡检点坐标,而不增加额外的计算量,并实时生成自主巡检航线,极大的增加了后续功能的拓展性和简易性;按照本发明生成的航线完成巡检任务后,所得到的电力杆塔主要部位拍摄的图像是按照一定顺序规则排列的,省去了后续整理图像的工序,节约了时间和人力物力,有效提升了巡检任务的效率。
最后需要说明的是,以上所述是本发明的优选实施方式,应当理解本发明并非局限于所披露的形式,不应该看作是对其它实施例的排除,而可用于其它组合、修改和环境,并能够在本文所述构想范围内,通过上述教导或相关领域的技术或知识进行改动。而本领域人员所进行的改动和变化不脱离本发明的精神和范围,则都应在本发明所附权利要求的保护范围内。

Claims (8)

1.一种针对电力杆塔的无人机自主巡检航线生成方法,其特征在于:包括以下步骤:
S1.判断电力杆塔的几何结构是否已知:
若是,获取电力杆塔的部分巡检点三维坐标然后进行优化,并结合电力杆塔的几何结构,得到其它巡检点坐标;
若否,获取电力杆塔所有巡检点的三维坐标;
S2.根据位置约束条件,确定与电力杆塔巡检点数目相同且一一对应的多个巡航点;所述的巡检点指的是杆塔上需要检查缺陷的位置点,巡航点指的是无人机拍照时的位置点;
S3.在线生成包括多个巡航点的自主巡检航线。
2.根据权利要求1所述的一种针对电力杆塔的无人机自主巡检航线生成方法,其特征在于:所述步骤S1中,若已知电力杆塔几何结构,获取电力杆塔的部分巡检点三维坐标然后进行优化,并结合电力杆塔的几何结构,得到其它巡检点坐标的具体步骤包括:
A1、获取对电力杆塔上若干个巡检点拍摄的多张图像和对应的数据;
A2、处理图像和对应的数据计算巡检点的三维坐标;
A3、由巡检点之间的结构信息引入额外的优化巡检点坐标方法;
A4、利用杆塔几何结构信息和几何测量方法计算其它多个巡检点坐标。
3.根据权利要求2所述的一种针对电力杆塔的无人机自主巡检航线生成方法,其特征在于:所述步骤A1包括以下两种信息获取方式:
第一、选定电力杆塔上的若干个巡检点,对选定的巡检点进行整体拍照,每张拍摄的图像中都要含有所有选定的巡检点,拍摄的图像在两张以上;将拍摄每一张图像时对应的相机云台的姿态和相机的三维坐标作为各张图像对应的数据;拍摄时选定的各巡检点需靠近图像的中间位置,且各张图像之间的拍摄角度不同;
第二、选定电力杆塔上的若干个巡检点,分别对每一个巡检点拍摄两张以上图像;将拍摄每一张图像时对应的相机云台的姿态和相机的三维坐标作为各张图像对应的数据;对于每一个巡检点拍摄的照片中,巡检点需保持在图像的中间位置,且各张图像之间的拍摄角度不同。
4.根据权利要求2所述的一种针对电力杆塔的无人机自主巡检航线生成方法,其特征在于:所述步骤A2包括:对于拍摄的图像,获取其中巡检点在图像中的像素坐标位置和对应云台的角度、相机的三维坐标:
获取巡检点在图像中的像素坐标:
方式一、在拍摄完图像之后,从存储卡中导出图像进行标注获取像素坐标;
方式二、在实时回传的视频图像上进行标注获取像素坐标;
计算选定的各个巡检点的三维坐标:对于任一巡检点,利用两张以上不同角度拍摄的巡检点分别获取的像素坐标以及拍摄图像对应的云台姿态、相机的经纬度、高度,通过相机成像原理以及最小二乘优化算法得到巡检点的实际三维坐标,具体地:
基于相机成像原理,利用云台姿态、拍摄时相机的三维坐标以及相机内参信息计算出巡检点的理论三维坐标,具体计算步骤如下:
计算大地坐标系转换到相机坐标系的旋转矩阵Rcw
其中下标cw代表大地坐标系转换到相机坐标系的简称,Rcwx(φ)、Rcwy(θ)、Rcwz(ψ)代表从相机坐标系到大地坐标系需要绕着x、y、z轴旋转的矩阵,φ、θ、分别为相机云台姿态的滚转角、俯仰角和偏航角,根据相机的初始朝向,Rcw还需左乘一个初始旋转Rcw0,此时Rcw=Rcw0·(Rcwx(φ)·Rcwy(θ)·Rcwz(ψ)),式中
由相机采集的图像获得巡检点的像素坐标Puv(u,v),经过相机标定得到相机的内参矩阵:
其中fx是由αf合并、fy是由βf合并,f为相机焦距;α,β是像素坐标在u、v坐标轴上缩放倍数,[cx,cy]T是原点的平移量;
则:
Pc(Xc,Yc,Zc)为相机坐标系下巡检点的归一化坐标,由上述等式求得:
利用求得的Rcw和Pc以及相机平移坐标t(X0,Y0,Z0),求出巡检点在大地坐标系下的理论三维坐标Pw(Xw,Yw,Zw):
采用最小二乘优化算法得到巡检点的实际三维坐标,具体步骤如下:
利用两张以上对某个巡检点不同角度拍摄的图像分别计算得到的理论三维坐标;
利用每一张拍摄图像计算得到的理论三维坐标与拍摄点三维坐标,计算出经过拍摄点和理论巡检点直线的方向向量;
由多张图像可计算出多条直线的方向向量;
利用实际巡检坐标点到多条直线距离最短建立数学模型,最终利用最小二乘优化算法迭代出巡检点的实际位置,也就是多条直线的交叉处三维坐标,由此计算出任一巡检点实际坐标,重复上述步骤获得所有选定巡检点的实际三维坐标。
5.根据权利要求2所述的一种针对电力杆塔的无人机自主巡检航线生成方法,其特征在于:所述步骤A3包括:在得到选定巡检点的三维坐标后,利用巡检点之间的结构信息以及相互之间的结构信息来优化坐标,即利用已知巡检点之间的结构信息,建立带约束的最小二乘优化算法问题,由此对所选的若干巡检点进行坐标优化,使得优化后的若干巡检点之间的长度等于实际长度,从而优化出更准确三维的坐标:
上述带约束的最小二乘优化算法的目标函数如下:
式中,di,dj表示杆塔上两个实际巡检点坐标到各自经过拍摄点和理论巡检点直线的方向向量的距离,w·(L-|L′|)为额外引入的约束项,其中w为约束系数,L为在已知杆塔结构下的两个巡检点之间的实际距离,|L′|表示计算出的两个巡检点坐标之间的模长;该目标函数R的迭代结果会受w·(L-|L′|)约束项的影响,调整约束系数的大小,使得该目标函数迭代出的两巡检点的坐标之间的长度接近实际长度L,且跟实际坐标的差值会变小,最终达到对巡检点坐标的优化;对于选定的其它巡检点坐标同样使用该目标函数,从而完成对巡检点坐标进行优化的目标。
6.根据权利要求2所述的一种针对电力杆塔的无人机自主巡检航线生成方法,其特征在于:所述步骤A4包括:利用上述计算出的杆塔中若干个巡检点坐标,在杆塔的三维结构中通过空间测量的方法,获得其它多个巡检点的三维坐标。
7.根据权利要求1所述的一种针对电力杆塔的无人机自主巡检航线生成方法,其特征在于:所述步骤S1中,若未知电力杆塔几何结构,获取电力杆塔所有巡检点的三维坐标具体步骤包括:
B1、获取对电力杆塔上所有巡检点拍摄的多张图像和对应的数据;
B2、处理图像和对应的数据计算所有巡检点的三维坐标;
所述步骤B1具体包括如下两种方式:
第一、确定电力杆塔上的所有巡检点,对巡检点进行整体拍照,每张拍摄的图像中都要含有所有的巡检点,拍摄的图像在两张以上;将拍摄每一张图像时对应的相机云台的姿态和相机的三维坐标作为各张图像对应的数据;拍摄时各巡检点需靠近图像的中间位置,且各张图像之间的拍摄角度不同;
第二、确定电力杆塔上的所有巡检点,分别对每一个巡检点拍摄两张以上图像;将拍摄每一张图像时对应的相机云台的姿态和相机的三维坐标作为各张图像对应的数据;对于每一个巡检点拍摄的照片中,巡检点需保持在图像的中间位置,且各张图像之间的拍摄角度不同。
所述步骤B2包括:对于拍摄的图像,获取其中巡检点在图像中的像素坐标位置和对应云台的角度、相机的三维坐标:
获取巡检点在图像中的像素坐标:
方式一、在拍摄完图像之后,从存储卡中导出图像进行标注获取像素坐标;
方式二、在实时回传的视频图像上进行标注获取像素坐标;
计算所有巡检点的三维坐标:对于任一巡检点,利用两张以上不同角度拍摄的巡检点分别获取的像素坐标以及拍摄图像对应的云台姿态、相机的经纬度、高度,通过相机成像原理以及最小二乘优化算法得到巡检点的三维坐标,具体地:
基于相机成像原理,利用云台姿态、拍摄时相机的三维坐标以及相机内参信息计算出某个巡检点的理论三维坐标;具体计算步骤如下:
计算大地坐标系转换到相机坐标系的旋转矩阵Rcw
其中下标cw代表大地坐标系转换到相机坐标系的简称,Rcwx(φ)、Rcwy(θ)、Rcwz(ψ)代表从相机坐标系到大地坐标系需要绕着x、y、z轴旋转的矩阵,φ、θ、分别为相机云台姿态的滚转角、俯仰角和偏航角;根据相机的初始朝向,Rcw还需左乘一个初始旋转Rcw0,此时Rcw=Rcw0·(Rcwx(φ)·Rcwy(θ)·Rcwz(ψ));式中
由相机采集的图像获得巡检点的像素坐标Puv(u,v),经过相机标定得到相机的内参矩阵:
其中fx是由αf合并、fy是由βf合并,f为相机焦距;α,β是像素坐标在u、v坐标轴上缩放倍数,[cx,cy]T是原点的平移量;
则:
Pc(Xc,Yc,Zc)为相机坐标系下巡检点的归一化坐标,由上述等式求得:
利用求得的Rcw和Pc以及相机平移坐标t(X0,Y0,Z0),求出巡检点在大地坐标系下的理论三维坐标Pw(Xw,Yw,Zw):
采用最小二乘优化算法得到巡检点的实际三维坐标,具体步骤如下:
利用两张以上对某个巡检点不同角度拍摄的图像分别计算得到的理论三维坐标;
利用每一张拍摄图像计算得到的理论三维坐标与该拍摄图像对应的相机三维坐标,计算出经过拍摄点和理论巡检点直线的方向向量;
由多张图像就计算出多条直线的方向向量;
利用实际巡检坐标点到多条直线距离最短建立数学模型,最终利用最小二乘优化算法迭代出巡检点的实际位置,也就是多条直线的交叉处三维坐标,由此计算出任一巡检点实际坐标,重复上述步骤获得所有巡检点的实际三维坐标。
8.根据权利要求1所述的一种针对电力杆塔的无人机自主巡检航线生成方法,其特征在于:所述步骤S2中,位置约束条件表示巡航点和巡检点之间的位置关系,为属于已知的预设置条件,每对巡航点和巡检点之间的位置约束条件都是相同的,便于快速确定对应的巡航点,实现在线生成自主巡检航线。
CN201910753266.6A 2019-08-15 2019-08-15 一种针对电力杆塔的无人机自主巡检航线生成方法 Active CN110580717B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910753266.6A CN110580717B (zh) 2019-08-15 2019-08-15 一种针对电力杆塔的无人机自主巡检航线生成方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910753266.6A CN110580717B (zh) 2019-08-15 2019-08-15 一种针对电力杆塔的无人机自主巡检航线生成方法

Publications (2)

Publication Number Publication Date
CN110580717A true CN110580717A (zh) 2019-12-17
CN110580717B CN110580717B (zh) 2022-10-21

Family

ID=68811269

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910753266.6A Active CN110580717B (zh) 2019-08-15 2019-08-15 一种针对电力杆塔的无人机自主巡检航线生成方法

Country Status (1)

Country Link
CN (1) CN110580717B (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111006671A (zh) * 2019-12-27 2020-04-14 北京数字绿土科技有限公司 输电线路精细化巡检智能航线规划方法
CN111524128A (zh) * 2020-04-29 2020-08-11 三一海洋重工有限公司 钢结构检测方法和系统、电子设备及存储介质
CN111552306A (zh) * 2020-04-10 2020-08-18 安徽继远软件有限公司 支持杆塔关键部件巡检的无人机路径生成方法和装置
CN111781954A (zh) * 2020-08-26 2020-10-16 云南电网有限责任公司迪庆供电局 无人机巡检控制方法及装置
CN111982123A (zh) * 2020-08-26 2020-11-24 云南电网有限责任公司迪庆供电局 无人机巡检航线规划方法及装置
CN112102395A (zh) * 2020-11-09 2020-12-18 广东科凯达智能机器人有限公司 一种基于机器视觉的自主巡检的方法
CN112258641A (zh) * 2020-11-03 2021-01-22 国网智能科技股份有限公司 巡检点自动化配置系统、方法、存储介质、设备及机器人
CN112363526A (zh) * 2020-08-21 2021-02-12 云南电网有限责任公司昆明供电局 一种无人机巡检精细航线自动规划系统和方法
CN112414409A (zh) * 2020-11-16 2021-02-26 天津航天中为数据系统科技有限公司 一种基于串结构的自主巡检路径规划方法及飞行器
CN112965042A (zh) * 2021-03-01 2021-06-15 沃行科技(南京)有限公司 一种基于架空接触网无人矿卡驾驶定位方法
CN113033508A (zh) * 2021-05-20 2021-06-25 成都奥伦达科技有限公司 一种基于点云的精细巡检航点快速生成方法
CN113177918A (zh) * 2021-04-28 2021-07-27 上海大学 一种无人机对电力杆塔的智能精准巡检方法及系统
CN113377120A (zh) * 2021-06-29 2021-09-10 徐州新电高科电气有限公司 一种巡检方法、装置、设备、系统和存储介质
CN114217641A (zh) * 2021-10-29 2022-03-22 国网河南省电力公司中牟县供电公司 一种非结构环境下无人机送变电设备巡检方法及系统
CN114397910A (zh) * 2022-01-17 2022-04-26 南方电网电力科技股份有限公司 一种风力发电机无人机自动巡检方法及相关装置
CN114489102A (zh) * 2022-01-19 2022-05-13 上海复亚智能科技有限公司 一种电力杆塔自巡检方法、装置、无人机及存储介质
CN117286781A (zh) * 2023-10-24 2023-12-26 中交公路规划设计院有限公司 无人巡检系统及巡检车控制方法
CN117498225A (zh) * 2024-01-03 2024-02-02 山东黄金电力有限公司 一种无人机智能电力线路巡检系统

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017177533A1 (zh) * 2016-04-12 2017-10-19 深圳市龙云创新航空科技有限公司 基于激光雷达的微型无人机操控方法及系统
CN107729808A (zh) * 2017-09-08 2018-02-23 国网山东省电力公司电力科学研究院 一种用于输电线路无人机巡检的图像智能采集系统及方法
CN109446289A (zh) * 2018-10-18 2019-03-08 国网山东省电力公司应急管理中心 一种基于环境风险的电网gis精细预警系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017177533A1 (zh) * 2016-04-12 2017-10-19 深圳市龙云创新航空科技有限公司 基于激光雷达的微型无人机操控方法及系统
CN107729808A (zh) * 2017-09-08 2018-02-23 国网山东省电力公司电力科学研究院 一种用于输电线路无人机巡检的图像智能采集系统及方法
CN109446289A (zh) * 2018-10-18 2019-03-08 国网山东省电力公司应急管理中心 一种基于环境风险的电网gis精细预警系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
田力: "输电线路杆塔无人机自动精细巡检系统研究", 《电力与能源》 *

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111006671A (zh) * 2019-12-27 2020-04-14 北京数字绿土科技有限公司 输电线路精细化巡检智能航线规划方法
CN111552306A (zh) * 2020-04-10 2020-08-18 安徽继远软件有限公司 支持杆塔关键部件巡检的无人机路径生成方法和装置
CN111524128A (zh) * 2020-04-29 2020-08-11 三一海洋重工有限公司 钢结构检测方法和系统、电子设备及存储介质
CN112363526A (zh) * 2020-08-21 2021-02-12 云南电网有限责任公司昆明供电局 一种无人机巡检精细航线自动规划系统和方法
CN111781954B (zh) * 2020-08-26 2023-02-21 云南电网有限责任公司迪庆供电局 无人机巡检控制方法及装置
CN111781954A (zh) * 2020-08-26 2020-10-16 云南电网有限责任公司迪庆供电局 无人机巡检控制方法及装置
CN111982123A (zh) * 2020-08-26 2020-11-24 云南电网有限责任公司迪庆供电局 无人机巡检航线规划方法及装置
CN111982123B (zh) * 2020-08-26 2023-10-31 云南电网有限责任公司迪庆供电局 无人机巡检航线规划方法及装置
CN112258641A (zh) * 2020-11-03 2021-01-22 国网智能科技股份有限公司 巡检点自动化配置系统、方法、存储介质、设备及机器人
CN112258641B (zh) * 2020-11-03 2023-03-03 国网智能科技股份有限公司 巡检点自动化配置系统、方法、存储介质、设备及机器人
CN112102395A (zh) * 2020-11-09 2020-12-18 广东科凯达智能机器人有限公司 一种基于机器视觉的自主巡检的方法
CN112414409B (zh) * 2020-11-16 2022-08-02 天津航天中为数据系统科技有限公司 一种基于串结构的自主巡检路径规划方法及飞行器
CN112414409A (zh) * 2020-11-16 2021-02-26 天津航天中为数据系统科技有限公司 一种基于串结构的自主巡检路径规划方法及飞行器
CN112965042A (zh) * 2021-03-01 2021-06-15 沃行科技(南京)有限公司 一种基于架空接触网无人矿卡驾驶定位方法
CN112965042B (zh) * 2021-03-01 2022-04-26 沃行科技(南京)有限公司 一种基于架空接触网无人矿卡驾驶定位方法
CN113177918A (zh) * 2021-04-28 2021-07-27 上海大学 一种无人机对电力杆塔的智能精准巡检方法及系统
CN113033508A (zh) * 2021-05-20 2021-06-25 成都奥伦达科技有限公司 一种基于点云的精细巡检航点快速生成方法
CN113377120A (zh) * 2021-06-29 2021-09-10 徐州新电高科电气有限公司 一种巡检方法、装置、设备、系统和存储介质
CN113377120B (zh) * 2021-06-29 2024-03-26 国网江苏省电力有限公司徐州供电分公司 一种巡检方法、装置、设备、系统和存储介质
CN114217641A (zh) * 2021-10-29 2022-03-22 国网河南省电力公司中牟县供电公司 一种非结构环境下无人机送变电设备巡检方法及系统
CN114217641B (zh) * 2021-10-29 2024-05-07 国网河南省电力公司中牟县供电公司 一种非结构环境下无人机送变电设备巡检方法及系统
CN114397910A (zh) * 2022-01-17 2022-04-26 南方电网电力科技股份有限公司 一种风力发电机无人机自动巡检方法及相关装置
CN114397910B (zh) * 2022-01-17 2024-05-17 南方电网电力科技股份有限公司 一种风力发电机无人机自动巡检方法及相关装置
CN114489102A (zh) * 2022-01-19 2022-05-13 上海复亚智能科技有限公司 一种电力杆塔自巡检方法、装置、无人机及存储介质
CN117286781A (zh) * 2023-10-24 2023-12-26 中交公路规划设计院有限公司 无人巡检系统及巡检车控制方法
CN117498225A (zh) * 2024-01-03 2024-02-02 山东黄金电力有限公司 一种无人机智能电力线路巡检系统
CN117498225B (zh) * 2024-01-03 2024-03-19 山东黄金电力有限公司 一种无人机智能电力线路巡检系统

Also Published As

Publication number Publication date
CN110580717B (zh) 2022-10-21

Similar Documents

Publication Publication Date Title
CN110580717B (zh) 一种针对电力杆塔的无人机自主巡检航线生成方法
CN110554704B (zh) 一种基于无人机的风机叶片自主巡检方法
CN110879601B (zh) 一种对于未知风机结构的无人机巡检方法
He et al. Research of multi-rotor UAVs detailed autonomous inspection technology of transmission lines based on route planning
CN107830846B (zh) 一种利用无人机和卷积神经网络测量通信塔天线角度方法
CN107729808A (zh) 一种用于输电线路无人机巡检的图像智能采集系统及方法
CN110908401A (zh) 一种针对未知杆塔结构的无人机自主巡检方法
CN110246175A (zh) 全景相机与云台相机结合的变电站巡检机器人图像检测系统及方法
CN112904877A (zh) 一种基于无人机的风机叶片自动巡检系统及方法
CN114743021A (zh) 一种输电线路图像与点云数据的融合方法及系统
CN112327906A (zh) 一种基于无人机的智能自动巡检系统
CN111244822B (zh) 一种复杂地理环境的固定翼无人机巡线方法、系统和装置
CN106096207B (zh) 一种基于多目视觉的旋翼无人机抗风评估方法及系统
CN112013830B (zh) 一种输电线路无人机巡检影像检测缺陷的精确定位方法
CN109976339B (zh) 一种车载配网巡检数据采集方法与巡检系统
CN106971408A (zh) 一种基于时空转换思想的摄像机标定方法
CN110706273B (zh) 一种基于无人机的实时塌方区域面积的测量方法
CN112949478A (zh) 基于云台相机的目标检测方法
CN105551032A (zh) 一种基于视觉伺服的杆塔图像采集系统及其方法
CN113177918B (zh) 一种无人机对电力杆塔的智能精准巡检方法及系统
CN113516708A (zh) 一种基于图像识别与uwb定位融合的输电线路巡检无人机精确定位系统及方法
CN115240089A (zh) 一种航空遥感图像的车辆检测方法
CN116223511A (zh) 基于无人机自动巡检的分布式屋顶光伏组件缺陷诊断方法及装置
CN114397900B (zh) 一种无人机航拍图片中心点经纬度误差优化方法
CN113326752B (zh) 一种基于无人机的光伏电站识别方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20210331

Address after: 610000 No. 1, 12 floor, No. 1, Tianfu Avenue, 1388 middle and high tech Zone, Chengdu, Sichuan.

Applicant after: CHENGDU UAV INTELLIGENT SCIENCE & TECHNOLOGY Co.,Ltd.

Applicant after: Wuhan Nari Limited Liability Company of State Grid Electric Power Research Institute

Address before: 610000 Chengdu, Sichuan, China (Sichuan) free trade pilot area, Chengdu high tech Zone, Tianfu Avenue, 1388, 1, 12, 1292.

Applicant before: CHENGDU UAV INTELLIGENT SCIENCE & TECHNOLOGY Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant