CN108087208A - 基于无人机的风力发电机组叶片跟随方法和装置 - Google Patents

基于无人机的风力发电机组叶片跟随方法和装置 Download PDF

Info

Publication number
CN108087208A
CN108087208A CN201611021798.3A CN201611021798A CN108087208A CN 108087208 A CN108087208 A CN 108087208A CN 201611021798 A CN201611021798 A CN 201611021798A CN 108087208 A CN108087208 A CN 108087208A
Authority
CN
China
Prior art keywords
value
unmanned plane
main camera
coordinate system
axis
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611021798.3A
Other languages
English (en)
Inventor
周志奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Goldwind Science and Creation Windpower Equipment Co Ltd
Original Assignee
Beijing Goldwind Science and Creation Windpower Equipment Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Goldwind Science and Creation Windpower Equipment Co Ltd filed Critical Beijing Goldwind Science and Creation Windpower Equipment Co Ltd
Priority to CN201611021798.3A priority Critical patent/CN108087208A/zh
Publication of CN108087208A publication Critical patent/CN108087208A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/10—Simultaneous control of position or course in three dimensions
    • G05D1/101—Simultaneous control of position or course in three dimensions specially adapted for aircraft

Landscapes

  • Engineering & Computer Science (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Studio Devices (AREA)

Abstract

本发明提供一种基于无人机的风力发电机组叶片跟随方法和装置，其中，该方法包括：接收无人机实时返回的摄像画面，并根据摄像画面确定目标物；根据目标物，确定目标物形心点分别在无人机主摄像头中的第一成像点以及在辅摄像头中的第二成像点；获取第一成像点在主摄像头坐标系的坐标值、和第二成像点在辅摄像头坐标系的坐标值，并确定目标物当前在主摄像头坐标系中的坐标值；当目标物超出预设位置范围时，调整无人机的位置，以实现叶片跟随。从而可以在不锁定叶轮的情况下，对无人机实施定点观察，并能跟随叶片的运动进行跟随。使得目标始终在可观察的范围内，在无人机目标自动跟飞过程中进行无人机风电叶片巡检，提高无人机的叶片排查方式效率。

Description

基于无人机的风力发电机组叶片跟随方法和装置
技术领域
本发明涉及无人机技术领域，尤其涉及一种基于无人机的风力发电机组叶片跟随方法和装置。
背景技术
在风力发电行业，需要对风电叶片损伤状况进行排查。
现有技术中，会先将风电机组停机，然后将叶轮锁定在倒Y状态，然后规划出一条倒Y航线，进而让无人机自主飞行并对风电叶片进行全面拍照检查。
然而现有技术中的无人机检查方法需要等待叶轮完全处于静止并且锁定的状态才能实施。这是因为在叶轮没有锁定的情况下，可能会因为阵风带来的冲击，产生不同程度的旋转，叶片进而可能会与正在航线上排查问题的无人机发生碰撞，引发安全问题。这种锁定叶轮的叶片检查方法如果在已经明确的知道某支叶片存在疑似损伤的情况下实施，会由于需要等待叶轮完全静止，并完成锁定程序，而变得耗时费力且效率低下。
发明内容
本发明提供一种基于无人机的风力发电机组叶片跟随方法和装置，用以解决现有技术中锁定叶轮的叶片检查方法如果在已经明确的知道某支叶片存在疑似损伤的情况下实施，会由于需要等待叶轮完全静止，并完成锁定程序，而变得耗时费力且效率低下的问题。
本发明的一方面是提供一种基于无人机的风力发电机组叶片跟随方法，包括：
接收无人机实时返回的摄像画面，并根据所述摄像画面确定目标物；
根据所述目标物，确定目标物形心点分别在无人机主摄像头中的第一成像点以及在辅摄像头中的第二成像点；
获取第一成像点在所述主摄像头坐标系的坐标值、和第二成像点在所述辅摄像头坐标系的坐标值，并确定目标物当前在主摄像头坐标系中的坐标值；
判断是否超出预设位置范围，并当目标物超出预设位置范围时，调整无人机的位置，以实现所述叶片跟随。
本发明的另一方面是提供一种基于无人机的风力发电机组叶片跟随装置，包括：
采集单元，用于接收无人机实时返回的摄像画面，并根据所述摄像画面确定目标物；
成像点确定单元，用于根据所述目标物，确定目标物形心点分别在无人机主摄像头中的第一成像点以及在辅摄像头中的第二成像点；
第一坐标值确定单元，用于获取第一成像点在所述主摄像头坐标系的坐标值、和第二成像点在所述辅摄像头坐标系的坐标值；
第二坐标值确定单元，用于确定目标物当前在主摄像头坐标系中的坐标值；
跟随单元，用于判断是否超出预设位置范围，并当目标物超出预设位置范围时，调整无人机的位置，以实现所述叶片跟随。
本实施例通过接收无人机实时返回的摄像画面，并根据摄像画面确定目标物；根据目标物，确定目标物形心点分别在无人机主摄像头中的第一成像点以及在辅摄像头中的第二成像点；获取第一成像点在主摄像头坐标系的坐标值、和第二成像点在辅摄像头坐标系的坐标值，并确定目标物当前在主摄像头坐标系中的坐标值；判断是否超出预设位置范围，并当目标物超出预设位置范围时，调整无人机的位置，以实现叶片跟随。从而可以在不锁定叶轮的情况下，对无人机实施定点观察，并能跟随叶片的运动进行跟随。在无人机的定点观察的过程中，无人机锁定目标之后跟随目标缓慢的运动且自动跟随飞行，使得目标始终在可观察的范围内，进而可以在无人机目标自动跟飞过程中进行无人机风电叶片巡检，提高了无人机的叶片排查方式效率；并且减少了无人机风电叶片巡检作业过程中的叶轮锁定工序，节省作业时间，提高了作业效率。
附图说明
图1为本发明实施例一提供的基于无人机的风力发电机组叶片跟随方法的流程图；
图2为本发明实施例二提供的基于无人机的风力发电机组叶片跟随方法的流程图；
图3为本发明实施例二提供的基于无人机的风力发电机组叶片跟随方法中成像示意图；
图4为本发明实施例二提供的基于无人机的风力发电机组叶片跟随方法中目标物投影到主摄像头坐标系的XZ方向的示意图；
图5为本发明实施例二提供的基于无人机的风力发电机组叶片跟随方法中目标物投影到主摄像头坐标系的YZ方向的示意图；
图6为本发明实施例二提供的基于无人机的风力发电机组叶片跟随方法中目标物投影到辅摄像头坐标系的XZ方向的示意图；
图7为本发明实施例三提供的基于无人机的风力发电机组叶片跟随装置的结构示意图；
图8为本发明实施例四提供的基于无人机的风力发电机组叶片跟随装置的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
图1为本发明实施例一提供的基于无人机的风力发电机组叶片跟随方法的流程图，如图1所示，本实施例的方法，包括：
步骤101、接收无人机实时返回的摄像画面，并根据摄像画面确定目标物。
在本实施例中，具体的，无人机上具有双目摄像头，分别为主摄像头和辅摄像头。控制无人机飞行至最佳观察位置之后，利用无人机上搭载的双目摄像头对目标进行实时摄像，无人机将画面实时回传至地面端。从而可以接收到无人机返回的摄像画面。
然后利用鼠标在地面端视频界面上框选出目标物，进而拾取目标物的目标信息并保存。
步骤102、根据目标物，确定目标物形心点分别在无人机主摄像头中的第一成像点以及在辅摄像头中的第二成像点。
在本实施例中，具体的，在目标物的目标区域上，自动计算出目标物形心点所在的像素点，具体来说，可以计算出目标物形心点在无人机的主摄像头中的第一成像点Pl点、以及目标物形心点在无人机的辅摄像头中的第二成像点Pr点。
步骤103、获取第一成像点在主摄像头坐标系的坐标值、和第二成像点在辅摄像头坐标系的坐标值，并确定目标物当前在主摄像头坐标系中的坐标值。
在本实施例中，具体的，可以根据目标物形心点的与主摄像头对应的第一成像点Pl点，去确定出第一成像点Pl点在主摄像头坐标系的坐标值；根据目标物形心点的与辅摄像头对应的第二成像点Pr点，去确定出第二成像点Pr点在辅摄像头坐标系的坐标值。并且，需要根据第一成像点Pl点确定出目标物当前在主摄像头坐标系中的坐标值。
步骤104、判断是否超出预设位置范围，并当目标物超出预设位置范围时，调整无人机的位置，以实现叶片跟随。
在本实施例中，具体的，根据步骤103得到的几个坐标值，去判断目标物是否超出预设位置范围。若确定目标物超出该预设位置范围，则需要去调整无人机的位置，使得无人机位于正常的控制范围之内，以实现叶片跟随，进而可以在在无人机目标跟随过程中进行无人机的风电叶片的巡检。
本实施例通过接收无人机实时返回的摄像画面，并根据摄像画面确定目标物；根据目标物，确定目标物形心点分别在无人机主摄像头中的第一成像点以及在辅摄像头中的第二成像点；获取第一成像点在主摄像头坐标系的坐标值、和第二成像点在辅摄像头坐标系的坐标值，并确定目标物当前在主摄像头坐标系中的坐标值；判断是否超出预设位置范围，并当目标物超出预设位置范围时，调整无人机的位置，以实现叶片跟随。从而可以在不锁定叶轮的情况下，对无人机实施定点观察，并能跟随叶片的运动进行跟随。在无人机的定点观察的过程中，无人机锁定目标之后跟随目标缓慢的运动且自动跟随飞行，使得目标始终在可观察的范围内，进而可以在无人机目标自动跟飞过程中进行无人机风电叶片巡检，提高了无人机的叶片排查方式效率；并且减少了无人机风电叶片巡检作业过程中的叶轮锁定工序，节省作业时间，提高了作业效率。
图2为本发明实施例二提供的基于无人机的风力发电机组叶片跟随方法的流程图，在实施例一的基础上，如图2所示，本实施例的方法，步骤102，具体包括：
确定第一成像点在主摄像头坐标系下的X轴坐标值、Y轴坐标值，以及第二成像点在辅摄像头坐标系下的X轴坐标值。
相应的，步骤103中的确定目标物当前在主摄像头坐标系中的坐标值，包括：
根据目标物形心点在主摄像头上的第一成像点，确定第一成像点与主摄像头的中心点之间在X向上的第一像素点个数、和在Y向上的第二像素点个数，并根据目标物形心点在辅摄像头上的第二成像点，确定第二成像点与辅摄像头的中心点之间在X向上的第三像素点个数；
根据第一像素点个数和预设的像元尺寸确定第一成像点在主摄像头坐标系下的X轴坐标值，根据第二像素点个数和预设的像元尺寸确定第一成像点在主摄像头坐标系下的Y轴坐标值，并根据第三像素点个数和预设的像元尺寸确定第二成像点在辅摄像头坐标系下的X轴坐标值。
在本实施例中，具体的，根据目标物，去计算出第一成像点在主摄像头坐标系下的X轴坐标值、Y轴坐标值，以及第二成像点在辅摄像头坐标系下的X轴坐标值。
具体来说，首先确定出目标物形心点在主摄像头上的第一成像点Pl点、以及在辅摄像头上的第二成像点Pr点。然后，图3为本发明实施例二提供的基于无人机的风力发电机组叶片跟随方法中成像示意图，如图3所示，目标物p即目标物形心点在主摄像头上的第一成像点Pl点，根据第一成像点Pl点确定第一成像点与主摄像头的中心点之间在X向上的第一像素点个数、以及第一成像点与主摄像头的中心点之间在Y向上的第二像素点个数；图4为本发明实施例二提供的基于无人机的风力发电机组叶片跟随方法中目标物投影到主摄像头坐标系的XZ方向的示意图，如图4所示，就可以根据第一像素点个数和预设的像元尺寸进行乘积计算之后确定出第一成像点在主摄像头坐标系下的X轴坐标值Xpl；并且，图5为本发明实施例二提供的基于无人机的风力发电机组叶片跟随方法中目标物投影到主摄像头坐标系的YZ方向的示意图，如图5所示，根据第二像素点个数和预设的像元尺寸进行乘积计算之后确定出第一成像点在主摄像头坐标系下的Y轴坐标值Ypl。同时，如图3所示，目标物p在目标物形心点在辅摄像头上的第二成像点Pr点，根据第二成像点Pr点确定第二成像点与辅摄像头的中心点之间在X向上的第三像素点个数；图6为本发明实施例二提供的基于无人机的风力发电机组叶片跟随方法中目标物投影到辅摄像头坐标系的XZ方向的示意图，如图6所示，可以根据第三像素点个数和预设的像元尺寸进行乘积计算之后，确定第二成像点在辅摄像头坐标系下的X轴坐标值Xpr。其中，如图3所示，主摄像头的中心点为主摄像头凸透镜片中心(0，0)处，辅摄像头的中心点为辅摄像头凸透镜片中心(0，0)处。l表示主摄像头坐标系，r表示辅摄像头坐标系。
在步骤103之后，还包括：
步骤201、根据第一成像点在主摄像头坐标系下的X轴坐标值、以及第二成像点在辅摄像头坐标系下的X轴坐标值，确定物距。
其中，物距为Zp＝Tf/(Xpl-Xpr)；Xpl为第一成像点在主摄像头坐标系下的X轴坐标值，Xpr为第二成像点在辅摄像头坐标系下的X轴坐标值，T为主摄像头的中心点与辅摄像头的中心点之间距离，f为摄像头焦距。
在本实施例中，具体的，可以根据第一成像点Pl点在主摄像头坐标系下的X轴坐标值Xpl、第二成像点Pr点在辅摄像头坐标系下的X轴坐标值Xpr、主摄像头的中心点与辅摄像头的中心点之间距离T、以及摄像头焦距f，计算出物距Zp＝Tf/(Xpl-Xpr)。其中，主摄像头和辅摄像头之间进行平行安装，进而两摄像头的中心轴平行安装时两中心轴之间的距离就是主摄像头的中心点与辅摄像头的中心点之间距离T。
并且，物距Zp为目标物P距离主摄像头凸透镜片中心点的距离，它的值与目标物P在主摄像头坐标系l下的Z轴坐标值相等。而摄像头焦距f为摄像头的焦距，主摄像头和辅摄像头的摄像头焦距f相同，为常量，纲量为mm。
步骤202、判断根据物距，是否在预设的安全距离范围中：若物距小于预设的安全距离范围中的安全距离最小值，则控制无人机向后飞行，以调整无人机至安全距离范围；若物距大于预设的安全距离范围中的安全距离最大值，则控制无人机向前飞行，以调整无人机至安全距离范围。
在本实施例中，具体的，首先需要判断物距Zp，是否在预设的安全距离范围中，进而调整无人机至安全距离范围中。判断物距Zp是否超出安全距离范围，如果超出安全距离范围，则控制无人机飞行直至无人机在安全距离范围内为止，具体来说，若物距Zp小于预设的安全距离范围中的安全距离最小值，则控制无人机向后飞行，进而调整无人机至安全距离范围；若物距Zp大于预设的安全距离范围中的安全距离最大值，则控制无人机向前飞行，，进而调整无人机至安全距离范围。如果物距Zp在安全距离范围内，则继续执行步骤104。
步骤104包括两种实现方式：
步骤104第一种实现方式为：
判断是否超出预设位置范围，包括：根据物距、以及第一成像点在主摄像头坐标系下的X轴坐标值，确定目标物形心点在主摄像头坐标之下的X轴值；判断目标物形心点在主摄像头坐标之下的X轴值是否等于0；
相应的，当目标物超出预设位置范围时，调整无人机的位置，包括：
若目标物形心点在主摄像头坐标之下的X轴值大于0，则控制无人机向右飞行|Xp|的距离，若目标物形心点在主摄像头坐标之下的X轴值小于等于0，则控制无人机向左飞行|Xp|的距离，其中，|Xp|为目标物形心点在主摄像头坐标之下的X轴值的绝对值。
在本实施例中，具体的，根据物距Zp、第一成像点Pl点在主摄像头坐标系下的X轴坐标值Xpl、以及摄像头焦距f，计算出目标物形心点Pl点在主摄像头坐标之下的X轴值Xp＝ZpXpl/f。
需要判断目标物形心点在主摄像头坐标之下的X轴值为Xp，是否超出控制范围。若如果超出控制范围，则无人机飞行机构动作，去修正无人机当前位置。
具体来说，若目标物形心点在主摄像头坐标之下的X轴值为Xp>0，则控制无人机向右飞行|Xp|的距离，若目标物形心点在主摄像头坐标之下的X轴值为Xp<＝0，则控制无人机向左飞行|Xp|的距离，其中，|Xp|为目标区域的形心点在主摄像头坐标之下的X轴值的绝对值。
进而可以在在无人机目标跟随过程中进行无人机的风电叶片的巡检。
步骤104第二种实现方式为：
判断是否超出预设位置范围，包括：根据物距、以及第一成像点在主摄像头坐标系下的Y轴坐标值，确定目标物形心点在主摄像头坐标系下的Y轴值；判断目标物形心点在主摄像头坐标系下的Y轴值是否等于0；
相应的，当目标物超出预设位置范围时，调整无人机的位置，包括：
若目标物形心点在主摄像头坐标系下的Y轴值大于0，则控制无人机向下飞行|Yp|的距离，若目标物形心点在主摄像头坐标系下的Y轴值小于等于0，则控制无人机向上飞行|Yp|的距离，其中，|Yp|为目标物形心点在主摄像头坐标系下的Y轴值的绝对值。
在本实施例中，具体的，根据物距Zp、以及第一成像点Pl点在主摄像头坐标系下的Y轴坐标值Ypl、以及摄像头焦距f，确定目标物形心点在主摄像头坐标系下的Y轴值Yp＝ZpYpl/f。
需要判断目标物形心点在主摄像头坐标系下的Y轴值为Yp，是否超出控制范围。若如果超出控制范围，则无人机飞行机构动作，去修正无人机当前位置。
具体来说，若目标物形心点在主摄像头坐标系下的Y轴值为Yp>0，则控制无人机向下飞行|Yp|的距离，若目标物形心点在主摄像头坐标系下的Y轴值为Yp<＝0，则控制无人机向上飞行|Yp|的距离，其中，|Yp|为目标区域的形心点在主摄像头坐标系下的Y轴值的绝对值。
进而可以在在无人机目标跟随过程中进行无人机的风电叶片的巡检。
然后，就可以重复执行本实施例提供的方法，实时并持续的在无人机目标跟随过程中进行风电叶片巡检。
本实施例通过接收无人机实时返回的摄像画面，并根据摄像画面确定目标物；根据目标物，确定目标物形心点分别在无人机主摄像头中的第一成像点以及在辅摄像头中的第二成像点；获取第一成像点在主摄像头坐标系的坐标值、和第二成像点在辅摄像头坐标系的坐标值，并确定目标物当前在主摄像头坐标系中的坐标值；根据第一成像点在主摄像头坐标系下的X轴坐标值、以及第二成像点在辅摄像头坐标系下的X轴坐标值，确定物距，判断根据物距，是否在预设的安全距离范围中，以调整无人机至安全距离范围；判断是否超出预设位置范围，并当目标物超出预设位置范围时，调整无人机的位置，以实现叶片跟随。从而可以在不锁定叶轮的情况下，对无人机实施定点观察，并能跟随叶片的运动进行跟随。在无人机的定点观察的过程中，无人机锁定目标之后跟随目标缓慢的运动且自动跟随飞行，使得目标始终在可观察的范围内，进而可以在无人机目标自动跟飞过程中进行无人机风电叶片巡检，提高了无人机的叶片排查方式效率；并且减少了无人机风电叶片巡检作业过程中的叶轮锁定工序，节省作业时间，提高了作业效率。
图7为本发明实施例三提供的基于无人机的风力发电机组叶片跟随装置的结构示意图，如图7所示，本实施例的装置，包括：
采集单元71，用于接收无人机实时返回的摄像画面，并根据摄像画面确定目标物；
成像点确定单元72，用于根据目标物，确定目标物形心点分别在无人机主摄像头中的第一成像点以及在辅摄像头中的第二成像点；
第一坐标值确定单元73，用于获取第一成像点在主摄像头坐标系的坐标值、和第二成像点在辅摄像头坐标系的坐标值；
第二坐标值确定单元74，用于确定目标物当前在主摄像头坐标系中的坐标值；
跟随单元75，用于判断是否超出预设位置范围，并当目标物超出预设位置范围时，调整无人机的位置，以实现叶片跟随。
本实施例的基于无人机的风力发电机组叶片跟随装置可执行本发明实施例一提供的基于无人机的风力发电机组叶片跟随方法，其实现原理相类似，此处不再赘述。
本实施例通过接收无人机实时返回的摄像画面，并根据摄像画面确定目标物；根据目标物，确定目标物形心点分别在无人机主摄像头中的第一成像点以及在辅摄像头中的第二成像点；获取第一成像点在主摄像头坐标系的坐标值、和第二成像点在辅摄像头坐标系的坐标值，并确定目标物当前在主摄像头坐标系中的坐标值；判断是否超出预设位置范围，并当目标物超出预设位置范围时，调整无人机的位置，以实现叶片跟随。从而可以在不锁定叶轮的情况下，对无人机实施定点观察，并能跟随叶片的运动进行跟随。在无人机的定点观察的过程中，无人机锁定目标之后跟随目标缓慢的运动且自动跟随飞行，使得目标始终在可观察的范围内，进而可以在无人机目标自动跟飞过程中进行无人机风电叶片巡检，提高了无人机的叶片排查方式效率；并且减少了无人机风电叶片巡检作业过程中的叶轮锁定工序，节省作业时间，提高了作业效率。
图8为本发明实施例四提供的基于无人机的风力发电机组叶片跟随装置的结构示意图，在实施例三的基础上，如图8所示，本实施例的装置，第一坐标值确定单元73，具体用于：
确定第一成像点在主摄像头坐标系下的X轴坐标值、Y轴坐标值，以及第二成像点在辅摄像头坐标系下的X轴坐标值。
第二坐标值确定单元74，具体用于：
根据目标物形心点在主摄像头上的第一成像点，确定第一成像点与主摄像头的中心点之间在X向上的第一像素点个数、和在Y向上的第二像素点个数，并根据目标物形心点在辅摄像头上的第二成像点，确定第二成像点与辅摄像头的中心点之间在X向上的第三像素点个数；
根据第一像素点个数和预设的像元尺寸确定第一成像点在主摄像头坐标系下的X轴坐标值，根据第二像素点个数和预设的像元尺寸确定第一成像点在主摄像头坐标系下的Y轴坐标值，并根据第三像素点个数和预设的像元尺寸确定第二成像点在辅摄像头坐标系下的X轴坐标值。
还包括：
调整单元81，用于在第二坐标值确定单元74确定第二成像点在辅摄像头坐标系下的X轴坐标值之后，根据第一成像点在主摄像头坐标系下的X轴坐标值、以及第二成像点在辅摄像头坐标系下的X轴坐标值，确定物距；判断根据物距，是否在预设的安全距离范围中：若物距小于预设的安全距离范围中的安全距离最小值，则控制无人机向后飞行，以调整无人机至安全距离范围；若物距大于预设的安全距离范围中的安全距离最大值，则控制无人机向前飞行，以调整无人机至安全距离范围。
跟随单元75，具体用于：
根据物距、以及第一成像点在主摄像头坐标系下的X轴坐标值，确定目标物形心点在主摄像头坐标之下的X轴值；
判断目标物形心点在主摄像头坐标之下的X轴值是否等于0；
若目标物形心点在主摄像头坐标之下的X轴值大于0，则控制无人机向右飞行|Xp|的距离，若目标物形心点在主摄像头坐标之下的X轴值小于等于0，则控制无人机向左飞行|Xp|的距离，其中，|Xp|为目标物形心点在主摄像头坐标之下的X轴值的绝对值。
或者，跟随单元75，具体用于：
根据物距、以及第一成像点在主摄像头坐标系下的Y轴坐标值，确定目标物形心点在主摄像头坐标系下的Y轴值；
判断目标物形心点在主摄像头坐标系下的Y轴值是否等于0；
若目标物形心点在主摄像头坐标系下的Y轴值大于0，则控制无人机向下飞行|Yp|的距离，若目标物形心点在主摄像头坐标系下的Y轴值小于等于0，则控制无人机向上飞行|Yp|的距离，其中，|Yp|为目标物形心点在主摄像头坐标系下的Y轴值的绝对值。
本实施例的基于无人机的风力发电机组叶片跟随装置可执行本发明实施例二提供的基于无人机的风力发电机组叶片跟随方法，其实现原理相类似，此处不再赘述。
本实施例通过接收无人机实时返回的摄像画面，并根据摄像画面确定目标物；根据目标物，确定目标物形心点分别在无人机主摄像头中的第一成像点以及在辅摄像头中的第二成像点；获取第一成像点在主摄像头坐标系的坐标值、和第二成像点在辅摄像头坐标系的坐标值，并确定目标物当前在主摄像头坐标系中的坐标值；根据第一成像点在主摄像头坐标系下的X轴坐标值、以及第二成像点在辅摄像头坐标系下的X轴坐标值，确定物距，判断根据物距，是否在预设的安全距离范围中，以调整无人机至安全距离范围；判断是否超出预设位置范围，并当目标物超出预设位置范围时，调整无人机的位置，以实现叶片跟随。从而可以在不锁定叶轮的情况下，对无人机实施定点观察，并能跟随叶片的运动进行跟随。在无人机的定点观察的过程中，无人机锁定目标之后跟随目标缓慢的运动且自动跟随飞行，使得目标始终在可观察的范围内，进而可以在无人机目标自动跟飞过程中进行无人机风电叶片巡检，提高了无人机的叶片排查方式效率；并且减少了无人机风电叶片巡检作业过程中的叶轮锁定工序，节省作业时间，提高了作业效率。
本领域普通技术人员可以理解：实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (12)

1.一种基于无人机的风力发电机组叶片跟随方法，其特征在于，包括：
接收无人机实时返回的摄像画面，并根据所述摄像画面确定目标物；
根据所述目标物，确定目标物形心点分别在无人机主摄像头中的第一成像点以及在辅摄像头中的第二成像点；
获取第一成像点在所述主摄像头坐标系的坐标值、和第二成像点在所述辅摄像头坐标系的坐标值，并确定目标物当前在主摄像头坐标系中的坐标值；
判断是否超出预设位置范围，并当目标物超出预设位置范围时，调整无人机的位置，以实现所述叶片跟随。
2.根据权利要求1所述的方法，其特征在于，所述获取第一成像点在所述主摄像头坐标系的坐标值、和第二成像点在所述辅摄像头坐标系的坐标值，包括：
确定第一成像点在主摄像头坐标系下的X轴坐标值、Y轴坐标值，以及第二成像点在辅摄像头坐标系下的X轴坐标值。
3.根据权利要求2所述的方法，其特征在于，所述确定目标物当前在主摄像头坐标系中的坐标值，包括：
根据目标物形心点在主摄像头上的第一成像点，确定第一成像点与主摄像头的中心点之间在X向上的第一像素点个数、和在Y向上的第二像素点个数，并根据目标物形心点在辅摄像头上的第二成像点，确定第二成像点与辅摄像头的中心点之间在X向上的第三像素点个数；
根据第一像素点个数和预设的像元尺寸确定第一成像点在主摄像头坐标系下的X轴坐标值，根据第二像素点个数和预设的像元尺寸确定第一成像点在主摄像头坐标系下的Y轴坐标值，并根据第三像素点个数和预设的像元尺寸确定第二成像点在辅摄像头坐标系下的X轴坐标值。
4.根据权利要求3所述的方法，其特征在于，在所述确定第二成像点在辅摄像头坐标系下的X轴坐标值之后，还包括：
根据第一成像点在主摄像头坐标系下的X轴坐标值、以及第二成像点在辅摄像头坐标系下的X轴坐标值，确定物距；
判断根据所述物距，是否在预设的安全距离范围中：
若所述物距小于预设的安全距离范围中的安全距离最小值，则控制无人机向后飞行，以调整无人机至安全距离范围；
若所述物距大于预设的安全距离范围中的安全距离最大值，则控制无人机向前飞行，以调整无人机至安全距离范围。
5.根据权利要求4所述的方法，其特征在于，所述判断是否超出预设位置范围，包括：
根据所述物距、以及第一成像点在主摄像头坐标系下的X轴坐标值，确定目标物形心点在主摄像头坐标之下的X轴值；
判断目标物形心点在主摄像头坐标之下的X轴值是否等于0；
相应的，所述当目标物超出预设位置范围时，调整无人机的位置，包括：
若目标物形心点在主摄像头坐标之下的X轴值大于0，则控制无人机向右飞行|Xp|的距离，若目标物形心点在主摄像头坐标之下的X轴值小于等于0，则控制无人机向左飞行|Xp|的距离，其中，|Xp|为目标物形心点在主摄像头坐标之下的X轴值的绝对值。
6.根据权利要求4所述的方法，其特征在于，所述判断是否超出预设位置范围，包括：
根据所述物距、以及第一成像点在主摄像头坐标系下的Y轴坐标值，确定目标物形心点在主摄像头坐标系下的Y轴值；
判断目标物形心点在主摄像头坐标系下的Y轴值是否等于0；
相应的，所述当目标物超出预设位置范围时，调整无人机的位置，包括：
若目标物形心点在主摄像头坐标系下的Y轴值大于0，则控制无人机向下飞行|Yp|的距离，若目标物形心点在主摄像头坐标系下的Y轴值小于等于0，则控制无人机向上飞行|Yp|的距离，其中，|Yp|为目标物形心点在主摄像头坐标系下的Y轴值的绝对值。
7.一种基于无人机的风力发电机组叶片跟随装置，其特征在于，包括：
采集单元，用于接收无人机实时返回的摄像画面，并根据所述摄像画面确定目标物；
成像点确定单元，用于根据所述目标物，确定目标物形心点分别在无人机主摄像头中的第一成像点以及在辅摄像头中的第二成像点；
第一坐标值确定单元，用于获取第一成像点在所述主摄像头坐标系的坐标值、和第二成像点在所述辅摄像头坐标系的坐标值；
第二坐标值确定单元，用于确定目标物当前在主摄像头坐标系中的坐标值；
跟随单元，用于判断是否超出预设位置范围，并当目标物超出预设位置范围时，调整无人机的位置，以实现所述叶片跟随。
8.根据权利要求7所述的装置，其特征在于，所述第一坐标值确定单元，具体用于：
确定第一成像点在主摄像头坐标系下的X轴坐标值、Y轴坐标值，以及第二成像点在辅摄像头坐标系下的X轴坐标值。
9.根据权利要求8所述的装置，其特征在于，所述第二坐标值确定单元，具体用于：
根据目标物形心点在主摄像头上的第一成像点，确定第一成像点与主摄像头的中心点之间在X向上的第一像素点个数、和在Y向上的第二像素点个数，并根据目标物形心点在辅摄像头上的第二成像点，确定第二成像点与辅摄像头的中心点之间在X向上的第三像素点个数；
根据第一像素点个数和预设的像元尺寸确定第一成像点在主摄像头坐标系下的X轴坐标值，根据第二像素点个数和预设的像元尺寸确定第一成像点在主摄像头坐标系下的Y轴坐标值，并根据第三像素点个数和预设的像元尺寸确定第二成像点在辅摄像头坐标系下的X轴坐标值。
10.根据权利要求9所述的装置，其特征在于，还包括：
调整单元，用于在所述第二坐标值确定单元确定第二成像点在辅摄像头坐标系下的X轴坐标值之后，根据第一成像点在主摄像头坐标系下的X轴坐标值、以及第二成像点在辅摄像头坐标系下的X轴坐标值，确定物距；判断根据所述物距，是否在预设的安全距离范围中：若所述物距小于预设的安全距离范围中的安全距离最小值，则控制无人机向后飞行，以调整无人机至安全距离范围；若所述物距大于预设的安全距离范围中的安全距离最大值，则控制无人机向前飞行，以调整无人机至安全距离范围。
11.根据权利要求10所述的装置，其特征在于，所述跟随单元，具体用于：
根据所述物距、以及第一成像点在主摄像头坐标系下的X轴坐标值，确定目标物形心点在主摄像头坐标之下的X轴值；
判断目标物形心点在主摄像头坐标之下的X轴值是否等于0；
若目标物形心点在主摄像头坐标之下的X轴值大于0，则控制无人机向右飞行|Xp|的距离，若目标物形心点在主摄像头坐标之下的X轴值小于等于0，则控制无人机向左飞行|Xp|的距离，其中，|Xp|为目标物形心点在主摄像头坐标之下的X轴值的绝对值。
12.根据权利要求10所述的装置，其特征在于，所述跟随单元，具体用于：
根据所述物距、以及第一成像点在主摄像头坐标系下的Y轴坐标值，确定目标物形心点在主摄像头坐标系下的Y轴值；
判断目标物形心点在主摄像头坐标系下的Y轴值是否等于0；
若目标物形心点在主摄像头坐标系下的Y轴值大于0，则控制无人机向下飞行|Yp|的距离，若目标物形心点在主摄像头坐标系下的Y轴值小于等于0，则控制无人机向上飞行|Yp|的距离，其中，|Yp|为目标物形心点在主摄像头坐标系下的Y轴值的绝对值。
CN201611021798.3A 2016-11-21 2016-11-21 基于无人机的风力发电机组叶片跟随方法和装置 Pending CN108087208A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611021798.3A CN108087208A (zh) 2016-11-21 2016-11-21 基于无人机的风力发电机组叶片跟随方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611021798.3A CN108087208A (zh) 2016-11-21 2016-11-21 基于无人机的风力发电机组叶片跟随方法和装置

Publications (1)

Publication Number Publication Date
CN108087208A true CN108087208A (zh) 2018-05-29

Family

ID=62169346

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611021798.3A Pending CN108087208A (zh) 2016-11-21 2016-11-21 基于无人机的风力发电机组叶片跟随方法和装置

Country Status (1)

Country Link
CN (1) CN108087208A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108733079A (zh) * 2018-06-19 2018-11-02 上海扩博智能技术有限公司 通过无人机对风机进行自动巡检飞行路径确定方法及系统
CN109162879A (zh) * 2018-08-10 2019-01-08 上海扩博智能技术有限公司 通过多传感器控制无人机进行风机叶片检测方法及系统
CN111246162A (zh) * 2019-12-09 2020-06-05 北京金风科创风电设备有限公司 风力发电机组的塔架净空监控设备的位置矫正方法及装置
CN111232234A (zh) * 2020-02-10 2020-06-05 江苏大学 一种飞行器空间实时定位系统的方法
CN111654642A (zh) * 2020-07-22 2020-09-11 上海扩博智能技术有限公司 拍摄风机叶片的曝光值调整方法、系统、设备和存储介质
CN113050693A (zh) * 2021-03-26 2021-06-29 厦门理工学院 一种用于风电叶片检测的无人机巡检方法和装置以及设备

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102010048400A1 (de) * 2010-03-15 2011-09-15 Horst Zell Verfahren zur Überprüfung des baulichen Zustands von Windkraftanlagen
US20120136630A1 (en) * 2011-02-04 2012-05-31 General Electric Company Method and system for wind turbine inspection
CN103154697A (zh) * 2010-09-28 2013-06-12 阿斯特里姆简易股份公司 风轮机叶片的无损检测方法及装置
CN105550670A (zh) * 2016-01-27 2016-05-04 兰州理工大学 一种目标物体动态跟踪与测量定位方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102010048400A1 (de) * 2010-03-15 2011-09-15 Horst Zell Verfahren zur Überprüfung des baulichen Zustands von Windkraftanlagen
CN103154697A (zh) * 2010-09-28 2013-06-12 阿斯特里姆简易股份公司 风轮机叶片的无损检测方法及装置
US20120136630A1 (en) * 2011-02-04 2012-05-31 General Electric Company Method and system for wind turbine inspection
CN102628425A (zh) * 2011-02-04 2012-08-08 通用电气公司 用于风力涡轮机检查的方法和系统
CN105550670A (zh) * 2016-01-27 2016-05-04 兰州理工大学 一种目标物体动态跟踪与测量定位方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
奇俊桐等: "《无人机输电线路巡检与架设技术》", 30 November 2014, 东北大学出版社 *
张梁等: "基于双目视觉的无人飞行器目标跟踪与定位", 《计算机工程及应用》 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108733079A (zh) * 2018-06-19 2018-11-02 上海扩博智能技术有限公司 通过无人机对风机进行自动巡检飞行路径确定方法及系统
CN108733079B (zh) * 2018-06-19 2021-08-10 上海扩博智能技术有限公司 通过无人机对风机进行自动巡检飞行路径确定方法及系统
CN109162879A (zh) * 2018-08-10 2019-01-08 上海扩博智能技术有限公司 通过多传感器控制无人机进行风机叶片检测方法及系统
CN111246162A (zh) * 2019-12-09 2020-06-05 北京金风科创风电设备有限公司 风力发电机组的塔架净空监控设备的位置矫正方法及装置
CN111232234A (zh) * 2020-02-10 2020-06-05 江苏大学 一种飞行器空间实时定位系统的方法
CN111654642A (zh) * 2020-07-22 2020-09-11 上海扩博智能技术有限公司 拍摄风机叶片的曝光值调整方法、系统、设备和存储介质
CN111654642B (zh) * 2020-07-22 2021-10-01 上海扩博智能技术有限公司 拍摄风机叶片的曝光值调整方法、系统、设备和存储介质
CN113050693A (zh) * 2021-03-26 2021-06-29 厦门理工学院 一种用于风电叶片检测的无人机巡检方法和装置以及设备
CN113050693B (zh) * 2021-03-26 2022-04-19 厦门理工学院 一种用于风电叶片检测的无人机巡检方法和装置以及设备

Similar Documents

Publication Publication Date Title
CN108087208A (zh) 基于无人机的风力发电机组叶片跟随方法和装置
CN109002055B (zh) 一种基于无人机的高精度自动巡检方法及系统
CN110633629A (zh) 基于人工智能的电网巡检方法、装置、设备及存储介质
CN108894933B (zh) 通过无人机对风机叶尖跟踪检测时跟丢再捕捉方法及系统
CN106468918B (zh) 一种线路巡检的标准化数据采集方法及系统
CN106762451B (zh) 基于无人机的风机叶片损伤检测方法、装置及系统
CN105739512B (zh) 无人机自动巡检系统及方法
CN112164015A (zh) 单目视觉自主巡检图像采集方法、装置及电力巡检无人机
CN110619678B (zh) 一种基于点云匹配的电力杆塔巡检航迹生成方法
CN112904877A (zh) 一种基于无人机的风机叶片自动巡检系统及方法
CN109660721B (zh) 无人机飞行拍摄质量优化方法、系统、设备及存储介质
CN108594802A (zh) 探测器目标着陆区域确定及避障制导方法与装置
WO2021035731A1 (zh) 无人飞行器的控制方法、装置及计算机可读存储介质
CN115145314B (zh) 基于无人机的风机叶片巡检路径规划方法
WO2021185593A1 (en) Method of imaging a wind turbine rotor blade
CN109327656A (zh) 全景影像的图像采集方法及系统
CN112585956B (zh) 轨迹复演方法、系统、可移动平台和存储介质
CN113987246A (zh) 无人机巡检的图片自动命名方法、装置、介质和电子设备
CN105716584A (zh) 一种带自稳系统的倾斜摄影相机及其控制方法
CN107544547A (zh) 一种无人机全自动单人照拍摄方法
EP2541258A1 (en) Method of and device for capturing 3D data of one or more airborne particles
CN114757454A (zh) 一种风力发电机的无人机巡检航线生成方法、装置及设备
CN114900609A (zh) 一种无人机的自动化拍摄控制方法和系统
CN114066981A (zh) 一种无人机对地目标定位方法
CN113028897A (zh) 图像导引方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180529

RJ01 Rejection of invention patent application after publication