CN110799923B - 兴趣点环绕飞行的方法及控制终端 - Google Patents

兴趣点环绕飞行的方法及控制终端 Download PDF

Info

Publication number
CN110799923B
CN110799923B CN201880042185.9A CN201880042185A CN110799923B CN 110799923 B CN110799923 B CN 110799923B CN 201880042185 A CN201880042185 A CN 201880042185A CN 110799923 B CN110799923 B CN 110799923B
Authority
CN
China
Prior art keywords
aircraft
control terminal
target
point
interest
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201880042185.9A
Other languages
English (en)
Other versions
CN110799923A (zh
Inventor
刘雨奇
邬梁爽
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Original Assignee
SZ DJI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SZ DJI Technology Co Ltd filed Critical SZ DJI Technology Co Ltd
Publication of CN110799923A publication Critical patent/CN110799923A/zh
Application granted granted Critical
Publication of CN110799923B publication Critical patent/CN110799923B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/10—Simultaneous control of position or course in three dimensions
    • G05D1/101—Simultaneous control of position or course in three dimensions specially adapted for aircraft
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/10—Simultaneous control of position or course in three dimensions
    • G—PHYSICS
    • G08—SIGNALLING
    • G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种兴趣点环绕飞行的方法，包括：通过视觉图像识别获取所述飞行器当前位置视觉图像，显示在所述控制终端界面，并确定所述飞行器当前位置视觉图像中的目标兴趣点(S1)；测算飞行器当前位置与所述目标兴趣点之间的距离，并根据该距离生成所述飞行器环绕飞行的初始半径，控制飞行器以所述半径进行兴趣点环绕飞行(S2)。

Description

兴趣点环绕飞行的方法及控制终端
技术领域
本发明涉及无人机领域，尤其涉及一种无人机兴趣点环绕飞行的方法及控制终端。
背景技术
无人机在航拍、航测、灾情调查和救援、输电线路巡检以及军事领域有着广泛的应用前景。目前在无人机的遥控过程中，操作者通常需要无人机对一些兴趣点(例如输电线路故障点、灾难频发点、事故发生点等)作为绕点飞行监控。现有技术中，需要无人机飞到兴趣点后操作者使用遥控器进行打点等复杂操作，因此要求操作者具备良好的操作技能，降低了操作者的用户体验。
发明内容
本发明实施例提供一种兴趣点环绕飞行的方法及控制终端，以提高兴趣点环绕飞行的智能化程度，简化和方便用户操作，提升用户体验。
本发明实施例的第一方面提供了一种无人兴趣点环绕飞行的方法，包括：
通过视觉图像识别获取所述飞行器当前位置视觉图像，并显示在所述控制终端界面；
确定所述飞行器当前位置视觉图像中的目标兴趣点，测算飞行器当前位置与所述目标兴趣点之间的距离，并根据该距离生成所述飞行器环绕飞行的初始半径，控制飞行器以所述初始半径进行兴趣点环绕飞行。
本发明实施例的第二方面提供了一种兴趣点环绕飞行的控制终端，其中，包括：
存储器和处理器，其中，
所述存储器，用于存储可执行指令；
所述处理器，用于执行所述存储器中存储的所述可执行指令，以执行如下操作：
通过视觉图像识别获取所述飞行器当前位置视觉图像，并显示在所述控制终端界面；
确定目标兴趣点，测算飞行器当前位置与所述目标兴趣点之间的距离，并根据该距离生成所述飞行器环绕飞行的初始半径，控制飞行器以所述初始半径进行兴趣点环绕飞行。
本发明实施例的第三方面提供了一种计算机可读存储介质，其存储有可执行指令，所述可执行指令在由一个或多个处理器执行时，可以使所述一个或多个处理器执行如第一方面所述的兴趣点环绕飞行的方法。
本发明实施例的第四方面提供了一种无人机，包括如第二方面所述的兴趣点环绕飞行的控制装置。
本发明实施例中，在进行兴趣点环绕飞行时，通过视觉图像可以自动智能测算出目标距离，不需要用户进行位置打点等复杂操作，使得用户操作方便、快捷，提升了用户操作体验。
附图说明
附图是用来提供对本发明的进一步理解，并且构成说明书的一部分，与下面的具体实施方式一起用于解释本发明，但并不构成对本发明的限制。
在附图中：
图1为本发明实施例兴趣点环绕飞行的方法的流程图。
图2为本发明一实施例中选择目标兴趣点的操作界面示意图。
图3为传统的位置打点方式的示意图。
图4为本发明实施例智能测算环绕飞行初始半径的示意图。
图5为本发明一实施例中在控制终端操作界面滑动调节参数示意图。
图6为本发明一实施例中通过遥控器打杆调节参数的示意图。
图7为本发明实施例兴趣点环绕飞行的控制装置的示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
需要说明的是，当一个组件被认为是“连接”另一个组件，它可以是直接连接到另一个组件或者可能同时存在居中组件。当一个组件从另外一个组件“获取”数据时，这里的获取可以是一个组件从所述另外一个组件直接通信以获取数据，也可能是一个组件通过其他的组件从所述另外一个组件获取数据。
除非另有定义，本文所使用的所有的技术和科学术语与属于本发明的技术领域的技术人员通常理解的含义相同。本文中在本发明的说明书中所使用的术语只是为了描述具体的实施例的目的，不是旨在于限制本发明。本文所使用的术语“及/或”包括一个或多个相关的所列项目的任意的和所有的组合。
下面结合附图，对本发明的一些实施方式作详细说明。在不冲突的情况下，下述的实施例及实施例中的特征可以相互组合。
目前，无人机进行兴趣点环绕飞行时需要用到遥控器的按钮来进行打点，同时需要边操作摇杆边操作手机上的应用程序界面。为解决上述问题，本发明实施例提供一种兴趣点环绕飞行的方法，可智能测算出目标距离，下面将进行详细解释。
本发明一实施例提供了一种兴趣点环绕飞行的方法，本实施例中环绕飞行的飞行器以无人机为例进行详细说明。图1是本发明实施例兴趣点环绕飞行的方法的流程图。以下对所述兴趣点环绕飞行的方法进行详细的说明。
步骤S101：通过视觉图像识别获取所述无人机当前位置视觉图像，并显示在所述控制终端界面，确定所述无人机当前位置视觉图像中的目标兴趣点。
具体地，所述方法的执行主体可以为无人机的控制终端。进一步地，所述方法的执行主体可以为所述无人机的控制终端的处理器，其中，所述处理器可以为通用或者专用处理器，所述处理器可以为一个或多个，所述一个或多个处理器单独或协同地工作。一般地，所述控制终端为手机和/或遥控器或专用的控制装置。
无人机上配置有视觉图像识别装置，其中，所述视觉图像识别装置的摄像装置用于拍摄无人机当前视觉范围内的环境图像，并将所述环境图像发送至无人机的控制终端。控制终端首先需要与无人机对频连接，连接成功后在控制终端界面显示FPV信息，并设置无人机进入POI(point of interest，兴趣点)模式，并对无人机的飞行高度、返航高度及速度进行预设。
当无人机处于多目标追踪模式时，所述视觉图像识别装置的处理单元对拍摄的图像进行自动识别，并对其中的各种事物和人进行分类，将识别结果发送至无人机的控制终端。通过视觉图像的自动识别，使得图像中的事物显示更加直观，可以方便用户更快速的选定目标兴趣点。
无人机的控制终端在接收到无人机当前环境图像后，将其显示在控制终端界面上。具体地，用户可以在控制终端选中目标兴趣点作为环绕的中心点。
在某些情况中，所述控制终端仅接收视觉图像识别装置发送的视觉范围内的图像信息时，用户可以在控制终端界面显示的图像上采用直接框选或画圈等方式选定以范围，并将该范围确定为目标兴趣点，作为环绕飞行的中心点。
可选地，例如当无人机处于多目标追踪模式时，所述控制终端接收视觉图像识别装置发送的图像信息及自动识别结果，基于所述视觉范围内的物体及其类型的自动识别结果，用户在控制终端界面的选中目标物体的操作以确定目标兴趣点。具体地，所述选中目标物体以确定目标兴趣点的方式包括：单击目标物体选定、双击目标物体选定、长按目标物体、滑动选定、画圈选定及语音指令选定等。
在某些情况中，无人机受控开启多目标追踪模式，对视觉范围内的物体进行自动识别，控制终端接收视觉图像识别装置发送的图像信息及自动识别结果，并将图像显示在控制终端界面上，同时图像上的物体自动显示识别框，标注识别出的物体的类型。用户可以根据识别框选中感兴趣的目标兴趣点作为环绕飞行的中心，该点可以输电线路故障点、灾难频发点、事故发生点等，通过无人机配备的摄像装置，可以360°环绕拍摄的兴趣中心点物体，或者。选中操作可以采用在控制终端界面单击目标物体选定、双击目标物体选定、长按目标物体、滑动选定等，或直接通过用户发出的语音指令进行选定。
可选地，在选中目标兴趣点的操作成功后，控制终端给出目标兴趣点的确认信息，所述目标兴趣点的确认信息包括该目标的位置和/或类型。在上述情况中，如果选中目标兴趣点的操作失败，则控制终端给出失败状态的提示。
图2(a)-2(c)为本发明一实施例中选择目标兴趣点的操作界面示意图。如图2(a)-2(b)所示，首先设置无人机进入兴趣点环绕模式，用户选定利用无人机视觉图像打点的模式，此时控制终端接收视觉图像识别装置发送的图像信息，并且自动识别图像范围内的人物，当视觉图像范围内出现目标人物时，用户在控制终端界面滑动框选目标人物，作为目标兴趣点。继续参考图2(c)，确认选定成功后，用户可以在控制终端界面选择GO按钮确认，控制无人机开始环绕飞行。
步骤S102：测算无人机当前位置与所述目标兴趣点之间的距离，并根据该距离生成所述无人机环绕飞行的初始半径，控制无人机以所述初始半径进行兴趣点环绕飞行。
传统的确定兴趣点的方法是，无人机飞到兴趣点后操作者使用遥控器按键进行打点等复杂操作，如图3所示，此时用户需要同时操作遥控器按键与应用程序界面，因此带来了操作的不便。但在本实施例中，利用无人机的视觉图像计算，在无人机的视觉范围内出现目标兴趣点后，用户通过控制终端对目标兴趣点进行选中并确认后，根据视觉图像智能测算与目标兴趣点的距离，即可开始环绕飞行，因此无需无人机飞到目标兴趣点的位置再通过遥控器按键打点，降低了用户的操作复杂程度。
具体地，测算无人机当前位置与所述目标兴趣点之间的距离时，需要先获取无人机当前的GPS坐标，作为无人机位置。无人机上配置有GPS定位系统，通过GPS定位系统提供的当前坐标，确定无人机当前位置。在其他一些实施例中，所述无人机还可以配置其他定位系统，具体的定位精度可以根据需要进行选择。无人机根据定位系统提供的坐标作为无人机当前位置坐标。
确定无人机当前位置坐标后，需要测算无人机与目标兴趣点的相对距离。具体地，根据视觉图像识别中每帧图像的差异对无人机与所述目标兴趣点的相对位置进行估计，进一步根据之前获得的无人机当前位置坐标确定所述目标兴趣点的虚拟坐标，作为目标位置。
图4为本发明实施例智能测算环绕飞行初始半径的示意图。如图4所示，无人机飞行过程中，其飞行高度与选定的目标兴趣点可能会存在一定的高度差Δh，该高度差Δh与两者间的距离D以及距离的水平投影R0构成一直角三角形。进一步地，根据视觉图像识别中每帧图像的差异对无人机与所述目标兴趣点的相对位置进行估计时，根据视觉图像对无人机与所述目标兴趣点的距离D及高度差Δh进行计算，并根据勾股定理可以计算得出所述目标位置在水平面投影与无人机位置在水平面投影之间的距离R0。将该距离R0作为所述无人机初始半径开始环绕飞行。
上述情况中，当测算无人机当前位置与所述目标兴趣点之间的距离失败时，将测算失败的状态提示显示在控制终端界面。所述状态提示可以为无人机位置信息获取失败或目标位置信息获取失败。用户在获取失败状态信息后可对无人机状态进行调试或进行再次尝试。
若测算成功，则无人机开始以初始半径环绕飞行，用户可以通过控制终端的操作调节无人机环绕飞行的参数。
可选地，所述通过控制终端的操作调节无人机环绕飞行的参数包括：根据拖动控制终端界面的滑条的操作控制无人机环绕飞行的参数，所述无人机环绕飞行的参数包括环绕半径、环绕高度、环绕方向及环绕速度中的至少一种。采用控制终端滑动控制无人机环绕飞行的参数，可以有效地简化用户操作，避免用户在操作应用程序界面的同时，还需要通过遥控器打杆等操作控制无人机的绕飞参数；同时，更加直观地展示了无人机的实时绕飞状态，进一步提升了用户体验。
图5为本发明实施例中在控制终端操作界面滑动调节参数示意图。如图5所示，在无人机绕飞过程中，可以通过在控制终端操作界面拖动滑条调节无人机环绕飞行的参数的大小，包括环绕半径、高度、速度及返航高度的调节，从而改变无人机的飞行轨迹，同时，在控制终端操作界面实时模拟无人机的飞行轨迹。可以理解，除滑动调节外，也可以通过其他如输入参数、控制增/减按钮等方式调节。
在其他一些实施例中，通过控制终端的操作调节无人机环绕飞行的参数时，还可以采用遥控器打杆或拨轮调节环绕半径、环绕高度、环绕方向及环绕速度中的至少一种。例如，采用遥控器的拨轮进行环绕方向控制时，设置拨轮按照第一方向进行滑动时，无人机顺时针环绕飞行；设置拨轮按照第二方向进行滑动时，无人机逆时针环绕飞行。
图6为本发明实施例中通过遥控器打杆调节参数的示意图。如图6所示，在无人机绕飞过程中，可以通过遥控器打杆调节无人机环绕飞行的，同时控制终端操作界面显示模拟的遥控器打杆量和无人机的飞行轨迹，便于用户更直观地控制无人机飞行轨迹。
特别地，所述无人机通过视觉图像识别获取所述无人机当前位置视觉图像之前，控制终端与无人机对频连接成功后，通过控制终端界面可以对无人机飞行高度、返航高度及速度进行预设。
本发明另一实施例提供了一种兴趣点环绕飞行的控制终端，其中，图7为本发明实施例无人机的兴趣点环绕飞行的控制终端的示意图。本实施例兴趣点环绕飞行的控制终端可以包括电源模块，各种接口模块等，其中，所述兴趣点环绕飞行的控制终端包括遥控器、智能手机、台式电脑、膝上型电脑、穿戴式设备中的一种或多种。如图7所示，本实施例中，所示兴趣点环绕飞行的控制终端700还包括：存储器701及处理器702。
所述存储器701可以包括易失性存储器(volatile memory)，例如随机存取存储器701(random-access memory，RAM)；存储器701也可以包括非易失性存储器(non-volatilememory)，例如快闪存储器(flash memory)，硬盘(hard disk drive，HDD)或固态硬盘(solid-state drive，SSD)；存储器701还可以包括上述种类的存储器的组合。
所述处理器702可以是中央处理器(central processing unit，缩写：CPU)。所述处理器702还可以进一步包括硬件芯片。上述硬件芯片可以是专用集成电路(applicationspecific integrated circuit，ASIC)，可编程逻辑器件(programmablelogic device，PLD)或其组合。上述PLD可以是复杂可编程逻辑器件(complexprogrammable logic device，CPLD)，现场可编程逻辑门阵列(field-programmable gatearray，FPGA)，通用阵列逻辑(generic array logic，GAL)或其任意组合。
可选地，所述存储器701还用于存储程序指令。所述处理器702可以调用所述程序指令，实现如图1所对应实施例中所示相关方法。
具体地，所述处理器702，用于执行所述存储器701中存储的所述可执行指令，以执行如下操作：
通过视觉图像识别获取所述飞行器当前位置视觉图像，并显示在所述控制终端界面，并确定所述飞行器当前位置视觉图像中的目标兴趣点；
测算飞行器当前位置与所述目标兴趣点之间的距离，并根据该距离生成所述飞行器环绕飞行的初始半径，控制飞行器以所述初始半径进行兴趣点环绕飞行。
进一步地，所述处理器702确定目标兴趣点时，具体用于：根据在所述控制终端界面的点击或框选操作确定目标兴趣点。
具体地，所述处理器702还用于：在飞行器进行所述视觉图像识别时，启用多目标追踪模式，对视觉范围内的物体及其类型进行自动识别，并显示自动识别结果在控制终端界面。
进一步地，所述处理器702确定目标兴趣点时，具体用于：基于所述视觉范围内的物体及其类型的自动识别结果，根据在控制终端界面的选中目标物体的操作以确定目标兴趣点。
可选地，所述点击目标物体确定目标兴趣点的操作方式包括：单击目标物体选定、双击目标物体选定或长按目标物体选定、滑动选定、画圈选定及语音指令选定。
所述处理器702测算飞行器当前位置与所述目标兴趣点之间的距离，并根据该距离生成所述飞行器环绕飞行的初始半径时，具体用于：
获取飞行器当前的GPS坐标，作为飞行器位置；
根据视觉图像识别中每帧图像的差异对与所述目标兴趣点的相对位置进行估计，进一步根据飞行器的GPS坐标确定所述目标兴趣点虚拟的GPS坐标，作为目标位置；
确定所述目标位置在水平面投影与飞行器位置在水平面投影之间的距离，作为所述飞行器环绕飞行的初始半径。
进一步地，所述处理器702还用于：
通过视觉图像计算飞行器与目标兴趣点之间的高度差及距离，利用飞行器的GPS坐标，确定所述目标兴趣点虚拟的GPS坐标。
可选地，所述处理器702还用于：当测算飞行器当前位置与所述目标兴趣点之间的距离失败时，将测算失败的状态提示显示在控制终端界面。
具体地，所述状态提示包括：飞行器位置信息获取失败或目标位置信息获取失败。
进一步可选地，所述处理器702还用于：在控制飞行器以所述初始半径进行兴趣点环绕飞行后，根据控制终端的操作调节飞行器环绕飞行的参数。
所述处理器702通过控制终端的操作调节飞行器环绕飞行的参数时，具体用于：根据拖动控制终端界面的滑条的操作控制飞行器环绕飞行的参数。
具体地，所述飞行器环绕飞行的参数包括环绕半径、环绕高度、环绕方向及环绕速度中的至少一种。
特别地，所述处理器702还用于：在通过视觉图像识别获取所述飞行器当前位置视觉图像之前，与飞行器实现对频连接，连接成功后将FPV信息显示在控制终端界面，并设置飞行器进入POI模式。
进一步地，所述处理器702还用于：在通过视觉图像识别获取所述飞行器当前位置视觉图像之前，与飞行器实现对频连接，连接成功后，根据控制终端界面的操作对飞行器飞行高度、返航高度及速度进行预设。
在其他实施例中，所述处理器702通过控制终端的操作调节飞行器环绕飞行的参数时，具体用于：根据遥控器打杆或拨轮的操作调节环绕半径、环绕高度、环绕方向及环绕速度中的至少一种。
可以理解的是，本发明实施例提供的控制终端的具体原理和解释可以参见如图1所述的兴趣点环绕飞行方法中的相关部分，此处不再赘述。
本发明另一实施例提供了一种计算机可读存储介质，其中，其存储有可执行指令，所述可执行指令在由一个或多个处理器执行时，可以使所述一个或多个处理器执行图1所对应的实施例中的无人机的飞行日志处理方法。
本发明又一实施例提供一种无人机，其包括图5所对应的实施例中的兴趣点环绕飞行的控制终端。
以上对本发明的实施例进行了描述。但是，这些实施例仅仅是为了说明的目的，而并非为了限制本发明的范围。尽管在以上分别描述了各实施例，但是这并不意味着各个实施例中的措施不能有利地结合使用。本发明的范围由所附权利要求及其等同物限定。不脱离本发明的范围，本领域技术人员可以做出多种替代和修改，这些替代和修改都应落在本发明的范围之内。

Claims (32)

1.一种兴趣点环绕飞行的方法，其特征在于，包括：
通过视觉图像识别获取飞行器当前位置视觉图像，显示在控制终端界面，并确定所述飞行器当前位置视觉图像中的目标兴趣点；
测算飞行器当前位置与所述目标兴趣点之间的距离，并根据该距离生成所述飞行器环绕飞行的初始半径，控制飞行器以所述初始半径进行兴趣点环绕飞行；
其中，基于对所述飞行器的视觉范围内的物体的自动识别，显示多个自动识别结果，所述自动识别结果能够用于所述目标兴趣点的选择；
确定目标兴趣点包括：根据在所述控制终端界面上显示的多个自动识别结果的选中操作确定目标兴趣点。
2.根据权利要求1所述的方法，其特征在于，所述基于对所述飞行器的视觉范围内的物体的自动识别，显示自动识别结果包括：
基于对所述飞行器的视觉范围内的物体及其类型的自动识别，显示自动识别结果。
3.根据权利要求2所述的方法，其特征在于，所述确定目标兴趣点包括：基于所述视觉范围内的物体及其类型的自动识别结果，根据在控制终端界面的选中目标物体的操作以确定目标兴趣点。
4.根据权利要求3所述的方法，其特征在于，所述选中目标物体的操作以确定目标兴趣点的方式至少包括以下中的一种：单击目标物体选定、双击目标物体选定、长按目标物体、滑动选定、画圈选定及语音指令选定。
5.根据权利要求1所述的方法，其特征在于，所述测算飞行器当前位置与所述目标兴趣点之间的距离，并根据该距离生成所述飞行器环绕飞行的初始半径，包括：
获取飞行器当前的GPS坐标，作为飞行器位置；
根据视觉图像识别中每帧图像的差异对与所述目标兴趣点的相对位置进行估计，进一步根据飞行器的GPS坐标确定所述目标兴趣点虚拟的GPS坐标，作为目标位置；
确定所述目标位置在水平面投影与飞行器位置在水平面投影之间的距离，作为所述飞行器环绕飞行的初始半径。
6.根据权利要求5所述的方法，其特征在于，所述方法还包括：通过视觉图像计算飞行器与目标兴趣点之间的高度差及距离，利用飞行器的GPS坐标，确定所述目标兴趣点虚拟的GPS坐标。
7.根据权利要求1所述的方法，其特征在于，所述方法还包括：当测算飞行器当前位置与所述目标兴趣点之间的距离失败时，将测算失败的状态提示显示在控制终端界面。
8.根据权利要求7所述的方法，其特征在于，所述状态提示包括：飞行器位置信息获取失败或目标位置信息获取失败。
9.根据权利要求1所述的方法，其特征在于，在以所述初始半径进行兴趣点环绕飞行后，还包括：通过控制终端的操作调节飞行器环绕飞行的参数。
10.根据权利要求9所述的方法，其特征在于，所述通过控制终端的操作调节飞行器环绕飞行的参数包括：根据拖动控制终端界面的滑条的操作控制飞行器环绕飞行的参数。
11.根据权利要求9或10所述的方法，其特征在于，所述飞行器环绕飞行的参数包括环绕半径、环绕高度、环绕方向及环绕速度中的至少一种。
12.根据权利要求1所述的方法，其特征在于，所述通过视觉图像识别获取所述飞行器当前位置视觉图像之前，还包括：控制终端与飞行器对频连接，连接成功后在控制终端界面显示FPV信息，并设置飞行器进入兴趣点模式。
13.根据权利要求1所述的方法，其特征在于，所述通过视觉图像识别获取所述飞行器当前位置视觉图像之前，还包括：控制终端与飞行器对频连接，连接成功后，通过控制终端界面对飞行器飞行高度、返航高度及速度进行预设。
14.根据权利要求9所述的方法，其特征在于，通过控制终端的操作调节飞行器环绕飞行的参数还包括：通过遥控器打杆或拨轮调节环绕半径、环绕高度、环绕方向及环绕速度中的至少一种。
15.根据权利要求1所述的方法，其特征在于，所述控制终端为手机和/或遥控器。
16.一种兴趣点环绕飞行的控制终端，其中，包括：存储器和处理器，其中，
所述存储器，用于存储可执行指令；
所述处理器，用于执行所述存储器中存储的所述可执行指令，以执行如下操作：
通过视觉图像识别获取飞行器当前位置视觉图像，显示在控制终端界面，并确定所述飞行器当前位置视觉图像中的目标兴趣点；
测算飞行器当前位置与所述目标兴趣点之间的距离，并根据该距离生成所述飞行器环绕飞行的初始半径，控制飞行器以所述初始半径进行兴趣点环绕飞行；
所述处理器还用于：基于对所述飞行器的视觉范围内的物体的自动识别，显示多个自动识别结果在控制终端界面，所述自动识别结果能够用于所述目标兴趣点的选择；
所述处理器确定目标兴趣点时，具体用于：根据在所述控制终端界面上显示的多个自动识别结果的点击或框选操作确定目标兴趣点。
17.根据权利要求16所述的控制终端，其特征在于，所述处理器基于对所述飞行器的视觉范围内的物体的自动识别，显示自动识别结果在控制终端界面时，具体用于：
基于对所述飞行器的视觉范围内的物体及其类型的自动识别，显示自动识别结果在控制终端界面。
18.根据权利要求17所述的控制终端，其特征在于，所述处理器确定目标兴趣点时，具体用于：基于所述视觉范围内的物体及其类型的自动识别结果，根据在控制终端界面的选中目标物体的操作以确定目标兴趣点。
19.根据权利要求18所述的控制终端，其特征在于，所述选中目标物体的操作以确定目标兴趣点的操作方式至少包括以下中的一种：单击目标物体选定、双击目标物体选定或长按目标物体选定、滑动选定、画圈选定及语音指令选定。
20.根据权利要求16所述的控制终端，其特征在于，所述处理器测算飞行器当前位置与所述目标兴趣点之间的距离，并根据该距离生成所述飞行器环绕飞行的初始半径时，具体用于：
获取飞行器当前的GPS坐标，作为飞行器位置；
根据视觉图像识别中每帧图像的差异对与所述目标兴趣点的相对位置进行估计，进一步根据飞行器的GPS坐标确定所述目标兴趣点虚拟的GPS坐标，作为目标位置；
确定所述目标位置在水平面投影与飞行器位置在水平面投影之间的距离，作为所述飞行器环绕飞行的初始半径。
21.根据权利要求20所述的控制终端，其特征在于，所述处理器还用于：
通过视觉图像计算飞行器与目标兴趣点之间的高度差及距离，利用飞行器的GPS坐标，确定所述目标兴趣点虚拟的GPS坐标。
22.根据权利要求16所述的控制终端，其特征在于，所述处理器还用于：当测算飞行器当前位置与所述目标兴趣点之间的距离失败时，将测算失败的状态提示显示在控制终端界面。
23.根据权利要求22所述的控制终端，其特征在于，所述状态提示包括：飞行器位置信息获取失败或目标位置信息获取失败。
24.根据权利要求16所述的控制终端，其特征在于，所述处理器还用于：在控制飞行器以所述初始半径进行兴趣点环绕飞行后，根据控制终端的操作调节飞行器环绕飞行的参数。
25.根据权利要求24所述的控制终端，其特征在于，所述处理器通过控制终端的操作调节飞行器环绕飞行的参数时，具体用于：根据拖动控制终端界面的滑条的操作控制飞行器环绕飞行的参数。
26.根据权利要求24或25所述的控制终端，其特征在于，所述飞行器环绕飞行的参数包括环绕半径、环绕高度、环绕方向及环绕速度中的至少一种。
27.根据权利要求16所述的控制终端，其特征在于，所述处理器还用于：在通过视觉图像识别获取所述飞行器当前位置视觉图像之前，与飞行器实现对频连接，连接成功后将FPV信息显示在控制终端界面，并设置飞行器进入兴趣点模式。
28.根据权利要求16所述的控制终端，其特征在于，所述处理器还用于：在通过视觉图像识别获取所述飞行器当前位置视觉图像之前，与飞行器实现对频连接，连接成功后，根据控制终端界面的操作对飞行器飞行高度、返航高度及速度进行预设。
29.根据权利要求24所述的控制终端，其特征在于，所述处理器通过控制终端的操作调节飞行器环绕飞行的参数时，具体用于：根据遥控器打杆或拨轮的操作调节环绕半径、环绕高度、环绕方向及环绕速度中的至少一种。
30.根据权利要求16所述的控制终端，其特征在于，所述控制终端采用手机和/或遥控器。
31.一种计算机可读存储介质，其特征在于，其存储有可执行指令，所述可执行指令在由一个或多个处理器执行时，使所述一个或多个处理器执行如权利要求1-15任一项所述的方法。
32.一种无人机，其特征在于，包括如权利要求16-30任一项所述的兴趣点环绕飞行的控制终端。
CN201880042185.9A 2018-07-20 2018-07-20 兴趣点环绕飞行的方法及控制终端 Active CN110799923B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2018/096446 WO2020014962A1 (zh) 2018-07-20 2018-07-20 兴趣点环绕飞行的方法及控制终端

Publications (2)

Publication Number Publication Date
CN110799923A CN110799923A (zh) 2020-02-14
CN110799923B true CN110799923B (zh) 2023-11-10

Family

ID=69163823

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880042185.9A Active CN110799923B (zh) 2018-07-20 2018-07-20 兴趣点环绕飞行的方法及控制终端

Country Status (2)

Country Link
CN (1) CN110799923B (zh)
WO (1) WO2020014962A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111637871A (zh) * 2020-05-28 2020-09-08 武汉大学 一种基于旋转飞行的无人机相机稳健自检校方法及装置
CN113311861B (zh) * 2021-05-14 2023-06-16 国家电投集团青海光伏产业创新中心有限公司 光伏组件隐裂特性的自动化检测方法及其系统

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103576690A (zh) * 2012-07-25 2014-02-12 深圳市大疆创新科技有限公司 一种无人机遥控方法及设备、无人机
CN104714557A (zh) * 2015-03-26 2015-06-17 清华大学 无人机定点环绕飞行的控制方法
CN105388905A (zh) * 2015-10-30 2016-03-09 深圳一电航空技术有限公司 无人机飞行控制方法及装置
CN105793792A (zh) * 2014-12-25 2016-07-20 深圳市大疆创新科技有限公司 无人机的飞行辅助方法和系统、无人机和移动终端
CN105955292A (zh) * 2016-05-20 2016-09-21 腾讯科技（深圳）有限公司 一种控制飞行器飞行的方法、移动终端、飞行器及系统
WO2016188486A1 (zh) * 2015-05-28 2016-12-01 小米科技有限责任公司 飞行控制方法及装置、电子设备
CN106657779A (zh) * 2016-12-13 2017-05-10 重庆零度智控智能科技有限公司 环绕拍摄方法、装置及无人机
CN106843275A (zh) * 2017-04-01 2017-06-13 成都通甲优博科技有限责任公司 一种无人机定点绕飞方法、装置以及系统
CN107305374A (zh) * 2016-04-22 2017-10-31 优利科技有限公司 无人机航拍系统

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8494297B2 (en) * 2007-04-05 2013-07-23 Adobe Systems Incorporated Automatic detection and mapping of symmetries in an image
US20100228406A1 (en) * 2009-03-03 2010-09-09 Honeywell International Inc. UAV Flight Control Method And System
CN102176206B (zh) * 2011-01-18 2013-08-28 宇龙计算机通信科技(深圳)有限公司 兴趣点周边查找方法及装置
US10012735B1 (en) * 2017-05-04 2018-07-03 Loveland Innovations, LLC GPS offset calibrations for UAVs

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103576690A (zh) * 2012-07-25 2014-02-12 深圳市大疆创新科技有限公司 一种无人机遥控方法及设备、无人机
CN105793792A (zh) * 2014-12-25 2016-07-20 深圳市大疆创新科技有限公司 无人机的飞行辅助方法和系统、无人机和移动终端
CN104714557A (zh) * 2015-03-26 2015-06-17 清华大学 无人机定点环绕飞行的控制方法
WO2016188486A1 (zh) * 2015-05-28 2016-12-01 小米科技有限责任公司 飞行控制方法及装置、电子设备
CN105388905A (zh) * 2015-10-30 2016-03-09 深圳一电航空技术有限公司 无人机飞行控制方法及装置
CN107305374A (zh) * 2016-04-22 2017-10-31 优利科技有限公司 无人机航拍系统
CN105955292A (zh) * 2016-05-20 2016-09-21 腾讯科技（深圳）有限公司 一种控制飞行器飞行的方法、移动终端、飞行器及系统
CN106657779A (zh) * 2016-12-13 2017-05-10 重庆零度智控智能科技有限公司 环绕拍摄方法、装置及无人机
CN106843275A (zh) * 2017-04-01 2017-06-13 成都通甲优博科技有限责任公司 一种无人机定点绕飞方法、装置以及系统

Also Published As

Publication number Publication date
CN110799923A (zh) 2020-02-14
WO2020014962A1 (zh) 2020-01-23

Similar Documents

Publication Publication Date Title
US20200302804A1 (en) Method and device for setting a flight route
EP3869399A2 (en) Vehicle information detection method and apparatus, electronic device, storage medium and program
US20210289141A1 (en) Control method and apparatus for photographing device, and device and storage medium
CN109542119B (zh) 飞行器航线规划方法及系统
US20180046172A1 (en) Method, device and system for presenting operation information of a mobile platform
WO2019144300A1 (zh) 目标检测方法、装置和可移动平台
WO2019080113A1 (zh) 无人机的巡检规划方法、控制终端、无人机及无人机系统
CN110799923B (zh) 兴趣点环绕飞行的方法及控制终端
US20210233529A1 (en) Imaging control method and apparatus, control device, and imaging device
WO2021081774A1 (zh) 一种参数优化方法、装置及控制设备、飞行器
US20200340811A1 (en) Positioning device, positioning method, and program
CN115167529B (zh) 监控方法及系统、无人机、移动终端和存储介质
CN113597568A (zh) 数据处理方法、控制设备及存储介质
CN115164936A (zh) 高精地图制作中用于点云拼接的全局位姿修正方法及设备
CN115327498A (zh) 探测设备的测试方法、系统、存储介质和电子装置
US20210185235A1 (en) Information processing device, imaging control method, program and recording medium
WO2022046227A1 (en) Mixed reality image capture and smart inspection
CN111474916A (zh) 船舶航行自主避碰算法测试方法和装置
CN115082690A (zh) 目标识别方法、目标识别模型训练方法及装置
WO2019082924A1 (ja) 情報処理装置
DE112018007292T5 (de) Datenverarbeitungsvorrichtung, datenverarbeitungsverfahren und aufzeichnungsmedium
CN113920174A (zh) 点云配准方法、装置、设备、介质和自动驾驶车辆
KR20220035063A (ko) 데이터 수집 제어 방법, 장치, 전자 기기 및 매체
US20220166917A1 (en) Information processing apparatus, information processing method, and program
CN107703954B (zh) 用于无人机的目标位置勘测方法、装置及无人机

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant