CN109032184A - 飞行器的飞行控制方法、装置、终端设备及飞行控制系统 - Google Patents

Abstract

本发明实施例涉及飞行器技术领域，公开了一种飞行器的飞行控制方法、装置、终端设备及飞行控制系统。其中，该方法应用于终端设备，终端设备与飞行器通信连接，飞行器包括云台及搭载于云台上的拍摄装置，该方法包括：确定图像中的目标点，所述图像为飞行器在当前位置时所述拍摄装置所拍摄的图像；根据所述目标点确定所述飞行器的飞行方向及所述飞行器的飞行距离；根据所述飞行方向及所述飞行距离，控制所述飞行器的飞行。通过该方法可以准确地控制飞行器飞行至用户输入的目标点，并在飞行器飞行至目标点后即刻控制飞行器停止飞行，从而实现指哪飞哪的飞行控制效果，使得用户不必在飞行器飞行至期望的位置后手动操作使其停止，有效提高用户体验。

Description

飞行器的飞行控制方法、装置、终端设备及飞行控制系统

技术领域

本发明实施例涉及飞行器技术领域，尤其涉及一种飞行器的飞行控制方法、飞行器的飞行控制装置、终端设备，以及飞行控制系统。

背景技术

近年来，飞行器，如无人飞行器(Unmanned Aerial Vehicle，UAV)，简称无人机被应用于各个领域，如航拍、农业、植保、微型自拍、快递运输、灾难救援等等。在飞行器的实际应用中，可以由用户手动输入目标点，通过控制飞行器的飞行，以使飞行器飞往用户所指定的地点，从而完成指定任务，此控制飞行的方法被称为“指点飞行”。以灾难救援为例，利用飞行器的拍摄装置对受灾地区进行航拍及进行受灾人员的搜救等，当发现受灾人员在某地被困住时，可以采用指点飞行功能，由用户在例如飞行器的遥控器的屏幕之类的输入界面用手指输入目标点，通过控制飞行器以使飞行器飞往该目标点，即，受灾人员所在地，以便尽快的对受灾人员提供各种帮助，如投放食物、投放药物等。

在实现本发明过程中，发明人发现相关技术中至少存在如下问题：对于目前的通过指点飞行控制飞行器的飞行，会根据用户输入的目标点，控制飞行器沿着预定的方向一直飞行，但是，当飞行器飞行抵达了目标位置，仍然也不会停止，而是会继续飞行，也就是说，现有的指点飞行功能，仅仅控制飞行器的飞行方向，却不能控制飞行器的飞行距离，在飞行器飞行至期望的位置后，用户仍需再次手动操作飞行器使其停止，所以并不能真正意义上实现指哪飞哪的效果。

发明内容

本申请发明实施例提供一种飞行器的飞行控制方法、飞行器的飞行控制装置、终端设备及飞行控制系统，可以真正实现指哪飞哪的飞行控制效果。

本发明实施例公开了如下技术方案：

第一方面，本发明实施例提供了飞行器的飞行控制方法，应用于终端设备，所述终端设备与所述飞行器通信连接，所述飞行器包括云台及搭载于所述云台上的拍摄装置，所述方法包括：

确定图像中的目标点，所述图像为飞行器在当前位置时所述拍摄装置所拍摄的图像；

根据所述目标点确定所述飞行器的飞行方向及所述飞行器的飞行距离；

根据所述飞行方向及所述飞行距离，控制所述飞行器的飞行。

可选的，根据所述目标点确定所述飞行器的飞行方向，具体包括：

获取所述拍摄装置的焦距；

根据所述目标点确定所述图像的中心点与所述目标点的像素差；

根据所述焦距及所述图像的中心点与所述目标点的像素差，确定所述飞行器的飞行方向。

可选的，所述获取所述拍摄装置的焦距，具体包括：

根据预设的视场角与像素的对应关系，确定所述拍摄装置的视场角所对应的像素；

根据所述拍摄装置的视场角及所述拍摄装置的视场角所对应的像素，确定所述拍摄装置的焦距。

可选的，根据所述目标点确定所述飞行器的飞行距离，具体包括:

获取所述云台的姿态信息；

获取所述飞行器的飞行高度；

根据所述目标点确定所述飞行器的偏转角度，所述偏转角度为所述飞行器的飞行方向相对于所述拍摄装置的光轴方向所偏转的角度；

根据所述姿态信息、所述飞行高度及所述偏转角度，确定所述飞行器的飞行距离。

可选的，所述姿态信息包括姿态角。

可选的，根据所述姿态信息、所述飞行高度及所述偏转角度，确定所述飞行器的飞行距离的计算公式为：

其中，L表示为所述飞行器的飞行距离；θ表示为所述云台的姿态角中的俯仰角；h表示为所述飞行器的飞行高度；α表示为偏转角度。

可选的，所述拍摄装置的光轴方向由所述云台的姿态角中的俯仰角所确定。

可选的，所述确定图像中的目标点，具体包括：

获取用户在所述终端设备的屏幕上所选择的目标点；

将所述所选择的目标点转换为图像中的目标点。

第二方面，本发明实施例提供了一种飞行器的飞行控制装置，配置于终端设备，所述终端设备与所述飞行器通信连接，所述飞行器包括云台及搭载于所述云台上的拍摄装置，所述装置包括：

第一确定模块，用于确定图像中的目标点，所述图像为飞行器在当前位置时所述拍摄装置所拍摄的图像；

第二确定模块，用于根据所述目标点确定所述飞行器的飞行方向；

第三确定模块，用于根据所述目标点确定所述飞行器的飞行距离；

飞行控制模块，用于根据所述飞行方向及所述飞行距离，控制所述飞行器的飞行。

可选的，所述第二确定模块包括：

焦距获取单元，用于获取所述拍摄装置的焦距；

像素差确定单元，用于根据所述目标点确定所述图像的中心点与所述目标点的像素差；

飞行方向确定单元，用于根据所述焦距及所述图像的中心点与所述目标点的像素差，确定所述飞行器的飞行方向。

可选的，所述焦距获取单元具体用于：

根据预设的视场角与像素的对应关系，确定所述拍摄装置的视场角所对应的像素；

根据所述拍摄装置的视场角及所述拍摄装置的视场角所对应的像素，确定所述拍摄装置的焦距。

可选的，所述第三确定模块包括：

姿态信息获取单元，用于获取所述云台的姿态信息；

飞行高度获取单元，用于获取所述飞行器的飞行高度；

偏转角度获取单元，用于根据所述目标点确定所述飞行器的偏转角度，所述偏转角度为所述飞行器的飞行方向相对于所述拍摄装置的光轴方向所偏转的角度；

飞行距离确定单元，用于根据所述姿态信息、所述飞行高度及偏转角度，确定所述飞行器的飞行距离。

可选的，所述姿态信息包括姿态角。

可选的，所述飞行距离确定单元根据所述姿态信息、所述飞行高度及所述偏转角度，确定所述飞行器的飞行距离的计算公式为：

其中，L表示为所述飞行器的飞行距离；θ表示为所述云台的姿态角中的俯仰角；h表示为所述飞行器的飞行高度；α表示为偏转角度。

可选的，所述拍摄装置的光轴方向由所述云台的姿态角中的俯仰角所确定。

可选的，所述第一确定模块具体用于：

获取用户在所述终端设备的屏幕上所选择的目标点；

将所述所选择的目标点转换为图像中的目标点。

第三方面，本发明实施例提供了一种终端设备，包括：

至少一个处理器；以及，

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行如上所述的飞行器的飞行控制方法。

第四方面，本发明实施例提供了一种飞行控制系统，包括：飞行器及如上所述的终端设备，所述终端设备与所述飞行器连接。

第五方面，本发明实施例提供了一种计算机程序产品，所述计算机程序产品包括存储在非易失性计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，使所述计算机执行如上所述的飞行器的飞行控制方法。

第六方面，本发明实施例还提供了一种非易失性计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令用于使计算机执行如上所述的飞行器的飞行控制方法。

本发明实施例，首先确定图像中的目标点，然后根据目标点确定飞行器的飞行方向及飞行器的飞行距离，基于飞行方向及飞行距离来控制飞行器的飞行，以使飞行器飞往所确定的图像中的目标点在实际场景空间下所对应的点，从而可以准确地控制飞行器飞行至用户输入的目标点，并在飞行器飞行至目标点后即刻控制飞行器停止飞行，真正实现指哪飞哪的飞行控制效果，使得用户不必在飞行器飞行至期望的位置后再次手动操作飞行器使其停止，方便了用户的操作，也减少飞行器飞丢的可能性，有效提高用户体验。

附图说明

一个或多个实施例通过与之对应的附图中的图片进行示例性说明，这些示例性说明并不构成对实施例的限定，附图中具有相同参考数字标号的元件表示为类似的元件，除非有特别申明，附图中的图不构成比例限制。

图1是本发明实施例提供的一种飞行器的飞行控制方法的应用环境的示意图；

图2是本发明实施例提供的一种飞行器的飞行控制方法的另一应用环境的示意图；

图3是本发明实施例提供的一种飞行器的飞行控制方法的流程示意图；

图4是本发明实施例提供的计算飞行距离的示意图；

图5是本发明实施例提供的根据所述目标点确定所述飞行器的飞行方向的流程示意图；

图6是本发明实施例提供的根据所述目标点确定所述飞行器的飞行距离的流程示意图；

图7是本发明实施例提供的一种飞行器的飞行控制装置的示意图；

图8是本发明实施例提供的一种终端设备的硬件结构示意图；

图9是本发明实施例提供的一种飞行控制系统的示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

此外，下面所描述的本发明各个实施方式中所涉及到的技术特征只要彼此之间未构成冲突就可以相互组合。

图1为本发明提供的飞行器的飞行控制方法的其中一种应用环境的示意图。其中，该应用环境中包括：飞行器10、终端设备20以及用户(图未示)。其中，该终端设备20与该飞行器10通信连接，以实现与该飞行器10之间的数据或信息等的传输。该用户可以手持该终端设备20，以对该终端设备20进行各种操作等。

该飞行器10可用于拍摄图像(或视频、影像或画面)等，并将所拍摄的图像传输至终端设备20，以便在该终端设备20的屏幕上显示飞行器10所拍摄的图像。当用户手持该终端设备20时，用户可以通过点击或触摸终端设备20的屏幕上的任意一点，作为飞行器10飞行的目标点。当用户在终端设备20的屏幕上选择某一点后，终端设备20可以经过处理得到用户在所述终端设备20的屏幕上所选择的目标点的坐标，再通映射关系将所选择的目标点的坐标转换为图像中的目标点的坐标，从而确定图像中的目标点。终端设备20在确定图像中的目标点，再结合飞行器10的状态参数(如飞行器的云台的姿态信息、飞行器的飞行高度)及飞行器10的固定参数(如飞行器的拍摄装置的焦距)，便可确定飞行器10飞行方向及飞行距离，从而控制飞行器10飞往图像中的目标点在实际场景空间下所对应的点，从而可以准确地控制飞行器飞行至用户输入的目标点，并在飞行器飞行至目标点后即刻控制飞行器停止飞行，以达到指哪飞哪的飞行控制效果，使得用户不必在飞行器飞行至期望的位置后再次手动操作飞行器使其停止，方便了用户的操作，也减少飞行器飞丢的可能性，有效提高用户体验。

对于目前的飞行器的飞行控制，大部分是通过操作遥控器的摇杆来控制飞行器的飞行(如上下、左右、前后、旋转等飞行)，当要使飞行器飞往指定地点时，需要频繁的操作遥控器的摇杆，操作繁琐。为了降低操作的繁琐，可以采用指点飞行技术来控制飞行器的飞行。通过指点飞行技术虽然可以避免频繁的操作遥控器的摇杆，但是在目前的指点飞行技术中，当用户通过终端设备(例如，遥控器)的屏幕选择一个目标点后，终端设备会将用户输入的目标点在进行数据处理后下发给飞行器的视觉模块，由视觉模块通过接收到的数据信息结合所选择的坐标点计算出目标物的具体方位，并让飞行器按计算出的方位去飞行。飞行器并不能计算出目标物具体深度信息(如飞行距离)。因此，飞行器会沿着预定的方向一直飞行，即使飞行器到达了目标位置也不会停止，而还是继续飞行，并不能真正的实现指哪飞哪的效果。并且，若飞行器一直沿着预定的方向继续飞行还可能存在飞行器飞丢的风险。

与上述两种飞行控制方式相比，本发明实施例所提供的控制飞行的方式一方面无需频繁的操作遥控器的摇杆，降低了控制飞行器10的飞行的操作繁琐度，提高用户体验。另一方面，根据所述飞行方向及所述飞行距离控制所述飞行器10的飞行，以使飞行器10飞往图像中的目标点在实际场景空间下所对应的点，不但控制了飞行器10飞行的方向，还控制了飞行器10所需飞行的距离，以达到指哪飞哪的飞行控制效果，使得用户不必在飞行器10飞行至期望的位置后再次手动操作飞行器10使其停止，方便了用户的操作，也减少飞行器10飞丢的可能性，有效提高用户体验。

下面分别对飞行器10及终端设备20进行具体描述。

该飞行器10可以为任何合适的飞行的器械，例如，飞行器10可以为无人机、无人船或其它可移动装置等等。以下对本发明的描述使用无人机(Unmanned Aerial Vehicle，UAV)作为飞行器10的示例。无人机是由遥控设备或自备程序控制装置操纵，带任务载荷的不载人航空器。该无人机可以为各种类型的无人机，例如，该无人机可以是旋翼飞行器(rotorcraft)，例如，由多个推动装置通过空气推动的多旋翼飞行器，本发明的实施例并不限于此，无人机也可以是其它类型的无人机，如固定翼无人机、无人飞艇、伞翼无人机、扑翼无人机等等。

无人机包括但不限于：机身、动力系统、飞控组件、云台、拍摄装置、图传模块等。其中，飞控组件、图传模块设置于机身内，动力系统、云台均安装于机身上，拍摄装置搭载于云台上。飞控组件可以与动力系统、云台、拍摄装置、图传模块进行耦合，以实现通信。

机身可以包括中心架以及与中心架连接的一个或多个机臂，一个或多个机臂呈辐射状从中心架延伸出。该机臂的数量可以为2个、4个、6个等等。一个或多个机臂用于承载动力系统。

动力系统可以包括电子调速器(简称为电调)、一个或多个螺旋桨以及与一个或多个螺旋桨相对应的一个或多个第一电机，其中第一电机连接在电子调速器与螺旋桨之间，第一电机和螺旋桨设置在对应的机臂上；电子调速器用于接收飞控组件产生的驱动信号，并根据驱动信号提供驱动电流给第一电机，以控制第一电机的转速。第一电机用于驱动螺旋桨旋转，从而为无人机的飞行提供动力，该动力使得无人机能够实现一个或多个自由度的运动，如前后运动、上下运动等等。在某些实施例中，无人机可以围绕一个或多个旋转轴旋转。例如，上述旋转轴可以包括横滚轴、平移轴和俯仰轴。可以理解的是，第一电机可以是直流电机，也可以交流电机。另外，第一电机可以是无刷电机，也可以有刷电机。

飞控组件具有对无人机的飞行和任务进行监控和操纵的能力，包含对无人机发射和回收控制的一组设备。飞控组件用于实现对无人机的飞行的控制。飞控组件可以包括飞行控制器和传感系统。传感系统用于测量无人机及无人机的各个部件的位置信息和状态信息等等，例如，三维位置、三维角度、三维速度、三维加速度和三维角速度、飞行高度等等。传感系统例如可以包括红外传感器、声波传感器、陀螺仪、电子罗盘、惯性测量单元(InertialMeasurement Unit，IMU)、视觉传感器、全球导航卫星系统和气压计等传感器中的至少一种。例如，全球导航卫星系统可以是全球定位系统(Global Positioning System，GPS)。飞行控制器用于控制无人机的飞行。可以理解的是，飞行控制器可以按照预先编好的程序指令对无人机进行控制，也可以通过响应来自其它设备的一个或多个控制指令对无人机进行控制。例如，终端设备20根据飞行方向及飞行距离生成的控制指令，并将该控制指令发送给飞行控制器，飞行控制器接收该控制指令，以通过该控制指令控制无人机的飞行；或者，飞行控制器接收终端设备20发送的飞行方向及飞行距离，并根据飞行方向及飞行距离生成的控制指令，通过该控制指令控制无人机的飞行。

云台用于搭载拍摄装置。云台上设置有第二电机，飞控组件可以控制云台，具体的控制第二电机的运动(如转速)，来调节无人机拍摄的图像的角度。其中，第二电机可以是无刷电机，也可以有刷电机。云台可以位于机身的顶部，也可以位于机身的底部。另外，在本发明实施例中，云台作为无人机的一部分，可以理解的是，在一些其它实施例中，云台可以独立于无人机。

拍摄装置可以是照相机、拍照手机或摄像机等用于采集图像的装置，拍摄装置可以与飞控组件通信，并在飞控组件的控制下进行拍摄。例如，飞控组件控制拍摄装置拍摄图像的拍摄频率，也即每单位时间内拍摄多少次。或者，飞控组件通过云台控制拍摄装置的拍摄图像的角度。

图传模块用于将天空中处于飞行状态的无人机的拍摄装置所拍摄的图像、画面或视频等实时稳定的发射给地面无线图传接收设备，如终端设备20等。

可以理解的是，上述对于无人机各组成部分的命名仅是出于标识的目的，并不应理解为对本发明的实施例的限制。

终端设备20可以为任何合适的电子设备。例如，智能手机、平板、个人计算机、可穿戴设备等等。终端设备20中包括通信模块，该通信模块用于与上述飞行器10进行通信，该通信模块可为无线通信模块，如WiFi模块、蓝牙模块、红外模块、通用分组无线服务(GeneralPacket Radio Service，GPRS)模块等等。终端设备20还包括屏幕，该屏幕可以实现输入输出功能。例如，通过该屏幕接收用户在该屏幕上选择目标点，以及通过该屏幕显示飞行器10所拍摄的图像、画面或视频等。

图2为本发明提供的飞行器的飞行控制方法的另一种应用环境的示意图。其中，该应用环境中还包括：遥控器30。该遥控器30分别与飞行器10及终端设备20通信连接。其中，遥控器30与飞行器10可以进行无线通信，遥控器30与终端设备20可以通过USB连接。

该遥控器30可以是任何合适的遥控设备。遥控器30为受地(舰)面或空中平台上的遥控单元通过飞控组件控制飞行的航空器。在本发明实施例中，该遥控器30用于进行数据、信息或指令的中转，例如，遥控器30接收飞行器10发送的数据或信息(如所述拍摄装置所拍摄的图像)，并将该数据、信息或指令发送给终端设备20；或者，遥控器30接收终端设备20发送的数据或信息(如根据所述飞行方向及飞行距离生成的控制指令)，并将该数据或信息发送给飞行器10。

通常在飞行器10进行飞行的过程中，飞行器10与终端设备20有一定的距离，特别是对于一些高空拍摄，飞行器10与终端设备20通常距离较远，为了实现远距离控制飞行器10的飞行，需要通过该遥控器30进行数据、信息或指令等的中转。

可以理解的是，在一些实施例中，该遥控器30不是必须的，也即，可以通过终端设备20直接给飞行器10发送控制指令，以实现对飞行器10的飞行的控制。

下面结合附图，对本发明实施例作进一步阐述。

实施例1：

图3为本发明实施例提供的一种飞行器的飞行控制方法的流程示意图。该方法适用于对各种飞行器的飞行进行控制，例如，图1中的飞行器10。该方法可由各种终端设备执行，例如，图1中的终端设备20。所述终端设备与所述飞行器通信连接，所述飞行器包括云台及搭载于所述云台上的拍摄装置。

参照图3，所述飞行器的飞行控制方法包括：

301：确定图像中的目标点。

其中，所述图像为飞行器在当前位置时所述拍摄装置所拍摄的图像。在飞行器与终端设备建立连接后，飞行器可以将该图像发送给终端设备，终端设备接收到该图像后，会对该图像进行一定的处理，如图像尺寸的缩放，以便适应于终端设备的屏幕的显示，经过处理后的图像显示于终端设备的屏幕上。当用户手持该终端设备时，可以通过该屏幕选择目标点，以便确定图像中的目标点。

具体的，终端设备确定图像中的目标点包括：获取用户在所述终端设备的屏幕上所选择的目标点；将所述所选择的目标点转换为图像中的目标点。

以图4为例，终端设备接收用户的输入操作以获取用户在所述终端设备的屏幕上所选择的目标点。例如，用户可以通过点击或触摸终端设备的屏幕等输入操作，在屏幕上选择一个点P0作为目标点。选定该目标点P0之后，终端设备可以计算出P0在屏幕所对应的平面坐标系下的坐标(x0，y0)，也即通过坐标(x0，y0)用于表示所选择的目标点P0的位置，然后，将所述所选择的目标点P0转换为图像中的目标点P1，相当于将坐标(x0，y0)转为P1在对应的图像坐标系下的坐标(x1，y1)。

在一些其它实施例中，用户的输入操作还可以包括直接输入P0的坐标(x0，y0)。

302：根据所述目标点确定所述飞行器的飞行方向及所述飞行器的飞行距离。

如图5所示，其中，终端设备根据所述目标点确定所述飞行器的飞行方向包括以下步骤：

3021：获取所述拍摄装置的焦距。

在一种实现方式中，终端设备获取所述拍摄装置的焦距，包括：根据预设的视场角与像素的对应关系，确定所述拍摄装置的视场角所对应的像素；根据所述拍摄装置的视场角及所述拍摄装置的视场角所对应的像素，确定所述拍摄装置的焦距。

其中，该拍摄装置的视场角(Field of view，FOV)为拍摄装置的镜头中心点到成像平面两条边缘构成的夹角。视场角的大小决定了拍摄装置的视野范围，视场角越大，视野就越大。由于成像平面有四条边，因此，会对应两个方向上的视场角。在本方面实施例中，该视场角是指俯仰轴方向所对应的视场角(如图4中的AOB)。

其中，用于表示该预设的视场角与像素的对应关系的映射关系表可以预先配置于终端设备中，当获取得到拍摄装置的视场角后可以，便通过该映射关系表得到所述拍摄装置的视场角所对应的像素。例如，假设拍摄装置的视场角FOV为48度，结合预设的视场角与像素的对应关系，可以得到其对应的像素为360。然后，再根据所述拍摄装置的视场角及所述拍摄装置的视场角所对应的像素，便可确定所述拍摄装置的焦距。

具体的，确定所述拍摄装置的焦距的计算公式如下所示：

其中，f表示为拍摄装置的焦距；FOV表示为拍摄装置的视场角；p表示为拍摄装置的视场角所对应的像素。例如，假设FOV＝48，其对应的像素p＝360，则f＝180/tan24。

在一些其它实施例中，终端设备获取所述拍摄装置的焦距的方式还可以包括：通过接收输入的拍摄装置的焦距以获取所述拍摄装置的焦距；所述拍摄装置的焦距预先配置终端设备中，直接从终端设备读取所述拍摄装置的焦距；所述拍摄装置的焦距预先配置于飞行器或其它设备中，终端设备从飞行器或其它设备中读取所述拍摄装置的焦距等等。

3022：根据所述目标点确定所述图像的中心点与所述目标点的像素差。

以图4为例，其中，所述图像的中心点与所述目标点的像素差Δx是指图像坐标系中的y轴方向的像素差。根据图像的中心点C的坐标及所述目标点P1的坐标确定像素差Δx。例如，假设中心坐标点(480/2,360/2),目标点P1的坐标为(x1,y1),则所述图像的中心点与所述目标点的像素差Δx＝＝|y1/360-180/360|，其中，取绝对值是为了保证所述图像的中心点与所述目标点的像素差Δx取正数。

3023：根据所述焦距及所述图像的中心点与所述目标点的像素差，确定所述飞行器的飞行方向。

飞行器的飞行方向为飞行器当前所在位置指向图像中的目标点的方向。以图4为例，所述飞行器的飞行方向即为从O点指向P1点的方向。其中，O点为飞行器在当前所在位置。根据焦距f、以及所述图像的中心点C与所述目标点P1的像素差Δx，可以确定偏转角度α，其中，所述偏转角度α为所述飞行器的飞行方向相对于所述拍摄装置的光轴方向所偏转的角度，从而可以确定所述飞行器的飞行方向。

具体的，确定偏转角度α的公式如下所示：

其中，α表示为偏转角度；Δx表示为所述图像的中心点C与所述目标点P1的像素差；f表示为拍摄装置的焦距。

如图6所示，其中，终端设备根据所述目标点确定所述飞行器的飞行距离包括以下步骤：

3024：获取所述云台的姿态信息。

终端设备获取云台的姿态信息具体包括：首先由设置于云台上的姿态采集传感器得到云台的姿态信息，并将该云台的姿态信息发送至终端设备，以使终端设备获取得到该姿态信息。

其中，姿态采集传感器可以为惯性测量单元(Inertial measurement unit，IMU)等。IMU为一种测量物体三轴姿态角(或角速率)以及加速度等姿态信息的传感器。通常的，IMU有六轴的IMU和九轴的IMU。其中，六轴的IMU中，一个IMU包含了三个单轴的加速度计和三个单轴的陀螺仪，加速度计检测物体在载体坐标系统独立三轴的加速度信号，而陀螺仪检测载体相对于导航坐标系的角速度信号，测量物体在三维空间中的角速度和加速度，并以此解算出物体的姿态角。九轴的IMU中，一个IMU包含了三个单轴的加速度计、三个单轴的陀螺仪和三个单轴的地磁计，九轴的IMU的加速度计与陀螺仪类似，九轴的IMU的地磁计用于检测地磁场在惯性系中水平面上的分量，该分量的方向始终指向北极。

其中，所述姿态信息包括姿态角。所述云台的姿态角用欧拉角表示，也即通过欧拉角(θ,ψ,φ)描述云台的姿态角。θ表示为所述云台的姿态角中的俯仰角，ψ表示为所述云台的姿态角中的偏航角，φ表示为所述云台的姿态角中的翻滚角。

3025：获取所述飞行器的飞行高度。

其中，所述飞行器的飞行高度是指飞行器的当前飞行位置相对于飞行器的起飞点的高度。

在一种实现方式中，可以在飞行器上设置至少一个距离采集传感器，以测量当前位置相对于地面的第一高度，飞行器将该第一高度发送给终端设备，以使终端设备获取得到当前位置相对于地面的第一高度。所述至少一个距离采集传感器可以包括但不限于：超声传感器、红外传感器、微波传感器等等。而飞行器的起飞点相对于地面的第二高度可以在飞行器起飞时通过至少一个距离采集传感器测量得到，通常为了保证飞行器的安全，起飞点相对于地面的第二高度为2米左右。类似的，飞行器将该第二高度发送给终端设备，以使终端设备获取得到起飞点相对于地面的第二高度。第一高度与第二高度的高度差即为所述飞行器的飞行高度。

3026：根据所述目标点确定所述飞行器的偏转角度。

其中，所述偏转角度为所述飞行器的飞行方向相对于所述拍摄装置的光轴方向所偏转的角度。其中，如步骤3023中所述的，终端设备根据所述目标点确定所述飞行器的偏转角度具体包括：根据焦距f、以及所述图像的中心点C与所述目标点P1的像素差Δx，确定偏转角度α。

3027：根据所述姿态信息、所述飞行高度及偏转角度，确定所述飞行器的飞行距离。

其中，所述偏转角度为所述飞行器的飞行方向相对于所述拍摄装置的光轴方向所偏转的角度。所述姿态信息包括姿态角。所述拍摄装置的光轴方向由所述云台的姿态角中的俯仰角所确定。如图4所示，所述拍摄装置的光轴方向与俯仰轴方向的夹角即为云台的姿态角中的俯仰角，通过调整该俯仰角可以调整所述拍摄装置的光轴方向，从而调整所述拍摄装置拍摄图像的角度。

根据所述姿态信息、所述飞行高度及偏转角度确定所述飞行器的飞行距离的计算公式为：

其中，L表示为所述飞行器的飞行距离；θ表示为所述云台的姿态角中的俯仰角；h表示为所述飞行器的飞行高度；α表示为偏转角度。

通过上述公式，即可得到飞行器的飞行距离，也即确定图像中的目标点在实际场景空间下所对应的点P2，以便飞行器朝指定方向(如图4中由O指向P1的方向)飞行指定距离(如图4中的L)，从而使得飞行器飞到P2的位置，实现指哪飞哪的效果。

303：根据所述飞行方向及所述飞行距离，控制所述飞行器的飞行。

终端设备根据所述飞行方向及飞行距离，控制所述飞行器的飞行包括：终端设备根据所述飞行方向及飞行距离生成的控制指令，并将该控制指令发送给飞行器，以通过该控制指令控制飞行器的飞行；或者，终端设备将所述飞行方向及飞行距离发送给飞行器，以使飞行器通过所述飞行方向及飞行距离生成的控制指令，以通过该控制指令控制飞行器的飞行。

需要说明的是，在本发明实施例中，本领域普通技术人员，根据本发明实施例的描述可以理解，在不同实施例中，在不矛盾的情况下，所述步骤3021-3023、步骤3024-3027可以有不同的执行顺序，例如，先执行步骤3022再执行步骤3021，或者步骤3022与步骤3021同时执行等等。

在本发明实施例中，首先确定图像中的目标点，然后根据目标点确定飞行器的飞行方向及飞行器的飞行距离，基于飞行方向及飞行距离来控制飞行器的飞行，以使飞行器飞往所确定的图像中的目标点在实际场景空间下所对应的点，从而可以准确地控制飞行器飞行至用户输入的目标点，并在飞行器飞行至目标点后即刻控制飞行器停止飞行，真正实现了指哪飞哪的飞行控制效果，使得用户不必在飞行器飞行至期望的位置后再次手动操作飞行器使其停止，方便了用户的操作，也减少飞行器飞丢的可能性，有效提高用户体验。

实施例2：

图7为本发明实施例提供的一种飞行器的飞行控制装置示意图。该飞行器的飞行控制装置70可配置于各种终端设备中，例如，配置于图1中的终端设备20中。所述终端设备与所述飞行器通信连接，所述飞行器包括云台及搭载于所述云台上的拍摄装置。

参照图7，所述飞行器的飞行控制装置70包括：第一确定模块701、第二确定模块702、第三确定模块703以及飞行控制模块704。

具体的，第一确定模块701用于确定图像中的目标点。

其中，所述图像为飞行器在当前位置时所述拍摄装置所拍摄的图像。第一确定模块701具体用于：获取用户在所述终端设备的屏幕上所选择的目标点；将所述所选择的目标点转换为图像中的目标点。

第一确定模块701接收用户的输入操作以获取用户在所述终端设备的屏幕上所选择的目标点。其中该输入操作包括：点击屏幕、触摸屏幕或者输入所选择的目标点的坐标等等。

具体的，第二确定模块702用于根据所述目标点确定所述飞行器的飞行方向。

其中，第二确定模块702包括焦距获取单元7021、像素差确定单元7022以及飞行方向确定单元7023。

其中，焦距获取单元7021用于获取所述拍摄装置的焦距。

在一种实现方式中，焦距获取单元7021具体用于：根据预设的视场角与像素的对应关系，确定所述拍摄装置的视场角所对应的像素；根据所述拍摄装置的视场角及所述拍摄装置的视场角所对应的像素，确定所述拍摄装置的焦距。

其中，用于表示该预设的视场角与像素的对应关系的映射关系表可以预先配置于终端设备中，当焦距获取单元7021获取得到拍摄装置的视场角后可以，便通过读取配置于终端设备中的映射关系表得到所述拍摄装置的视场角所对应的像素。例如，假设拍摄装置的视场角FOV为48度，结合预设的视场角与像素的对应关系，可以得到其对应的像素为360。然后，再根据所述拍摄装置的视场角及所述拍摄装置的视场角所对应的像素，便可确定所述拍摄装置的焦距。

具体的，焦距获取单元7021确定所述拍摄装置的焦距的计算公式如下所示：

其中，f表示为拍摄装置的焦距；FOV表示为拍摄装置的视场角；p表示为拍摄装置的视场角所对应的像素。例如，假设FOV＝48，其对应的像素p＝360，则f＝180/tan24。

在一些其它实施例中，焦距获取单元7021获取所述拍摄装置的焦距的方式还可以包括：通过接收输入的拍摄装置的焦距以获取所述拍摄装置的焦距；所述拍摄装置的焦距预先配置终端设备中，焦距获取单元7021直接从终端设备读取所述拍摄装置的焦距；所述拍摄装置的焦距预先配置于飞行器或其它设备中，焦距获取单元7021从飞行器或其它设备中读取所述拍摄装置的焦距等等。

其中，像素差确定单元7022用于根据所述目标点确定所述图像的中心点与所述目标点的像素差。

其中，飞行方向确定单元7023用于根据所述焦距及所述图像的中心点与所述目标点的像素差，确定所述飞行器的飞行方向。

飞行器的飞行方向为飞行器当前所在位置指向图像中的目标点的方向。飞行方向确定单元7023根据焦距f、以及所述图像的中心点与所述目标点的像素差Δx，可以确定偏转角度α，其中，所述偏转角度α为所述飞行器的飞行方向相对于所述拍摄装置的光轴方向所偏转的角度，从而可以确定所述飞行器的飞行方向。

具体的，飞行方向确定单元7023确定偏转角度α的公式如下所示：

其中，α表示为偏转角度；Δx表示为所述图像的中心点与所述目标点的像素差；f表示为拍摄装置的焦距。

具体的，第三确定模块703用于根据所述目标点确定所述飞行器的飞行距离。

其中，第三确定模块703包括：姿态信息获取单元7031、飞行高度获取单元7032、偏转角度获取单元7033以及飞行距离确定单元7034。

其中，姿态信息获取单元7031用于获取所述云台的姿态信息。

姿态信息获取单元7031获取云台的姿态信息具体包括：首先由设置于云台上的姿态采集传感器得到云台的姿态信息，并将该云台的姿态信息发送至终端设备，以使终端设备获取得到该姿态信息。其中，姿态采集传感器可以为IMU等。

所述姿态信息包括姿态角。所述云台的姿态角用欧拉角表示，也即通过欧拉角(θ,ψ,φ)描述云台的姿态角。θ表示为所述云台的姿态角中的俯仰角，ψ表示为所述云台的姿态角中的偏航角，φ表示为所述云台的姿态角中的翻滚角。

其中，飞行高度获取单元7032用于获取所述飞行器的飞行高度。

其中，所述飞行器的飞行高度是指飞行器的当前飞行位置相对于飞行器的起飞点的高度。具体的，可以根据飞行器当前位置相对于地面的第一高度与飞行器的起飞点相对于地面的第二高度的高度差以确定所述飞行器的飞行高度。

其中，偏转角度获取单元7033用于根据所述目标点确定所述飞行器的偏转角度，所述偏转角度为所述飞行器的飞行方向相对于所述拍摄装置的光轴方向所偏转的角度。所述拍摄装置的光轴方向由所述云台的姿态角中的俯仰角所确定。

其中，飞行距离确定单元7034用于根据所述姿态信息、所述飞行高度及偏转角度，确定所述飞行器的飞行距离。

飞行距离确定单元7034根据所述姿态信息、所述飞行高度及所述偏转角度确定所述飞行器的飞行距离的计算公式为：

其中，L表示为所述飞行器的飞行距离；θ表示为所述云台的姿态角中的俯仰角；h表示为所述飞行器的飞行高度；α表示为偏转角度。

通过上述公式，即可得到飞行器的飞行距离，也即确定图像中的目标点在实际场景空间下所对应的点，以便飞行器朝指定方向飞行指定距离，实现指哪飞哪的效果。

具体的，飞行控制模块704用于根据所述飞行方向及飞行距离，控制所述飞行器的飞行。

飞行控制模块704具体用于：终端设备根据所述飞行方向及飞行距离生成的控制指令，并将该控制指令发送给飞行器，以通过该控制指令控制飞行器的飞行；或者，终端设备将所述飞行方向及飞行距离发送给飞行器，以使飞行器通过所述飞行方向及飞行距离生成的控制指令，以通过该控制指令控制飞行器的飞行。

需要说明的是，在本发明实施例中，所述飞行器的飞行控制装置70可执行任意方法实施例所提供的飞行器的飞行控制方法，具备执行方法相应的功能模块和有益效果。未在飞行器的飞行控制装置70的实施例中详尽描述的技术细节，可参见方法实施例所提供的飞行器的飞行控制方法。

实施例3：

图8是本发明实施例提供的终端设备硬件结构示意图，如图8所示，所述终端设备80包括：

一个或多个处理器801以及存储器802，图8中以一个处理器801为例。

处理器801和存储器802可以通过总线或者其他方式连接，图8中以通过总线连接为例。

存储器802作为一种非易失性计算机可读存储介质，可用于存储非易失性软件程序、非易失性计算机可执行程序以及模块，如本发明实施例中的飞行器的飞行控制方法对应的程序指令/模块(例如，附图7所示的第一确定模块701、第二确定模块702、第三确定模块703以及飞行控制模块704)。处理器801通过运行存储在存储器802中的非易失性软件程序、指令以及模块，从而执行终端设备80的各种功能应用以及数据处理，即实现所述方法实施例所提供的飞行器的飞行控制方法。

存储器802可以包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需要的应用程序；存储数据区可存储根据终端设备80使用所创建的数据等。此外，存储器802可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实施例中，存储器802可选包括相对于处理器801远程设置的存储器，这些远程存储器可以通过网络连接至终端设备80。所述网络的实施例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

所述一个或者多个模块存储在所述存储器802中，当被所述一个或者多个处理器801执行时，执行所述任意方法实施例中的飞行器的飞行控制方法，例如，执行以上描述的图3中的方法步骤301-步骤303，实现图7中的701-704模块的功能。

所述终端设备80可执行任意方法实施例所提供的飞行器的飞行控制方法，具备执行方法相应的功能模块和有益效果。未在终端设备实施例中详尽描述的技术细节，可参见任意方法实施例所提供的飞行器的飞行控制方法。

本发明实施例提供一种计算机程序产品，所述计算机程序产品包括存储在非易失性计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，使所述计算机执行所述任意方法实施例中的飞行器的飞行控制方法，例如，执行以上描述的图3中的方法步骤301-步骤303，实现图7中的701-704模块的功能。

本发明实施例提供一种非易失性计算机可读存储介质，所述计算机可读存储介质存储有计算机可执行指令，所述计算机可执行指令用于使计算机执行所述任意方法实施例中的飞行器的飞行控制方法，例如执行以上描述的图3中的方法步骤301-步骤303，实现图7中的701-704模块的功能。

实施例4：

图9是本发明实施例提供的飞行控制系统的示意图，如图9所示，所述飞行控制系统90包括：飞行器901、如上所述的终端设备80以及遥控器902，所述遥控器902分别与所述飞行器901和终端设备80相连，其中，遥控器902与飞行器901可以进行无线通信，遥控器902与终端设备80可以通过USB连接。

所述终端设备80用于根据确定的飞行方向及飞行距离，控制所述飞行器901的飞行，以使飞行器901飞往图像中的目标点在实际场景空间下所对应的点，而无需频繁的操作遥控器902的摇杆，降低了控制飞行器901的飞行的操作繁琐度，有效提高用户体验。

其中，该终端设备80包括但不限于：智能手机、平板、个人计算机、可穿戴设备等等。

所述遥控器902作为飞行器901与终端设备80的中间设备，用于进行数据、信息或指令等的中转。

在一些其它实施例中，该遥控器902不是必须的，也即，终端设备80与飞行器901直接进行通信，以实现对飞行器901的飞行控制。

需要说明的是，以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的模块可以是或者也可以不是物理上分开的，作为模块显示的部件可以是或者也可以不是物理模块，即可以位于一个地方，或者也可以分布到多个网络模块上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。

通过以上的实施例的描述，本领域普通技术人员可以清楚地了解到各实施例可借助软件加通用硬件平台的方式来实现，当然也可以通过硬件。本领域普通技术人员可以理解实现所述实施例方法中的全部或部分流程是可以通过计算机程序指令相关的硬件来完成，所述的程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如所述各方法的实施例的流程。其中，所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-OnlyMemory,ROM)或随机存储记忆体(Random Access Memory,RAM)等。

最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；在本发明的思路下，以上实施例或者不同实施例中的技术特征之间也可以进行组合，步骤可以以任意顺序实现，并存在如上所述的本发明的不同方面的许多其它变化，为了简明，它们没有在细节中提供；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (18)

1.一种飞行器的飞行控制方法，应用于终端设备，其特征在于，所述终端设备与所述飞行器通信连接，所述飞行器包括云台及搭载于所述云台上的拍摄装置，所述方法包括：

确定图像中的目标点，所述图像为飞行器在当前位置时所述拍摄装置所拍摄的图像；

根据所述目标点确定所述飞行器的飞行方向及所述飞行器的飞行距离；

根据所述飞行方向及所述飞行距离，控制所述飞行器的飞行。

2.根据权利要求1所述的方法，其特征在于，根据所述目标点确定所述飞行器的飞行方向，具体包括：

获取所述拍摄装置的焦距；

根据所述目标点确定所述图像的中心点与所述目标点的像素差；

根据所述焦距及所述图像的中心点与所述目标点的像素差，确定所述飞行器的飞行方向。

3.根据权利要求2所述的方法，其特征在于，所述获取所述拍摄装置的焦距，具体包括：

根据预设的视场角与像素的对应关系，确定所述拍摄装置的视场角所对应的像素；

根据所述拍摄装置的视场角及所述拍摄装置的视场角所对应的像素，确定所述拍摄装置的焦距。

4.根据权利要求1-3中任一项所述的方法，其特征在于，根据所述目标点确定所述飞行器的飞行距离，具体包括:

获取所述云台的姿态信息；

获取所述飞行器的飞行高度；

根据所述目标点确定所述飞行器的偏转角度，所述偏转角度为所述飞行器的飞行方向相对于所述拍摄装置的光轴方向所偏转的角度；

根据所述姿态信息、所述飞行高度及所述偏转角度，确定所述飞行器的飞行距离。

5.根据权利要求4所述的方法，其特征在于，所述姿态信息包括姿态角。

6.根据权利要求4或5所述的方法，其特征在于，根据所述姿态信息、所述飞行高度及所述偏转角度，确定所述飞行器的飞行距离的计算公式为：

其中，L表示为所述飞行器的飞行距离；θ表示为所述云台的姿态角中的俯仰角；h表示为所述飞行器的飞行高度；α表示为偏转角度。

7.根据权利要求4-6中任一项所述的方法，其特征在于，所述拍摄装置的光轴方向由所述云台的姿态角中的俯仰角所确定。

8.根据权利要求1-7中任一项所述的方法，其特征在于，所述确定图像中的目标点，具体包括：

获取用户在所述终端设备的屏幕上所选择的目标点；

将所述所选择的目标点转换为图像中的目标点。

9.一种飞行器的飞行控制装置，配置于终端设备，其特征在于，所述终端设备与所述飞行器通信连接，所述飞行器包括云台及搭载于所述云台上的拍摄装置，所述装置包括：

第一确定模块，用于确定图像中的目标点，所述图像为飞行器在当前位置时所述拍摄装置所拍摄的图像；

第二确定模块，用于根据所述目标点确定所述飞行器的飞行方向；

第三确定模块，用于根据所述目标点确定所述飞行器的飞行距离；

飞行控制模块，用于根据所述飞行方向及所述飞行距离，控制所述飞行器的飞行。

10.根据权利要求9所述的装置，其特征在于，所述第二确定模块包括：

焦距获取单元，用于获取所述拍摄装置的焦距；

像素差确定单元，用于根据所述目标点确定所述图像的中心点与所述目标点的像素差；

飞行方向确定单元，用于根据所述焦距及所述图像的中心点与所述目标点的像素差，确定所述飞行器的飞行方向。

11.根据权利要求10所述的装置，其特征在于，所述焦距获取单元具体用于：

根据预设的视场角与像素的对应关系，确定所述拍摄装置的视场角所对应的像素；

根据所述拍摄装置的视场角及所述拍摄装置的视场角所对应的像素，确定所述拍摄装置的焦距。

12.根据权利要求9-11中任一项所述的装置，其特征在于，所述第三确定模块包括：

姿态信息获取单元，用于获取所述云台的姿态信息；

飞行高度获取单元，用于获取所述飞行器的飞行高度；

偏转角度获取单元，用于根据所述目标点确定所述飞行器的偏转角度，所述偏转角度为所述飞行器的飞行方向相对于所述拍摄装置的光轴方向所偏转的角度；

飞行距离确定单元，用于根据所述姿态信息、所述飞行高度及偏转角度，确定所述飞行器的飞行距离。

13.根据权利要求12所述的装置，其特征在于，所述姿态信息包括姿态角。

14.根据权利要求12或13所述的装置，其特征在于，所述飞行距离确定单元根据所述姿态信息、所述飞行高度及所述偏转角度，确定所述飞行器的飞行距离的计算公式为：

其中，L表示为所述飞行器的飞行距离；θ表示为所述云台的姿态角中的俯仰角；h表示为所述飞行器的飞行高度；α表示为偏转角度。

15.根据权利要求12-14中任一项所述的装置，其特征在于，所述拍摄装置的光轴方向由所述云台的姿态角中的俯仰角所确定。

16.根据权利要求9-15中任一项所述的装置，其特征在于，所述第一确定模块具体用于：

获取用户在所述终端设备的屏幕上所选择的目标点；

将所述所选择的目标点转换为图像中的目标点。

17.一种终端设备，其特征在于，包括：

至少一个处理器；以及，

与所述至少一个处理器通信连接的存储器；其中，

所述存储器存储有可被所述至少一个处理器执行的指令，所述指令被所述至少一个处理器执行，以使所述至少一个处理器能够执行权利要求1-8的任一项所述的方法。

18.一种飞行控制系统，其特征在于，包括飞行器及如权利要求17所述的终端设备，所述终端设备与所述飞行器连接。