CN111562796A - 控制方法、控制设备和运载系统 - Google Patents
控制方法、控制设备和运载系统 Download PDFInfo
- Publication number
- CN111562796A CN111562796A CN202010459836.3A CN202010459836A CN111562796A CN 111562796 A CN111562796 A CN 111562796A CN 202010459836 A CN202010459836 A CN 202010459836A CN 111562796 A CN111562796 A CN 111562796A
- Authority
- CN
- China
- Prior art keywords
- tracking
- aircraft
- carrying
- motion information
- equipment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 48
- 230000009471 action Effects 0.000 claims description 34
- 230000007613 environmental effect Effects 0.000 claims description 6
- 230000008859 change Effects 0.000 description 23
- 238000001914 filtration Methods 0.000 description 16
- 238000010586 diagram Methods 0.000 description 15
- 230000001133 acceleration Effects 0.000 description 14
- 230000007246 mechanism Effects 0.000 description 10
- 230000008569 process Effects 0.000 description 10
- 238000013519 translation Methods 0.000 description 4
- 206010034719 Personality change Diseases 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical compound C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000001514 detection method Methods 0.000 description 2
- 230000008921 facial expression Effects 0.000 description 2
- 238000005096 rolling process Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000005507 spraying Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
- G05D1/0094—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot involving pointing a payload, e.g. camera, weapon, sensor, towards a fixed or moving target
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
- G05D1/08—Control of attitude, i.e. control of roll, pitch, or yaw
- G05D1/0808—Control of attitude, i.e. control of roll, pitch, or yaw specially adapted for aircraft
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64C—AEROPLANES; HELICOPTERS
- B64C39/00—Aircraft not otherwise provided for
- B64C39/02—Aircraft not otherwise provided for characterised by special use
- B64C39/024—Aircraft not otherwise provided for characterised by special use of the remote controlled vehicle type, i.e. RPV
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
- G05D1/0253—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means extracting relative motion information from a plurality of images taken successively, e.g. visual odometry, optical flow
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
- G05D1/10—Simultaneous control of position or course in three dimensions
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
- G05D1/10—Simultaneous control of position or course in three dimensions
- G05D1/101—Simultaneous control of position or course in three dimensions specially adapted for aircraft
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
- G06V20/17—Terrestrial scenes taken from planes or by drones
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
- B64U2101/00—UAVs specially adapted for particular uses or applications
- B64U2101/30—UAVs specially adapted for particular uses or applications for imaging, photography or videography
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
- B64U2201/00—UAVs characterised by their flight controls
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
Abstract
一种控制方法、控制设备和运载系统。该方法包括确定跟踪对象与跟踪设备的相对关系;检测所述跟踪对象的运动信息;根据所述运动信息和所述相对关系,控制用于运载所述跟踪设备的运载设备的运动,以便于所述跟踪设备对所述跟踪对象进行跟踪。所述控制方法能够实现对跟踪对象的跟踪。
Description
本申请是申请日为2016年09月26日、中国申请号为201680009142.1、发明名称为“控制方法、控制设备和运载系统”的发明申请的分案申请。
版权申明
本专利文件披露的内容包含受版权保护的材料。该版权为版权所有人所有。版权所有人不反对任何人复制专利与商标局的官方记录和档案中所存在的该专利文件或者该专利披露。
技术领域
本发明涉及控制技术领域,并且更具体地,涉及一种控制方法、控制设备和运载系统。
背景技术
随着信息技术的发展,如何利用跟踪设备实现自动跟踪是人们比较重视的发展方向,例如,如何实现拍摄设备对运动对象进行跟踪设备,如何实现救援设备对移动灾情(例如,着火的移动车辆)进行跟踪救援,如何实现武器对敌情进行跟踪。
其中,运载跟踪设备的运载设备可以为车辆和船只等,并且随着飞行技术的发展,飞行器,例如,UAV(Unmanned Aerial Vehicle,无人飞行器),也称为无人机,可以用于进行跟踪。
如何较好的控制运载设备运载跟踪设备,以实现跟踪设备对跟踪对象的跟踪是一项亟待解决的问题。
发明内容
本发明实施例提供一种控制方法、控制设备和运载系统,能够实现对跟踪对象的跟踪。
第一方面,提供了一种控制方法,该方法包括:确定跟踪对象与跟踪设备的相对关系;检测该跟踪对象的运动信息;根据该运动信息和该相对关系,控制用于运载该跟踪设备的运载设备的运动,以便于该跟踪设备对该跟踪对象进行跟踪。
第二方面,提供了一种控制设备,该控制设备包括:第一确定单元,用于确定跟踪对象与跟踪设备的相对关系;检测单元,用于检测该跟踪对象的运动信息;控制单元,用于根据该运动信息和该相对关系,控制用于运载该跟踪设备的运载设备的运动,以便于该跟踪设备对该跟踪对象进行跟踪。
第三方面,提供了一种控制设备,包括处理器和存储器,该存储器用于存储指令,该处理器用于调用存储器存储的指令,执行以下动作:确定跟踪对象与跟踪设备的相对关系;检测该跟踪对象的运动信息;根据该运动信息和该相对关系,控制用于运载该跟踪设备的运载设备的运动,以便于该跟踪设备对该跟踪对象进行跟踪。
第四方面,提供了一种运载系统,该控制系统包括控制设备和运载设备,其中,该控制设备用于确定跟踪对象与跟踪设备的相对关系;检测该跟踪对象的运动信息;根据该运动信息和该相对关系,控制用于运载该跟踪设备的运载设备的运动,以便于该跟踪设备对该跟踪对象进行跟踪。
第五方面,提供了一种存储介质,该存储器存储指令,该指令可以用于执行以下方法:确定跟踪对象与跟踪设备的相对关系;检测该跟踪对象的运动信息;根据该运动信息和该相对关系,控制用于运载该跟踪设备的运载设备的运动,以便于该跟踪设备对该跟踪对象进行跟踪。
因此,在本发明实施例中,可以确定跟踪对象与跟踪设备的相对关系;检测该跟踪对象的运动信息;根据该运动信息和该相对关系,控制用于运载该跟踪设备的运载设备的运动,以便于该跟踪设备对该跟踪对象进行跟踪,从而可以实现对跟踪对象的跟踪。
第六方面,提供了一种控制方法,该方法包括:确定跟踪对象与飞行器的相对关系,所述飞行器包括载体,所述载体设置于所述飞行器中且用于装载拍摄设备;检测所述跟踪对象的运动信息;根据所述运动信息和所述相对关系,控制所述飞行器的姿态、所述飞行器的运动轨迹或所述载体的姿态中的一种或多种,以便于所述拍摄设备对所述跟踪对象进行跟踪拍摄。
第七方面,提供了一种控制设备,该控制设备包括处理器和存储器,该存储器用于存储指令,所述处理器用于调用存储器存储的指令,执行以下动作:确定跟踪对象与飞行器的相对关系,所述飞行器包括载体,所述载体设置于所述飞行器中且用于装载拍摄设备;检测所述跟踪对象的运动信息;根据所述运动信息和所述相对关系,控制所述飞行器的姿态、所述飞行器的运动轨迹或所述载体的姿态中的一种或多种,以便于所述拍摄设备对所述跟踪对象进行跟踪拍摄。
第八方面,提供了一种存储介质,该存储器存储指令,该指令可以用于执行以下方法:确定跟踪对象与飞行器的相对关系,所述飞行器包括载体,所述载体设置于所述飞行器中且用于装载拍摄设备;检测所述跟踪对象的运动信息;根据所述运动信息和所述相对关系,控制所述飞行器的姿态、所述飞行器的运动轨迹或所述载体的姿态中的一种或多种,以便于所述拍摄设备对所述跟踪对象进行跟踪拍摄。
因此,在本发明实施例中,可以确定跟踪对象与飞行器的相对关系;检测该跟踪对象的运动信息;根据该运动信息和该相对关系,控制飞行器的姿态、飞行器的运动轨迹和载体的姿态中的至少一种,以便于该拍摄设备对该跟踪对象进行跟踪,从而可以实现对跟踪对象的跟踪。
第九方面,提供了一种控制方法,该方法包括:确定跟踪对象与跟踪设备的相对关系;检测所述跟踪对象的运动信息;根据第一信息,对所述相对关系进行调整,所述第一信息包括以下一种或多种:用户发出的信号,环境状态信息或所述跟踪对象的运动信息;根据所述运动信息和调整后的所述相对关系,控制用于运载所述跟踪设备的运载设备的运动,以便于所述跟踪设备对所述跟踪对象进行跟踪。
第十方面,提供了一种控制设备,该控制设备包括处理器和存储器,该存储器用于存储指令,所述处理器用于调用存储器存储的指令,执行以下动作:确定跟踪对象与跟踪设备的相对关系;检测所述跟踪对象的运动信息;根据第一信息,对所述相对关系进行调整,所述第一信息包括以下一种或多种:用户发出的信号,环境状态信息或所述跟踪对象的运动信息;根据所述运动信息和调整后的所述相对关系,控制用于运载所述跟踪设备的运载设备的运动,以便于所述跟踪设备对所述跟踪对象进行跟踪。
第十一方面,提供了一种存储介质,该存储器存储指令,该指令可以用于执行以下方法:确定跟踪对象与跟踪设备的相对关系;检测所述跟踪对象的运动信息;根据第一信息,对所述相对关系进行调整,所述第一信息包括以下一种或多种:用户发出的信号,环境状态信息或所述跟踪对象的运动信息;根据所述运动信息和调整后的所述相对关系,控制用于运载所述跟踪设备的运载设备的运动,以便于所述跟踪设备对所述跟踪对象进行跟踪。
因此,在本发明实施例中,可以确定跟踪对象与跟踪设备的相对关系;检测该跟踪对象的运动信息;根据该运动信息和该相对关系,控制用于运载该跟踪设备的运载设备的运动,以便于该跟踪设备对该跟踪对象进行跟踪,从而可以实现对跟踪对象的跟踪。
第十二方面,提供了一种控制方法,该方法包括:确定跟踪对象与跟踪设备的相对关系;根据所述跟踪对象的类型和/或用户发出的信号,确定用于对所述跟踪对象进行跟踪的跟踪模式;检测所述跟踪对象的运动信息;根据所述跟踪模式、所述运动信息和所述相对关系,控制用于运载所述跟踪设备的运载设备的运动,以便于所述跟踪设备对所述跟踪对象进行跟踪。
第十三方面,提供了一种控制设备,该控制设备包括处理器和存储器,该存储器用于存储指令,所述处理器用于调用存储器存储的指令,执行以下动作:确定跟踪对象与跟踪设备的相对关系;根据所述跟踪对象的类型和/或用户发出的信号,确定用于对所述跟踪对象进行跟踪的跟踪模式;检测所述跟踪对象的运动信息;根据所述跟踪模式、所述运动信息和所述相对关系,控制用于运载所述跟踪设备的运载设备的运动,以便于所述跟踪设备对所述跟踪对象进行跟踪。
第十四方面,提供了一种存储介质,该存储器存储指令,该指令可以用于执行以下方法:确定跟踪对象与跟踪设备的相对关系;根据所述跟踪对象的类型和/或用户发出的信号,确定用于对所述跟踪对象进行跟踪的跟踪模式;检测所述跟踪对象的运动信息;根据所述跟踪模式、所述运动信息和所述相对关系,控制用于运载所述跟踪设备的运载设备的运动,以便于所述跟踪设备对所述跟踪对象进行跟踪。
因此,在本发明实施例中,可以确定跟踪对象与跟踪设备的相对关系;检测该跟踪对象的运动信息;根据该运动信息和该相对关系,控制用于运载该跟踪设备的运载设备的运动,以便于该跟踪设备对该跟踪对象进行跟踪,从而可以实现对跟踪对象的跟踪。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是根据本发明实施例的无人飞行系统的示意性框图。
图2是根据本发明实施例的控制方法的示意性流程图。
图3是根据本发明实施例的跟踪设备与跟踪对象的相对关系图。
图4是根据本发明实施例的跟踪设备与跟踪对象的相对关系图。
图5a是根据本发明实施例的目标的运动信息的示意性图。
图5b-5c是根据本发明实施例的跟踪设备与跟踪对象的相对关系图。
图6a是根据本发明实施例的目标的运动信息的示意性图。
图6b是根据本发明实施例的跟踪设备与跟踪对象的相对关系图。
图7a是根据本发明实施例的目标的运动信息的示意性图。
图7b-c是根据本发明实施例的跟踪设备与跟踪对象的相对关系图。
图8是根据本发明实施例的跟踪设备与跟踪对象的相对关系图。
图9是根据本发明实施例的跟踪设备与跟踪对象的相对关系图。
图10是根据本发明实施例的控制设备的示意性框图。
图11是根据本发明实施例的控制设备的示意性框图。
图12是根据本发明实施例的控制系统的示意性框图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例了一种利用跟踪设备对跟踪对象进行跟踪的技术方案。本发明实施例提到的跟踪设备可以是拍摄设备、武器、防疫设备和救援设备等。其中,跟踪设备可以通过运载设备的运载实现对跟踪对象的跟踪。
本发明实施例提到的运载设备可以包括飞行器、水上运行设备、水下运行设备和地面运行设备等。
本发明实施例提到的运载设备还可以包括运载跟踪设备的载体,该载体可以安装于上述提到的飞行器、水上运行设备、水下运行设备和地面运行设备等。
例如,在跟踪设备为拍摄设备时,运载设备可以为飞行器。进一步地,飞行器可以安装有机械云台,用于承载该拍摄设备。当然,飞行器可以不安装机械云台,拍摄设备的视野的改变可以通过电子云台实现。
为了便于理解本发明,本发明将多处以运载设备包括飞行器的方式对本发明实施例进行详细说明,但应理解,本发明实施例并不限于此。
以下将对无人飞行系统进行介绍。本发明的实施例可以应用于各种类型的(Unmanned Aerial Vehicle,无人飞行器)。例如,UAV可以是小型的UAV。在某些实施例中,UAV可以是旋翼飞行器(rotorcraft),例如,由多个推动装置通过空气推动的多旋翼飞行器,本发明的实施例并不限于此,UAV也可以是其它类型的UAV或可移动装置。
图1是根据本发明的实施例的无人飞行系统100的示意性架构图。本实施例以旋翼飞行器为例进行说明。
无人飞行系统100可以包括UAV 110、载体120、显示设备130和操纵设备140。其中,UAV 110可以包括动力系统150、飞行控制系统160和机架170。UAV 110可以与操纵设备140和显示设备130进行无线通信。
机架170可以包括机身和脚架(也称为起落架)。机身可以包括中心架以及与中心架连接的一个或多个机臂,一个或多个机臂呈辐射状从中心架延伸出。脚架与机身连接,用于在UAV 110着陆时起支撑作用。
动力系统150可以包括电子调速器(简称为电调)151、一个或多个螺旋桨153以及与一个或多个螺旋桨153相对应的一个或多个电机152,其中电机152连接在电子调速器151与螺旋桨153之间,电机152和螺旋桨153设置在对应的机臂上;电子调速器151用于接收飞行控制器160产生的驱动信号,并根据驱动信号提供驱动电流给电机152,以控制电机152的转速。电机152用于驱动螺旋桨旋转,从而为UAV 110的飞行提供动力,该动力使得UAV 110能够实现一个或多个自由度的运动。在某些实施例中,UAV 110可以围绕一个或多个旋转轴旋转。例如,上述旋转轴可以包括横滚轴、平移轴和俯仰轴。应理解,电机152可以是直流电机,也可以交流电机。另外,电机152可以是无刷电机,也可以有刷电机。
飞行控制系统160可以包括飞行控制器161和传感系统162。传感系统162用于测量UAV的位置信息和状态信息等,例如,三维位置、三维角度、三维速度、三维加速度和三维角速度等。传感系统162例如可以包括陀螺仪、电子罗盘、IMU(惯性测量单元,InertialMeasurement,Unit)、视觉传感器、GPS(全球定位系统,Global Positioning System)和气压计等传感器中的至少一种。飞行控制器161用于控制UAV 110的飞行,例如,可以根据传感系统162测量的姿态信息控制UAV 110的飞行。应理解,飞行控制器161可以按照预先编好的程序指令对UAV 110进行控制,也可以通过响应来自操纵设备140的一个或多个控制指令对UAV 110进行控制。
载体120可以包括电调121和电机122。载体120可以用来承载负载123。例如,当载体120为云台设备时,负载123可以为拍摄设备(例如,照机、摄像机等),本发明的实施例并不限于此,例如,载体也可以是用于承载武器或其它负载的承载设备。飞行控制器161可以通过电调121和电机122控制载体120的运动。可选地,作为一另一实施例,载体120还可以包括控制器,用于通过控制电调121和电机122来控制载体120的运动。应理解,载体120可以独立于UAV 110,也可以为UAV 110的一部分。应理解,电机122可以是直流电机,也可以交流电机。另外,电机122可以是无刷电机,也可以有刷电机。还应理解,载体可以位于飞行器的顶部,也可以位于飞行器的底部。
显示设备130位于无人飞行系统100的地面端,可以通过无线方式与UAV110进行通信,并且可以用于显示UAV 110的姿态信息。另外,当负载123为拍摄设备时,还可以在显示设备130上显示拍摄设备拍摄的图像。应理解,显示设备130可以是独立的设备,也可以设置在操纵设备140中。
操纵设备140位于无人飞行系统100的地面端,可以通过无线方式与UAV110进行通信,用于对UAV 110进行远程操纵。操纵设备例如可以是遥控器或者安装有控制UAV的APP(应用程序,Application)的终端设备,例如,智能手机、平板电脑等。本发明的实施例中,通过操纵设备接收用户的输入,可以指通过遥控器上的拔轮、按钮、按键、摇杆等输入装置或者终端设备上的用户界面(UI)对UAV进行操控。
应理解,上述对于无人飞行系统各组成部分的命名仅是出于标识的目的,并不应理解为对本发明的实施例的限制。
图2是根据本发明实施例的控制方法的示意性流程图。可选地,该方法200可以应用上述提到的无人飞行系统,此时,以下提到的控制设备可以是该无人飞行系统中的飞行控制器161,而运载设备则可以包括该UAV110和载体120。该方法200可以包括以下的内容。
在210中,确定跟踪对象与跟踪设备的相对关系。
例如,该相对关系可以包括以下中的至少一种:
该跟踪对象与该跟踪设备的相对位置;
该跟踪对象与该跟踪设备的相对方位;
该跟踪对象与该跟踪设备的相对速度;
该跟踪设备与该跟踪对象的位置连线与该跟踪对象的速度方向的夹角;
该跟踪对象与该跟踪设备的相对加速度;和
该跟踪对象与该跟踪设备的相对角速度。
可选地,以上提到的相对位置可以用于指示跟踪对象与跟踪设备之间的相对距离和/或用于表示跟踪设备如何指向跟踪对象。
例如,假设跟踪设备是拍摄设备,跟踪对象是人,则相对方位可以用表示拍摄设备拍摄人的哪些部分,例如拍摄人的前方、后方、左侧方还是右侧方等。
可选地,在本发明实施例中,跟踪对象与跟踪设备的相对方位可以是指在北东地坐标系下,跟踪设备相对于跟踪对象的方位,例如,跟踪设备在跟踪对象的西北方向或西向等。
可选地,在本发明实施例中,跟踪设备的位置可以通过运载设备的位置来表示。例如,拍摄设备的位置,可以通过飞行器的位置来表征。
可选地,在本发明实施例中,跟踪对象与跟踪设备的相对速度可以是指跟踪设备相对于跟踪对象的速度,即假设跟踪对象为静止不动的情况下,跟踪设备以何种速度远离或靠近跟踪对象。
可选地,在本发明实施例中,速度可以是指速度大小和速度方向。
例如,跟踪对象与跟踪设备的相对速度可以是指跟踪设备与跟踪对象的相对速度大小和/或相对速度方向。
可选地,在本发明实施例中,跟踪对象与跟踪设备的位置连线的夹角与跟踪对象的速度方向的夹角可以是速度方向为开始的顺时针角度,并在使用或计算过程中,一直按照与速度方向为开始顺时针的方式使用或计算该角度;可选地,该角度也可以是以速度方向为开始的逆时针角度,并在使用或计算过程中,一直按照与速度方向为开始逆时针的方式使用或计算该角度。
可选地,在本发明实施例中,在跟踪对象的速度变为相反时,跟踪对象与跟踪设备的位置连线的夹角与跟踪对象的速度方向的夹角可以变为(180-α),其中,α为在速度方向变化之前,跟踪对象与跟踪设备的位置连线的夹角与跟踪对象的速度方向的夹角。
可选地,该跟踪对象与该跟踪设备的相对加速度可以是指跟踪设备相对于跟踪对象的加速度,即假设跟踪对象在静止不动的情况,跟踪设备以何种加速度远离或靠近跟踪对象。
可选地,该跟踪对象与该跟踪设备的相对角速度可以是指跟踪设备相对于跟踪对象的角速度,即假设跟踪对象在静止不动的情况,跟踪设备以何种角速度围绕跟踪对象旋转。
可选地,在本申请实施例中,该相对关系可以是根据用户输入信息确定的,也可以是根据环境信息确定的,也可以是根据跟踪对象的运动信息确定的。
220中,检测该跟踪对象的运动信息。
例如,运动信息可以包括以下中的至少一种:所述跟踪对象的速度,加速度,朝向变化和姿态变化。
可选地,在本发明实施例中,可以根据通过跟踪对象的位置的差分,计算跟踪对象的速度。
其中,跟踪对象的位置可以根据跟踪对象发出的信号中携带的卫星位置信息来确定跟踪对象的位置,或者,跟踪设备可以根据用于安装在运载设备上的传感器来获取运载设备与跟踪设备的相对位置,并根据跟踪设备的卫星位置,来确定跟踪对象的位置。其中,该卫星位置可以是GPS(Global Positioning System,全球定位系统)位置,该传感器可以是图像传感器或红外传感器等。
例如,如图3所示,假设飞行器与人的距离为α,以及无人机与人的距离为d,且无人机的坐标为(x1,y1),则可以计算人的坐标为x0=d×sinα+x1,y0=d×cosα+y1。
可选地,在计算跟踪设备的速度之后,可以根据跟踪对象的速度变化来计算跟踪对象的加速度。
可选地,在本发明实施例中,跟踪对象的朝向变化可以是人的朝向的变化、车头的变化等。
可选地,在本发明实施例中,跟踪对象的姿态变化可以是指跟踪对象内部各个部分的运动,例如,人的站立、蹲下、手势和摇头等。
在230中,根据该运动信息和该相对关系,控制用于运载该跟踪设备的运载设备的运动,以便于该跟踪设备对该跟踪对象进行跟踪。
可选地,在本发明实施例中,运载设备包括可以飞行器;则可以控制飞行器的姿态和飞行器的运动轨迹中的至少一种,实现跟踪设备对跟踪对象的跟踪。
可选地,在本发明实施例中,运载设备包括飞行器和载体,则可以控制飞行器的姿态、飞行器的运动轨迹和载体的姿态中的至少一种,实现跟踪设备对跟踪对象的跟踪。
可选地,在本发明实施例中,飞行器的姿态可以通过飞行器的以下至少一种姿态角来表征:航向(yaw)角、横滚(roll)角和俯仰(pitch)角。
可选的,飞行器的运动可以通过控制飞行器的姿态角来实现,具体地,飞行器的航向角可用于控制飞行器的偏航运动;飞行器的横滚角可用于控制飞行器的侧向运动;飞行器的俯仰角可用于控制飞行器的前后运动。其中,控制姿态角可以包括控制姿态角变化的大小和姿态角变化的方向。
可选地,载体可以包括一个或多个转轴机构,载体的转轴机构可以包括以下中的至少一种:横滚轴机构、平移轴机构和俯仰轴机构。控制载体的姿态可以通过控制转轴机构的运动在来实现。本发明实施例可以分别控制上述三个转轴机构中的每个转轴机构围绕相应的旋转轴旋转,例如,控制横滚轴机构围绕横滚轴选择,控制平移轴机构围绕平移轴旋转,控制俯仰轴机构围绕俯仰轴旋转。
可选地,在本发明实施例中,如何通过飞行器的姿态、飞行器的运动轨迹和载体的姿态使得跟踪设备对跟踪对象进行跟踪,可以根据具体情况而定。
例如,跟踪对象的运动幅度较大,则可以通过调整飞行器的运动轨迹,并微调飞行器和/或载体的姿态来使得跟踪对象在跟踪设备的视野范围内。
再例如,跟踪对象的运动幅度不大,则可以不调整飞行器的运动规定,通过调整飞行器和/或载体的姿态来使得跟踪对象在跟踪设备的视野范围内。
可选地,在本发明实施例中,可以根据该运动信息,控制该运载设备的运动,使得该跟踪设备保持与该跟踪对象的该相对关系的变化在预定范围内。其中,该预定范围可以是可允许的误差范围。
可选地,在本申请实施例中,还可以根据跟踪对象的朝向,控制运载设备的运动。
以下为了更加清楚地理解本发明,以下将结合图4、图5a-5c、图6a-6b以及图7a-7c举例说明如何控制运载设备的运动对跟踪对象进行跟踪。
例如,如图4,以跟踪对象为人,以及跟踪设备为拍摄设备为例,拍摄设备与人的距离保持10m,拍摄设备的拍摄方向与人脸的朝向(其中,圆圈中的箭头方向表示人脸朝向)呈60°,且人的速度方向和人脸朝向一致。
可选地,在对跟踪对象进行跟踪时,可以即考虑跟踪对象的自身朝向,以及考虑运动方向,或者,可以考虑跟踪对象的运动方向,而不考虑跟踪对象的自身朝向,或者,可以考虑跟踪对象的自身朝向,而不考虑跟踪对象的运动方向。
以下假设人脸朝向不变,但是人的速度方向变为相反,也即变为图5a所示的情况,下面将说明在参考不同的相对关系时,运载设备所处的位置(可以等同于跟踪设备的位置)。
例如,假设跟踪的人的朝向,而不需要保持拍摄设备与人脸的连线与人的速度方向之间的夹角,则跟拍摄设备所处的位置可以如图5b所示。
例如,如果需要保持拍摄设备与人脸的连线与人的速度方向之间的夹角,则拍摄设备所处的位置可以如图5c所示。
以下假设人脸朝向和人的速度方向均变为相反,也即变为图6a所示的情况,如果跟踪的人脸的朝向,或需要保持拍摄设备与人脸的连线与人的速度方向的夹角,则拍摄设备所处的位置可以如图6b所示。
以下假设人脸朝向改变,但是人的速度方向不变,也即变为图7a所示的情况,下面将说明在参考不同的相对关系时,运载设备所处的位置。
例如,如果需要跟踪人脸的朝阳,而不需要保持拍摄设备与人脸的连线与人的速度方向之间的夹角,则拍摄设备所处的位置可以如图7b所示。
例如,如果需要保持拍摄设备与人脸的连线与人的速度方向之间的夹角,则拍摄设备所处的位置可以如图7c所示。
因此,以上介绍了如何对人脸的朝向进行跟踪,以及保持跟踪设备与跟踪对象的连线与跟踪设备的运动方向之间的夹角。但是本申请实施例并不限于此。例如,跟踪设备可以保持与跟踪对象的相对速度、相对加速度和相对角速度等。
为了更加清楚地理解本发明,以下将介绍如何计算跟踪设备的目标方向和目标位置。可选地,跟踪设备的目标方向可以等同于运载设备的目标方向,和/或跟踪设备的目标位置可以等同于运载设备的目标位置。
在一种实现方式中,根据所述运动信息和所述相对关系,确定所述跟踪设备的目标方向和目标位置;控制所述运载设备的运动,使得所述跟踪设备在所述目标位置,朝着所述目标方向,以对所述跟踪对象进行跟踪。该种实现方式可以称为随动跟踪,也即跟踪设备的方向可以随着跟踪对象的运动信息和跟踪设备和跟踪对象的相对关系改变。
可选地,确定所述跟踪设备与所述跟踪对象的位置连线与所述跟踪对象的速度方向之间需要保持的夹角为目标夹角;根据所述目标夹角和所述跟踪对象的速度方向,确定所述跟踪设备的目标方向。
可选地,该目标夹角为预设夹角。
可选地,该预设夹角可以为任意角度,例如,可以为90°。
可选地,根据所述跟踪对象与所述跟踪设备的相对位置和所述目标夹角,确定所述跟踪设备的目标位置。
以下将集合图8进行详细说明。以下图8将以北东地为参考坐标系进行说明。但应理解,本申请实施例并不限于此,例如,可以以运载设备本身作为参考。
例如,如图8所示,假设跟踪对象与跟踪设备的连线与跟踪设备的速度方向需要保持的夹角为α角,跟踪对象与跟踪设备之间的距离为d,从A点到B点,跟踪对象速度方向的改变的角度为β角,则跟踪设备的方向需要改变的角度也为β角。假设在B处,跟踪对象的坐标为(xt yt),跟踪对象的速度方向与x轴的夹角为γ角,则跟踪设备的目标位置(b点位置)为x=d×sin(λ+α)+xt,y=d×cos(λ+α)+yt。
应理解,图8中所示的角度是以y轴作为参考坐标轴的夹角,但应理解,本申请实施例并不限于此,例如,可以以x轴作为参考坐标轴。在基于上述公式的基础上,在未付出创造性劳动的情况下,任何对于该公式的变形,均应在本发明实施例的保护范围之内。
可选地,本发明实施例提到的各个角度的正负可以以按照顺时针或逆时针的方向定义,如果需要对角度进行相加或相减等,各个角度的正负需要均统一按照顺时针的方向定义,或按照逆时针的方向定义。
应理解,本发明实施例提到的方向可以是与北东地坐标系中x轴或y轴的夹角。
可选地,在本申请实施例中,在跟踪过程中,可以获取用户输入信息,并根据该用户输入信息,所述运动信息和所述相对关系,确定所述跟踪设备的目标方向和目标位置。
可选地,该用户输入信息可以为对相对关系和相对位置的调整,需要对跟踪对象进行跟踪的方式等。
在另一种实现方式中,根据所述跟踪设备的预设方向、所述运动信息和所述相对关系,确定所述跟踪设备的目标位置;根据所述预设夹角和所述目标位置,控制所述运载设备的运动,使得所述跟踪设备在所述目标位置,朝着所述预设方向,以对所述跟踪对象进行跟踪。该种模式可以称为固定跟踪,也即跟踪设备的方向预设不变的。
可选地,所述预设方向相对于预设参考方向成固定夹角。
具体地说,在此种方式中,用户可以预设跟踪设备的跟踪方向,例如,可以预设跟踪设备的跟踪方向一直朝西,而不论跟踪设备的运动如何改变,以及跟踪对象与跟踪设备的相对关系是哪种关系,跟踪设备的跟踪方向一直不变,此时,需要在跟踪设备的方向固定的情况下,利用跟踪设备的运动信息和相对关系来确定跟踪设备的目标位置。应理解,跟踪设备的跟踪方向可以是指跟踪设备的指向,例如,可以是拍摄设备的拍摄光线方向、武器的对准方向,救火设备的喷射方向等。
以下以9为例进行说明。
在图9中,在目标处于位置A处时,无人机可以处于位置a处对目标进行拍摄,在目标处于位置B处时,无人机可以处于位置b处对目标进行拍摄,在无人机处于C处时,无人机可以位于位置c处对目标进行拍摄。其中,在a、b和c处,拍摄设备的拍摄方向一直朝西,而通过调整机体朝向和机体的位置使得拍摄设备在朝西拍摄时,能够拍摄到目标,且拍摄设备与目标的距离保持不变。
以目标处于B处为例,在B处,目标的坐标为(xt yt),则拍摄设备需要处于的位置(b点位置)为y=yt+d,x=xt其中,d为拍摄设备与目标需要保持的距离。
可选地,在本发明实施例中,在计算处跟踪设备的目标位置之后,可以根据跟踪设备的当前位置以及目标位置进行位置的差分,获取跟踪设备的目标速度,并按照目标速度控制跟踪设备的飞行。
可选地,在本申请实施例中,可以在所述跟踪过程中获取用户输入信息;根据所述用户输入信息、所述跟踪设备的预设方向、所述运动信息和所述相对关系,确定所述跟踪设备的目标位置。
可选地,该用户输入信息可以是预设方向的调整和相对关系的改变等。
可选地,在本发明实施例中,用户输入信息还用于对跟踪模式的选择,例如,是选择随动跟踪的方式还是选择固定跟踪的方式。
应理解,本发明实施例中提到的跟踪对象可以是人、人中的某个部分、物或物的某个部分。
例如,如图8所示的跟踪对象可以是人脸,则人脸的速度方向可以是人的移动速度以及人脸朝向的改变共同决定。
可选地,在本发明实施例中,飞行器的飞行高度可以随着地面高度的变化而变化,也可以随着跟踪对象的高度的变化而变化。
可选地,在本发明实施例中,还可以根据该跟踪对象的类型,控制该运载设备的运动。
具体地,根据该跟踪对象的类型,确定该类型对应的运动信息的约束;根据该约束,对该跟踪对象的运动信息的噪声进行滤波处理,以便于根据滤波处理后的该运动信息,控制用于运载该跟踪设备的运载设备的运动。可选地,该滤波处理的方式为卡尔曼滤波。
例如,在计算处跟踪对象的位置之后,可以通过位置的差分,计算出跟踪对象在北东地坐标系下的速度。但是位置和速度信息的噪音都比较大,可以使用卡尔曼滤波的办法对跟踪对象的速度进行进一步的估算。估算的时候可以根据视觉识别算法分类出来的目标种类来适配不同的物体的运动模型,例如如果视觉识别算法分类出来目标是人类,那么运动模型中,速度约束就可以设为10m/s,加速度可以设为5m/s2,而分类出来如果是汽车,那么速度约束就可以设为40m/s,加速度可以设为25m/s2。
除了卡尔曼滤波的方式对运动信息进行滤波处理,本发明实施例可以利用其他滤波方式,对运动对象进行滤波处理。
可选地,可以根据用户发出的信号,确定跟踪模式。
例如,用户选择的跟踪模式为对跟踪对象的某一部分进行等距离跟踪,则可以确定对跟踪对象进行跟踪所需利用的信息可以为跟踪设备的朝向和跟踪设备的位置,以及跟踪需要利用的相对关系为相对位置。
可选地,可以根据跟踪对象的类型,确定跟踪模式。
例如,假设跟踪对象为人,则跟踪模式为按照人的姿态变化,对人进行跟踪。
例如,假设跟踪对象为车辆,则跟踪模式为按照车辆的速度变化,调整与车辆的相对位置的方式对车辆进行跟踪。
例如,假设跟踪对向为球类,则跟踪模式可以为跟踪球类的速度方向,对球进行跟踪。
可选地,可以根据该跟踪模式,确定对该跟踪对象进行跟踪所需利用的运动信息的信息类别,以便于根据该信息类别,确定检测该运动信息;和/或,根据该跟踪模式,确定对该跟踪对象进行跟踪所需利用的相对关系的类别,以便于根据该相对关系的类别,确定该相对关系。
可选地,在本发明实施例中,控制设备可以根据用户发出的信号,对跟踪设备与跟踪对象之间的相对关系进行调整。
可选地,根据用户发出的信号,可以通过调整运载设备的方式,来对相对关系进行调整。
其中,用户发出的信号可以是用户的姿态信号,具体地,可以通过该用户的手势信号进行调整,例如,通过用户手势的指向,调整跟踪设备的前进方向,在用户停止手势的指向时,则运载设备也停止调整相对关系,并可以按照调整后的相对关系,以及跟踪跟踪对象的运动信息,运载跟踪设备对跟踪对象进行调整。
可选地,用户发出的信号还可以是通过操纵设备发出的信号。
例如,用户可以通过操纵设备的俯仰控制元件发出的信号,调整该飞行器与该跟踪对象的距离。
例如,接收该用户通过翻滚控制元件发出的信号,控制该飞行器环绕该跟踪对象。
其中,在接收到用户通过操纵设备的翻滚控制元件发出的信号时,控制设备可以自动识别为该信号用于飞行器环绕跟踪对象。
例如,在上述随动模式或固定平行模式下,在接收到用户通过操纵设备的翻滚控制元件发出的信号时,控制设备可以自动识别为该信号用于飞行器环绕跟踪对象。
例如,接收该用户通过动力控制元件发出的信号,调整该飞行器的高度。
可选地,俯仰控制元件可以是俯仰控制杆或俯仰控制按键,翻滚控制元件可以是翻滚控制杆或翻滚控制按键,动力控制元件可以是动力控制杆或动力控制杆,例如,可以是throttle杆或按键。
可选地,控制设备根据用户发出的信号,可以以跟踪对象或预定方向而非机头为基准,调整运载设备的运动,此时,也可以称为以无头模式进行运动的调整。例如,如果用户控制运载设备向前运动,此时运载设备的机头朝向何方,均可以以跟踪对象为基准,以朝着跟踪对象的方式或预先设定的方向向前运动。
可选地,控制设备还可以根据环境信息,对跟踪设备与跟踪对象的相对关系进行调整。
可选地,该环境信息可以指气候信息和地理位置信息等。
例如,假设当前光线较弱,可以使得调整跟踪对象与跟踪设备的距离,使得跟踪设备更接近跟踪对象。
再例如,假设遇到障碍物,则可以根据障碍物、跟踪对象和跟踪设备之间的位置关系,确定绕开障碍物的路径;根据绕开障碍物的路径,对相对关系进行调整。
其中,绕开跟踪对象的路径,可以以接近跟踪对象的方式绕开障碍物,这样可以避免被障碍物遮挡而丢失跟踪对象。
可选地,在本发明实施例中,还可以根据该跟踪对象的运动信息,对该相对关系进行调整。
例如,可以根据该跟踪对象的速度,调整该跟踪对象与该跟踪设备之间的相对距离和/或相对方位。
例如,在100m跑的体育比赛中,可以根据运动员的运动速度调整拍摄设备与运动员之间的相对距离和/或方位,例如,在等待号令的阶段,运动员的速度是0,可以在运动员的右前方对运动员进行拍摄;在赛跑阶段,运动员的速度较快,可以在运动员的正右方对运动员进行拍摄,在结束时,运动员的速度放慢速度,可以在运动员的正前方,对运动员的面部表情进行拍摄。
可选地,还可以根据跟踪对象的姿态,调整跟踪对象与跟踪设备之间的相对距离和/或相对方位。
例如,在拍摄娱乐节目时,演员在演唱时,可以近距离拍摄演员的面部表情,演员在跳舞时,可以远距离拍摄演员的整体动作。
因此,在本发明实施例中,可以确定跟踪对象与跟踪设备的相对关系;检测所述跟踪对象的运动信息;根据所述运动信息和所述相对关系,控制用于运载所述跟踪设备的运载设备的运动,以便于所述跟踪设备对所述跟踪对象进行跟踪,从而可以实现对跟踪对象的自动跟踪。
以上已经结合图2至图9描述了根据本发明实施例的控制方法,以下将结合图10-11描述可以实现上述控制方法的控制设备。
图10是根据本发明实施例的控制设备300的示意性框图。如图10所示,该控制设备300可以包括:
第一确定单元310,用于确定跟踪对象与跟踪设备的相对关系;
检测单元320,用于检测该跟踪对象的运动信息;
控制单元330,用于根据该运动信息和该相对关系,控制用于运载该跟踪设备的运载设备的运动,以便于该跟踪设备对该跟踪对象进行跟踪。
可选地,该相对关系包括以下中的至少一种:
该跟踪对象与该跟踪设备的相对位置,
该跟踪对象与该跟踪设备的相对方位,
该跟踪对象与该跟踪设备的相对速度,
该跟踪设备与该跟踪对象的位置连线与该跟踪对象的速度方向的夹角,
该跟踪对象与该跟踪设备的相对加速度,和
该跟踪对象与该跟踪设备的相对角速度。
可选地,该运动信息包括以下中的至少一种:该跟踪对象的速度,加速度,朝向变化和姿态变化。
可选地,该运载设备包括飞行器;该控制单元进一步用于:控制该飞行器的姿态和该飞行器的运动轨迹中的至少一种。
可选地,该跟踪设备为拍摄设备。
可选地,该运载设备还包括载体,该载体用于设置于该飞行器中且用于装载该拍摄设备。
该控制单元330进一步用于:控制该飞行器的姿态、该飞行器的运动轨迹和该载体的姿态中的至少一种。
可选地,该控制单元330进一步用于:
根据该运动信息,控制该运载设备的运动,使得该跟踪设备保持与该跟踪对象的该相对关系的变化在预定范围内。
可选地,该控制单元330进一步用于:
根据该运动信息和该相对关系,确定该跟踪设备的目标方向和目标位置;
控制该运载设备的运动,使得该跟踪设备在该目标位置,朝着该目标方向,以对该跟踪对象进行跟踪。
可选地,该控制单元330进一步用于:
确定所述跟踪设备与所述跟踪对象的位置连线与所述跟踪对象的速度方向之间需要保持的夹角为目标夹角;
根据所述目标夹角和所述跟踪对象的速度方向,确定所述跟踪设备的目标方向。
可选地,该控制单元330进一步用于:
根据所述跟踪对象与所述跟踪设备的相对位置和所述目标夹角,确定所述跟踪设备的目标位置。
可选地,该控制单元330可以按照以下公式确定所述目标位置:
x=d×sin(λ+α)+xt,y=d×cos(λ+α)+yt
其中,(x y)是所述跟踪设备在北东地坐标系的目标位置,其中,(xt yt)是跟踪对象在北东地坐标系的坐标位置,α为所述目标夹角,γ是所述速度方向与参考坐标轴的夹角。
可选地,该控制单元330进一步用于:
根据所述跟踪对象的朝向、所述运动信息和所述相对关系,确定所述跟踪设备的目标方向和目标位置。
可选地,该控制单元330进一步用于:
根据该跟踪设备的预设方向、该运动信息和该相对关系,确定该跟踪设备的目标位置;
根据该预设方向和该目标位置,控制该运载设备的运动,使得该跟踪设备在该目标位置,朝着该预设方向,以对该跟踪对象进行跟踪。
可选地,所述预设方向相对于预设参考方向成固定夹角。
可选地,该控制单元330进一步用于:在所述跟踪过程中获取用户输入信息;根据所述用户输入信息、所述跟踪设备的预设方向、所述运动信息和所述相对关系,确定所述跟踪设备的目标位置
可选地,该控制单元330进一步用于:
根据该跟踪对象的类型,控制该运载设备的运动。
可选地,该控制单元330进一步用于:
根据该跟踪对象的类型,确定该类型对应的运动信息的约束;
根据该约束,对该跟踪对象的运动信息的噪声进行滤波处理,以便于根据滤波处理后的该运动信息,控制用于运载该跟踪设备的运载设备的运动。
可选地,该滤波处理的方式为卡尔曼滤波。
可选地,该第二确定单元340进一步用于:
根据用户发出的信号,确定该跟踪模式;或者,
根据该跟踪对象的类型,确定该跟踪模式。
可选地,如图10所示,该控制设备330还包括第二确定单元340,用于:
根据该跟踪模式,确定对该跟踪对象进行跟踪所需利用的运动信息的信息类别,以便于根据该信息类别,确定检测该运动信息;和/或
根据该跟踪模式,确定对该跟踪对象进行跟踪所需利用的相对关系的类别,以便于根据该相对关系的类别,确定该相对关系。
可选地,该控制设备330还包括调整单元350。
可选地,该调整单元350用于:根据用户发出的信号,对该相对关系进行调整。
可选地,该调整单元350进一步用于:
根据用户发出的信号,调整该运载设备的运动,以对该相对关系进行更新。
可选地,该用户发出的信号包括该用户的姿态信号和通过操纵设备发出的信号中的至少一种。
可选地,该调整单元350进一步用于:
接收该用户通过该操纵设备的俯仰控制元件发出的信号,调整该飞行器与该跟踪对象的距离;或,
接收该用户通过该操纵设备的翻滚控制元件发出的信号,控制该飞行器环绕该跟踪对象;或,
接收该用户通过该操纵设备的动力控制元件发出的信号,调整该飞行器的高度。
可选地,该调整单元350进一步用于:
根据该用户通过该操纵设备发出的信号,以该跟踪对象或预先设定的方向而非机头为基准,调整该运载设备的运动。
可选地,如图5所示,该控制设备还包括调整单元,该调整单元350用于:
根据环境状态信息,对该相对关系进行调整。
可选地,该调整单元350进一步用于:
在存在对跟踪或该运载设备的运动造成障碍的障碍物时,根据该障碍物、该跟踪对象以及该跟踪设备之前的位置关系,确定绕开该障碍物的路径;
根据该绕开该障碍物的路径,对该相对关系进行调整。
可选地,该绕开该障碍物的路径为以接近该跟踪对象的方式绕开该障碍物。
可选地,该调整单元350进一步用于:
根据该跟踪对象的运动信息,对该相对关系进行调整。
可选地,该调整单元350进一步用于:
根据该跟踪对象的速度,调整该跟踪对象与该跟踪设备之间的相对位置。
可选地350,该调整单元350进一步用于:
根据跟踪对象发送的卫星位置信息,以及该跟踪设备的卫星位置信息,确定该相对位置;和/或
通过安装在该运载设备上的传感器检测该相对位置。
可选地,该检测单元320进一步用于:
根据该跟踪对象的位置差分,确定该跟踪对象的速度。
可选地,该控制设备300可以实现图2所示的方法200,为了简洁,在此不再赘述。
图11是根据本发明实施例的控制设备400的示意性框图。如11所示,该控制设备可以包括处理器410和存储器420。可选地,该处理器410和该存储器420可以通过总线430相连。可选地,该控制设备400还可以包括收发440,该收发器440可以与操纵设备通信。
该处理器410用于调用存储器420存储的指令,执行以下动作:
确定跟踪对象与跟踪设备的相对关系;
检测该跟踪对象的运动信息;
根据该运动信息和该相对关系,控制用于运载该跟踪设备的运载设备的运动,以便于该跟踪设备对该跟踪对象进行跟踪。
可选地,该相对关系包括以下中的至少一种:
该跟踪对象与该跟踪设备的相对位置,
该跟踪对象与该跟踪设备的相对方位,
该跟踪对象与该跟踪设备的相对速度,
该跟踪设备与该跟踪对象的位置连线与该跟踪对象的速度方向的夹角,
该跟踪对象与该跟踪设备的相对加速度,和
该跟踪对象与该跟踪设备的相对角速度。
可选地,该运动信息包括以下中的至少一种:该跟踪对象的速度,加速度,朝向变化和姿态变化。
可选地,该运载设备包括飞行器;
该处理器410用于调用存储器420存储的指令,进一步执行以下动作:控制该飞行器的姿态和该飞行器的运动轨迹中的至少一种。
可选地,该跟踪设备为拍摄设备。
可选地,该运载设备还包括载体,该载体用于设置于该飞行器中且用于装载该拍摄设备。
该处理器410用于调用存储器420存储的指令,进一步执行以下动作:控制该飞行器的姿态、该飞行器的运动轨迹和该载体的姿态中的至少一种。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据该运动信息,控制该运载设备的运动,使得该跟踪设备保持与该跟踪对象的该相对关系的变化在预定范围内。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据该运动信息和该相对关系,确定该跟踪设备的目标方向和目标位置;
控制该运载设备的运动,使得该跟踪设备在该目标位置,朝着该目标方向,以对该跟踪对象进行跟踪。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
确定该跟踪设备与该跟踪对象的位置连线与该跟踪对象的速度方向之间需要保持的夹角为目标夹角;根据该目标夹角和该跟踪对象的速度方向,确定该跟踪设备的目标方向。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据该跟踪对象与该跟踪设备的相对位置和该目标夹角,确定该跟踪设备的目标位置。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据所述跟踪对象的朝向、所述运动信息和所述相对关系,确定所述跟踪设备的目标方向和目标位置。
可选地,处理器410用于调用存储器存储的指令,进一步执行以下动作:
按照以下公式确定该目标位置:
x=d×sin(λ+α)+xt,y=d×cos(λ+α)+yt
其中,(x y)是该跟踪设备在北东地坐标系的目标位置,其中,(xt yt)是跟踪对象在北东地坐标系的坐标位置,α为该目标夹角,γ是该速度方向与参考坐标轴的夹角。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据该跟踪设备的预设方向、该运动信息和该相对关系,确定该跟踪设备的目标位置;
根据该预设方向和该目标位置,控制该运载设备的运动,使得该跟踪设备在该目标位置,朝着该预设方向,以对该跟踪对象进行跟踪。
可选地,所述处理器410用于调用存储器420存储的指令,进一步执行以下动作:
在所述跟踪过程中获取用户输入信息;
根据所述用户输入信息,所述运动信息和所述相对关系,确定所述跟踪设备的目标方向和目标位置。
可选地,所述预设方向相对于预设参考方向成固定夹角。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据该跟踪对象的类型,控制该运载设备的运动。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据该跟踪对象的类型,确定该类型对应的运动信息的约束;
根据该约束,对该跟踪对象的运动信息的噪声进行滤波处理,以便于根据滤波处理后的该运动信息,控制用于运载该跟踪设备的运载设备的运动。
可选地,该滤波处理的方式为卡尔曼滤波。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据该跟踪对象的类型;
确定用于对该跟踪对象进行跟踪的跟踪模式。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
获取用户发出的信号;根据该用户发出的信号,确定用于对该跟踪对象进行跟踪的跟踪模式。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据该跟踪模式,确定对该跟踪对象进行跟踪所需利用的运动信息的信息类别,以便于根据该信息类别,确定检测该运动信息;和/或
根据该跟踪模式,确定对该跟踪对象进行跟踪所需利用的相对关系的类别,以便于根据该相对关系的类别,确定该相对关系。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据用户发出的信号,对该相对关系进行调整。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据用户发出的信号,调整该运载设备的运动,以对该相对关系进行更新。
可选地,该用户发出的信号包括该用户的姿态信号和通过操纵设备发出的信号中的至少一种。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
接收该用户通过该操纵设备的俯仰控制元件发出的信号,调整该飞行器与该跟踪对象的距离;或,
接收该用户通过该操纵设备的翻滚控制元件发出的信号,控制该飞行器环绕该跟踪对象;或,
接收该用户通过该操纵设备的动力控制元件发出的信号,调整该飞行器的高度。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据该用户通过该操纵设备发出的信号,以该跟踪对象或预先设定的方向而非机头为基准,调整该运载设备的运动。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据环境状态信息,对该相对关系进行调整。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
在存在对跟踪或该运载设备的运动造成障碍的障碍物时,根据该障碍物、该跟踪对象以及该跟踪设备之前的位置关系,确定绕开该障碍物的路径;
根据该绕开该障碍物的路径,对该相对关系进行调整。
可选地,该绕开该障碍物的路径为以接近该跟踪对象的方式绕开该障碍物。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据该跟踪对象的运动信息,对该相对关系进行调整。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据该跟踪对象的速度,调整该跟踪对象与该跟踪设备之间的相对位置。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据跟踪对象发送的卫星位置信息,以及该跟踪设备的卫星位置信息,确定该相对位置;和/或
通过安装在该运载设备上的传感器检测该相对位置。
可选地,该处理器410用于调用存储器420存储的指令,进一步执行以下动作:
根据该跟踪对象的位置差分,确定该跟踪对象的速度。
可选地,该控制设备300可以实现图2所示的方法200,为了简洁,在此不再赘述。
图12是根据本发明实施例的运载系统500的示意性框图。如图12所示,该运载系统包括控制设备510和运载设备520。其中,该控制设备510可以为控制设备300或400。该运载设备520可以包括飞行器。
可选地,该运载设备还可以包括载体。该载体可选地为云台。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本发明所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。
Claims (13)
1.一种控制方法,其特征在于,所述方法包括:
确定跟踪对象与飞行器的相对关系,所述飞行器包括载体,所述载体设置于所述飞行器中且用于装载拍摄设备;
检测所述跟踪对象的运动信息;
根据所述运动信息和所述相对关系,控制所述飞行器的姿态、所述飞行器的运动轨迹或所述载体的姿态中的一种或多种,以便于所述拍摄设备对所述跟踪对象进行跟踪拍摄。
2.一种控制方法,其特征在于,所述方法包括:
确定跟踪对象与跟踪设备的相对关系;
检测所述跟踪对象的运动信息;
根据第一信息,对所述相对关系进行调整,所述第一信息包括以下一种或多种:用户发出的信号,环境状态信息或所述跟踪对象的运动信息;
根据所述运动信息和调整后的所述相对关系,控制用于运载所述跟踪设备的运载设备的运动,以便于所述跟踪设备对所述跟踪对象进行跟踪。
3.一种控制方法,其特征在于,所述方法包括:
确定跟踪对象与跟踪设备的相对关系;
根据所述跟踪对象的类型和/或用户发出的信号,确定用于对所述跟踪对象进行跟踪的跟踪模式;
检测所述跟踪对象的运动信息;
根据所述跟踪模式、所述运动信息和所述相对关系,控制用于运载所述跟踪设备的运载设备的运动,以便于所述跟踪设备对所述跟踪对象进行跟踪。
4.根据权利要求2或3所述的方法,其特征在于,所述运载设备为飞行器。
5.一种控制设备,其特征在于,包括处理器和存储器,所述存储器用于存储指令,所述处理器用于调用存储器存储的指令,执行以下动作:
确定跟踪对象与飞行器的相对关系,所述飞行器包括载体,所述载体设置于所述飞行器中且用于装载拍摄设备;
检测所述跟踪对象的运动信息;
根据所述运动信息和所述相对关系,控制所述飞行器的姿态、所述飞行器的运动轨迹或所述载体的姿态中的一种或多种,以便于所述拍摄设备对所述跟踪对象进行跟踪拍摄。
6.一种控制设备,其特征在于,包括处理器和存储器,所述存储器用于存储指令,所述处理器用于调用存储器存储的指令,执行以下动作:
确定跟踪对象与跟踪设备的相对关系;
检测所述跟踪对象的运动信息;
根据第一信息,对所述相对关系进行调整,所述第一信息包括以下一种或多种:用户发出的信号,环境状态信息或所述跟踪对象的运动信息;
根据所述运动信息和调整后的所述相对关系,控制用于运载所述跟踪设备的运载设备的运动,以便于所述跟踪设备对所述跟踪对象进行跟踪。
7.一种控制设备,其特征在于,包括处理器和存储器,所述存储器用于存储指令,所述处理器用于调用存储器存储的指令,执行以下动作:
确定跟踪对象与跟踪设备的相对关系;
根据所述跟踪对象的类型和/或用户发出的信号,确定用于对所述跟踪对象进行跟踪的跟踪模式;
检测所述跟踪对象的运动信息;
根据所述跟踪模式、所述运动信息和所述相对关系,控制用于运载所述跟踪设备的运载设备的运动,以便于所述跟踪设备对所述跟踪对象进行跟踪。
8.根据权利要求6或7所述的控制设备,其特征在于,所述运载设备为飞行器。
9.一种运载系统,其特征在于,包括权利要求5所述的控制设备和所述飞行器。
10.一种运载系统,其特征在于,包括权利要求6所述的控制设备和所述运载设备。
11.一种运载系统,其特征在于,包括权利要求7所述的控制设备和所述运载设备。
12.根据权利要求10或11所述的运载系统,其特征在于,所述运载设备为飞行器。
13.一种存储介质,其特征在于,所述存储介质存储指令,所述指令用于执行根据权利要求1至4中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010459836.3A CN111562796A (zh) | 2016-09-26 | 2016-09-26 | 控制方法、控制设备和运载系统 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2016/100214 WO2018053877A1 (zh) | 2016-09-26 | 2016-09-26 | 控制方法、控制设备和运载系统 |
CN201680009142.1A CN107223219B (zh) | 2016-09-26 | 2016-09-26 | 控制方法、控制设备和运载系统 |
CN202010459836.3A CN111562796A (zh) | 2016-09-26 | 2016-09-26 | 控制方法、控制设备和运载系统 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680009142.1A Division CN107223219B (zh) | 2016-09-26 | 2016-09-26 | 控制方法、控制设备和运载系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111562796A true CN111562796A (zh) | 2020-08-21 |
Family
ID=59927677
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680009142.1A Active CN107223219B (zh) | 2016-09-26 | 2016-09-26 | 控制方法、控制设备和运载系统 |
CN202010459836.3A Pending CN111562796A (zh) | 2016-09-26 | 2016-09-26 | 控制方法、控制设备和运载系统 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680009142.1A Active CN107223219B (zh) | 2016-09-26 | 2016-09-26 | 控制方法、控制设备和运载系统 |
Country Status (3)
Country | Link |
---|---|
US (2) | US11092975B2 (zh) |
CN (2) | CN107223219B (zh) |
WO (1) | WO2018053877A1 (zh) |
Families Citing this family (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018089714A1 (en) * | 2016-11-09 | 2018-05-17 | Aatonomy, Inc. | Autonomous vehicle moving system, device and method |
CN107992052B (zh) * | 2017-12-27 | 2020-10-16 | 纳恩博(北京)科技有限公司 | 目标跟踪方法及装置、移动设备及存储介质 |
CN108646787B (zh) * | 2018-04-12 | 2021-03-02 | 广州杰赛科技股份有限公司 | 目标追踪方法、装置以及无人机 |
CN108854031A (zh) * | 2018-05-29 | 2018-11-23 | 深圳臻迪信息技术有限公司 | 通过无人摄影技术分析运动数据的方法及相关装置 |
JP2021144260A (ja) * | 2018-06-15 | 2021-09-24 | ソニーグループ株式会社 | 情報処理装置、情報処理方法、プログラム、および情報処理システム |
WO2020019110A1 (zh) * | 2018-07-23 | 2020-01-30 | 深圳市大疆创新科技有限公司 | 移动平台的辅助移动方法、移动装置及移动平台 |
WO2020037524A1 (zh) * | 2018-08-22 | 2020-02-27 | 深圳市大疆创新科技有限公司 | 可移动平台的控制方法、可移动平台及可读存储介质 |
CN109466766A (zh) * | 2018-11-28 | 2019-03-15 | 中电科(德阳广汉)特种飞机系统工程有限公司 | 一种自转旋翼机及侦查系统 |
CN111625022A (zh) * | 2019-02-27 | 2020-09-04 | 上海博泰悦臻网络技术服务有限公司 | 可控制无人机跟随车辆的控制方法、系统、介质及服务端 |
CN110262568B (zh) * | 2019-07-19 | 2021-10-22 | 深圳市道通智能航空技术股份有限公司 | 一种基于目标跟踪的无人机避障方法、装置及无人机 |
KR102195419B1 (ko) * | 2019-09-18 | 2020-12-28 | (주)인텔리안테크놀로지스 | 통신 시스템 |
WO2021168678A1 (zh) * | 2020-02-26 | 2021-09-02 | 深圳市大疆创新科技有限公司 | 路径规划的方法、跟踪设备、存储介质和计算机程序产品 |
CN111352410A (zh) * | 2020-04-26 | 2020-06-30 | 重庆市亿飞智联科技有限公司 | 飞行控制方法、装置、存储介质、自动驾驶仪及无人机 |
CN113272754A (zh) * | 2020-09-28 | 2021-08-17 | 深圳市大疆创新科技有限公司 | 无人机的控制方法、装置、无人机、控制终端及系统 |
CN112383754B (zh) * | 2020-11-12 | 2022-02-18 | 珠海大横琴科技发展有限公司 | 一种预警对象的监控方法及装置、电子设备、存储介质 |
CN112472138B (zh) * | 2020-12-18 | 2023-01-31 | 深圳市德力凯医疗设备股份有限公司 | 一种超声跟踪方法、系统、存储介质及超声设备 |
CN116723981A (zh) * | 2021-03-19 | 2023-09-08 | 深圳市大疆创新科技有限公司 | 无人机的云台控制方法、无人机及存储介质 |
KR102475470B1 (ko) * | 2022-08-26 | 2022-12-08 | 임요셉 | 드론을 이용한 운동 영상 획득 시스템 및 드론을 이용한 운동 영상 획득 방법 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110301925A1 (en) * | 2010-06-08 | 2011-12-08 | Southwest Research Institute | Optical State Estimation And Simulation Environment For Unmanned Aerial Vehicles |
CN102355574A (zh) * | 2011-10-17 | 2012-02-15 | 上海大学 | 机载云台运动目标自主跟踪系统的图像稳定方法 |
CN102419598A (zh) * | 2011-12-08 | 2012-04-18 | 南京航空航天大学 | 一种多无人机协同侦察移动目标的方法 |
CN103226357A (zh) * | 2013-03-22 | 2013-07-31 | 海南大学 | 一种基于目标跟踪的多无人机通信决策方法 |
CN105242684A (zh) * | 2015-10-15 | 2016-01-13 | 杨珊珊 | 一种伴随拍摄飞行器的无人机航拍系统及方法 |
CN105527975A (zh) * | 2015-12-09 | 2016-04-27 | 周润华 | 一种基于无人机的目标跟踪系统 |
CN105676865A (zh) * | 2016-04-12 | 2016-06-15 | 北京博瑞爱飞科技发展有限公司 | 目标跟踪方法、装置和系统 |
CN205353744U (zh) * | 2015-12-15 | 2016-06-29 | 广州中国科学院先进技术研究所 | 一种Delta机器人驱控系统 |
CN105759839A (zh) * | 2016-03-01 | 2016-07-13 | 深圳市大疆创新科技有限公司 | 无人机视觉跟踪方法、装置以及无人机 |
CN105847681A (zh) * | 2016-03-30 | 2016-08-10 | 乐视控股(北京)有限公司 | 拍摄控制方法、设备及系统 |
CN205453893U (zh) * | 2016-03-31 | 2016-08-10 | 深圳奥比中光科技有限公司 | 无人机 |
Family Cites Families (52)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7907750B2 (en) * | 2006-06-12 | 2011-03-15 | Honeywell International Inc. | System and method for autonomous object tracking |
US9933270B2 (en) * | 2007-04-05 | 2018-04-03 | SkyBell Technologies, Inc. | Vehicle tracking systems and methods |
US9026272B2 (en) * | 2007-12-14 | 2015-05-05 | The Boeing Company | Methods for autonomous tracking and surveillance |
CN101794527B (zh) * | 2009-12-30 | 2011-06-15 | 北京控制工程研究所 | 人控交会对接半物理仿真试验系统 |
CN102043964A (zh) * | 2010-12-30 | 2011-05-04 | 复旦大学 | 基于云台摄像头的飞行器起降跟踪算法及跟踪系统 |
US9221506B1 (en) * | 2011-07-18 | 2015-12-29 | The Boeing Company | Location tracking and motion control of automated marking device |
US9766623B2 (en) * | 2012-01-11 | 2017-09-19 | Vista Research, Inc. | Detection and tracking of land, maritime, and airborne objects using a radar on a parasail |
DE102012002067A1 (de) * | 2012-02-03 | 2013-08-08 | Eads Deutschland Gmbh | Luft-Boden-Überwachungs- und/oder Wirksystem und Verfahren zur luftgestützten Inspektion und/oder Bekämpfung von auf dem Land oder auf See befindlichen Objekten |
CN103473757B (zh) * | 2012-06-08 | 2016-05-25 | 株式会社理光 | 在视差图中的对象跟踪方法和系统 |
CN102768518B (zh) * | 2012-07-11 | 2014-05-21 | 清华大学 | 多无人机平台协同控制系统 |
US20140025230A1 (en) * | 2012-07-17 | 2014-01-23 | Elwha LLC, a limited liability company of the State of Delaware | Unmanned device interaction methods and systems |
CN103149939B (zh) * | 2013-02-26 | 2015-10-21 | 北京航空航天大学 | 一种基于视觉的无人机动态目标跟踪与定位方法 |
US9527392B2 (en) * | 2013-03-14 | 2016-12-27 | Aurora Flight Sciences Corporation | Aerial system and vehicle for continuous operation |
US20160086497A1 (en) * | 2013-04-16 | 2016-03-24 | Bae Systems Australia Limited | Landing site tracker |
US9070289B2 (en) * | 2013-05-10 | 2015-06-30 | Palo Alto Research Incorporated | System and method for detecting, tracking and estimating the speed of vehicles from a mobile platform |
US9025825B2 (en) * | 2013-05-10 | 2015-05-05 | Palo Alto Research Center Incorporated | System and method for visual motion based object segmentation and tracking |
US9266611B2 (en) * | 2013-06-20 | 2016-02-23 | University Of Florida Research Foundation, Inc. | Flight path development for remote sensing vehicles in a moving reference frame |
US20220350330A1 (en) * | 2013-07-31 | 2022-11-03 | SZ DJI Technology Co., Ltd. | Remote control method and terminal |
CN103472849B (zh) * | 2013-09-04 | 2015-10-21 | 航天东方红卫星有限公司 | 基于闭环模式合作目标跟踪的卫星姿态机动跟踪方法 |
WO2015066531A1 (en) * | 2013-10-31 | 2015-05-07 | Aerovironment, Inc. | Interactive weapon targeting system displaying remote sensed image of target area |
GB2522327A (en) * | 2013-12-06 | 2015-07-22 | Bae Systems Plc | Determining routes for aircraft |
JP6329642B2 (ja) * | 2013-12-10 | 2018-05-23 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | センサ融合 |
US10332405B2 (en) * | 2013-12-19 | 2019-06-25 | The United States Of America As Represented By The Administrator Of Nasa | Unmanned aircraft systems traffic management |
CN103869773A (zh) * | 2014-03-04 | 2014-06-18 | 南昌大学 | 基于主端机的力反馈控制器校正反馈力的方法 |
CN103838244B (zh) * | 2014-03-20 | 2016-08-17 | 湖南大学 | 基于四轴飞行器的便携式目标跟踪方法及系统 |
EP3081902B1 (en) * | 2014-03-24 | 2019-04-17 | SZ DJI Technology Co., Ltd. | Method and apparatus for correcting aircraft state in real time |
EP2976687B1 (en) * | 2014-05-30 | 2017-09-06 | SZ DJI Technology Co., Ltd. | Systems and methods for uav docking |
EP3862837B1 (en) * | 2014-07-30 | 2023-05-03 | SZ DJI Technology Co., Ltd. | Systems and methods for target tracking |
US20160054737A1 (en) * | 2014-08-22 | 2016-02-25 | Cape Productions Inc. | Methods and Apparatus for Unmanned Aerial Vehicle Autonomous Aviation |
CN105353774B (zh) | 2014-08-22 | 2018-03-20 | 北京瑞赛长城航空测控技术有限公司 | 转角范围0~±360°可选式转台限位机构 |
JP6181300B2 (ja) * | 2014-09-05 | 2017-08-16 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 無人航空機の速度を制御するシステム |
JP6278539B2 (ja) * | 2014-09-05 | 2018-02-14 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 状況に基づく飛行モード選択 |
US20160071419A1 (en) * | 2014-09-10 | 2016-03-10 | Appareo Systems, Llc | Aerial information request system for unmanned aerial vehicles |
WO2016050099A1 (en) * | 2014-09-30 | 2016-04-07 | SZ DJI Technology Co., Ltd. | System and method for supporting simulated movement |
EP3108318B1 (en) * | 2014-09-30 | 2019-07-10 | SZ DJI Technology Co., Ltd. | System and method for data recording and analysis |
WO2016141100A2 (en) * | 2015-03-03 | 2016-09-09 | Prenav Inc. | Scanning environments and tracking unmanned aerial vehicles |
EP3283930A2 (en) * | 2015-04-14 | 2018-02-21 | Tobin Fisher | System for authoring, executing, and distributing unmanned aerial vehicle flight-behavior profiles |
US20160349746A1 (en) * | 2015-05-29 | 2016-12-01 | Faro Technologies, Inc. | Unmanned aerial vehicle having a projector and being tracked by a laser tracker |
EP3276374A4 (en) * | 2015-06-29 | 2018-03-28 | Yuneec Technology Co., Limited | Aircraft and obstacle avoidance method and system thereof |
CN105204349B (zh) * | 2015-08-19 | 2017-11-07 | 杨珊珊 | 一种用于智能家居控制的无人飞行器及其控制方法 |
CN205353774U (zh) * | 2015-10-15 | 2016-06-29 | 杨珊珊 | 一种伴随拍摄飞行器的无人机航拍系统 |
CA3008886A1 (en) * | 2015-12-18 | 2017-06-22 | Iris Automation, Inc. | Real-time visual situational awareness system |
WO2017222542A1 (en) * | 2016-06-24 | 2017-12-28 | Intel IP Corporation | Unmanned aerial vehicle avoiding obstacles |
US10782524B2 (en) * | 2017-06-09 | 2020-09-22 | Mark Haley | Skydiving tracker: an integrated system for flight data collection and virtual reality simulators for improving skydiving safety |
US10705542B1 (en) * | 2017-06-29 | 2020-07-07 | Amazon Technologies, Inc. | Determining relative distances and positions of multiple vehicles from times-of-flight of signals |
US10599138B2 (en) * | 2017-09-08 | 2020-03-24 | Aurora Flight Sciences Corporation | Autonomous package delivery system |
GB201808075D0 (en) * | 2017-09-13 | 2018-07-04 | Flirtey Holdings Inc | Unmanned aerial vehicle and payload delivery system |
GB201720487D0 (en) * | 2017-12-08 | 2018-01-24 | Entpr Control Systems Ltd | System and method fr disrupting radio frquency communications of aircraft |
WO2019165057A1 (en) * | 2018-02-26 | 2019-08-29 | Smartsky Networks LLC | Optimized position information assisted beamforming |
US11532237B2 (en) * | 2019-02-28 | 2022-12-20 | Rockwell Collins, Inc. | Autonomous aircraft sensor-based positioning and navigation system using markers |
US11661186B2 (en) * | 2019-06-10 | 2023-05-30 | Dragonfly Pictures, Inc. | System and method for unmanned aerial signal relay |
US20220189316A1 (en) * | 2020-12-10 | 2022-06-16 | Xwing, Inc. | Unmanned aircraft control using ground control station |
-
2016
- 2016-09-26 CN CN201680009142.1A patent/CN107223219B/zh active Active
- 2016-09-26 CN CN202010459836.3A patent/CN111562796A/zh active Pending
- 2016-09-26 WO PCT/CN2016/100214 patent/WO2018053877A1/zh active Application Filing
-
2019
- 2019-03-18 US US16/356,620 patent/US11092975B2/en active Active
-
2021
- 2021-08-16 US US17/403,371 patent/US11724805B2/en active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110301925A1 (en) * | 2010-06-08 | 2011-12-08 | Southwest Research Institute | Optical State Estimation And Simulation Environment For Unmanned Aerial Vehicles |
CN102355574A (zh) * | 2011-10-17 | 2012-02-15 | 上海大学 | 机载云台运动目标自主跟踪系统的图像稳定方法 |
CN102419598A (zh) * | 2011-12-08 | 2012-04-18 | 南京航空航天大学 | 一种多无人机协同侦察移动目标的方法 |
CN103226357A (zh) * | 2013-03-22 | 2013-07-31 | 海南大学 | 一种基于目标跟踪的多无人机通信决策方法 |
CN105242684A (zh) * | 2015-10-15 | 2016-01-13 | 杨珊珊 | 一种伴随拍摄飞行器的无人机航拍系统及方法 |
CN105527975A (zh) * | 2015-12-09 | 2016-04-27 | 周润华 | 一种基于无人机的目标跟踪系统 |
CN205353744U (zh) * | 2015-12-15 | 2016-06-29 | 广州中国科学院先进技术研究所 | 一种Delta机器人驱控系统 |
CN105759839A (zh) * | 2016-03-01 | 2016-07-13 | 深圳市大疆创新科技有限公司 | 无人机视觉跟踪方法、装置以及无人机 |
CN105847681A (zh) * | 2016-03-30 | 2016-08-10 | 乐视控股(北京)有限公司 | 拍摄控制方法、设备及系统 |
CN205453893U (zh) * | 2016-03-31 | 2016-08-10 | 深圳奥比中光科技有限公司 | 无人机 |
CN105676865A (zh) * | 2016-04-12 | 2016-06-15 | 北京博瑞爱飞科技发展有限公司 | 目标跟踪方法、装置和系统 |
Also Published As
Publication number | Publication date |
---|---|
US20210373578A1 (en) | 2021-12-02 |
CN107223219A (zh) | 2017-09-29 |
WO2018053877A1 (zh) | 2018-03-29 |
CN107223219B (zh) | 2020-06-23 |
US11092975B2 (en) | 2021-08-17 |
US20190212742A1 (en) | 2019-07-11 |
US11724805B2 (en) | 2023-08-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107223219B (zh) | 控制方法、控制设备和运载系统 | |
Jiménez Lugo et al. | Framework for autonomous on-board navigation with the AR. Drone | |
US11604479B2 (en) | Methods and system for vision-based landing | |
US10613529B2 (en) | Multi-rotor UAV flight control method and system | |
CN105469579B (zh) | 体感遥控器、体感遥控飞行系统和方法 | |
US10377484B2 (en) | UAV positional anchors | |
JP6234679B2 (ja) | 外乱を引き起こす動きを最小化しながら搭載型カメラによる撮影を行うための回転翼無人機の操縦方法 | |
JP6671375B2 (ja) | 無人機の飛行補助方法 | |
García Carrillo et al. | Stabilization and trajectory tracking of a quad-rotor using vision | |
US10258888B2 (en) | Method and system for integrated real and virtual game play for multiple remotely-controlled aircraft | |
US10410320B2 (en) | Course profiling and sharing | |
CN107850899B (zh) | 使用惯性传感器和图像传感器的传感器融合 | |
US20150346721A1 (en) | Aircraft | |
CN114879715A (zh) | 无人机的控制方法、设备和无人机 | |
US11287261B2 (en) | Method and apparatus for controlling unmanned aerial vehicle | |
CN109032184B (zh) | 飞行器的飞行控制方法、装置、终端设备及飞行控制系统 | |
US11906639B2 (en) | Low-light and no-light aerial navigation | |
CN109814588A (zh) | 飞行器以及应用于飞行器的目标物追踪系统和方法 | |
CN113795805A (zh) | 无人机的飞行控制方法和无人机 | |
WO2020042159A1 (zh) | 一种云台的转动控制方法、装置及控制设备、移动平台 | |
JP6800918B2 (ja) | エラー回復を実行するための方法、システム、及びプログラム | |
Tretyakov et al. | Hardware architecture of a four-rotor UAV for USAR/WSAR scenarios | |
Alsaedi et al. | Quadcopter based object detection and localization | |
KR102571330B1 (ko) | 피사체 추적 촬영제어장치, 드론 및 그것의 동작 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |