CN108513642B - 一种图像处理方法、无人机、地面控制台及其图像处理系统 - Google Patents
一种图像处理方法、无人机、地面控制台及其图像处理系统 Download PDFInfo
- Publication number
- CN108513642B CN108513642B CN201780004683.XA CN201780004683A CN108513642B CN 108513642 B CN108513642 B CN 108513642B CN 201780004683 A CN201780004683 A CN 201780004683A CN 108513642 B CN108513642 B CN 108513642B
- Authority
- CN
- China
- Prior art keywords
- shooting
- flight
- target
- flight trajectory
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000012545 processing Methods 0.000 title claims abstract description 36
- 238000003672 processing method Methods 0.000 title claims abstract description 25
- 230000000694 effects Effects 0.000 claims abstract description 178
- 238000005452 bending Methods 0.000 claims abstract description 39
- 238000000034 method Methods 0.000 claims description 65
- 230000036544 posture Effects 0.000 claims description 41
- 238000004891 communication Methods 0.000 claims description 36
- 230000015654 memory Effects 0.000 claims description 35
- 230000008569 process Effects 0.000 claims description 19
- 230000003993 interaction Effects 0.000 claims description 6
- 230000011664 signaling Effects 0.000 claims description 6
- 230000001131 transforming effect Effects 0.000 claims description 4
- 230000004044 response Effects 0.000 claims description 3
- 230000000875 corresponding effect Effects 0.000 description 31
- 238000010586 diagram Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 239000000463 material Substances 0.000 description 5
- 230000009466 transformation Effects 0.000 description 5
- 230000001276 controlling effect Effects 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 238000004590 computer program Methods 0.000 description 3
- 230000033001 locomotion Effects 0.000 description 3
- 239000011159 matrix material Substances 0.000 description 3
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/10—Simultaneous control of position or course in three dimensions
- G05D1/101—Simultaneous control of position or course in three dimensions specially adapted for aircraft
Landscapes
- Engineering & Computer Science (AREA)
- Aviation & Aerospace Engineering (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Studio Devices (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Abstract
一种图像处理方法、无人机、地面控制台及其图像处理系统,其中图像处理方法包括:接收地面控制台发送的特效拍摄控制信息;根据特效拍摄控制信息包括的目标飞行轨迹确定拍摄位置间隔和拍摄姿态,目标飞行轨迹的非弯曲部分的拍摄位置间隔相同,目标飞行轨迹的弯曲部分的拍摄位置间隔小于非弯曲部分的拍摄位置间隔,拍摄姿态朝向目标拍摄对象;控制无人机按照目标飞行轨迹飞行,并根据拍摄位置间隔和拍摄姿态控制相机对目标拍摄对象进行拍摄,得到拍摄图像集合;将拍摄图像集合发送给地面控制台,以便于地面控制台对拍摄图像集合中的至少部分拍摄图像进行拼接,生成特效图像。该图像处理方法可以根据无人机拍摄得到的图像集合自动生成特效图像,从而提高生成特效图像的效率。
Description
技术领域
本发明涉及图像处理技术领域,尤其涉及一种图像处理方法、无人机、地面控制台及其图像处理系统。
背景技术
随着社会的发展,为满足人们对于图像表现形式的多样性的需求,特效图像应运而生,特效图像目前广泛应用于影视作品以及摄影作品中。现有技术中,首先需要通过多个视角的拍摄设备采集图像素材,或者通过载人飞机手工采集图像素材,然后利用个人计算机和图像处理软件对采集到的图像素材进行手动加工,得到特效图像。但是,采用上述方式生成特效图像时,图像素材采集程序复杂,且不能在采集到图像素材后快速生成特效图像,需要用户对采集到的图像素材进行手动加工,手动加工浪费时间,特效图像生成效率低。
发明内容
本发明实施例公开了一种图像处理方法、无人机、地面控制台及其图像处理系统,可以自动生成特效图像,提高生成特效图像的效率。
本发明实施例第一方面公开了一种图像处理方法,包括:
接收地面控制台发送的特效拍摄控制信息,所述特效拍摄控制信息包括目标飞行轨迹;
根据所述目标飞行轨迹确定拍摄位置间隔和拍摄姿态,所述目标飞行轨迹的非弯曲部分中的拍摄位置间隔相同,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔小于所述非弯曲部分中的拍摄位置间隔,所述拍摄姿态朝向目标拍摄对象;
控制无人机按照所述目标飞行轨迹飞行,并根据所述拍摄位置间隔和所述拍摄姿态控制相机对所述目标拍摄对象进行拍摄,得到拍摄图像集合,所述拍摄图像集合包括多张拍摄图像;
将所述拍摄图像集合发送给所述地面控制台,以便于所述地面控制台对所述拍摄图像集合中的至少部分拍摄图像进行拼接,生成特效图像。
本发明实施例第二方面公开了另一种图像处理方法,包括:
获取特效图像类型,并确定所述特效图像类型对应的特效拍摄控制信息,所述特效拍摄控制信息包括目标飞行轨迹;
向无人机发送所述特效拍摄控制信息,以便于所述无人机根据所述目标飞行轨迹确定拍摄位置间隔和拍摄姿态,所述目标飞行轨迹的非弯曲部分中的拍摄位置间隔相同,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔小于所述非弯曲部分中的拍摄位置间隔,所述拍摄姿态朝向目标拍摄对象;
接收所述无人机发送的拍摄图像集合,所述拍摄图像集合包括的多张拍摄图像是由所述无人机在按照所述目标飞行轨迹飞行的过程中,根据所述拍摄位置间隔和所述拍摄姿态控制相机对所述目标拍摄对象进行拍摄得到的;
根据所述拍摄图像集合中的至少部分拍摄图像分别截取的图像范围,对所述至少部分拍摄图像进行拼接,生成特效图像,所述拍摄图像截取的图像范围与所述拍摄图像的拍摄位置处的弯曲弧度相关。
本发明实施例第三方面公开了一种无人机,包括:处理器、通信接口和存储器,所述处理器、所述通信接口和所述存储器通过总线连接;
所述存储器,用于存储程序指令;
所述处理器,用于执行所述存储器存储的程序指令;
所述通信接口,用于收发信息或信令的交互;
所述通信接口,用于接收地面控制台发送的特效拍摄控制信息,所述特效拍摄控制信息包括目标飞行轨迹;
所述处理器,用于根据所述目标飞行轨迹确定拍摄位置间隔和拍摄姿态,所述目标飞行轨迹的非弯曲部分中的拍摄位置间隔相同,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔小于所述非弯曲部分中的拍摄位置间隔,所述拍摄姿态朝向目标拍摄对象;
所述处理器,还用于控制无人机按照所述目标飞行轨迹飞行,并根据所述拍摄位置间隔和所述拍摄姿态控制相机对所述目标拍摄对象进行拍摄,得到拍摄图像集合,所述拍摄图像集合包括多张拍摄图像;
所述通信接口,还用于将所述拍摄图像集合发送给所述地面控制台,以便于所述地面控制台对所述拍摄图像集合中的至少部分拍摄图像进行拼接,生成特效图像。
本发明实施例第四方面公开了一种地面控制台,包括:处理器、通信接口和存储器,所述处理器、所述通信接口和所述存储器通过总线连接;
所述存储器,用于存储程序指令;
所述通信接口,用于收发信息或信令的交互;
所述处理器,用于执行所述存储器存储的程序指令;
所述处理器,用于获取特效图像类型,并确定所述特效图像类型对应的特效拍摄控制信息,所述特效拍摄控制信息包括目标飞行轨迹;
所述通信接口,用于向无人机发送所述特效拍摄控制信息,以便于所述无人机根据所述目标飞行轨迹确定拍摄位置间隔和拍摄姿态,所述目标飞行轨迹的非弯曲部分中的拍摄位置间隔相同,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔小于所述非弯曲部分中的拍摄位置间隔,所述拍摄姿态朝向目标拍摄对象;
所述通信接口,还用于接收所述无人机发送的拍摄图像集合,所述拍摄图像集合包括的多张拍摄图像是由所述无人机在按照所述目标飞行轨迹飞行的过程中,根据所述拍摄位置间隔和所述拍摄姿态控制相机对所述目标拍摄对象进行拍摄得到的;
所述处理器,还用于根据所述拍摄图像集合中的至少部分拍摄图像分别截取的图像范围,对所述至少部分拍摄图像进行拼接,生成特效图像,所述拍摄图像截取的图像范围与所述拍摄图像的拍摄位置处的弯曲弧度相关。
本发明实施例第五方面公开了一种图像处理系统,所述系统包括:上述第三方面所述的无人机和上述第四方面所述的地面控制台。
本发明实施例第六方面公开了一种计算机程序产品,其中,当该计算机程序产品中的指令由处理器执行时,执行上述图像处理方法。
本发明实施例第七方面公开了一种存储介质,其中,当该存储介质中的指令由处理器执行时,执行上述图像处理方法。
本发明实施例中,首先接收地面控制台发送的特效拍摄控制信息,并根据该特效拍摄控制信息包括的目标飞行轨迹确定拍摄位置间隔和拍摄姿态,然后控制无人机按照该目标飞行轨迹飞行,并根据该拍摄位置间隔和拍摄姿态控制相机对目标拍摄对象进行拍摄,得到拍摄图像集合,最后将该拍摄图像集合发送给地面控制台,以便于地面控制台对该拍摄图像集合中的至少部分拍摄图像进行拼接,生成特效图像,可以根据无人机拍摄得到的图像集合自动生成特效图像,从而提高生成特效图像的效率。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例公开的一种图像处理方法的流程示意图;
图2是本发明实施例公开的一种图像拼接过程的示意图;
图3是本发明实施例公开的一种特效飞行轨迹的示意图;
图4是本发明实施例公开的另一种特效飞行轨迹的示意图;
图5是本发明实施例公开的又一种特效飞行轨迹的示意图;
图6是本发明实施例公开的又一种特效飞行轨迹的示意图;
图7是本发明实施例公开的又一种特效飞行轨迹的示意图;
图8是本发明实施例公开的一种无人机的结构示意图;
图9是本发明实施例公开的一种地面控制台的结构示意图;
图10是本发明实施例公开的一种图像处理系统的架构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。
请参阅图1,为本发明实施例提供的一种图像处理方法的流程示意图。本实施例中所描述的图像处理方法,包括但不限于以下步骤:
101、地面控制台获取特效图像类型,并确定所述特效图像类型对应的特效拍摄控制信息。
本发明实施例中,该特效拍摄控制信息包括目标飞行轨迹。具体地,地面控制台首先接收用户选择的特效图像,并获取用户选择的特效图像所属的特效图像类型。然后根据预设的特效图像类型与特效飞行轨迹的对应关系确定目标特效飞行轨迹,该目标特效飞行轨迹为地面控制台预先存储的特效飞行轨迹中的一种。接着,根据该目标特效飞行轨迹以及针对无人机此次飞行指定的飞行起点,确定无人机此次飞行的目标飞行轨迹。需要说明的是,若目标特效飞行轨迹所对应的拍摄对象与无人机此次飞行的目标拍摄对象相同,则可以直接将该目标特效飞行轨迹作为无人机此次飞行的目标飞行轨迹。其中,此次飞行指的是采用本发明实施例提供的图像处理方法来生成特效图像时,控制无人机针对目标拍摄对象采集图像集合的飞行过程。
在一些可行的实施方式中,地面控制台预先存储的特效飞行轨迹可以是根据预先记录的无人机的飞行轨迹生成的。具体地,在用户手动控制无人机飞行并控制无人机云台搭载的相机对拍摄对象进行拍摄的过程中,记录无人机手动飞行过程中的飞行位置、速度、加速度等信息,以及记录对拍摄对象进行拍摄的拍摄位置和云台姿态等信息。其中,飞行位置信息包括高度和坐标等信息,云台姿态信息包括云台的偏转角度roll、纵向角度pitch和横向角度yaw等信息。根据记录的飞行位置、速度、加速度等信息确定并记录无人机手动飞行的飞行轨迹,对记录的无人机手动飞行的飞行轨迹进行尺度缩放、拉升、旋转等操作,生成特效飞行轨迹。进一步可以根据无人机手动飞行过程中针对拍摄对象拍摄得到的多张图像,以及记录的拍摄位置、云台姿态等信息确定并记录与该特效飞行轨迹对应的特效图像类型。
在一些可行的实施方式中,地面控制台预先存储的特效飞行轨迹可以是根据用户预先绘制的飞行轨迹生成的。具体地,将用户在地面控制台的APP中手动绘制的无人机飞行轨迹确定为特效飞行轨迹,进一步还可以记录用户设定的飞行高度、云台姿态等信息,其中,云台姿态可以为朝向拍摄对象。
需要说明的是,地面控制台预先存储的特效飞行轨迹可以是根据预先记录的无人机的一条飞行轨迹或者用户预先绘制的一条飞行轨迹生成的,也可以是根据预先记录的无人机的多条飞行轨迹或者用户预先绘制的多条飞行轨迹生成的。
在一些可行的实施方式中,该特效拍摄控制信息还可以包括拍摄位置间隔、拍摄频率、拍摄姿态、飞行速度、加速度等信息,如何确定拍摄控制信息包括的上述信息,可视具体情况而定,在此不作限定。
102、所述地面控制台向无人机发送所述特效拍摄控制信息。
103、所述无人机接收所述地面控制台发送的所述特效拍摄控制信息。
104、所述无人机根据所述特效拍摄控制信息包括的目标飞行轨迹确定拍摄位置间隔和拍摄姿态。
本发明实施例中,无人机在接收到地面控制台发送的特效拍摄控制信息之后,根据该特效拍摄控制信息包括的目标飞行轨迹确定拍摄位置间隔和拍摄姿态。具体地,针对目标飞行轨迹,确定该目标飞行轨迹中的弯曲部分和非弯曲部分。其中,非弯曲部分指的是该目标飞行轨迹中水平或者竖直平行于目标拍摄对象、或者垂直于目标拍摄对象的部分。根据预设的拍摄位置间隔的设置规则,确定该目标飞行轨迹的弯曲部分中的拍摄位置间隔,以及确定该目标飞行轨迹的非弯曲部分中的拍摄位置间隔。
其中,预设的拍摄位置间隔的设置规则可以为,将该目标飞行轨迹的非弯曲部分中的拍摄位置间隔设置为第一拍摄位置间隔,且该第一拍摄位置间隔为固定值,也即是说该目标飞行轨迹的非弯曲部分中的拍摄位置间隔相同;将该目标飞行轨迹的弯曲部分中的拍摄位置间隔设置为第二拍摄位置间隔。可选的,该第二拍摄位置间隔与该第一拍摄位置间隔不同;进一步可选的,该第二拍摄位置间隔可以小于该第一拍摄位置间隔。在一些可行的实施方式中,该第二拍摄位置间隔还可以为变化的值;进一步可选的,该第二拍摄位置间隔也可以与该目标飞行轨迹的弯曲部分中的弯曲弧度成负相关,也即是说该第二拍摄位置间隔与该弯曲部分处的弯曲弧度成反比。
本发明实施例中,后续将以该第二拍摄位置间隔小于该第一拍摄位置间隔,且该第二拍摄位置间隔与该目标飞行轨迹的弯曲部分中的弯曲弧度成负相关为例对本发明实施例提供的图像处理方法进行详细说明。后续不再赘述。
进一步可以根据该目标飞行轨迹以及该第一拍摄位置间隔确定该非弯曲部分中的各个拍摄点的位置信息。可以首先获取该弯曲部分中的弯曲位置处的弧度变化规律,然后根据预设的弯曲弧度与第二拍摄位置间隔的映射关系确定该目标飞行轨迹的弯曲部分中的各个弯曲位置处的拍摄位置间隔,进而根据该目标飞行轨迹确定该弯曲部分中的各个拍摄点的位置信息。
根据预设的拍摄姿态的设置规则,确定该目标飞行轨迹的弯曲部分中的各个拍摄点的拍摄姿态,以及确定该目标飞行轨迹的非弯曲部分中的各个拍摄点的拍摄姿态。其中,预设的拍摄姿态的设置规则可以为,将该目标飞行轨迹的各个拍摄点的拍摄姿态设置为朝向目标拍摄对象。具体地,可以将该目标飞行轨迹的非弯曲部分中的各个拍摄点的拍摄姿态设置为垂直朝向目标拍摄对象;可以将该目标飞行轨迹的弯曲部分中的各个拍摄点的拍摄姿态设置为倾斜朝向目标拍摄对象。在一些可行的实施方式中,可以将该弯曲部分中的拍摄点的拍摄姿态对应的方向向量,与该目标飞行轨迹中该拍摄点的切线的夹角设置在正负70度至90度之间。其中,该目标拍摄对象指的是用户指定的拍摄区域中的各个拍摄目标。
需要说明的是,预设的拍摄位置间隔的设置规则以及预设的拍摄姿态的设置规则可以包括在地面控制台发送的拍摄控制信息中,也可以预先存储在无人机的存储器中,本发明实施不作限定。
在一些可行的实施方式中,可以根据预设的第一拍摄频率以及无人机的飞行速度确定该目标飞行轨迹的非弯曲部分中的拍摄位置间隔。也可以根据预设的弯曲弧度与第二拍摄频率的映射关系、无人机的飞行速度确定该目标飞行轨迹的弯曲部分中的拍摄位置间隔。其中,可选的,该第二拍摄频率可以与该第一拍摄频率不同;进一步可选的,该第一拍摄频率可以小于该第二拍摄频率。在一些可行的实施方式中,该第二频率还可以与弯曲弧度成正比,也即是说弯曲弧度越大,与弯曲弧度对应的第二拍摄频率则越大。
105、所述无人机控制所述无人机按照所述目标飞行轨迹飞行,并根据所述拍摄位置间隔和所述拍摄姿态控制相机对所述目标拍摄对象进行拍摄,得到拍摄图像集合。
本发明实施例中,控制无人机按照该目标飞行轨迹飞行,并在无人机沿该目标飞行轨迹飞行的过程中,根据确定出的该目标飞行轨迹中的拍摄点的位置信息以及该拍摄点对应的云台拍摄姿态对目标拍摄对象进行拍摄,得到拍摄图像集合,该拍摄图像集合中包括多张拍摄图像。
S106、所述无人机将所述拍摄图像集合发送给所述地面控制台。
S107、所述地面控制台接收所述无人机发送的所述拍摄图像集合。
S108、所述地面控制台根据所述拍摄图像集合中的至少部分拍摄图像分别截取的图像范围,对所述至少部分拍摄图像进行拼接,生成特效图像。
本发明实施例中,该拍摄图像集合中的多张拍摄图像分别截取的图像范围与该拍摄图像的拍摄位置处的弯曲弧度相关。具体地,地面控制台获取相机的相机参数以及无人机预先记录的该多张拍摄图像的拍摄位置和拍摄姿态。其中,该相机指的是无人机云台搭载的针对目标拍摄对象进行拍摄的相机,该相机参数以及无人机预先记录的该多张拍摄图像的拍摄位置和拍摄姿态可以包括在该图像集合中的,也可以是地面控制台向无人机发送获取参数指令,无人机在接收到获取参数指令之后响应该指令发送给无人机的。
根据该多张拍摄图像中的至少部分拍摄图像的拍摄位置和拍摄姿态确定该至少部分拍摄图像分别截取的图像范围。其中,对于该图像集合中的每一张拍摄图像,该拍摄图像截取的图像范围与该拍摄图像的拍摄位置处的弯曲弧度成负相关。具体地,拍摄位置处于该目标飞行轨迹的非弯曲部分中的拍摄图像截取的图像范围相同;拍摄位置处于该目标飞行轨迹的弯曲部分中的拍摄图像截取的图像范围与该拍摄图像的拍摄位置处的弯曲弧度成反比,也即是说,该拍摄图像的拍摄位置处的弯曲弧度越大,该拍摄图像截取的图像范围越小。
根据获取到的相机参数、该至少部分拍摄图像的拍摄位置和拍摄姿态、以及该至少部分拍摄图像分别截取的图像范围对该至少部分拍摄图像进行拼接,生成特效图像。具体地,地面控制台首先根据该至少部分拍摄图像各自的拍摄位置以及该目标飞行轨迹确定出该至少部分拍摄图像的拍摄顺序。接着根据该至少部分拍摄图像中的任意两张拍摄位置相邻的拍摄图像的拍摄位置和拍摄姿态,确定任意两张拍摄位置相邻的拍摄图像之间的相对运动信息。其中,该相对运动信息可以用三维旋转矩阵R和三维平移向量t表示。进一步根据该相对运动信息R和t,以及获取到的相机参数,确定出该任意两张拍摄位置相邻的拍摄图像之间的二维仿射变换矩阵A。其中该相机参数包括焦距f、光心坐标cx和cy,计算公式为:
然后通过在任意两张拍摄位置相邻的拍摄图像中提取特征点,并根据特征描述进行特征关联,得到任意两张拍摄位置相邻的拍摄图像之间的一组特征点对(x1,x2),其中,x1,x2分别为两张拍摄图像的像素点坐标,并根据该特征点对(x1,x2)以及二维仿射变换矩阵A,确定任意两张拍摄位置相邻的拍摄图像之间的变换参数S,计算公式为:
Sx2=Ax1;
假设,任意两张拍摄位置相邻的拍摄图像为第一拍摄图像和第二拍摄图像,最后根据上述公式Sx2=Ax1将第一拍摄图像中的所有像素点变换到第二拍摄图像中,并根据确定得到的该至少部分拍摄图像分别截取的图像范围获取该第一拍摄图像和该第二拍摄图像的重叠区域,将该重叠区域去除,生成特效图像。其中,生成的特效图像可以是具有特效效果的全景图。
举例来说,请一并参见图2,以拍摄图像集合中的四张图像P1、P2、P3和P4为例进行说明,假设P1和P2的拍摄位置相邻且位于目标飞行轨迹的非弯曲部分中,则在对P1和P2进行拼接时,获取到的P1和P2截取的范围相同。如图2a所示,P1中的无填充部分即是P1应截取的范围,P1中的灰色填充部分与P2中的灰色填充部分即是P1和P2的重叠区域,P2中的无填充部分和灰色填充部分即是P2应截取的范围,P2中的黑色填充部分是P2与下一张相邻图像的重叠区域。假设P1和P2的拍摄位置相邻,对该两张图像P1和P2进行拼接,生成的特效图像如图2b所示。
假设P3和P4的拍摄位置相邻且位于目标飞行轨迹的弯曲部分中,且P3的拍摄位置处的弯曲弧度小于P4的拍摄位置处的弯曲弧度,则在拼接过程中P3截取的范围应大于P4截取的范围。如图2c所示,P3中的无填充部分即是P3应截取的范围,P3中的灰色填充部分与P4中的灰色填充部分即是P3和P4的重叠区域,P4中的无填充部分和灰色填充部分即是P4应截取的范围,P4中的黑色填充部分是P4与下一张相邻图像的重叠区域。假设P2和P3的拍摄位置相邻,对该两张图像P3和P4进行拼接,生成的特效图像如图2d所示。
在一些可行的实施方式中,地面控制台对该至少部分拍摄图像进行拼接,生成特效图像之后,地面控制台还可以接收用户输入的后期特效处理指令,并响应该后期特效处理指令对生成的特效图像进行后期特效处理,得到后期特效处理后的特效图像。其中,后期特效处理指令包括对生成的特效图像进行旋转、扭曲、哈哈镜变换等几何变换处理,还可以包括对生成的特效图像进行色调、色系和风格的调整和变换。
本发明实施例中,该目标飞行轨迹包括但不限于以下用于举例说明的目标飞行轨迹。举例来说,假设无人机均沿目标飞行轨迹由左往右飞行。请一并参见图3、图4、图5、图6和图7。如图3a所示的拍摄场景为一个人站在一段笔直公路的右端,所示的第一目标飞行轨迹包括第一飞行轨迹和第二飞行轨迹,该第一飞行轨迹为目标飞行轨迹中平行于目标拍摄对象的部分,即平行于公路的部分,该第二飞行轨迹为目标飞行轨迹中弯曲的部分,且该第二飞行轨迹的弯曲弧度由小变大。根据第一目标飞行轨迹确定得到的拍摄位置间隔和拍摄姿态为,该第一飞行轨迹中的拍摄位置间隔相同,且该第一飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向目标拍摄对象;该第二飞行轨迹中的拍摄位置间隔由大变小,且该第二飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向目标拍摄对象。
根据该拍摄图像集合中的拍摄图像的拍摄位置和拍摄姿态确定得到的拍摄图像分别截取的图像范围为,拍摄位置处于该第一飞行轨迹中的拍摄图像截取的图像范围相同;拍摄位置处于该第二飞行轨迹中的拍摄图像截取的图像范围由大变小。
在对无人机沿该第一目标飞行轨迹针对目标拍摄对象采集的图像集合中的至少部分图像进行拼接后,生成的特效图像效果如图3b所示。如图3b所示的特效图像中,图的上端部分由于与第一目标飞行轨迹的非弯曲部分对应,故图的上端部分的效果为公路笔直且较狭窄;图的下端部分由于与第一目标飞行轨迹的弯曲部分对应,且弯曲弧度由小变大,故图的下端部分的效果为公路弯曲且由窄变宽,可以体现明显的由近及远的效果。
如图4a所示的拍摄场景为两个人分别站在一段笔直公路的两端,所示的第二目标飞行轨迹包括第一飞行轨迹、第二飞行轨迹和第三飞行轨迹,该第一飞行轨迹和该第三飞行轨迹为第二目标飞行轨迹中弯曲的部分,且该第一飞行轨迹的弯曲弧度由大变小,该第三飞行轨迹的弯曲弧度由小变大;该第二飞行轨迹为第二目标飞行轨迹中平行于目标拍摄对象的部分。根据第二目标飞行轨迹确定得到的拍摄位置间隔和拍摄姿态为,该第一飞行轨迹中的拍摄位置间隔由小变大,该第一飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向目标拍摄对象;该第二飞行轨迹中的拍摄位置间隔相同,该第二飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向目标拍摄对象;该第三飞行轨迹中的拍摄位置间隔由大变小,该第三飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向目标拍摄对象。
根据该多张拍摄图像中的拍摄图像的拍摄位置和拍摄姿态确定得到的拍摄图像分别截取的图像范围为,拍摄位置处于该第一飞行轨迹中的拍摄图像截取的图像范围由小变大;拍摄位置处于该第二飞行轨迹中的拍摄图像截取的图像范围相同;拍摄位置处于该第三飞行轨迹中的拍摄图像截取的图像范围由大变小。
在对无人机沿该第二目标飞行轨迹针对目标拍摄对象采集的图像集合中的至少部分图像进行拼接后,生成的特效图像效果如图4b所示。如图4b所示的特效图像中,图的中间部分由于与第二目标飞行轨迹的非弯曲部分对应,故图的中间部分的效果为公路笔直且较狭窄;图的上端部分由于与第二目标飞行轨迹的弯曲部分对应,且弯曲弧度由大变小,故图的上端部分的效果为公路弯曲且由宽变窄,上端部分的人似倒立一样;图的下端部分由于与第二目标飞行轨迹的弯曲部分对应,且弯曲弧度由小变大,故图的下端部分的效果为公路弯曲且由窄变宽。图中的上端部分与下端部分中的人和公路似平面镜的成像效果。
如图5a所示的拍摄场景为两个人分别站在一段笔直公路的两端,所示的第三目标飞行轨迹包括第一飞行轨迹、第二飞行轨迹、第三飞行轨迹和第四飞行轨迹,该第一飞行轨迹和该第四飞行轨迹为第三目标飞行轨迹中平行于目标拍摄对象的部分;该第二飞行轨迹和该第三飞行轨迹为第三目标飞行轨迹中弯曲的部分,且该第二飞行轨迹的弯曲弧度由小变大,该第三飞行轨迹的弯曲弧度由大变小。根据第三目标飞行轨迹确定得到的拍摄位置间隔和拍摄姿态为,该第一飞行轨迹中的拍摄位置间隔相同,且该第一飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向目标拍摄对象;该第二飞行轨迹中的拍摄位置间隔由大变小,该第三飞行轨迹中的拍摄位置间隔由小变大,该第二飞行轨迹以及该第三飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向该目标拍摄对象;该第四飞行轨迹中的拍摄位置间隔相同,且该第四飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向目标拍摄对象。需要说明的是,该第一飞行轨迹中的拍摄位置间隔与该第四飞行轨迹中的拍摄位置间隔可以是相同的,也可以是不同的。
根据该多张拍摄图像中的拍摄图像的拍摄位置和拍摄姿态确定得到的拍摄图像分别截取的图像范围为,拍摄位置处于该第一飞行轨迹中的拍摄图像截取的图像范围相同;拍摄位置处于该第二飞行轨迹中的拍摄图像截取的图像范围由大变小;拍摄位置处于该第三飞行轨迹中的拍摄图像截取的图像范围由小变大;拍摄位置处于该第四飞行轨迹中的拍摄图像截取的图像范围相同。
在对无人机沿该第三目标飞行轨迹针对目标拍摄对象采集的图像集合中的至少部分图像进行拼接后,生成的特效图像效果如图5b所示。如图5b所示的特效图像中,图的上端与下端部分由于与第三目标飞行轨迹的非弯曲部分对应,故图的上端与下端部分的效果为公路笔直且较狭窄,人似一个原点;图的中间部分由于与第三目标飞行轨迹的弯曲部分对应,且弯曲弧度由小变大,再由大变小,故图的中间部分的效果为公路突出且很宽。图的中间部分中的公路似凹凸镜的成像效果。
如图6a所示的拍摄场景为四个人分别站在两段互相垂直公路的四端,所示的第四目标飞行轨迹包括两条图4a中所示的第二目标飞行轨迹,且该两条第二目标飞行轨迹在中点处垂直相交。在对无人机沿该第四目标飞行轨迹针对目标拍摄对象采集的图像集合中的至少部分图像进行拼接后,生成的特效图像效果如图6b所示。如图6b所示的特效图像中,图中的成像上下以及左右分别对称,图的上端部分中的人与图的下端部分中的人互相对立,图的左端部分中的人与图的右端部分中的人互相对立,似多面平面镜的成像效果。
需要说明的是,如图6a所示的拍摄场景也可以是一个人,在无人机针对公路的某一端进行拍摄时,人即处于该某一端的相应位置处,当无人机针对该某一端拍摄完成后,人立即前往无人机即将拍摄的公路的下一端的相应位置处。采用上述方式,也可以实现图6a所示的拍摄场景。
在一些可行的实施方式中,本发明实施例中的目标飞行轨迹可以只包括非弯曲部分,也可以只包括弯曲部分。举例来说,请一并参见图7,如图7a所示的目标飞行轨迹为环绕轨迹,可以根据环绕轨迹控制无人机水平环绕前景拍摄目标进行飞行并拍照。其中,环绕轨迹可以是圆形,也可以椭圆形。在一些可行的实施方式中,还可以根据环绕轨迹控制无人机竖直环绕前景拍摄目标进行飞行并拍照。如图7b所示的目标飞行轨迹为圆弧轨迹。其中,圆弧轨迹可以为圆形或者椭圆形任意角度对应的一部分圆弧,可以处于水平方向,也可以处于竖直方向。其中,图中的前景拍摄目标即为上述目标拍摄对象。
需要说明的是,上述地面控制台对该图像集合中的至少部分图像进行拼接,生成特效图像的处理过程也可以由无人机执行,具体处理过程可参考上述描述,在此不再赘述。
本发明实施例中,首先接收地面控制台发送的特效拍摄控制信息,并根据该特效拍摄控制信息包括的目标飞行轨迹确定拍摄位置间隔和拍摄姿态,然后控制无人机按照该目标飞行轨迹飞行,并根据该拍摄位置间隔和拍摄姿态控制相机对目标拍摄对象进行拍摄,得到拍摄图像集合,最后将该拍摄图像集合发送给地面控制台,以便于地面控制台对该拍摄图像集合中的至少部分拍摄图像进行拼接,生成特效图像,可以根据无人机拍摄得到的图像集合自动生成特效图像,从而提高生成特效图像的效率。
请参见图8,图8是本发明实施例提供的一种无人机的结构示意图,本发明实施例中所描述的无人机包括:处理器801、通信接口802、存储器803。其中,处理器801、通信接口802、存储器803可通过总线或其他方式连接,本发明实施例以通过总线连接为例。
处理器801可以是中央处理器(central processing unit,CPU),网络处理器(network processor,NP),图形处理器(graphics processing unit,GPU),或者CPU、GPU和NP的组合。处理器801也可以是多核CPU、多核GPU或多核NP中用于实现通信标识绑定的核。
上述处理器801可以是硬件芯片。上述硬件芯片可以是专用集成电路(application-specific integrated circuit,ASIC),可编程逻辑器件(programmablelogic device,PLD)或其组合。上述PLD可以是复杂可编程逻辑器件(complexprogrammable logic device,CPLD),现场可编程逻辑门阵列(field-programmable gatearray,FPGA),通用阵列逻辑(generic array logic,GAL)或其任意组合。
上述通信接口802可用于收发信息或信令的交互,以及信号的接收和传递。上述存储器803可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的存储程序(比如文字存储功能、位置存储功能等);存储数据区可存储根据装置的使用所创建的数据(比如图像数据、文字数据)等,并可以包括应用存储程序等。此外,存储器803可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
上述存储器803还用于存储程序指令。上述处理器801可以调用上述存储器803存储的程序指令,实现如本发明实施例所示的图像处理方法。具体地:
所述通信接口802,用于接收地面控制台发送的特效拍摄控制信息,所述特效拍摄控制信息包括目标飞行轨迹;
所述处理器801,用于根据所述目标飞行轨迹确定拍摄位置间隔和拍摄姿态,所述目标飞行轨迹的非弯曲部分中的拍摄位置间隔相同,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔小于所述非弯曲部分中的拍摄位置间隔,所述拍摄姿态朝向目标拍摄对象;
所述处理器801,还用于控制无人机按照所述目标飞行轨迹飞行,并根据所述拍摄位置间隔和所述拍摄姿态控制相机对所述目标拍摄对象进行拍摄,得到拍摄图像集合,所述拍摄图像集合包括多张拍摄图像;
所述通信接口802,还用于将所述拍摄图像集合发送给所述地面控制台,以便于所述地面控制台对所述拍摄图像集合中的至少部分拍摄图像进行拼接,生成特效图像。
本发明实施例中处理器执行的方法均从处理器的角度来描述,可以理解的是,本发明实施例中处理器要执行上述方法需要其他硬件结构的配合。本发明实施例对具体的实现过程不作详细描述和限制。
在一些可行的实施方式中,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔与所述弯曲部分处的弯曲弧度成负相关。
在一些可行的实施方式中,所述特效拍摄控制信息是根据预先记录的所述无人机的飞行轨迹生成的。
在一些可行的实施方式中,所述特效拍摄控制信息是根据用户预先绘制的飞行轨迹生成的。
在一些可行的实施方式中,所述目标飞行轨迹包括第一飞行轨迹和第二飞行轨迹,所述第一飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分,所述第二飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第二飞行轨迹的弯曲弧度由小变大。
所述处理器801,具体用于根据所述第一飞行轨迹和所述第二飞行轨迹确定拍摄位置间隔和拍摄姿态。
所述第一飞行轨迹中的拍摄位置间隔相同,所述第一飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向所述目标拍摄对象;所述第二飞行轨迹中的拍摄位置间隔由大变小,所述第二飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象。
在一些可行的实施方式中,所述目标飞行轨迹包括第一飞行轨迹、第二飞行轨迹和第三飞行轨迹;所述第一飞行轨迹和所述第三飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第一飞行轨迹的弯曲弧度由大变小,所述第三飞行轨迹的弯曲弧度由小变大;所述第二飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分。
所述处理器801,具体用于根据所述第一飞行轨迹、所述第二飞行轨迹和所述第三飞行轨迹确定拍摄位置间隔和拍摄姿态。
所述第一飞行轨迹中的拍摄位置间隔由小变大,所述第一飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象;所述第二飞行轨迹中的拍摄位置间隔相同,所述第二飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向所述目标拍摄对象;所述第三飞行轨迹中的拍摄位置间隔由大变小,所述第三飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象。
在一些可行的实施方式中,所述目标飞行轨迹包括第一飞行轨迹、第二飞行轨迹、第三飞行轨迹和第四飞行轨迹;所述第一飞行轨迹和所述第四飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分;所述第二飞行轨迹和所述第三飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第二飞行轨迹的弯曲弧度由小变大,所述第三飞行轨迹的弯曲弧度由大变小。
所述处理器801,具体用于根据所述第一飞行轨迹、所述第二飞行轨迹、所述第三飞行轨迹和所述第四飞行轨迹确定拍摄位置间隔和拍摄姿态。
所述第一飞行轨迹中的拍摄位置间隔相同,所述第一飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向所述目标拍摄对象;所述第二飞行轨迹中的拍摄位置间隔由大变小,所述第二飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象;所述第三飞行轨迹中的拍摄位置间隔由小变大,所述第三飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象;所述第四飞行轨迹中的拍摄位置间隔相同,所述第四飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向所述目标拍摄对象。
具体实现中,本发明实施例中所描述的处理器801、通信接口802、存储器803可执行本发明实施例提供的一种图像处理方法中所描述的无人机侧的实现方式,在此不再赘述。
本发明实施例中,首先接收地面控制台发送的特效拍摄控制信息,并根据该特效拍摄控制信息包括的目标飞行轨迹确定拍摄位置间隔和拍摄姿态,然后控制无人机按照该目标飞行轨迹飞行,并根据该拍摄位置间隔和拍摄姿态控制相机对目标拍摄对象进行拍摄,得到拍摄图像集合,最后将该拍摄图像集合发送给地面控制台,以便于地面控制台对该拍摄图像集合中的至少部分拍摄图像进行拼接,生成特效图像,可以根据无人机拍摄得到的图像集合自动生成特效图像,从而提高生成特效图像的效率。
请参见图9,图9是本发明实施例提供的一种地面控制台的结构示意图,本发明实施例中所描述的地面控制台包括:处理器901、通信接口902、存储器903。其中,处理器901、通信接口902、存储器903可通过总线或其他方式连接,本发明实施例以通过总线连接为例。
处理器901可以是中央处理器(central processing unit,CPU),网络处理器(network processor,NP),图形处理器(graphics processing unit,GPU),或者CPU、GPU和NP的组合。处理器901也可以是多核CPU、多核GPU或多核NP中用于实现通信标识绑定的核。
上述处理器901可以是硬件芯片。上述硬件芯片可以是专用集成电路(application-specific integrated circuit,ASIC),可编程逻辑器件(programmablelogic device,PLD)或其组合。上述PLD可以是复杂可编程逻辑器件(complexprogrammable logic device,CPLD),现场可编程逻辑门阵列(field-programmable gatearray,FPGA),通用阵列逻辑(generic array logic,GAL)或其任意组合。
上述通信接口902可用于收发信息或信令的交互,以及信号的接收和传递。上述存储器903可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的存储程序(比如文字存储功能、位置存储功能等);存储数据区可存储根据装置的使用所创建的数据(比如图像数据、文字数据)等,并可以包括应用存储程序等。此外,存储器903可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
上述存储器903还用于存储程序指令。上述处理器901可以调用上述存储器903存储的程序指令,实现如本发明实施例所示的图像处理方法。具体地:
所述处理器901,用于获取特效图像类型,并确定所述特效图像类型对应的特效拍摄控制信息,所述特效拍摄控制信息包括目标飞行轨迹;
所述通信接口902,用于向无人机发送所述特效拍摄控制信息,以便于所述无人机根据所述目标飞行轨迹确定拍摄位置间隔和拍摄姿态,所述目标飞行轨迹的非弯曲部分中的拍摄位置间隔相同,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔小于所述非弯曲部分中的拍摄位置间隔,所述拍摄姿态朝向目标拍摄对象;
所述通信接口902,还用于接收所述无人机发送的拍摄图像集合,所述拍摄图像集合包括的多张拍摄图像是由所述无人机在按照所述目标飞行轨迹飞行的过程中,根据所述拍摄位置间隔和所述拍摄姿态控制相机对所述目标拍摄对象进行拍摄得到的;
所述处理器901,还用于根据所述拍摄图像集合中的至少部分拍摄图像分别截取的图像范围,对所述至少部分拍摄图像进行拼接,生成特效图像,所述拍摄图像截取的图像范围与所述拍摄图像的拍摄位置处的弯曲弧度相关。
本发明实施例中处理器执行的方法均从处理器的角度来描述,可以理解的是,本发明实施例中处理器要执行上述方法需要其他硬件结构的配合。本发明实施例对具体的实现过程不作详细描述和限制。
在一些可行的实施方式中,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔与所述弯曲部分处的弯曲弧度成负相关。
在一些可行的实施方式中,所述拍摄图像截取的图像范围与所述拍摄图像的拍摄位置处的弯曲弧度成负相关。
在一些可行的实施方式中,所述特效拍摄控制信息是根据预先记录的所述无人机的飞行轨迹生成的。
在一些可行的实施方式中,所述特效拍摄控制信息是根据用户预先绘制的飞行轨迹生成的。
所述处理器901根据所述拍摄图像集合中的至少部分拍摄图像分别截取的图像范围,对所述至少部分拍摄图像进行拼接,生成特效图像时,具体用于:
获取所述相机的相机参数以及所述无人机预先记录的所述拍摄图像集合包括的所述多张拍摄图像的拍摄位置和拍摄姿态;
根据所述多张拍摄图像中的至少部分拍摄图像的拍摄位置和拍摄姿态确定所述至少部分拍摄图像分别截取的图像范围;
根据所述相机参数、所述至少部分拍摄图像的拍摄位置和拍摄姿态、以及所述至少部分拍摄图像分别截取的图像范围对所述至少部分拍摄图像进行拼接,生成特效图像。
在一些可行的实施方式中,所述目标飞行轨迹包括第一飞行轨迹和第二飞行轨迹,所述第一飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分,所述第二飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第二飞行轨迹的弯曲弧度由小变大。
其中,拍摄位置处于所述第一飞行轨迹中的拍摄图像截取的图像范围相同;拍摄位置处于所述第二飞行轨迹中的拍摄图像截取的图像范围由大变小。
在一些可行的实施方式中,所述目标飞行轨迹包括第一飞行轨迹、第二飞行轨迹和第三飞行轨迹;所述第一飞行轨迹和所述第三飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第一飞行轨迹的弯曲弧度由大变小,所述第三飞行轨迹的弯曲弧度由小变大;所述第二飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分。
其中,拍摄位置处于所述第一飞行轨迹中的拍摄图像截取的图像范围由小变大;拍摄位置处于所述第二飞行轨迹中的拍摄图像截取的图像范围相同;拍摄位置处于所述第三飞行轨迹中的拍摄图像截取的图像范围由大变小。
在一些可行的实施方式中,所述目标飞行轨迹包括第一飞行轨迹、第二飞行轨迹、第三飞行轨迹和第四飞行轨迹;所述第一飞行轨迹和所述第四飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分;所述第二飞行轨迹和所述第三飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第二飞行轨迹的弯曲弧度由小变大,所述第三飞行轨迹的弯曲弧度由大变小。
其中,拍摄位置处于所述第一飞行轨迹中的拍摄图像截取的图像范围相同;拍摄位置处于所述第二飞行轨迹中的拍摄图像截取的图像范围由大变小;拍摄位置处于所述第三飞行轨迹中的拍摄图像截取的图像范围由小变大;拍摄位置处于所述第四飞行轨迹中的拍摄图像截取的图像范围相同。
在一些可行的实施方式中,所述通信接口902,还用于接收用户输入的后期特效处理指令。
所述处理器902,还用于响应所述后期特效处理指令对所述特效图像进行后期特效处理,得到后期特效处理后的特效图像。
在一些可行的实施方式中,所述后期特效处理指令包括旋转、扭曲、调整色调、调整色系和变换风格。
具体实现中,本发明实施例中所描述的处理器901、通信接口902、存储器903可执行本发明实施例提供的一种图像处理方法中所描述的地面控制台侧的实现方式,在此不再赘述。
本发明实施例中,首先接收地面控制台发送的特效拍摄控制信息,并根据该特效拍摄控制信息包括的目标飞行轨迹确定拍摄位置间隔和拍摄姿态,然后控制无人机按照该目标飞行轨迹飞行,并根据该拍摄位置间隔和拍摄姿态控制相机对目标拍摄对象进行拍摄,得到拍摄图像集合,最后将该拍摄图像集合发送给地面控制台,以便于地面控制台对该拍摄图像集合中的至少部分拍摄图像进行拼接,生成特效图像,可以根据无人机拍摄得到的图像集合自动生成特效图像,从而提高生成特效图像的效率。
参见图10,是本发明实施例提供的一种图像处理系统的架构示意图。本发明实施例中所描述的图像处理系统,包括:
地面控制台1001,用于获取特效图像类型,并确定所述特效图像类型对应的特效拍摄控制信息,所述特效拍摄控制信息包括目标飞行轨迹。
所述地面控制台1001,还用于向无人机发送所述特效拍摄控制信息。
无人机1002,用于接收地面控制台发送的特效拍摄控制信息。
所述无人机1002,还用于根据所述目标飞行轨迹确定拍摄位置间隔和拍摄姿态,所述目标飞行轨迹的非弯曲部分中的拍摄位置间隔相同,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔小于所述非弯曲部分中的拍摄位置间隔,所述拍摄姿态朝向目标拍摄对象。
在一些可行的实施方式中,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔与所述弯曲部分处的弯曲弧度成负相关。
所述无人机1002,还用于控制无人机按照所述目标飞行轨迹飞行,并根据所述拍摄位置间隔和所述拍摄姿态控制相机对所述目标拍摄对象进行拍摄,得到拍摄图像集合,所述拍摄图像集合包括多张拍摄图像。
所述无人机1002,还用于将所述拍摄图像集合发送给所述地面控制台。
所述地面控制台1001,还用于接收所述无人机发送的拍摄图像集合。
所述地面控制台1001,还用于根据所述拍摄图像集合中的至少部分拍摄图像分别截取的图像范围,对所述至少部分拍摄图像进行拼接,生成特效图像,所述拍摄图像截取的图像范围与所述拍摄图像的拍摄位置处的弯曲弧度相关。
在一些可行的实施方式中,所述拍摄图像截取的图像范围与所述拍摄图像的拍摄位置处的弯曲弧度成负相关。
在一些可行的实施方式中,所述特效拍摄控制信息是根据预先记录的所述无人机的飞行轨迹生成的。
在一些可行的实施方式中,所述特效拍摄控制信息是根据用户预先绘制的飞行轨迹生成的。
可以理解的是,本发明实施例的地面控制台1001和无人机1002的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
本发明实施例中,无人机1002首先接收地面控制台1001发送的特效拍摄控制信息,并根据该特效拍摄控制信息包括的目标飞行轨迹确定拍摄位置间隔和拍摄姿态,然后控制无人机按照该目标飞行轨迹飞行,并根据该拍摄位置间隔和拍摄姿态控制相机对目标拍摄对象进行拍摄,得到拍摄图像集合,最后将该拍摄图像集合发送给地面控制台1001,以便于地面控制台对该拍摄图像集合中的至少部分拍摄图像进行拼接,生成特效图像,可以根据无人机1002拍摄得到的图像集合自动生成特效图像,从而提高生成特效图像的效率。
本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质中存储有指令,当其在计算机上运行时,使得计算机执行上述方法实施例所述的图像处理方法。
本发明实施例还提供一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行上述方法实施例所述的图像处理方法。
需要说明的是,对于前述的各个方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某一些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:闪存盘、只读存储器(Read-Only Memory,ROM)、随机存取器(Random AccessMemory,RAM)、磁盘或光盘等。
以上对本发明实施例所提供的一种图像处理方法、无人机、地面控制台及其图像处理系统进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (53)
1.一种图像处理方法,其特征在于,所述方法包括:
接收地面控制台发送的特效拍摄控制信息,所述特效拍摄控制信息包括目标飞行轨迹;
根据所述目标飞行轨迹确定拍摄位置间隔和拍摄姿态,所述目标飞行轨迹的非弯曲部分中的拍摄位置间隔相同,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔小于所述非弯曲部分中的拍摄位置间隔,所述拍摄姿态朝向目标拍摄对象;
控制无人机按照所述目标飞行轨迹飞行,并根据所述拍摄位置间隔和所述拍摄姿态控制相机对所述目标拍摄对象进行拍摄,得到拍摄图像集合,所述拍摄图像集合包括多张拍摄图像;
将所述拍摄图像集合发送给所述地面控制台,以便于所述地面控制台对所述拍摄图像集合中的至少部分拍摄图像进行拼接,生成特效图像;
其中,所述非弯曲部分是指所述目标飞行轨迹中平行或者垂直于所述目标拍摄对象的部分,所述弯曲部分是指所述目标飞行轨迹中除所述非弯曲部分之外的部分。
2.根据权利要求1所述的方法,其特征在于,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔与所述弯曲部分处的弯曲弧度成负相关。
3.根据权利要求1所述的方法,其特征在于,所述特效拍摄控制信息是根据预先记录的所述无人机的飞行轨迹生成的。
4.根据权利要求1所述的方法,其特征在于,所述特效拍摄控制信息是根据用户预先绘制的飞行轨迹生成的。
5.根据权利要求1~4任一项所述的方法,其特征在于,所述目标飞行轨迹包括第一飞行轨迹和第二飞行轨迹,所述第一飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分,所述第二飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第二飞行轨迹的弯曲弧度由小变大。
6.根据权利要求5所述的方法,其特征在于,所述根据所述目标飞行轨迹确定拍摄位置间隔和拍摄姿态,包括:
根据所述第一飞行轨迹和所述第二飞行轨迹确定拍摄位置间隔和拍摄姿态;
所述第一飞行轨迹中的拍摄位置间隔相同,所述第一飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向所述目标拍摄对象;
所述第二飞行轨迹中的拍摄位置间隔由大变小,所述第二飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象。
7.根据权利要求1~4任一项所述的方法,其特征在于,所述目标飞行轨迹包括第一飞行轨迹、第二飞行轨迹和第三飞行轨迹;
所述第一飞行轨迹和所述第三飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第一飞行轨迹的弯曲弧度由大变小,所述第三飞行轨迹的弯曲弧度由小变大;
所述第二飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分。
8.根据权利要求7所述的方法,其特征在于,所述根据所述目标飞行轨迹确定拍摄位置间隔和拍摄姿态,包括:
根据所述第一飞行轨迹、所述第二飞行轨迹和所述第三飞行轨迹确定拍摄位置间隔和拍摄姿态;
所述第一飞行轨迹中的拍摄位置间隔由小变大,所述第一飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象;
所述第二飞行轨迹中的拍摄位置间隔相同,所述第二飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向所述目标拍摄对象;
所述第三飞行轨迹中的拍摄位置间隔由大变小,所述第三飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象。
9.根据权利要求1~4任一项所述的方法,其特征在于,所述目标飞行轨迹包括第一飞行轨迹、第二飞行轨迹、第三飞行轨迹和第四飞行轨迹;
所述第一飞行轨迹和所述第四飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分;
所述第二飞行轨迹和所述第三飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第二飞行轨迹的弯曲弧度由小变大,所述第三飞行轨迹的弯曲弧度由大变小。
10.根据权利要求9所述的方法,其特征在于,所述根据所述目标飞行轨迹确定拍摄位置间隔和拍摄姿态,包括:
根据所述第一飞行轨迹、所述第二飞行轨迹、所述第三飞行轨迹和所述第四飞行轨迹确定拍摄位置间隔和拍摄姿态;
所述第一飞行轨迹中的拍摄位置间隔相同,所述第一飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向所述目标拍摄对象;
所述第二飞行轨迹中的拍摄位置间隔由大变小,所述第二飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象;
所述第三飞行轨迹中的拍摄位置间隔由小变大,所述第三飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象;
所述第四飞行轨迹中的拍摄位置间隔相同,所述第四飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向所述目标拍摄对象。
11.根据权利要求8所述的方法,其特征在于,所述目标飞行轨迹包括两条所述第一飞行轨迹、两条所述第二飞行轨迹和两条所述第三飞行轨迹;
其中,所述根据所述第一飞行轨迹、所述第二飞行轨迹和所述第三飞行轨迹确定拍摄位置间隔和拍摄姿态,包括:
根据所述两条所述第一飞行轨迹、所述两条所述第二飞行轨迹和所述两条所述第三飞行轨迹确定拍摄位置间隔和拍摄姿态。
12.一种图像处理方法,其特征在于,所述方法包括:
获取特效图像类型,并确定所述特效图像类型对应的特效拍摄控制信息,所述特效拍摄控制信息包括目标飞行轨迹;
向无人机发送所述特效拍摄控制信息,以便于所述无人机根据所述目标飞行轨迹确定拍摄位置间隔和拍摄姿态,所述目标飞行轨迹的非弯曲部分中的拍摄位置间隔相同,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔小于所述非弯曲部分中的拍摄位置间隔,所述拍摄姿态朝向目标拍摄对象;
接收所述无人机发送的拍摄图像集合,所述拍摄图像集合包括的多张拍摄图像是由所述无人机在按照所述目标飞行轨迹飞行的过程中,根据所述拍摄位置间隔和所述拍摄姿态控制相机对所述目标拍摄对象进行拍摄得到的;
根据所述拍摄图像集合中的至少部分拍摄图像分别截取的图像范围,对所述至少部分拍摄图像进行拼接,生成特效图像,所述拍摄图像截取的图像范围与所述拍摄图像的拍摄位置处的弯曲弧度相关;
其中,所述非弯曲部分是指所述目标飞行轨迹中平行或者垂直于所述目标拍摄对象的部分,所述弯曲部分是指所述目标飞行轨迹中除所述非弯曲部分之外的部分。
13.根据权利要求12所述的方法,其特征在于,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔与所述弯曲部分处的弯曲弧度成负相关。
14.根据权利要求12所述的方法,其特征在于,所述拍摄图像截取的图像范围与所述拍摄图像的拍摄位置处的弯曲弧度成负相关。
15.根据权利要求12所述的方法,其特征在于,所述特效拍摄控制信息是根据预先记录的所述无人机的飞行轨迹生成的。
16.根据权利要求12所述的方法,其特征在于,所述特效拍摄控制信息是根据用户预先绘制的飞行轨迹生成的。
17.根据权利要求12~16任一项所述的方法,其特征在于,所述根据所述拍摄图像集合中的至少部分拍摄图像分别截取的图像范围,对所述至少部分拍摄图像进行拼接,生成特效图像,包括:
获取所述相机的相机参数以及所述无人机预先记录的所述拍摄图像集合包括的所述多张拍摄图像的拍摄位置和拍摄姿态;
根据所述多张拍摄图像中的至少部分拍摄图像的拍摄位置和拍摄姿态确定所述至少部分拍摄图像分别截取的图像范围;
根据所述相机参数、所述至少部分拍摄图像的拍摄位置和拍摄姿态、以及所述至少部分拍摄图像分别截取的图像范围对所述至少部分拍摄图像进行拼接,生成特效图像。
18.根据权利要求17所述的方法,其特征在于,所述目标飞行轨迹包括第一飞行轨迹和第二飞行轨迹,所述第一飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分,所述第二飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第二飞行轨迹的弯曲弧度由小变大。
19.根据权利要求18所述的方法,其特征在于,拍摄位置处于所述第一飞行轨迹中的拍摄图像截取的图像范围相同;
拍摄位置处于所述第二飞行轨迹中的拍摄图像截取的图像范围由大变小。
20.根据权利要求17所述的方法,其特征在于,所述目标飞行轨迹包括第一飞行轨迹、第二飞行轨迹和第三飞行轨迹;
所述第一飞行轨迹和所述第三飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第一飞行轨迹的弯曲弧度由大变小,所述第三飞行轨迹的弯曲弧度由小变大;
所述第二飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分。
21.根据权利要求20所述的方法,其特征在于,拍摄位置处于所述第一飞行轨迹中的拍摄图像截取的图像范围由小变大;
拍摄位置处于所述第二飞行轨迹中的拍摄图像截取的图像范围相同;
拍摄位置处于所述第三飞行轨迹中的拍摄图像截取的图像范围由大变小。
22.根据权利要求17所述的方法,其特征在于,所述目标飞行轨迹包括第一飞行轨迹、第二飞行轨迹、第三飞行轨迹和第四飞行轨迹;
所述第一飞行轨迹和所述第四飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分;
所述第二飞行轨迹和所述第三飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第二飞行轨迹的弯曲弧度由小变大,所述第三飞行轨迹的弯曲弧度由大变小。
23.根据权利要求22所述的方法,其特征在于,拍摄位置处于所述第一飞行轨迹中的拍摄图像截取的图像范围相同;
拍摄位置处于所述第二飞行轨迹中的拍摄图像截取的图像范围由大变小;
拍摄位置处于所述第三飞行轨迹中的拍摄图像截取的图像范围由小变大;
拍摄位置处于所述第四飞行轨迹中的拍摄图像截取的图像范围相同。
24.根据权利要求20或21所述的方法,其特征在于,所述目标飞行轨迹包括两条所述第一飞行轨迹、两条所述第二飞行轨迹和两条所述第三飞行轨迹。
25.根据权利要求12所述的方法,其特征在于,所述根据所述拍摄图像集合中的至少部分拍摄图像分别截取的图像范围,对所述至少部分拍摄图像进行拼接,生成特效图像之后,所述方法还包括:
接收用户输入的后期特效处理指令;
响应所述后期特效处理指令对所述特效图像进行后期特效处理,得到后期特效处理后的特效图像。
26.根据权利要求25所述的方法,其特征在于,所述后期特效处理指令包括旋转、扭曲、调整色调、调整色系和变换风格。
27.一种无人机,其特征在于,包括:处理器、通信接口和存储器,所述处理器、所述通信接口和所述存储器通过总线连接;
所述存储器,用于存储程序指令;
所述处理器,用于执行所述存储器存储的程序指令;
所述通信接口,用于收发信息或信令的交互;
所述通信接口,用于接收地面控制台发送的特效拍摄控制信息,所述特效拍摄控制信息包括目标飞行轨迹;
所述处理器,用于根据所述目标飞行轨迹确定拍摄位置间隔和拍摄姿态,所述目标飞行轨迹的非弯曲部分中的拍摄位置间隔相同,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔小于所述非弯曲部分中的拍摄位置间隔,所述拍摄姿态朝向目标拍摄对象;
所述处理器,还用于控制无人机按照所述目标飞行轨迹飞行,并根据所述拍摄位置间隔和所述拍摄姿态控制相机对所述目标拍摄对象进行拍摄,得到拍摄图像集合,所述拍摄图像集合包括多张拍摄图像;
所述通信接口,还用于将所述拍摄图像集合发送给所述地面控制台,以便于所述地面控制台对所述拍摄图像集合中的至少部分拍摄图像进行拼接,生成特效图像;
其中,所述非弯曲部分是指所述目标飞行轨迹中平行或者垂直于所述目标拍摄对象的部分,所述弯曲部分是指所述目标飞行轨迹中除所述非弯曲部分之外的部分。
28.根据权利要求27所述的无人机,其特征在于,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔与所述弯曲部分处的弯曲弧度成负相关。
29.根据权利要求27所述的无人机,其特征在于,所述特效拍摄控制信息是根据预先记录的所述无人机的飞行轨迹生成的。
30.根据权利要求27所述的无人机,其特征在于,所述特效拍摄控制信息是根据用户预先绘制的飞行轨迹生成的。
31.根据权利要求27~30任一项所述的无人机,其特征在于,所述目标飞行轨迹包括第一飞行轨迹和第二飞行轨迹,所述第一飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分,所述第二飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第二飞行轨迹的弯曲弧度由小变大。
32.根据权利要求31所述的无人机,其特征在于,
所述处理器,具体用于根据所述第一飞行轨迹和所述第二飞行轨迹确定拍摄位置间隔和拍摄姿态;
所述第一飞行轨迹中的拍摄位置间隔相同,所述第一飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向所述目标拍摄对象;
所述第二飞行轨迹中的拍摄位置间隔由大变小,所述第二飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象。
33.根据权利要求27~30任一项所述的无人机,其特征在于,所述目标飞行轨迹包括第一飞行轨迹、第二飞行轨迹和第三飞行轨迹;
所述第一飞行轨迹和所述第三飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第一飞行轨迹的弯曲弧度由大变小,所述第三飞行轨迹的弯曲弧度由小变大;
所述第二飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分。
34.根据权利要求33所述的无人机,其特征在于,
所述处理器,具体用于根据所述第一飞行轨迹、所述第二飞行轨迹和所述第三飞行轨迹确定拍摄位置间隔和拍摄姿态;
所述第一飞行轨迹中的拍摄位置间隔由小变大,所述第一飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象;
所述第二飞行轨迹中的拍摄位置间隔相同,所述第二飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向所述目标拍摄对象;
所述第三飞行轨迹中的拍摄位置间隔由大变小,所述第三飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象。
35.根据权利要求27~30任一项所述的无人机,其特征在于,所述目标飞行轨迹包括第一飞行轨迹、第二飞行轨迹、第三飞行轨迹和第四飞行轨迹;
所述第一飞行轨迹和所述第四飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分;
所述第二飞行轨迹和所述第三飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第二飞行轨迹的弯曲弧度由小变大,所述第三飞行轨迹的弯曲弧度由大变小。
36.根据权利要求35所述的无人机,其特征在于,
所述处理器,具体用于根据所述第一飞行轨迹、所述第二飞行轨迹、所述第三飞行轨迹和所述第四飞行轨迹确定拍摄位置间隔和拍摄姿态;
所述第一飞行轨迹中的拍摄位置间隔相同,所述第一飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向所述目标拍摄对象;
所述第二飞行轨迹中的拍摄位置间隔由大变小,所述第二飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象;
所述第三飞行轨迹中的拍摄位置间隔由小变大,所述第三飞行轨迹中的拍摄位置对应的拍摄姿态倾斜朝向所述目标拍摄对象;
所述第四飞行轨迹中的拍摄位置间隔相同,所述第四飞行轨迹中的拍摄位置对应的拍摄姿态垂直朝向所述目标拍摄对象。
37.根据权利要求34所述的无人机,其特征在于,所述目标飞行轨迹包括两条所述第一飞行轨迹、两条所述第二飞行轨迹和两条所述第三飞行轨迹;
所述处理器,具体用于根据所述两条所述第一飞行轨迹、所述两条所述第二飞行轨迹和所述两条所述第三飞行轨迹确定拍摄位置间隔和拍摄姿态。
38.一种地面控制台,其特征在于,包括:处理器、通信接口和存储器,所述处理器、所述通信接口和所述存储器通过总线连接;
所述存储器,用于存储程序指令;
所述通信接口,用于收发信息或信令的交互;
所述处理器,用于执行所述存储器存储的程序指令;
所述处理器,用于获取特效图像类型,并确定所述特效图像类型对应的特效拍摄控制信息,所述特效拍摄控制信息包括目标飞行轨迹;
所述通信接口,用于向无人机发送所述特效拍摄控制信息,以便于所述无人机根据所述目标飞行轨迹确定拍摄位置间隔和拍摄姿态,所述目标飞行轨迹的非弯曲部分中的拍摄位置间隔相同,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔小于所述非弯曲部分中的拍摄位置间隔,所述拍摄姿态朝向目标拍摄对象;
所述通信接口,还用于接收所述无人机发送的拍摄图像集合,所述拍摄图像集合包括的多张拍摄图像是由所述无人机在按照所述目标飞行轨迹飞行的过程中,根据所述拍摄位置间隔和所述拍摄姿态控制相机对所述目标拍摄对象进行拍摄得到的;
所述处理器,还用于根据所述拍摄图像集合中的至少部分拍摄图像分别截取的图像范围,对所述至少部分拍摄图像进行拼接,生成特效图像,所述拍摄图像截取的图像范围与所述拍摄图像的拍摄位置处的弯曲弧度相关;
其中,所述非弯曲部分是指所述目标飞行轨迹中平行或者垂直于所述目标拍摄对象的部分,所述弯曲部分是指所述目标飞行轨迹中除所述非弯曲部分之外的部分。
39.根据权利要求38所述的地面控制台,其特征在于,所述目标飞行轨迹的弯曲部分中的拍摄位置间隔与所述弯曲部分处的弯曲弧度成负相关。
40.根据权利要求38所述的地面控制台,其特征在于,所述拍摄图像截取的图像范围与所述拍摄图像的拍摄位置处的弯曲弧度成负相关。
41.根据权利要求38所述的地面控制台,其特征在于,所述特效拍摄控制信息是根据预先记录的所述无人机的飞行轨迹生成的。
42.根据权利要求38所述的地面控制台,其特征在于,所述特效拍摄控制信息是根据用户预先绘制的飞行轨迹生成的。
43.根据权利要求38~42任一项所述的地面控制台,其特征在于,所述处理器根据所述拍摄图像集合中的至少部分拍摄图像分别截取的图像范围,对所述至少部分拍摄图像进行拼接,生成特效图像时,具体用于:
获取所述相机的相机参数以及所述无人机预先记录的所述拍摄图像集合包括的所述多张拍摄图像的拍摄位置和拍摄姿态;
根据所述多张拍摄图像中的至少部分拍摄图像的拍摄位置和拍摄姿态确定所述至少部分拍摄图像分别截取的图像范围;
根据所述相机参数、所述至少部分拍摄图像的拍摄位置和拍摄姿态、以及所述至少部分拍摄图像分别截取的图像范围对所述至少部分拍摄图像进行拼接,生成特效图像。
44.根据权利要求43所述的地面控制台,其特征在于,所述目标飞行轨迹包括第一飞行轨迹和第二飞行轨迹,所述第一飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分,所述第二飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第二飞行轨迹的弯曲弧度由小变大。
45.根据权利要求44所述的地面控制台,其特征在于,拍摄位置处于所述第一飞行轨迹中的拍摄图像截取的图像范围相同;
拍摄位置处于所述第二飞行轨迹中的拍摄图像截取的图像范围由大变小。
46.根据权利要求43所述的地面控制台,其特征在于,所述目标飞行轨迹包括第一飞行轨迹、第二飞行轨迹和第三飞行轨迹;
所述第一飞行轨迹和所述第三飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第一飞行轨迹的弯曲弧度由大变小,所述第三飞行轨迹的弯曲弧度由小变大;
所述第二飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分。
47.根据权利要求46所述的地面控制台,其特征在于,拍摄位置处于所述第一飞行轨迹中的拍摄图像截取的图像范围由小变大;
拍摄位置处于所述第二飞行轨迹中的拍摄图像截取的图像范围相同;
拍摄位置处于所述第三飞行轨迹中的拍摄图像截取的图像范围由大变小。
48.根据权利要求43所述的地面控制台,其特征在于,所述目标飞行轨迹包括第一飞行轨迹、第二飞行轨迹、第三飞行轨迹和第四飞行轨迹;
所述第一飞行轨迹和所述第四飞行轨迹为所述目标飞行轨迹中平行于所述目标拍摄对象的部分;
所述第二飞行轨迹和所述第三飞行轨迹为所述目标飞行轨迹中弯曲的部分,所述第二飞行轨迹的弯曲弧度由小变大,所述第三飞行轨迹的弯曲弧度由大变小。
49.根据权利要求48所述的地面控制台,其特征在于,拍摄位置处于所述第一飞行轨迹中的拍摄图像截取的图像范围相同;
拍摄位置处于所述第二飞行轨迹中的拍摄图像截取的图像范围由大变小;
拍摄位置处于所述第三飞行轨迹中的拍摄图像截取的图像范围由小变大;
拍摄位置处于所述第四飞行轨迹中的拍摄图像截取的图像范围相同。
50.根据权利要求46或47所述的地面控制台,其特征在于,所述目标飞行轨迹包括两条所述第一飞行轨迹、两条所述第二飞行轨迹和两条所述第三飞行轨迹。
51.根据权利要求38所述的地面控制台,其特征在于,
所述通信接口,还用于接收用户输入的后期特效处理指令;
所述处理器,还用于响应所述后期特效处理指令对所述特效图像进行后期特效处理,得到后期特效处理后的特效图像。
52.根据权利要求51所述的地面控制台,其特征在于,所述后期特效处理指令包括旋转、扭曲、调整色调、调整色系和变换风格。
53.一种图像处理系统,其特征在于,包括:如权利要求27~37任一项所述的无人机和如权利要求38~52任一项所述的地面控制台。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2017/095340 WO2019023914A1 (zh) | 2017-07-31 | 2017-07-31 | 一种图像处理方法、无人机、地面控制台及其图像处理系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108513642A CN108513642A (zh) | 2018-09-07 |
CN108513642B true CN108513642B (zh) | 2021-08-27 |
Family
ID=63375155
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201780004683.XA Expired - Fee Related CN108513642B (zh) | 2017-07-31 | 2017-07-31 | 一种图像处理方法、无人机、地面控制台及其图像处理系统 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN108513642B (zh) |
WO (1) | WO2019023914A1 (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109857128B (zh) * | 2018-12-18 | 2022-07-15 | 丰翼科技(深圳)有限公司 | 无人机视觉定点降落方法、系统、设备及存储介质 |
CN111667405A (zh) * | 2019-03-06 | 2020-09-15 | 西安邮电大学 | 图像拼接方法及装置 |
CN111666959A (zh) * | 2019-03-06 | 2020-09-15 | 西安邮电大学 | 矢量图像匹配方法及装置 |
WO2021102914A1 (zh) * | 2019-11-29 | 2021-06-03 | 深圳市大疆创新科技有限公司 | 轨迹复演方法、系统、可移动平台和存储介质 |
WO2021243566A1 (zh) * | 2020-06-02 | 2021-12-09 | 深圳市大疆创新科技有限公司 | 成像方法、成像装置、计算机可读存储介质 |
CN112995503B (zh) * | 2021-02-07 | 2023-04-07 | 苏州臻迪智能科技有限公司 | 手势控制全景图像获取方法、装置、电子设备及存储介质 |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101916452A (zh) * | 2010-07-26 | 2010-12-15 | 中国科学院遥感应用研究所 | 一种基于飞行控制信息的无人机遥感影像自动拼接方法 |
CN102122173A (zh) * | 2011-01-13 | 2011-07-13 | 北京航空航天大学 | 一种基于sar雷达成像的无人机航线规划方法 |
CN102201115A (zh) * | 2011-04-07 | 2011-09-28 | 湖南天幕智能科技有限公司 | 无人机航拍视频实时全景图拼接方法 |
US8556173B1 (en) * | 2010-03-17 | 2013-10-15 | The United States Of America As Represented By The Secretary Of The Navy | Apparatus and system for navigating in GPS denied environments |
CN103838244A (zh) * | 2014-03-20 | 2014-06-04 | 湖南大学 | 基于四轴飞行器的便携式目标跟踪方法及系统 |
CN105117022A (zh) * | 2015-09-24 | 2015-12-02 | 北京零零无限科技有限公司 | 一种控制无人机随脸转动的方法和装置 |
CN105391939A (zh) * | 2015-11-04 | 2016-03-09 | 腾讯科技(深圳)有限公司 | 无人机拍摄控制方法和装置、无人机拍摄方法和无人机 |
CN105556408A (zh) * | 2014-09-15 | 2016-05-04 | 深圳市大疆创新科技有限公司 | 一种飞行器的飞行控制方法及相关装置 |
CN105721932A (zh) * | 2016-01-20 | 2016-06-29 | 杭州米为科技有限公司 | 视频剪辑方法、装置以及无人机视频剪辑系统 |
CN106061838A (zh) * | 2014-01-20 | 2016-10-26 | 罗博杜伯公司 | 具有可变飞行特性的多旋翼直升机 |
CN106303448A (zh) * | 2016-08-29 | 2017-01-04 | 零度智控(北京)智能科技有限公司 | 航拍图像处理方法、无人机、头戴显示设备及系统 |
CN106687878A (zh) * | 2014-10-31 | 2017-05-17 | 深圳市大疆创新科技有限公司 | 用于利用视觉标记进行监视的系统和方法 |
CN106714917A (zh) * | 2016-04-01 | 2017-05-24 | 深圳市大疆创新科技有限公司 | 智能比赛场地、移动机器人、比赛系统及控制方法 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9075415B2 (en) * | 2013-03-11 | 2015-07-07 | Airphrame, Inc. | Unmanned aerial vehicle and methods for controlling same |
CN105334347B (zh) * | 2015-11-20 | 2019-05-31 | 中国计量学院 | 一种基于无人机的粒子图像测速检测系统及方法 |
CN105676861A (zh) * | 2016-02-29 | 2016-06-15 | 北方民族大学 | 一种基于无人机的秸秆焚烧监测系统及测量方法 |
CN105898216B (zh) * | 2016-04-14 | 2019-01-15 | 武汉科技大学 | 一种利用无人机进行的人数计数方法 |
CN106375682B (zh) * | 2016-08-31 | 2020-02-18 | 深圳市大疆灵眸科技有限公司 | 影像处理方法、装置与可移动设备、无人机遥控器及系统 |
WO2018107338A1 (zh) * | 2016-12-12 | 2018-06-21 | 深圳市大疆创新科技有限公司 | 图像信号处理方法和装置 |
-
2017
- 2017-07-31 CN CN201780004683.XA patent/CN108513642B/zh not_active Expired - Fee Related
- 2017-07-31 WO PCT/CN2017/095340 patent/WO2019023914A1/zh active Application Filing
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8556173B1 (en) * | 2010-03-17 | 2013-10-15 | The United States Of America As Represented By The Secretary Of The Navy | Apparatus and system for navigating in GPS denied environments |
CN101916452A (zh) * | 2010-07-26 | 2010-12-15 | 中国科学院遥感应用研究所 | 一种基于飞行控制信息的无人机遥感影像自动拼接方法 |
CN102122173A (zh) * | 2011-01-13 | 2011-07-13 | 北京航空航天大学 | 一种基于sar雷达成像的无人机航线规划方法 |
CN102201115A (zh) * | 2011-04-07 | 2011-09-28 | 湖南天幕智能科技有限公司 | 无人机航拍视频实时全景图拼接方法 |
CN106061838A (zh) * | 2014-01-20 | 2016-10-26 | 罗博杜伯公司 | 具有可变飞行特性的多旋翼直升机 |
CN103838244A (zh) * | 2014-03-20 | 2014-06-04 | 湖南大学 | 基于四轴飞行器的便携式目标跟踪方法及系统 |
CN105556408A (zh) * | 2014-09-15 | 2016-05-04 | 深圳市大疆创新科技有限公司 | 一种飞行器的飞行控制方法及相关装置 |
CN106687878A (zh) * | 2014-10-31 | 2017-05-17 | 深圳市大疆创新科技有限公司 | 用于利用视觉标记进行监视的系统和方法 |
CN105117022A (zh) * | 2015-09-24 | 2015-12-02 | 北京零零无限科技有限公司 | 一种控制无人机随脸转动的方法和装置 |
CN105391939A (zh) * | 2015-11-04 | 2016-03-09 | 腾讯科技(深圳)有限公司 | 无人机拍摄控制方法和装置、无人机拍摄方法和无人机 |
CN105721932A (zh) * | 2016-01-20 | 2016-06-29 | 杭州米为科技有限公司 | 视频剪辑方法、装置以及无人机视频剪辑系统 |
CN106714917A (zh) * | 2016-04-01 | 2017-05-24 | 深圳市大疆创新科技有限公司 | 智能比赛场地、移动机器人、比赛系统及控制方法 |
CN106303448A (zh) * | 2016-08-29 | 2017-01-04 | 零度智控(北京)智能科技有限公司 | 航拍图像处理方法、无人机、头戴显示设备及系统 |
Also Published As
Publication number | Publication date |
---|---|
WO2019023914A1 (zh) | 2019-02-07 |
CN108513642A (zh) | 2018-09-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108513642B (zh) | 一种图像处理方法、无人机、地面控制台及其图像处理系统 | |
WO2020233683A1 (zh) | 云台控制方法、装置、控制终端及飞行器系统 | |
CN108702444B (zh) | 一种图像处理方法、无人机及系统 | |
US20210105403A1 (en) | Method for processing image, image processing apparatus, multi-camera photographing apparatus, and aerial vehicle | |
US10416667B2 (en) | System and method for utilization of multiple-camera network to capture static and/or motion scenes | |
CN107660337B (zh) | 用于从鱼眼摄像机产生组合视图的系统及方法 | |
CN107169924B (zh) | 三维全景图像的建立方法和系统 | |
WO2020014909A1 (zh) | 拍摄方法、装置和无人机 | |
CN110663246B (zh) | 用于处理图像的方法和系统 | |
US20210176395A1 (en) | Gimbal system and image processing method thereof and unmanned aerial vehicle | |
WO2021035731A1 (zh) | 无人飞行器的控制方法、装置及计算机可读存储介质 | |
CN112585554A (zh) | 无人机巡检方法、装置及无人机 | |
WO2017020150A1 (zh) | 一种图像处理方法、装置及摄像机 | |
CN109976370B (zh) | 立面环绕飞行的控制方法、装置、终端及存储介质 | |
CN107071389A (zh) | 航拍方法、装置和无人机 | |
US20220141387A1 (en) | Camera lens smoothing method and portable terminal | |
WO2019104641A1 (zh) | 无人机、其控制方法以及记录介质 | |
WO2019061064A1 (zh) | 图像处理方法和设备 | |
US20190139246A1 (en) | Information processing method, wearable electronic device, and processing apparatus and system | |
WO2022047701A1 (zh) | 图像处理方法和装置 | |
WO2020014953A1 (zh) | 一种图像处理方法及设备 | |
CN108737743B (zh) | 基于图像拼接的视频拼接装置及视频拼接方法 | |
TWI696147B (zh) | 全景圖形成方法及系統 | |
CN111712857A (zh) | 图像处理方法、装置、云台和存储介质 | |
US20230290061A1 (en) | Efficient texture mapping of a 3-d mesh |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20210827 |
|
CF01 | Termination of patent right due to non-payment of annual fee |