CN108513708A - 影像数据处理方法和影像数据处理系统 - Google Patents

影像数据处理方法和影像数据处理系统 Download PDF

Info

Publication number
CN108513708A
CN108513708A CN201780004426.6A CN201780004426A CN108513708A CN 108513708 A CN108513708 A CN 108513708A CN 201780004426 A CN201780004426 A CN 201780004426A CN 108513708 A CN108513708 A CN 108513708A
Authority
CN
China
Prior art keywords
terminal
image data
memory
abnormality
caching
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201780004426.6A
Other languages
English (en)
Inventor
缪宝杰
艾楚越
朱炼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Shenzhen Dajiang Innovations Technology Co Ltd
Original Assignee
Shenzhen Dajiang Innovations Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Dajiang Innovations Technology Co Ltd filed Critical Shenzhen Dajiang Innovations Technology Co Ltd
Publication of CN108513708A publication Critical patent/CN108513708A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording

Abstract

本公开提供了一种基于可移动平台的影像数据处理方法和可移动平台、基于终端的影像数据处理方法和终端、以及影像数据处理方法和影像数据处理系统。所述基于可移动平台的影像数据处理方法包括:(S702)检测所述可移动平台的存储器(126)的状态,以确定所述存储器(126)是否处于异常状态;(S704)当确定所述存储器(126)处于异常状态时,发送异常状态指示信号;(S706)接收拍摄启动指令;(S708)采集影像数据;和(S710)传输所述影像数据。

Description

影像数据处理方法和影像数据处理系统
版权申明
本专利文件披露的内容包含受版权保护的材料。该版权为版权所有人所有。版权所有人不反对任何人复制专利与商标局的官方记录和档案中所存在的该专利文件或者专利披露。
技术领域
本公开涉及数据处理技术领域,更具体地涉及基于可移动平台的影像数据处理方法和可移动平台、基于终端的影像数据处理方法和终端、以及影像数据处理方法和影像数据处理系统。
背景技术
航拍是近年来兴起的一种摄影方式,用户可以通过各类飞行平台,例如直升机、热气球、无人机,来拍摄各种地形地貌、景色和人物。其除了作为摄影艺术,也被运用于军事、交通、救灾等方面。
为了存储航拍获得的图像和视频等数据,目前的无人机中通常设置有存储卡,例如SD卡。在使用无人机等进行航拍过程中,获得的图像和视频等数据可以实时存储在所述存储卡中。
但是,在航拍的过程中,可能出现存储卡异常的情况,例如存储卡未插入无人机中、存储卡已损坏或存储卡容量已满。在这些情况下,目前的无人机一般无法进行航拍操作,从而无法实现计划的拍摄目的,例如,错失拍摄当前的景色或人物的机会。
发明内容
根据本公开的第一方面,提出了一种基于可移动平台的影像数据处理方法,所述方法可以包括:检测所述可移动平台的存储器的状态,以确定所述存储器是否处于异常状态;当确定所述存储器处于异常状态时,发送异常状态指示信号;接收拍摄启动指令;采集影像数据;和传输所述影像数据。
根据本公开的第二方面,提出了一种基于终端的影像数据处理方法,所述可以方法包括:接收异常状态指示信号,所述异常状态指示信号指示可移动平台的存储器处于异常状态;发送拍摄启动指令;接收影像数据;和存储所述影像数据。
根据本公开的第三方面,提出了一种影像数据处理方法,所述方法可以包括:检测可移动平台的存储器的状态,以确定所述存储器是否处于异常状态;当确定所述存储器处于异常状态时,发送异常状态指示信号至终端;所述终端发送拍摄启动指令;根据所述拍摄启动指令,所述可移动平台采集影像数据;所述可移动平台传输所述影像数据至所述终端;和存储所述影像数据于所述终端中。
根据本公开的第四方面,提出了一种可移动平台,包括:可读存储介质,用于存储可执行指令;以及处理器,用于执行可读存储介质中存储的可执行指令,所述可执行指令在由所述处理器执行时使得所述处理器执行根据本公开第一方面所述的方法。
根据本公开的第五方面,提出了一种终端,包括:可读存储介质,用于存储可执行指令;以及处理器,用于执行可读存储介质中存储的可执行指令,所述可执行指令在由所述处理器执行时使得所述处理器执行根据本公开第二方面所述的方法。
根据本公开的第六方面,提出了一种影像处理系统,包括根据本公开第四方面所述的可移动平台和/或根据本公开第五方面所述的终端。
附图说明
为了更完整地理解本公开实施例及其优势,现在将参考结合附图的以下描述,其中:
图1是根据本公开的一个实施例的影像数据处理系统的结构示意图;
图2是图1中示出的影像数据处理系统的结构框图;
图3是根据本公开的一个实施例的影像数据处理方法的流程图;
图4是根据本公开的另一个实施例的影像数据处理系统的结构示意图;
图5是根据本公开的又一个实施例的影像数据处理系统的结构示意图;
图6是图5中示出的影像数据处理系统的结构框图;
图7是根据本公开的实施例的基于可移动平台的影像数据处理方法的流程图;
图8是根据本公开的实施例的基于终端的影像数据处理方法的流程图;和
图9是示出了根据本公开实施例的用于执行图7所示的方法的可移动平台或图8所示的方法的终端的示例硬件布置的框图。
此外,各附图并不一定按比例来绘制,而是仅以不影响读者理解的示意性方式示出。
具体实施方式
根据结合附图对本公开示例性实施例的以下详细描述,本公开的其它方面、优势和突出特征对于本领域技术人员将变得显而易见。
在本公开中,术语“包括”和“含有”及其派生词意为包括而非限制。
在本公开中,下述用于描述本公开原理的各种实施例只是说明,不应该以任何方式解释为限制公开的范围。参照附图的下述描述用于帮助全面理解由权利要求及其等同物限定的本公开的示例性实施例。下述描述包括多种具体细节来帮助理解,但这些细节应认为仅仅是示例性的。因此,本领域普通技术人员应认识到,在不脱离本公开的范围和精神的情况下,可以对本文中描述的实施例进行多种改变和修改。此外,为了清楚和简洁起见,省略了公知功能和结构的描述。此外,贯穿附图,相同附图标记用于相同或相似的功能和操作。此外,尽管可能在不同实施例中描述了具有不同特征的方案,但是本领域技术人员应当意识到:可以将不同实施例的全部或部分特征相结合,以形成不脱离本公开的精神和范围的新的实施例。
在本公开中,表述“影像数据”可以包括航拍过程中采集或获取的图像和视频等数据。相应地,根据所述图像和视频等数据产生的数据流可以被称为“影像数据流”。在本公开中,影像数据的处理可以包括影像数据的采集、影像数据的传输、影像数据的存储和影像数据的分享等。
在本公开的实施例中,基于无人机的影像数据处理系统主要包括天空端设备和地面端设备,天空端设备采集的影像数据通过无线链路传输至地面端设备。例如,在某些实施例中,天空端设备可以包括无人机和承载在所述无人机上的影像采集设备(例如摄像头、相机等),地面端设备可以包括遥控器和可移动终端,影像采集设备采集的影像数据可以通过设置在无人机和遥控器中的图传系统传输至可移动终端。在某些实施例中,天空端设备可以包括无人机和承载在所述无人机上的影像采集设备(例如摄像头、相机等),地面端设备可以包括可移动终端,影像采集设备采集的影像数据可以通过例如WIFI等无线通信方式传输至可移动终端。
本公开所描述的技术可以应用在可移动物体上,如空中的可移动物体(例如,固定翼飞行器,例如飞机、滑行机,旋翼飞行器,如直升飞机,或者其它的飞行器,如软式飞艇、气球),水中的可移动物体(例如,潜艇,小船,轮船),陆地上的可移动物体(例如,机动车,如轿车、摩托车、公共汽车、卡车、运货车;或杆子,例如鱼竿或其它类型的可移动的支持物或者框架;以及火车、地铁等),太空中的可移动物体(如,卫星、空间站、宇宙飞船)。可移动物体可以在一个环境中(如陆地上、水中、空中、太空)自由移动,或者沿着预设的路径、轨道、或者以约定的方式移动。该可移动物体可以一维、二维或者三维的移动。可移动物体可以响应信号自动移动,而不用手动移动。某些实施例中,所述可移动物体可以是运输工具,如空中的运输工具、陆地上的运输工具、水中的运输工具、太空中的运输工具,或者他们的结合。运输工具可以在一个或者多个指定的环境中自由移动,或者沿着轨道或者固定的路径移动。运输工具可包括动力系统。所述动力系统利用电动机、引擎、电子元件、磁性机构、重力、风力、燃烧、及/或者其它的动力机构。在某些实施例中,手动动力系统、人力动力系统、或者借助于其它生物体的动力系统也可以应用在可移动物体上,例如,运输工具。在某些实施例中,所述可移动物体可以是旋翼飞行器,该旋翼飞行器可以通过一个或者多个叶片的旋转驱动或者控制。所述可移动物体可借助一个或者多个旋转叶片、螺旋桨、轮子、磁铁、轨道、或者其它机构,被驱动或者重新定位。在某些实施例中,所述可移动物体是无人运输工具,如无人飞行器(Unmanned Aerial Vehicle,UAV),也可称为无人机。
在本公开中,表述“终端”可以包括用于操控无人机的遥控器或其它手持式的或者穿戴式设备。例如,所述终端可以包括智能手机、平板电脑、笔记本电脑、计算机、手表、手环、眼镜、头盔或者任何合适的组合。
下面,将以可移动平台为无人机示例描述本公开的某些实施例。
请参见图1,示出了根据本公开的一个实施例的影像数据处理系统的结构示意图。所述影像数据处理系统10可以包括:无人机12、遥控器14和可移动终端16。在该实施例中,无人机12为天空端设备,遥控器14和可移动终端16为地面端设备。
如图1所示,无人机12上挂载有影像采集设备18。在本公开的某些实施例中,所述影像采集设备18可以包括摄像头和/或相机,用于采集图像和/或视频。例如,在某些实施例中,所述摄像头和/或相机包括可以采集720p、1080p或4K视频的高清摄像头和/或相机。
在某些实施例中,所述无人机12设有云台122,如图1所示。影像采集设备18可以安装在云台122上,无人机12可以通过云台122调整影像采集设备18的拍摄角度、方位等。例如,云台122可以允许影像采集设备18绕着一个、两个、三个或者更多的轴旋转。可选地或者额外地,所述云台122可以允许影像采集设备18沿着一个、两个、三个或者更多的轴线性运动。用于旋转或者平移运动的轴可以彼此正交也可以不是正交。在某些实施例中,所述云台122可以控制所述摄像头和/或相机的姿态,所述姿态包括但不限于俯仰角、横滚角、偏航角等。
在某些实施例中,所述影像采集设备18可以刚性地搭载或者连接于无人机12上,以使得影像采集设备18相对于无人机12维持相对静止的状态。例如,连接到无人机12及影像采集设备18的云台122可以不允许影像采集设备18相对于无人机12移动。可选地,所述影像采集设备18可直接搭载在无人机12上而不需要云台。
在某些实施例中,所述遥控器14可以是手持式的遥控装置,远离无人机12设置,用于操作无人机12及其挂载的影像采集设备18的姿态,所述姿态包括但不限于俯仰角、横滚角、偏航角等。
在某些实施例中,所述可移动终端16可以是手持式的或者穿戴式设备。例如,所述可移动终端16可以包括智能手机、平板电脑、笔记本电脑、计算机、手表、手环、眼镜、头盔或者任何合适的组合。
图2示出了根据本公开的一个实施例的影像数据处理系统的结构框图。如图2所示,所述影像数据处理系统包括图传系统,该图传系统可以包括天空端的机载图传模块和地面端的地面图传模块,用于将影像数据从天空端传输至地面端。例如,所述无人机12可以包括机载图传模块124,用于接收影像采集设备18拍摄的图像和/或视频,即影像数据,并将所述影像数据发送至地面端的遥控器14。相应地,所述遥控器14可以包括地面图传模块142,用于接收所述机载图传模块124发送的所述影像数据。
如图2所示,所述影像数据处理系统还包括数据传输系统,该数据传输系统可以包括遥控器端的数据传输单元和终端端的数据传输单元,用于将影像数据等数据从遥控器端传输至可移动终端。例如,所述遥控器14可以包括第一数据传输单元144,所述可移动终端16可以包括第二数据传输单元164,所述影像数据流可以从第一数据传输单元144传输至第二数据传输单元164。例如,所述影像数据流可以通过有线通信链路,例如HDMI或USB数据线,传输至所述可移动终端16的第二数据传输单元164。或者,所述影像数据流可以通过无线通信链路,例如wifi、3G、4G等无线通信链路,传输至所述可移动终端16的第二数据传输单元164。
参见图2,所述无人机12上还设置有存储器126,例如SD卡。所述影像采集设备18采集的影像数据可以存储在存储器126中。例如,当所述影像采集设备18包括可以采集1080p或4K视频的高清摄像头和/或相机时,其采集的1080p或4K格式的原始影像数据可以存储在存储器126中。
在某些实施例中,所述影像数据处理系统还包括编码和解码系统。例如,所述无人机12可以包括编码模块128,用于压缩编码影像采集设备18采集的原始影像数据,以生成影像数据流。所述遥控器14和/或所述可移动终端可以包括解码模块,用于解码所述影像数据流。以1080p的视频源为例,对1080P的视频源,每秒30帧视频图像,每帧视频图像通过H.264压缩编码生成视频流。实时视频流码率通常为4Mbps~8Mbps,每帧压缩后的视频以流的方式按照固定数据包大小通过机载图传模块发送出去,地面图传模块收到数据包并将视频码流发送给解码模块,当收到一帧完整的视频数据后,解码模块对视频码流进行解码。
在某些实施例中,所述可移动终端16可以包括缓存162,用于接收和存储来自无人机12的影像数据流。
在某些实施例中,所述可移动终端16还可以包括显示单元170,用于显示存储在缓存162中的图像和/或视频等影像数据。
在某些实施例中,所述可移动终端16上安装有应用程序(APP)166,通过操作应用程序166,可以执行多种操作,例如,启动拍摄,处理存储在所述缓存162中的影像数据,分享经处理的所述影像数据至第三方平台。在某些实施例中,所述处理存储在所述缓存162中的影像数据包括编辑和/或剪辑存储在缓存162中的图像和/或视频,所述分享经处理的所述影像数据至第三方平台包括将经编辑和/或剪辑的图像和/或视频分享至微博、微信和/或上传至云空间。
在某些实施例中,所述可移动终端16还可以包括存储单元168。在某些实施例中,通过操作应用程序166,用户可以通过显示单元170播放存储在缓存162中的图像和/或视频等影像数据,然后将需要保存的图像和/或视频保存在存储单元168中。在某些实施例中,通过操作应用程序166,用户可以将经处理的所述影像数据保存在存储单元168中。
在某些实施例中,所述可移动终端16还可以包括编码单元172,用于对接收的图像和/或视频进行编码压缩。在某些实施例中,通过操作应用程序166,用户可以将经编码单元172编码压缩的图像和/或视频存储在存储单元168中。
图3示出了根据本公开的一个实施例的影像数据处理方法的流程图。结合图1-3,所述影像数据处理方法可以包括下面的步骤。
在步骤S301中,所述无人机12检测存储器126的状态。
在某些实施例中,所述无人机12可以实时检测存储器126的状态,以确定所述存储器126是否处于异常状态。所述异常状态可以包括但不限于:未检测到所述无人机12装载有所述存储器126没有装载所述存储器126,例如SD卡未插入所述无人机中,或者所述存储器126不能使用或已经损坏,或者所述存储器126的容量已满。例如,未检测所述无人机12装载有所述存储器126可以包括:所述存储器126未装入所述无人机12中、所述存储器126在所述无人机12中未安装好,例如安装接触不良等等。
在步骤S302中,当所述无人机12检测到存储器126处于异常状态时,所述无人机12发送异常状态指示信号至可移动终端16。
在步骤S304中,根据所述异常状态指示信号,所述可移动终端16发出提示信息。
在某些实施例中,所述提示信息可以包括在所述可移动终端16的用户界面上显示的状态图标,以提示用户无人机12上的存储器126处于所述异常状态,例如,SD卡未插入、SD卡已经损坏或SD卡的容量已满。
在步骤S306中,用户启动拍摄。
在某些实施例中,用户可以操作遥控器14上的快门按钮或点击所述可移动终端16上的拍摄按键或图标,以启动拍摄。在某些实施例中,用户可以通过特定的手势或语音命令来启动拍摄。应理解的是,本公开的实施例不限于上述启动拍摄的方式,用户还可以以任何其它合适的方式来启动拍摄。
在步骤S308中,所述可移动终端16发出确认信息,以提示用户确认启动缓存模式。
在某些实施例中,所述可移动终端16的用户界面上可以弹出对话框或窗口,以供用户确认,从而提示用户确认启动缓存模式。在所述缓存模式中,所述无人机的影像采集设备18采集的影像数据传输并存储于所述可移动终端的缓存162中。
在步骤S310中,所述可移动终端16显示拍摄参数信息。
在某些实施例中,在所述可移动终端16的用户界面上显示拍摄参数信息,例如,所述拍摄参数信息可以包括可拍摄照片的剩余张数和/或可拍摄视频的剩余时长。在本公开的实施例中,可拍摄照片的剩余张数和可拍摄视频的剩余时长是基于可移动终端16的缓存162的剩余容量计算出来的。在某些实施例中,所述拍摄参数信息还可以包括感光度(俗称ISO值)、光圈值、曝光补偿、快门速度、焦距、自动对焦方式、测光方式以及白平衡中的至少一种。其中自动对焦方式包括基于拍摄装置的镜头与被拍摄目标之间距离测量的测距自动对焦方式,以及基于成像清晰的聚焦检测自动对焦方式中的至少一种。测光方式包括点测光方式、中央部分测光方式、中央重点平均测光方式、平均测光方式和多区测光方式中的至少一种。
在步骤S312中,影像采集设备采集影像数据。
在某些实施例中,所述影像采集设备18可以包括摄像头和/或相机,采集图像和/或视频等影像数据。例如,所述摄像头和/或相机可以采集720p、1080p或4K视频。
在步骤S314中,无人机将所述影像数据传输至遥控器,所述遥控器将所述影像数据传输至可移动终端的缓存。
在某些实施例中,无人机12通过所述图传系统124、142将所述影像采集设备18采集的影像数据传输至遥控器14,并且遥控器14通过所述数据传输系统144、164将所述影像数据传输至可移动终端16的缓存162中。
在某些实施例中,在传输所述影像数据之前,所述无人机12可以压缩编码影像采集设备18采集的原始影像数据,以生成影像数据流。在接收到所述影像数据流之后,所述可移动终端可以解码所述影像数据流,以播放图像和/或视频。
在某些实施例中,所述可移动终端16还可以启动所述终端的音频模块,以采集环境声音;并且存储所述环境声音于缓存162中。例如,所述音频模块可以包括可移动终端16的麦克风和音频编码器。
在步骤S316中,处理存储在缓存中的影像数据。
所述处理存储在缓存中的影像数据包括编辑和/或剪辑图像和/或视频。在某些实施例中,用户可以通过可移动终端16中的应用程序166编辑和/或剪辑存储在缓存162中的影像数据,例如图像和/或视频。
在某些实施例中,所述处理存储在缓存中的影像数据还包括编辑和/或剪辑从无人机12接收的影像数据和可移动终端16的音频模块采集的所述环境声音,例如,混编从无人机12接收的影像数据中提取出的图像和/或视频和所述环境声音。
在步骤S318中,分享经处理的所述影像数据,和/或存储所述影像数据于所述可移动终端的存储单元中。
在某些实施例中,用户可以通过操作可移动终端16中的应用程序166,直接分享经编辑的所述影像数据至第三方平台,例如微博、微信或其它云空间。在某些实施例中,用户可以通过操作可移动终端16中的应用程序166,将存储在所述缓存中的影像数据和/或经编辑的所述影像数据保存于本地,例如,保存在可移动终端16的存储单元168中。
在本公开的实施例中,在无人机上的存储器(例如SD卡)出现异常状态的情况下,可以使用可移动终端的缓存进行拍摄,从而能够实现计划的拍摄目的。并且,用户可以直接使用可移动终端上的应用程序编辑所拍摄的图像和/或视频,不需要跳转至第三方编辑软件。另外,用户可以直接分享所拍摄的图像和/或视频,实现拍摄、编辑和分享的快速便捷操作。
在上述实施例中,遥控器14和可移动终端16是分离的独立部件,然而,根据本公开的另一实施例,遥控器14和可移动终端16也可以集成于一体。如图4所示,影像数据处理系统40可以包括:无人机42和遥控终端44。在该实施例中,无人机42为天空端设备,遥控终端44为地面端设备。
在图4的实施例中,遥控终端44兼具有上述实施例中的遥控器14和可移动终端16的作用,其包括遥控器14和可移动终端16的所有组成部分,具体可以参见上述对遥控器14和可移动终端16的描述,在此不再赘述。
请参见图5,示出了根据本公开的又一个实施例的影像数据处理系统的结构示意图。所述影像数据处理系统50可以包括:无人机52和可移动终端56。在该实施例中,无人机52为天空端设备,可移动终端56为地面端设备。
如图5所示,无人机52上挂载有影像采集设备58。在本公开的某些实施例中,所述影像采集设备58可以包括摄像头和/或相机,用于采集图像和/或视频。例如,在某些实施例中,所述摄像头和/或相机包括可以采集720p、1080p或4K视频的高清摄像头和/或相机。
在某些实施例中,所述无人机52没有云台522,如图5所示。影像采集设备58可以安装在云台522上,无人机52可以通过云台522调整影像采集设备58的拍摄角度、方位等。例如,云台522可以允许影像采集设备58绕着一个、两个、三个或者更多的轴旋转。可选地或者额外地,所述云台522可以允许影像采集设备58沿着一个、两个、三个或者更多的轴线性运动。用于旋转或者平移运动的轴可以彼此正交也可以不是正交。在某些实施例中,所述云台522可以控制所述摄像头和/或相机的姿态,所述姿态包括但不限于俯仰角、横滚角、偏航角等。
在某些实施例中,所述影像采集设备58可以刚性地搭载或者连接于无人机52上,以使得影像采集设备58相对于无人机52维持相对静止的状态。例如,连接到无人机52及影像采集设备58的云台522可以不允许影像采集设备58相对于无人机52移动。可选地,所述影像采集设备58可直接搭载在无人机52上而不需要云台。
在某些实施例中,所述可移动终端56可以是手持式的或者穿戴式设备。例如,所述可移动终端56可以包括智能手机、平板电脑、笔记本电脑、计算机、手表、手环、眼镜、头盔或者任何合适的组合。
图6示出了图5中的影像数据处理系统的结构框图。如图6所示,所述影像数据处理系统可以包括数据传输系统,该数据传输系统可以包括天空端的数据传输单元和地面端的数据传输单元,用于将影像数据等数据从天空端传输至地面端。例如,所述无人机52可以包括第一数据传输单元524,所述可移动终端56可以包括第二数据传输单元564,所述影像数据流可以从第一数据传输单元524传输至第二数据传输单元564。例如,所述影像数据流可以通过无线通信链路,例如wifi,传输至所述可移动终端56的第二数据传输单元564。
在该实施例中,无人机与可移动终端直接通过例如wifi的无线通信链路进行通信,无人机上的影像采集设备采集的影像数据可以直接通过wifi传输至可移动终端,而不需要图传系统。应该理解,根据该实施例的影像数据处理系统的组成以及其影像数据处理方法与针对图1-3描述的实施例类似,在此不再赘述。
在本公开的实施例中,在无人机上的存储器(例如SD卡)出现异常状态的情况下,仍然可以使用可移动终端的缓存进行拍摄,从而能够实现计划的拍摄目的。并且,用户可以直接使用可移动终端上的应用程序编辑所拍摄的图像和/或视频,不需要跳转至第三方编辑软件。另外,用户可以直接分享所拍摄的图像和/或视频,实现拍摄、编辑和分享的快速便捷操作。
下面,将结合附图来分别从天空端设备和地面端设备描述根据本公开的实施例的影像数据处理方法。在本公开的实施例中,所述天空端设备可以包括可移动平台,例如无人机;所述地面端设备可以包括终端,例如遥控器和可移动终端,或者遥控终端,或者仅可移动终端。
如图7所示,基于可移动平台,根据本公开的实施例的影像数据处理方法可以包括下面的步骤。
在步骤S702中,检测可移动平台的存储器的状态,以确定所述存储器是否处于异常状态。
在某些实施例中,所述可移动平台可以实时检测其存储器的状态,以确定所述存储器是否处于异常状态。所述异常状态可以包括但不限于:未检测到所述可移动平台装载有所述存储器,或者所述存储器不能使用或已经损坏,或者所述存储器的容量已满。例如,未检测所述可移动平台装载有所述存储器可以包括:所述存储器未装入所述可移动平台中、所述存储器在所述可移动平台中未安装好,例如安装接触不良等等。
在步骤S704中,当确定所述存储器处于异常状态时,发送异常状态指示信号。
在步骤S706中,接收拍摄启动指令。
在步骤S708中,采集影像数据。
在某些实施例中,所述可移动平台的影像采集设备可以包括摄像头和/或相机,用于采集图像和/或视频等影像数据。例如,所述摄像头和/或相机可以采集720p、1080p或4K视频。
在步骤S710中,传输所述影像数据。
在某些实施例中,所述可移动平台通过图传系统或wifi将所述影像采集没备采集的影像数据传输至地面端设备。
在某些实施例中,在传输所述影像数据之前,所述可移动平台可以压缩编码影像采集设备采集的原始影像数据,以生成影像数据流。
如图8所示,基于终端,根据本公开的实施例的影像数据处理方法可以包括下面的步骤。
在步骤S802中,接收异常状态指示信号,所述异常状态指示信号指示可移动平台的存储器处于异常状态。
在某些实施例中,所述异常状态包括:所述可移动平台没有装载所述存储器,所述存储器已经损坏,和/或所述存储器的容量已满。
在步骤S804中,发送拍摄启动指令。
在某些实施例中,可以通过操作所述终端上的按键、按钮或图标,以启动拍摄。在某些实施例中,用户可以通过特定的手势或语音命令来启动拍摄。应理解的是,本公开的实施例不限于上述启动拍摄的方式,用户还可以以任何其它合适的方式来启动拍摄。
在步骤S806中,接收影像数据。
在某些实施例中,所述终端通过图传系统或wifi等无线通信链路从可移动平台接收影像数据。
在某些实施例中,所述可移动终端16还可以启动所述终端的音频模块,以采集环境声音;并且存储所述环境声音于缓存162中。例如,所述音频模块可以包括可移动终端16的麦克风和音频编码器。
在步骤S808中,存储所述影像数据于终端的缓存中。
在某些实施例中,所述可移动平台基于影像采集设备采集的原始影像数据生成影像数据流,所述终端接收所述影像数据流,并将所述影像数据流存储在其缓存中。通过这样的方式,可以在所述可移动平台的存储器(例如SD卡)出现异常的情况下仍实现拍摄。
图9是示出了根据本公开实施例的用于执行图7所示的方法的可移动平台或图8所示的方法的终端的示例硬件布置900的框图。硬件布置900可包括处理器906(例如,中央处理器(CPU)、数字信号处理器(DSP)、微控制器单元(MCU)等)。处理器906可以是用于执行本文描述的流程的不同动作的单一处理单元或者是多个处理单元。布置900还可以包括用于从其他实体接收信号的输入单元902、以及用于向其他实体提供信号的输出单元904。输入单元902和输出单元904可以被布置为单一实体或者是分离的实体。
此外,布置900可以包括具有非易失性或易失性存储器形式的至少一个可读存储介质908,例如是电可擦除可编程只读存储器(EEPROM)、闪存、和/或硬盘驱动器。可读存储介质908包括计算机程序指令910,该计算机程序指令910包括代码/计算机可读指令,其在由布置900中的处理器906执行时使得硬件布置900和/或包括硬件布置900在内的可移动平台可以执行例如上面结合图7所描述的流程及其任何变形。
在某些实施例中,计算机程序指令910可被配置为具有例如计算机程序指令模块910A~910E架构的计算机程序指令代码。因此,在例如可移动平台中使用硬件布置900时的示例实施例中,布置900的计算机程序指令中的代码包括:模块910A,用于检测所述可移动平台的存储器的状态,以确定所述存储器是否处于异常状态。计算机程序指令中的代码还包括:模块910B,用于当确定所述存储器处于异常状态时,发送异常状态指示信号。计算机程序指令中的代码还包括:模块910C,用于接收拍摄启动指令。计算机程序指令中的代码还包括:模块910D,用于采集影像数据。计算机程序指令中的代码还包括:模块910E,用于传输所述影像数据。
在某些实施例中,计算机程序指令910可被配置为具有例如计算机程序指令模块910A~910D架构的计算机程序指令代码。因此,在例如终端中使用硬件布置900时的示例实施例中,布置900的计算机程序指令中的代码包括:模块910A,用于接收异常状态指示信号,所述异常状态指示信号指示可移动平台的存储器处于异常状态。计算机程序指令中的代码还包括:模块910B,用于发送拍摄启动指令。计算机程序指令中的代码还包括:模块910C,用于接收影像数据。计算机程序指令中的代码还包括:模块910D,用于存储所述影像数据于所述终端的缓存中。
尽管上面结合图9所公开的实施例中的代码手段被实现为计算机程序指令模块,其在处理器906中执行时使得硬件布置900执行上面结合图7或8所描述的动作,然而在备选实施例中,该代码手段中的至少一项可以至少被部分地实现为硬件电路。
处理器可以是单个CPU(中央处理单元),但也可以包括两个或更多个处理单元。例如,处理器可以包括通用微处理器、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC))。处理器还可以包括用于缓存用途的板载存储器。计算机程序指令可以由连接到处理器的计算机程序指令产品来承载。计算机程序指令产品可以包括其上存储有计算机程序指令的计算机可读介质。例如,计算机程序指令产品可以是闪存、随机存取存储器(RAM)、只读存储器(ROM)、EEPROM,且上述计算机程序指令模块在备选实施例中可以用UE内的存储器的形式被分布到不同计算机程序指令产品中。
需要注意的是,在本文中被描述为通过纯硬件、纯软件和/或固件来实现的功能,也可以通过专用硬件、通用硬件与软件的结合等方式来实现。例如,被描述为通过专用硬件(例如,现场可编程门阵列(FPGA)、专用集成电路(ASIC)等)来实现的功能,可以由通用硬件(例如,中央处理单元(CPU)、数字信号处理器(DSP))与软件的结合的方式来实现,反之亦然。
尽管已经参照本公开的特定示例性实施例示出并描述了本公开,但是本领域技术人员应该理解,在不背离所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以对本公开进行形式和细节上的多种改变。因此,本公开的范围不应该限于上述实施例,而是应该不仅由所附权利要求来进行确定,还由所附权利要求的等同物来进行限定。

Claims (40)

1.一种基于可移动平台的影像数据处理方法,所述方法包括:
检测所述可移动平台的存储器的状态,以确定所述存储器是否处于异常状态;
当确定所述存储器处于异常状态时,发送异常状态指示信号;
接收拍摄启动指令;
采集影像数据;和
传输所述影像数据。
2.根据权利要求1所述的方法,其特征在于,所述异常状态包括:未检测到装载有所述存储器,所述存储器已经损坏,和/或所述存储器的容量已满。
3.根据权利要求1或2所述的方法,其特征在于,传输所述影像数据包括:通过图传系统或wifi传输所述影像数据。
4.一种基于终端的影像数据处理方法,所述方法包括:
接收异常状态指示信号,所述异常状态指示信号指示与所述终端通信的可移动平台的存储器处于异常状态;
发送拍摄启动指令;
接收影像数据;和
存储所述影像数据。
5.根据权利要求4所述的方法,其特征在于,所述异常状态包括:未检测到装载有所述存储器,所述存储器已经损坏,和/或所述存储器的容量已满。
6.根据权利要求4或5所述的方法,其特征在于,所述方法还包括:
发出提示信息,以指示所述存储器处于所述异常状态,和/或
发出确认信息,以提示用户确认启动缓存模式。
7.根据权利要求4或5所述的方法,其特征在于,所述方法还包括:显示拍摄参数信息,
其中,所述拍摄参数信息包括可拍摄照片的剩余张数和/或可拍摄视频的剩余时长,所述可拍摄照片的剩余张数和可拍摄视频的剩余时长基于所述终端的缓存的剩余容量计算出。
8.根据权利要求4或5所述的方法,其特征在于,所述方法还包括:处理存储的影像数据,
其中,所述处理存储的影像数据包括通过安装在所述终端中的应用程序指令编辑存储的影像数据。
9.根据权利要求4或5所述的方法,其特征在于,
所述存储所述影像数据包括:将所述影像数据保存于缓存中,
所述方法还包括:将保存于所述缓存中的所述影像数据保存到终端的存储单元中。
10.根据权利要求8所述的方法,其特征在于,
所述存储所述影像数据包括:将所述影像数据保存于缓存中,
所述方法还包括:将保存于所述缓存中的经处理的所述影像数据保存到终端的存储单元中。
11.根据权利要求10所述的方法,其特征在于,所述方法还包括:
分享经处理的所述影像数据至第三方平台。
12.根据权利要求11所述的方法,其特征在于,通过操作所述终端上的同一应用程序,执行发送拍摄启动指令、处理存储的影像数据、将保存于所述缓存中的经处理的所述影像数据保存到终端的存储单元中、和分享经处理的所述影像数据至第三方平台中的至少两个。
13.根据权利要求4或5所述的方法,其特征在于,所述方法还包括:
启动所述终端的音频模块,以采集环境声音;和
存储所述环境声音。
14.根据权利要求4或5所述的方法,其特征在于:所述存储所述影像数据包括:存储所述影像数据到终端的缓存中。
15.一种影像数据处理方法,所述方法包括:
检测可移动平台的存储器的状态,以确定所述存储器是否处于异常状态;
当确定所述存储器处于异常状态时,发送异常状态指示信号至终端;
所述终端发送拍摄启动指令;
根据所述拍摄启动指令,所述可移动平台采集影像数据;
所述可移动平台传输所述影像数据至所述终端;和
存储所述影像数据于所述终端中。
16.根据权利要求15所述的方法,其特征在于,所述异常状态包括:未检测到装载有所述存储器,所述存储器已经损坏,和/或所述存储器的容量已满。
17.根据权利要求15或16所述的方法,其特征在于,所述方法还包括:
所述终端发出提示信息,以指示所述存储器处于所述异常状态。
18.根据权利要求15或16所述的方法,其特征在于,所述方法还包括:所述终端显示拍摄参数信息,
其中,所述拍摄参数信息包括可拍摄照片的剩余张数和/或可拍摄视频的剩余时长,所述可拍摄照片的剩余张数和可拍摄视频的剩余时长基于所述终端的缓存的剩余容量计算出。
19.根据权利要求15或16所述的方法,其特征在于,所述方法还包括:所述终端处理存储的影像数据,
其中,所述终端处理存储的影像数据包括通过安装在所述终端中的应用程序指令编辑存储的影像数据。
20.根据权利要求15或16所述的方法,其特征在于,
所述存储所述影像数据于终端中包括:将所述影像数据保存于终端的缓存中,
所述方法还包括:将保存于终端的缓存中的所述影像数据保存到终端的存储单元中。
21.根据权利要求19所述的方法,其特征在于,
所述存储所述影像数据于终端中包括:将所述影像数据保存于终端的缓存中,
所述方法还包括:将保存于终端的缓存中的经处理的所述影像数据保存到终端的存储单元中。
22.根据权利要求21所述的方法,其特征在于,所述方法还包括:
分享经处理的所述影像数据至第三方平台。
23.根据权利要求22所述的方法,其特征在于,通过操作所述终端上的同一应用程序,执行发送拍摄启动指令、处理存储的影像数据、将保存于终端的缓存中的经处理的所述影像数据保存到终端的存储单元中、和分享经处理的所述影像数据至第三方平台中的至少两个。
24.根据权利要求15或16所述的方法,其特征在于,所述方法还包括:
所述终端发出确认信息,以提示用户确认启动缓存模式。
25.根据权利要求15或16所述的方法,其特征在于,所述方法还包括:
启动所述终端的音频模块,以采集环境声音;和
存储所述环境声音于所述终端中。
26.根据权利要求15或16所述的方法,其特征在于:所述存储所述影像数据于终端中包括:存储所述影像数据到终端的缓存中。
27.一种可移动平台,包括:
可读存储介质,用于存储可执行指令;以及
处理器,用于执行可读存储介质中存储的可执行指令,
其特征在于,所述可执行指令在由所述处理器执行时使得所述处理器:
检测所述可移动平台的存储器的状态,以确定所述存储器是否处于异常状态;
当确定所述存储器处于异常状态时,发送异常状态指示信号;
接收拍摄启动指令;
采集影像数据;和
传输所述影像数据。
28.根据权利要求27所述的可移动平台,其特征在于,所述异常状态包括:未检测到装载有所述存储器,所述存储器已经损坏,和/或所述存储器的容量已满。
29.根据权利要求27或28所述的可移动平台,其特征在于,传输所述影像数据包括:通过图传系统或wifi传输所述影像数据。
30.一种终端,包括:
可读存储介质,用于存储可执行指令;以及
处理器,用于执行可读存储介质中存储的可执行指令,
其特征在于,所述可执行指令在由所述处理器执行时使得所述处理器:
接收异常状态指示信号,所述异常状态指示信号指示可移动平台的存储器处于异常状态;
发送拍摄启动指令;
接收影像数据;和
存储所述影像数据。
31.根据权利要求30所述的终端,其特征在于,所述异常状态包括:未检测到装载有所述存储器,所述存储器已经损坏,和/或所述存储器的容量已满。
32.根据权利要求30或31所述的终端,其特征在于,所述可执行指令在由所述处理器执行时还使得所述处理器:
发出提示信息,以指示所述存储器处于所述异常状态,和/或
发出确认信息,以提示用户确认启动缓存模式。
33.根据权利要求30或31所述的终端,其特征在于,所述可执行指令在由所述处理器执行时还使得所述处理器:显示拍摄参数信息,
其中,所述拍摄参数信息包括可拍摄照片的剩余张数和/或可拍摄视频的剩余时长,所述可拍摄照片的剩余张数和可拍摄视频的剩余时长基于所述终端的缓存的剩余容量计算出。
34.根据权利要求30或31所述的终端,其特征在于,所述可执行指令在由所述处理器执行时还使得所述处理器:处理存储的影像数据,
其中,所述处理存储的影像数据包括通过安装在所述终端中的应用程序指令编辑存储的影像数据。
35.根据权利要求30或31所述的终端,其特征在于,所述存储所述影像数据包括:将所述影像数据保存于终端的缓存中,
所述可执行指令在由所述处理器执行时还使得所述处理器:将保存于终端的缓存中的所述影像数据保存到终端的存储单元中。
36.根据权利要求34所述的方法,其特征在于,
所述存储所述影像数据包括:将所述影像数据保存于缓存中,
所述方法还包括:将保存于所述缓存中的经处理的所述影像数据保存到终端的存储单元中。
37.根据权利要求36所述的终端,其特征在于,所述可执行指令在由所述处理器执行时还使得所述处理器:
分享经处理的所述影像数据至第三方平台。
38.根据权利要求37所述的终端,其特征在于,通过操作所述终端上的同一应用程序,执行发送拍摄启动指令、处理存储的影像数据、将保存于所述缓存中的经处理的所述影像数据保存到终端的存储单元中、和分享经处理的所述影像数据至第三方平台中的至少两个。
39.根据权利要求30或31所述的终端,其特征在于,所述可执行指令在由所述处理器执行时还使得所述处理器:
启动所述终端的音频模块,以采集环境声音;和
存储所述环境声音。
40.一种影像数据处理系统,包括:
可移动平台;和
终端,
其特征在于,所述终端为根据权利要求30-39中任一项所述的终端,和/或所述可移动平台为根据权利要求27-29中任一项所述的可移动平台。
CN201780004426.6A 2017-06-30 2017-06-30 影像数据处理方法和影像数据处理系统 Pending CN108513708A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2017/091041 WO2019000371A1 (zh) 2017-06-30 2017-06-30 影像数据处理方法和影像数据处理系统

Publications (1)

Publication Number Publication Date
CN108513708A true CN108513708A (zh) 2018-09-07

Family

ID=63375190

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780004426.6A Pending CN108513708A (zh) 2017-06-30 2017-06-30 影像数据处理方法和影像数据处理系统

Country Status (2)

Country Link
CN (1) CN108513708A (zh)
WO (1) WO2019000371A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114600444A (zh) * 2020-12-31 2022-06-07 深圳市大疆创新科技有限公司 图像的处理方法、装置、个人终端和存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150052253A1 (en) * 2014-09-22 2015-02-19 Weaved, Inc. Multi-server fractional subdomain dns protocol
CN105744222A (zh) * 2016-02-03 2016-07-06 普宙飞行器科技(深圳)有限公司 一种无人机无线图像/视频传输、共享及存储系统
CN106164871A (zh) * 2016-07-08 2016-11-23 深圳市道通智能航空技术有限公司 飞行器航拍数据备份方法、装置、计算机可读存储介质及设备
CN106657907A (zh) * 2016-12-14 2017-05-10 天津温茂科技有限公司 一种电子信息领域多无人机协同跟踪拍摄系统及拍摄方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103950546B (zh) * 2014-04-21 2016-02-24 深圳市大疆创新科技有限公司 无人机及其飞行状态辅助提示方法
KR20160034013A (ko) * 2014-09-19 2016-03-29 한국건설기술연구원 무인 항공기를 이용한 건설현장 관리 시스템 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150052253A1 (en) * 2014-09-22 2015-02-19 Weaved, Inc. Multi-server fractional subdomain dns protocol
CN105744222A (zh) * 2016-02-03 2016-07-06 普宙飞行器科技(深圳)有限公司 一种无人机无线图像/视频传输、共享及存储系统
CN106164871A (zh) * 2016-07-08 2016-11-23 深圳市道通智能航空技术有限公司 飞行器航拍数据备份方法、装置、计算机可读存储介质及设备
CN106657907A (zh) * 2016-12-14 2017-05-10 天津温茂科技有限公司 一种电子信息领域多无人机协同跟踪拍摄系统及拍摄方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114600444A (zh) * 2020-12-31 2022-06-07 深圳市大疆创新科技有限公司 图像的处理方法、装置、个人终端和存储介质
WO2022141401A1 (zh) * 2020-12-31 2022-07-07 深圳市大疆创新科技有限公司 图像的处理方法、装置、个人终端和存储介质

Also Published As

Publication number Publication date
WO2019000371A1 (zh) 2019-01-03

Similar Documents

Publication Publication Date Title
US10936894B2 (en) Systems and methods for processing image data based on region-of-interest (ROI) of a user
US20200236276A1 (en) Method, system, device for video data transmission and photographing apparatus
US20210329177A1 (en) Systems and methods for video processing and display
EP3509296B1 (en) Multiple viewpoint image capturing system, three-dimensional space reconstructing system, and three-dimensional space recognition system
CN107005624B (zh) 处理视频的方法、系统、终端、装置、处理器和存储介质
EP3606038A1 (en) Imaging system and correction method
US20200036944A1 (en) Method and system for video transmission
CN109076194B (zh) 一种视频处理方法、设备、飞行器、系统及存储介质
KR20180027361A (ko) 증강 현실 장면을 재생할 때 자동 줌을 위한 방법들, 디바이스들, 및 시스템들
CA2927046A1 (en) Method and system for 360 degree head-mounted display monitoring between software program modules using video or image texture sharing
CN107071389A (zh) 航拍方法、装置和无人机
CN105340279A (zh) 用于近眼显示器的显示更新时间缩减
WO2018103034A1 (zh) 用于传输图像的方法、设备和无人机
US20200126286A1 (en) Method and device for image transmission, movable platform, monitoring device, and system
CN105847682A (zh) 全景图像的拍摄方法、装置及系统
US20200366962A1 (en) Bitstream merger and extractor
CN112997506A (zh) 视频文件编辑方法、设备、系统及计算机可读存储介质
CN110720209B (zh) 一种图像处理方法及设备
JP2018070010A (ja) 無人航空機制御システム、その制御方法、及びプログラム
JP6921031B2 (ja) 制御装置及び撮影方法
CN108513708A (zh) 影像数据处理方法和影像数据处理系统
JP6555226B2 (ja) 無人航空機制御システム、その制御方法、及びプログラム
CN110291776B (zh) 飞行控制方法及飞行器
WO2022061934A1 (zh) 图像处理方法、装置、系统、平台及计算机可读存储介质
CN114556958A (zh) 视频传输方法及系统、视频处理方法及装置、播放终端、可移动平台

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20180907