CN109327698B - 动态预览图的生成方法、系统、介质和电子设备 - Google Patents

Abstract

本发明的实施方式提供了一种动态预览图的生成方法，包括获得视频数据，所述视频数据包括多个视频帧，压缩所述视频数据中的所述多个视频帧中的部分或全部视频帧，得到与所述多个视频帧中的部分或全部视频帧分别对应的多个预览图像，根据所述预览图像的帧序列信息将所述预览图像封装为动态预览图。该方法基于压缩后的预览图像以及帧序列信息生成动态预览图，能够有效降低系统消耗，提高预览速度，解决了现有技术中动态图编辑过程中预览效率低的问题。此外，本发明的实施方式提供了一种动态预览图的生成系统、一种计算机可读存储介质以及一种电子设备。

Description

动态预览图的生成方法、系统、介质和电子设备

技术领域

本发明的实施方式涉及图像处理领域，更具体地，本发明的实施方式涉及一种动态预览图的生成方法、系统、介质和电子设备。

背景技术

本部分旨在为权利要求书中陈述的本发明的实施方式提供背景或上下文。此处的描述不因为包括在本部分中就承认是现有技术。

现有终端产品获得视频编辑动态预览图的方法通常是使用终端产品中自带播放器，通过定位到视频文件指定的时间点开始解码并播放。每次做定位操作时，视频解码器都需要重复从离指定时间点之前最近的关键帧开始解码，解码到指定时间点之后将图像数据进行播放。

发明内容

但是，视频编辑是一个反复迭代过程，操作者需要反复修改并预览当前被编辑的视频，上述操作在一次视频编辑中会被执行多次，每次定位操作都需要反复从某一关键帧处开始解码这一方法会过多消耗大量的处理器 (即CPU)资源，增加耗电量。并且会降低预览流畅度，导致预览效率低，影响用户体验。

为此，非常需要一种改进的动态预览图的生成方法，以克服过多消耗大量处理器资源的问题。

在本上下文中，本发明的实施方式期望提供一种动态预览图的生成方法，基于压缩后的预览图像以及帧序列信息生成动态预览图，能够有效降低系统消耗，提高预览速度。

在本发明实施方式的第一方面中，提供了一种动态预览图的生成方法，包括获得视频数据，所述视频数据包括多个视频帧，压缩所述视频数据中的所述多个视频帧中的部分或全部视频帧，得到与所述多个视频帧中的部分或全部视频帧分别对应的多个预览图像，根据所述预览图像的帧序列信息将所述预览图像封装为动态预览图。

在本发明的一个实施例中，在所述压缩所述视频数据中的视频帧之前，所述方法还包括，通过开放图形库OpenGL创建帧缓冲区，将所述多个视频帧发送至所述帧缓冲区。

在本发明的另一实施例中，所述压缩所述视频数据中的所述多个视频帧中的部分或全部视频帧，得到与所述多个视频帧中的部分或全部视频帧分别对应的多个预览图像包括，在所述帧缓冲区中分别绘制所述视频数据中的所述多个视频帧中的部分或全部视频帧，得到第一图，将所述第一图降采样得到第二图，将所述第二图编码为图像显示格式，得到所述多个预览图像。

在本发明的又一个实施例中，所述将所述第一图降采样得到第二图包括，通过GPU将所述第一图降采样得到第二图。

在本发明的又一个实施例中，所述将所述第二图编码为图像格式，获得所述多个预览图像包括，通过GPU将所述第二图编码为图像显示格式，得到所述多个预览图像，或者，通过CPU将所述第二图编码为图像显示格式，得到所述多个预览图像。

在本发明的又一个实施例中，在根据所述预览图像的帧序列信息将所述预览图像封装为动态预览图之前，所述方法还包括，响应于用户输入，确定第一视频帧集合，以及确定与所述第一视频帧集合对应的第一预览图像集合，所述根据所述预览图像的帧序列信息将所述预览图像封装为动态预览图包括，向所述第一预览图像集合中的每一个第一预览图像添加帧序列信息，将所述第一预览图像集合中的全部第一预览图像封装为动态预览图。

在本发明的又一个实施例中，在所述获得视频数据之后，所述方法还包括：响应于用户输入，确定第二视频帧集合，所述压缩所述视频数据中的所述多个视频帧中的部分或全部视频帧，得到与所述多个视频帧中的部分或全部视频帧分别对应的多个预览图像包括，在不存在与所述第二视频帧集合中的至少一个第二视频帧对应的第二预览图像的情况下，压缩所述至少一个第二视频帧，获得与所述至少一个第二视频帧对应的所述至少一个第二预览图像，所述根据所述预览图像的帧序列信息将所述预览图像封装为动态预览图包括，向所述第二预览图像添加帧序列信息，将所述第二预览图像封装为动态预览图。

在本发明的又一个实施例中，所述根据所述预览图像的帧序列信息将所述预览图像封装为动态预览图包括，向所述预览图像添加时间正向帧序列信息，将所述预览图像封装为正序的动态预览图，或者，向所述预览图像添加时间反向帧序列信息，将所述预览图像封装为倒序的动态预览图。

在本发明的再一个实施例中，在所述根据所述预览图像的帧序列信息将所述预览图像封装为所述动态预览图之前，所述方法还包括以下至少一种，添加显示帧率信息，以及/或者，添加全局参数，使预览可被重复执行。

在本发明实施方式的第二方面中，提供了一种动态预览图的生成系统，包括获得模块、压缩模块以及封装模块。获得模块，用于获得视频数据，所述视频数据包括多个视频帧。压缩模块，用于压缩所述视频数据中的所述多个视频帧中的部分或全部视频帧，得到与所述多个视频帧中的部分或全部视频帧分别对应的多个预览图像。封装模块，用于根据所述预览图像的帧序列信息将所述预览图像封装为动态预览图。

在本发明的一个实施例中，所述系统还包括创建模块和发送模块。创建模块，用于通过开放图形库OpenGL创建帧缓冲区。发送模块，用于将所述多个视频帧发送至所述帧缓冲区。

在本发明的另一个实施例中，所述压缩模块包括绘制子模块、降采样子模块以及编码子模块。绘制子模块，用于在所述帧缓冲区中分别绘制所述视频数据中的所述多个视频帧中的部分或全部视频帧，得到第一图。降采样子模块，用于将所述第一图降采样得到第二图。编码子模块，用于将所述第二图编码为图像显示格式，得到所述多个预览图像。

在本发明的又一个实施例中，所述降采样子模块用于通过GPU将所述第一图降采样得到第二图。

在本发明的又一个实施例中，所述编码子模块用于通过GPU将所述第二图编码为图像显示格式，得到所述多个预览图像，或者，通过CPU将所述第二图编码为图像显示格式，得到所述多个预览图像。

在本发明的又一个实施例中，所述系统还包括第一确定模块和第二确定模块。第一确定模块，用于响应于用户输入，确定第一视频帧集合。第二确定模块，用于确定与所述第一视频帧集合对应的第一预览图像集合。其中，所述封装模块用于向所述第一预览图像集合中的每一个第一预览图像添加帧序列信息，将所述第一预览图像集合中的全部第一预览图像封装为动态预览图。

在本发明的又一个实施例中，所述系统还包括第三确定模块，用于响应于用户输入，确定第二视频帧集合。所述压缩模块用于在不存在与所述第二视频帧集合中的至少一个第二视频帧对应的第二预览图像的情况下，压缩所述至少一个第二视频帧，获得与所述至少一个第二视频帧对应的所述至少一个第二预览图像。所述封装模块用于向所述第二预览图像添加帧序列信息，将所述第二预览图像封装为动态预览图。

在本发明的又一个实施例中，所述封装模块用于向所述预览图像添加时间正向帧序列信息，将所述预览图像封装为正序的动态预览图，或者，向所述预览图像添加时间反向帧序列信息，将所述预览图像封装为倒序的动态预览图。

在本发明的再一个实施例中，所述系统还包括第一添加模块或者第二添加模块中的至少一种。第一添加模块，用于添加显示帧率信息。第二添加模块，用于添加全局参数，使预览可被重复执行。

在本发明实施方式的第三方面中，提供了一种介质，其上存储有可执行指令，所述指令被处理单元执行时使所述处理单元执行上述任一项所述的方法。

在本发明实施方式的第四方面中，提供了一种电子设备，包括，处理单元，以及存储单元，其上存储有可执行指令，所述指令被所述处理单元执行时使所述处理单元执行如上所述的方法。

根据本发明实施方式的动态预览图的生成方法、系统以及电子设备，基于压缩后的预览图像以及帧序列信息生成动态预览图，能够有效降低系统消耗，提高预览速度，解决了现有技术中动态图编辑过程中预览效率低的问题。

附图说明

通过参考附图阅读下文的详细描述，本发明示例性实施方式的上述以及其他目的、特征和优点将变得易于理解。在附图中，以示例性而非限制性的方式示出了本发明的若干实施方式，其中：

图1示意性地示出了根据本发明实施方式的编辑视频数据制作动态图的示意图；

图2示意性地示出了根据本发明示例性实施例的动态预览图的生成方法的流程图一；

图3示意性地示出了根据本发明示例性实施例的动态预览图的生成方法的流程图二；

图4示意性地示出了根据本发明示例性实施例的压缩视频帧得到预览图像的流程图；

图5示意性地示出了根据本发明示例性实施例的动态预览图的生成方法的流程图三；

图6示意性地示出了根据本发明示例性实施例的动态预览图的生成方法的流程图四；

图7示意性地示出了根据本发明示例性实施例的动态预览图的生成系统的框图一；

图8示意性地示出了根据本发明示例性实施例的动态预览图的生成系统的框图二；

图9示意性地示出了根据本发明示例性实施例的压缩模块的框图；

图10示意性地示出了根据本发明示例性实施例的动态预览图的生成系统的框图三；

图11示意性地示出了根据本发明示例性实施例的动态预览图的生成系统的框图四；

图12示意性地示出了根据本发明示例性实施例的计算机可读存储介质的示意图；以及

图13示意性地示出了根据本发明示例性实施例的电子设备的方框图。

在附图中，相同或对应的标号表示相同或对应的部分。

具体实施方式

下面将参考若干示例性实施方式来描述本发明的原理和精神。应当理解，给出这些实施方式仅仅是为了使本领域技术人员能够更好地理解进而实现本发明，而并非以任何方式限制本发明的范围。相反，提供这些实施方式是为了使本公开更加透彻和完整，并且能够将本公开的范围完整地传达给本领域的技术人员。

本领域技术人员知道，本发明的实施方式可以实现为一种系统、装置、设备、方法或计算机程序产品。因此，本公开可以具体实现为以下形式，即：完全的硬件、完全的软件(包括固件、驻留软件、微代码等)，或者硬件和软件结合的形式。

根据本发明的实施方式，提出了一种动态预览图的生成方法、系统、介质和电子设备。

此外，附图中的任何元素数量均用于示例而非限制，以及任何命名都仅用于区分，而不具有任何限制含义。

下面参考本发明的若干代表性实施方式，详细阐释本发明的原理和精神。

发明概述

请参考图1，图1示意性地示出了根据本发明实施方式的编辑视频数据制作动态图的示意图。

如图1所示，用户在编辑视频数据制作动态图时，对拍摄的原始视频剪辑，重排序，拼接，调整颜色和亮度，对比度等操作，使视频达到编辑者满意的效果。例如，用户通常需要反复调整用于制作动态图的视频帧的起始位置101和终止位置102。手机app现有获得视频编辑动态预览图通常使用系统自带播放器，通过定位到指定的时间点开始循环播放。每次做定位操作时，视频解码器会从离指定时间点之前最近的关键帧开始解码，解码到指定时间点之后将图像数据显示。

视频编码是指对连续图像的编码，通过消除连续图像之间的时域冗余信息和图像内部的空间冗余信息来压缩视频。视频解码是将压缩后的数据恢复为原始的连续图像，是编码的反过程。

本发明人发现，视频编辑是一个反复迭代过程，操作者会反复修改并预览当前被编辑的视频，上述操作在一次视频编辑中会被操作多次，每次定位操作从关键帧开始的解码会消耗过多的CPU资源，增加耗电量，降低预览流畅度，导致预览效率低，影响用户体验。为了解决这一问题，本发明示例性实施例提供了一种动态预览图的生成方法，基于压缩后的预览图像以及帧序列信息生成动态预览图，能够有效降低系统消耗，提高预览速度，解决了现有技术中动态图编辑过程中预览效率低的问题。

在介绍了本发明的基本原理之后，下面具体介绍本发明的各种非限制性实施方式。

示例性方法

下面结合图1的应用场景，参考图2～图6描述根据本发明示例性实施方式的动态预览图的生成方法。

图2示意性地示出了根据本发明示例性实施例的动态预览图的生成方法的流程图一。

如图2所示，该方法包括步骤S210～S230。

在步骤S210，获得视频数据，该视频数据包括多个视频帧。

在步骤S220，压缩该视频数据中的多个视频帧中的部分或全部视频帧，得到与多个视频帧中的部分或全部视频帧分别对应的多个预览图像。需要注意的是，本发明实施例中，视频数据中存在多个视频帧，既可以将全部的该多个视频帧进行压缩处理，得到与全部视频帧中每一视频帧分别一一对应的多个预览图像；也可以选取该多个视频帧中的部分视频帧进行压缩处理，得到与该部分视频帧中的每一视频帧分别一一对应的多个预览图像。另外，视频数据通常是经过编码的数据，因此，本发明示例性实施例的方法在压缩之前，需要对视频数据解码。

在步骤S230，根据预览图像的帧序列信息将该预览图像封装为动态预览图。该帧序列信息例如可以为每一预览图像分配顺序编号，用于在封装为动态预览图后，可以按照该顺序编号依次播放各个预览图像，形成动态预览图的效果。

根据本发明示例性实施例，在步骤S230，根据预览图像的帧序列信息将该预览图像封装为动态预览图包括，向预览图像添加时间正向帧序列信息，将该预览图像封装为正序的动态预览图，以使动态图按照时间正序播放。或者，向预览图像添加时间反向帧序列信息，将该预览图像封装为倒序的动态预览图，以使动态图按照时间顺序倒序播放。例如，在一个人从墙上跳下的视频数据的处理中，在获得预览图像后，可以按照正向的时间顺序添加帧序列信息，得到人从墙上跳下的动态预览图，也可以按照反向的时间顺序添加帧序列信息，得到人跳到墙上的视觉效果的动态预览图。

根据本发明示例性实施例，在根据预览图像的帧序列信息将该预览图像封装为动态预览图之前，还包括以下至少一种，添加显示帧率信息，以确定动态图播放的速度，以及/或者，添加全局参数，使预览可被重复执行。本发明实施例以webp格式的图像为例，在根据视频文件中的多个视频帧得到多个静态的webp图像后，在每一帧webp图像文件的首部添加ANMF数据作为显示帧率信息。进一步可以根据该ANMF数据计算出每一帧webp 图像的显示时间，从而可以灵活设置动态预览图的显示速率。根据本发明示例性实施例，在封装之前，还可以在动态webp图像文件的首部添加ANIM 数据作为全局参数，根据该ANIM数据，当动态预览图播放到最后一帧预览图像时，可以返回第一帧预览图像继续播放，使预览可被重复执行，实现循环播放的效果。

图3示意性地示出了根据本发明示例性实施例的动态预览图的生成方法的流程图二。

如图3所示，该方法在前述实施例的基础上，还包括步骤S310～S320。

在步骤S310，通过开放图形库OpenGL创建帧缓冲区。

在步骤S320，将多个视频帧发送至该帧缓冲区。

开放图形库OpenGL全称为Open Graphics Library，主要用于提供一组统一的，平台无关的图形处理接口，通常由智能设备的GPU负责实现。图形处理器GPU全称为GraphicsProcessing Unit，是智能设备中有别于CPU 的专门负责处理图形图像的运算单元，特点是拥有大量并行运算器，可以快速对图形图像进行处理。

根据本发明示例性实施例，可以使用OpenGL创建帧缓冲区 frameBuffer，绑定该缓存为绘图目标，以用于压缩视频帧。在创建帧缓冲区的过程中，可以设置目标图像尺寸，在将视频帧发送至该帧缓冲区时，可以通过目标图像尺寸限定视频帧的尺寸，从而可灵活地设置分辨率。本发明示例性实施例的方法还可以为帧缓冲区设置纹理信息，方便地实现了对图像内容的编辑。

下面参照图4对本公开实施例的压缩视频帧得到预览图像过程进行说明。

图4示意性地示出了根据本发明示例性实施例的压缩视频帧得到预览图像的流程图。

如图4所示，该方法包括步骤S410～S430。

在步骤S410，在帧缓冲区中分别绘制视频数据中的多个视频帧中的部分或全部视频帧，得到第一图。可以基于待绘制的视频帧中的数据，确定各个像素的值，并依据该些像素的值在帧缓冲区绘制第一图。

在步骤S420，将第一图降采样得到第二图。例如，对于一张像素尺寸为m×n的图，可以在长度方向和宽度方向分别每隔k个像素采集一个像素 (m、n、k为自然数)，最终得到的第二图的像素数量少于第一图的像素数量，实现了对第一图的压缩。

根据本发明示例性实施例，将第一图降采样得到第二图包括通过GPU 将第一图降采样得到第二图。本发明示例性实施例的方法通过使用OpenGL 接口并利用GPU的运算能力实现图像快速降采样。通过GPU运算，可以降低系统功耗，提高操作体验。

在步骤S430，将第二图编码为图像显示格式，得到多个预览图像。

Webp是一种同时提供了有损压缩与无损压缩(可逆压缩)的图片文件格式，同时支持静态图和动态图(Animator webp)，具备优良的压缩效率和质量。本发明示例性实施例的方法可以使用编码技术将视频帧压缩为 Webp预览图像，并通过添加帧序列信息封装生成指定时间点的动态预览图，实现视频编辑时的动态效果预览。当然，在一些实施例中，也可采用 JPG或PNG等图像格式。

根据本发明示例性实施例，将第二图编码为图像格式，获得多个预览图像包括，通过GPU将第二图编码为图像显示格式，得到多个预览图像，或者，通过CPU将第二图编码为图像显示格式，得到多个预览图像。

根据本发明示例性实施例，可以通过GPU将第二图编码为图像显示格式，以充分利用GPU的性能并降低CPU的消耗，在一些诸如因兼容性不支持的场景下，本发明示例性实施例的方法也可采用CPU将第二图编码为图像显示格式，以提高兼容性。

图5示意性地示出了根据本发明示例性实施例的动态预览图的生成方法的流程图三。

如图5所示，该方法在前述实施例的基础上，还包括步骤S510和S520。

在步骤S510，响应于用户输入，确定第一视频帧集合。例如，可以允许用户输入表示时间的数字，或者在触控屏上拖动以选择时间点，以确定至少一时间区间，将该时间区间内的视频帧作为第一视频帧集合。

在步骤S520，确定与该第一视频帧集合对应的第一预览图像集合。根据本发明示例性实施例，可以设置一缓存库，其中缓存有与多个视频帧对应的预览图像。可选地，该缓存库中可以缓存有与全部视频帧一一对应的预览图像，该些预览图像可以是经步骤S220获得的。当确定第一视频帧集合后，可以从该缓存库中确定与该第一视频帧集合对应的第一预览图像集合。

在本发明示例性实施例中，步骤S230具体可以实现为步骤S530，向第一预览图像集合中的每一个第一预览图像添加帧序列信息，将第一预览图像集合中的全部第一预览图像封装为动态预览图。

根据本发明示例性实施例，可以在获得用户输入前，将待处理视频数据中的全部或部分视频帧进行缓存。当确定用户需要使用指定的部分视频帧时，从缓存中获得该些经处理的第一预览图像。在用户反复修改的过程中，不必每次重新执行解码压缩等操作，提高处理效率。

图6示意性地示出了根据本发明示例性实施例的动态预览图的生成方法的流程图四。

如图6所示，该方法在前述实施例的基础上，还包括步骤S610。

在步骤S610，响应于用户输入，确定第二视频帧集合。该步骤类似于操作S510，此处不再赘述。

在本发明示例性实施例中，步骤S220具体可以实现为步骤S620，在不存在与该第二视频帧集合中的至少一个第二视频帧对应的第二预览图像的情况下，压缩该至少一个第二视频帧，获得与该至少一个第二视频帧对应的至少一个第二预览图像。步骤S230具体可以实现为步骤S630，向第二预览图像添加帧序列信息，将该第二预览图像封装为动态预览图。

根据本发明示例性实施例，可以初始化一个空的缓存库。在确定第二视频帧集合后，需要分别获得与第二视频帧对应的第二预览图像，对于每一个第二视频帧，可以首先判断该缓存库中是否存在与该第二视频帧对应的第二预览图像，如果存在，则直接获得该第二预览图像，无需重复解码压缩；如果不存在，则通过上文描述的步骤S220的方法压缩该第二视频帧，获得第二预览图像，在获得第二预览图像后，可以将该第二预览图像缓存到缓存库中，以备再次使用。

如图5或图6所示意的实施例，通过对已经解码并压缩的视频帧进行存储(例如缓存)，再次用到该视频帧时直接从存储空间中调用该视频帧，避免传统方法每一次预览动态图(查看动态预览图)都需要重复解码从前一个关键帧开始的视频数据，提高处理效率。

本发明示例性实施例的方法在浏览器内核支持的情况下，动态Webp 图像作为动态预览图可以直接分享显示。

本发明示例性实施例的方法利用图像编码技术将图像压缩，降低系统资源消耗，提高预览质量。

示例性系统

在介绍了本发明示例性实施方式的方法之后，接下来，参考图7对本发明示例性实施方式的动态预览图的生成系统700进行说明。

图7示意性地示出了根据本发明示例性实施例的动态预览图的生成系统700的框图一。

如图7所示，该动态预览图的生成系统包括获得模块710、压缩模块 720以及封装模块730。

获得模块710，例如执行上文参考图2描述的操作S210，用于获得视频数据，该视频数据包括多个视频帧。

压缩模块720，例如执行上文参考图2描述的操作S220，用于压缩视频数据中的多个视频帧中的部分或全部视频帧，得到与该多个视频帧中的部分或全部视频帧分别对应的多个预览图像。

封装模块730，例如执行上文参考图2描述的操作S230，用于根据该预览图像的帧序列信息将该预览图像封装为动态预览图。

图8示意性地示出了根据本发明示例性实施例的动态预览图的生成系统800的框图二。

如图8所示，该动态预览图的生成系统800在图7所示意的实施例的基础上，还包括创建模块810和发送模块820。

创建模块810，例如执行上文参考图3描述的操作S310，用于通过开放图形库OpenGL创建帧缓冲区。

发送模块820，例如执行上文参考图3描述的操作S320，用于将该多个视频帧发送至该帧缓冲区。

图9示意性地示出了根据本发明示例性实施例的压缩模块720的框图。

如图9所示，该压缩模块720包括绘制子模块910、降采样子模块 920以及编码子模块930。

绘制子模块910，例如执行上文参考图4描述的操作S410，用于在该帧缓冲区中分别绘制该视频数据中的该多个视频帧中的部分或全部视频帧，得到第一图。

降采样子模块920，例如执行上文参考图4描述的操作S420，用于将该第一图降采样得到第二图。

编码子模块930，例如执行上文参考图4描述的操作S430，用于将该第二图编码为图像显示格式，得到该多个预览图像。

根据本发明示例性实施例，该降采样子模块用于通过GPU将该第一图降采样得到第二图。

根据本发明示例性实施例，该编码子模块用于通过GPU将该第二图编码为图像显示格式，得到该多个预览图像，或者，通过CPU将该第二图编码为图像显示格式，得到该多个预览图像。

图10示意性地示出了根据本发明示例性实施例的动态预览图的生成系统1000的框图三。

如图10所示，该动态预览图的生成系统1000在前述实施例的基础上，还包括第一确定模块1010和第二确定模块1020。

第一确定模块1010，例如执行上文参考图5描述的操作S510，用于响应于用户输入，确定第一视频帧集合。

第二确定模块1020，例如执行上文参考图5描述的操作S520，用于确定与该第一视频帧集合对应的第一预览图像集合。

其中，该封装模块730用于向该第一预览图像集合中的每一个第一预览图像添加帧序列信息，将该第一预览图像集合中的全部第一预览图像封装为动态预览图。

图11示意性地示出了根据本发明示例性实施例的动态预览图的生成系统1100的框图四。

如图11所示，该动态预览图的生成系统1100在前述实施例的基础上，还包括第三确定模块1110，例如执行上文参考图6描述的操作S610，用于响应于用户输入，确定第二视频帧集合。根据本发明示例性实施例，该压缩模块720用于在不存在与该第二视频帧集合中的至少一个第二视频帧对应的第二预览图像的情况下，压缩该至少一个第二视频帧，获得与该至少一个第二视频帧对应的该至少一个第二预览图像。该封装模块730用于向该第二预览图像添加帧序列信息，将该第二预览图像封装为动态预览图。

根据本发明示例性实施例，该封装模块730用于向该预览图像添加时间正向帧序列信息，将该预览图像封装为正序的动态预览图，或者，向该预览图像添加时间反向帧序列信息，将该预览图像封装为倒序的动态预览图。

根据本发明示例性实施例，该系统还包括第一添加模块或者第二添加模块中的至少一种。第一添加模块，用于添加显示帧率信息。第二添加模块，用于添加全局参数，使预览可被重复执行。

根据本发明示例性实施例的模块、子模块、单元、子单元中的任意多个、或其中任意多个的至少部分功能可以在一个模块中实现。根据本发明示例性实施例的模块、子模块、单元、子单元中的任意一个或多个可以被拆分成多个模块来实现。根据本发明示例性实施例的模块、子模块、单元、子单元中的任意一个或多个可以至少被部分地实现为硬件电路，例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC)，或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实现，或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者，根据本发明示例性实施例的模块、子模块、单元、子单元中的一个或多个可以至少被部分地实现为计算机程序模块，当该计算机程序模块被运行时，可以执行相应的功能。

例如，获得模块710、压缩模块720、封装模块730、创建模块810 和发送模块820、绘制子模块910、降采样子模块920、编码子模块930、第一确定模块1010、第二确定模块1020、第三确定模块1110、第一添加模块以及第二添加模块中的任意多个可以合并在一个模块中实现，或者其中的任意一个模块可以被拆分成多个模块。或者，这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合，并在一个模块中实现。根据本公开的实施例，获得模块710、压缩模块720、封装模块 730、创建模块810和发送模块820、绘制子模块910、降采样子模块920、编码子模块930、第一确定模块1010、第二确定模块1020、第三确定模块 1110、第一添加模块以及第二添加模块中的至少一个可以至少被部分地实现为硬件电路，例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC)，或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现，或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者，获得模块710、压缩模块720、封装模块730、创建模块810和发送模块820、绘制子模块910、降采样子模块920、编码子模块930、第一确定模块1010、第二确定模块1020、第三确定模块1110、第一添加模块以及第二添加模块中的至少一个可以至少被部分地实现为计算机程序模块，当该计算机程序模块被运行时，可以执行相应的功能。

示例性介质

在介绍了本发明示例性实施方式的系统之后，接下来，参考图12对本发明示例性实施方式的一种计算机可读存储介质进行说明。本发明示例性实施方式提供了一种计算机可读存储介质，其上存储有可执行指令，该指令被处理单元执行时使该处理单元执行上文该的方法。

在一些可能的实施方式中，本发明的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当该程序产品在电子设备上运行时，该程序代码用于使该电子设备执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的动态预览图的生成方法中的步骤，例如，该电子设备可以执行如图2中所示的步骤S210：获得视频数据，该视频数据包括多个视频帧；步骤S220：压缩该视频数据中的该多个视频帧中的部分或全部视频帧，得到与该多个视频帧中的部分或全部视频帧分别对应的多个预览图像；步骤S230：根据该预览图像的帧序列信息将该预览图像封装为动态预览图。

该程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。

如图12所示，描述了根据本发明的实施方式的动态预览图的生成的程序产品1200，其可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在电子设备，例如个人电脑上运行。然而，本发明的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括——但不限于——电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于——无线、有线、光缆，RF等等，或者上述的任意合适的组合。可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码，该程序设计语言包括面向对象的程序设计语言——诸如Java， C++等，还包括常规的过程式程序设计语言——诸如“C”，语言或类似的程序设计语言。程序代码可以完全地在用户电子设备上执行、部分在用户电子设备上部分在远程电子设备上执行、或者完全在远程电子设备或服务器上执行。在涉及远程电子设备的情形中，远程电子设备可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)一连接到用户电子设备，或者，可以连接到外部电子设备(例如利用因特网服务提供商来通过因特网连接)。

示例性电子设备

在介绍了本发明示例性实施方式的方法、系统和介质之后，接下来，参考图13对本发明示例性实施方式的动态预览图的生成电子设备进行说明。

本发明实施例还提供了一种动态预览图的生成电子设备。所属技术领域的技术人员能够理解，本发明的各个方面可以实现为系统、方法或程序产品。因此，本发明的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“系统”。

在一些可能的实施方式中，根据本发明的动态预览图的生成的电子设备可以至少包括至少一个处理单元、以及至少一个存储单元。其中，该存储单元存储有程序代码，当该程序代码被该处理单元执行时，使得该处理单元执行本说明书上述“示例性方法”部分中描述的根据本发明各种示例性实施方式的动态预览图的生成方法中的步骤。例如，该处理单元可以执行如图2中所示的步骤S210：获得视频数据，该视频数据包括多个视频帧；步骤S220：压缩该视频数据中的该多个视频帧中的部分或全部视频帧，得到与该多个视频帧中的部分或全部视频帧分别对应的多个预览图像；步骤S230：根据该预览图像的帧序列信息将该预览图像封装为动态预览图。

下面参照图13来描述根据本发明的这种实施方式的动态预览图的生成电子设备1300。如图13所示的电子设备1300仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图13所示，电子设备1300以通用电子设备的形式表现。电子设备1300的组件可以包括但不限于：上述至少一个处理单元1310、上述至少一个存储单元1320、连接不同系统组件(包括存储单元1320和处理单元 1310)的总线1330。

总线1330包括数据总线、地址总线和控制总线。

存储单元1320可以包括易失性存储器，例如随机存取存储器(RAM) 1321和/或高速缓存存储器1322，还可以进一步包括只读存储器(ROM) 1323。

存储单元1320还可以包括具有一组(至少一个)程序模块1324的程序/实用工具1325，这样的程序模块1324包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。

电子设备1300也可以与一个或多个外部设备1340(例如键盘、指向设备、蓝牙设备等)通信，这种通信可以通过输入/输出(I/O)接口1350 进行。并且，电子设备1300还可以通过网络适配器1360与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网) 通信。如图所示，网络适配器1360通过总线1330与电子设备1300的其它模块通信。应当明白，尽管图中未示出，可以结合电子设备1300使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。

应当注意，尽管在上文详细描述中提及了动态预览图的生成系统的若干单元/模块或子单元/模块，但是这种划分仅仅是示例性的并非强制性的。实际上，根据本发明的实施方式，上文描述的两个或更多单元/模块的特征和功能可以在一个单元/模块中具体化。反之，上文描述的一个单元/ 模块的特征和功能可以进一步划分为由多个单元/模块来具体化。

此外，尽管在附图中以特定顺序描述了本发明方法的操作，但是，这并非要求或者暗示必须按照该特定顺序来执行这些操作，或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地，可以省略某些步骤，将多个步骤合并为一个步骤执行，和/或将一个步骤分解为多个步骤执行。

虽然已经参考若干具体实施方式描述了本发明的精神和原理，但是应该理解，本发明并不限于所公开的具体实施方式，对各方面的划分也不意味着这些方面中的特征不能组合以进行受益，这种划分仅是为了表述的方便。本发明旨在涵盖所附权利要求的精神和范围内所包括的各种修改和等同布置。

Claims (12)

1.一种动态预览图的生成方法，包括：

获得视频数据，所述视频数据包括多个视频帧；

压缩所述视频数据中的所述多个视频帧中的部分或全部视频帧，得到与所述多个视频帧中的部分或全部视频帧分别对应的多个预览图像；

根据所述预览图像的帧序列信息将所述预览图像封装为动态预览图；

其中，所述压缩所述视频数据中的视频帧之前，所述方法还包括：

通过开放图形库OpenGL创建帧缓冲区，并绑定所述帧缓冲区为绘图目标以用于压缩视频帧；在创建所述帧缓冲区的过程中设置目标图像尺寸，其中，所述目标图像尺寸用于限定发送至所述帧缓冲区中的视频帧尺寸；以及为所述帧缓冲区设置纹理信息，以实现对图像内容的编辑；

将所述多个视频帧发送至所述帧缓冲区；

其中，所述压缩所述视频数据中的所述多个视频帧中的部分或全部视频帧，得到与所述多个视频帧中的部分或全部视频帧分别对应的多个预览图像包括：

在所述帧缓冲区中分别绘制所述视频数据中的所述多个视频帧中的部分或全部视频帧，得到第一图；

通过GPU将所述第一图降采样得到第二图；

将所述第二图编码为图像显示格式，得到所述多个预览图像；

其中，所述根据所述预览图像的帧序列信息将所述预览图像封装为动态预览图包括：

向所述预览图像添加时间正向帧序列信息，将所述预览图像封装为正序的动态预览图；或者，

向所述预览图像添加时间反向帧序列信息，将所述预览图像封装为倒序的动态预览图。

2.根据权利要求1所述的方法，其中，所述将所述第二图编码为图像格式，获得所述多个预览图像包括：

通过GPU将所述第二图编码为图像显示格式，得到所述多个预览图像；或者，

通过CPU将所述第二图编码为图像显示格式，得到所述多个预览图像。

3.根据权利要求1所述的方法，其中：

在根据所述预览图像的帧序列信息将所述预览图像封装为动态预览图之前，所述方法还包括：响应于用户输入，确定第一视频帧集合，以及确定与所述第一视频帧集合对应的第一预览图像集合；

所述根据所述预览图像的帧序列信息将所述预览图像封装为动态预览图包括：向所述第一预览图像集合中的每一个第一预览图像添加帧序列信息，将所述第一预览图像集合中的全部第一预览图像封装为动态预览图。

4.根据权利要求1所述的方法，其中，

在所述获得视频数据之后，所述方法还包括：响应于用户输入，确定第二视频帧集合；

所述压缩所述视频数据中的所述多个视频帧中的部分或全部视频帧，得到与所述多个视频帧中的部分或全部视频帧分别对应的多个预览图像包括：在不存在与所述第二视频帧集合中的至少一个第二视频帧对应的第二预览图像的情况下，压缩所述至少一个第二视频帧，获得与所述至少一个第二视频帧对应的所述至少一个第二预览图像；

所述根据所述预览图像的帧序列信息将所述预览图像封装为动态预览图包括：向所述第二预览图像添加帧序列信息，将所述第二预览图像封装为动态预览图。

5.根据权利要求1至4任一项所述的方法，其中，在所述根据所述预览图像的帧序列信息将所述预览图像封装为所述动态预览图之前，所述方法还包括以下至少一种：

添加显示帧率信息；

添加全局参数，使预览可被重复执行。

6.一种动态预览图的生成系统，包括：

获得模块，用于获得视频数据，所述视频数据包括多个视频帧；

压缩模块，用于压缩所述视频数据中的所述多个视频帧中的部分或全部视频帧，得到与所述多个视频帧中的部分或全部视频帧分别对应的多个预览图像；

封装模块，用于根据所述预览图像的帧序列信息将所述预览图像封装为动态预览图；

创建模块，用于通过开放图形库OpenGL创建帧缓冲区，并绑定所述帧缓冲区为绘图目标以用于压缩视频帧；在创建所述帧缓冲区的过程中设置目标图像尺寸，其中，所述目标图像尺寸用于限定发送至所述帧缓冲区中的视频帧尺寸；以及为所述帧缓冲区设置纹理信息，以实现对图像内容的编辑；

发送模块，用于将所述多个视频帧发送至所述帧缓冲区；

其中，所述压缩模块包括：

绘制子模块，用于在所述帧缓冲区中分别绘制所述视频数据中的所述多个视频帧中的部分或全部视频帧，得到第一图；

降采样子模块，用于通过GPU将所述第一图降采样得到第二图；

编码子模块，用于将所述第二图编码为图像显示格式，得到所述多个预览图像；

其中，所述封装模块用于：

向所述预览图像添加时间正向帧序列信息，将所述预览图像封装为正序的动态预览图；或者，

向所述预览图像添加时间反向帧序列信息，将所述预览图像封装为倒序的动态预览图。

7.根据权利要求6所述的系统，其中，所述编码子模块用于：

通过GPU将所述第二图编码为图像显示格式，得到所述多个预览图像；或者，

通过CPU将所述第二图编码为图像显示格式，得到所述多个预览图像。

8.根据权利要求6所述的系统，还包括：

第一确定模块，用于响应于用户输入，确定第一视频帧集合；以及，

第二确定模块，用于确定与所述第一视频帧集合对应的第一预览图像集合，

其中，所述封装模块用于向所述第一预览图像集合中的每一个第一预览图像添加帧序列信息，将所述第一预览图像集合中的全部第一预览图像封装为动态预览图。

9.根据权利要求6所述的系统，还包括第三确定模块，用于响应于用户输入，确定第二视频帧集合，

其中，所述压缩模块用于在不存在与所述第二视频帧集合中的至少一个第二视频帧对应的第二预览图像的情况下，压缩所述至少一个第二视频帧，获得与所述至少一个第二视频帧对应的所述至少一个第二预览图像，

所述封装模块用于向所述第二预览图像添加帧序列信息，将所述第二预览图像封装为动态预览图。

10.根据权利要求6至9任一项所述的系统，还包括以下至少一种：

第一添加模块，用于添加显示帧率信息；

第二添加模块，用于添加全局参数，使预览可被重复执行。

11.一种计算机可读存储介质，其上存储有可执行指令，所述可执行指令被处理单元执行时使所述处理单元执行根据权利要求1-5中任一项所述的方法。

12.一种电子设备，包括：

处理单元；以及

存储单元，其上存储有可执行指令，所述指令被所述处理单元执行时使所述处理单元执行根据权利要求1-5中任一项所述的方法。

Images