CN105376658B - 一种生成视频文件概览的装置和方法 - Google Patents

Abstract

本发明提供一种生成视频概览的装置，包括:解封装模块，将音视频文件解封装为视频帧序列和音频帧序列；帧提取模块，从所述视频帧序列中提取特定帧的图像；封装模块，将所述图像依次封装为视频概览文件。本发明还提供一种生成视频概览的方法。

Description

一种生成视频文件概览的装置和方法

技术领域

本发明涉及到一种生成视频文件概览的装置和方法，尤其涉及一种从一个视频文件中提取帧从而生成一个可以播放的视频小文件或者GIF文件的装置和方法。

背景技术

随着互联网络的发展，音视频资料极大丰富。由于音视频文件的特殊性，用户在看完音视频文件前很难对其内容有一个大概的了解。为解决这一问题，出现了从视频中提取帧做成一个概览文件的方法。概览文件的尺寸远小于原文件，播放速度很快，可以让用户快速了解音视频文件的内容。生成视频文件概览的装置和方法有两种类型：一种是手动取帧的装置，另一种是取关键帧的装置。手动取帧的装置，需要用户一帧一帧的挑选，工作量繁琐，消耗时间多；而取关键帧的装置，有局限性，不灵活，可调控性小。

发明内容

本发明涉及生成视频文件概览装置的优点有是自动取帧生成视频概览装置，同样用户可以根据需要的格式，文件大小，播放速度，以及像素可以自动设置的将一个音视频文件剪切成一个可以播放的自动处理多种输入输出格式GIF文件的装置。

为了解决上述技术问题，本发明的一方面提供一种生成视频概览的装置，包括:解封装模块，将音视频文件解封装为视频帧序列和音频帧序列；帧提取模块，从所述视频帧序列中提取特定帧的图像；封装模块，将所述图像依次封装为视频概览文件。

优选地，还包括对所述图像的参数进行调整的调整模块。

优选地，所述视频概览文件为视频文件或GIF格式的图像文件。

优选地，还包括接收用户输入的视频概览文件的参数，并将所述参数转发给装置中其他模块的控制模块。

优选地，所述帧提取模块每隔固定的间隔提取一帧图像。

优选地，所述固定的间隔为时间间隔或一定的帧间距。

优选地，所述帧提取模块判断每隔固定间隔的特定帧是否为I帧；如果所述特定帧为I帧则提取该帧的图像；如果所述特定帧不是I帧且在所述特定帧的一定范围内有I帧，则提取所述I帧的图像；如果所述特定帧不是I帧且在所述特定帧的一定范围内没有I帧，则提取所述特定帧的图像。

优选地，所述一定范围是在所述特定帧前后一定距离以内的范围。

优选地，所述帧提取模块按照从邻近所述特定帧到逐渐远离所述特定帧的顺序判断所述一定范围内是否有I帧，且优先提取距离所述特定帧近的I帧。

优选地，所述装置还包括场景转换模块；如果所述场景转换模块判断发生了场景转换，所述帧提取模块用所述场景转换产生的首个I帧代替距离所述场景转换产生的首个I帧的位置最近的需要被提取的帧。

本发明提供一种生成视频概览的方法，包括：解封装步骤，将音视频文件解封装为视频帧序列和音频帧序列；帧提取步骤，从所述视频帧序列中提取特定帧的图像；封装步骤，将所述图像依次封装为视频概览文件。还包括对所述图像的参数进行调整的调整步骤。

优选地，所述视频概览文件为视频文件或GIF格式的图像文件。

优选地，还包括接收用户输入的视频概览文件的参数、并将所述参数转发给装置中其他模块的控制步骤。

优选地，所述帧提取步骤中每隔固定的间隔提取一帧图像。

优选地，所述固定的间隔为时间间隔或一定的帧间距。

优选地，在所述帧提取步骤判断每隔固定间隔的特定帧是否为I帧；如果所述特定帧为I帧则提取该帧的图像；如果所述特定帧不是I帧且在所述特定帧的一定范围内有I帧，则提取所述I帧的图像；如果所述特定帧不是I帧且在所述特定帧的一定范围内没有I帧，则提取所述特定帧的图像。

优选地，所述一定范围是在所述特定帧前后一定距离以内的范围。

优选地，在所述帧提取步骤中按照从邻近所述特定帧到逐渐远离所述特定帧的顺序判断所述一定范围内是否有I帧，且优先提取距离所述特定帧近的I帧。

优选地，还包括监视场景转换的步骤；如果发生了场景转换，用所述场景转换产生的首个I帧代替距离所述场景转换产生的首个I帧的位置最近的需要被提取的帧。

附图说明

图1为本发明实施方式涉及的生成视频文件概览的装置的一个实施例的结构框图。

图2为本发明实施方式涉及的生成视频文件概览的装置的一个实施例的处理流程图。

图3为本发明实施方式涉及的生成视频文件概览的装置的另一个实施例的处理流程图。

图4为本发明实施方式涉及的生成视频文件概览的装置的另一个实施例的结构框图。

图5为本发明实施方式涉及的生成视频文件概览的装置的另一个实施例的处理流程图。

具体实施方法

下面根据附图所示实施方式阐述本发明。本发明的范围不受上述实施方式的说明所限，仅由权利要求书的范围所示，而且包括与权利要求范围具有同样意思及权利要求范围内的所有变形。

实施例1

图1为本发明实施方式涉及的生成视频文件概览的装置的一个实施例的结构框图，本实施方式涉及的装置包括数据接收模块1、解封装模块2、帧提取模块3、调整模块4、封装模块5和控制模块6。

控制模块6用于接收用户设定的要输出的视频文件或者GIF文件的相关参数（帧率、像素等）和上述解封装模块2得到的需要处理的音视频文件的相关参数（分析文件头和视频帧的帧头得到的相关参数），并将各功能模块需要的参数转发给相应的模块。上述数据接收模块1接收音视频文件并将接收的音视频文件传送至上述解封装模块2进行相应的解封装。上述解封装模块2接收到音视频文件，分析音视频文件的格式，将音视频文件解封装为视频帧序列和音频帧序列，将视频帧序列传输给上述帧提取模块3，通过分析文件头和视频帧的帧头，可以得到音视频文件的相关参数（帧率、帧数、视频帧格式等），并将得到的相关参数传输给上述控制模块6。上述帧提取模块3接收到上述解封装模块2传输过来的视频帧序列，对视频帧序列开始取帧解码之前，控制模块6将相关参数发送给上述帧提取模块3，帧提取模块3根据控制模块6发送的相关参数确定取帧的间隔（时间间隔或者帧间距），根据确定的取帧间隔，上述帧提取模块3对上述被解析的视频帧序列按照一定的间隔取帧并解码。提取的帧有三种格式：I帧、B帧和P帧。如果抽取的帧为I帧，则I帧是完整的图片，可以直接解码，不需要再提取其他帧来解码I帧；如果提取的帧为P帧，P帧是一个不完整的图片，需要再提取一个I帧或者P帧来对其进行解码；如果提取的是B帧，B帧也是一个不完整的图片，对于B帧需要再提取相应的一个I帧和P帧或者两个P帧来对其进行解码。将提取并解码完的视频数据（即各帧的图片）按播放时间顺序排列好，传输给上述调整模块4。上述控制模块6将相关参数发送给上述调整模块4，调整模块4根据控制模块6发送的相关参数对接收到的视频数据进行修改图片尺寸、设置帧之间的时间间隔等处理，将处理好的视频数据传输给上述封装模块5。上述控制模块6将相关参数发送给上述封装模块5，封装模块5对接收的视频数据按要求封装成需要格式的可播放视频或者GIF文件。

图2为本发明实施方式涉及的生成视频文件概览的装置的一个实施例的处理流程图。下面参考图2说明本实施例涉及的生成视频文件概览的装置的处理流程。

首先，输入音视频文件，上述数据接收模块1接收上述音视频文件并将其传输给上述解封装模块2（步骤S11）。上述解封装模块2将接收的音视频文件解封装成视频帧序列和音频帧序列，分析文件头和视频帧的帧头得到视频数据的帧率、帧数等。解封装模块2将解封装生成的视频帧序列传输给上述帧提取模块3，将分析得到的视频数据的相关参数传输给上述控制模块6（步骤S12）。上述帧提取模块3将接收到视频帧序列按照固定间隔（时间间隔或者帧间距）取帧解码（步骤S13），取帧解码之前，上述控制模块6将相关参数发送给上述帧提取模块3，上述帧提取模块3根据上述控制模块6传输的相关参数将对视频帧序列按照一定的间隔取帧解码，如果抽取的帧为I帧，不需要提取其他帧来解码I帧；如果提取的帧为P帧，P帧是一个不完整的图片，P帧需要提取相应的一个I帧或者P帧来对其进行解码；如果提取的是B帧，B帧也是一个不完整的图片，对于B帧需要提取一个I帧和P帧或者两个P帧来对其进行解码。最终把提取出来并且解码好的视频数据按播放时间顺序进行排列并传输给上述调整模块4(步骤S14)。上述调整模块4接收到上述帧提取模块3传输的视频数据，上述控制模块6将相关参数传输给上述调整模块4，调整模块4根据上述控制模块6传输的参数对视频数据进行调整（步骤S15），确定播放速度，降低分辨率等，最后将处理好的视频数据传输给上述封装模块5进行封装。上述封装模块5将最终处理好的视频数据进行封装得到要求格式的可播放的视频或者GIF文件（步骤S16）。

实施例2

本实施例涉及的生成视频文件概览的装置的结构与实施例1的装置相同，在此省略相关说明。

实施例1的装置按用户设定的间隔提取帧，提取的帧有三种格式：I帧、B帧和P帧。如果提取的帧为I帧，I帧是完整的图片，可以不依赖其他帧直接解码；如果提取的帧为B帧或P帧，不是一个完整的图片，需要另外提取其他的帧来完成对该帧的解码。提取其他帧的操作和对B帧或P帧进行解码的操作会加重CPU的工作并增加处理所需的时间。因此，本实施例的装置通过判断与B、P帧一定距离内的帧是否有I帧，如果有I帧，优先提取I帧，用优先提取的I帧代替该帧，来减轻CPU的工作量。如果该位置周围一定范围内没有I帧，将提取相应的非I帧对该非I帧进行解码。如此，相比实施例1可以降低处理的负荷，同时对得到的可播放的视频或者GIF文件的效果不会有明显的影响。

图3为本实施例涉及的装置的的处理流程图。下面参考图3说明本实施例涉及的生成视频文件概览装置的处理流程。

首先，输入音视频文件，上述数据接收模块1接收上述音视频文件并将其传输给上述解封装模块2（步骤S21）。上述解封装模块2将接收的音视频文件解封装成视频帧序列和音频帧序列，分析文件头和视频帧的帧头得到视频数据的帧率、帧数等，解封装模块2将解封装生成的视频帧序列传输给上述帧提取模块3，将分析得到的视频数据的相关参数传输给上述控制模块6（步骤S22）。上述帧提取模块3将接收到的视频帧序列按照固定间隔取帧（步骤S23）。取帧之前，上述控制模块6将相关参数发送给上述帧提取模块3，上述帧提取模块3将对视频帧序列按照一定的间隔取帧，取帧后判断提取的帧是否为I帧（步骤S24）。如果抽取的帧为I帧（步骤S24：是），将该I帧解码为图片（步骤S25）。如果不是I帧（步骤S24：否），判断与此帧相距一定范围的帧是否有I帧（步骤S26）。在步骤S26中，先判断该帧前后的帧是否为I帧，如果没有，再判断该帧前后相距两帧的帧是否为I帧，以此类推，直至判断完所述一定范围内的所有的帧。该一定范围的值由用户预先设定。如果有I帧（步骤S26：是），优先提取I帧并解码，代替当前非I帧（步骤S27）。如果无I帧（步骤S26：否），抽取对应的帧和该帧解码需要的额外帧并对该非I帧进行解码（步骤S28）。暂存解码后的图像（步骤S29）。判断取帧是否结束（步骤S210），如果没有结束（步骤S210：否）继续按照固定的间隔顺序进行下一帧的提取。如果取帧结束（步骤S210：是）。把所有提取出来的帧解码后的视频数据按播放时间顺序进行排序（步骤S211）。将排列好的视频数据传输给上述调整模块4，上述调整模块4接收到上述帧提取模块3传输的视频数据，上述控制模块6将相关信息传输给上述调整模块4，调整模块4根据上述控制模块6传输的信息对视频数据进行调整（步骤S212），进行确定播放速度，降低分辨率等处理，最后将处理好的视频帧序列传输给上述封装模块5进行封装。上述封装模块5将最终处理好的视频帧序列进行封装得到要求格式的可播放的视频或者GIF文件（步骤S213）。

实施例3

图4为本实施例涉及的生成视频文件概览装置的结构框图，本实施例的装置包括数据接收模块1、解封装模块2、帧提取模块3、调整模块4、封装模块5、控制模块6和场景转换模块7。

在提取帧的过程中，视频帧序列中有些帧是场景转换帧，场景转换帧包含重要的信息，应该把发生场景转换的帧提取出来（场景转换的帧是I帧），发生场景转换的帧可能不在固定间隔（时间间隔或者帧间距）取帧的位置，这样就打破了固定的取帧间隔，为了保证取帧间隔保持不变，在取帧过程中，遇到发生场景转换的帧时，把发生场景转换的帧提取出来，如果此帧不在固定间隔取帧的位置，帧提取模块3将信息反馈给上述场景转换模块7，同样上述控制模块6将相关参数发送给场景转换模块7，场景转换模块7根据上述控制模块6发送的相关参数和上述帧提取模块3反馈的发生场景转换的帧信息分析反馈给上述帧提取模块3，上述帧提取模块3当提取到场景转换的帧时，首先判断按照正常情况下发生场景转换的帧前后固定取帧的帧及位置，判断场景转换的帧与前后这两个固定取帧的距离，场景转换的帧将取代与它最近固定取帧的位置，接下来下一次的取帧仍按照先前规定好的时间间隔正常的取帧。

图5为本实施例涉及的装置的的处理流程图。下面参考图5说明本实施例涉及的生成视频文件概览装置的处理流程。

首先，输入音视频文件，上述数据接收模块1接收输入的音视频文件并将其传输给上述解封装模块2（步骤S31）。上述解封装模块2将接收的音视频文件进行解封装成视频帧序列和音频帧序列，对文件头和视频帧序列的帧头进行分析得到视频数据的帧率、帧数等（步骤S32）。解封装模块2将分析得出的视频数据的相关参数传输给上述控制模块6，解封装模块2将解封装得到的视频帧序列传输给上述提取帧模块3。上述提取帧模块3按照固定的间隔顺序取帧（步骤S33）。在取帧过程中，视频帧序列有些帧是场景转换帧，由于场景转换帧是关键帧，优先提取场景转换帧，所以取帧过程中判断每个帧是否是场景转换帧（步骤S34）。如果不是场景转换帧（步骤S34：否），继续按照规定间隔顺序取帧。如果是场景转换帧（步骤S34：是），如果此场景转换帧不是按照固定的间隔取帧的位置，就会打破固定取帧位置，为了遵循固定的间隔取帧，比较场景转换帧前后取帧的距离，就近替代取帧位置（步骤S35），继续按照间隔顺序取帧。上述帧提取模块3在提取帧的过程中，对提取的每帧判断是否为I帧（步骤S36）。如果是I帧（步骤S36：是），I帧是一个信息完整的帧，不需要相应的提取其他帧解码I帧，解码当前I帧（步骤S37）。如果不是I帧（步骤S36：否），判断与此帧一定时间间隔相邻的帧是否有I帧（步骤S38）。如果有I帧（步骤S38：是），优先提取I帧，代替当前非I帧并解码（步骤S39）。如果没有I帧（步骤S38：否），对当前非I帧提取所需要的其他帧来解码当前非I帧（步骤S310）。暂存解码后图像（步骤S311）。判断取帧是否结束（步骤S312），如果没有结束（步骤S312：否）继续按照固定的间隔顺序进行下一帧的提取。如果取帧结束（步骤S312：是）。把提取解码好的视频数据按播放时间排序（步骤S313）。将排列好的视频数据传输给上述调整模块4，上述调整模块4对传输过来的视频数据进行调整（步骤S314），上述控制模块6将相关参数传输给上述调整模块4，根据控制模块6传输的相关参数，对调整模块4接收的视频数据进行调整，确定其帧率、减少像素等，将调整好的视频数据传输给上述封装模块5进行封装，上述控制模块6将相关信息传输给封装模块5，封装模块将根据控制模块传输给的相关参数将当前整理好的视频数据封装成用户需要的格式（步骤S315）。

Claims (16)

1.一种生成视频概览的装置，包括:

解封装模块，将音视频文件解封装为视频帧序列和音频帧序列；

帧提取模块，从所述视频帧序列中提取特定帧的图像；

封装模块，将所述图像依次封装为视频概览文件；

所述帧提取模块判断每隔固定间隔的特定帧是否为I帧；

若提取的特定帧是I帧，则将其解码为图片，若所述特定帧不是I帧且在所述特定帧的一定范围内有I帧，则提取该I帧并解码为图片，若所述特定帧不是I帧且在所述特定帧的一定范围内没有I帧，则提取该特定帧并提取解码该特定帧所需要的额外帧并解码该特定帧，以得到解码后的图片，最后将解码后的图片封装成视频概览文件；

所述装置还包括场景转换模块；

如果所述场景转换模块判断发生了场景转换，所述帧提取模块用所述场景转换产生的首个I帧代替距离所述场景转换产生的首个I帧的位置最近的需要被提取的帧。

2.根据权利要求1所述的生成视频概览的装置，其特征在于：

还包括对所述图像的参数进行调整的调整模块。

3.根据权利要求1所述的生成视频概览的装置，其特征在于：

所述视频概览文件为视频文件或GIF格式的图像文件。

4.根据权利要求1所述的生成视频概览的装置，其特征在于：

还包括接收用户输入的视频概览文件的参数，并将所述参数转发给装置中其他模块的控制模块。

5.根据权利要求1～4中任意一项所述的生成视频概览的装置，其特征在于：

所述帧提取模块每隔固定的间隔提取一帧图像。

6.根据权利要求5所述的生成视频概览的装置，其特征在于：

所述固定的间隔为时间间隔或一定的帧间距。

7.根据权利要求1所述的生成视频概览的装置，其特征在于：

所述一定范围是在所述特定帧前后一定距离以内的范围。

8.根据权利要求7所述的生成视频概览的装置，其特征在于：

所述帧提取模块按照从邻近所述特定帧到逐渐远离所述特定帧的顺序判断所述一定范围内是否有I帧，且优先提取距离所述特定帧近的I帧。

9.一种生成视频概览的方法，包括:

解封装步骤，将音视频文件解封装为视频帧序列和音频帧序列；

帧提取步骤，从所述视频帧序列中提取特定帧的图像；

封装步骤，将所述图像依次封装为视频概览文件；

在所述帧提取步骤判断每隔固定间隔的特定帧是否为I帧；

若提取的特定帧是I帧，则将其解码为图片，若所述特定帧不是I帧且在所述特定帧的一定范围内有I帧，则提取该I帧并解码为图片，若所述特定帧不是I帧且在所述特定帧的一定范围内没有I帧，则提取该特定帧并提取解码该特定帧所需要的额外帧并解码该特定帧，以得到解码后的图片，最后将解码后的图片封装成视频概览文件；

还包括监视场景转换的步骤；

如果发生了场景转换，用所述场景转换产生的首个I帧代替距离所述场景转换产生的首个I帧的位置最近的需要被提取的帧。

10.根据权利要求9所述的生成视频概览的方法，其特征在于：

还包括对所述图像的参数进行调整的调整步骤。

11.根据权利要求9所述的生成视频概览的方法，其特征在于：

所述视频概览文件为视频文件或GIF格式的图像文件。

12.根据权利要求9所述的生成视频概览的方法，其特征在于：

还包括接收用户输入的视频概览文件的参数、并将所述参数转发给装置中其他模块的控制步骤。

13.根据权利要求9～12中任意一项所述的生成视频概览的方法，其特征在于：

所述帧提取步骤中每隔固定的间隔提取一帧图像。

14.根据权利要求13所述的生成视频概览的方法，其特征在于：

所述固定的间隔为时间间隔或一定的帧间距。

15.根据权利要求9所述的生成视频概览的方法，其特征在于：

所述一定范围是在所述特定帧前后一定距离以内的范围。

16.根据权利要求15所述的生成视频概览的方法，其特征在于：

在所述帧提取步骤中按照从邻近所述特定帧到逐渐远离所述特定帧的顺序判断所述一定范围内是否有I帧，且优先提取距离所述特定帧近的I帧。