CN105323637B - 一种视频处理方法及装置 - Google Patents

Abstract

本发明是关于一种视频处理方法及装置，其中，方法包括：对视频数据进行解封装得到待处理帧队列；当从所述待处理帧队列中读取帧生成画面组文件时，比较当前读取的帧块的帧数与已读取的帧数之间的帧数和与预设帧数的大小，得到比较结果；根据比较结果确定是否生成画面组文件以及是否从所述待处理帧队列中清除所述当前读取的帧块，其中，所述当前读取的帧块包括当前读取的关键帧和下一个关键帧之前的所有帧。通过该技术方案，根据实际情况判断是否对当前读取帧块进行清除，避免过早清除当前读取的帧块造成的画面组文件不完整的问题，同时避免过晚清楚当前读取的帧块造成的资源浪费的问题，达到在合适的时间及时清除待处理帧队列中的帧块的目的。

Description

一种视频处理方法及装置

技术领域

本发明涉及视频处理技术领域，尤其涉及一种视频处理方法及装置。

背景技术

随着网络和文化事业的发展，音视频资源极大丰富，对音视频文件的处理的需要也快速增长。

音视频文件处理的大致流程如下：首先将需处理的音视频文件解封装成为视频帧序列和音频帧序列；然后将视频帧序列和音频帧序列分别解码为RAW格式和PCM格式数据；对RAW格式和PCM格式数据进行处理；再将RAW格式和PCM格式的数据编码为所需格式的音频帧序列和视频帧序列；最后将音频帧序列和视频帧序列封装成需要的文件格式。

在解封装过程中生成画面组GOP的出入队列，待处理的帧以队列形式存储，每需要生成一个GOP时，从队列中读取出帧，并在队列中对读取出的帧清空。但是为了保证编码后的流媒体ts文件的首帧是I帧，所以两个相邻的GOP之间有几帧的重合，这样，及时清空队列就会出现问题。

发明内容

本发明实施例提供一种视频处理方法及装置，包括如下技术方案：

根据本发明实施例的第一方面，提供一种视频处理方法，包括：

对视频数据进行解封装得到待处理帧队列；

当从所述待处理帧队列中读取帧生成画面组文件时，比较当前读取的帧块的帧数与已读取的帧数之间的帧数和与预设帧数的大小，得到比较结果；

根据比较结果确定是否生成画面组文件以及是否从所述待处理帧队列中清除所述当前读取的帧块，其中，所述当前读取的帧块包括当前读取的关键帧和下一个关键帧之前的所有帧。

在一个实施例中，所述根据比较结果确定是否生成画面组文件以及是否从所述待处理帧队列中清除所述当前读取的帧块，包括：

当所述帧数和小于所述预设帧数时，在读取完所述当前读取的帧块后，从所述待处理帧队列中清除所述帧块，并更新所述已读取的帧数，继续读取下一个帧块。

在一个实施例中，所述根据比较结果确定是否生成画面组文件以及是否从所述待处理帧队列中清除所述当前读取的帧块，包括：

当所述帧数和大于所述预设帧数时，在读取完所述帧块后，根据所述帧块和已读取的帧生成对应的当前画面组文件，并在所述待处理帧队列中继续保存所述帧块。

在一个实施例中，所述方法还包括：

计算所述帧数和与所述预设帧数之间的第一差值；

当对所述当前画面组文件进行解码再编码时，将所述第一差值确定为所述当前画面组文件的尾部需要丢弃的帧数；

计算所述帧块中的帧数与所述当前画面组文件的尾部需要丢弃的帧数之间的第二差值；

将所述第二差值确定为所述当前画面组文件之后的画面组文件的头部需要丢弃的帧数。

在一个实施例中，所述根据比较结果确定是否生成画面组文件以及是否从所述待处理帧队列中清除所述当前读取的帧块，包括：

当所述帧数和等于所述预设帧数时，在读取完所述帧块后，根据所述帧块和已读取的帧生成对应的当前画面组文件，并在所述待处理帧队列中清除所述帧块。

根据本发明实施例的第二方面，提供一种视频处理装置，包括：

解封装模块，用于对视频数据进行解封装得到待处理帧队列；

比较模块，用于当从所述待处理帧队列中读取帧生成画面组文件时，比较当前读取的帧块的帧数与已读取的帧数之间的帧数和与预设帧数的大小，得到比较结果；

处理模块，用于根据比较结果确定是否生成画面组文件以及是否从所述待处理帧队列中清除所述当前读取的帧块，其中，所述当前读取的帧块包括当前读取的关键帧和下一个关键帧之前的所有帧。

在一个实施例中，所述处理模块包括：

第一处理子模块，用于当所述帧数和小于所述预设帧数时，在读取完所述当前读取的帧块后，从所述待处理帧队列中清除所述帧块，并更新所述已读取的帧数，继续读取下一个帧块。

在一个实施例中，所述处理模块包括：

第二处理子模块，用于当所述帧数和大于所述预设帧数时，在读取完所述帧块后，根据所述帧块和已读取的帧生成对应的当前画面组文件，并在所述待处理帧队列中继续保存所述帧块。

在一个实施例中，所述装置还包括：

第一计算模块，用于计算所述帧数和与所述预设帧数之间的第一差值；

第一确定模块，用于当对所述当前画面组文件进行解码再编码时，将所述第一差值确定为所述当前画面组文件的尾部需要丢弃的帧数；

第二计算模块，用于计算所述帧块中的帧数与所述当前画面组文件的尾部需要丢弃的帧数之间的第二差值；

第二确定模块，用于将所述第二差值确定为所述当前画面组文件之后的画面组文件的头部需要丢弃的帧数。

在一个实施例中，所述处理模块包括：

第三处理子模块，用于当所述帧数和等于所述预设帧数时，在读取完所述帧块后，根据所述帧块和已读取的帧生成对应的当前画面组文件，并在所述待处理帧队列中清除所述帧块。

本发明的实施例提供的技术方案可以包括以下有益效果：

上述技术方案，在从待处理帧队列中读取帧生成画面组文件时，比较当前读取的帧块的帧数与已读取的帧数之间的帧数和，根据帧数和预设帧数之间的大小，确定是否从待处理帧队列中清除当前读取的帧块，这样，根据实际情况判断是否对当前读取帧块进行清除，避免过早清除当前读取的帧块造成的画面组文件不完整的问题，同时避免过晚清楚当前读取的帧块造成的资源浪费的问题，达到在合适的时间及时清除待处理帧队列中的帧块的目的。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本发明。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。

图1是根据一示例性实施例示出的视频处理方法的流程图。

图2是根据一示例性实施例示出的一种视频处理方法的流程图。

图3是根据一示例性实施例示出的另一种视频处理方法的流程图。

图4是根据一示例性实施例示出的再一种视频处理方法的流程图。

图5是根据一示例性实施例示出的又一种视频处理方法的流程图。

图6是根据一示例性实施例示出的视频处理装置的框图。

图7是根据一示例性实施例示出的一种视频处理装置中处理模块的框图。

图8是根据一示例性实施例示出的另一种视频处理装置中处理模块的框图。

图9是根据一示例性实施例示出的另一种视频处理装置的框图。

图10是根据一示例性实施例示出的再一种视频处理装置中处理模块的框图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。

本发明实施例提供了一种视频处理方法，如图1所示，该方法包括步骤S101-S103：

在步骤S101中，对视频数据进行解封装得到待处理帧队列；

在步骤S102中，当从待处理帧队列中读取帧生成画面组文件时，比较当前读取的帧块的帧数与已读取的帧数之间的帧数和与预设帧数的大小，得到比较结果；

在步骤S103中，根据比较结果确定是否生成画面组文件以及是否从待处理帧队列中清除当前读取的帧块，其中，当前读取的帧块包括当前读取的关键帧和下一个关键帧之前的所有帧。

在该实施例中，在从待处理帧队列中读取帧生成画面组文件时，比较当前读取的帧块的帧数与已读取的帧数之间的帧数和，根据帧数和预设帧数之间的大小，确定是否从待处理帧队列中清除当前读取的帧块，这样，根据实际情况判断是否对当前读取帧块进行清除，避免过早清除当前读取的帧块造成的画面组文件不完整的问题，同时避免过晚清楚当前读取的帧块造成的资源浪费的问题，达到在合适的时间及时清除待处理帧队列中的帧块的目的。

如图2所示，在一个实施例中，上述步骤S103包括步骤S201：

步骤S201，当帧数和小于预设帧数时，在读取完当前读取的帧块后，从待处理帧队列中清除帧块，并更新已读取的帧数，继续读取下一个帧块。

在该实施例中，在帧数和小于预设帧数时，则说明当前已经读取的帧数还未达到画面组文件的预设帧数，可以直接将当前读取的帧块从待处理队列中清除。

如图3所示，在一个实施例中，上述步骤S103还包括步骤301：

步骤S301，当帧数和大于预设帧数时，在读取完帧块后，根据帧块和已读取的帧生成对应的当前画面组文件，并在待处理帧队列中继续保存帧块。

在该实施例中，在帧数和大于预设帧数时，则说明当前已经读取的帧数已超过画面组文件的预设帧数，即有部分帧需要存到下一个画面组文件中，因此，在待处理帧队列中继续保存当前读取的帧块，以便下一个画面组文件能够进行读取。

如图4所示，在一个实施例中，上述步骤S103还可以包括步骤S401：

步骤S401，当帧数和等于预设帧数时，在读取完帧块后，根据帧块和已读取的帧生成对应的当前画面组文件，并在待处理帧队列中清除帧块。

在该实施例中，在帧数和等于预设帧数时，则说明当前已经读取的帧数正好等于画面组文件的预设帧数，可以生成当前画面组文件，此时，可以清除当前读取的帧块。

如图5所示，在一个实施例中，上述方法还包括步骤S501-S504：

步骤S501，当帧数和大于预设帧数时，计算帧数和与预设帧数之间的第一差值；

步骤S502，当对当前画面组文件进行解码再编码时，将第一差值确定为当前画面组文件的尾部需要丢弃的帧数；

步骤S503，计算帧块中的帧数与当前画面组文件的尾部需要丢弃的帧数之间的第二差值；

步骤S504，将第二差值确定为当前画面组文件之后的画面组文件的头部需要丢弃的帧数。

在该实施例中，在当前画面组文件的帧数和大于预设帧数和时，则说明当前画面组文件中的末尾几帧需要占用下一个画面组文件的头部几帧，在对画面组文件进行解码再编码以得到流媒体文件时，帧数和与预设帧数之间的第一差值即为当前画面组文件的尾部需要丢弃的帧数，而当前读取的帧块中的剩余帧数即为下一个画面组文件的头部需要丢弃的帧数。

下面以一个具体实施例详细说明本发明的技术方案。

对视频数据进行解封装得到视频帧和音频帧，将视频帧和音频帧逐帧写入待处理帧队列。如I\B\B\B\B\P\I\B\B\P，其中，假设GOP文件的预设帧数为1500帧。

当需要从待处理帧队列中读取出帧并生成GOP文件时，判断当前I帧块的帧数加上已读取出的帧数是否达到1500帧，如果没有达到，则读取出该I帧块，并在队列中清除该I帧块。同时更新已读取的帧数。其中，I帧块包括I帧及下一个I帧之前的所有帧。

如果超过1500帧，则将该I帧块读取出来，但是不从队列中清除。将读取出的所有帧生成GOP文件。同时记录超出1500帧的帧数，该帧数为编码时GOP尾部需要丢弃的帧数。

同时，针对下一个GOP，用I帧块的帧数减去前一个GOP尾部丢弃帧数，为下一个GOP头部需要丢弃的帧数。

针对下一个GOP，当需要从队列中读取出帧并生成GOP时，重复上述过程。

如果当前I帧块的帧数加上已读取出的帧数恰好为1500帧，则读取出该I帧块，并在队列中清除该I帧块。将读取出的所有帧生成GOP。GOP尾部需要丢弃的帧数为0，下一个GOP头部需要丢弃的帧数也为0。

下述为本发明装置实施例，可以用于执行本发明方法实施例。

图6是根据一示例性实施例示出的一种视频处理装置的框图，如图6所示，该视频处理装置包括：

解封装模块61，用于对视频数据进行解封装得到待处理帧队列；

比较模块62，用于当从所述待处理帧队列中读取帧生成画面组文件时，比较当前读取的帧块的帧数与已读取的帧数之间的帧数和与预设帧数的大小，得到比较结果；

处理模块63，用于根据比较结果确定是否生成画面组文件以及是否从所述待处理帧队列中清除所述当前读取的帧块，其中，所述当前读取的帧块包括当前读取的关键帧和下一个关键帧之前的所有帧。

如图7所示，在一个实施例中，所述处理模块63包括：

第一处理子模块71，用于当所述帧数和小于所述预设帧数时，在读取完所述当前读取的帧块后，从所述待处理帧队列中清除所述帧块，并更新所述已读取的帧数，继续读取下一个帧块。

如图8所示，在一个实施例中，所述处理模块63包括：

第二处理子模块81，用于当所述帧数和大于所述预设帧数时，在读取完所述帧块后，根据所述帧块和已读取的帧生成对应的当前画面组文件，并在所述待处理帧队列中继续保存所述帧块。

如图9所示，在一个实施例中，上述装置还包括：

第一计算模块91，用于计算所述帧数和与所述预设帧数之间的第一差值；

第一确定模块92，用于当对所述当前画面组文件进行解码再编码时，将所述第一差值确定为所述当前画面组文件的尾部需要丢弃的帧数；

第二计算模块93，用于计算所述帧块中的帧数与所述当前画面组文件的尾部需要丢弃的帧数之间的第二差值；

第二确定模块94，用于将所述第二差值确定为所述当前画面组文件之后的画面组文件的头部需要丢弃的帧数。

如图10所示，在一个实施例中，所述处理模块63包括：

第三处理子模块101，用于当所述帧数和等于所述预设帧数时，在读取完所述帧块后，根据所述帧块和已读取的帧生成对应的当前画面组文件，并在所述待处理帧队列中清除所述帧块。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种视频处理方法，其特征在于，包括：

对视频数据进行解封装得到待处理帧队列；

当从所述待处理帧队列中读取帧生成画面组文件时，比较当前读取的帧块的帧数与已读取的帧数之间的帧数和与预设帧数的大小，得到比较结果；

根据比较结果确定是否生成画面组文件以及是否从所述待处理帧队列中清除所述当前读取的帧块，其中，所述当前读取的帧块包括当前读取的关键帧及其下一个关键帧之前的所有帧。

2.根据权利要求1所述的方法，其特征在于，所述根据比较结果确定是否生成画面组文件以及是否从所述待处理帧队列中清除所述当前读取的帧块，包括：

当所述帧数和小于所述预设帧数时，在读取完所述当前读取的帧块后，从所述待处理帧队列中清除所述帧块，并更新所述已读取的帧数，继续读取下一个帧块。

3.根据权利要求1所述的方法，其特征在于，所述根据比较结果确定是否生成画面组文件以及是否从所述待处理帧队列中清除所述当前读取的帧块，包括：

当所述帧数和大于所述预设帧数时，在读取完所述帧块后，根据所述帧块和已读取的帧生成对应的当前画面组文件，并在所述待处理帧队列中继续保存所述帧块。

4.根据权利要求3所述的方法，其特征在于，所述方法还包括：

计算所述帧数和与所述预设帧数之间的第一差值；

当对所述当前画面组文件进行解码再编码时，将所述第一差值确定为所述当前画面组文件的尾部需要丢弃的帧数；

计算所述帧块中的帧数与所述当前画面组文件的尾部需要丢弃的帧数之间的第二差值；

将所述第二差值确定为所述当前画面组文件之后的画面组文件的头部需要丢弃的帧数。

5.根据权利要求1所述的方法，其特征在于，所述根据比较结果确定是否生成画面组文件以及是否从所述待处理帧队列中清除所述当前读取的帧块，包括：

当所述帧数和等于所述预设帧数时，在读取完所述帧块后，根据所述帧块和已读取的帧生成对应的当前画面组文件，并在所述待处理帧队列中清除所述帧块。

6.一种视频处理装置，其特征在于，包括：

解封装模块，用于对视频数据进行解封装得到待处理帧队列；

比较模块，用于当从所述待处理帧队列中读取帧生成画面组文件时，比较当前读取的帧块的帧数与已读取的帧数之间的帧数和与预设帧数的大小，得到比较结果；

处理模块，用于根据比较结果确定是否生成画面组文件以及是否从所述待处理帧队列中清除所述当前读取的帧块，其中，所述当前读取的帧块包括当前读取的关键帧及其下一个关键帧之前的所有帧。

7.根据权利要求6所述的装置，其特征在于，所述处理模块包括：

第一处理子模块，用于当所述帧数和小于所述预设帧数时，在读取完所述当前读取的帧块后，从所述待处理帧队列中清除所述帧块，并更新所述已读取的帧数，继续读取下一个帧块。

8.根据权利要求6所述的装置，其特征在于，所述处理模块包括：

第二处理子模块，用于当所述帧数和大于所述预设帧数时，在读取完所述帧块后，根据所述帧块和已读取的帧生成对应的当前画面组文件，并在所述待处理帧队列中继续保存所述帧块。

9.根据权利要求8所述的装置，其特征在于，所述装置还包括：

第一计算模块，用于计算所述帧数和与所述预设帧数之间的第一差值；

第一确定模块，用于当对所述当前画面组文件进行解码再编码时，将所述第一差值确定为所述当前画面组文件的尾部需要丢弃的帧数；

第二计算模块，用于计算所述帧块中的帧数与所述当前画面组文件的尾部需要丢弃的帧数之间的第二差值；

第二确定模块，用于将所述第二差值确定为所述当前画面组文件之后的画面组文件的头部需要丢弃的帧数。

10.根据权利要求6所述的装置，其特征在于，所述处理模块包括：

第三处理子模块，用于当所述帧数和等于所述预设帧数时，在读取完所述帧块后，根据所述帧块和已读取的帧生成对应的当前画面组文件，并在所述待处理帧队列中清除所述帧块。