CN109756776B - 图像处理方法、装置和计算机可读存储介质 - Google Patents

Abstract

本公开涉及一种图像处理方法、装置和计算机可读存储介质，涉及图像处理技术领域。该图像处理方法包括：从视频文件中提取多张缩略图；根据缩略图的分辨率以及缩略图的图片格式支持的最大分辨率，对多张缩略图进行分组；在各分组中将缩略图拼接成一张组合图，以便对各分组的组合图进行批量处理。该方法和装置能够提高图像处理效率，提升系统的处理性能。

Description

图像处理方法、装置和计算机可读存储介质

技术领域

本公开涉及图像处理技术领域，特别涉及一种图像处理方法、装置和计算机可读存储介质。

背景技术

随着云计算技术的发展，需要通过浏览器对用户上传到云端的大量视频、音视频进行编辑处理(例如，删除部分片段、添加特效处理、合并视频片段等)。

视频编辑过程中的一个关键操作是用户可以实时看到各个视频片段的每一秒的画面缩略图，由此来定位视频内容和观察处理后的效果。因此，需要利用视频缩略图快速预览视频内容及添加特效后的效果。视频缩略图一般采用较小尺寸存储(例如，分辨率为122x68)。一小时的视频一般具有3600张视频缩略图。

在相关技术中，采用逐张编辑的方式对频缩略图进行处理。

发明内容

本公开的发明人发现上述相关技术中存在如下问题：需要对大量视频缩略图进行逐张处理造成频繁的I/O操作，从而导致图像处理效率低下，整个系统的性能下降。

针对上述问题中的至少一个问题，本公开提出了一种高效率的图像处理技术方案，能够提高系统性能。

根据本公开的一些实施例，提供了一种图像处理方法，包括：从视频文件中提取多张缩略图；根据缩略图的分辨率以及所述缩略图的图片格式支持的最大分辨率，对所述多张缩略图进行分组；在各分组中将缩略图拼接成一张组合图，以便对各分组的组合图进行批量处理。

可选地，所述组合图中包含的缩略图按纵向排列。

可选地，根据缩略图中一列的垂直像素数量以及所述缩略图的图片格式支持的最大分辨率，确定各分组中包含缩略图的数量，按照所述数量对所述多张缩略图进行分组。

可选地，按照预设的时间间隔，从视频文件中提取多帧视频图像作为所述多张缩略图。

可选地，从视频文件中提取所有关键帧的视频图像作为所述多张缩略图。

可选地，根据所述缩略图的分辨率，定位并提取所述批量处理后的组合图中包含的缩略图。

根据本公开的另一些实施例，提供一种图像处理装置，包括：提取模块，用于从视频文件中提取多张缩略图；分组模块，用于根据缩略图的分辨率以及所述缩略图的图片格式支持的最大分辨率，对所述多张缩略图进行分组；拼接模块，用于在各分组中将缩略图拼接成一张组合图，以便对各分组的组合图进行批量处理。

可选地，所述组合图中包含的缩略图按纵向排列。

可选地，所述分组模块根据缩略图中一列的垂直像素数量以及所述缩略图的图片格式支持的最大分辨率，确定各分组中包含缩略图的数量，按照所述数量对所述多张缩略图进行分组。

可选地，所述提取模块按照预设的时间间隔，从视频文件中提取多帧视频图像作为所述多张缩略图。

可选地，所述提取模块从视频文件中提取所有关键帧的视频图像作为所述多张缩略图。

可选地，所述图像处理装置还包括定位模块，用于根据所述缩略图的分辨率，定位并提取所述批量处理后的组合图中包含的缩略图。

根据本公开的又一些实施例，提供一种图像处理装置，包括：存储器以及耦接至所述存储器的处理器，所述处理器被配置为基于存储在所述存储器装置中的指令，执行上述任一些实施例中的图像处理方法。

根据本公开的再一些实施例，提供一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现上述任一些实施例中的图像处理方法。

在上述实施例中，根据缩略图分辨率及其图片格式支持的最大分辨率对缩略图进行分组，并按分组将缩略图拼接为一张组合图来处理。这样就可以减少处理图片造成的I/O操作次数，从而提高图像处理效率，提升系统的处理性能。

附图说明

构成说明书的一部分的附图描述了本公开的实施例，并且连同说明书一起用于解释本公开的原理。

参照附图，根据下面的详细描述，可以更加清楚地理解本公开，其中：

图1示出本公开的图像处理方法的一些实施例的流程图。

图2示出组合图中缩略图的排列方式的示意图。

图3示出本公开的图像处理方法的一些实施例的示意图。

图4示出本公开的图像处理装置的一些实施例的结构图。

图5示出本公开的图像处理装置的另一些实施例的结构图。

图6示出本公开的图像处理装置的又一些实施例的结构图。

具体实施方式

现在将参照附图来详细描述本公开的各种示例性实施例。应注意到：除非另外具体说明，否则在这些实施例中阐述的部件和步骤的相对布置、数字表达式和数值不限制本公开的范围。

同时，应当明白，为了便于描述，附图中所示出的各个部分的尺寸并不是按照实际的比例关系绘制的。

以下对至少一个示例性实施例的描述实际上仅仅是说明性的，决不作为对本公开及其应用或使用的任何限制。

对于相关领域普通技术人员已知的技术、方法和设备可能不作详细讨论，但在适当情况下，所述技术、方法和设备应当被视为授权说明书的一部分。

在这里示出和讨论的所有示例中，任何具体值应被解释为仅仅是示例性的，而不是作为限制。因此，示例性实施例的其它示例可以具有不同的值。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步讨论。

图1示出本公开的图像处理方法的一些实施例的流程图。

如图1所示，该方法包括：步骤110，提取多张缩略图；步骤120，对多张缩略图进行分组；步骤130，按分组拼接组合图。

在步骤110中，从视频文件中提取多张缩略图。例如，可以按照预设的时间间隔，从视频文件中提取多帧视频图像作为多张缩略图。或者可以从视频文件中提取所有关键帧的视频图像作为多张缩略图。还可以将提取的视频图像统一变换为目标大小作为缩略图。例如，缩略图的大小可以为22×68、176×144或352×288，也可以根据需要设定。

在步骤120中，可以根据缩略图的分辨率以及缩略图的图片格式支持的最大分辨率，对多张缩略图进行分组。

在一个实施例中，缩略图的图片格式支持的最大分辨率为R_MAX。例如，缩略图为JPG(Joint Photographic Experts GROUP，联合图片专家组)格式，则R_MAX＝2¹⁶像素。所有缩略图的分辨率均为R＝w×h。h和w分别为缩略图的高和宽，例如，分别为缩略图中一行和一列包含的像素数量。每个分组中缩略图的个数可以根据如下公式设置：

M＝[R_MAX/h]

这样做可以保证拼接后的组合图中尽量包含足够多的缩略图，从而减少I/O操作的次数。如果在分组过程中剩余的缩略图数量为M′，且M′＜M，则该分组中缩略图的数量可以为M′。

在步骤130中，在各分组中将缩略图拼接成一张组合图，以便对各分组的组合图进行批量处理。

在一个实施例中，组合图中包含的缩略图可以按图2中的方式纵向排列。

图2示出组合图中缩略图的排列方式的示意图。

如图2所示，组合图2由M张缩略图(缩略图21—缩略图2M)拼接而成，缩略图21—缩略图2M纵向排列。组合图2的分辨率为R_C＝w×(M×h)。

由于图像数据的存储方式为按行存储，所以本公开在组合图中纵向排列缩略图可以保证在存储组合图时按照缩略图的排列顺序逐行存储，从而能够对各缩略图进行快速定位和提取。反之，如果横向排列各缩略图，则会导致存储组合图时交替存储各缩略图中包含的行，从而造成缩略图定位和提取困难。

下面通过图3具体描述本公开的图像处理方法的完整流程。

图3示出本公开的图像处理方法的一些实施例的示意图。

如图3所示，从待处理视频3中提取N张缩略图：缩略图31—3N。将N张缩略图分为L各分组：分组1—L。各分组中包含M张缩略图，如果分到分组L的时候剩余缩略图不足M，则将剩余的缩略图均分配到分组L中去。例如，分组1中包含缩略图31—3M共M张缩略图。将分组1—L中的缩略图分别进行拼接，获得组合图1—L。然后，可以对这L张组合图进行批量处理，例如，解码、特效处理、变换、缩放、传输等。

在一个实施例中，对L张组合图进行批处理后，可以根据缩略图的分辨率，定位并提取批量处理后的组合图中包含的缩略图。例如，可以结合各缩略图一列的像素数量和顺序编号获取缩略图在组合图中的起始行和结束行，从而定位和提取该缩略图。

上述实施例中，根据缩略图分辨率及其图片格式支持的最大分辨率对缩略图进行分组，并按分组将缩略图拼接为一张组合图来处理。这样就可以减少处理图片造成的I/O操作次数，从而提高图像处理效率，提升系统的处理性能。

图4示出本公开的图像处理装置的一些实施例的结构图。

如图4所示，图像处理装置4中包括提取模块41、分组模块42和拼接模块43。

提取模块41从视频文件中提取多张缩略图。例如，提取模块41可以按照预设的时间间隔，从视频文件中提取多帧视频图像作为多张缩略图。提取模块41还可以从视频文件中提取所有关键帧的视频图像作为多张缩略图。

分组模块41根据缩略图的分辨率以及缩略图的图片格式支持的最大分辨率，对多张缩略图进行分组。

在一个实施例中，分组模块41可以根据缩略图中一列的垂直像素数量以及缩略图的图片格式支持的最大分辨率，确定各分组中包含缩略图的数量，按照数量对多张缩略图进行分组。

拼接模块42在各分组中将缩略图拼接成一张组合图，以便对各分组的组合图进行批量处理。例如，组合图中包含的缩略图可以按纵向排列。

在另一些实施例中，本公开的图像处理装置还可以包括图5中的定位模块54。

图5示出本公开的图像处理装置的另一些实施例的结构图。

如图5所示，图像处理装置5中包括提取模块41、分组模块42、拼接模块43和定位模块54。提取模块41、分组模块42、拼接模块43的功能与上述实施例相同，在此不再赘述。定位模块54可以根据缩略图的分辨率，定位并提取批量处理后的组合图中包含的缩略图。

上述实施例中，根据缩略图分辨率及其图片格式支持的最大分辨率对缩略图进行分组，并按分组将缩略图拼接为一张组合图来处理。这样就可以减少处理图片造成的I/O操作次数，从而提高图像处理效率，提升系统的处理性能。

图6示出本公开的图像处理装置的又一些实施例的结构图。

如图6所示，该实施例的装置6包括：存储器61以及耦接至该存储器61的处理器62，处理器62被配置为基于存储在存储器61中的指令，执行本公开中任意一些实施例中的图像处理方法。

其中，存储器61例如可以包括系统存储器、固定非易失性存储介质等。系统存储器例如存储有操作系统、应用程序、引导装载程序(Boot Loader)、数据库以及其他程序等。

本领域内的技术人员应当明白，本公开的实施例可提供为方法、系统、或计算机程序产品。因此，本公开可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本公开可采用在一个或多个其中包含有计算机可用程序代码的计算机可用非瞬时性存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

至此，已经详细描述了根据本公开的图像处理方法、装置和计算机可读存储介质。为了避免遮蔽本公开的构思，没有描述本领域所公知的一些细节。本领域技术人员根据上面的描述，完全可以明白如何实施这里公开的技术方案。

可能以许多方式来实现本公开的方法和系统。例如，可通过软件、硬件、固件或者软件、硬件、固件的任何组合来实现本公开的方法和系统。用于所述方法的步骤的上述顺序仅是为了进行说明，本公开的方法的步骤不限于以上具体描述的顺序，除非以其它方式特别说明。此外，在一些实施例中，还可将本公开实施为记录在记录介质中的程序，这些程序包括用于实现根据本公开的方法的机器可读指令。因而，本公开还覆盖存储用于执行根据本公开的方法的程序的记录介质。

虽然已经通过示例对本公开的一些特定实施例进行了详细说明，但是本领域的技术人员应该理解，以上示例仅是为了进行说明，而不是为了限制本公开的范围。本领域的技术人员应该理解，可在不脱离本公开的范围和精神的情况下，对以上实施例进行修改。本公开的范围由所附权利要求来限定。

Claims (6)

1.一种图像处理方法，包括：

从视频文件中提取多张缩略图；

根据缩略图的分辨率以及所述缩略图的图片格式支持的最大分辨率，对所述多张缩略图进行分组；

在各分组中将缩略图拼接成一张组合图，以便对各分组的组合图进行批量处理，所述组合图中包含的缩略图按纵向排列；

其中，所述根据缩略图的分辨率以及所述缩略图的图片格式支持的最大分辨率，对所述多张缩略图进行分组包括：

根据缩略图中一列的垂直像素数量以及所述缩略图的图片格式支持的最大分辨率，确定各分组中包含缩略图的数量，按照所述数量对所述多张缩略图进行分组；

根据各缩略图一列的像素数量和顺序编号，获取各缩略图在组合图中的起始行和结束行；

根据各缩略图在组合图中的起始行和结束行，定位并提取所述批量处理后的组合图中包含的缩略图。

2.根据权利要求1所述的图像处理方法，其中，

按照预设的时间间隔，从视频文件中提取多帧视频图像作为所述多张缩略图，

或者

从视频文件中提取所有关键帧的视频图像作为所述多张缩略图。

3.一种图像处理装置，包括：

提取模块，用于从视频文件中提取多张缩略图；

分组模块，用于根据缩略图的分辨率以及所述缩略图的图片格式支持的最大分辨率，对所述多张缩略图进行分组；

拼接模块，用于在各分组中将缩略图拼接成一张组合图，以便对各分组的组合图进行批量处理，所述组合图中包含的缩略图按纵向排列；

所述分组模块根据缩略图中一列的垂直像素数量以及所述缩略图的图片格式支持的最大分辨率，确定各分组中包含缩略图的数量，按照所述数量对所述多张缩略图进行分组；

定位模块，用于根据各缩略图一列的像素数量和顺序编号，获取各缩略图在组合图中的起始行和结束行，根据各缩略图在组合图中的起始行和结束行，定位并提取所述批量处理后的组合图中包含的缩略图。

4.根据权利要求3所述的图像处理装置，其中，

所述提取模块按照预设的时间间隔，从视频文件中提取多帧视频图像作为所述多张缩略图，

或者

所述提取模块从视频文件中提取所有关键帧的视频图像作为所述多张缩略图。

5.一种图像处理装置，包括：

存储器；以及

耦接至所述存储器的处理器，所述处理器被配置为基于存储在所述存储器装置中的指令，执行如权利要求1或2所述的图像处理方法。

6.一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如权利要求1或2所述的图像处理方法。

Images