CN117915088A - 视频处理方法、装置、电子设备及计算机可读存储介质 - Google Patents

Abstract

本申请实施例公开了一种视频处理方法、装置、电子设备及计算机可读存储介质，该方法包括：获取待处理视频，待处理视频包括至少两个前后相邻的帧图像；计算待处理视频中相邻的两个帧图像的图像差信息；按照预设差异分类信息和图像差信息，将两个帧图像中的后一帧图像划分为至少一个原始图像块；按照预设差异分类信息对应的差分处理策略对原始图像块进行差分处理，得到后一帧图像对应的差分帧数据；根据待处理视频中的第一个帧图像以及待处理视频中除第一个帧图像以外的各帧图像的差分帧数据，得到压缩后视频。使得不同差异程度的图像块或者存在少量差异的图像块也可以被差分处理，提升视频的压缩程度。

Description

视频处理方法、装置、电子设备及计算机可读存储介质

技术领域

本申请实施例涉及通信领域，具体涉及一种视频处理方法、装置、电子设备及计算机可读存储介质。

背景技术

视频或者帧动画都是一类具备多个帧图像的文件，但由于帧图像较多，导致文件体积较大，同时在动画或者视频播放时消耗的内存和cpu资源会较大，比较常见的改进的方法是针对图片序列进行差分处理(例如，第二张图片仅保留与第一张图片不同的部分)，这样会使文件更小，消耗的资源更少。

但这种方法也有较大的局限性，很多设计人员为了使图像不那么单调，在整个动画中加入一些全尺寸渐变的效果，导致前后两张图片中所有对应点的颜色都不一样，无法进行差分处理。

发明内容

本申请实施例提供一种视频处理方法、装置、电子设备及计算机可读存储介质，可以提升视频的压缩程度。

本申请实施例提供了一种视频处理方法，包括：

获取待处理视频，所述待处理视频包括至少两个前后相邻的帧图像；

计算所述待处理视频中相邻的两个帧图像的图像差信息；

按照预设差异分类信息和所述图像差信息，将所述两个帧图像中的后一帧图像划分为至少一个原始图像块；

按照所述预设差异分类信息对应的差分处理策略对所述原始图像块进行差分处理，得到所述后一帧图像对应的差分帧数据；

根据所述待处理视频中的第一个帧图像以及所述待处理视频中除所述第一个帧图像以外的各帧图像的差分帧数据，得到压缩后视频。

相应的，本申请实施例还提供了一种视频处理装置，包括：

获取模块，用于获取待处理视频，所述待处理视频包括至少两个前后相邻的帧图像；

计算模块，用于计算所述待处理视频中相邻的两个帧图像的图像差信息；

划分模块，用于按照预设差异分类信息和所述图像差信息，将所述两个帧图像中的后一帧图像划分为至少一个原始图像块；

处理模块，用于按照所述预设差异分类信息对应的差分处理策略对所述原始图像块进行差分处理，得到所述后一帧图像对应的差分帧数据；

生成模块，用于根据所述待处理视频中的第一个帧图像以及所述待处理视频中除所述第一个帧图像以外的各帧图像的差分帧数据，得到压缩后视频。

可选的，在本申请的一些实施例中，处理模块包括：

处理单元，用于针对每一所述原始图像块，根据所述原始图像块对应的预设差异分类信息，按照所述预设差异分类信息对应的差分处理策略，对所述原始图像块进行差分处理，得到差分图像块；

生成单元，用于根据各所述差分图像块，以及各所述差分图像块对应的原始图像块的位置信息、预设差异分类信息，得到所述后一帧图像对应的差分帧数据。

其中，在本申请的一些实施例中，处理单元包括：

第一处理子单元，用于若所述预设差异分类信息表征所述原始图像块的像素差值范围超过预设阈值，则直接将所述原始图像块设置为差分图像块；

第二处理子单元，用于若所述预设差异分类信息表征所述原始图像块的像素差值范围小于所述预设阈值，则根据所述原始图像块中原始像素点的像素值对所述原始图像块进行差分处理，得到差分图像块。

其中，在本申请的一些实施例中，第二处理子单元具体用于：

针对所述原始图像块中的每个原始像素点，计算所述原始像素点对应的像素差值；

将所述原始图像块中至少两个原始像素点的像素差值保存为一个目标像素点的字节信息；

根据各所述字节信息对应的目标像素点生成差分图像块。

其中，在本申请的一些实施例中，第二处理子单元具体还用于：

将所述原始图像块中相邻的至少两个原始像素点划分为一个像素组，其中，各个像素组中不包含相同的原始像素点；

计算所述像素组中各原始像素点的像素差值的平均值，得到像素组差值；

将至少两个像素组差值保存为一个目标像素点的字节信息；

根据各所述字节信息对应的目标像素点生成差分图像块。

其中，在本申请的一些实施例中，划分模块包括：

确定单元，用于根据所述图像差信息确定所述后一帧图像中每个像素点所属的预设差异分类信息，各个预设差异分类信息对应不同的像素差值范围；

划分单元，用于按照所述预设差异分类信息，以及各所述像素点在所述后一帧图像中的位置信息，将所述后一帧图像划分为至少一个原始图像块。

其中，在本申请的一些实施例中，该装置还包括播放模块，播放模块包括：

响应单元，用于响应于针对所述压缩后视频的播放操作，解析所述压缩后视频，得到至少两个存在时序的帧图像数据；

提取单元，用于针对每个帧图像数据，从所述帧图像数据中提取预设差异分类信息；

绘制单元，用于按照所述时序，基于所述预设差异分类信息对所述帧图像数据进行绘制。

第三方面，本申请实施例还提供了一种电子设备，电子设备包括存储器、处理器及存储在存储器中并可在处理器上运行的计算机程序，计算机程序被处理器执行时实现上述的视频处理方法中的步骤。

第四方面，本申请实施例还提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现上述的视频处理方法中的步骤。

第五方面，本申请实施例还提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行本申请实施例所述的各种可选实现方式中提供的方法。

本申请实施例获取待处理视频，该待处理视频包括至少两个前后相邻的帧图像，计算该待处理视频中相邻的两个帧图像的图像差信息，并按照预设差异分类信息和该图像差信息，将相邻的两个帧图像中的后一帧图像划分为至少一个原始图像块，以及按照该预设差异分类信息对应的差分处理策略对该原始图像块进行差分处理，得到后一帧图像对应的差分帧数据，并根据该待处理视频中的第一个帧图像以及所述待处理视频中除所述第一个帧图像以外的各帧图像的差分帧数据，得到压缩后视频。

其中，通过按照预设差异分类信息对帧图像的划分，实现将帧图像按照不同的图像差异进行分块，而通过预设差异分类信息对应的差分处理策略对各个原始图像块的差分处理，使得不同差异程度的图像块或者存在少量差异的图像块也可以被差分处理，相较于相关技术中只要图像块存在图像差异就一律进行完全保留的方案，本申请实施例实现对帧图像的精细化差分处理，能够对存在差异但是差异较小的图像块进行差分处理，提升视频的压缩程度。

附图说明

为了更清楚地说明本申请中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本申请实施例提供的视频处理方法的场景示意图；

图2是本申请实施例提供的视频处理方法的流程示意图；

图3是本申请实施例提供的前后相邻的两个帧图像的示意图；

图4是本申请实施例提供的原始图像块筛选的第一示意图；

图5是本申请实施例提供的原始图像块筛选的第二示意图；

图6是本申请实施例提供的差分处理的第一示意图；

图7是本申请实施例提供的差分处理的第二示意图；

图8是本申请实施例提供的压缩后视频对应的文件格式示意图；

图9是本申请实例提供的播放压缩后视频的流程示意图；

图10是本申请实施例提供的视频处理装置的结构示意图；

图11是本申请实施例提供的电子设备的结构示意图。

具体实施方式

下面将结合本申请中的附图，对本申请中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本申请实施例提供一种视频处理方法、装置、电子设备及计算机可读存储介质。具体地，本申请实施例提供适用于电子设备的视频处理装置，其中，电子设备包括终端设备或者服务器，该终端设备包括但不限于手机、平板电脑、笔记本电脑、台式机电脑等设备，服务器可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、内容分发网络(CDN，Content Delivery Network)、以及大数据和人工智能平台等基础云计算服务的云服务器，服务器可以通过有线或无线通信方式进行直接或间接地连接。

其中，在本申请实施例中，该视频处理方法可以由终端设备单独执行，或者由服务器单独执行，或者由终端设备和服务器共同执行，以下将以终端设备单独执行该视频处理方法为例，而服务器单独执行、以及服务器和终端设备共同执行该视频处理方法则可以参照进行理解，例如，请参阅图1，图1是本申请实施例提供的终端设备执行该视频处理方法的场景示意图，其中，该当前设备执行该视频处理方法的具体执行过程如下：

终端设备10获取待处理视频，该待处理视频包括至少两个前后相邻的帧图像，该终端设备10计算该待处理视频中相邻的两个帧图像的图像差信息，并按照预设差异分类信息和该图像差信息，将两个帧图像中的后一帧图像划分为至少一个原始图像块，以及，按照预设差异分类信息对应的差分处理策略对该原始图像块进行差分处理，得到后一帧图像对应的差分帧数据，随后，终端设备10根据待处理视频中的第一个帧图像，以及该待处理视频中除第一个帧图像以外的各帧图像的差分帧数据得到压缩后视频。

其中，在本申请实施例中，在获取到待处理视频后，还可以将该待处理视频发送至服务器，由服务器进行图像差信息的计算、原始图像块的划分，以及差分帧数据的计算，进而生成压缩后视频，并将服务器处理后得到的压缩后视频返回至终端设备。

综上，本申请实施例通过按照预设差异分类信息对帧图像的划分，实现将帧图像按照不同的图像差异进行分块，而通过预设差异分类信息对应的差分处理策略对各个原始图像块的差分处理，使得不同差异程度的图像块或者存在少量差异的图像块也可以被差分处理，相较于相关技术中只要图像块存在图像差异就一律进行完全保留的方案，本申请实施例实现对帧图像的精细化差分处理，能够对存在差异但是差异较小的图像块进行差分处理，提升视频的压缩程度。

以下分别进行详细说明。需说明的是，以下实施例的描述顺序不作为对实施例优先顺序的限定。

请参阅图2，图2为本申请实施例提供的视频处理方法的流程示意图。该视频处理方法的具体流程如下：

101、获取待处理视频，所述待处理视频包括至少两个前后相邻的帧图像。

可以理解的是，在本申请实施例中，待处理视频是需要进行压缩处理的视频，该待处理视频包含多个帧图像。相应的，该待处理视频也可以是帧动画对应的视频，其中，帧动画是包含多个具备序列的帧图像对应的视频。

其中，前后相邻指帧图像在编码过程中具备时间上的先后位置关系，在播放呈现时也具备绘制或者呈现时间的先后顺序。

其中，在本申请实施例中，该待处理视频可以是终端设备本地存储的视频，例如，打开终端设备本地目录，从文件夹中获取到待处理视频。也可以是访问服务器后在服务器搜索到的视频，例如，终端设备发送针对服务器的网页的访问请求，获取服务器返回的待处理视频。相应的，当从服务器获取待处理视频时，则可以在点击“压缩下载”控件后，进行该待处理视频的压缩处理，得到压缩后视频，并将该压缩后视频下载到本地。

102、计算所述待处理视频中相邻的两个帧图像的图像差信息。

需要说明的是，图像差信息反映两个图像的内容差异，例如，在本申请实施例中，图像差信息中记录了两个帧图像的像素差异信息，即，两个帧图像中对应位置的像素点的像素值的差。

其中，在本申请实施例中，可以通过两个帧图像中各个对应位置的像素点的像素值的差值的计算来得到图像差信息。

103、按照预设差异分类信息和所述图像差信息，将所述两个帧图像中的后一帧图像划分为至少一个原始图像块。

需要说明的是，预设差异分类信息是预先配置的差异分类信息，该差异分类信息反映差异的程度或者类型，例如，该差异分类信息可以包括差异小、差异大或者无差异等程度或者类型。其中，本申请实施例中的差异指的是像素点的像素值的差异，即像素值的差值大小。

其中，在本申请实施例中，原始图像块是后一帧图像中的一块图像，或者一个区域中的图像，是后一帧图像中的子图像。

例如，请参阅图3所示，图3是本申请实施例提供的前后相邻的两个帧图像的示意图，其中，左侧图为前一帧图像，右侧图为后一帧图像，按照预设差异分类信息和图像差信息，将后一帧图像划分为原始图像块A、原始图像块B和原始图像块C，其中，原始图像块A与左侧图中相应区域的图像无差异，原始图像块B与左侧图中相应区域的图像存在较小差异，原始图像块C与左侧图中相应区域的图像存在较大差异。

其中，通过预设差异分类信息将后一帧图像划分为多个原始图像块，使得各个原始图像块分别对应一个预设差异分类信息，有助于依据预设差异分类信息对各个原始图像块分别进行差分处理，提升图像差分处理的精细化程度。

104、按照所述预设差异分类信息对应的差分处理策略对所述原始图像块进行差分处理，得到所述后一帧图像对应的差分帧数据。

其中，通过各个原始图像块对应的预设差异分类信息，以及该预设差异分类信息对应的差分处理策略，可实现对各个原始图像块在不同程度、不同策略上的差分处理，提升图像差分处理的精细化程度，有助于提升视频的压缩程度，进一步缩小视频压缩后的大小。

其中，在本申请实施例中，每种差分处理策略对应不同的差分处理方式，或者差分处理逻辑。相应的，差分帧数据是差分处理的结果，即差分结果数据，是像素数据在差分压缩处理后得到的编码数据。

105、根据所述待处理视频中的第一个帧图像以及所述待处理视频中除所述第一个帧图像以外的各帧图像的差分帧数据，得到压缩后视频。

可以理解的是，由于差分处理事以第一个帧图像为参照，即以第一个帧图像为起点，因此，针对第一个帧图像则不做差分处理，即保留该第一针图像的图像数据，相应的，基于该第一个帧图像以及待处理视频中除该第一个帧图像以外的各帧图像的差分帧数据得到压缩后视频。

其中，基于第一个帧图像及各个帧图像的差分帧数据得到压缩后视频，则可以帧数据拼接组合的方式得到，例如，按照各个帧图像在待处理视频中的编码顺序进行第一个帧图像以及各个差分帧数据的拼接。

综上，本申请实施例通过按照预设差异分类信息对帧图像的划分，实现将帧图像按照不同的图像差异进行分块，而通过预设差异分类信息对应的差分处理策略对各个原始图像块的差分处理，使得不同差异程度的图像块或者存在少量差异的图像块也可以被差分处理，相较于相关技术中只要图像块存在图像差异就一律进行完全保留的方案，本申请实施例实现对帧图像的精细化差分处理，能够对存在差异但是差异较小的图像块进行差分处理，提升视频的压缩程度。

可选的，在本申请实施例中，针对每个预设差异分类信息，可以分别配置对应的差分处理策略，相应的，针对每个原始图像块，则可以根据该原始图像块对应的预设差异分类信息，按照该预设差异分类信息对应的差分处理策略进行原始图像块的差分处理，即，可选的，在本申请的一些实施例中，步骤“按照所述预设差异分类信息对应的差分处理策略对所述原始图像块进行差分处理，得到所述后一帧图像对应的差分帧数据”，包括：

针对每一所述原始图像块，根据所述原始图像块对应的预设差异分类信息，按照所述预设差异分类信息对应的差分处理策略，对所述原始图像块进行差分处理，得到差分图像块；

根据各所述差分图像块，以及各所述差分图像块对应的原始图像块的位置信息、预设差异分类信息，得到所述后一帧图像对应的差分帧数据。

其中，通过各个原始图像块分别根据其对应的差分处理策略进行差分处理，有助于实现对个各个原始图像块的针对性压缩计算，有助于提升图像压缩的精细化程度，进而有助于提升视频的压缩率，充分降低视频的大小。

其中，在本申请实施例中，差分处理策略还包括差分处理和非差分处理，例如，针对像素值差异较大的原始图像块，则不进行差分处理，保持这部分的原始图像块。即，可选的，在本申请的一些实施例中，步骤“按照所述预设差异分类信息对应的差分处理策略，对所述原始图像块进行差分处理，得到差分图像块”，包括：

若所述预设差异分类信息表征所述原始图像块的像素差值范围超过预设阈值，则直接将所述原始图像块设置为差分图像块；

若所述预设差异分类信息表征所述原始图像块的像素差值范围小于所述预设阈值，则根据所述原始图像块中原始像素点的像素值对所述原始图像块进行差分处理，得到差分图像块。

可以理解的是，像素差值范围超过预设阈值，则认为原始图像块与前一帧图像中相应区域的图像块的内容差异较大，例如，像素值差异较大，比如，前后两帧图像中呈现了不同的内容。

其中，差分处理的目的是，用较小的字节信息记录图像信息，例如，仅记录像素差异的少量字节信息，代替原像素的较大字节信息，进而达到压缩的目的，但是，当像素差值范围较大时，则没有必要进行差分处理，保留原始图像块反而更能保证图像内容的准确性和完整性。

例如，针对像素点，该像素点的在各个颜色通道的像素值通常采用八个比特表示，而像素差值范围较小情况下，则差值表示远小于八个比特，比如，像素差值小于8(以下均指像素各颜色通道的差值小于8，如像素点rgba四个颜色通道的差值均小于8)时，每个颜色通道的像素差值则仅用三个比特即可表示，因此，用较小比特或者字节的像素差值信息代替原像素点的像素值，可充分实现对图像的压缩。反之，若差异较大，像素差值大于8时，则需要更多比特进行表示，则缺乏压缩的必要性。

而针对像素差值较小的原始图像块的差分处理，可以应用在现有的图像色彩渐变场景，例如，渐变指色彩存在差异，但是差异幅度较小，而本方案考虑到较小差异对视觉的影响较小，因此。可以采用对差异较小的原始图像块进行差分处理的方式，代替传统未对差异较小的原始图像块进行差分处理的方案，实现图像的差分表示，实现视频的压缩。

其中，在本申请实施例中，该预设阈值可以是一个范围值，例如，该预设阈值可以是像素差值0-8的范围，则像素差值在该原始阈值范围内的原始图像块则进行差分处理。

其中，在本申请实施例中，在对后一帧图像进行差分处理时，则可以先从后一帧图像中筛选出不需要进行差分处理的原始图像块，如图4所示，图4是本申请实施例提供的原始图像块筛选的第一示意图，其中，左侧图为前一帧图像，右侧图为后一帧图像，按照预设差异分类信息和图像差信息，将后一帧图像划分为原始图像块A、原始图像块B和原始图像块C，其中，原始图像块A与左侧图中相应区域的图像无差异，原始图像块B与左侧图中相应区域的图像存在较小差异，原始图像块C与左侧图中相应区域的图像存在较大差异。当需要进行差分处理时，则先筛选出不需要进行差分处理的原始图像块C，并直接将该原始图像块C保存在差分图像块，例如标记为Crop1。

进而，从后一帧图像中筛选出需要进行差分处理的原始图像块B，若需要差分处理的原始图像块包括两个，则可以分别对各个原始图像块B分别进行标记，例如，Crop2和Crop3，例如，请参阅图5所示，图5是本申请实施例提供的原始图像块筛选的第二示意图，其中，在筛选原始图像块C的基础上，筛选原始图像块B，以便对原始图像块B进行差分处理。

其中，由于差分处理是记录像素点的差值，而该差值所占的比特数或者字节数较少，因此，则可以考虑将两个或者两个以上的像素点对应的差值保存在一个像素点的像素值上，即，可选的，在本申请的一些实施例中，步骤“根据所述原始图像块中原始像素点的像素值对所述原始图像块进行差分处理，得到差分图像块”，包括：

针对所述原始图像块中的每个原始像素点，计算所述原始像素点对应的像素差值；

将所述原始图像块中至少两个原始像素点的像素差值保存为一个目标像素点的字节信息；

根据各所述字节信息对应的目标像素点生成差分图像块。

例如，将两个像素点在单颜色通道的3比特(二进制表示，像素差值小于等于8)的像素差值保存在一个像素点的单个颜色通道8比特位上。比如，请参阅图6所示，图6是本申请实施例提供的差分处理的第一示意图，其中，左侧为原始图像块，中间为差分图像块，右上为单个像素点(目标像素点)的高低位示意，该目标像素点1包括高四位和低四位，图中最右侧八个小方格每个小方格表示一个位，高四位用于保存第一个像素点的像素差值，低四位用于保存第二个像素点的像素差值。其中，在本申请实施例中，每个像素点包含rgba四个颜色通道(或分量)，每个颜色通道占8个比特位，相应的，图中最右侧每个小方格表示四个比特位，即图中第一横排的四个小方格分别记录像素点1在四个颜色通道的像素差值，即每个小方格能够存储单个颜色通道四个比特位的像素差值，其中，该小方格中三个比特位用于存储8以内的像素差值，剩余的一个比特位用于做差值正负的标记位。

相应的，基于此种方式进行的压缩，可使得图像大小约为原来的二分之一。比如，两个像素点的像素差值填充一个像素的8比特位时，则可使得图像大小约为原图像的二分之一，若三个像素点或者四个像素点的像素差值填充一个像素的8比特位，则可使得图像大小约为原图像的三分之一或者四分之一。

其中，通过对像素差值的准确记录，得到原始图像块对应的差分图像块，并基于该差分图像块得到差分帧数据，实现对像素值的准确记录，达到无损压缩的效果。

其中，由于人眼视觉对微小的差异的敏感程度较低，因此，在本申请实施例中，还可以记录相邻像素点的像素差值的均值，利用单个均值表征多个像素点的像素差值，以此达到更大程度压缩的目的，此种情况为有损压缩，即，可选的，在本申请的一些实施例中，步骤“根据所述原始图像块中原始像素点的像素值对所述原始图像块进行差分处理，得到差分图像块”，包括：

将所述原始图像块中相邻的至少两个原始像素点划分为一个像素组，其中，各个像素组中不包含相同的原始像素点；

计算所述像素组中各原始像素点的像素差值的平均值，得到像素组差值；

将至少两个像素组差值保存为一个目标像素点的字节信息；

根据各所述字节信息对应的目标像素点生成差分图像块。

其中，由于属于一个原始图像块中的多个像素点对应的像素差值范围较为接近，因此，用平均值表示，则仍具备一定的代表性和表示性，且在目标像素点中保存多个原始像素点对应的平均值，可以实现对多个原始像素点的像素差异信息的记载，能够更大程度的完成对图像的差分以及视频的压缩，例如，请参阅图7所示，图7是本申请实施例提供的差分处理的第二示意图，其中，左侧为原始图像块，中间为差分图像块，右上为单个像素点(目标像素点)的高低位示意，该目标像素点1同样包含高四位和低四位，与前述图6中描述的差分处理不同的是，在本申请实施例中，目标像素点的单个颜色通道的高位中记录的是相邻的两个像素点在单个颜色通道的像素差值的平均值，例如，目标像素点r颜色通道高四位记录的是原始图像块中相邻的两个像素点1和2在r颜色通道的像素差值的平均值。以此类推，实现图6中差分处理的一倍压缩。

相应的，在本申请实施例中，还可以基于图7的差分处理进行倍数的压缩处理，例如，计算相邻的三个、四个、五个或者六个等多个像素点在单个颜色通道的像素差值的平均值、将该平均值记录在目标像素点的一个位(表示高低位的小方格中)，以此实现更高倍数的压缩。

其中，在本申请实施例中，计算像素差值的平均值的相邻像素点，可以是横向、纵向或者斜向相邻的像素点，可以根据实际需要选择相邻的方式，在此对相邻的方式不作限定。

其中，在本申请实施例中，压缩的倍数，或者选取有损压缩还是无损压缩则可以基于原始图像块所属的预设差异分类信息进行选取确认，例如，对差异小的类型进行更细小类型的划分，将极小差异的原始图像块采用高倍数的有损压缩，将一般差异的原始图像块采用中倍数的有损压缩，将存在差异但未达到差异很大的原始图像块采用一倍的有损压缩或者无损压缩等。

可选的，在本申请实施例中，由于图像差信息包含了每个像素点的像素差异信息，因此，可以根据各个像素点的像素差异信息所属的预设差异分类信息，以及各个像素点在后一帧图像中的位置信息，划分得到原始图像块，即，可选的，在本申请的一些实施例中，步骤“按照预设差异分类信息和所述图像差信息，将所述两个帧图像中的后一帧图像划分为至少一个原始图像块”，包括：

根据所述图像差信息确定所述后一帧图像中每个像素点所属的预设差异分类信息，各个预设差异分类信息对应不同的像素差值范围；

按照所述预设差异分类信息，以及各所述像素点在所述后一帧图像中的位置信息，将所述后一帧图像划分为至少一个原始图像块。

例如，从图像差信息中提取每个像素点对应的像素差异信息，该像素差异信息是像素点的像素值与前一帧图像中对应位置的像素点的像素值的差值。基于各个像素点的像素差异信息判断各个像素点所属的预设差异分类信息，即判断该像素点属于无差异、差异小还是差异大等类型，然后根据同属于一个类型的多个像素点，以及该多个像素点之间的位置距离进行原始图像块的划分。

相应的，在本申请实施例中，各个帧图像对应的差分帧数据可以通过拼接的方式组成得到压缩后视频，例如，请参阅图8所示，图8是本申请实施例提供的压缩后视频对应的文件格式示意图，其中，图8中第一行为文件的总体信息，第二行为单个差分帧数据的信息，包括帧数据长度，以及差分图像块的数据，每个差分图像块(差分图像块数据)可以用Crop表示，如Crop1-n，n为原始图像块的总数量。第三行则为单个差分图像块数据的信息，其中包含了差分图像块数据的长度、位置信息(起始坐标X，Y，以及长宽等)、所属的预设差异分类信息(对应有相应的压缩类型，包括无损压缩、一倍、两倍或者多倍有损压缩等中的一种)和具体的差分图像块数据。

其中，在本申请实施例中，待处理视频中的第一个帧图像对应一个Crop，该Crop的预设差异分类信息为无差异，压缩类型为无压缩，即原图。

相应的，在播放过程中，则可以基于差分帧数据中各个差分图像块数据对应的预设差异分类信息(即压缩类型)进行逆向解压。即，可选的，在本申请的一些实施例中，步骤“根据所述待处理视频中的第一个帧图像以及所述待处理视频中除所述第一个帧图像以外的各帧图像的差分帧数据，得到压缩后视频”之后，该方法还包括：

响应于针对所述压缩后视频的播放操作，解析所述压缩后视频，得到至少两个存在时序的帧图像数据；

针对每个帧图像数据，从所述帧图像数据中提取预设差异分类信息；

按照所述时序，基于所述预设差异分类信息对所述帧图像数据进行绘制。

其中，帧图像数据是压缩后视频在解压后的每个帧图像，其在压缩时对应的是帧图像或者差分帧数据，相应的，针对需要进行解压缩的差分帧数据，则根据其对应的预设差异分类信息(压缩类型)进行逆向解压得到帧图像数据，进而可以基于时序进行绘制，播放帧动画或者视频。

例如，在播放压缩后视频时，解析出动画文件(压缩后视频对应的文件)中的每一帧的图像数据，读取里面的每一个Crop(第一帧只有一个Crop)，然后按照Crop的位置和长宽在指定位置画出图像，画出图像的规则为如果是原图，则直接画出，如果是无损压缩，则其内容为差异数据，把像素中的数据按对应位数取出，分别加减在对应的像素上，比如，请参阅图9所示，图9是本申请实例提供的播放压缩后视频的流程示意图，其中，针对不同类型的Crop，根据其压缩类型进行解压得到每一帧的图像数据，进而进行绘制。

相应的，在本申请实施例中，针对循环播放的帧动画或者视频，则在内存中存储一份帧动画的差分帧数据，不需要每次进行帧数据的解析，即在内存中缓存变化的差分帧数据，使内存得以减少，也只计算变化部分，使cpu占用率也得到降低。

综上，本申请实施例通过按照预设差异分类信息对帧图像的划分，实现将帧图像按照不同的图像差异进行分块，而通过预设差异分类信息对应的差分处理策略对各个原始图像块的差分处理，使得不同差异程度的图像块或者存在少量差异的图像块也可以被差分处理，相较于相关技术中只要图像块存在图像差异就一律进行完全保留的方案，本申请实施例实现对帧图像的精细化差分处理，能够对存在差异但是差异较小的图像块进行差分处理，提升视频的压缩程度。

其中，通过利用像素差值所占比特数的特点，将多个像素点的像素差值存入到一个像素点的字节上，实现单个目标像素点记录多个原始像素点像素差值信息的设计，实现图像的差分处理，进而实现视频的压缩。

其中，通过在播放时，基于压缩类型进行解压，实现压缩后视频对应的待处理视频的播放。

为便于更好的实施本申请的视频处理方法，本申请还提供一种基于上述视频处理方法的视频处理装置。其中名词的含义与上述视频处理方法中相同，具体实现细节可以参考方法实施例中的说明。

请参阅图10，图10是本申请实施例提供的视频处理装置的结构示意图，其中该视频处理装置具体可以如下：

获取模块201，用于获取待处理视频，所述待处理视频包括至少两个前后相邻的帧图像；

计算模块202，用于计算所述待处理视频中相邻的两个帧图像的图像差信息；

划分模块203，用于按照预设差异分类信息和所述图像差信息，将所述两个帧图像中的后一帧图像划分为至少一个原始图像块；

处理模块204，用于按照所述预设差异分类信息对应的差分处理策略对所述原始图像块进行差分处理，得到所述后一帧图像对应的差分帧数据；

生成模块205，用于根据所述待处理视频中的第一个帧图像以及所述待处理视频中除所述第一个帧图像以外的各帧图像的差分帧数据，得到压缩后视频。

可选的，在本申请的一些实施例中，处理模块204包括：

处理单元，用于针对每一所述原始图像块，根据所述原始图像块对应的预设差异分类信息，按照所述预设差异分类信息对应的差分处理策略，对所述原始图像块进行差分处理，得到差分图像块；

生成单元，用于根据各所述差分图像块，以及各所述差分图像块对应的原始图像块的位置信息、预设差异分类信息，得到所述后一帧图像对应的差分帧数据。

其中，在本申请的一些实施例中，处理单元包括：

第一处理子单元，用于若所述预设差异分类信息表征所述原始图像块的像素差值范围超过预设阈值，则直接将所述原始图像块设置为差分图像块；

第二处理子单元，用于若所述预设差异分类信息表征所述原始图像块的像素差值范围小于所述预设阈值，则根据所述原始图像块中原始像素点的像素值对所述原始图像块进行差分处理，得到差分图像块。

其中，在本申请的一些实施例中，第二处理子单元具体用于：

针对所述原始图像块中的每个原始像素点，计算所述原始像素点对应的像素差值；

将所述原始图像块中至少两个原始像素点的像素差值保存为一个目标像素点的字节信息；

根据各所述字节信息对应的目标像素点生成差分图像块。

其中，在本申请的一些实施例中，第二处理子单元具体还用于：

将所述原始图像块中相邻的至少两个原始像素点划分为一个像素组，其中，各个像素组中不包含相同的原始像素点；

计算所述像素组中各原始像素点的像素差值的平均值，得到像素组差值；

将至少两个像素组差值保存为一个目标像素点的字节信息；

根据各所述字节信息对应的目标像素点生成差分图像块。

其中，在本申请的一些实施例中，划分模块203包括：

确定单元，用于根据所述图像差信息确定所述后一帧图像中每个像素点所属的预设差异分类信息，各个预设差异分类信息对应不同的像素差值范围；

划分单元，用于按照所述预设差异分类信息，以及各所述像素点在所述后一帧图像中的位置信息，将所述后一帧图像划分为至少一个原始图像块。

其中，在本申请的一些实施例中，该装置还包括播放模块，播放模块包括：

响应单元，用于响应于针对所述压缩后视频的播放操作，解析所述压缩后视频，得到至少两个存在时序的帧图像数据；

提取单元，用于针对每个帧图像数据，从所述帧图像数据中提取预设差异分类信息；

绘制单元，用于按照所述时序，基于所述预设差异分类信息对所述帧图像数据进行绘制。

本申请实施例首先由获取模块201获取待处理视频，所述待处理视频包括至少两个前后相邻的帧图像，接着，由计算模块202计算所述待处理视频中相邻的两个帧图像的图像差信息，随后，由划分模块203按照预设差异分类信息和所述图像差信息，将所述两个帧图像中的后一帧图像划分为至少一个原始图像块，其后，由处理模块204按照所述预设差异分类信息对应的差分处理策略对所述原始图像块进行差分处理，得到所述后一帧图像对应的差分帧数据，然后，由生成模块205根据所述待处理视频中的第一个帧图像以及所述待处理视频中除所述第一个帧图像以外的各帧图像的差分帧数据，得到压缩后视频。

其中，本申请实施例通过按照预设差异分类信息对帧图像的划分，实现将帧图像按照不同的图像差异进行分块，而通过预设差异分类信息对应的差分处理策略对各个原始图像块的差分处理，使得不同差异程度的图像块或者存在少量差异的图像块也可以被差分处理，相较于相关技术中只要图像块存在图像差异就一律进行完全保留的方案，本申请实施例实现对帧图像的精细化差分处理，能够对存在差异但是差异较小的图像块进行差分处理，提升视频的压缩程度。

此外，本申请还提供一种电子设备，如图11所示，其示出了本申请所涉及的电子设备的结构示意图，具体来讲：

该电子设备可以包括一个或者一个以上处理核心的处理器301、一个或一个以上计算机可读存储介质的存储器302、电源303和输入单元304等部件。本领域技术人员可以理解，图11中示出的电子设备结构并不构成对电子设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：

处理器301是该电子设备的控制中心，利用各种接口和线路连接整个电子设备的各个部分，通过运行或执行存储在存储器302内的软件程序和/或模块，以及调用存储在存储器302内的数据，执行电子设备的各种功能和处理数据，从而对电子设备进行整体监控。可选的，处理器301可包括一个或多个处理核心；优选的，处理器301可集成应用处理器和调制解调处理器，其中，应用处理器主要处理操作系统、用户界面和应用程序等，调制解调处理器主要处理无线通信。可以理解的是，上述调制解调处理器也可以不集成到处理器301中。

存储器302可用于存储软件程序以及模块，处理器301通过运行存储在存储器302的软件程序以及模块，从而执行各种功能应用以及数据处理。存储器302可主要包括存储程序区和存储数据区，其中，存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等；存储数据区可存储根据电子设备的使用所创建的数据等。此外，存储器302可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器302还可以包括存储器控制器，以提供处理器301对存储器302的访问。

电子设备还包括给各个部件供电的电源303，优选的，电源303可以通过电源管理系统与处理器301逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源303还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。

该电子设备还可包括输入单元304，该输入单元304可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。

尽管未示出，电子设备还可以包括显示单元等，在此不再赘述。具体在本实施例中，电子设备中的处理器301会按照如下的指令，将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器302中，并由处理器301来运行存储在存储器302中的应用程序，从而实现本申请实施例提供的任一种视频处理方法中的步骤。

本申请实施例获取待处理视频，该待处理视频包括至少两个前后相邻的帧图像，计算该待处理视频中相邻的两个帧图像的图像差信息，并按照预设差异分类信息和该图像差信息，将相邻的两个帧图像中的后一帧图像划分为至少一个原始图像块，以及按照该预设差异分类信息对应的差分处理策略对该原始图像块进行差分处理，得到后一帧图像对应的差分帧数据，并根据该待处理视频中的第一个帧图像以及所述待处理视频中除所述第一个帧图像以外的各帧图像的差分帧数据，得到压缩后视频。

其中，通过按照预设差异分类信息对帧图像的划分，实现将帧图像按照不同的图像差异进行分块，而通过预设差异分类信息对应的差分处理策略对各个原始图像块的差分处理，使得不同差异程度的图像块或者存在少量差异的图像块也可以被差分处理，相较于相关技术中只要图像块存在图像差异就一律进行完全保留的方案，本申请实施例实现对帧图像的精细化差分处理，能够对存在差异但是差异较小的图像块进行差分处理，提升视频的压缩程度。

以上各个操作的具体实施可参见前面的实施例，在此不再赘述。

本领域普通技术人员可以理解，上述实施例的各种方法中的全部或部分步骤可以通过指令来完成，或通过指令控制相关的硬件来完成，该指令可以存储于一计算机可读存储介质中，并由处理器进行加载和执行。

为此，本申请提供一种计算机可读存储介质，该计算机可读存储介质上存储有计算机程序，该计算机程序能够被处理器进行加载，以执行本申请所提供的任一种视频处理方法中的步骤。

以上各个操作的具体实施可参见前面的实施例，在此不再赘述。

其中，该计算机可读存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，Random Access Memory)、磁盘或光盘等。

由于该计算机可读存储介质中所存储的指令，可以执行本申请所提供的任一种视频处理方法中的步骤，因此，可以实现本申请所提供的任一种视频处理方法所能实现的有益效果，详见前面的实施例，在此不再赘述。

以上对本申请所提供的一种视频处理方法、装置、电子设备以及计算机可读存储介质进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上，本说明书内容不应理解为对本发明的限制。

其中，需要说明的是，在本申请的具体实施方式中，涉及到帧图像的像素值、相邻两帧图像的像素差值等相关的数据，当本申请以上实施例运用到具体产品或技术中时，需要获得用户许可或者同意，且相关数据的收集、使用和处理需要遵守相关国家和地区的相关法律法规和标准。

Claims (10)

1.一种视频处理方法，其特征在于，包括：

获取待处理视频，所述待处理视频包括至少两个前后相邻的帧图像；

计算所述待处理视频中相邻的两个帧图像的图像差信息；

按照预设差异分类信息和所述图像差信息，将所述两个帧图像中的后一帧图像划分为至少一个原始图像块；

按照所述预设差异分类信息对应的差分处理策略对所述原始图像块进行差分处理，得到所述后一帧图像对应的差分帧数据；

根据所述待处理视频中的第一个帧图像以及所述待处理视频中除所述第一个帧图像以外的各帧图像的差分帧数据，得到压缩后视频。

2.根据权利要求1所述的视频处理方法，其特征在于，所述按照所述预设差异分类信息对应的差分处理策略对所述原始图像块进行差分处理，得到所述后一帧图像对应的差分帧数据，包括：

针对每一所述原始图像块，根据所述原始图像块对应的预设差异分类信息，按照所述预设差异分类信息对应的差分处理策略，对所述原始图像块进行差分处理，得到差分图像块；

根据各所述差分图像块，以及各所述差分图像块对应的原始图像块的位置信息、预设差异分类信息，得到所述后一帧图像对应的差分帧数据。

3.根据权利要求2所述的视频处理方法，其特征在于，所述按照所述预设差异分类信息对应的差分处理策略，对所述原始图像块进行差分处理，得到差分图像块，包括：

若所述预设差异分类信息表征所述原始图像块的像素差值范围超过预设阈值，则直接将所述原始图像块设置为差分图像块；

若所述预设差异分类信息表征所述原始图像块的像素差值范围小于所述预设阈值，则根据所述原始图像块中原始像素点的像素值对所述原始图像块进行差分处理，得到差分图像块。

4.根据权利要求3所述的视频处理方法，其特征在于，所述根据所述原始图像块中原始像素点的像素值对所述原始图像块进行差分处理，得到差分图像块，包括：

针对所述原始图像块中的每个原始像素点，计算所述原始像素点对应的像素差值；

将所述原始图像块中至少两个原始像素点的像素差值保存为一个目标像素点的字节信息；

根据各所述字节信息对应的目标像素点生成差分图像块。

5.根据权利要求3所述的视频处理方法，其特征在于，所述根据所述原始图像块中原始像素点的像素值对所述原始图像块进行差分处理，得到差分图像块，包括：

将所述原始图像块中相邻的至少两个原始像素点划分为一个像素组，其中，各个像素组中不包含相同的原始像素点；

计算所述像素组中各原始像素点的像素差值的平均值，得到像素组差值；

将至少两个像素组差值保存为一个目标像素点的字节信息；

根据各所述字节信息对应的目标像素点生成差分图像块。

6.根据权利要求1所述的视频处理方法，其特征在于，所述按照预设差异分类信息和所述图像差信息，将所述两个帧图像中的后一帧图像划分为至少一个原始图像块，包括：

根据所述图像差信息确定所述后一帧图像中每个像素点所属的预设差异分类信息，各个预设差异分类信息对应不同的像素差值范围；

按照所述预设差异分类信息，以及各所述像素点在所述后一帧图像中的位置信息，将所述后一帧图像划分为至少一个原始图像块。

7.根据权利要求1所述的视频处理方法，其特征在于，所述根据所述待处理视频中的第一个帧图像以及所述待处理视频中除所述第一个帧图像以外的各帧图像的差分帧数据，得到压缩后视频之后，所述方法还包括：

响应于针对所述压缩后视频的播放操作，解析所述压缩后视频，得到至少两个存在时序的帧图像数据；

针对每个帧图像数据，从所述帧图像数据中提取预设差异分类信息；

按照所述时序，基于所述预设差异分类信息对所述帧图像数据进行绘制。

8.一种视频处理装置，其特征在于，包括：

获取模块，用于获取待处理视频，所述待处理视频包括至少两个前后相邻的帧图像；

计算模块，用于计算所述待处理视频中相邻的两个帧图像的图像差信息；

划分模块，用于按照预设差异分类信息和所述图像差信息，将所述两个帧图像中的后一帧图像划分为至少一个原始图像块；

处理模块，用于按照所述预设差异分类信息对应的差分处理策略对所述原始图像块进行差分处理，得到所述后一帧图像对应的差分帧数据；

生成模块，用于根据所述待处理视频中的第一个帧图像以及所述待处理视频中除所述第一个帧图像以外的各帧图像的差分帧数据，得到压缩后视频。

9.一种电子设备，其特征在于，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如权利要求1-7任一项所述的视频处理方法中的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1-7任一项所述的视频处理方法中的步骤。