CN105847849A - 视频帧检测方法、装置、视频帧处理系统及计算机设备 - Google Patents

Abstract

本发明实施例提供一种视频帧检测方法、装置、视频帧处理系统及计算机设备，所述方法包括：获取经编码的视频帧；对所述视频帧进行解码，得到解码的视频帧；从所述解码的视频帧中提取第一标识图像；将所述第一标识图像分别与源标识图像组中的第二标识图像进行相似度计算；从所述计算出的相似度值当中选取相似度最高的相似度值；如果最高的相似度值大于或等于相似度阈值，则确定所述视频帧被成功编码。本发明实施例提供的技术方案，通过对解码的视频帧中提取的第一标识图像与源标识图像组中的第二标识图像的相似度计算的结果，自动确定所述视频帧是否被成功编码。

Description

视频帧检测方法、装置、视频帧处理系统及计算机设备

技术领域

本发明涉及视频技术领域，尤其涉及一种视频帧检测方法、装置、视频帧处理系统及计算机设备。

背景技术

视频传输过程先对视频帧进行编码后再传输，如果在视频帧编码前的数量为N帧，编码后再传输再解码后得到的视频帧的数量为M帧，M小于N的话，就可以知道出现了视频帧未编码成功的情况。然而，在视频传输过程中，可能会存在某一帧未编码成功，而其他帧编码后传输两次的情况，这样在视频帧编码前的数量为N帧，编码后再传输再解码后得到的视频帧的数量也为N帧，仅从编码前视频帧的数量和解码后的视频帧的数量上无法确定是否有视频帧未编码成功。

发明内容

本发明的目的在于，提供一种视频帧检测方法、装置、视频帧处理系统及计算机设备，自动对视频帧是否编码成功进行检测。

根据本发明的一方面，提供一种视频帧检测方法，所述方法包括：获取经编码的视频帧；对所述视频帧进行解码，得到解码的视频帧；从所述解码的视频帧中提取第一标识图像；将所述第一标识图像分别与源标识图像组中的第二标识图像进行相似度计算；从所述计算出的相似度值当中选取相似度最高的相似度值；如果最高的相似度值大于或等于相似度阈值，则确定所述视频帧被成功编码。

根据本发明的另一方面，还提供一种视频帧检测装置，所述装置包括：视频帧获取单元，用于获取经编码的视频帧；解码单元，用于对所述视频帧获取单元获取的视频帧进行解码，得到解码的视频帧；图像提取单元，用于从所述解码单元解码的视频帧中提取第一标识图像；相似度计算单元，用于将所述图像提取单元提取的第一标识图像分别与源标识图像组中的第二标识图像进行相似度计算；第一检测单元，用于从所述相似度计算单元计算出的相似度值当中选取相似度最高的相似度值；如果最高的相似度值大于或等于相似度阈值，则确定所述视频帧被成功编码。

根据本发明的另一方面，还提供一种视频帧处理系统，包括视频帧发送端和如前所述的视频帧检测装置，所述视频帧发送端用于在视频帧中的第一标识图像中标记上标识，并将标记后的视频帧编码后发送给所述视频帧检测装置。

根据本发明的另一方面，还提供一种用于视频帧检测的计算机设备，所述计算机设备包括：一个或多个处理器；存储器；一个或多个程序，所述一个或多个程序存储在所述存储器中，且经配置以由所述一个或者多个处理器执行所述一个或者多个程序包含的用于执行如前所述的视频帧检测方法的指令。

本发明实施例提供的视频帧检测方法、装置、视频帧处理系统及计算机设备，通过对解码的视频帧中的第一标识图像与源标识图像组中的第二标识图像的相似度计算的结果，自动确定所述视频帧是否被成功编码，节省了人力成本。特别地，在视频帧数据量大的情况下，准确地确定视频帧是否被成功编码，进而确定执行编码操作的视频编码器的性能。

附图说明

图1示出本发明实施例一中视频帧检测方法的流程示意图；

图2示出本发明实施例一中第二标识图像的示意图；

图3示出本发明实施例二中视频帧检测装置的结构示意图。

具体实施方式

下面结合附图详细描述本发明的示例性实施例。

实施例一

图1示出本发明实施例一中视频帧检测方法的流程示意图，如图1所示，视频帧检测方法包括如下步骤。

在S110，获取经编码的视频帧。

视频编码是指通过特定的压缩技术，将某个格式的视频文件转换成另一种格式的视频文件。通常所说的视频文件中包括视频、音频和/或脚本。其中，视频可以认为是由多个视频帧组成的集合；视频帧的编码是指为了数据传输的需要，将视频帧进行压缩的过程；而视频编码器，是指对视频进行压缩的程序或者设备。

在S120，对所述视频帧进行解码，得到解码的视频帧。

与编码相对应的，视频解码是指对经编码后的视频帧的解压缩的过程。视频可以认为是一张一张快速播放的图片，由于肉眼的视觉暂留现象，才使人感到画面是连续的。因此，将视频解码，可以分别得到任一帧视频数据，一个视频帧包括一张图片。

在S130，从所述解码的视频帧中提取第一标识图像。

图2示出本发明实施例一中第二标识图像的示意图，参见图2，可选地，可以预先设置方形点阵作为所述第二标识图像21，所述方形点阵中标识点阵的颜色为黑色以及未标识点阵的颜色为白色，所述标识点阵对应所述第二标识图像中所标记的标识22。其中，方形点阵的预定大小根据视频帧的分辨率确定，当视频帧的分辨率小于720p时，即视频帧为非高清的视频帧时，可以设置预定大小为16像素*16像素，当然，也可以设置成其他的尺寸，尺寸不可设置的太大，尽量减少对视频帧中主要显示内容的影响。在本实施例中，以预定大小为16像素*16像素为例。可选地，本实施例中的标识包括但不限于数字、字母和/或图案。在本实施例中，以标识为数字1为例进行说明，图2的中心位置的黑色点阵组成数字1。

可选地，当所述视频帧的分辨率小于720p时，截取所述视频帧中的左上角的16像素*16像素的图像区域作为所述第一标识图像，相对应的，第二标识图像也为16像素*16像素的图像；或者，当所述视频帧的分辨率大于或等于720p时，截取所述视频帧中的左上角的32像素*32像素的图像区域作为所述第一标识图像，相对应的，第二标识图像也为32像素*32像素的图像。

可选地，在对视频帧编码前，还可以预先在所述视频帧中的第一标识图像上标记所述标识。例如，源标识图像组中包括100张第二标识图像每张第二标识图像上分别标记上标识1、2、3…100，在将对应的100个视频帧编码之前，预先在100个视频帧的第一标识图像中标记上对应的标识1、2、3…100。

在S140，将所述第一标识图像分别与源标识图像组中的第二标识图像进行相似度计算。

可选地，将所述第一标识图像进行灰度处理；根据所述第二标识图像中的标识点阵查找灰度处理后的第一标识图像中对应的第一点阵；根据所述标识点阵和所述第一点阵进行相似度计算。

在S150，从所述计算出的相似度值当中选取相似度最高的相似度值。

在S160，判断最高的相似度值是否大于或等于相似度阈值，如果大于或等于相似度阈值，则转入S170；否则，结束这一视频帧的检测。

在S170，确定所述视频帧被成功编码。

例如，源标识图像组中包括100张第二标识图像，每张第二标识图像上分别标记上标识1、2、3…100，对应100个视频帧中分别标记上标识1、2、3…100，将编码后的视频帧解码后，假设某一视频帧中的第一标识图像上的标识为1，将该视频帧分别与100张第二标识图像进行比较，得到100个相似度值，将这100个相似度值排序后，其中最高的相似度值与相似度阈值比较，例如，相似度阈值为90％，该视频帧对应的最高的相似度值为93％，大于相似度阈值，则确定该视频帧被成功编码。

可选地，所述方法还包括S180。

在S180，根据最高相似度值对应的第二标识图像输出对应的标识。

以视频帧中的第一标识图像上的标识为1为例，其分别与100张第二标识图像进行比较，得到100个相似度值，其中最高的相似度值为93％，大于相似度阈值90％，该最高相似度值对应的第二标识图像为标记上数字1的第二标识图像，则输出对应的标识数字1。

进一步地，在根据最高相似度值对应的第二标识图像输出对应的标识的处理之后，所述方法还包括：检测输出对应的标识中是否有相同的标识；如果有相同的标识，则标记相同的标识对应的视频帧为重复视频帧。有可能会存在视频帧被重复编码或者重复传输的情况，这样对应输出的标识中也会有相同的标识，如果有相同的标识，则标记相同的标识对应的视频帧为重复视频帧，进一步提高检测准确性。

本发明实施例提供的技术方案，通过对解码的视频帧中提取的第一标识图像与源标识图像组中的第二标识图像的相似度计算的结果，自动确定所述视频帧是否被成功编码，节省了人力成本。特别地，在视频帧数据量大的情况下，准确地确定视频帧是否被成功编码，进一步可以用来确定执行编码操作的视频编码器的性能。

实施例二

图3示出本发明实施例二中视频帧检测装置的结构示意图，本实施例中的视频帧检测装置用于执行实施例一中的视频帧检测方法，参见图3，一种视频帧检测装置包括视频帧获取单元310、解码单元320、图像提取单元330、相似度计算单元340和第一检测单元350。

视频帧获取单元310，用于获取经编码的视频帧。

解码单元320，用于对所述视频帧获取单元获取的视频帧进行解码，得到解码的视频帧。

图像提取单元330，用于从所述解码单元解码的视频帧中提取第一标识图像。

相似度计算单元340，用于将所述图像提取单元提取的第一标识图像分别与源标识图像组中的第二标识图像进行相似度计算。

第一检测单元350，用于从所述相似度计算单元计算出的相似度值当中选取相似度最高的相似度值；如果最高的相似度值大于或等于相似度阈值，则确定所述视频帧被成功编码。

进一步地，所述装置还包括标识输出单元。

标识输出单元(图中未示出)，用于根据所述第一检测单元确定的被成功编码的视频帧对应的第二标识图像输出对应的标识。

进一步地，所述标识为数字、字母和/或图案。

进一步地，所述装置还包括第二检测单元。

第二检测单元(图中未示出)，用于检测所述标识输出单元输出的对应的标识中是否有相同的标识；如果有相同的标识，则标记相同的标识对应的视频帧为重复视频帧。

进一步地，所述图像提取单元包括第一图像提取子单元或者第二图像提取子单元。

第一图像提取子单元(图中未示出)，用于当所述解码单元解码的所述视频帧的分辨率小于720p时，截取所述视频帧中的左上角的16像素*16像素的图像区域作为所述第一标识图像。

第二图像提取子单元(图中未示出)，用于当所述解码单元解码的所述视频帧的分辨率大于或等于720p时，截取所述视频帧中的左上角的32像素*32像素的图像区域作为所述第一标识图像。

本发明实施例提供的技术方案，通过对解码的视频帧中提取的第一标识图像与源标识图像组中的第二标识图像的相似度计算的结果，自动确定所述视频帧是否被成功编码，节省了人力成本。特别地，在视频帧数据量大的情况下，准确地确定视频帧是否被成功编码，进一步可以用来确定执行编码操作的视频编码器的性能。

实施例三

本实施例提供的一种视频帧处理系统，所述系统包括视频帧发送端和如实施例二所述的视频帧检测装置，所述视频帧发送端用于在视频帧中的第一标识图像中标记上标识，并将标记后的视频帧编码后发送给所述视频帧检测装置。

其中，所述视频发送端可以集成在客户端也可以集成在服务器中，还可以集成在视频编码器中。

进一步地，所述视频帧检测装置还用于设置方形点阵作为所述第二标识图像，所述方形点阵中标识点阵的颜色为黑色以及未标识点阵的颜色为白色，所述标识点阵对应所述第二标识图像中所标记的标识，并将所述第二标识图像发送给所述视频帧发送端。

进一步地，所述视频帧检测装置具体用于将所述第一标识图像进行灰度处理，根据所述第二标识图像中的标识点阵查找灰度处理后的第一标识图像中对应的第一点阵；并根据所述标识点阵和所述第一点阵进行相似度计算。

本发明实施例提供的技术方案，通过对解码的视频帧中提取的第一标识图像与源标识图像组中的第二标识图像的相似度计算的结果，自动确定所述视频帧是否被成功编码，节省了人力成本。特别地，在视频帧数据量大的情况下，准确地确定视频帧是否被成功编码，进一步可以用来确定执行编码操作的视频编码器的性能。

实施例四

本实施例提供一种用于视频帧检测的计算机设备，所述计算机设备包括：一个或多个处理器；存储器；一个或多个程序，所述一个或多个程序存储在所述存储器中，且经配置以由所述一个或者多个处理器执行所述一个或者多个程序包含的用于执行如实施例一所述的视频帧检测方法的指令。

本发明实施例提供的技术方案，通过对解码的视频帧中提取的第一标识图像与源标识图像组中的第二标识图像的相似度计算的结果，自动确定所述视频帧是否被成功编码，节省了人力成本。特别地，在视频帧数据量大的情况下，准确地确定视频帧是否被成功编码，进一步可以用来确定执行编码操作的视频编码器的性能。

上述根据本发明的方法可在硬件、固件中实现，或者被实现为可存储在记录介质(诸如CD ROM、RAM、软盘、硬盘或磁光盘)中的软件或计算机代码，或者被实现通过网络下载的原始存储在远程记录介质或非暂时机器可读介质中并将被存储在本地记录介质中的计算机代码，从而在此描述的方法可被存储在使用通用计算机、专用处理器或者可编程或专用硬件(诸如ASIC或FPGA)的记录介质上的这样的软件处理。可以理解，计算机、处理器、微处理器控制器或可编程硬件包括可存储或接收软件或计算机代码的存储组件(例如，RAM、ROM、闪存等)，当所述软件或计算机代码被计算机、处理器或硬件访问且执行时，实现在此描述的处理方法。此外，当通用计算机访问用于实现在此示出的处理的代码时，代码的执行将通用计算机转换为用于执行在此示出的处理的专用计算机。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (17)

1.一种视频帧检测方法，其特征在于，所述方法包括：

获取经编码的视频帧；

对所述视频帧进行解码，得到解码的视频帧；

从所述解码的视频帧中提取第一标识图像；

将所述第一标识图像分别与源标识图像组中的第二标识图像进行相似度计算；

从所述计算出的相似度值当中选取相似度最高的相似度值；

如果最高的相似度值大于或等于相似度阈值，则确定所述视频帧被成功编码。

2.根据权利要求1所述的检测方法，其特征在于，所述如果最高的相似度值大于或等于相似度阈值，则确定所述视频帧被成功编码之后，所述方法还包括：

根据最高相似度值对应的第二标识图像输出对应的标识。

3.根据权利要求2所述的检测方法，其特征在于，所述标识为数字、字母和/或图案。

4.根据权利要求2或3所述的检测方法，其特征在于，所述根据最高相似度值对应的第二标识图像输出对应的标识的处理之后，所述方法还包括：

检测输出对应的标识中是否有相同的标识；

如果有相同的标识，则标记相同的标识对应的视频帧为重复视频帧。

5.根据权利要求1所述的检测方法，其特征在于，所述从所述解码的视频帧中提取第一标识图像的处理包括：

当所述视频帧的分辨率小于720p时，截取所述视频帧中的左上角的16像素*16像素的图像区域作为所述第一标识图像；或者，

当所述视频帧的分辨率大于或等于720p时，截取所述视频帧中的左上角的32像素*32像素的图像区域作为所述第一标识图像。

6.根据权利要求5所述的检测方法，其特征在于，在所述获取经编码的视频帧的处理之前，所述方法还包括：

设置方形点阵作为所述第二标识图像，所述方形点阵中标识点阵的颜色为黑色以及未标识点阵的颜色为白色，所述标识点阵对应所述第二标识图像中所标记的标识。

7.根据权利要求6所述的检测方法，其特征在于，在所述设置方形点阵作为所述第二标识图像的处理之后，在所述获取经编码的视频帧的处理之前，所述方法还包括：

在所述视频帧中的第一标识图像上标记所述标识。

8.根据权利要求7所述的检测方法，其特征在于，所述将所述第一标识图像分别与源标识图像组中的第二标识图像进行相似度计算的处理包括：

将所述第一标识图像进行灰度处理；

根据所述第二标识图像中的标识点阵查找灰度处理后的第一标识图像中对应的第一点阵；

根据所述标识点阵和所述第一点阵进行相似度计算。

9.一种视频帧检测装置，其特征在于，所述装置包括：

视频帧获取单元，用于获取经编码的视频帧；

解码单元，用于对所述视频帧获取单元获取的视频帧进行解码，得到解码的视频帧；

图像提取单元，用于从所述解码单元解码的视频帧中提取第一标识图像；

相似度计算单元，用于将所述图像提取单元提取的第一标识图像分别与源标识图像组中的第二标识图像进行相似度计算；

第一检测单元，用于从所述相似度计算单元计算出的相似度值当中选取相似度最高的相似度值；如果最高的相似度值大于或等于相似度阈值，则确定所述视频帧被成功编码。

10.根据权利要求9所述的检测装置，其特征在于，所述装置还包括：

标识输出单元，用于根据所述第一检测单元确定的被成功编码的视频帧对应的第二标识图像输出对应的标识。

11.根据权利要求10所述的检测装置，其特征在于，所述标识为数字、字母和/或图案。

12.根据权利要求10或11所述的检测装置，其特征在于，所述装置还包括：

第二检测单元，用于检测所述标识输出单元输出的对应的标识中是否有相同的标识；如果有相同的标识，则标记相同的标识对应的视频帧为重复视频帧。

13.根据权利要求9所述的检测装置，其特征在于，所述图像提取单元包括：

第一图像提取子单元，用于当所述解码单元解码的所述视频帧的分辨率小于720p时，截取所述视频帧中的左上角的16像素*16像素的图像区域作为所述第一标识图像；或者，

第二图像提取子单元，用于当所述解码单元解码的所述视频帧的分辨率大于或等于720p时，截取所述视频帧中的左上角的32像素*32像素的图像区域作为所述第一标识图像。

14.一种视频帧处理系统，其特征在于，所述系统包括视频帧发送端和如权利要求9至13任一项所述的视频帧检测装置，所述视频帧发送端用于在视频帧中的第一标识图像中标记上标识，并将标记后的视频帧编码后发送给所述视频帧检测装置。

15.根据权利要求14所述的处理系统，其特征在于，所述视频帧检测装置还用于设置方形点阵作为所述第二标识图像，所述方形点阵中标识点阵的颜色为黑色以及未标识点阵的颜色为白色，所述标识点阵对应所述第二标识图像中所标记的标识，并将所述第二标识图像发送给所述视频帧发送端。

16.根据权利要求15所述的处理系统，其特征在于，所述视频帧检测装置具体用于将所述第一标识图像进行灰度处理，根据所述第二标识图像中的标识点阵查找灰度处理后的第一标识图像中对应的第一点阵；并根据所述标识点阵和所述第一点阵进行相似度计算。

17.一种用于视频帧检测的计算机设备，其特征在于，所述计算机设备包括：

一个或多个处理器；

存储器；

一个或多个程序，所述一个或多个程序存储在所述存储器中，且经配置以由所述一个或者多个处理器执行所述一个或者多个程序包含的用于执行如权利要求1至8任一项所述的视频帧检测方法的指令。