CN107018406A - 视频信息处理方法及装置 - Google Patents

Abstract

本发明是关于一种视频信息处理方法及装置，该方法包括：获取原始视频内视频帧的特征信息；获取与所述特征信息相对应的参考图像；将所述参考图像叠加到所述原始视频内的预设位置上，得到评估视频；发送所述评估视频、所述预设位置和所述特征信息，以使得所述评估视频的接收方从所述评估视频中预设位置上提取所述参考图像，以及，利用所述参考图像和与所述特征信息对应的评估图像确定所述评估视频的视频质量。由于该方法获取到的参考图像和原始视频内视频帧的特征相近，这样在传输过程中，评估视频中的参考图像的受损程度与视频帧的受损程度比较一致，因此，在后续利用参考图像对评估视频的视频质量进行评估时，可以提高评估的准确性。

Description

视频信息处理方法及装置

技术领域

本发明涉及视频技术领域，特别是涉及一种视频信息处理方法及装置。

背景技术

随着网络带宽的不断提升，智能移动终端硬件性能的提高，以及用户需求的变化，视频业务越来越受到大众青睐。然而视频在编码、网络传输、以及解码和回放的过程中很容易受到各种损伤，导致视频信号失真、视频质量下降。因此，只有对视频业务质量进行准确评估，才可能找到视频质量下降原因，进而帮助视频业务提供商及时了解业务运营状况，帮助网络运营商迅速定位故障，以实现进一步提升用户体验质量，以留住用户群并扩大用户规模，是视频业务提供商和网络运营商共同关注的重点。

对视频质量进行评估的方法主要包括：主观质量评估法与客观质量评估法。其中，主观评估法通过用户对视频质量的反馈来进行评估，所以容易受测试人员的影响，时效性差，无法自动化实现。而客观质量评估法，由于在测试过程中无需人的参与，评估指标的计算采用技术方法自动实现，具有较强的可实现性，不易受外部或人为的因素影响，是目前主流的视频质量评估方法。

客观视频质量评估方法需要将原始视频数据作为参考，与经过编码、信道传输、解码后所输出的视频数据进行比对，根据比对结果对视频质量进行评估。目前常用的视频质量评估方法是在原始视频的图像内加入一个设定水印，然后接收方在接收到视频后，从视频中提取水印，并将提取到的水印与原始水印进行对比，根据对比结果确定视频的视频质量。

通过研究，申请人发现，前述利用水印对视频质量进行评估的方法，通常需要将水印嵌入到原始视频的图像中，而水印图案在传输过程中更容易受到损伤，导致水印和视频画面的受损程度不一致。因此，通过这种水印在进行视频质量评估时，无法准确反映出视频的视频质量。

发明内容

本发明实施例中提供了一种视频信息处理方法及装置，以解决现有技术中利用水印进行视频质量评估时存在评估质量低的问题。

为了解决上述技术问题，本发明实施例公开了如下技术方案：

第一方面，本发明实施例提供了一种视频信息处理方法，包括：

获取原始视频内视频帧的特征信息；

获取与所述特征信息相对应的参考图像；

将所述参考图像叠加到所述原始视频内的预设位置上，得到评估视频；

发送所述评估视频、所述预设位置和所述特征信息，以使得所述评估视频的接收方从所述评估视频中预设位置上提取所述参考图像，以及，利用所述参考图像和与所述特征信息对应的评估图像确定所述评估视频的视频质量。

本发明提供的该方法，在视频发送之前，可以先获取能够表征原始视频内视频帧中的图像特征的特征信息，然后以该特征信息为依据，获取与该特征信息相对应的参考图像，这样也使得获取到的参考图像和视频帧中的特征产生关联，然后将该参考图像叠加到原始视频内的预设位置，得到评估视频，最终将该评估视频、预设位置和特征信息一起发送给视频接收方。以使得视频接收方可以根据预设位置和特征信息对评估视频的视频质量进行评估。

结合第一方面，在第一方面第一种可能的实现方式中，所述获取原始视频内视频帧的特征信息，包括：

获取至少一个预设特征；

分别提取所述原始视频内至少一个视频帧中所述至少一个预设特征的特征值。

本发明实施例提供的该方法，在获取预设特征时，可以根据原始视频内视频帧的图像特点来确定要获取的预设特征的类型以及预设特征的数量，这样使得获取到的预设特征的特征值能够和视频帧中图像的特点相一致。

结合第一方面或第一方面第一种可能的实现方式，在第一方面第二种可能的实现方式中，所述将所述参考图像叠加到所述原始视频内的预设位置上，得到评估视频，包括：

获取所述至少一个视频帧中多个视频帧中的预设叠加区域；

将所述参考图像整体或分割后叠加到与所述参考图像对应视频帧中的预设叠加区域上，得到所述评估视频。

本发明实施例提供的该方法，在将参考图像叠加到原始视频内时，可以将参考图像整体加入到视频帧内，或者以拼接的方式将参考图像分割后加入到视频帧内，可以使得参考图像能够融入到视频帧内，进而在编码处理时，可以使得参考图像和视频帧的受损程度一致。

结合第一方面，在第一方面第三种可能的实现方式中，所述获取原始视频内视频帧的特征信息，包括：

获取至少一个预设特征；

获取所述原始视频内预设视频流中多个视频帧中所述至少一个预设特征的特征值；

根据所述预设视频流中多个视频帧中所述至少一个预设特征的特征值，确定与所述预设视频流对应的综合特征值。

本发明实施例提供的该方法，在需要对视频流进行处理时，可以获取预设视频流内多个视频帧的至少一个预设特征的综合特征值，这样在选取参考图像时，可以直接以该综合特征值为依据进行选择，相比于每个视频帧选取一个参考图像，该方法选取参考图像的效率更高。

结合第一方面或第一方面第三种可能的实现方式，在第一方面第四种可能的实现方式中，所述将所述参考图像叠加到所述原始视频内的预设位置上，得到评估视频，包括：

获取所述预设视频流中的预留帧位置；

将所述参考图像作为一个视频帧插入到所述预设视频流中的预留帧位置上，得到所述评估视频。

本发明实施例提供的该方法，由于获取到的参考图像和预设视频流相对应，所以，在该步骤中，可以将参考图像作为一个视频帧插入到预设视频流内，当然在其它实施例中，也可以将预设视频流对应的参考图像叠加到预设视频流内中的视频帧内，但相比叠加到视频帧的方式，将参考图像作为一个视频帧的方式更加快速，效率更高。

结合第一方面或第一方面第一种至第四种任意一种可能的实现方式，在第一方面第五种可能的实现方式中，所述获取与所述特征信息相对应的参考图像，包括：

在预设图像库中查找与所述特征信息相对应的图像作为参考图像；

和/或，

以所述特征信息为参数，利用预设图像生成算法生成所述参考图像。

本发明实施例提供的该方法，提出来两种参考图像的获取方式，其中，从预设图像库中查找参考图像的方式，得到的参考图像可以较为复杂，而采用算法生成的方式，得到的参考图像则相对简单，但无论哪种方式，获取到的参考图像都和视频帧的特征信息相关联，也即参考图像和视频帧的图像特点相近，这样可以使得参考图像和视频帧一起编码处理时，受损程度一致。

第二方面，本发明实施例提供了一种视频信息处理方法，包括：

接收评估视频，以及，所述评估视频中参考图像的位置信息和所述评估视频被发送前视频帧的特征信息；

根据所述位置信息将所述评估视频中所述参考图像与所述评估视频相分离；

获取与所述特征信息相对应的评估图像；

对所述评估图像和所述参考图像进行评估运算，得到所述评估视频的视频质量。

本发明实施例提供的该方法，当接收方接收到该评估视频、预设位置和特征信息时，可以从所述评估视频中的预设位置上提取所述参考图像，并且可以生成与所述特征信息对应的评估图像，以及，利用所述参考图像和所述评估图像确定所述评估视频的视频质量。

结合第二方面，在第二方面第一种可能的实现方式中，所述位置信息为所述评估视频内视频帧中的至少一个叠加区域位置；

所述根据所述位置信息将所述评估视频中所述参考图像与所述评估视频相分离，包括：

将所述评估视频的视频帧中所述至少一个叠加区域位置上的图像提取出来；

将提取到的所述至少一个叠加区域位置上的图像作为所述参考图像。

本发明实施例提供的该方法，由于参考图像是采用叠加的方式叠加到原始视频内，所以，在提取参考图像时，只要得到位置信息，就可以根据位置信息从视频帧中的至少一个叠加区域位置上提取出参考图像。

结合第二方面，在第二方面第二种可能的实现方式中，所述位置信息为所述评估视频内视频帧之间的帧号；

所述根据所述位置信息将所述评估视频中所述参考图像与所述评估视频相分离，包括：

在所述评估视频内查找与所述帧号相对应的视频帧；

将查找到的视频帧提取出来作为所述参考图像。

本发明实施例提供的该方法，由于参考图像作为一个视频帧插入到预设视频流内，所以，在提取参考图像时，只要得到帧号，就可以根据帧号从视频帧中提取出参考图像。

结合第二方面、第二方面第一种或第二方面第二种可能的实现方式，在第二方面第三种可能的实现方式中，所述获取与所述特征信息相对应的评估图像，包括：

在预设图像库中查找与所述特征信息相对应的图像作为评估图像；

和/或，

以所述特征信息为参数，利用预设图像生成算法生成所述评估图像。

本发明实施例提供的该方法，由于参考图像的生成方式有多种，所以在获取评估图像时，可以采用与参考图像生成方式相同的方式，生成评估图像，这样使得得到的评估图像和受损前的参考图像完全一样，便于后续利用评估图像和受损后的参考图像进行视频质量评估。

结合第二方面、第二方面第一种或第二方面第二种可能的实现方式，在第二方面第四种可能的实现方式中，所述参考图像中包含有图像标识；

所述获取与所述特征信息相对应的评估图像，包括：

提取所述参考图像中的图像标识；

在预设图像库中查找与所述图像标识相对应图像作为评估图像，所述预设图像库中包括多个设置有编号的图像。

本发明实施例提供的该方法，在参考图像中包含有图像标识时，可以不用利用特征信息在预设图像库中在此查找评估图像，而是可以直接从预设图像库中查找标识和该图像标识一致的图像作为评估图像即可。

第三方面，本发明实施例提供了一种视频发送设备，包括：

特征信息获取单元，用于获取原始视频内视频帧的特征信息；

参考图像获取单元，用于获取与所述特征信息相对应的参考图像；

评估视频获取单元，用于将所述参考图像叠加到所述原始视频内的预设位置上，得到评估视频；

发送单元，用于发送所述评估视频、所述预设位置和所述特征信息，以使得所述评估视频的接收方从所述评估视频中预设位置上提取所述参考图像，以及，利用所述参考图像和与所述特征信息对应的评估图像确定所述评估视频的视频质量。

结合第三方面，在第三方面第一种可能的实现方式中，所述特征信息获取单元，包括：

第一特征获取子单元，用于获取至少一个预设特征；

第一特征值提取子单元，用于分别提取所述原始视频内至少一个视频帧中所述至少一个预设特征的特征值。

结合第三方面或第三方面第一种可能的实现方式，在第三方面第二种可能的实现方式中，所述评估视频获取单元，包括：

区域获取子单元，用于获取所述至少一个视频帧中多个视频帧中的预设叠加区域；

图像叠加子单元，用于将所述参考图像整体或分割后叠加到与所述参考图像对应视频帧中的预设叠加区域上，得到所述评估视频。

结合第三方面，在第三方面第三种可能的实现方式中，所述特征信息获取单元，包括：

第二特征获取子单元，用于获取至少一个预设特征；

第二特征值提取子单元，用于获取所述原始视频内预设视频流中多个视频帧中的所述至少一个预设特征的特征值；

特征值确定子单元，用于根据所述预设视频流中多个视频帧中所述至少一个预设特征的特征值，确定与所述预设视频流对应的综合特征值。

结合第三方面或第三方面三种可能的实现方式，在第三方面第四种可能的实现方式中，所述评估视频获取单元，包括：

帧位置获取子单元，用于获取所述预设视频流中的预留帧位置；

视频帧插入子单元，用于将所述参考图像作为一个视频帧插入到所述预设视频流中的预留帧位置上，得到所述评估视频。

结合第三方面、第三方面第一种至第三方面第四种可能的实现方式，在第三方面第五种可能的实现方式中，所述参考图像获取单元，包括：

图像查找子单元，用于在预设图像库中查找与所述特征信息相对应的图像作为评估图像；

和/或，

图像生成子单元，用于以所述特征信息为参数，利用预设图像生成算法生成所述参考图像。

第四方面，本发明实施例提供了一种视频接收设备，包括：

接收单元，用于接收评估视频，以及，所述评估视频中参考图像的位置信息和所述评估视频被发送前视频帧的特征信息；

参考图像分离单元，用于根据所述位置信息将所述评估视频中所述参考图像与所述评估视频相分离；

评估图像获取单元，用于获取与所述特征信息相对应的评估图像；

评估运算单元，用于对所述评估图像和所述参考图像进行评估运算，得到所述评估视频的视频质量。

结合第四方面，在第四方面第一种可能的实现方式中，所述位置信息为所述评估视频内视频帧中的至少一个叠加区域位置；

所述参考图像分离单元，包括：

图像提取子单元，用于将所述评估视频的视频帧中所述至少一个叠加区域位置上的图像提取出来；

第一图像确定子单元，用于将提取到的所述至少一个叠加区域位置上的图像作为所述参考图像。

结合第四方面，在第四方面第二种可能的实现方式中，所述位置信息为所述评估视频内视频帧之间的帧号；

所述参考图像分离单元，包括：

视频帧查找子单元，用于在所述评估视频内查找与所述帧号相对应的视频帧；

第二图像确定子单元，用于将查找到的视频帧提取出来作为所述参考图像。

结合第四方面、第四方面第一种或第四方面第二种可能的实现方式，在第四方面第三种可能的实现方式中，所述评估图像获取单元，包括：

图像查找子单元，用于在预设图像库中查找与所述特征信息相对应的图像作为评估图像；

和/或，

图像生成子单元，用于以所述特征信息为参数，利用预设图像生成算法生成所述评估图像。

结合第四方面或第四方面第一种至第三种可能的实现方式，在第四方面第四种可能的实现方式中，所述参考图像中包含有图像标识；

所述评估图像获取子单元，包括：

编号提取子单元，用于提取所述参考图像中的图像标识；

评估图像确定子单元，用于在预设图像库中查找与所述图像标识相对应图像作为评估图像，所述预设图像库中包括多个设置有编号的图像。

第五方面，本发明实施例提供了一种视频信息处理系统，包括：如上述第二方面任意一个可能的实现方式中的视频发送设备和如上述第四方面任意一个可能的实现方式中的视频接收设备。

第六方面，本发明实施例提供了一种视频发送设备，该视频发送设备具有实现上述第一方面中视频信息处理方法对应的行为的功能。所述功能还可以硬件实现，也可以通过硬件执行相应的软件实现。所述硬件或软件包括一个或多个与上述功能相对应的模块。

结合第六方面，在第六方面的一种可能的实现方式中，视频发送设备中可以包括：处理器和存储器，所述存储器用于存储支持视频发送设备执行上述第一方面方法的应用程序代码，所述处理器被配置为用于执行所述存储器中存储的应用程序。所述视频发送设备还可以包括通信接口，用于视频发送设备与其他设备或通信网络通信。

第七方面，本发明实施例提供了一种视频接收设备，该视频接收设备具有实现上述第一方面中视频信息处理方法对应的行为的功能。所述功能还可以硬件实现，也可以通过硬件执行相应的软件实现。所述硬件或软件包括一个或多个与上述功能相对应的模块。

结合第七方面，在第七方面的一种可能的实现方式中，视频接收设备中可以包括：处理器和存储器，所述存储器用于存储支持视频接收设备执行上述第一方面方法的应用程序代码，所述处理器被配置为用于执行所述存储器中存储的应用程序。所述视频接收设备还可以包括通信接口，用于视频接收设备与其他设备或通信网络通信。

第八方面，本发明实施例提供了一种计算机存储介质，用于储存为上述视频信息处理设备所用的计算机软件指令，其包含用于执行上述第一方面视频信息处理方法，而为视频发送设备所设计的程序。

第九方面，本发明实施例提供了一种计算机存储介质，用于储存为上述视频信息处理设备所用的计算机软件指令，其包含用于执行上述第二方面视频信息处理方法，而为视频接收设备所设计的程序。

本发明的实施例提供的技术方案可以包括以下有益效果：

本发明提供的该方法，在视频发送之前，可以先获取能够表征原始视频内视频帧中的图像特征的特征信息，然后以该特征信息为依据，获取与该特征信息相对应的参考图像，这样也使得获取到的参考图像和视频帧中的特征产生关联，然后将该参考图像叠加到原始视频内的预设位置，得到评估视频，最终将该评估视频、预设位置和特征信息一起发送给视频接收方。

进而，当接收方接收到该评估视频、预设位置和特征信息时，可以从所述评估视频中的预设位置上提取所述参考图像，并且可以生成与所述特征信息对应的评估图像，以及，利用所述参考图像和所述评估图像确定所述评估视频的视频质量。

由于该方法在获取用于评估的参考图像时，是以原始视频内视频帧中的特征信息为依据，这使得获取到的参考图像和原始视频内视频帧的特征相近，这样在传输过程中，评估视频中的参考图像的受损程度与视频帧的受损程度比较一致，因此，在后续利用参考图像对评估视频的视频质量进行评估时，可以提高评估的准确性。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本发明。本发明的这些方面或其他方面在以下实施例的描述中会更加简明易懂。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有

技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人

员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例提供的一种设备场景示意图；

图2为本发明实施例提供的计算机设备示意图；

图3为本发明实施例提供的一种视频信息处理方法的流程示意图；

图4为本发明实施例提供的一种图像叠加方式；

图5为本发明实施例提供的另一种图像叠加方式；

图6为本发明实施例提供的一种视频信息处理方法的流程示意图；

图7为本发明实施例提供的一种视频发送设备的结构示意图；

图8为本发明实施例提供的一种视频发送设备的结构示意图。

具体实施方式

为了使本领域技术人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所述描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

在通过网络传输视频的过程中，视频发送设备通过摄像头采集或者从本地存储文件中读取等方式获取得到视频数据，然后对获取到视频数据进行编码压缩的程序或者设备，通常这种编码压缩属于有损数据压缩,在压缩过程中会删除一些视频数据中的内容信息，最后将编码压缩后的视频数据根据RTP(Real-time Transport Protocol，实时传输协议)等协议进行封包处理，然后通过TCP(Transmission Control Protocol，传输控制协议)/UDP(User Datagram Protocol，用户数据报协议)等方式发送到网络中。视频接收设备采用的相同网络协议从网络中接收到视频数据包，然后对视频数据包进行解析拆包处理，获取得到传输的视频数据，并且采用与前述编码算法相对应的解码算法对接收到的视频数据进行解码(即解压缩)处理，得到目标视频。

在本发明实施例中，视频发送设备可以为服务器等，例如：网络服务器、本地服务器、局域网内的存储设备等，并且，视频发送设备可以是单独的物理设备，也可以是集成在其它设备内，再或者，还可以以分布式方式分散设置在其它设备内。视频接收设备可以为手机、智能电视、台式机或笔记本电脑等可以与网络连接且设置有显示屏的播放设备。上述关于视频发送设备和视频接收设备的举例仅是示意，不应对本申请构成限定。

图1为本发明实施例提供的一种设备场景示意图。在图1所示，视频发送设备为服务器13，视频接收设备为手机11和电视12，其中，手机11和电视12均可以通过传输网络与服务器13进行数据交互，其中，传输网络可以为有线网络，例如：光纤网络、有线电视网络等，也可以为无线网络，例如:3G(Third Generation第三代移动通讯)网络、4G(Fourth Generation，第四代移动通讯)网络、4G的下一代网络或者WLAN(WirelessLocal Area Networks,无线局域网络)网络等，当然也不限于这些。

参见图1所示，在视频传输时，服务器13可以通过网络将视频数据向手机11或电视12发送。在具体应用中，服务器13内可以设置有视频库，在视频库中存储有视频数据，用户可以操作手机11或电视12向服务器13请求获取视频数据，然后服务器13根据请求将对应的视频数据经过编码处理后发送给手机11或电视12，手机11或电视12在接收到视频数据后，进行解码以便在本地显示屏上进行播放。

然而视频在传输过程中(例如：编码、网络传输以及解码)很容易受到各种损伤，导致视频信号失真、视频质量下降。为了能够及时有效地发现视频质量问题，本发明实施例提供了一种视频信息处理方法及装置，该方案通过在视频发送设备向视频中加入一用于评估的图像，然后在视频接收设备从传输的视频中提取该图像，并且与该图像的原始图像进行比对，以实现对视频质量进行快速评估。

本发明实施例提供的该方法可以应用于通用的视频编解码架构体系，适用于对网络终端的视频质量进行实时评价，如因特网上的点播和广播业务等，也适用于实时视频通信业务。

如图2所示，前述视频发送设备和视频接收设备均可以采用图2中的计算机设备(或系统)的方式来实现。

图2所示为本发明实施例提供的计算机设备示意图。计算机设备200包括至少一个处理器201，通信总线202，存储器203以及至少一个通信接口204。

处理器201可以是一个通用中央处理器(CPU)，微处理器，特定应用集成电路(application-specific integrated circuit，ASIC)，或一个或多个用于控制本发明方案程序执行的集成电路。

通信总线202可包括一通路，在上述组件之间传送信息。所述通信接口204，使用任何收发器一类的装置，用于与其他设备或通信网络通信，如以太网，无线接入网(RAN)，无线局域网(Wireless Local Area Networks，WLAN)等。

存储器203可以是只读存储器(read-only memory，ROM)或可存储静态信息和指令的其他类型的静态存储设备，随机存取存储器(random access memory，RAM)或者可存储信息和指令的其他类型的动态存储设备，也可以是电可擦可编程只读存储器(Electrically Erasable Programmable Read-Only Memory，EEPROM)、只读光盘(CompactDisc Read-Only Memory，CD-ROM)或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质，但不限于此。存储器可以是独立存在，通过总线与处理器相连接。存储器也可以和处理器集成在一起。

其中，所述存储器203用于存储执行本发明方案的应用程序代码，并由处理器201来控制执行。所述处理器201用于执行所述存储器203中存储的应用程序代码。

在具体实现中，作为一种实施例，处理器201可以包括一个或多个CPU，例如图2中的CPU0和CPU1。

在具体实现中，作为一种实施例，计算机设备200可以包括多个处理器，例如图2中的处理器201和处理器208。这些处理器中的每一个可以是一个单核(single-CPU)处理器，也可以是一个多核(multi-CPU)处理器。这里的处理器可以指一个或多个设备、电路、和/或用于处理数据(例如计算机程序指令)的处理核。

在具体实现中，作为一种实施例，计算机设备200还可以包括输出设备205和输入设备206。输出设备205和处理器201通信，可以以多种方式来显示信息。例如，输出设备205可以是液晶显示器(liquid crystal display，LCD),发光二级管(lightemitting diode，LED)显示设备，阴极射线管(cathode ray tube，CRT)显示设备，或投影仪(projector)等。输入设备206和处理器201通信，可以以多种方式接受用户的输入。例如，输入设备206可以是鼠标、键盘、触摸屏设备或传感设备等。

上述的计算机设备200可以是一个通用计算机设备或者是一个专用计算机设备。在具体实现中，计算机设备200可以是台式机、便携式电脑、网络服务器、掌上电脑(Personal Digital Assistant，PDA)、移动手机、平板电脑、无线终端设备、通信设备、嵌入式设备或有图2中类似结构的设备。本发明实施例不限定计算机设备200的类型。

如图1中的手机和电视均可以为图2所示的设备，手机和电视中的存储器中存储了一个或多个软件模块(例如第一执行模块)。如图1中的服务器可以为图2所示的设备，服务器的存储器中存储了一个或多个软件模块(例如第二执行模块等)。手机、电视或服务器可以通过处理器以及存储器中的程序代码来实现软件模块，实现视频信息处理。

下面以服务器侧为例，对本发明实施例提供的视频信息处理方法进行说明。

图3为本发明实施例提供的一种视频信息处理方法的流程示意图。图3所示该视频信息处理方法可以应用于视频发送设备中，例如：图1中的服务器13，如图3所示，该方法可以包括以下步骤。

S101，视频发送设备获取原始视频内视频帧的特征信息。

在本发明实施例中，原始视频是指服务器13获取到的视频数据，对于服务器13而言，原始视频可以为服务器13从存储设备内读取到的视频数据，也可以为服务器13通过摄像头或其它视频采集装置采集得到的视频数据。

原始视频是由多个视频帧组成，每个视频帧均为一副图像。特征信息是指能够反映出视频帧内图像特征的一些信息，例如：图像的复杂度、纹理、运动性以及色彩等。

在本发明实施例中，特征信息可以为一个特征对应的信息，也可以两个或两个以上的特征组成的特征组对应的信息。另外，特征信息可以为某一个视频帧内对应特征的信息，也可以为多个视频帧内对应特征的综合信息，这里视频帧内的对应特征可以为一个或多个特征。

S102，视频发送设备获取与所述特征信息相对应的参考图像。

在对视频在传输过程中的受损情况进行评估时，考虑到将传输后的视频与传输前的视频进行对比不仅耗时较长，而且数据处理量较大，效率较低。所以，在本发明实施例中，采用以下方式，在视频传输前向视频内加入一个参考图像，然后在视频传输过程中，该图像和视频图像一起被编码压缩，然后被传输。对于视频接收设备，当接收到传输过来的视频后，可以从视频中提取该受损的参考图像，然后通过参考图像的受损情况，来确定视频的受损情况。

在本发明实施例中，参考图像与特征信息相对应，是指参考图像和视频中视频帧的相同特征的值相匹配，例如：针对同一特征信息，参考图像和视频中视频帧的值之间的差值在设定阈值内。

因此，只要满足参考图像和视频中视频帧的相同特征的值匹配，参考图像的获取方式在本发明中不做限定，例如：

一种方式下，可以根据视频中视频帧的特征信息直接按照预设图像生成算法生成一个满足要求的参考图像，这里预设图像生成算法可以为滤波算法或者螺旋线算法，其中，当采用滤波算法时，可以对预设的特征值较大的滤波对象进行滤波处理，直至得到和上述视频帧的特征信息相匹配的模糊化图像，当采用螺旋线算法时，利用特征信息作为参数，可以生成和视频帧的特征信息相匹配的螺旋线图像。

另一方式下，还可以根据视频帧中的特征信息从预先设置的图像库中，选择和特征信息的特征值相匹配的图像，相匹配是指选择的图像的特征值和视频帧的特征值的差值在预设阈值范围内。

另外，与S101的步骤相对应，当特征信息为某一个视频帧内的特征的信息时，得到的参考图像将与该视频帧相对应，当特征信息为多个视频帧内对应特征的综合信息时，得到的参考图像将同时与这多个视频帧相对应。

S103，视频发送设备将所述参考图像叠加到所述原始视频内的预设位置上，得到评估视频。

为了实现在视频传输时，参考图像可以与视频帧同时被压缩受损，所以在获取到参考图像后，还需要将参考图像加入到原始视频内。但如果直接将参考图像插入到视频帧内，这样参考图像会将原始视频内的视频帧中的图像覆盖，进而在后续视频被接收后播放时，仍会携带有参考图像，给用户观看带来不便。

为此，在本发明实施例中，参考图像是采用叠加的方式加入到原始视频中的预设位置，也即参考图像和视频帧是相独立的，例如：可以将参考图像和视频帧以不同的图层的方式设置，利用可以将参考图像整体或分割后叠加到视频帧中的某一个区域上，或者，将参考图像作为一个视频帧插入到原始视频的视频帧之间。无论哪种方式，由于叠加后参考图像和视频帧是相独立的，所以提取参考图像后，对视频帧不会产生任何影响。

S104，视频发送设备发送所述评估视频、所述预设位置和所述特征信息。

以使得所述评估视频的接收方从所述评估视频中预设位置上提取所述参考图像，以及，利用所述参考图像和与所述特征信息对应的评估图像确定所述评估视频的视频质量。

在发送评估视频时，可以按照现有对视频编码处理的方式，对评估视频进行编码压缩处理，并且将编码压缩后的视频数据根据RTP(Real-time Transport Protocol，实时传输协议)等协议进行封包处理，然后通过TCP(Transmission Control Protocol，传输控制协议)/UDP(User Datagram Protocol，用户数据报协议)等方式发送到网络中。

在本发明实施例中，当图1中的手机11和电视12等视频接收设备，接收到该评估视频、预设位置以及特征信息后，视频接收设备可以从所述评估视频中预设位置上提取出所述参考图像，，然后，利用特征信息可以获取与参考图像对应的评估图像，并且最终利用所述参考图像和评估图像确定所述评估视频的视频质量。

上述视频发送设备的动作可以由视频发送设备根据上述图2中提及的存储器中的软件模块来执行，例如：S101-S104均可以根据图2中的第一执行模块来执行。

下面结合具体实施例对本发明实施例提供的视频信息处理方法进行详细说明。

实施例a：

在本发明实施例中，上述步骤S101可以通过步骤S11和S12来实现。

其中，S11，视频发送设备获取至少一个预设特征。

预设特征可以为一个特征，也可以为多个特征组成的组合。

S12，视频发送设备分别提取所述原始视频内至少一个视频帧中所述至少一个预设特征的特征值。

例如：以预设特征为复杂度为例，在该步骤中，可以计算原始视频内每个视频帧的复杂度,在本发明实施例中，复杂度以C1表示。

当预设特征为多个时，可以根据不同预设特征的重要性设置权重值，然后利用预设的权重算法计算多个预设特征的综合值。无论是一个预设特征还是多个预设特征，都可以反映出所在视频帧的特征信息。

在本发明实施例中，在步骤S102中，获取参考图像时，可以采用多种方式，其中，一种方式可以为：

预先设置一个预设图像库，在该预设图像库中，针对每个预设特征，均分别设置多个和特征值相关的参考图像，当在步骤S12中提取到特征值后，可以从在该预设图像库中查找和该特征值相对应的图像作为参考图像，例如：若视频帧的预设特征为复杂度，并且复杂度的特征值为C1为例，相应地，可以在预设图像库中该查找复杂度值在[C1-K,C1+K]范围内的图像作为参考图像，其中，K为复杂度允许偏差量。

另一种获取参考图像的方式可以为：

在视频发送设备中维护一个预设图像生成算法，该预设图像生成算法可以为滤波算法或螺旋线生成算法，当采用滤波算法时，可以对预设的特征值较大的滤波对象进行滤波处理，直至得到和上述视频帧的特征信息相匹配的模糊化图像，当采用螺旋线算法时，利用特征信息作为参数，可以生成和视频帧的特征信息相匹配的螺旋线图像。

以复杂度为例，滤波对象可以为复杂度很大的图像，当视频帧的特征值为C1时，可以以C1为依据对该滤波对象进行滤波处理，直至得到滤波后的图像的特征值在[C1-K,C1+K]范围内。

同样以复杂度为例，在本发明一个实施例中，螺旋线算法可以为阿基米德螺旋线的标准极坐标方式，具体如下：

r(θ)＝a+b*θ

其中：

b—阿基米德螺旋线系数，mm/°，表示每旋转1度时极径的增加(或减小)量；

θ—极角，单位为度，表示阿基米德螺旋线转过的总度数；

a—当θ＝0°时的极径，mm。

改变参数a将改变螺线形状，b控制螺线间距离

在具体应用中，通过设置不同的螺旋线间距，可以得到不同复杂度的图像。

在本发明实施例中，上述步骤S103可以通过步骤S21和S22来实现。

其中，S21，视频发送设备获取所述至少一个视频帧中多个视频帧中的预设叠加区域。

在本发明实施例中，预设叠加区域可以为视频帧中的任意一个位置，并且预设叠加区域可以为一个整体区域，当然也可以为多个相互分离的区域。

S22，视频发送设备将所述参考图像整体或分割后叠加到与所述参考图像对应视频帧中的预设叠加区域上，得到所述评估视频。

如图4所示，42为原始视频中的一个视频帧，以该视频帧42中的预设特征的特征值为依据，得到和视频帧42中预设特征的特征值相对应的参考图像41，并且在叠加时通过不同的叠加方式可以得到两个不同的叠加后的视频帧43和44，其中，对于叠加后视频帧43而言，参考图像41采用的叠加方式是叠加到视频帧42的某一个区域上，对于叠加后的视频帧44而言，参考图像41采用的叠加方式是将参考图像41分割成多个部分，并且作为边框叠加到视频帧42上。

在本发明实施例中，无论哪种叠加方式，在叠加时，均将参考图像和视频帧以不同的图层的方式设置，另外，参考图像位于视频帧上的位置可以自由设定，例如：如图4中的叠加后视频帧43，可以将参考图像作为一个整体直接设置在视频帧上的设定位置或区域上，或者，如图4中的叠加后的视频帧44，可以将参考图像进行分割，并且将分割后的各个部分分别设置在视频帧上的不同位置上，从图4中可以看到，参考图像41被作为边框显示在视频帧42的周围。

实施例b：

在本发明实施例中，上述步骤S101可以通过步骤S31、S32和S33来实现。

其中，S31，视频发送设备获取至少一个预设特征；

预设特征可以为一个特征，也可以为多个特征组成的组合。

S32，视频发送设备获取所述原始视频内预设视频流中多个视频帧中所述至少一个预设特征的特征值。

当预设特征为多个时，可以根据不同预设特征的重要性设置权重值，然后利用预设的权重算法计算多个预设特征的综合值作为每个视频帧的特征值。

S33，视频发送设备根据所述预设视频流中多个视频帧中所述至少一个预设特征的特征值，确定与所述预设视频流对应的综合特征值。

在具体应用中，预设视频流的综合特征值，可以为多个视频帧的特征值的平均值。

在本发明实施例中，上述步骤S103也可以通过步骤S41和S42来实现。

其中，S41，视频发送设备获取所述预设视频流中的预留帧位置。

预留帧位置可以为预设视频流中的某一个帧号。

S42，视频发送设备将所述参考图像作为一个视频帧插入到所述预设视频流中的预留帧位置上，得到所述评估视频。

如图5所示，预设视频流包括第i-2、i-1、i+1和i+2帧的视频帧，当将参考图像插入视频帧后，如图5所示，第i帧为参考图像。这样在评估视频被接收后，可以从评估视频的视频帧中将第i帧提取出来，作为参考图像，由于视频流内不同帧之间是相独立的，所以将第i帧提取出来作为参考图像，对视频流中的其它视频帧不会产生影响。

下面以视频接收设备侧为例，对本发明实施例提供的视频信息处理方法进行说明。

图6为本发明实施例提供的一种视频信息处理方法的流程示意图。图6所示该视频信息处理方法可以应用于视频接收设备，例如图1中的手机11和电视12。如图6所示，该方法可以包括以下步骤。

S201，视频接收设备接收评估视频，以及，所述评估视频中参考图像的位置信息和所述评估视频被发送前视频帧的特征信息。

参见前述图3所示实施例的中描述，可知，在评估视频中，叠加设置有参考图像，并且参考图像和和评估视频中的视频帧分别位于不同的图层。

在本发明实施例中，位置信息和特征信息可以与评估视频一起发送，例如：位置信息和特征信息在传输的视频数据包中的扩展字段中携带，另外，位置信息和特征信息还可以在评估视频发送后，再单独通过数据包发送。

S202，视频接收设备根据所述位置信息将所述评估视频中所述参考图像与所述评估视频相分离。

参见步骤S201的描述，由于参考图像和评估视频中的视频帧分别位于不同的图层，所以在获取到位置信息后，可以从评估视频中将参考图像提取出来。由于评估视频在传输过程中受编码、网路传输以及解码等影响，会出现受损，所以参考图像同时也会受损，因此，该步骤中提取到的参考图像是受损后的参考图像。

S203，视频接收设备获取与所述特征信息相对应的评估图像。

在本发明实施例中，视频发送设备和视频接收设备可以预先通过信令协商的方式，保持视频发送设备内的参考图像获取方法和视频接收设备中评估图像的获取方法相同，例如：视频发送设备和视频接收设备可以共同维护一套相同的参考图像获取方法和评估图像的获取方法；当然，视频发送设备和视频接收设备还可以同时维护多套参考图像获取方法和评估图像的获取方法，然后在视频传输时，视频发送设备每次通过信令的方式通知视频接收设备当前视频中采用的参考图像获取方法，以使视频接收设备在对当前视频进行处理时可以切换到对应的评估图像获取方法。

由于视频接收设备获取的特征信息是评估视频被发送前视频帧的特征信息，所以，基于相同的特征信息，视频接收设备得到的评估图像和视频发送设备生成的参考图像完全相同，也就是说，步骤S202中的参考图像是损失后的图像，而该步骤203中得到的评估图像是没有受损的参考图像。

S204，视频接收设备对所述评估图像和所述参考图像进行评估运算，得到所述评估视频的视频质量。

当得到评估图像和参考图像后，可以利用现有的ITU-T(InternationalTelecommunication Union-Telecommunication Sector，国际电信联盟-电信标准组织)标准中提供的全参考评估算法来计算评估视频的视频质量，全参考评估算法可以把包括：PSNR(Peak Signal to Noise Ratio，峰值信噪比)、SSIM(Structural Similarity Index，结构相似性指标)和MSE(Mean square Error，均方误差)中的一种。

本发明实施例提供的该方法，当视频接收设备接收到该评估视频、预设位置和特征信息时，可以从所述评估视频中的预设位置上提取所述参考图像，并且可以生成与所述特征信息对应的评估图像，以及，利用所述参考图像和所述评估图像确定所述评估视频的视频质量。

由于该方法在获取用于评估的参考图像时，是以原始视频内视频帧中的特征信息为依据，这使得获取到的参考图像和原始视频内视频帧的特征相近，这样在传输过程中，评估视频中的参考图像的受损程度与视频帧的受损程度比较一致，因此，在后续利用参考图像对评估视频的视频质量进行评估时，可以提高评估的准确性。

上述视频接收设备的动作可以由视频接收设备根据上述图2中提及的存储器中的软件模块来执行，例如：S201-S204均可以根据图2中的第二执行模块来执行。

下面结合具体实施例对本发明实施例提供的视频信息处理方法进行详细说明。

实施例c：

在本发明实施例中，与实施例a对应，前述步骤S203可以步骤S51和S52采用以下方式实现。

S51，视频接收设备将所述评估视频的视频帧中所述至少一个叠加区域位置上的图像提取出来。

在本发明实施例中，步骤S201中获取到的位置信息为所述评估视频内视频帧中的至少一个叠加区域位置。

S52，视频接收设备将提取到的所述至少一个叠加区域位置上的图像作为所述参考图像。

参见图4所示，当参考图像为43时，那么评估视频的视频帧中的叠加区域将只有一个，那么可以直接从该叠加区域内提取出的图像作为参考图像。

而当参考图像为44时，相应地，评估视频的视频帧四周的区域将都是叠加区域，那么在步骤S32提取到所有叠加区域的图像后，需要将提取到的图像再拼接到一起，最终将拼接到一起的图像确定为参考图像。

在本发明实施例中，与实施例a对应，前述步骤S203可以获取评估图像时，可以采用多种方式，其中，一种方式可以为：

预先设置一个预设图像库，在该预设图像库中，针对每个预设特征，均分别设置多个和特征值相关的图像，当在步骤201中获取到特征信息后，可以从在该预设图像库中查找和该特征信息相对应的图像作为评估图像，例如：若视频帧的预设特征为复杂度，并且复杂度的特征值为C1，相应地，可以在预设图像库中该查找复杂度值在[C1-K,C1+K]范围内的图像作为评估图像，其中，K为复杂度允许偏差量。

另一种获取评估图像的方式可以为：

在视频接收设备中维护一个视频发送设备中相同的预设图像生成算法，该预设图像生成算法可以为滤波算法或螺旋线生成算法，当采用滤波算法时，可以对预设的特征值较大的滤波对象进行滤波处理，直至得到和上述特征信息的特征值相匹配的模糊化图像，当采用螺旋线算法时，利用特征信息作为参数，可以生成和视频帧的特征信息相匹配的螺旋线图像。

实施例d：

在本发明实施例中，与实施例a对应，前述步骤S203也可以步骤S61和S62采用以下方式实现。

S61，在所述评估视频内查找与所述帧号相对应的视频帧。

在本发明实施例中，步骤S201中获取到的位置信息为所述评估视频内视频帧之间的帧号。

参见图5所示，在视频发送设备对参考图像进行处理时，是将参考图像作为一个视频帧插入到原始视频内，所以，在该步骤中，当知道参考图像在评估视频中的帧号时，可以根据帧号直接从评估视频中提取出来。

S62，将查找到的视频帧提取出来作为所述参考图像。

实施例e：

在前述实施例c和d中，评估图像均是视频接收设备根据特征信息去生成或选择得到的，在其它实施例中，在视频发送设备在利用预设图像库选择参考图像时，选择到的参考图像内还可以包含有图像标识，例如：编号等，相应地视频接收设备在获取评估图像时，可以直接根据该图像标识直接在预设图像库中查找和该图像标识对应的评估图像即可，进而视频接收设备无需再进行根据特征信息查找评估图像的步骤。

因此，在本发明实施例中，前述步骤S203也可以步骤S71、S72和S73采用以下方式实现。

S71，视频接收设备将所述评估视频的视频帧中所述至少一个叠加区域位置上的图像提取出来。

S72，视频接收设备提取所述参考图像中的图像标识。

由于视频发送设备获取到的参考图像中都带有图像标识，所以，在本发明实施例中，在从评估视频中提取到参考图像后，可以从参考图像中提取出对应个图像标识。

S73，视频接收设备在预设图像库中查找与所述图像标识相对应图像作为评估图像，所述预设图像库中包括多个设置有编号的图像。

本发明实施例还提供了一种视频发送设备，如图7所示，该视频发送设备可以包括：特征信息获取单元11、参考图像获取单元12、评估视频获取单元13和发送单元14。

其中，特征信息获取单元11，用于获取原始视频内视频帧的特征信息。参考图像获取单元12，用于获取与所述特征信息相对应的参考图像。评估视频获取单元13，用于将所述参考图像叠加到所述原始视频内的预设位置上，得到评估视频。发送单元14，用于发送所述评估视频、所述预设位置和所述特征信息，以使得所述评估视频的接收方从所述评估视频中预设位置上提取所述参考图像，以及，利用所述参考图像和与所述特征信息对应的评估图像确定所述评估视频的视频质量。

在一个实施例中，所述特征信息获取单元11可以包括：特征获取子单元和特征值提取子单元，其中，特征获取子单元，用于获取至少一个预设特征；特征值提取子单元，用于分别提取所述原始视频内至少一个视频帧中所述至少一个预设特征的特征值。

相应地，评估视频获取单元13可以包括：区域获取子单元和图像叠加子单元，其中，区域获取子单元，用于获取所述至少一个视频帧中多个视频帧中的预设叠加区域；图像叠加子单元，用于将所述参考图像整体或分割后叠加到与所述参考图像对应视频帧中的预设叠加区域上，得到所述评估视频。

在另一实施例中，特征信息获取单元11可以包括：特征获取子单元、特征值提取子单元和特征值确定子单元，其中，特征获取子单元，用于获取至少一个预设特征；特征值提取子单元，用于获取所述原始视频内预设视频流中多个视频帧中的所述至少一个预设特征的特征值；特征值确定子单元，用于根据所述预设视频流中多个视频帧中所述至少一个预设特征的特征值，确定与所述预设视频流对应的综合特征值。

相应地，评估视频获取单元13可以包括：帧位置获取子单元和视频帧插入子单元，其中，帧位置获取子单元，用于获取所述预设视频流中的预留帧位置；视频帧插入子单元，用于将所述参考图像作为一个视频帧插入到所述预设视频流中的预留帧位置上，得到所述评估视频。

在一个实施例中，参考图像获取单元12，可以包括：图像查找子单元和图像生成子单元中的一个或两个，其中，图像查找子单元，用于在预设图像库中查找与所述特征信息相对应的图像作为评估图像；图像生成子单元，用于以所述特征信息为参数，利用预设图像生成算法生成所述参考图像。

在本实施例中，视频发送设备是以功能单元的形式来呈现。这里的“单元”可以指特定应用集成电路(application-specific integrated circuit，ASIC)，电路，执行一个或多个软件或固件程序的处理器和存储器，集成逻辑电路，和/或其他可以提供上述功能的器件。在一个简单的实施例中，本领域的技术人员可以想到视频发送设备可以采用图2所示的形式。特征信息获取单元11、参考图像获取单元12、评估视频获取单元13和发送单元14可以通过图2的处理器和存储器来实现。

本发明实施例还提供了一种视频接收设备，如图8所示，该视频接收设备可以包括：接收单元21、参考图像分离单元22、评估图像获取单元23和评估运算单元24。

其中，接收单元21，用于接收评估视频，以及，所述评估视频中参考图像的位置信息和所述评估视频被发送前视频帧的特征信息；参考图像分离单元22，用于根据所述位置信息将所述评估视频中所述参考图像与所述评估视频相分离；评估图像获取单元23，用于获取与所述特征信息相对应的评估图像；评估运算单元24，用于对所述评估图像和所述参考图像进行评估运算，得到所述评估视频的视频质量。

在一个实施例中，位置信息为所述评估视频内视频帧中的至少一个叠加区域位置；前述参考图像分离单元22，包括：图像提取子单元和图像确定子单元，其中，图像提取子单元，用于将所述评估视频的视频帧中所述至少一个叠加区域位置上的图像提取出来；图像确定子单元，用于将提取到的所述至少一个叠加区域位置上的图像作为所述参考图像。

在另一实施例中，所述位置信息为所述评估视频内视频帧之间的帧号；前述参考图像分离单元22，包括：视频帧查找子单元和图像确定子单元，其中，视频帧查找子单元，用于在所述评估视频内查找与所述帧号相对应的视频帧；图像确定子单元，用于将查找到的视频帧提取出来作为所述参考图像。

在一个实施例中，前述评估图像获取单元23包括：图像查找子单元和图像生成子单元中的一个或两个，其中，图像查找子单元，用于在预设图像库中查找与所述特征信息相对应的图像作为评估图像；图像生成子单元，用于以所述特征信息为参数，利用预设图像生成算法生成所述评估图像。

此外，当参考图像中包含有图像标识；所述评估图像获取子单元，可以包括：编号提取子单元和评估图像确定子单元，其中，编号提取子单元，用于提取所述参考图像中的图像标识；评估图像确定子单元，用于在预设图像库中查找与所述图像标识相对应图像作为评估图像，所述预设图像库中包括多个设置有编号的图像。

在本实施例中，视频接收设备是以功能单元的形式来呈现。这里的“单元”可以指特定应用集成电路(application-specific integrated circuit，ASIC)，电路，执行一个或多个软件或固件程序的处理器和存储器，集成逻辑电路，和/或其他可以提供上述功能的器件。在一个简单的实施例中，本领域的技术人员可以想到视频接收设备可以采用图2所示的形式。接收单元21、参考图像分离单元22、评估图像获取单元23和评估运算单元24可以通过图2的处理器和存储器来实现。

本发明实施例还提供了一种视频信息处理系统，如图2所示，该视频信息处理系统可以包括视频发送设备和视频接收设备，其中，视频发送设备可以包括如图7所示的各个单元，视频接收设备可以包括如图8所示的各个单元。

本发明实施例还提供了一种计算机存储介质，用于储存为上述图7所示的视频发送设备所用的计算机软件指令，其包含用于执行上述方法实施例所设计的程序。通过执行存储的程序，可以实现视频信息处理。

本发明实施例还提供了另一种计算机存储介质，用于储存上图8所示的视频接收设备所用的计算机软件指令，其包含用于执行上述方法实施例所设计的程序。通过执行存储的程序，可以实现视频信息处理。

尽管在此结合各实施例对本发明进行了描述，然而，在实施所要求保护的本发明过程中，本领域技术人员通过查看所述附图、公开内容、以及所附权利要求书，可理解并实现所述公开实施例的其他变化。在权利要求中，“包括”(comprising)一词不排除其他组成部分或步骤，“一”或“一个”不排除多个的情况。单个处理器或其他单元可以实现权利要求中列举的若干项功能。相互不同的从属权利要求中记载了某些措施，但这并不表示这些措施不能组合起来产生良好的效果。

本领域技术人员应明白，本发明的实施例可提供为方法、装置(设备)、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。计算机程序存储/分布在合适的介质中，与其它硬件一起提供或作为硬件的一部分，也可以采用其他分布形式，如通过Internet或其它有线或无线电信系统。

本发明是参照本发明实施例的方法、装置(设备)和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

尽管结合具体特征及其实施例对本发明进行了描述，显而易见的，在不脱离本发明的精神和范围的情况下，可对其进行各种修改和组合。相应地，本说明书和附图仅仅是所附权利要求所界定的本发明的示例性说明，且视为已覆盖本发明范围内的任意和所有修改、变化、组合或等同物。显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (23)

1.一种视频信息处理方法，其特征在于，包括：

获取原始视频内视频帧的特征信息；

获取与所述特征信息相对应的参考图像；

将所述参考图像叠加到所述原始视频内的预设位置上，得到评估视频；

发送所述评估视频、所述预设位置和所述特征信息，以使得所述评估视频的接收方从所述评估视频中预设位置上提取所述参考图像，以及，利用所述参考图像和与所述特征信息对应的评估图像确定所述评估视频的视频质量。

2.根据权利要求1所述的方法，其特征在于，所述获取原始视频内视频帧的特征信息，包括：

获取至少一个预设特征；

分别提取所述原始视频内至少一个视频帧中所述至少一个预设特征的特征值。

3.根据权利要求1或2所述的方法，其特征在于，所述将所述参考图像叠加到所述原始视频内的预设位置上，得到评估视频，包括：

获取所述至少一个视频帧中多个视频帧中的预设叠加区域；

将所述参考图像整体或分割后叠加到与所述参考图像对应视频帧中的预设叠加区域上，得到所述评估视频。

4.根据权利要求1所述的方法，其特征在于，所述获取原始视频内视频帧的特征信息，包括：

获取至少一个预设特征；

获取所述原始视频内预设视频流中多个视频帧中所述至少一个预设特征的特征值；

根据所述预设视频流中多个视频帧中所述至少一个预设特征的特征值，确定与所述预设视频流对应的综合特征值。

5.根据权利要求1或4所述的方法，其特征在于，所述将所述参考图像叠加到所述原始视频内的预设位置上，得到评估视频，包括：

获取所述预设视频流中的预留帧位置；

将所述参考图像作为一个视频帧插入到所述预设视频流中的预留帧位置上，得到所述评估视频。

6.根据权利要求1-5任意一项所述的方法，其特征在于，所述获取与所述特征信息相对应的参考图像，包括：

在预设图像库中查找与所述特征信息相对应的图像作为参考图像；

和/或，

以所述特征信息为参数，利用预设图像生成算法生成所述参考图像。

7.一种视频信息处理方法，其特征在于，包括：

接收评估视频，以及，所述评估视频中参考图像的位置信息和所述评估视频被发送前视频帧的特征信息；

根据所述位置信息将所述评估视频中所述参考图像与所述评估视频相分离；

获取与所述特征信息相对应的评估图像；

对所述评估图像和所述参考图像进行评估运算，得到所述评估视频的视频质量。

8.根据权利要求7所述的方法，其特征在于，所述位置信息为所述评估视频内视频帧中的至少一个叠加区域位置；

所述根据所述位置信息将所述评估视频中所述参考图像与所述评估视频相分离，包括：

将所述评估视频的视频帧中所述至少一个叠加区域位置上的图像提取出来；

将提取到的所述至少一个叠加区域位置上的图像作为所述参考图像。

9.根据权利要求7所述的方法，其特征在于，所述位置信息为所述评估视频内视频帧之间的帧号；

所述根据所述位置信息将所述评估视频中所述参考图像与所述评估视频相分离，包括：

在所述评估视频内查找与所述帧号相对应的视频帧；

将查找到的视频帧提取出来作为所述参考图像。

10.根据权利要求7-9任意一项所述的方法，其特征在于，所述获取与所述特征信息相对应的评估图像，包括：

在预设图像库中查找与所述特征信息相对应的图像作为评估图像；

和/或，

以所述特征信息为参数，利用预设图像生成算法生成所述评估图像。

11.根据权利要求7-9任意一项所述的方法，其特征在于，所述参考图像中包含有图像标识；

所述获取与所述特征信息相对应的评估图像，包括：

提取所述参考图像中的图像标识；

在预设图像库中查找与所述图像标识相对应图像作为评估图像，所述预设图像库中包括多个设置有编号的图像。

12.一种视频发送设备，其特征在于，包括：

特征信息获取单元，用于获取原始视频内视频帧的特征信息；

参考图像获取单元，用于获取与所述特征信息相对应的参考图像；

评估视频获取单元，用于将所述参考图像叠加到所述原始视频内的预设位置上，得到评估视频；

发送单元，用于发送所述评估视频、所述预设位置和所述特征信息，以使得所述评估视频的接收方从所述评估视频中预设位置上提取所述参考图像，以及，利用所述参考图像和与所述特征信息对应的评估图像确定所述评估视频的视频质量。

13.根据权利要求12所述的设备，其特征在于，所述特征信息获取单元，包括：

第一特征获取子单元，用于获取至少一个预设特征；

第一特征值提取子单元，用于分别提取所述原始视频内至少一个视频帧中所述至少一个预设特征的特征值。

14.根据权利要求12或13所述的设备，其特征在于，所述评估视频获取单元，包括：

区域获取子单元，用于获取所述至少一个视频帧中多个视频帧中的预设叠加区域；

图像叠加子单元，用于将所述参考图像整体或分割后叠加到与所述参考图像对应视频帧中的预设叠加区域上，得到所述评估视频。

15.根据权利要求12所述的设备，其特征在于，所述特征信息获取单元，包括：

第二特征获取子单元，用于获取至少一个预设特征；

第二特征值提取子单元，用于获取所述原始视频内预设视频流中多个视频帧中的所述至少一个预设特征的特征值；

特征值确定子单元，用于根据所述预设视频流中多个视频帧中所述至少一个预设特征的特征值，确定与所述预设视频流对应的综合特征值。

16.根据权利要求12或15所述的设备，其特征在于，所述评估视频获取单元，包括：

帧位置获取子单元，用于获取所述预设视频流中的预留帧位置；

视频帧插入子单元，用于将所述参考图像作为一个视频帧插入到所述预设视频流中的预留帧位置上，得到所述评估视频。

17.根据权利要求12-16任意一项所述的设备，其特征在于，所述参考图像获取单元，包括：

图像查找子单元，用于在预设图像库中查找与所述特征信息相对应的图像作为评估图像；

和/或，

图像生成子单元，用于以所述特征信息为参数，利用预设图像生成算法生成所述参考图像。

18.一种视频接收设备，其特征在于，包括：

接收单元，用于接收评估视频，以及，所述评估视频中参考图像的位置信息和所述评估视频被发送前视频帧的特征信息；

参考图像分离单元，用于根据所述位置信息将所述评估视频中所述参考图像与所述评估视频相分离；

评估图像获取单元，用于获取与所述特征信息相对应的评估图像；

评估运算单元，用于对所述评估图像和所述参考图像进行评估运算，得到所述评估视频的视频质量。

19.根据权利要求18所述的设备，其特征在于，所述位置信息为所述评估视频内视频帧中的至少一个叠加区域位置；

所述参考图像分离单元，包括：

图像提取子单元，用于将所述评估视频的视频帧中所述至少一个叠加区域位置上的图像提取出来；

第一图像确定子单元，用于将提取到的所述至少一个叠加区域位置上的图像作为所述参考图像。

20.根据权利要求18所述的设备，其特征在于，所述位置信息为所述评估视频内视频帧之间的帧号；

所述参考图像分离单元，包括：

视频帧查找子单元，用于在所述评估视频内查找与所述帧号相对应的视频帧；

第二图像确定子单元，用于将查找到的视频帧提取出来作为所述参考图像。

21.根据权利要求18-20任意一项所述的设备，其特征在于，所述评估图像获取单元，包括：

图像查找子单元，用于在预设图像库中查找与所述特征信息相对应的图像作为评估图像；

和/或，

图像生成子单元，用于以所述特征信息为参数，利用预设图像生成算法生成所述评估图像。

22.根据权利要求18-20任意一项所述的设备，其特征在于，所述参考图像中包含有图像标识；

所述评估图像获取子单元，包括：

编号提取子单元，用于提取所述参考图像中的图像标识；

评估图像确定子单元，用于在预设图像库中查找与所述图像标识相对应图像作为评估图像，所述预设图像库中包括多个设置有编号的图像。

23.一种视频信息处理系统，其特征在于，包括：如上述权利要求12-17任意一项所述的视频发送设备和如上述权利要求18-22任意一项所述的视频接收设备。