CN108243033A - 一种对视频质量进行打分的方法、云服务端和系统 - Google Patents

Abstract

本发明提供了一种对视频质量进行打分的方法、云服务端和系统，方法，应用于云服务端，包括：通知主叫移动终端播放标准视频给被叫移动终端；接收被叫移动终端上传的录屏文件，所述录屏文件是由被叫移动终端进行录屏得到的；调用标准视频；云服务端将所述录屏文件与标准视频进行对比，调用视频质量算法计算录屏文件的视频质量分数值。测试工程师只需要使用两部移动终端即可以实现传统技术中携带视频质量测试设备、PC及两部移动终端才能完成的工作，并且去除了不必要的物理连线，减少了设备调试的过程。

Description

一种对视频质量进行打分的方法、云服务端和系统

技术领域

本发明涉及视频技术，特别是指一种对视频质量进行打分的方法、云服务端和系统。

背景技术

随着基于IMS的语音业务(VOLTE，Voice over LTE)时代的到来，高清视频的质量问题备受关注，对于如何评价视频质量，如图1所示，目前业界普遍采用基于视频质量的感知评价(PEVQ，Perceptual Evaluation of Video Quality)算法的实验室测试方法和基于P.1201无参考算法的外场测试方法。实验室测试方法中将参考视频和受损视频同时输入到专业仪表中，按照顺序比较两个视频文件所带的每帧图片信息，通过PEVQ算法得出受损视频与标准视频之间差别得出视频平均意见得分(VMOS，Video Mean Opinion Score)分值。外场测试方法则根据视频接收端的RTP码流的信息帧特性、无线信号指标等评估出收端视频的质量而得出视频质量的VMOS分值，这种方法无需参考发端的视频内容也称为无参考测试方法。

实验室VMOS测试基于专业的大型测试仪表，测试前通过仪表控制在主叫端输入标准的参考视频、在被叫移动终端记录通过网络损伤后的视频，测试仪表根据两个视频的每一帧图像按照帧序列逐一比对，通常一段10秒钟的视频，比对的时间需要20秒左右，由于设备为专业仪表、体积重量均比较大，加上测试时间非常长，给用户测试带来很大的不方便性，测试效率低下，测试成本高、无法在运营商现网大规模推广应用。

外场测试方法采用的无参考算法通过接收端的视频帧特性和无线参数来判定接收端的视频质量及网络损伤，无参考算法在对视频质量的判定系数上存在很大差别，同样的网络环境和帧特性得出的视频质量分值并不一样，在测试结果的认定上各个已有的测试工具并不统一，测试结果缺乏权威性。

主被叫需同时连接到大型测试仪表，导致主、被叫不能分离，测试场景单一，测试的结果只能作为某地区某段时间的视频质量参考值，而现实情况，用户在视频通话的时候主被叫绝大多数时间是不在同一个覆盖小区下的，故跨小区的视频质量测试显得尤其重要，有实际的应用价值，但此种测试方案无法复现主被叫在不同地点发生呼叫的视频质量差的问题。

传统的视频质量测试方式测试出的结果只在本地保存，各个测试工程师的数据基本只有自己知道，无法形成一个统一的视频质量测试数据库，来进行对用户终端类型、无线场景等多维度的大数据分析，导致视频质量测试的应用价值有限。

发明内容

本发明实施例要解决的技术问题是提供一种对视频质量进行打分的方法、云服务端和系统，用以提高视频打分算法的使用效率及测试工程师的测试灵活性，使得视频质量测试实现网络化、自动化和平台化。

为解决上述技术问题，本发明实施例提供的一种对视频质量进行打分的方法，应用于云服务端，方法包括：通知主叫移动终端播放标准视频给被叫移动终端；接收被叫移动终端上传的录屏文件，所述录屏文件是由被叫移动终端进行录屏得到的；调用标准视频；云服务端将所述录屏文件与标准视频进行对比，调用视频质量算法计算录屏文件的视频质量分数值。

在一个优选实施例中，调用视频质量算法计算录屏文件的视频质量分数值之前还包括：

在算法库中存放以及管理不同的视频质量算法。

在一个优选实施例中，还包括：

在标准视频库中保存符合国际电信同盟规定的标准视频文件；

以及，加入选定公司所认可的标准视频文件。

在一个优选实施例中，调用视频质量算法计算录屏文件的视频质量分数值包括：

根据选定的视频质量算法，将标准视频与录屏文件在清晰度维度和流畅度维度上进行对比，根据对比结果进行打分得到视频质量分数值，生成对应的视频质量分值报告并保存至测试报告数据库中。

一种对视频质量进行打分的云服务端，包括：

网络单元，用于通知主叫移动终端播放标准视频给被叫移动终端；

测试结果数据库单元，用于管理测试结果数据库，所述测试结果数据库接收被叫移动终端上传的录屏文件，所述录屏文件是由被叫移动终端进行录屏得到的；

标准视频库单元，用于调用标准视频；

视频质量算法单元，用于将所述录屏文件与标准视频进行对比，调用视频质量算法计算录屏文件的视频质量分数值。

在一个优选实施例中，还包括：

算法库单元，用于在算法库中存放以及管理不同的视频质量算法。

在一个优选实施例中，标准视频库单元，还用于在标准视频库中保存符合国际电信同盟规定的标准视频文件；

以及，加入选定公司所认可的标准视频文件。

在一个优选实施例中，视频质量算法单元包括：

算法模块，用于根据选定的视频质量算法，将标准视频与录屏文件在清晰度维度和流畅度维度上进行对比，根据对比结果进行打分得到视频质量分数值；

测试报告模块，用于生成对应的视频质量分值报告并保存至测试报告数据库中。

在一个优选实施例中，还包括：

测试报告数据库单元，用于管理测试报告数据库，测试报告数据库保存测试报告并将测试报告传送给移动终端，使得移动终端上实时呈现测试报告的内容，以及，支持通过网页查询与呈现测试报告的内容。

一种对视频质量进行打分的系统，包括云服务端、主叫移动终端和被叫移动终端：

主叫移动终端，用于播放标准视频给被叫移动终端；

被叫移动终端，用于进行录屏，得到录屏文件；

云服务端，用于接收被叫移动终端上传的录屏文件；

调用标准视频；

将所述录屏文件与标准视频进行对比，调用视频质量算法计算录屏文件的视频质量分数值。

与现有技术相比，本发明至少具有以下有益效果：测试工程师只需要使用两部移动终端即可以实现传统技术中携带视频质量测试设备、PC及两部移动终端才能完成的工作，并且去除了不必要的物理连线，减少了设备调试的过程。以及，为仿真模拟投诉用户所反应的情况，主、被叫移动终端可以在不同的地点进行视频通话测试。

附图说明

图1为现有基于PEVQ算法的测试视频平均意见得分的原理示意图；

图2为一种视频质量打分方法的工作原理示意图；

图3为基于云服务端的测试视频平均意见得分的系统架构示意图

图4为测试过程中的数据流向及信息交互示意图。

具体实施方式

为使本发明要解决的技术问题、技术方案和优点更加清楚，下面将结合附图及具体实施例进行详细描述。在下面的描述中，提供诸如具体的配置和组件的特定细节仅仅是为了帮助全面理解本发明的实施例。因此，本领域技术人员应该清楚，可以对这里描述的实施例进行各种改变和修改而不脱离本发明的范围和精神。另外，为了清楚和简洁，省略了对已知功能和构造的描述。

为改进现有测试视频通话质量技术，从增加视频质量测试的应用场景、提高测试效率、方便测试，以及积累大数据进行多维度分析等方面考虑，提出基于视频质量云服务端(简称：云服务端)测试视频通话质量的技术。

本发明实施例提供一种对视频质量进行打分的方法，应用于云服务端，如图2所示，方法包括：

通知主叫移动终端播放标准视频给被叫移动终端；

接收被叫移动终端上传的录屏文件，所述录屏文件是由被叫移动终端进行录屏得到的；即，播放给该被叫移动终端的标准视频到达被叫移动终端，并在被叫移动终端的屏幕上进行播放，被叫移动终端进行录屏得到所述录屏文件；

调用标准视频；

云服务端将所述录屏文件与标准视频进行对比，调用视频质量算法计算录屏文件的视频质量分数值。

应用所提供的技术，测试工程师只需要使用两部移动终端即可以实现传统技术中携带视频质量测试设备、PC及两部移动终端才能完成的工作，并且去除了不必要的物理连线，减少了设备调试的过程。以及，为仿真模拟投诉用户所反应的情况，主、被叫移动终端可以在不同的地点进行视频通话测试。

在一个优选实施例中，云服务端实现移动终端的接入管理、呼叫控制、用户管理、测试用例管理、测试任务管理、测试结果统计、测试日志管理、视频文件管理、维护配置，以及，视频质量测试结果的统计和呈现功能。

在一个优选实施例中，对终端输入的视频文件进行预处理，预处理包括时间同步、帧检测。

在一个优选实施例中，具有算法库，调用视频质量算法计算录屏文件的视频质量分数值之前还包括：

在算法库中存放多种视频质量算法，且能够选择合适的视频质量算法来计算视频质量分数值。

算法库支持以PEVQ算法为代表的多种视频质量算法；能够选择软件算法模块计算视频质量分数值或者选择诸如VMOS盒等视频质量设备计算视频质量分数值；能够适配多个厂家出产的视频质量测试设备。

在一个优选实施例中，还包括：

在标准视频库中保存符合国际电信同盟(ITU，InternationalTelecommunications Union)规定的标准视频文件；符合ITU规定的标准视频文件会在帧率，动态、静态等指标上有所不同；

根据需要加入选定公司所认可的统一视频文件，比如中国移动所认可的视频文件。

标准视频库除了保存标准视频文件外，当移动终端的测试结果上传至视频质量云服务端后，云服务端会根据上传的测试结果，选择相应视频与上传的标准视频文件一并送入视频质量算法进行打分，视频质量算法从算法库中选择而出。

移动终端运行测试业务逻辑，进行测试后，会将测试结果保存在标准视频库中，在需要时会被调用，同时可以通过Web形式来进行相应的查询与数据呈现。在视频质量测试中最主要的测试结果为录屏文件，其他的测试结果还包括网络信息、终端信息和GPS信息等。

在一个优选实施例中，调用视频质量算法计算录屏文件的视频质量分数值包括：

根据选定的PEVQ算法，将标准视频与录屏文件进行对比，进行打分得到VMOS分值，生成视频质量分值报告并保存至测试报告数据库。

应用所提供的技术，克服了现有视频质量测试技术缺乏灵活性、测试效率低、测试场景单一等缺点，使得视频质量测试更加方便灵活，并且由于没有设备的License等限制，使得云服务端中的视频质量算法作为资源池，得到更有效率的利用。

在一个优选实施例中，测试报告数据库保存测试报告并将测试报告传送给移动终端，使得移动终端上实时呈现本次测试的视频质量分数值，测试报告数据库同样可以通过Web形式来进行相应的查询与数据呈现。

在一个应用场景中，云服务端集成视频质量打分(如VMOS打分)功能、移动终端控制功能；

移动终端开发相应的APP，移动终端通过网络与云服务端连接；

云服务端对移动终端进行测试控制，主叫移动终端播放标准视频给被叫移动终端，被叫移动终端进行录屏，整个测试过程在VoLTE现网环境下进行；

测试完成后，被叫移动终端将录屏文件上传至云服务端，云服务端进行视频质量打分。

应用所提供的技术，移动终端不需要连接大型视频质量测试设备，如VMOS盒，移动终端只要能接入到VoLTE网络即可-即能正常的拨打视频电话和正常上网即可，主、被叫可以分布在不同的小区或跨省市地区；云端视频质量打分平台可同时为多路视频通话进行评分，提高视频质量算法的使用率。

本发明实施例中，将视频质量算法-如PEVQ有参考、VQMON无参考算法等集中在云服务端侧-云服务端，移动终端通过互相拨打进行发端视频播放、收端视频记录，将视频文件上传至云服务端侧，云服务端侧对视频文件进行打分。

为此，本发明实施例提供一种对视频质量进行打分的云服务端，如图3所示，包括：

网络单元301，用于通知主叫移动终端播放标准视频给被叫移动终端；

测试结果数据库单元302，用于管理测试结果数据库，所述测试结果数据库接收被叫移动终端上传的录屏文件，所述录屏文件是由被叫移动终端进行录屏得到的；

标准视频库单元303，用于调用标准视频；

视频质量算法单元304，用于将所述录屏文件与标准视频进行对比，调用视频质量算法计算录屏文件的视频质量分数值。

应用所提供的技术，测试工程师只需要拿两部移动终端即可以实现传统的需要带视频质量测试设备、PC及两部移动终端才能完成的工作，并且去除了不必要的物理连线，减少设备调试的过程。并且，为实现投诉用户等反应的情况，主、被叫移动终端可以在不同的地点进行视频通话测试。

移动终端运行测试业务逻辑，进行测试后，会将测试结果上传到测试结果数据库，在视频质量测试中，最主要的测试结果为录屏文件，其他的测试结果还包括网络信息、终端信息、GPS信息等。在一个优选实施例中，测试结果数据库单元302，用于管理测试结果数据库，测试结果数据库中保存录屏文件，通过web形式来进行相应的查询与数据呈现，录屏文件在需要时会被调用。

云服务端，可运行在Windows/Linux平台上，提供可访问界面供用户访问。在一个优选实施例中，云服务端，对视频质量测试过程进行管理和控制；作为整个系统的总控部分，实现移动终端的接入管理、呼叫控制、用户管理、测试用例管理、测试任务管理、测试结果统计、测试日志管理、视频文件管理、维护配置、视频质量测试结果的统计和呈现等功能；

支持对终端输入的视频文件进行预处理，包括时间同步、帧检测等；

具有强大的算法库，支持以PEVQ算法为代表的VMOS算法等多种视频质量算法；

选择视频质量算法进行视频质量分数值计算，或者选择诸如VMOS盒等视频质量设备进行视频质量分数值计算；

以及，能够适配与多个厂家的视频质量测试设备。

云服务端不仅实现了上述的通用功能，而且还实现了多种的其他功能以解决技术问题，实现发明目的：

在一个优选实施例中，云服务端包括算法库单元，用于在算法库中存放以及管理不同的视频质量算法。视频质量算法包括PEVQ等VMOS算法。

在一个优选实施例中，

标准视频库单元303，还用于在标准视频库中保存符合国际电信同盟规定的标准视频文件，包括不同的帧率，动态、静态等多种视频文件；

以及，加入选定公司所认可的标准视频文件，比如中国移动认可的视频文件。

在一个优选实施例中，视频质量算法单元304包括：

算法模块，用于根据选定的视频质量算法，将标准视频与录屏文件在清晰度维度和流畅度维度上进行对比，根据对比结果进行打分得到视频质量分数值；

测试报告模块，用于生成对应的视频质量分值报告并保存至测试报告数据库中。

在一个优选实施例中，如图3所示，还包括：

测试报告数据库单元305，用于管理测试报告数据库，测试报告数据库保存测试报告并将测试报告传送给移动终端，使得移动终端上实时呈现测试报告的内容，以及，支持通过网页查询与呈现测试报告的内容。

本发明实施例提供一种对视频质量进行打分的系统，如图4所示，包括云服务端、主叫移动终端和被叫移动终端：

主叫移动终端，用于播放标准视频给被叫移动终端；

被叫移动终端，用于进行录屏，得到录屏文件；

云服务端，用于接收被叫移动终端上传的录屏文件；

调用标准视频；

将所述录屏文件与标准视频进行对比，调用视频质量算法计算录屏文件的视频质量分数值。

应用所提供的技术，测试工程师只需要拿两部移动终端即可以实现传统的需要带视频质量测试设备、PC及两部移动终端才能完成的工作，并且去除了不必要的物理连线，减少设备调试的过程。为实现投诉用户等反应的情况，主、被叫移动终端可以在不同的地点进行视频通话测试。

在一个优选实施例中，基于云服务端的VMOS测试系统架构，包括：

移动终端，具有操作维护功能，支持通过UI访问系统操作维护界面，设置配置参数，选择测试任务；以及

执行测试功能，主要是从云服务端接收指令，执行测试任务，采集测试数据形成测试结果，将测试结果报告给云服务端，最主要的测试结果为录屏文件。

云服务端，可运行在Windows/Linux平台上，提供可访问界面供用户访问。负责对视频质量测试过程进行管理和控制，作为整个系统的总控部分，具备移动终端的接入管理、呼叫控制、用户管理、测试用例管理、测试任务管理、测试结果统计、测试日志管理、视频文件管理、维护配置、视频质量测试结果的统计和呈现等功能；

支持对终端输入的视频文件进行预处理，预处理包括时间同步、帧检测等；

具有强大的算法库，支持以PEVQ算法为代表的VMOS算法等多种视频质量算法；

具有选择软件算法计算视频质量分数值或者选择诸如VMOS盒等视频质量设备计算视频质量分数值的功能；

以及，能够适配多个厂家的视频质量测试设备。

除了视频质量云服务端的通用功能外，还需要对云服务端中关于其核心功能视频质量打分的相关功能模块进行详细描述。

在一个优选实施例中，云服务端中各主要功能模块的功能及信息交互包括：

标准视频库，用于保存符合ITU规定的标准视频文件，标准视频文件包括不同的帧率，动态、静态等多种视频文件，同时可以根据需要加入某公司认可的统一视频文件，比如中国移动认可的视频。标准视频库除了保存视频外，当移动终端的测试结果上传至视频质量云服务端后，云服务端会根据上传信息，选择相应视频与上传的标准视频文件一并送入视频质量算法打分。

测试结果数据库，移动终端运行测试业务逻辑，进行测试后，会将测试结果保存在该测试结果数据库中，在需要时会被调用，同时可以通过Web形式来进行相应的查询与数据呈现，在视频质量测试中最主要的测试结果为录屏文件，其他的测试结果还包括网络信息、终端信息、GPS信息等。

视频质量算法单元，集成了多种视频质量算法，包括PEVQ等VMOS算法，主要功能即将送入的标准视频及录屏文件进行对比，进行打分，生成的视频质量分值报告保存至测试报告数据库中。

测试报告数据库，用来保存测试报告并将测试报告传送给移动终端，使得移动终端上实时呈现本次测试的视频质量分数值，同样可以通过Web形式来进行相应的查询与数据呈现。

在一个应用场景中，测试系统的测试过程包括：

步骤a，被叫移动终端启动软件，处于自动视频通话监听状态；

步骤b，主叫移动终端拨打被叫移动终端，被叫移动终端自动接听后，主叫移动终端播放视频；

步骤c，主叫移动终端、被叫移动终端在现网中进行视频通话，被叫移动终端录屏，得到录屏文件；

步骤d，被叫移动终端将录屏文件上传至视频质量云服务端；

步骤e，视频质量云服务端根据上传的录屏文件与标准视频进行对比，调用视频质量算法计算视频质量分数值，计算的结果反馈至被叫移动终端。

测试系统克服了现有视频质量测试技术缺乏灵活性、测试效率低、测试场景单一等缺点，使得视频质量测试更加方便灵活，并且由于没有设备License限制，使得云服务端中的视频质量算法作为资源池，得到更有效率的利用。测试工程师只需要拿两部移动终端即可以实现传统的需要带视频质量测试设备、PC及两部移动终端才能完成的工作，去除了不必要的物理连线，减少了设备调试的过程；为模拟实现投诉用户反应的情况，主被叫移动终端可以在不同的地点进行视频通话测试。

云服务端中会保存所有测试的数据及测试结果，可以进行诸如终端类型、网络制式、测试地点等多维度的测试数据分析，对终端类型、网络制式等进行统计性的分析，给出指导性意见。

应理解，说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此，在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外，这些特定的特征、结构或特性可以任意适合的方式结合在一个或多个实施例中。

在本发明的各种实施例中，应理解，下述各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。

另外，本文中术语“系统”和“网络”在本文中常可互换使用。

应理解，本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。

在本申请所提供的实施例中，应理解，“与A相应的B”表示B与A相关联，根据A可以确定B。但还应理解，根据A确定B并不意味着仅仅根据A确定B，还可以根据A和/或其它信息确定B。

以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明所述原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种对视频质量进行打分的方法，应用于云服务端，其特征在于，方法包括：

通知主叫移动终端播放标准视频给被叫移动终端；

接收被叫移动终端上传的录屏文件，所述录屏文件是由被叫移动终端进行录屏得到的；

调用标准视频；

云服务端将所述录屏文件与标准视频进行对比，调用视频质量算法计算录屏文件的视频质量分数值。

2.如权利要求1所述的方法，其特征在于，调用视频质量算法计算录屏文件的视频质量分数值之前还包括：

在算法库中存放以及管理不同的视频质量算法。

3.如权利要求1所述的方法，其特征在于，还包括：

在标准视频库中保存符合国际电信同盟规定的标准视频文件；

以及，加入选定公司所认可的标准视频文件。

4.如权利要求1所述的方法，其特征在于，调用视频质量算法计算录屏文件的视频质量分数值包括：

根据选定的视频质量算法，将标准视频与录屏文件在清晰度维度和流畅度维度上进行对比，根据对比结果进行打分得到视频质量分数值，生成对应的视频质量分值报告并保存至测试报告数据库中。

5.一种对视频质量进行打分的云服务端，其特征在于，包括：

网络单元，用于通知主叫移动终端播放标准视频给被叫移动终端；

测试结果数据库单元，用于管理测试结果数据库，所述测试结果数据库接收被叫移动终端上传的录屏文件，所述录屏文件是由被叫移动终端进行录屏得到的；

标准视频库单元，用于调用标准视频；

视频质量算法单元，用于将所述录屏文件与标准视频进行对比，调用视频质量算法计算录屏文件的视频质量分数值。

6.如权利要求5所述的云服务端，其特征在于，还包括：

算法库单元，用于在算法库中存放以及管理不同的视频质量算法。

7.如权利要求5所述的云服务端，其特征在于，

标准视频库单元，还用于在标准视频库中保存符合国际电信同盟规定的标准视频文件；

以及，加入选定公司所认可的标准视频文件。

8.如权利要求5所述的云服务端，其特征在于，视频质量算法单元包括：

算法模块，用于根据选定的视频质量算法，将标准视频与录屏文件在清晰度维度和流畅度维度上进行对比，根据对比结果进行打分得到视频质量分数值；

测试报告模块，用于生成对应的视频质量分值报告并保存至测试报告数据库中。

9.如权利要求5所述的云服务端，其特征在于，还包括：

测试报告数据库单元，用于管理测试报告数据库，测试报告数据库保存测试报告并将测试报告传送给移动终端，使得移动终端上实时呈现测试报告的内容，以及，支持通过网页查询与呈现测试报告的内容。

10.一种对视频质量进行打分的系统，其特征在于，包括权利要求5至9任意一项中的云服务端，以及主叫移动终端和被叫移动终端：

主叫移动终端，用于播放标准视频给被叫移动终端；

被叫移动终端，用于进行录屏，得到录屏文件；

云服务端，用于接收被叫移动终端上传的录屏文件；

调用标准视频；

将所述录屏文件与标准视频进行对比，调用视频质量算法计算录屏文件的视频质量分数值。