CN105282541A - 一种应用于视频点播系统的测试装置及测试方法 - Google Patents

Abstract

本发明涉及一种应用于视频点播系统的测试装置，包括测试管理分析系统、接口测试机和性能测试机；测试管理分析系统用于提供UI界面，设置测试参数，发送测试指令给接口测试机和性能测试机，接收、分析及显示测试结果，管理接口测试机和性能测试机；接口测试机向测试管理分析系统注册，接收测试指令，按照测试参数生成测试请求和测试数据包并发送给被测的视频点播系统，接收测试响应，将测试响应返回给测试管理分析系统进行分析；性能测试机向测试管理分析系统注册，接收测试管理分析系统的测试指令，按照测试参数生成测试请求和测试数据包并发送给被测的视频点播系统，接收测试响应，对测试响应进行统计分析，将分析结果返回给测试管理分析系统。

Description

一种应用于视频点播系统的测试装置及测试方法

技术领域

本发明涉及视频点播技术领域，特别涉及一种应用于视频点播系统的测试装置及测试方法。

背景技术

随着网络技术的发展，无论是在互联网，还是在有线电视网，甚至在移动网，视频点播业务都已经成为了各厂商争权夺利的主战场。各厂商从视频内容质量到视频点播系统的服务质量都开展了激烈的竞争。而视频点播系统的功能和性能直接影响用户的体验，如果系统可承载的并发用户数不高，则会造成高峰期很多用户的点播请求被拒绝，直接导致用户的流失和运营商收入的减少。如果不考虑用户量，盲目的增强点播系统，提升并发量，又会造成成本过高和资源的浪费。因此需要根据用户量的多少来部署合适规模的视频点播系统，故如何准确地评测视频点播系统的功能和性能，不但对系统的生产厂商，而且对系统的运营商都至关重要。

最直观也最真实的视频点播系统的测试方法是在示范区域部署视频点播系统，然后请求真实用户进行点播，从而进行评测。但是此种方法一方面需要真实部署系统，另一方面需要发展大规模的测试用户，成本和周期都太高。

在测试领域，也有一些专业的测试设备和仪器，如IXIA和安捷伦等公司的测试仪表，不过这些专业的设备一方面是造价昂贵，另一方面是大多专业设备只能测试比较基础的网络性能，如二层、三层网络连接，少部分设备支持2～7层的协议。其中IXIA的IxLoad可以评测基于RTSP/RTP的VOD，但是其只能测试视频点播系统的整体功能和性能，无法针对系统的各个模块进行具体测试，而且也无法支持中国的NGB标准，故无法直接利用这些专业设备进行视频点播系统的测试。

因此，如何提出一种应用于视频点播系统的测试装置和方法，针对视频点播系统低成本快速地进行功能和性能测试，是一个亟待解决的问题。

发明内容

本发明的目的在于克服现有技术中的视频点播测试设备造价昂贵，且测试对象范围有限的缺陷，从而提供一种低成本的快速测试设备。

为了实现上述目的，本发明提供了一种应用于视频点播系统的测试装置，包括测试管理分析系统、接口测试机和性能测试机；其中，所述接口测试机与性能测试机分别连接到测试管理分析系统；

所述测试管理分析系统用于提供UI界面，设置测试参数，发送测试指令给接口测试机和性能测试机，接收测试机返回的测试结果，并分析及显示测试结果；所述测试管理分析系统还负责管理接口测试机和性能测试机；

所述接口测试机用于向测试管理分析系统注册，负责接收测试管理分析系统的测试指令，按照测试参数生成测试请求和测试数据包，将测试请求和测试数据包发送给被测的视频点播系统，接收被测视频点播系统所返回的测试响应，将采集到的测试响应返回给测试管理分析系统进行分析，以验证被测视频点播系统的接口功能正确性；

所述性能测试机用于向测试管理分析系统注册，负责接收测试管理分析系统的测试指令，按照测试参数生成测试请求和高并发的测试数据包，将测试请求和高并发的测试数据包发送给被测的视频点播系统，接收被测的视频点播系统返回的测试响应，对测试响应进行统计分析，将分析结果返回给测试管理分析系统，验证被测视频点播系统的性能，所述被测视频点播系统的性能包括并发量、吞吐、时延、时延抖动在内的参数。

上述技术方案中，所述接口测试机有一个或多个，其数目能根据需要动态增加。

上述技术方案中，所述性能测试机有一个或多个，其数目能根据需要动态增加。

上述技术方案中，所述测试管理分析系统通过与接口测试机或性能测试机建立心跳连接来维护接口测试机或性能测试机的生命周期；所述接口测试机或性能测试机通过心跳将测试任务的执行状态通告给测试管理分析系统，测试管理分析系统据此监测测试机的运行状况。

上述技术方案中，所述测试参数包括：测试请求的最大并发数、开始时间、持续时间、请求的并发分布、生成速度。

上述技术方案中，所述接口测试机或性能测试机至少包括两种类型，一种类型的接口测试机或性能测试机用于对符合NGB标准的视频点播系统进行测试，另一种类型的接口测试机或性能测试机用于对符合NGOD标准的视频点播系统进行测试。

本发明还提供了基于所述的应用于视频点播系统的测试装置所实现的测试方法，包括：

步骤1)、注册；所述性能测试机、接口测试机分别与测试管理分析系统建立连接，向测试管理分析系统注册；

步骤2)、测试；所述测试管理分析系统分别向所述性能测试机、接口测试机发送测试指令，性能测试机或接口测试机接收测试管理分析系统的测试指令，按照测试指令向被测视频点播系统发送测试数据包，并接收被测视频点播系统的响应数据包，进行统计分析，将测试结果返回给所述测试管理分析系统。

上述技术方案中，所述步骤1)进一步包括：

步骤1-1)、在测试管理分析系统设置接口测试机或性能测试机的IP地址和端口；

步骤1-2)、测试管理分析系统向接口测试机或性能测试机发起连接请求，接口测试机或性能测试机响应连接请求，与测试管理分析系统建立连接；

步骤1-3)、接口测试机或性能测试机报告自身的类型和其支持的测试指令列表，完成注册；

步骤1-4)、测试管理分析系统与接口测试机或性能测试机之间通过心跳保持连接，接口测试机或性能测试机通过心跳信号将测试任务的执行状态通过给测试管理分析系统，测试管理分析系统根据此监测接口测试机或性能测试机的运行状况。

上述技术方案中，所述步骤2)进一步包括：

步骤2-1)、在测试管理分析系统设置测试参数；

步骤2-2)、测试管理分析系统向接口测试机或性能测试机发送测试指令；

步骤2-3)、接口测试机或性能测试机根据测试指令中的测试参数生成测试数据包，所述测试参数包括：测试请求的最大并发数、开始时间、持续时间、请求的并发分布、生成速度；

步骤2-4)、接口测试机或性能测试机向被测设备和系统发送测试数据包，并采集被测设备和系统返回的响应数据包，进行统计分析；

步骤2-5)、接口测试机或性能测试机将采集到的响应数据包和统计分析的测试结果返回给测试管理分析系统；

步骤2-6)、测试管理分析系统分析响应数据包并显示测试结果。

本发明的优点在于：

本发明通过组件化接口测试机和性能测试机，将测试机注册到测试管理分析系统，提升了视频点播系统测试装置的可扩展性，通过动态增加测试机，可模拟大规模并发的场景，对符合NGB或NGOD标准的视频点播系统的整体及各个模块的功能和性能进行测试，快速验证其是否符合规范，是否符合性能指标，节省了测试成本和周期，提高了测试效率以及视频点播系统高负载情况下的测试准确性。

附图说明

图1是本发明的应用于视频点播系统的测试装置的结构示意图；

图2是接口测试机的注册过程示意图；

图3是性能测试机的注册过程示意图；

图4是测试机与测试管理分析系统做时间同步的示意图；

图5是接口测试机或性能测试机对待测试设备做测试的流程图。

具体实施方式

现结合附图对本发明作进一步的描述。

参考图1，本发明的应用于视频点播系统的测试装置包括测试管理分析系统、接口测试机和性能测试机；其中，所述接口测试机与性能测试机分别连接到测试管理分析系统。

下面对该装置中的各个部分的功能做进一步的描述。

所述测试管理分析系统用于负责提供UI界面，设置测试参数，发送测试指令给接口测试机和性能测试机，接收测试机返回的测试结果，并分析测试结果，进行显示；该系统还负责管理接口测试机和性能测试机。

所述接口测试机用于向测试管理分析系统注册，负责接收测试管理分析系统的测试指令，按照测试参数生成测试请求和测试数据包，将测试请求和测试数据包发送给被测视频点播系统，接收被测视频点播系统所返回的测试响应，将采集到的测试响应返回给测试管理分析系统进行分析，以验证被测视频点播系统的接口功能正确性。

所述性能测试机用于向测试管理分析系统注册，负责接收测试管理分析系统的测试指令，按照测试参数生成测试请求和高并发的测试数据包，将测试请求和高并发的测试数据包发送给被测的视频点播系统，接收被测的视频点播系统返回的测试响应，对测试响应进行统计分析，将分析结果返回给测试管理分析系统，验证被测视频点播系统的性能，所述被测视频点播系统的性能包括但不限于：并发量、吞吐、时延、时延抖动等参数。

图1为本发明的测试装置的示例性描述，在该示例中，所述接口测试机和性能测试机各自有一个，在实际应用中，所述接口测试机和性能测试机各自可以有一个或多个。此外，接口测试机可动态增加，以满足被测视频点播系统新增加的接口功能验证需求，性能测试机也可动态增加，以满足被测视频点播系统新增加的性能验证需求(如并发、吞吐等)。

测试管理分析系统在管理接口测试机与性能测试机时，通过与接口测试机或性能测试机建立心跳连接来维护接口测试机或性能测试机的生命周期；所述接口测试机或性能测试机通过心跳将测试任务的执行状态通告给测试管理分析系统，测试管理分析系统据此监测测试机的运行状况。

所述接口测试机和性能测试机根据测试指令中的测试参数生成测试数据包，测试参数包含但不限于：测试请求的最大并发数、开始时间、持续时间、请求的并发分布(瞬时分布、均与分布、泊松分布)、生成速度等。

作为一种优选实现方式，所述接口测试机包括不同的类型，其中一种类型的接口测试机能够对符合NGB标准的视频点播系统进行测试，另一种类型的接口测试机能够对符合NGOD标准的视频点播系统进行测试。所述性能测试机也包括不同的类型，其中一种类型的性能测试机能够对符合NGB标准的视频点播系统进行测试，另一种类型的性能测试机能够对符合NGOD标准的视频点播系统进行测试。

本发明还提供了基于前述的测试装置所实现的应用于视频点播系统的测试方法，包括：

注册过程：性能测试机、接口测试机分别与测试管理分析系统建立连接，向测试管理分析系统注册；

测试过程：测试管理分析系统向性能测试机、接口测试机发送测试指令，性能测试机或接口测试机接收测试管理分析系统的测试指令，按照测试指令向被测视频点播系统发送测试数据包，并接收被测视频点播系统的响应数据包，进行统计分析，将测试结果返回给测试管理分析系统。

图2为接口测试机的注册过程，包括：

2-1、在测试管理分析系统设置接口测试机的IP地址和端口；

2-2、测试管理分析系统向接口测试机发起连接请求，接口测试机响应连接请求，与测试管理分析系统建立连接；

2-3、接口测试机报告接口测试机的类型和其支持的测试指令列表，完成注册；

2-4、测试管理分析系统与接口测试机之间通过心跳保持连接，接口测试机通过心跳信号将测试任务的执行状态通过给测试管理分析系统，测试管理分析系统根据此监测接口测试机的运行状况。

图3为性能测试机的注册过程，包括：

3-1、在测试管理分析系统设置性能测试机的IP地址和端口；

3-2、测试管理分析系统向性能测试机发起连接请求，性能测试机响应连接请求，与测试管理分析系统建立连接；

3-3、性能测试机报告性能测试机的类型和其支持的测试指令列表，完成注册；

3-4、测试管理分析系统与性能测试机之间通过心跳保持连接，性能测试机通过心跳信号将测试任务的执行状态通过给测试管理分析系统，测试管理分析系统根据此监测性能测试机的运行状况。

为了更好地掌握测试指令的执行状况，提高测试的准确性，测试机(接口测试机或性能测试机)需要和测试管理分析系统校准时间，进行时间同步。具体步骤如图4所示，包括：

4-1、测试管理分析系统发送本机当前时间给接口测试机和性能测试机；

4-2、接口测试机和性能测试机接收时间同步指令，并将指令的接收时间和本机的当前时间发送给测试管理分析系统；

4-3、测试管理分析系统通过多次同步时间，并分析指令的发送时间和响应的接收时间，计算与测试机之间的时间差和网络延时。

接口测试机和性能测试机注册到测试管理分析系统后，接收测试管理分析系统的测试指令，对被测设备和系统进行测试，所述测试过程如图5所示，包括：

5-1、在测试管理分析系统设置测试参数；

5-2、测试管理分析系统向接口测试机或性能测试机发送测试指令；

5-3、接口测试机或性能测试机根据测试指令中的测试参数生成测试数据包，测试参数包含但不限于：测试请求的最大并发数、开始时间、持续时间、请求的并发分布(瞬时分布、均与分布、泊松分布)、生成速度等；

5-4、接口测试机或性能测试机向被测设备和系统发送测试数据包，并采集被测设备和系统返回的响应数据包，进行统计分析；

5-5、接口测试机或性能测试机将采集到的响应数据包和统计分析的测试结果返回给测试管理分析系统；

5-6、测试管理分析系统分析响应数据包并显示测试结果。

以上是对本发明的测试装置及基于该测试装置所实现的测试方法的描述。该测试装置不仅适用于整个视频点播系统，也可以对视频点播系统中的子模块单独进行测试。

最后所应说明的是，以上实施例仅用以说明本发明的技术方案而非限制。尽管参照实施例对本发明进行了详细说明，本领域的普通技术人员应当理解，对本发明的技术方案进行修改或者等同替换，都不脱离本发明技术方案的精神和范围，其均应涵盖在本发明的权利要求范围当中。

Claims (9)

1.一种应用于视频点播系统的测试装置，其特征在于，包括测试管理分析系统、接口测试机和性能测试机；其中，所述接口测试机与性能测试机分别连接到测试管理分析系统；

所述测试管理分析系统用于提供UI界面，设置测试参数，发送测试指令给接口测试机和性能测试机，接收测试机返回的测试结果，并分析及显示测试结果；所述测试管理分析系统还负责管理接口测试机和性能测试机；

所述接口测试机用于向测试管理分析系统注册，负责接收测试管理分析系统的测试指令，按照测试参数生成测试请求和测试数据包，将测试请求和测试数据包发送给被测的视频点播系统，接收被测视频点播系统所返回的测试响应，将采集到的测试响应返回给测试管理分析系统进行分析，以验证被测视频点播系统的接口功能正确性；

所述性能测试机用于向测试管理分析系统注册，负责接收测试管理分析系统的测试指令，按照测试参数生成测试请求和高并发的测试数据包，将测试请求和高并发的测试数据包发送给被测的视频点播系统，接收被测的视频点播系统返回的测试响应，对测试响应进行统计分析，将分析结果返回给测试管理分析系统，验证被测视频点播系统的性能，所述被测视频点播系统的性能包括并发量、吞吐、时延、时延抖动在内的参数。

2.根据权利要求1所述的应用于视频点播系统的测试装置，其特征在于，所述接口测试机有一个或多个，其数目能根据需要动态增加。

3.根据权利要求1所述的应用于视频点播系统的测试装置，其特征在于，所述性能测试机有一个或多个，其数目能根据需要动态增加。

4.根据权利要求1所述的应用于视频点播系统的测试装置，其特征在于，所述测试管理分析系统通过与接口测试机或性能测试机建立心跳连接来维护接口测试机或性能测试机的生命周期；所述接口测试机或性能测试机通过心跳将测试任务的执行状态通告给测试管理分析系统，测试管理分析系统据此监测测试机的运行状况。

5.根据权利要求1所述的应用于视频点播系统的测试装置，其特征在于，所述测试参数包括：测试请求的最大并发数、开始时间、持续时间、请求的并发分布、生成速度。

6.根据权利要求1所述的应用于视频点播系统的测试装置，其特征在于，所述接口测试机或性能测试机至少包括两种类型，一种类型的接口测试机或性能测试机用于对符合NGB标准的视频点播系统进行测试，另一种类型的接口测试机或性能测试机用于对符合NGOD标准的视频点播系统进行测试。

7.基于权利要求1-6之一所述的应用于视频点播系统的测试装置所实现的测试方法，包括：

步骤1)、注册；所述性能测试机、接口测试机分别与测试管理分析系统建立连接，向测试管理分析系统注册；

步骤2)、测试；所述测试管理分析系统分别向所述性能测试机、接口测试机发送测试指令，性能测试机或接口测试机接收测试管理分析系统的测试指令，按照测试指令向被测视频点播系统发送测试数据包，并接收被测视频点播系统的响应数据包，进行统计分析，将测试结果返回给所述测试管理分析系统。

8.根据权利要求7所述的测试方法，其特征在于，所述步骤1)进一步包括：

步骤1-1)、在测试管理分析系统设置接口测试机或性能测试机的IP地址和端口；

步骤1-2)、测试管理分析系统向接口测试机或性能测试机发起连接请求，接口测试机或性能测试机响应连接请求，与测试管理分析系统建立连接；

步骤1-3)、接口测试机或性能测试机报告自身的类型和其支持的测试指令列表，完成注册；

步骤1-4)、测试管理分析系统与接口测试机或性能测试机之间通过心跳保持连接，接口测试机或性能测试机通过心跳信号将测试任务的执行状态通过给测试管理分析系统，测试管理分析系统根据此监测接口测试机或性能测试机的运行状况。

9.根据权利要求7所述的测试方法，其特征在于，所述步骤2)进一步包括：

步骤2-1)、在测试管理分析系统设置测试参数；

步骤2-2)、测试管理分析系统向接口测试机或性能测试机发送测试指令；

步骤2-3)、接口测试机或性能测试机根据测试指令中的测试参数生成测试数据包，所述测试参数包括：测试请求的最大并发数、开始时间、持续时间、请求的并发分布、生成速度；

步骤2-4)、接口测试机或性能测试机向被测设备和系统发送测试数据包，并采集被测设备和系统返回的响应数据包，进行统计分析；

步骤2-5)、接口测试机或性能测试机将采集到的响应数据包和统计分析的测试结果返回给测试管理分析系统；

步骤2-6)、测试管理分析系统分析响应数据包并显示测试结果。