CN106776346A - Ccmts设备的测试方法和装置 - Google Patents

Abstract

本发明提供了一种CCMTS设备的测试方法和装置，涉及通信设备的技术领域，该方法包括：选取用于对待测试CCMTS设备进行测试的测试套件，其中，测试套件中包含至少一个测试用例，每个测试用例对应一个测试脚本；根据每个测试用例对应的测试脚本调用用于对待测试CCMTS设备进行测试的测试信息，其中，测试信息包括预先设置的目标函数库中相应的命令行CLI，和/或，在预先设置的目标用例集合中相应的管理信息库MIB；根据测试信息对待测试CCMTS设备进行测试，得到测试结果；对测试结果进行分析，并根据分析结果确定对待测试CCMTS设备测试是否成功，缓解了现有的自动化测试方法中测试效率较低的技术问题。

Description

CCMTS设备的测试方法和装置

技术领域

本发明涉及通信设备的技术领域，尤其是涉及一种CCMTS设备的测试方法和装置。

背景技术

随着数据通信技术的发展，对数据通信设备的功能和性能要求越来越高，数据通信设备的功能日趋强大、版本迭代也日趋频繁，因此对开发周期的要求也越来越短。但是，数据通信设备在开发过程中，所耗费的测试时间较长，进而延长了整个开发周期。

现有的数据通信设备一般通过命令行界面(Command Line Interface，简称CLI)或用户界面(User Interface，简称UI)进行测试。测试步骤如下：首先，测试人员使用终端工具登录数据通信设备后，通过CLI或UI下发配置；然后，测试人员使用一些测试仪表来模拟数据通信协议和业务流，用于模拟数据通信设备的使用场景；接下来，测试人员通过CLI或网管UI获取测试结果，分析所测功能是否正常并得出测试结论。

随着自动化测试的发展，传统的自动化测试脚本开发一般通过手工执行一次测试，同时使用自动化测试工具的录制功能，把所进行的操作记录下来，生成测试脚本。这样生成的测试脚本回放的成功率比较低，后期维护也比较困难。

因此，现有的自动化测试方法存在以下缺陷：(1)为快速响应市场需求，数据通信设备的功能也在不断扩展，但基于此前现有自动化技术的自动化测试存在脚本复用率低、稳定性差的问题，而且命令行的频繁变更或网管UI界面的变化对自动化测试脚本的维护带来了很大的工作量，进而导致测试周期长；(2)在自动化测试中，只进行CLI测试或网管UI测试，容易遗漏一些问题，不能保证CLI和网管UI的一致性。

发明内容

本发明的目的在于提供一种CCMTS设备的测试方法和装置，以缓解了现有的自动化测试方法中测试效率较低的技术问题。

根据本发明实施例的一个方面，提供了一种CCMTS设备的测试方法，该方法包括：选取对待测试CCMTS设备进行测试的测试套件，其中，测试套件中包含至少一个测试用例，每个测试用例对应一个测试脚本；根据每个所述测试用例对应的测试脚本调用用于对所述待测试CCMTS设备进行测试的测试信息，其中，所述测试信息包括预先设置的目标函数库中相应的命令行CLI，和/或，在预先设置的目标用例集合中相应的管理信息库MIB；根据所述测试信息对所述待测试CCMTS设备进行测试，得到测试结果；对测试结果进行分析，并根据分析结果确定对所述待测试CCMTS设备测试是否成功。

进一步地，根据所述测试信息对所述待测试CCMTS设备进行测试，得到测试结果包括：根据所述测试信息对所述测试脚本中的每个测试步骤进行测试，得到每个测试步骤的测试结果；对测试结果进行分析，并根据分析结果确定是否对所述待测试CCMTS设备测试成功包括：对每个所述测试步骤的测试结果进行分析，并根据分析结果确定是否对所述待测试CCMTS设备测试成功。

进一步地，对每个所述测试步骤的测试结果进行分析包括：将每个所述测试步骤的测试结果与对应的预设测试结果进行对比；如果对比出每个所述测试步骤的测试结果与所述对应的预设测试结果相同，则确定对所述测试步骤的测试通过；如果对比出每个所述测试步骤的测试结果与所述对应的预设测试结果不相同，则确定对所述测试步骤的测试未通过。

进一步地，所述测试步骤的数量为多个，根据分析结果确定是否对所述待测试CCMTS设备测试成功包括：确定多个所述测试步骤中测试未通过的数量；判断所述测试未通过的数量是大于预设数量，还是等于所述预设数量；如果判断出所述测试未通过的数量等于所述预设数量，则确定对所述待测试CCMTS设备的测试成功；如果判断出所述测试未通过的数量大于所述预设数量，则确定对所述待测试CCMTS设备的测试失败。

进一步地，在选取用于对待测试CCMTS设备进行测试的测试套件之前，所述方法还包括：获取所述待测试CCMTS设备的测试版本；根据所述测试版本设置在对所述待测试CCMTS设备进行测试时所需要的环境变量，并设置在所述测试套件时所需要的私有参数；其中，所述环境变量包括以下至少之一：所述待测试CCMTS设备的IP地址，所述待测试CCMTS设备与交换机连接的上联端口及Vlan虚接口，每个所述待测试CCMTS设备之间的拓扑连接参数，测试仪表的IP地址，所述待测试CCMTS设备与所述测试仪表连接的端口参数；所述私有参数包括以下至少之一：调用所述命令行CLI和/或所述管理信息库MIB的控制参数，循环次数，对所述待测试CCMTS设备测试失败后的处理方案。

进一步地，在根据每个所述测试用例对应测试脚本调用用于对所述待测试CCMTS设备进行测试的测试信息之前，所述方法还包括：根据所述测试脚本在所述目标函数库中调用目标测试函数；根据所述目标测试函数读取所述测试用例的工厂文件，其中，所述工厂文件中包括用于对所述待测试CCMTS设备进行初始化配置的配置参数；根据所述配置参数对所述待测试CCMTS设备进行初始化配置。

根据本发明实施例的另一个方面，还提供了一种CCMTS设备的测试装置，该装置包括：选取单元，用于选取对待测试CCMTS设备进行测试的测试套件，其中，测试套件中包含至少一个测试用例，每个测试用例对应一个测试脚本；第一调用单元，用于根据每个所述测试用例对应的测试脚本调用用于对所述待测试CCMTS设备进行测试的测试信息，其中，所述测试信息包括预先设置的目标函数库中相应的命令行CLI，和/或，在预先设置的目标用例集合中相应的管理信息库MIB；测试单元，用于根据所述测试信息对所述待测试CCMTS设备进行测试，得到测试结果；分析单元，用于对测试结果进行分析，并根据分析结果确定是否对所述待测试CCMTS设备测试成功。

进一步地，所述测试单元包括：测试子单元，用于根据所述测试信息对所述测试脚本中的每个测试步骤进行测试，得到每个测试步骤的测试结果；所述分析单元包括：分析确定子单元，用于对每个所述测试步骤的测试结果进行分析，并根据分析结果确定是否对所述待测试CCMTS设备测试成功。

进一步地，所述分析确定子单元用于：将每个所述测试步骤的测试结果与对应的预设测试结果进行对比；如果对比出每个所述测试步骤的测试结果与所述对应的预设测试结果相同，则确定对所述测试步骤的测试通过；如果对比出每个所述测试步骤的测试结果与所述对应的预设测试结果不相同，则确定对所述测试步骤的测试未通过。

进一步地，所述测试步骤的数量为多个，所述分析确定子单元还用于：确定多个所述测试步骤中测试未通过的数量；判断所述测试未通过的数量是等于预设数量，还是等于所述预设数量；如果判断出所述测试未通过的数量等于所述预设数量，则确定对所述待测试CCMTS设备的测试成功；如果判断出所述测试未通过的数量大于所述预设数量，则确定对所述待测试CCMTS设备的测试失败。

在本发明实施例中，首先选择用于对待测试CCMTS设备进行测试的测试用例，以及该测试用例对应的测试脚本；然后，根据测试用例对应的测试脚本调用用于对待测试CCMTS设备进行测试的命令行CLI和管理信息库MIB；接下来，根据命令行CLI和管理信息库MIB对待测试CCMTS设备进行测试，进而，得到测试结果；最后，根据测试结果确定对待测试CCMTS设备测试是否成功。相对于现有技术中仅用CLI或者网管UI的测试方法，本发明实施例通过CLI和MIB的共同使用来进行自动化测试，既保证了业务的功能性验证，同时又保证了测试的一致性和可重复性，提高了测试的准确度和精确度，进而达到缩短测试周期的目的，而且缓解了现有的自动化测试方法中测试效率较低的技术问题。

附图说明

为了更清楚地说明本发明具体实施方式或现有技术中的技术方案，下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施方式，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是根据本发明实施例的一种CCMTS设备的测试方法的流程图；

图2是根据本发明实施例的一种测试拓扑结构的示意图；

图3是根据本发明实施例的一种CCMTS设备的测试装置的示意图；

图4是根据本发明实施例的一种可选地CCMTS设备的测试装置的示意图；

图5是根据本发明实施例的另一种可选地CCMTS设备的测试装置的示意图；以及

图6是根据本发明实施例的另一种可选地CCMTS设备的测试装置的示意图。

具体实施方式

下面将结合附图对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

在本发明的描述中，需要说明的是，术语“中心”、“上”、“下”、“左”、“右”、“竖直”、“水平”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。此外，术语“第一”、“第二”、“第三”仅用于描述目的，而不能理解为指示或暗示相对重要性。

在本发明的描述中，需要说明的是，除非另有明确的规定和限定，术语“安装”、“相连”、“连接”应做广义理解，例如，可以是固定连接，也可以是可拆卸连接，或一体地连接；可以是机械连接，也可以是电连接；可以是直接相连，也可以通过中间媒介间接相连，可以是两个元件内部的连通。对于本领域的普通技术人员而言，可以具体情况理解上述术语在本发明中的具体含义。

实施例一

根据本发明实施例，提供了一种CCMTS设备的测试方法的实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。下面将结合图1和图2对本发明实施例进行详细说明。

图1是根据本发明实施例的一种CCMTS设备的测试方法的流程图，图2是根据本发明实施例的一种测试拓扑结构的示意图。如图1所示，该方法包括如下步骤：

步骤S102，选取对待测试CCMTS设备进行测试的测试套件，其中，测试套件中包含至少一个测试用例，每个测试用例对应一个测试脚本；

在本发明实施例中，预先设置了多个测试套件，每个测试套件中包括至少一个用于对待测试CCMTS设备进行测试的测试用例，每个测试用例均对应一个测试脚本。其中，每个测试套件中的至少一个测试用例均为相关联的测试用例；上述测试脚本又可以称为自动化测试脚本。

步骤S104，根据每个测试用例对应的测试脚本调用用于对待测试CCMTS设备进行测试的测试信息，其中，测试信息包括预先设置的目标函数库中相应的命令行CLI，和/或，在预先设置的目标用例集合中相应的管理信息库MIB；

在本发明实施例中，在上述自动化测试脚本中，可调用的命令行CLI集合均封装在自动化函数库(即，目标函数库)中，该自动化函数库对外提供统一的调用接口，当不同测试版本的待测试CCMTS设备的命令行有变更时，只需要对自动化函数库进行更新即可。可调用的MIB集合均封装在自定义用例集合(即，目标用例集合)中，测试脚本只需调用接口函数并传入自定义用例编号即可，当某个MIB节点对应的取值有变更时，只需维护自定义用例集合。

步骤S106，根据测试信息对待测试CCMTS设备进行测试，得到测试结果；

在本发明实施例中，在获取到的测试信息之后，就可以根据测试信息对待测试CCMTS设备进行测试。

具体地，可以根据测试用例在自定义函数库中调用的命令行CLI和在自定义用例集合中调用的管理信息库MIB来对待测CCMTS设备下发配置测试。例如，当自动化测试脚本中涉及到需要收发流量时，由自动化测试脚本调用二次封装的测试仪表API来占用测试仪表端口、完成待测业务流量构建，并对待测设备进行测试流量的发送。

步骤S108，对测试结果进行分析，并根据分析结果确定是否对待测试CCMTS设备测试成功。

在本发明实施例中，首先选择用于对待测试CCMTS设备进行测试的测试用例，以及该测试用例对应的测试脚本；然后，根据测试用例对应的测试脚本调用用于对待测试CCMTS设备进行测试的命令行CLI和管理信息库MIB；接下来，根据命令行CLI和管理信息库MIB对待测试CCMTS设备进行测试，进而，得到测试结果；最后，根据测试结果确定对待测试CCMTS设备测试是否成功。相对于现有技术中仅用CLI或者网管UI测试方法，本发明实施例通过CLI和MIB的共同使用来进行自动化测试，既保证了业务的功能性验证，同时又保证了测试的一致性和可重复性，提高了测试的准确度和精确度，进而达到缩短测试周期的目的，而且缓解了现有的自动化测试方法中测试效率较低的技术问题。

在本发明实施例的一个可选实施方案中，在选取用于对待测试CCMTS设备进行测试的测试套件之前，该方法还包括如下步骤：

步骤S1011，获取待测试CCMTS设备的测试版本；

步骤S1012，根据测试版本设置在对待测试CCMTS设备进行测试时所需要的环境变量，并设置在测试套件时所需要的私有参数；

其中，环境变量包括以下至少之一：待测试CCMTS设备的IP地址，待测试CCMTS设备与交换机连接的上联端口及Vlan虚接口，每个待测试CCMTS设备之间的拓扑连接参数，测试仪表的IP地址，待测试CCMTS设备与测试仪表连接的端口参数；私有参数包括以下至少之一：调用命令行和/或管理信息库的控制参数，循环次数，对待测试CCMTS设备测试失败后的处理方案。

在本发明实施例中，在选取用于对待测试CCMTS设备进行测试的测试套件之前，首先需要获取待测试CCMTS设备的测试版本，然后在自动化测试服务器上设置与测试环境对应的环境变量、需要执行测试套件的私有参数，其中，测试环境为对该待测试CCMTS设备进行测试的环境。

如果待测试CCMTS设备的数量为多个，那么此时上述环境变量包括各待测试CCMTS设备的IP地址、各待测试CCMTS设备与交换机连接的上联端口及Vlan虚接口、各待测试CCMTS设备之间的拓扑连接参数、测试仪表(Spirent Test Center)IP地址、各待测试CCMTS设备与测试仪表连接的端口参数；测试套件的私有参数包括：调用命令行CLI和/或管理信息库MIB的控制参数、循环次数、测试失败后的处理方案等。

需要说明的是，在本发明实施例中，交换机为图2中所示的与CCMTS设备相连接的交换机，测试仪表为图2中与交换机相连接的测试仪表，自动化测试服务器为与CCMTS设备相连接的服务器。

在根据测试版本设置对待测试CCMTS设备进行测试时所需要的环境变量，并设置测试套件所需要的私有参数之后，就可以通过在Eclipse开发工具中添加的脚本勾选插件进行测试套件包含的自动化测试脚本的选取，通过上述操作可以完成对重点用例或重点模块进行测试，缩短测试周期，提升测试质量。

接下来，就可以通过串口或Telnet协议或安全外壳协议(Secure Shell，简称SSH)建立自动化测试服务器与各待测CCMTS设备的连接并完成登录过程，在建立连接的过程中最多有三次重连，避免待测CCMTS设备短时间内处于busy状态而连接失败。

在建立自动化测试服务器与各待测CCMTS设备的连接并完成登录过程之后，并在根据每个测试用例对应测试脚本调用用于对待测试CCMTS设备进行测试的测试信息之前，该方法还包括如下步骤：

步骤S1031，根据测试脚本在目标函数库中调用目标测试函数；

步骤S1032，根据目标测试函数读取测试用例的工厂文件，其中，工厂文件中包括用于对待测试CCMTS设备进行初始化配置的配置参数；

步骤S1033，根据配置参数对待测试CCMTS设备进行初始化配置。

在本发明实施例中，在对待测试CCMTS设备进行测试之前，需要根据对该待测试CCMTS设备进行测试的测试脚本调用相应的目标测试函数，其中，该目标测试函数用于读取测试用例的工厂文件，以通过该目标测试函数读取的测试用例工厂文件，对待测设备进行初始化。

在本发明实施例的另一个可选实施方式中，

根据测试信息对待测试CCMTS设备进行测试，得到测试结果包括步骤S1041：根据测试信息对测试脚本中的每个测试步骤进行测试，得到每个测试步骤的测试结果。

每个测试用例(也即，每个测试脚本)中均对应多个测试步骤，因此，在本发明实施例中，在对待测试CCMTS设备进行测试时，需要对每个测试用例中每个测试步骤的测试检测点进行检查，获取待测CCMTS设备和测试仪表的检测点结果，其中，待测CCMTS设备的检测点结果主要包括：待测试CCMTS设备和终端各状态机查询、业务运行与流量大小验证、协议报文中关键字段的解析等。

在本发明实施例中，还增加了CLI下发与MIB测试的相互验证功能，其中，相互验证功能指通过CLI进行配置，然后通过MIB进行查看，或者通过MIB进行配置，然后通过CLI进行查看。

对测试结果进行分析，并根据分析结果确定是否对待测试CCMTS设备测试成功包括步骤S1061：对每个测试步骤的测试结果进行分析，并根据分析结果确定是否对待测试CCMTS设备测试成功。

其中，对每个测试步骤的测试结果进行分析包括如下步骤：

S10611，将每个测试步骤的测试结果与对应的预设测试结果进行对比；

S10612，如果对比出每个测试步骤的测试结果与对应的预设测试结果相同，则确定对测试步骤的测试通过；

S10613，如果对比出每个测试步骤的测试结果与对应的预设测试结果不相同，则确定对测试步骤的测试未通过。

在本发明实施例中，可以对每个测试步骤(也即，每个检测点的测试结果)与对应的预期结果(即，下述预设测试结果)进行比对，若检测点结果与预期结果一致，则确定对该检测点的测试通过，否则确定对该检测点的测试不通过。

在获取每个检测点的测试结果之后，就可以下发清除命令至各被测设备来清除设备的相关配置，并释放占用的测试仪表相关端口，保证每个测试脚本的独立性，合理利用测试仪表资源。

在释放占用的测试仪表相关端口之后，就可以根据上述步骤中检测到的每个检测点的测试结果确定对待测试CCMTS设备测试是否成功。

假设，测试步骤的数量为多个，根据分析结果确定是否对待测试CCMTS设备测试成功包括如下步骤：

步骤S1，确定多个测试步骤中测试未通过的数量；

步骤S2，判断测试未通过的数量是等于预设数量，还是大于预设数量；

步骤S3，如果判断出测试未通过的数量等于预设数量，则确定对待测试CCMTS设备的测试成功；

步骤S4，如果判断出测试未通过的数量大于预设数量，则确定对待测试CCMTS设备的测试失败。

在获取到每个检测点的测试结果之后，统计整个测试用例检测点中通过和不通过的数量，作为该测试用例是否通过的判断依据。接下来，判断测试未通过的数量是等于预设数量，还是大于预设数量，优选地，在本发明实施例中，预设数量选取为0。在此情况下，需要判断试未通过的数量的是等于0，还是大于0，其中，如果测试检测点中不通过数量为0，则该自动化测试用例执行成功；如果测试检测点中不通过数量大于0，则该自动化测试用例执行失败。

如果当前自动化用例执行失败了，可以选择是否需要重新执行一次，若是，则执行步骤S1031至步骤S1033，再次执行上述测试步骤，否则继续执行测试套件中其他未执行的测试用例。

当测试套件中的所有测试用例都执行完成后，输出完整的统计报告，报告采用HTML和Excel两种展示形式，它们的内容均包含整个测试套件的执行起止时间及各用例对应的测试目的、测试结果、执行耗时和测试用例的作者，其中，Excel格式的报告可以作为每个版本测试报告的自动生成，而HTML的报告在某个测试用例上可以打开超链接来查看该用例的详细报告，包括各测试步骤信息、各检测点的分析结果及每个单元的执行耗时，方便进行问题定位和脚本优化。

综上，本发明实施例提供的CCMTS设备的测试方法中，提出了一种可以同时使用CLI和MIB对设备进行测试的自动化测试方法，该方法可以通过CLI和MIB的共同使用来进行自动化测试，既保证了业务的功能性验证，同时又保证了测试的一致性和可重复性，且兼顾了二者一致性，与现有技术相比，本发明实施例提供的CCMTS设备的测试方法具有以下优点：

(1)本发明能够预先设置各版本待测试CCMTS设备在进行测试时，所需的环境变量，同时可以自动控制测试仪表中OSI模型的第二到四层涉及的相关业务来对待测试CCMTS设备进行相关业务测试，使得该测试能够覆盖三层数据通信设备(例如，CCMTS设备)的大部分功能点，例如，能够适用于数据通信设备的功能测试、回归测试、冒烟测试和压力测试，本发明实施例提供的测试方法，不仅测试效率高，而且排除了人为因素的干扰，测试结果的一致性较好；

(2)在本发明实施例中，通过测试脚本调用的CLI的自定义函数库和MIB自定义用例集合与自动化脚本是分离的，可以避免命令行CLI和MIB节点反复变更后需重新修改自动化测试脚本的问题，降低了脚本维护成本；

(3)本发明实现了CLI和MIB的集成对比测试，不但保证了二者各自功能正常，同时也能保证二者表述的一致性；

(4)本发明能够充分利用时间和设备及测试仪表资源，提高了测试的准确度和精确度，进而达到缩短测试周期，减少部分测试人力的目的。

实施例二

本发明实施例还提供了一种CCMTS设备的测试装置，该CCMTS设备的测试装置主要用于执行本发明实施例上述内容所提供的CCMTS设备的测试方法，以下对本发明实施例提供的CCMTS设备的测试装置做具体介绍。

图3是根据本发明实施例的一种CCMTS设备的测试装置的示意图，如图3所示，该CCMTS设备的测试装置主要包括：选取单元31，第一调用单元32，测试单元33和分析单元34，其中：

选取单元，用于选取用于对待测试CCMTS设备进行测试的测试套件，其中，测试套件中包含至少一个测试用例，每个测试用例对应一个测试脚本；

第一调用单元，用于根据每个所述测试用例对应的测试脚本调用用于对所述待测试CCMTS设备进行测试的测试信息，其中，所述测试信息包括预先设置的目标函数库中相应的命令行CLI，和/或，在预先设置的目标用例集合中相应的管理信息库MIB；

测试单元，用于根据所述测试信息对所述待测试CCMTS设备进行测试，得到测试结果；

分析单元，用于对测试结果进行分析，并根据分析结果确定是否对所述待测试CCMTS设备测试成功。

在本发明实施例中，首先选择用于对待测试CCMTS设备进行测试的测试用例，以及该测试用例对应的测试脚本；然后，根据测试用例对应的测试脚本调用用于对待测试CCMTS设备进行测试的命令行CLI和管理信息库MIB；接下来，根据命令行CLI和管理信息库MIB对待测试CCMTS设备进行测试，进而，得到测试结果；最后，根据测试结果确定对待测试CCMTS设备测试是否成功。相对于现有技术中仅用CLI或者网管UI的测试方法，本发明实施例通过CLI和MIB的共同使用来进行自动化测试，既保证了业务的功能性验证，同时又保证了测试的一致性和可重复性，提高了测试的准确度和精确度，进而达到缩短测试周期的目的，而且缓解了现有的自动化测试方法中测试效率较低的技术问题。

图4是根据本发明实施例的一种可选地CCMTS设备的测试装置的示意图，如图4所示，测试单元33包括：测试子单元41，用于根据所述测试信息对所述测试脚本中的每个测试步骤进行测试，得到每个测试步骤的测试结果；分析单元34包括：分析确定子单元42，用于对每个所述测试步骤的测试结果进行分析，并根据分析结果确定是否对所述待测试CCMTS设备测试成功。

可选地，所述分析确定子单元用于：将每个所述测试步骤的测试结果与对应的预设测试结果进行对比；如果对比出每个所述测试步骤的测试结果与所述对应的预设测试结果相同，则确定对所述测试步骤的测试通过；如果对比出每个所述测试步骤的测试结果与所述对应的预设测试结果不相同，则确定对所述测试步骤的测试未通过。

可选地，所述测试步骤的数量为多个，所述分析确定子单元还用于：确定多个所述测试步骤中测试未通过的数量；判断所述测试未通过的数量是等于预设数量，还是大于预设数量；如果判断出所述测试未通过的数量等于所述预设数量，则确定对所述待测试CCMTS设备的测试成功；如果判断出所述测试未通过的数量大于所述预设数量，则确定对所述待测试CCMTS设备的测试失败。

图5是根据本发明实施例的另一种可选地CCMTS设备的测试装置的示意图，如图5所示，该装置还包括：获取单元51和设置单元52，其中，获取单元51，用于在选取用于对待测试CCMTS设备进行测试的测试套件之前，获取所述待测试CCMTS设备的测试版本；设置单元52，用于根据所述测试版本设置在对所述待测试CCMTS设备进行测试时所需要的环境变量，并设置在所述测试套件时所需要的私有参数；其中，所述环境变量包括以下至少之一：所述待测试CCMTS设备的IP地址，所述待测试CCMTS设备与交换机连接的上联端口及Vlan虚接口，每个所述待测试CCMTS设备之间的拓扑连接参数，测试仪表的IP地址，所述待测试CCMTS设备与所述测试仪表连接的端口参数；所述私有参数包括以下至少之一：调用所述命令行和/或所述管理信息库的控制参数，循环次数，对所述待测试CCMTS设备测试失败后的处理方案。

图6是根据本发明实施例的另一种可选地CCMTS设备的测试装置的示意图，如图6所示，该装置还包括：第二调用单元61，用于在根据每个所述测试用例对应测试脚本调用用于对所述待测试CCMTS设备进行测试的测试信息之前，根据所述测试脚本在所述目标函数库中调用目标测试函数；读取单元62，用于根据所述目标测试函数读取所述测试用例的工厂文件，其中，所述工厂文件中包括用于对所述待测试CCMTS设备进行初始化配置的配置参数；配置单元63，用于根据所述配置参数对所述待测试CCMTS设备进行初始化配置。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种CCMTS设备的测试方法，其特征在于，包括：

选取对待测试CCMTS设备进行测试的测试套件，其中，测试套件中包含至少一个测试用例，每个测试用例对应一个测试脚本；

根据每个所述测试用例对应的测试脚本调用用于对所述待测试CCMTS设备进行测试的测试信息，其中，所述测试信息包括预先设置的目标函数库中相应的命令行CLI，和/或，在预先设置的目标用例集合中相应的管理信息库MIB；

根据所述测试信息对所述待测试CCMTS设备进行测试，得到测试结果；

对测试结果进行分析，并根据分析结果确定对所述待测试CCMTS设备测试是否成功。

2.根据权利要求1所述的方法，其特征在于，

根据所述测试信息对所述待测试CCMTS设备进行测试，得到测试结果包括：根据所述测试信息对所述测试脚本中的每个测试步骤进行测试，得到每个测试步骤的测试结果；

对测试结果进行分析，并根据分析结果确定是否对所述待测试CCMTS设备测试成功包括：对每个所述测试步骤的测试结果进行分析，并根据分析结果确定是否对所述待测试CCMTS设备测试成功。

3.根据权利要求2所述的方法，其特征在于，对每个所述测试步骤的测试结果进行分析包括：

将每个所述测试步骤的测试结果与对应的预设测试结果进行对比；

如果对比出每个所述测试步骤的测试结果与所述对应的预设测试结果相同，则确定对所述测试步骤的测试通过；

如果对比出每个所述测试步骤的测试结果与所述对应的预设测试结果不相同，则确定对所述测试步骤的测试未通过。

4.根据权利要求3所述的方法，其特征在于，所述测试步骤的数量为多个，根据分析结果确定是否对所述待测试CCMTS设备测试成功包括：

确定多个所述测试步骤中测试未通过的数量；

判断所述测试未通过的数量是大于预设数量，还是等于所述预设数量；

如果判断出所述测试未通过的数量等于所述预设数量，则确定对所述待测试CCMTS设备的测试成功；

如果判断出所述测试未通过的数量大于所述预设数量，则确定对所述待测试CCMTS设备的测试失败。

5.根据权利要求1所述的方法，其特征在于，在选取用于对待测试CCMTS设备进行测试的测试套件之前，所述方法还包括：

获取所述待测试CCMTS设备的测试版本；

根据所述测试版本设置在对所述待测试CCMTS设备进行测试时所需要的环境变量，并设置在所述测试套件时所需要的私有参数；

其中，所述环境变量包括以下至少之一：所述待测试CCMTS设备的IP地址，所述待测试CCMTS设备与交换机连接的上联端口及Vlan虚接口，每个所述待测试CCMTS设备之间的拓扑连接参数，测试仪表的IP地址，所述待测试CCMTS设备与所述测试仪表连接的端口参数；所述私有参数包括以下至少之一：调用所述命令行CLI和/或所述管理信息库MIB的控制参数，循环次数，对所述待测试CCMTS设备测试失败后的处理方案。

6.根据权利要求1所述的方法，其特征在于，在根据每个所述测试用例对应测试脚本调用用于对所述待测试CCMTS设备进行测试的测试信息之前，所述方法还包括：

根据所述测试脚本在所述目标函数库中调用目标测试函数；

根据所述目标测试函数读取所述测试用例的工厂文件，其中，所述工厂文件中包括用于对所述待测试CCMTS设备进行初始化配置的配置参数；

根据所述配置参数对所述待测试CCMTS设备进行初始化配置。

7.一种CCMTS设备的测试装置，其特征在于，包括：

选取单元，用于选取对待测试CCMTS设备进行测试的测试套件，其中，测试套件中包含至少一个测试用例，每个测试用例对应一个测试脚本；

第一调用单元，用于根据每个所述测试用例对应的测试脚本调用用于对所述待测试CCMTS设备进行测试的测试信息，其中，所述测试信息包括预先设置的目标函数库中相应的命令行CLI，和/或，在预先设置的目标用例集合中相应的管理信息库MIB；

测试单元，用于根据所述测试信息对所述待测试CCMTS设备进行测试，得到测试结果；

分析单元，用于对测试结果进行分析，并根据分析结果确定是否对所述待测试CCMTS设备测试成功。

8.根据权利要求7所述的装置，其特征在于，

所述测试单元包括：测试子单元，用于根据所述测试信息对所述测试脚本中的每个测试步骤进行测试，得到每个测试步骤的测试结果；

所述分析单元包括：分析确定子单元，用于对每个所述测试步骤的测试结果进行分析，并根据分析结果确定是否对所述待测试CCMTS设备测试成功。

9.根据权利要求8所述的装置，其特征在于，所述分析确定子单元用于：

将每个所述测试步骤的测试结果与对应的预设测试结果进行对比；

如果对比出每个所述测试步骤的测试结果与所述对应的预设测试结果相同，则确定对所述测试步骤的测试通过；

如果对比出每个所述测试步骤的测试结果与所述对应的预设测试结果不相同，则确定对所述测试步骤的测试未通过。

10.根据权利要求9所述的装置，其特征在于，所述测试步骤的数量为多个，所述分析确定子单元还用于：

确定多个所述测试步骤中测试未通过的数量；

判断所述测试未通过的数量是大于预设数量，还是等于所述预设数量；

如果判断出所述测试未通过的数量等于所述预设数量，则确定对所述待测试CCMTS设备的测试成功；

如果判断出所述测试未通过的数量大于所述预设数量，则确定对所述待测试CCMTS设备的测试失败。