CN101330329A - 自适应测试方法和系统 - Google Patents

Abstract

本发明公开了一种自适应测试方法和系统，该方法包括：测试系统根据接口的类型，将接口适配为被测接口；测试系统根据预设的组网配置数据，按照预定顺序对被测接口相关的组网节点和节点内数据进行配置；测试系统根据被测接口以及指定参数进行参数配置并生成测试报文和测试用例，并将测试报文和测试用例发送到被测系统；测试系统接收被测系统的输出，并对输出进行检测。通过上述技术方案，能够提高ASON网络测试的效率、缩短产品稳定的时间、减少测试人员的劳动量。

Description

自适应测试方法和系统

技术领域

本发明涉及通信领域，并且特别地，涉及一种自适应测试方法和系统。

背景技术

自动交换光网络(Automatically Switched Optical Network，简称为ASON)作为一个控制平台，在应用时，需要保证控制平面自身各种功能的正确性。

在集成测试阶段，传统的测试方法是测试人员根据接口文档中的定义，获得参数取值，添加到报文中，然后将报文数据通过工具发送到被测程序。但是，以手工测试为主的测试过程，不仅要求集成测试人员重复输入大量的字段信息，且要重复分析大量的输出报文信息。具有很大的劳动量。

在集成测试阶段，接口变动比较频繁、集成的模块按阶段不断更新，从而容易导致已有的测试用例无法重用，并且，由于集成测试阶段频繁提交版本，从而导致测试人员疲于应付重复的功能测试，无法集中人力、时间来保证产品的全部功能。可以看出，在集成测试阶段，接口改动后各版本之间的测试用例的继承主要由人工完成，因此费时费力，然而，目前尚未提出解决上述问题的技术方案。

发明内容

考虑到上述问题而做出本发明，为此，本发明的主要目的在于提供一种自适应测试方法和系统，以解决相关技术中的已有的测试用例容易无法重用，从而导致测试人员进行重复的大劳动量功能测试的问题。

根据本发明的一个方面，提供了一种自适应测试方法，用于对自动交换光网络进行自动测试。

根据本发明的自适应测试方法包括：测试系统根据接口的类型，将接口适配为被测接口；测试系统根据预设的组网配置数据，按照预定顺序对被测接口相关的组网节点和节点内数据进行配置；测试系统根据被测接口以及指定参数进行参数配置生成测试报文并根据测试报文生成测试用例，将测试用例发送到被测系统；测试系统接收被测系统的输出，并对输出进行检测。

其中，将上述接口适配为被测接口具体处理为：定义与接口对应的报文头结构及转换关系。

其中，上述预定顺序为：按照节点参数配置、控制通道配置、传送接口配置、传送平面保护配置、TE(流量工程)链路配置的顺序。

此外，上述测试系统根据预设的组网配置数据，按照预定顺序对被测接口的组网节点和节点内进行配置之后，进一步包括：生成组网配置信息，其中，组网配置信息包括：节点参数配置信息、控制通道配置信息、传送接口配置信息、和TE链路配置信息。

其中，将上述测试用例发送到被测系统具体为：根据组网配置信息中的节点参数配置信息将测试用例经由测试代理发送到被测系统。

其中，生成上述测试报文并根据测试报文生成测试用例的处理具体为：根据指定参数调用相应的报文模板、报文数据生成方式、被测功能的检测内容生成测试报文、根据控制顺序和测试报文生成测试用例，其中，对于报文模板中指定参数之外的其它参数，测试系统自动进行设置。

此外，在测试完成后，上述方法进一步包括：将执行成功的测试用例按照预定键值保存在数据库中。

此外，上述方法进一步包括：测试系统响应于用户根据预定键值定制的测试用例的自动回归，并从数据库中调用符合预定键值的测试用例；将调用的测试用例按照指定顺序及指定方式，生成测试用例回归方案；根据指定顺序执行测试用例回归方案，输出回归测试结果；分析回归测试结果，并形成回归测试报告。

其中，上述预定键值具体为：功能类和/或功能等级，其中，功能类包括以下之一或其组合：连接建立删除类、保护与恢复类、自动发现类、LRM配置类、M：N保护类；功能等级包括以下之一或其组合：基本功能类、异常功能类、复杂功能类。

其中，分析上述回归测试结果的处理具体包括：对成功和/或失败的测试用例的统计、测试用例的失败原因的统计、失败测试用例所属功能分类的统计。

其中，上述指定参数包括以下至少之一：用户通过文件预先指定的参数、或者用户通过数据字典输入的参数、或者测试系统自动生成的参数。

根据本发明的另一方面，提供了一种自适应测试系统，用于对自动交换光网络进行测试。

根据本发明的自适应测试系统包括：接口适配模块，用于根据接口的类型，将接口适配为被测接口；组网自动配置模块，用于根据预设的组网配置数据，按照预定顺序对被测接口的组网节点和节点内数据进行配置；测试报文自动生成模块，用于根据被测接口以及指定参数进行参数配置并生成测试报文并根据测试报文生成测试用例；测试代理，用于将测试用例发送到被测系统。

此外，上述装置进一步包括：测试支撑模块，用于对测试报文的步骤和流程控制进行封装，生成测试用例。

此外，上述接口适配模块进一步用于根据接口的改动将改动后的接口适配为相应的被测接口。

此外，上述测试代理进一步用于维护和建立被测系统与测试系统之间的通讯，以及监视被测系统内部接口报文的交互。

此外，上述系统进一步包括：数据库，用于在测试完成后将执行成功的测试用例按照预定键值进行保存。

此外，上述系统进一步包括：功能定制模块，用于根据预定键值，定制测试用例的自动回归，并从数据库中调用符合预定键值的测试用例；自动回归执行模块，用于将调用的测试用例按照预定顺序及方式，生成测试用例回归方案，并按预定顺序执行测试用例回归方案，输出测试结果；结果分析模块，用于分析测试结果，并形成测试报告。

借助于本法发明的技术方案，能够提高ASON网络测试的效率、缩短产品稳定的时间、减少测试人员的劳动量。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

附图说明

附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：

图1是根据本发明方法实施例的自适应测试方法的流程图；

图2是根据本发明方法实施例的自动回测试方法的流程图；

图3是根据本发明系统实施例的自适应测试系统的框图；

图4是根据本发明系统实施例的自动回归测试系统的框图。

具体实施方式

以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。

方法实施例

根据本发明的实施例，提供了一种自适应测试方法，用于对自动交换光网络进行自动测试。图1是根据本发明方法实施例的自适应测试方法的流程图，如图1所示，包括以下处理：

步骤S102，测试系统根据接口的类型，将接口适配为被测接口，其中，下发到控制平面的报文，经过不同的接口时，消息体会被包装不同的消息头，因此，针对不同的接口，需要定义与这些接口对应的报文头结构及转换关系(适配为被测接口)，当用户指定测试某个接口时，使用此接口的信息进行初始化测试系统，这样在测试系统运行时，生成的测试用例(也可称为测试报文或被测报文)即为与接口对应的形式；

步骤S104，测试系统根据预设的组网配置数据，按照预定顺序对被测接口相关的组网节点和节点内数据进行配置；

具体地，测试系统初始化完毕并运行后，组网自动配置模块会读取用户配置的组网数据，按照节点参数配置、控制通道配置、传送接口配置、传送平面保护组配置、TE链路配置的顺序构建组网配置信息，并逐个节点完成整个组网的配置，其中，组网配置信息包括：节点参数配置信息、控制通道配置信息、传送接口配置信息、和TE链路配置信息；

步骤S106，测试系统根据被测接口(具体地，可以根据接口的定义)以及指定参数进行参数配置生成测试报文并根据测试报文生成测试用例，将测试用例发送到被测系统，优选地，可以根据组网配置信息中的节点参数配置信息将测试用例经由测试代理(指定的测试代理)发送到被测系统，并且，测试人员在生成测试用例时，可以在测试用例中配置变化的被测参数；

需要说明的是，生成测试用例具体的处理可以为：根据指定参数调用相应的报文模板、报文数据生成方式、被测功能的检测内容生成测试报文(包括发送报文和检测报文)、根据控制顺序和测试报文生成测试用例；其中，生成测试报文的具体处理为：在报文模板中对已设置的参数进行赋值，对于报文模板中指定参数之外的其它参数(即，未指定的参数)，测试系统自动生成并进行自动设置。

其中，上述指定参数包括以下至少之一：用户通过文件预先指定的参数、或者用户通过数据字典输入的参数、或者测试系统生成的参数。

步骤S108，测试系统接收被测系统的输出，并对输出进行检测，完成一个测试用例的执行，其中，将测试用例发送到被测系统可以为：根据组网配置信息中的节点参数配置信息将测试报文经由测试代理发送到被测系统。

下面将结合实例对上述技术方案进行详细说明。

实例1：SPC业务建立的自动测试方案。

1、在配置文件中指定进行S口测试，并启动测试系统；

2、在数据字典中配置组网配置数据，并启动组网配置；

3、组网配置成功后，输入建立SPC业务的数据，例如：保护属性设置成无保护，恢复属性设置成动态恢复；

4、运行测试用例(包括发送报文、测试控制步骤及检测报文等)，测试系统自动生成测试报文及检测过程，并执行测试用例；

5、在执行其它SPC业务建立的数据时，重复步骤3，设置其它的属性进行测试。

根据本发明的实施例，上述方法还包括：将执行成功的测试用例按照预定键值保存在数据库中，以备自动回归测试时使用，其中，预定键值可以按照功能类和/或功能等级划分，其中，功能类包括以下之一或其组合：连接建立删除类、保护与恢复类、自动发现类、LRM配置类、M∶N保护类；功能等级包括以下之一或其组合：基本功能类、异常功能类、复杂功能类。

下面，对上述的自动回归测试方法进行详细说明。

图2是根据本发明方法实施例的自动回测试方法的流程图，如图2所示，包括以下处理：

步骤S202，测试系统响应于用户根据预定键值定制的测试用例的自动回归，并从数据库中调用符合预定键值的测试用例；

步骤S204，将调用的测试用例按照指定顺序及指定方式，生成测试用例回归方案；

步骤S206，根据指定顺序执行测试用例回归方案，输出回归测试结果；

步骤S208，分析回归测试结果，并形成回归测试报告。其中，分析上述回归测试结果的处理具体包括：对成功和/或失败的测试用例的统计、测试用例的失败原因的统计、失败测试用例所属功能分类的统计。

系统实施例

根据本法明的实施例，提供了一种自适应测试系统，用于对自动交换光网络进行测试。图3是根据本发明系统实施例的自适应测试系统的框图，如图3所示，包括接口适配模块30、组网自动配置模块32、测试支撑模块34、测试报文自动生成模块36、测试代理38，下面，对上述模块进行详细的说明：

根据本发明实施例的自适应测试系统包括：接口适配模块30，用于根据接口的类型，将接口适配为被测接口；此外，接口适配模块30进一步用于根据接口的改动将改动后的接口适配为相应的被测接口；

组网自动配置模块32，用于根据预设的组网配置数据(例如，根据用户的定制，生成需要的组网报文数据)，按照预定顺序对被测接口的组网节点和节点内数据进行配置；

测试支撑模块34，用于对测试报文的步骤和流程控制进行封装，生成测试用例，并且针对不同的功能模块，封装了不同的报文模板，报文数据的生成方法，被测功能的检测内容，以及控制顺序等。

测试报文自动生成模块36，用于根据被测接口以及指定参数进行参数配置调用测试支撑模块34并生成测试报文并根据测试报文生成测试用例，并且，提供多种参数定制的模式，测试人员可以通过文件预先指定多个测试用例的输入参数，也可以在测试用例中通过数据字典等形式输入本测试用例的参数；

测试代理38，用于将测试用例发送到被测系统，此外，测试代理36还用于维护和建立被测系统与测试系统之间的通讯，以及监视被测系统内部接口报文的交互；

根据本发明的实施例，上述装置还包括：数据库(未示出)，用于在测试完成后将执行成功的测试用例按照预定键值进行保存，以备自动回归测试时使用。下面，对自动回顾测试装置进行详细的说明，图4是根据本发明系统实施例的自动回归测试系统的框图，如图4所示，包括功能定制模块40、自动回归执行模块42、结果分析模块44。

功能定制模块40，用于根据预定键值，定制测试用例的自动回归，并从数据库中调用符合预定键值的测试用例，其中，制定测试用例的自动回归可以按功能类定制或者功能等级进行定制；

自动回归执行模块42，用于将调用的测试用例按照预定顺序及方式，生成测试用例回归方案，并按预定顺序执行测试用例回归方案，输出测试结果；

结果分析模块44，用于分析测试结果，并形成测试报告。

综上所述，借助于本发明的技术方案，能够使用户通过简单的参数设置实现自动测试ASON网络的功能，并且能够根据用户的定制策略，自动生成回归测试用例集并执行，提高了ASON网络测试的效率、缩短了产品稳定的时间、减少了测试人员的劳动量。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (17)

1.一种自适应测试方法，用于对自动交换光网络进行自动测试，其特征在于，所述方法包括：

测试系统根据接口的类型，将所述接口适配为被测接口；

所述测试系统根据预设的组网配置数据，按照预定顺序对所述被测接口相关的组网节点和节点内数据进行配置；

所述测试系统根据所述被测接口以及指定参数进行参数配置生成测试报文并根据所述测试报文生成测试用例，将所述测试用例发送到被测系统；

所述测试系统接收所述被测系统的输出，并对所述输出进行检测。

2.根据权利要求1所述的方法，其特征在于，将所述接口适配为被测接口具体处理为：

定义与所述接口对应的报文头结构及转换关系。

3.根据权利要求1所述的方法，其特征在于，所述预定顺序为：按照节点参数配置、控制通道配置、传送接口配置、传送平面保护配置、TE链路配置的顺序。

4.根据权利要求1所述的方法，其特征在于，所述测试系统根据预设的组网配置数据，按照预定顺序对所述被测接口的组网节点和节点内进行配置之后，进一步包括：

生成组网配置信息，其中，所述组网配置信息包括：节点参数配置信息、控制通道配置信息、传送接口配置信息、和TE链路配置信息。

5.根据权利要求4所述的方法，其特征在于，将所述测试用例发送到被测系统具体为：根据所述组网配置信息中的所述节点参数配置信息将所述测试用例经由测试代理发送到所述被测系统。

6.根据权利要求1所述的方法，其特征在于，生成所述测试报文并根据所述测试报文生成所述测试用例的处理具体为：

根据所述指定参数调用相应的报文模板、报文数据生成方式、被测功能的检测内容生成测试报文，根据控制顺序和所述测试报文生成测试用例，其中，对于所述报文模板中所述指定参数之外的其它参数，所述测试系统自动进行测试。

7.根据权利要求1至6中任一项所述的方法，其特征在于，在测试完成后，进一步包括：

将执行成功的测试用例按照预定键值保存在数据库中。

8.根据权利要7所述的方法，其特征在于，所述方法进一步包括：

所述测试系统响应于用户根据所述预定键值定制的所述测试用例的自动回归，并从数据库中调用符合所述预定键值的测试用例；

将调用的所述测试用例按照指定顺序及指定方式，生成测试用例回归方案；

根据所述指定顺序执行所述测试用例回归方案，输出回归测试结果；

分析所述回归测试结果，并形成回归测试报告。

9.根据权利要求8所述的方法，其特征在于，所述预定键值具体为：功能类和/或功能等级，其中，所述功能类包括以下之一或其组合：连接建立删除类、保护与恢复类、自动发现类、LRM配置类、M:N保护类；所述功能等级包括以下之一或其组合：基本功能类、异常功能类、复杂功能类。

10.根据权利要求8所述的方法，其特征在于，分析所述回归测试结果的处理具体包括：对成功和/或失败的测试用例的统计、测试用例的失败原因的统计、失败测试用例所属功能分类的统计。

11.根据权利要求1至6中任一项所述的方法，其特征在于，所述指定参数包括以下至少之一：用户通过文件预先指定的参数、或者所述用户通过数据字典输入的参数、或者所述测试系统自动生成的参数。

12.一种自适应测试系统，用于对自动交换光网络进行测试，其特征在于，所述方法包括：

接口适配模块，用于根据接口的类型，将所述接口适配为被测接口；

组网自动配置模块，用于根据预设的组网配置数据，按照预定顺序对所述被测接口的组网节点和节点内数据进行配置；

测试报文自动生成模块，用于根据所述被测接口以及指定参数进行参数配置生成测试报文并根据所述测试报文生成测试用例；

测试代理，用于将所述测试用例发送到被测系统。

13.根据权利要求12所述的系统，其特征在于，所述装置进一步包括：

测试支撑模块，用于对所述测试报文的步骤和流程控制进行封装，生成测试用例。

14.根据权利要求12所述的系统，其特征在于，所述接口适配模块进一步用于根据接口的改动将改动后的接口适配为相应的被测接口。

15.根据权利要求12所述的系统，其特征在于，所述测试代理进一步用于维护和建立被测系统与测试系统之间的通讯，以及监视所述被测系统内部接口报文的交互。

16.根据权利要求12所述的系统，其特征在于，所述系统进一步包括：

数据库，用于在测试完成后将执行成功的测试用例按照预定键值进行保存。

17.根据权利要求16所述的系统，其特征在于，所述系统进一步包括：

功能定制模块，用于根据预定键值，定制所述测试用例的自动回归，并从数据库中调用符合预定键值的测试用例；

自动回归执行模块，用于将所述调用的测试用例按照预定顺序及方式，生成测试用例回归方案，并按所述预定顺序执行所述测试用例回归方案，输出测试结果；

结果分析模块，用于分析所述测试结果，并形成测试报告。

Images