CN103678093B - 一种自动化测试框架及测试方法 - Google Patents

Abstract

本发明提供一种自动化测试框架，包括一测试管理模块、至少一个测试执行模块和一中转模块，所述测试管理模块通过所述中转模块与所述测试执行模块相连接。相应的自动化测试方法，包括访问测试管理模块、输入测试执行信息和命令、发送所述测试执行信息和所述命令、执行测试用例、将该用例执行情况和执行结果传送至所述中转模块、将执行报表传送至所述测试管理模块、显示所述报表等步骤。利用本发明，测试人员可以同时控制多个测试机器对多个测试用例进行测试；可远程操作控制；每隔一段时间就可以获得一个经整合的列表，列表中每一测试用例与其测试用例一一对应，方便测试人员及时了解测试情况，真正做到7×24小时稳定运行。

Description

一种自动化测试框架及测试方法

技术领域

本发明涉及软件测试领域，特别是一种自动化测试框架及测试方法。

背景技术

在软件业内自动化工具很多，各式各样的自动化框架也是层出不穷，但大部分的自动化工具都是局限在单个终端机器（如PC）上。每一终端机器只能和与其对应的测试机器对话，各个测试机器生成的用例测试结果返回终端机器后是分别呈现的，不能整合成统一报表。各个终端机器之间不能实现实时通讯，不能实现远程控制运行，不同终端机器生成的结果也不能整合成统一报表，给软件测试人员带来较大的不便。此外，现有的自动化工具其用例测试运行后的结果也无法和用例自动对应，无法真正做到7×24小时稳定运行。有些自动化框架，如Hudson的持续集成框架，虽然可以持续、自动地构建/测试软件项目，或者监控一些定时执行的任务，但不能实现完善的用例管理，也不能使得执行结果自动回填并呈现在统一报表上。

发明内容

本发明的目的在于，提供一种自动化测试框架及测试方法，有效解决现有技术的自动化工具都局限在单个终端机器、不能实现远程控制、用例测试结果无法和用例自动对应、用例测试结果不能整合成统一报表等技术问题。

为达到上述目的，本发明采用如下技术方案：

一种自动化测试框架，包括

一测试管理模块，用于发出测试执行信息和命令；

一中转模块，根据所述测试执行信息转发所述测试执行信息和所述命令；以及

至少一个测试执行模块，用于接收所述测试执行信息和所述命令，根据所述测试执行信息获取测试用例的测试代码和执行该用例，并将所述用例执行情况和执行结果整合成执行报告传送至所述中转模块，测试用例和执行结果一一对应；

其中，所述中转模块将至少一个测试执行模块的执行报告整合成报表传送至所述测试管理模块，形成信息同步显示。

一种如上文所述的自动化测试框架，还包括一版本控制系统和至少一个用户终端，所述版本控制系统与所述测试执行模块相连接，所述用户终端分别与所述测试管理模块相连接，所述版本控制系统用于为所述测试执行模块提供测试用例的测试代码，所述用户终端为测试人员的操作平台，用于访问测试管理模块。

进一步地，所述测试执行模块在获取所述命令后，将反馈信息经所述中转模块送至所述测试管理模块。

其中，所述测试管理模块为测试用例管理系统，所述测试执行模块为智能体，所述中转模块为服务器。

其中，所述测试执行信息包括测试用例、执行机器和执行时间，所述命令包括执行开始、执行暂停、执行中止。

一种自动化测试方法，包括如下步骤：

（S1）访问测试管理模块，进入任务分配页面；

（S2）在任务分配页面上输入测试执行信息和命令；

（S3）中转模块根据所述测试执行信息将所述测试执行信息和所述命令转发至至少一个测试执行模块；

（S4）所述至少一个测试执行模块解析所述命令，并根据所述测试执行信息获取测试用例的测试代码并执行该用例，并将反馈信息经所述中转模块送至所述测试管理模块；

（S5）将该用例执行情况和执行结果整合成执行报告传送至所述中转模块；

（S6）所述中转模块将所述至少一个测试执行模块的执行报告整合成报表传送至所述测试管理模块，测试用例和执行结果一一对应；以及

（S7）在所述测试管理模块的任务分配页面上显示所述报表。

进一步地，上述步骤（5）—（6）所述的整合，包括如下步骤：

（S101）将每个测试执行模块中执行测试用例的执行情况和执行结果分别合成报告，测试用例和执行结果一一对应；

（S102）将所述报告分别传送至中转模块；

（S103）所述中转模块将两个以上的报告合成为一个报表；以及

（S104）将所述报表传送至所述测试管理模块。

其中，所述测试管理模块为测试用例管理系统，所述测试执行模块为智能体，所述中转模块为服务器。

其中，所述测试执行信息包括测试用例、执行机器、执行时间, 所述命令包括执行开始、执行暂停、执行中止等。

本发明的优点在于，可用于管理和分配用例，可以通过服务器将测试用例分配到多台测试机器分别执行用例测试，再将执行结果回收至测试人员所用的终端机器整合成报表进行展示。本发明还可以远程控制不同的测试机器执行用例测试，可同时分配多个测试任务，可以自动化整合测试机器的执行结果，使得执行结果与其用例相对应，还可以以图表的形式将执行结果整合后展示出来，可以真正做到7×24小时稳定运行。

附图说明

附图1是本发明中自动化测试框架的结构示意图；

附图2是本发明中自动化测试框架使用状态的结构示意图；

附图3是本发明中自动化测试方法的流程图；

附图4是本发明的自动化测试方法中整合处理的流程图；

主要部件标识：

1、测试管理模块，2、测试执行模块，3、中转模块，4、版本控制系统，5、用户终端；

S1-S7表示本发明中自动化测试方法的步骤；

S101-S107表示本发明的自动化测试方法中整合处理的步骤；

下面结合附图对本发明的实施和优点作进一步阐释。

具体实施方式

如图1、图2所示，图中的自动化测试框架，包括一测试管理模块1、至少一个测试执行模块2和一中转模块3。如图2所示，本发明中的自动化测试框架在使用状态下，还包括一版本控制系统（SVN）4和至少一个用户终端5。

用户终端5（如PC机）为测试人员的操作平台，也可以称之为控制终端，用于帮助测试人员访问测试管理模块1。测试管理模块1为测试用例管理系统（TestLink），用于发出测试执行信息和命令，传送至中转模块3，所述测试执行信息包括测试用例、执行机器和执行时间。所述命令，是指测试人员输入的操作指令，用以控制测试执行模块（测试机器）测试用例，包括执行开始、执行暂停、执行中止等。测试人员访问用例管理系统（TestLink），进入任务分配页面，在页面上选择事先指定的测试用例、执行机器和执行时间等，必要时，也可以由测试人员自行定义测试用例、执行机器和具体执行时间等。测试管理模块1是在上述测试执行信息确定之后，发布测试执行命令。

中转模块3为服务器（Server），根据所述测试执行信息将所述测试执行信息和测试执行命令转发至与测试管理模块1对应的测试执行模块2。

至少一个测试执行模块2，即测试机器，接收和解析所述测试执行信息和测试执行命令，确定将要被执行的测试用例、将要测试的执行机器以及具体的执行时间，将上述测试执行信息作为测试执行模块2执行测试用例的重要参数。测试执行模块2在获取所述命令后，将反馈信息经中转模块3送至测试管理模块1。

版本控制系统（SVN）4用于为所述测试执行模块提供测试用例的测试代码，测试执行模块2为智能体（agent），用于从版本控制系统（SVN）4获取测试用例的测试代码和执行该用例，并将所述用例执行情况和执行结果整合成执行报告传送至中转模块3，测试用例和执行结果一一对应。至少一个测试执行模块2分别将其执行报告送至中转模块3，中转模块（服务器Server）3将至少一个执行报告整合成报表传送至所述测试管理模块。所述的整合过程，包括如下步骤：（101）将每个测试执行模块2中执行测试用例的执行情况和执行结果分别合成报告，测试用例和执行结果一一对应；（102）将所述报告分别传送至中转模块3；（103）中转模块3将两个以上的报告合成为一个报表；（104）将所述报表传送至测试管理模块1。每隔一段时间，测试执行模块2（智能体agent）会向中转模块（服务器Server）3发送执行测试用例的执行情况和执行结果合成的报告，中转模块3将两个以上的报告合成为一个报表记录在数据库，以便测试人员日后随时可以调用，再将该报表发送至测试管理模块1（测试用例管理系统TestLink）。在测试任务执行过程中，测试人员访问TestLink的结果页面即可随时了解测试状况实时查看执行进度、执行状态等信息，报表显示的间隔时间可以由测试人员设定。在测试任务执行完成后，测试管理模块1（测试用例管理系统TestLink）会以电子邮件或手机短信等方式通知测试人员访问TestLink的结果页面并获取测试结果。如图3所示为本发明中自动化测试方法的流程图，以下详细说明本发明自动化测试方法的各步骤：

步骤S1，测试人员访问测试管理模块，进入任务分配页面。测试管理模块即用例管理系统（TestLink），测试人员访问TestLink的任务分配页面，以便进行下一步的指令。

步骤S2，测试人员在任务分配页面上输入测试执行信息和命令。所述测试执行信息，是指将要被执行测试的用例、将要执行测试用例的执行机器以及具体的执行时间，所述测试执行信息为接下来测试执行模块执行测试用例的重要参数。所述命令，是指测试人员输入的操作指令，用以控制测试执行模块（测试机器）执行测试用例，包括执行开始、执行暂停、执行中止等。测试人员访问TestLink的任务分配页面，在页面上选择事先指定的测试用例、执行机器和执行时间等，必要时，也可以由测试人员自行定义测试用例、执行机器和具体执行时间等。测试管理模块1是在上述测试执行信息确定之后，发布测试执行命令。

步骤S3，中转模块根据所述测试执行信息将所述测试执行信息和所述命令转发至至少一个测试执行模块。所述中转模块为服务器（Server），将测试人员在任务分配页面上输入的测试执行信息和命令发送至所述测试执行模块。服务器（Server）距离测试人员操作的用例管理系统（TestLink）以及多个测试机器都可以保持一定距离，通过互联网将各个模块连接，可以有效实现远程操作控制。

步骤S4，所述至少一个测试执行模块接收并解析到所述命令，若命令为执行开始，测试执行模块就会从版本控制系统（SVN）获取测试用例的测试代码并执行该用例，并将反馈信息经所述中转模块送至所述测试管理模块。测试执行模块为智能体（agent）执行测试代码，获得测试执行过程中的执行情况和测试执行过程后的执行结果。若命令为执行暂停，测试执行模块就会暂停终端从版本控制系统（SVN）获取测试用例的测试代码，待接收到新的执行开始指令后，再继续从版本控制系统（SVN）获取测试用例的测试代码。若命令为执行停止，测试执行模块就会停止从版本控制系统（SVN）获取测试用例的测试代码。

步骤S5，测试执行模块将该用例执行情况和执行结果整合成执行报告传送至所述中转模块。代码运行过程中，测试执行模块监控用例执行情况并发送至中转模块（服务器Server），执行结束后，测试执行模块（智能体agent）将执行结果发送至中转模块，测试用例和执行结果一一对应。

步骤S6，中转模块将至少一个测试执行模块的执行报告整合成报表传送至所述测试管理模块，测试用例和执行结果一一对应。中转模块将两个以上的报告合成为一个报表，将报表记录在数据库，以便测试人员日后随时可以调用，再将该报表传送至所述测试管理模块（测试用例管理系统TestLink）。

上述步骤S5—S 6所述的整合过程，具体分析，包括如下步骤：

步骤S101，将每个测试执行模块中执行测试用例的执行结果分别合成报告，测试用例和执行结果对应。由于同一测试机器同一时间只用来执行一个测试用例，因此可以确保该机器的测试结果与测试用例对应。

步骤S 102，将所述报告分别传送至中转模块，传送过程中，同一测试机器的测试用例和执行结果相对应，同步传输，不会出现数据混乱。测试用例在报告中会显示其脚本的log，方便测试人员寻找发现问题。

步骤S 103，所述中转模块将两个以上的报告合成为一个报表，测试用例和执行结果一一对应，将该报表记录在数据库。多个测试机器将其测试结果与测试用例送至所述中转模块（服务器Server），属于同一测试机器的测试结果与测试用例是彼此对应的，因此，出现在报表中的数据也是一一对应的。测试用例在报表中会显示其脚本的log，方便测试人员寻找发现问题。

步骤S 104，将所述报表传送至所述测试管理模块，方便测试人员读取数据。

步骤S7，在所述测试管理模块的任务分配页面上显示所述报表。在测试任务执行过程中，测试人员访问TestLink的结果页面即可随时了解测试状况实时查看执行进度、执行状态等信息，报表显示的间隔时间可以由测试人员设定。在测试任务执行完成后，测试管理模块1（测试用例管理系统TestLink）会以电子邮件或手机短信等方式通知测试人员访问TestLink的结果页面并获取测试结果。在报表中测试用例会显示其脚本的log，若是脚本问题，可以让脚本开发人员及时分析脚本问题。

本发明中的自动化测试方法与上述的自动化测试框架相对应，每隔一段时间，上述步骤S1-S7就会重复一次，每次生成一个新的报表，报表显示的间隔时间可以由测试人员设定。

本发明的优点在于，利用本发明中的自动化测试框架和自动化测试方法，便于测试人员更好地管理和分配用例。测试人员可以同时控制多个测试机器对多个测试用例进行测试；可远程操作控制，通过服务器对执行机器发出测试命令，包括执行开始、执行暂停、执行中止等；每隔一段时间就可以获得一个经整合的列表，列表中每一测试用例与其测试用例一一对应，方便测试人员及时了解测试情况，真正做到7×24小时稳定运行，上述列表可以保存在服务器的数据库，方便测试人员事后随时调用。

以上仅是本发明的具体应用范例，对本发明的保护范围不构成任何限制。除上述实施例外，本发明还可以有其它实施方式。凡采用等同替换或等效变换形成的技术方案，均落在本发明所要求保护的范围之内。

Claims (8)

1.一种自动化测试框架，其特征在于，包括

一测试管理模块，用于发出测试执行信息和命令；

一中转模块，根据所述测试执行信息转发所述测试执行信息和所述命令；以及

至少一个测试执行模块，用于接收所述测试执行信息和所述命令，根据所述测试执行信息获取测试用例的测试代码和执行该用例，并将所述用例执行情况和执行结果整合成执行报告传送至所述中转模块，测试用例和执行结果一一对应；

其中，所述中转模块将至少一个测试执行模块的执行报告整合成报表并记录在数据库后传送至所述测试管理模块，形成信息同步显示，报表中测试用例和执行结果一一对应，测试用例在报表中显示其脚本的log；

其中所述自动化测试框架还包括一版本控制系统和至少一个用户终端，所述用户终端分别与所述测试管理模块相连接，所述版本控制系统用于为所述测试执行模块提供测试用例的测试代码，所述用户终端为测试人员的操作平台，用于访问测试管理模块；

其中测试执行模块为测试机器，所述版本控制系统与所有所述测试执行模块连接。

2.根据权利要求1所述的自动化测试框架，其特征在于，所述测试执行模块在获取所述命令后，将反馈信息经所述中转模块送至所述测试管理模块。

3.根据权利要求1所述的自动化测试框架，其特征在于，所述测试管理模块为测试用例管理系统，所述测试执行模块为智能体，所述中转模块为服务器。

4.根据权利要求1所述的自动化测试框架，其特征在于，所述测试执行信息包括测试用例、执行机器和执行时间，所述命令包括执行开始、执行暂停、执行中止。

5.一种自动化测试方法，其特征在于，包括如下步骤：

(S1)访问测试管理模块，进入任务分配页面；

(S2)在任务分配页面上输入测试执行信息和命令；

(S3)中转模块根据所述测试执行信息将所述测试执行信息和所述命令转发至至少一个测试执行模块；

(S4)所述至少一个测试执行模块解析所述命令，并根据所述测试执行信息从版本控制系统获取测试用例的测试代码并执行该用例，并将反馈信息经所述中转模块送至所述测试管理模块；

(S5)将该用例执行情况和执行结果整合成执行报告传送至所述中转模块；

(S6)所述中转模块将所述至少一个测试执行模块的执行报告整合成报表并记录在数据库后传送至所述测试管理模块，测试用例和执行结果一一对应，测试用例在报表中显示其脚本的log；以及

(S7)在所述测试管理模块的任务分配页面上显示所述报表；

其中测试执行模块为测试机器，所述版本控制系统与所有所述测试执行模块连接。

6.根据权利要求5所述的自动化测试方法，其特征在于，步骤(5)—(6)所述的整合，包括如下步骤：

(S101)将每个测试执行模块中执行测试用例的执行情况和执行结果分别合成报告，测试用例和执行结果一一对应；

(S102)将所述报告分别传送至中转模块；

(S103)所述中转模块将两个以上的报告合成为一个报表；以及

(S104)将所述报表传送至所述测试管理模块。

7.根据权利要求5或6所述的自动化测试方法，其特征在于，所述测试管理模块为测试用例管理系统，所述测试执行模块为智能体，所述中转模块为服务器。

8.根据权利要求5所述的自动化测试方法，其特征在于，所述测试执行信息包括测试用例、执行机器和执行时间，所述命令包括执行开始、执行暂停、执行中止。