CN101989225A - 基于断点的自动化测试方法及装置 - Google Patents

Abstract

本发明公开了一种基于断点的自动化测试方法及装置，上述方法包括：在当前测试计划执行期间，存储测试进度信息，并将断点所在的测试进度信息作为断点信息，其中，断点信息包括：测试场景信息、测试脚本信息；获取断点信息，并在断点信息所指示的位置继续进行当前测试计划。根据本发明提供的技术方案，可以对测试脚本执行进度信息记录，并能对未正常执行完成的自动化测试计划，实现精确到测试步骤和循环变量的恢复。

Description

基于断点的自动化测试方法及装置

技术领域

本发明涉及通信领域，具体而言，涉及一种基于断点的自动化测试方法及装置。

背景技术

软件测试，是根据软件开发各阶段的规格说明和程序的内部结构而精心设计一批测试用例，并且利用上述测试用例运行软件，以发现软件错误的过程。由于软件测试直接关系到软件产品的质量，因而如何更加全面有效地执行软件测试已被越来越多的软件测试工作者关注。

自动化测试方法，作为能够更好辅助软件测试的方法，在软件测试中已占有一席之地，目前正在逐步的完善和普及。

自动化测试一般指软件测试的自动化，可理解为通过执行程序语言编制的测试脚本、模拟测试用例、手工测试步骤，并记录测试结果的过程。通常一个测试用例可以由一个或多个脚本语言编写的自动化测试脚本实现。为更好的发挥自动化测试优势，有效的利用测试资源和节约测试时间，通常会采用自动化测试计划来实现多个测试环境下多个测试脚本的不间断执行。

测试环境指对软件系统进行各类测试所基于的软、硬件设备和配置。一般包括硬件环境、网络环境、操作系统环境、应用服务器平台环境、数据库环境以及各种支撑环境等。

目前，对自动化测试计划的执行，主要采用通过脚本解释器启动解析程序获取自动化测试计划中的环境参数和测试脚本内容，然后按顺序依次执行测试脚本并记录相关测试数据方法。但该方法在实际应用过程中还存在以下不足：

1、在测试脚本执行期间可能会出现程序异常中断的情况，而脚本解释器在重新执行自动化测试计划时，只能通过修改自动化测试计划中的测试脚本个数来避免以完成测试的脚本重复执行。

2、由于有些自动化测试脚本执行时间很长，特别是自动化测试脚本中包含了循环执行的测试步骤情况下，如果脚本执行异常中断，再次执行时脚本解释器只能从头开始执行，即延长了测试时间又浪费了测试环境。

3、由于测试资源的限制，在执行自动化程序过程中可能会有另一紧急任务争夺自动化测试资源，但目前自动化脚本解释器只能够预先设定程序断点，不能实现暂时停止自动化测试，并在测试资源空闲是继续执行未完成测试的功能。

目前，还缺乏克服上述不足的技术方案。

发明内容

针对相关技术中存在的测试脚本解释器只能逐条执行脚本语句，无法对自动化测试计划执行过程进行记录，以及无法对未执行完成的自动化测试计划由断点位置恢复执行的问题而提出本发明，为此，本发明的主要目的在于提供一种改进的基于断点的测试方法及装置，以解决上述问题至少之一。

根据本发明的一个方面，提供了一种基于断点的自动化测试方法。

根据本发明的基于断点的自动化测试方法包括：在当前测试计划执行期间，存储测试进度信息，并将断点所在的测试进度信息作为断点信息，其中，断点信息包括：测试场景信息、测试脚本信息；获取断点信息，并在断点信息所指示的位置继续进行当前测试计划。

根据本发明的另一方面，提供了一种基于断点的自动化测试装置。

根据本发明的基于断点的自动化测试装置包括：存储单元、获取单元、执行单元，其中，存储单元，用于在当前测试计划执行期间，存储测试进度信息，其中，测试进度信息包括：断点信息，断点信息包括：测试场景信息、测试脚本信息；获取单元，用于从存储单元中获取断点信息；执行单元，用于在断点信息所指示的位置继续进行当前测试计划。

通过本发明，在当前测试计划执行期间，存储测试进度信息，将断点所在的测试进度信息作为断点信息，获取上述断点信息，并在断点信息所指示的位置继续进行当前测试计划。解决了相关技术中存在的测试脚本解释器只能逐条执行脚本语句，无法对自动化测试计划执行过程进行记录，以及无法对未执行完成的自动化测试计划由断点位置恢复执行的问题，进而可以对测试脚本执行进度信息记录，并能对未正常执行完成的自动化测试计划，实现精确到测试步骤和循环变量的恢复。

本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1为自动化测试计划的结构示意图；

图2为根据本发明实施例的基于断点的自动化测试方法的流程图；

图3为根据本发明优选实施例的基于断点的自动化测试方法的详细流程图；

图4为根据本发明优选实施例的基于断点的自动化测试方法中断点脚本解析的流程图；

图5为根据本发明优选实施例的基于断点的自动化测试方法中保存断点信息的流程图；

图6为根据本发明实施例的基于断点的自动化测试装置的结构框图；

图7为根据本发明优选实施例的基于断点的自动化测试装置的结构框图。

具体实施方式

功能概述

考虑到相关技术中存在的测试脚本解释器只能逐条执行脚本语句，无法对自动化测试计划执行过程进行记录，以及无法对未执行完成的自动化测试计划由断点位置恢复执行的问题，本发明实施例提供了一种通过模块化的自动化测试计划设计与自动化测试解析程序，对自动化测试计划执行逻辑的控制实现自动化测试断点执行方法。其中，在自动化测试解析程序中扩展了存储主执行数据文件的单元，用以记录解析程序所执行的自动化测试计划进度信息，包括自动化测试计划是否执行完成、测试计划断点信息和日志路径等内容；还扩展了断点信息存取程序和断点执行程序，其中，断点信息存取程序，在解析程序执行自动化测试计划的过程中，将每一个执行进度信息的改变记录在主执行数据文件中，当自动化程序中止时，上述信息可以作为该测试计划的断点信息，在下一次执行同一测试计划时，由主执行数据文件中读取断点信息供断点执行模块使用；断点执行程序，是实现测试计划由断点位置恢复测试的核心程序，主要功能包括确定断点脚本位置，恢复测试脚本环境，执行断点测试步骤。

本发明自动化测试计划断点执行方法通过上各模块间相互关联和逻辑控制实现，具体如下：

启动解析程序执行一个自动化测试计划，读取自动化测试计划内容。如果该自动化测试计划未执行完成，提示用户选择是否由断点处执行。进行断点处执行时，读取主执行数据文件断点字段内容，否则将断点字段赋为空。在进入自动化测试断点执行阶段后，将当前执行脚本列表设为断点所在及断点后测试脚本。执行断点所在脚本时，首先执行初始化步骤恢复测试环境，然后跳转到中断步骤开始执行并对脚本中的循环参数根据断点信息重新进行赋值。每当自动化测试执行到一个新的进度时，即变换场景、测试脚本改变和执行一个测试步骤等，断点信息存取模块会将包括测试脚本、测试步骤、循环量等断点信息记录到主执行数据文件中。测试计划全部执行完成后，在主执行数据文件写入完成标识。

需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本发明。

为实现对测试中断点的精确定位，本发明采用了模块化结构实现一个自动化测试过程。图1为自动化测试计划模块以及解析程序模块的结构示意图，如图1所示，根据实际测试的需要，该自动化测试计划可以包括以下模块：自动化测试计划、自动化测试场景、自动化测试脚本等。其中，每个自动化测试脚本进一步包括初始化步骤和各测试步骤。以下结合图1描述各模块构成与功能：

自动化测试计划中包含了数个测试场景(图中示出了2个，自动化测试场景1、2)及测试场景对应的数个自动化测试脚本列表(图中示出了3个，自动化测试脚本1、2、3)，解析程序根据自动化测试计划内容依次执行测试脚本。

自动化测试脚本由数个自动化测试步骤构成，测试步骤一般按测试用例步骤和实现某种功能原则划分，至少应包括一个初始化步骤、一个结束步骤和中间步骤，每一个测试步骤都可以解析出唯一标识用作执行和断点标记。

测试步骤(图中示出初始化步骤、步骤1、步骤2、...、步骤N、以及结束步骤)包含数个函数体、能够指示下一测试步骤的标识和循环测试步骤标识。

其中，循环测试步骤的实现方式又分为静态循环和动态循环两种模式，该两种模式在测试步骤中使用不同的循环标识量识别。

静态循环是指在自动化脚本编写中普遍常用并且是通过依次执行循环列表内容直到列表结束来实现循环功能，例如，常用的网元端口列表、Modem端口列表和环路端口列表的循环，静态循环主要构成元素示例：

表1

设备A循环列表可在初始化步骤赋值，设备A循环执行函数在静态循环步骤内执行。每执行一个测试步骤前，先读取测试步骤标识、全部静态循环列表和循环标识，并作为断点信息写入到主执行数据文件中。

动态循环是为了实现一些不易用循环列表来控制的循环功能而设定的循环模式，以重复执行测试步骤次数的循环为例，执行次数动态循环主要构成元素示例：

表2

动态循环步骤内执行次数循环执行函数，并通过次数循环标识控制函数获取对应的标识读取，循环标识名和循环标识值用来记录循环断点信息。每个静态循环列表在主执行数据文件中有固定循环标识断点字段，而动态的循环标识字段只有在执行到相应函数时才会产生对应的标识字段。

执行动态和静态循环步骤都会产生一个循环执行返回值，如果循环步骤返回值为循环结束标识，则执行下一测试步骤，否则，执行测试步骤跳转标识指定的测试步骤。记录循环标识信息，使自动化测试脚本在断点恢复时可根据循环标识量去除已完成操作的循环内容，如果动态循环步骤中没写入循环标识读取函数，就不会对循环标识进行记录，断点恢复时需要重新开始循环。

解析程序模块是在运行在脚本解释器之上，用来实现解析自动化测试内容、执行测试脚本、处理测试断点等功能的模块。自动化测试解析程序的具体内容由自动化测试计划和测试脚本实现方式决定。

在自动化测试解析程序中还扩展了存储主执行数据文件的单元，用以记录解析程序所执行的自动化测试计划进度信息，其中，该自动化测试计划进度信息包括测试计划执行和断点信息的文件，可以包含以下字段：测试计划名、测试计划执行情况、测试时间、日志路径、当前测试场景、当前测试脚本、数据日志文件名、静态循环标识(例如，环路标识、网元端口标识)等内容，具体可根据实际需求调整。

方法实施例

根据本发明实施例，首先提供了一种基于断点的自动化测试方法。

图2为根据本发明实施例的基于断点的自动化测试方法的流程图。如图2所示，根据本发明实施例的基于断点的自动化测试方法包括以下步骤：(步骤S201-步骤S203)：

步骤S201：在当前测试计划执行期间，存储测试进度信息，并将断点所在的测试进度信息作为断点信息，其中，断点信息包括：测试场景信息、测试脚本信息；

优选地，上述测试进度信息包括但不限于：测试计划名、测试日志信息、当前测试场景信息、当前测试脚本信息、静态循环标识、动态循环标识。

步骤S203：获取断点信息，并在断点信息所指示的位置继续进行当前测试计划。

优选地，在获取了断点信息之后，读取自动化测试计划内容，将日志文件路径设为断点信息中内容，将当前执行的测试场景与测试脚本均设为断点信息记录的场景与测试脚本。同时，需要将测试计划名和测试日志信息进行实时存储。优选地，可以存储在主执行文件中。

优选地，上述步骤S203可以进一步包括：

1、执行测试场景信息所指示的测试场景，根据断点信息对测试场景信息中的环境变量进行赋值；

优选地，在进行环境变量赋值之后，将赋值后的当前测试场景信息进行存储，可以存储在主执行数据文件中。

2、执行测试脚本信息所指示的测试脚本。

优选地，上述步骤2可以进一步包括：

(1)通过调度测试脚本中的初始化程序对测试脚本进行初始化操作；

(2)从测试脚本信息所指示的测试脚本的中断步骤开始执行测试，并对测试脚本信息中的循环参数进行赋值。

优选地，如果中断步骤存在循环步骤，且循环步骤为动态循环，则获取动态循环中的断点内容，并从断点内容开始执行中断步骤；

优选地，如果中断步骤不存在循环步骤，或者存在循环步骤但循环步骤不是动态循环，则执行中断步骤。

通过上述实施例，提供了一种基于断点的测试方法。基于该方法，能够对测试脚本执行进度信息记录，并能对未正常执行完成的自动化测试计划，实现精确到测试步骤和循环变量的恢复。

图3为根据本发明优选实施例的基于断点的自动化测试方法的详细流程图。如图3所示，根据本发明优选实施例的基于断点的自动化测试方法包括以下步骤(步骤S301-步骤S321)：

解析程序在进行自动化测试的断点执行时，依次进行两种程度的断点恢复，首先为测试脚本级恢复，即将自动化测试计划中已执行完成的测试脚本在本次执行列表中去除。然后对断点所在测试脚本进行测试步骤级恢复，包括进行测试环境恢复和未完成测试步骤执行等内容。

步骤S301：启动解析程序执行自动化测试计划，根据用户选择判断是否需要由断点处执行测试，如果判断结果为是，则执行步骤S303，否则执行步骤S305；

步骤S303：由主执行数据文件中读取当前自动化测试计划的断点信息；

步骤S305：将主执行数据文件中当前自动化测试计划的断点信息全部设为空值；

步骤S307：读取自动化测试计划内容，将日志文件路径设为断点信息中内容，将当前执行的测试场景与测试脚本均设为断点信息记录的场景与测试脚本；

步骤S309：读取自动化测试计划内容，创建新日志文件，将当前执行的测试场景与测试脚本设为自动化测试计划中的第一个测试场景与第一个测试脚本；

步骤S311：执行断点测试场景，主要进行环境变量赋值与环境信息记录；

步骤S313：执行测试场景，主要进行环境变量赋值与环境信息记录；

步骤S315：执行断点所在测试脚本，具体可以参见图4。

图4为根据本发明优选实施例的基于断点的自动化测试方法中断点脚本解析的流程图。如图4所示，该断点脚本解析的流程主要包括以下步骤(步骤S401-步骤S413)：

由于自动化测试涉及到很多环境设备，如果直接执行断点所在的测试步骤，会因为与环境设备连接的丢失而无法正确执行测试命令。因此在步骤S315中提及执行断点所在测试脚本，不能通过简单的更改当前执行测试步骤来实现，需对断点所在测试脚本进行测试步骤级恢复。

步骤S401：执行测试用例初始化步骤，在自动化测试脚本编写过程中，通常会将设备连接、设备初始化以及在测试过程中不会进行修改的必在配置操作设置在初始化步骤中实现，因此本步骤相关于进行环境恢复；

步骤S403：根据断点信息中的静态循环标识值，调用相关函数，将环路、端口等由循环列表控制的可变环境信息设为循环标识值对应内容。并将当前测试步骤设为断点测试步骤。本步骤相关于进行第二次环境恢复；

步骤S405：判断测试步骤是否存在循环，如果判断结果为是，则执行步骤S407，否则，执行步骤S409；

步骤S407：判断这个循环步骤是否为动态循环，如果判断结果为是，则执行步骤S411，否则，执行步骤S409；

步骤S409：执行测试步骤内容；

步骤S411：调用应动态循环标识读取函数，获得循环标识字段名，在主执行数据文件读取该字段断点内容，将动态循环函数的循环标识设为断点值；

步骤S413：判断是否存在下一测试步骤，如果判断结果为是，则执行步骤S409，否则，该流程结束。

步骤S317：执行测试脚本，获取测试脚本内容按测试步骤设定顺序依次执行；

步骤S319：判断当前测试场景下是否存在未执行测试脚本，判断结果为是执行步骤S317，否则，执行步骤S321；

步骤S321：判断当前测试计划下是否存在未执行测试场景，判断结果为是执行步骤S313，否则，该流程结束。

图5为根据本发明优选实施例的基于断点的自动化测试方法中保存断点信息的流程图。如图5所示，该流程主要包括以下步骤(步骤S501-步骤S511)：

步骤S501：启动解析程序执行自动化测试计划；

其中，步骤S501与图3中的步骤S301相对应。

步骤S503：将测试计划名与日志信息写入主执行数据文件，相应地，该步骤在图3中的步骤S307、步骤S309内实现；

步骤S505：将当前测试场景名写入主执行数据文件，相应地，该步骤在图3中描述的步骤S311和步骤S313内实现；

步骤S507：将当前测试脚本名写入主执行数据文件，相应地，该步骤在在图3中描述的步骤S315或步骤S317内实现；

步骤S509：将当前测试步骤名写入主执行数据文件，相应地，该步骤在图3中描述的步骤S315或步骤S317内每执行一个测试步骤记录一次；

步骤S511：将当前测试步骤执行时静态循环标识写入主执行数据文件如果该步骤为动态静态循环则调用对应循环标识读取函数，获取标识字段名和标识值，记录到主执行数据文件，相应地，在图3中描述的步骤S315或步骤S317内每执行一个测试步骤记录一次。

上述实施例中的各步骤与图3中描述的步骤交互进行，能够对测试脚本执行进度信息进行记录，以便于对未执行完成的自动化测试计划，实现精确到测试步骤以及循环变量的定位与恢复。

装置实施例

根据本发明实施例，还提供了一种基于断点的自动化测试装置。

图6为根据本发明实施例的基于断点的自动化测试装置的结构框图。图7为根据本发明优选实施例的基于断点的自动化测试装置的结构框图。如图6所示，根据本发明实施例的基于断点的自动化测试装置包括：存储单元1、获取单元2、执行单元3，以下结合图7进行描述。

存储单元1，相当于存储主执行数据文件的单元，用于在当前测试计划执行期间，存储测试进度信息，其中，测试进度信息包括：断点信息，断点信息包括：测试场景信息、测试脚本信息；

获取单元2，与存储单元1相连接，用于从存储单元1中获取断点信息；

执行单元3，与获取单元2相连接，用于在断点信息所指示的位置继续进行当前测试计划。

优选地，如图7所示，上述执行单元3可以进一步包括：场景执行子单元30、脚本执行子单元32，其中，场景执行子单元30，用于执行测试场景信息所指示的测试场景，根据断点信息对测试场景信息中的环境变量进行赋值；脚本执行子单元32，用于执行测试脚本信息所指示的测试脚本。

优选地，如图7所示，脚本执行子单元32可以进一步包括：初始化模块320、执行模块322。其中，初始化模块320，用于通过调度测试脚本中的初始化程序对测试脚本进行初始化操作；执行模块322，用于从测试脚本信息所指示的测试脚本的中断步骤开始执行测试，并对测试脚本信息中的循环参数进行赋值。

优选地，如图7所示，执行模块322可以进一步包括：判断子模块3220、获取子模块3222、以及执行子模块3224。其中，判断子模块3220，用于判断中断步骤是否存在循环步骤，并在存在循环步骤的情况下，判断循环步骤是否为动态循环；获取子模块3222，用于获取动态循环中的断点内容；执行子模块3224，用于从断点内容开始执行中断步骤。

通过上述实施例，提供了一种基于断点的自动化测试装置，通过存储单元1、获取单元2、执行单元3的相互结合，可以对测试脚本执行进度信息记录，并能对未正常执行完成的自动化测试计划，实现精确到测试步骤和循环变量的定位与恢复。

综上所述，通过本发明的上述实施例，提供的基于断点的自动化测试方案，可以解决相关技术中存在的测试脚本解释器只能逐条执行脚本语句，无法对自动化测试计划执行过程进行记录，以及无法对未执行完成的自动化测试计划由断点位置恢复执行的问题，从而可以对测试脚本执行进度信息记录，并能对未正常执行完成的自动化测试计划，实现精确到测试步骤和循环变量的恢复。使自动化测试更加灵活与稳定的同时，也具备了暂停与继续执行自动化测试的功能。节省了自动化测试执行时间，提高了测试资源利用效率。

显然，本领域的技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件结合。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (11)

1.一种基于断点的自动化测试方法，其特征在于，包括：

在当前测试计划执行期间，存储测试进度信息，并将断点所在的测试进度信息作为断点信息，其中，所述断点信息包括：测试场景信息、测试脚本信息；

获取所述断点信息，并在所述断点信息所指示的位置继续进行所述当前测试计划。

2.根据权利要求1所述的方法，其特征在于，所述测试进度信息包括：

测试计划名、测试日志信息、当前测试场景信息、当前测试脚本信息、静态循环标识、动态循环标识。

3.根据权利要求1或2所述的方法，其特征在于，所述在所述断点信息所指示的位置继续进行所述当前自动化测试包括：

执行所述测试场景信息所指示的测试场景，根据所述断点信息对所述测试场景信息中的环境变量进行赋值；

执行所述测试脚本信息所指示的测试脚本。

4.根据权利要求3所述的方法，其特征在于，执行所述测试脚本信息所指示的测试脚本包括：

通过调度所述测试脚本中的初始化程序对所述测试脚本进行初始化操作；

从所述测试脚本信息所指示的测试脚本的中断步骤开始执行测试，并对所述测试脚本信息中的循环参数进行赋值。

5.根据权利要求4所述的方法，其特征在于，从所述测试脚本信息所指示的测试脚本的中断步骤开始执行测试包括：

如果所述中断步骤存在循环步骤，且所述循环步骤为动态循环，则获取所述动态循环中的断点内容，并从所述断点内容开始执行所述中断步骤；

如果所述中断步骤不存在循环步骤，或者存在循环步骤但所述循环步骤不是动态循环，则执行所述中断步骤。

6.根据权利要求2所述的方法，其特征在于，获取了所述断点信息之后，所述方法还包括：

对所述测试计划名和所述测试日志信息进行存储。

7.根据权利要求3所述的方法，其特征在于，在根据所述断点信息将所述测试场景信息中的环境变量进行赋值之后，所述方法还包括：

对进行环境变量赋值后的所述当前测试场景信息进行存储。

8.一种基于断点的自动化测试装置，其特征在于，包括：

存储单元，用于在当前测试计划执行期间，存储测试进度信息，其中，所述测试进度信息包括：断点信息，所述断点信息包括：测试场景信息、测试脚本信息；

获取单元，用于从所述存储单元中获取所述断点信息；

执行单元，用于在所述断点信息所指示的位置继续进行所述当前测试计划。

9.根据权利要求8所述的装置，其特征在于，所述执行单元包括：

场景执行子单元，用于执行所述测试场景信息所指示的测试场景，根据所述断点信息对所述测试场景信息中的环境变量进行赋值；

脚本执行子单元，用于执行所述测试脚本信息所指示的测试脚本。

10.根据权利要求9所述的装置，其特征在于，所述脚本执行子单元包括：

初始化模块，用于通过调度所述测试脚本中的初始化程序对所述测试脚本进行初始化操作；

执行模块，用于从所述测试脚本信息所指示的测试脚本的中断步骤开始执行测试，并对所述测试脚本信息中的循环参数进行赋值。

11.根据权利要求10所述的装置，其特征在于，所述执行模块包括：

判断子模块，用于判断所述中断步骤是否存在循环步骤，并在存在循环步骤的情况下，判断所述循环步骤是否为动态循环；

获取子模块，用于获取所述动态循环中的断点内容；

执行子模块，用于从所述断点内容开始执行所述中断步骤。

Images