CN111679979A - 破坏性测试方法及装置 - Google Patents

Abstract

本发明提供了一种破坏性测试方法及装置，其中该方法包括：根据被测程序的接口文档，生成随机正常数据，根据随机正常数据，获得正常测试数据集，其中，正常测试数据集包括多条正常测试数据；根据正常测试数据集中的正常测试数据，生成异常测试数据，用异常测试数据替换正常测试数据集中的正常测试数据，获得破坏性测试数据集；根据破坏性测试数据集，生成交易报文并发起交易；通过监听应答报文，确定被测程序的破坏性测试结果。该方法实现了自动随机生成大量正常测试的数据和破坏性测试的数据，从而可以大规模地覆盖破坏性测试场景，相较于手工测试，提高了测试覆盖率和测试效率，降低了测试成本。

Description

破坏性测试方法及装置

技术领域

本发明涉及应用程序开发领域，尤其涉及一种破坏性测试方法及装置。

背景技术

破坏性测试是指使用异常或不符合要求的测试数据对程序进行测试，以暴露被测程序的隐藏故障点，提高被测程序的错误处理能力。现有技术中，通过测试实施人员手工执行少量异常的探索性测试案例，进行破坏性测试，测试效率低；且若进行完整的破坏性测试，需要大量的测试数据，成本高。

发明内容

本发明实施例提供一种破坏性测试方法，用以提高程序测试效率，降低测试成本，该方法包括：

根据被测程序的接口文档，生成随机正常数据，根据随机正常数据，获得正常测试数据集，所述正常测试数据集包括多条正常测试数据；

根据正常测试数据集中的正常测试数据，生成异常测试数据，用异常测试数据替换正常测试数据集中的正常测试数据，获得破坏性测试数据集；

根据所述破坏性测试数据集，生成交易报文并发起交易；

通过监听应答报文，确定被测程序的破坏性测试结果。

本发明实施例还提供一种破坏性测试装置，用以提高程序测试效率，降低测试成本，该装置包括：

正常测试数据生成模块，用于根据被测程序的接口文档，生成随机正常数据，根据随机正常数据，获得正常测试数据集，所述正常测试数据集包括多条正常测试数据；

异常测试数据生成模块，用于根据正常测试数据集中的正常测试数据，生成异常测试数据，用异常测试数据替换正常测试数据集中的正常测试数据，获得破坏性测试数据集；

交易模块，用于根据所述破坏性测试数据集，生成交易报文并发起交易；

测试结果确定模块，用于通过监听应答报文，确定被测程序的破坏性测试结果。

本发明实施例还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述破坏性测试方法。

本发明实施例也提供一种计算机可读存储介质，所述计算机可读存储介质存储有执行上述破坏性测试方法的计算机程序。

本发明实施例中，通过根据被测程序的接口文档，生成随机正常数据，根据随机正常数据，获得正常测试数据集，其中，正常测试数据集包括多条正常测试数据；根据正常测试数据集中的正常测试数据，生成异常测试数据，用异常测试数据替换正常测试数据集中的正常测试数据，获得破坏性测试数据集；根据破坏性测试数据集，生成交易报文并发起交易；通过监听应答报文，确定被测程序的破坏性测试结果。实现了自动随机生成大量正常测试的数据和破坏性测试的数据，从而可以大规模地覆盖破坏性测试场景，相较于手工测试，提高了测试覆盖率和测试效率，降低了测试成本。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例中破坏性测试方法的示意图。

图2为本发明具体实施例中步骤101的具体实施方法示意图。

图3为本发明具体实施例中步骤104的具体实施方法示意图。

图4为本发明一具体应用实施所开发的测试工具的结构示意图。

图5为本发明实施例中破坏性测试装置的示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

本发明实施例提供了一种破坏性测试方法，用以提高程序测试效率，降低测试成本，如图1所示，该方法包括：

步骤101：根据被测程序的接口文档，生成随机正常数据，根据随机正常数据，获得正常测试数据集，该正常测试数据集包括多条正常测试数据；

步骤102：根据正常测试数据集中的正常测试数据，生成异常测试数据，用异常测试数据替换正常测试数据集中的正常测试数据，获得破坏性测试数据集；

步骤103：根据破坏性测试数据集，生成交易报文并发起交易；

步骤104：通过监听应答报文，确定被测程序的破坏性测试结果。

由图1所示流程可以得知，本发明实施例中，通过根据被测程序的接口文档，生成随机正常数据，根据随机正常数据，获得正常测试数据集，其中，正常测试数据集包括多条正常测试数据；根据正常测试数据集中的正常测试数据，生成异常测试数据，用异常测试数据替换正常测试数据集中的正常测试数据，获得破坏性测试数据集；根据破坏性测试数据集，生成交易报文并发起交易；通过监听应答报文，确定被测程序的破坏性测试结果。实现了自动随机生成大量正常测试的数据和破坏性测试的数据，从而可以大规模地覆盖破坏性测试场景，相较于手工测试，提高了测试覆盖率和测试效率，降低了测试成本。

具体实施时，首先根据被测程序的接口文档，生成随机正常数据，具体过程如图2所示，包括：

步骤201：解析待测程序的接口文档，提取每个接口字段的字段类型和字段长度；

步骤202：对每个接口字段，生成对应于字段类型和字段长度的随机正常数据。

本发明实施例中，待测程序的接口文档定义了交易接口中每个字段的所有属性，通过文档解析来获取交易接口的所有字段名称、字段类型及字段长度属性。依据每个接口字段的字段类型和字段长度，生成该字段类型、在该字段长度范围内的随机正常数据。

生成随机正常数据后，根据随机正常数据，获得正常测试数据集，该正常测试数据集包括多条正常测试数据。根据随机正常数据，获得正常测试数据集，具体过程包括：对随机正常数据进行数据补位，获得正常测试数据集。由于测试数据是每个字段在每条测试数据中都有一个具体的值(可为空)，一条测试数据是由所有接口字段的对应的随机正常数据组合而成。但在实际测试中，输入数据的长度小于接口字段长度是合法的，生成的随机正常数据也可以小于或等于字段长度，而当交易接口为固定长度报文时，需要通过前补0，后补空格的数据补位策略模拟交易报文的生成机制。对随机正常数据进行数据补位后，得到多条正常测试数据，生成的每条正常测试数据都相互独立，共同形成正常测试数据集，具体实施例中，该正常测试数据集的大小可通过参数定义。

获得正常测试数据集后，根据正常测试数据集中的正常测试数据，生成异常测试数据，具体过程包括：使用异常数据生成器，根据预设接口字段的字段类型和字段长度，生成异常数据，利用生成的异常数据替换正常测试数据集中该预设字段对应的正常测试数据，得到异常测试数据。抽取正常测试数据集中的一条正常测试数据，随机或按顺序选中该正常测试数据的某一预定接口字段，利用异常数据生成器，根据该字段的字段类型和字段长度，生成不符合规则的异常数据并替换原有的部分正常测试数据，得到一条异常测试数据，依次循环抽取正常测试数据集中的每一条正常测试数据，按照上述方法，用生成的异常测试数据，替换选中的预设字段对应的正常测试数据。其中，上述预定接口字段可人为选定或随机选取，不做限定。

生成异常测试数据后，用异常测试数据替换正常测试数据集中的正常测试数据，获得破坏性测试数据集。根据该破坏性测试数据集，生成交易报文并发起交易。由于异常测试数据生成的过程中已进行补位操作，只需按顺序拼接各个接口字段的测试数据即可进行报文组报，具体实施时，选取基本报文作为母版，参数化其中的字段内容，作为测试数据填充的骨架文件，生成交易报文。生成交易报文后，连接被测程序的服务器，循环向服务器发送上述生成的交易报文，发起交易。

发起交易后，服务器会返回应答报文，通过监听应答报文，确定被测程序的破坏性测试结果。具体过程，如图3所示，包括：

步骤301：解析应答报文，提取应答报文长度、应答报文中返回码的字段类型和字段长度；

步骤302：若应答报文长度、应答报文中返回码的字段类型和字段长度，均符合预设要求，确定被测程序的破坏性测试结果为通过测试。

具体实施例中，若应答报文长度、返回码的字段类型和字段长度均符合要求，则测试结果为通过，否则测试结果为不通过。还可统计每一个破坏性测试数据集的测试不通过的次数，并输出html类型的破坏性测试报告。

下面给出一具体实例说明本发明实施例如何进行破坏性测试。本例为应用该破坏性测试方法所开发的测试工具，具体结构如图4所示，包括：

文档解析模块401：该模块用于读取被测程序的接口文档，提取该交易接口的所有字段名，并提取每个字段的字段类型和字段长度，供正常测试数据集生成模块402和破坏性测试数据集生成模块403使用；还用于读取输出接口文档，提取输出接口的所有字段名，并提取字段类型和字段长度供应答报文解析模块406使用。

正常测试数据集生成模块402：用于根据文档解析模块401提取得到的接口每个字段的字段类型和字段长度生成符合规则的随机正常数据，所有字段生成的随机正常数据共同组成一条测试数据，循环生成的多条数据形成正常测试数据集，供破坏性测试数据集生成模块403使用。

破坏性测试数据集生成模块403：用于选取一条正常测试数据的某一特定字段，根据该字段的字段类型和字段长度生成不符合规则的异常测试数据并替换原数据(具体地，字段类型为数字型，生成字符型的异常测试数据；字段长度为8位，生成9位的异常测试数据)，循环抽取正常测试数据集中的每一条数据，依次用异常测试数据替换其中的某一个字段，形成破坏性测试数据集，供报文组报模块404使用。

报文组报模块404：定义报文组报模板，依次抽取每一条破坏性测试数据，按模板规则对所有字段进行循环拼接，形成完整的交易报文，供通信调度模块405使用。

通信调度模块405：连接被测程序的服务器，将上述生成的交易报文循环发送给服务器，并获取服务器的应答报文，提供给应答报文解析模块406。

应答报文解析模块406：依据文档解析模块401提供的应答报文长度、返回码的字段类型和字段长度，并更新每条测试数据的测试结果(应答报文长度、返回码字段类型和字段长度均符合要求，则测试结果为通过；否则测试结果为不通过)。

测试结果统计模块407：统计记录每一个破坏性测试数据集测试不通过的次数，并输出html类型的测试报告。

其中，破坏性测试数据集生成模块403，可以根据不同的测试需要，定制不同级别的异常数据。正常测试数据集生成模块402，可以针对不同的字段类型、字段长度生成符合要求的随机数据。由于，各个被测程序的接口文档存在较大差异，需要定制多个文档解析模块401、报文组报模板404和应答报文解析模块406。

通过本测试工具，可以大规模地覆盖破坏性测试场景，提高测试的覆盖率和测试效率，降低测试成本。

上述具体应用的实施仅为举例，其余实施方式不再一一赘述。

基于同一发明构思，本发明实施例还提供一种破坏性测试装置，由于破坏性测试装置所解决问题的原理与破坏性测试方法相似，因此破坏性测试装置的实施可以参见方法的实施，重复之处不再赘述，具体结构如图5所示：

正常测试数据生成模块501，用于根据被测程序的接口文档，生成随机正常数据，根据随机正常数据，获得正常测试数据集，所述正常测试数据集包括多条正常测试数据；

异常测试数据生成模块502，用于根据正常测试数据集中的正常测试数据，生成异常测试数据，用异常测试数据替换正常测试数据集中的正常测试数据，获得破坏性测试数据集；

交易模块503，用于根据所述破坏性测试数据集，生成交易报文并发起交易；

测试结果确定模块504，用于通过监听应答报文，确定被测程序的破坏性测试结果。

具体实施例中，正常测试数据生成模块501具体用于：

解析待测程序的接口文档，提取每个接口字段的字段类型和字段长度；

对每个接口字段，生成对应于字段类型和字段长度的随机正常数据。

具体实施例中，正常测试数据生成模块501具体还用于：对随机正常数据进行数据补位，获得正常测试数据集。

具体实施时，异常测试数据生成模块502具体用于：使用异常数据生成器，根据预设接口字段的字段类型和字段长度，生成异常数据，利用生成的异常数据替换正常测试数据集中该预设字段对应的正常测试数据，得到异常测试数据。

具体地，测试结果确定模块504具体用于：

解析应答报文，提取应答报文长度、应答报文中返回码的字段类型和字段长度；

若应答报文长度、应答报文中返回码的字段类型和字段长度，均符合预设要求，确定被测程序的破坏性测试结果为通过测试。

本发明实施例还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现上述破坏性测试方法。

本发明实施例还提供一种计算机可读存储介质，存储有执行上述破坏性测试方法的计算机程序。

综上所述，本发明实施例提供的破坏性测试方法及装置具有如下优点：

通过根据被测程序的接口文档，生成随机正常数据，根据随机正常数据，获得正常测试数据集，其中，正常测试数据集包括多条正常测试数据；根据正常测试数据集中的正常测试数据，生成异常测试数据，用异常测试数据替换正常测试数据集中的正常测试数据，获得破坏性测试数据集；根据破坏性测试数据集，生成交易报文并发起交易；通过监听应答报文，确定被测程序的破坏性测试结果。实现了自动随机生成大量正常测试的数据和破坏性测试的数据，从而可以大规模地覆盖破坏性测试场景，相较于手工测试，提高了测试覆盖率和测试效率，降低了测试成本。

本领域内的技术人员应明白，本发明的实施例可提供为方法、装置、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本发明是参照根据本发明实施例的方法、装置和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明实施例可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (12)

1.一种破坏性测试方法，其特征在于，包括：

根据被测程序的接口文档，生成随机正常数据，根据随机正常数据，获得正常测试数据集，所述正常测试数据集包括多条正常测试数据；

根据正常测试数据集中的正常测试数据，生成异常测试数据，用异常测试数据替换正常测试数据集中的正常测试数据，获得破坏性测试数据集；

根据所述破坏性测试数据集，生成交易报文并发起交易；

通过监听应答报文，确定被测程序的破坏性测试结果。

2.如权利要求1所述的方法，其特征在于，根据被测程序的接口文档，生成随机正常数据，包括：

解析待测程序的接口文档，提取每个接口字段的字段类型和字段长度；

对每个接口字段，生成对应于字段类型和字段长度的随机正常数据。

3.如权利要求1所述的方法，其特征在于，根据随机正常数据，获得正常测试数据集，包括：

对随机正常数据进行数据补位，获得正常测试数据集。

4.如权利要求1所述的方法，其特征在于，根据正常测试数据集中的正常测试数据，生成异常测试数据，包括：

使用异常数据生成器，根据预设接口字段的字段类型和字段长度，生成异常数据，利用生成的异常数据替换正常测试数据集中所述预设字段对应的正常测试数据，得到异常测试数据。

5.如权利要求1所述的方法，其特征在于，通过监听应答报文，确定被测程序的破坏性测试结果，包括：

解析应答报文，提取应答报文长度、应答报文中返回码的字段类型和字段长度；

若应答报文长度、应答报文中返回码的字段类型和字段长度，均符合预设要求，确定被测程序的破坏性测试结果为通过测试。

6.一种破坏性测试装置，其特征在于，包括：

正常测试数据生成模块，用于根据被测程序的接口文档，生成随机正常数据，根据随机正常数据，获得正常测试数据集，所述正常测试数据集包括多条正常测试数据；

异常测试数据生成模块，用于根据正常测试数据集中的正常测试数据，生成异常测试数据，用异常测试数据替换正常测试数据集中的正常测试数据，获得破坏性测试数据集；

交易模块，用于根据所述破坏性测试数据集，生成交易报文并发起交易；

测试结果确定模块，用于通过监听应答报文，确定被测程序的破坏性测试结果。

7.如权利要求6所述的装置，其特征在于，所述正常测试数据生成模块具体用于：

解析待测程序的接口文档，提取每个接口字段的字段类型和字段长度；

对每个接口字段，生成对应于字段类型和字段长度的随机正常数据。

8.如权利要求6所述的装置，其特征在于，正常测试数据生成模块具体用于：

对随机正常数据进行数据补位，获得正常测试数据集。

9.如权利要求6所述的装置，其特征在于，所述异常测试数据生成模块具体用于：

使用异常数据生成器，根据预设接口字段的字段类型和字段长度，生成异常数据，利用生成的异常数据替换正常测试数据集中所述预设字段对应的正常测试数据，得到异常测试数据。

10.如权利要求6所述的装置，其特征在于，所述测试结果确定模块具体用于：

解析应答报文，提取应答报文长度、应答报文中返回码的字段类型和字段长度；

若应答报文长度、应答报文中返回码的字段类型和字段长度，均符合预设要求，确定被测程序的破坏性测试结果为通过测试。

11.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至5任一所述方法。

12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有执行权利要求1至5任一所述方法的计算机程序。

Images