CN115114176A - 用于自动化测试结果的断言方法、装置、介质、设备及程序 - Google Patents

Abstract

本发明公开一种用于自动化测试结果的断言方法、装置、电子设备、介质及程序。用于自动化测试结果的断言方法包括：获取对测试用例进行自动化测试时实际返回的测试数据；对测试数据进行字段解析和拆分，并通过字段的截取，获得多个与验证用的预设校验字段对应的待校验字段，每个预设校验字段匹配至少一个校验规则；利用预设校验字段对所述待校验字段定位，确定每个待校验字段的校验规则，通过确定的校验规则对多个所述待校验字段一一进行字段校验；根据多个待校验字段的字段校验的结果，确定测试数据的校验结果。本发明能满足复杂测试用例执行结果的多维度验证，解决了测试用例执行过程中，执行结果动态变化时无法准确判断是否执行成功的问题。

Description

用于自动化测试结果的断言方法、装置、介质、设备及程序

技术领域

本发明涉及测试用例校验技术领域，特别是涉及一种用于自动化测试结果的断言方法、装置、介质、设备及程序。

背景技术

连续的软件平台开发周期需要重复执行相同的测试套件或者测试用例，这就需要检测校验测试套件或者测试用例执行是否符合预设要求，即需要进行接口测试。为了减少人工操作，通常利用自动化工具进行测试用例的自动化测试，即让脚本/程序自动判断测试套件或者测试用例的实际结果是否等于预设结果，即进行接口的自动化测试。

目前的用例校验主要通过强校验方式，即将待处理文本中待校验信息与预设结果进行单一匹配，并根据匹配结果生产校验结果。然而，由于复杂用例的执行结果通常都是动态的，不是某一个固定的值或字符串，所以，在对复杂动态用例采用上述的强校验方式校验时，常常会因为强匹配不一致导致用例执行结果为失败。且上述的强用例校验的方法，其方式单一，对于用例执行结果的判断具有局限性。

发明内容

本发明的目的是针对现有技术中的问题，而提供一种用于自动化测试结果的断言方法及装置、介质、设备及程序，旨在解决现有技术的接口测试中，仅是单一的校验字段与预期值是否相等的方法进行字段的校验，对于动态结果无法更好校验，无法有效判断测试用例是否执行成功的问题。

本发明第一方面，提供一种用于自动化测试结果的断言方法，包括：

获取对测试用例进行自动化测试时实际返回的测试数据；

对测试数据进行字段解析和拆分，并通过字段的截取，获得多个与验证用的预设校验字段对应的待校验字段，每个预设校验字段匹配至少一个校验规则；

利用预设校验字段对所述待校验字段定位，确定每个待校验字段的校验规则，通过确定的校验规则对多个所述待校验字段一一进行字段校验；

根据多个待校验字段的字段校验的结果，确定测试数据的校验结果。

本发明第二方面，提供一种用于自动化测试结果的断言装置，包括：

测试数据获取模块，用于获取对测试用例进行自动化测试时实际返回的测试数据；

目标字段截取模块，用于对测试数据进行字段解析和拆分，并通过字段的截取，获得多个与预设校验字段对应的待校验字段；每个预设校验字段对应匹配一个校验规则；

字段匹配校验模块，用于利用预设校验字段对所述待校验字段定位，确定每个待校验字段的校验规则，通过确定的校验规则对多个所述待校验字段一一进行字段校验；

校验结果确定模块，用于根据多个待校验字段的字段校验的结果，确定测试数据的校验结果。

本发明第三方面，提供一种电子设备，包括：

处理器；以及，

存储器，用于存储所述处理器的计算机程序；

其中，所述处理器被配置为通过执行所述计算机程序来实现本发明第一方面所述的用于自动化测试结果的断言方法

本发明第四方面，提供一种计算机存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现，本发明第一方面所述的用于自动化测试结果的断言方法。

本发明第四方面，提供一种计算机程序产品，包括计算机程序该计算机程序被处理器执行时实现本发明第一方面所述的用于自动化测试结果的断言方法。

本发明用于自动化测试结果的断言技术，是用于自动化测试结果的精细化验证技术，能满足复杂用例执行结果的多维度验证，解决了用例执行过程中，执行结果动态变化时，无法准确判断是否执行成功的问题。

本发明用于自动化测试结果的断言技术，使得测试人员可根据用例需要，自行组合匹配校验规则，灵活性更高；对于复杂用例的执行结果，可以进行多维度动态验证，不局限于某一固定值断言；而且针对动态结果，适应性更强，断言方式更精细。

附图说明

图1 是本发明的用于自动化测试结果的断言方法的流程图。

图2是本发明的用于自动化测试结果的断言装置的原理结构图。

图3是本发明的电子设备的结构原理框图。

具体实施方式

以下结合附图和具体实施例对本发明作进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

本发明中，所指的断言，表示为一些布尔表达式，用于表示可以相信在程序中的某个特定点该表达式值为真,是将待检验字段的待检验值与预期值通过校验规则进行比较，判断二者是否相符或是一致，在判断一致或是相符时，断言成功，否则断言失败。

参考图1，本发明实施例的第一方面，提供一种用于自动化测试结果的断言方法，包括：

S101.获取对测试用例进行自动化测试时实际返回的测试数据；

S102.对测试数据进行字段解析和拆分，并通过字段的截取，获得多个与验证用的预设校验字段对应的待校验字段，每个预设校验字段匹配至少一个校验规则；

S103利用预设校验字段对所述待校验字段定位，确定每个待校验字段的校验规则，通过确定的校验规则对多个所述待校验字段一一进行字段校验；

S104.根据多个待校验字段的字段校验的结果，确定测试数据的校验结果。

本发明实施例中，所述的校验规则与预设校验字段组合设置一起，一个校验规则对应一个预设检验字段，一个预设检验字段匹配至少一个校验规则，所述预设校验字段预先根据需要设置，可以是通过将一个测试用例的校验数据按预定的方式划分为多个部分，如按字段划分，形成多个字段而实现，并与对应的校验规则组合设置，预先存储备用。

在对接口测试的测试结果进行验证断言时，在获得待校验字段后，后端通过数据解析的步骤，解析预设检验字段对应的校验规则，形成匹配对应每个校验字段的校验规则，用预设校验字段对待校验字段定位，然后利用获得的校验规则对与预设校验字段对应的多个所述待校验字段一一进行字段校验，判断待校验字段是否符合预设要求，若是则断言成功，否则断言失败。

如根据手机号码登录某个手机上的应用APP时，通常需要获取动态验证码code输入，在获取动态验证码code的过程中，通过数据接口向服务器发送请求，服务器根据发送请求返回动态验证码code,本发明就可以对此类动态结果的返回测试数据进行校验，其返回的测试数据所对应的验证用预设校验字段可以根据json scheme格式(与待校验字段的解析拆分相同的方式)进行预设校验字段的划分，并与预设的校验规则进行组合设置，测试结果断言时，后端服务器同样根据据json scheme格式进行待校验字段的解析、拆分，然后从返回的测试数据中截取待校验字段，并用预设校验字段对测试数据通过截取所形成的待校验字段进行定位，确定验证待校验字段的校验规则，之后利用匹配待校验字段的校验规则对待校验字段进行验证。

如某一个待校验字段（如动态验证码返回的code）设定的校验规则1为“必填”，校验规则2为“长度6”，校验规则3为“开头包含2”，测试符合要求的情况下，测试时所返回的动态验证码code必须为2开头的长度为6的数字串，如果通过校验规则验证所返回的字段不符合该要求，则校验失败，断言失败。

本发明实施例中，所述的对测试数据进行字段解析和拆分，并通过字段的截取，获得多个与预设校验字段对应的待校验字段，可以是通过以下方法或步骤实现：

如通过json格式对实际返回的测试数据进行字段解析和拆分，根据字段解析与拆分结果，从实际返回的测试数据中截取需要的字段，获得多个待校验字段，多个所述待校验字段与预设校验字段相对应。当然，在具体实现上，也不限于该实施方式，也可以采用其它方式来实现。

其中，通过json格式对实际返回的测试数据进行字段解析和拆分，截取待校验字段，是通过jsonPath解析json的层级关系，然后再根据解析的层级关系，进行待校验字段的截取，从而获得多个待校验字段，获得的多个所述待校验字段与预设校验字段是对应的，这样方便根据与预设校验字段匹配的校验规则对待校验字段进行一一校验或是验证，实现测试结果的断言。

本发明实施例中，所述的校验规则可以采用不同的操作符预定义，如每一个校验规则对应一个特殊的操作符号，不同的操作符表示不同的校验规则，如字段中包含某一个值用%表示，必填用#表示，字段长度用*表示等。

本发明实施例中，所述的利用预设校验字段对所述待校验字段定位，确定每个待校验字段的校验规则，通过确定的校验规则对多个所述待校验字段一一进行字段校验的步骤之前，包括以下步骤：

首先，对用于验证的预设校验字段与校验规则的组合进行解析，获得预设校验字段及对应的校验规则，并对代表不同校验规则的所述的操作符（如#、%、*等符号）进行解析，获取其对应的校验规则，所述的校验规则可以是一种具体的函数。

通过以上的步骤，通过规则解析获得校验规则后，再利用解析获得的校验规则对通过预设校验字段定位的多个所述待校验字段一一对应匹配进行字段校验。

本发明实施例中，所述测试数据的校验结果为布尔类型true或false。其中，各个校验规则的校验结果间的关系为“与”的关系，若有一个校验规则的校验结果为不匹配，则所述测试数据的校验结果为false，表示断言失败。

也就是说，以一个测试数据的多个待校验字段进行验证时，若多个待校验字段的验证结果均为true,则最终的测试数据的校验结果为true，符合预设的校验结果的要求，即可通过，表示断言成功，否则，若多个待校验字段的验证结果中有一个为false,则最终的测试数据的校验结果为false，她即不符合预设的校验结果的要求，即校验不通过，表示断言失败。

例如，在自动化测试时，通过后端返回的测试数据如下：

{

"settings": [

{

"bankNameNumberList": [

{

"id": "2924",

"bankNameNumber": "开户银行1116666 11166666666",

"isDefault": true

}

],

"isOfflineConfirmation": true

}

]

}

假设需要验证bankNameNumber字段（待校验字段），首先，要确定对应实际测试时返回的实际的测试数据的预设校验字段和校验规则，如预设校验字段bankNameNumber(该预设校验字段位于以层级结构关系存储的settings[0]项下bankNameNumberList[0]项下的第三层位置，在查找时可根据该层级关系进行查找并确定)，对应匹配的代表校验规则的特殊符号为$,#，然后通过预设的格式，如json格式，对测试返回的测试数据结果中的字段进行字段解析和拆分，将待校验字段从返回的测试数据结果中截取出来；再通过数据解析的步骤，解析每一个代表校验规则的特殊符号代表的校验规则及对应的预设校验字段。数据解析完成后，根据解析获得的校验规则对待校验字段一一进行验证，即验证是否为true。

本发明实施例，可以使用mysql数据库进行数据的存储以及使用java语言编程实现，可以通过封装Json Schema在接口测试中做详细的、精细化的数据一致性校验，包括但不限于数据值、数据类型、限制范围、最大值最小值、枚举等，当然具体实现上不限于采用封装Json Schema的方法。

本发明实施例中的用于自动化测试结果的断言方法，即用于自动化测试结果的精细化验证方法，不局限于实施中的实现工具及方法，使用其他工具同样也可以实现。

参见图2所示，本发明实施例的第二方面，提供一种用于自动化测试结果的断言装置200，包括：

测试数据获取模块210，用于获取对测试用例进行自动化测试时实际返回的测试数据；

目标字段截取模块211，用于对测试数据进行字段解析和拆分，并通过字段的截取，获得多个与验证用的预设校验字段对应的待校验字段，每个预设校验字段匹配至少一个校验规则；

字段匹配校验模块212，用于利用预设校验字段对所述待校验字段定位，确定每个待校验字段的校验规则，通过确定的校验规则对多个所述待校验字段一一进行字段校验；

校验结果确定模块213，用于根据多个待校验字段的字段校验的结果，确定测试数据的校验结果。

本发明实施例提供的用于自动化测试结果的断言装置，可以用于执行上述方法实施例中的步骤。对于本申请装置实施例中未披露的细节，请参照本申请上述的方法实施例。

图3是本申请根据一示例实施例示出的电子设备的结构示意图。如图3所示，本实施例提供的一种电子设备300，包括：

处理器301；以及，

存储器302，用于存储所述处理器的可执行指令，该存储器还可以是flash(闪存)；

其中，所述处理器301配置为经由执行所述可执行指令来执行上述方法中的各个步骤。

可选地，存储器302既可以是独立的，也可以跟处理器301集成在一起。

当所述存储器302是独立于处理器301之外的器件时，所述电子设备300，还可以包括：

总线303，用于连接所述处理器301以及所述存储器302。

本发明实施例还提供一种计算机可读存储介质，计算机可读存储介质中存储有计算机程序，当电子设备的至少一个处理器执行该计算机程序时，电子设备执行上述方法中的各个步骤。

本发明实施例还提供一种计算机程序产品，该计算机程序产品包括计算机程序，该计算机程序存储在可读存储介质中。电子设备的至少一个处理器可以从计算机可读存储介质读取该计算机程序，至少一个处理器执行该计算机程序使得电子设备实施上述方法中的各个步骤。

本领域普通技术人员可以理解，实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时，执行包括上述各方法实施例的步骤；而前述的存储介质包括：ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅是本发明的优选实施方式，应当指出的是，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.用于自动化测试结果的断言方法，其特征在于，包括：

获取对测试用例进行自动化测试时实际返回的测试数据；

对测试数据进行字段解析和拆分，并通过字段的截取，获得多个与验证用的预设校验字段对应的待校验字段，每个预设校验字段匹配至少一个校验规则；

利用预设校验字段对所述待校验字段定位，确定每个待校验字段的校验规则，通过确定的校验规则对多个所述待校验字段一一进行字段校验；

根据多个待校验字段的字段校验的结果，确定测试数据的校验结果。

2.根据权利要求1所述用于自动化测试结果的断言方法，其特征在于，所述的对测试数据进行字段解析和拆分，并通过字段的截取，获得多个与预设校验字段对应的待校验字段，包括：

通过jsonPath解析json的层级关系，对实际返回的测试数据进行字段解析和拆分，根据字段解析与拆分结果，从实际返回的测试数据中进行字段的截取，获得多个待校验字段。

3.根据权利要求1所述用于自动化测试结果的断言方法，其特征在于，所述的校验规则采用不同的操作符预定义，不同的操作符表示不同的校验规则。

4.根据权利要求3所述用于自动化测试结果的断言方法，其特征在于，所述的利用预设校验字段对所述待校验字段定位的步骤之前，还包括步骤：

对用于验证的预设校验字段与校验规则的组合进行解析，获得预设校验字段以及对应的校验规则的操作符；

对所述的操作符进行解析，获取其对应的校验规则。

5.根据权利要求1所述用于自动化测试结果的断言方法，其特征在于，所述测试数据的校验结果为布尔类型true或false。

6.根据权利要求5所述用于自动化测试结果的断言方法，其特征在于，各个校验规则的校验结果间的关系为“与”的关系，若有一个校验规则的校验结果为不匹配，则所述测试数据的校验结果为false，表示断言失败。

7.用于自动化测试结果的断言装置，其特征在于，包括：

测试数据获取模块，用于获取对测试用例进行自动化测试时实际返回的测试数据；

目标字段截取模块，用于对测试数据进行字段解析和拆分，并通过字段的截取，获得多个与验证用的预设校验字段对应的待校验字段，每个预设校验字段匹配至少一个校验规则；

字段匹配校验模块，用于利用预设校验字段对所述待校验字段定位，确定每个待校验字段的校验规则，通过确定的校验规则对多个所述待校验字段一一进行字段校验；

校验结果确定模块，用于根据多个待校验字段的字段校验的结果，确定测试数据的校验结果。

8.一种电子设备，其特征在于，包括：

处理器；以及，

存储器，用于存储所述处理器的计算机程序；

其中，所述处理器被配置为通过执行所述计算机程序来实现权利要求1至7任一项所述的用于自动化测试结果的断言方法。

9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至7任一项所述的用于自动化测试结果的断言方法。

10.一种计算机程序产品，包括计算机程序，其特征在于，该计算机程序被处理器执行时实现权利要求1至7任一项所述的用于自动化测试结果的断言方法。

Images