CN110716870A - 服务的自动化测试方法及装置 - Google Patents

Abstract

本发明提供了一种服务的自动化测试方法及装置。所述方法包括：接收报文接口文件及服务地址；解析所述报文接口文件，生成测试用例模板；根据所述测试用例模板，生成测试用例；根据所述测试用例及所述服务地址调用服务器，得到测试结果报告。本发明可以实现业务人员能够直观高效地编写服务测试用例，能够根据接口的数据项定义，自动生成随机测试用例，作为业务编写的测试用例的补充，提高测试覆盖度，使得测试能够达到高效率、高质量、人机交互友好、减轻业务人员编写测试用例工作量的效果。

Description

服务的自动化测试方法及装置

技术领域

本发明涉及服务自动化测试领域，尤指一种服务的自动化测试方法及装置。

背景技术

迈克科恩在2009年提到一种三层的金字塔测试结构，如图1所示。最下层是单元测试，是对软件中最小的可测试单元进行检查和验证，一般需要借助单元测试框架，如Java语言的JUnit、TestNG，Python语言的unittest。最上层是界面测试，用户界面测试的经济成本和时间成本较高，常见的自动化测试工具有QTP，Robot Framework、Watir、Selenium等。服务测试介于单元测试和界面测试之间，主要是检查验证模块间的调用返回以及不同系统、服务间的数据交换，常见的服务测试工具有postman、jmeter、loadrunner等。

现在很多系统都采用SOA(Service-Oriented Architecture面向服务)的架构，后端提供服务供前端调用，因此服务的测试越来越重要。另外，从安全层面来说，只依赖前端进行限制也不能完全满足系统的安全要求，需要后端同样进行控制，在这种情况下就需要从服务层面进行验证。

不过当前的一些服务自动化测试工具，在测试用例编写方面，往往需要测试人员直接修改接口报文(如XML或JSON格式)，有些即使使用Excel等工具进行组织，也仅仅是将整个接口请求数据维护到Excel中，当联机服务接口达到一定的复杂程度时，测试用例的查看、编写和组织都较为困难，造成测试效率较低，成为提升项目实施效率的拦路虎之一。

发明内容

为了解决上述问题，本发明实施例提供一种服务的自动化测试方法，所述方法包括：

接收报文接口文件及服务地址；

解析所述报文接口文件，生成测试用例模板；

根据所述测试用例模板，生成测试用例；

根据所述测试用例及所述服务地址调用服务器，得到测试结果报告。

可选的，在本发明一实施例中，所述解析所述报文接口文件，生成测试用例模板包括：预设数据字典中数据项类型及代码取值，以及预设报文接口文件中数据项及对应的数据项层级；解析所述报文接口文件的接口字段，根据所述数据项类型、代码取值、数据项及对应的数据项层级，遍历接口字段并生成所述测试用例模板。

可选的，在本发明一实施例中，所述根据所述测试用例模板，生成测试用例包括：利用所述测试用例模板，获取用例数据页信息，其中，所述用例数据页信息包括字段层级及字段基本信息；根据所述数据字典、字段层级及字段基本信息，遍历各数据页，并生成各数据页对应的多条数据及多个测试用例，其中，所述数据与所述测试用例一一对应。

可选的，在本发明一实施例中，所述根据所述测试用例模板，生成测试用例包括：根据所述测试用例模板，在数据库中生成测试用例的请求表及结果表；将数据库中已有数据转换为测试用例数据，并将所述测试用例数据存入到测试用例的请求表及结果表中；将测试用例的请求表及结果表导出到所述测试用例模板中，得到所述测试用例。

本发明实施例还提供一种服务的自动化测试装置，所述装置包括：

接收模块，用于接收报文接口文件及服务地址；

模板生成模块，用于解析所述报文接口文件，生成测试用例模板；

用例生成模块，用于根据所述测试用例模板，生成测试用例；

报告生成模块，用于根据所述测试用例及所述服务地址调用服务器，得到测试结果报告。

可选的，在本发明一实施例中，所述模板生成模块包括：预设单元，用于预设数据字典中数据项类型及代码取值，以及预设报文接口文件中数据项及对应的数据项层级；模板生成单元，用于解析所述报文接口文件的接口字段，根据所述数据项类型、代码取值、数据项及对应的数据项层级，遍历接口字段并生成所述测试用例模板。

可选的，在本发明一实施例中，所述用例生成模块包括：数据页单元，用于利用所述测试用例模板，获取用例数据页信息，其中，所述用例数据页信息包括字段层级及字段基本信息；第一用例生成单元，用于根据所述数据字典、字段层级及字段基本信息，遍历各数据页，并生成各数据页对应的多条数据及多个测试用例，其中，所述数据与所述测试用例一一对应。

可选的，在本发明一实施例中，所述用例生成模块包括：表生成单元，用于根据所述测试用例模板，在数据库中生成测试用例的请求表及结果表；数据转换单元，用于将数据库中已有数据转换为测试用例数据，并将所述测试用例数据存入到测试用例的请求表及结果表中；第二用例生成单元，用于将测试用例的请求表及结果表导出到所述测试用例模板中，得到所述测试用例。

本发明实施例还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现以下步骤：

接收报文接口文件及服务地址；

解析所述报文接口文件，生成测试用例模板；

根据所述测试用例模板，生成测试用例；

根据所述测试用例及所述服务地址调用服务器，得到测试结果报告。

本发明实施例还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现以下步骤：

接收报文接口文件及服务地址；

解析所述报文接口文件，生成测试用例模板；

根据所述测试用例模板，生成测试用例；

根据所述测试用例及所述服务地址调用服务器，得到测试结果报告。

本发明可以实现业务人员能够直观高效地编写服务测试用例，能够根据接口的数据项定义，自动生成随机测试用例，作为业务编写的测试用例的补充，提高测试覆盖度，使得测试能够达到高效率、高质量、人机交互友好、减轻业务人员编写测试用例工作量的效果。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为传统测试的金字塔结构示意图；

图2为本发明实施例一种服务的自动化测试方法的流程图；

图3为本发明实施例中自动化测试整体流程图；

图4为本发明实施例中测试系统时序图；

图5为本发明实施例中测试模板的生成流程图；

图6为本发明实施例中基于数据字典的测试用例生成流程图；

图7为本发明实施例中基于已有数据的测试用例生成流程；

图8为本发明实施例中测试用例执行、结果比对及报告生成流程图；

图9为本发明实施例一种服务的自动化测试装置的结构示意图。

具体实施方式

本发明实施例提供一种服务的自动化测试方法及装置。

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

现有服务测试的原理是测试工具模拟以下过程：请求方向服务方发送请求信息,服务器接收并处理请求信息，而后向请求方返回应答。市面上服务测试工具有很多，下面列举几种：1.Postman，一个接口调试工具，主要用于模拟网络请求包，快速创建请求，回放、管理请求，验证接口返回数据的正确性。2.Apache Jmeter，是Apache组织开发的基于Java的压力测试工具，也可用于服务测试。3.HP LoadRunner，也是一款性能测试工具，同样支持服务测试。上述这些工具，都是需要编写测试脚本或者需要直接维护接口测试的报文。显然，现有服务测试工具存在的缺点有：使用偏向技术人员，需要编写测试脚本乃至直接修改测试报文；没有提供生成可读性较好的测试用例的功能；没有提供复杂结构的测试结果比对功能。

现有的服务自动化测试方案，业务人员在编写测试用例时，往往需要直接编辑接口报文，直接面对的是报文标签，还有需要填写数据字典的数据编码，而非数据展示的描述，很不直观；当接口字段的层级较为复杂时，接口报文就会很大，很容易出错；此外，在填写接口信息时还要经常比照数据字典，不仅效率低而且容易遗忘，造成测试用例难以直接复用。因此，如何让业务人员能够高效地编写用例进行测试，而不用关心具体发送的报文内容，以及代码类字段取值，是本发明所要解决的技术问题。

另外，仅靠业务人员编写测试用例，往往会存在测试覆盖不全的问题，如何自动生成测试用例，让接口字段按一定规则变换取值，提高测试用例覆盖度，也是本发明所要解决的问题。还有一些服务，如模型计算类，这些模型往往需要存在黑盒特性，即越少人知道越好。其在前序阶段已有相关的输入和输出数据，并存储在数据库中，如何直接利用这些数据自动生成测试用例，用于服务的测试验证，也是本发明所要解决的问题。

在软件产品的测试上，自动化测试技术的引入，使得测试能够达到高效率、高质量、人机交互友好、减轻业务人员编写测试用例工作量的效果。如果要等到项目完整开发完成后再开始测试并发现缺陷，这样修复缺陷的成本就会比较高，项目的进度也会不确定。因此，如果对测试进行分层，在不同的开发阶段都进行测试，就能很大程度上缓解这些问题。

如图2所示为本发明实施例一种服务的自动化测试方法的流程图，图中所示方法包括：

步骤S1，接收报文接口文件及服务地址；

步骤S2，解析所述报文接口文件，生成测试用例模板；

步骤S3，根据所述测试用例模板，生成测试用例；

步骤S4，根据所述测试用例及所述服务地址调用服务器，得到测试结果报告。

作为本发明的一个实施例，解析所述报文接口文件，生成测试用例模板包括：预设数据字典中数据项类型及代码取值，以及预设报文接口文件中数据项及对应的数据项层级；解析所述报文接口文件的接口字段，根据所述数据项类型、代码取值、数据项及对应的数据项层级，遍历接口字段并生成所述测试用例模板。

在本实施例中，根据所述测试用例模板，生成测试用例包括：利用所述测试用例模板，获取用例数据页信息，其中，所述用例数据页信息包括字段层级及字段基本信息；根据所述数据字典、字段层级及字段基本信息，遍历各数据页，并生成各数据页对应的多条数据及多个测试用例，其中，所述数据与所述测试用例一一对应。

在本实施例中，根据所述测试用例模板，生成测试用例包括：根据所述测试用例模板，在数据库中生成测试用例的请求表及结果表；将数据库中已有数据转换为测试用例数据，并将所述测试用例数据存入到测试用例的请求表及结果表中；将测试用例的请求表及结果表导出到所述测试用例模板中，得到所述测试用例。

在本发明一具体实施例中，本发明的服务自动化测试法，包括：

1.测试用例模板自动生成。根据数据字典(包括数据项定义和数据域定义)以及接口定义文档，生成支持复杂接口层级的测试用例模板，供业务人员使用。

2.基于数据字典的测试用例生成。根据接口数据项的定义，按照一定规则变换取值，自动生成测试用例，作为业务编写测试用例的补充。

3.基于已有数据的测试用例生成。根据数据库中已有的输入输出数据，自动生成测试用例，用于服务验证。

4.测试用例自动执行。自动读取测试用例，按照接口规范组织成报文，向服务方发送请求。测试用例的发起支持界面和命令行，业务人员可以单选个别用例进行测试，实时查看结果；同时也支持命令行发起测试，批量执行测试用例。测试用例支持并发执行，在服务方资源允许的情况下，可以缩短测试时间。

5.结果比对与测试报告生成。支持复杂结果(如列表)的比对并生成测试结果报告，能够让测试人员快速查看测试用例执行情况还有系统结果与预期结果的差异。

在本发明一具体实施例中，从图3可以看出，测试用例可以有两个来源，一个是测试人员在生成的用例模板上进行编写；另一个是自动生成。其中，自动生成测试用例的方式有两种，一种是根据测试用例模板中的数据项定义，自动生成用例数据；另一种是针对包括模型计算类在内的服务，使用已有的数据根据测试用例模板自动生成用例数据。

其中，测试人员将所要测试的报文接口文件提交到系统，系统中包括能执行与本发明方法对应的功能模块。系统反显服务列表，测试人员选择后录入所要测试的服务地址，然后点击开始自动测试。接下来系统的用例模板生成模块解析接口报文后生成用例测试模板，交由用例自动生成模块生成具体的测试用例，然后执行模块根据生成的测试用例调用服务器，最终由结果比对与报告生成模块生成测试结果报告，测试人员在系统中可以查看。完整处理时序如图4所示。

在本发明一具体实施例中，如图5所示，为测试模板的生成流程：首先需要定义数据字典(数据项的类型，是否是代码类、以及代码取值等信息)和接口文档(服务由哪些数据项构成，以及各数据项所属的层级)；然后读取数据字典和接口文档，遍历接口字段进行处理，最终生成一个结构清晰、便于测试人员录入的测试用例模板。

在本发明一具体实施例中，如图6，假设指定了参数要生成N条测试用例。

先是读取测试用例模板，获取用例数据页信息，包括字段所在层级以及字段基本信息；然后遍历处理各数据页，为每个数据页生成N条数据对应N个测试用例；每个数据页的处理过程中，数据编号列依次递增，对应N条测试用例，然后遍历处理该数据页的字段，如果字段为数据字典中的数据项，根据数据项定义随机生成N个数据，如果待处理的字段不是基本数据项，则可能为子结构或者一个列表，该字段的内容依次填入与用例编号相同的数字，用来引用其他数据页相应数据编号的数据。

上述数据项内容的随机生成，是根据字段具体类型进行处理的：对于数值型的字段，在取值范围内，随机生成；文本类型的也是随机生成不超过字段最大长度的文本串；而对于代码类字段，则是随机从代码域内选取。

在本发明一具体实施例中，现实中很多服务有一些存量输入、输出数据，比如：模型训练、测试和验证过程产生了大量的数据，这些数据可以按照测试用例模板中的结构和字段定义，将已有的请求信息和结果信息导出为测试用例，从而减轻测试人员编写测试用例的工作量。

图7显示的是基于已有数据的测试用例生成流程：1.先根据测试用例模板的结构以及字段定义，在数据库中生成测试用例的请求表以及结果表；2.针对数据库中已有的数据做转换处理，存入到测试用例请求和结果表中；3.最后将测试用例请求和结果表的数据导出到测试用例模板中，得到测试用例。

在本发明一具体实施例中，测试用例执行时，先是读取完整的测试用例数据，包括用例页以及其他数据页的内容。为了在服务方资源允许的情况下，缩短用例执行时间，本发明采用多线程并发执行。

如图8，多个线程对用例进行递归组装，添加每个用例所引用的子结构或列表数据，组装成一条完整的用例数据，再转换成接口数据，模拟请求方发送接口数据给服务方并获取结果。服务返回的结果将与测试用例的预期结果数据进行比对，汇总测试结果并写入到测试报告中。

本发明可以使得业务人员能够直观高效地编写服务测试用例；能够根据接口的数据项定义，自动生成随机测试用例，作为业务编写的测试用例的补充，提高测试覆盖度；能够利用已有数据自动生成测试用例，用于模型计算类等服务的测试验证；进行重构时，可验证新旧版本服务的一致性；使得测试能够达到高效率、高质量、人机交互友好、减轻业务人员编写测试用例工作量的效果。

如图9所示为本发明实施例一种服务的自动化测试装置的结构示意图，图中所示装置包括：

接收模块10，用于接收报文接口文件及服务地址；

模板生成模块20，用于解析所述报文接口文件，生成测试用例模板；

用例生成模块30，用于根据所述测试用例模板，生成测试用例；

报告生成模块40，用于根据所述测试用例及所述服务地址调用服务器，得到测试结果报告。

作为本发明的一个实施例，模板生成模块包括：预设单元，用于预设数据字典中数据项类型及代码取值，以及预设报文接口文件中数据项及对应的数据项层级；模板生成单元，用于解析所述报文接口文件的接口字段，根据所述数据项类型、代码取值、数据项及对应的数据项层级，遍历接口字段并生成所述测试用例模板。

在本实施例中，用例生成模块包括：数据页单元，用于利用所述测试用例模板，获取用例数据页信息，其中，所述用例数据页信息包括字段层级及字段基本信息；第一用例生成单元，用于根据所述数据字典、字段层级及字段基本信息，遍历各数据页，并生成各数据页对应的多条数据及多个测试用例，其中，所述数据与所述测试用例一一对应。

在本实施例中，用例生成模块包括：表生成单元，用于根据所述测试用例模板，在数据库中生成测试用例的请求表及结果表；数据转换单元，用于将数据库中已有数据转换为测试用例数据，并将所述测试用例数据存入到测试用例的请求表及结果表中；第二用例生成单元，用于将测试用例的请求表及结果表导出到所述测试用例模板中，得到所述测试用例。

基于与上述一种服务的自动化测试方法相同的申请构思，本发明还提供了上述一种服务的自动化测试装置。由于该一种服务的自动化测试装置解决问题的原理与一种服务的自动化测试方法相似，因此该一种服务的自动化测试装置的实施可以参见一种服务的自动化测试方法的实施，重复之处不再赘述。

本发明可以使得业务人员能够直观高效地编写服务测试用例；能够根据接口的数据项定义，自动生成随机测试用例，作为业务编写的测试用例的补充，提高测试覆盖度；能够利用已有数据自动生成测试用例，用于模型计算类等服务的测试验证；进行重构时，可验证新旧版本服务的一致性；使得测试能够达到高效率、高质量、人机交互友好、减轻业务人员编写测试用例工作量的效果。

本发明实施例还提供一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现以下步骤：

接收报文接口文件及服务地址；

解析所述报文接口文件，生成测试用例模板；

根据所述测试用例模板，生成测试用例；

根据所述测试用例及所述服务地址调用服务器，得到测试结果报告。

本发明实施例还提供一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现以下步骤：

接收报文接口文件及服务地址；

解析所述报文接口文件，生成测试用例模板；

根据所述测试用例模板，生成测试用例；

根据所述测试用例及所述服务地址调用服务器，得到测试结果报告。

基于与上述一种服务的自动化测试方法相同的申请构思，本发明还提供了上述一种计算机设备及一种计算机可读存储介质。由于该一种计算机设备及一种计算机可读存储介质解决问题的原理与一种服务的自动化测试方法相似，因此该一种计算机设备及一种计算机可读存储介质的实施可以参见一种服务的自动化测试方法的实施，重复之处不再赘述。

本发明可以使得业务人员能够直观高效地编写服务测试用例；能够根据接口的数据项定义，自动生成随机测试用例，作为业务编写的测试用例的补充，提高测试覆盖度；能够利用已有数据自动生成测试用例，用于模型计算类等服务的测试验证；进行重构时，可验证新旧版本服务的一致性；使得测试能够达到高效率、高质量、人机交互友好、减轻业务人员编写测试用例工作量的效果。

本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读取存储介质中，比如ROM/RAM、磁碟、光盘等。

以上所述的具体实施例，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施例而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种服务的自动化测试方法，其特征在于，所述方法包括：

接收报文接口文件及服务地址；

解析所述报文接口文件，生成测试用例模板；

根据所述测试用例模板，生成测试用例；

根据所述测试用例及所述服务地址调用服务器，得到测试结果报告。

2.根据权利要求1所述的方法，其特征在于，所述解析所述报文接口文件，生成测试用例模板包括：

预设数据字典中数据项类型及代码取值，以及预设报文接口文件中数据项及对应的数据项层级；

解析所述报文接口文件的接口字段，根据所述数据项类型、代码取值、数据项及对应的数据项层级，遍历接口字段并生成所述测试用例模板。

3.根据权利要求2所述的方法，其特征在于，所述根据所述测试用例模板，生成测试用例包括：

利用所述测试用例模板，获取用例数据页信息，其中，所述用例数据页信息包括字段层级及字段基本信息；

根据所述数据字典、字段层级及字段基本信息，遍历各数据页，并生成各数据页对应的多条数据及多个测试用例，其中，所述数据与所述测试用例一一对应。

4.根据权利要求2所述的方法，其特征在于，所述根据所述测试用例模板，生成测试用例包括：

根据所述测试用例模板，在数据库中生成测试用例的请求表及结果表；

将数据库中已有数据转换为测试用例数据，并将所述测试用例数据存入到测试用例的请求表及结果表中；

将测试用例的请求表及结果表导出到所述测试用例模板中，得到所述测试用例。

5.一种服务的自动化测试装置，其特征在于，所述装置包括：

接收模块，用于接收报文接口文件及服务地址；

模板生成模块，用于解析所述报文接口文件，生成测试用例模板；

用例生成模块，用于根据所述测试用例模板，生成测试用例；

报告生成模块，用于根据所述测试用例及所述服务地址调用服务器，得到测试结果报告。

6.根据权利要求5所述的装置，其特征在于，所述模板生成模块包括：

预设单元，用于预设数据字典中数据项类型及代码取值，以及预设报文接口文件中数据项及对应的数据项层级；

模板生成单元，用于解析所述报文接口文件的接口字段，根据所述数据项类型、代码取值、数据项及对应的数据项层级，遍历接口字段并生成所述测试用例模板。

7.根据权利要求6所述的装置，其特征在于，所述用例生成模块包括：

数据页单元，用于利用所述测试用例模板，获取用例数据页信息，其中，所述用例数据页信息包括字段层级及字段基本信息；

第一用例生成单元，用于根据所述数据字典、字段层级及字段基本信息，遍历各数据页，并生成各数据页对应的多条数据及多个测试用例，其中，所述数据与所述测试用例一一对应。

8.根据权利要求6所述的装置，其特征在于，所述用例生成模块包括：

表生成单元，用于根据所述测试用例模板，在数据库中生成测试用例的请求表及结果表；

数据转换单元，用于将数据库中已有数据转换为测试用例数据，并将所述测试用例数据存入到测试用例的请求表及结果表中；

第二用例生成单元，用于将测试用例的请求表及结果表导出到所述测试用例模板中，得到所述测试用例。

9.一种计算机设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现以下步骤：

接收报文接口文件及服务地址；

解析所述报文接口文件，生成测试用例模板；

根据所述测试用例模板，生成测试用例；

根据所述测试用例及所述服务地址调用服务器，得到测试结果报告。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现以下步骤：

接收报文接口文件及服务地址；

解析所述报文接口文件，生成测试用例模板；

根据所述测试用例模板，生成测试用例；

根据所述测试用例及所述服务地址调用服务器，得到测试结果报告。

Images