CN114443472A

CN114443472A - 一种接口容错性测试方法、装置及设备

Info

Publication number: CN114443472A
Application number: CN202111627254.2A
Authority: CN
Inventors: 凌国辉; 车群娣; 李菲
Original assignee: Tianyi Cloud Technology Co Ltd
Current assignee: Tianyi Cloud Technology Co Ltd
Priority date: 2021-12-28
Filing date: 2021-12-28
Publication date: 2022-05-06

Abstract

本申请提供一种接口容错性测试方法、装置及设备，该方法包括：获取待测试接口的接口描述文档，接口描述文档用于描述接口传输的业务数据的类型及各类型的正常业务数据的规范定义；基于接口描述文档及测试用例的标准逻辑，生成待测试接口对应的测试用例；通过执行测试用例，从数据库中获取测试业务数据并与对应类型的正常业务数据的规范进行比对，确定接口预期测试结果，并获取待测试接口对应的接口反馈结果，与接口预期测试结果进行比对，确定待测试接口是否符合要求；基于测试用例对从接口采集的测试业务数据进行测试，利用上述方法，实现了自动的接口容错性测试。

Description

一种接口容错性测试方法、装置及设备

技术领域

本申请涉及软件测试技术领域，尤其涉及一种接口容错性测试方法、装置及设备。

背景技术

接口的容错能力，是指针对无效的或错误的输入参数，接口是否能够正常返回结果，并给出有意义的错误消息，以帮助调用方定位问题。

目前接口容错性测试需要测试人员针对每个被测接口单独写测试用例及测试代码，工作量大且繁琐，耗时长，测试时间紧迫时甚至来不及做接口容错性测试，导致上线故障。

发明内容

本申请提供了一种接口容错性测试方法，用于解决目前接口容错性测试需要测试人员针对每个被测接口单独写测试用例及测试代码，工作量大且繁琐，耗时长的问题。

第一方面，本申请提供一种接口容错性测试方法，该方法包括：

获取待测试接口的接口描述文档，所述接口描述文档用于描述接口传输的业务数据的类型及各类型的正常业务数据的规范定义；

基于所述接口描述文档及测试用例的标准逻辑，生成所述待测试接口对应的测试用例；

通过执行所述测试用例，从数据库中获取测试业务数据并与对应类型的正常业务数据的规范进行比对，确定接口预期测试结果，并将所述测试业务数据作为请求数据发送到待测试接口获取对应的接口反馈结果，将所述接口反馈结果与所述接口预期测试结果进行比对，确定所述待测试接口是否符合要求。

一种可选的实施方式为，所述各类型的正常业务数据的规范定义包括如下至少一项指标的规范定义：

必填字段填充；

数据类型；

长度范围；

取值范围；

字段取空或非空。

一种可选的实施方式为，将所述测试业务数据与对应类型的正常业务数据的规范进行比对，包括：

根据所述测试业务数据的类型，从各类型的正常业务数据的规范定义中解析出确定对应类型的正常业务数据的规范；

将所述测试业务数据中的各项指标分别与对应类型的正常业务数据中的各项指标的规范进行比对。

一种可选的实施方式为，所述接口描述文档还用于描述不同的接口预期测试结果及对应的结果代码，所述结果代码包括错误码及对应的提示信息；

所述测试用例还用于在完成比对后输出对应的接口预期测试结果，并确定接口预期测试结果对应的结果代码包括错误码时，输出所述错误码对应的提示信息。

一种可选的实施方式为，所述接口预期测试结果包括以下至少一项：

所述测试业务数据中必填字段填充或未填充；

所述测试业务数据的类型正确或错误；

所述测试业务数据的长度范围符合或不符合对应的规范长度；

所述测试业务数据的取值范围符合或不符合对应规范取值范围；

所述测试业务数据的取空或非空。

一种可选的实施方式为，所述数据库中包含基于所述待测试接口的接口描述文档随机生成的不同类型的非正常测试业务数据。

一种可选的实施方式为，所述测试用例的标准逻辑包括：

从所述接口描述文档中获取各类型的正常业务数据的规范定义，并从所述数据库中获取测试业务数据；

将所述测试业务数据与对应类型的正常业务数据的规范进行比对，确定接口预期测试结果；

将所述测试业务数据作为请求数据输入待测试接口，获取待测试接口对所述测试业务数据的接口反馈结果；

将所述接口预期测试结果与接口反馈结果进行比对，确定所述待测试接口是否符合要求。

第二方面，本申请提供一种接口容错性测试装置，该装置包括：

描述文档获取模块，用于获取待测试接口的接口描述文档，所述接口描述文档用于描述接口传输的业务数据的类型及各类型的正常业务数据的规范定义；

测试用例生成模块，用于基于所述接口文档及测试用例的标准逻辑，生成所述待测试接口对应的测试用例；

接口测试模块，用于通过执行所述测试用例，从数据库中获取测试业务数据并与对应类型的正常业务数据的规范进行比对，确定接口预期测试结果，并将所述测试业务数据作为请求数据发送到待测试接口获取对应的接口反馈结果，将所述接口反馈结果与所述接口预期测试结果进行比对，确定所述待测试接口是否符合要求。

第三方面，本申请提供一种接口容错性测试设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现以下步骤：

第四方面，本申请提供一种计算机可读存储介质，其上存储有计算机程序指令，该计算机程序指令被处理器执行时实现以下步骤：

利用上述方法，无需人工参与便可获取到容错性测试结果，能够节省人力，提高测试效率，缩短测试周期，节约企业成本，解决了目前接口容错性测试需要测试人员针对每个被测接口单独写测试用例及测试代码，工作量大且繁琐，耗费时间长，测试时间紧迫时甚至来不及做接口容错性测试，导致上线故障的问题。

附图说明

为了更清楚地说明本申请实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简要介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域的普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本申请实施例提供的一种接口容错性测试方法的流程图；

图2为本申请实施例提供的一种测试流程的示意图；

图3为本申请实施例提供的一种接口容错性测试装置的示意图；

图4为本申请实施例提供的一种接口容错性测试设备的示意图。

具体实施方式

以下，对本申请实施例中的部分用语进行解释说明，以便于本领域技术人员理解。

接口容错性/容错能力，是指针对无效的或错误的输入参数，接口是否能够正常返回结果，并给出有意义的错误消息，以帮助调用方定位问题。

测试用例，是指为某个特殊目标而编制的一组测试输入、执行条件以及预期结果，以便测试某个程序路径或核实是否满足某个特定需求。

为了使本发明的目的、技术方案和优点更加清楚，下面将结合附图对本发明作进一步地详细描述，显然，所描述的实施例仅是本申请一部份实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本申请保护的范围。

本申请实施例描述的应用场景是为了更加清楚的说明本申请实施例的技术方案，并不构成对于本申请实施例提供的技术方案的限定，本领域普通技术人员可知，随着新应用场景的出现，本申请实施例提供的技术方案对于类似的技术问题，同样适用。其中，在本申请的描述中，除非另有说明，“多个”的含义是两个或两个以上。

接口测试是测试系统组件间接口的一种测试，主要用于检测外部系统与系统之间以及内部各个子系统之间的交互点。测试的重点是要检查数据的交换，传递和控制管理过程，以及系统间的相互逻辑依赖关系等。

通过接口测试可以有效发现接口存在的问题，并进行及时的处理，然而，目前接口容错性测试需要测试人员针对每个被测接口单独写测试用例及测试代码，工作量大且繁琐，耗时长，测试时间紧迫时甚至来不及做接口容错性测试，导致上线故障。

为解决上述问题，本申请实施例提供一种接口容错性测试方法，主要应用于后端接口的测试，实现的全自动的接口容错性测试，减小了人力负担并且提高了测试的效率。

实施例1

如图1所示，本申请实施例提供一种接口容错性测试方法，包括：

步骤101，获取待测试接口的接口描述文档，所述接口描述文档用于描述接口传输的业务数据的类型及各类型的正常业务数据的规范定义；

本申请实施例提到的接口是指软件接口，例如http接口、https接口等。

上述接口的描述文档为开发人员预先编辑的，针对于所有待测试接口通用的，记录有待测试接口需要测试的所有数据的描述文档。

上述接口的描述文档中包含请求接口的服务名，方法名；

上述请求接口的服务名用于描述需要进行测试的服务项目的名称，例如需要对服务项目1进行测试，那么服务项目1的名称就是请求接口的服务名。

上述请求接口的方法为实现对应接口功能的方法，实施中为实现接口功能的一段函数。

在一些实施例中，上述接口描述文档还规定了与各类请求接口的服务名以及各类方法名相对应的业务数据。

例如，接口描述文档中规定了与服务1和方法1对应的业务数据为对应于数据类型1，长度范围1，取值范围1以及必填字段1的业务数据。

作为一种可选的实施方式，所述各类型的正常业务数据的规范定义包括如下至少一项指标的规范定义：

必填字段填充；

数据类型；

长度范围；

取值范围；

字段取空或非空。

上述数据类型包括整型int、浮点型float/double、字符型char等多种类型。

作为一种可选的实施方式，所述接口描述文档还用于描述不同的接口预期测试结果及对应的结果代码，所述结果代码包括错误码及对应的提示信息。

上述错误码是指接口测试的响应状态码，如：200表示正确返回结果、300表示发生了重定向，404表示客户端出现错误，可能是路径错误等，500表示服务器出现错误。

上述提示信息是指不同的接口预期测试结果对应的提示，例如，如果预期测试结果为数据长度不符合要求，对应的提示信息为数据长度错误。

步骤102，基于所述接口描述文档及测试用例的标准逻辑，生成所述待测试接口对应的测试用例；

作为一种可选的实施方式，上述测试用例的标准逻辑包括：

在一些实施例中，上述步骤102中还在测试平台的数据库中随机生成了不同类型的非正常测试业务数据，用于进行后续的接口测试。

作为一种可选的实施方式，所述数据库中包含基于所述待测试接口的接口描述文档随机生成的不同类型的非正常测试业务数据。

需要说明的是，步骤102中虽然在数据库中生成了各种非正常测试业务数据，并且生成了测试用例，但仅是规定了从哪获取测试业务数据，以及规定了进行接口容错性测试的逻辑，而并未进行实际的接口容错性测试。

步骤103，通过执行所述测试用例，从数据库中获取测试业务数据并与对应类型的正常业务数据的规范进行比对，确定接口预期测试结果，并将所述测试业务数据作为请求数据发送到待测试接口获取对应的接口反馈结果，将所述接口反馈结果与所述接口预期测试结果进行比对，确定所述待测试接口是否符合要求；

本申请实施例中，在从数据库中获取测试业务数据后，利用接口管理平台从测试业务数据中提取出对应的各项指标，即测试业务数据的数据类型、长度、取值以及必填字段内容等信息。

作为一种可选的实施方式，将所述测试业务数据与对应类型的正常业务数据的规范进行比对，包括：

实施中，在测试用例生成后，执行该测试用例发起接口容错性测试，从数据库中随机抽取测试业务数据，根据抽取的测试业务数据的类型，确定该测试业务数据对应的规范及标准值，将测试业务数据的各项指标与规范中的各项指标的标准进行比对，例如将测试业务数据的长度与标准长度进行比对，确定测试业务数据的长度是否符合标准，进行比对后生成对应的预期测试结果；

作为一种可选的实施方式，上述接口预期测试结果包括以下至少一项：

所述测试业务数据中必填字段填充或未填充；

所述测试业务数据的类型正确或错误；

所述测试业务数据的取空或非空。

本申请实施例中，针对以上任意一种预期测试结果，测试用例中均规定的其对应的错误码以及提示信息。

作为一种可选的实施方式，所述测试用例还用于在完成比对后输出对应的接口预期测试结果，并确定接口预期测试结果对应的结果代码包括错误码时，输出所述错误码对应的提示信息。

本申请实施例中，如果接口的反馈结果与接口预期测试结果不符，则确定接口的容错性不符合要求，该接口通过测试可投入使用。

如果接口的反馈结果与接口预期测试结果不符，则确定接口的容错性不符合要求，则该接口未通过测试，需要进行后续调整。

本申请实施例中，在接口容错性测试过程，如果出现测试平台报错等异常情况时，向测试人员发出提醒，以使测试人员跟进处理。

作为一种可选的实施方式，上述接口容错性测试方法可以通过CICD流水线实现。

本申请实施例中，接口容错性测试的步骤大体分为以下三部分，如图2所示，分别为：

生成测试用例，根据待测试接口的描述文档信息，以及预先写好的测试用例通用的标准逻辑，生成测试用例；

执行测试用例，基于生成的测试用例，从数据库中获取测试业务数据，并利用测试业务数据进行接口测试；

生成测试结果，根据接口测试最终的比对结果，生成待测试接口的测试报告。

实施例2

基于相同的公开构思，本申请实施例还提供一种接口容错性测试装置，由于该装置即是本申请实施例中的方法中的装置，并且该装置解决问题的原理与该方法相似，因此该装置的实施可以参见方法的实施，重复之处不再赘述。

如图3所示，本申请实施例提供一种接口容错性测试装置，该装置包括：

描述文档获取模块301，用于获取待测试接口的接口描述文档，所述接口描述文档用于描述接口传输的业务数据的类型及各类型的正常业务数据的规范定义；

测试用例生成模块302，用于基于所述接口文档及测试用例的标准逻辑，生成所述待测试接口对应的测试用例；

接口测试模块303，用于通过执行所述测试用例，从数据库中获取测试业务数据并与对应类型的正常业务数据的规范进行比对，确定接口预期测试结果，并将所述测试业务数据作为请求数据发送到待测试接口获取对应的接口反馈结果，将所述接口反馈结果与所述接口预期测试结果进行比对，确定所述待测试接口是否符合要求。

可选的，所述各类型的正常业务数据的规范定义包括如下至少一项指标的规范定义：

必填字段填充；

数据类型；

长度范围；

取值范围；

字段取空或非空。

可选的，上述接口测试模块303用于将所述测试业务数据与对应类型的正常业务数据的规范进行比对，包括：

可选的，所述接口描述文档还用于描述不同的接口预期测试结果及对应的结果代码，所述结果代码包括错误码及对应的提示信息；

可选的，所述接口预期测试结果包括以下至少一项：

所述测试业务数据中必填字段填充或未填充；

所述测试业务数据的类型正确或错误；

所述测试业务数据的取空或非空。

可选的，所述数据库中包含基于所述待测试接口的接口描述文档随机生成的不同类型的非正常测试业务数据。

可选的，所述测试用例的标准逻辑包括：

实施例3

基于相同的公开构思，本申请实施例中还提供了一种接口容错性测试设备，由于该设备即是本申请实施例中的方法中的设备，并且该设备解决问题的原理与该方法相似，因此该设备的实施可以参见方法的实施，重复之处不再赘述。

所属技术领域的技术人员能够理解，本申请的各个方面可以实现为系统、方法或程序产品。因此，本申请的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“系统”。

在一些可能的实施方式中，根据本申请的设备可以至少包括至少一个处理器、以及至少一个存储器。其中，存储器存储有程序代码，当程序代码被处理器执行时，使得处理器执行本说明书上述描述的根据本申请各种示例性实施方式的接口容错性测试方法中的步骤。

下面参照图4来描述根据本申请的这种实施方式的设备400。图4显示的设备400仅仅是一个示例，不应对本申请实施例的功能和使用范围带来任何限制。

如图4所示，设备400以通用设备的形式表现。设备400的组件可以包括但不限于：上述至少一个处理器401、上述至少一个存储器402、连接不同系统组件(包括存储器402和处理器401)的总线403，其中，存储器存储有程序代码，当程序代码被处理器执行时，使得处理器执行以下步骤：

总线403表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器、外围总线、处理器或者使用多种总线结构中的任意总线结构的局域总线。

存储器402可以包括易失性存储器形式的可读介质，例如随机存取存储器(RAM)4021和/或高速缓存存储器4022，还可以进一步包括只读存储器(ROM)4023。

存储器402还可以包括具有一组(至少一个)程序模块4024的程序/实用工具4025，这样的程序模块4024包括但不限于：操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。

设备400也可以与一个或多个外部设备404(例如键盘、指向设备等)通信，还可与一个或者多个使得用户能与设备400交互的设备通信，和/或与使得该设备400能与一个或多个其它设备进行通信的任何设备(例如路由器、调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口405进行。并且，设备400还可以通过网络适配器406与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器406通过总线403与用于设备400的其它模块通信。应当理解，尽管图中未示出，可以结合设备400使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理器、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。

必填字段填充；

数据类型；

长度范围；

取值范围；

字段取空或非空。

可选的，上述处理器用于将所述测试业务数据与对应类型的正常业务数据的规范进行比对，包括：

可选的，所述接口预期测试结果包括以下至少一项：

所述测试业务数据中必填字段填充或未填充；

所述测试业务数据的类型正确或错误；

所述测试业务数据的取空或非空。

可选的，所述测试用例的标准逻辑包括：

在一些可能的实施方式中，本申请提供的一种接口容错性测试方法的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当程序产品在计算机设备上运行时，程序代码用于使计算机设备执行本说明书上述描述的根据本申请各种示例性实施方式的一种接口容错性测试方法中的步骤。

程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以是——但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。

本申请的实施方式的用于监控的程序产品可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在设备上运行。然而，本申请的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言的任意组合来编写用于执行本申请操作的程序代码，程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户设备上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户设备上部分在远程设备上执行、或者完全在远程设备或服务端上执行。在涉及远程设备的情形中，远程设备可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户设备，或者，可以连接到外部设备(例如利用因特网服务提供商来通过因特网连接)。

应当注意，尽管在上文详细描述中提及了装置的若干单元或子单元，但是这种划分仅仅是示例性的并非强制性的。实际上，根据本申请的实施方式，上文描述的两个或更多单元的特征和功能可以在一个单元中具体化。反之，上文描述的一个单元的特征和功能可以进一步划分为由多个单元来具体化。

此外，尽管在附图中以特定顺序描述了本申请方法的操作，但是，这并非要求或者暗示必须按照该特定顺序来执行这些操作，或是必须执行全部所示的操作才能实现期望的结果。附加地或备选地，可以省略某些步骤，将多个步骤合并为一个步骤执行，和/或将一个步骤分解为多个步骤执行。

本领域内的技术人员应明白，本申请的实施例可提供为方法、系统、或计算机程序产品。因此，本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。

本申请是参照根据本申请实施例的方法、设备(系统)、和计算机程序产品的流程图和方框图来描述的。应理解可由计算机程序指令实现流程图和方框图中的每一流程和/或方框、以及流程图和方框图中的流程和方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和方框图一个方框或多个方框中指定的功能的装置。

这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和方框图一个方框或多个方框中指定的功能。

这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和方框图一个方框或多个方框中指定的功能的步骤。

尽管已描述了本申请的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本申请范围的所有变更和修改。

显然，本领域的技术人员可以对本申请进行各种改动和变型而不脱离本申请的精神和范围。这样，倘若本申请的这些修改和变型属于本申请权利要求及其等同技术的范围之内，则本申请也意图包含这些改动和变型在内。

Claims

1.一种接口容错性测试方法，其特征在于，该方法包括：

2.根据权利要求1所述的方法，其特征在于，所述各类型的正常业务数据的规范定义包括如下至少一项指标的规范定义：

必填字段填充；

数据类型；

长度范围；

取值范围；

字段取空或非空。

3.根据权利要求2所述的方法，其特征在于，将所述测试业务数据与对应类型的正常业务数据的规范进行比对，包括：

4.根据权利要求1所述的方法，其特征在于，所述接口描述文档还用于描述不同的接口预期测试结果及对应的结果代码，所述结果代码包括错误码及对应的提示信息；

5.根据权利要求1～4任一所述的方法，其特征在于，所述接口预期测试结果包括以下至少一项：

所述测试业务数据中必填字段填充或未填充；

所述测试业务数据的类型正确或错误；

所述测试业务数据的取空或非空。

6.根据权利要求1所述的方法，其特征在于，所述数据库中包含基于所述待测试接口的接口描述文档随机生成的不同类型的非正常测试业务数据。

7.根据权利要求1所述的方法，其特征在于，所述测试用例的标准逻辑包括：

8.一种接口容错性测试装置，其特征在于，该装置包括：

9.一种接口容错性测试设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至7中任一项所述的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序指令，其特征在于，该计算机程序指令被处理器执行时实现权利要求1至7中任一项所述的步骤。