CN107451056A - 监听接口测试结果的方法及装置 - Google Patents

Abstract

本发明公开了一种监听接口测试结果的方法及装置。该方法包括：在接口测试集执行过程中，获取所述接口测试集的执行信息，并获取所述接口测试集中每个测试用例的执行信息及每个测试用例的执行日志；在所述接口测试集执行完毕后，根据所述接口测试集的执行信息和所述每个测试用例的执行信息，汇总所述接口测试集的执行结果；存储所述接口测试集的执行结果和所述每个测试用例的执行日志。本发明实现了对测试集的执行结果和测试用例的执行日志的存储，便于开发人员查看测试集的执行结果，在测试集执行失败时可以查看测试用例的执行日志，从而快速发现问题的所在。

Description

监听接口测试结果的方法及装置

技术领域

本发明实施例涉及接口测试技术，尤其涉及一种监听接口测试结果的方法及装置。

背景技术

接口自动化测试每日构建(daily build)是持续构建体系中较为重要一个环节，实施每日构建能够及时发现被测服务主要业务流程接口是否存在问题，并通过实时测试反馈(如邮件通知自动化测试结果报告)及时暴漏出存在问题的接口，以便将问题及时反馈给开发处理解决，保障被测服务的质量。

现有技术中，测试结果报告中只能反馈测试用例通过数、失败数等基本的测试结果信息，使得测试人员或者开发人员不能了解到失败的问题所在，而且测试结果报告只能查看当时的测试结果，无法查看历史测试结果数据。

发明内容

有鉴于此，本发明实施例提供一种监听接口测试结果的方法及装置，以便于开发人员查看测试结果进而快速发现问题。

第一方面，本发明实施例提供了一种监听接口测试结果的方法，所述方法包括：

在接口测试集执行过程中，获取所述接口测试集的执行信息，并获取所述接口测试集中每个测试用例的执行信息及每个测试用例的执行日志；

在所述接口测试集执行完毕后，根据所述接口测试集的执行信息和所述每个测试用例的执行信息，汇总所述接口测试集的执行结果；

存储所述接口测试集的执行结果和所述每个测试用例的执行日志。

第二方面，本发明实施例还提供了一种监听接口测试结果的装置，所述装置包括：

信息获取模块，用于在接口测试集执行过程中，获取所述接口测试集的执行信息，并获取所述接口测试集中每个测试用例的执行信息及每个测试用例的执行日志；

结果汇总模块，用于在所述接口测试集执行完毕后，根据所述接口测试集的执行信息和所述每个测试用例的执行信息，汇总所述接口测试集的执行结果；

结果存储模块，用于存储所述接口测试集的执行结果和所述每个测试用例的执行日志。

本发明实施例的技术方案，通过在接口测试集执行过程中，获取所述接口测试集的执行信息，获取所述接口测试集中每个测试用例的执行信息及每个测试用例的执行日志；在所述接口测试集执行完毕后，根据所述接口测试集的执行信息和所述每个测试用例的执行信息，汇总所述接口测试集的执行结果，存储所述测试集的执行结果和每个测试用例的执行日志，实现了对测试集的执行结果和测试用例的执行日志的存储，便于开发人员查看测试集的执行结果，在测试集执行失败时可以查看测试用例的执行日志，从而快速发现问题的所在。

附图说明

图1是本发明实施例一提供的一种监听接口测试结果的方法的流程；

图2是本发明实施例二提供的一种监听接口测试结果的方法的流程图；

图3是本发明实施例提供的监听接口测试结果的方法中的用户界面中显示的接口测试集的执行信息的示意图；

图4是本发明实施例提供的监听接口测试结果的方法中的用户界面中显示的一个接口测试集中所有测试用例的汇总信息；

图5是本发明实施例提供的监听接口测试结果的方法中的一个执行失败的测试用例的执行详情示意图；

图6是本发明实施例三提供的一种监听接口测试结果的装置结构示意图。

具体实施方式

下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部内容。

实施例一

图1是本发明实施例一提供的一种监听接口测试结果的方法的流程图，本实施例可适用于监听接口测试结果的情况，该方法可以由监听接口测试结果的装置来执行，该装置可以由软件和/或硬件来实现，一般可集成在部署了管理平台的计算机或服务器中，该方法具体包括如下步骤：

步骤110，在接口测试集执行过程中，获取所述接口测试集的执行信息，并获取所述接口测试集中每个测试用例的执行信息及每个测试用例的执行日志。

其中，所述接口测试集的执行信息可以包括接口测试集的开始时间、结束时间及执行耗时。所述每个测试用例的执行信息包括每个测试用例的开始时间、结束时间、执行耗时及测试结果，其中，测试结果包括通过、失败或跳过。所述接口包括HTTP(HyperTextTransfer Protocol，超文本传输协议)接口或Dubbo接口，还可以包括基于其他协议的接口。其中，Dubbo是阿里巴巴公司开源的一个高性能优秀的服务框架，使得应用可通过高性能的RPC实现服务的输出和输入功能，可以和Spring框架无缝集成。

在接口测试集开始执行时，首先获取接口测试集执行的开始时间，并在接口测试集执行完毕时获取接口测试集的结束时间，从而获取到接口测试集的执行信息。在接口测试集中的测试用例开始执行时，获取该测试用例执行的开始时间，并在执行完毕时获取测试用例的结束时间，及测试用例的测试结果，同时获取该测试用例的执行日志，针对每一个测试用例均获取上述信息。在获取到接口测试集的执行信息和每个测试用例的执行信息及执行日志后，可以将接口测试集的执行信息和每个测试用例的执行信息及执行日志通过管理平台接口上报至管理平台，由管理平台存储这些信息。其中，管理平台接口是基于HTTP协议的接口。

其中，所述执行日志优选包括接口请求应答关键日志和/或执行异常的异常信息。执行异常包括测试用例执行失败或者跳过。

步骤120，在所述接口测试集执行完毕后，根据所述接口测试集的执行信息和所述每个测试用例的执行信息，汇总所述接口测试集的执行结果。

在整个接口测试集执行完毕后，对接口测试集的执行信息和每个测试用例的执行信息进行汇总，包括根据每个测试用例的执行信息确定执行通过的测试用例的数量、执行失败的测试用例的数量以及跳过的测试用例的数量，还可以包括测试执行环境信息，再结合接口测试集的执行信息和每个测试用例的执行信息，汇总得到所述接口测试集的执行结果。执行结果即包括上述所有信息，是将这些信息按照预设规则进行汇总得到相应的表格数据。汇总得到接口测试集的执行结果后，还可以将该执行结果通过管理平台接口上报至管理平台进行存储。

在接口测试集执行完毕后，汇总结果时，还可以根据该接口测试集中每个测试用例的测试结果，判定是否存在测试结果为失败的测试用例，如果存在则将接口测试集的结果标记为失败，如果不存在则将接口测试集的结构标记为通过。

步骤130，存储所述接口测试集的执行结果和所述每个测试用例的执行日志。

可以将所述测试集的执行结果和每个测试用例的执行日志存储到数据库中，便于长久保存，从而便于查看相应的数据，对于执行失败的测试集，可以查看执行失败的具体测试用例及对于的执行日志，便于快速发现该测试用例的问题，进而进行修改。

本实施例的技术方案，通过在接口测试集执行过程中，获取所述接口测试集的执行信息，获取所述接口测试集中每个测试用例的执行信息及每个测试用例的执行日志；在所述接口测试集执行完毕后，根据所述接口测试集的执行信息和所述每个测试用例的执行信息，汇总所述接口测试集的执行结果，存储所述测试集的执行结果和每个测试用例的执行日志，实现了对测试集的执行结果和测试用例的执行日志的存储，便于开发人员查看测试集的执行结果，在测试集执行失败时可以查看测试用例的执行日志，从而快速发现问题的所在。

在上述技术方案的基础上，在接口测试集执行过程中，获取所述接口测试集的执行信息包括：

在所述接口测试集开始执行时触发所述测试集监听器开始监听，并记录所述接口测试集的开始时间；

在所述接口测试集执行完毕后，通过所述测试集监听器记录所述接口测试集的结束时间；

根据所述接口测试集的开始时间和结束时间，计算所述接口测试集的执行耗时。

预先设置测试集监听器，用来监听接口测试集的开始时间和结束时间。在接口测试集开始执行时，触发测试集监听器开始监听，并记录接口测试集的开始时间，在接口测试集执行完毕时，通过测试集监听器记录所述接口测试集的结束时间，并计算接口测试集的执行耗时，从而得到了接口测试集的执行信息。

在上述技术方案的基础上，在接口测试集执行过程中，获取所述接口测试集中每个测试用例的执行信息，包括：

在接口测试集执行过程中，通过测试用例监听器监听每个测试用例的开始时间、结束时间及测试结果；

根据每个测试用例的开始时间和结束时间，计算每个测试用例的执行耗时。

其中，测试结果包括通过、失败或跳过。

预先设置测试用例监听器，用于监听接口测试集的执行过程中每个测试用例的执行信息。在接口测试集开始执行时触发测试用例监听器开始监听，在接口测试集的执行过程中，通过测试用例监听器监听每个测试用例的开始时间、结束时间及测试结果，并计算每个测试用例的执行耗时，从而得到了接口测试集中每个测试用例的执行信息。

实施例二

图2是本发明实施例二提供的一种监听接口测试结果的方法的流程图，本实施例在上述实施例的基础上进行了优化，本实施例在上述实施例的基础上还包括供用户查看测试结果的用户界面。该方法具体包括如下步骤：

步骤210，在接口测试集执行过程中，获取所述接口测试集的执行信息，并获取所述接口测试集中每个测试用例的执行信息及每个测试用例的执行日志。

步骤220，在所述接口测试集执行完毕后，根据所述接口测试集的执行信息和所述每个测试用例的执行信息，汇总所述接口测试集的执行结果。

步骤230，存储所述接口测试集的执行结果和所述每个测试用例的执行日志。

步骤240，根据用户的指令，通过用户界面显示所述接口测试集的执行结果或指定测试用例的执行日志。

提供用户界面以供用户查看接口测试集的执行结果及每个测试用例的执行日志。用户界面首先可以显示接口测试集的执行结果汇总情况，用户可以输入相应的指令查看接口测试集的执行结果中的接口测试集的执行信息(如图3所示)，测试用例的执行信息(如图4所示)，或者是测试用例的执行日志(如图5所示)。图3是本发明实施例提供的监听接口测试结果的方法中的用户界面中显示的接口测试集的执行信息的示意图，如图3所示，接口测试集的执行信息包括接口测试集的执行状态(如通过或失败)、测试用例的总数、通过的测试用例的数量、通过率、失败的测试用例的数量、失败率、跳过的测试用例的数量(即图3中的跳过未执行用例数)、跳过率、接口测试集的开始时间、结束时间和执行耗时。图4是本发明实施例提供的监听接口测试结果的方法中的用户界面中显示的一个接口测试集中所有测试用例的汇总信息，如图4所示，一个接口测试集中所有测试用例的汇总信息包括测试用例所属项目、项目描述、测试结果(即图4中的状态)、类名、方法名、方法描述以及耗时等信息，在图4所示的显示界面中选中某个测试用例，点击查看详情，可以查看该测试用例的详细信息，包括该测试用例的执行信息及执行日志。图5是本发明实施例提供的监听接口测试结果的方法中的一个执行失败的测试用例的执行详情示意图，如图5所示，测试用例的执行详情包括测试用例的执行信息及执行日志，执行信息包括开始时间、结束时间、执行耗时及执行结果(即图5中的状态)，执行日志包括接口请求应答关键日志和执行异常的异常信息。

需要注意的是，由于存储了接口测试集的执行结果和每个测试用例的执行日志，从而用户可以查看当前的接口测试集的执行结果或其中指定测试用例的执行日志，还可以查看历史的接口测试集的执行结果或其中指定测试用例的执行日志。

本实施例的技术方案，在上述实施例的基础上，通过根据用户的指令，通过用户界面显示所述接口测试集的执行结果或指定测试用例的执行日志，使得用户可以查看接口测试集的具体执行信息，从而对于执行失败的测试集可以快速发现其中失败的测试用例，并通过显示执行日志使得用户快速了解到问题的所在。

实施例三

图6是本发明实施例三提供的一种监听接口测试结果的装置结构示意图，如图6所示，本实施例所述的监听接口测试结果的装置包括：信息获取模块310、结果汇总模块320和结果存储模块330。

其中，信息获取模块310，用于在接口测试集执行过程中，获取所述接口测试集的执行信息，并获取所述接口测试集中每个测试用例的执行信息及每个测试用例的执行日志；

结果汇总模块320，用于在所述接口测试集执行完毕后，根据所述接口测试集的执行信息和所述每个测试用例的执行信息，汇总所述接口测试集的执行结果；

结果存储模块330，用于存储所述接口测试集的执行结果和所述每个测试用例的执行日志。

可选的，所述执行日志包括接口请求应答关键日志和/或执行异常的异常信息。

可选的，还包括：

结果显示模块，用于根据用户的指令，通过用户界面显示所述接口测试集的执行结果或指定测试用例的执行日志。

可选的，所述信息获取模块包括：

测试集开始时间监听单元，用于在所述接口测试集开始执行时触发所述测试集监听器开始监听，并记录所述接口测试集的开始时间；

测试集接收时间监听单元，用于在所述接口测试集执行完毕后，通过所述测试集监听器记录所述接口测试集的结束时间；

测试集执行耗时计算单元，用于根据所述接口测试集的开始时间和结束时间，计算所述接口测试集的执行耗时。

可选的，所述信息获取模块包括：

用例信息监听单元，用于在接口测试集执行过程中，通过测试用例监听器监听每个测试用例的开始时间、结束时间及测试结果；

用例耗时计算单元，用于根据每个测试用例的开始时间和结束时间，计算每个测试用例的执行耗时。

上述监听接口测试结果的装置可执行本发明任意实施例所提供的监听接口测试结果的方法，具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节，可参见本发明任意实施例提供的监听接口测试结果的方法。

注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种监听接口测试结果的方法，其特征在于，所述方法包括：

在接口测试集执行过程中，获取所述接口测试集的执行信息，并获取所述接口测试集中每个测试用例的执行信息及每个测试用例的执行日志；

在所述接口测试集执行完毕后，根据所述接口测试集的执行信息和所述每个测试用例的执行信息，汇总所述接口测试集的执行结果；

存储所述接口测试集的执行结果和所述每个测试用例的执行日志。

2.根据权利要求1所述的方法，其特征在于，所述执行日志包括接口请求应答关键日志和/或执行异常的异常信息。

3.根据权利要求1所述的方法，其特征在于，还包括：

根据用户的指令，通过用户界面显示所述接口测试集的执行结果或指定测试用例的执行日志。

4.根据权利要求1所述的方法，其特征在于，在接口测试集执行过程中，获取所述接口测试集的执行信息包括：

在所述接口测试集开始执行时触发所述测试集监听器开始监听，并记录所述接口测试集的开始时间；

在所述接口测试集执行完毕后，通过所述测试集监听器记录所述接口测试集的结束时间；

根据所述接口测试集的开始时间和结束时间，计算所述接口测试集的执行耗时。

5.根据权利要求1所述的方法，其特征在于，在接口测试集执行过程中，获取所述接口测试集中每个测试用例的执行信息，包括：

在接口测试集执行过程中，通过测试用例监听器监听每个测试用例的开始时间、结束时间及测试结果；

根据每个测试用例的开始时间和结束时间，计算每个测试用例的执行耗时。

6.一种监听接口测试结果的装置，其特征在于，所述装置包括：

信息获取模块，用于在接口测试集执行过程中，获取所述接口测试集的执行信息，并获取所述接口测试集中每个测试用例的执行信息及每个测试用例的执行日志；

结果汇总模块，用于在所述接口测试集执行完毕后，根据所述接口测试集的执行信息和所述每个测试用例的执行信息，汇总所述接口测试集的执行结果；

结果存储模块，用于存储所述接口测试集的执行结果和所述每个测试用例的执行日志。

7.根据权利要求6所述的装置，其特征在于，所述执行日志包括接口请求应答关键日志和/或执行异常的异常信息。

8.根据权利要求6所述的装置，其特征在于，还包括：

结果显示模块，用于根据用户的指令，通过用户界面显示所述接口测试集的执行结果或指定测试用例的执行日志。

9.根据权利要求6所述的装置，其特征在于，所述信息获取模块包括：

测试集开始时间监听单元，用于在所述接口测试集开始执行时触发所述测试集监听器开始监听，并记录所述接口测试集的开始时间；

测试集接收时间监听单元，用于在所述接口测试集执行完毕后，通过所述测试集监听器记录所述接口测试集的结束时间；

测试集执行耗时计算单元，用于根据所述接口测试集的开始时间和结束时间，计算所述接口测试集的执行耗时。

10.根据权利要求6所述的装置，其特征在于，所述信息获取模块包括：

用例信息监听单元，用于在接口测试集执行过程中，通过测试用例监听器监听每个测试用例的开始时间、结束时间及测试结果；

用例耗时计算单元，用于根据每个测试用例的开始时间和结束时间，计算每个测试用例的执行耗时。