CN109828913A - 一种测试报告生成方法及装置 - Google Patents

Abstract

本申请提供一种测试报告生成方法及装置，涉及通信领域，能够生成更为精准的测试报告。该方法包括：接收用户输入的第一指令，第一指令用于指示生成第二测试报告；响应于第一指令，根据测试脚本和第一测试报告生成第二测试报告。该方法应用在性能测试中。

Description

一种测试报告生成方法及装置

技术领域

本申请涉及测试技术领域，尤其涉及一种测试报告生成方法及装置。

背景技术

目前，在某个系统商用之前，会对该系统进行一系列测试，以查找该系统可能存在的一些缺陷，并修改这些缺陷，从而保证商用后的系统能够正常运行，其运行能够较大程度的满足用户需求。比如，可以使用测试工具Loadrunner对一个网站进行测试，通过分析loadrunner输出的测试报告，测试人员能够了解该网站的一些性能，比如，在用户请求网站的页面内容后，网站向用户反馈页面内容所需的响应时间。

但是，现有技术中，Loadrunner输出的测试报告输出的测试指标比较分散，数量有限，不能较为集中和精细的反映系统性能。

发明内容

本申请提供一种测试报告生成方法及装置，能够生成易于理解的测试报告。

为达到上述目的，本申请采用如下技术方案：

第一方面，本申请提供一种测试报告生成方法，该方法可以包括：

接收用户输入的第一指令，并响应于第一指令，根据测试脚本和第一测试报告生成第二测试报告。其中，第一指令用于指示生成第二测试报告。

如此，将第一测试报告和测试脚本作为生成第二测试报告的输入源，使得生成的第二测试报告可以兼具第一测试报告中的测试指标和测试脚本中的脚本属性，因此，相比于现有的第一测试报告，第二测试报告能够更加全面集中和精细的反映系统性能。

第二方面，本申请提供一种系统，该系统包括：用于接收用户输入的第一指令的装置，以及用于响应第一指令，并根据测试脚本和第一测试报告生成第二测试报告的装置。第一指令用于指示生成第二测试报告。

第三方面，本申请提供一种电子设备，该电子设备包括：处理器、收发器和存储器。其中，存储器用于存储一个或多个程序。该一个或多个程序包括计算机执行指令，当该电子设备运行时，处理器执行该存储器存储的该计算机执行指令，以使该电子设备执行第一方面及其各种可选的实现方式中任意之一的测试报告生成方法。

第四方面，本申请提供一种计算机可读存储介质，计算机可读存储介质中存储有指令，当计算机执行该指令时，该计算机执行上述第一方面及其各种可选的实现方式中任意之一的测试报告生成方法。

第五方面，本申请提供一种包含指令的计算机程序产品，当计算机程序产品在计算机上运行时，使得计算机执行上述第一方面及其各种可选的实现方式中任意之一的测试报告生成方法。

上述第二方面至第五方面的有益效果可参见第一方面的相关描述，这里不再赘述。

附图说明

图1为本申请实施例提供的系统架构的示意图；

图2为本申请实施例提供的测试报告生成方法的流程图；

图3为本申请实施例提供的用于配置的第一界面的示意图一；

图4为本申请实施例提供的用于配置的第一界面的示意图二；

图5为现有技术中的第一测试报告的示意图；

图6为本申请实施例提供的第二测试报告的示意图；

图7为本申请实施例提供的系统的结构示意图一；

图8为本申请实施例提供的电子设备的结构示意图二；

图9为本申请实施例提供的电子设备的结构示意图三。

具体实施方式

首先，对本申请实施例涉及的技术术语进行介绍：

集合点：为了测试系统可以承受的最大压力，即最大并发数，可以将所有用户或预设数目的用户都集合到系统瓶颈的某个时间点上进行操作。从测试脚本的角度讲，这个时间点就是执行测试脚本中某一条或一段语句的时刻。也就是说，在集合点处，多个用户实现并发，向服务器发起请求。

参数化：将一些参数转换为变量的过程。比如，对于用户名、密码这两个参数，不同用户在使用终端进行登录网站等操作时，输入的用户名和密码可以是不同的，因此，需要将这两个参数转化为变量，以允许不同用户输入不同的用户名、密码。

思考时间：用户通过终端执行一系列操作，其中，不同操作之间可能存在时间间隔，进而不同操作对应的请求之间也会存在时间间隔。比如，用户在浏览网页，第一次执行点击链接操作打开网页的时刻为时刻1，该时刻1终端向服务器发起第一次请求，第二次执行点击链接操作打开网页的时刻为时刻2，该时刻2终端向服务器发起第二次请求，则第一次请求与第二次请求之间的时间间隔可称为思考时间，思考时间可表征用户的两次操作之间的时间间隔。

响应时长：系统中，从用户通过终端(比如手机、电脑等)触发请求开始，至终端接收到所请求数据，并呈现页面的时间。比如，手机从第一时刻点击链接触发请求，想要访问某一网页，手机将该请求发给应用服务器，再由应用服务器将该请求发给数据库服务器，数据库服务器将用户请求的页面反馈给终端，终端呈现该页面的时刻为第二时刻。响应时长为第二时刻与第一时刻的时间间隔。

下面结合附图对本申请实施例提供的测试报告生成方法及装置进行详细地描述。

本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。

本申请的说明书以及附图中的术语“第一”和“第二”等是用于区别不同的对象，或者用于区别对同一对象的不同处理，而不是用于描述对象的特定顺序。

此外，本申请的描述中所提到的术语“包括”和“具有”以及它们的任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括其他没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。

需要说明的是，本申请实施例中，“示例性的”或者“例如”等词用于表示作例子、例证或说明。本申请实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言，使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。

在本申请的描述中，除非另有说明，“多个”的含义是指两个或两个以上。

本申请实施例提供的测试报告生成方法可以用于测试某一系统的性能。其中，不同系统可以有不同的系统架构，比如，采用浏览器/服务器模式(Browser/Server，B/S)的系统，采用系统架构1，采用客户端/服务器(Client/Server，C/S)模式的系统，采用系统架构2。当然，本申请实施例提供的技术方案还可以应用在其他需要测试系统性能的场景中，这里不再一一列举。本文主要以在C/S模式中进行性能测试，以及生成性能测试报告为例对本申请实施例的技术方案进行说明，这里统一声明，下文不再赘述。

参见图1，为本申请实施例技术方案所适用的一种示例性的系统架构，该系统为C/S模式的系统。该系统包括终端、应用服务器，以及数据库服务器。

其中，本申请实施例涉及的终端为具有性能测试功能的设备，也就是说，可以通过该终端对应用服务器和数据库服务器的性能进行测试。比如，该终端可以模拟一定数目用户对应用服务器发起请求，从而得到出应用服务器对请求的响应时间，应用服务器的吞吐量等。示例性的，终端可以为笔记本电脑、台式电脑或其它具有类似功能的设备。

应用服务器，用于从终端接收终端通过某个应用(Application，APP)发送的请求，且可以向数据库服务器提交该请求，以使得数据库服务器向终端反馈终端所请求的数据。

数据库服务器，用于提供数据服务，在从应用服务器接收请求后，向终端反馈所请求的数据。

本申请实施例提供一种测试报告生成方法，如图2所示，该方法可以包括S201-S202：

S201、接收用户在第一界面输入的第一指令。

其中，第一指令用于指示生成第二测试报告。

参见图4，为本申请实施例提供的测试报告生成方法中的用户界面(UserInterface，UI)，即第一界面的示意图。在一种示例中，用户通过点击“生成第二测试报告”选项来输入第一指令。

S202、响应于第一指令，根据测试脚本和第一测试报告生成第二测试报告。

其中，第一测试报告为采用现有技术生成的测试报告。即使用测试脚本直接生成的测试报告。参见图5，为现有技术中利用LoadRunner这一负载测试工具生成的第一测试报告。

作为一种可能的实现方式，在S201之前，还可以执行如下步骤：接收用户输入的第二指令，并响应第二指令，提取测试脚本中的相关信息。仍参见图3，在一个示例中，用户选择当前性能测试所使用的测试脚本(比如测试脚本为openexam.c)，并通过点击“提取信息”选项来输入第二指令，在检测到用户的点击操作后，将点击操作的信息传递给处理器，由处理器执行提取测试脚本的相关信息的操作。

其中，测试脚本中的相关信息包括：集合点信息、参数化信息、思考时间信息。集合点信息用于指示当前性能测试是否设置集合点。参数化信息用于指示当前性能测试是否进行参数化操作。思考时间信息用于表征当前性能测试中，不同请求之间的时间间隔。

可选的，测试脚本相关信息还包括事务信息和请求信息。事务信息但不限于事务名称，请求信息包括但不限于请求数量。

基于此，可选的，在用户点击图3所示“提取信息”选项后，还可提取测试脚本中的事务名称。具体的，遍历测试脚本，根据第一预设关键字和第二预设关键字确定待测试的一个或多个事务，并在第一界面上输出一个或多个事务的事务名称。其中，第一预设关键字为lr_start_transaction，第二预设关键字为lr_end_transAction。作为一种可能的实现方式，将关键字“lr_start_transaction”和关键字“lr_end_transaction”成对出现视为一个完整的事务。每检测出一个事务，将检测出的该事务的事务名称存储在事务数组中。示例性的，事务数组的结构为Trans_Array[name,Sstart,Send,Totalrequest]。name为事务名称，Sstart为事务的起始的位置(比如位于测试脚本的第几行)，Send为事务的结束的位置(比如位于测试脚本的第几行)，Totalrequest为事务内包含的请求数量。当遍历完测试脚本后，将事务数组中的各事务名称读取出来，并依次赋值到第一界面中“事务名称”文本框，如此，在第一界面上输出图4所示的4个事务名称，即login、openexam、submitexam、report。

可选的，在用户点击图3所示“提取信息”选项后，还可提取请求数量这一测试脚本的相关信息，具体的，在每一事务内根据第三关键字分别确定每一事务内的请求，在第一界面上输出每一事务对应的请求的数量。其中，第三关键字为表征请求的关键字，比如表征数据提交的请求关键字“web_submit_data”。作为一种可能的实现方式，使用For循环语句在每一个事务的范围内进行遍历操作，逐行读取测试脚本，对“web_submit_data”、“web_url”等请求类的函数关键字进行统计。可选的，通过While循环语句，设置用于统计请求数目的变量，在事务范围内，请求类的关键字每出现一次，统计请求数目的变量增加1，以得到最终的请求数目统计结果。可选的，将每个事务内的请求数目，赋值到第一界面上“请求数量”文本框内，如此，通过第一界面输出事务对应的请求数量，比如，参见图4，事务login内包含2个请求、事务openexam内包含3个请求。

可选的，用户还可以通过第一界面设置事务别名，事务别名可以是事务名称的另一表达方式，比如，参见图4，原始的事务名称为login，为了使得语言具备互通性，增强在中文环境中的可读性，可为事务login设置事务别名“用户登录”。

可选的，用户还可通过第一界面设置合理时长。合理时长可表征响应时长对于用户而言的可接受性。比如，参见图4，login这一事务的合理时长设置为2秒，表示当响应时长为2秒时，用户的上网体验并不受影响，或者受到影响较小，用户可以接受2秒的时延。

在本申请实施例中，选择需上传的第一测试报告，并在检测到用户在第一界面输入的第一指令(比如用户点击图4所示“生成第二测试报告”选项)之后，根据第一测试报告中的内容和测试脚本生成第二测试报告。可选的，第二测试报告包括上述测试脚本的相关信息中的至少一项。这里，测试脚本的相关信息包括但不限于上述提及的集合点信息、思考时间信息、参数化信息、事务信息、请求信息中的一种或多种的组合。可选的，第二测试报告包括第一测试报告中的部分或全部内容。也就是说，可以将第一测试报告中的部分或全部内容和/或测试脚本中的相关信息写到第二测试报告中。

可选的，为了将第一测试报告中的部分或全部内容写入第二测试报告中，需提取第一测试报告中的第一测试指标，第一测试指标包括如下至少一种：并发数，每秒事务处理量(TransactionPerSecond，TPS)，响应时间，运行时长，成功事务数，失败事务数；

可选的，根据所提取的第一测试指标确定第二测试指标，第二测试指标包括如下至少一种：事务成功率，半小时事务数。示例性的，由事务成功数可计算事务成功率。

参见图6，为采用本申请实施例方法生成的第二测试报告，该第二测试报告共测试了4个功能模块，即4个事务。根据第二列，该测试报告包括测试脚本属性，也就是上文提及的测试脚本的相关信息，即参数化信息、集合点信息和思考时间信息。并且，第二测试报告还包含第一测试报告中的部分或全部内容(如TPS等)，第二测试报告还包含由第一测试指标计算出的第二测试指标(如半小时事务数)。

由图5可知，传统的第一测试报告通常以英文显示，并且，给出的测试指标较少，无法满足更加精细的测试需求，也无法更加方便的使得项目成员理解测试报告所反映的系统性能。采用本申请实施例的测试报告生成方法，一方面，可以将传统的第一测试报告中的内容进行转换，比如，将英文转换为中文，并显示转换后的中文格式的测试报告，增强测试报告的可读性。另一方面，第二测试报告包括测试脚本相关信息中的至少一项，也就是可以将测试脚本的相关信息添加进测试报告中，使得项目成员通过第二测试报告能更加方便的了解脚本属性，便于后续对测试脚本的升级维护，并且，使得测试报告能够更加精细的反映系统性能。再一方面，第二测试报告还可以包含由第一测试指标计算出的第二测试指标，使得测试报告能更加精细化，更加准确的反映系统性能。也就是说，根据第一测试报告与测试脚本可生成直观、可读性高，并且能够更加精细的反映系统性能的第二测试报告。

本申请实施例可以根据上述方法示例对进行功能模块或者功能单元的划分。例如，可以对应各个功能划分各个功能模块或者功能单元，也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块既可以采用硬件的形式实现，也可以采用软件功能模块或者功能单元的形式实现。其中，本申请实施例中对模块或者单元的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。

图7示出了上述实施例中所涉及的系统的一种可能的结构示意图，该系统用于执行上述测试报告生成方法。该系统700包括：用于接收用户输入的第一指令的装置701，以及用于响应第一指令，根据测试脚本和第一测试报告生成第二测试报告的装置702。第一指令用于指示生成第二测试报告。

在一种可能的设计中，系统还包括：

用于接收用户输入的第二指令的装置703；以及

用于响应第二指令，提取相关信息的装置704。其中，相关信息包括：集合点信息、参数化信息、思考时间信息。

在一种可能的设计中，第二测试报告包括相关信息中的至少一项。

在一种可能的设计中，系统还包括：

用于提取第一测试报告中的第一测试指标的装置705，以及用于根据所提取的第一测试指标确定第二测试指标的装置706。其中，第二测试指标包括如下至少一种：事务成功率，半小时事务数。第一测试指标包括如下至少一种：并发数，每秒事务处理量TPS，响应时间，运行时长，成功事务数，失败事务数。

在一种可能的设计中，系统还包括：

用于遍历测试脚本的装置707、用于根据第一预设关键字和第二预设关键字确定待测试的一个或多个事务的装置708、以及用于在第一界面上输出一个或多个事务的事务名称的装置709。

在一种可能的设计中，系统还包括：用于在每一事务内根据第三关键字分别确定一个或多个事务的每一事务内的请求的装置710，以及用于在第一界面上输出每一事务对应的请求的数量的装置711。

图8示出了上述实施例中所涉及的电子设备的一种可能的结构示意图。该电子设备800包括：处理器802和通信接口803。处理器802用于对电子设备的动作进行控制管理，例如，执行上述图7中的装置702、装置704至装置708、装置710执行的步骤，和/或用于执行本文所描述的技术的其它过程。通信接口803用于支持与其他网络实体的通信，或者，接收来自用户的输入，或者，可用于向用户输出一些界面，例如，执行上述图7中装置701、装置703、装置709、装置711执行的步骤。电子设备还可以包括存储器801和总线804，存储器801用于存储电子设备的程序代码和数据。

其中，存储器801可以是电子设备中的存储器等，该存储器可以包括易失性存储器，例如随机存取存储器；该存储器也可以包括非易失性存储器，例如只读存储器，快闪存储器，硬盘或固态硬盘；该存储器还可以包括上述种类的存储器的组合。

上述处理器802可以是实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。该处理器可以是中央处理器，通用处理器，数字信号处理器，专用集成电路，现场可编程门阵列或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，DSP和微处理器的组合等。

总线804可以是扩展工业标准结构(Extended Industry StandardArchitecture，EISA)总线等。总线804可以分为地址总线、数据总线、控制总线等。为便于表示，图8中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。

如图9所示，本申请实施例提供电子设备的另一种可能的结构示意图。该电子设备900包括：处理单元901。处理单元901用于对电子设备的动作进行控制管理，例如，执行上述图7中的装置702、装置704至装置708、装置710执行的步骤，和/或用于执行本文所描述的技术的其它过程。电子设备还可以包括存储单元902和通信单元903，存储单元902用于存储电子设备的程序代码和数据；通信单元903用于支持电子设备与其他网络实体的通信，或者，用于接收用户的输入，或者，用于向用户输出一些界面等，例如，执行上述图7中装置701、装置703、装置709、装置711执行的步骤。

其中，上述处理单元901可以是电子设备中的处理器802或控制器。

存储单元902可以是电子设备中的存储器801等。

通信单元903可以是电子设备中的收发器、收发电路或通信接口803等。

通过以上的实施方式的描述，所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，仅以上述各功能模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能模块完成，即将装置的内部结构划分成不同的功能模块，以完成以上描述的全部或者部分功能。上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

本申请实施例还提供一种计算机可读存储介质，计算机可读存储介质中存储有指令，当电子设备执行该指令时，该电子设备执行上述方法实施例所示的方法流程中电子设备执行的各个步骤。

其中，计算机可读存储介质，例如可以是但不限于电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(Random Access Memory，RAM)、只读存储器(Read-Only Memory，ROM)、可擦式可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、寄存器、硬盘、光纤、便携式紧凑磁盘只读存储器(Compact Disc Read-Only Memory，CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合、或者本领域熟知的任何其它形式的计算机可读存储介质。一种示例性的存储介质耦合至处理器，从而使处理器能够从该存储介质读取信息，且可向该存储介质写入信息。当然，存储介质也可以是处理器的组成部分。处理器和存储介质可以位于特定用途集成电路(Application Specific Integrated Circuit，ASIC)中。在本申请实施例中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何在本申请揭露的技术范围内的变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应该以权利要求的保护范围为准。

Claims (14)

1.一种测试报告生成方法，其特征在于，包括：

接收用户输入的第一指令，所述第一指令用于指示生成第二测试报告；以及

响应于所述第一指令，根据测试脚本和第一测试报告生成所述第二测试报告。

2.根据权利要求1所述的测试报告生成方法，其特征在于，在接收用户输入的第一指令之前，所述方法还包括：

接收用户输入的第二指令；以及

响应于所述第二指令，提取所述测试脚本中的相关信息，所述相关信息包括：集合点信息、参数化信息、思考时间信息。

3.根据权利要求2所述的测试报告生成方法，其特征在于，所述第二测试报告包括所述相关信息中的至少一项。

4.根据权利要求1至3中任一项所述的测试报告生成方法，其特征在于，所述方法还包括：

提取所述第一测试报告中的第一测试指标，所述第一测试指标包括如下至少一种：并发数，每秒事务处理量TPS，响应时间，运行时长，成功事务数，失败事务数；以及

根据所提取的第一测试指标确定第二测试指标，第二测试指标包括如下至少一种：事务成功率，半小时事务数。

5.根据权利要求1至4中任一项所述的测试报告生成方法，其特征在于，所述方法还包括：

遍历所述测试脚本，根据第一预设关键字和第二预设关键字确定待测试的一个或多个事务；以及

在第一界面上输出所述一个或多个事务的事务名称。

6.根据权利要求5所述的测试报告生成方法，其特征在于，所述方法还包括：

根据第三关键字分别确定所述一个或多个事务的每一事务内的请求；以及

在所述第一界面上输出每一事务对应的请求的数量。

7.一种系统，其特征在于，包括：

用于接收用户输入的第一指令的装置，所述第一指令用于指示生成第二测试报告；以及

用于响应所述第一指令，根据测试脚本和第一测试报告生成第二测试报告的装置。

8.根据权利要求7所述的系统，其特征在于，所述系统还包括：

用于接收用户输入的第二指令的装置；以及

用于响应所述第二指令，提取所述相关信息的装置，所述相关信息包括：集合点信息、参数化信息、思考时间信息。

9.根据权利要求8所述的系统，其特征在于，所述第二测试报告包括所述相关信息中的至少一项。

10.根据权利要求7至9中任一项所述的系统，其特征在于，所述系统还包括：

用于提取所述第一测试报告中的第一测试指标的装置，所述第一测试指标包括如下至少一种：并发数，每秒事务处理量TPS，响应时间，运行时长，成功事务数，失败事务数；以及

用于根据所提取的第一测试指标确定第二测试指标的装置，第二测试指标包括如下至少一种：事务成功率，半小时事务数。

11.根据权利要求7至10中任一项所述的系统，其特征在于，所述系统还包括：

用于遍历所述测试脚本的装置；以及

用于根据第一预设关键字和第二预设关键字确定待测试的一个或多个事务的装置；以及

用于在第一界面上输出所述一个或多个事务的事务名称的装置。

12.根据权利要求11所述的系统，其特征在于，所述系统还包括：

用于在每一事务内根据第三关键字分别确定所述一个或多个事务的每一事务内的请求的装置；以及

用于在所述第一界面上输出每一事务对应的请求的数量的装置。

13.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时，实现权利要求1-6中任一项所述的测试报告生成方法。

14.一种电子设备，其特征在于，包括：

存储器，其上存储有计算机程序；

处理器，用于执行所述存储器中的所述计算机程序，以实现权利要求1-6中任一项所述的测试报告生成方法。