CN108196992A - 一种性能自动化测试方法和装置 - Google Patents

Abstract

本发明实施例公开了一种性能自动化测试方法和装置，解决了现有的性能自动化测试方法主要是通过预置测试接口的方式，导致了只能针对某几个接口进行接口压测，无法对整站进行接口压测的问题。本发明公开的性能自动化测试方法包括：获取压测域的整站流量，对压测域的整站流量按域名和时间进行分类，确定各个压测子域中包括的流量并保存于各个压测子域的数据目录中；生成各个压测子域的数据接口；通过执行预置接口压测脚本对压测子域的数据接口进行压测，得到压测子域的数据接口的性能值；根据压测子域的数据接口的性能值生成压测子域的数据接口的压测报告。

Description

一种性能自动化测试方法和装置

技术领域

本发明涉及性能测试领域，尤其涉及一种性能自动化测试方法和装置。

背景技术

性能自动化测试是通过自动化测试工具或其他手段，按照预定的计划进行自动测试的活动，性能自动化测试可以减轻手工测试的工作量，从而达到节约资源，提高测试质量的目的。

目前，现有的性能自动化测试方法主要是通过预置测试接口的方式，导致了只能针对某几个接口进行接口压测，无法对整站进行接口压测的问题。

发明内容

本发明实施例提供了一种性能自动化测试方法和装置，解决了现有的性能自动化测试方法主要是通过预置测试接口的方式，导致了只能针对某几个接口进行接口压测，无法对整站进行接口压测的问题。

本发明实施例提供的一种性能自动化测试方法包括：

获取压测域的整站流量，对压测域的整站流量按域名和时间进行分类，确定各个压测子域中包括的流量并保存于各个压测子域的数据目录中；

生成各个压测子域的数据接口；

通过执行预置接口压测脚本对压测子域的数据接口进行压测，得到压测子域的数据接口的性能值；

根据压测子域的数据接口的性能值生成压测子域的数据接口的压测报告。

可选地，获取压测域的整站流量，对压测域的整站流量按域名和时间进行分类，确定各个压测子域中包括的流量并保存于各个压测子域的数据目录中，具体包括：

定时获取线上压测域的整站流量，对压测域的整站流量按域名和时间进行分类，把整站流量分配给各个压测子域；

创建mock服务器，mock服务器获取到一个压测子域发送给其他压测子域的指令的哈希值；

压测子域通过访问mock服务器来获取其他子域的流量，最后将确定后的各个子域中包括的流量保存于各个压测子域的数据目录中。

可选地，在通过执行预置接口压测脚本对压测子域的数据接口进行压测，得到压测子域的数据接口的性能值之后，所述方法还包括：

通过CI调用获取压测子域进行压测得到的性能值，并与预置的标准判定指标进行对比，若性能值超出标准判定指标的范围，则压测失败；若性能值不超出标准判定指标的范围，则压测成功。

可选地，在根据压测子域的数据接口的性能值生成压测子域的数据接口的压测报告之后，所述方法还包括：

通过UI调用对压测子域的压测环境根据预置配置文件进行配置，并在压测完成后生成压测子域的压测报告。

可选地，通过执行预置接口压测脚本对压测子域的数据接口进行压测，得到压测子域的数据接口的性能值，具体包括：

通过执行预置接口压测脚本对压测子域的数据接口进行压测，若同时有不少于1个用户对同一个压测子域进行压测，通过job调用生成压测任务队列，并按压测任务队列顺序进行压测，得到压测子域的数据接口的性能值。

本发明实施例提供的一种性能自动化测试装置包括：

获取单元，用于对压测域的整站流量按域名和时间进行分类，确定各个压测子域中包括的用于流量并保存于各个压测子域的数据目录中；

接口生成单元，用于生成各个压测子域的数据接口；

压测单元，用于通过执行预置接口压测脚本对压测子域的数据接口进行压测，得到压测子域的数据接口的性能值；

报告生成单元，用于根据压测子域的数据接口的性能值生成压测子域的数据接口的压测报告。

可选地，所述获取单元，具体用于定时获取线上压测域的整站流量，对压测域的整站流量按域名和时间进行分类，把整站流量分配给各个压测子域；

各子域间的流量分配通过将其中一个子域发给其他子域的指令经过哈希算法计算得到其中一个子域发出的指令的哈希值，并导入到mock服务器；

其中一个子域通过访问mock服务器来获取其他子域的流量，最后将确定后的各个子域中包括的流量保存于各个压测子域的数据目录中。

可选地，所述压测单元后还包括：

CI调用单元，用于通过CI调用获取压测子域进行压测得到的判定指标，并与预置的标准判定指标进行对比，若判定指标超出标准判定指标的范围，则压测失败；若判定指标不超出标准判定指标的范围，则压测成功。

可选地，所述报告生成单元后还包括：

UI调用单元，用于通过UI调用对压测子域的压测环境根据预置配置文件进行配置，并在压测完成后生成压测子域的压测报告。

可选地，，所述压测单元，具体用于通过执行预置接口压测脚本对压测子域的数据接口进行压测，若同时有不少于1个用户对同一个压测子域进行压测，通过job调用生成压测任务队列，并按压测任务队列顺序进行压测，得到压测子域的数据接口的性能值。

从以上技术方案可以看出，本发明实施例具有以下优点：

本发明实施例提供的一种性能自动化测试方法和装置，其中，一种性能自动化测试方法包括：获取压测域的整站流量，对压测域的整站流量按域名和时间进行分类，确定各个压测子域中包括的流量并保存于各个压测子域的数据目录中；生成各个压测子域的数据接口；通过执行预置接口压测脚本对压测子域的数据接口进行压测，得到压测子域的数据接口的性能值；根据压测子域的数据接口的性能值生成压测子域的数据接口的压测报告。

本实施例中，通过获取待测压测域的整站流量，并对压测域的整站流量按域名和时间进行分类，确定各个压测子域中的流量存在各压测子域对应的数据目录中，生成各个压测子域的数据接口；通过执行预置接口压测脚本对压测子域的数据接口进行压测，从而得到压测子域数据接口性能值并生成压测报告。解决了现有的性能自动化测试方法主要是通过预置测试接口的方式，导致了只能针对某几个接口进行接口压测，无法对整站进行接口压测的问题。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其它的附图。

图1为本发明实施例提供的一种性能自动化测试方法的一个实施例的流程示意图；

图2为本发明实施例提供的一种性能自动化测试方法的另一个实施例的流程示意图；

图3为本发明实施例提供的一种性能自动化测试装置的一个实施例的结构示意图；

图4为本发明实施例提供的一种性能自动化测试装置的另一个实施例的结构示意图；

图5为本发明实施例提供的一种性能自动化测试方法的另一个实施例的逻辑结构图；

图6至图7为本发明实施例提供的一种性能自动化测试方法和装置的压测报告示意图。

具体实施方式

本发明实施例提供了一种性能自动化测试方法和装置，解决了现有的性能自动化测试方法主要是通过预置测试接口的方式，导致了只能针对某几个接口进行接口压测，无法对整站进行接口压测的问题。

为使得本发明的发明目的、特征、优点能够更加的明显和易懂，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，下面所描述的实施例仅仅是本发明一部分实施例，而非全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例，都属于本发明保护的范围。

请参阅图1，本发明实施例提供的一种性能自动化测试方法的一个实施例包括：

101、获取压测域的整站流量，对压测域的整站流量按域名和时间进行分类，确定各个压测子域中包括的流量并保存于各个压测子域的数据目录中；

本实施例中，在线上用tcpdump抓取线上流量，通过数据清洗，去掉时间戳等操作后，将后端请求的请求和报文算出对应的哈希值，保证链路一致性，导入mock中作为相应数据，将被压域的流量按照域名和时间筛选，算签后存在每个域压测脚本的对应目录下面提供压测数据。

102、生成各个压测子域的数据接口；

103、通过执行预置接口压测脚本对压测子域的数据接口进行压测，得到压测子域的数据接口的性能值；

需要说明的是，当数据准备好了后，会触发一个shell脚本，该脚本会自动启停被压域的服务，更新被压子域的代码，探测被压子域的中间件如mysql，redis等等是不是可以提供服务，如果不可以，对应的服务会自动重启，或者显示该处服务不通的友好提示；

当环境准备好了后，服务器会调用压测接口执行脚本，对被测域进行接口压测。被压接口的TPS，响应时间等通过解析jmeter的JTL文件来获得。解析是用flume进行实时解析的，解析的内容会放在一个表里面。解析的内容涵盖整个流量的响应时间，TPS，并发数，压测时间，错误率以及单接口的性能情况。

104、根据压测子域的数据接口的性能值生成压测子域的数据接口的压测报告；

需要说明的是，当压测完成后，接口的性能指标随之完成，此时开始统计服务器性能指标，通过时间和被压服务器ID在zabbix表面查询出相应的性能指标。性能指标分几大类：Linux服务器自身性能情况，中间件tomcat，redis，memcache，nginx，php等收集完服务器性能情况后同接口的性能情况组合关联生产一份测试报告。

本实施例中，通过获取待测压测域的整站流量，并对压测域的整站流量按域名和时间进行分类，确定各个压测子域中的流量包保存在各压测子域对应的数据目录中，生成各个压测子域的数据接口；通过执行预置接口压测脚本对压测子域的数据接口进行压测，从而得到压测接口的性能值并生成压测报告。解决了现有的性能自动化测试方法主要是通过预置测试接口的方式，导致了只能针对某几个接口进行接口压测，无法对整站进行接口压测的问题。

上面是对性能自动化测试方法的过程进行的描述，下面将对性能自动化测试方法的过程进行详细的描述。

请参阅图2，本发明实施例提供的一种性能自动化测试方法的另一个实施例包括：

201、定时获取线上压测域的整站流量，对压测域的整站流量按域名和时间进行分类，把整站流量分配给各个压测子域；

创建mock服务器，mock服务器获取到一个压测子域发送给其他压测子域的指令的哈希值；

压测子域通过访问mock服务器来获取其他子域的流量，最后将确定后的各个子域中包括的流量保存于各个压测子域的数据目录中。

需要说明的是，在线上用tcpdump抓取线上流量，通过数据清洗，去掉时间戳等操作后，将后端请求的请求和报文算出对应的哈希值，保证链路一致性，导入mock中作为相应数据，将被压域的流量按照域名和时间筛选，算签后存在每个域压测脚本的对应目录下面提供压测数据。

202、生成各个压测子域的数据接口；

203、通过执行预置接口压测脚本对压测子域的数据接口进行压测，若同时有不少于1个用户对同一个压测子域进行压测，通过job调用生成压测任务队列，并按压测任务队列顺序进行压测，得到压测子域的数据接口的性能值；

需要说明的是，当多用户同时使用该测试方法对同一个压测子域进行压测的时候，会给出一个压测任务队列。同一个域在同一时间压测的时候会产生压测任务队列，如果是不同域在同一时间段压测不会产生压测队列。当环境准备好了后，服务器会调用压测接口执行脚本，对被测域进行接口压测。被压接口的TPS，响应时间等通过解析jmeter的JTL文件来获得。解析是用flume进行实时解析的，解析的内容会放在一个表里面。解析的内容涵盖整个流量的响应时间，TPS，并发数，压测时间，错误率以及单接口的性能情况。

204、通过CI调用获取压测子域进行压测得到的性能值，并与预置的标准判定指标进行对比，若性能值超出标准判定指标的范围，则压测失败；若性能值不超出标准判定指标的范围，则压测成功；

需要说明的是，请参阅图5，通过CI调用压测任务，压测平台可以自动获取该压测域的前三次压测成功并且判定压测通过的结论的平均值为基准值来判定该域该次压测是否压测成功(判定的指标涵盖cpu user，TPS,响应时间)同时在测试报告上展示benchMark对比情况。

205、根据压测子域的数据接口的性能值生成压测子域的数据接口的压测报告；

需要说明的是，当压测完成后，接口的性能指标随之完成，此时开始统计服务器性能指标，通过时间和被压服务器ID在zabbix表面查询出相应的性能指标。性能指标分几大类：Linux服务器自身性能情况，中间件tomcat，redis，memcache，nginx，php等，收集完服务器性能情况后同接口的性能情况组合关联生产一份测试报告。

206、通过UI调用对压测子域的压测环境根据预置配置文件进行配置，并在压测完成后生成压测子域的压测报告；

需要说明的是，通过UI调用的话，直接选择压测域，压测时间，并发数，是否进行阀值对比，阀值设定，单接口压测，多接口压测，压测机服务器等等。填写完成后，点击执行压测，UI给出压测进度，压测完成后系统给出压测报告。如图6和图7所示为本发明实施例提供的一种性能自动化测试方法和装置的压测报告示意图。

UI界面可以给出按照UI调用还是CI调用进行分类给出每次压测每个域的线性图，柱状图。线性图和柱状图表示的内容有接口的性能指标，服务器的性能指标，中间件的性能指标，一目了然的指导压测域的每个版本的性能情况。

本实施例中，通过获取待测压测域的整站流量，并对压测域的整站流量按域名和时间进行分类，确定各个压测子域中的流量包保存在各压测子域对应的数据目录中，生成各个压测子域的数据接口；通过执行预置接口压测脚本对压测子域的数据接口进行压测，从而得到压测接口的性能值并生成压测报告。通过job调用解决了多个用户同时进行压测时的顺序问题，并通过CI调用来保证压测的成功完成和通过UI调用实现了对压测环境的配置，通过UI界面将压测结果图形化表现出来。解决了现有的性能自动化测试方法主要是通过预置测试接口的方式，导致了只能针对某几个接口进行接口压测，无法对整站进行接口压测的问题。

请参阅图3，为本发明实施例提供的一种性能自动化测试装置的一个实施例包括：

获取单元301，用于对压测域的整站流量按域名和时间进行分类，确定各个压测子域中包括的用于流量并保存于各个压测子域的数据目录中；

接口生成单元302，用于生成各个压测子域的数据接口；

压测单元303，用于通过执行预置接口压测脚本对压测子域的数据接口进行压测，得到压测子域的数据接口的性能值；

报告生成单元304，用于根据压测子域的数据接口的性能值生成压测子域的数据接口的压测报告。

本实施例中，通过获取单元301获取待测压测域的整站流量，并对压测域的整站流量按域名和时间进行分类，确定各个压测子域中的流量包保存在各压测子域对应的数据目录中；通过接口生成单元302生成各个压测子域的数据接口；通过压测单元303执行预置接口压测脚本对压测子域的数据接口进行压测，从而得到压测接口的性能值并通过报告生成单元304生成压测报告。解决了现有的性能自动化测试方法主要是通过预置测试接口的方式，导致了只能针对某几个接口进行接口压测，无法对整站进行接口压测的问题。

上面描述了一种性能自动化测试装置的一个实施例，下面将对一种性能自动化测试装置的另一个实施例进行详细描述。

请参阅图4，为本发明实施例提供的一种性能自动化测试装置的另一个实施例包括：

获取单元401具体包括：

获取和分配子单元4011，用于定时获取线上压测域的整站流量，对压测域的整站流量按域名和时间进行分类，把整站流量分配给各个压测子域；

创建子单元4012，用于创建mock服务器，mock服务器获取到一个压测子域发送给其他压测子域的指令的哈希值；

获取和保存子单元4013，用于压测子域通过访问mock服务器来获取其他子域的流量，最后将确定后的各个子域中包括的流量保存于各个压测子域的数据目录中。

接口生成单元402，用于生成各个压测子域的数据接口；

压测单元403，用于通过执行预置接口压测脚本对压测子域的数据接口进行压测，若同时有不少于1个用户对同一个压测子域进行压测，通过job调用生成压测任务队列，并按压测任务队列顺序进行压测，得到压测子域的数据接口的性能值；

CI调用单元404，用于通过CI调用获取压测子域进行压测得到的性能值，并与预置的标准判定指标进行对比，若性能值超出标准判定指标的范围，则压测失败；若性能值不超出标准判定指标的范围，则压测成功；

报告生成单元405，用于根据压测子域的数据接口的性能值生成压测子域的数据接口的压测报告；

UI调用单元406，用于通过UI调用对压测子域的压测环境根据预置配置文件进行配置，并在压测完成后生成压测子域的压测报告。

本实施例中，通过获取单元401获取待测压测域的整站流量，并对压测域的整站流量按域名和时间进行分类，确定各个压测子域中的流量包保存在各压测子域对应的数据目录中；通过接口生成单元402生成各个压测子域的数据接口；通过压测单元403执行预置接口压测脚本对压测子域的数据接口进行压测，从而得到压测接口的性能值，并通过CI调用单元404中的标准判定指标预置对压测结果进行判定，得出压测是否成功的结果；并通过报告生成单元405生成压测报告以及UI调用单元406对压测子域的压测环境根据预置配置文件进行配置，并在压测完成后生成压测子域的压测报告。解决了现有的性能自动化测试方法主要是通过预置测试接口的方式，导致了只能针对某几个接口进行接口压测，无法对整站进行接口压测的问题。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统，装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的几个实施例中，应该理解到，所揭露的系统，装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-OnlyMemory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种性能自动化测试方法，其特征在于，包括：

获取压测域的整站流量，对压测域的整站流量按域名和时间进行分类，确定各个压测子域中包括的流量并保存于各个压测子域的数据目录中；

生成各个压测子域的数据接口；

通过执行预置接口压测脚本对压测子域的数据接口进行压测，得到压测子域的数据接口的性能值；

根据压测子域的数据接口的性能值生成压测子域的数据接口的压测报告。

2.根据权利要求1所述的一种性能自动化测试方法，其特征在于，

获取压测域的整站流量，对压测域的整站流量按域名和时间进行分类，确定各个压测子域中包括的流量并保存于各个压测子域的数据目录中，具体包括：

定时获取线上压测域的整站流量，对压测域的整站流量按域名和时间进行分类，把整站流量分配给各个压测子域；

创建mock服务器，mock服务器获取到一个压测子域发送给其他压测子域的指令的哈希值；

压测子域通过访问mock服务器来获取其他子域的流量，最后将确定后的各个子域中包括的流量保存于各个压测子域的数据目录中。

3.根据权利要求1所述的一种性能自动化测试方法，其特征在于，

在通过执行预置接口压测脚本对压测子域的数据接口进行压测，得到压测子域的数据接口的性能值之后，根据压测子域的数据接口的性能值生成压测子域的数据接口的压测报告之前，所述方法还包括：

通过CI调用获取压测子域进行压测得到的性能值，并与预置的标准判定指标进行对比，若性能值超出标准判定指标的范围，则压测失败；若性能值不超出标准判定指标的范围，则压测成功。

4.根据权利要求1或3所述的一种性能自动化测试方法，其特征在于，

在根据压测子域的数据接口的性能值生成压测子域的数据接口的压测报告之后，所述方法还包括：

通过UI调用对压测子域的压测环境根据预置配置文件进行配置，并在压测完成后生成压测子域的压测报告。

5.根据权利要求1所述的一种性能自动化测试方法，其特征在于，

通过执行预置接口压测脚本对压测子域的数据接口进行压测，得到压测子域的数据接口的性能值，具体包括：

通过执行预置接口压测脚本对压测子域的数据接口进行压测，若同时有不少于1个用户对同一个压测子域进行压测，通过job调用生成压测任务队列，并按压测任务队列顺序进行压测，得到压测子域的数据接口的性能值。

6.一种性能自动化测试装置，其特征在于，包括：

获取单元，用于对压测域的整站流量按域名和时间进行分类，确定各个压测子域中包括的用于流量并保存于各个压测子域的数据目录中；

接口生成单元，用于用于生成各个压测子域的数据接口；

压测单元，用于通过执行预置接口压测脚本对压测子域的数据接口进行压测，得到压测子域的数据接口的性能值；

报告生成单元，用于根据压测子域的数据接口的性能值生成压测子域的数据接口的压测报告。

7.根据权利要求6所述的一种性能自动化测试装置，其特征在于，

所述获取单元，具体包括：

获取和分配子单元：定时获取线上压测域的整站流量，对压测域的整站流量按域名和时间进行分类，把整站流量分配给各个压测子域；

创建子单元：创建mock服务器，mock服务器获取到一个压测子域发送给其他压测子域的指令的哈希值；

获取和保存子单元：压测子域通过访问mock服务器来获取其他子域的流量，最后将确定后的各个子域中包括的流量保存于各个压测子域的数据目录中。

8.根据权利要求6所述的一种性能自动化测试装置，其特征在于，

所述压测单元后还包括：

CI调用单元，用于通过CI调用获取压测子域进行压测得到的性能值，并与预置的标准判定指标进行对比，若性能值超出标准判定指标的范围，则压测失败；若性能值不超出标准判定指标的范围，则压测成功。

9.根据权利要求6或8任一项权利要求所述的一种性能自动化测试装置，其特征在于，

所述报告生成单元后还包括：

UI调用单元，用于通过UI调用对压测子域的压测环境根据预置配置文件进行配置，并在压测完成后生成压测子域的压测报告。

10.根据权利要求6所述的一种性能自动化测试装置，其特征在于，

所述压测单元，具体用于通过执行预置接口压测脚本对压测子域的数据接口进行压测，若同时有不少于1个用户对同一个压测子域进行压测，通过job调用生成压测任务队列，并按压测任务队列顺序进行压测，得到压测子域的数据接口的性能值。