CN111897722B - 自动化测试用例处理方法、装置、服务器及存储介质 - Google Patents

Abstract

本发明涉及自动化测试技术领域，提供一种自动化测试用例处理方法、装置、服务器及存储介质，所述方法包括：获取多个待执行自动化测试用例及每一待执行自动化测试用例的执行时长；按照每一待执行自动化测试用例的执行时长将多个待执行自动化测试用例从大到小排序；按照排序后的待执行自动化测试用例的顺序为每一测试系统分别分配一个自动化测试用例，以使每一测试系统执行对应的自动化测试用例；对排序后的待执行自动化测试用例中未分配自动化测试用例进行合并，以便服务器在任一测试系统执行完当前的自动化测试用例后继续按照合并后的未分配自动化测试用例的顺序进行分配。相对于现有技术，本发明提高了自动化测试的运行效率。

Description

自动化测试用例处理方法、装置、服务器及存储介质

技术领域

本发明涉及自动化测试领域，具体而言，涉及一种自动化测试用例处理方法、装置、服务器及存储介质。

背景技术

随着安防行业的发展，监控平台及云存储系统上集成了越来越多的功能，随之而来的测试用例数也越来越多，加上软件迭代速度的加快，对自动化测试的运行效率的要求也越来越高。

现有技术中，对于云存储系统进行测试的测试系统往往有多套，由于用例在多套测试系统上运行的不均衡造成测试系统的测试资源不能得以充分利用，造成资源的浪费，从而降低了自动化测试的运行效率，在测试用例的数量较大时，由此导致的自动化测试的运行效率的降低更为显著。

发明内容

本发明的目的在于提供了一种自动化测试用例处理方法、装置、服务器及存储介质，可以使自动化测试用例在多个测试系统上运行得更均衡、测试资源利用更充分，同时减少了自动化测试用例的数量，由此提高了自动化测试的运行效率。

为了实现上述目的，本申请实施例采用的技术方案如下：

第一方面，本发明提供一种自动化测试用例处理方法，应用于处理自动化测试用例的服务器，服务器与执行自动化用例的测试系统通信连接，所述方法包括：获取多个待执行自动化测试用例及每一待执行自动化测试用例的执行时长，其中，待执行自动化测试用例的个数大于测试系统的个数；按照每一待执行自动化测试用例的执行时长将多个待执行自动化测试用例从大到小排序；按照排序后的待执行自动化测试用例的顺序为每一测试系统分别分配一个自动化测试用例，以使每一测试系统执行对应的自动化测试用例；对排序后的待执行自动化测试用例中未分配自动化测试用例进行合并，以便服务器在任一测试系统执行完当前的自动化测试用例后继续按照合并后的未分配自动化测试用例的顺序进行分配。

第二方面，本发明提供一种自动化测试用例处理装置，应用于处理自动化测试用例的服务器，服务器与执行自动化用例的测试系统通信连接，所述装置包括：获取模块、排序模块、分配模块及合并模块，其中，获取模块用于获取多个待执行自动化测试用例及每一待执行自动化测试用例的执行时长，其中，待执行自动化测试用例的个数大于测试系统的个数；排序模块用于按照每一待执行自动化测试用例的执行时长将多个待执行自动化测试用例从大到小排序；分配模块用于按照排序后的待执行自动化测试用例的顺序为每一测试系统分别分配一个自动化测试用例，以使每一测试系统执行对应的自动化测试用例；合并模块用于对排序后的待执行自动化测试用例中未分配自动化测试用例进行合并，以便服务器在任一测试系统执行完当前的自动化测试用例后继续按照合并后的未分配自动化测试用例的顺序进行分配。

第三方面，本发明提供一种服务器，所述服务器包括：一个或多个处理器；存储器，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如上述的自动化测试用例处理方法。

第四方面，本发明提供一种计算机可读存储介质，该计算机程序被处理器执行时实现如上述的自动化测试用例处理方法。

相对于现有技术，本发明通过按照执行时长对自动化测试用例进行排序后再依序分配至测试系统进行执行，使得自动化测试用例运行更均衡，测试资源的利用更充分，同时通过对自动化测试用例的合并，在不影响测试效果的情况下减少了自动化测试用例的数量，由此提高了自动化测试的运行效率。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，应当理解，以下附图仅示出了本发明的某些实施例，因此不应被看作是对范围的限定，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他相关的附图。

图1示出了本发明实施例提供的自动化测试平台的结构示意图。

图2示出了本发明实施例提供的一种自动化测试用例处理方法的流程图。

图3示出了本发明实施例提供的蛇形分配的示例图。

图4示出了本发明实施例提供的另一种自动化测试用例处理方法的流程图。

图5示出了本发明实施例提供的自动化测试用例合并的示例图。

图6示出了本发明实施例提供的另一种自动化测试用例处理方法的流程图。

图7示出了本发明实施例提供的自动化测试用例拆分的示例图。

图8示出了本发明实施例提供的另一种自动化测试用例处理方法的流程图。

图9示出了本发明实施例提供的自动化测试用例处理装置的方框示意图。

图10示出了本发明实施例提供的服务器的方框示意图。

图标：10-服务器；11-存储器；12-处理器；13-总线；14-通信接口；100-自动化测试用例处理装置；110-获取模块；120-排序模块；130-分配模块；140-合并模块；150-拆分模块；160-失败处理模块。

具体实施方式

为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。通常在此处附图中描述和示出的本发明实施例的组件可以以各种不同的配置来布置和设计。

因此，以下对在附图中提供的本发明的实施例的详细描述并非旨在限制要求保护的本发明的范围，而是仅仅表示本发明的选定实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

应注意到：相似的标号和字母在下面的附图中表示类似项，因此，一旦某一项在一个附图中被定义，则在随后的附图中不需要对其进行进一步定义和解释。

在本发明的描述中，需要说明的是，若出现术语“上”、“下”、“内”、“外”等指示的方位或位置关系为基于附图所示的方位或位置关系，或者是该发明产品使用时惯常摆放的方位或位置关系，仅是为了便于描述本发明和简化描述，而不是指示或暗示所指的装置或元件必须具有特定的方位、以特定的方位构造和操作，因此不能理解为对本发明的限制。

此外，若出现术语“第一”、“第二”等仅用于区分描述，而不能理解为指示或暗示相对重要性。

需要说明的是，在不冲突的情况下，本发明的实施例中的特征可以相互结合。

请参照图1，图1示出了本发明实施例提供的自动化测试平台的结构示意图，自动化测试平台包括服务器10及多个测试系统，服务器10与多个测试系统通信连接，服务器10负责对测试系统及自动化测试用例进行统一管理，并负责将自动化测试用例分配至对应测试系统进行执行。

服务器10可以包括一个或多个主机或者一个或多个实体服务器，也可以包括一个或多个可以实现与主机或者实体服务器具体相同功能的虚拟机。

在本实施例中，由于是对云存储系统进行测试，则每一个测试系统都是一个典型的待测试的云存储系统，包括一个或者多个管理存储节点的服务器和多个用于存储数据的存储节点，本发明实施例不对具体的测试系统进行赘述。

基于图1所示的传统用于测试云存储系统的自动化测试平台，在分配自动化测试用例之前通常首先会对云存储系统的测试系统的基本信息进行记录和更新，例如，测试云存储系统的测试系统的服务器在线还是离线，其中，服务器在线还是离线可以通过向服务器发送ping命令进行判断，当ping命令可以收到正常响应时，判定服务器在线，否则判定服务器离线，测试系统的服务器的名称、测试系统的服务器的IP地址等，表1是测试系统的基本信息的示例。

表1

然后，自动化测试平台将待测试产品型号的安装包的安装部署脚本和卸载脚本在本地试运行，一方面，将试运行通过的相关用例信息记录至安装卸载数据库表中。如果用例是安装包的安装部署脚本，则安装卸载属性字段赋值为“安装”；如果用例是安装包的卸载脚本，则该属性字段填写“卸载”。安装卸载数据库表结构如表2所示：

表2

另一方面，将试运行通过的相关用例的基本信息及相关用例的执行时长记录进入测试用例基本信息及时长数据库表中，之后每运行一次自动化测试用例脚本都会更新最近一次用例执行所在云存储系统的系统编号和最近一次用例执行通过情况两个字段，如果执行成功，则会更新最近一次用例通过执行开始时间、最近一次用例通过执行结束时间、用例通过次数、用例通过总执行时长、用例通过平均执行时长五个字段，如果执行失败，则不会更新这五个字段，表3时测试用例基本信息及时长数据库表的示例。

表3

其中：

测试用例通过次数＝更新字段前的测试用例通过次数+1；

测试用例通过总执行时长＝更新字段前的测试用例通过总执行时长+最近一次测试用例通过执行结束时间-最近一次测试用例通过执行开始时间；

测试用例通过平均执行时长＝(更新字段前的测试用例通过总执行时长+最近一次测试用例通过执行结束时间-最近一次测试用例通过执行开始时间)/(更新字段前的测试用例通过次数+1)。

接下来，自动化测试平台每天定时从代码管理服务器上下载最新的云存储系统的功能代码，通过编译系统构建出需要测试的云存储系统对应的版本。自动化测试平台根据测试用例所属产品型号字段和服务器在线/离线状态字段筛选出云存储系统基本信息表中需要用到的所有服务器都在线的测试系统编号，同时根据测试用例所属产品型号字段筛选出安装卸载表中的安装脚本编号和卸载脚本编号、筛选出测试用例基本信息及时长表中的若干个测试用例编号共同构成本次待执行的自动化测试用例套。

第四，自动化测试平台在筛选出的测试系统上执行安装脚本，当某一个测试系统中所有在线服务器均返回安装成功，则更新云存储系统基本信息表中云存储系统正常运行状态字段值为正常；如该测试系统中存在某一台在线服务器安装失败，则更新云存储系统基本信息表中云存储系统正常运行状态字段值为失败。所有服务器安装完成之后，从云存储系统基本信息表中筛选云存储系统正常运行状态字段值为正常的测试系统用于本次测试。

第五，自动化测试平台将待测试的自动化测试用例分配至多个测试系统，测试系统执行自动化测试平台分配的自动化测试用例，并反馈执行结果至自动化测试平台。

第六，自动化测试平台根据测试系统反馈的自动化测试用例的执行结果更新测试用例基本信息及时长数据库表，并在所有自动化测试用例执行完毕后，根据测试用例基本信息及时长表生成对应型号云存储系统的自动化用例测试情况的报告表。

发明人通过对上述整个处理过程的分析和研究发现了导致自动化测试运行效率不高的几个因素。其一，虽然使用了多个测试系统对云存储系统进行并发测试，但是现有技术中并未对待执行自动化测试用例进行合理的分配，以至于经常出现，一些测试系统已经结束了自动化测试用例的执行，处理空闲状态，而一些测试系统仍未结束自动化测试用例的执行，由此，测试系统的测试资源并未得以充分利用，造成了测试系统的测试资源的浪费，是导致自动化测试运行效率不高的一个因素。其二，每一个自动化测试用例基本上都包括环境添加、用例执行及环境释放三个操作，部分自动化测试用例的环境添加和环境释放这两个操作完全一致，造成了该部分自动化测试用例在执行时，环境添加和环境释放这两个操作多次重复的执行，从而增加了自动化测试用例的执行时间，降低了自动化测试运行效率。其三，在安防领域，由于存储数据的特殊性，部分测试用例是需要存储一段时间再进行录像/图片检查，检查录像/图片的完整性，而存储这段时间该自动化测试用例会占用一套测试系统，而其他与存储业务完整性不相关的测试用例需要排队等待，造成时间上的浪费，也导致了自动化测试运行效率的降低。

除此之外，发明人还发现，传统的自动化测试平台在收到某一个测试环境反馈的因环境添加失败或者环境释放失败而导致的自动化测试用例执行失败的测试结果时，通常就不再向该测试系统分配自动化测试用例，由此造成该测试系统的测试资源的浪费，或者继续将与失败的自动化测试用例具有相同类型的其他自动化测试用例分配至该测试系统，造成自动化测试用例中失败用例的增加。

针对上述发现的传统的自动化测试平台的缺陷导致的自动化测试运行效率降低的因素，发明人提出了一种自动化测试用例处理方法、装置、服务器及存储介质，可以使自动化测试用例在多个测试系统上运行得更均衡、测试资源利用更充分，同时减少了自动化测试用例的数量，由此提高了自动化测试的运行效率。下面将对此进行详细描述。

在图1的基础上，请参考图2，图2示出了本发明实施例提供的一种自动化测试用例处理方法的流程图，该方法应用于图1中的服务器10，该方法包括以下步骤：

步骤S110，获取多个待执行自动化测试用例及每一待执行自动化测试用例的执行时长，其中，待执行自动化测试用例的个数大于测试系统的个数。

在本实施例中，服务器10负责将待执行自动化测试用例分配至测试系统中，测试系统负责执行分配到的自动化测试用例，为了保证自动化测试用例的并发执行，通常采用多个测试系统同时执行自动化测试用例，在本实施例中，待执行自动化测试用例的个数比测试系统的个数大得越多，本发明实施例提供的自动化测试用例处理方法可以使自动化测试用例在多个测试系统执行的越均衡。

在本实施例中，每一待执行自动化测试用例的执行时长可以是该待执行自动化测试用的之前预设次数的执行时长的平均值，也可以是之前预设次数的执行时长的最大值，本发明实施例对此不予限定。

步骤S120，按照每一待执行自动化测试用例的执行时长将多个待执行自动化测试用例从大到小排序。

步骤S130，按照排序后的待执行自动化测试用例的顺序为每一测试系统分别分配一个自动化测试用例，以使每一测试系统执行对应的自动化测试用例。

在本实施例中，第一次分配自动化测试用例时，为每一测试系统分配一个自动化测试用例，后续再分配自动化测试用例时，哪个测试系统先执行完处于空闲状态，就为哪个测试系统接着分配后面的自动化测试用例。由于待执行自动化测试用例按照执行时长进行了排序，理想情况下，自动化测试用例会按照蛇形分配至多个测试系统。请参照图3，图3示出了本发明实施例提供的蛇形分配的示例图，图3中，待执行自动化测试用例有9个：用例1～用例9，其执行时长从大到小排序，测试系统有三个：测试系统a、测试系统b和测试系统c，第一分配将用例1～用例3分别分配给a、b、c，理想情况下，由于用例3的执行时长最短，c最先执行完用例，则用例4分配给c，依次是用例5和用例6分别分配给b和a，同样地，用例7～用例9分别分配给a、b、c。图3是一个理想情况下示例，事实上，当用例执行时长相差不大时，用例可能不会严格按照蛇形分配，当用例个数较多时，从总体来看，用例在多个测试系统的执行大致会处于比较均衡的状态，由此可以保证测试系统的测试资源得以充分利用。

步骤S140，对排序后的待执行自动化测试用例中未分配自动化测试用例进行合并，以便服务器在任一测试系统执行完当前的自动化测试用例后继续按照合并后的未分配自动化测试用例的顺序进行分配。

在本实施例中，未分配自动化测试用例是待执行自动化测试用例中除去已经分配自动化测试用例，例如，待执行自动化测试用例为：用例1～用例9，测试系统为a、b、c，在步骤S130已经将用例1～用例3分别分配给测试系统a、b、c，则用例4～用例9为未分配自动化测试用例。

在本实施例中，为了减少执行的自动化测试用例的个数，提高自动化测试的运行效率，服务器10对未分配自动化测试用例进行合并，以减少执行的自动化测试用例的个数。例如，未分配自动化测试用例为用例4～用例9，将用例4～用例6合并为用例4’，则合并后的未分配自动化测试用例为用例4’、用例7～用例9，则当有测试系统空闲时，将用例4’分配给该空闲的测试系统。

本发明实施例提供的上述自动化测试用例处理方法，通过按照执行时长对自动化测试用例进行排序后再依序分配至测试系统进行执行，使得自动化测试用例运行更均衡，测试资源的利用更充分，同时通过对自动化测试用例的合并，在不影响测试效果的情况下减少了自动化测试用例的数量，由此提高了自动化测试的运行效率。

在图2的基础上，本发明实施例还提供了一种合并自动化测试用例的可能的实现方式，请参照图4，图4示出了本发明实施例提供的另一种自动化测试用例处理方法的流程图，步骤S140包括以下子步骤：

子步骤S1401，获取未分配自动化测试用例的模块类型。

在本实施例中，每一未分配自动化测试用例对应模块类型，模块类型用于表征对应的未分配自动化测试用例要测试的功能模块，例如，自动化测试用例1对应图片管理模块，用于测试云存储系统的图片管理功能，自动化测试用2对应集群管理模块，用于测试云存储系统的集群管理能等。

在本实施例中，每一未分配自动化测试用例包括环境添加操作、用例执行操作及环境释放操作，其中，环境释放操作是将环境添加操作执行的结果清除，以便将测试系统的当前环境恢复至环境添加操作之前的状态，例如，环境添加操作可以是在测试系统中创建预设大小的存储空间，环境释放操作可以是在测试系统中将环境添加操作的存储空间释放等。

子步骤S1402，将未分配自动化测试用例中具有相同模块类型、相同环境添加操作、及相同环境释放操作的第一自动化测试用例合并为一个第二自动化测试用例，其中，第二自动化测试用例包括任意一个第一自动化测试用例的环境添加操作、任意一个第一自动化测试用例的环境释放操作及所有第一自动化测试用例的用例执行操作。

在本实施例中，第一自动化测试用例表征模块类型相同、环境添加操作相同及环境释放操作相同的未分配自动化测试用例，第一自动化测试用例可以为多个，每一第一自动化测试用例对应的未分配自动化测试用例的模块类型相同、环境添加操作相同及环境释放操作相同，例如，未分配自动化测试用例为：用例4～用例10，用例4和用例5的模块类型相同、环境添加操作相同及环境释放操作相同，则用例4和用例5是第一个第一自动化测试用例，用例7和用例8的模块类型相同、环境添加操作相同及环境释放操作相同，则用例4和用例5是第二个第一自动化测试用例。

在本实施例中，每一第一自动化测试用例合并为一个对应的第二自动化测试用例，请参照图5，图5示出了本发明实施例提供的自动化测试用例合并的示例图，图5中，第一自动化测试用例包括模块类型相同的用例1和用例2，用例1包括：环境添加操作、用例执行操作a、环境释放操作，用例2包括：环境添加操作、用例执行操作b、环境释放操作，合并后的第二自动化测试包括：环境添加操作、用例执行操作a、用例执行操作a、环境释放操作。

需要说明的是，所有第一自动化测试用例的用例执行操作在第二自动化测试用例中的顺序不作限定，如图5中，用例执行操作a放在用例执行操作b之前或者之后均可。

子步骤S1403，用第二自动化测试用例替换执行时间最长的第一自动化测试用例。

在本实施例中，第一自动化测试用例可以是未分配自动化测试用例中顺序相邻或者不相邻的用例，例如，第一自动化测试用例可以是未分配自动化测试用例中的第3个用例和第4个用例，也可以是未分配自动化测试用例中的第5个用例、第7个用例和第9个用例。为了实现简单且尽量不破坏未分配自动化测试用例的有序性，将第二自动化测试用例置于执行时间最长的第一自动化测试用例的位置。当然，也可以将第二自动化测试用例置于执行时间最短或者与第一自动化测试用例中多个用例的平均执行时间最接近的第一自动化测试用例的位置。

子步骤S1404，删除未分配自动化测试用例中第一自动化测试用例。

本发明实施例提供的上述自动化测试用例处理方法，同时通过将模块类型相同、环境添加操作相同、环境释放操作相同的自动化测试用例对自动化测试用例的合并，保证了减少了自动化测试用例的数量的同时尽量不影响测试效果，最终提高了自动化测试的运行效率。

在本实施例中，对于安防系统中，有些自动化测试用例是对数据的完整性进行测试的，这些用例在检查数据的完整性前需要等待一段时间，以便云存储系统中存储足够量的待检查数据，为了充分利用等待的这段时间，本发明实施例还提供了另一种自动化测试用例处理方法，请参照图6，图6示出了本发明实施例提供的另一种自动化测试用例处理方法的流程图。该方法包括以下步骤：

步骤S210，若未分配自动化测试用例中当前待分配的第三自动化测试用例的模块类型为预设类型，则将第三自动化测试用例拆分成配置脚本和检查脚本。

在本实施例中，预设类型可以为存储数据的完整性功能模块的模块类型，第三自动化测试用例为模块类型为预设类型、且正准备分配的未分配自动化测试用例，第三自动化测试用例时对存储数据的完整性进行检查的测试用例，例如对录像/图像进行完整性检查的测试用例。

在本实施例中，第三自动化测试用例包括环境添加操作、用例执行操作及环境释放操作，作为一种实施方式，存储业务完整性用例执行数据库表如表4所示：

表4

在本实施例中，一种具体的拆分方式可以是：

首先，将第三自动化测试用例的环境添加操作和第三自动化测试用例的配置操作作为配置脚本。

其次，将第三自动化测试用例的检查操作和第三自动化测试用例的环境释放操作作为检查脚本。

请参照图7，图7示出了本发明实施例提供的自动化测试用例拆分的示例图，第三自动化测试用例拆分成配置脚本和检查脚本。

步骤S220，获取第三自动化测试用例的等待检查时长。

在本实施例中，等待检查时长是第三自动化测试用例等待使待检查的数据达到一定的数据量的时长。等待检查时长可以是用户根据实际场景进行设置的，例如，等待检查时长设置为0.5小时。

步骤S230，依据第三自动化测试用例的顺序将配置脚本后分配至对应的目标测试系统。

在本实施例中，目标测试系统为当前处于空闲的测试系统。第三自动化测试用例为当前正准备分配的自动化用例，即按照之前排好的顺序，位于第三自动化测试用例之前的用例都已经分配完毕。

步骤S240，从未分配自动化测试用例中依次选出预设个数的模块类型为非预设类型的第四自动化测试用例，并将第四自动化测试用例分配至目标测试系统，其中，预设个数的第四自动化测试用例的执行时间的总和小于等待检查时长。

在本实施例中，为了既能充分利用测试系统的测试资源又不影响第三自动化测试用例的及时执行，可以在第三自动化测试用例等待执行检查脚本期间继续运行其他非预设类型的第四自动化测试用例。

在本实施例中，可以选择执行时间的总和小于且与等待检查时长最接近的预设个数的第四自动化测试用例，以便最大化地利用测试系统的测试资源。作为一种具体实施方式，例如，未分配自动化测试用例表示为：Tx1、Tx2、……Txk，执行时间的总和小于且与等待检查时长最接近的预设个数的第四自动化测试用例需要同时满足两个条件：(1)等待检查时长-Tx1的执行时间-Tx2的执行时间……-Txk的执行时间>0；(2)等待检查时长-Tx1的执行时间-Tx2的执行时间……-Txk的执行时间-Tx(k+1)的执行时间<0。

需要说明的是，作为一种优选方式，第四自动化测试用例可以按照执行时间从小到大排列后依次执行。

步骤S250，当达到等待检查时长时，将检查脚本分配至目标测试系统，以使目标测试系统执行检查脚本。

本发明实施例提供的上述自动化测试用例处理方法，通过将预设类型的第三自动化测试用例进行拆分，在检查脚本执行之前等待待检查数据期间，将测试系统用于其他非预设类型的自动化测试用例的执行，从而使测试系统的系统资源得以充分利用，进而提高了自动化测试的运行效率。

在本实施例中，为了避免因环境添加操作和环境释放操作失败而导致未分配自动化测试用例中的其他测试用例因为相同的原因执行失败，本发明实施例还提供了一种自动化测试用例处理方法，请参照图8，图8示出了本发明实施例提供的另一种自动化测试用例处理方法的流程图，该方法包括以下步骤：

步骤S310，接收测试系统中任一测试系统反馈的当前自动化测试用例执行失败的测试结果，其中，测试结果中包括失败原因。

在本实施例中，当任一测试系统执行完其当前的自动化测试用例后，都会向服务器10反馈该自动化测试用例的测试结果，服务器10根据自动化测试用例的测试结果更新该自动化用例的基本信息及时长数据库表，当测试结果为执行失败时，测试结果中还携带有失败原因。造成自动化测试用例执行失败的原因主要有三种：(1)自动化测试用例的环境添加操作执行失败；(2)自动化测试用例的用例执行操作执行失败；(3)自动化测试用例的环境释放操作执行失败。其中，原因(1)和原因(3)很大概率是测试系统的环境本身出现异常导致的。

步骤S320，若失败原因为环境添加操作执行失败或者环境释放操作执行失败时，获取未分配自动化测试用例中模块类型与当前自动化测试用例的模块类型一致的目标测试用例，以使服务器将目标测试用例按照其顺序分配至测试系统中除反馈自动化测试用例执行失败的测试结果的测试系统之外的其余测试系统。

在本实施例中，为了避免测试系统的环境影响造成其他相同类型的自动化测试用例执行失败，将获取未分配自动化测试用例中模块类型与当前自动化测试用例的模块类型一致的目标测试用例挑选出来，作为一种具体实施方式，可以为目标测试用例设置一个预设标志，以使服务器10在分配目标测试用例时根据该预设标志将目标测试用例分配至测试系统中除反馈自动化测试用例执行失败的测试结果的测试系统之外的其余测试系统。

本发明实施例提供的上述自动化测试用例处理方法，在收到任一测试系统反馈的自动化测试用例失败时，通过将与执行失败的自动化测试用例相同的模块类型的目标测试用例挑选出来，以使服务器10将目标测试用例分配给测试系统中除反馈自动化测试用例执行失败的测试结果的测试系统之外的其余测试系统，避免了因环境添加操作和环境释放操作失败而导致未分配自动化测试用例中的其他测试用例因为相同的原因执行失败。

为了执行上述实施例及各个可能的实施方式中的相应步骤，下面给出一种自动化测试用例处理装置100的实现方式。请参照图9，图9示出了本发明实施例提供的自动化测试用例处理装置100的方框示意图。需要说明的是，本实施例所提供的自动化测试用例处理装置100，其基本原理及产生的技术效果和上述实施例相同，为简要描述，本实施例部分未提及指出。

自动化测试用例处理装置100包括获取模块110、排序模块120、分配模块130、合并模块140、拆分模块150及失败处理模块160。

获取模块110，用于获取多个待执行自动化测试用例及每一待执行自动化测试用例的执行时长，其中，待执行自动化测试用例的个数大于测试系统的个数。

排序模块120，用于按照每一待执行自动化测试用例的执行时长将多个待执行自动化测试用例从大到小排序。

分配模块130，用于按照排序后的待执行自动化测试用例的顺序为每一测试系统分别分配一个自动化测试用例，以使每一测试系统执行对应的自动化测试用例。

合并模块140，用于对排序后的待执行自动化测试用例中未分配自动化测试用例进行合并，以便服务器在任一测试系统执行完当前的自动化测试用例后继续按照合并后的未分配自动化测试用例的顺序进行分配。

作为一种实施方式，每一未分配自动化测试用例对应模块类型，模块类型用于表征对应的未分配自动化测试用例要测试的功能模块，每一未分配自动化测试用例包括环境添加操作、用例执行操作及环境释放操作，合并模块140具体用于：获取未分配自动化测试用例的模块类型；将未分配自动化测试用例中具有相同模块类型、相同环境添加操作、及相同环境释放操作的第一自动化测试用例合并为一个第二自动化测试用例，其中，第二自动化测试用例包括任意一个第一自动化测试用例的环境添加操作、任意一个第一自动化测试用例的环境释放操作及所有第一自动化测试用例的用例执行操作；用第二自动化测试用例替换执行时间最长的第一自动化测试用例；删除未分配自动化测试用例中第一自动化测试用例。

拆分模块150，用于：若未分配自动化测试用例中当前待分配的第三自动化测试用例的模块类型为预设类型，则将第三自动化测试用例拆分成配置脚本和检查脚本；获取第三自动化测试用例的等待检查时长；依据第三自动化测试用例的顺序将配置脚本后分配至对应的目标测试系统；从未分配自动化测试用例中依次选出预设个数的模块类型为非预设类型的第四自动化测试用例，并将第四自动化测试用例分配至目标测试系统，其中，预设个数的第四自动化测试用例的执行时间的总和小于等待检查时长；当达到等待检查时长时，将检查脚本分配至目标测试系统，以使目标测试系统执行检查脚本。

作为一种实施方式，第三自动化测试用例包括环境添加操作、用例执行操作及环境释放操作，拆分模块150具体用于：将第三自动化测试用例的环境添加操作和第三自动化测试用例的配置操作作为配置脚本；将第三自动化测试用例的检查操作和第三自动化测试用例的环境释放操作作为检查脚本。

失败处理模块160，用于：接收测试系统中任一测试系统反馈的当前自动化测试用例执行失败的测试结果，其中，测试结果中包括失败原因；若失败原因为环境添加操作执行失败或者环境释放操作执行失败时，获取未分配自动化测试用例中模块类型与当前自动化测试用例的模块类型一致的目标测试用例，以使服务器将目标测试用例按照其顺序分配至测试系统中除反馈自动化测试用例执行失败的测试结果的测试系统之外的其余测试系统。

本发明实施例还提供执行上述自动化测试用例处理装置100的服务器10的方框示意图，请参照图10，图10示出了本发明实施例提供的服务器10的方框示意图。服务器10包括存储器11、处理器12、总线13、通信接口14。存储器11、处理器12通过总线13连接。

服务器10可以是实体的计算机，也可以是能够实现与实体的计算机具有相同功能的虚拟主机或者虚拟服务器。

存储器11用于存储程序，例如上述的自动化测试用例处理装置100，该服务器10包括至少一个可以软件或固件(firmware)的形式存储于存储器11中的软件功能模块，处理器12在接收到执行指令后，执行所述程序以实现上述实施例揭示的自动化测试用例处理方法。

存储器11可能包括高速随机存取存储器(RAM：Random Access Memory)，也可能还包括非易失存储器(non-volatile memory)，例如至少一个磁盘存储器。可选地，存储器11可以是内置于处理器12中的存储装置，也可以是独立于处理器12的存储装置。

总线13可以是ISA总线、PCI总线或EISA总线等。图10仅用一个双向箭头表示，但并不表示仅有一根总线或一种类型的总线。

处理器12可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器12中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器12可以是通用处理器，包括中央处理器(Central Processing Unit，简称CPU)、网络处理器(Network Processor，简称NP)等；还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其它可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。

通过至少一个通信接口14(可以是有线或者无线)实现服务器10与测试系统的通信连接。

本发明实施例还提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现上述的自动化测试用例处理方法。

综上所述，本发明实施例提供一种自动化测试用例处理方法、装置、服务器及存储介质，应用于处理自动化测试用例的服务器，服务器与执行自动化用例的测试系统通信连接，所述方法包括：获取多个待执行自动化测试用例及每一待执行自动化测试用例的执行时长，其中，待执行自动化测试用例的个数大于测试系统的个数；按照每一待执行自动化测试用例的执行时长将多个待执行自动化测试用例从大到小排序；按照排序后的待执行自动化测试用例的顺序为每一测试系统分别分配一个自动化测试用例，以使每一测试系统执行对应的自动化测试用例；对排序后的待执行自动化测试用例中未分配自动化测试用例进行合并，以便服务器在任一测试系统执行完当前的自动化测试用例后继续按照合并后的未分配自动化测试用例的顺序进行分配。相对于现有技术，本发明通过按照执行时长对自动化测试用例进行排序后再依序分配至测试系统进行执行，使得自动化测试用例运行更均衡，测试资源的利用更充分，同时通过对自动化测试用例的合并，在不影响测试效果的情况下减少了自动化测试用例的数量，由此提高了自动化测试的运行效率。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到的变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以所述权利要求的保护范围为准。

Claims (9)

1.一种自动化测试用例处理方法，其特征在于，应用于处理所述自动化测试用例的服务器，所述服务器与执行所述自动化测试用例的测试系统通信连接，所述方法包括：

获取多个待执行自动化测试用例及每一待执行自动化测试用例的执行时长，其中，所述待执行自动化测试用例的个数大于所述测试系统的个数；

按照所述每一待执行自动化测试用例的执行时长将所述多个待执行自动化测试用例从大到小排序；

按照排序后的待执行自动化测试用例的顺序为每一所述测试系统分别分配一个自动化测试用例，以使每一所述测试系统执行对应的所述自动化测试用例；

对排序后的所述待执行自动化测试用例中未分配自动化测试用例进行合并，以便所述服务器在任一所述测试系统执行完当前的自动化测试用例后继续按照合并后的未分配自动化测试用例的顺序进行分配，每一所述未分配自动化测试用例对应模块类型，所述模块类型用于表征对应的未分配自动化测试用例要测试的功能模块，每一所述未分配自动化测试用例包括环境添加操作、用例执行操作及环境释放操作；

所述对排序后的所述待执行自动化测试用例中未分配自动化测试用例进行合并的步骤包括：

获取所述未分配自动化测试用例的模块类型；

将所述未分配自动化测试用例中具有相同模块类型、相同环境添加操作、及相同环境释放操作的第一自动化测试用例合并为一个第二自动化测试用例，其中，所述第二自动化测试用例包括任意一个所述第一自动化测试用例的环境添加操作、任意一个所述第一自动化测试用例的环境释放操作及所有所述第一自动化测试用例的用例执行操作；

用所述第二自动化测试用例替换执行时间最长的所述第一自动化测试用例；

删除所述未分配自动化测试用例中所述第一自动化测试用例。

2.如权利要求1所述的自动化测试用例处理方法，其特征在于，每一所述未分配自动化测试用例对应模块类型，所述模块类型用于表征对应的未分配自动化测试用例要测试的功能模块，所述方法还包括：

若所述未分配自动化测试用例中当前待分配的第三自动化测试用例的模块类型为预设类型，则将所述第三自动化测试用例拆分成配置脚本和检查脚本，所述预设类型为存储数据的完整性功能模块的模块类型；

获取所述第三自动化测试用例的等待检查时长；

依据所述第三自动化测试用例的顺序将所述配置脚本后分配至对应的目标测试系统；

从所述未分配自动化测试用例中依次选出预设个数的模块类型为非预设类型的第四自动化测试用例，并将所述第四自动化测试用例分配至所述目标测试系统，其中，所述预设个数的所述第四自动化测试用例的执行时间的总和小于所述等待检查时长；

当达到所述等待检查时长时，将所述检查脚本分配至所述目标测试系统，以使所述目标测试系统执行所述检查脚本。

3.如权利要求2所述的自动化测试用例处理方法，其特征在于，所述第三自动化测试用例包括环境添加操作、用例执行操作及环境释放操作，所述用例执行操作包括配置操作及检查操作，所述将所述第三自动化测试用例拆分成配置脚本和检查脚本的步骤包括：

将所述第三自动化测试用例的环境添加操作和所述第三自动化测试用例的配置操作作为所述配置脚本；

将所述第三自动化测试用例的检查操作和所述第三自动化测试用例的环境释放操作作为所述检查脚本。

4.如权利要求1所述的自动化测试用例处理方法，其特征在于，每一所述未分配自动化测试用例对应模块类型，所述模块类型用于表征该未分配自动化测试用例要测试的功能模块，所述方法还包括：

接收所述测试系统中任一测试系统反馈的当前自动化测试用例执行失败的测试结果，其中，所述测试结果中包括失败原因；

若所述失败原因为环境添加操作执行失败或者环境释放操作执行失败时，获取所述未分配自动化测试用例中模块类型与所述当前自动化测试用例的模块类型一致的目标测试用例，以使所述服务器将所述目标测试用例按照其顺序分配至所述测试系统中除反馈所述自动化测试用例执行失败的测试结果的测试系统之外的其余测试系统。

5.一种自动化测试用例处理装置，其特征在于，应用于处理所述自动化测试用例的服务器，所述服务器与执行所述自动化测试用例的测试系统通信连接，所述装置包括：

获取模块，用于获取多个待执行自动化测试用例及每一待执行自动化测试用例的执行时长，其中，所述待执行自动化测试用例的个数大于所述测试系统的个数；

排序模块，用于按照所述每一待执行自动化测试用例的执行时长将所述多个待执行自动化测试用例从大到小排序；

分配模块，用于按照排序后的待执行自动化测试用例的顺序为每一所述测试系统分别分配一个自动化测试用例，以使每一所述测试系统执行对应的所述自动化测试用例；

合并模块，用于对排序后的所述待执行自动化测试用例中未分配自动化测试用例进行合并，以便所述服务器在任一所述测试系统执行完当前的自动化测试用例后继续按照合并后的未分配自动化测试用例的顺序进行分配，每一所述未分配自动化测试用例对应模块类型，所述模块类型用于表征对应的未分配自动化测试用例要测试的功能模块，每一所述未分配自动化测试用例包括环境添加操作、用例执行操作及环境释放操作；

所述合并模块具体用于：获取所述未分配自动化测试用例的模块类型；将所述未分配自动化测试用例中具有相同模块类型、相同环境添加操作、及相同环境释放操作的第一自动化测试用例合并为一个第二自动化测试用例，其中，所述第二自动化测试用例包括任意一个所述第一自动化测试用例的环境添加操作、任意一个所述第一自动化测试用例的环境释放操作及所有所述第一自动化测试用例的用例执行操作；用所述第二自动化测试用例替换执行时间最长的所述第一自动化测试用例；删除所述未分配自动化测试用例中所述第一自动化测试用例。

6.如权利要求5所述的自动化测试用例处理装置，其特征在于，每一所述未分配自动化测试用例对应模块类型，所述模块类型用于表征对应的未分配自动化测试用例要测试的功能模块，所述装置还包括拆分模块，所述拆分模块用于：

若所述未分配自动化测试用例中当前待分配的第三自动化测试用例的模块类型为预设类型，则将所述第三自动化测试用例拆分成配置脚本和检查脚本，所述预设类型为存储数据的完整性功能模块的模块类型；

获取所述第三自动化测试用例的等待检查时长；

依据所述第三自动化测试用例的顺序将所述配置脚本后分配至对应的目标测试系统；

从所述未分配自动化测试用例中依次选出预设个数的模块类型为非预设类型的第四自动化测试用例，并将所述第四自动化测试用例分配至所述目标测试系统，其中，所述预设个数的所述第四自动化测试用例的执行时间的总和小于所述等待检查时长；

当达到所述等待检查时长时，将所述检查脚本分配至所述目标测试系统，以使所述目标测试系统执行所述检查脚本。

7.如权利要求5所述的自动化测试用例处理装置，其特征在于，每一所述未分配自动化测试用例对应模块类型，所述模块类型用于表征该未分配自动化测试用例要测试的功能模块，所述装置还包括失败处理模块，所述失败处理模块用于：

接收所述测试系统中任一测试系统反馈的当前自动化测试用例执行失败的测试结果，其中，所述测试结果中包括失败原因；

若所述失败原因为环境添加操作执行失败或者环境释放操作执行失败时，获取所述未分配自动化测试用例中模块类型与所述当前自动化测试用例的模块类型一致的目标测试用例，以使所述服务器将所述目标测试用例按照其顺序分配至所述测试系统中除反馈所述自动化测试用例执行失败的测试结果的测试系统之外的其余测试系统。

8.一种服务器，其特征在于，所述服务器包括：

一个或多个处理器；

存储器，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如权利要求1-4中任一项所述的自动化测试用例处理方法。

9.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该计算机程序被处理器执行时实现如权利要求1-4中任一项所述的自动化测试用例处理方法。

Images