CN112925721A - 一种分布式系统的测试方法及装置 - Google Patents

Abstract

本发明公开了一种分布式系统的测试方法及装置，涉及大数据技术领域。该方法的一具体实施方式包括：获取测试文件，所述测试文件包括多个测试任务；利用分布式系统运行所述测试文件，使得所述分布式系统根据所述测试文件执行测试任务；根据测试参数，调节执行测试任务的执行参数；根据测试任务的执行结果，对所述分布式系统的性能进行测试。该实施方式对分布式系统的批处理执行效率、批处理一致性服务可用性和负载均衡能力等多种性能进行测试，从而有利于提高分布式系统的运维能力，有利于提高分布式系统的运行效率。

Description

一种分布式系统的测试方法及装置

技术领域

本发明涉及大数据技术领域，尤其涉及一种分布式系统的测试方法及装置。

背景技术

分布式系统可将巨大的算力分解成许多小的部分，并使用多个算力节点进行并行处理，从而解决单机算力的瓶颈问题。

然而，目前缺乏对分布式系统的服务可用性和负载均衡能力等方面的测试手段，从而导致采用分布式系统批量执行任务时，若某个服务发生故障或者超时处理，需要采用人工方式定位问题，再重新执行批处理任务，这降低了分布式系统的运行效率。

发明内容

有鉴于此，本发明实施例提供一种分布式系统的测试方法及装置，能够根据测试文件，对分布式系统的批处理执行效率、服务可用性和负载均衡能力等多种性能进行测试，从而有利于提高分布式系统的运维能力，有利于提高分布式系统的运行效率。

为实现上述目的，根据本发明实施例的一个方面，提供了一种分布式系统的测试方法。

本发明实施例的一种分布式系统的测试方法包括：获取测试文件，所述测试文件包括多个测试任务；

利用分布式系统运行所述测试文件，使得所述分布式系统根据所述测试文件执行测试任务；

根据测试参数，调节执行测试任务的执行参数；

根据测试任务的执行结果，对所述分布式系统的性能进行测试。

可选地，根据所述执行结果所指示的任务执行时长，对所述分布式系统的批处理执行效率进行测试。

可选地，在执行所述测试任务时，监控所述分布式系统中以下任意一个或多个参数：的CPU运行状态、内存状态、磁盘输入输出状态和网络吞吐量；根据监控结果，确定所述任务执行时长，以测试所述分布式系统中服务器资源利用率。

可选地，在执行所述测试任务时，对所述分布系统的调度参数进行调节，使得所述分布式系统根据所述调度参数执行所述测试任务，以根据所述执行结果所指示的任务执行时长，对所述分布式系统的调度策略进行测试。

可选地，在执行所述测试任务时，对所述测试任务的并发数量进行调节，以根据所述执行结果所指示的任务执行时长，测试所述分布式系统所采用的算法。

可选地，通过调用链记录所述分布式系统的任务执行状态；

根据所述任务执行状态，确定所述分布式系统中多个服务之间的调用关系；

根据所述调用关系，确定所述分布式系统的内部执行效率。

可选地，所述测试文件还指示了虚拟调用系统；

根据所述测试参数，调用所述虚拟调用系统，以执行所述测试任务；

根据所述测试任务的执行结果，测试所述分布式系统的外联执行效率。

可选地，采用mockserver的方式调用所述虚拟调用系统。

可选地，调节所述虚拟调用系统的延迟时长；

确定所述分布式系统是否在所述延迟时长内接收到针对所述虚拟调用系统的调用反馈，以测试所述分布式系统的外联执行效率。

可选地，所述测试参数指示了服务异常指令；

根据所述服务异常指令，将所述分布式系统中的待测试服务进行异常处理，并监控异常处理后所述待测试服务的运行状态；所述异常处理包括以下任意一种或多种：服务进程消失、挂起、宕机和网络中断；

根据所述运行状态，测试所述分布式系统的应用服务可用性。

可选地，所述测试文件包括文件系统测试脚本；

根据所述文件系统测试脚本，对所述分布式系统的文件系统进行异常处理，并监控异常处理后所述文件系统的运行状态；所述异常处理包括以下任意一种或多种：挂起、只读和空间不足；

根据所述运行状态，测试所述分布式系统的文件系统可用性。

可选地，所述测试参数指示了节点异常指令；

根据所述节点异常指令，将所述分布式系统中的分布式节点进行异常处理，并监控异常处理后所述分布式节点的运行状态；

根据所述运行状态，测试所述分布式系统的节点可用性。

可选地，所述测试参数指示了超时参数；

根据所述超时参数，生成超时测试任务；

执行所述超时测试任务，并确定所述分布式系统中是否仅有一个应用服务执行所述超时测试任务，以对所述分布式系统的批处理一致性进行测试。

可选地，根据所述执行结果指示的所述分布式系统中的分布式节点的负载状态，测试所述分布式系统的负载均衡能力。

可选地，根据所述测试参数，对所述分布式系统的均衡算法函数进行调节，以对均衡算法进行测试。

可选地，所述测试任务为批处理任务；

根据所述执行结果指示的执行所述批处理任务时的资源使用结果，测试所述分布式系统的负载能力。

为实现上述目的，根据本发明实施例的又一方面，提供了一种分布式系统的测试装置。

本发明实施例的一种分布式系统的测试装置包括：获取模块、运行模块和测试模块；其中，

所述获取模块，用于获取测试文件，所述测试文件包括多个测试任务；

所述运行模块，用于利用分布式系统运行所述测试文件，使得所述分布式系统根据所述测试文件执行测试任务；

所述测试模块，用于根据测试参数，调节执行测试任务的执行参数，并根据测试任务的执行结果，对所述分布式系统的性能进行测试。

为实现上述目的，根据本发明实施例的又一方面，提供了一种测试分布式系统的电子设备。

本发明实施例的一种测试分布式系统的电子设备包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现本发明实施例的一种分布式系统的测试方法。

为实现上述目的，根据本发明实施例的再一方面，提供了一种计算机可读存储介质。

本发明实施例的一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现本发明实施例的一种分布式系统的测试方法。

上述发明中的一个实施例具有如下优点或有益效果：利用分布式系统运行包括多个测试任务的测试文件，使得分布式系统根据测试文件执行测试任务，并根据测试参数，调节执行测试任务过程中的执行参数，以根据测试任务的执行结果，对分布式系统的批处理执行效率、批处理一致性服务可用性和负载均衡能力等多种性能进行测试，从而有利于提高分布式系统的运维能力，有利于提高分布式系统的运行效率。

上述的非惯用的可选方式所具有的进一步效果将在下文中结合具体实施方式加以说明。

附图说明

附图用于更好地理解本发明，不构成对本发明的不当限定。其中：

图1是根据本发明实施例的一种分布式系统的测试方法的主要步骤的示意图；

图2是根据本发明实施例的一种分布式系统的任务执行架构示意图；

图3是根据本发明实施例的一种分布式系统中服务调用关系的示意图；

图4是根据本发明实施例的一种分布式系统的测试装置的主要模块的示意图；

图5是本发明实施例可以应用于其中的示例性系统架构图；

图6是适于用来实现本发明实施例的终端设备或服务器的计算机系统的结构示意图。

具体实施方式

以下结合附图对本发明的示范性实施例做出说明，其中包括本发明实施例的各种细节以助于理解，应当将它们认为仅仅是示范性的。因此，本领域普通技术人员应当认识到，可以对这里描述的实施例做出各种改变和修改，而不会背离本发明的范围和精神。同样，为了清楚和简明，以下的描述中省略了对公知功能和结构的描述。

需要指出的是，在不冲突的情况下，本发明的实施例以及实施例中的技术特征可以相互结合。

图1是根据本发明实施例的一种分布式系统的测试方法的主要步骤的示意图。

如图1所示，本发明实施例的一种分布式测试系统的测试方法主要包括以下步骤：

步骤S101：获取测试文件，所述测试文件包括多个测试任务。

步骤S102：利用分布式系统运行所述测试文件，使得所述分布式系统根据所述测试文件执行测试任务。

步骤S103：根据测试参数，调节执行测试任务的执行参数。

步骤S104：根据测试任务的执行结果，对所述分布式系统的性能进行测试。

在本发明实施例中，对分布式系统的性能测试包括对其批处理下的运行效率、服务可用性、批处理数据一致性和负载均衡能力等多种性能进行测试。

在本发明一个实施例中，可根据所述执行结果所指示的任务执行时长，对所述分布式系统的批处理执行效率进行测试，以测试分布式系统中并行批处理效率指标。

在执行测试任务时，可采用如图2所示的分布式系统的任务执行架构来执行测试任务。其中，分布式系统中的资源监控服务可监控分布式系统中各个计算单元的资源使用情况，包括CPU、内存、磁盘IO以及网络等资源情况。任务编排可以将批处理的任务进行设计后，发送给调度集群。调度集群接收到任务后，进行任务拆解成具体步骤，并根据资源监控服务的监控数据，将步骤发送到不同类型的计算集群上。计算节点在执行已拆解的步骤。

对分布式系统的批处理执行效率时，主要考察分布式系统的批处理整体的执行时长是否满足需求设置值，其主要包括几个方面的测试：服务器资源利用率、调度策略、分布式系统所采用的算法、批处理内部执行效率、批处理外联执行效率。

具体地，在本发明一个实施方式中，在执行所述测试任务时，监控所述分布式系统中以下任意一个或多个参数：的CPU运行状态、内存状态、磁盘输入输出状态和网络吞吐量，以对服务器资源进行监控，然后根据监控结果，确定所述任务执行时长，以测试所述所述分布式系统中服务器资源利用率。

另外，在本发明一个实施方式中，在执行所述测试任务时，对所述分布系统的调度参数进行调节，使得所述分布式系统根据所述调度参数执行所述测试任务，以根据所述执行结果所指示的任务执行时长，对所述分布式系统的调度策略进行测试。具体地，在测试调度策略时，对调度参数进行模拟，然后根据返回值验证任务执行时长是否满足需求设置值，以对调度策略进行验证。

在本发明一个实施方式中，在测试算法时，可采用采用黑盒策略，通过整体发压的方式进行测试，通过对算法以及调度参数的微调，观察整体执行时间，例如，可通过测调节测试任务的并发数量来调节分布式系统所承受的压力，然后根据测试任务的执行结果所指示的任务执行时长，测试所述分布式系统所采用的算法。

由于在分布式环境下，存在多个服务之间的RPC调用，为了对分布式系统的性能进行全面测试，在本发明一个实施例中，还对分布式系统的内部执行效率进行测试，具体地，通过调用链记录所述分布式系统的任务执行状态；根据所述任务执行状态，确定所述分布式系统中多个服务之间的调用关系；根据所述调用关系，确定所述分布式系统的内部执行效率。

分布式系统中多个服务之间的调用关系可如图3所示，通过引入调用链，以通过一个唯一ID将单个测试任务的执行过程记录下来，以对测试任务执行过程中多个服务之间的调用关系进行记录，并分别记录每个服务的耗时，该耗时包括各个服务的执行时间，还包括各个服务的通信时间，以测试执行测试任务所消耗的总时长是否满足需求设置值，从而对分布式系统的批处理内部执行效率进行测试。服务调用链监控的主要目的是在系统出现问题时帮助进行问题诊断，调用链监控不仅仅包含了各个服务的执行时间，还包含应用与应用的通信时间，能够反应最真实的系统处理时间，利于系统问题诊断另外，图3所示的调用关系还可以进行可视化展示，以便于测试人员了解测试情况。

在分布式系统中，出来内部服务之间的调用以外，可能还会涉及本服务与外部服务之间的调用，为了测试分布式系统的批处理外联执行效率，在本发明一个实施例中，所述测试文件还指示了虚拟调用系统；根据所述测试参数，调用所述虚拟调用系统，以执行所述测试任务；根据所述测试任务的执行结果，测试所述分布式系统的外联执行效率。

具体地，可采用mockserver的方式调用所述虚拟调用系统，并通过设定延迟的方式，模拟真实的外联操作，在测试时，可通过调节所述虚拟调用系统的延迟时长；确定所述分布式系统是否在所述延迟时长内接收到针对所述虚拟调用系统的调用反馈，以测试所述分布式系统的外联执行效率。由于在分布式系统的实际运行过程中，调用外部服务时需要一定的响应时间，即调用外服服务需有所延迟后才能响应，因此，为了更真实地模拟外联操作，本发明实施例通过设定延迟的方式，即通过mockserver的方式模拟虚拟的外部调用系统后，设定相应的延迟时长，从而更准确地测试分布式系统的批处理外联执行效率。

另外，为了对分布式系统的批处理服务在部分服务故障后的恢复能力进行测试，可以从软件服务角度，对应用服务可用性、基础组件可用性、数据库可用性和文件系统可用性等可用性进行测试。

在本发明一个实施例中，所述测试参数指示了服务异常指令；根据所述服务异常指令，将所述分布式系统中的待测试服务进行异常处理，并监控异常处理后所述待测试服务的运行状态；所述异常处理包括以下任意一种或多种：服务进程消失、挂起、宕机和网络中断；根据所述运行状态，测试所述分布式系统的应用服务可用性。由此，通过系统命令的方式，模拟生产环境出现的各种异常情况，对待测服务进行服务进程消失、挂起、宕机、网络中断测试，目的是检测当异常产生时，分布式批处理系统是否还可以继续运行。

另外，所述测试文件包括文件系统测试脚本；根据所述文件系统测试脚本，对所述分布式系统的文件系统进行异常处理，并监控异常处理后所述文件系统的运行状态；所述异常处理包括以下任意一种或多种：挂起、只读和空间不足；根据所述运行状态，测试所述分布式系统的文件系统可用性。由此，通过脚本方式模拟文件系统挂起、只读、空间不足，测试当文件系统出现故障后，分布式批处理服务是否可以继续运行。

此外，分布式系统从地域角度可分为双中心可用性、灾备可用性，在本发明一个实施例中，所述测试参数指示了节点异常指令；根据所述节点异常指令，将所述分布式系统中的分布式节点进行异常处理，并监控异常处理后所述分布式节点的运行状态；根据所述运行状态，测试所述分布式系统的节点可用性。由此，可通过系统命令模拟多个节点出现异常情况，目的是检测当异常发生时，分布式批处理系统是否可以继续运行。

进一步地，还可通过数据一致性测试验证分布式系统的批处理服务在多节点间的数据同步能力。具体地，在本发明一个实施例中，所述测试参数指示了超时参数；根据所述超时参数，生成超时测试任务；执行所述超时测试任务，并确定所述分布式系统中是否仅有一个应用服务执行所述超时测试任务，以对所述分布式系统的批处理一致性进行测试。

分布式批处理服务，需要保障最终一致性。在多个应用服务对同一资源进行处理时，需要确保只被消费一次。测试方法为正常进行任务执行，期间模拟超时情况，当超时后进行任务重试。验证方法为在代码中添加日志以及数据库流水记录。在测试过程中，可以通过应用服务的日志执行内容，以及数据库的执行记录来进行一致性测试验证。

此外，还可通过负载均衡测试验证分布式批处理服务的横向扩展能力，在本发明一个实施例中，根据所述执行结果指示的所述分布式系统中的分布式节点的负载状态，测试所述分布式系统的负载均衡能力。具体地，可以根据所述测试参数，对所述分布式系统的均衡算法函数进行调节，以对均衡算法进行测试。还可以根据所述执行结果指示的执行所述批处理任务时的资源使用结果，测试所述分布式系统的负载能力。

分布式批处理服务负载均衡测试，需要验证各个类型的集群节点资源分布均匀，这样可以保障更有效、合理的利用服务器资源。在对分布式系统的负载均衡能力进行测试时，可通过两个阶段进行：第一阶段采用白盒测试方法，对均衡算法函数进行白盒测试，通过输入不同的参数，模拟负载情况，验证输出结果的正确性；第二阶段采用黑盒测试方法，通过执行大量的批处理任务进行，观察整体资源使用情况，验证最终的正确性。通过白盒测试方法，可以精准模拟各种正常、异常的情况，检查负载均衡策略是否有效，避免遗漏情况产生。

根据本发明实施例的一种分布式系统的测试方法可以看出，利用分布式系统运行包括多个测试任务的测试文件，使得分布式系统根据测试文件执行测试任务，并根据测试参数，调节执行测试任务过程中的执行参数，以根据测试任务的执行结果，对分布式系统的批处理执行效率、批处理一致性服务可用性和负载均衡能力等多种性能进行测试，从而有利于提高分布式系统的运维能力，有利于提高分布式系统的运行效率。

图4是根据本发明实施例的一种分布式系统的测试装置的主要模块的示意图。

如图4所示，本发明实施例的一种分布式系统的测试装置400包括：获取模块401、运行模块402和测试模块403；其中，

所述获取模块401，用于获取测试文件，所述测试文件包括多个测试任务；

所述运行模块402，用于利用分布式系统运行所述测试文件，使得所述分布式系统根据所述测试文件执行测试任务；

所述测试模块403，用于根据测试参数，调节执行测试任务的执行参数，并根据测试任务的执行结果，对所述分布式系统的性能进行测试。

在本发明一个实施例中，所述测试模块403，根据所述执行结果所指示的任务执行时长，对所述分布式系统的批处理执行效率进行测试。

在本发明一个实施例中，所述测试模块403，在执行所述测试任务时，监控所述分布式系统中以下任意一个或多个参数：的CPU运行状态、内存状态、磁盘输入输出状态和网络吞吐量；根据监控结果，确定所述任务执行时长，以测试所述所述分布式系统中服务器资源利用率。

在本发明一个实施例中，所述测试模块403，在执行所述测试任务时，对所述分布系统的调度参数进行调节，使得所述分布式系统根据所述调度参数执行所述测试任务，以根据所述执行结果所指示的任务执行时长，对所述分布式系统的调度策略进行测试。

在本发明一个实施例中，所述测试模块403，在执行所述测试任务时，对所述测试任务的并发数量进行调节，以根据所述执行结果所指示的任务执行时长，测试所述分布式系统所采用的算法。

在本发明一个实施例中，所述测试模块403，通过调用链记录所述分布式系统的任务执行状态；根据所述任务执行状态，确定所述分布式系统中多个服务之间的调用关系；根据所述调用关系，确定所述分布式系统的内部执行效率。

在本发明一个实施例中，所述测试模块403，所述测试文件还指示了虚拟调用系统；根据所述测试参数，调用所述虚拟调用系统，以执行所述测试任务；根据所述测试任务的执行结果，测试所述分布式系统的外联执行效率。

在本发明一个实施例中，所述测试模块403，采用mockserver的方式调用所述虚拟调用系统。

在本发明一个实施例中，所述测试模块403，调节所述虚拟调用系统的延迟时长；确定所述分布式系统是否在所述延迟时长内接收到针对所述虚拟调用系统的调用反馈，以测试所述分布式系统的外联执行效率。

在本发明一个实施例中，所述测试模块403，所述测试参数指示了服务异常指令；根据所述服务异常指令，将所述分布式系统中的待测试服务进行异常处理，并监控异常处理后所述待测试服务的运行状态；所述异常处理包括以下任意一种或多种：服务进程消失、挂起、宕机和网络中断；根据所述运行状态，测试所述分布式系统的应用服务可用性。

在本发明一个实施例中，所述测试模块403，所述测试文件包括文件系统测试脚本；根据所述文件系统测试脚本，对所述分布式系统的文件系统进行异常处理，并监控异常处理后所述文件系统的运行状态；所述异常处理包括以下任意一种或多种：挂起、只读和空间不足；根据所述运行状态，测试所述分布式系统的文件系统可用性。

在本发明一个实施例中，所述测试模块403，所述测试参数指示了节点异常指令；根据所述节点异常指令，将所述分布式系统中的分布式节点进行异常处理，并监控异常处理后所述分布式节点的运行状态；根据所述运行状态，测试所述分布式系统的节点可用性。

在本发明一个实施例中，所述测试模块403，所述测试参数指示了超时参数；根据所述超时参数，生成超时测试任务；执行所述超时测试任务，并确定所述分布式系统中是否仅有一个应用服务执行所述超时测试任务，以对所述分布式系统的批处理一致性进行测试。

在本发明一个实施例中，所述测试模块403，根据所述执行结果指示的所述分布式系统中的分布式节点的负载状态，测试所述分布式系统的负载均衡能力。

在本发明一个实施例中，所述测试模块403，根据所述测试参数，对所述分布式系统的均衡算法函数进行调节，以对均衡算法进行测试。

在本发明一个实施例中，所述测试模块403，所述测试任务为批处理任务；根据所述执行结果指示的执行所述批处理任务时的资源使用结果，测试所述分布式系统的负载能力。

根据本发明实施例的一种分布式系统的测试装置可以看出，利用分布式系统运行包括多个测试任务的测试文件，使得分布式系统根据测试文件执行测试任务，并根据测试参数，调节执行测试任务过程中的执行参数，以根据测试任务的执行结果，对分布式系统的批处理执行效率、批处理一致性服务可用性和负载均衡能力等多种性能进行测试，从而有利于提高分布式系统的运维能力，有利于提高分布式系统的运行效率。

图5示出了可以应用本发明实施例的一种分布式系统的测试方法或分布式系统的测试装置的示例性系统架构500。

如图5所示，系统架构500可以包括终端设备501、502、503，网络504和服务器505。网络504用以在终端设备501、502、503和服务器505之间提供通信链路的介质。网络504可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。

用户可以使用终端设备501、502、503通过网络504与服务器505交互，以接收或发送消息等。终端设备501、502、503上可以安装有各种通讯客户端应用，例如购物类应用、网页浏览器应用、搜索类应用、即时通信工具、邮箱客户端、社交平台软件等。

终端设备501、502、503可以是具有显示屏并且支持网页浏览的各种电子设备，包括但不限于智能手机、平板电脑、膝上型便携计算机和台式计算机等等。

服务器505可以是提供各种服务的服务器，例如对用户利用终端设备501、502、503所浏览的购物类网站提供支持的后台管理服务器。后台管理服务器可以对接收到的产品信息查询请求等数据进行分析等处理，并将处理结果(例如目标推送信息、产品信息)反馈给终端设备。

需要说明的是，本发明实施例所提供的分布式系统的测试方法一般由服务器505执行，相应地，分布式系统的测试装置一般设置于服务器505中。

应该理解，图5中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要，可以具有任意数目的终端设备、网络和服务器。

下面参考图6，其示出了适于用来实现本发明实施例的终端设备的计算机系统600的结构示意图。图6示出的终端设备仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图6所示，计算机系统600包括中央处理单元(CPU)601，其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中，还存储有系统600操作所需的各种程序和数据。CPU 601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。

以下部件连接至I/O接口605：包括键盘、鼠标等的输入部分606；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分607；包括硬盘等的存储部分608；以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器610上，以便于从其上读出的计算机程序根据需要被安装入存储部分608。

特别地，根据本发明公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本发明公开的实施例包括一种计算机程序产品，其包括承载在计算机可读介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分609从网络上被下载和安装，和/或从可拆卸介质611被安装。在该计算机程序被中央处理单元(CPU)601执行时，执行本发明的系统中限定的上述功能。

需要说明的是，本发明所示的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本发明中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本发明中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、RF等等，或者上述的任意合适的组合。

附图中的流程图和框图，图示了按照本发明各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

描述于本发明实施例中所涉及到的模块可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的模块也可以设置在处理器中，例如，可以描述为：一种处理器包括获取模块、运行模块和测试模块。其中，这些模块的名称在某种情况下并不构成对该模块本身的限定，例如，获取模块还可以被描述为“获取测试文件的模块”。

作为另一方面，本发明还提供了一种计算机可读介质，该计算机可读介质可以是上述实施例中描述的设备中所包含的；也可以是单独存在，而未装配入该设备中。上述计算机可读介质承载有一个或者多个程序，当上述一个或者多个程序被一个该设备执行时，使得该设备包括：获取测试文件，所述测试文件包括多个测试任务；利用分布式系统运行所述测试文件，使得所述分布式系统根据所述测试文件执行测试任务；根据测试参数，调节执行测试任务的执行参数；根据测试任务的执行结果，对所述分布式系统的性能进行测试。

根据本发明实施例的技术方案，利用分布式系统运行包括多个测试任务的测试文件，使得分布式系统根据测试文件执行测试任务，并根据测试参数，调节执行测试任务过程中的执行参数，以根据测试任务的执行结果，对分布式系统的批处理执行效率、批处理一致性服务可用性和负载均衡能力等多种性能进行测试，从而有利于提高分布式系统的运维能力，有利于提高分布式系统的运行效率。

上述具体实施方式，并不构成对本发明保护范围的限制。本领域技术人员应该明白的是，取决于设计要求和其他因素，可以发生各种各样的修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等，均应包含在本发明保护范围之内。

Claims (19)

1.一种分布式系统的测试方法，其特征在于，

获取测试文件，所述测试文件包括多个测试任务；

利用分布式系统运行所述测试文件，使得所述分布式系统根据所述测试文件执行测试任务；

根据测试参数，调节执行测试任务的执行参数；

根据测试任务的执行结果，对所述分布式系统的性能进行测试。

2.根据权利要求1所述的方法，其特征在于，

根据所述执行结果所指示的任务执行时长，对所述分布式系统的批处理执行效率进行测试。

3.根据权利要求2所述的方法，其特征在于，

在执行所述测试任务时，监控所述分布式系统中以下任意一个或多个参数：的CPU运行状态、内存状态、磁盘输入输出状态和网络吞吐量；

根据监控结果，确定所述任务执行时长，以测试所述分布式系统中服务器资源利用率。

4.根据权利要求2所述的方法，其特征在于，

在执行所述测试任务时，对所述分布系统的调度参数进行调节，使得所述分布式系统根据所述调度参数执行所述测试任务，以根据所述执行结果所指示的任务执行时长，对所述分布式系统的调度策略进行测试。

5.根据权利要求2所述的方法，其特征在于，

在执行所述测试任务时，对所述测试任务的并发数量进行调节，以根据所述执行结果所指示的任务执行时长，测试所述分布式系统所采用的算法。

6.根据权利要求2所述的方法，其特征在于，

通过调用链记录所述分布式系统的任务执行状态；

根据所述任务执行状态，确定所述分布式系统中多个服务之间的调用关系；

根据所述调用关系，确定所述分布式系统的内部执行效率。

7.根据权利要求2所述的方法，其特征在于，所述测试文件还指示了虚拟调用系统；

根据所述测试参数，调用所述虚拟调用系统，以执行所述测试任务；

根据所述测试任务的执行结果，测试所述分布式系统的外联执行效率。

8.根据权利要求7所述的方法，其特征在于，

采用mockserver的方式调用所述虚拟调用系统。

9.根据权利要求7所述的方法，其特征在于，

调节所述虚拟调用系统的延迟时长；

确定所述分布式系统是否在所述延迟时长内接收到针对所述虚拟调用系统的调用反馈，以测试所述分布式系统的外联执行效率。

10.根据权利要求1所述的方法，其特征在于，所述测试参数指示了服务异常指令；

根据所述服务异常指令，将所述分布式系统中的待测试服务进行异常处理，并监控异常处理后所述待测试服务的运行状态；所述异常处理包括以下任意一种或多种：服务进程消失、挂起、宕机和网络中断；

根据所述运行状态，测试所述分布式系统的应用服务可用性。

11.根据权利要求1所述的方法，其特征在于，所述测试文件包括文件系统测试脚本；

根据所述文件系统测试脚本，对所述分布式系统的文件系统进行异常处理，并监控异常处理后所述文件系统的运行状态；所述异常处理包括以下任意一种或多种：挂起、只读和空间不足；

根据所述运行状态，测试所述分布式系统的文件系统可用性。

12.根据权利要求1所述的方法，其特征在于，所述测试参数指示了节点异常指令；

根据所述节点异常指令，将所述分布式系统中的分布式节点进行异常处理，并监控异常处理后所述分布式节点的运行状态；

根据所述运行状态，测试所述分布式系统的节点可用性。

13.根据权利要求1所述的方法，其特征在于，所述测试参数指示了超时参数；

根据所述超时参数，生成超时测试任务；

执行所述超时测试任务，并确定所述分布式系统中是否仅有一个应用服务执行所述超时测试任务，以对所述分布式系统的批处理一致性进行测试。

14.根据权利要求1所述的方法，其特征在于，

根据所述执行结果指示的所述分布式系统中的分布式节点的负载状态，测试所述分布式系统的负载均衡能力。

15.根据权利要求14所述的方法，其特征在于，

根据所述测试参数，对所述分布式系统的均衡算法函数进行调节，以对均衡算法进行测试。

16.根据权利要求14所述的方法，其特征在于，所述测试任务为批处理任务；

根据所述执行结果指示的执行所述批处理任务时的资源使用结果，测试所述分布式系统的负载能力。

17.一种分布式系统的测试装置，其特征在于，包括：获取模块、运行模块和测试模块；其中，

所述获取模块，用于获取测试文件，所述测试文件包括多个测试任务；

所述运行模块，用于利用分布式系统运行所述测试文件，使得所述分布式系统根据所述测试文件执行测试任务；

所述测试模块，用于根据测试参数，调节执行测试任务的执行参数，并根据测试任务的执行结果，对所述分布式系统的性能进行测试。

18.一种测试分布式系统的电子设备，其特征在于，包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-16中任一所述的方法。

19.一种计算机可读介质，其上存储有计算机程序，其特征在于，所述程序被处理器执行时实现如权利要求1-16中任一所述的方法。

Images