CN102567172A - 用于应用性能测试的并行工作负荷仿真方法和系统 - Google Patents

Abstract

本发明涉及用于应用性能测试的并行工作负荷仿真方法和系统。本发明的各实施例提供了用于进行应用性能测试的并行工作负荷仿真的方法、系统和计算机程序产品。在本发明的一个实施例中，提供了用于进行应用性能测试的并行工作负荷仿真的方法。该方法包括将接受测试的计算应用的不同的任务的记录的工作负荷的列表加载到存储器中由主机计算机的至少一个处理器执行的工作负荷仿真器中。该方法还包括按共同的任务将记录的工作负荷分组在对应的块中。最后，该方法包括从分组的工作负荷生成用于模仿接受测试的计算应用的性能的负载，以便需要按照在公共块中出现的顺序串行地执行公共块中的工作负荷，但要允许不同的块中的工作负荷并行执行。

Description

用于应用性能测试的并行工作负荷仿真方法和系统

技术领域

本发明涉及应用性能测试(application performance testing)，尤其涉及用于应用性能测试的工作负荷仿真(workload simulation)。

背景技术

在软件工程中，性能测试确定计算系统的某个方面在特定工作负荷集合下执行有多快。性能测试还证实和验证计算系统的其他属性，例如，计算系统的可缩放性、可靠性以及资源使用率。重要的是，在某些情况下，对计算系统的性能测试旨在表明计算系统符合时常由最终用户所指定的特定性能标准。在其他情况下，性能测试还测量计算系统的使计算系统表现得差的那些段。在后一种情况下，仿形工具识别计算系统的与差的性能关系最大的那些部分。

工作负荷仿真构成了性能测试的不可分割的组成部分。在工作负荷仿真中，生成不同的工作负荷，并交由计算系统执行，以便模仿计算系统将操作的条件。为确保仿真的准确性，工作负荷仿真常常是静态地构建的。为便于构建工作负荷仿真方案，可以根据对应用的脚本化的刺激集合，记录计算应用(computing application)的操作。随后，可以回放计算应用的记录的操作，并测量计算应用的性能。值得注意的是，已经开发了图形工具，以允许对工作负荷仿真中要使用的工作负荷进行图形编辑。

工作负荷仿真已经被证实对于对分布式应用-特别是涉及瘦Web客户端的Web应用-进行性能测试是高度有效的。然而，胖客户端的回潮现在基本上允许更加复杂的工作负荷处理，并使使用传统的记录加回放方法的工作负荷仿真复杂化。在这方面，胖客户端可以同时处理多个不同的任务，且每一任务都可以顺次地生成多个请求。任务可以彼此独立地执行，或者也可以彼此合作地执行。任务还可以并行地执行。然而，从工作负荷仿真的观点来看，不同的任务的请求只是彼此相互混合，不管发端任务是什么。

传统上，为解决一个客户机中的来自不同的任务的请求的相互混合，创建循环以包括选定的请求以便确保后续的请求在客户机中被允许产生之前满足所选定的请求。但是，在工作负荷仿真期间建立循环，是进行请求生成的人工排序。当然，在工作负荷仿真期间使用循环会阻止客户机中的任务的执行的并行性，从而破坏工作负荷仿真的完整性。

发明内容

本发明的各实施例解决当前技术的在工作负荷仿真方面的缺陷，并提供用于进行应用性能测试的并行工作负荷仿真的新颖而非显而易见的方法、系统和计算机程序产品。在本发明的一个实施例中，提供了用于进行应用性能测试的并行工作负荷仿真的方法。该方法包括将接受测试的计算应用的不同任务的记录的工作负荷的列表加载到由主机计算机的至少一个处理器在存储器中执行的工作负荷仿真器中。该方法还包括按共同的任务将记录的工作负荷分组在对应的块中。最后，该方法包括从分组的工作负荷生成用于模仿接受测试的计算应用的性能的负载，使得需要按照在公共块中出现的顺序串行地执行公共块中的工作负荷，但允许不同的块中的工作负荷并行执行。

在实施例的一方面，可以在各块之间建立同步点。此后，在负载生成期间，块中的在同步点之前出现的所有工作负荷需要在允许执行在同步点之后出现的块的工作负荷之前执行。在实施例的另一方面，记录的工作负荷是超文本传输协议(HTTP)请求。如此，按共同的任务将记录的工作负荷分组在对应的块中可以包括相应地为不同的任务中的每一个标识HTTP请求之中的不同的字符串，将共享不同的字符串中的共同的字符串的每一个HTTP请求放在公共块中。另外，也可以将依赖于来自前面执行的HTTP请求的结果的每一HTTP请求放在公共块中。

在本发明的另一实施例中，可以配置性能测试数据处理系统用于并行工作负荷仿真。该系统可以包括带有存储器和至少一个处理器主机计算机和在主机计算机中执行的操作系统。该系统还可以包括由操作系统主管的工作负荷仿真器。工作负荷仿真器可以包括负载记录器、负载编辑器和负载生成器中的每一个。最后，块标识模块可以耦合到负载编辑器。该模块可以包括程序代码，用于将由负载记录器为接受测试的计算应用的不同的任务记录的诸如HTTP请求之类的工作负荷列表加载到工作负荷仿真器中，并按共同的任务将记录的工作负荷分组在对应的块中。

在随后的描述中将阐述本发明的其他方面，经过描述，这些方面将变清楚，也可以通过本发明的实践来了解。本发明的各方面将通过在所附权利要求书中特别指出的元素和组合来实现和获得。应该理解，前面的一般性的说明和下面的详细描述只是示例性的和说明性的，不会对如权利要求所述的本发明形成限制。

附图说明

本说明书收入的并构成本说明书的一部分的附图示出了本发明的各实施例，与说明书一起，用于说明本发明的原理：此处所示出的实施例目前是优选的，然而，可以理解，本发明不仅限于所示出的精确的配置和方法，其中：

图1是用于应用性能测试的并行工作负荷仿真的过程的图形例示；

图2是被配置成用于并行工作负荷仿真的性能测试数据处理系统的示意图；以及

图3是示出了用于应用性能测试的并行工作负荷仿真的过程的流程图。

具体实施方式

本发明的各实施例提供了用于应用性能测试的并行工作负荷仿真。根据本发明的一实施例，对不同的任务的不同的请求可以累积在工作负荷仿真器中。共同对单一任务的请求可以按顺序接收在一个块中分组在一起。此后，负载生成器可以根据不同的块的请求生成负载，使得公用块内的请求按照由公用块规定的顺序执行，但是，不同的块的请求并行地执行。如此，在来自单一计算设备内的不同的任务的请求的并行工作负荷仿真期间，可以避免来自不同的任务的请求的任意和人工的排序。

在进一步的例示中，图1以图形方式描绘了用于应用性能测试的并行工作负荷仿真的过程。如图1所示，性能测试系统110可以记录计算应用中的不同的并行地执行的任务的一系列工作负荷130。并行任务分组逻辑120可以处理工作负荷130，以将共同的任务的工作负荷分组在并行块140A、140B、140C中。进一步地，并行块140A、140B、140C中的选定的块可以分组在共同的容器160中。工作负荷130对每一任务的被记录的顺序可以保留在并行块140A、140B、140C的对应的块中。然而，对共同的容器160中的并行块140A、140B、140C中的选定块没有提供特定顺序，但是，可以保留多个不同的容器160的排序。值得注意的是，可以在并行块140A、140B、140C之间提供同步点150，以确保并行块140A、140B、140C中的各块中的相应的任务的所有工作负荷130在同步点150之前完成。

在工作负荷130自动化并行分组到并行块140A、140B、140C中的相应的块之后，负载生成器170可以根据并行块140A、140B、140C中的工作负荷130的分组，在性能测试系统110中生成用于模仿计算应用的性能的负载。负载的生成可以强迫并行块140A、140B、140C和任何同步点150的排序约束，同时允许同一个容器160内的并行块140A、140B、140C中的不同的块中的不同的任务的工作负荷130的并行执行。

可以在性能测试数据处理系统内实现结合图1所描述的过程。在进一步的例示中，图2是被配置成用于并行工作负荷仿真的性能测试数据处理系统的示意图。该系统可以包括带有存储器220和至少一个处理器230两者的主机计算机210(为便于说明，只示出了一个处理器)。操作系统240可以由处理器230中的一个或多个在主机计算机210的存储器220中执行。操作系统240可以主管被配置成生成不同的工作负荷并将所生成的工作负荷交由接受测试的计算应用执行的工作负荷仿真器250的操作，以便模仿接受测试的计算应用将操作的条件。

为此，工作负荷仿真器250可以耦合到负载记录器260、负载编辑器270和负载生成器280。负载记录器260可以在接受测试的计算应用的执行期间记录由该接受测试的计算应用所产生的工作负荷。例如，在SOA环境中，工作负荷可以包括对服务的请求。由此，那些请求可以是用于处理在唯一网络地址可访问的SOA环境中的不同的远程执行的服务的超文本传输协议(HTTP)请求。负载编辑器270又可以提供图形用户界面(GUI)，通过该图形用户界面，可以查看、编辑并存储记录的负载，供负载生成器280进行处理。负载生成器280可以处理存储的记录和编辑的负载的集合，以便生成一组负载，交由接受测试的计算应用执行，以便模仿接受测试的计算应用的性能。

值得注意的是，块标识模块300可以耦合到负载编辑器270。块标识模块300可以包括程序代码，所述程序代码用于根据对应的并行块内的共同的任务，为接受测试的计算应用的不同的任务分组工作负荷，如为接受测试的计算应用的不同的任务所记录的HTTP请求。分组可以通过将每一个工作负荷与其它工作负荷进行比较以标识共同的元素来执行。例如，在HTTP请求的情况下，对同一个任务的请求可以共享HTTP请求的诸如共同的标识符之类的公共部分。可任选地，可以通过将依赖于另一个工作负荷的每一个工作负荷放在同一个并行块来执行附加的分组。一旦工作负荷被分组到对应的任务的并行块中，可以将分组的工作负荷传递到负载生成器280，供负载生成器280生成用于在工作负荷仿真器250中模仿接受测试的计算应用的工作负荷。

在块标识模块300的操作的更进一步的例示中，图3是示出了用于进行应用性能测试的并行工作负荷仿真的过程的流程图。从框310开始，可以加载接受测试的计算应用的记录的对不同任务的HTTP请求的列表，在框320中，可以加载分别与不同任务相对应的不同的字符串标识符。在框330中，可以为不同的字符串标识符中的每一个唯一字符串标识符创建并行块。最后，在框340中，可以根据对应的字符串标识符，将记录的HTTP请求分类到不同的并行块中，以便每一并行块只包含那些共享相同字符串标识符的请求。

如本领域技术人员所理解的，本发明的各方面可以作为系统、方法或计算机程序产品来实现。因此，本发明的各方面可以呈现此处可以一般性地被称为“电路”、“模块”或“系统”的完全是硬件实施例、完全是软件实施例(包括固件、常驻软件，微代码等等)或组合了软件和硬件方面的实施例。此外，本发明的各方面还可以呈现以在其上体现了计算机可读程序代码的一个或多个计算机可读介质体现的计算机程序产品的形式。

可以使用一个或多个计算机可读介质的任何组合。计算机可读介质可以是计算机可读信号介质或计算机可读存储介质。计算机可读介质可以是，例如，但不仅限于，电、磁、光、电磁、红外、或半导体系统、装置、或设备或前面的各项的任何合适的组合。更具体的计算机可读介质的示例(非穷尽列表)包括下列各项：具有一个或多个导线的电连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或闪存)、光纤、便携式致密盘只读存储器(CD-ROM)、光存储设备、磁存储设备，或前面的各项的任何合适的组合。在此文档的上下文中，计算机可读存储介质可以是可以包含、存储供指令执行系统、设备使用或与它们一起使用的程序的任何有形的介质。

计算机可读信号介质可以包括其中带有计算机可读程序代码的传播的数据信号，例如，无论是在基带中，还是作为载波的一部分。这样的传播的信号可以呈现各种形式中的任何一种形式，包括，但不仅限于，电磁、光学或其任何合适的组合。计算机可读信号介质可以是不是计算机可读存储介质，并且能够传递、传播或传输供指令执行系统、设备或装置使用或与它们结合使用的程序的任何计算机可读介质。

在计算机可读介质上体现的程序代码可以使用任何合适的介质进行传输，包括，但不仅限于无线、有线线路、光缆、射频(RF)等等，或前面的各项的任何合适的组合。用于执行本发明的各方面的操作的计算机程序代码可以以一种或多种编程语言的任何组合来进行编写，包括面向对象编程语言，以及常规过程编程语言。程序代码可以作为独立软件包完全在用户的计算机上，部分地在用户的计算机上执行，部分地在用户的计算机上并且部分地在远程计算机上执行，或者完全在远程计算机或服务器上执行。在后一种情况下，远程计算机可以通过任何网络类型连接到用户的计算机，包括局域网(LAN)或广域网(WAN)，或者可以连接到外部计算机(例如，使用因特网服务提供商，通过因特网)。

上文参考根据本发明的各实施例的方法、设备(系统)、以及计算机程序产品的流程图例示和/或框图描述了本发明的方面。关于这一点，图中的流程图和框图示出了根据本发明的各个实施例的系统、方法和计算机程序产品的可能的实现的体系结构、功能，以及操作。例如，流程图或框图中的每一个框都可以代表包括用于实现指定的逻辑功能的一个或多个可执行的指令的一个模块、一段、或代码部分。还应注意，在某些替代实现中，在框中所指出的功能可以不按照图中所说明的顺序发生。例如，依次显示的两个框可以，事实上，基本上同时地执行，或者，取决于涉及的功能，各框有时也可以按相反的顺序执行。还应该注意，框图和/或流程图例示的每一个框，以及框图和/或流程图例示中的框的组合，可以通过执行指定的功能或操作，或专用硬件以及计算机指令的组合的基于专用硬件的系统来实现。

还可以理解，流程图例示和/或框图的每一框，流程图例示和/或框图中的框的组合，都可以通过计算机程序指令来实现。这些计算机程序指令可以被提供给通用计算机、专用计算机，或其他可编程数据处理设备的处理器，以产生机器，以便通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在该流程图和/或框图框所指定的功能的装置。

这些计算机程序指令还可以存储在计算机可读介质中，该介质可以指示计算机或其他可编程数据处理设备或其他设备以特定方式运转，以便存储在计算机可读介质中的指令产生一种包括了指令的产品，这些指令实现了在该流程图和/或框图框所指定的功能/动作。计算机程序指令还可以加载到计算机、其他可编程数据处理设备，或其他设备中，以使一系列操作步骤在计算机上、其他可编程设备上或其他设备上执行，以产生计算机实现的过程，以便在计算机或其他可编程设备上执行的指令提供用于实现在流程图和/或框图框所指定的功能/动作的过程。

最后，此处所使用的术语只是为了描述特定实施例，而不对本发明作出限制。如此处所使用的，单数形式“一个”也包括复数形式，除非上下文明确地指出。还应该进一步理解，本说明中所使用的术语“包括”，表示指定的特点、整数、步骤、操作、元素和/或组件的存在，但是，不排除一个或多个其他特点、整数、步骤、操作、元素、组件或其组合的存在或添加。

下面的权利要求中的所有装置或步骤加功能元件的对应的结构、材料、操作，以及等效的东西计划包括用于与专门主张的其他主张的元件相结合地执行功能的任何结构、材料或操作。对本发明的描述只作公开，而不是穷尽的公开或限于所公开的形式。本领域的技术人员将认识到，在不偏离本发明的范围和精神的情况下，可以进行各种修改。所选择的实施例只是为了最好地说明本发明的原理和实际应用，并使其他本领域技术人员懂得，带有各种修改的各种实施例也是可以接受的。

如此，参考本申请的实施例详细地描述了本发明，显然，在不偏离如下的所附权利要求书所定义的本发明的范围的情况下，可以进行各种修改。

Claims (14)

1.一种用于应用性能测试的并行工作负荷仿真的方法，所述方法包括以下步骤：

将接受测试的计算应用的不同任务的记录的工作负荷的列表加载到由主机计算机的至少一个处理器在存储器中执行的工作负荷仿真器中；

按共同的任务将记录的工作负荷分组在对应的块中；以及，

从分组的工作负荷生成用于仿真接受测试的计算应用的性能的负载，使得需要按照在公共块中出现的顺序串行地执行公共块中的工作负荷，但允许不同的块中的工作负荷并行执行。

2.如权利要求1所述的方法，还包括：

在各块之间设置同步点；以及，

在负载生成期间，在同步点之前出现的块中的所有工作负荷需要在允许执行在同步点之后出现的块的工作负荷之前执行。

3.如权利要求1所述的方法，其中，所述记录的工作负荷是超文本传输协议(HTTP)请求。

4.如权利要求1所述的方法，其中，按共同的任务将所述记录的工作负荷分组在对应的块中的步骤包括：

相应地为不同的任务中的每一个标识HTTP请求之中的不同的字符串；以及，

将共享不同的字符串中的共同的字符串的每一个HTTP请求放在公共块中。

5.如权利要求4所述的方法，其中，还包括将依赖于来自前面执行的HTTP请求的结果的每一HTTP请求放在公共块中。

6.如权利要求1所述的方法，还包括将选定块分组在共同的容器中，在所述容器中来自不同的块的工作负荷在负载生成期间并行地执行。

7.一种性能测试数据处理系统，被配置成用于并行工作负荷仿真，所述系统包括：

带有存储器和至少一个处理器的主机计算机；

在所述主机计算机中执行的操作系统；

由所述操作系统主管的工作负荷仿真器，所述工作负荷仿真器包括负载记录器、负载编辑器和负载生成器中的每一个；以及，

耦合到所述负载编辑器的块标识模块，所述模块包括程序代码，用于将由所述负载记录器为接受测试的计算应用的不同的任务记录的工作负荷列表加载到所述工作负荷仿真器中，并按共同的任务将所述记录的工作负荷分组在对应的块中。

8.如权利要求7所述的系统，其中，所述记录的工作负荷是超文本传输协议(HTTP)请求。

9.一种用于应用性能测试的并行工作负荷仿真的系统，包括：

用于将接受测试的计算应用的不同任务的记录的工作负荷的列表加载到由主机计算机的至少一个处理器在存储器中执行的工作负荷仿真器中的装置；

用于按共同的任务将记录的工作负荷分组在对应的块中的装置；以及，

用于从分组的工作负荷生成用于仿真接受测试的计算应用的性能的负载，从而需要按照在公共块中出现的顺序串行地执行公共块中的工作负荷，但允许不同的块中的工作负荷并行执行的装置。

10.如权利要求9所述的系统，还包括：

用于在各块之间设置同步点的装置；以及，

用于在负载生成期间，在同步点之前出现的块中的所有工作负荷需要在允许执行在同步点之后出现的块的工作负荷之前执行的装置。

11.如权利要求10所述的系统，其中，所述记录的工作负荷是超文本传输协议(HTTP)请求。

12.如权利要求10所述的系统，其中，用于按共同的任务将所述记录的工作负荷分组在对应的块中的装置包括：

用于相应地为不同任务中的每一个识别HTTP请求之中的不同的字符串的装置；以及，

用于将共享不同的字符串中的共同的字符串的每一个HTTP请求放在公共块中的装置。

13.如权利要求12所述的系统，其中，还包括用于将依赖于来自前面执行的HTTP请求的结果的每一HTTP请求放在公共块中的装置。

14.如权利要求9所述的系统，还包括用于将选定块分组在共同的容器中的装置，在所述容器中来自不同的块的工作负荷在负载生成期间并行地执行。

Images