CN114880182B - 监控平台测试方法、装置、电子设备和可读存储介质 - Google Patents

Abstract

本公开提供一种监控平台测试方法、装置以及电子设备和计算机可读存储介质，涉及计算机与互联网技术领域，该监控平台测试方法包括：获取至少一个压力测试指标；根据至少一个压力测试指标生成至少一个压力测试曲线；根据至少一个压力测试曲线对目标系统加压，目标系统的资源使用情况同时被目标系统中的目标监控平台和标准压力监控工具监控，标准压力监控工具的监控精准度高于目标监控平台；获取目标监控平台在加压过程中针对目标系统的目标监控数据和标准压力监控工具在加压过程中针对目标系统的标准监控数据；将目标监控数据与标准监控数据进行比对，以测试目标监控平台的监控能力。本公开实施例能够高效且准确的对目标监控平台进行测试。

Description

监控平台测试方法、装置、电子设备和可读存储介质

技术领域

本公开涉及计算机与互联网技术领域，尤其涉及一种监控平台测试方法及装置、电子设备和计算机可读存储介质。

背景技术

为监控目标系统的运行状态、记录资源的使用情况，目标系统内部会安装有监控平台。监控平台负责监控目标系统的计算资源、存储资源、网络资源，并对异常情况发出告警信息。监控平台包含有各个时段的各项指标数据，反馈目标系统的运行状态，资源调度情况。准确、实时的监控数据可以为目标系统的平稳安全运行提供保障，也为资源调度策略提供了依据。

由于目标系统同时存在计算、存储、网络等资源的使用等复杂情况，这给合理评估监控平台的能力带来困难。

需要说明的是，在上述背景技术部分公开的信息仅用于加强对本公开的背景的理解。

发明内容

本公开的目的在于提供一种监控平台测试方法、装置、电子设备以及计算机可读存储介质，可以高效且准确的对目标系统的监控平台的监控精准度进行评估测试。

本公开的其他特性和优点将通过下面的详细描述变得显然，或部分地通过本公开的实践而习得。

本公开实施例提供了一种监控平台测试方法，包括：获取至少一个压力测试指标；根据所述至少一个压力测试指标生成至少一个压力测试曲线；根据所述至少一个压力测试曲线对目标系统加压，所述目标系统的资源使用情况同时被目标系统中的目标监控平台和标准压力监控工具监控，所述标准压力监控工具的监控精准度高于所述目标监控平台；获取所述目标监控平台在加压过程中针对所述目标系统的目标监控数据和所述标准压力监控工具在加压过程中针对所述目标系统的标准监控数据；将所述目标监控数据与所述标准监控数据进行比对，以测试所述目标监控平台的监控能力。

在一些实施例中，所述至少一个压力测试指标包括第一压力测试指标和第二压力测试指标；其中，根据所述至少一个压力测试指标生成至少一个压力测试曲线，包括：获取所述第一压力测试指标对应的第一压力测试曲线类型和所述第二压力测试指标对应的第二压力测试曲线类型；根据所述第一压力测试曲线类型生成所述第一压力测试指标对应的第一压力测试曲线；根据所述第二压力测试曲线类型生成所述第二压力测试指标对应的第二压力测试曲线；其中，根据所述至少一个压力测试曲线对目标系统加压，包括：根据所述第一压力测试曲线和所述第二压力测试曲线对所述目标系统进行加压，以便所述目标监控平台和所述标准压力监控工具在所述目标系统在加压过程获得所述目标监控数据和所述标准监控数据。

在一些实施例中，所述方法还包括：获取目标系统在目标业务场景下的目标业务数据；对所述目标业务数据进行解析以获得所述第一压力测试指标及所述第一压力测试指标对应的第一压力测试曲线类型、所述第二压力测试指标及所述第二压力测试指标对应的所述第二压力测试曲线类型。

在一些实施例中，所述目标系统是云系统，所述云系统包括至少一个云资源池，所述至少一个云资源池包括第一云资源池和第二云资源池；其中，根据所述至少一个压力测试曲线对目标系统加压，包括：根据所述至少一个压力曲线对所述第一云资源池进行加压；根据所述至少一个压力曲线对所述第二云资源池进行加压；其中，所述目标监控数据包括第一目标监控数据和第二目标监控输数据，所述标准监控数据包括第一标准监控数据和第二标准监控数据；其中，获取所述目标监控平台在加压过程中针对所述目标系统的目标监控数据和所述标准压力监控工具在加压过程中针对所述目标系统的标准监控数据，包括：获取所述目标监控平台针对所述云系统中的第一资源池的所述第一目标监控数据；获取所述目标监控平台针对所述云系统中的第一资源池的所述第一目标标准监控数据，以便将所述第一目标监控数据和所述第一标准监控数据进行比对，以测试所述目标监控平台针对所述第一资源池的监控能力；获取所述目标监控平台针对所述云系统中的第二资源池的所述第二目标监控数据；获取所述目标监控平台针对所述云系统中的第二资源池的所述第二目标标准监控数据，以便将所述第二目标监控数据和所述第二标准监控数据进行比对，以测试所述目标监控平台针对所述第二资源池的监控能力。

在一些实施例中，获取所述目标监控平台在加压过程中针对所述目标系统的目标监控数据和所述标准压力监控工具在加压过程中针对所述目标系统的标准监控数据，包括：获取所述目标监控平台在加压过程中按照预设频率对所述目标系统进行监控后获得的所述目标监控数据；获取所述标准压力监控工具在加压过程中按照所述预设频率对所述目标系统进行监控后获得的所述标准监控数据；其中，将所述目标监控数据与所述标准监控数据进行比对，以测试所述目标监控平台的监控能力，包括：确定所述目标监控数据与所述标准监控数据之间的欧拉距离、KL散度以及均值差，以测试所述目标监控平台的监控能力。

本公开实施例提供了一种监控平台测试系统，包括：自动化测试平台、系统状态监控模块、场景压力组合模块、场景模拟加压工具和自动化测试平台。

其中，所述自动化测试平台用于接收测试参数，在接收到所述测试参数时调用系统状态监控模块并将所述测试参数发送给场景压力组合模块，所述测试参数包括至少一个压力测试指标、各个压力测试指标对应的压力测试曲线类型；所述系统状态监控模块用于响应于所述自动化测试平台的调用，调用标准压力监控工具，以便通过所述标准压力监控工具对目标系统进行监控；所述场景压力组合模块用于根据所述至少一个压力测试指标、各个压力测试指标对应的压力测试曲线类型为每个压力测试指标分别对应生成一个压力测试曲线，并将至少一个压力测试曲线发送给场景模拟加压工具；所述场景模拟加压工具用于根据所述至少一个压力测试曲线对所述目标系统进行加压处理；所述自动化测试平台还用于接收所述目标系统中的目标监控平台针对所述目标系统进行监控的目标监控数据，并获取所述标准压力监控工具针对所述目标监控系统进行监控的标准监控数据，并将所述目标监控数据和所述标准监控数据进行比对以测试所述目标监控平台的监控能力。

在一些实施例中，所述自动化测试平台在调用所述系统状态监控模块时会同时发生所述至少一个压力测试指标，所述至少一个压力测试指标包括第一压力测试指标和第二压力测试指标，所述标准压力监控工具包括第一标准压力监控工具和第二标准压力测试工具；其中，系统状态监控模块响应于所述自动化测试平台的调用，调用标准压力监控工具，以便通过所述标准压力监控工具对目标系统进行监控，包括：系统状态监控模块响应于所述自动化测试平台的调用，调用所述第一压力测试指标对应的所述第一标准压力监控工具以便通过所述第一标准压力监控工具对所述目标系统的第一压力测试进行监控，并调用所述第二压力测试指标对应的所述第二标准压力监控工具以便通过所述第二标准压力监控工具对所述目标系统的第二压力测试进行监控。

本公开实施例提供了一种监控平台测试装置，包括：压力测试指标获取模块、测试曲线获取模块、加压模块、监控数据获取模块和监控数据比对模块。

其中，所述压力测试指标获取模块用于获取至少一个压力测试指标；所述测试曲线获取模块可以用于根据所述至少一个压力测试指标生成至少一个压力测试曲线；所述加压模块可以用于根据所述至少一个压力测试曲线对目标系统加压，所述目标系统的资源使用情况同时被目标系统中的目标监控平台和标准压力监控工具监控，所述标准压力监控工具的监控精准度高于所述目标监控平台；所述监控数据获取模块可以用于获取所述目标监控平台在加压过程中针对所述目标系统的目标监控数据和所述标准压力监控工具在加压过程中针对所述目标系统的标准监控数据；

所述监控数据比对模块可以用于将所述目标监控数据与所述标准监控数据进行比对，以测试所述目标监控平台的监控能力。

本公开实施例提出一种电子设备，该电子设备包括：一个或多个处理器；存储装置，用于存储一个或多个程序，当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现上述任一项所述的监控平台测试方法。

本公开实施例提出一种计算机可读存储介质，其上存储有计算机程序，所述程序被处理器执行时实现如上述任一项所述的监控平台测试方法。

本公开实施例提出一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述监控平台测试方法。

本公开实施例提供的监控平台测试方法、装置及电子设备和计算机可读存储介质，能够将不同的压力测试指标进行组合以便从不同的角度对目标系统进行加压，进而从不同的角度对目标系统进行测试，然后通过标准压力监控工具对目标监控平台的监控结果进行评估，从而对监控平台的性能进行全面且准确的评估。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。显而易见地，下面描述中的附图仅仅是本公开的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1示出了可以应用于本公开实施例的监控平台测试方法或监控平台测试装置的示例性系统架构的示意图。

图2是根据一示例性实施例示出的一种监控平台测试方法的流程图。

图3是根据一示例性实施例示出的一种监控平台测试方法的流程图。

图4是根据一示例性实施例示出的一种场景模拟加压工具的加压过程示意图。

图5是根据一示例性实施例示出的一种监控平台测试方法的流程图。

图6是根据一示例性实施例示出的一种监控平台测试方法的流程图。

图7是根据一示例性实施例示出的一种监控平台测试系统。

图8是根据一示例性实施例示出的一种监控平台测试方法。

图9是根据一示例性实施例示出的一种监控数据评估模块的数据评估过程的示意图。

图10是根据一示例性实施例示出的一种监控平台测试装置的框图。

图11示出了适于用来实现本公开实施例的的电子设备的结构示意图。

具体实施方式

现在将参考附图更全面地描述示例实施例。然而，示例实施例能够以多种形式实施，且不应被理解为限于在此阐述的实施例；相反，提供这些实施例使得本公开将全面和完整，并将示例实施例的构思全面地传达给本领域的技术人员。在图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。

本公开所描述的特征、结构或特性可以以任何合适的方式结合在一个或更多实施方式中。在下面的描述中，提供许多具体细节从而给出对本公开的实施方式的充分理解。然而，本领域技术人员将意识到，可以实践本公开的技术方案而省略特定细节中的一个或更多，或者可以采用其它的方法、组元、装置、步骤等。在其它情况下，不详细示出或描述公知方法、装置、实现或者操作以避免模糊本公开的各方面。

附图仅为本公开的示意性图解，图中相同的附图标记表示相同或类似的部分，因而将省略对它们的重复描述。附图中所示的一些方框图不一定必须与物理或逻辑上独立的实体相对应。可以采用软件形式来实现这些功能实体，或在一个或多个硬件模块或集成电路中实现这些功能实体，或在不同网络和/或处理器装置和/或微控制器装置中实现这些功能实体。

附图中所示的流程图仅是示例性说明，不是必须包括所有的内容和步骤，也不是必须按所描述的顺序执行。例如，有的步骤还可以分解，而有的步骤可以合并或部分合并，因此实际执行的顺序有可能根据实际情况改变。

在本申请的描述中，除非另有说明，“/”表示“或”的意思，例如，A/B可以表示A或B。本文中的“和/或”仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。此外，“至少一个”是指一个或多个，“多个”是指两个或两个以上。“第一”、“第二”等字样并不对数量和执行次序进行限定，并且“第一”、“第二”等字样也并不限定一定不同；用语“包含”、“包括”和“具有”用以表示开放式的包括在内的意思并且是指除了列出的要素/组成部分/等之外还可存在另外的要素/组成部分/等；

为了能够更清楚地理解本发明的上述目的、特征和优点，下面结合附图和具体实施方式对本发明进行进一步的详细描述，需要说明的是，在不冲突的情况下，本申请的实施例及实施例中的特征可以相互组合。

下面结合附图对本公开示例实施方式进行详细说明。

图1示出了可以应用于本公开实施例的监控平台测试方法或监控平台测试装置的示例性系统架构的示意图。

如图1所示，系统架构100可以包括终端设备101、102、103，网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型，例如有线、无线通信链路或者光纤电缆等等。

用户可以使用终端设备101、102、103通过网络104与服务器105交互，以接收或发送消息等。其中，终端设备101、102、103可以是具有显示屏并且支持网页浏览的各种电子设备，包括但不限于智能手机、平板电脑、膝上型便携计算机、台式计算机、可穿戴设备、虚拟现实设备、智能家居等等。

服务器105可以是提供各种服务的服务器，例如对用户利用终端设备101、102、103所进行操作的装置提供支持的后台管理服务器。后台管理服务器可以对接收到的请求等数据进行分析等处理，并将处理结果反馈给终端设备。

服务器可以是独立的物理服务器，也可以是多个物理服务器构成的服务器集群或者分布式系统，还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN(Content Delivery Network，内容分发网络)、以及大数据和人工智能平台等基础云计算服务的云服务器等，本公开对此不做限制。

服务器105可例如获取至少一个压力测试指标；服务器105可例如根据至少一个压力测试指标生成至少一个压力测试曲线；服务器105可例如根据至少一个压力测试曲线对目标系统加压，目标系统的资源使用情况同时被目标系统中的目标监控平台和标准压力监控工具监控，标准压力监控工具的监控精准度高于目标监控平台；服务器105可例如获取目标监控平台在加压过程中针对目标系统的目标监控数据和标准压力监控工具在加压过程中针对目标系统的标准监控数据；服务器105可例如将目标监控数据与标准监控数据进行比对，以测试目标监控平台的监控能力。

应该理解，图1中的终端设备、网络和服务器的数目仅仅是示意性的，服务器105可以是一个实体的服务器，还可以为多个服务器组成，根据实际需要，可以具有任意数目的终端设备、网络和服务器。

在上述系统架构下，本公开实施例中提供了一种监控平台测试方法，该方法可以由任意具备计算处理能力的电子设备执行。

图2是根据一示例性实施例示出的一种监控平台测试方法的流程图。本公开实施例所提供的方法可以由任意具备计算处理能力的电子设备来执行，例如该方法可以由上述图1实施例中的服务器或终端设备来执行，也可以由服务器和终端设备共同执行，在下面的实施例中，以服务器为执行主体为例进行举例说明，但本公开并不限定于此。

参照图2，本公开实施例提供的监控平台测试方法可以包括以下步骤。

步骤S202，获取至少一个压力测试指标。

在一些实施例中，上述压力测试指标可以指的是目标系统中与系统运行业务相关的一些指标，例如CPU利用率、内存利用率、网卡收发速率、磁盘读写速率、内存读写速率等。

获取至少一个压力测试指标可以指的是获取待测试的压力指标，该待测试的压力指标可以是一个也可以是多个(如图4中的压力测试指标组合)，本公开对此不做限制。例如，待测试的压力指标可以就是CPU利用率，也可以是CPU利用率和内存利用率等。

在一些实施例中，上述至少一个压力测试指标可以是用户随意指定的，也可以是根据目标系统的历史业务场景生成的。其中，根据目标系统的历史业务场景确定至少一个压力测试指标可以包括以下过程：获取目标系统在目标业务场景下的目标业务数据；对目标业务数据进行解析以获得第一压力测试指标及第一压力测试指标对应的第一压力测试曲线类型、第二压力测试指标及第二压力测试指标对应的第二压力测试曲线类型。

可以理解的是，上述根据历史业务场景确定的压力测试指标和压力测试曲线与目标系统过去一段时间内的实际压力指标和实际压力曲线是一致的，通过该第一压力测试曲线和第二压力测试曲线对目标系统进行施压可以使得目标系统的业务运转情况与实际最为相似，更加贴近实际情况。

步骤S204，根据至少一个压力测试指标生成至少一个压力测试曲线。

在一些实施例中，可以为每一个压力测试指标生成一个根据时间变化的压力测试曲线，该压力测试曲线可以是人为设定的无规则曲线、也可以是根据预先设置的曲线类型生成的有规则的曲线(如正弦曲线、余弦曲线等)。

步骤S206，根据至少一个压力测试曲线对目标系统加压，目标系统的资源使用情况同时被目标系统中的目标监控平台和标准压力监控工具监控，标准压力监控工具的监控精准度高于目标监控平台。

在一些实施例中，目标系统中可以设置有目标监控平台，以通过目标监控平台对目标系统中的相关数据进行监控。该目标监控平台可以是软件。

在一些实施例中，标准压力监控工具可以是一种监控精度远大于目标监控平台的监控工具，该标准压力监控工具可以是软件也可以是硬件，本申请对此不做限制。

在一些实施例中，至少一个压力测试指标可以对应同一个标准压力测试工具，在另外一些实施例中，不同的压力测试指标可以对应不同的标准压力监控工具，而由于每一个标准压力测试工具的监控精度比较高，因此占用的资源很大，因此不适合嵌入至目标系统中进行监控。

步骤S208，获取目标监控平台在加压过程中针对目标系统的目标监控数据和标准压力监控工具在加压过程中针对目标系统的标准监控数据。

步骤S210，将目标监控数据与标准监控数据进行比对，以测试目标监控平台的监控能力。

本实施例提供的技术方案，一方面可以通过至少一个压力测试指标对目标系统进行加压，不同的压力测试指标可以使得目标系统处于不同的加压环境下，使得目标监控平台能够对目标系统在不同业务环境下的工作状态进行监控；另一方面，本实施例通过将目标监控平台的监控数据与标准压力监控工具的监控数据进行比对以确定目标监控平台的监控能力。因此，本实施例提供的技术方案，可以高效且准确的对目标监控平台的监控能力进行评估。

图3是根据一示例性实施例示出的一种监控平台测试方法的流程图。

在一些实施例中，至少一个压力测试指标包括第一压力测试指标和第二压力测试指标。

参考图3，上述监控平台测试方法可以包括以下步骤。

步骤S302，获取至少一个压力测试指标，其中至少一个压力测试指标包括第一压力测试指标和第二压力测试指标。

步骤S304，获取第一压力测试指标对应的第一压力测试曲线类型和第二压力测试指标对应的第二压力测试曲线类型。

在一些实施例中，用户可以针对第一压力测试指标设置选择第一压力测试曲线类型，该第一压力测试曲线类型可以是图4中的恒定压力测试曲线、斜坡压力测试曲线、正弦波压力测试曲线、业务场景压力测试曲线，还可以是余弦波压力测试曲线、自定义压力测试曲线等，本公开对此不做限制。

其中，业务场景压力测试曲线可以指的是在历史业务场景中形成的测试曲线，自定义压力测试曲线可以指的是用户自己绘制的压力测试曲线，本公开对此不做限制。

步骤S306，根据第一压力测试曲线类型生成第一压力测试指标对应的第一压力测试曲线。

在一些实施例中，还可以获取第一压力测试指标对应的起始压力值和终止压力值等其他参数，以根据第一压力测试曲线和获取的其他参数生成第一压力测试指标对应的第一压力测试曲线。

步骤S308，根据第二压力测试曲线类型生成第二压力测试指标对应的第二压力测试曲线。

在一些实施例中，还可以获取第二压力测试指标对应的起始压力值和终止压力值等其他参数，以根据第二压力测试曲线和获取的其他参数生成第二压力测试指标对应的第二压力测试曲线。

步骤S310，根据第一压力测试曲线和第二压力测试曲线对目标系统进行加压。

在一些实施例中，可以根据第一压力测试曲线和第二压力测试曲线对目标系统进行加压，例如可以通过第三方的场景模拟加压工具对目标系统进行加压。

在一些实施例中，可以通过的场景模拟加压工具使得目标系统的第一压力测试指标按照第一压力测试曲线变化、使得目标系统的第二压力测试指标按照第二压力测试曲线变化。

步骤S312，获取目标监控平台在加压过程中针对目标系统的目标监控数据和标准压力监控工具在加压过程中针对目标系统的标准监控数据。

步骤S314，将目标监控数据与标准监控数据进行比对，以测试目标监控平台的监控能力。

本实施例提供的技术方案，可以根据用户设置的压力测试曲线类型为不同的压力测试指标生成不同压力测试曲线，以便对目标系统进行多角度、多情况的施压，以便目标监控平台能够对不同情况下的目标系统进行监控，以获得多种情况下的监控数据，进而使得对目标监控平台的测试更加准确。

图5是根据一示例性实施例示出的一种监控平台测试方法的流程图。

在一些实施例中，目标系统可以是云系统，该云系统中可以包括至少一个云资源池，该至少一个云资源池包括第一云资源池和第二云资源池。本实施例将以第一云资源池和第二云资源池为例对监控平台测试方法进行说明，但本公开并不限制于此。

在一些实施例中，目标监控数据可以包括第一目标监控数据和第二目标监控输数据，标准监控数据包括第一标准监控数据和第二标准监控数据。

参考图5，上述监控平台可以包括以下步骤。

步骤S502，获取至少一个压力测试指标。

步骤S504，根据至少一个压力测试指标生成至少一个压力测试曲线。

步骤S506，根据至少一个压力曲线对第一云资源池进行加压。

步骤S508，根据至少一个压力曲线对第二云资源池进行加压。

步骤S510，获取目标监控平台针对云系统中的第一资源池的第一目标监控数据。

步骤S512，获取目标监控平台针对云系统中的第一资源池的第一目标标准监控数据。

步骤S515，将第一目标监控数据和第一标准监控数据进行比对，以测试目标监控平台针对第一资源池的监控能力。

步骤S516，获取目标监控平台针对云系统中的第二资源池的第二目标监控数据。

步骤S518，获取目标监控平台针对云系统中的第二资源池的第二目标标准监控数据。

步骤S520，将第二目标监控数据和第二标准监控数据进行比对，以测试目标监控平台针对第二资源池的监控能力。

本实施例提供的技术方案，一方面可以对云系统中的资源池分别进行加压，丰富了目标系统所处的业务场景，使得目标监控平台的监控数据更加丰富；另一方面，本实施例可以对目标监控平台对资源池的监控能力进行测试，细化了测试能力，提供了测试精准度。

另外，本实施例可以对云系统中的资源池以及资源池内的云主机都进行遍历，确保云平台了的目标监控平台的准确性、稳定性、实时性，提高了测试效率与可操作性，使得能够对监控平台进行全方位的评估。

图6是根据一示例性实施例示出的一种监控平台测试方法的流程图。

参考图6所示实施例，上述监控平台测试可以包括以下步骤。

步骤S602，获取至少一个压力测试指标。

步骤S604，根据至少一个压力测试指标生成至少一个压力测试曲线。

步骤S606，根据至少一个压力测试曲线对目标系统加压，目标系统的资源使用情况同时被目标系统中的目标监控平台和标准压力监控工具监控，标准压力监控工具的监控精准度高于目标监控平台,。

步骤S608，获取目标监控平台在加压过程中按照预设频率对目标系统进行监控后获得的目标监控数据。

步骤S610，获取标准压力监控工具在加压过程中按照预设频率对目标系统进行监控后获得的标准监控数据。

步骤S612，确定目标监控数据与标准监控数据之间的欧拉距离、KL散度以及均值差，以测试目标监控平台的监控能力。

在一些实施例中，目标监控平台运行状态可以与其资源分配量正相关，需要优化监控平台的资源分配，平衡好资源占用量与监控效果。因此，当通过目标监控数据和标准监控数据的比对确定目标监控平台的监控精度超过一定的阈值，则减少目标系统为目标监控平台分配的资源；当通过目标监控数据和标准监控数据的比对确定目标监控平台的监控精度低于一定的阈值的话，则增加目标系统为目标监控平台分配的资源。

图7是根据一示例性实施例示出的一种监控平台测试系统。

参考图7所示实施例，上述监控平台测试系统可以包括：自动化测试平台、系统状态监控模块、场景压力组合模块、场景模拟加压工具和自动化测试平台。其中，自动化测试平台中包括监控数据评估模块。

其中，自动化测试平台用于接收测试参数，在接收到测试参数时调用系统状态监控模块并将测试参数发送给场景压力组合模块，测试参数包括至少一个压力测试指标、各个压力测试指标对应的压力测试曲线类型；系统状态监控模块用于响应于自动化测试平台的调用，调用标准压力监控工具，以便通过标准压力监控工具对目标系统进行监控；场景压力组合模块用于根据至少一个压力测试指标、各个压力测试指标对应的压力测试曲线类型为每个压力测试指标分别对应生成一个压力测试曲线，并将至少一个压力测试曲线发送给场景模拟加压工具；场景模拟加压工具用于根据至少一个压力测试曲线对目标系统进行加压处理；自动化测试平台中的监控数据评估模块用于接收目标系统中的目标监控平台针对目标系统进行监控的目标监控数据，并获取标准压力监控工具针对目标监控系统进行监控的标准监控数据，并将目标监控数据和标准监控数据进行比对以测试目标监控平台的监控能力。

在一些实施例中，自动化测试平台在调用系统状态监控模块时会同时发送至少一个压力测试指标，该至少一个压力测试指标可以包括第一压力测试指标和第二压力测试指标，标准压力监控工具可以包括第一标准压力监控工具和第二标准压力测试工具。那么，系统状态监控模块响应于自动化测试平台的调用，调用标准压力监控工具，以便通过标准压力监控工具对目标系统进行监控可以包括：系统状态监控模块响应于自动化测试平台的调用，调用第一压力测试指标对应的第一标准压力监控工具以便通过第一标准压力监控工具对目标系统的第一压力测试进行监控，并调用第二压力测试指标对应的第二标准压力监控工具以便通过第二标准压力监控工具对目标系统的第二压力测试进行监控。

在一些实施例中，图7所示系统中各个设备对应的功能还可以描述为：

自动化测试平台：发起测试的入口，在此定义测试的场景压力，并接收测试结果；

系统状态监控模块：根据测试需求调用标准压力监控工具；

标准压力监控工具：对应多种压力监控工具，该工具精度高但所需资源大，适用于测试而不适用于监控；

被测监控平台：云平台内部署的监控平台，用于监测云平台的计算、存储、网络资源的使用情况；

场景压力组合模块：根据组合场景调用对应的加压工具并生成对应的压力曲线；

场景模拟压力工具：可以实现多种类型的加压，根据压力曲线输出特定压力到云平台；

监控数据评估模块：收集标准监控数据与平台监控数据，进行比对分析计算得到多种指标值；

云资源平台：提供云资源服务的平台，包含基础设施及相应的运行服务组件；

图8是根据一示例性实施例示出的一种监控平台测试方法。

参考图8所示实施例，上述监控平台测试系统对应的监控平台测试方法可以包括：

步骤S802，根据测试需求选择测试用例脚本。

根据测试需求在自动化测试平台选择用例，并输入参数。

步骤S804，自动化测试平台调用系统状态监控模块。

自动化测试平台调用系统状态监控模块，并输入监控的监控类型、监控频率、监控总时间等参数。

步骤S806，系统状态监控模块选择对应监控类型的标准压力监控工具。

系统状态监控模块根据输入的监控参数调用标准压力监控工具开启系统监控。

步骤S808，标准压力测试工具对云开启监控。

自动化测试平台在开启监控后调用场景压力组合模块，并输入加压类型组合、各种类型的压力曲线等参数。

步骤S810，自动化测试平台调用场景压力组合模块。

步骤S812，加压模块生成加压类型的输入曲线，并对云进行加压。

场景模拟加压工具根据输入的加压类型组合、压力曲线数据，生成输入压力曲线，并作用到被测系统。

步骤S814，完成加压。

对云平台加压到指定时间，以完成加压。

步骤S816，监控数据评估模块从被测监控平台获取监控数据m(t)。

监控数据评估模块从被测监控平台获取监控数据m(t)。

步骤S818，标准压力测试工具上传监控数据f(t)到监控数据评估模块。

标准压力测试工具将标准监控数据f(t)上传到监控数据评估模块。

步骤S820，数据评估模块对输入数据进行预处理。

数据评估模块对输入的数据进行均值化、截取等预处理。

步骤S822，数据评估模块根据需求分析得到对应的评估指标。

数据评估模块根据需求分析，计算相应欧拉距离、KL散度等评估指标。

图9示出了一种对数据进行比对分析的示意图。如可以将标准监控工具的监控数据进行预处理以获得第一数据；可以将监控平台的监控数据进行预处理以获得第二数据；计算第一数据和第二数据的欧式距离、曼哈顿距离、余弦相似度等，最后根据计算记过计算K-L散度等，从而确定目标监控平台的监控数据是否正确。

步骤S824，数据评估模块上传评估报告到自动化测试平台。

数据评估模块将得到的评估指标上传到自动化测试平台。

在本实施例中，自动化测试平台调用场景模拟加压工具生成特定场景压力到云网系统，自动化测试平台调用准确性更高的标准压力监控工具获取标准监控值，并用该值与被测监控平台的平台监控值进行计算分析，得到监控平台的评估指标。

本实施提供的技术方案相较于常规的监控平台测试方法具有如下优点和效果：不局限于特定的压力测试类型，不限于特定的被测对象，支持在多用例、多测试工具、多框架的复杂场景下应用，不影响测试工具和被测对象的原有框架，且具备可编程性，具有良好的通用性和可扩展性；通过加压模块组合不同类型、不同曲线形态的压力情况，可以模拟出更为全面、真实的场景压力。也可以进行单一压力、特定曲线的测试。为更为全面的测试监控系统提供了方法；通过标准压力监控工具获取到的标准压力值与监控平台获取的平台监控值，进行比对分析计算，提供多种评估指标，全面准确地反映了监控平台的准确性、实时性等信息，为全方位评价监控平台提供了手段。

本公开还提供了以下实施例对监控平台测试方法进行说明。

在一些实施例中，目标对象构建了云平台，用于对外提供云资源服务，并在云平台内嵌入一个监控平台，需要测试人员对监控平台的稳定性、准确性、实时性进行评估。

测试人员可在云平台内构件自动化测试平台，也可将外部的自动化测试平台与云资源池网络连通。

测试人员确认要测试的监控场景，这里以复杂的实际业务场景为例，将以往的业务场景数据输入到自动化测试平台的相应用例，确认好标准监控工具的监控参数。

从自动化测试平台发起监控平台测试。监控平台先去调用系统状态监控模块，并输入对应的采样频率，监控类型等参数，这里监控类型对应CPU利用率、内存利用率、磁盘读写速率、网络收发速率。系统状态监控模块调用标准压力监控工具，开始收集云资源平台下的CPU利用率、内存利用率、磁盘读写速率、网络收发速率。

自动化测试平台在开启标准压力监控工具后，开始调用场景压力组合模块，并将CPU加压波形、内存加压波形、磁盘读写量波形、网络收发量波形等参数输入到场景压力组合模块。场景压力组合模块依据输入信息生成响应的压力，并作用到云资源池。

压力作用期间，云平台自带的监控平台和标准压力监控工具同时收集环境的压力信息。加压结束后，标准压力监控工具将标准监控数据上传到监控数据评估模块。监控数据评估模块向监控平台发起请求，获取监控平台数据。

监控数据评估模块分别对标准监控数据、平台监控数据截取加压时间段内的数据，由于标准监控数据的采样频率高于监控平台，需要对影响时间点的数据做筛选，保证两组数据的时间点一致。

监控数据评估模块将两组预处理后的数据进行比较分析，分别计算出欧拉距离、余弦相似度、KL散度等指标值。并将指标值上传到自动化测试平台，结束测试。

测试人员根据测试指标，评估监控平台在真实场景压力下的云平台监控能力。根据该指标优化调整云平台监控平台的资源分配。

上述实施例可以获得以下效果：

1、场景压力组合模块可以针对不同的业务场景、单一压力曲线，对各种类型的压力曲线进行组合，确保对监控平台进行全方位的评估。

2、由于云网系统的复杂性，输入的曲线不代表当前系统的全部压力，调用精度更高的标准压力监控工具获取到一组数据作为标准数据。

3、通过各种压力曲线的标准监控数据与平台监控数据进行多种方式的计算分析，得到监控平台更为全面的评估指标。

本实施例提出了一种自动化测试平台实现的云平台监控系统测评方法和系统，该方法通过自动化测试平台统一调控场景模拟加压工具，为云网系统输入特定形态的压力。自动化测试平台调用精度更高的标准压力监控工具获取标准压力值。监控数据评估模块将获取到的标准压力值与监控平台获取到的监控压力值进行数据预处理、计算分析得到多维度的评估指标。该评估指标可用于评估监控平台能力、优化监控资源调配。

基于同一发明构思，本公开实施例中还提供了一种监控平台测试装置，如下面的实施例。由于该装置实施例解决问题的原理与上述方法实施例相似，因此该装置实施例的实施可以参见上述方法实施例的实施，重复之处不再赘述。

图10是根据一示例性实施例示出的一种监控平台测试装置的框图。参照图10，本公开实施例提供的监控平台测试装置1000可以包括：压力测试指标获取模块1001、测试曲线获取模块1002、加压模块1003、监控数据获取模块1004和监控数据比对模块1005。

其中，压力测试指标获取模块1001可以用于获取至少一个压力测试指标；测试曲线获取模块1002可以用于根据至少一个压力测试指标生成至少一个压力测试曲线；加压模块1003可以用于根据至少一个压力测试曲线对目标系统加压，目标系统的资源使用情况同时被目标系统中的目标监控平台和标准压力监控工具监控，标准压力监控工具的监控精准度高于目标监控平台；监控数据获取模块1004可以用于获取目标监控平台在加压过程中针对目标系统的目标监控数据和标准压力监控工具在加压过程中针对目标系统的标准监控数据；监控数据比对模块1005可以用于将目标监控数据与标准监控数据进行比对，以测试目标监控平台的监控能力。

此处需要说明的是，上述压力测试指标获取模块1001、测试曲线获取模块1002、加压模块1003、监控数据获取模块1004、监控数据比对模块1005对应于方法实施例中的S202～S210，上述模块与对应的步骤所实现的示例和应用场景相同，但不限于上述方法实施例所公开的内容。需要说明的是，上述模块作为装置的一部分可以在诸如一组计算机可执行指令的计算机系统中执行。

在一些实施例中，至少一个压力测试指标包括第一压力测试指标和第二压力测试指标；其中，测试曲线获取模块1002可以包括：曲线类型获取单元、第一压力测试曲线生成单元、第二压力测试曲线生成单元；加压模块1003可以包括：加压单元。

其中，曲线类型获取单元用于获取第一压力测试指标对应的第一压力测试曲线类型和第二压力测试指标对应的第二压力测试曲线类型；第一压力测试曲线生成单元用于根据第一压力测试曲线类型生成第一压力测试指标对应的第一压力测试曲线；第二压力测试曲线生成单元用于根据第二压力测试曲线类型生成第二压力测试指标对应的第二压力测试曲线；其中，加压单元用于根据第一压力测试曲线和第二压力测试曲线对目标系统进行加压，以便目标监控平台和标准压力监控工具在目标系统在加压过程获得目标监控数据和标准监控数据。

在一些实施例中，监控平台测试装置还包括：目标业务数据获取模块和解析模块。

其中，目标业务数据获取模块可以用于获取目标系统在目标业务场景下的目标业务数据；解析模块可以用于对目标业务数据进行解析以获得第一压力测试指标及第一压力测试指标对应的第一压力测试曲线类型、第二压力测试指标及第二压力测试指标对应的第二压力测试曲线类型。

在一些实施例中，目标系统是云系统，云系统包括至少一个云资源池，至少一个云资源池包括第一云资源池和第二云资源池；其中，目标监控数据包括第一目标监控数据和第二目标监控输数据，标准监控数据包括第一标准监控数据和第二标准监控数据；其中，加压模块1003可以包括：第一加压单元、第二加压单元；

根据至少一个压力曲线对第一云资源池进行加压；

根据至少一个压力曲线对第二云资源池进行加压；

其中，监控数据获取模块1004可以包括：第一目标监控数据获取单元、第一目标标准监控数据获取单元、第二目标监控数据单元、第二目标标准监控数据单元。

其中，第一目标监控数据获取单元可以用于获取目标监控平台针对云系统中的第一资源池的第一目标监控数据；第一目标标准监控数据获取单元可以用于获取目标监控平台针对云系统中的第一资源池的第一目标标准监控数据，以便将第一目标监控数据和第一标准监控数据进行比对，以测试目标监控平台针对第一资源池的监控能力；第二目标监控数据单元可以用于获取目标监控平台针对云系统中的第二资源池的第二目标监控数据；第二目标标准监控数据单元可以用于获取目标监控平台针对云系统中的第二资源池的第二目标标准监控数据，以便将第二目标监控数据和第二标准监控数据进行比对，以测试目标监控平台针对第二资源池的监控能力。

在一些实施例中，监控数据获取模块1004可以包括：目标监控数据获取单元、标准监控数据获取单元；监控数据比对模块1005可以包括：比对单元。

其中，目标监控数据获取单元可以用于获取目标监控平台在加压过程中按照预设频率对目标系统进行监控后获得的目标监控数据；标准监控数据获取单元可以用于获取标准压力监控工具在加压过程中按照预设频率对目标系统进行监控后获得的标准监控数据；比对单元可以用于确定目标监控数据与标准监控数据之间的欧拉距离、KL散度以及均值差，以测试目标监控平台的监控能力。由于装置1000的各功能已在其对应的方法实施例中予以详细说明，本公开于此不再赘述。

描述于本申请实施例中所涉及到的模块和/或单元可以通过软件的方式实现，也可以通过硬件的方式来实现。所描述的模块和/或单元也可以设置在处理器中。其中，这些模块和/或单元的名称在某种情况下并不构成对该模块和/或单元本身的限定。

附图中的流程图和框图，图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分，上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意，在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个接连地表示的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图或流程图中的每个方框、以及框图或流程图中的方框的组合，可以用执行规定的功能或操作的专用的基于硬件的系统来实现，或者可以用专用硬件与计算机指令的组合来实现。

此外，上述附图仅是根据本公开示例性实施例的方法所包括的处理的示意性说明，而不是限制目的。易于理解，上述附图所示的处理并不表明或限制这些处理的时间顺序。另外，也易于理解，这些处理可以是例如在多个模块中同步或异步执行的。

图11示出了适于用来实现本公开实施例的的电子设备的结构示意图。需要说明的是，图11示出的电子设备1100仅是一个示例，不应对本公开实施例的功能和使用范围带来任何限制。

如图11所示，电子设备1100包括中央处理单元(CPU)1101，其可以根据存储在只读存储器(ROM)1102中的程序或者从储存部分1108加载到随机访问存储器(RAM)1103中的程序而执行各种适当的动作和处理。在RAM 1103中，还存储有电子设备1100操作所需的各种程序和数据。CPU 1101、ROM 1102以及RAM 1103通过总线1104彼此相连。输入/输出(I/O)接口1105也连接至总线1104。

以下部件连接至I/O接口1105：包括键盘、鼠标等的输入部分1106；包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分1107；包括硬盘等的储存部分1108；以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分1109。通信部分1109经由诸如因特网的网络执行通信处理。驱动器1110也根据需要连接至I/O接口1105。可拆卸介质1111，诸如磁盘、光盘、磁光盘、半导体存储器等等，根据需要安装在驱动器1110上，以便于从其上读出的计算机程序根据需要被安装入储存部分1108。

特别地，根据本公开的实施例，上文参考流程图描述的过程可以被实现为计算机软件程序。例如，本公开的实施例包括一种计算机程序产品，其包括承载在计算机可读存储介质上的计算机程序，该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中，该计算机程序可以通过通信部分1109从网络上被下载和安装，和/或从可拆卸介质1111被安装。在该计算机程序被中央处理单元(CPU)1101执行时，执行本申请的系统中限定的上述功能。

需要说明的是，本公开所示的计算机可读存储介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本申请中，计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读存储介质，该计算机可读存储介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读存储介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、RF等等，或者上述的任意合适的组合。

作为另一方面，本申请还提供了一种计算机可读存储介质，该计算机可读存储介质可以是上述实施例中描述的设备中所包含的；也可以是单独存在，而未装配入该设备中。上述计算机可读存储介质承载有一个或者多个程序，当上述一个或者多个程序被一个该设备执行时，使得该设备可实现功能包括：获取至少一个压力测试指标；根据至少一个压力测试指标生成至少一个压力测试曲线；根据至少一个压力测试曲线对目标系统加压，目标系统的资源使用情况同时被目标系统中的目标监控平台和标准压力监控工具监控，标准压力监控工具的监控精准度高于目标监控平台；获取目标监控平台在加压过程中针对目标系统的目标监控数据和标准压力监控工具在加压过程中针对目标系统的标准监控数据；将目标监控数据与标准监控数据进行比对，以测试目标监控平台的监控能力。

根据本申请的一个方面，提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述实施例的各种可选实现方式中提供的方法。

通过以上的实施方式的描述，本领域的技术人员易于理解，这里描述的示例实施方式可以通过软件实现，也可以通过软件结合必要的硬件的方式来实现。因此，本公开实施例的技术方案可以以软件产品的形式体现出来，该软件产品可以存储在一个非易失性存储介质(可以是CD-ROM，U盘，移动硬盘等)中，包括若干指令用以使得一台计算设备(可以是个人计算机、服务器、移动终端、或者智能设备等)执行根据本公开实施例的方法，例如图2、图3、图5、图6或图8的一个或多个所示的步骤。

本领域技术人员在考虑说明书及实践在这里公开的公开后，将容易想到本公开的其他实施例。本公开旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未申请的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。

应当理解的是，本公开并不限于这里已经示出的详细结构、附图方式或实现方法，相反，本公开意图涵盖包含在所附权利要求的精神和范围内的各种修改和等效设置。

Claims (9)

1.一种监控平台测试方法，其特征在于，包括：

获取至少一个压力测试指标；

根据所述至少一个压力测试指标生成至少一个压力测试曲线；

根据所述至少一个压力测试曲线对目标系统加压，所述目标系统的资源使用情况同时被目标系统中的目标监控平台和标准压力监控工具监控，所述标准压力监控工具的监控精准度高于所述目标监控平台，所述目标系统是云系统，所述云系统包括至少一个云资源池，所述至少一个云资源池包括第一云资源池和第二云资源池；

获取所述目标监控平台在加压过程中针对所述目标系统的目标监控数据和所述标准压力监控工具在加压过程中针对所述目标系统的标准监控数据；

将所述目标监控数据与所述标准监控数据进行比对，以测试所述目标监控平台的监控能力；

其中，根据所述至少一个压力测试曲线对目标系统加压，包括：

根据所述至少一个压力测试曲线对所述第一云资源池进行加压；

根据所述至少一个压力测试曲线对所述第二云资源池进行加压；

其中，所述目标监控数据包括第一目标监控数据和第二目标监控数据，所述标准监控数据包括第一标准监控数据和第二标准监控数据；其中，获取所述目标监控平台在加压过程中针对所述目标系统的目标监控数据和所述标准压力监控工具在加压过程中针对所述目标系统的标准监控数据，包括：

获取所述目标监控平台针对所述云系统中的第一资源池的所述第一目标监控数据；

获取所述目标监控平台针对所述云系统中的第一资源池的所述第一标准监控数据，以便将所述第一目标监控数据和所述第一标准监控数据进行比对，以测试所述目标监控平台针对所述第一资源池的监控能力；

获取所述目标监控平台针对所述云系统中的第二资源池的所述第二目标监控数据；

获取所述目标监控平台针对所述云系统中的第二资源池的所述第二标准监控数据，以便将所述第二目标监控数据和所述第二标准监控数据进行比对，以测试所述目标监控平台针对所述第二资源池的监控能力。

2.根据权利要求1所述方法，其特征在于，所述至少一个压力测试指标包括第一压力测试指标和第二压力测试指标；其中，根据所述至少一个压力测试指标生成至少一个压力测试曲线，包括：

获取所述第一压力测试指标对应的第一压力测试曲线类型和所述第二压力测试指标对应的第二压力测试曲线类型；

根据所述第一压力测试曲线类型生成所述第一压力测试指标对应的第一压力测试曲线；

根据所述第二压力测试曲线类型生成所述第二压力测试指标对应的第二压力测试曲线；

其中，根据所述至少一个压力测试曲线对目标系统加压，包括：

根据所述第一压力测试曲线和所述第二压力测试曲线对所述目标系统进行加压，以便所述目标监控平台和所述标准压力监控工具在所述目标系统在加压过程获得所述目标监控数据和所述标准监控数据。

3.根据权利要求2所述方法，其特征在于，所述方法还包括：

获取目标系统在目标业务场景下的目标业务数据；

对所述目标业务数据进行解析以获得所述第一压力测试指标及所述第一压力测试指标对应的第一压力测试曲线类型、所述第二压力测试指标及所述第二压力测试指标对应的所述第二压力测试曲线类型。

4.根据权利要求1所述方法，其特征在于，获取所述目标监控平台在加压过程中针对所述目标系统的目标监控数据和所述标准压力监控工具在加压过程中针对所述目标系统的标准监控数据，包括：

获取所述目标监控平台在加压过程中按照预设频率对所述目标系统进行监控后获得的所述目标监控数据；

获取所述标准压力监控工具在加压过程中按照所述预设频率对所述目标系统进行监控后获得的所述标准监控数据；

其中，将所述目标监控数据与所述标准监控数据进行比对，以测试所述目标监控平台的监控能力，包括：

确定所述目标监控数据与所述标准监控数据之间的欧拉距离、KL散度以及均值差，以测试所述目标监控平台的监控能力。

5.一种监控平台测试系统，其特征在于，包括：

自动化测试平台，用于接收测试参数，在接收到所述测试参数时调用系统状态监控模块并将所述测试参数发送给场景压力组合模块，所述测试参数包括至少一个压力测试指标、各个压力测试指标对应的压力测试曲线类型；

系统状态监控模块，用于响应于所述自动化测试平台的调用，调用标准压力监控工具，以便通过所述标准压力监控工具对目标系统进行监控；所述目标系统是云系统，所述云系统包括至少一个云资源池，所述至少一个云资源池包括第一云资源池和第二云资源池

场景压力组合模块，用于根据所述至少一个压力测试指标、各个压力测试指标对应的压力测试曲线类型为每个压力测试指标分别对应生成一个压力测试曲线，并将至少一个压力测试曲线发送给场景模拟加压工具；

场景模拟加压工具，用于根据所述至少一个压力测试曲线对所述目标系统进行加压处理；

自动化测试平台，还用于接收所述目标系统中的目标监控平台针对所述目标系统进行监控的目标监控数据，并获取所述标准压力监控工具针对所述目标系统进行监控的标准监控数据，并将所述目标监控数据和所述标准监控数据进行比对以测试所述目标监控平台的监控能力；

其中，根据所述至少一个压力测试曲线对所述目标系统进行加压处理，包括：

根据所述至少一个压力测试曲线对所述第一云资源池进行加压；

根据所述至少一个压力测试曲线对所述第二云资源池进行加压；

其中，所述目标监控数据包括第一目标监控数据和第二目标监控数据，所述标准监控数据包括第一标准监控数据和第二标准监控数据；其中，接收所述目标系统中的目标监控平台针对所述目标系统进行监控的目标监控数据，并获取所述标准压力监控工具针对所述目标系统进行监控的标准监控数据，包括：

获取所述目标监控平台针对所述云系统中的第一资源池的所述第一目标监控数据；

获取所述目标监控平台针对所述云系统中的第一资源池的所述第一标准监控数据，以便将所述第一目标监控数据和所述第一标准监控数据进行比对，以测试所述目标监控平台针对所述第一资源池的监控能力；

获取所述目标监控平台针对所述云系统中的第二资源池的所述第二目标监控数据；

获取所述目标监控平台针对所述云系统中的第二资源池的所述第二标准监控数据，以便将所述第二目标监控数据和所述第二标准监控数据进行比对，以测试所述目标监控平台针对所述第二资源池的监控能力。

6.根据权利要求5所述系统，其特征在于，所述自动化测试平台在调用所述系统状态监控模块时会同时发送所述至少一个压力测试指标，所述至少一个压力测试指标包括第一压力测试指标和第二压力测试指标，所述标准压力监控工具包括第一标准压力监控工具和第二标准压力测试工具；其中，系统状态监控模块响应于所述自动化测试平台的调用，调用标准压力监控工具，以便通过所述标准压力监控工具对目标系统进行监控，包括：

系统状态监控模块响应于所述自动化测试平台的调用，调用所述第一压力测试指标对应的所述第一标准压力监控工具以便通过所述第一标准压力监控工具对所述目标系统的第一压力测试进行监控，并调用所述第二压力测试指标对应的第二标准压力监控工具以便通过所述第二标准压力监控工具对所述目标系统的第二压力测试进行监控。

7.一种监控平台测试装置，其特征在于，包括：

压力测试指标获取模块，用于获取至少一个压力测试指标；

测试曲线获取模块，用于根据所述至少一个压力测试指标生成至少一个压力测试曲线；

加压模块，用于根据所述至少一个压力测试曲线对目标系统加压，所述目标系统的资源使用情况同时被目标系统中的目标监控平台和标准压力监控工具监控，所述标准压力监控工具的监控精准度高于所述目标监控平台，所述目标系统是云系统，所述云系统包括至少一个云资源池，所述至少一个云资源池包括第一云资源池和第二云资源池；

监控数据获取模块，用于获取所述目标监控平台在加压过程中针对所述目标系统的目标监控数据和所述标准压力监控工具在加压过程中针对所述目标系统的标准监控数据；

监控数据比对模块，用于将所述目标监控数据与所述标准监控数据进行比对，以测试所述目标监控平台的监控能力；

其中，根据所述至少一个压力测试曲线对目标系统加压，包括：

根据所述至少一个压力测试曲线对所述第一云资源池进行加压；

根据所述至少一个压力测试曲线对所述第二云资源池进行加压；

其中，所述目标监控数据包括第一目标监控数据和第二目标监控数据，所述标准监控数据包括第一标准监控数据和第二标准监控数据；其中，获取所述目标监控平台在加压过程中针对所述目标系统的目标监控数据和所述标准压力监控工具在加压过程中针对所述目标系统的标准监控数据，包括：

获取所述目标监控平台针对所述云系统中的第一资源池的所述第一目标监控数据；

获取所述目标监控平台针对所述云系统中的第一资源池的所述第一标准监控数据，以便将所述第一目标监控数据和所述第一标准监控数据进行比对，以测试所述目标监控平台针对所述第一资源池的监控能力；

获取所述目标监控平台针对所述云系统中的第二资源池的所述第二目标监控数据；

获取所述目标监控平台针对所述云系统中的第二资源池的所述第二标准监控数据，以便将所述第二目标监控数据和所述第二标准监控数据进行比对，以测试所述目标监控平台针对所述第二资源池的监控能力。

8.一种电子设备，其特征在于，包括：

存储器；以及耦合到所述存储器的处理器，所述处理器被用于基于存储在所述存储器中的指令，执行如权利要求1-4任一项所述的监控平台测试方法。

9.一种计算机可读存储介质，其上存储有程序，该程序被处理器执行时实现如权利要求1-4任一项所述的监控平台测试方法。