CN109120704A - 一种云平台的资源监控方法、装置及设备 - Google Patents

Abstract

本发明公开了一种云平台的资源监控方法、装置、设备及计算机可读存储介质，其中，该方法包括：确定对云平台的资源实现监控时，需要监控的各资源中任多个不同类型的资源需要被采集的相同的数据为共用数据；按照每次采集各资源对应数据时，共用数据均仅需采集一次的原则生成采集各资源对应数据的多个采集任务；将多个采集任务按照预设平均分配原则分配到多个采集节点上，以在该多个采集节点上并行执行多个采集任务。本发明避免了对于同一数据的重复采集，从而实现了较高的采集效率；并且，将多个采集任务平均分配至多个采集节点并行实现，进一步提高了采集效率；另外，本申请公开的上述技术方案简单、方便，使得数据采集具有较高的稳定性。

Description

一种云平台的资源监控方法、装置及设备

技术领域

本发明涉及云平台监控技术领域，更具体地说，涉及一种云平台的资源监控方法、装置、设备及计算机可读存储介质。

背景技术

作为云计算发展必不可少的一个关键环节，云平台的不断完善越发重要，而监控作为云平台的主要组成部分，不仅对云平台的计算资源、存储资源、网络资源进行使用量分析和预测，还可以辅助资源调度和负载均衡的实现。因此，高效、稳定的对云平台进行监控是保障云平台系统安全、稳定、可靠运行必不可少的技术，对推动整个云计算行业的发展发挥着重要作用。

综上所述，如何提供一种高效、稳定的对云平台进行监控的技术方案，是目前本领域技术人员亟待解决的问题。

发明内容

本发明的目的是提供一种云平台的资源监控方法、装置、设备及计算机可读存储介质，能够高效、稳定的对云平台进行监控。

为了实现上述目的，本发明提供如下技术方案：

一种云平台的资源监控方法，包括：

确定对云平台的资源实现监控时，需要监控的各资源中任多个不同类型的资源需要被采集的相同的数据为共用数据；

按照每次采集各资源对应数据时，共用数据均仅需采集一次的原则生成采集各资源对应数据的多个采集任务；

将多个采集任务按照预设平均分配原则分配到多个采集节点上，以在该多个采集节点上并行执行多个采集任务。

优选的，将多个所述采集任务按照预设平均分配原则分配到多个采集节点上，包括：

为每个所述采集任务分配任务序号，多个所述采集任务对应的多个所述任务序号为连续的多个数字；

对于每个所述采集任务中的任一采集任务，将该任一采集任务的任务序号除以所述采集节点的个数，确定所得余数与1的和为目标数，并将该任一采集任务分配至第目标数个采集节点上。

优选的，还包括：

获取执行多个所述采集任务得到的数据为监控信息，利用不同背景颜色区别所述监控信息中包含的共有数据及其他不是共有数据的数据，将所述监控信息存储至分布式存储系统。

优选的，将所述监控信息存储至分布式存储系统之前，还包括：

将所述监控信息处理成统一格式的数据。

一种云平台的资源监控装置，包括：

确定模块，用于：确定对云平台的资源实现监控时，需要监控的各资源中任多个不同类型的资源需要被采集的相同的数据为共用数据；

生成模块，用于：按照每次采集各资源对应数据时，所述共用数据均仅需采集一次的原则生成采集各资源对应数据的多个采集任务；

分配模块，用于：将多个所述采集任务按照预设平均分配原则分配到多个采集节点上，以在该多个采集节点上并行执行多个所述采集任务。

优选的，分配模块包括：

分配单元，用于：为每个所述采集任务分配任务序号，多个所述采集任务对应的多个所述任务序号为连续的多个数字；对于每个所述采集任务中的任一采集任务，将该任一采集任务的任务序号除以所述采集节点的个数，确定所得余数与1的和为目标数，并将该任一采集任务分配至第目标数个采集节点上。

优选的，还包括：

输出模块，用于：获取执行多个所述采集任务得到的数据为监控信息，利用不同背景颜色区别所述监控信息中包含的共有数据及其他不是共有数据的数据，将所述监控信息存储至分布式存储系统。

优选的，输出模块还包括：

处理单元，用于：将所述监控信息存储至分布式存储系统之前，将所述监控信息处理成统一格式的数据。

一种云平台的资源监控设备，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如上任一项所述云平台的资源监控方法的步骤。

一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上任一项所述云平台的资源监控方法的步骤。

本发明提供了一种云平台的资源监控方法、装置、设备及计算机可读存储介质，其中该方法包括：确定对云平台的资源实现监控时，需要监控的各资源中任多个不同类型的资源需要被采集的相同的数据为共用数据；按照每次采集各资源对应数据时，共用数据均仅需采集一次的原则生成采集各资源对应数据的多个采集任务；将多个采集任务按照预设平均分配原则分配到多个采集节点上，以在该多个采集节点上并行执行多个采集任务。本发明公开的一种云平台的资源监控方法中，首先确定出不同类型的资源需要被采集的相同的数据为共有数据，按照每次采集数据均仅需采集一次共有数据的原则生成对应的多个采集任务，从而避免了对于同一数据的重复采集，从而实现了较高的采集效率；并且，在实现采集任务的执行时，将多个采集任务平均分配至多个采集节点并行实现，从而进一步提高了采集效率；另外，本申请公开的上述技术方案简单、方便，使得数据采集具有较高的稳定性；可见，本申请公开的技术方案能够高效、稳定的实现云平台监控。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。

图1为本发明实施例提供的一种云平台的资源监控方法的流程图；

图2为本发明实施例提供的一种云平台的资源监控装置的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

请参阅图1，其示出了本发明实施例提供的一种云平台的资源监控方法的流程图，可以包括：

S11：确定对云平台的资源实现监控时，需要监控的各资源中任多个不同类型的资源需要被采集的相同的数据为共用数据。

需要说明的是，本发明实施例提供的一种云平台的资源监控方法的执行主语可以为对应的装置；对云平台实现监控即为采集云平台的各项资源的数据，而不同类型的资源(包括控制中心、集群、虚拟数据中心、主机、存储等不同类型的资源)需要被采集的数据可能存在相同的数据(如cpu、内存、存储的利用率等)，以集群资源为例进行说明，不同的虚拟化类型，获取资源信息的方式不一样，如vmware虚拟化可支持对集群资源的直接获取，openstack则不支持直接获取，而是通过叠加主机资源而得到，这种情况下与获取主机资源的信息可以合并，因此采集对应数据的过程中可去除重复的与虚拟化平台交互。本申请中通过确定共用数据，并且在每次实现数据采集时对于共用数据仅采集一次，从而实现去重分析，避免在对不同资源的数据采集过程中重复采集相同的数据，提高了数据采集效率。

S12：按照每次采集各资源对应数据时，共用数据均仅需采集一次的原则生成采集各资源对应数据的多个采集任务。

由于共有数据的存在，如果按照采集各资源对应数据时均正常采集，则会出现重复采集同一数据的情况，因此本申请中生产的多个采集任务，共有数据在每次采集时仅需采集一次即可，从而实现最优的数据采集方式。另外，本申请中生成采集任务可以是每个需要被采集的数据对应一个采集任务，也即每个采集任务对应的数据无法再被拆分，是最小粒度的数据，当然也可以根据实际需要进行其他设定，均在本发明的保护范围之内。

S13：将多个采集任务按照预设平均分配原则分配到多个采集节点上，以在该多个采集节点上并行执行多个采集任务。

其中，按照预设平均分配原则将多个采集任务分配到多个采集节点上，预设平均分配原则可以为根据实际需要设定的可以实现平均分配的原则，通过将采集任务平均分配到多个采集节点上，进而在这多个采集节点上同时执行其需执行的任务，能够有效提高采集效率。

本发明公开的一种云平台的资源监控方法中，首先确定出不同类型的资源需要被采集的相同的数据为共有数据，按照每次采集数据均仅需采集一次共有数据的原则生成对应的多个采集任务，从而避免了对于同一数据的重复采集，从而实现了较高的采集效率；并且，在实现采集任务的执行时，将多个采集任务平均分配至多个采集节点并行实现，从而进一步提高了采集效率；另外，本申请公开的上述技术方案简单、方便，使得数据采集具有较高的稳定性；可见，本申请公开的技术方案能够高效、稳定的实现云平台监控。

另外，本发明通过提高数据的采集效率，保证了监控的数据的实时性，为云平台系统的平稳运行提供更精确的监控数据依据。

本发明实施例提供的一种云平台的资源监控方法，将多个采集任务按照预设平均分配原则分配到多个采集节点上，可以包括：

为每个采集任务分配任务序号，多个采集任务对应的多个任务序号为连续的多个数字；

对于每个采集任务中的任一采集任务，将该任一采集任务的任务序号除以采集节点的个数，确定所得余数与1的和为目标数，并将该任一采集任务分配至第目标数个采集节点上。

需要说明的是，为每个采集任务分配的任务序号即为该采集任务的IP，从而通过将采集任务的任务序号除以采集节点的个数，能够确定出需要将采集任务分配至第几个采集节点上，这种方式不仅简单易实现，且能够最大限度的实现采集任务的平均分配，实现了采集节点的负载均衡。当然也可以根据实际需要进行其他设定，如可以将采集任务的个数除以采集节点的个数，得到的商即为应将为每个采集节点分配几个采集任务，而多出的余数个采集任务可以随机分配给任一或者任多个采集节点，等，均在本发明的保护范围之内。从而通过这种方式实现采集任务的分片处理，提高了采集效率。

本发明实施例提供的一种云平台的资源监控方法，还可以包括：

获取执行多个采集任务得到的数据为监控信息，利用不同背景颜色区别监控信息中包含的共有数据及其他不是共有数据的数据，将监控信息存储至分布式存储系统。

通过将共有数据及其他不是共有数据的数据的背景设置为不同的颜色，如共有数据的背景设置为红色，其他不是共有数据的数据的背景设置为白色，从而能够使得在查询监控信息时可以直观的快速的确定出哪些是共有数据，哪些不是共有数据，提高了工作人员的工作效率。而将监控信息存储至分布式存储系统中，能够实现信息有效存储的同时大大增加了可同时存储的监控信息的数据量，方便了对监控信息的查询等操作。

本发明实施例提供的一种云平台的资源监控方法，将监控信息存储至分布式存储系统之前，还可以包括：

将监控信息处理成统一格式的数据。

本申请中统一格式中具体的格式可以根据实际需要进行设定，在此不做具体限定，将监控信息处理成统一格式的数据能够方便工作人员或者其他终端获取及查询。另外还可以根据实际需要对采集的监控信息进行其他加工处理，均在本发明的保护范围之内。

本发明实施例还提供了一种云平台的资源监控装置，如图2所示，可以包括：

确定模块11，用于：确定对云平台的资源实现监控时，需要监控的各资源中任多个不同类型的资源需要被采集的相同的数据为共用数据；

生成模块12，用于：按照每次采集各资源对应数据时，共用数据均仅需采集一次的原则生成采集各资源对应数据的多个采集任务；

分配模块13，用于：将多个采集任务按照预设平均分配原则分配到多个采集节点上，以在该多个采集节点上并行执行多个采集任务。

本发明实施例提供的一种云平台的资源监控装置，分配模块可以包括：

分配单元，用于：为每个采集任务分配任务序号，多个采集任务对应的多个任务序号为连续的多个数字；对于每个采集任务中的任一采集任务，将该任一采集任务的任务序号除以采集节点的个数，确定所得余数与1的和为目标数，并将该任一采集任务分配至第目标数个采集节点上。

本发明实施例提供的一种云平台的资源监控装置，还可以包括：

输出模块，用于：获取执行多个采集任务得到的数据为监控信息，利用不同背景颜色区别监控信息中包含的共有数据及其他不是共有数据的数据，将监控信息存储至分布式存储系统。

本发明实施例提供的一种云平台的资源监控装置，输出模块还可以包括：

处理单元，用于：将监控信息存储至分布式存储系统之前，将监控信息处理成统一格式的数据。

本发明实施例还提供了一种云平台的资源监控设备，可以包括：

存储器，用于存储计算机程序；

处理器，用于执行计算机程序时实现如上任一项云平台的资源监控方法的步骤。

本发明实施例还提供了一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时可以实现如上任一项云平台的资源监控方法的步骤。

需要说明的是，本发明实施例提供的一种云平台的资源监控装置、设备及计算机可读存储介质中相关部分的说明请参见本发明实施例提供的一种云平台的资源监控方法中对应部分的详细说明，在此不再赘述。另外本发明实施例提供的上述技术方案中与现有技术中对应技术方案实现原理一致的部分并未详细说明，以免过多赘述。

对所公开的实施例的上述说明，使本领域技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。

Claims (10)

1.一种云平台的资源监控方法，其特征在于，包括：

确定对云平台的资源实现监控时，需要监控的各资源中任多个不同类型的资源需要被采集的相同的数据为共用数据；

按照每次采集各资源对应数据时，所述共用数据均仅需采集一次的原则生成采集各资源对应数据的多个采集任务；

将多个所述采集任务按照预设平均分配原则分配到多个采集节点上，以在该多个采集节点上并行执行多个所述采集任务。

2.根据权利要求1所述的方法，其特征在于，将多个所述采集任务按照预设平均分配原则分配到多个采集节点上，包括：

为每个所述采集任务分配任务序号，多个所述采集任务对应的多个所述任务序号为连续的多个数字；

对于每个所述采集任务中的任一采集任务，将该任一采集任务的任务序号除以所述采集节点的个数，确定所得余数与1的和为目标数，并将该任一采集任务分配至第目标数个采集节点上。

3.根据权利要求2所述的方法，其特征在于，还包括：

获取执行多个所述采集任务得到的数据为监控信息，利用不同背景颜色区别所述监控信息中包含的共有数据及其他不是共有数据的数据，将所述监控信息存储至分布式存储系统。

4.根据权利要求3所述的方法，其特征在于，将所述监控信息存储至分布式存储系统之前，还包括：

将所述监控信息处理成统一格式的数据。

5.一种云平台的资源监控装置，其特征在于，包括：

确定模块，用于：确定对云平台的资源实现监控时，需要监控的各资源中任多个不同类型的资源需要被采集的相同的数据为共用数据；

生成模块，用于：按照每次采集各资源对应数据时，所述共用数据均仅需采集一次的原则生成采集各资源对应数据的多个采集任务；

分配模块，用于：将多个所述采集任务按照预设平均分配原则分配到多个采集节点上，以在该多个采集节点上并行执行多个所述采集任务。

6.根据权利要求5所述的装置，其特征在于，分配模块包括：

分配单元，用于：为每个所述采集任务分配任务序号，多个所述采集任务对应的多个所述任务序号为连续的多个数字；对于每个所述采集任务中的任一采集任务，将该任一采集任务的任务序号除以所述采集节点的个数，确定所得余数与1的和为目标数，并将该任一采集任务分配至第目标数个采集节点上。

7.根据权利要求6所述的装置，其特征在于，还包括：

输出模块，用于：获取执行多个所述采集任务得到的数据为监控信息，利用不同背景颜色区别所述监控信息中包含的共有数据及其他不是共有数据的数据，将所述监控信息存储至分布式存储系统。

8.根据权利要求7所述的装置，其特征在于，输出模块还包括：

处理单元，用于：将所述监控信息存储至分布式存储系统之前，将所述监控信息处理成统一格式的数据。

9.一种云平台的资源监控设备，其特征在于，包括：

存储器，用于存储计算机程序；

处理器，用于执行所述计算机程序时实现如权利要求1至4任一项所述云平台的资源监控方法的步骤。

10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至4任一项所述云平台的资源监控方法的步骤。