CN111651316B - 一种资源监控方法、系统、电子设备及存储介质 - Google Patents

Abstract

本申请实施例所公开的一种资源监控方法、系统、电子设备及存储介质，其中，方法包括接收服务器集群中服务器的上报数据集合，上报数据集合中的每个上报数据包括服务器集合和服务器集合中每个服务器对应的状态参数，根据每个服务器对应的状态参数确定服务器集群中的目标服务器，调整目标服务器的数据传输模式；数据传输模式包括被读取模式。基于本申请实施例，对需要代为转发的服务器调整数据传输模式为被读取模式至具备直接上报能力时下达主动上报指令，能够灵活地为服务器集群中任意状态的服务器配置适合的监控策略。

Description

一种资源监控方法、系统、电子设备及存储介质

技术领域

本发明涉及监控服务集群领域，尤其涉及一种资源监控方法、系统、电子设备及存储介质。

背景技术

在系统运行过程中，软件异常情况时有发生，异常的复杂程度不可估量，如何降低软件异常对系统造成的不良影响，使得软件的服务质量满足日益发展的科技水平的需求成为软件开发者面临的重要挑战。

基于此，软件开发者研发监控服务集群技术，实时监控服务集群，根据掌握的实时情况及时作出处理，以减少软件异常对系统造成不良影响的范围。目前，主流的解决方式是一种自动监控人工处理技术，通过收集服务集群中机器的实时状态数据，并根据实时状态数据判断机器的健康状态，在健康状态不满足预设要求时，生成对应的告警信息并通过短信或者邮件发送给运维人员，以给出相应的解决方案。

上述自动监控人工处理技术虽然可以降低软件异常对系统造成的不良影响，但是该方法过于被动且具有延时性，只适用于少有变动机器的服务集群。

发明内容

本申请实施例所要解决的技术问题在于，提供一种资源监控方法、系统、电子设备及存储介质，解决现有技术中的监控方法过于被动具有延时性的问题。

为了解决上述技术问题，本申请实施例提供了一种资源监控方法，该方法包括：

接收服务器集群中服务器的上报数据集合；上报数据集合中的每个上报数据包括服务器集合和服务器集合中每个服务器对应的状态参数；

根据每个服务器对应的状态参数确定服务器集群中的目标服务器；

调整目标服务器的数据传输模式；数据传输模式包括被读取模式。

进一步地，上报数据集合中的每个上报数据携带第一标识；服务器集合中每个服务器对应的状态参数携带第二标识。

进一步地，根据每个服务器对应的状态参数确定服务器集群中的目标服务器，包括：

确定服务器集合中每个服务器对应的状态参数所携带的第二标识；

确定服务器集合中每个服务器对应的上报数据所携带的第一标识；

若第一标识与第二标识不匹配，确定第二标识对应的服务器为目标服务器。

进一步地，该方法还包括：

确定服务器集群中的无上报能力服务器；

确定目标服务器和无上报能力服务器的个数总和与服务器集群中服务器个数的比值；

若比值大于第一预设阈值，增加服务器集群中服务器的数量。

进一步地，调整目标服务器的数据传输模式之后，还包括：

根据服务器集群中全部服务器的上报数据集合，分别确定服务器集群中每个服务器对应的状态变化数据；服务器集群包括服务器集合和无上报能力服务器；

确定服务器集合中目标服务器与非目标服务器的关系数据；非目标服务器为服务器集合中服务器对应的状态参数所携带的第二标识与服务器集合中服务器对应的上报数据所携带的第一标识相匹配的服务器；

基于状态变化数据和关系数据，调整服务器集群中服务器的数据传输模式。

进一步地，调整服务器集群中服务器的数据传输模式，包括：

若服务器集群中服务器的状态变化数据小于第二预设阈值，调整服务器的数据传输模式为主动上报模式。

相应地，本申请实施例还提供了一种资源监控系统，该系统包括：

接收模块，用于接收服务器集群中服务器的上报数据集合；上报数据集合中的每个上报数据包括服务器集合和服务器集合中每个服务器对应的状态参数；

第一确定模块，用于根据每个服务器对应的状态参数确定服务器集群中的目标服务器；

调整模块，用于调整目标服务器的数据传输模式；数据传输模式包括被读取模式。

进一步地，该系统还包括：

第二确定模块，用于确定服务器集群中的无上报能力服务器；

第三确定模块，用于确定目标服务器和无上报能力服务器的个数总和与服务器集群中服务器个数的比值；

增加模块，用于若比值大于第一预设阈值，增加服务器集群中服务器的数量。

相应地，本申请实施例还提供了一种电子设备，该电子设备包括处理器和存储器，存储器中存储有至少一条指令、至少一段程序、代码集或指令集，至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现上述资源监控方法。

相应地，本申请实施例还提供了一种计算机可读存储介质，该存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，至少一条指令、至少一段程序、代码集或指令集由处理器加载并执行以实现上述资源监控方法。

本申请实施例具有如下有益效果：

本申请实施例所公开的一种资源监控方法、系统、电子设备及存储介质，其中，方法包括接收服务器集群中服务器的上报数据集合，上报数据集合中的每个上报数据包括服务器集合和服务器集合中每个服务器对应的状态参数，根据每个服务器对应的状态参数确定服务器集群中的目标服务器，调整目标服务器的数据传输模式；数据传输模式包括被读取模式。基于本申请实施例，通过直接上报、代为转发和被读取中任意一种或几种方式获取服务器集群中服务器对应的状态参数，对直接上报的服务器延长上报间隔，减缓网络延迟和阻塞问题；对需要代为转发的服务器调整数据传输模式为被读取模式；对无上报能力服务器监控至具备直接上报能力时下达主动上报指令，能够灵活地为服务器集群中任意状态的服务器配置适合的监控策略。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案和优点，下面将对实施例或现有技术描述中所需要使用的附图作简单的介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其它附图。

图1是本申请实施例所提供的一种应用环境的示意图；

图2是本申请实施例所提供的一种资源监控方法的流程示意图；

图3是本申请实施例所提供的一种资源监控系统的结构示意图。

具体实施方式

为使本申请的目的、技术方案和优点更加清楚，下面将结合附图对本申请实施例作进一步地详细描述。显然，所描述的实施例仅仅是本申请一个实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。

术语“第一”、“第二”仅用于描述目的，而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含的包括一个或者更多个该特征。而且，术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请实施例能够以除了在这里图示或描述以外的顺序实施。此外，术语“包括”和“为”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或模块的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或模块，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或模块。

请参阅图1，其所示为本申请实施例所提供的一种应用环境的示意图，包括：服务集群101和 监控系统103，服务集群中的服务器与监控系统通过无线链路连接。监控系统103接收服务器集群101中服务器的上报数据集合；上报数据集合中的每个上报数据包括服务器集合和服务器集合中每个服务器对应的状态参，监控系统103根据接收到的每个服务器对应的状态参数确定服务器集群中的目标服务器，并调整目标服务器的数据传输模式，数据传输模式包括被读取模式。

下面介绍本申请一种资源监控方法的具体实施例，图2是本申请实施例提供的一种资源监控方法的流程示意图，本说明书提供了如实施例或流程图所示的方法操作步骤，但基于常规或者无创造性的劳动可以包括更多或者更少的操作步骤。实施例中列举的步骤顺序仅仅为众多执行顺序中的一种方式，不代表唯一的执行顺序，在实际执行时，可以按照实施例或者附图所示的方法顺序执行或者并行执行(例如并行处理器或者多线程处理的环境)。具体的如图2所示，该方法包括：

S201：接收服务器集群中服务器的上报数据集合；上报数据集合中的每个上报数据包括服务器集合和服务器集合中每个服务器对应的状态参数。

本申请实施例中，监控系统接收服务集群中服务的上报数据集合，其中，服务集群是指受监控系统进行资源监控的所有服务器，包括下文中的目标服务器、非目标服务器和无上报能力服务器。举个例子，监控系统共监控10个服务器，依次编号为A01、A02、B03、B04、B05、C06…C10， A、B和C表示服务器所属的机组，例如A01服务器和A02服务器是同一机组，B03服务器、B04服务器和B05服务器是同一机组，C06服务器～C10 服务器是同一机组。同一机组的服务器编号的前半部分具有较高的相似性。

假设，A01服务器和A02服务器的上报数据是由监控系统拉取A01服务器和A02服务器的存储日志获得的；B03服务器和B04服务器发现与监控系统通信故障后，尝试在组内和组外发起询问，组内优先级高于组外优先级，查找与监控系统通信正常的服务器B05服务器，由与监控系统通信正常的B05服务器代为转发与监控系统通信故障的B03服务器的状态数据和B04服务器的状态数据，B05服务器在不影响自身上报状态数据的前提下，通过长链接或者短连接的方式代为转发B03服务器的状态数据和B04 服务器的状态数据至监控系统，在B05服务器资源允许的情况下，采用长链接转发B03服务器的状态数据和B04服务器的状态数据至监控系统；在 B05服务器资源紧缺的情况下，采用短链接转发B03服务器的状态数据和 B04服务器的状态数据至监控系统；C06服务器～C10服务器直接将自身的状态参数传输至监控系统。那么，这10个服务器为监控系统监控的服务集群，A01服务器和A02服务器为监控系统的无上报能力服务器，B03服务器和B04服务器为监控系统的目标服务器，B05服务器、C06服务器～C10 服务器为监控系统的非目标服务器。目标服务器B03服务器和B04服务器和非目标服务器B05服务器、C06服务器～C10服务器统称为服务器集合。服务器对应的状态参数以状态值列表格式存储，包括服务器的CPU使用率、磁盘使用率等信息。

S203：根据每个服务器对应的状态参数确定服务器集群中的目标服务器。

本申请实施例中，上述上报数据集合中的每个上报数据携带有第一标识，服务器集合中每个服务器对应的状态参数携带有第二标识。

本申请实施例中，一种具体的监控系统根据每个服务器对应的状态参数确定服务器集群中的目标服务器的实施方式中，监控系统确定服务器集合中每个服务器对应的状态参数所携带的第二标识，并确定服务器集合中每个服务器对应的上报数据所携带的第一标识，若确定的第一标识与第二标识不匹配，监控系统确定第二标识对应的服务器为目标服务器。

基于上文中所举的例子，详细说明监控系统根据每个服务器对应的状态参数确定服务器集群中的目标服务器的实施方式。由于上报数据集合中的每个上报数据携带有第一标识，第一标识包括上报数据所处的上报周期和传输上报数据的服务器的编号；服务器集合中每个服务器对应的状态参数携带有第二标识，第二标识即状态参数对应的服务器的编号。需要说明的是，此处第一标识和第二标识可能是匹配的，也可能是不匹配的。例如， B03服务器和B04服务器的上报数据是由B05服务器代为转发至监控系统的，B05服务器、C06服务器～C10服务器的上报数据是B05服务器、C06 服务器～C10服务器是直接将自身的状态参数传输至监控系统，那么，B05 服务器发送的上报数据中第一标识为01B05，01表示上报数据所处的上报周期为01，B05表示传输上报数据的服务器为B05服务器，而上报数据中的状态参数携带的第二标识为B03、B04和B05，即B05服务器传输了B03 服务器的状态参数、B04服务器的状态参数和B05服务器本身的状态参数至监控系统，第二标识B03、B04与第一标识01B05中的B05不匹配，则 B03对应的B03服务器和B04对应的B04服务器为目标服务器，而第二标识B05与第一标识01B05中的B05相匹配，则B05对应的服务器为非目标服务器。

本申请实施例中，监控系统确定服务集群中的无上报能力服务器，并确定目标服务器和无上报能力服务器的个数总和与服务器集群中服务器个数的比值，若比值大于第一预设阈值，监控系统需要调用资源中心的相关服务创建新的服务器，即增加服务器集群中服务器的数量。一般来说，当服务器集群中目标服务器和无上报能力服务器的个数总和占服务器集群中服务器个数的50％时，便满足增加服务器集群中服务器的数量的预设条件。

S205：调整目标服务器的数据传输模式；数据传输模式包括被读取模式。

本申请实施例中，目标服务器服务资源无法实现直接将自身的状态参数传输至监控系统，目标服务器的状态参数是通过查找与监控系统通信正常的服务器代为转发至监控系统的，监控系统调整目标服务器的数据传输模式为被动读取模式，即监控系统拉取目标服务器的存储日志获得目标服务器的状态参数。

本申请实施例中，监控系统调整目标服务器的数据传输模式之后，监控系统还根据服务器集群中全部服务器的上报数据集合，分别确定服务器集群中每个服务器对应的状态变化数据，并确定服务器集合中目标服务器与非目标服务器的关系数据，监控系统基于确定的状态变化数据和关系数据调整服务器集群中服务器的数据传输模式，若服务器集群中服务器的状态变化数据小于第二预设阈值，监控系统需调整服务器的数据传输模式为主动上报模式。

本申请实施例中，服务器集群中每个服务器对应的状态参数还携带有时间标识。在监控系统获取服务器集群中服务器对应的状态参数的具体实施方式中，为了保证状态参数的可靠性，可以通过直接上报、代为转发和被读取中的一种或多种获取服务器集群中服务器的状态参数，直接上报即服务器集群中的服务器直接传输状态数据至监控系统，代为转发即服务器集群中的服务器代为转发其他服务器的状态数据，被读取即监控系统拉取服务器集群中服务器存储日志获得状态参数。

监控系统基于非目标服务器直接传输的状态数据对应的第二标识和时间标识、目标服务器通过非目标服务器转发的状态数据对应的第二标识和时间标识和拉取无上报能力服务器存储日志获得的状态参数对应的第二标识和时间标识，监控系统通过重复获取服务器集群中服务器的状态参数，制造数据冗余，并通过收集处理和幂等性处理，去除状态参数集合中第二标识和时间标识均重复的状态参数，重复的状态参数可以是通过直接上报、代为转发和被读取中不同的方式获取的，也可以是通过直接上报、代为转发和被读取中相同的方式获取的。监控系统获取的状态参数集合统一会聚至单一数据存储服务中，例如，消息队列使得状态参数集合在时间和空间上呈现单一性。按照服务器集群中每个服务器的时间标识构建具备唯一性的链式数据，该链式数据能够描绘出服务器集群中服务器的状态变化情况，监控系统能够依据该链式数据确定服务器集群中每个服务器对应的状态变数数据，状态变化数据直观反映出服务器集群中服务器的资源使用情况，监控系统分析状态变化数据，在服务器存在资源浪费的情况下，触发资源回收，在服务器存在资源紧张的情况下，触发资源创建。监控系统基于服务器集群中目标服务器和非目标服务器所属的机组和目标服务器通过查询非目标服务器代为转发目标服务器得到状态数据使用的网络记录，确定目标服务器和非目标服务器之间的网络拓扑，进而确定服务器集合中目标服务器与非目标服务器的关系数据，当大量目标服务器通过非目标服务器代为转发目标服务器的状态数据时，非目标服务器也存在潜在的服务压力。因此，当监控系统在判定服务器集群中服务器的状态变化数据小于第二阈值，即目标服务器和/或无上报能力服务器存在部分业务服务暂停或终止，具备直接将自身的状态参数传输至监控系统，监控系统对目标服务器和/或无上报能力服务器下达主动上报指令，对非目标服务器下达上报延时指令，可以解决网络延迟和阻塞的问题。

采用本申请实施例所提供的一种资源监控方法，通过直接上报、代为转发和被读取中任意一种或几种方式获取服务器集群中服务器对应的状态参数对直接上报的服务器延长上报间隔，减缓网络延迟和阻塞问题；对需要代为转发的服务器调整数据传输模式为被读取模式；对无上报能力服务器监控至具备直接上报能力时下达主动上报指令，能够灵活地为服务器集群中任意状态的服务器配置适合的监控策略。

本申请实施例还提供的一种资源监控系统，图3是本申请实施例提供的一种资源监控系统的结构示意图，如图3所示，该系统包括：

接收模块301用于接收服务器集群中服务器的上报数据集合；上报数据集合中的每个上报数据包括服务器集合和服务器集合中每个服务器对应的状态参数；

第一确定模块303用于根据每个服务器对应的状态参数确定服务器集群中的目标服务器；

调整模块305用于调整目标服务器的数据传输模式；数据传输模式包括被读取模式。

本申请实施例中，该系统还包括：

第二确定模块，用于确定服务器集群中的无上报能力服务器；

第三确定模块，用于确定目标服务器和无上报能力服务器的个数总和与服务器集群中服务器个数的比值；

增加模块，用于若比值大于第一预设阈值，增加服务器集群中服务器的数量。

本申请实施例中的系统与方法实施例基于同样的申请构思。

本申请实施例还提供的一种电子设备，电子设备可设置于服务器之中以保存用于实现方法实施例中的一种资源监控方法相关的至少一条指令、至少一段程序、代码集或指令集，该至少一条指令、该至少一段程序、该代码集或指令集由该存储器加载并执行以实现上述的资源监控方法。

本申请实施例还提供的一种存储介质，存储介质可设置于服务器之中以保存用于实现方法实施例中一种资源监控方法相关的至少一条指令、至少一段程序、代码集或指令集，该至少一条指令、该至少一段程序、该代码集或指令集由该处理器加载并执行以实现上述资源监控方法。

可选的，在本实施例中，上述存储介质可以位于计算机网络的多个网络服务器中的至少一个网络服务器。可选地，在本实施例中，上述存储介质可以包括但不限于包括：U盘、只读存储器(ROM，Read-Only Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

由上述本申请提供的资源监控方法、系统、电子设备或存储介质的实施例可见，本申请中方法包括接收服务器集群中服务器的上报数据集合，上报数据集合中的每个上报数据包括服务器集合和服务器集合中每个服务器对应的状态参数，根据每个服务器对应的状态参数确定服务器集群中的目标服务器，调整目标服务器的数据传输模式；数据传输模式包括被读取模式。基于本申请实施例，通过直接上报、代为转发和被读取中任意一种或几种方式获取服务器集群中服务器对应的状态参数对直接上报的服务器延长上报间隔，减缓网络延迟和阻塞问题；对需要代为转发的服务器调整数据传输模式为被读取模式；对无上报能力服务器监控至具备直接上报能力时下达主动上报指令，能够灵活地为服务器集群中任意状态的服务器配置适合的监控策略。

需要说明的是：上述本申请实施例的先后顺序仅仅为了描述，不代表实施例的优劣，且上述本说明书对特定的实施例进行了描述，其他实施例也在所附权利要求书的范围内。在一些情况下，在权利要求书中记载的动作或者步骤可以按照不同的实施例中的顺序来执行并且能够实现预期的结果。另外，在附图中描绘的过程不一定要求示出特定顺序或者而连接顺序才能够实现期望的结果，在某些实施方式中，多任务并行处理也是可以的或者可能是有利的。

本说明书中的各个实施例均采用递进的方式描述，各个实施例之间相同相似的部分互相参见即可，每个实施例重点说明的均为与其他实施例的不同之处。尤其，对于系统的实施例而言，由于其基于相似于方法实施例，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

以上所述是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也视为本发明的保护范围。

Claims (8)

1.一种资源监控方法，其特征在于，包括：

接收服务器集群中服务器的上报数据集合；所述上报数据集合中的每个上报数据包括服务器集合和所述服务器集合中每个服务器对应的状态参数；所述上报数据集合中的每个上报数据携带第一标识，所述服务器集合中每个服务器对应的状态参数携带第二标识；

根据所述每个服务器对应的状态参数确定所述服务器集群中的目标服务器，包括：

确定所述服务器集合中每个服务器对应的状态参数所携带的第二标识；

确定所述服务器集合中每个服务器对应的上报数据所携带的第一标识；

若所述第一标识与所述第二标识不匹配，确定所述第二标识对应的服务器为目标服务器；

调整所述目标服务器的数据传输模式；所述数据传输模式包括被读取模式。

2.根据权利要求1所述的方法，其特征在于，还包括：

确定所述服务器集群中的无上报能力服务器；

确定所述目标服务器和所述无上报能力服务器的个数总和与所述服务器集群中服务器个数的比值；

若所述比值大于第一预设阈值，增加所述服务器集群中服务器的数量。

3.根据权利要求2所述的方法，其特征在于，所述调整所述目标服务器的数据传输模式之后，还包括：

根据所述服务器集群中全部服务器的上报数据集合，分别确定所述服务器集群中每个服务器对应的状态变化数据；所述服务器集群包括所述服务器集合和所述无上报能力服务器；

确定所述服务器集合中目标服务器与非目标服务器的关系数据；所述非目标服务器为所述服务器集合中服务器对应的状态参数所携带的第二标识与所述服务器集合中服务器对应的上报数据所携带的第一标识相匹配的服务器；

基于所述状态变化数据和所述关系数据，调整所述服务器集群中服务器的数据传输模式。

4.根据权利要求3所述的方法，其特征在于，所述调整所述服务器集群中服务器的数据传输模式，包括：

若所述服务器集群中服务器的状态变化数据小于第二预设阈值，调整所述服务器的数据传输模式为主动上报模式。

5.一种资源监控系统，其特征在于，包括：

接收模块，用于接收服务器集群中服务器的上报数据集合；所述上报数据集合中的每个上报数据包括服务器集合和所述服务器集合中每个服务器对应的状态参数；所述上报数据集合中的每个上报数据携带第一标识，所述服务器集合中每个服务器对应的状态参数携带第二标识；

第一确定模块，用于根据所述每个服务器对应的状态参数确定所述服务器集群中的目标服务器，包括：

确定所述服务器集合中每个服务器对应的状态参数所携带的第二标识；

确定所述服务器集合中每个服务器对应的上报数据所携带的第一标识；

若所述第一标识与所述第二标识不匹配，确定所述第二标识对应的服务器为目标服务器；

调整模块，用于调整所述目标服务器的数据传输模式；所述数据传输模式包括被读取模式。

6.根据权利要求5所述的系统，其特征在于，还包括：

第二确定模块，用于确定所述服务器集群中的无上报能力服务器；

第三确定模块，用于确定所述目标服务器和所述无上报能力服务器的个数总和与所述服务器集群中服务器个数的比值；

增加模块，用于若所述比值大于第一预设阈值，增加所述服务器集群中服务器的数量。

7.一种电子设备，其特征在于，所述电子设备包括处理器和存储器，所述存储器中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由所述处理器加载并执行以实现权利要求1-4任意一项所述资源监控方法。

8.一种计算机可读存储介质，其特征在于，所述存储介质中存储有至少一条指令、至少一段程序、代码集或指令集，所述至少一条指令、所述至少一段程序、所述代码集或指令集由处理器加载并执行以实现如权利要求1-4任意一项所述资源监控方法。

Images