CN111698132B - 用于控制集群中心跳事件的方法、装置、设备和介质 - Google Patents
用于控制集群中心跳事件的方法、装置、设备和介质 Download PDFInfo
- Publication number
- CN111698132B CN111698132B CN202010538168.3A CN202010538168A CN111698132B CN 111698132 B CN111698132 B CN 111698132B CN 202010538168 A CN202010538168 A CN 202010538168A CN 111698132 B CN111698132 B CN 111698132B
- Authority
- CN
- China
- Prior art keywords
- cluster
- time
- preset
- events
- heartbeat
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/16—Threshold monitoring
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L43/00—Arrangements for monitoring or testing data switching networks
- H04L43/10—Active monitoring, e.g. heartbeat, ping or trace-route
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Cardiology (AREA)
- General Health & Medical Sciences (AREA)
- Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
Abstract
本公开的实施例公开了一种用于控制集群中心跳事件的方法、装置、设备和计算机可读介质。该方法的一具体实施方式包括:确定集群中当前待处理事件的数量;响应于上述数量大于或等于预设阈值,增加上述集群中节点对应的当前心跳时间以减慢上述集群中心跳事件的产生;响应于上述数量小于上述预设阈值且上述数量小于上述预设阈值的状态持续时间超过预设时间,减少上述当前心跳时间以加快上述集群中心跳事件的产生。该实施方式通过合理的调整心跳时间,既避免了集群调度中心的崩溃,又避免了集群调度中心能力的浪费。进一步的,可以在集群中部署更多的节点,从而提升了集群的规模。
Description
技术领域
本公开的实施例涉及计算机技术领域,具体涉及用于控制集群中心跳事件的方法、装置、设备和计算机可读介质。
背景技术
随着集群中节点的增加,节点所带来的心跳事件会线性增长。节点向调度中心发送一次心跳信息可以看做是一次心跳事件。同时考虑到心跳事件会触发调度,调度时又会产生一系列的衍生事件。最终,大量的事件会使集群调度中心崩溃。由此可以看出,节点心跳是大量事件产生的根源。
目前,相关做法往往是限制集群中节点的数量,从而减少心跳事件的产生。但是,过小的集群不仅调度效率低,更容易造成资源碎片。
发明内容
本公开的内容部分用于以简要的形式介绍构思,这些构思将在后面的具体实施方式部分被详细描述。本公开的内容部分并不旨在标识要求保护的技术方案的关键特征或必要特征,也不旨在用于限制所要求的保护的技术方案的范围。
本公开的一些实施例提出了一种用于控制集群中心跳事件的方法、装置、设备和计算机可读介质,来解决以上背景技术部分提到的技术问题。
第一方面,本公开的一些实施例提供了一种用于控制集群中心跳事件的方法,该方法包括:确定集群中当前待处理事件的数量;响应于上述数量大于或等于预设阈值,增加上述集群中节点对应的当前心跳时间以减慢上述集群中心跳事件的产生;响应于上述数量小于上述预设阈值且上述数量小于上述预设阈值的状态持续时间超过预设时间,减少上述当前心跳时间以加快上述集群中心跳事件的产生。
第二方面,本公开的一些实施例提供了一种用于控制集群中心跳事件的装置,装置包括:确定单元:被配置成确定集群中当前待处理事件的数量;增加单元,被配置成响应于上述数量大于或等于预设阈值,增加上述集群中节点对应的当前心跳时间以减慢上述集群中心跳事件的产生;减少单元,被配置成响应于上述数量小于上述预设阈值且上述数量小于上述预设阈值的状态持续时间超过预设时间,减少上述当前心跳时间以加快上述集群中心跳事件的产生。
第三方面,本公开的一些实施例提供了一种电子设备,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如第一方面中任一的方法。
第四方面,本公开的一些实施例提供了一种计算机可读介质,其上存储有计算机程序,其中,程序被处理器执行时实现如第一方面中任一的方法。
本公开的上述各个实施例中的一个实施例具有如下有益效果:若待处理事件数量大于或等于预设阈值,可以增加集群中节点对应的当前心跳时间,使各个节点向调度中心发送心跳信息的时间变长,以减慢集群中心跳事件的产生。
若待处理事件数量小于预设阈值且待处理事件数量小于预设阈值的状态持续时间超过预设时间。这里,表明集群的调度中心处理待处理事件的能力过剩,可以适当减少当前心跳时间。从而各个节点向调度中心发送心跳信息的时间变短,以加快集群中心跳事件的产生,产生更多的待处理事件,让调度中心处理。通过合理的调整心跳时间,实现了对集群中心跳事件的有效控制,既避免了调度中心的崩溃,又避免了调度中心能力的浪费。进一步的,可以在集群中部署更多的节点,从而提升了集群的规模。
附图说明
结合附图并参考以下具体实施方式,本公开各实施例的上述和其他特征、优点及方面将变得更加明显。贯穿附图中,相同或相似的附图标记表示相同或相似的元素。应当理解附图是示意性的,原件和元素不一定按照比例绘制。
图1是根据本公开的一些实施例的用于控制集群中心跳事件的方法的一个应用场景的示意图;
图2是根据本公开的用于控制集群中心跳事件的方法的一些实施例的流程图;
图3是根据本公开的用于控制集群中心跳事件的方法的另一些实施例的流程图;
图4和图5是根据本公开的一些实施例的用于控制集群中心跳事件的方法的另一个应用场景的示意图;
图6是根据本公开的用于控制集群中心跳事件的装置的一些实施例的结构示意图;
图7是适于用来实现本公开的一些实施例的电子设备的结构示意图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例,然而应当理解的是,本公开可以通过各种形式来实现,而且不应该被解释为限于这里阐述的实施例。相反,提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是,本公开的附图及实施例仅用于示例性作用,并非用于限制本公开的保护范围。
另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。在不冲突的情况下,本公开中的实施例及实施例中的特征可以相互组合。
需要注意,本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分,并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意,本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的,本领域技术人员应当理解,除非在上下文另有明确指出,否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的,而并不是用于对这些消息或信息的范围进行限制。
下面将参考附图并结合实施例来详细说明本公开。
图1是根据本公开一些实施例的用于控制集群中心跳事件的方法的一个应用场景的示意图100。
如图1所示,首先,电子设备101确定当前待处理事件的数量。响应于待处理事件数量大于或等于100,电子设备101可以增加集群中节点对应的当前心跳时间103,以减慢集群中心跳事件的产生。这里,集群中可以包括节点1、节点2、节点3、节点4和调度中心102。另外,响应于待处理事件数量小于100并且待处理事件的数量小于100 的状态持续时间超过0.5秒,可以减少当前心跳时间103,以加快上述集群中心跳事件的产生。
可以理解的是,用于控制集群中心跳事件的方法可以是由上述电子设备101来执行。其中,电子设备101可以是硬件,也可以是软件。当电子设备101为硬件时,可以是具有信息处理能力的各种电子设备,包括但不限于智能手机、平板电脑、电子书阅读器、膝上型便携计算机、台式计算机、服务器等等。当电子设备101为软件时,可以安装在上述所列举的电子设备中。其可以实现成例如用来提供分布式服务的多个软件或软件模块,也可以实现成单个软件或软件模块。在此不做具体限定。
应该理解,图1中的电子设备数目仅仅是示意性的。根据实现需要,可以具有任意数目的电子设备。
继续参考图2,示出了根据本公开的用于控制集群中心跳事件的方法的一些实施例的流程200。该用于控制集群中心跳事件的方法,包括以下步骤:
步骤201,确定集群中当前待处理事件的数量。
在一些实施例中,上述执行主体(例如图1所示的电子设备)可以通过各种方式来确定集群中当前待处理事件的数量。作为示例,上述执行主体可以通过查询数据库来获取集群中当前待处理事件的数量。
步骤202,响应于数量大于或等于预设阈值,增加集群中节点对应的当前心跳时间以减慢集群中心跳事件的产生。
在一些实施例中,若集群中待处理事件数量大于或等于预设阈值,上述执行主体可以增加集群中节点对应的当前心跳时间以减慢集群中心跳事件的产生。
这里,以YARN(Yet Another Resource Negotiator,另一种资源协调者)集群为例。YARN是Hadoop生态的调度系统。在单个配置有YARN的集群内,可以将集群大致分为两部分。一部分是RM (RresourceManager,资源管理器),另一部分是NM(NodeManager,节点管理器)。其中,NM可以有多个。例如10000个。RM可以理解为是上述YARN集群的大脑,负责接收各个NM的心跳信息以及完成事件的处理。例如,资源的调度。相应的,NM可以向RM注册、进而定时向RM发送心跳信息。此外,NM在定时发送心跳信息的同时还可以接收RM下达的命令。例如,重新初始化。
需要说明的是,上述提到的调度中心可以是RM。集群中节点对应有NM。在RM的内部,存在着一个中央异步调度器 (AsyncDispatcher)。上述AsyncDispatcher的功能包括:将不同的事件传递给相应的事件处理器(Event handler)。NM定时向RM发送一次心跳信息可以认为是一个心跳事件。
实践中,若检测到YARN集群的RM中待处理事件的数量大于或等于预设阈值(例如,100),上述执行主体可以适当增加集群中节点对应的当前心跳时间以减慢YARN集群中心跳事件的产生。例如,增加0.25秒,还可以增加0.5秒。其中,节点对应的心跳时间可以是集群中节点向集群RM发送心跳信息的时间间隔。这里,NM定时向RM 发送一次心跳信息可以认为是一个待处理事件。
步骤203,响应于数量小于预设阈值且数量小于上述预设阈值的状态持续时间超过预设时间,减少当前心跳时间以加快集群中心跳事件的产生。
在一些实施例中,若待处理事件数量小于预设阈值且待处理事件数量小于预设阈值的状态持续时间超过预设时间,上述执行主体可以减少当前心跳时间,以加快集群中心跳事件的产生。
实践中,若检测到YARN集群RM中待处理事件的数量小于预设阈值且待处理事件数量小于预设阈值的状态持续时间超过预设时间 (例如,0.5秒),上述执行主体可以适当的减少上述当前心跳时间,以加快集群中心跳事件的产生。
在一些实施例的一些可选的实现方式中,上述预设阈值和上述预设时间是通过对集群历史数据统计得到。实践中,可以从数据库中获取集群历史数据。然后,基于集群历史数据,经过统计分析后确定出上述预设阈值和上述预设时间。作为示例,预设阈值可以是100,预设时间可以是0.5秒。
作为示例,从数据库中查询近一年内多个集群历史数据。经过统计多个集群历史数据发现,当RM中待处理事件的数量在100左右时,集群RM对待处理事件的处理能力开始出现不足。这时,若继续增加待处理事件数量,会使得集群崩溃的概率会上升。所以,综合上述,预设阈值可以设置为100。同时,当RM中待处理事件的数量小于100 时,并不会直接减少心跳时间,而是在待处理事件的数量小于100的状态下持续运行一段时间后,才开始减少心跳时间。
本公开的上述各个实施例中的一个实施例具有如下有益效果:若待处理事件数量大于或等于预设阈值,可以增加集群中节点对应的当前心跳时间,使各个节点向调度中心发送心跳信息的时间变长,以减慢集群中心跳事件的产生。
若待处理事件数量小于预设阈值且待处理事件数量小于预设阈值的状态持续时间超过预设时间。这里,表明集群的调度中心处理待处理事件的能力过剩,可以适当减少当前心跳时间。从而各个节点向调度中心发送心跳信息的时间变短,以加快集群中心跳事件的产生,产生更多的待处理事件,让调度中心处理。通过合理的调整心跳时间,实现了对集群中心跳事件的有效控制,既避免了调度中心的崩溃,又避免了调度中心能力的浪费。进一步的,可以在集群中部署更多的节点,从而提升了集群的规模。
进一步参考图3,其示出了用于控制集群中心跳事件的方法的另一些实施例的流程300。该用于控制集群中心跳事件的方法的流程 300,包括以下步骤:
步骤301,确定集群中当前待处理事件的数量。
在一些实施例中,按照预设的时间窗格,上述执行主体可以确定集群中当前待处理事件的数量。其中,当前待处理事件的数量是上一个时间窗格内所产生的待处理事件的数量。
按照预设的时间窗格,上述执行主体可以确定集群中当前待处理事件的数量。其中,上述当前待处理事件的数量是上一个时间窗格内所产生的待处理事件的数量。这里,预设的时间窗格可以是任意时间间隔。实践中,预设的时间窗格往往设置为0.25秒。
步骤302,响应于数量大于或等于预设阈值,按照第一预设时间步长,增加集群中节点对应的当前心跳时间以减慢集群中心跳事件的产生。
在一些实施例中,若待处理事件的数量大于或等于预设阈值,上述执行主体可以按照第一预设时间步长,增加集群中节点对应的当前心跳时间,以减慢集群中心跳事件的产生。其中,第一预设时间步长可以是任意时间间隔。实践中,第一预设时间步长可以是0.25秒。
在一些实施例的一些可选的实现方式中,若上述数量大于预设阈值并且上述当前心跳时间与上述第一预设时间步长的和小于预设上限阈值,上述执行主体可以增加上述YARN集群中节点对应的当前心跳时间,以减慢上述集群中心跳事件的产生。其中,上述预设上限阈值可以是任意数值。实践中,可以将预设上限阈值设置为10秒。
这里,若上述数量大于预设阈值并且上述当前心跳时间与上述第一预设时间步长的和大于或等于预设上限阈值,上述执行主体可以将当前心跳时间调整为预设上限阈值。
步骤303,响应于数量小于预设阈值且数量小于预设阈值的状态持续时间超过预设时间,按照第二预设时间步长,减少当前心跳时间以加快集群中心跳事件的产生。
在一些实施例中,若待处理事件的数量小于预设阈值以及待处理事件数量小于预设阈值的状态持续时间超过预设时间。上述执行主体可以按照第二预设时间步长,减少当前心跳时间,以加快集群中心跳事件的产生。其中,第二预设时间步长可以是任意时间间隔。实践中,第二预设时间步长可以是0.25秒。
在一些实施例的一些可选的实现方式中,若同时满足以下三个条件:上述数量小于上述预设阈值、上述数量小于上述预设阈值的状态持续时间超过预设时间、上述当前心跳时间与上述第二预设时间步长的差大于预设下限阈值,上述执行主体可以减少上述当前心跳时间,以加快上述集群中心跳事件的产生。其中,上述预设下限阈值可以是任意数值。实践中,可以将预设下限阈值设置为3秒。
这里,若同时满足以下三个条件:上述数量小于上述预设阈值、上述数量小于上述预设阈值的状态持续时间超过预设时间、上述当前心跳时间与上述第二预设时间步长的差小于或等于预设下限阈值,上述执行主体可以将上述当前心跳时间调整为预设下限阈值。
在一些实施例的一些可选的实现方式中,上述第一预设时间步长可以等于上述第二预设时间步长。作为示例,上述第一预设时间步长和第二预设时间步长均可以等于0.25秒。
从图中可以看出,与图2对应的一些实施例的描述相比,图3对应的一些实施例中的用于控制集群中心跳事件的方法的流程300体现了按照预设时间步长对集群中节点对应的当前心跳时间进行有规律的调整。作为示例,按照预设时间步长有规律的增加或减少集群中节点对应的当前心跳时间,可以使得集群的运行更加稳定,进一步的,为增加集群规模提供了基础。
图4和图5是根据本公开的一些实施例的用于控制集群中心跳事件的方法的另一个应用场景的示意图;
这里,具体展示了在一段时间内,集群中节点对应的当前心跳时间的变化趋势。其中,上述一段时间被切分为至少一个时间窗格,每个时间窗格可以设置为0.25秒。
如图4中标记400所示,是待处理事件数量随时间变化的柱状图。其中,横坐标表示时间,单位是秒。纵坐标表示待处理事件数量,单位是件。此外,图中还标注有待处理事件的预设阈值。
如图5中标记500所示,是心跳时间随时间变化折线图。其中,横坐标表示时间,单位是秒。纵坐标表示心跳时间,单位也是秒。此外,图中还标注有的初始值,用来表示初始心跳时间。
第一步,以时间点0为起点,由图5可知,在0秒时,心跳时间为初始值。这里,初始值可以是上述预设下限阈值。实践中,可以是 3秒。
第二步,上述执行主体检测到在0秒-0.25秒的时间窗格内,事件的积压数量(即,待处理事件数量)小于预设阈值100,如图4。但是,待处理事件数量的状态持续时间没有超过预设时间。所以,上述执行主体不对心跳时间进行调整。即在0.25秒-0.5秒的时间窗格内,继续保持当前心跳时间在3秒。如图5。
第三步,在0.25秒以后,上述执行主体检测到在接下来的一个的时间窗格内(0.25秒-0.5秒内),待事件数量大于预设阈值,如图4 所示。在0.5秒-0.75秒内,上述执行主体可以按照第一预设时间步长来增加当前心跳时间。实践中,上述执行主体会在当前心跳时间的基础上,增加第一预设时间步长的时间。例如,增加0.25秒。到0.75 秒时,此刻的心跳时间为3.25秒。类似的,在接下的两个0.25秒的时间窗格内,待事件数量均大于预设阈值。在当前心跳时间为3.25秒的基础上,最终,到1.25秒时,当前心跳时间会增加到3.75秒。
第四步,在1秒-1.25秒的时间窗格内,上述执行主体检测到待处理事件的数量小于预设阈值以及数量的状态持续时未超过预设时间(0.5秒)。所以,在1.25秒-1.5秒的时间窗格内,上述执行主体会继续保持当前心跳时间为3.75秒,如图5所示。
第五步,在1.25秒以后,在接下来的一个时间窗格内(1.25秒-1.5 秒),上述执行主体检测到待事件数量大于预设阈值,如图4所示。上述执行主体会按照第一预设时间步长,从1.5秒-1.75秒内,增加当前心跳时间。到1.75秒时,此刻的心跳时间为4秒。类似的,在接下的三个0.25秒时间窗格内,待事件数量均大于预设阈值,在心跳时间为4秒的基础上,最终,到2.5秒时,当前心跳时间会增加到4.75秒。
第六步,在2.25秒以后,在接下来的两个0.25秒时间窗格内(2.25 秒-2.5秒和2.5秒到2.75秒内),上述执行主体检测到待处理事件数量低于预设阈值以及数量低于预设阈值的状态持续时间超过预设时间。上述执行主体可以按照第二预设时间步长,在2.75秒-3.25秒内的时间窗格内,来减少当前心跳时间。这里,第二预设时间步长可以是0.25秒。到3.25秒时,当前的心跳时间为4.5秒。类似的,在接下的6个0.25秒时间窗格内,上述执行主体检测到待处理事件数量低于预设阈值以及数量低于预设阈值的状态持续时间超过预设时间,在心跳时间为4.5秒的基础上。最终,到4.5秒时,当前心跳时间会减少到 3.75秒。
进一步参考图6,作为对上述各图所示方法的实现,本公开提供了一种用于控制集群中心跳事件的装置的一些实施例,这些装置实施例与图2所示的那些方法实施例相对应,该装置具体可以应用于各种电子设备中。
如图6所示,一些实施例的用于控制集群中心跳事件的装置 600 包括:确定单元601,增加单元602和减少单元603。其中,确定单元,被配置成确定集群中当前待处理事件的数量;增加单元,被配置成响应于上述数量大于或等于预设阈值,增加上述集群中节点对应的当前心跳时间以减慢上述集群中心跳事件的产生;减少单元,被配置成响应于上述数量小于上述预设阈值且上述数量小于上述预设阈值的状态持续时间超过预设时间,减少上述当前心跳时间以加快上述集群中心跳事件的产生。
在一些实施例的一些可选的实现方式中,上述预设阈值和上述预设时间是通过对集群历史数据统计得到。
在一些实施例的一些可选的实现方式中,增加单元602可以进一步被配置成:按照第一预设时间步长,增加上述集群中节点对应的当前心跳时间;以及减少单元603可以进一步被配置成:按照第二预设时间步长,减少上述当前心跳时间。
在一些实施例的一些可选的实现方式中,增加单元602可以进一步被配置成:响应于上述数量大于上述预设阈值并且上述当前心跳时间与上述第一预设时间步长的和小于预设上限阈值,增加上述集群中节点对应的当前心跳时间以减慢上述集群中心跳事件的产生;响应于上述数量大于上述预设阈值并且上述当前心跳时间与上述第一预设时间步长的和大于或等于上述预设上限阈值,将上述当前心跳时间调整为上述预设上限阈值。
在一些实施例的一些可选的实现方式中,减少单元603可以进一步被配置成:响应于上述数量小于上述预设阈值且上述数量小于上述预设阈值的状态持续时间超过预设时间且上述当前心跳时间与上述第二预设时间步长的差大于预设下限阈值,减少上述当前心跳时间以加快上述集群中心跳事件的产生。响应于上述数量小于上述预设阈值且上述数量小于上述预设阈值的状态持续时间超过预设时间且上述当前心跳时间与上述第二预设时间步长的差小于或等于上述预设下限阈值,将上述当前心跳时间调整为上述预设下限阈值。
在一些实施例的一些可选的实现方式中,第一确定单元601可以进一步被配置成:按照预设的时间窗格,确定集群中当前待处理事件的数量,其中,上述当前待处理事件的数量是上一个时间窗格内所产生的待处理事件的数量。
在一些实施例的一些可选的实现方式中,上述第一预设时间步长等于上述第二预设时间步长。
可以理解的是,该装置600中记载的诸单元与参考图2描述的方法中的各个步骤相对应。由此,上文针对方法描述的操作、特征以及产生的有益效果同样适用于装置600及其中包含的单元,在此不再赘述。
下面参考图7,其示出了适于用来实现本公开的一些实施例的电子设备(例如图1中的电子设备)700的结构示意图。图7示出的电子设备仅仅是一个示例,不应对本公开的实施例的功能和使用范围带来任何限制。
如图7所示,电子设备700可以包括处理装置(例如中央处理器、图形处理器等)701,其可以根据存储在只读存储器(ROM)702中的程序或者从存储装置705加载到随机访问存储器(RAM)703中的程序而执行各种适当的动作和处理。在RAM 703中,还存储有电子设备700操作所需的各种程序和数据。处理装置701、ROM 702以及RAM 703通过总线704彼此相连。输入/输出(I/O)接口705也连接至总线 704。
通常,以下装置可以连接至I/O接口705:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置 706;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置 707;包括例如磁带、硬盘等的存储装置708;以及通信装置709。通信装置709可以允许电子设备700与其他设备进行无线或有线通信以交换数据。虽然图7示出了具有各种装置的电子设备700,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。图7中示出的每个方框可以代表一个装置,也可以根据需要代表多个装置。
特别地,根据本公开的一些实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的一些实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的一些实施例中,该计算机程序可以通过通信装置709从网络上被下载和安装,或者从存储装置708被安装,或者从ROM 702被安装。在该计算机程序被处理装置701执行时,执行本公开的一些实施例的方法中限定的上述功能。
需要说明的是,本公开的一些实施例上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM 或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开的一些实施例中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开的一些实施例中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
在一些实施方式中,客户端、服务器可以利用诸如HTTP (HyperText TransferProtocol,超文本传输协议)之类的任何当前已知或未来研发的网络协议进行通信,并且可以与任意形式或介质的数字数据通信(例如,通信网络)互连。通信网络的示例包括局域网(“LAN”),广域网(“WAN”),网际网(例如,互联网)以及端对端网络(例如,ad hoc端对端网络),以及任何当前已知或未来研发的网络。
上述计算机可读介质可以是上述装置中所包含的;也可以是单独存在,而未装配入该电子设备中。上述计算机可读介质承载有一个或者多个程序,确定集群中当前待处理事件的数量;响应于上述数量大于或等于预设阈值,增加上述集群中节点对应的当前心跳时间以减慢上述集群中心跳事件的产生;响应于上述数量小于上述预设阈值且上述数量小于上述预设阈值的状态持续时间超过预设时间,减少上述当前心跳时间以加快上述集群中心跳事件的产生。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的一些实施例的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开的一些实施例中的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中,例如,可以描述为:一种处理器包括确定单元、增加单元和减少单元。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定,例如,确定单元还可以被描述为“确定集群中当前待处理事件的数量的单元”。
本文中以上描述的功能可以至少部分地由一个或多个硬件逻辑部件来执行。例如,非限制性地,可以使用的示范类型的硬件逻辑部件包括:现场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、片上系统(SOC)、复杂可编程逻辑设备(CPLD) 等等。
根据本公开的一个或多个实施例,提供了一种用于控制集群中心跳事件的方法,包括:确定集群中当前待处理事件的数量;响应于上述数量大于或等于预设阈值,增加上述集群中节点对应的当前心跳时间以减慢上述集群中心跳事件的产生;响应于上述数量小于上述预设阈值且上述数量小于上述预设阈值的状态持续时间超过预设时间,减少上述当前心跳时间以加快上述集群中心跳事件的产生。
根据本公开的一个或多个实施例,上述预设阈值和上述预设时间是通过对集群历史数据统计得到。
根据本公开的一个或多个实施例,上述增加集群中节点对应的当前心跳时间,包括:按照第一预设时间步长,增加上述集群中节点对应的当前心跳时间;以及上述减少上述当前心跳时间,包括:按照第二预设时间步长,减少上述当前心跳时间。
根据本公开的一个或多个实施例,响应于上述数量大于或等于预设阈值,增加上述集群中节点对应的当前心跳时间以减慢上述集群中心跳事件的产生,包括:响应于上述数量大于上述预设阈值并且上述当前心跳时间与上述第一预设时间步长的和小于预设上限阈值,增加上述集群中节点对应的当前心跳时间以减慢上述集群中心跳事件的产生;响应于上述数量大于上述预设阈值并且上述当前心跳时间与上述第一预设时间步长的和大于或等于上述预设上限阈值,将上述当前心跳时间调整为上述预设上限阈值。
根据本公开的一个或多个实施例,上述响应于上述数量小于上述预设阈值且上述数量小于上述预设阈值的状态持续时间超过预设时间,减少上述当前心跳时间以加快上述集群中心跳事件的产生,包括:响应于上述数量小于上述预设阈值且上述数量小于上述预设阈值的状态持续时间超过预设时间且上述当前心跳时间与上述第二预设时间步长的差大于预设下限阈值,减少上述当前心跳时间以加快上述集群中心跳事件的产生。响应于上述数量小于上述预设阈值且上述数量小于上述预设阈值的状态持续时间超过预设时间且上述当前心跳时间与上述第二预设时间步长的差小于或等于上述预设下限阈值,将上述当前心跳时间调整为上述预设下限阈值。
根据本公开的一个或多个实施例,上述确定集群中当前待处理事件的数量,包括:按照预设的时间窗格,确定集群中当前待处理事件的数量,其中,上述当前待处理事件的数量是上一个时间窗格内所产生的待处理事件的数量。
根据本公开的一个或多个实施例,上述第一预设时间步长等于上述第二预设时间步长。
根据本公开的一个或多个实施例,提供了一种用于控制集群中心跳事件的装置,包括:确定单元,被配置成确定集群中当前待处理事件的数量;增加单元,被配置成响应于上述数量大于或等于预设阈值,增加上述集群中节点对应的当前心跳时间以减慢上述集群中心跳事件的产生;减少单元,被配置成响应于上述数量小于上述预设阈值且上述数量小于上述预设阈值的状态持续时间超过预设时间,减少上述当前心跳时间以加快上述集群中心跳事件的产生。
根据本公开的一个或多个实施例,上述预设阈值和上述预设时间是通过对集群历史数据统计得到。
根据本公开的一个或多个实施例,增加单元可以进一步被配置成:按照第一预设时间步长,增加上述集群中节点对应的当前心跳时间;以及减少单元可以进一步被配置成:按照第二预设时间步长,减少上述当前心跳时间。
根据本公开的一个或多个实施例,增加单元可以进一步被配置成:响应于上述数量大于上述预设阈值并且上述当前心跳时间与上述第一预设时间步长的和小于预设上限阈值,增加上述集群中节点对应的当前心跳时间以减慢上述集群中心跳事件的产生;响应于上述数量大于上述预设阈值并且上述当前心跳时间与上述第一预设时间步长的和大于或等于上述预设上限阈值,将上述当前心跳时间调整为上述预设上限阈值。
根据本公开的一个或多个实施例,减少单元可以进一步被配置成:响应于上述数量小于上述预设阈值且上述数量小于上述预设阈值的状态持续时间超过预设时间且上述当前心跳时间与上述第二预设时间步长的差大于预设下限阈值,减少上述当前心跳时间以加快上述集群中心跳事件的产生。响应于上述数量小于上述预设阈值且上述数量小于上述预设阈值的状态持续时间超过预设时间且上述当前心跳时间与上述第二预设时间步长的差小于或等于上述预设下限阈值,将上述当前心跳时间调整为上述预设下限阈值。
根据本公开的一个或多个实施例,第一确定单元可以进一步被配置成:按照预设的时间窗格,确定集群中当前待处理事件的数量,其中,上述当前待处理事件的数量是上一个时间窗格内所产生的待处理事件的数量。
根据本公开的一个或多个实施例,上述第一预设时间步长等于上述第二预设时间步长。
根据本公开的一个或多个实施例,提供了一种电子设备,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序,当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如上述任一实施例描述的方法。
根据本公开的一个或多个实施例,提供了一种计算机可读介质,其上存储有计算机程序,其中,程序被处理器执行时实现如上述任一实施例描述的方法。
以上描述仅为本公开的一些较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开的实施例中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开的实施例中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
Claims (10)
1.一种用于控制集群中心跳事件的方法,包括:
按照预设的时间窗格,确定集群中的调度中心当前对应的待处理事件的数量,所述待处理事件包括心跳事件和所述心跳事件对应的衍生事件,所述调度中心用于将所述待处理事件传递至对应的事件处理器;
响应于所述数量大于或等于预设阈值,增加所述集群中节点对应的当前心跳时间以减慢所述集群中心跳事件的产生;
响应于所述数量小于所述预设阈值且所述数量小于所述预设阈值的状态持续时间超过预设时间,减少所述当前心跳时间以加快所述集群中心跳事件的产生,其中,所述持续时间在连续的多个所述时间窗格之间累计。
2.根据权利要求1所述的方法,其中,所述预设阈值和所述预设时间是通过对集群历史数据统计得到。
3.根据权利要求1所述的方法,其中,所述增加所述集群中节点对应的当前心跳时间,包括:
按照第一预设时间步长,增加所述集群中节点对应的当前心跳时间;以及
所述减少所述当前心跳时间,包括:
按照第二预设时间步长,减少所述当前心跳时间。
4.根据权利要求3所述的方法,其中,所述响应于所述数量大于或等于预设阈值,增加所述集群中节点对应的当前心跳时间以减慢所述集群中心跳事件的产生,包括:
响应于所述数量大于所述预设阈值并且所述当前心跳时间与所述第一预设时间步长的和小于预设上限阈值,增加所述集群中节点对应的当前心跳时间以减慢所述集群中心跳事件的产生;
响应于所述数量大于所述预设阈值并且所述当前心跳时间与所述第一预设时间步长的和大于或等于所述预设上限阈值,将所述当前心跳时间调整为所述预设上限阈值。
5.根据权利要求3所述的方法,其中,所述响应于所述数量小于所述预设阈值且所述数量小于所述预设阈值的状态持续时间超过预设时间,减少所述当前心跳时间以加快所述集群中心跳事件的产生,包括:
响应于所述数量小于所述预设阈值且所述数量小于所述预设阈值的状态持续时间超过预设时间且所述当前心跳时间与所述第二预设时间步长的差大于预设下限阈值,减少所述当前心跳时间以加快所述集群中心跳事件的产生;
响应于所述数量小于所述预设阈值且所述数量小于所述预设阈值的状态持续时间超过预设时间且所述当前心跳时间与所述第二预设时间步长的差小于或等于所述预设下限阈值,将所述当前心跳时间调整为所述预设下限阈值。
6.根据权利要求1所述的方法,所述确定集群中当前待处理事件的数量,包括:
确定集群中当前待处理事件的数量,其中,所述当前待处理事件的数量是上一个时间窗格内所产生的待处理事件的数量。
7.根据权利要求3所述的方法,其中,所述第一预设时间步长等于所述第二预设时间步长。
8.一种用于控制集群中心跳事件的装置 ,包括:
确定单元,被配置成按照预设的时间窗格,确定集群中的调度中心当前对应的待处理事件的数量,所述待处理事件包括心跳事件和所述心跳事件对应的衍生事件,所述调度中心用于将所述待处理事件传递至对应的事件处理器;
增加单元,被配置成响应于所述数量大于或等于预设阈值,增加所述集群中节点对应的当前心跳时间以减慢所述集群中心跳事件的产生;
减少单元,被配置成响应于所述数量小于所述预设阈值且所述数量小于所述预设阈值的状态持续时间超过预设时间,减少所述当前心跳时间以加快所述集群中心跳事件的产生,其中,所述持续时间在连续的多个所述时间窗格之间累计。
9.一种电子设备,包括:
一个或多个处理器;
存储装置,其上存储有一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-7中任一所述的方法。
10.一种计算机可读介质,其上存储有计算机程序,其中,所述程序被处理器执行时实现如权利要求1-7中任一所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010538168.3A CN111698132B (zh) | 2020-06-12 | 2020-06-12 | 用于控制集群中心跳事件的方法、装置、设备和介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010538168.3A CN111698132B (zh) | 2020-06-12 | 2020-06-12 | 用于控制集群中心跳事件的方法、装置、设备和介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111698132A CN111698132A (zh) | 2020-09-22 |
CN111698132B true CN111698132B (zh) | 2022-03-01 |
Family
ID=72480807
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010538168.3A Active CN111698132B (zh) | 2020-06-12 | 2020-06-12 | 用于控制集群中心跳事件的方法、装置、设备和介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111698132B (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013075489A1 (zh) * | 2011-11-23 | 2013-05-30 | 中兴通讯股份有限公司 | 检测报文心跳周期的自适应方法和装置 |
CN104333465A (zh) * | 2014-10-31 | 2015-02-04 | 北京奇虎科技有限公司 | 一种心跳间隔设置的方法、装置及系统 |
CN105897499A (zh) * | 2015-12-07 | 2016-08-24 | 乐视云计算有限公司 | 分布式存储系统节点状态监控方法、中心节点及系统 |
CN107612789A (zh) * | 2017-11-09 | 2018-01-19 | 北京奇艺世纪科技有限公司 | 一种客户端的心跳间隔调整方法及装置 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6928589B1 (en) * | 2004-01-23 | 2005-08-09 | Hewlett-Packard Development Company, L.P. | Node management in high-availability cluster |
CN100367714C (zh) * | 2004-02-27 | 2008-02-06 | 联想(北京)有限公司 | 基于网络和主机负载的变速心跳机制的实现方法 |
CN102843250B (zh) * | 2011-06-21 | 2018-01-19 | 中兴通讯股份有限公司 | 一种心跳周期的自适应方法和装置 |
CN105227488B (zh) * | 2015-08-25 | 2018-05-08 | 上海交通大学 | 一种用于分布式计算机平台的网络流组调度方法 |
CN106933662A (zh) * | 2017-03-03 | 2017-07-07 | 广东神马搜索科技有限公司 | 分布式系统及其调度方法和调度装置 |
CN109257195B (zh) * | 2017-07-12 | 2021-01-15 | 华为技术有限公司 | 集群中节点的故障处理方法及设备 |
CN109302445B (zh) * | 2018-08-14 | 2021-10-12 | 新华三云计算技术有限公司 | 主机节点状态确定方法、装置、主机节点及存储介质 |
-
2020
- 2020-06-12 CN CN202010538168.3A patent/CN111698132B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013075489A1 (zh) * | 2011-11-23 | 2013-05-30 | 中兴通讯股份有限公司 | 检测报文心跳周期的自适应方法和装置 |
CN104333465A (zh) * | 2014-10-31 | 2015-02-04 | 北京奇虎科技有限公司 | 一种心跳间隔设置的方法、装置及系统 |
CN105897499A (zh) * | 2015-12-07 | 2016-08-24 | 乐视云计算有限公司 | 分布式存储系统节点状态监控方法、中心节点及系统 |
CN107612789A (zh) * | 2017-11-09 | 2018-01-19 | 北京奇艺世纪科技有限公司 | 一种客户端的心跳间隔调整方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN111698132A (zh) | 2020-09-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2022068488A1 (zh) | 消息发送的控制方法、装置、电子设备及计算机可读存储介质 | |
CN112416632B (zh) | 事件通信方法、装置、电子设备和计算机可读介质 | |
CN113722056A (zh) | 任务调度方法、装置、电子设备和计算机可读介质 | |
CN109428926B (zh) | 一种调度任务节点的方法和装置 | |
CN113722055A (zh) | 数据处理方法、装置、电子设备和计算机可读介质 | |
CN113419841B (zh) | 消息调度方法、装置、电子设备和计算机可读介质 | |
CN108764866B (zh) | 用于分配资源、领取资源的方法和设备 | |
CN112084042A (zh) | 一种消息处理的方法和装置 | |
CN113159680A (zh) | 库存预占方法、装置、电子设备和计算机可读介质 | |
WO2024066374A1 (zh) | 业务降级方法、装置、设备、计算机可读介质和程序产品 | |
CN113760498A (zh) | 消息消费方法、装置、电子设备和计算机可读介质 | |
CN113791891A (zh) | 持续集成任务构建方法、装置、设备和计算机可读介质 | |
CN111698132B (zh) | 用于控制集群中心跳事件的方法、装置、设备和介质 | |
CN112527454A (zh) | 容器组调度方法、装置、电子设备和计算机可读介质 | |
CN114095907A (zh) | 蓝牙连接的控制方法、装置及设备 | |
CN114265692A (zh) | 服务调度方法、装置、设备以及存储介质 | |
CN114035861A (zh) | 集群配置方法、装置、电子设备和计算机可读介质 | |
CN112817701A (zh) | 定时器处理方法、装置、电子设备和计算机可读介质 | |
CN113537893A (zh) | 订单处理方法、装置、设备和计算机可读介质 | |
CN112163176A (zh) | 数据存储方法、装置、电子设备和计算机可读介质 | |
CN110119364B (zh) | 一种输入/输出批量提交的方法和系统 | |
CN112346891A (zh) | 消息存储方法、装置、设备和计算机可读介质 | |
CN111930331A (zh) | 信息显示方法、装置、电子设备和计算机可读介质 | |
CN113472565B (zh) | 服务器功能的扩容方法、装置、设备和计算机可读介质 | |
CN112235167B (zh) | 流量报警方法、装置、电子设备和计算机可读介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
TR01 | Transfer of patent right |
Effective date of registration: 20220713 Address after: 100190 1309, 13th floor, building 4, Zijin Digital Park, Haidian District, Beijing Patentee after: Beijing volcano Engine Technology Co.,Ltd. Address before: 100041 B-0035, 2 floor, 3 building, 30 Shixing street, Shijingshan District, Beijing. Patentee before: BEIJING BYTEDANCE NETWORK TECHNOLOGY Co.,Ltd. |
|
TR01 | Transfer of patent right |