CN116800819A - 集群资源调度方法、装置、计算机设备和存储介质 - Google Patents
集群资源调度方法、装置、计算机设备和存储介质 Download PDFInfo
- Publication number
- CN116800819A CN116800819A CN202310826202.0A CN202310826202A CN116800819A CN 116800819 A CN116800819 A CN 116800819A CN 202310826202 A CN202310826202 A CN 202310826202A CN 116800819 A CN116800819 A CN 116800819A
- Authority
- CN
- China
- Prior art keywords
- information
- cluster
- resource
- application
- slave
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 57
- 238000004590 computer program Methods 0.000 claims description 18
- 238000004891 communication Methods 0.000 claims description 10
- 238000010586 diagram Methods 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 6
- 238000012217 deletion Methods 0.000 description 4
- 230000037430 deletion Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 241000380131 Ammophila arenaria Species 0.000 description 3
- 230000003068 static effect Effects 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 239000008186 active pharmaceutical agent Substances 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 229910021389 graphene Inorganic materials 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000010561 standard procedure Methods 0.000 description 1
Landscapes
- Data Exchanges In Wide-Area Networks (AREA)
Abstract
本申请涉及一种集群资源调度方法、装置、计算机设备和存储介质。所述方法包括:获取所述主集群的调度资源包信息;所述调度资源包包含各从集群的应用信息对应的应用资源包信息、以及各所述从集群的应用信息的集群配置信息;基于所述主集群的调度资源信息,生成各所述从集群的分发调度资源包信息,并将各所述分发调度资源包信息分别分配至各所述分发调度资源包信息对应的从集群;所述分发调度资源包信息用于建立所述从集群的应用信息。采用本方法能够提升了多集群的资源调度效率。
Description
技术领域
本申请涉及大数据技术领域,特别是涉及一种集群资源调度方法、装置、计算机设备和存储介质。
背景技术
用户在Kubernetes集群中要部署一个应用,往往需要部署多种Kubernetes的原生资源,例如Deployment(管理发布控制器的API)、Service(逻辑分组)或Configmap(资源对象)等等。但是这些不同资源的YAML文件(Yet Another Markup Language,标记语言)是十分分散的,且不方便管理。技术人员通过Helm技术把Kubernetes的各种资源统一组织成一个整合资源Chart包,从而通过Chart包实现对Kubernetes集群的应用的安装、卸载、升级等操作。因此,Helm技术已经成为了Kubernetes应用管理的标准技术。
当多个集群需要同时进行应用部署时,需要对多个集群统一进行调度配置。相关技术中,通常是通过KubeFed技术在多个Kubernetes集群的应用资源对应的整合资源Chart包进行分解,并分别将该Chart包中的每个原生资源调度配置于各集群中,但是由于KubeFed技术的技术限制,导致该方法只能对单一原生资源进行调度配置,而无法对整合资源Chart包进行整体配置,从而导致多集群的资源调度效率较低。
发明内容
基于此,有必要针对上述技术问题,提供一种集群资源调度方法、装置、计算机设备、计算机可读存储介质和计算机程序产品。
第一方面,本申请提供了一种集群资源调度方法。所述方法包括:
获取所述主集群的调度资源包信息;所述调度资源包包含各从集群的应用信息对应的应用资源包信息、以及各所述从集群的应用信息的集群配置信息;
基于所述主集群的调度资源信息,生成各所述从集群的分发调度资源包信息,并将各所述分发调度资源包信息分别分配至各所述分发调度资源包信息对应的从集群;所述分发调度资源包信息用于建立所述从集群的应用信息。
可选的,所述基于所述主集群的调度资源信息,生成各所述从集群的分发调度资源包信息,包括:
解析所述主集群的调度资源信息,得到所述应用资源包信息、以及所述集群配置信息,所述集群配置信息包含所述应用资源包信息在各从集群的集群位置信息、所述应用资源包在各从集群的差异配置信息、以及所述应用资源包的应用资源配置信息,并基于所述应用资源包信息、以及所述应用资源包的应用资源配置信息,生成第一分发调度资源包信息;
针对每个从集群,基于所述应用资源包在所述从集群的差异配置信息,调整所述第一分发调度资源包信息,得到所述从集群的第二分发调度资源包信息,并对所述第二分发调度资源包信息标注所述应用资源包信息在所述从集群的集群位置信息,得到所述从集群的分发调度资源包信息。
可选的,所述将各所述分发调度资源包信息分别分配至各所述分发调度资源包信息对应的从集群之后,还包括:
分别从各所述从集群中,获取各所述从集群的应用信息的应用状态信息;
在所述从集群的所述应用状态信息满足删除所述从集群的应用信息的条件的情况下,删除所述从集群的应用信息;
在所述从集群的所述应用状态信息满足更新所述从集群的应用信息的条件的情况下,通过应用资源更新策略,更新所述从集群的应用信息。
可选的,所述在所述从集群的所述应用状态信息满足删除所述从集群的应用信息的条件的情况下,删除所述从集群的应用信息,包括:
生成应用资源删除指令,并向所述需要删除应用信息的从集群传输所述应用资源删除指令;所述应用资源删除指令用于指示所述需要删除应用信息的从集群的应用信息。
可选的,所述在所述从集群的所述应用状态信息满足更新所述从集群的应用信息的条件的情况下,通过应用资源更新策略,更新所述从集群的应用信息,包括:
针对每个满足更新所述从集群的应用信息的条件的从集群,基于所述从集群的应用状态信息,生成所述从集群的更新调度资源包信息,并将所述更新调度资源包信息分配至所述从集群;所述更新调度资源包信息包括应用资源更新信息,所述应用资源更新信息用于对所述从集群的应用信息进行更新处理,得到所述从集群的新应用信息。
第二方面,本申请提供了一种集群资源调度方法。所述方法包括:
接收主集群发送的分发调度资源包信息;所述分发调度资源包为所述主集群的调度资源信息生成的;
解析所述分发调度资源包信息,得到从集群的应用资源配置信息、以及所述从集群的应用资源包信息;所述应用资源包信息包括多个初始应用资源数据,所述应用资源配置信息包括各所述初始应用资源数据的配置值;
基于所述应用资源配置信息,分别配置每个初始应用资源数据的配置值,得到各应用资源数据,并将所有应用资源数据,作为所述从集群的应用信息。
第三方面,本申请还提供了一种集群资源调度装置。所述装置包括:
获取模块,用于获取所述主集群的调度资源包信息;所述调度资源包包含各从集群的应用信息对应的应用资源包信息、以及各所述从集群的应用信息的集群配置信息;
生成模块,用于基于所述主集群的调度资源信息,生成各所述从集群的分发调度资源包信息,并将各所述分发调度资源包信息分别分配至各所述分发调度资源包信息对应的从集群;所述分发调度资源包信息用于建立所述从集群的应用信息。
可选的,所述生成模块,具体用于:
解析所述主集群的调度资源信息,得到所述应用资源包信息、以及所述集群配置信息,所述集群配置信息包含所述应用资源包信息在各从集群的集群位置信息、所述应用资源包在各从集群的差异配置信息、以及所述应用资源包的应用资源配置信息,并基于所述应用资源包信息、以及所述应用资源包的应用资源配置信息,生成第一分发调度资源包信息;
针对每个从集群,基于所述应用资源包在所述从集群的差异配置信息,调整所述第一分发调度资源包信息,得到所述从集群的第二分发调度资源包信息,并对所述第二分发调度资源包信息标注所述应用资源包信息在所述从集群的集群位置信息,得到所述从集群的分发调度资源包信息。
可选的,所述装置还包括:
状态获取模块,用于分别从各所述从集群中,获取各所述从集群的应用信息的应用状态信息;
删除模块,用于在所述从集群的所述应用状态信息满足删除所述从集群的应用信息的条件的情况下,删除所述从集群的应用信息;
更新模块,用于在所述从集群的所述应用状态信息满足更新所述从集群的应用信息的条件的情况下,通过应用资源更新策略,更新所述从集群的应用信息。
可选的,所述删除模块,具体用于:
生成应用资源删除指令,并向所述需要删除应用信息的从集群传输所述应用资源删除指令;所述应用资源删除指令用于指示所述需要删除应用信息的从集群的应用信息。
可选的,所述更新模块,具体用于:
针对每个满足更新所述从集群的应用信息的条件的从集群,基于所述从集群的应用状态信息,生成所述从集群的更新调度资源包信息,并将所述更新调度资源包信息分配至所述从集群;所述更新调度资源包信息包括应用资源更新信息,所述应用资源更新信息用于对所述从集群的应用信息进行更新处理,得到所述从集群的新应用信息。
第四方面,本申请还提供了一种集群资源调度装置。所述装置包括:
接收模块,用于接收主集群发送的分发调度资源包信息;所述分发调度资源包为所述主集群的调度资源信息生成的;
解析模块,用于解析所述分发调度资源包信息,得到从集群的应用资源配置信息、以及所述从集群的应用资源包信息;所述应用资源包信息包括多个初始应用资源数据,所述应用资源配置信息包括各所述初始应用资源数据的配置值;
配置模块,用于基于所述应用资源配置信息,分别配置每个初始应用资源数据的配置值,得到各应用资源数据,并将所有应用资源数据,作为所述从集群的应用信息。
第五方面,本申请还提供了一种集群资源调度系统,其特征在于,所述系统包括资源主调度单元、与资源从调度单元:
所述资源主调度单元设置于主集群、所述资源从调度单元设置于主集群与各从集群,所述设置于所述主集群与各所述从集群的资源从调度单元之间通信连接;
所述资源主调度单元,用于生成所述主集群的调度资源包信息,并基于所述主集群的调度资源信息,生成各所述从集群的分发调度资源包信息;
所述资源从调度单元,用于将各所述分发调度资源包信息分别分配至各所述分发调度资源包信息对应的从集群,并接收主集群发送的分发调度资源包信息;解析所述分发调度资源包信息,得到从集群的应用资源配置信息、以及所述从集群的应用资源包信息;所述应用资源包信息包括多个初始应用资源数据,所述应用资源配置信息包括各所述初始应用资源数据的配置值;基于所述应用资源配置信息,分别配置每个初始应用资源数据的配置值,得到各应用资源数据,并将所有应用资源数据,作为所述从集群的应用信息。
第六方面,本申请提供了一种计算机设备。所述计算机设备包括存储器和处理器,所述存储器存储有计算机程序,所述处理器执行所述计算机程序时实现第一方面或者第二方面中任一项所述的方法的步骤。
第七方面,本申请提供了一种计算机可读存储介质。其上存储有计算机程序,所述计算机程序被处理器执行时实现第一方面或者第二方面中任一项所述的方法的步骤。
第八方面,本申请提供了一种计算机程序产品。所述计算机程序产品包括计算机程序,该计算机程序被处理器执行时实现第一方面或者第二方面中任一项所述的方法的步骤。
上述集群资源调度方法、装置、计算机设备和存储介质,通过获取所述主集群的调度资源包信息;所述调度资源包包含各从集群的应用信息对应的应用资源包信息、以及各所述从集群的应用信息的集群配置信息;基于所述主集群的调度资源信息,生成各所述从集群的分发调度资源包信息,并将各所述分发调度资源包信息分别分配至各所述分发调度资源包信息对应的从集群;所述分发调度资源包信息用于建立所述从集群的应用信息。在主集群侧,通过主集群的包含各从集群的应用信息对应的应用资源包信息、以及各所述从集群的应用信息的集群配置信息的调度资源包信息,生成每个从集群的分发调度资源包信息,然后将各分发调度资源包信息分别发送至各从集群,然后,在从集群侧基于该分发调度资源包信息,建立该从集群的应用信息,使得服务器直接对整合资源chart包进行分发配置,避免只对的那个原生资源进行调度配置的过程,提升了多集群的资源调度效率。
附图说明
图1为一个实施例中集群资源调度方法的流程示意图;
图2为一个实施例中生成各从集群的分发调度资源包信息的内容示意图;
图3为一个实施例中分配各分发调度资源包信息的结构示意图;
图4为另一个实施例中集群资源调度方法的流程示意图;
图5为一个实施例中集群资源调度系统的结构示意图;
图6为一个实施例中集群资源调度示例的流程示意图;
图7为一个实施例中集群资源调度装置的结构框图;
图8为另一个实施例中集群资源调度装置的结构框图;
图9为一个实施例中计算机设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
本申请实施例提供的集群资源调度方法,该方法应用于联邦Kubernetes(K8s)集群环境下的集群资源调度系统的服务器。该系统包括设置于主集群的资源主调度单元501、设置于主集群的资源从调度单元502、设置于从集群的资源从调度单元502,设置于主集群与各从集群的资源从调度单元502之间通信连接。服务器可以用独立的服务器或者是多个服务器组成的服务器集群来实现。其中,服务器在主集群侧,通过主集群的包含各从集群的应用信息对应的应用资源包信息、以及各所述从集群的应用信息的集群配置信息的调度资源包信息,生成每个从集群的分发调度资源包信息,然后将各分发调度资源包信息分别发送至各从集群,然后,在从集群侧基于该分发调度资源包信息,建立该从集群的应用信息,使得服务器直接对整合资源chart包进行分发配置,避免只对的那个原生资源进行调度配置的过程,提升了多集群的资源调度效率。
在一个实施例中,如图1所示,提供了一种集群资源调度方法,以该方法应用于服务器为例进行说明,包括以下步骤:
步骤S101,获取主集群的调度资源包信息。
其中,调度资源包包含各从集群的应用信息对应的应用资源包信息、以及各从集群的应用信息的集群配置信息。
本实施例中,服务器响应于用户的多集群资源调度操作,获取需要进行资源调度的联邦集群,然后服务器选择该联邦集群中的根节点对应的集群,作为主集群,并将除主集群外的各集群作为从集群。其中,该集群为Kubernetes(K8s)集群。其次,服务器基于用户的多集群资源调度操作,获取需要进行调度的整合资源chart包以及该整合资源chart包的配置信息,得到调度资源包信息。其中该整合资源chart包为通过Helm集群资源调度技术整合的集群的需要调度的原生资源的资源组。然后,服务器在主集群中设置资源主调度单元,并在主集群、以及各从集群中设置资源从调度单元。其中资源主调度单元为基于自定义资源拓展策略CustomResourceDefinition(简称CRD)建立的FedRelease-controller-manager,资源从调度单元为基于自定义资源拓展策略CustomResourceDefinition(简称CRD)建立的HelmRelease-controller-manager。调度资源包信息为FedReleaseCRD,FedReleaseCRD中包含了:
1.Chart信息。创建helmrelease的所需的chart包信息。
2.Release信息。创建helmrelease的名称(name),命名空间(namespace),时间(time)等信息。
3.Values信息。创建helmrelease时,根据用户需求chart包的相关配置的值。
4.Placement信息。创建helmrelease的集群位置信息。
5.Override信息。不同集群的helmrelease部署时的差异配置。分发调度资源包信息为HelmReleaseCRD,HelmReleaseCRD中包含了:
1.Chart信息。创建helmrelease的所需的chart包信息。
2.Release信息。创建helmrelease的名称(name),命名空间(namespace),时间(time)等信息。
3.Values信息。创建helmrelease时,根据用户需求chart包的相关配置的值。
其中,helmrelease为每个从集群的应用信息。
步骤S102,基于主集群的调度资源信息,生成各从集群的分发调度资源包信息,并将各分发调度资源包信息分别分配至各分发调度资源包信息对应的从集群。
其中,分发调度资源包信息用于建立从集群的应用信息。
本实施例中,服务器通过主集群的资源主调度单元,基于主集群的调度资源信息,生成各从集群的分发调度资源包信息。然后,服务器通过主集群的资源从调度单元,将各分发调度资源包信息分别分配至各分发调度资源包信息对应的从集群。具体的,如图2所示,主集群的资源主调度单元,基于FedReleaseCRD中的Chart信息,生成HelmReleaseCRD中的Chart信息;基于FedReleaseCRD中的Release信息,生成HelmReleaseCRD中的Release信息;基于FedReleaseCRD中的Values信息结合Override信息,生成HelmReleaseCRD中的Values信息。如图3所示,主集群的资源从调度单元,将每个从集群的分发调度资源包信息,发送至各从集群的资源从调度单元,具体的生成过程后续将详细说明。
针对每个从集群,服务器通过该从集群的资源从调度单元,解析该分发调度资源包信息,并基于已解析的分发调度资源包信息,分别确定每个应用资源数据的配置信息,得到该从集群的应用信息。具体的建立过程后续将详细说明。
基于上述方案,在主集群侧,通过主集群的包含各从集群的应用信息对应的应用资源包信息、以及各所述从集群的应用信息的集群配置信息的调度资源包信息,生成每个从集群的分发调度资源包信息,然后将各分发调度资源包信息分别发送至各从集群,然后,在从集群侧基于该分发调度资源包信息,建立该从集群的应用信息,使得服务器直接对整合资源chart包进行分发配置,避免只对的那个原生资源进行调度配置的过程,提升了多集群的资源调度效率。
可选的,基于主集群的调度资源信息,生成各从集群的分发调度资源包信息,包括:解析主集群的调度资源信息,得到应用资源包信息、以及集群配置信息,集群配置信息包含应用资源包信息在各从集群的集群位置信息、应用资源包在各从集群的差异配置信息、以及应用资源包的应用资源配置信息,并基于应用资源包信息、以及应用资源包的应用资源配置信息,生成第一分发调度资源包信息;针对每个从集群,基于应用资源包在从集群的差异配置信息,调整第一分发调度资源包信息,得到从集群的第二分发调度资源包信息,并对第二分发调度资源包信息标注应用资源包信息在从集群的集群位置信息,得到从集群的分发调度资源包信息。
本实施例中,服务器解析主集群的调度资源信息,得到应用资源包信息(即FedReleaseCRD中的Chart信息)、应用资源包信息在各从集群的集群位置信息(即FedReleaseCRD中的Placement信息)、应用资源包在各从集群的差异配置信息(即FedReleaseCRD中的Override信息)、以及应用资源包的应用资源配置信息(即FedReleaseCRD中的Values信息)。然后,服务器将应用资源包信息、以及应用资源包的应用资源配置信息的组合,作为第一分发调度资源包信息。然后,服务器针对每个从集群,通过主集群的资源主调度单元,基于应用资源包在该从集群的差异配置信息,调整第一分发调度资源包信息中的应用资源包的应用资源配置信息,得到从集群的第二分发调度资源包信息。最后,服务器对第二分发调度资源包信息标注应用资源包信息在从集群的集群位置信息,得到该从集群的分发调度资源包信息。
基于上述方案,通过应用资源包在从集群的差异配置信息,确定各从集群的分发调度资源包信息,提升了对每个从集群的数据调度精准度。
可选的,将各分发调度资源包信息分别分配至各分发调度资源包信息对应的从集群之后,还包括:通过主集群的资源主调度单元,分别从各从集群中,获取各从集群的应用信息的应用状态信息;在从集群的应用状态信息满足删除从集群的应用信息的条件的情况下,通过从集群的资源从调度单元,删除从集群的应用信息;在从集群的应用状态信息满足更新从集群的应用信息的条件的情况下,通过应用资源更新策略,更新从集群的应用信息。
本实施例中,服务器在建立每个从集群的应用信息之后,实时获取通过主集群的资源主调度单元,分别从各从集群中,获取每个从集群的应用信息的应用状态信息。其中该应用状态信息为该应用信息在该从集群的运行状态信息。然后,服务器预设删除从集群的应用信息的条件、以及更新从集群的应用信息的条件,并判断该应用状态信息是否满足删除从集群的应用信息的条件、或该应用状态信息是否满足更新从集群的应用信息的条件。在从集群的应用状态信息满足删除从集群的应用信息的条件的情况下,服务器通过从集群的资源从调度单元,删除从集群的应用信息。在从集群的应用状态信息满足更新从集群的应用信息的条件的情况下,服务器通过应用资源更新策略,更新从集群的应用信息。具体的删除应用信息、以及更新应用信息的过程后续将详细说明。
基于上述方案,通过实施检测各从集群的应用状态信息,从而调整各从集群的应用信息,确保各从集群的应用信息能够正常运行。
可选的,在从集群的应用状态信息满足删除从集群的应用信息的条件的情况下,通过从集群的资源从调度单元,删除从集群的应用信息,包括:生成应用资源删除指令,并向需要删除应用信息的从集群传输应用资源删除指令;应用资源删除指令用于指示需要删除应用信息的从集群的应用信息。
本实施例中,服务器通过主集群的主资源调度单元,生成应用资源删除指令,并通过主集群的从资源调度单元,向需要删除应用信息的从集群传输应用资源删除指令。最后,服务器通过需要删除应用信息的从集群的从资源调度单元,删除从集群的应用信息。
基于上述方案,通过应用资源删除指令,直接对所有需要删除应用信息的从集群,统一执行删除应用信息的操作,提升删除各从集群的应用信息的效率。
可选的,在从集群的应用状态信息满足更新从集群的应用信息的条件的情况下,通过应用资源更新策略,更新从集群的应用信息,包括:针对每个满足更新从集群的应用信息的条件的从集群,基于从集群的应用状态信息,生成从集群的更新调度资源包信息,并将更新调度资源包信息分配至从集群;更新调度资源包信息包括应用资源更新信息,应用资源更新信息用于对从集群的应用信息进行更新处理,得到从集群的新应用信息。
本实施例中,服务器针对每个满足更新从集群的应用信息的条件的从集群,基于从集群的应用状态信息,通过主集群的资源主调度单元,生成从集群的更新调度资源包信息。其中该更新调度资源包信息为各应用资源数据的更新配置信息的整合资源chart包信息。服务器通过主集群的资源从调度单元,将更新调度资源包信息分配至从集群。然后,服务器通过从集群的资源从调度单元,解析更新调度资源包信息的应用资源更新信息,并基于更新资源信息对从集群的应用信息进行更新处理,得到从集群的新应用信息。
基于上述方案,通过主集群的资源主调度单元,分别生成每个从集群的更新调度资源包信息,并分发至各从集群,从而更新从集群的应用信息,通过直接对更新配置信息的整合资源chart包进行分发配置更新,避免只对从集群更新配置信息的原生资源进行分别配置的过程,提升了多集群的应用信息的更新效率。
在一个实施例中,如图4所示,提供了一种集群资源调度方法,以该方法应用于服务器为例进行说明,包括以下步骤:
步骤S401,接收主集群发送的分发调度资源包信息。
其中,分发调度资源包为主集群的调度资源信息生成的。
本实施例中,服务器接收由主集群通过主集群的资源从调度单元发送至每个从集群的资源从调度单元的分发调度资源包信息。
步骤S402,解析分发调度资源包信息,得到从集群的应用资源配置信息、以及从集群的应用资源包信息。
其中,应用资源包信息包括多个初始应用资源数据,应用资源配置信息包括各初始应用资源数据的配置值。
本实施例中,服务器针对每个从集群,通过该从集群的资源从调度单元,解析该分发调度资源包信息,得到该从集群的应用信息、以及该从集群的应用资源包信息。其中,该应用资源包信息包括多个初始应用资源数据,该应用信息包括各初始应用资源数据的配置值。
步骤S403,基于应用资源配置信息,分别配置每个初始应用资源数据的配置值,得到各应用资源数据,并将所有应用资源数据,作为从集群的应用信息。
本实施例中,服务器基于应用信息,分别配置每个初始应用资源数据的配置值,得到各应用资源数据。最后,服务器基于各应用资源数据对应的从集群的应用信息。
基于上述方案,通过资源从调度单元,在从集群解析分发调度资源包信息,再配置每个应用资源数据的配置值,在确保从集群的调度资源配置精准度的情况下,同时提升了对每个集群的资源调度效率。
在一个实施例中,如图5所示,提供了一种集群资源调度系统,以该方法应用于服务器为例进行说明,包括以下步骤:
资源主调度单元501设置于主集群、资源从调度单元502设置于主集群与各从集群,设置于主集群与各从集群的资源从调度单元502之间通信连接;资源主调度单元501,用于生成主集群的调度资源包信息,并基于主集群的调度资源信息,生成各从集群的分发调度资源包信息;资源从调度单元501,用于将各分发调度资源包信息分别分配至各分发调度资源包信息对应的从集群,并接收主集群发送的分发调度资源包信息;解析分发调度资源包信息,得到从集群的应用资源配置信息、以及从集群的应用资源包信息;应用资源包信息包括多个初始应用资源数据,应用资源配置信息包括各初始应用资源数据的配置值;基于应用资源配置信息,分别配置每个初始应用资源数据的配置值,得到各应用资源数据,并将所有应用资源数据,作为从集群的应用信息。
本实施例中,设置于主集群与各从集群的资源从调度单元502之间通信连接,资源主调度单元501,用于生成主集群的调度资源包信息,并基于主集群的调度资源信息,生成各从集群的分发调度资源包信息;资源从调度单元501,用于将各分发调度资源包信息分别分配至各分发调度资源包信息对应的从集群,并接收主集群发送的分发调度资源包信息;解析分发调度资源包信息,得到从集群的应用资源配置信息、以及从集群的应用资源包信息;应用资源包信息包括多个初始应用资源数据,应用资源配置信息包括各初始应用资源数据的配置值;基于应用资源配置信息,分别配置每个初始应用资源数据的配置值,得到各应用资源数据,并将所有应用资源数据,作为从集群的应用信息。
本申请还提供了一种集群资源调度示例,如图6所示,具体处理过程包括以下步骤:
步骤S601,获取主集群的调度资源包信息。
步骤S602,解析主集群的调度资源信息,得到应用资源包信息、以及集群配置信息,集群配置信息包含应用资源包信息在各从集群的集群位置信息、应用资源包在各从集群的差异配置信息、以及应用资源包的应用资源配置信息,并基于应用资源包信息、以及应用资源包的应用资源配置信息,生成第一分发调度资源包信息。
步骤S603,针对每个从集群,基于应用资源包在从集群的差异配置信息,调整第一分发调度资源包信息,得到从集群的第二分发调度资源包信息,并对第二分发调度资源包信息标注应用资源包信息在从集群的集群位置信息,得到从集群的分发调度资源包信息。
步骤S604,将各分发调度资源包信息分别分配至各分发调度资源包信息对应的从集群。
应该理解的是,虽然如上所述的各实施例所涉及的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,如上所述的各实施例所涉及的流程图中的至少一部分步骤可以包括多个步骤或者多个阶段,这些步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
基于同样的发明构思,本申请实施例还提供了一种用于实现上述所涉及的集群资源调度方法的集群资源调度装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似,故下面所提供的一个或多个集群资源调度装置实施例中的具体限定可以参见上文中对于集群资源调度方法的限定,在此不再赘述。
在一个实施例中,如图7所示,提供了一种集群资源调度装置,包括:获取模块710和生成模块720,其中:
获取模块710,用于获取所述主集群的调度资源包信息;所述调度资源包包含各从集群的应用信息对应的应用资源包信息、以及各所述从集群的应用信息的集群配置信息;
生成模块720,用于基于所述主集群的调度资源信息,生成各所述从集群的分发调度资源包信息,并将各所述分发调度资源包信息分别分配至各所述分发调度资源包信息对应的从集群;所述分发调度资源包信息用于建立所述从集群的应用信息。
可选的,所述生成模块720,具体用于:
解析所述主集群的调度资源信息,得到所述应用资源包信息、以及所述集群配置信息,所述集群配置信息包含所述应用资源包信息在各从集群的集群位置信息、所述应用资源包在各从集群的差异配置信息、以及所述应用资源包的应用资源配置信息,并基于所述应用资源包信息、以及所述应用资源包的应用资源配置信息,生成第一分发调度资源包信息;
针对每个从集群,基于所述应用资源包在所述从集群的差异配置信息,调整所述第一分发调度资源包信息,得到所述从集群的第二分发调度资源包信息,并对所述第二分发调度资源包信息标注所述应用资源包信息在所述从集群的集群位置信息,得到所述从集群的分发调度资源包信息。
可选的,所述装置还包括:
状态获取模块,用于分别从各所述从集群中,获取各所述从集群的应用信息的应用状态信息;
删除模块,用于在所述从集群的所述应用状态信息满足删除所述从集群的应用信息的条件的情况下,删除所述从集群的应用信息;
更新模块,用于在所述从集群的所述应用状态信息满足更新所述从集群的应用信息的条件的情况下,通过应用资源更新策略,更新所述从集群的应用信息。
可选的,所述删除模块,具体用于:
生成应用资源删除指令,并向所述需要删除应用信息的从集群传输所述应用资源删除指令;所述应用资源删除指令用于指示所述需要删除应用信息的从集群的应用信息。
可选的,所述更新模块,具体用于:
针对每个满足更新所述从集群的应用信息的条件的从集群,基于所述从集群的应用状态信息,生成所述从集群的更新调度资源包信息,并将所述更新调度资源包信息分配至所述从集群;所述更新调度资源包信息包括应用资源更新信息,所述应用资源更新信息用于对所述从集群的应用信息进行更新处理,得到所述从集群的新应用信息。
基于同样的发明构思,本申请实施例还提供了一种用于实现上述所涉及的集群资源调度方法的集群资源调度装置。该装置所提供的解决问题的实现方案与上述方法中所记载的实现方案相似,故下面所提供的一个或多个集群资源调度装置实施例中的具体限定可以参见上文中对于集群资源调度方法的限定,在此不再赘述。
在一个实施例中,如图8所示,提供了一种集群资源调度装置,包括:接收模块810、解析模块820和配置模块830,其中:
接收模块810,用于接收主集群发送的分发调度资源包信息;所述分发调度资源包为所述主集群的调度资源信息生成的;
解析模块820,用于解析所述分发调度资源包信息,得到从集群的应用资源配置信息、以及所述从集群的应用资源包信息;所述应用资源包信息包括多个初始应用资源数据,所述应用资源配置信息包括各所述初始应用资源数据的配置值;
配置模块830,用于基于所述应用资源配置信息,分别配置每个初始应用资源数据的配置值,得到各应用资源数据,并将所有应用资源数据,作为所述从集群的应用信息。
上述集群资源调度装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中,提供了一种计算机设备,该计算机设备可以是服务器,其内部结构图可以如图9所示。该计算机设备包括通过系统总线连接的处理器、存储器、通信接口、显示屏和输入装置。其中,该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作系统和计算机程序。该内存储器为非易失性存储介质中的操作系统和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的服务器进行有线或无线方式的通信,无线方式可通过WIFI、移动蜂窝网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种集群资源调度方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏,该计算机设备的输入装置可以是显示屏上覆盖的触摸层,也可以是计算机设备外壳上设置的按键、轨迹球或触控板,还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解,图9中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的计算机设备的限定,具体的计算机设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种计算机设备,包括存储器和处理器,存储器中存储有计算机程序,该处理器执行计算机程序时实现第一方面或者第二方面中任一项所述的方法的步骤。
在一个实施例中,提供了一种计算机可读存储介质,其上存储有计算机程序,计算机程序被处理器执行时实现第一方面或者第二方面中任一项所述的方法的步骤。
在一个实施例中,提供了一种计算机程序产品,包括计算机程序,该计算机程序被处理器执行时实现第一方面或者第二方面中任一项所述的方法的步骤。需要说明的是,本申请所涉及的用户信息(包括但不限于用户设备信息、用户个人信息等)和数据(包括但不限于用于分析的数据、存储的数据、展示的数据等),均为经用户授权或者经过各方充分授权的信息和数据。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一非易失性计算机可读取存储介质中,该计算机程序在执行时,可包括如上述各方法的实施例的流程。其中,本申请所提供的各实施例中所使用的对存储器、数据库或其它介质的任何引用,均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-OnlyMemory,ROM)、磁带、软盘、闪存、光存储器、高密度嵌入式非易失性存储器、阻变存储器(ReRAM)、磁变存储器(Magnetoresistive Random Access Memory,MRAM)、铁电存储器(Ferroelectric Random Access Memory,FRAM)、相变存储器(Phase Change Memory,PCM)、石墨烯存储器等。易失性存储器可包括随机存取存储器(Random Access Memory,RAM)或外部高速缓冲存储器等。作为说明而非局限,RAM可以是多种形式,比如静态随机存取存储器(Static Random Access Memory,SRAM)或动态随机存取存储器(Dynamic RandomAccess Memory,DRAM)等。本申请所提供的各实施例中所涉及的数据库可包括关系型数据库和非关系型数据库中至少一种。非关系型数据库可包括基于区块链的分布式数据库等,不限于此。本申请所提供的各实施例中所涉及的处理器可为通用处理器、中央处理器、图形处理器、数字信号处理器、可编程逻辑器、基于量子计算的数据处理逻辑器等,不限于此。
以上实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请的保护范围应以所附权利要求为准。
Claims (10)
1.一种集群资源调度方法,其特征在于,所述方法包括:
获取所述主集群的调度资源包信息;所述调度资源包包含各从集群的应用信息对应的应用资源包信息、以及各所述从集群的应用信息的集群配置信息;
基于所述主集群的调度资源信息,生成各所述从集群的分发调度资源包信息,并将各所述分发调度资源包信息分别分配至各所述分发调度资源包信息对应的从集群;所述分发调度资源包信息用于建立所述从集群的应用信息。
2.根据权利要求1所述的方法,其特征在于,所述基于所述主集群的调度资源信息,生成各所述从集群的分发调度资源包信息,包括:
解析所述主集群的调度资源信息,得到所述应用资源包信息、以及所述集群配置信息,所述集群配置信息包含所述应用资源包信息在各从集群的集群位置信息、所述应用资源包在各从集群的差异配置信息、以及所述应用资源包的应用资源配置信息,并基于所述应用资源包信息、以及所述应用资源包的应用资源配置信息,生成第一分发调度资源包信息;
针对每个从集群,基于所述应用资源包在所述从集群的差异配置信息,调整所述第一分发调度资源包信息,得到所述从集群的第二分发调度资源包信息,并对所述第二分发调度资源包信息标注所述应用资源包信息在所述从集群的集群位置信息,得到所述从集群的分发调度资源包信息。
3.根据权利要求1所述的方法,其特征在于,所述将各所述分发调度资源包信息分别分配至各所述分发调度资源包信息对应的从集群之后,还包括:
分别从各所述从集群中,获取各所述从集群的应用信息的应用状态信息;
在所述从集群的所述应用状态信息满足删除所述从集群的应用信息的条件的情况下,删除所述从集群的应用信息;
在所述从集群的所述应用状态信息满足更新所述从集群的应用信息的条件的情况下,通过应用资源更新策略,更新所述从集群的应用信息。
4.根据权利要求1所述的方法,其特征在于,所述在所述从集群的所述应用状态信息满足删除所述从集群的应用信息的条件的情况下,删除所述从集群的应用信息,包括:
生成应用资源删除指令,并向所述需要删除应用信息的从集群传输所述应用资源删除指令;所述应用资源删除指令用于指示所述需要删除应用信息的从集群的应用信息。
5.根据权利要求1所述的方法,其特征在于,所述在所述从集群的所述应用状态信息满足更新所述从集群的应用信息的条件的情况下,通过应用资源更新策略,更新所述从集群的应用信息,包括:
针对每个满足更新所述从集群的应用信息的条件的从集群,基于所述从集群的应用状态信息,生成所述从集群的更新调度资源包信息,并将所述更新调度资源包信息分配至所述从集群;所述更新调度资源包信息包括应用资源更新信息,所述应用资源更新信息用于对所述从集群的应用信息进行更新处理,得到所述从集群的新应用信息。
6.一种集群资源调度方法,其特征在于,所述方法包括:
接收主集群发送的分发调度资源包信息;所述分发调度资源包为所述主集群的调度资源信息生成的;
解析所述分发调度资源包信息,得到从集群的应用资源配置信息、以及所述从集群的应用资源包信息;所述应用资源包信息包括多个初始应用资源数据,所述应用资源配置信息包括各所述初始应用资源数据的配置值;
基于所述应用资源配置信息,分别配置每个初始应用资源数据的配置值,得到各应用资源数据,并将所有应用资源数据,作为所述从集群的应用信息。
7.一种集群资源调度系统,其特征在于,所述系统包括资源主调度单元、与资源从调度单元;
所述资源主调度单元设置于主集群、所述资源从调度单元设置于主集群与各从集群,所述设置于所述主集群与各所述从集群的资源从调度单元之间通信连接;
所述资源主调度单元,用于生成所述主集群的调度资源包信息,并基于所述主集群的调度资源信息,生成各所述从集群的分发调度资源包信息;
所述资源从调度单元,用于将各所述分发调度资源包信息分别分配至各所述分发调度资源包信息对应的从集群,并接收主集群发送的分发调度资源包信息;解析所述分发调度资源包信息,得到从集群的应用资源配置信息、以及所述从集群的应用资源包信息;所述应用资源包信息包括多个初始应用资源数据,所述应用资源配置信息包括各所述初始应用资源数据的配置值;基于所述应用资源配置信息,分别配置每个初始应用资源数据的配置值,得到各应用资源数据,并将所有应用资源数据,作为所述从集群的应用信息。
8.一种集群资源调度装置,其特征在于,所述装置包括:
获取模块,用于获取所述主集群的调度资源包信息;所述调度资源包包含各从集群的应用信息对应的应用资源包信息、以及各所述从集群的应用信息的集群配置信息;
生成模块,用于基于所述主集群的调度资源信息,生成各所述从集群的分发调度资源包信息,并将各所述分发调度资源包信息分别分配至各所述分发调度资源包信息对应的从集群;所述分发调度资源包信息用于建立所述从集群的应用信息。
9.一种集群资源调度装置,其特征在于,所述装置包括:
接收模块,用于接收主集群发送的分发调度资源包信息;所述分发调度资源包为所述主集群的调度资源信息生成的;
解析模块,用于解析所述分发调度资源包信息,得到从集群的应用资源配置信息、以及所述从集群的应用资源包信息;所述应用资源包信息包括多个初始应用资源数据,所述应用资源配置信息包括各所述初始应用资源数据的配置值;
配置模块,用于基于所述应用资源配置信息,分别配置每个初始应用资源数据的配置值,得到各应用资源数据,并将所有应用资源数据,作为所述从集群的应用信息。
10.一种计算机设备,包括存储器和处理器,所述存储器存储有计算机程序,其特征在于,所述处理器执行所述计算机程序时实现权利要求1至5或6中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310826202.0A CN116800819A (zh) | 2023-07-06 | 2023-07-06 | 集群资源调度方法、装置、计算机设备和存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310826202.0A CN116800819A (zh) | 2023-07-06 | 2023-07-06 | 集群资源调度方法、装置、计算机设备和存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN116800819A true CN116800819A (zh) | 2023-09-22 |
Family
ID=88043531
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310826202.0A Pending CN116800819A (zh) | 2023-07-06 | 2023-07-06 | 集群资源调度方法、装置、计算机设备和存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN116800819A (zh) |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114528085A (zh) * | 2022-02-21 | 2022-05-24 | 中国工商银行股份有限公司 | 资源调度方法、装置、计算机设备、存储介质和程序产品 |
CN114840223A (zh) * | 2022-05-18 | 2022-08-02 | 阿里巴巴(中国)有限公司 | 资源处理方法及装置 |
CN115480910A (zh) * | 2022-07-29 | 2022-12-16 | 山东浪潮科学研究院有限公司 | 多集群资源管理方法、装置及电子设备 |
CN115567523A (zh) * | 2022-09-06 | 2023-01-03 | 恒生电子股份有限公司 | 资源管理方法及系统 |
-
2023
- 2023-07-06 CN CN202310826202.0A patent/CN116800819A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114528085A (zh) * | 2022-02-21 | 2022-05-24 | 中国工商银行股份有限公司 | 资源调度方法、装置、计算机设备、存储介质和程序产品 |
CN114840223A (zh) * | 2022-05-18 | 2022-08-02 | 阿里巴巴(中国)有限公司 | 资源处理方法及装置 |
CN115480910A (zh) * | 2022-07-29 | 2022-12-16 | 山东浪潮科学研究院有限公司 | 多集群资源管理方法、装置及电子设备 |
CN115567523A (zh) * | 2022-09-06 | 2023-01-03 | 恒生电子股份有限公司 | 资源管理方法及系统 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107666525B (zh) | 集群容器ip分配的方法和装置 | |
KR102413047B1 (ko) | 클라우드 서비스 중개장치 및 그 방법 | |
US8296198B2 (en) | Method and system for distribution of information | |
CN111324606B (zh) | 数据分片的方法及装置 | |
CN109977099A (zh) | 数据库部署方法、用户设备、存储介质及装置 | |
CN103947157A (zh) | M2m通信用装置及方法 | |
CN112199192B (zh) | 基于服务器部署Kubernetes集群精细化管理配额的方法及系统 | |
CN113204368B (zh) | 应用程序处理方法、服务器及存储介质 | |
CN114401187B (zh) | 灰度发布方法、装置、计算机设备和存储介质 | |
CN110784347A (zh) | 一种容器集群的节点管理方法、系统、设备及存储介质 | |
CN111273962B (zh) | 配置管理方法、装置、计算机可读存储介质和计算机设备 | |
CN116800819A (zh) | 集群资源调度方法、装置、计算机设备和存储介质 | |
CN115242660B (zh) | 基于中心化的异构算力联邦系统及组网和执行方法 | |
CN110489483A (zh) | 数据同步方法、装置、计算机设备以及存储介质 | |
CN109002332B (zh) | 一种进程启动、配置方法及装置、系统 | |
CN116185578A (zh) | 计算任务的调度方法和计算任务的执行方法 | |
CN113468182B (zh) | 一种数据存储方法及系统 | |
CN111767345B (zh) | 建模数据同步方法、装置、计算机设备及可读存储介质 | |
CN114090201A (zh) | 资源调度方法、装置、设备及存储介质 | |
CN112434004A (zh) | 异构系统的数据迁移方法、装置、计算机设备和存储介质 | |
CN115118612B (zh) | 资源配额管理方法、装置、计算机设备和存储介质 | |
CN115118612A (zh) | 资源配额管理方法、装置、计算机设备和存储介质 | |
CN116301934A (zh) | 软件安装方法、装置、计算机设备和存储介质 | |
CN117579480A (zh) | 一种云际分布式资源数据模型拓展和标注方法和系统 | |
CN115866003A (zh) | 设备控制方法、装置、计算机设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |