CN112350837B - 一种基于云平台的电力应用集群管理方法及装置 - Google Patents
一种基于云平台的电力应用集群管理方法及装置 Download PDFInfo
- Publication number
- CN112350837B CN112350837B CN201910721780.1A CN201910721780A CN112350837B CN 112350837 B CN112350837 B CN 112350837B CN 201910721780 A CN201910721780 A CN 201910721780A CN 112350837 B CN112350837 B CN 112350837B
- Authority
- CN
- China
- Prior art keywords
- application cluster
- container
- application
- cluster container
- resource
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000007726 management method Methods 0.000 title claims abstract description 46
- 238000000034 method Methods 0.000 claims abstract description 98
- 238000012544 monitoring process Methods 0.000 claims abstract description 57
- 238000011084 recovery Methods 0.000 claims description 45
- 238000013468 resource allocation Methods 0.000 claims description 36
- 238000004891 communication Methods 0.000 claims description 26
- 230000009191 jumping Effects 0.000 claims description 12
- 230000008602 contraction Effects 0.000 claims description 3
- 238000004064 recycling Methods 0.000 claims description 3
- 238000012545 processing Methods 0.000 abstract description 4
- 238000005516 engineering process Methods 0.000 description 8
- 238000012423 maintenance Methods 0.000 description 6
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000011946 reduction process Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
- H04L41/08—Configuration management of networks or network elements
- H04L41/0896—Bandwidth or capacity management, i.e. automatically increasing or decreasing capacities
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/06—Energy or water supply
Landscapes
- Business, Economics & Management (AREA)
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Economics (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Public Health (AREA)
- Water Supply & Treatment (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Debugging And Monitoring (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种基于云平台的电力监控应用集群管理方法及装置,在接收到集群扩展指令时,为应用集群中的空闲应用集群容器或新建应用集群容器配置任务号,并对配置任务号的应用集群容器进行资源配置,然后启动资源配置成功的应用集群容器的应用进程、实时库进程;在收到集群缩容指令时,先停止集群中的空闲应用集群容器或与指令任务号对应的应用集群容器,再回收空闲应用集群容器或停止服务进程和实时库进程的应用集群容器的配置资源;实现了电力监控应用集群的动态扩展或缩容,提高了电力监控应用的数据处理并发性和效率性,保证了电力监控应用的可靠性。
Description
技术领域
本发明涉及一种基于云平台的电力监控应用集群管理方法及装置,属于电力监控云计算技术领域。
背景技术
随着智能电网的建设不断深入以及电力泛在物联网互联万物的构想逐渐变为现实,电力监控应用的接入和处理的数据量成指数级别增长,有效而可靠的电力监控应用集群资源调度与管理是急需解决的问题。
目前,电力系统的电力监控应用仍然采用一主多备的高可用集群模式,只有主用服务器处理数据,备用服务器只能热备,处理效率受单台服务器硬件资源的限制,备用服务器的资源无法得到充分利用。而另一方面,云计算技术已经在互联网行业逐步扩展到实体经济的各个领域,云计算技术有效的解决了资源调度的难题,充分发挥了计算资源的潜力,提升了资源利用效率。
现有云计算技术直接应用于电力监控应用领域仍然存在以下两方面的问题:现有的云计算技术比如Kubernetes的StatefulSet集群是面向类似电力监控的有状态类应用,它的集群扩展只能将最后一个启动的容器首先停止,因此无法适应电力监控应用需要有序而可控的集群扩展和缩减策略需求;现有的云计算集群管理技术不能满足电力监控应用在扩展集群节点时需要初始化应用需要资源的要求,比如Kubernetes的StatefulSet集群只支持存储目录的初始化,Hadoop的YARN集群只支持HDFS的文件系统资源不支持其他类型的资源初始化;现有云计算技术无法控制程序启动和停止的顺序,存在因启动或停止顺序的冲突造成应用异常的问题。
发明内容
本发明的目的在于提供一种基于云平台的电力监控应用集群管理方法及装置,以解决现有技术中导致的上述多项缺陷或缺陷之一。
为达到上述目的,本发明是采用下述技术方案实现的:
本发明提供一种基于云平台的电力监控应用集群管理方法,所述方法包括如下步骤:
集群管理装置接收集群扩容或缩容指令;
当集群管理装置接收到集群扩容指令时,判断所述应用集群中是否存在空闲应用集群容器;若是,配置集群扩容指令的任务号至所述空闲应用集群容器;否则,创建新的应用集群容器,并配置集群扩容指令的任务号至创建成功的应用集群容器;对配置集群扩容指令的任务号的应用集群容器进行资源配置;启动资源配置成功的应用集群容器的应用进程、实时库进程;
当集群管理装置接收到集群缩容指令时,根据任务号和应用集群中各应用集群容器信息,判断是否为指定应用集群容器的缩容;若指定了任务号并存在和指定任务号对应的应用集群容器,则停止和指定任务号对应的应用集群容器中的应用服务进程和实时库进程,并对停止服务进程和实时库进程的应用集群容器进行配置资源的回收;若无指定任务号或不存在与指定任务号对应的应用集群容器,则判断应用集群中是否有空闲的应用集群容器,并对空闲应用集群容器进行配置资源的回收。
进一步的,在对配置集群扩容指令的任务号的应用集群容器进行资源配置的步骤之后,所述方法还包括回收资源配置失败的应用集群容器;
在启动资源配置成功的应用集群容器的应用进程、实时库进程之后,所述方法还包括回收应用服务进程和实时库进程初始化失败的应用集群容器。
进一步的,所述方法还包括:获取应用集群中各应用集群容器的应用状态信息;根据各应用集群容器的应用状态信息,判断各应用集群容器是否空闲。
进一步的,对应用集群容器进行资源回收的方法包括如下步骤:
A:获取进行资源回收的应用集群容器在资源分配阶段根据应用集群容器信息和待配置的资源信息生成的资源配置信息列表;所述资源配置信息列表中的资源包括进行资源回收的应用集群容器的外接存储目录、消息通讯主题、实时库访问链接信息和关系库访问链接信息;
B:根据进行资源回收的应用集群容器的资源配置信息列表判断所述应用集群容器中是否有存储资源;若是,注销所述应用集群容器的容器外接存储目录,删除所述应用集群容器的资源配置信息列表中的容器外接存储目录;否则,跳转步骤C:
C:根据进行资源回收的应用集群容器的资源配置信息列表判断是否有消息配置,若是,注销所述应用集群容器的消息通讯主题,删除所述应用集群容器的资源配置信息列表中的消息通讯主题;否则,执行步骤D;
D:判断进行资源回收的应用集群容器的资源配置信息列表中是否存在实时库配置或关系库配置;若存在实时库配置,删除所述应用集群容器的实时库访问链接信息,并删除所述应用集群容器的资源配置信息列表中的实时库访问链接信息;若存在关系库配置,删除所述应用集群容器的关系库访问链接信息,并删除所述应用集群容器的资源配置信息列表中的关系库访问链接信息。
进一步的,对应用集群容器进行资源配置的方法包括如下步骤:
E:根据进行资源配置的应用集群容器的应用集群容器信息和待配置的资源信息生成资源配置信息列表;所述资源配置信息列表中的资源配置信息包括进行资源配置的应用集群容器的外接存储目录、消息通讯主题、实时库访问链接信息和关系库访问链接信息;
F:判断进行资源配置的应用集群容器的资源配置信息列表中是否包括存储配置;若是,对所述应用集群容器进行外接存储目录的配置;否则,跳转步骤G;
G:判断进行资源配置的应用集群容器的配置信息列表中是否包含有消息配置;若是,对所述应用集群容器进行消息通讯主题的配置;否则,跳转步骤H;
H:判断进行资源配置的应用集群容器的配置信息列表中是否存在实时库配置或关系库配置;若存在实时库配置,对所述应用集群容器进行实时库访问链接信息的配置;若存在关系库配置,对所述应用集群容器进行关系库访问链接信息的配置。
第二方面,本发明还提供一种基于云平台的电力监控应用集群管理装置,所述装置包括集群调度单元、资源配置单元和执行器;
所述集群调度单元包括接收模块,用于接收集群扩容或缩容指令;
所述集群调度单元包括第一判断模块,用于在接收到集群扩容指令时,判断应用集群中是否存在空闲应用集群容器,在存在空闲应用集群容器时,配置集群扩容指令的任务号至所述空闲应用集群容器,不存在空闲应用集群容器时,创建新的应用集群容器,并配置集群扩容指令的任务号至创建成功的应用集群容器;
所述资源配置单元包括配置模块,用于对配置集群扩容指令的任务号的应用集群容器进行资源配置;
所述执行器包括启动模块,用于启动资源配置成功的应用集群容器的应用进程、实时库进程;
所述集群调度单元还包括第二判断模块,用于当接收到集群缩容指令时,根据应用集群中各应用集群容器信息、缩容指令的任务号,判断是否有指定任务号、是否存在与指定任务号对应的应用集群容器,在不存在指定任务号,或与指定任务号对应的应用集群容器时,判断应用集群中是否存在空闲应用集群容器;
所述执行器还包括停止模块,用于在存在与指定任务号对应的应用集群容器时,停止与指定任务号对应的应用集群容器的应用服务进程和实时库进程;
所述资源配置单元还包括回收模块,用于回收空闲应用集群容器中配置的资源;还用于回收停止服务进程和实时库进程的应用集群容器中配置的资源。
进一步的,所述集群调度单元还包括:
第一回收模块,用于对资源配置失败的配置集群扩容指令的任务号的应用集群容器进行回收;
第二回收模块,用于对应用服务进程和实时库进程初始化失败的应用集群容器进行回收。
进一步的,所述装置还包括状态监测单元,用于获取应用集群中各应用集群容器的应用状态信息,并根据各应用集群容器的应用状态信息,判断各应用集群容器是否空闲。
进一步的,所述回收模块用于执行如下步骤:
A:获取进行资源回收的应用集群容器在资源分配阶段根据应用集群容器信息和待配置的资源信息生成的资源配置信息列表;所述资源配置信息列表中的资源包括进行资源回收的应用集群容器的外接存储目录、消息通讯主题、实时库访问链接信息和关系库访问链接信息;
B:根据进行资源回收的应用集群容器的资源配置信息列表判断所述应用集群容器中是否有存储资源;若是,注销所述应用集群容器的容器外接存储目录,删除所述应用集群容器的资源配置信息列表中的容器外接存储目录;否则,跳转步骤C:
C:根据进行资源回收的应用集群容器的资源配置信息列表判断是否有消息配置,若是,注销所述应用集群容器的消息通讯主题,删除所述应用集群容器的资源配置信息列表中的消息通讯主题;否则,执行步骤D;
D:判断进行资源回收的应用集群容器的资源配置信息列表中是否存在实时库配置或关系库配置;若存在实时库配置,删除所述应用集群容器的实时库访问链接信息,并删除所述应用集群容器的资源配置信息列表中的实时库访问链接信息;若存在关系库配置,删除所述应用集群容器的关系库访问链接信息,并删除所述应用集群容器的资源配置信息列表中的关系库访问链接信息。
进一步的,所述配置模块用于执行如下步骤:
E:根据进行资源配置的应用集群容器的应用集群容器信息和待配置的资源信息生成资源配置信息列表;所述资源配置信息列表中的资源配置信息包括进行资源配置的应用集群容器的外接存储目录、消息通讯主题、实时库访问链接信息和关系库访问链接信息;
F:判断进行资源配置的应用集群容器的资源配置信息列表中是否包括存储配置;若是,对所述应用集群容器进行外接存储目录的配置;否则,跳转步骤G;
G:判断进行资源配置的应用集群容器的配置信息列表中是否包含有消息配置;若是,对所述应用集群容器进行消息通讯主题的配置;否则,跳转步骤H;
H:判断进行资源配置的应用集群容器的配置信息列表中是否存在实时库配置或关系库配置;若存在实时库配置,对所述应用集群容器进行实时库访问链接信息的配置;若存在关系库配置,对所述应用集群容器进行关系库访问链接信息的配置。
本发明提供的基于云平台的电力监控应用集群管理方法及装置的有益效果如下所述:
(1)通过在接收到集群扩容指令时,对应用集群中的空闲应用集群容器或新建的应用集群容器先进性资源配置,再启动应用集群容器进程,满足了电力监控应用集群管理启动过程中需要先完成资源配置,再启动相关进程的顺序要求,满足了对特定应用集群容器进行资源配置和进程启动的可控的集群扩容策略的要求;
(2)通过在接收到集群缩容指令时,停止与缩容指令的任务号对应的应用集群容器的应用服务进程和实时库进程,并对停止服务进程和实时库进程的应用集群容器进行资源回收,对应用集群中存在的空闲应用集群容器进行配置资源的回收;满足了电力监控应用集群管理停止过程中需要先停止进程,再回收配置资源的顺序要求,和停止特定应用集群容器的可控的集群缩容策略要求。
附图说明
图1是根据本发明实施例提供的一种电力监控应用集群管理装置的示意图;
图2是根据本发明实施例提供的一种电力监控应用集群扩容过程的流程图;
图3是根据本发明实施例提供的一种电力监控应用集群缩容过程的流程图;
图4是根据本发明实施例提供的对应用集群容器进行资源配置或资源回收的流程图;
图5是根据本发明实施例提供的一种电力监控应用集群状态监测方法流程图。
具体实施方式
下面结合附图对本发明作进一步描述。以下实施例仅用于更加清楚地说明本发明的技术方案,而不能以此来限制本发明的保护范围。
参照图2至图5,本发明实施例提供一种可用所述装置实现的基于云平台的电力监控应用集群管理方法,可通过包括集群调度单元、资源配置单元、记录存储单元、执行器、状态监测单元的电力监控应用集群管理装置实现:
当集群管理装置收到集群扩容指令时,对应用集群进行扩容的方法参见图2,包括如下步骤:
步骤101:运维人员通过界面向电力监控应用集群管理装置下达电力监控应用集群扩容的指令,应用集群扩容的指令包括扩容的应用名称和任务号;
步骤102:电力监控应用集群管理装置接收到集群扩容指令后,由集群调度单元按照扩容的应用名称查询记录存储器中的此应用集群配置情况,应用集群配置情况如表1和表2所示;
步骤103:集群调度单元获取应用集群配置情况后,根据集群中各个应用集群容器的运行状态信息判断当前应用集群中是否有空闲应用集群容器;若有,执行步骤104;否则,执行步骤105;
步骤104:集群调度单元将记录存储器中此空闲应用集群容器节点状态置为在用,并配置扩容的任务号给此应用集群容器,并到步骤108;
步骤105:集群调度单元创建新的应用集群容器,并根据应用集群容器进程的状态判断是否创建成功;若创建成功,执行步骤106,否则执行步骤107;
步骤106:集群调度单元为新创建的应用集群容器配置任务号,并到步骤108;
步骤107:集群节点创建失败,集群管理装置返回调用者创建失败结果和由于无法创建新的应用集群容器而失败的原因信息至运维人员所使用的界面;扩容结束;
步骤108:集群调度单元将应用集群容器和任务号配置情况写入记录存储器,并将应用集群容器运行状态置为在用;
步骤109:集群调度单元调用资源配置单元,资源配置单元对配置任务号的应用集群容器所需的资源进行配置;
步骤110:资源配置单元判断资源配置是否成功(判断方法在资源配置单元的资源分配过程中说明);若资源配置成功,执行步骤111;否则,执行步骤112;
步骤111:资源配置单元将资源配置的情况写入记录存储器的此应用集群容器记录中,并到步骤113;
步骤112:资源配置单元向集群调度单元报告资源配置失败,集群调度单元回收资源配置失败的应用集群容器,并再次调用步骤102;
步骤113:集群调度单元调用执行器,执行器启动资源配置成功的应用集群容器节点中的应用进程和实时库进程;
步骤114:执行器根据应用集群容器反馈的应用进程和实时库进程启动结果判断应用服务是否正常;若正常,执行步骤116;否则,执行步骤115;
步骤115:执行器向集群调度单元报告应用服务启动失败,并由集群调度单元回收应用服务初始化失败的应用集群容器,并再次调用步骤102;
步骤116:集群节点创建成功,集群管理装置返回调用该创建成功结果和创建的应用集群容器信息至运维人员所使用的界面。
记录存储器中的应用集群定义如表1,
表1
域名 | 格式 | 说明 |
app_name | String(64字节) | 应用名称 |
app_cluster_id | String(64字节) | 应用集群ID |
app_instance_num | Int | 应用集群中容器实例数量 |
app_instance_idle_num | Int | 应用集群中空闲容器实例数量 |
记录存储器中的应用集群容器实例的定义如表2,
表2
记录存储器中的记录以json格式存储,具体定义如下所示:
当集群管理装置收到集群缩容指令时,对应用集群进行缩容的方法参见图3,包括如下步骤:
步骤201:运维人员通过界面向电力监控应用集群管理装置下达电力监控应用集群缩容指令,缩容指令包括缩容的应用名称和任务号;
步骤202:集群调度单元根据缩容的应用名称查询记录存储器中现有的集群分配情况,找到对应的应用集群各应用集群容器的信息;
步骤203:集群调度单元根据缩容指令中的任务号和应用集群中各应用集群容器信息,判断是否为指定应用集群容器的缩容,如果指定了任务号并查到了和任务号对应的应用集群容器,执行步骤204;如果没有指定任务号,或指定的任务号没有对应的应用集群容器,执行步骤205;
步骤204:集群调度单元将缩容指令中的任务号对应的应用集群容器标记为可停止,并到步骤206;
步骤205:集群调度单元判断此应用集群是否有空闲的应用集群容器;若有,执行步骤207;否则,执行步骤208;
步骤206:执行器停止和指定任务号对应的应用集群容器中的应用服务进程和实时库进程,并到步骤209;
步骤207:集群调度单元将集群中存在的所有空闲的应用集群容器都标记为可停止,并到步骤209;
步骤208:集群缩容失败,集群管理装置返回调用者缩容失败结果和由于没有空闲的应用集群容器而无法缩容的原因至运维人员所使用的的界面;集群缩容结束;
步骤209:资源配置单元回收标记为可停止的应用集群容器中配置的资源并更新记录存储器;
步骤210:集群调度单元将该应用集群容器回收并更新记录存储器;
步骤211:集群节点缩容成功,集群管理装置返回调用者缩容结果至运维人员所使用的的界面。
对应用集群容器进行资源配置或资源回收的方法,参见图4,包括如下步骤:
步骤301:资源配置单元收到集群调度单元的资源管理请求,请求包括待管理资源的应用集群容器信息和需要管理的资源信息;
步骤302:资源配置单元判断收到的是资源配置请求还是资源回收请求;若是资源回收请求,跳转步骤303;若是资源配置请求,执行步骤304;
步骤303:资源配置单元根据资源回收请求中的应用集群容器信息在记录存储器中获取进行资源回收的应用集群容器的资源配置信息列表,并执行步骤313;
进行资源回收的应用集群容器的资源配置信息列表中的资源包括进行资源回收的应用集群容器的外接存储目录、消息通讯主题、实时库访问链接信息和关系库访问链接信息;
步骤304:资源配置单元根据应用集群容器信息和待配置的资源信息生成进行资源配置的应用集群容器的资源配置信息列表;
进行资源配置的应用集群容器的资源配置信息列表中的资源配置信息包括进行资源配置的应用集群容器的外接存储目录、消息通讯主题、实时库访问链接信息、关系库访问链接信息;
步骤305:资源配置单元判断待配置信息列表中是否含有存储配置;若有,执行步骤306;否则,执行步骤307;
步骤306:资源配置单元分配此应用集群容器外界存储目录,并到步骤312;
步骤307:资源配置单元判断待配置信息列表中是否含有消息配置,如果有执行步骤308,如果没有执行步骤309;
步骤308:资源配置单元分配此应用集群容器的消息通讯主题,并到步骤312;
步骤309:资源配置单元判断待配置信息列表中是否含有实时库或关系库配置,如果有实时库配置执行步骤310,如果有关系库配置执行步骤311;
步骤310:资源配置单元配置此应用集群容器的实时库访问链接信息,并到步骤312;
步骤311:资源配置单元配置此应用集群容器的关系库访问链接信息,并到步骤312;
步骤312:资源配置单元判断是否完成资源配置信息列表中所有资源的分配,如果是执行步骤322,如果不是执行步骤302;
步骤313:资源配置单元根据资源配置信息列表判断待回收的应用集群容器是否有存储资源,如果是执行步骤315,如果不是执行步骤314;
步骤314:资源配置单元根据资源配置信息列表判断进行资源回收的应用集群容器是否有消息配置,如果是执行步骤319,如果不是执行步骤316;
步骤315:资源配置单元根据应用集群容器资源配置信息列表中的目录配置注销此应用集群容器的容器外接存储目录,并执行步骤320;
步骤316:资源配置单元根据资源配置信息列表判断是否有实时库或关系库的配置,如果有实时库配置执行步骤318,如果有关系库配置执行步骤317;
步骤316:资源配置单元注销此应用集群容器的消息通讯主题,并到步骤320;
步骤317:资源配置单元根据应用集群容器资源配置信息列表中的关系库配置删除此应用集群容器的关系库访问链接信息,并执行步骤320;
步骤318:资源配置单元根据应用集群容器资源配置信息列表中的实时库配置删除此应用集群容器的实时库访问链接信息,并执行步骤320;
步骤319:资源配置单元根据应用集群容器资源配置信息列表中的消息通讯主题配置注销此应用集群容器的消息通讯主题,并执行步骤320;
步骤320:资源配置单元删除此应用集群容器的资源配置信息列表中对应的资源配置信息;
步骤321:资源配置单元根据资源配置信息列表判断是否完成资源回收,如果是执行步骤322,如果不是执行步骤302;
步骤322:资源配置单元已经完成了资源管理请求,向集群调度单元反馈执行结果。
资源配置信息列表数据类型定义如表3所示:
表3
资源配置信息列表json格式定义如下:
参见图5,本发明实施例提供的电力监控应用集群管理方法,还包括如下步骤:
步骤401:应用集群向状态监测单元报告集群中各应用集群容器的空闲状态信息;
步骤402:状态监测单元判断应用集群容器是否空闲;若是,执行步骤403;否则,执行步骤401;
步骤403:状态监测单元在记录存储器上将此容器的状态记录为空闲状态。
集群状态监测中各应用集群容器实例报告应用运行状态的报文定义如下:
参见图1,本发明实施例还提供一种基于运品台的电力监控应用集群管理装置,包括集群调度单元,资源配置单元和执行器:
集群调度单元包括接收模块,用于接收集群扩容或缩容指令;
集群调度单元包括第一判断模块,用于在接收到集群扩容指令时,判断应用集群中是否存在空闲应用集群容器,在存在空闲应用集群容器时,配置集群扩容指令的任务号至空闲应用集群容器,在不存在空闲应用集群容器时,创建新的应用集群容器,并配置集群扩容指令的任务号至创建成功的应用集群容器。
资源配置单元包括配置模块,配置模块用于对配置集群扩容指令的任务号的应用集群容器进行资源配置。
执行器包括启动模块,启动模块用于启动资源配置成功的应用集群容器的应用进程、实时库进程。
集群调度单元还包括第二判断模块,第二判断模块用于在接收到集群缩容指令时,根据应用集群的分配情况、缩容指令的任务号,判断是否有指定任务号、是否存在与指定任务号对应的应用集群容器,在不存在指定任务号或与缩容指令的任务号对应的应用集群容器时,判断应用集群中是否存在空闲应用集群容器。
执行器还包括停止模块,停止模块用于在存在与缩容指令的任务号对应的应用集群容器时,停止与缩容指令的任务号对应的应用集群容器的应用服务进程和实时库进程。
资源配置单元包括回收模块,回收模块用于回收空闲应用集群容器中配置的资源;还用于回收停止服务进程和实时库进程的应用集群容器中配置的资源。
集群调度单元还包括:第一回收模块,用于对资源配置失败的配置集群扩容指令的任务号的应用集群容器进行回收。第二回收模块,用于对应用服务进程和实时库进程初始化失败的应用集群容器进行回收。
本发明实施例提供的一种基于云平台的电力监控应用集群管理方法及装置,通过在接收到集群扩容指令时,对应用集群中的空闲应用集群容器或新建的应用集群容器先进性资源配置,再启动应用集群容器进程;满足了电力监控应用集群管理启动过程中需要先完成资源配置,再启动相关进程的顺序要求,满足了对特定应用集群容器进行资源配置和进程启动的可控的集群扩容策略的要求;在接收到集群缩容指令时,停止与缩容指令的任务号对应的应用集群容器的应用服务进程和实时库进程,并对停止服务进程和实时库进程的应用集群容器进行资源回收,对应用集群中存在的空闲应用集群容器进行配置资源的回收;满足了电力监控应用有序和可控的集群扩展和缩减策略,以及资源配置和回收的要求,实现了电力监控程序的有序启动和停止,避免了资源配置回收与程序启停的顺序冲突造成的应用异常,在实现电力监控集群的动态扩展和缩容的前提下,提高了电力监控应用的数据处理并发性和效率,并保证了电力监控应用的高可靠性。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明技术原理的前提下,还可以做出若干改进和变形,这些改进和变形也应视为本发明的保护范围。
Claims (10)
1.一种基于云平台的电力监控应用集群管理方法,其特征在于,所述方法包括如下步骤:
集群管理装置接收集群扩容或缩容指令;
当集群管理装置接收到集群扩容指令时,判断所述应用集群中是否存在空闲应用集群容器;若是,配置集群扩容指令的任务号至所述空闲应用集群容器;否则,创建新的应用集群容器,并配置集群扩容指令的任务号至创建成功的应用集群容器;对配置集群扩容指令的任务号的应用集群容器进行资源配置;启动资源配置成功的应用集群容器的应用进程、实时库进程;
当集群管理装置接收到集群缩容指令时,根据任务号和应用集群中各应用集群容器信息,判断是否为指定应用集群容器的缩容;若指定了任务号并存在和指定任务号对应的应用集群容器,则停止和指定任务号对应的应用集群容器中的应用服务进程和实时库进程,并对停止服务进程和实时库进程的应用集群容器进行配置资源的回收;若无指定任务号或不存在与指定任务号对应的应用集群容器,则判断应用集群中是否有空闲的应用集群容器,并对空闲应用集群容器进行配置资源的回收。
2.根据权利要求1所述的基于云平台的电力监控应用集群管理方法,其特征在于,
在对配置集群扩容指令的任务号的应用集群容器进行资源配置的步骤之后,所述方法还包括回收资源配置失败的应用集群容器;
在启动资源配置成功的应用集群容器的应用进程、实时库进程之后,所述方法还包括回收应用服务进程和实时库进程初始化失败的应用集群容器。
3.根据权利要求1所述的基于云平台的电力监控应用集群管理方法,其特征在于,所述方法还包括:获取应用集群中各应用集群容器的应用状态信息;根据各应用集群容器的应用状态信息,判断各应用集群容器是否空闲。
4.根据权利要求1所述的基于云平台的电力监控应用集群管理方法,其特征在于,对应用集群容器进行资源回收的方法包括如下步骤:
A:获取进行资源回收的应用集群容器在资源分配阶段根据应用集群容器信息和待配置的资源信息生成的资源配置信息列表;所述资源配置信息列表中的资源包括进行资源回收的应用集群容器的外接存储目录、消息通讯主题、实时库访问链接信息和关系库访问链接信息;
B:根据进行资源回收的应用集群容器的资源配置信息列表判断所述应用集群容器中是否有存储资源;若是,注销所述应用集群容器的容器外接存储目录,删除所述应用集群容器的资源配置信息列表中的容器外接存储目录;否则,跳转步骤C:
C:根据进行资源回收的应用集群容器的资源配置信息列表判断是否有消息配置,若是,注销所述应用集群容器的消息通讯主题,删除所述应用集群容器的资源配置信息列表中的消息通讯主题;否则,执行步骤D;
D:判断进行资源回收的应用集群容器的资源配置信息列表中是否存在实时库配置或关系库配置;若存在实时库配置,删除所述应用集群容器的实时库访问链接信息,并删除所述应用集群容器的资源配置信息列表中的实时库访问链接信息;若存在关系库配置,删除所述应用集群容器的关系库访问链接信息,并删除所述应用集群容器的资源配置信息列表中的关系库访问链接信息。
5.根据权利要求1所述的基于云平台的电力监控应用集群管理方法,其特征在于,对应用集群容器进行资源配置的方法包括如下步骤:
E:根据进行资源配置的应用集群容器的应用集群容器信息和待配置的资源信息生成资源配置信息列表;所述资源配置信息列表中的资源配置信息包括进行资源配置的应用集群容器的外接存储目录、消息通讯主题、实时库访问链接信息和关系库访问链接信息;
F:判断进行资源配置的应用集群容器的资源配置信息列表中是否包括存储配置;若是,对所述应用集群容器进行外接存储目录的配置;否则,跳转步骤G;
G:判断进行资源配置的应用集群容器的配置信息列表中是否包含有消息配置;若是,对所述应用集群容器进行消息通讯主题的配置;否则,跳转步骤H;
H:判断进行资源配置的应用集群容器的配置信息列表中是否存在实时库配置或关系库配置;若存在实时库配置,对所述应用集群容器进行实时库访问链接信息的配置;若存在关系库配置,对所述应用集群容器进行关系库访问链接信息的配置。
6.一种基于云平台的电力监控应用集群管理装置,其特征在于,所述装置包括集群调度单元、资源配置单元和执行器;
所述集群调度单元包括接收模块,用于接收集群扩容或缩容指令;
所述集群调度单元包括第一判断模块,用于在接收到集群扩容指令时,判断应用集群中是否存在空闲应用集群容器,在存在空闲应用集群容器时,配置集群扩容指令的任务号至所述空闲应用集群容器,不存在空闲应用集群容器时,创建新的应用集群容器,并配置集群扩容指令的任务号至创建成功的应用集群容器;
所述资源配置单元包括配置模块,用于对配置集群扩容指令的任务号的应用集群容器进行资源配置;
所述执行器包括启动模块,用于启动资源配置成功的应用集群容器的应用进程、实时库进程;
所述集群调度单元还包括第二判断模块,用于当接收到集群缩容指令时,根据应用集群中各应用集群容器信息、缩容指令的任务号,判断是否有指定任务号、是否存在与指定任务号对应的应用集群容器,在不存在指定任务号,或与指定任务号对应的应用集群容器时,判断应用集群中是否存在空闲应用集群容器;
所述执行器还包括停止模块,用于在存在与指定任务号对应的应用集群容器时,停止与指定任务号对应的应用集群容器的应用服务进程和实时库进程;
所述资源配置单元还包括回收模块,用于回收空闲应用集群容器中配置的资源;还用于回收停止服务进程和实时库进程的应用集群容器中配置的资源。
7.根据权利要求6所述的基于云平台的电力监控应用集群管理装置,其特征在于,所述集群调度单元还包括:
第一回收模块,用于对资源配置失败的配置集群扩容指令的任务号的应用集群容器进行回收;
第二回收模块,用于对应用服务进程和实时库进程初始化失败的应用集群容器进行回收。
8.根据权利要求6所述的基于云平台的电力监控应用集群管理装置,其特征在于,
所述装置还包括状态监测单元,用于获取应用集群中各应用集群容器的应用状态信息,并根据各应用集群容器的应用状态信息,判断各应用集群容器是否空闲。
9.根据权利要求6所述的基于云平台的电力监控应用集群管理装置,其特征在于,所述回收模块用于执行如下步骤:
A:获取进行资源回收的应用集群容器在资源分配阶段根据应用集群容器信息和待配置的资源信息生成的资源配置信息列表;所述资源配置信息列表中的资源包括进行资源回收的应用集群容器的外接存储目录、消息通讯主题、实时库访问链接信息和关系库访问链接信息;
B:根据进行资源回收的应用集群容器的资源配置信息列表判断所述应用集群容器中是否有存储资源;若是,注销所述应用集群容器的容器外接存储目录,删除所述应用集群容器的资源配置信息列表中的容器外接存储目录;否则,跳转步骤C:
C:根据进行资源回收的应用集群容器的资源配置信息列表判断是否有消息配置,若是,注销所述应用集群容器的消息通讯主题,删除所述应用集群容器的资源配置信息列表中的消息通讯主题;否则,执行步骤D;
D:判断进行资源回收的应用集群容器的资源配置信息列表中是否存在实时库配置或关系库配置;若存在实时库配置,删除所述应用集群容器的实时库访问链接信息,并删除所述应用集群容器的资源配置信息列表中的实时库访问链接信息;若存在关系库配置,删除所述应用集群容器的关系库访问链接信息,并删除所述应用集群容器的资源配置信息列表中的关系库访问链接信息。
10.根据权利要求6所述的基于云平台的电力监控应用集群管理装置,其特征在于,所述配置模块用于执行如下步骤:
E:根据进行资源配置的应用集群容器的应用集群容器信息和待配置的资源信息生成资源配置信息列表;所述资源配置信息列表中的资源配置信息包括进行资源配置的应用集群容器的外接存储目录、消息通讯主题、实时库访问链接信息和关系库访问链接信息;
F:判断进行资源配置的应用集群容器的资源配置信息列表中是否包括存储配置;若是,对所述应用集群容器进行外接存储目录的配置;否则,跳转步骤G;
G:判断进行资源配置的应用集群容器的配置信息列表中是否包含有消息配置;若是,对所述应用集群容器进行消息通讯主题的配置;否则,跳转步骤H;
H:判断进行资源配置的应用集群容器的配置信息列表中是否存在实时库配置或关系库配置;若存在实时库配置,对所述应用集群容器进行实时库访问链接信息的配置;若存在关系库配置,对所述应用集群容器进行关系库访问链接信息的配置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910721780.1A CN112350837B (zh) | 2019-08-06 | 2019-08-06 | 一种基于云平台的电力应用集群管理方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910721780.1A CN112350837B (zh) | 2019-08-06 | 2019-08-06 | 一种基于云平台的电力应用集群管理方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112350837A CN112350837A (zh) | 2021-02-09 |
CN112350837B true CN112350837B (zh) | 2022-10-28 |
Family
ID=74366896
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910721780.1A Active CN112350837B (zh) | 2019-08-06 | 2019-08-06 | 一种基于云平台的电力应用集群管理方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112350837B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114553878B (zh) * | 2022-02-23 | 2024-04-02 | 南京南瑞信息通信科技有限公司 | 一种基于lvs的工控系统主备运行电力监控系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018077079A1 (zh) * | 2016-10-31 | 2018-05-03 | 阿里巴巴集团控股有限公司 | 一种应用的扩容方法、装置和系统 |
CN108762914A (zh) * | 2018-04-17 | 2018-11-06 | 广东智媒云图科技股份有限公司 | 一种系统架构的智能伸缩方法、装置、电子设备及存储介质 |
CN109117265A (zh) * | 2018-07-12 | 2019-01-01 | 北京百度网讯科技有限公司 | 在集群中调度作业的方法、装置、设备及存储介质 |
-
2019
- 2019-08-06 CN CN201910721780.1A patent/CN112350837B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018077079A1 (zh) * | 2016-10-31 | 2018-05-03 | 阿里巴巴集团控股有限公司 | 一种应用的扩容方法、装置和系统 |
CN108762914A (zh) * | 2018-04-17 | 2018-11-06 | 广东智媒云图科技股份有限公司 | 一种系统架构的智能伸缩方法、装置、电子设备及存储介质 |
CN109117265A (zh) * | 2018-07-12 | 2019-01-01 | 北京百度网讯科技有限公司 | 在集群中调度作业的方法、装置、设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN112350837A (zh) | 2021-02-09 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10521268B2 (en) | Job scheduling method, device, and distributed system | |
CN107016480B (zh) | 任务调度方法、装置及系统 | |
CN109271447B (zh) | 数据同步方法、装置、计算机设备和存储介质 | |
CN104699541A (zh) | 同步数据的方法、装置、数据传输组件及系统 | |
CN102880503A (zh) | 数据分析系统及数据分析方法 | |
CN103593236A (zh) | 一种业务流程调度的计算机设备、方法和装置 | |
CN103414712A (zh) | 一种分布式虚拟桌面管理系统和方法 | |
CN109063005B (zh) | 一种数据迁移方法及系统、存储介质、电子设备 | |
CN108140035B (zh) | 分布式系统的数据库复制方法及装置 | |
CN111984274B (zh) | 一种一键自动化部署etcd集群的方法及装置 | |
WO2023115931A1 (zh) | 大数据组件参数调整方法、装置、电子设备及存储介质 | |
CN112162852A (zh) | 一种多架构cpu节点的管理方法、装置及相关组件 | |
CN112350837B (zh) | 一种基于云平台的电力应用集群管理方法及装置 | |
CN111240737A (zh) | 一种基于Redis的动态业务参数的配置方法 | |
CN108984105B (zh) | 对网络存储设备中的复制任务进行分配的方法和设备 | |
CN113157701A (zh) | 一种oracle数据库的双活机制部署方法及装置 | |
CN113157253A (zh) | 一种企业研发私有云搭建的方法 | |
CN113377863A (zh) | 数据同步方法、装置、电子设备及计算机可读存储介质 | |
CN115587141A (zh) | 一种数据库同步方法和装置 | |
CN115455121A (zh) | 一种实时可靠的数据同步传输方法、设备及介质 | |
CN115562933A (zh) | 作业监控数据的处理方法及装置、存储介质、电子设备 | |
CN105760215A (zh) | 基于映射规约模型分布式文件系统作业的运行方法 | |
CN114896054A (zh) | 一种跨异构计算引擎的大数据任务调度方法、设备及介质 | |
CN111324668B (zh) | 数据库数据同步处理方法、装置及存储介质 | |
CN114579364A (zh) | 一种基于混合云的云原生数据库备份方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |