CN102904961A - 一种云计算资源调度方法及系统 - Google Patents
一种云计算资源调度方法及系统 Download PDFInfo
- Publication number
- CN102904961A CN102904961A CN2012104046999A CN201210404699A CN102904961A CN 102904961 A CN102904961 A CN 102904961A CN 2012104046999 A CN2012104046999 A CN 2012104046999A CN 201210404699 A CN201210404699 A CN 201210404699A CN 102904961 A CN102904961 A CN 102904961A
- Authority
- CN
- China
- Prior art keywords
- message
- unit
- scheduling
- queue
- control centre
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
本发明公开了一种云计算资源调度方法及系统,该系统包括调度中心,消息发送单元,消息寄存器单元,和消息接收单元,消息发送单元用于,接收到用户发起的资源调度请求时,将资源调度请求封装成第一消息发送至消息寄存器;消息寄存器单元用于,接收到消息发送单元发送的第一消息时,存储到消息队列中,并将消息队列中的第一消息发送给调度中心进行处理;以及,接收到调度中心返回的处理结果时,封装成第二消息存储到消息队列中,转发给消息接收单元;消息接收单元用于,接收到消息寄存器发送的第二消息时,转发给相应的用户。采用本发明,能够满足不同的业务需求,优化响应时间、缓解系统压力。
Description
技术领域
本发明涉及云计算领域,具体涉及一种云计算资源调度方法及系统。
背景技术
当前,云计算被认为是新一代高速网络计算和服务平台,被业界认为将引起计算机领域的革命性变革。关于云计算一个简单的定义是:一种虚拟化的、分布式和按需分配的、通过网络实现的计算与服务平台。从虚拟化的角度来讲,从计算机到网络,数据库和科学计算设备等都可以作为潜在的云计算资源按照一定的规则和服务协议被用户所享用。
传统云计算的资源调度一般采用直接从物理资源端的代理获取信息,然后主控端做出计算并最终做出调配的方式,主控端在使用调度算法进行计算后,通过远程调用调度资源的机制。
如图1所示,传统的云计算资源调度的主控端主要包括任务调度中心,和节点状态监控中心,其调度过程如下:主控端接收用户提交的虚拟机请求,根据管理的资源信息执行调度任务,并在完成调度任务后及时更新资源信息。
在这个过程中,动态分配管理数据中心的物理和虚拟共享资源面临许多新的挑战:物理与虚拟资源高效结合;云计算的资源可能分布广泛而且种类多样;用户需求的实时动态变化很难准确预测;需要考虑系统性能和成本等因素使得问题非常复杂。
发明内容
本发明解决的技术问题是提供一种云计算资源调度方法及系统,能够满足不同的业务需求,优化响应时间、缓解系统压力。
为解决上述技术问题,本发明提供了一种云计算资源调度系统,包括调度中心,所述系统还包括:消息发送单元,消息寄存器单元,和消息接收单元,
所述消息发送单元用于,接收到用户发起的资源调度请求时,将所述资源调度请求封装成第一消息发送至所述消息寄存器;
所述消息寄存器单元用于,接收到所述消息发送单元发送的所述第一消息时,存储到消息队列中,并将所述消息队列中的第一消息发送给所述调度中心进行处理;以及,接收到所述调度中心返回的处理结果时,封装成第二消息存储到消息队列中,转发给所述消息接收单元;
所述消息接收单元用于,接收到所述消息寄存器发送的第二消息时,转发给相应的用户。
进一步地,所述消息发送单元用于,在所述第一消息中封装所述用户的信息以及所述资源调度请求中的虚拟机请求信息。
进一步地,所述消息发送单元用于,在所述第一消息中封装头信息,所述头信息中包含调度处理模块信息;
所述消息寄存器单元用于,根据所述第一消息头信息中的所述调度处理模块信息,将所述第一消息发送至调度中心相应的调度处理模块进行处理。
进一步地,所述消息寄存器单元用于,在所述第二消息中封装处理结果以及所述用户的信息。
进一步地,所述消息寄存器单元用于,通过轮询的方式对所述消息队列中的第一消息和第二消息进行监控,并将所述第一消息或者第二消息发送给所述调度中心或者所述消息接收单元。
此外,本发明还提供了一种云计算资源调度方法,所述方法包括:
接收到用户发起的资源调度请求时,将所述资源调度请求封装成第一消息并存储到消息队列中,将所述消息队列中的第一消息发送给所述调度中心进行处理;
接收到所述调度中心返回的处理结果时,封装成第二消息并存储到消息队列中,将所述消息队列中的第二消息转发给相应的用户。
进一步地,所述第一消息中封装有所述用户的信息以及所述资源调度请求中的虚拟机请求信息。
进一步地,所述方法还包括:
所述第一消息中封装有头信息,所述头信息中包含调度处理模块信息;
根据所述第一消息头信息中的所述调度处理模块信息,将所述第一消息发送至调度中心相应的调度处理模块进行处理。
进一步地,所述第二消息中封装有处理结果以及所述用户的信息。
进一步地,通过轮询的方式对所述消息队列中的第一消息和第二消息进行监控,将所述消息队列中的所述第一消息或者第二消息发送给所述调度中心或者返回给相应的用户。
本发明以消息机制为核心,将所有的调度操作都存放在消息队列中,通过维护进程来维护这个队列并在合适的时间进行合适的处理,避免当大量调度请求发生时主控端的调度死锁,达到保护调度请求,优化响应时间、缓解系统压力的目的。
与现有技术相比较,本发明至少具有如下有益效果:本发明的基于消息机制的云计算资源调度方法与系统,将所有的调度操作定义成一个个用户消息,并储存在消息队列中,由消息队列的维护进程来安排消息的分发以及其他分析操作,当云计算操作系统中较多资源同时要求进行调度时,不需要等待每个调用都有结果再执行后续操作,能够快速响应,从而可以大大提高操作性;同时,维护进程的维护可以保证调度过程按时按顺序执行,不会因为死锁而不执行或丢失操作,提高了系统运行的安全性。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本申请的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1为传统的云计算资源调度系统的示意图;
图2为本发明实施例的基于消息机制的云计算资源调度系统的示意图。
具体实施方式
本实施方式提供一种云计算资源调度系统,该系统包括消息发送单元,消息寄存器单元,消息接收单元,其中:
消息发送单元,主要负责生成消息,并将消息发送至消息寄存器;
消息寄存器单元,主要负责维护消息队列,对消息队列中的消息进行监控,并将消息转发给调度中心请求解析以及分发资源;以及,接收调度中心处理完毕后的处理结果,并将处理结果封装成消息后存储到消息队列中,等待发送给消息接收单元;
消息接收单元,主要负责接收及解析消息寄存器发送的消息,并做出相应的调度处理。
本实施方式提供的调度系统,通过一个分离的消息寄存器,将代理端和主控端隔离开,并通过此消息寄存器转发和守护所有的调度操作。
进一步地,上述调度系统中,所有对资源的调度和使用都是通过异步消息机制来控制,并提供一个单独的消息寄存器内部的处理模块来维护这个队列,在调度过程中将一些无需即时返回且耗时的操作提取出来,进行了异步处理,而这种异步处理的方式大大的节省了服务器的请求响应时间,从而提高了系统的吞吐量。
为了便于阐述本发明,以下将结合附图及具体实施例对本发明技术方案的实施作进一步详细描述。需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互任意组合。
本发明实施例的云计算资源调度系统主要包括调度中心,还包括:消息发送单元,消息寄存器单元,消息接收单元,图2中将消息发送单元,消息寄存器单元,和消息接收单元称作消息系统,其中,
消息发送单元,主要负责生成消息并将消息发送至消息寄存器;
消息寄存器单元,主要负责维护消息队列,并分析消息将消息转发给消息接收单元;
消息接收单元,负责接收消息寄存器发送的消息并解析做出相应的调度处理。
此外,消息系统还可以同时控制计算资源,完成资源的调度操作。
进一步地,消息发送单元用于,接收到用户发起的资源调度请求时,将资源调度请求封装成第一消息发送至消息寄存器;
消息寄存器单元用于,接收到消息发送单元发送的第一消息时,存储到消息队列中,并将消息队列中的第一消息发送给调度中心进行处理;以及,接收到调度中心返回的处理结果时,封装成第二消息存储到消息队列中,转发给消息接收单元;
消息接收单元用于,接收到消息寄存器发送的第二消息时,转发给相应的用户。
进一步地,消息发送单元用于,在所述的第一消息中封装用户的信息以及资源调度请求中的虚拟机请求信息。
进一步地,消息发送单元用于,在第一消息中封装头信息,头信息中包含调度处理模块信息;
消息寄存器单元用于,根据第一消息头信息中的调度处理模块信息,将第一消息发送至调度中心相应的调度处理模块进行处理。
进一步地,消息寄存器单元用于,在第二消息中封装处理结果以及用户的信息。
进一步地,消息寄存器单元用于,通过轮询的方式对消息队列中的第一消息和第二消息进行监控,并将第一消息或者第二消息发送给调度中心或者消息接收单元。
本发明实施例的基于消息机制的云计算调度系统的实现方式描述如下:当云计算的一个用户向系统申请一个虚拟机时,将申请虚拟机这一指令(资源调度请求)封装成消息储存在消息队列中;假定此时又有一个用户申请复制虚拟机,则该用户的指令也会封装成消息储存在消息队列中。消息队列的维护进程可以根据消息的头信息选择调度中心的不同的调度处理模块对消息进行处理。在将消息保存在消息队列中的同时,用户无需等待消息执行完毕,只需继续执行其他操作,在这个过程中消息会被安排执行。消息执行完毕后,消息寄存器将执行结果也封装成消息发送到消息队列中,最终由维护进程将消息队列中的处理结果通过消息接收单元反馈给用户。
以上仅为本发明的优选实施案例而已,并不用于限制本发明,本发明还可有其他多种实施例,在不背离本发明精神及其实质的情况下,熟悉本领域的技术人员可根据本发明做出各种相应的改变和变形,但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。
显然,本领域的技术人员应该明白,上述的本发明的各模块或各步骤可以用通用的计算装置来实现,它们可以集中在单个的计算装置上,或者分布在多个计算装置所组成的网络上,可选地,它们可以用计算装置可执行的程序代码来实现,从而,可以将它们存储在存储装置中由计算装置来执行,并且在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤,或者将它们分别制作成各个集成电路模块,或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样,本发明不限制于任何特定的硬件和软件结合。
Claims (10)
1.一种云计算资源调度系统,包括调度中心,其特征在于,所述系统还包括:消息发送单元,消息寄存器单元,和消息接收单元,
所述消息发送单元用于,接收到用户发起的资源调度请求时,将所述资源调度请求封装成第一消息发送至所述消息寄存器;
所述消息寄存器单元用于,接收到所述消息发送单元发送的所述第一消息时,存储到消息队列中,并将所述消息队列中的第一消息发送给所述调度中心进行处理;以及,接收到所述调度中心返回的处理结果时,封装成第二消息存储到消息队列中,转发给所述消息接收单元;
所述消息接收单元用于,接收到所述消息寄存器发送的第二消息时,转发给相应的用户。
2.如权利要求1所述的系统,其特征在于,
所述消息发送单元用于,在所述第一消息中封装所述用户的信息以及所述资源调度请求中的虚拟机请求信息。
3.如权利要求2所述的系统,其特征在于,
所述消息发送单元用于,在所述第一消息中封装头信息,所述头信息中包含调度处理模块信息;
所述消息寄存器单元用于,根据所述第一消息头信息中的所述调度处理模块信息,将所述第一消息发送至调度中心相应的调度处理模块进行处理。
4.如权利要求1、2或3所述的系统,其特征在于,
所述消息寄存器单元用于,在所述第二消息中封装处理结果以及所述用户的信息。
5.如权利要求1、2、3或4所述的系统,其特征在于,
所述消息寄存器单元用于,通过轮询的方式对所述消息队列中的第一消息和第二消息进行监控,并将所述第一消息或者第二消息发送给所述调度中心或者所述消息接收单元。
6.一种云计算资源调度方法,其特征在于,所述方法包括:
接收到用户发起的资源调度请求时,将所述资源调度请求封装成第一消息并存储到消息队列中,将所述消息队列中的第一消息发送给所述调度中心进行处理;
接收到所述调度中心返回的处理结果时,封装成第二消息并存储到消息队列中,将所述消息队列中的第二消息转发给相应的用户。
7.如权利要求6所述的方法,其特征在于,
所述第一消息中封装有所述用户的信息以及所述资源调度请求中的虚拟机请求信息。
8.如权利要求6所述的方法,其特征在于,所述方法还包括:
所述第一消息中封装有头信息,所述头信息中包含调度处理模块信息;
根据所述第一消息头信息中的所述调度处理模块信息,将所述第一消息发送至调度中心相应的调度处理模块进行处理。
9.如权利要求6所述的方法,其特征在于,
所述第二消息中封装有处理结果以及所述用户的信息。
10.如权利要求6、7、8或9所述的方法,其特征在于,
通过轮询的方式对所述消息队列中的第一消息和第二消息进行监控,将所述消息队列中的所述第一消息或者第二消息发送给所述调度中心或者返回给相应的用户。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012104046999A CN102904961A (zh) | 2012-10-22 | 2012-10-22 | 一种云计算资源调度方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012104046999A CN102904961A (zh) | 2012-10-22 | 2012-10-22 | 一种云计算资源调度方法及系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN102904961A true CN102904961A (zh) | 2013-01-30 |
Family
ID=47576996
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2012104046999A Pending CN102904961A (zh) | 2012-10-22 | 2012-10-22 | 一种云计算资源调度方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102904961A (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103118138A (zh) * | 2013-03-04 | 2013-05-22 | 中国信息安全测评中心 | 一种基于云服务的消息队列流处理方法 |
CN104243274A (zh) * | 2013-06-14 | 2014-12-24 | 亿览在线网络技术(北京)有限公司 | 一种消息处理方法及消息中心系统 |
CN104407926A (zh) * | 2014-12-15 | 2015-03-11 | 成都英力拓信息技术有限公司 | 一种云计算资源的调度方法 |
CN105100216A (zh) * | 2015-06-30 | 2015-11-25 | 北京奇虎科技有限公司 | 一种多业务的监控方法和装置 |
CN106464742A (zh) * | 2015-05-12 | 2017-02-22 | 环球互连及数据中心公司 | 用于基于云的服务交换的可编程网络平台 |
CN108449383A (zh) * | 2018-02-11 | 2018-08-24 | 西南电子技术研究所(中国电子科技集团公司第十研究所) | 分布式实时移动微云计算系统 |
CN111652605A (zh) * | 2020-06-08 | 2020-09-11 | 山东汇贸电子口岸有限公司 | 公有云业务创建云服务套餐的创建系统及创建方法 |
WO2022033037A1 (zh) * | 2020-08-13 | 2022-02-17 | 华为技术有限公司 | 一种消息管理的方法、装置及去服务器化系统 |
CN117648175A (zh) * | 2024-01-30 | 2024-03-05 | 之江实验室 | 一种基于动态算法选择的业务执行方法、装置及电子设备 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102137032A (zh) * | 2011-03-24 | 2011-07-27 | 上海云高软件科技有限公司 | 一种云消息系统及云消息发送和接收方法 |
CN102217256A (zh) * | 2011-05-26 | 2011-10-12 | 华为技术有限公司 | 队列调度的方法和装置 |
CN102685228A (zh) * | 2012-05-10 | 2012-09-19 | 苏州阔地网络科技有限公司 | 一种云会议的消息处理方法及系统 |
-
2012
- 2012-10-22 CN CN2012104046999A patent/CN102904961A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102137032A (zh) * | 2011-03-24 | 2011-07-27 | 上海云高软件科技有限公司 | 一种云消息系统及云消息发送和接收方法 |
CN102217256A (zh) * | 2011-05-26 | 2011-10-12 | 华为技术有限公司 | 队列调度的方法和装置 |
CN102685228A (zh) * | 2012-05-10 | 2012-09-19 | 苏州阔地网络科技有限公司 | 一种云会议的消息处理方法及系统 |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103118138B (zh) * | 2013-03-04 | 2016-02-10 | 中国信息安全测评中心 | 一种基于云服务的消息队列流处理方法 |
CN103118138A (zh) * | 2013-03-04 | 2013-05-22 | 中国信息安全测评中心 | 一种基于云服务的消息队列流处理方法 |
CN104243274A (zh) * | 2013-06-14 | 2014-12-24 | 亿览在线网络技术(北京)有限公司 | 一种消息处理方法及消息中心系统 |
CN104243274B (zh) * | 2013-06-14 | 2017-12-15 | 亿览在线网络技术(北京)有限公司 | 一种消息处理方法及消息中心系统 |
CN104407926A (zh) * | 2014-12-15 | 2015-03-11 | 成都英力拓信息技术有限公司 | 一种云计算资源的调度方法 |
CN104407926B (zh) * | 2014-12-15 | 2017-08-29 | 成都英力拓信息技术有限公司 | 一种云计算资源的调度方法 |
CN111371669B (zh) * | 2015-05-12 | 2021-06-11 | 环球互连及数据中心公司 | 用于基于云的服务交换的可编程网络平台 |
CN106464742A (zh) * | 2015-05-12 | 2017-02-22 | 环球互连及数据中心公司 | 用于基于云的服务交换的可编程网络平台 |
CN106464742B (zh) * | 2015-05-12 | 2020-01-31 | 环球互连及数据中心公司 | 用于基于云的服务交换的可编程网络平台 |
CN111371669A (zh) * | 2015-05-12 | 2020-07-03 | 环球互连及数据中心公司 | 用于基于云的服务交换的可编程网络平台 |
CN105100216A (zh) * | 2015-06-30 | 2015-11-25 | 北京奇虎科技有限公司 | 一种多业务的监控方法和装置 |
CN105100216B (zh) * | 2015-06-30 | 2018-09-18 | 北京奇虎科技有限公司 | 一种多业务的监控方法和装置 |
CN108449383A (zh) * | 2018-02-11 | 2018-08-24 | 西南电子技术研究所(中国电子科技集团公司第十研究所) | 分布式实时移动微云计算系统 |
CN111652605A (zh) * | 2020-06-08 | 2020-09-11 | 山东汇贸电子口岸有限公司 | 公有云业务创建云服务套餐的创建系统及创建方法 |
WO2022033037A1 (zh) * | 2020-08-13 | 2022-02-17 | 华为技术有限公司 | 一种消息管理的方法、装置及去服务器化系统 |
CN117648175A (zh) * | 2024-01-30 | 2024-03-05 | 之江实验室 | 一种基于动态算法选择的业务执行方法、装置及电子设备 |
CN117648175B (zh) * | 2024-01-30 | 2024-04-12 | 之江实验室 | 一种基于动态算法选择的业务执行方法、装置及电子设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102904961A (zh) | 一种云计算资源调度方法及系统 | |
CN102469033B (zh) | 一种消息订阅系统以及消息发送方法 | |
CN106170016A (zh) | 一种处理高并发数据请求的方法和系统 | |
CN112667414A (zh) | 基于消息队列的消息消费方法、装置、计算机设备及介质 | |
EP2898655B1 (en) | System and method for small batching processing of usage requests | |
US10505791B2 (en) | System and method to handle events using historical data in serverless systems | |
CN104092767A (zh) | 一种增加消息队列模型的发布/订阅系统及其工作方法 | |
CN106817408B (zh) | 一种分布式服务器集群调度方法及装置 | |
CN104572290A (zh) | 消息处理线程的控制方法及装置 | |
US10693816B2 (en) | Communication methods and systems, electronic devices, and computer clusters | |
CN102025650A (zh) | 企业服务总线的消息处理系统和消息处理方法 | |
US8606908B2 (en) | Wake-up server | |
CN110795254A (zh) | 一种基于php处理高并发io的方法 | |
CN109690491B (zh) | 执行远程命令 | |
CN105187327A (zh) | 一种分布式消息队列中间件 | |
CN108063813A (zh) | 一种集群环境下密码服务网络并行化的方法与系统 | |
CN108170417B (zh) | 一种在mesos集群中集成高性能的作业调度框架的方法和装置 | |
CN109388501B (zh) | 基于人脸识别请求的通信匹配方法、装置、设备及介质 | |
CN104468710A (zh) | 一种混合大数据处理系统及处理方法 | |
CN105550025A (zh) | 分布式基础设施即服务(IaaS)调度方法及系统 | |
CN114584618A (zh) | 信息交互方法、装置、设备、存储介质和系统 | |
CN109284177B (zh) | 一种数据更新方法和装置 | |
CN106095534B (zh) | 一种计算任务处理方法和系统 | |
US8589605B2 (en) | Inbound message rate limit based on maximum queue times | |
CN115170026A (zh) | 一种任务处理的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C05 | Deemed withdrawal (patent law before 1993) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20130130 |