CN104142850A - 数据中心的节能调度方法 - Google Patents
数据中心的节能调度方法 Download PDFInfo
- Publication number
- CN104142850A CN104142850A CN201410315312.1A CN201410315312A CN104142850A CN 104142850 A CN104142850 A CN 104142850A CN 201410315312 A CN201410315312 A CN 201410315312A CN 104142850 A CN104142850 A CN 104142850A
- Authority
- CN
- China
- Prior art keywords
- scheduling
- scheduling method
- virtual machine
- energy
- mrow
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 77
- 238000005265 energy consumption Methods 0.000 claims abstract description 46
- 238000004364 calculation method Methods 0.000 claims abstract description 17
- 230000035772 mutation Effects 0.000 claims abstract description 13
- 238000005457 optimization Methods 0.000 claims abstract description 10
- 238000005057 refrigeration Methods 0.000 claims description 23
- 238000001816 cooling Methods 0.000 claims description 17
- 238000004378 air conditioning Methods 0.000 claims description 7
- 230000008859 change Effects 0.000 claims description 4
- 230000003247 decreasing effect Effects 0.000 claims description 3
- 238000005259 measurement Methods 0.000 claims description 3
- 230000008569 process Effects 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 4
- 238000007726 management method Methods 0.000 abstract description 3
- 238000005516 engineering process Methods 0.000 description 5
- 230000007547 defect Effects 0.000 description 2
- 238000004134 energy conservation Methods 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000010276 construction Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 230000002068 genetic effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000013021 overheating Methods 0.000 description 1
- 238000010992 reflux Methods 0.000 description 1
Classifications
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
- Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management
Landscapes
- Power Sources (AREA)
Abstract
本发明涉及数据中心能耗管理方法,公开了一种数据中心的节能调度方法,包括以下具体步骤:调度方法生成步骤:随机生成多个虚拟机调度方法,所述虚拟机调度方法指的是虚拟机与服务器的对应关系;调度优化步骤:通过交叉算法以及变异算法对虚拟机调度方法进行调整得到最终的调度结果,并执行最终的调度结果;其中,所述交叉算法包括选择具有更高适应度的虚拟机调度方法进行交叉运算;所述变异算法包括选择具有更低适应度的虚拟机调度方法进行交叉运算。本发明的优点在于,解决了数据中心能耗优化困难的问题,精度高,节能效果好,计算步骤少,且可以支持在线实时计算。
Description
技术领域
本发明涉及数据中心能耗管理方法,特别涉及一种数据中心的节能调度方法,通过基于改进的遗传算法机型调度方法的优化,从而实现节能效果。
背景技术
随着云计算与大数据时代的到来,更多的资源集中到云端,数据中心的能耗及环境问题也日益凸显。构建绿色数据中心、实现节能减排成为了近年来业界关注的热点。数据中心的能耗主要由计算能耗和制冷能耗两部分组成。因此,以往大部分方法也主要是对这两方面分别进行考虑以实现节能优化。
在减少计算能耗方面,例如采用处理器电压频率调整(Dynamic Voltage andFrequency Scaling,DVFS)等底层节能技术;对任务负载进行调度,将任务进行集中化;或采用虚拟化技术,通过服务器整合把多个虚拟机整合到同一个物理机上,关闭空闲的物理机,达到节能目的。尤其是在负载调度层面,大部分方法都采用将负载进行整合、集中到少数服务器上的调度策略。
除此以外,在减少制冷能耗方面,由于影响制冷能耗的最为关键的因素是制冷设备必须保证所有服务器不能超过一定阈值(安全温度)。因此,制冷设备通常需要依照数据中心内部温度最高、制冷最为最差的节点进行制冷。这无疑消耗了大量制冷能耗。常用的解决方法是优化数据中心的硬件布局,改善制冷效率。在软件层面,主要通过负载均衡,从而避免热点(Hot Spot)的产生,防止少数节点出现过热现象从而加大制冷需求。
在软件层面的节能方法在以上两个方面中带来了负载整合与均衡的矛盾。前者可以减少计算能耗;而后者则能够降低制冷能耗。之前的工作在该问题上鲜有讨论。因此,如何综合考虑两者的能耗,在负载调度上进行权衡,从而减少总能耗,是极为必要的。其次,由于虚拟化技术具有资源利用率高、管理灵活、可扩展性好等优点,数据中心开始广泛地采用虚拟化技术。而虚拟化技术的引入,也改变了现有的很多节能调度系统的设计与实现,对虚拟机的场景下的实现节能调度方法提出了要求。而目前综合考虑两者能耗的工作存在着建模粒度粗糙、未考虑虚拟化场景等缺点。就此,有必要研制一种针对虚拟机的,同时考虑计算能耗与制冷能耗的数据中心节能调度方法。
发明内容
本发明针对现有技术存在建模粒度粗糙,未考虑虚拟化场景的缺点,提供了一种数据中心的节能调度方法,以减少总能耗为目标进行虚拟机调度计算,在综合考虑计算能耗与制冷能耗的基础上,实现了虚拟机调度的优化的目的。
为实现上述目的,本发明可采取下述技术方案:
一种数据中心的节能调度方法,包括以下具体步骤:
调度方法生成步骤:随机生成多个虚拟机调度方法,所述虚拟机调度方法指的是虚拟机与服务器的对应关系;
调度优化步骤:通过交叉算法以及变异算法对虚拟机调度方法进行迭代调整得到最终调度结果并按其进行调度;
其中,
所述交叉算法选择具有更高适应度的虚拟机调度方法进行交叉操作;
所述变异算法选择具有更低适应度的虚拟机调度方法进行变异操作;
所述适应度是指虚拟机调度方法所对应的能耗的负数。
于本发明的实施例中,所述能耗的计算包括以下具体步骤:
1)计算虚拟机调度方法在运行过程中每个服务器的CPU利用率;
2)对每个服务器的CPU利用率的数值进行拟合并得到服务器的功率变化曲线P,并由此计算得到所有服务器的功耗总和Pcomputing;
3)找寻在所有服务器的CPU运行时温度不超过危险阈值的情况下的最高的SAT设定值以节省制冷能耗,并计算该SAT下的空调性能系数CoP;
4)根据该CoP值以及所有服务器的功耗总和Pcomputing得到制冷功耗Pcooling,将所有服务器的功耗总和Pcomputing以及制冷功耗Pcooling分别对时间进行积分得到所有服务器的能耗值Ecomputing以及制冷能耗值Ecooling,所有服务器的能耗值以及制冷能耗值的总和即所述虚拟机调度方法所对应的能耗Pcooling。
于本发明的实施例中,所述最高的SAT设定值由以下方法找寻:SAT从某个值SAT0开始,根据下式预测CPU温度(P、R、H分别为服务器功率、热阻和热回流强度),逐渐增加或减少SAT的取值,找到可以保证所有CPU均不超过危险阈值温度,且最高的SAT设定值。
其中
于本发明的实施例中,所述交叉算法是指将不同的虚拟机调度方法中的至少部分虚拟机调度序列进行互换,从而生成新的虚拟机调度方法。
于本发明的实施例中,所述变异算法是将具有较低适应度的虚拟机调度方法中的虚拟机调度序列以一定几率随机进行变更。
于本发明的实施例中,还包括迭代计算步骤;
所述迭代计算步骤包括将调度优化步骤(200)得到的调度结果再次作为步骤(200)的调整对象,进行迭代调整并得到最终的调度结果。
于本发明的实施例中,所述空调性能系数CoP与空调温度设定值SAT之间采用以下公式:CoP=0.0068SAT2+0.008SAT+0.458
于本发明的实施例中,R使用公式TCPU=PR+Tamb进行计算,其中CPU温度TCPU、功率P以及服务器周围温度Tamb为服务器在任意稳定状态下的测量结果
本发明具有以下的显著技术效果:
具有建模精度高,节能效果好,计算速度快,支持在线计算与调度决策的特点,尤为适应于大型计算中心的节能降耗。
附图说明
图1为数据中心的节能调度方法的流程示意图。
具体实施方式
下面结合实施例对本发明作进一步的详细描述。
实施例1
一种数据中心的节能调度方法,如图1所示,包括以下具体步骤:
调度方法生成步骤100:随机生成多个虚拟机调度方法,所述虚拟机调度方法指的是虚拟机与服务器的对应关系;用户对于数据中心的请求request,是一个待运行的虚拟机序列,每个虚拟机上部署一系列的任务。为保证用户的虚拟机及任务正常运行,每个服务器上运行的虚拟机的资源总和不能高于服务器的物理资源。可以采用以下方式表示用户对于数据中心的请求request:
request=〈VM1,VM2,…,VMn〉
VMi=〈task1,task2,…,taski〉
进一步地,对于来自用户的请求request,其调度方法scheduling可以进行如下的编码:编码由n个(n为虚拟机个数)整数构成的序列所组成。其中,VM1_server是虚拟机1所分配的服务器的编号,以此类推,最终的虚拟机调度方法可以表示为 对于request里的每个虚拟机,随机分配到数据中心的某个服务器上。如果VMi分配到serverj会导致该服务器的虚拟机过多超过物理资源,则重新对VMi进行随机分配。由此生成k种调度方法。
调度优化步骤200:通过交叉算法201以及变异算法202对虚拟机调度方法进行迭代调整得到最终调度结果并按其进行调度;
其中,
所述交叉算法选择具有更高适应度的虚拟机调度方法进行交叉操作;
所述变异算法选择具有更低适应度的虚拟机调度方法进行变异操作;
所述适应度是指虚拟机调度方法所对应的能耗的负数。
所述能耗的计算包括以下具体步骤,该步骤特别地用于计算调度方法schedulingi(0<i<=k)所对应的能耗:
1计算虚拟机调度方法在运行过程中每个服务器的CPU利用率;
2对每个服务器的CPU利用率的数值进行拟合并得到服务器的功率变化曲线P,并由此计算得到所有服务器的功耗总和Pcomputing;
3找寻在所有服务器的CPU运行时温度不超过危险阈值的情况下的最高的SAT设定值以节省制冷能耗,并计算该SAT下的空调性能系数CoP;
4根据该CoP值以及所有服务器的功耗总和Pcomputing得到制冷功耗Pcooling将所有服务器的功耗总和Pcomputing以及制冷功耗Pcooling分别对时间进行积分得到所有服务器的能耗值Econputing以及制冷能耗值Ecooling,所有服务器的能耗值以及制冷能耗值的总和即所述虚拟机调度方法的能耗,总能耗Etotal可以表示为
所述最高的SAT设定值由以下方法找寻:SAT从某个值SAT0开始,根据下式预测CPU的温度(P、R、H分别为服务器功率、热阻和热回流强度,其中H的值为服务器周围温度与空调温度设定值的差),逐渐增加或减少SAT的取值,找到可以保证所有CPU均不超过危险阈值温度,且最高的SAT设定值。
其中
所述交叉算法201是指将不同的虚拟机调度方法中的至少部分虚拟机调度序列进行互换,从而生成新的虚拟机调度方法。
所述变异算法202是将具有较低适应度的虚拟机调度方法中的虚拟机调度序列以一定几率随机进行变更。
进一步地,作为一种更优的可选方案,所述变异算法202中的变异几率为20%。
进一步地,所述的数据中心的节能调度方法还包括迭代计算步骤300;
所述迭代计算步骤包括将调度优化步骤(200)得到的最终调度结果作为再次进行的调度优化步骤(200)的调整对象重新得到最终调度结果。
其中,R使用公式TCPU=PR+Tamb进行计算,CPU温度TCPU、功率P以及服务器周围温度Tamb为服务器在稳定运行状态的测量结果
总之,以上所述仅为本发明的较佳实施例,凡依本发明申请专利范围所作的均等变化与修饰,皆应属本发明专利的涵盖范围。
Claims (8)
1.一种数据中心的节能调度方法,其特征在于,包括以下具体步骤:
调度方法生成步骤(100):随机生成多个虚拟机调度方法,所述虚拟机调度方法指的是虚拟机与服务器的对应关系;
调度优化步骤(200):通过交叉算法(201)以及变异算法(202)对虚拟机调度方法进行迭代调整得到最终调度结果并按其进行调度;
其中,
所述交叉算法(201)选择具有更高适应度的虚拟机调度方法进行交叉操作(201);
所述变异算法(202)选择具有更低适应度的虚拟机调度方法进行变异操作(202);
所述适应度是指虚拟机调度方法所对应的能耗的负数。
2.根据权利要求1所述的数据中心的节能调度方法,其特征在于,所述能耗的计算包括以下具体步骤:
1)计算虚拟机调度方法在运行过程中每个服务器的CPU利用率;
2)对每个服务器的CPU利用率的数值进行拟合并得到服务器的功率变化曲线P,并由此计算得到所有服务器的功耗总和Pcomputing;
3)找寻在所有服务器的CPU运行时温度不超过危险阈值的情况下的最高的SAT设定值以节省制冷能耗,并计算该SAT下的空调性能系数CoP;
4)根据该CoP值以及所有服务器的功耗总和Pcomputing得到制冷功耗Pcooling,将所有服务器的功耗总和Pcomputing以及制冷功耗Pcooling分别对时间进行积分得到所有服务器的能耗值Ecomputing以及制冷能耗值Ecooling,所有服务器的能耗值以及制冷能耗值的总和即所述虚拟机调度方法所对应的能耗Pcooling。
3.根据权利要求2所述的数据中心的节能调度方法,其特征在于,所述最高的SAT设定值由以下方法找寻:SAT从某个值SAT0开始,根据下式预测CPU温度(P、R、H分别为服务器功率、热阻和热回流强度),逐渐增加或减少SAT的取值,找到可以保证所有CPU均不超过危险阈值温度,且最高的SAT设定值。
其中
4.根据权利要求1所述的数据中心的节能调度方法,其特征在于,所述交叉算法(201)是指将不同的虚拟机调度方法中的至少部分虚拟机调度序列进行互换,从而生成新的虚拟机调度方法。
5.根据权利要求1所述的数据中心的节能调度方法,其特征在于,所述变异算法(202)是将具有较低适应度的虚拟机调度方法中的虚拟机调度序列以一定几率随机进行变更。
6.根据权利要求1所述的数据中心的节能调度方法,其特征在于,还包括迭代计算步骤(300);
所述迭代计算步骤(300)包括将调度优化步骤(200)得到的调度结果再次作为步骤(200)的调整对象,进行迭代调整并得到最终的调度结果。
7.根据权利要求2所述的数据中心的节能调度方法,其特征在于,所述空调性能系数CoP与空调温度设定值SAT之间采用以下公式:
CoP=0.0068SAT2+0.008SAT+0.458
8.根据权利要求3所述的数据中心的节能调度方法,其特征在于,R使用公式TCPU=PR+Tamb进行计算,其中CPU温度TCPU、功率P以及服务器周围温度Tamb为服务器在任意稳定状态下的测量结果。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410315312.1A CN104142850B (zh) | 2014-07-03 | 2014-07-03 | 数据中心的节能调度方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410315312.1A CN104142850B (zh) | 2014-07-03 | 2014-07-03 | 数据中心的节能调度方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104142850A true CN104142850A (zh) | 2014-11-12 |
CN104142850B CN104142850B (zh) | 2017-08-29 |
Family
ID=51852031
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410315312.1A Active CN104142850B (zh) | 2014-07-03 | 2014-07-03 | 数据中心的节能调度方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104142850B (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104808770A (zh) * | 2015-04-23 | 2015-07-29 | 南京大学 | 基于动态调频的数据中心能耗管理方法及系统 |
CN108334406A (zh) * | 2017-12-14 | 2018-07-27 | 上海交通大学 | 基于区域气温差异化的跨数据中心节能负载均衡方法 |
CN109871268A (zh) * | 2019-01-10 | 2019-06-11 | 暨南大学 | 一种面向数据中心的基于气流组织的节能调度方法 |
CN113887083A (zh) * | 2021-10-29 | 2022-01-04 | 北京明略软件系统有限公司 | 一种空调调度优化方法、系统、计算机设备和存储介质 |
CN115237241A (zh) * | 2022-09-26 | 2022-10-25 | 张北云联数据服务有限责任公司 | 一种数据中心节能调度方法及系统 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102096461A (zh) * | 2011-01-13 | 2011-06-15 | 浙江大学 | 基于虚拟机迁移和负载感知整合的云数据中心节能方法 |
CN102984137A (zh) * | 2012-11-14 | 2013-03-20 | 江苏南开之星软件技术有限公司 | 一种基于多目标遗传算法下的多目标服务器调度方法 |
CN103235738A (zh) * | 2013-05-17 | 2013-08-07 | 浙江大学 | 一种基于应用程序性能约束的虚拟机节能整合规划方法 |
US8539059B2 (en) * | 2010-06-02 | 2013-09-17 | Hewlett-Packard Development Company, L.P. | Managing cooling devices and computing nodes in an infrastructure |
-
2014
- 2014-07-03 CN CN201410315312.1A patent/CN104142850B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8539059B2 (en) * | 2010-06-02 | 2013-09-17 | Hewlett-Packard Development Company, L.P. | Managing cooling devices and computing nodes in an infrastructure |
CN102096461A (zh) * | 2011-01-13 | 2011-06-15 | 浙江大学 | 基于虚拟机迁移和负载感知整合的云数据中心节能方法 |
CN102984137A (zh) * | 2012-11-14 | 2013-03-20 | 江苏南开之星软件技术有限公司 | 一种基于多目标遗传算法下的多目标服务器调度方法 |
CN103235738A (zh) * | 2013-05-17 | 2013-08-07 | 浙江大学 | 一种基于应用程序性能约束的虚拟机节能整合规划方法 |
Non-Patent Citations (3)
Title |
---|
QINGHUI TANG 等: "Thermal-Aware Task Scheduling for Data centers", 《PROCEEDING OF THE IEEE INTERNATIONAL CONFERENCE ON CLUSTER COMPUTING》 * |
SUSHU ZHANG 等: "approximation algorithm for the temperature-aware scheduling problem", 《PROCEEDINGS OF THE IEEE/ACM INTERNATIONAL CONFERENCE ON COMPUTER-AIDED DESIGN》 * |
叶可江 等: "虚拟化云计算平台的能耗管理", 《计算机学报》 * |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104808770A (zh) * | 2015-04-23 | 2015-07-29 | 南京大学 | 基于动态调频的数据中心能耗管理方法及系统 |
CN104808770B (zh) * | 2015-04-23 | 2017-04-12 | 南京大学 | 基于动态调频的数据中心能耗管理方法及系统 |
CN108334406A (zh) * | 2017-12-14 | 2018-07-27 | 上海交通大学 | 基于区域气温差异化的跨数据中心节能负载均衡方法 |
CN109871268A (zh) * | 2019-01-10 | 2019-06-11 | 暨南大学 | 一种面向数据中心的基于气流组织的节能调度方法 |
CN113887083A (zh) * | 2021-10-29 | 2022-01-04 | 北京明略软件系统有限公司 | 一种空调调度优化方法、系统、计算机设备和存储介质 |
CN115237241A (zh) * | 2022-09-26 | 2022-10-25 | 张北云联数据服务有限责任公司 | 一种数据中心节能调度方法及系统 |
CN115237241B (zh) * | 2022-09-26 | 2022-12-09 | 张北云联数据服务有限责任公司 | 一种数据中心节能调度方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
CN104142850B (zh) | 2017-08-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Hussain et al. | Energy and performance-efficient task scheduling in heterogeneous virtualized cloud computing | |
CN104142850B (zh) | 数据中心的节能调度方法 | |
Ilager et al. | ETAS: Energy and thermal‐aware dynamic virtual machine consolidation in cloud data center with proactive hotspot mitigation | |
Wan et al. | Joint cooling and server control in data centers: A cross-layer framework for holistic energy minimization | |
Fang et al. | Thermal-aware energy management of an HPC data center via two-time-scale control | |
WO2014124341A1 (en) | In-situ optimization of chilled water plants | |
CN106528941B (zh) | 一种服务器平均温度约束下的数据中心能耗最优化资源控制算法 | |
Huang et al. | Energy-efficient resource utilization for heterogeneous embedded computing systems | |
CN111290831B (zh) | 一种云计算基于强化学习的虚拟机迁移方法 | |
Chi et al. | Jointly optimizing the IT and cooling systems for data center energy efficiency based on multi-agent deep reinforcement learning | |
Yao et al. | Adaptive power management through thermal aware workload balancing in internet data centers | |
CN104049626B (zh) | 用于冷却系统的部件的能量分析与预测建模的系统及方法 | |
Yang et al. | Reducing the cooling power of data centers by intelligently assigning tasks | |
Conficoni et al. | Integrated energy-aware management of supercomputer hybrid cooling systems | |
CN108983946A (zh) | 一种服务器功耗控制方法、系统及设备 | |
TW201324357A (zh) | 虛擬機叢集之綠能管理方法 | |
CN105763367A (zh) | 一种基于虚拟化的数据中心的能耗管理方法 | |
Feng et al. | Towards heat-recirculation-aware virtual machine placement in data centers | |
Song et al. | An efficient scheduling algorithm for energy consumption constrained parallel applications on heterogeneous distributed systems | |
CN105225016B (zh) | 可再生供能的云计算系统中基于合作博弈的能量分配方法 | |
WO2021253706A1 (zh) | 基于间歇特性的需求侧资源协调控制方法及系统 | |
CN106507640B (zh) | 一种绿色数据中心温度感知的服务器管理方法 | |
CN111083201B (zh) | 一种工业物联网中数据驱动制造服务的节能资源分配方法 | |
Lin et al. | Allocating workload to minimize the power consumption of data centers | |
CN110008515B (zh) | 一种可再生能源数据中心管理方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |