CN111221249B - 一种用于数据中心系统群控的参数优化的方法 - Google Patents
一种用于数据中心系统群控的参数优化的方法 Download PDFInfo
- Publication number
- CN111221249B CN111221249B CN201911406414.3A CN201911406414A CN111221249B CN 111221249 B CN111221249 B CN 111221249B CN 201911406414 A CN201911406414 A CN 201911406414A CN 111221249 B CN111221249 B CN 111221249B
- Authority
- CN
- China
- Prior art keywords
- refrigeration
- parameters
- data center
- data
- neural network
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B13/00—Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion
- G05B13/02—Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric
- G05B13/04—Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric involving the use of models or simulators
- G05B13/042—Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric involving the use of models or simulators in which a parameter or coefficient is automatically adjusted to optimise the performance
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Computation (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Air Conditioning Control Device (AREA)
- Feedback Control In General (AREA)
Abstract
本发明提供了一种用于数据中心系统群控的参数优化的方法,包括步骤:S1,获取数据中心制冷参数及外界环境参数;S2,对所述制冷参数及外界环境参数进行预处理和格式化;S3,基于神经网络的制冷参数,构建机柜温湿度模型;S4,根据位置,将数据中心制冷系统中的机柜进行分组;S5,构建分级适应度机制对制冷状况进行评级;S6,根据遗传算法迭代求出数据中心制冷的最佳推荐设置参数组合。本发明的方法能够有效地自动化精确推荐在不同外界条件下的制冷参数最优组合,减少人工参与的程度,提高制冷系统的准确度,确保服务器安全运行。
Description
技术领域
本发明属于数据中心制冷群控技术领域,特别涉及一种用于数据中心系统群控的参数优化的方法。
背景技术
数据中心是一种需要消耗大量能源并且对环境变量要求较高的设施。例如,如果温度过高会减少元器件寿命,同时温度过低电池的放电容量也会下降。早先物理学家通过分析制冷系统的构造并结合流体力学的公式来尝试解决这个问题,但是在复杂多变的实际情况中很容易忽略一些微小的因素,并且建模过程需要十分充足的专业知识,工程量巨大。
目前控制数据中心温湿度的方法的研究主要集中于通过CFD模拟来均衡负载或者改变设备和空调的拓扑位置。但是经过实际研究发现,很多超大型机房的制冷参数并不像想象中的那么简单。例如通常是由制冷机组来直接控制室内空调,且制冷机组和空调也不是一一对应关系。这就使CFD模拟变得困难——无法直接设置所需参数,难以分别对应关系。
近几年来,深度神经网络广泛应用于各种领域。尤其是在应对数据量巨大的系统的情况下:神经网络对复杂系统建模具有优势,因为神经网络不需要用户预设模型的交互特征,而是在特征中寻找模式和交互,然后自动生成最佳匹配模型。得到准确的模拟模型之后,需要得到一个最优的参数组合使得温湿度最符合标准。目前使用机器学习算法计算最优解通常是较为方便、准确的。遗传算法的优点是能很好的处理约束,能很好的跳出局部最优,最终得到全局最优解,全局搜索能力强,但常规的算法也会导致结果的不准确。
发明内容
本发明的方法能够有效地自动化精确推荐在不同外界条件下的制冷参数最优组合,减少人工参与的程度,提高制冷系统的准确度,确保服务器安全运行
本发明提供了一种用于数据中心系统群控的参数优化的方法,包括步骤:
S1,获取数据中心制冷参数及外界环境参数;
S2,对所述制冷参数及外界环境参数进行预处理和格式化;
S3,基于神经网络的制冷参数,构建机柜温湿度模型;
S4,根据位置,将数据中心制冷系统中的机柜进行分组;
S5,构建分级分段适应度机制对制冷状况进行评级;
S6,根据遗传算法迭代求出数据中心制冷的最佳推荐设置参数组合。
本发明的方法可以应用于数据中心制冷群控系统的自动化设置推荐,能够有效地自动化精确推荐在不同外界条件下的制冷参数最优组合,适用于各种种类不同、数量不同的制冷参数组合。此发明在减少人工参与、解决传统人工温度控制耗时耗力问题的同时,还从效果和速度两方面性能上超过了原始的人工和贪心算法,不仅能够合理地调整制冷系统的各种参数,而且使其制冷状况符合真实值的能力大大提高,能够很好地应用到实际的数据中心制冷系统中去。并且,对于其中适应度函数的设置,为了更好的关照到距离真实值差异更大的数值,在神经网络模型的基础上,设置了一个分层、分段的评价函数,如此可以更完整地考虑距离与评级分数的关系。另外,输入相似度值的计算公式的创新,也可以更迅速更准确地得到相似度值。
附图说明
下面参照附图并结合实例来进一步描述本发明。其中:
图1为本发明的方法流程图。
图2为本发明实施例的格式化输入数据示意图。
图3为本发明实施例的神经网络模拟部分效果示意图。
图4为本发明实施例的自动化设置推荐和传统方法优化效果对比简化示意图。
具体实施方式
下面结合附图和实施例,对本发明的具体实施方式作做进一步详细描述。以下实施例用于说明本发明,但不用来限制本发明的范围。
如图1所示,本发明的一种用于数据中心制冷系统群控的参数优化的方法,包括步骤:
S1,获取数据中心制冷参数及外界环境参数;
S2,对所述制冷参数及外界环境参数进行预处理和格式化;
S3,基于神经网络的制冷参数,构建机柜温湿度模型;
S4,根据位置,将数据中心制冷系统中的机柜进行分组;
S5,构建分级分段适应度机制对制冷状况进行评级;
S6,根据遗传算法迭代求出数据中心制冷的最佳推荐设置参数组合。
优选地,步骤S1包括:
S1-1,利用Restful接口读取所述数据中心制冷参数及外界环境参数;
S1-2,根据实际拓扑位置和操作方法对所述数据中心制冷参数及外界环境参数进行分组并选取特征和标签。
优选地,步骤S2包括:
S2-1,对所述制冷参数及外界环境参数进行预处理,根据所述特征和标签,通过主成分分析提取其主要特征信息,
S2-2,对所述主要特征信息进行格式化和归一化,输出所需参数数据集;
其中,S2-1具体包括:
S2-1-1,将已得到的所述制冷参数及外界环境参数中的非数值性数据项进行one-hot编码;
S2-1-2,使用IForest检测筛选并剔除离群值;
S2-1-3,采用xgboost进行交叉验证,基于主成分分析得到各个特征的重要度,剔除重要性低的特征数据项,保留主要特征信息;
S2中对制冷参数及外界环境参数进行预处理和格式化后的结果如图2所示。
优选地,步骤S3包括:
S3-1,将所述数据集按照5:1的比例分为训练集和测试集;
S3-2,将训练集随机打乱顺序后分批次输入神经网络;
S3-3,构建以全连接层、batch_norm层、激活层、损失层组成的神经网络模型;
S3-4,使用Adam优化梯度下降的方式迭代降低损失层输出;
S3-5,使用所述测试集进行模型测试,若测试不通过则调节神经网络参数,重复进行S3-2、S3-3、S3-4的操作并保存神经网络模型,直到满足测试条件;
S3-6,基于当前神经网络的制冷参数,构建机柜温湿度模型;
其中,S3-3具体包括:
S3-3-1,将数据输入经过batch_norm层,其中,方差和均值通过直接计算每个批次的数据得到,缩放系数和偏移系数由网络学习得到;
S3-3-2,将S3-3-1的结果输入全连接层和PReLU激活层交替的单元结构,重复N次;
S3-3-3,将S3-3-2的结果输入全连接层和tanh激活层单元结构;
S3-3-4,将S3-3-3的结果输入到损失层中,其中,损失函数为MSE。
其中,S3-5具体包括:
S3-5-1,计算训练集的数据输入输出对和测试集的数据输入输出对的输入相似度值和输出差值,所述输入相似度值的计算包括:
其中,mi代表第i批训练集数据输入的均值,m代表测试集数据输入的均值,σi代表第i批训练集数据输入的标准差,σ代表测试集数据输入的标准差;
S3-5-2,确定是否满足以下测试条件:a.所述输入相似度值是否大于或等于相似度阈值,以及b.所述输出差值是否小于或等于差值阈值;
S3-5-3,若存在不满足上述条件的数据批次,则对神经网络参数进行调节,重复进行S3-2、S3-3、S3-4的操作并保存神经网络模型,直到满足测试条件。
S3中基于神经网络的制冷参数,构建机柜温湿度模型,该模型输出的模拟值(simuaited value)与真实值(true value)的比对结果如图3所示,其中纵坐标表示相对湿度(relative humidity),横坐标表示湿度点(humidity points)。
优选地,步骤S5包括:
S5-1,计算模拟值和真实值的绝对差值,并按照实际情况划分不同档次的阈值区间;
S5-2,根据S5-1中的绝对差值以及模拟值所处在的阈值区间,计算评级分数,其中,距离真实值越远的阈值区间其评级分数下降越快;
S5-3,统计各分组中的各个机柜在S5-2的评级分数,并分配不同权重计算所述分组和整个数据中心制冷系统的最终评级分数,权重分配方式是l2正则化后所占比重的倒数。
优选地,步骤S6包括:
S6-1,初始化种群,所述种群中每个维度代表一个可调制冷参数,其中,初始化标准基于各参数的均值;
S6-2,父种群分别经过选择、交叉、变异步骤产生下一代种群,其中每一步骤的概率取决于S5中得到的评级分数;
S6-3,对所述选择、交叉、变异的概率进行自适应调整,调整方式遵循随着适应度即评级分数的提高,个体保留概率线性提高;
S6-4,重复进行S6-2、S6-3,直到达到优化标准或迭代次数为止
S6-5,得到所述数据中心制冷系统群控的最佳推荐设置参数组合。
优选地,所述N=4。
如图4所示,S6中通过遗传算法迭代求解出的结果明显优于传统算法。
本发明的方法可以应用于数据中心制冷群控系统的自动化设置推荐,能够有效地自动化精确推荐在不同外界条件下的制冷参数最优组合,适用于各种种类不同、数量不同的制冷参数组合。此发明在减少人工参与、解决传统人工温度控制耗时耗力问题的同时,还从效果和速度两方面性能上超过了原始的人工和贪心算法,不仅能够合理地调整制冷系统的各种参数,而且使其制冷状况符合真实值的能力大大提高,能够很好地应用到实际的数据中心制冷系统中去。并且,对于其中适应度函数的设置,为了更好的关照到距离真实值差异更大的数值,在神经网络模型的基础上,设置了一个分层、分段的评价函数,如此可以更完整地考虑距离与评级分数的关系。另外,输入相似度值的计算公式的创新,也可以更迅速更准确地得到相似度值。
本发明的描述是为了示例和描述起见而给出的,而并不是无遗漏的或者将本发明限于所公开的形式。很多修改和变化对于本领域的普通技术人员而言是显然的。选择和描述实施例是为了更好说明本发明的原理和实际应用,并且使本领域的普通技术人员能够理解本发明从而设计适于特定用途的带有各种修改的各种实施例。
Claims (6)
1.一种用于数据中心系统群控的参数优化的方法,其特征在于,包括步骤:
S1,获取数据中心制冷参数及外界环境参数;
S2,对所述制冷参数及外界环境参数进行预处理和格式化;
S3,基于神经网络的制冷参数,构建机柜温湿度模型;
步骤S3包括:
S3-1,将数据集按照5:1的比例分为训练集和测试集;
S3-2,将训练集随机打乱顺序后分批次输入神经网络;
S3-3,构建以全连接层、batch_norm层、激活层、损失层组成的神经网络模型;
S3-4,使用Adam优化梯度下降的方式迭代降低损失层输出;
S3-5,使用所述测试集进行模型测试,若测试不通过则调节神经网络参数,重复进行S3-2、S3-3、S3-4的操作并保存神经网络模型,直到满足测试条件;
S3-6,基于当前神经网络的制冷参数,构建机柜温湿度模型,并输出模拟值;
S4,根据位置,将数据中心制冷系统中的机柜进行分组;
S5,构建分级分段适应度机制对制冷状况进行评级;
步骤S5包括:
S5-1,计算模拟值和标准值的绝对差值,并按照实际情况划分不同档次的阈值区间;
S5-2,根据S5-1中的绝对差值以及模拟值所处在的阈值区间,计算评级分数,其中,距离标准值越远的阈值区间其评级分数下降越快;
S5-3,统计各分组中的各个机柜在S5-2的评级分数,并分配不同权重计算所述分组和整个数据中心制冷系统的最终评级分数,权重分配方式是l2正则化后所占比重的倒数;
S6,根据遗传算法迭代求出数据中心制冷的最佳推荐设置参数组合。
2.如权利要求1所述的方法,其特征在于,步骤S1包括:
S1-1,利用Restful接口读取所述数据中心制冷参数及外界环境参数;
S1-2,根据实际拓扑位置和操作方法对所述数据中心制冷参数及外界环境参数进行分组并选取特征和标签。
3.如权利要求1所述的方法,其特征在于,步骤S2包括:
S2-1,对所述制冷参数及外界环境参数进行预处理,根据所述特征和标签,通过主成分分析提取其主要特征信息;
S2-2,对所述主要特征信息进行格式化和归一化,输出所需参数数据集;
其中,S2-1具体包括:
S2-1-1,将已得到的所述制冷参数及外界环境参数中的非数值性数据项进行one-hot编码;
S2-1-2,使用IForest检测筛选并剔除离群值;
S2-1-3,采用xgboost进行交叉验证,基于主成分分析得到各个特征的重要度,剔除重要性低的特征数据项,保留主要特征信息。
4.如权利要求1所述的方法,其特征在于,
S3-3具体包括:
S3-3-1,将数据输入经过batch_norm层,其中,方差和均值通过直接计算每个批次的数据得到,缩放系数和偏移系数由网络学习得到;
S3-3-2,将S3-3-1的结果输入全连接层和PReLU激活层交替的单元结构,重复N次;
S3-3-3,将S3-3-2的结果输入全连接层和tanh激活层单元结构;
S3-3-4,将S3-3-3的结果输入到损失层中,其中,损失函数为MSE;
其中,S3-5具体包括:
S3-5-1,计算训练集的数据输入输出对和测试集的数据输入输出对的输入相似度值和输出差值,所述输入相似度值的计算包括:
其中,mi代表第i批训练集数据输入的均值,m代表测试集数据输入的均值,σi代表第i批训练集数据输入的标准差,σ代表测试集数据输入的标准差;
S3-5-2,确定是否满足以下测试条件:a.所述输入相似度值是否大于或等于相似度阈值,以及b.所述输出差值是否小于或等于差值阈值;
S3-5-3,若存在不满足上述条件的数据批次,则对神经网络参数进行调节,重复进行S3-2、S3-3、S3-4的操作并保存神经网络模型,直到满足测试条件。
5.如权利要求1所述的方法,其特征在于,步骤S6包括:
S6-1,初始化种群,所述种群中每个维度代表一个可调制冷参数,其中,初始化标准基于各参数的均值;
S6-2,父种群分别经过选择、交叉、变异步骤产生下一代种群,其中每一步骤的概率取决于S5中得到的评级分数;
S6-3,对所述选择、交叉、变异的概率进行自适应调整,调整方式遵循随着适应度即评级分数的提高,个体保留概率线性提高;
S6-4,重复进行S6-2、S6-3,直到达到优化标准或迭代次数为止;
S6-5,得到所述数据中心制冷系统群控的最佳推荐设置参数组合。
6.如权利要求4所述的方法,其特征在于,所述N=4。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911406414.3A CN111221249B (zh) | 2019-12-31 | 2019-12-31 | 一种用于数据中心系统群控的参数优化的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911406414.3A CN111221249B (zh) | 2019-12-31 | 2019-12-31 | 一种用于数据中心系统群控的参数优化的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111221249A CN111221249A (zh) | 2020-06-02 |
CN111221249B true CN111221249B (zh) | 2023-02-07 |
Family
ID=70830954
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911406414.3A Active CN111221249B (zh) | 2019-12-31 | 2019-12-31 | 一种用于数据中心系统群控的参数优化的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111221249B (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111814406B (zh) * | 2020-07-27 | 2022-08-09 | 太原理工大学 | 一种多晶硅原料重要度分析方法及系统 |
CN112888268B (zh) * | 2021-02-04 | 2022-08-09 | 中国工商银行股份有限公司 | 数据中心机房节能控制方法、装置、设备及存储介质 |
CN117332697A (zh) * | 2023-11-03 | 2024-01-02 | 中国电子产业工程有限公司 | 一种网络安全系统优化方法及系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105611814A (zh) * | 2016-03-22 | 2016-05-25 | 天津惠普数据中心设计工程有限公司 | 一种数据中心冷冻站群控控制系统及控制方法 |
CN109323425A (zh) * | 2018-11-15 | 2019-02-12 | 广东美的制冷设备有限公司 | 空调的控制方法、装置及可读存储介质 |
CN109600956A (zh) * | 2018-12-10 | 2019-04-09 | 国家电网有限公司信息通信分公司 | 一种数据中心服务器放置位置优化算法和系统 |
-
2019
- 2019-12-31 CN CN201911406414.3A patent/CN111221249B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105611814A (zh) * | 2016-03-22 | 2016-05-25 | 天津惠普数据中心设计工程有限公司 | 一种数据中心冷冻站群控控制系统及控制方法 |
CN109323425A (zh) * | 2018-11-15 | 2019-02-12 | 广东美的制冷设备有限公司 | 空调的控制方法、装置及可读存储介质 |
CN109600956A (zh) * | 2018-12-10 | 2019-04-09 | 国家电网有限公司信息通信分公司 | 一种数据中心服务器放置位置优化算法和系统 |
Also Published As
Publication number | Publication date |
---|---|
CN111221249A (zh) | 2020-06-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111221249B (zh) | 一种用于数据中心系统群控的参数优化的方法 | |
CN111738512B (zh) | 一种基于cnn-ipso-gru混合模型的短期电力负荷预测方法 | |
CN112699913B (zh) | 一种台区户变关系异常诊断方法及装置 | |
CN106951695B (zh) | 多工况下的机械设备剩余使用寿命计算方法及系统 | |
CN107169628B (zh) | 一种基于大数据互信息属性约简的配电网可靠性评估方法 | |
CN111783953A (zh) | 一种基于优化lstm网络的24点电力负荷值7日预测方法 | |
CN107358542B (zh) | 一种励磁系统性能评估模型的构建方法 | |
CN111242266A (zh) | 一种运行数据管理系统 | |
CN114548509B (zh) | 一种多能源系统多类型负荷联合预测方法及系统 | |
CN106951436B (zh) | 一种基于移动情境的大规模在线推荐方法 | |
CN111881617A (zh) | 数据处理方法、风力发电机组的性能评估方法及系统 | |
CN108345908A (zh) | 电网数据的分类方法、分类设备及存储介质 | |
CN112364560A (zh) | 矿山凿岩装备作业工时智能预测方法 | |
CN116485049B (zh) | 一种基于人工智能的电能计量误差预测与优化系统 | |
CN110942182A (zh) | 一种基于支持向量回归建立台风预测模型的方法 | |
CN116757057A (zh) | 基于pso-ga-lstm模型的空气质量预测方法 | |
CN112365044A (zh) | 一种基于k近邻算法和支持向量机的隧道掌子面失效概率预测方法 | |
CN112288157A (zh) | 一种基于模糊聚类与深度强化学习的风电场功率预测方法 | |
Fan | Research on deep learning energy consumption prediction based on generating confrontation network | |
CN113762591B (zh) | 一种基于gru和多核svm对抗学习的短期电量预测方法及系统 | |
CN107886187B (zh) | 考虑负荷敏感性分级及其概率性损失的配电网规划方法 | |
CN114330090A (zh) | 一种缺陷检测方法、装置、计算机设备和存储介质 | |
Shin et al. | Parameter estimation for building energy models using GRcGAN | |
CN117013520A (zh) | 一种基于增量学习的柔性负荷可调功率评估方法 | |
CN113487080B (zh) | 一种基于风速分类的风速动态场景生成方法、系统及终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |