CN110866528A - 一种模型训练方法、能耗使用效率预测方法、装置和介质 - Google Patents

一种模型训练方法、能耗使用效率预测方法、装置和介质 Download PDF

Info

Publication number
CN110866528A
CN110866528A CN201911032302.6A CN201911032302A CN110866528A CN 110866528 A CN110866528 A CN 110866528A CN 201911032302 A CN201911032302 A CN 201911032302A CN 110866528 A CN110866528 A CN 110866528A
Authority
CN
China
Prior art keywords
energy consumption
model
use efficiency
efficiency
data center
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201911032302.6A
Other languages
English (en)
Other versions
CN110866528B (zh
Inventor
夏恒
夏俐
赵千川
贾庆山
管晓宏
杨震
朱华
高江
岳上
韩建军
栗权
林森
赵静洲
徐东
黄现东
郑焕琼
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tsinghua University
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tsinghua University, Tencent Technology Shenzhen Co Ltd filed Critical Tsinghua University
Priority to CN201911032302.6A priority Critical patent/CN110866528B/zh
Publication of CN110866528A publication Critical patent/CN110866528A/zh
Application granted granted Critical
Publication of CN110866528B publication Critical patent/CN110866528B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G06F18/243—Classification techniques relating to the number of classes
    • G06F18/24323—Tree-organised classifiers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Multimedia (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明实施例公开了一种模型训练方法、能耗使用效率预测方法、装置和介质，其中，首先获取数据中心的历史能耗使用效率，以及获取对应的历史能耗使用效率相关特征；然后根据历史能耗使用效率和历史能耗使用效率相关特征构建训练集和测试集；再构建轻量梯度提升机模型，并根据训练集对轻量梯度提升机模型进行训练；最后根据测试集对训练后的轻量梯度提升机模型的进行校验，当校验通过时，将训练后的轻量梯度提升机模型作为用于预测数据中心的能耗使用效率的能耗使用效率预测模型。相比于现有技术，本发明能够使得训练得到的能耗使用效率预测模型的预测准确度较高，从而更准确的对数据中心的能耗使用效率进行预测。

Description

一种模型训练方法、能耗使用效率预测方法、装置和介质
技术领域
本发明涉及机器学习技术领域，具体涉及一种模型训练方法、能耗使用效率预测方法、装置和介质。
背景技术
随着能源成本的不断攀升以及人们对绿色环保的重视，对数据中心的节能需求越来越高。为了更好的对数据中心进行节能控制，首先需要对数据中心的能耗使用效率进行预测。
在现有技术中，对能耗使用效率的预测正在初步发展中，比如，可以采用岭回归算法来预测数据中心的能耗使用效率，其针对不同数据中心的主要能耗组件不同的特点，基于域适应模型融合，以及不同数据中心之间的差异性，进行针对性的预测。
在对现有技术的研究和实践过程中，本发明的发明人发现，现有的这种预测能耗使用效率的方式，在预测能耗使用效率的过程中，容易丢失部分信息，且其决定系数相较于普通回归方法较低，导致整体预测的准确度较差。
发明内容
本发明实施例提供一种模型训练方法、能耗使用效率预测方法、装置和介质，可以训练得到预测准确度更高的能耗使用效率预测模型，从而利用该能耗使用效率预测模型对数据中心的能耗使用效率进行更准确的预测。
本发明实施例提供一种模型训练方法，包括：
获取数据中心的历史能耗使用效率，以及获取对应的历史能耗使用效率相关特征；
根据所述历史能耗使用效率和所述历史能耗使用效率相关特征构建训练集和测试集；
构建轻量梯度提升机模型，并根据所述训练集对所述轻量梯度提升机模型进行训练；
根据所述测试集对训练后的轻量梯度提升机模型的进行校验，当校验通过时，将所述训练后的轻量梯度提升机模型作为用于预测所述数据中心的能耗使用效率的能耗使用效率预测模型。
本发明实施例还提供一种模型训练装置，包括：
数据获取模块，用于获取数据中心的历史能耗使用效率，以及获取对应的历史能耗使用效率相关特征；
样本构建模块，用于根据所述历史能耗使用效率和所述历史能耗使用效率相关特征构建训练集和测试集；
模型训练模块，用于构建轻量梯度提升机模型，并根据所述训练集对所述轻量梯度提升机模型进行训练；
模型校验模块，用于根据所述测试集对训练后的轻量梯度提升机模型的进行校验，当校验通过时，将所述训练后的轻量梯度提升机模型作为用于预测所述数据中心的能耗使用效率的能耗使用效率预测模型。
在一实施例中，在构建轻量梯度提升机模型，并根据所述训练集对所述轻量梯度提升机模型进行训练时，所述模型训练模块用于：
构建基于分类回归树的轻量梯度提升机模型，并构建对应所述基于分类回归树的轻量梯度提升机模型的目标函数；
根据所述训练集以及所述目标函数对所述基于分类回归树的轻量梯度提升机模型的进行迭代训练。
在一实施例中，在根据所述训练集以及所述目标函数对所述基于分类回归树的轻量梯度提升机模型的进行训练时，所述模型训练模块用于：
对被划分为训练集的历史能耗使用效率相关特征进行离散化处理，并根据离散结果生成对应的直方图；
遍历所述直方图确定出当次节点分裂的最优分割特征和最优分割点；
获取当前的目标函数，并对所述当前的目标函数进行二阶泰勒展开，根据二阶泰勒展开结果得到对应节点分裂前后的损失函数差值；
根据所述最优分割特征以及所述最优分割点，以最大化损失函数差值为方向进行节点分裂。
在一实施例中，在构建对应所述基于分类回归树的轻量梯度提升机模型的目标函数时，所述模型训练模块用于：
构建对应所述基于分类回归树的轻量梯度提升机模型的损失函数；
构建对应所述基于分类回归树的轻量梯度提升机模型的正则项函数；
根据所述损失函数以及所述正则项函数构建所述目标函数。
本发明实施例还提供一种能耗使用效率预测方法，包括：
接收针对数据中心的能耗使用效率预测请求；
根据所述能耗使用效率预测请求获取所述数据中心的当前能耗使用效率相关特征；
调用预先训练的能耗使用效率预测模型；
将所述当前能耗使用效率相关特征输入所述能耗使用效率预测模型进行预测，得到所述数据中心的预测能耗使用效率；
其中，所述能耗使用效率预测模型采用本发明实施例提供的模型训练方法训练得到。
本发明实施例还提供一种能耗使用效率预测装置，包括：
请求接收模块，用于接收针对数据中心的能耗使用效率预测请求；
数据采集模块，用于根据所述能耗使用效率预测请求获取所述数据中心的当前能耗使用效率相关特征；
模型调用模块，用于调用预先训练的能耗使用效率预测模型；
效率预测模块，用于将所述当前能耗使用效率相关特征输入所述能耗使用效率预测模型进行预测，得到所述数据中心的预测能耗使用效率；
其中，所述能耗使用效率预测模型采用本发明实施例提供的模型训练方法训练得到。
在一实施例中，本发明实施例提供的能耗使用效率预测装置还包括运行控制模块，用于在所述效率预测模块将所述当前能耗使用效率相关特征输入所述能耗使用效率预测模型进行预测，得到所述数据中心的预测能耗使用效率之后，获取对应所述数据中心的目标能耗使用效率；以及
根据所述目标能耗使用效率以及所述预测能耗使用效率，对所述数据中心的运行状态进行调整。
在一实施例中，在根据所述目标能耗使用效率以及所述预测能耗使用效率，对所述数据中心的运行状态进行调整时，所述运行控制模块用于：
获取所述当前能耗使用效率相关特征中每类特征与能耗使用效率的相关程度；
根据每类特征与能耗使用效率的相关程度进行排序，得到排序信息；
根据所述目标能耗使用效率、所述预测能耗使用效率以及所述排序信息，对所述数据中心的运行状态进行调整。
此外，本发明实施例还提供一种存储介质，所述存储介质存储有多条指令，所述指令适于处理器进行加载，以执行本发明实施例所提供的任一种模型训练方法中的步骤，或者执行本发明实施例所提供的任一种能耗使用效率预测方法中的步骤。
本发明实施例通过首先获取数据中心的历史能耗使用效率，以及获取对应的历史能耗使用效率相关特征；然后根据历史能耗使用效率和历史能耗使用效率相关特征构建训练集和测试集；再构建轻量梯度提升机模型，并根据训练集对轻量梯度提升机模型进行训练；最后根据测试集对训练后的轻量梯度提升机模型的进行校验，当校验通过时，将训练后的轻量梯度提升机模型作为用于预测数据中心的能耗使用效率的能耗使用效率预测模型。相比于现有技术，本发明能够使得训练得到的能耗使用效率预测模型的预测准确度较高，从而更准确的对数据中心的能耗使用效率进行预测。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的模型训练方法的场景示意图；
图2是本发明实施例提供的模型训练方法的一流程示意图；
图3是本发明实施例中进行模型训练的示意图；
图4是本发明实施例中生成直方图的示意图；
图5是本发明实施例中生成的可视化图像的示例图；
图6是本发明实施例提供的能耗使用效率预测方法的一流程示意图；
图7是本发明实施例中提供的能效预测界面的示例图；
图8是本发明实施例中提供的选择子界面的示例图；
图9是本发明实施例提供的模型训练装置的一结构示意图；
图10是本发明实施例提供的能耗使用效率预测装置的一结构示意图；
图11是本发明实施例提供的网络设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
人工智能(Artificial Intelligence,AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。换句话说，人工智能是计算机科学的一个综合技术，它企图了解智能的实质，并生产出一种新的能以人类智能相似的方式做出反应的智能机器。人工智能也就是研究各种智能机器的设计原理与实现方法，使机器具有感知、推理与决策的功能。
人工智能技术是一门综合学科，涉及领域广泛，既有硬件层面的技术也有软件层面的技术。人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等几大方向。
其中，机器学习(Machine Learning,ML)是一门多领域交叉学科，涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科。专门研究计算机怎样模拟或实现人类的学习行为，以获取新的知识或技能，重新组织已有的知识结构使之不断改善自身的性能。机器学习是人工智能的核心，是使计算机具有智能的根本途径，其应用遍及人工智能的各个领域。机器学习和深度学习通常包括人工神经网络、置信网络、强化学习、迁移学习、归纳学习、式教学习等技术。
本发明实施例提供的方案涉及人工智能的机器学习技术，具体通过如下实施例进行说明:
本发明实施例提供一种模型训练方法、能耗使用效率预测方法、装置和存储介质。
请参阅图1，图1为本发明实施例所提供的模型训练方法的场景示意图，该模型训练方法可以应用于模型训练装置，该模型训练装置具体可以集成在具备储存器并安装有处理器而具有运算能力的网络设备中，例如，该网络设备可以获取数据中心的历史能耗使用效率，以及获取对应的历史能耗使用效率相关特征，其中，数据中心可以为模块化数据中心；然后，根据历史能耗使用效率和历史能耗使用效率相关特征构建训练集和测试集，比如，将获取到的历史能耗使用效率相关特征按照预设比例划分为两部分，分别用于构建训练集和测试集；然后，构建轻量梯度提升机模型，并根据训练集对轻量梯度提升机模型进行训练；根据测试集对训练后的轻量梯度提升机模型的进行校验，当校验通过时，将训练后的轻量梯度提升机模型作为用于预测数据中心的能耗使用效率的能耗使用效率预测模型。之后，当需要对数据中心的能耗使用效率进行预测时，即可利用该训练得到的能耗使用效率预测模型对数据中心的能耗使用效率进行预测。
需要说明的是，图1所示的模型训练方法的场景示意图仅仅是一个示例，本发明实施例描述的模型训练方法的场景是为了更加清楚的说明本发明实施例的技术方案，并不构成对于本发明实施例提供的技术方案的限定，本领域普通技术人员可知，随着模型训练方法的演变和新业务场景的出现，本发明实施例提供的技术方案对于类似的技术问题，同样适用。
以下分别进行详细说明。
在本实施例中，将从模型训练装置的角度进行描述，该模型训练装置具体可以集成在具备储存器并安装有处理器的网络设备中。
一种模型训练方法，包括：获取数据中心的历史能耗使用效率，以及获取对应的历史能耗使用效率相关特征；根据历史能耗使用效率和历史能耗使用效率相关特征构建训练集和测试集；构建轻量梯度提升机模型，并根据训练集对轻量梯度提升机模型进行训练；根据测试集对训练后的轻量梯度提升机模型的进行校验，当校验通过时，将训练后的轻量梯度提升机模型作为用于预测数据中心的能耗使用效率的能耗使用效率预测模型。
请参阅图2，图2是本发明实施例提供的模型训练方法的流程示意图。该模型训练方法可以包括：
在201中，获取数据中心的历史能耗使用效率，以及获取对应的历史能耗使用效率相关特征。
需要说明的是，数据中心是全球协作的特定设备网络，用来在互联网络基础设施上传递、加速、展示、计算、存储数据信息等。随着云计算的快速发展，数据中心的发展也被大大促进，由于数据中心集成了大量的IT设备、空调设备以及电力传输设备等，导致数据中心在运行过程中存在巨大的能耗。目前，由于能源价格的增长，使得数据中心的能效问题变得不可忽视。因此，研究对数据中心的能效预测方法具有重大的应用价值。
在本发明实施例中，数据中心可以为模块化数据中心，模块化数据中心是在云计算、集中化、虚拟化等服务器发展的趋势下，发展起来的基于云计算的新一代数据中心部署形式，因其易部署、易扩展以及绿色节能的特点，得到越来越多的重视和研究。
能耗使用效率是数据中心消耗的所有能耗与IT设备消耗的能耗之比，为国际通用的数据中心的能效的衡量指标。
每一条能耗使用效率相关特征为多维特征，可由本领域普通技术人员根据业务经验和/或专家知识从数据中心的运行数据中选取与能耗使用效率相关的数据作为能耗使用效率相关特征，比如，本发明实施例中，选取的能耗使用效率相关特征包括但不限于冷水机组电流百分比、冷水机组蒸发器小温差、冷水机组冷凝器小温差、冷水机组冷冻水出水温度(网关)、冷却塔风机变频反馈、冷却塔冷却水出水温度(网关)、冷却泵变频反馈、冷冻泵变频反馈、室外平均焓值、室内平均焓值、室外温度、湿球温度、室外湿度以及板换冷却侧阀门开状态等特征。
示例性的，对于某数据中心，获取的能耗使用效率相关特征包括：
1#冷水机组电流百分比、1#冷水机组冷却水出水温度(网关)、1#冷水机组蒸发器小温差、1#冷水机组冷凝器小温差、1#冷水机组冷冻水出水温度(网关)、2#冷水机组电流百分比、2#冷水机组冷却水出水温度(网关)、2#冷水机组蒸发器小温差、2#冷水机组冷凝器小温差、2#冷水机组冷冻水出水温度(网关)、3#冷水机组电流百分比、3#冷水机组冷却水出水温度(网关)、3#冷水机组蒸发器小温差、3#冷水机组冷凝器小温差、3#冷水机组冷冻水出水温度(网关)、4#冷水机组电流百分比、4#冷水机组冷却水出水温度(网关)、4#冷水机组蒸发器小温差、4#冷水机组冷凝器小温差、4#冷水机组冷冻水出水温度(网关)、1#冷却塔1风机变频反馈、1#冷却塔2风机变频反馈、1#冷却塔冷却水出水温度(网关)、2#冷却塔1风机变频反馈、2#冷却塔2风机变频反馈、2#冷却塔冷却水出水温度(网关)、3#冷却塔1风机变频反馈、3#冷却塔2风机变频反馈、3#冷却塔冷却水出水温度(网关)、4#冷却塔1风机变频反馈、4#冷却塔2风机变频反馈、4#冷却塔冷却水出水温度(网关)、1#冷却泵变频反馈、2#冷却泵变频反馈、3#冷却泵变频反馈、4#冷却泵变频反馈、1#冷冻泵变频反馈、2#冷冻泵变频反馈、3#冷冻泵变频反馈、4#冷冻泵变频反馈、室外平均焓值、室内平均焓值、室外温度、湿球温度、室外湿度、1#板换冷却侧阀门开状态、1#板换冷冻侧阀门开状态、2#板换冷却侧阀门开状态、2#板换冷冻侧阀门开状态、3#板换冷却侧阀门开状态、3#板换冷冻侧阀门开状态、4#板换冷却侧阀门开状态以及4#板换冷冻侧阀门开状态。
在获取数据中心的历史能耗使用效率时，可以获取历史采集的数据中心总能耗以及历史采集的对应IT设备的能耗，然后按照如下公式计算得到历史能耗使用效率：
Figure BDA0002250503670000081
其中，PUE表示计算得到的历史能耗使用效率，Ltotal表示数据中心总能耗，LIT表示IT设备的能耗。可以看出，能耗使用效率值越小，表示数据中心的电力使用效率越高。
在获取历史能耗使用效率相关特征时，可以获取历史采集的对应能耗使用效率相关特征。
示例性的，以每一分钟作为一个采样周期，使用相应的传感器周期采集数据中心的能耗使用效率相关特征、数据中心总能耗以及IT设备的能耗，将每一采样周期采集到的能耗使用效率相关特征、数据中心总能耗以及IT设备的能耗组合为数据组，如此，按照采样周期在一年内对数据中心进行数据采集，得到多个数据组。这样，在获取数据中心的历史能耗使用效率时，即可获取到之前记录的数据值，提取出每一数据组中的数据中心总能耗以及IT设备的能耗，计算得到每一数据组对应的历史能耗使用效率，由此得到多个历史能耗使用效率；同理，在获取对应历史能耗使用效率的历史能耗使用效率相关特征时，以某历史能耗使用效率为例，可以从该历史能耗使用效率对应的数据组中直接提取出对应的历史能耗使用效率相关特征。由此，对应于获取到的多个历史能耗使用效率，将对应获取到多个历史能耗使用效率相关特征。
此外，在获取到数据中心的历史能耗使用效率以及对应的历史能耗使用效率相关特征之后，还对历史能耗使用效率和/或历史能耗使用效率相关特征进行预处理。
示例性的，可以对获取到的历史能耗使用效率和/或历史能耗使用效率相关特征进行数据清洗，比如，采用插值的方式填补缺失的历史能耗使用效率和/或历史能耗使用效率相关特征，采用近似值替换明显有误差的历史能耗使用效率和/或历史能耗使用效率相关特征，剔除缺失过多的历史能耗使用效率特征等。
在202中，根据历史能耗使用效率和历史能耗使用效率相关特征构建训练集和测试集。
本发明实施例中，在获取到数据中心的历史能耗使用效率以及对应的历史能耗使用效率相关特征之后，按照预设的划分比例将获取到的历史能耗使用效率以及对应的历史能耗使用效率相关特征划分两部分，其中一部分用于构建训练集，另一部分用于构建测试集。其中，划分比例可由本领域普通技术人员根据实际需要进行划分，比如，本发明实施例中划分比例配置为8:2。
示例性的，以构建训练集为例，假设历史能耗使用效率相关特征包括M维特征，且划分有N条用于构建训练集的历史能耗使用效率相关特征，对这N条历史能耗使用效率相关特征进行向量化表征，并根据向量化表征结果构建特征矩阵X，X∈RN*M，其中每一列Xm代表第m维特征的表征向量，每一行Xn对应一条历史能耗使用效率相关特征，其中，m∈[1,M]，n∈[1,N]。
此外，对应于N条历史能耗使用效率相关特征，存在对应的N条历史能耗使用效率，向量化表征获取到的N条历史能耗使用效率，得到对应N条历史能耗使用效率的向量表征Y＝[y1，…，yN]T，每一行yn代表第n条历史能耗使用效率的向量表征。
然后，构建训练集的样本对(Xn，yn)，其中，Xn为样本，yn为标签，n∈[1,N]。
此外，按照构建训练集同样的方式，根据划分的另一部分历史能耗使用效率以及对应的历史能耗使用效率相关特征构建测试集。
在203中，构建轻量梯度提升机模型，并根据训练集对轻量梯度提升机模型进行训练。
本发明实施例中，在完成训练集和测试集的构建之后，进一步基于构建的训练集，构建轻量梯度提升机模型，并根据构建的训练集对轻量梯度提升机模型进行训练。
应当说明的是，轻量梯度提升机算法是梯度提升数算法的高效实现，其核心在于拟合前k-1课树的预测误差来训练第k颗数，如图3所示。
在一实施例中，“构建轻量梯度提升机模型，并根据构建的训练集对轻量梯度提升机模型进行训练”，包括：
(1)构建基于分类回归树的轻量梯度提升机模型，并构建对应基于分类回归树的轻量梯度提升机模型的目标函数；
(2)根据训练集以及目标函数对基于分类回归树的轻量梯度提升机模型的进行迭代训练。
本发明实施例中，在构建轻量梯度提升机模型时，可以构建基于分类回归树的轻量梯度提升机模型。然后，构建对应该基于分类回归树的轻量梯度提升机模型的目标函数。
在构建基于分类回归树的轻量梯度提升机模型以及对应的目标函数之后，即可根据训练集以及目标函数对该基于分类回归树的轻量梯度提升机模型，进行迭代训练，最终得到一棵完整的决策树。
在一实施例中，“构建对应基于分类回归树的轻量梯度提升机模型的目标函数”，包括：
(1)构建对应基于分类回归树的轻量梯度提升机模型的损失函数；
(2)构建对应基于分类回归树的轻量梯度提升机模型的正则项函数；
(3)根据前述损失函数以及前述正则项函数构建对应基于分类回归树的轻量梯度提升机模型的目标函数。
本发明实施例中，构建的目标函数由两部分组成，分别为损失函数和正则项函数。
相应的，在构建对应基于分类回归树的轻量梯度提升机模型的目标函数时，分别构建对应基于分类回归树的轻量梯度提升机模型的损失函数和对应基于分类回归树的轻量梯度提升机模型的正则项函数。
其中，可由本领域普通技术人员根据实际需要构建对应基于分类回归树的轻量梯度提升机模型的损失函数，包括但不限于均方差损失函数、绝对值损失函数等，比如，本发明实施例构建对应基于分类回归树的轻量梯度提升机模型的绝对值损失函数l(y,y')＝|y-y'|，其中，y表示实际值，y'表示预测值。
同理，可由本领域普通技术人员根据实际需要构建对应基于分类回归树的轻量梯度提升机模型的正则项函数，比如，本发明实施例构建对应基于分类回归树的轻量梯度提升机模型的正则项函数
Figure BDA0002250503670000111
其中，T表示分类回归树f的叶节点个数，ωj表示对应第j个叶节点的权重，α、λ表示惩罚系数，可由本领域普通技术人员根据实际需要取经验值。
在构建得到对应基于分类回归树的轻量梯度提升机模型的损失函数以及对应基于分类回归树的轻量梯度提升机模型的正则项函数之后，进一步基于该损失函数以及该正则项函数，构建对应基于分类回归树的轻量梯度提升机模型的目标函数，在第k轮迭代中，目标函数可以表示为：
Figure BDA0002250503670000112
其中，l[yn，yn'(k-1)+fk(Xn)]表示样本Xn在第k轮迭代的训练误差，Nbatch表示一个批次中样本的数量，yn代表样本Xn的标签值，yn'(k-1)表示前k-1棵分类回归树的预测结果，fk(Xn)表示加入的第k棵分类回归树，C表示前k-1棵树的正则项。
在一实施例中，“根据训练集以及目标函数对基于分类回归树的轻量梯度提升机模型的进行迭代训练”，包括：
(1)对被划分为训练集的历史能耗使用效率相关特征进行离散化处理，并根据离散结果生成对应的直方图；
(2)遍历直方图确定出当次节点分裂的最优分割特征和最优分割点；
(3)获取当前的目标函数，并对当前的目标函数进行二阶泰勒展开，根据二阶泰勒展开结果得到对应节点分裂前后的损失函数差值；
(4)根据最优分割特征以及最优分割点，以最大化损失函数差值为方向进行节点分裂。
其中，首先配置训练超参数，包括但不限于直方图最大划分数W、最大深度、学习率、批次大小以及迭代次数K等，具体可由本领域普通技术人员根据实际需要灵活进行配置。比如，本发明实施例中配置学习率为0.001，批次大小为64，即一个批次包括64条样本对。
在完成训练超参数的配置之后，首先对被划分为训练集的历史能耗使用效率相关特征进行离散化处理，并根据离散结果生成对应的直方图，如图4所示。
其中，被划分为训练集的历史能耗使用效率相关特征即训练集中的样本。可以采用直方图算法将每一个样本离散化成w个整数，相应构造一个宽度为w的直方图，其中，w∈[3,W]。
在生成直方图之后，进一步遍历生成的直方图以确定出当次节点分裂的最优分割特征和最优分割点
其中，在遍历直方图的时候，根据离散化后的值作为索引在直方图中累积统计量，当遍历一次后，直方图累积了需要的统计量，然后根据直方图的离散值，遍历寻找最优分割特征和最优分割点。
此外，还获取当前的目标函数，并对所述当前的目标函数进行二阶泰勒展开，根据二阶泰勒展开结果得到对应节点分裂前后的损失函数差值。
示例性的，以第k轮迭代为例，则获取到当前的目标函数即第k轮迭代的目标函数
Figure BDA0002250503670000121
对第k轮迭代的目标函数使用二阶泰勒函数展开，得到：
Figure BDA0002250503670000131
其中，gn表示l(yn,yn'(k-1))对yn'(k-1)的一阶导数，hn表示l(yn,yn'(k-1))对yn'(k-1)的二阶导数。
假设第k棵分类回归树的结构已知，定义每棵树的分裂节点的候选特征集合为Ij＝{n|q(Xn＝j)}，其中，q()为结构函数，用于将输入映射到叶子节点的索引号上。
对展开后的目标函数进行化简，得到最终的目标函数为：
Figure BDA0002250503670000132
使目标函数obj(k)对ωj的偏导为0，求得使目标函数最小的最优权重为：
Figure BDA0002250503670000133
其中，Gj为
Figure BDA0002250503670000134
Hj为
Figure BDA0002250503670000135
进而可以得到目标函数最优值为：
Figure BDA0002250503670000136
因此，节点分裂前后的损失函数差值可以表示为：
Figure BDA0002250503670000137
其中，下标L和下标R分别对应在j节点分裂后的左节点和右节点。
最后，根据确定出的最优分割特征以及最优分割点，以最大化损失函数差值为方向进行节点分裂。
在204中，根据测试集对训练后的轻量梯度提升机模型的进行校验，当校验通过时，将训练后的轻量梯度提升机模型作为用于预测数据中心的能耗使用效率的能耗使用效率预测模型。
当迭代训练的次数达到配置的迭代次数K时训练完成，此时根据测试集对训练后的轻量梯度提升机模型的进行校验，也即是对训练后的轻量梯度提升机模型的预测准确率进行校验。
可选的，可以采用均方根误差来评价训练后的轻量梯度提升机模型的预测准确率，表示为
Figure BDA0002250503670000141
其中，RMSE表示均方根误差，Ntest表示测试集中样本对的数量，
Figure BDA0002250503670000142
表示测试集中第t个样本对中历史能耗使用效率的表征向量，
Figure BDA0002250503670000143
表示测试集中第t个样本对所对应的预测能耗使用效率的表征向量。相应的，可以通过比较训练后的轻量梯度提升机模型对测试集的均方根误差是否小于预设均方根误差(可由本领域普通技术人员根据实际需要灵活设置)，根据比较结果判定训练后的轻量梯度提升机模型的预测准确率是否校验通过，其中，当前述均方根误差小于预设均方根误差时，判定收敛的循环神经网络的预测准确率校验通过。
可选的，还可以采用平均绝对误差来评价训练后的轻量梯度提升机模型的预测准确率，表示为
Figure BDA0002250503670000144
其中，MAE表示平均绝对误差，Ntest表示测试集中样本对的数量，
Figure BDA0002250503670000145
表示测试集中第t个样本对中历史能耗使用效率的表征向量，
Figure BDA0002250503670000146
表示测试集中第t个样本对所对应的预测能耗使用效率的表征向量。相应的，可以通过比较训练后的轻量梯度提升机模型对测试集的平均绝对误差是否小于预设平均绝对误差(可由本领域普通技术人员根据实际需要灵活设置)，根据比较结果判定训练后的轻量梯度提升机模型的预测准确率是否校验通过，其中，当前述平均绝对误差小于预设平均绝对误差时，判定收敛的循环神经网络的预测准确率校验通过。
当对训练后的轻量梯度提升机模型的预测准确率校验通过时，即可将该训练后的轻量梯度提升机模型作为用于预测数据中心的能耗使用效率的能耗使用效率预测模型。
在一实施例中，“将训练后的轻量梯度提升机模型作为用于预测数据中心的能耗使用效率的能耗使用效率预测模型”之后，还包括：
(1)当接收到针对前述数据中心的能耗使用效率预测请求时，获取对应前述数据中心的当前能耗使用效率相关特征；
(2)调用能耗使用效率预测模型，并将获取到的当前能耗使用效率相关特征输入到能耗使用效率预测模型进行预测，得到前述数据中心的能耗使用效率。
本发明实施例中，在训练得到用于预测前述数据中心的能耗使用效率的能耗使用效率预测模型之后，即可根据该能耗使用效率预测模型对前述数据中心的能耗使用效率进行预测。
比如，可以接收针对前述数据中心的能耗使用效率预测请求，当接收到针对前述数据中心的能耗使用效率预测请求时，实时获取对应前述数据中心的当前能耗使用效率相关特征，然后调用能耗使用效率预测模型，将获取到的当前能耗使用效率相关特征输入到能耗使用效率预测模型进行预测，即可得到对应前述数据中心的能耗使用效率。
在一实施例中，本发明实施例提供的模型训练方法，还包括：
(1)确定历史能耗使用效率相关特征中每一类特征被确定为最优分割特征的次数；
(2)根据每一类特征对应的次数进行排序，得到排序信息；
(3)根据排序信息生成可视化图像。
根据以上描述，可以理解的是，对于历史能耗使用效率相关特征中的每一类特征，其在训练过程中被确定为最优分割特征的次数体现了该类特征与能耗使用效率的相关程度(其中，次数越多，表示相关程度越大)，本发明实施例中还进一步对每一类特征与能耗使用效率的相关程度进行可视化描述。
其中，首先确定历史能耗使用效率相关特征中每一类特征被确定为最优分割特征的次数；然后，根据每一类特征对应的次数进行排序，得到排序信息；最后，根据该排序信息生成可视化图像。
比如，请参照图5，其中矩形条的长度用于表征对应特征与能耗使用效率的相关程度，可以看出，在图5中，湿球温度与能耗使用效率的相关程度最高。
由上可知，本发明实施例中，首先获取数据中心的历史能耗使用效率，以及获取对应的历史能耗使用效率相关特征；然后根据历史能耗使用效率和历史能耗使用效率相关特征构建训练集和测试集；再构建轻量梯度提升机模型，并根据训练集对轻量梯度提升机模型进行训练；最后根据测试集对训练后的轻量梯度提升机模型的进行校验，当校验通过时，将训练后的轻量梯度提升机模型作为用于预测数据中心的能耗使用效率的能耗使用效率预测模型。相比于现有技术，本发明采用轻量梯度提升机模型作为基础模型进行训练，可以缓解训练过程中梯度消失的问题，使得训练得到的能耗使用效率预测模型的预测准确度较高。
实施例二、
本发明实施例还提供一种能耗使用效率预测方法，该能耗使用效率预测方法可以应用于能耗使用效率预测装置，该能耗使用效率预测装置可以集成在具备存储器并安装有处理器而具有运算能力的网络设备中，例如，该网络设备可以接收针对数据中心的能耗使用效率预测请求；根据能耗使用效率预测请求获取数据中心的当前能耗使用效率相关特征；调用预先训练的能耗使用效率预测模型；将当前能耗使用效率相关特征输入能耗使用效率预测模型进行预测，得到数据中心的预测能耗使用效率。其中，能耗使用效率预测模型采用本发明实施例的模型训练方法训练得到。
请参阅图6，图6是本发明实施例提供的能耗使用效率预测方法的流程示意图，该能耗使用效率预测方法可以包括：
在301中，接收针对数据中心的能耗使用效率预测请求。
在本发明实施例中，将从能耗使用效率预测装置的角度进行描述。
其中，可以通过多种不同的方式接收能耗使用效率预测请求。
比如，能耗使用效率预测装置可以通过其所在的网络设备向技术人员提供能效预测界面，该能效预测界面包括请求输入接口，如图7所示，该请求输入接口可以为输入框的形式，技术人员可以在该输入框形式的请求输入接口中键入需要进行能效预测的数据中心的标识信息，并输入确认信息(如直接按下键盘的回车键)以输入能耗使用效率预测请求，该能耗使用效率预测请求携带有需要进行能效预测的数据中心的标识信息。相应的，能耗使用效率预测装置即可根据接收到的能耗使用效率预测请求中的标识信息确定需要进行能效预测的目标数据中心。
又比如，在图7所述的能效预测界面中，还包括“打开”控件，一方面，能耗使用效率预测装置在侦测到该打开控件触发时，将在能效预测界面之上叠加显示选择子界面(如图8所示)，该选择子界面向技术人员提供可进行能效预测的数据中心的图标，如数据中心A、数据中心B、数据中心C、数据中心D、数据中心E、数据中心F等数据中心的图标，供技术人员查找并选中需要进行能效预测的数据中心的图标；另一方面，技术人员可以在选中需要分析的数据中心的图标之后，触发选择子界面提供的确认控件，以向能耗使用效率预测装置输入能耗使用效率预测请求，该能耗使用效率预测请求与技术人员选中的数据中心的图标相关联，指示能耗使用效率预测装置将技术人员选中的数据中心作为需要进行能效预测的数据中心。
此外，本领域普通技术人员还可以根据实际需要设置其它输入能耗使用效率预测请求的具体实现方式，本发明对此不做具体限制。比如，可以数据中心自动产生能耗使用效率预测请求，如周期性的自动产生能耗使用效率预测请求。
在302中，根据能耗使用效率预测请求获取数据中心的当前能耗使用效率相关特征。
本发明实施例中，在接收针到对数据中心的能耗使用效率预测请求时，根据该能耗使用效率预测请求确定需要进行能效预测的数据中心，并获取该数据中心的当前能耗使用效率相关特征。
应当说明的是，本发明实施例中针对不同的数据中心，采用本发明实施例提供的模型训练方法，预先针对性的训练有对应的能耗使用效率预测模型。
相应的，在获取需要进行能效预测的数据中心的当前能耗使用效率相关特征时，获取与该数据中心对应的能耗使用效率预测模型向匹配的当前能耗使用效率相关特征。
示例性的，对应于某数据中心的能耗使用效率预测模型在训练时采用了该数据中心的冷水机组电流百分比、冷水机组蒸发器小温差、冷水机组冷凝器小温差、冷水机组冷冻水出水温度(网关)、冷却塔风机变频反馈、冷却塔冷却水出水温度(网关)、冷却泵变频反馈、冷冻泵变频反馈、室外平均焓值、室内平均焓值、室外温度、湿球温度、室外湿度以及板换冷却侧阀门开状态等特征作为当前能耗使用效率相关特征进行训练，则在预测时，相应获取数据中心这些当前能耗使用效率相关特征进行预测。
在303中，调用预先训练的能耗使用效率预测模型。
如上所述，由于本发明实施例中预先训练有针对多个不同数据中心的能耗使用效率预测模型，相应的，在获取到需要进行能效预测的数据中心的能耗使用效率相关特征之后，即调用对应该数据中心的能耗使用效率预测模型。
在304中，将当前能耗使用效率相关特征输入能耗使用效率预测模型进行预测，得到数据中心的预测能耗使用效率。
其中，首先对获取到的当前能耗使用效率相关特征进行向量化表征，得到能耗使用效率的表征向量，然后将该表征向量输入调用的能耗使用效率预测模型进行预测，得到能耗使用效率预测模型输出的数值表现形式的能耗使用效率。
在一实施例中，“将当前能耗使用效率相关特征输入能耗使用效率预测模型进行预测，得到数据中心的预测能耗使用效率”的之后，还包括：
(1)获取对应数据中心的目标能耗使用效率；
(2)根据目标能耗使用效率以及预测能耗使用效率，对数据中心的运行状态进行调整。
其中，目标能耗使用效率为期望的所述数据中心在运行时的能耗使用效率，可由本领域普通技术人员根据实际需要进行设置。
本发明实施例中，在预测得到数据中心的预测能耗使用效率之后，还获取到对应该数据中心的目标能耗使用效率，进一步将预测得到的预测能耗使用效率与目标能耗使用效率进行比较，若预测得到的预测能耗使用效率未达到目标能耗使用效率，则按照预设的运行状态调整策略，对数据中心的运行状态进行调整，以使得数据中心的能耗使用效率达到目标能耗使用效率。
在一实施例中，“根据目标能耗使用效率以及预测得到的能耗使用效率，对数据中心的运行状态进行调整”，包括：
(1)获取当前能耗使用效率相关特征中每类特征与能耗使用效率的相关程度；
(2)根据每类特征与能耗使用效率的相关程度进行排序，得到排序信息；
(3)根据目标能耗使用效率、预测能耗使用效率以及排序信息，对数据中心的运行状态进行调整。
本发明实施例中，在根据目标能耗使用效率以及预测得到的能耗使用效率，对数据中心的运行状态进行调整时，首先获取当前能耗使用效率相关特征中类每特征与能耗使用效率的相关程度。其中，相关程度包括该类特征在能耗使用效率预测模型的训练过程中被确定为最优分割特征的次数。
然后，进一步根据每类特征与能耗使用效率的相关程度进行排序，得到排序信息，该排序信息即反映了每类特征与能耗使用效率的相关程度的高低。
最后，根据目标能耗使用效率、预测能耗使用效率以及排序信息，对数据中心的运行状态进行调整，比如，根据排序信息，以改变相关程度较高的特征为目标对数据中心的运行状态进行调整。
实施例三、
为了更好地实施以上模型训练方法，本发明实施例还提供一种模型训练装置，该模型训练装置具体可以集成在网络设备中。
例如，如图9所示，该模型训练装置可以包括数据获取模块401、样本构建模块402、模型训练模块403、模型校验模块404以及模型训练模块405，如下：
数据获取模块401，用于获取数据中心的历史能耗使用效率，以及获取对应的历史能耗使用效率相关特征；
样本构建模块402，用于根据历史能耗使用效率和历史能耗使用效率相关特征构建训练集和测试集；
模型训练模块403，用于构建轻量梯度提升机模型，并根据训练集对轻量梯度提升机模型进行训练；
模型校验模块404，用于根据测试集对训练后的轻量梯度提升机模型的进行校验，当校验通过时，将训练后的轻量梯度提升机模型作为用于预测数据中心的能耗使用效率的能耗使用效率预测模型。
在一实施例中，在构建轻量梯度提升机模型，并根据构建的训练集对轻量梯度提升机模型进行训练时，模型训练模块403用于：
构建基于分类回归树的轻量梯度提升机模型，并构建对应基于分类回归树的轻量梯度提升机模型的目标函数；
根据训练集以及目标函数对基于分类回归树的轻量梯度提升机模型的进行迭代训练。
在一实施例中，构建对应基于分类回归树的轻量梯度提升机模型的目标函数，模型训练模块403用于：
构建对应基于分类回归树的轻量梯度提升机模型的损失函数；
构建对应基于分类回归树的轻量梯度提升机模型的正则项函数；
根据前述损失函数以及前述正则项函数构建对应基于分类回归树的轻量梯度提升机模型的目标函数。
在一实施例中，在根据训练集以及目标函数对基于分类回归树的轻量梯度提升机模型的进行迭代训练时，模型训练模块403用于：
对被划分为训练集的历史能耗使用效率相关特征进行离散化处理，并根据离散结果生成对应的直方图；
遍历直方图确定出当次节点分裂的最优分割特征和最优分割点；
获取当前的目标函数，并对当前的目标函数进行二阶泰勒展开，根据二阶泰勒展开结果得到对应节点分裂前后的损失函数差值；
根据最优分割特征以及最优分割点，以最大化损失函数差值为方向进行节点分裂。
应当说明的是，本发明实施例提供的模型训练装置与上文实施例中的模型训练方法属于同一构思，在模型训练装置上可以运行模型训练方法实施例中提供的任一方法，其具体实现过程详见以上实施例，此处不再赘述。
实施例四、
为了更好地实施以上能耗使用效率预测方法，本发明实施例还提供一种能耗使用效率预测装置，该能耗使用效率预测装置具体可以集成在网络设备中。
例如，如图10所示，该能耗使用效率预测装置可以包括请求接收模块501、数据采集模块502、模型调用模块503、效率预测模块504以及下发模块505，如下：
请求接收模块501，用于接收针对数据中心的能耗使用效率预测请求；
数据采集模块502，用于根据能耗使用效率预测请求获取数据中心的当前能耗使用效率相关特征；
模型调用模块503，用于调用预先训练的能耗使用效率预测模型；
效率预测模块504，用于将当前能耗使用效率相关特征输入能耗使用效率预测模型进行预测，得到数据中心的预测能耗使用效率；
其中，能耗使用效率预测模型采用本发明实施例提供的模型训练方法训练得到。
在一实施例中，能耗使用效率预测装置还包括运行控制模块，用于在效率预测模块504将当前能耗使用效率相关特征输入能耗使用效率预测模型进行预测，得到数据中心的预测能耗使用效率之后，获取对应数据中心的目标能耗使用效率；以及根据目标能耗使用效率以及预测能耗使用效率，对数据中心的运行状态进行调整。
在一实施例中，在根据目标能耗使用效率以及预测能耗使用效率，对数据中心的运行状态进行调整时，运行控制模块用于：
获取当前能耗使用效率相关特征中每类特征与能耗使用效率的相关程度；
根据每类特征与能耗使用效率的相关程度进行排序，得到排序信息；
根据目标能耗使用效率、预测能耗使用效率以及排序信息，对数据中心的运行状态进行调整。
应当说明的是，本发明实施例提供的能耗使用效率预测装置与上文实施例中的能耗使用效率预测方法属于同一构思，在能耗使用效率预测装置上可以运行能耗使用效率预测方法实施例中提供的任一方法，其具体实现过程详见以上实施例，此处不再赘述。
实施例五、
本发明实施例还提供一种网络设备，如图11所示，其示出了本发明实施例所涉及的网络设备的结构示意图，具体来讲：
该网络设备可以包括一个或者一个以上处理核心的处理器601、一个或一个以上计算机可读存储介质的存储器602、电源603和输入单元604等部件。本领域技术人员可以理解，图11中示出的网络设备结构并不构成对网络设备的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。其中：
处理器601是该网络设备的控制中心，利用各种接口和线路连接整个网络设备的各个部分，通过运行或执行存储在存储器602内的软件程序和/或模块，以及调用存储在存储器602内的数据，执行网络设备的各种功能和处理数据。
存储器602可用于存储软件程序以及模块，处理器601通过运行存储在存储器602的软件程序以及模块，从而执行各种功能应用以及数据处理。此外，存储器602可以包括高速随机存取存储器，还可以包括非易失性存储器，例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地，存储器602还可以包括存储器控制器，以提供处理器601对存储器602的访问。
网络设备还包括给各个部件供电的电源603，优选的，电源603可以通过电源管理系统与处理器601逻辑相连，从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
该网络设备还可包括输入单元604，该输入单元604可用于接收输入的数字或字符信息，以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
尽管未示出，网络设备还可以包括显示单元等，在此不再赘述。具体在本实施例中，网络设备中的处理器601会按照如下的指令，将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器602中，并由处理器601来运行存储在存储器602中的应用程序，从而实现各种功能，如下：
获取数据中心的历史能耗使用效率，以及获取对应的历史能耗使用效率相关特征；
根据历史能耗使用效率和历史能耗使用效率相关特征构建训练集和测试集；
构建轻量梯度提升机模型，并根据训练集对轻量梯度提升机模型进行训练；
根据测试集对训练后的轻量梯度提升机模型的进行校验，当校验通过时，将训练后的轻量梯度提升机模型作为用于预测数据中心的能耗使用效率的能耗使用效率预测模型。
或者，实现如下功能：
接收针对数据中心的能耗使用效率预测请求；
根据能耗使用效率预测请求获取数据中心的当前能耗使用效率相关特征；
调用预先训练的能耗使用效率预测模型；
将当前能耗使用效率相关特征输入能耗使用效率预测模型进行预测，得到数据中心的预测能耗使用效率；
其中，能耗使用效率预测模型采用本发明实施例提供的模型训练方法训练得到。
应当说明的是，本发明实施例提供的网络设备与上文实施例中的适用于网络设备的模型训练方法/能耗使用效率预测方法属于同一构思，其具体实现过程详见以上方法实施例，此处不再赘述。
实施例六、
本领域普通技术人员可以理解，上述实施例的各种方法中的全部或部分步骤可以通过指令来完成，或通过指令控制相关的硬件来完成，该指令可以存储于一计算机可读存储介质中，并由处理器进行加载和执行。
为此，本发明实施例提供一种存储介质，其中存储有计算机程序，该计算机程序包括的多条指令能够被网络设备的处理器进行加载，以执行本发明实施例所提供的适用于网络设备的模型训练方法，例如：
获取数据中心的历史能耗使用效率，以及获取对应的历史能耗使用效率相关特征；
根据历史能耗使用效率和历史能耗使用效率相关特征构建训练集和测试集；
构建轻量梯度提升机模型，并根据训练集对轻量梯度提升机模型进行训练；
根据测试集对训练后的轻量梯度提升机模型的进行校验，当校验通过时，将训练后的轻量梯度提升机模型作为用于预测数据中心的能耗使用效率的能耗使用效率预测模型。
或者，该计算机程序包括的多条指令能够被网络设备的处理器进行加载，以执行本发明实施例所提供的适用于网络设备的能耗使用效率预测方法，例如：
接收针对数据中心的能耗使用效率预测请求；
根据能耗使用效率预测请求获取数据中心的当前能耗使用效率相关特征；
调用预先训练的能耗使用效率预测模型；
将当前能耗使用效率相关特征输入能耗使用效率预测模型进行预测，得到数据中心的预测能耗使用效率；
其中，能耗使用效率预测模型采用本发明实施例提供的模型训练方法训练得到。
其中，该存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，Random Access Memory)、磁盘或光盘等。
本发明实施例所提供的存储介质能够实现本发明实施例所提供的对应模型训练方法所能实现的有益效果，详见前面的实施例，在此不再赘述。
以上对本发明实施例所提供的一种模型训练方法、装置和存储介质进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种模型训练方法，其特征在于，包括：
获取数据中心的历史能耗使用效率，以及获取对应的历史能耗使用效率相关特征；
根据所述历史能耗使用效率和所述历史能耗使用效率相关特征构建训练集和测试集；
构建轻量梯度提升机模型，并根据所述训练集对所述轻量梯度提升机模型进行训练；
根据所述测试集对训练后的轻量梯度提升机模型的进行校验，当校验通过时，将所述训练后的轻量梯度提升机模型作为用于预测所述数据中心的能耗使用效率的能耗使用效率预测模型。
2.根据权利要求1所述的模型训练方法，其特征在于，所述构建轻量梯度提升机模型，并根据所述训练集对所述轻量梯度提升机模型进行训练的步骤，包括：
构建基于分类回归树的轻量梯度提升机模型，并构建对应所述基于分类回归树的轻量梯度提升机模型的目标函数；
根据所述训练集以及所述目标函数对所述基于分类回归树的轻量梯度提升机模型的进行迭代训练。
3.根据权利要求2所述的模型训练方法，其特征在于，所述根据所述训练集以及所述目标函数对所述基于分类回归树的轻量梯度提升机模型的进行训练的步骤，包括：
对被划分为训练集的历史能耗使用效率相关特征进行离散化处理，并根据离散结果生成对应的直方图；
遍历所述直方图确定出当次节点分裂的最优分割特征和最优分割点；
获取当前的目标函数，并对所述当前的目标函数进行二阶泰勒展开，根据二阶泰勒展开结果得到对应节点分裂前后的损失函数差值；
根据所述最优分割特征以及所述最优分割点，以最大化损失函数差值为方向进行节点分裂。
4.根据权利要求2或3所述模型训练方法，其特征在于，所述构建对应所述基于分类回归树的轻量梯度提升机模型的目标函数的步骤，包括：
构建对应所述基于分类回归树的轻量梯度提升机模型的损失函数；
构建对应所述基于分类回归树的轻量梯度提升机模型的正则项函数；
根据所述损失函数以及所述正则项函数构建所述目标函数。
5.一种能耗使用效率预测方法，其特征在于，包括：
接收针对数据中心的能耗使用效率预测请求；
根据所述能耗使用效率预测请求获取所述数据中心的当前能耗使用效率相关特征；
调用预先训练的能耗使用效率预测模型；
将所述当前能耗使用效率相关特征输入所述能耗使用效率预测模型进行预测，得到所述数据中心的预测能耗使用效率；
其中，所述能耗使用效率预测模型采用权利要求1-4任一项所述的模型训练方法训练得到。
6.根据权利要求5所述的能耗使用效率预测方法，其特征在于，所述将所述当前能耗使用效率相关特征输入所述能耗使用效率预测模型进行预测，得到所述数据中心的预测能耗使用效率的步骤之后，还包括：
获取对应所述数据中心的目标能耗使用效率；
根据所述目标能耗使用效率以及所述预测能耗使用效率，对所述数据中心的运行状态进行调整。
7.根据权利要求6所述的能耗使用效率预测方法，其特征在于，所述根据所述目标能耗使用效率以及所述预测能耗使用效率，对所述数据中心的运行状态进行调整的步骤，包括：
获取所述当前能耗使用效率相关特征中每类特征与能耗使用效率的相关程度；
根据每类特征与能耗使用效率的相关程度进行排序，得到排序信息；
根据所述目标能耗使用效率、所述预测能耗使用效率以及所述排序信息，对所述数据中心的运行状态进行调整。
8.一种模型训练装置，其特征在于，包括：
数据获取模块，用于获取数据中心的历史能耗使用效率，以及获取对应的历史能耗使用效率相关特征；
样本构建模块，用于根据所述历史能耗使用效率和所述历史能耗使用效率相关特征构建训练集和测试集；
模型训练模块，用于构建轻量梯度提升机模型，并根据所述训练集对所述轻量梯度提升机模型进行训练；
模型校验模块，用于根据所述测试集对训练后的轻量梯度提升机模型的进行校验，当校验通过时，将所述训练后的轻量梯度提升机模型作为用于预测所述数据中心的能耗使用效率的能耗使用效率预测模型。
9.一种能耗使用效率预测装置，其特征在于，包括：
请求接收模块，用于接收针对数据中心的能耗使用效率预测请求；
数据采集模块，用于根据所述能耗使用效率预测请求获取所述数据中心的当前能耗使用效率相关特征；
模型调用模块，用于调用预先训练的能耗使用效率预测模型；
效率预测模块，用于将所述当前能耗使用效率相关特征输入所述能耗使用效率预测模型进行预测，得到所述数据中心的预测能耗使用效率；
其中，所述能耗使用效率预测模型采用权利要求1-4任一项所述的模型训练方法训练得到。
10.一种存储介质，其特征在于，所述存储介质存储有多条指令，所述指令适于处理器进行加载，以执行如权利要求1至4任一项所述的模型训练方法，或者执行如权利要求5-7所述的能耗使用效率预测方法。
CN201911032302.6A 2019-10-28 2019-10-28 一种模型训练方法、能耗使用效率预测方法、装置和介质 Active CN110866528B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911032302.6A CN110866528B (zh) 2019-10-28 2019-10-28 一种模型训练方法、能耗使用效率预测方法、装置和介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911032302.6A CN110866528B (zh) 2019-10-28 2019-10-28 一种模型训练方法、能耗使用效率预测方法、装置和介质

Publications (2)

Publication Number Publication Date
CN110866528A true CN110866528A (zh) 2020-03-06
CN110866528B CN110866528B (zh) 2023-11-28

Family

ID=69654885

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911032302.6A Active CN110866528B (zh) 2019-10-28 2019-10-28 一种模型训练方法、能耗使用效率预测方法、装置和介质

Country Status (1)

Country Link
CN (1) CN110866528B (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111475988A (zh) * 2020-04-03 2020-07-31 浙江工业大学之江学院 基于梯度提升决策树和遗传算法的印染定型机能耗优化方法
CN111915089A (zh) * 2020-08-07 2020-11-10 青岛洪锦智慧能源技术有限公司 一种污水处理厂泵组能耗的预测方法及其装置
CN112529209A (zh) * 2020-12-07 2021-03-19 上海云从企业发展有限公司 模型训练方法、装置以及计算机可读存储介质
CN112634946A (zh) * 2020-12-25 2021-04-09 深圳市博瑞得科技有限公司 一种语音质量分类预测方法、计算机设备及存储介质
CN113408802A (zh) * 2021-06-22 2021-09-17 南方电网数字电网研究院有限公司 能耗预测网络的训练、能耗预测方法、装置和计算机设备
CN113768518A (zh) * 2021-09-03 2021-12-10 中国地质大学（武汉） 基于多尺度色散熵分析的脑电情感识别方法及系统
CN113858566A (zh) * 2021-09-27 2021-12-31 乐创达投资(广东)有限公司 一种基于机器学习的注塑机能耗预测方法及系统
CN114216248A (zh) * 2022-02-22 2022-03-22 深圳雪芽创新科技有限公司 一种应用于数据中心机房的智能降温方法
CN114418128A (zh) * 2022-03-25 2022-04-29 新华三人工智能科技有限公司 一种模型部署的方法及装置
CN114819173A (zh) * 2021-01-19 2022-07-29 中强光电股份有限公司 异常侦测装置和异常侦测方法
CN117035562A (zh) * 2023-10-10 2023-11-10 云境商务智能研究院南京有限公司 基于电力大数据的环保智慧监测方法及数据分析设备
CN117373247A (zh) * 2023-10-24 2024-01-09 广东联合电子服务股份有限公司 一种新型etc卡休眠预测诊断方法、系统及可存储介质

Citations (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150363515A1 (en) * 2012-09-12 2015-12-17 Tata Consultancy Services Limited A method for efficient designing and operating cooling infrastructure in a data center
CN105204978A (zh) * 2015-06-23 2015-12-30 北京百度网讯科技有限公司 基于机器学习的数据中心运行数据分析系统
CN105245188A (zh) * 2015-10-27 2016-01-13 国网冀北电力有限公司电力科学研究院 光伏逆变器能耗特性在线预测方法及其装置
CN107168859A (zh) * 2017-05-09 2017-09-15 中国科学院计算技术研究所 用于安卓设备的能耗分析方法
US20180204116A1 (en) * 2017-01-19 2018-07-19 Google Inc. Optimizing data center controls using neural networks
US20180225137A1 (en) * 2017-02-03 2018-08-09 Microsoft Technology Licensing, Llc Resource management for virtual machines in cloud computing systems
CN108536650A (zh) * 2018-04-03 2018-09-14 北京京东尚科信息技术有限公司 生成梯度提升树模型的方法和装置
CN108596477A (zh) * 2018-04-23 2018-09-28 郑州云海信息技术有限公司 一种mdc综合能耗管理系统及方法
CN109101316A (zh) * 2018-07-11 2018-12-28 南京邮电大学 一种能效相关的云计算平台资源调度方法
CN109492264A (zh) * 2018-10-17 2019-03-19 南京邮电大学 一种跨云数据中心的能效预测方法
WO2019056499A1 (zh) * 2017-09-20 2019-03-28 平安科技（深圳）有限公司 预测模型训练方法、数据监控方法、装置、设备及介质
CN109740787A (zh) * 2018-11-20 2019-05-10 第四范式（北京）技术有限公司 训练建筑物空调负荷预测模型及用其预测的方法和装置
CN110009134A (zh) * 2019-03-08 2019-07-12 浙江大学 基于seq2seq动态特征提取模型的制浆能耗预测方法
CN110188963A (zh) * 2019-06-05 2019-08-30 中国矿业大学(北京) 基于最小角回归和梯度提升模型的建筑能耗预测方法
CN110232448A (zh) * 2019-04-08 2019-09-13 华南理工大学 提高梯度提升树模型的特征值作用和防止过拟合的方法
CN110309037A (zh) * 2018-11-28 2019-10-08 南京邮电大学 一种数据中心能效相关特征的选择方法
CN110348580A (zh) * 2019-06-18 2019-10-18 第四范式（北京）技术有限公司 构建gbdt模型的方法、装置及预测方法、装置
US10452441B1 (en) * 2018-10-15 2019-10-22 Accenture Global Solutions Limited Determining an allocation of computing resources for a job

Patent Citations (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150363515A1 (en) * 2012-09-12 2015-12-17 Tata Consultancy Services Limited A method for efficient designing and operating cooling infrastructure in a data center
CN105204978A (zh) * 2015-06-23 2015-12-30 北京百度网讯科技有限公司 基于机器学习的数据中心运行数据分析系统
CN105245188A (zh) * 2015-10-27 2016-01-13 国网冀北电力有限公司电力科学研究院 光伏逆变器能耗特性在线预测方法及其装置
US20180204116A1 (en) * 2017-01-19 2018-07-19 Google Inc. Optimizing data center controls using neural networks
US20180225137A1 (en) * 2017-02-03 2018-08-09 Microsoft Technology Licensing, Llc Resource management for virtual machines in cloud computing systems
CN107168859A (zh) * 2017-05-09 2017-09-15 中国科学院计算技术研究所 用于安卓设备的能耗分析方法
WO2019056499A1 (zh) * 2017-09-20 2019-03-28 平安科技（深圳）有限公司 预测模型训练方法、数据监控方法、装置、设备及介质
CN108536650A (zh) * 2018-04-03 2018-09-14 北京京东尚科信息技术有限公司 生成梯度提升树模型的方法和装置
CN108596477A (zh) * 2018-04-23 2018-09-28 郑州云海信息技术有限公司 一种mdc综合能耗管理系统及方法
CN109101316A (zh) * 2018-07-11 2018-12-28 南京邮电大学 一种能效相关的云计算平台资源调度方法
US10452441B1 (en) * 2018-10-15 2019-10-22 Accenture Global Solutions Limited Determining an allocation of computing resources for a job
CN109492264A (zh) * 2018-10-17 2019-03-19 南京邮电大学 一种跨云数据中心的能效预测方法
CN109740787A (zh) * 2018-11-20 2019-05-10 第四范式（北京）技术有限公司 训练建筑物空调负荷预测模型及用其预测的方法和装置
CN110309037A (zh) * 2018-11-28 2019-10-08 南京邮电大学 一种数据中心能效相关特征的选择方法
CN110009134A (zh) * 2019-03-08 2019-07-12 浙江大学 基于seq2seq动态特征提取模型的制浆能耗预测方法
CN110232448A (zh) * 2019-04-08 2019-09-13 华南理工大学 提高梯度提升树模型的特征值作用和防止过拟合的方法
CN110188963A (zh) * 2019-06-05 2019-08-30 中国矿业大学(北京) 基于最小角回归和梯度提升模型的建筑能耗预测方法
CN110348580A (zh) * 2019-06-18 2019-10-18 第四范式（北京）技术有限公司 构建gbdt模型的方法、装置及预测方法、装置

Non-Patent Citations (6)

* Cited by examiner, † Cited by third party
Title
SAMIR TOUZANI等: "Research on Predicting Line Loss Rate in Low Voltage Distribution Network Based on Gradient Boosting Decision Tree", 《ENERGY AND BUILDINGS》, pages 1533 - 1543 *
TIANQI CHEN等: "XGBoost: A Scalable Tree Boosting System", 《MACHINE LEARNING》, pages 2 - 4 *
何丽;汤莉;: "基于Kalman滤波的云数据中心能耗和性能优化", 计算机工程与科学, no. 07, pages 1165 - 1172 *
王尉同;潘毅群;黄治钟;: "梯度渐进回归树在建筑能耗短期预测中的应用", 建筑节能, no. 03, pages 112 - 116 *
赵小刚;胡启平;丁玲;沈志东;: "基于模型预测控制的数据中心节能调度算法", 软件学报, no. 02, pages 429 - 442 *
邓维;刘方明;金海;李丹;: "云计算数据中心的新能源应用:研究现状与趋势", 计算机学报, no. 03, pages 582 - 598 *

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111475988B (zh) * 2020-04-03 2024-02-23 浙江工业大学之江学院 基于梯度提升决策树和遗传算法的印染定型机能耗优化方法
CN111475988A (zh) * 2020-04-03 2020-07-31 浙江工业大学之江学院 基于梯度提升决策树和遗传算法的印染定型机能耗优化方法
CN111915089A (zh) * 2020-08-07 2020-11-10 青岛洪锦智慧能源技术有限公司 一种污水处理厂泵组能耗的预测方法及其装置
CN112529209A (zh) * 2020-12-07 2021-03-19 上海云从企业发展有限公司 模型训练方法、装置以及计算机可读存储介质
CN112634946B (zh) * 2020-12-25 2022-04-12 博瑞得科技有限公司 一种语音质量分类预测方法、计算机设备及存储介质
CN112634946A (zh) * 2020-12-25 2021-04-09 深圳市博瑞得科技有限公司 一种语音质量分类预测方法、计算机设备及存储介质
TWI783360B (zh) * 2021-01-19 2022-11-11 中強光電股份有限公司 異常偵測裝置和異常偵測方法
CN114819173A (zh) * 2021-01-19 2022-07-29 中强光电股份有限公司 异常侦测装置和异常侦测方法
CN113408802B (zh) * 2021-06-22 2022-11-25 南方电网数字电网研究院有限公司 能耗预测网络的训练、能耗预测方法、装置和计算机设备
CN113408802A (zh) * 2021-06-22 2021-09-17 南方电网数字电网研究院有限公司 能耗预测网络的训练、能耗预测方法、装置和计算机设备
CN113768518A (zh) * 2021-09-03 2021-12-10 中国地质大学（武汉） 基于多尺度色散熵分析的脑电情感识别方法及系统
CN113858566A (zh) * 2021-09-27 2021-12-31 乐创达投资(广东)有限公司 一种基于机器学习的注塑机能耗预测方法及系统
CN113858566B (zh) * 2021-09-27 2023-08-08 乐创达投资(广东)有限公司 一种基于机器学习的注塑机能耗预测方法及系统
CN114216248A (zh) * 2022-02-22 2022-03-22 深圳雪芽创新科技有限公司 一种应用于数据中心机房的智能降温方法
CN114418128A (zh) * 2022-03-25 2022-04-29 新华三人工智能科技有限公司 一种模型部署的方法及装置
CN114418128B (zh) * 2022-03-25 2022-07-29 新华三人工智能科技有限公司 一种模型部署的方法及装置
CN117035562A (zh) * 2023-10-10 2023-11-10 云境商务智能研究院南京有限公司 基于电力大数据的环保智慧监测方法及数据分析设备
CN117035562B (zh) * 2023-10-10 2024-01-30 云境商务智能研究院南京有限公司 基于电力大数据的环保智慧监测方法及数据分析设备
CN117373247A (zh) * 2023-10-24 2024-01-09 广东联合电子服务股份有限公司 一种新型etc卡休眠预测诊断方法、系统及可存储介质

Also Published As

Publication number Publication date
CN110866528B (zh) 2023-11-28

Similar Documents

Publication Publication Date Title
CN110866528B (zh) 一种模型训练方法、能耗使用效率预测方法、装置和介质
CN110866592B (zh) 模型训练方法、装置、能效预测方法、装置和存储介质
CN110119844B (zh) 引入情绪调控机制的机器人运动决策方法、系统、装置
CN112052948B (zh) 一种网络模型压缩方法、装置、存储介质和电子设备
CN108090621B (zh) 一种基于分阶段整体优化的短期风速预测方法与系统
CN110781595B (zh) 能源使用效率pue的预测方法、装置、终端及介质
CN112231305A (zh) 一种基于数字孪生的数字电网系统及方法
CN111523778A (zh) 基于粒子群算法和梯度提升树的电网运行安全评估方法
CN110826784B (zh) 能源使用效率的预测方法、装置及存储介质和终端设备
CN109978253B (zh) 一种基于增量学习的电力系统短期负荷预测方法
CN114065646B (zh) 基于混合优化算法的能耗预测方法、云计算平台及系统
CN113983646A (zh) 基于生成对抗网络的空调互动末端能耗预测方法及空调
CN116450486B (zh) 多元异构计算系统内节点的建模方法、装置、设备及介质
CN109711707B (zh) 一种船舶动力装置综合状态评估方法
CN114200839A (zh) 一种耦合环境行为动态监测的办公建筑能耗智能控制模型
CN110222824B (zh) 智能算法模型自主生成及进化方法、系统、装置
CN116227689A (zh) 一种光伏板污秽度状态评价及清扫决策系统
CN116562514A (zh) 基于神经网络的企业生产状况即时分析方法及系统
CN108805155A (zh) 同时学习关联矩阵和拉普拉斯正则化最小二乘的半监督分类方法
CN113379063B (zh) 基于在线增强学习模型的全流程任务时序智能决策方法
Zhang et al. Automatic curriculum learning for large-scale cooperative multiagent systems
CN109145431A (zh) 一种监控电力二次系统运行状态的建模方法及装置
CN112365082A (zh) 一种基于机器学习的公共能源消耗预测方法
Fu et al. A3C-S: Automated agent accelerator co-search towards efficient deep reinforcement learning
CN117390550A (zh) 考虑排放训练集的低碳园区碳排放动态预测方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant