CN114707698A - 基于综合形状误差和时间误差的长期电力负荷预测方法 - Google Patents

基于综合形状误差和时间误差的长期电力负荷预测方法 Download PDF

Info

Publication number
CN114707698A
CN114707698A CN202210202480.4A CN202210202480A CN114707698A CN 114707698 A CN114707698 A CN 114707698A CN 202210202480 A CN202210202480 A CN 202210202480A CN 114707698 A CN114707698 A CN 114707698A
Authority
CN
China
Prior art keywords
time
state
load prediction
data
value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210202480.4A
Other languages
English (en)
Inventor
王祥
武占侠
葛俊雄
张展浩
韩林呈
王顺江
张秀宇
祝国强
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
State Grid Liaoning Electric Power Co Ltd
Northeast Electric Power University
China Gridcom Co Ltd
Shenzhen Zhixin Microelectronics Technology Co Ltd
Original Assignee
Northeast Dianli University
State Grid Liaoning Electric Power Co Ltd
China Gridcom Co Ltd
Shenzhen Zhixin Microelectronics Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Northeast Dianli University, State Grid Liaoning Electric Power Co Ltd, China Gridcom Co Ltd, Shenzhen Zhixin Microelectronics Technology Co Ltd filed Critical Northeast Dianli University
Priority to CN202210202480.4A priority Critical patent/CN114707698A/zh
Publication of CN114707698A publication Critical patent/CN114707698A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00Administration; Management
    • G06Q10/04Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/044Recurrent networks, e.g. Hopfield networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/06Energy or water supply
    • HELECTRICITY
    • H02GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
    • H02JCIRCUIT ARRANGEMENTS OR SYSTEMS FOR SUPPLYING OR DISTRIBUTING ELECTRIC POWER; SYSTEMS FOR STORING ELECTRIC ENERGY
    • H02J3/00Circuit arrangements for ac mains or ac distribution networks
    • H02J3/003Load forecast, e.g. methods or systems for forecasting future load demand

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Strategic Management (AREA)
  • Human Resources & Organizations (AREA)
  • Software Systems (AREA)
  • Artificial Intelligence (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Mathematical Physics (AREA)
  • Data Mining & Analysis (AREA)
  • Computational Linguistics (AREA)
  • General Business, Economics & Management (AREA)
  • Biophysics (AREA)
  • Biomedical Technology (AREA)
  • Tourism & Hospitality (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Molecular Biology (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Water Supply & Treatment (AREA)
  • Public Health (AREA)
  • Power Engineering (AREA)
  • Development Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Operations Research (AREA)
  • Quality & Reliability (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本发明公开了基于综合形状误差和时间误差的长期电力负荷预测方法,包括:采集原始数据,基于所述原始数据进行数据预处理,获取训练集和测试集,基于所述训练集和所述测试集分别进行数据归一化处理,获得归一化处理后的归一化训练集和归一化测试集;构建负荷预测模型,将所述归一化训练集输入到所述负荷预测模型中进行训练,获得训练好的负荷预测模型;将所述归一化测试集输入到所述训练好的负荷预测模型中,获得预测结果。本发明缓解长期预测累积的误差,减少对外部信息的依赖,降低模型偏差,提高预测精度的长期负荷预测方法,并最终将预测结果应用于电网规划,满足电网的可靠运行需求。

Description

基于综合形状误差和时间误差的长期电力负荷预测方法
技术领域
本发明属于电力负荷预测领域,尤其涉及基于综合形状误差和时间误差的长期电力负荷预测方法。
背景技术
电力负荷预测作为能源管理的重要组成部分,在电力系统中有着重要的意义和作用。准确的负荷预测,可以经济合理的安排电网内部发电机的启停,保持电网运行的安全稳定性,减少不必要的旋转储备容量。电力负荷预测工作的水平是衡量一个电力企业管理是否现代化、科学化的重要标志,已经成为电力系统理论研究的重要目标。
早期的电力负荷预测方法大多基于数理统计理论中的相关模型。一般分为两类方法,一是假设负荷数据是时间序列信号,通过时间序列分析以获得所需的结果。如自回归模型(AR)、滑动平均模型(MA) 及自回归滑动平均模型(ARMA)等。电网条件正常,气候等因素变化不大时,预测结果较好。但当随机因素变化较大或有不良数据时,预测结果不理想。二是使用回归分析获得用电量和气温、湿度等天气变量之间的关系。使用的方程包括指数函数回归方程、多元线性回归方程等等。
随着各种数据传感器在电力系统广泛安装,以大数据为支撑的神经网络算法在电力系统尤其负荷预测中得到了广泛应用。例如,基于小波神经网络(IWNN)、小波预处理和广义极限学习机(GELM)的电力负荷混合预测方法。或运用一种因果马尔可夫埃尔曼神经网络(CMEN),以表征多网络系统中异构时间序列之间的相互依赖性,并在多网络系统中进行负载预测。然而,现有方法难以捕捉长期依赖关系,未充分挖掘时间序列数据自身之间的相关信息,这在多步预测尤其是多输出策略中无法发挥最佳性能。本发明结合多输出策略方法Seq2seq架构,提出了一种新的基于双注意力机制及双向GRU(BiGRU) 的序列到序列框架。采用双注意力机制,第一层注意力机制可以从编码器输出的时序隐藏状态中获取与待测数据的关系,对时序特征进行有效抉择,增加预测精度;第二层采用自注意力机制 (Self-Attention),挖掘解码层输出的时序隐藏状态之间的内部关系,通过训练权重矩阵修正最终预测结果;使用多输出策略,可有效结合 DILATE损失函数,改善使用MSE损失函数的RNN神经网络在时间序列预测中的滞后问题。
发明内容
本发明的目的在于提出基于综合形状误差和时间误差的长期电力负荷预测方法,缓解长期预测累积的误差,减少对外部信息的依赖,降低模型偏差,提高预测精度的长期负荷预测方法,并最终将预测结果应用于电网规划,满足电网的可靠运行需求。
为实现上述目的,本发明提供了基于综合形状误差和时间误差的长期电力负荷预测方法,包括:
采集原始数据,基于所述原始数据进行数据预处理,获取训练集和测试集,基于所述训练集和所述测试集分别进行数据归一化处理,获得归一化处理后的归一化训练集和归一化测试集;
构建负荷预测模型,将所述归一化训练集输入到所述负荷预测模型中进行训练,获得训练好的负荷预测模型;将所述归一化测试集输入到所述训练好的负荷预测模型中,获得预测结果。
优选的,构建负荷预测模型,包括编码器,包含两个隐藏层,编码器计算过程包括:当前时刻的隐藏状态时,会首先计算一个候选状态
Figure RE-GDA0003622955490000031
而在计算候选状态时,会考虑重置门rt的取值:
rt=σ(Wr[ht-1,xt]) (1)
使用Sigmoid函数使得门的取值限定为[0,1]之间,当重置门近于0,当前候选值
Figure RE-GDA0003622955490000032
会忽略前一个隐藏状态ht-1,并用当前的输入xt来计算,有效地让隐藏状态抛弃任何将来发现的不相关信息:
Figure RE-GDA0003622955490000033
计算出来候选值
Figure RE-GDA0003622955490000034
之后,通过更新门来控制前一个隐藏状态有多少信息可以传递到当前隐藏状态,更新门zt为:
zt=σ(Wz[ht-1,xt]) (3)
最后当前时刻的隐藏状态ht可以计算为:
Figure RE-GDA0003622955490000035
优选的,构建负荷预测模型包括解码器,所述解码器中包含一个未来层,所述未来层结合两个隐藏层,将结合后的数据输入到自注意力机制中,所述解码器的计算过程包括:
Figure RE-GDA0003622955490000036
Figure RE-GDA0003622955490000037
Figure RE-GDA0003622955490000038
其中GRU()函数表示对输入的数据的非线性转换;ut与vt分别为 BiGRU所对应的前向隐含层状态
Figure RE-GDA0003622955490000041
和反向隐含层状态
Figure RE-GDA0003622955490000042
所对应的权重; bt表示t时刻隐含层状态所对应的偏置;解码器将输入序列X分步输入,其在t时刻的GRU神经元隐藏层状态由t-1时刻GRU神经元隐藏层状态和t时刻输入xt共同决定,即:
ht=f(ht-1,xt) (8)
式中:ht为t时刻GRU神经元隐藏层状态;ht-1为t-1时刻GRU神经元隐藏层状态;xt为时刻输入的数据;则编码器输出的中间状态c为:
c=q([h1,h2,h3,...,hn]) (9)
式(8)与式(9)中的q与f为非线性函数。
优选的,所述解码器结合自注意力机制对编码器的隐藏层状态进行加权,解码器通过将联合概率分解为有序条件来定义输出数据y′的概率为:
Figure RE-GDA0003622955490000043
对于RNN来说,每个条件的概率模型为:
p(y′i∣{y′1,…,y′i-1},c)=g(y′i-1,si,c) (11)
其中g是一个非线性、输出y′i概率的函数,si为解码器在i时刻的隐藏层状态:
si=f(si-1,y′i-1,ci) (12)
当i=1时,也就是当解码器第一次进行解码操作时,此时还没有生成上一时刻的隐藏层状态和预测值,则使用编码器中的最后一次编码时的隐藏层状态hn和原始序列的最后一个数据xn会充当上一时刻的解码器隐藏层状态和预测值:
s1=f(hn,xn,c1) (13)
其中ci为编码器隐藏序列(h1,...hn)通过注意力权重αij进行加权得到的不同时刻编码器输出的中间状态:
Figure RE-GDA0003622955490000051
优选的,权值计算包括:采用多层感知机将最终输出的预测值与编码器隐藏层状态进行关联度分析得到注意力权值。
优选的,获取预测结果包括:通过捕获输出时间序列间的关系,纠正解码器输出并改进预测,然后将数据传递给全连接层输出最终预测值。
优选的,还包括损失函数更新模型参数,基于形状损失和时间损失进行误差识别,获得预测值和真实值。
优选的,基于所述预测值和所述真实值,获取最优路径预测结果包括:
1)基于所述预测值与真实值定义代价矩阵,通过查找每一步的最小值,获得时间形状损失;
2)引入光滑算子计算时间形状损失函数和时间损失函数,获得最优路径预测结果。
本发明技术效果:本发明公开了一种基于综合形状误差和时间误差的长期电力负荷预测方法,缓解长期预测累积的误差,减少对外部信息的依赖,降低模型偏差,提高预测精度的长期负荷预测方法。并最终将预测结果应用于电网规划,满足电网的可靠运行需求。
附图说明
构成本申请的一部分的附图用来提供对本申请的进一步理解,本申请的示意性实施例及其说明用于解释本申请,并不构成对本申请的不当限定。在附图中:
图1为本发明实施例基于综合形状误差和时间误差的长期电力负荷预测方法的流程示意图;
图2为本发明实施例基于DILATE损失函数测试四种模型示意图;
图3为本发明实施例三种算法评估示意图。
具体实施方式
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
需要说明的是,在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机系统中执行,并且,虽然在流程图中示出了逻辑顺序,但是在某些情况下,可以以不同于此处的顺序执行所示出或描述的步骤。
如图1-3所示,本实施例中提供了基于综合形状误差和时间误差的长期电力负荷预测方法,对负荷原始数据序列预处理,将预处理后的数据分成训练集和测试集并分别进行归一化处理。建立负荷预测模型,将处理后的训练集数据输入负荷预测模型中进行训练;将处理后的测试集数据输入训练好的负荷预测模型中进行预测。为了评估所建立的负荷预测模型精度,通过选择评价指标对模型的拟合程度和预测准确度进行评价。
一、数据预处理
数据预处理的目的是为了清理历史负载数据时确保数据集的质量。对数据集中的缺失值和异常值进行检查,以防止其对预测精度的影响。将异常值删去,当作缺失值进行处理。通过历史负荷数据对缺失值进行修复。
将预处理后的数据分成训练集和测试集,然后分别进行数据归一化处理。归一化是把数据转化到0~1范围内的操作,可更好的提取数据特征,同时加快神经网络训练时的收敛速度,提高预测精度。
二、建立负荷预测模型
(1)GRU
GRU在计算当前时刻的隐藏状态时,会首先计算一个候选状态
Figure RE-GDA0003622955490000071
而在计算候选状态时,会考虑重置门rt的取值:
rt=σ(Wr[ht-1,xt]) (1)
使用Sigmoid函数使得门的取值限定为[0,1]之间。如果重置门近于0,当前候选值
Figure RE-GDA0003622955490000072
会忽略前一个隐藏状态ht-1,并用当前的输入xt来计算。这可以有效地让隐藏状态抛弃任何将来发现的不相关信息:
Figure RE-GDA0003622955490000073
计算出来候选值
Figure RE-GDA0003622955490000074
之后,通过更新门来控制前一个隐藏状态有多少信息可以传递到当前隐藏状态,更新门zt为:
zt=σ(Wz[ht-1,xt]) (3)
最后当前时刻的隐藏状态ht可以计算为:
Figure RE-GDA0003622955490000081
(2)BiGRU
GRU神经网络采用循环结构来长期存储和检索信息,但该神经网络只考虑预测点过去时刻的信息而无法考虑未来时刻的状态,使得预测精度无法进一步提高。双向GRU(BiGRU)网络有一个未来层,让数据序列在相反的方向上进行预测以克服这个问题。该网络使用两个隐藏层从过去和未来中提取信息,并且两者都连接在同一个输出层中。
在BiGRU中:
Figure RE-GDA0003622955490000082
Figure RE-GDA0003622955490000083
Figure RE-GDA0003622955490000084
其中:GRU()函数表示对输入的数据的非线性转换;ut与vt分别为BiGRU所对应的前向隐含层状态
Figure RE-GDA0003622955490000085
和反向隐含层状态
Figure RE-GDA0003622955490000086
所对应的权重;bt表示t时刻隐含层状态所对应的偏置。
(3)解码器
将一个历史映射样本X=[x1,x2,x3,...,xn]带入解码器中,解码器将输入序列X分步输入,其在t时刻的GRU神经元隐藏层状态由t-1时刻 GRU神经元隐藏层状态和t时刻输入xt共同决定,即:
ht=f(ht-1,xt) (8)
式中:ht为t时刻GRU神经元隐藏层状态;ht-1为t-1时刻GRU神经元隐藏层状态;xt为时刻输入的数据。则编码器输出的中间状态c为:
c=q([h1,h2,h3,...,hn]) (9)
式(8)与式(9)中的q与f为非线性函数
(4)带有注意力机制的解码器
当解码器对t时刻的数据y′t进行预测时,要结合之前预测的所有数据[y′1,...,y′t-1]和编码器输出的中间状态c来进行预测。在传统的 Seq2seq模型中,通过编码器将输入序列转化成一个固定长度的向量 c,再使用解码器将生成的固定向量转化为输出序列。在针对不同时刻的负荷数据进行预测时,直接输入编码器输出的中间状态会导致无法有效的针对该时刻进行预测,且会随着输入序列长度的增加而显著降低预测性能。
在解码器进行解码前引入注意力机制,对编码器的隐藏层状态进行加权,可使输入进解码器的中间状态更具针对性。解码器通过将联合概率分解为有序条件来定义输出数据y′的概率为:
Figure RE-GDA0003622955490000091
对于RNN来说,每个条件的概率模型为:
p(y′i∣{y′1,…,y′i-1},c)=g(y′i-1,si,c) (11)
其中g是一个非线性、输出y′i概率的函数,si为解码器在i时刻的隐藏层状态:
si=f(si-1,y′i-1,ci) (12)
当i=1时,也就是当解码器第一次进行解码操作时,此时还没有生成上一时刻的隐藏层状态和预测值,则使用编码器中的最后一次编码时的隐藏层状态hn和原始序列的最后一个数据xn会充当上一时刻的解码器隐藏层状态和预测值:
s1=f(hn,xn,c1) (13)
其中ci为编码器隐藏序列(h1,...hn)通过注意力权重αij进行加权得到的不同时刻编码器输出的中间状态:
Figure RE-GDA0003622955490000101
注意力机制中的权值αij有很多计算方法,根据不同的权值计算方法,我们可以把注意力机制进一步细分分类。常见的权值计算方法有点积(Basic dot-productattention)、乘法(Multiplicative attention)和加法(Additive attention)。本文通过一个多层感知机 (Multilayer Perceptron,MLP)将最终输出的预测值与编码器隐藏层状态进行关联度分析得到注意力权值αij,权值αij计算方法为:
αij=MLP(y′i,hj) (15)
当第一次计算权值时,因为此时还没有第一时刻的预测输出值,所以使用原始序列中的最后一个数据xn充当此时的预测值:
α11=MLP(xn,h1) (16)
解码器中的BiGRU神经网络通过不断迭代计算,最终解码器将输出预测序列Y′=[y′1,y′2,y′3,...,y′n]。
(5)自注意力机制
本模型的自注意力自制模块将解码器的输出作为输入。通过捕获输出时间序列间的关系及相互影响,把握长期时序依赖关系,以进一步纠正解码器输出并改进预测,之后将数据传递给全连接层输出最终预测值。基本方法为:
将原始输入中的构成元素Y′=[y′1,y′2,y′3,...,y′n]T想象成是由一系列的 <Key-Value>数据对构成,此时给定目标输出中的某个元素Query,通过计算Query和各个Key的关联程度,得到每个Key对应的Value 的权重系数,让后对Value进行加权求和,即得到了最终的注意力数值。具体步骤如下:
1)将序列[y′1,y′2,y′3,...,y′n]中的每一个数据转化成嵌入向量;
2)嵌入向量分别乘以权重矩阵WQ,WK,WV得到Q,K,V三个向量,分别对应Query,Key,Value;
3)计算每一个Query(Q)和各个Key(K)的相似度,同样使用MLP,得到每个Key(K)对应Value(V)的权值[α′1,α′2,α′3,...,α′n];
4)使用Softmax函数将权值进行归一化,得到权重系数 [α123,...,αn];
5)把权重系数和相应的Value(V)进行加权求和,通过计算序列其他数据对V的影响来对V进行最终提纯,获取预测数值 Y′=[α1y′12y′23y′3,...,αny′n]T
6)将预测值Y′输出到线性层获取最终预测结果Y。
自注意力机制减少了对外部信息的依赖,能够把输入序列中不同位置的信息联系起来,更擅长捕捉数据或特征的内部相关性。此外,计算Q,K,V的权重矩阵WQ,WK,WV均可以在模型的训练过程中进行学习,从而增强了模型的泛化性能。
(6)DILATE
在训练预测模型过程中,需要使用损失函数来更新模型参数。以往时间序列预测上大部分应用的是基于欧氏距离的损失函数。其根据每个数据点严格一对一的映射来进行预测值与真实值的损失计算,忽略了时间序列的形状和时间等信息。DILATE损失函数弥补了这方面的缺陷。
DILATE损失函数同时考虑了形状损失和时间损失,从两个维度上进行误差的识别。
其公式如下:
Figure RE-GDA0003622955490000121
其中β∈(0,1)用来平衡Γshape和Γtime的权重,Γshape代表形状损失函数,Γtime代表时间损失函数,
Figure RE-GDA0003622955490000122
代表预测值,yi代表真实值。
形状损失函数是基于动态时间规整(Dynamic Time Warp,DTW) 理论而来,DTW允许每个数据点进行一对多的映射,以此实现对时间序列数据的扭曲,进行相似性比较,确定两个时间序列数据间的差异性。DTW算法步骤如下。
1)根据序列
Figure RE-GDA0003622955490000123
Figure RE-GDA0003622955490000127
定义代价矩阵
Figure RE-GDA0003622955490000124
其中
Figure RE-GDA0003622955490000125
为两个序列点的欧式距离。
2)根据得到的代价矩阵,通过查找每一步的最小值,得到使得整体代价最小的最优代价路径。
为识别代价矩阵的最优路径,定义二进制矩阵A,
Figure RE-GDA0003622955490000128
Figure RE-GDA0003622955490000126
Figure RE-GDA0003622955490000129
在代价矩阵中的最优曲线处于路径中,则矩阵A中ahj的值为1,否则ahj的值为0。定义
Figure RE-GDA00036229554900001313
是所有在约束条件下可以从(1,1)到(n,n) 的路径集合。由于DTW是离散不可微的,引入光滑算子:
Figure RE-GDA0003622955490000131
且γ>0使其可微。由此可以得到形状损失函数。
Figure RE-GDA0003622955490000132
时间损失函数的目的是惩罚
Figure RE-GDA0003622955490000133
和yi之间的时间延迟。定义
Figure RE-GDA0003622955490000134
来表示预测值
Figure RE-GDA0003622955490000135
和真实值yi之间的最佳路径。定义惩罚方阵Ω=[wb,j],
Figure RE-GDA00036229554900001314
其中
Figure RE-GDA0003622955490000136
由此可以定义时间损失指数TDI。
Figure RE-GDA0003622955490000137
TDI对最佳路径A*做出了时延惩罚。由于TDI中包含两个不可微矩阵Ω和Δ所以不能使用通过引入光滑算子的方法进行可微化处理。但由于
Figure RE-GDA0003622955490000138
所以可以定义一个平滑近似值
Figure RE-GDA0003622955490000139
再基于
Figure RE-GDA00036229554900001310
可以得到一个平滑的时间损失函数。
Figure RE-GDA00036229554900001311
Figure RE-GDA00036229554900001312
三、评估模型预测效果
考虑4种不同的评估指标,即MSE、RMSE、MAE及DILATE。其中, RMSE和MAE是两个尺度相关的度量。RMSE是MSE的平方根,使得预测结果在数量级上更加直观。将DILATE拆分为DTW和TDI两个指标,从而可以分别考察预测结果在形状和时间上的误差。
本发明以中国北方某城市电网提供的2018全年共计8760个小时的历史负荷数据进行测试。训练和测试时均以小时为单位。在训练和测试时采用滑动窗口策略。训练时采用真实值进行每个窗口训练集的补位,以进行监督学习。
实验第一部分为验证所提算法在长期测试方面的有效性。取全部负荷数据的85%共计7440个小时为训练集,15%共计1320小时为测试集。测试时使用预测值代替真实值进行窗口的补位,随着预测时间的增加会逐渐累积误差。随后将模型与LSTM、GRU和LS-SVM的预测方法进行了对比。
实验第二部分为验证DILATE损失函数是否能改善传统RNN网络的滞后性问题。为更清晰的展示预测效果,本部分进行了短期单步测试。测试时用真实值进行窗口的补位。取全体负荷数据的97.5%共计 8550个小时为训练集,2.5%共计210小时为测试集。随后将模型与使用MSE损失函数的LSTM、GRU等RNN算法进行了对比。测试的四种模型的参数设置如表1所示。
表1超参数设置
Figure RE-GDA0003622955490000151
如附图2所示,图中虚线代表真实值,实线代表预测值。其中图 (a)是采用的是基于Seq2seq架构的GRU,图(c)采用的是LS-SVM 预测模型。图(d)采用的是本发明模型。GRU及LSTM方法的预测结果有着明显的周期性,仅能在前400小时有着较好的表现,之后由于序列信息的遗漏以及迭代误差的累积,已无法抓取序列的变化。而图(c) 以LS-SVM进行预测的结果相比LSTM和GRU更差。与图(a)(c)对比,本发明所用的Dual Attention-DILATE模型好于以上三种模型,在序列后期仍成功的对曲线实现了部分跟踪。根据表2所示,DualAttention-DILATE模型在各个评估指标都要优于其他三种对比模型。
表2四种算法评估指标对比
Figure RE-GDA0003622955490000152
由附图3和表3可以看出,由于每次迭代均使用真实值进行窗口的补位,三种模型的拟合程度都较好,但由于GRU及LSTM使用了MSE 损失函数,因此导致了不同程度的滞后。本发明提出的Dual Attention-DILATE模型针对时间误差进行了修正,预测结果没有滞后现象,预测精度更高。
表3三种算法评估指标对比
Figure RE-GDA0003622955490000161
以上所述,仅为本申请较佳的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应该以权利要求的保护范围为准。

Claims (8)

1.基于综合形状误差和时间误差的长期电力负荷预测方法,其特征在于,包括以下步骤:
采集原始数据,基于所述原始数据进行数据预处理,获取训练集和测试集,基于所述训练集和所述测试集分别进行数据归一化处理,获得归一化处理后的归一化训练集和归一化测试集;
构建负荷预测模型,将所述归一化训练集输入到所述负荷预测模型中进行训练,获得训练好的负荷预测模型;将所述归一化测试集输入到所述训练好的负荷预测模型中,获得预测结果。
2.根据权利要求1所述的基于综合形状误差和时间误差的长期电力负荷预测方法,其特征在于,构建负荷预测模型,包括编码器,包含两个隐藏层,编码器计算过程包括:当前时刻的隐藏状态时,会首先计算一个候选状态
Figure FDA0003530015080000011
而在计算候选状态时,会考虑重置门rt的取值:
rt=σ(Wr[ht-1,xt]) (1)
使用Sigmoid函数使得门的取值限定为[0,1]之间,当重置门近于0,当前候选值
Figure FDA0003530015080000012
会忽略前一个隐藏状态ht-1,并用当前的输入xt来计算,有效地让隐藏状态抛弃任何将来发现的不相关信息:
Figure FDA0003530015080000013
计算出来候选值
Figure FDA0003530015080000014
之后,通过更新门来控制前一个隐藏状态有多少信息可以传递到当前隐藏状态,更新门zt为:
zt=σ(Wz[ht-1,xt]) (3)
最后当前时刻的隐藏状态ht可以计算为:
Figure FDA0003530015080000021
3.根据权利要求2所述的基于综合形状误差和时间误差的长期电力负荷预测方法,其特征在于,构建负荷预测模型包括解码器,所述解码器中包含一个未来层,所述未来层结合两个隐藏层,将结合后的数据输入到自注意力机制中,所述解码器的计算过程包括:
Figure FDA0003530015080000022
Figure FDA0003530015080000023
Figure FDA0003530015080000024
其中GRU()函数表示对输入的数据的非线性转换;ut与vt分别为BiGRU所对应的前向隐含层状态
Figure FDA0003530015080000025
和反向隐含层状态
Figure FDA0003530015080000026
所对应的权重;bt表示t时刻隐含层状态所对应的偏置;解码器将输入序列X分步输入,其在t时刻的GRU神经元隐藏层状态由t-1时刻GRU神经元隐藏层状态和t时刻输入xt共同决定,即:
ht=f(ht-1,xt) (8)
式中:ht为t时刻GRU神经元隐藏层状态;ht-1为t-1时刻GRU神经元隐藏层状态;xt为时刻输入的数据;则编码器输出的中间状态c为:
c=q([h1,h2,h3,...,hn]) (9)
式(8)与式(9)中的q与f为非线性函数。
4.根据权利要求3所述的基于综合形状误差和时间误差的长期电力负荷预测方法,其特征在于,所述解码器结合自注意力机制对编码器的隐藏层状态进行加权,解码器通过将联合概率分解为有序条件来定义输出数据y′的概率为:
Figure FDA0003530015080000031
对于RNN来说,每个条件的概率模型为:
p(y′i∣{y′1,…,y′i-1},c)=g(y′i-1,si,c) (11)
其中g是一个非线性、输出y′i概率的函数,si为解码器在i时刻的隐藏层状态:
si=f(si-1,y′i-1,ci) (12)
当i=1时,也就是当解码器第一次进行解码操作时,此时还没有生成上一时刻的隐藏层状态和预测值,则使用编码器中的最后一次编码时的隐藏层状态hn和原始序列的最后一个数据xn会充当上一时刻的解码器隐藏层状态和预测值:
s1=f(hn,xn,c1) (13)
其中ci为编码器隐藏序列(h1,...hn)通过注意力权重αij进行加权得到的不同时刻编码器输出的中间状态:
Figure FDA0003530015080000032
5.根据权利要求4所述的基于综合形状误差和时间误差的长期电力负荷预测方法,其特征在于,权值计算包括:采用多层感知机将最终输出的预测值与编码器隐藏层状态进行关联度分析得到注意力权值。
6.根据权利要求5所述的基于综合形状误差和时间误差的长期电力负荷预测方法,其特征在于,获取预测结果包括:通过捕获输出时间序列间的关系,纠正解码器输出并改进预测,然后将数据传递给全连接层输出最终预测值。
7.根据权利要求6所述的基于综合形状误差和时间误差的长期电力负荷预测方法,其特征在于,还包括损失函数更新模型参数,基于形状损失和时间损失进行误差识别,获得预测值和真实值。
8.根据权利要求7所述的基于综合形状误差和时间误差的长期电力负荷预测方法,其特征在于,基于所述预测值和所述真实值,获取最优路径预测结果包括:
1)基于所述预测值与真实值定义代价矩阵,通过查找每一步的最小值,获得时间形状损失;
2)引入光滑算子计算时间形状损失函数和时间损失函数,获得最优路径预测结果。
CN202210202480.4A 2022-03-03 2022-03-03 基于综合形状误差和时间误差的长期电力负荷预测方法 Pending CN114707698A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210202480.4A CN114707698A (zh) 2022-03-03 2022-03-03 基于综合形状误差和时间误差的长期电力负荷预测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210202480.4A CN114707698A (zh) 2022-03-03 2022-03-03 基于综合形状误差和时间误差的长期电力负荷预测方法

Publications (1)

Publication Number Publication Date
CN114707698A true CN114707698A (zh) 2022-07-05

Family

ID=82166297

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210202480.4A Pending CN114707698A (zh) 2022-03-03 2022-03-03 基于综合形状误差和时间误差的长期电力负荷预测方法

Country Status (1)

Country Link
CN (1) CN114707698A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115378948A (zh) * 2022-08-23 2022-11-22 浙江大学中原研究院 一种基于深度学习的服务器负载预测方法
CN116050665A (zh) * 2023-03-14 2023-05-02 淄博热力有限公司 供热设备故障预测方法
CN116128158A (zh) * 2023-04-04 2023-05-16 西南石油大学 混合采样注意力机制的油井效率预测方法
CN116361709A (zh) * 2023-03-31 2023-06-30 山东省计算中心(国家超级计算济南中心) 一种自适应电力负荷识别方法与设备
CN117591942A (zh) * 2024-01-18 2024-02-23 国网山东省电力公司营销服务中心(计量中心) 一种用电负荷数据异常检测方法、系统、介质及设备
CN117808175A (zh) * 2024-03-01 2024-04-02 南京信息工程大学 一种基于DTformer的短期多能源负荷预测方法
CN118484635A (zh) * 2024-07-16 2024-08-13 成都轨道交通产业技术研究院有限公司 一种基于ConvLSTM的轨道不平顺演化预测方法

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115378948A (zh) * 2022-08-23 2022-11-22 浙江大学中原研究院 一种基于深度学习的服务器负载预测方法
CN116050665A (zh) * 2023-03-14 2023-05-02 淄博热力有限公司 供热设备故障预测方法
CN116050665B (zh) * 2023-03-14 2024-04-02 淄博热力有限公司 供热设备故障预测方法
CN116361709A (zh) * 2023-03-31 2023-06-30 山东省计算中心(国家超级计算济南中心) 一种自适应电力负荷识别方法与设备
CN116361709B (zh) * 2023-03-31 2023-10-31 山东省计算中心(国家超级计算济南中心) 一种自适应电力负荷识别方法与设备
CN116128158A (zh) * 2023-04-04 2023-05-16 西南石油大学 混合采样注意力机制的油井效率预测方法
CN117591942A (zh) * 2024-01-18 2024-02-23 国网山东省电力公司营销服务中心(计量中心) 一种用电负荷数据异常检测方法、系统、介质及设备
CN117591942B (zh) * 2024-01-18 2024-04-19 国网山东省电力公司营销服务中心(计量中心) 一种用电负荷数据异常检测方法、系统、介质及设备
CN117808175A (zh) * 2024-03-01 2024-04-02 南京信息工程大学 一种基于DTformer的短期多能源负荷预测方法
CN117808175B (zh) * 2024-03-01 2024-05-17 南京信息工程大学 一种基于DTformer的短期多能源负荷预测方法
CN118484635A (zh) * 2024-07-16 2024-08-13 成都轨道交通产业技术研究院有限公司 一种基于ConvLSTM的轨道不平顺演化预测方法

Similar Documents

Publication Publication Date Title
CN114707698A (zh) 基于综合形状误差和时间误差的长期电力负荷预测方法
CN110705692B (zh) 一种时空注意力网络的非线性动态工业过程产品预测方法
CN116757534B (zh) 一种基于神经训练网络的智能冰箱可靠性分析方法
CN112990556A (zh) 一种基于Prophet-LSTM模型的用户用电能耗预测方法
CN113723007B (zh) 基于drsn和麻雀搜索优化的设备剩余寿命预测方法
CN111339712A (zh) 质子交换膜燃料电池剩余寿命预测方法
CN111813084A (zh) 一种基于深度学习的机械装备故障诊断方法
CN111340282A (zh) 基于da-tcn的设备剩余使用寿命的估计方法及系统
CN115587666A (zh) 基于季节趋势分解和混合神经网络的负荷预测方法及系统
CN108876044A (zh) 一种基于知识增强神经网络的线上内容流行度预测方法
CN111985719A (zh) 一种基于改进的长短期记忆网络的电力负荷预测方法
CN114580288A (zh) 一种基于dsecjan的智能故障诊断方法
CN113128666A (zh) 基于Mo-S-LSTMs模型的时间序列多步预测方法
CN114266201B (zh) 一种基于深度学习的自注意力电梯困人预测方法
CN116796171A (zh) 一种机械装备剩余使用寿命预测方法和装置
CN115660167A (zh) 基于麻雀搜索算法和分解误差校正的短期空气质量预测方法
CN116665483A (zh) 一种新的预测剩余停车位的方法
CN113988415B (zh) 一种中长期电力负荷预测方法
CN118114118A (zh) 一种基于cndt的典型武器装备故障诊断方法
CN114330815A (zh) 一种基于改进goa优化lstm的超短期风电功率预测方法与系统
CN113158448A (zh) 一种船舶系统设备阈值的自适应计算方法
CN116913098A (zh) 一种融合空气质量与车流量数据的短时交通流预测方法
CN112257893A (zh) 一种考虑监测误差的复杂机电系统健康状态预测方法
CN114970711B (zh) 一种基于Seq2Seq的电力负荷预测模型的构建方法及应用
CN116613745A (zh) 一种基于变分模态分解的pso-elm电动汽车充电负荷预测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination