CN105870942B - 一种基于近似动态规划算法的一次调频附加学习控制方法 - Google Patents
一种基于近似动态规划算法的一次调频附加学习控制方法 Download PDFInfo
- Publication number
- CN105870942B CN105870942B CN201610331091.6A CN201610331091A CN105870942B CN 105870942 B CN105870942 B CN 105870942B CN 201610331091 A CN201610331091 A CN 201610331091A CN 105870942 B CN105870942 B CN 105870942B
- Authority
- CN
- China
- Prior art keywords
- controller
- soc
- energy storage
- upper limit
- lower limit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 29
- 238000004146 energy storage Methods 0.000 claims abstract description 84
- 238000005457 optimization Methods 0.000 claims abstract description 49
- 230000006870 function Effects 0.000 claims abstract description 37
- 230000008569 process Effects 0.000 claims abstract description 10
- 238000004364 calculation method Methods 0.000 claims abstract description 8
- 238000012549 training Methods 0.000 claims abstract description 8
- 238000011156 evaluation Methods 0.000 claims description 10
- 238000005070 sampling Methods 0.000 claims description 10
- 230000009471 action Effects 0.000 claims description 6
- 238000010521 absorption reaction Methods 0.000 claims description 3
- 230000006872 improvement Effects 0.000 claims description 3
- 230000009467 reduction Effects 0.000 claims description 3
- 239000004576 sand Substances 0.000 claims description 2
- 239000000126 substance Substances 0.000 claims description 2
- 230000002787 reinforcement Effects 0.000 abstract description 4
- 230000008901 benefit Effects 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 7
- 239000003990 capacitor Substances 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000012804 iterative process Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 230000033228 biological regulation Effects 0.000 description 1
- 238000011217 control strategy Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005338 heat storage Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000035699 permeability Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000011084 recovery Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02J—CIRCUIT ARRANGEMENTS OR SYSTEMS FOR SUPPLYING OR DISTRIBUTING ELECTRIC POWER; SYSTEMS FOR STORING ELECTRIC ENERGY
- H02J3/00—Circuit arrangements for ac mains or ac distribution networks
- H02J3/24—Arrangements for preventing or reducing oscillations of power in networks
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02J—CIRCUIT ARRANGEMENTS OR SYSTEMS FOR SUPPLYING OR DISTRIBUTING ELECTRIC POWER; SYSTEMS FOR STORING ELECTRIC ENERGY
- H02J2203/00—Indexing scheme relating to details of circuit arrangements for AC mains or AC distribution networks
- H02J2203/20—Simulating, e g planning, reliability check, modelling or computer assisted design [CAD]
Landscapes
- Engineering & Computer Science (AREA)
- Power Engineering (AREA)
- Supply And Distribution Of Alternating Current (AREA)
Abstract
本发明提供一种基于近似动态规划算法的一次调频附加学习控制方法,所述方法包括如下步骤:I、训练样本数据的收集;II、附加学习控制器的近似计算;III、附加学习控制器的优化迭代。本发明的优点在于给出了一种近似动态规划的一次调频在线学习附加学习控制方法,该方法可以检测控制器的输入和输出,包含强化学习的值函数迭代策略,能在系统运行过程中,根据系统的反馈在线对机组功率输出进行进一步的优化调整。该控制器作为附加学习控制,不需要替代原有的机组控制器,还可以利用系统原有控制器先验知识进行强化学习,提高收敛速度,并在此基础上考虑到了储能的优化运行区间。
Description
技术领域
本发明涉及一种电力系统的一次调频,具体讲涉及一种基于近似动态规划算法的一次调频附加学习控制方法。
背景技术
电力系统的一次调频过程指的是当各机组并网运行,在外界负荷变动影响下,电网频率发生变化时,各机组的调节系统参与调节作用,自动地增加(电网频率下降时)或减小(电网频率升高时)自身的功率,使之与外界负荷相平衡,同时尽量减少电网频率的变化的过程即为一次调频。
火电机组传统意义上的一次调频是静态时汽轮机按照与其转速之间的关系曲线出力,该关系曲线称为汽轮机控制系统的静态特性。目前,风电机组的装机容量日益增加,在局部地区渗透率很高,在北方地区电网中,作为主要调频电源的火电机组受蓄热、调节方向不宜改变等制约,影响一次调频性能。储能的响应时间能达到毫秒级,在风电功率波动情况下可以协助火电机组进行一次调频。
关于储能协调火电机组参与一次调频控制已有不少报道,申请号为201310188516.9、名为“一种超级电容储能系统参与电力一次调频的协调控制方法”的中国专利文件提出了一种超级电容储能与传统机组的协调控制策略,但并没涉及附加优化控制器。本发明采取近似动态规划算法附加学习控制的方式,一直用来解决非线性系统的最优控制问题,基本思想是通过计算近似代价函数,从而避免动态规划中的“维数灾”问题。该算法的初值选取具有随机性,实际应用过程中要经过多次学习才能收敛,因此,设计一种附加学习控制器的方式,并不替代原有控制器,而是利用原有控制器指导初值的选取,加快收敛速度,减少工程应用的难度。
发明内容
针对上述问题,本发明提出了一种基于近似动态规划算法的一次调频附加学习控制方法。
一种基于近似动态规划算法的一次调频附加学习控制方法,其特征在于,所述方法包括如下步骤:
I、训练样本数据的收集;
II、附加学习控制器的近似计算;
III、附加学习控制器的优化迭代。
进一步的,所述步骤I包括对附加学习控制器的训练,得到样本状态变量x:
x=[Δf,ΔPg,ΔPe,ΔPtie]
其中Δf是区域频率偏差;ΔPg是火电机组出力变化量;ΔPe是储能出力变化量;ΔPtie是联络线功率偏差量。
进一步的,所述步骤I的对附加学习控制器的训练包括:
(1)对含储能的一次调频控制系统进行离散化建模,得到一次调频控制系统状态xk+1如下式所示:
xk+1=F(xk,us,k),k=0,1,2,3...... (1)
含储能的一次调频控制系统的控制变量x和控制器us如下式所示:
x=[Δf,ΔPg,ΔPe,ΔPtie]T (2)
us=a1Δf+a2ΔPg+a3ΔPe+a4ΔPtie (3)
(2)含储能系统的一次调频控制系统代价函数U(xk,us,k)如下式所示:
(3)采集样本数据
采样周期为1ms,收集2000个x、us和Q的数据作为学习样本;
其中,xk为状态向量;us,k为控制向量;Q为代价函数;a1,a2,a3,a4为控制器优化权值;Rf、Ru为不同代价的权重,大于零;k代表时刻,k=0,1,2,3......。
进一步的,步骤II包括:
(1)代价函数的逼近结构如下式所示:
含储能的一次调频系统逼近结构基函数φ(xk,us,k)如下式所示:
φ(xk,us,k)=[Δfk 2,2ΔfkΔPg,k,2ΔfkΔPe,k,2ΔfkΔPtie,2Δfkus,k,ΔPg,k 2,2ΔPg,kΔPe,k,2ΔPg,kΔPtie,2ΔPg,kus,k,ΔPe,k 2,2ΔPe,kΔPtie,2ΔPe,kus,k,ΔPtie 2,2ΔPtieus,k,us,k 2]T (8)
公式(7)采用批量最小二乘法进行批量计算;
(2)获得最优控制器:
最小代价函数Q*(xk,us,k)如下式所示:
使得最小代价函数最小的最优控制器us,k如下式所示:
进一步的,所述步骤III包括:以2s为一个周期,完成一次策略评价和策略改善的迭代,每一步迭代过程产生一个相比前一个输出的优化值,动作体向系统控制器输出控制器优化权值a1,a2,a3,a4,并给控制系统修改不同机组的状态变化量Δf,ΔPg,ΔPe,ΔPtie。
进一步的,所述步骤III将系统频率偏差调节区域与储能优化运行区间SOC结合,设计了一种附加优化控制器进行一次调频优化控制,
其中,SOC是储能电池荷电状态,SOC=QS/QR,QS为电池储能系统的剩余容量,QR为电池储能系统的标称容量。
进一步的,所述优化控制包括:
若fsq下限<Δfi<fsq上限时,所有控制器不进行额外调节;
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加优化控制器,且SOCmin<SOCi<SOCmax,则执行体的控制器优化权值a1,a2,a3,a4直接输出给系统控制器;
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加优化控制器,且SOCi≤SOCmin,若当前的控制器的储能指令ΔPe为正,则执行体的控制器优化权值中储能功率偏差量权重值a3强制为0;
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加优化控制器,且SOCi≤SOCmin,若当前的控制器的储能指令ΔPe为负,则执行体的控制器优化权值中储能功率偏差量权重值a3强制为2a3;
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加优化控制器,且SOCi≥SOCmax,当前的控制器的储能指令ΔPe为正,则执行体的控制器优化权值中将储能功率偏差量权重值a3强制为2a3;
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加优化控制器,且SOCi≥SOCmax,前的控制器的储能指令ΔPe为负,则执行体的控制器优化权值中将储能功率偏差量权重值a3强制为0;
当-0.5Hz<Δfi≤fq下限,关闭附加优化控制器,且SOCi>SOCmin,则系统的控制器优先储能进行最大出力,直到储能SOC达到0%,接替的火电机组也采取最大出力;Δfi恢复到fq下限以上后,储能开始恢复到SOC运行优化区间内;
当-0.5Hz<Δfi≤fq下限,关闭附加优化控制器,且SOCi<SOCmin,则系统的控制器优先火电机组也采取最大出力,直到储能SOC达到0%;若Δfi恢复到fq下限以上后,储能开始恢复到SOC运行优化区间内;
当0.5Hz>Δfi≥fq上限时,关闭附加优化控制器,且SOCi<SOCmax,则系统的控制器控制储能吸收功率,直到储能SOC达到100%,接替的火电机组也采取减出力;若Δfi恢复到fq上限以下后,储能开始恢复到SOC运行优化区间内;
当0.5Hz>Δfi≥fq上限时,关闭附加优化控制器,且SOCi>SOCmax,则系统的控制器控制优先火电机组减出力,直到储能SOC达到100%;若Δfi恢复到fq上限以下后,储能开始恢复到SOC运行优化区间内;
当Δfi<-0.5Hz或Δfi>0.5Hz时,关闭附加优化控制器,不论储能SOC状态,系统设定所有机组都以最大出力运行,极端情况下可以减负荷,只到频率恢复到±0.5Hz以内;
其中,
Δfi:电网第i时刻的频率数据;
fsq上限:频率死区的上限值;
fsq下限:频率死区的下限值;
fq上限:附加优化控制器调节区的上限值;
fq下限:附加优化控制器调节区的上限值;
SOCi:在第i个采样点采样的SOC值;
SOCmin:电池储能系统优化运行区间的SOC下限;
SOCmax:电池储能系统优化运行区间的SOC上限。
进一步的,所述控制目标为:
频率偏差最大波动量在±0.5Hz以内,偏差波动范围维持在fq下限和fq上限之间,频率偏差波动比原有控制平缓。
与最接近的现有技术比,本发明提供的技术方案具有以下优异效果:
本发明的优点在于给出了一种近似动态规划的一次调频在线学习附加学习控制方法,该方法可以检测控制器的输入和输出,包含强化学习的值函数迭代策略,能在系统运行过程中,根据系统的反馈在线对机组功率输出进行进一步的优化调整。该控制器作为附加学习控制,不需要替代原有的机组控制器,还可以利用系统原有控制器先验知识进行强化学习,提高收敛速度,并在此基础上考虑到了储能的优化运行区间。
附图说明
图1为含储能的一次调频附加学习控制器结构图;
图2为含储能的电力系统一次调频示意图;
图3为附加学习控制器结构示意图;
图4为含附加学习控制器的电力系统一次调频结构图。
具体实施方式
下面将结合本发明技术流程图以及实施案例示意图,对本发明实施例中的技术方案进行清楚、完整地描述。
本实施例提供的含储能的一次调频系统控制示意图如图1所示,本实施例通过数据采集模块,以频率偏差Δf为控制目标。在电池储能系统功率与SOC上下限及火电机组经济运行区间约束为前提下,判断实时的电网频率偏差是否越过频率死区,若越过频率死后,将频率偏差值转换成对应的功率偏差值,得到的电网在时刻的功率差额,判断电池储能系统及火电机组分别参与电网一次频率调节的程度,给出不同的控制指令,校正电网供需平衡,阻止频率波动的加剧,维持电网频率稳定。
具体的,本实施例提供的一种基于近似动态规划算法的储能/火电机组一次调频附加学习控制方法,该控制系统作为原有控制器的一种附加学习控制器,与原有的控制器并联于系统控制中,其主要过程是,在含储能的一次调频控制系统中,若fsq下限<Δfi<fsq上限,则系统的附加学习控制器与原有控制器均不动作;当fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时开始启用附加学习控制器进行优化控制,当Δfi≤fq下限或Δfi≥fq上限时,系统进入次紧急控制区,不使用附加学习控制,在频率偏差超过±0.5Hz情况下,系统进入紧急控制区,储能系统与机组均为最大出力模式,极端情况下可以减负荷。
对应的,本实施例提出的附加学习控制器算法结构如图3所示,这种控制器结构分为评价体和执行体两个部分,评价体包含对一次调频控制器及控制目标的评价,执行体是控制器的实际动作环节,通过执行体给出附加学习控制器的控制信号反馈给原有控制器中的一次调频系统。
具体的,含附加学习控制器的电力系统一次调频结构图如图4所示,所述方法包括如下步骤:
(1)为了能使附加学习控制器可以适应当前控制系统,首先对附加学习控制器进行训练,训练样本如下:
1)对含储能的一次调频控制系统进行离散化建模,得到一次调频控制系统状态方程如下:
xk+1=F(xk,uk),k=0,1,2,...,(1)
对本一次调频控制系统定义其控制变量x和控制器us如下:
x=[Δf,ΔPg,ΔPe,ΔPtie]T(2)
us=a1Δf+a2ΔPg+a3ΔPe+a4ΔPtie(3)
2)确定系统的在k时刻的瞬时代价函数,即调节的目标函数。
近似动态规划算法定义代价函数U(xk,us,k)的基本形式如下:
U(xk,us,k)=W(xk)+uT s,kRus,k,k=0,1,2...,(4)
其中,R是正定矩阵;
相应的将含储能系统的一次调频控制系统代价函数U(xk,us,k)定义如下:
3)采集样本数据
在含储能一次调频系统的调节过程中,把风电功率波动当作一次调频扰动量进行输入时,一直实时收集产生频率差和不同机组的功率分配数据,选取采样周期选为1ms,以此作为学习的样本,收集2000个x、us、Q的数据样本。
(2)在步骤(1)的学习下,附加学习控制器已经适应了系统的现有控制,结合步骤(1)的样本数据,进行控制器的近似计算,所述方法包括如下步骤:
1)附加学习控制器评价体对系统现有的控制器和控制目标进行评价,计算系统的代价函数。为了使算法迭代速度更快,能够在线进行数据的处理,所提算法对策略评价采取一定的函数逼近结构来近似代价函数,该逼近结构基本形式如下:
对含储能的一次调频系统逼近结构基函数φ(xk,us,k)表达式如下:
φ(xk,us,k)=[Δfk 2,2ΔfkΔPg,k,2ΔfkΔPe,k,2ΔfkΔPtie,2Δfkus,k,ΔPg,k 2,2ΔPg,kΔPe,k,2ΔPg,kΔPtie,2ΔPg,kus,k,ΔPe,k 2,2ΔPe,kΔPtie,2ΔPe,kus,k,ΔPtie 2,2ΔPtieus,k,us,k 2]T
(8)
为了加速计算过程,对于公式7采用批量最小二乘法进行批量计算处理。
2)附加学习控制器的执行体对于评价体中得到的最小代价函数进行求解,得到最优控制器,具体步骤如下:
根据Bellman最优化准则求解代价函数方程得到最小代价函数Q*(xk,us,k)如下:
求使得最小代价函数最小的us,k,得出最优控制器us,k
(3)结合步骤(2)中附加学习控制器的评价体中得到的代价函数对系统控制器进行评价,在步骤(2)的执行体中对最优控制器进行改善,控制器算法每2s完成一次策略评价和策略改善的迭代。每一步的迭代过程都会产生一个相比前一个输出的优化值,动作体把控制器优化权值a1,a2,a3,a4输出给系统控制器,反馈修改不同机组的状态变化量Δf,ΔPg,ΔPe,ΔPtie,以此作为一次调频的附加学习控制器。
以上是附加学习控制器的优化迭代过程,其中附加学习控制器实施过程中具体的有如下步骤:
若fsq下限<Δfi<fsq上限时,频率处于死区内,所有控制器不进行额外调节。
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加优化控制器,且SOCmin<SOCi<SOCmax,则执行体的控制器优化权值a1,a2,a3,a4直接输出给系统控制器。
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加优化控制器,且SOCi≤SOCmin,若当前的控制器的储能指令ΔPe为正,则执行体的控制器优化权值中储能功率偏差量权重值a3强制为0。
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加优化控制器,且SOCi≤SOCmin,若当前的控制器的储能指令ΔPe为负,则执行体的控制器优化权值中储能功率偏差量权重值a3强制为2a3。
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加优化控制器,且SOCi≥SOCmax,当前的控制器的储能指令ΔPe为正,则执行体的控制器优化权值中将储能功率偏差量权重值a3强制为2a3。
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加优化控制器,且SOCi≥SOCmax,前的控制器的储能指令ΔPe为负,则执行体的控制器优化权值中将储能功率偏差量权重值a3强制为0。
当-0.5Hz<Δfi≤fq下限,关闭附加优化控制器,且SOCi>SOCmin,则系统的控制器优先储能进行最大出力,直到储能SOC达到0%,接替的火电机组也采取最大出力。Δfi恢复到fq下限以上后,储能开始恢复到SOC运行优化区间内。
当-0.5Hz<Δfi≤fq下限,关闭附加优化控制器,且SOCi<SOCmin,则系统的控制器优先火电机组也采取最大出力,直到储能SOC达到0%。若Δfi恢复到fq下限以上后,储能开始恢复到SOC运行优化区间内。
当0.5Hz>Δfi≥fq上限时,关闭附加优化控制器,且SOCi<SOCmax,则系统的控制器控制储能吸收功率,直到储能SOC达到100%,接替的火电机组也采取减出力。若Δfi恢复到fq上限以下后,储能开始恢复到SOC运行优化区间内。
当0.5Hz>Δfi≥fq上限时,关闭附加优化控制器,且SOCi>SOCmax,则系统的控制器控制优先火电机组减出力,直到储能SOC达到100%。若Δfi恢复到fq上限以下后,储能开始恢复到SOC运行优化区间内。
当Δfi<-0.5Hz或Δfi>0.5Hz时,关闭附加优化控制器,不论储能SOC状态,系统设定所有机组都以最大出力运行,极端情况下可以减负荷,只到频率恢复到±0.5Hz以内。
本实施例所用术语定义:
Δfi:电网第i时刻的频率数据;
fsq上限:频率死区的上限值;
fsq下限:频率死区的下限值;
fq上限:附加优化控制器调节区的上限值;
fq下限:附加优化控制器调节区的上限值;
xk是状态向量;
us,k是控制向量;
Δf是区域频率偏差;
ΔPg是火电机组出力变化量;
ΔPe是储能出力变化量;
ΔPtie是联络线功率偏差量;
W是逼近结构的权值;
Rf、Ru是不同代价的权重,都大于零;
φ(xk,us,k)是基函数;
Q(xk,us,k)是代价函数;
k代表时刻,k=0,1,2,...;
SOC:储能电池荷电状态,SOC=QS/QR,QS为电池储能系统的剩余容量,QR为电池储能系统的标称容量;
SOCi:在第i个采样点采样的SOC值;
SOCmin:电池储能系统优化运行区间的SOC下限;
SOCmax:电池储能系统优化运行区间的SOC上限
最后应当说明的是:以上实施例仅用以说明本发明的技术方案而非对其限制,尽管参照上述实施例对本发明进行了详细的说明,所属领域的普通技术人员应当理解:依然可以对本发明的具体实施方式进行修改或者等同替换,而未脱离本发明精神和范围的任何修改或者等同替换,其均应涵盖在本发明的权利要求范围当中。
Claims (3)
1.一种基于近似动态规划算法的一次调频附加学习控制方法,其特征在于,所述方法包括如下步骤:
I、训练样本数据的收集;
II、附加学习控制器的近似计算;
III、附加学习控制器的优化迭代;
所述步骤I包括对附加学习控制器的训练,得到样本状态变量x:
x=[Δf,ΔPg,ΔPe,ΔPtie]
其中Δf是区域频率偏差;ΔPg是火电机组出力变化量;ΔPe是储能出力变化量;ΔPtie是联络线功率偏差量;
所述步骤I的对附加学习控制器的训练包括:
(1)对含储能的一次调频控制系统进行离散化建模,得到一次调频控制系统状态xk+1如下式所示:
xk+1=F(xk,us,k),k=0,1,2,3...... (1)
含储能的一次调频控制系统的控制变量x’和控制器us如下式所示:
x'=[Δf,ΔPg,ΔPe,ΔPtie]T (2)
us=a1Δf+a2ΔPg+a3ΔPe+a4ΔPtie (3)
(2)含储能系统的一次调频控制系统代价函数U(xk,us,k)如下式所示:
(3)采集样本数据
采样周期为1ms,收集2000个x’、us和Q的数据作为学习样本;
其中,xk为状态向量;us,k为控制向量;Q为代价函数;a1,a2,a3,a4为控制器优化权值;Rf、Ru为不同代价的权重,大于零;k代表时刻,k=0,1,2,3……;
步骤II包括:
(1)代价函数的逼近结构如下式所示:
含储能的一次调频系统逼近结构基函数φ(xk,us,k)如下式所示:
公式(7)采用批量最小二乘法进行批量计算;
(2)获得最优控制器:
最小代价函数Q*(xk,us,k)如下式所示:
使得最小代价函数最小的最优控制器us,k如下式所示:
所述步骤III包括:以2s为一个周期,完成一次策略评价和策略改善的迭代,每一步迭代过程产生一个相比前一个输出的优化值,动作体向系统控制器输出控制器优化权值a1,a2,a3,a4,并给控制系统修改不同机组的状态变化量Δf,ΔPg,ΔPe,ΔPtie;
所述步骤III将系统频率偏差调节区域与储能优化运行区间SOC结合,设计了一种附加学习控制器进行一次调频优化控制,
其中,SOC是储能电池荷电状态,SOC=QS/QR,QS为电池储能系统的剩余容量,QR为电池储能系统的标称容量。
2.如权利要求1所述一种基于近似动态规划算法的一次调频附加学习控制方法,其特征在于,
所述优化控制包括:
若fsq下限<Δfi<fsq上限时,所有控制器不进行额外调节;
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加学习控制器,且SOCmin<SOCi<SOCmax,则执行体的控制器优化权值a1,a2,a3,a4直接输出给系统控制器;
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加学习控制器,且SOCi≤SOCmin,若当前的控制器的储能指令ΔPe为正,则执行体的控制器优化权值中储能功率偏差量权重值a3强制为0;
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加学习控制器,且SOCi≤SOCmin,若当前的控制器的储能指令ΔPe为负,则执行体的控制器优化权值中储能功率偏差量权重值a3强制为2a3;
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加学习控制器,且SOCi≥SOCmax,若当前的控制器的储能指令ΔPe为正,则执行体的控制器优化权值中将储能功率偏差量权重值a3强制为2a3;
若fq下限<Δfi<fsq下限或fsq上限<Δfi<fq上限时,采取附加学习控制器,且SOCi≥SOCmax,若当前的控制器的储能指令ΔPe为负,则执行体的控制器优化权值中将储能功率偏差量权重值a3强制为0;
当-0.5Hz<Δfi≤fq下限,关闭附加学习控制器,且SOCi>SOCmin,则系统的控制器优先储能进行最大出力,直到储能SOC达到0%,接替的火电机组也采取最大出力;Δfi恢复到fq下限以上后,储能开始恢复到SOC运行优化区间内;
当-0.5Hz<Δfi≤fq下限,关闭附加学习控制器,且SOCi<SOCmin,则系统的控制器优先火电机组也采取最大出力,直到储能SOC达到0%;若Δfi恢复到fq下限以上后,储能开始恢复到SOC运行优化区间内;
当0.5Hz>Δfi≥fq上限时,关闭附加学习控制器,且SOCi<SOCmax,则系统的控制器控制储能吸收功率,直到储能SOC达到100%,接替的火电机组也采取减出力;若Δfi恢复到fq上限以下后,储能开始恢复到SOC运行优化区间内;
当0.5Hz>Δfi≥fq上限时,关闭附加学习控制器,且SOCi>SOCmax,则系统的控制器控制优先火电机组减出力,直到储能SOC达到100%;若Δfi恢复到fq上限以下后,储能开始恢复到SOC运行优化区间内;
当Δfi<-0.5Hz或Δfi>0.5Hz时,关闭附加学习控制器,不论储能SOC状态,系统设定所有机组都以最大出力运行,极端情况下可以减负荷,直 到频率恢复到±0.5Hz以内;
其中,
Δfi:电网第i时刻的频率数据;
fsq上限:频率死区的上限值;
fsq下限:频率死区的下限值;
fq上限:附加学习控制器调节区的上限值;
fq下限:附加学习控制器调节区的上限值;
SOCi:在第i个采样点采样的SOC值;
SOCmin:电池储能系统优化运行区间的SOC下限;
SOCmax:电池储能系统优化运行区间的SOC上限。
3.如权利要求2所述一种基于近似动态规划算法的一次调频附加学习控制方法,其特征在于,控制目标为:
频率偏差最大波动量在±0.5Hz以内,偏差波动范围维持在fq下限和fq上限之间,频率偏差波动比原有控制平缓。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610331091.6A CN105870942B (zh) | 2016-05-18 | 2016-05-18 | 一种基于近似动态规划算法的一次调频附加学习控制方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610331091.6A CN105870942B (zh) | 2016-05-18 | 2016-05-18 | 一种基于近似动态规划算法的一次调频附加学习控制方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105870942A CN105870942A (zh) | 2016-08-17 |
CN105870942B true CN105870942B (zh) | 2022-04-29 |
Family
ID=56635253
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610331091.6A Active CN105870942B (zh) | 2016-05-18 | 2016-05-18 | 一种基于近似动态规划算法的一次调频附加学习控制方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105870942B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108258706B (zh) * | 2016-12-29 | 2023-01-24 | 中国电力科学研究院 | 一种火/储agc调频优化控制方法及系统 |
CN108767905B (zh) * | 2018-05-31 | 2021-11-16 | 西安热工研究院有限公司 | 基于同步向量测量装置数据进行一次调频调试分析方法 |
CN110165714B (zh) * | 2019-05-30 | 2021-01-26 | 广州水沐青华科技有限公司 | 基于极限动态规划算法的微电网一体化调度与控制方法、计算机可读存储介质 |
CN111224433A (zh) * | 2020-03-06 | 2020-06-02 | 中国电力科学研究院有限公司 | 一种分布式储能系统二次调频控制方法及系统 |
CN111555371B (zh) * | 2020-04-13 | 2021-08-27 | 清华大学 | 一种控制火电-储能联合系统参与电网频率调节的方法 |
CN113888526B (zh) * | 2021-10-21 | 2022-09-23 | 北京实力伟业环保科技有限公司 | 基于微生物的废气处理方法及系统 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102645894A (zh) * | 2012-04-20 | 2012-08-22 | 中国科学院自动化研究所 | 模糊自适应动态规划方法 |
CN103217899A (zh) * | 2013-01-30 | 2013-07-24 | 中国科学院自动化研究所 | 基于数据的q函数自适应动态规划方法 |
CN103809440A (zh) * | 2014-01-25 | 2014-05-21 | 清华大学 | 一种用于自动控制的附加控制器设计方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013023178A1 (en) * | 2011-08-11 | 2013-02-14 | The Trustees Of Columbia University In The City Of New York | Adaptive stochastic controller for dynamic treatment of cyber-physical systems |
-
2016
- 2016-05-18 CN CN201610331091.6A patent/CN105870942B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102645894A (zh) * | 2012-04-20 | 2012-08-22 | 中国科学院自动化研究所 | 模糊自适应动态规划方法 |
CN103217899A (zh) * | 2013-01-30 | 2013-07-24 | 中国科学院自动化研究所 | 基于数据的q函数自适应动态规划方法 |
CN103809440A (zh) * | 2014-01-25 | 2014-05-21 | 清华大学 | 一种用于自动控制的附加控制器设计方法 |
Non-Patent Citations (2)
Title |
---|
Online Supplementary ADP Learning Controller Design and Application to Power System Frequency Control With Large-Scale Wind Energy Integration;Wentao Guo et al;《IEEE TRANSACTIONS ON NEURAL NETWORKS AND LEARNING SYSTEMS》;20150616;第27卷(第8期);第II部分、第IV部分,图1-2 * |
一种新型附加学习控制器及电力系统应用实例;郭文涛等;《控制理论与应用》;20141231;第31卷(第12期);第1724-1727页 * |
Also Published As
Publication number | Publication date |
---|---|
CN105870942A (zh) | 2016-08-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105870942B (zh) | 一种基于近似动态规划算法的一次调频附加学习控制方法 | |
CN107800146B (zh) | 兼顾一次调频和超低频振荡抑制的调速器参数优化方法 | |
Pandey et al. | Frequency regulation in hybrid power systems using particle swarm optimization and linear matrix inequalities based robust controller design | |
CN101162841B (zh) | 静止无功补偿器的非线性pi电压控制方法 | |
CN108708775B (zh) | 基于热电负荷转换模型的热电联产机组快速变负荷控制方法 | |
CN108923435B (zh) | 一种基于分层mpc的风电无功电压协调控制系统 | |
CN113285451B (zh) | 一种基于光伏储能系统的黑启动协调控制方法 | |
CN113131532B (zh) | 一种新能源电站一次调频网络化控制方法 | |
CN110148956A (zh) | 一种基于mpc的电池储能系统辅助agc控制方法 | |
CN109659961B (zh) | 一种基于分频控制的动态电力系统负荷频率协调方法 | |
CN106816890B (zh) | 一种光伏电站频率调节方法及系统 | |
CN104612898A (zh) | 一种风电变桨距多变量模糊神经网络pid控制方法 | |
CN111244968B (zh) | 计及电网电压支撑能力影响的风电场电压控制方法及系统 | |
CN104089270A (zh) | 一种发电机组锅炉负荷控制优化调整试验方法 | |
Yildirim et al. | A robust non-integer controller design for load frequency control in modern marine power grids | |
CN109038613A (zh) | 一种计及风电虚拟惯性/一次调频响应的自适应低频减载方法 | |
CN109802446A (zh) | 基于云模型的风柴储混合电力系统电压频率滑模控制方法 | |
CN111637444A (zh) | 一种基于q学习的核电蒸汽发生器水位控制方法 | |
CN104485670A (zh) | 孤立电网中电压敏感性工业负荷时变阻尼特性的控制方法 | |
CN102410138A (zh) | 一种获取风力发电机组最优控制输入的方法 | |
CN114336592A (zh) | 一种基于模型预测控制的风电场agc控制方法 | |
Swarup | Intelligent load frequency control of two-area interconnected power system and comparative analysis | |
CN111987736A (zh) | 一种补偿水轮机水锤效应的直流频率限制控制器控制方法 | |
CN108828932B (zh) | 一种单元机组负荷控制器参数优化整定方法 | |
CN108616122B (zh) | 一种计及超低频振荡的调速器pid参数鲁棒优化方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |