CN113541092A - 基于强化学习算法的配电网继电保护人工智能整定方法 - Google Patents
基于强化学习算法的配电网继电保护人工智能整定方法 Download PDFInfo
- Publication number
- CN113541092A CN113541092A CN202111077086.4A CN202111077086A CN113541092A CN 113541092 A CN113541092 A CN 113541092A CN 202111077086 A CN202111077086 A CN 202111077086A CN 113541092 A CN113541092 A CN 113541092A
- Authority
- CN
- China
- Prior art keywords
- value
- power distribution
- distribution network
- reward
- relay protection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02H—EMERGENCY PROTECTIVE CIRCUIT ARRANGEMENTS
- H02H3/00—Emergency protective circuit arrangements for automatic disconnection directly responsive to an undesired change from normal electric working condition with or without subsequent reconnection ; integrated protection
- H02H3/006—Calibration or setting of parameters
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02H—EMERGENCY PROTECTIVE CIRCUIT ARRANGEMENTS
- H02H1/00—Details of emergency protective circuit arrangements
- H02H1/0092—Details of emergency protective circuit arrangements concerning the data processing means, e.g. expert systems, neural networks
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02H—EMERGENCY PROTECTIVE CIRCUIT ARRANGEMENTS
- H02H7/00—Emergency protective circuit arrangements specially adapted for specific types of electric machines or apparatus or for sectionalised protection of cable or line systems, and effecting automatic switching in the event of an undesired change from normal working conditions
- H02H7/26—Sectionalised protection of cable or line systems, e.g. for disconnecting a section on which a short-circuit, earth fault, or arc discharge has occured
Landscapes
- Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Supply And Distribution Of Alternating Current (AREA)
Abstract
本发明涉及一种基于强化学习算法的配电网继电保护人工智能整定方法,其技术特点是:根据配电网继电保护的基本性质建立奖励函数;根据奖励函数计算配电网中各个断路器的奖励值并填入Q‑Table表中,建立强化学习中算法的Q‑Table表格;对Q‑Table表格中的Q值进行迭代;对Q‑Table表格中的Q值全部迭代结束后,得到配电网断路器的最终定值。本发明实现了配电网继电保护定值的自动整定功能,提高了配电网定值整定效率,降低了从业人员的工作量,有效地解决了传统整定计算中存在的因定值失配导致的整定结果劣化的问题,提高了整定定值对速动性、选择性、灵敏性的适应程度,进而解决因定值劣化导致的配电网越级跳闸、故障无法切除、切除时间过长等问题。
Description
技术领域
本发明属于配电网技术领域,涉及配电网中的继电保护方法,尤其是一种基于强化学习算法的配电网继电保护人工智能整定方法。
背景技术
电力系统与工业生产、人们的生活密切相关,如何保障电网的安全稳定运行就显得尤为重要。当电网发生短路、断线等故障时,就要采取相关措施,使系统以尽量小的代价恢复到稳定运行状态。作用于电力系统单个元件的继电保护装置就是这些措施中最为重要的一种。当电网发生短路故障时,安装于系统各个元件上的有着相互配合关系的保护装置判别出发生故障的元件,并迅速将故障元件从系统中隔离出来,使得系统剩余部分能正常运行。要使得电网中的保护装置能够正确地动作,就必须使各个保护装置间在定值和动作时间上根据相关规则保持正确的配合关系,也就是要做好电网继电保护装置的整定计算工作。
目前,配电网继电保护定值整定通常采用了人工计算的方法,这种人工计算方法不但计算量大,而且在遇到电网结构复杂、断路器数量较多时,定值难以准确及时地计算出来,经常会出现定值失配的问题,整定结果往往无法满足对继电保护速动性、选择性、灵敏性的要求,进而导致的配电网越级跳闸、故障无法切除、切除时间过长等问题。
发明内容
本发明的目的在于克服现有技术的不足,提供一种设计合理、准确性高且提高效率的基于强化学习算法的配电网继电保护人工智能整定方法,
本发明解决现有的技术问题是采取以下技术方案实现的:
一种基于强化学习算法的配电网继电保护人工智能整定方法,包括以下步骤:
步骤1、根据配电网继电保护的基本性质,建立奖励函数;
步骤2、根据奖励函数,计算配电网中各个断路器的奖励值并填入Q-Table表中,从而建立强化学习算法中的Q-Table表格;
步骤3、采用贝尔曼方程对Q-Table表格中的Q值进行迭代,所述Q值为断路器的奖励值;
步骤4、对Q-Table表格中的Q值全部迭代结束后,将最后一次迭代的状态量设为配电网断路器的最终定值。
而且,所述步骤1建立的奖励函数Px为:
式中,Psel为选择性的奖励函数,Psen为灵敏性的奖励函数,Pspe为速动性的奖励函数。
而且,所述选择性的奖励函数Psel为:
所述灵敏性的奖励函数Psen为:
所述速动性的奖励函数Pspe为:
而且,所述步骤2的具体实现方法包括以下步骤:
⑴进行状态划分,将断路器进行分级;
⑵进行行为划分,给当前断路器进行赋值;
⑶计算环境对赋值的反馈;
⑷根据环境对赋值的反馈,计算当前级数所有断路器的总奖励值∑Px;
⑸将总奖励值∑Px填入Q-Table表中对应的位置中。
而且,所述状态划分的方法为:从变电站出线断路器开始,按照潮流方向逐级遍历全网,将各级断路器的定值为S1、S2、S3……SN。
而且,所述行为划分的公式为:
In表示当前断路器的定值赋值,赋值应满足Imin≤In≤Imax,其中Imin、Imax分别表示本线路出现的最小短路电流和最大短路电流,k表示步长,n为行为编号;
所述行为划分的具体过程为:
⑴计算本线路出现的最大短路电流Imax和最小短路电流Imin;
⑵根据计算精度要求设置k值,k=100;
⑶根据如下公式计算:
而且,所述贝尔曼方程为:
本发明的优点和积极效果是:
1、本发明采用基于强化学习算法的人工智能整定方法,能够快速准确地计算出配电网断路器的最终定值,从而实现配电网继电保护定值的自动整定功能,提高了配电网定值整定效率,降低了从业人员的工作量,有效地解决了传统整定处理过程中难以计算定值导致因定值失配导致的整定结果劣化的问题,提高了整定定值对速动性、选择性、灵敏性的适应程度,进而解决因定值劣化导致的配电网越级跳闸、故障无法切除、切除时间过长等问题。
2、本发明以断路器的分级级数为基础进行状态划分,以定值的赋值作为行为的划分,并限定了行为的上下限,从断路器跳闸定值对继电保护灵敏性、速动性、选择性满足情况的角度建立了强化学习算法中的奖励函数,其整定结果更加准确可靠,满足了实际应用的需要。
附图说明
图1为本发明给出的断路器分级示意图;
图2为本发明的Q-Table表建立的流程图;
图3为本发明建立的Q-Table表;
图4为本发明的断路器分级表;
图5为本发明的计算各Q值后的Q-Table表;
图6为本发明的断路器定值表。
具体实施方式
以下结合附图对本发明实施例做进一步详述。
一种基于强化学习算法的配电网继电保护人工智能整定方法,包括以下步骤:
步骤1、根据配电网继电保护的基本性质,建立奖励函数。
本发明根据配电网继电保护的基本性质来设置奖惩,奖励值的大小应能反应在当前定值设置的合理性。配电网继电保护的基本性质包括:
(1)选择性:环境数据应有拓扑关系,故障点的上游,距离故障点最近断路器定义为“应动作”的断路器,此断路器正确跳开时得到的奖励为最高奖励,而后根据负荷损失情况给出越级跳闸时的不同奖励值。当出现越级引起主变低压侧开关变电站出现开关(可选)跳闸时,应加大惩戒。选择性的奖励函数为:
式中,Xsel=0/1/2表示主低开关跳闸/正确跳闸/越级跳闸,表示选择性惩罚值,该值可根据线路总负荷调节大小,可取-1;表示主低开关跳闸惩戒系数,该惩戒系数可取100;表示选择性奖励值,该选择性奖励值可取5;、分别表示当前损失负荷、最小损失负荷;Wmax表示线路总负荷。
(2)灵敏性:故障能够切除时得0分,未切除时最大惩戒。灵敏性的奖励函数为:
(3)速动性:以主变低后备时间定值为上限,约接近0秒加分越高。速动性的奖励函数为:
综上所述,通过上述三个继电保护的基本性质,可建立如下奖励函数:
式中,Px表示总奖励值。
步骤2、根据奖励函数,计算配电网中各个断路器的奖励值并填入Q-Table表中,从而建立强化学习算法中的Q-Table表格。
Q-Table表格是强化学习中算法 Q-Learning需要使用的表格,根据本发明的特点,建立Q-Table表格,如图2所示,包括以下步骤:
(1)状态划分
在本步骤中,需要建立环境模型,该模型包括各节点短路电流、负荷信息、断路器拓扑关系(分级),从而完成状态的划分。
状态划分的方法为:从变电站出线断路器(零级断路器)开始,按照潮流方向逐级遍历全网,零级断路器的定值设为S1,所有一级断路器(零级开关的下级断路器)的定值为S2,所有二级断路器(一级断路器的下级断路器)的定值为S3,以此类推,如图1断路器分级示意图。
(2)行为划分
行为指的是给当前断路器的定值赋值,赋值应满足Imin≤In≤Imax,其中Imin、Imax分别表示本线路可能出现的最小短路电流和最大短路电流。同时,赋值时应将可靠系数、灵敏系数考虑在内。为了进一步缩小范围,可将“本线路”缩小为“本支路”。In表示当前断路器的定值赋值,In可以表示为:
其中k表示步长,n为行为编号,可以看出行为的数量与步长有关。
上述行为划分的具体过程为:
1)采用常规短路计算方法计算本线路出现的最大短路电流Imax和最小短路电流Imin;
2)根据计算精度要求设置k值,k=100;
3)根据如下公式计算:
(3)计算环境对赋值的反馈,即:各断路器的跳闸情况,具体方法为:
在计算环境对赋值的反馈时,用In比较断路器的保护定值,当In大于保护定值时,认为断路器跳闸。如果主变低压侧断路器跳闸,则反馈值Xsel=0,如果跳闸断路器是故障点上游第一个断路器,则Xsel=0,其他断路器跳闸取Xsel=2;任意断路器跳闸,反馈值Xsen=1,无断路器跳闸时取Xsen=0。
(4)根据环境对赋值的反馈,计算当前级数所有断路器的总奖励值∑Px;具体方法为:
根据环境对赋值的反馈,分别按照步骤1给出的选择性的奖励函数Psel、灵敏性的奖励函数Psen及速动性的奖励函数Pspe分别计算当前级数每个断路器的选择性奖励值、灵敏性奖励值及速动性奖励值,并按照步骤1给出的奖励函数Px计算得到当前级数每个断路器的奖励值,最后求和得到当前级数所有断路器的总奖励值∑Px。
(5)将总奖励值∑Px填入Q-Table表中对应的位置中。
最后建立的Q-Table表如图3所示,图中:
步骤3、采用贝尔曼方程迭代Q值。
本步骤采用贝尔曼方程进行迭代,其计算方程如下:
当两次连续迭代的结果小于给定的误差时,本次迭代结束。
步骤4、计算整定结果:对Q-Table表格中的Q值全部迭代结束后,得到配电网断路器的最终定值。
全部迭代结束,且全线路断路器均已遍历完成,则认为最后一次迭代的函数状态量为断路器的最终定值,即此时S1、S2、S3……SN中的值为当前线路所有断路器的整定定值。
通过以上步骤,即可快速准确地计算出配电网断路器的最终定值,从而实现基于强化学习算法的配电网继电保护人工智能整定功能。
下面以图1给出的线路为例,采用本发明的基于强化学习算法的配电网继电保护人工智能整定方法。
在图1中,全线路共有主干断路器4台,分支断路器4台,一级分支线6条,各变压器(含等效变压器组)7台。各变压器容量表如表1所示:
表1 各变压器容量表
变压器编号 | 1 | 2 | 3 | 4 | 5 | 7 | 8 |
容量(kVA) | 800 | 650 | 400 | 400 | 400 | 800 | 1000 |
具体过程如下:
(1)计算奖励函数
以S3断路器赋值为例,故障设置在8#断路器电源侧,赋值为1400A,1s的奖励函数值计算方法如下:
选择性奖励函数为:
此时环境给出的反馈值Xsel=1,因此Psel=5
灵敏性奖励函数为:
此时环境给出的反馈值Xsen=1,因此Psen=0
速动性奖励函数为:
(2)建立Q-Table表格
1) 断路器分级表如图4所示。
2) 断路器的定值赋值如下:
3) Q-Table计算
Q-Table根据状态及行为不断迭代计算与更新,以其中一次计算为例,分级对各断路器进行赋值,计算各Q值后的Q-Table表如图5所示:
(3)迭代Q值
利用贝尔曼方程:
通过以上步骤实现了配电网继电保护人工智能自动整定功能。
需要强调的是,本发明所述的实施例是说明性的,而不是限定性的,因此本发明包括并不限于具体实施方式中所述的实施例,凡是由本领域技术人员根据本发明的技术方案得出的其他实施方式,同样属于本发明保护的范围。
Claims (8)
1.一种基于强化学习算法的配电网继电保护人工智能整定方法,其特征在于:包括以下步骤:
步骤1、根据配电网继电保护的基本性质,建立奖励函数;
步骤2、根据奖励函数,计算配电网中各个断路器的奖励值并填入Q-Table表中,从而建立强化学习算法中的Q-Table表格;
步骤3、采用贝尔曼方程对Q-Table表格中的Q值进行迭代,所述Q值为断路器的奖励值;
步骤4、对Q-Table表格中的Q值全部迭代结束后,将最后一次迭代的状态量设为配电网断路器的最终定值。
5.根据权利要求1所述的基于强化学习算法的配电网继电保护人工智能整定方法,其特征在于:所述步骤2的具体实现方法包括以下步骤:
⑴进行状态划分,将断路器进行分级;
⑵进行行为划分,给当前断路器进行赋值;
⑶计算环境对赋值的反馈;
⑷根据环境对赋值的反馈,计算当前级数所有断路器的总奖励值∑Px;
⑸将总奖励值∑Px填入Q-Table表中对应的位置中。
6.根据权利要求5所述的基于强化学习算法的配电网继电保护人工智能整定方法,其特征在于:所述状态划分的方法为:从变电站出线断路器开始,按照潮流方向逐级遍历全网,将各级断路器的定值为S1、S2、S3……SN。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111077086.4A CN113541092B (zh) | 2021-09-15 | 2021-09-15 | 基于强化学习算法的配电网继电保护人工智能整定方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111077086.4A CN113541092B (zh) | 2021-09-15 | 2021-09-15 | 基于强化学习算法的配电网继电保护人工智能整定方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113541092A true CN113541092A (zh) | 2021-10-22 |
CN113541092B CN113541092B (zh) | 2021-11-26 |
Family
ID=78092566
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111077086.4A Active CN113541092B (zh) | 2021-09-15 | 2021-09-15 | 基于强化学习算法的配电网继电保护人工智能整定方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113541092B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115907291A (zh) * | 2022-11-11 | 2023-04-04 | 国网安徽省电力有限公司合肥供电公司 | 一种有源配电网继电保护定值性能评价方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111130053A (zh) * | 2020-01-08 | 2020-05-08 | 华南理工大学 | 一种基于深度强化学习的配电网过流保护方法 |
CN112467686A (zh) * | 2020-11-04 | 2021-03-09 | 深圳供电局有限公司 | 配电网故障恢复方法、装置、控制设备和存储介质 |
-
2021
- 2021-09-15 CN CN202111077086.4A patent/CN113541092B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111130053A (zh) * | 2020-01-08 | 2020-05-08 | 华南理工大学 | 一种基于深度强化学习的配电网过流保护方法 |
CN112467686A (zh) * | 2020-11-04 | 2021-03-09 | 深圳供电局有限公司 | 配电网故障恢复方法、装置、控制设备和存储介质 |
Non-Patent Citations (1)
Title |
---|
史景坚等: "含储能系统的配电网电压调节深度强化学习算法", 《电力建设》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115907291A (zh) * | 2022-11-11 | 2023-04-04 | 国网安徽省电力有限公司合肥供电公司 | 一种有源配电网继电保护定值性能评价方法 |
CN115907291B (zh) * | 2022-11-11 | 2024-04-05 | 国网安徽省电力有限公司合肥供电公司 | 一种有源配电网继电保护定值性能评价方法 |
Also Published As
Publication number | Publication date |
---|---|
CN113541092B (zh) | 2021-11-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Chen et al. | Energy loss reduction by critical switches | |
CN109146124B (zh) | 一种基于时变失效率的配电终端改造决策方法 | |
CN110490454B (zh) | 基于配网设备运行效率评价的配网资产运行效率计算方法 | |
CN106130781B (zh) | 基于配电网拓扑模型的变压器故障累积效应评估方法 | |
CN107871202A (zh) | 一种计及多电压等级的电网可靠性评估方法 | |
CN103607320A (zh) | 电力通信网抗毁性评价方法 | |
CN113541092B (zh) | 基于强化学习算法的配电网继电保护人工智能整定方法 | |
CN107516896A (zh) | 一种基于决策树剪枝算法的负荷恢复方案生成方法 | |
CN113328437B (zh) | 一种智能配电网cps拓扑构建方法及故障恢复方法 | |
CN104036364A (zh) | 一种配电网网络结构水平评价方法 | |
CN107069705A (zh) | 一种电网元件连锁故障模拟方法 | |
CN115811047A (zh) | 基于分布式电源的配电网控制方法、装置以及存储介质 | |
CN104836240B (zh) | 一种基于电网固有结构特性的配电网最优无功补偿方法 | |
CN105656036A (zh) | 考虑潮流和灵敏度一致性等值的概率静态安全分析方法 | |
CN113468745B (zh) | 一种基于历史故障的配电网可靠性快速评估方法及系统 | |
CN104009470B (zh) | 基于交流潮流的电网故障仿真方法 | |
CN106451444B (zh) | 一种考虑甩负荷及耦合性的电网连锁故障事故链搜索方法 | |
CN113271226B (zh) | 电力通信网关键链路识别方法及其保护方法 | |
CN105514983B (zh) | 一种基于统计综合法和故障拟合法的负荷模型构建方法 | |
CN111884220B (zh) | 一种考虑区域源-荷均衡的电磁环网开环分区方案生成方法 | |
CN114996635A (zh) | 一种配电网参数确定方法、装置、设备及存储介质 | |
CN114386222A (zh) | 一种基于信息物理系统的配电网协同故障恢复方法和系统 | |
CN113612191A (zh) | 一种配电网的快速恢复供电方法及装置 | |
CN110676869B (zh) | 一种确定新增黑启动机组布点的方法 | |
CN112241604A (zh) | 概率匹配串并联耦合多模型的电网暴雨灾害预报订正方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |