CN113408087B - 一种基于云边系统和视频智能分析的变电站巡视方法 - Google Patents
一种基于云边系统和视频智能分析的变电站巡视方法 Download PDFInfo
- Publication number
- CN113408087B CN113408087B CN202110569520.4A CN202110569520A CN113408087B CN 113408087 B CN113408087 B CN 113408087B CN 202110569520 A CN202110569520 A CN 202110569520A CN 113408087 B CN113408087 B CN 113408087B
- Authority
- CN
- China
- Prior art keywords
- patrol
- inspection
- transformer substation
- substation
- edge
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000007689 inspection Methods 0.000 title claims abstract description 74
- 238000000034 method Methods 0.000 title claims abstract description 38
- 238000004458 analytical method Methods 0.000 title claims abstract description 17
- 230000002159 abnormal effect Effects 0.000 claims abstract description 38
- 238000012545 processing Methods 0.000 claims abstract description 22
- 238000001514 detection method Methods 0.000 claims abstract description 19
- 238000012544 monitoring process Methods 0.000 claims abstract description 9
- 238000004891 communication Methods 0.000 claims abstract description 5
- 238000004364 calculation method Methods 0.000 claims description 24
- 238000005070 sampling Methods 0.000 claims description 24
- 230000006870 function Effects 0.000 claims description 20
- 238000012549 training Methods 0.000 claims description 13
- 238000010586 diagram Methods 0.000 claims description 11
- 238000013527 convolutional neural network Methods 0.000 claims description 9
- 230000009466 transformation Effects 0.000 claims description 8
- 230000007246 mechanism Effects 0.000 claims description 7
- 230000005856 abnormality Effects 0.000 claims description 6
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 238000013499 data model Methods 0.000 claims description 6
- 238000010606 normalization Methods 0.000 claims description 6
- 230000008569 process Effects 0.000 claims description 6
- 238000012512 characterization method Methods 0.000 claims description 3
- 238000009792 diffusion process Methods 0.000 claims description 3
- 238000003708 edge detection Methods 0.000 claims description 3
- 238000011156 evaluation Methods 0.000 claims description 3
- 238000013507 mapping Methods 0.000 claims description 3
- 238000011176 pooling Methods 0.000 claims description 3
- 238000012360 testing method Methods 0.000 claims description 3
- 238000007634 remodeling Methods 0.000 claims 1
- 230000005540 biological transmission Effects 0.000 abstract description 2
- 238000005516 engineering process Methods 0.000 description 8
- 238000013461 design Methods 0.000 description 4
- 238000005457 optimization Methods 0.000 description 4
- 230000001133 acceleration Effects 0.000 description 3
- 238000013508 migration Methods 0.000 description 3
- 230000005012 migration Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000006872 improvement Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000013136 deep learning model Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000006185 dispersion Substances 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 230000002787 reinforcement Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/10—Geometric CAD
- G06F30/18—Network design, e.g. design based on topological or interconnect aspects of utility systems, piping, heating ventilation air conditioning [HVAC] or cabling
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F30/00—Computer-aided design [CAD]
- G06F30/20—Design optimisation, verification or simulation
- G06F30/27—Design optimisation, verification or simulation using machine learning, e.g. artificial intelligence, neural networks, support vector machines [SVM] or training a model
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/04—Architecture, e.g. interconnection topology
- G06N3/045—Combinations of networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
- G06N3/084—Backpropagation, e.g. using gradient descent
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/06—Energy or water supply
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2111/00—Details relating to CAD techniques
- G06F2111/02—CAD in a network environment, e.g. collaborative CAD or distributed simulation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2113/00—Details relating to the application field
- G06F2113/04—Power grid distribution networks
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Evolutionary Computation (AREA)
- Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- General Health & Medical Sciences (AREA)
- Computer Networks & Wireless Communication (AREA)
- Software Systems (AREA)
- Business, Economics & Management (AREA)
- Geometry (AREA)
- Computing Systems (AREA)
- Artificial Intelligence (AREA)
- Biophysics (AREA)
- Mathematical Physics (AREA)
- Biomedical Technology (AREA)
- Data Mining & Analysis (AREA)
- Economics (AREA)
- Signal Processing (AREA)
- Life Sciences & Earth Sciences (AREA)
- Medical Informatics (AREA)
- Computer Hardware Design (AREA)
- Molecular Biology (AREA)
- Computational Linguistics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Public Health (AREA)
- Water Supply & Treatment (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Computational Mathematics (AREA)
- Mathematical Analysis (AREA)
- Mathematical Optimization (AREA)
- Pure & Applied Mathematics (AREA)
- Image Analysis (AREA)
- Supply And Distribution Of Alternating Current (AREA)
Abstract
本发明提供一种基于云边系统和视频智能分析的变电站巡视方法,包括:建立变电站巡视的云边协同系统架构,由巡视主机、巡视边缘区块和巡视边缘节点构成;变电站巡视云边系统通过系统资源的实时占用情况,配置在巡视主机和巡视边缘节点之间的任务智能调度;巡视主机对当前接收的巡视流数据,采用基于DRFCN网络的目标智能识别方法来进行变电站监控目标的识别;巡视边缘节点采用基于轻量化深度网络的目标智能识别方法进行变电站目标识别,并计算异常值;巡视主机对云端和巡视边缘节点的数据进行协同处理,计算出综合异常指数。本发明减轻了变电站无人巡视大数据通信传输时延带来的实时性问题,提高了持续巡视数据流下的目标异常的检测精度。
Description
技术领域
本发明涉及电站安全和电力系统信息化技术领域,具体是一种基于云边系统和视频智能分析的变电站巡视方法。
背景技术
传统的变电站监控系统,数据采集都是在巡视主机服务端/云端运行,请求和响应都需要处理后,再通过数据链路进行传输。变电站关乎大电网的安全稳定,具有电压等级覆盖全、设备种类密集和复杂、设备安全稳定运行对缺陷和故障的反馈速度要求高。而传统的巡视模式和巡视主机,采用的是集中式数据处理,运算模型是基于历史数据库,在巡视主机进行运算,无法及时处理边缘端产生的大量实时数据,对目标的动态变化态势把握不足,因此难以适应新的要求。
本申请的发明人在实现本发明的过程中经过研究发现:变电站无人巡视系统中,采用边缘计算技术,前端感知设备就地进行分布式数据处理后再上传处理结果,可以减少平台的集中处理量,提升平台响应速度。因此,本发明提出了基于云边系统和视频智能分析的变电站巡视方法,即通过巡视云端和巡视边缘前端之间的协作,结合图像智能识别算法与在线异常检测算法实现无人巡视功能;其中巡视主机云计算环境下通过基于DRFCN网络的目标智能识别方法,对监控目标进行识别和异常计算;巡视边缘节点采用基于轻量化深度网络的目标智能识别方法来进行目标识别,并计算异常值;最后系统综合云端和巡视边缘节点的数据以及计算结果,进行协同处理,从而建立更适合于变电站应用的高精度、低延时的无人巡视模式。
发明内容
本发明要解决的技术问题是针对传统巡视模式已经无法适应未来电网和能源互联网新的发展要求,在实时性要求高的情况下,采用云边协同的系统框架,基于云边不同深度网络结合的目标智能识别算法的方式,实现变电站实时无人巡视模式;本发明聚焦人工智能技术、边缘计算技术与变电巡视业务相结合,构建以云边系统为基础、智能摄像头为中心的联合辅助巡视的无人化巡视模式,实现变电站一二次设备、辅助设备日常巡视全部由“机器代替人工”,创新变电巡视模式,促进变电运维业务提质增效,对保障电力安全运营具有重要意义。
一种基于云边系统和视频智能分析的变电站巡视方法,包括以下步骤:
步骤a)、建立变电站巡视的云边协同系统架构,由巡视主机、巡视边缘区块和巡视边缘节点构成,巡视主机用于对变电站图像大数据的处理和分析,巡视边缘区块用于前端巡视节点感知数据的汇聚、存储、处理和智能应用,并独立自治,巡视边缘节点用于视频、音频等多维感知数据的采集和智能处理,巡视边缘节点将巡视数据以一定的周期发送给临近节点和巡视主机;
步骤b)、变电站巡视云边系统通过系统资源的实时占用情况,配置在巡视主机和巡视边缘节点之间的任务智能调度;
步骤c)、巡视主机通过变电站历史巡视数据库建立历史数据模型,对当前接收的巡视流数据,采用基于DRFCN网络的目标智能识别方法来进行变电站监控目标的识别,并计算其与历史正常模型之间的差异,巡视主机将计算结果实时发送给巡视边缘节点;
步骤d)、巡视边缘节点向边缘区块中的邻域节点广播动态信息,并将采集到的一部分数据周期性的发送给巡视主机,巡视边缘节点采用基于轻量化深度网络的目标智能识别方法来进行变电站目标识别,并计算异常值,如果巡视边缘节点计算得到异常,则将计算结果实时发送给巡视主机;
步骤e)、巡视主机对云端和巡视边缘节点的数据进行协同处理,与系统预定义的异常阈值进行比较,计算出综合异常指数A,得到巡视目标的异常状态,对可能发生的异常做出进一步判断,及时更新系统调度。
进一步的,所述步骤b)包括以下具体步骤:
步骤b1)、变电站巡视云边系统采用DAG任务模型,包括强实时热点代码分析机制、应用程序分析流程及映射、面向云+边的巡视任务调度模型,其中强实时热点代码分析机制包含两个模块,分别是分支识别模块和路径探测模块;
步骤b2)、采用变电站分布式异构计算系统下的DAG任务调度,变电站异构系统下的DAG任务调度模型表示为如何将DAG任务图中的任务节点调度到硬件资源拓扑图中的计算节点上执行,以优化DAG任务在异构系统中的总体运行完成时间。
进一步的,所述步骤c)包括以下具体步骤:
步骤c1)、通过大量的变电站历史巡视数据,建立变电站数据模型;
步骤c2)、对当前接收到的变电站巡视数据进行处理:通过卷积模块稠密连接的方式,各个卷积模块都和上层的所有卷积模块稠密连接,复用深度网络模型中每一层的特征;
步骤c3)、基于稠密卷积神经网络的区域采样:在RPN模型结构的基础上,基于稠密卷积神经网络的DRPN方法,获得变电站设备的更高质量的采样区域,DRPN模型输入任意尺寸的变电站设备图像,输出为对应于每一个类的多个采样区域;
步骤c4)、变电站目标采样区域获取:输入通道的变电站设备特征图片经过稠密卷积网络层变换后,生成多个W×H大小的特征图,特征图的每一个像素具有很宽泛的感受野,对于一个W×H的特征图,将产生W×H×k个锚点框,采样区域包含大量的包含变电站目标的前景区域和不包含变电站目标的背景区域,在W×H×k个样本中挑选最能代表样本特征的锚点框;
步骤c5)、采用联合代价函数训练DRPN,实现端到端的训练和测试:分别设定分类和区域采样算法的代价函数后,通过联合计算采样区域的类别损失(LOSS)和位置损失,设计如式(1)所示的联合代价函数,Lcls和Lreg分别表示分类和锚点框回归的代价函数,其中Ncls表示一次训练选取的锚点框数量,Nreg表示选取锚点框的特征图大小:
步骤c6)、基于稠密卷积神经网络的变电站目标快速分类;
步骤c7)、特征转换:对于每一层特征图,做卷积、池化、归一化、线性或非线性转换操作;
步骤c8)、梯度弥散、梯度膨胀;
步骤c9)、ROIP归一化变换,将不同维度的特征矩阵归一化到相同维度;
步骤c10)、联合代价函数:DFCN有两个同级的输出:K+1个目标的类别信息和每一类的坐标位置,训练DFCN的联合代价函数如式(2)所示:
L(p,u,tu,v)=Lcls(p,u)+λ[u≥1]Lloc(tu,v)
分类的ROI是通过DRPN求得,对于每一个ROI都有一个类别和位置坐标标签,分别表示为u和v,tu表示需要预测的位置坐标,以元组形式表示设置背景类为第0类,λ设置为1,对于背景ROI并不回归计算位置坐标;
步骤c11)、计算变电站巡视目标与变电站历史模型之间的差异,如果计算得到异常结果,则将计算结果实时发送给巡视边缘节点。
进一步的,所述步骤d)包括以下具体步骤:
步骤d1)、巡视边缘节点采集边缘区块中的视频、声音多维动态信息,并将采集到的一部分数据周期性的通过网络发送给巡视主机;
步骤d2)、使用Se-DResNet轻量化分类网络:利用卷积操作对输入的特征通道进行压缩,使得后续模块操作中所需的计算量减少;
步骤d3)、分别输入到1×1与3×3卷积核通道,通过不同尺寸卷积核实现感受野尺寸的多样性,从而对变电站巡视目标特征的提取的表征能力更有效;
步骤d4)、借鉴SeNet网络中提出的通道加权方法对特征图进行加权操作,使得性能优良的特征图能够得到最大限度的利用;
步骤d5)、轻量化检测网络:利用Se-DResNet轻量化分类网络模块进行变电站设备目标特征提取;
步骤d6)、选择轻量化SSD深度网络作为基础框架,并针对SSD准确性较差的问题进行改进;
步骤d7)、使用重塑交叉熵损失的方式,实现输入分类器样本的正负比例调整,同时实现将样本中难分与易分样本进行合理的区分;
步骤d8)、计算变电站巡视目标与巡视边缘节点预置的模型之间的差异,如果巡视边缘节点计算得到异常数据,则将计算结果实时发送给巡视主机。
进一步的,所述步骤e)包括以下具体步骤:
步骤e1)、巡视主机采用云端和边缘端检测相结合的评测方式,加权组合两种异常检测结果得到综合异常指数A:
A=WN*AN+WC*AC
AN表示边缘端计算得到的异常指数,WN表示边缘端计算的异常指数所占的比重,AC表示云端计算得到的异常指数,Wc表示云端计算得到的异常指数所占的比重,可根据边缘端采集的数据量和通信的情况,实时调整Wc和WN的值;
步骤e2)、根据计算得到的综合异常指数A,对可能发生的变电站设备异常做出进一步判断,及时更新系统调度。
本发明在变电站巡视云边协同的环境下,首先根据变电站巡视目标的特征设计了巡视主机端基于DRFCN网络的变电站目标智能识别方法;为了实时检测出巡视过程中可能存在的异常,本发明通过巡视边缘节点的轻量化深度网络目标智能识别方法,以及变电站巡视系统云边之间的协作建立实时异常检测模型,从而尽可能减少了由于大数据传输时延和算法处理繁重而带来的系统实时性问题。实验表明,采用基于云边系统和视频智能分析的变电站巡视方法后,系统的实时性能提高了22.75%。
附图说明
图1是本发明变电站无人巡视云边系统的DAG任务调度模型图;
图2是本发明变电站无人巡视云/边资源协同图;
图3是本发明巡视主机智能识别DRPN算法模型结构图;
图4是本发明智能识别DFCN卷积示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明的一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明需要解决以下技术问题:如何在高实时性要求的变电站巡视场景下,采用云边资源协同的方式更好地处理数据;如何通过云端挖掘频繁模式,识别历史巡视数据中的设备异常现象;如何在忽略巡视流数据时变进化的特征时,通过足够数量的历史数据构建的全局特征模型具有较高的异常检测精度;如何检测出最新获取的巡视流数据中可能存在的新型异常模式以及特定场景下的变电站异常目标。
本发明实施例提供一种基于云边系统和视频智能分析的变电站巡视方法,包括如下步骤:
步骤a)、建立变电站巡视的云边协同系统架构,由巡视主机、巡视边缘区块和巡视边缘节点构成,巡视主机用于对变电站图像大数据的处理和分析;巡视边缘区块用于前端巡视节点感知数据的汇聚、存储、处理和智能应用,并独立自治;巡视边缘节点用于视频、音频等多维感知数据的采集和智能处理,巡视边缘节点将巡视数据以一定的周期发送给临近节点和巡视主机;
步骤b)、变电站巡视云边系统通过系统资源的实时占用情况,配置在巡视主机和巡视边缘节点之间的任务智能调度;
其中,所述步骤b)包括以下具体步骤:
步骤b1)、变电站巡视云边系统采用DAG任务模型,包括强实时热点代码分析机制、应用程序分析流程及映射、面向云+边的巡视任务调度模型;其中强实时热点代码分析机制包含两个模块,分别是分支识别模块和路径探测模块。支持强实时、大样本的云/边迁移技术主要涉及基于MCTS的策略梯度强化学习方法设计、基于seq2seq模型的迁移策略网络结构设计、迁移算法输入输出设计。面向计算密集型的云/边调度算法优化技术主要包括神经网络共性加速算法优化技术、SVM共性加速算法优化技术、集成学习共性加速算法调度优化技术。
步骤b2)、变电站分布式异构计算系统下的DAG任务调度模型如图1所示。图1所示DAG任务图表示变电站巡视应用中任务间的并行与数据依赖关系,图2所示硬件资源拓扑图表示变电站分布式异构计算系统的计算节点间拓扑关系和硬件资源状态等信息。变电站异构系统下的DAG任务调度模型可表示为如何将DAG任务图中的任务节点调度到硬件资源拓扑图中的计算节点上执行,以优化DAG任务在异构系统中的总体运行完成时间。
步骤c)、巡视主机通过变电站历史巡视数据库建立历史数据模型,对当前接收的巡视流数据,采用基于DRFCN网络的目标智能识别方法来进行变电站监控目标的识别,并计算其与历史正常模型之间的差异。巡视主机将计算结果实时发送给巡视边缘节点;
其中,所述步骤c)包括以下具体步骤:
步骤c1)、通过大量的变电站历史巡视数据,建立变电站数据模型;
步骤c2)、对当前接收到的变电站巡视数据进行处理。通过卷积模块稠密连接的方式,各个卷积模块都和上层的所有卷积模块稠密连接,复用深度网络模型中每一层的特征。底层的卷积模块学习到了上面所有卷积模块的特征,必将提高深度网络模型的特征表达能力,不仅可以提高变电站设备的识别平均准确率和减小深度网络模型,而且可以有效解决梯度弥散、梯度膨胀问题。
步骤c3)、基于稠密卷积神经网络的区域采样。在RPN模型结构的基础上,基于稠密卷积神经网络的DRPN方法,用于获得变电站设备的更高质量的采样区域。DRPN模型结构如图3所示,DRPN输入任意尺寸的变电站设备图像,输出为对应于每一个类的多个采样区域;
步骤c4)、变电站目标采样区域获取。输入通道的变电站设备特征图片经过稠密卷积网络层变换后,生成了多个W×H大小的特征图,特征图的每一个像素(神经元)具有很宽泛的感受野。对于一个W×H的特征图,将产生W×H×k个锚点框,这些采样区域包含了大量的前景区域(包含变电站目标)和背景区域(不包含变电站目标)。在W×H×k个样本中挑选最能代表样本特征的锚点框;
步骤c5)、联合代价函数:为了共享稠密卷积网络的计算量和存储空间,采用联合代价函数训练DRPN,实现端到端的训练和测试。分别设定了分类和区域采样算法的代价函数后,通过联合计算采样区域的类别损失(LOSS)和位置损失,设计如式(1)所示的联合代价函数,Lcls和Lreg分别表示分类和锚点框回归的代价函数,其中Ncls表示一次训练选取的锚点框数量,Nreg表示选取锚点框的特征图大小。
步骤c6)、基于稠密卷积神经网络的变电站目标快速分类。DFCN算法的模型结构,如图4所示。利用DRPN算法快速、高效的获得高质量的变电站目标采样区域后,在深层次的特征图上提取特征进行分类,并在结果中同时输出变电站巡视目标的类别和位置信息。
步骤c7)、特征转换。对于每一层特征图,做卷积、池化、归一化、线性或非线性转换等操作。
步骤c8)、梯度弥散、梯度膨胀。采用稠密连接卷积层的方式,梯度同样是通过和的方式在模型中反向传递,即DFCN加强了深度学习模型的特征表达能力,但是计算反向传递梯度时不需要增加计算量。
步骤c9)、ROIP归一化变换。将不同维度的特征矩阵归一化到相同维度。
步骤c10)、联合代价函数。DFCN有两个同级的输出:K+1个变电站目标的类别信息和每一类的坐标位置。训练DFCN的联合代价函数如式(2)所示:
L(p,u t,u v,=)Lcls p(u,+λ)u≥[Lloc 1tu]v (2)
分类的ROI是通过DRPN求得,对于每一个ROI都有一个类别和位置坐标标签,分别表示为u和v,tu表示需要预测的位置坐标,以元组形式表示设置背景类为第0类,λ设置为1,对于背景ROI并不回归计算位置坐标。
如前所述,DRPN用于产生变电站巡视目标的高质量采样区域,DFCN用于计算变电站巡视目标采样区域类别信息的离散概率分布和位置坐标。如要使得DRPN和DFCN共享稠密卷积层,则DRFCN需要一种训练机制,使得DRPN和DFCN共享权重。本发明采用DRPN和DFCN联合分布参数训练方法。
步骤c11)、计算变电站巡视目标与变电站历史模型之间的差异,如果计算得到异常结果,则将计算结果实时发送给巡视边缘节点。
步骤d)、巡视边缘节点向边缘区块中的邻域节点广播动态信息,并将采集到的一部分数据周期性的发送给巡视主机。巡视边缘节点采用基于轻量化深度网络的目标智能识别方法来进行变电站目标识别,并计算异常值。如果巡视边缘节点计算得到异常,则将计算结果实时发送给巡视主机;
其中,所述步骤d)包括以下具体步骤:
步骤d1)、巡视边缘节点采集边缘区块中的视频、声音等多维动态信息,并将采集到的一部分数据周期性的通过网络发送给巡视主机;
步骤d2)、使用Se-DResNet轻量化分类网络。利用卷积操作对输入的特征通道进行压缩,使得后续模块操作中所需的计算量减少;
步骤d3)、分别输入到1×1与3×3卷积核通道,通过不同尺寸卷积核实现感受野尺寸的多样性,从而对变电站巡视目标特征的提取的表征能力更有效;
步骤d4)、借鉴SeNet网络中提出的通道加权方法对特征图进行加权操作,使得性能优良的特征图能够得到最大限度的利用;
步骤d5)、轻量化检测网络。利用Se-DResNet轻量化分类网络模块进行变电站设备目标特征提取;
步骤d6)、选择轻量化SSD深度网络作为基础框架,并针对SSD准确性较差的问题进行改进。在变电站多尺度目标检测部分,借鉴特征融合的思想,通过提升输入特征的质量,使得输入特征对变电站目标信息的表达更为准确;
步骤d7)、针对分类器部分存在的正负样本比例失衡的问题,使用重塑交叉熵损失的方式,实现输入分类器样本的正负比例调整,同时可实现将样本中难分与易分样本进行合理的区分;
步骤d8)、计算变电站巡视目标与巡视边缘节点预置的模型之间的差异,如果巡视边缘节点计算得到异常数据,则将计算结果实时发送给巡视主机。
步骤e)、巡视主机对云端和巡视边缘节点的数据进行协同处理,与系统预定义的异常阈值进行比较,计算出综合异常指数A,得到巡视目标的异常状态,对可能发生的异常做出进一步判断,及时更新系统调度。
其中,所述步骤e)包括以下具体步骤:
步骤e1)、巡视主机采用云端和边缘端检测相结合的评测方式,加权组合两种异常检测结果得到综合异常指数A:
A=WN*AN+WC*AC
AN表示边缘端计算得到的异常指数,WN表示边缘端计算的异常指数所占的比重,AC表示云端计算得到的异常指数,Wc表示云端计算得到的异常指数所占的比重。可根据边缘端采集的数据量和通信的情况,实时调整Wc和WN的值。
步骤e2)、根据计算得到的综合异常指数A,对可能发生的变电站设备异常做出进一步判断,及时更新系统调度。
本发明设计了一种基于云边系统和视频智能分析的变电站巡视方法。根据变电站的目标特征设计了基于云边协同的系统架构,通过云边节点之间的协作,结合巡视主机端DRFCN网络和巡视边缘节点轻量化深度网络的目标检测算法,解决了传统巡视主机无法及时处理大量边缘采集的原始数据的问题,从而有效实现了高实时性要求下的变电站无人智能巡视问题。该方法在持续检测巡视数据流的变电站异常目标时具有较高的响应速度和检测精度。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何属于本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求的保护范围为准。
Claims (2)
1.一种基于云边系统和视频智能分析的变电站巡视方法,其特征在于,包括如下步骤:
步骤a)、建立变电站巡视的云边协同系统架构,由巡视主机、巡视边缘区块和巡视边缘节点构成,巡视主机用于对变电站图像大数据的处理和分析,巡视边缘区块用于前端巡视节点感知数据的汇聚、存储、处理和智能应用,并独立自治,巡视边缘节点用于视频、音频多维感知数据的采集和智能处理,巡视边缘节点将巡视数据以一定的周期发送给临近节点和巡视主机;
步骤b)、变电站巡视云边系统通过系统资源的实时占用情况,配置在巡视主机和巡视边缘节点之间的任务智能调度;
步骤c)、巡视主机通过变电站历史巡视数据库建立历史数据模型,对当前接收的巡视流数据,采用基于DRFCN网络的目标智能识别方法来进行变电站监控目标的识别,并计算其与历史正常模型之间的差异,巡视主机将计算结果实时发送给巡视边缘节点;
步骤d)、巡视边缘节点向边缘区块中的邻域节点广播动态信息,并将采集到的一部分数据周期性的发送给巡视主机,巡视边缘节点采用基于轻量化深度网络的目标智能识别方法来进行变电站目标识别,并计算异常值,如果巡视边缘节点计算得到异常,则将计算结果实时发送给巡视主机;
步骤e)、巡视主机对云端和巡视边缘节点的数据进行协同处理,与系统预定义的异常阈值进行比较,计算出综合异常指数A,得到巡视目标的异常状态,对可能发生的异常做出进一步判断,及时更新系统调度;
所述步骤d)包括以下具体步骤:
步骤d1)、巡视边缘节点采集边缘区块中的视频、声音多维动态信息,并将采集到的一部分数据周期性的通过网络发送给巡视主机;
步骤d2)、使用Se-DResNet轻量化分类网络:利用卷积操作对输入的特征通道进行压缩,使得后续模块操作中所需的计算量减少;
步骤d3)、分别输入到1×1与3×3卷积核通道,通过不同尺寸卷积核实现感受野尺寸的多样性,从而对变电站巡视目标特征的提取的表征能力更有效;
步骤d4)、借鉴SeNet网络中提出的通道加权方法对特征图进行加权操作,使得性能优良的特征图能够得到最大限度的利用;
步骤d5)、轻量化检测网络:利用Se-DResNet轻量化分类网络模块进行变电站设备目标特征提取;
步骤d6)、选择轻量化SSD深度网络作为基础框架,并针对SSD准确性较差的问题进行改进;
步骤d7)、使用重塑交叉熵损失的方式,实现输入分类器样本的正负比例调整,同时实现将样本中难分与易分样本进行合理的区分;
步骤d8)、计算变电站巡视目标与巡视边缘节点预置的模型之间的差异,如果巡视边缘节点计算得到异常数据,则将计算结果实时发送给巡视主机;
其中,所述步骤b)包括以下具体步骤:
步骤b1)、变电站巡视云边系统采用DAG任务模型,包括强实时热点代码分析机制、应用程序分析流程及映射、面向云+边的巡视任务调度模型,其中强实时热点代码分析机制包含两个模块,分别是分支识别模块和路径探测模块;
步骤b2)、采用变电站分布式异构计算系统下的DAG任务调度,变电站异构系统下的DAG任务调度模型表示为如何将DAG任务图中的任务节点调度到硬件资源拓扑图中的计算节点上执行,以优化DAG任务在异构系统中的总体运行完成时间;
其中,所述步骤e)包括以下具体步骤:
步骤e1)、巡视主机采用云端和边缘端检测相结合的评测方式,加权组合两种异常检测结果得到综合异常指数A:
A=WN*AN+WC*AC
AN表示边缘端计算得到的异常指数,WN表示边缘端计算的异常指数所占的比重,AC表示云端计算得到的异常指数,Wc表示云端计算得到的异常指数所占的比重,可根据边缘端采集的数据量和通信的情况,实时调整Wc和WN的值;
步骤e2)、根据计算得到的综合异常指数A,对可能发生的变电站设备异常做出进一步判断,及时更新系统调度。
2.如权利要求1所述的一种基于云边系统和视频智能分析的变电站巡视方法,其特征在于,所述步骤c)包括以下具体步骤:
步骤c1)、通过大量的变电站历史巡视数据,建立变电站数据模型;
步骤c2)、对当前接收到的变电站巡视数据进行处理:通过卷积模块稠密连接的方式,各个卷积模块都和上层的所有卷积模块稠密连接,复用深度网络模型中每一层的特征;
步骤c3)、基于稠密卷积神经网络的区域采样:在RPN模型结构的基础上,基于稠密卷积神经网络的DRPN方法,获得变电站设备的更高质量的采样区域,DRPN模型输入任意尺寸的变电站设备图像,输出为对应于每一个类的多个采样区域;
步骤c4)、变电站目标采样区域获取:输入通道的变电站设备特征图片经过稠密卷积网络层变换后,生成多个W×H大小的特征图,特征图的每一个像素具有很宽泛的感受野,对于一个W×H的特征图,将产生W×H×k个锚点框,采样区域包含大量的包含变电站目标的前景区域和不包含变电站目标的背景区域,在W×H×k个样本中挑选最能代表样本特征的锚点框;
步骤c5)、采用联合代价函数训练DRPN,实现端到端的训练和测试:分别设定分类和区域采样算法的代价函数后,通过联合计算采样区域的类别损失(LOSS)和位置损失,设计如式(1)所示的联合代价函数,Lcls和Lreg分别表示分类和锚点框回归的代价函数,其中Ncls表示一次训练选取的锚点框数量,Nreg表示选取锚点框的特征图大小:
步骤c6)、基于稠密卷积神经网络的变电站目标快速分类;
步骤c7)、特征转换:对于每一层特征图,做卷积、池化、归一化、线性或非线性转换操作;
步骤c8)、梯度弥散、梯度膨胀;
步骤c9)、ROIP归一化变换,将不同维度的特征矩阵归一化到相同维度;
步骤c10)、联合代价函数:DFCN有两个同级的输出:K+1个目标的类别信息和每一类的坐标位置,训练DFCN的联合代价函数如式(2)所示:
L(p,u,tu,v)=Lcls(p,u)+λ[u≥1]Lloc(tu,v)
分类的ROI是通过DRPN求得,对于每一个ROI都有一个类别和位置坐标标签,分别表示为u和v,tu表示需要预测的位置坐标,以元组形式表示设置背景类为第0类,λ设置为1,对于背景ROI并不回归计算位置坐标;
步骤c11)、计算变电站巡视目标与变电站历史模型之间的差异,如果计算得到异常结果,则将计算结果实时发送给巡视边缘节点。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110569520.4A CN113408087B (zh) | 2021-05-25 | 2021-05-25 | 一种基于云边系统和视频智能分析的变电站巡视方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110569520.4A CN113408087B (zh) | 2021-05-25 | 2021-05-25 | 一种基于云边系统和视频智能分析的变电站巡视方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113408087A CN113408087A (zh) | 2021-09-17 |
CN113408087B true CN113408087B (zh) | 2023-03-24 |
Family
ID=77674714
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110569520.4A Active CN113408087B (zh) | 2021-05-25 | 2021-05-25 | 一种基于云边系统和视频智能分析的变电站巡视方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113408087B (zh) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114389362B (zh) * | 2022-01-17 | 2022-11-01 | 中山大学 | 基于邻域边缘监测互联的电力安全主动防误方法及系统 |
CN114784958B (zh) * | 2022-03-24 | 2023-07-25 | 国网湖北省电力有限公司宜昌供电公司 | 基于云-边-端三级构架的变电站远程智能巡视系统 |
CN115102986B (zh) * | 2022-06-15 | 2023-12-01 | 之江实验室 | 一种边缘环境下物联网数据分发、存储方法及系统 |
CN114926667B (zh) * | 2022-07-20 | 2022-11-08 | 安徽炬视科技有限公司 | 基于云边端协同的图像识别方法 |
CN117830882B (zh) * | 2024-03-04 | 2024-06-14 | 广东泰一高新技术发展有限公司 | 基于深度学习的航拍图像识别方法及相关产品 |
CN117914003B (zh) * | 2024-03-19 | 2024-05-24 | 沈阳智帮电气设备有限公司 | 基于云边协同的箱式变压器智能监测辅助方法及系统 |
CN118485973B (zh) * | 2024-07-16 | 2024-09-06 | 南京云岸信息科技有限公司 | 基于OpenCV的变电站安全作业监测方法及系统 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111784685A (zh) * | 2020-07-17 | 2020-10-16 | 国网湖南省电力有限公司 | 一种基于云边协同检测的输电线路缺陷图像识别方法 |
CN111932027A (zh) * | 2020-08-28 | 2020-11-13 | 电子科技大学 | 一种融合边缘设施的云服务综合调度优化系统及方法 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11687805B2 (en) * | 2019-10-31 | 2023-06-27 | Shoreline Iot, Inc. | Systems and methods for self-learning artificial intelligence of things (AIOT) devices and services |
CN110807460B (zh) * | 2019-11-11 | 2022-04-29 | 国网河北省电力有限公司电力科学研究院 | 一种基于图像识别的变电站智能巡视系统及其应用方法 |
CN110957752B (zh) * | 2019-12-09 | 2023-06-09 | 重庆邮电大学 | 一种基于边缘物联的区域智能变电站调度系统及其方法 |
CN111784026B (zh) * | 2020-05-28 | 2022-08-23 | 国网信通亿力科技有限责任公司 | 基于云边端协同感知的变电站电气设备全方位体检系统 |
CN111901573A (zh) * | 2020-08-17 | 2020-11-06 | 泽达易盛(天津)科技股份有限公司 | 一种基于边缘计算的细颗粒度实时监管系统 |
CN112257632A (zh) * | 2020-10-29 | 2021-01-22 | 国网山西省电力公司检修分公司 | 一种基于边缘计算的变电站监测系统 |
CN112311097B (zh) * | 2020-11-03 | 2024-01-26 | 国网智能科技股份有限公司 | 变电站在线智能巡视集中监控系统及方法 |
CN112311891A (zh) * | 2020-11-03 | 2021-02-02 | 国网智能科技股份有限公司 | 一种变电站在线智能巡视云边协同系统及方法 |
CN112637806B (zh) * | 2020-12-15 | 2022-07-05 | 合肥工业大学 | 基于深度强化学习的变电站监测系统及其资源调度方法 |
-
2021
- 2021-05-25 CN CN202110569520.4A patent/CN113408087B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111784685A (zh) * | 2020-07-17 | 2020-10-16 | 国网湖南省电力有限公司 | 一种基于云边协同检测的输电线路缺陷图像识别方法 |
CN111932027A (zh) * | 2020-08-28 | 2020-11-13 | 电子科技大学 | 一种融合边缘设施的云服务综合调度优化系统及方法 |
Non-Patent Citations (5)
Title |
---|
A Cloud Edge Collaborative Intelligence Method of Insulator String Defect Detection for Power IIoT;Chunhe Song等;《Computer Science》;20210501;全文 * |
Key fittings monitoring method of transmission line based on cloud-edge cooperation;Hongbin Zai等;《20200601》;20200601;全文 * |
一种基于图模型的可信云资源调度算法;齐平等;《山东大学学报(理学版)》;20171222(第01期);全文 * |
基于泛在电力物联网的换流站在线监测系统优化综述;吕继伟;《电力工程技术》;20191128(第06期);全文 * |
移动边缘计算中的端到端任务分配算法;左超等;《计算机应用研究》;20200731(第07期);全文 * |
Also Published As
Publication number | Publication date |
---|---|
CN113408087A (zh) | 2021-09-17 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113408087B (zh) | 一种基于云边系统和视频智能分析的变电站巡视方法 | |
CN111353413B (zh) | 一种输电设备低漏报率缺陷识别方法 | |
CN109872003B (zh) | 对象状态预测方法、系统、计算机设备及存储介质 | |
CN109743356B (zh) | 工业互联网数据采集方法及装置、可读存储介质和终端 | |
CN113037783B (zh) | 一种异常行为检测方法及系统 | |
WO2020147353A1 (zh) | 一种边缘端的嵌入式时间序列决策树分类方法及系统 | |
CN116599857B (zh) | 一种适用于物联网多场景的数字孪生应用系统 | |
CN108334831A (zh) | 一种监测图像处理方法、监测终端及系统 | |
CN115277789B (zh) | 一种梯级水电站安全防护系统及方法 | |
CN117156442A (zh) | 基于5g网络的云数据安全保护方法及系统 | |
Yu et al. | MobileNet-YOLO v5s: An improved lightweight method for real-time detection of sugarcane stem nodes in complex natural environments | |
CN118015839B (zh) | 一种高速公路路域风险预测方法及装置 | |
CN111027397B (zh) | 适用于智能监控网络中的综合特征目标检测方法、系统、介质及设备 | |
CN118003961B (zh) | 智能充电桩集群控制系统及方法 | |
CN114169506A (zh) | 一种基于工业物联网平台的深度学习边缘计算系统框架 | |
WO2024066720A1 (zh) | 指标阈值的确定方法、装置、存储介质及电子装置 | |
CN113379135A (zh) | 基于云边协同计算的智能生产线产品质量低延迟集成预测方法和系统 | |
CN116961231A (zh) | 一种基于电力物联网安全管理系统 | |
CN116912774A (zh) | 一种基于边缘计算的输变电设备红外图像目标识别方法、电子装置及存储介质 | |
CN113554010B (zh) | 一种电网线路故障识别模型训练方法 | |
CN112486667B (zh) | 一种基于边缘计算精准处理数据的方法及装置 | |
CN115905348A (zh) | 一种多源异构数据的行业用电异常预警方法及系统 | |
CN115240271A (zh) | 基于时空建模的视频行为识别方法与系统 | |
CN114169623A (zh) | 一种电力设备故障分析方法、装置、电子设备及存储介质 | |
CN115392102A (zh) | 能耗预测模型的建立方法及装置、能耗预测方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |