CN110705601A - 基于单阶段目标检测的变电站设备渗漏油图像识别方法 - Google Patents
基于单阶段目标检测的变电站设备渗漏油图像识别方法 Download PDFInfo
- Publication number
- CN110705601A CN110705601A CN201910846731.0A CN201910846731A CN110705601A CN 110705601 A CN110705601 A CN 110705601A CN 201910846731 A CN201910846731 A CN 201910846731A CN 110705601 A CN110705601 A CN 110705601A
- Authority
- CN
- China
- Prior art keywords
- image
- target detection
- oil leakage
- substation equipment
- module
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 70
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000007670 refining Methods 0.000 claims abstract description 17
- 238000003062 neural network model Methods 0.000 claims abstract description 13
- 238000012545 processing Methods 0.000 claims abstract description 13
- 238000012549 training Methods 0.000 claims abstract description 13
- 238000013434 data augmentation Methods 0.000 claims abstract description 11
- 238000005457 optimization Methods 0.000 claims abstract description 10
- 230000007547 defect Effects 0.000 claims abstract description 9
- 238000013135 deep learning Methods 0.000 claims abstract description 8
- 238000004458 analytical method Methods 0.000 claims abstract description 6
- 238000003745 diagnosis Methods 0.000 claims abstract description 6
- 230000003190 augmentative effect Effects 0.000 claims abstract description 4
- 230000006870 function Effects 0.000 claims description 13
- 230000003044 adaptive effect Effects 0.000 claims description 11
- 230000005540 biological transmission Effects 0.000 claims description 6
- 238000012360 testing method Methods 0.000 claims description 6
- 238000006243 chemical reaction Methods 0.000 claims description 5
- 238000004364 calculation method Methods 0.000 claims description 3
- 230000009466 transformation Effects 0.000 claims description 3
- 238000004590 computer program Methods 0.000 claims description 2
- 238000003860 storage Methods 0.000 claims description 2
- 230000008569 process Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 5
- 230000000694 effects Effects 0.000 description 5
- 238000009826 distribution Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 238000007689 inspection Methods 0.000 description 4
- 239000000243 solution Substances 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 125000004432 carbon atom Chemical group C* 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 239000013598 vector Substances 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 239000003637 basic solution Substances 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000008602 contraction Effects 0.000 description 1
- 230000001276 controlling effect Effects 0.000 description 1
- 238000013527 convolutional neural network Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000009413 insulation Methods 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 238000007789 sealing Methods 0.000 description 1
- 238000010187 selection method Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N3/00—Computing arrangements based on biological models
- G06N3/02—Neural networks
- G06N3/08—Learning methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/60—Rotation of whole images or parts thereof
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Life Sciences & Earth Sciences (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Artificial Intelligence (AREA)
- Computing Systems (AREA)
- Mathematical Physics (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Molecular Biology (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Health & Medical Sciences (AREA)
- Software Systems (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Image Analysis (AREA)
Abstract
本发明的一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,获取原始图像,针对原始图像基于优化分类进行数据增广;针对增广后的数据,基于自适应高斯核的非局部均值进行图像去噪;构建锚点anchor细化模块及目标检测模块,基于构建的模块进行网络结构优化;基于anchor细化模块及目标检测模块,进行深度学习神经网络模型机器训练;导入待诊断图像至训练完成的神经网络模型,进行图像数据处理分析和缺陷诊断。本发明的一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,对原始图片进行处理,采用基于自适应高斯核的去噪方法消除原始图片中的噪声和干扰信息,提高原始图片清晰度,有利于提高后续的智能识别分类的准确性。
Description
技术领域
本发明涉及设备维护技术领域,具体涉及一种基于单阶段目标检测的变电站设备渗漏油图像识别方法。
背景技术
基于油绝缘的传统变电站充油设备依赖于绝缘油良好的绝缘特性,能有效防止设备内部短路,但受到设备制造质量、运输、安装以及长期运行等多重复杂因素的影响,运行充油设备渗漏油比较常见,并且在设备带点情况下很难进行检查和根治,只能结合设备停电时进行处理
变电站充油设备渗漏油的原因很多,目前使用的散热器放气塞子普遍存在不带止口的问题,无法起到良好的密封效果,加上部分厂家的设备结构设计不合理,也极为容易造成渗漏油缺陷。充油设备渗漏油还跟其所承载的负荷大小有关,设备承载负荷越高,则设备油温越高,绝缘油的粘度变得更加稀薄,更加容易导致渗漏油问题。充油设备的组件质量也是造成其容易导致渗漏油的主要原因之一。在充油设备运输、安装过程中采取的起吊、运输、安装操作方法不当也造成的充油设备渗漏油。充油设备长期运行过程中因环境温度、负荷变化等情况发生的热胀冷缩造成的渗漏油问题。
近年来,我国电力系统也在大力推进变电设备化,可是我国电力系统中的变电所依然没有完全改造,在这些变电所中使用的变压器等设备,依然是老式变压器居多,如果计划改造所有的变电设备,需要耗费巨大的人力、物力、财力,还会对正常的电网运行有一定影响。
目前变电站设备渗漏油缺陷主要是人力巡检,发现漏油问题在进行维修。随着计算机技术和图像处理技术的发展,人工智能得到广泛的应用,如何有效将深度学习技术应用于变电站设备渗漏油缺陷检测,这是目前亟需解决的问题。
发明内容
为解决上述现有技术的中的不足,本发明的目的在于提供一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,该方法用于对变电站设备巡检图像进行智能识别诊断,提升了诊断的速度和精度,大大节省了人力物力。
本发明公开了一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,,包括如下步骤:
获取原始图像,针对原始图像基于优化分类进行数据增广;
针对增广后的数据,基于自适应高斯核的非局部均值进行图像去噪;
构建锚点anchor细化模块及目标检测模块,基于构建的模块进行网络结构优化;
基于anchor细化模块及目标检测模块,进行深度学习神经网络模型机器训练;
导入待诊断图像至训练完成的神经网络模型,进行图像数据处理分析和缺陷诊断。
作为上述方案的进一步优化,所述基于优化分类的数据增广具体包括如下内容:
计算测试集合的所有类的分类正确率;
检索测试集合中的正确率最低的分类;
基于检索的正确率最低的分类进行数据增广处理。
作为上述方案的进一步优化,所述图像去噪的处理步骤包括如下:
基于自适应高斯核框架,设置θi方向角作为图像的主方向;
设定两幅图像Ni和Nj的主方向分别为θi与θj,设定Δθi,j为练个方向角θi与θj的差值;
若Δθi,j的数值是90的整数倍,交换图像Nj内像素进行图像的旋转转换;
若Δθi,j的数值不是90的整数倍,扩大Nj的图像尺寸至可选取到新的图像邻域,进行图像的旋转转换;
若Δθi,j的数值不超过2时,图像Ni和Nj为精准匹配,不执行图像的旋转转换;
作为上述方案的进一步优化,所述anchor细化模块的构建通过剔除分类器的分类层。
作为上述方案的进一步优化,所述目标检测模块通过传输连接块的输出进行构建。
作为上述方案的进一步优化,基于anchor细化模块调整anchors的具体位置及其大小,再通过目标检测模块进行回归操作,具体步骤包括如下:
基于划分的图像特征图的单元,生成n个细化的anchorboxes;
通过获取生成的n个细化的anchorboxes,将anchorboxes传递至目标检测模块的对应的特征图,生成目标类别和准确的目标位置和大小。
作为上述方案的进一步优化,所述进行深度学习神经网络模型机器训练基于损失函数的计算,包括anchor细化模块的损失以及目标检测模块的损失。
作为上述方案的进一步优化,所述损失函数定义如下:
pi和xi分别表示预测的anchori是一个目标的置信度和anchor细化模块中细化后的anchori的坐标;
ci和ti分别表示目标检测模块中预测的边界框的物体类别和坐标;
Narm和Nodm分别为anchor细化模块及目标检测模块中正样本的anchors数目,分类损失Lb是两个类别的交叉熵损失,多分类损失Lm是多个类别置信度的归一化指数函数损失;使用平滑L1损失作为回归损失Lr;
本发明还公开了一种基于单阶段目标检测的变电站设备渗漏油图像识别系统,所述系统包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器执行如上任一所述的一种基于单阶段目标检测的变电站设备渗漏油图像识别方法。
一种存储有计算机程序的计算机可读存储介质,其特征在于,该程序被处理器执行时实现如上任一所述的一种基于单阶段目标检测的变电站设备渗漏油图像识别方法。
本发明采用上述的技术方案,与现有技术相比,一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,具有以下技术效果:
1、本发明提供的一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,针对原始图片进行预处理,采用基于自适应高斯核的去噪方法消除原始图片中的噪声和干扰信息,提高原始图片的清晰度,有利于提高后续的智能识别分类的准确性;
2、本发明提供的一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,采用的anchor细化模块和目标检测模块的二级级联结构,anchor细化模块旨在过滤负样本anchors和粗略的调整anchors的位置和大小,提供更好的初始化结果;目标检测模块则将来细化的anchors作为输入,回归准确的目标位和尺寸,基于二级级联结构能够高效地实现目前最好的检测精度,有效保证检测结果的准确性。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1为本发明实施例的流程示意图;
图2为本发明实施例基于优化分类的数据增广的流程示意图;
图3为本发明实施例的图像去噪的处理流程示意图;
图4为本发明实施例旋转匹配图像片相似性对比流程图;
图5为本发明实施例噪声图像权系数分布示意图;
图6为本发明实施例基于anchor细化模块的调整位置及其大小示意图。
具体实施方式
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与发明相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
如图1-6所示,本发明实施例公开了一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,,包括如下步骤:
步骤1,获取原始图像,针对原始图像基于优化分类进行数据增广;
具体的,基于优化分类的数据增广具体包括如下内容:
步骤11,计算测试集合的所有类的分类正确率;
步骤12,检索测试集合中的正确率最低的分类;
步骤13,基于检索的正确率最低的分类进行数据增广处理;
更具体的,卷积神经网络的末层全连接层与输出层之间,针对输入的图像样本的特征向量进行机器训练,当输入样本过程中,获取如下多元方程组:
上式中,x1,x2,…,xn为最后一层全连接层的输入;a1,a2,…,am为输出,m表示分类的类别数,W为全连接层的权值参数,b为全连接层的偏置;
针对第i类分析,当输入k个样本时,对于每个类别来说,存在一个多元方程组如下式所示,方程的未知数为该类别所对应的权值参数w,输入样本个数即为构成该方程组的方程个数:
在训练网络模型时,训练集的样本数是k可数的,每类出现的输入样本数量达不到实际全连接层权值参数的数量,k远小于n,针对多元线性方程组,方程组个数小于未知数个数,方程组为欠定方程组,转换成矩阵形式如下,欠定方程组有无穷多解也就是方程组具有多组解;
针对样本特征复杂的分类样本,通过增加输入样本个数,增加方程组的方程个数,基础解系所含向量个数增加,则促进网络模型达到全局最优;
通过基于优化分类的数据增广将分类效果不好的类输入样本增加,即增加该类所对应的方程组的方程个数,针对单类进行数据增广能够提高网络模型对该类的分类正确率进而提高整体的分类正确率;
步骤2,针对增广后的数据,基于自适应高斯核的非局部均值进行图像去噪;
具体的,图像去噪的处理步骤包括如下:
步骤21,基于自适应高斯核框架,设置θi方向角作为图像的主方向,利用θi实现图像片的旋转匹配;
步骤22,设定两幅图像Ni和Nj的主方向分别为θi与θj,设定Δθi,j为练个方向角θi与θj的差值;
步骤23,若Δθi,j的数值是90的整数倍,交换图像Nj内像素进行图像的旋转转换;
步骤24,若Δθi,j的数值不是90的整数倍,扩大Nj的图像尺寸至可选取到新的图像邻域,进行图像的旋转转换;
步骤25,若Δθi,j的数值不超过2时,图像Ni和Nj为精准匹配,不执行图像的旋转转换;
具体的,所述anchor细化模块的构建通过剔除分类器的分类层,目标检测模块通过传输连接块的输出进行构建;
基于图像的旋转匹配,使得在当前图像片与目标图像片之间建立更高的相关性,从而发现更多相似的像素,较多的相似像素便于获得更好的去噪效果;
具体的,在通过计算相似距离进行可靠的相似权系数的获取过程中,基于自适应高斯核来计算相似距离,再关联旋转匹配相似性度量以及自适应高斯核权系数获取新的相似距离dK(i,j),具体公式如下所示:
上式中h(i)为局部自适应相似权重参数,即去噪结果可由下式计算:
具体的,本实施例的局部自适应相似权重参数选取方法基于图像残差估计,具体计算包括如下:
计算含有噪声的样本图像中各个像素的残差ri:
利用一个鲁棒的中值估计器估计图像局部区域的噪声标准σi,即:
其中,R={r1,r2,...,r|Ω(i)|},|Ω(i)|为图像内像素的总个数;设R′={r1,r2,...,r|s(i)|}为搜索区域S(i)内各点的残差估计,搜索区域内的噪声水平定义为σi=mean{R′}
局部自适应相似权重参数h(i)的定义为:
h(i)=ησi (10)
其中,常量η用于调控参数;
其中,η1=1.1,η2=1.6是经验值,通过实验优化得到;
参见图5,为本实施例采用的基于自适应高斯核的非局部均值的去噪方法与传统非局部方法权系数分布示意图,图中左侧是噪声图像,中间是传统非局部均值图像去噪权系数分布,右侧是基于自适应高斯核的非局部均值去噪权系数分布;
图像子块被噪声标准σ=20的高斯噪声污染,图中越亮的像素表示越大的权值;
从图中可以看出,基于自适应高斯核的非局部均值的去噪方法中具有相似边缘或纹理结构的像素被赋予较大的权值,即本实施例提出的权函数能够更有效地度量像素之间的相似性;
在纹理图像中基于自适应高斯核的非局部均值的去噪方法能够发现更多相似的像素,旋转匹配相似对比能够发现更多具有相似模式的图像片,保证基于自适应高斯核的非局部均值的去噪方法有更好的去噪效果;
步骤3,构建锚点anchor细化模块及目标检测模块,基于构建的模块进行网络结构优化;
所述网络结构包括anchor细化模块和目标检测模块,anchor细化模块用于移除负样本anchors,以便为分类器减少搜索空间,同时粗略调整anchors的位置和大小,以便为随后的回归器提供更好的初始化结果;目标检测模块用于根据细化后的anchors将结果回归到准确的目标位置,并预测多类别标签;
anchor细化模块的构建通过剔除分类器的分类层;目标检测模块通过传输连接块的输出进行构建;传输连接块后面接预测层,其生成目标类别的分数和相对于细化后的anchors的坐标偏移量;
anchor细化模块和目标检测模块基于传输连接块建立联系,将来自anchor细化模块的不同层的功能转换为目标检测模块所需的形式,以便目标检测模块可以共享来自anchor细化模块的特征;
在此特别说明的是,传输连接块用于与anchors相关联的特征图,传输连接块还通过将高级特征添加到传输的特征来继承大规模的上下文,以提高检测的准确性;为了使得大规模的上下文之间的维度相匹配,采用逆卷积操作来增大高级特征,再求和之后添加到卷积层以确保检测的特征的可辩性;
为了提高基于不同尺度下的各个特征层的单步回归预测目标的位置和大小的准确性,本实施例采用两步级联回归策略来回归目标的位置和大小,先通过anchor细化模块首次调整anchors的位置和大小,便于为目标检测模块的回归操作提供更好的初始化结果
更具体的,基于anchor细化模块调整anchors的具体位置及其大小,再通过目标检测模块进行回归操作,具体步骤包括如下:
步骤31,基于划分的图像特征图的单元,生成n个细化的anchorboxes;
步骤32,通过获取生成的n个细化的anchorboxes,将anchorboxes传递至目标检测模块的对应的特征图,生成目标类别和准确的目标位置和大小;
本实施例在计算2个类别分数和相对于细化anchorboxes的四个精确的偏移量,为每个细化anchorbox产生6个输出以实现检测任务;本实施例使用两步级联回归策略,即anchor细化模块生成细化后的anchorboxes,目标检测模块再将这些细化后的anchorboxes作为输入用于进一步检测,尤其针对小目标而言,使得检测结果更加精确;
具体的,本实施例还通过设计负样本过滤机制,拒绝已经被精准分类的负样本anchors,并调节样本失衡问题;
针对在训练阶段对于一个细化后的anchorbox,若其负置信度大于一个预先设置好的阈值θ,即可在训练ODM的过程中舍弃该anchor;优选的,本实施的θ设置为0.99;
通过传递经过细化后的负样本anchorboxes和正样本anchorboxes来训练目标检测模块;
针对在推理阶段,若存在一个经过细化后的anchorbox被赋予一个大于θ的负置信度,则该anchor将在目标检测模块的检测过程中舍弃;
步骤4,基于anchor细化模块及目标检测模块,进行深度学习神经网络模型机器训练;
具体的,训练基于设计的anchor细化模块和目标检测模块的深度学习神经网络模型,本实施例的损失函数包括anchor细化模块的损失以及目标检测模块的损失,对于anchor细化模块,为每个anchor赋予一个二元类标签,表明是一个目标或者不是一个目标,并且同时回归他的位子和大小,以获得一个细化的anchor;
将具有小于阈值的负置信度的细化后的anchors传递给目标检测模块以便进一步预测目标类别和准确的目标位子和大小;
损失函数定义如下:
pi和xi分别表示预测的anchori是一个目标的置信度和anchor细化模块中细化后的anchori的坐标;
ci和ti分别表示目标检测模块中预测的边界框的物体类别和坐标;
Narm和Nodm分别为anchor细化模块及目标检测模块中正样本的anchors数目,分类损失Lb是两个类别的交叉熵损失,多分类损失Lm是多个类别置信度的归一化指数函数损失;使用平滑L1损失作为回归损失Lr;
更具体的,为了处理不同尺度的目标,本发明实施例选取四个特种层,通过以VGG-16作为主干网络,步长大小分别为8,16,32和64像素,与预测的几种不同尺度的anchors进行关联;
选取的四个特征层均与一个特定的的anchors的尺度和三个纵横比(即0.5,1.0,2.0)相关联;特别说明的是,此处anchors的尺度为对应步长的四倍;
训练过程当中,根据Jaccard重叠觉得anchors和真实框质检的对应关系,针对性的对于网络模型进行端与端的训练;通过将每个真实框与和其最佳重叠分数的anchorboxes进行匹配,再将anchorboxes与和其重叠度高于0.5的任何真实框进行匹配;
步骤5,导入待诊断图像至训练完成的神经网络模型,进行图像数据处理分析和缺陷诊断;
具体的,通过将待诊断的目标图像导入训练完成的神经网络模型,进行图像数据处理分析和缺陷诊断,基于将待诊断识别的变电站渗漏油图像输入到训练完成的深度神经网络模型,验证本案的算法的准确度。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本申请中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离所述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
除说明书所述的技术特征外,其余技术特征为本领域技术人员的已知技术,为突出本发明的创新特点,其余技术特征在此不再赘述。
Claims (9)
1.一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,其特征在于,包括如下步骤:
获取原始图像,针对原始图像基于优化分类进行数据增广;
针对增广后的数据,基于自适应高斯核的非局部均值进行图像去噪;
构建锚点anchor细化模块及目标检测模块,基于构建的模块进行网络结构优化;
基于anchor细化模块及目标检测模块,进行深度学习神经网络模型机器训练;
导入待诊断图像至训练完成的神经网络模型,进行图像数据处理分析和缺陷诊断。
2.根据权利要求1所述的一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,其特征在于,所述基于优化分类的数据增广具体包括如下内容:
计算测试集合的所有类的分类正确率;
检索测试集合中的正确率最低的分类;
基于检索的正确率最低的分类进行数据增广处理。
3.根据权利要求1所述的一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,其特征在于,所述图像去噪的处理步骤包括如下:
基于自适应高斯核框架,设置θi方向角作为图像的主方向;
设定两幅图像Ni和Nj的主方向分别为θi与θj,设定Δθi,j为练个方向角θi与θj的差值;
若Δθi,j的数值是90的整数倍,交换图像Nj内像素进行图像的旋转转换;
若Δθi,j的数值不是90的整数倍,扩大Nj的图像尺寸至可选取到新的图像邻域,进行图像的旋转转换;
若Δθi,j的数值不超过2时,图像Ni和Nj为精准匹配,不执行图像的旋转转换。
4.根据权利要求1所述的一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,其特征在于,所述anchor细化模块的构建通过剔除分类器的分类层。
5.根据权利要求1所述的一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,其特征在于,所述目标检测模块通过传输连接块的输出进行构建。
6.根据权利要求4或5所述的一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,其特征在于,基于anchor细化模块调整anchors的具体位置及其大小,再通过目标检测模块进行回归操作,具体步骤包括如下:
基于划分的图像特征图的单元,生成n个细化的anchorboxes;
通过获取生成的n个细化的anchorboxes,将anchorboxes传递至目标检测模块的对应的特征图,生成目标类别和准确的目标位置和大小。
7.根据权利要求1所述的一种基于单阶段目标检测的变电站设备渗漏油图像识别方法,其特征在于,所述进行深度学习神经网络模型机器训练基于损失函数的计算,包括anchor细化模块的损失以及目标检测模块的损失。
8.一种基于单阶段目标检测的变电站设备渗漏油图像识别系统,其特征在于,所述系统包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器执行如权利要求1-7任一所述的一种基于单阶段目标检测的变电站设备渗漏油图像识别方法。
9.一种存储有计算机程序的计算机可读存储介质,其特征在于,该程序被处理器执行时实现如权利要求1-7任一所述的一种基于单阶段目标检测的变电站设备渗漏油图像识别方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910846731.0A CN110705601A (zh) | 2019-09-09 | 2019-09-09 | 基于单阶段目标检测的变电站设备渗漏油图像识别方法 |
PCT/CN2019/110026 WO2021046951A1 (zh) | 2019-09-09 | 2019-10-08 | 图像识别方法、系统及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910846731.0A CN110705601A (zh) | 2019-09-09 | 2019-09-09 | 基于单阶段目标检测的变电站设备渗漏油图像识别方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110705601A true CN110705601A (zh) | 2020-01-17 |
Family
ID=69195096
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910846731.0A Pending CN110705601A (zh) | 2019-09-09 | 2019-09-09 | 基于单阶段目标检测的变电站设备渗漏油图像识别方法 |
Country Status (2)
Country | Link |
---|---|
CN (1) | CN110705601A (zh) |
WO (1) | WO2021046951A1 (zh) |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111783941A (zh) * | 2020-06-07 | 2020-10-16 | 北京化工大学 | 一种基于概率置信度卷积神经网络的机械设备诊断分类方法 |
CN112036463A (zh) * | 2020-08-26 | 2020-12-04 | 国家电网有限公司 | 一种基于深度学习的电力设备缺陷检测识别方法 |
WO2021046951A1 (zh) * | 2019-09-09 | 2021-03-18 | 安徽继远软件有限公司 | 图像识别方法、系统及存储介质 |
CN113033322A (zh) * | 2021-03-02 | 2021-06-25 | 国网江苏省电力有限公司南通供电分公司 | 基于深度学习的变电站充油设备渗漏油隐患识别方法 |
CN113065416A (zh) * | 2021-03-16 | 2021-07-02 | 深圳供电局有限公司 | 集成于变电站视频监控装置的渗漏监测装置及方法、介质 |
CN114119594A (zh) * | 2021-12-06 | 2022-03-01 | 华能东莞燃机热电有限责任公司 | 一种基于深度学习的油液渗漏检测方法和检测装置 |
CN114241340A (zh) * | 2021-12-16 | 2022-03-25 | 北京工业大学 | 一种基于双路深度残差网络的图像目标检测方法及系统 |
CN115457297A (zh) * | 2022-08-23 | 2022-12-09 | 中国航空油料集团有限公司 | 航油油库漏油检测方法、装置及航油安全运维系统 |
CN116977826A (zh) * | 2023-08-14 | 2023-10-31 | 北京航空航天大学 | 一种边缘端计算架构下的可重构神经网络目标检测系统及方法 |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113011338B (zh) * | 2021-03-19 | 2023-08-22 | 华南理工大学 | 一种车道线检测方法及系统 |
TWI771010B (zh) * | 2021-05-20 | 2022-07-11 | 鴻海精密工業股份有限公司 | 缺陷檢測方法、電腦裝置及儲存介質 |
CN113627468B (zh) * | 2021-07-01 | 2024-06-21 | 浙江安防职业技术学院 | 基于无监督学习的非局部神经网络图像处理方法及系统 |
CN113670524B (zh) * | 2021-07-13 | 2023-12-19 | 江铃汽车股份有限公司 | 用于汽车碰撞燃油泄漏的检测方法及检测系统 |
CN113936158A (zh) * | 2021-10-13 | 2022-01-14 | 北京百度网讯科技有限公司 | 一种标签匹配方法及装置 |
CN114065847A (zh) * | 2021-11-04 | 2022-02-18 | 武汉纺织大学 | 一种基于改进RefineDet的织物疵点检测方法 |
CN114092424A (zh) * | 2021-11-12 | 2022-02-25 | 成都工业学院 | 一种基于端对端网络变电站设备漏油检测方法及系统 |
CN114693605A (zh) * | 2022-03-07 | 2022-07-01 | 重庆亲禾智千科技有限公司 | 一种基于deepstream的道路裂缝检测方法 |
CN114648685B (zh) * | 2022-03-23 | 2024-07-12 | 成都臻识科技发展有限公司 | 一种anchor-free算法转换为anchor-based算法的方法及系统 |
CN114820585A (zh) * | 2022-05-30 | 2022-07-29 | 福州大学 | 钢线圈头部检测识别方法 |
CN115393639B (zh) * | 2022-08-16 | 2023-08-11 | 广州市玄武无线科技股份有限公司 | 商品智能打标方法、系统、终端设备及可读存储介质 |
CN115481694B (zh) * | 2022-09-26 | 2023-09-05 | 南京星环智能科技有限公司 | 一种训练样本集的数据增强方法、装置、设备及存储介质 |
CN116150417B (zh) * | 2023-04-19 | 2023-08-04 | 上海维智卓新信息科技有限公司 | 一种多尺度多融合的图像检索方法及装置 |
CN116587327B (zh) * | 2023-06-20 | 2024-06-18 | 广东电网有限责任公司广州供电局 | 运动控制系统、带电作业机器人检测方法及相关设备 |
CN117781661B (zh) * | 2024-02-27 | 2024-05-14 | 广东金湾高景太阳能科技有限公司 | 一种基于d-lka网络模型的硅片烘干改善方法及其装置 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106340034A (zh) * | 2016-08-22 | 2017-01-18 | 成都信息工程大学 | 一种变压器漏油检测方法 |
CN207807703U (zh) * | 2017-10-30 | 2018-09-04 | 国网福建省电力有限公司 | 一种与巡检机器人结合的设备渗油检测装置 |
CN109325520A (zh) * | 2018-08-24 | 2019-02-12 | 北京航空航天大学 | 一种石油泄漏的检查方法、装置及系统 |
CN109780451A (zh) * | 2018-12-20 | 2019-05-21 | 国电大渡河沙坪水电建设有限公司 | 一种基于机器视觉的电厂调速器油路巡检方法 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104200442B (zh) * | 2014-09-19 | 2017-11-21 | 西安电子科技大学 | 基于改进的canny边缘检测的非局部均值MRI图像去噪方法 |
EP3234871B1 (en) * | 2014-12-17 | 2020-11-25 | Google LLC | Generating numeric embeddings of images |
CN107220618B (zh) * | 2017-05-25 | 2019-12-24 | 中国科学院自动化研究所 | 人脸检测方法及装置、计算机可读存储介质、设备 |
CN110705601A (zh) * | 2019-09-09 | 2020-01-17 | 安徽继远软件有限公司 | 基于单阶段目标检测的变电站设备渗漏油图像识别方法 |
-
2019
- 2019-09-09 CN CN201910846731.0A patent/CN110705601A/zh active Pending
- 2019-10-08 WO PCT/CN2019/110026 patent/WO2021046951A1/zh active Application Filing
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106340034A (zh) * | 2016-08-22 | 2017-01-18 | 成都信息工程大学 | 一种变压器漏油检测方法 |
CN207807703U (zh) * | 2017-10-30 | 2018-09-04 | 国网福建省电力有限公司 | 一种与巡检机器人结合的设备渗油检测装置 |
CN109325520A (zh) * | 2018-08-24 | 2019-02-12 | 北京航空航天大学 | 一种石油泄漏的检查方法、装置及系统 |
CN109780451A (zh) * | 2018-12-20 | 2019-05-21 | 国电大渡河沙坪水电建设有限公司 | 一种基于机器视觉的电厂调速器油路巡检方法 |
Non-Patent Citations (2)
Title |
---|
SHIFENG ZHANG ET AL.: ""Single-Shot Refinement Neural Network for Object Detection"", 《ARXIV》 * |
涂刚 等: ""一种改进的自适应非局部均值图像去噪方法"", 《控制工程》 * |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021046951A1 (zh) * | 2019-09-09 | 2021-03-18 | 安徽继远软件有限公司 | 图像识别方法、系统及存储介质 |
CN111783941B (zh) * | 2020-06-07 | 2024-03-29 | 北京化工大学 | 一种基于概率置信度卷积神经网络的机械设备诊断分类方法 |
CN111783941A (zh) * | 2020-06-07 | 2020-10-16 | 北京化工大学 | 一种基于概率置信度卷积神经网络的机械设备诊断分类方法 |
CN112036463A (zh) * | 2020-08-26 | 2020-12-04 | 国家电网有限公司 | 一种基于深度学习的电力设备缺陷检测识别方法 |
CN113033322A (zh) * | 2021-03-02 | 2021-06-25 | 国网江苏省电力有限公司南通供电分公司 | 基于深度学习的变电站充油设备渗漏油隐患识别方法 |
CN113065416A (zh) * | 2021-03-16 | 2021-07-02 | 深圳供电局有限公司 | 集成于变电站视频监控装置的渗漏监测装置及方法、介质 |
CN114119594A (zh) * | 2021-12-06 | 2022-03-01 | 华能东莞燃机热电有限责任公司 | 一种基于深度学习的油液渗漏检测方法和检测装置 |
CN114241340A (zh) * | 2021-12-16 | 2022-03-25 | 北京工业大学 | 一种基于双路深度残差网络的图像目标检测方法及系统 |
CN114241340B (zh) * | 2021-12-16 | 2024-05-10 | 北京工业大学 | 一种基于双路深度残差网络的图像目标检测方法及系统 |
CN115457297B (zh) * | 2022-08-23 | 2023-09-26 | 中国航空油料集团有限公司 | 航油油库漏油检测方法、装置及航油安全运维系统 |
CN115457297A (zh) * | 2022-08-23 | 2022-12-09 | 中国航空油料集团有限公司 | 航油油库漏油检测方法、装置及航油安全运维系统 |
CN116977826A (zh) * | 2023-08-14 | 2023-10-31 | 北京航空航天大学 | 一种边缘端计算架构下的可重构神经网络目标检测系统及方法 |
CN116977826B (zh) * | 2023-08-14 | 2024-03-22 | 北京航空航天大学 | 一种边缘端计算架构下的可重构神经网络目标检测方法 |
Also Published As
Publication number | Publication date |
---|---|
WO2021046951A1 (zh) | 2021-03-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110705601A (zh) | 基于单阶段目标检测的变电站设备渗漏油图像识别方法 | |
CN107944396B (zh) | 一种基于改进深度学习的刀闸状态识别方法 | |
TWI742382B (zh) | 透過電腦執行的、用於車輛零件識別的神經網路系統、透過神經網路系統進行車輛零件識別的方法、進行車輛零件識別的裝置和計算設備 | |
CN110647794B (zh) | 基于注意力机制的多尺度sar图像识别方法及装置 | |
WO2023155069A1 (zh) | 一种基于深度学习的手机电池表面缺陷检测方法 | |
CN110017901B (zh) | 一种电力系统中电气设备运行状态的红外图谱诊断方法 | |
CN110766058B (zh) | 一种基于优化rpn网络的战场目标检测方法 | |
CN109685765B (zh) | 一种基于卷积神经网络的x光片肺炎结果预测装置 | |
CN111239137B (zh) | 基于迁移学习与自适应深度卷积神经网络的谷物质量检测方法 | |
CN114972213A (zh) | 一种基于机器视觉的两阶段主板图像缺陷检测及定位方法 | |
CN115393687A (zh) | 一种基于双伪标签优化学习的rgb图像半监督目标检测方法 | |
CN114092793B (zh) | 适用于复杂水下环境的端到端生物目标检测方法 | |
CN113128564B (zh) | 一种基于深度学习的复杂背景下典型目标检测方法及系统 | |
CN117611932B (zh) | 基于双重伪标签细化和样本重加权的图像分类方法及系统 | |
CN116091823A (zh) | 一种基于快速分组残差模块的单特征无锚框目标检测方法 | |
CN103971362B (zh) | 基于直方图和精英遗传聚类算法的sar图像变化检测 | |
CN103235950B (zh) | 一种目标检测图像处理方法 | |
CN110751061B (zh) | 基于sar网络的sar图像识别方法、装置、设备和存储介质 | |
CN115953371A (zh) | 一种绝缘子缺陷检测方法、装置、设备和存储介质 | |
CN112001388B (zh) | 一种基于YOLOv3改进模型的用于检测PCB中圆形目标的方法 | |
CN112861670B (zh) | 一种输电线路金具检测方法及系统 | |
CN115223033A (zh) | 一种合成孔径声呐图像目标分类方法及系统 | |
CN114663751A (zh) | 一种基于增量学习技术的输电线路缺陷识别方法和系统 | |
CN113409351A (zh) | 基于最优传输的无监督领域自适应遥感图像分割方法 | |
CN112991257A (zh) | 基于半监督孪生网络的异质遥感图像变化快速检测方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200117 |
|
RJ01 | Rejection of invention patent application after publication |