CN109389180A - 一款基于深度学习的电力设备图像识别方法及巡查机器人 - Google Patents

一款基于深度学习的电力设备图像识别方法及巡查机器人 Download PDF

Info

Publication number
CN109389180A
CN109389180A CN201811278413.0A CN201811278413A CN109389180A CN 109389180 A CN109389180 A CN 109389180A CN 201811278413 A CN201811278413 A CN 201811278413A CN 109389180 A CN109389180 A CN 109389180A
Authority
CN
China
Prior art keywords
image
power equipment
data
sample
feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811278413.0A
Other languages
English (en)
Inventor
华国玉
任志
曾文达
杨杰民
葛冠呈
仇荣
徐钱平
陈诚
罗宝杰
贾顺虎
罗敏
李勇
魏浩
李玉淑
黄文辉
彭海恩
徐然
朱宇
曾祥赟
张信
何桂秀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
State Grid Sichuan Electric Power Co Ltd
Original Assignee
State Grid Sichuan Electric Power Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by State Grid Sichuan Electric Power Co Ltd filed Critical State Grid Sichuan Electric Power Co Ltd
Priority to CN201811278413.0A priority Critical patent/CN109389180A/zh
Publication of CN109389180A publication Critical patent/CN109389180A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • G06F18/2155Generating training patterns; Bootstrap methods, e.g. bagging or boosting characterised by the incorporation of unlabelled data, e.g. multiple instance learning [MIL], semi-supervised techniques using expectation-maximisation [EM] or naïve labelling
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/30Noise filtering

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computational Linguistics (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Health & Medical Sciences (AREA)
  • Mathematical Physics (AREA)
  • Computing Systems (AREA)
  • Molecular Biology (AREA)
  • Software Systems (AREA)
  • Multimedia (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一款基于深度学习的电力设备图像识别方法及巡查机器人,解决了现有的电力设备图像识别方法需要人工标注大量的样本数据,且对图像的特征提取过于单一,不能更好地描述图像的全局特征,图像识别准确率不高问题。本发明使用基于深度学习的电力设备图像识别方法,首先收集同一类型的电力设备样本图像数据,已标注样本数据集和未标注样本数据集,其次对样本数据进行预处理,然后使用卷积神经网络深度学习算法对图像数据进行特征提取,并进行基于半监督主动学习训练二元分类器模型训练,最后利用训练好的模型进行分类,输入待检测的实时图像数据进行识别,判断是正常或者异常图像数据,尽而得出电力设备的正常和异常情况。

Description

一款基于深度学习的电力设备图像识别方法及巡查机器人
技术领域
本发明涉及电力设备巡查技术领域,具体涉及一款基于深度学习的电力设备图像识别方法及巡查机器人。
背景技术
近年来,我国的全国电网逐步建成并完善,输电线路总长度和输送容量逐年增长。电力配网主要包括发电设备、输电设备、变电设备、配电设备和用电设备,配网过程中关键是设备保护。为确保输电线路的可靠性,及时发现线路损伤和隐患,电力部门必须定期对输电线路进行巡检。传统输电线路的巡检主要为人工巡检方式,此方式受到自然环境和巡检设备的制约,成本高、效率低、漏检率及误检率大,效果不佳。目前,电网视频监控系统作为智能电网的一个重要组成部分,广泛应用于电网的生产管理、输变电线路状态监测和维修等,但视频监控系统也存在一定的局限性,视频数据存储压力大、网络优势利用不充分等。
随着图像处理和计算机视觉技术的发展,使用计算机视觉识别电力设备,并且分析电力设备的日常运行状态在电力系统检测中发挥着越来越重要的作用,实时监测电力设备的运行状态尤为重要。
目前的电力设备中使用的图像识别分类方法中提取图像特征是图像识别的关键步骤,当图像背景简单且电力设备特征突出时,传统方法中采取的图像颜色特征、图像纹理特征和图像形状特征等可以获得比较理想的图像识别率。但是电力设备种类众多且颜色单一,输变电部门环境复杂,电力设备图像中复杂的背景对电力设备的识别准确率造成了较大影响,并且受拍摄角度、距离、光照和阴影变化的影响,同一种电力设备的外观会发生较大变化,这些问题使得传统的电力设备图像特征提取技术难以满足电力设备识别的需求和准确率的识别,另外,目前的电力设备中使用的图像识别分类方法需要人工标注大量的样本数据,耗时费力,经济成本高,且对图像的识别准确率也不是很理想,因此,我们急需一种电力设备巡检中使用的基于深度学习的图形图像识别方法,它直接作用于电力设备的原始数据,自动逐层地进行特征学习,更好地描述图像的全局特征,解决电力设备系统中海量非结构化图像数据的智能化分析和识别,进而提高不同电力设备图像识别的准确率,完成对电力设备事故的预警,保障电力设备的安全性。
发明内容
本发明所要解决的技术问题是:现有的电力设备图像识别方法需要人工标注大量的样本数据,耗时费力,经济成本高,且对图像的特征提取过于单一,不能更好地描述图像的全局特征,导致最终图像的识别准确率不高的问题,本发明提供了解决上述问题的一款基于深度学习的电力设备图像识别方法及巡查机器人。
本发明通过下述技术方案实现:
一种基于深度学习的电力设备图像识别方法,该方法包括以下步骤:
S1:收集同一类型的电力设备连续时间段内的样本图像数据,把收集到的同一类型的电力设备连续时间段内的样本图像数据分为两组,两组的比例为1:9,对样本图像数据少的一组进行数据标注并记作为已标注样本数据集L,对样本图像数据多的另一组不进行数据标注并记作为未标注样本数据集U;
S2:对步骤S1中所述同一类型的电力设备连续时间段内的样本图像数据进行预处理,去除图像数据噪声,增强图像数据的细节,提高图像数据的信噪比;
S3:对步骤S2中预处理后的图像数据使用卷积神经网络进行提取特征并建立特征向量,提取特征及建立特征向量步骤如下:
S31:建立带有5个卷积层和3个全连接层的卷积神经网络,其中最后一层全连接层与输入的电力设备图像维度相同,该网络所有权重均随机初始化;
S32:对步骤S31中提取的10维特征进行归一化处理,目的是使不同维度的图像特征能够在一个统一的标准下进行后续的计算;
S33:结合步骤S31与步骤S32,对3个全连接层中的前2个全连接层的输出建立电力设备图像的特征向量;
S4:对步骤S3提取的10维特征使用基于半监督主动学习训练二元分类器模型,二元分类器模型的训练步骤如下:
S41:采用3个相同的SVM分类器H1、H2、H3,利用随机采用bootstrap算法从已标注样本数据集L中获取有差异的训练数据子集T,进行初始分类器的训练;
S42:利用S41中的其中2个SVM分类器H1、H2协同训练,使用主动学习方法从未标注样本数据集U中挑选置信度高的未标注样本数据x进行标注,其熵值E(x),如此迭代地扩充第3个分类器H3的训练样本集来更新第3个分类器模型,并把熵值E(x)最大的并且完成标注的样本数据x加入到训练数据子集T中和已标注样本数据集L中,同时从未标注样本数据集U中减去该样本数据x;
S43:循环执行步骤S41与步骤S42直至未标注样本数据集U为空,模型训练结束;
S44:模型训练结束后,采用多数投票法对3个分类器H1、H2、H3集成,获得最终二元分类器模型;
S5:利用步骤S4训练好的二元分类器模型,输入待检测的实时图像数据进行识别,判断是正常或者异常图像数据,尽而得出电力设备的正常和异常情况。
在主动学习中,选择最富有信息的数据进行标注,每个未标注的样本点都被输入3个分量分类器中,而使得各个分量分类器的判断结果最不一致的样本点就是最富有信息的样本,在这里,这个不一致性的度量采用每个分量分类器对分类结果的投票熵Entropy(x)来确定,简写记为E(x),熵Entropy(x)的数学表达式如下:
其中,V(i)是类别i的投票数,c是总的分类类别数,k是分类器数,pi是未标注样本数据被标注为第c类的概率;本发明方法中,k=3,电力设备最终设置的分类类别为正常图片、异常图片这个两个类别,即c=2。
本发明上述方法的原理是:由于现有的电力设备图像识别方法需要人工标注大量的样本数据,耗时费力,经济成本高,且对图像的特征提取过于单一,不能更好地描述图像的全局特征,导致最终图像的识别准确率不高的问题,本发明上述方法为了更好地利用卷积神经网络算法自动学习描述图像的全局多维特征和未标注图像数据来提高分类的性能,结合半监督学习与主动学习来实现识别出正常和异常的电力设备,通过采用bootstrap随机获取有差异的已标注数据的子集,以此来保证分类器之间的差异;使用卷积神经网络提取综合反映电力设备的图像特征信息的特征,通过建立带有5个卷积层和3个全连接层的卷积神经网络,其中最后一层全连接层与输入的电力设备图像维度相同,该网络所有权重均随机初始化,并对提取的10维特征进行归一化处理,对3个全连接层中的前2个全连接层的输出建立电力设备图像的特征向量待后续使用;分类器训练过程为:首先利用其中两个分类器来对未标注图像数据进行标注,然后挑选置信度高的未标注图像数据样本加入到第三个分类器的训练集中,同时更新第三个分类器,最后不断地迭代直到收敛或者未标注图像数据为空,在每次迭代过程中,每个分类器的训练集扩大了,并且由主动学习产生的图像数据从另一个角度补充了标注样本,从而进一步增加了分类器之间的差异性,训练结束后,采用“少数服从多数”的原则对三个分类器集成,获取最终的分类模型,最后利用训练好的分类器模型,输入待检测的实时图像数据进行识别,判断是正常或者异常图像数据,尽而得出电力设备的正常和异常情况。
进一步地,考虑到由于电力设备种类众多且颜色单一,输变电部门环境复杂,电力设备图像中复杂的背景对电力设备的识别准确率造成了较大影响,并且受拍摄角度、距离、光照和阴影变化的影响,同一种电力设备的外观会发生较大变化,这些问题使得传统的电力设备单纯依靠图像颜色特征、图像纹理特征和图像形状特征等图像特征提取技术难以满足电力设备识别的需求和准确率的识别,于是步骤S3中提取了10维用于综合反映电力设备的图像特征信息的特征,具体包括图像颜色特征、图像纹理特征、图像形状特征、区域特征、边界特征、电力设备的最长使用寿命特征、电力设备的当前使用电压特征、电力设备的当前使用电流特征、温度特征和湿度特征;其中图像颜色特征、图像纹理特征、图像形状特征属于基础特征,区域特征、边界特征属于深度特征,电力设备的最长使用寿命特征、电力设备的当前使用电压特征、电力设备的当前使用电流特征、温度特征和湿度特征属于电力设备相关特征。
进一步地,步骤S2中,预处理包括图像降噪、边缘检测、图像压缩和图像分割,目的是对同一类型的电力设备样本图像数据去除干扰、噪声及差异,将原始图像变成适于计算机进行后续特征提取的形式。
一款基于图形图像识别的电网安全巡查机器人,使用所述的基于深度学习的电力设备图像识别方法。
收集了近3年的5种电力设备输电线电杆、输电线铁塔、绝缘子、变压器和断路器样本图像数据9600幅做实验,针对同一类型的电力设备样本图像数据,已标注数据集和未标注数据集的比例设置为1:9,对于每个数据集,30%作为测试数据,70%作为训练数据,采用了本发明中的基于深度学习的电力设备图像识别方法识别准确率达到了85.28%,识别准确率高,很好地利用大量的未标注数据,只需标注少量的样本数据,省时费力,经济成本低,与标注大量数据方法相比,同样条件下达到了对图像很好的识别准确率。
本发明具有如下的优点和有益效果:
1、本发明更好地利用卷积神经网络算法自动学习描述图像的全局多维特征和未标注图像数据来提高分类的性能,结合半监督学习与主动学习来实现识别出正常和异常的电力设备,通过采用bootstrap随机获取有差异的已标注数据的子集,以此来保证分类器之间的差异;
2、本发明使用卷积神经网络提取综合反映电力设备的图像特征信息的特征,通过建立带有5个卷积层和3个全连接层的卷积神经网络,其中最后一层全连接层与输入的电力设备图像维度相同,该网络所有权重均随机初始化,并对提取的10维特征进行归一化处理,对3个全连接层中的前2个全连接层的输出建立电力设备图像的特征向量待后续使用;
3、本发明分类器训练过程为首先利用其中两个分类器来对未标注图像数据进行标注,然后挑选置信度高的未标注图像数据样本加入到第三个分类器的训练集中,同时更新第三个分类器,最后不断地迭代直到收敛或者未标注图像数据为空,在每次迭代过程中,每个分类器的训练集扩大了,并且由主动学习产生的图像数据从另一个角度补充了标注样本,从而进一步增加了分类器之间的差异性,训练结束后,采用“少数服从多数”的原则对三个分类器集成,获取最终的分类模型,最后利用训练好的分类器模型,输入待检测的实时图像数据进行识别,判断是正常或者异常图像数据,尽而得出电力设备的正常和异常情况;
4、本发明对电力设备图像识别准确率高,为海量非结构化电力设备图像智能化分析提供了一种新的解决方法,并且更好地利用了大量未标注数据来提高了图像的识别准确率,经济成本低。
附图说明
此处所说明的附图用来提供对本发明实施例的进一步理解,构成本申请的一部分,并不构成对本发明实施例的限定。在附图中:
图1为本发明的基于深度学习的电力设备图像识别方法流程图。
图2为本发明的利用卷积神经网络算法提取图像特征流程图。
图3为本发明的基于半监督主动学习训练二元分类器模型训练图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,下面结合实施例和附图,对本发明作进一步的详细说明,本发明的示意性实施方式及其说明仅用于解释本发明,并不作为对本发明的限定。
实施例
如图1至图3所示,一种基于深度学习的电力设备图像识别方法,该方法包括以下步骤:
S1:收集同一类型的电力设备连续时间段内的样本图像数据,把收集到的同一类型的电力设备连续时间段内的样本图像数据分为两组,两组的比例为1:9,对样本图像数据少的一组进行数据标注并记作为已标注样本数据集L,对样本图像数据多的另一组不进行数据标注并记作为未标注样本数据集U;
S2:对步骤S1中所述同一类型的电力设备连续时间段内的样本图像数据进行预处理,去除图像数据噪声,增强图像数据的细节,提高图像数据的信噪比;
S3:对步骤S2中预处理后的图像数据使用卷积神经网络进行提取特征并建立特征向量,提取特征及建立特征向量步骤如下:
S31:建立带有5个卷积层和3个全连接层的卷积神经网络,其中最后一层全连接层与输入的电力设备图像维度相同,该网络所有权重均随机初始化;
S32:对步骤S31中提取的10维特征进行归一化处理,目的是使不同维度的图像特征能够在一个统一的标准下进行后续的计算;
S33:结合步骤S31与步骤S32,对3个全连接层中的前2个全连接层的输出建立电力设备图像的特征向量;
S4:对步骤S3提取的10维特征使用基于半监督主动学习训练二元分类器模型,二元分类器模型的训练步骤如下:
S41:采用3个相同的SVM分类器H1、H2、H3,利用随机采用bootstrap算法从已标注样本数据集L中获取有差异的训练数据子集T,进行初始分类器的训练;
S42:利用S41中的其中2个SVM分类器H1、H2协同训练,使用主动学习方法从未标注样本数据集U中挑选置信度高的未标注样本数据x进行标注,其熵值E(x),如此迭代地扩充第3个分类器H3的训练样本集来更新第3个分类器模型,并把熵值E(x)最大的并且完成标注的样本数据x加入到训练数据子集T中和已标注样本数据集L中,同时从未标注样本数据集U中减去该样本数据x;
S43:循环执行步骤S41与步骤S42直至未标注样本数据集U为空,模型训练结束;
S44:模型训练结束后,采用多数投票法对3个分类器H1、H2、H3集成,获得最终二元分类器模型;
S5:利用步骤S4训练好的二元分类器模型,输入待检测的实时图像数据进行识别,判断是正常或者异常图像数据,尽而得出电力设备的正常和异常情况。
考虑到由于电力设备种类众多且颜色单一,输变电部门环境复杂,电力设备图像中复杂的背景对电力设备的识别准确率造成了较大影响,并且受拍摄角度、距离、光照和阴影变化的影响,同一种电力设备的外观会发生较大变化,这些问题使得传统的电力设备单纯依靠图像颜色特征、图像纹理特征和图像形状特征等图像特征提取技术难以满足电力设备识别的需求和准确率的识别,于是步骤S3中提取了10维用于综合反映电力设备的图像特征信息的特征,具体包括图像颜色特征、图像纹理特征、图像形状特征、区域特征、边界特征、电力设备的最长使用寿命特征、电力设备的当前使用电压特征、电力设备的当前使用电流特征、温度特征和湿度特征;其中图像颜色特征、图像纹理特征、图像形状特征属于基础特征,区域特征、边界特征属于深度特征,电力设备的最长使用寿命特征、电力设备的当前使用电压特征、电力设备的当前使用电流特征、温度特征和湿度特征属于电力设备相关特征。
为了对同一类型的电力设备样本图像数据去除干扰、噪声及差异,将原始图像变成适于计算机进行后续特征提取的形式,步骤S2中,预处理包括图像降噪、边缘检测、图像压缩和图像分割。
一款基于图形图像识别的电网安全巡查机器人,使用所述的基于深度学习的电力设备图像识别方法。
本发明的工作原理是:为了更好地利用卷积神经网络算法自动学习描述图像的全局多维特征和未标注图像数据来提高分类的性能,结合半监督学习与主动学习来实现识别出正常和异常的电力设备,通过采用bootstrap随机获取有差异的已标注数据的子集,以此来保证分类器之间的差异;使用卷积神经网络提取综合反映电力设备的图像特征信息的特征,通过建立带有5个卷积层和3个全连接层的卷积神经网络,其中最后一层全连接层与输入的电力设备图像维度相同,该网络所有权重均随机初始化,并对提取的10维特征进行归一化处理,对3个全连接层中的前2个全连接层的输出建立电力设备图像的特征向量待后续使用;分类器训练过程为:首先利用其中两个分类器来对未标注图像数据进行标注,然后挑选置信度高的未标注图像数据样本加入到第三个分类器的训练集中,同时更新第三个分类器,最后不断地迭代直到收敛或者未标注图像数据为空,在每次迭代过程中,每个分类器的训练集扩大了,并且由主动学习产生的图像数据从另一个角度补充了标注样本,从而进一步增加了分类器之间的差异性,训练结束后,采用“少数服从多数”的原则对三个分类器集成,获取最终的分类模型,最后利用训练好的分类器模型,输入待检测的实时图像数据进行识别,判断是正常或者异常图像数据,尽而得出电力设备的正常和异常情况。
收集了近3年的5种电力设备输电线电杆、输电线铁塔、绝缘子、变压器和断路器样本图像数据9600幅做实验,针对同一类型的电力设备样本图像数据,已标注数据集和未标注数据集的比例设置为1:9,对于每个数据集,30%作为测试数据,70%作为训练数据,采用了本发明中的基于深度学习的电力设备图像识别方法识别准确率达到了85.28%,识别准确率高,很好地利用大量的未标注数据,只需标注少量的样本数据,省时费力,经济成本低,与标注大量数据方法相比,同样条件下达到了对图像很好的识别准确率。
以上所述的具体实施方式,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施方式而已,并不用于限定本发明的保护范围,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (4)

1.一种基于深度学习的电力设备图像识别方法,其特征在于:该方法包括以下步骤:
S1:收集同一类型的电力设备连续时间段内的样本图像数据,把收集到的同一类型的电力设备连续时间段内的样本图像数据分为两组,两组的比例为1:9,对样本图像数据少的一组进行数据标注并记作为已标注样本数据集L,对样本图像数据多的另一组不进行数据标注并记作为未标注样本数据集U;
S2:对步骤S1中所述同一类型的电力设备连续时间段内的样本图像数据进行预处理,去除图像数据噪声,增强图像数据的细节,提高图像数据的信噪比;
S3:对步骤S2中预处理后的图像数据使用卷积神经网络进行提取特征并建立特征向量,提取特征及建立特征向量步骤如下:
S31:建立带有5个卷积层和3个全连接层的卷积神经网络,其中最后一层全连接层与输入的电力设备图像维度相同,该网络所有权重均随机初始化;
S32:对步骤S31中提取的10维特征进行归一化处理;
S33:结合步骤S31与步骤S32,对3个全连接层中的前2个全连接层的输出建立电力设备图像的特征向量;
S4:对步骤S3提取的10维特征使用基于半监督主动学习训练二元分类器模型,二元分类器模型的训练步骤如下:
S41:采用3个相同的SVM分类器H1、H2、H3,利用随机采用bootstrap算法从已标注样本数据集L中获取有差异的训练数据子集T,进行初始分类器的训练;
S42:利用S41中的其中2个SVM分类器H1、H2协同训练,使用主动学习方法从未标注样本数据集U中挑选置信度高的未标注样本数据x进行标注,其熵值E(x),如此迭代地扩充第3个分类器H3的训练样本集来更新第3个分类器模型,并把熵值E(x)最大的并且完成标注的样本数据x加入到训练数据子集T中和已标注样本数据集L中,同时从未标注样本数据集U中减去该样本数据x;
S43:循环执行步骤S41与步骤S42直至未标注样本数据集U为空,模型训练结束;
S44:模型训练结束后,采用多数投票法对3个分类器H1、H2、H3集成,获得最终二元分类器模型;
S5:利用步骤S4训练好的二元分类器模型,输入待检测的实时图像数据进行识别,判断是正常或者异常图像数据,尽而得出电力设备的正常和异常情况。
2.根据权利要求1所述的一种基于深度学习的电力设备图像识别方法,其特征在于:步骤S3中提取的10维特征,包括图像颜色特征、图像纹理特征、图像形状特征、区域特征、边界特征、电力设备的最长使用寿命特征、电力设备的当前使用电压特征、电力设备的当前使用电流特征、温度特征和湿度特征;其中图像颜色特征、图像纹理特征、图像形状特征属于基础特征,区域特征、边界特征属于深度特征,电力设备的最长使用寿命特征、电力设备的当前使用电压特征、电力设备的当前使用电流特征、温度特征和湿度特征属于电力设备相关特征。
3.根据权利要求1所述的一种基于深度学习的电力设备图像识别方法,其特征在于:步骤S2中,预处理包括图像降噪、边缘检测、图像压缩和图像分割。
4.一款基于图形图像识别的电网安全巡查机器人,其特征在于:使用如权利要求1至3中任意一项所述的基于深度学习的电力设备图像识别方法。
CN201811278413.0A 2018-10-30 2018-10-30 一款基于深度学习的电力设备图像识别方法及巡查机器人 Pending CN109389180A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811278413.0A CN109389180A (zh) 2018-10-30 2018-10-30 一款基于深度学习的电力设备图像识别方法及巡查机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811278413.0A CN109389180A (zh) 2018-10-30 2018-10-30 一款基于深度学习的电力设备图像识别方法及巡查机器人

Publications (1)

Publication Number Publication Date
CN109389180A true CN109389180A (zh) 2019-02-26

Family

ID=65428087

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811278413.0A Pending CN109389180A (zh) 2018-10-30 2018-10-30 一款基于深度学习的电力设备图像识别方法及巡查机器人

Country Status (1)

Country Link
CN (1) CN109389180A (zh)

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109886232A (zh) * 2019-02-28 2019-06-14 燊赛(上海)智能科技有限公司 一种基于神经网络的电网图像识别系统
CN109902756A (zh) * 2019-03-07 2019-06-18 重庆恢恢信息技术有限公司 一种基于主动学习的众包机制辅助排序方法和系统
CN110096574A (zh) * 2019-05-07 2019-08-06 上海宝尊电子商务有限公司 电商评论分类任务中数据集的建立和后续优化及扩充方案
CN110738179A (zh) * 2019-10-18 2020-01-31 国家电网有限公司 一种电力设备的识别方法及相关装置
CN110738653A (zh) * 2019-10-18 2020-01-31 国网福建省电力有限公司检修分公司 电气设备图像差异检测预警方法
CN110838106A (zh) * 2019-10-31 2020-02-25 国网河北省电力有限公司电力科学研究院 一种对变电站二次设备图像识别软件的多维度评价方法
CN110962126A (zh) * 2019-12-06 2020-04-07 深圳优艾智合机器人科技有限公司 一种配电间智能机器人的作业方法及作业系统
CN111128373A (zh) * 2019-12-11 2020-05-08 上海交通大学 一种通过协同主动学习模型的乳腺癌数据标注方法
CN111144325A (zh) * 2019-12-28 2020-05-12 广东电网有限责任公司 变电站电力设备的故障识别定位方法、装置及设备
CN111402224A (zh) * 2020-03-12 2020-07-10 广东电网有限责任公司广州供电局 一种用于电力设备的目标识别方法
CN111523597A (zh) * 2020-04-23 2020-08-11 北京百度网讯科技有限公司 目标识别模型训练方法、装置、设备以及存储介质
CN111815567A (zh) * 2020-06-15 2020-10-23 国网上海市电力公司 一种高识别率电力设备自动标注方法和装置
CN112008716A (zh) * 2019-05-31 2020-12-01 发那科株式会社 学习线缆的状态的机器学习装置、机器人系统以及机器学习方法
CN112132819A (zh) * 2020-09-29 2020-12-25 国网上海市电力公司 一种基于人工智能的通信网管监控方法
CN112183303A (zh) * 2020-09-24 2021-01-05 南方电网数字电网研究院有限公司 变电设备图像分类方法、装置、计算机设备和介质
CN112307851A (zh) * 2019-08-02 2021-02-02 上海交通大学烟台信息技术研究院 一种电力铁塔上鸟巢的识别方法及系统
CN112348085A (zh) * 2020-11-06 2021-02-09 广西电网有限责任公司钦州供电局 一种电力数据监测系统与方法
CN112598073A (zh) * 2020-12-28 2021-04-02 南方电网深圳数字电网研究院有限公司 电网设备图像标注方法、电子设备及存储介质
CN113177614A (zh) * 2021-05-27 2021-07-27 广州白云电器设备股份有限公司 一种城市轨道交通供电开关柜图像识别系统及方法
CN113222983A (zh) * 2021-06-03 2021-08-06 北京有竹居网络技术有限公司 图像处理方法、装置、可读介质和电子设备
CN113392730A (zh) * 2021-05-31 2021-09-14 国网福建省电力有限公司 配电网设备图像识别方法及计算机可读存储介质
CN113869122A (zh) * 2021-08-27 2021-12-31 国网浙江省电力有限公司 一种配网工程强化管控方法
CN114402521A (zh) * 2019-09-27 2022-04-26 文雅能源公司 自发电式传感器、包括其的监视系统
CN115905807A (zh) * 2022-11-18 2023-04-04 中国市政工程西南设计研究总院有限公司 一种基于深度学习的粗格栅优化运行方法

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1571652A2 (en) * 2004-03-02 2005-09-07 AT&T Corp. Combining active and semi-supervised learning for spoken language understanding
CN101957325A (zh) * 2010-10-14 2011-01-26 山东鲁能智能技术有限公司 基于变电站巡检机器人变电站设备外观异常识别方法
CN102324046A (zh) * 2011-09-01 2012-01-18 西安电子科技大学 结合主动学习的四分类器协同训练方法
CN103150580A (zh) * 2013-03-18 2013-06-12 武汉大学 一种高光谱图像半监督分类方法及装置
CN104992184A (zh) * 2015-07-02 2015-10-21 东南大学 一种基于半监督极限学习机的多类图像分类方法
CN106094866A (zh) * 2016-07-22 2016-11-09 中国计量大学 一种无人机电力线路巡检装置及其使用方法
CN107644235A (zh) * 2017-10-24 2018-01-30 广西师范大学 基于半监督学习的图像自动标注方法
CN107977667A (zh) * 2016-10-21 2018-05-01 西安电子科技大学 基于半监督协同训练的sar目标鉴别方法
US20180152467A1 (en) * 2016-11-30 2018-05-31 Cisco Technology, Inc. Leveraging synthetic traffic data samples for flow classifier training
CN108416370A (zh) * 2018-02-07 2018-08-17 深圳大学 基于半监督深度学习的图像分类方法、装置和存储介质
US20180268262A1 (en) * 2017-03-15 2018-09-20 Fuji Xerox Co., Ltd. Information processing device and non-transitory computer readable medium

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1571652A2 (en) * 2004-03-02 2005-09-07 AT&T Corp. Combining active and semi-supervised learning for spoken language understanding
CN101957325A (zh) * 2010-10-14 2011-01-26 山东鲁能智能技术有限公司 基于变电站巡检机器人变电站设备外观异常识别方法
CN102324046A (zh) * 2011-09-01 2012-01-18 西安电子科技大学 结合主动学习的四分类器协同训练方法
CN103150580A (zh) * 2013-03-18 2013-06-12 武汉大学 一种高光谱图像半监督分类方法及装置
CN104992184A (zh) * 2015-07-02 2015-10-21 东南大学 一种基于半监督极限学习机的多类图像分类方法
CN106094866A (zh) * 2016-07-22 2016-11-09 中国计量大学 一种无人机电力线路巡检装置及其使用方法
CN107977667A (zh) * 2016-10-21 2018-05-01 西安电子科技大学 基于半监督协同训练的sar目标鉴别方法
US20180152467A1 (en) * 2016-11-30 2018-05-31 Cisco Technology, Inc. Leveraging synthetic traffic data samples for flow classifier training
US20180268262A1 (en) * 2017-03-15 2018-09-20 Fuji Xerox Co., Ltd. Information processing device and non-transitory computer readable medium
CN107644235A (zh) * 2017-10-24 2018-01-30 广西师范大学 基于半监督学习的图像自动标注方法
CN108416370A (zh) * 2018-02-07 2018-08-17 深圳大学 基于半监督深度学习的图像分类方法、装置和存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
吴浩鹏 等: "基于移动终端的电力设备智能巡检系统设计", 《计算机时代》 *

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109886232A (zh) * 2019-02-28 2019-06-14 燊赛(上海)智能科技有限公司 一种基于神经网络的电网图像识别系统
CN109902756A (zh) * 2019-03-07 2019-06-18 重庆恢恢信息技术有限公司 一种基于主动学习的众包机制辅助排序方法和系统
CN110096574A (zh) * 2019-05-07 2019-08-06 上海宝尊电子商务有限公司 电商评论分类任务中数据集的建立和后续优化及扩充方案
CN110096574B (zh) * 2019-05-07 2023-08-15 上海宝尊电子商务有限公司 电商评论分类任务中数据集的建立和后续优化及扩充方案
CN112008716A (zh) * 2019-05-31 2020-12-01 发那科株式会社 学习线缆的状态的机器学习装置、机器人系统以及机器学习方法
CN112307851A (zh) * 2019-08-02 2021-02-02 上海交通大学烟台信息技术研究院 一种电力铁塔上鸟巢的识别方法及系统
CN114402521A (zh) * 2019-09-27 2022-04-26 文雅能源公司 自发电式传感器、包括其的监视系统
CN110738179A (zh) * 2019-10-18 2020-01-31 国家电网有限公司 一种电力设备的识别方法及相关装置
CN110738653A (zh) * 2019-10-18 2020-01-31 国网福建省电力有限公司检修分公司 电气设备图像差异检测预警方法
CN110838106A (zh) * 2019-10-31 2020-02-25 国网河北省电力有限公司电力科学研究院 一种对变电站二次设备图像识别软件的多维度评价方法
CN110838106B (zh) * 2019-10-31 2023-04-14 国网河北省电力有限公司电力科学研究院 一种对变电站二次设备图像识别软件的多维度评价方法
CN110962126A (zh) * 2019-12-06 2020-04-07 深圳优艾智合机器人科技有限公司 一种配电间智能机器人的作业方法及作业系统
CN111128373A (zh) * 2019-12-11 2020-05-08 上海交通大学 一种通过协同主动学习模型的乳腺癌数据标注方法
CN111128373B (zh) * 2019-12-11 2023-06-27 上海交通大学 一种通过协同主动学习模型的乳腺癌数据标注方法
CN111144325A (zh) * 2019-12-28 2020-05-12 广东电网有限责任公司 变电站电力设备的故障识别定位方法、装置及设备
CN111402224A (zh) * 2020-03-12 2020-07-10 广东电网有限责任公司广州供电局 一种用于电力设备的目标识别方法
CN111402224B (zh) * 2020-03-12 2023-12-05 广东电网有限责任公司广州供电局 一种用于电力设备的目标识别方法
CN111523597A (zh) * 2020-04-23 2020-08-11 北京百度网讯科技有限公司 目标识别模型训练方法、装置、设备以及存储介质
CN111523597B (zh) * 2020-04-23 2023-08-25 北京百度网讯科技有限公司 目标识别模型训练方法、装置、设备以及存储介质
CN111815567A (zh) * 2020-06-15 2020-10-23 国网上海市电力公司 一种高识别率电力设备自动标注方法和装置
CN112183303A (zh) * 2020-09-24 2021-01-05 南方电网数字电网研究院有限公司 变电设备图像分类方法、装置、计算机设备和介质
CN112132819A (zh) * 2020-09-29 2020-12-25 国网上海市电力公司 一种基于人工智能的通信网管监控方法
CN112348085A (zh) * 2020-11-06 2021-02-09 广西电网有限责任公司钦州供电局 一种电力数据监测系统与方法
CN112348085B (zh) * 2020-11-06 2024-04-09 广西电网有限责任公司钦州供电局 一种电力数据监测系统与方法
CN112598073A (zh) * 2020-12-28 2021-04-02 南方电网深圳数字电网研究院有限公司 电网设备图像标注方法、电子设备及存储介质
CN113177614A (zh) * 2021-05-27 2021-07-27 广州白云电器设备股份有限公司 一种城市轨道交通供电开关柜图像识别系统及方法
CN113392730A (zh) * 2021-05-31 2021-09-14 国网福建省电力有限公司 配电网设备图像识别方法及计算机可读存储介质
CN113222983A (zh) * 2021-06-03 2021-08-06 北京有竹居网络技术有限公司 图像处理方法、装置、可读介质和电子设备
CN113869122A (zh) * 2021-08-27 2021-12-31 国网浙江省电力有限公司 一种配网工程强化管控方法
CN115905807A (zh) * 2022-11-18 2023-04-04 中国市政工程西南设计研究总院有限公司 一种基于深度学习的粗格栅优化运行方法
CN115905807B (zh) * 2022-11-18 2023-10-20 中国市政工程西南设计研究总院有限公司 一种基于深度学习的粗格栅优化运行方法

Similar Documents

Publication Publication Date Title
CN109389180A (zh) 一款基于深度学习的电力设备图像识别方法及巡查机器人
CN109359697A (zh) 一种电力设备巡检中使用的图形图像识别方法及巡查系统
CN108960140B (zh) 基于多区域特征提取和融合的行人再识别方法
CN109118479B (zh) 基于胶囊网络的绝缘子缺陷识别定位装置及方法
CN107358259B (zh) 基于GLOH描述子和GVF-Snake模型的绝缘子覆冰检测方法
CN108229550B (zh) 一种基于多粒度级联森林网络的云图分类方法
CN105445283A (zh) 一种绝缘子图像污秽状态检测方法
CN105718866A (zh) 一种视觉目标检测与识别方法
CN106557740B (zh) 一种遥感图像中油库目标的识别方法
CN114553475A (zh) 一种基于网络流量属性有向拓扑的网络攻击检测方法
CN113191253A (zh) 一种边缘机器学习下基于特征融合的非侵入式负荷识别方法
CN108919067A (zh) 一种用于gis局部放电模式的识别方法
CN111507413A (zh) 一种基于字典学习的城市管理案件图像识别方法
CN105654054A (zh) 基于半监督近邻传播学习和多视觉词典模型的智能视频分析方法
CN106127112A (zh) 基于dlle模型的数据降维与特征理解方法
CN104361135A (zh) 一种图像检索方法
CN115205256A (zh) 一种融合迁移学习的输电线路绝缘子缺陷检测方法及系统
CN109543546A (zh) 基于深度序分布回归的步态年龄估计方法
CN116246349A (zh) 一种基于渐进式子域挖掘的单源域领域泛化步态识别方法
CN102968618A (zh) 一种融合BoF模型和谱聚类算法的静态手势识别方法
CN116561692A (zh) 一种动态更新的实时量测数据检测方法
CN104008095A (zh) 一种基于语义特征提取与匹配的物体识别方法
CN112014821B (zh) 一种基于雷达宽带特征的未知车辆目标识别方法
CN111626329B (zh) 一种基于lda寻优多尺度纹理特征的绝缘管母故障诊断方法
CN113887448A (zh) 一种基于深度换装的行人重识别方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190226

RJ01 Rejection of invention patent application after publication