CN106226050A - 一种tfds故障自动识别方法 - Google Patents
一种tfds故障自动识别方法 Download PDFInfo
- Publication number
- CN106226050A CN106226050A CN201610561060.XA CN201610561060A CN106226050A CN 106226050 A CN106226050 A CN 106226050A CN 201610561060 A CN201610561060 A CN 201610561060A CN 106226050 A CN106226050 A CN 106226050A
- Authority
- CN
- China
- Prior art keywords
- fault
- network model
- positioning
- stage
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 57
- 238000012549 training Methods 0.000 claims abstract description 67
- 238000013527 convolutional neural network Methods 0.000 claims abstract description 40
- 230000001360 synchronised effect Effects 0.000 claims abstract description 27
- 238000000605 extraction Methods 0.000 claims abstract description 7
- 238000001514 detection method Methods 0.000 claims description 31
- 238000012360 testing method Methods 0.000 claims description 24
- 230000008569 process Effects 0.000 claims description 13
- 238000004364 calculation method Methods 0.000 claims description 4
- 238000005286 illumination Methods 0.000 claims description 4
- 238000003062 neural network model Methods 0.000 claims description 2
- 230000015556 catabolic process Effects 0.000 abstract 1
- 230000000694 effects Effects 0.000 description 8
- 238000011176 pooling Methods 0.000 description 6
- 238000013135 deep learning Methods 0.000 description 5
- 238000013461 design Methods 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 3
- 230000000903 blocking effect Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 238000007689 inspection Methods 0.000 description 3
- 238000010606 normalization Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 238000002372 labelling Methods 0.000 description 2
- 230000004807 localization Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000001537 neural effect Effects 0.000 description 2
- 238000010276 construction Methods 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 108090000623 proteins and genes Proteins 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
- G01M13/00—Testing of machine parts
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01M—TESTING STATIC OR DYNAMIC BALANCE OF MACHINES OR STRUCTURES; TESTING OF STRUCTURES OR APPARATUS, NOT OTHERWISE PROVIDED FOR
- G01M17/00—Testing of vehicles
- G01M17/08—Railway vehicles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/217—Validation; Performance evaluation; Active pattern learning techniques
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Theoretical Computer Science (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Computational Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- General Engineering & Computer Science (AREA)
- Life Sciences & Earth Sciences (AREA)
- Image Analysis (AREA)
Abstract
本发明公开了一种TFDS故障自动识别方法,该方法基于深度学习理论,由一个二级级联的卷积神经网络模型构成:第一级为多类易故障区域同步定位的网络模型,结合多故障区域的空间相互位置关系约束,实现多故障目标区域同步精确定位;第二级为故障判别网络模型,对第一级定位的区域实现故障和非故障的判断。本发明提供的TFDS多类故障同步自动识别方法无需针对不同故障分别设计识别方法,借助深度学习中的卷积神经网络理论,通过学习训练的方式自适应地抽取特征,能够对多故障进行同步定位和故障判断,且具有高效性和强鲁棒性。
Description
技术领域
本发明涉及铁路检测领域,特别涉及货车故障轨边图像的故障自动识别方法。
背景技术
为了推进铁路现代化建设,提高列检故障发现率,降低列检人员劳动强度,原铁道部大力推广了一系列列车运行故障图像动态检测系统。目前,货车运行故障图像动态检测系统(TFDS)已在全路推广使用,通过布置在轨道上的多个工业相机对运行列车的两侧和底部进行图像采集,通过专用网络将图像传输至监控室服务器。在监控室,列检人员通过图像复示终端软件观察所采集图像,判断是否存在故障。然而,TFDS系统只负责采集、传输、存储图像,由于故障的复杂和多样性以及图像质量的影响,TFDS还不能实现对故障的自动识别。
在TFDS故障自动识别方面,一些学者针对某些特定故障提出了一些故障自动识别方法。孙国栋等在专利号为201210558987.X的发明专利“一种TFDS挡键丢失故障自动识别方法”中提出了一种TFDS挡键丢失故障自动识别方法,该方法通过Hough圆变换来对列车轮轴和通孔进行定位,并依据轮轴、通孔以及挡键区域间的几何关系间接标定挡键目标区域,再根据挡键目标区域的灰度级变化来判断挡键是否丢失。张益等在专利号为201110166974.3的发明专利“一种货车下心盘螺栓丢失故障识别装置及其识别方法”中提出了一种心盘螺栓丢失的故障识别方法,该方法首先定位候选区域,接着提取候选区域图像特征,再对特征数据进行识别运算。通常,大多数故障识别的过程分为两步:目标区域的定位和故障判定。目标区域的定位是故障识别的第一步,且在故障判定中起着关键性的作用。现有目标区域的定位方法大多数基于模板匹配、图像分割、边缘检测等方法,而故障判定主要基于人工特征提取特征的方法。通常,这些方法需要大量的工程经验和先验知识,且需要针对不同类别的故障分别设计算法,通常效率不高。
近几年,深度学习在语音识别、视觉目标识别、目标检测以及一些其它领域例如医药发现和基因检测中取得了重大的进展。基于深度学习理论的关键在于特征提取和特征表达不需要人工设计特征提取器,而通过从大量数据的学习中自动获取所需的特征表达。深度网络能够实现高度复杂的函数表达,因此能够解决一些更难的问题。
基于深度学习理论的卷积神经网络(CNN)已经广泛应用在机器视觉和图像识别领域。CNN输入原始图像数据,并使用一个多层的网络结构自动发现所需的特征表达。CNN在发现图像的本质特征展现了卓越的能力,因此能够在机器视觉和图像识别领域取得惊人的成果,具体包括行人检测、人脸识别、人脸关键点识别、交通标志识别、人体姿态识别、场景分析、目标检测等。LeCun等人在文章“Gradient-based learning applied to documentrecognition[J].Proceedings of the IEEE,Volume 86,Issue 11,1998,Pages2278-2324”首先提出了一个经典的5层CNN网络(LeNet-5),在当时用于美国银行中的支票识别。在图像分类领域,基于CNN的识别系统已经获得了惊人的成就,尤其在大型图像分类任务中。微软亚洲研究院的计算机视觉组研究了一个基于极深的CNN视觉系统,并在ImageNet数据集上获得了超过人眼的辨识力。
从上述分析可以看出,现有的故障自动识别方法主要基于人工特征提取,这些方法需要大量的工程经验和先验知识,且需要针对不同类别的故障分别设计算法,通常效率不高。深度学习中的卷积神经网络在图像识别领域中展现出惊人的效果,基于卷积神经网络实现故障自动识别,使用一个统一的方法对故障进行检测,能实现多故障的同步检测,具有高效性,同时对由于环境等因素造成质量不佳的图像仍具有较好的效果。
发明内容
有鉴于此,本发明的主要目的在于提供一种TFDS故障自动识别方法,能够对多类别故障同步检测及判别,提高故障检测的效率、故障识别准确率,不需要复杂的人工设计特征提取器过程,仅通过学习训练的方式自适应获取所需特征表达,最终实现多故障的同步自动识别。
为达到上述目的,本发明的技术方案是这样实现的:
一种TFDS故障自动识别方法,由一个二级级联的基于卷积神经网络模型构成,第一级为多类易故障区域同步定位的网络模型,实现多类易故障区域的同步定位;第二级为故障判别网络模型,对第一级网络模型中定位的区域进行故障和非故障的判断;二级级联的模型能够实现对多类故障进行先定位后判断的同步故障自动识别,具体包括以下步骤:
a、收集铁路货车故障图像动态检测系统,即TFDS采集的图像,建立训练样本集和测试样本集,对训练样本集制作标注文件,并对训练样本集将待检测的目标区域裁剪并先按类别归类,每个类别再按故障和非故障归类;
b、建立第一级多类易故障区域同步定位的网络模型,使用步骤a中的训练样本集、测试样本集及标注文件针对多类易故障区域对所述多类易故障区域同步定位的网络模型进行训练;
c、建立目标区域的空间位置关系约束,结合已训练的第一级多类易故障区域同步定位的网络模型,利用目标区域的空间位置关系约束精确定位待检测的目标区域;
d、建立第二级故障判别的网络模型,并用步骤a中裁剪且归类好的待检测的目标区域针对不同故障类别对所述故障判别的网络模型分别进行训练,步骤b和c定位出待检测目标区域,本步骤训练好的故障判别网络模型对待检测目标区域进行故障或非故障的判断,得到故障和非故障的判别概率;
e、级联步骤b和c的易故障目标区域的定位和步骤d的故障判别过程,将训练好的第一级多类易故障区域同步定位的网络模型和训练好的第二级多类故障判别的网络模型级联,第一级模型输出的待检测目标区域输入第二级相应故障类别的模型中进行判断,实现对多类故障的先定位后判断的同步故障自动识别。
步骤e所述的对多类故障的先定位后判断的同步故障自动识别过程采用端对端的形式,即输入TFDS采集的原始图像,直接输出故障的判别结果,对多故障的同步自动识别,其中,具体级联的过程为:第一级为一个多类易故障区域同步定位的网络模型,此模型的输出经过空间位置关系的约束获得精确定位的目标区域;第一级连接第二级多个训练好的故障判别网络模型,第一级输出的目标区域,根据目标区域的类别输入第二级相应的故障判别网络模型中进行故障判断。
所述步骤b中多类易故障区域同步定位的网络模型对一幅图像的输出包括:图像中目标区域在图像的像素坐标及目标区域对所有类别的置信度,即属于每类待检测故障类别的概率,该目标区域所属类别为置信度最高的对应类别,此类别决定了该目标区域在第二级所对应的故障判别网络模型。
所述步骤c中根据铁路货车多故障区域的空间位置关系增加空间位置约束,用于进一步定位低置信度的目标区域,提高定位的准确度。
所述步骤d中训练故障判别的网络模型,是对该网络模型分别训练不同类别的故障,使用的训练样本是所述步骤a中相应类别的故障和非故障裁剪区域,第二级网络模型的个数与待判定的故障类别数相同。
所述步骤b中的多类易故障区域同步定位的网络模型基于区域预测的目标检测模型,所述目标检测模型由两个卷积神经网络模型构成,一个卷积神经网络模型用于区域预测,另一卷积神经网络模型用于目标检测;用于目标检测的卷积神经网络模型对用于区域预测的卷积神经网络模型的输出的预测区域进行区域类别概率计算及矩形框的回归;两个卷积神经网络模型共享图像特征提取层。
可以仅使用一个卷积神经网络模型实现不同类别故障的判别,只需要针对不同类别的故障分别训练即可。
步骤a所述标注文件需要针对训练样本集中的每幅图像制作标注文件,标注文件的信息包括:图像名称、图像包含的目标类别、以及每个目标类别在图像中的位置,训练样本集、测试样本集、标注文件用于第一级多类易故障区域同步定位的网络模型的训练,裁剪的待检测目标区域为第二级故障判别的网络模型的训练样本;调整不同光照、对比度、旋转角、裁剪框的大小裁剪待检测目标区域来增加第二级故障判别的网络模型训练样本,提高第二级故障判别的网络模型的鲁棒性。
本发明提供的TFDS故障自动识别方法,包括易故障目标区域定位和故障判别两阶段,提出了基于卷积神经网络目标检测模型与多故障区域的空间相互位置关系相结合的多故障目标区域同步精确定位模型,建立了故障判别的多层卷积神经网络模型。该方法采用一个级联的模型:首先,第一级的多类易故障区域同步定位的网络模型,结合多故障区域的空间相互位置关系的约束实现易故障目标区域的精确定位;第二级为故障判别网络模型,对第一级定位的区域对不同类别分别实现故障和非故障的判断,该二级级联的模型能够实现对多类故障进行先定位后判断的同步故障自动识别。该方法能够实现铁路货车多故障的高效地检测,并对平移、噪声、光照等由外界环境引起的图像质量的变化有着很强的鲁棒性。
本发明与现有技术相比的优点在于:本发明提供的TFDS多类故障同步自动识别方法无需针对不同故障分别设计识别方法,借助深度学习中的卷积神经网络理论,通过学习训练的方式自适应地抽取特征,能够对多故障进行同步定位和故障判断,且具有高效性和强鲁棒性。
附图说明
图1为本发明TFDS故障自动识别方法的总体实现流程图;
图2为基于卷积神经网络的多类易故障区域同步定位网络模型,其中(a)为区域预测的网络模型,(b)为目标检测的网络模型;
图3为基于卷积神经网络的故障判别的网络模型;
图4为轴端螺栓、挡键的级联故障识别系统;
图5为挡键、轴端螺栓测试集检测定位效果;
图6为用于训练故障判别网络模型的挡键和轴端螺栓样本,其中(a)为无故障轴端螺栓样本,(b)为故障轴端螺栓样本,(c)为无故障挡键样本,(d)为故障挡键样本。
具体实施方式
以下结合附图及具体实施例对本发明再作进一步详细的说明。
图1为本发明TFDS故障自动识别方法的总体实现流程图,如图1所示,本发明的故障自动识别方法包括以下步骤:
步骤11:收集图像,建立训练样本集和测试样本集,并制作训练样本集标注文件,对训练样本集将待检测的目标区域裁剪并归类。
收集铁路货车故障图像动态检测系统(即TFDS)采集的图像,训练样本集和测试样本集均随机选取,测试样本集中的图像是独立于训练样本集的,两者所包含的图像无交叉。
对训练集的每幅图像制作详细的标注,标注信息包括:图像名称、图像包含的目标类别、以及每个目标类别在图像中的位置,其中位置信息包含4个元素:目标框的左上角和右下角像素坐标。训练样本集、测试样本集、标注文件用于第一级多类易故障区域同步定位的网络模型的训练。
对训练样本集将待检测的目标区域裁剪并归类,先按类别归类,再针对每个类别按故障和非故障归类,该裁剪的区域为第二级故障判别网络模型的训练样本。为了提高第二级网络模型的鲁棒性,调整不同光照、对比度、旋转角、裁剪框的大小裁剪目标区域,增加第二级网络模型训练样本。
步骤12:建立并训练第一级基于卷积神经网络的多类易故障区域同步定位的网络模型。
如图2所示,易故障区域同步定位的网络模型基于Faster RCNN网络模型,该网络模型由两个卷积神经网络模型构成,一个网络模型用于区域预测,另一网络模型用于目标检测。目标检测网络模型对区域预测网络模型输出的预测区域进行区域类别概率计算及矩形框的回归,两个网络共享CNN特征提取层,CNN特征提取采用一个VGG16的网络。具体过程在文章“Faster R-CNN:Towards real-time object detection with region proposalnetworks[C],Advances in neural information processing systems.2015,Montreal,Canada”中有详细描述。
训练易故障区域同步定位的网络模型:使用步骤11中的训练样本集和标注文件同时训练多个易故障区域。采用反向传播和随机梯度下降算法训练步骤12中的易故障区域定位的网络,具体训练算法原理参见Bouvrie的文章“Notes on Convolutional NeuralNetworks[J].Neural Nets,2006”。
调整训练参数的初始化方式,以及学习速率方案、迭代次数等超参数,直至网络收敛,训练结束。对训练好的网络模型使用步骤11中的测试样本集进行测试,检验该易故障区域网络模型的效果,若效果不好则需要调整超参数重新训练。
步骤13:建立空间位置关系的约束,结合步骤12已训练的易故障区域同步定位网络模型,精确定位待检测的目标区域。
通常在货车铁路中一些目标的空间位置关系相对固定,充分利用该优势进一步提高目标区域定位的准确度。TFDS侧轨相机采集的图像中,根据轴端螺栓、挡键、端头螺栓这三类目标区域的空间位置相对固定,因此在本模型中当步骤12检测的挡键的置信度低于0.8时,增加空间位置关系的约束。即根据轴端螺栓、端头螺栓定位的位置坐标,以及它们与挡键的相对位置关系来确定挡键的位置坐标。
步骤14:建立并训练第二级基于卷积神经网络的故障判别的网络模型。
根据实际故障判别任务建立一个故障判别的网络模型,确定该网络的大小、网络层数、网络深度、网络的输入输出、以及卷积核模板大小和个数、池化窗口大小等网络结构设置。
本模型中建立的基于卷积神经网络的故障判别网络模型结构如图3所示,该网络模型是一个二分类网络模型,即网络模型仅对输入图像分成2类,即故障和非故障的分类。网络模型包括5层卷积层,2层全连接层,4层池化层,3层局部归一化层和一个最后的输出层,其中,池化层均采用最大值池化操作,2x2的窗口,全连接层使用Dropout技术防止过拟合,输出层仅包含两个神经元,即故障和非故障的概率。该网络模型首先对输入图像调整为216x216的大小,然后经过多层卷积层、池化层、LRN局部归一化层,再经过2层全连接层,到最后的输出,具体各层卷积核个数、大小及卷积步长如图3所示。其中,LRN局部归一化及Dropout技术见Krizhevsky的文章“Imagenet classification with deep convolutionalneural networks[C],Advances in neural information processing systems.2012,Lake Tahoe,USA”。
训练该故障判别网络模型:步骤11中裁剪且归类好的待检测的目标区域针对不同故障类别对所述故障判别的网络模型分别进行训练。调整训练参数的初始化方式,以及学习速率方案、迭代次数等超参数,直至网络收敛,训练结束。将步骤12和13对测试样本集定位的目标区域对该故障判别的网络模型进行测试,检验该易故障区域网络模型的效果,若效果不好则需要调整超参数重新训练。
步骤15:将第一级训练好的易故障区域定位的网络模型和第二级训练好的故障判别网络模型级联,实现故障区域的先定位后判断。
将第一级训练好的多类易故障区域同步定位的网络模型和第二级训练好的多类故障判别的网络模型级联,第一级模型输出的待检测目标区域输入第二级相应故障类别的模型中进行判断,实现对多类故障的先定位后判断的同步故障自动识别。
对一幅待检测的图像的故障自动识别过程可以描述为:首先经过第一级网络模型进行易故障区域的定位,输出该图像中易故障目标的区域及每个区域所属类别的置信度,该目标区域可能是多类易故障目标的区域,接着结合某些部件的空间位置关系约束对某些定位置信度低的目标区域做一定的调整,最后根据定位目标区域的类别分别输入第二级相应类别训练好的故障网络模型中,进行故障、非故障的判断,最终实现多类故障的同步自动识别。
为了说明本发明的TFDS故障自动识别方法,以一具体故障检测实例进行说明:
图4所示为轴端螺栓、挡键的故障识别系统。这两类故障在铁路货车中属于高发故障,轴端螺栓容易发生丢失、脱落故障,而挡键容易发生丢失故障。
按图1所述步骤对轴端螺栓、挡键的故障进行识别,过程为:
随机挑选出训练图像和测试图像构建训练样本集和测试样本集,对训练样本集中的每幅图像进行轴端螺栓、挡键两类易故障区域的标注,此外还增加一类端头螺栓区域的标注,端头螺栓用于后续空间位置关系的约束来提高挡键定位的精确度。
根据步骤12的训练方法训练图2的易故障区域定位模型。本实例中训练参数采用ImageNet预训练好的参数初始化CNN卷积池化层,其他层采用0均值高斯分布初始化;学习速率采用的方案是:初始化学习速率为10-3,之后每迭代10000次下降为原来的0.1;迭代次数设置为20000次。
将测试样本集输入训练好的易故障区域定位模型中,设定置信度阈值为0.8,由于挡键丢失前后图像差别较大,在故障样本较少的情况下,若只采用无故障的正样本训练,训练的网络将不具备代表性;同时,挡键与两类螺栓的位置关系相对固定。因此,为了提高检测的精度,本文利用空间位置关系约束来进一步定位挡键的区域。根据轴端螺栓、挡键、端头螺栓这三类目标区域的空间位置相对固定,因此在本模型中当检测的挡键的置信度低于0.8时,增加空间位置关系的约束。假设每个目标的位置包括4个预测值(xl,yl,xr,yr),其中(xl,yl)和(xr,yr)分别代表预测框左上角和右下角像素坐标。假设检测到的轴端螺栓和挡键的位置分别表示为和根据轴端螺栓、挡键、端头螺栓这三类目标区域的一些先验知识和目标相对位置关系,增加一个约束,得到挡键的位置,其表示为计算方法如下:
其中,为求最小值函数,为符号函数,abs(a)=|a|为取绝对值函数,W,H为原图像的宽度和高度,wsfk,hsfk为计算得到的挡键宽度和高度,α,β,γ,δ为调节参数,本发明中一组设定的值为α=0.013,β=-0.01,γ=0.006,δ=0.025。
测试样本集轴端螺栓、挡键的区域定位效果如图5所示,结果如表1所示。由表1可知,基于卷积神经网络的易故障区域定位模型结合空间位置关系的约束对轴端螺栓、挡键区域的定位准确率和召回率均为100%,也就是说,能够全部将待判别的目标区域检测并定位出来。
表1 测试集轴端螺栓、挡键的区域检测结果
对训练样本中提取的轴端螺栓和挡键区域按照步骤11裁剪及归类后按照步骤14的训练方法训练图3的故障判别网络模型。所有层的训练参数均采用0均值高斯分布初始化;学习速率采用的方案是:初始化学习速率为10-2,之后每迭代5000次下降为原来的0.1;迭代次数设置为10000次。训练后得到两个网络模型:轴端螺栓故障判别网络模型和挡键故障判别网络模型,这两个网络模型的结构均相同,只是权值参数不同。
部分轴端螺栓和挡键区域的训练样本如图6所示。采用图3的网络对轴端螺栓和挡键分别训练,用于该类别故障/非故障的判别,轴端螺栓和挡键的故障判别过程是分开但并行进行的。对轴端螺栓和挡键分别训练好故障判别模型后,对测试样本中提取的轴端螺栓和挡键区域进行故障判断的测试,结果如表2所示。
表2 故障判别测试结果
其中,表2中漏检的轴端螺栓由于该图像过曝光,轴端螺栓区域泛白,即便是人眼都难以辨认是否故障。因此,总体上看来,该模型对轴端螺栓和挡键的故障判别有着很高的准确率,零错检率以及极低的漏检率。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。
Claims (8)
1.一种TFDS故障自动识别方法,其特征在于,该方法由一个二级级联的基于卷积神经网络模型构成,第一级为多类易故障区域同步定位的网络模型,实现多类易故障区域的同步定位;第二级为故障判别网络模型,对第一级网络模型中定位的区域进行故障和非故障的判断;二级级联的模型能够实现对多类故障进行先定位后判断的同步故障自动识别,具体包括以下步骤:
a、收集铁路货车故障图像动态检测系统,即TFDS采集的图像,建立训练样本集和测试样本集,对训练样本集制作标注文件,并对训练样本集将待检测的目标区域裁剪并先按类别归类,每个类别再按故障和非故障归类;
b、建立第一级多类易故障区域同步定位的网络模型,使用步骤a中的训练样本集、测试样本集及标注文件针对多类易故障区域对所述多类易故障区域同步定位的网络模型进行训练;
c、建立目标区域的空间位置关系约束,结合已训练的第一级多类易故障区域同步定位的网络模型,利用目标区域的空间位置关系约束精确定位待检测的目标区域;
d、建立第二级故障判别的网络模型,并用步骤a中裁剪且归类好的待检测的目标区域针对不同故障类别对所述故障判别的网络模型分别进行训练,步骤b和c定位出待检测目标区域,本步骤训练好的故障判别网络模型对待检测目标区域进行故障或非故障的判断,得到故障和非故障的判别概率;
e、级联步骤b和c的易故障目标区域的定位和步骤d的故障判别过程,将训练好的第一级多类易故障区域同步定位的网络模型和训练好的第二级多类故障判别的网络模型级联,第一级模型输出的待检测目标区域输入第二级相应故障类别的模型中进行判断,实现对多类故障的先定位后判断的同步故障自动识别。
2.根据权利要求1所述的方法,其特征在于:步骤e所述的对多类故障的先定位后判断的同步故障自动识别过程采用端对端的形式,即输入TFDS采集的原始图像,直接输出故障的判别结果,实现对多故障的同步自动识别,其中,具体级联的过程为:第一级为一个多类易故障区域同步定位的网络模型,此模型的输出经过空间位置关系的约束获得精确定位的目标区域;第一级连接第二级多个训练好的故障判别网络模型,第一级输出的目标区域,根据目标区域的类别输入第二级相应的故障判别网络模型中进行故障判断。
3.根据权利要求1或2所述的方法,其特征在于,所述步骤b中多类易故障区域同步定位的网络模型对一幅图像的输出包括:图像中目标区域在图像的像素坐标及目标区域对所有类别的置信度,即属于每类待检测故障类别的概率,该目标区域所属类别为置信度最高的对应类别,此类别决定了该目标区域在第二级所对应的故障判别网络模型。
4.根据权利要求1或3所述的方法,其特征在于,所述步骤c中根据铁路货车多故障区域的空间位置关系增加空间位置约束,用于进一步定位低置信度的目标区域,提高定位的准确度。
5.根据权利要求1或2所述的方法,其特征在于,所述步骤d中训练故障判别的网络模型,是对该网络模型分别训练不同类别的故障,使用的训练样本是所述步骤a中相应类别的故障和非故障裁剪区域,第二级网络模型的个数与待判定的故障类别数相同。
6.根据权利要求1所述的方法,其特征在于,所述步骤b中的多类易故障区域同步定位的网络模型基于区域预测的目标检测模型,所述目标检测模型由两个卷积神经网络模型构成,一个卷积神经网络模型用于区域预测,另一卷积神经网络模型用于目标检测;用于目标检测的卷积神经网络模型对用于区域预测的卷积神经网络模型的输出的预测区域进行区域类别概率计算及矩形框的回归;两个卷积神经网络模型共享图像特征提取层。
7.根据权利要求1或5所述的方法,其特征在于:可以仅使用一个卷积神经网络模型实现不同类别故障的判别,只需要针对不同类别的故障分别训练即可。
8.根据权利要求1所述的方法,其特征在于:步骤a所述标注文件需要针对训练样本集中的每幅图像制作标注文件,标注文件的信息包括:图像名称、图像包含的目标类别、以及每个目标类别在图像中的位置,训练样本集、测试样本集、标注文件用于第一级多类易故障区域同步定位的网络模型的训练,裁剪的待检测目标区域为第二级故障判别的网络模型的训练样本;调整不同光照、对比度、旋转角、裁剪框的大小裁剪待检测目标区域来增加第二级故障判别的网络模型训练样本,提高第二级故障判别的网络模型的鲁棒性。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610561060.XA CN106226050B (zh) | 2016-07-15 | 2016-07-15 | 一种基于卷积神经网络的tfds故障图像自动识别方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610561060.XA CN106226050B (zh) | 2016-07-15 | 2016-07-15 | 一种基于卷积神经网络的tfds故障图像自动识别方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106226050A true CN106226050A (zh) | 2016-12-14 |
CN106226050B CN106226050B (zh) | 2019-02-01 |
Family
ID=57519687
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610561060.XA Active CN106226050B (zh) | 2016-07-15 | 2016-07-15 | 一种基于卷积神经网络的tfds故障图像自动识别方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106226050B (zh) |
Cited By (53)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106815835A (zh) * | 2017-01-10 | 2017-06-09 | 北京邮电大学 | 损伤识别方法及装置 |
CN106991999A (zh) * | 2017-03-29 | 2017-07-28 | 北京小米移动软件有限公司 | 语音识别方法及装置 |
CN107481188A (zh) * | 2017-06-23 | 2017-12-15 | 珠海经济特区远宏科技有限公司 | 一种图像超分辨率重构方法 |
CN107665336A (zh) * | 2017-09-20 | 2018-02-06 | 厦门理工学院 | 智能冰箱中基于Faster‑RCNN的多目标检测方法 |
CN108154196A (zh) * | 2018-01-19 | 2018-06-12 | 百度在线网络技术(北京)有限公司 | 用于输出图像的方法和装置 |
CN108280467A (zh) * | 2018-01-12 | 2018-07-13 | 北京摩拜科技有限公司 | 车辆故障检测方法、检测设备、服务器及车辆系统 |
CN108304752A (zh) * | 2017-01-13 | 2018-07-20 | 天津工业大学 | 基于hog特征和bcnn的交通标识牌检测 |
CN108335402A (zh) * | 2017-01-18 | 2018-07-27 | 武汉卓目科技有限公司 | 一种基于深度学习的验钞机红外对管鉴伪方法 |
CN108344564A (zh) * | 2017-12-25 | 2018-07-31 | 北京信息科技大学 | 一种基于深度学习的主轴特性试验台状态识别及预测方法 |
CN108717711A (zh) * | 2018-05-23 | 2018-10-30 | 深圳市阡丘越科技有限公司 | 一种轨道交通故障图像分析方法、装置和系统 |
CN108734667A (zh) * | 2017-04-14 | 2018-11-02 | Tcl集团股份有限公司 | 一种图像处理方法及系统 |
CN108875819A (zh) * | 2018-06-08 | 2018-11-23 | 浙江大学 | 一种基于长短期记忆网络的物体和部件联合检测方法 |
CN108921166A (zh) * | 2018-06-22 | 2018-11-30 | 深源恒际科技有限公司 | 基于深度神经网络的医疗票据类文本检测识别方法及系统 |
CN109190716A (zh) * | 2018-10-23 | 2019-01-11 | 深圳增强现实技术有限公司 | 低压集抄故障的处理方法、装置及电子设备 |
CN109271828A (zh) * | 2017-07-17 | 2019-01-25 | 国网江苏省电力公司泰州供电公司 | 基于深度学习的施工隔离栅栏状态智能检测的方法及系统 |
CN109298993A (zh) * | 2017-07-21 | 2019-02-01 | 深圳市中兴微电子技术有限公司 | 一种检测故障的方法、装置及计算机可读存储介质 |
CN109685213A (zh) * | 2018-12-29 | 2019-04-26 | 百度在线网络技术(北京)有限公司 | 一种训练样本数据的获取方法、装置和终端设备 |
CN109740598A (zh) * | 2018-12-29 | 2019-05-10 | 中国铁道科学研究院集团有限公司基础设施检测研究所 | 结构化场景下的目标定位方法及装置 |
CN110428400A (zh) * | 2019-07-09 | 2019-11-08 | 北京百分点信息科技有限公司 | 一种设备故障的定位方法、装置、设备及存储介质 |
CN110569762A (zh) * | 2019-08-27 | 2019-12-13 | 许昌许继软件技术有限公司 | 一种基于多级神经网络的销钉脱落检测方法及装置 |
CN110738225A (zh) * | 2018-07-19 | 2020-01-31 | 杭州海康威视数字技术股份有限公司 | 图像识别方法及装置 |
CN111080617A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车制动梁支柱圆销丢失故障识别方法 |
CN111080601A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 铁路货车脱轨制动装置拉环磨轴故障图像识别方法 |
CN111080599A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车钩提杆的故障识别方法 |
CN111080604A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车钩提杆折断故障图像识别方法 |
CN111080613A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车浴盆破损故障图像识别方法 |
CN111079627A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车制动梁梁体折断故障图像识别方法 |
CN111079747A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 铁路货车转向架侧架断裂故障图像识别方法 |
CN111080610A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 铁路货车侧部摇枕倾斜故障图像识别方法 |
CN111080611A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车摇枕弹簧折断故障图像识别方法 |
CN111079630A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车制动梁安装位置不正确的故障识别方法 |
CN111080606A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车下拉杆脱落故障图像识别方法 |
CN111080605A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车人力制动机轴链脱落故障图像识别方法 |
CN111091549A (zh) * | 2019-12-12 | 2020-05-01 | 哈尔滨市科佳通用机电股份有限公司 | 铁路货车底部部件交叉杆体折断故障检测方法 |
CN111091558A (zh) * | 2019-12-12 | 2020-05-01 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车摇枕弹簧窜出故障图像识别方法 |
CN111091544A (zh) * | 2019-12-12 | 2020-05-01 | 哈尔滨市科佳通用机电股份有限公司 | 铁路货车转向架侧面一体架构断裂故障检测方法 |
CN111091541A (zh) * | 2019-12-12 | 2020-05-01 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车横跨梁组装螺母丢失故障识别方法 |
CN111091545A (zh) * | 2019-12-12 | 2020-05-01 | 哈尔滨市科佳通用机电股份有限公司 | 铁路货车滚动轴承轴端螺栓丢失故障的检测方法 |
CN111259969A (zh) * | 2020-01-19 | 2020-06-09 | 上海钧正网络科技有限公司 | 一种报障识别方法、装置、服务器及介质 |
CN111767913A (zh) * | 2020-07-06 | 2020-10-13 | 中兴飞流信息科技有限公司 | 一种基于深度学习的动车组车辆故障动态图像检测方法 |
CN111815623A (zh) * | 2020-07-28 | 2020-10-23 | 南方电网数字电网研究院有限公司 | 输电线路开口销缺失识别方法 |
CN112001902A (zh) * | 2020-08-19 | 2020-11-27 | 上海商汤智能科技有限公司 | 缺陷检测方法和相关装置、设备、存储介质 |
CN112016594A (zh) * | 2020-08-05 | 2020-12-01 | 中山大学 | 一种基于领域自适应的协同训练方法 |
CN112348789A (zh) * | 2020-11-03 | 2021-02-09 | 哈尔滨市科佳通用机电股份有限公司 | 一种列车锁扣丢失故障检测方法、系统及装置 |
JP2021015041A (ja) * | 2019-07-12 | 2021-02-12 | Jfeエンジニアリング株式会社 | ボルト検査装置、ボルト検査システム、ボルト検査方法及びプログラム |
CN112417967A (zh) * | 2020-10-22 | 2021-02-26 | 腾讯科技(深圳)有限公司 | 障碍物检测方法、装置、计算机设备和存储介质 |
CN112508034A (zh) * | 2020-11-03 | 2021-03-16 | 精英数智科技股份有限公司 | 货运列车故障检测方法、装置及电子设备 |
EP3869455A4 (en) * | 2018-10-16 | 2021-12-08 | Tencent Technology (Shenzhen) Company Limited | IMAGE SEGMENTATION PROCESS AND APPARATUS, COMPUTER DEVICE AND INFORMATION MEDIA |
CN113989265A (zh) * | 2021-11-11 | 2022-01-28 | 哈尔滨市科佳通用机电股份有限公司 | 基于深度学习的速度传感器螺栓丢失故障识别方法 |
CN114821513A (zh) * | 2022-06-29 | 2022-07-29 | 威海凯思信息科技有限公司 | 一种基于多层网络的图像处理方法及装置、电子设备 |
WO2022160413A1 (zh) * | 2021-01-29 | 2022-08-04 | 南方电网调峰调频发电有限公司 | 电力生产异常监控方法、装置、计算机设备和存储介质 |
CN115272850A (zh) * | 2022-07-20 | 2022-11-01 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车bab型闸调器拉杆头折断故障识别方法 |
CN116071423A (zh) * | 2023-02-09 | 2023-05-05 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车闸调器部件定位方法、系统及介质 |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6324659B1 (en) * | 1999-10-28 | 2001-11-27 | General Electric Company | Method and system for identifying critical faults in machines |
KR20070094141A (ko) * | 2006-03-16 | 2007-09-20 | 현대중공업 주식회사 | 한국형 고속철도의 트라이포드 고장 감지 처리 방법 |
CN101246090A (zh) * | 2008-02-01 | 2008-08-20 | 大连交通大学 | 闸调器疲劳试验的图像监测方法及其装置 |
CN101799366A (zh) * | 2010-01-27 | 2010-08-11 | 北京信息科技大学 | 一种机械故障预测的特征提取方法 |
EP2390159A1 (en) * | 2010-05-26 | 2011-11-30 | Bombardier Transportation GmbH | Handling a malfunction of a rail vehicle |
CN102323070A (zh) * | 2011-06-10 | 2012-01-18 | 北京华兴致远科技发展有限公司 | 列车异常检测方法和系统 |
CN102401746A (zh) * | 2010-09-14 | 2012-04-04 | 西门子公司 | 用于在轨道车辆中进行故障诊断的方法和装置 |
KR101224467B1 (ko) * | 2011-02-28 | 2013-01-21 | 현대로템 주식회사 | 철도차량의 원도우 누수 검사장치 |
CN102901645A (zh) * | 2012-08-22 | 2013-01-30 | 北京康拓红外技术股份有限公司 | 应用于铁路列检试风作业制动缸状态的自动监测系统及方法 |
CN103512762A (zh) * | 2012-06-29 | 2014-01-15 | 北京华兴致远科技发展有限公司 | 图像处理方法、装置及列车故障检测系统 |
CN103852271A (zh) * | 2012-12-01 | 2014-06-11 | 南车青岛四方机车车辆股份有限公司 | 基于物联网的高速列车走行部故障诊断与远程监测系统 |
EP2778818A1 (en) * | 2013-03-12 | 2014-09-17 | Hitachi Ltd. | Identification of faults in a target system |
CN105067287A (zh) * | 2015-07-23 | 2015-11-18 | 北京京天威科技发展有限公司 | 动车组运行故障动态图像检测系统及方法 |
-
2016
- 2016-07-15 CN CN201610561060.XA patent/CN106226050B/zh active Active
Patent Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6324659B1 (en) * | 1999-10-28 | 2001-11-27 | General Electric Company | Method and system for identifying critical faults in machines |
KR20070094141A (ko) * | 2006-03-16 | 2007-09-20 | 현대중공업 주식회사 | 한국형 고속철도의 트라이포드 고장 감지 처리 방법 |
CN101246090A (zh) * | 2008-02-01 | 2008-08-20 | 大连交通大学 | 闸调器疲劳试验的图像监测方法及其装置 |
CN101799366A (zh) * | 2010-01-27 | 2010-08-11 | 北京信息科技大学 | 一种机械故障预测的特征提取方法 |
EP2390159A1 (en) * | 2010-05-26 | 2011-11-30 | Bombardier Transportation GmbH | Handling a malfunction of a rail vehicle |
CN102401746A (zh) * | 2010-09-14 | 2012-04-04 | 西门子公司 | 用于在轨道车辆中进行故障诊断的方法和装置 |
KR101224467B1 (ko) * | 2011-02-28 | 2013-01-21 | 현대로템 주식회사 | 철도차량의 원도우 누수 검사장치 |
CN102323070A (zh) * | 2011-06-10 | 2012-01-18 | 北京华兴致远科技发展有限公司 | 列车异常检测方法和系统 |
CN103512762A (zh) * | 2012-06-29 | 2014-01-15 | 北京华兴致远科技发展有限公司 | 图像处理方法、装置及列车故障检测系统 |
CN102901645A (zh) * | 2012-08-22 | 2013-01-30 | 北京康拓红外技术股份有限公司 | 应用于铁路列检试风作业制动缸状态的自动监测系统及方法 |
CN103852271A (zh) * | 2012-12-01 | 2014-06-11 | 南车青岛四方机车车辆股份有限公司 | 基于物联网的高速列车走行部故障诊断与远程监测系统 |
EP2778818A1 (en) * | 2013-03-12 | 2014-09-17 | Hitachi Ltd. | Identification of faults in a target system |
CN105067287A (zh) * | 2015-07-23 | 2015-11-18 | 北京京天威科技发展有限公司 | 动车组运行故障动态图像检测系统及方法 |
Cited By (70)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106815835A (zh) * | 2017-01-10 | 2017-06-09 | 北京邮电大学 | 损伤识别方法及装置 |
CN108304752A (zh) * | 2017-01-13 | 2018-07-20 | 天津工业大学 | 基于hog特征和bcnn的交通标识牌检测 |
CN108335402A (zh) * | 2017-01-18 | 2018-07-27 | 武汉卓目科技有限公司 | 一种基于深度学习的验钞机红外对管鉴伪方法 |
CN106991999A (zh) * | 2017-03-29 | 2017-07-28 | 北京小米移动软件有限公司 | 语音识别方法及装置 |
CN106991999B (zh) * | 2017-03-29 | 2020-06-02 | 北京小米移动软件有限公司 | 语音识别方法及装置 |
CN108734667A (zh) * | 2017-04-14 | 2018-11-02 | Tcl集团股份有限公司 | 一种图像处理方法及系统 |
CN107481188A (zh) * | 2017-06-23 | 2017-12-15 | 珠海经济特区远宏科技有限公司 | 一种图像超分辨率重构方法 |
CN109271828A (zh) * | 2017-07-17 | 2019-01-25 | 国网江苏省电力公司泰州供电公司 | 基于深度学习的施工隔离栅栏状态智能检测的方法及系统 |
CN109298993B (zh) * | 2017-07-21 | 2022-07-29 | 深圳市中兴微电子技术有限公司 | 一种检测故障的方法、装置及计算机可读存储介质 |
CN109298993A (zh) * | 2017-07-21 | 2019-02-01 | 深圳市中兴微电子技术有限公司 | 一种检测故障的方法、装置及计算机可读存储介质 |
CN107665336A (zh) * | 2017-09-20 | 2018-02-06 | 厦门理工学院 | 智能冰箱中基于Faster‑RCNN的多目标检测方法 |
CN108344564A (zh) * | 2017-12-25 | 2018-07-31 | 北京信息科技大学 | 一种基于深度学习的主轴特性试验台状态识别及预测方法 |
CN108280467A (zh) * | 2018-01-12 | 2018-07-13 | 北京摩拜科技有限公司 | 车辆故障检测方法、检测设备、服务器及车辆系统 |
CN108280467B (zh) * | 2018-01-12 | 2020-10-16 | 北京摩拜科技有限公司 | 车辆故障检测方法、检测设备、服务器及车辆系统 |
CN108154196B (zh) * | 2018-01-19 | 2019-10-22 | 百度在线网络技术(北京)有限公司 | 用于输出图像的方法和装置 |
CN108154196A (zh) * | 2018-01-19 | 2018-06-12 | 百度在线网络技术(北京)有限公司 | 用于输出图像的方法和装置 |
CN108717711A (zh) * | 2018-05-23 | 2018-10-30 | 深圳市阡丘越科技有限公司 | 一种轨道交通故障图像分析方法、装置和系统 |
CN108717711B (zh) * | 2018-05-23 | 2021-09-24 | 深圳市阡丘越科技有限公司 | 一种轨道交通故障图像分析方法、装置和系统 |
CN108875819A (zh) * | 2018-06-08 | 2018-11-23 | 浙江大学 | 一种基于长短期记忆网络的物体和部件联合检测方法 |
CN108875819B (zh) * | 2018-06-08 | 2020-10-27 | 浙江大学 | 一种基于长短期记忆网络的物体和部件联合检测方法 |
CN108921166A (zh) * | 2018-06-22 | 2018-11-30 | 深源恒际科技有限公司 | 基于深度神经网络的医疗票据类文本检测识别方法及系统 |
CN110738225A (zh) * | 2018-07-19 | 2020-01-31 | 杭州海康威视数字技术股份有限公司 | 图像识别方法及装置 |
US11403763B2 (en) | 2018-10-16 | 2022-08-02 | Tencent Technology (Shenzhen) Company Limited | Image segmentation method and apparatus, computer device, and storage medium |
EP3869455A4 (en) * | 2018-10-16 | 2021-12-08 | Tencent Technology (Shenzhen) Company Limited | IMAGE SEGMENTATION PROCESS AND APPARATUS, COMPUTER DEVICE AND INFORMATION MEDIA |
CN109190716A (zh) * | 2018-10-23 | 2019-01-11 | 深圳增强现实技术有限公司 | 低压集抄故障的处理方法、装置及电子设备 |
CN109740598A (zh) * | 2018-12-29 | 2019-05-10 | 中国铁道科学研究院集团有限公司基础设施检测研究所 | 结构化场景下的目标定位方法及装置 |
CN109685213A (zh) * | 2018-12-29 | 2019-04-26 | 百度在线网络技术(北京)有限公司 | 一种训练样本数据的获取方法、装置和终端设备 |
CN110428400A (zh) * | 2019-07-09 | 2019-11-08 | 北京百分点信息科技有限公司 | 一种设备故障的定位方法、装置、设备及存储介质 |
JP7331509B2 (ja) | 2019-07-12 | 2023-08-23 | Jfeエンジニアリング株式会社 | ボルト検査装置、ボルト検査システム、ボルト検査方法及びプログラム |
JP2021015041A (ja) * | 2019-07-12 | 2021-02-12 | Jfeエンジニアリング株式会社 | ボルト検査装置、ボルト検査システム、ボルト検査方法及びプログラム |
CN110569762A (zh) * | 2019-08-27 | 2019-12-13 | 许昌许继软件技术有限公司 | 一种基于多级神经网络的销钉脱落检测方法及装置 |
CN111091549A (zh) * | 2019-12-12 | 2020-05-01 | 哈尔滨市科佳通用机电股份有限公司 | 铁路货车底部部件交叉杆体折断故障检测方法 |
CN111091549B (zh) * | 2019-12-12 | 2020-12-08 | 哈尔滨市科佳通用机电股份有限公司 | 铁路货车底部部件交叉杆体折断故障检测方法 |
CN111080605A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车人力制动机轴链脱落故障图像识别方法 |
CN111079630A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车制动梁安装位置不正确的故障识别方法 |
CN111091558A (zh) * | 2019-12-12 | 2020-05-01 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车摇枕弹簧窜出故障图像识别方法 |
CN111091544A (zh) * | 2019-12-12 | 2020-05-01 | 哈尔滨市科佳通用机电股份有限公司 | 铁路货车转向架侧面一体架构断裂故障检测方法 |
CN111091541A (zh) * | 2019-12-12 | 2020-05-01 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车横跨梁组装螺母丢失故障识别方法 |
CN111091545A (zh) * | 2019-12-12 | 2020-05-01 | 哈尔滨市科佳通用机电股份有限公司 | 铁路货车滚动轴承轴端螺栓丢失故障的检测方法 |
CN111080611A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车摇枕弹簧折断故障图像识别方法 |
CN111080617A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车制动梁支柱圆销丢失故障识别方法 |
CN111079747B (zh) * | 2019-12-12 | 2020-10-09 | 哈尔滨市科佳通用机电股份有限公司 | 铁路货车转向架侧架断裂故障图像识别方法 |
CN111080601A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 铁路货车脱轨制动装置拉环磨轴故障图像识别方法 |
CN111080610A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 铁路货车侧部摇枕倾斜故障图像识别方法 |
CN111080599A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车钩提杆的故障识别方法 |
CN111079747A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 铁路货车转向架侧架断裂故障图像识别方法 |
CN111079630B (zh) * | 2019-12-12 | 2020-10-30 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车制动梁安装位置不正确的故障识别方法 |
CN111080613B (zh) * | 2019-12-12 | 2020-11-03 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车浴盆破损故障图像识别方法 |
CN111080604A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车钩提杆折断故障图像识别方法 |
CN111080613A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车浴盆破损故障图像识别方法 |
CN111080606A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车下拉杆脱落故障图像识别方法 |
CN111079627A (zh) * | 2019-12-12 | 2020-04-28 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车制动梁梁体折断故障图像识别方法 |
CN111259969A (zh) * | 2020-01-19 | 2020-06-09 | 上海钧正网络科技有限公司 | 一种报障识别方法、装置、服务器及介质 |
CN111767913A (zh) * | 2020-07-06 | 2020-10-13 | 中兴飞流信息科技有限公司 | 一种基于深度学习的动车组车辆故障动态图像检测方法 |
CN111815623A (zh) * | 2020-07-28 | 2020-10-23 | 南方电网数字电网研究院有限公司 | 输电线路开口销缺失识别方法 |
CN111815623B (zh) * | 2020-07-28 | 2024-02-23 | 南方电网数字电网研究院有限公司 | 输电线路开口销缺失识别方法 |
CN112016594A (zh) * | 2020-08-05 | 2020-12-01 | 中山大学 | 一种基于领域自适应的协同训练方法 |
CN112016594B (zh) * | 2020-08-05 | 2023-06-09 | 中山大学 | 一种基于领域自适应的协同训练方法 |
CN112001902A (zh) * | 2020-08-19 | 2020-11-27 | 上海商汤智能科技有限公司 | 缺陷检测方法和相关装置、设备、存储介质 |
CN112417967B (zh) * | 2020-10-22 | 2021-12-14 | 腾讯科技(深圳)有限公司 | 障碍物检测方法、装置、计算机设备和存储介质 |
CN112417967A (zh) * | 2020-10-22 | 2021-02-26 | 腾讯科技(深圳)有限公司 | 障碍物检测方法、装置、计算机设备和存储介质 |
CN112348789A (zh) * | 2020-11-03 | 2021-02-09 | 哈尔滨市科佳通用机电股份有限公司 | 一种列车锁扣丢失故障检测方法、系统及装置 |
CN112508034B (zh) * | 2020-11-03 | 2024-04-30 | 精英数智科技股份有限公司 | 货运列车故障检测方法、装置及电子设备 |
CN112508034A (zh) * | 2020-11-03 | 2021-03-16 | 精英数智科技股份有限公司 | 货运列车故障检测方法、装置及电子设备 |
WO2022160413A1 (zh) * | 2021-01-29 | 2022-08-04 | 南方电网调峰调频发电有限公司 | 电力生产异常监控方法、装置、计算机设备和存储介质 |
CN113989265A (zh) * | 2021-11-11 | 2022-01-28 | 哈尔滨市科佳通用机电股份有限公司 | 基于深度学习的速度传感器螺栓丢失故障识别方法 |
CN114821513A (zh) * | 2022-06-29 | 2022-07-29 | 威海凯思信息科技有限公司 | 一种基于多层网络的图像处理方法及装置、电子设备 |
CN114821513B (zh) * | 2022-06-29 | 2022-09-09 | 威海凯思信息科技有限公司 | 一种基于多层网络的图像处理方法及装置、电子设备 |
CN115272850A (zh) * | 2022-07-20 | 2022-11-01 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车bab型闸调器拉杆头折断故障识别方法 |
CN116071423A (zh) * | 2023-02-09 | 2023-05-05 | 哈尔滨市科佳通用机电股份有限公司 | 一种铁路货车闸调器部件定位方法、系统及介质 |
Also Published As
Publication number | Publication date |
---|---|
CN106226050B (zh) | 2019-02-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106226050B (zh) | 一种基于卷积神经网络的tfds故障图像自动识别方法 | |
CN110378869B (zh) | 一种样本自动标注的钢轨扣件异常检测方法 | |
CN106022300B (zh) | 基于级联深度学习的交通标志识别方法和系统 | |
CN107016357B (zh) | 一种基于时间域卷积神经网络的视频行人检测方法 | |
CN102184419B (zh) | 基于敏感部位检测的色情图像识别方法 | |
CN102903122B (zh) | 基于特征光流与在线集成学习的视频目标跟踪方法 | |
EP3690741B1 (en) | Method for automatically evaluating labeling reliability of training images for use in deep learning network to analyze images, and reliability-evaluating device using the same | |
CN110348319A (zh) | 一种基于人脸深度信息和边缘图像融合的人脸防伪方法 | |
CN105260744A (zh) | 一种货运列车钩尾扁销部位故障的自动在线诊断方法及系统 | |
CN110569843B (zh) | 一种矿井目标智能检测与识别方法 | |
CN103761531A (zh) | 基于形状轮廓特征的稀疏编码车牌字符识别方法 | |
CN103310179A (zh) | 一种基于人脸识别技术的最优姿态检测方法及系统 | |
CN112926522B (zh) | 一种基于骨骼姿态与时空图卷积网络的行为识别方法 | |
CN105701466A (zh) | 快速的全角度人脸跟踪方法 | |
CN109003275A (zh) | 焊缝缺陷图像的分割方法 | |
CN110008899B (zh) | 一种可见光遥感图像候选目标提取与分类方法 | |
CN112257711B (zh) | 一种铁路货车地板破损故障检测方法 | |
Atikuzzaman et al. | Human activity recognition system from different poses with cnn | |
CN104794432A (zh) | 快速级联式车标视觉检测与识别方法和系统 | |
Ali et al. | Performance evaluation of different algorithms for crack detection in concrete structures | |
Chughtai et al. | Traffic Surveillance System: Robust Multiclass Vehicle Detection and Classification | |
Lien et al. | Product surface defect detection based on deep learning | |
CN106951924B (zh) | 基于AdaBoost算法的地震相干体图像断层自动识别方法及系统 | |
CN106384089A (zh) | 基于终生学习的人体可靠检测方法 | |
Arzhaeva et al. | Global and local multi-valued dissimilarity-based classification: application to computer-aided detection of tuberculosis |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |