CN112686880A - 一种铁路机车部件异常检测的方法 - Google Patents
一种铁路机车部件异常检测的方法 Download PDFInfo
- Publication number
- CN112686880A CN112686880A CN202110014059.6A CN202110014059A CN112686880A CN 112686880 A CN112686880 A CN 112686880A CN 202110014059 A CN202110014059 A CN 202110014059A CN 112686880 A CN112686880 A CN 112686880A
- Authority
- CN
- China
- Prior art keywords
- image
- sub
- detected
- linear array
- noise
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Analysis (AREA)
- Train Traffic Observation, Control, And Security (AREA)
Abstract
本发明公开了一种铁路机车部件异常检测的方法。步骤1:获取机车线阵图像;步骤2:从所获取的机车线阵图像中截取待检测部件子图像;步骤3:对步骤2的子图像进行噪声去除;步骤4:对步骤3的去除噪声的子图像进行分析与异常检测,所述子图像的异常检测具体为,对获取的同一部件的无异常信息的子图进行缩放,将缩放后的图像随机进行灰度线性变换和高斯模糊滤波处理,将灰度线性变换和高斯模糊滤波处理后的子图像进行模型训练,将步骤2获取的待检测部件的子图像与进行模型训练后的无异常信息的子图像进行差异对比,得到待检测部件的子图像的异常信息的检测与定位。本发明有效的解决生成图像清晰度不高的问题。
Description
技术领域
本发明涉及图像处理领域,尤其涉及一种铁路机车部件异常检测的方法。
背景技术
传统图像处理检测零部件异常、深度学习中的基于目标检测和物体识别检测零部件异常和深度学习中基于对抗神经网络的差异检测。
传统图像处理检测零部件异常对于输入图像的清晰度、噪声干扰、异常特征具有很高的要求。
深度学习中的基于目标检测和物体识别检测零部件异常虽然具有一定的泛化能力,但要求大量的异常数据,才可以实现检测和定位,并且随着环境噪声的影响,其泛化能力也随之降低。
基于对抗神经网络的差异检测,生成图像的清晰度不高,且很难实现异常的定位功能。
发明内容
本发明提供一种铁路机车部件异常检测的方法,用以解决上述问题,通过修改U-Net模型的自编码解码方式生成的图像矩阵,可有效的解决生成图像清晰度不高的问题;加入记忆模块,可有效地在消除背景噪声、环境噪声等非异常信息的干扰;同时具有更好的泛化能力。
本发明通过以下技术方案实现:
一种铁路机车部件异常检测的方法,其特征在于,所述异常检测的方法包括以下步骤:
步骤1:获取机车线阵图像;
步骤2:从所获取的机车线阵图像中截取待检测部件子图像;
步骤3:对步骤2的子图像进行噪声去除;
步骤4:对步骤3的去除噪声的子图像进行异常检测,所述子图像的异常检测具体为,对用于训练模型的标准子图像随机进行灰度线性变换和高斯模糊滤波处理,将灰度线性变换和高斯模糊滤波处理后的标准子图像进行模型训练得到标准权重文件,即通过记忆模块来记录正常数据的原型模式,并通过读取模块和更新模块来更新记忆模块内的项数,将步骤3获取的噪声去除的待检测子图像进行模型训练得到新的待检测子图像,将新的待检测子图像与步骤3获取的噪声去除的待检测子图像进行差异对比,得到待检测部件的子图像的异常信息,其中,异常信息用于表征是否存在异常,以及存在异常的位置。
进一步的,步骤1具体为,在铁轨两侧以及底部配备高清线阵成像设备,列车车头通过触发传感器,启动成像设备对运动的机车进行逐行扫描,获取多个高清线阵图像,而后根据轴距信息将其拼接成完整列车图像,所述线阵图像的大小为1440*1440。
进一步的,步骤2的获取待检测部件子图像具体为根据列车轴距、车型和先验知识对机车可能发生故障的模块或零部件进行截取,得到子图图像。
进一步的,步骤3线阵相机采集到的图像为单通道的灰度图,其中,噪声包括;
当光线分布不均的情况下,采集到的线阵图像具有明暗不一的特性;
当背景区域含有污渍、油渍时,会使得到的子图很难分辨车体本身的零部件信息特征;
当天气环境恶劣,采集到的线阵图像会出现条纹或雪花噪声。
进一步的,步骤4的模型训练具体为,通过网络模型获得匹配概率:
所述获取匹配概率具体为,网络模型中的多维数组CWH分割成K个质询向量query,K个质询向量query与网络模型中设置的M个特征向量item通过读取模块Read计算其余弦相似度,得到一个MxK大小的二维相关图,然后在垂直方向上应用激活函数,通过以下公式获得MxK大小的二维相关图的匹配概率wK,M,
其中P为记忆模块中特征向量,m'为中间变量属于M,Q为编码后生成的质询向量query,
其中wK,m'为m'xK大小的二维相关图的匹配概率。
进一步的,获取匹配概率具体为,更新模块Update用于更新记忆模块中的M个item;对于每个质询向量query选择匹配概率最大一个项进行更新;通过下式计算出质询向量query的选择匹配概率vK,M;
其中k'为中间变量;
再通过下式计算出更新后的质询向量query选择匹配概率v′K,M;
最后通过损失函数计算出权重S,并更新更新模块Update中的特征块Pm。
进一步的,步骤4中标准子图像的获取具体为,获取进行筛选后的噪声去除的子图像,对筛选出的同一部件的无异常信息的子图像进行缩放作为标准子图像。
进一步的,步骤4的差异比对具体包括以下步骤:
步骤4.3.2:通过下式得到差值子图像矩阵D′;
步骤4.3.3:对差值子图像矩阵D′进行形态学腐蚀处理,得到差异子图像矩阵。
本发明的有益效果是:
1.本发明属于无监督模型,不需要真实异常图像即可进行训练和检测。
2.本发明与目前已有的无监督异常检测模型相比,本发明可实现生成清晰图像的同时,实现对异常信息的检测与定位。
3.本发明可较好的消除非异常信息外的噪声干扰。
4.本发明具有更强的泛化能力。
附图说明
图1本发明的方法流程示意图。
图2本发明的网络模型整体结构示意图。
图3本发明的Read模块的结构示意图。
图4本发明的Update模块的结构示意图。
图5本发明的铁路机车部件子图像异常检测结果Ⅰ,其中,(a)输入图像,(b)生成图像,(c)差异图像。
图6本发明的铁路机车部件子图像异常检测结果Ⅱ,其中,(a)输入图像,(b)生成图像,(c)差异图像。
具体实施方式
下面将结合本发明实施例中的附图对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要特别说明的是,在不冲突的情况下,本申请公开的各个实施例之间可以相互组合。如图1-图6所示:
一种铁路机车部件异常检测的方法,异常检测的方法包括以下步骤:
步骤1:获取机车线阵图像;
步骤2:从所获取的机车线阵图像中截取待检测部件子图像;
步骤3:对步骤2的子图像进行噪声去除;
步骤4:对步骤3的去除噪声的子图像进行异常检测,所述子图像的异常检测具体为,对用于训练模型的标准子图像随机进行灰度线性变换和高斯模糊滤波处理,将灰度线性变换和高斯模糊滤波处理后的标准子图像进行模型训练得到标准权重文件,即通过记忆模块(即在图像训练的过程中使网络记忆异常噪声,在图像生成的过程中可以有效降低异常噪声对生成图像中异常信息的影响)来记录正常数据的原型模式,并通过读取模块和更新模块来更新记忆模块内的项数,将步骤3获取的噪声去除的待检测子图像进行模型训练得到新的待检测子图像,将新的待检测子图像与步骤3获取的噪声去除的待检测子图像进行差异对比,得到待检测部件的子图像的异常信息,其中,异常信息用于表征是否存在异常,以及存在异常的位置。本发明可实现生成清晰图像的同时,实现对异常信息的检测与定位。
进一步的,步骤1具体为,在铁轨两侧以及底部配备高清线阵成像设备,列车车头通过触发传感器,启动成像设备对运动的机车进行逐行扫描,获取多个高清线阵图像,而后根据轴距信息将其拼接成完整列车图像,线阵图像的大小为1440*1440。本步骤能准确快速完成列车图像的采集工作。
进一步的,步骤2的获取待检测部件子图像具体为根据列车轴距、车型和先验知识对机车可能发生故障的模块或零部件进行截取,得到子图图像。子图图像的获取可有效减少故障识别所需时间、区分不同的故障并提升识别准确率。
进一步的,步骤3线阵相机采集到的图像为单通道的灰度图,不具有颜色信息特征,仅通过灰度值的变化来区分故障与非故障区域的差异;其中,噪声包括;
当光线分布不均的情况下,采集到的线阵图像具有明暗不一的特性;
当光线分布不均的情况下,采集到的线阵图像具有明暗不一的特性;
当背景区域含有污渍、油渍时,会使得到的子图很难分辨车体本身的零部件信息特征;
当天气环境恶劣(比如雨雪天气),采集到的线阵图像会出现条纹或雪花噪声。对本发明检测难点进行列举和分析。
进一步的,步骤4的子图像异常包括未知性、异质性、稀有性和多样性;
未知性为机车真实异常信息直至发生才知道具体信息;
异质性为机车不同异常信息具有完全不同的异常特征;
稀有性为机车异常信息是很少发生的数据实例;
多样性为机车异常信息具有形式的多样性。对机车异常信息的特性进行列举。
进一步的,步骤4的模型训练具体为,通过网络模型获得匹配概率:记忆模块中的M项可以理解为概括正常机车零部件的特征和异常噪声的特征;
所述获取匹配概率具体为,网络模型中的多维数组CWH分割成K个质询向量query,K个质询向量query与网络模型中设置的M个特征向量item通过读取模块Read计算其余弦相似度,得到一个MxK大小的二维相关图,然后在垂直方向上应用激活函数,通过以下公式获得MxK大小的二维相关图的匹配概率wK,M,即为图2中的CH,
其中P为记忆模块中特征向量,m'为中间变量属于M,Q为编码后生成的质询向量query,
其中wK,m'为m'xK大小的二维相关图的匹配概率。得到图像的二维相关图的匹配概率,有助于提升训练模型的鲁棒性。
进一步的,更新模块Update用于更新记忆模块中的M个item;对于每个质询向量query选择匹配概率最大一个项进行更新;与Read阶段相似,通过下式计算出质询向量query的选择匹配概率vK,M,即为图3中的CH;
其中k'为中间变量;
再通过下式计算出更新后的质询向量query选择匹配概率v′K,M,即为图3中的WE;
最后通过损失函数计算出权重S,即图3中的S,并更新更新模块Update中的特征块Pm。
模型参数训练中的参数包括记忆模块中特征向量item的个数和记忆模块中质询向量query的深度;
记忆模块中特征向量item的个数,根据图像数据的背景灰度值或异常噪声确定;
记忆模块中质询向量query的深度,根据图像数据的训练确定;
根据先验知识或实验数据确定本发明中的特征向量item的个数的数值为30;质询向量query的深度的数值为512。使用参数进行训练,为后续步骤提供合适的参数。
进一步的,步骤4的差异比对具体包括以下步骤:
步骤4.2:通过下式得到差值子图像矩阵D′;
步骤4.3:对差值子图像矩阵D′进行形态学腐蚀处理,得到差异子图像矩阵E′。消除孤立噪声点的干扰。
在验证集上测试相关结果如表1所示,
表1
Claims (8)
1.一种铁路机车部件异常检测的方法,其特征在于,所述异常检测的方法包括以下步骤:
步骤1:获取机车线阵图像;
步骤2:从所获取的机车线阵图像中截取待检测部件子图像;
步骤3:对步骤2的子图像进行噪声去除;
步骤4:对步骤3的去除噪声的子图像进行异常检测,所述子图像的异常检测具体为,对用于训练模型的标准子图像随机进行灰度线性变换和高斯模糊滤波处理,将灰度线性变换和高斯模糊滤波处理后的标准子图像进行模型训练得到标准权重文件,即通过记忆模块来记录正常数据的原型模式,并通过读取模块和更新模块来更新记忆模块内的项数,将步骤3获取的噪声去除的待检测子图像进行模型训练得到新的待检测子图像,将新的待检测子图像与步骤3获取的噪声去除的待检测子图像进行差异对比,得到待检测部件的子图像的异常信息,其中,异常信息用于表征是否存在异常,以及存在异常的位置。
2.根据权利要求1所述一种铁路机车部件异常检测的方法,其特征在于,所述步骤1具体为,在铁轨两侧以及底部配备高清线阵成像设备,列车车头通过触发传感器,启动成像设备对运动的机车进行逐行扫描,获取多个高清线阵图像,而后根据轴距信息将其拼接成完整列车图像,所述线阵图像的大小为1440*1440。
3.根据权利要求1所述一种铁路机车部件异常检测的方法,其特征在于,所述步骤2的获取待检测部件子图像具体为根据列车轴距、车型和先验知识对机车可能发生故障的模块或零部件进行截取,得到子图图像。
4.根据权利要求1所述一种铁路机车部件异常检测的方法,其特征在于,所述步骤3线阵相机采集到的图像为单通道的灰度图,其中,噪声包括;
当光线分布不均的情况下,采集到的线阵图像具有明暗不一的特性;
当背景区域含有污渍、油渍时,会使得到的子图很难分辨车体本身的零部件信息特征;
当天气环境恶劣,采集到的线阵图像会出现条纹或雪花噪声。
5.根据权利要求1所述一种铁路机车部件异常检测的方法,其特征在于,所述步骤4的模型训练具体为,通过网络模型获得匹配概率:
所述获取匹配概率具体为,网络模型中的多维数组CWH分割成K个质询向量query,K个质询向量query与网络模型中设置的M个特征向量item通过读取模块Read计算其余弦相似度,得到一个M x K大小的二维相关图,然后在垂直方向上应用激活函数,通过以下公式获得M x K大小的二维相关图的匹配概率wK,M,
其中P为记忆模块中特征向量,m'为中间变量属于M,Q为编码后生成的质询向量query,
其中wK,m'为m'x K大小的二维相关图的匹配概率。
7.根据权利要求1所述一种铁路机车部件异常检测的方法,其特征在于,所述步骤4中标准子图像的获取具体为,获取进行筛选后的噪声去除的子图像,对筛选出的同一部件的无异常信息的子图像进行缩放作为标准子图像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110014059.6A CN112686880B (zh) | 2021-01-06 | 2021-01-06 | 一种铁路机车部件异常检测的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110014059.6A CN112686880B (zh) | 2021-01-06 | 2021-01-06 | 一种铁路机车部件异常检测的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112686880A true CN112686880A (zh) | 2021-04-20 |
CN112686880B CN112686880B (zh) | 2021-09-14 |
Family
ID=75456090
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110014059.6A Active CN112686880B (zh) | 2021-01-06 | 2021-01-06 | 一种铁路机车部件异常检测的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112686880B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113239928A (zh) * | 2021-05-11 | 2021-08-10 | 北京百度网讯科技有限公司 | 图像差异检测及模型训练的方法、设备及程序产品 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011215716A (ja) * | 2010-03-31 | 2011-10-27 | Toyota Motor Corp | 位置推定装置、位置推定方法及びプログラム |
CN105833525A (zh) * | 2016-04-25 | 2016-08-10 | 武汉智普天创科技有限公司 | 游戏系统 |
CN109314887A (zh) * | 2016-05-12 | 2019-02-05 | 康维达无线有限责任公司 | 连接到虚拟化的移动核心网络 |
CN109543819A (zh) * | 2018-11-06 | 2019-03-29 | 中国电子科技集团公司第二十八研究所 | 一种基于改进区域卷积神经网络的景象匹配定位方法 |
CN109934298A (zh) * | 2019-03-19 | 2019-06-25 | 安徽大学 | 一种基于聚类的形变图的渐进式图匹配方法及装置 |
CN110070129A (zh) * | 2019-04-23 | 2019-07-30 | 上海联影智能医疗科技有限公司 | 一种图像检测方法、装置及存储介质 |
CN111612043A (zh) * | 2020-04-27 | 2020-09-01 | 腾讯科技(深圳)有限公司 | 道路场景匹配方法、装置及存储介质 |
US10825059B2 (en) * | 2017-09-20 | 2020-11-03 | Data Genomix Llc | Facilitating highly targeted advertising to identified audience members across social media channels |
CN111950531A (zh) * | 2020-09-08 | 2020-11-17 | 哈尔滨市科佳通用机电股份有限公司 | 一种公路边检的车辆检测系统及其检测方法 |
CN111982921A (zh) * | 2020-05-21 | 2020-11-24 | 北京安视中电科技有限公司 | 孔缺陷的检测方法、装置、传送平台及存储介质 |
CN112184654A (zh) * | 2020-09-24 | 2021-01-05 | 上海电力大学 | 一种基于生成对抗网络的高压线路绝缘子缺陷检测方法 |
-
2021
- 2021-01-06 CN CN202110014059.6A patent/CN112686880B/zh active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011215716A (ja) * | 2010-03-31 | 2011-10-27 | Toyota Motor Corp | 位置推定装置、位置推定方法及びプログラム |
CN105833525A (zh) * | 2016-04-25 | 2016-08-10 | 武汉智普天创科技有限公司 | 游戏系统 |
CN109314887A (zh) * | 2016-05-12 | 2019-02-05 | 康维达无线有限责任公司 | 连接到虚拟化的移动核心网络 |
US10825059B2 (en) * | 2017-09-20 | 2020-11-03 | Data Genomix Llc | Facilitating highly targeted advertising to identified audience members across social media channels |
CN109543819A (zh) * | 2018-11-06 | 2019-03-29 | 中国电子科技集团公司第二十八研究所 | 一种基于改进区域卷积神经网络的景象匹配定位方法 |
CN109934298A (zh) * | 2019-03-19 | 2019-06-25 | 安徽大学 | 一种基于聚类的形变图的渐进式图匹配方法及装置 |
CN110070129A (zh) * | 2019-04-23 | 2019-07-30 | 上海联影智能医疗科技有限公司 | 一种图像检测方法、装置及存储介质 |
CN111612043A (zh) * | 2020-04-27 | 2020-09-01 | 腾讯科技(深圳)有限公司 | 道路场景匹配方法、装置及存储介质 |
CN111982921A (zh) * | 2020-05-21 | 2020-11-24 | 北京安视中电科技有限公司 | 孔缺陷的检测方法、装置、传送平台及存储介质 |
CN111950531A (zh) * | 2020-09-08 | 2020-11-17 | 哈尔滨市科佳通用机电股份有限公司 | 一种公路边检的车辆检测系统及其检测方法 |
CN112184654A (zh) * | 2020-09-24 | 2021-01-05 | 上海电力大学 | 一种基于生成对抗网络的高压线路绝缘子缺陷检测方法 |
Non-Patent Citations (2)
Title |
---|
YARU ZHANG ET AL.: "Attention Aggregation Encoder-Decoder Network Framework for Stereo Matching", 《 IEEE SIGNAL PROCESSING LETTERS》 * |
姚保琛,柏春松,葛新同: "基于BRISK特征的图像级联匹配算法", 《东莞理工学院学报》 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113239928A (zh) * | 2021-05-11 | 2021-08-10 | 北京百度网讯科技有限公司 | 图像差异检测及模型训练的方法、设备及程序产品 |
Also Published As
Publication number | Publication date |
---|---|
CN112686880B (zh) | 2021-09-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108346159B (zh) | 一种基于跟踪-学习-检测的视觉目标跟踪方法 | |
CN112861720B (zh) | 基于原型卷积神经网络的遥感图像小样本目标检测方法 | |
Younus et al. | Effective and fast deepfake detection method based on haar wavelet transform | |
CN110175649B (zh) | 一种关于重新检测的快速多尺度估计目标跟踪方法 | |
CN102609720B (zh) | 一种基于位置校正模型的行人检测方法 | |
CN104008370A (zh) | 一种视频人脸识别方法 | |
CN104794440B (zh) | 一种基于多分块多尺度lbp的假指纹检测方法 | |
CN103400388A (zh) | 一种利用RANSAC消除Brisk关键点错误匹配点对的方法 | |
CN110598613B (zh) | 一种高速公路团雾监测方法 | |
CN114299002A (zh) | 一种路面抛洒异常行为智能检测系统与方法 | |
CN112308883A (zh) | 一种基于可见光和红外图像的多船舶融合跟踪方法 | |
CN101533466A (zh) | 一种眼睛定位图像处理方法 | |
CN107292920B (zh) | 一种联合分类的多时相全极化sar影像变化检测方法 | |
CN114821358A (zh) | 光学遥感图像海上舰船目标提取与识别方法 | |
CN112686880B (zh) | 一种铁路机车部件异常检测的方法 | |
CN104156979A (zh) | 一种基于高斯混合模型的视频中异常行为在线检测方法 | |
Tsai et al. | Vehicle detection using normalized color and edge map | |
CN115797970B (zh) | 基于YOLOv5模型的密集行人目标检测方法及系统 | |
CN116665097A (zh) | 一种结合上下文感知的自适应目标跟踪方法 | |
Shuai et al. | A ship target automatic recognition method for sub-meter remote sensing images | |
CN111611858A (zh) | 一种基于多角度判别的倾轧轨迹面自动检测方法和装置 | |
CN116416234A (zh) | 一种轨道机车表面缺陷检测方法及系统 | |
CN111091565B (zh) | 一种自适应运动特征匹配与识别的弓网接触点检测方法 | |
CN114429593A (zh) | 基于快速导向滤波的红外小目标检测方法及其应用 | |
CN104732190A (zh) | 一种基于正交纹理相关分析的合成孔径声纳目标检测方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |