CN105203552A - 一种360°踏面图像检测系统及其检测方法 - Google Patents

一种360°踏面图像检测系统及其检测方法 Download PDF

Info

Publication number
CN105203552A
CN105203552A CN201510597904.1A CN201510597904A CN105203552A CN 105203552 A CN105203552 A CN 105203552A CN 201510597904 A CN201510597904 A CN 201510597904A CN 105203552 A CN105203552 A CN 105203552A
Authority
CN
China
Prior art keywords
image
tread
wheel
camera
detection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510597904.1A
Other languages
English (en)
Inventor
石峥映
庄明磊
曹雷
黎宁
田裕鹏
梅劲松
王辉平
蒋银男
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Tycho Information Technology Co Ltd
Nanjing University of Aeronautics and Astronautics
Original Assignee
Nanjing Tycho Information Technology Co Ltd
Nanjing University of Aeronautics and Astronautics
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Tycho Information Technology Co Ltd, Nanjing University of Aeronautics and Astronautics filed Critical Nanjing Tycho Information Technology Co Ltd
Priority to CN201510597904.1A priority Critical patent/CN105203552A/zh
Publication of CN105203552A publication Critical patent/CN105203552A/zh
Pending legal-status Critical Current

Links

Abstract

本发明公开了一种360°踏面图像检测系统及其检测方法,系统包括相机、光源、车轮传感器和处理单元,所述的处理单元包括踏面损伤检测与识别系统和360°踏面图像拼接系统,所述的相机和光源安装在轨道的一侧,所述的相机与轨道之间的距离小于光源与轨道之间的距离,所述的相机和光源封装在密闭的盒子里,所述的车轮传感器传递触发信号至相机和光源。踏面损伤检测与识别系统主要分为图像预处理、车轮踏面损伤粗定位、损伤检测识别和报警;360°踏面图像拼接系统主要分为图像预处理、踏面图像分段和图像拼接。本发明能实现动态测量列车轮对状态目标,实时获取轮对踏面参数,极大减少人工测量带来的误差,提高检测车轮状态效率。

Description

一种360°踏面图像检测系统及其检测方法
技术领域
本发明涉及列车图像采集技术领域,特别是一种360°踏面图像检测系统及其检测方法。
背景技术
在交通日益发达的今天,铁路运营里程不断扩大,年客运量飞速增长,促使我国成为铁路运营大国。随着其运营速度的不断提高,且覆盖面广、载客量大,铁路已成为国民主要交通运输工具之一。列车轮对是列车运行部件中重要的部分,轮对的工作状态将会直接影响到货车的运行速度和安全,轮对出现问题会造成难以想象的后果,列车维修人员必须及时检测轮对状态,及时发现轮对问题,更换超限轮对,从而避免货车事故的发生。轮对最重要的一个状态参数就是踏面损伤,踏面损伤大小对车轮寿命影响最大。传统的车轮踏面损伤检测方法是人工手动检测,人工检测不仅存在效率低、精度低、劳动强度高等缺陷,而且检测过程不可避免会引入测量者人为因素,直接影响检测精度和可靠性,因此迫切需要动态检测车轮踏面损伤的设备,实时获取车轮踏面参数,实现实时监测车轮状态的目标。目前国内外在车轮踏面损伤检测与识别算法方面研究较多,大多是按照图像预处理、损伤定位和检测等算法步骤进行。
目前针对车轮踏面损伤检测与识别已经采用的图像预处理方法有:图像裁剪、图像增强、平滑去噪、图像分割等方法(谢子方.基于机器视觉的列车轮对踏面擦伤检测技术研究.广东工业大学.2007;宋志明.列车车轮踏面擦伤图像检测算法研究.硕士学位论文.2012,5;戴冲,姜向东.车轮踏面擦伤检测[J].仪器仪表用户.2007,14(5):95-96)。
图像裁剪:图像预处理首先对图像裁减运算,获得擦伤实测区域部分图像。裁剪后大大消减了图像的冗余信息,减少了图像处理运算量。
图像增强:常用方法有空域增强法、频域增强法、小波变换增强法。
平滑去噪:滤除干扰噪声,常用方法有:高斯平滑、中值滤波、均值滤波等。
图像分割:常用区域分割与边缘提取方法,将待检测目标检测出来。
目前针对车轮踏面损伤检测与识别已经采用的损伤定位方法有:
(1)基于踏面边缘线扫描搜索的擦伤定位方法(田丽丽,方宗德,赵勇.铁路货车车轮踏面伤损检测中剥离与擦伤定位方法[J],铁道学报,2009,31(5):31-36),算法如下:
1、根据得到的踏面边缘线,从左到右依次平移一个像素,每次平移得到一条扫描线,最终得到覆盖踏面区域的所有扫描线;
2、标示扫描线上跳变点;
3、统计扫描线上相邻跳变点之间的像素数目,找出擦伤线;
4、返回2,直到覆盖踏面的所有扫描线均已处理,结束循环。
(2)基于灰度矩的亚像素边缘定位法(谢子方.基于机器视觉的列车轮对踏面擦伤检测技术研究.广东工业大学.2007);
(3)基于特征点水平投影的裁剪法(宋志明.列车车轮踏面擦伤图像检测算法研究.硕士学位论文.2012,5;高向东,谢子方,赵传敏.基于结构光视觉传感的轮对踏面擦伤快速检测[J].铁道学报,2008,30(2):23-27);
(4)基于小波信号定位(戴冲,姜向东.车轮踏面擦伤检测[J].仪器仪表用户.2007,14(5):95-96)等方法。
目前针对车轮踏面损伤检测与识别已经采用的损伤检测方法有:
目前国内外车轮踏面检测方法主要分为两类:静态检测和动态检测。静态检测是指在列车静止(如检修)时进行的检测。该法检测精度高,但占用机车车辆的周转时间,且过程复杂(检修时,机车车辆需解体)。动态检测是指在机车行进时进行的测量。该法与静态检测同步发展,自动化程度高,不占用机车车辆的周转时间,效率高。具体方法分类为详见文献(张渝、王黎、高晓蓉。国内外车轮踏面检测技术综述[J].机车车辆工艺,2002(1):1-4)。
轮对踏面擦伤检测实际上是对提取特征后的图像进行识别,进一步获取该特征所反映的实体信息—即擦伤的面积和深度(黄熙.基于图像处理与机器视觉的车辆轮对踏面检测技术研究.中南大学.2002)。常用的方法有:
(1)激光位移传感器法:此方法主要使用了先进激光位移传感技术,通过激光传感器往复扫描踏面,生成踏面数字矩阵,再对矩阵进行分析、处理得到车轮踏面的擦伤情况。对踏面数据依次进行实际偏差获取、插值和对准、滤波去噪、擦伤区域分割,最后显示得到三维立体的擦伤区域图;
(2)图像检测法:通过高速数码摄像头获取车轮的图像,再由计算机进行图像还原或边缘提取等数据处理,然后通过与标准轮缘几何尺寸进行比对,测出车轮的擦伤大小。高速摄像头的安装方式有车载和地面安装两种,因此具体的数据处理过程也有所差异;
(3)利用激光检测踏面擦伤法:利用激光在粗糙表面上的散射特性,通过光电传感器接收反射回来的激光光强度变化,将其转换成电流或电压信号,再通过数字信号处理,得到踏面的表面粗糙度参数,来检测踏面擦伤情况(王伟强.城轨车辆车轮踏面擦伤检测技术的研究.硕士学位论文;吴开华.车辆轮对踏面缺陷的光电检测方法研究[J].光学技术,2005,31(3):465-467);
(4)基于机器视觉的擦伤测量法,通过建立擦伤数据矩阵摄像机标定和畸变校正,得到踏面深度实际值(谢子方.基于机器视觉的列车轮对踏面擦伤检测技术研究.广东工业大学.2007);
(5)基于振动信号的检测方法,通过小波分析,对列车运行中踏面与轨道产生的振动检测数据进行算法研究处理,数据处理中采用小波包分解重构的方法对信号滤波,利用直方图的特性得到擦伤信号的阈值,最后经过剔除邻近轮干扰等处理,最终检测出擦伤信号(马莉,傅八路,王泽勇,王黎,杨凯.列车车轮踏面擦伤信号处理算法研究[J].铁道技术监督.2008,11,37(3):5-7)。
发明内容
针对现有技术中存在的问题,本发明提供了一种能实现动态测量列车轮对状态目标,实时获取轮对踏面参数,极大减少人工测量带来的误差,提高检测车轮状态效率的360°踏面图像检测系统及其检测方法。
本发明的目的通过以下技术方案实现。
一种360°踏面图像检测系统,包括相机、光源、车轮传感器和处理单元,所述的处理单元包括踏面损伤检测与识别系统和360°踏面图像拼接系统,所述的相机和光源安装在轨道的一侧,所述的相机与轨道之间的距离小于、大于或等于光源与轨道之间的距离,所述的相机和光源封装在密闭的盒子里,所述的车轮传感器传递触发信号至相机和光源,所述的相机将图像信息传递至踏面损伤检测与识别系统和360°踏面图像拼接系统。
进一步的,所述的相机和光源设有多个,且一一对应设置;所述的多个相机等距离分布。或者,所述的相机设有多个,所述的光源呈区域分布且与所述的全部相机取景区域吻合。
进一步的,所述的相机设有5个,所述的光源设有5个,每个相机之间的距离为600mm。
进一步的,所述的相机为工业CCD相机,所述的光源为LED闪光光源。
同时,本发明还公开了一种360°踏面图像检测方法,步骤包括:
1)图像采集:工业CCD相机、LED闪光光源接收外触发信号完成车轮踏面图像采集,每台工业CCD相机拍两幅,5台工业CCD相机将每个车轮拍的十幅采集图像送到踏面损伤检测与识别系统和360°踏面图像拼接系统,之后同时执行步骤2)和步骤3);
2)踏面损伤检测与识别系统对采集到的车轮踏面图像进行处理,步骤包括:
第1步:图像预处理,确定踏面图像显著性区域,对图像进行裁剪;然后对裁剪后的图像进行矫正处理,矫正为矩形形式的踏面图像;采用图像水平投影、垂直投影方法完成踏面图像精确区域提取;
第2步:车轮踏面损伤粗定位,采用大津法求取灰度阈值,然后进行二值化,最后进行边缘检测和形态学处理得到损伤区域位置;
第3步:车轮踏面损伤检测与识别,采用图像模板匹配和特征提取算法实现踏面损伤类别自动识别;
第4步:报警,通过计算损伤区域面积大小得到踏面损伤等级判断,完成系统报警功能,之后执行步骤4);
3)360°踏面图像拼接系统对采集到的车轮踏面图像进行处理,步骤包括:
第1步:图像预处理,确定踏面图像显著性区域,对图像进行裁剪;然后对裁剪后的图像进行矫正处理,矫正为矩形形式的踏面图像;采用图像水平投影、垂直投影方法完成踏面图像精确区域提取;
第2步:踏面图像分段,对十张踏面图像同时进行图像预处理操作得到分段踏面区域,然后进行灰度变换,使得十张图像平均灰度大小相同;在灰度变化基础上做调整,再根据实际拼接需要,选择各分段踏面区域,作为拼接的原始图像;
第3步:最小二乘法边缘拟合:首先通过边缘检算法找出分段踏面图像轮缘边缘线,然后通过最小二乘算法拟合边缘,将弯曲边缘拟合成垂直边缘,去除踏面弧度影响,避免拼接图像出现凹凸感;
第4步:各段图像拼接,针对拟合图像,结合图像采集速度,利用图像间交叠公共视场区域中对应的特征点或边缘完成图像无缝拼接,在两幅图像拼接处采用灰度加权平均算法进行图像平滑处理;
第5步:合成360°踏面图像,拼接图像存储和输出,之后执行步骤4);
4)数据传输,将损伤检测与识别结果、拼接结果传输到终端设备上存储和显示。
进一步的,步骤1)中所述的工业CCD相机延迟时间1500μs,曝光时间300μs。
相比于现有技术,本发明的优点在于:能实现动态测量列车轮对状态目标,实时获取轮对踏面参数,极大减少人工测量带来的误差,提高检测车轮状态效率。
附图说明
图1为本发明中相机和光源的安装示意图(列车自右向左运动)。
图2为本发明的系统原理图。
图中:1、工业CCD相机2、LED闪光光源3、轨道4、车轮5、轨枕。
具体实施方式
下面结合说明书附图和具体的实施例,对本发明作详细描述。
本实施例的360°踏面图像检测系统,包括相机、光源、车轮传感器和处理单元,所述的相机为工业CCD相机1,所述的光源为LED闪光光源2。所述的处理单元包括踏面损伤检测与识别系统和360°踏面图像拼接系统,如图1所示,所述的工业CCD相机1和LED闪光光源2安装在轨道3的一侧,所述的工业CCD相机1和LED闪光光源2安装在轨枕5之间,所述的工业CCD相机1与轨道3之间的距离小于LED闪光光源2与轨道3之间的距离,所述的工业CCD相机1设有5个,所述的LED闪光光源2设有5个,每个工业CCD相机1之间的距离为600mm。所述的工业CCD相机1和LED闪光光源2封装在密闭的盒子里,工业CCD相机1、LED闪光光源2的位置和角度现场调整使得拍出的车轮4踏面满足拼接要求。所述的车轮传感器传递触发信号至工业CCD相机1和LED闪光光源2,触发信号控制工业CCD相机1拍照和LED闪光光源2闪光,所述的工业CCD相机1将图像信息传递至踏面损伤检测与识别系统和360°踏面图像拼接系统。
如图2所示。车轮踏面损伤检测与识别系统主要分为图像预处理、车轮踏面损伤粗定位、损伤检测识别和报警,图像预处理包括显著性区域提取、车轮图像矫正和车轮踏面区域精确提取;360°踏面图像拼接系统主要分为图像预处理、踏面图像分段和图像拼接,拼接系统预处理部分和踏面损伤检测系统相同。
具体的,一种360°踏面图像检测方法,步骤包括:
1)图像采集:工业CCD相机1、LED闪光光源2接收外触发信号完成车轮踏面图像采集,所述的工业CCD相机1延迟时间1500μs,曝光时间300μs。每台工业CCD相机1拍两幅,5台工业CCD相机1将每个车轮拍的十幅采集图像送到踏面损伤检测与识别系统和360°踏面图像拼接系统,之后同时执行步骤2)和步骤3);
2)踏面损伤检测与识别系统对采集到的车轮踏面图像进行处理,踏面损伤检测与识别系统利用图像处理算法识别车轮踏面损伤位置,判断车轮踏面损伤等级;步骤包括:
第1步:图像预处理,确定踏面图像显著性区域,对图像进行裁剪;然后对裁剪后的图像进行矫正处理,矫正为矩形形式的踏面图像;采用图像水平投影、垂直投影方法完成踏面图像精确区域提取;
显著性区域提取确定踏面大概区域位置,也是图像裁剪,预先规定一个ROI(RegionOfInterest)区域,既可以提高裁剪的精度,也可以在裁剪之后的图像处理过程中进一步减少不必要的运算;
车轮图像矫正通过标定方法获取标定板上圆心坐标,得到仿射变换参数,利用斜拍和正拍两次圆心坐标之间的变换关系得到仿射变换矩阵,通过读取仿射变换矩阵完成踏面图像矫正,矫正为矩形形式的踏面图像;
采用图像水平投影、垂直投影完成踏面图像区域精确提取。水平投影是统计图像水平方向上每行像素值总和,水平投影可以找出行最大像素值总和对应的行数,通过这个行数可以找出图像上下边界;垂直投影是统计图像垂直方向上每列像素值总和,垂直投影可以找出列最大像素总和对应的列数,通过这个列数可以找出图像左右边界;最后利用上下边界和左右边界就能实现踏面区域精确提取;
第2步:车轮踏面损伤粗定位,采用大津法求取灰度阈值,然后进行二值化,最后进行边缘检测和形态学处理得到损伤区域位置;大津法原理:
日本大津展之(Otsu)于1980年提出了最大方差阈值分割方法,也称作大津阈值。该方法基于图像灰度直方图,以目标和背景的类间方差最大(或类内方差最小)为阈值选取准则的,是在判决分析最小二乘法的基础上得到的。
在某个阈值处把直方图分割成两个部分,当两部分之间的方差为最大时,中间的灰度值为阈值。设一幅图共有m级灰度,灰度为i的像素数量为ni,此时可以得到:
图中像素的总数为
N = Σ i = 1 m n i - - - ( 2 - 1 )
各个灰度级的出现概率为
p i = n i N - - - ( 2 - 2 )
用阈值T将灰度值分割成两组C0={1~T}和C1={T+1~m},各组的概率为:
灰度在C0部分的概率为
w 0 = Σ i = 1 T p i = w ( T ) - - - ( 2 - 3 )
灰度在C1部分的概率为
w 1 = Σ i = T + 1 m p i = 1 - w 0 - - - ( 2 - 4 )
C0的均值为
u 0 = Σ i = 1 T ip i w 0 = u ( T ) w ( T ) - - - ( 2 - 5 )
C1的均值为
u 1 = Σ i = T + 1 m ip i w i = u - u ( T ) 1 - w ( T ) - - - ( 2 - 6 )
式中,是整幅图像灰度的均值;是阈值为T时的灰度均值,所以全部采样像素灰度均值为
u=w0u0+w1u1(2-7)
两组之间的方差为
δ 2 ( T ) = w 0 ( u 0 - u ) 2 + w 1 ( u 1 - u ) 2 = w 0 w 1 ( u 1 - u 0 ) = [ u w ( T ) - u ( T ) ] 2 w ( T ) [ 1 - w ( T ) ] - - - ( 2 - 8 )
从1~m改变T,通过寻找式(3-12)的最大值求取T,即求maxδ2(T)时的T*,此时的T*便是阈值,δ2(T)称作阈值选择函数。
二值化:
图像灰度值大于阈值T*灰度值变为255,小于阈值T*灰度值变为0,公式见2.9;
I ( x , y ) = 0 , i m a g e ( x , y ) < T * 255 , i m a g e ( x , y ) &GreaterEqual; T * - - - ( 2.9 )
边缘检测:
采用canny算子,根据图像边缘灰度变化梯度检测踏面图像轮廓边缘,去除非边缘干扰信息;
形态学处理:
为了去除背景干扰,找出擦伤位置,需要对边缘检测图像先进行膨胀处理,再进行腐蚀处理。
膨胀运算
膨胀运算是在二值图像中“加粗”或“加长”操作,将二值图像边界处的背景点并入前景点。主要用于填补图像中的小“空洞”和图像边界的凹陷区域,使图像边界向周围扩张。设图像集合为A,用于实现膨胀的结构元素为B。则用集合实现膨胀运动表示为定义如下所示: A &CirclePlus; B = { x | ( B ^ ) z &cap; A &NotEqual; &phi; } - - - ( 2 - 10 )
其中是指与B原点对称的点的集合。
腐蚀运算
腐蚀运算是在二值图像中“收缩”及“变细”操作,为了消除二值图像的边界点,使图像的边界向内收缩。设图像为A和腐蚀结构元素为B,则腐蚀运算用集合的方式可表示为AΘB,主要用来消除图像的前景目标尺寸小于B的干扰点。其定义如下所示:
A &Theta; B = { z | ( B ) z &SubsetEqual; A } - - - ( 2 - 11 )
由公式(2-18)可知,使用B对A腐蚀的结果是结构元素B完全包含在A中时仅取B的中心位置的集合。
第3步:车轮踏面损伤检测与识别,定位出擦伤位置,采用图像模板匹配和特征提取算法实现踏面损伤类别自动识别;
第4步:报警,通过计算损伤区域面积大小得到踏面损伤等级判断,完成系统报警功能,之后执行步骤4);
3)360°踏面图像拼接系统对采集到的车轮踏面图像进行处理,360°踏面图像拼接系统实现车轮踏面全景图像合成,利用图像拼接算法将车轮踏面图像组合成一副无缝的、高清晰的车轮图像,步骤包括:
第1步:图像预处理,确定踏面图像显著性区域,对图像进行裁剪;然后对裁剪后的图像进行矫正处理,矫正为矩形形式的踏面图像;采用图像水平投影、垂直投影方法完成踏面图像精确区域提取;
显著性区域提取确定踏面大概区域位置,也是图像裁剪,预先规定一个ROI(RegionOfInterest)区域,既可以提高裁剪的精度,也可以在裁剪之后的图像处理过程中进一步减少不必要的运算;
车轮图像矫正通过标定方法获取标定板上圆心坐标,得到仿射变换参数,利用斜拍和正拍两次圆心坐标之间的变换关系得到仿射变换矩阵,通过读取仿射变换矩阵完成踏面图像矫正,矫正为矩形形式的踏面图像;
采用图像水平投影、垂直投影完成踏面图像区域精确提取。水平投影是统计图像水平方向上每行像素值总和,水平投影可以找出行最大像素值总和对应的行数,通过这个行数可以找出图像上下边界;垂直投影是统计图像垂直方向上每列像素值总和,垂直投影可以找出列最大像素总和对应的列数,通过这个列数可以找出图像左右边界;最后利用上下边界和左右边界就能实现踏面区域精确提取;
第2步:踏面图像分段,对十张踏面图像同时进行图像预处理操作得到分段踏面区域,然后进行灰度变换,使得十张图像平均灰度大小相同;在灰度变化基础上做调整,再根据实际拼接需要,选择各分段踏面区域,作为拼接的原始图像;
第3步:最小二乘法边缘拟合:首先通过边缘检算法找出分段踏面图像轮缘边缘线,然后通过最小二乘算法拟合边缘,将弯曲边缘拟合成垂直边缘,去除踏面弧度影响,避免拼接图像出现凹凸感;
第4步:各段图像拼接,针对拟合图像,结合图像采集速度,利用图像间交叠公共视场区域中对应的特征点或边缘(如拼接线等)完成图像无缝拼接,在两幅图像拼接处采用灰度加权平均算法进行图像平滑处理,减少接缝对拼接效果的影响;
第5步:合成360°踏面图像,拼接图像存储和输出,之后执行步骤4);
4)数据传输,将损伤检测与识别结果、拼接结果传输到终端设备上存储和显示。
虽然本发明已以较佳实施例公开如上,但它们并不是用来限定本发明,任何熟悉此技艺者,在不脱离本发明之精神和范围内,自当可作各种变化或润饰,因此本发明的保护范围应当以本申请的权利要求保护范围所界定的为准。

Claims (10)

1.一种360°踏面图像检测系统,包括相机、光源、车轮传感器和处理单元,其特征在于:所述的处理单元包括踏面损伤检测与识别系统和360°踏面图像拼接系统,所述的相机和光源安装在轨道的一侧,所述的相机和光源封装在密闭的盒子里,所述的车轮传感器传递触发信号至相机和光源,所述的相机将图像信息传递至踏面损伤检测与识别系统和360°踏面图像拼接系统。
2.根据权利要求1所述的360°踏面图像检测系统,其特征在于:所述的相机和光源设有多个,且一一对应设置;所述的多个相机等距离分布。
3.根据权利要求1所述的360°踏面图像检测系统,其特征在于:所述的相机设有多个,所述的光源呈区域分布且与所述的全部相机取景区域吻合。
4.根据权利要求1、2或3所述的360°踏面图像检测系统,其特征在于:所述的相机和光源与轨道间的距离对应设置,所述的相机与轨道之间的距离与所述的光源与轨道之间的距离是等距离或不等距离。
5.一种360°踏面图像检测方法,其特征在于,步骤包括:
步骤一、图像采集:相机、光源接收外触发信号完成车轮踏面图像采集,每台相机拍一幅或一幅以上图像,多台相机将每个车轮拍的多幅采集图像送到踏面损伤检测与识别系统和360°踏面图像拼接系统,之后同时执行步骤二和步骤三;
步骤二、踏面损伤检测与识别系统对采集到的车轮踏面图像进行处理;
步骤三、360°踏面图像拼接系统对采集到的车轮踏面图像进行处理;
步骤四、数据传输,将损伤检测与识别结果、拼接结果传输到终端设备上存储和显示。
6.根据权利要求5所述的一种360°踏面图像检测方法,其特征在于,步骤一中:所述相机采用工业CCD相机,所述光源采用LED闪光光源,或者区域光源。
7.根据权利要求5所述的360°踏面图像检测方法,其特征在于,步骤二具体包括:
第2.1步:图像预处理,确定踏面图像显著性区域,对图像进行裁剪;然后对裁剪后的图像进行矫正处理,矫正为矩形形式的踏面图像;采用图像投影方法完成踏面图像精确区域提取;
第2.2步:车轮踏面损伤粗定位,采用大津法求取灰度阈值,然后进行二值化,最后进行边缘检测和形态学处理得到损伤区域位置;
第2.3步:车轮踏面损伤检测与识别,采用图像模板匹配和特征提取算法实现踏面损伤类别自动识别;
第2.4步:报警,通过计算损伤区域面积大小得到踏面损伤等级判断,完成系统报警功能,之后执行步骤四。
8.根据权利要求5所述的360°踏面图像检测方法,其特征在于,步骤三具体包括:
第3.1步:图像预处理,确定踏面图像显著性区域,对图像进行裁剪;然后对裁剪后的图像进行矫正处理,矫正为矩形形式的踏面图像;采用图像投影方法完成踏面图像精确区域提取;
第3.2步:踏面图像分段,对多张踏面图像同时进行图像预处理操作得到分段踏面区域,然后进行灰度变换,使得多张图像平均灰度大小相同;在灰度变化基础上做调整,再根据实际拼接需要,选择各分段踏面区域,作为拼接的原始图像;
第3.3步:最小二乘法边缘拟合:首先通过边缘检算法找出分段踏面图像轮缘边缘线,然后通过最小二乘算法拟合边缘,将弯曲边缘拟合成垂直边缘,去除踏面弧度影响,避免拼接图像出现凹凸感;
第3.4步:各段图像拼接,针对拟合图像,结合图像采集速度,利用图像间交叠公共视场区域中对应的特征点或边缘完成图像无缝拼接,在两幅图像拼接处采用灰度加权平均算法进行图像平滑处理;
第3.5步:合成360°踏面图像,拼接图像存储和输出,之后执行步骤四。
9.根据权利要求7所述的360°踏面图像检测方法,其特征在于:第2.2步中,所述的边缘检测采用canny算子,根据图像边缘灰度变化梯度检测踏面图像轮廓边缘,去除非边缘干扰信息;所述的形态学处理为了去除背景干扰,找出擦伤位置,需要对边缘检测图像先进行膨胀处理,再进行腐蚀处理。
10.根据权利要求7或8所述的360°踏面图像检测方法,其特征在于,所述的图像预处理:显著性区域提取确定踏面大概区域位置,预先规定一个ROI区域;车轮图像矫正通过标定方法获取标定板上圆心坐标,得到仿射变换参数,利用斜拍和正拍两次圆心坐标之间的变换关系得到仿射变换矩阵,通过读取仿射变换矩阵完成踏面图像矫正,矫正为矩形形式的踏面图像;采用图像水平投影找出图像上下边界、垂直投影找出图像左右边界;最后利用上下边界和左右边界实现踏面区域精确提取。
CN201510597904.1A 2015-09-18 2015-09-18 一种360°踏面图像检测系统及其检测方法 Pending CN105203552A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510597904.1A CN105203552A (zh) 2015-09-18 2015-09-18 一种360°踏面图像检测系统及其检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510597904.1A CN105203552A (zh) 2015-09-18 2015-09-18 一种360°踏面图像检测系统及其检测方法

Publications (1)

Publication Number Publication Date
CN105203552A true CN105203552A (zh) 2015-12-30

Family

ID=54951346

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510597904.1A Pending CN105203552A (zh) 2015-09-18 2015-09-18 一种360°踏面图像检测系统及其检测方法

Country Status (1)

Country Link
CN (1) CN105203552A (zh)

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106226316A (zh) * 2016-08-31 2016-12-14 江苏大学 一种单摄像机宽视场视觉螺纹检测装置及其检测方法
CN106384110A (zh) * 2016-09-12 2017-02-08 上海汇众汽车制造有限公司 具有自适应能力的钢印字符在线自动识别方法
CN106404791A (zh) * 2016-08-24 2017-02-15 北京主导时代科技有限公司 一种列车、在线车轮踏面图像检测装置及探伤系统
CN106683076A (zh) * 2016-11-24 2017-05-17 南京航空航天大学 基于纹理特征聚类的机车轮对踏面损伤检测的方法
CN106803087A (zh) * 2017-01-19 2017-06-06 南京航空航天大学 一种车号自动识别方法及系统
GB2546344A (en) * 2016-01-12 2017-07-19 Gobotix Ltd Vehicle underframe examination system
CN107146224A (zh) * 2017-05-03 2017-09-08 石家庄铁道大学 火车车轮踏面缺陷在线图像检测系统及方法
CN107144234A (zh) * 2017-04-21 2017-09-08 南京理工大学 一种城轨车辆轮对踏面轮廓拟合方法
CN108009462A (zh) * 2016-10-31 2018-05-08 中南大学 一种应用于轨检仪基本弦轨向数据的滤波方法
CN108418916A (zh) * 2018-02-28 2018-08-17 努比亚技术有限公司 基于双面屏的图像拍摄方法、移动终端及可读存储介质
CN108802044A (zh) * 2018-05-04 2018-11-13 南京航空航天大学 机车轮对踏面损伤检测系统的建立方法及系统
CN108830822A (zh) * 2018-03-12 2018-11-16 北京交通大学 基于改进Canny算子的受电弓碳滑板磨耗识别方法
CN108986090A (zh) * 2018-07-11 2018-12-11 天津工业大学 一种应用于机箱表面划痕检测的深度卷积神经网络方法
CN109709102A (zh) * 2019-01-17 2019-05-03 广州超音速自动化科技股份有限公司 模切机锂电池极片物理缺陷检测系统、方法及装置
CN109934811A (zh) * 2019-03-08 2019-06-25 中国科学院光电技术研究所 一种基于深度学习的光学元件表面缺陷检测方法
CN110009684A (zh) * 2019-04-15 2019-07-12 云南民族大学 一种用于捣固作业下轨枕定位方法
CN110596116A (zh) * 2019-07-23 2019-12-20 浙江科技学院 一种车辆表面瑕疵检测方法及检测系统
CN111023998A (zh) * 2019-12-11 2020-04-17 神华铁路货车运输有限责任公司 踏面损伤测量设备、方法、装置和存储介质
CN112109769A (zh) * 2020-09-28 2020-12-22 哈尔滨市科佳通用机电股份有限公司 一种城轨车辆车轮踏面损伤检测系统及方法
CN112712552A (zh) * 2020-12-29 2021-04-27 哈尔滨市科佳通用机电股份有限公司 一种车辆踏面擦伤的故障检测方法
CN113139523A (zh) * 2021-05-19 2021-07-20 青岛科技大学 一种基于瞳孔变化的动态虹膜定位方法
CN113884040A (zh) * 2021-09-24 2022-01-04 东莞市诺丽电子科技有限公司 一种基于位移传感器的列车车轮踏面检测系统及检测方法
CN115359460A (zh) * 2022-10-20 2022-11-18 小米汽车科技有限公司 用于车辆的图像识别方法、装置、车辆和存储介质
CN117078687A (zh) * 2023-10-17 2023-11-17 常州海图信息科技股份有限公司 基于机器视觉的轨道巡检系统及方法
CN117173071A (zh) * 2023-11-02 2023-12-05 青岛天仁微纳科技有限责任公司 一种纳米压印模具的图像拼接方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4932784A (en) * 1986-10-13 1990-06-12 Caltronic A/S Apparatus for track-based detection of the wheel profile of passing railway wheels
US20030160193A1 (en) * 2002-02-25 2003-08-28 Patentes Talgo, S.A. Rolling and lathing parameter measuring device by artificial viewing for railway vehicle wheels
CN2849715Y (zh) * 2005-11-29 2006-12-20 上海铁路局科学技术研究所 一种非接触式ccd高速动态检测装置
CN100999220A (zh) * 2006-12-18 2007-07-18 杭州电子科技大学 车辆轮对直径在线检测方法及装置
CN100999219A (zh) * 2006-12-18 2007-07-18 杭州电子科技大学 车辆轮对踏面缺陷在线检测方法及装置
CN102501887A (zh) * 2011-11-16 2012-06-20 郑州轻工业学院 车轮踏面缺陷非接触式动态检测装置及其检测方法
CN104608799A (zh) * 2014-12-12 2015-05-13 郑州轻工业学院 基于信息融合技术列车轮对踏面损伤在线检测与识别方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4932784A (en) * 1986-10-13 1990-06-12 Caltronic A/S Apparatus for track-based detection of the wheel profile of passing railway wheels
US20030160193A1 (en) * 2002-02-25 2003-08-28 Patentes Talgo, S.A. Rolling and lathing parameter measuring device by artificial viewing for railway vehicle wheels
CN2849715Y (zh) * 2005-11-29 2006-12-20 上海铁路局科学技术研究所 一种非接触式ccd高速动态检测装置
CN100999220A (zh) * 2006-12-18 2007-07-18 杭州电子科技大学 车辆轮对直径在线检测方法及装置
CN100999219A (zh) * 2006-12-18 2007-07-18 杭州电子科技大学 车辆轮对踏面缺陷在线检测方法及装置
CN102501887A (zh) * 2011-11-16 2012-06-20 郑州轻工业学院 车轮踏面缺陷非接触式动态检测装置及其检测方法
CN104608799A (zh) * 2014-12-12 2015-05-13 郑州轻工业学院 基于信息融合技术列车轮对踏面损伤在线检测与识别方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
孙冉: "在线式轮对踏面擦伤成像检测系统", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Cited By (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2546344A (en) * 2016-01-12 2017-07-19 Gobotix Ltd Vehicle underframe examination system
CN106404791A (zh) * 2016-08-24 2017-02-15 北京主导时代科技有限公司 一种列车、在线车轮踏面图像检测装置及探伤系统
CN106404791B (zh) * 2016-08-24 2019-05-24 北京主导时代科技有限公司 一种列车、在线车轮踏面图像检测装置及探伤系统
CN106226316A (zh) * 2016-08-31 2016-12-14 江苏大学 一种单摄像机宽视场视觉螺纹检测装置及其检测方法
CN106384110A (zh) * 2016-09-12 2017-02-08 上海汇众汽车制造有限公司 具有自适应能力的钢印字符在线自动识别方法
CN106384110B (zh) * 2016-09-12 2019-07-09 上海汇众汽车制造有限公司 具有自适应能力的钢印字符在线自动识别方法
CN108009462A (zh) * 2016-10-31 2018-05-08 中南大学 一种应用于轨检仪基本弦轨向数据的滤波方法
CN106683076B (zh) * 2016-11-24 2019-08-09 南京航空航天大学 基于纹理特征聚类的机车轮对踏面损伤检测的方法
CN106683076A (zh) * 2016-11-24 2017-05-17 南京航空航天大学 基于纹理特征聚类的机车轮对踏面损伤检测的方法
CN106803087A (zh) * 2017-01-19 2017-06-06 南京航空航天大学 一种车号自动识别方法及系统
CN107144234A (zh) * 2017-04-21 2017-09-08 南京理工大学 一种城轨车辆轮对踏面轮廓拟合方法
CN107146224A (zh) * 2017-05-03 2017-09-08 石家庄铁道大学 火车车轮踏面缺陷在线图像检测系统及方法
CN108418916A (zh) * 2018-02-28 2018-08-17 努比亚技术有限公司 基于双面屏的图像拍摄方法、移动终端及可读存储介质
CN108830822A (zh) * 2018-03-12 2018-11-16 北京交通大学 基于改进Canny算子的受电弓碳滑板磨耗识别方法
CN108802044A (zh) * 2018-05-04 2018-11-13 南京航空航天大学 机车轮对踏面损伤检测系统的建立方法及系统
CN108802044B (zh) * 2018-05-04 2020-09-15 南京航空航天大学 机车轮对踏面损伤检测系统的建立方法及系统
CN108986090A (zh) * 2018-07-11 2018-12-11 天津工业大学 一种应用于机箱表面划痕检测的深度卷积神经网络方法
CN109709102A (zh) * 2019-01-17 2019-05-03 广州超音速自动化科技股份有限公司 模切机锂电池极片物理缺陷检测系统、方法及装置
CN109934811A (zh) * 2019-03-08 2019-06-25 中国科学院光电技术研究所 一种基于深度学习的光学元件表面缺陷检测方法
CN110009684A (zh) * 2019-04-15 2019-07-12 云南民族大学 一种用于捣固作业下轨枕定位方法
CN110596116A (zh) * 2019-07-23 2019-12-20 浙江科技学院 一种车辆表面瑕疵检测方法及检测系统
CN110596116B (zh) * 2019-07-23 2022-06-07 浙江科技学院 一种车辆表面瑕疵检测方法及检测系统
CN111023998A (zh) * 2019-12-11 2020-04-17 神华铁路货车运输有限责任公司 踏面损伤测量设备、方法、装置和存储介质
CN112109769B (zh) * 2020-09-28 2021-07-16 哈尔滨市科佳通用机电股份有限公司 基于一种城轨车辆车轮踏面损伤检测系统的车轮踏面损伤检测方法
CN112109769A (zh) * 2020-09-28 2020-12-22 哈尔滨市科佳通用机电股份有限公司 一种城轨车辆车轮踏面损伤检测系统及方法
CN112712552A (zh) * 2020-12-29 2021-04-27 哈尔滨市科佳通用机电股份有限公司 一种车辆踏面擦伤的故障检测方法
CN113139523A (zh) * 2021-05-19 2021-07-20 青岛科技大学 一种基于瞳孔变化的动态虹膜定位方法
CN113884040A (zh) * 2021-09-24 2022-01-04 东莞市诺丽电子科技有限公司 一种基于位移传感器的列车车轮踏面检测系统及检测方法
CN113884040B (zh) * 2021-09-24 2023-10-10 东莞市诺丽科技股份有限公司 一种基于位移传感器的列车车轮踏面检测系统及检测方法
CN115359460A (zh) * 2022-10-20 2022-11-18 小米汽车科技有限公司 用于车辆的图像识别方法、装置、车辆和存储介质
CN117078687A (zh) * 2023-10-17 2023-11-17 常州海图信息科技股份有限公司 基于机器视觉的轨道巡检系统及方法
CN117078687B (zh) * 2023-10-17 2023-12-15 常州海图信息科技股份有限公司 基于机器视觉的轨道巡检系统及方法
CN117173071A (zh) * 2023-11-02 2023-12-05 青岛天仁微纳科技有限责任公司 一种纳米压印模具的图像拼接方法
CN117173071B (zh) * 2023-11-02 2024-01-30 青岛天仁微纳科技有限责任公司 一种纳米压印模具的图像拼接方法

Similar Documents

Publication Publication Date Title
CN105203552A (zh) 一种360°踏面图像检测系统及其检测方法
Liu et al. A review of applications of visual inspection technology based on image processing in the railway industry
US20200041284A1 (en) Map road marking and road quality collecting apparatus and method based on adas system
US20140348390A1 (en) Method and apparatus for detecting traffic monitoring video
CN109489724B (zh) 一种隧道列车安全运行环境综合检测装置及检测方法
CN108198417B (zh) 一种基于无人机的道路巡检系统
CN104063882B (zh) 一种基于双目的车辆视频测速方法
CN104392224A (zh) 一种公路路面裂纹检测方法
CN107239746B (zh) 一种面向道路救援安全监控的障碍物识别跟踪方法
CN109242035B (zh) 车底故障检测装置及方法
CN108986082A (zh) 一种基于epnp的钢轨廓形检测方法及系统
CN104318582A (zh) 一种基于图像不变性目标定位的高铁接触网旋转双耳部件销钉不良状态检测方法
EP2813973B1 (en) Method and system for processing video image
CN103632376A (zh) 一种两级框架的车辆部分遮挡消除方法
CN103077387B (zh) 视频中货运列车车厢自动检测方法
CN111368797A (zh) 一种基于路端单目摄像头的目标实时测距方法
CN110321855A (zh) 一种雾天检测预警装置
Zheng et al. Rail detection based on LSD and the least square curve fitting
CN108596968B (zh) 一种基于轨道3d深度图像的轨枕计数方法
CN103366578A (zh) 一种基于图像的车辆检测方法
Espino et al. Rail and turnout detection using gradient information and template matching
Chen et al. A novel lane departure warning system for improving road safety
CN116416589A (zh) 一种基于铁轨数据与几何性质的轨道点云提取方法
CN115857040A (zh) 一种机车车顶异物动态视觉检测装置及方法
KR102585146B1 (ko) 딥러닝 기반의 도로손상 탐지 장치 및 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: The Olympic Avenue in Jianye District of Nanjing city in Jiangsu province 211899 Xincheng Technology Park No. 69 building 01 layer 14

Applicant after: Nanjing Tycho Information Technology Co., Ltd.

Applicant after: Nanjing University of Aeronautics and Astronautics

Address before: 211899 Nanjing hi tech Industrial Park, Wanshou Road 15, Pukou Economic Development Zone, Jiangsu, Nanjing, B-8

Applicant before: Nanjing Tycho Information Technology Co., Ltd.

Applicant before: Nanjing University of Aeronautics and Astronautics

COR Change of bibliographic data
RJ01 Rejection of invention patent application after publication

Application publication date: 20151230

RJ01 Rejection of invention patent application after publication