CN108520521A - 基于图像处理的车轮踏面提取和拼接的方法 - Google Patents

Abstract

本发明公开了一种基于图像分割和图像融合的列车车轮踏面提取和拼接的方法，首先根据车轮图像采集设备定点成像的特性，划分车轮踏面初选区域，然后采用灰度投影技术，依据灰度投影值的大小以及变化速率，进一步定位踏面区域，在此基础上使用边缘检测方法检测车轮轮缘线，完成车轮踏面的提取，最后根据车轮踏面交叠区域的灰度差值计算最小平滑宽度，通过基于空间的像素匹配方法拼接车轮踏面，生成360度车轮踏面全景图像。本发明属于机车损伤检测系统的预处理技术，可以高效、快速地提取机车踏面区域，提升机车损伤检测系统的预处理速度，具有较强的实用性和广阔的应用前景。

Description

基于图像处理的车轮踏面提取和拼接的方法

技术领域

本发明是一种基于图像处理的列车车轮踏面提取和拼接的方法，涉及列车车轮图像处理技术，更具体的涉及列车车轮踏面损伤检测的预处理方法。

背景技术

随着铁路交通日益发达，铁路运营里程在不断增长，年客运总量飞速提升，铁路交通成为我国运输交通重要方式。铁路交通有覆盖面广、载客量大的特点，因此铁路交通已经成为国民主要交通运输工具之一。列车轮对是列车运行部件中重要的部分之一，车轮的工作状态将会直接影响到列车的运行速度和安全，车轮出现问题会造成难以想象的后果，列车维修人员必须按时检测车轮状态，及时发现车轮问题，更换超限车轮，从而避免列车事故的发生。车轮最重要的一个状态参数就是踏面损伤情况，踏面损伤大小对车轮寿命影响最大。目前国内外在车轮踏面损伤检测与识别算法方面研究较多，大多是按照图像预处理、损伤定位和检测等算法步骤进行。其中踏面图像的预处理和踏面区域的提取是车轮损伤检测的重要步骤之一，近年来关于列车车轮踏面损伤检测的方法层出不穷，但是如何有效快速的提取高速运转的列车车轮踏面还是一个难点。以下将通过具体实施方法结合附图对本发明的目的和方法进行详细阐述。

发明内容

本发明所要解决的技术问题是针对常见的列车踏面损伤检测方法对高速运行的列车踏面分割方法鲁棒性低，本发明就是为了解决现有技术上的不足，提供一种鲁棒性高，效果好的列车车轮踏面提取和拼接方法。

本发明为解决上述技术问题采用以下技术方案：

基于图像处理的列车车轮踏面提取和拼接的方法，包括以下步骤：

步骤1)，依据车轮图像采集设备定点成像的特性，将采集到的车轮图像按照采集设备的布局和拍摄顺序进行编号；

步骤2)，在轨道上放置车轮进行静态标定，在车轮图像内划分车轮踏面初选区域S，记录车轮踏面边缘线位置的校对数值l_fix，并通过最小二乘法拟合求得车轮踏面边缘线的曲线方程y；

步骤3)，动态采集车轮图像，在车轮踏面初选区域S内进行灰度垂直投影，依据投影值的大小和变化速率检测判断车轮踏面一侧轮缘在车轮图像中的位置l；

步骤4)，将步骤3)中检测获取车轮踏面一侧轮缘线位置l与步骤2中所记录的轮缘线位置的校对数值l_fix进行比较，通过差值σ修正左侧轮缘位置l，精确定位车轮踏面一侧轮缘线位置；结合车轮初选区域S的边界值，使用车轮踏面边缘线的曲线方程y提取出车轮踏面的一侧的边缘线，将该边缘线平移踏面宽度ω获取车轮另一侧的边缘线，成功提取车轮踏面；

步骤5)，提取车轮踏面后，根据车轮图像的编号，提取同一个车轮的多张车轮踏面图像，使用基于空间的像素匹配方法，将多张车轮踏面图像进行拼接和融合，生成完整的车轮踏面。

所述步骤1)中的车轮图像采集设备的详细布局和拍摄顺序如下：

在轨道两侧外沿对称布置图像采集设备，在列车进线方向放置磁钢测速开关，等距离间隔摆放若干台图像采集设备，所述图像采集设备的镜头方向与列车进线方向一致；当列车进线，驶入检测区域，图像采集设备根据磁钢测速开关检测到的车速依次触发相机，采集车轮图像；

所述步骤1)中的车轮图像的编号规则为N_wheel_N_side_N_pic，其中N_wheel表示轮对号，N_side代表图像采集设备的相对于列车进线的方位，有0和1两个值，；N_pic的取值范围决定于图像采集设备的数量，按照拍照顺序依次取值。

所述步骤2)静态标定的详细步骤如下：

步骤2.1)，依据图像采集设备的布局，将样板轮对停放在预先设定好的拍摄位置，调整采集设备，使轮对出现在相机视场的中间；

步骤2.2)，在静态标定获取的轮对图像上选取划分车轮踏面初选区域S；

步骤2.3)，记录车轮踏面初选区域S相关数值，包括轮对踏面初选区域的上边界U_ori，下边界B_ori，左右边界L_ori、R_ori以及车轮踏面边缘线位置的校对数值l_fix；

步骤2.4)，点选车轮踏面左侧轮缘的轮缘线上的点，求出轮缘线的曲率公式y＝ax²+bx+c。

所述步骤3)中的灰度垂直投影方法如下：

步骤3.1)，计算车轮图像轮对踏面初选区域的灰度均值μ；

步骤3.2)，在踏面初选区域内，逐列去统计灰度值大于μ的像素点个数；

所述步骤3)依据投影值的大小和变化速率检测判断车轮踏面左侧轮缘在车轮图像中的位置l的详细方法是：

车轮图像是i×j的二维像素矩阵，现将第j列的垂直投影结果，灰度值不为0的像素总数记为P_v(j)，与第j+1列的垂直投影结果P_v(j+1)进行比较，取P_v(j+1)与P_v(j)差的绝对值为δ，P_v(j+1)与P_v(j)比值的绝对值为η，公式如下：

δ＝|P_v(j+1)-P_v(j)|

找到垂直投影的最大值P_v(max)，当P_v(j)大于P_v(max)的2/3时，且相邻两列之间投影差δ大于40或比值η大于2，则将该列标记为一侧轮缘线位置l。

所述步骤5)中所介绍的列车车轮踏面拼接方法详细步骤为：

步骤5.1)，将同一轮对的踏面图像进行归一化处理，保证图像的宽度一致；

步骤5.2)，输入两张踏面图像，基于空间的像素匹配方法进行踏面图像的拼接，对两幅待拼接踏面图像的交叠部分逐列进行检测，每一列交叠部分的灰度值对应相减并将差值存储，选择每一列中差值绝对值最小的点作为相关性最强的位置，这个位置即为两幅图像的最佳匹配点；

步骤5.3)，按照最佳匹配点的位置，逐列将两幅踏面图像进行拼接，使用踏面拼接处平滑算法处理踏面拼接处的差异；

步骤5.4)，将两幅图像拼接的结果作为输入图像，和下一幅图像进行拼接处理，不断重复上述步骤，直至不同踏面图像拼接为一张完整的图像。

步骤5.2)中涉及的基于空间的像素匹配方法，该方法具体为：

首先根据公式计算拼接点两侧的灰度值，公式如下：

IN_i＝IA_i+(IB_i-IA_i)×K

其中IN_i是完成图像拼接处差异消除后的像素灰度值，IA_i、IB_i分别是交叠部分同一位置的像素灰度值；W是灰度平滑宽度，；K为权重系数；

然后计算每一个拼接像素点两侧L像素距离内的灰度差值Δg，根据灰度插值Δg将像素两侧w距离内的像素灰度修改，参数w是改正宽度，其值与灰度插值Δg成正比，关系式如下：

参数d是修改像素点离拼接像素点之间的距离；修改像素点离拼接曲线上初始位置的像素点的距离d越大，灰度修改值Δg′越小；修改像素点离初始位置的像素点的距离d越小，灰度修改值Δg′越大；

通过基于空间的像素匹配方法可以确定每一个拼接点的最佳改正宽度，进而平滑拼接缝，平滑踏面拼接处的差异，完成踏面的拼接。

本发明采用以上技术方案与现有技术相比，具有以下技术效果：

本发明提出了一种基于图像处理的列车车轮踏面提取和拼接的方法，通过分析车轮踏面的图像基本特征，能够以较快的速度提取车轮踏面区域踏面，提取结果的精准度达到了90％，鲁棒性高，同时本方法还能够实现车轮完整踏面区域的拼接，具有良好的实用性。踏面图像的预处理和踏面区域的提取是车轮损伤检测的重要步骤之一，本发明为车轮踏面损伤检测提供了鲁棒性高，效果好的踏面图像预处理方法，因此本方法具有广泛的应用前景。

附图说明

图1是车轮图像采集设备布局示意图；

图2是本发明基于图像处理的车轮踏面提取和拼接方法的流程示意图；

图3是车轮图像采集设备采集到的原始图像；

图4是车轮踏面初选区域划分结果示意图；

图5是车轮踏面图像灰度垂直投影结果示意图；

图6是车轮踏面提取分割结果示意图；

图7、图8是基于空间的像素匹配算法的车轮踏面拼接结果示意图。

具体实施方式

下面结合附图对本发明的技术方案做进一步的详细说明：

图1所示为基于图像处理的车轮踏面提取和拼接方法的流程示意图，总体上来说，整个检测方法包括下述过程：

第一步：数据预处理

依据车轮图像采集设备定点成像的特性，将采集到的车轮图像按照采集设备的布局和拍摄顺序进行编号；

第二步：静态标定

在轨道上放置车轮进行静态标定，在车轮图像内划分车轮踏面初选区域S，记录车轮踏面边缘线位置的校对数值l_fix，并通过最小二乘法拟合求得车轮踏面边缘线的曲线方程y；

第三步：灰度垂直投影

动态采集车轮图像，在车轮踏面初选区域S内进行灰度垂直投影，依据投影值的大小和变化速率检测判断车轮踏面左侧轮缘在车轮图像中的位置l；

第四步：提取踏面图像

将步骤3中检测获取车轮踏面左侧轮缘线位置l与步骤2中所记录的左侧轮缘线位置的校对数值l_fix进行比较，通过差值σ修正左侧轮缘位置l，精确定位车轮踏面左侧轮缘线位置。结合车轮初选区域S的边界值，使用车轮踏面边缘线的曲线方程y提取出车轮踏面的左边缘线，进而提取车轮另一侧的边缘线，成功提取车轮踏面。

第五步：拼接完整踏面

成功提取车轮踏面后，根据车轮图像的编号，提取同一个车轮的多张车轮踏面图像，使用基于空间的像素匹配方法，将多张车轮踏面图像进行拼接和融合，生成完整的车轮踏面。

下面结合图示与具体实例对本发明作进一步说明。

图2所示为本发明在实际场景中的车轮图像采集设备布局示意图，其中，图像采集系统用于采集机车轮对踏面的实时图像，包括铺设在轨道两侧的图像采集箱头，控制箱，工控机以及磁钢触发器，本实施例在车轮的一侧布置了5台图像采集设备及对应的磁钢触发器。为了达到更好的踏面图像，可以根据精度要求增加或减少图像采集设备的数量。

图3为车轮图像采集设备采集到的车轮原始图像，是列车进线方向左侧某一相机车轮图像。

图4为车轮踏面初选区域划分结果示意图，图中红色的区域即通过静态标定确定的他面初选区域，踏面初选区域决定了车轮踏面的上下界以及左右两侧的动态范围，可以提高踏面提取的精确度。

图5为车轮踏面图像灰度垂直投影结果示意图，根据踏面中心区域会出现较强的光斑的图像特点，使用灰度垂直投影可以快速定位车轮踏面的左右边界。

图6为车轮踏面提取分割结果示意图，根据灰度垂直投影的结果，车轮踏面边缘线的曲线方程以及踏面初选区域的上下边界，可以确定顺利提取出车轮踏面区域。

图7为基于空间的像素匹配算法的车轮踏面拼接结果示意图，图7是列车进线方向左侧5台相机采集的车轮图像提取出来的5个踏面图像，图8是5个踏面拼接获得的完成踏面图像。

下面对本发明一些步骤进行更详细的解释与描述。

第一步中，本发明所涉及的车轮图像采集设备的详细布局和拍摄顺序如下：

在轨道两侧外沿，镜像布置两侧的图像采集设备，实际场景中的车轮图像采集设备布局示意图如图2所示。以单侧为例，在列车进线方向放置磁钢测速开关，然后以600mm为间隔依次摆放5台图像采集设备，图像采集设备的镜头方向与列车进线方向一致。当列车进线，驶入检测区域，图像采集设备根据磁钢测速开关检测到的车速依次触发相机，采集车轮图像。

因此在中的车轮图像的编号规则为N_wheel_N_side_N_pic，其中N_wheel表示轮对号，取值范围决定于列车轮对总数；N_side有0和1两个值，0代表设备处于列车进线方向左侧，1代表设备处于列车进线方向右侧；N_pic的取值范围决定于图像采集设备的数量，按照拍照顺序依次取值；

第二步中，本发明所涉及的静态标定的详细步骤如下：

步骤2.1)，依据图像采集设备的布局，将样板轮对停放在预先设定好的拍摄位置，调整采集设备，使轮对出现在相机视场的中间；

步骤2.2)，车轮图像采集设备采集到的车轮原始图像如图3所示，车轮踏面初选区域划分结果示意图如图4所示，红色方框为车轮踏面初选区域S_i；

步骤2.3)，记录车轮踏面初选区域S相关数值，包括轮对踏面初选区域的上边界U_ori，下边界B_ori，左右边界L_ori、R_ori以及车轮踏面边缘线位置的校对数值l_fix；

步骤2.4)，点选车轮踏面左侧轮缘的轮缘线上的点，求出轮缘线的曲率公式y＝ax²+bx+c(y表示像素在图像里的纵坐标，x表示横坐标)；

第三步中，本发明所涉及的根据灰度垂直投影方法确定车轮踏面左侧轮缘位置的详细步骤如下：

步骤3.1)，计算车轮图像轮对踏面初选区域的灰度均值μ，灰度均值的计算方法根据下式计算：

步骤3.2)，在踏面初选区域内，逐列去统计灰度值大于μ的像素点个数，并用P_v(j)记录每一列的垂直投影结果，垂直投影根据下式计算：

步骤3.3)，自左向右，比较相邻两列的垂直投影结果，即P_v(j-1)与P_v(j)进行比较(j为列数)，取P_v(j-1)与P_v(j)差的绝对值为δ，P_v(j-1)与P_v(j)比值的绝对值为η，公式如下：

δ＝|P_v(j)-P_v(j-1)|

找到垂直投影的最大值P_v(max)，当P_v(j)大于P_v(max)的2/3时，且相邻两列之间投影差δ大于40或比值η大于2，则将该列标记为踏面的左边界J_R。车轮踏面图像灰度垂直投影结果示意图如图5所示，图像上方白色阴影为投影定位结果。

第五步中，本发明所涉及的列车车轮踏面拼接方法详细步骤为：

步骤5.1)，将同一轮对的五张踏面图像进行归一化处理，保证图像的宽度一致，如图7所示；

步骤5.2)，输入两张踏面图像，基于空间的像素匹配方法进行踏面图像的拼接，对两幅待拼接踏面图像的交叠部分逐列进行检测，对两幅待拼接踏面图像的交叠部分逐列进行检测，每一列交叠部分的灰度值对应相减并将差值存储，选择每一列中差值绝对值最小的点作为相关性最强的位置，这个位置即为两幅图像的最佳匹配点。

步骤5.4)，按照最佳匹配点的位置，逐列将两幅踏面图像进行拼接，使用踏面拼接处平滑算法处理踏面拼接处的差异。

步骤5.5)，将两幅图像拼接的结果作为输入图像，和下一幅图像进行拼接处理，不断重复上述步骤，直至五张踏面图像拼接为一张完整的图像，如图8所示。

第五步中，列车车轮踏面拼接过程中所涉及的基于空间的像素匹配方法具体步骤如下：

首先根据公式计算拼接点左右侧的灰度值，公式如下：

IN_i＝IA_i+(IB_i-IA_i)×K

其中IN_i是完成图像拼接处差异消除后的像素灰度值，IA_i、IB_i分别是交叠部分同一位置的像素灰度值。W是灰度平滑宽度，其值一般小于交叠区域的宽度。K为权重系数。

然后计算每一个拼接像素点两侧L像素距离内的灰度差值Δg，根据灰度插值Δg将像素两侧w距离内的像素灰度修改，参数w不同于W，是改正宽度，其值与灰度插值Δg成正比，关系式如下：

参数d是修改像素点离拼接像素点之间的距离。修改像素点离拼接曲线上初始位置的像素点的距离d越大，灰度修改值Δg′越小；修改像素点离初始位置的像素点的距离d越小，灰度修改值Δg′越大。

上述实施例仅为本发明技术方案的一种实现方式，不构成对本发明实施例的限定，本领域的技术人员在本发明公开的度分布设计方案的基础上，能够将其应用到其它的编译码方法中。

Claims (7)

1.基于图像处理的列车车轮踏面提取和拼接的方法，其特征在于，包括以下步骤：

步骤1)，依据车轮图像采集设备定点成像的特性，将采集到的车轮图像按照采集设备的布局和拍摄顺序进行编号；

步骤2)，在轨道上放置车轮进行静态标定，在车轮图像内划分车轮踏面初选区域S，记录车轮踏面边缘线位置的校对数值l_fix，并通过最小二乘法拟合求得车轮踏面边缘线的曲线方程y；

步骤3)，动态采集车轮图像，在车轮踏面初选区域S内进行灰度垂直投影，依据投影值的大小和变化速率检测判断车轮踏面一侧轮缘在车轮图像中的位置l；

步骤4)，将步骤3)中检测获取车轮踏面一侧轮缘线位置l与步骤2中所记录的轮缘线位置的校对数值l_fix进行比较，通过差值σ修正左侧轮缘位置l，精确定位车轮踏面一侧轮缘线位置；结合车轮初选区域S的边界值，使用车轮踏面边缘线的曲线方程y提取出车轮踏面的一侧的边缘线，将该边缘线平移踏面宽度ω获取车轮另一侧的边缘线，成功提取车轮踏面；

步骤5)，提取车轮踏面后，根据车轮图像的编号，提取同一个车轮的多张车轮踏面图像，使用基于空间的像素匹配方法，将多张车轮踏面图像进行拼接和融合，生成完整的车轮踏面。

2.根据权利要求1所述的基于图像处理的列车车轮踏面提取和拼接的方法，其特征在于，所述步骤1)中的车轮图像采集设备的详细布局和拍摄顺序如下：

在轨道两侧外沿对称布置图像采集设备，在列车进线方向放置磁钢测速开关，等距离间隔摆放若干台图像采集设备，所述图像采集设备的镜头方向与列车进线方向一致；当列车进线，驶入检测区域，图像采集设备根据磁钢测速开关检测到的车速依次触发相机，采集车轮图像；

所述步骤1)中的车轮图像的编号规则为N_wheel_N_side_N_pic，其中N_wheel表示轮对号，N_side代表图像采集设备的相对于列车进线的方位，有0和1两个值，；N_pic的取值范围决定于图像采集设备的数量，按照拍照顺序依次取值。

3.根据权利要求1所述的基于图像处理的列车车轮踏面提取和拼接的方法，其特征在于，所述步骤2)静态标定的详细步骤如下：

步骤2.1)，依据图像采集设备的布局，将样板轮对停放在预先设定好的拍摄位置，调整采集设备，使轮对出现在相机视场的中间；

步骤2.2)，在静态标定获取的轮对图像上选取划分车轮踏面初选区域S；

步骤2.3)，记录车轮踏面初选区域S相关数值，包括轮对踏面初选区域的上边界U_ori，下边界B_ori，左右边界L_ori、R_ori以及车轮踏面边缘线位置的校对数值l_fix；

步骤2.4)，点选车轮踏面左侧轮缘的轮缘线上的点，求出轮缘线的曲率公式y＝ax²+bx+c。

4.根据权利要求1所述的基于图像处理的列车车轮踏面提取和拼接的方法，其特征在于，

所述步骤3)中的灰度垂直投影方法如下：

步骤3.1)，计算车轮图像轮对踏面初选区域的灰度均值μ；

步骤3.2)，在踏面初选区域内，逐列去统计灰度值大于μ的像素点个数。

5.根据权利要求1所述的基于图像处理的列车车轮踏面提取和拼接的方法，其特征在于，所述步骤3)依据投影值的大小和变化速率检测判断车轮踏面左侧轮缘在车轮图像中的位置l的详细方法是：

车轮图像是i×j的二维像素矩阵，现将第j列的垂直投影结果，灰度值不为0的像素总数记为P_v(j)，与第j+1列的垂直投影结果P_v(j+1)进行比较，取P_v(j+1)与P_v(j)差的绝对值为δ，P_v(j+1)与P_v(j)比值的绝对值为η，公式如下：

δ＝|P_v(j+1)-P_v(j)|

找到垂直投影的最大值P_v(max)，当P_v(j)大于P_v(max)的2/3时，且相邻两列之间投影差δ大于40或比值η大于2，则将该列标记为一侧轮缘线位置l。

6.根据权利要求1所述的基于图像处理的列车车轮踏面提取和拼接的方法，其特征在于，所述步骤5)中所介绍的列车车轮踏面拼接方法详细步骤为：

步骤5.1)，将同一轮对的踏面图像进行归一化处理，保证图像的宽度一致；

步骤5.2)，输入两张踏面图像，基于空间的像素匹配方法进行踏面图像的拼接，对两幅待拼接踏面图像的交叠部分逐列进行检测，每一列交叠部分的灰度值对应相减并将差值存储，选择每一列中差值绝对值最小的点作为相关性最强的位置，这个位置即为两幅图像的最佳匹配点；

步骤5.3)，按照最佳匹配点的位置，逐列将两幅踏面图像进行拼接，使用踏面拼接处平滑算法处理踏面拼接处的差异；

步骤5.4)，将两幅图像拼接的结果作为输入图像，和下一幅图像进行拼接处理，不断重复上述步骤，直至不同踏面图像拼接为一张完整的图像。

7.根据权利要求6所述的基于图像处理的列车车轮踏面提取和拼接的方法，其特征在于，步骤5.2)中涉及的基于空间的像素匹配方法，该方法具体为：

首先根据公式计算拼接点两侧的灰度值，公式如下：

IN_i＝IA_i+(IB_i-IA_i)×K

其中IN_i是完成图像拼接处差异消除后的像素灰度值，IA_i、IB_i分别是交叠部分同一位置的像素灰度值；W是灰度平滑宽度，；K为权重系数；

然后计算每一个拼接像素点两侧L像素距离内的灰度差值Δg，根据灰度插值Δg将像素两侧w距离内的像素灰度修改，参数w是改正宽度，其值与灰度插值Δg成正比，关系式如下：

参数d是修改像素点离拼接像素点之间的距离；修改像素点离拼接曲线上初始位置的像素点的距离d越大，灰度修改值Δg′越小；修改像素点离初始位置的像素点的距离d越小，灰度修改值Δg′越大；

通过基于空间的像素匹配方法可以确定每一个拼接点的最佳改正宽度，进而平滑拼接缝，平滑踏面拼接处的差异，完成踏面的拼接。