CN114758116A - 一种城轨列车车号图像定位方法 - Google Patents

一种城轨列车车号图像定位方法 Download PDF

Info

Publication number
CN114758116A
CN114758116A CN202210359599.2A CN202210359599A CN114758116A CN 114758116 A CN114758116 A CN 114758116A CN 202210359599 A CN202210359599 A CN 202210359599A CN 114758116 A CN114758116 A CN 114758116A
Authority
CN
China
Prior art keywords
image
number image
pixel
car number
point
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210359599.2A
Other languages
English (en)
Inventor
朱俊霖
王馨
漆琛
赵文巘
吴泽宇
施伟华
宋开华
段钰
刘宁
邢宗义
姚小文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Science and Technology
Original Assignee
Nanjing University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Science and Technology filed Critical Nanjing University of Science and Technology
Priority to CN202210359599.2A priority Critical patent/CN114758116A/zh
Publication of CN114758116A publication Critical patent/CN114758116A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/048Activation functions

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Molecular Biology (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种城轨列车车号图像定位方法,包括以下步骤:采用基于亮度控制的单尺度Retinex算法,对现场拍摄的车号图像进行预处理,得到第一车号图像;对预处理得到的第一车号图像,采用SURF算法进行特征点的提取;计算提取到的特征点的特征描述;利用自制的车号图像与第一车号图像进行特征点配准,筛选出车号的潜在区域;通过笔画宽度测量算子SMO对SWT算法进行改进,对筛选出的车号潜在区域进行车号区域准确定位,得到车号区域。本发明城轨列车车号图像定位方法,具有实用性强、计算简单、定位准确率高的优点,通过扩展即能够实现列车车号的自动化识别。

Description

一种城轨列车车号图像定位方法
技术领域
本发明属于交通安全工程技术领域,特别是一种城轨列车车号图像定位方法。
背景技术
为了保障列车的安全可靠运行,对车辆系统的关键部件及运行状态(例如,轴温、受电弓磨耗、羊角状态等)进行在线监控是目前城轨列车系统运行安全保障的重点。车号作为车辆的唯一标志信息,它的准确高效识别对列车运行状态监控及故障定位具有重要意义。
目前的城轨列车车号识别技术大多依赖RFID技术,该车号识别系统由两部分组成:安装在列车底部的电子标签以及地面的读取设备。虽然该车号识别系统已经得到广泛应用,但仍存在标签易脱落损坏、丢失车号、维护流程复杂等缺点。随着机器视觉相关的发展,目前基于图像识别的汽车车牌识别技术已经相当成熟,并且在国内外的重要道路口与停车场已经得到广泛的应用。同时,随着工业相机和相关图像处理算法的发展,基于图像处理的城轨列车车号识别系统也逐渐开始得到认可和应用。因隧道中光线昏暗且列车运行速度较快,拍摄到的车号图像存在一定的畸变。同时在城轨列车车号图像中,车门、车窗等边缘元素较多,单纯采用边缘检测的车号图像定位算法无法满足现场使用要求。
发明内容
本发明的目的在于提供一种实用性强、计算简单以及定位准确率高的基于SURF和SWT的城轨列车车号图像定位方法,且稍加扩展能够实现列车车号的自动化识别。
实现本发明目的的技术解决方案是:一种城轨列车车号图像定位方法,包括以下步骤:
步骤1、采用基于亮度控制的单尺度Retinex算法,对现场拍摄的车号图像进行预处理,得到第一车号图像;
步骤2、对步骤1预处理得到的第一车号图像,采用SURF算法进行特征点的提取;
步骤3、计算步骤2中提取到的特征点的特征描述;
步骤4、利用自制的车号图像与第一车号图像进行特征点配准,筛选出车号的潜在区域;
步骤5、通过笔画宽度测量算子SMO对SWT算法进行改进,对步骤4中筛选出的车号潜在区域进行车号区域准确定位,得到车号区域。
进一步地,步骤1所述采用基于亮度控制的单尺度Retinex算法,对现场拍摄的车号图像进行预处理,具体步骤为:
步骤1.1、现场拍摄获取车号图像,该车号图像尺寸为M×N,得到高斯环绕函数G(x,y):
Figure BDA0003584476800000021
其中,M、N为正整数,(x,y)为像素点在图像的像素坐标,K是归一化因子,β是调谐常数,满足β≥0;
步骤1.2、根据光照模型及Retinex理论,计算单尺度Retinex算法的输出结果Ri(x,y):
Ri(x,y)=log[fi(x,y)]-log[fi(x,y)/G(x,y)]
其中fi(x,y)表示图像的第i个通道;
步骤1.3、针对单尺度Retinex算法中调谐常数β>2时产生的多余亮度,添加改进的Sigmoid函数以调节过高亮度,改进的Sigmoid函数表示为:
Figure BDA0003584476800000022
其中,s(g)是对比度调整后的图像,g是退化图像,T是调节值,γ是调整常数;
步骤1.4、对s(g)进行标准化处理以更改像素强度值范围,归一化图像n(s)计算公式为:
Figure BDA0003584476800000023
进一步地,步骤2所述对步骤1预处理得到的第一车号图像,采用SURF算法进行特征点的提取,具体步骤为:
步骤2.1、对第一车号图像进行积分计算得到积分图像,积分图像中任意一点的值ii(i,j),为第一车号图像左上角到任意点(i,j)相应的对角线区域灰度值的总和;
步骤2.2、在多个不同方向上用不同尺寸参数的箱式滤波器模板对积分图像做卷积运算,构建尺度空间;
步骤2.3、计算在尺度空间内每一层图像上的快速Hessian矩阵,Hessian矩阵H表示如下:
Figure BDA0003584476800000031
其中,Dxx,Dyy,Dxy分别表示DOG空间中的图像在x轴和y轴方向上的二阶偏导数和混合偏导数;
因为特征点的主曲率与Hessian矩阵的两个特征值α与β成正比,且有:
Figure BDA0003584476800000032
其中Tr(H)=Dxx+Dyy表示该矩阵的迹,Det(H)=DxxDyy-(Dxy)2表示该矩阵行列式的值;
设α=rβ,为了检查特征点是否对边缘响应较为敏感,将不满足下式的点看作不稳定边缘响应点,进行去除:
Figure BDA0003584476800000033
其中,Tr(H)和Det(H)分别为Hessian矩阵H的秩和行列式值,对Hessian矩阵的行列式计算表示为:det(H)=DxxDyy-(ωDxy)2,ω为权重系数;
步骤2.4、将经过Hessian矩阵处理过的每个像素点,与该像素点的上下层中对应3*3*3的立体邻域来进行非极大值抑制,将比立体近邻内的26个响应值都大的点选定为特征点,并在尺度空间采用插值法,得到特征点的准确位置信息和尺度信息。
进一步地,步骤3所述计算步骤2中提取到的特征点的特征描述,具体步骤为:
步骤3.1、以特征点为中心,取特征点周围半径为6s的圆形区域,s为特征点所在的DOG尺度空间的尺度值;计算邻域内的像素点在x,y两个方向上的哈尔小波响应值,按照像素点与特征点的距离来赋予该像素点设定的权值,随后对加权后的响应值进行直方图统计,选择直方图中权重最大的作为该特征点的主方向;
步骤3.2、通过统计像素点的哈尔小波响应值来对特征点进行描述,计算公式如下:
v=(∑dx,∑dy,∑|dx|,∑|dy|)
其中,dx,dy为每个像素点的哈尔小波在x方向和y方向的响应值,将圆形区域划分为16个子区域,∑dx,∑dy为16个子区域中所有的像素点的x方向的响应值之和、y方向的响应值之和,∑|dx|,∑|dy|为每个子区域x方向响应值的绝对值之和、y方向响应值的绝对值之和。
进一步地,步骤4所述利用自制的车号图像与第一车号图像进行特征点配准,筛选出车号的潜在区域,具体步骤为:
设置一张没有背景干扰的车号图像作为自制的车号图像模板,保证自制的车号图像特征与实际车号一致;
针对步骤3获取到车号图像每一个特征点的特征描述符,利用自制的车号图像与第一车号图像进行特征点配准;现场拍摄的车号图像中存在较多的边缘要素,因此存在特征点误匹配的现象;根据特征点匹配情况,对整个图像区域进行匹配结果划分,将符合特征匹配的区域设为潜在车号区域。
进一步地,步骤5所述通过笔画宽度测量算子SMO对SWT算法进行改进,具体过程为:
步骤5.1、对潜在车号区域,利用Canny边缘检测算法得到边缘图像;
步骤5.2、采用Sobel算子在水平方向和竖直方向上对潜在车号区域分别做卷积运算,得到水平方向和竖直方向上的梯度Gx、Gy,再得到图像的梯度方向θ=arctan(Gy/Gx);
步骤5.3、对于任一边缘像素点p,沿着p的梯度方向dp,确定一条射线
Figure BDA0003584476800000041
沿着射线方向,直到遇到第一个边缘像素点q;q的梯度方向为dq,若满足|dp+dq|<π/6,则将把p和q之间的欧式距离|p-q|作为p的笔画宽度,把p到q路径上的像素点赋值为||p-q||,如果沿着梯度方向没有合适的q点,那么则舍弃当前像素点p;
步骤5.4、基于图像的距离变换映射和内部骨架映射,采用笔画宽度测量算子SMO,测量被测对象的笔画宽度;
步骤5.5、根据SMO算子得到笔画宽度,为车号字符笔画宽度设置一个阈值范围[min,max],遍历所有满足阈值的边缘像素点,得到车号图像的SWT图;
步骤5.6、提取字符,形成字符候选区域,完成车号定位。
进一步地,所述步骤5.4具体如下:
步骤5.4.1、生成距离变换映射;
距离变换映射携带使用欧几里得距离度量相对于其最近的背景像素计算的每个对象像素的距离信息;
步骤5.4.2、生成内部骨架图;
使用骨架化技术从对象的二值图像生成单像素宽的内部骨架图,骨架图从边界区域逐渐移除对象像素,只保留中轴像素;
步骤5.4.3、计算笔画宽度测量算子SMO;
考虑距离变换和内部骨架映射,距离变换映射的实际距离权重表示为
Figure BDA0003584476800000051
其中P和Q分别表示矩阵行数和列数;同时,内部骨架映射MS表示为[MS(m,n)]P×Q,其中[MS(m,n)]P×Q∈[0,1],其中(m,n)为像素点在图像的像素坐标;
然后执行两个映射的逐像素乘法,生成一个新的特征映射F,表示为[F(m,n)]P×Q,新的特征映射包含内部骨架点的对象像素的距离值τ,也就是实际笔画宽度的一半,用距离平均值λ表示所有对象的笔画宽度,数学表达式如下:
Figure BDA0003584476800000052
其中,τ表示内部骨架像素的距离值,f(τ)表示距离τ的频率。
本发明与现有技术相比,其显著优点为:(1)相对于RFID技术,定位准确率提高且成本较低,更符合现场使用要求;(2)相对于现有车号定位技术,能显著提高车号图像亮度,更适应列车的隧道运行环境;(3)适应车号图像中边缘元素较多的基础条件,减少图像特征点误匹配现象及运算采用的像素点数量,提高车号图像定位准确率和计算效率;(4)对传统的SWT算法进行改进,减小伪笔画的干扰,提高了车号字符定位的准确度。
附图说明
图1是本发明城轨列车车号图像定位方法的流程图。
图2是输入的原始图像。
图3是采用SURF算法后的特征匹配图。
图4是使用改进的SWT算法得到的车号定位结果图。
具体实施方式
下面结合附图对本发明进一步描述。
本发明一种城轨列车车号图像定位方法,结合图1,包括以下步骤:
步骤1、采用基于亮度控制的单尺度Retinex算法,对现场拍摄的车号图像进行预处理,得到第一车号图像;
步骤2、对步骤1预处理得到的第一车号图像,采用SURF算法进行特征点的提取;
步骤3、计算步骤2中提取到的特征点的特征描述;
步骤4、利用自制的车号图像与第一车号图像进行特征点配准,筛选出车号的潜在区域;
步骤5、通过笔画宽度测量算子SMO对SWT算法进行改进,对步骤4中筛选出的车号潜在区域进行车号区域准确定位,得到车号区域。
作为一种具体实施例,步骤1所述采用基于亮度控制的单尺度Retinex算法,对现场拍摄的车号图像进行预处理,具体为输入图2所示的原始图像,采用基于亮度控制的单尺度Retinex改进算法对图像进行预处理,过程如下:
步骤1.1、现场拍摄获取车号图像,该车号图像尺寸为M×N,得到高斯环绕函数G(x,y):
Figure BDA0003584476800000061
其中,M、N为正整数,(x,y)为像素点在图像的像素坐标,K是归一化因子,β是调谐常数,满足β≥0;
步骤1.2、根据光照模型及Retinex理论,计算单尺度Retinex算法的输出结果Ri(x,y):
Ri(x,y)=log[fi(x,y)]-log[fi(x,y)*G(x,y)]
其中fi(x,y)表示图像的第i个通道;
步骤1.3、针对单尺度Retinex算法中调谐常数β>2时产生的多余亮度,添加改进的Sigmoid函数以调节过高亮度,改进的Sigmoid函数表示为:
Figure BDA0003584476800000071
其中,s(g)是对比度调整后的图像,g是退化图像,T是调节值,默认情况下T=2,γ是一个调整常数,默认情况下γ=2。
步骤1.4、对s(g)进行标准化处理以更改像素强度值范围,归一化图像n(s)计算公式为:
Figure BDA0003584476800000072
作为一种具体实施例,步骤2所述对步骤1预处理得到的第一车号图像,采用SURF算法进行特征点的提取,具体步骤为:
步骤2.1、对第一车号图像进行积分计算得到积分图像,积分图像中任意一点的值ii(i,j),为第一车号图像左上角到任意点(i,j)相应的对角线区域灰度值的总和;
步骤2.2、在多个不同方向上用不同尺寸参数的箱式滤波器模板对积分图像做卷积运算,构建尺度空间;
步骤2.3、计算在尺度空间内每一层图像上的快速Hessian矩阵,Hessian矩阵H表示如下:
Figure BDA0003584476800000073
其中,Dxx,Dyy,Dxy分别表示DOG空间中的图像在x轴和y轴方向上的二阶偏导数和混合偏导数;
因为特征点的主曲率与Hessian矩阵的两个特征值α与β成正比,且有:
Figure BDA0003584476800000074
其中Tr(H)=Dxx+Dyy表示该矩阵的迹,Det(H)=DxxDyy-(Dxy)2表示该矩阵行列式的值;
设α=rβ,为了检查特征点是否对边缘响应较为敏感,将不满足下式的点看作不稳定边缘响应点,进行去除:
Figure BDA0003584476800000081
其中,Tr(H)和Det(H)分别为Hessian矩阵H的秩和行列式值,对Hessian矩阵的行列式计算表示为:det(H)=DxxDyy-(ωDxy)2,ω为权重系数。
步骤2.4、将经过Hessian矩阵处理过的每个像素点,与该像素点的上下层中对应3*3*3的立体邻域来进行非极大值抑制,将比立体近邻内的26个响应值都大的点选定为特征点,并在尺度空间采用插值法,得到特征点的准确位置信息和尺度信息。
作为一种具体实施例,步骤3所述计算步骤2中提取到的特征点的特征描述,具体步骤为:
步骤3.1、以特征点为中心,取特征点周围半径为6s的圆形区域,s为特征点所在的DOG尺度空间的尺度值;计算邻域内的像素点在x,y两个方向上的哈尔小波响应值,按照像素点与特征点的距离来赋予该像素点设定的权值,随后对加权后的响应值进行直方图统计,选择直方图中权重最大的作为该特征点的主方向;
步骤3.2、通过统计像素点的哈尔小波响应值来对特征点进行描述,计算公式如下:
v=(∑dx,∑dy,∑|dx|,∑|dy|)
其中,dx,dy为每个像素点的哈尔小波在x方向和y方向的响应值,将圆形区域划分为16个子区域,∑dx,∑dy为16个子区域中所有的像素点的x方向的响应值之和、y方向的响应值之和,∑|dx|,∑|dy|为每个子区域x方向响应值的绝对值之和、y方向响应值的绝对值之和。
作为一种具体实施例,步骤4所述利用自制的车号图像与第一车号图像进行特征点配准,筛选出车号的潜在区域,具体步骤为:
设置一张没有背景干扰的车号图像作为自制的车号图像模板,保证自制的车号图像特征与实际车号一致;
针对步骤3获取到车号图像每一个特征点的特征描述符,利用自制的车号图像与第一车号图像进行特征点配准,特征点匹配结果如图3所示;现场拍摄的车号图像中存在较多的边缘要素,因此存在特征点误匹配的现象;根据特征点匹配情况,对整个图像区域进行匹配结果划分,将符合特征匹配的区域设为潜在车号区域。
作为一种具体实施例,步骤5所述通过笔画宽度测量算子SMO对SWT算法进行改进,具体过程为:
步骤5.1、对潜在车号区域,利用Canny边缘检测算法得到边缘图像;
步骤5.2、采用Sobel算子在水平方向和竖直方向上对潜在车号区域分别做卷积运算,得到水平方向和竖直方向上的梯度Gx、Gy,再得到图像的梯度方向θ=arctan(Gy/Gx);
步骤5.3、对于任一边缘像素点p,沿着p的梯度方向dp,确定一条射线
Figure BDA0003584476800000091
沿着射线方向,直到遇到第一个边缘像素点q;q的梯度方向为dq,若满足|dp+dq|<π/6,则将把p和q之间的欧式距离||p-q||作为p的笔画宽度,把p到q路径上的像素点赋值为||p-q||,如果沿着梯度方向没有合适的q点,那么则舍弃当前像素点p;
步骤5.4、基于图像的距离变换映射和内部骨架映射,采用笔画宽度测量算子SMO,测量被测对象的笔画宽度,具体如下:
步骤5.4.1、生成距离变换映射;
距离变换映射携带使用欧几里得距离度量相对于其最近的背景像素计算的每个对象像素的距离信息;
步骤5.4.2、生成内部骨架图;
使用骨架化技术从对象的二值图像生成单像素宽的内部骨架图,骨架图从边界区域逐渐移除对象像素,只保留中轴像素;
步骤5.4.3、计算笔画宽度测量算子SMO;
考虑距离变换和内部骨架映射,距离变换映射的实际距离权重表示为
Figure BDA0003584476800000092
其中P和Q分别表示矩阵行数和列数;同时,内部骨架映射MS表示为[MS(m,n)]P×Q,其中[MS(m,n)]P×Q∈[0,1],其中(m,n)为像素点在图像的像素坐标;
然后执行两个映射的逐像素乘法,生成一个新的特征映射F,表示为[F(m,n)]P×Q,新的特征映射包含内部骨架点的对象像素的距离值τ,也就是实际笔画宽度的一半,用距离平均值λ表示所有对象的笔画宽度,数学表达式如下:
Figure BDA0003584476800000101
其中,τ表示内部骨架像素的距离值,f(τ)表示距离τ的频率。
步骤5.5、根据SMO算子得到笔画宽度,为车号字符笔画宽度设置一个阈值范围[min,max],遍历所有满足阈值的边缘像素点,得到车号图像的SWT图;
步骤5.6、提取字符区域,完成车号定位,结果如图4,得到原始图像中对车号区域的准确定位,方便下一步对准确的车号区域图像进行处理。
综上所述,本发明城轨列车车号图像定位方法,具有以下特点:第一、相对于RFID技术,定位准确率提高且成本较低,更符合现场使用要求;第二、相对于现有车号定位技术,能显著提高车号图像亮度,更适应列车的隧道运行环境;第三、适应车号图像中边缘元素较多的基础条件,减少图像特征点误匹配现象及运算采用的像素点数量,提高车号图像定位准确率和计算效率;第四、对传统的SWT算法进行改进,减小伪笔画的干扰,提高了车号字符定位的准确度。

Claims (7)

1.一种城轨列车车号图像定位方法,其特征在于,包括以下步骤:
步骤1、采用基于亮度控制的单尺度Retinex算法,对现场拍摄的车号图像进行预处理,得到第一车号图像;
步骤2、对步骤1预处理得到的第一车号图像,采用SURF算法进行特征点的提取;
步骤3、计算步骤2中提取到的特征点的特征描述;
步骤4、利用自制的车号图像与第一车号图像进行特征点配准,筛选出车号的潜在区域;
步骤5、通过笔画宽度测量算子SMO对SWT算法进行改进,对步骤4中筛选出的车号潜在区域进行车号区域准确定位,得到车号区域。
2.根据权利要求1所述的城轨列车车号图像定位方法,其特征在于,步骤1所述采用基于亮度控制的单尺度Retinex算法,对现场拍摄的车号图像进行预处理,具体步骤为:
步骤1.1、现场拍摄获取车号图像,该车号图像尺寸为M×N,得到高斯环绕函数G(x,y):
Figure FDA0003584476790000011
其中,M、N为正整数,(x,y)为像素点在图像的像素坐标,K是归一化因子,β是调谐常数,满足β≥0;
步骤1.2、根据光照模型及Retinex理论,计算单尺度Retinex算法的输出结果Ri(x,y):
Ri(x,y)=log[fi(x,y)]-log[fi(x,y)*G(x,y)]
其中fi(x,y)表示图像的第i个通道;
步骤1.3、针对单尺度Retinex算法中调谐常数β>2时产生的多余亮度,添加改进的Sigmoid函数以调节过高亮度,改进的Sigmoid函数表示为:
Figure FDA0003584476790000012
其中,s(g)是对比度调整后的图像,g是退化图像,T是调节值,γ是调整常数;
步骤1.4、对s(g)进行标准化处理以更改像素强度值范围,归一化图像n(s)计算公式为:
Figure FDA0003584476790000021
3.根据权利要求1所述的城轨列车车号图像定位方法,其特征在于,步骤2所述对步骤1预处理得到的第一车号图像,采用SURF算法进行特征点的提取,具体步骤为:
步骤2.1、对第一车号图像进行积分计算得到积分图像,积分图像中任意一点的值ii(i,j),为第一车号图像左上角到任意点(i,j)相应的对角线区域灰度值的总和;
步骤2.2、在多个不同方向上用不同尺寸参数的箱式滤波器模板对积分图像做卷积运算,构建尺度空间;
步骤2.3、计算在尺度空间内每一层图像上的快速Hessian矩阵,Hessian矩阵H表示如下:
Figure FDA0003584476790000022
其中,Dxx,Dyy,Dxy分别表示DOG空间中的图像在x轴和y轴方向上的二阶偏导数和混合偏导数;
因为特征点的主曲率与Hessian矩阵的两个特征值α与β成正比,且有:
Figure FDA0003584476790000023
其中Tr(H)=Dxx+Dyy表示该矩阵的迹,Det(H)=DxxDyy-(Dxy)2表示该矩阵行列式的值;
设α=rβ,为了检查特征点是否对边缘响应较为敏感,将不满足下式的点看作不稳定边缘响应点,进行去除:
Figure FDA0003584476790000024
其中,Tr(H)和Det(H)分别为Hessian矩阵H的秩和行列式值,对Hessian矩阵的行列式计算表示为:det(H)=DxxDyy-(ωDxy)2,ω为权重系数;
步骤2.4、将经过Hessian矩阵处理过的每个像素点,与该像素点的上下层中对应3*3*3的立体邻域来进行非极大值抑制,将比立体近邻内的26个响应值都大的点选定为特征点,并在尺度空间采用插值法,得到特征点的准确位置信息和尺度信息。
4.根据权利要求1所述的城轨列车车号图像定位方法,其特征在于,步骤3所述计算步骤2中提取到的特征点的特征描述,具体步骤为:
步骤3.1、以特征点为中心,取特征点周围半径为6s的圆形区域,s为特征点所在的DOG尺度空间的尺度值;计算邻域内的像素点在x,y两个方向上的哈尔小波响应值,按照像素点与特征点的距离来赋予该像素点设定的权值,随后对加权后的响应值进行直方图统计,选择直方图中权重最大的作为该特征点的主方向;
步骤3.2、通过统计像素点的哈尔小波响应值来对特征点进行描述,计算公式如下:
v=(∑dx,∑dy,∑|dx|,∑|dy|)
其中,dx,dy为每个像素点的哈尔小波在x方向和y方向的响应值,将圆形区域划分为16个子区域,∑dx,∑dy为16个子区域中所有的像素点的x方向的响应值之和、y方向的响应值之和,∑|dx|,∑|dy|为每个子区域x方向响应值的绝对值之和、y方向响应值的绝对值之和。
5.根据权利要求1所述的城轨列车车号图像定位方法,其特征在于,步骤4所述利用自制的车号图像与第一车号图像进行特征点配准,筛选出车号的潜在区域,具体步骤为:
设置一张没有背景干扰的车号图像作为自制的车号图像模板,保证自制的车号图像特征与实际车号一致;
针对步骤3获取到车号图像每一个特征点的特征描述符,利用自制的车号图像与第一车号图像进行特征点配准;现场拍摄的车号图像中存在较多的边缘要素,因此存在特征点误匹配的现象;根据特征点匹配情况,对整个图像区域进行匹配结果划分,将符合特征匹配的区域设为潜在车号区域。
6.根据权利要求1所述的城轨列车车号图像定位方法,其特征在于,步骤5所述通过笔画宽度测量算子SMO对SWT算法进行改进,具体过程为:
步骤5.1、对潜在车号区域,利用Canny边缘检测算法得到边缘图像;
步骤5.2、采用Sobel算子在水平方向和竖直方向上对潜在车号区域分别做卷积运算,得到水平方向和竖直方向上的梯度Gx、Gy,再得到图像的梯度方向θ=arctan(Gy/Gx);
步骤5.3、对于任一边缘像素点p,沿着p的梯度方向dp,确定一条射线
Figure FDA0003584476790000041
沿着射线方向,直到遇到第一个边缘像素点q;q的梯度方向为dq,若满足|dp+dq|<π/6,则将把p和q之间的欧式距离||p-q||作为p的笔画宽度,把p到q路径上的像素点赋值为||p-q||,如果沿着梯度方向没有合适的q点,那么则舍弃当前像素点p;
步骤5.4、基于图像的距离变换映射和内部骨架映射,采用笔画宽度测量算子SMO,测量被测对象的笔画宽度;
步骤5.5、根据SMO算子得到笔画宽度,为车号字符笔画宽度设置一个阈值范围[min,max],遍历所有满足阈值的边缘像素点,得到车号图像的SWT图;
步骤5.6、提取字符,形成字符候选区域,完成车号定位。
7.根据权利要求6所述的城轨列车车号图像定位方法,其特征在于,所述步骤5.4具体如下:
步骤5.4.1、生成距离变换映射;
距离变换映射携带使用欧几里得距离度量相对于其最近的背景像素计算的每个对象像素的距离信息;
步骤5.4.2、生成内部骨架图;
使用骨架化技术从对象的二值图像生成单像素宽的内部骨架图,骨架图从边界区域逐渐移除对象像素,只保留中轴像素;
步骤5.4.3、计算笔画宽度测量算子SMO;
考虑距离变换和内部骨架映射,距离变换映射的实际距离权重表示为
Figure FDA0003584476790000042
其中P和Q分别表示矩阵行数和列数;同时,内部骨架映射MS表示为[MS(m,n)]P×Q,其中[MS(m,n)]P×Q∈[0,1],其中(m,n)为像素点在图像的像素坐标;
然后执行两个映射的逐像素乘法,生成一个新的特征映射F,表示为[F(m,n)]P×Q,新的特征映射包含内部骨架点的对象像素的距离值τ,也就是实际笔画宽度的一半,用距离平均值λ表示所有对象的笔画宽度,数学表达式如下:
Figure FDA0003584476790000051
其中,τ表示内部骨架像素的距离值,f(τ)表示距离τ的频率。
CN202210359599.2A 2022-04-07 2022-04-07 一种城轨列车车号图像定位方法 Pending CN114758116A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210359599.2A CN114758116A (zh) 2022-04-07 2022-04-07 一种城轨列车车号图像定位方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210359599.2A CN114758116A (zh) 2022-04-07 2022-04-07 一种城轨列车车号图像定位方法

Publications (1)

Publication Number Publication Date
CN114758116A true CN114758116A (zh) 2022-07-15

Family

ID=82329476

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210359599.2A Pending CN114758116A (zh) 2022-04-07 2022-04-07 一种城轨列车车号图像定位方法

Country Status (1)

Country Link
CN (1) CN114758116A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117173416A (zh) * 2023-11-01 2023-12-05 山西阳光三极科技股份有限公司 基于图像处理的铁路货运车号图像清晰化处理方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117173416A (zh) * 2023-11-01 2023-12-05 山西阳光三极科技股份有限公司 基于图像处理的铁路货运车号图像清晰化处理方法
CN117173416B (zh) * 2023-11-01 2024-01-05 山西阳光三极科技股份有限公司 基于图像处理的铁路货运车号图像清晰化处理方法

Similar Documents

Publication Publication Date Title
CN109101924B (zh) 一种基于机器学习的路面交通标志识别方法
CN108596129B (zh) 一种基于智能视频分析技术的车辆越线检测方法
CN109657632B (zh) 一种车道线检测识别方法
US10290219B2 (en) Machine vision-based method and system for aircraft docking guidance and aircraft type identification
CN108564814B (zh) 一种基于图像的停车场车位检测方法及装置
CN104392212B (zh) 一种基于视觉的道路信息检测及前方车辆识别方法
CN107301405A (zh) 自然场景下的交通标志检测方法
Zhang et al. Study on traffic sign recognition by optimized Lenet-5 algorithm
CN112819094B (zh) 一种基于结构相似度度量的目标检测与识别方法
CN104217427B (zh) 一种交通监控视频中车道线定位方法
CN107491720A (zh) 一种基于改进型卷积神经网络的车型识别方法
CN110263635B (zh) 基于结构森林和PCANet的标志物检测与识别方法
CN113436157B (zh) 一种用于受电弓故障的车载图像识别方法
CN106815583B (zh) 一种基于mser和swt相结合的夜间车辆车牌定位方法
CN111915583A (zh) 复杂场景中基于车载红外热像仪的车辆和行人检测方法
CN107247967B (zh) 一种基于r-cnn的车窗年检标检测方法
CN110516666B (zh) 基于mser和isodata相结合的车牌定位方法
Zhu An efficient lane line detection method based on computer vision
CN115841633A (zh) 一种电力塔和电力线关联矫正的电力塔和电力线检测方法
CN114758116A (zh) 一种城轨列车车号图像定位方法
CN115984806B (zh) 道路标线破损动态检测系统
CN111476233A (zh) 一种车牌号码的定位方法和装置
Sasaki et al. Development of inter-vehicle distance measurement system using camera-equipped portable device
CN115512310A (zh) 一种基于视频监控下车脸特征的车型识别方法及系统
CN111626180B (zh) 基于偏振成像的车道线检测方法及其装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination