CN103886331B - 一种基于监控视频的多特征融合的车辆体型分类方法 - Google Patents
一种基于监控视频的多特征融合的车辆体型分类方法 Download PDFInfo
- Publication number
- CN103886331B CN103886331B CN201410123000.0A CN201410123000A CN103886331B CN 103886331 B CN103886331 B CN 103886331B CN 201410123000 A CN201410123000 A CN 201410123000A CN 103886331 B CN103886331 B CN 103886331B
- Authority
- CN
- China
- Prior art keywords
- vehicle
- lbps
- feature
- sample image
- sub
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 52
- 230000004927 fusion Effects 0.000 title claims abstract description 7
- 239000002245 particle Substances 0.000 claims abstract description 45
- 238000005457 optimization Methods 0.000 claims abstract description 29
- 238000012549 training Methods 0.000 claims abstract description 15
- 238000012706 support-vector machine Methods 0.000 claims abstract description 14
- 238000012937 correction Methods 0.000 claims description 6
- 230000010339 dilation Effects 0.000 claims description 4
- 230000003628 erosive effect Effects 0.000 claims description 4
- 239000012466 permeate Substances 0.000 claims description 4
- 241000208340 Araliaceae Species 0.000 claims 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims 1
- 235000003140 Panax quinquefolius Nutrition 0.000 claims 1
- 235000008434 ginseng Nutrition 0.000 claims 1
- 238000004364 calculation method Methods 0.000 abstract 1
- 230000009514 concussion Effects 0.000 description 4
- 238000000605 extraction Methods 0.000 description 3
- 238000010606 normalization Methods 0.000 description 2
- 230000001186 cumulative effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000002068 genetic effect Effects 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
Landscapes
- Image Analysis (AREA)
- Traffic Control Systems (AREA)
Abstract
本发明公开了一种基于监控视频的多特征融合的车辆体型分类方法。包括依次进行的训练过程和识别过程:训练过程中,将所有各种车辆样本图像逐个输入到训练数据库中,计算各个车辆样本图像的HU矩特征、LBPS特征和长宽比特征并进行融合,再和类别标注一起输入到支持向量机中训练,并利用改进的粒子群方法来对支持向量机进行参数优化;识别过程中,先提取车辆前景,根据车辆前景计算得到该车辆图像序列的特征向量后输入到支持向量机中,输出识别结果。本发明方法能有效解决监控视频中车型分类准确率不高的问题,减少了后续的SVM训练的时间,且能满足实时性的需求,也避免了传统的粒子群方法容易陷入局部极小值和后期易震荡的缺点。
Description
技术领域
本发明涉及一种车辆体型分类方法,涉及一种基于监控视频的多特征融合的车辆体型分类方法。
背景技术
随着社会经济的高速发展,整个社会对交通运输的需求逐渐增高,交通密度也逐渐增大,在工作生活当中,道路容易出现拥堵,交通事故发生的频率也很高。因而,现在世界各国逐渐加大了对交通系统的管理,对交通问题也更加重视,道路交通管理领域也逐渐形成。
其中车型的分类与识别是智能交通系统中的一个重要分支,已有的车型识别分类方法主要是利用电子标签、感应线圈、压电传感还有各种光波手段在内的车型识别方法,大多容易受到外界环境的干扰,并且安装维护的成本较高,使用效果不甚理想。
发明内容
本发明所要解决的技术问题是提供一种基于监控视频的多特征融合的车辆体型分类方法,可以实时有效地进行运动车辆的检测与车型识别,并有效的提高了识别的准确率和实时性。
为解决上述技术问题,本发明所采用的技术方案包括:
本发明方法包括依次进行的训练过程和识别过程:
1)训练过程包括如下步骤:
1.1)将所有各种车辆样本图像逐个输入到训练数据库中,各种车辆样本图像包含车辆完整轮廓;
1.2)计算各个车辆样本图像的HU矩特征,并对其进行归一化处理,记为以下式1:
HU=(hu1,hu2,hu3,hu4,hu5,hu6,hu7) (1)
其中,hu1~hu7分别表示HU矩特征的每一个子分量;
1.3)计算各个车辆样本图像的LBPS特征:
对各个车辆样本图像分别进行2×2和3×3分块,计算每一个子块的LBP特征,接着计算每个子块的LBPS,LBPS以下公式2:
其中,lbp1~lbp59表示LBP特征的每一个子分量。计算出每个子块的LBPS值后,将上述2×2和3×3分块后得到的13个子块图像加上原始车辆样本图像得到总计14个子块图像,将该14个子块图像的LBPS值组合成该原始车辆样本图像的LBPS特征,并对其做归一化处理,记为以下公式3:
LBPS=(LBPS1,LBPS2,…LBPSi,…LBPS14) (3)
1.4)计算各个车辆样本图像分的长宽比信息:
设车辆样本图像的宽度为width,高度为height,长宽比特征记为以下公式4:
1.5)将步骤1.2)~1.4)中计算得到的HU矩特征、LBPS特征和长宽比特征融合为一个特征向量feature,用于表征车辆样本图像的特征信息,记为以下公式5:
feature=(LBPSHURatio) (5)
1.6)将上述车辆样本图像的特征向量feature和类别标注一起输入到支持向量机中训练,其中类别标注为车辆体型的标注,并利用改进的粒子群方法来对支持向量机进行参数优化;
2)识别过程包括如下步骤:
2.1)提取车辆前景,对需要识别的车辆视频中提取图像序列进行混合高斯背景建模,进行滤波处理和膨胀腐蚀后得到二值化图像,计算车辆前景的最大外接矩形,得到车辆前景的坐标信息;
2.2)对车辆前景按照步骤1.1)~1.5)进行计算得到该车辆图像的特征向量;
2.3)将车辆图像的特征向量输入步骤1.6)参数优化后的支持向量机中,输出车辆体型的识别结果。
所述的改进的粒子群方法为:在粒子群方法的速度更新式中,增加对粒子群中随机粒子的追随,速度位置更新公式为以下式6:
其中,为t+1时刻的飞行速度,为t时刻的飞行速度,为第i个粒子搜寻到的局部最优解,为整个粒子群搜寻到的全局最优解,为随机粒子在t时刻的局部最优解,为t时刻第i个粒子的位置,为t+1时刻第i个粒子的位置,ω为惯性权重,c1为第一学习因子,c2为第二学习因子,c3为第三学习因子,r1为第一控制参数,r2为第二控制参数,r3为第三控制参数;
接着引入t时刻的动量项改进后的粒子群方法如以下公式7:
其中,是粒子群方法中的t时刻的速度修正值,为t-1时刻的动量项,α为动量因子常数,其取值范围|α|∈[0,1),如果和同号,则动量因子常数α取正值;若和异号,此时动量因子常数α取负值。
t时刻的动量项表示为以下公式8:
本发明有如下有益效果:
1、本发明提出了基于多特征融合的方法来表征运动车辆的特征信息,和单一的特征表示方法相比,识别率更高。
2、本发明提出了LBPS的概念,和传统的LBP相比,更多的关注了图像的空间信息,并且降低了特征向量的维度,减少了后续的SVM训练的时间。
3、本发明提出了一种改进的粒子群方法来进行支持向量机的优化,避免了传统的粒子群方法容易陷入局部极小值和后期易震荡的缺点。
附图说明
图1为本发明的一种实施方法中训练过程的流程示意图。
图2为本发明的一种实施方法中识别过程的流程示意图。
具体实施方式
下面将结合附图对本发明的实施方式进行详细描述:
本发明方法包括训练过程和识别过程,首先进行训练过程,再进行识别过程:
1)如图1所示,训练过程包括如下步骤:
1.1)将所有各种车辆样本图像逐个输入到训练数据库中,各种车辆样本图像包含车辆完整轮廓;
1.2)计算各个车辆样本图像的HU矩特征,并对其进行归一化处理,记为一下式1:
HU=(hu1,hu2,hu3,hu4,hu5,hu6,hu7) (1)
其中,hu1~hu7分别表示HU矩特征的每一个子分量;
1.3)计算各个车辆样本图像分的LBPS特征:
对各个车辆样本图像分别进行2×2和3×3分块,计算每一个子块的LBP值,接着计算每个子块的LBPS值,LBPS值以下公式2:
其中,lbp1~lbp59表示LBP特征的每一个子分量。计算出每个子块的LBPS值后,将上述2×2和3×3分块后得到的13个子块图像加上原始车辆样本图像得到总计14个子块图像,将该14个子块图像的LBPS值组合成该原始车辆样本图像的LBPS特征,并对其做归一化处理,记为以下公式3:
LBPS=(LBPS1,LBPS2,…LBPSi,…LBPS14) (3)
1.4)计算各个车辆样本图像分的长宽比信息:
设车辆样本图像的宽度为width,高度为height,长宽比特征记为以下公式4:
1.5)将步骤1.2)~1.4)中计算得到的HU矩特征、LBPS特征和长宽比特征融合为一个特征向量feature,用于表征车辆样本图像的信息,记为以下公式5:
feature=(LBPSHURatio) (5)
1.6)将上述车辆样本图像的特征向量feature和类别标注一起输入到支持向量机中训练,其中类别标注为车辆体型的标注,并利用改进的粒子群方法来对支持向量机进行参数优化;
2)如图2所示,识别过程包括如下步骤:
2.1)提取车辆前景,对需要识别的车辆视频中提取图像序列进行混合高斯背景建模,进行滤波处理和膨胀腐蚀后得到二值化图像,计算车辆前景的最大外接矩形,得到车辆前景的坐标信息;
2.2)对车辆前景按照步骤1.1)~1.5)进行计算得到该车辆图像序列的特征向量;
2.3)将车辆图像的特征向量输入步骤1.6)参数优化后的支持向量机(SVM)中,输出车辆体型的识别结果。
上述改进的粒子群方法为:在粒子群方法的速度更新式中,增加对粒子群中随机粒子的追随,速度位置更新公式为以下式6:
其中,为t+1时刻的飞行速度,为t时刻的飞行速度,为第i个粒子搜寻到的局部最优解,为整个粒子群搜寻到的全局最优解,为随机粒子在t时刻的局部最优解,为t时刻第i个粒子的位置,为t+1时刻第i个粒子的位置,ω为惯性权重,c1为第一学习因子,c2为第二学习因子,c3为第三学习因子,r1为第一控制参数,r2为第二控制参数,r3为第三控制参数;
接着引入t时刻的动量项因此改进后的粒子群方法如以下公式7:
其中,是粒子群方法(PSO)中t时刻的速度修正值,为t-1时刻的动量项,α为动量因子常数,动量因子常数α的取值范围|α|∈[0,1),其中,动量因子常数α具体取值和前一个时刻的速度修正值相关,如果和同号,则动量因子常数α取正值,此时可以加快方法的进化速度;若和异号,说明方法此时存在一定的震荡,动量因子常数α取负值,减小的变化量,可以有效的缓解震荡情况。
t时刻的动量项表示为以下公式8:
本发明改进的粒子群方法由于让每个粒子不仅仅追随基本方法中自身的局部极值和粒子群的全局极值,还同时追随了一个随机粒子的局部极值,当陷入局部极值点时,因为随机粒子的引入,有一定的概率能够跳脱局部极值点,从而能够更有效的找寻到全局极值。同时引入了动量项,让粒子在速度修正的时候同时考虑前一时刻和前前时刻的速度修正值的情况。本发明能够有效地解决传统方法后期容易陷入局部极值点以及震荡严重的缺点。
其中的类别标注为车辆体型大小的标注。
本发明的具体实施例如下:
按照上述方法进行训练过程:
a)将所有各种车辆样本图像逐个输入到训练数据库中,训练数据库中共计1000幅小型车和500幅大型车的车辆样本图像;
b)分别计算上述各个车辆样本图像的HU矩特征、LBPS特征和长宽比特征融合为一个特征向量feature;。
c)将上述车辆样本图像的特征向量feature和车辆体型的类别标注一起输入到支持向量机中训练,本例中小型车标注为1,大型车的标注为2,并利用改进的粒子群方法来对支持向量机进行参数优化。
上述改进的粒子群方法计算时,惯性权重ω初始化为1,第一学习因子c1取1.5,第二学习因子c2取1.7,第三学习因子c3取2,r1,r2,r3取0~1之间的随机数。
然后,输入监控视频采集到的图像序列进行识别过程:
A)提取车辆前景,对需要识别的车辆视频中提取图像序列进行混合高斯背景建模,进行滤波处理和膨胀腐蚀后得到二值化图像,计算车辆前景的最大外接矩形,得到车辆前景的坐标信息。
B)对车辆前景按照上述方法的步骤进行计算得到该车辆图像序列的特征向量feature。
C)将车辆图像的特征向量输入参数优化后的支持向量机(SVM)中,输出车辆体型的识别结果,若为小型车,则输出为1,若为大型车,则输出为2。
本发明改进的粒子群方法由于让每个粒子不仅仅追随基本方法中自身的局部极值和粒子群的全局极值,还同时追随了一个随机粒子的局部极值,当陷入局部极值点时,因为随机粒子的引入,有一定的概率能够跳脱局部极值点,从而能够更有效的找寻到全局极值。同时引入了动量项,让粒子在速度修正的时候同时考虑前一时刻和前前时刻的速度修正值的情况。本发明能够有效地解决传统方法后期容易陷入局部极值点以及震荡严重的缺点。
上述具体实施方式用来解释说明本发明,而不是对本发明进行限制,在本发明的精神和权利要求的保护范围内,对本发明作出的任何修改和改变,都落入本发明的保护范围。
Claims (1)
1.一种基于监控视频的多特征融合的车辆体型分类方法,其特征在于:包括依次进行的训练过程和识别过程:
1)训练过程包括如下步骤:
1.1)将所有各种车辆样本图像逐个输入到训练数据库中,各种车辆样本图像包含车辆完整轮廓;
1.2)计算各个车辆样本图像的HU矩特征,并对其进行归一化处理,记为以下式1:
HU=(hu1,hu2,hu3,hu4,hu5,hu6,hu7) (1)
其中,hu1~hu7分别表示HU矩特征的每一个子分量;
1.3)计算各个车辆样本图像的LBPS特征:
对各个车辆样本图像分别进行2×2和3×3分块,计算每一个子块的LBP特征,接着计算每个子块的LBPS,LBPS以下公式2:
其中,lbp1~lbp59表示LBP特征的每一个子分量,计算出每个子块的LBPS值后,将上述2×2和3×3分块后得到的13个子块图像加上原始车辆样本图像得到总计14个子块图像,将该14个子块图像的LBPS值组合成该原始车辆样本图像的LBPS特征,并对其做归一化处理,记为以下公式3:
LBPS=(LBPS1,LBPS2,…LBPSi,…LBPS14) (3)
1.4)计算各个车辆样本图像分的长宽比信息:
设车辆样本图像的宽度为width,高度为height,长宽比特征记为以下公式4:
1.5)将步骤1.2)~1.4)中计算得到的HU矩特征、LBPS特征和长宽比特征融合为一个特征向量feature,用于表征车辆样本图像的特征信息,记为以下公式5:
feature=(LBPS HU Ratio) (5)
1.6)将上述车辆样本图像的特征向量feature和类别标注一起输入到支持向量机中训练,其中类别标注为车辆体型的标注,并利用改进的粒子群方法来对支持向量机进行参数优化;
2)识别过程包括如下步骤:
2.1)提取车辆前景,对需要识别的车辆视频中提取图像序列进行混合高斯背景建模,进行滤波处理和膨胀腐蚀后得到二值化图像,计算车辆前景的最大外接矩形,得到车辆前景的坐标信息;
2.2)对车辆前景按照步骤1.1)~1.5)进行计算得到该车辆图像的特征向量;
2.3)将车辆图像的特征向量输入步骤1.6)参数优化后的支持向量机中,输出车辆体型的识别结果;
所述的改进的粒子群方法为:在粒子群方法的速度更新式中,增加对粒子群中随机粒子的追随,速度位置更新公式为以下式6:
其中,为t+1时刻的飞行速度,为t时刻的飞行速度,为第i个粒子搜寻到的局部最优解,为整个粒子群搜寻到的全局最优解,为随机粒子在t时刻的局部最优解,为t时刻第i个粒子的位置,为t+1时刻第i个粒子的位置,ω为惯性权重,c1为第一学习因子,c2为第二学习因子,c3为第三学习因子,r1为第一控制参数,r2为第二控制参数,r3为第三控制参数;
接着引入t时刻的动量项改进后的粒子群方法如以下公式7:
其中,是粒子群方法中的t时刻的速度修正值,为t-1时刻的动量项,α为动量因子常数,其取值范围|α|∈[0,1),如果和同号,则动量因子常数α取正值;若和异号,此时动量因子常数α取负值;
t时刻的动量项表示为以下公式8:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410123000.0A CN103886331B (zh) | 2014-03-28 | 2014-03-28 | 一种基于监控视频的多特征融合的车辆体型分类方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410123000.0A CN103886331B (zh) | 2014-03-28 | 2014-03-28 | 一种基于监控视频的多特征融合的车辆体型分类方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103886331A CN103886331A (zh) | 2014-06-25 |
CN103886331B true CN103886331B (zh) | 2017-01-25 |
Family
ID=50955214
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410123000.0A Active CN103886331B (zh) | 2014-03-28 | 2014-03-28 | 一种基于监控视频的多特征融合的车辆体型分类方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103886331B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106842349B (zh) * | 2015-12-03 | 2019-06-07 | 北京国网富达科技发展有限责任公司 | 输电线路防外破检测方法及装置 |
CN107025459A (zh) * | 2016-01-29 | 2017-08-08 | 中兴通讯股份有限公司 | 一种车型识别方法及装置 |
CN106295662B (zh) * | 2016-08-17 | 2019-09-17 | 广州中国科学院软件应用技术研究所 | 一种车标识别方法和系统 |
CN107066953B (zh) * | 2017-03-22 | 2019-06-07 | 北京邮电大学 | 一种面向监控视频的车型识别、跟踪及矫正方法和装置 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101266717A (zh) * | 2008-04-25 | 2008-09-17 | 北京科技大学 | 一种基于多mems传感器的车辆检测识别系统及其方法 |
CN101556739A (zh) * | 2009-05-14 | 2009-10-14 | 浙江大学 | 基于本征图像分解的车辆检测算法 |
CN103258213A (zh) * | 2013-04-22 | 2013-08-21 | 中国石油大学(华东) | 一种用于智能交通系统中的动态车辆车型识别方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050105794A1 (en) * | 2003-08-25 | 2005-05-19 | Glenn Fung | Greedy support vector machine classification for feature selection applied to the nodule detection problem |
-
2014
- 2014-03-28 CN CN201410123000.0A patent/CN103886331B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101266717A (zh) * | 2008-04-25 | 2008-09-17 | 北京科技大学 | 一种基于多mems传感器的车辆检测识别系统及其方法 |
CN101556739A (zh) * | 2009-05-14 | 2009-10-14 | 浙江大学 | 基于本征图像分解的车辆检测算法 |
CN103258213A (zh) * | 2013-04-22 | 2013-08-21 | 中国石油大学(华东) | 一种用于智能交通系统中的动态车辆车型识别方法 |
Non-Patent Citations (2)
Title |
---|
基于多特征融合的汽车车型模糊识别方法;聂小燕等;《微计算机应用》;20111115(第11期);第47-52页 * |
基于粒子群算法和云模型的车型识别;唐朝霞等;《微电子学与计算机》;20131105(第11期);第80-83页 * |
Also Published As
Publication number | Publication date |
---|---|
CN103886331A (zh) | 2014-06-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
WO2022083784A1 (zh) | 一种基于车联网的道路检测方法 | |
Yoshioka et al. | Real-time object classification for autonomous vehicle using LIDAR | |
CN111695514B (zh) | 一种基于深度学习的雾天下车辆检测方法 | |
CN108304798A (zh) | 基于深度学习及运动一致性的街面秩序事件视频检测方法 | |
CN103886331B (zh) | 一种基于监控视频的多特征融合的车辆体型分类方法 | |
CN106781458A (zh) | 一种交通事故监控方法及系统 | |
CN105070053A (zh) | 一种识别车辆违规运动模式的智能交通监控摄像机 | |
CN111460919A (zh) | 一种基于改进YOLOv3的单目视觉道路目标检测及距离估计方法 | |
CN105303162B (zh) | 一种基于目标建议算法的航拍图像绝缘子识别方法 | |
Omar et al. | Detection of roads potholes using YOLOv4 | |
CN111709336A (zh) | 一种高速公路行人检测方法、设备及可读存储介质 | |
Kavitha et al. | Pothole and object detection for an autonomous vehicle using yolo | |
CN110321897A (zh) | 基于图像语义分割识别非机动车异常行为的方法 | |
CN107274668A (zh) | 一种基于车辆检测的道路拥堵建模方法 | |
CN103500329A (zh) | 基于车载移动激光扫描点云的路灯自动提取方法 | |
CN111274886A (zh) | 一种基于深度学习的行人闯红灯违法行为分析方法及系统 | |
CN103679214A (zh) | 基于在线面积估计和多特征决策融合的车辆检测方法 | |
CN113128476A (zh) | 一种基于计算机视觉目标检测的低功耗实时头盔检测方法 | |
Onim et al. | Traffic surveillance using vehicle license plate detection and recognition in bangladesh | |
CN116597411A (zh) | 极端天气下无人驾驶车辆识别交通标志的方法及系统 | |
CN106529391B (zh) | 一种鲁棒的限速交通标志检测与识别方法 | |
CN105404858A (zh) | 一种基于深度费舍尔网络的车型识别方法 | |
CN114639067A (zh) | 一种基于注意力机制的多尺度全场景监控目标检测方法 | |
Amon et al. | Philippine license plate character recognition using faster R-CNN with InceptionV2 | |
CN105574490A (zh) | 基于车前灯图像特征的车辆品牌识别方法和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |