CN104408475A - 一种车牌识别方法及车牌识别设备 - Google Patents
一种车牌识别方法及车牌识别设备 Download PDFInfo
- Publication number
- CN104408475A CN104408475A CN201410745124.2A CN201410745124A CN104408475A CN 104408475 A CN104408475 A CN 104408475A CN 201410745124 A CN201410745124 A CN 201410745124A CN 104408475 A CN104408475 A CN 104408475A
- Authority
- CN
- China
- Prior art keywords
- car
- negative sample
- training set
- license
- car plate
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 63
- 230000003068 static effect Effects 0.000 claims abstract description 55
- 238000001514 detection method Methods 0.000 claims abstract description 41
- 239000013598 vector Substances 0.000 claims description 35
- 238000012706 support-vector machine Methods 0.000 claims description 20
- 238000007689 inspection Methods 0.000 claims description 13
- 108010001267 Protein Subunits Proteins 0.000 claims description 9
- 239000000284 extract Substances 0.000 claims description 8
- 238000005070 sampling Methods 0.000 claims description 3
- 230000011218 segmentation Effects 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 2
- 230000002068 genetic effect Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 210000000056 organ Anatomy 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2411—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
Landscapes
- Engineering & Computer Science (AREA)
- Data Mining & Analysis (AREA)
- Theoretical Computer Science (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Bioinformatics & Computational Biology (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Evolutionary Biology (AREA)
- Evolutionary Computation (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
- Character Discrimination (AREA)
Abstract
本申请公开了一种车牌识别方法及车牌识别设备,根据原始车牌分类器检测现场的无车场景,收集现场的静态负样本;将静态负样本添加到车牌识别设备的原始训练集中,得到第一训练集,根据第一训练集训练第一车牌分类器;根据第一车牌分类器检测现场的有车场景,收集现场的动态负样本,将动态负样本添加到第一训练集中,得到第二训练集,根据第二训练集训练第二车牌分类器,并根据第二车牌分类器进行车牌识别。这样,利用第二训练集训练的第二车牌分类器能够去除静态负样本和动态负样本,此时现场可能出现的绝大部分负样本都能够被第二车牌分类器拒绝,从而达到对车牌的精确识别,减少车牌识别设备的误检率。
Description
技术领域
本申请涉及图像识别技术领域,特别是涉及一种车牌识别方法及车牌识别设备。
背景技术
为了保证良好的交通秩序或社会治安,基于车牌识别技术的车牌识别设备等产品被广泛应用于交叉路口、物业小区、商业楼宇及政府机构等位置。车牌识别技术一般分为车牌检测、字符分割识别及车牌投票这三大步骤。车牌检测,即从视频中检测车牌并确定其在每一帧图像中的位置,是车牌识别技术中比较关键和耗时的一步。
目前,车牌识别设备通常都是在实验室进行训练。通常情况下,车辆正面只有一个车牌,并且在路口、岗亭或卡口,车辆都是依次通行的,通过使用摄像机在各个时段和天气条件下在各个位置拍摄并储存大量视频,在这些视频的图像中,人工截取出每辆车的车牌图像作为正样本,人工截取出其中的非车牌图像作为负样本,然后通过正、负样本训练得到车牌识别设备。
然而,在实际应用中,现场环境和应用情况千变万化,车牌识别设备在实验室训练时由于负样本的数量和种类有限,无法兼顾所有的应用场景和工作时段,因而车牌识别设备在现场使用的时候会存在一定的误检,即把一些非车牌图像错误地识别成车牌。误检包括静态的误检和动态的误检。静态的误检是指现场的场景中一些背景,例如路边的栅栏,广告牌上的电话号码等,这些背景图案与实际的车牌很相似,车牌识别设备很容易把这些背景错误地识别成车牌,比如路边的栅栏与“111111”很相似,容易被识别成“省份L11111”,另外一些字符如“1”、“L”、“T”等也容易被错误地识别成“H”或“Y”。动态的误检是指移动的物体,例如汽车引擎的通风口、车身上的广告等,这些物体偶尔会出现,由于比较类似车牌,也会造成一定的误检,如果车牌识别设备应用在快递公司出入口,公交公司停车场等场所时,由于大量的车身上都具有广告和电话号码等,就容易出现大量误检,导致车牌识别出错。
发明内容
有鉴于此,本申请提供一种车牌识别方法及车牌识别设备,以实现对车牌的精确识别,减少车牌识别设备的误检率。
为了实现上述目的,本申请实施例提供的技术方案如下:
一种车牌识别方法,应用于布置在现场的车牌识别设备中,所述车牌识别设备中包括根据原始训练集训练的原始车牌分类器,所述车牌识别方法包括:
根据所述原始车牌分类器检测现场的无车场景,收集现场的静态负样本;所述静态负样本为所述现场的无车场景中被所述原始车牌分类器误检为车牌区域的背景图像;
将所述静态负样本添加到所述车牌识别设备的所述原始训练集中,得到第一训练集,根据所述第一训练集训练第一车牌分类器;
根据所述第一车牌分类器检测现场的有车场景,收集现场的动态负样本,将所述动态负样本添加到所述第一训练集中,得到第二训练集,根据所述第二训练集训练第二车牌分类器,并根据所述第二车牌分类器进行车牌识别;所述动态负样本为所述现场的有车场景中被所述第一车牌分类器误检为车牌区域的运动图像。
优选地,所述根据所述第一训练集训练第一车牌分类器,包括:
使用方向梯度直方图HOG特征对所述第一训练集里的每一个正样本进行表征,形成正样本HOG特征向量;
使用方向梯度直方图HOG特征对所述第一训练集里的每一个负样本进行表征,形成负样本HOG特征向量;
利用支持向量机SVM对所述正样本HOG特征向量和所述负样本HOG特征向量进行训练,获得第一车牌分类器。
优选地,所述根据所述第一车牌分类器检测现场的有车场景,收集现场的动态负样本,包括:
获取所述车牌识别设备检测现场的有车场景得到的视频图像,提取所述视频图像中的疑似车牌区域,根据所述第一车牌分类器检测所述疑似车牌区域中的车牌区域;
从所述车牌区域中分割出多个字符,根据支持向量机SVM训练的车牌字符识别模型对多个所述字符进行识别,并判断每个所述字符的识别置信度;
根据每个所述字符的识别置信度判断所述车牌区域是否有效,如果无效,将所述车牌区域作为所述现场的动态负样本。
优选地,所述根据每个所述字符的识别置信度判断所述车牌区域是否有效,包括:
判断所述字符的个数是否为7个;
如果是,判断每个所述字符的识别置信度是否大于或等于第一阈值;
如果是,判断7个所述字符的识别置信度的和是否大于或等于第二阈值;
如果是,则判定所述车牌区域有效,否则无效。
优选地,所述将所述动态负样本添加到所述第一训练集中,包括:
按照预设的时间间隔统计所述第一车牌分类器检测现场的有车场景的误检率,并判断所述误检率是否大于第三阈值;
如果是,判断收集到的所述动态负样本的个数是否大于或等于第四阈值;
如果是,将所述动态负样本添加到所述第一训练集中。
本申请还提供一种车牌识别设备,用于布置在现场进行车牌识别,所述车牌识别设备中包括根据原始训练集训练的原始车牌分类器,所述车牌识别设备还包括:
静态负样本收集模块,用于根据所述原始车牌分类器检测现场的无车场景,收集现场的静态负样本;所述静态负样本为所述现场的无车场景中被所述原始车牌分类器误检为车牌区域的背景图像;
第一车牌分类器模块,用于将所述静态负样本添加到所述车牌识别设备的所述原始训练集中,得到第一训练集,根据所述第一训练集训练第一车牌分类器;
第二车牌分类器模块,用于根据所述第一车牌分类器检测现场的有车场景,收集现场的动态负样本,将所述动态负样本添加到所述第一训练集中,得到第二训练集,根据所述第二训练集训练第二车牌分类器,并根据所述第二车牌分类器进行车牌识别;所述动态负样本为所述现场的有车场景中被所述第一车牌分类器误检为车牌区域的运动图像。
优选地,所述第一车牌分类器模块,包括:
正样本特征向量单元,用于使用方向梯度直方图HOG特征对所述第一训练集里的每一个正样本进行表征,形成正样本HOG特征向量;
负样本特征向量单元,用于使用方向梯度直方图HOG特征对所述第一训练集里的每一个负样本进行表征,形成负样本HOG特征向量;
训练单元,用于利用支持向量机SVM对所述正样本HOG特征向量和所述负样本HOG特征向量进行训练,获得第一车牌分类器。
优选地,所述第二车牌分类器模块,包括:
检测单元,用于获取所述车牌识别设备检测现场的有车场景得到的视频图像,提取所述视频图像中的疑似车牌区域,根据所述第一车牌分类器检测所述疑似车牌区域中的车牌区域;
识别单元,用于从所述车牌区域中分割出多个字符,根据支持向量机SVM训练的车牌字符识别模型对多个所述字符进行识别,并判断每个所述字符的识别置信度;
动态负样本单元,用于根据每个所述字符的识别置信度判断所述车牌区域是否有效,如果无效,将所述车牌区域作为所述现场的动态负样本。
优选地,所述动态负样本单元,包括:
第一判断子单元,用于判断所述字符的个数是否为7个;
第二判断子单元,用于如果是,判断每个所述字符的识别置信度是否大于或等于第一阈值;
第三判断子单元,用于如果是,判断7个所述字符的识别置信度的和是否大于或等于第二阈值;
判定子单元,用于如果是,则判定所述车牌区域有效,否则无效。
优选地,所述第二车牌分类器模块,包括:
统计单元,用于按照预设的时间间隔统计所述第一车牌分类器检测现场的有车场景的误检率,并判断所述误检率是否大于第三阈值;
判断单元,用于如果是,判断收集到的所述动态负样本的个数是否大于或等于第四阈值;
添加单元,用于如果是,将所述动态负样本添加到所述第一训练集中。
由以上本申请提供的技术方案,车牌识别方法应用于布置在现场的车牌识别设备中,所述车牌识别设备中包括根据原始训练集训练的原始车牌分类器,所述车牌识别方法根据所述原始车牌分类器检测现场的无车场景,收集现场的静态负样本;所述静态负样本为所述现场的无车场景中被所述原始车牌分类器误检为车牌区域的背景图像;将所述静态负样本添加到所述车牌识别设备的所述原始训练集中,得到第一训练集,根据所述第一训练集训练第一车牌分类器;根据所述第一车牌分类器检测现场的有车场景,收集现场的动态负样本,将所述动态负样本添加到所述第一训练集中,得到第二训练集,根据所述第二训练集训练第二车牌分类器,并根据所述第二车牌分类器进行车牌识别;所述动态负样本为所述现场的有车场景中被所述第一车牌分类器误检为车牌区域的运动图像。这样,先收集现场的静态负样本并添加到原始训练集,得到第一训练集,利用第一训练集训练第一车牌分类器去除静态负样本,然后再使用第一车牌分类器收集动态负样本并添加到第一训练集,得到第二训练集,利用第二训练集训练第二车牌分类器就可以去除收集到的静态负样本和动态负样本,此时第二训练集中已经包含了现场可能出现的绝大部分负样本,这些负样本能够被第二车牌分类器拒绝,从而达到对车牌的精确识别,减少车牌识别设备的误检率。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请中记载的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请提供的一种车牌识别方法的流程示意图;
图2为本申请提供的另一种车牌识别方法的流程示意图;
图3为本申请提供的又一种车牌识别方法的流程示意图;
图4为本申请提供的一种车牌识别设备的结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请中的技术方案,下面将结合附图,对本申请的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本申请保护的范围。
下面结合附图,对本申请的实施方案进行详细描述。
图1为本申请提供的一种车牌识别方法的流程示意图。
请参照图1所示,本申请实施例提供一种车牌识别方法,应用于布置在现场的车牌识别设备中,所述车牌识别设备中包括根据原始训练集训练的原始车牌分类器,所述车牌识别方法包括:
S100:根据所述原始车牌分类器检测现场的无车场景,收集现场的静态负样本;
所述静态负样本为所述现场的无车场景中被所述原始车牌分类器误检为车牌区域的背景图像;
在本申请实施例中,在现场安装车牌识别设备后,首先使用原始车牌分类器检测现场无车场景,收集导致原始车牌分类器误检的图像,作为错分负样本,即静态负样本。
车牌识别设备安装在现场的时候,要把实验室训练车牌分类器的原始正样本和原始负样本一起保存在现场的计算机内。开启车牌识别器后,在确保现场无车的情况下按照白昼、黑夜、阴天、晴天、强光、弱光等不同环境对现场进行视频流车牌检测,如果能检测到车牌,就表示现场场景中的某些背景被识别成车牌了,此时保留这些错误的样本,即现场的静态负样本。
S200:将所述静态负样本添加到所述车牌识别设备的所述原始训练集中,得到第一训练集,根据所述第一训练集训练第一车牌分类器;
在本申请实施例中,将现场的静态负样本添加到原始训练集,得到第一训练集,根据新的训练集即第一训练集训练新的车牌分类器即第一车牌分类器,从而用新的第一车牌分类器替代旧的原始车牌分类器进行车牌检测,就可以不受静态负样本的影响,实现对静态负样本的正确识别。
S300:根据所述第一车牌分类器检测现场的有车场景,收集现场的动态负样本,将所述动态负样本添加到所述第一训练集中,得到第二训练集,根据所述第二训练集训练第二车牌分类器,并根据所述第二车牌分类器进行车牌识别。
所述动态负样本为所述现场的有车场景中被所述第一车牌分类器误检为车牌区域的运动图像。
在本申请实施例中,用新的第一车牌分类器替代旧的原始车牌分类器后,在第一车牌分类器的使用过程中收集现场的动态负样本,并把收集的动态负样本添加到第一训练集中,得到第二训练集,重新根据第二训练集训练第二车牌分类器,并根据第二车牌分类器进行车牌识别,就可以不受现场的静态负样本和已经收集到的动态负样本的影响,实现对静态负样本和收集到的动态负样本的正确识别,减少误检率。
进一步的,在第二车牌分类器的使用过程中,本申请还可以继续收集动态负样本,并将收集的动态负样本继续添加进第二训练集中得到第三训练集,并且根据第三训练集训练第三车牌分类器,根据第三车牌分类器进行车牌识别,依次类推。该方法无需人工干预,经过多次迭代后能有效减少车牌识别设备的误检,后续的迭代方法与步骤300类似,属于同一原理的重复运用,此处不再赘述。
由以上本申请提供的技术方案,车牌识别方法应用于布置在现场的车牌识别设备中,所述车牌识别设备中包括根据原始训练集训练的原始车牌分类器,所述车牌识别方法根据所述原始车牌分类器检测现场的无车场景,收集现场的静态负样本;所述静态负样本为所述现场的无车场景中被所述原始车牌分类器误检为车牌区域的背景图像;将所述静态负样本添加到所述车牌识别设备的所述原始训练集中,得到第一训练集,根据所述第一训练集训练第一车牌分类器;根据所述第一车牌分类器检测现场的有车场景,收集现场的动态负样本,将所述动态负样本添加到所述第一训练集中,得到第二训练集,根据所述第二训练集训练第二车牌分类器,并根据所述第二车牌分类器进行车牌识别;所述动态负样本为所述现场的有车场景中被所述第一车牌分类器误检为车牌区域的运动图像。这样,先收集现场的静态负样本并添加到原始训练集,得到第一训练集,利用第一训练集训练第一车牌分类器去除静态负样本,然后再使用第一车牌分类器收集动态负样本并添加到第一训练集,得到第二训练集,利用第二训练集训练第二车牌分类器就可以去除收集到的静态负样本和动态负样本,此时第二训练集中已经包含了现场可能出现的绝大部分负样本,这些负样本能够被第二车牌分类器拒绝,从而达到对车牌的精确识别,减少车牌识别设备的误检率。
上述实施例提供了一种车牌识别方法,其中,根据所述第一训练集训练第一车牌分类器的方法,本实施例将结合附图进行说明:
图2为本申请提供的另一种车牌识别方法的流程示意图。
请参照图2所示,本申请实施例提供的方法,包括:
S201:使用方向梯度直方图HOG特征对所述第一训练集里的每一个正样本进行表征,形成正样本HOG特征向量;
S202:使用方向梯度直方图HOG特征对所述第一训练集里的每一个负样本进行表征,形成负样本HOG特征向量;
S203:利用支持向量机SVM对所述正样本HOG特征向量和所述负样本HOG特征向量进行训练,获得第一车牌分类器。
原始训练集中包括原始正样本和原始负样本,将静态负样本加入原始训练集中后,得到的第一训练集中同样包括正样本和负样本,其中的负样本是指原始负样本与静态负样本的和。
基于视频的车牌检测方法有很多,包括基于线模板的二值化图像中的角检测算法,利用遗传算法检测车牌,基于Haar特征的Adaboost检测,还有使用基于HOG特征的支持向量机训练的分类器检测等等。
在本申请实施例中,优选采用基于HOG特征的支持向量机训练第一车牌分类器。使用HOG特征对每一幅车牌的正、负样本进行表征,形成HOG特征向量。最后使用支持向量机对HOG特征进行训练,获得第一车牌分类器。
HOG(Histogram of oriented gradients)刻画图像的局部梯度幅值和方向特征。HOG允许块之间相互重叠,因此对光照变化和小量的偏移并不敏感,能有效地刻画出边缘特征。对于角度大的车牌检测效果好。之后通过形成的HOG特征向量建立HOG模型,通过HOG模型进行多尺度检测,对图像中每个能通过HOG验证的区域,都用一个方框区域显示,提取通过HOG模型检测的方框区域。
HOG特征是灰度图的梯度统计信息,梯度主要存在于边缘的地方。可以根据如下公式计算梯度,获得HOG特征,其中I(x,y)表示在图像I上的一个点。
图像的一阶梯度的大小为:
梯度方向为:Ang(x,y)=arccos(I(x+1,y)-I(x-1,y)/R)。
直方图方向为9个,将每个分块中所有像素的一维梯度直方图累加到其中,就形成了最终的HOG特征。
支持向量机(Support Vector Machine,简称SVM)是一种快速的模式识别方法。SVM训练的样本集可以表示为:(x1,y1),(x2,y2),…,(xn,yn)。
其中:xi∈Rd,Rd是训练样本集。yi∈{-1,1},yi=1表示xi∈ω1,yi=-1表示xi∈ω2,ω1和ω2是两种不同的分类。
对于线性分类,决策函数为g(x)=ωTx+b,其中ω是分类面的梯度,而b是偏置。ωTx+b=1和ωTx+b=-1的分类间隔为SVM为了最大化分类间隔,需要求解经过推导,g(x)表示为:其中αi是训练得到的支持向量系数。
在本申请实施例中,将现场的静态负样本添加到原始训练集,根据得到的第一训练集训练新的第一车牌分类器,训练流程可以为:
1、使用HOG特征对训练集里的每一幅车牌图像正样本进行表征,形成正样本HOG特征向量。
2、使用HOG特征对训练集里的每一幅车牌图像负样本进行表征,形成负样本HOG特征向量。
3、利用支持向量机对1和2得到的HOG特征进行训练,获得车牌分类器。
进一步的,在上述实施例的基础上,根据所述第一车牌分类器检测现场的有车场景,收集现场的动态负样本的方法,本实施例将结合附图进行说明:
图3为本申请提供的又一种车牌识别方法的流程示意图。
请参照图3所示,本申请实施例提供的方法,包括:
301:获取所述车牌识别设备检测现场的有车场景得到的视频图像,提取所述视频图像中的疑似车牌区域,根据所述第一车牌分类器检测所述疑似车牌区域中的车牌区域;
本申请提出的车牌识别方法是粗检加精检的车牌检测策略,即先通过一系列方法,找到疑似包含车牌的区域,然后再使用基于HOG特征的支持向量机训练出来的第一车牌分类器对疑似包含车牌的疑似车牌区域进行检测,找到车牌区域。粗检的方法很多,例如提取全图的边缘,寻找边缘密度大的区域。或者寻找全图显著区域等。粗检的细节不在本发明讨论范围。
302:从所述车牌区域中分割出多个字符,根据支持向量机SVM训练的车牌字符识别模型对多个所述字符进行识别,并判断每个所述字符的识别置信度;
303:根据每个所述字符的识别置信度判断所述车牌区域是否有效,如果无效,将所述车牌区域作为所述现场的动态负样本。
在实际使用过程中,对粗检得到的疑似包含车牌区域使用第一车牌分类器进行检测,然后对检测得到的车牌区域进行分割与识别,如果分割与识别的结果不能满足有效车牌的要求,则把该样本作为动态负样本。
由于车牌分类器存在一定的漏检和误检,因此检测的结果可能是0个,1个或者多个车牌区域。对检测到的车牌区域进行分割与识别,本发明的字符识别使用的是通过支持向量机训练出来的车牌字符识别模型,然后使用该模型对单个字符进行识别。每个被识别出来的字符都含有一个置信度,最后根据分割和识别的结果判断检测到得目标是否有效:
1、车牌必须包含7个字符;
2、每个字符的置信度必须达到各自的阈值(预设的第一阈值);
3、7个字符的置信度加起来的总和也必须达到一个阈值(预设的第二阈值)。
满足以上三个条件的车牌区域即判定为有效车牌,检测出来的车牌区域如果不能满足以上三个条件,就被判定为无效车牌,即动态负样本。
另外,在本申请实施例提供的上述方法的基础上,在将动态负样本添加到第一训练集中时,可以包括:
按照预设的时间间隔统计所述第一车牌分类器检测现场的有车场景的误检率,并判断所述误检率是否大于预设的第三阈值;如果是,判断收集到的所述动态负样本的个数是否大于或等于预设的第四阈值;如果是,将所述动态负样本添加到所述第一训练集中。
在本申请实施例中,车牌识别设备还可以以一定的时间间隔检查当前系统的误检率。如果误检率大于预设的第三阈值,检查收集到的负样本个数是否满足训练要求(预设的第四阈值),如果不满足,则继续收集动态负样本,如果收集到足够的动态负样本,则把收集的动态负样本添加到第一训练集中,训练第二车牌分类器,并可以持续迭代,用新训练的车牌分类器取代旧的车牌分类器,以进一步降低误检率。
需要强调的是,本申请实施例中,训练第二车牌分类器使用的第二训练集以及后续迭代过程中的训练集始终包括实验室的原始车牌分类器使用的原始负样本,现场的静态负样本以及现场的动态负样本。
从以上流程可以看出,车牌分类器的训练可以是一个迭代的过程,当达到了重新训练的条件的时候就可以训练一个新的车牌分类器。如果在一定的时间间隔内,车牌识别的效果不好,当达到了满足训练的条件的时候,可以继续进行下一次训练,经过若干次训练后,就能获得一个效果很好,能满足现场环境的新的车牌分类器,而一旦误检率达到了要求,就不需要再进行车牌分类器训练,可以停止迭代。
上述实施例为本申请提供的方法实施例,对应上述方法实施例,本申请还提供一种车牌识别设备。
图4为本申请提供的一种车牌识别设备的结构示意图。
请参照图4所示,本申请实施例提供的车牌识别设备,用于布置在现场进行车牌识别,所述车牌识别设备中包括根据原始训练集训练的原始车牌分类器,所述车牌识别设备还包括:
静态负样本收集模块1,用于根据所述原始车牌分类器检测现场的无车场景,收集现场的静态负样本;所述静态负样本为所述现场的无车场景中被所述原始车牌分类器误检为车牌区域的背景图像;
第一车牌分类器模块2,用于将所述静态负样本添加到所述车牌识别设备的所述原始训练集中,得到第一训练集,根据所述第一训练集训练第一车牌分类器;
第二车牌分类器模块3,用于根据所述第一车牌分类器检测现场的有车场景,收集现场的动态负样本,将所述动态负样本添加到所述第一训练集中,得到第二训练集,根据所述第二训练集训练第二车牌分类器,并根据所述第二车牌分类器进行车牌识别;所述动态负样本为所述现场的有车场景中被所述第一车牌分类器误检为车牌区域的运动图像。
对应于上述方法实施例,本实施例提供的车牌识别设备所采用的车牌识别方法和识别原理与上述方法实施例类似,此处不再赘述。
同时,在上述实施例的基础上,在本申请实施例中,
所述第一车牌分类器模块2,可以包括:
正样本特征向量单元,用于使用方向梯度直方图HOG特征对所述第一训练集里的每一个正样本进行表征,形成正样本HOG特征向量;
负样本特征向量单元,用于使用方向梯度直方图HOG特征对所述第一训练集里的每一个负样本进行表征,形成负样本HOG特征向量;
训练单元,用于利用支持向量机SVM对所述正样本HOG特征向量和所述负样本HOG特征向量进行训练,获得第一车牌分类器。
所述第二车牌分类器模块3,可以包括:
检测单元,用于获取所述车牌识别设备检测现场的有车场景得到的视频图像,提取所述视频图像中的疑似车牌区域,根据所述第一车牌分类器检测所述疑似车牌区域中的车牌区域;
识别单元,用于从所述车牌区域中分割出多个字符,根据支持向量机SVM训练的车牌字符识别模型对多个所述字符进行识别,并判断每个所述字符的识别置信度;
动态负样本单元,用于根据每个所述字符的识别置信度判断所述车牌区域是否有效,如果无效,将所述车牌区域作为所述现场的动态负样本。
所述动态负样本单元,可以包括:
第一判断子单元,用于判断所述字符的个数是否为7个;
第二判断子单元,用于如果是,判断每个所述字符的识别置信度是否大于或等于第一阈值;
第三判断子单元,用于如果是,判断7个所述字符的识别置信度的和是否大于或等于第二阈值;
判定子单元,用于如果是,则判定所述车牌区域有效,否则无效。
所述第二车牌分类器模块3,可以包括:
统计单元,用于按照预设的时间间隔统计所述第一车牌分类器检测现场的有车场景的误检率,并判断所述误检率是否大于第三阈值;
判断单元,用于如果是,判断收集到的所述动态负样本的个数是否大于或等于第四阈值;
添加单元,用于如果是,将所述动态负样本添加到所述第一训练集中。
对应于上述方法实施例,本实施例提供的车牌识别设备所采用的车牌识别方法和识别原理与上述方法实施例类似,此处不再赘述。
由以上本申请提供的技术方案,车牌识别方法应用于布置在现场的车牌识别设备中,所述车牌识别设备中包括根据原始训练集训练的原始车牌分类器,所述车牌识别方法根据所述原始车牌分类器检测现场的无车场景,收集现场的静态负样本;所述静态负样本为所述现场的无车场景中被所述原始车牌分类器误检为车牌区域的背景图像;将所述静态负样本添加到所述车牌识别设备的所述原始训练集中,得到第一训练集,根据所述第一训练集训练第一车牌分类器;根据所述第一车牌分类器检测现场的有车场景,收集现场的动态负样本,将所述动态负样本添加到所述第一训练集中,得到第二训练集,根据所述第二训练集训练第二车牌分类器,并根据所述第二车牌分类器进行车牌识别;所述动态负样本为所述现场的有车场景中被所述第一车牌分类器误检为车牌区域的运动图像。这样,先收集现场的静态负样本并添加到原始训练集,得到第一训练集,利用第一训练集训练第一车牌分类器去除静态负样本,然后再使用第一车牌分类器收集动态负样本并添加到第一训练集,得到第二训练集,利用第二训练集训练第二车牌分类器就可以去除收集到的静态负样本和动态负样本,此时第二训练集中已经包含了现场可能出现的绝大部分负样本,这些负样本能够被第二车牌分类器拒绝,从而达到对车牌的精确识别,减少车牌识别设备的误检率。
需要说明的是,本说明书中的各个实施例均采用递进的方式描述,每个实施例重点说明的都是与其他实施例的不同之处,各个实施例之间相同相似的部分互相参见即可。对于装置类实施例而言,由于其与方法实施例基本相似,所以描述的比较简单,相关之处参见方法实施例的部分说明即可。
最后,还需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上对本发明所提供的一种车牌识别方法及车牌识别设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种车牌识别方法,应用于布置在现场的车牌识别设备中,所述车牌识别设备中包括根据原始训练集训练的原始车牌分类器,其特征在于,所述车牌识别方法包括:
根据所述原始车牌分类器检测现场的无车场景,收集现场的静态负样本;所述静态负样本为所述现场的无车场景中被所述原始车牌分类器误检为车牌区域的背景图像;
将所述静态负样本添加到所述车牌识别设备的所述原始训练集中,得到第一训练集,根据所述第一训练集训练第一车牌分类器;
根据所述第一车牌分类器检测现场的有车场景,收集现场的动态负样本,将所述动态负样本添加到所述第一训练集中,得到第二训练集,根据所述第二训练集训练第二车牌分类器,并根据所述第二车牌分类器进行车牌识别;所述动态负样本为所述现场的有车场景中被所述第一车牌分类器误检为车牌区域的运动图像。
2.根据权利要求1所述的车牌识别方法,其特征在于,所述根据所述第一训练集训练第一车牌分类器,包括:
使用方向梯度直方图HOG特征对所述第一训练集里的每一个正样本进行表征,形成正样本HOG特征向量;
使用方向梯度直方图HOG特征对所述第一训练集里的每一个负样本进行表征,形成负样本HOG特征向量;
利用支持向量机SVM对所述正样本HOG特征向量和所述负样本HOG特征向量进行训练,获得第一车牌分类器。
3.根据权利要求1所述的车牌识别方法,其特征在于,所述根据所述第一车牌分类器检测现场的有车场景,收集现场的动态负样本,包括:
获取所述车牌识别设备检测现场的有车场景得到的视频图像,提取所述视频图像中的疑似车牌区域,根据所述第一车牌分类器检测所述疑似车牌区域中的车牌区域;
从所述车牌区域中分割出多个字符,根据支持向量机SVM训练的车牌字符识别模型对多个所述字符进行识别,并判断每个所述字符的识别置信度;
根据每个所述字符的识别置信度判断所述车牌区域是否有效,如果无效,将所述车牌区域作为所述现场的动态负样本。
4.根据权利要求3所述的车牌识别方法,其特征在于,所述根据每个所述字符的识别置信度判断所述车牌区域是否有效,包括:
判断所述字符的个数是否为7个;
如果是,判断每个所述字符的识别置信度是否大于或等于第一阈值;
如果是,判断7个所述字符的识别置信度的和是否大于或等于第二阈值;
如果是,则判定所述车牌区域有效,否则无效。
5.根据权利要求1所述的车牌识别方法,其特征在于,所述将所述动态负样本添加到所述第一训练集中,包括:
按照预设的时间间隔统计所述第一车牌分类器检测现场的有车场景的误检率,并判断所述误检率是否大于第三阈值;
如果是,判断收集到的所述动态负样本的个数是否大于或等于第四阈值;
如果是,将所述动态负样本添加到所述第一训练集中。
6.一种车牌识别设备,用于布置在现场进行车牌识别,所述车牌识别设备中包括根据原始训练集训练的原始车牌分类器,其特征在于,所述车牌识别设备还包括:
静态负样本收集模块,用于根据所述原始车牌分类器检测现场的无车场景,收集现场的静态负样本;所述静态负样本为所述现场的无车场景中被所述原始车牌分类器误检为车牌区域的背景图像;
第一车牌分类器模块,用于将所述静态负样本添加到所述车牌识别设备的所述原始训练集中,得到第一训练集,根据所述第一训练集训练第一车牌分类器;
第二车牌分类器模块,用于根据所述第一车牌分类器检测现场的有车场景,收集现场的动态负样本,将所述动态负样本添加到所述第一训练集中,得到第二训练集,根据所述第二训练集训练第二车牌分类器,并根据所述第二车牌分类器进行车牌识别;所述动态负样本为所述现场的有车场景中被所述第一车牌分类器误检为车牌区域的运动图像。
7.根据权利要求6所述的车牌识别设备,其特征在于,所述第一车牌分类器模块,包括:
正样本特征向量单元,用于使用方向梯度直方图HOG特征对所述第一训练集里的每一个正样本进行表征,形成正样本HOG特征向量;
负样本特征向量单元,用于使用方向梯度直方图HOG特征对所述第一训练集里的每一个负样本进行表征,形成负样本HOG特征向量;
训练单元,用于利用支持向量机SVM对所述正样本HOG特征向量和所述负样本HOG特征向量进行训练,获得第一车牌分类器。
8.根据权利要求6所述的车牌识别设备,其特征在于,所述第二车牌分类器模块,包括:
检测单元,用于获取所述车牌识别设备检测现场的有车场景得到的视频图像,提取所述视频图像中的疑似车牌区域,根据所述第一车牌分类器检测所述疑似车牌区域中的车牌区域;
识别单元,用于从所述车牌区域中分割出多个字符,根据支持向量机SVM训练的车牌字符识别模型对多个所述字符进行识别,并判断每个所述字符的识别置信度;
动态负样本单元,用于根据每个所述字符的识别置信度判断所述车牌区域是否有效,如果无效,将所述车牌区域作为所述现场的动态负样本。
9.根据权利要求8所述的车牌识别设备,其特征在于,所述动态负样本单元,包括:
第一判断子单元,用于判断所述字符的个数是否为7个;
第二判断子单元,用于如果是,判断每个所述字符的识别置信度是否大于或等于第一阈值;
第三判断子单元,用于如果是,判断7个所述字符的识别置信度的和是否大于或等于第二阈值;
判定子单元,用于如果是,则判定所述车牌区域有效,否则无效。
10.根据权利要求6所述的车牌识别设备,其特征在于,所述第二车牌分类器模块,包括:
统计单元,用于按照预设的时间间隔统计所述第一车牌分类器检测现场的有车场景的误检率,并判断所述误检率是否大于第三阈值;
判断单元,用于如果是,判断收集到的所述动态负样本的个数是否大于或等于第四阈值;
添加单元,用于如果是,将所述动态负样本添加到所述第一训练集中。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410745124.2A CN104408475B (zh) | 2014-12-08 | 2014-12-08 | 一种车牌识别方法及车牌识别设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410745124.2A CN104408475B (zh) | 2014-12-08 | 2014-12-08 | 一种车牌识别方法及车牌识别设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104408475A true CN104408475A (zh) | 2015-03-11 |
CN104408475B CN104408475B (zh) | 2018-09-14 |
Family
ID=52646106
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410745124.2A Expired - Fee Related CN104408475B (zh) | 2014-12-08 | 2014-12-08 | 一种车牌识别方法及车牌识别设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104408475B (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104361366A (zh) * | 2014-12-08 | 2015-02-18 | 深圳市捷顺科技实业股份有限公司 | 一种车牌识别方法及车牌识别设备 |
CN105069470A (zh) * | 2015-07-29 | 2015-11-18 | 腾讯科技(深圳)有限公司 | 分类模型训练方法及装置 |
CN105184317A (zh) * | 2015-08-29 | 2015-12-23 | 电子科技大学 | 一种基于svm分类的车牌字符分割方法 |
CN105488532A (zh) * | 2015-12-03 | 2016-04-13 | 深圳市捷顺科技实业股份有限公司 | 一种车牌筛选方法及装置 |
CN105894819A (zh) * | 2016-01-26 | 2016-08-24 | 浙江捷尚视觉科技股份有限公司 | 一种基于二次验证的套牌车识别方法 |
CN107346448A (zh) * | 2016-05-06 | 2017-11-14 | 富士通株式会社 | 基于深度神经网络的识别装置、训练装置及方法 |
CN108446700A (zh) * | 2018-03-07 | 2018-08-24 | 浙江工业大学 | 一种基于对抗攻击的车牌攻击生成方法 |
CN108645875A (zh) * | 2018-03-20 | 2018-10-12 | 上海市建筑科学研究院 | 一种预制剪力墙灌浆连接的缺陷识别方法 |
CN111796663A (zh) * | 2019-04-09 | 2020-10-20 | Oppo广东移动通信有限公司 | 场景识别模型更新方法、装置、存储介质及电子设备 |
CN112733856A (zh) * | 2020-12-31 | 2021-04-30 | 成都福立盟环保大数据有限公司 | 一种大型车辆放大车牌的识别方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101520841A (zh) * | 2009-03-10 | 2009-09-02 | 北京航空航天大学 | 一种高清视频中的实时抗干扰车牌定位方法 |
CN101533474A (zh) * | 2008-03-12 | 2009-09-16 | 三星电子株式会社 | 基于视频图像的字符和图像识别系统和方法 |
CN101587544A (zh) * | 2009-06-24 | 2009-11-25 | 钟德胜 | 基于计算机视觉的机动车车载反跟踪装置 |
CN103390156A (zh) * | 2012-11-05 | 2013-11-13 | 深圳市捷顺科技实业股份有限公司 | 一种车牌识别方法及装置 |
-
2014
- 2014-12-08 CN CN201410745124.2A patent/CN104408475B/zh not_active Expired - Fee Related
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101533474A (zh) * | 2008-03-12 | 2009-09-16 | 三星电子株式会社 | 基于视频图像的字符和图像识别系统和方法 |
CN101520841A (zh) * | 2009-03-10 | 2009-09-02 | 北京航空航天大学 | 一种高清视频中的实时抗干扰车牌定位方法 |
CN101587544A (zh) * | 2009-06-24 | 2009-11-25 | 钟德胜 | 基于计算机视觉的机动车车载反跟踪装置 |
CN103390156A (zh) * | 2012-11-05 | 2013-11-13 | 深圳市捷顺科技实业股份有限公司 | 一种车牌识别方法及装置 |
Non-Patent Citations (1)
Title |
---|
赵雪竹 等: ""基于Adaboost算法的驾驶员眨眼识别"", 《电子产品世界》 * |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104361366B (zh) * | 2014-12-08 | 2018-10-30 | 深圳市捷顺科技实业股份有限公司 | 一种车牌识别方法及车牌识别设备 |
CN104361366A (zh) * | 2014-12-08 | 2015-02-18 | 深圳市捷顺科技实业股份有限公司 | 一种车牌识别方法及车牌识别设备 |
CN105069470A (zh) * | 2015-07-29 | 2015-11-18 | 腾讯科技(深圳)有限公司 | 分类模型训练方法及装置 |
CN105184317A (zh) * | 2015-08-29 | 2015-12-23 | 电子科技大学 | 一种基于svm分类的车牌字符分割方法 |
CN105184317B (zh) * | 2015-08-29 | 2019-03-15 | 电子科技大学 | 一种基于svm分类的车牌字符分割方法 |
CN105488532A (zh) * | 2015-12-03 | 2016-04-13 | 深圳市捷顺科技实业股份有限公司 | 一种车牌筛选方法及装置 |
CN105488532B (zh) * | 2015-12-03 | 2019-03-05 | 深圳市捷顺科技实业股份有限公司 | 一种车牌筛选方法及装置 |
CN105894819A (zh) * | 2016-01-26 | 2016-08-24 | 浙江捷尚视觉科技股份有限公司 | 一种基于二次验证的套牌车识别方法 |
CN107346448A (zh) * | 2016-05-06 | 2017-11-14 | 富士通株式会社 | 基于深度神经网络的识别装置、训练装置及方法 |
US11049007B2 (en) | 2016-05-06 | 2021-06-29 | Fujitsu Limited | Recognition apparatus based on deep neural network, training apparatus and methods thereof |
CN107346448B (zh) * | 2016-05-06 | 2021-12-21 | 富士通株式会社 | 基于深度神经网络的识别装置、训练装置及方法 |
CN108446700A (zh) * | 2018-03-07 | 2018-08-24 | 浙江工业大学 | 一种基于对抗攻击的车牌攻击生成方法 |
CN108446700B (zh) * | 2018-03-07 | 2021-10-29 | 浙江工业大学 | 一种基于对抗攻击的车牌攻击生成方法 |
CN108645875A (zh) * | 2018-03-20 | 2018-10-12 | 上海市建筑科学研究院 | 一种预制剪力墙灌浆连接的缺陷识别方法 |
CN111796663A (zh) * | 2019-04-09 | 2020-10-20 | Oppo广东移动通信有限公司 | 场景识别模型更新方法、装置、存储介质及电子设备 |
CN111796663B (zh) * | 2019-04-09 | 2022-08-16 | Oppo广东移动通信有限公司 | 场景识别模型更新方法、装置、存储介质及电子设备 |
CN112733856A (zh) * | 2020-12-31 | 2021-04-30 | 成都福立盟环保大数据有限公司 | 一种大型车辆放大车牌的识别方法 |
Also Published As
Publication number | Publication date |
---|---|
CN104408475B (zh) | 2018-09-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104408475A (zh) | 一种车牌识别方法及车牌识别设备 | |
Menon et al. | Detection and recognition of multiple license plate from still images | |
Siriborvornratanakul | An automatic road distress visual inspection system using an onboard in‐car camera | |
CN104766042B (zh) | 交通标志板识别方法及装置 | |
CN105930791A (zh) | 基于ds证据理论的多摄像头融合的路面交通标志识别方法 | |
Saha et al. | License Plate localization from vehicle images: An edge based multi-stage approach | |
CN105279475A (zh) | 一种基于车辆身份识别的套牌车识别的方法与装置 | |
CN104134079A (zh) | 一种基于极值区域和极限学习机的车牌识别方法 | |
Kumar et al. | Automatic vehicle number plate recognition system using machine learning | |
CN103279756A (zh) | 基于集成分类器的车辆检测分析系统及其检测分析方法 | |
CN104361366A (zh) | 一种车牌识别方法及车牌识别设备 | |
Kim et al. | Effective traffic lights recognition method for real time driving assistance systemin the daytime | |
CN105184301B (zh) | 一种利用四轴飞行器判别车辆方位的方法 | |
CN105160292A (zh) | 一种车辆标识识别方法与系统 | |
Ketcham et al. | Recognizing the Illegal Parking Patterns of Cars on the Road in Front of the Bus Stop Using the Support Vector Machine | |
Mammeri et al. | North-American speed limit sign detection and recognition for smart cars | |
Elbamby et al. | Real-time automatic multi-style license plate detection in videos | |
Owamoyo et al. | Number plate recognition for Nigerian vehicles | |
CN106446929B (zh) | 基于边缘梯度势能的车辆类型检测方法 | |
Pavaskar et al. | Real-time vehicle-type categorization and character extraction from the license plates | |
Al Nasim et al. | An automated approach for the recognition of bengali license plates | |
CN103679209A (zh) | 基于稀疏理论的字符识别方法 | |
Thaiparnit et al. | Tracking vehicles system based on license plate recognition | |
Jagtap | Analysis of feature extraction techniques for vehicle number plate detection | |
Saha et al. | Localization of license plates from surveillance camera images: A color feature based ann approach |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20180914 |
|
CF01 | Termination of patent right due to non-payment of annual fee |