CN108052931B - 一种车牌识别结果融合方法及装置 - Google Patents

一种车牌识别结果融合方法及装置 Download PDF

Info

Publication number
CN108052931B
CN108052931B CN201810009514.1A CN201810009514A CN108052931B CN 108052931 B CN108052931 B CN 108052931B CN 201810009514 A CN201810009514 A CN 201810009514A CN 108052931 B CN108052931 B CN 108052931B
Authority
CN
China
Prior art keywords
license plate
confidence coefficient
characters
recognition result
maximum confidence
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810009514.1A
Other languages
English (en)
Other versions
CN108052931A (zh
Inventor
王学彬
王正
廖凯
班华忠
李党
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Qianhai Intellidata Technology Co ltd
Beijing Icetech Science & Technology Co ltd
Original Assignee
Shenzhen Qianhai Intellidata Technology Co ltd
Beijing Icetech Science & Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Qianhai Intellidata Technology Co ltd, Beijing Icetech Science & Technology Co ltd filed Critical Shenzhen Qianhai Intellidata Technology Co ltd
Priority to CN201810009514.1A priority Critical patent/CN108052931B/zh
Publication of CN108052931A publication Critical patent/CN108052931A/zh
Application granted granted Critical
Publication of CN108052931B publication Critical patent/CN108052931B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/63Scene text, e.g. street names
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/60Type of objects
    • G06V20/62Text, e.g. of license plates, overlay texts or captions on TV images
    • G06V20/625License plates

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Character Discrimination (AREA)
  • Traffic Control Systems (AREA)
  • Vehicle Waterproofing, Decoration, And Sanitation Devices (AREA)

Abstract

本发明提供了一种车牌识别结果融合方法,该方法包括:获取视频图像中每一帧的车牌图像;获取每一帧车牌图像的车牌信息,并将车牌信息存入队列;对车牌置信度进行比较;对最大置信度对应的识别结果与非最大置信度对应的识别结果进行一一字符比对;对最大置信度对应的多个识别结果进行一一字符比对;查找与最大置信度的车牌字符完全相同的车牌数量并计数;对车牌识别中的车牌宽度进行比较,比对每个车牌置信度最大的车牌宽度识别结果、计算车牌宽度阈值的差值;筛选输入的车牌识别结果,并输出最佳车牌识别结果。与现有技术相比,本发明能解决多帧车牌识别后,无法有效选择最佳车牌识别结果的问题,能得到唯一的最佳车牌结果。

Description

一种车牌识别结果融合方法及装置
技术领域
本发明涉及图像处理、视频监控以及安防,特别涉及一种车牌识别结果融合方法及装置。
背景技术
随着城市的日益现代化,机动车的保有量持续增加,智能交通系统发挥着越来越重要的作用。车牌识别技术是现代智能交通系统的重要组成部分,有着十分广泛的应用。
多帧融合技术主要是针对单帧车牌识别率不稳定的情况,是采集多帧视频图像,利用视频图像内在信息综合提高车辆识别的正确率的方法。目前主要的车牌识别方法是采用基于单摄像头的数字图像处理方法,然而由于受到光线、天气等影响而使用摄像头拍摄的图像质量较低时,很有可能会造成识别准确信大大降低,而不能保证获取的车牌识别结果为最佳结果。
综上所述,目前迫切需要提出一种不仅具有更高准确性,而且可以有效选择最佳车牌识别结果的车牌识别结果融合方法及装置。
发明内容
有鉴于此,本发明的主要目的在于提高车牌识别的准确性,并且可以得到唯一的最佳车牌识别结果。
为达到上述目的,按照本发明的第一个方面,提供了一种车牌识别结果融合方法,该方法包括:
第一步骤,获取视频图像中每一帧的车牌图像;
第二步骤,统计每一帧车牌图像的宽度,通过车牌识别获取每一帧车牌图像的识别结果、以及识别结果对应的置信度,并将车牌置信度、车牌字符、车牌宽度、车牌出现时间、车牌图像依次存入队列;
第三步骤,根据多个车牌图像的识别结果对应的置信度,按照置信度从大到小进行排序,若最大置信度对应的识别结果数量大于1,则转入第五步骤,否则转入第四步骤;
第四步骤,对最大置信度对应的识别结果与非最大置信度对应的识别结果进行一一字符比对,若存在与最大置信度车牌完全相同字符的车牌时,则转入第八步骤,否则返回第三步骤;
第五步骤,对最大置信度对应的多个识别结果进行一一字符比对,若多个最大置信度的车牌字符完全相同,则转入第八步骤,否则转入第六步骤;
第六步骤,查找与最大置信度的车牌字符完全相同的车牌数量,分别计数;若计数结果相同时,则转入第七步骤,否则转入第八步骤;
第七步骤,对车牌识别中的车牌宽度进行比较,比对每个车牌置信度最大的车牌宽度识别结果、计算车牌宽度阈值的差值;
第八步骤,筛选输入的车牌识别结果,并输出最佳车牌识别结果。
进一步地,所述第三步骤包括:
若所述第三步骤中车牌置信度最大的车牌数量等于1时,在所述队列中去除车牌置信度最大的车牌字符,对剩余的车牌字符进行比对,判断是否存在与车牌置信度最大的车牌字符完全相同的车牌字符,并转入所述第四步骤;
否则,提取所述队列中所有车牌置信度最大的车牌字符,对所述队列中提取的车牌字符进行比对,判断多个车牌置信度最大的车牌字符是否完全相同,并转入所述第五步骤。
进一步地,所述第四步骤包括:
若所述第三步骤中存在与最大置信度车牌完全相同字符的车牌时,记录并传输最大置信度车牌字符数据至所述第八步骤;
否则,将当前车牌的车牌置信度清零,返回到所述第三步骤。
进一步地,所述第五步骤包括:
若车牌字符比对结果与最大置信度的车牌字符完全相同时,记录并传输最大置信度车牌字符数据至所述第八步骤;
否则,从非最大置信度的车牌字符中,查找与最大置信度的车牌字符完全相同的车牌,分别计数后转入所述第六步骤。
进一步地,所述第六步骤包括:
若计数结果相同时,则转入所述第七步骤;
否则,则输出计数结果最大的车牌字符,记录并传输最大置信度车牌字符数据至所述第八步骤。
进一步地,所述第七步骤包括:
若差值只有1个最小值时,记录并传输最大置信度车牌字符数据至所述第八步骤;
否则,识别车牌出现时间,输出距离视频结束时间更近的车牌,记录并传输最大置信度车牌字符数据至所述第八步骤。
进一步地,所述第八步骤包括:
筛选队列中与传输的车牌字符数据完全相同且差值最小的最优车牌图像,输出并存储最大置信度的车牌信息与最优车牌图像。
进一步地,所述车牌信息为车牌置信度、车牌字符、车牌宽度和车牌出现时间。
按照本发明的另一个方面,提供了一种车牌识别结果融合装置,该装置包括:
车牌图像获取模块,获取视频图像中每一帧的车牌图像;
车牌识别模块,统计每一帧车牌图像的宽度,通过车牌识别获取每一帧车牌图像的识别结果、以及识别结果对应的置信度,并将车牌置信度、车牌字符、车牌宽度、车牌出现时间、车牌图像依次存入队列;
车牌置信度比较模块,根据多个车牌图像的识别结果对应的置信度,按照置信度从大到小进行排序,若最大置信度对应的识别结果数量大于1,则转入第二车牌字符比对模块,否则转入第一车牌字符比对模块;
第一车牌字符比对模块,对最大置信度对应的识别结果与非最大置信度对应的识别结果进行一一字符比对,若存在与最大置信度车牌完全相同字符的车牌时,则转入车牌识别结果输出模块,否则返回车牌置信度比较模块;
第二车牌字符比对模块,对最大置信度对应的多个识别结果进行一一字符比对,若多个最大置信度的车牌字符完全相同,则转入车牌识别结果输出模块,否则转入车牌数量计数结果输出模块;
车牌数量计数结果输出模块,查找与最大置信度的车牌字符完全相同的车牌数量,分别计数;若计数结果相同时,则转入车牌宽度比较模块,否则转入车牌识别结果输出模块;
车牌宽度比较模块,对车牌识别中的车牌宽度进行比较,比对每个车牌置信度最大的车牌宽度识别结果、计算车牌宽度阈值的差值;
车牌识别结果输出模块,筛选输入的车牌识别结果,并输出最佳车牌识别结果。
进一步地,所述车牌置信度比较模块包括:
若所述车牌置信度比较模块中车牌置信度最大的车牌数量等于1时,在所述队列中去除车牌置信度最大的车牌字符,对剩余的车牌字符进行比对,判断是否存在与车牌置信度最大的车牌字符完全相同的车牌字符,并转入所述第一车牌字符比对模块;
否则,提取所述队列中所有车牌置信度最大的车牌字符,对所述队列中提取的车牌字符进行比对,判断多个车牌置信度最大的车牌字符是否完全相同,并转入所述第二车牌字符比对模块。
进一步地,所述第一车牌字符比对模块包括:
若所述车牌置信度比较模块中存在与最大置信度车牌完全相同字符的车牌时,记录并传输最大置信度车牌字符数据至所述车牌识别结果输出模块;
否则,将当前车牌的车牌置信度清零,返回到所述车牌置信度比较模块。
进一步地,所述第二车牌字符比对模块,包括:
若车牌字符比对结果与最大置信度的车牌字符完全相同时,记录并传输最大置信度车牌字符数据至所述车牌识别结果输出模块;
否则,从非最大置信度的车牌字符中,查找与最大置信度的车牌字符完全相同的车牌,分别计数后转入所述车牌数量计数结果输出模块。
进一步地,所述车牌数量计数结果输出模块包括:
若计数结果相同时,则转入所述车牌宽度比较模块;
否则,则输出计数结果最大的车牌字符,记录并传输最大置信度车牌字符数据至所述车牌识别结果输出模块。
进一步地,所述车牌宽度比较模块包括:
若差值只有1个最小值时,记录并传输最大置信度车牌字符数据至所述车牌识别结果输出模块;
否则,识别车牌出现时间,输出距离视频结束时间更近的车牌,记录并传输最大置信度车牌字符数据至所述车牌识别结果输出模块。
进一步地,所述车牌识别结果输出模块包括:
筛选队列中与传输的车牌字符数据完全相同且差值最小的最优车牌图像,输出并存储最大置信度的车牌信息与最优车牌图像。
进一步地,所述车牌信息为车牌置信度、车牌字符、车牌宽度和车牌出现时间。
与现有的车牌比对技术相比,本发明的车牌识别结果一方面可以解决多帧车牌识别后,无法有效选择最佳车牌识别结果的问题,另一方面可以输出更为清晰的车牌图像,提高了车牌识别的准确性,得到唯一的最佳车牌识别结果。
附图说明
图1示出了按照本发明的一种车牌识别结果融合方法的流程图。
图2示出了按照本发明的一种车牌识别结果融合装置的框架图。
具体实施方式
为使能进一步了解本发明的结构、特征及其他目的,现结合所附较佳实施例详细说明如下,所说明的较佳实施例仅用于说明本发明的技术方案,并非限定本发明。
图1给出了按照本发明的一种车牌识别结果融合方法的流程图。如图1所示,按照本发明的一种车牌识别结果融合方法包括:
第一步骤S1,获取视频图像中每一帧的车牌图像;
第二步骤S2,统计每一帧车牌图像的宽度,通过车牌识别获取每一帧车牌图像的识别结果、以及识别结果对应的置信度,并将车牌置信度、车牌字符、车牌宽度、车牌出现时间、车牌图像依次存入队列;
第三步骤S3,根据多个车牌图像的识别结果对应的置信度,按照置信度从大到小进行排序,若最大置信度对应的识别结果数量大于1,则转入第五步骤S5,否则转入第四步骤S4;
第四步骤S4,对最大置信度对应的识别结果与非最大置信度对应的识别结果进行一一字符比对,若存在与最大置信度车牌完全相同字符的车牌时,则转入第八步骤S8,否则返回第三步骤S3;
第五步骤S5,对最大置信度对应的多个识别结果进行一一字符比对,若多个最大置信度的车牌字符完全相同,则转入第八步骤S8,否则转入第六步骤S6;
第六步骤S6,对输出判断是否出现相同的车牌数量计数的结果;若计数结果相同时,则转入第七步骤S7,否则转入第八步骤S8;
第七步骤S7,对车牌识别中的车牌宽度进行比较,比对每个车牌置信度最大的车牌宽度识别结果、计算车牌宽度阈值的差值;
第八步骤S8,筛选输入的车牌识别结果,并输出最佳车牌识别结果。
所述第一步骤S1中所述的获取视频图像中的每一帧的车牌图像,可以通过现有的车牌分割技术实现。实施例,“李炜, 黄心汉, 王敏,等. 车牌自动识别系统中车牌分割的研究[J]. 信号处理, 2000(s1):41-44”。
所述第二步骤S2中车牌置信度、车牌字符,可以通过现有的车牌识别算法实现。实施例“魏武, 张起森, 王明俊,等. 一种基于模板匹配的车牌识别方法[J]. 中国公路学报, 2001, 14(1):104-106.”。
进一步地,所述第三步骤S3包括:
若所述第三步骤S3中车牌置信度最大的车牌数量等于1时,在所述队列中去除车牌置信度最大的车牌字符,对剩余的车牌字符进行比对,判断是否存在与车牌置信度最大的车牌字符完全相同的车牌字符,并转入所述第四步骤S4;
否则,提取所述队列中所有车牌置信度最大的车牌字符,对所述队列中提取的车牌字符进行比对,判断多个车牌置信度最大的车牌字符是否完全相同,并转入所述第五步骤S5。
进一步地,所述第三步骤S3中,车牌字符比对方法为现有的字符串匹配技术。实施例,“万国根, 秦志光. 改进的AC-BM字符串匹配算法[J]. 电子科技大学学报, 2006, 35(4):531-533”
实施例,例如只有1个最大置信度的车牌,则转入所述第四步骤S4。
实施例,例如有3个最大置信度的车牌,则转入所述第五步骤S5。
进一步地,所述第四步骤S4包括:
若所述第三步骤S3中存在与最大置信度车牌完全相同字符的车牌时,记录并传输最大置信度车牌字符数据至所述第八步骤S8;
否则,将当前车牌的车牌置信度清零,返回到所述第三步骤S3。
进一步地,所述车牌宽度阈值为90~150像素。例如,车牌宽度阈值可以为110像素或者130像素。
实施例,例如京A12345为最大置信度对应的车牌字符,且非最大置信度的车牌中,也存在京A12345的车牌,记录车牌字符为京A12345,转入所述第八步骤S8。
实施例,例如京A12345为最大置信度对应的车牌字符,但非最大置信度的车牌字符对应为京B23456或者京C34567,则将京A12345的置信度清零。
进一步地,所述第五步骤S5包括:
若车牌字符比对结果与最大置信度的车牌字符完全相同时,记录并传输最大置信度车牌字符数据至所述第八步骤S8;
否则,从非最大置信度的车牌字符中,查找与最大置信度的车牌字符完全相同的车牌,分别计数后转入所述第六步骤S6。
实施例,例如京A12345、京A12345为最大置信度对应的车牌字符,车牌字符完全相同,记录车牌字符为京A12345,转入所述第八步骤S8。
实施例,例如京A12345、京A12345、京B23456为最大置信度对应的车牌字符,车牌字符不完全相同,则转入所述第六步骤S6。
进一步地,所述第六步骤S6包括:
若计数结果相同时,则转入所述第七步骤S7;
否则,则输出计数结果最大的车牌字符,记录并传输最大置信度车牌字符数据至所述第八步骤S8。
实施例,例如京A12345、京B23456、京C34567为最大置信度对应的车牌字符,车牌字符为京A12345的有8个,车牌字符为京B23456的有8个,车牌字符为京C34567的有8个,车牌字符为京A12345、京B23456、京C34567的数量一样,则转入所述第七步骤S7。
实施例,例如京A12345、京B23456、京C34567为最大置信度对应的车牌字符,车牌字符为京A12345的有10个,车牌字符为京B23456的有6个,车牌字符为京C34567的有8个,车牌字符为京B23456数量更多,记录车牌字符为京A12345,转入所述第八步骤S8。
进一步地,所述第七步骤S7包括:
若差值只有1个最小值时,记录并传输最大置信度车牌字符数据至所述第八步骤S8;
否则,识别车牌出现时间,输出距离视频结束时间更近的车牌,记录并传输最大置信度车牌字符数据至所述第八步骤S8。
实施例,例如京A12345、京B23456为最大置信度对应的车牌字符,车牌宽度阈值为110。车牌字符为京A12345的最小差值为2,车牌字符为京B23456的最小差值为3,车牌字符为京A12345的最小差值最小。记录车牌字符为京A12345,转入所述第八步骤S8。
进一步地,所述
Figure 366124DEST_PATH_IMAGE001
实施例,例如京A12345、京B23456为最大置信度对应的车牌字符,车牌宽度阈值为110。车牌字符为京A12345的最小差值为3,车牌字符为京B23456的最小差值为3,车牌字符为京A12345、京B23456的最小差值一样。车牌字符为京A12345的最大置信度车牌出现时间为0:31.77、车牌字符为京B23456的最大置信度车牌出现时间为0:12.48。京A12345距离视频结束的时间更近,记录车牌字符为京A12345,转入所述第八步骤S8。
进一步地,所述第八步骤S8包括:
筛选队列中与传输的车牌字符数据完全相同且差值最小的最优车牌图像,输出并存储最大置信度的车牌信息与最优车牌图像。
进一步地,所述车牌信息为车牌置信度、车牌字符、车牌宽度和车牌出现时间。
进一步地,所述第二步骤S2、所述第三步骤S3、所述第四步骤S4、所述第五步骤S5、所述第六步骤S6、所述第七步骤S7、所述第八步骤S8中车牌置信度为车牌全部字符的置信度。
实施例,例如传输的车牌字符为京A12345,则寻找车牌字符为京A12345且差值最小的最小车牌图像,输出车牌字符为京A12345的最大置信度的车牌置信度、车牌字符、车牌宽度、车牌出现时间和最优车牌图像。例如,28,京A12345,130,0:31.77,最优车牌图像。
图2给出了按照本发明的一种车牌识别结果融合装置的框架图。如图2所示,按照本发明的一种车牌识别结果融合装置包括:
车牌图像获取模块1,获取视频图像中每一帧的车牌图像;
车牌识别模块2,统计每一帧车牌图像的宽度,通过车牌识别获取每一帧车牌图像的识别结果、以及识别结果对应的置信度,并将车牌置信度、车牌字符、车牌宽度、车牌出现时间、车牌图像依次存入队列;
车牌置信度比较模块3,根据多个车牌图像的识别结果对应的置信度,按照置信度从大到小进行排序,若最大置信度对应的识别结果数量大于1,则转入第二车牌字符比对模块5,否则转入第一车牌字符比对模块4;
第一车牌字符比对模块4,对最大置信度对应的识别结果与非最大置信度对应的识别结果进行一一字符比对,若存在与最大置信度车牌完全相同字符的车牌时,则转入车牌识别结果输出模块8,否则返回车牌置信度比较模块3;
第二车牌字符比对模块5,对最大置信度对应的多个识别结果进行一一字符比对,若多个最大置信度的车牌字符完全相同,则转入车牌识别结果输出模块8,否则转入车牌数量计数结果输出模块6;
车牌数量计数结果输出模块6,对输出判断是否出现相同的车牌数量计数的结果;若计数结果相同时,则转入车牌宽度比较模块7,否则转入车牌识别结果输出模块8;
车牌宽度比较模块7,对车牌识别中的车牌宽度进行比较,比对每个车牌置信度最大的车牌宽度识别结果、计算车牌宽度阈值的差值;
车牌识别结果输出模块8,筛选输入的车牌识别结果,并输出最佳车牌识别结果。
所述车牌图像获取模块1中所述的获取视频图像中的每一帧的车牌图像,可以通过现有的车牌分割技术实现。实施例,“李炜, 黄心汉, 王敏,等. 车牌自动识别系统中车牌分割的研究[J]. 信号处理, 2000(s1):41-44”。
所述车牌识别模块2中车牌置信度、车牌字符,可以通过现有的车牌识别算法实现。实施例“魏武, 张起森, 王明俊,等. 一种基于模板匹配的车牌识别方法[J]. 中国公路学报, 2001, 14(1):104-106.”。
进一步地,所述车牌置信度比较模块3包括:
若所述车牌置信度比较模块3中车牌置信度最大的车牌数量等于1时,在所述队列中去除车牌置信度最大的车牌字符,对剩余的车牌字符进行比对,判断是否存在与车牌置信度最大的车牌字符完全相同的车牌字符,并转入所述第一车牌字符比对模块4;
否则,提取所述队列中所有车牌置信度最大的车牌字符,对所述队列中提取的车牌字符进行比对,判断多个车牌置信度最大的车牌字符是否完全相同,并转入所述第二车牌字符比对模块5。
进一步地,所述车牌置信度比较模块3中,车牌字符比对方法为现有的字符串匹配技术。实施例,“万国根, 秦志光. 改进的AC-BM字符串匹配算法[J]. 电子科技大学学报,2006, 35(4):531-533”
实施例,例如只有1个最大置信度的车牌,则转入所述第一车牌字符比对模块4。
实施例,例如有3个最大置信度的车牌,则转入所述第二车牌字符比对模块5。
进一步地,所述第一车牌字符比对模块4包括:
若所述车牌置信度比较模块3中存在与最大置信度车牌完全相同字符的车牌时,记录并传输最大置信度车牌字符数据至所述车牌识别结果输出模块8;
否则,将当前车牌的车牌置信度清零,返回到所述车牌置信度比较模块3。
进一步地,所述车牌宽度阈值为90~150像素。例如,车牌宽度阈值可以为110像素或者130像素。
实施例,例如京A12345为最大置信度对应的车牌字符,且非最大置信度的车牌中,也存在京A12345的车牌,记录车牌字符为京A12345,转入所述车牌识别结果输出模块8。
实施例,例如京A12345为最大置信度对应的车牌字符,但非最大置信度的车牌字符对应为京B23456或者京C34567,则将京A12345的置信度清零。
进一步地,所述第二车牌字符比对模块5包括:
若车牌字符比对结果与最大置信度的车牌字符完全相同时,记录并传输最大置信度车牌字符数据至所述车牌识别结果输出模块8;
否则,从非最大置信度的车牌字符中,查找与最大置信度的车牌字符完全相同的车牌,分别计数后转入所述车牌数量计数结果输出模块6。
实施例,例如京A12345、京A12345为最大置信度对应的车牌字符,车牌字符完全相同,记录车牌字符为京A12345,转入所述车牌识别结果输出模块8。
实施例,例如京A12345、京A12345、京B23456为最大置信度对应的车牌字符,车牌字符不完全相同,则转入所述车牌数量计数结果输出模块6。
进一步地,所述车牌数量计数结果输出模块6包括:
若计数结果相同时,则转入所述车牌宽度比较模块7;
否则,则输出计数结果最大的车牌字符,记录并传输最大置信度车牌字符数据至所述车牌识别结果输出模块8。
实施例,例如京A12345、京B23456、京C34567为最大置信度对应的车牌字符,车牌字符为京A12345的有8个,车牌字符为京B23456的有8个,车牌字符为京C34567的有8个,车牌字符为京A12345、京B23456、京C34567的数量一样,则转入所述车牌宽度比较模块7。
实施例,例如京A12345、京B23456、京C34567为最大置信度对应的车牌字符,车牌字符为京A12345的有10个,车牌字符为京B23456的有6个,车牌字符为京C34567的有8个,车牌字符为京B23456数量更多,记录车牌字符为京A12345,转入所述车牌识别结果输出模块8。
进一步地,所述车牌宽度比较模块7包括:
若差值只有1个最小值时,记录并传输最大置信度车牌字符数据至所述车牌识别结果输出模块8;
否则,识别车牌出现时间,输出距离视频结束时间更近的车牌,记录并传输最大置信度车牌字符数据至所述车牌识别结果输出模块8。
实施例,例如京A12345、京B23456为最大置信度对应的车牌字符,车牌宽度阈值为110。车牌字符为京A12345的最小差值为2,车牌字符为京B23456的最小差值为3,车牌字符为京A12345的最小差值最小。记录车牌字符为京A12345,转入所述车牌识别结果输出模块8。
进一步地,所述
Figure 761334DEST_PATH_IMAGE001
实施例,例如京A12345、京B23456为最大置信度对应的车牌字符,车牌宽度阈值为110。车牌字符为京A12345的最小差值为3,车牌字符为京B23456的最小差值为3,车牌字符为京A12345、京B23456的最小差值一样。车牌字符为京A12345的最大置信度车牌出现时间为0:31.77、车牌字符为京B23456的最大置信度车牌出现时间为0:12.48。京A12345距离视频结束的时间更近,记录车牌字符为京A12345,转入所述车牌识别结果输出模块8。
进一步地,所述车牌识别结果输出模块8包括:
筛选队列中与传输的车牌字符数据完全相同且差值最小的最优车牌图像,输出并存储最大置信度的车牌信息与最优车牌图像。
进一步地,所述车牌信息为车牌置信度、车牌字符、车牌宽度和车牌出现时间。
进一步地,所述车牌识别模块2、所述车牌置信度比较模块3、所述第一车牌字符比对模块4、所述第二车牌字符比对模块5、所述车牌数量计数结果输出模块6、所述车牌宽度比较模块7、所述车牌识别结果输出模块8中车牌置信度为车牌全部字符的置信度。
实施例,例如传输的车牌字符为京A12345,则寻找车牌字符为京A12345且差值最小的最小车牌图像,输出车牌字符为京A12345的最大置信度的车牌置信度、车牌字符、车牌宽度、车牌出现时间和最优车牌图像。例如,28,京A12345,130,0:31.77,最优车牌图像。
与现有的车牌比对技术相比,本发明的车牌识别结果一方面可以解决多帧车牌识别后,无法有效选择最佳车牌识别结果的问题,另一方面可以输出更为清晰的车牌图像,提高了车牌识别的准确性,得到唯一的最佳车牌识别结果。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围,应当理解,本发明并不限于这里所描述的实现方案,这些实现方案描述的目的在于帮助本领域中的技术人员实践本发明。任何本领域中的技术人员很容易在不脱离本发明精神和范围的情况下进行进一步的改进和完善,因此本发明只受到本发明权利要求的内容和范围的限制,其意图涵盖所有包括在由所附权利要求所限定的本发明精神和范围内的备选方案和等同方案。

Claims (11)

1.一种车牌识别结果融合方法,其特征在于,该方法包括:
第一步骤,获取视频图像中每一帧的车牌图像;
第二步骤,统计每一帧车牌图像的宽度,通过车牌识别获取每一帧车牌图像的识别结果、以及识别结果对应的置信度,并将车牌置信度、车牌字符、车牌宽度、车牌出现时间、车牌图像依次存入队列;
第三步骤,根据多个车牌图像的识别结果对应的置信度,按照置信度从大到小进行排序,若最大置信度对应的识别结果数量大于1,则转入第五步骤,否则转入第四步骤;
第四步骤,对最大置信度对应的识别结果与非最大置信度对应的识别结果进行一一字符比对,若存在与最大置信度车牌完全相同字符的车牌时,则转入第八步骤,否则返回第三步骤;
第五步骤,对最大置信度对应的多个识别结果进行一一字符比对,若多个最大置信度的车牌字符完全相同,则转入第八步骤,否则转入第六步骤;
第六步骤,查找与最大置信度的车牌字符完全相同的车牌数量,分别计数;若计数结果相同时,则转入第七步骤,否则转入第八步骤;
第七步骤,对车牌识别中的车牌宽度进行比较,比对每个车牌置信度最大的车牌宽度识别结果、计算车牌宽度阈值的差值;
第八步骤,筛选输入的车牌识别结果,并输出最佳车牌识别结果。
2.如权利要求1所述的方法,其特征在于,所述第四步骤包括:
若所述第三步骤中存在与最大置信度车牌完全相同字符的车牌时,记录并传输最大置信度车牌字符数据至所述第八步骤;
否则,将当前车牌的车牌置信度清零,返回到所述第三步骤。
3.如权利要求1所述的方法,其特征在于,所述第五步骤包括:
若车牌字符比对结果与最大置信度的车牌字符完全相同时,记录并传输最大置信度车牌字符数据至所述第八步骤;
否则,从非最大置信度的车牌字符中,查找与最大置信度的车牌字符完全相同的车牌,分别计数后转入所述第六步骤。
4.如权利要求1所述 的方法,其特征在于,所述第六步骤包括:
若计数结果相同时,则转入所述第七步骤;
否则,则输出计数结果最大的车牌字符,记录并传输最大置信度车牌字符数据至所述第八步骤。
5.如权利要求1所述的方法,其特征在于,所述第七步骤包括:
若差值只有1个最小值时,记录并传输最大置信度车牌字符数据至所述第八步骤;否则,识别车牌出现时间,输出距离视频结束时间更近的车牌,记录并传输最大置信度车牌字符数据至所述第八步骤。
6.如权利要求5所述的方法,其特征在于,所述第七步骤中,差值=
|车牌置信度最大的车牌宽度-车牌宽度阈值|。
7.如权利要求1所述的方法,所述车牌宽度阈值为90~150像素。
8.如权利要求1所述的方法,其特征在于,所述第八步骤包括:筛选队列中与传输的车牌字符数据完全相同且差值最小的最优车牌图像,输出并存储最大置信度的车牌信息与最优车牌图像。
9.如权利要求8所述的方法,其特征在于,所述车牌信息为车牌置信度、车牌字符、车牌宽度和车牌出现时间。
10.如权利要求1所述的方法,其特征在于,所述第二步骤、所述第三步骤、所述第四步骤、所述第五步骤、所述第六步骤、所述第七步骤、所述第八步骤中,车牌置信度为车牌全部字符的置信度。
11.一种车牌识别结果融合装置,其特征在于,该装置包括:
车牌图像获取模块,获取视频图像中每一帧的车牌图像;
车牌识别模块,统计每一帧车牌图像的宽度,通过车牌识别获取每一帧车牌图像的识别结果、以及识别结果对应的置信度,并将车牌置信度、车牌字符、车牌宽度、车牌出现时间、车牌图像依次存入队列;
车牌置信度比较模块,根据多个车牌图像的识别结果对应的置信度,按照置信度从大到小进行排序,若最大置信度对应的识别结果数量大于1,则转入第二车牌字符比对模块,否则转入第一车牌字符比对模块;
第一车牌字符比对模块,对最大置信度对应的识别结果与非最大置信度对应的识别结果进行一一字符比对,若存在与最大置信度车牌完全相同字符的车牌时,则转入车牌识别结果输出模块,否则返回车牌置信度比较模块;
第二车牌字符比对模块,对最大置信度对应的多个识别结果进行一一字符比对,若多个最大置信度的车牌字符完全相同,则转入车牌识别结果输出模块,否则转入车牌数量计数结果输出模块;
车牌数量计数结果输出模块,查找与最大置信度的车牌字符完全相同的车牌数量,分别计数;若计数结果相同时,则转入车牌宽度比较模块,否则转入车牌识别结果输出模块;
车牌宽度比较模块,对车牌识别中的车牌宽度进行比较,比对每个车牌置信度最大的车牌宽度识别结果、计算车牌宽度阈值的差值;
车牌识别结果输出模块,筛选输入的车牌识别结果,并输出最佳车牌识别结果。
CN201810009514.1A 2018-01-05 2018-01-05 一种车牌识别结果融合方法及装置 Active CN108052931B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810009514.1A CN108052931B (zh) 2018-01-05 2018-01-05 一种车牌识别结果融合方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810009514.1A CN108052931B (zh) 2018-01-05 2018-01-05 一种车牌识别结果融合方法及装置

Publications (2)

Publication Number Publication Date
CN108052931A CN108052931A (zh) 2018-05-18
CN108052931B true CN108052931B (zh) 2021-07-30

Family

ID=62126605

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810009514.1A Active CN108052931B (zh) 2018-01-05 2018-01-05 一种车牌识别结果融合方法及装置

Country Status (1)

Country Link
CN (1) CN108052931B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110263788B (zh) * 2019-07-17 2021-07-30 广西盖德科技有限公司 车辆通行快速识别方法及系统
CN111339949A (zh) * 2020-02-26 2020-06-26 北京停简单信息技术有限公司 车牌识别的方法、装置及巡检车
CN111310698A (zh) * 2020-02-26 2020-06-19 北京停简单信息技术有限公司 车牌识别的方法、装置及巡检车
CN113657372B (zh) * 2020-05-12 2024-05-07 中移(上海)信息通信科技有限公司 一种车牌识别方法、装置、设备及计算机存储介质
CN111862617B (zh) * 2020-06-12 2022-06-03 浙江大华技术股份有限公司 一种车牌识别方法、装置、系统和计算机设备
CN116977949A (zh) * 2023-08-24 2023-10-31 北京唯行科技有限公司 车辆停车巡检方法、装置和设备

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2595092A2 (en) * 2011-11-18 2013-05-22 Xerox Corporation Methods and systems for improved license plate signature matching
CN104299009A (zh) * 2014-09-23 2015-01-21 同济大学 基于多特征融合的车牌字符识别方法
CN104794698A (zh) * 2015-05-06 2015-07-22 中国人民解放军国防科学技术大学 基于车牌跟踪与帧累积优化的低照度车牌图像恢复算法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110194733A1 (en) * 2010-02-11 2011-08-11 Tc License Ltd. System and method for optical license plate matching
US9741249B2 (en) * 2011-08-16 2017-08-22 Conduent Business Services, Llc Automated processing method for bus crossing enforcement
US8682036B2 (en) * 2012-04-06 2014-03-25 Xerox Corporation System and method for street-parking-vehicle identification through license plate capturing
US10515285B2 (en) * 2014-06-27 2019-12-24 Blinker, Inc. Method and apparatus for blocking information from an image

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2595092A2 (en) * 2011-11-18 2013-05-22 Xerox Corporation Methods and systems for improved license plate signature matching
CN104299009A (zh) * 2014-09-23 2015-01-21 同济大学 基于多特征融合的车牌字符识别方法
CN104794698A (zh) * 2015-05-06 2015-07-22 中国人民解放军国防科学技术大学 基于车牌跟踪与帧累积优化的低照度车牌图像恢复算法

Also Published As

Publication number Publication date
CN108052931A (zh) 2018-05-18

Similar Documents

Publication Publication Date Title
CN108052931B (zh) 一种车牌识别结果融合方法及装置
CN110705405B (zh) 目标标注的方法及装置
US20070292029A1 (en) Cascade plate recognition system
CN112163480B (zh) 一种行为识别方法及装置
CN102301697B (zh) 视频签名产生设备
CN114359669A (zh) 图片分析模型调整方法、装置以及计算机可读存储介质
CN112700653A (zh) 一种车辆违法变道的判定方法、装置、设备及存储介质
CN110363192B (zh) 物件影像辨识系统及物件影像辨识方法
CN111160183A (zh) 一种车辆闯红灯检测方法及装置
CN113010736A (zh) 一种视频分类方法、装置、电子设备及存储介质
EP4332910A1 (en) Behavior detection method, electronic device, and computer readable storage medium
CN112818984B (zh) 标题生成方法、装置、电子设备和存储介质
KR101845280B1 (ko) 그림자 신호를 제거하는 차량번호 인식 시스템 및 방법
Satish et al. Edge assisted fast binarization scheme for improved vehicle license plate recognition
CN112669277B (zh) 一种车辆关联方法,计算机设备以及装置
Dandu et al. Vehicular number plate recognition using edge detection and characteristic analysis of national number plates
KR102251799B1 (ko) 비 교사학습 기반 열악 차량번호 이미지 복구 학습 방법 및 장치
CN113743316A (zh) 基于目标检测的车辆加塞行为识别方法、系统及装置
CN109509205B (zh) 前景检测方法及装置
CN109784187B (zh) 人脸识别的优化方法及装置
CN113657277A (zh) 一种车辆被遮挡状态判断系统及方法
WO2008023886A1 (en) Method for optimizing image for vehicle's identification plate
CN114821391B (zh) 一种基于改进视觉背景提取法的运动目标检测方法
KR101869399B1 (ko) 차량 번호판 검출 장치 및 방법
CN109886276A (zh) 一种表盘滚动数字字符的半字判断方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant