CN102254152B - 基于彩色跳变点和颜色密度的车牌定位方法 - Google Patents

基于彩色跳变点和颜色密度的车牌定位方法 Download PDF

Info

Publication number
CN102254152B
CN102254152B CN 201110162831 CN201110162831A CN102254152B CN 102254152 B CN102254152 B CN 102254152B CN 201110162831 CN201110162831 CN 201110162831 CN 201110162831 A CN201110162831 A CN 201110162831A CN 102254152 B CN102254152 B CN 102254152B
Authority
CN
China
Prior art keywords
white
expert
search
black
current search
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN 201110162831
Other languages
English (en)
Other versions
CN102254152A (zh
Inventor
达飞鹏
周锋
陆海洲
陈璋雯
董富强
方旭
胡路遥
王朝阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Haian Su Fu Technology Transfer Center Co., Ltd.
Southeast University
Original Assignee
Southeast University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Southeast University filed Critical Southeast University
Priority to CN 201110162831 priority Critical patent/CN102254152B/zh
Publication of CN102254152A publication Critical patent/CN102254152A/zh
Application granted granted Critical
Publication of CN102254152B publication Critical patent/CN102254152B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Analysis (AREA)
  • Traffic Control Systems (AREA)
  • Image Processing (AREA)

Abstract

一种利用彩色跳变点和颜色密度来定位车牌的方法。其主要目的在于减少背景、车牌大小不一致和车牌倾斜对车牌定位的影响,快速、精确的从车牌图像中截取出车牌所在区域图像。其实现步骤为:首先在HSV空间中依据颜色间距离对图片颜色进行分类,将图片转化只包含八种基准颜色的图片。然后对车牌图像进行彩色二值化,得到四幅二值图像,并根据图像中白色像素的数量,判定是否包含车牌。随后,利用彩色跳变点和车牌底色信息来初定位车牌位置。去除二值图中的小连通区域。最后通过颜色密度和连通域信息不断缩小车牌区域直到精确定位出车牌的位置。整个定位过程中不包含计算复杂度很高的操作,实时性较好。

Description

基于彩色跳变点和颜色密度的车牌定位方法
技术领域
本发明属于智能交通的领域。基于彩色跳变点和颜色密度信息,在HSV空间中依据颜色距离对图像颜色进行分类,利用各车牌底色和彩色跳变点来确定车牌的大致范围,通过颜色密度和连通域信息不断缩小车牌区域直到精确定位出车牌的位置。
背景技术
随着社会的发展,人们对交通系统的要求越来越高,大力发展智能交通系统(Intelligent Transportation System,简称ITS),已成为亟待解决的问题。ITS是集电子、通信、计算机、人工智能、机器视觉、数字图像处理等多门科学和技术的综合化系统。智能交通系统的发展正在日益影响着社会生活、国民经济、城市建设等方方面面,因而受到政府和研究机构的高度重视。我国政府对这方面的研究高度重视,并制定了很多相关的发展规划和相关政策。新一代智能交通控制系统技术被列为国家“863计划”。许多有相关技术基础的高校、科研单位、企业也纷纷加入到相关的研究中。各地对智能交通的需求主要集中在如合节省资金和节约人力的情况下提高对车辆监控和管理的自动化程度。而一个高效、准确的智能交通系统,将能为很多部门提供便利以及技术支持。比如使用智能交通系统可以为公安交通部门提供交通违章行为的执法证据,还能有效的减少人为活动的参与,节约人力资源;还能对犯罪嫌疑人员的交通工具实施实时定位;能对高速路上的车辆实施自动收费和管理,大大提高工作效率。
车牌识别(License Plate Location)是智能交通系统中最重要和基础的技术之一,其任务是通过对车牌图片的处理来定位和识别出车牌号码。车牌识别系统可以应用于高速公路收费站、治安卡口、道路违章管理等场合。车牌识别系统包含车牌定位、车牌分割、字符识别三个步骤,其中车牌定位是识别系统的关键,直接决定车牌识别的效果。
关于车牌定位已经提出了很多方法,总的来说这些方法可以分为基于灰度图像的方法和基于彩色图像的方法两大类,也有的方法同时利用灰度图和彩色图来定位车牌。基于灰度图像的方法主要有基于灰度边缘检测的方法、基于扫描行的方法、基于数学形态学的方法、基于小波的方法、基于分类器的方法等。由于人类视觉系统对彩色要比灰度敏感的多,如果能利用好车牌图片的颜色信息将可以大大提高车牌定位的准确率,因此基于彩色图像的车牌定位受到了很多研究者的关注。基于彩色图像的方法主要有基于彩色图像边缘检测的方法、基于边缘颜色点对的方法、基于车牌底色与字符颜色有固定搭配的方法、基于遗传算法和神经网络的方法等。上述彩色车牌定位算法中,基于边缘检测的方法容易受背景干扰且算法复杂;基于边缘颜色点对的方法在图像质量差的情况下容易产生误判;基于车牌底色和字符颜色有固定搭配的方法定位速度快但容易产生伪车牌区域;基于遗传算法和神经网络的方法需要大量样本算法复杂。
发明内容
技术问题:针对在自然环境下车牌定位易受背景干扰和受车牌大小不一致、车牌倾斜影响导致车牌定位错误或定位不准确的问题,本发明的目的是提供一种在车牌图片有背景干扰和倾斜的情况下仍然能准确定位出车牌位置的基于彩色跳变点和颜色密度来定位车牌的方法。本方法充分利用了图片的颜色信息,方法简单且对车牌在图片中的位置、车牌大小和车牌倾斜角度没有特殊的限制,定位准确,具有较好的鲁棒性。
技术方案:一种基于彩色跳变点和颜色密度来定位车牌的方法,具体步骤如下:
步骤1:将车牌图像用双线性插值法缩小到原图片的0.2倍,用I表示缩放后的车牌图像,
步骤2:将缩放后的彩色车牌图片红绿蓝RGB颜色空间转化到HSV颜色空间,H、S、V分别代表颜色的色调Hue、饱和度Saturation和亮度Value,在HSV空间中依据颜色间距离计算公式,计算图片中每一像素到八种基准颜色蓝、黄、白、黑、绿、青、红、洋红的距离d,所述的八种基准颜色在HSV空间的坐标分别为(240,1,1)、(60,1,1)、(0,0,1)、(0,0,0)、(120,1,1)、(180,1,1)、(0,1,1)、(300,1,1),所述的颜色间距离计算公式为:
d=[v1-v2)2+(s1*cos h1-s2*cosh2)2+(s1*sinh1-s2*sinh2)2]1/2
对彩色车牌图片的颜色进行分类,以最小距离d所对应的颜色作为该像素点分类后的颜色,其中v1、v2分别表示两像素在HSV空间中亮度Value分量值,s1、s2分别表示两像素在HSV空间中饱和度Saturation分量值,h1,h2分别表示两像素在HSV空间中色调Hue分量值,用I8表示颜色分类后的车牌图像,并用一个和车牌图像I8长度和宽度一样的矩阵N8来存储车牌图像I8中的颜色信息,数值从1到8分别代表蓝、黄、白、黑、绿、青、红、洋红,
步骤3:颜色分类后的车牌图像I8进行彩色二值化,分别将可能成为车牌底色的黑、白、蓝、黄四种颜色置为前景白色即赋值为1,再分别将剩余的七种颜色置为黑色即赋值为0,得到四幅二值图片,分别称这四幅图片为黑色二值图、白色二值图、蓝色二值图、黄色二值图,
步骤4:将二值图片中的白色像素个数大于给定阈值500的二值图片作为可能存在车牌的二值图片,如果黑色二值图满足其中白色像素个数大于给定阈值500这个条件,则转入步骤5.1,如果白色二值图满足其中白色像素个数大于给定阈值500这个条件,则转入步骤5.2,如果蓝色二值图满足其中白色像素个数大于给定阈值500这个条件,则转入步骤5.3,如果黄色二值图满足其中白色像素个数大于给定阈值500这个条件,则转入步骤5.4,
步骤5:
步骤5.1:如果相邻元素中的一个元素为黑色且另一个元素为白色,则以前一元素为1个黑白跳变点,
对矩阵N8进行从上往下的逐行搜索,同时统计当前搜索所在行的黑白跳变点的个数,直到第一次出现当前搜索所在行的黑白跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现黑白跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的上边界,同时令h1为所述当前搜索所在行的行序号;对矩阵N8进行从下往上的逐行搜索,同时统计当前搜索所在行的黑白跳变点的个数,直到第一次出现当前搜索所在行的黑白跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现黑白跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的下边界,同时令h2为所述当前搜索所在行的行序号,在h1行和h2行之间从左往右逐列搜索黑点,设定当前搜索中最先发现的黑点所在的列为初定位车牌图像I8的左边界w1;再在h1行和h2行之间从右往左逐列搜索黑点,设定当前搜索中最先发现的黑点所在的列为初定位车牌图像I8的右边界w2,得到由上边界h1、下边界h2、左边界w1及右边界w2在黑色二值图中围合而成的初定位车牌二值图,转入步骤6,
步骤5.2:如果相邻元素中的一个元素为白色且另一个元素为黑色,则以前一元素为1个白黑跳变点,
对矩阵N8进行从上往下的逐行搜索,同时统计当前搜索所在行的白黑跳变点的个数,直到第一次出现当前搜索所在行的白黑跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现白黑跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的上边界,同时令h1为所述当前搜索所在行的行序号;对矩阵N8进行从下往上的逐行搜索,同时统计当前搜索所在行的白黑跳变点的个数,直到第一次出现当前搜索所在行的白黑跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现白黑跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的下边界,同时令h2为所述当前搜索所在行的行序号,在h1行和h2行之间从左往右逐列搜索白点,设定当前搜索中最先发现的白点所在的列为初定位车牌图像18的左边界w1;再在h1行和h2行之间从右往左逐列搜索白点,设定当前搜索中最先发现的白点所在的列为初定位车牌图像I8的右边界w2,得到由上边界h1、下边界h2、左边界w1及右边界w2在白色二值图中围合而成的初定位车牌二值图,转入步骤6,
步骤5.3:如果相邻元素中的一个元素为蓝色且另一个元素为白色,则以前一元素为1个蓝白跳变点,
对矩阵N8进行从上往下的逐行搜索,同时统计当前搜索所在行的蓝白跳变点的个数,直到第一次出现当前搜索所在行的蓝白跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现蓝白跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的上边界,同时令h1为所述当前搜索所在行的行序号;对矩阵N8进行从下往上的逐行搜索,同时统计当前搜索所在行的蓝白跳变点的个数,直到第一次出现当前搜索所在行的蓝白跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现蓝白跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的下边界,同时令h2为所述当前搜索所在行的行序号,在h1行和h2行之间从左往右逐列搜索蓝点,设定当前搜索中最先发现的蓝点所在的列为初定位车牌图像I8的左边界w1;再在h1行和h2行之间从右往左逐列搜索蓝点,设定当前搜索中最先发现的蓝点所在的列为初定位车牌图像I8的右边界w2,得到由上边界h1、下边界h2、左边界w1及右边界w2在蓝色二值图中围合而成的初定位车牌二值图,转入步骤6,
步骤5.4:如果相邻元素中的一个元素为黄色且另一个元素为黑色,则以前一元素为1个黄黑跳变点,
对矩阵N8进行从上往下的逐行搜索,同时统计当前搜索所在行的黄黑跳变点的个数,直到第一次出现当前搜索所在行的黄黑跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现黄黑跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的上边界,同时令h1为所述当前搜索所在行的行序号;对矩阵N8进行从下往上的逐行搜索,同时统计当前搜索所在行的黄黑跳变点的个数,直到第一次出现当前搜索所在行的黄黑跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现黄黑跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的下边界,同时令h2为所述当前搜索所在行的行序号,在h1行和h2行之间从左往右逐列搜索黄点,设定当前搜索中最先发现的黄点所在的列为初定位车牌图像I8的左边界w1;再在h1行和h2行之间从右往左逐列搜索黄点,设定当前搜索中最先发现的黄点所在的列为初定位车牌图像I8的右边界w2,得到由上边界h1、下边界h2、左边界w1及右边界w2在黄色二值图中围合而成的初定位车牌二值图,转入步骤6,
步骤6:标记出二值图中所有的白色像素点的四连通域,四连通域指的是1个白色像素点或连续且不间断排列的1以上的白色像素点,对每一个四连通域进行判定,当该四连通域所包含的像素个数小于阈值12或四连通域的宽度小于阈值5或四连通域的长度小于阈值5时,将该四连通域中的像素置为黑色,所述的四连通域的宽度指该区域中像素列坐标的最大差值,四连通域的长度指该区域中像素行坐标的最大差值,图9是四连通域、四连通域长度、四连通域宽度的示意图,
步骤7:
步骤7.1:分别寻找二值图中最上方、最下方、最左边和最右边的白点,将它们所在的行或列分别作为新的车牌图像上边界、下边界、左边界和右边界,统计由以上边界围合而成区域内所有白点的个数colorsum,计算该范围内的颜色密度colord,颜色密度colord的值为所有白点的个数colorsum除以总像素个数,转入步骤7.2,
步骤7.2:当颜色密度大于0.7或小于0.4时,计算所有白色像素点坐标的平均值,将该平均值赋给P点,标记出二值图中所有的白色像素点的四连通域,计算所有四连通域到P点的距离,四连通区域到P点的距离为该四连通域中与P点距离最近的像素点到P点的距离,将距离P点最远的四连通域中的像素置为黑色,转入步骤7.1,当颜色密度大于0.4并且小于0.7时停止操作,将由最终得到的车牌图像边界而确定的车牌图像输出。
有益效果:与现有技术相比,本发明具有如下优点:首先,充分利用了车牌图片的颜色信息。对车牌图片进行颜色分类,使车牌图片包含八种基准颜色。利用彩色跳变点来定位出车牌的上下边界,由于彩色跳变点是由特定的两种颜色的像素相邻产生的,因此它的准确性比黑白跳变点要高很多,大大减少了其他区域对车牌定位的干扰。在初定位后利用彩色二值化图像,通过车牌底色来确定车牌区域,排除了其他颜色对定位的干扰,使得定位更加准确。其次,本发明对车牌的大小和倾斜情况没有特别的限制。通过车牌底色寻找车牌,将颜色密度的要求设定为0.4~0.7之间,这放宽了对车牌倾斜角度的要求。由于没有利用车牌长宽比,字符间距等先验知识,增强了该方法的鲁棒性。最后,本发明算法简单实时性好,只要进行颜色分类,然后简单的根据颜色进行分析和判断就可以定位到车牌位置,也不需要滤波,去噪,平滑等预处理步骤,可以满足系统的实时性要求。综上,本发明对各种复杂条件下获得的车牌图片均能够准确的定位到车牌位置,同时具有较好的鲁棒性和实时性。下面用车牌图像做实验来比较本发明方法和基于黑白跳变点车牌定位方法的定位效果。图10是存在背景干扰的车牌图片。图11是图10使用本发明方法的定位结果。图12是图10使用基于黑白跳变点方法的定位结果。图13是倾斜情况下的车牌图片。图14是图13使用本发明方法的定位结果。图15是图13使用基于黑白跳变点方法的定位结果。
附图说明
图1是本发明的整个过程的流程图。
图2是缩放后的车牌图。
图3是颜色分类后的车牌。
图4是黄色二值化后的图片。
图5是蓝色二值化后的图片。
图6是初定位的车牌图片。
图7是去除小连通域后的车牌图片。
图8是最终定位到的车牌。
图9是四连通域、四连通域长度、四连通域宽度的示意图。
图10是存在背景干扰的车牌图片。
图11是图10使用本发明方法的定位结果。
图12是图10使用基于黑白跳变点方法的定位结果。
图13是倾斜情况下的车牌图片。
图14是图13使用本发明方法的定位结果。
图15是图13使用基于黑白跳变点方法的定位结果。
具体实施方式
下面结合附图对本发明的具体实施方式做进一步说明。在windows操作系统下选用MATLAB 7.1作为编程工具,对实际道路上拍摄到的车牌图片进行处理。该实例采用实际道路上拍摄到的车牌图片作为处理对象,最终得到精确的车牌图像。
图1是本发明的整个过程的流程图。
本发明利用彩色跳变点和颜色密度来定位车牌。其主要目的在于减少背景、车牌大小不一致和车牌倾斜对车牌定位的影响,快速、精确的从车牌图像中截取出车牌所在区域图像。其实现步骤为:首先在HSV空间中依据颜色间距离对图片颜色进行分类,将图片转化只包含八种基准颜色的图片。然后对车牌图像进行彩色二值化,得到四幅二值图像,并根据图像中白色像素的数量,判定是否包含车牌。随后,利用彩色跳变点和车牌底色信息来初定位车牌位置。去除二值图中的小连通区域。最后通过颜色密度和连通域信息不断缩小车牌区域直到精确定位出车牌的位置。
一种基于彩色跳变点和颜色密度来定位车牌的方法,其特征在于,具体步骤如下:
步骤1:将车牌图像用双线性插值法缩小到原图片的0.2倍,用I表示缩放后的车牌图像。
图2是缩放后的车牌图。
步骤2:将缩放后的彩色车牌图片红绿蓝RGB颜色空间转化到HSV颜色空间,H、S、V分别代表颜色的色调Hue、饱和度Saturation和亮度Value,在HSV空间中依据颜色间距离计算公式,计算图片中每一像素到八种基准颜色蓝、黄、白、黑、绿、青、红、洋红的距离d,所述的八种基准颜色在HSV空间的坐标分别为(240,1,1)、(60,1,1)、(0,0,1)、(0,0,0)、(120,1,1)、(180,1,1)、(0,1,1)、(300,1,1),所述的颜色间距离计算公式为:
d=[(v1-v2)2+(s1*cos h1-s2*cosh2)2+(s1*sinh1-s2*sinh2)2]1/2
对彩色车牌图片的颜色进行分类,以最小距离d所对应的颜色作为该像素点分类后的颜色,其中v1、v2分别表示两像素在HSV空间中亮度Value分量值,s1、s2分别表示两像素在HSV空间中饱和度Saturation分量值,h1,h2分别表示两像素在HSV空间中色调Hue分量值,用I8表示颜色分类后的车牌图像,并用一个和车牌图像I8长度和宽度一样的矩阵N8来存储车牌图像I8中的颜色信息,数值从1到8分别代表蓝、黄、白、黑、绿、青、红、洋红。
图3是颜色分类后的车牌。
步骤3:颜色分类后的车牌图像I8进行彩色二值化,分别将可能成为车牌底色的黑、白、蓝、黄四种颜色置为前景白色即赋值为1,再分别将剩余的七种颜色置为黑色即赋值为0,得到四幅二值图片,分别称这四幅图片为黑色二值图、白色二值图、蓝色二值图、黄色二值图。
图4是黄色二值化后的图片。图5是蓝色二值化后的图片。
步骤4:将二值图片中的白色像素个数大于给定阈值500的二值图片作为可能存在车牌的二值图片,如果黑色二值图满足其中白色像素个数大于给定阈值500这个条件,则转入步骤5.1,如果白色二值图满足其中白色像素个数大于给定阈值500这个条件,则转入步骤5.2,如果蓝色二值图满足其中白色像素个数大于给定阈值500这个条件,则转入步骤5.3,如果黄色二值图满足其中白色像素个数大于给定阈值500这个条件,则转入步骤5.4。
步骤5:
步骤5.1:如果相邻元素中的一个元素为黑色且另一个元素为白色,则以前一元素为1个黑白跳变点。
对矩阵N8进行从上往下的逐行搜索,同时统计当前搜索所在行的黑白跳变点的个数,直到第一次出现当前搜索所在行的黑白跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现黑白跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的上边界,同时令h1为所述当前搜索所在行的行序号;对矩阵N8进行从下往上的逐行搜索,同时统计当前搜索所在行的黑白跳变点的个数,直到第一次出现当前搜索所在行的黑白跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现黑白跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的下边界,同时令h2为所述当前搜索所在行的行序号,在h1行和h2行之间从左往右逐列搜索黑点,设定当前搜索中最先发现的黑点所在的列为初定位车牌图像I8的左边界w1;再在h1行和h2行之间从右往左逐列搜索黑点,设定当前搜索中最先发现的黑点所在的列为初定位车牌图像I8的右边界w2,得到由上边界h1、下边界h2、左边界w1及右边界w2在黑色二值图中围合而成的初定位车牌二值图,转入步骤6。
步骤5.2:如果相邻元素中的一个元素为白色且另一个元素为黑色,则以前一元素为1个白黑跳变点。,
对矩阵N8进行从上往下的逐行搜索,同时统计当前搜索所在行的白黑跳变点的个数,直到第一次出现当前搜索所在行的白黑跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现白黑跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的上边界,同时令h1为所述当前搜索所在行的行序号;对矩阵N8进行从下往上的逐行搜索,同时统计当前搜索所在行的白黑跳变点的个数,直到第一次出现当前搜索所在行的白黑跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现白黑跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的下边界,同时令h2为所述当前搜索所在行的行序号,在h1行和h2行之间从左往右逐列搜索白点,设定当前搜索中最先发现的白点所在的列为初定位车牌图像I8的左边界w1;再在h1行和h2行之间从右往左逐列搜索白点,设定当前搜索中最先发现的白点所在的列为初定位车牌图像I8的右边界w2,得到由上边界h1、下边界h2、左边界w1及右边界w2在白色二值图中围合而成的初定位车牌二值图,转入步骤6。
步骤5.3:如果相邻元素中的一个元素为蓝色且另一个元素为白色,则以前一元素为1个蓝白跳变点。
对矩阵N8进行从上往下的逐行搜索,同时统计当前搜索所在行的蓝白跳变点的个数,直到第一次出现当前搜索所在行的蓝白跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现蓝白跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的上边界,同时令h1为所述当前搜索所在行的行序号;对矩阵N8进行从下往上的逐行搜索,同时统计当前搜索所在行的蓝白跳变点的个数,直到第一次出现当前搜索所在行的蓝白跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现蓝白跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的下边界,同时令h2为所述当前搜索所在行的行序号,在h1行和h2行之间从左往右逐列搜索蓝点,设定当前搜索中最先发现的蓝点所在的列为初定位车牌图像I8的左边界w1;再在h1行和h2行之间从右往左逐列搜索蓝点,设定当前搜索中最先发现的蓝点所在的列为初定位车牌图像I8的右边界w2,得到由上边界h1、下边界h2、左边界w1及右边界w2在蓝色二值图中围合而成的初定位车牌二值图,转入步骤6。
步骤5.4:如果相邻元素中的一个元素为黄色且另一个元素为黑色,则以前一元素为1个黄黑跳变点。
对矩阵N8进行从上往下的逐行搜索,同时统计当前搜索所在行的黄黑跳变点的个数,直到第一次出现当前搜索所在行的黄黑跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现黄黑跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的上边界,同时令h1为所述当前搜索所在行的行序号;对矩阵N8进行从下往上的逐行搜索,同时统计当前搜索所在行的黄黑跳变点的个数,直到第一次出现当前搜索所在行的黄黑跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现黄黑跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的下边界,同时令h2为所述当前搜索所在行的行序号,在h1行和h2行之间从左往右逐列搜索黄点,设定当前搜索中最先发现的黄点所在的列为初定位车牌图像I8的左边界w1;再在h1行和h2行之间从右往左逐列搜索黄点,设定当前搜索中最先发现的黄点所在的列为初定位车牌图像I8的右边界w2,得到由上边界h1、下边界h2、左边界w1及右边界w2在黄色二值图中围合而成的初定位车牌二值图,转入步骤6。
图6是初定位的车牌图片。
步骤6:标记出二值图中所有的白色像素点的四连通域,四连通域指的是1个白色像素点或连续且不间断排列的1以上的白色像素点,对每一个四连通域进行判定,当该四连通域所包含的像素个数小于阈值12或四连通域的宽度小于阈值5或四连通域的长度小于阈值5时,将该四连通域中的像素置为黑色,所述的四连通域的宽度指该区域中像素列坐标的最大差值,四连通域的长度指该区域中像素行坐标的最大差值。
图7是去除小连通域后的车牌图片。
步骤7:
步骤7.1:分别寻找二值图中最上方、最下方、最左边和最右边的白点,将它们所在的行或列分别作为新的车牌图像上边界、下边界、左边界和右边界,统计由以上边界围合而成区域内所有白点的个数colorsum,计算该范围内的颜色密度colord,颜色密度colord的值为所有白点的个数colorsum除以总像素个数,转入
步骤7.2。
步骤7.2:当颜色密度大于0.7或小于0.4时,计算所有白色像素点坐标的平均值,将该平均值赋给P点,标记出二值图中所有的白色像素点的四连通域,计算所有四连通域到P点的距离,四连通区域到P点的距离为该四连通域中与P点距离最近的像素点到P点的距离,将距离P点最远的四连通域中的像素置为黑色,转入步骤7.1,当颜色密度大于0.4并且小于0.7时停止操作,将由最终得到的车牌图像边界而确定的车牌图像输出。
图8是最终定位到的蓝底白字的车牌。

Claims (1)

1.一种基于彩色跳变点和颜色密度来定位车牌的方法,其特征在于,具体步骤如下:
步骤1:将车牌图像用双线性插值法缩小到原图片的0.2倍,用I表示缩放后的车牌图像,
步骤2:将缩放后的彩色车牌图片红绿蓝RGB颜色空间转化到HSV颜色空间,H、S、V分别代表颜色的色调Hue、饱和度Saturation和亮度Value,在HSV空间中依据颜色间距离计算公式,计算图片中每一像素到八种基准颜色蓝、黄、白、黑、绿、青、红、洋红的距离d,所述的八种基准颜色在HSV空间的坐标分别为(240,1,1)、(60,1,1)、(0,0,1)、(0,0,0)、(120,1,1)、(180,1,1)、(0,1,1)、(300,1,1),所述的颜色间距离计算公式为:
d=[(v1-v2)2+(s1*cosh1-s2*cosh2)2+(s1*sinh1-s2*sinh2)2]1/2
对彩色车牌图片的颜色进行分类,以最小距离d所对应的颜色作为缩放后的彩色车牌图片像素点分类后的颜色,其中v1、v2分别表示待计算的距离所对应的两像素在HSV空间中亮度Value分量值,s1、s2分别表示待计算的距离所对应的两像素在HSV空间中饱和度Saturation分量值,h1,h2分别表示待计算的距离所对应的两像素在HSV空间中色调Hue分量值,并用一个和颜色分类后的车牌图像长度和宽度一样的矩阵N8来存储颜色分类后的车牌图像中的颜色信息,数值从1到8分别代表蓝、黄、白、黑、绿、青、红、洋红,
步骤3:颜色分类后的车牌图像进行彩色二值化,分别将可能成为车牌底色的黑、白、蓝、黄四种颜色置为前景白色即赋值为1,再分别将剩余的七种颜色置为黑色即赋值为0,得到四幅二值图片,分别称这四幅图片为黑色二值图、白色二值图、蓝色二值图、黄色二值图,
步骤4:将二值图片中的白色像素个数大于给定阈值500的二值图片作为可能存在车牌的二值图片,如果黑色二值图满足其中白色像素个数大于给定阈值500这个条件,则转入步骤5.1,如果白色二值图满足其中白色像素个数大于给定阈值500这个条件,则转入步骤5.2,如果蓝色二值图满足其中白色像素个数大于给定阈值500这个条件,则转入步骤5.3,如果黄色二值图满足其中白色像素个数大于给定阈值500这个条件,则转入步骤5.4,
步骤5:
步骤5.1:如果相邻元素中的一个元素为黑色且另一个元素为白色,则以前一元素为1个黑白跳变点,
对矩阵N8进行从上往下的逐行搜索,同时统计当前搜索所在行的黑白跳变点的个数,直到第一次出现当前搜索所在行的黑白跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现黑白跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的上边界,同时令上边界为所述当前搜索所在行的行序号;对矩阵N8进行从下往上的逐行搜索,同时统计当前搜索所在行的黑白跳变点的个数,直到第一次出现当前搜索所在行的黑白跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现黑白跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的下边界,同时令下边界为所述当前搜索所在行的行序号,在上边界和下边界之间从左往右逐列搜索黑点,设定当前搜索中最先发现的黑点所在的列为初定位车牌图像I8的左边界w1;再在上边界和下边界之间从右往左逐列搜索黑点,设定当前搜索中最先发现的黑点所在的列为初定位车牌图像I8的右边界w2,得到由上边界、下边界、左边界w1及右边界w2在黑色二值图中围合而成的初定位车牌二值图,转入步骤6,
步骤5.2:如果相邻元素中的一个元素为白色且另一个元素为黑色,则以前一元素为1个白黑跳变点,
对矩阵N8进行从上往下的逐行搜索,同时统计当前搜索所在行的白黑跳变点的个数,直到第一次出现当前搜索所在行的白黑跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现白黑跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的上边界,同时令上边界为所述当前搜索所在行的行序号;对矩阵N8进行从下往上的逐行搜索,同时统计当前搜索所在行的白黑跳变点的个数,直到第一次出现当前搜索所在行的白黑跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现白黑跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的下边界,同时令下边界为所述当前搜索所在行的行序号,在上边界和下边界之间从左往右逐列搜索白点,设定当前搜索中最先发现的白点所在的列为初定位车牌图像I8的左边界w1;再在上边界和下边界之间从右往左逐列搜索白点,设定当前搜索中最先发现的白点所在的列为初定位车牌图像I8的右边界w2,得到由上边界、下边界、左边界w1及右边界w2在白色二值图中围合而成的初定位车牌二值图,转入步骤6,
步骤5.3:如果相邻元素中的一个元素为蓝色且另一个元素为白色,则以前一元素为1个蓝白跳变点,
对矩阵N8进行从上往下的逐行搜索,同时统计当前搜索所在行的蓝白跳变点的个数,直到第一次出现当前搜索所在行的蓝白跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现蓝白跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的上边界,同时令下边界为所述当前搜索所在行的行序号;对矩阵N8进行从下往上的逐行搜索,同时统计当前搜索所在行的蓝白跳变点的个数,直到第一次出现当前搜索所在行的蓝白跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现蓝白跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的下边界,同时令下边界为所述当前搜索所在行的行序号,在下边界和下边界之间从左往右逐列搜索蓝点,设定当前搜索中最先发现的蓝点所在的列为初定位车牌图像I8的左边界w1;再在下边界和下边界之间从右往左逐列搜索蓝点,设定当前搜索中最先发现的蓝点所在的列为初定位车牌图像I8的右边界w2,得到由上边界、下边界、左边界w1及右边界w2在蓝色二值图中围合而成的初定位车牌二值图,转入步骤6,
步骤5.4:如果相邻元素中的一个元素为黄色且另一个元素为黑色,则以前一元素为1个黄黑跳变点,
对矩阵N8进行从上往下的逐行搜索,同时统计当前搜索所在行的黄黑跳变点的个数,直到第一次出现当前搜索所在行的黄黑跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现黄黑跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的上边界,同时令下边界为所述当前搜索所在行的行序号;对矩阵N8进行从下往上的逐行搜索,同时统计当前搜索所在行的黄黑跳变点的个数,直到第一次出现当前搜索所在行的黄黑跳变点的个数大于给定阈值14个时,停止搜索并将第一次出现黄黑跳变点的个数大于给定阈值14个的当前搜索所在行设定为初定位车牌图像I8的下边界,同时令下边界为所述当前搜索所在行的行序号,在下边界和下边界之间从左往右逐列搜索黄点,设定当前搜索中最先发现的黄点所在的列为初定位车牌图像I8的左边界w1;再在下边界和下边界之间从右往左逐列搜索黄点,设定当前搜索中最先发现的黄点所在的列为初定位车牌图像I8的右边界w2,得到由上边界下边界、下边界、左边界w1及右边界w2在黄色二值图中围合而成的初定位车牌二值图,转入步骤6,
步骤6:标记出二值图中所有的白色像素点的四连通域,四连通域指的是1个白色像素点或连续且不间断排列的1以上的白色像素点,对每一个四连通域进行判定,当该四连通域所包含的像素个数小于阈值12、四连通域的宽度小于阈值5或四连通域的长度小于阈值5时,将该四连通域中的像素置为黑色,所述的四连通域的宽度指该区域中像素列坐标的最大差值,四连通域的长度指该区域中像素行坐标的最大差值,
步骤7:
步骤7.1:分别寻找二值图中最上方、最下方、最左边和最右边的白点,将它们所在的行或列分别作为新的车牌图像上边界、下边界、左边界和右边界,统计由以上边界围合而成区域内所有白点的个数colorsum,计算该范围内的颜色密度colord,颜色密度colord的值为所有白点的个数colorsum除以总像素个数,转入步骤7.2,
步骤7.2:当颜色密度大于0.7或小于0.4时,计算所有白色像素点坐标的平均值,将该平均值赋给P点,标记出二值图中所有的白色像素点的四连通域,计算所有四连通域到P点的距离,四连通区域到P点的距离为该四连通域中与P点距离最近的像素点到P点的距离,将距离P点最远的四连通域中的像素置为黑色,转入步骤7.1,当颜色密度大于0.4并且小于0.7时停止操作,将由最终得到的车牌图像边界而确定的车牌图像输出。
CN 201110162831 2011-06-17 2011-06-17 基于彩色跳变点和颜色密度的车牌定位方法 Active CN102254152B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 201110162831 CN102254152B (zh) 2011-06-17 2011-06-17 基于彩色跳变点和颜色密度的车牌定位方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 201110162831 CN102254152B (zh) 2011-06-17 2011-06-17 基于彩色跳变点和颜色密度的车牌定位方法

Publications (2)

Publication Number Publication Date
CN102254152A CN102254152A (zh) 2011-11-23
CN102254152B true CN102254152B (zh) 2013-01-30

Family

ID=44981407

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 201110162831 Active CN102254152B (zh) 2011-06-17 2011-06-17 基于彩色跳变点和颜色密度的车牌定位方法

Country Status (1)

Country Link
CN (1) CN102254152B (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103903283B (zh) * 2012-12-28 2017-12-19 北京大学 一种基于颜色的数字图像内容增强提取方法
CN103116751B (zh) * 2013-01-24 2016-07-06 河海大学 一种车牌字符自动识别方法
CN103400121A (zh) * 2013-08-06 2013-11-20 河海大学 基于彩色二值化图像的车牌定位方法
CN103413278B (zh) * 2013-08-22 2016-06-01 成都数之联科技有限公司 一种商品图片背景噪声的过滤方法
CN104573656B (zh) * 2015-01-09 2018-02-02 安徽清新互联信息科技有限公司 一种基于连通区域信息的车牌颜色判断方法
CN106326821B (zh) * 2015-07-07 2019-08-30 北京易车互联信息技术有限公司 车牌定位的方法及装置
CN105678756A (zh) * 2015-12-30 2016-06-15 天津盛购科技发展有限公司 一种基于颜色的库位定位系统
CN106709491B (zh) * 2016-12-01 2020-11-06 中科唯实科技(北京)有限公司 一种基于colornames特征的车牌定位方法
CN108389177B (zh) * 2017-12-18 2021-10-08 广州烽火众智数字技术有限公司 一种车辆保险杠破损检测方法及交通安全预警方法
CN109961553A (zh) * 2017-12-26 2019-07-02 航天信息股份有限公司 发票号码识别方法、装置及税务自助终端系统
CN109949308A (zh) * 2019-03-05 2019-06-28 北京空间飞行器总体设计部 一种抗星光干扰的空间相对导航目标快速提取方法
CN111192250B (zh) * 2019-12-30 2022-02-08 合肥联宝信息技术有限公司 电脑b面边框检测方法、装置及计算机存储介质和计算机
CN111259177B (zh) * 2020-01-10 2023-07-18 深圳盒子信息科技有限公司 一种黑白二值签名图片存储方法和系统
CN111626304B (zh) * 2020-05-20 2023-08-04 中国科学院新疆理化技术研究所 一种基于机器视觉的颜色特征提取方法及其应用
CN112906692B (zh) * 2021-02-04 2022-03-22 深圳市芊熠智能硬件有限公司 车牌定位方法、装置、计算机设备及存储介质
CN113252614B (zh) * 2021-05-26 2022-07-22 浙江大学 一种基于机器视觉的透明度检测方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040234105A1 (en) * 2003-05-19 2004-11-25 Quen-Zong Wu Method of automatic vehicle licence plate recognition by color discrimination and reorganization
CN102073854A (zh) * 2011-01-14 2011-05-25 天津大学 一种彩色车牌定位方法

Also Published As

Publication number Publication date
CN102254152A (zh) 2011-11-23

Similar Documents

Publication Publication Date Title
CN102254152B (zh) 基于彩色跳变点和颜色密度的车牌定位方法
CN103116751B (zh) 一种车牌字符自动识别方法
CN100414561C (zh) 一种基于投影法和数学形态学的车牌提取方法
CN102708356B (zh) 一种基于复杂背景下的车牌自动定位和识别方法
CN104298976B (zh) 基于卷积神经网络的车牌检测方法
CN102968646B (zh) 一种基于机器学习的车牌检测方法
CN103034836B (zh) 道路标志检测方法和道路标志检测设备
CN102226907B (zh) 基于多特征的车牌定位方法及装置
CN106599792B (zh) 一种手部驾驶违规行为的检测方法
CN102722704B (zh) 一种融合视频动态跟踪的车牌识别方法和系统
CN106156768B (zh) 基于视觉的机动车行驶证检测方法
CN103824081B (zh) 一种室外恶劣光照条件下的快速鲁棒交通标志检测方法
CN104050450A (zh) 一种基于视频的车牌识别方法
CN107273896A (zh) 一种基于图像识别的车牌检测识别方法
CN105354530A (zh) 一种车身颜色识别方法及装置
CN104156731A (zh) 基于人工神经网络的车牌识别系统与方法
CN105160691A (zh) 基于颜色直方图的车身颜色识别方法
CN109255350A (zh) 一种基于视频监控的新能源车牌检测方法
CN103903018A (zh) 一种复杂场景中对车牌进行定位的方法和系统
CN101154271A (zh) 基于快速区域标号算法和车牌大间隔定位方法的车牌字符分割方法
Yonetsu et al. Two-stage YOLOv2 for accurate license-plate detection in complex scenes
CN100385452C (zh) 一种车牌字符分割方法
CN103544480A (zh) 车辆颜色识别方法
CN106886757A (zh) 一种基于先验概率图的多类交通灯检测方法及系统
CN106650728A (zh) 一种阴影车牌图像二值化方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent for invention or patent application
CB03 Change of inventor or designer information

Inventor after: Da Feipeng

Inventor after: Zhou Feng

Inventor after: Lu Haizhou

Inventor after: Chen Zhangwen

Inventor after: Dong Fuqiang

Inventor after: Fang Xu

Inventor after: Hu Luyao

Inventor after: Wang Chaoyang

Inventor before: Da Feipeng

Inventor before: Zhou Feng

Inventor before: Lu Haizhou

COR Change of bibliographic data

Free format text: CORRECT: INVENTOR; FROM: DA FEIPENG ZHOU FENG LU HAIZHOU TO: DA FEIPENG ZHOU FENG LU HAIZHOU CHEN ZHANGWEN DONG FUQIANG FANG XU HU LUYAO WANG ZHAOYANG

C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: HAIAN SUSHI TECHNOLOGY TRANSFORMATION CENTER CO.,

Free format text: FORMER OWNER: SOWTHEAST UNIV.

Effective date: 20131031

Owner name: SOWTHEAST UNIV.

Effective date: 20131031

C41 Transfer of patent application or patent right or utility model
COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM: 211189 NANJING, JIANGSU PROVINCE TO: 226600 NANTONG, JIANGSU PROVINCE

TR01 Transfer of patent right

Effective date of registration: 20131031

Address after: 226600 Yingbin Road 8, software park, Haian County Development Zone, Jiangsu, Nantong

Patentee after: Haian Su Fu Technology Transfer Center Co., Ltd.

Patentee after: Southeast University

Address before: 211189 Jiangsu Road, Jiangning Development Zone, Southeast University, No. 2, No.

Patentee before: Southeast University