CN104616021A - 交通标志图像处理方法及装置 - Google Patents

交通标志图像处理方法及装置 Download PDF

Info

Publication number
CN104616021A
CN104616021A CN201410817079.7A CN201410817079A CN104616021A CN 104616021 A CN104616021 A CN 104616021A CN 201410817079 A CN201410817079 A CN 201410817079A CN 104616021 A CN104616021 A CN 104616021A
Authority
CN
China
Prior art keywords
traffic sign
image
candidate window
connected region
classification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410817079.7A
Other languages
English (en)
Other versions
CN104616021B (zh
Inventor
胡事民
邓海峰
黄浩智
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tsinghua University
Original Assignee
Shenzhen Tencent Computer Systems Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Tencent Computer Systems Co Ltd filed Critical Shenzhen Tencent Computer Systems Co Ltd
Priority to CN201410817079.7A priority Critical patent/CN104616021B/zh
Publication of CN104616021A publication Critical patent/CN104616021A/zh
Application granted granted Critical
Publication of CN104616021B publication Critical patent/CN104616021B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/582Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of traffic signs
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/56Extraction of image or video features relating to colour

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Artificial Intelligence (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Engineering & Computer Science (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Image Analysis (AREA)

Abstract

本发明涉及一种交通标志图像处理方法及装置,其方法包括:获取采集得到的街景图像;生成图像的非蓝色交通标志的候选窗口以及蓝色交通标志的候选窗口;采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断生成的候选窗口内是否存在交通标志以及交通标志的类型。本发明能够快速地在复杂场景对应的图像中检测识别出交通标志,避免了耗时的滑窗,提高了交通标志识别的效率,同时也降低了人力资源和时间成本。

Description

交通标志图像处理方法及装置
技术领域
本发明涉及图像处理技术领域,尤其涉及一种交通标志图像处理方法及装置。
背景技术
目前,随着科技的发展和人们生活水平的不断提高,公路上各种车辆的数量与日俱增,这给人们的生活带来了极大的便利,同时交通事故问题也越来越严重。引发交通事故的因素为驾驶员错误操作、路况不好、天气影响等。据统计80%的交通事故归咎于驾驶员误操作。为了降低交通事故率,道路交通标志识别系统TSR(Traffic SignsRecognition)应运而生。道路交通标志识别系统识别交通标志并反馈给驾驶员,可以使驾驶员提前了解路况及其变化并及时做出正确的反应措施,从而尽量减少交通事故的发生。在道路交通标志中,常见的是警告、指示和禁令交通标志,每类交通标志都由特定颜色和形状的图案、文字构成。
目前,基于街景全景图的交通标志的检测与识别中,大多通过人工对交通标志进行识别,需要耗费极大的人力资源和时间成本。已有的自动识别交通标志的方法大多基于颜色来进行区域筛选,通过滑窗法来对区域图像进行交通标志识别与分类,对于高分辨图像候选窗口数目会非常多,耗时很长。
另外,拍摄点到交通标志距离的不确定性导致了交通标志大小的不确定性,这使得需要尝试更多不同大小的窗口,由此庞大的窗口数目导致识别一张图像里的交通标志非常耗时。
发明内容
本发明实施例提供一种交通标志图像处理方法及装置,旨在提高交通标志识别的效率,降低成本。
本发明实施例提出了一种交通标志图像处理方法,包括:
获取采集得到的街景图像;
生成所述图像的非蓝色交通标志的候选窗口以及蓝色交通标志的候选窗口;
采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断所述生成的候选窗口内是否存在交通标志以及交通标志的类型。
本发明实施例还提出一种交通标志图像处理装置,包括:
获取模块,用于获取采集得到的街景图像;
窗口生成模块,用于生成所述图像的非蓝色交通标志的候选窗口以及蓝色交通标志的候选窗口;
分类识别模块,用于采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断所述生成的候选窗口内是否存在交通标志以及交通标志的类型。
本发明实施例提出的一种交通标志图像处理方法及装置,通过获取采集得到的街景图像;生成图像的非蓝色交通标志的候选窗口以及蓝色交通标志的候选窗口;采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断生成的候选窗口内是否存在交通标志以及交通标志的类型,本发明能够快速地在复杂场景对应的图像中检测识别出交通标志,由于采用了非蓝色交通标志的候选窗口和蓝色交通标志的候选窗口对候选区域进行严密的多重过滤,能够直接定位大部分具有外环描边的交通标志,避免了耗时的滑窗,提高了交通标志识别的效率。此外,采用设定的分类器对候选区域进行快速分类,进一步提高了交通标志识别的效率,同时也降低了人力资源和时间成本。
附图说明
图1是本发明实施例方案涉及的交通标志图像处理装置所在终端的硬件结构示意图;
图2是本发明交通标志图像处理方法第一实施例的流程示意图;
图3是本发明交通标志图像处理方法第二实施例的流程示意图;
图4是本发明交通标志图像处理装置第一实施例的功能模块示意图;
图5是本发明交通标志图像处理装置第二实施例的功能模块示意图。
为了使本发明的技术方案更加清楚、明了,下面将结合附图作进一步详述。
具体实施方式
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明实施例方案的主要思路是:利用交通标志的轮廓特征、形状特征和颜色特征对候选区域进行筛选,能够快速地排除图像中非交通标志区域,然后再进一步利用HOG(Histogram of Gradient,方向梯度直方图)特征分类器判别交通标志的指示内容,实现对各种类型交通标志的自动识别。
在从图像中识别出交通标志时,通常包括两个过程,第一个过程是筛选出交通标志大概存在的位置,第二个过程是识别相应的图像块是否是一个交通标志以及交通标志的具体内容。
对于第二个过程,目前使用的方法主要基于机器学习。机器学习的主要思想是预先定义一些图像的特征,然后利用这些特征来训练分类模型(不同的学习方法所使用的模型大相径庭),相同类别的图像在模型中得到相同的分类结果。在新的测试图像到来时,对新图像也提取出相应特征,通过训练好的模型判别出新图像属于哪个类别。这些方法使用的正例样本都必须是只包含交通标志的小图像块,并不关心交通标志的定位问题。
对于第一个过程,目前的方案主要基于交通标志的颜色特征。利用颜色特征排除掉不可能的区域后,采取滑窗法(不同大小和方向的窗口)去遍历整个图像。每个窗口位置都对应一个候选窗口。对每个候选窗口,都需要判断一次当前窗口对应的图像块是否属于某个交通标志(过程二)。高分辨率图像得到的候选窗口数目会非常多。另外,拍摄点到交通标志距离的不确定性导致了交通标志大小的不确定性,这使得需要尝试更多不同大小的窗口。而庞大的窗口数目导致识别一张图像里的交通标志非常耗时。
针对现有的缺陷,本发明设计了一种识别交通标志的交通标志图像处理方法,能够快速地在复杂场景对应的图像中检测识别出交通标志,采用严密的多重过滤,剩下的候选区域非常少,并且能够直接定位大部分具有外环描边的交通标志,避免耗时的滑窗。在得到少量比较精准的候选区域后,利用训练好的HOG特征分类器对候选区域进行快速分类,提高了交通标志识别的效率,同时也降低了人力资源和时间成本。
具体地,本实施例方案涉及的硬件运行环境包括一交通标志图像处理装置以及分类器,该分类器具体可以采用HOG特征分类器。上述交通标志图像处理装置可以承载于PC端,也可以承载于手机、平板电脑等处理图像的各种移动终端,该移动终端上可以安装街景应用软件。上述交通标志图像处理装置所承载的终端结构可以如图1所示。
参照图1,该终端可以包括:处理器1001,例如CPU,网络接口1004,用户接口1003,存储器1005,通信总线1002。其中,通信总线1002用于实现该终端中各组成部件之间的连接通信。用户接口1003可以包括显示屏(Display)、键盘(Keyboard)、鼠标等组件,用于接收用户输入的信息,并将接收的信息发送至处理器1005进行处理。显示屏可以为LCD显示屏、LED显示屏,也可以为触摸屏。可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器,也可以是稳定的存储器(non-volatilememory),例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置,该终端还可以具有摄像装置,用于获取全景街景图像。如图1所示,作为一种计算机存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及交通标志图像处理程序。
在图1所示的交通标志图像处理装置中,网络接口1004主要用于网络平台,与网络平台进行数据通信;用户接口1003主要用于连接客户端,与客户端进行数据通信,接收客户端输入的信息和指令;而处理器1001可以用于调用存储器1005中存储的交通标志图像处理程序,并执行以下操作:
获取采集得到的街景图像;
生成所述图像的非蓝色交通标志的候选窗口以及蓝色交通标志的候选窗口;
采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断所述生成的候选窗口内是否存在交通标志以及交通标志的类型。
进一步地,在一个实施例中,处理器1001调用存储器1005中存储的数据交通标志图像处理程序,还可以执行以下操作:
在HSV颜色空间,采用阈值法过滤出所述图像中接近交通标志所使用的红色和黑色,得到颜色过滤后的具有红色或黑色特征的图像,所述颜色过滤后的图像中的交通标志具有内外两层轮廓;
采用预设的轮廓检测方法,获取所述颜色过滤后的图像中的所有轮廓,过滤掉所有外层轮廓区域,保留所有内层轮廓区域;
获取每一所述内层轮廓区域的包围盒;
获取每一包围盒内部图像内容的连通区域数目;
对所有包围盒,将内部图像内容的连通区域数目在预设阈值范围内的包围盒作为所述非蓝色交通标志的候选窗口。
进一步地,在一个实施例中,处理器1001调用存储器1005中存储的数据交通标志图像处理程序,还可以执行以下操作:
在HSV(Hue(色调),Saturation(饱和度),Value(亮度))颜色空间,采用阈值法过滤出所述图像中接近交通标志所使用的蓝色,得到颜色过滤后的具有蓝色特征的图像;
获取所述颜色过滤后的图像的所有包围盒;
获取每一包围盒内部图像内容的连通区域的大小,根据每一包围盒内部图像内容的连通区域的大小获取蓝色交通标志的候选窗口。
进一步地,在一个实施例中,处理器1001调用存储器1005中存储的数据交通标志图像处理程序,还可以执行以下操作:
对每一候选窗口,提取其图像块的HOG特征;
将提取的HOG特征输入预先训练的SVM(support vectormachine,支持向量机)模型进行分类识别,得到分类识别结果,所述分类识别结果包括:识别出所述候选窗口内图像内容为交通标志或非交通标志,对于交通标志,还包括识别出该交通标志的类型。
进一步地,在一个实施例中,处理器1001调用存储器1005中存储的数据交通标志图像处理程序,还可以执行以下操作:
生成所述分类器;具体包括:
收集多个交通标志的图像块作为正例集,以及多个不包含交通标志的图像块作为负例集;
提取每一图像块的HOG特征,采用SVM模型训练出所述分类器,其中,每种交通标志为一个类别,非交通标志整体作为一个类别。
本实施例通过上述方案,通过获取采集得到的街景图像;生成图像的非蓝色交通标志的候选窗口以及蓝色交通标志的候选窗口;采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断生成的候选窗口内是否存在交通标志以及交通标志的类型,本发明能够快速地在复杂场景对应的图像中检测识别出交通标志,由于采用了严密的多重过滤,剩下的候选区域非常少,并且能够直接定位大部分具有外环描边的交通标志,避免了耗时的滑窗。在得到少量比较精准的候选区域后,利用训练好的HOG特征分类器对候选区域进行快速分类,提高了交通标志识别的效率,同时也降低了人力资源和时间成本。
基于上述硬件架构,提出本发明交通标志图像处理方法实施例。
如图2所示,本发明第一实施例提出一种交通标志图像处理方法,包括:
步骤S101,获取采集得到的街景图像;
以手机为例,可以在手机上安装街景应用软件,通过手机的摄像功能结合街景应用软件采集街景图像,该街景图像可以为全景图,也可以为普通的图像,其地理位置可以根据需要选择。
街景应用软件可以通过街景地图采集街景图像(比如SOSO街景地图)。街景地图是一种实景地图服务。为用户提供城市、街道或其他环境的360度全景图像,用户可以通过该服务获得如临其境的地图浏览体验。通过街景,只要坐在电脑前就可以真实的看到街道上的高清景象,为用户提供更加真实准确、更富画面细节的地图服务。
采集得到的街景图像中存在着大量的交通标志,本实施例方案可以从该街景图像中快速识别并获取其中的交通标志。
步骤S102,生成所述图像的非蓝色交通标志的候选窗口以及蓝色交通标志的候选窗口;
在获取到街景图像之后,筛选出该图像中的交通标志候选窗口,即交通标志候选区域,主要分为非蓝色交通标志的候选窗口和蓝色交通标志的候选窗口。对于非蓝色交通标志,利用非蓝色交通标志多重轮廓的特点,能够去除掉绝大多数的非交通标志候选窗口,同时也有很高的召回率。对于蓝色交通标志,使用颜色阈值以及连通区域特征,可以排除大部分非交通标志候选区域,有效地提高检测识别效率。
因此,本实施例可以利用交通标志的轮廓特征、形状特征和颜色特征对图像候选区域进行筛选,能够快速地排除图像中非交通标志区域,得到交通标志所在位置。
具体地,首先,生成非蓝色交通标志的候选窗口和蓝色交通标志的候选窗口。
其中,生成图像的非蓝色交通标志的候选窗口的步骤可以包括:
(1)、在HSV颜色空间,采用阈值法过滤出所述图像中接近交通标志所使用的红色和黑色,得到颜色过滤后的具有红色或黑色特征的图像,所述颜色过滤后的图像中的交通标志具有内外两层轮廓;
由于绝大部分的非蓝色交通标志都会有一层外轮廓描边,例如限速标志外圈的红色,黄色警告标志的黑色描边。经过颜色过滤后的图像中,交通标志都会拥有内外两层轮廓。以限速标志为例,限速标志外圈为红色,红色外圈与背景色(比如蓝色)之间的轮廓为外轮廓,红色外圈与内部颜色(比如白色)之间的轮廓为内轮廓。
(2、)采用预设的轮廓检测方法,获取所述颜色过滤后的图像中的所有轮廓,过滤掉所有外层轮廓区域,保留所有内层轮廓区域;
用OpenCV给出的轮廓检测方法findContour找到所有的轮廓,过滤掉所有外层轮廓,保留内层轮廓。需要说明的是,这里所指的内层轮廓不仅仅是第二层轮廓,有可能是被嵌套包围的更深层的轮廓。不具有多层轮廓的区域都不能出现交通标志。
(3)、获取每一所述内层轮廓区域的包围盒;
求每个内层轮廓的包围盒。包围盒可以是一个矩形窗口,通过矩形窗口框住同一内层轮廓内的像素区域。
由于求的是内层轮廓的包围盒,这里将包围盒扩大20%以完全包含整个交通标志。
(4)、获取每一包围盒内部图像内容的连通区域数目;对所有包围盒,将内部图像内容的连通区域数目在预设阈值范围内的包围盒作为所述非蓝色交通标志的候选窗口。
其中,包围盒内部图像内容的连通区域是指相邻的同一颜色像素构成的区域,比如对于红色限速标志而言,内容是黑色的限速数值,其中黑色像素构成的区域为红色限速标志内容的连通区域,对于黄色警告牌而言,内容是黑色的警示图案,其中黑色像素构成的区域为黄色警告牌标志内容的连通区域,对于过滤后的黑色特征的图像,每一包围盒内部图像内容的连通区域是指相邻的黑色颜色像素构成的区域。
如前所述,包围盒可以是一个矩形窗口,通过矩形窗口框住同一连通区域的像素。
对于每个包围盒,如果其内部图像内容的连通区域数目过少或者过多,它的内容就不可能是交通标志,通常,交通标志的连通区域在3~10个左右,当然,连通区域数目的阈值范围还可以根据实际情况调整,对于连通区域数目处于阈值范围之外的包围盒给予排除,余下的处于阈值范围之内的包围盒作为候选窗口。
其中,生成图像的蓝色交通标志的候选窗口的步骤可以包括:
(1)、在HSV颜色空间,采用阈值法过滤出所述图像中接近交通标志所使用的蓝色,得到颜色过滤后的具有蓝色特征的图像;
由于蓝色交通标志不具有外层轮廓,因此,这里可以采用传统的颜色过滤方法来生成候选窗口。在HSV颜色空间,用阈值法过滤出图像中接近交通标志所使用的蓝色。
(2)、获取所述颜色过滤后的图像的所有包围盒,求每一包围盒的连通区域;
作为一种实施方式,获取每一包围盒内部图像内容的连通区域的大小,根据每一包围盒内部图像内容的连通区域的大小获取蓝色交通标志的候选窗口。
具体地,获取每一包围盒内部图像内容的连通区域的大小;若所述连通区域的长宽尺寸符合交通标志尺寸,则以所述连通区域对应的包围盒作为所述蓝色交通标志的候选窗口;若所述连通区域的长宽尺寸小于交通标志尺寸,则排除所述连通区域对应的包围盒;若所述连通区域的长宽尺寸大于交通标志尺寸,则在所述连通区域内,采用滑窗法生成候选窗口,作为所述蓝色交通标志的候选窗口。
步骤S103,采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断所述生成的候选窗口内是否存在交通标志以及交通标志的类型。
该分类器具体可以使用HOG特征分类器。
HOG特征分类器在训练时,通过人工标注出一系列只包含交通标志的图像块作为正例,一系列不包含交通标志的图像块作为负例。然后提取图像块的HOG(Histogram of Gradient,方向梯度直方图)特征,利用SVM模型训练出一个多分类器。其中,每种交通标志都是一个类别,非交通标志也整体作为一个类别。
在使用HOG特征分类器对生成的候选窗口进行分类、识别时,具体采用如下方案:
对每一需要判别的候选窗口,提取其图像块的HOG特征;将提取的HOG特征输入预先训练的SVM模型进行分类识别,得到分类识别结果。
分类识别结果会说明某个候选窗口的内容是什么样的交通标志或者不是交通标志。也就是说,分类识别结果包括:识别出所述候选窗口内图像内容为交通标志或非交通标志,对于交通标志,还包括识别出该交通标志的类型。
本发明的HOG特征分类器训练过程很简明,所使用的SVM模型简单高效。测试表明,训练一个80多类交通标志的分类器只需要几分钟。另外本发明利用了非蓝色交通标志多重轮廓的特点,能够去除掉绝大多数的非交通标志候选窗口,同时也有很高的召回率。对于蓝色交通标志,使用颜色阈值以及连通区域特征也排除了大部分非交通标志候选区域,有效地提高了检测识别效率。使用本发明的方法,若只检测非蓝色交通标志,能够在6秒内处理一张街景全景图,若检测所有类型的交通标志,能够在20秒内处理一张街景全景图。在测试集合中,整体的召回率达到90%,准确率达到97%。
相比现有技术,本实施例方案能够快速地在复杂场景对应的图像中检测识别出交通标志,由于采用了严密的多重过滤,剩下的候选区域非常少,并且能够直接定位大部分具有外环描边的交通标志,避免了耗时的滑窗。在得到少量比较精准的候选区域后,本发明利用训练好的HOG特征分类器对候选区域进行快速分类,能够达到90%以上的准确率和97%以上的召回率。
本实施例通过上述方案,通过获取采集得到的街景图像;生成图像的非蓝色交通标志的候选窗口以及蓝色交通标志的候选窗口;采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断生成的候选窗口内是否存在交通标志以及交通标志的类型,本发明能够快速地在复杂场景对应的图像中检测识别出交通标志,由于采用了非蓝色交通标志的候选窗口和蓝色交通标志的候选窗口对候选区域进行严密的多重过滤,能够直接定位大部分具有外环描边的交通标志,避免了耗时的滑窗,提高了交通标志识别的效率。此外,采用设定的分类器对候选区域进行快速分类,进一步提高了交通标志识别的效率,同时也降低了人力资源和时间成本。
如图3所示,本发明第二实施例提出一种交通标志图像处理方法,基于上述图2所示的实施例,在上述步骤S103之前还包括:
步骤S100,生成所述分类器;具体包括:
收集多个交通标志的图像块作为正例集,以及多个不包含交通标志的图像块作为负例集;
提取每一图像块的HOG特征,采用SVM模型训练出所述分类器,其中,每种交通标志为一个类别,非交通标志整体作为一个类别。
相比上述实施例,本实施例还包括生成分类器的方案。
该分类器具体可以使用HOG特征分类器。
HOG特征分类器在训练时,通过人工标注出一系列只包含交通标志的图像块作为正例,一系列不包含交通标志的图像块作为负例。然后提取图像块的HOG(Histogram of Gradient,方向梯度直方图)特征,利用SVM模型训练出一个多分类器。其中,每种交通标志都是一个类别,非交通标志也整体作为一个类别。
本发明实施例的HOG特征分类器训练过程很简明,所使用的SVM模型简单高效。测试表明,训练一个80多类交通标志的分类器只需要几分钟。
本实施例通过获取采集得到的街景图像;生成图像的非蓝色交通标志的候选窗口以及蓝色交通标志的候选窗口;采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断生成的候选窗口内是否存在交通标志以及交通标志的类型,本发明能够快速地在复杂场景对应的图像中检测识别出交通标志,由于采用了严密的多重过滤,剩下的候选区域非常少,并且能够直接定位大部分具有外环描边的交通标志,避免了耗时的滑窗。在得到少量比较精准的候选区域后,利用训练好的HOG特征分类器对候选区域进行快速分类,提高了交通标志识别的效率,同时也降低了人力资源和时间成本。
如图4所示,本发明第一实施例提出一种交通标志图像处理装置,包括:获取模块201、窗口生成模块202以及分类识别模块203,其中:
获取模块201,用于获取采集得到的街景图像;
窗口生成模块202,用于生成所述图像的非蓝色交通标志的候选窗口以及蓝色交通标志的候选窗口;
分类识别模块203,用于采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断所述生成的候选窗口内是否存在交通标志以及交通标志的类型。
具体地,以手机为例,可以在手机上安装街景应用软件,通过手机的摄像功能结合街景应用软件采集街景图像,该街景图像可以为全景图,也可以为普通的图像,其地理位置可以根据需要选择。
采集得到的街景图像中存在着大量的交通标志,本实施例方案可以从该街景图像中快速识别并获取其中的交通标志。
在获取到街景图像之后,筛选出该图像中的交通标志候选窗口,即交通标志候选区域,主要分为非蓝色交通标志的候选窗口和蓝色交通标志的候选窗口。对于非蓝色交通标志,利用非蓝色交通标志多重轮廓的特点,能够去除掉绝大多数的非交通标志候选窗口,同时也有很高的召回率。对于蓝色交通标志,使用颜色阈值以及连通区域特征,可以排除大部分非交通标志候选区域,有效地提高检测识别效率。
因此,本实施例可以利用交通标志的轮廓特征、形状特征和颜色特征对图像候选区域进行筛选,能够快速地排除图像中非交通标志区域,得到交通标志所在位置。
具体地,首先,生成非蓝色交通标志的候选窗口和蓝色交通标志的候选窗口。
其中,生成图像的非蓝色交通标志的候选窗口的步骤可以包括:
(1)、在HSV颜色空间,采用阈值法过滤出所述图像中接近交通标志所使用的红色和黑色,得到颜色过滤后的具有红色或黑色特征的图像,所述颜色过滤后的图像中的交通标志具有内外两层轮廓;
由于绝大部分的非蓝色交通标志都会有一层外轮廓描边,例如限速标志外圈的红色,黄色警告标志的黑色描边。经过颜色过滤后的图像中,交通标志都会拥有内外两层轮廓。以限速标志为例,限速标志外圈为红色,红色外圈与背景色(比如蓝色)之间的轮廓为外轮廓,红色外圈与内部颜色(比如白色)之间的轮廓为内轮廓。
(2、)采用预设的轮廓检测方法,获取所述颜色过滤后的图像中的所有轮廓,过滤掉所有外层轮廓区域,保留所有内层轮廓区域;
用OpenCV给出的轮廓检测方法findContour找到所有的轮廓,过滤掉所有外层轮廓,保留内层轮廓。需要说明的是,这里所指的内层轮廓不仅仅是第二层轮廓,有可能是被嵌套包围的更深层的轮廓。不具有多层轮廓的区域都不能出现交通标志。
(3)、获取每一所述内层轮廓区域的包围盒;
求每个内层轮廓的包围盒。包围盒可以是一个矩形窗口,通过矩形窗口框住同一内层轮廓内的像素区域。
由于求的是内层轮廓的包围盒,这里将包围盒扩大20%以完全包含整个交通标志。
(4)、获取每一包围盒内部图像内容的连通区域数目;对所有包围盒,将内部图像内容的连通区域数目在预设阈值范围内的包围盒作为所述非蓝色交通标志的候选窗口。
其中,包围盒内部图像内容的连通区域是指相邻的同一颜色像素构成的区域,比如对于红色限速标志而言,内容是黑色的限速数值,其中黑色像素构成的区域为红色限速标志内容的连通区域,对于黄色警告牌而言,内容是黑色的警示图案,其中黑色像素构成的区域为黄色警告牌标志内容的连通区域,对于过滤后的黑色特征的图像,每一包围盒内部图像内容的连通区域是指相邻的黑色颜色像素构成的区域。
如前所述,包围盒可以是一个矩形窗口,通过矩形窗口框住同一连通区域的像素。
对于每个包围盒,如果其内部图像内容的连通区域数目过少或者过多,它的内容就不可能是交通标志,通常,交通标志的连通区域在3~10个左右,当然,连通区域数目的阈值范围还可以根据实际情况调整,对于连通区域数目处于阈值范围之外的包围盒给予排除,余下的处于阈值范围之内的包围盒作为候选窗口。
其中,生成图像的蓝色交通标志的候选窗口的步骤可以包括:
(1)、在HSV颜色空间,采用阈值法过滤出所述图像中接近交通标志所使用的蓝色,得到颜色过滤后的具有蓝色特征的图像;
由于蓝色交通标志不具有外层轮廓,因此,这里可以采用传统的颜色过滤方法来生成候选窗口。在HSV颜色空间,用阈值法过滤出图像中接近交通标志所使用的蓝色。
(2)、获取所述颜色过滤后的图像的所有包围盒,求每一包围盒的连通区域;
作为一种实施方式,获取每一包围盒内部图像内容的连通区域的大小,根据每一包围盒内部图像内容的连通区域的大小获取蓝色交通标志的候选窗口。
具体地,获取每一包围盒内部图像内容的连通区域的大小;若所述连通区域的长宽尺寸符合交通标志尺寸,则以所述连通区域对应的包围盒作为所述蓝色交通标志的候选窗口;若所述连通区域的长宽尺寸小于交通标志尺寸,则排除所述连通区域对应的包围盒;若所述连通区域的长宽尺寸大于交通标志尺寸,则在所述连通区域内,采用滑窗法生成候选窗口,作为所述蓝色交通标志的候选窗口。
之后,采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断所述生成的候选窗口内是否存在交通标志以及交通标志的类型。
该分类器具体可以使用HOG特征分类器。
HOG特征分类器在训练时,通过人工标注出一系列只包含交通标志的图像块作为正例,一系列不包含交通标志的图像块作为负例。然后提取图像块的HOG(Histogram of Gradient,方向梯度直方图)特征,利用SVM模型训练出一个多分类器。其中,每种交通标志都是一个类别,非交通标志也整体作为一个类别。
在使用HOG特征分类器对生成的候选窗口进行分类、识别时,具体采用如下方案:
对每一需要判别的候选窗口,提取其图像块的HOG特征;将提取的HOG特征输入预先训练的SVM模型进行分类识别,得到分类识别结果。
分类识别结果会说明某个候选窗口的内容是什么样的交通标志或者不是交通标志。也就是说,分类识别结果包括:识别出所述候选窗口内图像内容为交通标志或非交通标志,对于交通标志,还包括识别出该交通标志的类型。
本发明的HOG特征分类器训练过程很简明,所使用的SVM模型简单高效。测试表明,训练一个80多类交通标志的分类器只需要几分钟。另外本发明利用了非蓝色交通标志多重轮廓的特点,能够去除掉绝大多数的非交通标志候选窗口,同时也有很高的召回率。对于蓝色交通标志,使用颜色阈值以及连通区域特征也排除了大部分非交通标志候选区域,有效地提高了检测识别效率。使用本发明的方法,若只检测非蓝色交通标志,能够在6秒内处理一张街景全景图,若检测所有类型的交通标志,能够在20秒内处理一张街景全景图。在测试集合中,整体的召回率达到90%,准确率达到97%。
相比现有技术,本实施例方案能够快速地在复杂场景对应的图像中检测识别出交通标志,由于采用了严密的多重过滤,剩下的候选区域非常少,并且能够直接定位大部分具有外环描边的交通标志,避免了耗时的滑窗。在得到少量比较精准的候选区域后,本发明利用训练好的HOG特征分类器对候选区域进行快速分类,能够达到90%以上的准确率和97%以上的召回率。
如图5所示,本发明第二实施例提出一种交通标志图像处理装置,基于上述图4所示的实施例,还包括:
分类器生成模块200,用于生成所述分类器;具体用于收集多个交通标志的图像块作为正例集,以及多个不包含交通标志的图像块作为负例集;提取每一图像块的HOG特征,采用SVM模型训练出所述分类器,其中,每种交通标志为一个类别,非交通标志整体作为一个类别。
相比上述实施例,本实施例还包括生成分类器的方案。
该分类器具体可以使用HOG特征分类器。
HOG特征分类器在训练时,通过人工标注出一系列只包含交通标志的图像块作为正例,一系列不包含交通标志的图像块作为负例。然后提取图像块的HOG(Histogram of Gradient,方向梯度直方图)特征,利用SVM模型训练出一个多分类器。其中,每种交通标志都是一个类别,非交通标志也整体作为一个类别。
本发明实施例的HOG特征分类器训练过程很简明,所使用的SVM模型简单高效。测试表明,训练一个80多类交通标志的分类器只需要几分钟。
本实施例通过获取采集得到的街景图像;生成图像的非蓝色交通标志的候选窗口以及蓝色交通标志的候选窗口;采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断生成的候选窗口内是否存在交通标志以及交通标志的类型,本发明能够快速地在复杂场景对应的图像中检测识别出交通标志,由于采用了严密的多重过滤,剩下的候选区域非常少,并且能够直接定位大部分具有外环描边的交通标志,避免了耗时的滑窗。在得到少量比较精准的候选区域后,利用训练好的HOG特征分类器对候选区域进行快速分类,提高了交通标志识别的效率,同时也降低了人力资源和时间成本。
还需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述,不代表实施例的优劣。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端设备(可以是手机,计算机,服务器,或者网络设备等)执行本发明各个实施例所述的方法。
以上所述仅为本发明的优选实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或流程变换,或直接或间接运用在其它相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (12)

1.一种交通标志图像处理方法,其特征在于,包括:
获取采集得到的街景图像;
生成所述图像的非蓝色交通标志的候选窗口以及蓝色交通标志的候选窗口;
采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断所述生成的候选窗口内是否存在交通标志以及交通标志的类型。
2.根据权利要求1所述的方法,其特征在于,所述生成图像的非蓝色交通标志的候选窗口的步骤包括:
在HSV颜色空间,采用阈值法过滤出所述图像中接近交通标志所使用的红色和黑色,得到颜色过滤后的具有红色或黑色特征的图像,所述颜色过滤后的图像中的交通标志具有内外两层轮廓;
采用预设的轮廓检测方法,获取所述颜色过滤后的图像中的所有轮廓,过滤掉所有外层轮廓区域,保留所有内层轮廓区域;
获取每一所述内层轮廓区域的包围盒;
获取每一包围盒内部图像内容的连通区域数目;
对所有包围盒,将内部图像内容的连通区域数目在预设阈值范围内的包围盒作为所述非蓝色交通标志的候选窗口。
3.根据权利要求1所述的方法,其特征在于,所述生成图像的蓝色交通标志的候选窗口的步骤包括:
在HSV颜色空间,采用阈值法过滤出所述图像中接近交通标志所使用的蓝色,得到颜色过滤后的具有蓝色特征的图像;
获取所述颜色过滤后的图像的所有包围盒;
获取每一包围盒内部图像内容的连通区域的大小,根据每一包围盒内部图像内容的连通区域的大小获取蓝色交通标志的候选窗口。
4.根据权利要求3所述的方法,其特征在于,所述获取每一包围盒内部图像内容的连通区域的大小,根据每一包围盒内部图像内容的连通区域的大小获取蓝色交通标志的候选窗口的步骤包括:
获取每一包围盒内部图像内容的连通区域的大小;
若所述连通区域的长宽尺寸符合交通标志尺寸,则以所述连通区域对应的包围盒作为所述蓝色交通标志的候选窗口;
若所述连通区域的长宽尺寸小于交通标志尺寸,则排除所述连通区域对应的包围盒;
若所述连通区域的长宽尺寸大于交通标志尺寸,则在所述连通区域内,采用滑窗法生成候选窗口,作为所述蓝色交通标志的候选窗口。
5.根据权利要求1-4中任一项所述的方法,其特征在于,所述采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断所述生成的候选窗口内是否存在交通标志以及交通标志的类型的步骤包括:
对每一候选窗口,提取其图像块的方向梯度直方图HOG特征;
将提取的HOG特征输入预先训练的SVM模型进行分类识别,得到分类识别结果,所述分类识别结果包括:识别出所述候选窗口内图像内容为交通标志或非交通标志,对于交通标志,还包括识别出该交通标志的类型。
6.根据权利要求5所述的方法,其特征在于,所述采用设定的分类器,对生成的候选窗口进行分类的步骤之前还包括:
生成所述分类器;具体包括:
收集多个交通标志的图像块作为正例集,以及多个不包含交通标志的图像块作为负例集;
提取每一图像块的HOG特征,采用SVM模型训练出所述分类器,其中,每种交通标志为一个类别,非交通标志整体作为一个类别。
7.一种交通标志图像处理装置,其特征在于,包括:
获取模块,用于获取采集得到的街景图像;
窗口生成模块,用于生成所述图像的非蓝色交通标志的候选窗口以及蓝色交通标志的候选窗口;
分类识别模块,用于采用设定的分类器,对生成的候选窗口进行分类识别,根据分类识别结果判断所述生成的候选窗口内是否存在交通标志以及交通标志的类型。
8.根据权利要求7所述的装置,其特征在于,
所述窗口生成模块,还用于在HSV颜色空间,采用阈值法过滤出所述图像中接近交通标志所使用的红色和黑色,得到颜色过滤后的具有红色或黑色特征的图像,所述颜色过滤后的图像中的交通标志具有内外两层轮廓;采用预设的轮廓检测方法,获取所述颜色过滤后的图像中的所有轮廓,过滤掉所有外层轮廓区域,保留所有内层轮廓区域;获取每一所述内层轮廓区域的包围盒;获取每一包围盒内部图像内容的连通区域数目;对所有包围盒,将内部图像内容的连通区域数目在预设阈值范围内的包围盒作为所述非蓝色交通标志的候选窗口。
9.根据权利要求7所述的装置,其特征在于,
所述窗口生成模块,还用于在HSV颜色空间,采用阈值法过滤出所述图像中接近交通标志所使用的蓝色,得到颜色过滤后的具有蓝色特征的图像;获取所述颜色过滤后的图像的所有包围盒;获取每一包围盒内部图像内容的连通区域的大小,根据每一包围盒内部图像内容的连通区域的大小获取蓝色交通标志的候选窗口。
10.根据权利要求9所述的装置,其特征在于,
所述窗口生成模块,还用于获取每一包围盒内部图像内容的连通区域的大小;若所述连通区域的长宽尺寸符合交通标志尺寸,则以所述连通区域对应的包围盒作为所述蓝色交通标志的候选窗口;若所述连通区域的长宽尺寸小于交通标志尺寸,则排除所述连通区域对应的包围盒;若所述连通区域的长宽尺寸大于交通标志尺寸,则在所述连通区域内,采用滑窗法生成候选窗口,作为所述蓝色交通标志的候选窗口。
11.根据权利要求7-10中任一项所述的装置,其特征在于,
所述分类识别模块,还用于对每一候选窗口,提取其图像块的HOG特征;将提取的HOG特征输入预先训练的SVM模型进行分类识别,得到分类识别结果,所述分类识别结果包括:识别出所述候选窗口内图像内容为交通标志或非交通标志,对于交通标志,还包括识别出该交通标志的类型。
12.根据权利要求11所述的装置,其特征在于,还包括:
分类器生成模块,用于生成所述分类器;具体用于收集多个交通标志的图像块作为正例集,以及多个不包含交通标志的图像块作为负例集;提取每一图像块的HOG特征,采用SVM模型训练出所述分类器,其中,每种交通标志为一个类别,非交通标志整体作为一个类别。
CN201410817079.7A 2014-12-24 2014-12-24 交通标志图像处理方法及装置 Active CN104616021B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410817079.7A CN104616021B (zh) 2014-12-24 2014-12-24 交通标志图像处理方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410817079.7A CN104616021B (zh) 2014-12-24 2014-12-24 交通标志图像处理方法及装置

Publications (2)

Publication Number Publication Date
CN104616021A true CN104616021A (zh) 2015-05-13
CN104616021B CN104616021B (zh) 2020-05-05

Family

ID=53150458

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410817079.7A Active CN104616021B (zh) 2014-12-24 2014-12-24 交通标志图像处理方法及装置

Country Status (1)

Country Link
CN (1) CN104616021B (zh)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105469044A (zh) * 2015-11-20 2016-04-06 厦门雅迅网络股份有限公司 一种基于正交矩不变特征的交通标志识别方法
CN105718860A (zh) * 2016-01-15 2016-06-29 武汉光庭科技有限公司 基于驾驶安全地图及双目交通标志识别的定位方法及系统
CN105718859A (zh) * 2016-01-15 2016-06-29 武汉光庭科技有限公司 自动驾驶中一种结合图形处理器进行限速牌检测的算法
CN105809121A (zh) * 2016-03-03 2016-07-27 电子科技大学 多特征协同的交通标志检测与识别方法
CN106503011A (zh) * 2015-09-07 2017-03-15 高德软件有限公司 一种地图数据处理方法及装置
CN106611161A (zh) * 2016-12-16 2017-05-03 清华大学 一种交通标志包围盒的优化方法
CN106709412A (zh) * 2015-11-17 2017-05-24 腾讯科技(深圳)有限公司 交通标志检测方法和装置
CN107392115A (zh) * 2017-06-30 2017-11-24 中原智慧城市设计研究院有限公司 一种基于分层特征提取的交通标志识别方法
CN107577981A (zh) * 2016-07-04 2018-01-12 高德信息技术有限公司 一种道路交通标识识别方法及装置
CN108090459A (zh) * 2017-12-29 2018-05-29 北京华航无线电测量研究所 一种适用于车载视觉系统的交通标志检测识别方法
CN108304752A (zh) * 2017-01-13 2018-07-20 天津工业大学 基于hog特征和bcnn的交通标识牌检测
CN109255279A (zh) * 2017-07-13 2019-01-22 深圳市凯立德科技股份有限公司 一种交通标志检测识别的方法及系统
CN109447139A (zh) * 2018-10-18 2019-03-08 中国农业大学 包含完整家畜的养殖场场景点云识别方法及装置
CN110097600A (zh) * 2019-05-17 2019-08-06 百度在线网络技术(北京)有限公司 用于识别交通标志牌的方法及装置
CN110119725A (zh) * 2019-05-20 2019-08-13 百度在线网络技术(北京)有限公司 用于检测信号灯的方法及装置
CN110135307A (zh) * 2019-04-30 2019-08-16 北京邮电大学 基于注意力机制的交通标志检测方法和装置
CN112801098A (zh) * 2019-11-14 2021-05-14 临沂市拓普网络股份有限公司 一种基于轮廓技术的数学符号识别方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009035697A1 (en) * 2007-09-13 2009-03-19 Cognex Corporation System and method for traffic sign recognition
CN102542260A (zh) * 2011-12-30 2012-07-04 中南大学 一种面向无人驾驶车的道路交通标志识别方法
CN103020623A (zh) * 2011-09-23 2013-04-03 株式会社理光 交通标志检测方法和交通标志检测设备
CN103034836A (zh) * 2011-09-29 2013-04-10 株式会社理光 道路标志检测方法和道路标志检测设备

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009035697A1 (en) * 2007-09-13 2009-03-19 Cognex Corporation System and method for traffic sign recognition
CN103020623A (zh) * 2011-09-23 2013-04-03 株式会社理光 交通标志检测方法和交通标志检测设备
CN103034836A (zh) * 2011-09-29 2013-04-10 株式会社理光 道路标志检测方法和道路标志检测设备
CN102542260A (zh) * 2011-12-30 2012-07-04 中南大学 一种面向无人驾驶车的道路交通标志识别方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
常发亮 等: ""基于高斯颜色模型和SVM的交通标志检测"", 《仪器仪表学报》 *

Cited By (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106503011A (zh) * 2015-09-07 2017-03-15 高德软件有限公司 一种地图数据处理方法及装置
CN106709412B (zh) * 2015-11-17 2021-05-11 腾讯科技(深圳)有限公司 交通标志检测方法和装置
CN106709412A (zh) * 2015-11-17 2017-05-24 腾讯科技(深圳)有限公司 交通标志检测方法和装置
CN105469044A (zh) * 2015-11-20 2016-04-06 厦门雅迅网络股份有限公司 一种基于正交矩不变特征的交通标志识别方法
CN105718860B (zh) * 2016-01-15 2019-09-10 武汉光庭科技有限公司 基于驾驶安全地图及双目交通标志识别的定位方法及系统
CN105718859A (zh) * 2016-01-15 2016-06-29 武汉光庭科技有限公司 自动驾驶中一种结合图形处理器进行限速牌检测的算法
CN105718860A (zh) * 2016-01-15 2016-06-29 武汉光庭科技有限公司 基于驾驶安全地图及双目交通标志识别的定位方法及系统
CN105718859B (zh) * 2016-01-15 2019-05-03 武汉光庭科技有限公司 自动驾驶中一种结合图形处理器进行限速牌检测的方法
CN105809121A (zh) * 2016-03-03 2016-07-27 电子科技大学 多特征协同的交通标志检测与识别方法
CN107577981A (zh) * 2016-07-04 2018-01-12 高德信息技术有限公司 一种道路交通标识识别方法及装置
CN106611161A (zh) * 2016-12-16 2017-05-03 清华大学 一种交通标志包围盒的优化方法
CN106611161B (zh) * 2016-12-16 2019-06-18 清华大学 一种交通标志包围盒的优化方法
CN108304752A (zh) * 2017-01-13 2018-07-20 天津工业大学 基于hog特征和bcnn的交通标识牌检测
CN107392115A (zh) * 2017-06-30 2017-11-24 中原智慧城市设计研究院有限公司 一种基于分层特征提取的交通标志识别方法
CN109255279A (zh) * 2017-07-13 2019-01-22 深圳市凯立德科技股份有限公司 一种交通标志检测识别的方法及系统
CN108090459A (zh) * 2017-12-29 2018-05-29 北京华航无线电测量研究所 一种适用于车载视觉系统的交通标志检测识别方法
CN109447139B (zh) * 2018-10-18 2021-03-05 中国农业大学 包含完整家畜的养殖场场景点云识别方法及装置
CN109447139A (zh) * 2018-10-18 2019-03-08 中国农业大学 包含完整家畜的养殖场场景点云识别方法及装置
CN110135307A (zh) * 2019-04-30 2019-08-16 北京邮电大学 基于注意力机制的交通标志检测方法和装置
CN110097600A (zh) * 2019-05-17 2019-08-06 百度在线网络技术(北京)有限公司 用于识别交通标志牌的方法及装置
CN110097600B (zh) * 2019-05-17 2021-08-06 百度在线网络技术(北京)有限公司 用于识别交通标志牌的方法及装置
CN110119725A (zh) * 2019-05-20 2019-08-13 百度在线网络技术(北京)有限公司 用于检测信号灯的方法及装置
CN112801098A (zh) * 2019-11-14 2021-05-14 临沂市拓普网络股份有限公司 一种基于轮廓技术的数学符号识别方法
CN112801098B (zh) * 2019-11-14 2023-01-10 临沂市拓普网络股份有限公司 一种基于轮廓技术的数学符号识别方法

Also Published As

Publication number Publication date
CN104616021B (zh) 2020-05-05

Similar Documents

Publication Publication Date Title
CN104616021A (zh) 交通标志图像处理方法及装置
US11455805B2 (en) Method and apparatus for detecting parking space usage condition, electronic device, and storage medium
DE112013001858B4 (de) Mehrfachhinweis-Objekterkennung und -Analyse
CN102610102B (zh) 一种嫌疑车辆查控方法及系统
Morishita et al. Sakurasensor: quasi-realtime cherry-lined roads detection through participatory video sensing by cars
Kosuru et al. Automatic Identification of Vehicles in Traffic using Smart Cameras
US11816875B2 (en) Method for estimating and presenting passenger flow, system, and computer readable storage medium
CN111161543A (zh) 一种基于图像识别的公交前车违章行为自动抓拍方法及系统
CN103871077B (zh) 一种道路车辆监控视频中的关键帧提取方法
CN110991221B (zh) 一种基于深度学习的动态交通闯红灯识别方法
CN105976392B (zh) 基于最大输出概率的车辆轮胎检测方法及装置
CN112651293B (zh) 一种公路违法设摊事件视频检测方法
CN102867417A (zh) 一种出租车防伪系统及方法
CN102163278B (zh) 一种公交车道非法车辆闯入检测方法
CN110909598B (zh) 一种基于深度学习的非机动车道交通违法行驶识别方法
CN111612104A (zh) 车辆定损图像获取方法、装置、介质和电子设备
US20230306573A1 (en) Systems and methods for assessing infrastructure
CN105184301B (zh) 一种利用四轴飞行器判别车辆方位的方法
CN106709412A (zh) 交通标志检测方法和装置
CN110852236A (zh) 目标事件的确定方法及装置、存储介质、电子装置
CN111008554B (zh) 一种基于深度学习的动态交通斑马线内不礼让行人识别方法
Yaseen et al. Development of new Anpr dataset for automatic number plate detection and recognition in north of Iraq
CN115424217A (zh) 基于ai视觉的车辆智能识别方法、装置和电子设备
Chowdhury et al. An adaptive technique for computer vision based vehicles license plate detection system
CN111931721B (zh) 年检标签颜色和个数的检测方法、装置及电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20171009

Address after: 100084 Haidian District Tsinghua Yuan Beijing No. 1

Applicant after: Tsinghua University

Applicant after: Shenzhen Tencent Computer System Co., Ltd.

Address before: The South Road in Guangdong province Shenzhen city Fiyta building 518000 floor 5-10 Nanshan District high tech Zone

Applicant before: Shenzhen Tencent Computer System Co., Ltd.

GR01 Patent grant
GR01 Patent grant