CN102509457A - 一种车辆跟踪的方法及装置 - Google Patents

一种车辆跟踪的方法及装置 Download PDF

Info

Publication number
CN102509457A
CN102509457A CN2011103027163A CN201110302716A CN102509457A CN 102509457 A CN102509457 A CN 102509457A CN 2011103027163 A CN2011103027163 A CN 2011103027163A CN 201110302716 A CN201110302716 A CN 201110302716A CN 102509457 A CN102509457 A CN 102509457A
Authority
CN
China
Prior art keywords
target point
tracked
license plate
current
video image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011103027163A
Other languages
English (en)
Other versions
CN102509457B (zh
Inventor
王晓曼
陈维强
刘新
刘微
刘韶
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qingdao Hisense Network Technology Co Ltd
Original Assignee
Qingdao Hisense Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qingdao Hisense Network Technology Co Ltd filed Critical Qingdao Hisense Network Technology Co Ltd
Priority to CN201110302716.3A priority Critical patent/CN102509457B/zh
Priority to PCT/CN2011/081782 priority patent/WO2013053159A1/zh
Publication of CN102509457A publication Critical patent/CN102509457A/zh
Application granted granted Critical
Publication of CN102509457B publication Critical patent/CN102509457B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/017Detecting movement of traffic to be counted or controlled identifying vehicles
    • G08G1/0175Detecting movement of traffic to be counted or controlled identifying vehicles by photographing vehicles, e.g. when violating traffic rules

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种车辆跟踪方法及装置,用以提高智能交通系统的效率。该方法包括:将从当前帧视频图像的检测区域内识别出的一个车牌确定为当前目标点,当所述当前目标点的车牌信息与一个待跟踪目标点的车牌信息匹配时,确定所述当前目标点为所述待跟踪目标点,并更新所述待跟踪目标点的跟踪列表信息;否则,确定所述当前目标点为新的待跟踪目标点,并建立所述新的待跟踪目标点的跟踪列表信息。

Description

一种车辆跟踪的方法及装置
技术领域
本发明涉及智能交通监控技术领域,特别涉及一种车辆跟踪的方法及装置。
背景技术
随着城市的迅猛发展,城市的人口和车辆在急剧增长,交通流量日益加大,交通拥堵现象日益严重,交通问题已经成为城市管理中的重大问题,其严重阻碍了城市的发展,特别是各种车辆违章现象的随时随地的发生,使得城市交通的监控变得非常困难,由此出现了运动目标视频跟踪技术用以监控车辆的智能交通系统。
目前车辆跟踪方法包括:基于车牌的跟踪捕获方法以及基于运动信息的跟踪捕获方法。其中,基于车牌的跟踪捕获方法包括:确定当前帧视频图像中当前目标点的地理位置信息,提取前一帧视频图像中所有已跟踪上目标点的地理位置信息,并获得当前目标点与所有已跟踪上目标点之间的最小距离,当该最小距离小于设定值时,则确定当前目标点为最小距离对应的已跟踪上目标点。这种方法必须首先定位出当前目标点的地理位置信息,对于未定位的车辆容易漏车,跟踪错误的几率也比较大。
基于运动信息的跟踪捕获方法包括:将当前帧视频图像中设定虚拟圈中的图像与前一帧视频图像中设定虚拟圈中的图像进行比较,获得帧差图,遍历帧差图中每个像素点是否为白点,若白点的个数超过半数像素点,将虚拟线圈的状态设定为1,否则设定为0。当虚拟线圈状态由0变为1时,则确定有车辆进入虚拟线圈,否则,确定车辆从虚拟线圈中离开,此时,捕获车辆。这种方法的局限性比较大,具有重复捕获、漏捕获等缺点,特别在交叉路口,重复捕获的可能性会更大。
可见,目前车辆跟踪方法的准确性还不高,直接影响了智能交通系统的效率。
发明内容
本发明实施例提供一种车辆跟踪方法及装置,用以提高智能交通系统的效率。
本发明实施例提供一种车辆跟踪方法,包括:
将从当前帧视频图像的检测区域内识别出的一个车牌确定为当前目标点;
将所述当前目标点的车牌信息分别与每个待跟踪目标点的车牌信息进行匹配;
当所述当前目标点的车牌信息与一个待跟踪目标点的车牌信息匹配时,确定所述当前目标点为所述待跟踪目标点,并更新所述待跟踪目标点的跟踪列表信息;否则,
确定所述当前目标点为新的待跟踪目标点,并建立所述新的待跟踪目标点的跟踪列表信息,其中,所述跟踪列表信息包括:所述待跟踪目标点在每帧视频图像上的位置信息,车牌字符标识,以及每帧视频图像的帧号和存储位置信息。
本发明实施例提供一种车辆跟踪的装置,包括:
识别单元,用于将从当前帧视频图像的检测区域内识别出的一个车牌确定为当前目标点;
匹配单元,用于将所述当前目标点的车牌信息分别与每个待跟踪目标点的车牌信息进行匹配;
第一跟踪单元,用于当所述当前目标点的车牌信息与一个待跟踪目标点的车牌信息匹配时,确定所述当前目标点为所述待跟踪目标点,并更新所述待跟踪目标点的跟踪列表信息;否则,确定所述当前目标点为新的待跟踪目标点,并建立所述新的待跟踪目标点的跟踪列表信息,其中,所述跟踪列表信息包括:所述待跟踪目标点在每帧视频图像上的位置信息,车牌字符标识,以及每帧视频图像的帧号和存储位置信息。
本发明实施例中,对于检测区域内的车辆,采用车牌信息匹配进行车辆跟踪,这样,只需要较小的计算量就可以实现准确的车辆跟踪,从而,不需要大量的人员参与车辆跟踪过程中,提高了智能交通系统的效率。
附图说明
图1为本发明实施例中车辆跟踪的流程图;
图2为本发明实施例中非检测区域内车辆跟踪的流程图;
图3为本发明实施例中车辆跟踪装置的结构图。
具体实施方式
本发明实施例中,通过摄像头获取了当前帧图像后,对当前帧图像检测区域内的每辆车的车牌进行识别,将识别出的每个车牌的车牌信息与每个待跟踪目标点的车牌信息进行匹配,根据匹配结果确定识别出的每个车牌是否为待跟踪目标点。其中,当识别出的一个车牌的车牌信息与一个待跟踪目标点的车牌信息匹配,则该识别出的车牌为该待跟踪目标点;当识别出的车牌的车牌信息与所有的待跟踪目标点的车牌信息都不匹配时,则确定该识别出的车牌未新的待跟踪目标点。
而对于未在检测区域中出现的待跟踪目标点,通过预测轨道跟踪,确定该待跟踪目标点是否还在当前帧视频图像中,其中,当预测区域中出现的目标车牌与待跟踪目标点匹配时,确定该标车牌为待跟踪目标点,否则,待跟踪目标点未出现在该当前帧视频图像中,即未被跟踪上。
本发明实施例中,通过摄像头可获取多车道中的车辆画面信息,根据路口的情况及摄像头安装的位置,确定视频图像中的检测区域及跟踪区域,检测区域设置的原则为,普通车辆在正常的速度下在检测区域出现的帧数在10帧及以上,一般将视频图像下方1/4到1/3确定为检测区域;将从检测区域的上端到对面路口的斑马线之间的区域设置为跟踪区域,在跟踪区域内不对车辆进行定位及识别,只对车辆进行预测跟踪。这样,既保证车牌识别准确,车辆可以正确跟踪,并节省时间。
本发明实施例中,每个待跟踪目标点都已在前面的视频图像中出现了,即待跟踪目标点已在上一帧视频图像中出现了,或在上上一帧视频图像中出现了,因此,已存储了每个待跟踪目标点的跟踪列表信息,其中,跟踪列表信息包括:待跟踪目标点在每帧视频图像上的位置信息,车牌字符标识,以及每帧视频图像的帧号和存储位置信息。例如:当前视频帧图像为第110帧视频图像,一个待跟踪目标点已分别出现在第108、109帧视频图像,则该待跟踪目标点的跟踪列表信息包括:车牌字符标识:0012300,出现在第108帧视频图像上的位置坐标为(x1,y1),第108帧视频图像存储在存储单元8中,出现在第109帧视频图像上的位置坐标为(x2,y2),第109帧视频图像存储在存储单元9中。
存储了每个待跟踪目标点的跟踪列表信息后,对于检测区域内的车辆,采用车牌信息匹配进行跟踪,对于未出现在检测区域内的待跟踪目标点,还需确定该待跟踪目标点是否出现在跟踪区域,即还需采用预测轨迹进行跟踪。
下面结合说明书附图对本发明实施例作进一步详细描述。
参见图1,本发明实施例车辆跟踪的具体过程包括:
步骤101:从当前帧视频图像的检测区域内识别出的一个车牌,并将识别出的车牌确定为当前目标点。
通过摄像头获取了当前帧图像并存入图像缓存区后,通过车牌定位、字符分割、车牌识别可识别出该当前帧视频图像的检测区域内的一个车牌,并获得了该车牌的车牌信息,车牌信息包括:车牌字符标识,以及该车牌在当前帧视频图像上的位置信息。
将识别出的车牌确定为当前目标点,并获得了当前目标点的车牌信息。
步骤102:将当前目标点的车牌信息分别与每个待跟踪目标点的车牌信息进行匹配,即在所有的待跟踪目标点中查找是否有一个待跟踪目标点的车牌信息与当前目标点的车牌信息匹配,若有,执行步骤103,否则,执行步骤104
由于车牌信息包括:车牌字符标识,以及该车牌在当前帧视频图像上的位置信息。因此,这里可首先根据位置信息进行匹配,若匹配不成功后,再采用车牌字符标识进行匹配。或者,直接采用车牌字符标识进行匹配。
较佳地,先根据位置信息进行匹配,然后采用车牌字符标识进行匹配,这样,计算量小,匹配比较过程简单。其中,根据位置信息进行匹配具体包括:
从每个待跟踪目标点的跟踪列表信息中,获取每个待跟踪目标点在上一帧视频图像上的位置信息,然后,根据当前目标点在当前帧视频图像上的位置信息,以及每个待跟踪目标点在上一帧视频图像上的位置信息,确定当前目标点与每个待跟踪目标点的距离,并将当前目标点与每个待跟踪目标点的距离中的最小距离与第一阈值进行比较,若当前目标点与每个待跟踪目标点的距离中的最小距离小于第一阈值时,确定该当前目标点与最小距离对应的第一待跟踪目标点匹配,执行步骤103,否则,采用车牌字符标识进行匹配。
第一阈值是车牌在图像中的最大宽度乘于一个比率值,该比率值大于1,一般,最大宽度是蓝色车牌在图像最底部时的宽度。
本发明实施例中,采用车牌字符标识进行匹配,可直接当前目标点的车牌字符标识与每个待跟踪目标的车牌字符标识进行比对,当相同字符的个数大于设定个数时,确定当前目标点与待跟踪目标匹配,执行步骤103,否则,执行步骤104。
为进一步减少计算量,还可将当前目标点与每个待跟踪目标点的距离中的次小距离与第二阈值进行比较,当次小距离小于第二阈值,再将当前目标点的车牌字符标识与次小距离对应的第二待跟踪目标的车牌字符标识进行比对当相同字符的个数大于设定个数时,确定当前目标点与第二待跟踪目标点匹配,执行步骤103,其他情况都执行步骤104。即当当前目标点与每个待跟踪目标点的距离中的次小距离小于第二阈值,且当前目标点的车牌字符标识与次小距离对应的第二待跟踪目标的车牌字符标识中相同字符的个数大于设定个数时,确定当前目标点与第二待跟踪目标点匹配,执行步骤103,否则,执行步骤步骤104。其中,第二阈值大于第一阈值,也与车牌在图像中的最大宽度有关。
这样,只需比对一次,就可确定当前目标点是否与待跟踪目标点匹配,极大地节省了资源。
步骤103:将当前目标确定为车牌信息匹配的待跟踪目标点,并更新待跟踪目标点的跟踪列表信息。
在所有的待跟踪目标点中已查找到一个待跟踪目标点的车牌信息与当前目标点的车牌信息匹配,因此,将当前目标点确定为车牌信息匹配的待跟踪目标点,并更新待跟踪目标点的跟踪列表信息。即将该待跟踪目标点在当前帧视频图像上的位置信息,当前帧视频图像的帧号和存储位置信息添加到跟踪列表信息中。
仍以上述的当前视频帧图像为第110帧视频图像,一个待跟踪目标点已分别出现在第108、109帧视频图像上为例,当识别出的当前目标点为该待跟踪目标点时,这里,更新后的跟踪列表信息包括:车牌字符标识:0012300,出现在第108帧视频图像上的位置坐标为(x1,y1),第108帧视频图像存储在存储单元8中,出现在第109帧视频图像上的位置坐标为(x2,y2),第109帧视频图像存储在存储单元9中,出现在第110帧视频图像上的位置坐标为(x3,y3),第10帧视频图像存储在存储单元10中。
步骤104:将当前目标点确定为新的待跟踪目标点,并建立新的待跟踪目标点的跟踪列表信息。
由于在所有的待跟踪目标点中未查找到一个待跟踪目标点的车牌信息与当前目标点的车牌信息匹配,因此,将当前目标点确定为新的待跟踪目标点,并建立新的待跟踪目标点的跟踪列表信息。即该新的待跟踪目标点的跟踪列表信息包括:车牌字符标识,新的待跟踪目标点在当前帧视频图像上的位置信息,以及当帧视频图像的帧号和存储位置信息。
重复上述过程,可将从检测区域内识别出的每个车牌进行定位,并确定每个车牌为待跟踪目标点或为新的待跟踪目标点。若通过上述过程,对于每个待跟踪目标点,在当前帧视频图像的检测区域内都能确定一个目标点与其匹配,那么跟踪过程结束。若还有待跟踪目标点未出现在当前帧视频图像的检测区域内时,则该待跟踪目标点可能会出现跟踪区域,因此,在当前帧视频图像的检测区域内未检测到指定的一个待跟踪目标点时,还需进行后续的预测轨迹跟踪过程。例如:待跟踪目标点分别为车辆1、车辆2和车辆3。在当前帧视频图像的检测区域内出现了4个目标点,若通过上述跟踪过程,确定这4个目标点分别为车辆1、车辆2、车辆3和车辆4,此时,由于每个待跟踪目标点都已被跟踪上了,因此跟踪流程结束。若通过上述跟踪过程,确定这4个目标点分别为车辆1、车辆2、车辆4和车辆5。此时,由于车辆3未被跟踪上,车辆3可能会出现在跟踪区域,因此,还需进行后续的预测轨迹跟踪过程。
因此,本发明实施例中在当前帧视频图像的检测区域内未检测到指定的一个待跟踪目标点时,车辆跟踪过程还包括预测轨迹跟踪,参见图2,具体包括:
步骤201:从待跟踪目标点的跟踪列表信息中获取该待跟踪目标点在至少三帧视频图像中的位置信息。
从待跟踪目标点的跟踪列表信息中获取该待跟踪目标点在前面任意三帧,四帧或多帧视频图像中的位置信息,较佳地,获取该待跟踪目标点在前三帧视频图像中的位置信息,分别为A1(x1,y1),A2(x2,y2),A3(x3,y3)。
步骤202:根据获取的位置信息,确定当前帧视频图像中的预测区域。
已获取了待跟踪目标点在至少三帧视频图像中的位置信息,根据两点连成一条直线的原理,分别计算任意两点构成的直线的斜率和截距,然后获得平均斜率和截距,有了斜率和截距,即可根据根据y=ax+b的原理,计算该待跟踪目标点在当前帧视频图像中的的位置信息。最后以该位置信息为中心的设定区域为预测区域。预测区域的大小与车牌的大小有关。
例如:获取的位置信息分别为A1(x1,y1),A2(x2,y2),A3(x3,y3),分别计算直线A1A2的斜率tmpSlope1和截距tmpOffset1,直线A1A3的斜率tmpSlope2和截距tmpOffset2,直线A2A3的斜率tmpSlope3和截距tmpOffset3,然后求出平均斜率Slope和平均截距Offset,有了斜率和截距,可以根据y=Slope(x)+Offset,计算待跟踪目标在当前帧视频图像上可能出现的大致位置B(x,y)。将以B(x,y)为中心的设定区域确定为预测区域。
步骤203:对预测区域中的车牌进行模板匹配,获取模板匹配的最小均值。
将待跟踪目标的车牌图像作为模板,将模板的左上角点和预测区域的左上角点重合,将与模板大小一致的一块区域作为当前目标区域,将模板与当前目标区域中对应像素的的灰度值做差,获得绝对值,并将当前目标区域中所有像素对应的绝对值就和,获得当前目标区域的均值;然后,以左上角点的下一个像素为重合点,仍然进行上述模板匹配过程,直至遍历预测区域中每个像素,获得每个目标区域对应的均值,比较每个目标区域对应的均值,获得模板匹配的最小均值。
步骤204:将模板匹配的最小均值与第三阈值进行比较,当最小均值小于第三阈值时,执行步骤205,否则,执行步骤206。
步骤205:将最小均值对应的目标区域确定为待跟踪目标点,并更新该待跟踪目标点的跟踪列表信息。
对预测区域中的车牌进行模板匹配时,获得每个目标区域对应的均值,当最小均值小于第三阈值时,确定最小均值对应的目标区域为真目标,即该目标区域为待跟踪目标点,并更新该待跟踪目标点的跟踪列表信息。更新过程包括:将目标区域的位置信息c(x,y),以及当前帧视频图像的帧号和存储位置信息添加到跟踪列表信息中。
步骤206:在预测区域内进行粗定位,粗定位成功时,执行步骤207,否则,粗定位不成功,确定当前帧视频图像中未出现该待跟踪目标点。
获取预测区域的灰度图图像,并对灰度图像进行二值化处理,获得二值化图像,利用sobel算子提取二值化图像的边缘,并对整幅边缘二值化图进行逐行扫描,根据车牌垂直边缘的跳变的特点找到疑似的车牌所在的行,在特定的长度内,如果边缘跳变的个数达到一定值,则确定该特定长度为疑似车牌段,待所有行扫描结束后,再将疑似车牌段合并,并将临近行的且左右位置也比较接近的疑似车牌段合并,就会形成疑似的车牌扫描区域。如果这个疑似的车牌扫描区域的高度小于2倍车牌的高度,大于1/2倍车牌的高度,则确定粗定位成功,并将该疑似的车牌扫描区域确定为粗定位的车牌,否则,粗定位不成功,确定当前帧视频图像中未出现该待跟踪目标点。
步骤207:将粗定位的车牌确定为待跟踪目标点,并更新该待跟踪目标点的跟踪列表信息。
粗定位成功时,已将疑似的车牌扫描区域确定为粗定位的车牌,则获取该疑似的车牌扫描区域的位置信息,将该位置信息,以及当前帧视频图像的帧号和存储位置信息添加到跟踪列表信息中。
通过上述过程,可对未出现在当前帧视频图像的检测区域内的待跟踪目标点进行跟踪。当然在本发明另一实施例中,可不执行步骤206和207,即只进行模板匹配,而不进行粗定位。
本发明实施例中,通过摄像头可获取多车道中的车辆画面信息,将获取的当前帧视频图像存入图像缓存区中,在上述车辆跟踪完成后,可根据设定条件对车辆进行捕获。
这里,通过摄像头获取了当前帧图像后,采用循环存入的方式将其存入图像缓存区中,当确定一个待跟踪目标满足设定的捕获条件,则从该待跟踪目标的跟踪列表信息中查找到该待跟踪目标的最小视频图像帧号,并确定该最小视频图像帧号对应的存储位置信息,最后,根据该存储位置信息,从图像缓存区中提取对应的视频图像,并将提取的视频图像确定为捕获图像。
例如:图像缓存区分配了100个存储单元,每个单元存储一帧视频图像,每次摄像头获取一帧视频图像,就循环存入图像缓存区中,并在待跟踪目标的跟踪列表信息中包括存储位置信息。当一个待跟踪目标连续出现在10帧视频图像中,或该待跟踪目标连续出现违章情况时,在待跟踪目标的跟踪列表信息中查找到最小视频图像帧号,以及确定最小视频图像帧号对应的存储位置信。例如:最小视频图像帧号为103帧,存储位置信息为第3存储单元。则从第3存储单元中提取第103帧视频图像,并第103帧视频图像确定为捕获图像。
通过上述序列缓存式捕获算法,捕获车道都是刚出现在视野中的图像,车辆信息清晰,容易辨认。
根据上述车辆跟踪的过程,可以构建一种车辆跟踪的装置,参见图3,包括:识别单元100、匹配单元200和第一跟踪单元300,其中,
识别单元100,用于将从当前帧视频图像的检测区域内识别出的一个车牌确定为当前目标点。
匹配单元200,用于将当前目标点的车牌信息分别与每个待跟踪目标点的车牌信息进行匹配。
第一跟踪单元300,用于当当前目标点的车牌信息与一个待跟踪目标点的车牌信息匹配时,确定当前目标点为待跟踪目标点,并更新待跟踪目标点的跟踪列表信息;否则,确定当前目标点为新的待跟踪目标点,并建立新的待跟踪目标点的跟踪列表信息,其中,跟踪列表信息包括:待跟踪目标点在每帧视频图像上的位置信息,车牌字符标识,以及每帧视频图像的帧号和存储位置信息。
其中,匹配单元200,具体用于根据当前目标点在当前帧视频图像上的位置信息,以及每个待跟踪目标点在上一帧视频图像上的位置信息,确定当前目标点与每个待跟踪目标点的距离;当当前目标点与每个待跟踪目标点的距离中的最小距离小于第一阈值时,确定当前目标点与最小距离对应的第一待跟踪目标点匹配;否则,将当前目标点的字符标识信息与每个待跟踪目标点的字符标识信息进行匹配。
其中,匹配单元200将当前目标点的字符标识信息与每个待跟踪目标点的字符标识信息进行匹配过程可直接当前目标点的车牌字符标识与每个待跟踪目标的车牌字符标识进行比对,当相同字符的个数大于设定个数时,确定当前目标点与待跟踪目标匹配,否则确认不匹配。或者,该匹配单元200,还具体用于当当前目标点与每个待跟踪目标点的距离中的次小距离小于第二阈值,且当前目标点的车牌字符标识与次小距离对应的第二待跟踪目标的车牌字符标识中相同字符的个数大于设定个数时,确定当前目标点与第二待跟踪目标点匹配;否则,确定当前目标点为新的待跟踪目标点。
该车辆跟踪装置对于检测区域内的车辆,采用车牌信息匹配进行跟踪,对于未出现在检测区域内的待跟踪目标点,还需确定该待跟踪目标点是否出现在跟踪区域,即还需采用预测轨迹进行跟踪,因此,该车辆跟踪装置还包括第二跟踪单元。其中,
第二跟踪单元,用于在当前帧视频图像的检测区域内未检测到指定的一个待跟踪目标点时,从待跟踪目标点的跟踪列表信息中获取待跟踪目标点在至少三帧视频图像中的位置信息,根据至少三个位置信息,确定当前帧视频图像中的预测区域,对预测区域中的车牌进行模板匹配,获取模板匹配的最小均值,当最小均值小于第三阈值时,将所述最小均值对应的目标区域确定为待跟踪目标点,并更新待跟踪目标点的跟踪列表信息。
当最小均值大于或等于第三阈值时,可确定待跟踪目标点未被跟踪上,或者,第二跟踪单元进一步采用粗定位进行轨迹跟踪,因此,该第二跟踪单元,还用于当最小均值大于或等于第三阈值时,在预测区域内进行粗定位,当粗定位成功时,确定粗定位的车牌为待跟踪目标点,并更新待跟踪目标点的跟踪列表信息。
上述车辆跟踪完成后,还可根据设定条件对车辆进行捕获。因此,车辆跟踪装置还包括:捕获单元。
该捕获单元,用于当待跟踪目标满足设定的捕获条件时,从待跟踪目标的跟踪列表信息中查找到最小视频图像帧号,并确定最小视频图像帧号对应的存储位置信息;根据存储位置信息,从图像缓存区中提取对应的视频图像,并将提取的视频图像确定为捕获图像。
本发明实施例中,对于检测区域内的车辆,采用车牌信息匹配进行跟踪,对于未出现在检测区域内的待跟踪目标点,还需确定该待跟踪目标点是否出现在跟踪区域,即还需采用预测轨迹进行跟踪。这样,只需要较小的计算量就可以实现准确的车辆跟踪,从而,不需要大量的人员参与车辆跟踪过程中,提高了智能交通系统的效率。并且,准确的跟踪还有助于违章事件的判断。
另外,采用序列缓存捕获算法,捕获的车辆都是刚出现的视频图像,这样,车辆信息清洗,容易辨认。
显然,本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样,倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也意图包含这些改动和变型在内。

Claims (12)

1.一种车辆跟踪的方法,其特征在于,包括:
将从当前帧视频图像的检测区域内识别出的一个车牌确定为当前目标点;
将所述当前目标点的车牌信息分别与每个待跟踪目标点的车牌信息进行匹配;
当所述当前目标点的车牌信息与一个待跟踪目标点的车牌信息匹配时,确定所述当前目标点为所述待跟踪目标点,并更新所述待跟踪目标点的跟踪列表信息;否则,
确定所述当前目标点为新的待跟踪目标点,并建立所述新的待跟踪目标点的跟踪列表信息,其中,所述跟踪列表信息包括:所述待跟踪目标点在每帧视频图像上的位置信息,车牌字符标识,以及每帧视频图像的帧号和存储位置信息。
2.如权利要求1所述的方法,其特征在于,将所述当前目标点的车牌信息分别与每个待跟踪目标点的车牌信息进行匹配包括:
根据所述当前目标点在当前帧视频图像上的位置信息,以及每个待跟踪目标点在上一帧视频图像上的位置信息,确定所述当前目标点与每个待跟踪目标点的距离;
当所述当前目标点与每个待跟踪目标点的距离中的最小距离小于第一阈值时,确定所述当前目标点与所述最小距离对应的第一待跟踪目标点匹配;否则,将所述当前目标点的字符标识信息与每个待跟踪目标点的字符标识信息进行匹配。
3.如权利要求2所述的方法,其特征在于,将所述当前目标点的字符标识信息与每个待跟踪目标点的字符标识信进行匹配包括:
当所述当前目标点与每个待跟踪目标点的距离中的次小距离小于第二阈值,且所述当前目标点的车牌字符标识与所述次小距离对应的第二待跟踪目标的车牌字符标识中相同字符的个数大于设定个数时,确定所述当前目标点与所述第二待跟踪目标点匹配;否则,确定所述当前目标点为新的待跟踪目标点。
4.如权利要求1所述的方法,其特征在于,在当前帧视频图像的检测区域内未检测到指定的一个待跟踪目标点时,该方法还包括:
从所述待跟踪目标点的跟踪列表信息中获取所述待跟踪目标点在至少三帧视频图像中的位置信息;
根据所述至少三个位置信息,确定当前帧视频图像中的预测区域;
对所述预测区域中的车牌进行模板匹配,获取模板匹配的最小均值;
当所述最小均值小于第三阈值时,将所述最小均值对应的目标区域确定为所述待跟踪目标点,并更新所述待跟踪目标点的跟踪列表信息。
5.如权利要求4所述的方法,其特征在于,当所述最小均值大于或等于第三阈值时,还包括:
在所述预测区域内进行粗定位,当粗定位成功时,确定粗定位的车牌为所述待跟踪目标点,并更新所述待跟踪目标点的跟踪列表信息。
6.如权利要求1所述的方法,其特征在于,还包括:
当待跟踪目标满足设定的捕获条件时,从所述待跟踪目标的跟踪列表信息中查找到最小视频图像帧号,并确定最小视频图像帧号对应的存储位置信息;
根据所述存储位置信息,从图像缓存区中提取对应的视频图像,并将提取的视频图像确定为捕获图像。
7.一种车辆跟踪的装置,其特征在于,包括:
识别单元,用于将从当前帧视频图像的检测区域内识别出的一个车牌确定为当前目标点;
匹配单元,用于将所述当前目标点的车牌信息分别与每个待跟踪目标点的车牌信息进行匹配;
第一跟踪单元,用于当所述当前目标点的车牌信息与一个待跟踪目标点的车牌信息匹配时,确定所述当前目标点为所述待跟踪目标点,并更新所述待跟踪目标点的跟踪列表信息;否则,确定所述当前目标点为新的待跟踪目标点,并建立所述新的待跟踪目标点的跟踪列表信息,其中,所述跟踪列表信息包括:所述待跟踪目标点在每帧视频图像上的位置信息,车牌字符标识,以及每帧视频图像的帧号和存储位置信息。
8.如权利要求7所述的装置,其特征在于,
所述匹配单元,具体用于根据所述当前目标点在当前帧视频图像上的位置信息,以及每个待跟踪目标点在上一帧视频图像上的位置信息,确定所述当前目标点与每个待跟踪目标点的距离;当所述当前目标点与每个待跟踪目标点的距离中的最小距离小于第一阈值时,确定所述当前目标点与所述最小距离对应的第一待跟踪目标点匹配;否则,将所述当前目标点的字符标识信息与每个待跟踪目标点的字符标识信息进行匹配。
9.如权利要求8所述的装置,其特征在于,
所述匹配单元,还具体用于当所述当前目标点与每个待跟踪目标点的距离中的次小距离小于第二阈值,且所述当前目标点的车牌字符标识与所述次小距离对应的第二待跟踪目标的车牌字符标识中相同字符的个数大于设定个数时,确定所述当前目标点与所述第二待跟踪目标点匹配;否则,确定所述当前目标点为新的待跟踪目标点。
10.如权利要求7所述的装置,其特征在于,还包括:
第二跟踪单元,用于在当前帧视频图像的检测区域内未检测到指定的一个待跟踪目标点时,从所述待跟踪目标点的跟踪列表信息中获取所述待跟踪目标点在至少三帧视频图像中的位置信息,根据所述至少三个位置信息,确定当前帧视频图像中的预测区域,对所述预测区域中的车牌进行模板匹配,获取模板匹配的最小均值,当所述最小均值小于第三阈值时,将所述最小均值对应的目标区域确定为所述待跟踪目标点,并更新所述待跟踪目标点的跟踪列表信息。
11.如权利要求10所述的装置,其特征在于,
所述第二跟踪单元,还用于当所述最小均值大于或等于第三阈值时,在所述预测区域内进行粗定位,当粗定位成功时,确定粗定位的车牌为所述待跟踪目标点,并更新所述待跟踪目标点的跟踪列表信息。
12.如权利要求7所述的装置,其特征在于,还包括:
捕获单元,用于当待跟踪目标满足设定的捕获条件时,从所述待跟踪目标的跟踪列表信息中查找到最小视频图像帧号,并确定最小视频图像帧号对应的存储位置信息;根据所述存储位置信息,从图像缓存区中提取对应的视频图像,并将提取的视频图像确定为捕获图像。
CN201110302716.3A 2011-10-09 2011-10-09 一种车辆跟踪的方法及装置 Active CN102509457B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201110302716.3A CN102509457B (zh) 2011-10-09 2011-10-09 一种车辆跟踪的方法及装置
PCT/CN2011/081782 WO2013053159A1 (zh) 2011-10-09 2011-11-04 一种车辆跟踪的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110302716.3A CN102509457B (zh) 2011-10-09 2011-10-09 一种车辆跟踪的方法及装置

Publications (2)

Publication Number Publication Date
CN102509457A true CN102509457A (zh) 2012-06-20
CN102509457B CN102509457B (zh) 2014-03-26

Family

ID=46221533

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110302716.3A Active CN102509457B (zh) 2011-10-09 2011-10-09 一种车辆跟踪的方法及装置

Country Status (2)

Country Link
CN (1) CN102509457B (zh)
WO (1) WO2013053159A1 (zh)

Cited By (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103226812A (zh) * 2013-03-19 2013-07-31 苏州橙果信息科技有限公司 一种基于边缘二值图的纹理过滤方法
CN103606280A (zh) * 2013-11-14 2014-02-26 深圳市捷顺科技实业股份有限公司 一种信息识别方法、装置以及系统
CN103927508A (zh) * 2013-01-11 2014-07-16 浙江大华技术股份有限公司 一种目标车辆跟踪方法及装置
CN105632175A (zh) * 2016-01-08 2016-06-01 上海微锐智能科技有限公司 车辆行为分析方法及系统
CN105654733A (zh) * 2016-03-08 2016-06-08 博康智能网络科技股份有限公司 一种基于视频检测的前后车牌识别方法及装置
CN106652445A (zh) * 2016-11-15 2017-05-10 成都通甲优博科技有限责任公司 一种公路交通事故判别方法及装置
CN107529665A (zh) * 2017-07-06 2018-01-02 新华三技术有限公司 车辆追踪方法及装置
CN108347488A (zh) * 2018-02-13 2018-07-31 山东顺国电子科技有限公司 基于北斗电子地图的车辆管理方法、装置及服务器
CN108538062A (zh) * 2018-05-30 2018-09-14 杭州天铂红外光电技术有限公司 用于检测车辆拥堵的方法
CN108922175A (zh) * 2018-06-22 2018-11-30 安徽科力信息产业有限责任公司 记录多台机动车越实线违法行为的方法及装置
CN108986472A (zh) * 2017-05-31 2018-12-11 杭州海康威视数字技术股份有限公司 一种掉头车辆监控方法及装置
CN109063574A (zh) * 2018-07-05 2018-12-21 顺丰科技有限公司 一种基于深度神经网络检测的包络框的预测方法、系统及设备
CN109063740A (zh) * 2018-07-05 2018-12-21 高镜尧 超声影像关键目标的检测模型构建及检测方法、装置
CN109118519A (zh) * 2018-07-26 2019-01-01 北京纵目安驰智能科技有限公司 基于实例分割的目标Re-ID方法、系统、终端和存储介质
CN109426252A (zh) * 2017-08-29 2019-03-05 上海汽车集团股份有限公司 一种车辆跟踪方法及装置
CN109446926A (zh) * 2018-10-09 2019-03-08 深兰科技(上海)有限公司 一种交通监控方法及装置、电子设备和存储介质
CN109709953A (zh) * 2018-12-21 2019-05-03 北京智行者科技有限公司 道路清洁作业中的车辆跟随方法
CN109993081A (zh) * 2019-03-20 2019-07-09 浙江农林大学暨阳学院 一种基于道路视频及车牌检测的车流量统计方法
CN110021172A (zh) * 2019-05-06 2019-07-16 北京英泰智科技股份有限公司 一种车辆全要素特征采集方法和系统
CN110163908A (zh) * 2018-02-12 2019-08-23 北京宝沃汽车有限公司 找寻目标物的方法、装置及存储介质
CN110503662A (zh) * 2019-07-09 2019-11-26 科大讯飞(苏州)科技有限公司 跟踪方法及相关产品
CN110610118A (zh) * 2018-06-15 2019-12-24 杭州海康威视数字技术股份有限公司 交通参数采集方法及装置
CN110619254A (zh) * 2018-06-19 2019-12-27 海信集团有限公司 一种基于视差图的目标跟踪方法、装置及终端
CN111243281A (zh) * 2018-11-09 2020-06-05 杭州海康威视系统技术有限公司 一种道路多视频联合检测系统及检测方法
CN111784224A (zh) * 2020-03-26 2020-10-16 北京京东乾石科技有限公司 物体跟踪方法和装置、控制平台和存储介质
CN111932901A (zh) * 2019-05-13 2020-11-13 阿里巴巴集团控股有限公司 道路车辆跟踪检测设备、方法及存储介质
CN112686252A (zh) * 2020-12-28 2021-04-20 中国联合网络通信集团有限公司 一种车牌检测方法和装置
CN115331469A (zh) * 2022-08-15 2022-11-11 北京图盟科技有限公司 一种车辆轨迹在线还原方法、装置及设备

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105809974A (zh) * 2016-05-25 2016-07-27 成都联众智科技有限公司 车辆信息自动识别系统
CN106251633A (zh) * 2016-08-09 2016-12-21 成都联众智科技有限公司 车牌自动识别与跟踪系统
CN109117702B (zh) * 2018-06-12 2022-01-25 深圳中兴网信科技有限公司 目标车辆的检测与跟踪计数方法及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010010540A1 (en) * 2000-01-31 2001-08-02 Yazaki Corporation Environment monitoring apparatus for vehicle
CN1801181A (zh) * 2006-01-06 2006-07-12 华南理工大学 人脸与车牌自动识别机器人
CN101373517A (zh) * 2007-08-22 2009-02-25 北京万集科技有限责任公司 一种车牌识别方法及系统
CN102194132A (zh) * 2011-04-07 2011-09-21 国通道路交通管理工程技术研究中心有限公司 一种伴随车检测识别系统及其方法

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006059252A (ja) * 2004-08-23 2006-03-02 Denso Corp 動き検出方法及び装置,プログラム,車両用監視システム
CN100435160C (zh) * 2005-08-05 2008-11-19 同济大学 一种用于交通信息实时采集的视频图像处理方法及系统
WO2008088409A2 (en) * 2006-12-19 2008-07-24 Indiana University Research & Technology Corporation Real-time dynamic content based vehicle tracking, traffic monitoring, and classification system
CN101247479B (zh) * 2008-03-26 2010-07-07 北京中星微电子有限公司 一种基于图像中目标区域的自动曝光方法
CN101556697B (zh) * 2008-04-10 2012-07-25 上海宝康电子控制工程有限公司 一种基于快速特征点的运动目标跟踪方法与系统
CN101383003B (zh) * 2008-10-31 2010-09-15 江西赣粤高速公路股份有限公司 车辆号牌实时精确识别方法
US8285046B2 (en) * 2009-02-18 2012-10-09 Behavioral Recognition Systems, Inc. Adaptive update of background pixel thresholds using sudden illumination change detection
CN101727748B (zh) * 2009-11-30 2014-09-10 北京中星微电子有限公司 一种基于车辆尾灯检测的车辆监控方法、系统和设备
CN102074113B (zh) * 2010-09-17 2013-04-10 浙江大华技术股份有限公司 基于视频的牌照识别和车辆速度测量方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010010540A1 (en) * 2000-01-31 2001-08-02 Yazaki Corporation Environment monitoring apparatus for vehicle
JP2001216520A (ja) * 2000-01-31 2001-08-10 Yazaki Corp 車両用周辺監視装置
CN1801181A (zh) * 2006-01-06 2006-07-12 华南理工大学 人脸与车牌自动识别机器人
CN101373517A (zh) * 2007-08-22 2009-02-25 北京万集科技有限责任公司 一种车牌识别方法及系统
CN102194132A (zh) * 2011-04-07 2011-09-21 国通道路交通管理工程技术研究中心有限公司 一种伴随车检测识别系统及其方法

Cited By (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103927508A (zh) * 2013-01-11 2014-07-16 浙江大华技术股份有限公司 一种目标车辆跟踪方法及装置
CN103226812A (zh) * 2013-03-19 2013-07-31 苏州橙果信息科技有限公司 一种基于边缘二值图的纹理过滤方法
CN103606280A (zh) * 2013-11-14 2014-02-26 深圳市捷顺科技实业股份有限公司 一种信息识别方法、装置以及系统
CN105632175A (zh) * 2016-01-08 2016-06-01 上海微锐智能科技有限公司 车辆行为分析方法及系统
CN105654733A (zh) * 2016-03-08 2016-06-08 博康智能网络科技股份有限公司 一种基于视频检测的前后车牌识别方法及装置
CN106652445A (zh) * 2016-11-15 2017-05-10 成都通甲优博科技有限责任公司 一种公路交通事故判别方法及装置
CN106652445B (zh) * 2016-11-15 2019-08-23 成都通甲优博科技有限责任公司 一种公路交通事故判别方法及装置
CN108986472A (zh) * 2017-05-31 2018-12-11 杭州海康威视数字技术股份有限公司 一种掉头车辆监控方法及装置
CN108986472B (zh) * 2017-05-31 2020-10-30 杭州海康威视数字技术股份有限公司 一种掉头车辆监控方法及装置
CN107529665A (zh) * 2017-07-06 2018-01-02 新华三技术有限公司 车辆追踪方法及装置
CN109426252A (zh) * 2017-08-29 2019-03-05 上海汽车集团股份有限公司 一种车辆跟踪方法及装置
CN109426252B (zh) * 2017-08-29 2021-09-21 上海汽车集团股份有限公司 一种车辆跟踪方法及装置
CN110163908A (zh) * 2018-02-12 2019-08-23 北京宝沃汽车有限公司 找寻目标物的方法、装置及存储介质
CN108347488A (zh) * 2018-02-13 2018-07-31 山东顺国电子科技有限公司 基于北斗电子地图的车辆管理方法、装置及服务器
CN108538062A (zh) * 2018-05-30 2018-09-14 杭州天铂红外光电技术有限公司 用于检测车辆拥堵的方法
CN110610118A (zh) * 2018-06-15 2019-12-24 杭州海康威视数字技术股份有限公司 交通参数采集方法及装置
CN110619254B (zh) * 2018-06-19 2023-04-18 海信集团有限公司 一种基于视差图的目标跟踪方法、装置及终端
CN110619254A (zh) * 2018-06-19 2019-12-27 海信集团有限公司 一种基于视差图的目标跟踪方法、装置及终端
CN108922175A (zh) * 2018-06-22 2018-11-30 安徽科力信息产业有限责任公司 记录多台机动车越实线违法行为的方法及装置
CN109063740A (zh) * 2018-07-05 2018-12-21 高镜尧 超声影像关键目标的检测模型构建及检测方法、装置
CN109063574B (zh) * 2018-07-05 2021-04-23 顺丰科技有限公司 一种基于深度神经网络检测的包络框的预测方法、系统及设备
CN109063574A (zh) * 2018-07-05 2018-12-21 顺丰科技有限公司 一种基于深度神经网络检测的包络框的预测方法、系统及设备
CN109118519A (zh) * 2018-07-26 2019-01-01 北京纵目安驰智能科技有限公司 基于实例分割的目标Re-ID方法、系统、终端和存储介质
CN109446926A (zh) * 2018-10-09 2019-03-08 深兰科技(上海)有限公司 一种交通监控方法及装置、电子设备和存储介质
CN111243281A (zh) * 2018-11-09 2020-06-05 杭州海康威视系统技术有限公司 一种道路多视频联合检测系统及检测方法
CN109709953A (zh) * 2018-12-21 2019-05-03 北京智行者科技有限公司 道路清洁作业中的车辆跟随方法
CN109993081A (zh) * 2019-03-20 2019-07-09 浙江农林大学暨阳学院 一种基于道路视频及车牌检测的车流量统计方法
CN110021172A (zh) * 2019-05-06 2019-07-16 北京英泰智科技股份有限公司 一种车辆全要素特征采集方法和系统
CN111932901A (zh) * 2019-05-13 2020-11-13 阿里巴巴集团控股有限公司 道路车辆跟踪检测设备、方法及存储介质
CN110503662A (zh) * 2019-07-09 2019-11-26 科大讯飞(苏州)科技有限公司 跟踪方法及相关产品
CN111784224A (zh) * 2020-03-26 2020-10-16 北京京东乾石科技有限公司 物体跟踪方法和装置、控制平台和存储介质
CN111784224B (zh) * 2020-03-26 2024-08-20 北京京东乾石科技有限公司 物体跟踪方法和装置、控制平台和存储介质
CN112686252A (zh) * 2020-12-28 2021-04-20 中国联合网络通信集团有限公司 一种车牌检测方法和装置
CN115331469A (zh) * 2022-08-15 2022-11-11 北京图盟科技有限公司 一种车辆轨迹在线还原方法、装置及设备

Also Published As

Publication number Publication date
CN102509457B (zh) 2014-03-26
WO2013053159A1 (zh) 2013-04-18

Similar Documents

Publication Publication Date Title
CN102509457B (zh) 一种车辆跟踪的方法及装置
US10133941B2 (en) Method, apparatus and device for detecting lane boundary
US8184859B2 (en) Road marking recognition apparatus and method
TWI425454B (zh) 行車路徑重建方法、系統及電腦程式產品
Tae-Hyun et al. Detection of traffic lights for vision-based car navigation system
CN110298300B (zh) 一种检测车辆违章压线的方法
CN103605967A (zh) 一种基于图像识别的地铁防逃票系统及其工作方法
CN111783573B (zh) 一种远光灯检测方法、装置及设备
CN105303153A (zh) 一种车辆车牌识别方法及装置
CN107909012B (zh) 一种基于视差图的实时车辆跟踪检测方法与装置
KR101678004B1 (ko) 노드-링크 기반 카메라 네트워크 통합 감시 시스템 및 감시 방법
CN114283383B (zh) 一种智慧城市公路养护方法、计算机设备及介质
CN111008574A (zh) 一种基于形体识别技术的重点人员轨迹分析方法
CN112784724A (zh) 一种车辆变道检测方法、装置、设备及存储介质
CN113505638A (zh) 车流量的监测方法、监测装置及计算机可读存储介质
CN111079621A (zh) 检测对象的方法、装置、电子设备和存储介质
CN112115939A (zh) 车辆车牌的识别方法、装置
CN111368692B (zh) 信息融合方法及装置、停车位置定位方法及系统
Blumer et al. Cost-effective single-camera multi-car parking monitoring and vacancy detection towards real-world parking statistics and real-time reporting
CN110660225A (zh) 闯红灯行为检测方法、装置和设备
WO2024098992A1 (zh) 倒车检测方法及装置
CN116912517B (zh) 相机视野边界的检测方法及装置
CN116311166A (zh) 交通障碍物识别方法、装置及电子设备
CN114882709B (zh) 车辆拥堵检测方法、装置及计算机存储介质
JP2002008019A (ja) 軌道認識装置及び軌道認識装置を用いた鉄道車両

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant