CN105575125A - 一种车流视频侦测分析系统 - Google Patents

一种车流视频侦测分析系统 Download PDF

Info

Publication number
CN105575125A
CN105575125A CN201510939876.7A CN201510939876A CN105575125A CN 105575125 A CN105575125 A CN 105575125A CN 201510939876 A CN201510939876 A CN 201510939876A CN 105575125 A CN105575125 A CN 105575125A
Authority
CN
China
Prior art keywords
car
engine
vehicle
shape
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510939876.7A
Other languages
English (en)
Other versions
CN105575125B (zh
Inventor
张培忠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Weiqiao Electronic Science & Technology Co Ltd
Original Assignee
Shanghai Weiqiao Electronic Science & Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Weiqiao Electronic Science & Technology Co Ltd filed Critical Shanghai Weiqiao Electronic Science & Technology Co Ltd
Priority to CN201510939876.7A priority Critical patent/CN105575125B/zh
Publication of CN105575125A publication Critical patent/CN105575125A/zh
Application granted granted Critical
Publication of CN105575125B publication Critical patent/CN105575125B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/017Detecting movement of traffic to be counted or controlled identifying vehicles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • G06V20/584Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads of vehicle lights or traffic lights

Abstract

本发明公开了一种车流视频侦测分析系统,包括硬件设备、软件引擎和模板数据库,硬件设备包括计算机、视频输入设备、网络设备;软件引擎包括识别捕捉引擎、分帧引擎、投影引擎、3D轨迹跟踪引擎、比对识别引擎;模板数据库包括车辆模板、字符模板、色卡模板,车辆模板包括车头模板、车尾模板、车标模板、车形基础模板,系统通过前述软硬件,统计前述每辆车的数据,计算车的数量、车流密度、车流行进方向、车流平均速度。

Description

一种车流视频侦测分析系统
技术领域
本发明涉及一种计算机辅助车辆建模识别及分析系统,更具体的说,是一种车流视频侦测分析系统。
背景技术
随着现代社会的发展和生产效率的提高,道路交通工具使用得越来越频繁。城市智慧交通要求城市交通管理部门不仅需要了解实时的路况、车流情况、车辆违章情况,同时还需要对高峰段关键路口的车流量进行预测,以引导车流,防止拥堵。
本系统就是为了解决上述问题而设计开发。
发明内容
本发明是一种车流视频侦测分析系统,包括硬件设备、软件引擎和模板数据库,所述硬件设备包括计算机、视频输入设备、网络设备;所述软件引擎包括识别捕捉引擎、分帧引擎、投影引擎、3D轨迹跟踪引擎、比对识别引擎;所述模板数据库包括车辆模板、字符模板、色卡模板,所述车辆模板包括车头模板、车尾模板、车标模板、车形基础模板;
所述视频输入设备包括摄像机和硬盘录像机,摄像机进行视频实时输入,实时分析;硬盘录像机进行视频回放输入,事后分析;
所述识别捕捉引擎,通过车形基础模板结合车头模板、车尾模板,识别出车形,捕捉视频流中的车形图像帧;
所述分帧引擎,将视频流拆分成每帧图像,识别捕捉引擎和分帧引擎交替工作,将包含有人形图像信息的帧,每帧每帧的抽取出来;
所述投影引擎,将抽取出来的车形图像根据车形基础模板将其分解成X轴、Y轴、Z轴,分别对应车的宽度、车的厚度、车的高度,并将之投射到地面,通过坐标投影算法结合车形基础模板计算出车辆的X-Y轴的中心点,每个中心点即为一辆车,从而达到精确统计摄像机覆盖区域内的车的数量;
所述3D轨迹跟踪引擎,第一步根据布尔原理通过对每帧图像中的多个物体的交集、分割、差集、联集的指令运算,像素聚集会根据于曲面法线来决定哪部分要保留、哪部分要移除,实现架构对象预测,通过所述模板数据库中的车形基础模板,侦测到是车形的对象属性后,第二步把2D还原3D的车形基本模板的算法叠加上去,生成3D车形,并逐个对每个3D车形对象做ID标记,更容易实现目标精确跟踪,后者在前者的基础上做轨迹侦测运算,精度更高;第三步采用带帧间预测的运动补偿方法是最大程度补全当前帧的缺损和推算出前一帧的每个3D运动对象在当前帧的位置,第四步通过帧比较和矢量计算,可精确计算出目标车的移动方向、轨迹、速度;
所述比对识别引擎,可通过与车辆模板、字符模板、色卡模板进行比对,识别出车形、车型、车款、车系、车标、车牌、车颜色;
所述计算机通过统计前述每辆车的数据,计算车的数量、车流密度、车流行进方向、车流平均速度。
所述软件引擎采用坐标投影结合3D轨迹跟踪的方法,投影算法将车形投射到坐标系中,结合车形基础模板,计算出车形的X轴、Y轴、Z轴和车辆的中心点位置,中心点即代表一辆车,进行车的数量的精确统计;3D轨迹跟踪采用带帧间预测的运动补偿方法和布尔原理叠加2D还原3D的算法,并通过帧比较、矢量计算,可精确计算出车辆移动的方向、轨迹、行驶速度。
所述投影引擎,当多辆车互相遮挡时,按照未被遮挡部分形状,与车形基础模板进行局部投射比较,通过布尔运算,判断出为被遮挡的车,通过坐标投影法结合车形基础模板可推算出该车辆的中心点位置,由于视频是二维的,车辆之间可以互相遮挡,但多个互相遮挡的车辆的投影的中心点在投影平面上重叠的概率很小,从而可精确计算出遮挡的车的数量和位置。
所述车形模板包括车的头部、车的尾部、车标、车形基础模板的建模特征数据。
附图说明
图1是车形基础模板示图;
图2是车形捕捉示图;
图3是3D车形投影2D原理图;
图4是2D车形还原3D原理图;
图5是车辆识别示图,包括车形、车型、车款、车系、车标、车牌、车颜色的识别;
具体实施方式
下面结合说明书附图来说明具体实施方式:
本专利是一种车流视频侦测分析系统,该系统的一种实施方式如下:
1、车形判断:对比车形基础模板,如图1,对符合车形特征的物体进行
捕捉,如图2,将捕捉到的车形与车形基础模板进行对比识别,识别出每辆车的具体车形;
分帧引擎将视频流拆分成每帧图像,识别捕捉引擎和分帧引擎交替工作,把车形图像每帧每帧抽取出来;
2、位置坐标体系的投影算法:进行车流量精确统计;
投影引擎将抽取出来的每帧车形图像根据车形基础模板分解成X轴、Y轴、Z轴,分别对应车的宽度、车的厚度、车的高度,并将之投射到地面,坐标投影算法结合车形基础模板计算出X-Y轴的中心点,每个中心点代表一辆车,此方法称为立体投影法,如图3,是车的数量精确统计的一个关键点;
当多辆车互相遮挡时,按照未被遮挡部分形状,与车形基础模板进行局部投射比较,通过布尔运算,可判断出为被遮挡的车,根据坐标投影算法结合车形基础模板可推算出该车的中心点位置,由于视频是二维的,车辆之间可以互相遮挡,但多个互相遮挡的车辆的投影的中心点在投影平面上重叠的概率很小,从而可精确计算出遮挡的数量和位置,这是是车辆数量精确统计的另一个关键点。
3、3D轨迹跟踪算法:计算车辆驻留时间、移动方向、速度、轨迹;
根据布尔原理通过对抽取出来的每帧车形图像中的多个物体的交集、分割、差集、联集指令运算,像素聚集会根据于曲面法线来决定哪部分要保留、哪部分要移除,实现架构对象预测,侦测到是车形的对象属性后;把2D还原3D车形基础模板的算法叠加上去,如图4,并逐个对每个3D对象做ID标记,更容易实现目标对象的精确跟踪,后者在前者的基础上做轨迹侦测运算,精度更高;采用带帧间预测的运动补偿算法就是根据相邻帧的相关性,最大程度补全当前帧的缺损和推算出前一帧的每个3D运动对象在当前帧的位置;通过帧比较和矢量计算,可精确计算出目标车的驻留时间、移动方向、轨迹、速度;
4、实际应用:
本系统采用现有摄像机即可统计车流量、车辆驻留时间、车辆行进方向、行驶速度、行驶车道、车辆异常情况(如:逆向行驶、违停、违章变道、与交通信号灯联动可判断闯红灯);可以识别车辆的车形、车型、车款、车系、车标、车牌、车颜色,如图5;
通过视频采集、视频分析、产生数据、数据分析、联动控制(如:道口信号灯),实现智慧交通。

Claims (4)

1.一种车流视频侦测分析系统,包括硬件设备、软件引擎和模板数据库,所述硬件设备包括计算机、视频输入设备、网络设备;所述软件引擎包括识别捕捉引擎、分帧引擎、投影引擎、3D轨迹跟踪引擎、比对识别引擎;所述模板数据库包括车辆模板、字符模板、色卡模板,所述车辆模板包括车头模板、车尾模板、车标模板、车形基础模板,其特征在于:
所述视频输入设备包括摄像机和硬盘录像机,摄像机进行视频实时输入,实时分析;硬盘录像机进行视频回放输入,事后分析;
所述识别捕捉引擎,通过车形基础模板结合车头模板、车尾模板,识别出车形,捕捉视频流中的车形图像帧;
所述分帧引擎,将视频流拆分成每帧图像,识别捕捉引擎和分帧引擎交替工作,将包含有人形图像信息的帧,每帧每帧的抽取出来;
所述投影引擎,将抽取出来的车形图像根据车形基础模板将其分解成X轴、Y轴、Z轴,分别对应车的宽度、车的厚度、车的高度,并将之投射到地面,通过坐标投影算法结合车形基础模板计算出车辆的X-Y轴的中心点,每个中心点即为一辆车,从而达到精确统计摄像机覆盖区域内的车的数量;
所述3D轨迹跟踪引擎,第一步根据布尔原理通过对每帧图像中的多个物体的交集、分割、差集、联集的指令运算,像素聚集会根据于曲面法线来决定哪部分要保留、哪部分要移除,实现架构对象预测,通过所述模板数据库中的车形基础模板,侦测到是车形的对象属性后,第二步把2D还原3D的车形基本模板的算法叠加上去,生成3D车形,并逐个对每个3D车形对象做ID标记,更容易实现目标精确跟踪,后者在前者的基础上做轨迹侦测运算,精度更高;第三步采用带帧间预测的运动补偿方法是最大程度补全当前帧的缺损和推算出前一帧的每个3D运动对象在当前帧的位置,第四步通过帧比较和矢量计算,可精确计算出目标车的移动方向、轨迹、速度;
所述比对识别引擎,可通过与车辆模板、字符模板、色卡模板进行比对,识别出车形、车型、车款、车系、车标、车牌、车颜色;
所述计算机通过统计前述每辆车的数据,计算车的数量、车流密度、车流行进方向、车流平均速度。
2.根据权利要求1所述的车流视频侦测分析系统,其特征在于:所述软件引擎采用坐标投影结合3D轨迹跟踪的方法,投影算法将车形投射到坐标系中,结合车形基础模板,计算出车形的X轴、Y轴、Z轴和车辆的中心点位置,中心点即代表一辆车,进行车的数量的精确统计;3D轨迹跟踪采用带帧间预测的运动补偿方法和布尔原理叠加2D还原3D的算法,并通过帧比较、矢量计算,可精确计算出车辆的移动方向、轨迹、行驶速度。
3.根据权利要求1所述的车流视频侦测分析系统,其特征在于:所述投影引擎,当多辆车互相遮挡时,按照未被遮挡部分形状,与车形基础模板进行局部投射比较,通过布尔运算,判断出为被遮挡的车,通过坐标投影法结合车形基础模板可推算出该车辆的中心点位置,由于视频是二维的,车辆之间可以互相遮挡,但多个互相遮挡的车辆的投影的中心点在投影平面上重叠的概率很小,从而可精确计算出遮挡的车的数量和位置。
4.根据权利要求1所述的车流视频侦测分析系统,其特征在于:所述车辆模板包括车的头部、车的尾部、车标、车形基础的建模特征数据。
CN201510939876.7A 2015-12-15 2015-12-15 一种车流视频侦测分析系统 Active CN105575125B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510939876.7A CN105575125B (zh) 2015-12-15 2015-12-15 一种车流视频侦测分析系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510939876.7A CN105575125B (zh) 2015-12-15 2015-12-15 一种车流视频侦测分析系统

Publications (2)

Publication Number Publication Date
CN105575125A true CN105575125A (zh) 2016-05-11
CN105575125B CN105575125B (zh) 2018-05-29

Family

ID=55885200

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510939876.7A Active CN105575125B (zh) 2015-12-15 2015-12-15 一种车流视频侦测分析系统

Country Status (1)

Country Link
CN (1) CN105575125B (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109178040A (zh) * 2018-11-01 2019-01-11 同方威视技术股份有限公司 列车识别系统及其方法、列车安全检查系统及其方法
CN110362557A (zh) * 2019-05-27 2019-10-22 华南理工大学 一种基于机器学习和车牌识别数据的缺失路径修复方法
CN110556000A (zh) * 2018-06-04 2019-12-10 义硕智能股份有限公司 人工智慧交通检测系统
CN111145535A (zh) * 2019-11-28 2020-05-12 银江股份有限公司 一种复杂场景下的行程时间可靠性分布预测方法
CN111179608A (zh) * 2019-12-25 2020-05-19 广州方纬智慧大脑研究开发有限公司 一种路口溢出检测方法、系统及存储介质
CN111627131A (zh) * 2020-04-28 2020-09-04 南京理工大学 一种带有驾驶员辅助监控警示功能的行车记录装置及方法
CN111898434A (zh) * 2020-06-28 2020-11-06 江苏柏勋科技发展有限公司 一种视屏侦测分析系统
CN111918054A (zh) * 2020-06-29 2020-11-10 普瑞达建设有限公司 视屏侦测分析系统
TWI712012B (zh) * 2018-06-04 2020-12-01 義碩智能股份有限公司 人工智慧交通偵測系統
CN112530169A (zh) * 2020-10-29 2021-03-19 泰州市出彩网络科技有限公司 自适应潮汐车道变换系统
CN113283324A (zh) * 2021-05-14 2021-08-20 成都鸿钰网络科技有限公司 一种基于动态图像的森林防火预警方法及系统
CN115006822A (zh) * 2022-05-28 2022-09-06 广州市讯元智体科技有限公司 一种智能健身镜控制系统

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050271254A1 (en) * 2004-06-07 2005-12-08 Darrell Hougen Adaptive template object classification system with a template generator
JP2006018339A (ja) * 2004-06-30 2006-01-19 Hitachi Ltd ナンバープレート認識装置及び方法
CN102147971A (zh) * 2011-01-14 2011-08-10 赵秀江 基于视频图像处理技术的交通信息采集系统
KR101067102B1 (ko) * 2011-05-27 2011-09-26 아이리얼 주식회사 장애인 전용주차장 관리 시스템
CN202134105U (zh) * 2011-06-28 2012-02-01 长安大学 一种基于视频图像的道路车流量检测装置
CN103337175A (zh) * 2013-06-22 2013-10-02 太仓博天网络科技有限公司 一种基于实时视频流的车型识别系统
CN103366578A (zh) * 2013-06-27 2013-10-23 北京文通图像识别技术研究中心有限公司 一种基于图像的车辆检测方法
US20140072168A1 (en) * 2012-09-12 2014-03-13 Xerox Corporation Video-tracking for video-based speed enforcement

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050271254A1 (en) * 2004-06-07 2005-12-08 Darrell Hougen Adaptive template object classification system with a template generator
JP2006018339A (ja) * 2004-06-30 2006-01-19 Hitachi Ltd ナンバープレート認識装置及び方法
CN102147971A (zh) * 2011-01-14 2011-08-10 赵秀江 基于视频图像处理技术的交通信息采集系统
KR101067102B1 (ko) * 2011-05-27 2011-09-26 아이리얼 주식회사 장애인 전용주차장 관리 시스템
CN202134105U (zh) * 2011-06-28 2012-02-01 长安大学 一种基于视频图像的道路车流量检测装置
US20140072168A1 (en) * 2012-09-12 2014-03-13 Xerox Corporation Video-tracking for video-based speed enforcement
CN103337175A (zh) * 2013-06-22 2013-10-02 太仓博天网络科技有限公司 一种基于实时视频流的车型识别系统
CN103366578A (zh) * 2013-06-27 2013-10-23 北京文通图像识别技术研究中心有限公司 一种基于图像的车辆检测方法

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110556000A (zh) * 2018-06-04 2019-12-10 义硕智能股份有限公司 人工智慧交通检测系统
TWI712012B (zh) * 2018-06-04 2020-12-01 義碩智能股份有限公司 人工智慧交通偵測系統
CN109178040A (zh) * 2018-11-01 2019-01-11 同方威视技术股份有限公司 列车识别系统及其方法、列车安全检查系统及其方法
WO2020088197A1 (zh) * 2018-11-01 2020-05-07 同方威视技术股份有限公司 列车识别系统及其方法、列车安全检查系统及其方法
US11952027B2 (en) 2018-11-01 2024-04-09 Nuctech Company Limited Train identification system and method, and train safety inspection system and method
GB2593087B (en) * 2018-11-01 2023-04-05 Nutech Company Ltd Train identification system and method, and train safety inspection system and method
US20210354738A1 (en) * 2018-11-01 2021-11-18 Nuctech Company Limited Train identification system and method, and train safety inspection system and method
GB2593087A (en) * 2018-11-01 2021-09-15 Nutech Company Ltd Train identification system and method thereof, train safety inspection system and method thereof
CN110362557A (zh) * 2019-05-27 2019-10-22 华南理工大学 一种基于机器学习和车牌识别数据的缺失路径修复方法
CN110362557B (zh) * 2019-05-27 2022-04-26 华南理工大学 一种基于机器学习和车牌识别数据的缺失路径修复方法
CN111145535B (zh) * 2019-11-28 2020-12-15 银江股份有限公司 一种复杂场景下的行程时间可靠性分布预测方法
CN111145535A (zh) * 2019-11-28 2020-05-12 银江股份有限公司 一种复杂场景下的行程时间可靠性分布预测方法
CN111179608A (zh) * 2019-12-25 2020-05-19 广州方纬智慧大脑研究开发有限公司 一种路口溢出检测方法、系统及存储介质
CN111627131A (zh) * 2020-04-28 2020-09-04 南京理工大学 一种带有驾驶员辅助监控警示功能的行车记录装置及方法
CN111898434B (zh) * 2020-06-28 2021-03-19 江苏柏勋科技发展有限公司 一种视频侦测分析系统
CN111898434A (zh) * 2020-06-28 2020-11-06 江苏柏勋科技发展有限公司 一种视屏侦测分析系统
CN111918054B (zh) * 2020-06-29 2021-05-04 普瑞达建设有限公司 视屏侦测分析系统
CN111918054A (zh) * 2020-06-29 2020-11-10 普瑞达建设有限公司 视屏侦测分析系统
CN112530169A (zh) * 2020-10-29 2021-03-19 泰州市出彩网络科技有限公司 自适应潮汐车道变换系统
CN113283324A (zh) * 2021-05-14 2021-08-20 成都鸿钰网络科技有限公司 一种基于动态图像的森林防火预警方法及系统
CN113283324B (zh) * 2021-05-14 2022-03-25 成都鸿钰网络科技有限公司 一种基于动态图像的森林防火预警方法及系统
CN115006822A (zh) * 2022-05-28 2022-09-06 广州市讯元智体科技有限公司 一种智能健身镜控制系统

Also Published As

Publication number Publication date
CN105575125B (zh) 2018-05-29

Similar Documents

Publication Publication Date Title
CN105575125B (zh) 一种车流视频侦测分析系统
Liu et al. A vision-based pipeline for vehicle counting, speed estimation, and classification
CN103021186B (zh) 一种车辆监控的方法及系统
CN104537841B (zh) 无牌车辆违章检测方法及其检测系统
Zhangyu et al. A camera and LiDAR data fusion method for railway object detection
CN105513349B (zh) 基于双视角学习的山区高速公路车辆事件检测方法
CN105844222A (zh) 基于视觉的前方车辆碰撞预警系统及方法
CN102496281B (zh) 一种基于跟踪与虚拟线圈结合的车辆闯红灯检测方法
CN102810250A (zh) 基于视频的多车型交通信息检测方法
CN104050818A (zh) 基于目标跟踪和特征点匹配的运动车辆测速方法
CN105205785A (zh) 一种可定位的大型车辆运行管理系统及其运行方法
CN104506800A (zh) 一种多方向电警摄像机场景合成及综合监控方法和装置
CN104574993B (zh) 一种道路监控的方法及装置
EP2813973B1 (en) Method and system for processing video image
CN112241969A (zh) 基于交通监控视频的目标检测跟踪方法、装置及存储介质
CN104063882A (zh) 一种基于双目的车辆视频测速方法
JP2015064752A (ja) 車両監視装置、および車両監視方法
CN105574502A (zh) 一种自助发卡机违章行为自动检测方法
CN103794050A (zh) 一种实时的交通车辆检测与跟踪方法
Yu et al. Training-free monocular 3d event detection system for traffic surveillance
Wu et al. An efficient semi-automated scheme for infrastructure lidar annotation
Ha et al. IMPROVED VEHICLES DETECTION & CLASSIFICATION ALGORITHM FOR TRAFFIC SURVEILLANCE SYSTEM.
Guerrieri et al. Traffic flow variables estimation: An automated procedure based on moving observer method. potential application for autonomous vehicles
CN112115810A (zh) 基于信息融合的目标识别方法、系统、计算机设备和存储介质
CN105069407B (zh) 一种基于视频的交通流量获取方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant