CN104537833A - 一种交通异常检测方法及系统 - Google Patents

一种交通异常检测方法及系统 Download PDF

Info

Publication number
CN104537833A
CN104537833A CN201410799626.3A CN201410799626A CN104537833A CN 104537833 A CN104537833 A CN 104537833A CN 201410799626 A CN201410799626 A CN 201410799626A CN 104537833 A CN104537833 A CN 104537833A
Authority
CN
China
Prior art keywords
video
video block
sequence
sigma
shots
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410799626.3A
Other languages
English (en)
Other versions
CN104537833B (zh
Inventor
李岩山
谢维信
张春宇
黄庆华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Xinghai IoT Technology Co Ltd
Original Assignee
Shenzhen University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen University filed Critical Shenzhen University
Priority to CN201410799626.3A priority Critical patent/CN104537833B/zh
Publication of CN104537833A publication Critical patent/CN104537833A/zh
Application granted granted Critical
Publication of CN104537833B publication Critical patent/CN104537833B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • G08G1/0125Traffic data processing
    • G08G1/0133Traffic data processing for classifying traffic situation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/50Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/56Extraction of image or video features relating to colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Image Analysis (AREA)

Abstract

本发明属于智能交通监控领域,提供了一种交通异常检测方法及系统。该方法及系统是将正常交通视频图像序列分为视频块序列,检测视频块序列中的镜头数量,建立视频块序列中的镜头数量的高斯模型,利用高斯模型对测试交通视频图像进行异常检测。相对于现有人工分析方式,实现了监测的智能化,实时性强并节约了人力成本。同时,分块分镜头技术使得检测速度更快,特别适合应用在处理数据量大、场景复杂且变化快的交通视频监控领域中,可快速准确的定位事故现场。

Description

一种交通异常检测方法及系统
技术领域
本发明属于智能交通监控领域,尤其涉及一种交通异常检测方法及系统。
背景技术
近年来,随着机动车保有量快速增长,交通问题越加凸显。为了更有效的实施交通管理,现有技术提出了智能交通监控系统。该系统的工作方式主要有两种:一种是录制现场视频数据,以用于事后取证;另一种是采集现场视频数据,之后将采集的视频数据传输到监控中心,由监控中心的工作人员面对视频墙上的大量屏幕进行人工监控和分析,以期找出交通异常。
前一种工作方式不具有实时性,主要用于交通事故取证方面,无法实时监测到交通异常的发生。后一种工作方式虽可实现对交通异常的实时监控,但有限的人力无法有效管理分析成千上万的摄像头的视频,实时性较差,人力成本高,使得系统原有的预防和积极干预能力丧失,逐渐成为了一种事后取证录像的工具,更有甚者,大量的视频无人监视,在规定期限无人查询就会被自动删除。
发明内容
本发明的目的在于提供一种交通异常检测方法,旨在解决现有的智能交通监控系统采用人工方式对采集到的视频数据进行监控和分析以找出交通异常,实时性差且人力成本高的问题。
本发明是这样实现的,一种交通异常检测方法,所述方法包括以下步骤:
对正常交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第一视频块序列,之后将每一个所述第一视频块序列分为多个镜头,统计每一个所述第一视频块序列在第一设定时间周期内的镜头数量,并用统计得到的所述镜头数量训练高斯模型;
对测试交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第二视频块序列,之后将每一个所述第二视频块序列分为多个镜头,统计每一个所述第二视频块序列在第二设定时间周期内的镜头数量,所述第二设定时间周期与所述第一设定时间周期相等;
根据所述第二视频块序列在所述第二设定时间周期内的镜头数量,利用对应的所述高斯模型,完成所述第二视频块的交通异常检测。
本发明的另一目的在于提供一种交通异常检测系统,所述系统包括:
建模模块,用于对正常交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第一视频块序列,之后将每一个所述第一视频块序列分为多个镜头,统计每一个所述第一视频块序列在第一设定时间周期内的镜头数量,并用统计得到的镜头数量训练高斯模型;
测试交通视频图像处理模块,用于对测试交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第二视频块序列,之后将每一个所述第二视频块序列分为多个镜头,统计每一个所述第二视频块序列在第二设定时间周期内的镜头数量,所述第二设定时间周期与所述第一设定时间周期相等;
交通异常检测模块,用于根据所述第二视频块序列在所述第二设定时间周期内的镜头数量,利用对应的所述高斯模型,完成所述第二视频块的交通异常检测。
本发明提出的交通异常检测方法及系统是将正常交通视频图像序列分为视频块序列,检测视频块序列中的镜头数量,建立视频块序列中的镜头数量的高斯模型,利用高斯模型对测试交通视频图像进行异常检测。相对于现有人工分析方式,实现了监测的智能化,实时性强并节约了人力成本。同时,分块分镜头技术使得检测速度更快,特别适合应用在处理数据量大、场景复杂且变化快的交通视频监控领域中,可快速准确的定位事故现场。
附图说明
图1是本发明第一实施例提供的交通异常检测方法的流程图;
图2是本发明第一实施例中,训练高斯模型的步骤的详细流程图;
图3是本发明第一实施例中,将每一个第一视频块序列分为多个镜头的步骤的详细流程图;
图4是本发明第二实施例提供的交通异常检测方法的流程图;
图5是本发明第三实施例提供的交通异常检测系统的原理框图;
图6是本发明第三实施例中,建模模块的原理框图;
图7是本发明第三实施例中,分镜头子模块的原理框图;
图8是本发明第四实施例提供的交通异常检测系统的原理框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明提出的交通异常检测方法是将正常交通视频图像序列分为视频块序列,检测视频块序列中的镜头数量,建立视频块序列中的镜头数量的高斯模型,利用高斯模型对测试交通视频图像进行异常检测。
图1示出了本发明第一实施例提供的交通异常检测方法的流程,包括以下步骤:
S1:对正常交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第一视频块序列,之后将每一个第一视频块序列分为多个镜头,统计每一个第一视频块序列在第一设定时间周期内的镜头数量,并用统计得到的镜头数量训练高斯模型。
进一步地,如图2所示,步骤S1又包括:
步骤S11:对正常交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第一视频块序列。
即是说,第一视频块序列包括多个视频块,不同的视频块来自于不同的视频帧的对应区域,这样,便将正常交通视频图像序列分为了多个第一视频块序列。例如,假设包括n个帧视频的正常交通视频图像序列V={f1,f2,…,fn},其中,ft∈V,t=1,2,...n。对于视频帧ft,可在空间域分成r×c块,表示为:
其中,bi,j,t表示视频帧ft分块后的第i行、第j列的视频块,则全部视频帧分块后的第i行、第j列的视频块构成的第一视频块序列表示为:
bi,j={bi,j,1,bi,j,2,…,bi,j,n}
步骤S12:将每一个第一视频块序列分为多个镜头。
优选地,本发明第一实施例采用自动阈值选择的镜头检测算法,对第一视频块序列分镜头,此时,如图3所示,步骤S12更进一步包括:
步骤S1201:计算当前的第一视频块序列中、相邻视频块之间的帧间颜色直方图差异值,得到第一视频块序列对应的帧间颜色直方图差异集。
假设视频帧ft分块后的第i行、第j列的视频块bi,j,t的颜色直方图为H(bi,j,t),则有:H(bi,j,t)=(h1(bi,j,t),h2(bi,j,t),L,hN(bi,j,t)),其中,hk(bi,j,t),k=0,1,L N为视频块bi,j,t中亮度为k的像素数目,N为颜色亮度等级,则相邻视频块bi,j,t与bi,j,t+1之间的帧间颜色直方图差异值Di,j,t定义为:
D i , j , t = 1 - I ( H ( b i , j , t ) , H ( b i , j , t + 1 ) ) = 1 - Σ k = 1 c min ( h k ( b i , j , t ) , h k ( b i , j , t + 1 ) ) Σ k = 1 c max ( h k ( b i , j , t ) , h k ( b i , j , t + 1 ) )
其中,I(H(bi,j,t),H(bi,j,t+1))为视频块bi,j,t和bi,j,t+1的颜色直方图交集。之后得到的由视频帧分块后的第i行、第j列的视频块构成的第一视频块序列对应的帧间颜色直方图差异集Di,j为:Di,j={Di,j,1,Di,j,2,L,Di,j,n-1}。
实际中,一般采用一时域上滑动窗口w来检测镜头,若滑动窗口w的大小为m,即是说,每一次可以计算第一视频块序列中m个视频块的颜色直方图,继而得到m-1个帧间颜色直方图差异值,此时一次检测得到的帧间颜色直方图差异集Di,j为:Di,j={Di,j,1,Di,j,2,L,Di,j,,m-1}。
步骤S1202:计算高阈值和低阈值,高阈值和低阈值用以在之后分镜头过程中检测镜头的边界。
本发明第一实施例中,高阈值Th可以表示为:Th=μ+αhσ,低阈值Tl可以表示为Tl=μ+αlσ。其中,σ是帧间颜色直方图差异集中的元素的标准差,μ是帧间颜色直方图差异集中的元素的均值,αh和αl是变量系数,且根据经验选择αh为6,αl为1。
步骤S1203:判断帧间颜色直方图差异值是否大于高阈值,是则认为检测到突变镜头而执行步骤S1204,否则需要进一步检测渐变镜头而执行步骤S1205。
步骤S1204:识别相邻视频块中的前一视频块属于前一镜头的结束帧,相邻视频块中的后一视频块属于下一镜头的起始帧。
例如,若相邻视频块bi,j,t与bi,j,t+1之间的帧间颜色直方图差异值Di,j,t大于高阈值Th,则认为找到一个新镜头,bi,j,t为前一镜头的结束帧,bi,j,t+1为下一镜头的起始帧。
步骤S1205:判断帧间颜色直方图差异值是否大于低阈值,是则认为检测到潜在渐变镜头的起始帧而执行步骤S1207,否则执行步骤S1206。
步骤S1206:计算下一个第一视频块序列中、相邻视频块之间的帧间颜色直方图差异值。
步骤S1207:识别相邻视频块中的后一视频块属于下一镜头起始帧。
步骤S1208:计算相邻视频块中的后一视频块及其之后的某个视频块的累积直方图差异。
本发明第一实施例中,相邻视频块中的后一视频块bi,j,t+1及其之后的第g-1个视频块bi,j,t+g的累积直方图差异Ai,j(t,t+g)满足:
步骤S1209:判断某个视频块与其之后相邻视频块之间的帧间颜色直方图差异值是否小于低阈值,且累积直方图差异大于高阈值,是则执行步骤S1210,否则返回步骤S1206。
本发明第一实施例中,相邻视频块中的后一视频块之后的视频块之间的帧间颜色直方图差异值均应大于或等于低阈值Tl,若相邻视频块中的后一视频块bi,j,t+1之后的第g-1个视频块bi,j,t+g的帧间颜色直方图差异值Di,j,t+g小于低阈值Tl,并且视频块bi,j,t+1到视频块bi,j,t+g的累积直方图差异Ai,j(t,t+g)大于高阈值Th,则说明视频块bi,j,t+g为渐变镜头的结束帧而执行步骤S1210。
步骤S1210:识别某个视频块属于下一镜头结束帧。
步骤S13:统计每一个第一视频块序列在第一设定时间周期内的镜头数量,并用统计得到的镜头数量训练高斯模型。
对于第一视频块序列bi,j,其镜头数量的集合Xi,j表示为Xi,j={xi,j,1,xi,j,2,…,xi,j,z},xi,j,k为在第一设定时间周期Tk内的镜头数量,则镜头数量xi,j,k的高斯模型表示为:
f ( x ) = 1 2 π σ i , j exp ( - ( x - u i , j ) 2 2 σ i , j 2 )
其中,μi,j是期望值,σi,j是方差,x∈Xi,j。期望值μi,j和方差σi,j可运用最大似然估计方法估计出,具体的似然函数为:
L ( μ i , j , σ i , j ; x i , j , 1 , x i , j , 2 , . . . , x i , j , z ) = ( 2 πσ i , j 2 ) - z / 2 exp ( - 1 2 σ i , j 2 Σ k = 1 z ( x i , j , k - μ i , j ) 2 )
取对数变换后的似然函数为:
l ( μ i , j , σ i , j ; x i , j , 1 , x i , j , 2 , . . . , x i , j , z ) = - z 2 ( ln ( 2 π ) + ln ( σ i , j 2 ) ) - 1 2 σ i , j 2 Σ k = 1 z ( x i , j , k - μ i , j ) 2
由上式便可得出期望值μi,j和方差σi,j的最大似然估计值。
S2:对测试交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第二视频块序列,之后将每一个第二视频块序列分为多个镜头,统计每一个第二视频块序列在第二设定时间周期内的镜头数量,第二设定时间周期与第一设定时间周期相等。
其中,对测试交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第二视频块序列,之后将每一个第二视频块序列分为多个镜头的过程与骤S11和步骤S12的执行过程类似,不赘述。
S3:根据第二视频块序列在第二设定时间周期内的镜头数量,利用对应的高斯模型,完成第二视频块的交通异常检测。
假设测试交通视频图像序列为Vtest,第二设定时间周期为T',测试交通视频图像序列的全部视频帧分块后的第i行、第j列的视频块构成的第二视频块序列为b′i,j,第二视频块序列b′i,j在第二设定时间周期T'内的镜头数量为x′i,j,则步骤S3可表示为:
S i , j = 0 , | x i , j &prime; - &mu; i , j | < 3 &sigma; i , j 1 , | x i , j &prime; - &mu; i , j | &GreaterEqual; 3 &sigma; i , j
其中,Si,j是在第二设定时间周期T'时,第二视频块b′i,j的状态,且当Si,j为0时,表示第二视频块的交通正常,当Si,j为1时,表示第二视频块的交通异常。
图4示出了本发明第二实施例提供的交通异常检测方法的流程。
在第二实施例中,为了体现测试交通视频图像的异常,而非仅仅体现某一视频块序列的异常,在通过步骤S3检测出交通异常后,有必要融合各视频块的检测结果。因此,与第一实施例不同的是,在步骤S3之后,还包括以下步骤:
S4:对测试交通视频图像序列的各个第二视频块序列的检测结果进行融合,得到对测试交通视频图像的最终检测结果。该步骤S4可表示为:
SF = 0 , &Sigma; i = 1 r &Sigma; j = 1 c S i , j < &epsiv; 1 , &Sigma; i = 1 r &Sigma; j = 1 c S i , j &GreaterEqual; &epsiv;
其中,SF是测试交通视频图像序列的最终检测结果,ε是检测结果的阈值,r是测试交通视频图像序列中每一视频帧包含的块的行数,c是测试交通视频图像序列中每一视频帧包含的块的列数。当SF为0时,表示测试交通视频图像的交通正常,当SF为1时,表示测试交通视频图像的交通异常。
图5示出了本发明第三实施例提供的交通异常检测系统的原理。
具体地,本发明第三实施例提供的交通异常检测系统包括:建模模块1,用于对正常交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第一视频块序列,之后将每一个第一视频块序列分为多个镜头,统计每一个第一视频块序列在第一设定时间周期内的镜头数量,并用统计得到的镜头数量训练高斯模型;测试交通视频图像处理模块2,用于对测试交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第二视频块序列,之后将每一个第二视频块序列分为多个镜头,统计每一个第二视频块序列在第二设定时间周期内的镜头数量,第二设定时间周期与第一设定时间周期相等;交通异常检测模块3,用于根据第二视频块序列在第二设定时间周期内的镜头数量,利用对应的高斯模型,完成第二视频块的交通异常检测。
进一步地,如图6所示,建模模块1可包括:分块子模块11,用于对正常交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第一视频块序列;分镜头子模块12,用于将每一个第一视频块序列分为多个镜头;建模子模块13,用于统计每一个第一视频块序列在第一设定时间周期内的镜头数量,并用统计得到的镜头数量训练高斯模型。
更进一步地,如图7所示,分镜头子模块12可包括:第一计算子模块1201,用于计算当前的第一视频块序列中、相邻视频块之间的帧间颜色直方图差异值,得到第一视频块序列对应的帧间颜色直方图差异集,具体过程如前所述,不赘述;第二计算子模块1202,用于计算高阈值和低阈值,具体过程如前所述,不赘述;第一判断子模块1203,用于判断帧间颜色直方图差异值是否大于高阈值;第一识别子模块1204,用于当第一判断子模块1203判断帧间颜色直方图差异值大于高阈值时,识别相邻视频块中的前一视频块属于前一镜头的结束帧,相邻视频块中的后一视频块属于下一镜头的起始帧;第二判断子模块1205,用于当第一判断子模块1203判断帧间颜色直方图差异值不大于高阈值时,判断帧间颜色直方图差异值是否大于低阈值;第二识别子模块1206,用于当第二判断子模块1205判断帧间颜色直方图差异值大于低阈值时,识别相邻视频块中的后一视频块属于下一镜头起始帧;第三计算子模块1207,用于在第二识别子模块1206执行完毕后,计算相邻视频块中的后一视频块及其之后的某个视频块的累积直方图差异,具体过程如前所述,不赘述;第三判断子模块1208,用于判断某个视频块与其之后相邻视频块之间的帧间颜色直方图差异值是否小于低阈值,且累积直方图差异大于高阈值;第三识别子模块1209,用于当第三判断子模块1208判断某个视频块与其之后相邻视频块之间的帧间颜色直方图差异值小于低阈值,且累积直方图差异大于高阈值时,识别某个视频块属于下一镜头结束帧。
本发明第三实施例中,分块子模块11、建模子模块13、测试交通视频图像处理模块2以及交通异常检测模块3的执行过程如前所述,不赘述。
图8示出了本发明第四实施例提供的交通异常检测系统的原理。
与第三实施例不同的是,此时,系统还包括:融合模块4,用于对交通异常检测模块3得到的、测试交通视频图像序列的各个第二视频块序列的检测结果进行融合,得到对测试交通视频图像的最终检测结果。融合模块4的具体执行过程如前所述,不赘述。
综上所述,本发明提出的交通异常检测方法及系统是将正常交通视频图像序列分为视频块序列,检测视频块序列中的镜头数量,建立视频块序列中的镜头数量的高斯模型,利用高斯模型对测试交通视频图像进行异常检测。相对于现有人工分析方式,实现了监测的智能化,实时性强并节约了人力成本。同时,分块分镜头技术使得检测速度更快,特别适合应用在处理数据量大、场景复杂且变化快的交通视频监控领域中,可快速准确的定位事故现场。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来控制相关的硬件完成,所述的程序可以在存储于一计算机可读取存储介质中,所述的存储介质,如ROM/RAM、磁盘、光盘等。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种交通异常检测方法,其特征在于,所述方法包括以下步骤:
对正常交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第一视频块序列,之后将每一个所述第一视频块序列分为多个镜头,统计每一个所述第一视频块序列在第一设定时间周期内的镜头数量,并用统计得到的所述镜头数量训练高斯模型;
对测试交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第二视频块序列,之后将每一个所述第二视频块序列分为多个镜头,统计每一个所述第二视频块序列在第二设定时间周期内的镜头数量,所述第二设定时间周期与所述第一设定时间周期相等;
根据所述第二视频块序列在所述第二设定时间周期内的镜头数量,利用对应的所述高斯模型,完成所述第二视频块的交通异常检测。
2.如权利要求1所述的交通异常检测方法,其特征在于,所述将每一个所述第一视频块序列分为多个镜头的步骤包括以下步骤:
计算当前的第一视频块序列中、相邻视频块之间的帧间颜色直方图差异值,得到所述第一视频块序列对应的帧间颜色直方图差异集;
计算高阈值和低阈值;
判断所述帧间颜色直方图差异值是否大于所述高阈值;
当判断所述帧间颜色直方图差异值大于所述高阈值时,识别所述相邻视频块中的前一视频块属于前一镜头的结束帧,所述相邻视频块中的后一视频块属于下一镜头的起始帧;
当判断所述帧间颜色直方图差异值不大于所述高阈值时,判断所述帧间颜色直方图差异值是否大于所述低阈值;
当判断所述帧间颜色直方图差异值大于所述低阈值时,识别所述相邻视频块中的后一视频块属于下一镜头起始帧;
计算所述相邻视频块中的后一视频块及其之后的某个视频块的累积直方图差异;
判断所述某个视频块与其之后相邻视频块之间的帧间颜色直方图差异值是否小于所述低阈值,且所述累积直方图差异大于所述高阈值;
当判断所述某个视频块与其之后相邻视频块之间的帧间颜色直方图差异值小于所述低阈值,且所述累积直方图差异大于所述高阈值时,识别所述某个视频块属于下一镜头结束帧。
3.如权利要求2所述的交通异常检测方法,其特征在于,所述计算当前的第一视频块序列中、相邻视频块之间的帧间颜色直方图差异值的步骤表示为:
D i , j , t = 1 - I ( H ( b i , j , t ) , H ( b i , j , t + 1 ) ) = 1 - &Sigma; k = 1 c min ( h k ( b i , j , t ) , h k ( b i , j , t + 1 ) ) &Sigma; k = 1 c max ( h k ( b i , j , t ) , h k ( b i , j , t + 1 ) )
其中,Di,j,t为视频帧ft分块后的第i行、第j列的视频块bi,j,t及其相邻的视频块bi,j,t+1之间的帧间颜色直方图差异值,I(H(bi,j,t),H(bi,j,t+1))为视频块bi,j,t和视频块bi,j,t+1的颜色直方图交集,H(bi,j,t)为视频块bi,j,t的颜色直方图且有H(bi,j,t)=(h1(bi,j,t),h2(bi,j,t),L,hN(bi,j,t)),hk(bi,j,t),k=0,1,L N为视频块bi,j,t中亮度为k的像素数目,N为颜色亮度等级。
4.如权利要求2所述的交通异常检测方法,其特征在于,所述高阈值Th表示为:Th=μ+αhσ,所述低阈值Tl表示为:Tl=μ+αlσ;
其中,σ是帧间颜色直方图差异集中的元素的标准差,μ是帧间颜色直方图差异集中的元素的均值,αh和αl是变量系数,且αh为6,αl为1。
5.如权利要求2所述的交通异常检测方法,其特征在于,所述计算相邻视频块中的后一视频块及其之后的某个视频块的累积直方图差异的步骤表示为:
A i , j ( t , t + g ) = &Sigma; k = t + 1 t + g D i , j , k
其中,Ai,j(t,t+g)为相邻视频块中的后一视频块bi,j,t+1及其之后的第g-1个视频块bi,j,t+g的累积直方图差异,Di,j,k为视频帧fk分块后的第i行、第j列的视频块及其相邻的视频块之间的帧间颜色直方图差异值。
6.如权利要求1所述的交通异常检测方法,其特征在于,若第一视频块序列bi,j,所述第一视频块序列bi,j的镜头数量的集合Xi,j为Xi,j={xi,j,1,xi,j,2,…,xi,j,z},xi,j,k为在所述第一设定时间周期Tk内的镜头数量,则所述镜头数量xi,j,k的高斯模型表示为:
f ( x ) = 1 2 &pi; &sigma; i , j exp ( - ( x - u i , j ) 2 2 &sigma; i , j 2 )
其中,μi,j是期望值,σi,j是方差,x∈Xi,j,所述值μi,j和方差σi,j的最大似然估计值由公式 l ( &mu; i , j , &sigma; i , j ; x i , j , 1 , x i , j , 2 , . . . , x i , j , z ) = - z 2 ( 1 n ( 2 &pi; ) + 1 n ( &sigma; i , j 2 ) ) - 1 2 &sigma; i , j 2 &Sigma; k = 1 z ( x i , j , k - &mu; i , j ) 2 估算出。
7.如权利要求6所述的交通异常检测方法,其特征在于,所述根据所述第二视频块序列在所述第二设定时间周期内的镜头数量,利用对应的所述高斯模型,完成所述第二视频块的交通异常检测的步骤表示为:
S i , j = 0 , | x i , j &prime; - &mu; i , j | < 3 &sigma; i , j 1 , | x i , j &prime; - &mu; i , j | &GreaterEqual; 3 &sigma; i , j
其中,x′i,j是第二视频块序列b′i,j在第二设定时间周期内的镜头数量,Si,j是在第二设定时间周期时,第二视频块b′i,j的状态,且当Si,j为0时,表示第二视频块的交通正常,当Si,j为1时,表示第二视频块的交通异常。
8.如权利要求7所述的交通异常检测方法,其特征在于,在所述根据所述第二视频块序列在所述第二设定时间周期内的镜头数量,利用对应的所述高斯模型,完成所述第二视频块的交通异常检测的步骤之后,所述方法还包括以下步骤:
对测试交通视频图像序列的各个第二视频块序列的检测结果进行融合,得到对测试交通视频图像的最终检测结果;
所述对测试交通视频图像序列的各个第二视频块序列的检测结果进行融合,得到对测试交通视频图像的最终检测结果的步骤表示为:
SF = 0 , &Sigma; i = 1 r &Sigma; j = 1 c S i , j < &epsiv; 1 , &Sigma; i = 1 r &Sigma; j = 1 c S i , j &GreaterEqual; &epsiv;
其中,SF是测试交通视频图像序列的最终检测结果,ε是检测结果的阈值,r是测试交通视频图像序列中每一视频帧包含的块的行数,c是测试交通视频图像序列中每一视频帧包含的块的列数,当SF为0时,表示测试交通视频图像的交通正常,当SF为1时,表示测试交通视频图像的交通异常。
9.一种交通异常检测系统,其特征在于,所述系统包括:
建模模块,用于对正常交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第一视频块序列,之后将每一个所述第一视频块序列分为多个镜头,统计每一个所述第一视频块序列在第一设定时间周期内的镜头数量,并用统计得到的镜头数量训练高斯模型;
测试交通视频图像处理模块,用于对测试交通视频图像序列中的每一视频帧按照相同方式进行分块,不同视频帧的对应块构成第二视频块序列,之后将每一个所述第二视频块序列分为多个镜头,统计每一个所述第二视频块序列在第二设定时间周期内的镜头数量,所述第二设定时间周期与所述第一设定时间周期相等;
交通异常检测模块,用于根据所述第二视频块序列在所述第二设定时间周期内的镜头数量,利用对应的所述高斯模型,完成所述第二视频块的交通异常检测。
10.如权利要求9所述的交通异常检测系统,其特征在于,所述系统还包括:
融合模块,用于对所述交通异常检测模块得到的、所述测试交通视频图像序列的各个第二视频块序列的检测结果进行融合,得到对所述测试交通视频图像的最终检测结果。
CN201410799626.3A 2014-12-19 2014-12-19 一种交通异常检测方法及系统 Active CN104537833B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410799626.3A CN104537833B (zh) 2014-12-19 2014-12-19 一种交通异常检测方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410799626.3A CN104537833B (zh) 2014-12-19 2014-12-19 一种交通异常检测方法及系统

Publications (2)

Publication Number Publication Date
CN104537833A true CN104537833A (zh) 2015-04-22
CN104537833B CN104537833B (zh) 2017-03-29

Family

ID=52853352

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410799626.3A Active CN104537833B (zh) 2014-12-19 2014-12-19 一种交通异常检测方法及系统

Country Status (1)

Country Link
CN (1) CN104537833B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018122805A1 (zh) * 2016-12-30 2018-07-05 同济大学 一种基于行程时间分布的交通异常检测方法
CN108280780A (zh) * 2018-01-18 2018-07-13 深圳市麦斯杰网络有限公司 物业质量品控的优化方法及装置
CN110942642A (zh) * 2019-11-20 2020-03-31 中科视元科技(杭州)有限公司 一种基于视频的交通缓驶检测方法及系统
CN112561839A (zh) * 2020-12-02 2021-03-26 北京有竹居网络技术有限公司 视频裁剪方法、装置、存储介质及电子设备
CN113052047A (zh) * 2021-03-18 2021-06-29 北京百度网讯科技有限公司 交通事件的检测方法、路侧设备、云控平台及系统

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030080878A1 (en) * 2001-10-30 2003-05-01 Kirmuss Charles Bruno Event-based vehicle image capture
CN101251927A (zh) * 2008-04-01 2008-08-27 东南大学 基于视频技术的车辆检测与跟踪方法
CN101483010A (zh) * 2003-04-25 2009-07-15 智点科技股份有限公司 多功能实时交通安全管理装置及方法
CN102254428A (zh) * 2011-04-28 2011-11-23 崔志明 一种基于视频处理的交通拥塞检测方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030080878A1 (en) * 2001-10-30 2003-05-01 Kirmuss Charles Bruno Event-based vehicle image capture
CN101483010A (zh) * 2003-04-25 2009-07-15 智点科技股份有限公司 多功能实时交通安全管理装置及方法
CN101251927A (zh) * 2008-04-01 2008-08-27 东南大学 基于视频技术的车辆检测与跟踪方法
CN102254428A (zh) * 2011-04-28 2011-11-23 崔志明 一种基于视频处理的交通拥塞检测方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
陈斌等: "四类交通事故检测算法的分析", 《交通科技与经济》, no. 3, 31 March 2005 (2005-03-31), pages 50 - 54 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018122805A1 (zh) * 2016-12-30 2018-07-05 同济大学 一种基于行程时间分布的交通异常检测方法
CN109791729A (zh) * 2016-12-30 2019-05-21 同济大学 一种基于行程时间分布的交通异常检测方法
CN109791729B (zh) * 2016-12-30 2021-10-15 同济大学 一种基于行程时间分布的交通异常检测方法
CN108280780A (zh) * 2018-01-18 2018-07-13 深圳市麦斯杰网络有限公司 物业质量品控的优化方法及装置
CN110942642A (zh) * 2019-11-20 2020-03-31 中科视元科技(杭州)有限公司 一种基于视频的交通缓驶检测方法及系统
CN110942642B (zh) * 2019-11-20 2021-01-19 中科视元科技(杭州)有限公司 一种基于视频的交通缓驶检测方法及系统
CN112561839A (zh) * 2020-12-02 2021-03-26 北京有竹居网络技术有限公司 视频裁剪方法、装置、存储介质及电子设备
CN113052047A (zh) * 2021-03-18 2021-06-29 北京百度网讯科技有限公司 交通事件的检测方法、路侧设备、云控平台及系统
CN113052047B (zh) * 2021-03-18 2023-12-29 阿波罗智联(北京)科技有限公司 交通事件的检测方法、路侧设备、云控平台及系统

Also Published As

Publication number Publication date
CN104537833B (zh) 2017-03-29

Similar Documents

Publication Publication Date Title
Zhang et al. Wide-area crowd counting via ground-plane density maps and multi-view fusion cnns
CN110348445B (zh) 一种融合空洞卷积和边缘信息的实例分割方法
CN109887281B (zh) 一种监控交通事件的方法及系统
Sakaridis et al. Model adaptation with synthetic and real data for semantic dense foggy scene understanding
Temel et al. Traffic sign detection under challenging conditions: A deeper look into performance variations and spectral characteristics
CN109829400B (zh) 一种快速车辆检测方法
KR102094341B1 (ko) 인공지능 기반의 도로 노면 불량 객체 정보 분석 시스템 및 방법
Li et al. Event-based vision enhanced: A joint detection framework in autonomous driving
CN104537833A (zh) 一种交通异常检测方法及系统
KR102217253B1 (ko) 행동패턴 분석 장치 및 방법
WO2023207742A1 (zh) 一种交通异常行为检测方法与系统
Chebrolu et al. Deep learning based pedestrian detection at all light conditions
JP6700373B2 (ja) ビデオ動画の人工知能のための学習対象イメージパッケージング装置及び方法
JP7111873B2 (ja) 信号灯識別方法、装置、デバイス、記憶媒体及びプログラム
CN102111530A (zh) 移动物体检测装置与方法
CN114627526A (zh) 基于多摄像头抓拍图像的融合去重方法、装置及可读介质
JP2019154027A (ja) ビデオ監視システムのパラメータ設定方法、装置及びビデオ監視システム
Gochoo et al. Fisheye8k: A benchmark and dataset for fisheye camera object detection
CN111091093A (zh) 一种高密度人群的数量估测方法、系统及相关装置
CN103729620A (zh) 一种基于多视角贝叶斯网络的多视角行人检测方法
Lira et al. A computer-vision approach to traffic analysis over intersections
Wang et al. Crowd counting with density adaption networks
Nguyen et al. Lane detection and tracking based on fully convolutional networks and probabilistic graphical models
KR20230066953A (ko) 다중 cctv 비디오를 이용한 교통 정체 전파 패턴 분석 방법 및 장치
CN114037834A (zh) 一种基于振动信号和rgb图像融合的语义分割方法及装置

Legal Events

Date Code Title Description
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20210326

Address after: 518000 26-1, block C, World Trade Plaza, Fuhong Road, Futian street, Shenzhen City, Guangdong Province

Patentee after: SHENZHEN XINGHAI IOT TECHNOLOGY Co.,Ltd.

Address before: 518060 No. 3688 Nanhai Road, Shenzhen, Guangdong, Nanshan District

Patentee before: SHENZHEN University