CN102243706A - 基于目标边缘方向的目标分类方法和系统 - Google Patents

基于目标边缘方向的目标分类方法和系统 Download PDF

Info

Publication number
CN102243706A
CN102243706A CN2011102369996A CN201110236999A CN102243706A CN 102243706 A CN102243706 A CN 102243706A CN 2011102369996 A CN2011102369996 A CN 2011102369996A CN 201110236999 A CN201110236999 A CN 201110236999A CN 102243706 A CN102243706 A CN 102243706A
Authority
CN
China
Prior art keywords
span
target area
target
edge
gradient
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011102369996A
Other languages
English (en)
Other versions
CN102243706B (zh
Inventor
车军
张继霞
贾永华
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Hikvision Digital Technology Co Ltd
Original Assignee
Hangzhou Hikvision Software Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Hikvision Software Co Ltd filed Critical Hangzhou Hikvision Software Co Ltd
Priority to CN201110236999.6A priority Critical patent/CN102243706B/zh
Publication of CN102243706A publication Critical patent/CN102243706A/zh
Application granted granted Critical
Publication of CN102243706B publication Critical patent/CN102243706B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明涉及视频图像处理领域,公开了一种基于目标边缘方向的目标分类方法和系统。本发明中,直接通过背景提取目标特征,利用边缘检测算子进行边缘检测,对图像噪声更为敏感,通过利用多高斯模型快速算法,并直接使用梯度方向直方图特征对运动目标进行分类,实现有效的计算,节省运算代价,提高检测准确性,适应性更强,计算量更小。

Description

基于目标边缘方向的目标分类方法和系统
技术领域
本发明涉及视频图像处理领域,特别涉及监控视频中目标自动分类技术。
背景技术
目前,交通事故是导致行人死亡的一个主要因素之一,由于自行车骑车人和行人在交通事故中常常处于弱势地位,一旦与机动车发生交通事故,很容易受到伤害。因此,行人检测技术成为近年来智能分析领域研究中备受关注的研究方向,尤其对于智能交通视频分析领域,对目标的分类和检测,对道路的管理和交通安全有至关重要的作用,
本发明的发明人发现,目前目标分类的主要方法有如下相应不足之处:
1.背景提取和形状模型匹配的方法,该方法主要是通过对当前图像与参考背景的像素进行逐个做差来得到运动目标,通过运动目标与相应已知目标的形状模型进行匹配来进行判别。然而,行人具有的多态性和车辆的多样性决定了通过模型匹配不能达到较理想的结果。
2.应用Harr型特征的方法,该方法通过从大量训练样本中提取Haar型特征,对这些特征进行训练得到强分类器,最后通过强分类器来进行目标的识别和分类。Harr型特征检测方法成功的应用在人脸检测,速度很快,精度较高,已经广泛应用,但是行人检测不同于人脸检测,Harr特征主要是基于灰度分布的区域特征,人脸在这方面非常稳定,所以有很高的检测精度,但应用于户外公路行人和车辆时,由于色彩多样,光线、天气变化等因素影响,行人和车辆图像在灰度分布的区域上并没有明显的特征,因此利用Harr特征进行分类也不能达到很好的效果。
3.利用梯度方向直方图特征的方法,它提取了图像中局部区域的梯度方向直方图特征,通过对样本中该特征进行训练,然后用模式识别中的方法形成分类器,从而实现目标检测和分类。但在实际应用中,根据不同的场景和不同的实际情况,相机假设的高度,角度不尽相同,因此利用分类器鲁棒性不高,针对不同场景往往需要训练相应的训练器;在实际监控中需要实时对视频序列进行处理,并且需要对目标进行跟踪,利用分类器并不能很好的满足实时的要求,并且不同视频场景不同,无法确定统一的检测区域,在使用上带来不便。
所以,亟待提出一种简单有效,适应性更强,计算量更小的目标分类方法。
发明内容
本发明的目的在于提供一种基于目标边缘方向的目标分类方法和系统,根据目标边缘方向分布的特征对目标进行自动分类,使得运动目标分类容易实现,准确度高,计算复杂度低,实时性强,有效区别道路上的行人和车辆,帮助高速公路管理部门对道路智能管理,预防恶性事件的发生。
为解决上述技术问题,本发明的实施方式提供了一种监控视频中目标自动分类方法,包括以下步骤:
根据当前帧和背景图像的差获取当前图像中的运动目标区域;
对运动目标区域内的图像计算边缘梯度方向;
对边缘梯度方向按方向角度进行统计,得到方向直方图;
根据方向直方图确定运动目标的类型。
本发明的实施方式还提供了一种监控视频中目标自动分类系统,监控视频中目标自动分类系统,包括以下模块:
获取模块,用于根据当前帧和背景图像的差获取当前图像中的运动目标区域;
计算模块,用于对获取模块获取的运动目标区域内的图像计算边缘梯度方向;
统计模块,用于对计算模块计算的边缘梯度方向按方向角度进行统计,得到方向直方图;
分类模块,用于根据统计模块统计的方向直方图确定运动目标的类型。
本发明实施方式与现有技术相比,主要区别及其效果在于:
根据目标边缘方向分布的特征对目标进行自动分类,使得运动目标分类容易实现,准确度高,计算复杂度低,实时性强,有效区别道路上的行人和车辆,帮助高速公路管理部门对道路智能管理,预防恶性事件的发生。
进一步地,基于梯度和边缘检测算子的边缘检测方法,可以对图像噪声更为敏感,通过利用多高斯模型快速算法,图像边缘检测大幅度地减少了不相关的数据量,使得计算量减少,节省运算代价,并且剔除了可以认为不相关的信息,保留了图像中的运动目标区域内的图像边缘的结构属性,提高检测准确性。
进一步地,对边缘梯度方向直方图的归一化处理,可以消除“角度”这一量纲缩小量值,从而简化监控视频中目标自动分类的计算。
进一步地,对所述目标区域内每个像素的边缘梯度方向角度在0至180度分布范围内进行量化至N个方向,当N越小时,目标区域内每个像素的边缘梯度方向角度量化方向就越少,抗干扰性就差,图像噪声大,从而导致目标错误分类的概率变大;当N越大,目标区域内每个像素的边缘梯度方向角度量化方向越多,其图像特征越分散,目标无法分类的可能性增加。所以,其中N的取值范围一般为4至8,可以使得量化方向适量,目标分类准确,计算量小,实时性强。
进一步地,当N=6时,可以使得图像场景中的目标特征均匀处理,抗干扰能力明显提高,目标分类更加准确。
进一步地,使用灰度图像计算边缘梯度方向,适应性更好,计算量更少。
进一步地,在灰度图像处理中提取边缘,作为滤波算子的一种,Sobel算子通过对图像中的像素位置做了加权,并通过利用快速卷积函数,因此简化了运算复杂度,明显提高了其边缘检测效果。
附图说明
图1是本发明第一实施方式中一种监控视频中目标自动分类方法的流程示意图;
图2是本发明第二实施方式中一种监控视频中目标自动分类方法的流程示意图;
图3(a)是本发明第二实施方式中一种监控视频中目标自动分类方法的流程示意图;
图3(b)是本发明第二实施方式中一种监控视频中目标自动分类方法的流程示意图;
图4(a)是本发明第二实施方式中一种监控视频中目标自动分类方法的流程示意图;
图4(b)是本发明第二实施方式中一种监控视频中目标自动分类方法的流程示意图;
图4(c)是本发明第二实施方式中一种监控视频中目标自动分类方法的流程示意图;
图5是本发明第三实施方式中一种监控视频中目标自动分类系统的结构示意图;
图6是本发明第四实施方式中一种监控视频中目标自动分类系统的结构示意图。
具体实施方式
在以下的叙述中,为了使读者更好地理解本申请而提出了许多技术细节。但是,本领域的普通技术人员可以理解,即使没有这些技术细节和基于以下各实施方式的种种变化和修改,也可以实现本申请各权利要求所要求保护的技术方案。
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明的实施方式作进一步地详细描述。
本发明第一实施方式涉及一种监控视频中目标自动分类方法。图1是该监控视频中目标自动分类方法的流程示意图。该监控视频中目标自动分类方法包括以下步骤:
在步骤101中,根据当前帧和背景图像的差获取当前图像中的运动目标区域。
此后进入步骤102,对获取的运动目标区域内的图像计算边缘梯度方向。
此后进入步骤103,对已计算的边缘梯度方向按方向角度进行统计,得到方向直方图。
此后进入步骤104,根据方向直方图确定运动目标的类型,此后结束本流程。
根据目标边缘方向分布的特征对目标进行自动分类,使得运动目标分类容易实现,准确度高,计算复杂度低,实时性强,有效区别道路上的行人和车辆,帮助高速公路管理部门对道路智能管理,预防恶性事件的发生。
本发明第二实施方式涉及一种监控视频中目标自动分类方法。图2是该监控视频中目标自动分类方法的流程示意图。
第二实施方式在第一实施方式的基础上进行了改进,主要改进之处在于:在对运动目标区域内的图像计算边缘梯度方向的步骤中,使用预先设定的边缘检测算子并进行卷积运算,有效降低图像噪音和提高运算速度。对边缘梯度方向按方向角度进行统计,得到方向直方图的步骤中,采用归一化处理方式,使得不同尺寸目标的方向直方图的各数值由绝对值变为相对值,有利于分类阈值的选取。规定了N取值范围为4至8,可以使得边缘梯度方向按方向角度量化适量,目标分类准确,计算量小,实时性强,且当N=6时,其分类方法的性能达到最优。
在对运动目标区域内的图像计算边缘梯度方向的步骤中,包括以下子步骤:
使用预先设定的边缘检测算子,对运动目标区域内的每个像素点进行卷积运算,求取运动目标区域内每个像素点的水平方向梯度dx和垂直方向梯度dy。
根据该运动目标区域内每个像素点的水平方向梯度dx和垂直方向梯度dy,计算该像素点的边缘梯度方向角度
图像边缘检测大幅度地减少了数据量,并且剔除了不相关的信息,保留了图像重要的结构属性。有许多方法用于边缘检测,它们的绝大部分可以划分为两类:基于搜索和零交叉。基于搜索的边缘检测方法首先计算边缘强度,通常用一阶导数表示,例如梯度模,然后利用边缘检测算子估计边缘的局部方向,通常采用梯度的方向,并利用此方向找到局部梯度模的最大值,其中使用的边缘检测算子有Roberts算子,Cross算子,Prewitt算子,Sobel算子,Canny算子,Krisch算子,罗盘算子等。基于零交叉的方法是找到由图像得到的二阶导数的零交叉点来定位边缘,通常利用拉普拉斯算子或非线性微分方程的零交叉点。
利用当前帧和背景图像的差获取运动目标区域,其边缘是由灰度不连续性所反映的,边缘种类可分为两种,其一是阶跃性边缘,它两边的像素的灰度值有显著不同。其二是屋顶状边缘,它位于灰度值从增加到减小的变化转折点。对于阶跃性边缘,其二阶方向导数在边缘处呈零交叉,因而可用微分算子来做边缘检测算子。微分算子类边缘检测法类似于高空间域的高通滤波,有增加高频分量的作用,这类算子对噪声相当敏感,对于阶跃性边缘,通常可用的算子有梯度算子Sobel算子和Kirsh算子。对于屋顶状边缘可用拉普拉斯变换和Kirsh算子。由于色标为长方形,且相邻边缘灰度级相差较大,故采用边缘检测来获取当前图像中的运动目标区域。
在本发明的其它某些实例中,在运动目标区域内求取每个像素点的水平方向梯度dx和垂直方向梯度dy具体如下:
图像边缘梯度一般都是通过对图像进行梯度运算来实现的,即把图像看成二维离散函数,图像梯度其实就是这个二维离散函数的求导:
图像梯度:G(x,y)=dx i+dy j。
dx(i,j)=l(i+1,j)-l(i,j)。
dy(i,j)=l(i,j+1)-l(i,j)。
其中,l是图像像素的值(如:RG B值),(i,j)为像素的坐标。
图像梯度一般也可以用中值差分:
dx(i,j)=[l(i+1,j)+l(i-1,j)]/2。
dy(i,j)=[l(i,j+1)+l(i,j-1)]/2。
卷积是一种线性运算,运用于图像处理中常见的模运算,广泛应用于图像滤波。根据卷积定理,函数卷积的傅里叶变换是函数傅里叶变换的乘积。即,一个域中的卷积相当于另一个域中的乘积,例如时域中的卷积就对应于频域中的乘积。这一定理对拉普拉斯变换、双边拉普拉斯变换、Z变换、Mellin变换和Hartley变换等各种傅里叶变换的变体同样成立。在调和分析中还可以推广到在局部紧致的阿贝尔群上定义的傅里叶变换。高斯变换就是用高斯函数对图像进行卷积。其中,高斯算子可以直接从离散高斯函数得到。
在本发明的其它某些实例中,根据该运动目标区域内每个像素点的水平方向梯度dx和垂直方向梯度dy,计算该像素点的梯度方向角度也可以根据三角或反三角函数关系,利用另一种角度表达方式进行反正弦、反余弦,反余切等的处理。
对边缘梯度方向按方向角度进行统计,得到方向直方图的步骤中,包括以下子步骤:
对目标区域内每个像素的边缘梯度方向角度在0至180度分布范围内进行量化至N个方向,其中N为预先设定的整数。
根据目标区域内每个像素的边缘梯度方向角度,统计该目标区域内每个像素的边缘梯度方向角度,得到方向直方图。
对边缘梯度方向直方图进行归一化处理。
归一化是一种无量纲处理手段,使用归一化处理函数,使物理系统数值的绝对值变成某种相对值关系,对边缘梯度方向直方图的归一化处理,可以提高对不同图像质量,不同尺寸目标分类的鲁棒性。
统计该目标区域内每个像素的边缘梯度方向角度,得到方向直方图。即对相同场景条件下的目标区域内每个像素的边缘梯度方向角度作为一系列测量数据,找出其最大值和最小值,然后在确定的一个边缘梯度方向角度分布范围的区间0到180度内,使其包含全部测量数据,将区间分成N个小区间,统计测量结果出现在各小区间的频数M,以测量数据为横坐标,以频数M为纵坐标,划出各小区间及其对应的频数高度,则可得到一个矩形图,即为该目标区域内每个像素的边缘梯度方向直方图。
边缘梯度方向直方图的归一化,即是将直方图每个方向上的分布个数归一化到0~1之间,且直方图每个方向的分布总和为1。归一化的目的增强算法对不同尺寸目标的适应性。
N取值范围为4至8。
对目标区域内每个像素的边缘梯度方向角度在0至180度分布范围内进行量化至N个方向,当N越小时,目标区域内每个像素的边缘梯度方向角度量化方向就越少,抗干扰性就差,图像噪声大,从而导致目标错误分类的概率变大。当N越大,目标区域内每个像素的边缘梯度方向角度量化方向越多,其图像特征越分散,目标无法分类的可能性增加。所以,其中N的取值范围一般为4至8,可以使得量化方向适量,目标分类准确,计算量小,实时性强。
此外,可以理解,在本发明的其他某些具体实施方式中,N的取值范围也可以根据实际应用和具体情况进行选择,并不局限于4至8,也可以是其他范围,比如4至12。
根据方向直方图确定运动目标的类型的步骤中,当N=6时,通过以下方式确定目标类型:
t arg et = human , H ∈ Θ vehicle , H ∈ Ω
其中 &Theta; = th 1 < H 1 + H 6 < th 2 , th 3 < H 3 + H 4 < th 4 , H 1 + H 6 > H 2 + H 5 , | H 1 - H 6 | < th 5 , th 4 < th 1 &Omega; = th 6 < H 3 + H 4 < th 7 , th 8 < H 1 + H 6 < th 9 , H 1 + H 6 > H 2 + H 5 , th 9 &le; th 6 ;
th1、th2、th3、th4、th5、th6、th7、th8、th9是预先设定的门限。
当N=6时,可以使得图像场景中的目标特征均匀处理,抗干扰能力明显提高,目标分类更加准确。
在本发明的其他某些实例中,th1、th2、th3、th4、th5、th6、th7、th8、th9也可以是动态生成的门限,并不局限于于预先设定,比如对监控系统实时性精确度要求高的时候,th1、th2、th3、th4、th5、th6、th7、th8、th9即是根据现场数据动态生成的瞬时经验值。对于采取预先设定th1、th2、th3、th4、th5、th6、th7、th8、th9的方式,其取值可以是经验模型得出的经验值。
由于行人边缘的水平方向分布远远大于垂直方向,车辆边缘的垂直方向分布略大于水平方向分布,通过这一原则和对各个th的取值范围设置,可以实现监控视频中的运动目标自动分类。
th1的取值范围为[0.4,0.6]。
th2的取值范围为[0.8,0.95]。
th3的取值范围为[0.05,0.15]。
th4的取值范围为[0.15,0.3]。
th5的取值范围为[0.05,0.2]。
th6的取值范围为[0.4,0.6]。
th7的取值范围为[0.8,0.95]。
th8的取值范围为[0.05,0.15]。
th9的取值范围为[0.2,0.35]。
上述取值范围是优选的,在本发明的其他某些实例中,th1、th2、th3、th4、th5、th6、th7、th8、th9的取值范围,只要保证行人边缘的水平方向分布远远大于垂直方向,车辆边缘的垂直方向分布略大于水平方向分布这一分类门限选取原则即可,也可以不为上述取值范围:
在对运动目标区域内的图像计算边缘梯度方向的步骤中,
对运动目标区域内的灰度图像计算边缘梯度方向。
使用灰度图像计算边缘梯度方向,适应性更好,计算量更少。
在本发明其它某些实例中,彩色图像也可以用于计算运动目标区域的边缘梯度方向。一种方法是直接用彩色图像的计算,例如用一个或多个色彩分量,另一种方法是将彩色图像转换成灰度图像进行计算。
对运动目标区域内的灰度图像计算边缘梯度方向使用的边缘检测算子为Sobel算子,描述如下:
- 1 - 2 1 0 0 0 1 2 1 - 1 0 1 - 2 0 2 - 1 2 1 .
在灰度图像处理中提取边缘,作为滤波算子的一种,Sobel算子通过对图像中的像素位置做了加权,并通过利用快速卷积函数,因此简化了运算复杂度,明显提高了其边缘检测效果。
Sobel算子是图像处理中的算子之一,主要用作边缘检测。在技术上,它是一离散性差分算子,用来运算图像亮度函数的梯度之近似值。在图像的任何一点使用此算子,将会产生对应的梯度矢量或是其法矢量。
该算子包含两组3x3的矩阵,分别为横向及纵向,如下所示:
将之与图像作平面卷积,即可分别得出横向及纵向的亮度差分近似值,即本发明中的该运动目标区域内每个像素点的水平方向梯度dx和垂直方向梯度dy。
除了Sobel算子以外,还可以用其它算子进行边缘计算,如
Roberts算子: - 1 0 0 1 0 - 1 1 0
Prewitt算子: - 1 - 1 - 1 0 0 0 1 1 1 - 1 0 1 - 1 1 1 - 1 2 1
等等。
优选地,图2是本实施方式中背景提取及运动目标检测的工作流程示意图。
具体地说,
在步骤201中,输入像素点。
此后进入步骤202,对该像素点初始化高斯模型。
此后进入步骤203中,判定初始化高斯模型与多高斯模型中的某一高斯模型是否匹配。
若否,则进入步骤204;若是,则进入步骤206。
在步骤204中,如果初始化高斯模型与多高斯模型中的某一高斯模型不匹配,则更新匹配模型的方差与均值,并且更新所有高斯模型的权值。
此后进入步骤205,更新该像素点至背景图像,此后结束本流程。
在步骤206中,如果步骤203中,初始化高斯模型与多高斯模型中的某一高斯模型匹配,则替换权值最小的高斯模型方差与权值,并且更新其余高斯模型的权值。
此后进入步骤207中,标记该像素点为运动目标的像素点。此后结束本流程。
优选地,图3(a)和图3(b)是本实施方式中运动目标分别为行人和车辆的示意图。
优选地,图4(a)是本实施方式中一种监控视频中目标自动分类方法的场景示意图;
图4(b)是本实施方式中一种监控视频中目标自动分类方法的背景示意图;
图4(c)是本实施方式中一种监控视频中目标自动分类方法的示意图;
本发明的各方法实施方式均可以以软件、硬件、固件等方式实现。不管本发明是以软件、硬件、还是固件方式实现,指令代码都可以存储在任何类型的计算机可访问的存储器中(例如永久的或者可修改的,易失性的或者非易失性的,固态的或者非固态的,固定的或者可更换的介质等等)。同样,存储器可以例如是可编程阵列逻辑(Programmable Array Logic,简称“PAL”)、随机存取存储器(Random Access Memory,简称“RAM”)、可编程只读存储器(Programmable Read Only Memory,简称“PROM”)、只读存储器(Read-Only Memory,简称“ROM”)、电可擦除可编程只读存储器(Electrically Erasable Programmable ROM,简称“EEPROM”)、磁盘、光盘、数字通用光盘(Digital Versatile Disc,简称“DVD”)等等。
本发明第三实施方式涉及一种监控视频中目标自动分类系统。图5是该监控视频中目标自动分类系统的结构示意图。该监控视频中目标自动分类系统监控视频中目标自动分类系统,包括以下模块:
获取模块,用于根据当前帧和背景图像的差获取当前图像中的运动目标区域。
计算模块,用于对获取模块获取的运动目标区域内的图像计算边缘梯度方向。
统计模块,用于对计算模块计算的边缘梯度方向按方向角度进行统计,得到方向直方图。
分类模块,用于根据统计模块统计的方向直方图确定运动目标的类型。
第一实施方式是与本实施方式相对应的方法实施方式,本实施方式可与第一实施方式互相配合实施。第一实施方式中提到的相关技术细节在本实施方式中依然有效,为了减少重复,这里不再赘述。相应地,本实施方式中提到的相关技术细节也可应用在第一实施方式中。
本发明第四实施方式涉及一种监控视频中目标自动分类系统。图6是该监控视频中目标自动分类系统的结构示意图。
本发明第四实施方式涉及一种监控视频中目标自动分类系统。图6是该监控视频中目标自动分类系统的结构示意图。
第四实施方式在第三实施方式的基础上进行了改进,主要改进之处在于:增加了二值化模块,并且所述计算模块和统计模块还分别包括子模块。
具体地说,
还包括以下模块:二值化模块,用于计算模块对运动目标区域内的图像计算边缘梯度方向的步骤中,对运动目标区域内的灰度图像计算边缘梯度方向。
所述计算模块,还包括以下子模块:
方向梯度计算子模块,用于根据预先设定的边缘检测算子,对运动目标区域内的每个像素点进行卷积运算,求取运动目标区域内每个像素点的水平方向梯度dx和垂直方向梯度dy。
梯度方向角度计算子模块,用于根据该运动目标区域内每个像素点的水平方向梯度dx和垂直方向梯度dy,计算该像素点的边缘梯度方向角度
所述统计模块,还包括以下子模块:
量化子模块,用于对目标区域内每个像素的边缘梯度方向角度在0至180度分布范围内进行量化至N个方向,其中N为预先设定的整数,其中,N取值范围为4至8。
统计子模块,用于根据目标区域内每个像素的边缘梯度方向角度,统计该目标区域内每个像素的边缘梯度方向角度,得到方向直方图。
归一化处理子模块,用于所述统计子模块对边缘梯度方向直方图进行归一化处理。
对目标区域内每个像素的边缘梯度方向角度在0至180度分布范围内进行量化至N个方向,当N越小时,计算模块计算量减少,其图像处理抗干扰性就差,图像噪声大,从而导致目标错误分类的概率变大。当N越大,其图像特征越分散,目标无法分类的可能性增加。所以,其中N的取值范围一般为4至8,可以使得量化方向适量,自动目标分类准确,计算量小,实时性强。
根据方向直方图确定运动目标的类型的步骤中,当N=6时,通过以下方式确定目标类型:
t arg et = human , H &Element; &Theta; vehicle , H &Element; &Omega;
其中 &Theta; = th 1 < H 1 + H 6 < th 2 , th 3 < H 3 + H 4 < th 4 , H 1 + H 6 > H 2 + H 5 , | H 1 - H 6 | < th 5 , th 4 < th 1 &Omega; = th 6 < H 3 + H 4 < th 7 , th 8 < H 1 + H 6 < th 9 , H 1 + H 6 > H 2 + H 5 , th 9 &le; th 6 ;
所述th1、th2、th3、th4、th5、th6、th7、th8、th9是预先设定的门限。并且,所述th1的取值范围为[0.4,0.6];
所述th2的取值范围为[0.8,0.95];
所述th3的取值范围为[0.05,0.15];
所述th4的取值范围为[0.15,0.3];
所述th5的取值范围为[0.05,0.2];
所述th6的取值范围为[0.4,0.6];
所述th7的取值范围为[0.8,0.95];
所述th8的取值范围为[0.05,0.15];
所述th9的取值范围为[0.2,0.35]。
对运动目标区域内的灰度图像计算边缘梯度方向使用的边缘检测算子为Sobel算子,描述如下:
- 1 - 2 1 0 0 0 1 2 1 - 1 0 1 - 2 0 2 - 1 2 1 .
第二实施方式是与本实施方式相对应的方法实施方式,本实施方式可与第二实施方式互相配合实施。第二实施方式中提到的相关技术细节在本实施方式中依然有效,为了减少重复,这里不再赘述。相应地,本实施方式中提到的相关技术细节也可应用在第二实施方式中。
需要说明的是,本发明各模块实施方式中提到的各模块都是逻辑模块,在物理上,一个逻辑模块可以是一个物理模块,也可以是一个物理模块的一部分,还可以以多个物理模块的组合实现,这些逻辑模块本身的物理实现方式并不是最重要的,这些逻辑模块所实现的功能的组合是才解决本发明所提出的技术问题的关键。此外,为了突出本发明的创新部分,本发明上述各模块实施方式并没有将与解决本发明所提出的技术问题关系不太密切的模块引入,这并不表明上述设备实施方式并不存在其它的模块。
虽然通过参照本发明的某些优选实施方式,已经对本发明进行了图示和描述,但本领域的普通技术人员应该明白,可以在形式上和细节上对其作各种改变,而不偏离本发明的精神和范围。

Claims (16)

1.一种监控视频中目标自动分类方法,其特征在于,包括以下步骤:
根据当前帧和背景图像的差获取当前图像中的运动目标区域;
对运动目标区域内的图像计算边缘梯度方向;
对所述边缘梯度方向按方向角度进行统计,得到方向直方图;
根据所述方向直方图确定运动目标的类型。
2.根据权利要求1所述的监控视频中目标自动分类方法,其特征在于,所述对运动目标区域内的图像计算边缘梯度方向的步骤,还包括以下子步骤:
使用预先设定的边缘检测算子,对运动目标区域内的每个像素点进行卷积运算,求取运动目标区域内每个像素点的水平方向梯度dx和垂直方向梯度dy;
根据该运动目标区域内每个像素点的水平方向梯度dx和垂直方向梯度dy,计算该像素点的边缘梯度方向角度
Figure FDA0000084211050000011
3.根据权利要求2所述的监控视频中目标自动分类方法,其特征在于,对所述边缘梯度方向按方向角度进行统计,得到方向直方图的步骤中,还包括以下子步骤:
对所述目标区域内每个像素的边缘梯度方向角度在0至180度分布范围内进行量化至N个方向,其中N为预先设定的整数;
根据所述目标区域内每个像素的边缘梯度方向角度,统计该目标区域内每个像素的边缘梯度方向角度,得到方向直方图;
对所述边缘梯度方向直方图进行归一化处理。
4.根据权利要求3所述的监控视频中目标自动分类方法,其特征在于,所述N取值范围为4至8。
5.根据权利要求4所述的监控视频中目标自动分类方法,其特征在于,所述根据方向直方图确定运动目标的类型的步骤中,当N=6时,通过以下方式确定运动目标类型:
t arg et = human , H &Element; &Theta; vehicle , H &Element; &Omega;
其中 &Theta; = th 1 < H 1 + H 6 < th 2 , th 3 < H 3 + H 4 < th 4 , H 1 + H 6 > H 2 + H 5 , | H 1 - H 6 | < th 5 , th 4 < th 1 &Omega; = th 6 < H 3 + H 4 < th 7 , th 8 < H 1 + H 6 < th 9 , H 1 + H 6 > H 2 + H 5 , th 9 &le; th 6 ;
所述th1、th2、th3、th4、th5、th6、th7、th8、th9是预先设定的门限。
6.根据权利要求5所述的监控视频中目标自动分类方法,其特征在于,所述th1的取值范围为[0.4,0.6];
所述th2的取值范围为[0.8,0.95];
所述th3的取值范围为[0.05,0.15];
所述th4的取值范围为[0.15,0.3];
所述th5的取值范围为[0.05,0.2];
所述th6的取值范围为[0.4,0.6];
所述th7的取值范围为[0.8,0.95];
所述th8的取值范围为[0.05,0.15];
所述th9的取值范围为[0.2,0.35]。
7.根据权利要求1至6中任一项所述的监控视频中目标自动分类方法,其特征在于,所述对运动目标区域内的图像计算边缘梯度方向的步骤中,
对运动目标区域内的灰度图像计算边缘梯度方向。
8.根据权利要求7所述的监控视频中目标自动分类方法,其特征在于,所述对运动目标区域内的灰度图像计算边缘梯度方向使用的边缘检测算子为Sobel算子,描述如下:
- 1 - 2 1 0 0 0 1 2 1 - 1 0 1 - 2 0 2 - 1 2 1 .
9.一种监控视频中目标自动分类系统,其特征在于,所述监控视频中目标自动分类系统,包括以下模块:
获取模块,用于根据当前帧和背景图像的差获取当前图像中的运动目标区域;
计算模块,用于对获取模块获取的运动目标区域内的图像计算边缘梯度方向;
统计模块,用于对所述计算模块计算的边缘梯度方向按方向角度进行统计,得到方向直方图;
分类模块,用于根据所述统计模块统计的方向直方图确定运动目标的类型。
10.根据权利要求9所述的监控视频中目标自动分类系统,其特征在于,所述计算模块,还包括以下子模块:
方向梯度计算子模块,用于根据预先设定的边缘检测算子,对运动目标区域内的每个像素点进行卷积运算,求取运动目标区域内每个像素点的水平方向梯度dx和垂直方向梯度dy;
梯度方向角度计算子模块,用于根据该运动目标区域内每个像素点的水平方向梯度dx和垂直方向梯度dy,计算该像素点的边缘梯度方向角度
Figure FDA0000084211050000041
11.根据权利要求10所述的监控视频中目标自动分类系统,其特征在于,所述统计模块,还包括以下子模块:
量化子模块,用于对所述目标区域内每个像素的边缘梯度方向角度在0至180度分布范围内进行量化至N个方向,其中N为预先设定的整数;
统计子模块,用于根据所述目标区域内每个像素的边缘梯度方向角度,统计该目标区域内每个像素的边缘梯度方向角度,得到方向直方图;
归一化处理子模块,用于所述统计子模块对所述边缘梯度方向直方图进行归一化处理。
12.根据权利要求11所述的监控视频中目标自动分类系统,其特征在于,所述N取值范围为4至8。
13.根据权利要求12所述的监控视频中目标自动分类系统,其特征在于,所述根据方向直方图确定运动目标的类型的步骤中,当N=6时,通过以下方式确定目标类型:
t arg et = human , H &Element; &Theta; vehicle , H &Element; &Omega;
其中 &Theta; = th 1 < H 1 + H 6 < th 2 , th 3 < H 3 + H 4 < th 4 , H 1 + H 6 > H 2 + H 5 , | H 1 - H 6 | < th 5 , th 4 < th 1 &Omega; = th 6 < H 3 + H 4 < th 7 , th 8 < H 1 + H 6 < th 9 , H 1 + H 6 > H 2 + H 5 , th 9 &le; th 6 ;
所述th1、th2、th3、th4、th5、th6、th7、th8、th9是预先设定的门限。
14.根据权利要求13所述的监控视频中目标自动分类系统,其特征在于,所述th1的取值范围为[0.4,0.6];
所述th2的取值范围为[0.8,0.95];
所述th3的取值范围为[0.05,0.15];
所述th4的取值范围为[0.15,0.3];
所述th5的取值范围为[0.05,0.2];
所述th6的取值范围为[0.4,0.6];
所述th7的取值范围为[0.8,0.95];
所述th8的取值范围为[0.05,0.15];
所述th9的取值范围为[0.2,0.35]。
15.根据权利要求9至14中任一项所述的监控视频中目标自动分类系统,其特征在于,还包括以下模块:
二值化模块,用于所述计算模块对运动目标区域内的图像计算边缘梯度方向的步骤中,对运动目标区域内的灰度图像计算边缘梯度方向。
16.根据权利要求15所述的监控视频中目标自动分类系统,其特征在于,所述对运动目标区域内的灰度图像计算边缘梯度方向使用的边缘检测算子为Sobel算子,描述如下:
- 1 - 2 1 0 0 0 1 2 1 - 1 0 1 - 2 0 2 - 1 2 1 .
CN201110236999.6A 2011-08-18 2011-08-18 基于目标边缘方向的目标分类方法和系统 Active CN102243706B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201110236999.6A CN102243706B (zh) 2011-08-18 2011-08-18 基于目标边缘方向的目标分类方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110236999.6A CN102243706B (zh) 2011-08-18 2011-08-18 基于目标边缘方向的目标分类方法和系统

Publications (2)

Publication Number Publication Date
CN102243706A true CN102243706A (zh) 2011-11-16
CN102243706B CN102243706B (zh) 2014-12-10

Family

ID=44961757

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110236999.6A Active CN102243706B (zh) 2011-08-18 2011-08-18 基于目标边缘方向的目标分类方法和系统

Country Status (1)

Country Link
CN (1) CN102243706B (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103336965A (zh) * 2013-07-18 2013-10-02 江西省电力公司检修分公司 基于轮廓差异及区块主方向直方图的前景与特征提取方法
CN103514453A (zh) * 2012-06-15 2014-01-15 富士通株式会社 对象识别设备和方法
CN105323419A (zh) * 2014-07-25 2016-02-10 能晶科技股份有限公司 产生方位图像的方法
CN105788254A (zh) * 2016-03-25 2016-07-20 上海美迪索科电子科技有限公司 一种区分车辆和行人通过的地面检测方法及其检测装置
CN106303501A (zh) * 2016-08-23 2017-01-04 深圳市捷视飞通科技股份有限公司 基于图像稀疏特征匹配的立体图像重构方法及装置
CN107122714A (zh) * 2017-03-28 2017-09-01 天棣网络科技(上海)有限公司 一种基于边缘约束的实时行人检测方法
CN108985351A (zh) * 2018-06-27 2018-12-11 北京中安未来科技有限公司 一种基于梯度方向稀疏特征信息识别模糊图像的方法和装置、计算设备及存储介质
CN110464379A (zh) * 2018-05-11 2019-11-19 深圳市理邦精密仪器股份有限公司 一种胎儿头围测量方法、装置及终端设备
CN110517245A (zh) * 2019-08-20 2019-11-29 北京远舢智能科技有限公司 一种机械设备故障诊断系统
CN110569683A (zh) * 2018-06-06 2019-12-13 伟诠电子股份有限公司 条码检测方法及条码检测系统
CN110907132A (zh) * 2019-12-13 2020-03-24 中国人民解放军军事科学院国防科技创新研究院 一种波向探测方法、系统、设备、介质
CN111414958A (zh) * 2020-03-18 2020-07-14 燕山大学 一种视觉词袋金字塔的多特征图像分类方法及系统
CN111988611A (zh) * 2020-07-24 2020-11-24 北京达佳互联信息技术有限公司 量化偏移信息的确定方法、图像编码方法、装置及电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101477626A (zh) * 2009-01-16 2009-07-08 清华大学 一种在复杂场景的视频中进行人体头肩检测的方法
CN102043953A (zh) * 2011-01-27 2011-05-04 北京邮电大学 一种实时鲁棒的针对特定场景的行人检测方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101477626A (zh) * 2009-01-16 2009-07-08 清华大学 一种在复杂场景的视频中进行人体头肩检测的方法
CN102043953A (zh) * 2011-01-27 2011-05-04 北京邮电大学 一种实时鲁棒的针对特定场景的行人检测方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
崔国庆: "视频中的行人检测与异常行为检测方法研究", 《中国优秀硕士学位论文全文数据库(电子期刊)信息科技辑》, no. 10, 15 October 2010 (2010-10-15), pages 1 - 64 *

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103514453A (zh) * 2012-06-15 2014-01-15 富士通株式会社 对象识别设备和方法
CN103514453B (zh) * 2012-06-15 2017-07-11 富士通株式会社 对象识别设备和方法
CN103336965B (zh) * 2013-07-18 2016-08-31 国家电网公司 基于轮廓差异及区块主方向直方图的前景与特征提取方法
CN103336965A (zh) * 2013-07-18 2013-10-02 江西省电力公司检修分公司 基于轮廓差异及区块主方向直方图的前景与特征提取方法
CN105323419A (zh) * 2014-07-25 2016-02-10 能晶科技股份有限公司 产生方位图像的方法
CN105323419B (zh) * 2014-07-25 2018-07-31 能晶科技股份有限公司 产生方位图像的方法
CN105788254A (zh) * 2016-03-25 2016-07-20 上海美迪索科电子科技有限公司 一种区分车辆和行人通过的地面检测方法及其检测装置
CN106303501B (zh) * 2016-08-23 2018-12-04 深圳市捷视飞通科技股份有限公司 基于图像稀疏特征匹配的立体图像重构方法及装置
CN106303501A (zh) * 2016-08-23 2017-01-04 深圳市捷视飞通科技股份有限公司 基于图像稀疏特征匹配的立体图像重构方法及装置
CN107122714B (zh) * 2017-03-28 2020-05-26 天棣网络科技(上海)有限公司 一种基于边缘约束的实时行人检测方法
CN107122714A (zh) * 2017-03-28 2017-09-01 天棣网络科技(上海)有限公司 一种基于边缘约束的实时行人检测方法
CN110464379A (zh) * 2018-05-11 2019-11-19 深圳市理邦精密仪器股份有限公司 一种胎儿头围测量方法、装置及终端设备
CN110569683B (zh) * 2018-06-06 2023-06-09 伟诠电子股份有限公司 条码检测方法及条码检测系统
CN110569683A (zh) * 2018-06-06 2019-12-13 伟诠电子股份有限公司 条码检测方法及条码检测系统
CN108985351B (zh) * 2018-06-27 2021-11-26 北京中安未来科技有限公司 一种基于梯度方向稀疏特征信息识别模糊图像的方法和装置、计算设备及存储介质
CN108985351A (zh) * 2018-06-27 2018-12-11 北京中安未来科技有限公司 一种基于梯度方向稀疏特征信息识别模糊图像的方法和装置、计算设备及存储介质
CN110517245B (zh) * 2019-08-20 2021-09-07 北京远舢智能科技有限公司 一种机械设备故障诊断系统
CN110517245A (zh) * 2019-08-20 2019-11-29 北京远舢智能科技有限公司 一种机械设备故障诊断系统
CN110907132A (zh) * 2019-12-13 2020-03-24 中国人民解放军军事科学院国防科技创新研究院 一种波向探测方法、系统、设备、介质
CN111414958A (zh) * 2020-03-18 2020-07-14 燕山大学 一种视觉词袋金字塔的多特征图像分类方法及系统
CN111414958B (zh) * 2020-03-18 2022-02-08 燕山大学 一种视觉词袋金字塔的多特征图像分类方法及系统
CN111988611A (zh) * 2020-07-24 2020-11-24 北京达佳互联信息技术有限公司 量化偏移信息的确定方法、图像编码方法、装置及电子设备
CN111988611B (zh) * 2020-07-24 2024-03-05 北京达佳互联信息技术有限公司 量化偏移信息的确定方法、图像编码方法、装置及电子设备

Also Published As

Publication number Publication date
CN102243706B (zh) 2014-12-10

Similar Documents

Publication Publication Date Title
CN102243706B (zh) 基于目标边缘方向的目标分类方法和系统
Yousaf et al. Visual analysis of asphalt pavement for detection and localization of potholes
Yang et al. Vehicle detection in intelligent transportation systems and its applications under varying environments: A review
Zangenehpour et al. Automated classification based on video data at intersections with heavy pedestrian and bicycle traffic: Methodology and application
Chen et al. Turn signal detection during nighttime by CNN detector and perceptual hashing tracking
Liu et al. A vision-based pipeline for vehicle counting, speed estimation, and classification
CN101670835B (zh) 道路车道标志检测
Wang et al. Robust and real-time traffic lights recognition in complex urban environments
Aminuddin et al. A new approach to highway lane detection by using Hough transform technique
Wang et al. License plate detection using gradient information and cascade detectors
Ding et al. Fast lane detection based on bird’s eye view and improved random sample consensus algorithm
Tourani et al. Motion-based vehicle speed measurement for intelligent transportation systems
Billones et al. Vehicle detection and tracking using corner feature points and artificial neural networks for a vision-based contactless apprehension system
Telagarapu et al. A novel traffic-tracking system using morphological and Blob analysis
Chen Road vehicle recognition algorithm in safety assistant driving based on artificial intelligence
Xuan et al. Robust lane-mark extraction for autonomous driving under complex real conditions
Dai et al. A driving assistance system with vision based vehicle detection techniques
CN103680148A (zh) 一种出租车识别方法
Du et al. The fast lane detection of road using RANSAC algorithm
de Goma et al. Detecting red-light runners (RLR) and speeding violation through video capture
Chen et al. A forward collision avoidance system adopting multi-feature vehicle detection
Brehar et al. A study of the impact of HOG and LBP based temporal association on far infrared pedestrian detection
Dastjerdi et al. Automatic license plate detection system based on the point weighting and template matching
Momin et al. Vehicle detection in video surveillance system using Symmetrical SURF
Nazir et al. Vehicle detection on embedded single board computers

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: HANGZHOU HIKVISION DIGITAL TECHNOLOGY CO., LTD.

Free format text: FORMER OWNER: HANGZHOU HAIKANG WEISHI SOFTWARE CO., LTD.

Effective date: 20121024

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20121024

Address after: Hangzhou City, Zhejiang province 310051 Binjiang District East Road Haikang Science Park No. 700, No. 1

Applicant after: Hangzhou Hikvision Digital Technology Co., Ltd.

Address before: Hangzhou City, Zhejiang province 310051 Binjiang District East Road Haikang Science Park No. 700, No. 1

Applicant before: Hangzhou Haikang Weishi Software Co., Ltd.

C14 Grant of patent or utility model
GR01 Patent grant