CN105894701A - 输电线路防外破大型施工车辆的识别报警方法 - Google Patents

输电线路防外破大型施工车辆的识别报警方法 Download PDF

Info

Publication number
CN105894701A
CN105894701A CN201610207675.2A CN201610207675A CN105894701A CN 105894701 A CN105894701 A CN 105894701A CN 201610207675 A CN201610207675 A CN 201610207675A CN 105894701 A CN105894701 A CN 105894701A
Authority
CN
China
Prior art keywords
value
vehicle
large construction
pixel
caching
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610207675.2A
Other languages
English (en)
Other versions
CN105894701B (zh
Inventor
袁杰
曹震
吴鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
State Grid Jiangsu Electric Power Co Ltd
Jiangsu Electric Power Information Technology Co Ltd
Original Assignee
State Grid Jiangsu Electric Power Co Ltd
Jiangsu Electric Power Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by State Grid Jiangsu Electric Power Co Ltd, Jiangsu Electric Power Information Technology Co Ltd filed Critical State Grid Jiangsu Electric Power Co Ltd
Priority to CN201610207675.2A priority Critical patent/CN105894701B/zh
Publication of CN105894701A publication Critical patent/CN105894701A/zh
Application granted granted Critical
Publication of CN105894701B publication Critical patent/CN105894701B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/30Noise filtering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/40Scenes; Scene-specific elements in video content
    • G06V20/46Extracting features or characteristics from the video content, e.g. video fingerprints, representative shots or key frames
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/08Detecting or categorising vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • General Engineering & Computer Science (AREA)
  • Image Analysis (AREA)
  • Traffic Control Systems (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种输电线路防外破大型施工车辆的识别报警方法,该方法基于视频图像处理,检测出大型施工车辆的经过、停留、扬臂情况并进行报警,包括对摄像头获取的当前图像帧进行高斯模糊预处理;使用混合高斯建模的方法进行背景建模和前景识别;使用颜色差法消除运动目标的阴影;根据设定的像素阈值进行目标过滤,过滤后进行角点检测,提取每个前景区域的特征;使用预先训练好的SVM分类器进行车型判断。然后进行大型施工车辆经过报警。本发明能检测各种大型施工车辆的经过、停留、扬臂情况并进行报警;能克服其它基于颜色的方法存在的只能检测特定某种颜色车辆的缺点,达到更好的查全率和查准率。

Description

输电线路防外破大型施工车辆的识别报警方法
技术领域
本发明属于输电线路防外破领域,涉及一种输电线路防外破施工车辆的识别报警方法。
背景技术
基于智能视频分析的输电线路在线监测装置所采用的算法按其是否对检测目标进行识别可以分为两类:一类只检测出入侵目标并进行统一标识,将检测结果提交给用户进行人工分辨决策;另一类首先检测入侵目标,然后采用人工智能、机器学习、模式识别等技术对入侵目标进行识别分类,将分好类的结果提交给用户。第一类方法一般只用于前景运动物体不多的情况,当前景运动物体较多时,其检测出的大量无效目标会将真正有效的目标淹没。而第二类方法对技术要求更高。
第一类算法难点在于运动目标进行检测。运动目标检测按原理划分可以分为三类:光流法、帧间差分法和背景减除法。光流法是基于对光流场的估计进行检测的分割方法景减除法。光流法是基于对光流场的估计进行检测的分割方法,其计算量巨大,算法也十分复杂,实时性差,对输电线路大型机械入侵检测并不适用。帧间差分法使用图像序列间的差分检测来确定运动目标,算法简单容易实现,但当目标运动缓慢或速度很快时,提取的目标不能接近其真实形状。背景减除法是当前主流的运动目标检测算法,它是将视频图像与背景参考图像进行差分,前景点即是运动目标。它处理速度快,对不同场景的适应性很强,能比较准确地提取出目标的真实形状。
第二类算法首先也需要进行运动目标检测,然后对入侵目标进行识别分类,其难点主要在于目标识别,即判断运动目标是否是吊车、水泥泵车等大型施工车辆。文献【输电线路中反大型机械外力破坏的智能预警功能的实现】中使用背景减除法进行背景检测,并使用颜色作为大型机械的图像特征,对它进行建模。根据吊臂区域面积、偏心率和紧密度进行吊臂检测,使用HOUGH变换计算吊臂伸展角度,根据与输电线路间的距离发出警报。文献【输电线路监控系统中运动目标的智能检测与识别】使用基于颜色的特征在前景目标中识别出大型机械,然后定位吊车轮,采用面积、偏心率和紧密度3个指标作为分类器特征向量的输入,来识别吊臂,并进而识别危险行为。这两篇文献中的方法都采用颜色特征进行目标识别,认为吊车的颜色是黄色的。在实际应用中,当出现非黄色的吊车时,其效果就很差。
发明内容
本发明的目的是提供一种输电线路防外破施工车辆的识别报警方法。该方法用于实现在输电线路保护区域内基于视频图像处理识别出大型施工车辆,能检测各种大型施工车辆的经过、停留、扬臂情况并进行报警;采用对颜色不敏感的特征,其能克服其它基于颜色的方法存在的只能检测特定某种颜色车辆的缺点,达到更好的查全率和查准率。
本发明的目的通过以下技术方案实现:
一种输电线路防外破大型施工车辆的识别报警方法,其特征在于:该方法基于视频图像处理,检测出大型施工车辆的经过、停留、扬臂情况并进行报警,包括以下步骤:
(1)对摄像头获取的当前图像帧进行高斯模糊预处理;
(2)使用混合高斯建模的方法进行背景建模和前景识别;
(3)使用颜色差法消除运动目标的阴影;
(4)根据设定的像素阈值进行目标过滤,过滤后进行角点检测,提取每个前景区域的特征;
(5)当缓存非空时,使用感知哈希算法判断是否有大型施工车辆停留,当有车停留时进一步判断是否超过时间阈值,如超过,则进行停车报警;
(6)对每个前景区域,使用预先训练好的SVM分类器进行车型判断。如判断为大型施工车辆,则计算当前区域的哈希值,并将当前区域的位置、大小、哈希值、时间戳存入缓存或更新缓存中相应记录的值,然后进行大型施工车辆经过报警;
(7)当车型判断为非大型施工车辆时,则检测是否扬臂,如是扬臂,则检测车体是否停留,如是,则进行扬臂报警,其它情况均不报警。
所述的对摄像头获取的当前图像帧进行高斯模糊预处理步骤为:
首先将图像从YUV颜色空间转换成RGB颜色空间,进一步将其转换成灰度图,然后选用如下二维高斯函数对其进行模糊:
G ( x , y ) = 1 2 πσ 2 e - ( x 2 + y 2 ) / 2 σ 2
上式中x,y为一个二维向量的两个分量,σ为标准差,取σ=1.5,并将权值矩阵进行归一化,得模糊权值矩阵为
0.0947416 0.118318 0.0947416 0.118318 0.147761 0.118318 0.0947416 0.118318 0.0947416
所述的使用混合高斯建模的方法进行背景建模和前景识别的步骤为:
31)背景建模:
设定混合高斯模型由5个高斯函数组成,首先模型中每个高斯函数的均值、方差、权值都设置为0,即初始化模型矩阵参数。
采用视频中的30帧用来训练混合高斯模型。对每一个像素而言,建立其混合高斯模型。当第一个像素来,为其设置固定的初始均值,方差,并且每个权值均设置为0.2。
非第一帧训练过程中,当后面来的像素值时,与前面已有的高斯函数的均值比较,如果该像素点的值与其模型均值差在3倍的方差内,则认为该点属于该高斯函数。此时用如下方程进行更新:
π ^ m ← π ^ m + α ( O m ( t ) - π ^ m ) ,
μ → ^ m ← μ → ^ m + O m ( t ) ( a π ^ m ) δ m → ,
σ ^ m 2 ← σ ^ m 2 + O m ( t ) ( α / π ^ m ) ( δ → m T δ → m - σ ^ m 2 ) ,
其中,为第m个高斯函数的权重,为第m个高斯函数的均值,为第m个高斯函数的方差,为第m个高斯函数的标准差,为t时刻第m个高斯函数的二值权重,其取值为0或1, 为1。
当该像素点值与均值的差不在其3倍的方差内时,取为0。
当到达训练的帧数30后,进行不同像素点混合高斯模型个数自适应的选择。首先用权值除以方差对各个高斯进行从大到小排序,然后选取最前面B个高斯,使其满足其中
cf为截断误差,一般设为0.3。
然后将累积权重归一化为1。
32)前景识别:针对复杂动态的图像帧,对每个像素点按上步学习的不同权值的多个高斯分布的叠加来建模,当当前像素点的值与建模的均值偏差在2.5σ内时,则认为该像素属于背景,否则属于前景。
所述的使用颜色差法消除运动目标的阴影的步骤为:。
因被阴影覆盖的像素点亮度更暗一些,但是仍然具有色彩饱和度(H,S分量),所以,对这样一个阴影点(x,y),有下式:
SP值为1时表示当前像素为阴影像素,为0时表示不是。上式中0<<α,β,τH,τS<1,β=0.94;α=0.8,τH,τS均取0.15。It(x,y)V是当前图像帧t时刻(x,y)位置的V分量的值,Bt(x,y)V是使用混合高斯建模得到的背景图像在t时刻(x,y)位置的V分量的值;It(x,y)H是当前图像帧t时刻(x,y)位置的H分量的值,Bt(x,y)H是使用混合高斯建模得到的背景图像在t时刻(x,y)位置的H分量的值;It(x,y)S是当前图像帧t时刻(x,y)位置的S分量的值,Bt(x,y)S是使用混合高斯建模得到的背景图像在t时刻(x,y)位置的S分量的值。FPMTL是前景图像区域标志位。
所述的根据设定的像素数值进行目标过滤,过滤后进行角点检测,提取特征然后使用预先训练好的分类器进行车型判断的步骤为:
51)目标过滤:根据检测的前景目标图像,测定其像素值,将面积小于400像素的目标全部过滤掉,不作为研究对象。
52)角点检测:采用Harris角点检测方法检测角点,定义角点响应函数R为:R=λ1λ2-k(λ12)2
上式中k=0.05,λ1,λ2分别是平移窗口灰度变化矩阵的两个特征值。对所有像素计算其角点响应函数R,只有当满足R>threshold且R是局部极大值时才认为R是一个角点,此处取threshold的值是角点响应函数R的最大值的0.01。
53)特征提取:对于每一个前景区域,取其角点分布数、角点分布密度、图像面积的三个特征作为此前景区域的特征向量。
所述的当缓存非空时,使用感知哈希算法判断是否有大型施工车辆停留,当有车停留时进一步判断是否超过时间阈值,如超过,则进行停车报警步骤为:
61)计算目标区域哈希值:
将与缓存中目标区域位置相同的当前图像帧中该区域缩小尺寸,将图片缩小到8x8的尺寸,总共64个像素,再将8x8的小图片转换成灰度图像,然后计算所有64个像素的灰度平均值,最后将每个像素的灰度值与平均值进行比较,大于或等于平均值记为1,小于平均值记为0,将所有二进制数组合在一起,就构成了一个64位的二进制数,即这张图片的指纹。
62)哈希值比较与停车报警:
将上步得到的哈希值与缓存中存储的哈希值逐一比较。如两值相似或相同,则认为有大型施工车辆停留,进一步判断是否超过时间阈值,如超过,则进行停车报警。两值相似或相同定义为两个64位二进制数有90%以上的值相同,即57位及以上相同。时间阈值设置为30秒。
所述的对每个前景区域,使用预先训练好的SVM分类器进行车型判断。如判断为大型施工车辆,则计算当前区域的哈希值,并将当前区域的位置、大小、哈希值存入缓存或更新缓存中相应记录的值,然后进行大型施工车辆经过报警步骤为:
71)车型判断:
对每个前景区域,将前面提取的角点分布数、角点分布密度、图像面积等特征组成一个特征向量V(x1,x2,x3),输入预先训练好的SVM分类器进行车型判断。
SVM训练时采集大量车辆样本,将大型施工车辆图像对应的类别标签值设为1,非大型施工车辆图像类别标签值设为0,进行参数学习。此处分类器使用的核函数是径向基函数
K(x,y)=exp(-|x-y|2/d2)
其中,x,y为两个特征向量,d为函数的宽度参数,控制了函数的径向作用范围。
72)车辆经过报警:
如判断为大型施工车辆,则计算当前区域的哈希值,并将此值与缓存中的每个哈希值比较,如两值相似或相同,则认为是同一辆车,将当前区域的位置、大小、哈希值、时间戳更新缓存中对应的记录。如找不到相似或相同的哈希值,则将当前区域的位置、大小、哈希值、时间戳存入缓存。以上两种情况都进行大型施工车辆经过报警。两值相似或相同同样定义为相同的二进制位达到90%以上。
所述的当车型判断为非大型施工车辆时,则检测是否扬臂,如是扬臂,则检测车体是否停留,如是,则进行扬臂报警,其它情况均不报警步骤为:
81)扬臂检测:
当车型判断为非大型施工车辆时,根据当前前景区域最小外接可旋转矩形,分析其宽高比,如宽高比小于1则判定此处存在车辆扬臂可能。
82)车体停留检测:
当缓存非空时,将当前前景区域的最小外接可旋转矩形与缓存中每条记录的外接矩形区域进行范围相交判断,如两矩形有交集且缓存中区域在当前区域下方,则认为缓存中区域为车体。
83)扬臂报警
本发明用于实现在输电线路保护区域内识别出大型施工车辆,基于视频图像处理,能检测各种大型施工车辆的经过、停留、扬臂情况并进行报警,判断车体停留时间是否超过阈值,如超过,则进行扬臂报警。另外,由于采用对颜色不敏感的特征,其能克服其它基于颜色的方法存在的只能检测特定某种颜色车辆的缺点,达到更好的查全率和查准率。
附图说明
图1是基于视频图像处理的防外破方法流程图;
具体实施方式
为了更好的理解本发明的技术方案,以下结合附图1对本发明作进一步的描述。附图1描述了一种基于视频图像处理的输电线路防外破大型施工车辆识别报警方法,包括以下步骤:
(1)对摄像头获取的当前图像帧进行高斯模糊预处理;
(2)使用混合高斯建模的方法进行背景建模和前景识别;
(3)使用颜色差法消除运动目标的阴影;
(4)根据设定的像素阈值进行目标过滤,过滤后进行角点检测,提取每个前景区域的特征;
(5)当缓存非空时,使用感知哈希算法判断是否有大型施工车辆停留,当有车停留时进一步判断是否超过时间阈值,如超过,则进行停车报警;
(6)对每个前景区域,使用预先训练好的SVM分类器进行车型判断。如判断为大型施工车辆,则计算当前区域的哈希值,并将当前区域的位置、大小、哈希值、时间戳存入缓存或更新缓存中相应记录的值,然后进行大型施工车辆经过报警;
(7)当车型判断为非大型施工车辆时,则检测是否扬臂,如是扬臂,则检测车体是否停留,如是,则进行扬臂报警,其它情况均不报警。
所述的对摄像头获取的当前图像帧进行高斯模糊预处理步骤为:
首先将图像从YUV颜色空间转换成RGB颜色空间,进一步将其转换成灰度图,然后选用如下二维高斯函数对其进行模糊:
G ( x , y ) = 1 2 πσ 2 e - ( x 2 + y 2 ) / 2 σ 2
上式中x,y为一个二维向量的两个分量,σ为标准差,取σ=1.5,并将权值矩阵进行归一化,得模糊权值矩阵为
0.0947416 0.118318 0.0947416 0.118318 0.147761 0.118318 0.0947416 0.118318 0.0947416
所述的使用混合高斯建模的方法进行背景建模和前景识别的步骤为:
1)背景建模:
设定混合高斯模型由5个高斯函数组成,首先模型中每个高斯函数的均值、方差、权值都设置为0,即初始化模型矩阵参数。
采用视频中的30帧用来训练混合高斯模型。对每一个像素而言,建立其混合高斯模型。当第一个像素来,为其设置固定的初始均值,方差,并且每个权值均设置为0.2。
非第一帧训练过程中,当后面来的像素值时,与前面已有的高斯函数的均值比较,如果该像素点的值与其模型均值差在3倍的方差内,则认为该点属于该高斯函数。此时用如下方程进行更新:
π ^ m ← π ^ m + α ( O m ( t ) - π ^ m ) ,
μ → ^ m ← μ → ^ m + O m ( t ) ( a π ^ m ) δ m → ,
σ ^ m 2 ← σ ^ m 2 + O m ( t ) ( α / π ^ m ) ( δ → m T δ → m - σ ^ m 2 ) ,
其中,为第m个高斯函数的权重,为第m个高斯函数的均值,为第m个高斯函数的方差,为第m个高斯函数的标准差,为t时刻第m个高斯函数的二值权重,其取值为0或1, 为1。
当该像素点值与均值的差不在其3倍的方差内时,取为0。
当到达训练的帧数30后,进行不同像素点混合高斯模型个数自适应的选择。首先用权值除以方差对各个高斯进行从大到小排序,然后选取最前面B个高斯,使其满足其中
cf为截断误差,一般设为0.3。
然后将累积权重归一化为1。
2)前景识别:针对复杂动态的图像帧,对每个像素点按上步学习的不同权值的多个高斯分布的叠加来建模,当当前像素点的值与建模的均值偏差在2.5σ内时,则认为该像素属于背景,否则属于前景。
所述的使用颜色差法消除运动目标的阴影的步骤为:。
因被阴影覆盖的像素点亮度更暗一些,但是仍然具有色彩饱和度(H,S分量),所以,对这样一个阴影点(x,y),有下式:
SP值为1时表示当前像素为阴影像素,为0时表示不是。上式中0<<α,β,τH,τS<1,β=0.94;α=0.8,τH,τS均取0.15。It(x,y)V是当前图像帧t时刻(x,y)位置的V分量的值,Bt(x,y)V是使用混合高斯建模得到的背景图像在t时刻(x,y)位置的V分量的值;It(x,y)H是当前图像帧t时刻(x,y)位置的H分量的值,Bt(x,y)H是使用混合高斯建模得到的背景图像在t时刻(x,y)位置的H分量的值;It(x,y)S是当前图像帧t时刻(x,y)位置的S分量的值,Bt(x,y)S是使用混合高斯建模得到的背景图像在t时刻(x,y)位置的S分量的值。FPMTL是前景图像区域标志位。
所述的根据设定的像素数值进行目标过滤,过滤后进行角点检测,提取特征然后使用预先训练好的分类器进行车型判断的步骤为:
1)目标过滤:根据检测的前景目标图像,测定其像素值,将面积小于400像素的目标全部过滤掉,不作为研究对象。
2)角点检测:采用Harris角点检测方法检测角点,定义角点响应函数R为:R=λ1λ2-k(λ12)2
上式中k=0.05,λ1,λ2分别是平移窗口灰度变化矩阵的两个特征值。对所有像素计算其角点响应函数R,只有当满足R>threshold且R是局部极大值时才认为R是一个角点,此处取threshold的值是角点响应函数R的最大值的0.01。
3)特征提取:对于每一个前景区域,取其角点分布数、角点分布密度、图像面积的三个特征作为此前景区域的特征向量。
所述的当缓存非空时,使用感知哈希算法判断是否有大型施工车辆停留,当有车停留时进一步判断是否超过时间阈值,如超过,则进行停车报警步骤为:
1)计算目标区域哈希值:
将与缓存中目标区域位置相同的当前图像帧中该区域缩小尺寸,将图片缩小到8x8的尺寸,总共64个像素,再将8x8的小图片转换成灰度图像,然后计算所有64个像素的灰度平均值,最后将每个像素的灰度值与平均值进行比较,大于或等于平均值记为1,小于平均值记为0,将所有二进制数组合在一起,就构成了一个64位的二进制数,即这张图片的指纹。
2)哈希值比较与停车报警:
将上步得到的哈希值与缓存中存储的哈希值逐一比较。如两值相似或相同,则认为有大型施工车辆停留,进一步判断是否超过时间阈值,如超过,则进行停车报警。两值相似或相同定义为两个64位二进制数有90%以上的值相同,即57位及以上相同。时间阈值设置为30秒。
所述的对每个前景区域,使用预先训练好的SVM分类器进行车型判断。如判断为大型施工车辆,则计算当前区域的哈希值,并将当前区域的位置、大小、哈希值存入缓存或更新缓存中相应记录的值,然后进行大型施工车辆经过报警步骤为:
1)车型判断:
对每个前景区域,将前面提取的角点分布数、角点分布密度、图像面积等特征组成一个特征向量V(x1,x2,x3),输入预先训练好的SVM分类器进行车型判断。
SVM训练时采集大量车辆样本,将大型施工车辆图像对应的类别标签值设为1,非大型施工车辆图像类别标签值设为0,进行参数学习。此处分类器使用的核函数是径向基函数
K(x,y)=exp(-|x-y|2/d2)
其中,x,y为两个特征向量,d为函数的宽度参数,控制了函数的径向作用范围。
2)车辆经过报警:
如判断为大型施工车辆,则计算当前区域的哈希值,并将此值与缓存中的每个哈希值比较,如两值相似或相同,则认为是同一辆车,将当前区域的位置、大小、哈希值、时间戳更新缓存中对应的记录。如找不到相似或相同的哈希值,则将当前区域的位置、大小、哈希值、时间戳存入缓存。以上两种情况都进行大型施工车辆经过报警。两值相似或相同同样定义为相同的二进制位达到90%以上。
所述的当车型判断为非大型施工车辆时,则检测是否扬臂,如是扬臂,则检测车体是否停留,如是,则进行扬臂报警,其它情况均不报警步骤为:
1)扬臂检测:
当车型判断为非大型施工车辆时,根据当前前景区域最小外接可旋转矩形,分析其宽高比,如宽高比小于1则判定此处存在车辆扬臂可能。
2)车体停留检测:
当缓存非空时,将当前前景区域的最小外接可旋转矩形与缓存中每条记录的外接矩形区域进行范围相交判断,如两矩形有交集且缓存中区域在当前区域下方,则认为缓存中区域为车体。
3)扬臂报警
判断车体停留时间是否超过阈值,如超过,则进行扬臂报警。
实施实例
对于监控摄像头获取的图像,给出了使用基于视频图像处理的输电线路防外破方法的实例。下面结合本发明的方法详细说明该实例实施的具体步骤,如下:
对于监控摄像头获取的图像,
(1)对监控摄像头获取的当前图像帧进行高斯模糊预处理。
(2)采用混合高斯建模的方法进行背景建模和前景识别,然后对图像进行阴影检测消除。
(3)根据设定的像素数值进行目标过滤,过滤后进行角点检测,得到角点检测结果,提取特征然后使用预先训练好的分类器进行车型判断。
(4)当缓存非空时,使用感知哈希算法判断是否有大型施工车辆停留,使用感知哈希算法处理图片,当有车停留时进一步判断是否超过时间阈值,如超过,则进行停车报警。
对每个前景区域,使用预先训练好的SVM分类器进行车型判断。如判断为大型施工车辆,则计算当前区域的哈希值,并将当前区域的位置、大小、哈希值存入缓存或更新缓存中相应记录的值,然后进行大型施工车辆经过报警,当车型判断为非大型施工车辆时,则检测是否扬臂,如是扬臂,则检测车体是否停留,如是则进行扬臂报警,其它情况均不报警。

Claims (8)

1.一种输电线路防外破大型施工车辆的识别报警方法,其特征在于:该方法基于视频图像处理,检测出大型施工车辆的经过、停留、扬臂情况并进行报警,包括以下步骤:
(1)对摄像头获取的当前图像帧进行高斯模糊预处理;
(2)使用混合高斯建模的方法进行背景建模和前景识别;
(3)使用颜色差法消除运动目标的阴影;
(4)根据设定的像素阈值进行目标过滤,过滤后进行角点检测,提取每个前景区域的特征;
(5)当缓存非空时,使用感知哈希算法判断是否有大型施工车辆停留,当有车停留时进一步判断是否超过时间阈值,如超过,则进行停车报警;
(6)对每个前景区域,使用预先训练好的SVM分类器进行车型判断,如判断为大型施工车辆,则计算当前区域的哈希值,并将当前区域的位置、大小、哈希值、时间戳存入缓存或更新缓存中相应记录的值,然后进行大型施工车辆经过报警;
(7)当车型判断为非大型施工车辆时,则检测是否扬臂,如是扬臂,则检测车体是否停留,如是,则进行扬臂报警,其它情况均不报警。
2.根据权利要求1所述的输电线路防外破大型施工车辆的识别报警方法,其特征在于:所述的对摄像头获取的当前图像帧进行高斯模糊预处理步骤为:
首先将图像从YUV颜色空间转换成RGB颜色空间,进一步将其转换成灰度图,然后选用如下二维高斯函数对其进行模糊:
G ( x , y ) = 1 2 πσ 2 e - ( x 2 + y 2 ) / 2 σ 2
上式中x,y为一个二维向量的两个分量,σ为标准差,取σ=1.5,并将权值矩阵进行归一化,得模糊权值矩阵为
0.0947416 0.118318 0.0947416 0.118318 0.147761 0.118318 0.0947416 0.118318 0.0947416 .
3.根据权利要求1所述的输电线路防外破大型施工车辆的识别报警方法,其特征在于:所述的使用混合高斯建模的方法进行背景建模和前景识别的步骤为:
31)背景建模:
设定混合高斯模型由5个高斯函数组成,首先模型中每个高斯函数的均值、方差、权值都设置为0,即初始化模型矩阵参数;
采用视频中的30帧用来训练混合高斯模型,对每一个像素而言,建立其混合高斯模型,当第一个像素来,为其设置固定的初始均值,方差,并且每个权值均设置为0.2;
非第一帧训练过程中,当后面来的像素值时,与前面已有的高斯函数的均值比较,如果该像素点的值与其模型均值差在3倍的方差内,则认为该点属于该高斯函数,此时用如下方程进行更新:
其中,为第m个高斯函数的权重,为第m个高斯函数的均值,为第m个高斯函数的方差,为第m个高斯函数的标准差,为t时刻第m个高斯函数的二值权重,其取值为0或1,为1;
当该像素点值与均值的差不在其3倍的方差内时,取为0;
当到达训练的帧数30后,进行不同像素点混合高斯模型个数自适应的选择,首先用权值除以方差对各个高斯进行从大到小排序,然后选取最前面B个高斯,使其满足其中
cf为截断误差,一般设为0.3;
然后将累积权重归一化为1;
32)前景识别:针对复杂动态的图像帧,对每个像素点按上步学习的不同权值的多个高斯分布的叠加来建模,当当前像素点的值与建模的均值偏差在2.5σ内时,则认为该像素属于背景,否则属于前景。
4.根据权利要求1所述的输电线路防外破大型施工车辆的识别报警方法,其特征在于:所述的使用颜色差法消除运动目标的阴影的步骤为:
因被阴影覆盖的像素点亮度更暗一些,但是仍然具有色彩饱和度(H,S分量),所以,对这样一个阴影点(x,y),有下式:
SP值为1时表示当前像素为阴影像素,为0时表示不是;上式中0<<α,β,τH,τs<1,β=0.94;α=0.8,τH,τs均取0.15,It(x,y)V是当前图像帧t时刻(x,y)位置的V分量的值,Bt(x,y)V是使用混合高斯建模得到的背景图像在t时刻(x,y)位置的V分量的值;It(x,y)H是当前图像帧t时刻(x,y)位置的H分量的值,Bt(x,y)H是使用混合高斯建模得到的背景图像在t时刻(x,y)位置的H分量的值;It(x,y)S是当前图像帧t时刻(x,y)位置的S分量的值,Bt(x,y)S是使用混合高斯建模得到的背景图像在t时刻(x,y)位置的S分量的值,FPMTL是前景图像区域标志位。
5.根据权利要求1所述的输电线路防外破大型施工车辆的识别报警方法,其特征在于:所述的根据设定的像素数值进行目标过滤,过滤后进行角点检测,提取特征然后使用预先训练好的分类器进行车型判断的步骤为:
51)目标过滤:根据检测的前景目标图像,测定其像素值,将面积小于400像素的目标全部过滤掉,不作为研究对象;
52)角点检测:采用Harris角点检测方法检测角点,定义角点响应函数R为:R=λ1λ2-k(λ12)2
上式中k=0.05,λ1,λ2分别是平移窗口灰度变化矩阵的两个特征值,对所有像素计算其角点响应函数R,只有当满足R>threshold且R是局部极大值时才认为R是一个角点,此处取threshold的值是角点响应函数R的最大值的0.01;
53)特征提取:对于每一个前景区域,取其角点分布数、角点分布密度、图像面积的三个特征作为此前景区域的特征向量。
6.根据权利要求1所述的输电线路防外破大型施工车辆的识别报警方法,其特征在于:所述的当缓存非空时,使用感知哈希算法判断是否有大型施工车辆停留,当有车停留时进一步判断是否超过时间阈值,如超过,则进行停车报警步骤为:
61)计算目标区域哈希值:
将与缓存中目标区域位置相同的当前图像帧中该区域缩小尺寸,将图片缩小到8x8的尺寸,总共64个像素,再将8x8的小图片转换成灰度图像,然后计算所有64个像素的灰度平均值,最后将每个像素的灰度值与平均值进行比较,大于或等于平均值记为1,小于平均值记为0,将所有二进制数组合在一起,就构成了一个64位的二进制数,即这张图片的指纹;
62)哈希值比较与停车报警:
将上步得到的哈希值与缓存中存储的哈希值逐一比较,如两值相似或相同,则认为有大型施工车辆停留,进一步判断是否超过时间阈值,如超过,则进行停车报警,两值相似或相同定义为两个64位二进制数有90%以上的值相同,即57位及以上相同。时间阈值设置为30秒。
7.根据权利要求1所述的输电线路防外破大型施工车辆的识别报警方法,其特征在于:所述的对每个前景区域,使用预先训练好的SVM分类器进行车型判断,如判断为大型施工车辆,则计算当前区域的哈希值,并将当前区域的位置、大小、哈希值存入缓存或更新缓存中相应记录的值,然后进行大型施工车辆经过报警步骤为:
71)车型判断:
对每个前景区域,将前面提取的角点分布数、角点分布密度、图像面积等特征组成一个特征向量V(x1,x2,x3),输入预先训练好的SVM分类器进行车型判断;
SVM训练时采集大量车辆样本,将大型施工车辆图像对应的类别标签值设为1,非大型施工车辆图像类别标签值设为0,进行参数学习,此处分类器使用的核函数是径向基函数
K(x,y)=exp(-|x-y|2/d2)
其中,x,y为两个特征向量,d为函数的宽度参数,控制了函数的径向作用范围;
72)车辆经过报警:
如判断为大型施工车辆,则计算当前区域的哈希值,并将此值与缓存中的每个哈希值比较,如两值相似或相同,则认为是同一辆车,将当前区域的位置、大小、哈希值、时间戳更新缓存中对应的记录,如找不到相似或相同的哈希值,则将当前区域的位置、大小、哈希值、时间戳存入缓存,以上两种情况都进行大型施工车辆经过报警,两值相似或相同同样定义为相同的二进制位达到90%以上。
8.根据权利要求1所述的输电线路防外破大型施工车辆的识别报警方法,其特征在于:所述的当车型判断为非大型施工车辆时,则检测是否扬臂,如是扬臂,则检测车体是否停留,如是,则进行扬臂报警,其它情况均不报警步骤为:
81)扬臂检测:
当车型判断为非大型施工车辆时,根据当前前景区域最小外接可旋转矩形,分析其宽高比,如宽高比小于1则判定此处存在车辆扬臂可能;
82)车体停留检测:
当缓存非空时,将当前前景区域的最小外接可旋转矩形与缓存中每条记录的外接矩形区域进行范围相交判断,如两矩形有交集且缓存中区域在当前区域下方,则认为缓存中区域为车体;
73)扬臂报警
判断车体停留时间是否超过阈值,如超过,则进行扬臂报警。
CN201610207675.2A 2016-04-05 2016-04-05 输电线路防外破大型施工车辆的识别报警方法 Active CN105894701B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610207675.2A CN105894701B (zh) 2016-04-05 2016-04-05 输电线路防外破大型施工车辆的识别报警方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610207675.2A CN105894701B (zh) 2016-04-05 2016-04-05 输电线路防外破大型施工车辆的识别报警方法

Publications (2)

Publication Number Publication Date
CN105894701A true CN105894701A (zh) 2016-08-24
CN105894701B CN105894701B (zh) 2018-06-29

Family

ID=57012052

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610207675.2A Active CN105894701B (zh) 2016-04-05 2016-04-05 输电线路防外破大型施工车辆的识别报警方法

Country Status (1)

Country Link
CN (1) CN105894701B (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107077617A (zh) * 2017-01-25 2017-08-18 深圳市汇顶科技股份有限公司 指纹提取方法及装置
CN107256250A (zh) * 2017-06-08 2017-10-17 福建中金在线信息科技有限公司 一种图片处理方法、装置、服务器及存储介质
CN108109385A (zh) * 2018-01-18 2018-06-01 南京杰迈视讯科技有限公司 一种输电线防外破的车辆识别与危险行为判别系统与方法
CN108805207A (zh) * 2018-06-13 2018-11-13 江苏电力信息技术有限公司 一种大型施工车辆扬臂检测算法
CN109257576A (zh) * 2018-11-19 2019-01-22 国网四川省电力公司成都供电公司 基于人工智能技术的输电线路防外破监控系统及方法
CN110349172A (zh) * 2019-06-28 2019-10-18 华南理工大学 基于图像处理和双目立体测距的输电线路防外破预警方法
CN110458090A (zh) * 2019-08-08 2019-11-15 成都睿云物联科技有限公司 挖掘机工作状态检测方法、装置、设备和存储介质
CN111079612A (zh) * 2019-12-09 2020-04-28 北京国网富达科技发展有限责任公司 输电线路通道入侵物体停留监测方法及装置
CN111242053A (zh) * 2020-01-16 2020-06-05 国网山西省电力公司电力科学研究院 一种输电线路火焰检测方法及系统
CN111310736A (zh) * 2020-03-26 2020-06-19 上海同岩土木工程科技股份有限公司 一种保护区内车辆卸载堆土的快速识别方法
CN113192340A (zh) * 2021-03-26 2021-07-30 北京中交兴路信息科技有限公司 高速公路施工车辆的识别方法、装置、设备及存储介质
CN113255519A (zh) * 2021-05-25 2021-08-13 江苏濠汉信息技术有限公司 一种输电线路危险车辆吊车扬臂识别系统及多目标跟踪方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101133222B1 (ko) * 2010-04-21 2012-04-05 한국교통대학교산학협력단 영상기반의 사고 검지 시스템 및 방법
CN102930245A (zh) * 2012-09-24 2013-02-13 深圳市捷顺科技实业股份有限公司 一种车辆跟踪方法及系统
CN103714319A (zh) * 2013-12-18 2014-04-09 国家电网公司 一种用于电力线防外力破坏系统的视频入侵检测方法
CN103945197A (zh) * 2014-05-12 2014-07-23 江苏省电力公司常州供电公司 基于视频运动检测技术的电力设施防外破预警方案
CN104103074A (zh) * 2014-07-21 2014-10-15 国家电网公司 汽车作业扬臂阀控识别方法
CN104537788A (zh) * 2015-01-16 2015-04-22 南京理工大学 一种高压输电线路防外破智能图像预警系统及方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101133222B1 (ko) * 2010-04-21 2012-04-05 한국교통대학교산학협력단 영상기반의 사고 검지 시스템 및 방법
CN102930245A (zh) * 2012-09-24 2013-02-13 深圳市捷顺科技实业股份有限公司 一种车辆跟踪方法及系统
CN103714319A (zh) * 2013-12-18 2014-04-09 国家电网公司 一种用于电力线防外力破坏系统的视频入侵检测方法
CN103945197A (zh) * 2014-05-12 2014-07-23 江苏省电力公司常州供电公司 基于视频运动检测技术的电力设施防外破预警方案
CN104103074A (zh) * 2014-07-21 2014-10-15 国家电网公司 汽车作业扬臂阀控识别方法
CN104537788A (zh) * 2015-01-16 2015-04-22 南京理工大学 一种高压输电线路防外破智能图像预警系统及方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张烨,黄新波等: ""输电线路防外力破坏智能预警系统研究"", 《高压电器》 *

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107077617A (zh) * 2017-01-25 2017-08-18 深圳市汇顶科技股份有限公司 指纹提取方法及装置
CN107077617B (zh) * 2017-01-25 2020-08-28 深圳市汇顶科技股份有限公司 指纹提取方法及装置
CN107256250A (zh) * 2017-06-08 2017-10-17 福建中金在线信息科技有限公司 一种图片处理方法、装置、服务器及存储介质
CN108109385B (zh) * 2018-01-18 2022-06-14 南京杰迈视讯科技有限公司 一种输电线防外破的车辆识别与危险行为判别系统与方法
CN108109385A (zh) * 2018-01-18 2018-06-01 南京杰迈视讯科技有限公司 一种输电线防外破的车辆识别与危险行为判别系统与方法
CN108805207A (zh) * 2018-06-13 2018-11-13 江苏电力信息技术有限公司 一种大型施工车辆扬臂检测算法
CN108805207B (zh) * 2018-06-13 2020-08-04 江苏电力信息技术有限公司 一种大型施工车辆扬臂检测方法
CN109257576A (zh) * 2018-11-19 2019-01-22 国网四川省电力公司成都供电公司 基于人工智能技术的输电线路防外破监控系统及方法
CN110349172A (zh) * 2019-06-28 2019-10-18 华南理工大学 基于图像处理和双目立体测距的输电线路防外破预警方法
CN110349172B (zh) * 2019-06-28 2022-12-16 华南理工大学 基于图像处理和双目立体测距的输电线路防外破预警方法
CN110458090A (zh) * 2019-08-08 2019-11-15 成都睿云物联科技有限公司 挖掘机工作状态检测方法、装置、设备和存储介质
CN111079612A (zh) * 2019-12-09 2020-04-28 北京国网富达科技发展有限责任公司 输电线路通道入侵物体停留监测方法及装置
CN111242053A (zh) * 2020-01-16 2020-06-05 国网山西省电力公司电力科学研究院 一种输电线路火焰检测方法及系统
CN111310736A (zh) * 2020-03-26 2020-06-19 上海同岩土木工程科技股份有限公司 一种保护区内车辆卸载堆土的快速识别方法
CN113192340A (zh) * 2021-03-26 2021-07-30 北京中交兴路信息科技有限公司 高速公路施工车辆的识别方法、装置、设备及存储介质
CN113192340B (zh) * 2021-03-26 2022-09-20 北京中交兴路信息科技有限公司 高速公路施工车辆的识别方法、装置、设备及存储介质
CN113255519A (zh) * 2021-05-25 2021-08-13 江苏濠汉信息技术有限公司 一种输电线路危险车辆吊车扬臂识别系统及多目标跟踪方法

Also Published As

Publication number Publication date
CN105894701B (zh) 2018-06-29

Similar Documents

Publication Publication Date Title
CN105894701A (zh) 输电线路防外破大型施工车辆的识别报警方法
Chen et al. UAV image-based forest fire detection approach using convolutional neural network
CN105761261B (zh) 一种检测摄像头遭人为恶意破坏的方法
CN109918971B (zh) 监控视频中人数检测方法及装置
CN105184271A (zh) 一种基于深度学习的车辆自动检测方法
CN107833221A (zh) 一种基于多通道特征融合和机器学习的漏水监测方法
CN111738336A (zh) 基于多尺度特征融合的图像检测方法
CN105868734A (zh) 基于bow图像表征模型的输电线路大型施工车辆识别方法
CN106127812A (zh) 一种基于视频监控的客运站非出入口区域的客流统计方法
CN101715111A (zh) 视频监控中滞留物主自动搜寻方法
CN105096342A (zh) 一种基于傅里叶描述子和方向梯度直方图的入侵检测算法
Jagtap et al. Multi-style license plate recognition using artificial neural network for Indian vehicles
Ghazal et al. License plate automatic detection and recognition using level sets and neural networks
CN108460320A (zh) 基于改进单元分析的监控视频异常事件检测方法
CN111553214A (zh) 一种驾驶员吸烟行为检测方法及系统
CN114332644B (zh) 一种基于视频卫星数据的大视场交通密度获取方法
CN108734716A (zh) 一种基于改进Prewitt算子的火灾复杂环境图像检测方法
Rahman et al. Computer vision based industrial and forest fire detection using support vector machine (SVM)
CN105809699B (zh) 一种基于图分割的车窗提取方法及系统
CN109325426B (zh) 一种基于三正交平面时空特征的黑烟车检测方法
CN106384089A (zh) 基于终生学习的人体可靠检测方法
CN111402185B (zh) 一种图像检测方法及装置
Sarker et al. Illegal trash thrower detection based on HOGSVM for a real-time monitoring system
CN108288041A (zh) 一种行人目标错检去除的预处理方法
Tayo et al. Vehicle license plate recognition using edge detection and neural network

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant