CN104050480A - 基于计算机视觉的吸烟烟雾检测方法 - Google Patents

基于计算机视觉的吸烟烟雾检测方法 Download PDF

Info

Publication number
CN104050480A
CN104050480A CN201410215989.8A CN201410215989A CN104050480A CN 104050480 A CN104050480 A CN 104050480A CN 201410215989 A CN201410215989 A CN 201410215989A CN 104050480 A CN104050480 A CN 104050480A
Authority
CN
China
Prior art keywords
smog
region
doubtful
background
max
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410215989.8A
Other languages
English (en)
Inventor
胡春海
苏翔宇
刘斌
王晓婧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yanshan University
Original Assignee
Yanshan University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yanshan University filed Critical Yanshan University
Priority to CN201410215989.8A priority Critical patent/CN104050480A/zh
Publication of CN104050480A publication Critical patent/CN104050480A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Image Analysis (AREA)

Abstract

本发明公开了一种基于计算机视觉的吸烟烟雾检测方法,其中包括两个阶段:生成分类器阶段和吸烟烟雾检测阶段,生成分类器阶段包括接受样本视频信息,利用多通道背景差分提取疑似吸烟烟雾区域,提取疑似区域的运动特征,利用所提取运动特征组合成特征向量训练支持向量机;吸烟烟雾检测阶段包括,接收待检测视频信息,利用生成分类器阶段相同的方法提取疑似吸烟烟雾区域的动态特征并组合成特征向量输入分类器,判断疑似区域是否为吸烟烟雾。本发明能够实现简单场景中大范围的吸烟烟雾检测,有助于公共场所内的控烟工作。

Description

基于计算机视觉的吸烟烟雾检测方法
技术领域
本发明涉及图像处理及视频监控,尤其涉及一种烟雾检测方法。
背景技术
众所周知,吸烟是一种不良习惯,严重危害身体健康,而对于烟民来说吸烟已经成为日常生活中一种习惯。目前,吸烟的危害已经逐步被大众所熟知,在公共场所都禁止吸烟。可是,在公共场所虽然都有禁烟提示标牌,但主要仍以烟民个人控制力或监管人员监督提示才能禁烟。对于人工监管控烟需要投入大量人力,而公共场合复杂的环境无法保证监管人员准确及时发现其他人的抽烟行为,这也暴露出在公共场所依然缺少高效便捷控烟手段的社会问题。
目前,利用计算机视觉实现的烟雾检测系统均是针对火灾烟雾而研发的,其中烟雾检测的算法可大体分为两类:第一种,利用烟雾的静态特征,例如颜色、能量、形状;第二种,利用烟雾的动态特征,例如扩散特征、飘动方向。通过烟雾的特征值来判断火灾位置,具有高效、安全、便捷等优点。但是,相比于火灾产生的烟雾,吸烟烟雾浓度低、范围小,因此在应用烟雾特征进行检测的过程中与火灾烟雾有所区别,也因此,在现有技术中,还没有应用计算机视觉进行吸烟烟雾检测的设备和方法。
发明内容
本发明的目的是提出一种基于计算机视觉的吸烟烟雾检测方法,通过监控系统采集检测视频,再对视频进行分析处理得出判断,能够在室内环境下实现对吸烟行为的检测并确认吸烟者。
为实现上述目的,采用了以下技术方案:
本发明所述检测方法包括训练生成分类器阶段和吸烟烟雾检测阶段;
(1)训练生成分类器阶段,包括如下步骤,
a、接收样本视频。
b、对样本视频进行分析,对每一帧图像进行疑似烟雾区域标记,生成疑似烟雾区域二值图像;以样本视频第一帧图像为图像背景,将t帧图像与背景图像由RGB彩色空间转化到HSV彩色空间;对于t帧图像中的每一像素点与t帧的背景图像的像素点在H、S、V三通道内分别相减,将差值与烟雾检测阈值范围进行比较,若差值在阈值范围内,则设定该像素点为疑似烟雾区域,在二值图像内将该像素点标记为1,若差值不在阈值范围内,则在二值图像内将该像素点标记为0。
c、提取疑似烟雾区域的动态特征,所述动态特征包括烟雾区域的面积变化和烟雾区域质心的运动轨迹;计算样本视频中每一帧内疑似烟雾区域的面积;计算描述疑似烟雾区域面积变化的特征值,所述特征值包括最大值、均值、方差和时间;标记样本视频中每一帧内疑似烟雾区域的质心;计算描述烟雾疑似区域质心运动轨迹的特征值,综合动态特征得到特征向量。
d、生成分类器,先对样本视频中的疑似烟雾区域提取运动特征和标记类别属性,再将所有疑似烟雾区域提取的运动特征组合成运动特征向量并标记类别后,最后将所有运动特征向量和类别标记存储于分类器内。
(2)吸烟烟雾检测阶段,包括如下步骤,
a、接收待检测视频。
b、对待检测视频进行分析,对每一帧图像进行疑似烟雾区域标记,生成疑似烟雾区域二值图像;以样本视频第一帧图像为图像背景,将t帧图像与背景图像由RGB彩色空间转化到HSV彩色空间;对于t帧图像中的每一像素点与t帧的背景图像的像素点在H、S、V三通道内分别相减,将差值与烟雾检测阈值范围进行比较,若差值在阈值范围内,则设定该像素点为疑似烟雾区域,在二值图像内将该像素点标记为1,若差值不在阈值范围内,则在二值图像内将该像素点标记为0。
c、提取疑似烟雾区域的动态特征,所述动态特征包括烟雾区域的面积变化与烟雾区域质心的运动轨迹;计算样本视频中每一帧内疑似烟雾区域的面积;计算描述疑似烟雾区域面积变化的特征值,所述特征值包括最大值、均值、方差和时间;标记样本视频中每一帧内疑似烟雾区域的质心;计算描述烟雾疑似区域质心运动轨迹的特征值,综合动态特征得到特征向量。
d、对待检测视频中的疑似烟雾区域提取运动特征,将所有疑似烟雾区域提取的运动特征组合成运动特征向量后,将所有运动特征向量输入分类器中,判断疑似烟雾区域是否为吸烟行为产生的烟雾区域。
在训练生成分类器阶段和吸烟烟雾检测阶段中,在对样本视频进行分析时,对样本视频每一帧进行彩色空间转换,将背景帧与视频的当前帧图像由RGB彩色空间转化至HSV彩色空间,具体如下,
H = 60 ( G - B ) max - min max = R 120 + 60 ( B - R ) max - min max = G 240 + 60 ( R - G ) max - min max = B H + 360 H < 0
S = max - min max
V = max 255
式中,H代表色调Hue,用角度度量,表示颜色的色彩种类,取值范围为0~360°,各颜色变化头尾相接,从红色开始按照逆时针方向计算,60°是黄色,120°是绿色,180°是青色,240°是蓝色,300°是品红色,360°回到红色;此处的黄色、绿色等颜色指的是对应于RGB彩色空间立方体模型中位于端点处的标准色,而不是人眼视觉直观感受的颜色范围。
S代表饱和度Satarution,范围为0~1,表征色彩的纯度,纯色的饱和度为1,在纯色中逐渐掺入白色则饱和度逐渐降低;
V代表颜色的明暗度Value,范围为0~1;
R代表RGB彩色空间中的红色光亮度;
G代表RGB彩色空间中的绿色光亮度;
B代表RGB彩色空间中的蓝色光亮度。
在训练生成分类器阶段和吸烟烟雾检测阶段中,将背景图像根据颜色特征进行分区;烟雾在飘动过程中由口中飘出进而扩散到周围背景区域,烟雾扩散中覆盖在背景上对背景颜色产生影响;在不同颜色的背景下,烟雾的影响度不同,检测方法不同;所述背景按颜色分为黑色背景、灰白色背景和彩色背景。
在训练生成分类器阶段和吸烟烟雾检测阶段中,对背景进行差分,标记疑似烟雾区域,对当前帧与背景图像在HSV彩色空间的H、S、V三通道内分别进行差分,对处于不同颜色区域的像素采用不同阈值进行判断是否为疑似烟雾像素;若满足阈值条件则判断像素点为疑似烟雾区域,在二值图像中标记为1,反之则标记为0。
在训练生成分类器阶段和吸烟烟雾检测阶段中,提取如下疑似烟雾区域的动态特征值,
Amax=max(A(t))
A &OverBar; = 1 T &Sigma; t = 1 T A ( t )
V a = 1 T &Sigma; t = 1 T [ A ( t ) - A &OverBar; ] 2
T
其中,Amax是疑似烟雾区域面积变化过程中的最大面积,是均值,Va是方差,T是运动时间,A(t)是每一帧内疑似烟雾区域的像素个数;
为了排除微小面积变化引发的干扰,运动时间T选择变化过程中面积为最大面积Amax的20%的两个点之间的时间。综合动态特征值对分类器进行训练,利用训练得到的分类器来判断疑似烟雾区域是否符合吸烟烟雾的面积变化特点。
在训练生成分类器阶段和吸烟烟雾检测阶段中,提取疑似烟雾区域质心运动轨迹特征,以质心的运动轨迹表征烟雾区域的运动轨迹,t时刻疑似烟雾区域质心的坐标为(x(t),y(t)),记录每一帧烟雾区域质心在图像内的位置;计算时间T内质心的运动的距离;将相邻质心之间线段用极坐标表示,按照方向角的范围将质心运动分为8个方向,计算质心在8个方向上的累计运动距离,对累积运动距离直方图进行均衡化后,得到质心运动轨迹的特征向量。
工作过程大致如下:
训练分类器阶段的过程为:对样本视频进行分析,对每一帧图像进行疑似烟雾区域标记,生成疑似烟雾区域二值图像,提取疑似烟雾区域的动态特征,其中包括烟雾区域的面积变化与烟雾区域质心的运动轨迹,对样本视频中的疑似烟雾区域提取运动特征和标记类别属性后,将所有疑似烟雾区域提取的运动特征组合成运动特征向量并标记类别后,将所有运动特征向量和类别标记存储于分类器内。检测吸烟烟雾阶段的过程为:通过监控系统的摄像头采集监控视频,对待检测视频进行分析,对每一帧图像进行疑似烟雾区域标记,生成疑似烟雾区域二值图像,提取疑似烟雾区域的动态特征,其中包括烟雾区域的面积变化与烟雾区域质心的运动轨迹,对待检测视频中的疑似烟雾区域提取运动特征,将所有疑似烟雾区域提取的运动特征组合成运动特征向量后,将所有运动特征向量输入分类器中,判断疑似烟雾区域是否为吸烟行为产生的烟雾区域。
与现有技术相比,本发明具有如下优点:
1、通过监控设备采集视频图样,只需对图样的分析处理便可判断出烟雾区域是否有人吸烟;
2、可远程监控,并能锁定烟雾区域的具体位置,避免管理人员盲目地监控吸烟行为,使管理人员可以有目的地对抽烟行为进行劝阻,方便管理人员管理;
3、广泛应用于公共场所的禁烟工作,提高管理人员的工作效率和管理精度。
附图说明
图1是本发明中训练生成分类器阶段的流程图。
图2是本发明中吸烟烟雾检测阶段的流程图。
图3a是本发明方法在黑色背景下的一种吸烟烟雾图像。
图3b是本发明方法对于图3a涉及的烟雾图像的吸烟烟雾检测结果。
图4a是本发明方法在白色背景下的吸烟烟雾图像。
图4b是本发明方法对于图4a涉及的烟雾图像的吸烟烟雾检测结果。
图5a是本发明方法在彩色背景下的吸烟烟雾图像。
图5b是本发明方法对于图5a涉及的烟雾图像的吸烟烟雾检测结果。
具体实施方式
下面结合附图对本发明做进一步说明:
如图1、2所示的本发明两个阶段的流程图中,本发明主要所述检测方法包括训练生成分类器阶段和吸烟烟雾检测阶段;
训练生成分类器阶段的大致过程为:接收样本视频信息,通过样本视频得到若干作为样本的运动区域,提取这些训练样本的特征,并人工标记这些训练样本的属性(是否为吸烟产生的烟雾区域),然后通过分类器训练算法将所有运动区域提取运动特征组合成运动特征向量并标记类别,并将其存储于分类器。
训练生成分类器阶段的具体步骤如下:
a、接收样本视频。
b、对样本视频进行分析,对每一帧图像进行疑似烟雾区域标记,生成疑似烟雾区域二值图像;本发明中获得疑似烟雾区域的方法为背景差分法,即通过当前图像与估计的背景相减,差值与吸烟烟雾差值范围相比较以判断像素点是否为疑似烟雾像素点;将背景帧与视频的当前帧图像由RGB彩色空间转化至HSV彩色空间,转化关系为
H = 60 ( G - B ) max - min max = R 120 + 60 ( B - R ) max - min max = G 240 + 60 ( R - G ) max - min max = B H + 360 H < 0
S = max - min max
V = max 255
式中,H代表色调Hue,用角度度量,表示颜色的色彩种类,取值范围为0~360°,各颜色变化头尾相接,从红色开始按照逆时针方向计算,60°是黄色,120°是绿色,180°是青色,240°是蓝色,300°是品红色,360°回到红色;此处的黄色、绿色等颜色指的是对应于RGB彩色空间立方体模型中位于端点处的标准色,而不是人眼视觉直观感受的颜色范围;
S代表饱和度Satarution,范围为0~1,表征色彩的纯度,纯色的饱和度为1,在纯色中逐渐掺入白色则饱和度逐渐降低;
V代表颜色的明暗度Value,范围为0~1;
R代表RGB彩色空间中的红色光亮度;
G代表RGB彩色空间中的绿色光亮度;
B代表RGB彩色空间中的蓝色光亮度。
将背景图像根据颜色特征进行分区;烟雾在飘动过程中由口中飘出进而扩散到周围背景区域,烟雾扩散中覆盖在背景上对背景颜色产生影响;在不同颜色的背景下,烟雾的影响度不同,检测方法不同;所述背景按颜色分为黑色背景、灰白色背景和彩色背景。背景的划分公式:
黑色背景:V<0.2
彩色背景: V &GreaterEqual; 0.2 S &GreaterEqual; 0.2
灰白色背景: V &GreaterEqual; 0.2 S < 0.2
对背景进行差分,标记疑似烟雾区域,对当前帧与背景图像在HSV彩色空间的H、S、V三通道内分别进行差分,对处于不同颜色区域的像素采用不同阈值进行判断是否为疑似烟雾像素;若满足阈值条件则判断像素点为疑似烟雾区域,在二值图像中标记为1,反之则标记为0。在黑色背景下,灰白色的烟雾会明显提升背景像素的亮度,只需对像素的V的变化进行判断即可提取疑似烟雾区域,即:Vt(x,y)-Vb(x,y)≥γ1
在灰白色背景下,烟雾在保持背景像素低饱和度的同时,会提升像素的亮
即: V t ( x , y ) - V b ( x , y ) &GreaterEqual; &gamma; 2 S t ( x , y ) < 0.2
在彩色背景下,吸烟产生的少量的半透明烟雾无法完全覆盖背景的颜色,而是表现出烟雾特有的一种半透明的视觉效果。在HSV彩色空间内,烟雾的半透明特点使得前景色调相似于背景的色调,而灰白色的烟雾会降低背景颜色的纯度,使得饱和度降低,背景像素的值增加。综合上述在HSV色彩空间上烟雾的特性分析,本发明通过公式来检测并提取烟雾疑似区域:
| H t ( x , y ) - H b ( x , y ) | &le; &alpha; S b ( x , y ) - S t ( x , y ) &GreaterEqual; &beta; V t ( x , y ) - V b ( x , y ) &GreaterEqual; &gamma; 3
其中,Ht(x,y)表示在时刻t时,前景图像中位于(x,y)点时的像素色调值,Hb(x,y)为背景图像位于(x,y)点时的像素色调值,同样St(x,y)和Sb(x,y)所代表的是前景和背景图像中对应像素点的饱和度值。而Vt(x,y)和Vb(x,y)则各自代表前景与背景图像中对应点的亮度值。α、β、γ1、γ2、γ3则分别是检测的阈值。若满足上述不等式关系,则判断(x,y)点为疑似烟雾区域,在二值图像中标记为1,反之则标记为0。
对疑似烟雾区域进行形态学处理,去除孤立噪声点。
第一步,利用大小为3×3的矩形结构元素p进行腐蚀操作,去除二值图像中的微小孤立噪声点;
第二步,利用大小为10×10的矩形结构元素q进行闭运算,填充二值图像中疑似烟雾区域的空洞;
第三步,利用结构元素p进行膨胀操作,消除第一步腐蚀操作对二值图像内疑似烟雾区域面积带来的影响。
c、提取疑似烟雾区域的动态特征:吸烟产生的烟雾由口中出现,在烟雾区域运动的同时烟雾区域自身也在不断发生变化,烟雾区域面积逐渐扩大,烟雾浓度逐渐降低,半透明性所表现出对背景的遮盖能力逐渐减弱,最终浓度降低至视觉上无法分辨,即烟雾消散。本发明选取烟雾的面积变化与烟雾区域的质心轨迹作为特征对烟雾区域的运动进行描述。
记录每一帧图像内疑似烟雾区域的面积,提取特征对面积变化的过程进行描述。提取如下疑似烟雾区域的动态特征值作为判据,
Amax=max(A(t))
A &OverBar; = 1 T &Sigma; t = 1 T A ( t )
V a = 1 T &Sigma; t = 1 T [ A ( t ) - A &OverBar; ] 2
T
其中,Amax是疑似烟雾区域面积变化过程中的最大面积,是均值,Va是方差,T是运动时间,A(t)是每一帧内疑似烟雾区域的像素个数;
为了排除微小面积变化引发的干扰,运动时间T选择变化过程中面积为最大面积Amax的20%的两个点之间的时间。综合动态特征值对分类器进行训练,利用训练得到的分类器来判断疑似烟雾区域是否符合吸烟烟雾的面积变化特点。
记录每一帧烟雾区域质心在图像内的位置,提取特征对质心轨迹进行描述。时间T内,质心运动的距离为:
D = &Sigma; t = 1 T - 1 ( x ( t + 1 ) - x ( t ) ) 2 + ( y + ( t + 1 ) - y ( t ) ) 2
将相邻质心之间线段用极坐标表示,则t时刻与t+1时刻质心之间线段坐标为(d(t),θ(t)),其中线段的长度为:
d ( t ) = ( x ( t + 1 ) - x ( t ) ) 2 + ( y ( t + 1 ) - y ( t ) ) 2
线段与水平线的顺时针夹角:
&theta; ( t ) = cos - 1 x ( t + 1 ) - x ( t ) d ( t ) , y ( t + 1 ) - y ( t ) &GreaterEqual; 0 &pi; + cos - 1 x ( t + 1 ) - x ( t ) d ( t ) , y ( t + 1 ) - y ( t ) < 0 0 , d ( t ) = 0
将质心的运动方向按θ(t)的范围分为八个方向进行编码。方向i上的累积运动距离Di为当时d(t)累加之和。对各方向的累积运动距离进行直方图均衡化后方向i上的累计运动距离
得到反映烟雾区域质心运动的特征向量[D′1,D′2,D′3,D′4,D′5,D′6,D′7,D′8]。
d、生成分类器,通过对疑似烟雾区域进行特征提取得到特征向量。训练分类器之前,对提取的疑似烟雾区域的特征向量进行归一化,
利用最大最小值法:
x ^ i = x i - x min x max - x min
式中:xmax和xmin分别为特征向量中的最大值和最小值。xi是原特征值,是归一化后的特征值。经过归一化后,数据结果在分布[0,1]的范围之内,可以有效减少后续计算量。结合疑似区域面积变化与运动轨迹特征,得到特征向量[Amax,T,Va,D′1,D′2,D′3,D′4,D′5,D′6,D′7,D′8]。
对样本视频的特征向量进行标记,利用支持向量机(Support vector machine,SVM)对样本进行训练得到分类器C。
至此,训练模块全部完成,得到了SVM分类器C
(2)吸烟烟雾检测阶段,包括如下步骤,
由训练模块得到分类器后,接受待检测的视频,可检测视频场景中是否有吸烟行为发生,具体检测方法如下:
a、接收待检测视频;
b、对待检测视频进行分析,对每一帧图像进行疑似烟雾区域标记,生成疑似烟雾区域二值图像;首先,以待检测视频第一帧为背景图像,将当前帧与背景帧由RGB彩色空间转化为HSV彩色空间;然后,通过像素的颜色特征将背景分为不同的区域;将当前帧与背景帧在H、S、V三通道内分别进行差分,根据不同背景区域设置不同的阈值,若背景帧像素与当前帧像素的差值满足阈值则判定为疑似烟雾区域;对疑似烟雾区域进行形态学操作,去除孤立噪声点;具体的方法与训练生成分类器阶段中相关方法类似,此处不再赘述。
c、提取疑似烟雾区域的动态特征,所述动态特征包括烟雾区域的面积变化与烟雾区域质心的运动轨迹;
提取疑似烟雾区域面积变化特征。计算待检测视频中每一帧内疑似烟雾区域的面积,计算描述疑似烟雾区域面积变化的特征值:最大值、均值、方差、时间;具体的方法与训练生成分类器阶段中相关方法类似,此处不再赘述。
提取疑似烟雾区域的质心轨迹特征。记录每一帧烟雾区域质心在图像内的位置;计算时间T内质心的运动的距离;将相邻质心之间线段用极坐标表示,按照方向角的范围将质心运动分为8个方向,计算质心在8个方向上的累积运动距离,对累积运动距离直方图进行均衡化后,得到特征向量;具体的方法与训练生成分类器阶段中的相关方法类似,此处不再赘述。
d、对待检测视频中的疑似烟雾区域提取运动特征,将所有疑似烟雾区域提取的运动特征组合成运动特征向量后,将所有运动特征向量输入分类器中,利用训练得到分类器C进行分类。
通过对疑似烟雾区域进行特征提取得到特征向量。训练分类器之前,对提取的疑似烟雾区域的特征向量进行归一化,利用最大最小值对特征向量进行归一化,具体的方法与训练生成分类器阶段中的相关方法类似,此处不再赘述。
将归一化后的特征向量[Amax,T,Va,D′1,D′2,D′3,D′4,D′5,D′6,D′7,D′8]输入分类器C,判断待测视频中是否由吸烟行为发生。
若分类器判定视频中发生吸烟行为,则发出警报。
以上所述仅为本发明的实施例,并非因此限制本发明的专利范围,凡是利用本发明说明书及附图内容所作的等效结构或等效流程图变换,或直接或间接运用在其他相关的技术领域,均同理包括在本发明的专利保护范围内。

Claims (8)

1.一种基于计算机视觉的吸烟烟雾检测方法,其特征在于:所述检测方法包括训练生成分类器阶段和吸烟烟雾检测阶段;
(1)训练生成分类器阶段,包括如下步骤,
a、接收样本视频;
b、对样本视频进行分析,对每一帧图像进行疑似烟雾区域标记,生成疑似烟雾区域二值图像;
c、提取疑似烟雾区域的动态特征,所述动态特征包括烟雾区域的面积变化和烟雾区域质心的运动轨迹;
d、生成分类器,先对样本视频中的疑似烟雾区域提取运动特征和标记类别属性,再将所有疑似烟雾区域提取的运动特征组合成运动特征向量并标记类别后,最后将所有运动特征向量和类别标记存储于分类器内;
(2)吸烟烟雾检测阶段,包括如下步骤,
a、接收待检测视频;
b、对待检测视频进行分析,对每一帧图像进行疑似烟雾区域标记,生成疑似烟雾区域二值图像;
c、提取疑似烟雾区域的动态特征,所述动态特征包括烟雾区域的面积变化与烟雾区域质心的运动轨迹;
d、对待检测视频中的疑似烟雾区域提取运动特征,将所有疑似烟雾区域提取的运动特征组合成运动特征向量后,将所有运动特征向量输入分类器中,判断疑似烟雾区域是否为吸烟行为产生的烟雾区域。
2.根据权利要求1所述的基于计算机视觉的吸烟烟雾检测方法,其特征在于,在训练生成分类器阶段和吸烟烟雾检测阶段中,在对样本视频进行分析和对待检测视频进行分析时,均采用如下方法:
对每一帧图像进行疑似烟雾区域标记,生成疑似烟雾区域二值图像;
以样本视频第一帧图像为图像背景,将t帧图像与背景图像由RGB彩色空间内转化到HSV彩色空间内;
对于t帧图像中的每一像素点与t帧的背景图像的像素点在H、S、V三通道内分别相减,将差值与烟雾检测阈值范围进行比较,若差值在阈值范围内,则设定该像素点为疑似烟雾区域,在二值图像内将该像素点标记为1,若差值不在阈值范围内,则在二值图像内将该像素点标记为0。
3.根据权利要求1所述的基于计算机视觉的吸烟烟雾检测方法,其特征在于,在训练生成分类器阶段和吸烟烟雾检测阶段中,在提取疑似烟雾区域动态特征时,均采用如下方法:
计算样本视频中每一帧内疑似烟雾区域的面积;
计算描述疑似烟雾区域面积变化的特征值,所述特征值包括最大值、均值、方差和时间;
标记样本视频中每一帧内疑似烟雾区域的质心;
计算描述烟雾疑似区域质心运动轨迹的特征值,综合动态特征得到特征向量。
4.根据权利要求1和2所述的基于计算机视觉的吸烟烟雾检测方法,其特征在于:在训练生成分类器阶段和吸烟烟雾检测阶段中,在对样本视频进行分析时,对样本视频每一帧进行彩色空间转换,将背景帧与视频的当前帧图像由RGB彩色空间转化至HSV彩色空间,具体如下,
H = 60 ( G - B ) max - min max = R 120 + 60 ( B - R ) max - min max = G 240 + 60 ( R - G ) max - min max = B H + 360 H < 0
S = max - min max
V = max 255
式中,H代表色调Hue,用角度度量,表示颜色的色彩种类,取值范围为0~360°,各颜色变化头尾相接,从红色开始按照逆时针方向计算,60°是黄色,120°是绿色,180°是青色,240°是蓝色,300°是品红色,360°回到红色;
S代表饱和度Satarution,范围为0~1,表征色彩的纯度,纯色的饱和度为1,在纯色中逐渐掺入白色则饱和度逐渐降低;
V代表颜色的明暗度Value,范围为0~1;
R代表RGB彩色空间中的红色光亮度;
G代表RGB彩色空间中的绿色光亮度;
B代表RGB彩色空间中的蓝色光亮度。
5.根据权利要求1和2所述的基于计算机视觉的吸烟烟雾检测方法,其特征在于:在训练生成分类器阶段和吸烟烟雾检测阶段中,将背景图像根据颜色特征进行分区;烟雾在飘动过程中由口中飘出进而扩散到周围背景区域,烟雾扩散中覆盖在背景上对背景颜色产生影响;在不同颜色的背景下,烟雾的影响度不同,检测方法不同;所述背景按颜色分为黑色背景、灰白色背景和彩色背景。
6.根据权利要求1和2所述的基于计算机视觉的吸烟烟雾检测方法,其特征在于:在训练生成分类器阶段和吸烟烟雾检测阶段中,对背景进行差分,标记疑似烟雾区域,对当前帧与背景图像在HSV彩色空间的H、S、V三通道内分别进行差分,对处于不同颜色区域的像素采用不同阈值进行判断是否为疑似烟雾像素;若满足阈值条件则判断像素点为疑似烟雾区域,在二值图像中标记为1,反之则标记为0。
7.根据权利要求1和2所述的基于计算机视觉的吸烟烟雾检测方法,其特征在于:在训练生成分类器阶段和吸烟烟雾检测阶段中,提取如下疑似烟雾区域的动态特征值,
Amax=max(A(t))
A &OverBar; = 1 T &Sigma; t = 1 T A ( t )
V a = 1 T &Sigma; t = 1 T [ A ( t ) - A &OverBar; ] 2
T
其中,Amax是疑似烟雾区域面积变化过程中的最大面积,是均值,Va是方差,T是运动时间,A(t)是每一帧内疑似烟雾区域的像素个数;
为了排除微小面积变化引发的干扰,运动时间T选择变化过程中面积为最大面积Amax的20%的两个点之间的时间;综合动态特征值对分类器进行训练,利用训练得到的分类器来判断疑似烟雾区域是否符合吸烟烟雾的面积变化特点。
8.根据权利要求1和2所述的基于计算机视觉的吸烟烟雾检测方法,其特征在于:在训练生成分类器阶段和吸烟烟雾检测阶段中,提取疑似烟雾区域质心运动轨迹特征,以质心的运动轨迹表征烟雾区域的运动轨迹,t时刻疑似烟雾区域质心的坐标为(x(t),y(t)),记录每一帧烟雾区域质心在图像内的位置;计算时间T内质心的运动的距离;将相邻质心之间线段用极坐标表示,按照方向角的范围将质心运动分为8个方向,计算质心在8个方向上的累计运动距离,对累积运动距离直方图进行均衡化后,得到质心运动轨迹的特征向量。
CN201410215989.8A 2014-05-21 2014-05-21 基于计算机视觉的吸烟烟雾检测方法 Pending CN104050480A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410215989.8A CN104050480A (zh) 2014-05-21 2014-05-21 基于计算机视觉的吸烟烟雾检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410215989.8A CN104050480A (zh) 2014-05-21 2014-05-21 基于计算机视觉的吸烟烟雾检测方法

Publications (1)

Publication Number Publication Date
CN104050480A true CN104050480A (zh) 2014-09-17

Family

ID=51503292

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410215989.8A Pending CN104050480A (zh) 2014-05-21 2014-05-21 基于计算机视觉的吸烟烟雾检测方法

Country Status (1)

Country Link
CN (1) CN104050480A (zh)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104715238A (zh) * 2015-03-11 2015-06-17 南京邮电大学 一种基于多特征融合的行人检测方法
CN104978829A (zh) * 2015-06-24 2015-10-14 国家电网公司 一种室内吸烟监控控制方法及系统
CN105469105A (zh) * 2015-11-13 2016-04-06 燕山大学 一种基于视频监控的香烟烟雾检测方法
CN105976570A (zh) * 2016-05-20 2016-09-28 山东师范大学 一种基于车载视频监控的驾驶员吸烟行为实时监测方法
CN106157331A (zh) * 2016-07-05 2016-11-23 乐视控股(北京)有限公司 一种吸烟检测方法和装置
CN106339664A (zh) * 2016-08-10 2017-01-18 杭州电子科技大学 一种基于颜色混合模型和多特征组合的视频烟雾检测方法
CN106682635A (zh) * 2016-12-31 2017-05-17 中国科学技术大学 一种基于随机森林特征选择的烟雾检测方法
CN108140291A (zh) * 2015-11-20 2018-06-08 富士通株式会社 烟雾检测装置、方法以及图像处理设备
CN108416316A (zh) * 2018-03-19 2018-08-17 中南大学 一种黑烟车的检测方法及系统
CN108734125A (zh) * 2018-05-21 2018-11-02 杭州杰视科技有限公司 一种开放空间的吸烟行为识别方法
CN108830161A (zh) * 2018-05-18 2018-11-16 武汉倍特威视系统有限公司 基于视频流数据的烟雾识别方法
CN108921215A (zh) * 2018-06-29 2018-11-30 重庆邮电大学 一种基于局部极值共生模式和能量分析的烟雾检测
CN108985197A (zh) * 2018-07-01 2018-12-11 北京工业大学 基于多算法融合的出租车驾驶员吸烟行为的自动检测方法
CN109147254A (zh) * 2018-07-18 2019-01-04 武汉大学 一种基于卷积神经网络的视频野外火灾烟雾实时检测方法
CN109872510A (zh) * 2017-12-04 2019-06-11 通用汽车环球科技运作有限责任公司 用于汽车共享和乘坐共享车辆的车内烟雾检测和报告系统和方法
CN109920214A (zh) * 2017-12-12 2019-06-21 杭州海康威视系统技术有限公司 一种摄像设备及信息提示方法
WO2019126989A1 (zh) * 2017-12-26 2019-07-04 李庆远 吸烟者干扰设备和方法
CN110853181A (zh) * 2019-11-05 2020-02-28 杭州晶一智能科技有限公司 一种具有自动除雾功能的汽车多功能后视行车记录仪
CN110909715A (zh) * 2019-12-06 2020-03-24 重庆商勤科技有限公司 基于视频图像识别吸烟的方法、装置、服务器及存储介质
CN111899452A (zh) * 2020-08-04 2020-11-06 成都云图睿视科技有限公司 基于边缘计算的森林防火预警系统
US11210916B2 (en) 2018-12-21 2021-12-28 Fujitsu Limited Smoke detection method and apparatus
CN116152720A (zh) * 2023-04-17 2023-05-23 山东科技大学 一种烟雾检测方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102013009A (zh) * 2010-11-15 2011-04-13 无锡中星微电子有限公司 烟雾图像识别方法及装置
CN102663869A (zh) * 2012-04-23 2012-09-12 国家消防工程技术研究中心 基于视频监控平台的室内火灾检测方法
CN102867386A (zh) * 2012-09-10 2013-01-09 南京恩博科技有限公司 一种基于智能视频分析的森林烟火探测方法及其专用装置
CN102982313A (zh) * 2012-10-31 2013-03-20 深圳辉锐天眼科技有限公司 烟雾检测的方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102013009A (zh) * 2010-11-15 2011-04-13 无锡中星微电子有限公司 烟雾图像识别方法及装置
CN102663869A (zh) * 2012-04-23 2012-09-12 国家消防工程技术研究中心 基于视频监控平台的室内火灾检测方法
CN102867386A (zh) * 2012-09-10 2013-01-09 南京恩博科技有限公司 一种基于智能视频分析的森林烟火探测方法及其专用装置
CN102982313A (zh) * 2012-10-31 2013-03-20 深圳辉锐天眼科技有限公司 烟雾检测的方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
MARIA VAL MARTIN ET AL.: ""Space-based observational constraints for 1-D fire smoke plume-rise models"", 《JOURNAL OF GEOPHYSICAL RESEARCH》 *
王欣刚等: ""基于烟雾动态特征分析的实时火灾检测"", 《计算机技术与发展》 *
袁非牛等: ""基于累积量和主运动方向的视频烟雾检测方法"", 《中国图象图形学报》 *

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104715238A (zh) * 2015-03-11 2015-06-17 南京邮电大学 一种基于多特征融合的行人检测方法
CN104715238B (zh) * 2015-03-11 2018-09-11 南京邮电大学 一种基于多特征融合的行人检测方法
CN104978829B (zh) * 2015-06-24 2018-01-02 国家电网公司 一种室内吸烟监控控制方法及系统
CN104978829A (zh) * 2015-06-24 2015-10-14 国家电网公司 一种室内吸烟监控控制方法及系统
CN105469105A (zh) * 2015-11-13 2016-04-06 燕山大学 一种基于视频监控的香烟烟雾检测方法
US10846867B2 (en) 2015-11-20 2020-11-24 Fujitsu Limited Apparatus, method and image processing device for smoke detection in image
CN108140291A (zh) * 2015-11-20 2018-06-08 富士通株式会社 烟雾检测装置、方法以及图像处理设备
CN105976570A (zh) * 2016-05-20 2016-09-28 山东师范大学 一种基于车载视频监控的驾驶员吸烟行为实时监测方法
CN105976570B (zh) * 2016-05-20 2018-05-04 山东师范大学 一种基于车载视频监控的驾驶员吸烟行为实时监测方法
CN106157331A (zh) * 2016-07-05 2016-11-23 乐视控股(北京)有限公司 一种吸烟检测方法和装置
CN106339664A (zh) * 2016-08-10 2017-01-18 杭州电子科技大学 一种基于颜色混合模型和多特征组合的视频烟雾检测方法
CN106682635A (zh) * 2016-12-31 2017-05-17 中国科学技术大学 一种基于随机森林特征选择的烟雾检测方法
CN106682635B (zh) * 2016-12-31 2019-01-04 中国科学技术大学 一种基于随机森林特征选择的烟雾检测方法
DE102018130589B4 (de) 2017-12-04 2024-06-13 GM Global Technology Operations LLC Rauchmeldesystem für den Innenraum eines Fahrzeugs
CN109872510A (zh) * 2017-12-04 2019-06-11 通用汽车环球科技运作有限责任公司 用于汽车共享和乘坐共享车辆的车内烟雾检测和报告系统和方法
CN109920214A (zh) * 2017-12-12 2019-06-21 杭州海康威视系统技术有限公司 一种摄像设备及信息提示方法
WO2019126989A1 (zh) * 2017-12-26 2019-07-04 李庆远 吸烟者干扰设备和方法
CN108416316A (zh) * 2018-03-19 2018-08-17 中南大学 一种黑烟车的检测方法及系统
CN108830161A (zh) * 2018-05-18 2018-11-16 武汉倍特威视系统有限公司 基于视频流数据的烟雾识别方法
CN108830161B (zh) * 2018-05-18 2021-04-20 武汉倍特威视系统有限公司 基于视频流数据的烟雾识别方法
CN108734125A (zh) * 2018-05-21 2018-11-02 杭州杰视科技有限公司 一种开放空间的吸烟行为识别方法
CN108734125B (zh) * 2018-05-21 2021-05-04 杭州杰视科技有限公司 一种开放空间的吸烟行为识别方法
CN108921215A (zh) * 2018-06-29 2018-11-30 重庆邮电大学 一种基于局部极值共生模式和能量分析的烟雾检测
CN108985197B (zh) * 2018-07-01 2021-07-30 北京工业大学 基于多算法融合的出租车驾驶员吸烟行为的自动检测方法
CN108985197A (zh) * 2018-07-01 2018-12-11 北京工业大学 基于多算法融合的出租车驾驶员吸烟行为的自动检测方法
CN109147254A (zh) * 2018-07-18 2019-01-04 武汉大学 一种基于卷积神经网络的视频野外火灾烟雾实时检测方法
US11210916B2 (en) 2018-12-21 2021-12-28 Fujitsu Limited Smoke detection method and apparatus
CN110853181A (zh) * 2019-11-05 2020-02-28 杭州晶一智能科技有限公司 一种具有自动除雾功能的汽车多功能后视行车记录仪
CN110909715A (zh) * 2019-12-06 2020-03-24 重庆商勤科技有限公司 基于视频图像识别吸烟的方法、装置、服务器及存储介质
CN111899452A (zh) * 2020-08-04 2020-11-06 成都云图睿视科技有限公司 基于边缘计算的森林防火预警系统
CN116152720A (zh) * 2023-04-17 2023-05-23 山东科技大学 一种烟雾检测方法

Similar Documents

Publication Publication Date Title
CN104050480A (zh) 基于计算机视觉的吸烟烟雾检测方法
CN107944359B (zh) 基于视频的火焰检测方法
CN103208126B (zh) 一种自然环境下运动物体监测方法
CN103069434B (zh) 用于多模式视频事件索引的方法和系统
CN103955705B (zh) 基于视频分析的交通信号灯定位、识别与分类方法
CN103745226B (zh) 一种电力设施作业现场人员着装安全检测方法
CN106600888B (zh) 一种森林火灾自动检测方法及系统
Yang et al. Research on a skin color detection algorithm based on self-adaptive skin color model
CN100354875C (zh) 基于人脸检测的红眼去除方法
CN109637068A (zh) 智能烟火识别系统
CN106446926A (zh) 一种基于视频分析的变电站工人安全帽佩戴检测方法
CN106131376B (zh) 一种室内外场景确定方法及装置
CN105868722A (zh) 异常电力设备图像的识别方法及系统
CN107085714A (zh) 一种基于视频的森林火灾检测方法
CN104408424B (zh) 一种基于图像处理的多信号灯识别方法
CN105426828A (zh) 人脸检测方法、装置及系统
CN103617414B (zh) 一种基于最大间距准则的火灾颜色模型的火灾火焰和烟雾识别方法
CN102436575A (zh) 一种台标的自动检测和分类方法
CN112149761A (zh) 一种基于YOLOv4改进算法的电力智慧工地违规行为检测方法
CN102760230B (zh) 一种基于多维时域特征的火焰检测方法
CN104318266A (zh) 一种图像智能分析处理预警方法
CN105469038A (zh) 一种用于电力开闭所的安全帽视频检测方法
CN110298893A (zh) 一种行人衣着颜色识别模型的生成方法及装置
CN107247934A (zh) 一种基于快速特征点定位的全天候哈欠检测方法及系统
CN104809482A (zh) 一种基于个体学习的疲劳检测方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20140917

WD01 Invention patent application deemed withdrawn after publication