CN105338315A - 基于智能移动终端的库房防盗视频监控系统 - Google Patents

基于智能移动终端的库房防盗视频监控系统 Download PDF

Info

Publication number
CN105338315A
CN105338315A CN201510718773.8A CN201510718773A CN105338315A CN 105338315 A CN105338315 A CN 105338315A CN 201510718773 A CN201510718773 A CN 201510718773A CN 105338315 A CN105338315 A CN 105338315A
Authority
CN
China
Prior art keywords
image
module
video
frame
moving target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510718773.8A
Other languages
English (en)
Other versions
CN105338315B (zh
Inventor
郑紫微
熊欧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hunan Shouchuang Information Technology Co.,Ltd.
Original Assignee
Ningbo University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ningbo University filed Critical Ningbo University
Priority to CN201510718773.8A priority Critical patent/CN105338315B/zh
Publication of CN105338315A publication Critical patent/CN105338315A/zh
Application granted granted Critical
Publication of CN105338315B publication Critical patent/CN105338315B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Analysis (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

本发明涉及基于智能移动终端的库房防盗视频监控系统,包括智能移动终端及设在库房内的视频采集模块、视频存储模块、视频提取模块、视频分帧模块、图像类型识别模块、图像类型转换模块、图像预处理模块、运动目标提取模块、警报模块和第二LTE通信模块;视频存储模块连接视频采集模块和视频提取模块,视频分帧模块连接视频提取模块和图像类型识别模块,图像类型转换模块连接图像类型识别模块和图像预处理模块,图像预处理模块连接图像类型识别模块和运动目标提取模块,警报模块连接运动目标提取模块和第二LTE通信模块,第二LTE通信模块连接视频采集模块。该系统能消除库房的镜头抖动影响,自动发现其中的运动目标,以给监控人员提供报警。

Description

基于智能移动终端的库房防盗视频监控系统
技术领域
本发明涉及视频监控领域,尤其涉及一种基于智能移动终端的库房防盗视频监控系统。
背景技术
在企业生产过程中,库房中往往需要库存大量的生产原料、生产设备等重要物资,以保证企业生产的正常进行。出于安全的考虑,库房内通常会安排值班门卫人员以及视频监控装置,如监控摄像头。值班门卫人员通过观察视频监控,可以对库房内情况进行掌握,以及时发现库房内是否由不法人员进入盗窃。
然而,传统库房视频监控依赖于人工对这些视频数据进行主观意识的分析判断,对其中的动作行为做出理解,然后才得出结论做出反馈。由于这种传统的库房视频监控方案仍然需要依赖于人工监控和发现不稳定因素,一旦出现值班门卫人员未及时发现库房中的运动目标或者因镜头抖动导致对运动目标发现造成影响,将会使值班门卫人员做出错误研判,即判定库房内无运动目标,则会因误判导致库房存在潜在安全隐患,埋下了库房被盗隐患。因此,在当前的库房监控中,亟需提供一种能够准确发现运动目标,消除镜头抖动影响,从而达到库房防盗效果的监控系统。
发明内容
本发明所要解决的技术问题是针对上述现有技术提供一种能够对库房中情况进行准确监控的基于智能移动终端的库房防盗视频监控系统。
本发明解决上述技术问题所采用的技术方案为:基于智能移动终端的库房防盗视频监控系统,其特征在于,包括设有第一LTE通信模块的智能移动终端以及设置在库房内的视频采集模块、视频存储模块、视频提取模块、视频分帧模块、图像类型识别模块、图像类型转换模块、图像预处理模块、运动目标提取模块、警报模块和第二LTE通信模块;所述视频存储模块分别连接视频采集模块和视频提取模块,所述视频分帧模块分别连接视频提取模块和图像类型识别模块,所述图像类型转换模块连接图像类型识别模块和图像预处理模块,所述图像预处理模块连接图像类型识别模块和运动目标提取模块,所述警报模块分别连接运动目标提取模块和第二LTE通信模块,第二LTE通信模块连接视频采集模块;其中,
所述视频采集模块,用以采集库房内的视频信息并消除视频抖动,存储已消除视频抖动后的视频信息至视频存储模块内;
所述视频提取模块,用于提取视频存储模块中的视频信息,并发送给视频分帧模块;
所述视频分帧模块,用以将接收的视频按照预设帧间隔分割成若干独立的帧图像,并按照分割的先后顺序对各帧图像进行顺序编号;
所述图像类型识别模块,用以判断所接收的帧图像类型为动态图像时,则将其发送给图像类型转换模块处理成静态图像;判断接收的帧图像为静态图像时,则直接发送帧图像给图像预处理模块;
所述图像类型转换模块,用以将接收的动态帧图像转换为静态帧图像,并发送转换后的静态帧图像给图像预处理模块;
所述图像预处理模块,用以对接收的静态帧图像进行滤噪处理,并将滤噪后的静态帧图像作为库房监控的原始监控图像发送给运动目标提取模块;
所述运动目标提取模块,用于提取滤噪后的原始监控图像序列中的运动目标,并将提取的运动目标发送给警报模块,其中,运动目标的提取方法依次包括如下步骤:
(1)以预设编号差值作为编号间隔,在具有独立编号的原始帧图像序列中连续地选取部分原始帧图像组成原始监控图像S(i,j);其中,选取的部分原始帧图像表示为St(i,j),t∈[0,T],T为被选取的原始帧图像数量;
(2)对原始监控图像S(i,j)中的各原始帧图像St(i,j)以预设倍数放大其像素值,并对放大后的各原始帧图像St(i,j)做灰度化处理,得到对应的灰度帧图像Yt(i,j),其中,原始监控图像S(i,j)对应的灰度图像为Y(i,j);其中,原始监控图像S(i,j)转换为灰度图像Y(i,j)采用如下转换公式:
Y(i,j)=0.257×r(i,j)+0.504×g(i,j)+0.239×b(i,j);
其中,r(i,j)、g(i,j)、b(i,j)分别对应原始帧图像St(i,j)的颜色空间三维坐标中的红、绿、蓝颜色分量,Yt(i,j)是该像素点对应的灰度值;
(3)对灰度图像Y(i,j)中的各灰度帧图像Yt(i,j)进行预处理,得到对应的预处理帧图像It(i,j)和预处理图像I(i,j),并采用高斯滤波分别对各预处理帧图像It(i,j)进行处理;其中,高斯函数为均值是零的二维高斯函数g(i,j),其中,
g ( i , j ) = exp ( - i 2 + j 2 2 σ 2 ) , 其使用的图像模板算子为 1 273 × 1 4 7 4 1 4 16 26 16 4 7 26 41 26 7 4 16 26 16 4 1 4 7 4 1 ;
(4)对前后连续间隔为m-n帧和m帧的三帧预处理图像Ik-(m-n)(i,j)、Ik(i,j)和Ik+m(i,j)做差分,得到两个差分图像D(k,k-(m-n))(i,j)和D(k+m,k)(i,j);其中,
D(k,k-(m-n))(i,j)=|Ik(i,j)-Ik-(m-n)(i,j)|,D(k+m,k)(i,j)=|Ik+m(i,j)-Ik(i,j)|;
其中,Ik-(m-n)(i,j)、Ik(i,j)和Ik+m(i,j)分别表示预处理序列图像I(i,j)中的某三帧预处理图像,m-n和m分别表示预处理序列图像I(i,j)中两帧预处理图像之间的间隔帧数,m,n∈Z,且m≥3,n∈[0,3];
(5)分别对所得两个差分图像D(k,k-(m-n))(i,j)和D(k+m,k)(i,j)做二值化处理,得到对应的二值化图像R(k,k-(m-n))(i,j)和R(k+m,k)(i,j);其中,二值化处理准则如下:
R ( k , k - ( m - n ) ) ( i , j ) = 255 D ( k , k - ( m - n ) ) ( i , j ) > T 0 e l s e , R ( k + m , k ) ( i , j ) = 255 D ( k + m , k ) ( i , j ) > T 0 e l s e ;
其中,T表示阈值;
(6)对所得到的两幅相邻的二值化图像R(k,k-(m-n))(i,j)和R(k+m,k)(i,j)做逻辑“或”操作和逻辑“与”操作,分别得到对应运算后的联合二值化“或”图像Bork(i,j)和联合二值化“与”图像Bandk(i,j),并将联合二值化“或”图像Bork(i,j)和联合二值化“与”图像Bandk(i,j)进行逻辑“异或”运算,得到潜在运动目标区域的二值化图像Bk(i,j);其中,
联合二值化“或”图像为 Bor k ( i , j ) = 255 R ( k , k - ( m - n ) ) ( i , j ) ∪ R ( k + m , k ) ( i , j ) ≠ 0 0 R ( k , k - ( m - n ) ) ( i , j ) ∪ R ( k + m , k ) ( i , j ) = 0 ,
联合二值化“与”图像为 Band k ( i , j ) = 255 R ( k , k - ( m - n ) ) ( i , j ) ∩ R ( k + m , k ) ( i , j ) ≠ 0 0 R ( k , k - ( m - n ) ) ( i , j ) ∩ R ( k + m , k ) ( i , j ) = 0 ,
潜在运动目标区域的二值化图像 B k ( i , j ) = 255 Bor k ( i , j ) ⊕ Band k ( i , j ) ≠ 0 0 Bor k ( i , j ) ⊕ Band k ( i , j ) = 0 ;
(7)对潜在运动目标区域内进行基于高斯模型的运动目标检测,对高斯分布的参数均值以及方差赋初值,建立高斯背景模型,并对建立的高斯背景模型以如下设定的更新方式进行实时更新;其中,设定的更新方式为:
μ i j k + 1 = ( 1 - 0.5 α ) μ i j k + 1 + 0.5 αx i j k , ( σ i j k + 1 ) 2 = ( 1 - 0.5 α ) ( σ i j k ) 2 + 0.5 α ( μ i j k + 1 - x i j k + 1 ) 2 ;
μ i j 0 = 1 / N · Σ k = 0 N - 1 x i j k , ( σ i j 0 ) 2 = 1 / N · Σ k = 0 N - 1 [ x i j k - μ i j 0 ] 2 ;
其中,α表示当前帧图像中的像素对所对应位置上的高斯背景模型的更新所做出的贡献程度,α=0.0025;N表示被用来进行高斯背景模型初始化的图像的数量,表示第k帧图像中(i,j)位置上的像素观察值;
(8)计算像素位置上高斯分布的90%置信区间的上限和下限并对运动前景提取得到运动目标其中,
x i j k + 1 = 0 x i j k + 1 ∈ [ x h k + 1 , x l k + 1 ] 255 e l s e ;
x h k + 1 = μ i j k + 1.6 σ i j k , x l k + 1 = μ i j k - 1.6 σ i j k ;
所述警报模块,将接收到的运动目标提取结果经第二LTE通信模块发送给智能移动终端进行报警防盗提示。
为了在获取连续原始帧图像的同时,又能够保证对视频采集模块所采集视频中运动目标的检测效果,作为优选,所述步骤(3)中的间隔帧数m为3,n为1。
与现有技术相比,本发明的优点在于:库房内的视频采集模块将采集的库房内的监控视频保存到视频存储模块,视频提取模块提取监控视频发送给视频分帧模块分帧,视频分帧模块按照分帧顺序,将监控视频分帧成若干具有独立编号的原始帧图像,并发送给图像类型识别模块识别,识别的动态图像则由图像类型转换模块转换为静态图像,然后发送给图像预处理模块滤噪处理,滤噪后的原始帧图像给运动目标提取模块提取其中的发生变化的运动目标,以消除抖动的镜头对运动目标提取产生干扰,并发送运动目标给警报模块,该运动目标即为库房监控视频中的运动物,即潜在进行盗窃的运动目标,从而警报模块经第二LTE通信模块将报警信息及运动目标发送给智能移动终端,由监控人员采取应对措施,防止库房发生盗窃。
附图说明
图1为本发明中基于智能移动终端的库房防盗视频监控系统的结构示意图;
图2为图1中运动目标提取模块提取运动目标的方法流程示意图。
具体实施方式
以下结合附图实施例对本发明作进一步详细描述。
如图1所示,本实施例中提供的基于智能移动终端的库房防盗视频监控系统,包括设有第一LTE通信模块10的智能移动终端1以及设置在库房2内的视频采集模块20、视频存储模块21、视频提取模块22、视频分帧模块23、图像类型识别模块24、图像类型转换模块25、图像预处理模块26、运动目标提取模块27、警报模块28和第二LTE通信模块29;
视频存储模块21分别连接视频采集模块20和视频提取模块22,视频分帧模块23分别连接视频提取模块22和图像类型识别模块24,图像类型转换模块25连接图像类型识别模块24和图像预处理模块26,图像预处理模块26连接图像类型识别模块24和运动目标提取模块27,警报模块28分别连接运动目标提取模块27和第二LTE通信模块29,第二LTE通信模块29连接视频采集模块20;其中,
视频采集模块20,用以采集库房2内的视频信息并消除视频抖动,存储已消除视频抖动后的视频信息至视频存储模块21内;
视频提取模块22,用于提取视频存储模块21中的视频信息,并发送给视频分帧模块23;
视频分帧模块23,用以将接收的视频按照预设帧间隔分割成若干独立的帧图像,并按照分割的先后顺序对各帧图像进行顺序编号;
图像类型识别模块24,用以判断所接收的帧图像类型为动态图像时,则将其发送给图像类型转换模块25处理成静态图像;判断接收的帧图像为静态图像时,则直接发送帧图像给图像预处理模块26;
图像类型转换模块25,用以将接收的动态帧图像转换为静态帧图像,并发送转换后的静态帧图像给图像预处理模块26;
图像预处理模块26,用以对接收的静态帧图像进行滤噪处理,并将滤噪后的静态帧图像作为库房监控的原始监控图像发送给运动目标提取模块27;
运动目标提取模块27,用于提取滤噪后的原始监控图像序列中的运动目标,并将提取的运动目标发送给警报模块28,其中,参考图2所示,运动目标的提取方法依次包括如下步骤:
步骤1,以预设编号差值作为编号间隔,在具有独立编号的原始帧图像序列中连续地选取部分原始帧图像组成原始监控图像S(i,j);其中,选取的部分原始帧图像表示为St(i,j),t∈[0,T],T为被选取的原始帧图像数量;
例如,在获取的时长为10秒的原始监控视频A.mp4文件中,视频分帧模块23将该原始监控视频先后分割成独立的200幅独立编号的原始帧图像,即原始帧图像分别为S1(i,j)、S2(i,j)、…、S199(i,j)和S200(i,j);假设预设编号差值为2,则以第一帧原始帧图像为选取的首帧,则连续地选取的部分原始帧图像分别为S1(i,j)、S3(i,j)、S5(i,j)、…、S200(i,j);由被选取的这100幅原始帧图像构成原始监控图像S(i,j);
步骤2,对原始监控图像S(i,j)中的各原始帧图像St(i,j)以预设倍数放大其像素值,并对放大后的各原始帧图像St(i,j)做灰度化处理,得到对应的灰度帧图像Yt(i,j),其中,原始监控图像S(i,j)对应的灰度图像为Y(i,j);
Y(i,j)=0.257×r(i,j)+0.504×g(i,j)+0.239×b(i,j);
其中,r(i,j)、g(i,j)、b(i,j)分别对应原始帧图像St(i,j)的颜色空间三维坐标中的红、绿、蓝颜色分量,Yt(i,j)是该像素点对应的灰度值;在本实施例中,针对红、绿、蓝颜色分量,分别设定优化的图像转换参数0.257、0.504和0.239,以得到具有高压缩率的灰度图像,由此得到具有小容量的灰度图像,从而可以有效的节约智能移动终端的存储空间,进一步提高智能移动终端的运行效率;
步骤3,对灰度图像Y(i,j)中的各灰度帧图像Yt(i,j)进行预处理,得到对应的预处理帧图像It(i,j)和预处理图像I(i,j),并采用高斯滤波分别对各预处理帧图像It(i,j)进行处理,得到纯净的预处理图像,从而可以弥补后续单独使用三帧差分法难以满足对运动目标提取质量的要求不足;其中,高斯函数为均值是零的二维高斯函数g(i,j),其中, g ( i , j ) = exp ( - i 2 + j 2 2 σ 2 ) , 其使用的图像模板算子为 1 273 × 1 4 7 4 1 4 16 26 16 4 7 26 41 26 7 4 16 26 16 4 1 4 7 4 1 ;
步骤4,对前后连续间隔为m-n帧和m帧的三帧预处理图像Ik-(m-n)(i,j)、Ik(i,j)和Ik+m(i,j)做差分,得到两个差分图像D(k,k-(m-n))(i,j)和D(k+m,k)(i,j);其中,
D(k,k-(m-n))(i,j)=|Ik(i,j)-Ik-(m-n)(i,j)|,D(k+m,k)(i,j)=|Ik+m(i,j)-Ik(i,j)|;
其中,Ik-(m-n)(i,j)、Ik(i,j)和Ik+m(i,j)分别表示预处理序列图像I(i,j)中的某三帧预处理图像,m-n和m分别表示预处理序列图像I(i,j)中两帧预处理图像之间的间隔帧数,m,n∈Z,且m≥3,n∈[0,3];
例如,在一系列预处理图像I1(i,j)、I2(i,j)、I3(i,j)、I4(i,j)、I5(i,j)和I6(i,j)中,取m=3,n=1时,以I2(i,j)为首选帧预处理图像,则选取的三帧预处理图像分别为I2(i,j)、I4(i,j)和I5(i,j);其中,m为3且n为1时,可以保证连续选取的三帧预处理图像不会出现大的像素点缺失,以保证库房监控图像内容的不失真性,从而保证对库房监控视频中运动目标的检测效果;
步骤5,分别对所得两个差分图像D(k,k-(m-n))(i,j)和D(k+m,k)(i,j)做二值化处理,得到对应的二值化图像R(k,k-(m-n))(i,j)和R(k+m,k)(i,j);其中,二值化处理准则如下:
R ( k , k - ( m - n ) ) ( i , j ) = 255 D ( k , k - ( m - n ) ) ( i , j ) > T 0 e l s e , R ( k + m , k ) ( i , j ) = 255 D ( k + m , k ) ( i , j ) > T 0 e l s e ;
其中,T表示阈值;
步骤6,对所得到的两幅相邻的二值化图像R(k,k-(m-n))(i,j)和R(k+m,k)(i,j)做逻辑“或”操作和逻辑“与”操作,分别得到对应运算后的联合二值化“或”图像Bork(i,j)和联合二值化“与”图像Bandk(i,j),并将联合二值化“或”图像Bork(i,j)和联合二值化“与”图像Bandk(i,j)进行逻辑“异或”运算,得到潜在运动目标区域的二值化图像Bk(i,j);逻辑“与”操作可以自动摒弃新暴露出来的像素点,有效的消除“鬼影”现象,而通过采用逻辑“异或”运算可以明确的界定出潜在运动目标区域的界限,以得到真实的二值化图像,其中,
联合二值化“或”图像为 Bor k ( i , j ) = 255 R ( k , k - ( m - n ) ) ( i , j ) ∪ R ( k + m , k ) ( i , j ) ≠ 0 0 R ( k , k - ( m - n ) ) ( i , j ) ∪ R ( k + m , k ) ( i , j ) = 0 ,
联合二值化“与”图像为 Band k ( i , j ) = 255 R ( k , k - ( m - n ) ) ( i , j ) ∩ R ( k + m , k ) ( i , j ) ≠ 0 0 R ( k , k - ( m - n ) ) ( i , j ) ∩ R ( k + m , k ) ( i , j ) = 0 ,
潜在运动目标区域的二值化图像 B k ( i , j ) = 255 Bor k ( i , j ) ⊕ Band k ( i , j ) ≠ 0 0 Bor k ( i , j ) ⊕ Band k ( i , j ) = 0 ;
步骤7,对潜在运动目标区域内进行基于高斯模型的运动目标检测,对高斯分布的参数均值以及方差赋初值,建立高斯背景模型,并对建立的高斯背景模型以如下设定的更新方式进行实时更新;其中,设定的更新方式为:
μ i j k + 1 = ( 1 - 0.5 α ) μ i j k + 1 + 0.5 αx i j k , ( σ i j k + 1 ) 2 = ( 1 - 0.5 α ) ( σ i j k ) 2 + 0.5 α ( μ i j k + 1 - x i j k + 1 ) 2 ;
μ i j 0 = 1 / N · Σ k = 0 N - 1 x i j k , ( σ i j 0 ) 2 = 1 / N · Σ k = 0 N - 1 [ x i j k - μ i j 0 ] 2 ;
其中,α表示当前帧图像中的像素对所对应位置上的高斯背景模型的更新所做出的贡献程度,本实施例中设定α=0.0025,以满足当前更新后的背景模型真实的反映实际场景中的真实背景图像,而当贡献程度α设定为其他数值时,则更新后的背景模型与实际场景中的真实背景图像发生偏移,从而导致不能建立最佳的背景模型;N表示被用来进行高斯背景模型初始化的图像的数量,表示第k帧图像中(i,j)位置上的像素观察值;
步骤8,计算像素位置上高斯分布的90%置信区间的上限和下限并对运动前景提取得到运动目标其中,
x i j k + 1 = 0 x i j k + 1 ∈ [ x h k + 1 , x l k + 1 ] 255 e l s e ;
x h k + 1 = μ i j k + 1.6 σ i j k , x l k + 1 = μ i j k - 1.6 σ i j k ;
警报模块28,将接收到的运动目标提取结果经第二LTE通信模块发送给智能移动终端进行报警防盗提示。
以下结合图1和图2,对本实施例中基于智能移动终端的库房防盗视频监控系统的工作过程做出说明:
库房2内的视频采集模块20将采集的库房内的监控视频保存到视频存储模块21中,并且视频提取模块22将从视频存储模块21中提取的监控视频发送给视频分帧模块23分帧;
视频分帧模块23按照分帧顺序,将监控视频分帧成若干具有独立编号的原始帧图像,并发送给图像类型识别模块24识别;当图像类型识别模块24识别当前原始帧图像为动态图像时,则发送给图像类型转换模块25将其转换为静态图像,然后发送给图像预处理模块26,否则,图像类型识别模块24直接将静态的原始帧图像发送给图像预处理模块26;
图像预处理模块26将接收的静态的原始帧图像滤噪处理后,则发送滤噪后的原始帧图像给运动目标提取模块27按照本实施例中的运动目标提取方法来提取其中的发生变化的运动目标,以消除抖动的镜头对运动目标提取产生干扰,并发送提取的运动目标给警报模块28,该运动目标即为库房监控视频中的运动物,即潜在进行盗窃的运动目标,从而警报模块28经第二LTE通信模块29将报警信息及运动目标发送给智能移动终端1,由智能移动终端1端的监控人员采取应对措施,防止库房发生盗窃。

Claims (2)

1.基于智能移动终端的库房防盗视频监控系统,其特征在于,包括设有第一LTE通信模块的智能移动终端以及设置在库房内的视频采集模块、视频存储模块、视频提取模块、视频分帧模块、图像类型识别模块、图像类型转换模块、图像预处理模块、运动目标提取模块、警报模块和第二LTE通信模块;所述视频存储模块分别连接视频采集模块和视频提取模块,所述视频分帧模块分别连接视频提取模块和图像类型识别模块,所述图像类型转换模块连接图像类型识别模块和图像预处理模块,所述图像预处理模块连接图像类型识别模块和运动目标提取模块,所述警报模块分别连接运动目标提取模块和第二LTE通信模块,第二LTE通信模块连接视频采集模块;其中,
所述视频采集模块,用以采集库房内的视频信息并消除视频抖动,存储已消除视频抖动后的视频信息至视频存储模块内;
所述视频提取模块,用于提取视频存储模块中的视频信息,并发送给视频分帧模块;
所述视频分帧模块,用以将接收的视频按照预设帧间隔分割成若干独立的帧图像,并按照分割的先后顺序对各帧图像进行顺序编号;
所述图像类型识别模块,用以判断所接收的帧图像类型为动态图像时,则将其发送给图像类型转换模块处理成静态图像;判断接收的帧图像为静态图像时,则直接发送帧图像给图像预处理模块;
所述图像类型转换模块,用以将接收的动态帧图像转换为静态帧图像,并发送转换后的静态帧图像给图像预处理模块;
所述图像预处理模块,用以对接收的静态帧图像进行滤噪处理,并将滤噪后的静态帧图像作为库房监控的原始监控图像发送给运动目标提取模块;
所述运动目标提取模块,用于提取滤噪后的原始监控图像序列中的运动目标,并将提取的运动目标发送给警报模块,其中,运动目标的提取方法依次包括如下步骤:
(1)以预设编号差值作为编号间隔,在具有独立编号的原始帧图像序列中连续地选取部分原始帧图像组成原始监控图像S(i,j);其中,选取的部分原始帧图像表示为St(i,j),t∈[0,T],T为被选取的原始帧图像数量;
(2)对原始监控图像S(i,j)中的各原始帧图像St(i,j)以预设倍数放大其像素值,并对放大后的各原始帧图像St(i,j)做灰度化处理,得到对应的灰度帧图像Yt(i,j),其中,原始监控图像S(i,j)对应的灰度图像为Y(i,j);其中,原始监控图像S(i,j)转换为灰度图像Y(i,j)采用如下转换公式:
Y(i,j)=0.257×r(i,j)+0.504×g(i,j)+0.239×b(i,j);
其中,r(i,j)、g(i,j)、b(i,j)分别对应原始帧图像St(i,j)的颜色空间三维坐标中的红、绿、蓝颜色分量,Yt(i,j)是该像素点对应的灰度值;
(3)对灰度图像Y(i,j)中的各灰度帧图像Yt(i,j)进行预处理,得到对应的预处理帧图像It(i,j)和预处理图像I(i,j),并采用高斯滤波分别对各预处理帧图像It(i,j)进行处理;其中,高斯函数为均值是零的二维高斯函数g(i,j),其中,
g ( i , j ) = exp ( - i 2 + j 2 2 σ 2 ) , 其使用的图像模板算子为 1 273 × 1 4 7 4 1 4 16 26 16 4 7 26 41 26 7 4 16 26 16 4 1 4 7 4 1 ;
(4)对前后连续间隔为m-n帧和m帧的三帧预处理图像Ik-(m-n)(i,j)、Ik(i,j)和Ik+m(i,j)做差分,得到两个差分图像D(k,k-(m-n))(i,j)和D(k+m,k)(i,j);其中,
D(k,k-(m-n))(i,j)=|Ik(i,j)-Ik-(m-n)(i,j)|,D(k+m,k)(i,j)=|Ik+m(i,j)-Ik(i,j)|;
其中,Ik-(m-n)(i,j)、Ik(i,j)和Ik+m(i,j)分别表示预处理序列图像I(i,j)中的某三帧预处理图像,m-n和m分别表示预处理序列图像I(i,j)中两帧预处理图像之间的间隔帧数,m,n∈Z,且m≥3,n∈[0,3];
(5)分别对所得两个差分图像D(k,k-(m-n))(i,j)和D(k+m,k)(i,j)做二值化处理,得到对应的二值化图像R(k,k-(m-n))(i,j)和R(k+m,k)(i,j);其中,二值化处理准则如下:
R ( k , k - ( m - n ) ) ( i , j ) = 255 D ( k , k - ( m - n ) ) ( i , j ) > T 0 e l s e , R ( k + m , k ) ( i , j ) = 255 D ( k + m , k ) ( i , j ) > T 0 e l s e ;
其中,T表示阈值;
(6)对所得到的两幅相邻的二值化图像R(k,k-(m-n))(i,j)和R(k+m,k)(i,j)做逻辑“或”操作和逻辑“与”操作,分别得到对应运算后的联合二值化“或”图像Bork(i,j)和联合二值化“与”图像Bandk(i,j),并将联合二值化“或”图像Bork(i,j)和联合二值化“与”图像Bandk(i,j)进行逻辑“异或”运算,得到潜在运动目标区域的二值化图像Bk(i,j);其中,
联合二值化“或”图像为 Bor k ( i , j ) = 255 R ( k , k - ( m - n ) ) ( i , j ) ∪ R ( k + m , k ) ( i , j ) ≠ 0 0 R ( k , k - ( m - n ) ) ( i , j ) ∪ R ( k + m , k ) ( i , j ) = 0 ,
联合二值化“与”图像为 Band k ( i , j ) = 255 R ( k , k - ( m - n ) ) ( i , j ) ∩ R ( k + m , k ) ( i , j ) ≠ 0 0 R ( k , k - ( m - n ) ) ( i , j ) ∩ R ( k + m , k ) ( i , j ) = 0 ,
潜在运动目标区域的二值化图像 B k ( i , j ) = 255 Bor k ( i , j ) ⊕ Band k ( i , j ) ≠ 0 0 Bor k ( i , j ) ⊕ Band k ( i , j ) = 0 ;
(7)对潜在运动目标区域内进行基于高斯模型的运动目标检测,对高斯分布的参数均值以及方差赋初值,建立高斯背景模型,并对建立的高斯背景模型以如下设定的更新方式进行实时更新;其中,设定的更新方式为:
μ i j k + 1 = ( 1 - 0.5 α ) μ i j k + 1 + 0.5 αx i j k , ( σ i j k + 1 ) 2 = ( 1 - 0.5 α ) ( σ i j k ) 2 + 0.5 α ( μ i j k + 1 - x i j k + 1 ) 2 ;
μ i j 0 = 1 / N · Σ k = 0 N - 1 x i j k , ( σ i j 0 ) 2 = 1 / N · Σ k = 0 N - 1 [ x i j k - μ i j 0 ] 2 ;
其中,α表示当前帧图像中的像素对所对应位置上的高斯背景模型的更新所做出的贡献程度,α=0.0025;N表示被用来进行高斯背景模型初始化的图像的数量,表示第k帧图像中(i,j)位置上的像素观察值;
(8)计算像素位置上高斯分布的90%置信区间的上限和下限并对运动前景提取得到运动目标其中,
x i j k + 1 = 0 x i j k + 1 ∈ [ x h k + 1 k + 1 , x l k + 1 ] 255 e l s e ;
x h k + 1 = μ i j k + 1.6 σ i j k , x l k + 1 = μ i j k - 1.6 σ i j k ;
所述警报模块,将接收到的运动目标提取结果经第二LTE通信模块发送给智能移动终端进行报警防盗提示。
2.根据权利要求1所述的基于智能移动终端的库房防盗视频监控系统,其特征在于,所述步骤(3)中的间隔帧数m为3,n为1。
CN201510718773.8A 2015-10-29 2015-10-29 基于智能移动终端的库房防盗视频监控系统 Active CN105338315B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510718773.8A CN105338315B (zh) 2015-10-29 2015-10-29 基于智能移动终端的库房防盗视频监控系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510718773.8A CN105338315B (zh) 2015-10-29 2015-10-29 基于智能移动终端的库房防盗视频监控系统

Publications (2)

Publication Number Publication Date
CN105338315A true CN105338315A (zh) 2016-02-17
CN105338315B CN105338315B (zh) 2018-08-31

Family

ID=55288560

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510718773.8A Active CN105338315B (zh) 2015-10-29 2015-10-29 基于智能移动终端的库房防盗视频监控系统

Country Status (1)

Country Link
CN (1) CN105338315B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106971567A (zh) * 2017-05-18 2017-07-21 上海博历机械科技有限公司 一种交通路段车辆排队视频检测系统
CN111918054A (zh) * 2020-06-29 2020-11-10 普瑞达建设有限公司 视屏侦测分析系统
CN114612503A (zh) * 2022-05-13 2022-06-10 深圳市巨力方视觉技术有限公司 一种基于机器视觉的图像处理式运动监测系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101436301A (zh) * 2008-12-04 2009-05-20 上海大学 视频编码中特征运动区域的检测方法
CN101635835A (zh) * 2008-07-25 2010-01-27 深圳市信义科技有限公司 智能视频监控方法及系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101635835A (zh) * 2008-07-25 2010-01-27 深圳市信义科技有限公司 智能视频监控方法及系统
CN101436301A (zh) * 2008-12-04 2009-05-20 上海大学 视频编码中特征运动区域的检测方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
张光伟: "视频系列中入侵目标检测算法研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
熊欧,郑紫微,胡峰: "基于Android平台的视频运动目标检测系统", 《数据通信》 *
赵旭东: "面向移动目标检测的天气场景建模方法", 《中国博士学术论文全文数据库 信息科技辑 第1期》 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106971567A (zh) * 2017-05-18 2017-07-21 上海博历机械科技有限公司 一种交通路段车辆排队视频检测系统
CN111918054A (zh) * 2020-06-29 2020-11-10 普瑞达建设有限公司 视屏侦测分析系统
CN111918054B (zh) * 2020-06-29 2021-05-04 普瑞达建设有限公司 视屏侦测分析系统
CN114612503A (zh) * 2022-05-13 2022-06-10 深圳市巨力方视觉技术有限公司 一种基于机器视觉的图像处理式运动监测系统

Also Published As

Publication number Publication date
CN105338315B (zh) 2018-08-31

Similar Documents

Publication Publication Date Title
CN106600888B (zh) 一种森林火灾自动检测方法及系统
CN106056079B (zh) 一种图像采集设备及人脸五官的遮挡检测方法
CN111091098B (zh) 检测模型的训练方法、检测方法及相关装置
US20190197313A1 (en) Monitoring device
CN111325048B (zh) 一种人员聚集检测方法和装置
CN104966304A (zh) 基于卡尔曼滤波与非参数背景模型的多目标检测跟踪方法
CN110363742A (zh) 一种基于cnn和图像处理的转辙机缺口检测方法
CN103729858A (zh) 一种视频监控系统中遗留物品的检测方法
CN107301375A (zh) 一种基于稠密光流的视频图像烟雾检测方法
CN105338315A (zh) 基于智能移动终端的库房防盗视频监控系统
CN101739549A (zh) 人脸检测方法及系统
CN103996045A (zh) 一种基于视频的多种特征融合的烟雾识别方法
CN104504707A (zh) 一种监控相机视频画面的异物遮挡检测方法
CN108335294A (zh) 复杂条件下的配电房异常状态图像识别方法
CN107067595A (zh) 一种指示灯的状态辨识方法、装置及电子设备
CN105957300B (zh) 一种智慧金睛识别可疑张贴遮蔽报警方法和装置
CN112364740A (zh) 一种基于计算机视觉的无人机房监控方法及系统
CN107093186A (zh) 基于边缘投影匹配的剧烈运动检测方法
CN105427279A (zh) 一种基于计算机视觉及物联网的草原旱情监测系统和方法
CN105405153A (zh) 智能移动终端抗噪声干扰运动目标提取方法
CN105335981B (zh) 一种基于图像的货物监控方法
CN112288691A (zh) 一种基于图像处理的水电厂内滴水检测方法
CN105930814A (zh) 基于视频监控平台的人员异常聚集行为的检测方法
CN103020588A (zh) 基于视频图像分析的火焰检测方法
CN112351247A (zh) 一种基于图像处理的水电厂内电光闪光检测方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20210425

Address after: Room 406, no.3020 Huling Road, Linghu Town, Nanxun District, Huzhou City, Zhejiang Province

Patentee after: Huzhou lingchuang Technology Co.,Ltd.

Address before: 315211 Zhejiang Province, Ningbo Jiangbei District Fenghua Road No. 818

Patentee before: Ningbo University

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20231211

Address after: Room 1604, Building A3, Desiqin City Plaza, No. 18 Xiangfu Middle Road, Hongxing Village, Jingwanzi Street, Yuhua District, Changsha City, Hunan Province, 410007

Patentee after: Hunan Shouchuang Information Technology Co.,Ltd.

Address before: Room 406, no.3020 Huling Road, Linghu Town, Nanxun District, Huzhou City, Zhejiang Province

Patentee before: Huzhou lingchuang Technology Co.,Ltd.

TR01 Transfer of patent right