发明内容
本发明实施例提供一种目标检测方法,能够提高目标检测的准确度。
本发明实施例提供一种目标检测装置,能够提高目标检测的准确度。
本发明实施例还提供一种监控系统,能够提高目标检测的准确度。
为达到上述目的,本发明提供一种目标检测方法,包括:
1)根据采集到的若干帧图像进行背景建模,得到背景图像;
2)将背景图像和当前帧图像分别划分成若干个区域,根据当前帧图像与背景图像各区域的颜色信息,判断被拍摄区域是否出现异常情况;
3)如果被拍摄区域出现异常情况,则根据当前帧图像中发生变化的区域参数,计算目标确认值;
4)根据目标确认值,判断被拍摄区域出现的异常情况是否是监控目标。
所述将背景图像和当前帧图像分别划分成若干个区域,根据当前帧图像与背景图像各区域的颜色信息,判断被拍摄区域是否出现异常情况,包括:
将背景图像分为多个区域,给每个区域编号,并计算每个区域的图像信息值;
将当前帧图像与背景图像分为相同个数的区域,为当前帧图像与背景图像中位置相同的区域建立对应关系,并计算每个区域的图像信息值;
根据背景图像中每个区域的图像信息值与当前帧图像中对应区域的图像信息值之间的关系,判断各区域是否发生变化;
根据当前帧图像中发生变化区域的图像信息值变化量之和与当前帧图像信息值变化量的关系,判断被拍摄区域是否出现异常情况。
所述图像信息值为亮度值或色度值。
所述根据背景图像中每个区域的图像信息值与当前帧图像中对应区域的图像信息值之间的关系,判断各区域是否发生变化,为:判断当前帧图像各区域的颜色值与在背景图像中编号相同的区域的颜色值之差是否大于预设阈值,如果其大于预设阈值,则判定该区域发生变化;否则判定该区域未发生变化。
所述预设阈值为一个区域大小的8-16倍。
所述根据当前帧图像中发生变化区域的图像信息值变化量之和与当前帧图像图像信息值变化量的关系,当前帧图像是否发生异常情况,具体为:判断当前帧图像发生变化量之和与当前帧图像图像信息值变化量的比值,是否大于当前帧图像中发生变化的区域个数占总区域个数的比例与预设判断门限的乘积,如果大于,则判定被拍摄区域发生异常情况,否则,判定被拍摄区域正常。
所述预设判断门限的取值范围是1-10。
所述当前帧图像中发生变化的区域参数包括当前帧图像中发生变化的区域个数和发生变化的区域编号。
所述目标确认值为当前帧图像中发生变化的区域个数与发生变化的区域编号之和的乘积。
根据目标确认值,判断被拍摄区域出现的异常情况是否是监控目标,具体为:每隔K帧计算一次所述目标确认值,如果连续m次,每次得到的目标确认值与上一次得到的目标确认值的变化率不大于变化门限,则判定被拍摄区域出现的异常情况不是监控目标,否则是监控目标。
在执行步骤2之前,结合当前帧图像和当前帧的上一帧图像,进行背景更新。
本发明还提供一种目标检测装置,包括:
目标检测模块,用于根据当前帧图像与背景图像的亮度值,判断被拍摄区域是否出现异常情况;
目标确认模块,用于根据当前帧图像中发生变化的区域参数,计算目标确认值,并根据目标确认值,判断被拍摄区域出现的异常情况是否是监控目标。
背景建模模块,用于存储当前输入图像的前若干帧图像中的像素点的像素值,将所得到的背景图像划分成若干个区域,并对每个区域进行编号,计算各区域的亮度值;
输入图像预处理模块,用于将当前帧图像划分成与背景图像中的区域个数相同的区域,并对每个区域进行编号,计算各区域的亮度值,
其中每个区域的编号与背景图像中对应位置上的区域编号相同。
控制模块,用于接收来自所述目标检测模块和所述目标确认模块的信息,对各模块进行控制。
所述目标检测模块包括:
差值计算单元,用于计算当前帧图像每个区域亮度值与背景图像中对应区域亮度值之差,并判断此差值是否大于阈值;如果比较结果是大于,则控制模块发送控制信号,将该区域的编号发送给所述编号存储单元,并发送控制信号使所述第一计数单元加1;否则,所述控制模块向所述第一计数单元发送清零信号。
编号存储单元,用于存储当前帧图像区域的编号,并在接收到所述控制模块清除信号时,将当前所存储的编号清除;
第一计数单元,在接收到控制信号时,加1;在接收到所述控制模块的清零信号时,重新计数;
变化区域集中度计算单元,用于计算当前帧图像发生变化量之和与当前帧图像图像信息值变化量的比值,并判断该比值是否大于当前帧图像中发生变化的区域个数占总区域个数的比例与预设判断门限的乘积;如果大于,则判定被拍摄区域发生异常情况,否则,判定被拍摄区域未发生异常情况,控制模块向所述第一计数单元发送清零信号,向所述编号存储单元发送清除信号。
所述目标确认模块包括:
第二计数单元,用于对输入的图像帧进行计数,当达到预设的计数最大值时自动清零;
目标确认值计算单元,用于在所述第二计数单元达到最大值时或计数值为0时,计算目标确认值;
目标确认值存储单元,用于存储目标确认值;
目标确认单元,还用于比较当前计算所得的目标确认值相对于目标确认值存储单元存储的目标确认值的变化率是否大于变化门限;如果比较结果是连续m次不大于,则判定被拍摄区域发生的异常情况不是监控目标,否则判定被拍摄区域发生的异常情况是监控目标。
该装置还包括背景更新模块;
所述背景更新模块,根据当前帧图像与当前帧的前一帧图像中坐标相同的像素点灰度值,更新背景图像。
本发明还提供一种监控系统,包括:
视频采集装置用于连续采集视频图像,将当前采集到的视频图像作为当前输入图像发送至所述目标检测装置;
目标检测装置用于接收来自视频采集装置的当前输入图像,根据当前帧图像与背景图像的亮度值,判断被拍摄区域是否出现异常情况,
如果判断结果为被拍摄区域出现异常情况,根据当前帧中发生变化的区域参数,计算目标确认值,并根据目标确认值,判断被拍摄区域出现的异常情况是否是监控目标,并将判断结果和当前帧图像发送给所述中心控制装置;
中心控制装置用于接收来自所述目标检测装置的判断结果,并根据接收到的判断结果,决定是否发出告警信号;
如果判断结果为被拍摄区域出现的异常情况是监控目标,所述中心控制装置则发出告警信号,并存储当前帧图像。
所述目标检测装置包括:
目标检测模块,用于根据当前帧图像与背景图像的亮度值,判断被拍摄区域是否出现异常情况;
目标确认模块,用于根据当前帧图像中发生变化的区域参数,计算目标确认值,并根据目标确认值,判断被拍摄区域出现的异常情况是否是监控目标
由以上的技术方案可见,本发明提供的目标检测方法、装置以及监控系统,
本发明通过将背景图像和当前帧图像分成若干区域,根据各区域图像信息值的变化情况,判定被拍摄区域是否发生变化的方法,实现对目标的实时监控。无需提取检测出的目标的准确轮廓,减小计算量。
另外,根据待测图像中发生变化的区域参数,计算目标确认值;并根据目标确认值,判断被拍摄区域出现的异常情况是否是监控目标,消除了场景光线等监控目标以外的客观因素对确定监控目标产生的干扰影响,提高目标检测的准确性,减小了误报的概率。
具体实施方式
为使本发明的目的、技术方案及优点更加清楚明白,以下参照附图并举实施例,对本发明进一步详细说明。
图1是本发明提供的一种目标检测方法的流程图。该方法包括以下步骤:
步骤101,根据采集到的若干帧图像进行背景建模,得到背景图像。
步骤102,将背景图像和当前帧图像分别划分成若干个区域,根据当前帧图像与背景图像各区域的图像信息值,判断被拍摄区域是否出现异常情况。
优选的,在步骤102之前,对当前帧图像进行预处理,并结合当前帧图像和当前帧的上一帧图像,进行背景更新。
在步骤102中,将背景图像和当前帧图像分别划分成若干个区域,具体为:将当前帧图像与背景图像分为相同个数的区域,为当前帧图像与背景图像中位置相同的区域建立对应关系,使得当前帧与背景图像中位置相同的区域编号相同。
在步骤102中,根据当前帧图像与背景图像各区域的图像信息值,判断被拍摄区域是否出现异常情况,具体为:根据背景图像中每个区域的图像信息值与当前帧图像中对应区域的图像信息值之间的关系,判断各区域是否发生变化;并根据当前帧图像中发生变化区域的图像信息值变化量之和与当前帧图像信息值变化量的关系,判断被拍摄区域是否出现异常情况。
其中,根据背景图像中每个区域的图像信息值与当前帧图像中对应区域的图像信息值之间的关系,判断各区域是否发生变化,具体为:判断当前帧图像各区域的颜色值与在背景图像中编号相同的区域的颜色值之差是否大于预设阈值,如果其大于预设阈值,则判定该区域发生变化;否则判定该区域未发生变化。
所述根据当前帧图像中发生变化区域的图像信息值变化量之和与当前帧图像图像信息值变化量的关系,当前帧图像是否发生异常情况,具体为:判断当前帧图像发生变化区域的颜色信息值变化量之和与当前帧图像图像信息值变化量的比值,是否大于当前帧图像中发生变化的区域个数占总区域个数的比例与预设判断门限的乘积,如果大于,则判定被拍摄区域发生异常情况,执行步骤103;否则,判定被拍摄区域正常,采集下一帧图像,进行背景更新,返回步骤102。
步骤103,根据当前帧图像中发生变化的区域参数,计算目标确认值。
所述当前帧图像中发生变化的区域参数包括当前帧图像中发生变化的区域个数和发生变化的区域编号。
所述目标确认值为当前帧图像中发生变化的区域个数与发生变化的区域编号之和的乘积。这个步骤可以每隔K帧执行一次。K的取值范围可以是1到3。
步骤104,根据步骤103中计算所得的目标确认值,判断被拍摄区域出现的异常情况是否是监控目标。
本步骤具体为:如果连续m次,每次得到的目标确认值与上一次得到的目标确认值的变化率不大于预设的变化门限,则判定被拍摄区域出现的异常情况不是监控目标,否则是监控目标。其中,m的取值范围可以是3到5。
下面结合具体实施例,详细说明上述步骤。
图2是本发明提供的一种目标检测方法的具体实施例示意图。
步骤201,根据从图像采集设备采集到的若干帧图像得出初始背景图像中每个像素点亮度值,进行背景建模。
具体为:每个像素点的灰度值是符合高斯分布的,因此可以计算:
μn(x,y)和σn(x,y)分别表示前n帧图像的(x,y)点的均值和均方差。
可以利用有限帧图像建立一个背景模型,
fik(x,y)满足|fik(x,y)-μn(x,y)|≤βσn(x,y),
其中m是所述有限帧数,是一个预先设定的常量,帧数较多时,可设置为1。
步骤202,对当前帧图像进行预处理,并进行背景图像更新。
在本步骤中对当前帧图像进行的预处理,包括对当前帧图像进行滤波、降噪、灰度变换、二值化等处理,这些预处理的方法和处理过程有很多种,并被本领域技术人员所熟知,在这里就不再赘述。
在这里,对背景图像进行更新,首先判断当前帧图像与当前帧的上一帧图像中坐标相同的像素点亮度值的差值绝对值是否大于设定的阈值,如果是,则令B(x,y)=αB1(x,y),若否,则令B(x,y)=αB1(x,y)+(1-α)f(x,y),其中B(x,y)为所述当前帧的背景图象中坐标为(x,y)的像素点亮度值,若当前帧为所述背景建模中图象采集设备采集的若干帧之后的第1帧,则B1(x,y)为所述初始背景图像中坐标为(x,y)的像素点亮度值,否则为所述当前帧的前1帧的背景图象中坐标为(x,y)的像素点亮度值,f(x,y)是所述当前帧中坐标为(x,y)的像素点亮度值,α是设定的参数,取值满足0≤α≤1;
步骤203,在空间域将背景图像和当前帧图像分为n个大小为u×v的区域,对每个区域进行编号,并计算背景图像和当前帧图像的图像信息值。
对每个区域的编号规则可以是从上到下,每一行中可以是从左到右,也可以按照其他的编号规则。只需满足背景图像和当前帧图像中相同位置上的编号相同,以便在后续步骤中,将相同编号的区域进行比较。
在本步骤中,背景图像和当前帧图像的图像信息值,可以是亮度值,也可以是色度值。在本实施例中,图像信息值以亮度值为例。
所述计算背景图像和当前帧图像的亮度值,具体为:计算背景图像的亮度总值Sb,其为背景图像各像素点亮度值之和;计算各区域亮度总值Sbi,其为背景图像各区域中各像素点亮度值之和;两者的关系是 计算当前帧图像各区域的亮度总值Sti(1≤i≤n),其为当前帧图像各区域中各像素点亮度值之和。
步骤204,根据预设的阈值T,判断当前帧图像各区域相对于背景图像相应区域是否发生变化。所述预设阈值可以是图像中一个区域大小的8-16倍。
由于考虑到对于图像来说,噪声的方差为3-6,那么如果像素亮度值方差大于10,则可以肯定该像素点发生了异常情况。因此,在这个步骤中,我们可以预设阈值T=u×v×10。
本步骤中,判断当前帧图像各区域相对于背景图像相应区域是否发生变化,具体为,比较当前帧图像各区域亮度总值Sti相对于背景图像相应区域亮度总值Sbi的变化量与所预设的阈值T之间的关系,并有判断函数:
在上式中,当前帧图像各区域亮度总值Sti相对于背景图像相应区域亮度总值Sbi的变化量大于阈值T时,表明当前帧图像中该区域发生变化,f(i)为1,执行步骤205;当前帧图像各区域亮度总值Sti相对于背景图像相应区域亮度总值Sbi的变化量不大于阈值T时,表明当前帧图像中该区域未发生变化,f(i)为0,返回步骤202,对下一帧图像进行处理。
步骤205,判断当前所拍摄到的区域是否发生异常情况。
在步骤204中,已经得到当前帧图像中发生变化的区域,这些发生变化的区域编号组成一个编号的集合Pt={Li},在此同时,可以获得发生变化的各区域的编号Lk,以及发生变化的区域的个数
为了避免图像区域发生变化的偶然性,以及外界环境突变对图像亮度值产生的影响,可以计算一下被判定为发生变化的区域亮度值的变化总值在整帧图像的变化中所占的比例,如果这个比例大于所变化的区域个数占总区域个数的比例与一个判断门限α的乘积,则判定当前所拍摄到的区域发生异常。这里的判断门限α满足1<α≤10。
其中,被判定为发生变化的区域亮度值的变化总值在整帧图像的变化中所占的比例可以定义为变化区域集中度参数,用公式表示为: 当 时,判定当前所拍摄到的区域发生异常情况,执行步骤206。
步骤206,计算当前帧图像的目标确认值,判断步骤205中其确定的异常情况是否是所需监控的目标。
虽然在步骤205中已经判断出当前所拍摄到的区域是否发生异常情况,但是并不能因此而确定该异常情况是所需监控的目标。换句话说,在步骤205中发现的异常情况,可能是外界环境的变化所造成的异常情况,比如监控区域被照亮,这样,也可以在步骤205中作为异常情况发现。要更加准确的确定监控区域所发生的异常情况是否是所需监控的目标,便需要根据监控目标运动特性,进行判断。
一般而言,以盗窃行为为例,盗窃者进入监控区域不会长时间静止或在空间上固定状态,而且盗窃者的运动只会导致部分区域亮度值的变化。在本实施例的几帧图像中,由于盗窃者运动,会导致发生变化的区域个数以及变化区域的编号改变。结合这两个因素,当前帧图像的目标确认值为,当前帧图像中发生变化的区域个数与变化区域编号之和的乘积,即
由于一方面有的时候监控目标的运动需要在几帧图像中才能看出,另一方面出于减少计算量的考虑,可以每隔几帧图像计算一次当前帧图像的目标确认值,当然也可以对每一帧发生异常情况的图像进行计算。
为了排除监控区域受外界因素的影响所造成的干扰,在这里还需要计算连续c次目标确认值的变化率,如果变化率连续c次都不超过变化门限,c的取值范围可以是3-5,则符合外界因素,比如光照,变化波及区域大、持续时间长的特点,便被认为是外界干扰,返回步骤202;如果在c次之内便有变化率超过变化门限的目标确认值出现,则认为被拍摄区域的异常情况确为所需监控的目标。
在这里变化门限为预设值可以为20%。
另外,通常情况下,所需监控的目标为人物,那么根据人物目标的特点,所占区域大小不可能太小,这样就可以排除宠物等所占区域与人物所占区域大小相差甚远的外界因素的干扰。所以通过判断监控目标所占区域的大小,可以进一步确定拍摄区域的异常情况是否是所需监控的目标。
基于以上方法,本发明实施例还提供了一种目标检测装置。图3是本发明提供的一种目标检测装置的结构示意图。该装置包括:
背景建模模块301,用于存储当前输入图像的前若干帧图像中的像素点的像素值,将所得到的背景图像划分成若干个区域,并对每个区域进行编号,计算各区域的亮度值;
输入图像预处理模块302,用于将当前帧图像划分成与背景图像中的区域个数相同的区域,并对每个区域进行编号,计算各区域的亮度值,
背景更新模块303,根据当前帧图像与当前帧的前一帧图像中坐标相同的像素点灰度值,更新背景图像。
目标检测模块304,用于根据当前帧图像与背景图像的亮度值,判断被拍摄区域是否出现异常情况;
目标确认模块305,用于根据当前帧图像中发生变化的区域参数,计算目标确认值,并根据目标确认值,判断被拍摄区域出现的异常情况是否是监控目标。
其中每个区域的编号与背景图像中对应位置上的区域编号相同。
控制模块306,用于接收来自目标检测模块304和目标确认模块305的信息,对各模块进行控制。
图4是目标检测模块的一种实施例示意图,该模块包括:
差值计算单元401,用于计算当前帧图像每个区域亮度值与背景图像中对应区域亮度值之差,并判断此差值是否大于阈值;如果比较结果是大于,则控制模块306发送控制信号,将该区域的编号发送给编号存储单元402,并发送控制信号使计数器加1;否则,控制模块306向计数器发送清零信号。
编号存储单元402,用于存储当前帧图像区域的编号,并在接收到控制模块306清除信号时,将当前所存储的编号清除;
第一计数单元403,在接收到控制信号时,加1;在接收到控制模块的清零信号时,重新计数;
变化区域集中度计算单元404,用于计算当前帧图像发生变化量之和与当前帧图像图像信息值变化量的比值,并判断该比值是否大于当前帧图像中发生变化的区域个数占总区域个数的比例与预设判断门限的乘积;如果大于,则判定被拍摄区域发生异常情况,否则,判定被拍摄区域未发生异常情况,控制模块306向第一计数单元403发送清零信号,向编号存储单元402发送清除信号。
图5是目标确认模块的一种实施例示意图,该模块包括:
第二计数单元501,用于对输入的图像帧进行计数,当达到预设的计数最大值时自动清零;
目标确认值计算单元502,用于在第二计数单元达到最大值时或计数值为0时,计算目标确认值;
目标确认值存储单元503,用于存储目标确认值;
目标确认单元504,还用于比较当前计算所得的目标确认值相对于目标确认值存储单元503存储的目标确认值的变化率是否大于变化门限;如果比较结果是连续c次不大于,则判定被拍摄区域发生的异常情况不是监控目标,否则判定被拍摄区域发生的异常情况是监控目标。
本发明还提供一种监控系统。图6是本发明提供的监控系统的实施例示意图。该系统包括:视频采集装置601、目标检测装置602和中心控制装置603,
视频采集装置601用于连续采集视频图像,将当前采集到的视频图像作为当前输入图像发送至目标检测装置602;
目标检测装置602用于接收来自视频采集装置的当前输入图像,根据当前帧图像与背景图像的亮度值,判断被拍摄区域是否出现异常情况,
如果判断结果为被拍摄区域出现异常情况,根据当前帧中发生变化的区域参数,计算目标确认值,并根据目标确认值,判断被拍摄区域出现的异常情况是否是监控目标,并将判断结果和当前帧图像发送给中心控制装置603;
中心控制装置603用于接收来自目标检测装置的判断结果和当前帧图像,并根据接收到的判断结果,决定是否发出告警信号;
如果判断结果为被拍摄区域出现的异常情况是监控目标,中心控制装置603则发出告警信号,并存储当前帧图像。
其中,目标检测装置602包括:
目标检测模块6021,用于根据当前帧图像与背景图像的亮度值,判断被拍摄区域是否出现异常情况;
目标确认模块6022,用于根据当前帧图像中发生变化的区域参数,计算目标确认值,并根据目标确认值,判断被拍摄区域出现的异常情况是否是监控目标。
从上述技术方案中可以看出,本发明实施例提供的目标检测方法、装置及监控系统,基于背景差分的改进目标检测方法,将背景图像和待测图像分成若干区域,根据各区域图像信息值的变化情况判定被拍摄区域是否发生变化,无需提取检测出的目标的准确轮廓,减小计算量;根据待测图像中发生变化的区域参数,计算目标确认值;并根据目标确认值,判断被拍摄区域出现的异常情况是否是监控目标,消除了场景光线等客观因素对确定监控目标产生的干扰影响,提高目标检测的准确性。
综上所述,以上仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。