CN108629792A - 基于背景建模与背景差分的激光目标检测方法和装置 - Google Patents
基于背景建模与背景差分的激光目标检测方法和装置 Download PDFInfo
- Publication number
- CN108629792A CN108629792A CN201810246212.6A CN201810246212A CN108629792A CN 108629792 A CN108629792 A CN 108629792A CN 201810246212 A CN201810246212 A CN 201810246212A CN 108629792 A CN108629792 A CN 108629792A
- Authority
- CN
- China
- Prior art keywords
- background
- image
- modeling
- gauss model
- difference
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/254—Analysis of motion involving subtraction of images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
- G06T7/251—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments involving models
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
本发明涉及一种基于背景建模与背景差分的激光目标检测方法和装置。该方法包括以下步骤:1)利用混合高斯背景建模方法和卡尔曼滤波方法,对视频帧序列以及差分反馈信号进行背景建模,得到背景图像;2)将当前视频帧与所述背景图像相减,得到差分图像;3)对所述差分图像进行滤波、去噪等处理以提高信噪比;4)通过光斑定位算法检测所述差分图像中背景干扰下的激光光斑,实现激光目标检测。本发明利用背景的参数模型来近似背景图像的像素值,将当前帧与背景图像进行差分,实现对运动区域的检测,结合高斯分布以及卡尔曼滤波的背景建模能够很好的模拟实时背景的变化,能够有效地抑制背景噪声干扰,实现对激光信号的捕获。
Description
技术领域
本发明涉及一种基于背景建模与背景差分的激光目标检测方法和装置,属于计算机视觉以及计算机图形学领域。
背景技术
对于卫星激光捕获系统,其关键技术在于如何有效地从实际场景中检测出感兴趣或者可疑的目标激光信号,也就是所谓的前景目标(Foreground,FG)检测。这一任务的复杂性来源于两个方面,其一是场景本身是变化的,并且扫描的信标光信号停止后可能重新融入背景(Background,BG);其二是场景无时无刻不受到各种干扰,如光照强度和方向的变化、平台的振动等。这些因素对超宽视场捕获系统的捕获性能影响很大,表现为信噪比减小、捕获灵敏度降低以及捕获概率下降等。
近年来,为了有效的抑制CCD阵列探测器中存在的各类噪声对系统的影响,常用的检测方法有背景差分法、帧间差分法以及光流法等三类。其中,背景差分法的应用最为广泛,它是通过将每一帧与实时更新的背景模型相比较从而检测出激光信号。背景差分法是一种有效的目标检测算法,基本思想是利用背景的参数模型来近似背景图像的像素值,将当前帧与背景图像进行差分,实现对运动区域的检测。其关键是要有一个能够自适应场景变化的背景模型,它既能够反映场景的变化,又能够消除各种干扰以维护背景模型的准确性。
发明内容
为了很好的抑制背景噪声干扰,从而实现对激光信号的捕获,本发明提出了一种基于背景建模与背景差分的激光目标检测方法和装置。
本发明采用的技术方案如下:
一种基于背景建模与背景差分的激光目标检测方法,包括以下步骤:
1)利用混合高斯背景建模方法和尔曼滤波方法,对视频帧序列以及差分反馈信号进行背景建模,得到背景图像;
2)将当前视频帧与所述背景图像相减,得到差分图像;
3)对所述差分图像进行处理以提高信噪比;
4)通过光斑定位算法检测所述差分图像中背景干扰下的激光光斑,实现激光目标检测。
进一步地,步骤1)所述背景建模包括:
1-1)通过阈值处理,检测出目标所在的区域范围,得到监视窗口;
1-2)对监视窗口内每个像素位置的灰度值进行混合高斯背景建模;
1-3)通过卡尔曼滤波方法进行跟踪预测,实现监视窗口的动态更新。
进一步地,步骤1-2)使用混合高斯模型来表征图像中每个像素点的特征,在新一帧图像获得后更新混合高斯模型,用当前图像中的每个像素点与混合高斯模型匹配,如果成功则判定该像素点为背景点,否则为前景点。
进一步地,步骤1-2)包括:
1-2-1)初始化预先定义的若干个高斯模型;
1-2-1)对于每一帧中的每一个像素进行处理,判断其是否匹配某个高斯模型,若匹配,则将其归入该高斯模型中,并根据该高斯模型对像素值进行更新;若不匹配,则以该像素建立一个高斯模型,并初始化参数,代替原有模型中最不可能的高斯模型;
1-2-3)选择若干个最有可能的高斯模型作为背景模型。
一种基于背景建模与背景差分的激光目标检测装置,其包括:
背景建模模块,负责利用混合高斯背景建模方法和卡尔曼滤波方法,对视频帧序列以及差分反馈信号进行背景建模,得到背景图像;
背景差分模块,负责将当前视频帧与所述背景图像相减,得到差分图像;
图像处理模块,负责对所述差分图像进行处理以提高信噪比;
光斑定位模块,负责通过光斑定位算法检测所述差分图像中背景干扰下的激光光斑,实现激光目标检测。
本发明提出的基于背景建模与背景差分的激光目标检测方法,利用从某一时刻开始到当前一段时间内存储的新近观测数据作为样本来进行背景建模,建立对于不同场景的动态变化均具有自适应性的背景模型,减少动态场景变化对运动分割的影响。通过背景建模,能够实现对背景噪声的实时模拟;结合背景差分,能够有效的去除背景噪声的干扰,从而提取出目标激光信号。本发明的基于背景建模的背景差分法的核心是背景建模,只有好的背景模型,才能实现对实时变化的背景噪声进行很好的模拟。因此本发明提出了结合高斯分布以及卡尔曼滤波的背景建模方法,该方法利用混合高斯背景建模实现对背景像素建模,能够适应场景的实时变化;同时,结合卡尔曼滤波算法,通过预测跟踪,实现对建模区域的压缩,达到减少建模区域、降低系统复杂度以及运算量的目的。
附图说明
图1.基于背景差分法的激光信号检测的基本流程图;
图2.结合高斯分布以及卡尔曼滤波的背景建模流程图;
图3.基于卡尔曼滤波的跟踪预测示意图;
图4.某像素实际灰度变化与建模灰度变化的比较图,其中(a)为实际背景图;(b)为建模背景图。
具体实施方式
为使本发明的上述目的、特征和优点能够更加明显易懂,结合附图和具体实施方式对本发明作进一步详细的说明。
本发明的基于背景建模的背景差分法流程如图1所示,首先进行背景建模,得到背景图像,然后对图像帧以及背景帧进行锐化增强等预处理操作后,进行背景差分,然后对差分图像进行滤波、去噪等操作以提高信噪比,最后通过光斑定位算法实现激光目标的高精度检测。该方法的关键是要有一个能够自适应场景变化的背景模型,它既能够反映场景的变化,又能够消除各种干扰以维护背景模型的有效性。因此,背景建模是背景差分法的核心。常用背景建模方法性能比较如表1所示。
表1.常用背景建模方法性能比较
为了提高基于背景建模的背景差分法的性能,本发明提出了结合高斯分布以及卡尔曼滤波的背景建模法。该方法利用混合高斯背景建模实现对背景像素建模,能够适应场景的实时变化。为了降低系统的复杂度及运算量,结合卡尔曼滤波算法,通过预测跟踪,实现对建模区域的压缩,达到减少建模区域,降低运算量的目的。如图2所示,背景建模的具体流程如下:
A.通过自适应阈值处理(可采用现有技术实现),检测出目标所在的区域范围,得到监视窗口;
B.对监视窗口内每个像素位置的灰度值进行混合高斯背景建模;
C.通过卡尔曼滤波进行跟踪预测,实现监视窗口的动态更新。
接下来,对上述流程中的两个核心步骤进行详细介绍。
1)基于混合高斯高斯模型的背景建模
单高斯模型适用于单模态的背景模型,即背景静止且光照变化不大的情况。在这种情况下,基本静止的像素点的灰度值是满足高斯分布的,即以某个均值为基准,在其附近做不超过一定偏差的振荡。因此,可以为场景中的每个像素点用一个高斯分布建立背景模型。但是,单高斯背景建模法只能适用于背景相对较稳定的情况,在复杂背景情况下不适用。
为了克服此问题,本发明利用多个高斯模型来模拟场景中每一个像素值的变化情况,即混合高斯模型。混合高斯模型使用K(一般为3-5)个高斯模型来表征图像中每个像素点的特征,在新一帧图像获得后更新混合高斯模型。用当前图像中的每个像素点与混合高斯模型匹配,如果成功则判定该点为背景点,否则为前景点。
混合高斯模型的具体应用流程是:首先初始化预先定义的若干个高斯模型,对高斯模型中的参数进行初始化,并求出之后将要用到的参数。其次,对于每一帧中的每一个像素进行处理,看其是否匹配某个高斯模型,若匹配,则将其归入该高斯模型中,并根据该高斯模型对像素值进行更新;若不匹配,则以该像素建立一个高斯模型,初始化参数,代替原有模型中最不可能的高斯模型。最后,选择前面若干个最有可能的高斯模型作为背景模型。
混合高斯模型通过多个高斯分布拟合单个像素值变化,能够及时地跟踪背景的变化,并能够描述场景中的周期性运动,被认为是最好的背景模型之一。但是,这种算法的计算量很大、实时性差,必须采用专门的硬件才能用于实时监控系统,成本、复杂度高。
2)基于卡尔曼滤波的背景建模
卡尔曼滤波法是一个对动态系统的状态序列进行线性最小方差估计的算法,通过状态方程和观测方程来描述一个动态系统,是一种递归的背景估计方法。其背景估计值包含了当前帧之前所有视频图像的信息,具体的工作流程如图3所示,主要包括状态以及观测两个步骤:
a)状态方程:S(k)=A(k)S(k-1)+w1(k-1)。其中,S(k)表示系统在离散时间k的状态向量,是不可观测的;A(k)称为状态转移矩阵,描述动态系统在时间k-1的状态到k的状态之间的转移;w1(k-1)为过程噪声向量,描述状态转移中间的加性噪声或误差;Z-1表示Z变换。
b)观测方程:X(k)=C(k)S(k)+w(k)。其中,X(k)表示动态系统在时间k的观测向量;C(k)称为观测矩阵,描述状态经过其作用,变成可预测的;w(k)表示观测噪声向量,其维数与观测向量的相同,通常为零均值的白噪声过程。
此方法的优点在于能够实现对运动目标的实时跟踪,但是,对于背景物体的变化就不能及时反应,会导致目标的误检和漏检。
与上面方法对应,本发明另一实施例提供一种基于背景建模与背景差分的激光目标检测装置,其包括:
背景建模模块,负责利用混合高斯背景建模方法和卡尔曼滤波方法,对视频帧序列以及差分反馈信号进行背景建模,得到背景图像;
背景差分模块,负责将当前视频帧与所述背景图像相减,得到差分图像;
图像处理模块,负责对所述差分图像进行处理以提高信噪比;
光斑定位模块,负责通过光斑定位算法检测所述差分图像中背景干扰下的激光光斑,实现激光目标检测。
本发明在利用混合高斯背景建模实现对背景像素建模后,为了降低系统的复杂度及运算量,结合卡尔曼滤波算法,通过预测跟踪,实现对建模区域的压缩,达到减少建模区域、降低运算量的目的。
为了验证本发明对激光信号检测的有效性,对结合高斯分布以及卡尔曼滤波的背景建模的性能进行测试,得到如图4所示结果,其中(a)图为实际背景图,(b)图为建模背景图。由图4可以看出,本发明结合高斯分布以及卡尔曼滤波的背景建模能够很好的模拟实时背景的变化。
以上对本发明所提供的基于背景建模与背景差分的激光目标检测算法进行了详细介绍。本领域技术人员应该理解,上述实施方案仅仅是为了说明的目的而所举的示例,而不是用来进行限制,凡在本发明的教导和权利要求保护范围下所作的任何修改、等同替换等,均应包含在本发明要求保护的范围内。
Claims (10)
1.一种基于背景建模与背景差分的激光目标检测方法,其特征在于,包括以下步骤:
1)利用混合高斯背景建模方法和卡尔曼滤波方法,对视频帧序列以及差分反馈信号进行背景建模,得到背景图像;
2)将当前视频帧与所述背景图像相减,得到差分图像;
3)对所述差分图像进行处理以提高信噪比;
4)通过光斑定位算法检测所述差分图像中背景干扰下的激光光斑,实现激光目标检测。
2.如权利要求1所述的方法,其特征在于,步骤1)所述背景建模包括:
1-1)通过阈值处理检测出目标所在的区域范围,得到监视窗口;
1-2)对监视窗口内每个像素位置的灰度值进行混合高斯背景建模;
1-3)通过卡尔曼滤波方法进行跟踪预测,实现监视窗口的动态更新。
3.如权利要求2所述的方法,其特征在于,步骤1-2)使用混合高斯模型来表征图像中每个像素点的特征,在新一帧图像获得后更新混合高斯模型,用当前图像中的每个像素点与混合高斯模型匹配,如果成功则判定该像素点为背景点,否则为前景点。
4.如权利要求3所述的方法,其特征在于,步骤1-2)包括:
1-2-1)初始化预先定义的若干个高斯模型;
1-2-1)对于每一帧中的每一个像素进行处理,判断其是否匹配某个高斯模型,若匹配,则将其归入该高斯模型中,并根据该高斯模型对像素值进行更新;若不匹配,则以该像素建立一个高斯模型,并初始化参数,代替原有模型中最不可能的高斯模型;
1-2-3)选择若干个最有可能的高斯模型作为背景模型。
5.如权利要求3所述的方法,其特征在于,所述混合高斯模型使用3-5个高斯模型来表征图像中每个像素点的特征。
6.如权利要求1所述的方法,其特征在于,所述卡尔曼滤波方法采用的状态方程和观测方程为:
a)状态方程:S(k)=A(k)S(k-1)+w1(k-1),其中,S(k)表示系统在离散时间k的状态向量;A(k)表示状态转移矩阵,描述动态系统在时间k-1的状态到k的状态之间的转移;w1(k-1)表示过程噪声向量,描述状态转移中间的加性噪声或误差;
b)观测方程:X(k)=C(k)S(k)+w(k),其中,X(k)表示动态系统在时间k的观测向量,C(k)表示观测矩阵,w(k)表示观测噪声向量。
7.如权利要求1所述的方法,其特征在于,步骤2)对当前帧图像以及背景图像进行增强处理,然后进行背景差分。
8.一种基于背景建模与背景差分的激光目标检测装置,其特征在于,包括:
背景建模模块,负责利用混合高斯背景建模方法和卡尔曼滤波方法,对视频帧序列以及差分反馈信号进行背景建模,得到背景图像;
背景差分模块,负责将当前视频帧与所述背景图像相减,得到差分图像;
图像处理模块,负责对所述差分图像进行处理以提高信噪比;
光斑定位模块,负责通过光斑定位算法检测所述差分图像中背景干扰下的激光光斑,实现激光目标检测。
9.如权利要求8所述的装置,其特征在于,所述背景建模模块采用以下方式进行背景建模:通过阈值处理检测出目标所在的区域范围,得到监视窗口;对监视窗口内每个像素位置的灰度值进行混合高斯背景建模;通过卡尔曼滤波方法进行跟踪预测,实现监视窗口的动态更新。
10.如权利要求9所述的装置,其特征在于,所述混合高斯背景建模包括:初始化预先定义的若干个高斯模型;对于每一帧中的每一个像素进行处理,判断其是否匹配某个高斯模型,若匹配,则将其归入该高斯模型中,并根据该高斯模型对像素值进行更新;若不匹配,则以该像素建立一个高斯模型,并初始化参数,代替原有模型中最不可能的高斯模型;选择若干个最有可能的高斯模型作为背景模型。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710730450X | 2017-08-23 | ||
CN201710730450 | 2017-08-23 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN108629792A true CN108629792A (zh) | 2018-10-09 |
Family
ID=63696311
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810246212.6A Pending CN108629792A (zh) | 2017-08-23 | 2018-03-23 | 基于背景建模与背景差分的激光目标检测方法和装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108629792A (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109727274A (zh) * | 2018-11-28 | 2019-05-07 | 吉林大学 | 视频处理方法 |
CN110197121A (zh) * | 2019-04-24 | 2019-09-03 | 上海理工大学 | 基于DirectShow的运动目标检测方法、运动目标检测模块及监控系统 |
CN111601011A (zh) * | 2020-04-10 | 2020-08-28 | 全景智联(武汉)科技有限公司 | 一种基于视频流图像的自动告警方法及系统 |
CN112325790A (zh) * | 2021-01-06 | 2021-02-05 | 昆山市建设工程质量检测中心 | 一种激光挠度测量中激光光斑检测方法 |
CN112883836A (zh) * | 2021-01-29 | 2021-06-01 | 中国矿业大学 | 一种煤矿井下巷道形变视频检测方法 |
CN115169387A (zh) * | 2022-06-20 | 2022-10-11 | 脉冲视觉(北京)科技有限公司 | 脉冲信号的前景检测方法、装置、电子设备及存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100208987A1 (en) * | 2009-02-16 | 2010-08-19 | Institute For Information Industry | Method and system for foreground detection using multi-modality fusion graph cut |
CN103793715A (zh) * | 2014-02-13 | 2014-05-14 | 电子科技大学 | 基于场景信息挖掘的井下人员目标跟踪方法 |
CN103826102A (zh) * | 2014-02-24 | 2014-05-28 | 深圳市华宝电子科技有限公司 | 一种运动目标的识别方法、装置 |
-
2018
- 2018-03-23 CN CN201810246212.6A patent/CN108629792A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100208987A1 (en) * | 2009-02-16 | 2010-08-19 | Institute For Information Industry | Method and system for foreground detection using multi-modality fusion graph cut |
CN103793715A (zh) * | 2014-02-13 | 2014-05-14 | 电子科技大学 | 基于场景信息挖掘的井下人员目标跟踪方法 |
CN103826102A (zh) * | 2014-02-24 | 2014-05-28 | 深圳市华宝电子科技有限公司 | 一种运动目标的识别方法、装置 |
Non-Patent Citations (2)
Title |
---|
李红波 等: "Kalman滤波器对混合高斯背景建模的改进", 《计算机工程与应用》 * |
王亚丽: "基于图像的激光光斑识别和特性分析", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109727274A (zh) * | 2018-11-28 | 2019-05-07 | 吉林大学 | 视频处理方法 |
CN110197121A (zh) * | 2019-04-24 | 2019-09-03 | 上海理工大学 | 基于DirectShow的运动目标检测方法、运动目标检测模块及监控系统 |
CN111601011A (zh) * | 2020-04-10 | 2020-08-28 | 全景智联(武汉)科技有限公司 | 一种基于视频流图像的自动告警方法及系统 |
CN112325790A (zh) * | 2021-01-06 | 2021-02-05 | 昆山市建设工程质量检测中心 | 一种激光挠度测量中激光光斑检测方法 |
CN112325790B (zh) * | 2021-01-06 | 2021-05-28 | 昆山市建设工程质量检测中心 | 一种激光挠度测量中激光光斑检测方法 |
CN112883836A (zh) * | 2021-01-29 | 2021-06-01 | 中国矿业大学 | 一种煤矿井下巷道形变视频检测方法 |
CN112883836B (zh) * | 2021-01-29 | 2024-04-16 | 中国矿业大学 | 一种煤矿井下巷道形变视频检测方法 |
CN115169387A (zh) * | 2022-06-20 | 2022-10-11 | 脉冲视觉(北京)科技有限公司 | 脉冲信号的前景检测方法、装置、电子设备及存储介质 |
CN115169387B (zh) * | 2022-06-20 | 2023-07-18 | 北京融合未来技术有限公司 | 脉冲信号的前景检测方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108629792A (zh) | 基于背景建模与背景差分的激光目标检测方法和装置 | |
EP0671706B1 (en) | Method and apparatus for moving object extraction based on background subtraction | |
JP4467838B2 (ja) | 画像認識装置および画像認識方法 | |
CN107452015B (zh) | 一种具有重检测机制的目标跟踪系统 | |
CN108648211B (zh) | 一种基于深度学习的小目标检测方法、装置、设备和介质 | |
US8724851B2 (en) | Aerial survey video processing | |
CN102915545A (zh) | 一种基于OpenCV的视频目标跟踪算法 | |
CN108665476A (zh) | 一种行人跟踪方法以及电子设备 | |
CN111881853A (zh) | 一种超大桥隧中异常行为识别方法和装置 | |
Lian et al. | A novel method on moving-objects detection based on background subtraction and three frames differencing | |
CN110400294B (zh) | 一种红外目标探测系统及探测方法 | |
CN110555868A (zh) | 一种复杂地面背景下运动小目标检测方法 | |
CN103985106B (zh) | 用于对强噪声图像进行多帧融合的设备和方法 | |
CN110084830A (zh) | 一种视频运动目标检测与跟踪方法 | |
CN113744316A (zh) | 一种基于深度神经网络的多目标跟踪方法 | |
CN112435278B (zh) | 一种基于动态目标检测的视觉slam方法及装置 | |
CN105046285B (zh) | 一种基于运动约束的异常行为辨识方法 | |
CN108491796B (zh) | 一种时域周期点目标检测方法 | |
CN112613456A (zh) | 一种基于多帧差分图像累积的小目标检测方法 | |
KR100635883B1 (ko) | 실시간 물체 추적 장치 | |
CN116883897A (zh) | 一种低分辨率目标识别方法 | |
CN117011381A (zh) | 基于深度学习和立体视觉的实时手术器械位姿估计方法与系统 | |
CN111402185B (zh) | 一种图像检测方法及装置 | |
Li et al. | Fast visual tracking using motion saliency in video | |
Loktev et al. | Image Blur Simulation for the Estimation of the Behavior of Real Objects by Monitoring Systems. |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20181009 |
|
RJ01 | Rejection of invention patent application after publication |