CN112800881A - 一种基于相位相关的场景偏移检测方法和系统 - Google Patents

一种基于相位相关的场景偏移检测方法和系统 Download PDF

Info

Publication number
CN112800881A
CN112800881A CN202110053803.3A CN202110053803A CN112800881A CN 112800881 A CN112800881 A CN 112800881A CN 202110053803 A CN202110053803 A CN 202110053803A CN 112800881 A CN112800881 A CN 112800881A
Authority
CN
China
Prior art keywords
image
reference image
fourier transform
images
detected
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202110053803.3A
Other languages
English (en)
Inventor
宣琦
朱城超
朱振强
郑俊杰
刘壮壮
翔云
邱君瀚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University of Technology ZJUT
Original Assignee
Zhejiang University of Technology ZJUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University of Technology ZJUT filed Critical Zhejiang University of Technology ZJUT
Priority to CN202110053803.3A priority Critical patent/CN112800881A/zh
Publication of CN112800881A publication Critical patent/CN112800881A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/70Arrangements for image or video recognition or understanding using pattern recognition or machine learning
    • G06V10/74Image or video pattern matching; Proximity measures in feature spaces
    • G06V10/75Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
    • G06V10/751Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Evolutionary Computation (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Computing Systems (AREA)
  • Artificial Intelligence (AREA)
  • Health & Medical Sciences (AREA)
  • Image Analysis (AREA)

Abstract

一种基于相位相关的场景偏移检测方法,包括:1)正常运行的监控摄像头中获取一张图片,令其为基准图像g(x,y),并对其进行傅里叶变换得到G(u,v),保存结果;2)在一定间隔时间后,再次获取监控摄像头中待测图片f(x,y),同样也进行傅里叶变化得到F(u,v),并给出与基准图像对应关系;3)根据基准图像与待测图像在频域中的对应关系,计算两幅图之间的交叉功率谱P(u,v);4)对两幅图像的交叉功率谱P(u,v)进行傅里叶逆变换得到相位相关函数p(x,y),对其进行求解即可得到基准图像g(x,y)与待测图片f(x,y)的偏移程度(Δx,Δy);5)将偏移程度与设定阈值比较,若超过阈值则进行告警,反正则跳转至步骤S2。本发明还提供了一种基于相位相关的场景偏移检测系统。

Description

一种基于相位相关的场景偏移检测方法和系统
技术领域
本发明涉及图像处理领域,具体是一种基于相位相关的场景偏移检测方法 和系统。
背景技术
视频监控系统被广泛应用于城市安全、智慧交通、智慧环保、边界安保等各 个领域中。而监控系统想要发挥应有的作用,首先得保证其监控的场景是正确 的,而当监控镜头由于外力等作用,导致拍摄角度发生变化,从而使监控场景 发生偏移时,系统需要及时发现异常并告警,提醒维护人员及时进行相应的维 护。
场景偏移的检测方法主要有三大类:像素差分法,直方图匹配法,图像特征 点匹配法。但对于像素差分法,直方图匹配法而言,其对于光照的变化十分敏 感,且无法准确的给出场景偏移的偏移坐标量;而对于图像特征点匹配法,虽 然其在一定程度上能克服光照变化造成的影响,但其存在对于纹理较为干净的 监控场景无法进行有效监测,同时当图像中存在较多运动物体的场景下,由于 图像特征点变化较为剧烈,也无法进行有效的监测,概括而言,图像特征点匹 配算法对图像内容较为依赖,从而在一定程度上降低了其适用的广泛性。
而目前,主流偏移检测算法大多都是基于图像特征点匹配算法修改优化而来。 如申请号为201910944546.5的专利所公开的技术方案,一种场景变更检测方法、 装置、设备及可读存储介质。该方法首先也是对图像进行特征点检测,获得特 征点描述子集合,并结合监控设备的参考特征点描述子集合进行匹配检测,获 得强特征点集合,在后续的检测中,利用该强特征点的坐标位置信息,判断是 否发生场景变化。但其本质采用的还是SURF(Speeded Up Robust Features,具 有尺度和旋转不变特性的兴趣点检测和描述方法)特征点检测算法。而本发明 所提出的方法,不再从空域角度进行分析,而是从频域角度出发,利用图像的 相位相关信息,减少对图像内容的依赖,从而避免空域分析固有的局限性。
由上述分析可知,现有的场景偏移检测算法都有一定的局限性,无法很好的 满足实际监测需求,因此,提出一种鲁棒性好,适应性强的场景偏移检测算法 具有重要的实际意义。
发明内容
本发明克服了从空域角度进行场景偏移检测过于依赖图像内容的不足,而从 频域角度对图像进行分析,提出了一种基于相位相关的场景偏移检测方法和系 统。
本发明的技术构思为:将需要进行场景偏移检测的图像由空域转为频域,而 在频域中,图像的信息体现在模和相位中,其中模信息包含的是图像整体的灰 度信息,而相位信息包含了图像的变化信息,不同图像之间的模可能相同,但 是相位却是不同的,因此利用相位的不同,求取图像之间的相位相关,即可知 道图像之间的偏移信息。本发明采用对图像进行傅里叶变换后先进行内积操作, 再做一次傅里叶逆变换,而求得图像之间的相位相关信息。经实验验证,本发 明所提出的方法可以检测到1pixel的偏移量,且运算复杂度较低。
本发明实现上述发明目的所采用的技术方案如下:
一种基于相位相关的场景偏移检测方法,包括如下步骤:
S1:从正常运行的监控摄像头中获取一张图片,令其为基准图像g(x,y),对 其进行傅里叶变换得到G(u,v),并将结果保存;
S2:在一定间隔时间后,再次获取监控摄像头中待测图片f(x,y),同样也进 行傅里叶变化得到F(u,v),并给出与基准图像对应关系;
S3:根据基准图像与待测图像在频域中的对应关系,计算两幅图之间的交叉 功率谱P(u,v);
S4:对两幅图像的交叉功率谱P(u,v)进行傅里叶逆变换得到相位相关函数 p(x,y),对其进行求解即可得到基准图像g(x,y)与待测图片f(x,y)的偏移程度 (Δx,Δy);
S5:将偏移程度与设定阈值比较,若超过阈值则进行告警,反正则跳转至步 骤S2。
进一步的,所述步骤S1包括以下步骤:
S1.1:对正常运行中的,待检测的监控设备随机拍摄图像,作为基准图像 g(x,y);
S1.2:对基准图像g(x,y)进行二维离散傅里叶变换,将空域视角中的基准图 像变换到频域视角中,表示为G(u,v),其转换过程如下:
Figure BDA0002900129930000031
其中M,N分别表示基准图像的长宽,u,v为对应的频率变量。
进一步的,所述步骤S2包括以下步骤:
S2.1:在达到设定的时间间隔后,再次从同一监控设备中获取图像作为待测 图像f(x,y),此时待测图像与基准图像满足如下关系:
f(x,y)=g(x-Δx,y-Δy) (2)
其中Δx,Δy为假定的偏移量,通过后续步骤中对其进行求解而确定偏移程 度;
S2.2:同时,对待测图像同样进行二维离散傅里叶变换,获取其在频域中的 表示F(u,v),并结合S2.1中提出的待测图像与基准图像的关系,根据傅里叶变换 的平移性质,对其进行傅里叶变换,有如下表示:
F(u,v)=G(u,v)e-i2π(uΔx+vΔy) (3)
该式体现出待测图像与基准图像在频域中的关系。
进一步的,所述步骤S3过程为:结合S2.2中基准图像与待测图像在频域中 关系式,计算两幅图像之间的归一化交叉功率谱P(u,v),如下所示:
Figure BDA0002900129930000041
其中G*(u,v)为G(u,v)的复共轭,|G(u,v)G*(u,v)|表示幅值谱。
基于傅里叶变换定理,比较图像的交叉功率谱P(u,v)与图像间的相位差相等, 即体现了比较图像间的相频特性,后续只需求出上式中Δx,Δy即可进行偏移程 度的判定。
进一步的,所述步骤S4包括以下步骤:
S4.1:对S3步骤中得到的交叉功率谱P(u,v),依据傅里叶变换平移理论中傅 里叶变换幅值不变,交叉能量谱的相位等于两个图像的相位差,因此通过对 P(u,v)进行傅里叶逆变换即可得到二维脉冲函数,如下:
p(x,y)=P-1(u,v)=P-1(e-i2π(uΔx+vΔy))=δ(x-Δx,y-Δy) (5)
对该式进行计算,其在大部分区域函数值都趋于0,只有在(Δx,Δy)处会出现 一个比较尖锐的脉冲,表示进行比较图像的偏移量;
S4.2:当进行对比的两幅图像场景是一致的,即没有发生场景偏移,脉冲函 数的脉冲位置在坐标原点,函数值为1;而当待测的图像发生了偏移,则在相位 相关函数中对应的最高脉冲坐标,即为两幅图像的位置偏移量,脉冲函数函数 值也会小于1;总而言之,待测图像相对于基准图像的相对位移为(Δx,Δy)时,该 函数取到最大值,最终的偏离量即为(Δx,Δy)。
进一步的,所述步骤S3过程为:对S4中获得的偏移量(Δx,Δy)使用欧式距离 表示为
Figure BDA0002900129930000051
并与设定的阈值进行比较,若超过阈值,则说明监控 摄像头监控的场景发生了偏移,需要提醒维护人员进行后续的维护等相应操作; 若未超过阈值,则继续计时直到下一个比较时刻再次进行上述步骤的比较。
同时本发明还提供一种基于相位相关的场景偏移检测的系统,包括依次连接 的图像获取模块、基准图像处理模块、待测图像处理模块、偏移程度计算模块、 结果处理模块。
本发明的有益效果为:
1)监控系统正常运行的保证是其监控的场景正确,而当场景发生偏移时能 及时发现,但通过人工排查存在无法发现微小偏移,发现不及时等问题,故本 发明提出通过图像相位相关法进行自动检测,使监控系统能及时准确发现场景 偏移,并及时告警;
2)本发明从频域角度对图像进行分析,通过傅里叶变换,将图像由空域变 换到频域,一方面能避免图像在空域处理时固有的局限性,另一方面图像在变 换域中还能获得空域中很难获得的特征,能大幅提升偏移检测的准确性;
3)本发明对于待比较的两幅图像,采取了相位相关检测法,其仅提取互功 率谱中的相位信息,减少对图像内容的依赖,具有较强的抗干扰能力,且算法 简单、运行速度较快,适用于各种监控系统。
附图说明
图1为本发明方法的整体示意图。
图2.a)~图2.c)为本发明对图像进行二维离散傅里叶变换的示意图,其中图2.a)是对基准图进行傅里叶变换示意图,图2.b)是对未偏移图像进行傅里叶变换示意 图,图2.c)是对发生偏移图像进行傅里叶变换示意图。
图3.a)~图3.b)为本发明对图像间相位相关函数的示意图,其中图3.a)是未发生场景偏移图像间的相位相关函数可视化图,图3.b)是发生场景偏移图像间的相 位相关函数可视化图。
图4.a)~图4.b)为本发明对场景偏移检测最终结果的示意图,其中图4.a)是未发生场景偏移最终检测结果示意图,图4.b)是发生场景偏移最终检测结果示意图。
具体实施方式
下面结合说明书附图对本发明的具体实施方式作进一步详细描述。
参照图1~图4.b),一种基于相位相关的场景偏移检测方法,步骤如下:
S1:获取基准图像,并对其进行傅里叶变换,如图2.a)所示;
S1.1:对正常运行中的,待检测的监控设备随机拍摄图像,作为基准图像g(x,y);
S1.2:对基准图像g(x,y)进行二维离散傅里叶变换,将空域视角中的基准图像 变换到频域视角中,表示为G(u,v),其转换过程如下:
Figure BDA0002900129930000061
其中M,N分别表示基准图像的长宽,u,v为对应的频率变量。
S2:获取待测图像,进行傅里叶变换,如图2.b),图2.c)所示,并给出与 基准图像关系表示;
S2.1:在达到设定的时间间隔后,再次从同一监控设备中获取图像作为待测 图像f(x,y),此时待测图像与基准图像满足如下关系:
f(x,y)=g(x-Δx,y-Δy) (2)
其中Δx,Δy为假定的偏移量,通过后续步骤中对其进行求解而确定偏移程度;
S2.2:同时,对待测图像同样进行二维离散傅里叶变换,获取其在频域中的 表示F(u,v),并结合S2.1中提出的待测图像与基准图像的关系,根据傅里叶变换 的平移性质,对其进行傅里叶变换,有如下表示:
F(u,v)=G(u,v)e-i2π(uΔx+vΔy) (3)
该式体现出在频域中待测图像与基准图像间的关系。
S3:结合S2.2中基准图像与待测图像在频域中关系式,计算两幅图像之间的 归一化交叉功率谱P(u,v),如下所示:
Figure BDA0002900129930000071
其中G*(u,v)为G(u,v)的复共轭,|G(u,v)G*(u,v)|表示幅值谱。
基于傅里叶变换定理,比较图像的交叉功率谱P(u,v)与图像间的相位差相等, 即体现了比较图像间的相频特性。
S4:通过相位相关函数确定待测图像与基准图像偏移关系;
S4.1:对S3步骤中得到的交叉功率谱P(u,v),依据傅里叶变换平移理论中傅 里叶变换幅值不变,交叉能量谱的相位等于两个图像的相位差,因此通过对 P(u,v)进行傅里叶逆变换即可得到二维脉冲函数,如下:
p(x,y)=P-1(u,v)=P-1(e-i2π(uΔx+vΔy))=δ(x-Δx,y-Δy) (5)
对该式进行计算,其在大部分区域函数值都趋于0,只有在(Δx,Δy)处会出现 一个比较尖锐的脉冲,表示进行比较图像的偏移量,如图3所示,对比了发生 偏移和没有发生偏移图像的相位相关函数,可直观看出对比图像的偏移情况, 同时为了防止(Δx,Δy)处的函数值过大而导致其他取值不可见,对脉冲函数值均 取了log操作;
S4.2:如图4.a)所示,当进行对比的两幅图像场景是一致的,即没有发生场 景偏移,脉冲函数的脉冲位置在坐标原点,函数值为1;如图4.b)所示,当待 测的图像发生了偏移,则在相位相关函数中对应的最高脉冲坐标,即为两幅图 像的位置偏移量,而脉冲函数函数值也会小于1;总而言之,待测图像相对于基 准图像的相对位移为(Δx,Δy)时,该函数取到最大值,最终的偏离量即为(Δx,Δy)。
S5:结合设定的阈值对偏移结果的判定:对最终的偏移量(Δx,Δy)使用欧式距离表示为
Figure BDA0002900129930000081
并与设定的阈值进行比较,若超过阈值,则说明监 控摄像头监控的场景发生了偏移,需要提醒维护人员进行后续的维护等相应操 作;若未超过阈值,则继续计时直到下一个比较时刻再次进行上述步骤的比较。
此处对本发明中提及的基于相位相关的场景偏移检测系统进行详细描述,该 系统包括依次连接的图像获取模块、基准图像处理模块、待测图像处理模块、 偏移程度计算模块、结果处理模块;
图像获取模块:连接待检测场景下的摄像头,从实时的视频流中获取基准图 像与待测图像;
基准图像处理模块:对从图像处理模块中获取的正常运行时监控摄像头中的 图片,令其为基准图像g(x,y),对其进行傅里叶变换得到G(u,v),并对基准图像 g(x,y)进行二维离散傅里叶变换,将空域视角中的基准图像变换到频域视角中, 表示为G(u,v),其转换过程如下:
Figure BDA0002900129930000082
将基准图像在空域与频域中的表示g(x,y),G(u,v)都保存至存储设备中,用于 后续的比较;
待测图像处理模块:在一定间隔时间后,从图像获取模块中获取测图片f(x,y),同样也进行傅里叶变化得到F(u,v),并给出与基准图像对应关系,具体包括:
在达到设定的时间间隔后,再次从同一监控设备中获取图像作为待测图像 f(x,y),此时待测图像与基准图像满足如下关系:
f(x,y)=g(x-Δx,y-Δy) (2)
其中Δx,Δy为假定的偏移量,通过后续步骤中对其进行求解而确定偏移程度;
同时,对待测图像同样进行二维离散傅里叶变换,获取其在频域中的表示 F(u,v),并结合S2.1中提出的待测图像与基准图像的关系,根据傅里叶变换的 平移性质,对其进行傅里叶变换,有如下表示:
F(u,v)=G(u,v)e-i2π(uΔx+vΔy) (3)
体现出的是待测图像与基准图像在频域中的关系;
偏移程度计算模块:根据基准图像与待测图像在频域中的对应关系,计算两 幅图之间的交叉功率谱P(u,v),并根据该交叉功率谱P(u,v)进行傅里叶逆变换得 到相位相关函数p(x,y),对其进行求解即可得到基准图像g(x,y)与待测图片 f(x,y)的偏移程度(Δx,Δy),具体包括:
依据待测图像处理模块中基准图像与待测图像在频域中关系式,计算两幅图 像之间的归一化交叉功率谱P(u,v),如下所示:
Figure BDA0002900129930000091
其中G*(u,v)为G(u,v)的复共轭,|G(u,v)G*(u,v)|表示幅值谱。
基于傅里叶变换定理,比较图像的交叉功率谱P(u,v)与图像间的相位差相等, 即体现了比较图像间的相频特性,后续只需求出上式中Δx,Δy即可进行偏移程 度的判定;
而对于交叉功率谱P(u,v),依据傅里叶变换平移理论中傅里叶变换幅值不变, 交叉能量谱的相位等于两个图像的相位差,因此通过对P(u,v)进行傅里叶逆变换 即可得到二维脉冲函数,如下:
p(x,y)=P-1(u,v)=P-1(e-i2π(uΔx+vΔy))=δ(x-Δx,y-Δy) (5)
对该式进行计算,其在大部分区域函数值都趋于0,只有在(Δx,Δy)处会出现 一个比较尖锐的脉冲,表示进行比较图像的偏移量;
而当进行对比的两幅图像场景是一致的,即没有发生场景偏移,脉冲函数的 脉冲位置在坐标原点,函数值为1;而当待测的图像发生了偏移,则在相位相关 函数中对应的最高脉冲坐标,即为两幅图像的位置偏移量,脉冲函数函数值也 会小于1;总而言之,待测图像相对于基准图像的相对位移为(Δx,Δy)时,该函数 取到最大值,最终的偏离量即为(Δx,Δy)。
结果处理模块:从偏移程度计算模块中获取的偏移值与设定阈值比较,若超 过阈值,则说明监控摄像头监控的场景发生了偏移,需要提醒维护人员进行后 续的维护等相应操作;若未超过阈值,则继续计时直到下一个比较时刻再次进 行上述步骤的比较。
本说明书实施例所述的内容仅仅是对发明构思的实现形式的列举,本发明的 保护范围不应当被视为仅限于实施例所陈述的具体形式,本发明的保护范围也 及于本领域技术人员根据本发明构思所能够想到的等同技术手段。

Claims (7)

1.一种基于相位相关的场景偏移检测方法,其特征在于,包括以下步骤:
S1:从正常运行的监控摄像头中获取一张图片,令其为基准图像g(x,y),并对其进行傅里叶变换得到G(u,v),并将结果保存;
S2:在一定间隔时间后,再次获取监控摄像头中待测图片f(x,y),同样也进行傅里叶变化得到F(u,v),并给出与基准图像对应关系;
S3:根据基准图像与待测图像在频域中的对应关系,计算两幅图之间的交叉功率谱P(u,v);
S4:对两幅图像的交叉功率谱P(u,v)进行傅里叶逆变换得到相位相关函数p(x,y),对其进行求解即可得到基准图像g(x,y)与待测图片f(x,y)的偏移程度(△x,△y);
S5:将偏移程度与设定阈值比较,若超过阈值则进行告警,反正则跳转至步骤S2。
2.如权利要求1所述的一种基于相位相关的场景偏移检测方法,其特征在于:所述步骤S1具体包括以下步骤:
S1.1:对正常运行中的,待检测的监控设备随机拍摄图像,作为基准图像g(x,y);
S1.2:对基准图像g(x,y)进行二维离散傅里叶变换,将空域视角中的基准图像变换到频域视角中,表示为G(u,v),其转换过程如下:
Figure RE-FDA0003011197330000011
其中分别M,N表示基准图像的长宽,u,v为对应的频率变量。
3.如权利要求1所述的一种基于相位相关的场景偏移检测方法,其特征在于:所述步骤S2具体包括以下步骤:
S2.1:在达到设定的时间间隔后,再次从同一监控设备中获取图像作为待测图像f(x,y),此时待测图像与基准图像满足如下关系:
f(x,y)=g(x-△x,y-△y) (2)
其中△x,△y为假定的偏移量,通过后续步骤中对其进行求解而确定偏移程度;
S2.2:同时,对待测图像同样进行二维离散傅里叶变换,获取其在频域中的表示F(u,v),并结合S2.1中提出的待测图像与基准图像的关系,根据傅里叶变换的平移性质,对其进行傅里叶变换,有如下表示:
F(u,v)=G(u,v)e-i2π(u△x+v△y) (3)
该式体现出待测图像与基准图像在频域中的关系。
4.如权利要求1所述的一种基于相位相关的场景偏移检测方法,其特征在于:所述步骤S3具体包括以下步骤:
结合S2.2中基准图像与待测图像在频域中关系式,计算两幅图像之间的归一化交叉功率谱P(u,v),如下所示:
Figure RE-FDA0003011197330000021
其中G*(u,v)为G(u,v)的复共轭,|G(u,v)G*(u,v)|表示幅值谱。
基于傅里叶变换定理,比较图像的交叉功率谱P(u,v)与图像间的相位差相等,即体现了比较图像间的相频特性,后续只需求出上式中△x,△y即可进行偏移程度的判定。
5.如权利要求1所述的一种基于相位相关的场景偏移检测方法,其特征在于:所述步骤S4具体包括以下步骤:
S4.1:对S3步骤中得到的交叉功率谱P(u,v),依据傅里叶变换平移理论中傅里叶变换幅值不变,交叉能量谱的相位等于两个图像的相位差,因此通过对P(u,v)进行傅里叶逆变换即可得到二维脉冲函数,如下:
p(x,y)=P-1(u,v)=P-1(e-i2π(u△x+v△y))=δ(x-△x,y-△y) (5)
对该式进行计算,其在大部分区域函数值都趋于0,只有在(△x,△y)处会出现一个比较尖锐的脉冲,表示进行比较图像的偏移量;
S4.2:当进行对比的两幅图像场景是一致的,即没有发生场景偏移,脉冲函数的脉冲位置在坐标原点,函数值为1;而当待测的图像发生了偏移,则在相位相关函数中对应的最高脉冲坐标,即为两幅图像的位置偏移量,脉冲函数函数值也会小于1;总而言之,待测图像相对于基准图像的相对位移为(△x,△y)时,该函数取到最大值,最终的偏离量即为(△x,△y)。
6.如权利要求1所述的一种基于相位相关的场景偏移检测方法,其特征在于:所述步骤S5具体包括以下步骤:
对最终的偏移量(△x,△y)使用欧式距离表示为
Figure RE-FDA0003011197330000031
并与设定的阈值进行比较,若超过阈值,则说明监控摄像头监控的场景发生了偏移,需要提醒维护人员进行后续的维护等相应操作;若未超过阈值,则继续计时直到下一个比较时刻再次进行上述步骤的比较。
7.一种基于相位相关的场景偏移检测系统,其特征在于:包括依次连接的图像获取模块、基准图像处理模块、待测图像处理模块、偏移程度计算模块、结果处理模块;
图像获取模块:连接待检测场景下的摄像头,从实时的视频流中获取基准图像与待测图像;
基准图像处理模块:对从图像处理模块中获取的正常运行时监控摄像头中的图片,令其为基准图像g(x,y),对其进行傅里叶变换得到G(u,v),并对基准图像g(x,y)进行二维离散傅里叶变换,将空域视角中的基准图像变换到频域视角中,表示为G(u,v),其转换过程如下:
Figure RE-FDA0003011197330000041
将基准图像在空域与频域中的表示g(x,y),G(u,v)都保存至存储设备中,用于后续的比较;
待测图像处理模块:在一定间隔时间后,从图像获取模块中获取测图片f(x,y),同样也进行傅里叶变化得到F(u,v),并给出与基准图像对应关系,具体包括:
在达到设定的时间间隔后,再次从同一监控设备中获取图像作为待测图像f(x,y),此时待测图像与基准图像满足如下关系:
f(x,y)=g(x-△x,y-△y) (2)
其中△x,△y为假定的偏移量,通过后续步骤中对其进行求解而确定偏移程度;
同时,对待测图像同样进行二维离散傅里叶变换,获取其在频域中的表示F(u,v),并结合S2.1中提出的待测图像与基准图像的关系,根据傅里叶变换的平移性质,对其进行傅里叶变换,有如下表示:
F(u,v)=G(u,v)e-i2π(u△x+v△y) (3)
体现出的是待测图像与基准图像在频域中的关系;
偏移程度计算模块:根据基准图像与待测图像在频域中的对应关系,计算两幅图之间的交叉功率谱P(u,v),并根据该交叉功率谱P(u,v)进行傅里叶逆变换得到相位相关函数p(x,y),对其进行求解即可得到基准图像g(x,y)与待测图片f(x,y)的偏移程度(△x,△y),具体包括:
依据待测图像处理模块中基准图像与待测图像在频域中关系式,计算两幅图像之间的归一化交叉功率谱P(u,v),如下所示:
Figure RE-FDA0003011197330000051
其中G*(u,v)为G(u,v)的复共轭,|G(u,v)G*(u,v)|表示幅值谱。
基于傅里叶变换定理,比较图像的交叉功率谱P(u,v)与图像间的相位差相等,即体现了比较图像间的相频特性,后续只需求出上式中△x,△y即可进行偏移程度的判定;
而对于交叉功率谱P(u,v),依据傅里叶变换平移理论中傅里叶变换幅值不变,交叉能量谱的相位等于两个图像的相位差,因此通过对P(u,v)进行傅里叶逆变换即可得到二维脉冲函数,如下:
p(x,y)=P-1(u,v)=P-1(e-i2π(u△x+v△y))=δ(x-△x,y-△y) (5)
对该式进行计算,其在大部分区域函数值都趋于0,只有在(△x,△y)处会出现一个比较尖锐的脉冲,表示进行比较图像的偏移量;
而当进行对比的两幅图像场景是一致的,即没有发生场景偏移,脉冲函数的脉冲位置在坐标原点,函数值为1;而当待测的图像发生了偏移,则在相位相关函数中对应的最高脉冲坐标,即为两幅图像的位置偏移量,脉冲函数函数值也会小于1;总而言之,待测图像相对于基准图像的相对位移为(△x,△y)时,该函数取到最大值,最终的偏离量即为(△x,△y)。
结果处理模块:从偏移程度计算模块中获取的偏移值与设定阈值比较,若超过阈值,则说明监控摄像头监控的场景发生了偏移,需要提醒维护人员进行后续的维护等相应操作;若未超过阈值,则继续计时直到下一个比较时刻再次进行上述步骤的比较。
CN202110053803.3A 2021-01-15 2021-01-15 一种基于相位相关的场景偏移检测方法和系统 Withdrawn CN112800881A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110053803.3A CN112800881A (zh) 2021-01-15 2021-01-15 一种基于相位相关的场景偏移检测方法和系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110053803.3A CN112800881A (zh) 2021-01-15 2021-01-15 一种基于相位相关的场景偏移检测方法和系统

Publications (1)

Publication Number Publication Date
CN112800881A true CN112800881A (zh) 2021-05-14

Family

ID=75809614

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110053803.3A Withdrawn CN112800881A (zh) 2021-01-15 2021-01-15 一种基于相位相关的场景偏移检测方法和系统

Country Status (1)

Country Link
CN (1) CN112800881A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114187734A (zh) * 2021-12-01 2022-03-15 深圳市中西视通科技有限公司 一种用于烟雾报警的图像识别方法和系统
CN114663430A (zh) * 2022-05-18 2022-06-24 爱科赛智能科技(浙江)有限公司 一种基于频域信息双确认的pcb表面缺陷检测方法
CN116074641A (zh) * 2023-03-06 2023-05-05 触景无限科技(北京)有限公司 基于mosse算法的监控设备点位图像矫正方法及系统
CN117372485A (zh) * 2023-10-12 2024-01-09 长光辰英(杭州)科学仪器有限公司 基于相位谱与幅度谱重组的一维相位相关图像配准方法

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114187734A (zh) * 2021-12-01 2022-03-15 深圳市中西视通科技有限公司 一种用于烟雾报警的图像识别方法和系统
CN114663430A (zh) * 2022-05-18 2022-06-24 爱科赛智能科技(浙江)有限公司 一种基于频域信息双确认的pcb表面缺陷检测方法
CN116074641A (zh) * 2023-03-06 2023-05-05 触景无限科技(北京)有限公司 基于mosse算法的监控设备点位图像矫正方法及系统
CN117372485A (zh) * 2023-10-12 2024-01-09 长光辰英(杭州)科学仪器有限公司 基于相位谱与幅度谱重组的一维相位相关图像配准方法
CN117372485B (zh) * 2023-10-12 2024-04-16 长光辰英(杭州)科学仪器有限公司 基于相位谱与幅度谱重组的一维相位相关图像配准方法

Similar Documents

Publication Publication Date Title
CN112800881A (zh) 一种基于相位相关的场景偏移检测方法和系统
CN101493520B (zh) 一种基于二维Gamma分布的SAR图像变化检测方法
KR100941418B1 (ko) 이동 로봇의 위치 인식 방법
US8160303B2 (en) Camera device and motion detection method for the same
CN104331907A (zh) 一种基于orb特征检测测量载体速度的方法
Chen et al. Infrared image vehicle detection based on Haar-like feature
Zhang et al. Shape feature extraction using Fourier descriptors with brightness in content-based medical image retrieval
CN115512281B (zh) 一种结合视频相机和激光雷达的入侵物监测方法和系统
CN108710886B (zh) 一种基于sift算法的重复图像匹配方法
Yang et al. Image analyses for video-based remote structure vibration monitoring system
Vakil et al. An information theoretic metric for identifying optimum solution for normalized cross correlation based similarity measures
Aiordachioaie et al. Change Detection by Feature Extraction and Processing from Time-Frequency Images
Wang et al. Moving target detection based on Circular Video SAR
Yoon et al. Preliminary study for detecting of ocean wave parameters using CCD images
Wang et al. An algorithm for moving target detection in IR image based on grayscale distribution and kernel function
KR100540889B1 (ko) 기준점을 이용한 이동 물체 추적 방법
Xie et al. Ship target detection in SAR imagery based on maximum eigenvalue detector
Zhang et al. SAR image ship detection based on a superpixel non-window fast cfar strategy
Zhang et al. The study of detecting for IR weak and small targets based on fractal features
Chen et al. Accurate ship tracking in maritime images with kernelized correlation filter and curve fitting
Tang et al. An efficient algorithm for infrared small target detection
Dua et al. Rotation angle estimation of an image using least square method
Ji et al. Video stabilization algorithm based on background feature point matching
Lin Research on smoke edge detection algorithm based on structure similarity index measure
Hong et al. The Study of Detecting for IR Weak and Small Targets

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20210514

WW01 Invention patent application withdrawn after publication