CN111681197A - 一种基于Siamese网络结构的遥感图像无监督变化检测方法 - Google Patents

一种基于Siamese网络结构的遥感图像无监督变化检测方法 Download PDF

Info

Publication number
CN111681197A
CN111681197A CN202010535407.XA CN202010535407A CN111681197A CN 111681197 A CN111681197 A CN 111681197A CN 202010535407 A CN202010535407 A CN 202010535407A CN 111681197 A CN111681197 A CN 111681197A
Authority
CN
China
Prior art keywords
network
difference
image
change detection
classification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010535407.XA
Other languages
English (en)
Other versions
CN111681197B (zh
Inventor
雷涛
薛丁华
张肖
张栋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shaanxi University of Science and Technology
Original Assignee
Shaanxi University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shaanxi University of Science and Technology filed Critical Shaanxi University of Science and Technology
Priority to CN202010535407.XA priority Critical patent/CN111681197B/zh
Publication of CN111681197A publication Critical patent/CN111681197A/zh
Application granted granted Critical
Publication of CN111681197B publication Critical patent/CN111681197B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration by the use of more than one image, e.g. averaging, subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/23Clustering techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • G06T5/70
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20024Filtering details

Abstract

本发明公开一种基于Siamese网络结构的遥感图像无监督变化检测方法,包括以下步骤:(1)初始化参数;(2)获取差异图像;(3)利用自适应局部能量加权算法对步骤(2)的两幅信息互补的差异图像进行像素级融合得到新的差异图像;(4)采用聚类算法实现预分类;(5)以预分类结果为标签,利用DFF‑Siamese网络实现SAR图像变化区域的精准检测;本发明实现了SAR图像的无监督变化检测,将先验知识引入到深度卷积神经网络中,在Siamese网络中通过增加逐层差异性度量模块使特征挖掘更深入,有效提升了网络的学习能力,能够获得更为理想的变化检测结果。

Description

一种基于Siamese网络结构的遥感图像无监督变化检测方法
技术领域
本发明属于图像处理及模式识别领域,涉及遥感图像变化检测方法,具体涉及一种基于Siamese网络结构的遥感图像无监督变化检测方法。
背景技术
遥感影像变化检测是通过在不同时间同一场景拍摄到的两幅或多幅影像分析地表差异的一项技术。随着遥感技术的迅速发展,基于遥感影像的变化检测已成为地理大数据更新的关键技术。其中合成孔径雷达遥感影像因为不易受光照和大气的影响,具有全天候、全天时、多极化、多波段等特点而被广泛应用于环境监测、城市研究、灾害评估、森林资源监测等多个领域。由于受波的干涉现象影响,雷达传感器的成像设备接收到的总回波会存在误差,导致真实的SAR影像中存在大量噪声,图像分辨率较低,地表的原有信息和特征易丢失。因此如何有效抑制噪声的同时获得较高精度的检测结果仍然是一个具有挑战性的课题。
变化检测方法从实现方式的角度可分为有监督和无监督两种。有监督变化检测不仅依赖于双时相遥感图像,而且需要大量的人工标注结果,而无监督变化检测仅依赖于原始双时相遥感图像。由于人工标注工作效率低下,难以满足目前的应用需求,因此无监督变化检测方法的应用前景更为广阔。基于传统算法的无监督变化检测算法主要有以下三个步骤:图像预处理、生成差异图像、对差异图像进行变化和未变化区域分类。预处理是后续步骤的基础,主要包含辐射校正、几何校正、图像几何配准、降噪等操作。具有代表性的差异特征信息有助于获得高精度的变化检测结果,是变化检测的核心步骤。研究初期,学者们提出了差值法、对数比值法(log-ratio)、均值比值法(mean-ratio)等差异图构造算法,这些算法均采用了像素点无差别的计算方式。由于SAR图像中固有噪声具有乘法性,因此比值运算相比于差异运算在消除辐射测量所带来的噪声时更具优势,鲁棒性更强。
然而,上述三种差异图的构造算法过于单一,对变化区域的计算方式忽略了图像的局部特征差异,导致后续步骤的漏检率、错检率较高。为了更好的突出变化区域并抑制背景区域,Gong等人利用小波变换融合对数比值和均值比值生成差异图,进而实现变化检测。其主要方法是通过小波变换将图像在方向(水平、垂直、对角)上进行转换以得到不同尺度的特征信息,在特征域内进行融合,然而小波变换仅能反映“点”的奇异性,难以反映“线”或“面”的奇异性,且计算复杂度较高。为了实现简单快速的差异图融合,Zheng等人提出基于差值和对数差值的加权平均融合算法,该算法在实现差异图融合的同时能有效抑制斑点噪声的影响,然而该算法受限于差异算子的构造且容易引起融合结果的空间扭曲。对此,邵攀等人以模糊积分为基础,提出一种顾及冲突分析的图像融合算法,可实现四种差异图的决策级融合。
在获取差异图像后,通常利用阈值法或聚类算法实现差异图分类。阈值法可通过差异图像的直方图确定最优阈值,如Otsu、最小误差阈值算法、期望最大化(expectationmaximization,EM)算法等,该类算法思路简单,但检测结果对阈值的选取较为敏感,鲁棒性差。相比阈值法,聚类算法不需要设定阈值且鲁棒性强,因此在变化检测中得到了广泛应用。针对传统的模糊C均值聚类(fuzzy c-menas clustering,FCM)算法容易忽略图像空间信息、对噪声敏感的缺陷,Gong等人提出基于隐马尔科夫(markov random field,MRF)能量函数的模糊聚类算法(MRF-FCM)用于解决SAR图像变化检测问题,该算法在FCM中结合了一种基于能量函数的MRF模型以实现更好的变化检测结果。上述算法一定程度上改进了图像的变化检测精度,然而没有考虑算法的计算复杂性。为了实现快速图像变化检测算法,Lei等人提出快速模糊C均值聚类的无监督变化检测算法(change detection using fastfuzzy c-means clustering,CDFFCM),该算法将高斯金字塔和FCM算法相结合,通过有效减少图像中的冗余数据,提升了算法的计算效率。
以上基于传统算法的变化检测模型虽然能够不同程度的实现变化检测,但仍然存在以下缺陷:1)差异图生成算法对噪声敏感,难以有效区分前景及背景;2)图像特征描述困难,导致对变化和未变化像素的分类结果精度有限;3)算法鲁棒性较低,需要通过调整参数以适应不同的数据。
近年来深度学习在计算机视觉领域获得了巨大的成功,由于深度卷积神经网络的层级结构能够有效解析图像本质从而获得图像的高层语义特征,因此深度卷积神经网络实现了高精度图像分类及目标识别。目前,面向SAR影像的无监督变化检测的深度学习模型主要包括深度置信网络、自编码器、限制玻尔兹曼机、卷积神经网络等。Liu等人设计了一种对称耦合网络(symmetric convolutional coupling network,SCCN)用于解决非同源图像间的变化检测问题,该网络利用多层特征转换的对称结构,可将光学图像和SAR图像分别转换到同一特征空间中进行比较以生成差异图,然而该网络仅选择未变化区域作为训练样本,因此差异图的信息缺失严重。对此,Zhao等人提出近似对称的深度神经网络(approximately symmetrical deep neural network,ASDNN),该网络在训练中引入了两种类型的标签进行参数微调,进而更加突出变化区域以提升检测精度。以上两种对称网络的思路是一种端到端的检测算法,虽避免了滤波算法对检测结果的影响但检测结果依赖于差异图的构造。Gong等人提出了一种基于监督策略的无监督变化检测算法,该算法利用传统的无监督图像分割算法来获得一个“伪标签”,再以监督方式训练一个分类学习网络,在测试阶段可实现更高精度的变化检测。由于该算法成功消除了滤波与差异图构造两个步骤对变化检测结果的影响,因此具有较好的检测性能。然而,该算法利用deep neuralnetworks(DNN)网络所构造的分类器不能有效利用像素之间的位置信息,导致检测模型抗干扰能力差。基于Gong等人提出的无监督检测策略,Gao等人通过设计一个预分类模型以获得部分高精度的伪标签,利用principal component analysis(PCA)滤波器代替传统的卷积滤波器,从而有效提升了网络模型的鲁棒性。
对于具有高复杂性的遥感图像变化检测问题,深度卷积神经网络通过自动提取图像的深层语义特征实现了较传统算法更高的变化检测精度。然而以上所提出的无监督变化检测算法(SCCN、ASDNN、DNN和PCA-net)不能充分挖掘双时相图像所包含的特征信息,差异性对比不充分,导致这些算法鲁棒性差、检测精度低。因此如何利用深度神经网络构建一个高效的变化检测模型还需进一步探究。
发明内容
本发明目的在于提出一种基于Siamese网络结构的遥感图像无监督变化检测方法,解决SAR图像无监督变化检测问题,在突出变化区域和抑制斑点噪声之间做到更好的平衡,获得更高的检测精度。
为了实现上述目的,本发明采用以下技术方案。
一种基于Siamese网络结构的遥感图像无监督变化检测方法,包括如下步骤:
(1)初始化:设置预分类算法参数和网络运行参数;
(2)获取差异图像:利用对数比值差异算子和均值比值差异算子得到两幅差异图DIlog和DImean,具体操作为:
Figure BDA0002536827910000041
Figure BDA0002536827910000042
其中,I1,I2分别为双时相图像,μ1,μ2分别表示I1,I2的均值滤波结果;
(3)预分类:利用自适应局部能量加权算法(adaptive local energy weight,ALEW)对对数比值差异图像和均值比值差异图像进行像素级融合,采用聚类算法对其进行变化与未变化的二分类,输出预分类结果,具体为:
(a)根据局部能量函数公式计算DIlog所对应的局部能量矩阵Elog(x,y),能量函数的数学表达式如下:
Figure BDA0002536827910000051
其中(x,y)表示差异图像像素位置,w表示窗口大小,W可表示为w×w的滤波模版,w通常取3;
(b)将局部能量矩阵归一化到(0~1)之间,得到Elog
Figure BDA0002536827910000052
(c)自适应融合系数α
Figure BDA0002536827910000053
(d)根据融合公式得到差异融合图像DIF,具体操作如下:
DIF=α×DIlog+(1-α)×DImean
(e)获取融合差异图后,利用模糊聚类算法将差异图分为变化及未变化区域;
(4)提出DFF-Siamese网络:以Siamese结构为基础引入逐层卷积特征之间的差异性,将双时相图像的高层特征图和逐层差异特征图转换为一维向量在全连接层合并,以此构建基于差异特征融合的Siamese网络(Difference Feature Fusion for Siamese,DFF-Siamese)网络;
(5)网络训练:以步骤(3)的预分类结果作为像素类别标签用于DFF-Siamese网络训练,获得多层特征提取的分类器;
(6)输出网络预测结果:将测试图像输入已训练好网络获得最终变化检测结果。
进一步,所述步骤(1)初始化过程具体为:设置预分类算法中滤波模板W为3×3,将变化前后图像中相同位置的逐像素邻域作为输入,两组输入表示为:
Figure BDA0002536827910000054
Figure BDA0002536827910000055
其中
Figure BDA0002536827910000056
Figure BDA0002536827910000057
分别表示变化前后图像中某一像素的邻域,输入像素块的数量为H×L;输入大小设置为9×9,学习率为0.1,动量取0.9,Dropout设置为0.3。
进一步,所述步骤(5)以步骤(3)的预分类结果作为像素类别标签,将步骤(1)两组输入X1和X2输入至DFF-Siamese网络中进行模型训练,直至网络收敛。
本发明与现有技术相比具有以下优点:
1、本发明设计了一种新的图像融合算法,该算法根据邻域信息自适应权值,解决了加权平均算法权值选择困难的问题,并进一步提高了信噪比,能够充分挖掘双时相图像的差异信息,特征表达能力更强,具有更广阔的应用前景,有效提升传统Siamese网络对SAR影像的差异特征挖掘能力,为遥感影像的无监督变化检测方法提供了新的研究思路和技术手段。
2、本发明设计了一个可实现分类的网络模型,在Siamese网络的基础上引入了逐层卷积特征之间的差异性,将先验知识引入到深度卷积神经网络中,在Siamese网络中通过增加逐层差异性度量模块使特征挖掘更深入,使特征描述更加丰富,有效提升了网络的学习能力,有利于提高细节检测的准确度并增强模型抗干扰能力,实现了SAR图像的无监督变化检测,能够获得更为理想的变化检测结果。
附图说明
图1是本发明实现的流程图
图2是本发明设计的用于遥感图像的变化检测网络模型
图3是利用6种对比方法对Ottawa数据集进行变化检测的结果对比图
图4是利用6种对比方法对Bern数据集进行变化检测的结果对比图
具体实施方式
下面结合具体实施例对本发明作进一步详细描述,但不作为对本发明的限定。
如图1所示,本发明基于Siamese网络结构的遥感图像无监督变化检测方法,基于知识驱动联合数据驱动的思路,将先验知识引入到深度卷积神经网络中,描述如下:
(1)初始化:ALEW算法中滤波模板W为3×3。DFF-Siamese将变化前后图像中相同位置的逐像素邻域作为输入,两组输入可表示为:
Figure BDA0002536827910000071
Figure BDA0002536827910000072
其中
Figure BDA0002536827910000073
Figure BDA0002536827910000074
分别表示变化前后某一像素的邻域,输入像素块的数量为H×L。
输入大小设置为5×5,为了避免卷积过程中特征图尺寸过小,统一将输入填充至9×9,学习率为0.1,动量取0.9,Dropout设置为0.3。
(2)获取差异图像:利用对数比值差异算子和均值比值差异算子得到两幅差异图DIlog和DImean,具体操作为:
Figure BDA0002536827910000075
Figure BDA0002536827910000076
其中,I1,I2分别为双时相图像,μ1,μ2分别表示I1,I2的均值滤波结果
(3)预分类:通过引入能量矩阵对对数比值差异图像和均值比值差异图像进行像素级融合。
(a)根据局部能量函数公式计算DIlog所对应的局部能量矩阵Elog(x,y),能量函数的数学表达式如下:
Figure BDA0002536827910000077
其中(x,y)表示差异图像像素位置,w表示窗口大小,W可表示为w×w的滤波模版,w通常取3。
(b)将局部能量矩阵归一化到(0~1)之间,得到E′log
Figure BDA0002536827910000078
(c)自适应融合系数α
Figure BDA0002536827910000081
(d)根据融合公式得到差异融合图像DIF,具体操作如下:
DIF=α×DIlog+(1-α)×DImean
(e)获取融合差异图后,利用模糊聚类算法将差异图分为变化及未变化区域;
(4)提出DFF-Siamese模型:在Siamese网络的基础上引入了逐层卷积特征之间的差异性,将双时相图像的高层特征图和逐层差异特征图转换为一维向量在全连接层合并。DFF-Siamese模型结构如图3所示。
(5)网络训练:以步骤(3)的预分类结果作为像素类别标签,将X1和X2输入至网络中进行模型训练,直至网络收敛,具体的参数设置参见步骤(1);
(6)输出网络预测结果:将测试图像输入已训练好的DFF-Siamese网络获得最终变化检测结果。
本发明的效果可以通过以下实验进一步说明。
为了验证本发明在SAR图像上的鲁棒性和优越性,实验均在Ottawa和Bern两组真实的公开遥感数据集上完成,图像大小依次为350×290像元、301×301像元。所选计算机硬件环境CPU为Intel Core i9 9900X@3.40GHz,GPU为NVIDIA GeForce RTX 2080Ti 11GB的计算机上实现;软件平台为PyTorch。本发明选择四种评价指标对各类算法进行定量分析,分别为FN、FP、
Figure BDA0002536827910000082
Figure BDA0002536827910000083
其中,FN表示将未变化区域检测为变化区域的像素总数;FP表示将未变化区域检测为变化区域的像素总数;TP表示检测到真实变化区域的像素总数;TN表示将变化区域检测为未变化区域的像素总数;OE表示总错误率;Kappa系数是衡量真实地表变化与检测结果是否一致性的评价指标;PCC表示实际的一致率;PRE表示理论的一致率。
本发明共设置两组实验分别验证预分类模型和DFF-Siamese网络的有效性:
1)将DFF-Siamese网络与其他六种深度学习网络进行比较,参与验证的对比方法有:SCCN,ASDNN,PCA-Net,2-Channel,基于多尺度输入的2-Channel网络(2-Channel-Stream),Siamese,其中,2-Channel,2-Channel-Stream,Siamese和DFF-Siamese网络在监督训练阶段的“伪标签”来自于FCM算法对融合差异图的聚类结果。
Ottawa和Bern两组遥感数据集的变化检测结果分别如图3(a)~图3(l)和图4(a)~图4(l)所示。图3是利用6种对比方法对Ottawa数据集进行变化检测,图4是利用6种对比方法对Bern数据集进行变化检测的结果对比;图3和图4中其中图(a)~(e)依次为:前时相图像、后时相图像、真实变化区域二值图像、差异融合图、预分类结果,图(f)~(l)依次为SCCN、ASDNN、PCA-net、2-Channel、2-Channel Stream、Siamese、DFF-Siamese的双时相变化检测结果。其中黑色区域为未变化区域,白色区域为变化区域。
实验结果的定量分析分别如表1和表2所示;表1和表2是利用6种对比方法分别对两种数据集进行变化检测后,计算以下4个指标参数:误检数(FN),漏检数(FP),总错误率(OE),Kappa系数(KC)得到的结果。
表1
Method FP FN OE KC
ALEW+FCM 1535 869 2.37 91.25
SCCN 84 3738 3.77 84.42
ASDNN 625 3056 3.63 85.49
PCA-net 782 1194 1.92 93.08
2-Channel 994 925 1.89 93.01
2-Channel-S 1335 589 1.90 92.91
Siamese 907 901 1.78 93.31
DFF-Siamese 551 665 1.20 95.49
表2
Method FP FN OE KC
ALEW+FCM 248 175 0.47 82.01
SCCN 142 444 0.65 70.50
ASDNN 706 0 0.78 76.22
PCA-net 30 416 0.49 76.58
2-Channel 105 256 0.40 83.08
2-Channel-S 201 156 0.39 84.64
Siamese 211 124 0.37 84.74
DFF-Siamese 110 173 0.31 87.15
2)在预分类阶段中,差异图的分类算法采用基于模糊局部信息的FCM算法(robustfuzzy local information c-means clustering,FLICM)与快速鲁棒的FCM算法(fast androbust fuzzy c-means clustering,FRFCM),并将分类结果作为DFF-Siamese网络训练“伪标签”。在两种数据集的实验结果的定量分析如表3所示。
表3
Figure BDA0002536827910000101
为了充分验证本发明的适用性,所选取的两个SAR图像数据集的变化特点各有不同,Ottawa数据集的特点是变化区域占有较大比例,轮廓清晰,主要的难点在于真实变化区域与噪声易混淆;Bern数据集中未变化区域占有很大比例,变化区域之间微小的间隙会给检测任务带来挑战。从图3(e)和图4(e)可以看出,基于ALEW差异融合的预分类可以显示出清晰的变化边缘,由于FCM算法未能很好的考虑图像上下文信息从而使预分类存在少量漏检与孤立的噪声点。SCCN算法的检测结果中存在明显的漏检区域,ASDNN相比SCCN变化区域完整性稍有提升。PCA-net对噪声鲁棒性较高,获得了较低的FP指标,但在Bern数据集中却以损失大量变化区域为代价,FN指标较高。2-Channel网络在卷积过程中直接导致变化前后的特征信息融合,因此FP值很高。2-Channel-Stream网络相比2-Channel网络获得了更为完整的变化区域,因此其FP指标更高,但是其本质相当于两组并行的2-Channel网络,因此伪检区域也更多,影响整体检测精度。提出的DFF-Siamese网络相比Siamese网络在噪声和变化区域的完整性之间取得了更好的平衡,获得了最小的OE指标,在两组数据集上的视觉效果与Kappa系数均达到了最优。
从表3可以得出,利用改进的FCM算法分析ALEW融合结果,其本身就可以获得更高的变化检测精度,大量的干扰信息在预分类阶段被有效处理,给网络训练提供了更好的指导作用,最终变化区域正确率相比预分类均有不同程度的提升,进一步验证了DFF-Siamese网络的鲁棒性和稳定性。
最后应该说明的是:以上实施例仅用于说明本发明的技术方案而非对其限制,尽管参照上述实施例对本发明进行了详细说明,所属领域的普通技术人员应当理解:依然可以对本发明的具体实施方式进行修改或者等同替换,而未脱离本发明精神和范围的任何修改或者等同替换,其均应涵盖在本权利要求范围当中。

Claims (3)

1.一种基于Siamese网络结构的遥感图像无监督变化检测方法,其特征在于包括如下步骤:
(1)初始化:设置预分类算法参数和网络运行参数;
(2)获取差异图像:利用对数比值差异算子和均值比值差异算子得到两幅差异图DIlog和DImean,具体操作为:
Figure FDA0002536827900000011
Figure FDA0002536827900000012
其中,I1,I2分别为双时相图像,μ1,μ2分别表示I1,I2的均值滤波结果;
(3)预分类:通过引入能量矩阵对对数比值差异图像进行像素级融合,采用聚类算法对其进行变化与未变化的二分类,输出预分类结果,具体为:
(a)根据局部能量函数公式计算DIlog所对应的局部能量矩阵Elog(x,y),能量函数的数学表达式如下:
Figure FDA0002536827900000013
其中(x,y)表示差异图像像素位置,w表示窗口大小,W可表示为w×w的滤波模版,w通常取3;
(b)将局部能量矩阵归一化到(0~1)之间,得到E′log
Figure FDA0002536827900000014
(c)自适应融合系数α
Figure FDA0002536827900000015
(d)根据融合公式得到差异融合图像DIF,具体操作如下:
DIF=α×DIlog+(1-α)×DImean
(e)获取融合差异图后,利用模糊聚类算法将差异图分为变化及未变化区域;
(4)提出DFF-Siamese网络:以Siamese结构为基础引入逐层卷积特征之间的差异性,将双时相图像的高层特征图和逐层差异特征图转换为一维向量在全连接层合并,构建DFF-Siamese网络;
(5)网络训练:以步骤(3)的预分类结果作为像素类别标签用于DFF-Siamese网络训练,获得多层特征提取的分类器;
(6)输出网络预测结果:将测试图像输入已训练好的网络获得最终变化检测结果。
2.根据权利要求1所述的基于Siamese网络结构的遥感图像无监督变化检测方法,其特征在于:所述步骤(1)初始化过程具体为:设置预分类算法中滤波模板W为3×3,将变化前后图像中相同位置的逐像素邻域作为输入,两组输入表示为:
Figure FDA0002536827900000021
Figure FDA0002536827900000022
其中
Figure FDA0002536827900000023
Figure FDA0002536827900000024
分别表示变化前后图像中某一像素的邻域,输入像素块的数量为H×L;输入大小设置为9×9,学习率为0.1,动量取0.9,Dropout设置为0.3。
3.根据权利要求2所述的基于Siamese网络结构的遥感图像无监督变化检测方法,其特征在于:所述步骤(5)以步骤(3)的预分类结果作为像素类别标签,将步骤(1)两组输入X1和X2输入至DFF-Siamese网络中进行模型训练,直至网络收敛。
CN202010535407.XA 2020-06-12 2020-06-12 一种基于Siamese网络结构的遥感图像无监督变化检测方法 Active CN111681197B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010535407.XA CN111681197B (zh) 2020-06-12 2020-06-12 一种基于Siamese网络结构的遥感图像无监督变化检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010535407.XA CN111681197B (zh) 2020-06-12 2020-06-12 一种基于Siamese网络结构的遥感图像无监督变化检测方法

Publications (2)

Publication Number Publication Date
CN111681197A true CN111681197A (zh) 2020-09-18
CN111681197B CN111681197B (zh) 2023-02-28

Family

ID=72435720

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010535407.XA Active CN111681197B (zh) 2020-06-12 2020-06-12 一种基于Siamese网络结构的遥感图像无监督变化检测方法

Country Status (1)

Country Link
CN (1) CN111681197B (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112507826A (zh) * 2020-11-27 2021-03-16 西安电子科技大学 一种端到端生态变化监测方法、终端、计算机设备及介质
CN112541904A (zh) * 2020-12-16 2021-03-23 西安电子科技大学 一种无监督遥感图像变化检测方法、存储介质及计算设备
CN112634217A (zh) * 2020-12-17 2021-04-09 中国人民解放军火箭军工程大学 一种sar图像区域变化检测方法
CN113222898A (zh) * 2021-04-14 2021-08-06 西安电子科技大学 基于多元统计量和深度学习的双航过sar图像痕迹检测方法
CN113469074A (zh) * 2021-07-06 2021-10-01 西安电子科技大学 基于孪生注意力融合网络的遥感图像变化检测方法及系统
CN113705340A (zh) * 2021-07-16 2021-11-26 电子科技大学 一种基于雷达遥感数据的深度学习变化检测方法
CN113808166A (zh) * 2021-09-15 2021-12-17 西安电子科技大学 基于聚类差分和深度孪生卷积神经网络的单目标跟踪方法
CN114066816A (zh) * 2021-10-21 2022-02-18 西安理工大学 基于静态小波变换提取的sar图像无监督变化检测方法
CN114419465A (zh) * 2022-03-31 2022-04-29 深圳市海清视讯科技有限公司 遥感图像变化检测方法、装置、设备及存储介质
CN115019186A (zh) * 2022-08-08 2022-09-06 中科星图测控技术(合肥)有限公司 一种用于遥感变化检测的算法和系统
JP7270314B1 (ja) * 2022-11-07 2023-05-10 タクトピクセル株式会社 検査方法、検査システム、ニューラルネットワーク

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110097528A (zh) * 2019-04-11 2019-08-06 江南大学 一种基于联合卷积自编码网络的图像融合方法
CN110555841A (zh) * 2019-09-10 2019-12-10 西安电子科技大学 基于自注意图像融合和dec的sar图像变化检测方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110097528A (zh) * 2019-04-11 2019-08-06 江南大学 一种基于联合卷积自编码网络的图像融合方法
CN110555841A (zh) * 2019-09-10 2019-12-10 西安电子科技大学 基于自注意图像融合和dec的sar图像变化检测方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
万冉冉等: "基于Siamese卷积神经网络的影像瓦片变化检测技术", 《测绘通报》 *
崔斌等: "一种基于卷积神经网络的SAR变化检测方法", 《测绘科学》 *
王汝娇等: "基于卷积神经网络与多特征融合的Twitter情感分类方法", 《计算机工程》 *

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112507826B (zh) * 2020-11-27 2024-02-06 西安电子科技大学 一种端到端生态变化监测方法、终端、计算机设备及介质
CN112507826A (zh) * 2020-11-27 2021-03-16 西安电子科技大学 一种端到端生态变化监测方法、终端、计算机设备及介质
CN112541904B (zh) * 2020-12-16 2023-03-24 西安电子科技大学 一种无监督遥感图像变化检测方法、存储介质及计算设备
CN112541904A (zh) * 2020-12-16 2021-03-23 西安电子科技大学 一种无监督遥感图像变化检测方法、存储介质及计算设备
CN112634217A (zh) * 2020-12-17 2021-04-09 中国人民解放军火箭军工程大学 一种sar图像区域变化检测方法
CN113222898A (zh) * 2021-04-14 2021-08-06 西安电子科技大学 基于多元统计量和深度学习的双航过sar图像痕迹检测方法
CN113222898B (zh) * 2021-04-14 2024-02-09 西安电子科技大学 基于多元统计量和深度学习的双航过sar图像痕迹检测方法
CN113469074A (zh) * 2021-07-06 2021-10-01 西安电子科技大学 基于孪生注意力融合网络的遥感图像变化检测方法及系统
CN113469074B (zh) * 2021-07-06 2023-12-19 西安电子科技大学 基于孪生注意力融合网络的遥感图像变化检测方法及系统
CN113705340B (zh) * 2021-07-16 2023-04-07 电子科技大学 一种基于雷达遥感数据的深度学习变化检测方法
CN113705340A (zh) * 2021-07-16 2021-11-26 电子科技大学 一种基于雷达遥感数据的深度学习变化检测方法
CN113808166A (zh) * 2021-09-15 2021-12-17 西安电子科技大学 基于聚类差分和深度孪生卷积神经网络的单目标跟踪方法
CN114066816B (zh) * 2021-10-21 2023-08-15 西安理工大学 基于静态小波变换提取的sar图像无监督变化检测方法
CN114066816A (zh) * 2021-10-21 2022-02-18 西安理工大学 基于静态小波变换提取的sar图像无监督变化检测方法
CN114419465B (zh) * 2022-03-31 2022-07-01 深圳市海清视讯科技有限公司 遥感图像变化检测方法、装置、设备及存储介质
CN114419465A (zh) * 2022-03-31 2022-04-29 深圳市海清视讯科技有限公司 遥感图像变化检测方法、装置、设备及存储介质
CN115019186A (zh) * 2022-08-08 2022-09-06 中科星图测控技术(合肥)有限公司 一种用于遥感变化检测的算法和系统
JP7270314B1 (ja) * 2022-11-07 2023-05-10 タクトピクセル株式会社 検査方法、検査システム、ニューラルネットワーク

Also Published As

Publication number Publication date
CN111681197B (zh) 2023-02-28

Similar Documents

Publication Publication Date Title
CN111681197B (zh) 一种基于Siamese网络结构的遥感图像无监督变化检测方法
CN108961235B (zh) 一种基于YOLOv3网络和粒子滤波算法的缺陷绝缘子识别方法
CN110472627B (zh) 一种端到端的sar图像识别方法、装置及存储介质
CN111611643B (zh) 户型矢量化数据获得方法、装置、电子设备及存储介质
CN106875395B (zh) 基于深度神经网络的超像素级sar图像变化检测方法
CN107330875B (zh) 基于遥感图像正反向异质性的水体周边环境变化检测方法
CN101996401B (zh) 基于强度图像和深度图像的目标分析方法及设备
CN109446894B (zh) 基于概率分割及高斯混合聚类的多光谱图像变化检测方法
CN110245600B (zh) 自适应起始快速笔画宽度无人机道路检测方法
CN110659649A (zh) 一种基于近红外光成像的图像处理与字符识别算法
CN111126335A (zh) 一种结合显著性和神经网络的sar船只识别方法及系统
CN106991686A (zh) 一种基于超像素光流场的水平集轮廓跟踪方法
CN104778670A (zh) 一种基于多元统计模型的分形小波自适应图像去噪方法
Zhao et al. Research on detection method for the leakage of underwater pipeline by YOLOv3
Shi et al. License plate localization in complex environments based on improved GrabCut algorithm
CN114943869B (zh) 风格迁移增强的机场目标检测方法
CN107256399B (zh) 一种基于Gamma分布超像素方法和基于超像素TMF的SAR图像海岸线检测方法
Chen et al. Improved yolov3 algorithm for ship target detection
CN113379639B (zh) 一种复杂环境中红外目标抗干扰检测跟踪方法
CN116385915A (zh) 一种基于时空信息融合的水面漂浮物目标检测与跟踪方法
CN112528990B (zh) 一种高动态星敏感器恒星光斑提取方法
Zhen-Yan Chinese character recognition method based on image processing and hidden markov model
CN113496159A (zh) 一种多尺度卷积与动态权重代价函数的烟尘目标分割方法
CN104933714A (zh) 一种基于上下文关系的sar遥感场景溢油分割检测方法
CN116106899B (zh) 一种基于机器学习的港口航道小目标识别方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant