CN102819838B - 基于多源目标特征支持的高光谱遥感图像变化检测方法 - Google Patents

基于多源目标特征支持的高光谱遥感图像变化检测方法 Download PDF

Info

Publication number
CN102819838B
CN102819838B CN201210247785.3A CN201210247785A CN102819838B CN 102819838 B CN102819838 B CN 102819838B CN 201210247785 A CN201210247785 A CN 201210247785A CN 102819838 B CN102819838 B CN 102819838B
Authority
CN
China
Prior art keywords
remote sensing
change
spectrum remote
visible
hyperion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201210247785.3A
Other languages
English (en)
Other versions
CN102819838A (zh
Inventor
江碧涛
樊彬
张秀玲
余晓刚
潘春洪
李京龙
胡世仓
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute of Automation of Chinese Academy of Science
Beijing Institute of Remote Sensing Information
Original Assignee
Institute of Automation of Chinese Academy of Science
Beijing Institute of Remote Sensing Information
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Automation of Chinese Academy of Science, Beijing Institute of Remote Sensing Information filed Critical Institute of Automation of Chinese Academy of Science
Priority to CN201210247785.3A priority Critical patent/CN102819838B/zh
Publication of CN102819838A publication Critical patent/CN102819838A/zh
Application granted granted Critical
Publication of CN102819838B publication Critical patent/CN102819838B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Analysis (AREA)

Abstract

本发明公开一种基于多源目标特征和机器学习的高光谱遥感图像变化检测方法,包括:可见光遥感图像变化检测;可见光与高光谱遥感图像配准,将可见光变化检测得到的不变化目标变换至高光谱遥感图像;基于变换至高光谱遥感图像中的不变化目标,选择训练样本;高光谱子空间学习;在学习得到的子空间内进行高光谱遥感图像变化检测。本发明的方法基于多源目标特征,通过可见光遥感图像确定不变化的高光谱样本用以学习高光谱最佳判别子空间,在该子空间中进行高光谱遥感图像变化检测,性能稳定,适用范围广。

Description

基于多源目标特征支持的高光谱遥感图像变化检测方法
技术领域
本发明涉及一种用于高光谱遥感图像的变化检测方法,具体说是一种基于多源目标特征和机器学习的高光谱遥感图像变化检测方法,相关技术涉及遥感图像信息处理、目标特征提取、模式识别、机器学习等技术领域。
背景技术
遥感图像变化检测是指利用两幅同一地点不同时间拍摄得到的遥感图像自动地确定和分析发生了变化的地物的过程,这些地物变化包括光谱特性的变化以及物体空间位置的变化。它是一门高度跨学科的技术,涉及遥感图像处理、模式识别、计算机视觉等多个学科的研究内容。过去十几年里,虽然遥感图像变化检测技术得到了长足的发展,但是数据源主要还是全色/多光谱遥感图像,这些图像在检测地物微小变化时无法取得令人满意的结果。相对于全色和多光谱遥感图像,高光谱遥感图像具有丰富的光谱信息,因此对物体具有更强的辨别能力,可望获得更好的变化检测结果。高光谱遥感图像的变化检测难点主要来源于高光谱数据的高维度所带来的复杂性,同时,由于高光谱成像技术相对较新,并且仍然在不断发展之中,高光谱遥感图像变化检测方法并不成熟。
针对高光谱遥感图像的变化检测问题,国内外的研究者们也做了一些研究。目前,大部分高光谱遥感图像变化检测方法都是基于多变量统计分析的方法,例如交叉互相关法、协方差等同化、多变量变化检测、时域主成分分析等。这些方法的基本出发点都是对高光谱特征施加一个线性变换,然后针对变换后的向量(线性子空间)计算距离,以此来进行变化检测。因此,如何找到一个合适的线性变换是其中的关键。由于通常无法获得变化/不变化样本,目前采用的线性变换学习方法都是无监督的方法,例如在多变量变化检测方法中,它通过最大化高光谱特征线性变换后的差异向量的方差来学习最优的线性变换。这类无监督的学习方法无法保证得到的线性子空间具有很强的判别能力。
发明内容
有鉴于此,本发明综合利用图像处理、模式识别和机器学习技术,以多源图像(可见光遥感图像、高光谱遥感图像)数据为输入,提供一种有效的基于多源(可见光、高光谱)目标特征的高光谱遥感图像变化自动检测技术。
本发明的基于多源目标特征和机器学习的高光谱遥感图像变化自动检测技术步骤如下:步骤S1:可见光遥感图像变化检测。对输入的两幅可见光遥感图像进行变化检测,得到可见光变化目标和不变化目标;步骤S2:可见光与高光谱遥感图像配准。分别对变化前的可见光与高光谱遥感图像、以及变化后的可见光与高光谱遥感图像进行配准,将可见光遥感图像上的不变化目标变换至高光谱遥感图像,得到不变化目标的高光谱特征;步骤S3:基于步骤S1的可见光遥感图像变化检测结果,选择置信度高的不变化目标作为训练样本;步骤S4:基于步骤S3选择的训练样本的高光谱特征,进行子空间学习,得到最具判别力的高光谱子空间的投影变换;步骤S5:将高光谱遥感图像上所有像素点的高光谱特征投影至步骤S4学习得到的子空间,进行变化检测,得到高光谱遥感图像变化检测结果。
本发明的有益效果是,本发明通过基于多源(可见光、高光谱)目标特征的高光谱遥感图像变化自动检测,有效综合了可见光遥感图像空间分辨率高,比较容易得到一些置信度高的不变化目标,以及高光谱遥感图像光谱分辨率高,有利于更精细的变化检测这两个特点。
本方法利用可见光遥感图像变化检测结果指导选择高光谱子空间学习使用的样本,可以进行有监督的判别学习,有效地提高了高光谱子空间区分变化点与不变化点的能力,避免了单一使用高光谱遥感图像,只能进行无监督学习,子空间缺乏判别能力的问题。该方法稳定性高,适用范围广,可广泛应用于目标监测、灾害监测、城市规划、环境保护等系统中。
附图说明
图1是本发明基于多源目标特征和机器学习的高光谱遥感图像变化自动检测技术流程图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚明白,以下结合具体实施例,并参照附图,对本发明进一步详细说明。
随着航天技术和传感器技术的不断发展,一颗卫星上同时搭载多种传感器已越来越普遍,开启了遥感图像变化检测一个新的研究方向:基于多源图像信息的变化检测,为遥感图像变化检测技术带来了新的机遇。虽然可见光(全色和多光谱)遥感图像没有高光谱遥感图像那么丰富的光谱细节信息,但是却具有更高的空间分辨率,通常利用可见光遥感图像进行变化检测都能获得一些置信度非常高的不变化目标。另一方面,基于多源图像的优势,可以同时在高光谱遥感图像中找出这些不变化目标的位置。因此,可以利用这些不变化目标的高光谱特征作为训练样本进行有监督的子空间学习,以期得到判别力强的子空间,从而提高现有高光谱遥感图像变化检测方法的精度。
本发明使用的方法既可以在个人计算机、工控机及服务器上以软件的形式安装并执行,也可将方法做成嵌入式芯片以硬件的形式来体现。
图1为本发明提出的基于多源目标特征和机器学习的高光谱遥感图像变化自动检测方法流程图。
参照图1,在本发明的基于多源目标特征和机器学习的高光谱遥感图像变化检测方法中,输入数据为同一时间同一地点的可见光和高光谱遥感图像以及另一时间同一地点的可见光和高光谱遥感图像。
在步骤S1,利用两幅输入的可见光遥感图像进行变化检测,区分出可见光变化目标和不变化目标。在该步骤,采用现有的对象级变化检测方法,首先对输入图像进行图像分割,然后针对每个分割结果(对象)提取变化特征,计算变化概率,最后对变化概率阈值化操作得到可见光遥感图像的变化检测结果,即区分出可见光变化目标和不变化目标,其中变化概率低于变化概率阈值的对象被称为不变化目标。
在步骤S2,分别对变化前的可见光和高光谱遥感图像、以及变化后的可见光和高光谱遥感图像进行配准,将步骤S1得到的可见光遥感图像上的不变化目标变换至高光谱遥感图像,得到不变化目标在高光谱遥感图像上的位置。具体地,先将变化前可见光遥感图像配准至变化前高光谱遥感图像,得到图像目标在变化前高光谱遥感图像上的位置;然后将变化后可见光遥感图像配准至变化后高光谱遥感图像,得到相同图像目标在变化后高光谱遥感图像上的位置。
步骤S3:根据步骤S1中可见光遥感图像变化检测得到的目标变化概率,对区分出的不变化目标按照其变化概率进行从小到大排序,选择m=0.2×n个目标(n是所有不变化目标的个数),然后再根据步骤S2的配准结果,确定这些目标在高光谱遥感图像上的像素点位置,取其变化前后高光谱遥感图像上的高光谱特征,得到训练样本(高光谱图像的每一个像素点为一个样本)集合:Tr={Xi,Yi,i=1,2,…,N},其中N是训练集的大小,Xi是第i个样本在变化前高光谱遥感图像上的高光谱特征,Yi是第i个样本在变化后高光谱遥感图像上的高光谱特征。
步骤S4:根据步骤S3得到的训练样本集合,进行高光谱子空间学习。子空间学习的目的在于将原始的高光谱数据,线性投影至一个子空间,使得在投影后的子空间中,不变化目标变化前后的高光谱子空间特征之间的距离小,而变化目标变化前后的高光谱子空间特征之间的距离大。在具体实施时,由于在训练样本中只选择了不变化样本,因此可以采用类似于保局投影的形式,目标是最小化不变化目标的类内方差与所有不变化目标方差的比值,其意义在于找到一个高光谱的子空间,使得不变化样本之间的距离尽可能小,同时使得所有不变化样本的方差尽可能的大,在这样的子空间中,有利于增加高光谱数据的可分性。基于这个学习目的,其目标函数可以写成:
min Σ i = 1 N ( W T ( X i - Y i ) ) 2 Σ i = 1 N ( ( W T X i ) 2 + ( W T Y i ) 2 ) ,
该目标函数可进一步写成矩阵的形式:
min W T BW W T AW ,
其中 B = Σ i = 1 N ( X i - Y i ) ( X i - Y i ) T , A = Σ i = 1 N ( X i X i T + Y i Y i T ) , N为训练样本的个数,Xi是第i个样本在变化前高光谱遥感图像上的高光谱特征,Yi是第i个样本在变化后高光谱遥感图像上的高光谱特征,W为待求解的投影矩阵。通过拉格朗日乘数法,求解该目标函数得到:AW=λBW。这是一个广义特征值问题,λ是特征值,W是对应的特征向量。因此满足该目标函数的最优嵌入子空间由前K个最大的广义特征值所对应的特征向量组成,其中K是子空间的维数。
步骤S5:根据步骤S4学习得到的最优子空间投影矩阵W,将高光谱数据进行子空间投影,通过在投影子空间内计算距离进行变化检测。具体地,对于高光谱遥感图像上的某个点,首先计算距离dis(X,Y)=||WTX-WTY||,如果dis(X,Y)<t,那么该点没发生变化,否则发生了变化。t是变化阈值,X,Y分别为该点在变化前和变化后高光谱遥感图像上的高光谱特征。
以上所述的具体实施例,对本发明的目的、技术方案和有益效果进行了进一步详细说明,所应理解的是,以上所述仅为本发明的具体实施例而已,并不用于限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (6)

1.一种基于多源目标特征和机器学习的高光谱遥感图像变化检测方法,其中输入数据为同一时间同一地点的可见光和高光谱遥感图像以及另一时间同一地点的可见光和高光谱遥感图像,该方法包括以下步骤:
步骤S1:对可见光遥感图像进行变化检测,得到初始的检测结果,即区分出变化目标和不变化目标;
步骤S2:通过可见光与高光谱遥感图像配准,将步骤S1中可见光遥感图像变化检测得到的不变化目标变换至高光谱遥感图像;
步骤S3:基于可见光遥感图像变化检测的结果,选择置信度高,即变化概率低的不变化目标在高光谱遥感图像上对应的高光谱特征作为训练样本;
步骤S4:根据步骤S3得到的训练样本集合,进行高光谱子空间学习;
步骤S5:在高光谱子空间中对高光谱遥感图像进行变化检测;
其中,在步骤S2,采用可见光与高光谱遥感图像配准的方法,将可见光遥感图像变化检测得到的不变化目标变换至高光谱遥感图像,得到高光谱遥感图像中对应的不变像素;
在步骤S4,基于可见光遥感图像变化检测以及可见光与高光谱遥感图像配准的结果,利用可见光遥感图像上变化概率最低的20%不变化目标在对应高光谱遥感图像上的高光谱特征,进行子空间学习;
在步骤S4,子空间学习的目的是使得进行子空间投影后,训练样本之间的距离尽可能小,而同时使得所有训练样本的方差尽可能大;
步骤S4中,进行子空间学习所定义的目标函数为:
min = Σ i = 1 N ( W T ( X i - Y i ) ) 2 Σ i = 1 N ( ( W T X i ) 2 + ( W T Y i ) 2 ) = min W T BW W T AW ,
其中 B = Σ i = 1 N ( X i - Y i ) ( X i - Y i ) T , A = Σ i = 1 N ( X i X i T + Y i Y i T ) , N为训练样本的个数,Xi是第i个样本在变化前高光谱遥感图像上的高光谱特征,Yi是第i个样本在变化后高光谱遥感图像上的高光谱特征,W为待求解的投影矩阵,通过拉格朗日乘数法,求解该目标函数得到:AW=λBW,这是一个广义特征值问题,λ是特征值,W是对应的特征向量,满足该目标函数的最优嵌入子空间由前K个最大的广义特征值所对应的特征向量组成,其中K是子空间的维数。
2.如权利要求1所述的变化检测方法,其特征在于,在步骤S1,利用两幅输入的可见光遥感图像进行变化检测,得到初始的变化目标和不变化目标。
3.如权利要求1所述的变化检测方法,其特征在于,在步骤S5,通过子空间学习得到的投影矩阵,对高光谱遥感图像中所有像素的高光谱特征进行投影,通过比较投影后特征之间的距离进行变化检测。
4.如权利要求2所述的变化检测方法,其特征在于,在步骤S1,采用对象级的变化检测方法,得到变化/不变化的目标。
5.如权利要求1所述的变化检测方法,其特征在于,在步骤S5,根据步骤S4学习得到的最优子空间投影矩阵W,将高光谱特征X进行子空间投影得到WTX,通过在投影子空间内计算变化前后高光谱遥感图像上高光谱特征之间的距离进行变化检测。
6.如权利要求5所述的变化检测方法,其特征在于,对于高光谱遥感图像上的某个点,首先计算距离dis(X,Y)=||WTX-WTY||,如果dis(X,Y)<t,那么该点没发生变化,否则发生了变化,t是变化阈值,X,Y分别为该点在变化前和变化后高光谱遥感图像上的高光谱特征。
CN201210247785.3A 2012-07-17 2012-07-17 基于多源目标特征支持的高光谱遥感图像变化检测方法 Expired - Fee Related CN102819838B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210247785.3A CN102819838B (zh) 2012-07-17 2012-07-17 基于多源目标特征支持的高光谱遥感图像变化检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210247785.3A CN102819838B (zh) 2012-07-17 2012-07-17 基于多源目标特征支持的高光谱遥感图像变化检测方法

Publications (2)

Publication Number Publication Date
CN102819838A CN102819838A (zh) 2012-12-12
CN102819838B true CN102819838B (zh) 2015-03-25

Family

ID=47303941

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210247785.3A Expired - Fee Related CN102819838B (zh) 2012-07-17 2012-07-17 基于多源目标特征支持的高光谱遥感图像变化检测方法

Country Status (1)

Country Link
CN (1) CN102819838B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140313325A1 (en) * 2013-04-18 2014-10-23 Ge Aviation Systems Llc Method of generating a spatial and spectral object model
CN105989597B (zh) * 2015-02-13 2020-05-12 中国科学院西安光学精密机械研究所 基于像素选择过程的高光谱图像异常目标检测方法
CN105608698B (zh) * 2015-12-25 2018-12-25 西北工业大学 一种基于sae的遥感图像变化检测方法
CN107967449B (zh) * 2017-11-13 2019-07-05 西北工业大学 一种基于广义证据理论的多光谱图像未知目标识别方法
CN109102529A (zh) * 2018-08-15 2018-12-28 西北工业大学 基于深度卷积神经网络的端对端高光谱图像变化检测方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7643703B2 (en) * 2003-09-03 2010-01-05 Battelle Energy Alliance, Llc Image change detection systems, methods, and articles of manufacture
CN101694718A (zh) * 2009-10-13 2010-04-14 西安电子科技大学 基于感兴趣区域的遥感图像变化检测方法
CN102169545A (zh) * 2011-04-25 2011-08-31 中国科学院自动化研究所 一种高分辨率遥感图像的变化检测方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7643703B2 (en) * 2003-09-03 2010-01-05 Battelle Energy Alliance, Llc Image change detection systems, methods, and articles of manufacture
CN101694718A (zh) * 2009-10-13 2010-04-14 西安电子科技大学 基于感兴趣区域的遥感图像变化检测方法
CN102169545A (zh) * 2011-04-25 2011-08-31 中国科学院自动化研究所 一种高分辨率遥感图像的变化检测方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
Hyperspectral change detection based on independent component analysis;WU Chen;《遥感学报》;20120531;545-561 *
多源遥感图像自适应配准方法研究;王振华;《中国优秀硕士学位论文全文数据库》;20110615;摘要,第4.2节 *
遥感图像的图像配准方法;金星;《红外》;20040930;23-30 *

Also Published As

Publication number Publication date
CN102819838A (zh) 2012-12-12

Similar Documents

Publication Publication Date Title
CN109697435B (zh) 人流量监测方法、装置、存储介质及设备
Gong et al. A spectral and spatial attention network for change detection in hyperspectral images
Qu et al. A multilevel encoder–decoder attention network for change detection in hyperspectral images
Wu et al. Slow feature analysis for change detection in multispectral imagery
Dong et al. Abundance matrix correlation analysis network based on hierarchical multihead self-cross-hybrid attention for hyperspectral change detection
Dai et al. One-stage cascade refinement networks for infrared small target detection
CN107563355A (zh) 基于生成对抗网络的高光谱异常检测方法
CN102819838B (zh) 基于多源目标特征支持的高光谱遥感图像变化检测方法
CN104318219A (zh) 基于局部特征及全局特征结合的人脸识别方法
Liu et al. Style transformation-based spatial–spectral feature learning for unsupervised change detection
CN116448019B (zh) 建筑节能工程质量平面度智能检测装置及方法
CN108960142B (zh) 基于全局特征损失函数的行人再识别方法
CN102789578A (zh) 基于多源目标特征支持的红外遥感图像变化检测方法
CN111814696A (zh) 一种基于改进YOLOv3的视频船舶目标检测方法
Liu et al. A novel deep framework for change detection of multi-source heterogeneous images
Huo et al. Memory-augmented Autoencoder with Adaptive Reconstruction and Sample Attribution Mining for Hyperspectral Anomaly Detection
Wang et al. Bitemporal Attention Sharing Network for Remote Sensing Image Change Detection
Hu et al. An Improved Deep Netural Network for Small Ship Detection in SAR Imagery
Wang et al. A novel filter-based anomaly detection framework for hyperspectral imagery
CN103903258B (zh) 基于次序统计量谱聚类的遥感图像变化检测方法
CN101482917B (zh) 一种基于二阶二维主分量分析的人脸识别系统和方法
Suheryadi et al. Spatio-temporal analysis for moving object detection under complex environment
CN110895701B (zh) 基于cn和fhog的森林火灾在线识别方法及装置
Zheng et al. Distracted Driving Behavior Detection and Identification Based on Improved Cornernet-Saccade
Yu et al. Research on folk handicraft image recognition based on neural networks and visual saliency

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent of invention or patent application
CB03 Change of inventor or designer information

Inventor after: Jiang Bitao

Inventor after: Fan Bin

Inventor after: Zhang Xiuling

Inventor after: Yu Xiaogang

Inventor after: Pan Chunhong

Inventor after: Li Jinglong

Inventor after: Hu Shicang

Inventor before: Jiang Bitao

Inventor before: Fan Bin

Inventor before: Zhang Xiuling

Inventor before: Yu Xiaogang

Inventor before: Pan Chunhong

Inventor before: Li Jinglong

Inventor before: Hu Shichang

COR Change of bibliographic data

Free format text: CORRECT: INVENTOR; FROM: JIANG BITAO FAN BIN ZHANG XIULING YU XIAOGANG PAN CHUNHONG LI JINGLONG HU SHICHANG TO: JIANG BITAO FAN BIN ZHANG XIULING YU XIAOGANG PAN CHUNHONG LI JINGLONG HU SHICANG

C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150325

Termination date: 20210717