CN114596482A - 一种基于扩展多线性混合模型的高光谱图像非线性解混方法 - Google Patents

一种基于扩展多线性混合模型的高光谱图像非线性解混方法 Download PDF

Info

Publication number
CN114596482A
CN114596482A CN202210123089.5A CN202210123089A CN114596482A CN 114596482 A CN114596482 A CN 114596482A CN 202210123089 A CN202210123089 A CN 202210123089A CN 114596482 A CN114596482 A CN 114596482A
Authority
CN
China
Prior art keywords
nonlinear
model
abundance
linear
matrix
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210123089.5A
Other languages
English (en)
Other versions
CN114596482B (zh
Inventor
李明磊
王斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fudan University
Original Assignee
Fudan University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fudan University filed Critical Fudan University
Priority to CN202210123089.5A priority Critical patent/CN114596482B/zh
Publication of CN114596482A publication Critical patent/CN114596482A/zh
Application granted granted Critical
Publication of CN114596482B publication Critical patent/CN114596482B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A40/00Adaptation technologies in agriculture, forestry, livestock or agroalimentary production
    • Y02A40/10Adaptation technologies in agriculture, forestry, livestock or agroalimentary production in agriculture

Landscapes

  • Image Processing (AREA)

Abstract

本发明属于遥感图像处理技术领域,具体为一种基于扩展多线性混合模型的高光谱图像鲁棒非线性解混方法。本发明通过引入鲁棒性较好的目标函数,构造了一个基于扩展多线性混合模型的鲁棒非线性解混模型,有效地抑制了噪声波段的干扰。此外,利用高光谱图像的局部空间相似性设计了丰度的重加权协同稀疏正则项以及非线性参数的重加权光谱全变差正则项,并将它们添加到模型中以缓解大量参数的引入所带来的过拟合问题,解混精度得到进一步的提升,因此在实际高光谱图像的非线性解混方面有着重要的应用价值。

Description

一种基于扩展多线性混合模型的高光谱图像非线性解混方法
技术领域
本发明属于遥感图像处理技术领域,具体涉及一种高光谱图像非线性解混方法。
背景技术
高光谱遥感是一种将成像技术与光谱技术相结合的多维信息获取技术,在地质科学、环境科学、精细农业以及军事等领域中得到了广泛的应用。高光谱成像光谱仪从可见光、近红外、和中红外区域内的多达数十至数百个狭窄波段上同时采集图像数据。高光谱图像具有光谱分辨率高和图谱合一的特点,为地物信息的提取和分析提供了丰富的信息。然而,由于空间分辨率的限制以及地物分布的复杂多样性,在高光谱图像中存在着一些混合像元,它是由不同的物质光谱按照一定的比例所构成的。混合像元的存在限制了传统的像元级的高光谱图像的分类、目标检测等应用。为了使得分析和应用在亚像元级进行,需要借助光谱解混将混合像元分解为其组成成分的物质光谱(端元)及在像元对应区域中的占比(丰度)[1]。
线性混合模型(Linear Mixture Model,LMM)认为像元是通过端元按照其对应丰度线性组合而成。虽然LMM模型表达简单且具有一定物理意义,但是难以准确描述如沙地、矿物混合区域的紧密混合以及植被覆盖与城市地区的多层次混合等场景中存在的非线性混合效应。因此,为了更好地解决实际场景中的解混问题,有必要去构建非线性混合模型[2]。传统的非线性模型可大致分为以下几种:用于紧密混合场景的Hapke模型[3],仅考虑两两端元间二次散射效应的双线性混合模型(Bilinear Mixture Models,BMMs)[4]-[6],以及考虑端元间所有阶散射效应的多线性混合模型(Multilinear Mixing Model,MLM)[7]等。Hapke模型强烈依赖于固有的物理参数,限制了它的实际应用。BMMs的一般形式是LMM叠加一个表示二阶散射双线性项。经典的BMMs包括Fan模型(Fan Model,FM)[4],广义双线性模型(Generalized Bilinear Model,GBM)[5],多项式后验非线性模型(Polynomial Post-Nonlinear Model,PPNM)[6]等。然而,在如城市区域等的复杂场景中,物质间的高阶散射也不能忽视。作为PPNM模型的一个扩展,MLM模型[7]包含了端元间所有阶的散射效应,并逐像素地引入一个标量非线性参数以表示光与物质发生进一步相互作用的概率。然而,由于光谱混合过程是与波长相关的,不同波段的多重散射程度是不同的[8]。因此,为了对不同波段的非线性贡献进行表示,扩展多线性混合模型(Extended MLM,EMLM)对MLM模型中的标量非线性参数进行了矢量化。但由于引入了大量的非线性参数,基于EMLM模型的非线性解混算法[9]对于噪声比较敏感且易出现过拟合。因此,需要进一步地对该算法进行改进以获得更高的精度和更强的鲁棒性。
下面介绍与本发明相关的一些概念:
光谱混合模型
对于高光谱数据
Figure BDA0003499263090000021
其每列xj都对应一个具有L个波段的像元向量,共存在N个这样的像元。以
Figure BDA0003499263090000022
表示端元矩阵(M是端元个数),ai,j是端元ei在像元xj中的丰度,εj是模型误差。LMM假设下的像元是端元按丰度的线性组合,为满足物理意义,丰度需满足非负与“和为一”的约束条件[10]:
Figure BDA0003499263090000023
BMMs则在LMM的基础上增加了两两端元间的二次散射混合项,其一般表示为:
Figure BDA0003499263090000024
其中,bi,k,j是非线性参数,⊙表示Hadamard积,且ei⊙ek=[ei,1ek,1,ei,1ek,1,...,ei,1ek,1]T表示端元间的Hadamard乘积,也称为虚拟端元,用于描述光在两种物质间发生的二次散射非线性相互作用。在FM中,t1=M-1,t2=i+1,bi,k,j=1,表明二次散射的强度等于对应端元丰度的乘积,当像元中不存在某端元时,也就不存在与该端元相关的二次散射。0≤bi,k,j≤1对约束进行放松,使GBM相较于FM模型更加灵活。且当bi,k,j=0时,GBM就转换为LMM;同样若bi,k,j=1,则GBM就等价为FM。在PPNM中,t1=M,t2=1,
Figure BDA0003499263090000025
相比前两种模型多考虑了端元与自身的二次散射,并用一个参数bj调控像元中的非线性影响[2]。
MLM模型对PPNM模型进行推广以包含端元间所有阶的相互作用,基于以下四个假设:1)光与场景中至少一种物质相互作用;2)对于第j个像元,发生下一次的相互作用以及到达传感器的概率分别为pj和(1-pj);3)与一种物质相互作用的概率与其相应的丰度成正比;4)被一种物质散射的入射光的强度取决于该物质的反射率[7]。
MLM模型的公式如下:
Figure BDA0003499263090000031
其中,yj=Eaj表示端元矩阵
Figure BDA0003499263090000032
与像元xj对应的丰度
Figure BDA0003499263090000033
的乘积,丰度同样需满足非负与“和为一”的约束,此外,标量非线性参数pj(j=1,2,...,N)小于1。
发明内容
本发明的目的在于提出一种具有高精度和强鲁棒性的基于扩展多线性混合模型的高光谱图像非线性解混算法。
本发明提出的基于扩展多线性混合模型的高光谱图像非线性解混算法,使用鲁棒性好的目标函数以抑制噪声波段的影响;施加在丰度上的重加权协同稀疏正则项,使局部区域内的像元拥有相同的端元集合和相似的丰度;施加在非线性参数上的重加权光谱总变差正则项使非线性参数具有光谱-空间平滑性;将这两个正则项添加到鲁棒非线性解混模型中,充分利用高光谱图像中的光谱-空间信息,能够有效地缓解由于过多的引入非线性参数而导致的过拟合问题。与其它优秀的同类方法相比,本发明能够获得更高的解混精度,并且对噪声具有好的鲁棒性。具体内容介绍如下:
一、构造基于EMLM的鲁棒非线性解混模型
EMLM模型对(3)中的标量非线性参数进行矢量化,相应的表达如下:
xj=(1L-Pj)⊙yj+Pj⊙yj⊙xjj.(4)
其中,xj是第j个像元,
Figure BDA0003499263090000034
是元素全为1的向量,L是波段个数,
Figure BDA0003499263090000035
是像元xj对应的矢量非线性参数,⊙表示Hadamard积,yj=Eaj表示端元矩阵
Figure BDA0003499263090000036
与像元xj对应的丰度
Figure BDA0003499263090000037
的乘积,M是端元个数,εj是像元xj对应的模型误差,(4)与(3)满足同样的约束。
在实际获取的高光谱图像中,由于噪声采集和大气效应的影响,一些光谱波段的信噪比(Signal-to-Noise Ratios,SNRs)较低,这将导致光谱解混方法性能的降低。因此,为了有效地抑制噪声波段的影响,应选用鲁棒性更好的l2,1范数[11]。同时考虑所有像元,得到如下的基于EMLM的鲁棒非线性解混模型:
Figure BDA0003499263090000041
其中,
Figure BDA0003499263090000042
是元素全为1的矩阵,
Figure BDA0003499263090000043
是非线性参数矩阵,
Figure BDA0003499263090000044
是端元矩阵E和丰度矩阵
Figure BDA0003499263090000045
的乘积,
Figure BDA0003499263090000046
代表高光谱数据。丰度满足非负与“和为1”约束,即ai,j≥0,
Figure BDA0003499263090000047
ai,j是端元ei在像元xj中的丰度。此外,非线性参数小于1,即Pi,j<1;Pi,j是像元xj中第i波段的非线性参数。
二、利用高光谱图像的局部空间相似性设计正则项
为了克服以下问题:目标函数的非凸性带来的局部最优的问题,以及非线性参数的大量引入带来的过拟合问题,在式(5)中添加基于高光谱图像的局部空间相似性的正则项。在真实场景中,相同的物质往往出现在局部区域,而不是均匀地分布在场景中。因此,丰度矩阵具有局部行稀疏的特性。借助超像素分割技术[12],使图中每一个像元都具有一个超像素标签。对丰度矩阵按照标签进行重排,即A=[A1,...,Ak,...,AK],Ak表示第k个超像素中的像元对应丰度构成的子矩阵。在Ak上施加l2,1范数使其行稀疏。此外,为利用局部区域像元对应丰度的相似性,引入一个重加权因子矩阵
Figure BDA0003499263090000048
来惩罚丰度估计结果中的非零项,K表示超像素个数。丰度的重加权协同稀疏正则化的具体形式如下:
Figure BDA0003499263090000049
在(t+1)次的迭代中,位于W1,k中的第i行和第j列的元素W1,k,i,j被更新为:
Figure BDA00034992630900000410
其中,δ是一个数值很小的正数以保证分母不为零。函数f(·)的具体表示为:
Figure BDA00034992630900000411
其中,dj,q表示两个像元xj与xq的相似度,即
Figure BDA00034992630900000412
Ω(j)表示像元xj的邻域,定义为同一超像素中与xj相似度最高的八个像元。κ和κs为超像素分割中根据经验设置的参数,dspe和dspa分别表示光谱角距离和空间欧氏距离[13],即:
Figure BDA0003499263090000051
Figure BDA0003499263090000052
其中,(mj,nj)和(mq,nq)为像元xj和xq对应的空间坐标。
此外,将非线性参数矩阵
Figure BDA0003499263090000053
沿空间维折叠成一个张量,即
Figure BDA0003499263090000054
其中h和w分别表示
Figure BDA0003499263090000055
的空间维的高度和宽度。
Figure BDA0003499263090000056
表示对
Figure BDA0003499263090000057
沿着光谱维做差分运算,
Figure BDA0003499263090000058
为差分算子。沿着光谱维展开
Figure BDA0003499263090000059
得到一个矩阵
Figure BDA00034992630900000510
因此,
Figure BDA00034992630900000511
H表示在P上的线性差分运算。考虑相邻波段的非线性参数具有相似性,在G上施加l1,1范数,即:
Figure BDA00034992630900000512
由于线性运算H并不会改变P中的空间关系,因此,类似地对G引入一个重加权因子矩阵
Figure BDA00034992630900000513
以利用非线性参数的局部空间相似性。在(t+1)次的迭代中,位于W2中的第i行和第j列的元素W2,i,j被更新为:
Figure BDA00034992630900000514
δ同样为使分母不为零的正数。因此,所设计的非线性参数正则项的具体表示为:
Figure BDA00034992630900000515
三、推导基于EMLM的鲁棒非线性解混算法
Figure BDA00034992630900000516
Figure BDA00034992630900000517
添加到(5)中,通过解决以下的约束优化问题来求解丰度和非线性参数:
Figure BDA00034992630900000518
其中,第一项是表示误差项,第二、三项是正则项,λ1和λ2是对应的权衡参数;
以一种内外循环的方式用交替方向乘子法[14]来求解上述约束优化问题。其中,重加权因子矩阵W1和W2仅在外循环中更新,具体地
Figure BDA0003499263090000061
其中,m表示外循环的第m次迭代。δ是一个数值很小的正数以保证分母不为零。
在内循环中,W1和W2保持不变,引入辅助变量V1,...,V5以及尺度对偶变量U1,...,U5,得到(14)的增广拉格朗日函数:
Figure BDA0003499263090000062
其中,μ是惩罚参数,用来控制算法的收敛速度。
Figure BDA0003499263090000063
以及
Figure BDA0003499263090000064
表示三个指示函数,它们分别对丰度施加“和为1”与非负约束,并约束非线性参数小于1。
在内循环的第(t+1)次迭代中,对变量A,P,V1,...,V5,U1,...,U5进行交替地更新,在其中一个变量更新的过程中保持其它变量不变,即:
Figure BDA0003499263090000065
迭代更新,直到内循环达到相应收敛条件为止。
一次内循环运行结束后,执行A(m+1)←A(t+1)
Figure BDA0003499263090000066
Figure BDA0003499263090000067
更新(15)中权重所需要的变量。依次下去,直到外循环达到收敛条件为止。
根据上述内容,本发明采用的算法中采用的具体步骤归纳如下:
输入:高光谱图像数据
Figure BDA0003499263090000068
端元矩阵
Figure BDA0003499263090000069
超像素相关的参数κ和κs
步骤1:超像素分割,对高光谱图像进行超像素分割,获取图像中各像元的超像素标签;
步骤2:初始化
(2.1)FCLS算法[10]的结果作为丰度的初始化A(0),根据(4)及A(0)计算得到的结果作为非线性参数的初始化P(0)[9],其余的变量
Figure BDA0003499263090000071
的初始化如下:
Figure BDA0003499263090000072
(2.2)初始化内外循环的迭代次数t,m=0;
步骤3:执行内外循环
(3.1)当外循环未达到收敛条件时,根据(15)更新两个重加权因子矩阵;
(3.2)当内循环未达到收敛条件时,根据(17)更新变量A,P,V1,...,V5,U1,...,U5
输出:丰度矩阵
Figure BDA0003499263090000073
和非线性参数矩阵
Figure BDA0003499263090000074
采用SLIC算法[12]来进行高光谱图像的超像素分割。步骤(3.1)中外循环的收敛条件:不超过外循环最大迭代次数,设置为200。步骤(3.2)中内循环的收敛条件:1)不超过内循环最大迭代次数,设置为5;2)残差res不超过一个固定的阈值,设置为10-8
Figure BDA0003499263090000075
本发明的有益效果在于:选用鲁棒性好的目标函数,并对高光谱图像中的局部空间相似性进行深入研究。提出的算法不仅能有效地压制噪声波段的影响,而且能较好地缓解参数过多所带来过拟合问题,可以作为一种解决高光谱遥感图像非线性解混的有效手段。在基于高光谱遥感图像的高精度解混以及地面目标的检测和识别方面具有重要的应用价值。
模拟和真实的高光谱图像的实验表明,与同类算法相比,本发明方法中采取的算法具有更好的丰度估计和非线性参数反演结果,对噪声鲁棒,这对于处理复杂的高光谱数据来说具有重要的实际意义。
附图说明
图1端元光谱图。其中,(a)从USGS光谱库中随机选取的五种端元光谱;(b)由VCA算法[15]提取出的四种端元光谱。
图2对于模拟数据集,由不同算法生成的端元1的丰度图及对应的真实丰度图。
图3对于模拟数据集,由不同算法生成的非线性强度分布图及真实非线性强度分布图。
图4对于模拟数据集,由不同算法生成的泥土端元的丰度图及对应的真实丰度图。
图5对于模拟数据集,由不同算法生成的非线性强度分布图。
图6为本发明采用的算法中采用的具体步骤归纳图。
具体实施方式
下面分别用模拟和真实高光谱图像数据为例说明本发明的具体的实施方式。本发明中基于扩展多线性混合模型的高光谱图像鲁棒非线性解混方法用S3RE-MLM表示。
1、模拟数据集实验
在实验中,将所提出的方法与基于BMM的算法(PPNM[6])、基于MLM的算法(MLM[7]、MLMp[16]、R-MLM[11]和G-MLM[17])以及基于EMLM的算法BNLSU[9])进行了比较。所有算法都使用相同的端元和丰度初始化。利用均方根误差(RMSE)和重构误差(RE)作为评价指标来比较各算法的解混性能。
Figure BDA0003499263090000081
Figure BDA0003499263090000082
其中,an和xn分别表示第n个像元估计的丰度以及按模型重构的数据。
模拟数据集基于EMLM模型生成,包含75×75像元。构成数据的五个端元是从USGS光谱库中随机选取的,如图1(a)所示。真实丰度图在[17]中给出。假设每个像元的P在不同波段的分布近似于高斯函数的形状,背景像素的P设置为0,从σ=0.3的半正态分布中随机选取最大值Pmax,j来分配每个方块的像元,在70到150范围内随机选取Pmax,j的波段索引,其它波段相应地按以下公式计算得到[9]。
Figure BDA0003499263090000083
此外,添加高斯白噪声到数据中。用一个正态分布
Figure BDA0003499263090000084
来分配每个波段的SNR值,其中
Figure BDA0003499263090000085
表示平均SNR值,∈=5。提出的方法在实验中的参数设置为[λ12]=[0.03,0.005]。运行五次得到的平均解混结果如表1所示。在所有表格中,最好的结果用粗体和下划线表示,次优的结果只用粗体表示。
在表1中,基于MLM的方法得到的RMSE优于基于PPNM的方法。R-MLM具有较强的鲁棒性,在低信噪比情况下仍然具有良好的解混性能。S3RE-MLM在不同噪声水平下均获得了最好的RMSE。BNLSU鲁棒性较差且存在严重的过拟合问题,虽然得到的RE很小,但RMSE随信噪比变化较大。此外,还比较了各种算法的运行时间。由于引入了大量的非线性参数,基于EMLM的算法比其它算法消耗更多的时间。不同算法生成的端元1的丰度图,如图2所示。其中,S3RE-MLM得到的丰度图最接近地表真实。此外,还比较了不同算法所估算出的非线性强度(通过移除模型重构数据中的线性部分得到)在空间中的分布,如图2所示,S3RE-MLM得到的分布图最接近地表真实。
表1不同算法在模拟数据集上运行5次所获得的平均RMSE、RE及计算时间。
Figure BDA0003499263090000091
2、真实数据集实验
Jasper Ridge数据集包含了100×100个像素,224个波段,波长范围是0.37-2.48μm,光谱分辨率为10nm。波段1-3、108-112、154-166和220-224因为低信噪比或为水吸收波段而被移除,留下的198个波段被用于算法验证。实地勘测可知,该场景中主要有四个端元,即树、水、泥土和道路。用VCA算法[15]提取这些端元,如图1(b)所示。
在表2中,虽然基于EMLM的方法消耗更多的时间,但与其它的方法相比,它们分别得到了最好的RMSE和RE。具体地,S3RE-MLM获得了最好的RMSE和次优RE。BNLSU虽然获得了最优的RE,但由于出现过拟合,导致所获得的RMSE精度较低。如图3所示,给出了不同算法获得的泥土端元的丰度图,S3RE-MLM得到最接近地表真实的结果。在图4中,S3RE-MLM生成的非线性强度分布图有着更清晰的边界,这与物质间的相互作用通常发生在物质交界区域的事实相吻合。
表2不同算法在真实数据集上运行5次所获得的平均RMSE、RE和计算时间。
指标 PPNM MLM MLMp R-MLM G-MLM BNLSU S<sup>3</sup>RE-MLM
RMSE 0.2263 0.1308 0.1316 0.1317 0.1367 0.1244 <u>0.1111</u>
RE 0.0248 0.0209 0.0211 0.0213 0.0211 <u>0.0041</u> 0.0094
时间(秒) <u>12.68</u> 20.90 13.01 197.93 89.75 285.23 360.05
综上可知,对于模拟和真实高光谱数据来说,本发明提出的算法相对于其它类似算法而言,具有较好的估计精度和较强的鲁棒性,可以精确地实现高光谱图像的解混。
参考文献
[1]J.M.Bioucas-Dias et al.,“Hyperspectral unmixing overview:Geometrical,statistical,and sparse regression-based approaches,”IEEEJ.Sel.Topics Appl.Earth Observ.Remote Sens.,vol.5,no.2,pp.354–379,Apr.2012.
[2]R.Heylen,M.Parente,and P.Gader,“A review of nonlinearhyperspectral unmixing methods,”IEEE J.Sel.Topics Appl.Earth Observ.RemoteSens.,vol.7,no.6,pp.1844–1868,Jun.2014.
[3]B.Hapke,“Bidirectional reflectance spectroscopy:1.Theory,”J.Geophys.Res.,vol.86,no.B4,pp.3039–3054,Apr.1981.
[4]W.Fan,B.Hu,J.Miller,and M.Li,“Comparative study between a newnonlinear model and common linear model for analysing laboratory simulated-forest hyperspectral data,”Int.J.Remote Sens.,vol.30,no.11,pp.2951–2962,Jun.2009.
[5]A.Halimi,Y.Altmann,N.Dobigeon,and J.-Y.Tourneret,“Nonlinearunmixing of hyperspectral images using a generalized bilinear model,”IEEETrans.Geosci.Remote Sens.,vol.49,no.11,pp.4153–4162,Nov.2011.
[6]Y.Altmann,A.Halimi,N.Dobigeon,and J.-Y.Tourneret,“Supervisednonlinear spectral unmixing using a postnonlinear mixing model forhyperspectral imagery,”IEEE Trans.Image Process.,vol.21,no.6,pp.3017–3025,Jun.2012.
[7]R.Heylen and P.Scheunders,“A multilinear mixing model fornonlinear spectral unmixing,”IEEE Trans.Geosci.Remote Sens.,vol.54,no.1,pp.240–251,Jan.2016.
[8]B.Somers,L.Tits,and P.Coppin,“Quantifying nonlinear spectralmixing in vegetated areas:Computer simulation model validation and firstresults,”IEEE J.Sel.Topics Appl.Earth Observ.Remote Sens.,vol.7,no.6,pp.1956–1965,Jun.2014.
[9]B.Yang and B.Wang,“Band-wise nonlinear unmixing for hyperspectralimagery using an extended multilinear mixing model,”IEEE Trans.Geosci.RemoteSens.,vol.56,pp.6747–6762,Nov.2018.
[10]D.C.Heinz and C.-I.Chang,“Fully constrained least squares linearspectral mixture analysis method for material quantification in hyperspectralimagery,”IEEE Trans.Geosci.Remote Sens.,vol.39,no.3,pp.529–545,Mar.2001.
[11]M.Li,F.Zhu,and A.J.X.Guo,A Robust Multilinear Mixing Model withl2,1 norm for Unmixing Hyperspectral Images.In Proc.IEEE Int.Conf.on VisualCommunicat.Image Process.(VCIP),pp.193-196,Dec.2020.
[12]R.Achanta,A.Shaji,K.Smith,A.Lucchi,P.Fua,and S.Sstrunk,“SLICsuperpixels compared to state-of-the-art superpixel methods,”IEEETrans.Pattern Anal.Mach.Intell.,vol.34,no.11,pp.2274–2282,May.2012.
[13]X.Wang,Y.Zhong,L.Zhang,and Y.Xu,“Spatial group sparsityregularized nonnegative matrix factorization for hyperspectral unmixing,”IEEETrans.Geosci.Remote Sens.,vol.55,no.11,pp.6287–6304,Oct.2017.
[14]S.Zhang,J.Li,H.Li,C.Deng,and A.Plaza,“Spectral-spatial weightedsparse regression for hyperspectral image unmixing,”IEEE Trans.Geosci.RemoteSens.,vol.56,no.6,pp.3265–3276,May.2018.
[15]J.M.P.Nascimento and J.M.B.Dias,“Vertex component analysis:A fastalgorithm to unmix hyperspectral data,”IEEE Trans.Geosci.Remote Sens.,vol.43,no.4,pp.898–910,Apr.2005.
[16]Q.Wei,M.Chen,J.-Y.Tourneret,and S.Godsill,“Unsupervised nonlinearspectral unmixing based on a multilinear mixing model,”IEEETrans.Geosci.Remote Sens.,vol.55,no.8,pp.4534–4544,Aug.2017.
[17]M.Li,F.Zhu,A.J.X.Guo,and J.Chen,“A graph regularized multilinearmixing model for nonlinear hyperspectral unmixing,”Remote Sens.,vol.11,no.19,Sept.2019。

Claims (5)

1.一种基于扩展多线性混合模型的高光谱图像鲁棒非线性解混方法,其特征在于,首先构造基于扩展多线性混合模型的鲁棒非线性解混模型,然后利用高光谱图像的局部空间相似性设计丰度的重加权协同稀疏正则项和非线性参数的重加权光谱全变差正则项,并添加到模型中,最后推导相应的非线性解混算法;具体步骤如下:
(1)构造基于扩展多线性混合模型的鲁棒非线性解混模型
根据扩展多线性混合模型,高光谱遥感图像
Figure FDA0003499263080000011
中第j个像元
Figure FDA0003499263080000012
表示为:
xj=(1L-Pj)⊙(Eaj)+Pj⊙(Eaj)⊙xjj., (1)
其中,
Figure FDA0003499263080000013
表示元素全为1的向量,L是波段个数,N是像元个数,
Figure FDA0003499263080000014
表示像元xj对应的矢量非线性参数,⊙表示Hadamard积,Eaj表示端元矩阵
Figure FDA0003499263080000015
与像元xj对应的丰度
Figure FDA0003499263080000016
的乘积,M是端元个数,εj是像元xj对应的模型误差;
基于l2,1范数的目标函数能够根据波段重构误差的大小对不同波段进行自适应地加权,从而抑制噪声波段的影响,具体地,
Figure FDA0003499263080000017
其中,
Figure FDA0003499263080000018
是(1)中模型的重构误差;基于扩展多线性混合模型的非线性解混模型如下:
Figure FDA0003499263080000019
其中,
Figure FDA00034992630800000110
表示元素全为1的矩阵,
Figure FDA00034992630800000111
表示非线性参数矩阵,
Figure FDA00034992630800000112
表示端元矩阵E和丰度矩阵
Figure FDA00034992630800000113
的乘积;丰度满足非负与“和为1”约束,即ai,j≥0,
Figure FDA00034992630800000114
ai,j是端元ei在像元xj中的丰度;此外,非线性参数小于1,即Pi,j<1;Pi,j是像元xj中第i波段的非线性参数;
(2)利用高光谱图像的局部空间相似性设计正则项
(2.1)超像素分割
首先对高光谱图像进行超像素分割,使图中的每一个像元带有一个超像素标签;
(2.2)设计丰度的重加权协同稀疏正则项
根据生成的超像素标签对丰度矩阵重新排列,A=[A1,...,Ak,...,AK],Ak为丰度子矩阵,表示第k个超像素中像元对应的丰度;由于局部区域内的像元共享相同的端元集合,对Ak施加l2,1范数使其行稀疏;此外,为了利用局部区域内的像元对应丰度的相似性,引入重加权因子矩阵
Figure FDA0003499263080000021
以惩罚A中的非零项,于是,丰度的重加权协同稀疏正则项具体表示为:
Figure FDA0003499263080000022
其中,K表示超像素个数;在(t+1)次的迭代中,位于W1,k中的第i行和第j列的元素W1,k,i,j被更新为:
Figure FDA0003499263080000023
δ是一个数值很小的正数以保证分母不为零;函数f(·)的具体表示为:
Figure FDA0003499263080000024
其中,dj,q表示两个像素xj与xq的相似度,即
Figure FDA0003499263080000025
Ω(j)表示像素xj的邻域,定义为同一超像素中与xj相似度最高的八个像素;κ和κs为超像素分割中根据经验设置的参数,dspe和dspa分别表示光谱角距离和空间欧氏距离,即:
Figure FDA0003499263080000026
Figure FDA0003499263080000027
其中,(mj,nj)和(mq,nq)为像元xj和xq的空间坐标;
(2.3)设计非线性参数的重加权光谱全变差正则项
将非线性参数矩阵
Figure FDA0003499263080000031
按照空间坐标折叠成一个张量,
Figure FDA0003499263080000032
h和w分别表示
Figure FDA0003499263080000033
空间维的高度和宽度;首先对
Figure FDA0003499263080000034
沿着光谱方向做差分运算,即
Figure FDA0003499263080000035
Figure FDA0003499263080000036
为差分算子;然后将
Figure FDA0003499263080000037
沿着光谱方向展开,得到矩阵
Figure FDA0003499263080000038
Figure FDA0003499263080000039
其中,H表示在P上的线性差分运算;在G上施加l1,1范数,使非线性参数具有光谱平滑性;
Figure FDA00034992630800000310
此外,由于线性运算H并不会改变P中的空间关系;类似地,利用非线性参数的局部空间相似性,引入一个重加权因子矩阵
Figure FDA00034992630800000311
来惩罚G中的非零项;于是,非线性参数的重加权光谱全变差正则项具体表示为:
Figure FDA00034992630800000312
其中,在(t+1)次的迭代中,位于W2中的第i行和第j列的元素W2,i,j被更新为:
Figure FDA00034992630800000313
δ是一个数值很小的正数以保证分母不为零;
(3)推导基于扩展多线性混合模型的鲁棒非线性解混方法
(3.1)将正则项添加到非线性解混模型中
Figure FDA00034992630800000314
Figure FDA00034992630800000315
添加到非线性解混模型(3)中,通过解决以下的约束优化问题来求解丰度和非线性参数:
Figure FDA00034992630800000316
其中,第一项是表示误差项,第二、三项是正则项,λ1和λ2是对应的权衡参数;
(3.2)求解约束优化问题
以内外循环的方式用交替方向乘子法来求解上述约束优化问题;其中,重加权因子矩阵W1和W2仅在外循环中更新,具体地:
Figure FDA0003499263080000041
其中,m表示外循环的第m次迭代,δ是一个数值很小的正数以保证分母不为零;
在内循环中,W1和W2保持不变,引入辅助变量V1,...,V5以及尺度对偶变量U1,...,U5,得到约束优化问题(13)的增广拉格朗日函数:
Figure FDA0003499263080000042
其中,μ是惩罚参数,用来控制算法的收敛速度;
Figure FDA0003499263080000043
以及
Figure FDA0003499263080000044
表示三个指示函数,它们分别对丰度施加“和为1”与非负约束,并约束非线性参数小于1;
在内循环的第(t+1)次迭代中,对变量A,P,V1,...,V5,U1,...,U5进行交替地更新,在其中一个变量更新的过程中保持其它变量不变,即
Figure FDA0003499263080000045
迭代更新,直到内循环达到相应收敛条件为止;
一次内循环运行结束后,执行A(m+1)←A(t+1)
Figure FDA0003499263080000046
Figure FDA0003499263080000047
以更新公式(14)中权重所需变量;依次下去,直到外循环达到收敛条件为止。
2.根据权利要求1所述的基于扩展多线性混合模型的高光谱图像非线性解混算法的具体操作流程为:
输入:高光谱图像数据
Figure FDA0003499263080000051
端元矩阵
Figure FDA0003499263080000052
及超像素相关的参数κ和κs
步骤1:对高光谱图像进行超像素分割,获取图像中各像元的超像素标签;
步骤2:初始化
(2.1)FCLS算法的结果作为丰度的初始化A(0),根据式(1)及A(0)计算得到的结果作为非线性参数的初始化P(0),其余变量的
Figure FDA0003499263080000053
n=1,...,5的初始化如下:
Figure FDA0003499263080000054
(2.2)初始化内外循环的迭代次数t,m=0;
步骤3:执行内外循环
(3.1)当外循环未达到收敛条件时,根据式(14)更新两个重加权因子矩阵;
(3.2)当内循环未达到收敛条件时,根据式(16)更新变量A,P,V1,...,V5,U1,...,U5
输出:丰度矩阵
Figure FDA0003499263080000055
和非线性参数矩阵
Figure FDA0003499263080000056
3.根据权利要求2所述的基于扩展多线性混合模型的高光谱图像非线性解混方法,其特征在于,步骤1中采用SLIC算法来进行高光谱图像的超像素分割。
4.根据权利要求2所述的基于扩展多线性混合模型的高光谱图像非线性解混方法,其特征在于,步骤(3.1)中外循环的收敛条件:不超过外循环最大迭代次数,设置为200。
5.根据权利要求2所述的基于扩展多线性混合模型的高光谱图像非线性解混方法,其特征在于,步骤(3.2)中内循环的收敛条件:1)不超过内循环最大迭代次数,设置为5:2)残差res不超过一个固定阈值,设置为10-8
Figure FDA0003499263080000057
CN202210123089.5A 2022-02-10 2022-02-10 一种基于扩展多线性混合模型的高光谱图像非线性解混方法 Active CN114596482B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210123089.5A CN114596482B (zh) 2022-02-10 2022-02-10 一种基于扩展多线性混合模型的高光谱图像非线性解混方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210123089.5A CN114596482B (zh) 2022-02-10 2022-02-10 一种基于扩展多线性混合模型的高光谱图像非线性解混方法

Publications (2)

Publication Number Publication Date
CN114596482A true CN114596482A (zh) 2022-06-07
CN114596482B CN114596482B (zh) 2023-04-07

Family

ID=81805972

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210123089.5A Active CN114596482B (zh) 2022-02-10 2022-02-10 一种基于扩展多线性混合模型的高光谱图像非线性解混方法

Country Status (1)

Country Link
CN (1) CN114596482B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116229287A (zh) * 2023-05-10 2023-06-06 中国科学院合肥物质科学研究院 基于复杂林地环境的遥感亚像元疫木检测方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013001001A1 (en) * 2011-06-28 2013-01-03 Danmarks Tekniske Universitet System and method for processing electromagnetic radiation
CN103413292A (zh) * 2013-07-08 2013-11-27 复旦大学 基于约束最小二乘的高光谱图像非线性丰度估计方法
CN106778530A (zh) * 2016-11-28 2017-05-31 复旦大学 一种基于双线性混合模型的高光谱图像非线性解混方法
CN109035154A (zh) * 2018-06-07 2018-12-18 复旦大学 一种考虑光谱变异性的高光谱图像非线性解混方法
US10234377B1 (en) * 2015-09-29 2019-03-19 Hrl Laboratories, Llc Fusion of independent component analysis and sparse representation-based classification for analysis of spectral data
CN109785242A (zh) * 2018-09-19 2019-05-21 合肥工业大学 一种基于逐波段广义双线性模型的高光谱图像的解混方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013001001A1 (en) * 2011-06-28 2013-01-03 Danmarks Tekniske Universitet System and method for processing electromagnetic radiation
CN103413292A (zh) * 2013-07-08 2013-11-27 复旦大学 基于约束最小二乘的高光谱图像非线性丰度估计方法
US10234377B1 (en) * 2015-09-29 2019-03-19 Hrl Laboratories, Llc Fusion of independent component analysis and sparse representation-based classification for analysis of spectral data
CN106778530A (zh) * 2016-11-28 2017-05-31 复旦大学 一种基于双线性混合模型的高光谱图像非线性解混方法
CN109035154A (zh) * 2018-06-07 2018-12-18 复旦大学 一种考虑光谱变异性的高光谱图像非线性解混方法
CN109785242A (zh) * 2018-09-19 2019-05-21 合肥工业大学 一种基于逐波段广义双线性模型的高光谱图像的解混方法

Non-Patent Citations (6)

* Cited by examiner, † Cited by third party
Title
LEI MA: "Two-Step Constrained Nonlinear Spectral Mixture Analysis Method for Mitigating the Collinearity Effect" *
余先川: "基于二次散射的高光谱遥感图像光谱非线性混合模型" *
智通祥: "一种考虑光谱变异性的高光谱图像非线性解混算法" *
杨斌: "基于双线性混合模型的高光谱图像非线性光谱解混" *
杨斌: "高光谱遥感图像非线性解混研究综述" *
甘士忠: "基于高阶非线性模型的多目标高光谱图像解混算法" *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116229287A (zh) * 2023-05-10 2023-06-06 中国科学院合肥物质科学研究院 基于复杂林地环境的遥感亚像元疫木检测方法

Also Published As

Publication number Publication date
CN114596482B (zh) 2023-04-07

Similar Documents

Publication Publication Date Title
Yokoya et al. Coupled nonnegative matrix factorization unmixing for hyperspectral and multispectral data fusion
Somers et al. Endmember variability in spectral mixture analysis: A review
CN104952050B (zh) 基于区域分割的高光谱图像自适应解混方法
Du et al. Spatial and spectral unmixing using the beta compositional model
CN109035154B (zh) 一种考虑光谱变异性的高光谱图像非线性解混方法
Wang et al. Adaptive ${L} _ {\bf 1/2} $ sparsity-constrained NMF with half-thresholding algorithm for hyperspectral unmixing
CN108427934B (zh) 一种高光谱影像混合像元分解方法
Dao et al. Improving hyperspectral image segmentation by applying inverse noise weighting and outlier removal for optimal scale selection
Li et al. Spatially adaptive superresolution land cover mapping with multispectral and panchromatic images
CN106778530B (zh) 一种基于双线性混合模型的高光谱图像非线性解混方法
Zhang Multiscale quantification of urban composition from EO-1/Hyperion data using object-based spectral unmixing
Deng Automated construction of multiple regional libraries for neighborhoodwise local multiple endmember unmixing
Shi et al. Linear spatial spectral mixture model
CN114596482B (zh) 一种基于扩展多线性混合模型的高光谱图像非线性解混方法
Bahraini et al. Modified-mean-shift-based noisy label detection for hyperspectral image classification
Yang Supervised nonlinear hyperspectral unmixing with automatic shadow compensation using multiswarm particle swarm optimization
Li et al. A coarse-to-fine scheme for unsupervised nonlinear hyperspectral unmixing based on an extended multilinear mixing model
Xu et al. Spectral-spatial joint sparsity unmixing of hyperspectral images based on framelet transform
Liu et al. A novel endmember bundle extraction framework for capturing endmember variability by dynamic optimization
Ince et al. Fast hyperspectral unmixing using a multiscale sparse regularization
Yokoya et al. Generalized bilinear model based nonlinear unmixing using semi-nonnegative matrix factorization
Zhang et al. Sparse unmixing based on adaptive loss minimization
Tran et al. Hyperspectral-Multispectral Image Fusion with Weighted LASSO
Ahmad et al. Robust coupled non-negative matrix factorization for hyperspectral and multispectral data fusion
Sigurdsson et al. Endmember constrained semi-supervised hyperspectral unmixing

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant