CN110210545B - 基于迁移学习的红外遥感水体分类器构建方法 - Google Patents

基于迁移学习的红外遥感水体分类器构建方法 Download PDF

Info

Publication number
CN110210545B
CN110210545B CN201910443842.7A CN201910443842A CN110210545B CN 110210545 B CN110210545 B CN 110210545B CN 201910443842 A CN201910443842 A CN 201910443842A CN 110210545 B CN110210545 B CN 110210545B
Authority
CN
China
Prior art keywords
sample
target domain
source domain
domain
characteristic data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910443842.7A
Other languages
English (en)
Other versions
CN110210545A (zh
Inventor
王鑫
徐明君
吕国芳
宁晨
张香梁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hohai University HHU
Original Assignee
Hohai University HHU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hohai University HHU filed Critical Hohai University HHU
Priority to CN201910443842.7A priority Critical patent/CN110210545B/zh
Publication of CN110210545A publication Critical patent/CN110210545A/zh
Application granted granted Critical
Publication of CN110210545B publication Critical patent/CN110210545B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/213Feature extraction, e.g. by transforming the feature space; Summarisation; Mappings, e.g. subspace methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • G06F18/241Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
    • G06F18/2411Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02ATECHNOLOGIES FOR ADAPTATION TO CLIMATE CHANGE
    • Y02A90/00Technologies having an indirect contribution to adaptation to climate change
    • Y02A90/30Assessment of water resources

Landscapes

  • Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Artificial Intelligence (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种基于迁移学习的红外遥感水体分类器构建方法。首先,构建带标签的可见光遥感图像(源域)样本集,以及无标签的红外遥感图像(目标域)样本集;其次,提取可见光源域样本的局部二值模式特征,结合标签训练支持向量机分类器,对红外目标域样本进行初始分类,得到红外样本的伪标签,用以模拟出目标域样本的概率分布;然后,基于迁移学习理论,以最小化源域和目标域的分布差异距离为目标,将源域和目标域的特征数据映射到同一个子空间中,并通过修正目标域样本的伪标签不断优化特征映射矩阵;最后,在子空间中,利用优化后的特征映射矩阵,将源域特征数据进行变换,并基于变换后的源域特征数据及其标签,训练出最终红外遥感水体分类器。

Description

基于迁移学习的红外遥感水体分类器构建方法
技术领域
本发明涉及一种基于迁移学习的红外遥感水体分类器构建方法,属于图像处理领域。
背景技术
水资源是人类生存必不可少的重要资源,实时、准确地获取水体信息对水资源的有效管理和合理利用有着重大意义。随着卫星遥感技术的发展,通过传感器能够获取大量的可见光、红外等遥感水体图像。然而,红外遥感水体图像大多没有标注标签。
现有技术中公开了一些非水体类的红外图像识别分类方法。例如,专利号为201610479981.1的中国发明专利公开了一种利用样本特征学习分类的红外弱小目标检测方法。首先,从灰度分布、边缘、信息熵和能量四方面对样本分析,提取出拟合残差、中心周围对比度、边缘拟合圆半径、边缘拟合圆圆心偏移量、边缘拟合圆圆心距方差、基准信息熵对比度和纹理能量对比度等特征;然后,通过包裹式选择、前向搜索方式,将受试者工作特性曲线下方的面积作为评价指标,从所有特征中选出最优特征子集;随后,提取正负样本的最优特征子集训练支持向量机分类器,进行监督学习;最后,通过对图像进行高帽变换预处理得到候选目标,并通过分类器甄别筛选得到最终检测结果。此方法前提假设己从实际红外图像中获得足够多带标签的正负样本,但实际上有标签的红外图像样本十分稀少。此外,申请号为201710953733.0的中国发明专利申请公开了一种变电站复杂背景红外图像中设备的识别分类方法。通过图像处理器采用改进的区域生长分割算法对图像进行图像分割处理,并采用形态学的方法对分割得到的图像进行修复和完善;然后,对变电站设备红外图像进行特征提取;最后,对图像进行特征进行分类识别,并输出分类识别结果。此方法通过对红外图像的预处理提高训练特征的可用性,但仍需大量红外标注样本作为分类器的训练集,无法有效解决样本稀少的问题。因此,无法借鉴现有技术对无标签的红外遥感水体图像进行识别分类。
虽然红外遥感水体图像大多没有标注标签,但是带标签的可见光遥感图像水体样本充足。在此基础上,本申请期望提出一种方法,该方法能够基于迁移学习理论,通过将已知的可见光水体图像知识,迁移到红外水体图像领域中,来实现对红外遥感水体的有效分类。
但是以这种方式构建红外遥感图像水体分类识别器,存在的难点主要表现在:(1)有标签的红外遥感图像水体样本数量稀少,无法学习得到有效的分类器;(2)如何缩小可见光图像空间样本与红外图像空间样本的特征分布差异,使得通过可见光图像样本训练的分类器在红外图像领域得到有效应用。
发明内容
本发明的目的在于提供一种基于迁移学习的红外遥感水体分类器构建方法,以解决现有技术中存在的上述问题。
为实现上述目的,本发明采用如下技术方案:
一种基于迁移学习的红外遥感水体分类器构建方法,其特征在于,包括以下步骤:
S1,构建可见光源域样本集和红外目标域样本集,并对可见光源域样本集制作标签集,得到源域样本的标签集;
S2,提取可见光源域样本集中每个样本的LBP特征,得到源域的特征数据集,结合源域样本的标签集,训练SVM分类器,得到初始分类器;
S3,提取红外目标域样本集中每个样本的LBP特征,得到目标域的特征数据集,输入至初始分类器,得到目标域样本的伪标签集,其中伪标签表示算法过程中可被修正的目标样本预测标签,非最终预测标签;
S4,基于迁移学习理论,以最小化源域和目标域的边缘概率分布和条件概率分布差异距离为目标,结合目标域样本的伪标签集求解一个变换矩阵,使得源域和目标域的特征数据集在同一子空间上的映射特征数据的概率分布差异尽可能小;
S5,通过修正目标域样本的伪标签集不断优化所述变换矩阵,得到优化的特征映射矩阵;
S6,利用优化的特征映射矩阵,将源域的特征数据映射至所述子空间内,得到变换后的源域特征数据,结合源域样本标签集,训练得到最终红外遥感水体分类器。
进一步的,步骤S1中,构建可见光源域样本集和红外目标域样本集并对可见光源域样本集制作标签集的具体方法为:
(1.1)给定一个大幅面可见光遥感水陆场景图像,对其进行不重叠分区,设其分为n个区域(每块区域大小均相同),pk表示第k个区域,所有分区构成可见光源域的样本集;
(1.2)给定一个大幅面红外遥感水陆场景图像,对其进行不重叠分区,设其分为m个区域,每块区域大小均相同且与可见光源域样本集中每个区域大小相同,qk表示第k个区域,所有分区构成红外目标域的样本集;
(1.3)对可见光源域样本集中的每个样本区域pk,人工进行标注样本类别,若该区域一半以上为水体区域,则标注为水体的正样本;反之,则标注为非水体的负样本。
其中,所述n为1600,所述m为1024,所述可见光源域样本集和红外目标域样本集中每个样本区域大小均为64×64。
进一步的,步骤S2中,提取可见光源域样本集中每个样本的LBP特征的具体方法为:
设r为区域pk中的某一点,则该点的LBP值为:
Figure GDA0002146701610000041
其中,gr为点r的灰度值,i为点r邻域顺时针方向的第i个像素点,I表示邻域的总像素数,gi为第i个像素点的灰度值,S(·)表示符号函数:
Figure GDA0002146701610000042
对区域pk中的所有点按照上述方式计算LBP值,然后将它们整合为一个向量,该向量即为该样本区域的LBP特征向量。
进一步的,步骤S3中,提取红外目标域样本集中每个样本的LBP特征的方法与提取可见光源域样本集中每个样本的LBP特征的方法相同。
进一步的,步骤S4中,求解变换矩阵的具体方法为:
(4.1)待求解的变换矩阵,以A表示,其能够使经过变换后的源域特征数据的边缘分布P(ATxs)和经过变换后的目标域特征数据的边缘分布P(ATxt)之间的距离、经过变换后的源域特征数据的条件分布P(ys|ATxs)和经过变换后的目标域特征数据的条件分布P(yt|ATxt)之间的距离能够尽可能地接近,其中,x为特征向量,y为标签,xs∈Xs,xt∈Xt,ys∈Ys,yt∈Yt,Xs为源域的特征数据集,Xt为目标域的特征数据集,Ys为源域样本的标签集,Yt为目标域样本的真实标签集,ATx表示变换矩阵A转置后左乘特征向量x;
为了适配所述源域特征数据的边缘分布P(ATxs)和目标域特征数据的边缘分布P(ATxt),采用MMD衡量源域特征数据分布与目标域特征数据分布之间的距离:
Figure GDA0002146701610000051
其中,n和m分别表示源域和目标域的样本个数,
Figure GDA0002146701610000052
表示Xs中第j个特征数据,
Figure GDA0002146701610000053
表示Xt中第j个特征数据;
(4.2)适配条件分布时,通过目标域样本的伪标签集
Figure GDA0002146701610000054
来近似真实标签集Yt,模拟出目标域特征数据的条件概率分布,则源域与目标域中相同类别之间的MMD距离表示为:
Figure GDA0002146701610000061
其中,c=1,2,...,C表示类别,由于样本仅有水体及非水体两类,因此C=2;nc和mc分别表示源域和目标域中来自第c类的样本个数,
Figure GDA0002146701610000062
是源域中属于第c类样本的特征数据集合,
Figure GDA0002146701610000063
是目标域中属于第c类样本的特征数据集合;
(4.3)综合边缘分布和条件分布的适配,得到一个总的优化目标:
Figure GDA0002146701610000064
其中,
Figure GDA0002146701610000065
表示求矩阵的迹,
Figure GDA0002146701610000066
是正则项,ATX表示变换矩阵A转置后左乘特征矩阵X,Mc是一个MMD矩阵,形式如下:
Figure GDA0002146701610000067
其中,xa表示所属样本空间中的第a个特征向量,xb表示所属样本空间中的第b个特征向量;
(4.4)通过对优化目标的求解,得到变换矩阵A。
进一步的,步骤S5中,通过修正目标域样本的伪标签集不断优化所述变换矩阵的具体方法如下:
(5.1)所述变换矩阵以A表示,将源域的特征数据通过变换矩阵A映射到子空间中,得到变换后的源域特征数据集,结合源域样本标签集,训练生成伪标签修正分类器f0
(5.2)将目标域的特征数据通过变换矩阵A映射到子空间中,得到变换后的目标域特征数据集,将其输入分类器f0,得到新的标签集
Figure GDA0002146701610000071
Figure GDA0002146701610000072
其中
Figure GDA0002146701610000073
为目标域样本的伪标签集,则此时的A为优化的特征映射矩阵,若
Figure GDA0002146701610000074
用新的标签集
Figure GDA0002146701610000075
更新伪标签集
Figure GDA0002146701610000076
返回步骤S4,利用新的伪标签集
Figure GDA0002146701610000077
重新求解变换矩阵A,通过新的变换矩阵A执行步骤(5.1)得到新的修正分类器f1,将通过新的变换矩阵A变换后的目标域特征数据输入分类器f1,得到新的标签集
Figure GDA0002146701610000078
并与伪标签集
Figure GDA0002146701610000079
比较,依此类推,通过不断修正伪标签集优化变换矩阵A,直至新的标签集
Figure GDA00021467016100000710
与前一次的伪标签集
Figure GDA00021467016100000711
相同,此时的变换矩阵A即为优化的特征映射矩阵。
相比于现有技术,本发明具有以下有益技术效果:
(1)实现了从可见光图像领域到红外图像领域知识的迁移,有效弥补了传统的水体分类器构建方法因红外遥感图像领域训练样本过少而无法训练出有效的分类器的缺点;
(2)缩小了可见光图像空间样本与红外图像空间样本的特征分布差异,使得通过可见光图像样本训练的分类器在红外图像领域得到有效应用。
附图说明
图1为本发明的基于迁移学习的红外遥感水体分类器构建方法的流程示意图;
图2为点r邻域顺时针方向的第i个像素点与点r的位置关系图。
具体实施方式
下面结合具体实施例对本发明作进一步描述。以下实施例仅用于更加清楚地说明本发明的技术方案,而不能以此来限制本发明的保护范围。
如图1所示,一种基于迁移学习的红外遥感水体分类器构建方法,包括如下步骤:
(1)构建可见光源域样本集和红外目标域样本集,这两个样本集分别包括水体的正样本和非水体的负样本,同时对源域的样本集制作标签集Ys
(1.1)给定一个大幅面可见光遥感水陆场景图像,设其大小为2560×2560,对其进行不重叠分区,设其分为1600个区域(每块区域大小均为64×64),pk表示第k个区域,所有分区构成源域的样本集;
(1.2)给定一个大幅面红外遥感水陆场景图像,设其大小为2048×2048,对其进行不重叠分区,设其分为1024个区域(每块区域大小均为64×64),qk表示第k个区域,所有分区构成目标域的样本集;
(1.3)对步骤(1.1)中每一个样本区域pk,人工进行标注样本类别,若该区域一半以上为水体区域,则标注为水体的正样本,标签yk=1;反之,则标注为非水体的负样本,标签yk=0。
(2)提取步骤(1)可见光源域样本集中每个样本的LBP特征,得到源域的特征数据集Xs,结合对应的标签集Ys,训练支持向量机(Support Vector Machine,SVM)分类器,得到初始分类器F0
(2.1)对步骤(1.1)中源域的每一个样本,提取其LBP特征,制作源域样本的LBP特征数据集Xs,矩阵Xs大小为1600×256。LBP是一种用来描述图像局部特征的算子,具有灰度不变性。
设r为区域pk中的某一点,则该点的LBP值为:
Figure GDA0002146701610000091
其中,gr为点r的灰度值,i为点r邻域顺时针方向的第i个像素点,I表示邻域的总像素数,gi为第i个像素点的灰度值,其中i和点r的位置关系如图2所示,S(·)表示符号函数:
Figure GDA0002146701610000092
对区域pk中的所有点按照上述方式计算LBP值,然后将它们整合为一个向量,该向量即为该样本区域的LBP特征向量。
(2.2)利用步骤(2.1)中提取的LBP特征数据集Xs和所对应的标签集Ys,训练得到初始分类器F0
(3)提取步骤(1)红外目标域样本集中每个样本的LBP特征,得到目标域的特征数据集Xt,输入步骤(2)中的初始分类器F0,得到目标域样本对应的伪标签集
Figure GDA0002146701610000093
(3.1)对步骤(1.3)中目标域的每一个样本,提取其LBP特征,制作目标域样本的LBP特征数据集Xt,矩阵Xt大小为1024×256;
(3.2)将提取的特征数据集Xt输入初始分类器F0,得到目标域样本的伪标签集
Figure GDA0002146701610000094
(4)基于迁移学习理论,以最小化源域和目标域的边缘概率分布和条件概率分布差异距离为目标,求解一个变换矩阵A,使得源域和目标域特征数据集在子空间上的映射特征数据ATXs和ATXt的概率分布差异尽可能小;
(4.1)待求解的变换矩阵A,能够使经过变换后的源域特征数据的边缘分布P(ATxs)和目标域特征数据的边缘分布P(ATxt)、源域特征数据的条件分布P(ys|ATxs)和目标域特征数据的条件分布P(yt|ATxt)之间的距离能够尽可能地接近。其中,x为特征向量,y为标签,xs∈Xs,xt∈Xt,ys∈Ys,yt∈Yt,Yt为目标域样本的真实标签集,ATx表示变换矩阵A转置后左乘特征向量x,ATX表示变换矩阵A转置后左乘特征矩阵X;
为了适配源域特征数据的边缘分布P(ATxs)和目标域特征数据的边缘分布P(ATxt),这里采用最大均值差异(Maximum mean discrepancy,MMD)衡量源域特征数据分布与目标域特征数据分布之间的距离:
Figure GDA0002146701610000101
其中,n和m分别表示源域和目标域的样本个数,本文中,n=1600,m=1024;
Figure GDA0002146701610000102
表示Xs中第j个特征数据,
Figure GDA0002146701610000103
表示Xt中第j个特征数据;
(4.2)适配条件分布时,因目标域样本标签未知,无法得到准确的条件概率P(yt|ATxt),通过步骤(3.2)得到的目标域样本伪标签集
Figure GDA0002146701610000104
来近似真实标签集Yt,模拟出目标域特征数据的条件概率分布,则源域与目标域中相同类别之间的MMD距离表示为:
Figure GDA0002146701610000111
其中,c表示类别,c=1,2,...,C,nc和mc分别表示源域和目标域中来自第c类的样本个数,本文中仅有水体及非水体两类,即C=2;
Figure GDA0002146701610000112
是源域中属于第c类样本的特征数据集合,
Figure GDA0002146701610000113
是目标域中属于第c类样本的特征数据集合;
(4.3)综合边缘分布和条件分布的适配,得到一个总的优化目标:
Figure GDA0002146701610000114
其中,
Figure GDA0002146701610000115
表示求矩阵的迹,
Figure GDA0002146701610000116
是正则项,Mc是一个MMD矩阵,形式如下:
Figure GDA0002146701610000117
其中,xa表示所属样本空间中的第a个特征向量,xb表示所属样本空间中的第b个特征向量;
最终,通过对优化目标的求解,得到变换矩阵A。
(5)经过变换后的源域特征数据ATXs,结合标签集Ys,在子空间中训练一个伪标签修正分类器f0
将源域的特征数据通过变换矩阵A映射到子空间中,利用变换后的特征数据集ATXs和所对应的标签集Ys,学习生成伪标签修正分类器f0
(6)将变换后的目标域特征ATXt输入分类器f0,得到新的标签集
Figure GDA0002146701610000121
Figure GDA0002146701610000122
则此时的A为优化的特征映射矩阵;若
Figure GDA0002146701610000123
用新的标签集
Figure GDA0002146701610000124
更新伪标签集
Figure GDA0002146701610000125
返回步骤(4)利用新的伪标签集重新求解变换矩阵A,不断修正伪标签,直至新的标签集
Figure GDA0002146701610000126
与伪标签集
Figure GDA0002146701610000127
相同,此时得到优化的特征映射矩阵Abest
(6.1)将变换后的目标域特征数据ATXt输入分类器f0,得到新的标签集
Figure GDA0002146701610000128
Figure GDA0002146701610000129
则此时的A为优化的特征映射矩阵;若
Figure GDA00021467016100001210
用新的标签集
Figure GDA00021467016100001211
更新伪标签集
Figure GDA00021467016100001212
Figure GDA00021467016100001213
返回步骤(4)利用新的伪标签集重新求解变换矩阵A;
(6.2)根据步骤(6.1)中的新变换矩阵A,执行步骤(5)得到修正分类器f1,将变换后的目标域特征数据ATXt输入分类器f1,得到新的标签集
Figure GDA00021467016100001214
并与伪标签集
Figure GDA00021467016100001215
比较,依此类推,通过不断修正伪标签优化映射矩阵;
(6.3)当新的标签集
Figure GDA00021467016100001216
与前一次的伪标签集
Figure GDA00021467016100001217
相同,停止修正,此时的变换矩阵A即为优化特征映射矩阵Abest
(7)通过步骤(6)中得到的优化的特征映射矩阵Abest,将源域的特征映射至子空间内,得到特征数据
Figure GDA00021467016100001218
结合标签集Ys,训练最终红外遥感水体分类器F。
(7.1)通过步骤(6)中得到的优化特征映射矩阵Abest,将源域的特征数据映射至子空间内,得到特征数据
Figure GDA0002146701610000131
(7.2)利用步骤(7.1)中特征数据
Figure GDA0002146701610000132
和所对应的标签集Ys,学习得到最终红外遥感水体分类器F。
以上已以较佳实施例公布了本发明,然其并非用以限制本发明,凡采取等同替换或等效变换的方案所获得的技术方案,均落在本发明的保护范围内。

Claims (5)

1.一种基于迁移学习的红外遥感水体分类器构建方法,其特征在于,包括以下步骤:
构建可见光源域样本集和红外目标域样本集,并对可见光源域样本集制作标签集,得到源域样本的标签集;
提取可见光源域样本集中每个样本的LBP特征,得到源域的特征数据集,结合源域样本的标签集,训练SVM分类器,得到初始分类器;
提取红外目标域样本集中每个样本的LBP特征,得到目标域的特征数据集,输入至初始分类器,得到目标域样本的伪标签集;
基于迁移学习理论,以最小化源域和目标域的边缘概率分布和条件概率分布差异距离为目标,结合目标域样本的伪标签集求解一个变换矩阵,使得源域和目标域的特征数据集在同一子空间上的映射特征数据的概率分布差异尽可能小;
通过修正目标域样本的伪标签集不断优化所述变换矩阵,得到优化的特征映射矩阵;
利用优化的特征映射矩阵,将源域的特征数据映射至所述子空间内,得到变换后的源域特征数据,结合源域样本标签集,训练得到最终红外遥感水体分类器;
其中,求解变换矩阵的具体方法为:
(1)待求解的变换矩阵,以A表示,其能够使经过变换后的源域特征数据的边缘分布P(ATxs)和经过变换后的目标域特征数据的边缘分布P(ATxt)之间的距离、经过变换后的源域特征数据的条件分布P(ys|ATxs)和经过变换后的目标域特征数据的条件分布P(yt|ATxt)之间的距离能够尽可能地接近,其中,x为特征向量,y为标签,xs∈Xs,xt∈Xt,ys∈Ys,yt∈Yt,Xs为源域的特征数据集,Xt为目标域的特征数据集,Ys为源域样本的标签集,Yt为目标域样本的真实标签集,ATx表示变换矩阵A转置后左乘特征向量x;
为了适配所述源域特征数据的边缘分布P(ATxs)和目标域特征数据的边缘分布P(ATxt),采用MMD衡量源域特征数据分布与目标域特征数据分布之间的距离:
Figure FDA0003719781090000021
其中,n和m分别表示源域和目标域的样本个数,
Figure FDA0003719781090000022
表示Xs中第j个特征数据,
Figure FDA0003719781090000023
表示Xt中第j个特征数据;
(2)适配条件分布时,通过目标域样本的伪标签集
Figure FDA0003719781090000024
来近似真实标签集Yt,模拟出目标域特征数据的条件概率分布,则源域与目标域中相同类别之间的MMD距离表示为:
Figure FDA0003719781090000025
其中,c表示类别,c=1,2,...,C,由于样本仅有水体及非水体两类,因此C=2;nc和mc分别表示源域和目标域中来自第c类的样本个数,
Figure FDA0003719781090000026
是源域中属于第c类样本的特征数据集合,
Figure FDA0003719781090000027
是目标域中属于第c类样本的特征数据集合;
(3)综合边缘分布和条件分布的适配,得到一个总的优化目标:
Figure FDA0003719781090000031
其中,tr(·)表示求矩阵的迹,
Figure FDA0003719781090000032
是正则项,ATX表示变换矩阵A转置后左乘特征矩阵X,Mc是一个MMD矩阵,形式如下:
Figure FDA0003719781090000033
其中,xa表示所属样本空间中的第a个特征向量,xb表示所属样本空间中的第b个特征向量;
(4)通过对优化目标的求解,得到变换矩阵A。
2.根据权利要求1所述的基于迁移学习的红外遥感水体分类器构建方法,其特征在于,构建可见光源域样本集和红外目标域样本集并对可见光源域样本集制作标签集的具体方法为:
给定一个大幅面可见光遥感水陆场景图像,对其进行不重叠分区获得n个样本区域,每个区域大小均相同,所述n个样本区域构成可见光源域样本集;
给定一个大幅面红外遥感水陆场景图像,对其进行不重叠分区获得m个样本区域,每个区域大小均相同且与可见光源域样本集中每个样本区域大小相同,所述m个样本区域构成红外目标域样本集;
对可见光源域样本集中的每个样本区域,人工进行标注样本类别,若该区域一半以上为水体区域,则标注为水体的正样本;反之,则标注为非水体的负样本。
3.根据权利要求2所述的基于迁移学习的红外遥感水体分类器构建方法,其特征在于,所述n为1600,所述m为1024,所述可见光源域样本集和红外目标域样本集中每个样本区域大小均为64×64。
4.根据权利要求2所述的基于迁移学习的红外遥感水体分类器构建方法,其特征在于,提取可见光源域样本集或红外目标域样本集中每个样本的LBP特征的具体方法为:
设r为可见光源域样本集或红外目标域样本集中某个样本区域内的某一点,则该点的LBP值为:
Figure FDA0003719781090000041
其中,gr为点r的灰度值,i为点r邻域顺时针方向的第i个像素点,I表示邻域的总像素数,gi为第i个像素点的灰度值,S(·)表示符号函数:
Figure FDA0003719781090000042
对该样本区域中的所有点按照上述方式计算LBP值,然后将它们整合为一个向量,该向量即为该样本区域的LBP特征向量。
5.根据权利要求1所述的基于迁移学习的红外遥感水体分类器构建方法,其特征在于,通过修正目标域样本的伪标签集不断优化所述变换矩阵的具体方法如下:
(1)所述变换矩阵以A表示,将源域的特征数据通过变换矩阵A映射到子空间中,得到变换后的源域特征数据集,结合源域样本标签集,训练生成伪标签修正分类器f0
(2)将目标域的特征数据通过变换矩阵A映射到子空间中,得到变换后的目标域特征数据集,将其输入分类器f0,得到新的标签集
Figure FDA0003719781090000051
Figure FDA0003719781090000052
其中
Figure FDA0003719781090000053
为目标域样本的伪标签集,则此时的A为优化的特征映射矩阵,若
Figure FDA0003719781090000054
用新的标签集
Figure FDA0003719781090000055
更新伪标签集
Figure FDA0003719781090000056
返回变换矩阵求解步骤中,利用新的伪标签集
Figure FDA0003719781090000057
重新求解变换矩阵A,通过新的变换矩阵A执行步骤(1)得到新的修正分类器f1,将通过新的变换矩阵A变换后的目标域特征数据输入分类器f1,得到新的标签集
Figure FDA0003719781090000058
并与伪标签集
Figure FDA0003719781090000059
比较,依此类推,通过不断修正伪标签集优化变换矩阵A,直至新的标签集
Figure FDA00037197810900000510
与前一次的伪标签集
Figure FDA00037197810900000511
相同,此时的变换矩阵A即为优化的特征映射矩阵。
CN201910443842.7A 2019-05-27 2019-05-27 基于迁移学习的红外遥感水体分类器构建方法 Active CN110210545B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910443842.7A CN110210545B (zh) 2019-05-27 2019-05-27 基于迁移学习的红外遥感水体分类器构建方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910443842.7A CN110210545B (zh) 2019-05-27 2019-05-27 基于迁移学习的红外遥感水体分类器构建方法

Publications (2)

Publication Number Publication Date
CN110210545A CN110210545A (zh) 2019-09-06
CN110210545B true CN110210545B (zh) 2022-08-26

Family

ID=67788829

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910443842.7A Active CN110210545B (zh) 2019-05-27 2019-05-27 基于迁移学习的红外遥感水体分类器构建方法

Country Status (1)

Country Link
CN (1) CN110210545B (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110598636B (zh) * 2019-09-09 2023-01-17 哈尔滨工业大学 一种基于特征迁移的舰船目标识别方法
CN111046933B (zh) * 2019-12-03 2024-03-05 东软集团股份有限公司 图像分类方法、装置、存储介质及电子设备
CN111209935B (zh) * 2019-12-26 2022-03-25 武汉安视感知科技有限公司 基于自适应域转移的无监督目标检测方法及系统
CN111209813B (zh) * 2019-12-27 2021-01-22 南京航空航天大学 基于迁移学习的遥感图像语义分割方法
CN111325284A (zh) * 2020-03-09 2020-06-23 武汉大学 一种基于多目标动态分布自适应学习方法及装置
CN111444859A (zh) * 2020-03-30 2020-07-24 哈尔滨工程大学 一种无监督跨域人脸表情识别方法
CN111488928B (zh) * 2020-04-09 2023-09-01 北京百度网讯科技有限公司 用于获取样本的方法及装置
CN112131967B (zh) * 2020-09-01 2022-08-19 河海大学 基于多分类器对抗迁移学习的遥感场景分类方法
CN112348081B (zh) * 2020-11-05 2024-04-02 平安科技(深圳)有限公司 用于图像分类的迁移学习方法、相关装置及存储介质
CN112926585B (zh) * 2021-01-11 2023-07-28 深圳大学 一种基于再生核希尔伯特空间的跨域语义分割方法
CN113836996B (zh) * 2021-08-10 2024-02-02 中国地质大学(武汉) 高光谱遥感图像部分迁移方法及系统
CN113657541B (zh) * 2021-08-26 2023-10-10 电子科技大学长三角研究院(衢州) 一种基于深度知识集成的领域自适应目标识别方法
CN117096070B (zh) * 2023-10-19 2024-01-05 合肥综合性国家科学中心人工智能研究院(安徽省人工智能实验室) 一种基于领域自适应的半导体加工工艺异常检测方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160078359A1 (en) * 2014-09-12 2016-03-17 Xerox Corporation System for domain adaptation with a domain-specific class means classifier
CN107273853B (zh) * 2017-06-16 2019-05-21 中国地质大学(武汉) 一种基于类心和协方差对齐的遥感图像迁移学习方法
CN107895177B (zh) * 2017-11-17 2021-08-03 南京邮电大学 一种保持图像分类稀疏结构的迁移分类学习方法
CN109068349B (zh) * 2018-07-12 2021-08-06 重庆邮电大学 一种基于小样本迭代迁移的室内入侵检测方法

Also Published As

Publication number Publication date
CN110210545A (zh) 2019-09-06

Similar Documents

Publication Publication Date Title
CN110210545B (zh) 基于迁移学习的红外遥感水体分类器构建方法
TWI742382B (zh) 透過電腦執行的、用於車輛零件識別的神經網路系統、透過神經網路系統進行車輛零件識別的方法、進行車輛零件識別的裝置和計算設備
CN109816725B (zh) 一种基于深度学习的单目相机物体位姿估计方法及装置
CN104915636B (zh) 基于多级框架显著性特征的遥感影像道路识别方法
CN108335303B (zh) 一种应用于手掌x光片的多尺度手掌骨骼分割方法
CN110163069B (zh) 用于辅助驾驶的车道线检测方法
CN107480620B (zh) 基于异构特征融合的遥感图像自动目标识别方法
CN105825511A (zh) 一种基于深度学习的图片背景清晰度检测方法
CN110633708A (zh) 一种基于全局模型和局部优化的深度网络显著性检测方法
Chen et al. Object detection in remote sensing images based on deep transfer learning
CN108427919B (zh) 一种基于形状引导显著性模型的无监督油罐目标检测方法
CN110598564B (zh) 基于OpenStreetMap的高空间分辨率遥感影像迁移学习分类方法
CN110414616B (zh) 一种利用空间关系的遥感图像字典学习分类方法
Nordeng et al. DEBC detection with deep learning
CN116910571B (zh) 一种基于原型对比学习的开集域适应方法及系统
CN113033385A (zh) 一种基于深度学习的违章建筑遥感识别方法及系统
CN107563327B (zh) 一种基于自步反馈的行人重识别方法及系统
CN115527072A (zh) 一种基于稀疏空间感知与元学习的芯片表面缺陷检测方法
Khellal et al. Pedestrian classification and detection in far infrared images
CN117115555A (zh) 一种基于噪声数据的半监督三维目标检测方法
CN110705384A (zh) 一种基于跨域迁移增强表示的车辆再识别方法
CN112465836B (zh) 基于轮廓信息的热红外语义分割无监督领域自适应方法
CN107273793A (zh) 一种用于人脸识别的特征提取方法
CN110826478A (zh) 一种基于对抗网络的航拍违建识别方法
CN114049567B (zh) 自适应软标签生成方法以及在高光谱图像分类中的应用

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant