CN107633216B - 高光谱遥感图像的三维表面空谱联合特征编码方法及装置 - Google Patents

高光谱遥感图像的三维表面空谱联合特征编码方法及装置 Download PDF

Info

Publication number
CN107633216B
CN107633216B CN201710800249.4A CN201710800249A CN107633216B CN 107633216 B CN107633216 B CN 107633216B CN 201710800249 A CN201710800249 A CN 201710800249A CN 107633216 B CN107633216 B CN 107633216B
Authority
CN
China
Prior art keywords
gradient
image
coding
normalized image
feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710800249.4A
Other languages
English (en)
Other versions
CN107633216A (zh
Inventor
贾森
吴奎霖
朱家松
邓琳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen University
Original Assignee
Shenzhen University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen University filed Critical Shenzhen University
Priority to CN201710800249.4A priority Critical patent/CN107633216B/zh
Priority to PCT/CN2017/101353 priority patent/WO2019047248A1/zh
Publication of CN107633216A publication Critical patent/CN107633216A/zh
Application granted granted Critical
Publication of CN107633216B publication Critical patent/CN107633216B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/40Image enhancement or restoration using histogram techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T9/00Image coding
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/28Quantising the image, e.g. histogram thresholding for discrimination between background and foreground patterns

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明实施例公开了一种高光谱遥感图像的三维表面空谱联合特征编码方法,所述方法包括:对原始图像H进行归一化处理,得到归一化的图像R;根据预设梯度模板计算所述归一化的图像R的梯度;根据所述归一化的图像R的梯度进行编码,得到编码特征图谱;对所述编码特征图谱进行直方图特征提取,得到三维表面特征3DSF。本发明实施例还提供了一种高光谱遥感图像特征编码装置。采用本发明实施例可以充分利用高光谱遥感影像的三维空谱结构,并提高了分类性能,减小了时间和空间的复杂度。

Description

高光谱遥感图像的三维表面空谱联合特征编码方法及装置
技术领域
本发明涉及图像处理领域,具体涉及一种高光谱遥感图像的三维表面空谱联合特征编码方法及装置。
背景技术
高光谱遥感图像是指由传感器在电磁波谱的可见光,近红外,中红外和热红外波段范围内,在不同波段成像获得的高光谱图像数据。因此,高光谱遥感图像包含了丰富的空间、辐射和光谱三重信息,为地表物质的精细分类和识别提供了可能。
在数百个波段上形成的高光谱遥感影像包含了地物丰富的辐射、空间和光谱三重信息,这使得地物的识别和分类更加有效。为了通过高光谱遥感影像对地物实施分类,首先要对其进行特征提取。现有特征提取方法主要包括空间特征提取和空谱特征提取两大类。
空间特征提取主要利用不同波段的空间信息对高光谱遥感影像进行表达。它首先提取各波段的空间特征,然后将不同波段的空间特征叠加在一起。Gabor和局部二值模式(Local Binary Pattern,LBP)是两种典型的空间特征提取方法。Gabor特征对图像中的光照存在很好的鲁棒性,LBP可以充分利用图像中的局部空间依赖关系。近年来,研究人员从Gabor特征和LBP特征提取方法中受到启发,提出了基于Gabor的表面特征(Gabor SurfaceFeature,GSF)提取方法。具体来说,首先从二维图像中提取出Gabor幅值特征,然后通过这些Gabor幅值特征的一阶和二阶导数对图像进行表征。GSF的优势在于通过Gabor滤波器获得的特征不受图像光照条件变化的影响。然而,对于高光谱遥感影像来说,GSF提取方法主要存在两点不足。首先,它仅仅针对二维图像的空间关系进行表征,导致高光谱遥感影像的三维空谱结构没有得到充分挖掘。其次,高光谱遥感影像包含上百个波段,GSF的多尺度分析和直方图特征表示方法使得特征维度大幅膨胀,降低了分类性能,同时增加了时间和空间的复杂度。
发明内容
本发明实施例提供了一种高光谱遥感图像的三维表面空谱联合特征编码方法及装置,可以充分利用高光谱遥感影像的三维空谱结构,提高了分类性能,减小了时间和空间的复杂度。
第一方面,本发明实施例提供一种高光谱遥感图像的三维表面空谱联合特征编码方法,其特征在于,所述方法包括:
对原始图像H进行归一化处理,得到归一化的图像R;
根据预设梯度模板计算所述归一化的图像R的梯度;
根据所述归一化的图像R的梯度进行编码,得到编码特征图谱;
对所述编码特征图谱进行直方图特征提取,得到三维表面特征(3 dimensionsurface features,3DSF)。
第二方面,本发明实施例提供一种高光谱遥感图像的三维表面空谱联合特征编码装置,其特征在于,所述装置包括:
归一化处理单元,用于对原始图像H进行归一化处理,得到归一化的图像R;
计算单元,用于根据预设梯度模板计算所述归一化的图像R的梯度;
编码单元,用于根据所述归一化的图像R的梯度进行编码,得到编码特征图谱;
特征提取单元,用于对所述编码特征图谱进行直方图特征提取,得到三维表面特征3DSF。
可以看出,在本发明实施例的方案中,首先、上述特征编码装置对原始图像进行归一化处理,得到归一化的图像;其次、上述特征编码装置根据预设梯度模板计算归一化的图像的梯度值;再次,上述特征编码装置对归一化的图像和其梯度进行二值化处理,得到二值化数据;最后,上述特征编码装置对二值化数据进行编码,并根据编码结果获取3DSF特征。通过该方法,可以充分利用高光谱遥感影像的三维空谱结构,提高了分类性能,减小了时间和空间的复杂度。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种高光谱遥感图像的三维表面空谱联合特征编码方法流程示意图;
图2为本发明实施例提供的另一种高光谱遥感图像的三维表面空谱联合特征编码方法流程示意图;
图3为一种三维坐标系示意图;
图4a为一种波段图像的像素点示意图;
图4b为处理后的波段图像的像素点示意图;
图4c为波段图像的像素点梯度值示意图;
图5为本发明实施例提供的一种高光谱遥感图像的三维表面空谱联合特征编码装置的结构示意图;
图6为本发明实施例提供的另一种高光谱遥感图像的三维表面空谱联合特征编码装置的结构示意图。
具体实施方式
本发明实施例提供了一种高光谱遥感图像三维表面空谱联合特征编码方法及装置,可以充分利用高光谱遥感影像的三维空谱结构,并提高了分类性能,减小了时间和空间的复杂度。
为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。
本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”和“第三”等是用于区别不同对象,而非用于描述特定顺序。此外,术语“包括”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、系统、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例提供的一种高光谱遥感图像的三维表面空谱联合特征编码方法,包括:
对原始图像H进行归一化处理,得到归一化的图像R;根据预设梯度模板计算所述归一化的图像R的梯度;根据所述归一化的图像R的梯度进行编码,得到编码特征图谱;对所述编码特征图谱进行直方图特征提取,得到3DSF。
参见图1,图1是本发明实施例提供的一种高光谱遥感图像三维表面空谱联合特征编码方法的第一实施例流程示意图。如图1所示,本发明实施例提供的高光谱遥感图像特征提取方法包括以下步骤:
S101、对原始图像H进行归一化处理,得到归一化的图像R。
其中,对原始图像H进行归一化处理,得到归一化的图像R包括:
获取原始图像H的像素的均值和方差;
根据所述原始图像H的像素的均值和方差对所述原始图像H进行归一化处理,得到归一化的图像R。
具体地,上述特征编码装置在光谱维度上,根据不同的波段将上述原始图像H划分为M个波段图像。上述特征编码装置计算M个波段图像中每个波段图像的像素的均值和方差。然后,上述特征编码装置根据预设公式对每个波段图像进行归一化处理,得到处理后的图像。上述预设公式为:
Figure GDA0002784123130000041
其中,Hb为上述M个波段图像中的任意一个,上述mean(Hb)为Hb的均值,上述std(Hb)为Hb的方差,上述Rb为对上述Hb进行归一化处理得到的图像。
进一步地,对上述原始图像H的每个波段图像进行归一化处理后,得到归一化的图像R,且
Figure GDA0002784123130000042
可选地,上述归一化处理还可为最大最小值归一化处理、中值归一化处理。
S102、根据预设梯度模板计算所述归一化的图像R的梯度。
其中,所述归一化的图像R的梯度包括所述归一化的图像R在空间维度上的梯度Rx和Ry与光谱维度上的梯度Rb
可选地,上述预设梯度模板可为[-1,0,1]。
其中,上述特征编码装置根据预设梯度模板计算归一化的图像R的梯度值是指计算上述归一化的图像R在空间维度上和光谱维度上的梯度值。如3所示,上述三个方向可以看成空间坐标系的三个轴,上述空间维度的两个方向可以用X、Y表示,光谱维度的方向用B表示。
具体地,上述特征编码装置对上述图像R,根据预设梯度模板[-1,0,1]计算X、Y、B三个方向的梯度值的过程如下:
Figure GDA0002784123130000051
Figure GDA0002784123130000052
Figure GDA0002784123130000053
其中,上述
Figure GDA0002784123130000054
为在上述归一化的图像R中坐标为(x,y,b)的像素点在X方向上的梯度值,R(x+1)yb在上述归一化的图像R中坐标为(x+1,y,b)的像素点,R(x-1)yb为上述归一化的图像R中坐标为(x-1,y,b)的像素点。
上述
Figure GDA0002784123130000055
为在上述归一化的图像R中坐标为(x,y,b)的像素点在Y方向上的梯度值,Rx(y+1)b在上述归一化的图像R中坐标为(x,y+1,b)的像素点,Rx(y-1)b为上述归一化的图像R中坐标为(x,y-1,b)的像素点。
上述
Figure GDA0002784123130000056
为在上述归一化的图像R中坐标为(x,y,b)的像素点在B方向上的梯度值,Rxy(b+1)在上述归一化的图像R中坐标为(x,y,b+1)的像素点、Rxy(b-1)为上述归一化的图像R中坐标为(x,y,b-1)的像素点。
按照上述方法,上述特征编码装置计算得到上述归一化的图像R在三个方向(空间维度上的梯度和光谱维度上的梯度)。可用[Rx,Ry,Rb]表示上述归一化的图像R在三个方向上的梯度,
其中,上述Rx和Ry表示上述归一化的图像R在空间维度上的梯度,上述Rb为上述归一化的图像R在光谱维度上的梯度。
需要说明的是,在进行计算像素点的梯度之前,上述将非上述归一化的图像R的像素点的像素值置为0。
S103、根据所述归一化的图像R的梯度进行编码,得到编码特征图谱。
其中,根据所述归一化的图像R的梯度进行编码,得到编码特征图谱,包括:
根据所述归一化的图像R及其空间维度上的梯度Rx和Ry与光谱维度上的梯度Rb,计算得到对应的二值化数据S、Sx、Sy和Sb
根据S、Sx、Sy、Sb和预设公式计算得到所述编码特征图谱,所述预设公式为:编码特征图谱=23S+22Sx+21Sy+20Sb,其中,23、22、21、20分别为S、Sx、Sy、Sb的权值。
具体地,上述S为上述归一化的图像R进行二值化处理后的图像,上述Sx和Sy为上述归一化的图像R在空间维度上的梯度Ry,Rx进行二值化处理后的图像,上述Sb为上述归一化的图像在光谱维度上的梯度Rb进行二值化处理后的图像。
示例性地,上述特征编码装置通过如下公式对上述归一化的图像R进行二值化处理。该公式具体如下:
Figure GDA0002784123130000061
其中,上述mean(R)为上述归一化的图像R像素值的均值,Rxyb为上述归一化的图像R的在如图3所示的空间坐标轴上坐标为(x,y,z)的像素点的像素值,上述Sxyb为上述Rxyb的二值化的值。当上述Rxyb大于mean(R)时,Sxyb等于1;当上述Rxyb小于或者等于mean(R)时,Sxyb等于0。
同理,上述特征编码装置通过如下公式对上述Rx进行二值化处理。该公式具体如下:
Figure GDA0002784123130000062
其中,上述mean(Rx)为上述Rx像素值的均值,
Figure GDA0002784123130000063
为上述Rx的在如图3所示的空间坐标轴上坐标为(x,y,z)的像素点的像素值,上述
Figure GDA0002784123130000064
为上述
Figure GDA0002784123130000065
的二值化的值。当上述
Figure GDA0002784123130000066
大于mean(Rx)时,
Figure GDA0002784123130000067
等于1;当上述
Figure GDA0002784123130000068
小于或者等于mean(Rx)时,
Figure GDA0002784123130000069
等于0。
同理,上述特征编码装置通过如下公式对上述Ry进行二值化处理。该公式具体如下:
Figure GDA00027841231300000610
其中,上述mean(Ry)为上述R像素值的均值,Rxyb为上述Ry的在如图3所示的空间坐标轴上坐标为(x,y,z)的像素点的像素值,上述
Figure GDA00027841231300000611
为上述
Figure GDA00027841231300000612
的二值化的值。当上述
Figure GDA00027841231300000613
大于mean(Ry)时,
Figure GDA00027841231300000614
等于1;当上述
Figure GDA00027841231300000615
小于或者等于mean(Ry)时,
Figure GDA00027841231300000616
等于0。
同理,上述特征编码装置通过如下公式对上述归一化的图像Rb进行二值化处理。该公式具体如下:
Figure GDA0002784123130000071
其中,上述mean(Rb)为上述Rb像素值的均值,
Figure GDA0002784123130000072
为上述Rb的在如图3所示的空间坐标轴上坐标为(x,y,z)的像素点的像素值,上述
Figure GDA0002784123130000073
为上述
Figure GDA0002784123130000074
的二值化的值。当上述
Figure GDA0002784123130000075
大于mean(Rb)时,
Figure GDA0002784123130000076
等于1;当上述
Figure GDA0002784123130000077
小于或者等于mean(Rb)时,
Figure GDA0002784123130000078
等于0。
其中,上述编码特征图谱Z的编码值表示像素周围的空谱结构特性。上述融合规则为上述特征编码装置根据特征的显著性为上述S,Sx,Sy和Sb分配权值。
具体地,上述S的权值为第一权值A1,上述Sx的权值为第二权值A2,上述Sy的权值为第三权值A3,上述Sb的权值为第四权值A4,由于上述原始图像(即原始高光谱遥感影像)包含了丰富的地物结构分布信息,且地物分布的空间特征比光谱特征更为明显,因此,A1>A2>A3>A4。上述联合特征图谱Z=A1S+A2Sx+A3Sy+A4Sb
举例说明,假设上述S,Sx,Sy和Sb的权值分别设置为23,22,21和20,具体编码方法表示为:
Z=23S+22Sx+21Sy+20Sb
其中,上述编码特征图谱Z将原始高光谱遥感影像(即上述原始图像R)和一阶梯度幅值(即上述Sx,Sy和Sb)融合在一起。
S104、对所述编码特征图谱进行直方图特征提取,得到三维表面特征3DSF。
其中,上述直方图特征是在每个像素周围的一个立方体邻域V统计得到的。根据上述步骤S204中Z的计算公式可知S,Sx,Sy和Sb的取值均为0或者1,进而可知编码特征图谱Z可以有16个不同的编码值,分别为0、1、2、3、4、5、6、7、8、9、10、11、12、13、14、15,因此每个像素周围统计的直方图特征可为16维。假定
Figure GDA0002784123130000079
表示坐标为(x,y,b)的像素的直方图特征,那么统计公式为:
Figure GDA00027841231300000710
其中,上述Vx,Vy,Vb分别表示立方体邻域的空间维度和光谱维度,
Figure GDA00027841231300000711
运算符表示对数据向下取整,h(i)表示3DSF编码i在立方体邻域中出现的次数。当Z(x+j,y+k,b+l)=i时,上述h(i)等于1;当Z(x+j,y+k,b+l)≠i时,上述h(i)等于0。
进一步地,上述特征编码装置获取上述每个编码在在立方体领域中出现的次数,得到16个数(即h(0)、h(1)、h(2)、…、h(14)、h(15))。上述特征编码装置将上述16个数组成一个数组,该组数可以看成上述3DSF特征。
换言之,每个像素周围统计的直方图特征为16维,而原始图像H是X*Y*B,可以看成16个(X*Y*B)的立方叠在一起,所以可以表示为X*Y*(16*B)。对于原始图像H来说,最终得到的3DSF特征为
Figure GDA0002784123130000081
该特征F可直接用于后续的像素级分类。
可以看出,在本发明实施例的方案中,首先、上述特征编码装置对原始图像进行归一化处理,得到归一化的图像;其次、上述特征编码装置根据预设梯度模板计算归一化的图像的梯度值;再次,上述特征编码装置对归一化的图像和其梯度进行二值化处理,得到二值化数据;最后,上述特征编码装置对二值化数据进行编码,并根据编码结果获取3DSF特征。通过该方法,可以充分利用高光谱遥感影像的三维空谱结构,提高了分类性能,减小了时间和空间的复杂度。
参见图2,图2为本发明实施例提供的另一种高光谱遥感图像的三维表面空谱联合特征编码方法的流程示意图。如图2所示,该方法包括:
S201、特征编码装置对原始图像H的每一个波段的图像进行归一化处理,得到归一化的图像R。
其中,上述原始图像
Figure GDA0002784123130000082
Figure GDA0002784123130000083
表示实数,X,Y,B分别表示该原始图像的空间维度和光谱维度的个数。
需要指出的是,上述原始图像H为高光谱遥感影像。
具体地,上述特征编码装置在光谱维度上,根据不同的波段将上述原始图像H划分为M个波段图像。上述特征编码装置计算M个波段图像中每个波段图像的像素的均值和方差。然后,上述特征编码装置根据预设公式对每个波段图像进行归一化处理,得到处理后的图像。上述预设公式为:
Figure GDA0002784123130000084
其中,Hb为上述M个波段图像中的任意一个,上述mean(Hb)为Hb的均值,上述std(Hb)为Hb的方差,上述Rb为对上述Hb进行归一化处理得到的图像。
进一步地,对上述原始图像H的每个波段图像进行归一化处理后,得到归一化的图像R,且
Figure GDA0002784123130000091
可选地,上述归一化处理还可为最大最小值归一化处理、中值归一化处理。
S202、特征编码装置根据预设梯度模板计算归一化的图像R的梯度值。
可选地,上述预设梯度模板可为[-1,0,1]。
其中,上述特征编码装置根据预设梯度模板计算归一化的图像R的梯度值是指计算上述归一化的图像R在空间维度上和光谱维度上的梯度值。如3所示,上述三个方向可以看成空间坐标系的三个轴,上述空间维度的两个方向可以用X、Y表示,光谱维度的方向用B表示。
具体地,上述特征编码装置对上述图像R,根据预设梯度模板[-1,0,1]计算X、Y、B三个方向的梯度值的过程如下:
Figure GDA0002784123130000092
Figure GDA0002784123130000093
Figure GDA0002784123130000094
其中,上述
Figure GDA0002784123130000095
为在上述归一化的图像R中坐标为(x,y,b)的像素点在X方向上的梯度值、R(x+1)yb在上述归一化的图像R中坐标为(x+1,y,b)的像素点、R(x-1)yb为上述归一化的图像R中坐标为(x-1,y,b)的像素点。
上述
Figure GDA0002784123130000096
为在上述归一化的图像R中坐标为(x,y,b)的像素点在Y方向上的梯度值、Rx(y+1)b在上述归一化的图像R中坐标为(x,y+1,b)的像素点、Rx(y-1)b为上述归一化的图像R中坐标为(x,y-1,b)的像素点。
上述
Figure GDA0002784123130000097
为在上述归一化的图像R中坐标为(x,y,b)的像素点在B方向上的梯度值、Rxy(b+1)在上述归一化的图像R中坐标为(x,y,b+1)的像素点、Rxy(b-1)为上述归一化的图像R中坐标为(x,y,b-1)的像素点。
按照上述方法,上述特征编码装置计算得到上述归一化的图像R在三个方向(空间维度上的梯度和光谱维度上的梯度)。可用[Rx,Ry,Rb]表示上述归一化的图像R在三个方向上的梯度,
其中,上述Rx和Ry表示上述归一化的图像R在空间维度上的梯度,上述Rb为上述归一化的图像R在光谱维度上的梯度。
需要说明的是,在进行计算像素点的梯度之前,上述将非上述归一化的图像R的像素点的像素值置为0。
举例说明,假设上述归一化的图像R中一个波段图像如图4a所示,该波段图像的分辨率为4*4,其每个像素值如图4a所示。在计算该波段图像的像素点的梯度值之前,上述特征编码装置将非波段图像的像素点的像素值置为0,如图4b所示。然后根据梯度模板[-1,0,1],计算每个像素点的梯度值。比如,第一行第一个像素点的像素值P11=1,则该像素点的梯度值=P12-0=2;第二航第三个像素点的像素值P23=0,该像素点的梯度值=P24-P22=2-1=1。依此类推,上述特征编码装置可计算得到该波段图像的像素梯度,如图4c所示。图4a为一种波段图像的像素点示意图;图4b为处理后的波段图像的像素点示意图;图4c为波段图像的像素点梯度值示意图。
S203、特征编码装置对归一化的图像和其梯度进行二值化处理,得到二值化数据。
具体地,上述特征编码装置对上述归一化的图像R和该图像在三个方向上的梯度Rx,Ry和Rb进行二值化处理,得到二值化的图像S,Sx,Sy和Sb
其中,上述S为上述归一化的图像R进行二值化处理后的图像,上述Sx和Sy为上述归一化的图像R在空间维度上的梯度Ry,Rx进行二值化处理后的图像,上述Sb为上述归一化的图像在光谱维度上的梯度Rb进行二值化处理后的图像。
示例性地,上述特征编码装置通过如下公式对上述归一化的图像R进行二值化处理。该公式具体如下:
Figure GDA0002784123130000101
其中,上述mean(R)为上述归一化的图像R像素值的均值,Rxyb为上述归一化的图像R的在如图3所示的空间坐标轴上坐标为(x,y,z)的像素点的像素值,上述Sxyb为上述Rxyb的二值化的值。当上述Rxyb大于mean(R)时,Sxyb等于1;当上述Rxyb小于或者等于mean(R)时,Sxyb等于0。
同理,上述特征编码装置通过如下公式对上述Rx进行二值化处理。该公式具体如下:
Figure GDA0002784123130000102
其中,上述mean(Rx)为上述Rx像素值的均值,
Figure GDA0002784123130000111
为上述Rx的在如图3所示的空间坐标轴上坐标为(x,y,z)的像素点的像素值,上述
Figure GDA0002784123130000112
为上述
Figure GDA0002784123130000113
的二值化的值。当上述
Figure GDA0002784123130000114
大于mean(Rx)时,
Figure GDA0002784123130000115
等于1;当上述
Figure GDA0002784123130000116
小于或者等于mean(Rx)时,
Figure GDA0002784123130000117
等于0。
同理,上述特征编码装置通过如下公式对上述Ry进行二值化处理。该公式具体如下:
Figure GDA0002784123130000118
其中,上述mean(Ry)为上述R像素值的均值,Rxyb为上述Ry的在如图3所示的空间坐标轴上坐标为(x,y,z)的像素点的像素值,上述
Figure GDA0002784123130000119
为上述
Figure GDA00027841231300001110
的二值化的值。当上述
Figure GDA00027841231300001111
大于mean(Ry)时,
Figure GDA00027841231300001112
等于1;当上述
Figure GDA00027841231300001113
小于或者等于mean(Ry)时,
Figure GDA00027841231300001114
等于0。
同理,上述特征编码装置通过如下公式对上述归一化的图像Rb进行二值化处理。该公式具体如下:
Figure GDA00027841231300001115
其中,上述mean(Rb)为上述Rb像素值的均值,
Figure GDA00027841231300001116
为上述Rb的在如图3所示的空间坐标轴上坐标为(x,y,z)的像素点的像素值,上述
Figure GDA00027841231300001117
为上述
Figure GDA00027841231300001118
的二值化的值。当上述
Figure GDA00027841231300001119
大于mean(Rb)时,
Figure GDA00027841231300001120
等于1;当上述
Figure GDA00027841231300001121
小于或者等于mean(Rb)时,
Figure GDA00027841231300001122
等于0。
S204、特征编码装置根据预设融合规则对S,Sx,Sy和Sb进行联合编码,得到编码特征图谱。
其中,上述编码特征图谱Z的编码值表示像素周围的空谱结构特性。上述融合规则为上述特征编码装置根据特征的显著性为上述S,Sx,Sy和Sb分配权值。
具体地,上述S的权值为第一权值A1,上述Sx的权值为第二权值A2,上述Sy的权值为第三权值A3,上述Sb的权值为第四权值A4,由于上述原始图像(即原始高光谱遥感影像)包含了丰富的地物结构分布信息,且地物分布的空间特征比光谱特征更为明显,因此,A1>A2>A3>A4。上述联合特征图谱Z=A1S+A2Sx+A3Sy+A4Sb
举例说明,假设上述S,Sx,Sy和Sb的权值分别设置为23,22,21和20,具体编码方法表示为:
Z=23S+22Sx+21Sy+20Sb
其中,上述编码特征图谱Z将原始高光谱遥感影像(即上述原始图像R)和一阶梯度幅值(即上述Sx,Sy和Sb)融合在一起。
S205、特征编码装置对编码特征图谱进行直方图特征提取,得到3DSF特征。
其中,上述直方图特征是在每个像素周围的一个立方体邻域V统计得到的。根据上述步骤S204中Z的计算公式可知S,Sx,Sy和Sb的取值均为0或者1,进而可知编码特征图谱Z可以有16个不同的编码值,分别为0、1、2、3、4、5、6、7、8、9、10、11、12、13、14、15,因此每个像素周围统计的直方图特征可为16维。假定
Figure GDA0002784123130000121
表示坐标为(x,y,b)的像素的直方图特征,那么统计公式为:
Figure GDA0002784123130000122
其中,上述Vx,Vy,Vb分别表示立方体邻域的空间维度和光谱维度,
Figure GDA0002784123130000123
运算符表示对数据向下取整,h(i)表示3DSF编码i在立方体邻域中出现的次数。当Z(x+j,y+k,b+l)=i时,上述h(i)等于1;当Z(x+j,y+k,b+l)≠i时,上述h(i)等于0。
进一步地,上述特征编码装置获取上述每个编码在在立方体领域中出现的次数,得到16个数(即h(0)、h(1)、h(2)、…、h(14)、h(15))。上述特征编码装置将上述16个数组成一个数组,该组数可以看成上述3DSF特征。
换言之,每个像素周围统计的直方图特征为16维,而原始图像H是X*Y*B,可以看成16个(X*Y*B)的立方叠在一起,所以可以表示为X*Y*(16*B)。对于上述原始图像H来说,最终得到的3DSF特征为
Figure GDA0002784123130000124
该特征F可直接用于后续的像素级分类。
可以看出,在本发明实施例的方案中,首先、上述特征编码装置对原始图像进行归一化处理,得到归一化的图像;其次、上述特征编码装置根据预设梯度模板计算归一化的图像的梯度值;再次,上述特征编码装置对归一化的图像和其梯度进行二值化处理,得到二值化数据;最后,上述特征编码装置对二值化数据进行编码,并根据编码结果获取3DSF特征。通过该方法,可以充分利用高光谱遥感影像的三维空谱结构,提高了分类性能,减小了时间和空间的复杂度。
参见图5,图5为本发明实施例提供的一种高光谱遥感图像三维表面空谱联合特征编码装置结构示意图。如图5所示,该装置500包括:
归一化处理单元501,用于对原始图像H进行归一化处理,得到归一化的图像R。
其中,所述归一化处理单元501包括
获取子单元5011,用于获取原始图像H的像素的均值和方差;
处理子单元5012,用于根据所述原始图像H的像素的均值和方差对所述原始图像H进行归一化处理,得到归一化的图像R。
计算单元502,用于根据预设梯度模板计算所述归一化的图像R的梯度。
其中,所述归一化的图像R的梯度包括所述归一化的图像R在空间维度上的梯度Rx和Ry与光谱维度上的梯度Rb
编码单元503,用于根据所述归一化的图像R的梯度进行编码,得到编码特征图谱。
其中,所述编码单元503包括:
第一计算子单元5031,用于根据所述归一化的图像R及其空间维度上的梯度Rx和Ry与光谱维度上的梯度Rb,计算得到对应的二值化数据S、Sx、Sy和Sb
第二计算子单元5032,用于根据S、Sx、Sy、Sb和预设公式计算得到所述编码特征图谱,所述预设公式为:
编码特征图谱=23S+22Sx+21Sy+20Sb
其中,23、22、21、20分别为S、Sx、Sy、Sb的权值。
特征提取单元504,用于对所述编码特征图谱进行直方图特征提取,得到三维表面特征3DSF。
其中,所述特征提取单元504用于:
根据统计公式获取由所述S、Sx、Sy、Sb组成的编码值i在每个像素周围的立方体邻域中出现的次数;
所述统计公式为:
Figure GDA0002784123130000131
其中,所述
Figure GDA0002784123130000132
表示坐标为(x,y,b)的像素的直方图特征,所述Vx,Vy,Vb分别表示立方体邻域的空间维度和光谱维度,
Figure GDA0002784123130000141
运算符表示对数据向下取整,h(i)表示所述编码值i在立方体邻域中出现的次数,由所述次数组成的数组即为所述3DSF。
在本实施例中,高光谱遥感图像三维表面空谱联合特征编码装置500是以单元(归一化处理单元501、计算单元502、编码单元503和特征提取单元504)的形式来呈现。这里的“单元”可以指特定应用集成电路(application-specific integrated circuit,ASIC),执行一个或多个软件或固件程序的处理器和存储器,集成逻辑电路,和/或其他可以提供上述功能的器件。
可以理解的是,本实施例的高光谱遥感图像三维表面空谱联合特征编码装置500的各功能单元的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
参见图6,图6是本发明实施例提供的一种高光谱遥感图像三维表面空谱联合特征编码装置的结构示意图,用于实现本发明实施例公开的高光谱遥感图像特征提取方法。其中,该高光谱遥感图像三维表面空谱联合特征编码装置600可以包括:至少一个总线601、与总线601相连的至少一个处理器602以及与总线601相连的至少一个存储器603。
其中,处理器602通过总线601,调用存储器中存储的代码以用于对原始图像H进行归一化处理,得到归一化的图像R;根据预设梯度模板计算所述归一化的图像R的梯度;根据所述归一化的图像R的梯度进行编码,得到编码特征图谱;对所述编码特征图谱进行直方图特征提取,得到三维表面特征3DSF。
在本实施例中,高光谱遥感图像三维表面空谱联合特征编码装置600是以单元的形式来呈现。这里的“单元”可以指特定应用集成电路(application-specific integratedcircuit,ASIC),执行一个或多个软件或固件程序的处理器和存储器,集成逻辑电路,和/或其他可以提供上述功能的器件。
可以理解的是,本实施例的高光谱遥感图像三维表面空谱联合特征编码装置600的各功能单元的功能可根据上述方法实施例中的方法具体实现,其具体实现过程可以参照上述方法实施例的相关描述,此处不再赘述。
本发明实施例还提供一种计算机存储介质,其中,该计算机存储介质可存储有程序,该程序执行时包括上述方法实施例中记载的任何一种高光谱遥感图像三维表面空谱联合特征编码方法的部分或全部步骤。
需要说明的是,对于前述的各方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中,应该理解到,所揭露的装置,可通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明的各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (6)

1.一种高光谱遥感图像的三维表面空谱联合特征编码方法,其特征在于,所述方法包括:
对原始图像H进行归一化处理,得到归一化的图像R;
根据预设梯度模板计算所述归一化的图像R的梯度;所述归一化的图像R的梯度包括所述归一化的图像R在空间维度上的梯度Rx和Ry与光谱维度上的梯度Rb
根据所述归一化的图像R的梯度进行编码,得到编码特征图谱;
对所述编码特征图谱进行直方图特征提取,得到三维表面特征3DSF;
其中,根据所述归一化的图像R的梯度进行编码,得到编码特征图谱,包括:
根据所述归一化的图像R及其空间维度上的梯度Rx和Ry与光谱维度上的梯度Rb,计算得到对应的二值化数据S、Sx、Sy和Sb
根据S、Sx、Sy、Sb和预设公式计算得到所述编码特征图谱,所述预设公式为:
编码特征图谱=23S+22Sx+21Sy+20Sb
其中,23、22、21、20分别为S、Sx、Sy、Sb的权值。
2.根据权利要求1所述的方法,其特征在于,对原始图像H进行归一化处理,得到归一化的图像R包括:
获取原始图像H的像素的均值和方差;
根据所述原始图像H的像素的均值和方差对所述原始图像H进行归一化处理,得到归一化的图像R。
3.根据权利要求1所述的方法,其特征在于,对所述编码特征图谱进行直方图特征提取,得到三维表面特征3DSF,包括:
根据统计公式获取由所述S、Sx、Sy、Sb组成的编码值i在每个像素周围的立方体邻域中出现的次数;
所述统计公式为:
Figure FDA0002784123120000011
其中,所述
Figure FDA0002784123120000021
表示坐标为(x,y,b)的像素的直方图特征,所述Vx,Vy,Vb分别表示立方体邻域的空间维度和光谱维度,
Figure FDA0002784123120000022
运算符表示对数据向下取整,h(i)表示所述编码值i在立方体邻域中出现的次数,由所述次数组成的数组即为所述3DSF,所述Z函数用于表征所述编码特征图谱。
4.一种高光谱遥感图像的三维表面空谱联合特征编码装置,其特征在于,包括:
归一化处理单元,用于对原始图像H进行归一化处理,得到归一化的图像R;
计算单元,用于根据预设梯度模板计算所述归一化的图像R的梯度;所述归一化的图像R的梯度包括所述归一化的图像R在空间维度上的梯度Rx和Ry与光谱维度上的梯度Rb
编码单元,用于根据所述归一化的图像R的梯度进行编码,得到编码特征图谱;
特征提取单元,用于对所述编码特征图谱进行直方图特征提取,得到三维表面特征3DSF;
其中,所述编码单元包括:
第一计算子单元,用于根据所述归一化的图像R及其空间维度上的梯度Rx和Ry与光谱维度上的梯度Rb,计算得到对应的二值化数据S、Sx、Sy和Sb
第二计算子单元,用于根据S、Sx、Sy、Sb和预设公式计算得到所述编码特征图谱,所述预设公式为:
编码特征图谱=23S+22Sx+21Sy+20Sb
其中,23、22、21、20分别为S、Sx、Sy、Sb的权值。
5.根据权利要求4所述的装置,其特征在于,所述归一化处理单元包括
获取子单元,用于获取原始图像H的像素的均值和方差;
处理子单元,用于根据所述原始图像H的像素的均值和方差对所述原始图像H进行归一化处理,得到归一化的图像R。
6.根据权利要求4所述的装置,其特征在于,所述特征提取单元用于:
根据统计公式获取由所述S、Sx、Sy、Sb组成的编码值i在每个像素周围的立方体邻域中出现的次数;
所述统计公式为:
Figure FDA0002784123120000031
其中,所述
Figure FDA0002784123120000032
表示坐标为(x,y,b)的像素的直方图特征,所述Vx,Vy,Vb分别表示立方体邻域的空间维度和光谱维度,
Figure FDA0002784123120000033
运算符表示对数据向下取整,h(i)表示所述编码值i在立方体邻域中出现的次数,由所述次数组成的数组即为所述3DSF,所述Z函数用于表征所述编码特征图谱。
CN201710800249.4A 2017-09-07 2017-09-07 高光谱遥感图像的三维表面空谱联合特征编码方法及装置 Active CN107633216B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201710800249.4A CN107633216B (zh) 2017-09-07 2017-09-07 高光谱遥感图像的三维表面空谱联合特征编码方法及装置
PCT/CN2017/101353 WO2019047248A1 (zh) 2017-09-07 2017-09-12 高光谱遥感图像的特征提取方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710800249.4A CN107633216B (zh) 2017-09-07 2017-09-07 高光谱遥感图像的三维表面空谱联合特征编码方法及装置

Publications (2)

Publication Number Publication Date
CN107633216A CN107633216A (zh) 2018-01-26
CN107633216B true CN107633216B (zh) 2021-02-23

Family

ID=61100031

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710800249.4A Active CN107633216B (zh) 2017-09-07 2017-09-07 高光谱遥感图像的三维表面空谱联合特征编码方法及装置

Country Status (2)

Country Link
CN (1) CN107633216B (zh)
WO (1) WO2019047248A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108596213A (zh) * 2018-04-03 2018-09-28 中国地质大学(武汉) 一种基于卷积神经网络的高光谱遥感图像分类方法及系统
CN109360264B (zh) * 2018-08-30 2023-05-26 深圳大学 图像统一模型的建立方法与装置
CN111753834B (zh) * 2019-03-29 2024-03-26 中国水利水电科学研究院 基于深度神经网络的种植地块结构语义分割方法和装置
CN111428627B (zh) * 2020-03-23 2023-03-24 西北大学 一种山地地貌遥感提取方法及系统
CN111832575B (zh) * 2020-07-16 2024-04-30 黄河勘测规划设计研究院有限公司 一种基于遥感图像的水面区域提取方法及装置
CN112766409A (zh) * 2021-02-01 2021-05-07 西北工业大学 一种遥感图像目标检测的特征融合方法
CN113160076A (zh) * 2021-04-06 2021-07-23 中航航空电子有限公司 一种基于目标边缘邻域信息的地物红外目标截获方法
CN113420640B (zh) * 2021-06-21 2023-06-20 深圳大学 红树林高光谱图像分类方法、装置、电子设备及存储介质
CN113657199B (zh) * 2021-07-28 2023-09-15 西安理工大学 基于空-谱提取的高光谱图像异常检测方法
CN117726915B (zh) * 2024-02-07 2024-05-28 南方海洋科学与工程广东省实验室(广州) 遥感数据空谱融合方法及装置、存储介质与终端

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106469316A (zh) * 2016-09-07 2017-03-01 深圳大学 基于超像素级信息融合的高光谱图像的分类方法及系统

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110163163A1 (en) * 2004-06-01 2011-07-07 Lumidigm, Inc. Multispectral barcode imaging
US8155391B1 (en) * 2006-05-02 2012-04-10 Geoeye Solutions, Inc. Semi-automatic extraction of linear features from image data
US8659656B1 (en) * 2010-10-12 2014-02-25 The Boeing Company Hyperspectral imaging unmixing
CN103927756B (zh) * 2014-04-28 2017-04-19 中国国土资源航空物探遥感中心 一种基于光谱特征空间权化的光谱特征指数提取方法
CN107122733B (zh) * 2017-04-25 2019-10-11 西安电子科技大学 基于nsct和sae的高光谱图像分类方法

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106469316A (zh) * 2016-09-07 2017-03-01 深圳大学 基于超像素级信息融合的高光谱图像的分类方法及系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
基于Gabor小波与LBP直方图序列的人脸年龄估计;黄兵,郭继昌;《数据采集与处理》;20120331;第27卷(第3期);第340-345页 *
基于卷积神经网络的高光谱图像谱-空联合分类;付光远,辜弘炀,汪洪桥;《科学技术与工程》;20170731;第17卷(第21期);第268-274页 *
黄兵,郭继昌.基于Gabor小波与LBP直方图序列的人脸年龄估计.《数据采集与处理》.2012,第27卷(第3期),第340-345页. *

Also Published As

Publication number Publication date
WO2019047248A1 (zh) 2019-03-14
CN107633216A (zh) 2018-01-26

Similar Documents

Publication Publication Date Title
CN107633216B (zh) 高光谱遥感图像的三维表面空谱联合特征编码方法及装置
Liang et al. Material based salient object detection from hyperspectral images
Sedaghat et al. Distinctive order based self-similarity descriptor for multi-sensor remote sensing image matching
EP2783328B1 (en) Text detection using multi-layer connected components with histograms
Yu et al. HADeenNet: A hierarchical-attention multi-scale deconvolution network for landslide detection
Tokuda et al. Computer generated images vs. digital photographs: A synergetic feature and classifier combination approach
CN107358260B (zh) 一种基于表面波cnn的多光谱图像分类方法
Aburaed et al. A review of spatial enhancement of hyperspectral remote sensing imaging techniques
CN110781911A (zh) 一种图像匹配方法、装置、设备及存储介质
WO2018192023A1 (zh) 一种高光谱遥感图像分类方法及装置
CN111339989A (zh) 一种水体提取方法、装置、设备及存储介质
Castrodad et al. Discriminative sparse representations in hyperspectral imagery
CN106529472B (zh) 基于大尺度高分辨率高光谱图像的目标探测方法及装置
Chen et al. Semantic segmentation of aerial imagery via multi-scale shuffling convolutional neural networks with deep supervision
Tang et al. Improving cloud type classification of ground-based images using region covariance descriptors
CN111191582A (zh) 三维目标检测方法、检测装置、终端设备及计算机可读存储介质
CN113570725A (zh) 基于聚类的三维表面重建方法、装置、服务器及存储介质
Dong et al. A cloud detection method for GaoFen-6 wide field of view imagery based on the spectrum and variance of superpixels
Quan et al. Learning SAR-Optical Cross Modal Features for Land Cover Classification
Ye et al. Fast and robust structure-based multimodal geospatial image matching
Xie et al. SMRD: A local feature descriptor for multi-modal image registration
Yu et al. High-Precision pixelwise SAR–optical image registration via flow fusion estimation based on an attention mechanism
Dimitriou et al. Detection and classification of multiple objects using an RGB-D sensor and linear spatial pyramid matching
WO2022156652A1 (zh) 交通工具运动状态评估方法、装置、设备以及介质
CN107423739A (zh) 图像特征提取方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant