CN109214405A - 一种自适应联合特征字典进行遥感图像稀疏识别的方法 - Google Patents
一种自适应联合特征字典进行遥感图像稀疏识别的方法 Download PDFInfo
- Publication number
- CN109214405A CN109214405A CN201711181801.2A CN201711181801A CN109214405A CN 109214405 A CN109214405 A CN 109214405A CN 201711181801 A CN201711181801 A CN 201711181801A CN 109214405 A CN109214405 A CN 109214405A
- Authority
- CN
- China
- Prior art keywords
- image
- dictionary
- feature
- remote sensing
- sparse
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/28—Determining representative reference patterns, e.g. by averaging or distorting; Generating dictionaries
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
- G06V10/462—Salient features, e.g. scale invariant feature transforms [SIFT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
- G06V20/13—Satellite images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/513—Sparse representations
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Multimedia (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- General Engineering & Computer Science (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Astronomy & Astrophysics (AREA)
- Remote Sensing (AREA)
- Image Analysis (AREA)
Abstract
本发明通过构建自适应联合特征字典进行稀疏求解对遥感目标图像进行识别。利用SIFT特征能够针对遥感图像不同方向,不同尺度的特征进行提取,使提取的图像特征更加能够全方位体现图像的标识性。在自适应联合字典构建方面,首先提取一类图像的公有特征组成字典A,然后提取每一张图像作为私有特征组成字典B,拼凑A和B组成图像联合字典,同时由于后续进行稀疏求解时,字典主要体现在其中不同原子对测试图像的不同贡献。因此,如果能够使原子的贡献能力更加明显,那么识别效果将会更加理想。对于每一个特征向量或者说样本向量,我们用其标准差或方差来衡量该样本波动大小,其标准差或方差越大,说明样本数据波动越大,包含的信息也就越多。结合稀疏求解原理,在某程度范围内适当增加样本向量的标准差或方差,使其对稀疏求解的贡献更加突出,使特征字典更加具有判别信息。
Description
技术领域
遥感图像目标识别。
背景技术
遥感是20世纪才发展起来的一门新兴学科,作为对地观测技术,它能够实时地提供多时相、多光谱、高光谱和广范围等信息。随着近些年来我国航天事业的迅速发展,利用遥感图像来检测和识别重要目标,已经广泛地应用于各行各业当中,对遥感图像进行精确的鲁棒分类识别已经成为目标识别研究领域中的热点和挑战。特别是近几年来兴起的稀疏表示与压缩感知算法,对遥感图像的识别技术提供了更好的技术支持。
稀疏表示可以看作计算机视觉研究领域当中的一个重要的信号和图像的表示模型,受到众多国内外学者的高度关注,基于稀疏表示的识别方法本质上是在寻找测试样本在训练样本集上的最稀疏表示,并利用求解出的稀疏表示系数对测试样本进行重构分类,该方法的前提是对任一测试样本存在一个最稀疏表示。但是,随着获取遥感数据技术的更新,对遥感数据处理的要求也变得愈加严格。原始的基于稀疏表示的遥感图像识别并没有考虑图像当中的结构信息,其识别效率与识别速率显得有些乏力。
发明内容
本发明主要根据遥感图像特点,从不同尺度和方向提取图像特征,将图像特征提取出公共部分和私有部分,然后对特征进行自适应加权处理后构建联合特征字典来进行稀疏识别。本发明主要包括行进图像预处理,图像特征提取,特征向量自适应构建联合字典,进行稀疏求解进行分类识别。本发明主要用于遥感图像分类识别,当捕获到遥感图像目标时,能够识别出图像中目标属于哪一类物体。在军用和民用上有及其重要的意义。
技术方案:
步骤一:图像的预处理
首先,需要对复杂遥感图像进行灰度化和滤波处理,提取单个目标图像。由于遥感图像是彩色图像,存储空间大,计算复杂,并且在拍摄过程中存在大量噪声。为了突出遥感图像中的飞机目标,削弱干扰信息,实验中对遥感图像进行预处理,主要是图像灰度化,图像去噪增强以及获取主要目标图像。
图像灰度化采取加权平均法对遥感图像进行灰度处理,根据R,G,B三分量去不同权值进行加权平均,即按下述公式求得灰度图:
其中 为灰度值,三个灰度系数分别取0.30,0.59,0.11.
在图像去噪增强方面,我们采用3*3中值滤波方法,滤除干扰信息,突出有用信息.进行灰度化和滤波。然后按照目标类别分别提取不同图像目标。
步骤二:SIFT特征提取,
SIFT(Scale-Invariant Feature Transform)特征算子是一种基于尺度空间局部特征的描述算子,利用SIFT特征算子提取图像局部特征,对于旋转,尺度缩放,亮度变换都能有稳定的不变性。SIFT特征提取主要是通过求一幅图中的特征点及其所在的位置,尺度和方向来描述特征,具体有如下步骤:
1)尺度空间极值检测及位置确定
为了检测尺度空间极值,首先必须建立适当的尺度空间。将最底层尺度空间中用不同尺度因子生成高斯金字塔,将相邻图像相减得到DoG金字塔,最后将原始图像进行亚采用并重复上述操作获得下一层尺度空间。将尺度空间中每一个采样点与本尺度相邻8个位置像素以及上下相邻尺度对应位置(2×9像素)共26个点进行逐一比较,得到局部极值的位置和尺度。这些极值点的集合即为SIFT算法所需的关键点集合。得到关键点集合后,为了得到稳健的特征点,需要将集合中低对比度的点和边缘点去除,提高图像抗噪声能力。
2)关键点方向参数确定
为使算子具备旋转不变性,需要给每个关键点指定一个方向参数。
对于每一个采样点L,计算梯度大小和方向:
采用梯度直方图统计法统计每一个关键点邻近窗口了所有像素点的梯度大小和方向。统计得到的直方图峰值所在方向即为关键点主方向。
3)特征向量描述
为了确保旋转不变性,将坐标轴旋转为关键点方向,以关键点为中心,取8×8的窗口,每个窗口代表和关键点在同尺度下相邻的像素点。计算每个像素点的梯度模和方向,利用高斯函数进行加权。然后在4×4像素的窗口上计算8个方向的梯度方向直方图,形成种子点。
由于每个种子包含8个方向信息,这样生成的关键点特征向量就有8×4=32个维度。为了是特征描述由更好的效果,每个关键点使用4×4个种子点,用8×16=128维特征描述关键点。最后将特征向量长度归一化,进一步去除光照变化的影响。
步骤三:自适应联合特征字典构建
把一幅图像转换成一维列向量,假设所有图像可以分为个不同类别,每个类别有个训练图像,则其中一个类别的图像可以表示为:
根据JSM模型,第i类第j个图像可以表示成:
其中,表示第i类图像公共特征,表示第i类第j个图像的私有特征。如果有一正交矩阵(如DCT基)为,同时训练样本可以在该变换基上能够稀疏表示,。将上式带入有,表示成:
其中,是在稀疏基上的稀疏表示,是在变换基上公共特征的稀疏表示,是私有特征在变换基上的稀疏表示。因此两边同时乘以又可以表示为,即:
由此可以得到第i类图像的联合表示为:
将上式简化,字典中某一类图像则可以表示为:
其中,由两个矩阵组成一个过完备字典,表示为,其中,,。由于字典的冗余性,可以通过求解下式最优化问题来求得稀疏解,即:
在得到一类字典的稀疏解后,通过求其逆变换就可以得到第i类字典在域上的公共特征和私有特征,即:
通过上式,我们将一类图像的公共特征和私有特征分别求出,在此我们将一类图像的私有特征求和,即:
则一类图像我们只需保存其共有特征和私有特征之和即可。
对每一类图像,即提取共有特征和私有特征表示为:,将每一类图像的共有特征组成一个矩阵A,私有特征组成为一个矩阵B,则联合字典D表示为:
对于每一个特征向量或者说样本向量,我们用其标准差或方差来衡量该样本波动大小,其标准差或方差越大,说明样本数据波动越大,包含的信息也就越多。结合稀疏求解原理,在某程度范围内适当增加样本向量的标准差或方差,使其对稀疏求解的贡献更加突出,使特征字典更加具有判别信息。因此,在利用SIFT特征变换求得一幅图像的特征向量后,我们对其做如下改变:
其中,。
步骤四:稀疏求解进行识别
稀疏表示分类方法是在稀疏表示基础上提出的一个全新的分类识别框架,目前在目标识别领域中获得广泛重视。在SRC系统中,所有训练样本的每一幅图像转化为列向量(即原子),所有的列向量组成为字典。假设有类训练样本,每类有个训练样本,把每一幅样本的维数转换为一个列向量,则第类的训练样本可组成矩阵,其中,表示第类样本中的第个样本。整个训练字典可以表示为,则测试信号在第字典的稀疏表示模型为:
其中,表示测试样本向量,为训练样本字典,为测试向量在字典下求得的稀疏系数,中只有很少一部分非零元素,为此模型的噪声项。
在中的稀疏系数,表示了字典不同原子对测试样本的不同贡献,越稀疏,表示字典中不同类别的原子贡献越小,同类别的原子贡献越大。因此我们需要求出最稀疏的:
令是与有相同维数的类别选择向量,表示中与第类对应的非零元素,即,则测试样本利用稀疏系数重构表示表示,然后根据重构误差最小判定准则把归类为最小的那一类,即:
因此,结合前面几个步骤,将自适应联合特征字典和测试图像带入上述求解方法,即可得出测试图像的重构图像,进而判断所属类别。
Claims (1)
1.在利用稀疏进行遥感图像目标识别时,主要利用自适应联合特征构建字典,对遥感图像采用SIFT特征进行目标检测识别。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711181801.2A CN109214405A (zh) | 2017-11-23 | 2017-11-23 | 一种自适应联合特征字典进行遥感图像稀疏识别的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201711181801.2A CN109214405A (zh) | 2017-11-23 | 2017-11-23 | 一种自适应联合特征字典进行遥感图像稀疏识别的方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109214405A true CN109214405A (zh) | 2019-01-15 |
Family
ID=64991726
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201711181801.2A Pending CN109214405A (zh) | 2017-11-23 | 2017-11-23 | 一种自适应联合特征字典进行遥感图像稀疏识别的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109214405A (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109919242A (zh) * | 2019-03-18 | 2019-06-21 | 长沙理工大学 | 一种基于深度特征和联合稀疏的图像目标识别方法 |
CN110969121A (zh) * | 2019-11-29 | 2020-04-07 | 长沙理工大学 | 一种基于深度学习的高分辨率雷达目标识别算法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090222396A1 (en) * | 2008-03-03 | 2009-09-03 | International Business Machines Corporation | Adaptive multi-levels dictionaries and singular value decomposition techniques for autonomic problem determination |
US20100124377A1 (en) * | 2008-11-19 | 2010-05-20 | Nec Laboratories America, Inc. | Linear spatial pyramid matching using sparse coding |
CN102737234A (zh) * | 2012-06-21 | 2012-10-17 | 北京工业大学 | 基于Gabor滤波和联合稀疏模型的人脸识别方法 |
CN105388476A (zh) * | 2015-12-28 | 2016-03-09 | 河南工业大学 | 一种基于联合稀疏模型的层析sar成像方法 |
CN106251320A (zh) * | 2016-08-15 | 2016-12-21 | 西北大学 | 基于联合稀疏与结构字典的遥感图像融合方法 |
-
2017
- 2017-11-23 CN CN201711181801.2A patent/CN109214405A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090222396A1 (en) * | 2008-03-03 | 2009-09-03 | International Business Machines Corporation | Adaptive multi-levels dictionaries and singular value decomposition techniques for autonomic problem determination |
US20100124377A1 (en) * | 2008-11-19 | 2010-05-20 | Nec Laboratories America, Inc. | Linear spatial pyramid matching using sparse coding |
CN102737234A (zh) * | 2012-06-21 | 2012-10-17 | 北京工业大学 | 基于Gabor滤波和联合稀疏模型的人脸识别方法 |
CN105388476A (zh) * | 2015-12-28 | 2016-03-09 | 河南工业大学 | 一种基于联合稀疏模型的层析sar成像方法 |
CN106251320A (zh) * | 2016-08-15 | 2016-12-21 | 西北大学 | 基于联合稀疏与结构字典的遥感图像融合方法 |
Non-Patent Citations (1)
Title |
---|
李骥 等: "《基于扩展字典稀疏表示分类的遥感目标识别》", 《计算机工程与科学》 * |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109919242A (zh) * | 2019-03-18 | 2019-06-21 | 长沙理工大学 | 一种基于深度特征和联合稀疏的图像目标识别方法 |
CN110969121A (zh) * | 2019-11-29 | 2020-04-07 | 长沙理工大学 | 一种基于深度学习的高分辨率雷达目标识别算法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110210463B (zh) | 基于Precise ROI-Faster R-CNN的雷达目标图像检测方法 | |
CN111401265B (zh) | 行人重识别方法、装置、电子设备和计算机可读存储介质 | |
Lin et al. | Image registration based on corner detection and affine transformation | |
CN108596108B (zh) | 基于三元组语义关系学习的航拍遥感图像变化检测方法 | |
CN103914847B (zh) | 基于相位一致性和sift的sar图像配准方法 | |
CN109118528A (zh) | 基于区域分块的奇异值分解图像匹配算法 | |
CN109919960B (zh) | 一种基于多尺度Gabor滤波器的图像连续边缘检测方法 | |
CN108564092A (zh) | 基于sift特征提取算法的向日葵病害识别方法 | |
CN109191416A (zh) | 基于稀疏字典学习和剪切波的图像融合方法 | |
CN110334762A (zh) | 一种基于四叉树结合orb和sift的特征匹配方法 | |
Gou et al. | Remote sensing image super-resolution reconstruction based on nonlocal pairwise dictionaries and double regularization | |
CN106327534A (zh) | 一种基于定位块的轮胎内壁纹理识别方法 | |
Liang et al. | Maximum likelihood classification of soil remote sensing image based on deep learning | |
CN113689374A (zh) | 一种植物叶片表面粗糙度确定方法及系统 | |
CN105488541A (zh) | 增强现实系统中基于机器学习的自然特征点识别方法 | |
CN105631890B (zh) | 基于图像梯度和相位一致性的失焦图片质量评价方法 | |
CN111126494A (zh) | 基于各向异性卷积的图像分类方法及系统 | |
CN114821358A (zh) | 光学遥感图像海上舰船目标提取与识别方法 | |
CN116664892A (zh) | 基于交叉注意与可形变卷积的多时相遥感图像配准方法 | |
CN106934398B (zh) | 基于超像素聚类和稀疏表示的图像去噪方法 | |
CN109214405A (zh) | 一种自适应联合特征字典进行遥感图像稀疏识别的方法 | |
Kumar et al. | Comparative analysis for edge detection techniques | |
CN113763274B (zh) | 一种联合局部相位锐度定向描述的多源图像匹配方法 | |
Chen et al. | Scene segmentation of remotely sensed images with data augmentation using U-net++ | |
CN109086350B (zh) | 一种基于WiFi的混合图像检索方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190115 |
|
RJ01 | Rejection of invention patent application after publication |