CN104881671B - 一种基于2D‑Gabor的高分遥感影像局部特征提取方法 - Google Patents

一种基于2D‑Gabor的高分遥感影像局部特征提取方法 Download PDF

Info

Publication number
CN104881671B
CN104881671B CN201510264025.7A CN201510264025A CN104881671B CN 104881671 B CN104881671 B CN 104881671B CN 201510264025 A CN201510264025 A CN 201510264025A CN 104881671 B CN104881671 B CN 104881671B
Authority
CN
China
Prior art keywords
image
remote sensing
pixel
point
feature
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510264025.7A
Other languages
English (en)
Other versions
CN104881671A (zh
Inventor
许文波
杨淼
范肖肖
张亚璇
樊香所
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
University of Electronic Science and Technology of China
Original Assignee
University of Electronic Science and Technology of China
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by University of Electronic Science and Technology of China filed Critical University of Electronic Science and Technology of China
Priority to CN201510264025.7A priority Critical patent/CN104881671B/zh
Publication of CN104881671A publication Critical patent/CN104881671A/zh
Application granted granted Critical
Publication of CN104881671B publication Critical patent/CN104881671B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)

Abstract

本发明属于高分辨率遥感影像处理领域,尤其涉及一种基于2D‑Gabor的高分遥感影像局部特征提取方法。本发明首先建立影像的尺度空间金字塔表达;然后在尺度空间中搜索不同特征尺度下的加速分割测试特征,使用极大值抑制的方法得到特征点并确定特征点所在的位置及尺度;其次建立基于二进制的局部特征描述子;最后,使用Hamming距离作为相似性度量方法对不同视角条件下获得的同一场景的影像对进行特征匹配,再采用RANSAC算法进行特征提纯,去除错误的匹配点对。本发明能够精确地模拟人类的视觉皮层和视网膜的认知特点。在特征检测的过程中,对亮度和尺度的变化具有不变性,可以在时间域和频率域中同时获得最优的性能。

Description

一种基于2D-Gabor的高分遥感影像局部特征提取方法
技术领域
本发明属于高分辨率遥感影像处理领域,尤其涉及一种基于2D-Gabor的高分遥感影像局部特征提取方法。
背景技术
随着遥感技术的发展,高分辨率遥感影像的出现,遥感图像的细节更加丰富。和普通图像相比,遥感影像的尺寸更大,数据信息分布也更为复杂,这种复杂性决定了处理遥感影像时不能使用单一的特征提取模型。此外,遥感成像的非均匀光照、过饱和等因素均会对传统的基于全局特征提取的方法造成影响。使用局部特征检测及特征描述方式,可以使获得的局部特征只是对整个图像内容进行高度抽象,这样遥感影像本身的信息量将得到大大的压缩。
局部特征提取技术主要包括两个阶段:局部特征检测和局部特征描述。
在局部特征检测阶段,主要研究如何确定遥感影像中我们感兴趣的特征所在的位置,该阶段是局部特征提取的首要环节,直接影响着后续特征描述和特征匹配的进行。有代表性的局部特征检测方法是角点特征检测。Harris角点检测算法采用了微分算子和矩阵特征值来判断角点,计算复杂而且不具有尺度不变形。Smith等人提出的SUSAN角点检测算法直接使用遥感影像的灰度信息进行角点检测,计算过程简单,但亮度的阈值不容易确定,不易处理模糊的影响。FAST角点检测算法是Rosten等人在SUSAN算子的基础上提出的,具有高效性并且定位精度和可重复性高,但是依然不具有尺度不变形。
在局部特征描述阶段,主要研究如何量化检测到的特征,从而表征图像的局部结构信息。最常见的局部特征描述方法是基于梯度分布的描述方法,如Lowe提出的SIFT描述子,Ke提出的PCA-SIFT描述子,Bay提出的T描述子,Mikolajczyk和Schmid提出的GLOH描述子等,他们使用了梯度直方图的方式生成特征适量,但是,占用内存大且不具有实时性。
高分遥感影像的特征提取技术是很多遥感分析任务(比如:遥感影像自动配准、遥感影像融合、遥感影像分类、遥感影像的目标识别及影像中地物特征的变化检测等)的基础环节。提取出具有不变性的局部特征能够有效地解决遥感领域的应用问题。此外,高分辨率遥感影像使用的传感器观测范围广,遥感影像中目标的细节特征比较丰富,结构性特征、纹理特征和形状特征往往比较突出。
传统的局部特征提取技术大多基于高斯核函数构成的尺度空间来获得遥感影像中不变性的局部特征。这种方法缺乏对遥感影像频率方向的选择过程,在频率域中方向变化比较明显的特征就会被忽略掉。
发明内容
本发明的目的是针对高分遥感影像的特点以及现有的局部特征提取技术中存在的不足,提供一种基于2D-Gabor的高分遥感影像局部特征提取方法。该方法利用了2D-Gabor变换的多尺度多通道性能,对遥感影像的空间位置、频率和方向具有很强的选择性,能够捕捉到遥感影像中显著的局部特征信息,能提取出鲁棒性更好、匹配率更高、更符合人类视觉特性的局部特征。
一种基于2D-Gabor的高分遥感影像局部特征提取方法,包括如下步骤:
S1、使用2D-Gabo生成遥感影像的尺度空间,所述2D-Gabor的核函数是方向角为θ,频率为w0的复正弦函数调制二维高斯函数h(x,y,θ,σxy),所述尺度空间为L(x,y,σs),其中,h(x,y,θ,σxy)=g(x',y')exp[2πj(u0x+ν0y)],
(x,y)表示所述尺度空间的位置信息,exp(*)表示以e为底的指数函数,
x'=xcosθ+ysinθ,y'=-xsinθ+ycosθ,
二维高斯函数σx为g(x,y)在x方向的标准差,σy为g(x,y)在y方向的标准差,L(x,y,σsm)=I(x,y)*h(x,y,σsm),I(x,y)表示输入的高分遥感影像,σs表示所述核函数h(x,y,θ,σxy)的尺度参数,σs=σ1ks-1,s为不为零的自然数且s≤A,A为尺度的个数,k为经验值,σ1为初始尺度,θm表示复正弦函数调制二维高斯函数h(x,y,θ,σxy)的调制方向;
S2、根据S1所述尺度空间构建A组影像金字塔实现多尺度表达,其中,每组影像金字塔包含N层影像,A为不为零的自然数,N为不为零的自然数;
S3、搜索FAST特征,确定特征点的位置和尺度信息,具体为:
S31、使用FAST算子对S2所述影像金字塔中的每一层的所有像素点进行检测,得到初步的特征点集,具体为:
S311、使用公式对S2所述影像金字塔中的每一层的像素进行分割测试(Segment Test),所述分割测试在圆上进行,所述圆以中心像素点p为圆心,所述圆半径为3.4个像元,所述圆周围有16个像素,其中,x为圆上的像素点,p→x表示相对中心像素点p的像素点x,Ip表示中心像素点p的像素值,Ip→x表示所述圆上的像素值,t为经验阈值,d代表所述圆上与中心像素点相比灰度值低的像素点、s代表所述圆上与中心像素点灰度相似的像素点、b代表所述圆上与中心像素点相比灰度值高的像素点;
S312、统计S311所述d和b出现的次数,若S311所述d和b中有一个出现的次数>B,则S311所述衷心像素点p为候选的特征点,其中,B为整数且B≥1;
S313、重复S311和S312,遍历S2所述影像金字塔中的每一层的像素,生成候选特征点集合Q;
S314、使用ID3决策树分类器训练S313所述集合中的候选特征点,得到初步的特征点集;
S32、在S1所述尺度空间L(x,y,σs)中对S31得到的初步的特征点集进行非极大值抑制,具体为:
S321、定义FAST特征的score函数作为衡量标准,其中,Sbright为圆上比中心像素点灰度值高的像素点构成的集合,Sdark为为圆上比中心像素点灰度值低的像素点构成的集合;
S322、若S31所述潜在特征区域的像素点的score函数值大于同一层8个邻域点的score函数,且S31所述潜在特征区域的像素点的score函数值大于上下相邻两层各9个邻域点的score函数值,则所述像素点为特征点;
S4、采用灰度质心的方法来确定S3所述特征点的主方向θ;
S5、对S3所述特征点进行采样生成特征矢量构建特征描述子;
S6、使用Hamming距离进行特征向量匹配,得到匹配点对;
S7、采用随机采样一致性算法对S6所述匹配点对进行优化,去除错误的局部特征匹配点,所述随机采样一致性算法用于特征匹配筛选的具体过程是:
(1)从所有的匹配点对样本测试集中随机选取4个匹配点对,将其作为一个RANSAC样本。
(2)通过采样的匹配点对得到点对之间的一个变换矩阵M。
(3)设定一个度量误差的函数,根据变换矩阵M和样本测试集,计算符合变换矩阵M的集合,我们称为一致集consensus,记录当前一致集中包含的元素个数。
(4)由记录的一致集元素的个数可以判断出步骤(3)得到的一致集是否是最优的,如果是最优的则对当前的一致集进行更新。
(5)计算当前一致集与变换矩阵M间的错误概率,比较当前错误概率PM与允许的最小错误概率的大小,当PM>Pth时,重复执行步骤(1)至(4),当PM≤Pth停止,此时的矩阵M为最佳的匹配的变换矩阵。
进一步地,S1所述使用2D-Gabor生成遥感影像的尺度空间具体步骤如下:
S11、对遥感影像进行滤波,即使用S1所述2D-Gabor的核函数h(x,y,θ,σxy)对输入的高分遥感影像滤波,得到L(x,y,σsm);
S12、根据S11所述L(x,y,σsm),将输入的高分遥感影像在特定尺度参数下每个方向的结果相乘得到L(x,y,σs)。
进一步地,S11所述滤波所使用的核函数是经过优化的核函数
优化方式为:选择一倍程的频率间距,根据参数估计方法最大限度降低特征的冗余信息,其中,σ为尺度参数,j为虚部。
进一步地,S1所述的k=1.4。
进一步地,S2所述构建影像金字塔实现多尺度表达具体步骤如下:
S21、根据S1所述L(x,y,σs)建立A组影像金字塔,每组包含N层高分遥感影像,所述N层影像包括m个中间层ci和n个内层di,其中,m为不为零的自然数,n为不为零的自然数,m=n且m<N,n<N,A为自然数且4≤A≤16,N为自然数且4≤N≤16;
S22、将S1所述σs上所有方向的响应值相乘作为S21所述影像金字塔的尺度参数σs对应组中的第一个内层影像,上一内层影像经0.5倍的下采样可得到下一内层影像,将所述第一个内层影像1.5倍下采样得到第一个中间层影像,上一个中间层影像经0.5倍下采样得到下一个中间层影像。
进一步地,S21所述A=4,N=4,m=n=2。
进一步地,S312所述B=9。
进一步地,还包括对S322所述特征点进行校正,所述校正包括对S322所述特征点的像素坐标进行校正和对S322所述特征点的连续尺度进行校正,其中,采用最小二乘法进行二次函数拟合对像素坐标进行校正,采用拟合抛物线函数的方法对连续尺度进行校正。
进一步地,S4所述确定主方向θ的具体步骤如下:
S41、建立一个以特征点为圆心,半径为r的圆形邻域图像块,定义所述图像块的矩特征为其中p、q表示矩的阶数,取值为自然数;
S42、得出S41所述图像块的0阶矩得出S41所述图像块的一阶矩
S43、得出S41所述图像块的质心
S44、根据S43所述质心C确定S3所述特征点的主方向θ=arctan(m01,m10),所述θ为S3所述特征点与43所述质心C的夹角。
本发明的有益效果:
本发明主要利用2D-Gabor良好的频率选择性、方向选择性和局部选择性,并且能够精确地模拟人类的视觉皮层和视网膜的认知特点。在特征检测的过程中,使用2D-Gabor变换作为核函数建立影像的尺度空间,在多尺度下检测FAST特征,使检测到的影像的局部特征除了具备准确的定位能力、高稳定性和可重复性外,对亮度和尺度的变化还具有不变性,通过设置合适的参数可以在时间域和频率域中同时获得最优的性能。在特征描述的过程中使用二进制的特征描述子,计算复杂度低并且占用内存小,生成的特征描述符具有更好的可区分能力,降低了特征匹配中错误匹配点对出现的概率。
附图说明
图1为本发明的整体流程图。
图2为本发明的特征点检测示意图。
图3为本发明的特征点描述子建立过程的采样模式示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步说明:
如图1所示。
S1、使用2D-Gabo生成遥感影像的尺度空间,所述2D-Gabor的核函数是方向角为θ,频率为w0的复正弦函数调制二维高斯函数h(x,y,θ,σxy),所述尺度空间为L(x,y,σs),其中,h(x,y,θ,σxy)=g(x',y')exp[2πj(u0x+ν0y)],
(x,y)表示所述尺度空间的位置信息,exp(*)表示以e为底的指数函数,
x'=xcosθ+ysinθ,y'=-xsinθ+ycosθ,
二维高斯函数σx为g(x,y)在x方向的标准差,σy为g(x,y)在y方向的标准差,L(x,y,σsm)=I(x,y)*h(x,y,σsm),I(x,y)表示输入的高分遥感影像,σs表示所述核函数h(x,y,θ,σxy)的尺度参数,σs=σ1ks-1,s为不为零的自然数且s≤A,A为尺度的个数,k=1.4,σ1为初始尺度,θm表示复正弦函数调制二维高斯函数h(x,y,θ,σxy)的调制方向,所述使用2D-Gabor生成遥感影像的尺度空间具体步骤如下:
S11、对遥感影像进行滤波,即使用核函数
对输入的高分遥感影像滤波,得到L(x,y,σsm),相当于使用不同尺度参数的2D-Gabor核函数与图像进行卷积平滑操作;
S12、根据S11所述L(x,y,σsm),将输入的高分遥感影像在特定尺度参数下每个方向的结果相乘得到L(x,y,σs);
在对遥感影像进行滤波时候,参数w0、θ、σx和σy的选取是关键,可以直观地表现遥感影像的视觉空间信息以及频率、方向和带宽信息的选择,有助于对局部特征信息的提取。而尺度参数的选择直接决定了提取到的局部特征关键点的稳定性和可靠性,当尺度参数的动态范围比较大时,算法的尺度适应性比较好,但是计算复杂度会增加,还会出现冗余现象。为了降低计算复杂度和特征冗余,需要对h(x,y,θ,σxy)进行优化。本发明在优化中选择了一倍程的频率间距,并依据[Manjunath B S,Ma W Y.“Texture features forbrowsing and retrieval of image data”.Pattern Analysis and MachineIntelligence,IEEE Transactions on,1996,18(8):837-842.]中提到的参数估计的方法最大限度地降低特征的冗余信息得到h(x,y,σ,θ)。
S2、根据S1所述尺度空间构建影像金字塔实现多尺度表达:
S21、根据S1所述L(x,y,σs)建立4组影像金字塔,每组包含4层高分遥感影像,所述4层影像包括2个中间层ci和2个内层di
S22、将S1所述σs上所有方向的响应值相乘作为S21所述影像金字塔的尺度参数σs对应组中的第一个内层影像,上一内层影像经0.5倍的下采样可得到下一内层影像,将所述第一个内层影像1.5倍下采样得到第一个中间层影像,上一个中间层影像经0.5倍下采样得到下一个中间层影像;
S3、搜索FAST特征,确定特征点的位置和尺度信息,具体为:
S31、使用FAST算子对S2所述影像金字塔中的每一层的所有像素点进行检测,得到初步的特征点集,具体为:
S311、使用公式对S2所述影像金字塔中的每一层的像素进行分割测试(Segment Test),所述分割测试在圆上进行,所述圆以中心像素点p为圆心,所述圆半径为3.4个像元,所述圆周围有16个像素,其中,x为圆上的像素点,p→x表示相对中心像素点p的像素点x,Ip表示中心像素点p的像素值,Ip→x表示所述圆上的像素值,t为经验阈值,d代表所述圆上与中心像素点相比灰度值低的像素点、s代表所述圆上与中心像素点灰度相似的像素点、b代表所述圆上与中心像素点相比灰度值高的像素点;
S312、统计S311所述d和b出现的次数,若S311所述d和b中有一个出现的次数>9,则S311所述衷心像素点p为候选的特征点;
S313、重复S311和S312,遍历S2所述影像金字塔中的每一层的像素,生成候选特征点集合Q;
S314、使用ID3决策树分类器训练S313所述集合中的候选特征点,得到初步的特征点集,本发明所使用的ID3决策树分类器算法是根据Rosten E,Porter R,DrummondT.Faster and better:A machine learning approach to corner detection[J].Pattern Analysis and Machine Intelligence,IEEE Transactions on,2010,32(1):105-119.。
S32、在S1所述尺度空间L(x,y,σs)中对S31得到的初步的特征点集进行非极大值抑制,由于位置空间中获得的候选特征点在尺度空间中不一定也是候选特征点,因此需要在尺度空间进行特征点的搜索,具体为:
S321、定义FAST特征的score函数作为衡量标准,其中,Sbright为圆上比中心像素点灰度值高的像素点构成的集合,Sdark为为圆上比中心像素点灰度值低的像素点构成的集合;
S322、若S31所述潜在特征区域的像素点的score函数值大于同一层8个邻域点的score函数,且S31所述潜在特征区域的像素点的score函数值大于上下相邻两层各9个邻域点的score函数值,则所述像素点为特征点。
考虑到遥感影像的显著性局部特征信息对尺度维是连续的,而在离散尺度空间中对极值点进行搜索时,检测到的特征点的位置不一定很精确。因此,需要对检测出的离散极大值空间点进行亚像素级别的特征点像素坐标的校正和连续尺度的校正,所述校正包括对S322所述特征点的像素坐标进行校正和对S322所述特征点的连续尺度进行校正,其中,采用最小二乘法进行二次函数拟合对像素坐标进行校正,采用拟合抛物线函数的方法对连续尺度进行校正;
S4、在检测FAST特征点时没有对特征点方向确定的过程,这样导致提取的特征不具有旋转不变性,因此本发明采用灰度质心的方法来确定S3所述特征点的主方向θ,具体步骤如下:
S41、建立一个以特征点为圆心,半径为r的圆形邻域图像块,定义所述图像块的矩特征为其中p、q表示矩的阶数,取值为自然数;
S42、得出S41所述图像块的0阶矩得出S41所述图像块的一阶矩
S43、得出S41所述图像块的质心
S44、根据S43所述质心C确定S3所述特征点的主方向θ=arctan(m01,m10),所述θ为S3所述特征点与43所述质心C的夹角;
S5、对S3所述特征点进行采样生成特征矢量构建特征描述子。本发明构建特征点描述子的关键是使用了如图3所示的采样模式,选用了64个采样点,这些采样点是以特征点为圆心,不同半径的同心圆上的点。在选取采样点的过程中,将每个同心圆作π/8等分,那么每个同心圆上可获得16个采样点,然后对每个采样点,以该点为中心构建一个方形窗口,窗口的尺寸与同心圆的半径成正比。
在对选取的采样点构建二进制描述子的过程中,为了使描述子对光照和噪声的干扰更加稳定,使用窗口邻域灰度的均值来代替每个采样点的灰度值。而窗口邻域中灰度值之和可以用积分图像来计算,Viola和Jones将积分图像中任一点(x,y)的值ii(x,y)定义为该点到图像左上角对角线区域中灰度的总和:
其中,p(x',y')表示影像中点(x',y')的灰度值。对左上角像素点坐标为(x1,y1)、右上角像素点坐标为(x2,y2)、左下角像素点坐标为(x3,y3)和右下角像素点坐标为(x4,y4)的窗口W内像元灰度总和可以表示为:
Σw=ii(x4,y4)-ii(x2,y2)-ii(x3,y3)+ii(x1,y1)
假设大小为n*n的窗口,那么窗口W内一共包含n2个像素点,则第i个采样点窗口邻域灰度的均值表达式为:
然后找出采样点对中满足短距离条件采样点对(pi,pj)的集合S:
其中,E={(pi,pj)∈R2×R2|i<64∧j<i∧i,j∈64},δmin=13.67t,t是所采样特征点的尺度。
把集合中的采样点对都以特征点为中心旋转主方向角度θ,旋转后的点对(i',j')满足:
对集合内的所有点对进行测试,即可得到二进制的描述符为:
S6、使用Hamming距离进行特征向量匹配,得到匹配点对。
在进行特征匹配时采用Hamming距离对二进制描述子进行相似性度量。Hamming距离是指将某一字符串S1变为与它等长字符串S2所需要作的最小替换次数,比如字符串“11011”和“10101”之间的汉明距离为3,即统计两个等长的字符串中相对应的位置中所有不相同的字符的数目。当计算Hamming距离时,只需对两个字符串先进行按位异或操作再对操作后的结果进行按位统计。计算过程中只用到位操作,因此,计算速度比较快。
匹配策略使用最近邻距离比值的方法,通过比较最近邻的Hamming距离与次紧邻的Hamming距离比值的大小,当比值在设定的阈值范围内时,可被认定为候选的匹配点对。
S7、采用随机采样一致性算法对S6所述匹配点对进行优化,去除错误的局部特征匹配点。
在使用Hamming距离完成影像间的初始特征匹配后,还要去除错误的匹配点对来提高匹配的准确率和精度。本发明使用随机采样一致性(RANSAC)算法,该算法算法在计算模型参数具有比较高的稳健性。当异常数据超过数据集一半的情况下,仍然能够进行有效地排除异常的数据。RANSAC算法的主要思想是:估计模型的参数过程中,可以充分利用输入的观测数据,在估计模型参数时每次都使用最小的采样点集,并判断输入的观测数据是否与估计得到的参数是否一致,一致的为内点,不一致的是外点。经过若干次的迭代,所筛选出的最小点集中内点数目最多并且用这些内点构成的集合评估模型的所得错误率又不超过允许的错误概率即为最终的最优解。
RANSAC算法用于特征匹配筛选的具体过程是:
(1)从所有的匹配点对样本测试集中随机选取4个匹配点对,将其作为一个RANSAC样本。
(2)通过采样的匹配点对得到点对之间的一个变换矩阵M。
(3)设定一个度量误差的函数,根据变换矩阵M和样本测试集,计算符合变换矩阵M的集合,我们称为一致集consensus,记录当前一致集中包含的元素个数。
(4)由记录的一致集元素的个数可以判断出步骤(3)得到的一致集是否是最优的,如果是最优的则对当前的一致集进行更新。
(5)计算当前一致集与变换矩阵M间的错误概率,比较当前错误概率PM与允许的最小错误概率的大小,当PM>Pth时,重复执行步骤(1)至(4),当PM≤Pth停止,此时的矩阵M为最佳的匹配的变换矩阵。

Claims (9)

1.一种基于2D-Gabor的高分遥感影像局部特征提取方法,其特征在于,包括如下步骤:
S1、使用2D-Gabor生成遥感影像的尺度空间,所述2D-Gabor的核函数是方向角为θ,频率为w0的复正弦函数调制二维高斯函数h(x,y,θ,σxy),所述尺度空间为L(x,y,σs),其中,h(x,y,θ,σxy)=g(x',y')exp[2πj(u0x+ν0y)],
(x,y)表示所述尺度空间的位置信息,exp(*)表示以e为底的指数函数,
x'=xcosθ+ysinθ,y'=-xsinθ+ycosθ,
二维高斯函数σx为g(x,y)在x方向的标准差,σy为g(x,y)在y方向的标准差,L(x,y,σsm)=I(x,y)*h(x,y,σsm),I(x,y)表示输入的高分遥感影像,σs表示所述核函数h(x,y,θ,σxy)的尺度参数,σs=σ1ks-1,s为不为零的自然数且s≤A,A为尺度的个数,k为经验值,σ1为初始尺度,θm表示复正弦函数调制二维高斯函数h(x,y,θ,σxy)的调制方向;
S2、根据S1所述尺度空间构建A组影像金字塔实现多尺度表达,其中,每组影像金字塔包含N层影像,A为不为零的自然数,N为不为零的自然数;
S3、搜索FAST特征,确定特征点的位置和尺度信息,具体为:
S31、使用FAST算子对S2所述影像金字塔中的每一层的所有像素点进行检测,得到初步的特征点集,具体为:
S311、使用公式对S2所述影像金字塔中的每一层的像素进行分割测试(Segment Test),所述分割测试在圆上进行,所述圆以中心像素点p为圆心,所述圆半径为3.4个像元,所述圆周围有16个像素,其中,x为圆上的像素点,p→x表示相对中心像素点p的像素点x,Ip表示中心像素点p的像素值,Ip→x表示所述圆上的像素值,t为经验阈值,d代表所述圆上与中心像素点相比灰度值低的像素点、s代表所述圆上与中心像素点灰度相似的像素点、b代表所述圆上与中心像素点相比灰度值高的像素点;
S312、统计S311所述d和b出现的次数,若S311所述d和b中有一个出现的次数>B,则S311所述中心像素点p为候选的特征点,其中,B为整数且B≥1;
S313、重复S311和S312,遍历S2所述影像金字塔中的每一层的像素,生成候选特征点集合Q;
S314、使用ID3决策树分类器训练S313所述集合中的候选特征点,得到初步的特征点集;
S32、在S1所述尺度空间L(x,y,σs)中对S31得到的初步的特征点集进行非极大值抑制,具体为:
S321、定义FAST特征的作为衡量标准,其中,Sbright为圆上比中心像素点灰度值高的像素点构成的集合,Sdark为为圆上比中心像素点灰度值低的像素点构成的集合;
S322、若S31所述初步的特征点集的像素点的score函数值大于同一层8个邻域点的score函数,且S31所述初步的特征点集的像素点的score函数值大于上下相邻两层各9个邻域点的score函数值,则所述像素点为特征点;
S4、采用灰度质心的方法来确定S3所述特征点的主方向θ;
S5、对S3所述特征点进行采样生成特征矢量构建特征描述子;
S6、使用Hamming距离进行特征向量匹配,得到匹配点对;
S7、采用随机采样一致性算法对S6所述匹配点对进行优化,去除错误的局部特征匹配点,所述随机采样一致性算法用于特征匹配筛选的具体过程是:
(1)从所有的匹配点对样本测试集中随机选取4个匹配点对,将其作为一个RANSAC样本;
(2)通过采样的匹配点对得到点对之间的一个变换矩阵M;
(3)设定一个度量误差的函数,根据变换矩阵M和样本测试集,计算符合变换矩阵M的集合,我们称为一致集consensus,记录当前一致集中包含的元素个数;
(4)由记录的一致集元素的个数可以判断出步骤(3)得到的一致集是否是最优的,如果是最优的则对当前的一致集进行更新;
(5)计算当前一致集与变换矩阵M间的错误概率,比较当前错误概率PM与允许的最小错误概率的大小,当PM>Pth时,重复执行步骤(1)至(4),当PM≤Pth停止,此时的矩阵M为最佳的匹配的变换矩阵。
2.根据权利要求1所述一种基于2D-Gabor的高分遥感影像局部特征提取方法,其特征在于:S1所述使用2D-Gabor生成遥感影像的尺度空间具体步骤如下:
S11、对遥感影像进行滤波,即使用S1所述2D-Gabor的核函数h(x,y,θ,σxy)对输入的高分遥感影像滤波,得到L(x,y,σsm);
S12、根据S11所述L(x,y,σsm),将输入的高分遥感影像在特定尺度参数下每个方向的结果相乘得到L(x,y,σs)。
3.根据权利要求2所述一种基于2D-Gabor的高分遥感影像局部特征提取方法,其特征在于:S11所述滤波所使用的核函数是经过优化的核函数
优化方式为:选择一倍程的频率间距,根据参数估计方法最大限度降低特征的冗余信息,其中,σ为尺度参数,j为虚部。
4.根据权利要求1所述一种基于2D-Gabor的高分遥感影像局部特征提取方法,其特征在于:S1所述的k=1.4。
5.根据权利要求1所述一种基于2D-Gabor的高分遥感影像局部特征提取方法,其特征在于:S2所述构建影像金字塔实现多尺度表达具体步骤如下:
S21、根据S1所述L(x,y,σs)建立A组影像金字塔,每组包含N层高分遥感影像,所述N层影像包括m个中间层ci和n个内层di,其中,m为不为零的自然数,n为不为零的自然数,m=n且m<N,n<N,A为自然数且4≤A≤16,N为自然数且4≤N≤16;
S22、将S1所述σs上所有方向的响应值相乘作为S21所述影像金字塔的尺度参数σs对应组中的第一个内层影像,上一内层影像经0.5倍的下采样可得到下一内层影像,将所述第一个内层影像1.5倍下采样得到第一个中间层影像,上一个中间层影像经0.5倍下采样得到下一个中间层影像。
6.根据权利要求5所述一种基于2D-Gabor的高分遥感影像局部特征提取方法,其特征在于:S21所述A=4,N=4,m=n=2。
7.根据权利要求1所述一种基于2D-Gabor的高分遥感影像局部特征提取方法,其特征在于:S312所述B=9。
8.根据权利要求1所述一种基于2D-Gabor的高分遥感影像局部特征提取方法,其特征在于:还包括对S322所述特征点进行校正,所述校正包括对S322所述特征点的像素坐标进行校正和对S322所述特征点的连续尺度进行校正,其中,采用最小二乘法进行二次函数拟合对像素坐标进行校正,采用拟合抛物线函数的方法对连续尺度进行校正。
9.根据权利要求1所述一种基于2D-Gabor的高分遥感影像局部特征提取方法,其特征在于:S4所述确定主方向θ的具体步骤如下:
S41、建立一个以特征点为圆心,半径为r的圆形邻域图像块,定义所述图像块的矩特征为其中p、q表示矩的阶数,取值为自然数;
S42、得出S41所述图像块的0阶矩得出S41所述图像块的一阶矩
S43、得出S41所述图像块的质心
S44、根据S43所述质心C确定S3所述特征点的主方向θ=arctan(m01,m10),所述θ为S3所述特征点与43所述质心C的夹角。
CN201510264025.7A 2015-05-21 2015-05-21 一种基于2D‑Gabor的高分遥感影像局部特征提取方法 Active CN104881671B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510264025.7A CN104881671B (zh) 2015-05-21 2015-05-21 一种基于2D‑Gabor的高分遥感影像局部特征提取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510264025.7A CN104881671B (zh) 2015-05-21 2015-05-21 一种基于2D‑Gabor的高分遥感影像局部特征提取方法

Publications (2)

Publication Number Publication Date
CN104881671A CN104881671A (zh) 2015-09-02
CN104881671B true CN104881671B (zh) 2018-01-19

Family

ID=53949158

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510264025.7A Active CN104881671B (zh) 2015-05-21 2015-05-21 一种基于2D‑Gabor的高分遥感影像局部特征提取方法

Country Status (1)

Country Link
CN (1) CN104881671B (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10580135B2 (en) 2016-07-14 2020-03-03 Shanghai United Imaging Healthcare Co., Ltd. System and method for splicing images
CN106504229B (zh) * 2016-09-30 2019-11-12 上海联影医疗科技有限公司 图像中特征点的检测方法
CN107180241A (zh) * 2017-04-20 2017-09-19 华南理工大学 一种基于Gabor特征具有分形结构的极深神经网络的动物分类方法
CN109300079A (zh) * 2017-07-25 2019-02-01 北京吉威时代软件股份有限公司 基于gpu的遥感影像实时匀光匀色预览技术
CN107679138B (zh) * 2017-09-22 2021-08-27 陕西师范大学 基于局部尺度参数、熵和余弦相似性的谱特征选择方法
CN109104588B (zh) * 2018-07-24 2020-01-14 房梦琦 一种视频监控方法、设备、终端及计算机存储介质
CN110321858B (zh) * 2019-07-08 2022-06-14 北京字节跳动网络技术有限公司 视频相似度确定方法、装置、电子设备及存储介质
CN111009001A (zh) * 2019-09-17 2020-04-14 哈工大机器人(中山)无人装备与人工智能研究院 一种图像配准方法、装置、设备及存储介质
CN113239829B (zh) * 2021-05-17 2022-10-04 哈尔滨工程大学 基于空间占用概率特征的跨维度遥感数据目标识别方法
CN117011147B (zh) * 2023-10-07 2024-01-12 之江实验室 一种红外遥感影像特征检测及拼接方法及装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101266704A (zh) * 2008-04-24 2008-09-17 张宏志 基于人脸识别的atm安全认证与预警方法
CN103489004A (zh) * 2013-09-30 2014-01-01 华南理工大学 一种深度学习网络实现大类别图像识别的方法
CN104217209A (zh) * 2013-06-03 2014-12-17 核工业北京地质研究院 一种遥感图像自动配准点错误匹配消除方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101677561B1 (ko) * 2010-12-08 2016-11-18 한국전자통신연구원 영상 정합 장치 및 그것의 영상 정합 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101266704A (zh) * 2008-04-24 2008-09-17 张宏志 基于人脸识别的atm安全认证与预警方法
CN104217209A (zh) * 2013-06-03 2014-12-17 核工业北京地质研究院 一种遥感图像自动配准点错误匹配消除方法
CN103489004A (zh) * 2013-09-30 2014-01-01 华南理工大学 一种深度学习网络实现大类别图像识别的方法

Also Published As

Publication number Publication date
CN104881671A (zh) 2015-09-02

Similar Documents

Publication Publication Date Title
CN104881671B (zh) 一种基于2D‑Gabor的高分遥感影像局部特征提取方法
CN109670528B (zh) 面向行人重识别任务的基于成对样本随机遮挡策略的数据扩充方法
CN106683091B (zh) 一种基于深度卷积神经网络的目标分类及姿态检测方法
CN107657226B (zh) 一种基于深度学习的人数估计方法
CN107633226B (zh) 一种人体动作跟踪特征处理方法
CN108470354A (zh) 视频目标跟踪方法、装置和实现装置
CN112883839B (zh) 基于自适应样本集构造与深度学习的遥感影像解译方法
CN114241548A (zh) 一种基于改进YOLOv5的小目标检测算法
CN109410238A (zh) 一种基于PointNet++网络的枸杞识别计数方法
CN110263712A (zh) 一种基于区域候选的粗精行人检测方法
CN113032613B (zh) 一种基于交互注意力卷积神经网络的三维模型检索方法
CN103679192A (zh) 基于协方差特征的图像场景类型判别方法
CN113963222A (zh) 一种基于多策略组合的高分辨率遥感影像变化检测方法
CN109635726B (zh) 一种基于对称式深度网络结合多尺度池化的滑坡识别方法
CN109344842A (zh) 一种基于语义区域表达的行人重识别方法
CN111275010A (zh) 一种基于计算机视觉的行人重识别方法
CN108564111A (zh) 一种基于邻域粗糙集特征选择的图像分类方法
CN109886267A (zh) 一种基于最优特征选择的低对比度图像显著性检测方法
CN110334656A (zh) 基于信源概率加权的多源遥感图像水体提取方法及装置
CN108280421A (zh) 基于多特征深度运动图的人体行为识别方法
Wang et al. Segmentation of corn leaf disease based on fully convolution neural network
CN110399828A (zh) 一种基于多角度的深度卷积神经网络的车辆再识别方法
CN110516533A (zh) 一种基于深度度量的行人再辨识方法
CN114511012A (zh) 基于特征匹配和位置匹配的sar图像与光学图像匹配方法
CN114861761B (zh) 一种基于孪生网络特征与几何验证的回环检测方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
EXSB Decision made by sipo to initiate substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant