CN108596139A - 一种基于Gabor特征显著性的遥感影像城市区域提取方法 - Google Patents

一种基于Gabor特征显著性的遥感影像城市区域提取方法 Download PDF

Info

Publication number
CN108596139A
CN108596139A CN201810414247.6A CN201810414247A CN108596139A CN 108596139 A CN108596139 A CN 108596139A CN 201810414247 A CN201810414247 A CN 201810414247A CN 108596139 A CN108596139 A CN 108596139A
Authority
CN
China
Prior art keywords
gabor
remote sensing
value
urban area
characteristic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810414247.6A
Other languages
English (en)
Other versions
CN108596139B (zh
Inventor
杨羚
康飞
康一飞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan University WHU
Original Assignee
Wuhan University WHU
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan University WHU filed Critical Wuhan University WHU
Priority to CN201810414247.6A priority Critical patent/CN108596139B/zh
Publication of CN108596139A publication Critical patent/CN108596139A/zh
Application granted granted Critical
Publication of CN108596139B publication Critical patent/CN108596139B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • G06V20/13Satellite images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G06V10/443Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by matching or filtering

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Astronomy & Astrophysics (AREA)
  • Remote Sensing (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种基于Gabor特征显著性的遥感影像城市区域提取方法,包括:S1确定Gabor滤波器参数构造二维Gabor滤波器核函数;S2利用构造好的Gabor滤波器对图像进行多方向多次卷积运算;S3多方向卷积结果综合;S4方向综合后的特征图进行规则化;S5特征图进行平滑运算;S6确定城市区域分割阈值;S7形态学综合消除噪声点和孤立建筑物并将城区连通为整体。本发明方法需人工干预,可以对不同类型传感器、不同空间分辨率、不同场景的影像,均能实现准确的城市区域自动化提取,并且提取精度高,满足海量遥感影像自动化生产的需要。

Description

一种基于Gabor特征显著性的遥感影像城市区域提取方法
技术领域
本发明属于遥感图像处理技术领域,特别涉及一种基于Gabor特征显著性的遥感影像城市区域提取方法。
背景技术
随着国内外对地观测技术的蓬勃发展,对地观测系统日趋完善,光学遥感影像的数据量迅速增加,市场化程度逐年提高,已广泛应用于城镇化研究、土地调查、防灾减灾等领域。在这种应用背景下,研究针对海量遥感影像的自动化城市区域提取方法,有着重要的意义。
遥感影像场景复杂,包含信息量巨大,其中纹理丰富、边缘明显的人工目标更容易引起人类视觉系统的注意。基于认知心理学原理的视觉显著性分析方法,常被用于遥感影像建筑物、船只、飞机等目标的识别和提取。不同学者立足于不同的应用,给出了各不相同的显著性计算方式。一般思路是:找到能够反映人工目标的底层特征作为显著性的主要测度,对特征进行提取和量化表达,然后通过特定的分割或投票策略,对视觉显著区域进行定性标记,从而判定某一个像素或超像素是否为目标。然而,由于人类活动的多样性,人工目标的形态复杂多变,且在不同尺度空间中的特征表现各不相同,与此同时,自然地表和云层在某些情况下,也会表现出丰富的纹理和明显的边缘,给目标的识别造成干扰。
发明内容
本发明的目的是针对对地观测光学遥感卫星影像,提供一种高效而精确的基于Gabor特征显著性的遥感影像城市区域提取方法。
为达到上述目的,本发明采用如下技术方案:一种基于Gabor特征显著性的遥感影像城市区域提取方法,包括如下步骤:
步骤1,确定Gabor滤波器参数构造二维Gabor滤波器核函数;
步骤2,利用构造好的Gabor滤波器对遥感影像进行多方向多次卷积运算,得到对应的单方向Gabor特征图;
步骤3,多方向Gabor特征图综合;
步骤4,方向综合后的特征图进行规则化;
步骤5,使用二维高斯滤波器对方向综合后的特征图进行平滑运算;
步骤6,确定城市区域分割阈值,根据此阈值对Gabor平滑后的特征图进行分割获得城市区域;
步骤7,形态学综合消除噪声点和孤立建筑物并将城市区域连通为整体,从而获得遥感影像城市区域。
进一步的,步骤1中二维Gabor滤波器核函数的表达式为,
其中i为虚数单位,(x,y)为像素位置坐标;λ为正弦函数的波长;σ为高斯函数标准差;γ为高斯函数纵横比;θ为Gabor核函数的方向;φ为正弦波的初始相位,x'=xcosθ+ysinθ,y'=-xsinθ+ycosθ;波长、标准差、纵横比、方向和初始相位的确定方式如下,
步骤1.1,根据遥感影像的空间分辨率,确定Gabor滤波器的尺度参数,包括波长λ、标准差σ、纵横比γ和初始相位φ,其中,Gsd为遥感影像空间分辨率,γ固定取值1,φ固定为0°;
步骤1.2,以22.5°为采样间隔,将[0°,180°)区间划分出8个不同的方向作为方向参数θ的取值;
步骤1.3,确定滤波器窗口大小W,进一步包括,
步骤1.3.1,根据如下公式设置初始滤波窗口W0
步骤1.3.2,计算当前二维Gabor滤波器最外围一圈核函数值的绝对值之和S;
步骤1.3.3,若S<10-8,则以此时窗口的大小W为最终的采用值;否则,令W=W+2,重复1.3.2-1.3.3,直至满足条件。
进一步的,步骤3中多方向卷积结果综合的计算公式如下,
式中,gθ(x,y)表示像点(x,y)在θ方向上的Gabor特征值;表示对应像点综合了8个方向之后的特征值,它是一个非负值。
进一步的,步骤4中规则化的计算公式如下,
式中,表示像点(x,y)处规则化后的Gabor特征值;表示方向综合后的非负特征值;G(x,y)表示影像亮度值;f(i,j)表示二维Gabor滤波器在(i,j)处的核函数的值;W为滤波器窗口大小;即为滤波器权重之和。
进一步的,步骤5中二维高斯滤波器标准差的计算公式为,
σgauss=2σgabor
式中,σgabor为步骤1.1中计算出的Gabor滤波器标准差σ。
进一步的,步骤6中将经验阈值与Otsu自动阈值分割法相结合确定城市区域分割阈值,
步骤6.1,观察分析得到经验双阈值,低阈值TL=0.01,高阈值TH=0.03;
步骤6.2,像素亮度值低于TL的为非城区,高于TH的为城区;在TL与TH之间的像素进行Otsu阈值分割,得到分割阈值T,高于阈值T的像素认为是视觉显著区域,即城区,其余为背景。
进一步的,步骤7进一步包括如下子步骤,
步骤7.1,消除面积小于S1的目标,其中S1=(20σgabor)2,σgabor为步骤1.1中计算出的Gabor滤波器标准差σ;
步骤7.2,在步骤7.1的基础上执行尺度为S2形态学膨胀运算,其中S2=15σgabor
步骤7.3,在步骤7.2的基础上执行尺度为S3形态学腐蚀运算,其中S3=10σgabor
本发明无需人工干预,可以对不同类型传感器、不同空间分辨率、不同场景的影像,均能实现准确的城市区域自动化提取。
本发明具有如下优点和有益效果:
(1)不受传感器的限制,适用于不同部分辨率不同场景下影像;
(2)提取出的城区精确度高,漏检率和误检率低;
(3)可实现全自动化处理,效率高,满足海量遥感影像自动化生产的需要。
附图说明
图1为本发明实施例遥感影像城区提取流程图。
图2为本发明实施例不同波长及初相的Gabor滤波器(上)和特征图(下)。
图3为本发明实施例不同标准差及纵横比的Gabor滤波器(上)和特征图(下)。
图4为本发明实施例不同方向的Gabor滤波器(上)和特征图(下)。
具体实施方式
为了更好地理解本发明技术方案,下面将结合附图和实施例对本发明做进一步详细说明。
参见图1,本发明实施例所提供方法包含以下步骤。
步骤1,确定Gabor滤波器参数构造二维Gabor滤波器核函数。
在空间域中,一个二维Gabor函数是一个由正弦平面波调制的高斯核函数,可以看作是一个高斯函数和一个复指数函数相乘,通常的形式为:
其中i为虚数单位,(x,y)为像素位置坐标;λ为正弦函数的波长;σ为高斯函数标准差;γ为高斯函数纵横比;θ为Gabor核函数的方向;φ为正弦波的初始相位,x'=xcosθ+ysinθ,y'=-xsinθ+ycosθ。波长、标准差、纵横比、方向和初始相位需要根据影像信息进行确定。
本步骤的具体实施方式如下:
步骤1.1,确定Gabor滤波器的尺度参数,包括波长λ、标准差σ、纵横比γ和初相φ。初始相位φ影响的是滤波器的中心是亮条纹还是暗条纹,如图2所示。对目标提取不会造成影响,固定取值为0°即可。γ影响的是滤波器的形状是否为圆形,如图3所示,固定取值为1。λ和σ对滤波器条纹的粗细和间隔大小有极大影响,如图2和图3所示不同波长和标准差的取值对滤波器的影响不同,二者与影像空间分辨率有关,计算公式如下:
其中,Gsd为地面空间分辨率,一般Gsd取[0.5m,10m],这是主流光学遥感影像常用的分辨率范围。
步骤1.2,以22.5°为采样间隔,将[0°,180°)区间划分出8个不同的方向作为方向参数θ的取值。θ取不同值时Gabor滤波器及其滤波后特征图如图4所示。
步骤1.3,确定滤波器窗口大小。本具体实施中策略如下:
步骤1.3.1设置初始滤波窗口W0
步骤1.3.2计算当前二维Gabor滤波器最外围一圈核函数值的绝对值之和S;
步骤1.3.3若S<10-8,则以此时窗口的大小W为最终的采用值;否则,令W=W+2,重复步骤1.3.2至1.3.3,直至满足条件。
步骤2,利用构造好的Gabor滤波器对图像进行多方向多次卷积运算。
基于步骤1中确定了参数的8个不同方向的Gabor滤波器,分别对图像进行卷积运算得到对应的单方向Gabor特征图。
步骤3,多方向卷积结果综合。将8个方向的Gabor特征图进行综合,计算公式如下:
式中,gθ(x,y)表示像点(x,y)在θ方向上的Gabor特征值;表示对应像点综合了8个方向之后的特征值,它是一个非负值。
步骤4,特征图规则化处理。按照如下公式对方向综合后的特征图进行规则化。
式中,表示像点(x,y)处规则化后的Gabor特征值;表示方向综合后的非负特征值;G(x,y)表示影像亮度值;f(i,j)表示二维Gabor滤波器在(i,j)处的核函数的值;W为滤波器窗口大小;即为滤波器权重之和。
步骤5,特征图平滑处理。使用二维高斯滤波器对方向综合后的特征图进行平滑运算,其中二维高斯滤波器标准差的计算公式为:
σgauss=2σgabor
式中,σgabor为Gabor滤波器标准差σ。
步骤6,确定城市区域分割阈值。
将经验阈值与Otsu自动阈值分割法相结合进行城市区域的提取,主要步骤包括:
步骤6.1,通过观察并分析一定数目不同传感器、不同场景的特征图,得到固定经验双阈值,低阈值TL=0.01,高阈值TH=0.03。
步骤6.2,像素亮度值低于TL的为非城区,高于TH的为城区。在TL与TH之间的像素进行Otsu阈值分割,得到分割阈值T,高于阈值T的像素认为是视觉显著区域,即城区,其余为背景。
步骤7,对上一步得到的影像进行形态学综合运算。
为了消除小面积噪声点和孤立建筑,同时使城市区域联通趋于片状整体,本步骤使用形态学运算的方式对上一步的分割结果进行综合。具体步骤包括:
步骤7.1,消除面积小于S1的目标,其中S1=(20σgabor)2,σgabor为步骤1.1中计算出的Gabor滤波器标准差σ。
步骤7.2,在步骤7.1的基础上执行尺度为S2形态学膨胀运算,其中S2=15σgabor
步骤7.3,在步骤7.2的基础上执行尺度为S3形态学腐蚀运算,其中S3=10σgabor
本文中所描述的具体实施例仅仅是对本发明精神作举例说明。本发明所属技术领域的技术人员可以对所描述的具体实施例做各种各样的修改或补充或采用类似的方式替代,但并不会偏离本发明的精神或者超越所附权利要求书所定义的范围。

Claims (7)

1.一种基于Gabor特征显著性的遥感影像城市区域提取方法,其特征在于,包括如下步骤:
步骤1,确定Gabor滤波器参数构造二维Gabor滤波器核函数;
步骤2,利用构造好的Gabor滤波器对遥感影像进行多方向多次卷积运算,得到对应的单方向Gabor特征图;
步骤3,多方向Gabor特征图综合;
步骤4,方向综合后的特征图进行规则化;
步骤5,使用二维高斯滤波器对方向综合后的特征图进行平滑运算;
步骤6,确定城市区域分割阈值,根据此阈值对Gabor平滑后的特征图进行分割获得城市区域;
步骤7,形态学综合消除噪声点和孤立建筑物并将城市区域连通为整体,从而获得遥感影像城市区域。
2.如权利要求1所述的一种基于Gabor特征显著性的遥感影像城市区域提取方法,其特征在于:步骤1中二维Gabor滤波器核函数的表达式为,
其中i为虚数单位,(x,y)为像素位置坐标;λ为正弦函数的波长;σ为高斯函数标准差;γ为高斯函数纵横比;θ为Gabor核函数的方向;φ为正弦波的初始相位,x'=xcosθ+ysinθ,y'=-xsinθ+ycosθ;波长、标准差、纵横比、方向和初始相位的确定方式如下,
步骤1.1,根据遥感影像的空间分辨率,确定Gabor滤波器的尺度参数,包括波长λ、标准差σ、纵横比γ和初始相位φ,其中,Gsd为遥感影像空间分辨率,γ固定取值1,φ固定为0°;
步骤1.2,以22.5°为采样间隔,将[0°,180°)区间划分出8个不同的方向作为方向参数θ的取值;
步骤1.3,确定滤波器窗口大小W,进一步包括,
步骤1.3.1,根据如下公式设置初始滤波窗口W0
步骤1.3.2,计算当前二维Gabor滤波器最外围一圈核函数值的绝对值之和S;
步骤1.3.3,若S<10-8,则以此时窗口的大小W为最终的采用值;否则,令W=W+2,重复1.3.2-1.3.3,直至满足条件。
3.如权利要求2所述的一种基于Gabor特征显著性的遥感影像城市区域提取方法,其特征在于:步骤3中多方向卷积结果综合的计算公式如下,
θ∈{0°,22.5°,45°,67.5°,90°,112.5°,135°,157.5°}
式中,gθ(x,y)表示像点(x,y)在θ方向上的Gabor特征值;表示对应像点综合了8个方向之后的特征值,它是一个非负值。
4.如权利要求3所述的一种基于Gabor特征显著性的遥感影像城市区域提取方法,其特征在于:步骤4中规则化的计算公式如下,
式中,表示像点(x,y)处规则化后的Gabor特征值;表示方向综合后的非负特征值;G(x,y)表示影像亮度值;f(i,j)表示二维Gabor滤波器在(i,j)处的核函数的值;W为滤波器窗口大小;即为滤波器权重之和。
5.如权利要求4所述的一种基于Gabor特征显著性的遥感影像城市区域提取方法,其特征在于:步骤5中二维高斯滤波器标准差的计算公式为,
σgauss=2σgabor
式中,σgabor为步骤1.1中计算出的Gabor滤波器标准差σ。
6.如权利要求5所述的一种基于Gabor特征显著性的遥感影像城市区域提取方法,其特征在于:步骤6中将经验阈值与Otsu自动阈值分割法相结合确定城市区域分割阈值,
步骤6.1,观察分析得到经验双阈值,低阈值TL=0.01,高阈值TH=0.03;
步骤6.2,像素亮度值低于TL的为非城区,高于TH的为城区;在TL与TH之间的像素进行Otsu阈值分割,得到分割阈值T,高于阈值T的像素认为是视觉显著区域,即城区,其余为背景。
7.如权利要求6所述的一种基于Gabor特征显著性的遥感影像城市区域提取方法,其特征在于:步骤7进一步包括如下子步骤,
步骤7.1,消除面积小于S1的目标,其中S1=(20σgabor)2,σgabor为步骤1.1中计算出的Gabor滤波器标准差σ;
步骤7.2,在步骤7.1的基础上执行尺度为S2形态学膨胀运算,其中S2=15σgabor
步骤7.3,在步骤7.2的基础上执行尺度为S3形态学腐蚀运算,其中S3=10σgabor
CN201810414247.6A 2018-05-03 2018-05-03 一种基于Gabor特征显著性的遥感影像城市区域提取方法 Active CN108596139B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810414247.6A CN108596139B (zh) 2018-05-03 2018-05-03 一种基于Gabor特征显著性的遥感影像城市区域提取方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810414247.6A CN108596139B (zh) 2018-05-03 2018-05-03 一种基于Gabor特征显著性的遥感影像城市区域提取方法

Publications (2)

Publication Number Publication Date
CN108596139A true CN108596139A (zh) 2018-09-28
CN108596139B CN108596139B (zh) 2020-05-08

Family

ID=63619579

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810414247.6A Active CN108596139B (zh) 2018-05-03 2018-05-03 一种基于Gabor特征显著性的遥感影像城市区域提取方法

Country Status (1)

Country Link
CN (1) CN108596139B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115049834A (zh) * 2022-08-15 2022-09-13 南通电博士自动化设备有限公司 基于夜间灯光数据与高分辨率影像的城市建成区提取方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102629378A (zh) * 2012-03-01 2012-08-08 西安电子科技大学 基于多特征融合的遥感图像变化检测方法
CN103020965A (zh) * 2012-11-29 2013-04-03 奇瑞汽车股份有限公司 一种基于显著性检测的前景分割方法
CN103824309A (zh) * 2014-03-12 2014-05-28 武汉大学 一种城市建成区边界自动提取方法
US9152881B2 (en) * 2012-09-13 2015-10-06 Los Alamos National Security, Llc Image fusion using sparse overcomplete feature dictionaries
CN105513060A (zh) * 2015-11-30 2016-04-20 中国人民解放军海军航空工程学院 一种视觉感知启发的高分辨率遥感图像分割方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102629378A (zh) * 2012-03-01 2012-08-08 西安电子科技大学 基于多特征融合的遥感图像变化检测方法
US9152881B2 (en) * 2012-09-13 2015-10-06 Los Alamos National Security, Llc Image fusion using sparse overcomplete feature dictionaries
CN103020965A (zh) * 2012-11-29 2013-04-03 奇瑞汽车股份有限公司 一种基于显著性检测的前景分割方法
CN103824309A (zh) * 2014-03-12 2014-05-28 武汉大学 一种城市建成区边界自动提取方法
CN105513060A (zh) * 2015-11-30 2016-04-20 中国人民解放军海军航空工程学院 一种视觉感知启发的高分辨率遥感图像分割方法

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
BERIL ET.AL: "Urban Area Detection Using Local Feature Points and Spatial Voting", 《IEEE GEOSCIENCE AND REMOTE SENSING LETTERS》 *
张义生: "居民地的提取与边缘优化", 《中国优秀硕士学位论文全文数据库 基础科学辑》 *
蔡新元 等: "基于最大Gabor响应的局部二元模式人脸特征提取方法", 《2010全国模式识别学术会议(CCPR2010)》 *
邵俊明: "基于感兴趣区域的图像语义获取方法研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
陈洪 等: "一种新的高分辨率遥感影像城区提取方法", 《武汉大学学报·信息科技版》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115049834A (zh) * 2022-08-15 2022-09-13 南通电博士自动化设备有限公司 基于夜间灯光数据与高分辨率影像的城市建成区提取方法
CN115049834B (zh) * 2022-08-15 2022-11-11 南通电博士自动化设备有限公司 基于夜间灯光数据与高分辨率影像的城市建成区提取方法

Also Published As

Publication number Publication date
CN108596139B (zh) 2020-05-08

Similar Documents

Publication Publication Date Title
Peng et al. Optical remote sensing image change detection based on attention mechanism and image difference
Ban et al. Spaceborne SAR data for global urban mapping at 30 m resolution using a robust urban extractor
Chen et al. Building detection in an urban area using lidar data and QuickBird imagery
CN105389799B (zh) 基于素描图与低秩分解的sar图像目标检测方法
CN111753682B (zh) 一种基于目标检测算法的吊装区域动态监控方法
CN105512622B (zh) 一种基于图分割和监督学习的可见光遥感图像海陆分割方法
CN111879292B (zh) 一种海岸线动态监控方法、监控设备及存储介质
CN105405132A (zh) 基于视觉反差和信息熵的sar图像人造目标检测方法
Fei et al. A novel visual attention method for target detection from SAR images
CN111597930A (zh) 一种基于遥感云平台的海岸线提取方法
CN116486102A (zh) 一种基于混合空间调制特征卷积神经网络的红外弱小目标检测方法
CN104050674B (zh) 一种显著性区域检测方法及装置
CN115546671A (zh) 一种基于多任务学习的无人机变化检测方法及其系统
CN117788296B (zh) 基于异构组合深度网络的红外遥感图像超分辨率重建方法
Dong et al. Mapping of small water bodies with integrated spatial information for time series images of optical remote sensing
CN114266947A (zh) 一种基于激光点云和可见光图像融合的分类方法及装置
CN108596139A (zh) 一种基于Gabor特征显著性的遥感影像城市区域提取方法
CN112150474A (zh) 一种水下气泡图像特征分割提取方法
CN108805186B (zh) 一种基于多维显著特征聚类的sar图像圆形油库检测方法
Sirmacek et al. Road detection from remotely sensed images using color features
CN112967286B (zh) 一种新增建设用地检测方法及装置
CN112766032A (zh) 一种基于多尺度和超像素分割的sar图像显著图生成方法
CN110211124B (zh) 一种基于MobileNetV2的红外成像结冰湖泊检测方法
Pan et al. A Novel Boundary Enhancement Network for Surface Water Mapping Based on Sentinel-2 MSI Data
Qi et al. Building change detection based on multi-scale filtering and grid partition

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant