CN109506627B - 一种基于rpc模型的卫星影像系统误差修正方法 - Google Patents

一种基于rpc模型的卫星影像系统误差修正方法 Download PDF

Info

Publication number
CN109506627B
CN109506627B CN201811289116.6A CN201811289116A CN109506627B CN 109506627 B CN109506627 B CN 109506627B CN 201811289116 A CN201811289116 A CN 201811289116A CN 109506627 B CN109506627 B CN 109506627B
Authority
CN
China
Prior art keywords
model
image
rpc
error compensation
system error
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811289116.6A
Other languages
English (en)
Other versions
CN109506627A (zh
Inventor
王冰冰
龙小祥
李庆鹏
崔林
喻文勇
徐生豪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Center for Resource Satellite Data and Applications CRESDA
Original Assignee
China Center for Resource Satellite Data and Applications CRESDA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Center for Resource Satellite Data and Applications CRESDA filed Critical China Center for Resource Satellite Data and Applications CRESDA
Priority to CN201811289116.6A priority Critical patent/CN109506627B/zh
Publication of CN109506627A publication Critical patent/CN109506627A/zh
Application granted granted Critical
Publication of CN109506627B publication Critical patent/CN109506627B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/04Interpretation of pictures

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

一种基于RPC模型的卫星影像系统误差修正方法,将系统误差的改善模型从严格几何成像模型推向广义的有理多项式模型,进而将影像系统误差的改善从预处理解算推向卫星影像产品阶段,本方法通过在RPC模型像方附加一个广义的误差补偿模型来构建系统误差的优化模型,然后利用一段时间内的重叠区域影像之间的相互约束条件和控制点的绝对约束条件来解算误差参数。

Description

一种基于RPC模型的卫星影像系统误差修正方法
技术领域
本发明涉及一种基于RPC模型的卫星影像系统误差修正方法,属于遥感影像处理领域。
背景技术
系统误差的修正是卫星影像几何处理的一个重要环节,是提高影像直接几何定位精度,改善影像之间的相对几何畸变的有效手段。在卫星影像的处理中通常采用在轨几何定标方法对其进行修正,但由于卫星的系统误差参数通常具有漂移性,在一段时间内会造成卫星影像的几何精度的下降。而由于我国可用的几何定标场数量有限,且定标场区域的无云影像获取的时效性很低,因此卫星实际在轨定标的频率通常较低,不足以修正具有时间漂移性质的系统误差,因此,传统的基于定标场不但成本较高,且时效性差,在一定程度上限制了卫星影像几何精度的进一步提升。
发明内容
本发明要解决的技术问题是:克服现有技术的不足,提供了一种基于RPC模型的卫星影像系统误差修正方法,将系统误差的改善模型从严格几何成像模型推向广义的有理多项式模型,进而将影像系统误差的改善从预处理解算推向卫星影像产品阶段,本方法通过在RPC模型像方附加一个广义的误差补偿模型来构建系统误差的优化模型,然后利用一段时间内的重叠区域影像之间的相互约束条件和控制点的绝对约束条件来解算误差参数。
本发明目的通过以下技术方案予以实现:
一种基于RPC模型的卫星影像系统误差修正方法,包括如下步骤:
步骤一、选取在某一个时间范围内,覆盖同一区域的多个影像;
步骤二、利用步骤一中所述区域的DOM和DEM数据,采用SIFT算子对步骤一中的影像进行控制点量测;
步骤三、构建三次多项式系统误差补偿模型,将该模型叠加在RPC模型的像方,获得三次多项式系统误差补偿优化模型;
步骤四、根据步骤二中所述的量测的控制点和步骤三中所述的三次多项式系统误差补偿模型,采用最小二乘分步迭代方法计算三次多项式系统误差补偿模型的系数;
步骤五、根据步骤四中计算的三次多项式系统误差补偿模型的系数,修正影像的RPC参数。
上述基于RPC模型的卫星影像系统误差修正方法,步骤一中所述的多个影像在垂直轨道方向的重叠度为40%~70%。
上述基于RPC模型的卫星影像系统误差修正方法,步骤三中所述三次多项式系统误差补偿模型为:
Figure BDA0001849705280000021
式中,Δl为行方向像点坐标的变化量,Δs为列方向像点坐标的变化量,a0、a1、a2、a3、b0、b1、b2、b3均为系统误差补偿模型的系数,s为相机视场内线阵CCD的连续探元号,s等于影像上像点坐标的列号。
上述基于RPC模型的卫星影像系统误差修正方法,步骤三中所述RPC模型为
Figure BDA0001849705280000022
式中,i为序号,li为第一序数,mi为第二序数,ni为第三序数,k为序数总和;Sni、Sdi、Lni、Ldi均为有理多项式系数;(U,V,W)和(x,y)分别表示正则化的地面点大地坐标和像点坐标。
上述基于RPC模型的卫星影像系统误差修正方法,利用解算的三次多项式系统误差补偿模型的参数和RPC模型,采用基于虚拟格网的最小二乘方法重新拟合每景影像的RPC模型参数,实现影像的RPC参数修正。
一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现如下步骤:
步骤一、选取在某一个时间范围内,覆盖同一区域的多个影像;
步骤二、利用步骤一中所述区域的DOM和DEM数据,采用SIFT算子对步骤一中的影像进行控制点量测;
步骤三、构建三次多项式系统误差补偿模型,将该模型叠加在RPC模型的像方,获得三次多项式系统误差补偿优化模型;
步骤四、根据步骤二中所述的量测的控制点和步骤三中所述的三次多项式系统误差补偿模型,采用最小二乘分步迭代方法计算三次多项式系统误差补偿模型的系数;
步骤五、根据步骤四中计算的三次多项式系统误差补偿模型的系数,修正影像的RPC参数。
上述计算机可读存储介质,步骤一中所述的多个影像在垂直轨道方向的重叠度为40%~70%。
上述计算机可读存储介质,步骤三中所述三次多项式系统误差补偿模型为:
Figure BDA0001849705280000031
式中,Δl为行方向像点坐标的变化量,Δs为列方向像点坐标的变化量,a0、a1、a2、a3、b0、b1、b2、b3均为系统误差补偿模型的系数,s为相机视场内线阵CCD的连续探元号,s等于影像上像点坐标的列号。
上述计算机可读存储介质,步骤三中所述RPC模型为:
Figure BDA0001849705280000032
式中,i为序号,li为第一序数,mi为第二序数,ni为第三序数,k为序数总和;Sni、Sdi、Lni、Ldi均为有理多项式系数;(U,V,W)和(x,y)分别表示正则化的地面点大地坐标和像点坐标。
上述计算机可读存储介质,利用解算的三次多项式系统误差补偿模型的参数和RPC模型,采用基于虚拟格网的最小二乘方法重新拟合每景影像的RPC模型参数,实现影像的RPC参数修正。
本发明相比于现有技术具有如下有益效果:
(1)本发明实现了在卫星影像初级产品修正系统误差的方法,将影像系统误差的改善从预处理解算推向卫星影像产品阶段;
(2)本发明可以随时实现卫星影像系统误差的修正,无需像传统方法那样考虑天气因素对于标定的影响,具有较高的时效性;
(3)本发明解决了传统的基于地面定标场的系统误差修正方法由于定标频次低造成的卫星影像精度差、区域影像几何精度一致性低的瓶颈问题;
(4)本发明的处理完全基于RPC模型,无需使用卫星的姿轨参数以及相机参数,实现更加简单,成本更低。
附图说明
图1为本发明实施例的流程图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合附图对本发明的实施方式作进一步详细描述。
基于RPC模型的卫星影像系统误差修正方法,包括如下步骤:
步骤一、选取在某一个时间范围内,覆盖同一区域的多个影像;多个影像在垂直轨道方向的重叠度为40%~70%。
步骤二、利用步骤一中所述区域的DOM和DEM数据,采用SIFT算子对步骤一中的影像进行控制点量测。
步骤三、构建三次多项式系统误差补偿模型,将该模型叠加在RPC模型的像方,获得三次多项式系统误差补偿优化模型。所述三次多项式系统误差补偿模型为:
Figure BDA0001849705280000051
式中,Δl为行方向像点坐标的变化量,Δs为列方向像点坐标的变化量,a0、a1、a2、a3、b0、b1、b2、b3均为系统误差补偿模型的系数,s为相机视场内线阵CCD的连续探元号,s等于影像上像点坐标的列号。
所述RPC模型为
Figure BDA0001849705280000052
式中,i为序号,li为第一序数,mi为第二序数,ni为第三序数,k为序数总和;Sni、Sdi、Lni、Ldi均为有理多项式系数;(U,V,W)和(x,y)分别表示正则化的地面点大地坐标和像点坐标。
步骤四、根据步骤二中所述的量测的控制点和步骤三中所述的三次多项式系统误差补偿模型,采用最小二乘分步迭代方法计算三次多项式系统误差补偿模型的系数。
步骤五、根据步骤四中计算的三次多项式系统误差补偿模型的系数,修正影像的RPC参数。利用解算的三次多项式系统误差补偿模型的参数和RPC模型,采用基于虚拟格网的最小二乘方法重新拟合每景影像的RPC模型参数,实现影像的RPC参数修正。
实施例:
以下结合附图和实施例详细说明本发明具体实施方式。参见图1,实施例的流程可以分为四个步骤,每个步骤实施的具体方法、公式以及流程如下:
1.对于需要修正系统误差的载荷,选取在一定时间范围内(一个月内)且覆盖同一区域,在垂轨方向具有一定重叠(重叠度在50%左右)的影像;
2.同名点的自动匹配与控制点量测。对于有重叠的影像,采用基于SIFT算子的匹配算法在垂轨方向较窄的一段区域内密集匹配一定数量的同名点,并在测区内量测一定数量的控制点,同名在影像上量测控制点的点位。
3.系统误差优化模型构建。系统误差优化模型是待附加参数的RPC模型,根据线阵推扫卫星影像成像模型的特点可知,一个广义的三次多项式模型可以有效的拟合卫星影像的所有系统误差,因此,这里构建的系统误差补偿模型如下:
Figure BDA0001849705280000061
其中,Δl为行方向像点坐标的变化量,Δs为列方向像点坐标的变化量,(ai,bi)(i=0,1,2,3)8个参数均为对应该载荷的系统误差补偿模型的系数,即为需要解算的参数,s为相机视场内线阵CCD的连续探元号,等于影像上像点坐标的列号。
系统误差优化应用的RPC模型为:
Figure BDA0001849705280000062
式中,Sni,Sdi,Lni,Ldi表示有理多项式系数(rational polynomialcoefficients,RPC),(U,V,W)和(x,y)分别表示正则化的地面点大地坐标和像点坐标,它们与非正则化的地面点大地坐标(Lat,Lon,Hei)和像点坐标(s,l)之间的关系如公式(2),其中,LAT_OFF、LAT_SCALE、LON_OFF、LON_SCALE、H_OFF和H_SCALE均为地面坐标的正则化参数;S_OFF、、L_OFF和L_SCALE均为影像坐标的正则化参数;i为序号,li为第一序数,mi为第二序数,ni为第三序数,k为序数总和。
Figure BDA0001849705280000071
将系统误差补偿模型附加在各景影像的RPC模型的像方构建该卫星载荷的系统误差优化模型,优化模型的公式为:
Figure BDA0001849705280000072
其中,Fx与Fy是根据RPC模型(2)和(3)得到的关于(Lat,Lon,Hei)的函数。
对于控制点像点而言,由于其对应的物方点坐标精确已知,因此,所构建的误差方程式中未知参数仅包括RPC模型像方附加的系统误差模型的系数,显然,对于RPC模型像方附加参数而言,此时式(4)为线性方程而无需进行线性化处理,其误差方程如式(5):
Figure BDA0001849705280000073
vl为行方向像点坐标的残差,vs为列方向像点坐标的残差,对于像方同名点而言,由于其对应的物方点坐标未知,因此,所构建的误差方程式中未知参数除了包括系统误差模型的系数外,还包括其对应的同名点物方平面坐标(Lat,Lon)。对于同名点物方平面坐标(Lat,Lon)而言,式为一非线性方程,需要对其赋予合适的初值(Lat,Lon)0并进行线性化处理,如式(6):
Figure BDA0001849705280000081
根据式(5)和式(6)对所有同名点像点及控制点像点分别构建观测误差方程,并统一写成如下矩阵形式:
V=Ax+Bt-L 权矩阵P (7)
其中,V代表像点坐标观测值残差向量;x=[dai dbi]T(i=0,1,2,3)代表系统误差模型的系数的改正数向量;t=[T1…Tj…Tn]T(j=1,2…n)代表各同名点物方坐标改正值向量,Tj=d(Lat,Lon)j代表第j个同名点的物方平面坐标改正数,n代表连接点个数;A、B则分别为对应未知数的偏导数系数矩阵,L和P分别为相应的常向量和权矩阵。
4.DEM辅助的系统误差参数稳健解算。由于影像的内部系统误差和高程误差之间具有很强的相关关系,当同名点对应的物方坐标的高程与误差补偿模型参数同时作为未知数时,势必造成参数优化模型的秩亏。因此,在误差参数解算时引入附加的高程约束来改善优化模型的状态,在每次迭代解算中,通过将从参考数字高程模型(DEM)中内插的高程值H作为同名点物方高程真值引入到模型中来优化模型状态,从而保证参数解算的精度和稳健性。
采用最小二乘方法迭代解算系统误差补偿参数,根据最小二乘平差原理,对观测误差方程(7)进行法化,可得到法方程如式所示:
Figure BDA0001849705280000082
当匹配的同名像点较多时,上式左边的法方程系数矩阵阶数较高,直接通过对其进行求逆来解算各项未知参数,不论是内存开销还是解算效率上都无法满足要求。本发明中采用消元改化法方程的策略来进行平差解算,考虑连接点物方平面坐标t的维数通常远高于影像附加参数x,可以先消去连接点坐标t,构建仅包含附加模型参数x的改化法方程,如下式所示:
[ATPA-ATPB(BTPB)-1BTPA]x=ATPL-ATPB(BTPB)-1BTPL (9)
基于式(9)即可算系统误差参数的改正值,在每次迭代解算后根据改正数更新系统误差参数,直到解算的改正值小于限差时,解算结束。
5.根据误差补偿参数优化影像的RPC参数。利用解算的误差补偿模型参数和影像的RPC模型采用基于虚拟格网的最小二乘方法重新拟合每景影像的RPC模型参数,基于虚拟格网的RPC模型参数拟合方式为现有技术,本发明不予赘述。
本发明说明书中未作详细描述的内容属本领域技术人员的公知技术。

Claims (4)

1.一种基于RPC模型的卫星影像系统误差修正方法,其特征在于:包括如下步骤:
步骤一、选取在某一个时间范围内,覆盖同一区域的多个影像;
步骤二、利用步骤一中所述区域的DOM和DEM数据,采用SIFT算子对步骤一中的影像进行控制点量测;
步骤三、构建三次多项式系统误差补偿模型,将该模型叠加在RPC模型的像方,获得三次多项式系统误差补偿优化模型;
步骤三中所述三次多项式系统误差补偿模型为:
Figure FDA0002835463900000011
式中,Δl为行方向像点坐标的变化量,Δs为列方向像点坐标的变化量,a0、a1、a2、a3、b0、b1、b2、b3均为系统误差补偿模型的系数,s为相机视场内线阵CCD的连续探元号,s等于影像上像点坐标的列号;
步骤三中所述RPC模型为
Figure FDA0002835463900000012
式中,i为序号,li为第一序数,mi为第二序数,ni为第三序数,k为序数总和;Sni、Sdi、Lni、Ldi均为有理多项式系数;(U,V,W)和(x,y)分别表示正则化的地面点大地坐标和像点坐标;
步骤四、根据步骤二中所述的量测的控制点和步骤三中所述的三次多项式系统误差补偿优化模型,采用最小二乘分步迭代方法计算三次多项式系统误差补偿优化模型的系数;
步骤五、根据步骤四中计算的三次多项式系统误差补偿优化模型的系数,修正影像的RPC参数;具体为:利用解算的三次多项式系统误差补偿优化模型的系数和RPC模型,采用基于虚拟格网的最小二乘方法重新拟合每景影像的RPC模型参数,实现影像的RPC参数修正。
2.根据权利要求1所述的一种基于RPC模型的卫星影像系统误差修正方法,其特征在于:步骤一中所述的多个影像在垂直轨道方向的重叠度为40%~70%。
3.一种计算机可读存储介质,其上存储有计算机程序,其特征在于:该程序被处理器执行时实现如下步骤:
步骤一、选取在某一个时间范围内,覆盖同一区域的多个影像;
步骤二、利用步骤一中所述区域的DOM和DEM数据,采用SIFT算子对步骤一中的影像进行控制点量测;
步骤三、构建三次多项式系统误差补偿模型,将该模型叠加在RPC模型的像方,获得三次多项式系统误差补偿优化模型;
步骤三中所述三次多项式系统误差补偿模型为:
Figure FDA0002835463900000021
式中,Δl为行方向像点坐标的变化量,Δs为列方向像点坐标的变化量,a0、a1、a2、a3、b0、b1、b2、b3均为系统误差补偿模型的系数,s为相机视场内线阵CCD的连续探元号,s等于影像上像点坐标的列号;
步骤三中所述RPC模型为
Figure FDA0002835463900000022
式中,i为序号,li为第一序数,mi为第二序数,ni为第三序数,k为序数总和;Sni、Sdi、Lni、Ldi均为有理多项式系数;(U,V,W)和(x,y)分别表示正则化的地面点大地坐标和像点坐标;
步骤四、根据步骤二中所述的量测的控制点和步骤三中所述的三次多项式系统误差补偿优化模型,采用最小二乘分步迭代方法计算三次多项式系统误差补偿优化模型的系数;
步骤五、根据步骤四中计算的三次多项式系统误差补偿优化模型的系数,修正影像的RPC参数;具体为:利用解算的三次多项式系统误差补偿优化模型的系数和RPC模型,采用基于虚拟格网的最小二乘方法重新拟合每景影像的RPC模型参数,实现影像的RPC参数修正。
4.根据权利要求3所述的一种计算机可读存储介质,其特征在于:步骤一中所述的多个影像在垂直轨道方向的重叠度为40%~70%。
CN201811289116.6A 2018-10-31 2018-10-31 一种基于rpc模型的卫星影像系统误差修正方法 Active CN109506627B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811289116.6A CN109506627B (zh) 2018-10-31 2018-10-31 一种基于rpc模型的卫星影像系统误差修正方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811289116.6A CN109506627B (zh) 2018-10-31 2018-10-31 一种基于rpc模型的卫星影像系统误差修正方法

Publications (2)

Publication Number Publication Date
CN109506627A CN109506627A (zh) 2019-03-22
CN109506627B true CN109506627B (zh) 2021-05-07

Family

ID=65747299

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811289116.6A Active CN109506627B (zh) 2018-10-31 2018-10-31 一种基于rpc模型的卫星影像系统误差修正方法

Country Status (1)

Country Link
CN (1) CN109506627B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6719684B1 (ja) * 2019-04-11 2020-07-08 三菱電機株式会社 数値制御装置
CN111722922A (zh) * 2020-05-25 2020-09-29 同济大学 一种gpu并行加速的卫星影像区域网平差方法和装置
CN112258422B (zh) * 2020-08-17 2023-04-28 中国人民解放军61540部队 立体影像有理多项式参数(rpc)自动精化方法
CN112561805A (zh) * 2020-11-12 2021-03-26 中国资源卫星应用中心 一种几何粗校正影像的校正方法及装置
CN114998399B (zh) * 2022-05-20 2023-04-11 中国人民解放军61540部队 一种异源光学遥感卫星影像立体像对预处理方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101216555B (zh) * 2007-12-27 2011-02-16 武汉大学 Rpc模型参数提取方法和几何纠正方法
CN102168972B (zh) * 2010-12-15 2012-10-03 中国资源卫星应用中心 一种基于rpc的三线阵立体卫星区域网平差改进及检校方法
US9709395B2 (en) * 2013-04-19 2017-07-18 Vricon Systems Aktiebolag Method and system for analyzing images from satellites
US9903719B2 (en) * 2013-09-03 2018-02-27 Litel Instruments System and method for advanced navigation
CN105761228B (zh) * 2016-03-09 2019-03-05 中国测绘科学研究院 通过微修正rpc参数实现卫星遥感影像高精度几何纠正方法
CN107316280B (zh) * 2017-05-24 2019-10-11 三亚中科遥感研究所 离岛卫星影像rpc模型高精度几何定位方法

Also Published As

Publication number Publication date
CN109506627A (zh) 2019-03-22

Similar Documents

Publication Publication Date Title
CN109506627B (zh) 一种基于rpc模型的卫星影像系统误差修正方法
CN109903352B (zh) 一种卫星遥感影像大区域无缝正射影像制作方法
CN110388898B (zh) 构建虚拟控制点约束的多源多重覆盖遥感影像平差方法
KR101965965B1 (ko) 위성영상과 제공 rpc로부터 제작된 수치표고모델의 자동 오차보정 방법
CN112017224B (zh) Sar数据区域网平差处理方法和系统
CN109709551B (zh) 一种星载合成孔径雷达影像的区域网平面平差方法
CN109977344B (zh) 一种星载夜光遥感影像的区域网平差方法
CN111174753B (zh) 基于有理函数模型的光学影像与激光测高数据平差方法
CN111724465B (zh) 基于平面约束优选虚拟控制点的卫星影像平差方法及装置
CN101442608A (zh) 一种对ccd相机的相对辐射校正进行改进的方法
CN107564057B (zh) 顾及大气折光校正的高轨面阵光学卫星在轨几何标定方法
CN113514829A (zh) 面向InSAR的初始DSM的区域网平差方法
CN108562900B (zh) 一种基于高程校正的sar图像几何配准方法
CN112070891B (zh) 数字地面模型作为三维控制的影像区域网平差方法及系统
CN111003214A (zh) 基于云控制的国产陆地观测卫星姿轨精化方法
CN111508028A (zh) 光学立体测绘卫星相机的自主在轨几何定标方法及系统
CN113899386B (zh) 基于立体基准网的多源光学卫星遥感影像协同区域网平差方法及系统
CN109188483B (zh) 一种时序化高精度外方位元素自动定标方法
CN105547254A (zh) 基于法方程快速构建的超大规模区域网平差方法及系统
CN105510901B (zh) 基于多定标场的光学卫星影像时变误差定标方法及系统
CN113096047B (zh) 广义云驱动与辐射协同遥感影像几何精校正方法及系统
CN117030620A (zh) 一种基于多源光学遥感卫星影像区域网平差的方法及装置
CN109579796B (zh) 一种投影后影像的区域网平差方法
CN113324527B (zh) 一种同轨激光测高点与三线阵立体影像联合测绘处理方法
CN109143295B (zh) 一种数字化几何定标场和gcp相结合的内方位元素定标方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant