CN112153369A - 一种图像拍摄同步性检测方法 - Google Patents
一种图像拍摄同步性检测方法 Download PDFInfo
- Publication number
- CN112153369A CN112153369A CN202010812206.XA CN202010812206A CN112153369A CN 112153369 A CN112153369 A CN 112153369A CN 202010812206 A CN202010812206 A CN 202010812206A CN 112153369 A CN112153369 A CN 112153369A
- Authority
- CN
- China
- Prior art keywords
- camera
- shooting
- cameras
- error
- exposure time
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 31
- 230000001360 synchronised effect Effects 0.000 claims abstract description 34
- 238000012360 testing method Methods 0.000 claims abstract description 30
- 238000005259 measurement Methods 0.000 claims description 30
- 238000000034 method Methods 0.000 abstract description 10
- 238000003384 imaging method Methods 0.000 abstract description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N17/00—Diagnosis, testing or measuring for television systems or their details
- H04N17/002—Diagnosis, testing or measuring for television systems or their details for television cameras
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/73—Circuitry for compensating brightness variation in the scene by influencing the exposure time
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- General Health & Medical Sciences (AREA)
- Studio Devices (AREA)
Abstract
本发明涉及数字成像技术,具体涉及一种图像拍摄同步性检测方法,以解决现有相机图像拍摄同步性检测精度低、检测方法复杂且检测范围具有局限性的问题。本发明所采用的技术方案为;一种图像拍摄同步性检测方法,首先,对相机同步拍摄误差的粗测,其次,设定拍摄目标的频闪周期、频闪脉宽和1号相机和2号相机的曝光时间,再次,对1号相机和2号相机的误差测试,当2个相机同一帧拍摄到的拍摄目标状态相同,得到粗侧误差,最后,将粗侧误差误差进行迭代测试,找到最终的相机同步拍摄误差。
Description
技术领域
本发明涉及数字成像技术,具体涉及一种图像拍摄同步性检测方法。
背景技术
同步拍摄是在摄影测量中,两台或多台摄影机在同一瞬间曝光的摄影方式,同步拍摄检测是用于在多个相机同步拍摄时,检测各个相机之间同步拍摄精度的方法。
秒表检测法是常用的同步拍摄检测方法之一,两个或多个相机同步拍摄秒表,通过各个相机同步拍摄的画面中秒表显示的数值,判断相机之间的同步拍摄误差。
秒表分为机械秒表和数字秒表两种类型,若拍摄目标是机械秒表,其精度最高为0.1秒,若拍摄目标是数字秒表,其精度最高为0.01秒,因此采用秒表检测法最高能测量的同步误差为0.01秒。一般照相机的最小曝光时间为0.00025s,摄像机的最小曝光时间为0.001s,对于同步要求高的应用,例如在3D拍摄、全景拍摄时,后处理需要多幅图像拼接,同步误差要求低于最小曝光时间,此时秒表检测法最高精度只能到0.01秒,误差太大,无法满足检测精度低于照相机的最小曝光时间0.00025秒或摄像机的最小曝光时间0.001秒的检测要求。
相机行场同步信号测量法也是同步拍摄检测方法之一,使用此方法时,需要在各个相机的内部程序主控模块中,预先设置相同的同步寄存器初始值,主控模块将控制指令发送至同步检测模块后,同步检测模块分别接收各个相机的行场同步信号之间的偏差值,其中场同步信号的偏差即为相机拍摄同步偏差。
采用相机行场同步信号测量法时,需要在相机内部程序中增加同步检测模块,重新编写相机内部逻辑程序,使用这种方法时需要在相机研制时加入检测程序才能进行相机的同步误差检测,对于非自研的相机将无法检测,使用局限性很大。
发明内容
本发明提供了一种图像拍摄同步性检测方法,用以克服现有相机图像拍摄同步性检测精度低,或者检测方法复杂且检测范围具有局限性的问题。
本发明所采用的技术方案为:一种图像拍摄同步性检测方法,包括以下步骤:
1)相机同步拍摄误差的粗测
待测的1号相机和2号相机同时对秒表中的数字或指针进行拍摄,则相机的初始粗测误差ε0即为秒表中图像的时刻数值差;
2)拍摄目标、1号相机和2号相机的参数设置
2.1)拍摄目标的频闪周期设置为Tn,频闪脉宽设置为(1/(x+1))Tn;
式中:
n为步骤1)之后的同步拍摄次数,n=1、2、3……;
x为拍摄目标的个数,且x≥3;
当拍摄目标的个数x为奇数时,(x+1)ε0>Tn≥2ε0;当拍摄目标的个数x为偶数时,(x+1)ε0>Tn≥(2x+2)/(x+2)ε0;
2.2)当拍摄目标的个数x为奇数时,1号相机和2号相机的曝光时间En均设置为0.5Tn;当拍摄目标的个数x为偶数时,1号相机和2号相机的曝光时间En均设置为(x/(2x+2))Tn;
3)1号相机和2号相机的误差测试
拍摄目标的频闪脉宽以及1号相机和2号相机的曝光时间设置完成后,进行同步拍摄;
若2个相机同一帧拍摄到的x个拍摄目标状态相同,取(1/(x+1))Tn作为相机的粗测误差εn;
4)1号相机和2号相机的迭代测试
4.1)将步骤3)中的粗测误差εn代替步骤2.1)中的初始粗测误差ε0,按照步骤2)重新设置拍摄目标的频闪周期和脉宽、相机曝光时间,重复步骤3),若2个相机同一帧拍摄到的x个拍摄目标状态相同,则更新相机的粗测误差εn;
4.2)重复步骤4.1),当满足以下任一情况时,测试停止:
①以εn作为粗测误差进行测量时,2个相机拍摄到的拍摄目标状态不同,则认为相机同步拍摄误差为εn,测试停止;
②以εn作为粗测误差进行测量时,若曝光时间En为待测2个相机的最小曝光时间,此次测试后测试停止;若曝光时间En小于两个待测相机的最小曝光时间,不进行此次测试,以上次测试的粗测误差εn作为相机同步拍摄误差。
进一步地,以εn作为粗测误差进行测量时,将拍摄目标频闪周期设置为Tn,将2个相机曝光时间设置为En:
当拍摄目标的个数x为奇数时,(x+1)εn>Tn≥2εn,En为0.5Tn;
当拍摄目标的个数x为偶数时,(x+1)εn>Tn≥(2x+2)/(x+2)εn,En为(x/(2x+2))Tn。
进一步地,步骤②中,2个相机的最小曝光时间为0.00025s-0.01s。
进一步地,步骤②中,当曝光时间En为待测2个相机的最小曝光时间时,若2个相机拍摄到的拍摄目标状态相同,相机同步拍摄误差小于待测2个相机的最小曝光时间。
进一步地,步骤2)中,拍摄目标为LED灯,LED灯具有上升时间短和亮度高的优势,提高了拍摄目标亮、灭这两种状态在图像中的辨识度,LED灯可设置为3个,LED灯由LED控制器发出脉冲信号控制。
本发明与现有技术相比具有以下有益效果。
本发明采用的一种图像拍摄同步性检测方法,操作简便,通过相机对拍摄目标的迭代测量可得到相机同步拍摄误差,得到的相机同步拍摄误差低于相机的最小曝光时间0.00025秒或0.001秒,提高了图像拍摄同步性检测精度,同时该方法不需要改变相机内部程序,可直接应用到各类相机中,使用范围更加广泛。
附图说明
图1为本发明一种图像拍摄同步性检测方法实施例1中的相机与拍摄目标位置结构示意图。
图2为本发明一种图像拍摄同步性检测方法实施例1中的LED灯时序控制图。
具体实施方式
下面将结合本发明的实施例和附图,对本发明的技术方案进行清楚、完整地描述,显然,所描述的实施例并非对本发明的限制。
本实施例中的一种图像拍摄同步性检测方法,包括以下步骤:
1)相机同步拍摄误差的粗测
待测的1号相机和2号相机同时对秒表中的数字或指针进行拍摄,则相机的初始粗测误差ε0即为秒表中图像的时刻数值差;
2)设置检测系统
如图1所示,拍摄目标设定为3个LED灯,3个LED灯分别为LED1、LED2和LED3,并将3个LED灯均匀分布设置在1号相机和2号相机的正前方,使2个相机均可拍摄到LED灯的完整图像,3个LED灯由LED控制器发出3路脉冲信号控制;
3)拍摄目标、1号相机和2号相机的参数设置
3.1)3个LED灯的频闪周期均设置为T1,频闪脉宽均设置为0.25T1;
频闪周期T1为:4ε0>T1≥2ε0;如图2所示,3个LED灯在一个频闪周期T1内,从LED1到LED3依次点亮,点亮时间为0.25T1,一个频闪周期T1内最后的0.25T1时间3个LED全灭。
3.2)1号相机和2号相机的曝光时间E1均设置为0.5T1,以此曝光时间E1能拍摄到的LED灯共有4种状态,如表1所示,表1为本发明一种图像拍摄同步性检测方法实施例1中的LED灯状态结果列表,其中t为起始拍摄时刻。时间每过T1这4种状态循环一次,在一个连续的T1时间段内,2个相机的起始拍摄间隔大于0.25T1时,拍摄到的3个LED灯状态均不同。
根据上述频闪周期T1的计算公式:4ε0>T1≥2ε0,可得0.5T1≥ε0,,即在0.5T1时间内,所有的相机都能开始同1帧拍摄,开始拍摄后相机的曝光时间为0.5T1,因此在T1时间内,所有的相机都能进行1帧完整的拍摄;
4)1号相机和2号相机的误差测试
LED灯的频闪脉宽以及1号相机和2号相机的曝光时间设置完成后,进行同步拍摄;
LED灯的状态每过T1时间重复一次,而在T1时间内所有相机已经完成了1次拍摄,且在任意T1时间段内,2个相机起始拍摄间隔大于0.25T1时,每增加0.25T1,拍摄到的LED灯状态变化一次,且不重复,因此若2个相机同一帧拍摄到的LED灯状态相同,其相机的粗测误差ε1≤0.25T1,即2个相机的同步误差为ε1≤0.25T1,由频闪周期T1的计算公式4ε0>T1≥2ε0,计算可得0.25T1<ε0,即ε1≤0.25T1<ε0,因此若2个相机同一帧拍摄到的3个LED灯状态相同,取ε1的最大值0.25T1作为相机的粗测误差ε0;
5)1号相机和2号相机的迭代测试
5.1)将步骤4)中的粗测误差ε1代替步骤1)中的初始粗测误差ε0,按照步骤3)重新设置LED灯的频闪周期T2和脉宽0.25T2、相机曝光时间0.5T2,重复步骤4),若2个相机同一帧拍摄到的3个LED灯状态相同,则更新相机的粗测误差为ε2,则2个相机的粗测误差ε2≤0.25T2<ε1,取ε2的最大值0.25T2为此次测量的2个相机同步拍摄误差;
5.2)重复步骤5.1),以上一步的同步误差测试结果为粗测误差,迭代测试2个相机的同步误差是否满足更低的误差值,当满足以下任一情况时,测试停止:
①以εn作为粗测误差进行测量时,2个相机拍摄到的拍摄目标状态不同,则认为相机同步拍摄误差为εn,测试停止,其中n为步骤1)之后的同步拍摄次数,n=1、2、3……;
②以εn作为粗测误差进行测量时,若曝光时间En为待测2个相机的最小曝光时间,此次测试后测试停止;若曝光时间En小于两个待测相机的最小曝光时间,不进行此次测试,以上次测试的粗测误差εn作为相机同步拍摄误差。
当以εn作为粗测误差进行测量时,将拍摄目标频闪周期设置为Tn,将2个相机曝光时间设置为En:
当拍摄目标的个数x为奇数时,(x+1)εn>Tn≥2εn,En为0.5Tn;
当拍摄目标的个数x为偶数时,(x+1)εn>Tn≥(2x+2)/(x+2)εn,En为(x/(2x+2))Tn。
在步骤②中,2个相机的最小曝光时间为0.00025s-0.01s。
在步骤②中,当曝光时间En为待测2个相机的最小曝光时间时,若2个相机拍摄到的拍摄目标状态相同,相机同步拍摄误差小于待测2个相机的最小曝光时间。
在步骤2)中,拍摄目标为LED灯,LED灯具有上升时间短和亮度高的优势,提高了拍摄目标亮、灭这两种状态在图像中的辨识度,LED灯可设置为3个,LED灯由LED控制器发出脉冲信号控制。
表1
以上所述仅为本发明的实施例,并非对本发明保护范围的限制,凡是利用本发明说明书及附图内容所作的等效结构变换,或直接或间接运用在其他相关的技术领域,均包括在本发明的专利保护范围内。
Claims (6)
1.一种图像拍摄同步性检测方法,其特征在于,包括以下步骤:
1)相机同步拍摄误差的粗测
待测的1号相机和2号相机同时对秒表中的数字或指针进行拍摄,则相机的初始粗测误差ε0即为秒表中图像的时刻数值差;
2)拍摄目标、1号相机和2号相机的参数设置
2.1)拍摄目标的频闪周期设置为Tn,频闪脉宽设置为(1/(x+1))Tn;
式中:
n为步骤1)之后的同步拍摄次数,n=1、2、3……;
x为拍摄目标的个数,且x≥3;
当拍摄目标的个数x为奇数时,(x+1)ε0>Tn≥2ε0;当拍摄目标的个数x为偶数时,(x+1)ε0>Tn≥(2x+2)/(x+2)ε0;
2.2)当拍摄目标的个数x为奇数时,1号相机和2号相机的曝光时间En均设置为0.5Tn;当拍摄目标的个数x为偶数时,1号相机和2号相机的曝光时间En均设置为(x/(2x+2))Tn;
3)1号相机和2号相机的误差测试
拍摄目标的频闪脉宽以及1号相机和2号相机的曝光时间设置完成后,进行同步拍摄;
若2个相机同一帧拍摄到的x个拍摄目标状态相同,取(1/(x+1))Tn作为相机的粗测误差εn;
4)1号相机和2号相机的迭代测试
4.1)将步骤3)中的粗测误差εn代替步骤1)中的初始粗测误差ε0,按照步骤2)重新设置拍摄目标的频闪周期和脉宽、相机曝光时间,重复步骤3),若2个相机同一帧拍摄到的x个拍摄目标状态相同,则更新相机的粗测误差εn;
4.2)重复步骤4.1),当满足以下任一情况时,测试停止:
①以εn作为粗测误差进行测量时,2个相机拍摄到的拍摄目标状态不同,则认为相机同步拍摄误差为εn,测试停止;
②以εn作为粗测误差进行测量时,若曝光时间En为待测2个相机的最小曝光时间,此次测试后测试停止;若曝光时间En小于两个待测相机的最小曝光时间,不进行此次测试,以上次测试的粗测误差εn作为相机同步拍摄误差。
2.根据权利要求1所述的一种图像拍摄同步性检测方法,其特征在于:步骤②中,2个相机的最小曝光时间为0.00025s-0.01s。
3.根据权利要求2所述的一种图像拍摄同步性检测方法,其特征在于:步骤②中,当曝光时间En为待测2个相机的最小曝光时间时,若2个相机拍摄到的拍摄目标状态相同,相机同步拍摄误差小于待测2个相机的最小曝光时间。
4.根据权利要求1至3任一权利要求所述的一种图像拍摄同步性检测方法,其特征在于:步骤2)中,拍摄目标为LED灯。
5.根据权利要求4所述的一种图像拍摄同步性检测方法,其特征在于:步骤2)中,LED灯由LED控制器发出脉冲信号控制。
6.根据权利要求5所述的一种图像拍摄同步性检测方法,其特征在于:步骤2)中,LED灯为3个。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010812206.XA CN112153369B (zh) | 2020-08-13 | 2020-08-13 | 一种图像拍摄同步性检测方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010812206.XA CN112153369B (zh) | 2020-08-13 | 2020-08-13 | 一种图像拍摄同步性检测方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112153369A true CN112153369A (zh) | 2020-12-29 |
CN112153369B CN112153369B (zh) | 2021-09-14 |
Family
ID=73888118
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010812206.XA Active CN112153369B (zh) | 2020-08-13 | 2020-08-13 | 一种图像拍摄同步性检测方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112153369B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113518219A (zh) * | 2021-07-09 | 2021-10-19 | 中国人民解放军63660部队 | 一种基于标校灯的相机曝光时间偏差检测方法 |
CN114007062A (zh) * | 2021-10-29 | 2022-02-01 | 上海商汤临港智能科技有限公司 | 一种测量系统、方法、装置、计算机设备及存储介质 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101572828A (zh) * | 2009-05-20 | 2009-11-04 | 长春理工大学 | 基于gpu的相机/摄像机实时畸变校正方法 |
US20100177176A1 (en) * | 2009-01-15 | 2010-07-15 | Alverix, Inc. | Video-frame data receiver with low frame capture rate |
CN103888758A (zh) * | 2012-12-19 | 2014-06-25 | 展讯通信(上海)有限公司 | 成像系统及其调试装置、调试方法和故障定位方法 |
CN107040727A (zh) * | 2017-05-11 | 2017-08-11 | 成都希格玛光电科技有限公司 | 摄像机曝光方法及装置 |
CN108366254A (zh) * | 2018-01-22 | 2018-08-03 | 浙江舜宇智能光学技术有限公司 | 多路摄像头视频同步评测系统及方法 |
US20190246026A1 (en) * | 2018-02-07 | 2019-08-08 | Pixart Imaging Inc. | Image sensor device and method capable of detecting actual temperature range in which the image sensor device is being operated without using accurate temperature sensor |
CN110446034A (zh) * | 2019-08-29 | 2019-11-12 | 深圳市圆周率软件科技有限责任公司 | 一种测试全景相机多镜头帧同步系统 |
CN110446033A (zh) * | 2019-08-29 | 2019-11-12 | 深圳市圆周率软件科技有限责任公司 | 一种测试全景相机多镜头帧同步系统 |
CN110971892A (zh) * | 2019-11-27 | 2020-04-07 | 深圳市派科斯科技有限公司 | 曝光延时测量方法、装置及存储介质 |
CN111405272A (zh) * | 2020-02-23 | 2020-07-10 | 中国科学院西安光学精密机械研究所 | 一种相机丢帧及重复帧检测装置及方法 |
-
2020
- 2020-08-13 CN CN202010812206.XA patent/CN112153369B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20100177176A1 (en) * | 2009-01-15 | 2010-07-15 | Alverix, Inc. | Video-frame data receiver with low frame capture rate |
CN101572828A (zh) * | 2009-05-20 | 2009-11-04 | 长春理工大学 | 基于gpu的相机/摄像机实时畸变校正方法 |
CN103888758A (zh) * | 2012-12-19 | 2014-06-25 | 展讯通信(上海)有限公司 | 成像系统及其调试装置、调试方法和故障定位方法 |
CN107040727A (zh) * | 2017-05-11 | 2017-08-11 | 成都希格玛光电科技有限公司 | 摄像机曝光方法及装置 |
CN108366254A (zh) * | 2018-01-22 | 2018-08-03 | 浙江舜宇智能光学技术有限公司 | 多路摄像头视频同步评测系统及方法 |
US20190246026A1 (en) * | 2018-02-07 | 2019-08-08 | Pixart Imaging Inc. | Image sensor device and method capable of detecting actual temperature range in which the image sensor device is being operated without using accurate temperature sensor |
CN110446034A (zh) * | 2019-08-29 | 2019-11-12 | 深圳市圆周率软件科技有限责任公司 | 一种测试全景相机多镜头帧同步系统 |
CN110446033A (zh) * | 2019-08-29 | 2019-11-12 | 深圳市圆周率软件科技有限责任公司 | 一种测试全景相机多镜头帧同步系统 |
CN110971892A (zh) * | 2019-11-27 | 2020-04-07 | 深圳市派科斯科技有限公司 | 曝光延时测量方法、装置及存储介质 |
CN111405272A (zh) * | 2020-02-23 | 2020-07-10 | 中国科学院西安光学精密机械研究所 | 一种相机丢帧及重复帧检测装置及方法 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113518219A (zh) * | 2021-07-09 | 2021-10-19 | 中国人民解放军63660部队 | 一种基于标校灯的相机曝光时间偏差检测方法 |
CN114007062A (zh) * | 2021-10-29 | 2022-02-01 | 上海商汤临港智能科技有限公司 | 一种测量系统、方法、装置、计算机设备及存储介质 |
Also Published As
Publication number | Publication date |
---|---|
CN112153369B (zh) | 2021-09-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112153369B (zh) | 一种图像拍摄同步性检测方法 | |
CN207730423U (zh) | 一种具有可见光和红外光的双摄模组光轴检测系统 | |
WO2013039340A2 (ko) | 평판 패널 검사방법 | |
CN110971892B (zh) | 曝光延时测量方法、装置及存储介质 | |
CN103676453A (zh) | 一种相机快门延时时间测量方法及其装置 | |
CN110099267A (zh) | 梯形校正系统、方法以及投影仪 | |
CN111556224B (zh) | 多相机同步校准方法、装置及系统 | |
CN108318053B (zh) | 一种空间光学遥感相机成像时刻标定精度测量方法及系统 | |
CN108986721B (zh) | 一种用于显示面板检测的检测图形生成方法 | |
CN113936579B (zh) | 一种lcd显示屏闪烁值的测量方法及相关装置 | |
CN109253992A (zh) | 一种等离子体荧光寿命测量装置及方法 | |
CN107063638B (zh) | 一种基于模组化高精度显微镜系统的测试装置 | |
KR20180038857A (ko) | 외관 검사 장치 및 그 광학계 자동 캘리브레이션 방법 | |
CN112362033A (zh) | 一种航空遥感相机影像的质检方法 | |
EP1628495A1 (en) | Multi-processing of a picture to speed up calculation for this picture | |
CN218162686U (zh) | 一种测量曝光时间及帧率的装置 | |
CN113518219B (zh) | 一种基于标校灯的相机曝光时间偏差检测方法 | |
CN110933397A (zh) | 一种高精度成像延时测试装置及方法 | |
US8605270B2 (en) | Computing device and precision testing method of optical lens using the computing device | |
CN104994309A (zh) | 一种消除相机光斑的方法及系统 | |
CN112539831B (zh) | 面阵探测器的标定方法、系统及积分球均匀性标定方法 | |
CN117528067B (zh) | 一种工业相机曝光测试设备及测试方法 | |
CN107749937A (zh) | 平列式彩色线阵ccd的自适应矫正算法及系统 | |
CN107911624B (zh) | 一种多摄像头模组的画质补偿方法 | |
KR20000008598A (ko) | 박막 액정 표시장치의 플릭커 검사장치 및 이에 적합한 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |