CN109073777A - 一种隐身物体探测系统和方法 - Google Patents

一种隐身物体探测系统和方法 Download PDF

Info

Publication number
CN109073777A
CN109073777A CN201880001201.XA CN201880001201A CN109073777A CN 109073777 A CN109073777 A CN 109073777A CN 201880001201 A CN201880001201 A CN 201880001201A CN 109073777 A CN109073777 A CN 109073777A
Authority
CN
China
Prior art keywords
information
wavefront
incident light
reconstruct
array
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880001201.XA
Other languages
English (en)
Other versions
CN109073777B (zh
Inventor
王星泽
刘楚明
舒远
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hop Edge Technology (shenzhen) Co Ltd
Original Assignee
Hop Edge Technology (shenzhen) Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hop Edge Technology (shenzhen) Co Ltd filed Critical Hop Edge Technology (shenzhen) Co Ltd
Publication of CN109073777A publication Critical patent/CN109073777A/zh
Application granted granted Critical
Publication of CN109073777B publication Critical patent/CN109073777B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01VGEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
    • G01V8/00Prospecting or detecting by optical means
    • G01V8/10Detecting, e.g. by using light barriers

Landscapes

  • Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • General Life Sciences & Earth Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Geophysics (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Testing Of Optical Devices Or Fibers (AREA)
  • Eye Examination Apparatus (AREA)

Abstract

本申请提供了一种隐身物体探测系统和方法,所属系统包括:分束聚焦阵列,图像传感阵列,和数据处理模块;分束聚焦阵列,用于对待测入射光进行分束,并将分束光分别聚焦到图像传感阵列对应的图像传感单元上;图像传感阵列的图像传感单元将接收到的光束信息转换成对应的电信息;数据处理模块,用于根据电信息对待测入射光的波前进行重构,得到重构波前信息,并通过重构波前信息和人工神经网络算法识别出所述待测入射光是否含有隐身物体的散射光。实施本申请实施例可以探测到采用负折射率超材料进行隐身的物体的存在。

Description

一种隐身物体探测系统和方法
技术领域
本申请属于探测识别领域,具体涉及一种隐身物体探测系统和方法。
背景技术
人能够看到物体,是因为物体的散射光进入了人眼。环境光照射到物体表面上就会发生散射,散射光进入人眼,人就能看到那个物体。
根据上述光学原理,科学家们设计了一种具有负折射率的超材料,在此超材料的基础上又设计变换光学结构,使环境光线绕过被隐身物体,这种超材料可以对反射光线进行控制,使其尽量与背景光线一致,从而实现对物体隐身。
目前上述操控电磁波传播方向的隐身技术,还没有找到合适有效的方法进行反隐身探测。
发明内容
本申请的目的是提供一种隐身物体探测系统,可以探测到采用负折射率超材料进行隐身的物体的存在。
为实现上述申请目的,本申请所采用的技术方案是,一种隐身物体探测系统,包括:分束聚焦阵列,图像传感阵列,和数据处理模块;
所述分束聚焦阵列,用于对待测物体的入射光进行分束,并将分束光分别聚焦到所述图像传感阵列对应的图像传感单元上;
所述图像传感阵列,包括至少两个图像传感单元,所述图像传感单元将接收到的光束信息转换成对应的电信息;
所述数据处理模块,包括,重构单元和识别单元,所述重构单元用于根据所述电信息对所述待测物体的入射光的波前进行重构,得到重构波前信息,所述识别单元用于通过所述重构波前信息和人工神经网络模型识别出所述待测物体是否含有隐身物体。
可选地,所述人工神经网络模型为预先录入的第一波前识别模型;所述第一波前识别模型通过对隐身物体入射光的重构波前信息和不含有隐身物体的入射光的重构波前信息进行人工神经网络学习和训练构建。
可选地,所述识别单元还用于通过所述重构波前信息和预先录入的第二波前识别模型识别出所述隐身物体的类型;所述第二波前识别模型通过对不同类型的隐身物体入射光的重构波前信息进行人工神经网络学习和训练构建。
可选地,所述重构波前信息,包括相位信息,振幅信息,波前像差中的至少一种。
可选地,所述分束聚焦阵列包括,微透镜阵列或角锥传感器或剪切干涉仪或曲率传感器。
可选地,所述图像传感阵列包括,CCD探测器或CMOS探测器。
可选地,所述隐身物体,包括采用负折射率超材料进行隐身处理后的物体。
另一方面,本申请还提供了一种隐身物体探测方法,所述方法用于上述的隐身物体探测系统,包括:
分束聚焦阵列对待测物体的入射光进行分束,并将分束光分别聚焦到图像传感阵列对应的图像传感单元上;
图像传感阵列的图像传感单元将接收到的光束信息转换成对应的电信息;
数据处理模块根据所述电信息对所述待测物体的入射光的波前进行重构,得到重构波前信息,通过所述重构波前信息和人工神经网络模型识别出所述待测物体是否含有隐身物体。
可选地,数据处理模块通过所述重构波前信息和人工神经网络模型算法识别出所述待测物体入射光是否含有隐身物体,包括:数据处理模块将所述重构波前信息与第一波前识别模型进行匹配,通过匹配结果识别出所述待测物体是否含有隐身物体;所述第一波前识别模型为预先录入的所述人工神经网络模型,通过对隐身物体入射光的重构波前信息和不含有隐身物体的入射光的重构波前信息进行人工神经网络学习和训练构建。
可选地,数据处理模块将所述重构波前信息与第二波前识别模型进行匹配,通过匹配结果识别出所述隐身物体的类型;所述第二波前识别模型为预先录入的所述人工神经网络模型,通过对不同类型的隐身物体入射光的重构波前信息进行人工神经网络学习和训练构建。
可选地,所述重构波前信息,包括相位信息,振幅信息,波前像差中的至少一种。
本申请具有以下有益效果:本申请通过分束聚焦阵列和图像传感阵列可以获得重构的波前分布图像,再通过数据处理模块的人工神经网络模型便可以识别出待测入射光是否含有隐身物体的散射光,即判断出分束聚焦阵列和图像传感阵列是否拍摄到了隐身物体。
附图说明
图1为一种平行环境光的波前分布图;
图2为一种含有隐身物反射光的波前分布图;
图3为本申请公开的隐身物体探测系统的示意图;
图4为本申请公开的隐身物体探测方法的示意图。
具体实施方式
新的隐身技术是通过操控光的传播方向来实现的。人能够看到物体,是因为物体散射的光线进入了人眼。如图1所示,正常环境的平行光的波前分布是一个平面。当有物体存在时,照射到物体上的光线就会发生散射,散射光进入人眼,人就能看到那个物体。根据这个光学原理,科学家们设计了一种具有负折射率的超材料,在此超材料的基础上设计变换光学结构,使光线绕过被隐身物体,从而实现对物体隐身。如图2所示的隐身材料即是这种负折射率超材料,这种超材料对反射光线进行控制,使其尽量与背景光线一致。目前这种新型的操控电磁波传播方向的隐身技术,还没有找到合适有效的方法进行反隐身探测,特别是在复杂场合下,有背景干扰,加大了反隐身探测的难度。
如图3所示,图3为本申请公开的隐身物体探测系统100的示意图。该系统100包括:分束聚焦阵列101,图像传感阵列102,和数据处理模块103;
分束聚焦阵列101,用于对待测物体的入射光进行分束,并将分束光分别聚焦到图像传感阵列102对应的图像传感单元上;
图像传感阵列102,包括至少两个图像传感单元,图像传感单元将接收到的光束信息转换成对应的电信息;
数据处理模块103,包括,重构单元1031和识别单元1032;重构单元1031用于根据电信息对待测物体的入射光的波前进行重构,得到重构波前信息;识别单元1032用于通过重构波前信息和人工神经网络模型识别出待测物体是否含有隐身物体。
在本实施例中,待测入射光的波长不仅仅指人类的可见波长(380-760纳米),这里待测入射光可以是无线电波、微波、太赫兹、红外线、可见光、紫外线。
在本实施例中,隐身物体包括采用负折射率超材料进行隐身处理后的物体,比如,包括家用物品,军用仪器,生命体(人或动物)等。
在本实施例中,分束聚焦阵列101可以是微透镜阵列或角锥传感器或剪切干涉仪或曲率传感器,其中微透镜的直径大小,个数和曲率半径可以根据使用环境进行优化,本实施例不做限制。分束聚焦阵列也可以是其他自由曲面阵列,复合结构阵列等。
在本实施例中,图像传感阵列102可以是CCD图像传感阵列,CMOS图像传感阵列等。通过特殊设计的微透镜阵列实现一次拍照得到多幅子图像,由于微透镜阵列的空间分布,物体的相位信息等波前信息能得到有效记录。
在本实施例中,入射波面通过微透镜阵列后进行光线分束,每个细分束经微透镜聚焦到各自的焦平面传感器上形成光斑阵列。入射光是平行光时,传感器得到的光斑阵列是同微透镜阵列完成对应的规则光斑阵列,隐身材料波前入射光不是平行光时,得到的光斑阵列就会偏离理想位置,形成不规则的光斑阵列,通过对光斑阵列进行重构可以得到重构波前信息。不同的入射光,其波前信息是不一样的,比如波前形状,相位信息,振幅信息,波前像差中的至少一种。
在本实施例中,识别单元1032通过对隐身物体入射光的重构波前信息和不含有隐身物体的入射光的重构波前信息进行人工神经网络(Artificial Neutral Network,ANN)的学习和训练,得到第一波前识别模型,所述识别单元根据待测物体入射光的重构波前信息与第一波前识别模型进行匹配,并根据匹配结果识别出所述待测物体是否含有隐身物体。
可以理解,正常物体经过负折射率超材料隐身后人为的改变了光的振幅和相位等光学性质,从而导致到达图像传感器的波前发生变化,这些波前的畸变,人眼是很难区分的。通过特殊设计的微透镜阵列实现一次拍照得到多幅子图像,由于微透镜阵列的空间分布,物体的相位等波前信息得到有效记录,通过对这些多幅子图像进行重构,可以得到被拍物体的波前分布,再利用人工神经网络ANN对大量含有隐身物体和没有隐身物体的波前图像进行深度神经网络学习,得到一个进行分类识别的模型,即第一波前识别模型,就能有效地对拍摄的场景识别出是否存在人为的隐身物体。
作为一种可选的实施方式,识别单元还用于通过重构波前信息和预先录入的第二波前识别模型识别出所述隐身物体的类型;该第二波前识别模型通过对不同类型的隐身物体入射光的重构波前信息进行人工神经网络学习和训练构建。
在本实施方式中,识别单元通过对不同类型物体经过负折射率超材料进行隐身处理后的波前信息和物体正常状态下的波前信息进行人工神经网络学习和训练,得到第二波前识别模型,并根据待测入射光的重构波前信息识别出隐身物体的类型或种类。
如图4所示,图4为本申请公开的隐身物体探测方法的示意图。该隐身物体探测方法,该方法应用于上述任一隐身物体探测系统,包括:
401、分束聚焦阵列对待测物体的入射光进行分束,并将分束光分别聚焦到图像传感阵列对应的图像传感单元上。
402、图像传感阵列的图像传感单元将接收到的光束信息转换成对应的电信息。
403、数据处理模块根据上述电信息对上述待测物体的入射光的波前进行重构,得到重构波前信息,通过该重构波前信息和人工神经网络模型识别出上述待测物体是否含有隐身物体。
作为一种可选的实施方式,数据处理模块通过重构波前信息和人工神经网络模型识别出待测物体是否含有隐身物体,包括:数据处理模块将上述重构波前信息与第一波前识别模型进行匹配,通过匹配结果识别出上述待测物体是否含有隐身物体;该第一波前识别模型为预先录入的人工神经网络模型,通过对隐身物体入射光的重构波前信息和不含有隐身物体的入射光的重构波前信息进行人工神经网络学习和训练构建。
作为一种可选的实施方式,上述方法还包括:
数据处理模块将上述重构波前信息与第二波前识别模型进行匹配,通过匹配结果识别出上述隐身物体的类型;该第二波前识别模型为预先录入的人工神经网络模型,通过对不同类型的隐身物体入射光的重构波前信息进行人工神经网络学习和训练构建。
作为一种可选的实施方式,上述重构波前信息,包括相位信息,振幅信息,波前像差中的至少一种。
该方法的实施方式与图1所示的隐身物体探测系统相对应,这里不再赘述。
以上是本发明实施例的实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明实施例原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也视为本发明的保护范围。

Claims (10)

1.一种隐身物体探测系统,其特征在于,包括:分束聚焦阵列,图像传感阵列,和数据处理模块;
所述分束聚焦阵列,用于对待测物体的入射光进行分束,并将分束光分别聚焦到所述图像传感阵列对应的图像传感单元上;
所述图像传感阵列,包括至少两个图像传感单元,所述图像传感单元将接收到的光束信息转换成对应的电信息;
所述数据处理模块,包括,重构单元和识别单元,所述重构单元用于根据所述电信息对所述待测物体的入射光的波前进行重构,得到重构波前信息,所述识别单元用于通过所述重构波前信息和人工神经网络模型识别出所述待测物体是否含有隐身物体。
2.根据权利要求1所述的系统,其特征在于,所述人工神经网络模型为预先录入的第一波前识别模型;所述第一波前识别模型通过对隐身物体入射光的重构波前信息和不含有隐身物体的入射光的重构波前信息进行人工神经网络学习和训练构建。
3.根据权利要求2所述的系统,其特征在于,所述识别单元还用于通过所述重构波前信息和预先录入的第二波前识别模型识别出所述隐身物体的类型;所述第二波前识别模型通过对不同类型的隐身物体入射光的重构波前信息进行人工神经网络学习和训练构建。
4.根据权利要求1至3任一项所述的系统,其特征在于,所述重构波前信息,包括相位信息,振幅信息,波前像差中的至少一种。
5.根据权利要求1至3任一项所述的系统,其特征在于,所述分束聚焦阵列包括,微透镜阵列或角锥传感器或剪切干涉仪或曲率传感器。
6.根据权利要求1至3任一项所述的系统,其特征在于,所述图像传感阵列包括,CCD探测器或CMOS探测器。
7.根据权利要求1至3任一项所述的系统,其特征在于,所述隐身物体,包括采用负折射率超材料进行隐身处理后的物体。
8.一种隐身物体探测方法,所述方法用于如权利要求1所述的隐身物体探测系统,所述方法包括:
分束聚焦阵列对待测物体的入射光进行分束,并将分束光分别聚焦到图像传感阵列对应的图像传感单元上;
图像传感阵列的图像传感单元将接收到的光束信息转换成对应的电信息;
数据处理模块根据所述电信息对所述待测物体的入射光的波前进行重构,得到重构波前信息,通过所述重构波前信息和人工神经网络模型识别出所述待测物体是否含有隐身物体。
9.根据权利要求8所述的方法,其特征在于,数据处理模块通过所述重构波前信息和人工神经网络模型识别出所述待测物体是否含有隐身物体,包括:
数据处理模块将所述重构波前信息与第一波前识别模型进行匹配,通过匹配结果识别出所述待测物体是否含有隐身物体;所述第一波前识别模型为预先录入的所述人工神经网络模型,通过对隐身物体入射光的重构波前信息和不含有隐身物体的入射光的重构波前信息进行人工神经网络学习和训练构建。
10.根据权利要求9所述的方法,其特征在于,所述方法还包括:
数据处理模块将所述重构波前信息与第二波前识别模型进行匹配,通过匹配结果识别出所述隐身物体的类型;所述第二波前识别模型为预先录入的所述人工神经网络模型,通过对不同类型的隐身物体入射光的重构波前信息进行人工神经网络学习和训练构建。
CN201880001201.XA 2018-07-25 2018-07-25 一种隐身物体探测系统和方法 Active CN109073777B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2018/097069 WO2020019204A1 (zh) 2018-07-25 2018-07-25 一种隐身物体探测系统和方法

Publications (2)

Publication Number Publication Date
CN109073777A true CN109073777A (zh) 2018-12-21
CN109073777B CN109073777B (zh) 2020-07-31

Family

ID=64789253

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880001201.XA Active CN109073777B (zh) 2018-07-25 2018-07-25 一种隐身物体探测系统和方法

Country Status (2)

Country Link
CN (1) CN109073777B (zh)
WO (1) WO2020019204A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111257957A (zh) * 2020-02-25 2020-06-09 西安交通大学 基于被动式太赫兹成像的识别跟踪系统及方法
CN111325317A (zh) * 2020-01-21 2020-06-23 北京空间机电研究所 一种基于生成对抗网络的波前像差确定方法及装置

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1740817A (zh) * 2005-09-22 2006-03-01 哈尔滨工程大学 受激布里渊散射激光雷达水下隐身物体探测系统及方法
CN102735348A (zh) * 2012-06-15 2012-10-17 中国科学院光电技术研究所 一种基于哈特曼波前传感器的波前测量方法
CN103335951A (zh) * 2013-07-01 2013-10-02 成都精密光学工程研究中心 隐身材料太赫兹反射率的测量系统
US20130314765A1 (en) * 2012-05-25 2013-11-28 The Trustees Of Boston College Metamaterial Devices with Environmentally Responsive Materials
CN104034434A (zh) * 2014-06-19 2014-09-10 中国科学院光电技术研究所 一种基于自适应光纤耦合器阵列的波前相位传感器
US20150042950A1 (en) * 2013-08-08 2015-02-12 Canon Kabushiki Kaisha Ophthalmologic apparatus
CN104778665A (zh) * 2015-04-14 2015-07-15 清华大学 基于自然图像块先验驱动的压缩鬼成像重构方法及系统
CN106019306A (zh) * 2016-05-05 2016-10-12 西安交通大学 一种基于计算鬼成像原理实现水下目标探测的装置
CN106154283A (zh) * 2016-09-20 2016-11-23 施展宇 一种量子雷达
CN106197673A (zh) * 2016-06-27 2016-12-07 湖北久之洋红外系统股份有限公司 一种自适应宽温度范围非均匀校正方法及系统
CN106842162A (zh) * 2017-02-22 2017-06-13 电子科技大学 一种有源雷达对消隐身系统及方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102495467A (zh) * 2011-11-11 2012-06-13 上海电机学院 一种利用混沌激光的时间关联特性进行成像的方法及装置
CN103323396B (zh) * 2013-06-28 2015-11-11 中国科学院空间科学与应用研究中心 一种基于符合测量的二维压缩鬼成像系统及方法
CN105023247B (zh) * 2015-06-24 2017-10-24 南京理工大学 抑制单臂鬼成像离焦模糊的二次成像方法
CN106772310B (zh) * 2016-12-30 2019-05-07 南京理工大学 一种基于计算鬼成像的目标鉴定装置及其方法
CN107462932B (zh) * 2017-08-04 2020-03-17 西安交通大学 一种基于光计算的可视化计算鬼成像系统及成像方法

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1740817A (zh) * 2005-09-22 2006-03-01 哈尔滨工程大学 受激布里渊散射激光雷达水下隐身物体探测系统及方法
US20130314765A1 (en) * 2012-05-25 2013-11-28 The Trustees Of Boston College Metamaterial Devices with Environmentally Responsive Materials
CN102735348A (zh) * 2012-06-15 2012-10-17 中国科学院光电技术研究所 一种基于哈特曼波前传感器的波前测量方法
CN103335951A (zh) * 2013-07-01 2013-10-02 成都精密光学工程研究中心 隐身材料太赫兹反射率的测量系统
US20150042950A1 (en) * 2013-08-08 2015-02-12 Canon Kabushiki Kaisha Ophthalmologic apparatus
CN104034434A (zh) * 2014-06-19 2014-09-10 中国科学院光电技术研究所 一种基于自适应光纤耦合器阵列的波前相位传感器
CN104778665A (zh) * 2015-04-14 2015-07-15 清华大学 基于自然图像块先验驱动的压缩鬼成像重构方法及系统
CN106019306A (zh) * 2016-05-05 2016-10-12 西安交通大学 一种基于计算鬼成像原理实现水下目标探测的装置
CN106197673A (zh) * 2016-06-27 2016-12-07 湖北久之洋红外系统股份有限公司 一种自适应宽温度范围非均匀校正方法及系统
CN106154283A (zh) * 2016-09-20 2016-11-23 施展宇 一种量子雷达
CN106842162A (zh) * 2017-02-22 2017-06-13 电子科技大学 一种有源雷达对消隐身系统及方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111325317A (zh) * 2020-01-21 2020-06-23 北京空间机电研究所 一种基于生成对抗网络的波前像差确定方法及装置
CN111325317B (zh) * 2020-01-21 2023-12-12 北京空间机电研究所 一种基于生成对抗网络的波前像差确定方法及装置
CN111257957A (zh) * 2020-02-25 2020-06-09 西安交通大学 基于被动式太赫兹成像的识别跟踪系统及方法
CN111257957B (zh) * 2020-02-25 2021-06-01 西安交通大学 基于被动式太赫兹成像的识别跟踪系统及方法

Also Published As

Publication number Publication date
WO2020019204A1 (zh) 2020-01-30
CN109073777B (zh) 2020-07-31

Similar Documents

Publication Publication Date Title
Qian et al. Dynamic recognition and mirage using neuro-metamaterials
Li et al. Polarimetric imaging through scattering media: A review
Den Hollander et al. Adversarial patch camouflage against aerial detection
CN103822577B (zh) 单像素太赫兹全息成像装置和方法
CN108027239A (zh) 用于光学检测至少一个对象的检测器
CN110186559B (zh) 一种涡旋光束轨道角动量模态的检测方法及装置
Schedl et al. Search and rescue with airborne optical sectioning
CN103411891A (zh) 太赫兹超分辨率成像方法和系统
CN109073777A (zh) 一种隐身物体探测系统和方法
Ma et al. Super-resolution and super-robust single-pixel superposition compound eye
CN105787499A (zh) 基于K-means聚类和偏振信息提取的伪装目标识别方法
CN108508038A (zh) 一种手持式人体信息采集设备及使用方法
CN206114926U (zh) 一种太赫兹成像系统及太赫兹安检装置
CN203677064U (zh) 一种利用线型光纤的反射式荧光断层成像系统
Anderson et al. Omnidirectional real time imaging using digital restoration
Laviada et al. Artifact mitigation for high-resolution near-field sar images by means of conditional generative adversarial networks
Wu The plenoptic sensor
CN207099194U (zh) 一种双传感器相机
CN106599668B (zh) 一种目标身份识别系统
Wang Biomimetic staring infrared imaging omnidirectional detection technology
CN108508435A (zh) 一种具信息采集功能的安检机及使用方法
CN115290601A (zh) 一种宽谱非相干光散斑自相关成像探测的低冗余模拟方法
Li Target infrared radiation calculation model and method based on finite element analysis method in infrared photoelectric detection system
CN209926997U (zh) 一种自适应超表面电磁隐身衣
CN109856695A (zh) 小体积大视场多通道太赫兹阵列探测成像系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant