CN112799050B - 一种基于光电跟踪的低空慢小目标监测方法及系统 - Google Patents

一种基于光电跟踪的低空慢小目标监测方法及系统 Download PDF

Info

Publication number
CN112799050B
CN112799050B CN202011566560.5A CN202011566560A CN112799050B CN 112799050 B CN112799050 B CN 112799050B CN 202011566560 A CN202011566560 A CN 202011566560A CN 112799050 B CN112799050 B CN 112799050B
Authority
CN
China
Prior art keywords
low
target
slow small
small target
photoelectric
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011566560.5A
Other languages
English (en)
Other versions
CN112799050A (zh
Inventor
张波
鲍剑飞
杜雷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jinan Hope Wish Photoelectronic Technology Co ltd
Original Assignee
Jinan Hope Wish Photoelectronic Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jinan Hope Wish Photoelectronic Technology Co ltd filed Critical Jinan Hope Wish Photoelectronic Technology Co ltd
Priority to CN202011566560.5A priority Critical patent/CN112799050B/zh
Publication of CN112799050A publication Critical patent/CN112799050A/zh
Application granted granted Critical
Publication of CN112799050B publication Critical patent/CN112799050B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/66Radar-tracking systems; Analogous systems
    • G01S13/70Radar-tracking systems; Analogous systems for range tracking only

Abstract

本发明提出的一种基于光电跟踪的低空慢小目标监测方法及系统,包括:低空慢小目标进入雷达监控区域后,通过雷达数据上报或光电巡航方式,引导光电设备跟踪低空慢小目标;通过光电设备识别低空慢小目标,并完成目标的跟踪锁定;根据光电设备的视场和实时采集的目标尺寸,使用第一预设算法计算出光电设备到低空慢小目标的距离,作为目标距离;根据当前的目标距离和光电设备的方位信息,使用第二预设算法计算得出低空慢小目标的GPS位置数据。本发明能够实现低空慢小目标GPS位置计算,实时进行低空慢小目标的位置监测。

Description

一种基于光电跟踪的低空慢小目标监测方法及系统
技术领域
本发明涉及光电技术领域,更具体的说是涉及一种基于光电跟踪的低空慢小目标监测方法及系统。
背景技术
近年来,“低空慢小”无人航空器因其“获取容易、使用隐蔽、升空突然、处置困难”的特点,得到迅猛发展。但是此类航空器经常被不法分子利用,社会带来了很大的安全威胁。
目前市面上反制低空慢小目标的系统大都是通过雷达探测,确定目标的位置、航迹,进而对入侵目标做进一步的处理。但低空慢小目标进入雷达盲区或其它原因,导致雷达目标丢失后,系统将无法实时监控目标的飞行动态,在这段侦测空白期内,入侵目标很可能造成很大的危害。因此,在没有雷达数据时,如何实现低空慢小目标的GPS位置监测,是我们亟待解决的问题。
发明内容
针对以上问题,本发明的目的在于提供一种基于光电跟踪的低空慢小目标监测方法及系统,能够实现低空慢小目标GPS位置计算,实时进行低空慢小目标的位置监测。
本发明为实现上述目的,通过以下技术方案实现:一种基于光电跟踪的低空慢小目标监测方法,包括如下步骤:
S1:低空慢小目标进入雷达监控区域后,通过雷达数据上报或光电巡航方式,引导光电设备跟踪低空慢小目标;
S2:通过光电设备识别低空慢小目标,并完成目标的跟踪锁定;
S3:根据光电设备的视场和实时采集的目标尺寸,使用第一预设算法计算出光电设备到低空慢小目标的距离,作为目标距离;
S4:根据当前的目标距离和光电设备的方位信息,使用第二预设算法计算得出低空慢小目标的GPS位置数据。
进一步,所述步骤S1包括:
雷达在内置的引导模式下,利用光电设备自身的经纬高和雷达上报目标的经纬高信息,计算出低空慢小目标相对于光电设备的方位、俯仰数据,然后控制光电设备朝向目标,进行分析;
光电设备在内置的光电巡航模式下,按照设定的巡航规则,对特定区域进行监控。
进一步,所述步骤S2包括:
使用基于深度学习的图像识别算法,分析光电设备视场内是否有低空慢小目标,如果检测到,则启动光电设备的跟踪功能,跟踪锁定目标;如果未检测到,则开始处理下一批次雷达数据。
进一步,所述步骤S3包括:
通过光电设备读取低空慢小目标的宽度B、低空慢小目标在当前跟踪视频中的像素宽度b、当前光电设备的视场角α、视频宽度B0
根据下列公式计算得出光电设备到低空慢小目标的距离,作为目标距离D:
D=B/(b*α/B0*PI/180)。
进一步,所述步骤S4包括:
根据当前光电设备的经度、纬度、高度和方位信息,以及目标距离D,应用以下公式实时推算低空慢小目标的GPS位置:
J=J0+(D*sin(β*PI/180))/(111.199*cos(W0*PI/180))
W=W0+(D*cos(D*PI/180))/111.199
H=H0+h
其中,J为低空慢小目标的经度值、J0为光电设备的经度值、β为光电方位角、W0为光电设备的纬度值,W为低空慢小目标的纬度值、W0为光电设备的纬度值;H为低空慢小目标的高度值、H0为光电设备的高度值、h为低空慢小目标与光电设备的相对高度值。
进一步,所述步骤S4之后还包括:根据低空慢小目标的GPS位置数据判断是否进入预设的保护区域,若是,启动预设反制设备。
相应的,本发明还公开了一种基于光电跟踪的低空慢小目标监测系统,包括:
目标识别单元,用于识别低空慢小目标是否进入雷达监控区域,若是,通过雷达数据上报或光电巡航方式,引导光电设备跟踪低空慢小目标;
目标跟踪单元,用于通过光电设备识别低空慢小目标,并完成目标的跟踪锁定;距离计算单元,用于根据光电设备的视场和实时采集的目标尺寸,使用第一预设算法计算出光电设备到低空慢小目标的距离,作为目标距离;
位置数据计算单元,用于根据当前的目标距离和光电设备的方位信息,使用第二预设算法计算得出低空慢小目标的GPS位置数据。
进一步,还包括:
反制单元,用于根据低空慢小目标的GPS位置数据判断是否进入预设的保护区域,若是,启动预设反制设备。
对比现有技术,本发明有益效果在于:本发明提供了一种基于光电跟踪的低空慢小目标监测方法及系统,借助雷达、光电、反制等多种设备,当雷达探测到低空慢小目标后,引导光电识别、跟踪目标。当低空慢小目标进入雷达盲区或其它原因导致雷达丢失目标后,可以通过目标在跟踪视频中的像素大小、目标的实际尺寸等信息,根据相关计算关系,反推出当前低空慢小目标的GPS位置,实现对目标的不间断监控。
其中,本发明能够控制光电设备通过雷达数据和自动巡航两种模式进行引导控制,识别、跟踪到目标后,可实时推算目标GPS位置。雷达持续推送目标位置时,只需要根据雷达数据即可分析目标是否入侵保护区域。在雷达丢失目标的情况下,可通过本发明推算出入侵目标的GPS位置,当发现入侵目标进入保护区后,实时开启反制设备实施反制。
由此可见,本发明与现有技术相比,具有突出的实质性特点和显著的进步,其实施的有益效果也是显而易见的。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据提供的附图获得其他的附图。
附图1是本发明的方法流程图。
附图2是本发明的系统结构图。
具体实施方式
下面结合附图对本发明的具体实施方式做出说明。
如图1所示的一种基于光电跟踪的低空慢小目标监测方法,包括如下步骤:
S1:低空慢小目标进入雷达监控区域后,通过雷达数据上报或光电巡航方式,引导光电设备跟踪低空慢小目标。
首先,雷达在内置的引导模式下,利用光电设备自身的经纬高和雷达上报目标的经纬高信息,计算出低空慢小目标相对于光电设备的方位、俯仰数据,然后控制光电设备朝向目标,进行分析。然后,光电设备在内置的光电巡航模式下,按照设定的巡航规则,对特定区域进行监控。
S2:通过光电设备识别低空慢小目标,并完成目标的跟踪锁定。
具体来说:使用基于深度学习的图像识别算法,分析光电设备视场内是否有低空慢小目标,如果检测到,则启动光电设备的跟踪功能,跟踪锁定目标;如果未检测到,则开始处理下一批次雷达数据。
S3:根据光电设备的视场和实时采集的目标尺寸,使用第一预设算法计算出光电设备到低空慢小目标的距离,作为目标距离。
首先,通过光电设备读取低空慢小目标的宽度B、低空慢小目标在当前跟踪视频中的像素宽度b、当前光电设备的视场角α、视频宽度B0;然后,根据下列公式计算得出光电设备到低空慢小目标的距离,作为目标距离D:
D=B/(b*α/B0*PI/180)。
S4:根据当前的目标距离和光电设备的方位信息,使用第二预设算法计算得出低空慢小目标的GPS位置数据。
具体包括:根据当前光电设备的经度、纬度、高度和方位信息,以及目标距离D,应用以下公式实时推算低空慢小目标的GPS位置:
J=J0+(D*sin(β*PI/180))/(111.199*cos(W0*PI/180))
W=W0+(D*cos(D*PI/180))/111.199
H=H0+h
其中,J为低空慢小目标的经度值、J0为光电设备的经度值、β为光电方位角、W0为光电设备的纬度值,W为低空慢小目标的纬度值、W0为光电设备的纬度值;H为低空慢小目标的高度值、H0为光电设备的高度值、h为低空慢小目标与光电设备的相对高度值。
S5:根据低空慢小目标的GPS位置数据判断是否进入预设的保护区域,若是,启动预设反制设备。
相应的,如图2所示,本发明还公开了一种基于光电跟踪的低空慢小目标监测系统,包括:
目标识别单元,用于识别低空慢小目标是否进入雷达监控区域,若是,通过雷达数据上报或光电巡航方式,引导光电设备跟踪低空慢小目标。
目标跟踪单元,用于通过光电设备识别低空慢小目标,并完成目标的跟踪锁定。
距离计算单元,用于根据光电设备的视场和实时采集的目标尺寸,使用第一预设算法计算出光电设备到低空慢小目标的距离,作为目标距离。
位置数据计算单元,用于根据当前的目标距离和光电设备的方位信息,使用第二预设算法计算得出低空慢小目标的GPS位置数据。
反制单元,用于根据低空慢小目标的GPS位置数据判断是否进入预设的保护区域,若是,启动预设反制设备。
本领域的技术人员可以清楚地了解到本发明实施例中的技术可借助软件加必需的通用硬件平台的方式来实现。基于这样的理解,本发明实施例中的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中如U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质,包括若干指令用以使得一台计算机终端(可以是个人计算机,服务器,或者第二终端、网络终端等)执行本发明各个实施例所述方法的全部或部分步骤。本说明书中各个实施例之间相同相似的部分互相参见即可。尤其,对于终端实施例而言,由于其基本相似于方法实施例,所以描述的比较简单,相关之处参见方法实施例中的说明即可。
在本发明所提供的几个实施例中,应该理解到,所揭露的系统、系统和方法,可以通过其它的方式实现。例如,以上所描述的系统实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,系统或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能模块可以集成在一个处理单元中,也可以是各个模块单独物理存在,也可以两个或两个以上模块集成在一个单元中。
同理,在本发明各个实施例中的各处理单元可以集成在一个功能模块中,也可以是各个处理单元物理存在,也可以两个或两个以上处理单元集成在一个功能模块中。
结合附图和具体实施例,对本发明作进一步说明。应理解,这些实施例仅用于说明本发明而不用于限制本发明的范围。此外应理解,在阅读了本发明讲授的内容之后,本领域技术人员可以对本发明作各种改动或修改,这些等价形式同样落于本申请所限定的范围。

Claims (6)

1.一种基于光电跟踪的低空慢小目标监测方法,其特征在于,包括如下步骤:
S1:低空慢小目标进入雷达监控区域后,通过雷达数据上报或光电巡航方式,引导光电设备跟踪低空慢小目标;
S2:通过光电设备识别低空慢小目标,并完成目标的跟踪锁定;
S3:根据光电设备的视场和实时采集的目标尺寸,使用第一预设算法计算出光电设备到低空慢小目标的距离,作为目标距离;
S4:根据当前的目标距离和光电设备的方位信息,使用第二预设算法计算得出低空慢小目标的GPS位置数据;
所述步骤S3包括:
通过光电设备读取低空慢小目标的宽度B、低空慢小目标在当前跟踪视频中的像素宽度b、当前光电设备的视场角α、视频宽度B0
根据下列公式计算得出光电设备到低空慢小目标的距离,作为目标距离D:
D=B/(b*α/B0*PI/180);
所述步骤S4包括:
根据当前光电设备的经度、纬度、高度和方位信息,以及目标距离D,应用以下公式实时推算低空慢小目标的GPS位置:
J=J0+(D*sin(β*PI/180))/(111.199*cos(W0*PI/180))
W=W0+(D*cos(D*PI/180))/111.199
H=H0+h
其中,J为低空慢小目标的经度值、J0为光电设备的经度值、β为光电方位角,W为低空慢小目标的纬度值、W0为光电设备的纬度值;H为低空慢小目标的高度值、H0为光电设备的高度值、h为低空慢小目标与光电设备的相对高度值。
2.根据权利要求1所述的基于光电跟踪的低空慢小目标监测方法,其特征在于,所述步骤S1包括:
雷达在内置的引导模式下,利用光电设备自身的经纬高和雷达上报目标的经纬高信息,计算出低空慢小目标相对于光电设备的方位、俯仰数据,然后控制光电设备朝向目标,进行分析;
光电设备在内置的光电巡航模式下,按照设定的巡航规则,对特定区域进行监控。
3.根据权利要求1所述的基于光电跟踪的低空慢小目标监测方法,其特征在于,所述步骤S2包括:
使用基于深度学习的图像识别算法,分析光电设备视场内是否有低空慢小目标,如果检测到,则启动光电设备的跟踪功能,跟踪锁定目标;如果未检测到,则开始处理下一批次雷达数据。
4.根据权利要求1所述的基于光电跟踪的低空慢小目标监测方法,其特征在于,所述步骤S4之后还包括:根据低空慢小目标的GPS位置数据判断是否进入预设的保护区域,若是,启动预设反制设备。
5.一种基于光电跟踪的低空慢小目标监测系统,其特征在于,包括:目标识别单元,用于识别低空慢小目标是否进入雷达监控区域,若是,通过雷达数据上报或光电巡航方式,引导光电设备跟踪低空慢小目标;目标跟踪单元,用于通过光电设备识别低空慢小目标,并完成目标的跟踪锁定;
距离计算单元,用于根据光电设备的视场和实时采集的目标尺寸,使用第一预设算法计算出光电设备到低空慢小目标的距离,作为目标距离;距离计算单元包括:通过光电设备读取低空慢小目标的宽度B、低空慢小目标在当前跟踪视频中的像素宽度b、当前光电设备的视场角α、视频宽度B0
根据下列公式计算得出光电设备到低空慢小目标的距离,作为目标距离D:
D=B/(b*α/B0*PI/180);
位置数据计算单元,用于根据当前的目标距离和光电设备的方位信息,使用第二预设算法计算得出低空慢小目标的GPS位置数据,位置数据计算单元包括:根据当前光电设备的经度、纬度、高度和方位信息,以及目标距离D,应用以下公式实时推算低空慢小目标的GPS位置:
J=J0+(D*sin(β*PI/180))/(111.199*cos(W0*PI/180))
W=W0+(D*cos(D*PI/180))/111.199
H=H0+h
其中,J为低空慢小目标的经度值、J0为光电设备的经度值、β为光电方位角,W为低空慢小目标的纬度值、W0为光电设备的纬度值;H为低空慢小目标的高度值、H0为光电设备的高度值、h为低空慢小目标与光电设备的相对高度值。
6.根据权利要求5所述的基于光电跟踪的低空慢小目标监测系统,其特征在于,还包括:
反制单元,用于根据低空慢小目标的GPS位置数据判断是否进入预设的保护区域,若是,启动预设反制设备。
CN202011566560.5A 2020-12-25 2020-12-25 一种基于光电跟踪的低空慢小目标监测方法及系统 Active CN112799050B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011566560.5A CN112799050B (zh) 2020-12-25 2020-12-25 一种基于光电跟踪的低空慢小目标监测方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011566560.5A CN112799050B (zh) 2020-12-25 2020-12-25 一种基于光电跟踪的低空慢小目标监测方法及系统

Publications (2)

Publication Number Publication Date
CN112799050A CN112799050A (zh) 2021-05-14
CN112799050B true CN112799050B (zh) 2022-12-06

Family

ID=75804917

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011566560.5A Active CN112799050B (zh) 2020-12-25 2020-12-25 一种基于光电跟踪的低空慢小目标监测方法及系统

Country Status (1)

Country Link
CN (1) CN112799050B (zh)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110865366A (zh) * 2019-10-12 2020-03-06 深圳市布谷鸟科技有限公司 一种智能驾驶雷达和图像融合的人机交互方法
CN110940312A (zh) * 2019-11-25 2020-03-31 的卢技术有限公司 一种结合激光设备的单目相机测距方法及系统

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7612796B2 (en) * 2000-01-13 2009-11-03 Countwise, Llc Video-based system and method for counting persons traversing areas being monitored
CN101866006A (zh) * 2010-06-04 2010-10-20 西安天和防务技术股份有限公司 旋转式多传感器光电雷达
KR20140019950A (ko) * 2012-08-07 2014-02-18 성균관대학교산학협력단 단말기의 모노 카메라에 입력된 손가락 영상을 이용한 3차원 좌표 생성 방법 및 모노 카메라에 입력된 손가락 영상을 이용하여 3차원 좌표를 생성하는 이동 단말기
CN205176269U (zh) * 2015-10-20 2016-04-20 江苏欧讯能源科技有限公司 一种基于雷达与分布式振动光纤传感技术的海缆锚损监测装置
CN106291592B (zh) * 2016-07-14 2019-03-01 桂林长海发展有限责任公司 一种小型无人机的对抗系统
CN109373821A (zh) * 2017-05-16 2019-02-22 北京加西亚联合技术有限公司 反无人机设备、系统及方法
CN109269352B (zh) * 2018-09-20 2021-03-30 北京机械设备研究所 一种基于地面探测的无人机跟踪目标方法及系统
CN110309731B (zh) * 2019-06-12 2021-09-07 中国人民解放军海军工程大学 松耦合结构无人航行器光电自主目标检测跟踪方法和系统
CN210225575U (zh) * 2019-10-17 2020-03-31 济南和普威视光电技术有限公司 一种雷达联动监控摄像装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110865366A (zh) * 2019-10-12 2020-03-06 深圳市布谷鸟科技有限公司 一种智能驾驶雷达和图像融合的人机交互方法
CN110940312A (zh) * 2019-11-25 2020-03-31 的卢技术有限公司 一种结合激光设备的单目相机测距方法及系统

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
Space Tracking System and Its Key Technological Analyses;Li Tianze;《2009 5th International Conference on Wireless Communications, Networking and Mobile Computing》;20091231;全文 *
基于机动平台序列图像的空间飞行器定轨技术研究;柳庆武等;《宇航学报》;20110130(第01期);全文 *
检测光电跟踪测量设备的激光模拟空间目标;张波;《光电子激光》;20030331;全文 *
空间在轨激光成像雷达指标优选宏模型;李荣华等;《红外与激光工程》;20180225(第02期);全文 *

Also Published As

Publication number Publication date
CN112799050A (zh) 2021-05-14

Similar Documents

Publication Publication Date Title
CN112799051B (zh) 一种低慢小目标的自动捕获跟踪方法及系统
KR102661954B1 (ko) 이미지 처리 방법 및 이를 수행하는 장치들
Lai et al. Characterization of Sky‐region Morphological‐temporal Airborne Collision Detection
CN108062516B (zh) 低空空域管控方法、装置及系统
CN111899568A (zh) 桥梁防撞预警系统、方法、装置和存储介质
Park et al. Passive target tracking of marine traffic ships using onboard monocular camera for unmanned surface vessel
Li et al. PETS 2015: Datasets and challenge
Kroodsma et al. Revealing the global longline fleet with satellite radar
CN112799050B (zh) 一种基于光电跟踪的低空慢小目标监测方法及系统
Xing et al. High resolution SAR imagery ship detection based on EXS-C-CFAR in Alpha-stable clutters
CN111596277B (zh) 基于模糊综合评价法的飞行目标威胁度识别方法及系统
CN208298351U (zh) 一种基于无人机的雷达监控预警系统
CN115273039B (zh) 一种基于摄像头的小障碍物探测方法
CN111413681B (zh) 基于熵权法的飞行目标威胁度识别方法、系统和存储介质
Zheng et al. Forest farm fire drone monitoring system based on deep learning and unmanned aerial vehicle imagery
CN113311405A (zh) 一种区域人数统计方法、装置、计算机设备及存储介质
CN113570622A (zh) 一种障碍物确定方法、装置、电子设备以及存储介质
Sophiayati Yuhaniz et al. An onboard automatic change detection system for disaster monitoring
CN112491997A (zh) 一种用于船舶安全的动态侦测系统
Fehlmann et al. Application of detection and recognition algorithms to persistent wide area surveillance
Li et al. Backend service system of ship detection and plate recognition system based on deep learning
Życzkowski et al. Module multisensor system for strategic objects protection
Li et al. Ship velocity estimation via images acquired by an unmanned aerial vehicle-based hyperspectral imaging sensor
CN114371736B (zh) 一种面向无人机daa的告警及引导方法和装置
CN113963502B (zh) 一种全天候违法行为自动化巡检方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant