CN112130946B - 一种飞机信息展示方法、装置、电子设备和存储介质 - Google Patents

一种飞机信息展示方法、装置、电子设备和存储介质 Download PDF

Info

Publication number
CN112130946B
CN112130946B CN202011002903.5A CN202011002903A CN112130946B CN 112130946 B CN112130946 B CN 112130946B CN 202011002903 A CN202011002903 A CN 202011002903A CN 112130946 B CN112130946 B CN 112130946B
Authority
CN
China
Prior art keywords
aircraft
information
airplane
preselected
point camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011002903.5A
Other languages
English (en)
Other versions
CN112130946A (zh
Inventor
王岩
施伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xi'an Yu Vision Mdt Infotech Ltd
Original Assignee
Xi'an Yu Vision Mdt Infotech Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xi'an Yu Vision Mdt Infotech Ltd filed Critical Xi'an Yu Vision Mdt Infotech Ltd
Priority to CN202011002903.5A priority Critical patent/CN112130946B/zh
Publication of CN112130946A publication Critical patent/CN112130946A/zh
Application granted granted Critical
Publication of CN112130946B publication Critical patent/CN112130946B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/248—Presentation of query results
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29—Geographical information databases

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Human Computer Interaction (AREA)
  • Remote Sensing (AREA)
  • Computational Linguistics (AREA)
  • Traffic Control Systems (AREA)

Abstract

本申请公开了一种飞机信息展示方法、装置、电子设备和计算机可读存储介质，该方法包括：获取飞机数据信息；根据飞机数据信息和高点相机信息确定在高点相机中的预选飞机；确定预选飞机与高点相机的实景画面中的目标飞机的对应关系；根据对应关系从飞机数据信息中获取所有的目标飞机的飞机信息，并将飞机信息作为标签与实景画面进行叠加显示。本申请通过飞机数据信息和高点相机信息得到在高点相机中的预选飞机，然后结合高点相机的实景画面进行目标飞机的对应，唯一确定实景画面中的目标飞机，然后将目标飞机的飞机信息作为标签与实景画面进行叠加显示，提高了飞机识别的精确度。

Description

一种飞机信息展示方法、装置、电子设备和存储介质
技术领域
本申请涉及飞机信息展示技术领域，特别涉及一种飞机信息展示方法、装置、电子设备和存储介质。
背景技术
为了更好的进行机场安防监控，很多机场都安装了AR实景监控系统，但目前的机场AR实景监控系统中，主要是展示机场固定建筑物，道路的静态信息，对机场而言，如果能在飞机起落时展示飞机的航班，速度等动态信息，会对机场安防监控管理带来很大的便利。相关技术采用相机智能识别飞机机号，再关联航班管理系统信息，在AR实景上进行叠加显示。但是，智能识别飞机机号非常困难，需要特别理想的场景和角度，识别率有一定的误差，并且，受天气和时段影响比较大，比如雨，雪等能见度较低天气无法识别，晚上光线太差，飞机机号字体显示太小，无法识别。
因此，如何提供一种解决上述技术问题的方案是本领域技术人员目前需要解决的问题。
发明内容
本申请的目的是提供一种飞机信息展示方法、装置、电子设备和计算机可读存储介质，能够提高飞机展示的精确度和完整性。其具体方案如下：
本申请公开了一种飞机信息展示方法，包括：
获取飞机数据信息；
根据所述飞机数据信息和高点相机信息确定与高点相机对应的预选飞机；
确定所述预选飞机与所述高点相机的实景画面中的目标飞机的对应关系；
根据所述对应关系从所述飞机数据信息中获取所有的所述目标飞机的飞机信息，并将所述飞机信息作为标签与所述实景画面进行叠加显示。
可选的，所述飞机数据信息包括飞机的飞机信息、飞机经纬度信息、飞行高度信息；
所述根据所述飞机数据信息和高点相机信息确定与高点相机对应的预选飞机，包括：
根据所述高点相机的相机经纬度信息、所述飞机经纬度信息，确定所述高点相机和所述飞机之间的水平距离和相对方位；
根据所述水平距离、所述飞行高度信息和所述高点相机的高度判断飞机是否在照射距离范围内；
若在所述照射距离范围内，则将所述飞机确定为初始预选飞机；
根据所述高点相机的安装水平角度和所述相对方位，从所述初始预选飞机中确定在所述高点相机的视场角范围内的飞机，并将所述高点相机的视场角范围内的飞机作为所述预选飞机。
可选的，所述确定所述预选飞机与所述高点相机的实景画面中的目标飞机的对应关系，包括：
根据所述实景画面中的飞机大小和所述水平距离确定所述预选飞机与所述目标飞机的对应关系。
可选的，所述确定所述预选飞机与所述高点相机的实景画面中的目标飞机的对应关系之后，还包括：
对所述对应关系进行校验，得到校验后的所述对应关系；
对应的，所述根据所述对应关系从所述飞机数据信息中获取所有的所述目标飞机的飞机信息，包括：
根据校验后的所述对应关系从所述飞机数据信息中获取所有的所述目标飞机的所述飞机信息。
可选的，所述对所述对应关系进行校验，得到校验后的所述对应关系，包括：
将所述目标飞机的飞机物理特征与对应的预选飞机的所述飞机数据信息中的飞机物理特征进行匹配；
当所述飞机物理特征的匹配成功后，确定校验成功；当所述飞机物理特征的匹配失败后，将所述预选飞机与其距离最近的预选飞机互换对应关系，然后执行所述将所述目标飞机的飞机物理特征与对应的预选飞机的所述飞机数据信息中的飞机物理特征进行匹配的步骤，直至匹配成功，得到更新后的所述对应关系；
直至完成所述目标飞机的校验，得到校验后的所述对应关系。
可选的，所述当所述飞机物理特征的匹配成功后，确定校验成功，包括：
当所述飞机物理特征的匹配成功后，获取所述预选飞机的速度和轨迹数据；
将所述速度和轨迹数据与所述飞机数据信息中的速度信息和轨迹信息进行匹配；
当匹配成功后，则确定校验成功；当匹配失败后，将所述目标飞机的飞机物理特征与对应的预选飞机的所述飞机数据信息中的飞机物理特征进行匹配的步骤，直至匹配成功。
可选的，所述飞机物理特征包括：飞机尾翼标识、飞机机型信息。
本申请提供了一种飞机信息展示装置，包括：
飞机数据信息获取模块，用于获取飞机数据信息；
预选飞机确定模块，用于根据所述飞机数据信息和高点相机信息确定与高点相机对应的预选飞机；
对应关系确定模块，用于确定所述预选飞机与所述高点相机的实景画面中的目标飞机的对应关系；
叠加模块，用于根据所述对应关系从所述飞机数据信息中获取所有的所述目标飞机的飞机信息，并将所述飞机信息作为标签与所述实景画面进行叠加显示。
本申请提供了一种电子设备，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如上所述飞机信息展示方法的步骤。
本申请提供了一种计算机可读存储介质，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如上所述飞机信息展示方法的步骤。
本申请公开了一种飞机信息展示方法，包括：获取飞机数据信息；根据飞机数据信息和高点相机信息确定在高点相机中的预选飞机；确定预选飞机与高点相机的实景画面中的目标飞机的对应关系；根据对应关系从飞机数据信息中获取所有的目标飞机的飞机信息，并将飞机信息作为标签与实景画面进行叠加显示。
可见，本申请通过飞机数据信息和高点相机信息得到在高点相机中的预选飞机，然后结合高点相机的实景画面进行目标飞机的对应，唯一确定实景画面中的目标飞机，然后将目标飞机的飞机信息作为标签与实景画面进行叠加显示，提高了飞机识别的精确度。
本申请同时还提供了一种飞机信息展示装置、电子设备和计算机可读存储介质，均具有上述有益效果，在此不再赘述。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据提供的附图获得其他的附图。
图1为本申请实施例所提供的一种飞机信息展示方法的流程图；
图2为本申请实施例提供的一种高点相机的设置水平视场角范围示意图；
图3为本申请实施例提供的一种在水平视场角范围内的各个飞机的水平位置示意图；
图4为本申请实施例提供的一种垂直视场角范围的示意图；
图5为本申请实施例提供的一种飞机A与高点相机之间的垂直位置的示意图；
图6为本申请实施例提供的一种实景画面示意图；
图7为本申请实施例提供的另一种飞机信息展示方法的流程图；
图8为本申请实施例提供的一种多时刻的实景画面；
图9为本申请实施例所提供的一种飞机信息展示装置的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
相关技术采用相机智能识别飞机机号，再关联航班管理系统信息，在AR(Augmented Reality，增强现实)实景上进行叠加显示。但是，智能识别飞机机号非常困难，需要特别理想的场景和角度，识别率有一定的误差，并且，受天气和时段影响比较大，比如雨，雪等能见度较低天气无法识别，晚上光线太差，飞机机号字体显示太小，无法识别。基于上述技术问题，本实施例提供一种机信息展示方法，通过飞机数据信息和高点相机信息得到在高点相机中的预选飞机，然后结合高点相机的实景画面进行目标飞机的对应，唯一确定实景画面中的目标飞机，然后将目标飞机的飞机信息作为标签与实景画面进行叠加显示，提高了飞机识别的精确度，具体请参考图1，图1为本申请实施例所提供的一种飞机信息展示方法的流程图，具体包括：
S101、获取飞机数据信息；
本实施例应用于AR实景监控系统，其中，AR实景监控系统：是将高点相机实景画面作为地图，可在实景画面中叠加虚拟信息(飞机信息)，用于提升监控效果的软件系统。获取ADS-B系统发送的飞机数据信息，其中，ADS-B(Automatic dependent surveillance–broadcast，广播式自动相关监视)系统是广播式自动相关监视系统的简称，由多地面站和机载站构成，以网状、多点对多点方式完成数据双向通信，可通过数据链自动广播飞机的数据信息，其中，飞机数据信息包括但是不限定于飞机信息(包括航班号或呼号)、经纬度信息、高度信息、速度信息，航向信息中的任意一个或者多个。
在一种可实现的实施方式中，当飞机数据信息包括飞机信息(以航班号为例)、经纬度信息、速度信息和高度信息时，本实施例中得到的飞机数据信息请参考表1。
表1为时刻1通过对接获取到的飞机数据信息表
航班号 经纬度信息 速度信息(m/s) 高度信息(m)
3U8818 LonA，LatA 0 0
MU3390 LonB，LatB 0 0
CZ9609 LonC，LatC 0 0
MU5940 LonD，LatD 0 0
MU3628 LonE，LatE 0 0
3U8217 LonF，LatF 66 55
S102、根据飞机数据信息和高点相机信息确定与高点相机对应的预选飞机；
根据飞机数据信息和高点相机信息确定高点相机可以观测到的预选飞机。其中，其中，高点相机为安装在机场航站楼室外高处，可广角度监控机场跑道及停机坪上飞机的全景摄像机。其中高点相机信息包括：高点相机的相机经纬度信息、高点相机的安装水平角度、高点相机的视场角范围、高点相机的高度，其中高点相机的视场角范围包括：水平视场角范围和垂直视场角范围。
在一种可实现的实施方式中，飞机的飞机信息、飞机经纬度信息、飞行高度信息；S102，包括：
S1021、根据高点相机的相机经纬度信息、飞机经纬度信息，确定高点相机和飞机之间的水平距离和相对方位；
其中，根据高点相机的相机经纬度信息、飞机经纬度信息，利用第一公式可以计算到高点相机和飞机之间的水平距离，其中，第一公式包括：
C＝sin(MLatG)*sin(MLatA)*cos(MLonG-MLonA)+cos(MLatG)*cos(MLatA)；
Distance＝R*Arccos(C)*Pi/180；
其中，设高点相机G的相机经纬度信息为(LonG，LatG)，飞机A的经纬度为(LonA，LatA)；按照0度经线的基准，东经取经度的正值(Longitude)，西经取经度负值(-Longitude)，北纬取90-纬度值(90-Latitude)，南纬取90+纬度值(90+Latitude)，则经过上述处理过后的两点被计为(MLonG，MLatG)和(MLonA，MLatA)；R为地球的半径，取地球平均半径6371.004千米，pi为π取3.1415926，Distance为水平距离。当然还可以计算出高点相机和飞机之间的相对方位，本实施例不再进行阐述，请参考相关技术。
根据上面公式依次类推可计算出高点相机与所有飞机之间的距离和方位，假设如下列表2为计算所得。
表2为高点相机和飞机之间的水平距离和相对方位表
相机经纬度信息 飞机经纬度信息 水平距离 相对方位(水平方位)
LonG，LatG LonA，LatA GA＝60m 030°
LonG，LatG LonB，LatB GB＝92m 060°
LonG，LatG LonC，LatC GC＝128m 065°
LonG，LatG LonD，LatD GD＝156m 062°
LonG，LatG LonE，LatE GE＝175m 105°
LonG，LatG LonF，LatF GF＝114m 075°
… … … …
S1022、根据水平距离、飞行高度信息和高点相机的高度判断飞机是否在照射距离范围内；
步骤S1022-S1024的目的是为了根据水平距离和相对方位过滤出在高点相机视场角范围内的飞机，得到所有的预选飞机。
本步骤首先判断飞机是否在高点相机的能力照射距离范围内。具体的，根据水平距离、飞行高度信息和高点相机的高度计算飞机与高点相机之间的距离；然后判断距离是否在高点相机的照射距离范围内。
例如，当高点相机可以照射的距离为200m，高点相机安装的高度为H为75m，之前已根据经纬度信息计算得到高点相机和飞机之前的水平距离(GA，GB，GC，GD，GE，GF)，根据飞机相对于地面的飞行高度信息可知，飞机A，飞机B，飞机C，飞机D，飞机E的飞行高度为0，均在地面上，飞机F飞行高度为55m，则根据勾股定理可知高点相机和飞机物标之前的大体距离，以飞机A为例，距离L2＝H2+GA2，则L＝(H2+GA2)1/2＝(752+602)1/2＝96m，则可知A点在高点相机的照射距离范围内，同理计算可知，飞机B，飞机C，飞机D，飞机E，飞机F均在高点相机的可视的照射距离范围内。
S1023、若在照射距离范围内，则将飞机确定为初始预选飞机；
S1024、根据高点相机的安装水平角度和相对方位，从初始预选飞机中确定在高点相机的视场角范围内的飞机，并将高点相机的视场角范围内的飞机作为预选飞机。
本步骤的目的是从初始预选飞机中判断预选飞机。其中，在光学仪器中，以光学仪器的镜头为顶点，以被测目标的物象可通过镜头的最大范围的两条边缘构成的夹角，称为视场角。本案例中视场角范围特指高点相机镜头可覆盖的实景画面的范围。
具体的，视场角范围包括水平视场角范围和垂直视场角范围。因此，可以先判断水平视场角范围然后再判断垂直视场角范围；当然还可以是先判断垂直视场角范围然后再判断水平视场角范围，本实施例不再进行限定，用户可自定义设置，只要是能够实现本实施例的目的即可。
其中，针对水平视场角范围进行进一步阐述，请参考图2，图2为本申请实施例提供的一种高点相机的设置水平视场角范围示意图。正北N方位000°，顺时针为正，到正南180°为边界，逆时针为负，到正南-180°都为边界(和正南方向重合)，G为高点相机安装的位置，GG′为高点相机安装的水平方位，规定高点相机水平视场角为180°，根据相机安装的水平角度，高点相机在坐标系统的水平视场角范围为-45°-135°。根据飞机相对高点相机的相对方位，可以大致画出飞机相对高点相机在坐标系中的位置，请参考图3，图3为本申请实施例提供的一种在水平视场角范围内的各个飞机的水平位置示意图。得到如表3的飞机和高点相机之间的位置关系。
表3为飞机和高点相机之间的位置关系表
水平视场角范围 高点相机安装的水平方位 相对方位 飞机真实方位
-045°—135° 045° 030° 075°
-045°—135° 045° 060° 105°
-045°—135° 045° 065° 110°
-045°—135° 045° 062° 107°
-045°—135° 045° 105° 150°
-045°—135° 045° 075° 120°
可知，当前时刻在高点相机水平视场角范围的相机有五架飞机，具体为飞机A、飞机B、飞机C、飞机D、飞机F，飞机E在高点相机水平视场角范围之外。
针对垂直视场角范围，进行进一步阐述。当高点相机的垂直视场角范围为预设范围时，进行安装，例如，当垂直视场角范围为0-80°，设其安装时，俯视安装，低于水平面20°(平面为000°)，则按照坐标系标识方式，垂直视场角范围为-060°-020°，具体请参考图4，图4为本申请实施例提供的一种垂直视场角范围的示意图。具体的，根据三角函数可知，高点相机和物标飞机连线OA，与垂直方向OG之前夹角sinα＝GA/OG＝60/75＝0.8，α＝sin-10.8＝53°，OA和水平方向夹角则为90°-53°＝37°，其在水平线以下，则垂直坐标方位可表示为-37°，在-60°-20°区间内，则A飞机在垂直视场角范围内。请参考图5，图5为本申请实施例提供的一种飞机A与高点相机之间的垂直位置的示意图。同理计算方法，可知飞机B，飞机C，飞机D，飞机F也在垂直视场角范围内，从上面距离和方位计算分析最后过滤出，飞机A、飞机B、飞机C、飞机D、飞机F这五架飞机在高点相机的垂直视场角范围和水平视场角范围内。
S103、确定预选飞机与高点相机的实景画面中的目标飞机的对应关系；
其中，本步骤的目的是为了将筛选出的预选飞机与高点相机中的实景画面中的目标飞机进行配对，得到对应关系。在一种可实现的实施方式中，结合实景画面中物标的显示大小和经纬度计算的距离，大致匹配出对应的飞机位置。可以理解的是，除了从后台对接ADS-B系统的数据，从高点相机实景画面中同时(某个时刻)也可看到五架飞机和在画面中的大致远近位置。请参考图6，图6为本申请实施例提供的一种实景画面示意图。
进一步的，S103包括：根据实景画面中的飞机大小和水平距离确定预选飞机与目标飞机的对应关系。具体的，根据目标飞机在实景画面中的成像大小，对目标飞机距离高点相机的距离进行排序，得到表4，从而根据距离确定对应关系。
表4为目标飞机的距离表
目标飞机 飞机大小 距离高点相机的位置 水平距离
F1 5*4CM 最近 最近
F2 4*3CM 次近 次近
F3 3.1*2.1CM 次远1 次远1
F4 3.5*2.5CM 次远2 次远2
F5 2*1CM 最远 最远
可以理解的是，现有的飞机，飞机型号不同，大小有些许差异，但在实景画面中的成像大小，主要还是和物体与高点相机的距离有关，所以物体大小因素可忽略，比较一下经纬度信息换算的距离(预选飞机和高点相机的水平距离)GA，GB，GC，GD，GF五个距离的大小，按照距离大小进行排序GA>GB>GF>GC>GD，则可大致匹配出实景画面中五个飞机的对应关系(高点相机高度相同，根据勾股定理可知，水平距离和实际连线距离成正比)，具体的对应关系请参考表5。
表5为预选飞机与目标飞机的对应关系表
目标飞机 预选飞机 飞机航班信息
F1 A 3U8818
F2 B MU3390
F3 F 3U8217
F4 C CZ9609
F5 D MU5940
S104、根据对应关系从飞机数据信息中获取所有的目标飞机的飞机信息，并将飞机信息作为标签与实景画面进行叠加显示。
具体的，飞机信息包括飞机的航班和其他信息，以使在实景画面中叠加飞机信息，并追踪显示，其中，其他信息可以是高度信息、速度信息等。可以理解的是，确认实景画面中目标飞机的唯一性后，可在实景画面中对航班信息进行虚拟叠加显示，并进行追踪，当飞机出高点相机的实景画面后，虚拟框消失，也就是当目标飞机出了高点相机的实景画面后，高点相机和对应的飞机信息消失。
可见，本实施例通过对接飞机的经纬度信息，结合相机画面中的物体，通过专业的方法计算匹配出实景画面中的飞机位置，从而实现在实景画面中对飞机航班等信息的叠加。
基于上述技术方案，本实施例通过飞机数据信息和高点相机信息得到在高点相机中的预选飞机，然后结合高点相机的实景画面进行目标飞机的对应，唯一确定实景画面中的目标飞机，然后将目标飞机的飞机信息作为标签与实景画面进行叠加显示，提高了飞机识别的精确度。
基于上述实施例，为了提高精确度，本实施例提供另一种飞机信息展示方法，请参考图7，图7为本申请实施例提供的另一种飞机信息展示方法的流程图，包括：
S201、获取飞机数据信息；
S202、根据飞机数据信息和高点相机信息确定与高点相机对应的预选飞机；
S203、确定预选飞机与高点相机的实景画面中的目标飞机的对应关系；
S204、对对应关系进行校验，得到校验后的对应关系；
通过目标飞机在实景画面中显示的大小结合经纬度计算的距离远近，可大致匹配出高点相机可视角范围内对应的飞机，但因为经纬度换算距离存在一定的误差，对接获取飞机经纬度有延迟等原因，根据后台数据实际匹配到实景画面的飞机可能有错误情况，需要通过其他措施对匹配情况进行数据的校正，来确保飞机匹配的唯一性。
本实施例不对校验方式进行限定，可以是根据飞机物理特征进行校验；还可以是根据飞机的轨迹和速度进行校验；还可以是先根据飞机物理特征进行校验，然后根据飞机的轨迹和速度进行校验；当然还可以是向根据飞机的轨迹和速度进行校验，然后再根据飞机物理特性进行校验；用户可自定义选择，只要是能够实现本实施例的目的即可。
进一步的，S204包括：
S2041、将目标飞机的飞机物理特征与对应的预选飞机的飞机数据信息中的飞机物理特征进行匹配；
其中，飞机物理特征包括：飞机尾翼标识、飞机机型信息，其中，飞机机型信息包括挡风玻璃形状、甚高频天线位置飞机尾翼标识、飞机机型信息、发动机个数和飞机机身层数中的一种或者多种。
根据飞机物理特征进行特征匹配，飞机匹配的准确性高。
当飞机物理特征为飞机尾翼标识时，将目标飞机的飞机物理特征与对应的预选飞机的飞机数据信息中的飞机物理特征进行匹配，包括：将目标飞机的飞机尾翼标识与对应的预选飞机的飞机尾翼标识进行匹配。
当实景画面中确认了疑似目标飞机后，可通过进一步识别飞机尾翼的LOGO图标(飞机尾翼标识)，确认飞机是否匹配，最终得到匹配结果，请参考表6。
表6为飞机尾翼标识匹配结果表
其中，飞机尾翼LOGO相比飞机机号，因图案整体大小较大，颜色标识鲜艳，在实际场景中，很容易被相机识别，识别率高。
当飞机物理特征为飞机机型信息时，将目标飞机的飞机物理特征与对应的预选飞机的飞机数据信息中的飞机物理特征进行匹配，包括：将目标飞机的飞机机型信息与对应的预选飞机的飞机机型信息进行匹配。
可以理解的是，目前针对民航飞机主要是空客和波音两个品牌机型的飞机，其在外形特征上有一定的区别，可以通过高点相机识别飞机外形特征，来获取飞机的具体型号，从而匹配飞机的准确性。本实施例中，飞机机型信息包括挡风玻璃形状、甚高频天线位置、发动机个数和飞机机身层数中的一种或者多种，具体可以根据其中的一种或者多种进行识别。当通过挡风玻璃形状识别时，挡风玻璃的底部是呈现平的飞机为空客飞机；挡风玻璃的底部呈现类似“V”字形的折角的飞机为波音飞机。当通过甚高频天线的位置判断时，甚高频天线靠近驾驶舱的飞机为空客飞机；甚高频天线靠近机身中间的飞机为波音飞机。当根据飞机外形识别飞机型号时，可以根据发动的机个数和飞机机身层数识别。最终确认实景画面中目标飞机的具体机型型号，与后台获取的机型型号比对，可确保飞机匹配的准确性。
S2042、当飞机物理特征的匹配成功后，确定校验成功；当飞机物理特征的匹配失败后，将预选飞机与其距离最近的预选飞机互换对应关系，然后执行将目标飞机的飞机物理特征与对应的预选飞机的飞机数据信息中的飞机物理特征进行匹配的步骤，直至匹配成功，得到更新后的对应关系；
S2043、直至完成目标飞机的校验，得到校验后的对应关系。
进一步的，当存在相邻两个的目标飞机的飞机物理特征相同时，还是会出现错误的对应的关系的问题，本实施例当飞机物理特征的匹配成功后，确定校验成功，包括：当飞机物理特征的匹配成功后，获取预选飞机的速度和轨迹数据；将速度和轨迹数据与飞机数据信息中的速度信息和轨迹信息进行匹配；当匹配成功后，则确定校验成功；当匹配失败后，将目标飞机的飞机物理特征与对应的预选飞机的飞机数据信息中的飞机物理特征进行匹配的步骤，直至匹配成功。
通过匹配飞机LOGO或机型可增加飞机匹配的准确性，但不足以确认飞机的唯一性，可再通过获取不同时刻飞机在画面中的位置，结合飞机的高度和速度信息，可通过一段时间段后，飞机运行所产生的轨迹，进一步增加飞机匹配的准确性。通过高点相机实况观察可看到，时刻1到时刻3这段时间，飞机在实景画面中的不同时间的大概位置和移动的快慢，在实况中的位置变化可大致掌握飞机的轨迹情况，处在不同的位置(空中，跑道上，跑道入口，滑行道上，滑行道入口等)可大致知道飞机的速度区间。请参考图8和表7。
表7为轨迹表
对于速度区间对照，请参考表8。
表8为速度区间对照表
飞机位置 速度区间
滑行道入口 0-5m/s
滑行道上 0-10m/s
跑道入口 5-10m/s
跑道上 10-102m/s
空中(特指降落前) 60-120m/s
其中，本实施例结合飞机物理特征匹配和飞机的速度和轨迹数据匹配，能够准确定的确定对应关系。由于识别飞机尾翼标识或飞机机型信息准确性较高，再结合飞机在一段时间后运行的轨迹情况，长时间的实景画面观察，根据后台获取的预选飞机的速度和轨迹数据和目标飞机实况中获取的速度信息和轨迹信息进行比对，进一步确认飞机匹配的准确性。可见，本实施例结合飞机物理特征匹配和飞机的速度和轨迹数据匹配，来校正对应关系最终的对应关系具有唯一性，精准度有了极大的提高。例如，本实施例得到如表9的匹配表。
表9一种匹配表
其中，轨迹1与轨迹1’相同，速度和轨迹匹配情况吻合，此时，目标飞机F1与预选飞机A对应；轨迹2与轨迹2’相同，速度和轨迹匹配情况吻合，此时，目标飞机F2与预选飞机B对应；轨迹3与轨迹3’相同，速度和轨迹匹配情况吻合，此时，目标飞机F3与预选飞机F对应；轨迹4与轨迹4’相同，速度和轨迹匹配情况吻合，此时，目标飞机F4与预选飞机C对应；轨迹5与轨迹5’相同，速度和轨迹匹配情况吻合，此时，目标飞机F5与预选飞机D对应。
S205、根据校验后的对应关系从飞机数据信息中获取所有的目标飞机的飞机信息。
基于上述技术方案，本实施例通过对接ADS-B系统的飞机数据信息，结合高点相机视场角通过方位和位置计算，再进行专门的校正匹配，在实景画面中可匹配到实际的飞机，再通过标签叠加的形式进行相关信息展示，极大的提高了匹配的准确度。
下面对本申请实施例提供的一种飞机信息展示装置进行介绍，下文描述的飞机信息展示装置与上文描述的飞机信息展示方法可相互对应参照，参考图9，图9为本申请实施例所提供的一种飞机信息展示装置的结构示意图，包括：
飞机数据信息获取模块101，用于获取飞机数据信息；
预选飞机确定模块102，用于根据飞机数据信息和高点相机信息确定与高点相机对应的预选飞机；
对应关系确定模块103，用于确定预选飞机与高点相机的实景画面中的目标飞机的对应关系；
叠加模块104，用于根据对应关系从飞机数据信息中获取所有的目标飞机的飞机信息，并将飞机信息作为标签与实景画面进行叠加显示。
可选的，飞机数据信息包括飞机的飞机信息、飞机经纬度信息、飞行高度信息；
预选飞机确定模块102，包括：
第一确定单元，用于根据高点相机的相机经纬度信息、飞机经纬度信息，确定高点相机和飞机之间的水平距离和相对方位；
判断单元，用于根据水平距离、飞行高度信息和高点相机的高度判断飞机是否在照射距离范围内；
初始预选飞机确定单元，用于若在照射距离范围内，则将飞机确定为初始预选飞机；
预选飞机确定单元，用于根据高点相机的安装水平角度和相对方位，从初始预选飞机中确定在高点相机的视场角范围内的飞机，并将高点相机的视场角范围内的飞机作为预选飞机。
可选的，对应关系确定模块103，包括：
对应关系确定单元，用于根据实景画面中的飞机大小和水平距离确定预选飞机与目标飞机的对应关系。
可选的，还包括：
校验模块，用于对对应关系进行校验，得到校验后的对应关系；
对应的，叠加模块104，包括：
飞机信息确定单元，用于根据校验后的对应关系从飞机数据信息中获取所有的目标飞机的飞机信息。
可选的，校验模块，包括：
匹配单元，用于将目标飞机的飞机物理特征与对应的预选飞机的飞机数据信息中的飞机物理特征进行匹配；
处理单元，用于当飞机物理特征的匹配成功后，确定校验成功；当飞机物理特征的匹配失败后，将预选飞机与其距离最近的预选飞机互换对应关系，然后执行将目标飞机的飞机物理特征与对应的预选飞机的飞机数据信息中的飞机物理特征进行匹配的步骤，直至匹配成功，得到更新后的对应关系；
对应关系获取单元，用于直至完成目标飞机的校验，得到校验后的对应关系。
可选的，处理单元，包括：
速度和轨迹数据获取子单元，用于当飞机物理特征的匹配成功后，获取预选飞机的速度和轨迹数据；
匹配子单元，用于将速度和轨迹数据与飞机数据信息中的速度信息和轨迹信息进行匹配；
处理子单元，用于当匹配成功后，则确定校验成功；当匹配失败后，将目标飞机的飞机物理特征与对应的预选飞机的飞机数据信息中的飞机物理特征进行匹配的步骤，直至匹配成功。
可选的，飞机物理特征包括：飞机尾翼标识、飞机机型信息。
由于装置部分的实施例与方法部分的实施例相互对应，因此装置部分的实施例请参见方法部分的实施例的描述，这里暂不赘述。
下面对本申请实施例提供的一种电子设备进行介绍，下文描述的电子设备与上文描述的方法可相互对应参照。
本实施例提供一种电子设备，包括：
存储器，用于存储计算机程序；
处理器，用于执行计算机程序时实现如上述飞机信息展示方法的步骤。
由于电子设备部分的实施例与方法部分的实施例相互对应，因此电子设备部分的实施例请参见方法部分的实施例的描述，这里暂不赘述。
下面对本申请实施例提供的一种计算机可读存储介质进行介绍，下文描述的计算机可读存储介质与上文描述的方法可相互对应参照，
本实施例提供一种计算机可读存储介质，计算机可读存储介质上存储有计算机程序，计算机程序被处理器执行时实现如上述飞机信息展示方法的步骤。
由于计算机可读存储介质部分的实施例与方法部分的实施例相互对应，因此计算机可读存储介质部分的实施例请参见方法部分的实施例的描述，这里暂不赘述。
说明书中各个实施例采用递进的方式描述，每个实施例重点说明的都是与其他实施例的不同之处，各个实施例之间相同相似部分互相参见即可。对于实施例公开的装置而言，由于其与实施例公开的方法相对应，所以描述的比较简单，相关之处参见方法部分说明即可。
专业人员还可以进一步意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、计算机软件或者二者的结合来实现，为了清楚地说明硬件和软件的可互换性，在上述说明中已经按照功能一般性地描述了各示例的组成及步骤。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
结合本文中所公开的实施例描述的方法或算法的步骤可以直接用硬件、处理器执行的软件模块，或者二者的结合来实施。软件模块可以置于随机存储器(RAM)、内存、只读存储器(ROM)、电可编程ROM、电可擦除可编程ROM、寄存器、硬盘、可移动磁盘、CD-ROM、或技术领域内所公知的任意其它形式的存储介质中。
以上对本申请所提供的一种飞机信息展示方法、装置、电子设备和计算机可读存储介质进行了详细介绍。本文中应用了具体个例对本申请的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本申请的方法及其核心思想。应当指出，对于本技术领域的普通技术人员来说，在不脱离本申请原理的前提下，还可以对本申请进行若干改进和修饰，这些改进和修饰也落入本申请权利要求的保护范围内。

Claims (8)

1.一种飞机信息展示方法，其特征在于，包括：
获取飞机数据信息；
根据所述飞机数据信息和高点相机信息确定与高点相机对应的预选飞机；
确定所述预选飞机与所述高点相机的实景画面中的目标飞机的对应关系；
根据所述对应关系从所述飞机数据信息中获取所有的所述目标飞机的飞机信息，并将所述飞机信息作为标签与所述实景画面进行叠加显示；
其中，所述飞机数据信息包括飞机的飞机信息、飞机经纬度信息、飞行高度信息；
所述根据所述飞机数据信息和高点相机信息确定与高点相机对应的预选飞机，包括：
根据所述高点相机的相机经纬度信息、所述飞机经纬度信息，确定所述高点相机和所述飞机之间的水平距离和相对方位；
根据所述水平距离、所述飞行高度信息和所述高点相机的高度判断飞机是否在照射距离范围内；
若在所述照射距离范围内，则将所述飞机确定为初始预选飞机；
根据所述高点相机的安装水平角度和所述相对方位，从所述初始预选飞机中确定在所述高点相机的视场角范围内的飞机，并将所述高点相机的视场角范围内的飞机作为所述预选飞机；
其中，所述确定所述预选飞机与所述高点相机的实景画面中的目标飞机的对应关系，包括：
根据所述实景画面中的飞机大小和所述水平距离确定所述预选飞机与所述目标飞机的对应关系。
2.根据权利要求1所述的飞机信息展示方法，其特征在于，所述确定所述预选飞机与所述高点相机的实景画面中的目标飞机的对应关系之后，还包括：
对所述对应关系进行校验，得到校验后的所述对应关系；
对应的，所述根据所述对应关系从所述飞机数据信息中获取所有的所述目标飞机的飞机信息，包括：
根据校验后的所述对应关系从所述飞机数据信息中获取所有的所述目标飞机的所述飞机信息。
3.根据权利要求2所述的飞机信息展示方法，其特征在于，所述对所述对应关系进行校验，得到校验后的所述对应关系，包括：
将所述目标飞机的飞机物理特征与对应的预选飞机的所述飞机数据信息中的飞机物理特征进行匹配；
当所述飞机物理特征的匹配成功后，确定校验成功；当所述飞机物理特征的匹配失败后，将所述预选飞机与其距离最近的预选飞机互换对应关系，然后执行所述将所述目标飞机的飞机物理特征与对应的预选飞机的所述飞机数据信息中的飞机物理特征进行匹配的步骤，直至匹配成功，得到更新后的所述对应关系；
直至完成所述目标飞机的校验，得到校验后的所述对应关系。
4.根据权利要求3所述的飞机信息展示方法，其特征在于，所述当所述飞机物理特征的匹配成功后，确定校验成功，包括：
当所述飞机物理特征的匹配成功后，获取所述预选飞机的速度和轨迹数据；
将所述速度和轨迹数据与所述飞机数据信息中的速度信息和轨迹信息进行匹配；
当匹配成功后，则确定校验成功；当匹配失败后，将所述目标飞机的飞机物理特征与对应的预选飞机的所述飞机数据信息中的飞机物理特征进行匹配的步骤，直至匹配成功。
5.根据权利要求3所述的飞机信息展示方法，其特征在于，所述飞机物理特征包括：飞机尾翼标识、飞机机型信息。
6.一种飞机信息展示装置，其特征在于，包括：
飞机数据信息获取模块，用于获取飞机数据信息；
预选飞机确定模块，用于根据所述飞机数据信息和高点相机信息确定与高点相机对应的预选飞机；
对应关系确定模块，用于确定所述预选飞机与所述高点相机的实景画面中的目标飞机的对应关系；
叠加模块，用于根据所述对应关系从所述飞机数据信息中获取所有的所述目标飞机的飞机信息，并将所述飞机信息作为标签与所述实景画面进行叠加显示；
其中，所述飞机数据信息包括飞机的飞机信息、飞机经纬度信息、飞行高度信息；
所述预选飞机确定模块，包括：
第一确定单元，用于根据所述高点相机的相机经纬度信息、所述飞机经纬度信息，确定所述高点相机和所述飞机之间的水平距离和相对方位；
判断单元，用于根据所述水平距离、所述飞行高度信息和所述高点相机的高度判断飞机是否在照射距离范围内；
初始预选飞机确定单元，用于若在所述照射距离范围内，则将所述飞机确定为初始预选飞机；
预选飞机确定单元，用于根据所述高点相机的安装水平角度和所述相对方位，从所述初始预选飞机中确定在所述高点相机的视场角范围内的飞机，并将所述高点相机的视场角范围内的飞机作为所述预选飞机；
其中，所述对应关系确定模块，包括：
校验模块，用于根据所述实景画面中的飞机大小和所述水平距离确定所述预选飞机与所述目标飞机的对应关系。
7.一种电子设备，其特征在于，包括：
存储器，用于存储计算机程序；
处理器，用于执行所述计算机程序时实现如权利要求1至5任一项所述飞机信息展示方法的步骤。
8.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有计算机程序，所述计算机程序被处理器执行时实现如权利要求1至5任一项所述飞机信息展示方法的步骤。
CN202011002903.5A 2020-09-22 2020-09-22 一种飞机信息展示方法、装置、电子设备和存储介质 Active CN112130946B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011002903.5A CN112130946B (zh) 2020-09-22 2020-09-22 一种飞机信息展示方法、装置、电子设备和存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011002903.5A CN112130946B (zh) 2020-09-22 2020-09-22 一种飞机信息展示方法、装置、电子设备和存储介质

Publications (2)

Publication Number Publication Date
CN112130946A CN112130946A (zh) 2020-12-25
CN112130946B true CN112130946B (zh) 2024-03-26

Family

ID=73842356

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011002903.5A Active CN112130946B (zh) 2020-09-22 2020-09-22 一种飞机信息展示方法、装置、电子设备和存储介质

Country Status (1)

Country Link
CN (1) CN112130946B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112839171B (zh) * 2020-12-31 2023-02-10 上海米哈游天命科技有限公司 一种画面拍摄方法、装置、存储介质及电子设备
CN114253280A (zh) * 2021-12-03 2022-03-29 中国商用飞机有限责任公司 用于辅助控制飞机降落的方法
CN116661636B (zh) * 2023-05-30 2024-01-30 北京和德宇航技术有限公司 一种轨迹显示方法、装置、设备及存储介质

Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104113692A (zh) * 2014-07-22 2014-10-22 深圳市中兴移动通信有限公司 图像拍摄方法和装置
KR101470757B1 (ko) * 2013-09-30 2014-12-08 세종대학교산학협력단 증강현실 서비스 제공 방법 및 장치
CN105335764A (zh) * 2014-08-01 2016-02-17 深圳中集天达空港设备有限公司 一种入坞飞机机型识别验证系统及方法
CN107655458A (zh) * 2017-09-15 2018-02-02 福建四创软件有限公司 基于gis的全景图场景自动关联方法
CN108122434A (zh) * 2017-12-19 2018-06-05 四川航空股份有限公司 一种飞行监控方法及装置
CN108133028A (zh) * 2017-12-28 2018-06-08 北京天睿空间科技股份有限公司 基于视频分析与定位信息结合的航空器挂牌方法
CN110209847A (zh) * 2019-04-29 2019-09-06 中国科学院遥感与数字地球研究所 航空遥感数据机上准实时处理方法、装置和存储介质
CN110751860A (zh) * 2018-07-19 2020-02-04 波音公司 用于自主机场跑道导航的系统、方法和计算机可读介质
CN111508281A (zh) * 2020-04-27 2020-08-07 上海航天计算机技术研究所 一种星载平台对ads-b目标进行分类引导的方法
CN111581322A (zh) * 2020-05-12 2020-08-25 北京维盛沃德科技有限公司 视频中兴趣区域在地图窗口内显示的方法和装置及设备
CN111638793A (zh) * 2020-06-04 2020-09-08 浙江商汤科技开发有限公司 飞行器的展示方法、装置、电子设备及存储介质
CN111638796A (zh) * 2020-06-05 2020-09-08 浙江商汤科技开发有限公司 虚拟对象的展示方法、装置、计算机设备及存储介质

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10885446B2 (en) * 2017-07-24 2021-01-05 Sap Se Big-data driven telematics with AR/VR user interfaces

Patent Citations (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101470757B1 (ko) * 2013-09-30 2014-12-08 세종대학교산학협력단 증강현실 서비스 제공 방법 및 장치
CN104113692A (zh) * 2014-07-22 2014-10-22 深圳市中兴移动通信有限公司 图像拍摄方法和装置
CN105335764A (zh) * 2014-08-01 2016-02-17 深圳中集天达空港设备有限公司 一种入坞飞机机型识别验证系统及方法
CN107655458A (zh) * 2017-09-15 2018-02-02 福建四创软件有限公司 基于gis的全景图场景自动关联方法
CN108122434A (zh) * 2017-12-19 2018-06-05 四川航空股份有限公司 一种飞行监控方法及装置
CN108133028A (zh) * 2017-12-28 2018-06-08 北京天睿空间科技股份有限公司 基于视频分析与定位信息结合的航空器挂牌方法
CN110751860A (zh) * 2018-07-19 2020-02-04 波音公司 用于自主机场跑道导航的系统、方法和计算机可读介质
CN110209847A (zh) * 2019-04-29 2019-09-06 中国科学院遥感与数字地球研究所 航空遥感数据机上准实时处理方法、装置和存储介质
CN111508281A (zh) * 2020-04-27 2020-08-07 上海航天计算机技术研究所 一种星载平台对ads-b目标进行分类引导的方法
CN111581322A (zh) * 2020-05-12 2020-08-25 北京维盛沃德科技有限公司 视频中兴趣区域在地图窗口内显示的方法和装置及设备
CN111638793A (zh) * 2020-06-04 2020-09-08 浙江商汤科技开发有限公司 飞行器的展示方法、装置、电子设备及存储介质
CN111638796A (zh) * 2020-06-05 2020-09-08 浙江商汤科技开发有限公司 虚拟对象的展示方法、装置、计算机设备及存储介质

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
"AR and VR: A safe landing on the plant floor";V Ramkumar;《Plant Engineering》;第72卷(第6期);第44-45页 *
"动态三维合成视景及其视景仿真研究";王康;《中国优秀硕士学位论文全文数据库 (工程科技Ⅱ辑)》;第C031-6页 *
"基于增强现实技术的飞行视景系统";张仟新 等;《航空电子技术》;第47卷(第1期);第22-24页 *
结合显著性检测与特征匹配的飞机目标识别;欧阳欢;范大昭;郭静;代亚贞;;测绘通报(第03期);第4-9页 *

Also Published As

Publication number Publication date
CN112130946A (zh) 2020-12-25

Similar Documents

Publication Publication Date Title
CN112130946B (zh) 一种飞机信息展示方法、装置、电子设备和存储介质
US9494447B2 (en) Methods and systems for attitude differentiation in enhanced vision images
US8099234B1 (en) System, apparatus, and method for generating location information on an aircraft display unit using location markers
US10935987B2 (en) Landing site localization for dynamic control of an aircraft toward a landing site
EP2618322B1 (en) System and method for detecting and displaying airport approach lights
US11749126B2 (en) Landing site localization for dynamic control of an aircraft toward a landing site
US9733349B1 (en) System for and method of radar data processing for low visibility landing applications
US11094210B2 (en) Airport surface navigation aid
US10308371B1 (en) Spatially modulated and temporally sequenced multi-stream vision system
EP2919219B1 (en) System and method for identifying runway position during an intersection takeoff
JP2014220604A (ja) 撮影位置情報表示装置
US7489268B2 (en) Methods and systems for producing an interpretive airborne radar map
CN113286081B (zh) 机场全景视频的目标识别方法、装置、设备及介质
CN108024070A (zh) 在合成图像上覆盖传感器图像的方法及相关显示系统
CN113286080A (zh) 场面监视系统与视频的联动跟踪和增强显示方法和装置
CN112309176A (zh) 一种基于平显系统的三维飞行管道生成方法
CN107404349B (zh) 一种融合ads-b实测信号和视距传输分析的信号覆盖分析方法
US20200168112A1 (en) Device and method for landing assistance for an aircraft in conditions of reduced visibility
US9979934B1 (en) Automated weather sensing system and method using cameras
US20230359197A1 (en) Landing Site Localization for Dynamic Control of an Aircraft Toward a Landing Site
CN113286121A (zh) 机场场面视频的增强监视方法、装置、设备及介质
AU2018365237B2 (en) Method for observing the surface of the earth and device for implementing same
CN110502200A (zh) 视野显示系统和移动体
US10777013B1 (en) System and method for enhancing approach light display
RU2724908C1 (ru) Способ посадки бвс самолетного типа на взлетно-посадочную полосу с использованием оптических приборов различного диапазона

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant