CN113715668B - 无人机自动充电方法及系统 - Google Patents
无人机自动充电方法及系统 Download PDFInfo
- Publication number
- CN113715668B CN113715668B CN202111279973.XA CN202111279973A CN113715668B CN 113715668 B CN113715668 B CN 113715668B CN 202111279973 A CN202111279973 A CN 202111279973A CN 113715668 B CN113715668 B CN 113715668B
- Authority
- CN
- China
- Prior art keywords
- unmanned aerial
- aerial vehicle
- charging
- platform
- uwb
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60L—PROPULSION OF ELECTRICALLY-PROPELLED VEHICLES; SUPPLYING ELECTRIC POWER FOR AUXILIARY EQUIPMENT OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRODYNAMIC BRAKE SYSTEMS FOR VEHICLES IN GENERAL; MAGNETIC SUSPENSION OR LEVITATION FOR VEHICLES; MONITORING OPERATING VARIABLES OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRIC SAFETY DEVICES FOR ELECTRICALLY-PROPELLED VEHICLES
- B60L53/00—Methods of charging batteries, specially adapted for electric vehicles; Charging stations or on-board charging equipment therefor; Exchange of energy storage elements in electric vehicles
- B60L53/60—Monitoring or controlling charging stations
- B60L53/62—Monitoring or controlling charging stations in response to charging parameters, e.g. current, voltage or electrical charge
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60L—PROPULSION OF ELECTRICALLY-PROPELLED VEHICLES; SUPPLYING ELECTRIC POWER FOR AUXILIARY EQUIPMENT OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRODYNAMIC BRAKE SYSTEMS FOR VEHICLES IN GENERAL; MAGNETIC SUSPENSION OR LEVITATION FOR VEHICLES; MONITORING OPERATING VARIABLES OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRIC SAFETY DEVICES FOR ELECTRICALLY-PROPELLED VEHICLES
- B60L53/00—Methods of charging batteries, specially adapted for electric vehicles; Charging stations or on-board charging equipment therefor; Exchange of energy storage elements in electric vehicles
- B60L53/30—Constructional details of charging stations
- B60L53/35—Means for automatic or assisted adjustment of the relative position of charging devices and vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60L—PROPULSION OF ELECTRICALLY-PROPELLED VEHICLES; SUPPLYING ELECTRIC POWER FOR AUXILIARY EQUIPMENT OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRODYNAMIC BRAKE SYSTEMS FOR VEHICLES IN GENERAL; MAGNETIC SUSPENSION OR LEVITATION FOR VEHICLES; MONITORING OPERATING VARIABLES OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRIC SAFETY DEVICES FOR ELECTRICALLY-PROPELLED VEHICLES
- B60L53/00—Methods of charging batteries, specially adapted for electric vehicles; Charging stations or on-board charging equipment therefor; Exchange of energy storage elements in electric vehicles
- B60L53/30—Constructional details of charging stations
- B60L53/35—Means for automatic or assisted adjustment of the relative position of charging devices and vehicles
- B60L53/37—Means for automatic or assisted adjustment of the relative position of charging devices and vehicles using optical position determination, e.g. using cameras
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60L—PROPULSION OF ELECTRICALLY-PROPELLED VEHICLES; SUPPLYING ELECTRIC POWER FOR AUXILIARY EQUIPMENT OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRODYNAMIC BRAKE SYSTEMS FOR VEHICLES IN GENERAL; MAGNETIC SUSPENSION OR LEVITATION FOR VEHICLES; MONITORING OPERATING VARIABLES OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRIC SAFETY DEVICES FOR ELECTRICALLY-PROPELLED VEHICLES
- B60L53/00—Methods of charging batteries, specially adapted for electric vehicles; Charging stations or on-board charging equipment therefor; Exchange of energy storage elements in electric vehicles
- B60L53/60—Monitoring or controlling charging stations
- B60L53/66—Data transfer between charging stations and vehicles
- B60L53/665—Methods related to measuring, billing or payment
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60L—PROPULSION OF ELECTRICALLY-PROPELLED VEHICLES; SUPPLYING ELECTRIC POWER FOR AUXILIARY EQUIPMENT OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRODYNAMIC BRAKE SYSTEMS FOR VEHICLES IN GENERAL; MAGNETIC SUSPENSION OR LEVITATION FOR VEHICLES; MONITORING OPERATING VARIABLES OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRIC SAFETY DEVICES FOR ELECTRICALLY-PROPELLED VEHICLES
- B60L53/00—Methods of charging batteries, specially adapted for electric vehicles; Charging stations or on-board charging equipment therefor; Exchange of energy storage elements in electric vehicles
- B60L53/60—Monitoring or controlling charging stations
- B60L53/67—Controlling two or more charging stations
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60L—PROPULSION OF ELECTRICALLY-PROPELLED VEHICLES; SUPPLYING ELECTRIC POWER FOR AUXILIARY EQUIPMENT OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRODYNAMIC BRAKE SYSTEMS FOR VEHICLES IN GENERAL; MAGNETIC SUSPENSION OR LEVITATION FOR VEHICLES; MONITORING OPERATING VARIABLES OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRIC SAFETY DEVICES FOR ELECTRICALLY-PROPELLED VEHICLES
- B60L53/00—Methods of charging batteries, specially adapted for electric vehicles; Charging stations or on-board charging equipment therefor; Exchange of energy storage elements in electric vehicles
- B60L53/60—Monitoring or controlling charging stations
- B60L53/68—Off-site monitoring or control, e.g. remote control
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
- B64U50/00—Propulsion; Power supply
- B64U50/30—Supply or distribution of electrical power
- B64U50/34—In-flight charging
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01M—PROCESSES OR MEANS, e.g. BATTERIES, FOR THE DIRECT CONVERSION OF CHEMICAL ENERGY INTO ELECTRICAL ENERGY
- H01M10/00—Secondary cells; Manufacture thereof
- H01M10/42—Methods or arrangements for servicing or maintenance of secondary cells or secondary half-cells
- H01M10/44—Methods for charging or discharging
- H01M10/446—Initial charging measures
-
- H—ELECTRICITY
- H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
- H02J—CIRCUIT ARRANGEMENTS OR SYSTEMS FOR SUPPLYING OR DISTRIBUTING ELECTRIC POWER; SYSTEMS FOR STORING ELECTRIC ENERGY
- H02J7/00—Circuit arrangements for charging or depolarising batteries or for supplying loads from batteries
- H02J7/0047—Circuit arrangements for charging or depolarising batteries or for supplying loads from batteries with monitoring or indicating devices or circuits
- H02J7/0048—Detection of remaining charge capacity or state of charge [SOC]
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60L—PROPULSION OF ELECTRICALLY-PROPELLED VEHICLES; SUPPLYING ELECTRIC POWER FOR AUXILIARY EQUIPMENT OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRODYNAMIC BRAKE SYSTEMS FOR VEHICLES IN GENERAL; MAGNETIC SUSPENSION OR LEVITATION FOR VEHICLES; MONITORING OPERATING VARIABLES OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRIC SAFETY DEVICES FOR ELECTRICALLY-PROPELLED VEHICLES
- B60L2200/00—Type of vehicles
- B60L2200/10—Air crafts
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60L—PROPULSION OF ELECTRICALLY-PROPELLED VEHICLES; SUPPLYING ELECTRIC POWER FOR AUXILIARY EQUIPMENT OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRODYNAMIC BRAKE SYSTEMS FOR VEHICLES IN GENERAL; MAGNETIC SUSPENSION OR LEVITATION FOR VEHICLES; MONITORING OPERATING VARIABLES OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRIC SAFETY DEVICES FOR ELECTRICALLY-PROPELLED VEHICLES
- B60L2240/00—Control parameters of input or output; Target parameters
- B60L2240/40—Drive Train control parameters
- B60L2240/54—Drive Train control parameters related to batteries
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60L—PROPULSION OF ELECTRICALLY-PROPELLED VEHICLES; SUPPLYING ELECTRIC POWER FOR AUXILIARY EQUIPMENT OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRODYNAMIC BRAKE SYSTEMS FOR VEHICLES IN GENERAL; MAGNETIC SUSPENSION OR LEVITATION FOR VEHICLES; MONITORING OPERATING VARIABLES OF ELECTRICALLY-PROPELLED VEHICLES; ELECTRIC SAFETY DEVICES FOR ELECTRICALLY-PROPELLED VEHICLES
- B60L2240/00—Control parameters of input or output; Target parameters
- B60L2240/60—Navigation input
- B60L2240/62—Vehicle position
- B60L2240/622—Vehicle position by satellite navigation
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02E—REDUCTION OF GREENHOUSE GAS [GHG] EMISSIONS, RELATED TO ENERGY GENERATION, TRANSMISSION OR DISTRIBUTION
- Y02E60/00—Enabling technologies; Technologies with a potential or indirect contribution to GHG emissions mitigation
- Y02E60/10—Energy storage using batteries
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T10/00—Road transport of goods or passengers
- Y02T10/60—Other road transportation technologies with climate change mitigation effect
- Y02T10/70—Energy storage systems for electromobility, e.g. batteries
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T10/00—Road transport of goods or passengers
- Y02T10/60—Other road transportation technologies with climate change mitigation effect
- Y02T10/7072—Electromobility specific charging systems or methods for batteries, ultracapacitors, supercapacitors or double-layer capacitors
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T90/00—Enabling technologies or technologies with a potential or indirect contribution to GHG emissions mitigation
- Y02T90/10—Technologies relating to charging of electric vehicles
- Y02T90/12—Electric charging stations
-
- Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
- Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
- Y02T—CLIMATE CHANGE MITIGATION TECHNOLOGIES RELATED TO TRANSPORTATION
- Y02T90/00—Enabling technologies or technologies with a potential or indirect contribution to GHG emissions mitigation
- Y02T90/10—Technologies relating to charging of electric vehicles
- Y02T90/16—Information or communication technologies improving the operation of electric vehicles
Abstract
本发明提供无人机自动充电方法及系统,包括:确定无人机预设电量告警阈值,基于所述无人机预设电量告警阈值触发返回充电指令;依次基于全球定位系统GPS导航、超宽带UWB定位和视觉定位,搜寻定位充电平台;待无人机降落至所述充电平台,无人机接收所述充电平台发送的充电指令,完成自动充电。本发明通过组合定位技术实现无人机自动充电,通过提高定位精度,实现无人机悬浮充电,也可降落至平台后无线充电,无需人工干预,有效提高蜂群无人机充电效率和任务适应能力。
Description
技术领域
本发明涉及无人机技术领域,尤其涉及无人机自动充电方法及系统。
背景技术
随着无人机应用的日益广泛,相对于单一的无人机,蜂群无人机可以弥补载荷配置方面的不足,并能够协作执行复杂任务。
目前,蜂群无人机受限于无人机载重能力和电池储能能力,单次充电无法胜任长周期任务。现有技术中无人机补充能量的方式多为更换电池或有线充电方式,需要人工介入,不适于复杂恶劣环境中的任务执行。
针对上述不足,需要提出针对无人机充电的新方法。
发明内容
本发明提供无人机自动充电方法及系统,用以解决现有技术中无法满足蜂群无人机自动充电需求的缺陷。
第一方面,本发明提供一种无人机自动充电方法,包括:
确定无人机预设电量告警阈值,基于所述无人机预设电量告警阈值触发返回充电指令;
依次基于全球定位系统GPS导航、超宽带UWB定位和视觉定位,搜寻定位充电平台;
待无人机降落至所述充电平台,无人机接收所述充电平台发送的充电指令,完成自动充电。
在一个实施例中,确定无人机预设电量告警阈值,基于所述无人机预设电量告警阈值触发返回充电指令,包括:
获取执行任务所需电量,若判断无人机剩余电量低于所述执行任务所需电量,则触发返回充电指令;
或者,若判断所述无人机剩余电量低于电量阈值,则触发返回充电指令。
在一个实施例中,依次基于全球定位系统GPS导航、超宽带UWB定位和视觉定位,搜寻定位充电平台,包括:
待触发所述返回充电指令后,通过GPS信号进行导航,飞行至所述充电平台的UWB覆盖范围边缘,切换至UWB定位系统;
所述UWB系统根据所述充电平台是否被占用、无人机排队数量以及无人机坐标,控制无人机搜索定位所述充电平台;
待无人机进入视觉定位搜索范围内,由机器视觉基于所述充电平台的预设标识,完成无人机的精准定位和着陆。
在一个实施例中,所述UWB系统根据所述充电平台是否被占用、无人机排队数量以及无人机坐标,控制无人机搜索定位所述充电平台,之前包括:
给所有无人机配置UWB标签,由所述UWB系统基于所述UWB标签获取每个无人机的坐标。
在一个实施例中,所述UWB系统根据所述充电平台是否被占用、无人机排队数量以及无人机坐标,控制无人机搜索定位所述充电平台,具体包括:
若判断所述充电平台没有被占用,则执行UWB定位导航至所述充电平台上方;
若判断所述充电平台已被占用,且在当前无人机之前没有其它无人机排队充电,则执行UWB定位导航至所述充电平台的预设临时停靠区域,待充电无人机完成充电;
若判断所述充电平台已被占用,且在当前无人机之前存在其它无人机排队充电,则执行原位降落停靠,待前面的无人机停靠充电平台后,执行UWB定位导航至所述充电平台的预设临时停靠区域。
在一个实施例中,待无人机进入视觉定位搜索范围内,由机器视觉基于所述充电平台的预设标识,完成无人机的精准定位和着陆,包括:
由无人机上配置的机载相机拍摄获取所述预设标识,基于所述预设标识进行无人机位置的居中对准;
基于所述无人机位置的居中对准,无人机以预设下落速度进行降落,直至完全停靠在所述充电平台上。
在一个实施例中,待无人机降落至所述充电平台,无人机接收所述充电平台发送的充电指令,完成自动充电,包括:
根据所述充电指令,无人机暂停旋翼工作,开启无线充电,由UWB系统共享位置信息;
通过广播形式将所述位置信息发送至后续排队无人机,待充电完成后,无人机再次起飞,待离开所述充电平台达到预设距离后,所述充电平台转换为空闲状态。
第二方面,本发明还提供一种无人机自动充电系统,包括:
触发模块,用于确定无人机预设电量告警阈值,基于所述无人机预设电量告警阈值触发返回充电指令;
定位模块,用于依次基于全球定位系统GPS导航、超宽带UWB定位和视觉定位,搜寻定位充电平台;
充电模块,用于待无人机降落至所述充电平台,无人机接收所述充电平台发送的充电指令,完成自动充电。
第三方面,本发明还提供一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述任一种所述无人机自动充电方法的步骤。
第四方面,本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如上述任一种所述无人机自动充电方法的步骤。
第五方面,本发明还提供一种计算机程序产品,包括计算机程序,所述计算机程序被处理器执行时实现如上述任一种所述无人机自动充电方法的步骤。
本发明提供的无人机自动充电方法及系统,通过组合定位技术实现无人机自动充电,通过提高定位精度,实现无人机悬浮充电,也可降落至平台后无线充电,无需人工干预,有效提高蜂群无人机充电效率和任务适应能力。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明提供的无人机自动充电方法的流程示意图;
图2是本发明提供的基于GPS、UWB和机器视觉相结合的充电平台定位范围示意图;
图3是本发明提供的无人机充电命令触发流程示意图;
图4是本发明提供的无人机搜寻定位充电流程示意图;
图5是本发明提供的无人机平台充电流程示意图;
图6是本发明提供的UWB定位通讯系统搭建示意图;
图7是本发明提供的三台无人机位置及相应落点示例图;
图8是本发明提供的无人机A充电流程示意图;
图9是本发明提供的无人机B充电流程示意图;
图10是本发明提供的无人机C充电流程示意图;
图11是本发明提供的无人机自动充电系统的结构示意图;
图12是本发明提供的电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
针对现有技术存在的问题,本发明提出一种基于组合定位技术的针对蜂群无人机自动充电方法,图1是本发明提供的无人机自动充电方法的流程示意图,如图1所示,包括:
S1,确定无人机预设电量告警阈值,基于所述无人机预设电量告警阈值触发返回充电指令;
S2,依次基于全球定位系统GPS导航、超宽带UWB定位和视觉定位,搜寻定位充电平台;
S3,待无人机降落至所述充电平台,无人机接收所述充电平台发送的充电指令,完成自动充电。
需要说明的是,本发明提出的无人机自动充电方法,综合GPS(GlobalPositioning System,全球定位系统)导航、UWB(Ultra Wide Band,超宽带)和视觉系统三种空间定位技术,覆盖的范围如图2所示。其中,GPS起到远距离,大范围定位功能,安装GPS可以保证系统具备现有系统的完整功能。UWB系统可以用于在小范围内的精确定位,其定位误差小于10CM,可以保证无人机精确悬浮在目标位置。视觉系统,用于识别充电平台上的LOGO,利用识别进行确认,可以防止UWB定位系统出现故障,导致无人机降落在不合理的位置,增强系统的可靠性。同时,无人机在降落平台后,会与平台进行通讯,将自身位置准确传递给无线充电平台。平台中的充电线圈进行运动,到匹配无人机位置的最佳位置,从而保证最佳的感应效果,提升充电效率。利用无人机组合定位和充电线圈定位相结合的方式,实现无人机的全自动充电。
具体地,包括无人机充电命令触发、无人机搜索定位充电平台以及无人机平台充电三部分,分别如图3、图4和图5所示,蜂群无人机在执行任务期间,实施监测自身剩余电量,当电量小于设定阈值时,则触发充电指令。充电指令触发后,无人机首先依靠GPS导航,在充电平台附近,设立UWB基站,当无人机进入UWB基站检测范围时,由UWB定位系统接管GPS信号进行定位,判断充电平台是否被占用;无人机进入充电平台上空后,将通过视觉方式进行精确定位和位姿调整,并降落至充电平台;充电平台接收充电指令,完成充电,并发送无人机充电完成指令,完成无人机自动充电。
本发明通过组合定位技术实现无人机自动充电,通过提高定位精度,实现无人机悬浮充电,也可降落至平台后无线充电,无需人工干预,有效提高蜂群无人机充电效率和任务适应能力。
基于上述实施例,该方法中步骤S1包括:
获取执行任务所需电量,若判断无人机剩余电量低于所述执行任务所需电量,则触发返回充电指令;
或者,若判断所述无人机剩余电量低于电量阈值,则触发返回充电指令。
具体地,本发明在判断任一无人机是否需要充电时,采用一种无人机充电指令自动触发方法,包括两种情况:一种是剩余电量少于预设的阈值;另一种是无人机剩余电量达不到无人机任务完成所需电量。
每台无人机携带BMS(Battery Management System,电池管理系统)模块,通过BMS模块监测无人机剩余电量,并实时反馈剩余电量至地面控制系统,一旦剩余电量少于电量阈值,则触发无人机返回充电指令;地面控制系统根据无人机执行任务所需电量与无人机剩余电量,决定是否发送返回充电指令,若剩余电量不足以支持无人机任务完成,则触发返回充电指令。
本发明通过设置无人机返回充电触发条件,在无人机运行过程中实时采集到电量使用情况,一旦无人机出现电量过低的情况,则触发返回充电指令,确保无人机能长时间稳定运行。
基于上述任一实施例,该方法中步骤S2包括:
待触发所述返回充电指令后,通过GPS信号进行导航,飞行至所述充电平台的UWB覆盖范围边缘,切换至UWB定位系统;
所述UWB系统根据所述充电平台是否被占用、无人机排队数量以及无人机坐标,控制无人机搜索定位所述充电平台;
待无人机进入视觉定位搜索范围内,由机器视觉基于所述充电平台的预设标识,完成无人机的精准定位和着陆。
其中,所述UWB系统根据所述充电平台是否被占用、无人机排队数量以及无人机坐标,控制无人机搜索定位所述充电平台,之前包括:
给所有无人机配置UWB标签,由所述UWB系统基于所述UWB标签获取每个无人机的坐标。
其中,所述UWB系统根据所述充电平台是否被占用、无人机排队数量以及无人机坐标,控制无人机搜索定位所述充电平台,具体包括:
若判断所述充电平台没有被占用,则执行UWB定位导航至所述充电平台上方;
若判断所述充电平台已被占用,且在当前无人机之前没有其它无人机排队充电,则执行UWB定位导航至所述充电平台的预设临时停靠区域,待充电无人机完成充电;
若判断所述充电平台已被占用,且在当前无人机之前存在其它无人机排队充电,则执行原位降落停靠,待前面的无人机停靠充电平台后,执行UWB定位导航至所述充电平台的预设临时停靠区域。
其中,待无人机进入视觉定位搜索范围内,由机器视觉基于所述充电平台的预设标识,完成无人机的精准定位和着陆,包括:
待无人机进入视觉定位搜索范围内,由机器视觉基于所述充电平台的预设标识,完成无人机的精准定位和着陆,包括:
由无人机上配置的机载相机拍摄获取所述预设标识,基于所述预设标识进行无人机位置的居中对准;
基于所述无人机位置的居中对准,无人机以预设下落速度进行降落,直至完全停靠在所述充电平台上。
需要说明的是,由于GPS的定位误差为5m左右,只通过传统GPS信号进行定位,误差较大。而UWB的定位精度可达厘米级,故在充电平台附近采用UWB系统进行定位,提高无人机的导航精度和效率。蜂群无人机上配备UWB标签,当无人机通过GPS信号飞行到充电平台附近空域后,其位置将被UWB基站探测,之后由UWB接管其导航定位功能,如图6所示。
无人机进入UWB检测区域后会与基站共享自己的实时位置,基站为每一台进入探测区域的无人机进行ID分配并持续跟踪其位置,当新的无人机进入检测区域后,会进行碰撞预判,当二者的坐标距离达到报警阈值后立马进行悬停并后撤,直到达到安全距离,防止发生碰撞。
当无人机根据UWB信号飞行至充电平台正上空时,启动视觉伺服精对准模式,UWB信号和视觉信号分别进行粗调和精调,飞行器在下落过程中通过调整自身姿态,始终保持充电平台的LOGO在视野中央,以较为缓慢的下落速度进行降落,直到完全停靠在充电平台上。
具体地,本发明还提供一种无人机充电排队策略,需要充电的无人机由GPS导航更换为UWB定位时,地面控制系统首先判断充电平台是否被占用以及排队充电的无人机数量:
情况一:若平台没有被占用,则执行UWB定位导航至充电平台上方;
情况二:若平台已被占用,但没有其他无人机排队充电,则执行UWB定位导航至充电平台附近临时停靠,等待前面无人机充电完成;
情况三:若平台被占用,且有其他无人机排队充电,则执行原位降落停靠,等待没有其他无人机充电后,再执行情况二。
此处,充电过程中无人机始终共享自己的UWB坐标,当后续充电的飞行器进入UWB检测范围时,基站广播充电平台被占用的信息,后续飞行器降落等待,直到先达的飞行器充电完成。
本发明通过在UWB对无人机进行导航定位过程中,综合判断充电平台占用情况、无人机排队数量以及每个无人机的实时坐标,实现了多个无人机在充电平台上的充电统筹调度,提高蜂群无人机的整体充电效率。
基于上述任一实施例,该方法步骤S3包括:
根据所述充电指令,无人机暂停旋翼工作,开启无线充电,由UWB系统共享位置信息;
通过广播形式将所述位置信息发送至后续排队无人机,待充电完成后,无人机再次起飞,待离开所述充电平台达到预设距离后,所述充电平台转换为空闲状态。
具体地,待无人机完全停靠在充电平台后,飞行器停靠后旋翼暂停工作,开始无线充电,UWB模块保持低功率工作状态,继续共享位置信息,基站通过广播的形式告知后续充电排队无人机,充电平台被占用。充电完成后无人机再次起飞,飞离充电平台一定距离后,充电平台转换为空闲状态,基站告知最先登台的无人机,无人机重复上述步骤进行自主停靠并充电。
此处,视觉识别可以采用开源微型机器视觉模块, 对其能够编程来实现一系列功能,具有开发方便、高效和工作稳定的特点。通过视觉基准系统,可以计算充电平台相对于相机的精确3D位置,方向和ID。应用标识识别,可将ID和位置信息传输给飞控,由此可得出飞行器位置信息,做出路径判断并进行误差校正。
本发明通过三种空间导航定位技术,实现无人机由远到近的定位,从粗定位到精定位,实现了全流程的自动引导和监测,无需人工接入,提高了蜂群无人机充电效率。
基于上述任一实施例,本发明以三台无人机为示例,来说明本发明所提出的无人机自动充电方法。
三台无人机分别定义为无人机A、无人机B、无人机C。三台无人机对应的起飞点分别定义为起飞点L、起飞点M、起飞点N。充电点定义为充电点I,离充电点较近处为停靠点J,离充电点较远处(刚进入UWB检测区域)为停靠点K,如图7所示。
充电整体流程包括:
无人机A充电:无人机A首先从起飞点L起飞,飞行到充电点I进行充电;精准降落并开始充电后,无人机B从起飞点M起飞,飞行到停靠点J进行待机等待;降落之后,无人机C从起飞点N起飞,飞行到停靠点K进行待机等待。
无人机B充电:待无人机A电量充满后,无人机B准备充电。此时,无人机A从充电点I返航回其起飞点N;降落之后,充电点I空闲,无人机B从其停靠点J起飞,飞行到充电点I,精准降落后开始充电。
无人机C充电:待无人机B电量充满后,无人机C准备充电。此时,无人机B从充电点I返航回其起飞点L;降落之后,充电点I空闲,无人机C从其停靠点K起飞,飞行到充电点I,精准降落后开始充电。充完电之后,无人机C从充电点I起飞返航回其起飞点N。
其中,无人机A的充电流程具体包括:
在软件端点击“一键起飞”之后,无人机A从其起飞点N起飞,前期无人机按照自身GPS导航到充电点附近区域,此时无人机已进入UWB定位范围,飞行到充电点附近后,依靠UWB定位对自身位置进行微调,微调飞行到充电点I上空后,通过摄像头对充电点I的logo进行识别,最终精准降落到充电点I进行无线充电。
无人机A降落充电后,无人机B从其起飞点M起飞,前期无人机按照自身GPS导航到充电点附近区域,进入UWB定位范围后,依靠UWB定位对自身位置进行微调,微调飞行到停靠点J进行待机等待。
无人机B降落后,无人机C从其起飞点L起飞,前期无人机按照自身GPS导航到充电点附近区域,进入UWB定位范围后,依靠UWB定位对自身位置进行微调,微调飞行到停靠点K进行待机等待。无人机A充电流程如图8所示。
无人机B的充电流程具体包括:
待无人机A电量充满后,无人机B准备充电。此时,无人机A从充电点I起飞,依靠自身GPS返航回其起飞点N;降落之后,充电点I空闲,无人机B从其停靠点J起飞。由于无人机B在UWB定位范围内,依靠UWB定位对自身位置进行微调,微调飞行到充电点I上空后,通过摄像头对充电点I的logo进行识别,最终精准降落到充电点I进行无线充电。无人机C继续在其停靠点K等待无人机B充电完成。无人机B充电流程如图9所示。
无人机C的充电流程具体包括:
待无人机B电量充满后,无人机C准备充电。此时,无人机B从充电点I起飞,依靠自身GPS返航回其起飞点M;降落之后,充电点I空闲,无人机C从其停靠点K起飞。由于无人机C在UWB定位范围内,依靠UWB定位对自身位置进行微调,微调飞行到充电点I上空后,通过摄像头对充电点I的logo进行识别,最终精准降落到充电点I进行无线充电。充电完成之后,无人机C从充电点I起飞,依靠自身GPS返航回其起飞点L。无人机C充电流程如图10所示。
下面对本发明提供的无人机自动充电系统进行描述,下文描述的无人机自动充电系统与上文描述的无人机自动充电方法可相互对应参照。
图11是本发明提供的无人机自动充电系统的结构示意图,如图11所示,包括:触发模块1101、定位模块1102和充电模块1103,其中:
触发模块1101用于确定无人机预设电量告警阈值,基于所述无人机预设电量告警阈值触发返回充电指令;定位模块1102用于依次基于全球定位系统GPS导航、超宽带UWB定位和视觉定位,搜寻定位充电平台;充电模块1103用于待无人机降落至所述充电平台,无人机接收所述充电平台发送的充电指令,完成自动充电。
本发明通过组合定位技术实现无人机自动充电,通过提高定位精度,实现无人机悬浮充电,也可降落至平台后无线充电,无需人工干预,有效提高蜂群无人机充电效率和任务适应能力。
图12示例了一种电子设备的实体结构示意图,如图12所示,该电子设备可以包括:处理器(processor)1210、通信接口(Communications Interface)1220、存储器(memory)1230和通信总线1240,其中,处理器1210,通信接口1220,存储器1230通过通信总线1240完成相互间的通信。处理器1210可以调用存储器1230中的逻辑指令,以执行无人机自动充电方法,该方法包括:确定无人机预设电量告警阈值,基于所述无人机预设电量告警阈值触发返回充电指令;依次基于全球定位系统GPS导航、超宽带UWB定位和视觉定位,搜寻定位充电平台;待无人机降落至所述充电平台,无人机接收所述充电平台发送的充电指令,完成自动充电。
此外,上述的存储器1230中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面,本发明还提供一种计算机程序产品,所述计算机程序产品包括计算机程序,计算机程序可存储在非暂态计算机可读存储介质上,所述计算机程序被处理器执行时,计算机能够执行上述各方法所提供的无人机自动充电方法,该方法包括:确定无人机预设电量告警阈值,基于所述无人机预设电量告警阈值触发返回充电指令;依次基于全球定位系统GPS导航、超宽带UWB定位和视觉定位,搜寻定位充电平台;待无人机降落至所述充电平台,无人机接收所述充电平台发送的充电指令,完成自动充电。
又一方面,本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以执行上述各方法提供的无人机自动充电方法,该方法包括:确定无人机预设电量告警阈值,基于所述无人机预设电量告警阈值触发返回充电指令;依次基于全球定位系统GPS导航、超宽带UWB定位和视觉定位,搜寻定位充电平台;待无人机降落至所述充电平台,无人机接收所述充电平台发送的充电指令,完成自动充电。
以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (7)
1.无人机自动充电方法,其特征在于,包括:
确定无人机预设电量告警阈值,基于所述无人机预设电量告警阈值触发返回充电指令;
依次基于全球定位系统GPS导航、超宽带UWB定位和视觉定位,搜寻定位充电平台;
待无人机降落至所述充电平台,无人机接收所述充电平台发送的充电指令,完成自动充电;
所述依次基于全球定位系统GPS导航、超宽带UWB定位和视觉定位,搜寻定位充电平台,包括:
待触发所述返回充电指令后,通过GPS信号进行导航,飞行至所述充电平台的UWB覆盖范围边缘,切换至UWB定位系统;
所述UWB定位 系统根据所述充电平台是否被占用、无人机排队数量以及无人机坐标,控制无人机搜索定位所述充电平台;
待无人机进入视觉定位搜索范围内,由机器视觉基于所述充电平台的预设标识,完成无人机的精准定位和着陆;
所述UWB定位 系统根据所述充电平台是否被占用、无人机排队数量以及无人机坐标,控制无人机搜索定位所述充电平台,之前包括:
给所有无人机配置UWB标签,由所述UWB定位 系统基于所述UWB标签获取每个无人机的坐标;
所述UWB定位 系统根据所述充电平台是否被占用、无人机排队数量以及无人机坐标,控制无人机搜索定位所述充电平台,具体包括:
若判断所述充电平台没有被占用,则执行UWB定位导航至所述充电平台上方;
若判断所述充电平台已被占用,且在当前无人机之前没有其它无人机排队充电,则执行UWB定位导航至所述充电平台的预设临时停靠区域,待充电无人机完成充电;
若判断所述充电平台已被占用,且在当前无人机之前存在其它无人机排队充电,则执行原位降落停靠,待前面的无人机停靠充电平台后,执行UWB定位导航至所述充电平台的预设临时停靠区域。
2.根据权利要求1所述的无人机自动充电方法,其特征在于,确定无人机预设电量告警阈值,基于所述无人机预设电量告警阈值触发返回充电指令,包括:
获取执行任务所需电量,若判断无人机剩余电量低于所述执行任务所需电量,则触发返回充电指令;
或者,若判断所述无人机剩余电量低于电量阈值,则触发返回充电指令。
3.根据权利要求1所述的无人机自动充电方法,其特征在于,待无人机进入视觉定位搜索范围内,由机器视觉基于所述充电平台的预设标识,完成无人机的精准定位和着陆,包括:
由无人机上配置的机载相机拍摄获取所述预设标识,基于所述预设标识进行无人机位置的居中对准;
基于所述无人机位置的居中对准,无人机以预设下落速度进行降落,直至完全停靠在所述充电平台上。
4.根据权利要求1所述的无人机自动充电方法,其特征在于,待无人机降落至所述充电平台,无人机接收所述充电平台发送的充电指令,完成自动充电,包括:
根据所述充电指令,无人机暂停旋翼工作,开启无线充电,由UWB系统共享位置信息;
通过广播形式将所述位置信息发送至后续排队无人机,待充电完成后,无人机再次起飞,待离开所述充电平台达到预设距离后,所述充电平台转换为空闲状态。
5.无人机自动充电系统,其特征在于,包括:
触发模块,用于确定无人机预设电量告警阈值,基于所述无人机预设电量告警阈值触发返回充电指令;
定位模块,用于依次基于全球定位系统GPS导航、超宽带UWB定位和视觉定位,搜寻定位充电平台;
充电模块,用于待无人机降落至所述充电平台,无人机接收所述充电平台发送的充电指令,完成自动充电;
所述定位模块具体用于:
待触发所述返回充电指令后,通过GPS信号进行导航,飞行至所述充电平台的UWB覆盖范围边缘,切换至UWB定位系统;
所述UWB定位系统根据所述充电平台是否被占用、无人机排队数量以及无人机坐标,控制无人机搜索定位所述充电平台;
待无人机进入视觉定位搜索范围内,由机器视觉基于所述充电平台的预设标识,完成无人机的精准定位和着陆;
所述UWB定位系统根据所述充电平台是否被占用、无人机排队数量以及无人机坐标,控制无人机搜索定位所述充电平台,之前包括:
给所有无人机配置UWB标签,由所述UWB定位系统基于所述UWB标签获取每个无人机的坐标;
所述UWB定位系统根据所述充电平台是否被占用、无人机排队数量以及无人机坐标,控制无人机搜索定位所述充电平台,具体包括:
若判断所述充电平台没有被占用,则执行UWB定位导航至所述充电平台上方;
若判断所述充电平台已被占用,且在当前无人机之前没有其它无人机排队充电,则执行UWB定位导航至所述充电平台的预设临时停靠区域,待充电无人机完成充电;
若判断所述充电平台已被占用,且在当前无人机之前存在其它无人机排队充电,则执行原位降落停靠,待前面的无人机停靠充电平台后,执行UWB定位导航至所述充电平台的预设临时停靠区域。
6.一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1至4任一项所述无人机自动充电方法的步骤。
7.一种非暂态计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至4任一项所述无人机自动充电方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111279973.XA CN113715668B (zh) | 2021-11-01 | 2021-11-01 | 无人机自动充电方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111279973.XA CN113715668B (zh) | 2021-11-01 | 2021-11-01 | 无人机自动充电方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113715668A CN113715668A (zh) | 2021-11-30 |
CN113715668B true CN113715668B (zh) | 2022-04-15 |
Family
ID=78686271
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111279973.XA Active CN113715668B (zh) | 2021-11-01 | 2021-11-01 | 无人机自动充电方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113715668B (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114261306A (zh) * | 2021-12-20 | 2022-04-01 | 深圳市歌尔泰克科技有限公司 | 无人机返舱充电方法、无人机、充电舱及可读存储介质 |
CN114572398A (zh) * | 2022-03-24 | 2022-06-03 | 上海顺诠科技有限公司 | 空陆无人机的充电及巡检接替系统及其方法 |
Family Cites Families (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105226836B (zh) * | 2015-10-20 | 2017-12-29 | 杨珊珊 | 一种能够自动充电的无人机、无人机充电系统和充电方法 |
DE102016010685A1 (de) * | 2016-09-06 | 2018-03-08 | Daimler Ag | Vorrichtung zur automatisierten Be- und Entladung einer freifliegenden autonom gesteuerten Drohne |
CN109521800A (zh) * | 2018-11-19 | 2019-03-26 | 广州杰超科技有限公司 | 一种旋翼无人机定点降落方法及基站 |
CN111071090B (zh) * | 2019-12-31 | 2021-09-21 | 广西诚新慧创科技有限公司 | 一种精准引导补能平台下的无人机充电引导方法及装置 |
CN113071697A (zh) * | 2020-01-03 | 2021-07-06 | 中航空管系统装备有限公司 | 适用于无人机视觉引导着陆的无线充电装置及充电方法 |
CN112297937B (zh) * | 2020-11-17 | 2022-03-18 | 南京大学 | 一种多无人机及多充电基站充电调度调度方法和装置 |
CN112954600B (zh) * | 2021-04-07 | 2022-10-25 | 中南大学 | 一种针对多无人机停泊的定位方法 |
-
2021
- 2021-11-01 CN CN202111279973.XA patent/CN113715668B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN113715668A (zh) | 2021-11-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113715668B (zh) | 无人机自动充电方法及系统 | |
US10384775B2 (en) | Autonomous vehicle charging station management | |
CN107943073B (zh) | 无人机起降方法、设备、系统及无人机 | |
CN205049974U (zh) | 一种便携式充电站点、无人机以及无人机自动充电系统 | |
EP2963519A1 (en) | Mobile unmanned aerial vehicle infrastructure and management system and related method | |
JP2019529250A (ja) | 無人航空機のための自動回収システム | |
CN105270627A (zh) | 一种空中充电提升续航能力的双无人机系统 | |
CN105226836A (zh) | 一种能够自动充电的无人机、无人机充电系统和充电方法 | |
CN105449876A (zh) | 一种电力巡线多旋翼飞行器的自主无线充电系统 | |
KR101701397B1 (ko) | 무인 비행체를 이용한 차량 단속방법 및 시스템 | |
CN108422884A (zh) | 基于无人机的电动汽车电能补充系统 | |
US20190025830A1 (en) | Wireless charging and protection for unmanned delivery aerial vehicles | |
CN111625013B (zh) | 无人机执行飞行任务的能量预估方法及装置 | |
CN111319482B (zh) | 自动机场设备、自动机场控制方法、装置及存储介质 | |
CN113071697A (zh) | 适用于无人机视觉引导着陆的无线充电装置及充电方法 | |
CN113552893A (zh) | 无人机电力自主巡检的航线设计方法、飞行方法以及无人机 | |
WO2021095701A1 (ja) | 情報処理装置、情報処理方法、プログラムおよび飛行体システム | |
CN112269399A (zh) | 应用于无人机的主动回收控制方法及装置 | |
CN113568427A (zh) | 无人机自主着陆移动平台的方法及系统 | |
CN115729261A (zh) | 一种多旋翼无人机自主巡航及充电的控制方法 | |
JP7274657B1 (ja) | 情報処理装置及び情報処理方法 | |
CN116661494A (zh) | 一种电力设备自动巡检方法 | |
CN113726032A (zh) | 一种无线充电方法、设备、介质和产品 | |
CN112987766B (zh) | 无人机降落控制方法、装置、存储介质及电子设备 | |
US20230035476A1 (en) | Information processing apparatus, information processing method, program, and information processing system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |