CN105425820B - 一种针对具有感知能力的运动目标的多无人机协同搜索方法 - Google Patents

一种针对具有感知能力的运动目标的多无人机协同搜索方法 Download PDF

Info

Publication number
CN105425820B
CN105425820B CN201610012608.5A CN201610012608A CN105425820B CN 105425820 B CN105425820 B CN 105425820B CN 201610012608 A CN201610012608 A CN 201610012608A CN 105425820 B CN105425820 B CN 105425820B
Authority
CN
China
Prior art keywords
time step
kth time
search
particle
grid
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610012608.5A
Other languages
English (en)
Other versions
CN105425820A (zh
Inventor
胡笑旋
刘艳红
王国强
罗贺
夏维
程八
程八一
靳鹏
马华伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei University of Technology
Original Assignee
Hefei University of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hefei University of Technology filed Critical Hefei University of Technology
Priority to CN201610012608.5A priority Critical patent/CN105425820B/zh
Publication of CN105425820A publication Critical patent/CN105425820A/zh
Application granted granted Critical
Publication of CN105425820B publication Critical patent/CN105425820B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course or altitude of land, water, air, or space vehicles, e.g. automatic pilot
    • G05D1/12Target-seeking control
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B13/00Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion
    • G05B13/02Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric
    • G05B13/04Adaptive control systems, i.e. systems automatically adjusting themselves to have a performance which is optimum according to some preassigned criterion electric involving the use of models or simulators

Abstract

本发明公开了一种针对具有感知能力的运动目标的多无人机协同搜索方法,其特征是按如下步骤进行:1构建多无人机协同搜索运动目标模型;2对模型进行求解,获得最优解;3对最优解进行解码,获得无人机的航向偏转角;4根据航向偏转角获得预规划q步最优路径,并执行最优路径中的第1步,无人机运动;5基于探测信息和基于目标运动预测更新搜索图;6递增一个时间步长,总规划时域步长结束则完成搜索任务,否则返回步骤2。本发明能解决具有感知能力的运动目标的搜索问题,提高搜索效能,从而更加符合实际复杂的动态战场环境。

Description

一种针对具有感知能力的运动目标的多无人机协同搜索方法
技术领域
本发明涉及一种针对具有感知能力的运动目标的多无人机协同搜索方法,属于计算机仿真与方法优化领域。
背景技术
无人机具有低成本,高机动和“零人员伤亡”的特点,是执行恶劣,危险,枯燥任务的最好选择。在无人机UAV执行作战任务的过程中,搜索并发现任务区域内的目标是后续作战活动的前提,然而在复杂、动态环境下执行搜索任务,要求无人机具有高度的自主决策能力和协同能力,但单个无人机机负载资源有限,传感器探测角度限制等,往往难以完成任务,于是多机协同搜索研究变得尤为重要。近年来,无人机协同搜索技术在军用与民用领域都应用广泛,因此,研究无人机协同搜索很有实际意义。
针对多UAV协同搜索问题,传统方法以搜索论为基础,预先规划出多UAV覆盖搜索区域的路径,使得发现目标概率最大化,但这主要针对目标信息已知的搜索问题。针对目标信息未知的搜索问题,特别是运动目标的搜索问题,无法预先规划,只能根据搜索过程中的探测信息和环境信息来在线任务决策。这种情况下多UAV协同搜索是一个动态过程,必须提出较好的解决方法。
发明内容
本发明为了解决上述现有技术存在的不足之处,提出了一种针对具有感知能力的运动目标的多无人机协同搜索方法,以期能解决具有感知能力的运动目标的搜索问题,提高搜索效能,从而更加符合实际复杂的动态战场环境。
本发明为解决技术问题采用如下技术方案:
本发明一种针对具有感知能力的运动目标的多无人机协同搜索方法的特点是:
定义所述多无人机协同搜索是在M×N的离散正方形网格所构成的搜索环境E中执行搜索任务,所述搜索环境E中的任意一个网格记为(m,n);m∈{1,2,...,M},n∈{1,2,...,N};每个网格的边长为c;
定义所述搜索环境E中存在NV架无人机;任意一架无人机的飞行速度为v、最大偏转角为α;
定义所述搜索环境E中存在NT个具有感知能力的运动目标,且一个离散正方形网格中至多只能存在一个运动目标;
定义所述搜索环境E中还存在NB个固定不动的探测装置;
定义用K表示多无人机搜索的总时间步长,用k表示第k个时间步长,k=1,2,…,K;
定义Pmn(k)表示第k个时间步长网格(m,n)中运动目标的存在概率;则令SMP(k)={Pmn(k)|m∈{1,2,...,M},n∈{1,2,...,N}}表示第k个时间步长的搜索图;
所述多无人机协同搜索方法按如下步骤进行:
步骤1、利用模型预测控制法构建多无人机协同搜索运动目标的搜索模型;
步骤2、基于所述第k个时间步长的搜索图SMP(k),对所述搜索模型利用加入交叉算子的粒子群优化算法进行求解,获得第k个时间步长的最优解FG(k);所述最优解FG(k)是由NV×q个[-1,1]之间的任意整数组成的序列;q表示预规划的步长数;
步骤3、利用式(1)对所述第k个时间步长的最优解FG(k)进行解码,获得NV架无人机的第k个时间步长的航向偏转角 Δθ k = { Δθ 1 ( k ) , Δθ 2 ( k ) , ... , Δθ i ( k ) , ... , Δθ N V ( k ) } :
Δθk=FG(k)×α (1)
式(1)中,α表示所设定的无人机最大航向偏转角;表示第i架无人机的第k个时间步长的航向偏转角;1≤i≤NV
步骤4、根据所述第k个时间步长的航向偏转角Δθk分别获得第k个时间步长的NV个预规划q步最优路径;并令所述NV架无人机分别执行相应的预规划q步最优路径中的第1步;从而更新所述NV架无人机在搜索环境E中在第k个时间步长的位置,获得所述NV架无人机在搜索环境E中在第k+1个时间步长的位置;
步骤5、基于探测信息和基于目标运动预测更新第k个时间步长的搜索图SMP(k),获得第k+1个时间步长的搜索图SMP(k+1);
步骤6、将k+1赋值给k;并判断k≤K是否成立,若成立,则返回步骤2执行,否则结束NV架无人机搜索NT个具有感知能力的运动目标的搜索任务。
本发明所述的针对具有感知能力的运动目标的多无人机协同搜索方法的特点也在于,
所述步骤2中的加入交叉算子的粒子群优化算法是按如下步骤进行:
步骤2.1、定义种群粒子为D={d1,d2,…,ds,…,dS},ds表示种群中第s个粒子;1≤s≤S;
定义种群迭代次数为g;
定义第k个时间步长的第g次迭代的第s个种群粒子ds的速度和位置分别为并随机初始化所述速度为-1或0;随机初始化所述位置为-1或0或1;
步骤2.2、初始化k=1;
步骤2.3、初始化g=0;
步骤2.4、以第k个时间步长的第g次迭代的第s个粒子ds的位置作为第k个时间步长的第g次迭代的第s个粒子的最优解,记为从而初始化第k个时间步长的第g次迭代的S个粒子的最优解;
步骤2.5、利用式(1)获得第k个时间步长的第s个粒子ds的适应值Js(k),从而获得第k个时间步长的S个粒子的适应值;
J s ( k ) = w 1 × Σ i = 1 N v Σ ( m , n ) ∈ A i k { ( p d - p f ) p m n s ( k ) + p f } + w 2 × Σ i = 1 N v Σ ( a , b ) ∈ B i k { ( p d - p f ) p a b s ( k ) + p f } - - - ( 1 )
式(1)中,w1,w2表示权重;pd表示无人机的探测概率;pf表示无人机的虚警概率;表示第k个时间步长下第i架无人机预规划q步最优路径所对应的q个网格所构成的网格集合;表示第k个时间步长下由第s个粒子ds的位置经过解码后,获得的网格集合中的网格(m,n)内运动目标的存在概率;表示第k个时间步长下第i架无人机在预规划q步最优路径中的第1步路径所对应的网格集合;表示第k个时间步长下由第s个粒子ds的位置经过解码后,获得的第1步路径所对应的网格集合中网格(a,b)内运动目标的存在概率;
步骤2.6、从所述第k个时间步长的S个粒子的适应值中选出最大适应值对应的粒子位置作为得第k个时间步长的第g次迭代的全局最优解Fg(k);
步骤2.7、利用式(2)获得第k个时间步长的第g+1次迭代的第s个粒子ds的速度
v s g + 1 ( k ) = w × v s g ( k ) + c 1 × r a n d × ( f s g ( k ) - x s g ( k ) ) + c 2 × r a n d × ( F g ( k ) - x s g ( k ) ) - - - ( 2 )
式(2)中,c1,c2是正常数,称为学习因子;w为惯性因子,rand表示[0,1]之间的随机数;
步骤2.8、利用式(3)和式(4)进行第k个时间步长的第g次迭代的第s个粒子ds与第z个粒子dz的交叉运算,获得第k个时间步长的第g次迭代的第s个粒子ds的交叉位置和第z个粒子dz的交叉位置
x s ′ g ( k ) = r × x z g ( k ) + ( 1 - r ) × x s g ( k ) - - - ( 3 )
x z ′ g ( k ) = r × x s g ( k ) + ( 1 - r ) × x z g ( k ) - - - ( 4 )
式(3)和式(4)中,r表示交叉系数;
步骤2.9、利用式(5)获得第k个时间步长的第g+1次迭代的第s个粒子ds的位置
x s g + 1 ( k ) = x s ′ g ( k ) + v s g + 1 ( k ) - - - ( 5 )
步骤2.10、获得第k个时间步长的最优解FG(k);
步骤2.10.1、获得第k个时间步长的第g次迭代的第s个粒子的最优解的适应值和第k个时间步长的第g+1次迭代的第s个粒子的的适应值并进行比较,将较大适应值对应的粒子位置作为第k个时间步长的第g+1次迭代第s个粒子的最优解
步骤2.10.2、重复步骤2.10.1,从而获得第k个时间步长的第g+1次迭代S个粒子的最优解,并从中选出最大适应值对应的最优解作为第k个时间步长的第g+1次迭代的全局最优解Fg+1(k);
步骤2.10.3、判断g≥G是否成立,若成立,则表示获得第k个时间步长的最优解FG(k);否则将g+1赋值给g,并返回步骤2.4。
所述步骤5是按如下方式获得第k+1个时间步长的搜索图SMP(k+1):
当第k个时间步长下无人机搜索网格(m,n)且发现目标同时没被探测装置发现时,则利用式(6)更新网格(m,n)中的运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × p d p m n ( k ) p f + ( p d - p f ) p m n ( k ) ) - - - ( 6 )
当第k个时间步长下无人机搜索网格(m,n)且发现目标同时被探测装置发现时,则利用式(7)更新网格(m,n)中的运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × τ 2 × p d p m n ( k ) p f + ( p d - p f ) p m n ( k ) ) - - - ( 7 )
当第k个时间步长下无人机搜索网格(m,n)且未发现目标同时未被探测装置发现时,则利用式(8)更新网格(m,n)中运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × ( 1 - p d ) p m n ( k ) 1 - p f + ( p f - p d ) p m n ( k ) ) - - - ( 8 )
当第k个时间步长下无人机搜索网格(m,n)且未发现目标同时被探测装置发现,则利用式(9)更新网格(m,n)中运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × τ 2 × ( 1 - p d ) p m n ( k ) 1 - p f + ( p f - p d ) p m n ( k ) ) - - - ( 9 )
当第k个时间步长下无人机没有搜索网格(m,n)时,则利用式(10)更新网格(m,n)中运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × τ 1 × p m n ( k ) ) - - - ( 10 )
式(6-10)中,pmn(k)为第k个时间步长网格(m,n)中运动目标的存在概率;τ12∈[0,1]为动态信息因子;ΔT表示第k个时间步长与第k+1个时间步长之间的间隔;H((o,h),(m,n),ΔT)表示基于高斯分布预测的运动目标在间隔ΔT内从网格(o,h)转移到网格(m,n)的概率;o∈{1,2,...,M},h∈{1,2,...,N}。
与已有技术相比,本发明的有益效果体现在:
1.本发明将运动目标的不确定预知信息建模为高斯分布函数,同时运动目标具有感知能力;针对已有的搜索图更新模型中没有考虑搜索环境中存在探测装置的情况,改进了传统的搜索图更新方式;在模型预测控制的基础上,引入了权重因子对传统的收益函数进行改进;最后采用了加入交叉算子的粒子群优化算法来求解利用模型预测控制法构建的搜索模型;有效解决了具有感知能力的运动目标的搜索问题,提高了搜索效能,从而更加符合实际复杂的动态战场环境。
2.本发明采用高斯分布来预测目标的运动,同时目标具有感知能力,搜索环境中安装有若干个探测装置来探测无人机位置信息,一旦无人机经过探测装置,运动目标就能获得无人机的位置信息,然后据此选择一定的行动来最大化无人机与自身的距离,从而使得运动目标在一定程度上能逃避无人机的搜索。
3.本发明采用了加入交叉算子的粒子群优化算法来求解利用模型预测控制法构建的搜索模型,该优化算法中引入了遗传算法的交叉算子,使得成对的粒子可以交换相互的信息,以便有向新的搜索空间飞翔的能力,利于整体寻优。
4.本发明引入权重因子对传统的收益函数进行了改进,对无人机预规划q步路径所对应的网格的目标概率和赋予一个权重,对无人机预规划q步路径中的第1步路径所对应网格的目标概率和赋予另一个权重,从而能尽可能多的搜索到运动目标,提高了搜索效能。
5.本发明针对已有的搜索图更新模型中没有考虑搜索环境中存在探测装置的情况,改进了已有的搜索图更新模型,使得无人机能基于更新的搜索图制定相应搜索决策,从而保证了实时性,更加充分体现了实际搜索环境中搜索信息。
附图说明
图1为本发明10*10的搜索环境网格化的搜索图;
图2为本发明的流程图;
图3为本发明无人机可能的航向偏转角示意图。
具体实施方式
本实施例中,一种针对具有感知能力的运动目标的多无人机协同搜索方法,是应用于多无人机协同搜索多运动目标的搜索区域E中,搜索环境E中的任意一个网格记为(m,n);m∈{1,2,...,M},n∈{1,2,...,N};每个网格的边长为c;
假设搜索区域E中存在NV架同种类型的无人机;任意一架无人机的飞行速度为v、最大偏转角为α;
假设搜索区域E中存在NT个同种类型的具有感知能力的运动目标;且一个离散正方形网格中至多只能存在一个运动目标;NV、NT都为正整数;无人机是利用自身携带的机载传感器对运动目标进行搜索;
假设搜索环境E中还存在NB个固定不动的探测装置;
定义用K表示多无人机搜索的总时间步长,用k表示第k个时间步长,k=1,2,…,K;
定义Pmn(k)表示第k个时间步长网格(m,n)中运动目标的存在概率;则令SMP(k)={Pmn(k)|m∈{1,2,...,M},n∈{1,2,...,N}}表示第k个时间步长的搜索图;
本实施案例中,将搜索区域E划分成大小为40×40的离散网格,即M=40,N=40,其中的每个网格用(m,n),m∈{1,2,...,40},n∈{1,2,...,40}来表示,代表[m,m+1)×[n,n+1)这小片正方形区域。图1展示了一个大小为10×10的搜索区域所对应的离散网格,其中的黑色方块表示网格(7,8)。搜索区域E中共有NV=4架无人机,起始位置分别为:(1,1),(1,40),(40,1),(40,40),以恒定速度v=0.5km/s,最大偏转角α=45°,无人机的探测概率pd=0.8,虚警概率pf=0.2,时间步长间隔为ΔT=2s,预规划步长数q=10;共有NT=10个位置未知的运动目标,初始位置未知;共有NB=4个探测装置,固定在搜索环境中的四个网格,位置分别为:(4,6),(20,8),(40,30),(27,15),假设初始时刻所有网格中运动目标的存在概率均为0.5,即SMP(0)={0.5};
参见图2,多无人机协同搜索方法按如下步骤进行:
步骤1、利用模型预测控制法构建多无人机协同搜索运动目标的搜索模型;
步骤1.1:利用模型预测控制法中的模型预测要素构建多无人机模型预测序列;多无人机模型预测序列为状态信息预测序列和决策信息输入序列;
第k个时间步长的NV架无人机的状态信息预测序列其中第k个时间步长的第i架无人机的状态信息预测序列Xi(k)为:
Xi(k)={xi(k+1|k),xi(k+2|k),...,xi(k+t|k)} (1)
状态信息包含第i架无人机在第k个时间步长预测第k+t个时间步长的自身位置坐标xpi(k+t|k)和第i架无人机在第k个时间步长预测第k+t个时间步长的自身航向角θi(k+t|k),记为xi(k+t|k)={xpi(k+t|k),θi(k+t|k)};1≤i≤NV
第k个时间步长的NV架无人机的决策信息输入序列其中第k个时间步长的第i架无人机的决策信息输入序列Ui(k)为:
Ui(k)={ui(k|k),ui(k+1|k),...,ui(k+t-1|k)} (2)
决策信息是指无人机的航向偏转角ui(k+t|k),记为ui(k+t|k)={Δθi(k+t|k)};
式(1)和式(2)中,t为预规划时间步长的变量,q为预规划步长数,并有:1≤t≤q且t∈Ν*
步骤1.2:构建多无人机协同搜索运动目标的搜索模型的目标函数
因为无人机在每一个时间步长执行的是预规划q步路径中的第1步路径,所以通过改进目标函数来突出无人机预规划q步路径中的第1步路径所对应网格的目标概率和这个指标的重要性。因此,令搜索模型的目标函数为:
U i * ( k ) = max J i ( k ) - - - ( 3 )
式(3)中Ji(k)表示第k个时间步长下第i架无人机预规划q步最优路径所对应的q个网格的目标概率之和加上第i架无人机预规划q步最优路径中的第1步路径所对应的网格的目标概率之和,并有:
J i ( k ) = w 1 × Σ ( m , n ) ∈ A i k { ( p d - p f ) p m n ( k ) + p f } + w 2 × Σ ( a , b ) ∈ B i k { ( p d - p f ) p a b ( k ) + p f } - - - ( 4 )
式(4)中,表示第k个时间步长第i架无人机预规划q步最优路径所对应的q个网格;表示第k个时间步长第i架无人机预规划q步最优路径中的第1步路径所对应的网格;
无人机预规划q步最优路径即无人机预规划的q个自身位置坐标xpi(k+t|k)所连成的路径,对q个自身位置坐标xpi(k+t|k)向上取整得到所对应的q个网格;1≤t≤q且t∈Ν*;如某架无人机位置坐标为(4.5,3.7),则对应网格(5,4);
步骤1.3:构建多无人机协同搜索运动目标的搜索模型的多无人机状态转移模型;
令第i架无人机的状态转移模型为:
x i ( k + t + 1 | k ) = f i ( x i ( k + t | k ) , u i ( k + t | k ) ) , ∀ t = 0 , 1 , ... , q - 1 ; i = 1 , 2 , ... , N v - - - ( 5 )
式(5)中转移函数表达式fi为:
f i = xp i ( k + t | k ) + v × Δ T × S ( θ i ( k + t | k ) + Δθ i ( k + t | k ) ) θ i ( k + t | k ) + Δθ i ( k + t | k ) - - - ( 6 )
式(6)中,Δθi(k+t|k)∈{-α,0,α}为航向偏转角,无人机受到动力学性能的影响,不可能向任意角度偏转,Δθi(k+t|k)只可能有3种情况,其中α是常数。如图3所示,其中白虚线箭头代表无人机当前时刻飞行方向,黑实线箭头代表无人机下一时刻可能的飞行方向。
式(6)中,S(θi(k+t|k)+Δθi(k+t|k))为关于三角函数关系的函数,令θi(k+t|k)+Δθi(k+t|k)=*,则有:S(*)=[cos(*),sin(*)]T
在状态信息预测序列Xi(k)中,令第i架无人机在第k个时间步长预测第k个时间步长的自身状态信息为:
xi(k|k)=xi(k) (7)
步骤2、基于第k个时间步长的搜索图SMP(k),对搜索模型利用加入交叉算子的粒子群算法进行求解,获得第k个时间步长的最优解FG(k);最优解FG(k)是由NV×q个[-1,1]之间的任意整数组成的序列;q表示预规划的步长数;
步骤2.1、定义种群粒子为D={d1,d2,…,ds,…,dS},ds表示种群中第s个粒子;1≤s≤S;本实施案例中,S=40;
定义种群迭代次数为g;
定义第k个时间步长的第g次迭代的第s个种群粒子ds的速度和位置分别为并随机初始化速度为[-1,0]之间的任意整数、位置为[-1,1]之间的任意整数;
步骤2.2、初始化k=1;
步骤2.3、初始化g=0;
步骤2.4、以第k个时间步长的第g次迭代的第s个粒子ds的位置作为第k个时间步长的第g次迭代的第s个粒子的最优解,记为从而初始化第k个时间步长的第g次迭代的S个粒子的最优解;
步骤2.5、利用式(8)获得第k个时间步长的第s个粒子ds的适应值Js(k),从而获得第k个时间步长的S个粒子的适应值;
J s ( k ) = w 1 × Σ i = 1 N v Σ ( m , n ) ∈ A i k { ( p d - p f ) p m n s ( k ) + p f } + w 2 × Σ i = 1 N v Σ ( a , b ) ∈ B i k { ( p d - p f ) p a b s ( k ) + p f } - - - ( 8 )
式(8)中,w1,w2表示权重;本案例中,w1=0.6,w2=0.4;pd表示无人机的探测概率;pf表示无人机的虚警概率;表示第k个时间步长下第i架无人机预规划q步最优路径所对应的q个网格所构成的网格集合;表示第k个时间步长下由第s个粒子ds的位置经过解码后,获得的网格集合中的网格(m,n)内运动目标的存在概率;表示第k个时间步长下第i架无人机在预规划q步最优路径中的第1步路径所对应的网格集合;表示第k个时间步长下由第s个粒子ds的位置经过解码后,获得的第1步路径所对应的网格集合中网格(a,b)内运动目标的存在概率;
步骤2.6、从所述第k个时间步长的S个粒子的适应值中选出最大适应值对应的粒子位置作为得第k个时间步长的第g次迭代的全局最优解Fg(k);
步骤2.7、利用式(8)获得第k个时间步长的第g+1次迭代的第s个粒子ds的速度
v s g + 1 ( k ) = w × v s g ( k ) + c 1 × r a n d × ( f s g ( k ) - x s g ( k ) ) + c 2 × r a n d × ( F g ( k ) - x s g ( k ) ) - - - ( 9 )
式(9)中,c1,c2是正常数,称为学习因子;w为惯性因子,rand是[0,1]之间的随机数;本实施案例中,c1=c2=2,w=1;
步骤2.8、利用式(10)和式(11)进行第k个时间步长的第g次迭代的第s个粒子ds与第z个粒子dz的交叉运算,获得第k个时间步长的第g次迭代的第s个粒子ds的交叉位置和第z个粒子dz的交叉位置
x s ′ g ( k ) = r × x z g ( k ) + ( 1 - r ) × x s g ( k ) - - - ( 10 )
x z ′ g ( k ) = r × x s g ( k ) + ( 1 - r ) × x z g ( k ) - - - ( 11 )
式(10)和式(11)中,r表示交叉系数;本实施例中,交叉系数取r=0.2。
步骤2.9、利用式(12)获得第k个时间步长的第g+1次迭代的第s个粒子ds的位置
x s g + 1 ( k ) = x s ′ g ( k ) + v s g + 1 ( k ) - - - ( 12 )
步骤2.10、获得第k个时间步长的最优解FG(k);
步骤2.10.1、获得第k个时间步长的第g次迭代的第s个粒子的最优解的适应值和第k个时间步长的第g+1次迭代的第s个粒子的的适应值并进行比较,将较大适应值对应的粒子位置作为第k个时间步长的第g+1次迭代第s个粒子的最优解
步骤2.10.2、重复步骤2.10.1,从而获得第k个时间步长的第g+1次迭代S个粒子的最优解,并从中选出最大适应值对应的最优解作为第k个时间步长的第g+1次迭代的全局最优解Fg+1(k);
步骤2.10.3、判断g≥G是否成立,若成立,则表示获得第k个时间步长的最优解FG(k);否则将g+1赋值给g,并返回步骤2.4。
本实施案例中,种群迭代总次数G=50;
步骤3、利用式(13)对第k个时间步长的最优解FG(k)进行解码,获得NV架无人机的第k个时间步长的航向偏转角 Δθ k = { Δθ 1 ( k ) , Δθ 2 ( k ) , ... , Δθ i ( k ) , ... , Δθ N V ( k ) } :
Δθk=FG(k)×α (13)
式(13)中,α表示所设定的无人机最大航向偏转角;表示第i架无人机的第k个时间步长的航向偏转角;1≤i≤NV;即解码后,-1对应-α,0对应0,1对应α。
步骤4、根据第k个时间步长的航向偏转角分别获得第k个时间步长的NV个预规划q步最优路径;并令NV架无人机分别执行相应的预规划q步最优路径中的第1步;从而更新NV架无人机在搜索环境E中在第k个时间步长的位置,获得NV架无人机在搜索环境E中在第k+1个时间步长的位置;
步骤4.1、初始化4架无人机的位置和航向角;
NV=4架无人机,初始位置分别为:(1,1),(1,40),(40,1),(40,40);无人机的初始航向角在[-180°,180°]上随机获得;
步骤4.2、根据4架无人机的位置和航向角、以及步骤3中解码后得到第i架无人机的航向偏转角利用式(5)和式(6)获得第i架无人机的第k个时间步长的预规划q步最优路径;第i架无人机执行相应的预规划q步最优路径中的第1步,相当于无人机进行了运动,从而更新第k个时间步长的位置,获得第k+1个时间步长的位置;
步骤4.2、重复步骤4.2,即可得到NV架无人机在搜索环境E中在第k+1个时间步长的位置。
步骤5、利用式(14-18),基于探测信息和基于目标运动预测更新第k个时间步长的搜索图SMP(k),获得第k+1个时间步长的搜索图SMP(k+1);
因为无人机的搜索路径是基于搜索图规划的,一旦探测装置发现无人机,目标就能获得无人机的位置信息,这种情况下降低无人机所在网格的运动目标的存在概率,一定程度上可避免无人机下一步再次经过探测装置所在网格,被探测装置发现,泄露自己的位置信息。
当第k个时间步长下无人机搜索网格(m,n)且发现目标同时没被探测装置发现时,则利用式(14)更新网格(m,n)中的运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × p d p m n ( k ) p f + ( p d - p f ) p m n ( k ) ) - - - ( 14 )
当第k个时间步长下无人机搜索网格(m,n)且发现目标同时被探测装置发现时,则利用式(15)更新网格(m,n)中的运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × τ 2 × p d p m n ( k ) p f + ( p d - p f ) p m n ( k ) ) - - - ( 15 )
当第k个时间步长下无人机搜索网格(m,n)且未发现目标同时未被探测装置发现时,则利用式(16)更新网格(m,n)中运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × ( 1 - p d ) p m n ( k ) 1 - p f + ( p f - p d ) p m n ( k ) ) - - - ( 16 )
当第k个时间步长下无人机搜索网格(m,n)且未发现目标同时被探测装置发现,则利用式(17)更新网格(m,n)中运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × τ 2 × ( 1 - p d ) p m n ( k ) 1 - p f + ( p f - p d ) p m n ( k ) ) - - - ( 17 )
当第k个时间步长下无人机没有搜索网格(m,n)时,则利用式(18)更新网格(m,n)中运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × τ 1 × p m n ( k ) ) - - - ( 18 )
式(14)-式(18)中,pmn(k)为第k个时间步长网格(m,n)中运动目标的存在概率;τ12∈[0,1]为动态信息因子;本实施案例中,τ1=0.98,τ2=0.65;ΔT表示第k个时间步长与第k+1个时间步长之间的间隔;H((o,h),(m,n),ΔT)表示基于高斯分布预测的运动目标在间隔ΔT内从网格(o,h)转移到网格(m,n)的概率;o∈{1,2,...,M},h∈{1,2,...,N}。
基于高斯分布的目标运动预测,即在搜索区域E中,假设目标在第k个时间步长的位置为(xk,yk),在第k+1个时间步长的位置为(xk+1,yk+1),则第k+1个时间步长目标在x方向和y方向上的位置xk+1和yk+1分别服从均值为μx和μy,方差为σ2的高斯分布,如式(19)所示:
μ x = x k + x k + 1 - x k ( x k + 1 - x k ) 2 + ( y k + 1 - y k ) 2 v 0 a k Δ t
μ y = y k + y k + 1 - y k ( x k + 1 - x k ) 2 + ( y k + 1 - y k ) 2 v 0 a k Δ t - - - ( 19 )
σ 2 = 4 a k 3 - a k 12 ξΔt 4
式(19)中v0表示运动目标的速度,Δt表示时间步长间隔中的的单位步长,ak表示时间步长间隔中的单位步长总个数;并有ΔT=ak×Δt;本实施例中,v0=0.5km/s,ak=1,ΔT=2s,ξ=12.5。经过时间ΔT后,目标从网格(o,h)移动到网格(m,n)的概率为;
H ( ( o , h ) , ( m , n ) , Δ T ) = 1 2 πσ 2 ∫ Y n - c / 2 Y n + c / 2 ∫ X m - c / 2 X m + c / 2 exp { - 1 2 σ 2 [ ( x k + 1 - μ x ) 2 + ( y k + 1 - μ y ) 2 ] } dx k + 1 dy k + 1 - - - ( 20 )
式(20)中,(Xm,Yn)为网格(m,n)的中心点;本实施例中,取每个网格的边长c=1km。
为简化无人机对多运动目标的搜索过程,假定NT个运动目标都服从式(20),并且每个移动目标之间相互独立。
步骤6、将k+1赋值给k;并判断k≤K是否成立,若成立,则返回步骤2执行,否则结束NV架无人机搜索NT个具有逃避行为的运动目标的搜索任务。

Claims (3)

1.一种针对具有感知能力的运动目标的多无人机协同搜索方法,其特征是:
定义所述多无人机协同搜索是在M×N的离散正方形网格所构成的搜索环境E中执行搜索任务,所述搜索环境E中的任意一个网格记为(m,n);m∈{1,2,...,M},n∈{1,2,...,N};每个网格的边长为c;
定义所述搜索环境E中存在NV架无人机;任意一架无人机的飞行速度为v、最大偏转角为α;
定义所述搜索环境E中存在NT个具有感知能力的运动目标,且一个离散正方形网格中至多只能存在一个运动目标;
定义所述搜索环境E中还存在NB个固定不动的探测装置;
定义用K表示多无人机搜索的总时间步长,用k表示第k个时间步长,k=1,2,···,K;
定义Pmn(k)表示第k个时间步长网格(m,n)中运动目标的存在概率;则令SMP(k)={Pmn(k)|m∈{1,2,...,M},n∈{1,2,...,N}}表示第k个时间步长的搜索图;
所述多无人机协同搜索方法按如下步骤进行:
步骤1、利用模型预测控制法构建多无人机协同搜索运动目标的搜索模型;
步骤2、基于所述第k个时间步长的搜索图SMP(k),对所述搜索模型利用加入交叉算子的粒子群优化算法进行求解,获得第k个时间步长的最优解FG(k);所述最优解FG(k)是由NV×q个[-1,1]之间的任意整数组成的序列;q表示预规划的步长数;
步骤3、利用式(0)对所述第k个时间步长的最优解FG(k)进行解码,获得NV架无人机的第k个时间步长的航向偏转角
Δθ k = F G ( k ) × α - - - ( 0 )
式(0)中,α表示所设定的无人机最大航向偏转角;表示第i架无人机的第k个时间步长的航向偏转角;1≤i≤NV
步骤4、根据所述第k个时间步长的航向偏转角分别获得第k个时间步长的NV个预规划q步最优路径;并令所述NV架无人机分别执行相应的预规划q步最优路径中的第1步;从而更新所述NV架无人机在搜索环境E中在第k个时间步长的位置,获得所述NV架无人机在搜索环境E中在第k+1个时间步长的位置;
步骤5、基于探测信息和基于目标运动预测更新第k个时间步长的搜索图SMP(k),获得第k+1个时间步长的搜索图SMP(k+1);
步骤6、将k+1赋值给k;并判断k≤K是否成立,若成立,则返回步骤2执行,否则结束NV架无人机搜索NT个具有感知能力的运动目标的搜索任务。
2.根据权利要求1所述的针对具有感知能力的运动目标的多无人机协同搜索方法,其特征是:所述步骤2中的加入交叉算子的粒子群优化算法是按如下步骤进行:
步骤2.1、定义种群粒子为D={d1,d2,…,ds,…,dS},ds表示种群中第s个粒子;1≤s≤S;
定义种群迭代次数为g;
定义第k个时间步长的第g次迭代的第s个种群粒子ds的速度和位置分别为并随机初始化所述速度为-1或0;随机初始化所述位置为-1或0或1;
步骤2.2、初始化k=1;
步骤2.3、初始化g=0;
步骤2.4、以第k个时间步长的第g次迭代的第s个粒子ds的位置作为第k个时间步长的第g次迭代的第s个粒子的最优解,记为fs g(k);从而初始化第k个时间步长的第g次迭代的S个粒子的最优解;
步骤2.5、利用式(1)获得第k个时间步长的第s个粒子ds的适应值Js(k),从而获得第k个时间步长的S个粒子的适应值;
J s ( k ) = w 1 × Σ i = 1 N v Σ ( m , n ) ∈ A i k { ( p d - p f ) p m n s ( k ) + p f } + w 2 × Σ i = 1 N v Σ ( a , b ) ∈ B i k { ( p d - p f ) p a b s ( k ) + p f } - - - ( 1 )
式(1)中,w1,w2表示权重;pd表示无人机的探测概率;pf表示无人机的虚警概率;表示第k个时间步长下第i架无人机预规划q步最优路径所对应的q个网格所构成的网格集合;表示第k个时间步长下由第s个粒子ds的位置经过解码后,获得的网格集合中的网格(m,n)内运动目标的存在概率;表示第k个时间步长下第i架无人机在预规划q步最优路径中的第1步路径所对应的网格集合;表示第k个时间步长下由第s个粒子ds的位置经过解码后,获得的第1步路径所对应的网格集合中网格(a,b)内运动目标的存在概率;
步骤2.6、从所述第k个时间步长的S个粒子的适应值中选出最大适应值对应的粒子位置作为得第k个时间步长的第g次迭代的全局最优解Fg(k);
步骤2.7、利用式(2)获得第k个时间步长的第g+1次迭代的第s个粒子ds的速度
v s g + 1 ( k ) = w × v s g ( k ) + c 1 × r a n d × ( f s g ( k ) - x s g ( k ) ) + c 2 × r a n d × ( F g ( k ) - x s g ( k ) ) - - - ( 2 )
式(2)中,c1,c2是正常数,称为学习因子;w为惯性因子,rand表示[0,1]之间的随机数;
步骤2.8、利用式(3)和式(4)进行第k个时间步长的第g次迭代的第s个粒子ds与第z个粒子dz的交叉运算,获得第k个时间步长的第g次迭代的第s个粒子ds的交叉位置和第z个粒子dz的交叉位置
x s ′ g ( k ) = r × x z g ( k ) + ( 1 - r ) × x s g ( k ) - - - ( 3 )
x z ′ g ( k ) = r × x s g ( k ) + ( 1 - r ) × x z g ( k ) - - - ( 4 )
式(3)和式(4)中,r表示交叉系数;
步骤2.9、利用式(5)获得第k个时间步长的第g+1次迭代的第s个粒子ds的位置
x s g + 1 ( k ) = x s ′ g ( k ) + v s g + 1 ( k ) - - - ( 5 )
步骤2.10、获得第k个时间步长的最优解FG(k);
步骤2.10.1、获得第k个时间步长的第g次迭代的第s个粒子的最优解的适应值和第k个时间步长的第g+1次迭代的第s个粒子的的适应值并进行比较,将较大适应值对应的粒子位置作为第k个时间步长的第g+1次迭代第s个粒子的最优解
步骤2.10.2、重复步骤2.10.1,从而获得第k个时间步长的第g+1次迭代S个粒子的最优解,并从中选出最大适应值对应的最优解作为第k个时间步长的第g+1次迭代的全局最优解Fg+1(k);
步骤2.10.3、判断g≥G是否成立,若成立,则表示获得第k个时间步长的最优解FG(k);否则将g+1赋值给g,并返回步骤2.4。
3.根据权利要求1所述的针对具有感知能力的多无人机协同搜索方法,其特征在于,所述步骤5是按如下方式获得第k+1个时间步长的搜索图SMP(k+1):
当第k个时间步长下无人机搜索网格(m,n)且发现目标同时没被探测装置发现时,则利用式(6)更新网格(m,n)中的运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × p d p m n ( k ) p f + ( p d - p f ) p m n ( k ) ) - - - ( 6 )
当第k个时间步长下无人机搜索网格(m,n)且发现目标同时被探测装置发现时,则利用式(7)更新网格(m,n)中的运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × τ 2 × p d p m n ( k ) p f + ( p d - p f ) p m n ( k ) ) - - - ( 7 )
当第k个时间步长下无人机搜索网格(m,n)且未发现目标同时未被探测装置发现时,则利用式(8)更新网格(m,n)中运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × ( 1 - p d ) p m n ( k ) 1 - p f + ( p f - p d ) p m n ( k ) ) - - - ( 8 )
当第k个时间步长下无人机搜索网格(m,n)且未发现目标同时被探测装置发现,则利用式(9)更新网格(m,n)中运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × τ 2 × ( 1 - p d ) p m n ( k ) 1 - p f + ( p f - p d ) p m n ( k ) ) - - - ( 9 )
当第k个时间步长下无人机没有搜索网格(m,n)时,则利用式(10)更新网格(m,n)中运动目标的存在概率:
p m n ( k + 1 ) = Σ o = 1 M Σ h = 1 N ( H ( ( o , h ) , ( m , n ) , Δ T ) × τ 1 × p m n ( k ) ) - - - ( 10 )
式(6-10)中,pmn(k)为第k个时间步长网格(m,n)中运动目标的存在概率;τ12∈[0,1]为动态信息因子;ΔT表示第k个时间步长与第k+1个时间步长之间的间隔;H((o,h),(m,n),ΔT)表示基于高斯分布预测的运动目标在间隔ΔT内从网格(o,h)转移到网格(m,n)的概率;o∈{1,2,...,M},h∈{1,2,...,N}。
CN201610012608.5A 2016-01-05 2016-01-05 一种针对具有感知能力的运动目标的多无人机协同搜索方法 Active CN105425820B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610012608.5A CN105425820B (zh) 2016-01-05 2016-01-05 一种针对具有感知能力的运动目标的多无人机协同搜索方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610012608.5A CN105425820B (zh) 2016-01-05 2016-01-05 一种针对具有感知能力的运动目标的多无人机协同搜索方法

Publications (2)

Publication Number Publication Date
CN105425820A CN105425820A (zh) 2016-03-23
CN105425820B true CN105425820B (zh) 2016-12-28

Family

ID=55504088

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610012608.5A Active CN105425820B (zh) 2016-01-05 2016-01-05 一种针对具有感知能力的运动目标的多无人机协同搜索方法

Country Status (1)

Country Link
CN (1) CN105425820B (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106444845B (zh) * 2016-10-14 2019-03-05 中国人民解放军国防科学技术大学 一种无信息条件下的多uav协同搜索方法
CN106959700B (zh) * 2017-03-21 2019-08-27 北京航空航天大学 一种基于上限置信区间算法的无人机群协同巡逻追踪轨迹规划方法
CN107145161B (zh) * 2017-05-27 2020-02-21 合肥工业大学 无人机访问多目标点的航迹规划方法及装置
CN107247461B (zh) * 2017-06-05 2020-07-07 合肥工业大学 考虑突发干扰的无人-有人机编队信息分发处理方法
CN107168380B (zh) * 2017-06-28 2020-06-05 西安电子科技大学 一种基于蚁群算法的无人机群区域覆盖的多步寻优方法
CN107589663B (zh) * 2017-08-16 2020-11-06 西安电子科技大学 基于多步粒子群算法的无人机协同侦察覆盖方法
CN107844129B (zh) * 2017-11-30 2021-03-23 北京大学深圳研究生院 基于路径规划和信息融合的多无人机协同搜索方法及系统
CN110262563A (zh) * 2018-05-23 2019-09-20 中国海洋大学 多无人机协同搜索水上目标的方法
CN108594858B (zh) * 2018-07-16 2020-10-27 河南大学 马尔科夫运动目标的无人机搜索方法及装置
CN109445456A (zh) * 2018-10-15 2019-03-08 清华大学 一种多无人机集群导航方法
CN109947136B (zh) * 2019-02-28 2020-07-10 清华大学 一种面向无人机群体快速目标搜索的协同主动感知方法
CN110389595B (zh) * 2019-06-17 2022-04-19 中国工程物理研究院电子工程研究所 双属性概率图优化的无人机集群协同目标搜索方法
WO2021102676A1 (zh) * 2019-11-26 2021-06-03 深圳市大疆创新科技有限公司 物体状态获取方法、可移动平台及存储介质
CN111176334B (zh) * 2020-01-16 2021-08-17 浙江大学 一种多无人机协同目标搜索方法
CN112327862B (zh) * 2020-11-16 2021-10-19 北京理工大学 一种不确定环境下多机器人协同搜索的路径规划方法
CN112966803B (zh) * 2021-02-02 2022-06-07 同济大学 一种基于粒子群算法的多智能体协同目标搜索方法
CN112905959B (zh) * 2021-02-09 2022-09-09 辽宁警察学院 一种基于正态分布概率图的警务多无人机目标搜索方法
CN115390584B (zh) * 2022-04-15 2023-12-26 中国人民解放军战略支援部队航天工程大学 一种多机协同搜索方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102778235A (zh) * 2012-06-28 2012-11-14 西北工业大学 通信约束下的多无人机协同区域搜索方法
CN103246289A (zh) * 2013-05-07 2013-08-14 西北工业大学 带通信约束的多无人机协同搜索中的目标分配方法
CN103472850A (zh) * 2013-09-29 2013-12-25 合肥工业大学 一种基于高斯分布预测的多无人机协同搜索方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070288156A1 (en) * 2006-05-17 2007-12-13 The Boeing Company Route search planner
US20120022778A1 (en) * 2010-07-22 2012-01-26 Honeywell International Inc. Systems and methods for searching and displaying flight plans

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102778235A (zh) * 2012-06-28 2012-11-14 西北工业大学 通信约束下的多无人机协同区域搜索方法
CN103246289A (zh) * 2013-05-07 2013-08-14 西北工业大学 带通信约束的多无人机协同搜索中的目标分配方法
CN103472850A (zh) * 2013-09-29 2013-12-25 合肥工业大学 一种基于高斯分布预测的多无人机协同搜索方法

Also Published As

Publication number Publication date
CN105425820A (zh) 2016-03-23

Similar Documents

Publication Publication Date Title
CN105425820B (zh) 一种针对具有感知能力的运动目标的多无人机协同搜索方法
CN103472850B (zh) 一种基于高斯分布预测的多无人机协同搜索方法
CN104881043B (zh) 一种针对多动态目标的多无人机智能协同察打方法
CN106705970A (zh) 一种基于蚁群算法的多无人机协同路径规划方法
Yue et al. Review and empirical analysis of sparrow search algorithm
Wang et al. Rank-driven salp swarm algorithm with orthogonal opposition-based learning for global optimization
Wang et al. Virtual reality technology of multi uavearthquake disaster path optimization
Su et al. Robot path planning based on random coding particle swarm optimization
Wan et al. Cooperative path integral control for stochastic multi-agent systems
Zhang et al. ABC-TLBO: A hybrid algorithm based on artificial bee colony and teaching-learning-based optimization
Zhao et al. A fast robot path planning algorithm based on bidirectional associative learning
Azeemi Cooperative Trajectory and Launch Power Optimization of UAV Deployed in Cross-Platform Battlefields
CN114610064A (zh) 基于动态目标搜索的空地协同任务分配方法及相关设备
Wu et al. Deep-reinforcement-learning-based multitarget coverage With connectivity guaranteed
Gao et al. Cooperative multi-aircraft conflict resolution based on co-evolution
Li et al. Task assignment of multi-robot systems based on improved genetic algorithms
Han et al. Research on UAV indoor path planning algorithm based on global subdivision grids
Cao et al. Application of improved ant colony algorithm in the path planning problem of mobile robot
Heidari et al. Improved black hole algorithm for efficient low observable UCAV path planning in constrained aerospace
Liu et al. Multi-step reinforcement learning algorithm of mobile robot path planning based on virtual potential field
Jing et al. Mobile robot path planning based on improved reinforcement learning optimization
Liu et al. Intelligent robot motion trajectory planning based on machine vision
Jiao et al. Path planning of escort robot based on improved quantum particle swarm optimization
Jin et al. Research on distributed cooperative control of swarm UAVs for persistent coverage
Chung et al. A new utility function for smooth transition between exploration and exploitation of a wind energy field

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant