CN109765928A - 基于移动多智能体编队的协作式控制与目标跟踪方法 - Google Patents

基于移动多智能体编队的协作式控制与目标跟踪方法 Download PDF

Info

Publication number
CN109765928A
CN109765928A CN201910012688.8A CN201910012688A CN109765928A CN 109765928 A CN109765928 A CN 109765928A CN 201910012688 A CN201910012688 A CN 201910012688A CN 109765928 A CN109765928 A CN 109765928A
Authority
CN
China
Prior art keywords
state
target
motion
agent
formation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201910012688.8A
Other languages
English (en)
Inventor
刘伟峰
邢家瑞
孔明鑫
张桂林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hangzhou Dianzi University
Original Assignee
Hangzhou Dianzi University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hangzhou Dianzi University filed Critical Hangzhou Dianzi University
Priority to CN201910012688.8A priority Critical patent/CN109765928A/zh
Publication of CN109765928A publication Critical patent/CN109765928A/zh
Withdrawn legal-status Critical Current

Links

Landscapes

  • Radar Systems Or Details Thereof (AREA)

Abstract

本发明涉及基于移动多智能体编队的协作式控制与目标跟踪方法。目前运用多智能体控制对运动目标进行编队式跟踪的研究还较为缺乏。本发明方法通过运用Kalman算法对目标运动状态进行估计计算,得到一条目标运动的估计轨迹。然后,采用一致性算法,对多智能体系统进行控制使其形成编队。最后,通过传感器控制方法对目标估计轨迹进行跟踪。本发明方法选择高斯噪声环境下Kalman滤波器对目标运动进行估计,并通过一致性理论实验了传感器控制与目标跟踪过程,加深了传统算法中对传感器控制问题及目标跟踪问题的结合,大大提高了跟踪稳定性。

Description

基于移动多智能体编队的协作式控制与目标跟踪方法
技术领域
本发明属于计算机技术领域,具体是多传感器目标跟踪领域,涉及一种基于移动多智能体编队的协作式控制与目标跟踪方法。
背景技术
在当今的技术发展与社会服务中,由于执行任务复杂度的提高,单一的智能体已经无法完成越来越复杂的任务需求,需要通过多个智能体的协同作战来共同完成任务。而多智能体协调控制系统因其兼具分布式感知与执行能力以及整体的协调并行能力,并且具有较强的鲁棒性和容错性而得到广泛关注。目前对于多智能体系统的控制方法主要有即基于行为法、人工势场法、跟随领航法(Leader-Follower)和虚拟结构法,其中应用较为广泛的是跟随领航法。目标跟踪控制是实现多智能体系统智能性的关键内容,主要分为路径规划和轨迹跟踪两部分。其中基于几何法的路径规划方法简单便捷,本发明中用到的就是一种基于Kalman滤波器的几何法路径规划算法。目前,单一的多传感器控制算法以及单一的目标跟踪算法已经有了深入的研究,但是运用多智能体控制对运动目标进行编队式跟踪的研究还较为缺乏。
发明内容
本发明针对现有技术的不足,提供一种基于移动多智能体编队的协作式控制与目标跟踪方法。本发明方法通过运用Kalman算法对目标运动状态进行估计计算,得到一条目标运动的估计轨迹。然后,采用一致性算法,对多智能体系统进行控制使其形成编队。最后,通过传感器控制方法对目标估计轨迹进行跟踪。
本发明方法包括以下各步骤:
步骤(1).依据观测器返还数据对目标状态进行估计:
步骤(1-1).依次建立目标状态方程、观测方程以及杂波方程:
状态方程:xk=Axk-1k
观测方程:zk=Hxkk(xk,sk);
杂波方程:
其中,A为状态转移矩阵,zk为目标状态观测值,为杂波量测,H为状态观测矩阵;μk、υk为状态噪声和观测噪声,均满足零均值,协方差为Q和R的高斯噪声,即μk~N(0,Qk),υk~N(0,Rk),。
观测系统方程和观测噪声受传感器状态sk的影响,杂波量测满足强度为λk,分布为ck(U)的强度分布函数,其中U为观测区域。
步骤(1-2).描述目标状态估计问题为如下极大后验估计问题:
其中,为目标状态估计值,表示概率;
采用最近邻算法获取目标量测,即满足如下条件的马氏距离获得目标有效量测:
其中,zk,i表示第i个信号点状态观测值,表示状态观测预测值,表示状态预测值,Sk|k-1表示传感器状态。
考虑到漏检问题的存在,选取最小的马氏距离ηmin,即当所有zk,i∈zk时,表示目标漏检,没有量测产生,此时,目标的状态估计采用预测值,即
虑到观测噪声受目标状态和传感器状态共同影响,其强度满足如下的方程:
其中,D0,R0是给定的正定常数矩阵,I表示单位矩阵;
即目标状态和传感器状态之间的距离差值,影响目标观测的噪声方差,即满足如下的增益矩阵:
步骤(1-3).采用Kalman递推算法进行状态预测,方法如下:
系统状态预测:
预测误差协方差:
滤波增益矩阵:
系统状态更新:
误差协方差更新:
经过反复的迭代计算,可以得到每个时刻目标运动状态的估计值,在几何坐标上表示为一条目标运动的估计轨迹。
步骤(2).多智能体编队控制:
假设多移动智能体方程如下:
sk,i=Ak,isk,i+Bk,iuk,i,i=1,2,3;yk,i=Csk,i
当i=1时,对应多智能体系统中的头结点,有:λ为一常数,C为输出增益矩阵;
当i=2,3时,对应其它子节点,有:
将智能体的位置和速度表示为:
其中,s为智能体状态,Px,k,Py,k为智能体运动的位置向量,表示智能体运动的速度向量,T表示转置;
将智能体运动的二维平面划分为四个象限,并设定一个编队偏差角θ,在每一时刻根据智能体运动速度方向所处的象限,计算与偏差角θ之间的差值,以这个差值的增益值作为子节点运动的控制量,在每一时刻修正子节点运动方向和角度,使子节点在编队运动过程中始终可以和头结点保持固定编队运动。
步骤(3).具有移动跟踪的多智能体编队控制:
在步骤(1)中得到目标运动状态估计轨迹作为多智能体系统中头结点的跟踪对象;通过步骤(2)的一致性传感器控制方法使多智能形成编队,仅由头结点获取目标状态信息然后跟踪,其它子节点通过一致性原理与头结点保持一定编队运动。
本发明的有益效果:利用传感器控制方法使多智能体形成编队对目标运动轨迹进行跟踪,可使多智能体系统对获取目标信息的利用率得到提高,智能体编队中仅由头结点获取目标运动状态信息,其它子节点只与相邻节点保持局部感知,智能体编队形成更快、队形保持更稳定。相较于传统目标跟踪手段,本发明提出的算法有效提高了跟踪稳定性。
附图说明
图1是目标跟踪过程中传感器速度变化图;
图2是Kalman过程中目标状态估计图;
图3是传感器控制过程中传感器速度变化图;
图4是编队控制效果图;
图5是具有移动跟踪的多智能体协调控制图。
具体实施方式
以下结合附图对本发明作进一步说明。
基于移动多智能体编队的协作式控制与目标跟踪方法,包括以下各步骤:
步骤(1).依据观测器返还数据对目标状态进行估计:
步骤(1-1).依次建立目标状态方程、观测方程以及杂波方程:
状态方程:xk=Axk-1k (1);
观测方程:
杂波方程:
其中,A为状态转移矩阵,zk为目标状态观测值,为杂波量测,φ为空集,H为状态观测矩阵,μkk为状态噪声和观测噪声,均满足零均值,协方差为Q和R的高斯噪声,即μk~N(0,Qk),υk~N(0,Rk);
观测系统方程和观测噪声受传感器状态sk的影响,杂波量测满足强度为λk,分布为ck(U)的强度分布函数,其中U为观测区域,为简单起见,假设杂波分布满足均匀分布。PD(xk,sk)是目标的检测概率,其大小依赖于目标状态xk和传感器状态sk,考虑线性观测器,那么目标的观测方程简化为:
zk=Hxkk(xk,sk) (4);
观测方程中的噪声受传感器状态的影响,由于目标具有非合作特点,因此,目标运动不受控制,和原来的线性方程一致。
步骤(1-2).描述目标状态估计问题为如下极大后验估计问题:
其中, 为目标状态估计值,表示概率。
由于杂波的干扰,需要考虑关联算法,获取目标的真实量测(或者有效量测),由于只考虑单目标的运动,在本发明中,采用最近邻算法获取目标量测,即满足如下条件的马氏距离获得目标有效量测:
其中,zk,i表示第i个信号点状态观测值,表示状态观测预测值,表示状态预测值,Sk|k-1表示传感器状态。
考虑到漏检问题的存在,选取最小的马氏距离ηmin,即当所有zk,i∈zk时,表示目标漏检,没有量测产生,此时,目标的状态估计采用预测值,即
考虑到观测噪声受目标状态和传感器状态共同影响,假设其强度满足如下的方程:
上式中D0,R0是给定的正定常数矩阵,I表示单位矩阵,上式表示,目标状态和传感器状态之间的距离差值,影响目标观测的噪声方差,即满足如下的增益矩阵:
步骤(1-3).采用Kalman递推算法进行状态预测,方法如下:
系统状态预测:
预测误差协方差:
滤波增益矩阵:
系统状态更新:
误差协方差更新:
经过反复的迭代计算,可以得到每个时刻目标运动状态的估计值,在几何坐标上表示为一条目标运动的估计轨迹。
传感器速度估计效果见图1,目标状态估计效果见图2。
步骤(2).多智能体编队控制:
假设多移动智能体方程如下:
sk,i=Ak,isk,i+Bk,iuk,i,i=1,2,3;
yk,i=Csk,i
当i=1时,对应多智能体系统中的头结点,有:其中λ为一常数,C为输出增益矩阵;
当i=2,3时,对应其它子节点,有:
对于编队保持问题,根据头结点与其它子节点之间的位置误差关系,本发明方法给出了一种基于偏差角的编队形成与保持方法。可以将智能体的位置和速度表示为:
其中,s表示智能体状态,Px,k,Py,k为智能体运动的位置向量,表示智能体运动的速度向量,T表示转置。
将智能体运动的二维平面划分为四个象限,并设定一个编队偏差角θ,在每一时刻根据智能体运动速度方向所处的象限,计算与偏差角θ之间的差值,以这个差值的一定增益值作为子节点运动的控制量,在每一时刻修正子节点运动方向和角度,使子节点在编队运动过程中始终可以和头结点保持固定编队运动。
智能通体速度控制效果见图3,编队形成效果见图4。
步骤(3).具有移动跟踪的多智能体编队控制:
在步骤(1)中得到目标运动状态估计轨迹作为多智能体系统中头结点的跟踪对象。通过步骤(2)的一致性传感器控制方法使多智能形成编队,仅由头结点获取目标状态信息然后跟踪,其它子节点通过一致性原理与头结点保持一定编队运动。
具有移动跟踪的多智能体编队控制效果见图5。

Claims (1)

1.基于移动多智能体编队的协作式控制与目标跟踪方法,其特征在于该方法具体步骤包括:
步骤(1).依据观测器返还数据对目标状态进行估计:
步骤(1-1).依次建立目标状态方程、观测方程以及杂波方程:
状态方程:xk=Axk-1k
观测方程:zk=Hxkk(xk,sk);
杂波方程:
其中,A为状态转移矩阵,zk为目标状态观测值,为杂波量测,H为状态观测矩阵;μk、υk为状态噪声和观测噪声,均满足零均值,协方差为Q和R的高斯噪声,即μk~N(0,Qk),υk~N(0,Rk);
观测系统方程和观测噪声受传感器状态sk的影响,杂波量测满足强度为λk,分布为ck(U)的强度分布函数,其中U为观测区域;
步骤(1-2).描述目标状态估计问题为如下极大后验估计问题:
其中,为目标状态估计值, 表示概率;
采用最近邻算法获取目标量测,即满足如下条件的马氏距离获得目标有效量测:
其中,zk,i表示第i个信号点状态观测值,表示状态观测预测值,表示状态预测值,Sk|k-1表示传感器状态;
考虑到漏检问题的存在,选取最小的马氏距离ηmin,即当所有zk,i∈zk时,表示目标漏检,没有量测产生,此时,目标的状态估计采用预测值,即
考虑到观测噪声受目标状态和传感器状态共同影响,其强度满足如下的方程:
其中,D0,R0是给定的正定常数矩阵,I表示单位矩阵;
即目标状态和传感器状态之间的距离差值,影响目标观测的噪声方差,满足如下的增益矩阵:
步骤(1-3).采用Kalman递推算法进行状态预测,方法如下:
系统状态预测:
预测误差协方差:
滤波增益矩阵:
系统状态更新:
误差协方差更新:
经过反复的迭代计算,得到每个时刻目标运动状态的估计值,在几何坐标上表示为一条目标运动的估计轨迹;
步骤(2).多智能体编队控制:
假设多移动智能体方程为:sk,i=Ak,isk,i+Bk,iuk,i,i=1,2,3;yk,i=Csk,i
当i=1时,对应多智能体系统中的头结点,有:λ为常数,C为输出增益矩阵;
当i=2,3时,对应其它子节点,有:
将智能体的位置和速度表示为:
其中,s为智能体状态,Px,k,Py,k为智能体运动的位置向量,表示智能体运动的速度向量,T表示转置;
将智能体运动的二维平面划分为四个象限,并设定一个编队偏差角θ,在每一时刻根据智能体运动速度方向所处的象限,计算与偏差角θ之间的差值,以这个差值的增益值作为子节点运动的控制量,在每一时刻修正子节点运动方向和角度,使子节点在编队运动过程中始终可以和头结点保持固定编队运动;
步骤(3).具有移动跟踪的多智能体编队控制:
在步骤(1)中得到目标运动状态估计轨迹作为多智能体系统中头结点的跟踪对象;通过步骤(2)的一致性传感器控制方法使多智能形成编队,仅由头结点获取目标状态信息然后跟踪,其它子节点通过一致性原理与头结点保持一定编队运动。
CN201910012688.8A 2019-01-07 2019-01-07 基于移动多智能体编队的协作式控制与目标跟踪方法 Withdrawn CN109765928A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910012688.8A CN109765928A (zh) 2019-01-07 2019-01-07 基于移动多智能体编队的协作式控制与目标跟踪方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910012688.8A CN109765928A (zh) 2019-01-07 2019-01-07 基于移动多智能体编队的协作式控制与目标跟踪方法

Publications (1)

Publication Number Publication Date
CN109765928A true CN109765928A (zh) 2019-05-17

Family

ID=66452725

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910012688.8A Withdrawn CN109765928A (zh) 2019-01-07 2019-01-07 基于移动多智能体编队的协作式控制与目标跟踪方法

Country Status (1)

Country Link
CN (1) CN109765928A (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110517286A (zh) * 2019-08-12 2019-11-29 杭州电子科技大学 基于多智能体控制的单目标动态跟踪与围捕方法
CN110515298A (zh) * 2019-06-14 2019-11-29 南京信息工程大学 基于最优化自适应的海上异构多智能体速度协同控制方法
CN113110182A (zh) * 2021-04-19 2021-07-13 杭州电子科技大学 领导跟随多智能体系统的容错控制器设计方法
CN113848703A (zh) * 2021-08-28 2021-12-28 同济大学 一种多智能体系统状态估计方法
CN114115347A (zh) * 2021-11-25 2022-03-01 中北大学 多条闭合路径引导下空中多智能体分布式相位调控与目标跟踪方法
CN114326759A (zh) * 2021-12-06 2022-04-12 中国农业大学 多智能体编队控制方法、装置及多智能体系统
CN115097726A (zh) * 2022-04-25 2022-09-23 深圳市人工智能与机器人研究院 一种智能体共识控制方法、装置、设备及存储终端

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101465071A (zh) * 2009-01-08 2009-06-24 上海交通大学 多平台目标跟踪与分布交互仿真系统
US20100152996A1 (en) * 2008-12-12 2010-06-17 Thales Method and system for assisting in the management of the relative spacing between aircraft
US20100163621A1 (en) * 2006-01-11 2010-07-01 Carmel-Haifa University Economic Corporation Ltd. Uav decision and control system
CN103412564A (zh) * 2013-07-26 2013-11-27 中国科学院计算技术研究所 一种无人系统分布式一致性编队控制方法及其系统
CN104268865A (zh) * 2014-09-18 2015-01-07 中国人民解放军海军航空工程学院 基于模板匹配的集中式多传感器编队目标跟踪方法
CN105259904A (zh) * 2015-10-15 2016-01-20 山东科技大学 基于模型预测控制的多操纵面无人机纵向解耦控制方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100163621A1 (en) * 2006-01-11 2010-07-01 Carmel-Haifa University Economic Corporation Ltd. Uav decision and control system
US20100152996A1 (en) * 2008-12-12 2010-06-17 Thales Method and system for assisting in the management of the relative spacing between aircraft
CN101465071A (zh) * 2009-01-08 2009-06-24 上海交通大学 多平台目标跟踪与分布交互仿真系统
CN103412564A (zh) * 2013-07-26 2013-11-27 中国科学院计算技术研究所 一种无人系统分布式一致性编队控制方法及其系统
CN104268865A (zh) * 2014-09-18 2015-01-07 中国人民解放军海军航空工程学院 基于模板匹配的集中式多传感器编队目标跟踪方法
CN105259904A (zh) * 2015-10-15 2016-01-20 山东科技大学 基于模型预测控制的多操纵面无人机纵向解耦控制方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
JIARUI XING,等: ""Multi-agent formation control and target tracking"", 《THE 2018 INTERNATIONAL CONFERENCE ON CONTROL AUTOMATION & INFORMATION SCIENCES (ICCAIS 2018)》 *
孙保良,等: ""基于最近邻的集中式多传感器多目标跟踪算法"", 《海军航空工程学院学报》 *
李萌: "基于一致性的多传感器目标跟踪算法研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *
陈传均: "多机器人领航-跟随型编队控制研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110515298A (zh) * 2019-06-14 2019-11-29 南京信息工程大学 基于最优化自适应的海上异构多智能体速度协同控制方法
CN110515298B (zh) * 2019-06-14 2022-09-23 南京信息工程大学 基于最优化自适应的海上异构多智能体速度协同控制方法
CN110517286A (zh) * 2019-08-12 2019-11-29 杭州电子科技大学 基于多智能体控制的单目标动态跟踪与围捕方法
CN110517286B (zh) * 2019-08-12 2022-01-14 杭州电子科技大学 基于多智能体控制的单目标动态跟踪与围捕方法
CN113110182A (zh) * 2021-04-19 2021-07-13 杭州电子科技大学 领导跟随多智能体系统的容错控制器设计方法
CN113848703A (zh) * 2021-08-28 2021-12-28 同济大学 一种多智能体系统状态估计方法
CN113848703B (zh) * 2021-08-28 2023-12-08 同济大学 一种多智能体系统状态估计方法
CN114115347A (zh) * 2021-11-25 2022-03-01 中北大学 多条闭合路径引导下空中多智能体分布式相位调控与目标跟踪方法
CN114326759A (zh) * 2021-12-06 2022-04-12 中国农业大学 多智能体编队控制方法、装置及多智能体系统
CN114326759B (zh) * 2021-12-06 2023-12-22 中国农业大学 多智能体编队控制方法、装置及多智能体系统
CN115097726A (zh) * 2022-04-25 2022-09-23 深圳市人工智能与机器人研究院 一种智能体共识控制方法、装置、设备及存储终端
CN115097726B (zh) * 2022-04-25 2023-03-10 深圳市人工智能与机器人研究院 一种智能体共识控制方法、装置、设备及存储终端

Similar Documents

Publication Publication Date Title
CN109765928A (zh) 基于移动多智能体编队的协作式控制与目标跟踪方法
CN109100714B (zh) 一种基于极坐标系的低慢小目标跟踪方法
CN110989352B (zh) 一种基于蒙特卡洛树搜索算法的群体机器人协同搜索方法
CN105785359B (zh) 一种多约束机动目标跟踪方法
Lin et al. A gated recurrent unit-based particle filter for unmanned underwater vehicle state estimation
Botts et al. Multi-agent surveillance and tracking using cyclic stochastic gradient
CN110517286B (zh) 基于多智能体控制的单目标动态跟踪与围捕方法
US8903641B2 (en) Collaborative robot manifold tracker
Xiong et al. A scheme on indoor tracking of ship dynamic positioning based on distributed multi-sensor data fusion
Liang et al. Bio-inspired self-organized cooperative control consensus for crowded UUV swarm based on adaptive dynamic interaction topology
CN104777465B (zh) 基于b样条函数任意扩展目标形状及状态估计方法
CN112325885A (zh) 一种基于数学统计特征的因子图协同定位算法
Peterson et al. Simulation-based examination of the limits of performance for decentralized multi-agent surveillance and tracking of undersea targets
Song et al. Cooperative Positioning Algorithm Based on Manifold Gradient Filtering in UAV-WSN
Yan et al. Obstacle avoidance for unmanned undersea vehicle in unknown unstructured environment
CN116047495B (zh) 一种用于三坐标雷达的状态变换融合滤波跟踪方法
Li et al. Distributed multiple model filtering for markov jump systems with measurement outliers
Xu et al. Multi-AUV Pursuit-Evasion Game in The Internet of Underwater Things: An Efficient Training Framework via Offline Reinforcement Learning
Zhou et al. Improved Interactive Multiple Models Based on Self-Adaptive Turn Model for Maneuvering Target Tracking
Xu et al. Ants for track initiation of bearings-only tracking
Zhao et al. Distributed short-term predictive control for AUV clusters in underwater cooperative hunting tasks
CN117928559B (zh) 一种基于强化学习的威胁规避下无人机路径规划方法
Gorji et al. Policy gradient for observer trajectory planning with application in multi-target tracking problems
Jatoth et al. Performance comparison of hybrid GA-PSO based tuned IMMs for maneuver target tracking
CN118466519B (zh) 无人船集群的自组织协同围捕控制方法、装置及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20190517

WW01 Invention patent application withdrawn after publication