CN109760047B - 一种基于视觉传感器的舞台机器人预测控制方法 - Google Patents

一种基于视觉传感器的舞台机器人预测控制方法 Download PDF

Info

Publication number
CN109760047B
CN109760047B CN201811617095.6A CN201811617095A CN109760047B CN 109760047 B CN109760047 B CN 109760047B CN 201811617095 A CN201811617095 A CN 201811617095A CN 109760047 B CN109760047 B CN 109760047B
Authority
CN
China
Prior art keywords
stage robot
robot
stage
feedback controller
state feedback
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201811617095.6A
Other languages
English (en)
Other versions
CN109760047A (zh
Inventor
倪洪杰
秦冬冬
陈旭
刘安东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University of Technology ZJUT
Original Assignee
Zhejiang University of Technology ZJUT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University of Technology ZJUT filed Critical Zhejiang University of Technology ZJUT
Priority to CN201811617095.6A priority Critical patent/CN109760047B/zh
Publication of CN109760047A publication Critical patent/CN109760047A/zh
Application granted granted Critical
Publication of CN109760047B publication Critical patent/CN109760047B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Feedback Control In General (AREA)
  • Numerical Control (AREA)

Abstract

一种基于视觉传感器的舞台机器人预测跟踪控制方法,包括以下步骤:1)建立舞台机器人运动学模型;2)采用基于图像的视觉伺服方法建立舞台机器人误差模型;3)考虑系统的不确定性,执行器饱和和数据异常问题,将系统转化为具有丢包和执行器饱和的不确定系统;4)定义性能指标函数并根据误差模型,确定预测方程;5)结合预测方程,设计稳定化状态反馈控制器。本发明提供了一种可以有效解决具数据丢失问题和具有输入约束的舞台机器人视觉伺服轨迹跟踪控制方法。

Description

一种基于视觉传感器的舞台机器人预测控制方法
技术领域
本发明涉及舞台机器人的轨迹跟踪技术领域,具体涉及一种基于视觉传感器的舞台机器人预测控制方法。
背景技术
随着科学技术和控制技术的发展,计算机视觉在各个领域已有广泛的运用,视觉数据信息量丰富,处理手段丰富等特点使得基于视觉的移动机器人控制被广泛应用于娱乐、科研、军事、工业以及物流等领域。轨迹跟踪作为移动机器人运动控制中的基本问题之一,一直备受广泛关注。因此,针对基于视觉的移动机器人轨迹跟踪控制技术的研究,不仅可以丰富移动机器人运动控制的理论成果,还可以满足多领域对运动控制技术越来越高的要求,具有重大的理论和工程意义。
由于视觉伺服系统在采集舞台机器人位置信息时,需要在舞台机器人上做标记点。然而,在舞台机器人的运动过程中,车身晃动、地面不平以及光照不均匀都会影响摄像机的图像采集,甚至无效采集即连续一段的空采样,从而导致测量数据无法使用,需要主动丢弃这类异常数据包。另一方面,舞台环境较为复杂,由于无线网络的不可靠性,在数据传输过程中存在数据包丢失现象。同时,舞台机器人通过电机差速驱动,其控制输入为线速度和角速度。受电机最大转速的限制,使得舞台机器人的实际线速度和角速度具有饱和现象。因此,舞台机器人在实现轨迹跟踪的过程中有必要考虑数据包丢失和执行器饱和现象对跟踪精度的影响。
发明内容
为了克服现有技术无法解决舞台机器人视觉伺服轨迹跟踪预测控制中数据丢失和执行器饱和的不足,本发明针对舞台机器人数据丢包和执行器饱和问题提供了一种视觉伺服轨迹跟踪预测控制方法,通过将该问题建模为一类具有参数不确定的跟踪误差模型,基于该模型给出了相应的性能指标,同时也提供了反馈控制器增益的求解方法。
本发明解决其技术问题所采用的技术方案是:
一种基于视觉传感器的舞台机器人预测控制方法,包括以下步骤:
1)建立舞台机器人运动学模型;
定义[x y θ]T为舞台机器人在世界坐标系下的横、纵坐标以及机器人的方向角,则非完整性舞台机器人运动学模型为
Figure BDA0001926020600000021
其中,v为舞台机器人的线速度,w为舞台机器人的角速度;
2)将摄像头固定在悬架上,采用基于图像的视觉伺服方法建立舞台机器人误差模型;
Figure BDA0001926020600000022
其中,(xm,ym)T为舞台机器人在像素坐标系下的坐标,(x,y)T为舞台机器人在世界坐标系下的坐标,d是依赖摄像头深度信息的常数,θ0为相机轴Yt和世界坐标系轴Xw之间的夹角且θ0为可测的,旋转矩阵
Figure BDA0001926020600000023
Figure BDA0001926020600000024
为摄像机的光学中心在世界坐标系下的投影坐标;
定义如下图像坐标系下跟踪误差
Figure BDA0001926020600000025
结合式(1)和(2)并对式(3)求导得
Figure BDA0001926020600000031
对式(4)在平衡点线性化得误差模型
Figure BDA0001926020600000032
其中,
Figure BDA0001926020600000033
u1(k)=vrdcose3-vd为舞台机器人的线速度误差,u2(k)=wr-w为舞台机器人的角速度误差,离散化后得基于图像的视觉伺服舞台机器人误差模型为
η(k+1)=(I+AcT)η(k)+BcTu(k) (6)
3)考虑系统的不确定性、执行器饱和和数据异常问题,将式(6)转化为如下的不确定系统
η(k+1)=(A+ΔA)η(k)+θ(k)Bsat(u(k)) (7)
其中,
Figure BDA0001926020600000034
B=BcT,ΔA=I+AcT-A,θ(k)表示伯努利随机变量,即θ(k)=0表示移动机器人接收到无效数据,θ(k)=1表示机器人接收到有效数据,则舞台机器人接收到无效数据的概率为
Figure BDA0001926020600000035
舞台机器人接收到有效数据的概率为
Figure BDA0001926020600000036
饱和函数表示sat(u(k))=[sat(u1(k))sat(u2(k))]T;由于舞台机器人在实际运行时的线速度和角速度具有最大值约束,从而可知不确定矩阵ΔA满足范数有界,进而ΔA可分解为ΔA=DFE,D和E为给定矩阵且||F||≤1;
4)定义性能指标函数并根据误差模型,确定预测方程;
针对如下的性能指标
Figure BDA0001926020600000037
采用鲁棒预测控制方法设计如下的状态反馈控制器
u(k)=M(k)η(k) (9)
使得系统(7)闭环稳定,其中Q和R分别为给定的具有适当维数的权重矩阵,M(k)为状态反馈控制器增益;
将式(7)改写成如下非线性形式
η(k+1)=A(β)η(k) (10)
其中,
Figure BDA0001926020600000041
Figure BDA0001926020600000042
由于矩阵A(β)中含有不确定矩阵ΔA和随机参数θ(k),从而预测控制优化问题转化为如下的“最小-最大”化问题
Figure BDA0001926020600000043
Figure BDA0001926020600000044
η(k+i+1|k)=A(β)η(k+i|k) (11c)
u(k+i|k)=M(k+i|k)η(k+i|k) (11d)
|ni(k+i|k)η(k+i|k)|≤1 (11e)
其中,(11b)-(11d)分别为预测性能指标、预测方程和状态反馈控制器,η(k+i|k)表示基于k时刻的η(k)对k+i时刻η(k+i)的预测值,u(k+i|k)表示基于k时刻的η(k)对k+i时刻u(k+i)的预测值;当i=0时有η(k|k)=η(k);
5)结合预测方程,设计稳定化状态反馈控制器;
利用李雅普诺夫稳定性理论和线性矩阵不等式方法得到保证闭环系统渐进稳定的充分条件以及状态反馈控制器增益的求解方法
minγ (12)
Figure BDA0001926020600000051
Figure BDA0001926020600000052
Figure BDA0001926020600000053
其中,
Figure BDA0001926020600000054
Figure BDA0001926020600000055
j,l∈{1,2,3,4},s∈{1,2};通过MATLAB中的LMI工具箱求解
Figure BDA0001926020600000056
得舞台机器人跟踪问题状态反馈控制器的解为
Figure BDA0001926020600000057
本发明的技术构思为:首先,通过使用视觉伺服方法对舞台机器人进行建模,其次,考虑数据丢失以及执行器饱和等约束,将舞台机器人建立成一类具有参数不确定的跟踪误差状态空间模型。然后,结合预测控制思想,给出预测方程以及预测控制性能指标,并将求解控制器转化为一个优化问题。最后,采用鲁棒控制的方法,通过LMI求解控制器参数。
本发明的有益效果主要表现在:通过将输入限制和参数不确定系统转化为线性矩阵不等式,易于求解最优化问题;预测控制方法,将求解控制器问题转化为最小化问题,有利于利用最优化理论进行求解;给出了反馈控制器的具体参数,有效解决了具有输入约束影响下舞台机器人视觉伺服保性能跟踪控制问题。
附图说明
图1为视觉伺服舞台机器人坐标关系图;
图2为基于视觉传感器的舞台机器人的预测控制轨迹跟踪仿真图,其中,(a)表示机器人线速度曲线,(b)表示机器人角速度曲线,(c)表示机器人在像素平面的轨迹。
具体实施方式
下面结合附图对本发明作进一步描述。
参照图1和图2,一种基于视觉传感器的舞台机器人预测控制方法,包括以下步骤:
1)建立舞台机器人运动学模型;
定义[x y θ]T为舞台机器人在世界坐标系下的横、纵坐标以及机器人的方向角,则非完整性舞台机器人运动学模型为
Figure BDA0001926020600000061
其中,v为舞台机器人的线速度,w为舞台机器人的角速度;
2)将摄像头固定在悬架上,采用基于图像的视觉伺服方法建立舞台机器人误差模型,为了验证所提算法的有效性,选取相机参数d1=d2=2m,
Figure BDA0001926020600000062
px=1m,py=1m,θ*=0.2rad,则系统模型为
Figure BDA0001926020600000063
其中,(xm,ym)T为舞台机器人在像素坐标系下的坐标,(x,y)T为舞台机器人在世界坐标系下的坐标,d是依赖摄像头深度信息的常数,θ0为相机轴Yr和世界坐标系轴Xw之间的夹角且θ0为可测的,旋转矩阵
Figure BDA0001926020600000064
Figure BDA0001926020600000065
为摄像机的光学中心在世界坐标系下的投影坐标;
进而,选取一个8字形的参考轨迹,其轨迹,表示为
Figure BDA0001926020600000066
从而确定参考轨迹的实时线速度为
Figure BDA0001926020600000067
定义如下图像坐标系下跟踪误差
Figure BDA0001926020600000071
结合式(1)和(2)并对式(3)求导得
Figure BDA0001926020600000072
对式(4)在平衡点线性化得误差模型
Figure BDA0001926020600000073
其中,
Figure BDA0001926020600000074
u1(k)=vrdcose3-vd为舞台机器人的线速度误差,u2(k)=wr-w为舞台机器人的角速度误差;离散化后得基于图像的视觉伺服舞台机器人误差模型为
η(k+1)=(I+AcT)η(k)+BcTu(k) (6)
3)考虑系统的不确定性、执行器饱和和数据异常问题,将式(6)转化为如下的不确定系统
η(k+1)=(A+ΔA)η(k)+θ(k)Bsat(u(k)) (7)
其中,
Figure BDA0001926020600000075
B=BcT,ΔA=I+AcT-A,θ(k)表示伯努利随机变量,即θ(k)=0表示移动机器人接收到无效数据,θ(k)=1表示机器人接收到有效数据,则舞台机器人接收到无效数据的概率为
Figure BDA0001926020600000076
舞台机器人接收到有效数据的概率为
Figure BDA0001926020600000077
饱和函数可表示sat(u(k))=[sat(u1(k))sat(u2(k))]T;由于舞台机器人在实际运行时的线速度和角速度具有最大值约束,从而可知不确定矩阵ΔA满足范数有界,进而ΔA可分解为ΔA=DFE,D和E为给定矩阵
Figure BDA0001926020600000081
且||F||≤1;
4)定义性能指标函数并根据误差模型,确定预测方程;
针对如下的性能指标
Figure BDA0001926020600000082
采用鲁棒预测控制方法设计如下的状态反馈控制器
u(k)=M(k)η(k) (9)
使得系统(7)闭环稳定,其中,Q=10I和R=2I,M(k)为状态反馈控制器增益;
将式(7)改写成如下非线性形式
η(k+1)=A(β)η(k) (10)
其中,
Figure BDA0001926020600000083
Figure BDA0001926020600000084
由于矩阵A(β)中含有不确定矩阵ΔA和随机参数θ(k),从而预测控制优化问题转化为如下的“最小-最大”化问题
Figure BDA0001926020600000085
Figure BDA0001926020600000086
η(k+i+1|k)=A(β)η(k+i|k) (11c)
u(k+i|k)=M(k+i|k)η(k+i|k) (11d)
|ni(k+i|k)η(k+i|k)|≤1 (11e)
其中,(11b)-(11d)分别为预测性能指标、预测方程和状态反馈控制器,η(k+i|k)表示基于k时刻的η(k)对k+i时刻η(k+i)的预测值,u(k+i|k)表示基于k时刻的η(k)对k+i时刻u(k+i)的预测值。当i=0时,η(k|k)=η(k);
5)结合预测方程,设计稳定化状态反馈控制器;
利用李雅普诺夫稳定性理论和线性矩阵不等式方法得到保证闭环系统渐进稳定的充分条件以及状态反馈控制器增益的求解方法,将性能指标最小化问题(11)改成为
minγ (12)
Figure BDA0001926020600000091
Figure BDA0001926020600000092
Figure BDA0001926020600000093
其中,
Figure BDA0001926020600000094
Figure BDA0001926020600000095
j,l∈{1,2,3,4},s∈{1,2};通过MATLAB中的LMI工具箱求解
Figure BDA0001926020600000096
得舞台机器人跟踪问题状态反馈控制器的解为
Figure BDA0001926020600000097

Claims (1)

1.一种基于视觉传感器的舞台机器人预测控制方法,其特征在于,所述方法包括以下步骤:
1)建立舞台机器人运动学模型;
定义[x y θ]T为舞台机器人在世界坐标系下的横、纵坐标以及机器人的方向角,则非完整性舞台机器人运动学模型为
Figure FDA0002979949930000011
其中,v为舞台机器人的线速度,w为舞台机器人的角速度;
2)将摄像头固定在悬架上,采用基于图像的视觉伺服方法建立舞台机器人误差模型;
Figure FDA0002979949930000012
其中,(xm,ym)T为舞台机器人在像素坐标系下的坐标,(x,y)T为舞台机器人在世界坐标系下的坐标,d是依赖摄像头深度信息的常数,θ0为相机轴Yt和世界坐标系轴Xw之间的夹角且θ0为可测的,旋转矩阵
Figure FDA0002979949930000013
Figure FDA0002979949930000014
为摄像机的光学中心在世界坐标系下的投影坐标;
定义如下图像坐标系下跟踪误差
Figure FDA0002979949930000015
结合式(1)和(2)并对式(3)求导得
Figure FDA0002979949930000016
对式(4)在平衡点线性化得误差模型
Figure FDA0002979949930000017
其中,
Figure FDA0002979949930000018
u1(k)=vrdcose3-vd为舞台机器人的线速度误差,u2(k)=wr-w为舞台机器人的角速度误差,离散化后得基于图像的视觉伺服舞台机器人误差模型为
η(k+1)=(I+AcT)η(k)+BcTu(k) (6)
3)考虑系统的不确定性、执行器饱和和数据异常问题,将式(6)转化为如下的不确定系统
η(k+1)=(A+ΔA)η(k)+θ(k)Bsat(u(k)) (7)
其中,
Figure FDA0002979949930000021
B=BcT,ΔA=I+AcT-A,θ(k)表示伯努利随机变量,即θ(k)=0表示移动机器人接收到无效数据,θ(k)=1表示机器人接收到有效数据,则舞台机器人接收到无效数据的概率为
Figure FDA0002979949930000022
舞台机器人接收到有效数据的概率为
Figure FDA0002979949930000023
饱和函数可表示sat(u(k))=[sat(u1(k)) sat(u2(k))]T;由于舞台机器人在实际运行时的线速度和角速度具有最大值约束,从而可知不确定矩阵ΔA满足范数有界,进而ΔA可分解为ΔA=DFE,D和E为给定矩阵且||F||≤1;
4)定义性能指标函数并根据误差模型,确定预测方程;
针对如下的性能指标
Figure FDA0002979949930000024
采用鲁棒预测控制方法设计如下的状态反馈控制器
u(k)=M(k)η(k) (9)
使得系统(7)闭环稳定,其中Q和R分别为给定的具有适当维数的权重矩阵,M(k)为状态反馈控制器增益;
将式(7)改写成如下非线性形式
η(k+1)=A(β)η(k) (10)
其中,
Figure FDA0002979949930000025
Figure FDA0002979949930000026
由于矩阵A(β)中含有不确定矩阵ΔA和随机参数θ(k),从而预测控制优化问题转化为如下的“最小-最大”化问题
Figure FDA0002979949930000027
Figure FDA0002979949930000028
η(k+i+1|k)=A(β)η(k+i|k) (11c)
u(k+i|k)=M(k+i|k)η(k+i|k) (11d)
|ni(k+i|k)η(k+i|k)|≤1 (11e)
其中,(11b)-(11d)分别为预测性能指标、预测方程和状态反馈控制器,η(k+i|k)表示基于k时刻的η(k)对k+i时刻η(k+i)的预测值,u(k+i|k)表示基于k时刻的η(k)对k+i时刻u(k+i)的预测值;当i=0时有η(k|k)=η(k);
5)结合预测方程,设计稳定化状态反馈控制器;
利用李雅普诺夫稳定性理论和线性矩阵矩阵不等式方法得到保证闭环系统渐进稳定的充分条件以及状态反馈控制器增益的求解方法
minγ (12)
Figure FDA0002979949930000031
Figure FDA0002979949930000032
Figure FDA0002979949930000033
其中,
Figure FDA0002979949930000034
Figure FDA0002979949930000035
j,l∈{1,2,3,4},s∈{1,2};通过MATLAB中的LMI工具箱求解
Figure FDA0002979949930000036
得舞台机器人跟踪问题状态反馈控制器的解为
Figure FDA0002979949930000037
CN201811617095.6A 2018-12-28 2018-12-28 一种基于视觉传感器的舞台机器人预测控制方法 Active CN109760047B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811617095.6A CN109760047B (zh) 2018-12-28 2018-12-28 一种基于视觉传感器的舞台机器人预测控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811617095.6A CN109760047B (zh) 2018-12-28 2018-12-28 一种基于视觉传感器的舞台机器人预测控制方法

Publications (2)

Publication Number Publication Date
CN109760047A CN109760047A (zh) 2019-05-17
CN109760047B true CN109760047B (zh) 2021-06-18

Family

ID=66451083

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811617095.6A Active CN109760047B (zh) 2018-12-28 2018-12-28 一种基于视觉传感器的舞台机器人预测控制方法

Country Status (1)

Country Link
CN (1) CN109760047B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110253570B (zh) * 2019-05-27 2020-10-27 浙江工业大学 基于视觉的工业机械臂人机安全系统
CN110308670A (zh) * 2019-08-21 2019-10-08 广州卓远虚拟现实科技有限公司 动感平台控制系统及动感平台
CN111736593B (zh) * 2020-04-09 2022-10-28 浙江工业大学 一种防不确定DoS攻击的舞台移动机器人编队控制方法
CN113848908B (zh) * 2021-09-27 2024-04-05 浙江工业大学 一种全方位移动机器人视觉伺服系统的建模与控制方法
CN114518753B (zh) * 2022-01-25 2024-06-07 华南理工大学 一种基于预设性能控制的无人艇视觉伺服控制方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108068107A (zh) * 2016-11-09 2018-05-25 哈尔滨工大天才智能科技有限公司 一种高压输电线路除冰机器人视觉控制方法
JP2018114593A (ja) * 2017-01-19 2018-07-26 セイコーエプソン株式会社 ロボット
US10651067B2 (en) * 2017-01-26 2020-05-12 Brooks Automation, Inc. Method and apparatus for substrate transport apparatus position compensation
CN108109174B (zh) * 2017-12-13 2022-02-18 上海电气集团股份有限公司 一种用于散乱零件随机分拣的机器人单目引导方法和系统
CN108839026B (zh) * 2018-07-19 2021-04-06 浙江工业大学 一种移动机器人视觉伺服跟踪预测控制方法

Also Published As

Publication number Publication date
CN109760047A (zh) 2019-05-17

Similar Documents

Publication Publication Date Title
CN109760047B (zh) 一种基于视觉传感器的舞台机器人预测控制方法
CN106773713B (zh) 针对欠驱动海洋航行器的高精度非线性路径跟踪控制方法
Li et al. Adaptive trajectory tracking of nonholonomic mobile robots using vision-based position and velocity estimation
CN108839026B (zh) 一种移动机器人视觉伺服跟踪预测控制方法
CN110427043B (zh) 基于作业飞行机器人重心偏移的位姿控制器设计方法
CN108614560B (zh) 一种移动机器人视觉伺服保性能跟踪控制方法
CN105182984B (zh) 飞行器俯仰姿态的线性自抗扰控制器设计与参数整定方法
CN111522351B (zh) 水下机器人三维编队及避障方法
CN114721275B (zh) 一种基于预设性能的视觉伺服机器人自适应跟踪控制方法
Shi et al. Adaptive image-based visual servoing for hovering control of quad-rotor
CN110609473B (zh) 一种不确定模型机器人的控制方法
Zhao et al. Nonlinear model predictive control-based guidance algorithm for quadrotor trajectory tracking with obstacle avoidance
CN112650217B (zh) 一种基于评估函数的机器人轨迹跟踪策略动态优化方法
Lai et al. Image dynamics-based visual servo control for unmanned aerial manipulatorl with a virtual camera
CN114434441A (zh) 基于自适应动态规划的移动机器人视觉伺服跟踪控制方法
Liang et al. Adaptive image-based visual servoing of wheeled mobile robots with fixed camera configuration
Wang et al. Tracking moving target for 6 degree-of-freedom robot manipulator with adaptive visual servoing based on deep reinforcement learning PID controller
Chen et al. Anti-disturbance grabbing of underwater robot based on retinex image enhancement
CN110244703B (zh) 一种具有外部干扰和数据异常的移动机器人预测控制方法
Guo et al. Model-based deep learning for low-cost IMU dead reckoning of wheeled mobile robot
Lyu et al. Vision-based adaptive neural positioning control of quadrotor aerial robot
CN114967441A (zh) 一种网络化非完整约束多机器人分群一致追踪控制方法、微控单元及控制系统
Chen et al. Vision-based fuzzy controller for quadrotor tracking a ground target
Ma et al. Research on Vision-Based Servoing and Trajectory Prediction Strategy for Capturing Illegal Drones
Yu et al. A mobile robot tracking controller design and implementation on ROS-MATLAB based experiment system

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20190517

Assignee: ZHEJIANG GUANGLI ENGINEERING MACHINERY Co.,Ltd.

Assignor: JIANG University OF TECHNOLOGY

Contract record no.: X2023980037340

Denomination of invention: A Predictive Control Method for Stage Robots Based on Visual Sensors

Granted publication date: 20210618

License type: Common License

Record date: 20230703