CN109556607A - 一种快速处理移动机器人定位“绑架”问题的方法 - Google Patents

一种快速处理移动机器人定位“绑架”问题的方法 Download PDF

Info

Publication number
CN109556607A
CN109556607A CN201811241001.XA CN201811241001A CN109556607A CN 109556607 A CN109556607 A CN 109556607A CN 201811241001 A CN201811241001 A CN 201811241001A CN 109556607 A CN109556607 A CN 109556607A
Authority
CN
China
Prior art keywords
mobile robot
kidnapping
particle
robot
pose
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811241001.XA
Other languages
English (en)
Inventor
陈灵
杨杰
杨傲雷
徐昱琳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
University of Shanghai for Science and Technology
Original Assignee
University of Shanghai for Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by University of Shanghai for Science and Technology filed Critical University of Shanghai for Science and Technology
Priority to CN201811241001.XA priority Critical patent/CN109556607A/zh
Publication of CN109556607A publication Critical patent/CN109556607A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/20Instruments for performing navigational calculations

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

本发明公开了一种快速处理移动机器人定位“绑架”问题的方法,属于移动机器人技术领域。本方法步骤是:通过事先采集的训练数据对基于深度学习的卷积神经网络模型进行训练,使其输入一张图片即可得到拍摄图片时刻相机的粗略位姿,当机器人判断自身发生“绑架”问题时,将此时机器人上的相机拍摄的图片发送给卷积神经网络模型以获得一个粗略位姿,再以特定的格式通过粒子滤波定位算法,减少算法中迭代收敛的次数,达到快速解决“绑架”问题的目标。该方法可在人为地将机器人移动到任意位置后,对移动机器人进行快速而精确地重定位。

Description

一种快速处理移动机器人定位“绑架”问题的方法
技术领域
本发明涉及机器人领域,具体涉及一种快速处理移动机器人定位“绑架”问题的方法。
背景技术
移动机器人的定位问题是机器人领域的一个重要研究热点。移动机器人定位过程中会遇到“绑架”问题,即移动机器人被动地移动到地图的任意位置,可以简单地理解为人为的将机器人移动到任意位置,而机器人自认为还停在原点导致定位失败的问题。由于GPS信号在某些地区或室内无信号,因此在发生“绑架”问题时,如何重定位是一个亟待解决问题,而目前大多数定位算法都不能快速地解决机器人“绑架”问题。
随着深度学习技术与计算机视觉技术的发展,提出了很多移动机器人的定位的方法。如文献“Ale x Kendall,Matthew Grimes and Roberto Cipolla.Convolutionalnetworks for real-time 6-DOF camera relocalization.eprint arXiv:1505.07427,2015.”提出了一种利用深度卷积神经网络即PoseNet(训练好的神经网络系统),将拍摄到的图片输入系统即可得出拍摄图片的相机位姿。如文献“Thrun S.Probabilisticrobotics[M].MIT Press,2005.”中提到的粒子滤波定位算法,则是一种使用粒子滤波器对机器人在已知的地图环境中进行位置跟踪。粒子滤波定位算法以有限的粒子数表示移动机器人的概率分布。如果有足够多的粒子数,可以得到与实际的机器人几乎完全相近的概率分布函数。文献“基于粒子滤波器的移动机器人定位和地图创建研究进展”(机器人,2007,29(3):281-289,297.余洪山,王耀南)介绍了一些使用粒子滤波器进行机器人地图创建与定位的方法,但在复杂环境下由于场景结构的相似性,单一的粒子滤波定位在机器人位置无任何先验知识的条件下容易造成定位失败。
上述方法都存在一定的缺点:1)基于深度学习的卷积神经网络模型的精度在2m和5°左右,无法达到精确定位。2)粒子滤波定位算法虽然可以做到解决“绑架”问题,但是需要经过多次的重采样,耗时较长,导致实时性降低。
发明内容
本发明针对现有技术的不足,提出了一种快速处理移动机器人定位“绑架”问题的方法。当机器人发生“绑架”问题时,通过卷积神经网络模型估计出机器人的粗略位姿,在粗定位确定的机器人所处的空间内,再利用粒子滤波算法进行机器人的精确定位。
为达到上述目的,本发明采用如下技术方案:
一种快速处理移动机器人定位“绑架”问题的方法,包括以下步骤:
1)在地图已知的场景中采集训练数据来训练深度学习的卷积神经网络模型;其中,训练数据为固定在移动机器人上的相机所拍摄的图片,即为模型的输入,以及由粒子滤波定位算法给出的此图片所对应的位姿信息,即为模型的输出;
2)判断移动机器人是否发生“绑架”问题;
3)若判断没有发生“绑架”问题,则正常进行定位;若判断发生“绑架”问题,则启用固定在移动机器人上的相机进行拍照,将得到的图片发送给深度学习的卷积神经网络模型,输出移动机器人当前的粗略位姿;
4)将此粗略位姿转化为初始位姿的格式,通过粒子滤波定位算法进行重定位得到移动机器人精确位姿。
所述步骤2)判断移动机器人是否发生“绑架”问题,具体步骤为:
通过移动机器人上的激光雷达扫描周围环境,从而获得移动机器人周围的环境信息,在定位过程中实时记录两组数据,分别为:由里程计信息与已知地图进行预测而得到的粒子权重,记为其中k为第k个粒子,i表示i时刻;利用预测的粒子位姿和激光数据与已知地图进行匹配,将匹配程度比较而得到的粒子新的权重,记为此时按照如下公式计算出一个衡量粒子权重的变化量:通过对比该值V与预先设定的阈值T来判断移动机器人是否发生“绑架”问题,如果V>T,则判断发生了“绑架”,否则判断没有发生“绑架”。
所述步骤4)中的粒子滤波定位算法为基于蒙特卡洛算法的粒子滤波定位算法,步骤3)得到的粗略位姿通过粒子滤波定位算法以减少迭代收敛的次数,达到快速处理“绑架”问题的目的,该算法的具体步骤如下:
(1)预测:通过前一时刻粒子的分布表示移动机器人的位姿分布,移动机器人状态的离散数据及移动机器人在相应状态时的概率作为先验概率密度分布的采样集;
(2)更新:采用移动机器人所搭载激光测距传感器的信息与已知地图匹配的程度,对所述采样集进行修正,用于更新采样集中样本的权重值,得到估计位置的后验数据,进而增加权重较大的粒子数目,减少权重较小的粒子数目,产生在估计位置的粒子重新分布,而产生新的采样集;经过预定次数的更新之后,输出权重最大的粒子所适配的机器人位置估计作为机器人位置的精确值;其中,所述地图为通过利用所述激光雷达传感器信息的SLAM即同时定位与地图构建算法得到的栅格地图。
与现有技术相比,本发明的有益效果包括:
本发明一种快速处理移动机器人定位“绑架”问题的方法,可以减少重采样的次数,快速地处理“绑架”问题。对卷积神经网络模型的训练是事先完成的,不会影响定位的实时性。
附图说明
图1为本发明快速处理移动机器人定位“绑架”问题的方法的流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
本实施例中的机器人本体,可为如下描述的系统:使用Turtlebot2.0并搭载zed双目相机和RPlidar激光雷达,它是基于ROS平台的轮式机器人,ROS(Robot OperatingSystem)是一个分布式模块化的机器人软件平台,它拥有大量软件库以及相应工具帮助人们开发机器人应用。该机器人定位系统主要包含odometery、map_server和RPlidar。其中,odometery为里程计节点,它将ROS(Robot Operating System)机器人的里程计信息发送给AMCL定位节点。RPlidar为激光测距传感器节点,负责发布激光数据。map_server为机器人环境地图服务,主要为AMCL定位节点提供相应地图。但本发明不仅限于采用上述硬件平台和软件架构。
如图1所示,一种快速处理移动机器人定位“绑架”问题的方法,包括以下步骤:
1)在地图已知的场景中采集训练数据来训练深度学习的卷积神经网络模型;其中,训练数据为固定在移动机器人上的相机所拍摄的图片,即为模型的输入,以及由粒子滤波定位算法给出的此图片所对应的位姿信息,即为模型的输出;
所述卷积神经网络模型主要是通过采集已知地图场景中的训练数据,即图片和由粒子滤波定位算法给出的此图片所对应的位姿信息,对神经网络进行训练。再将训练好的卷积神经网络系统写入ROS(Robot Operation System)中作为Service形式,当检测到发生“绑架”问题时进行调用。
2)判断移动机器人是否发生“绑架”问题;
3)若判断没有发生“绑架”问题,则正常进行定位;若判断发生“绑架”问题,则启用固定在移动机器人上的相机进行拍照,并调用已写为ROS(Robot Operating System)中Service形式的卷积神经网络模型,将得到的图片发送给深度学习的卷积神经网络模型,输出移动机器人当前的粗略位姿;
4)将此粗略位姿转化为初始位姿的格式,通过粒子滤波定位算法进行重定位得到移动机器人精确位姿。
所述步骤2)判断移动机器人是否发生“绑架”问题,具体步骤为:
通过移动机器人上的激光雷达扫描周围环境,从而获得移动机器人周围的环境信息,在定位过程中实时记录两组数据,分别为:由里程计信息与已知地图进行预测而得到的粒子权重,记为其中k为第k个粒子,i表示i时刻;利用预测的粒子位姿和激光数据与已知地图进行匹配,将匹配程度比较而得到的粒子新的权重,记为此时按照如下公式计算出一个衡量粒子权重的变化量:通过对比该值V与预先设定的阈值T来判断移动机器人是否发生“绑架”问题,如果V>T,则判断发生了“绑架”,否则判断没有发生“绑架”。
所述步骤4)中的粒子滤波定位算法为基于蒙特卡洛算法的粒子滤波定位算法,步骤3)得到的粗略位姿通过粒子滤波定位算法以减少迭代收敛的次数,达到快速处理“绑架”问题的目的。粒子滤波定位算法是自主移动机器人在二维环境下的一种基于概率的定位算法,其以有限的粒子数表示移动机器人的概率分布,通过激光扫描得到的环境信息来更新每个粒子的权重,从而得到与机器人实际位姿相近的概率分布函数。粒子滤波定位算法是基于环境地图的定位算法,需要进行采样、权值分配、重采样。粒子的数量是粒子滤波器发挥较好作用的关键环节,当粒子数选取多的时候,能够降低粒子漂移所带来的不良影响,也可以较好的表示机器人的概率分布状况,但会增加计算负荷,进而影响滤波的效果。
该算法的具体步骤如下:
(1)预测:通过前一时刻粒子的分布表示移动机器人的位姿分布,移动机器人状态的离散数据及移动机器人在相应状态时的概率作为先验概率密度分布的采样集;
(2)更新:采用移动机器人所搭载激光测距传感器的信息与已知地图匹配的程度,对所述采样集进行修正,用于更新采样集中样本的权重值,得到估计位置的后验数据,进而增加权重较大的粒子数目,减少权重较小的粒子数目,产生在估计位置的粒子重新分布,而产生新的采样集;经过预定次数的更新之后,输出权重最大的粒子所适配的机器人位置估计作为机器人位置的精确值;其中,所述地图为通过利用所述激光雷达传感器信息的SLAM即同时定位与地图构建算法得到的栅格地图。

Claims (3)

1.一种快速处理移动机器人定位“绑架”问题的方法,其特征在于,包括以下步骤:
1)在地图已知的场景中采集训练数据来训练深度学习的卷积神经网络模型;其中,训练数据为固定在移动机器人上的相机所拍摄的图片,即为模型的输入,以及由粒子滤波定位算法给出的此图片所对应的位姿信息,即为模型的输出;
2)判断移动机器人是否发生“绑架”问题;
3)若判断没有发生“绑架”问题,则正常进行定位;若判断发生“绑架”问题,则启用固定在移动机器人上的相机进行拍照,将得到的图片发送给深度学习的卷积神经网络模型,输出移动机器人当前的粗略位姿;
4)将此粗略位姿转化为初始位姿的格式,通过粒子滤波定位算法进行重定位得到移动机器人精确位姿。
2.根据权利要求1所述的快速处理移动机器人定位“绑架”问题的方法,其特征在于,所述步骤2)判断移动机器人是否发生“绑架”问题,具体步骤为:
通过移动机器人上的激光雷达扫描周围环境,从而获得移动机器人周围的环境信息,在定位过程中实时记录两组数据,分别为:由里程计信息与已知地图进行预测而得到的粒子权重,记为其中k为第k个粒子,i表示i时刻;利用预测的粒子位姿和激光数据与已知地图进行匹配,将匹配程度比较而得到的粒子新的权重,记为此时按照如下公式计算出一个衡量粒子权重的变化量:通过对比该值V与预先设定的阈值T来判断移动机器人是否发生“绑架”问题,如果V>T,则判断发生了“绑架”,否则判断没有发生“绑架”。
3.根据权利要求1所述的快速处理移动机器人定位“绑架”问题的方法,其特征在于,所述步骤4)中的粒子滤波定位算法为基于蒙特卡洛算法的粒子滤波定位算法,步骤3)得到的粗略位姿通过粒子滤波定位算法以减少迭代收敛的次数,达到快速处理“绑架”问题的目的,该算法的具体步骤如下:
(1)预测:通过前一时刻粒子的分布表示移动机器人的位姿分布,移动机器人状态的离散数据及移动机器人在相应状态时的概率作为先验概率密度分布的采样集;
(2)更新:采用移动机器人所搭载激光测距传感器的信息与已知地图匹配的程度,对所述采样集进行修正,用于更新采样集中样本的权重值,得到估计位置的后验数据,进而增加权重较大的粒子数目,减少权重较小的粒子数目,产生在估计位置的粒子重新分布,而产生新的采样集;经过预定次数的更新之后,输出权重最大的粒子所适配的机器人位置估计作为机器人位置的精确值;其中,所述地图为通过利用所述激光雷达传感器信息的SLAM即同时定位与地图构建算法得到的栅格地图。
CN201811241001.XA 2018-10-24 2018-10-24 一种快速处理移动机器人定位“绑架”问题的方法 Pending CN109556607A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811241001.XA CN109556607A (zh) 2018-10-24 2018-10-24 一种快速处理移动机器人定位“绑架”问题的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811241001.XA CN109556607A (zh) 2018-10-24 2018-10-24 一种快速处理移动机器人定位“绑架”问题的方法

Publications (1)

Publication Number Publication Date
CN109556607A true CN109556607A (zh) 2019-04-02

Family

ID=65865170

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811241001.XA Pending CN109556607A (zh) 2018-10-24 2018-10-24 一种快速处理移动机器人定位“绑架”问题的方法

Country Status (1)

Country Link
CN (1) CN109556607A (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110160532A (zh) * 2019-06-28 2019-08-23 联想(北京)有限公司 定位方法及装置、以及终端设备
CN110174894A (zh) * 2019-05-27 2019-08-27 小狗电器互联网科技(北京)股份有限公司 机器人及其重定位方法
CN110274597A (zh) * 2019-06-13 2019-09-24 大连理工大学 一种解决室内机器人任意点启动时“粒子绑架”问题的方法
CN110779528A (zh) * 2019-11-07 2020-02-11 四川长虹电器股份有限公司 基于粒子滤波器的定位恢复方法及机器人设备
CN111044036A (zh) * 2019-12-12 2020-04-21 浙江大学 基于粒子滤波的远程定位方法
CN111551184A (zh) * 2020-03-27 2020-08-18 上海大学 一种移动机器人slam的地图优化方法及系统
CN111578946A (zh) * 2020-05-27 2020-08-25 杭州蓝芯科技有限公司 一种基于深度学习的激光导航agv重定位方法和装置
CN111895990A (zh) * 2020-07-14 2020-11-06 武汉科技大学 一种基于多指标绑架检测及移动机器人重定位的方法
CN112904366A (zh) * 2021-03-19 2021-06-04 北京小狗吸尘器集团股份有限公司 应用于扫地机的重定位方法、装置、电子设备和介质
WO2022121640A1 (zh) * 2020-12-07 2022-06-16 深圳市优必选科技股份有限公司 机器人重定位方法、装置、机器人和可读存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010271215A (ja) * 2009-05-22 2010-12-02 Nippon Telegr & Teleph Corp <Ntt> 状態推定装置、方法、プログラム及びその記録媒体
CN105652871A (zh) * 2016-02-19 2016-06-08 深圳杉川科技有限公司 移动机器人的重定位方法
US20170003131A1 (en) * 2015-07-03 2017-01-05 Korea Advanced Institute Of Science And Technology Method and apparatus for relocation of mobile robot in indoor environment
CN108053447A (zh) * 2017-12-18 2018-05-18 纳恩博(北京)科技有限公司 基于图像的重定位方法、服务器及存储介质

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010271215A (ja) * 2009-05-22 2010-12-02 Nippon Telegr & Teleph Corp <Ntt> 状態推定装置、方法、プログラム及びその記録媒体
US20170003131A1 (en) * 2015-07-03 2017-01-05 Korea Advanced Institute Of Science And Technology Method and apparatus for relocation of mobile robot in indoor environment
CN105652871A (zh) * 2016-02-19 2016-06-08 深圳杉川科技有限公司 移动机器人的重定位方法
CN108053447A (zh) * 2017-12-18 2018-05-18 纳恩博(北京)科技有限公司 基于图像的重定位方法、服务器及存储介质

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
CHENXING SHAN 等: "Dealing with the structured scene in visual odometry(VO): Incomplete SURF", 《 2017 2ND INTERNATIONAL CONFERENCE ON ROBOTICS AND AUTOMATION ENGINEERING (ICRAE)》 *
顾爽等: "基于全景视觉匹配的移动机器人蒙特卡罗定位算法", 《控制理论与应用》 *

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110174894A (zh) * 2019-05-27 2019-08-27 小狗电器互联网科技(北京)股份有限公司 机器人及其重定位方法
CN110274597A (zh) * 2019-06-13 2019-09-24 大连理工大学 一种解决室内机器人任意点启动时“粒子绑架”问题的方法
CN110274597B (zh) * 2019-06-13 2022-09-16 大连理工大学 一种解决室内机器人任意点启动时“粒子绑架”问题的方法
CN110160532A (zh) * 2019-06-28 2019-08-23 联想(北京)有限公司 定位方法及装置、以及终端设备
CN110779528A (zh) * 2019-11-07 2020-02-11 四川长虹电器股份有限公司 基于粒子滤波器的定位恢复方法及机器人设备
CN111044036A (zh) * 2019-12-12 2020-04-21 浙江大学 基于粒子滤波的远程定位方法
CN111551184B (zh) * 2020-03-27 2021-11-26 上海大学 一种移动机器人slam的地图优化方法及系统
CN111551184A (zh) * 2020-03-27 2020-08-18 上海大学 一种移动机器人slam的地图优化方法及系统
CN111578946A (zh) * 2020-05-27 2020-08-25 杭州蓝芯科技有限公司 一种基于深度学习的激光导航agv重定位方法和装置
CN111895990A (zh) * 2020-07-14 2020-11-06 武汉科技大学 一种基于多指标绑架检测及移动机器人重定位的方法
CN111895990B (zh) * 2020-07-14 2022-04-15 武汉科技大学 一种基于多指标绑架检测及移动机器人重定位的方法
WO2022121640A1 (zh) * 2020-12-07 2022-06-16 深圳市优必选科技股份有限公司 机器人重定位方法、装置、机器人和可读存储介质
CN112904366A (zh) * 2021-03-19 2021-06-04 北京小狗吸尘器集团股份有限公司 应用于扫地机的重定位方法、装置、电子设备和介质
CN112904366B (zh) * 2021-03-19 2023-06-16 北京小狗吸尘器集团股份有限公司 应用于扫地机的重定位方法、装置、电子设备和介质

Similar Documents

Publication Publication Date Title
CN109556607A (zh) 一种快速处理移动机器人定位“绑架”问题的方法
US11062207B2 (en) Control systems using deep reinforcement learning
Luber et al. Place-dependent people tracking
Somaldo et al. Developing smart COVID-19 social distancing surveillance drone using YOLO implemented in robot operating system simulation environment
CN105760824A (zh) 一种运动人体跟踪方法和系统
US20110115909A1 (en) Method for tracking an object through an environment across multiple cameras
Chung et al. An improved localization of mobile robotic system based on AMCL algorithm
Rezaee et al. An autonomous UAV-assisted distance-aware crowd sensing platform using deep ShuffleNet transfer learning
CN110082716B (zh) 一种医院复杂环境室内定位系统及定位方法
CN107084714A (zh) 一种基于RoboCup3D的多机器人协作目标定位方法
Bordallo et al. Counterfactual reasoning about intent for interactive navigation in dynamic environments
KR102330055B1 (ko) 드론을 이용한 구조물의 변화 검출 방법 및 시스템
WO2022093860A1 (en) Centralized tracking system with distributed fixed sensors
Baig et al. A robust motion detection technique for dynamic environment monitoring: A framework for grid-based monitoring of the dynamic environment
CN114708435A (zh) 基于语义分割的障碍物尺寸预测与不确定性分析方法
CN112669345A (zh) 一种面向云端部署的多目标轨迹跟踪方法及系统
CN109544632B (zh) 一种基于层次主题模型的语义slam对象关联方法
CN106127119B (zh) 基于彩色图像和深度图像多特征的联合数据关联方法
Xia et al. [Retracted] Gesture Tracking and Recognition Algorithm for Dynamic Human Motion Using Multimodal Deep Learning
JP2016518664A (ja) 対象物の視覚追跡
CN106128105B (zh) 一种交通路口行人行为监测系统
Hou et al. A low-cost in-situ system for continuous multi-person fever screening
CN110781730A (zh) 智能驾驶感知方法及感知装置
CN115690157A (zh) 一种基于Transformer的毫米波雷达行人轨迹预测方法
Wang et al. Research on SLAM road sign observation based on particle filter

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190402