CN103699126B - 智能导游机器人的导游方法 - Google Patents

智能导游机器人的导游方法 Download PDF

Info

Publication number
CN103699126B
CN103699126B CN201310715227.XA CN201310715227A CN103699126B CN 103699126 B CN103699126 B CN 103699126B CN 201310715227 A CN201310715227 A CN 201310715227A CN 103699126 B CN103699126 B CN 103699126B
Authority
CN
China
Prior art keywords
robot
module
wifi
guide
unit
Prior art date
Application number
CN201310715227.XA
Other languages
English (en)
Other versions
CN103699126A (zh
Inventor
徐元坤
杨帅
刘志豪
Original Assignee
中国矿业大学
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 中国矿业大学 filed Critical 中国矿业大学
Priority to CN201310715227.XA priority Critical patent/CN103699126B/zh
Publication of CN103699126A publication Critical patent/CN103699126A/zh
Application granted granted Critical
Publication of CN103699126B publication Critical patent/CN103699126B/zh

Links

Abstract

本发明涉及一种智能导游机器人的导游方法,包括导航定位装置、语音交互单元、驱动装置、信息处理系统和蓄电池电源组,所述导航定位装置、语音交互单元、驱动装置和蓄电池电源组分别与信息处理系统连接,其导游技术的步骤如下:步骤一,基于WiFi构建室内环境地图;步骤二,基于视觉图片构建导游讲解数据库;步骤三,预定机器人行走路线;步骤四,WiFi信号获取及机器人定位;步骤五,进行导游讲解并与游客语音交流;步骤六,机器人返回起点。该导游机器人,通过机器视觉实现导航,环境适应能力强;具有导游讲解和问题解答功能;利用WiFi结合惯性导航系统进行定位,定位精度高;能够自主控制完成既定任务,工作状态稳定,效率高。

Description

智能导游机器人的导游方法
技术领域
[0001]本发明涉及一种利用WiFi和机器视觉实现定位导航并自主控制完成既定任务的导游装置,属于移动机器人技术领域,具体涉及一种复杂室内环境下的具有自主控制和语音交互功能的智能导游机器人的导游方法。
背景技术
[0002]随着社会生产力的发展和生活水平的提高,人们将越来越多的时间用于休闲和娱乐,从而极大的促进了旅游业的发展。近年来,游览博物馆、名人故居等文化圣地成为一种时尚,游客数量剧增。
[0003]为了获得更佳的游览体验,通常需要讲解员向游客介绍各种物品、遗迹并对相关的历史故事进行讲解。由于游客数量众多,需分批进入,因此讲解员必须完成多次重复的讲解工作,浪费了时间和人力,增加了工作成本。同时由于人脑的记忆力有限,讲解员有时不能清楚完整的解答游客提出的问题。
发明内容
[0004]为了解决上述问题,本发明提供了一种基于视觉和WiFi的智能导游机器人的导游方法,具有导航定位和语音交互功能,能够实现自主控制,在实时行走过程中通过机器视觉识别物品并对其进行讲解,同时通过语音交互单元接收并回答游客提出的相关问题。
[0005]本发明是通过以下技术方案实现的:一种智能导游机器人,包括导航定位装置、语音交互单元、驱动装置、信息处理系统和蓄电池电源组,所述导航定位装置、语音交互单元、驱动装置和蓄电池电源组分别与信息处理系统连接;所述导航定位装置由惯性导航装置、视觉导航单元和WiFi定位单元组成;所述语音交互单元由话筒和扩音器组成,实现游览讲解以及与人对话交流;所述驱动装置由行走小车和电机组成;所述信息处理系统,包括惯性导航模块,图像识别处理模块,实时定位与建图模块,WiFi定位模块,语音交互模块,机器人驱动模块和信息数据库;所述蓄电池电源组由锂离子电池组构成,智能导游机器人工作时的移动电源。
[0006]所述惯性导航装置包括加速度计和陀螺仪,加速度计用于记录智能导航机器人的速度变化,陀螺仪用于记录机器人的运动方向变化;所述视觉导航单元由深度摄像头构成,负责实时采集周围环境三维图像;所述WiFi定位单元由WiFi信号接收器组成,负责接收周围环境中不同路由器的信号强度。
[0007]所述惯性导航模块与惯性导航装置连接;所述图像识别处理模块和实时定位与建图模块均与视觉导航单元连接;所述WiFi定位模块与WiFi定位单元连接;所述语音交互模块与语音交互单元连接;所述机器人驱动模块与驱动装置连接;所述信息数据库分别与语音交互模块、实时定位与建图模块及图像识别处理模块连接。
[0008]本发明还提供了一种智能导游机器人的导游技术,其步骤如下:
[0009] 步骤一,基于WiFi构建室内环境地图;
[0010]步骤二,基于视觉图片构建导游讲解数据库;
[0011 ]步骤三,预定机器人行走路线;
[0012]步骤四,WiFi信号获取及机器人定位;
[0013]步骤五,进行导游讲解并与游客语音交流;
[0014]步骤六,机器人返回起点。
[0015]本发明的有益效果是:一种智能导游机器人的导游方法,通过机器视觉实现导航,环境适应能力强,适用于各种复杂环境;能够实现物体识别并通过语音与人交流,具有导游讲解和问题解答功能;利用WiFi结合惯性导航系统进行定位,定位精度高,可广泛用于室内和地下等环境;具有智能的特点,能够自主控制完成既定任务,工作状态稳定,效率高,效果好。
附图说明
[0016]下面结合附图及实施例对本发明作进一步说明。
[0017]附图1是一种智能导游机器人的工作示意图。
[0018]附图2是一种智能导游机器人的系统结构框图
[0019]图中,1.导航定位装置,1-1.惯性导航装置,1-2.视觉导航单元,1-3.WiFi定位单元,2.语音交互单元,2-1.话筒,2-2.扩音器,3.驱动装置,3-1.电机,3-2.行走小车,4.信息处理系统,4-1.惯性导航模块,4-2.图像识别处理模块,4-3.实时定位与建图模块,4-4.WiFi定位模块,4-5.语音交互模块,4-6.机器人驱动模块,4-7.信息数据库,5.蓄电池电源组。
具体实施方式
[0020]在附图中,一种智能导游机器人,包括导航定位装置1、语音交互单元2、驱动装置
3、信息处理系统4和蓄电池电源组5,所述导航定位装置1、语音交互单元2、驱动装置3和蓄电池电源组5分别与信息处理系统4连接;所述导航定位装置I由惯性导航装置1-1、视觉导航单元1-2和WiFi定位单元1-3组成;所述语音交互单元2由话筒2-1和扩音器2-2组成,实现游览讲解以及与人对话交流;所述驱动装置3由行走小车3-2和电机3-1组成;所述信息处理系统4,包括惯性导航模块4-1,图像识别处理模块4-2,实时定位与建图模块4-3,WiFi定位模块4-4,语音交互模块4-5,机器人驱动模块4-6和信息数据库4-7;所述蓄电池电源组5由锂离子电池组构成,智能导游机器人工作时的移动电源。
[0021]所述惯性导航装置1-1包括加速度计和陀螺仪,加速度计用于记录智能导航机器人的速度变化,陀螺仪用于记录机器人的运动方向变化;所述视觉导航单元1-2由深度摄像头构成,负责实时采集周围环境三维图像;所述WiFi定位单元1-3由WiFi信号接收器组成,负责接收周围环境中不同路由器的信号强度。
[0022]所述惯性导航模块4-1与惯性导航装置1-1连接;所述图像识别处理模块4-2和实时定位与建图模块4-3均与视觉导航单元1-2连接;所述WiFi定位模块4-4与WiFi定位单元1-3连接;所述语音交互模块4-5与语音交互单元2连接;所述机器人驱动模块4-6与驱动装置3连接;所述信息数据库4-7分别与语音交互模块4-5、实时定位与建图模块4-3及图像识别处理模块4-2连接。
[0023]本发明还提供了一种智能导游机器人的导游技术,其步骤如下:
[0024] 步骤一,基于WiFi构建室内环境地图;
[0025]步骤二,基于视觉图片构建导游讲解数据库;
[0026]步骤三,预定机器人行走路线;
[0027]步骤四,WiFi信号获取及机器人定位;
[0028]步骤五,进行导游讲解并与游客语音交流;
[0029]步骤六,机器人返回起点。
[0030]下面结合实施例对本发明所述的智能导游机器人的导游技术作进一步说明,其具体步骤如下:
[0031]步骤一,在智能导游机器人的导游区域内安装路由器,平均每10平方米范围安装一个,然后驱动机器人以ImX Im的密度对该区域的WiFi信号强度进行采样,并建立环境三维地图,采样数据和环境三维地图自动存入信息处理系统4中的信息数据库4-7;
[0032]步骤二,将该区域内所有需要讲解的物品三维图片信息,相关语音介绍资料以及部分相关问题及语音解答资料存入信息数据库4-7;
[0033]步骤三,预先设定一条导游行走路线,当游客进入智能导游机器人视线范围时,机器人开始工作;
[0034] 步骤四,I)工作时首先利用WiFi定位单元1-3获取WiFi信号强度,传入WiFi定位模块4-4,通过KNN算法定位机器人当前位置;
[0035] 2)在机器人移动过程中,机器人驱动模块4-6作用于驱动装置3,蓄电池电源组5对驱动装置3供电,机器人开始移动并根据WiFi信号强度实时定位;
[0036] 3)视觉导航单元1-2获取周围环境的三维图像信息,传入实时定位与建图模块4-3,同时,结合惯性导航装置1-1记录的智能导游机器人的实时移动速度和方向信息通过惯性导航模块4-1处理,提高机器人的实时定位精度;
[0037]步骤五,在完成步骤四的过程中,同时完成环境三维图像数据的更新操作以及图像识别处理模块4-2对实时采集的环境三维图像中的物体进行匹配识别,当识别出需讲解物品时,信息处理系统4通过机器人驱动模块4-6指示驱动装置3停止工作;此时,智能导游机器人停止运动,语音交互模块4-5从信息数据库4-7中提取与目标物品相关的语音资料信息,通过扬声器实现导游讲解功能;当游客提出问题时,智能导游机器人通过记录游客问题的语音信息并与信息数据库4-7中相关问题及相关解答资料进行自动匹配,然后输出语音解答,实现与游客的对话交流;
[0038]步骤六,智能导游机器人沿着指定路线向前移动,到达指定终点后,自动回到起点处。

Claims (3)

1.一种智能导游机器人的导游方法,其特征是,智能导游机器人包括导航定位装置(I)、语音交互单元(2)、驱动装置(3)、信息处理系统(4)和蓄电池电源组(5),所述导航定位装置(I)、语音交互单元(2)、驱动装置(3)和蓄电池电源组(5)分别与信息处理系统(4)连接;所述导航定位装置(I)由惯性导航装置(1-1)、视觉导航单元(1-2)和WiFi定位单元(1-3)组成;所述语音交互单元(2)由话筒(2-1)和扩音器(2-2)组成,实现游览讲解以及与人对话交流;所述驱动装置(3)由行走小车(3-2)和电机(3-1)组成;所述信息处理系统(4),包括惯性导航模块(4-1),图像识别处理模块(4-2),实时定位与建图模块(4-3),WiFi定位模块(4-4),语音交互模块(4-5),机器人驱动模块(4-6)和信息数据库(4-7);所述蓄电池电源组(5)由锂离子电池组构成,作为智能导游机器人工作时的移动电源;导游的具体步骤为: 步骤一,基于WiFi构建室内环境地图:在智能导游机器人的导游区域内安装路由器,平均每10平方米范围安装一个,然后驱动机器人以ImX Im的密度对该区域的WiFi信号强度进行采样,并建立环境三维地图,采样数据和环境三维地图自动存入信息处理系统(4)中的信息数据库(4-7); 步骤二,基于视觉图片构建导游讲解数据库:将该区域内所有需要讲解的物品三维图片信息,相关语音介绍资料以及部分相关问题及语音解答资料存入信息数据库(4-7); 步骤三,预定机器人行走路线:预先设定一条导游行走路线,当游客进入智能导游机器人视线范围时,机器人开始工作; 步骤四,WiFi信号获取及机器人定位:I)工作时首先利用WiFi定位单元(1-3)获取WiFi信号强度,传入WiFi定位模块(4-4),通过KNN算法定位机器人当前位置;2)在机器人移动过程中,机器人驱动模块(4-6)作用于驱动装置(3),蓄电池电源组(5)对驱动装置(3)供电,机器人开始移动并根据WiFi信号强度实时定位;3)视觉导航单元(1-2)获取周围环境的三维图像信息,传入实时定位与建图模块(4-3),同时,结合惯性导航装置(1-1)记录的智能导游机器人的实时移动速度和方向信息通过惯性导航模块(4-1)处理,提高机器人的实时定位精度; 步骤五,进行导游讲解并与游客语音交流:在完成步骤四的过程中,同时完成环境三维图像数据的更新操作以及图像识别处理模块(4-2)对实时采集的环境三维图像中的物体进行匹配识别,当识别出需讲解物品时,信息处理系统(4)通过机器人驱动模块(4-6)指示驱动装置(3)停止工作;此时,智能导游机器人停止运动,语音交互模块(4-5)从信息数据库(4-7)中提取与目标物品相关的语音资料信息,通过扬声器实现导游讲解功能;当游客提出问题时,智能导游机器人通过记录游客问题的语音信息并与信息数据库(4-7)中相关问题及相关解答资料进行自动匹配,然后输出语音解答,实现与游客的对话交流; 步骤六,机器人返回起点:智能导游机器人沿着指定路线向前移动,到达指定终点后,自动回到起点处。
2.根据权利要求1所述的一种智能导游机器人的导游方法,其特征是,所述惯性导航装置(1-1)包括加速度计和陀螺仪,加速度计用于记录智能导航机器人的速度变化,陀螺仪用于记录机器人的运动方向变化;所述视觉导航单元(1-2)由深度摄像头构成,负责实时采集周围环境三维图像;所述WiFi定位单元(1-3)由WiFi信号接收器组成,负责接收周围环境中不同路由器的信号强度。
3.根据权利要求1所述的一种智能导游机器人的导游方法,其特征是,所述惯性导航模块(4-1)与惯性导航装置(1-1)连接;所述图像识别处理模块(4-2)和实时定位与建图模块(4-3)均与视觉导航单元(1-2)连接;所述WiFi定位模块(4-4)与WiFi定位单元(1-3)连接;所述语音交互模块(4-5)与语音交互单元(2)连接;所述机器人驱动模块(4-6)与驱动装置(3)连接;所述信息数据库(4-7)分别与语音交互模块(4-5)、实时定位与建图模块(4-3)及图像识别处理模块(4-2)连接。
CN201310715227.XA 2013-12-23 2013-12-23 智能导游机器人的导游方法 CN103699126B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310715227.XA CN103699126B (zh) 2013-12-23 2013-12-23 智能导游机器人的导游方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310715227.XA CN103699126B (zh) 2013-12-23 2013-12-23 智能导游机器人的导游方法

Publications (2)

Publication Number Publication Date
CN103699126A CN103699126A (zh) 2014-04-02
CN103699126B true CN103699126B (zh) 2016-09-28

Family

ID=50360690

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310715227.XA CN103699126B (zh) 2013-12-23 2013-12-23 智能导游机器人的导游方法

Country Status (1)

Country Link
CN (1) CN103699126B (zh)

Families Citing this family (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105058389A (zh) * 2015-07-15 2015-11-18 深圳乐行天下科技有限公司 一种机器人系统、机器人控制方法及机器人
CN106803777A (zh) * 2015-12-01 2017-06-06 小米科技有限责任公司 信息显示方法和装置
CN105573710A (zh) * 2015-12-18 2016-05-11 合肥寰景信息技术有限公司 一种网络社区的语音服务方法
CN105717919B (zh) * 2016-01-16 2018-09-28 深圳先进技术研究院 一种基于飞艇的景区导游救助系统
CN105955252A (zh) * 2016-04-12 2016-09-21 江苏理工学院 智能语音导游机器人及其路径寻优方法
CN107436608A (zh) * 2016-05-26 2017-12-05 富士通株式会社 用于无人机的控制装置及用于导游的系统
CN107538485B (zh) * 2016-06-29 2020-12-01 沈阳新松机器人自动化股份有限公司 一种机器人导引方法及系统
CN106406319A (zh) * 2016-11-11 2017-02-15 华南智能机器人创新研究院 一种智能导游机器人
CN106446290A (zh) * 2016-11-11 2017-02-22 华南智能机器人创新研究院 一种智能机器人导游的方法
CN106935059A (zh) * 2017-03-20 2017-07-07 纵目科技(上海)股份有限公司 一种定位找车系统、定位找车方法及位置定位方法
CN107122824A (zh) * 2017-05-04 2017-09-01 中兴耀维科技江苏有限公司 一种企业展厅在线讲解的方法
CN107591112A (zh) * 2017-09-22 2018-01-16 芜湖星途机器人科技有限公司 自动讲解机器人
CN108247649A (zh) * 2018-01-30 2018-07-06 深圳源广安智能科技有限公司 一种具有旅游引导功能的智能机器人
CN109227536A (zh) * 2018-08-20 2019-01-18 南京邮电大学 智能迎宾讲解机器人语音交互控制系统及控制方法
CN109285398A (zh) * 2018-12-05 2019-01-29 安徽鑫巨源电子科技有限公司 一种跟随式互动讲解投影方法
CN110136711A (zh) * 2019-04-30 2019-08-16 厦门大学 一种导览机器人基于云平台的语音交互方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201273999Y (zh) * 2008-08-29 2009-07-15 湖南工程学院 基于图像处理的导游机器人
CN102314824A (zh) * 2010-06-30 2012-01-11 上海市静安区青少年活动中心 导游机器人
CN102385384A (zh) * 2011-08-30 2012-03-21 西安交通大学苏州研究院 一种导引机器人系统
JP2013000875A (ja) * 2011-06-21 2013-01-07 Kazunari Kuroki 遠隔ガイダンスシステム
CN103163885A (zh) * 2013-02-27 2013-06-19 慈溪迈思特电子科技有限公司 导游机器人的自主导航系统
CN103226924A (zh) * 2013-04-12 2013-07-31 华南理工大学广州学院 一种导览解说服务机器人系统及其导览解说方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN202562486U (zh) * 2012-05-02 2012-11-28 东南大学 基于航向角的wsn/ins组合导航系统
CN103148855B (zh) * 2013-02-27 2015-07-08 东南大学 一种ins辅助的室内移动机器人无线定位方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201273999Y (zh) * 2008-08-29 2009-07-15 湖南工程学院 基于图像处理的导游机器人
CN102314824A (zh) * 2010-06-30 2012-01-11 上海市静安区青少年活动中心 导游机器人
JP2013000875A (ja) * 2011-06-21 2013-01-07 Kazunari Kuroki 遠隔ガイダンスシステム
CN102385384A (zh) * 2011-08-30 2012-03-21 西安交通大学苏州研究院 一种导引机器人系统
CN103163885A (zh) * 2013-02-27 2013-06-19 慈溪迈思特电子科技有限公司 导游机器人的自主导航系统
CN103226924A (zh) * 2013-04-12 2013-07-31 华南理工大学广州学院 一种导览解说服务机器人系统及其导览解说方法

Also Published As

Publication number Publication date
CN103699126A (zh) 2014-04-02

Similar Documents

Publication Publication Date Title
US10901419B2 (en) Multi-sensor environmental mapping
US10444751B2 (en) Surveying system
CN105607635B (zh) 自动导引车全景光学视觉导航控制系统及全向自动导引车
CN103853156B (zh) 一种基于机载传感器的小型四旋翼飞行器控制系统及方法
CN104536445B (zh) 移动导航方法和系统
CN105045268B (zh) 一种agv激光磁带混合导航系统
CN104067781B (zh) 基于虚拟机器人与真实机器人集成的采摘系统及方法
CN106909145B (zh) 无人航道测量船障碍物实时感知避障系统与方法
US9517559B2 (en) Robot control system, robot control method and output control method
CN102184549B (zh) 一种运动参数确定方法、装置和运动辅助设备
CN106843230B (zh) 应用于移动设备的虚拟墙系统及其实现方法
US7536242B2 (en) Optical laser guidance system apparatus and method
JP2020505694A (ja) Uavおよび他の自律車両のための屋内マッピングおよびモジュラー制御、ならびに関連するシステムおよび方法
Cruz et al. Decentralized cooperative control-a multivehicle platform for research in networked embedded systems
US7054716B2 (en) Sentry robot system
US6687571B1 (en) Cooperating mobile robots
EP1586423B1 (en) Robot control device, robot control method, and robot control program
CN107328418B (zh) 移动机器人在陌生室内场景下的核辐射探测路径自主规划方法
CN102866706B (zh) 一种采用智能手机导航的清扫机器人及其导航清扫方法
CN104827459B (zh) 一种智能整理图书机器人及其整理方法
US6408226B1 (en) Cooperative system and method using mobile robots for testing a cooperative search controller
US20200097584A9 (en) Mobile device enabled robotic system
CN103901895B (zh) 一种基于无极FastSLAM算法和匹配优化目标定位方法及机器人
CA2392231C (en) Autonomous multi-platform robot system
WO2018210059A9 (zh) 机器人充电方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160928

Termination date: 20171223