CN103064417B - 一种基于多传感器的全局定位导引系统及方法 - Google Patents

一种基于多传感器的全局定位导引系统及方法 Download PDF

Info

Publication number
CN103064417B
CN103064417B CN201210563879.1A CN201210563879A CN103064417B CN 103064417 B CN103064417 B CN 103064417B CN 201210563879 A CN201210563879 A CN 201210563879A CN 103064417 B CN103064417 B CN 103064417B
Authority
CN
China
Prior art keywords
agv
quick response
response code
guiding
global
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201210563879.1A
Other languages
English (en)
Other versions
CN103064417A (zh
Inventor
冷春涛
方波
曹其新
杜建军
朱笑笑
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Zhizhen Intelligent Network Technology Co Ltd
Original Assignee
Shanghai Jiao Tong University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Jiao Tong University filed Critical Shanghai Jiao Tong University
Priority to CN201210563879.1A priority Critical patent/CN103064417B/zh
Publication of CN103064417A publication Critical patent/CN103064417A/zh
Application granted granted Critical
Publication of CN103064417B publication Critical patent/CN103064417B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明公开了一种基于多传感器的全局定位导引系统及方法,包括:AGV车体、嵌入式控制器、加速度传感器、视觉传感器、光源、导引带,其中导引带包括导引线和二维码图标,加速度传感器用于测量AGV车体的加速度值;视觉传感器用于获取地面导引带所包含的图像信息,实现自动导引功能;嵌入式控制器通过加速度值计算获得AGV车体的相对位置,同时通过视觉传感器识别的二维码图标中所定义的全局位置信息,实现AGV车体的全局定位功能。本发明采用地面导引带,通过加速度传感器与视觉传感器相结合的方法实现AGV自动导引及全局定位功能,为实现多AGV的智能控制提供基础,具有很好的应用前景。

Description

一种基于多传感器的全局定位导弓I系统及方法
技术领域
[0001]本发明涉及自动控制领域,尤其涉及一种基于多传感器的全局定位导引系统及方法,适合在自动导引车(AGV)中使用。
背景技术
[0002]自动导引车(AGV)系统已经发展成为生产物流系统中最大的专业分支之一,并出现产业化发展的趋势,成为现代化企业自动化装备不可缺少的重要组成部分。而AGV中最基本的自动导引技术主要包括电磁感应导引、激光导引、视觉导引、惯性导引、超声波导引和磁钉等。其中视觉导引是一种具有巨大潜力的导引技术。视觉传感器为信息被动接收,不受其他传感器的干扰;视觉传感器收集得到的信息量大,即使在丢弃了大量的信息之后,仍然可以很好地为车辆导航。同时视觉导引具有引导路径设置和变更简单方便、技术成本、以及使用费用低、系统柔性好等优点。因此视觉导引已经成为目前研究与应用的热点,具有巨大的应用潜力。然而常见的视觉导引方法利用铺设于地面的色带获取AGV运动的方向,无法获得AGV的全局定位信息。对于更智能化的生产车间,需要通过多台AGV协作完成搬运任务,则AGV的全局定位是今后的发展方向。
[0003]在现有的AGV导引方法中,如“嵌入式系统的视觉导引AGV系统及方法”(中国发明专利申请号201110436672.3),利用双摄像头实现AGV导引,无法获得AGV的全局定位信息。“基于无源RFID和辅助视觉的AGV运行控制方法”(中国发明专利申请号201110150892.X),当AGV经过RFID阅读器时,AGV控制中心获得此时AGV的位置,缺陷是无法实时获取AGV的位置信息。“基于地面纹理的智能车视觉全局定位方法”(中国发明专利申请号200910138235.6),该发明利用摄像头采集的图像信号与存储于系统的环境全局地图进行匹配,实现AGV的全局定位,然而该方法需要进行大量运算,特别是在大面积车间内,实时性无法保证。
发明内容
[0004]本发明目的在于针对上述现有技术的不足,提供一种基于多传感器的全局定位导引系统,用于AGV的全局定位、导引方法,通过加速度传感器与视觉传感器的信息融合使自动导引车能实现全局定位、导引。
[0005]本发明是通过以下技术方案实现的:
[0006] —种基于多传感器的全局定位导引系统,包括:AGV车体、嵌入式控制器、加速度传感器、视觉传感器、光源、导引带,所述嵌入式控制器、加速度传感器、视觉系统和光源安装在所述AGV车体上,所述导引带为平铺于AGV车体工作区域地面上,其中,所述加速度传感器用于测量AGV车体的加速度值,通过计算获得AGV车体的相对位置,所述视觉传感器用于获取地面导引带所包含的图像信息,所述光源用于给视觉传感器提供恒定的光照条件,所述嵌入式控制器实现实时视频采集、视觉信息处理以及由加速度计算获得AGV车体位置。
[0007]优选地,所述导引带包括导引线和二维码图标。所述导引线铺设于AGV所需经过路径的地面上。沿着所述导引线间隔一定的距离放置二维码图标,所述二维码图标由正方形边框构成,在边框内部的基底上印有不同特征图案,所述嵌入式控制器的记忆库存储了每一种特征图案的特征,每一种特征图案的特征在所述嵌入式控制器的记忆库中都是唯一的以标示唯一位置。
[0008]所述导引线为黑色,所述二维码图标的正方形边框为黑色,边框内部的基底为白色。
[0009]本发明还提供一种基于多传感器的全局定位导引方法,采用上述的全局定位导引系统,包括如下步骤:
[0010]步骤S1.在AGV需要工作的区域铺设好导引带,并将导引带上的二维码图标的图像信息以及各二维码图标对应的全局坐标位置记录于嵌入式控制器的记忆库中;
[0011]步骤S2.当AGV车体经过铺设的导引带时,视觉系统捕捉到导引线带的图像信息,并把该图像信息传输至嵌入式控制器进行图像处理,然后获得AGV沿导引线运动所需的信息;其中,视觉系统和嵌入式控制器安装在所述AGV车体上;
[0012]步骤S3.当AGV开始运动,嵌入式控制器读取加速度传感器的数值,测得AGV车体的加速度,通过2次积分运算获得机器人的位置信息;该位置信息为相对的,即相对于前一次准确全局位置的。
[0013]步骤S4.在视觉传感器捕捉地面的导引带进行巡线行走的同时,利用模板匹配法,将校正后的图像信息与记忆库中的特征图案进行对比匹配,判断是否识别到二维码图标,如果识别到二维码图标,则根据二维码图标在图像中的位置以及每个二维码图标代表的全局位置,计算出AGV的全局位置。如果没有识别到mark,则根据前一次识别到的二维码图标位置与由加速度传感器计算得到的相对位置相加获得现在的全局位置。
[0014]步骤S5.当现在的位置与目标位置相同时,AGV停止运动,如果不相同,则继续循环。
[0015]本发明通过加速度传感器与视觉传感器,利用视觉技术识别二维码图标,实现AGV的全局定位、导引功能;弥补了普通视觉导引方法不能获取全局定位信息的缺陷,极大地降低了 AGV导引成本,获得了较高的定位精度。
附图说明
[0016]通过阅读参照以下附图对非限制性实施例所作的详细描述,本发明的其它特征、目的和优点将会变得更明显:
[0017]图1为本发明的系统组成模块框图;
[0018]图2为铺设于地面的导引带示意图;
[0019]图3为本发明的全局定位、导引方法工作流程图。
[0020]图中:I为AGV车体,2为嵌入式控制器,3为加速度传感器,4为视觉传感器,5为光源,6为导引带,61为二维码图标,62为黑色导引线。
具体实施方式
[0021]下面结合附图对本发明的实施例作详细说明:本实施例在以本发明技术方案为前提下进行实施,给出了详细的实施方式,但本发明的保护范围不限于下述的实施例。
[0022]图1为本发明的系统组成模块框图,在本实施例中,基于多传感器的全局定位导引系统包括:AGV车体1、嵌入式控制器2、加速度传感器3、视觉传感器4、光源5、导引带6,其中嵌入式控制器2、加速度传感器3、视觉传感器4、光源5安装于AGV车体I上;其中导引带6包括黑色导引线62和二维码图标61,均铺设于AGV需经过路径的地面上。
[0023]所述加速度传感器3用于获取AGV车体I的加速度数据,通过计算获得AGV车体I的位置信息;所述视觉传感器4用于获取环境图像信息;所述嵌入式控制器2实现实时视频采集、视觉信息处理以及由加速度计算获得AGV车体I位置,当嵌入式控制器2接收到所述加速度传感器3的数据,同时接收到所述视觉系统的图像信息并进行图像处理,通过所述的基于多传感器信息融合的全局定位导引方法,实现导引功能并获取当前AGV车体I的全局位置信息,实现全局定位功能。
[0024]所述铺设于地面的导引带6如图2所示,由黑色导引线62和二维码图标61组成。所述二维码图标62是一种专门设计的黑白模板,这种黑白模板由正方形黑色边框构成,内部在白色基底上印有不同特征图案。
[0025]图3为本发明的全局定位、导引方法的工作流程图。本实施例中,首先在AGV需要工作的区域铺设好导引带,并将导引带上的二维码图标的图像信息以及各二维码图标对应的全局坐标位置记录于嵌入式控制器的记忆库中;当AGV车体经过铺设的导引带时,视觉系统捕捉到黑色导引线带的图像信息,并把该图像信息传输至嵌入式控制器进行图像处理,然后获得AGV沿导引线运动所需的信息;当AGV开始运动,嵌入式控制器读取加速度传感器的数值,测得AGV车体的加速度,通过2次积分运算获得机器人的位置信息;该位置信息为相对的,即相对于前一次准确全局位置的。在视觉传感器捕捉地面的导引带进行巡线行走的同时,利用模板匹配法,将校正后的图像信息与记忆库中的特征图案进行对比匹配,判断是否识别到二维码图标,如果识别到二维码图标,则根据二维码图标在图像中的位置以及每个二维码图标代表的全局位置,计算出AGV的全局位置。如果没有识别到mark,则根据前一次识别到的二维码图标位置与由加速度传感器计算得到的相对位置相加获得AGV的全局位置。当现在的全局位置与目标位置相同时,AGV停止运动,如果不相同,则继续循环以上工作流程。
[0026]本发明采用导引带,并采用加速度传感器和视觉传感器相结合的方法实现AGV的全局定位、导引功能,使得AGV除了可以自动导引以外,还可以实现全局定位,从而为实现多AGV协作搬运、装配等工作提供基础。本方法定位、导引精度高,成本低,避免了环境光线的影响,稳定性好,在AGV中具有很好的应用前景。
[0027]以上对本发明的具体实施例进行了描述。需要理解的是,本发明并不局限于上述特定实施方式,本领域技术人员可以在权利要求的范围内做出各种变形或修改,这并不影响本发明的实质内容。

Claims (4)

1.一种基于多传感器的全局定位导引系统,其特征在于,包括:AGV车体、嵌入式控制器、加速度传感器、视觉传感器、光源、导引带,所述嵌入式控制器、加速度传感器、视觉传感器、光源安装于AGV车体上,其中:所述导引带铺设于AGV需经过路径的地面上,所述导引带包括导引线和二维码图标,其中,所述导引线铺设于AGV所需经过路径的地面上,沿着所述导引线间隔一定的距离放置所述二维码图标,所述加速度传感器用于测量AGV车体的加速度值,所述视觉传感器用于获取地面导引带所包含的图像信息,所述光源用于给视觉传感器提供恒定的光照条件,所述嵌入式控制器实现实时视频采集、视觉信息处理以及由加速度计算获得AGV车体位置,视觉传感器判断是否识别到二维码图标,如果识别到二维码图标,则根据二维码图标在图像中的位置以及每个二维码图标代表的全局位置,计算出AGV的全局位置;如果没有识别到二维码图标,则根据前一次识别到的二维码图标位置与由加速度传感器计算得到的相对位置相加获得现在的全局位置。
2.根据权利要求1所述的基于多传感器的全局定位导引系统,其特征在于,所述二维码图标由正方形边框构成,在边框内部的基底上印有不同特征图案,所述嵌入式控制器的记忆库存储了每一种特征图案的特征,每一种特征图案的特征在所述嵌入式控制器的记忆库中都是唯一的以标示唯一位置。
3.根据权利要求2所述的基于多传感器的全局定位导引系统,其特征在于,所述导引线为黑色,所述二维码图标的正方形边框为黑色,边框内部的基底为白色。
4.一种基于多传感器的全局定位导引方法,其特征在于,采用如权利要求2或3所述的系统,包括如下步骤: 步骤S1.在AGV需要工作的区域铺设好导引带,并将导引带上的二维码图标的图像信息以及各二维码图标对应的全局坐标位置记录于嵌入式控制器的记忆库中; 步骤S2.当AGV车体经过铺设的导引带时,视觉系统捕捉到导引线带的图像信息,并把该图像信息传输至嵌入式控制器进行图像处理,然后获得AGV沿导引线运动所需的信息;其中,视觉系统和嵌入式控制器安装在所述AGV车体上; 步骤S3.当AGV开始运动,嵌入式控制器读取加速度传感器的数值,测得AGV车体的加速度,通过2次积分运算获得机器人的位置信息;该位置信息为相对的,即相对于前一次准确全局位置的; 步骤S4.在视觉传感器捕捉地面的导引带进行巡线行走的同时,利用模板匹配法,将校正后的图像信息与记忆库中的特征图案进行对比匹配,判断是否识别到二维码图标,如果识别到二维码图标,则根据二维码图标在图像中的位置以及每个二维码图标代表的全局位置,计算出AGV的全局位置;如果没有识别到二维码图标,则根据前一次识别到的二维码图标位置与由加速度传感器计算得到的相对位置相加获得现在的全局位置; 步骤S5.当现在的位置与目标位置相同时,AGV停止运动,如果不相同,则继续循环。
CN201210563879.1A 2012-12-21 2012-12-21 一种基于多传感器的全局定位导引系统及方法 Active CN103064417B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210563879.1A CN103064417B (zh) 2012-12-21 2012-12-21 一种基于多传感器的全局定位导引系统及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210563879.1A CN103064417B (zh) 2012-12-21 2012-12-21 一种基于多传感器的全局定位导引系统及方法

Publications (2)

Publication Number Publication Date
CN103064417A CN103064417A (zh) 2013-04-24
CN103064417B true CN103064417B (zh) 2016-06-01

Family

ID=48107078

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210563879.1A Active CN103064417B (zh) 2012-12-21 2012-12-21 一种基于多传感器的全局定位导引系统及方法

Country Status (1)

Country Link
CN (1) CN103064417B (zh)

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103294059B (zh) * 2013-05-21 2015-09-09 无锡普智联科高新技术有限公司 基于混合导航带的移动机器人定位系统及其方法
CN103324194B (zh) * 2013-05-21 2015-11-18 无锡普智联科高新技术有限公司 基于二维码导航带的移动机器人定位系统
CN103268119A (zh) * 2013-06-05 2013-08-28 合肥凌翔信息科技有限公司 无人搬运车导航控制系统及其导航控制方法
CN104142683B (zh) * 2013-11-15 2016-06-08 上海快仓智能科技有限公司 基于二维码定位的自动引导车导航方法
CN103616894B (zh) * 2013-12-10 2016-10-19 中国恩菲工程技术有限公司 基于离散坐标系的小车行走定位监测方法及系统
CN104216411B (zh) * 2014-09-27 2016-11-09 江阴润玛电子材料股份有限公司 一种电子电路中的巡线方法
CN104375509B (zh) * 2014-12-11 2017-10-10 山东大学 一种基于rfid和视觉的信息融合定位系统及方法
CN104777835A (zh) * 2015-03-11 2015-07-15 武汉汉迪机器人科技有限公司 一种全向自动叉车及3d立体视觉导航定位方法
CN104932496B (zh) * 2015-05-13 2017-11-17 浙江德马科技股份有限公司 一种搬运车的自动导航方法
CN105159302A (zh) * 2015-09-23 2015-12-16 许继集团有限公司 一种agv小车及其自动导航方法
CN105511466B (zh) * 2015-12-03 2019-01-25 上海交通大学 基于二维码带的agv定位方法及系统
CN105500406B (zh) * 2015-12-25 2017-07-28 山东建筑大学 一种变电站系统
CN105700532B (zh) * 2016-04-19 2018-08-10 长沙理工大学 基于视觉的变电站巡检机器人导航定位控制方法
CN105807771B (zh) * 2016-05-03 2018-07-27 上海交通大学 基于agv的工位识别系统及其控制方法
CN106444778B (zh) * 2016-11-08 2019-11-08 昆明理工大学 基于嵌入式图像处理仪表柜亮灯的自控循迹小车系统
CN106940183B (zh) * 2016-12-13 2019-08-09 北京卫星制造厂 一种基于psd测距的agv精确定位方法
CN107144852B (zh) * 2017-05-09 2019-07-09 深圳普智联科机器人技术有限公司 面向agv的全局分层定位系统和方法
CN107085428B (zh) * 2017-05-18 2020-03-10 广州视源电子科技股份有限公司 智能移动方法、装置、机器人及存储介质
CN109202958A (zh) * 2017-06-30 2019-01-15 沈阳新松机器人自动化股份有限公司 一种复合机器人视觉抓取平台
CN107621826A (zh) * 2017-09-18 2018-01-23 天津工业大学 移动智能寻迹车
CN109668551B (zh) * 2017-10-17 2021-03-26 杭州海康机器人技术有限公司 机器人定位方法、装置及计算机可读存储介质
CN108180912B (zh) * 2017-12-31 2021-03-05 芜湖哈特机器人产业技术研究院有限公司 基于混合导航带的移动机器人定位系统及方法
CN108196552B (zh) * 2018-02-11 2021-03-02 深圳朝闻道智能信息科技有限公司 一种智能小车的gps视觉导航系统
CN108459600A (zh) * 2018-02-11 2018-08-28 成都兴联宜科技有限公司 一种agv小车的视觉导航系统
US20200125091A1 (en) * 2018-04-18 2020-04-23 Baidu Usa Llc Method for evaluating localization system of autonomous driving vehicles
CN108873833B (zh) * 2018-06-08 2020-12-08 广州市远能物流自动化设备科技有限公司 一种自动导引运输车的移动控制方法及自动导引运输车

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101566471A (zh) * 2007-01-18 2009-10-28 上海交通大学 基于地面纹理的智能车视觉全局定位方法
CN101576384A (zh) * 2009-06-18 2009-11-11 北京航空航天大学 一种基于视觉信息校正的室内移动机器人实时导航方法
CN102535915A (zh) * 2012-02-03 2012-07-04 无锡普智联科高新技术有限公司 一种基于移动机器人小车的自动停车系统
CN102602643A (zh) * 2012-03-02 2012-07-25 无锡普智联科高新技术有限公司 一种高密度自动立体仓储系统
CN102608998A (zh) * 2011-12-23 2012-07-25 南京航空航天大学 嵌入式系统的视觉导引agv系统及方法
CN102735235A (zh) * 2012-06-07 2012-10-17 无锡普智联科高新技术有限公司 基于二维码的室内移动机器人定位系统和方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3516144B1 (ja) * 2002-06-18 2004-04-05 オムロン株式会社 光学情報コードの読取方法および光学情報コード読取装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101566471A (zh) * 2007-01-18 2009-10-28 上海交通大学 基于地面纹理的智能车视觉全局定位方法
CN101576384A (zh) * 2009-06-18 2009-11-11 北京航空航天大学 一种基于视觉信息校正的室内移动机器人实时导航方法
CN102608998A (zh) * 2011-12-23 2012-07-25 南京航空航天大学 嵌入式系统的视觉导引agv系统及方法
CN102535915A (zh) * 2012-02-03 2012-07-04 无锡普智联科高新技术有限公司 一种基于移动机器人小车的自动停车系统
CN102602643A (zh) * 2012-03-02 2012-07-25 无锡普智联科高新技术有限公司 一种高密度自动立体仓储系统
CN102735235A (zh) * 2012-06-07 2012-10-17 无锡普智联科高新技术有限公司 基于二维码的室内移动机器人定位系统和方法

Also Published As

Publication number Publication date
CN103064417A (zh) 2013-04-24

Similar Documents

Publication Publication Date Title
US20200173803A1 (en) Vision augmented navigation
EP3407294B1 (en) Information processing method, device, and terminal
CN107235044B (zh) 一种基于多传感数据实现对道路交通场景和司机驾驶行为的还原方法
US9587948B2 (en) Method for determining the absolute position of a mobile unit, and mobile unit
CN105045268B (zh) 一种agv激光磁带混合导航系统
US10278333B2 (en) Pruning robot system
CN104583724B (zh) 用于在测绘环境中确定车辆位置的方法和装置
Alonso et al. Accurate global localization using visual odometry and digital maps on urban environments
EP3062066A1 (en) Determination of object data by template-based UAV control
CN102914303B (zh) 多移动机器人的智能空间系统及导航信息获取方法
CN105841687B (zh) 室内定位方法和系统
CN106325270B (zh) 基于感知和自主计算定位导航的智能车导航方法
CN204374771U (zh) 实现清扫机器人地图边界建模的装置以及清扫机器人
CN102798350B (zh) 一种臂架挠度的测量方法、装置及系统
Xu et al. Ceiling-based visual positioning for an indoor mobile robot with monocular vision
CN102773862B (zh) 用于室内移动机器人的快速精确定位系统及其工作方法
CN107422730A (zh) 基于视觉导引的agv运输系统及其驾驶控制方法
CN106607907B (zh) 一种移动视觉机器人及其测控方法
CN100462680C (zh) 使用交通工具的射频识别标记装配系统及其方法
US8259998B2 (en) Image processing device for vehicle
CN102646343B (zh) 车辆检测装置
US20180350055A1 (en) Augmented reality feature detection
CN107093328B (zh) 基于机器视觉的停车场导航系统及方法
JP5588812B2 (ja) 画像処理装置及びそれを用いた撮像装置
US20140156219A1 (en) Determining tilt angle and tilt direction using image processing

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20170209

Address after: 201803 Shanghai Jiading District Jinsha Road, Lane 1555, No. 7, layer 398,

Patentee after: SHANGHAI ZHIZHEN INTELLIGENT NETWORK SCIENCE & TECHNOLOGY CO., LTD.

Address before: 200240 Dongchuan Road, Shanghai, No. 800, No.

Patentee before: Shanghai Jiao Tong University