CN106774335B - 基于多目视觉和惯导的导引装置、地标布局及导引方法 - Google Patents

基于多目视觉和惯导的导引装置、地标布局及导引方法 Download PDF

Info

Publication number
CN106774335B
CN106774335B CN201710001270.8A CN201710001270A CN106774335B CN 106774335 B CN106774335 B CN 106774335B CN 201710001270 A CN201710001270 A CN 201710001270A CN 106774335 B CN106774335 B CN 106774335B
Authority
CN
China
Prior art keywords
agv
guide
vehicle body
guide marking
line
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710001270.8A
Other languages
English (en)
Other versions
CN106774335A (zh
Inventor
武星
楼佩煌
张颖
张建鹏
钱晓明
金鹏
陈华
何珍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Aeronautics and Astronautics
Original Assignee
Nanjing University of Aeronautics and Astronautics
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Aeronautics and Astronautics filed Critical Nanjing University of Aeronautics and Astronautics
Priority to CN201710001270.8A priority Critical patent/CN106774335B/zh
Publication of CN106774335A publication Critical patent/CN106774335A/zh
Application granted granted Critical
Publication of CN106774335B publication Critical patent/CN106774335B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0268Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means
    • G05D1/027Control of position or course in two dimensions specially adapted to land vehicles using internal positioning means comprising intertial navigation means, e.g. azimuth detector
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0234Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using optical markers or beacons
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0276Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle
    • G05D1/028Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle using a RF signal
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0287Control of position or course in two dimensions specially adapted to land vehicles involving a plurality of land vehicles, e.g. fleet or convoy travelling
    • G05D1/0289Control of position or course in two dimensions specially adapted to land vehicles involving a plurality of land vehicles, e.g. fleet or convoy travelling with means for avoiding collisions between vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Electromagnetism (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)

Abstract

本发明公开了一种基于多目视觉和惯导的导引装置、地标布局及导引方法,属于自动化控制领域。该导引装置包括车体两侧倾斜向下的摄像机、车体中心垂直向下的摄像机、车体顶部的惯性测量单元、车体前侧的障碍物传感器、车体底部的射频读卡器以及电连接上述部件的导引控制器。在自动导引车(AGV)运行路径两侧布置有色导引标线,在导引标线上布置位置重合的射频标签和有色定位标识。AGV的导引方法包括在两侧导引标线的中间区域所进行的区域通行导航以及跟随一侧导引标线所进行的路径跟踪导引,具有跨区域的远程运动灵活性和区域内的目标定位精确性。

Description

基于多目视觉和惯导的导引装置、地标布局及导引方法
技术领域
本发明属于自动化控制中的移动机器人导航技术领域,具体指代一种基于多目视觉和惯导的导引装置、地标布局及导引方法。
背景技术
自动导引技术的研究始于20世纪50年代的美国,1954年Barret Electronics公司研制了第一台用于货物输送的自动导引车,随后自动导引车的应用扩展到工业生产领域。1974年瑞典的Volvo Kalmar轿车装配厂采用自动导引车作为自动装配线的载运工具。从八十年代开始,美国国防部开始了地面无人作战平台的研究,主要针对适应不同地形的自主导航的智能车辆。
自动导引技术始终是自动导引车和智能车辆领域研究的核心技术,目前比较常用的导引技术有电磁导引、磁带导引、光学导引、激光导引和惯性导引等。每种导引技术都有各自的优势和不足,面向不同的应用领域:
(一)、电磁导引、磁带导引和光学导引:其主要用于固定路径导引方式,需要预先在地面铺设用于指示自动导引车跟踪目标的导引路径,自动导引车通过电磁感应或磁感应或光感应传感器,测量车体相对于导引路径的位置偏差,通过实时消除位置偏差保证车体沿导引路径运行,但在固定路径导引方式下,自动导引车不能显著偏离导引路径,否则会因传感器丢失导引信号而导致路径跟踪失败。
(二)、激光导引:其可用于自由路径导引方式,但需要预先在三维空间(如墙壁)布置用于反射激光信号且位置已知的反射信标。自动导引车的顶部安装有激光导航雷达,该雷达在360°全方向上不断发射激光信号,激光信号遇到反射信标后会被反射回该雷达。如果激光导航雷达在同一位置可扫描到三个以上的反射信标,根据三角定位原理可计算出车体在二维平面内的位置坐标,实现自动导引车的自定位。针对目标点的位置坐标,通过路径规划可生成自动导引车的运行轨迹,通过轨迹跟踪控制车体向目标点运行。在自由路径导引方式下,理论上自动导引车不存在固定的运行路径,只要能同时扫描到三个以上的反射信标,车体可位于二维平面内的任意位置。然而,由于普通轮式移动车辆受到非完整约束,自动导引车的运行轨迹还是受到其机动性的限制,并不能处于二维平面内的任意位置。另外,激光导航雷达的关键技术被少数国外公司所垄断,价格昂贵,且其应用环境要求激光信号扫描空间内不能存在太多阻隔信号反射的障碍物。
(三)、惯性导引:IMU(惯性测量单元)由多组陀螺仪和加速度计组成,可分别测量AGV车体的转动角加速度和平移加速度,从而估算AGV相对于参考点的位置和姿态。由于该方法需对上述加速度进行两次积分,其定位误差随着AGV运行距离的增加而不断增大,因此, 一般利用其他绝对定位方法(如GPS或定位磁钉),每隔一定预设距离消除一次累计定位误差。然而,采用GPS的绝对定位精度不高,而采用定位磁钉的绝对定位则将AGV限制于事先确定的固定运行路径上,导航灵活性较差。
综合所述,目前广泛应用的自动导引技术难以在定位精度、导引灵活性、运行可靠性和设备成本等多种指标之间取得较好的协调匹配,因此,融合多种导引技术的组合导引方法还需进一步研究。
发明内容
针对于上述现有技术的不足,本发明的目的在于提供一种基于多目视觉和惯导的导引装置、地标布局及导引方法,以解决现有技术中各种导引技术均存在不足,出现导航灵活性差、定位精度不高、运行可靠性差等问题。
为达到上述目的,本发明的一种基于多目视觉和惯导的导引装置,包括:倾斜向下安装于车体两侧的侧向摄像机、垂直向下安装于车体中心的中心摄像机、安装于车体底部的射频读卡器、安装于车体顶部的惯性测量单元、安装于车体前侧的障碍物传感器、以及与上述各部件的信号输出端进行电连接的导引控制器;
所述侧向摄像机用于识别并测量车体两侧较远位置处的导引标线和定位标识;
所述中心摄像机用于识别并测量车体正下方位置处的导引标线和定位标识;
所述射频读卡器用于识别导引标线上的射频标签;
所述惯性测量单元用于测量车体运动的角加速度、角速度、线加速度和线速度;
所述障碍物传感器用于测量障碍物的距离点云数据;
所述导引控制器内存储有AGV运行环境的数字地图,通过采集上述各部件的输出信息,计算AGV的位置和姿态、障碍物的轮廓和距离、以及AGV导航的运行路径和定位目标点信息。
优选地,所述侧向摄像机安装于车体左右两侧,并与水平地面成一定倾角,其视野下侧边界与车体侧向边界平行,且上述两边界间的距离S通过改变侧向摄像机的安装高度和倾角来调节;当导引标线和定位标识位于上述视野上侧边界和下侧边界之间时,侧向摄像机采集导引标线和定位标识的有效图像,并输出给导引控制器,用于测量车体侧向边界到导引标线的横向距离偏差ed1、AGV车体与导引标线的姿态角偏差eθ、AGV中心相对于定位标识的纵向距离偏差eL
优选地,所述中心摄像机垂直向下安装于车体中心,所述射频读卡器安装于车体底部、处于车体纵向中心线上、且位于中心摄像机的前方;所述中心摄像机的视野左侧、右侧边界与车体侧向边界平行,所述视野左侧、右侧边界的视野宽度WV通过改变中心摄像机的安装高度来调节;当导引标线和定位标识位于上述视野左侧边界和右侧边界之间时,中心摄像机采集导引标线和定位标识的有效图像,并输出给导引控制器,用于测量车体中心到导引标线的 横向距离偏差ed2、AGV车体与导引标线的姿态角偏差eθ、AGV中心相对于定位标识的纵向距离偏差eL;射频读卡器读取导引标线上射频标签内的编码信息,并输出给导引控制器,用于计算AGV位于电子地图上的全局位置
Figure BDA0001201478190000031
和绝对姿态角
Figure BDA0001201478190000032
优选地,所述惯性测量单元固定安装于车体顶部,随AGV共同运动时测量车体运动的角加速度α、角速度ω、线加速度a和线速度v,并输出给导引控制器,用于估算车体相对于上一个全局位置的当前全局位置相对于上一个绝对姿态角的当前绝对姿态角
优选地,所述障碍物传感器安装于车体前侧,测量AGV前进方向上障碍物的距离点云数据,并输出给导引控制器,用于计算障碍物轮廓相对于AGV的径向距离和方位角再根据侧向摄像机测量的车体侧向边界到导引标线的横向距离偏差ed1,计算障碍物轮廓边界与两侧导引标线之间的通行区域宽度BP
本发明还提供了一种基于多目视觉和惯导的地标布局方法,包括步骤如下:
在AGV运行区域两侧边界布置导引标线,所述导引标线作为限定AGV运行区域的边界线,即AGV只能在两侧导引标线的中间区域进行导航运动;所述导引标线还作为描述AGV跟踪目标路径的指引线,即AGV能够跟踪导引标线所描述的目标路径进行导引运动;两条导引标线及其中间所围区域定义为区域运行道路,根据道路宽度、AGV宽度及安全距离设置若干运行车道,每个区域运行道路至少包含一条运行车道;仅有一条运行车道的区域运行道路在数字地图上设置为单向运行道路,多台AGV在单向运行道路上串行同向按序行驶;包含两条及以上运行车道的区域运行道路在数字地图上设置为双向运行道路,多台AGV在双向运行道路上分别占据不同运行车道,既能够并行同向超车行驶,也能够并行反向会车行驶;当两条区域运行道路交叉时,一条区域运行道路一侧的导引标线与另一条区域运行道路相邻侧的导引标线通过圆弧标线过渡连接。
优选地,在AGV运行路径上定义多个离散的路径节点,所述路径节点包括工位节点和里程节点,工位节点表示AGV进行装卸操作的移载位置,里程节点表示运行路径上的参考点在电子地图的绝对位置和方向角,路径节点之间的距离根据地图构建需求灵活设置;路径节点通过在导引标线上布置位置重合的定位标识和射频标签来表示,射频标签位于导引标线上方的中心线上,记录节点类型TP、节点编号NP、全局位置
Figure BDA0001201478190000036
绝对方向角
Figure BDA0001201478190000037
绝对方向角
Figure BDA0001201478190000038
的测量基准线与导引标线的切线平行;定位标识位于射频标签上方且两者的中心位置重合、测量基准线平行,通过摄像机测量AGV相对于定位标识的横向距离偏差ed1或ed2、姿态角偏差eθ和纵向距离偏差eL
本发明还提供了一种基于多目视觉和惯导的导引方法,包括步骤如下:
在两侧导引标线的中间区域所进行的区域通行导航以及跟随一侧导引标线所进行的路径跟踪导引;所述路径跟踪导引是AGV通过车体中心垂直向下安装的中心摄像机和车体底部 前方的射频读卡器,近距离跟随导引标线、测量定位标识和识别射频标签进行路径跟踪控制、目标定位控制和全局位姿估计;所述路径跟踪控制是在AGV运行过程中,通过不断消除车体中心到导引标线的横向距离偏差ed2和AGV车体与导引标线的姿态角偏差eθ,使AGV车体位于导引标线上且车体朝向沿导引标线的切线方向;所述目标定位控制是在AGV减速停止过程中,通过不断消除车体中心到导引标线的横向距离偏差ed2、AGV车体与导引标线的姿态角偏差eθ和AGV中心相对于定位标识的纵向距离偏差eL,使AGV停止后车体中心位于定位标识上且车体朝向沿导引标线的切线方向;所述全局位姿估计是根据射频标签在电子地图上的全局位置
Figure BDA0001201478190000041
和绝对方向角
Figure BDA0001201478190000042
计算AGV的全局位置
Figure BDA0001201478190000043
和绝对姿态角
Figure BDA0001201478190000044
当定位标识位于中心摄像机的视野范围内时:
Figure BDA0001201478190000045
当定位标识移出中心摄像机的视野范围后,AGV以线速度v运行时间t时:
优选地,所述区域通行导航是AGV通过车体两侧倾斜向下安装的侧向摄像机和车体顶部的惯性测量单元,在两侧导引标线的中间区域远距离测量导引标线和定位标识,根据数字地图中多个定位标识之间的已知位置关系,间接推算当前进入视野范围内的定位标识所对应的射频标签的全局位置和绝对方向角并根据车体运动的角速度ω和线速度v进行AGV的全局位姿估计,当导引标线和定位标识位于侧向摄像机的视野范围内时采用式(1)进行估计;当导引标线位于侧向摄像机的视野范围内而定位标识移出后,AGV以线速度v运行时间t时采用式(2)进行估计;当导引标线和定位标识都移出侧向摄像机的视野范围后,AGV以角速度ω和线速度v运行时间t时采用式(3)进行估计;
Figure BDA0001201478190000049
通过车体前侧的障碍物传感器测量计算障碍物轮廓相对于AGV的径向距离和方位角
Figure BDA00012014781900000410
并根据车体侧向边界到导引标线的横向距离偏差ed1,计算障碍物轮廓边界与两 侧导引标线之间的通行区域宽度BP,其中WA为AGV车体的宽度;当通行区域宽度BP大于预设值BPmin,导引控制器根据当前全局位姿进行轨迹规划,计算AGV绕开障碍物的目标运行轨迹,并控制AGV跟踪该目标轨迹行驶,从而使AGV由无障碍区域通行而避开障碍物;
Figure BDA0001201478190000051
当多台AGV在单向运行道路上串行同向按序行驶时,根据估计的AGV全局位姿,保持AGV的行驶轨迹始终位于当前运行车道;根据障碍物传感器测量的相对于前一台AGV的径向距离和方位角,控制当前AGV的行驶速度,保持与前一台AGV具有足够的安全距离;
当多台AGV在双向运行道路上并行同向超车行驶时,对于参与超车的两台AGV,根据估计的AGV全局位姿,优先级低的AGV占据右侧运行车道,以低速行驶,优先级高的AGV更换到左侧运行车道,以高速超车;在超车过程中,根据障碍物传感器测量的后一台AGV相对于前一台AGV的径向距离和方位角,控制两台AGV具有足够的安全距离和角度;
当多台AGV在双向运行道路上并行反向会车行驶时,对于参与会车的两台AGV,根据估计的AGV全局位姿,每台AGV占据各自前进方向的右侧运行车道,以中速行驶进行会车;在会车过程中,根据障碍物传感器测量的两台反向行驶的AGV的径向距离和方位角,控制两台AGV具有足够的安全距离和角度。
优选地,AGV的初始导航模式为路径跟踪导引,采用中心摄像机近距离跟随导引标线并通过射频读卡器读取射频标签的全局位置
Figure BDA0001201478190000052
和绝对方向角
Figure BDA0001201478190000053
利用式(1)或式(2)完成初始全局定位;在AGV运行过程中路径跟踪导引与区域通行导航两种模式相互切换,当AGV需要在空间较大、距离较长的区域运行路径中灵活、快速地行驶时,AGV偏离当前的导引标线并向其内侧的中间区域运动,在导引标线移出中心摄像机的视野范围但还未进入侧向摄像机的视野范围这段过渡过程,采用式(3)估计AGV的全局位置
Figure BDA0001201478190000054
和绝对姿态角
Figure BDA0001201478190000055
继续偏离当前的导引标线直至导引标线进入侧向摄像机的视野范围,此时路径跟踪导引切换为区域通行导航;在区域通行导航过程中,AGV根据数字地图中多个定位标识之间的已知位置关系,间接推算当前进入视野范围内的定位标识所对应的射频标签的节点类型TP和节点编号NP,及时发现将要停车进行装卸作业的工位节点或圆弧导引标线前方的里程节点,AGV不断减小车体侧向边界到导引标线的横向距离偏差ed1以趋近导引标线,在导引标线移出侧向摄像机的视野范围但还未进入中心摄像机的视野范围这段过渡过程,采用式(3)估计AGV的全局位置
Figure BDA0001201478190000056
和绝对姿态角继续趋近当前的导引标线直至导引标线进入中心摄像机的视野范围,此时区域通行导航切换为路径跟踪导引,通过路径跟踪完成AGV从一条导引标线向相邻侧的另一条导引标线的圆弧转弯运动,并通过目标定位完成AGV减速停止于需要进行装卸操作的工位节点。
本发明的有益效果:
(一)、将AGV导引方法分为区域通行导航和路径跟踪导引,有利于兼有跨区域的远程运动灵活性和区域内的目标定位精确性。在远离目标工位点的运行道路上无需对导引标线进行精确跟踪,而是保持运动方向的正确性和运动轨迹的灵活性。在靠近目标工位点的运行路径上对导引标线和定位标识进行精确的路径跟踪和目标定位控制。
(二)、分别采用两组摄像机进行视觉导引,有利于兼有侧向摄像机的大视野范围和中心摄像机的高测量精度,以同时满足区域通行导航对AGV远离导引标线的运动灵活性要求和路径跟踪导引对AGV精确沿路径行驶的运动精确性要求。
(三)、采用视觉测量和射频识别相结合的导航方法,通过在导引标线上布置位置重合的定位标识和射频标签来表示路径节点,在获得射频标签的绝对位姿信息的基础上,融合视觉测量的AGV相对于定位标识的相对位姿偏差,可精确估计当定位标识位于摄像机视野范围时AGV的全局位姿。
(四)、采用视觉测量和惯性测量相结合的导航方法,当导引标线和定位标识位于摄像机视野范围时,采用视觉测量直接确定AGV的全局位姿;当导引标线或定位标识不在摄像机视野范围时,采用惯性测量对AGV的运动轨迹进行推算从而估计AGV的全局位姿,有利于兼有视觉测量全局位姿的精确性和惯性测量全局位姿的灵活性。
附图说明
图1为本发明中基于多目视觉和惯导的导引装置的安装主视图;
图2为本发明中基于多目视觉和惯导的导引装置的安装俯视图;
图3为本发明中基于多目视觉和惯导的导引装置的安装侧视图;
图4为本发明中区域通行导航的路径偏差测量示意图;
图5为本发明中路径跟踪导引的路径偏差测量示意图;
图6a为本发明中路径节点的主视图;
图6b为本发明中路径节点的左视图;
图7为本发明中全局定位原理的示意图;
图8为本发明中可通行区域宽度的示意图;
图9为本发明中地标布局的示意图;
图10为本发明中多AGV串行同向按序行驶的示意图;
图11a为本发明中多AGV并行同向超车前的状态示意图;
图11b为本发明中多AGV并行同向超车时的状态示意图;
图11c为本发明中多AGV并行同向超车结束状态的示意图;
图12a为本发明中多AGV并行反向会车前的状态示意图;
图12b为本发明中多AGV并行反向会车时的状态示意图;
图12c为本发明中多AGV并行反向会车结束状态的示意图;
图13为本发明中导引方式的工作原理图;
图中:1-侧向摄像机,2-中心摄像机,3-射频读卡器,4-惯性测量单元,5-障碍物传感器,6-导引控制器,7-导引标线,8-定位标识,9-射频标签。
具体实施方式
为了便于本领域技术人员的理解,下面结合实施例与附图对本发明作进一步的说明,实施方式提及的内容并非对本发明的限定。
参照图1至图3所示,本发明的基于多目视觉和惯导的导引装置,包括:侧向摄像机1、中心摄像机2、射频读卡器3、惯性测量单元4、障碍物传感器5、导引控制器6;其中,侧向摄像机1倾斜向下安装于车体(即自动导引车的车体)左右两侧;中心摄像机2垂直向下安装于车体中心轴线,其视野左侧、右侧边界与车体侧向边界平行,且视野左侧、右侧边界的视野宽度WV可通过改变中心摄像机2的安装高度来调节;射频读卡器3安装于车体底部、处于车体纵向中心线上、且位于中心摄像机2的前方;惯性测量单元4安装于车体顶部;障碍物传感器5安装于车体前侧;导引控制器6设置在车箱体内部,并与上述各部件的信号输出端进行电连接。
如图4所示,侧向摄像机1安装于车体左右两侧,并与水平地面成一定倾角,其视野下侧边界与车体侧向边界平行,且上述两边界间的距离S可通过改变侧向摄像机1的安装高度和倾角来调节;当导引标线7和定位标识8位于上述视野上侧边界和下侧边界之间时,侧向摄像机1可采集导引标线7和定位标识8的有效图像,并输出给导引控制器6,通过导引控制器6对有效图像进行图像处理,测量车体侧向边界到导引标线7的横向距离偏差ed1、AGV(自动导引车)车体与导引标线7的姿态角偏差eθ、AGV中心相对于定位标识8的纵向距离偏差eL
如图5所示,中心摄像机2采集车体下方的导引标线7和定为标识8的有效图像,并输出给导引控制器6,通过导引控制器6对有效图像进行图像处理,测量车体中心到导引标线7的距离ed2、AGV车体与导引标线7的姿态角eθ、AGV中心相对于定位标识8的纵向距离偏差eL
如图6a、图6b所示,路径节点通过在有色的导引标线7上布置位置重合的有色的定位标识8和射频标签9来表示,为了方便识别,导引标线7和定位标识8可采用不同的颜色。所述射频标签9位于导引标线7上方的中心线上,记录节点类型TP、节点编号NP、全局位置
Figure BDA0001201478190000071
绝对方向角
Figure BDA0001201478190000072
所述绝对方向角
Figure BDA0001201478190000073
的测量基准线与导引标线7的切线平行;所述定位标识8位于射频标签9上方且两者的中心位置重合、测量基准线平行,通过侧向摄像 机1、中心摄像机2可测量AGV相对于定位标识8的横向距离偏差ed1或ed2、姿态角偏差eθ和纵向距离偏差eL
射频读卡器3读取车身下方导引标线7上射频标签9内的编码信息,并输出给导引控制器6,根据路径节点在电子地图上的全局位置
Figure BDA0001201478190000081
和绝对方向角
Figure BDA0001201478190000082
计算AGV位于电子地图上的全局位置和绝对姿态角这一过程称为AGV全局位姿估计。
AGV全局位姿估计分为三种情况:第一种情况是导引标线7位于中心摄像机2的视野范围内,如图5所示。当导引标线7和定位标识8都位于中心摄像机2的视野范围内时,AGV的全局位姿可由式(1)计算,如下:
Figure BDA0001201478190000085
当导引标线7位于中心摄像机2的视野范围内而定位标识8移出后,AGV以线速度v运行时间t时,AGV的全局位姿可由式(2)计算,如下:
Figure BDA0001201478190000086
第二种情况是导引标线7位于侧向摄像机1的视野范围内,如图4和7所示。当导引标线7和定位标识8位于侧向摄像机1的视野范围内时采用式(1)进行估计;当导引标线7位于侧向摄像机1的视野范围内而定位标识8移出后,AGV以线速度v运行时间t时采用式(2)进行估计。
第三种情况是导引标线7位于侧向摄像机1和中心摄像机2的视野范围外,如图7所示。当导引标线7和定位标识8都移出侧向摄像机1的视野范围后,AGV以角速度ω和线速度v运行时间t时采用式(3)进行估计,如下:
Figure BDA0001201478190000087
如图8所示,通过车体前侧的障碍物传感器5测量计算障碍物轮廓相对于AGV的径向距离和方位角
Figure BDA0001201478190000088
并根据车体侧向边界到导引标线7的横向距离偏差ed1,计算障碍物轮廓边界与两侧导引标线7之间的通行区域宽度BP,其中WA为AGV车体的宽度;当通行区域宽度BP大于预设值BPmin,AGV即可从无障碍区域通行而避开障碍物;
如图9所示,本发明的一种基于多目视觉和惯导的地标布局方法,具体实施为:在AGV运行区域两侧边界布置导引标线,所述导引标线作为限定AGV运行区域的边界线,即AGV只能在两侧导引标线的中间区域进行导航运动;所述导引标线还作为描述AGV跟踪目标路径的指引线,即AGV能够跟踪导引标线所描述的目标路径进行导引运动;两条导引标线及其中间所围区域定义为区域运行道路,根据道路宽度、AGV宽度及安全距离设置若干运行车道,每个区域运行道路至少包含一条运行车道;当两条区域运行道路交叉时,一条区域运行道路一侧的导引标线与另一条区域运行道路相邻侧的导引标线通过圆弧标线过渡连接。
在AGV运行路径上定义多个离散的路径节点,所述路径节点包括工位节点和里程节点,工位节点表示AGV进行装卸操作的移载位置,里程节点表示运行路径上的参考点在电子地图的绝对位置和方向角,节点之间的距离根据地图构建需求灵活设置。
仅有一条运行车道的区域运行道路在数字地图上设置为单向运行道路,多台AGV在单向运行道路上串行同向按序行驶。如图10所示,两台AGV沿同一条区域运行道路同向行驶,1号AGV的行驶速度v1与2号AGV的行驶速度v2方向相同。由于该区域运行道路只有一条运行车道,1号AGV必须跟随在2号AGV之后,无法超越2号AGV。1号AGV通过障碍物传感器5测量相对于2号AGV的径向距离和方位角,控制1号AGV的行驶速度v1,与2号AGV保持足够的安全距离。
包含两条及以上运行车道的区域运行道路在数字地图上设置为双向运行道路,多台AGV在双向运行道路上分别占据不同运行车道。如图11a所示,两台AGV沿同一条区域运行道路同向行驶,1号AGV的行驶速度v1与2号AGV的行驶速度v2方向相同,1号AGV的优先级高于2号AGV,但2号AGV位于1号AGV的前方;如图11b所示,由于该区域运行道路包含两条运行车道,2号AGV向右行驶并占据右侧运行车道,1号AGV向左行驶并占据左侧车道,两台AGV分别占据两条运行车道并行同向行驶,1号AGV的行驶速度v1大于2号AGV的行驶速度v2,从左侧车道超越占据右侧车道的2号AGV;1号AGV通过障碍物传感器5测量相对于2号AGV的径向距离和方位角,与2号AGV保持足够的安全距离和角度;如图11c所示,当1号AGV超越2号AGV并保持足够的安全距离后,2号AGV向左行驶并回到区域运行道路的中间位置,1号AGV向右行驶也回到区域运行道路的中间位置,并行同向超车过程结束。
如图12a所示,两台AGV沿同一条区域运行道路反向行驶,1号AGV的行驶速度v1与2号AGV的行驶速度v2方向相反;如图12b所示,由于该区域运行道路包含两条运行车道,1号AGV向右行驶并占据其前进方向的右侧运行车道,2号AGV也向右行驶并占据前进方向的右侧车道,两台AGV分别占据两条运行车道并行反向行驶,相互接近后进行两车交会; 在会车过程中,两台AGV分别通过障碍物传感器5测量两者的径向距离和方位角,控制两台AGV的全局位姿以保持两者具有足够的安全距离和角度;如图12c所示,当1号AGV和2号AGV离开会车位置并保持足够的安全距离后,2号AGV向左行驶并回到区域运行道路的中间位置,1号AGV向左行驶也回到区域运行道路的中间位置,并行反向会车过程结束。
如图13所示,本发明的一种基于多目视觉和惯导的导引方法,包括如下:在两侧导引标线的中间区域所进行的区域通行导航以及跟随一侧导引标线所进行的路径跟踪导引;路径跟踪导引是AGV通过车体中心垂直向下安装的中心摄像机2和车体底部前方的射频读卡器3,近距离跟随导引标线7、测量定位标识8和识别射频标签9进行路径跟踪控制、目标定位控制和全局位姿估计。
如图5所示,路径跟踪控制是在AGV运行过程中,通过不断消除车体中心到导引标线7的横向距离偏差ed2和AGV车体与导引标线7的姿态角偏差eθ,使AGV车体位于导引标线7上且车体朝向沿导引标线7的切线方向。所述目标定位控制是在AGV减速停止过程中,通过不断消除车体中心到导引标线7的横向距离偏差ed2、AGV车体与导引标线7的姿态角偏差eθ和AGV中心相对于定位标识8的纵向距离偏差eL,使AGV停止后车体中心位于定位标识8上且车体朝向沿导引标线7的切线方向。
区域通行导航是AGV通过车体两侧倾斜向下安装的侧向摄像机1和车体顶部的惯性测量单元4,在两侧导引标线7的中间区域远距离测量导引标线7和定位标识8,根据数字地图中多个定位标识8之间的已知位置关系,间接推算当前进入视野范围内的定位标识8所对应的射频标签9的全局位置
Figure BDA0001201478190000101
和绝对方向角
Figure BDA0001201478190000102
并根据车体运动的角速度ω和线速度v进行AGV的全局位姿估计。
通过车体前侧的障碍物传感器5计算障碍物轮廓边界与两侧导引标线7之间的通行区域宽度BP,导引控制器6根据当前全局位姿进行轨迹规划,计算AGV绕开障碍物的目标运行轨迹,并控制AGV跟踪该目标运行轨迹行驶,从而使AGV由无障碍区域通行而避开障碍物。
当AGV需要从某一运行车道变换到其他运行车道时,导引控制器6根据侧向摄像机1对导引标线7和定位标识8的视觉测量结果、惯性测量单元4对车体角速度ω和线速度v的运动测量结果,在线计算AGV的实时全局位姿,并在数字地图上计算变换车道的目标运行轨迹,再控制AGV跟踪该目标运行轨迹行驶,完成从当前运行车道向其他运行车道的变换。
如图13所示,实施例中具体表现为:
1)AGV的初始导航模式为路径跟踪导引,采用中心摄像机2近距离跟随导引标线7并通过射频读卡器3读取射频标签9的全局位置
Figure BDA0001201478190000103
和绝对方向角
Figure BDA0001201478190000104
利用式(1)或式(2)计算出全局位置和绝对姿态角
Figure BDA0001201478190000106
完成初始全局定位。在AGV运行过程中路径跟踪导引与区域通行导航两种模式可相互切换;
式(1)如下:
Figure BDA0001201478190000111
式(2)如下:
Figure BDA0001201478190000112
2)AGV离开起始点后,结合车载电子地图中的既定路径规划,当AGV需要在空间较大、距离较长的区域运行路径中灵活、快速地行驶时,通过改变绝对姿态角
Figure BDA0001201478190000113
使AGV偏离当前的导引标线7并向其内侧的中间区域运动。
3)在导引标线7移出中心摄像机2的视野范围但还未进入侧向摄像机1的视野范围这段过渡过程,惯性测量单元4实时测量车体运动的角加速度α、角速度ω、线加速度a和线速度v,并输出给导引控制器6,利用式(3)估计AGV的全局位置
Figure BDA0001201478190000114
和绝对姿态角
Figure BDA0001201478190000115
继续偏离当前的导引标线7直至导引标线7进入侧向摄像机1的视野范围,此时路径跟踪导引切换为区域通行导航;
式(3)如下:
4)在区域通行导航阶段,AGV以角速度ω和线速度v运行时间t时,在定位标识8未进入侧向摄像机1时,侧向摄像机1实时采集车体两侧较远距离的导引标线7的有效图像,并输出给导引控制器6,通过导引控制器6对有效图像进行图像处理,测量车体侧向边界到导引标线7的横向距离偏差ed1、AGV车体与导引标线7的姿态角偏差eθ,并根据车体运动的角速度ω和线速度v,采用上述式(2)进行AGV的全局位姿估计。
5)在区域通行导航过程中,通过车体前侧的障碍物传感器5测量计算障碍物轮廓相对于AGV的径向距离和方位角并根据车体侧向边界到导引标线7的横向距离偏差ed1,采用式(4)计算障碍物轮廓边界与两侧导引标线7之间的可通行区域宽度BP,其中WA为AGV车体的宽度;当通行区域宽度BP大于预设值BPmin,AGV即可从无障碍区域通行而避开障碍物;
式(4)如下:
Figure BDA0001201478190000121
6)在区域通行导航过程中,当多台AGV在单向运行道路上串行同向按序行驶时,根据估计的AGV全局位姿,保持AGV的行驶轨迹始终位于当前运行车道;当多台AGV在双向运行道路上并行同向超车行驶时,优先级低的AGV占据右侧运行车道,以低速行驶,优先级高的AGV更换到左侧运行车道,以高速超车;当多台AGV在双向运行道路上并行反向会车行驶时,每台AGV占据各自前进方向的右侧运行车道,以中速行驶进行会车。
7)在区域通行导航过程中,若侧向摄像机1视野内检测到定位标识8,并输出到导引控制器6,通过图像处理,测量AGV中心相对于定位标识8的纵向距离偏差eL,并根据车载电子地图中多个定位标识8之间的已知位置关系,间接推算当前进入视野范围内的定位标识8所对应的射频标签9的节点类型TP、节点编号NP、全局位置
Figure BDA0001201478190000122
和绝对方向角采用上述式(1)估计AGV的全局位置
Figure BDA0001201478190000124
和绝对姿态角
Figure BDA0001201478190000125
并及时发现将要停车进行装卸作业的工位节点或圆弧导引标线前方的里程节点,AGV不断减小车体侧向边界到导引标线7的横向距离偏差ed1以趋近导引标线7,从区域通行导航模式向路径跟踪导引切换。
8)在导引标线7移出侧向摄像机1的视野范围但还未进入中心摄像机2的视野范围这段过渡过程,与步骤3)同理,当导引标线7进入中心摄像机2的视野范围,此时区域通行导航切换为路径跟踪导引。
9)在路径跟踪导引过程中,通过导引控制器6对连续的导引标线7进行图像处理,不间断测量车体中心到导引标线7的距离ed2、AGV车体与导引标线7的姿态角eθ;通过导引控制器6对离散的定位标识8进行图像处理,间隔测量AGV中心相对于定位标识8的局部位置YL;通过射频读卡器3读取离散的射频标签9内的编码信息,间隔获取工位节点和里程节点的全局位置和绝对方向角
Figure BDA0001201478190000127
根据以上导引信息,AGV的路径跟踪导引可完成以下任务:(a)跟踪圆弧路径进行转弯:通过路径跟踪完成AGV从一条导引标线向相邻侧的另一条导引标线的圆弧转弯运动;(b)工位节点停车:通过目标定位完成AGV减速停止于需要进行装卸操作的工位节点。
本发明具体应用途径很多,以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以作出若干改进,这些改进也应视为本发明的保护范围。

Claims (10)

1.一种基于多目视觉和惯导的导引装置,其特征在于,包括:倾斜向下安装于车体两侧的侧向摄像机、垂直向下安装于车体中心的中心摄像机、安装于车体底部的射频读卡器、安装于车体顶部的惯性测量单元、安装于车体前侧的障碍物传感器、以及与上述各部件的信号输出端进行电连接的导引控制器;
所述侧向摄像机用于识别并测量车体两侧较远位置处的导引标线和定位标识;
所述中心摄像机用于识别并测量车体正下方位置处的导引标线和定位标识;
所述射频读卡器用于识别导引标线上的射频标签;
所述惯性测量单元用于测量车体运动的角加速度、角速度、线加速度和线速度;
所述障碍物传感器用于测量障碍物的距离点云数据;
所述导引控制器内存储有AGV运行环境的数字地图,通过采集上述各部件的输出信息,计算AGV的位置和姿态、障碍物的轮廓和距离、以及AGV导航的运行路径和定位目标点信息;
在AGV运行区域两侧边界布置导引标线,所述导引标线作为限定AGV运行区域的边界线,即AGV只能在两侧导引标线的中间区域进行导航运动;所述导引标线还作为描述AGV跟踪目标路径的指引线,即AGV能够跟踪导引标线所描述的目标路径进行导引运动。
2.根据权利要求1所述的基于多目视觉和惯导的导引装置,其特征在于,所述侧向摄像机安装于车体左右两侧,并与水平地面成一定倾角,其视野下侧边界与车体侧向边界平行,且上述两边界间的距离S通过改变侧向摄像机的安装高度和倾角来调节;当导引标线和定位标识位于上述视野上侧边界和下侧边界之间时,侧向摄像机采集导引标线和定位标识的有效图像,并输出给导引控制器,用于测量车体侧向边界到导引标线的横向距离偏差ed1、AGV车体与导引标线的姿态角偏差eθ、AGV中心相对于定位标识的纵向距离偏差eL
3.根据权利要求1所述的基于多目视觉和惯导的导引装置,其特征在于,所述中心摄像机垂直向下安装于车体中心,所述射频读卡器安装于车体底部、处于车体纵向中心线上、且位于中心摄像机的前方;所述中心摄像机的视野左侧、右侧边界与车体侧向边界平行,所述视野左侧、右侧边界的视野宽度WV通过改变中心摄像机的安装高度来调节;当导引标线和定位标识位于上述视野左侧边界和右侧边界之间时,中心摄像机采集导引标线和定位标识的有效图像,并输出给导引控制器,用于测量车体中心到导引标线的横向距离偏差ed2、AGV车体与导引标线的姿态角偏差eθ、AGV中心相对于定位标识的纵向距离偏差eL;射频读卡器读取导引标线上射频标签内的编码信息,并输出给导引控制器,用于计算AGV位于电子地图上的全局位置和绝对姿态角
Figure FDA0002235444260000012
4.根据权利要求1所述的基于多目视觉和惯导的导引装置,其特征在于,所述惯性测量单元固定安装于车体顶部,随AGV共同运动时测量车体运动的角加速度α、角速度ω、线加速度a和线速度v,并输出给导引控制器,用于估算车体相对于上一个全局位置的当前全局位置相对于上一个绝对姿态角的当前绝对姿态角
Figure FDA0002235444260000022
5.根据权利要求1所述的基于多目视觉和惯导的导引装置,其特征在于,所述障碍物传感器安装于车体前侧,测量AGV前进方向上障碍物的距离点云数据,并输出给导引控制器,用于计算障碍物轮廓相对于AGV的径向距离和方位角
Figure FDA0002235444260000023
再根据侧向摄像机测量的车体侧向边界到导引标线的横向距离偏差ed1,计算障碍物轮廓边界与两侧导引标线之间的通行区域宽度BP
6.一种基于多目视觉和惯导的地标布局方法,其特征在于,包括步骤如下:
在AGV运行区域两侧边界布置导引标线,所述导引标线作为限定AGV运行区域的边界线,即AGV只能在两侧导引标线的中间区域进行导航运动;所述导引标线还作为描述AGV跟踪目标路径的指引线,即AGV能够跟踪导引标线所描述的目标路径进行导引运动;两条导引标线及其中间所围区域定义为区域运行道路,根据道路宽度、AGV宽度及安全距离设置若干运行车道,每个区域运行道路至少包含一条运行车道;仅有一条运行车道的区域运行道路在数字地图上设置为单向运行道路,多台AGV在单向运行道路上串行同向按序行驶;包含两条及以上运行车道的区域运行道路在数字地图上设置为双向运行道路,多台AGV在双向运行道路上分别占据不同运行车道,既能够并行同向超车行驶,也能够并行反向会车行驶;当两条区域运行道路交叉时,一条区域运行道路一侧的导引标线与另一条区域运行道路相邻侧的导引标线通过圆弧标线过渡连接。
7.根据权利要求6所述的基于多目视觉和惯导的地标布局方法,其特征在于,在AGV运行路径上定义多个离散的路径节点,所述路径节点包括工位节点和里程节点,工位节点表示AGV进行装卸操作的移载位置,里程节点表示运行路径上的参考点在电子地图的绝对位置和方向角,路径节点之间的距离根据地图构建需求灵活设置;路径节点通过在导引标线上布置位置重合的定位标识和射频标签来表示,射频标签位于导引标线上方的中心线上,记录节点类型TP、节点编号NP、全局位置
Figure FDA0002235444260000024
绝对方向角
Figure FDA0002235444260000025
绝对方向角
Figure FDA0002235444260000026
的测量基准线与导引标线的切线平行;定位标识位于射频标签上方且两者的中心位置重合、测量基准线平行,通过摄像机测量AGV相对于定位标识的横向距离偏差ed1或ed2、姿态角偏差eθ和纵向距离偏差eL
8.一种基于多目视觉和惯导的导引方法,其特征在于,包括步骤如下:
在两侧导引标线的中间区域所进行的区域通行导航以及跟随一侧导引标线所进行的路径跟踪导引;所述路径跟踪导引是AGV通过车体中心垂直向下安装的中心摄像机和车体底部前方的射频读卡器,近距离跟随导引标线、测量定位标识和识别射频标签进行路径跟踪控制、目标定位控制和全局位姿估计;所述路径跟踪控制是在AGV运行过程中,通过不断消除车体中心到导引标线的横向距离偏差ed2和AGV车体与导引标线的姿态角偏差eθ,使AGV车体位于导引标线上且车体朝向沿导引标线的切线方向;所述目标定位控制是在AGV减速停止过程中,通过不断消除车体中心到导引标线的横向距离偏差ed2、AGV车体与导引标线的姿态角偏差eθ和AGV中心相对于定位标识的纵向距离偏差eL,使AGV停止后车体中心位于定位标识上且车体朝向沿导引标线的切线方向;所述全局位姿估计是根据射频标签在电子地图上的全局位置
Figure FDA0002235444260000031
和绝对方向角
Figure FDA0002235444260000032
计算AGV的全局位置
Figure FDA0002235444260000033
和绝对姿态角
Figure FDA0002235444260000034
当定位标识位于中心摄像机的视野范围内时:
Figure FDA0002235444260000035
当定位标识移出中心摄像机的视野范围后,AGV以线速度v运行时间t时:
9.根据权利要求8所述的基于多目视觉和惯导的导引方法,其特征在于,所述区域通行导航是AGV通过车体两侧倾斜向下安装的侧向摄像机和车体顶部的惯性测量单元,在两侧导引标线的中间区域远距离测量导引标线和定位标识,根据数字地图中多个定位标识之间的已知位置关系,间接推算当前进入视野范围内的定位标识所对应的射频标签的全局位置和绝对方向角
Figure FDA0002235444260000038
并根据车体运动的角速度ω和线速度v进行AGV的全局位姿估计,当导引标线和定位标识位于侧向摄像机的视野范围内时采用式(1)进行估计;当导引标线位于侧向摄像机的视野范围内而定位标识移出后,AGV以线速度v运行时间t时采用式(2)进行估计;当导引标线和定位标识都移出侧向摄像机的视野范围后,AGV以角速度ω和线速度v运行时间t时采用式(3)进行估计;
Figure FDA0002235444260000039
通过车体前侧的障碍物传感器测量计算障碍物轮廓相对于AGV的径向距离和方位角
Figure FDA00022354442600000310
并根据车体侧向边界到导引标线的横向距离偏差ed1,计算障碍物轮廓边界与两侧导引标线之间的通行区域宽度BP,其中WA为AGV车体的宽度;当通行区域宽度BP大于预设值BPmin,导引控制器根据当前全局位姿进行轨迹规划,计算AGV绕开障碍物的目标运行轨迹,并控制AGV跟踪该目标轨迹行驶,从而使AGV由无障碍区域通行而避开障碍物;
Figure FDA0002235444260000041
当多台AGV在单向运行道路上串行同向按序行驶时,根据估计的AGV全局位姿,保持AGV的行驶轨迹始终位于当前运行车道;根据障碍物传感器测量的相对于前一台AGV的径向距离和方位角,控制当前AGV的行驶速度,保持与前一台AGV具有足够的安全距离;
当多台AGV在双向运行道路上并行同向超车行驶时,对于参与超车的两台AGV,根据估计的AGV全局位姿,优先级低的AGV占据右侧运行车道,以低速行驶,优先级高的AGV更换到左侧运行车道,以高速超车;在超车过程中,根据障碍物传感器测量的后一台AGV相对于前一台AGV的径向距离和方位角,控制两台AGV具有足够的安全距离和角度;
当多台AGV在双向运行道路上并行反向会车行驶时,对于参与会车的两台AGV,根据估计的AGV全局位姿,每台AGV占据各自前进方向的右侧运行车道,以中速行驶进行会车;在会车过程中,根据障碍物传感器测量的两台反向行驶的AGV的径向距离和方位角,控制两台AGV具有足够的安全距离和角度。
10.根据权利要求9所述的基于多目视觉和惯导的导引方法,其特征在于,AGV的初始导航模式为路径跟踪导引,采用中心摄像机近距离跟随导引标线并通过射频读卡器读取射频标签的全局位置和绝对方向角利用式(1)或式(2)完成初始全局定位;在AGV运行过程中路径跟踪导引与区域通行导航两种模式相互切换,当AGV需要在空间较大、距离较长的区域运行路径中灵活、快速地行驶时,AGV偏离当前的导引标线并向其内侧的中间区域运动,在导引标线移出中心摄像机的视野范围但还未进入侧向摄像机的视野范围这段过渡过程,采用式(3)估计AGV的全局位置
Figure FDA0002235444260000044
和绝对姿态角
Figure FDA0002235444260000045
继续偏离当前的导引标线直至导引标线进入侧向摄像机的视野范围,此时路径跟踪导引切换为区域通行导航;在区域通行导航过程中,AGV根据数字地图中多个定位标识之间的已知位置关系,间接推算当前进入视野范围内的定位标识所对应的射频标签的节点类型TP和节点编号NP,及时发现将要停车进行装卸作业的工位节点或圆弧导引标线前方的里程节点,AGV不断减小车体侧向边界到导引标线的横向距离偏差ed1以趋近导引标线,在导引标线移出侧向摄像机的视野范围但还未进入中心摄像机的视野范围这段过渡过程,采用式(3)估计AGV的全局位置
Figure FDA0002235444260000046
和绝对姿态角
Figure FDA0002235444260000047
继续趋近当前的导引标线直至导引标线进入中心摄像机的视野范围,此时区域通行导航切换为路径跟踪导引,通过路径跟踪完成AGV从一条导引标线向相邻侧的另一条导引标线的圆弧转弯运动,并通过目标定位完成AGV减速停止于需要进行装卸操作的工位节点。
CN201710001270.8A 2017-01-03 2017-01-03 基于多目视觉和惯导的导引装置、地标布局及导引方法 Active CN106774335B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710001270.8A CN106774335B (zh) 2017-01-03 2017-01-03 基于多目视觉和惯导的导引装置、地标布局及导引方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710001270.8A CN106774335B (zh) 2017-01-03 2017-01-03 基于多目视觉和惯导的导引装置、地标布局及导引方法

Publications (2)

Publication Number Publication Date
CN106774335A CN106774335A (zh) 2017-05-31
CN106774335B true CN106774335B (zh) 2020-01-21

Family

ID=58952888

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710001270.8A Active CN106774335B (zh) 2017-01-03 2017-01-03 基于多目视觉和惯导的导引装置、地标布局及导引方法

Country Status (1)

Country Link
CN (1) CN106774335B (zh)

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10222803B2 (en) * 2017-06-02 2019-03-05 Aptiv Technologies Limited Determining objects of interest for active cruise control
CN107300919B (zh) * 2017-06-22 2021-06-15 中国科学院深圳先进技术研究院 一种机器人及其行进控制方法
CN107368072A (zh) * 2017-07-25 2017-11-21 哈尔滨工大特种机器人有限公司 一种基于地图可配置的agv运行控制系统及路径规划方法
CN108426576B (zh) * 2017-09-15 2021-05-28 辽宁科技大学 基于标识点视觉导航与sins的飞行器路径规划方法及系统
DE102017217391A1 (de) * 2017-09-29 2019-04-04 Zf Friedrichshafen Ag Landwirtschaftliches Arbeitsfahrzeug
CN109582011A (zh) * 2017-09-29 2019-04-05 凌子龙 一种地标定位的机器人系统及其使用的地标和机器人和机器人地标定位方法
CN107817803A (zh) * 2017-11-14 2018-03-20 上海诺力智能科技有限公司 一种适用于agv的二次精确定位的控制系统及其控制方法
DE212018000352U1 (de) * 2017-11-16 2020-08-20 Positec Power Tools (Suzhou) Co., Ltd Sich autonom bewegendes Gerätearbeitssystem
CN109927721B (zh) * 2017-12-18 2020-10-27 华创车电技术中心股份有限公司 车道维持追随系统
CN107829359A (zh) * 2017-12-19 2018-03-23 成都圭目机器人有限公司 一种自主标线检测机器人系统
CN108153310B (zh) * 2017-12-22 2020-11-13 南开大学 一种基于人类行为模拟的移动机器人实时运动规划方法
CN109960145B (zh) * 2017-12-22 2022-06-14 天津工业大学 移动机器人混合视觉轨迹跟踪策略
CN108279026A (zh) * 2018-01-19 2018-07-13 浙江科钛机器人股份有限公司 一种基于t型rfid信标的agv惯性导航系统及方法
CN108594800B (zh) * 2018-01-19 2021-07-06 浙江科钛机器人股份有限公司 一种融合磁传感器和陀螺仪数据的agv复合导航系统及方法
CN108052107B (zh) * 2018-01-19 2020-11-24 浙江科钛机器人股份有限公司 一种融合磁条、磁钉和惯导的agv室内外复合导航系统及方法
CN108268044B (zh) * 2018-01-31 2021-06-22 浙江国自机器人技术股份有限公司 一种移动机器人到位精度控制方法、系统、介质及设备
CN108312978A (zh) * 2018-03-14 2018-07-24 上海托华机器人有限公司 用于agv小车的抗光线干扰的底盘结构及agv小车
KR102420476B1 (ko) * 2018-05-25 2022-07-13 에스케이텔레콤 주식회사 차량의 위치 추정 장치, 차량의 위치 추정 방법, 및 이러한 방법을 수행하도록 프로그램된 컴퓨터 프로그램을 저장하는 컴퓨터 판독가능한 기록매체
CN109032129B (zh) * 2018-06-21 2021-07-27 昆山华恒工程技术中心有限公司 路径纠偏方法及装置、路径导引方法、可读介质
CN109032130B (zh) * 2018-06-22 2021-08-27 青岛港国际股份有限公司 一种自动化码头磁钉检修方法和系统
CN109099901B (zh) * 2018-06-26 2021-09-24 中科微易(苏州)智能科技有限公司 基于多源数据融合的全自动压路机定位方法
CN110375752B (zh) * 2018-08-29 2021-12-07 北京京东乾石科技有限公司 一种生成导航点的方法和装置
CN110926469B (zh) * 2018-08-31 2021-09-17 杭州海康机器人技术有限公司 控制移动机器人、移动机器人实时建图的方法及装置
CN109506650B (zh) * 2018-09-12 2020-12-04 广东嘉腾机器人自动化有限公司 基于bp网络的agv导航行程偏差修正方法
US11560153B2 (en) 2019-03-07 2023-01-24 6 River Systems, Llc Systems and methods for collision avoidance by autonomous vehicles
CN111665828A (zh) * 2019-03-08 2020-09-15 深圳市速腾聚创科技有限公司 车辆感应方法、装置、计算机设备和存储介质
CN110146094A (zh) * 2019-06-27 2019-08-20 成都圭目机器人有限公司 基于车道线的机器人定位导航系统及其实现方法
CN110471409B (zh) * 2019-07-11 2022-12-02 深圳市优必选科技股份有限公司 机器人巡检方法、装置、计算机可读存储介质及机器人
CN112466111B (zh) * 2019-09-09 2022-12-27 北京京东乾石科技有限公司 一种车辆行驶控制方法、装置、存储介质及电子设备
CN113128243A (zh) * 2019-12-31 2021-07-16 苏州协尔智能光电有限公司 光学识别系统、光学识别方法及电子设备
CN111242986B (zh) * 2020-01-07 2023-11-24 阿波罗智能技术(北京)有限公司 跨相机的障碍物跟踪方法、装置、设备、系统及介质
CN112461226B (zh) * 2020-03-23 2023-05-09 丰疆智能科技股份有限公司 基于视觉的室内导航系统和室内导航方法
CN111427360B (zh) * 2020-04-20 2023-05-05 珠海一微半导体股份有限公司 基于地标定位的地图构建方法、机器人及机器人导航系统
CN111309035B (zh) * 2020-05-14 2022-03-04 浙江远传信息技术股份有限公司 多机器人协同移动与动态避障方法、装置、设备及介质
CN111766873B (zh) * 2020-06-12 2023-12-05 广州极飞科技股份有限公司 作业设备的引导方法及相关装置
CN111538343B (zh) * 2020-06-22 2020-09-25 天津联汇智造科技有限公司 一种机器人设置交通规则的系统、方法及存储介质
CN111813109A (zh) * 2020-06-24 2020-10-23 江苏理工学院 一种agv小车导航装置及其导航方法
CN111959638A (zh) * 2020-08-25 2020-11-20 湖北师范大学 一种定位系统
CN114167851B (zh) * 2020-09-10 2024-04-30 北京极智嘉科技股份有限公司 机器人以及机器人行进方法
CN112269377B (zh) * 2020-09-15 2024-05-14 北京旷视机器人技术有限公司 搬运设备的行驶控制方法和装置及电子系统
CN112551195B (zh) * 2020-11-25 2023-05-26 深圳市镭神智能系统有限公司 车辆与登车桥对接的方法及月台管理系统
CN113218403B (zh) * 2021-05-14 2022-09-09 哈尔滨工程大学 惯性视觉组合式定位的agv系统
CN113625713B (zh) * 2021-08-11 2024-04-16 北京京东振世信息技术有限公司 自动引导运输车的控制方法和装置
CN115113631B (zh) * 2022-08-29 2022-12-06 科安特(山东)智能装备有限公司 一种可提高作业精度的agv小车视觉自检方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102508489A (zh) * 2011-09-28 2012-06-20 山东电力集团公司临沂供电公司 电动汽车充换电站车辆导引系统及导引方法
CN105774801A (zh) * 2014-12-22 2016-07-20 罗伯特·博世有限公司 用于引导车道上的车辆的方法和设备
CN105928514A (zh) * 2016-04-14 2016-09-07 广州智能装备研究院有限公司 基于图像与惯性技术的agv复合导引系统
CN106054900A (zh) * 2016-08-08 2016-10-26 电子科技大学 基于深度摄像头的机器人临时避障方法

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102608998A (zh) * 2011-12-23 2012-07-25 南京航空航天大学 嵌入式系统的视觉导引agv系统及方法
DE102012206211A1 (de) * 2012-04-16 2013-10-17 Robert Bosch Gmbh Verfahren und Vorrichtung zum Bestimmen eines Spuranpassungsparameters für ein Spurhaltesystem eines Fahrzeugs sowie Verfahren und Vorrichtung zur Spurführung eines Fahrzeugs
CN104166400B (zh) * 2014-07-11 2017-02-22 杭州精久科技有限公司 基于多传感器融合的视觉导引agv系统
CN105511462B (zh) * 2015-11-30 2018-04-27 北京卫星制造厂 一种基于视觉的agv导航方法
CN106054886B (zh) * 2016-06-27 2019-03-26 常熟理工学院 基于可见光图像的自动导引运输车路线识别及控制方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102508489A (zh) * 2011-09-28 2012-06-20 山东电力集团公司临沂供电公司 电动汽车充换电站车辆导引系统及导引方法
CN105774801A (zh) * 2014-12-22 2016-07-20 罗伯特·博世有限公司 用于引导车道上的车辆的方法和设备
CN105928514A (zh) * 2016-04-14 2016-09-07 广州智能装备研究院有限公司 基于图像与惯性技术的agv复合导引系统
CN106054900A (zh) * 2016-08-08 2016-10-26 电子科技大学 基于深度摄像头的机器人临时避障方法

Also Published As

Publication number Publication date
CN106774335A (zh) 2017-05-31

Similar Documents

Publication Publication Date Title
CN106774335B (zh) 基于多目视觉和惯导的导引装置、地标布局及导引方法
US11755024B2 (en) Navigation by augmented path prediction
US11148664B2 (en) Navigation in vehicle crossing scenarios
US11982540B2 (en) Infrastructure mapping and layered output
US20220001872A1 (en) Semantic lane description
CN111076731B (zh) 自动驾驶高精定位与路径规划方法
CN104679004B (zh) 柔性路径与固定路径相结合的自动导引车及其导引方法
JP2022553491A (ja) 車両ナビゲーション用のシステムおよび方法
KR102091580B1 (ko) 이동식 도면화 시스템을 이용한 도로 표지 정보 수집 방법
US20220282989A1 (en) Fully aligned junctions
WO2018015811A1 (en) Crowdsourcing and distributing a sparse map, and lane measurements for autonomous vehicle navigation
US20230159050A1 (en) Systems and methods for vehicle speed and lateral position control
WO2020174279A2 (en) Systems and methods for vehicle navigation
CN106990781A (zh) 基于激光雷达和图像信息的自动化码头agv定位方法
CN112731922A (zh) 基于室内定位的无人机辅助智能车驾驶方法与系统
WO2022226479A1 (en) Methods and systems for inferring unpainted stop lines for autonomous vehicles
CN112462762B (zh) 一种基于路侧二维码单元的机器人室外自主移动系统及其方法
US20230136710A1 (en) Systems and methods for harvesting images for vehicle navigation
CN207367055U (zh) 一种基于单目视觉与多传感器融合的引导装置
CN110109460B (zh) 一种基于十字码的agv小车导航系统
CN117685967A (zh) 一种多模态融合导航方法
Tanimoto et al. Mobile robot's navigation based on road segmentation and route evaluation
WO2024015564A1 (en) Registration of traffic signs' feature vectors in remote server

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant