CN104570771A - 基于场景-拓扑的自主定位方法的巡检机器人 - Google Patents

基于场景-拓扑的自主定位方法的巡检机器人 Download PDF

Info

Publication number
CN104570771A
CN104570771A CN201510003614.XA CN201510003614A CN104570771A CN 104570771 A CN104570771 A CN 104570771A CN 201510003614 A CN201510003614 A CN 201510003614A CN 104570771 A CN104570771 A CN 104570771A
Authority
CN
China
Prior art keywords
robot
scene
inspection robot
topology
inspection
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510003614.XA
Other languages
English (en)
Inventor
王燕清
石朝侠
王一璞
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin University of Science and Technology
Original Assignee
Harbin University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin University of Science and Technology filed Critical Harbin University of Science and Technology
Priority to CN201510003614.XA priority Critical patent/CN104570771A/zh
Publication of CN104570771A publication Critical patent/CN104570771A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Manipulator (AREA)

Abstract

针对调控中心巡检机器人所面临的困难,将环境的场景与拓扑结合实现巡检机器人的环境表示与自主定位已被证明是一种有效的解决方案,利用拓扑层、场景层与特征层构成了层次化场景-拓扑地图。最后将拓扑层、场景层与特征层构建场景-拓扑地图,采用基于隐马尔可夫模型实现巡检机器人的精确定位,该地图的在线创建可以不依赖任何人工路标和机器人的全局精确定位,适用于巡检机器人在大范围复杂室内环境的自主导航。通过该发明突破机器人自主导航和环境认知技术不仅能够提高电力巡检机器人的任务执行能力,而且能够直接推广到其他领域的巡检机器人,具有普遍的意义。

Description

基于场景-拓扑的自主定位方法的巡检机器人
技术领域:
 本发明专利涉及基于场景-拓扑的自主定位方法的巡检机器人。
背景技术:
 近年来随着智能电网朝着信息化、数字化、自动化、互动化的方向发展,智能机器人在高空、隧道电力线路巡检、无人值守变电站巡检方面的应用越来越得到电力系统部门的重视。我国各级电力调度和控制中心作为电网安全、可靠运行的核心环节,通过安装视频、温检等不同类型的传感器对电力设备安全运行进行监控。目前除省级部门设有专人对远程搜集的数据进行监管之外,各地方部门采用工作人员定时巡检模式,即在夜间及绝大部分白天时间处于无人值守状态。因此,将移动智能机器人应用于电力调度和控制中心的设备运行监控无疑会增加电力系统的安全冗余,对于智能电网的安全运行具有重要的意义。
与目前已经推广应用的变电站巡检机器人相比,调控中心巡检机器人的任务执行面临如下难题:
1)调控中心巡检机器人无法借助于GPS设备进行精确定位,而变电站巡检机器人借助于差分GPS定位可以达到厘米级精度;埋设磁导引虽然能够实现机器人对预设路线的跟踪,但需要对基础设施进行改动,巡检过程中的精确定位也难度很大,且不利于后期任务的局部修改,鲁棒性差。
2)调控中心巡检机器人需要对监控计算机的显示器界面内容进行识别以实现对电力设备运行状态的认知,而变电站巡检机器人只需要利用自身携带的传感器(如红外摄像仪、可见光摄像机)等获取直接数据。由于机器人需要将视觉系统对准计算机屏幕,精确定位恰恰是最需要的。
为了解决调控中心巡检机器人所面临的困难,本发明通过突破复杂室内环境的自主地图创建与定位技术构建电力调度控制中心巡检机器人原理样机,代替操作人员执行定时巡检任务,在遇到设备运行异常时能及时报警,并能在技术人员的远程操控下与调控中心现有固定方位监控系统组成全方位移动感知系统,能够使技术人员根据需求获取想要的现场信息,做出合理、科学的应急决策。上述关键技术的突破通过解决复杂室内环境下的地图创建、自主定位以及监视器内容认知瓶颈难题,为调控中心巡检机器人在电力系统的推广应用提供重要的理论基础和技术支撑。
发明内容:
1基于场景-拓扑的层次化环境建模与特征约简
将多源传感器信息融合后提取的时空不变特征以图1的方式进行层次化建模,由上到下依次为拓扑层、场景层和特征层。其中场景-拓扑地图由若干类型的节点组成,每一个场景包含与拓扑节点分支数相同的场景,每一个场景包含若干彩色ORB特征。
为了解决海量特征匹配所面临的瓶颈问题,采用两级特征约简技术:首先,通过提取环境的拓扑节点实现第一级特征约简——巡检机器人无需在环境中的所有位置和视角获取场景,而只需在节点的通道方向上获取场景并抽取特征,这是对非结构化复杂环境的一种稀疏描述;其次,利用多帧相似场景的特征聚类对本地局部地图的场景特征进行优化,通过将低重复匹配率的特征删除提高巡检机器人的特征匹配效率。
2基于场景-拓扑的自主定位方法
由于场景-拓扑的时空不变特征对图像的比例缩放、 旋转、三维视角、噪声、光强的变化具有较好的不变性,机器人的自主定位问题可以简化为特征匹配问题。即通过当前节点的场景与地图库中的场景匹配,可以实现机器人在拓扑地图中的定位。
我们在早期的自主定位方法采用一种类似于齿轮啮合的方法,即把每一个通道对应的场景作为齿轮的一个齿,通过匹配节点上所有的齿实现机器人的节点定位。但是,当环境中存在多个相似节点时(如走廊中的门口、相似的格局和办公器具摆设等), 齿轮啮合方法通常无法获得正确的匹配结果。因此本项目拟采用隐马尔可夫模型(Hidden Markov Model, HMM)提高机器人的定位准确率,在CHMM中,观测模型 表示机器人n在本地拓扑节点处观测到机器人m提供的场景的概率;运动模型则表示机器人m经过t-1时刻执行动作后由节点运动到节点的概率。其中,表示机器人m在其本地地图中的上一节点出发时所观测的场景,也就是关联上一节点与当前节点的场景。一般来说,由若干的组成,具体的数量取决于拓扑节点所用的分支数。因此,通过综合考虑单个节点的相似度和不同节点间的空间关系提高节点匹配准确率。
3巡检机器人的体系结构设计
综合考虑巡检机器人系统的可靠性和智能性,建立如图2所示的体系结构。机器人安装可见光IP摄像机、红外热像仪和激光雷达3种典型传感器。体系结构权衡机器人的计算能力与系统可靠性:电机控制单元采用具有网络连接的嵌入式解决方案(如ARM系列),能够保证系统长时间稳定运行。环境感知、地图表示、自主定位与任务规划模块采用工控机解决方案(如研华工控机),计算能力能够得到有效保证,但该方案容易在长时间运行情况下发生重启现象。因此底层嵌入式系统的另一个任务是与工控机的定期通信对机器人的工作状态进行检测。当上层系统失效时,底层嵌入式系统与IP摄像构成网络机器人系统,能够通过远程终端与操作人员进行互动,保证系统的自动恢复和在电力系统异常情况下的巡检任务完成。
附图说明: 
附图1基于场景-拓扑的层次化描述;
  附图2 巡检机器人的体系结构;
  附图3巡检机器人的外形结构图;1)IP摄像机2)监控器3)声光报警仪4)红外探测仪5)机器人本体6)激光雷达
有益效果:
1)代替操作人员执行定时巡检任务
2)  在遇到设备运行异常时能及时报警,并能在技术人员的远程操控下与调控中心现有固定方位监控系统组成全方位移动感知系统,能够使技术人员根据需求获取想要的现场信息,做出合理、科学的应急决策。
3)  上述关键技术的突破通过解决复杂室内环境下的地图创建、自主定位以及监视器内容认知瓶颈难题,为调控中心巡检机器人在电力系统的推广应用提供重要的理论基础和技术支撑。
具体实施方法:
1.基于场景-拓扑的自主定位方法的巡检机器人,其组成包括:内嵌到ARM模块中的控制和识别模块、监控器和声光报警仪、机器人本体工控机等,机器人安装可见光IP摄像机、红外热像仪和激光雷达3种典型传感器。体系结构权衡机器人的计算能力与系统可靠性:电机控制单元采用具有网络连接的嵌入式解决方案(如ARM系列),能够保证系统长时间稳定运行。环境感知、地图表示、自主定位与任务规划模块采用工控机解决方案(如研华工控机),计算能力能够得到有效保证,但该方案容易在长时间运行情况下发生重启现象。因此底层嵌入式系统的另一个任务是与工控机的定期通信对机器人的工作状态进行检测。当上层系统失效时,底层嵌入式系统与IP摄像构成网络机器人系统,能够通过远程终端与操作人员进行互动,保证系统的自动恢复和在电力系统异常情况下的巡检任务完成。
2.基于场景-拓扑的自主定位方法的巡检机器人,其特征是:巡检机器人利用场景-拓扑的时空不变特征对图像的比例缩放、 旋转、三维视角、噪声、光强的变化具有较好的不变性,机器人的自主定位问题可以简化为特征匹配问题。即通过当前节点的场景与地图库中的场景匹配,可以实现机器人在拓扑地图中的定位。能够代替操作人员执行定时巡检任务,在遇到设备运行异常时能及时报警,并能在技术人员的远程操控下与调控中心现有固定方位监控系统组成全方位移动感知系统,能够使技术人员根据需求获取想要的现场信息,做出合理、科学的应急决策,为调控中心巡检机器人在电力系统的推广应用提供重要的理论基础和技术支撑。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (2)

1.基于场景-拓扑的自主定位方法的巡检机器人,其组成包括:内嵌到ARM模块中的控制和识别模块、监控器和声光报警仪、机器人本体工控机等,机器人安装可见光IP摄像机、红外热像仪和激光雷达3种典型传感器;体系结构权衡机器人的计算能力与系统可靠性:电机控制单元采用具有网络连接的嵌入式解决方案(如ARM系列),能够保证系统长时间稳定运行;环境感知、地图表示、自主定位与任务规划模块采用工控机解决方案(如研华工控机),计算能力能够得到有效保证,但该方案容易在长时间运行情况下发生重启现象;因此底层嵌入式系统的另一个任务是与工控机的定期通信对机器人的工作状态进行检测;当上层系统失效时,底层嵌入式系统与IP摄像构成网络机器人系统,能够通过远程终端与操作人员进行互动,保证系统的自动恢复和在电力系统异常情况下的巡检任务完成。
2.基于场景-拓扑的自主定位方法的巡检机器人,其特征是:巡检机器人利用场景-拓扑的时空不变特征对图像的比例缩放、 旋转、三维视角、噪声、光强的变化具有较好的不变性,机器人的自主定位问题可以简化为特征匹配问题;即通过当前节点的场景与地图库中的场景匹配,可以实现机器人在拓扑地图中的定位;能够代替操作人员执行定时巡检任务,在遇到设备运行异常时能及时报警,并能在技术人员的远程操控下与调控中心现有固定方位监控系统组成全方位移动感知系统,能够使技术人员根据需求获取想要的现场信息,做出合理、科学的应急决策,为调控中心巡检机器人在电力系统的推广应用提供重要的理论基础和技术支撑。
CN201510003614.XA 2015-01-06 2015-01-06 基于场景-拓扑的自主定位方法的巡检机器人 Pending CN104570771A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510003614.XA CN104570771A (zh) 2015-01-06 2015-01-06 基于场景-拓扑的自主定位方法的巡检机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510003614.XA CN104570771A (zh) 2015-01-06 2015-01-06 基于场景-拓扑的自主定位方法的巡检机器人

Publications (1)

Publication Number Publication Date
CN104570771A true CN104570771A (zh) 2015-04-29

Family

ID=53087138

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510003614.XA Pending CN104570771A (zh) 2015-01-06 2015-01-06 基于场景-拓扑的自主定位方法的巡检机器人

Country Status (1)

Country Link
CN (1) CN104570771A (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105741268A (zh) * 2016-01-22 2016-07-06 江苏科技大学 一种基于彩色图块及其拓扑关系的视觉定位方法
CN106050308A (zh) * 2016-07-29 2016-10-26 长安大学 一种隧道自动巡检系统及方法
WO2018023229A1 (zh) * 2016-07-31 2018-02-08 杨洁 一种根据光强移动机器人的方法和机器人
CN108369419A (zh) * 2015-09-10 2018-08-03 X开发有限责任公司 使用移动机器人的对象观测来生成时空对象清单并且使用该清单来确定用于移动机器人的监测参数
CN109727269A (zh) * 2019-03-29 2019-05-07 中国人民解放军国防科技大学 一种基于单目视觉和道路地图的匹配定位方法
CN109882244A (zh) * 2019-03-29 2019-06-14 安徽延达智能科技有限公司 一种井下巡检机器人智能建图系统
CN110045636A (zh) * 2019-04-29 2019-07-23 北方工业大学 一种面向自主扫雪的感知系统及方法
CN110430081A (zh) * 2019-08-13 2019-11-08 北京市天元网络技术股份有限公司 基于指令自动编排的智能化巡检方法以及装置
WO2020034903A1 (zh) * 2018-08-17 2020-02-20 北京京东尚科信息技术有限公司 一种基于拓扑图的智能导航的方法和系统
CN111174784A (zh) * 2020-01-03 2020-05-19 重庆邮电大学 一种室内停车场可见光与惯导融合定位方法
CN112907644A (zh) * 2021-02-03 2021-06-04 中国人民解放军战略支援部队信息工程大学 一种面向机器地图的视觉定位方法
CN114326694A (zh) * 2020-09-24 2022-04-12 香港城市大学深圳研究院 智能体集群控制方法、装置、设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102354174A (zh) * 2011-07-30 2012-02-15 山东电力研究院 基于变电站移动式巡检装置的巡检系统及其巡检方法
CN103079168A (zh) * 2013-01-10 2013-05-01 上海交通大学 基于隐马氏模型的分布式运动节点的定位方法
CN104165636A (zh) * 2014-08-14 2014-11-26 南京理工大学 一种变电站巡检机器人定位导航系统

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102354174A (zh) * 2011-07-30 2012-02-15 山东电力研究院 基于变电站移动式巡检装置的巡检系统及其巡检方法
CN103079168A (zh) * 2013-01-10 2013-05-01 上海交通大学 基于隐马氏模型的分布式运动节点的定位方法
CN104165636A (zh) * 2014-08-14 2014-11-26 南京理工大学 一种变电站巡检机器人定位导航系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
石朝侠 等: "基于场景拓扑的多机器人协作地图拼接", 《中国科技论文在线》 *
石朝侠 等: "大规模环境下的拓扑地图创建与导航", 《机器人》 *

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108369419B (zh) * 2015-09-10 2021-08-03 波士顿动力公司 使用时空对象清单确定监测参数的系统和方法
CN108369419A (zh) * 2015-09-10 2018-08-03 X开发有限责任公司 使用移动机器人的对象观测来生成时空对象清单并且使用该清单来确定用于移动机器人的监测参数
US11660749B2 (en) 2015-09-10 2023-05-30 Boston Dynamics, Inc. Using object observations of mobile robots to generate a spatio-temporal object inventory, and using the inventory to determine monitoring parameters for the mobile robots
US11123865B2 (en) 2015-09-10 2021-09-21 Boston Dynamics, Inc. Using object observations of mobile robots to generate a spatio-temporal object inventory, and using the inventory to determine monitoring parameters for the mobile robots
CN105741268B (zh) * 2016-01-22 2018-08-31 江苏科技大学 一种基于彩色图块及其拓扑关系的视觉定位方法
CN105741268A (zh) * 2016-01-22 2016-07-06 江苏科技大学 一种基于彩色图块及其拓扑关系的视觉定位方法
CN106050308A (zh) * 2016-07-29 2016-10-26 长安大学 一种隧道自动巡检系统及方法
CN106050308B (zh) * 2016-07-29 2018-07-06 长安大学 一种隧道自动巡检系统及方法
WO2018023229A1 (zh) * 2016-07-31 2018-02-08 杨洁 一种根据光强移动机器人的方法和机器人
WO2020034903A1 (zh) * 2018-08-17 2020-02-20 北京京东尚科信息技术有限公司 一种基于拓扑图的智能导航的方法和系统
CN109727269A (zh) * 2019-03-29 2019-05-07 中国人民解放军国防科技大学 一种基于单目视觉和道路地图的匹配定位方法
CN109882244A (zh) * 2019-03-29 2019-06-14 安徽延达智能科技有限公司 一种井下巡检机器人智能建图系统
CN110045636A (zh) * 2019-04-29 2019-07-23 北方工业大学 一种面向自主扫雪的感知系统及方法
CN110045636B (zh) * 2019-04-29 2020-09-11 北方工业大学 一种面向自主扫雪的感知系统及方法
CN110430081A (zh) * 2019-08-13 2019-11-08 北京市天元网络技术股份有限公司 基于指令自动编排的智能化巡检方法以及装置
CN111174784A (zh) * 2020-01-03 2020-05-19 重庆邮电大学 一种室内停车场可见光与惯导融合定位方法
CN114326694A (zh) * 2020-09-24 2022-04-12 香港城市大学深圳研究院 智能体集群控制方法、装置、设备及存储介质
CN112907644A (zh) * 2021-02-03 2021-06-04 中国人民解放军战略支援部队信息工程大学 一种面向机器地图的视觉定位方法
CN112907644B (zh) * 2021-02-03 2023-02-03 中国人民解放军战略支援部队信息工程大学 一种面向机器地图的视觉定位方法

Similar Documents

Publication Publication Date Title
CN104570771A (zh) 基于场景-拓扑的自主定位方法的巡检机器人
Lu et al. Mobile robot for power substation inspection: A survey
CN112650255A (zh) 一种基于视觉与激光雷达信息融合的机器人室内外定位导航系统方法
CN106227220A (zh) 基于分布式框架的自主导航巡检机器人
CN103279949A (zh) 基于自定位机器人的多相机参数自动标定系统运行方法
CN103196430A (zh) 基于无人机的飞行轨迹与视觉信息的映射导航方法及系统
CN109491383A (zh) 多机器人定位与建图系统及方法
CN102547128B (zh) 一种智能监控方法及其应用
CN113075686B (zh) 一种基于多传感器融合的电缆沟智能巡检机器人建图方法
CN104581001A (zh) 一种大范围多摄像机运动目标的关联监控方法
CN113326964A (zh) 一种基于数据复合多级综合管廊风险管控方法及方法
Sun et al. A review of visual SLAM based on unmanned systems
CN110647170A (zh) 一种基于无人机的航标巡检装置与方法
CN104426090A (zh) 一种智能巡线机器人
CN210835732U (zh) 一种基于无人机的航标巡检装置
Sruthi et al. YOLOv5 based open-source UAV for human detection during search and rescue (SAR)
Dandurand et al. All-weather autonomous inspection robot for electrical substations
Ding et al. Electric power line patrol operation based on vision and laser SLAM fusion perception
CN104935874A (zh) 基于时空不变特征抽取与电力系统运行状态的巡检机器人
CN110539305A (zh) 一种用于小区安保的智能机器人管理控制系统
Xiao-le et al. 500 kV substation robot patrol system
Alexiou et al. Visual navigation based on deep semantic cues for real-time autonomous power line inspection
D'Auria et al. Sarri: A smart rapiro robot integrating a framework for automatic high-level surveillance event detection
Lu et al. Intelligent space system oriented to the home service robot
Lu et al. The structure and application of intelligent space system oriented to home service robot

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20150429

WD01 Invention patent application deemed withdrawn after publication