CN108189043B - 一种应用于高铁机房的巡检方法及巡检机器人系统 - Google Patents
一种应用于高铁机房的巡检方法及巡检机器人系统 Download PDFInfo
- Publication number
- CN108189043B CN108189043B CN201810022438.8A CN201810022438A CN108189043B CN 108189043 B CN108189043 B CN 108189043B CN 201810022438 A CN201810022438 A CN 201810022438A CN 108189043 B CN108189043 B CN 108189043B
- Authority
- CN
- China
- Prior art keywords
- cabinet
- inspection
- lamp
- module
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J11/00—Manipulators not otherwise provided for
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1628—Programme controls characterised by the control loop
- B25J9/163—Programme controls characterised by the control loop learning, adaptive, model based, rule based expert control
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1656—Programme controls characterised by programming, planning systems for manipulators
- B25J9/1664—Programme controls characterised by programming, planning systems for manipulators characterised by motion, path, trajectory planning
- B25J9/1666—Avoiding collision or forbidden zones
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
- B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
- B25J9/00—Programme-controlled manipulators
- B25J9/16—Programme controls
- B25J9/1679—Programme controls characterised by the tasks executed
Abstract
本发明公开了一种应用于高铁机房的巡检方法,包括如下步骤:(1)巡检机器人启动,开机状态自检及设备初始化;(2)读取巡检任务文件,获取需检测的目标机柜号,从机柜位置数据库中导出待检测机柜的位置信息;(3)巡检机器人根据激光雷达数据进行实时定位,进行全局路径规划与局部路径规划,依次到达目标机柜位置;当巡检机器人到达目标机柜位置时,进行环境检测,并根据深度学习神经网络模型及图像识别算法对机柜的状态进行检测。本发明同时提供了相应的巡检机器人系统,可以用于对高铁机房设备进行自动定时巡检,并可在紧急情况发生时远程控制完成紧急巡检任务。
Description
技术领域
本发明涉及一种应用于高铁机房的巡检方法,同时涉及一种应用于高铁机房的巡检机器人系统。
背景技术
长期以来,我国的铁路信号机房均采用人工巡检的作业方式,而且目前在我国铁路系统存在大量无人值守信号机房。日常设备机房巡查时人员必须到达现场,造成人力、物力的浪费,人工巡视的及时性受到各种条件制约,人工巡视效果也会受巡检人员的业务能力、工作经验、精神状态等诸多因素的制约,漏检、误检的情况时有发生,稍有不慎就会造成重大经济损失,甚至影响铁路运输安全。并且目前大多铁路信号机房均采用传统的固定式、离散式在线检测系统,不能实现对机房内情况完全覆盖,当发生紧急情况时,无法第一时间采集现场情况并将现场情况传递到监控中心,从而无法在必要时对机房或机柜的特定部位采取有效处理措施。
因此,需要一种连续、实时的自动巡检系统,将巡检人员从繁重的劳动中解脱出来,节约人力及物力成本,提高机房巡检的准确性。
发明内容
本发明所要解决的首要技术问题在于提供一种应用于高铁机房的巡检方法。
本发明所要解决的另一技术问题在于提供一种应用于高铁机房的巡检机器人系统。
为了实现上述发明目的,本发明采用下述技术方案:
根据本发明实施例的第一方面,提供了一种应用于高铁机房的巡检方法,包括如下步骤:
(1)巡检机器人启动,开机状态自检及设备初始化;
(2)读取巡检任务文件,获取需检测的目标机柜号,从机柜位置数据库中导出待检测机柜的位置信息;
(3)巡检机器人根据激光雷达采集的环境特征进行实时定位,进行全局路径规划与局部路径规划,依次到达目标机柜位置;当巡检机器人到达目标机柜位置时,进行环境检测,并对机柜的状态进行检测。
其中较优地,在步骤(3)中,加载高铁机房的地图,通过激光雷达感知的环境特征,提取激光雷达测量得到的激光数据中的局部特征信息,并利用SLAM技术将局部特征信息融合成一个统一的全局特征地图,进而实现对巡检机器人的实时定位,并更新到地图中;然后根据已获取的地图,导航模块根据自身当前位置、目的地位置及可通行性的分析,并结合巡检任务的需求,对全局路径和局部路径进行规划,选择快捷的路径进行巡检。
其中较优地,在步骤(3)使用预先生成的包含深度学习神经网络模型的状态灯识别算法对机柜状态灯进行检测;并且,包含不同深度学习神经网络模型的状态灯识别算法分别与相应机柜号及高中低位置关联存储。
其中较优地,在步骤(3)中所使用的深度学习神经网络模型的训练过程如下:
S1:采集每个机柜的视频,按照机柜类别进行视频分类及编号;对采集的视频进行切片,分割成图片的格式;
S2:建立训练的数据集,将所有的机柜状态灯分为六大类:绿灯、红灯、黄灯、白灯、灭灯、灯组;
S3:根据对机柜状态灯的分类,对切片后的图片进行标注;
S4:将数据集分为两大类,分别是训练数据集和测试数据集;
S5:对于训练数据集,定义深度学习神经网络模型,设计合适的神经网络结构;并定义损失函数,用来描述神经网络的训练效果;
S6:将训练数据集数据传入深度学习神经网络模型,进行模型参数训练,得到深度学习神经网络模型的连接权值和偏置参数;判断损失函数是否收敛,若是,输出深度学习神经网络模型,否则,继续训练;
S7:将测试数据集传入训练后的深度学习神经网络模型,判断准确率是否大于设定阈值,若是,获得最终的深度学习神经网络模型,结束训练流程;否则,返回S6重新训练。
其中较优地,在步骤(3)中,包括如下步骤:
(31)判断目标机柜是否走完,若结果为否,则执行步骤(32);若结果为是,执行步骤(34);
(32)开始到达下一个目标机柜位置,通过激光雷达进行实时定位,判断机器人是否成功到达,当成功到达时,采集声音数据和温湿度数据,并依次采集低位置、中位置及高位置的机柜状态数据,然后进入步骤(33);当没有成功到达时,记录失败点机柜号,然后进入步骤(33);
(33)读取机器人的电量值,判断是否需要充电;若是,则机器人回到充电桩附近,开始自主充电;若否,则返回步骤(31);
(34)判断是否有失败的目标点位置,若结果为否,则直接进入步骤(4):回到充电桩位置,进行自主充电,结束巡检;若结果为是,执行步骤(35):重新组合失败点位置,依次到达失败的目标点,当成功到达目标机柜时,采集声音数据和温湿度数据,并依次采集低位置、中位置及高位置的机柜状态数据,如果有未成功到达的失败点,则再次记录失败点机柜号,然后进入步骤(4)。
其中较优地,在步骤(32)和(35)中,所采集的机柜状态数据包括状态灯检测数据;在对机柜状态灯进行检测时,包括下述步骤:
根据机柜号及摄像头位置选择与之对应的状态灯识别算法,不同的状态灯识别算法中包括不同的深度学习神经网络模型;状态灯识别算法分为两大类,分别对应于单灯识别算法和灯组识别算法;
对于单灯识别算法,首先进行分类,判断状态灯是绿灯、红灯、黄灯、白灯、灭灯中的哪一种;然后进行定位,得到每个灯的像素位置;统计同一个机柜中不同位置的不同种类的灯的数量;
对于灯组识别算法,首先判断灯组的像素位置,然后寻找灯组中每个灯的轮廓,根据轮廓信息统计灯组中灯的数量;
最后,统计得到单灯或者灯组的数量之后,与对应的阈值进行比较判断,输出检测结果并保存。
根据本发明实施例的另一方面,提供了一种用于实现上述巡检方法的巡检机器人系统,包括存储模块、导航模块、感知模块、控制模块、执行模块和通信模块;
其中,所述存储模块用于存储高铁机房地图及机柜位置数据库;
所述导航模块用于根据激光雷达感知的环境特征在地图中实现机器人的实时定位,并用于对待检测目标机柜进行全局路径规划与局部路径规划,生成路径规划信息;
所述感知模块用于采集环境参数及机柜状态参数;所述感知模块包括图像采集单元,所述图像采集单元用于采集机柜低位置、中位置和高位置的视频图像;所述感知模块还用于根据包括深度学习神经网络模型的图像识别算法对状态灯进行检测;
所述控制模块用于接收所述导航模块发送的路径规划信息和所述感知模块采集的环境参数及机柜状态参数,做出相对应的决策,并输出控制指令到所述执行模块;
所述执行模块包括底盘电机和升降电机;所述底盘电机用于驱动机器人移动;所述升降电机用于驱动升降平台进行升降,使所述图像采集单元升降到不同高度;
所述通信模块用于发送机器人的巡检结果,并用于接收巡检任务文件。
其中较优地,所述控制模块同时运行两个线程,分别进行机器人导航控制及机柜状态检测。
其中较优地,所述感知模块还包括声音传感器和温湿度传感器。
其中较优地,还包括用于给所述控制模块、所述感知模块、所述导航模块、所述执行模块和所述通信模块进行供电的电源模块。
本发明所提供的高铁机房巡检方法,能够对机房状态进行连续、动态监测,获得机房及设备的视频、图片、音频及环境温湿度等各种数据,实现对机房往复不间断的巡检。本发明同时提供了相应的巡检机器人系统,可以用于对高铁机房设备进行自动定时巡检,并可在紧急情况发生时接受远程控制完成紧急巡检任务。
附图说明
图1为本发明所提供的巡检方法的基本步骤流程图;
图2为本发明所提供的巡检方法的具体流程图;
图3为针对状态灯识别的深度学习神经网络训练流程图;
图4为机柜状态灯的识别算法流程图;
图5为本发明所使用的巡检机器人系统的组成框图示例。
具体实施方式
下面结合附图和具体实施例对本发明的技术内容作进一步的详细描述。
为了实现对高铁机房的自动巡检,本发明提供了一种应用于高铁机房的巡检方法,能够对机房状态进行连续、动态监测,获得机房及设备的视频、图片、音频及环境温湿度等各种数据,实现对机房往复不间断的巡检。该巡检方法,可以用于对高铁机房内所有机柜的自动定时巡检,也可用于对高铁机房中某些机柜进行紧急巡检。
如图1所示,本发明所提供的巡检方法,包括如下步骤:(1)巡检机器人启动,开机状态自检及设备初始化;(2)读取巡检任务文件,获取需检测的目标机柜号,从机柜位置数据库中导出待检测机柜的位置信息;(3)巡检机器人根据激光雷达感知的环境特征进行实时定位,进行全局路径规划与局部路径规划,依次到达目标机柜位置;当巡检机器人到达目标机柜位置时,采集环境参数,并对机柜状态进行检测;(4)回到充电桩位置,进行自主充电,结束巡检。
具体来说,如图2所示,在步骤(1)中,包括如下三个子步骤:(11)机器人启动,开机状态自检;(12)启动激光雷达,载入机房地图数据,机器人位置初始化;(13)机器人搭载设备初始化,包括感知模块中的设备(例如工业相机、温湿度传感器和声音传感器)和执行模块中的设备(例如底盘电机及升降电机等)的初始化。
在步骤(2)中,读取巡检任务文件,获取需检测的目标机柜号,从机柜位置数据库中导出待检测机柜的位置信息。其中,在机柜位置数据库中,存储有所有待检测机柜的详细位置信息,并存储有与每个机柜的低位置、中位置和高位置对应的识别算法。在从机柜位置数据库中导出待检测机柜的位置信息时,可以同时导出与待检测机柜对应的识别算法,其中,包含深度学习神经网络模型的状态灯识别算法。
在步骤(3)中,包括如下两个过程:机器人根据激光雷达感知的环境特征进行实时定位,进行全局路径规划与局部路径规划,依次到达目标机柜位置;对每个成功到达的目标机柜进行环境检测,并对机柜状态进行检测。上述过程循环进行,直至对所有目标机柜完成一次巡检。在一次巡检的过程中,如果某些目标机柜未能成功到达,则记录机柜号,然后到达下一目标机柜进行检测。
在机器人根据激光雷达数据进行实时定位,进行全局路径规划与局部路径规划,依次到达目标机柜位置的过程中,具体包括地图加载与定位、路径规划、局部避障的过程。首先,导航模块加载预巡检的高铁机房的地图,通过激光雷达感知的环境特征,提取激光雷达测量得到的激光数据中的局部特征信息,并利用SLAM技术(地图构建与定位算法)将局部特征信息融合成一个统一的全局特征地图,进而实现对巡检机器人的实时定位,并更新到地图中。然后根据已获取的地图,导航模块自主分析可通行性,并对可通行性进行量化;根据自身当前位置、目的地位置及可通行性的分析,并结合巡检任务的需求,对路径进行规划,选择快捷的路径进行巡检;控制模块生成巡检机器人前进的驱动指令,机器人开始巡检。在巡检机器人沿规划路径巡检前进的过程中,激光雷达实时感知环境,导航模块通过与地图的匹配,发现障碍物,激光雷达对障碍物轮廓信息进行描述,根据当前定位信息确定障碍物在环境地图中的位置分布情况,将路径信息反馈给控制模块,控制模块控制巡检机器人规避障碍。最后到达巡检目标机柜位置时,导航模块停止导航。
当巡检机器人到达目标机柜时,首先通过温湿度传感器对温湿度进行检测,然后通过声音传感器采集音频信息,最后通过图像采集单元采集不同高度位置的图像及视频,并根据深度学习模型及图像识别算法对机柜状态进行检测,具体包括对指针仪表、数字仪表及状态灯的状态检测。
此外,在步骤(3)中还包括对第一次未成功到达的目标机柜进行二次巡检的过程,通过再次到达未成功巡检的目标机柜,完成巡检过程,直至对所有未成功到达的目标机柜完成二次巡检。如果在二次巡检的过程中,仍有目标机柜未成功巡检,则通过保存并提交巡检结果,留待人工巡检进行排查。
具体来说,如图2所示,步骤(3)包括如下子步骤:
(31)判断目标机柜是否走完,若结果为是,执行步骤(34);若结果为否,则执行步骤(32)。
步骤(32)开始到达下一个目标机柜位置,通过激光雷达进行实时定位,判断机器人是否成功到达;当成功到达时,开始进行状态检测,采集声音数据和温湿度数据,并使升降平台依次上升到低位置、中位置及高位置,采集低位置、中位置及高位置的机柜状态数据,进行机柜状态检测,然后进入步骤(33);当没有成功到达时,记录失败点机柜号,然后进入步骤(33)。
步骤(33):读取机器人的电量值,判断是否需要充电;若是,则机器人通过导航模块进行导航,回到充电桩附近(在导航地图中,已提前设置好充电桩位置),开始自主充电;若否,则返回步骤(31);
步骤(34)判断是否有失败的目标点位置,若结果为是,执行步骤(35),进入步骤(4);若结果为否,则直接进入步骤(4)。
步骤(35):重新组合失败点位置,开始执行运动控制,依次到达失败的目标点,当成功到达目标机柜时,采集声音数据和温湿度数据,并依次采集低位置、中位置及高位置的机柜状态数据,在此过程中,如果有未成功到达的失败点,则再次记录失败点机柜号。
在步骤(32)和(35)中,当机器人成功到达一个目标点时,先通过温湿度传感器采集环境中的温湿度信息,并通过声音传感器获取机柜的基本运行状态,判断是否有预警或报警信号;然后工业相机依次采集低位置、中位置和高位置的视频信息,感知模块根据机柜号和工业相机的视频采集位置,选择对应的识别算法对机柜中的指针仪表、数字仪表及状态灯进行识别。
其中,对于数字仪表及指针仪表的识别已有诸多方法,在此可以选用任意的识别方法来实现。例如,对于数字仪表,通过工业相机采集数字仪表表盘的图像,然后感知模块对图像进行预处理,提取源图像中的亮度和颜色特征信息,分别设定亮度阈值和颜色阈值,将源图像二值化得到数字区域图像;然后,通过模板匹配的方法和骨架特征匹配方法进行数字识别处理。对于指针仪表。包括采集图像,对图像信息进行预处理得到二值化图像,提取刻度轮廓,刻度圆拟合与展开,得到特殊点位置;通过快速Hough变换识别仪表的指针,获得指针轮廓;最后根据起始和终止刻度角度,对指针角度刻度进行读取。
对于机柜状态灯的识别,可以使用现有技术中存在的一些图像识别方法进行检测。较优地,为了提高检测的准确度及检测速度,推荐使用本发明所提供的包含深度学习神经网络模型的状态灯识别算法进行识别。机柜的状态灯识别区别于其它设备的识别,其特点是体积小、密度大、状态多。由于深度学习(Deep learning)具有可实现自动提取特征的功能,省去传统算法的手动提取图像特征的过程,因此在本发明所提供的巡检方法中,将深度学习应用在机柜状态灯的识别中。
具体来说,在上述巡检方法中,对机柜状态灯进行识别时需要使用预先生成的包含深度学习神经网络模型的状态灯识别算法对机柜状态灯进行检测;包含不同深度学习神经网络模型的状态灯识别算法分别与相应机柜号及高中低位置关联存储于机柜位置数据库中。通过将适用于每个机柜使用的状态灯识别算法与机柜号关联存储在存储模块的数据库中,在对每个机柜的状态灯进行识别时,可以直接调用与之关联的状态灯识别算法对状态灯进行识别判断。
上述状态灯识别算法所包括的深度学习神经网络模型的训练流程如图3所示。S1:采集每个机柜的视频,按照机柜类别进行视频分类及编号;对采集的视频进行切片,分割成图片的格式;S2:建立训练的数据集,将所有的机柜状态灯分为六大类:绿灯、红灯、黄灯、白灯、灭灯、灯组;其中,在上述分类的过程中,主要根据机柜中状态灯的密度及明灭状态进行标记。绿灯、红灯、黄灯、白灯和灭灯分别对应于单个不同颜色的灯的明灭状态,灯组适用于对以单灯识别难度较大的多个密集排列的状态灯的状态进行判断,其中,采用计数的方式对具有不同颜色的状态灯的个数进行计数。
S3:根据对机柜状态灯的分类,对切片后的图片进行标注;
S4:将数据集分为两大类,分别是训练数据集和测试数据集;
S5:对于训练数据集,首先定义深度学习神经网络模型,设计合适的神经网络结构;定义损失函数,用来描述神经网络的训练效果;
S6:将训练数据集数据传入深度学习神经网络模型,进行模型参数训练,得到深度学习神经网络模型的连接权值和偏置参数;判断损失函数是否收敛,若是,表明训练得到一个较好效果,输出深度学习神经网络模型,否则,继续训练;
S7:将测试数据集传入训练后的深度学习神经网络模型,判断准确率是否大于设定阈值(例如95%),若是,获得最终的深度学习神经网络模型,结束训练流程;否则,返回S6重新训练。
当机器人到达每个目标点时,感知模块通过从数据库中获取的对应于机柜号及摄像头采集位置的状态灯识别算法对状态灯进行判断。
当感知模块对机柜状态灯进行检测时,采用如图4所示的流程:首先,初始化工业相机及相关参数;读取相机,获得机柜视频;并读取机柜号及摄像头高中低位置;
然后,根据机柜号及摄像头位置选择与之对应的状态灯识别算法,进行机柜状态识别;不同的状态灯识别算法中包括不同的深度学习神经网络模型;相应的识别算法与机柜号及摄像头位置关联存储于机柜位置数据库中;
具体来说,根据机柜上状态灯的密度,识别算法分为两大类,分别是单灯识别算法和灯组识别算法;
对于单灯识别算法,首先进行分类,判断状态灯是绿灯、红灯、黄灯、白灯、灭灯中的哪一种;然后进行定位,得到每个灯的像素位置;统计同一个机柜中不同位置的不同种类的灯的数量;
对于灯组识别算法,首先判断灯组的像素位置,然后寻找灯组中每个灯的轮廓,根据轮廓信息统计灯组中灯的数量;
最后,统计得到单灯或者灯组的数量之后,与对应的阈值进行比较判断;输出检测结果并保存,结束该位置的状态灯检测。
上面对应用于高铁机房的巡检方法进行了详细描述,其中,通过激光雷达感知的环境特征进行实时定位,进行全局路径规划与局部路径规划,可以快速到达目标点;当成功到达目标点后,通过采集目标机柜的环境参数及机柜状态视频对不同目标点的机柜状态进行自动巡检。并且,在上述巡检过程中,还可以根据机器人的电量状态进行自主充电,满足了巡检机器人连续的巡检需求。
为此,本发明还同时提供了如图5所示的巡检机器人系统,包括存储模块、导航模块、感知模块、控制模块、执行模块、电源模块和通信模块;所述电源模块给其他模块供电,控制模块控制其他模块的运行。
具体来说,存储模块用于存储高铁机房地图及机柜位置数据库。存储于存储模块中的高铁机房地图和机柜位置数据库中的机柜位置信息是根据巡检机器人提前采集的数据生成的,存储于机柜位置数据库中的状态灯识别算法也是根据提前的深度学习过程获得的,在巡检过程中可以直接调用。
导航模块包括激光雷达,激光雷达用于感知机器人的环境特征,导航模块根据激光雷达感知的环境特征生成机房整体地图,并且在地图中实现机器人的实时定位,获得机器人在机房中的位置;导航模块还用于进行全局路径规划与局部路径规划,生成路径规划信息,并实时定位,到达目标点。
感知模块用来采集环境及机器人本体状态参数,用于控制模块的决策及判断;感知模块包括搭载在机器人支架上的图像采集单元、温湿度传感器及声音传感器。其中,温湿度传感器及声音传感器可以固定在支架上的固定位置;温湿度传感器及声音传感器用来检测机房中的温湿度及声音,可判断是否有设备温度过高或者发出报警声。图像采集单元可随支架进行升降到达低位置、中位置和高位置。图像采集单元可以使用工业相机,工业相机用于采集低位置、中位置和高位置的视频图像。感知模块通过对视频图像进行数据处理,识别数字仪表和指针仪表的读数,并使用深度学习神经模型识别机柜上的状态灯的状态,来检测机柜是否存在异常。此外,感知模块还用于获取机器人本体状态参数,例如实时采集机器人的电量、姿态、位移及方位角。
控制模块用于接收导航模块发送的路径规划信息和感知模块采集的环境参数和机器人本体状态参数,做出相对应的决策,输出控制指令到执行模块;控制模块采用智能控制器,同时运行两个线程,分别进行机器人导航控制及机柜状态检测,保证系统实时性。
执行模块包括设置在机器人支架上的底盘电机和升降电机;底盘电机用于执行控制模块的运动指令,驱动机器人移动,具体来说分别驱动两个驱动轮实现底盘的前进、后退及转弯功能,并可实现以不同的速度行驶;升降电机用于驱动设置在机器人支架上的升降平台进行升降,使图像采集单元可以升降到不同高度,检测不同高度位置(低位置、中位置和高位置)的机柜状态。
通信模块用于实现远程服务器和机器人本体的通信,用于将机器人的巡检结果发送到远程服务器保存,并用于接收远程服务器下方的巡检任务文件以及其他控制指令,实现巡检任务变更、巡检状态监察等功能。远程服务器还具有轨迹跟踪、作业督导和资料归档的功能。
通过巡检机器人对机房状态进行连续、动态的监测,在此过程中实时上传巡检结果,可以在第一时间检测到故障状态,把现场的视频、图像及数据回传到远程服务器,并进行数据存储,对设备的缺陷及故障进行智能分析。远程服务器可以进行巡检任务的下发,对机器人的巡检过程进行轨迹监控、作业督导、资料归档等,实现巡检过程的闭环处理,节省人力物力成本,起到更加及时有效的防灾减灾效果。
综上所述,本发明所提供的高铁机房巡检方法,通过使用激光雷达实现实时定位,进行全局路径规划和局部路径规划,可以实现巡检机器人的连续室内巡检;并且,在对机柜状态检测时,通过将深度学习获得的神经网络模型和图像处理技术相结合,实现了对指针仪表、数字仪表、状态灯的识别。上述应用于高铁机房的巡检机器人系统,可以用于对高铁机房设备进行自动定时巡检,并可在紧急情况发生时接收远程控制指令完成紧急巡检任务。该巡检机器人系统可实现不间断连续巡检,具有性能好、集成度高、功耗低的优点,省去轨道架设施工成本及人力巡检成本,具有很好的灵活性、方便性及经济性。
以上对本发明所提供的应用于高铁机房的巡检方法及巡检机器人系统进行了详细的说明。对本领域的一般技术人员而言,在不背离本发明实质精神的前提下对它所做的任何显而易见的改动,都将构成对本发明专利权的侵犯,将承担相应的法律责任。
Claims (9)
1.一种应用于高铁机房的巡检方法,其特征在于包括如下步骤:
(1)巡检机器人启动,开机状态自检及设备初始化;
(2)读取巡检任务文件,获取需检测的目标机柜号,从机柜位置数据库中导出与所述目标机柜号对应的目标机柜的位置信息;
(3)巡检机器人根据激光雷达采集的环境特征进行实时定位,进行全局路径规划与局部路径规划,依次到达目标机柜位置;当巡检机器人到达目标机柜位置时进行环境检测,并对目标机柜的状态进行检测;其中,进一步包括如下子步骤:(31)判断目标机柜是否走完,若结果为否,则执行步骤(32);若结果为是,执行步骤(34);(32)开始到达下一个目标机柜位置,通过激光雷达进行实时定位,判断巡检机器人是否成功到达,当成功到达时,采集声音数据和温湿度数据,并依次采集低位置、中位置及高位置的目标机柜状态数据,然后进入步骤(33);当没有成功到达时,记录失败的目标机柜号,然后进入步骤(33);(33)读取巡检机器人的电量值,判断是否需要充电;若是,则巡检机器人回到充电桩位置,进行自主充电;若否,则返回步骤(31);(34)判断是否有失败的目标机柜位置,若结果为否,则直接进入步骤(4);若结果为是,执行步骤(35):重新组合失败的目标机柜位置,依次到达失败的目标机柜,当成功到达目标机柜时,采集声音数据和温湿度数据,并依次采集低位置、中位置及高位置的目标机柜状态数据,如果有未成功到达的目标机柜,则再次记录失败的目标机柜号,然后进入步骤(4);
(4)回到充电桩位置,进行自主充电,结束巡检。
2.如权利要求1所述的巡检方法,其特征在于:
在步骤(3)中,加载高铁机房的地图,通过激光雷达感知的环境特征,提取激光雷达测量得到的激光数据中的局部特征信息,并利用SLAM技术将局部特征信息融合成一个统一的全局特征地图,进而实现对巡检机器人的实时定位,并更新到地图中;然后根据已获取的地图,导航模块根据自身当前位置、目的地位置及可通行性的分析,并结合巡检任务的需求,对全局路径和局部路径进行规划,选择快捷的路径进行巡检。
3.如权利要求1所述的巡检方法,其特征在于:
在步骤(3)中,使用预先生成的包含深度学习神经网络模型的状态灯识别算法对机柜状态灯进行检测;并且,包含不同深度学习神经网络模型的状态灯识别算法分别与相应目标机柜号及高、中、低位置关联存储。
4.如权利要求3所述的巡检方法,其特征在于:
在步骤(3)中所使用的深度学习神经网络模型的训练过程如下:
S1:采集每个机柜的视频,按照机柜类别进行视频分类及编号;对采集的视频进行切片,分割成图片的格式;
S2:建立训练的数据集,将所有的机柜状态灯分为六大类:绿灯、红灯、黄灯、白灯、灭灯、灯组;
S3:根据对机柜状态灯的分类,对切片后的图片进行标注;
S4:将数据集分为两大类,分别是训练数据集和测试数据集;
S5:对于训练数据集,定义深度学习神经网络模型,设计合适的神经网络结构;并定义损失函数,用来描述神经网络的训练效果;
S6:将训练数据集数据传入深度学习神经网络模型,进行模型参数训练,得到深度学习神经网络模型的连接权值和偏置参数;判断损失函数是否收敛,若是,输出深度学习神经网络模型,否则,继续训练;
S7:将测试数据集传入训练后的深度学习神经网络模型,判断准确率是否大于设定阈值,若是,获得最终的深度学习神经网络模型,结束训练流程;否则,返回S6重新训练。
5.如权利要求1所述的巡检方法,其特征在于:
在步骤(32)和(35)中,所采集的目标机柜状态数据包括状态灯检测数据;在对目标机柜的状态灯进行检测时,包括下述步骤:
根据目标机柜号及摄像头位置选择与之对应的状态灯识别算法,不同的状态灯识别算法中包括不同的深度学习神经网络模型;状态灯识别算法分为两大类,分别对应于单灯识别算法和灯组识别算法;
对于单灯识别算法,首先进行分类,判断状态灯是绿灯、红灯、黄灯、白灯、灭灯中的哪一种;然后进行定位,得到每个灯的像素位置;统计同一个目标机柜中不同位置的不同种类的灯的数量;
对于灯组识别算法,首先判断灯组的像素位置,然后寻找灯组中每个灯的轮廓,根据轮廓信息统计灯组中灯的数量;
最后,统计得到单灯或者灯组的数量之后,与对应的阈值进行比较判断,输出检测结果并保存。
6.一种用于实现权利要求1至5中任意一项所述巡检方法的巡检机器人系统,其特征在于包括存储模块、导航模块、感知模块、控制模块、执行模块和通信模块;
其中,所述存储模块用于存储高铁机房地图及机柜位置数据库;
所述导航模块用于根据激光雷达感知的环境特征在地图中实现巡检机器人的实时定位,并用于对待检测的目标机柜进行全局路径规划与局部路径规划,生成路径规划信息;
所述感知模块用于采集环境参数及目标机柜状态数据;所述感知模块包括图像采集单元,所述图像采集单元用于采集目标机柜低位置、中位置及高位置的视频图像;所述感知模块还用于根据包括深度学习神经网络模型的图像识别算法对状态灯进行检测;
所述控制模块用于接收所述导航模块发送的路径规划信息和所述感知模块采集的环境参数及目标机柜状态数据,做出相对应的决策,并输出控制指令到所述执行模块;
所述执行模块包括底盘电机和升降电机;所述底盘电机用于驱动巡检机器人移动;所述升降电机用于驱动升降平台进行升降,使所述图像采集单元升降到不同高度;
所述通信模块用于发送巡检机器人的巡检结果,并接收巡检任务文件。
7.如权利要求6所述的巡检机器人系统,其特征在于:
所述控制模块同时运行两个线程,分别进行巡检机器人导航控制及目标机柜状态检测。
8.如权利要求6所述的巡检机器人系统,其特征在于:
所述感知模块还包括声音传感器和温湿度传感器。
9.如权利要求6所述的巡检机器人系统,其特征在于还包括用于给所述控制模块、所述感知模块、所述导航模块、所述执行模块和所述通信模块进行供电的电源模块。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810022438.8A CN108189043B (zh) | 2018-01-10 | 2018-01-10 | 一种应用于高铁机房的巡检方法及巡检机器人系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810022438.8A CN108189043B (zh) | 2018-01-10 | 2018-01-10 | 一种应用于高铁机房的巡检方法及巡检机器人系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108189043A CN108189043A (zh) | 2018-06-22 |
CN108189043B true CN108189043B (zh) | 2021-03-30 |
Family
ID=62588561
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810022438.8A Active CN108189043B (zh) | 2018-01-10 | 2018-01-10 | 一种应用于高铁机房的巡检方法及巡检机器人系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108189043B (zh) |
Families Citing this family (54)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109101017A (zh) * | 2018-07-27 | 2018-12-28 | 江苏盛海智能科技有限公司 | 一种无人车寻迹路线规划方法及终端 |
CN109088452B (zh) * | 2018-08-15 | 2021-12-28 | 中用科技有限公司 | 机器人充电方法及机器人 |
CN109086781A (zh) * | 2018-08-15 | 2018-12-25 | 北京航空航天大学 | 一种基于深度学习的机柜灯状态识别方法 |
CN109093625A (zh) * | 2018-09-11 | 2018-12-28 | 国网山东省电力公司莱芜供电公司 | 一种用于机器人巡航的直线路径视觉识别方法 |
CN109460029A (zh) * | 2018-11-29 | 2019-03-12 | 华南农业大学 | 畜禽养殖场所巡检移动平台及其控制方法 |
CN109531533B (zh) * | 2018-11-30 | 2019-11-05 | 北京海益同展信息科技有限公司 | 一种机房巡检系统及其工作方法 |
CN109740858A (zh) * | 2018-12-11 | 2019-05-10 | 国电南瑞科技股份有限公司 | 基于深度学习的自动化辅助决策系统及方法 |
CN109656252A (zh) * | 2018-12-29 | 2019-04-19 | 广州市申迪计算机系统有限公司 | 一种基于agv的中控调度系统和定位导航方法 |
CN109727293A (zh) * | 2018-12-31 | 2019-05-07 | 广东博媒广告传播有限公司 | 一种户外媒体灯光自动识别系统 |
CN109752300A (zh) * | 2019-01-02 | 2019-05-14 | 五邑大学 | 一种涂料生产安全智能巡检机器人、系统及方法 |
CN109933307A (zh) * | 2019-02-18 | 2019-06-25 | 杭州电子科技大学 | 一种基于本体的智能控制器机器学习算法模块形式化描述及封装方法 |
CN111599030A (zh) * | 2019-02-21 | 2020-08-28 | 广州高新兴机器人有限公司 | 一种基于机房的机器人巡检方法及系统 |
CN109945922A (zh) * | 2019-03-15 | 2019-06-28 | 云桥智能科技有限公司 | 一种用于机房安全控制的智能机器人系统 |
CN109760064A (zh) * | 2019-03-25 | 2019-05-17 | 广东电网有限责任公司 | 一种移动机器人自身位置的调整方法和装置 |
CN110026992A (zh) * | 2019-04-04 | 2019-07-19 | 北京潞电电气设备有限公司 | 联动方法、装置、系统及巡检机器人 |
CN110618436A (zh) * | 2019-04-04 | 2019-12-27 | 中国石油大学(北京) | 基于即时定位与地图构建的巡检方法、装置及设备 |
CN110196594A (zh) * | 2019-05-24 | 2019-09-03 | 北京海益同展信息科技有限公司 | 机房巡检控制方法、装置、设备及存储介质 |
CN110086103A (zh) * | 2019-05-27 | 2019-08-02 | 国网江苏省电力有限公司徐州供电分公司 | 配电房机器人的作业方法 |
CN110142785A (zh) * | 2019-06-25 | 2019-08-20 | 山东沐点智能科技有限公司 | 一种基于目标检测的巡检机器人视觉伺服方法 |
CN110362085A (zh) * | 2019-07-22 | 2019-10-22 | 合肥小步智能科技有限公司 | 一种用于特种巡检机器人的类脑平台 |
CN110297256B (zh) * | 2019-07-23 | 2023-11-03 | 国网四川省电力公司信息通信公司 | 基于激光雷达扫描数据机器人机房巡视安全路线生成方法 |
CN110288303B (zh) * | 2019-07-31 | 2023-05-26 | 中国工商银行股份有限公司 | 库房清点装置及系统 |
CN110509272B (zh) * | 2019-08-06 | 2021-03-12 | 公安部道路交通安全研究中心 | 一种车辆查验方法、系统以及复合巡检机器人 |
CN110567464B (zh) * | 2019-08-21 | 2022-09-16 | 东南大学 | 机场航站楼环境自主巡检车监测系统 |
CN110647082A (zh) * | 2019-10-09 | 2020-01-03 | 宁波思高信通科技有限公司 | 一种机房智能巡检系统及其工作方法 |
CN110821560A (zh) * | 2019-10-18 | 2020-02-21 | 中国铁道科学研究院集团有限公司电子计算技术研究所 | 隧道巡检系统 |
CN110757481A (zh) * | 2019-11-25 | 2020-02-07 | 福建工程学院 | 一种巡检机器人及其巡检方法 |
CN111037552B (zh) * | 2019-12-06 | 2021-07-16 | 合肥科大智能机器人技术有限公司 | 一种配电房轮式巡检机器人的巡检配置及实施方法 |
CN111015681A (zh) * | 2019-12-18 | 2020-04-17 | 国网山东省电力公司信息通信公司 | 信通机房巡检机器人系统 |
CN111192377B (zh) * | 2020-01-08 | 2021-08-27 | 中国银联股份有限公司 | 一种图像处理方法及装置 |
CN111459172B (zh) * | 2020-05-20 | 2023-10-31 | 中国北方车辆研究所 | 围界安防无人巡逻车自主导航系统 |
CN111923042B (zh) * | 2020-07-21 | 2022-05-24 | 北京全路通信信号研究设计院集团有限公司 | 机柜栅格的虚化处理方法及系统、巡检机器人 |
CN111951161A (zh) * | 2020-07-21 | 2020-11-17 | 北京全路通信信号研究设计院集团有限公司 | 目标识别方法及系统、巡检机器人 |
CN111730606B (zh) * | 2020-08-13 | 2022-03-04 | 深圳国信泰富科技有限公司 | 一种高智能机器人的抓取动作控制方法及系统 |
CN112364684B (zh) * | 2020-09-23 | 2023-07-04 | 国网天津市电力公司电力科学研究院 | 一种机房服务器状态采集及三维管控系统及其方法 |
CN112184678A (zh) * | 2020-09-30 | 2021-01-05 | 国网北京市电力公司 | 图像识别方法、装置、计算机可读存储介质及处理器 |
CN112230660A (zh) * | 2020-10-22 | 2021-01-15 | 江西小马机器人有限公司 | 一种电力巡检机器人的系统架构 |
CN112332541A (zh) * | 2020-10-29 | 2021-02-05 | 国网山西省电力公司检修分公司 | 一种用于变电站的监测系统和方法 |
CN112101313B (zh) * | 2020-11-17 | 2021-03-19 | 北京蒙帕信创科技有限公司 | 一种机房机器人巡检方法及系统 |
CN112712198B (zh) * | 2020-12-23 | 2023-04-28 | 深圳市赛为智能股份有限公司 | 巡检机器人智能管理系统 |
CN112287915B (zh) * | 2020-12-28 | 2021-04-16 | 北京蒙帕信创科技有限公司 | 一种基于深度学习的设备故障告警方法和系统 |
CN112766103B (zh) * | 2021-01-07 | 2023-05-16 | 国网福建省电力有限公司泉州供电公司 | 一种机房巡检方法及装置 |
CN112828913A (zh) * | 2021-02-08 | 2021-05-25 | 深圳泰豪信息技术有限公司 | 一种巡检机器人控制方法 |
CN112767433A (zh) * | 2021-03-15 | 2021-05-07 | 北京玄马知能科技有限公司 | 一种巡检机器人图像自动纠偏、分割与识别方法 |
CN113091667B (zh) * | 2021-03-30 | 2023-04-07 | 中国工商银行股份有限公司 | 一种巡检机器人及巡检方法 |
CN113268063A (zh) * | 2021-06-03 | 2021-08-17 | 北京京东乾石科技有限公司 | 机器人的控制方法、装置和非易失性计算机可读存储介质 |
CN113776783A (zh) * | 2021-08-27 | 2021-12-10 | 同济大学 | 一种基于巡检机器人的机房服务器故障灯检测方法 |
CN113807244B (zh) * | 2021-09-16 | 2024-02-27 | 中电信数智科技有限公司 | 一种基于深度学习的机柜布置图绘制方法 |
CN114723743A (zh) * | 2022-05-16 | 2022-07-08 | 中国信息通信研究院 | 基于区块链的配电设备安全检测方法和装置 |
CN115188090A (zh) * | 2022-06-29 | 2022-10-14 | 日海通信服务有限公司 | 一种基于5g通讯的智能巡检维护方法 |
CN115086565B (zh) * | 2022-08-19 | 2023-01-17 | 北京电科智芯科技有限公司 | 实验室设备影像数据的巡采方法、存储介质和巡采装置 |
CN115271552B (zh) * | 2022-09-26 | 2023-01-13 | 北京艾瑞信系统工程技术有限责任公司 | 一种数据中心智能巡视系统 |
CN115771153B (zh) * | 2023-01-10 | 2023-04-18 | 华南农业大学 | 一种多指标采集的畜禽健康巡检机器人控制方法及装备 |
CN116841301B (zh) * | 2023-09-01 | 2024-01-09 | 杭州义益钛迪信息技术有限公司 | 巡检机器人巡检模型训练方法、装置、设备及介质 |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101566656B (zh) * | 2008-04-25 | 2011-06-15 | 佛山市顺德区顺达电脑厂有限公司 | 自动检测系统及方法 |
CN102280826B (zh) * | 2011-07-30 | 2013-11-20 | 山东鲁能智能技术有限公司 | 变电站智能机器人巡检系统及巡检方法 |
CN202995357U (zh) * | 2012-11-13 | 2013-06-12 | 安徽农业大学 | 一种设备指示灯检测与报警装置 |
US9415513B2 (en) * | 2014-08-29 | 2016-08-16 | General Electric Company | Systems and methods for railyard robotics |
CN105976383A (zh) * | 2016-05-16 | 2016-09-28 | 国网河南省电力公司电力科学研究院 | 一种基于极限学习机图像识别的输电设备故障诊断方法 |
CN106228185B (zh) * | 2016-07-20 | 2019-10-15 | 武汉盈力科技有限公司 | 一种基于神经网络的通用图像分类识别系统及方法 |
CN106570494A (zh) * | 2016-11-21 | 2017-04-19 | 北京智芯原动科技有限公司 | 基于卷积神经网络的交通信号灯识别方法及装置 |
CN106447598A (zh) * | 2016-11-25 | 2017-02-22 | 常州纺织服装职业技术学院 | 多颜色同时识别的视觉系统及方法 |
CN106650641B (zh) * | 2016-12-05 | 2019-05-14 | 北京文安智能技术股份有限公司 | 一种交通信号灯定位识别方法、装置及系统 |
CN106981063A (zh) * | 2017-03-14 | 2017-07-25 | 东北大学 | 一种基于深度学习的电网设备状态监测装置 |
CN107081765A (zh) * | 2017-03-29 | 2017-08-22 | 国网上海市电力公司 | 一种变电站巡视机器人自主识别方法和一种巡视机器人 |
CN107016673A (zh) * | 2017-05-02 | 2017-08-04 | 上海控创信息技术股份有限公司 | 铁路信号机柜状态灯图像分析方法、装置以及系统 |
CN107239790A (zh) * | 2017-05-10 | 2017-10-10 | 哈尔滨工程大学 | 一种基于深度学习的服务机器人目标检测与定位方法 |
CN107553489A (zh) * | 2017-09-07 | 2018-01-09 | 信帧机器人技术(北京)有限公司 | 一种基于视频的智能巡检机器人系统 |
-
2018
- 2018-01-10 CN CN201810022438.8A patent/CN108189043B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN108189043A (zh) | 2018-06-22 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108189043B (zh) | 一种应用于高铁机房的巡检方法及巡检机器人系统 | |
CN110647082A (zh) | 一种机房智能巡检系统及其工作方法 | |
CN112213979A (zh) | 一种场站智能机器人巡检系统及方法 | |
CN111476921B (zh) | 一种机房智能巡检系统 | |
CN108255189A (zh) | 一种电力巡检无人机系统 | |
CN113128473A (zh) | 一种面向地下综合管廊的巡检系统、方法、设备及存储介质 | |
CN107380163A (zh) | 基于磁导航的汽车智能报警预测系统及其方法 | |
CN112698618A (zh) | 一种基于机器视觉技术的服务器告警识别系统 | |
CN207268846U (zh) | 电力巡检机器人 | |
CN111555178A (zh) | 一种输电线路天空地协同智能巡检方法及系统 | |
CN208443773U (zh) | 一种基于热辐射的无人机巡线缺陷检测装置 | |
CN109656252A (zh) | 一种基于agv的中控调度系统和定位导航方法 | |
EP4116906A1 (en) | Method for warehouse storage-location monitoring, computer device, and non-volatile storage medium | |
CN112775970A (zh) | 一种巡检机器人多传感器系统及巡检方法 | |
CN114723271A (zh) | 一种基于图像识别的输电工程质量检测方法及系统 | |
CN109038818A (zh) | 电力设备远程监控系统及方法 | |
CN116301046A (zh) | 一种基于电力杆塔识别的无人机航拍安全距离自动定位方法 | |
CN116363397A (zh) | 设备故障排查方法、装置及巡检系统 | |
CN114104334B (zh) | 一种基于运动小车自动图像识别方式的飞机检查方法 | |
CN115857536A (zh) | 针对车间设备的无人机智能巡检方法、装置、设备及介质 | |
CN113776783A (zh) | 一种基于巡检机器人的机房服务器故障灯检测方法 | |
CN115661966A (zh) | 一种基于增强现实的巡检系统和方法 | |
CN111367289A (zh) | 一种人工智能设备 | |
CN112518760A (zh) | 一种建筑设施智能巡检机器人及其巡检系统 | |
CN115990327B (zh) | 一种基于物联网的智能化消防管理系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |