CN114120658B - 一种高速公路智能巡检机器人系统以及巡检方法 - Google Patents
一种高速公路智能巡检机器人系统以及巡检方法 Download PDFInfo
- Publication number
- CN114120658B CN114120658B CN202111258483.1A CN202111258483A CN114120658B CN 114120658 B CN114120658 B CN 114120658B CN 202111258483 A CN202111258483 A CN 202111258483A CN 114120658 B CN114120658 B CN 114120658B
- Authority
- CN
- China
- Prior art keywords
- image
- inspection robot
- target
- abnormal
- monitoring center
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/01—Detecting movement of traffic to be counted or controlled
- G08G1/017—Detecting movement of traffic to be counted or controlled identifying vehicles
- G08G1/0175—Detecting movement of traffic to be counted or controlled identifying vehicles by photographing vehicles, e.g. when violating traffic rules
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/23—Clustering techniques
- G06F18/231—Hierarchical techniques, i.e. dividing or merging pattern sets so as to obtain a dendrogram
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C1/00—Registering, indicating or recording the time of events or elapsed time, e.g. time-recorders for work people
- G07C1/20—Checking timed patrols, e.g. of watchman
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- General Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Computational Biology (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Traffic Control Systems (AREA)
- Image Analysis (AREA)
Abstract
本发明实施例适用于公路巡检领域,提供了一种高速公路智能巡检机器人系统,包括监控中心和至少一个的巡检机器人;巡检机器人用于获取视野范围内的区域影像,提取含有目标车辆的目标影像,目标影像为预设时间段内采集的区域影像中首次出现目标车辆的影像;对所述目标影像进行处理,确定含有异常车辆的异常影像,将所述异常影像发送给监控中心;接收所述监控中心返回的处理指令并执行。本发明实施例还提供了一种高速公路智能巡检方法。本发明实施例提供巡检机器人系统,无需监控中心的工作人员对影像的异常情况进行筛选,避免了过多无用的影像信息发送给监控中心,缩短信息发送与接收的传输周期,进一步提高该巡检机器人系统的时效性。
Description
技术领域
本发明实施例属于公路巡检领域,尤其涉及一种高速公路智能巡检机器人系统以及巡检方法。
背景技术
目前,我国高速公路事业的发展持续增长,随着高速公路工程建设的深入,高速公路管理压力也会越来越大,特别是近年高速公路事故量的不断增大,使得交通高速公路的日常运维和紧急救援日益引起关注。
高速公路由于其特殊性,高速公路的巡检采用人工显然不太合适,比较浪费人力物力,目前也出现了一些巡检机器人,以代替人工进行巡检作业。
目前的巡检机器人一般沿应急车道或护栏进行移动,对沿途进行例行的巡视,这种巡视一般是将机器人采集到影像通过发送给监控中心,经由监控中心对采集到的影像进行人工筛选出异常图像,然后在根据异常图像进行人工评判,并通过监控中心向巡检机器人发出依据评判结果而作出的处理指令,这样一来,需要将大量的影像数据通过巡检机器人发送给监控中心,不仅造成数据传输通道的压力,而且给监控中心的工作人员带来很多的工作量,增大了人力劳动,工作人员无法及时筛选出异常图像,使得监控中心对异常图像的反馈存在延时性,无形中不能发挥其巡检以及及时处理紧急情况的作用,降低了机器人巡检的作用。
发明内容
本发明实施例的目的在于提供一种高速公路智能巡检机器人系统以及巡检方法,旨在解决现有技术中的巡检机器人需要将大量的影像数据通过巡检机器人发送给监控中心,造成数据传输通道的压力,监控中心对异常图像的反馈存在延时性,巡检机器人不能发挥其巡检作用的问题。
本发明实施例是这样实现的:
第一方面,本发明实施例提供了一种高速公路智能巡检机器人系统,所述系统包括监控中心和至少一个的巡检机器人;监控中心与巡检机器人之间通信连接,其中:
监控中心,用于接收巡检机器人发送的异常影像,对所述异常影像进行场景评估,基于评估结果确定处理指令,将所述处理指令发送给所述巡检机器人;
巡检机器人,用于获取视野范围内的区域影像,提取含有目标车辆的目标影像,其中,所述目标影像为预设时间段内采集的区域影像中首次出现目标车辆的影像;对所述目标影像进行处理,确定含有异常车辆的异常影像,将所述异常影像发送给监控中心;接收所述监控中心返回的处理指令并执行,无需监控中心的工作人员对影像的异常情况进行筛选,节省了人力,且提高了监控中心反馈给巡检机器人以处理指令的及时性。
在本发明的一些实施例中,所述巡检机器人包括:
摄像装置,用于获取视野范围内的区域影像,在巡检机器人达到指定位置后,通过摄像装置对巡检机器人视野范围内进行录像;
中央处理器,用于提取含有目标车辆的目标影像;对所述目标影像进行处理,确定含有异常车辆的异常影像;
通信装置,用于将所述异常影像发送给监控中心,和/或接收所述监控中心返回的处理指令;
输出装置,用于执行处理指令。
在本发明的一些实施例中,所述中央处理器包括:
提取单元,用于提取含有目标车辆的目标影像;
处理单元,用于对所述目标影像进行处理,确定含有异常车辆的异常影像。
在本发明的一些实施例中,所述提取单元包括:
帧提取模块,用于对所述区域影像提取帧图像;
降噪模块,用于对所述帧图像进行降噪处理;
边缘检测模块,用于对所述帧图像进行边缘检测,提取含有目标车辆的目标影像。
在本发明的一些实施例中,所述边缘检测模块包括:
灰度值计算子模块,用于计算所述帧图像中各像素点的灰度值;
边缘像素点确定子模块,用于根据所述帧图像中各像素点的灰度值确定所述帧图像中的目标车辆的边缘像素点;
边缘确定子模块,用于根据所述帧图像中的目标车辆的边缘像素点确定所述帧图像中目标车辆的边缘;
影像提取子模块,用于根据所述目标车辆的边缘,确定含有所述目标车辆的目标影像。
在本发明的一些实施例中,所述处理单元包括:
划分模块,用于基于目标车辆的驻点,其中,所述驻点为所述目标车辆速度为零时的位置点;基于出现所述驻点的时间节点将所述目标影像划分为第一影像和第二影像;
位点确定模块,用于将所述目标车辆在第一影像中的首次出现时的位置点作为第一位点;将所述目标车辆在第二影像中最后出现的位置点作为第二位点;
位点更新模块,用于在所述第二位点所述第一位点之间的第一距离大于所述驻点与所述第一位点之间的第二距离时,将所述第二位点作为行驶位点;
异常确认模块,用于在所述第一距离小于所述第二距离时,将所述驻点作为违规点,确定当前目标车辆为异常车辆,将含有所述异常车辆的目标影像作为异常影像。
在本发明的一些实施例中,所述巡检机器人还包括:
移动底座,所述移动底座与中央处理器信号连接,所述中央处理器用于控制所述移动底座沿预定巡检路径进行移动;
云台,设置在所述移动底座上,所述云台为全角度旋转云台,所述全角度旋转云台与所述中央处理器信号连接,所述中央处理器用于控制所述全角度旋转云台的旋转角度;
摄像装置,设置在所述云台上,所述摄像装置与所述中央处理器信号连接。
在本发明的一些实施例中,所述监控中心与每一个巡检机器人之间通过无线网络通信连接;每一个巡检机器人之间通过无线网络通信连接。
第二方面,本发明实施例提供了一种高速公路智能巡检方法,应用于巡检机器人,所述方法包括以下具体步骤:
获取视野范围内的区域影像;
提取含有目标车辆的目标影像,基于目标车辆的驻点,将所述目标影像划分为第一影像和第二影像;其中,所述驻点为所述目标车辆速度为零时的位置点;
将所述目标车辆在第一影像中的首次出现时的位置点作为第一位点;将所述目标车辆在第二影像中最后出现的位置点作为第二位点;
若所述第二位点所述第一位点之间的第一距离大于所述驻点与所述第一位点之间的第二距离,则将所述第二位点作为行驶位点;
若所述第一距离小于所述第二距离,则将所述驻点作为违规点,并确定当前目标车辆为异常车辆,并将含有所述异常车辆的目标影像作为异常影像,将所述异常影像发送给监控中心;
接收所述监控中心返回的处理指令并执行。
在本发明的一些实施例中,所述将所述目标影像发送给监控中心的具体步骤包括:
在所述第一巡检机器人与所述监控中心建立了在线通信连接通道时,所述第一巡检机器人直接将所述目标影像发送给监控中心;
和/或
在所述第一巡检机器人与所述监控中心未建立在线通信连接通道时,所述第一巡检机器人建立与第二巡检机器人的在线通信连接通道,所述第一巡检机器人将所述目标影像发送给第二巡检机器人,其中,所述第二巡检机器人为与所述监控中心建立了在线通信连接通道的巡检机器人中的一个;第二巡检机器人将其所接收的目标影像发送给监控中心。
与现有技术相比,本发明实施例的有益效果是:
本发明实施例提供的高速公路智能巡检机器人系统,通过巡检机器人自身对区域影像的处理,以提取到提取含有异常车辆的目标影像,将所述目标影像发送给监控中心,监控中心所述目标影像进行场景评估,基于评估结果确定处理指令,将所述处理指令发送给所述巡检机器人,无需监控中心的工作人员对影像的异常情况进行筛选,节省了人力,且提高了监控中心反馈给巡检机器人以处理指令的及时性,且避免了过多无用的影像信息发送给监控中心,缩短信息发送与接收的传输周期,进一步提高该巡检机器人系统的时效性。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简要介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域的普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种高速公路智能巡检机器人系统的结构图;
图2为本发明实施例中巡检机器人的结构示意图;
图3为本发明实施例提供的一种中央处理器的结构示意图;
图4为本发明实施例提供的一种边缘检测模块的结构示意图;
图5为本发明另一种实施例提供的巡检机器人的结构示意图;
图6为本发明实施例提供的一种高速公路智能巡检方法的实现流程图;
图7为本发明实施例中目标车辆异常行驶的示意图;
图8为本发明实施例中目标车辆正常行驶的示意图。
具体实施方式
为使本申请的目的、实施方式和优点更加清楚,下面将结合本申请示例性实施例中的附图,对本申请示例性实施方式进行清楚、完整地描述,显然,所描述的示例性实施例仅是本申请一部分实施例,而不是全部的实施例。
基于本申请描述的示例性实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请所附权利要求保护的范围。此外,虽然本申请中公开内容按照示范性一个或几个实例来介绍,但应理解,可以就这些公开内容的各个方面也可以单独构成一个完整实施方式。
需要说明的是,本申请中对于术语的简要说明,仅是为了方便理解接下来描述的实施方式,而不是意图限定本申请的实施方式。除非另有说明,这些术语应当按照其普通和通常的含义理解。
本申请中说明书和权利要求书及上述附图中的术语“第一”、“第二”、“第三”等是用于区别类似或同类的对象或实体,而不必然意味着限定特定的顺序或先后次序,除非另外注明(Unless otherwise indicated)。应该理解这样使用的用语在适当情况下可以互换,例如能够根据本申请实施例图示或描述中给出那些以外的顺序实施。
此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖但不排他的包含,例如,包含了一系列组件的产品或设备不必限于清楚地列出的那些组件,而是可包括没有清楚地列出的或对于这些产品或设备固有的其它组件。
图1示例性的示出了本发明实施例提供的一种高速公路智能巡检机器人系统的结构图,为了便于说明,仅示出与本发明实施例相关的部分。
在本发明提供的一个优选实施方式中,本发明实施例提供了一种高速公路智能巡检机器人系统,所述系统包括监控中心100和至少一个的巡检机器人200。
在本发明实施例中,所述巡检机器人200是一种可以沿应急车道或护栏进行移动的装置,巡检机器人200具有通信功能和摄像功能;所述监控中心100是具有通信功能,且能够提供图像信息处理、存储、显示功能的终端设备,例如平板电脑、笔记本电脑、台式计算机,也可以是具有图像信息处理能力的显示适配器,例如显卡,但并不局限于此。监控中心100与巡检机器人200之间通信连接。
应该理解,图1中的监控中心100与巡检机器人200的数目仅仅是示意性的。根据实现需要,可以具有任意数目的监控中心100与巡检机器人200。
具体的,在发明提供的有优选实施方式中,所述监控中心100,用于接收巡检机器人200发送的异常影像,对所述异常影像进行场景评估,基于评估结果确定处理指令,将所述处理指令发送给所述巡检机器人200;
在本发明实施例中,监控中心100与巡检机器人200之间可通过网络建立通信连接,用于监控中心100与巡检机器人200之间的数据传输,网络可以是用以在监控中心100与巡检机器人200之间提供通信链路的介质,网络可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等,优选的,本实施例中,所述网络采用无线通信链路。
在本发明实施例中,监控中心100通过无线通信链路接收目标巡检机器人发送的异常影像,其中,异常影像为巡检机器人在其所在区域内,对其视野范围内所识别到所有影像进行筛分处理后,得到的含有异常车辆的异常影像,避免过多无用的影像信息发送给监控中心进行筛选分析处理,不仅降低数据传输通道的负担,而且节省监控中心工作人员的劳动强度,在接收异常影像之后,监控中心100将异常影像推送给工作人员,并提醒工作人员,所述提醒可以是在监控中心的显示屏上进行弹框及高亮显示,也可以是通过语音播报的形式进行。
在对所述异常影像进行场景评估的过程中,工作人员对监控中心所推送的异常影像进行人工评估,以协助巡检机器人对异常车辆的异常进行进行及时的反馈及处理,具体的,工作人员根据对异常影像的评估结果做出相应的处理指令,监控中心将工作人员输入的处理指令发送给目标巡检机器人。
进一步的,在本发明提供的优选实施方式中,还包括巡检机器人200,所述的巡检机器人200,用于获取视野范围内的区域影像,提取含有目标车辆的目标影像,其中,所述目标影像为预设时间段内采集的区域影像中首次出现目标车辆的影像;对所述目标影像进行处理,确定含有异常车辆的异常影像,将所述异常影像发送给监控中心;接收所述监控中心返回的处理指令并执行,无需监控中心的工作人员对影像的异常情况进行筛选,节省了人力,且提高了监控中心反馈给巡检机器人以处理指令的及时性。
其中,在本发明提供的优选实施方式中,巡检机器人200具有摄像功能,本实施例中,控制巡检机器人200移动到指定位置处,如高速公路的匝道口处,该处是最容易出现倒车等违规行为,因此,通过使巡检机器人200移动到指定的匝道口处,并调整巡检机器人200的摄像的视野范围,使得的巡检机器人200的视野覆盖匝道口,进而可以通过机器人200对匝道口处进行实时摄像。
具体的,在本发明提供的优选实施方式中,所述提取含有目标车辆的目标影像的步骤之前,首先对区域图像进行处理,具体的,是对巡检机器人所获取到的目标视野的区域影像进行帧图像的提取,其中,首先使用层次聚类算法对视频关帧图像进行初步提取;然后结合语义相关算法对初步提取的帧图像进行直方图对比去掉冗余帧,确定视频的帧图像,然后对所述帧图像进行降噪处理;然后对所述帧图像进行边缘检测,提取含有目标车辆的目标影像。
进一步的,对所述帧图像记性边缘检测,其是根据图像中物体的边缘的灰度不连续的特征,利用梯度进行处理,通过获取待检产品的图像的边缘,从而进一步确定所述目标车辆的图像。例如使用Roberts边缘算子、Sobel边缘检测算子、Prewitt边缘算子、Laplacan边缘算子或者Canny边缘检测算子等方式。
图2示例性的示出了本发明实施例提供的巡检机器人的结构示意图;
如图2所示,在本发明提供的优选实施方式中,所述巡检机器人200包括:
摄像装置201,用于获取视野范围内的区域影像,在巡检机器人达到指定位置后,通过摄像装置对巡检机器人视野范围内进行录像;
本实施例中,巡检机器人200具有摄像功能,通过控制巡检机器人200移动到指定位置处,并调整巡检机器人200的摄像的视野范围,使得的巡检机器人200的视野覆盖匝道口,进而可以通过机器人200对匝道口处进行实时摄像。
进一步的,在本发明提供的优选实施方式中,所述的巡检机器人200还包括中央处理器202,用于提取含有目标车辆的目标影像;对所述目标影像进行处理,确定含有异常车辆的异常影像;
其中,在本实施例中,对目标影像进行处理是对巡检机器人所获取到的目标视野的区域影像进行帧图像的提取,然后对所述帧图像进行降噪处理;然后对所述帧图像进行边缘检测,提取含有异常车辆的目标影像。
进一步的,在本发明提供的优选实施方式中,所述的巡检机器人200还包括通信装置203,用于将所述异常影像发送给监控中心,和/或接收所述监控中心返回的处理指令;本发明实施例中,通过通信装置203建立与监控中心100和/或临近巡检机器人之间的通信连接,其中,临近巡检机器人用于在当前巡检机器人与监控中心之间存在信号中断时,起到数据传输的桥接的作用。
输出装置204,用于执行处理指令,输出装置204一方面向目标视野的区域广播警示信息,另一方面,用于执行自监控中心的处理指令,以及时对现场进行处理。
图3为示例性的示出了本发明实施例提供的一种中央处理器的结构示意图;
如图3所示,在本发明的一些实施例中,所述中央处理器202包括:
提取单元2021,用于提取含有目标车辆的目标影像;
处理单元2022,用于对所述目标影像进行处理,确定含有异常车辆的异常影像。
具体的,在本发明提供的优选实施方式中,本发明实施例提供了一种提取单元,所述提取单元2021包括:
帧提取模块20211,用于对所述区域影像提取帧图像,首先使用层次聚类算法对视频关帧图像进行初步提取;然后结合语义相关算法对初步提取的帧图像进行直方图对比去掉冗余帧,确定视频的帧图像;
降噪模块20212,用于对所述帧图像进行降噪处理;
边缘检测模块20213,用于对所述帧图像进行边缘检测,提取含有目标车辆的目标影像。
其中,在本发明实施例提供的对帧图像进行边缘检测的具体实现中,计算所述帧图像中各像素点的灰度值;根据所述帧图像中各像素点的灰度值确定所述帧图像中的目标车辆的边缘像素点,从而确定帧图像中目标车辆的边缘,进而根据所述帧图像中的目标车辆的边缘像素点确定所述帧图像中目标车辆的边缘。
进一步的,在提取含有目标车辆的目标影像的具体实现过程中,可以根据所述目标车辆的边缘,确定含有所述目标车辆的目标影像。
在本发明的一些实施例中,所述处理单元2022包括:
划分模块20221,用于基于目标车辆的驻点,其中,所述驻点为所述目标车辆速度为零时的位置点;基于出现所述驻点的时间节点将所述目标影像划分为第一影像和第二影像;
在本发明实施例中,目标车辆在初次进入目标视野的区域时,当目标车辆存在在匝道口进行倒车或者掉头的行为时,在这个过程中,目标车辆会存在一个速度为零的时刻存在,进一步的,目标车辆车速为零时,将目标车辆所处的当前位置作为驻点,与驻点对应的是,当前存在一个出现驻点时的时间节点,进一步的,本发明实施例可以根据当前时间节点对巡检机器人所获取到的目标影像进行一个划分,即基于所述的时间节点将目标影像划分为第一影像和第二影像。
位点确定模块20222,用于将所述目标车辆在第一影像中的首次出现时的位置点作为第一位点;将所述目标车辆在第二影像中最后出现的位置点作为第二位点;
图8示例性的示出了本发明实施例中目标车辆在正常行驶状态下的示意图。
进一步的,在本发明实施例中,所述处理单元2022还包括位点更新模块20223,用于在所述第二位点所述第一位点之间的第一距离D1大于所述驻点与所述第一位点之间的第二距离D2时,将所述第二位点作为行驶位点,如图8所示,此时的目标车辆属于正常行驶状态,即目标车辆没有出现倒车或者掉头的情况,此时将第二位点作为行驶位点,行驶位点即目标车辆正常行驶状态时所处位置。
图7示例性的示出了本发明实施例中目标车辆存在异常行驶状态的示意图;
进一步的,在本发明实施例中,所述处理单元2022还包括异常确认模块20224,用于在所述第一距离D1小于所述第二距离D2时,将所述驻点作为违规点,并可以确定当前目标车辆为异常车辆,将含有所述异常车辆的目标影像作为异常影像。如图7所示,此时的目标车辆属于异常行驶状态,即目标车辆存在倒车或者掉头的违规情况,此时,可判断当前的目标车辆违规,并将含有当前异常车辆的目标影像作为异常影像。
在本发明实施例中,利用巡检机器人200对第一距离D1和第二距离D2的测量中,可能存在目标视野的视角和车辆的行驶路径存在偏差角度的情况,在这种情况下,为了更为精确的测定第一距离D1和第二距离D2的大小,以对D1和D2之间的大小进行比较;本发明实施例首先对目标车辆的行驶路径的行驶辅助线进行识别,确定车辆的行驶辅助线,基于行驶辅助线和巡检机器人的摄像视角,确定所述的偏差角度,基于透视关系,并根据偏差角度对巡检机器人测得的距离进行真实距离的还原计算,以获取所述第一距离D1和第二距离D2的真实距离;
另外,可以理解的是,本发明实施例中对于第一距离D1和第二距离D2之间大小的比较,通过巡检机器人测得的非真实距离就可以直接对第一距离D1和第二距离D2之间的大小进行判断比较,无需测算真实距离。
图4为示例性的示出了本发明实施例提供的边缘检测模块的结构示意图;
在本发明的一些实施例中,所述边缘检测模块20213包括:
灰度值计算子模块202131,用于计算所述帧图像中各像素点的灰度值;
边缘像素点确定子模块202132,用于根据所述帧图像中各像素点的灰度值确定所述帧图像中的目标车辆的边缘像素点;在本发明实施例中,利用针图像中目标车辆的边缘的灰度具有不连续的特征,通过处理可以确定所述区域图像中的目标车辆的边缘像素点。
边缘确定子模块202133,用于根据所述帧图像中的目标车辆的边缘像素点确定所述帧图像中目标车辆的边缘;
影像提取子模块202134,用于根据所述目标车辆的边缘,确定含有所述目标车辆的目标影像。
图5为本发明另一种实施例提供的巡检机器人的结构示意图;
在本发明的一些实施例中,所述巡检机器人200还包括:
移动底座203,所述移动底座与中央处理器203信号连接,所述中央处理器用于控制所述移动底座沿预定巡检路径进行移动;
其中,预定巡检路径可以是物理实体路径(如设置在高速公路护栏上的轨道),也可以是软件程序中的虚拟控制路径。例如可以在高速公路的应急车道地面上通过粘贴、喷印等方式设置标记物从而形成路径轨迹。其中,标记物可以但不限于是绝缘胶布、二维码、色块等。预设路径的具体线路可以根据实际情况进行设计。
进一步的,在本发明实施例中,所述的巡检机器人200还包括:
云台204,设置在所述移动底座203上,所述云台为全角度旋转云台,所述全角度旋转云台与所述中央处理器202信号连接,所述中央处理器202用于控制所述全角度旋转云台的旋转角度;
所述的巡检机器人200还包括:
摄像装置201,设置在所述云台204上,所述摄像装置201与所述中央处理器202信号连接。
本发明的一些实施例中,所述监控中心100与每一个巡检机器人200之间通过无线网络通信连接;每一个巡检机器人200之间通过无线网络通信连接,通过多个的巡检机器人200之间相互通过无线网络通信连接,在相临近巡检机器人用于在当前巡检机器人与监控中心之间存在信号中断时,起到数据传输的桥接的作用。
第二方面,本发明实施例提供了一种高速公路智能巡检方法,应用于巡检机器人200,图6为示例性的示出了本发明实施例提供的一种高速公路智能巡检方法的实现流程图;
其中,如图6所示,在本发明实施例提供的一种高速公路智能巡检方法中,所述方法300包括以下具体步骤:
步骤S301:获取视野范围内的区域影像;
步骤S302:提取含有目标车辆的目标影像,基于目标车辆的驻点,将所述目标影像划分为第一影像和第二影像;其中,所述驻点为所述目标车辆速度为零时的位置点;
步骤S303:将所述目标车辆在第一影像中的首次出现时的位置点作为第一位点;将所述目标车辆在第二影像中最后出现的位置点作为第二位点;
步骤S304:判断第一距离与第二距离的大小,其中,所述第一距离为所述第二位点所述第一位点之间的距离,所述第二距离为所述驻点与所述第一位点之间的距离;
步骤S305:若所述第二位点所述第一位点之间的第一距离大于所述驻点与所述第一位点之间的第二距离,则将所述第二位点作为行驶位点;
步骤S306:若所述第一距离小于所述第二距离,则将所述驻点作为违规点,并确定当前目标车辆为异常车辆,并将含有所述异常车辆的目标影像作为异常影像,将所述异常影像发送给监控中心;
步骤S307:接收所述监控中心返回的处理指令并执行。
进一步的,为了实现在相临近巡检机器人用于在当前巡检机器人与监控中心之间存在信号中断时,起到数据传输的桥接的作用,在本发明提供的优选实施方式中,所述将所述目标影像发送给监控中心的具体步骤包括:
在所述第一巡检机器人与所述监控中心建立了在线通信连接通道时,所述第一巡检机器人直接将所述目标影像发送给监控中心;
和/或
在所述第一巡检机器人与所述监控中心未建立在线通信连接通道时,所述第一巡检机器人建立与第二巡检机器人的在线通信连接通道,所述第一巡检机器人将所述目标影像发送给第二巡检机器人,其中,所述第二巡检机器人为与所述监控中心建立了在线通信连接通道的巡检机器人中的一个;第二巡检机器人将其所接收的目标影像发送给监控中心。
与现有技术相比,本发明实施例的有益效果是:
本发明实施例提供的高速公路智能巡检机器人系统,通过巡检机器人自身对区域影像的处理,以提取到提取含有异常车辆的目标影像,将所述目标影像发送给监控中心,监控中心所述目标影像进行场景评估,基于评估结果确定处理指令,将所述处理指令发送给所述巡检机器人,无需监控中心的工作人员对影像的异常情况进行筛选,节省了人力,且提高了监控中心反馈给巡检机器人以处理指令的及时性,且避免了过多无用的影像信息发送给监控中心,缩短信息发送与接收的传输周期,进一步提高该巡检机器人系统的时效性。
需要说明的是,对于前述的各实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某些步骤可能采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,涉及的动作和模块并不一定是本发明所必须的。
以上实施例仅用以说明本发明的技术方案,而非对发明的保护范围进行限制。显然,所描述的实施例仅仅是本发明部分实施例,而不是全部实施例。基于这些实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明所要保护的范围。
尽管参照上述实施例对本发明进行了详细的说明,本领域普通技术人员依然可以在不冲突的情况下,不作出创造性劳动对本发明各实施例中的特征根据情况相互组合、增删或作其他调整,从而得到不同的、本质未脱离本发明的构思的其他技术方案,这些技术方案也同样属于本发明所要保护的范围。
Claims (6)
1.一种高速公路智能巡检机器人系统,其特征在于,所述系统包括监控中心和至少一个的巡检机器人;其中:
监控中心,用于接收巡检机器人发送的异常影像,对所述异常影像进行场景评估,基于评估结果确定处理指令,将所述处理指令发送给所述巡检机器人;
巡检机器人,用于获取视野范围内的区域影像,提取含有目标车辆的目标影像,其中,所述目标影像为预设时间段内采集的区域影像中首次出现目标车辆的影像;对所述目标影像进行处理,确定含有异常车辆的异常影像,将所述异常影像发送给监控中心;接收所述监控中心返回的处理指令并执行;
所述巡检机器人包括:
摄像装置,用于获取视野范围内的区域影像;
中央处理器,用于提取含有目标车辆的目标影像;对所述目标影像进行处理,确定含有异常车辆的异常影像;
通信装置,用于将所述异常影像发送给监控中心,和/或接收所述监控中心返回的处理指令;
输出装置,用于执行处理指令;
所述中央处理器包括:
提取单元,用于提取含有目标车辆的目标影像;
处理单元,用于对所述目标影像进行处理,确定含有异常车辆的异常影像;
所述提取单元包括:
帧提取模块,用于对所述区域影像提取帧图像;
降噪模块,用于对所述帧图像进行降噪处理;
边缘检测模块,用于对所述帧图像进行边缘检测,提取含有目标车辆的目标影像;
所述处理单元包括:
划分模块,用于基于目标车辆的驻点,其中,所述驻点为所述目标车辆速度为零时的位置点;基于出现所述驻点的时间节点将所述目标影像划分为第一影像和第二影像;
位点确定模块,用于将所述目标车辆在第一影像中的首次出现时的位置点作为第一位点;将所述目标车辆在第二影像中最后出现的位置点作为第二位点;
位点更新模块,用于在所述第二位点所述第一位点之间的第一距离大于所述驻点与所述第一位点之间的第二距离时,将所述第二位点作为行驶位点;
异常确认模块,用于在所述第一距离小于所述第二距离时,将所述驻点作为违规点,确定当前目标车辆为异常车辆,将含有所述异常车辆的目标影像作为异常影像。
2.根据权利要求1所述的高速公路智能巡检机器人系统,其特征在于,所述边缘检测模块包括:
灰度值计算子模块,用于计算所述帧图像中各像素点的灰度值;
边缘像素点确定子模块,用于根据所述帧图像中各像素点的灰度值确定所述帧图像中的目标车辆的边缘像素点;
边缘确定子模块,用于根据所述帧图像中的目标车辆的边缘像素点确定所述帧图像中目标车辆的边缘;
影像提取子模块,用于根据所述目标车辆的边缘,确定含有所述目标车辆的目标影像。
3.根据权利要求1~2任一所述的高速公路智能巡检机器人系统,其特征在于,所述巡检机器人还包括:
移动底座,所述移动底座与中央处理器信号连接,所述中央处理器用于控制所述移动底座沿预定巡检路径进行移动;
云台,设置在所述移动底座上,所述云台为全角度旋转云台,所述全角度旋转云台与所述中央处理器信号连接,所述中央处理器用于控制所述全角度旋转云台的旋转角度;
摄像装置,设置在所述云台上,所述摄像装置与所述中央处理器信号连接。
4.根据权利要求1~2任一所述的高速公路智能巡检机器人系统,其特征在于,所述监控中心与每一个巡检机器人之间通过无线网络通信连接;每一个巡检机器人之间通过无线网络通信连接。
5.一种高速公路智能巡检方法,应用于巡检机器人,其特征在于,所述方法包括以下具体步骤:
获取视野范围内的区域影像;
提取含有目标车辆的目标影像,基于目标车辆的驻点,将所述目标影像划分为第一影像和第二影像;其中,所述驻点为所述目标车辆速度为零时的位置点;
将所述目标车辆在第一影像中的首次出现时的位置点作为第一位点;将所述目标车辆在第二影像中最后出现的位置点作为第二位点;
若所述第二位点所述第一位点之间的第一距离大于所述驻点与所述第一位点之间的第二距离,则将所述第二位点作为行驶位点;
若所述第一距离小于所述第二距离,则将所述驻点作为违规点,并确定当前目标车辆为异常车辆,并将含有所述异常车辆的目标影像作为异常影像,将所述异常影像发送给监控中心;
接收所述监控中心返回的处理指令并执行。
6.根据权利要求5所述的高速公路智能巡检方法,其特征在于,所述将所述异常影像发送给监控中心的具体步骤包括:
在第一巡检机器人与所述监控中心建立了在线通信连接通道时,所述第一巡检机器人直接将所述目标影像发送给监控中心;
和/或
在所述第一巡检机器人与所述监控中心未建立在线通信连接通道时,所述第一巡检机器人建立与第二巡检机器人的在线通信连接通道,所述第一巡检机器人将所述目标影像发送给第二巡检机器人,其中,所述第二巡检机器人为与所述监控中心建立了在线通信连接通道的巡检机器人中的一个;第二巡检机器人将其所接收的目标影像发送给监控中心。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111258483.1A CN114120658B (zh) | 2021-10-27 | 2021-10-27 | 一种高速公路智能巡检机器人系统以及巡检方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202111258483.1A CN114120658B (zh) | 2021-10-27 | 2021-10-27 | 一种高速公路智能巡检机器人系统以及巡检方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114120658A CN114120658A (zh) | 2022-03-01 |
CN114120658B true CN114120658B (zh) | 2022-06-24 |
Family
ID=80377235
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202111258483.1A Active CN114120658B (zh) | 2021-10-27 | 2021-10-27 | 一种高速公路智能巡检机器人系统以及巡检方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN114120658B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117035745B (zh) * | 2023-10-07 | 2023-12-19 | 上海华建电力设备股份有限公司 | 一种变电站线路保护系统及方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106571039A (zh) * | 2016-08-22 | 2017-04-19 | 中海网络科技股份有限公司 | 一种高速公路违章行为自动抓拍系统 |
CN110085029A (zh) * | 2019-05-31 | 2019-08-02 | 重庆交通大学 | 基于轨道式巡检机器人的高速公路巡检系统与方法 |
CN210061154U (zh) * | 2019-06-11 | 2020-02-14 | 山东奥邦交通设施工程有限公司 | 一种高速公路应急车道巡检机器人 |
WO2021014464A1 (en) * | 2019-07-19 | 2021-01-28 | John Alexander Valiyaveettil | System, multi-utility device and method to monitor vehicles for road saftey |
-
2021
- 2021-10-27 CN CN202111258483.1A patent/CN114120658B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106571039A (zh) * | 2016-08-22 | 2017-04-19 | 中海网络科技股份有限公司 | 一种高速公路违章行为自动抓拍系统 |
CN110085029A (zh) * | 2019-05-31 | 2019-08-02 | 重庆交通大学 | 基于轨道式巡检机器人的高速公路巡检系统与方法 |
CN210061154U (zh) * | 2019-06-11 | 2020-02-14 | 山东奥邦交通设施工程有限公司 | 一种高速公路应急车道巡检机器人 |
WO2021014464A1 (en) * | 2019-07-19 | 2021-01-28 | John Alexander Valiyaveettil | System, multi-utility device and method to monitor vehicles for road saftey |
Also Published As
Publication number | Publication date |
---|---|
CN114120658A (zh) | 2022-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102026685B1 (ko) | 영상과 진동을 이용한 도로불량정보 제공 장치 및 서버 | |
CN106373430B (zh) | 一种基于计算机视觉的交叉路口通行预警方法 | |
KR102167291B1 (ko) | 도로 상태 정보 수집 시스템 및 방법 | |
CN104966304A (zh) | 基于卡尔曼滤波与非参数背景模型的多目标检测跟踪方法 | |
CN109782364B (zh) | 基于机器视觉的交通标志牌缺失检测方法 | |
CN113139482A (zh) | 交通异常检测的方法和装置 | |
CN104766086A (zh) | 一种公路标识的监管方法和系统 | |
KR102167292B1 (ko) | 이기종 센싱값을 이용한 도로 상태 정보 수집 장치 및 방법 | |
CN111753612B (zh) | 一种抛洒物检测方法、装置及存储介质 | |
CN104282154A (zh) | 一种车辆超载监控系统及方法 | |
CN111931726B (zh) | 交通灯检测的方法、装置、计算机存储介质和路侧设备 | |
CN114120658B (zh) | 一种高速公路智能巡检机器人系统以及巡检方法 | |
CN107977596A (zh) | 一种车牌状态识别方法及装置 | |
CN110826412A (zh) | 高速公路能见度检测系统和方法 | |
CN112084892B (zh) | 一种道路异常事件检测管理装置及其方法 | |
CN114494998B (zh) | 一种车辆数据智能分析方法及系统 | |
KR102026686B1 (ko) | 커넥티드 차량을 이용한 도로 파손 정보 제공 장치 및 도로 파손 판정 모델 생성 서버 | |
KR101719799B1 (ko) | 교통정보 감응형 cctv 모니터링 시스템 | |
CN111062238A (zh) | 基于人体骨架信息及多目标跟踪的扶梯流量监测方法及系统 | |
Doycheva et al. | Computer vision and deep learning for real-time pavement distress detection | |
CN114040094A (zh) | 一种基于云台相机的预置位调节方法和设备 | |
CN117768610A (zh) | 基于多目标识别的高速铁路周界入侵风险监测方法及系统 | |
CN104463905A (zh) | 施工现场车辆监控方法 | |
CN114693722B (zh) | 一种车辆行驶行为检测方法、检测装置及检测设备 | |
CN114333331B (zh) | 一种多车道桥梁车辆通行信息与车重识别方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |