CN110641521A - 动车组司机行为智能识别系统 - Google Patents

动车组司机行为智能识别系统 Download PDF

Info

Publication number
CN110641521A
CN110641521A CN201910895488.1A CN201910895488A CN110641521A CN 110641521 A CN110641521 A CN 110641521A CN 201910895488 A CN201910895488 A CN 201910895488A CN 110641521 A CN110641521 A CN 110641521A
Authority
CN
China
Prior art keywords
driver
motor train
vehicle
ground terminal
server
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201910895488.1A
Other languages
English (en)
Inventor
戴亮
崔睿琦
丁斌
刘杨
李超
宋子杨
程得莹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Henan Blue Letter Technology Co Ltd
Original Assignee
Henan Blue Letter Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Henan Blue Letter Technology Co Ltd filed Critical Henan Blue Letter Technology Co Ltd
Priority to CN201910895488.1A priority Critical patent/CN110641521A/zh
Publication of CN110641521A publication Critical patent/CN110641521A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B61RAILWAYS
    • B61LGUIDING RAILWAY TRAFFIC; ENSURING THE SAFETY OF RAILWAY TRAFFIC
    • B61L15/00Indicators provided on the vehicle or vehicle train for signalling purposes ; On-board control or communication systems
    • B61L15/0018Communication with or on the vehicle or vehicle train
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/008Registering or indicating the working of vehicles communicating information to a remotely located station
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C5/00Registering or indicating the working of vehicles
    • G07C5/08Registering or indicating performance data other than driving, working, idle, or waiting time, with or without registering driving, working, idle or waiting time
    • G07C5/0841Registering performance data
    • G07C5/085Registering performance data using electronic data carriers
    • G07C5/0866Registering performance data using electronic data carriers the electronic data carrier being a digital video recorder in combination with video camera

Abstract

本发明属于动车组运行安全监测技术领域,特别是涉及动车组司机行为识别系统,包括车载识别仪、中心服务器和地面终端,车载识别仪与中心服务器通过移动网络连接,在动车组运行过程中,实时采集动车组司机作业过程音视频并识别、存储,还可以与地面终端进行音视频通讯;中心服务器对车载识别仪回传的音视频数据进行处理和存储,并响应车载识别仪和地面终端的操作;地面终端与中心服务器连接,接收司机行为信息,也可与司机进行远程音视频通话;系统可以实时监控动车组司机作业状态,及时提醒司机,地面管理人员通过本系统能及时了解司机当前状况,能实现双向音频单向视频对讲,并能在紧急状况下,简单快捷的实现车地应急指挥。

Description

动车组司机行为智能识别系统
技术领域
本发明属于动车组运行操控监测技术领域,特别是涉及动车组司机车载智能识别系统。
背景技术
高铁动车安全运行,与机务管理水平及安全能力的提升有着密切关系,而要保证动车安全运行,动车组司机作业状态至关重要;动车组列车运行速度快,操作标准要求高,司机工作强度大,精神高度紧张,单人值乘时间长,易产生疲劳、盹睡、抽烟、接打电话等情况,产生较大行车安全隐患;目前采用司机室固定摄像头录制、随车便携摄像头录制等方法记录司机作业状态,但均为事后分析,不能实时掌握司机作业状况,无法在动车组司机精神状态不佳或不集中时进行及时提醒、报警,无法提前规避风险。
发明内容
为了克服现有技术中存在的缺陷,本发明的目的是提供一种动车组司机行为智能识别系统,车载识别仪安装在司机正前方操纵台位置,实施拍摄记录司机作业过程音视频,基于深度学习的方法,通过人工智能算法,实时识别司机疲劳、盹睡、打电话、抽烟等违章行为,进行语音报警提醒并发送至地面中心,确保行车安全。
为了实现上述目的,本发明采用以下的技术方案:
本发明提供的动车组司机行为智能识别系统,包括:
车载识别仪,与中心服务器通过移动网络连接,用于在动车组运行过程中,实时采集动车组司机作业过程音视频并智能识别司机违章行为并存储,并可以与地面终端进行音视频通讯;
中心服务器,对车载识别仪回传的音视频数据进行处理和存储,并响应车载识别仪和地面终端的操作;
以及
地面终端,与中心服务器连接,接收司机违章信息,也可与司机进行远程音视频通话。
进一步地,所述中心服务器包括应用服务器、数据服务器、权限管理服务器。
进一步地,所述应用服务器用于与车载识别仪及地面终端进行业务对接,响应双方的操作,还通过网络与部署于铁路局数据中心的EOAS服务器连接,接收动车组运行线路、里程、速度等信息;权限服务器用于区分不同司机对应的路局等权限信息,确保对应的地面终端具有查看权限;数据服务器用于存储识别出的加密视频。
进一步地,所述车载识别仪具备红外补光灯的高清摄像头,在任何光照情况下均能清晰的捕捉到拍摄对象,当检测到司机疲劳、盹睡、抽烟、打电话等违章行为后通过语音给予司机提醒。
进一步地,所述车载识别仪设置有SOS物理按键,司机长按SOS键,可自动与地面终端建立连接,实现音视频通信。
进一步地,所述地面终端根据用户权限,获取对应的车辆列表,地面终端发送视频观看指令到应用服务器,应用服务器通知对应车辆,车辆收到指令后,使用移动网络将视频上传至应用服务器节点;
同时,应用服务器将视频与从EOAS服务器接收到线路、里程、速度等信息做同步处理,并发送至数据服务器存储,地面终端采用自带的专用播放器打开含线路、里程、速度等数据的视频。
与现有技术相比,本发明具有以下优点:
本发明的动车组司机行为智能识别系统,车载识别仪采用便携式设计,方便携带,安装位置灵活,自带移动通信模块,方便实时通讯及数据传输,行车过程中,实时拍摄记录动车组司机作业过程音视频,通过人工智能算法,实时识别司机疲劳、盹睡、抽烟等违章行为状态,通过语音方式给予司机实时提醒,并通过移动网络实时回传至地面服务器,形成报警,地面管理人员通过终端软件能看到司机当前值乘状态的视频或图片;该系统终端还具备司机音视频与线路、车次、公里标、速度、分相区等行车数据结合并同步显示的功能,此外,司机可以通过一键SOS,自动呼叫地面终端,和地面人员实现音视频的实时交流,达到应急指挥的目的。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对现有技术和实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例的动车组司机行为智能识别系统架构图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有实施例,都属于本发明保护的范围。
如图1所示,本实施例的动车组司机行为智能识别系统,包括车载识别仪、中心服务器和地面终端;车载识别仪安放在动车组司机前方,具备红外补光灯的高清摄像头,在任何光照情况下均能清晰拍摄司机行为动作,智能识别仪自带的处理器实时处理记录的音视频,识别出司机疲劳、盹睡、抽烟、接打电话等违章行为,通过语音方式给予司机实时提醒;同时,车载识别仪将识别结果通过4G网络实时回传至中心服务器,形成报警,地面管理人员通过终端软件能看到司机当前值乘状态的视频或图片。
此外,司机可以通过一键SOS,自动呼叫地面终端,和地面人员实现音视频的实时交流,达到应急指挥的目的。
本实施例中中心服务器群包含权限服务器、应用服务器及数据服务器,权限服务器依据地面终端的用户权限,展示给终端相应的车辆列表,终端用户发送视频观看指令到应用服务器,应用服务器通知对应车辆,车辆收到指令后,使用4G网络快速上传至应用服务器节点;同时,应用服务器从EOAS服务器的安全通道接收到线路、里程、速度等业务信息;将视频与业务信息做同步处理后,发送到地面终端,终端用户采用自带的专用播放器打开加密视频,同时展示线路、里程、速度等数据。
地面终端可通过司机姓名,司机ID,车次等信息查找相应车辆,实时接收识别仪发送的司机违规行为信息,进行查看;也可接收司机请求,与司机建立远程音视频同话,给予现场司机指挥支持,或者在看到司机有规章现象时主动与司机建立连接,给与司机以提示,保障安全驾驶;对于已经发生的历史事件,终端软件支持按时间调阅,并且同步行车数据进行展示,方便用户查阅。
需要说明的是,在本说明书中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来讲是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其他实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽范围。

Claims (7)

1.动车组司机行为智能识别系统,其特征在于,包括:
车载识别仪,与中心服务器通过移动网络连接,用于在动车组运行过程中,实时采集动车组司机作业过程音视频并智能识别司机违章行为并存储,并可以与地面终端进行音视频通讯;
中心服务器,对车载识别仪回传的音视频数据进行处理和存储,并响应车载识别仪和地面终端的操作;
以及
地面终端,与中心服务器连接,接收司机违章信息,也可与司机进行远程音视频通话。
2.根据权利要求1所述的动车组司机行为智能识别系统,其特征在于,所述中心服务器包括应用服务器、数据服务器、权限管理服务器。
3.根据权利要求2所述的动车组司机行为智能识别系统,其特征在于,所述应用服务器用于与车载识别仪及地面终端进行业务对接,响应双方的操作;还通过网络与部署于铁路局数据中心的EOAS服务器连接,接收动车组运行线路、里程、速度等信息;
权限服务器用于区分不同司机对应的路局等权限信息,确保相应的地面终端具有查看权限;
数据服务器用于存储识别出的加密视频。
4.根据权利要求1所述的动车组司机行为智能识别系统,其特征在于,所述智能识别仪具有红外补光灯的高清摄像头。
5.根据权利要求1所述的动车组司机车载智能识别系统,其特征在于,所述智能识别仪,检测到司机疲劳、盹睡、抽烟、打电话等违章行为后通过语音给予司机提醒。
6.根据权利要求1所述的动车组司机行为智能识别系统,其特征在于,所述智能识别仪设置有SOS物理按键,司机长按SOS键,可自动与地面终端建立连接,实现音视频通信。
7.根据权利要求1所述的动车组司机行为智能识别系统,其特征在于,所述地面终端根据用户权限,获取对应的车辆列表,地面终端发送视频观看指令到应用服务器,应用服务器通知对应车辆,车辆收到指令后,使用移动网络将视频上传至应用服务器节点;
同时,应用服务器将视频与从EOAS服务器接收到线路、里程、速度等信息做同步处理,并发送至数据服务器存储,地面终端采用自带的专用播放器打开含线路、里程、速度等数据的视频。
CN201910895488.1A 2019-09-21 2019-09-21 动车组司机行为智能识别系统 Withdrawn CN110641521A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910895488.1A CN110641521A (zh) 2019-09-21 2019-09-21 动车组司机行为智能识别系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910895488.1A CN110641521A (zh) 2019-09-21 2019-09-21 动车组司机行为智能识别系统

Publications (1)

Publication Number Publication Date
CN110641521A true CN110641521A (zh) 2020-01-03

Family

ID=69010918

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910895488.1A Withdrawn CN110641521A (zh) 2019-09-21 2019-09-21 动车组司机行为智能识别系统

Country Status (1)

Country Link
CN (1) CN110641521A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111325872A (zh) * 2020-01-21 2020-06-23 和智信(山东)大数据科技有限公司 基于计算机视觉的司机驾驶异常检测设备及检测方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201600783U (zh) * 2009-08-28 2010-10-06 大连鑫奇辉科技有限公司 机车司机行车状态监控智能报警装置
CN201821456U (zh) * 2010-09-29 2011-05-04 济南铁成奇石电子有限公司 铁路行车机车电子添乘系统
CN106845740A (zh) * 2015-12-03 2017-06-13 河南蓝信科技股份有限公司 一种动车组司机操控信息分析的方法及其系统
CN108569315A (zh) * 2017-03-13 2018-09-25 卡斯柯信号有限公司 一种有轨电车司机管理系统
CN109919407A (zh) * 2018-12-28 2019-06-21 地上铁租车(深圳)有限公司 一种驾驶行为主动安全管理系统
US20190246036A1 (en) * 2018-02-02 2019-08-08 Futurewei Technologies, Inc. Gesture- and gaze-based visual data acquisition system

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201600783U (zh) * 2009-08-28 2010-10-06 大连鑫奇辉科技有限公司 机车司机行车状态监控智能报警装置
CN201821456U (zh) * 2010-09-29 2011-05-04 济南铁成奇石电子有限公司 铁路行车机车电子添乘系统
CN106845740A (zh) * 2015-12-03 2017-06-13 河南蓝信科技股份有限公司 一种动车组司机操控信息分析的方法及其系统
CN108569315A (zh) * 2017-03-13 2018-09-25 卡斯柯信号有限公司 一种有轨电车司机管理系统
US20190246036A1 (en) * 2018-02-02 2019-08-08 Futurewei Technologies, Inc. Gesture- and gaze-based visual data acquisition system
CN109919407A (zh) * 2018-12-28 2019-06-21 地上铁租车(深圳)有限公司 一种驾驶行为主动安全管理系统

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
申瑞源: "动车组司机操控信息分析系统(EOAS)设计与实现 ", 《中国铁路》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111325872A (zh) * 2020-01-21 2020-06-23 和智信(山东)大数据科技有限公司 基于计算机视觉的司机驾驶异常检测设备及检测方法
CN111325872B (zh) * 2020-01-21 2021-03-16 和智信(山东)大数据科技有限公司 基于计算机视觉的司机驾驶异常检测方法

Similar Documents

Publication Publication Date Title
CN202871022U (zh) 一种基于gps和人脸识别的校车全自动监控系统
CN2834061Y (zh) 置于出租车内的监控系统
US20150373308A1 (en) Real-time mobile video reporting device
CN201937765U (zh) 无线监控系统及视频监控仪
CN108535888A (zh) 用于监控的ai眼镜及其监控系统
CN110641521A (zh) 动车组司机行为智能识别系统
CN102821269A (zh) 用于动车组的3g远程视频传输系统
CN202231808U (zh) 警车改装无线车载视频监控系统
CN202262224U (zh) 汽车管控系统
CN205375776U (zh) 基于路灯灯杆的安防联动系统
CN214896846U (zh) 一种基于ai技术的行人上高速预警系统
CN110087026A (zh) 一种车辆双屏多摄像头监控系统
CN111383439A (zh) 一种全网通校车智能操作显示系统
CN210822296U (zh) Atp主机前面板视频监测系统
CN211744615U (zh) 校园安防大数据预警系统
CN104408930B (zh) 一种连续闯红灯报警系统及方法
CN106101148A (zh) 一种基于视频采集的客车安全监控系统
CN102542741A (zh) 地铁站监控指挥报警系统
CN203243445U (zh) 车载音视频监控系统
CN115361529A (zh) 一种多功能智能卡口测控系统
CN111385528A (zh) 一种全网通校车智能监控系统
CN207588919U (zh) 一种景区综合安防管理系统
CN204229636U (zh) 一种交通智能高清卡口系统
CN113612902A (zh) 用于铁路巡检、安保巡逻岗与护学岗的智慧哨兵平台装备
CN204242344U (zh) 一种智能监控系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20200103

WW01 Invention patent application withdrawn after publication