CN104751663A - 驾驶员安全驾驶辅助系统和方法 - Google Patents

驾驶员安全驾驶辅助系统和方法 Download PDF

Info

Publication number
CN104751663A
CN104751663A CN201510091768.9A CN201510091768A CN104751663A CN 104751663 A CN104751663 A CN 104751663A CN 201510091768 A CN201510091768 A CN 201510091768A CN 104751663 A CN104751663 A CN 104751663A
Authority
CN
China
Prior art keywords
driver
module
driving behavior
driving
management system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510091768.9A
Other languages
English (en)
Inventor
杨学军
王鹏
陈龙
王旭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing One Ka Hang Science And Technology Ltd
Original Assignee
Beijing One Ka Hang Science And Technology Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing One Ka Hang Science And Technology Ltd filed Critical Beijing One Ka Hang Science And Technology Ltd
Priority to CN201510091768.9A priority Critical patent/CN104751663A/zh
Publication of CN104751663A publication Critical patent/CN104751663A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)

Abstract

利用高清视频采集技术、智能行为识别技术、无线传输技术以及计算机网络等多项技术、在驾驶员出现非安全驾驶行为时及时提醒和预警的驾驶员安全驾驶辅助系统,包括视频采集压缩模块、前端中控模块、无线回传模块、中心后台管理系统,所述视频采集压缩模块采集驾驶员的驾驶情况并进行压缩,将压缩后的码流发送至所述前端中控模块,所述中控模块分拣出特征视频,并实时分析检测特征视频中的驾驶行为,一旦发现非安全驾驶行为,发出语音提醒,截取违规图片,并将相应的违规图片(含时戳)通过无线回传模块回送至所述中心后台管理系统。

Description

驾驶员安全驾驶辅助系统和方法
技术领域
本发明涉及一种驾驶员安全驾驶辅助系统,具体的,涉及一种基于驾驶行为模式识别的驾驶员安全驾驶辅助系统。
背景技术
随着我国高速公路的不断建设和发展,驾驶员的安全驾驶至关重要。数据表明,不专心驾驶是导致车祸的重要因素之一,每年全球约30万人因不专心驾驶(单手或双手离开方向盘、吸烟、打手机、进食等)行为丧生。2014年7月12日,王某驾驶长途客运班车,一边打手机一边抽烟,单手控制方向盘,致使车辆失控与匝道左侧边护栏碰撞后翻出路外。2014年6月27日,大巴车司机一边开车一边嗑瓜子,单手离开方向盘,造成追尾。2013年11月27日,一大巴司机边开车边连续看手机长达20秒,单手驾车,追尾酿车祸。
现有技术中,为了驾驶安全,开发了一些安全驾驶辅助系统,但这些系统普遍存在以下几个方面的问题:
(1)单纯记录,无法回传,无法自动识别非安全行为,无法进行预防,只能事后追究责任取证。现有大巴上很多安装了行车记录仪,可以记录车厢内驾驶员及乘客的行为情况,也同时记录车外的情况,但一是无法进行记录回传,二是也不能自动识别,其作用仅仅是事后公司进行调查取证,而不能做到“预防优先,防患于未然”。
(2)某些实时交互平台(如丰田的G-book系统)需要配备专业的后端服务人员,运营费用高,智能程度低,也容易分散驾驶人员的注意力。另外,其所有的诉求都是由驾驶员主动发起,并不能起到辅助驾驶员的作用,在安全辅助方面的作用有些本末倒置。
(3)某些采用多传感设备的方法需要改造汽车本身,前期成本高,且影响驾驶习惯。该方法会加装握力感应器等,一来影响驾驶习惯,另外也需要对现有的车辆进行深度改造,难以推广。
现有技术中,开发有一种基于模式识别的安全驾驶监控系统和方法,参见中国专利CN102426757A,该系统应用的装置包括视频帧获取单元,安全驾驶监控中心单元,警报标志判断和提示单元,上述视频帧获取单元是一个具有USB接口的摄像头或者专用摄像设备,用于采集驾驶员上身位置和姿态的视频帧,将采集的驾驶员上身位置和姿态的视频帧送入安全驾驶监控中心单元,上述安全驾驶监控中心单元,用于对采集的驾驶员上身位置和姿态的视频帧处理,对该视频帧中的驾驶员进行定位和分割,判断驾驶员驾驶状态,根据驾驶员驾驶状态产生不同的报警类型信号,再将不同的报警类型信号发送到警报标志判断和提示单元,上述警报标志判断和提示单元,用于判断安全驾驶监控中心单元发送来的不同报警类型信号,发出相应的报警提示信息。
另外,在中国专利CN103871200A中,还公开了一种用于汽车驾驶的安全提醒系统及方法,使用车载终端实时采集视频图像并上传,后台服务器对视频图像进行人脸识别获取人脸图像及生成人脸表情的模板数据,将人脸表情的模板数据进行检索识别并生成相似度,判断相似度是否达到预定阈值,根据比较结果生成控制指令并将其发送到车载终端,车载终端根据控制指令对驾驶员进行报警提示。
然而,在该两提案中,由于采用的是前端视频采集,后台分析处理的方式,所以存在很多问题,例如视频传输不是很流畅,视频流比较大,不利于传输,视频传输受通信网路的影响非常大;另外由于采用后台分析处理的方法,其延时比较严重,不能实时处理或监控前端安全状态,该系统的实用性较差,不能满足实际需求。
另外,在中国专利CN102567743A中,公开了一种基于视频图像的驾驶员姿态自动识别方法,通过安装在驾驶室侧方的CCD摄像机采集驾驶员操作方向盘、操作档位、吃东西和打电话等驾驶姿势图像,然后通过同态滤波处理、皮肤区域分割和Curvelet小波变换提取驾驶姿态特征向量来表征不同类的驾驶姿态,最后,采用支持向量机SVM对提取的驾驶姿态特征向量进行分类,从而实现操作方向盘、操作档位、吃东西和打电话等驾驶姿态的自动识别。该发明在不干扰驾驶员正常驾驶活动的前提下,可有效监测驾驶员的不良驾驶行为,从而提高交通行车安全。
然而,在该提案中,其通过专业的向量特征提取对驾驶姿态进行归类,受到运算稳定性的影响较大,并且需要对皮肤区域分区,运算量较大,前端处理比较复杂,并不适合推广适用。
为了解决上述技术问题,本发明团队经过刻苦钻研,开发出了一套成熟的安全驾驶辅助系统和方法,本方案基于现有的图像监控及回传系统,充分发挥现有系统的价值,在后台服务器端增加先进的“非安全驾驶行为模式识别模块”(把驾驶行为模式识别统一到到对方向盘状态的检测,诸如行进过程中单手握方向盘或没有手握住方向盘超出30秒即可归结为非安全驾驶行为),构建自动识别及报警系统,预防事故,彻底改变现有的“事后追究,难以预防”的窘态。
发明内容
基于此,本发明的目的在于,提供一种利用高清视频采集技术、智能行为识别技术、无线传输技术以及计算机网络等多项技术、在驾驶员出现非安全驾驶行为时及时提醒和预警的驾驶员安全驾驶辅助系统与方法。
根据本发明所提供的驾驶员安全驾驶辅助系统,包括视频采集压缩模块、前端中控模块、无线回传模块、中心后台管理系统,其特征在于,所述视频采集压缩模块采集驾驶员的驾驶情况并进行压缩,将压缩后的码流发送至所述前端中控模块,所述中控模块分拣出特征视频,并实时分析检测特征视频中的驾驶行为,一旦发现非安全驾驶行为,发出语音提醒,截取违规图片,并将相应的违规图片(含时戳)通过无线回传模块回送至所述中心后台管理系统。
根据本发明上述驾驶员安全驾驶辅助系统,其特征在于,中心后台管理系统为指挥控制中心提供数据,指挥控制中心根据回传的违规图片的频率和数量,通过语音专线提醒驾驶员纠正驾驶行为。
根据本发明上述驾驶员安全驾驶辅助系统,其特征在于,所述前端中控模块从所述视频采集压缩模块发送过来的所述压缩码流中实时分析驾驶员行为,检测判断是否有不安全驾驶行为的发生,一旦检测到不安全驾驶行为的发生,自动语音播报提醒或把语音信号发送至后台,由中心后台管理系统确认是否进行提醒,并从码流中截取反映不安全驾驶行为的多张照片,由无线回传模块发送至后台管理系统。
根据本发明上述驾驶员安全驾驶辅助系统,其特征在于,所述前端中控模块当分析出汽车处于行驶过程中并且汽车方向盘上没有两只手的持续时间超过30s时,判断为驾驶员有不安全驾驶行为发生。
根据本发明上述驾驶员安全驾驶辅助系统,其特征在于,所述前端中控模块当分析出汽车处于行驶过程中并且汽车方向盘上没有两只手的持续时间超过15s时,判断为驾驶员有不安全驾驶行为发生。
根据本发明上述驾驶员安全驾驶辅助系统,其特征在于,通过所述无线回传模块,所述提醒语音和特征视频、违规图片被回传至中心后台管理系统。
根据本发明,中心后台管理系统具有以下功能:对接收到的特征图片进行存盘、显示、以及进行频度统计;同时管理多个驾驶员的行为;提供指挥控制中心人工干预的接口。
根据本发明所提供的驾驶员安全驾驶辅助方法,提供如上所述安全驾驶辅助系统,其特征在于,通过所述视频采集压缩模块采集驾驶员的驾驶情况并进行压缩,将压缩后的码流发送至所述前端中控模块,通过所述中控模块分拣出特征视频,并实时分析检测特征视频中的驾驶行为,一旦发现非安全驾驶行为,发出语音提醒,截取违规图片,并将相应的违规图片(含时戳)通过无线回传模块回送至所述中心后台管理系统。
根据本发明上述驾驶员安全驾驶辅助方法,其特征在于,所述前端中控模块从所述视频采集压缩模块发送过来的所述压缩码流中实时分析驾驶员行为,检测判断是否有不安全驾驶行为的发生,一旦检测到不安全驾驶行为的发生,自动语音播报提醒或把语音信号发送至后台,由中心后台管理系统确认是否进行提醒,并从码流中截取反映不安全驾驶行为的多张照片,由无线回传模块发送至后台管理系统。
根据本发明上述驾驶员安全驾驶辅助方法,其特征在于,所述前端中控模块当分析出汽车处于行驶过程中并且汽车方向盘上没有两只手的持续时间超过规定时间时,判断为驾驶员有不安全驾驶行为发生。
根据本发明,由于本发明利用高分辨率视频采集压缩技术、智能行为识别预警技术、无线回传技术以及计算机网络技术,利用作为视频采集压缩模块的高清摄像头将驾驶员的驾驶情况采集并进行压缩,并将压缩后的码流送前端中控模块,中控模块实时分析检测特征视频中的驾驶行为,一旦发现非安全驾驶行为,发出语音提醒并将相应的违规图片(含时戳)通过3G/4G回传模块回送中心后台管理系统备份备查,这样,作为指控中心(指挥控制中心),就能够根据回传的违规图片的频率和数量,以决定是否需要通过语音专线提醒驾驶员纠正驾驶行为。
根据本发明,视频采集压缩模块采用市面上的网络高清摄像头,其可以将驾驶员的行为进行高清录像并进行一定的压缩,并封装成IP包通过网口送出,现有的摄像头一般采用H.264进行压缩,本发明基于现在流行的3G/4G网络,但其压缩后的数据流对于3G/4G网络仍是很有压力,故本项目采用现场分析的方法,只提取违规时的图片进行传输,其他时段的视频丢弃,这样大大减轻了网络的压力。
根据本发明,前端中控模块从摄像头送过来的压缩视频流中实时分析驾驶员行为,检测判断是否有不安全驾驶行为的发生,一旦检测到不安全驾驶行为的发生,自动语音播报提醒(可选)或把语音信号发送至后台,由后台确认是否进行提醒,从视频流中截取反映不安全驾驶行为的多张照片,由3G/4G回传模块发送至中心后台管理系统进行存储和统计、备份备查。
根据本发明,无线回传模块将提醒语音和特征视频、违规图片通过3G/4G网络回传至中心后台管理系统。为了防止3G/4G网络的带宽不足及带宽抖动大,可以进行多网卡带宽绑定,进行链路聚合,以实现网络负载均衡及智能路由。
根据本发明,中心后台管理系统主要有以下功能:对接收到的特征图片进行存盘、显示、以及进行频度统计;可同时管理多个驾驶员的行为;提供指控中心人工干预的接口;其他管理员希望具备的管理功能。
根据本发明,可以实现非常优秀的性能指标:非安全行为至少包括抽烟、打手机、进食、单手或双手离开方向盘,识别率不小于60%;驾驶员非安全行为提醒延迟:不超过10s;后台支持用户数:不小于2000个(依赖于中心处理器的能力)。
根据本发明,采用基于图像的“非安全驾驶行为模式识别”算法,为驾驶运营提供优化的驾驶安全辅助系统,可及时发现、上报并提醒非安全驾驶行为,预防交通事故的发生。
根据本发明,系统提供良好的扩展性和兼容行,不但先期能够实现“行车过程中单手或双手离开方向盘等异常行为,行车过程中吸烟、打手机、进食等违规行为”等2大类代表的识别预警,而且后期可以扩展到“东张西望、交谈聊天、驾驶时间过长、疲劳征兆”等行为的预警与提醒。
根据本发明,采集多类实际数据,对识别算法进行优化,使得虚警概率和漏警概率大大降低,达到实用的标准,同时没有给驾驶员带来额外的干扰与注意力分散。
根据本发明,立足于现有的硬件资源整合,包括高清摄像采集模块、前端中控模块、3G/4G无线传输模块、中心软件统计模块,将核心的识别放在前端中控模块处理,提高资源利用效率及及时性。
附图说明
图1为示出本发明一具体实施方式的驾驶员安全驾驶辅助系统的结构图。
图2为示出本发明一具体实施方式的驾驶员安全驾驶辅助系统的视频压缩示意图。
具体实施方式
下面参照附图,通过具体实施方式对本发明的安全驾驶辅助系统进行详细描述。本领域技术人员应该懂得,该描述仅仅是例示性的,本发明并不限于该实施方式。
如图1所示,图1为示出本发明一具体实施方式的驾驶员安全驾驶辅助系统的结构图。所述驾驶员安全驾驶辅助系统包括视频采集压缩模块、前端中控模块、无线回传模块、中心后台管理系统,所述视频采集压缩模块采集驾驶员的驾驶情况并进行压缩,将压缩后的码流发送至所述前端中控模块,所述中控模块分拣出特征视频,并实时分析检测特征视频中的驾驶行为,一旦发现非安全驾驶行为,发出语音提醒,截取违规图片,并将相应的违规图片(含时戳)通过无线回传模块回送至所述中心后台管理系统存储统计、备份备查,中心后台管理系统为指挥控制中心提供数据,这样,作为指控中心,就能够根据回传的违规图片的频率和数量,以决定是否需要通过语音专线提醒驾驶员纠正驾驶行为。
在该方案中,将核心的识别放在前端中控模块处理,在中控模块中即已经分拣出特征视频,而无需将整个码流进行回传,只需将截取的违规图片传送给中心后台管理系统进行存储分析,这样大大减轻了网路负担,提高网路传输效率,显著提高资源利用效率及及时性。
在本发明该具体实施方式中,视频采集区域主要是驾驶员区域,集中在驾驶员座位、驾驶员本身以及方向盘等相关区域。由于本发明主要关注驾驶员是否存在非安全驾驶行为,其背景相对固定单一,可变参量少,故可采用基于某些特征的高倍压缩方法;另外,对于公司而言,其驾驶员的队伍是相对非常稳定的,故可以提前在中心管理系统中建立相应的库,以进行模板的匹配。
在本发明中,对于视频压缩而言,从高清摄像头到高清视频,采用经典的H.264压缩解决方案,其为成熟方案,一般的摄像头里面都进行了集成,其输出的包为已经进行H.264压缩后的码流,该码流可送DVR存储。由于本方案不对H.264进行修改,故不在此方案进行赘述,参考摄像头的说明使用即可,无需增加额外的硬件或软件,采用业界通用的H.264IP摄像头即可。
如上所述,本发明所监视的区域为方向盘区域,其在纵向上是固定的,只有水平方向的转动,是一个特征非常明显且很容易描述的对象,其只需要用简单的几个参数即可准确描述。另外,方向盘上的操作只有3种状态,双手握住方向盘(合规),单手握住方向盘(交叉打轮是个例外,但高速行驶中极少采用),无手在方向盘上。
基于这种特定的应用场景,可以采用基于特征点的压缩,其基本原理示意如图2所示。
图2为示出本发明具体实施方式的驾驶员安全驾驶辅助系统的视频压缩示意图。
如图2所示,发送端和接收端先从网络平台上获得共同的媒体中间件库,在此库的基础上,发端只需要发送关于该中间件的某类特征即可,收端根据特征即可重建出发端的原始图片,可进一步降低数据量5~10倍,代价是发端需要一定的处理能力,前期的试验表明一般的移动终端的处理能力是足够的,对于车载可供电的压缩应该是毫无压力的。
详细的来说,对于本项目的场景,收发双端实现建立好方向盘的库、司机握方向盘的库,所需要传输的就是一个标号、坐标等极少的特征参数,收端根据收到的特征参数,对库进行旋转投影等操作便可重建发端的违规图片。
下面对本发明前端中控模块进行详细说明。
前端中控模块是整个系统的大脑,其负责及时检测出非安全驾驶行为并作出正确响应,其运行的准确率及快捷性直接决定着整个系统的性能,也是是否能够达到需求的决定因素。本发明中,本系统的需求诸如可以是:识别驾驶员行车过程中单手或双手离开方向盘等异常行为;识别驾驶员行车过程中吸烟、打手机、进食等违规行为;所有异常行为及违规行为数据通过3G/4G方式回传到公司后台服务器。
上述需求的首要问题是进行行为分析及聚类,然后准确快捷地识别出非安全驾驶行为,然后进行响应干预,预防事故。
对于非安全驾驶行为抽象与聚类,诸如驾驶中抽烟、驾驶中进食、驾驶中打电话、单手驾驶等均属于非安全驾驶行为,直观上来看,其中存在着诸多不同,驾驶员性别不同、肤色不同、表情不同、身高不同、表情不同、姿态不同、车型不同、手机不同,如果逐一进行识别,需要具有极高的可与人类比拟的智能程度,而无法实现系统的自动识别,也就退化到现在的监控模式,靠人眼死盯,系统的智能化程度极低,更谈不上预警、预防等更高级的要求和操作,但仔细分析这些非安全驾驶行为,其有一个共同点:单手或者双手离开了方向盘。从这个角度出发的话,一个多场景检测识别的问题可抽象统一到一个对方向盘上有几只手的检测问题,这显然是一个较为容易的问题。由此,可以将该类能够反映绝大多数非安全驾驶行为抽象与聚类为同一性质的结果,即将同时满足如下两个个条件的情形抽象与聚类为非安全驾驶行为:
1)行驶过程中(不检查停车状态);
2)方向盘上没有两只手的持续时间超过30s(限定时间是为了避免交叉打轮或是换挡之类操作的误报,但该时间可以进一步根据先验知识优化)。
在抽象和聚类后,前端中控模块即对其进行智能行为识别动作。
由上述可知,智能行为识别动作可以被简化成一个方向盘上的有几只手持续控制方向盘的时空二维检测问题,这大大简化了识别模块运行模式,提高运行速度。这其中,在进行智能行为识别时,还需同时考虑几个细节性问题:
1)摄像头要能够以较好的角度获得方向盘上手的位置,尽量从驾驶员的后上方俯视,以免被驾驶员本身或座椅遮挡;
2)由于涉及到时间尺度的检测,时间阈值的设置是很关键的,其需要通过前期的试验确立出合理的取值;
3)由于所检测的为方向盘,而方向盘为已知的且不会发生变化的对象,所以,在本发明中,提前建立有一个精确的模型库,模拟出各个方向盘的各种形态,显著辅助该系统提高识别的速度和准确率;
4)由于上述抽象与聚类模式归集了绝多数非安全驾驶行为,因此极少数非安全驾驶行为中,对方向盘的检测可能会存在一定的漏报,比如说抽烟时只是点烟及扔点烟头时用手,其他时候仍是双手握着方向盘,针对这种特殊情况,本发明为此增加对驾驶员嘴部形态进行检测的模式,两者结合,进一步提高识别准确率。
在考虑到上述四个细节问题之后,智能行为识别实质性简化成为一个经典的二维模式识别,其收敛速度及准确性将完全取决于模板的准确性、拍摄视频的清晰度等等,其在这方面的问题即归集为系统的问题,因本发明的发明点不在于对该系统问题进行分析,不在此赘述。我们前期开展过的相似工作(人脸检测)的准确率在80%以上,本发明中,通过植入相关算法,大大提高识别准确率。
智能行为识别的最终目标是及时发现并预警,下面举个具体例子对其基本工作机理及流程进行介绍,如下:
1)车辆启动后,对接收的特征视频进行驾驶行为模式进行自动识别;
2)如检测到单手离开方向盘,启动计数器,如持续10秒仍然是单手离开方向盘,立即通过语音提醒驾驶员注意安全驾驶;
3)如检测到双手离开方向盘,立即通过语音提醒驾驶员注意安全驾驶。
下面对回传模块进行说明。
考虑到目前只需传输特征图片,采用目前的3G网络足可以支撑。当需要考虑网络传输效果或者需要支撑多个车辆运行时,也可以采用4G网络进行传输,本发明系统同时还兼容5G网络传输。
另外,在考虑传输网络时,同时还应考虑到网络运营商的一些状况,例如:1)不同区域不同运营商的网络状况不同;2)同一运营商的网络抖动也会较大。故此,本发明优选采用2个网卡进行互为备份均衡的设计,提高回传图片的可靠性。
在前期的无线3G/4G回传模块的开发中,开发了单卡、双卡、七卡等支持多种运营商的多卡3G/4G回传模块,并形成了自主的创新技术,本申请申请人将在后续中不排除进一步申请专利的可能性。因为本发明发明点不在于此,所以不详细描述,采用该技术,具有诸多优点,例如:
极速的传输体验:采用自主研发的DYATP协议,带宽占用可达90%,传输速度比普通FTP快8倍。
采用断点续传技术:采用了某类先进编码技术,可以进行断点续传,降低传输开销。
数据安全可靠:支持MD5校验,传输时动态进行实时加密。结合前面提到的特征图片压缩方法,可以大幅度降低所需的3G/4G卡数量(考虑到系统的稳定性,采用2块3G/4G网卡即可满足要求),从而大幅降低回传所引入的流量开销,节省该系统的日常运营费用。
下面对中心后台管理系统进行说明。中心后台管理系统主要实现回传图片的存档、显示与监控。考虑到同时监控的车辆较多,后台系统采用中断机制,主界面只显示出现违规的车辆。同时,按照违规次数和频度对所管理车辆进行排序,供监控人员参考。后台系统还提供报警机制,对出现违规极为频繁的车辆,报警提醒监控人员进行人工干预。
上面对本发明的安全驾驶辅助系统做出了详细的说明,由上描述可以看出,根据本发明,所述安全驾驶辅助系统能够高准确率实现智能识别,及时预警,通过模板匹配及自学习等算法进行行为自动识别,可自动识别非安全驾驶行为,并主动向驾驶员提醒预警,预防危险。其中,所述模板匹配及自学习算法可以采用本领域通用的模板匹配及自学习算法,采用成熟的匹配算法,以确保系统运行的稳定性和可靠性。
另外,根据本发明,所述安全驾驶辅助系统能够高分辨率进行特征提取,高效传输,本发明采用3G/4G等技术进行实时回传,如将全部视频回传将会消耗大量的流量,大幅增加运营成本,采用特征提取手段,建立先验知识库,大幅压低所需要传输的数据量。只传输相关的图片(或者理解为一种行为触发时的极低帧率的视频传输),大大降低网路堵塞风险,大大节约可利用资源。
另外,根据本发明,所述安全驾驶辅助系统采用通用算法,易于扩展,本系统的核心识别算法具有通用性,只需更换相应的模板先验库即可,在前期试验运行成功的基础上,可以逐渐扩展到其他安全驾驶的方面上,以更大程度保证驾驶的安全性。
上面虽然按照具体实施方式进行了详细说明,但是本领域技术人员懂得,在上述说明的基础上进行各种改变和修饰,但是这些改变和修饰其均应该视为本发明的一部分。对于本领域技术人员而言,他们同样懂得,本发明具有更多潜在的优势,诸如:
1)本安全驾驶辅助系统处理流程合理、完整,数据准确可靠,满足用户信息化管理方面的需要;
2)本安全驾驶辅助系统可实现无人值守,降低人工成本。能够主动发现非安全驾驶行为或隐患,所述系统主动地进行识别与处理,并通过3G/4G无线传输至中心后台存储,管理员可通过系统截取图片确认是否存在非法驾驶行为以备后查,高效满足管理的需求;
3)本安全驾驶辅助系统具有较高服务水平,可以同时服务一个或多个车辆驾驶员,实现公司大量车队的批量高效管理;
4)本安全驾驶辅助系统采取可靠、成熟的技术手段,实现对驾驶员的跟踪服务,达到快速反应的目的;
5)本安全驾驶辅助系统具备可维护、可扩充性,易于实现升级,兼容性强,可支持所需扩展功能,适应未来的需求;
6)本安全驾驶辅助系统高度集成、设备安装方便、架构易于扩展升级。
上述尽管对本发明做出了详细说明,但是本发明并不仅限于上述具体实施方式之中,在不脱离本发明宗旨和精神范围内对本发明做出的各种变更和修饰均应落入本发明保护范围之内,本发明保护范围由所附权利要求书限定。

Claims (10)

1.驾驶员安全驾驶辅助系统,包括视频采集压缩模块、前端中控模块、无线回传模块、中心后台管理系统,其特征在于,所述视频采集压缩模块采集驾驶员的驾驶情况并进行压缩,将压缩后的码流发送至所述前端中控模块,所述中控模块分拣出特征视频,并实时分析检测特征视频中的驾驶行为,一旦发现非安全驾驶行为,发出语音提醒,截取违规图片,并将相应的违规图片(含时戳)通过无线回传模块回送至所述中心后台管理系统。
2.如权利要求1所述驾驶员安全驾驶辅助系统,其特征在于,中心后台管理系统为指挥控制中心提供数据,指挥控制中心根据回传的违规图片的频率和数量,通过语音专线提醒驾驶员纠正驾驶行为。
3.如权利要求1所述驾驶员安全驾驶辅助系统,其特征在于,所述前端中控模块从所述视频采集压缩模块发送过来的所述压缩码流中实时分析驾驶员行为,检测判断是否有不安全驾驶行为的发生,一旦检测到不安全驾驶行为的发生,自动语音播报提醒或把语音信号发送至后台,由中心后台管理系统确认是否进行提醒,并从码流中截取反映不安全驾驶行为的多张照片,由无线回传模块发送至后台管理系统。
4.如权利要求3所述驾驶员安全驾驶辅助系统,其特征在于,所述前端中控模块当分析出汽车处于行驶过程中并且汽车方向盘上没有两只手的持续时间超过30s时,判断为驾驶员有不安全驾驶行为发生。
5.如权利要求3所述驾驶员安全驾驶辅助系统,其特征在于,所述前端中控模块当分析出汽车处于行驶过程中并且汽车方向盘上没有两只手的持续时间超过15s时,判断为驾驶员有不安全驾驶行为发生。
6.如权利要求1所述驾驶员安全驾驶辅助系统,其特征在于,通过所述无线回传模块,所述提醒语音和特征视频、违规图片被回传至中心后台管理系统。
7.如权利要求1所述驾驶员安全驾驶辅助系统,其特征在于,所述中心后台管理系统具有以下功能:对接收到的特征图片进行存盘、显示、以及进行频度统计;同时管理多个驾驶员的行为;提供指挥控制中心人工干预的接口。
8.驾驶员安全驾驶辅助方法,提供如权利要求1~7所述安全驾驶辅助系统,其特征在于,通过所述视频采集压缩模块采集驾驶员的驾驶情况并进行压缩,将压缩后的码流发送至所述前端中控模块,通过所述中控模块分拣出特征视频,并实时分析检测特征视频中的驾驶行为,一旦发现非安全驾驶行为,发出语音提醒,截取违规图片,并将相应的违规图片(含时戳)通过无线回传模块回送至所述中心后台管理系统。
9.如权利要求8所述驾驶员安全驾驶辅助方法,其特征在于,所述前端中控模块从所述视频采集压缩模块发送过来的所述压缩码流中实时分析驾驶员行为,检测判断是否有不安全驾驶行为的发生,一旦检测到不安全驾驶行为的发生,自动语音播报提醒或把语音信号发送至后台,由中心后台管理系统确认是否进行提醒,并从码流中截取反映不安全驾驶行为的多张照片,由无线回传模块发送至后台管理系统。
10.如权利要求9所述驾驶员安全驾驶辅助方法,其特征在于,所述前端中控模块当分析出汽车处于行驶过程中并且汽车方向盘上没有两只手的持续时间超过规定时间时,判断为驾驶员有不安全驾驶行为发生。
CN201510091768.9A 2015-02-28 2015-02-28 驾驶员安全驾驶辅助系统和方法 Pending CN104751663A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510091768.9A CN104751663A (zh) 2015-02-28 2015-02-28 驾驶员安全驾驶辅助系统和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510091768.9A CN104751663A (zh) 2015-02-28 2015-02-28 驾驶员安全驾驶辅助系统和方法

Publications (1)

Publication Number Publication Date
CN104751663A true CN104751663A (zh) 2015-07-01

Family

ID=53591272

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510091768.9A Pending CN104751663A (zh) 2015-02-28 2015-02-28 驾驶员安全驾驶辅助系统和方法

Country Status (1)

Country Link
CN (1) CN104751663A (zh)

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105488957A (zh) * 2015-12-15 2016-04-13 小米科技有限责任公司 疲劳驾驶检测方法及装置
CN105730334A (zh) * 2016-03-14 2016-07-06 奇瑞汽车股份有限公司 一种用于辅助车辆驾驶的安全提醒系统
CN105898239A (zh) * 2016-06-03 2016-08-24 北京中电万联科技股份有限公司 一种公交车司机行为异常监测系统及监测方法
CN106781581A (zh) * 2016-11-29 2017-05-31 深圳职业技术学院 基于人车耦合的安全驾驶行为监测预警系统及方法
US10152642B2 (en) 2016-12-16 2018-12-11 Automotive Research & Testing Center Method for detecting driving behavior and system using the same
CN110154757A (zh) * 2019-05-30 2019-08-23 电子科技大学 公交车多方位安全驾驶保障方法
CN110163037A (zh) * 2018-03-14 2019-08-23 北京航空航天大学 监测驾驶员状态的方法、设备、系统、处理器及存储介质
CN110298994A (zh) * 2019-07-01 2019-10-01 南京派光智慧感知信息技术有限公司 一种轨道列车驾驶员行为综合监测警示系统
CN110533916A (zh) * 2018-05-23 2019-12-03 上海擎感智能科技有限公司 基于车载终端的驾驶行为实时监测方法及系统、车载终端
CN111462355A (zh) * 2020-04-01 2020-07-28 成都鹰明智通科技股份有限公司 基于dms系统的车载记录仪
CN111460989A (zh) * 2020-03-31 2020-07-28 武汉大学 一种基于单目视觉的方向盘手离检测方法
CN111553264A (zh) * 2020-04-27 2020-08-18 中国科学技术大学先进技术研究院 一种适用于中小学生的校园非安全行为检测及预警方法
CN111667663A (zh) * 2020-05-25 2020-09-15 山西长河科技股份有限公司 一种人工智能视频分析的废物运输驾驶员违规检测方法
CN112224237A (zh) * 2020-10-21 2021-01-15 南京派光智慧感知信息技术有限公司 一种列车驾驶辅助系统
CN113077689A (zh) * 2021-04-07 2021-07-06 深圳市大班长科技有限公司 机动车智能辅助教学系统及方法
CN113139403A (zh) * 2020-01-17 2021-07-20 顺丰科技有限公司 违规行为识别方法、装置、计算机设备和存储介质
CN114463928A (zh) * 2021-12-29 2022-05-10 上海瑞琨计算机系统集成有限公司 一种智能报警方法和系统
CN114530035A (zh) * 2021-10-19 2022-05-24 杭州金通科技集团股份有限公司 一种基于主动安全终端的单双手脱离方向盘预警系统
WO2023137727A1 (zh) * 2022-01-21 2023-07-27 华为技术有限公司 智能驾驶功能或系统的控制方法及装置
CN117041503A (zh) * 2023-10-10 2023-11-10 四川科泰智能电子有限公司 高性能闪存阵列视频识别设备及方法

Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN2791762Y (zh) * 2004-11-29 2006-06-28 曾嘉 一种车用安保智能显示记录系统
WO2008093712A1 (ja) * 2007-02-01 2008-08-07 Denso Corporation ドライバ管理装置および運行管理システム
CN201578257U (zh) * 2009-10-14 2010-09-15 吴崴 一种疲劳驾驶识别装置
CN101877051A (zh) * 2009-10-30 2010-11-03 江苏大学 驾驶人注意力状态监测方法和装置
JP2011227663A (ja) * 2010-04-19 2011-11-10 Denso Corp 運転補助装置、及びプログラム
CN102263937A (zh) * 2011-07-26 2011-11-30 华南理工大学 基于视频检测的驾驶员驾驶行为监控装置及监控方法
CN202177912U (zh) * 2011-07-26 2012-03-28 华南理工大学 基于视频检测的驾驶员驾驶行为监控装置
CN102968902A (zh) * 2012-12-11 2013-03-13 苏州群凯信息系统有限公司 一种载运工具视频监控与录像系统
CN103034862A (zh) * 2012-12-14 2013-04-10 北京诚达交通科技有限公司 基于特征信息分类的道路雨雪状态自动识别方法
CN103337179A (zh) * 2013-07-01 2013-10-02 深圳市凯维特信息技术有限公司 车辆不良驾驶行为提醒系统及方法
CN103366506A (zh) * 2013-06-27 2013-10-23 北京理工大学 一种驾驶员行车途中接打手机行为的自动监控装置及方法
CN203313316U (zh) * 2013-06-03 2013-11-27 安徽富煌和利时科技有限公司 一种多功能的视频监控装置
CN103465915A (zh) * 2013-09-30 2013-12-25 福州大学 基于站点无停留地铁的物联网车厢调度的实现方法
CN103942961A (zh) * 2014-04-30 2014-07-23 中国计量学院 一种面向危险驾驶行为的智能监控识别系统
CN104036490A (zh) * 2014-05-13 2014-09-10 重庆大学 适用于移动通信网络传输中的前景分割方法
CN104252780A (zh) * 2013-06-30 2014-12-31 青岛联合创新技术服务平台有限公司 智能限行道路交通违法抓拍系统及其工作方法

Patent Citations (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN2791762Y (zh) * 2004-11-29 2006-06-28 曾嘉 一种车用安保智能显示记录系统
WO2008093712A1 (ja) * 2007-02-01 2008-08-07 Denso Corporation ドライバ管理装置および運行管理システム
CN201578257U (zh) * 2009-10-14 2010-09-15 吴崴 一种疲劳驾驶识别装置
CN101877051A (zh) * 2009-10-30 2010-11-03 江苏大学 驾驶人注意力状态监测方法和装置
JP2011227663A (ja) * 2010-04-19 2011-11-10 Denso Corp 運転補助装置、及びプログラム
CN102263937A (zh) * 2011-07-26 2011-11-30 华南理工大学 基于视频检测的驾驶员驾驶行为监控装置及监控方法
CN202177912U (zh) * 2011-07-26 2012-03-28 华南理工大学 基于视频检测的驾驶员驾驶行为监控装置
CN102968902A (zh) * 2012-12-11 2013-03-13 苏州群凯信息系统有限公司 一种载运工具视频监控与录像系统
CN103034862A (zh) * 2012-12-14 2013-04-10 北京诚达交通科技有限公司 基于特征信息分类的道路雨雪状态自动识别方法
CN203313316U (zh) * 2013-06-03 2013-11-27 安徽富煌和利时科技有限公司 一种多功能的视频监控装置
CN103366506A (zh) * 2013-06-27 2013-10-23 北京理工大学 一种驾驶员行车途中接打手机行为的自动监控装置及方法
CN104252780A (zh) * 2013-06-30 2014-12-31 青岛联合创新技术服务平台有限公司 智能限行道路交通违法抓拍系统及其工作方法
CN103337179A (zh) * 2013-07-01 2013-10-02 深圳市凯维特信息技术有限公司 车辆不良驾驶行为提醒系统及方法
CN103465915A (zh) * 2013-09-30 2013-12-25 福州大学 基于站点无停留地铁的物联网车厢调度的实现方法
CN103942961A (zh) * 2014-04-30 2014-07-23 中国计量学院 一种面向危险驾驶行为的智能监控识别系统
CN104036490A (zh) * 2014-05-13 2014-09-10 重庆大学 适用于移动通信网络传输中的前景分割方法

Cited By (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105488957A (zh) * 2015-12-15 2016-04-13 小米科技有限责任公司 疲劳驾驶检测方法及装置
CN105488957B (zh) * 2015-12-15 2018-06-12 小米科技有限责任公司 疲劳驾驶检测方法及装置
CN105730334A (zh) * 2016-03-14 2016-07-06 奇瑞汽车股份有限公司 一种用于辅助车辆驾驶的安全提醒系统
CN105898239A (zh) * 2016-06-03 2016-08-24 北京中电万联科技股份有限公司 一种公交车司机行为异常监测系统及监测方法
CN106781581A (zh) * 2016-11-29 2017-05-31 深圳职业技术学院 基于人车耦合的安全驾驶行为监测预警系统及方法
US10152642B2 (en) 2016-12-16 2018-12-11 Automotive Research & Testing Center Method for detecting driving behavior and system using the same
CN110163037B (zh) * 2018-03-14 2022-03-04 北京航空航天大学 监测驾驶员状态的方法、设备、系统、处理器及存储介质
CN110163037A (zh) * 2018-03-14 2019-08-23 北京航空航天大学 监测驾驶员状态的方法、设备、系统、处理器及存储介质
CN110533916A (zh) * 2018-05-23 2019-12-03 上海擎感智能科技有限公司 基于车载终端的驾驶行为实时监测方法及系统、车载终端
CN110154757A (zh) * 2019-05-30 2019-08-23 电子科技大学 公交车多方位安全驾驶保障方法
CN110298994A (zh) * 2019-07-01 2019-10-01 南京派光智慧感知信息技术有限公司 一种轨道列车驾驶员行为综合监测警示系统
CN113139403A (zh) * 2020-01-17 2021-07-20 顺丰科技有限公司 违规行为识别方法、装置、计算机设备和存储介质
CN111460989A (zh) * 2020-03-31 2020-07-28 武汉大学 一种基于单目视觉的方向盘手离检测方法
CN111462355A (zh) * 2020-04-01 2020-07-28 成都鹰明智通科技股份有限公司 基于dms系统的车载记录仪
CN111553264A (zh) * 2020-04-27 2020-08-18 中国科学技术大学先进技术研究院 一种适用于中小学生的校园非安全行为检测及预警方法
CN111553264B (zh) * 2020-04-27 2023-04-18 中科永安(安徽)科技有限公司 一种适用于中小学生的校园非安全行为检测及预警方法
CN111667663A (zh) * 2020-05-25 2020-09-15 山西长河科技股份有限公司 一种人工智能视频分析的废物运输驾驶员违规检测方法
CN112224237A (zh) * 2020-10-21 2021-01-15 南京派光智慧感知信息技术有限公司 一种列车驾驶辅助系统
CN113077689A (zh) * 2021-04-07 2021-07-06 深圳市大班长科技有限公司 机动车智能辅助教学系统及方法
CN114530035A (zh) * 2021-10-19 2022-05-24 杭州金通科技集团股份有限公司 一种基于主动安全终端的单双手脱离方向盘预警系统
CN114463928A (zh) * 2021-12-29 2022-05-10 上海瑞琨计算机系统集成有限公司 一种智能报警方法和系统
WO2023137727A1 (zh) * 2022-01-21 2023-07-27 华为技术有限公司 智能驾驶功能或系统的控制方法及装置
CN117041503A (zh) * 2023-10-10 2023-11-10 四川科泰智能电子有限公司 高性能闪存阵列视频识别设备及方法

Similar Documents

Publication Publication Date Title
CN104751663A (zh) 驾驶员安全驾驶辅助系统和方法
US10915769B2 (en) Driving management methods and systems, vehicle-mounted intelligent systems, electronic devices, and medium
US10970571B2 (en) Vehicle control method and system, vehicle-mounted intelligent system, electronic device, and medium
CN108791299B (zh) 一种基于视觉的驾驶疲劳检测及预警系统及方法
CN111274881B (zh) 驾驶安全的监控方法、装置、计算机设备及存储介质
EP3617935A1 (en) Driving management method and system, vehicle-mounted intelligent system, electronic device and medium
EP3628549B1 (en) Vehicle control method and system, and in-vehicle intelligent system, electronic device and medium
WO2019153193A1 (zh) 一种出租车运营监测方法、设备、存储介质和系统
CN103723096B (zh) 带有无线通信功能的驾驶辅助系统
CN107818312A (zh) 一种基于异常行为识别的嵌入式系统
CN109919407A (zh) 一种驾驶行为主动安全管理系统
JP7407198B2 (ja) ながら運転のモニタリング方法、システム及び電子機器
CN113673459B (zh) 基于视频的生产施工场所安全巡检方法、系统、设备
CN102164270A (zh) 具有异常事件发掘功能的智能视频监控方法及系统
CN204440659U (zh) 驾驶员安全驾驶辅助系统
CN110390232A (zh) 确认违法驾驶的方法、装置、服务器和系统
CN112686130B (zh) 一种智慧渔船监管决策系统
CN110154757A (zh) 公交车多方位安全驾驶保障方法
CN112188164A (zh) 一种基于ai视觉的违规行为实时监测系统及方法
CN107748786B (zh) 警情大数据管理系统
CN111047824A (zh) 一种室内儿童看护联动控制预警方法及系统
CN211184122U (zh) 铁路作业安全防控和大客流预警联动的智能视频分析系统
CN118075427A (zh) 一种智能化监控管理方法及系统
CN205722310U (zh) 一种基于视频序列的列车驾驶员行为识别系统
US20190087904A1 (en) Remote processing of anomalous vehicle sensor data

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20150701

RJ01 Rejection of invention patent application after publication