CN108545080A - 驾驶员疲劳检测方法及系统 - Google Patents

驾驶员疲劳检测方法及系统 Download PDF

Info

Publication number
CN108545080A
CN108545080A CN201810231420.9A CN201810231420A CN108545080A CN 108545080 A CN108545080 A CN 108545080A CN 201810231420 A CN201810231420 A CN 201810231420A CN 108545080 A CN108545080 A CN 108545080A
Authority
CN
China
Prior art keywords
driver
driving
duration
detected
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810231420.9A
Other languages
English (en)
Inventor
宋红
崔玉涛
颜振松
杨健
艾丹妮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Institute of Technology BIT
Original Assignee
Beijing Institute of Technology BIT
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Institute of Technology BIT filed Critical Beijing Institute of Technology BIT
Priority to CN201810231420.9A priority Critical patent/CN108545080A/zh
Publication of CN108545080A publication Critical patent/CN108545080A/zh
Pending legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • B60W2040/0827Inactivity or incapacity of driver due to sleepiness

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明提供一种驾驶员疲劳检测方法及系统,所述方法包括:基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的驾车时长、闭眼时长以及打哈欠频率;若判断获知所述驾车时长大于第一预设值、所述闭眼时长超过第二预设值和/或所述打哈欠频率大于第三预设值,则确定所述待检测驾驶员处于疲劳驾驶状态。本发明提供的驾驶员疲劳检测方法及系统,通过综合考虑驾驶员的驾车时长、闭眼时长以及打哈欠频率,对驾驶员是否处于疲劳驾驶状态进行综合分析,提高了驾驶员疲劳检测的准确性。

Description

驾驶员疲劳检测方法及系统
技术领域
本发明涉及汽车主动安全技术领域,尤其涉及一种驾驶员疲劳检测方法及系统。
背景技术
据不完全统计,全世界每年因道路交通事故导致死亡的人数超过60万,由于驾驶员疲劳造成的交通事故至少有10万起,其中1500起重大事故,7.1万起交通事故导致人身伤害,直接经济损失达125亿美元。因此,如何及时、准确地发现并防止驾驶员的疲劳驾驶,是我们面临的重要问题。
现有技术中,驾驶员的疲劳驾驶检测方法通过对驾驶员的面部特征点进行定位和跟踪,采用形状信息和局部表观特征相结合的方法,对眼睛、嘴巴等面部特征点进行由粗到精的准确定位。根据跟踪结果的置信度,建立人脸特征跟踪的跟踪策略,决定检测模块和跟踪模块的切换。最终利用眼睛和嘴巴的运动特征,对面部运动特征进行量化描述,根据优化后的时间窗长度,计算面部运动统计指标进行疲劳检测。
但是,现有技术中的驾驶员疲劳检测方法,检测指标单一,不能够准确地检测出驾驶员是否真正处于疲劳驾驶状态。
发明内容
本发明的目的是提供一种驾驶员疲劳检测方法及系统,解决了现有技术中驾驶员疲劳检测方法,检测指标单一,不能够准确地检测出驾驶员是否真正处于疲劳驾驶状态的技术问题。
为了解决上述技术问题,一方面,本发明提供一种驾驶员疲劳检测方法,包括:
基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的驾车时长、闭眼时长以及打哈欠频率;
若判断获知所述驾车时长大于第一预设值、所述闭眼时长超过第二预设值和/或所述打哈欠频率大于第三预设值,则确定所述待检测驾驶员处于疲劳驾驶状态。
进一步地,所述基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的驾车时长,具体为:
获取待检测驾驶员驾驶时的视频数据中的一帧图像,作为驾车时长检测图像;
从所述驾车时长检测图像中提取所述驾驶员的面部特征,作为驾车时长检测面部特征;
将所述驾车时长检测面部特征输入至预先获取的人脸识别模型中,输出识别结果;
若判断获知所述识别结果为匹配成功,则所述驾驶员的驾车时长增加预设时间值,所述预设时间值为距离上次获取驾车时长检测图像的时间间隔。
进一步地,所述获取待检测驾驶员驾驶时的视频数据中的一帧图像之前,还包括:
获取待检测驾驶员驾驶时的视频数据中的多帧图像,作为样本图像;
从每帧样本图像中提取所述驾驶员的面部特征,作为样本面部特征;
基于所有的样本面部特征,构建所述人脸识别模型。
进一步地,所述从每帧样本图像中提取所述驾驶员的面部特征,具体为:
基于局部二进制编码直方图人脸识别算法从每帧样本图像中提取所述驾驶员的面部特征。
进一步地,所述基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的闭眼时长,具体为:
从待检测驾驶员驾驶时的视频数据中的每帧图像中提取所述驾驶员至少一只眼睛的第一特征点集合;
基于所述第一特征点集合,确定所述驾驶员眼睛的睁开闭合状态;
基于每帧图像中所述驾驶员眼睛的睁开闭合状态,以及帧间隔,确定所述驾驶员的闭眼时长。
进一步地,所述基于所述第一特征点集合,确定所述驾驶员眼睛的睁开闭合状态,具体为:
从所述第一特征点集合中获取第一眼睑特征点的纵坐标、第二眼睑特征点的纵坐标、第一眼角特征点的横坐标和第二眼角特征点的横坐标;
计算第一变量和第二变量,并计算眼睛长宽比,所述眼睛长宽比为所述第二变量与所述第一变量的比值,所述第一变量为所述第一眼角特征点的横坐标与所述第二眼角特征点的横坐标之差的绝对值,所述第二变量为所述第一眼睑特征点的纵坐标与所述第二眼睑特征点的纵坐标之差的绝对值;
若判断获知所述眼睛长宽比小于第四预设值,则所述驾驶员的眼睛处于闭合状态;
若判断获知所述眼睛长宽比大于等于所述第四预设值,则所述驾驶员的眼睛处于睁开状态。
进一步地,所述基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的打哈欠频率,具体为:
从待检测驾驶员驾驶时的视频数据中的每帧图像中提取所述驾驶员嘴巴的第二特征点集合;
基于所述第二特征点集合,确定所述驾驶员嘴巴的张开闭合状态;
基于每帧图像中所述驾驶员嘴巴的张开闭合状态,以及帧间隔,确定所述驾驶员的打哈欠频率。
另一方面,本发明提供一种驾驶员疲劳检测系统,包括:
视频采集器、车载电脑和报警器;
所述视频采集器和所述报警器分别与所述车载电脑连接;
所述车载电脑,用于基于所述视频采集器采集到的待检测驾驶员驾驶时的视频数据,获取所述驾驶员的驾车时长、闭眼时长以及打哈欠频率;
若判断获知所述驾车时长大于第一预设值、所述闭眼时长超过第二预设值和/或所述打哈欠频率大于第三预设值,则确定所述待检测驾驶员处于疲劳驾驶状态,并指示所述报警器报警。
再一方面,本发明提供一种用于驾驶员疲劳检测的电子设备,包括:
存储器和处理器,所述处理器和所述存储器通过总线完成相互间的通信;所述存储器存储有可被所述处理器执行的程序指令,所述处理器调用所述程序指令能够执行上述的方法。
又一方面,本发明提供一种计算机程序产品,所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,使所述计算机执行上述的方法。
又一方面,本发明提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现上述的方法。
本发明提供的驾驶员疲劳检测方法及系统,通过综合考虑驾驶员的驾车时长、闭眼时长以及打哈欠频率,对驾驶员是否处于疲劳驾驶状态进行综合分析,提高了驾驶员疲劳检测的准确性。
附图说明
图1为依照本发明实施例的驾驶员疲劳检测方法示意图;
图2为依照本发明实施例的主观形状模型示意图;
图3为依照本发明实施例的驾驶员疲劳检测系统示意图;
图4为本发明实施例提供的用于驾驶员疲劳检测的电子设备的结构示意图。
具体实施方式
为了使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
图1为依照本发明实施例的驾驶员疲劳检测方法示意图,如图1所示,本发明实施例提供一种驾驶员疲劳检测方法,包括:
步骤S10、基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的驾车时长、闭眼时长以及打哈欠频率;
步骤S20、若判断获知所述驾车时长大于第一预设值、所述闭眼时长超过第二预设值和/或所述打哈欠频率大于第三预设值,则确定所述待检测驾驶员处于疲劳驾驶状态。
具体的,首先需要采集待检测驾驶员驾驶时的视频数据,通过图像处理技术获取该驾驶员的驾车时长、闭眼时长以及打哈欠频率。
然后,根据该驾驶员的驾车时长、闭眼时长以及打哈欠频率对驾驶员是否处于疲劳驾驶状态进行综合分析。若判断获知驾车时长大于第一预设值、闭眼时长超过第二预设值和/或打哈欠频率大于第三预设值,则待检测驾驶员处于疲劳驾驶状态。
例如,通过待检测驾驶员驾驶时的视频数据进行处理,得出该驾驶员的驾车时长已经超过4小时,则该驾驶员处于疲劳驾驶状态;或者,通过待检测驾驶员驾驶时的视频数据进行处理,得出该驾驶员闭眼时长超过2秒的次数大于10次,则该驾驶员处于疲劳驾驶状态;或者,通过待检测驾驶员驾驶时的视频数据进行处理,得出该驾驶员打哈欠频率超过6次/每小时,则该驾驶员处于疲劳驾驶状态。或者,该驾驶员的驾车时长已经超过4小时,并且闭眼时长超过2秒的次数大于10次,则该驾驶员处于疲劳驾驶状态。或者上述三种情况的组合,而在实际应用中不限于此,具体组合方式可以视情况而定。
本发明提供的驾驶员疲劳检测方法,通过综合考虑驾驶员的驾车时长、闭眼时长以及打哈欠频率,对驾驶员是否处于疲劳驾驶状态进行综合分析,提高了驾驶员疲劳检测的准确性。
在上述实施例的基础上,进一步地,所述基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的驾车时长,具体为:
获取待检测驾驶员驾驶时的视频数据中的一帧图像,作为驾车时长检测图像;
从所述驾车时长检测图像中提取所述驾驶员的面部特征,作为驾车时长检测面部特征;
将所述驾车时长检测面部特征输入至预先获取的人脸识别模型中,输出识别结果;
若判断获知所述识别结果为匹配成功,则所述驾驶员的驾车时长增加预设时间值,所述预设时间值为距离上次获取驾车时长检测图像的时间间隔。
进一步地,所述获取待检测驾驶员驾驶时的视频数据中的一帧图像之前,还包括:
获取待检测驾驶员驾驶时的视频数据中的多帧图像,作为样本图像;
从每帧样本图像中提取所述驾驶员的面部特征,作为样本面部特征;
基于所有的样本面部特征,构建所述人脸识别模型。
进一步地,所述从每帧样本图像中提取所述驾驶员的面部特征,具体为:
基于局部二进制编码直方图人脸识别算法从每帧样本图像中提取所述驾驶员的面部特征。
具体的,基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的驾车时长的具体方法如下:
首先,在对驾驶员的驾车时长进行记录之前,需要获取待检测驾驶员驾驶时的视频数据中的多帧图像,作为样本图像;从每帧样本图像中提取驾驶员的面部特征,作为样本面部特征;基于所有的样本面部特征,构建所述人脸识别模型;初始化驾驶员的驾车时长,驾车时长的初始值为零。
然后,获取待检测驾驶员驾驶时的视频数据中的一帧图像,作为驾车时长检测图像;从驾车时长检测图像中提取驾驶员的面部特征,作为驾车时长检测面部特征;将驾车时长检测面部特征输入至预先获取的人脸识别模型中,输出识别结果;若判断获知识别结果为匹配成功,则驾驶员的驾车时长增加预设时间值,该预设时间值为距离上次获取驾车时长检测图像的时间间隔。
例如,先采集10张驾驶员的面部照片,使用基于局部二进制编码直方图(LBPH)人脸识别算法的进行模型训练,获得训练好的人脸识别模型。每隔5分钟采集一次驾驶员的面部图像,使用这个面部图像和之前训练好的模型进行匹配,如果匹配成功则说明驾驶员已经连续驾车5分钟,如果该系统连续4小时检测到是同一个驾驶员在开车,则说明驾驶员已处于疲劳驾驶状态并给出报警。如果在4个小时中检测到驾驶员已更换,那么就重新采集该驾驶员的10张照片,训练一个新的人脸识别模型,再重复上述的匹配过程。
具体的实施步骤如下:
a1:在系统启动时,设置状态变量state=train,驾驶员连续驾车时长变量time=0。
a2:如果state等于train,则执行步骤a3。如果state等于match,则执行步骤a5。
a3:使用人脸图像采集模块利用红外摄像头采集一张驾驶员面部的图像,将该图像先暂存起来,每隔1秒重复此步骤直到存够10张驾驶员面部的图像。存够10张之后执行步骤a4。
a4:利用这10张驾驶员的面部图像训练LBPH模型。将变量state置为match。执行步骤a2。
a5:使用人脸图像采集模块利用红外摄像头采集一张驾驶员面部的图像,将该图像和之前已经训练好的模型进行匹配,如果匹配成功则执行步骤a6。如果匹配失败则执行步骤a7。
a6:更新驾驶员的连续驾车时长time=time+5。如果检测到驾驶员已经连续开车4小时以上,即time>=240,则给出报警。如果没有检测到驾驶员有疲劳驾驶,则隔5分钟之后执行步骤a2。
a7:再次采集驾驶员的面部图像,和之前的模型进行匹配,如果匹配失败则说明驾驶员已经换人,这时清空连续驾驶时长time=0,将state置为train,执行步骤a2。
本发明提供的驾驶员疲劳检测方法,通过综合考虑驾驶员的驾车时长、闭眼时长以及打哈欠频率,对驾驶员是否处于疲劳驾驶状态进行综合分析,提高了驾驶员疲劳检测的准确性。
在以上各实施例的基础上,进一步地,所述基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的闭眼时长,具体为:
从待检测驾驶员驾驶时的视频数据中的每帧图像中提取所述驾驶员至少一只眼睛的第一特征点集合;
基于所述第一特征点集合,确定所述驾驶员眼睛的睁开闭合状态;
基于每帧图像中所述驾驶员眼睛的睁开闭合状态,以及帧间隔,确定所述驾驶员的闭眼时长。
进一步地,所述基于所述第一特征点集合,确定所述驾驶员眼睛的睁开闭合状态,具体为:
从所述第一特征点集合中获取第一眼睑特征点的纵坐标、第二眼睑特征点的纵坐标、第一眼角特征点的横坐标和第二眼角特征点的横坐标;
计算第一变量和第二变量,并计算眼睛长宽比,所述眼睛长宽比为所述第二变量与所述第一变量的比值,所述第一变量为所述第一眼角特征点的横坐标与所述第二眼角特征点的横坐标之差的绝对值,所述第二变量为所述第一眼睑特征点的纵坐标与所述第二眼睑特征点的纵坐标之差的绝对值;
若判断获知所述眼睛长宽比小于第四预设值,则所述驾驶员的眼睛处于闭合状态;
若判断获知所述眼睛长宽比大于等于所述第四预设值,则所述驾驶员的眼睛处于睁开状态。
具体的,获取驾驶员的闭眼时长时,需要检测驾驶员的眼部动作。图2为依照本发明实施例的主观形状模型示意图,如图2所示,采用主观形状模型(Active Shape Model,ASM)算法,从待检测驾驶员驾驶时的视频数据中的每帧图像中提取驾驶员至少一只眼睛的第一特征点集合;例如,提取左眼的第一特征点集合,包括特征点37、39、40和41。基于所述第一特征点集合,确定驾驶员眼睛的睁开闭合状态;然后基于每帧图像中驾驶员眼睛的睁开闭合状态,以及帧间隔,确定驾驶员的闭眼时长。例如,在15秒内的一段视频数据中,共有150帧图像,帧间隔为0.1秒,其中,连续30帧以上的图像都处于闭眼状态的视频段共有2段;连续30帧以上的图像都处于闭眼状态,则本次闭眼时长超过3秒,在这15秒内的一段视频数据中闭眼时长超过3秒的次数为2次。
基于第一特征点集合,确定驾驶员眼睛的睁开闭合状态,具体为:从第一特征点集合中获取第一眼睑特征点的纵坐标、第二眼睑特征点的纵坐标、第一眼角特征点的横坐标和第二眼角特征点的横坐标;计算第一变量和第二变量,并计算眼睛长宽比,眼睛长宽比为第二变量与第一变量的比值,第一变量为第一眼角特征点的横坐标与第二眼角特征点的横坐标之差的绝对值,第二变量为第一眼睑特征点的纵坐标与第二眼睑特征点的纵坐标之差的绝对值;若判断获知眼睛长宽比小于第四预设值,则驾驶员的眼睛处于闭合状态;若判断获知眼睛长宽比大于等于第四预设值,则驾驶员的眼睛处于睁开状态。例如,识别出来特征点37、39、40和41以后,计算特征点39和特征点41之间的纵坐标之差的绝对值,作为第一变量,计算特征点37和特征点40之间的横坐标之差的绝对值,作为第二变量;再计算第二变量与第一变量的比值,作为眼睛长宽比,如果这个眼睛长宽比的值小于0.2,则认为驾驶员闭眼了。
具体的实施步骤如下:
b1:在系统启动时设置一个计数器count=0。
b2:利用人脸图像采集模块采集一个驾驶员的面部图像。
b3:从该图像中使用dlib库中的图像特征点识别函数从图像中提取出上述的四个人脸特征点37、39、40、41,并设置变量x37为点37的横坐标,x40为点40的横坐标,y39为点39的纵坐标,y41为点41的纵坐标。
b4:设置变量dx=abs(x37-x40),dy=abs(y41-y39)。
b5:计算dy和dx的比值a=dy/dx。
b6:如果a<0.2(说明驾驶员闭眼了),则执行步骤b7;如果a>=0.2,则执行步骤b8。
b7:令计数器加一count+=1,如果检测到驾驶员连续三秒闭眼了,即count>=3,则给出报警,提醒驾驶员集中注意力或下车休息。如果count<3,则执行步骤b2。
b8:将计数器清零count=0,执行步骤b2。
本发明提供的驾驶员疲劳检测方法,通过综合考虑驾驶员的驾车时长、闭眼时长以及打哈欠频率,对驾驶员是否处于疲劳驾驶状态进行综合分析,提高了驾驶员疲劳检测的准确性。
在以上各实施例的基础上,进一步地,所述基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的打哈欠频率,具体为:
从待检测驾驶员驾驶时的视频数据中的每帧图像中提取所述驾驶员嘴巴的第二特征点集合;
基于所述第二特征点集合,确定所述驾驶员嘴巴的张开闭合状态;
基于每帧图像中所述驾驶员嘴巴的张开闭合状态,以及帧间隔,确定所述驾驶员的打哈欠频率。
进一步地,所述基于所述第二特征点集合,确定所述驾驶员嘴巴的张开闭合状态,具体为:
从所述第二特征点集合中获取第一嘴唇特征点的纵坐标、第二嘴唇特征点的纵坐标、第一嘴角特征点的横坐标和第二嘴角特征点的横坐标;
计算第三变量和第四变量,并计算嘴巴长宽比,所述嘴巴长宽比为所述第四变量与所述第三变量的比值,所述第三变量为所述第一嘴角特征点的横坐标与所述第二嘴角特征点的横坐标之差的绝对值,所述第四变量为所述第一嘴唇特征点的纵坐标与所述第二嘴唇特征点的纵坐标之差的绝对值;
若判断获知所述嘴巴长宽比大于第六预设值,则所述驾驶员的嘴巴处于张开状态;
若判断获知所述嘴巴长宽比小于等于第六预设值,则所述驾驶员的嘴巴处于闭合状态。
具体的,通过检测驾驶员的嘴部张开的大小,确定驾驶员的打哈欠频率。如果连续检测到驾驶员的嘴巴张开的很大,则认为驾驶员在打哈欠,如果驾驶员在一段时间内打哈欠的频率过高,就说明驾驶员处于疲劳状态。
获取驾驶员的打哈欠频率时,需要检测驾驶员的嘴部动作。图2为依照本发明实施例的主观形状模型示意图,如图2所示,采用主观形状模型(Active Shape Model,ASM)算法,从待检测驾驶员驾驶时的视频数据中的每帧图像中提取驾驶员嘴巴的第二特征点集合;例如,提取嘴巴的第二特征点集合,包括特征点49、55、63和67。基于第二特征点集合,确定驾驶员嘴巴的张开闭合状态;然后基于每帧图像中驾驶员嘴巴的张开闭合状态,以及帧间隔,确定驾驶员的打哈欠频率。例如,在0.5小时内的一段视频数据中,帧间隔为0.1秒,其中,连续30帧以上的图像中嘴巴长宽比都大于1的视频段共有2段;连续30帧以上的图像中嘴巴长宽比都大于1,则本次张口较大的时长超过3秒,为一次打哈欠。在这0.5小时内的一段视频数据中打哈欠的次数为2次,打哈欠的频率为4次/每小时,若设定的打哈欠的频率为6次/每小时,则依据这0.5小时的视频数据,该驾驶员未处于疲劳驾驶状态。
具体的实施步骤如下:
c1:在系统启动时设置一个计数器count=0。
c2:利用人脸图像采集模块采集一个驾驶员的面部图像。
c3:从该图像中使用dlib库中的图像特征点识别函数从图像中提取出人脸特征点49、55、63、67,并设置变量x49为点49的横坐标,x55为点55的横坐标,y63为点63的纵坐标,y67为点67的纵坐标。
c4:设置变量dx=abs(x49-x55),dy=abs(y63-y67)。
c5:计算dy和dx的比值a=dy/dx。
c6:如果a>1(说明驾驶员处于张大嘴的状态),则执行步骤c7;如果a<=0.2,则执行步骤c8。
c7:令计数器加一count+=1,如果检测到驾驶员连续三秒张大嘴(说明驾驶员在打哈欠),即count>=3,则给出报警,提醒驾驶员集中注意力或下车休息。如果count<3,则执行步骤c2。
c8:将计数器清零count=0,执行步骤c2。
本发明提供的驾驶员疲劳检测方法,通过综合考虑驾驶员的驾车时长、闭眼时长以及打哈欠频率,对驾驶员是否处于疲劳驾驶状态进行综合分析,提高了驾驶员疲劳检测的准确性。
图3为依照本发明实施例的驾驶员疲劳检测系统示意图,如图3所示,本发明实施例提供一种驾驶员疲劳检测系统,包括:
视频采集器10、车载电脑20和报警器30;
所述视频采集器10和所述报警器30分别与所述车载电脑20连接;
所述车载电脑,用于基于所述视频采集器采集到的待检测驾驶员驾驶时的视频数据,获取所述驾驶员的驾车时长、闭眼时长以及打哈欠频率;
若判断获知所述驾车时长大于第一预设值、所述闭眼时长超过第二预设值和/或所述打哈欠频率大于第三预设值,则确定所述待检测驾驶员处于疲劳驾驶状态,并指示所述报警器报警。
具体的,首先需要通过视频采集器10采集待检测驾驶员驾驶时的视频数据,优选的,使用红外摄像头搭配850nm补光灯采集人脸的图像,这样可以排除光照的影响。使用opencv库来操纵摄像头。
车载电脑20再通过基于Adaboost和Haar的特征提取方法,提取出驾驶员的面部图像。
再通过图像处理技术获取该驾驶员的驾车时长、闭眼时长以及打哈欠频率。
然后,根据该驾驶员的驾车时长、闭眼时长以及打哈欠频率对驾驶员是否处于疲劳驾驶状态进行综合分析。若判断获知驾车时长大于第一预设值、闭眼时长超过第二预设值和/或打哈欠频率大于第三预设值,则待检测驾驶员处于疲劳驾驶状态。
最后指示所述报警器30报警。
本发明实施例提供一种驾驶员疲劳检测系统,用于完成上述实施例中所述的方法,通过本实施例提供的驾驶员疲劳检测系统完成上述实施例中所述的方法的详细步骤与上述实施例相同,此处不再赘述。
本发明提供的驾驶员疲劳检测系统,通过综合考虑驾驶员的驾车时长、闭眼时长以及打哈欠频率,对驾驶员是否处于疲劳驾驶状态进行综合分析,提高了驾驶员疲劳检测的准确性。
图4为本发明实施例提供的用于驾驶员疲劳检测的电子设备的结构示意图,如图4所示,所述设备包括:处理器801、存储器802和总线803;
其中,处理器801和存储器802通过所述总线803完成相互间的通信;
处理器801用于调用存储器802中的程序指令,以执行上述各方法实施例所提供的方法,例如包括:
基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的驾车时长、闭眼时长以及打哈欠频率;
若判断获知所述驾车时长大于第一预设值、所述闭眼时长超过第二预设值和/或所述打哈欠频率大于第三预设值,则确定所述待检测驾驶员处于疲劳驾驶状态。
本发明实施例公开一种计算机程序产品,所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,计算机能够执行上述各方法实施例所提供的方法,例如包括:
基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的驾车时长、闭眼时长以及打哈欠频率;
若判断获知所述驾车时长大于第一预设值、所述闭眼时长超过第二预设值和/或所述打哈欠频率大于第三预设值,则确定所述待检测驾驶员处于疲劳驾驶状态。
本发明实施例提供一种非暂态计算机可读存储介质,所述非暂态计算机可读存储介质存储计算机指令,所述计算机指令使所述计算机执行上述各方法实施例所提供的方法,例如包括:
基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的驾车时长、闭眼时长以及打哈欠频率;
若判断获知所述驾车时长大于第一预设值、所述闭眼时长超过第二预设值和/或所述打哈欠频率大于第三预设值,则确定所述待检测驾驶员处于疲劳驾驶状态。
本领域普通技术人员可以理解:实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成,前述的程序可以存储于一计算机可读取存储介质中,该程序在执行时,执行包括上述方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所描述的装置及设备等实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

Claims (10)

1.一种驾驶员疲劳检测方法,其特征在于,包括:
基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的驾车时长、闭眼时长以及打哈欠频率;
若判断获知所述驾车时长大于第一预设值、所述闭眼时长超过第二预设值和/或所述打哈欠频率大于第三预设值,则确定所述待检测驾驶员处于疲劳驾驶状态。
2.根据权利要求1所述的方法,其特征在于,所述基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的驾车时长,具体为:
获取待检测驾驶员驾驶时的视频数据中的一帧图像,作为驾车时长检测图像;
从所述驾车时长检测图像中提取所述驾驶员的面部特征,作为驾车时长检测面部特征;
将所述驾车时长检测面部特征输入至预先获取的人脸识别模型中,输出识别结果;
若判断获知所述识别结果为匹配成功,则所述驾驶员的驾车时长增加预设时间值,所述预设时间值为距离上次获取驾车时长检测图像的时间间隔。
3.根据权利要求2所述的方法,其特征在于,所述获取待检测驾驶员驾驶时的视频数据中的一帧图像之前,还包括:
获取待检测驾驶员驾驶时的视频数据中的多帧图像,作为样本图像;
从每帧样本图像中提取所述驾驶员的面部特征,作为样本面部特征;
基于所有的样本面部特征,构建所述人脸识别模型。
4.根据权利要求3所述的方法,其特征在于,所述从每帧样本图像中提取所述驾驶员的面部特征,具体为:
基于局部二进制编码直方图人脸识别算法从每帧样本图像中提取所述驾驶员的面部特征。
5.根据权利要求1所述的方法,其特征在于,所述基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的闭眼时长,具体为:
从待检测驾驶员驾驶时的视频数据中的每帧图像中提取所述驾驶员至少一只眼睛的第一特征点集合;
基于所述第一特征点集合,确定所述驾驶员眼睛的睁开闭合状态;
基于每帧图像中所述驾驶员眼睛的睁开闭合状态,以及帧间隔,确定所述驾驶员的闭眼时长。
6.根据权利要求5所述的方法,其特征在于,所述基于所述第一特征点集合,确定所述驾驶员眼睛的睁开闭合状态,具体为:
从所述第一特征点集合中获取第一眼睑特征点的纵坐标、第二眼睑特征点的纵坐标、第一眼角特征点的横坐标和第二眼角特征点的横坐标;
计算第一变量和第二变量,并计算眼睛长宽比,所述眼睛长宽比为所述第二变量与所述第一变量的比值,所述第一变量为所述第一眼角特征点的横坐标与所述第二眼角特征点的横坐标之差的绝对值,所述第二变量为所述第一眼睑特征点的纵坐标与所述第二眼睑特征点的纵坐标之差的绝对值;
若判断获知所述眼睛长宽比小于第四预设值,则所述驾驶员的眼睛处于闭合状态;
若判断获知所述眼睛长宽比大于等于所述第四预设值,则所述驾驶员的眼睛处于睁开状态。
7.根据权利要求1所述的方法,其特征在于,所述基于待检测驾驶员驾驶时的视频数据,获取所述驾驶员的打哈欠频率,具体为:
从待检测驾驶员驾驶时的视频数据中的每帧图像中提取所述驾驶员嘴巴的第二特征点集合;
基于所述第二特征点集合,确定所述驾驶员嘴巴的张开闭合状态;
基于每帧图像中所述驾驶员嘴巴的张开闭合状态,以及帧间隔,确定所述驾驶员的打哈欠频率。
8.一种驾驶员疲劳检测系统,其特征在于,包括:
视频采集器、车载电脑和报警器;
所述视频采集器和所述报警器分别与所述车载电脑连接;
所述车载电脑,用于基于所述视频采集器采集到的待检测驾驶员驾驶时的视频数据,获取所述驾驶员的驾车时长、闭眼时长以及打哈欠频率;
若判断获知所述驾车时长大于第一预设值、所述闭眼时长超过第二预设值和/或所述打哈欠频率大于第三预设值,则确定所述待检测驾驶员处于疲劳驾驶状态,并指示所述报警器报警。
9.一种用于驾驶员疲劳检测的电子设备,其特征在于,包括:
存储器和处理器,所述处理器和所述存储器通过总线完成相互间的通信;所述存储器存储有可被所述处理器执行的程序指令,所述处理器调用所述程序指令能够执行如权利要求1至7任一所述的方法。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一所述的方法。
CN201810231420.9A 2018-03-20 2018-03-20 驾驶员疲劳检测方法及系统 Pending CN108545080A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810231420.9A CN108545080A (zh) 2018-03-20 2018-03-20 驾驶员疲劳检测方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810231420.9A CN108545080A (zh) 2018-03-20 2018-03-20 驾驶员疲劳检测方法及系统

Publications (1)

Publication Number Publication Date
CN108545080A true CN108545080A (zh) 2018-09-18

Family

ID=63516774

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810231420.9A Pending CN108545080A (zh) 2018-03-20 2018-03-20 驾驶员疲劳检测方法及系统

Country Status (1)

Country Link
CN (1) CN108545080A (zh)

Cited By (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109447025A (zh) * 2018-11-08 2019-03-08 北京旷视科技有限公司 疲劳检测方法、装置、系统及计算机可读存储介质
CN109670421A (zh) * 2018-12-04 2019-04-23 青岛小鸟看看科技有限公司 一种疲劳状态检测方法和装置
CN109849660A (zh) * 2019-01-29 2019-06-07 合肥革绿信息科技有限公司 一种车辆安全控制系统
CN110027567A (zh) * 2019-04-30 2019-07-19 奇瑞汽车股份有限公司 驾驶员的驾驶状态确定方法、装置及存储介质
CN110059599A (zh) * 2019-04-08 2019-07-26 盐城工学院 驾驶疲劳预警方法
CN110119672A (zh) * 2019-03-26 2019-08-13 湖北大学 一种嵌入式疲劳状态检测系统及方法
CN110210445A (zh) * 2019-06-12 2019-09-06 广东工业大学 一种目标对象的疲劳状态检测方法、装置、设备及介质
CN110245574A (zh) * 2019-05-21 2019-09-17 平安科技(深圳)有限公司 一种用户疲劳状态识别方法、装置及终端设备
CN110696834A (zh) * 2019-11-20 2020-01-17 东风小康汽车有限公司重庆分公司 驾驶员状态监测方法、装置、系统和控制器
CN111476122A (zh) * 2020-03-26 2020-07-31 杭州鸿泉物联网技术股份有限公司 一种驾驶状态监测方法、设备及存储介质
CN112208544A (zh) * 2020-10-21 2021-01-12 合肥工业大学 一种驾驶员的驾驶能力判断方法、安全驾驶方法及其系统
CN112241645A (zh) * 2019-07-16 2021-01-19 广州汽车集团股份有限公司 一种疲劳驾驶检测方法及其系统、电子设备
CN112907897A (zh) * 2021-02-26 2021-06-04 浙江南盾科技发展有限公司 一种车载防疲劳驾驶提醒设备
CN113191231A (zh) * 2021-04-21 2021-07-30 栈鹿(上海)教育科技有限公司 疲劳状态下的安全驾驶方法
CN113537135A (zh) * 2021-07-30 2021-10-22 三一重机有限公司 一种驾驶监测方法、装置、系统及可读存储介质
CN113838265A (zh) * 2021-09-27 2021-12-24 科大讯飞股份有限公司 疲劳驾驶预警方法、装置以及电子设备
CN113978475A (zh) * 2021-09-22 2022-01-28 东风汽车集团股份有限公司 一种驾驶员疲劳驾车时自动驾驶介入的控制方法与系统

Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101732055A (zh) * 2009-02-11 2010-06-16 北京智安邦科技有限公司 驾驶员疲劳检测方法及系统
CN101746269A (zh) * 2010-01-08 2010-06-23 东南大学 基于软计算的疲劳驾驶融合检测方法
CN101950355A (zh) * 2010-09-08 2011-01-19 中国人民解放军国防科学技术大学 基于数字视频的驾驶员疲劳状态检测方法
CN102436715A (zh) * 2011-11-25 2012-05-02 大连海创高科信息技术有限公司 疲劳驾驶检测方法
CN104240446A (zh) * 2014-09-26 2014-12-24 长春工业大学 基于人脸识别的疲劳驾驶预警系统
CN105096528A (zh) * 2015-08-05 2015-11-25 广州云从信息科技有限公司 一种疲劳驾驶检测方法及系统
US9402577B2 (en) * 2014-12-23 2016-08-02 Automotive Research & Test Center Driver's fatigue detection system and method
CN106327801A (zh) * 2015-07-07 2017-01-11 北京易车互联信息技术有限公司 疲劳驾驶检测方法和装置
CN106355838A (zh) * 2016-10-28 2017-01-25 深圳市美通视讯科技有限公司 一种疲劳驾驶检测方法和系统
CN106372621A (zh) * 2016-09-30 2017-02-01 防城港市港口区高创信息技术有限公司 基于人脸识别的疲劳驾驶检测方法
CN106446811A (zh) * 2016-09-12 2017-02-22 北京智芯原动科技有限公司 基于深度学习的驾驶员疲劳检测方法及装置
CN106919913A (zh) * 2017-02-21 2017-07-04 上海蔚来汽车有限公司 基于计算机视觉的疲劳驾驶检测方法及装置
KR20170106755A (ko) * 2016-03-14 2017-09-22 한국과학기술원 감성 tv를 위한 표정 인식 기반 스테레오스코픽 3d 콘텐츠에 기인한 시각 피로도 측정 방법 및 시스템
CN107480629A (zh) * 2017-08-11 2017-12-15 常熟理工学院 一种基于深度信息的疲劳驾驶检测方法及装置
CN107491769A (zh) * 2017-09-11 2017-12-19 中国地质大学(武汉) 基于AdaBoost算法的疲劳驾驶检测方法及系统
CN107595307A (zh) * 2017-10-23 2018-01-19 湖南科技大学 基于机器视觉人眼识别的疲劳驾驶检测装置及检测方法
CN107679468A (zh) * 2017-09-19 2018-02-09 浙江师范大学 一种嵌入式计算机视觉检测疲劳驾驶方法及装置

Patent Citations (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101732055A (zh) * 2009-02-11 2010-06-16 北京智安邦科技有限公司 驾驶员疲劳检测方法及系统
CN101746269A (zh) * 2010-01-08 2010-06-23 东南大学 基于软计算的疲劳驾驶融合检测方法
CN101950355A (zh) * 2010-09-08 2011-01-19 中国人民解放军国防科学技术大学 基于数字视频的驾驶员疲劳状态检测方法
CN102436715A (zh) * 2011-11-25 2012-05-02 大连海创高科信息技术有限公司 疲劳驾驶检测方法
CN104240446A (zh) * 2014-09-26 2014-12-24 长春工业大学 基于人脸识别的疲劳驾驶预警系统
US9402577B2 (en) * 2014-12-23 2016-08-02 Automotive Research & Test Center Driver's fatigue detection system and method
CN106327801A (zh) * 2015-07-07 2017-01-11 北京易车互联信息技术有限公司 疲劳驾驶检测方法和装置
CN105096528A (zh) * 2015-08-05 2015-11-25 广州云从信息科技有限公司 一种疲劳驾驶检测方法及系统
KR20170106755A (ko) * 2016-03-14 2017-09-22 한국과학기술원 감성 tv를 위한 표정 인식 기반 스테레오스코픽 3d 콘텐츠에 기인한 시각 피로도 측정 방법 및 시스템
CN106446811A (zh) * 2016-09-12 2017-02-22 北京智芯原动科技有限公司 基于深度学习的驾驶员疲劳检测方法及装置
CN106372621A (zh) * 2016-09-30 2017-02-01 防城港市港口区高创信息技术有限公司 基于人脸识别的疲劳驾驶检测方法
CN106355838A (zh) * 2016-10-28 2017-01-25 深圳市美通视讯科技有限公司 一种疲劳驾驶检测方法和系统
CN106919913A (zh) * 2017-02-21 2017-07-04 上海蔚来汽车有限公司 基于计算机视觉的疲劳驾驶检测方法及装置
CN107480629A (zh) * 2017-08-11 2017-12-15 常熟理工学院 一种基于深度信息的疲劳驾驶检测方法及装置
CN107491769A (zh) * 2017-09-11 2017-12-19 中国地质大学(武汉) 基于AdaBoost算法的疲劳驾驶检测方法及系统
CN107679468A (zh) * 2017-09-19 2018-02-09 浙江师范大学 一种嵌入式计算机视觉检测疲劳驾驶方法及装置
CN107595307A (zh) * 2017-10-23 2018-01-19 湖南科技大学 基于机器视觉人眼识别的疲劳驾驶检测装置及检测方法

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109447025A (zh) * 2018-11-08 2019-03-08 北京旷视科技有限公司 疲劳检测方法、装置、系统及计算机可读存储介质
CN109447025B (zh) * 2018-11-08 2021-06-22 北京旷视科技有限公司 疲劳检测方法、装置、系统及计算机可读存储介质
CN109670421A (zh) * 2018-12-04 2019-04-23 青岛小鸟看看科技有限公司 一种疲劳状态检测方法和装置
CN109670421B (zh) * 2018-12-04 2021-04-16 青岛小鸟看看科技有限公司 一种疲劳状态检测方法和装置
CN109849660A (zh) * 2019-01-29 2019-06-07 合肥革绿信息科技有限公司 一种车辆安全控制系统
CN110119672A (zh) * 2019-03-26 2019-08-13 湖北大学 一种嵌入式疲劳状态检测系统及方法
CN110059599A (zh) * 2019-04-08 2019-07-26 盐城工学院 驾驶疲劳预警方法
CN110027567A (zh) * 2019-04-30 2019-07-19 奇瑞汽车股份有限公司 驾驶员的驾驶状态确定方法、装置及存储介质
CN110245574A (zh) * 2019-05-21 2019-09-17 平安科技(深圳)有限公司 一种用户疲劳状态识别方法、装置及终端设备
CN110245574B (zh) * 2019-05-21 2024-07-05 平安科技(深圳)有限公司 一种用户疲劳状态识别方法、装置及终端设备
CN110210445A (zh) * 2019-06-12 2019-09-06 广东工业大学 一种目标对象的疲劳状态检测方法、装置、设备及介质
CN112241645A (zh) * 2019-07-16 2021-01-19 广州汽车集团股份有限公司 一种疲劳驾驶检测方法及其系统、电子设备
CN110696834A (zh) * 2019-11-20 2020-01-17 东风小康汽车有限公司重庆分公司 驾驶员状态监测方法、装置、系统和控制器
CN111476122A (zh) * 2020-03-26 2020-07-31 杭州鸿泉物联网技术股份有限公司 一种驾驶状态监测方法、设备及存储介质
CN112208544A (zh) * 2020-10-21 2021-01-12 合肥工业大学 一种驾驶员的驾驶能力判断方法、安全驾驶方法及其系统
CN112907897A (zh) * 2021-02-26 2021-06-04 浙江南盾科技发展有限公司 一种车载防疲劳驾驶提醒设备
CN113191231A (zh) * 2021-04-21 2021-07-30 栈鹿(上海)教育科技有限公司 疲劳状态下的安全驾驶方法
CN113537135A (zh) * 2021-07-30 2021-10-22 三一重机有限公司 一种驾驶监测方法、装置、系统及可读存储介质
CN113978475A (zh) * 2021-09-22 2022-01-28 东风汽车集团股份有限公司 一种驾驶员疲劳驾车时自动驾驶介入的控制方法与系统
CN113838265A (zh) * 2021-09-27 2021-12-24 科大讯飞股份有限公司 疲劳驾驶预警方法、装置以及电子设备
CN113838265B (zh) * 2021-09-27 2023-05-30 科大讯飞股份有限公司 疲劳驾驶预警方法、装置以及电子设备

Similar Documents

Publication Publication Date Title
CN108545080A (zh) 驾驶员疲劳检测方法及系统
CN108182409B (zh) 活体检测方法、装置、设备及存储介质
JP5010905B2 (ja) 顔認証装置
CN110945522B (zh) 一种学习状态的判断方法、装置及智能机器人
Zhang et al. Driver yawning detection based on long short term memory networks
CN107346422B (zh) 一种基于眨眼检测的活体人脸识别方法
CN109543526B (zh) 基于深度差异性特征的真假面瘫识别系统
CN106557723B (zh) 一种带交互式活体检测的人脸身份认证系统及其方法
US7620216B2 (en) Method of tracking a human eye in a video image
CN106682578B (zh) 基于眨眼检测的弱光人脸识别方法
CN109840565A (zh) 一种基于眼部轮廓特征点纵横比的眨眼检测方法
CN104123543B (zh) 一种基于人脸识别的眼球运动识别方法
CN109325462B (zh) 基于虹膜的人脸识别活体检测方法及装置
WO2018218839A1 (zh) 一种活体识别方法和系统
CN111126366B (zh) 一种活体人脸的判别方法、装置、设备及存储介质
CN106897659A (zh) 眨眼运动的识别方法和装置
CN109858375A (zh) 活体人脸检测方法、终端及计算机可读存储介质
CN113887386B (zh) 基于深度学习和机器学习的多特征融合的疲劳检测方法
CN110516623A (zh) 一种人脸识别方法、装置及电子设备
CN105893963B (zh) 一种筛选视频中单个行人目标的最佳易识别帧的方法
CN108108651B (zh) 基于视频人脸分析的驾驶员非专心驾驶检测方法及系统
CN103839056B (zh) 一种人眼状态识别方法和装置
CN111860394A (zh) 一种基于姿态估计和动作检测的动作活体识别方法
CN110543848A (zh) 一种基于三维卷积神经网络的驾驶员动作识别方法及装置
CN113627256A (zh) 基于眨眼同步及双目移动检测的伪造视频检验方法及系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20180918

RJ01 Rejection of invention patent application after publication