CN104757981A - 一种高灵敏收发一体红外检测驾驶员疲劳度的方法及装置 - Google Patents
一种高灵敏收发一体红外检测驾驶员疲劳度的方法及装置 Download PDFInfo
- Publication number
- CN104757981A CN104757981A CN201510112910.3A CN201510112910A CN104757981A CN 104757981 A CN104757981 A CN 104757981A CN 201510112910 A CN201510112910 A CN 201510112910A CN 104757981 A CN104757981 A CN 104757981A
- Authority
- CN
- China
- Prior art keywords
- driver
- processing unit
- eye
- data processing
- intelligent measurement
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
- A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
Landscapes
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Engineering & Computer Science (AREA)
- Hospice & Palliative Care (AREA)
- Pathology (AREA)
- Developmental Disabilities (AREA)
- Psychiatry (AREA)
- Psychology (AREA)
- Social Psychology (AREA)
- Physics & Mathematics (AREA)
- Child & Adolescent Psychology (AREA)
- Biophysics (AREA)
- Educational Technology (AREA)
- Biomedical Technology (AREA)
- Heart & Thoracic Surgery (AREA)
- Medical Informatics (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- General Health & Medical Sciences (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
Abstract
本发明涉及一种高灵敏收发一体红外检测驾驶员疲劳度的方法及装置,包括:利用红外传感器发射红外光,通过接收照射在人眼部反射后的红外光线值的变化来检测驾驶员的眼动特征,根据眼动于疲劳的关系分析并计算出行驶过程中驾驶员疲劳的方法,智能检测数据处理单元接收疲劳参数检测识别单元采集的驾驶员眼部变化特征数据、环境光感数据及头部行为数据信息,智能检测数据处理单元将处理的结果,与该驾驶员的自学习的常规特征模型进行对比,分析并计算出该驾驶员的P80状态值,当P80的状态值超出了安全阀值时,智能检测数据处理分析单元会通过蓝牙通讯模块将信息,反馈给后端数据中心,并启动预警/干预手段如:震动,刺激性的音频等。
Description
技术领域
本发明涉及一种高灵敏收发一体红外检测驾驶员疲劳度的方法及装置,具体的说就是利用高灵敏收发一体红外传感器发射红外光,通过接收照射在人眼部反射后的红外光线值的变化来检测驾驶员的眼动特征,根据眼动于疲劳的关系分析并计算出行驶过程中驾驶员疲劳的方法,及基于此方法实现的可穿戴设备。
背景技术
随着社会经济的发展,机动车辆与日俱增,随之而来的人身安全越来越受到人们的关注。最近的研究表明:造成汽车碰撞事故的原因25~30%产生于驾驶疲劳。驾驶疲劳可能影响驾驶员的警觉和安全驾驶能力。因此,许多国家都积极开展有关驾驶疲劳的研究工作,也取得了一定的进展。但目前仍然缺乏一款可以评估并量化精神状态的穿戴式设备。因此,我们认为:开发一款可以记录用户的精神状态,并在必要时刻提醒用户打起精神的主动安全预警系统,能够大大减少交通事故的发生,这也是智能交通领域的一个重要发展方向。
针对目前国内交通行业缺少对驾驶员行驶过程中疲劳检测的有效手段和方法,行驶在路上的驾驶员多数以听音乐、开窗通风等方式来减轻疲劳,而通过设备或仪器来检测和干预的方式价格又相对很贵,同时佩戴不方便、车内需要加装车载不便利等不足。因此,需要一款价格低、佩戴方便、功能多、检测预警效率高的穿戴设备作为驾驶员安全行驶的一部分。
国内外对驾驶员疲劳检测预警的众多技术中,基于眼动分析判断疲劳的技术最受欢迎并且效果最好,而国内外对此技术的研究和开发都是基于摄像头实时采集人面部图像,然后由DSP进行图像分析判断眼部特征即眨眼频率和眼皮覆盖眼球的面积,并根据p80和阈值分析人的疲劳状态,虽然此技术已经得到验证和应用,但由于对图像处理和分析的数据量大并且受外界光线的影响处理结果也各异,同时高速分析需要的硬件配置较高自然价格相对昂贵,因此很难投向大众市场。
许多超时工作的人都认为自己不累,但是身体信息是不会骗人的。本发明提供一种会收集用户眨眼、身体动作的数据,并评价用户的精神状态的装置。
发明内容
本发明要解决的问题是提供一种基于高灵敏收发一体红外采集单元对眨眼变化特征进行实时采集,并将采集的数据传给智能检测数据处理单元分析处理,计算出眼皮覆盖眼球的面积,根据p80和阈值分析人的疲劳状态。
为解决现有技术中的问题,本发明一个目的是提供一种采用高灵敏度收发一体红外技术通过接收照射在人眼部反射后的红外光线值的变化来检测驾驶员的眼动特征,本发明的反应速度快、处理数据简单、效率高、稳定性好、高精度等特点适合做成穿戴产品来满足大众的使用。
本发明的另一个目的是一种基于高灵敏收发一体红外检测驾驶疲劳度的方法及实现装置对驾驶员疲劳状态进行实时检测监控并作出有效的预警和干预,有效的降低因疲劳驾驶造成的交通事故和人员伤亡,对社会、对企业、家庭来说都有重要意义。
为解决上述技术问题,本发明采用的技术方案是:
本发明一种高灵敏收发一体红外检测驾驶员疲劳度的方法:包括以下步骤:
系统启动进行初始化后,由疲劳参数检测识别单元检测眼部变化信息,并将数据传送给智能检测数据处理单元进行处理,通过对实时数据的计算分析得到驾驶员当前的眼部特征信息。
因为眼睛变化特征与事故发生的是时间关系,眼睛闭合时间的长短与疲劳程度有密切的关系,驾驶员眼睛闭合的时间越长,疲劳程度越严重。因此,通过测量眼睛闭合的时间能够确定疲劳驾驶的程度。
疲劳参数检测识别单元实时发射和接收经人眼反射回来的红外信息,经由智能检测数据处理单元对信息进行分析并计算在一定的时间内眼睛闭合时间所占的比例;根据眼睛闭合时间的长短与疲劳程度之间的密切关系,进而得出驾驶员是否进入疲劳或疲劳程度。
眼皮覆盖眼球面积的比例指标如下:
P70:指眼睑遮住瞳孔的面积超过70%就计为眼睛闭合,统计在一定时间内眼睛闭合时所占的时间比例;
P80:指眼睑遮住瞳孔的面积超过80%就计为眼睛闭合,统计在一定时间内眼睛闭合时所占的时间比例;
EM:指眼睑遮住瞳孔的面积超过一半就计为眼睛闭合,统计在一定时间内眼睛闭合时所占的时间比例;
美国国家公路交通安全局对该方法作了实验,实验结果表明该方法中的P80与疲劳发展程度的相关性较好,其他研究人员也得出了类似的结论。
定义眼睑遮住瞳孔的面积超过80%就计为眼睛闭合,但是在实际中瞳孔的闭合程度不容易测量,可行的简化方法是计算眼睛的闭合百分比。
计算公式如下:
C=1-m1/m2
式中m1——当前的人眼睁开高度:
m2——人眼睁开最大高度;
对于人眼睁开时的大小的定义是存在难度的,因为这个数据是因人而异的,所以需要对每个使用的驾驶员进行自学习并建立属于该驾驶员的眼部变化特征常模数据库,因此需要对驾驶员进行周期性的数据采集并建模。
然后对一个测量周期进行分析,选择5s为一个测量周期,每秒的检测频率为12帧,也就是一个测量周期会选取60帧。
统计在一定时间内眼睛闭合时所占的时间比例;P80大于0.4,也就是一个测量周期中有超过20帧被判定为闭合状态时,则认为驾驶员处于疲劳状态;当P80处在0.1和0.4之间时,判定为精神不饱满状态;当P80处在0.1以下时,判定其为精神饱满状态。
本发明一种基于高灵敏收发一体红外检测驾驶疲劳的方法及实现装置包括以下步骤:
系统启动进行初始化后,首先进入该驾驶员的自学习模式,由疲劳参数检测识别单元对眼部变化信息进行周期性采集,其采集频率满足f采样频率>2f发射频率,并通过信号放大器将采集信号放大。
疲劳参数检测识别单元将放大了的眼部特征变化电信号转换为数字信号,并向智能检测数据处理单元传输数据。
智能检测数据处理单元对该驾驶员的眼部变化特征数据进行建模和分析,若经过周期性分析后得到该驾驶员的眼部特征变化模型,表示自学习成功即;
通过学习得到了该驾驶员的m1:当前的人眼睁开高度,m2:人眼睁开最大高度,mf:眨眼频率范围等信息。
智能检测数据处理单元对自学习成功的驾驶员眼部特征信息进行本地化数据保存,作为疲劳实时检测的数据模型判断的依据。
如果自学习过程不成功需要重置疲劳参数检测识别单元的位置重新自学习,对于人眼睁开时的大小的定义这个数据是因人而异因,为此必须成功自学习后才可以在行驶中使用。
智能检测数据处理单元通过疲劳参数检测识别单元采集的驾驶员眼部特征变化信息,通过光感检测单元采集环境光照度数据做线性插补,通过插补公式Y=-0.094X+269.810;R2=0.977计算后得出检测数据,与自学习后的眼部变化特征数据做比较,并通过P80计算该驾驶员的当前疲劳状态。
智能检测数据处理单元对疲劳参数检测识别单元传送的用于记录该驾驶员的眼睛正常睁开高度、眼睛正常闭合、眨眼频率信息的数组,并将正常状态下自学习检测的数据作为常规特征模型建立数据库。
通过数组对比的方式计算出该驾驶员的P80状态值,当P80在安全阀值范围内时驾驶员状态良好,若P80的状态值超出了安全阀值则驾驶员出现疲劳状态,疲劳的等级由P80于阀值之间的偏差得到。
疲劳参数检测识别单元采集用于记录该驾驶员驾驶员的红外和光感的检测信息建立的数组为:
以该驾驶员眼动采集帧信息为名称建立五个数组,该五个数组均有24个元素,对应每秒钟高灵敏收发一体红外单元采集的帧数和光感检测单元采集的帧数。
智能检测数据处理单元对疲劳参数检测识别单元传送的用于记录该驾驶员的眼部特征变化信息的数组为:
以该驾驶员眨眼持续时间、闭眼持续时间、睁眼持续时间、眨眼间隔、眨眼频率、眼睑闭合程度、眼睑睁开程度、眼睑再睁开延迟等指标为名称建立8个数组,该数组均有2个元素,对应智能检测数据处理单元通过疲劳参数检测识别单元采集并发送的数据处理后的检测眨眼数据,及智能检测数据处理单元对疲劳参数检测识别单元采集并发送的数据处理后的该驾驶员自学习后的眼部特征数据。
由智能检测数据处理单元对疲劳参数检测识别单元传送的该驾驶员的采集数据对以眼动采集帧信息为名称建立的五个数组赋值,即第一个数组赋予第1秒钟的12帧经眼睛反射的红外数据信息和第一秒钟的12帧环境光照度数据信息,第二个数组赋予第2秒钟的12帧经眼睛反射的红外数据信息和第2秒钟的12帧环境光照度数据信息,第三个数组赋予第3秒钟的12帧经眼睛反射的红外数据信息和第3秒钟的12帧环境光照度数据信息,第四个数组赋予第4秒钟的12帧经眼睛反射的红外数据信息和第4秒钟的12帧环境光照度数据信息,第五个数组赋予第5秒钟的12帧经眼睛反射的红外数据信息和第5秒钟的12帧环境光照度数据信息。
智能检测数据处理单元对疲劳参数检测识别单元传送的用于记录该驾驶员的眼部变化特征信息的数组通过与自学习的特征数据对比后,计算出该驾驶员的P80状态值,当P80的状态值超出了安全阀值时,智能检测数据处理单元会通过蓝牙通讯方式将信息,反馈给后端数据中心,启动预警/干预手段如:震动,刺激性的音频等。
本发明实现装置是具有一个疲劳参数检测识别单元和智能检测数据处理单元,其中疲劳参数检测识别单元和智能检测数据处理单元通过总线通信进行连接,这2个单元均均集成在实现此系统的实现装置中即一个可穿戴设备中,疲劳参数检测识别单元将驾驶员的眼部特征变化采集信息传送给智能检测数据处理单元进行处理和分析,智能检测数据处理单元将处理的结果,与该驾驶员的自学习的眼部特征模型进行对比,分析并计算出该驾驶员的P80状态值,当P80的状态值超出了安全阀值时,智能检测数据处理单元会通过蓝牙通讯方式将信息,反馈给后端数据中心,启动预警/干预手段如:震动,刺激性的音频等。
所述疲劳参数检测识别单元具有超微高灵敏收发一体红外单元和微型低功耗光感单元和重力加速度感应器单元组成。其中,超微高灵敏收发一体红外单元、微型低功耗光感单元、重力加速度感应器单元及网络通讯单元以智能检测数据处理单元为核心连接在一起,其中智能检测数据处理单元中运行驾驶员疲劳状态信息自动处理分析单元。
本发明具有以下有益效果及优点:
1、本系统是集成蓝牙耳机技术和疲劳检测技术于一体发明的可穿戴设备,具备蓝牙耳机的所有通讯功能。使用此设备,你不用再担心错过亲戚朋友的电话和短信。在需要时佩戴上此设备同时通过蓝牙连接到手机,可设置多种提醒方式和干预手段。
2、我们采用驶员疲劳参数检测识别单元通过接收人眼球折射的红外线强度判断人眼部特征,它的反应速度快、处理数据简单、效率高、稳定性好、高精度等特点适合做成穿戴产品来满足大众的使用。
3、本发明可最大程度、最快速度地发现处在疲劳状态的驾驶员,有效防止因驾驶疲劳而引起交通事故的风险,保障社会安全、降低运输企业的维护成本、保障社会和谐发展。
附图说明
图1为本发明疲劳参数检测识别单元示意图;
图2为本发明智能检测数据处理分析单元示意图;
图3为本发明光感检测单元数据补偿示意图;
图4为本发明疲劳参数检测识别单元检测流程图;
图5为本发明智能检测数据处理单元处理流程图。
具体实施方式
下面结合说明书附图图1-5对本发明作进一步阐述。
本发明一种高灵敏收发一体红外检测驾驶员疲劳度的方法及装置,具有一个疲劳参数检测识别单元和智能检测数据处理分析单元,其中疲劳参数检测识别单元包括超微高灵敏收发一体红外单元、微型低功耗光感单元、重力加速度感应器单元组成,疲劳参数检测识别单元和智能检测数据处理单元通过通信进行连接,这2个单元均均集成在实现此系统的实现装置即一个可穿戴设备中,疲劳参数检测识别单元采集驾驶员的眼部变化特征并将信息传送给智能检测数据处理单元进行处理和分析,智能检测数据处理单元将处理的结果,与该驾驶员的自学习的常规特征模型进行对比,计算出该驾驶员的P80状态值,当P80的状态值超出了安全阀值时,智能检测数据处理单元会通过蓝牙通讯方式将信息,反馈给后端数据中心,启动预警/干预手段如:震动,刺激性的音频等。
如图1所示,所述疲劳参数检测识别单元具有超微高灵敏收发一体红外单元和微型低功耗光感单元和重力加速度感应器单元组成。其中,超微高灵敏收发一体红外单元、微型低功耗光感单元、重力加速度感应器单元及网络通讯单元以智能检测数据处理单元为核心连接在一起,其中智能检测数据处理单元中运行驾驶员疲劳状态信息自动处理分析单元。
各部件的主要作用为:
(1)疲劳参数检测识别单元以发送周期2倍的频率进行接收眼球反射回来的红外光线,由于,眼皮覆盖眼球晶体面积越大经眼球反射的红外光线越少即疲劳参数检测识别单元获取到的数据值越小,反之越大,这样通过智能检测数据处理单元根据对种数值的变化进行分析和处理来计算出驾驶员眼部变化的特征信息。
(2)微型低功耗光感装置采集的环境光照度数据传送给智能检测数据处理单元作为红外检测数据的线性插补,有效的降低了环境光对红外光的造成的影响。
(3)重力加速度感应器装置对驾驶员的头部行为如,摆头、点头、摇头及加速度信息的采集,将驾驶员的更多行为信息传送给智能检测数据处理单元增加疲劳检测数据的可靠性。
(4)网络通信单元负责通过蓝牙于手机通讯,将智能检测数据处理单元的数据传输给手机,接收手机的语音和数据信息并将信息传送给智能检测数据处理单元处理。
如图2所示,所述智能检测数据处理单元安装在可穿戴设备中,包括蓝牙通讯模块、疲劳数据分析模块、自学习数据存储模块等,各部分均以总线通信方式连接。
各部件的主要作用为:
(1)蓝牙通讯模块负责手机数据语音的传输,智能检测数据处理单元负责接收疲劳参数检测识别单元采集的驾驶员眼部变化特征数据、环境光感数据及头部行为数据信息,智能检测数据处理单元将处理的结果,与该驾驶员的自学习的常规特征模型进行对比,分析并计算出该驾驶员的P80状态值,当P80的状态值超出了安全阀值时,智能检测数据处理分析单元会通过蓝牙通讯模块将信息,反馈给后端数据中心,并启动预警/干预手段如:震动,刺激性的音频等。
(2)疲劳数据分析模块将通过疲劳参数检测识别单元采集的驾驶员眼部特征变化数据、环境光照度数据及头部行为数据信息,进行线性插补后,与自学习的特征数据库做比较,并通过P80判断出该驾驶员的当前疲劳状态。
(3)自学习数据存储模块由疲劳参数检测识别单元对眼部变化信息进行周期性采集得到,并通过信号放大器将采集信号放大。驶员疲劳参数检测识别单元将放大了的眼部特征变化信号转换为数字信号,并向智能检测数据处理单元传输数据。
智能检测数据处理单元对该驾驶员的眼部变化特征数据通过数据建模分析,若经过周期性分析后得到该驾驶员的眼部特征变化模型,表示自学习成功即:
通过学习得到了该驾驶员的m1:当前的人眼睁开高度,m2:人眼睁开最大高度,mf:眨眼频率范围等信息。
智能检测数据处理单元对自学习成功的驾驶员眼部特征信息进行本地化数据保存。作为疲劳实时检测的数据判断的依据。
如果自学习过程不成功需要重置疲劳参数检测识别单元的位置重新进行自学习,对于人眼睁开时的大小的定义这个数据是因人而异因,为此必须成功自学习后才可以在行驶中使用。
本发明系统的装置实现如下:
本发明系统集成蓝牙耳机技术于疲劳检测技术及基于此技术的实现装置即可穿戴设备,本装置主要由疲劳参数检测识别单元和智能检测数据处理单元组成,其中,疲劳参数检测识别单元包括超微高灵敏收发一体红外单元、微型低功耗光感单元和重力加速度感应器单元。智能检测数据处理单元包括蓝牙通讯模块、疲劳数据分析模块、自学习数据存储模块。智能检测数据处理分析单元接收疲劳参数检测识别单元采集的驾驶员眼部变化特征数据、环境光感数据及头部行为数据,并将数据传给智能检测数据处理单元处理,通过与该驾驶员的自学习的特征模型进行对比,计算出该驾驶员的P80状态值,当P80的状态值超出了安全阀值时,智能检测数据处理分析单元会通过蓝牙通讯模块将信息,反馈给后端数据中心,并启动预警/干预手段如:震动,刺激性的音频等。
如图3所示,所述环境光照度数据插补公式,是环境光线对红外光线产生影响而做出一种降噪补偿措施,此公式通过对环境光照度数据的实时采集来补偿环境光对红外光线的影响,有效的降低外界噪音对检测结果的干扰。
如图4所示,疲劳参数检测识别单元检测过程如下:
系统启动进行初始化后,组成疲劳参数检测识别单元的超微高灵敏度收发一体红外传感器发射红外光线到驾驶员眼部,同时接收经过眼球表面晶状体反射的红外光线,疲劳参数检测识别单元将眼球表面反射的红外光线信息转换成数字信息传送给智能检测数据处理分析单元。
因为眼睛闭合与事故发生的是时间关系,眼睛闭合时间的长短与疲劳程度有密切的关系,驾驶员眼睛闭合的时间越长,疲劳程度越严重。
对于人眼睁开时的大小的定义是存在难度的,因为这个数据是因人而异的,所以需要对每个使用的驾驶员进行自学习并建立属于该驾驶员的眼部变化特征常模数据库,因此需要对驾驶员进行周期性的数据采集并建模。
然后对一个测量周期进行分析,选择5s为一个测量周期,每秒的检测频率为12帧,也就是一个测量周期会选取60帧。以下为对驾驶员眼部特征的检测示例:
疲劳参数检测识别单元采用5s为一个测量周期,每秒采集12帧数据,此数据由组成疲劳参数检测识别单元的超微高灵敏收发一体红外单元发射红外光线到驾驶员眼部,同时接收经过眼球表面晶状体反射的红外光线,疲劳参数检测识别单元将眼球表面反射的红外光线信息转换成的数字信息,将此数据分别赋值给以驾驶员眼动采集帧信息为名称建立的五个数组的1到12个元素中,同时由组成疲劳参数检测识别单元的光感检测单元采集环境光照度数据信息,将此数据分别赋值给以驾驶员眼动采集帧信息为名称建立的五个数组的13到24个元素中,如:
//第一秒疲劳参数检测识别单元采集的经眼球反射后的红外数据
EYEFRAM-INFOR01[1]......[12]={205,205,204,203,200,200,199,199,198,198,196,196};
//第一秒疲劳参数检测识别单元采集的环境光照度数据
EYEFRAM-INFOR01[13]....[24]={680,680,690,710,710,680,680,650,650,680,660,670};
//第二秒疲劳参数检测识别单元采集的经眼球反射后的红外数据
EYEFRAM-INFOR02[1]......[12]={180,180,176,175,160,160,155,153,143,140,140,139};
//第二秒疲劳参数检测识别单元采集的环境光照度数据
EYEFRAM-INFOR02[13]....[24]={681,679,680,710,100,680,680,650,650,680,660,669};
//第三秒疲劳参数检测识别单元采集的经眼球反射后的红外数据
EYEFRAM-INFOR03[1]......[12]={100,100,94,93,70,68,68,66,45,40,40,39}
//第三秒疲劳参数检测识别单元采集的环境光照度数据
EYEFRAM-INFOR03[13]....[24]={693,678,690,711,715,680,682,651,650,680,660,670};
//第四秒疲劳参数检测识别单元采集的经眼球反射后的红外数据
EYEFRAM-INFOR04[1]......[12]={28,26,26,23,23,39,40,60,68,80,88,100};
//第四秒疲劳参数检测识别单元采集的环境光照度数据
EYEFRAM-INFOR04[13]....[24]={680,680,692,710,712,680,683,653,650,680,660,670};
//第五秒疲劳参数检测识别单元采集的经眼球反射后的红外数据
EYEFRAM-INFOR05[1]......[12]={140,149,160,168,168,180,185,198,198,203,200,210};
//第五秒疲劳参数检测识别单元采集的环境光照度数据
EYEFRAM-INFOR05[13]....[24]={681,681,691,710,710,680,680,650,650,680,665,670};
疲劳参数检测识别单元将数据传输给智能检测数据处理单元进行计算和处理,下一个5s检测周期时会更新这个数组的数据并传输给智能检测数据处理单元进行计算和处理。
如图5所示,智能检测数据处理单元对疲劳状态数据的处理过程如下:
系统启动进行初始化后,首先进入该驾驶员的自学习模式,由组成疲劳参数检测识别单元的超微高灵敏收发一体红外单元对眼部变化信息进行周期性采集其采样频率为f采样频率>2f发射频率,并通过信号放大器将采集信号放大。
智能检测数据处理单元对该驾驶员的眼部变化特征数据进行建模和分析,通过对帧数值的周期性对比结果的和取平均后计算出该驾驶员正常状态下眼睑睁开程度mo和眼睑闭合程度mc指标,其他指标由mo和mc的数值比对计算得出,如:眨眼持续时间:计算得出从眼睑开始闭合到完全睁开的时间,闭眼持续时间:计算得出从眼睑开始闭合到开始睁开的时间,睁眼持续时间:计算得出从眼睑开始睁开到完全睁开的时间,眨眼间隔:计算得出两次眨眼之间的间隔,眨眼频率:计算单位时间1分钟眨眼次数,眼睑再睁开延迟:计算眼睑全闭合之后到再开始睁开上眼睑的时间。
若经过周期性分析后得到该驾驶员的眼部特征变化模型,表示自学习成功,智能检测数据处理单元将该驾驶员自学习成功的数据进行本地化存储。
智能检测数据处理单元将接收到的由疲劳参数检测识别单元发送的检测数据,分析处理后对以用于记录该驾驶员的眼部特征变化信息的数组赋值,如下:
EYELIDS-OPEN-DEGREE[2]={1:200,该驾驶员当前检测的眼睑睁开程度;2:205,该驾驶员自学习成功后的眼睛睁开程度};
EYELIDS-CLOSE-DEGREE[2]={1:18,该驾驶员当前检测的眼睑闭合程度;2:20,该驾驶员自学习成功后的眼睛闭合程度};
BLINK-DURATION[2]={1:0.5s,该驾驶员当前检测的眨眼持续时间;
2:0.5s,该驾驶员自学习成功后的眨眼持续时间};
OPEN-DURATION[2]={1:0.25s,该驾驶员当前检测的睁眼持续时间;
2:0.25s,该驾驶员自学习成功后的睁眼持续时间};
CLOSE-DURATION[2]={1:0.25s,该驾驶员当前检测的闭眼持续时间;
2:0.25s,该驾驶员自学习成功后的闭眼持续时间};
BLINK-INTERVAL[2]={1:4s,该驾驶员当前检测的眨眼间隔时间;
2:4s,该驾驶员自学习成功后的眨眼间隔时间};
BLINK-FREQUENCY[2]={1:15次/分,该驾驶员当前检测的眨眼频率;
2:15次/分,该驾驶员自学习成功后的眨眼频率};
EYELID-AGAIN-OPEN-DELAY[2]={1:1.5s,该驾驶员当前检测的眼睑再睁开延迟;2:1.5s,该驾驶员自学习成功后的眼睑再睁开延迟};
智能检测数据处理单元将接收到的由疲劳参数检测识别单元发送的检测数据后处理并计算该驾驶员的P80持续时间,通过计算公式:
C=1-m1/m2
式中m1——当前的人眼睁开高度:
m2——人眼睁开最大高度;
即:
C=1-EYEFRAM-INFOR01[1~12]/mo
可以得到该驾驶员的P80持续时间,统计在一定时间内眼睛闭合时所占的时间比例。P80大于0.4,也就是一个测量周期中有超过20帧被判定为闭合状态时,则认为驾驶员处于疲劳状态;当P80处在0.1和0.4之间时,判定为精神不饱满状态;当P80处在0.1以下时,判定其为精神饱满状态。
本发明可以在驾驶员行驶过程中捕捉10余种眼动变量,并分析这些变量的规律。本发明一种基于高灵敏收发一体红外检测驾驶疲劳的方法及实现装置会实时记录这些数据,并全部储存在移动设备里。
本发明利用红外传感器探测用户眨眼情况,结合加速度传感器为辅助手段捕捉驾驶员上半身运动幅度。当数据显示驾驶员精神状态不佳时,装置会通过振动、闪光或者音乐提醒该驾驶员“该醒醒了”。另外,这种机制可以帮助驾驶员在觉得累之前就获得足够休息,使驾驶员能够在必要时刻保持高注意力。
该产品的使用很简单。当驾驶员需要保持注意力时戴上本发明的实现装置,通过蓝牙将产品和移动设备连接:你可以设定提醒的时间和方式。此时配套的手机App会显示相关数据提供用户参考。
Claims (5)
1.一种高灵敏收发一体红外检测驾驶员疲劳度的方法,其特征在于,包括以下步骤:
系统启动进行初始化后,疲劳参数检测识别单元采集驾驶员眼部变化数据;
智能检测数据处理单元对该驾驶员的眼部变化特征数据进行建模和分析,经过周期性分析后得到该驾驶员的眼部特征变化模型,表示自学习成功即:通过学习得到驾驶员的当前的眼睁开高度m1,眼睁开最大高度m2,眨眼频率范围mf信息;智能检测数据处理单元对自学习成功的驾驶员眼部特征信息保存到数据存储处理单元;
疲劳参数检测识别单元的超微高灵敏度收发一体红外传感器发射红外光线到驾驶员眼部,同时接收经过眼球表面晶状体反射的红外光线,驾驶员疲劳度参数检测识别单元将眼球表面反射的红外光线信息转换成数字信息传送给智能检测数据处理单元,并由智能检测数据处理单元进行处理和分析;
智能检测数据处理单元将处理的结果,与该驾驶员的自学习的眼部特征变化模型进行对比,分析并计算出该驾驶员的P80状态值,当P80的状态值超出安全阀值时,智能检测数据处理单元会通过蓝牙通讯模块将信息,反馈给数据存储处理单元,并启动预警/干预手段如:震动,刺激性的音频。
2.按权利要求1所述的高灵敏收发一体红外检测驾驶员疲劳度的方法,其特征在于:智能检测数据处理单元通过疲劳参数检测识别单元采集的驾驶员眼部特征变化信息,通过光感检测单元采集环境光照度数据做线性插补,通过插补公式Y=-0.094X+269.810;R2=0.977计算后得出检测数据,与自学习后的眼部变化特征数据做比较,并通过P80计算该驾驶员的当前疲劳状态。
智能检测数据处理单元对疲劳参数检测识别单元传送的用于记录该驾驶员的眼睛正常睁开高度、眼睛正常闭合、眨眼频率信息的数组,并将正常状态下自学习检测的数据作为常规特征模型建立数据库。
如果智能检测数据处理单元将处理的结果与自学习的特征数据信息进行比对,分析并计算出该驾驶员的P80状态值,P80大于0.4,则认为驾驶员处于疲劳状态;当P80处在0.1和0.4之间时,判定为精神不饱满状态;当P80处在0.1以下时,判定其为精神饱满状态。
3.按权利要求2所述的高灵敏收发一体红外检测驾驶员疲劳度的方法,其特征在于:智能检测数据处理单元对疲劳参数检测识别单元传送的用于记录该驾驶员的眼部特征变化信息的数组为:
以该驾驶员眨眼持续时间、闭眼持续时间、睁眼持续时间、眨眼间隔、眨眼频率、眼睑闭合程度、眼睑睁开程度、眼睑再睁开延迟指标为名称建立8个数组,该数组均有2个元素,对应智能检测数据处理单元对疲劳参数检测识别单元采集并发送的数据处理后的检测眨眼指标,及智能检测数据处理单元对疲劳参数检测识别单元采集并发送的数据处理后的该驾驶员自学习后的眼部特征指标;
由智能检测数据处理单元对疲劳参数检测识别单元传送的该驾驶员的采集数据对以眼动采集帧信息为名称建立的五个数组赋值,即第一个数组赋予第1秒钟的12帧经眼睛反射的红外数据信息和第一秒钟的12帧环境光照度数据信息,第二个数组赋予第2秒钟的12帧经眼睛反射的红外数据信息和第2秒钟的12帧环境光照度数据信息,第三个数组赋予第3秒钟的12帧经眼睛反射的红外数据信息和第3秒钟的12帧环境光照度数据信息,第四个数组赋予第4秒钟的12帧经眼睛反射的红外数据信息和第4秒钟的12帧环境光照度数据信息,第五个数组赋予第5秒钟的12帧经眼睛反射的红外数据信息和第5秒钟的12帧环境光照度数据信息。
4.一种高灵敏收发一体红外检测驾驶员疲劳度的装置,其特征在于:本穿戴装置是蓝牙耳机模块、疲劳参数检测识别单元和智能检测数据处理单元组成;其中,智能检测数据处理单元接收疲劳参数检测识别单元采集的驾驶员眼部变化特征数据、环境光感数据及头部行为数据,并将数据传给智能检测数据处理单元处理;智能检测数据处理单元处理通过与该驾驶员的自学习的特征模型进行对比,计算出该驾驶员的P80状态值,当P80的状态值超出安全阀值时,智能检测数据处理单元会通过蓝牙耳机通讯模块将信息反馈给数据存储处理单元,并启动预警/干预手段,产生震动,刺激性的音频;
所述智能检测数据处理单元包括疲劳数据分析模块、自学习数据存储模块,各模块以总线通信方式连接。
5.按权利要求4所述的一种基于高灵敏收发一体红外检测驾驶疲劳的实现装置,其特征在于:所述疲劳参数检测识别单元具有超微高灵敏收发一体红外单元和微型低功耗光感单元和重力加速度感应器单元组成;其中,超微高灵敏收发一体红外单元、微型低功耗光感单元、重力加速度感应器单元及网络通讯单元以智能检测数据处理单元为核心连接在一起,其中智能检测数据处理单元中存储有驾驶员疲劳状态信息自动处理分析模块。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510112910.3A CN104757981A (zh) | 2015-03-16 | 2015-03-16 | 一种高灵敏收发一体红外检测驾驶员疲劳度的方法及装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510112910.3A CN104757981A (zh) | 2015-03-16 | 2015-03-16 | 一种高灵敏收发一体红外检测驾驶员疲劳度的方法及装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN104757981A true CN104757981A (zh) | 2015-07-08 |
Family
ID=53640336
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510112910.3A Pending CN104757981A (zh) | 2015-03-16 | 2015-03-16 | 一种高灵敏收发一体红外检测驾驶员疲劳度的方法及装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104757981A (zh) |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106200004A (zh) * | 2016-07-15 | 2016-12-07 | 宇龙计算机通信科技(深圳)有限公司 | 提醒方法、智能眼镜及车载系统 |
CN106485878A (zh) * | 2015-08-27 | 2017-03-08 | 昆山研达电脑科技有限公司 | 疲劳驾驶提醒装置及方法 |
CN106889990A (zh) * | 2017-01-10 | 2017-06-27 | 闽南师范大学 | 一种基于蓝牙传输的驾驶员疲劳状态检测系统及方法 |
CN107015497A (zh) * | 2017-01-10 | 2017-08-04 | 闽南师范大学 | 一种基于无线传输的学习者疲劳状态检测系统及方法 |
CN107427664A (zh) * | 2015-02-05 | 2017-12-01 | 迈柯唯简易股份公司 | 对非视觉功能具有最佳刺激的照明设备 |
CN107802274A (zh) * | 2017-11-23 | 2018-03-16 | 山东科技大学 | 基于生理指标的疲劳度检测方法及系统 |
CN109549625A (zh) * | 2018-11-13 | 2019-04-02 | 陕西科技大学 | 采集驾驶员眼动数据的后视镜及利用该后视镜的疲劳监测系统 |
CN109620221A (zh) * | 2018-10-16 | 2019-04-16 | 平安科技(深圳)有限公司 | 基于智能眼镜的疲劳提醒方法、装置、智能眼镜及介质 |
CN109983517A (zh) * | 2016-11-21 | 2019-07-05 | 皇家飞利浦有限公司 | 使用识别信号的远程控制设备和用户设备 |
CN110448312A (zh) * | 2018-05-07 | 2019-11-15 | 欧姆龙株式会社 | 数据处理装置、监视系统、唤醒系统、数据处理方法 |
CN110477927A (zh) * | 2019-09-18 | 2019-11-22 | 歌尔科技有限公司 | 一种主动眨眼检测方法、装置、设备及可读存储介质 |
CN110709903A (zh) * | 2017-05-30 | 2020-01-17 | 松下知识产权经营株式会社 | 睡意推测装置、觉醒引导控制装置、以及觉醒引导系统 |
CN111281403A (zh) * | 2020-03-09 | 2020-06-16 | 西安交通大学 | 一种基于嵌入式设备的细粒度人体疲劳检测方法及设备 |
CN111754728A (zh) * | 2019-03-29 | 2020-10-09 | 京东方科技集团股份有限公司 | 检测组件、检测装置、疲劳驾驶的检测方法 |
CN113095108A (zh) * | 2019-12-23 | 2021-07-09 | 中移物联网有限公司 | 一种疲劳驾驶检测方法及装置 |
CN113143299A (zh) * | 2021-04-26 | 2021-07-23 | 广东小天才科技有限公司 | 一种视力监测方法、系统、眼镜及头戴智能设备 |
CN113317792A (zh) * | 2021-06-02 | 2021-08-31 | 樊天放 | 一种基于双眼目光矢量分析的注意力检测系统及方法 |
CN116439710A (zh) * | 2023-04-11 | 2023-07-18 | 中国人民解放军海军特色医学中心 | 一种基于生理信号的舰船驾驶员疲劳检测系统及方法 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050226472A1 (en) * | 2004-04-13 | 2005-10-13 | Denso Corporation | Driver's appearance recognition system |
CN101090482A (zh) * | 2006-06-13 | 2007-12-19 | 唐琎 | 一种基于图象处理和信息融合技术的驾驶员疲劳监测系统及方法 |
US20080074618A1 (en) * | 2006-05-15 | 2008-03-27 | Baohua Qi | Fatigue detection device using encoded light signals |
CN101639894A (zh) * | 2009-08-31 | 2010-02-03 | 华南理工大学 | 在线检测列车驾驶员行为和疲劳状态的方法及其检测系统 |
CN103315754A (zh) * | 2013-07-01 | 2013-09-25 | 深圳市飞瑞斯科技有限公司 | 一种疲劳检测方法及装置 |
CN103700217A (zh) * | 2014-01-07 | 2014-04-02 | 广州市鸿慧电子科技有限公司 | 基于人眼及行车轨迹特征的疲劳驾驶检测系统及方法 |
-
2015
- 2015-03-16 CN CN201510112910.3A patent/CN104757981A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20050226472A1 (en) * | 2004-04-13 | 2005-10-13 | Denso Corporation | Driver's appearance recognition system |
US20080074618A1 (en) * | 2006-05-15 | 2008-03-27 | Baohua Qi | Fatigue detection device using encoded light signals |
CN101090482A (zh) * | 2006-06-13 | 2007-12-19 | 唐琎 | 一种基于图象处理和信息融合技术的驾驶员疲劳监测系统及方法 |
CN101639894A (zh) * | 2009-08-31 | 2010-02-03 | 华南理工大学 | 在线检测列车驾驶员行为和疲劳状态的方法及其检测系统 |
CN103315754A (zh) * | 2013-07-01 | 2013-09-25 | 深圳市飞瑞斯科技有限公司 | 一种疲劳检测方法及装置 |
CN103700217A (zh) * | 2014-01-07 | 2014-04-02 | 广州市鸿慧电子科技有限公司 | 基于人眼及行车轨迹特征的疲劳驾驶检测系统及方法 |
Cited By (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107427664A (zh) * | 2015-02-05 | 2017-12-01 | 迈柯唯简易股份公司 | 对非视觉功能具有最佳刺激的照明设备 |
CN107427664B (zh) * | 2015-02-05 | 2021-03-12 | 迈柯唯简易股份公司 | 对非视觉功能具有最佳刺激的照明设备 |
CN106485878A (zh) * | 2015-08-27 | 2017-03-08 | 昆山研达电脑科技有限公司 | 疲劳驾驶提醒装置及方法 |
WO2018010270A1 (zh) * | 2016-07-15 | 2018-01-18 | 宇龙计算机通信科技(深圳)有限公司 | 提醒方法、智能眼镜及车载系统 |
CN106200004A (zh) * | 2016-07-15 | 2016-12-07 | 宇龙计算机通信科技(深圳)有限公司 | 提醒方法、智能眼镜及车载系统 |
CN109983517B (zh) * | 2016-11-21 | 2021-06-15 | 皇家飞利浦有限公司 | 使用识别信号的远程控制设备和用户设备 |
CN109983517A (zh) * | 2016-11-21 | 2019-07-05 | 皇家飞利浦有限公司 | 使用识别信号的远程控制设备和用户设备 |
CN106889990A (zh) * | 2017-01-10 | 2017-06-27 | 闽南师范大学 | 一种基于蓝牙传输的驾驶员疲劳状态检测系统及方法 |
CN107015497A (zh) * | 2017-01-10 | 2017-08-04 | 闽南师范大学 | 一种基于无线传输的学习者疲劳状态检测系统及方法 |
CN110709903A (zh) * | 2017-05-30 | 2020-01-17 | 松下知识产权经营株式会社 | 睡意推测装置、觉醒引导控制装置、以及觉醒引导系统 |
CN110709903B (zh) * | 2017-05-30 | 2021-08-06 | 松下知识产权经营株式会社 | 觉醒引导控制装置以及觉醒引导系统 |
CN107802274A (zh) * | 2017-11-23 | 2018-03-16 | 山东科技大学 | 基于生理指标的疲劳度检测方法及系统 |
CN110448312A (zh) * | 2018-05-07 | 2019-11-15 | 欧姆龙株式会社 | 数据处理装置、监视系统、唤醒系统、数据处理方法 |
CN109620221A (zh) * | 2018-10-16 | 2019-04-16 | 平安科技(深圳)有限公司 | 基于智能眼镜的疲劳提醒方法、装置、智能眼镜及介质 |
CN109549625A (zh) * | 2018-11-13 | 2019-04-02 | 陕西科技大学 | 采集驾驶员眼动数据的后视镜及利用该后视镜的疲劳监测系统 |
US11300446B2 (en) | 2019-03-29 | 2022-04-12 | Beijing Boe Optoelectronics Technology Co., Ltd. | Optical detection method and optical detection apparatus for fatigue state, and optical detection device |
CN111754728A (zh) * | 2019-03-29 | 2020-10-09 | 京东方科技集团股份有限公司 | 检测组件、检测装置、疲劳驾驶的检测方法 |
CN110477927A (zh) * | 2019-09-18 | 2019-11-22 | 歌尔科技有限公司 | 一种主动眨眼检测方法、装置、设备及可读存储介质 |
CN113095108A (zh) * | 2019-12-23 | 2021-07-09 | 中移物联网有限公司 | 一种疲劳驾驶检测方法及装置 |
CN113095108B (zh) * | 2019-12-23 | 2023-11-10 | 中移物联网有限公司 | 一种疲劳驾驶检测方法及装置 |
CN111281403A (zh) * | 2020-03-09 | 2020-06-16 | 西安交通大学 | 一种基于嵌入式设备的细粒度人体疲劳检测方法及设备 |
CN111281403B (zh) * | 2020-03-09 | 2021-08-13 | 西安交通大学 | 一种基于嵌入式设备的细粒度人体疲劳检测方法及设备 |
CN113143299A (zh) * | 2021-04-26 | 2021-07-23 | 广东小天才科技有限公司 | 一种视力监测方法、系统、眼镜及头戴智能设备 |
CN113317792A (zh) * | 2021-06-02 | 2021-08-31 | 樊天放 | 一种基于双眼目光矢量分析的注意力检测系统及方法 |
CN116439710A (zh) * | 2023-04-11 | 2023-07-18 | 中国人民解放军海军特色医学中心 | 一种基于生理信号的舰船驾驶员疲劳检测系统及方法 |
CN116439710B (zh) * | 2023-04-11 | 2023-10-20 | 中国人民解放军海军特色医学中心 | 一种基于生理信号的舰船驾驶员疲劳检测系统及方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104757981A (zh) | 一种高灵敏收发一体红外检测驾驶员疲劳度的方法及装置 | |
Chang et al. | Design and implementation of a drowsiness-fatigue-detection system based on wearable smart glasses to increase road safety | |
CN106691443B (zh) | 基于脑电的穿戴式司机防疲劳智能监测预警系统 | |
CN105336105B (zh) | 一种预防疲劳驾驶的方法、智能设备及系统 | |
CN105869356B (zh) | 一种铁路司机工作状态的评估干预系统及方法 | |
CN101968918B (zh) | 反馈式疲劳检测系统 | |
CN104146722B (zh) | 一种基于头部信号的驾驶疲劳检测分级预警方法 | |
EP3463051A1 (fr) | Dispositif connecté de suivi comportemental d'un individu et permettant la détection et/ou la prévention d'une anomalie | |
CN104142583A (zh) | 一种具有眨眼检测功能的智能眼镜及实现方法 | |
CN103956028A (zh) | 一种汽车多元驾驶安全防护方法 | |
CN104799826A (zh) | 一种智能安康服务系统及报警可靠检测方法 | |
CN109717853A (zh) | 基于树莓派的车载驾驶员疲劳检测系统 | |
CN105049596B (zh) | 一种移动终端及其疲劳状态检测方法 | |
CN105799509A (zh) | 一种防疲劳驾驶系统及方法 | |
CN103606245A (zh) | 基于蓝牙脑电耳机和安卓手机的疲劳驾驶检测预警系统 | |
CN110334592A (zh) | 一种司机异常行为监测和安全保障系统及其方法 | |
CN103198618A (zh) | 一种能够预警疲劳驾驶的手机及预警方法 | |
CN105662407A (zh) | 一种基于表面肌电技术的驾驶员疲劳检测系统 | |
CN110154757A (zh) | 公交车多方位安全驾驶保障方法 | |
CN112069949A (zh) | 一种基于人工智能的婴儿睡眠监测系统及监测方法 | |
CN102568158A (zh) | 汽车疲劳驾驶警示系统 | |
Panwar et al. | DDNet-A deep learning approach to detect driver distraction and drowsiness | |
Dua et al. | Drowsiness detection and alert system | |
CN105232063B (zh) | 用户心理健康检测方法及智能终端 | |
CN206301462U (zh) | 汽车驾驶安全预警车载智能终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
EXSB | Decision made by sipo to initiate substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20150708 |