CN104751149A - 基于电子检测的人员疲惫度判定平台 - Google Patents

基于电子检测的人员疲惫度判定平台 Download PDF

Info

Publication number
CN104751149A
CN104751149A CN201510182550.4A CN201510182550A CN104751149A CN 104751149 A CN104751149 A CN 104751149A CN 201510182550 A CN201510182550 A CN 201510182550A CN 104751149 A CN104751149 A CN 104751149A
Authority
CN
China
Prior art keywords
image
mouth
personnel
subset
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510182550.4A
Other languages
English (en)
Other versions
CN104751149B (zh
Inventor
张小磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
ROPT TECHNOLOGY GROUP Co.,Ltd.
Original Assignee
张小磊
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 张小磊 filed Critical 张小磊
Priority to CN201510182550.4A priority Critical patent/CN104751149B/zh
Publication of CN104751149A publication Critical patent/CN104751149A/zh
Application granted granted Critical
Publication of CN104751149B publication Critical patent/CN104751149B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明涉及一种基于电子检测的人员疲惫度判定平台,包括彩色摄像设备、嘴部特征检测设备和嵌入式处理设备,所述彩色摄像设备用于对待检人员的面部进行摄像以获得面部图像,所述嘴部特征检测设备与彩色摄像设备连接,用于对所述面部图像执行图像处理,以获得嘴部特征,所述嵌入式处理设备与所述彩色摄像设备和所述嘴部特征检测设备分别连接,基于所述嘴部特征确定待检人员的疲惫度。通过本发明,能够基于对待检人员的电子检测结果自动、高效、准确地确定待检人员的疲劳状态。

Description

基于电子检测的人员疲惫度判定平台
技术领域
本发明涉及电子识别领域,尤其涉及一种基于电子检测的人员疲惫度判定平台。
背景技术
在一些需要人为操控的高危行业,或者在一些需要重点监视的全时段监控行业,需要工作人员一直保持着高度的注意力集中,如果稍有走神,很容易造成不可想象的后果,例如,造成巨大的人身伤亡和经济损失,或者放过重要的犯罪嫌疑人等。这些行业比较常见,例如各种交通工具的驾驶员,或者各种监控场所的监控人员。
为了保障工作人员在上述行业的工作状态,需要一种人员状态电子检测机制,在工作人员处于清醒时不进行任何操作,在工作人员由于长时间作业而进入疲惫或睡眠状态时,及时将这些疲惫或睡眠状态检测出来,并报警或者上报给有关管理部门,以提醒这些工作人员,甚至另派其他工作人员进行替换。
然而,现有技术中的人员状态电子检测机制的都存在一些固有的缺陷,例如,基于眼部特征的电子检测技术由于容易受到眉毛和睫毛的干扰,眼部区域难以定位和提取,且无法对戴眼镜的被测人员进行检测,而基于头部特征的电子检测技术,因为头部疲劳特征不太明显,疲劳检测的准确率和鲁棒性都比较差。
因此,需要一种新的基于电子检测的人员疲惫度判定方案,能够替代存在缺陷的现有电子检测方案,提高电子检测系统的检测性能,包括提高电子检测系统的可靠性、准确性和鲁棒性,为相关管理部门和被检测人员本身提供更有价值的参考数据。
发明内容
为了解决上述问题,本发明提供了一种基于电子检测的人员疲惫度判定平台,采用基于视频识别的技术来执行疲惫度判定,首先对待检人员的面部进行拍摄,随后从各帧面部图像中提取容易提取、位置较为稳定的嘴部特征,基于嘴部特征准确地确定待检人员的当前状态,另外,还采用了随动机制以保障检测平台与待检人员面部的相对位置,保持检测的稳定性能。
根据本发明的一方面,提供了一种基于电子检测的人员疲惫度判定平台,所述判定平台包括彩色摄像设备、嘴部特征检测设备和嵌入式处理设备,所述彩色摄像设备用于对待检人员的面部进行摄像以获得面部图像,所述嘴部特征检测设备与彩色摄像设备连接,用于对所述面部图像执行图像处理,以获得嘴部特征,所述嵌入式处理设备与所述彩色摄像设备和所述嘴部特征检测设备分别连接,基于所述嘴部特征确定待检人员的疲惫度。
更具体地,在所述基于电子检测的人员疲惫度判定平台中,还包括:红外线传感设备,设置在待检人员的对面,检测红外线传感设备到待检人员的面部的距离并作为面部红外距离输出;驱动设备,与所述嵌入式处理设备连接,包括弹簧机构和电动机,所述弹簧机构是所述判定平台的支撑点,所述电动机与所述嵌入式处理设备连接,用于接收所述嵌入式处理设备发送的驱动控制信号,并根据所述驱动控制信号控制所述弹簧机构以驱动所述判定平台在垂直于待检人员的面部的方向前进或后退;供电设备,包括太阳能供电器件、蓄电池、切换开关和电压转换器,所述切换开关与所述太阳能供电器件和所述蓄电池分别连接,根据蓄电池剩余电量决定是否切换到所述太阳能供电器件以由所述太阳能供电器件供电,所述电压转换器与所述切换开关连接,以将通过切换开关输入的5V电压转换为3.3V电压;静态存储设备,用于预先存储颜色特征值阈值、开合度阈值、第一百分比阈值和第二百分比阈值,所述第一百分比阈值大于所述第二百分比阈值;无线通信设备,用于与所述嵌入式处理设备和所述彩色摄像设备分别连接,包括:图像复合子设备,与所述嵌入式处理设备和所述彩色摄像设备分别连接,用于将与睡眠状态、疲惫状态或清醒状态对应的提醒文字复合到对应的定时时间内的各帧面部图像上以形成各帧复合图像;图像压缩子设备,与所述图像复合子设备连接,用于基于MPEG-4压缩标准对所述各帧复合图像进行图像压缩以获得各帧压缩复合图像;无线收发子设备,与所述图像压缩子设备连接,用于将所述各帧压缩复合图像无线发送到待检人员所在单位局域网和待检人员所在单位负责人的移动终端;所述彩色摄像设备用于以每秒30帧的帧速对待检人员的面部进行摄像以获得多帧面部图像;所述嘴部特征检测设备包括:对比度增强子设备,与所述彩色摄像设备连接,用于将每一帧面部图像执行对比度增强处理,以获得增强面部图像;小波滤波子设备,与所述对比度增强子设备连接,用于基于哈尔小波滤波器对所述增强面部图像执行滤波处理,以获得滤波面部图像;颜色空间转换子设备,与所述小波滤波子设备连接,用于将所述滤波面部图像转换为RGB颜色空间下的图像,获得RGB面部图像;嘴部区域分割子设备,与所述颜色空间转换子设备和所述静态存储设备分别连接,对于所述RGB面部图像的每一个像素,分别计算其RGB三颜色通道的像素值,获得R像素值、G像素值和B像素值,将G像素值减去B像素值以获得第一差值,将R像素值减去G像素值以获得第二差值,将第一差值除以第二差值后的除值取绝对值以获得颜色特征值,当所述颜色特征值小于等于所述颜色特征值阈值时,则认定该像素为嘴部像素,否则则认定该像素为非嘴部像素,将所述RGB面部图像中的所有嘴部像素组成嘴部图像;嘴部图像预处理子设备,连接所述嘴部区域分割子设备,用于对所述嘴部图像执行区域连通操作,以获得连通的嘴部图案;嘴部开合度确定子设备,与所述嘴部图像预处理子设备连接,基于所述连通的嘴部图案计算所述连通的嘴部图案的高度和宽度,将所述高度除以所述宽度以获得嘴部开合度;所述嵌入式处理设备与所述嘴部特征检测设备和所述静态存储设备分别连接以接收每一帧面部图像的嘴部开合度,当一帧面部图像的嘴部开合度大于等于所述开合度阈值时,则判断该帧面部图像为打哈欠图像,所述嵌入式处理设备基于内置的定时器计算每段定时时间内打哈欠图像帧数占据总帧数的百分比以作为疲倦百分比,当所述疲倦百分比大于等于所述第一百分比阈值时,则判定该段定时时间内待检人员为睡眠状态,当所述疲倦百分比小于所述第一百分比阈值且大于等于所述第二百分比阈值时,则判定该段定时时间内待检人员为疲惫状态,当所述疲倦百分比小于所述第二百分比阈值时,则判定该段定时时间内待检人员为清醒状态;其中,所述嵌入式处理设备还与所述红外线传感设备和所述驱动设备分别连接,根据所述面部红外距离调整所述驱动控制信号,以控制所述判定平台始终与待检人员间隔预设固定距离。
更具体地,在所述基于电子检测的人员疲惫度判定平台中,还包括:输入键盘,用于根据用户的操作,接收用户输入的颜色特征值阈值、开合度阈值、第一百分比阈值和第二百分比阈值。
更具体地,在所述基于电子检测的人员疲惫度判定平台中:所述静态存储设备与所述输入键盘连接,以接收并存储所述颜色特征值阈值、所述开合度阈值、所述第一百分比阈值和所述第二百分比阈值。
更具体地,在所述基于电子检测的人员疲惫度判定平台中:所述对比度增强子设备、所述小波滤波子设备、所述颜色空间转换子设备、所述嘴部区域分割子设备、所述嘴部图像预处理子设备和所述嘴部开合度确定子设备分别采用不同的FPGA芯片实现,所述分别采用的FPGA芯片均为XILINX公司的XC3S1000FT256。
更具体地,在所述基于电子检测的人员疲惫度判定平台中:所述嘴部开合度确定子设备为单片机AT89C51。
更具体地,在所述基于电子检测的人员疲惫度判定平台中:所述开合度阈值取值为0.68,所述第一百分比阈值取值为81%,所述第二百分比阈值取值为56%。
更具体地,在所述基于电子检测的人员疲惫度判定平台中:所述彩色摄像设备还包括辅助光源,用于为所述彩色摄像设备的摄像提供照明辅助光,所述照明辅助光的强度与所述辅助光源周围环境的光线亮度成反比。
附图说明
以下将结合附图对本发明的实施方案进行描述,其中:
图1为根据本发明实施方案示出的基于电子检测的人员疲惫度判定平台的结构方框图。
图2为根据本发明实施方案示出的基于电子检测的人员疲惫度判定平台的驱动设备的结构方框图。
具体实施方式
下面将参照附图对本发明的基于电子检测的人员疲惫度判定平台的实施方案进行详细说明。
人员状态的检测是电子检测中的一项重要分支。通过对人员状态的检测,能够判断待测人员当前的状态是清醒还是疲倦甚至是睡眠状态,从而在疲倦或睡眠状态下及时对相关管理部门进行报警,避免从事危险行业的工作人员因为工作状态而导致的事故发生。例如,对于驾驶车辆的驾驶员,对于盯看监视器的监控人员等,都有检测人员状态的必要。
现有技术中的人员状态检测的技术方案,虽然都是采用了电子检测的手段,替换了费时费力的人工检测手段,但所使用的电子检测手段鲁棒性、稳定性和准确性方面或多或少存在缺陷,影响最后数据的价值。
为了克服上述不足,本发明搭建了一种基于电子检测的人员疲惫度判定平台,能够替代原有的存在内在缺陷的各项电子检测机制,通过高精度的嘴部特征分析以及有效的随动机构,减少判断误差,提高判定平台的各项性能。
图1为根据本发明实施方案示出的基于电子检测的人员疲惫度判定平台的结构方框图,所述判定平台包括彩色摄像设备1、嘴部特征检测设备2和嵌入式处理设备3,所述嵌入式处理设备3与所述彩色摄像设备1和所述嘴部特征检测设备2分别连接,所述彩色摄像设备1和所述嘴部特征检测设备2连接。
其中,所述彩色摄像设备1用于对待检人员的面部进行摄像以获得面部图像,所述嘴部特征检测设备2用于对所述面部图像执行图像处理,以获得嘴部特征,所述嵌入式处理设备3用于基于所述嘴部特征确定待检人员的疲惫度。
接着,继续对本发明的基于电子检测的人员疲惫度判定平台的具体结构进行进一步的说明。
所述判定平台还包括:红外线传感设备,设置在待检人员的对面,检测红外线传感设备到待检人员的面部的距离并作为面部红外距离输出。
如图2所示,所述判定平台还包括:驱动设备4,与所述嵌入式处理设备3连接,包括弹簧机构41和电动机42,所述弹簧机构41是所述判定平台的支撑点,所述电动机42与所述嵌入式处理设备3连接,用于接收所述嵌入式处理设备3发送的驱动控制信号,并根据所述驱动控制信号控制所述弹簧机构41以驱动所述判定平台在垂直于待检人员的面部的方向前进或后退。
所述判定平台还包括:供电设备,包括太阳能供电器件、蓄电池、切换开关和电压转换器,所述切换开关与所述太阳能供电器件和所述蓄电池分别连接,根据蓄电池剩余电量决定是否切换到所述太阳能供电器件以由所述太阳能供电器件供电,所述电压转换器与所述切换开关连接,以将通过切换开关输入的5V电压转换为3.3V电压。
所述判定平台还包括:静态存储设备,用于预先存储颜色特征值阈值、开合度阈值、第一百分比阈值和第二百分比阈值,所述第一百分比阈值大于所述第二百分比阈值。
所述判定平台还包括:无线通信设备,用于与所述嵌入式处理设备3和所述彩色摄像设备1分别连接,所述无线通信设备包括以下部件:
图像复合子设备,与所述嵌入式处理设备3和所述彩色摄像设备1分别连接,用于将与睡眠状态、疲惫状态或清醒状态对应的提醒文字复合到对应的定时时间内的各帧面部图像上以形成各帧复合图像;
图像压缩子设备,与所述图像复合子设备连接,用于基于MPEG-4压缩标准对所述各帧复合图像进行图像压缩以获得各帧压缩复合图像;
无线收发子设备,与所述图像压缩子设备连接,用于将所述各帧压缩复合图像无线发送到待检人员所在单位局域网和待检人员所在单位负责人的移动终端。
所述彩色摄像设备1用于以每秒30帧的帧速对待检人员的面部进行摄像以获得多帧面部图像,可采用高清分辨率对面部图像进行拍摄,例如使用1920×1080的分辨率。
所述嘴部特征检测设备2包括以下部件:
对比度增强子设备,与所述彩色摄像设备1连接,用于将每一帧面部图像执行对比度增强处理,以获得增强面部图像;
小波滤波子设备,与所述对比度增强子设备连接,用于基于哈尔小波滤波器对所述增强面部图像执行滤波处理,以获得滤波面部图像;
颜色空间转换子设备,与所述小波滤波子设备连接,用于将所述滤波面部图像转换为RGB颜色空间下的图像,获得RGB面部图像;
嘴部区域分割子设备,与所述颜色空间转换子设备和所述静态存储设备分别连接,对于所述RGB面部图像的每一个像素,分别计算其RGB三颜色通道的像素值,获得R像素值、G像素值和B像素值,将G像素值减去B像素值以获得第一差值,将R像素值减去G像素值以获得第二差值,将第一差值除以第二差值后的除值取绝对值以获得颜色特征值,当所述颜色特征值小于等于所述颜色特征值阈值时,则认定该像素为嘴部像素,否则则认定该像素为非嘴部像素,将所述RGB面部图像中的所有嘴部像素组成嘴部图像;
嘴部图像预处理子设备,连接所述嘴部区域分割子设备,用于对所述嘴部图像执行区域连通操作,以获得连通的嘴部图案;
嘴部开合度确定子设备,与所述嘴部图像预处理子设备连接,基于所述连通的嘴部图案计算所述连通的嘴部图案的高度和宽度,将所述高度除以所述宽度以获得嘴部开合度。
所述嵌入式处理设备3与所述嘴部特征检测设备2和所述静态存储设备分别连接以接收每一帧面部图像的嘴部开合度,当一帧面部图像的嘴部开合度大于等于所述开合度阈值时,则判断该帧面部图像为打哈欠图像,所述嵌入式处理设备基于内置的定时器计算每段定时时间内打哈欠图像帧数占据总帧数的百分比以作为疲倦百分比,当所述疲倦百分比大于等于所述第一百分比阈值时,则判定该段定时时间内待检人员为睡眠状态,当所述疲倦百分比小于所述第一百分比阈值且大于等于所述第二百分比阈值时,则判定该段定时时间内待检人员为疲惫状态,当所述疲倦百分比小于所述第二百分比阈值时,则判定该段定时时间内待检人员为清醒状态。
其中,所述嵌入式处理设备3还与所述红外线传感设备和所述驱动设备4分别连接,根据所述面部红外距离调整所述驱动控制信号,以控制所述判定平台始终与待检人员间隔预设固定距离。
可选地,在所述人员疲惫度判定平台中,还包括:输入键盘,用于根据用户的操作,接收用户输入的颜色特征值阈值、开合度阈值、第一百分比阈值和第二百分比阈值;所述静态存储设备与所述输入键盘连接,以接收并存储所述颜色特征值阈值、所述开合度阈值、所述第一百分比阈值和所述第二百分比阈值;所述对比度增强子设备、所述小波滤波子设备、所述颜色空间转换子设备、所述嘴部区域分割子设备、所述嘴部图像预处理子设备和所述嘴部开合度确定子设备可以分别采用不同的FPGA芯片实现,所述分别采用的FPGA芯片均为XILINX公司的XC3S1000FT256;所述嘴部开合度确定子设备为单片机AT89C51;根据实验室的多次验证,所述开合度阈值取值为0.68,所述第一百分比阈值取值为81%,所述第二百分比阈值取值为56%;以及,所述彩色摄像设备1还可以包括辅助光源,用于为所述彩色摄像设备1的摄像提供照明辅助光,所述照明辅助光的强度与所述辅助光源周围环境的光线亮度成反比。
另外,FPGA(Field-Programmable Gate Array),即现场可编程门阵列,他是在PAL、GAL、CPLD等可编程器件的基础上进一步发展的产物,是作为专用集成电路(ASIC)领域中的一种半定制电路而出现的,他解决了定制电路的不足,也克服了原有可编程器件门电路数有限的缺点。
早在1980年代中期,FPGA已经在PLD设备中扎根。CPLD和FPGA包括了一些相对大数量的可编辑逻辑单元。CPLD逻辑门的密度在几千到几万个逻辑单元之间,而FPGA通常是在几万到几百万。CPLD和FPGA的主要区别是他们的系统结构。CPLD是一个有点限制性的结构。这个结构由一个或者多个可编辑的结果之和的逻辑组列和一些相对少量的锁定的寄存器组成。这样的结果是缺乏编辑灵活性,但是却有可以预计的延迟时间和逻辑单元对连接单元高比率的优点。而FPGA却是有很多的连接单元,这样虽然让他可以更加灵活的编辑,但是结构却复杂的多。CPLD和FPGA另外一个区别是大多数的FPGA含有高层次的内置模块(比如加法器和乘法器)和内置的记忆体。因此一个有关的重要区别是很多新的FPGA支持完全的或者部分的系统内重新配置。允许他们的设计随着系统升级或者动态重新配置而改变。一些FPGA可以让设备的一部分重新编辑而其他部分继续正常运行。
FPGA采用了逻辑单元阵列LCA(Logic Cell Array)这样一个概念,内部包括可配置逻辑模块CLB(Configurable Logic Block)、输入输出模块IOB(Input Output Block)和内部连线(Interconnect)三个部分。
现场可编程门阵列(FPGA)是可编程器件,与传统逻辑电路和门阵列(如PAL,GAL及CPLD器件)相比,FPGA具有不同的结构。FPGA利用小型查找表(16×1RAM)来实现组合逻辑,每个查找表连接到一个D触发器的输入端,触发器再来驱动其他逻辑电路或驱动I/O,由此构成了既可实现组合逻辑功能又可实现时序逻辑功能的基本逻辑单元模块,这些模块间利用金属连线互相连接或连接到I/O模块。
采用本发明的基于电子检测的人员疲惫度判定平台,针对现有的各种电子检测机制综合检测性能不高、提供的检测数据不准确的技术问题,采用高精度的嘴部特征提取模式以及可靠的电子随动技术保证检测平台的可靠性和准确性,使得提供的待检人员的状态数据更具有参考价值,从而有效地避免事故的发生。
可以理解的是,虽然本发明已以较佳实施例披露如上,然而上述实施例并非用以限定本发明。对于任何熟悉本领域的技术人员而言,在不脱离本发明技术方案范围情况下,都可利用上述揭示的技术内容对本发明技术方案做出许多可能的变动和修饰,或修改为等同变化的等效实施例。因此,凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所做的任何简单修改、等同变化及修饰,均仍属于本发明技术方案保护的范围内。

Claims (8)

1.一种基于电子检测的人员疲惫度判定平台,其特征在于,所述判定平台包括彩色摄像设备、嘴部特征检测设备和嵌入式处理设备,所述彩色摄像设备用于对待检人员的面部进行摄像以获得面部图像,所述嘴部特征检测设备与彩色摄像设备连接,用于对所述面部图像执行图像处理,以获得嘴部特征,所述嵌入式处理设备与所述彩色摄像设备和所述嘴部特征检测设备分别连接,基于所述嘴部特征确定待检人员的疲惫度。
2.如权利要求1所述的基于电子检测的人员疲惫度判定平台,其特征在于,所述判定平台还包括:
红外线传感设备,设置在待检人员的对面,检测红外线传感设备到待检人员的面部的距离并作为面部红外距离输出;
驱动设备,与所述嵌入式处理设备连接,包括弹簧机构和电动机,所述弹簧机构是所述判定平台的支撑点,所述电动机与所述嵌入式处理设备连接,用于接收所述嵌入式处理设备发送的驱动控制信号,并根据所述驱动控制信号控制所述弹簧机构以驱动所述判定平台在垂直于待检人员的面部的方向前进或后退;
供电设备,包括太阳能供电器件、蓄电池、切换开关和电压转换器,所述切换开关与所述太阳能供电器件和所述蓄电池分别连接,根据蓄电池剩余电量决定是否切换到所述太阳能供电器件以由所述太阳能供电器件供电,所述电压转换器与所述切换开关连接,以将通过切换开关输入的5V电压转换为3.3V电压;
静态存储设备,用于预先存储颜色特征值阈值、开合度阈值、第一百分比阈值和第二百分比阈值,所述第一百分比阈值大于所述第二百分比阈值;
无线通信设备,用于与所述嵌入式处理设备和所述彩色摄像设备分别连接,包括:
图像复合子设备,与所述嵌入式处理设备和所述彩色摄像设备分别连接,用于将与睡眠状态、疲惫状态或清醒状态对应的提醒文字复合到对应的定时时间内的各帧面部图像上以形成各帧复合图像;
图像压缩子设备,与所述图像复合子设备连接,用于基于MPEG-4压缩标准对所述各帧复合图像进行图像压缩以获得各帧压缩复合图像;
无线收发子设备,与所述图像压缩子设备连接,用于将所述各帧压缩复合图像无线发送到待检人员所在单位局域网和待检人员所在单位负责人的移动终端;
所述彩色摄像设备用于以每秒30帧的帧速对待检人员的面部进行摄像以获得多帧面部图像;
所述嘴部特征检测设备包括:
对比度增强子设备,与所述彩色摄像设备连接,用于将每一帧面部图像执行对比度增强处理,以获得增强面部图像;
小波滤波子设备,与所述对比度增强子设备连接,用于基于哈尔小波滤波器对所述增强面部图像执行滤波处理,以获得滤波面部图像;
颜色空间转换子设备,与所述小波滤波子设备连接,用于将所述滤波面部图像转换为RGB颜色空间下的图像,获得RGB面部图像;
嘴部区域分割子设备,与所述颜色空间转换子设备和所述静态存储设备分别连接,对于所述RGB面部图像的每一个像素,分别计算其RGB三颜色通道的像素值,获得R像素值、G像素值和B像素值,将G像素值减去B像素值以获得第一差值,将R像素值减去G像素值以获得第二差值,将第一差值除以第二差值后的除值取绝对值以获得颜色特征值,当所述颜色特征值小于等于所述颜色特征值阈值时,则认定该像素为嘴部像素,否则则认定该像素为非嘴部像素,将所述RGB面部图像中的所有嘴部像素组成嘴部图像;
嘴部图像预处理子设备,连接所述嘴部区域分割子设备,用于对所述嘴部图像执行区域连通操作,以获得连通的嘴部图案;
嘴部开合度确定子设备,与所述嘴部图像预处理子设备连接,基于所述连通的嘴部图案计算所述连通的嘴部图案的高度和宽度,将所述高度除以所述宽度以获得嘴部开合度;
所述嵌入式处理设备与所述嘴部特征检测设备和所述静态存储设备分别连接以接收每一帧面部图像的嘴部开合度,当一帧面部图像的嘴部开合度大于等于所述开合度阈值时,则判断该帧面部图像为打哈欠图像,所述嵌入式处理设备基于内置的定时器计算每段定时时间内打哈欠图像帧数占据总帧数的百分比以作为疲倦百分比,当所述疲倦百分比大于等于所述第一百分比阈值时,则判定该段定时时间内待检人员为睡眠状态,当所述疲倦百分比小于所述第一百分比阈值且大于等于所述第二百分比阈值时,则判定该段定时时间内待检人员为疲惫状态,当所述疲倦百分比小于所述第二百分比阈值时,则判定该段定时时间内待检人员为清醒状态;
其中,所述嵌入式处理设备还与所述红外线传感设备和所述驱动设备分别连接,根据所述面部红外距离调整所述驱动控制信号,以控制所述判定平台始终与待检人员间隔预设固定距离。
3.如权利要求2所述的基于电子检测的人员疲惫度判定平台,其特征在于,所述判定平台还包括:
输入键盘,用于根据用户的操作,接收用户输入的颜色特征值阈值、开合度阈值、第一百分比阈值和第二百分比阈值。
4.如权利要求3所述的基于电子检测的人员疲惫度判定平台,其特征在于:
所述静态存储设备与所述输入键盘连接,以接收并存储所述颜色特征值阈值、所述开合度阈值、所述第一百分比阈值和所述第二百分比阈值。
5.如权利要求2所述的基于电子检测的人员疲惫度判定平台,其特征在于:
所述对比度增强子设备、所述小波滤波子设备、所述颜色空间转换子设备、所述嘴部区域分割子设备、所述嘴部图像预处理子设备和所述嘴部开合度确定子设备分别采用不同的FPGA芯片实现,所述分别采用的FPGA芯片均为XILINX公司的XC3S1000FT256。
6.如权利要求2所述的基于电子检测的人员疲惫度判定平台,其特征在于:
所述嘴部开合度确定子设备为单片机AT89C51。
7.如权利要求2所述的基于电子检测的人员疲惫度判定平台,其特征在于:
所述开合度阈值取值为0.68,所述第一百分比阈值取值为81%,所述第二百分比阈值取值为56%。
8.如权利要求2所述的基于电子检测的人员疲惫度判定平台,其特征在于:
所述彩色摄像设备还包括辅助光源,用于为所述彩色摄像设备的摄像提供照明辅助光,所述照明辅助光的强度与所述辅助光源周围环境的光线亮度成反比。
CN201510182550.4A 2015-04-16 2015-04-16 基于电子检测的人员疲惫度判定平台 Active CN104751149B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510182550.4A CN104751149B (zh) 2015-04-16 2015-04-16 基于电子检测的人员疲惫度判定平台

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510182550.4A CN104751149B (zh) 2015-04-16 2015-04-16 基于电子检测的人员疲惫度判定平台

Publications (2)

Publication Number Publication Date
CN104751149A true CN104751149A (zh) 2015-07-01
CN104751149B CN104751149B (zh) 2018-06-12

Family

ID=53590806

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510182550.4A Active CN104751149B (zh) 2015-04-16 2015-04-16 基于电子检测的人员疲惫度判定平台

Country Status (1)

Country Link
CN (1) CN104751149B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106205057A (zh) * 2016-09-21 2016-12-07 成都创慧科达科技有限公司 一种基于ZigBee技术的辅助驾驶系统及方法
CN109271875A (zh) * 2018-08-24 2019-01-25 中国人民解放军火箭军工程大学 一种基于眉部和眼部关键点信息的疲劳检测方法
CN110636465A (zh) * 2019-04-03 2019-12-31 靳爱丛 局域网信息发送平台
CN114690909A (zh) * 2022-06-01 2022-07-01 润芯微科技(江苏)有限公司 一种ai视觉自适应的方法、装置、系统、计算机可读介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070286457A1 (en) * 2006-06-13 2007-12-13 Hammoud Riad I Dynamic eye tracking system
CN101090482A (zh) * 2006-06-13 2007-12-19 唐琎 一种基于图象处理和信息融合技术的驾驶员疲劳监测系统及方法
CN102436715A (zh) * 2011-11-25 2012-05-02 大连海创高科信息技术有限公司 疲劳驾驶检测方法
CN202472863U (zh) * 2010-12-31 2012-10-03 北京星河易达科技有限公司 基于图像信息综合评判的驾驶员疲劳监测网络系统

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070286457A1 (en) * 2006-06-13 2007-12-13 Hammoud Riad I Dynamic eye tracking system
CN101090482A (zh) * 2006-06-13 2007-12-19 唐琎 一种基于图象处理和信息融合技术的驾驶员疲劳监测系统及方法
CN202472863U (zh) * 2010-12-31 2012-10-03 北京星河易达科技有限公司 基于图像信息综合评判的驾驶员疲劳监测网络系统
CN102436715A (zh) * 2011-11-25 2012-05-02 大连海创高科信息技术有限公司 疲劳驾驶检测方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张志文: ""唇部检测算法的研究与实现"", 《中国优秀硕士学位论文全文数据库 信息科技辑》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106205057A (zh) * 2016-09-21 2016-12-07 成都创慧科达科技有限公司 一种基于ZigBee技术的辅助驾驶系统及方法
CN109271875A (zh) * 2018-08-24 2019-01-25 中国人民解放军火箭军工程大学 一种基于眉部和眼部关键点信息的疲劳检测方法
CN109271875B (zh) * 2018-08-24 2019-06-14 中国人民解放军火箭军工程大学 一种基于眉部和眼部关键点信息的疲劳检测方法
CN110636465A (zh) * 2019-04-03 2019-12-31 靳爱丛 局域网信息发送平台
CN110636465B (zh) * 2019-04-03 2020-10-16 浙江艾克米信息科技有限公司 局域网信息发送平台
CN114690909A (zh) * 2022-06-01 2022-07-01 润芯微科技(江苏)有限公司 一种ai视觉自适应的方法、装置、系统、计算机可读介质
CN114690909B (zh) * 2022-06-01 2022-08-16 润芯微科技(江苏)有限公司 一种ai视觉自适应的方法、装置、系统、计算机可读介质

Also Published As

Publication number Publication date
CN104751149B (zh) 2018-06-12

Similar Documents

Publication Publication Date Title
EP3336764B1 (en) Vehicle monitoring method and image acquisition device
CN104751149A (zh) 基于电子检测的人员疲惫度判定平台
CN109416250B (zh) 运输车辆的车厢状态检测方法、车厢状态检测装置及终端
CN106530623A (zh) 一种疲劳驾驶检测装置及检测方法
TW201120814A (en) Method for determining if an input image is a foggy image, method for determining a foggy level of an input image and cleaning method for foggy images
Russell et al. OpenCV based road sign recognition on Zynq
WO2016150593A1 (en) Method for generating a digital record and roadside unit of a road toll system implementing the method
CN103546723A (zh) 一种监控系统及方法
CN103413147A (zh) 一种车牌识别方法和系统
CN105844245A (zh) 一种伪装人脸检测方法及系统
CN105404856B (zh) 一种公交车辆座位占用状态检测方法
CN105184783A (zh) 玻璃缺陷类型识别系统
CN105071836B (zh) 一种基于电力线通信的监狱监控方法
CN108062554A (zh) 一种车辆年检标签颜色的识别方法及装置
CN104298988B (zh) 一种基于视频图像局部特征匹配的财物保护方法
CN105160670A (zh) 一种玻璃缺陷类型识别方法
CN105060052A (zh) 基于图像处理的电梯内暴力事件预警系统
CN105139400A (zh) 基于图像处理的工件缺陷定位系统
CN104883589B (zh) 基于电子检测的视频文件播放平台
CN105513347B (zh) 采用数据通信模式的后车状态实时监控系统
CN106920230B (zh) 一种车门闭合区灰度相近的车门开闭自动检测方法
CN105092591A (zh) 一种基于图像处理的工件缺陷定位方法
CN105181705A (zh) 一种基于多重滤波的陶瓷外观分析方法
CN105151933A (zh) 基于无线通信的电梯可疑人物报警平台
CN109272464A (zh) 一种基于指数运算的低照度视频实时增强方法与装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
CB03 Change of inventor or designer information
CB03 Change of inventor or designer information

Inventor after: Chen Yanyi

Inventor after: Zhang Xiang

Inventor after: Cai Yunlan

Inventor after: Li Renjie

Inventor after: Lu Tianfa

Inventor after: Jiang Wentao

Inventor before: Zhang Xiaolei

TA01 Transfer of patent application right
TA01 Transfer of patent application right

Effective date of registration: 20180516

Address after: 361008 Fujian Xiamen software park three phase 366 Chengyi Street 0006 units

Applicant after: Ropt (Xiamen) Technology Group Co., Ltd.

Address before: 210000 Hong Jing Road, Jiangning District, Nanjing, Jiangsu Province, No. 9

Applicant before: Zhang Xiaolei

GR01 Patent grant
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: 361008, Xiamen Software Park, Fujian Province, three, 0006, Yi Cheng street, unit 366

Patentee after: ROPT TECHNOLOGY GROUP Co.,Ltd.

Address before: 361008, Xiamen Software Park, Fujian Province, three, 0006, Yi Cheng street, unit 366

Patentee before: Roput (Xiamen) Technology Group Co.,Ltd.