CN106725364B - 基于概率统计方法的管制员疲劳检测方法及系统 - Google Patents

基于概率统计方法的管制员疲劳检测方法及系统 Download PDF

Info

Publication number
CN106725364B
CN106725364B CN201611115807.5A CN201611115807A CN106725364B CN 106725364 B CN106725364 B CN 106725364B CN 201611115807 A CN201611115807 A CN 201611115807A CN 106725364 B CN106725364 B CN 106725364B
Authority
CN
China
Prior art keywords
value
controller
fatigue
blood pressure
perc
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611115807.5A
Other languages
English (en)
Other versions
CN106725364A (zh
Inventor
张建平
邹翔
罗启铭
杨晓嘉
张波
高翔
徐祥刚
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Second Research Institute of CAAC
Original Assignee
Second Research Institute of CAAC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Second Research Institute of CAAC filed Critical Second Research Institute of CAAC
Priority to CN201611115807.5A priority Critical patent/CN106725364B/zh
Publication of CN106725364A publication Critical patent/CN106725364A/zh
Application granted granted Critical
Publication of CN106725364B publication Critical patent/CN106725364B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7264Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00Evaluating a particular growth phase or type of persons or animals
    • A61B2503/20Workers

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Biophysics (AREA)
  • General Health & Medical Sciences (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Physiology (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Artificial Intelligence (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Evolutionary Computation (AREA)
  • Signal Processing (AREA)
  • Psychiatry (AREA)
  • Mathematical Physics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Fuzzy Systems (AREA)
  • Cardiology (AREA)
  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明提供了一种基于概率统计方法的管制员疲劳检测方法及系统。方法为:获取管制员的脉搏值和血压值,血压值包括舒张压值和收缩压值;获取基于概率统计方法的疲劳检测模型,将脉搏值、舒张压值和收缩压值输入疲劳检测模型,得到PERCLOS值仿真结果;根据PERCLOS值仿真结果,进行管制员的疲劳检测。本发明基于概率统计方法的管制员疲劳检测方法及系统,采用人体生理指标血压值和脉搏值参数,将血压值和脉搏值参数输入基于概率统计方法建立的疲劳检测模型,得到PERCLOS值仿真结果进行疲劳检测。利用血压值和脉搏值间接反映人的疲劳程度,血压值和脉搏值获取方法简单,易于实现,成本低。

Description

基于概率统计方法的管制员疲劳检测方法及系统
技术领域
本发明涉及航空航天领域,尤其涉及疲劳检测。
背景技术
随着空中交通流量的日益增长,空中交通管制员的工作负荷越来越大,其疲劳程度对空中交通系统安全水平有着重要影响。国际民航组织已经为疲劳风险管理制定了Doc9966规章制度手册。欧美发达国家也先后将针对飞行员的疲劳检测系统或者方法扩展到管制员疲劳检测应用上。中国民航局以国际民航组织Doc9966为指导,也在CCAR-121文件中明确了疲劳风险管理的规则。
现有技术:到目前为止,国内外研究者提出了多种疲劳检测与管理方法和体系。第一种方法,收集大量被测者的问卷表格,用于疲劳判定和预测,研究人员会根据被测者的回答结果结合经验进行打分以确定疲劳程度,这样难免会受到研究者主观判断的影响;第二种方法:有相当一部分正在使用的方法均是通过观察较长时间内(如连续几十天)被测者的表现,从而建立疲劳趋势预测图表,再根据图表来判定在某一段时间内管制员是否疲劳。这样就直接忽略了管制员当前身体状况,可能对检测结果造成一定的影响;第三种方法:当前已有的适用于实时疲劳检测的方法大多采用对面部特征进行采集和识别的方法,这种方法需要高精度视频检测设备随时拍摄管制员,从成本角度分析不具备优势。
第一种方法的不足:受到研究者主观的影响,使对被测者的疲劳判定和预测不准确;第二种方法的不足:不能进行实时检测,根据被测者的一段时间表现来推测某一段时间内该管制员是否疲劳,忽略了当前管制员的身体状况,使疲劳判定和预测不准确;第三种方法的不足:虽然进行了实时监测管制员的疲劳状态,但该方法的实现需要高精度的视频检测设备,成本高,不适用。
因此,现有技术中的缺陷是:常用的方法采用的是直接反应人疲劳程度的参数进行疲劳检测,如:人的面部特征(眨眼闭合程度),需要高精度的视频检测设备,成本高,适用性差,不能对管制员提供有效的疲劳检测。
发明内容
针对上述技术缺陷,本发明提供一种基于概率统计方法的管制员疲劳检测方法及系统,采用人体生理指标血压值和脉搏值参数,将血压值和脉搏值参数输入基于概率统计方法建立的疲劳检测模型,得到PERCLOS值仿真结果进行疲劳检测。利用血压值和脉搏值间接反映人的疲劳程度,且血压值和脉搏值获取方法简单,易于实现,成本低,为管制员提供有效的疲劳检测。
为解决上述技术问题,本发明提供一种基于概率统计方法的管制员疲劳检测方法及系统。
第一方面,本发明提供一种基于概率统计方法的管制员疲劳检测方法,包括:
步骤S1,获取管制员的脉搏值和血压值,所述血压值包括舒张压值和收缩压值;
步骤S2,获取预先基于概率统计方法的疲劳检测模型,将所述脉搏值、所述舒张压值和所述收缩压值输入所述疲劳检测模型,得到PERCLOS值仿真结果;
步骤S3,根据所述PERCLOS值仿真结果,进行所述管制员的疲劳检测:
所述PERCLOS值仿真结果大于实验确定的阈值,判定所述管制员处于疲劳状态。
本发明的技术方案为先获取管制员的脉搏值和血压值,所述血压值包括舒张压值和收缩压值;然后获取预先基于概率统计方法的疲劳检测模型,将所述脉搏值、所述舒张压值和所述收缩压值输入所述疲劳检测模型,得到PERCLOS值仿真结果;最后根据所述PERCLOS值仿真结果,进行所述管制员的疲劳检测:所述PERCLOS值仿真结果大于实验确定的阈值,判定所述管制员处于疲劳状态。
本发明基于概率统计方法的管制员疲劳检测方法,采用人体生理指标血压值和脉搏值参数,将血压值和脉搏值参数输入预先基于概率统计方法建立的疲劳检测模型,得到PERCLOS值仿真结果进行管制员的疲劳检测。通常对管制员的疲劳检测都是利用人的面部特征,如,眨眼闭合程度数据(直接反映人疲劳程度的参数),然后计算得到PERCLOS值仿真结果进行疲劳检测判定,但检测人的面部特征需采用精度高的检测设备,实现起来成本高;而本发明中是利用间接反映人的疲劳程度的参数血压值和脉搏值进行疲劳检测,血压值和脉搏值获取方法简单,易于实现,成本低,通过间接参数可直接为管制员提供有效的疲劳检测。
进一步地,建立所述疲劳检测模型,包括:
获得多个管制员的眼睑闭合程度数据,计算得到PERCLOS值测量结果;
根据所述脉搏值、所述舒张压值和所述收缩压值,结合所述PERCLOS值测量结果,计算联合分布函数;
根据所述联合分布函数,计算条件概率分布函数;
根据所述条件概率分布函数,结合疲劳状态下的阈值,计算得到疲劳条件概率。
基于概率统计方法建立疲劳检测模型,就是将多个管制员的脉搏值、舒张压值和收缩压值三个参数,结合对应的多个管制员的眼睑闭合程度数据通过计算,得到PERCLOS值测量结果与三个参数间的关系,确立疲劳条件概率函数关系,该疲劳检测模型是通过大量数据实验得到的,可根据此模型对管制员提供有效的疲劳检测。
进一步地,所述计算得到PERCLOS值测量结果,包括:
从所述眼睑闭合数据中获取所述管制员清醒状态下的上下眼睑最大距离;
将所述眼睑闭合数据除以所述上下眼睑最大距离,得到眼睑闭合程度;
根据所述眼睑闭合程度,计算单位时间内的闭眼时间;
将所述闭眼时间除以所述单位时间得到PERCLOS值测量结果。
PERCLOS值测量结果是卡内基梅隆研究所经过反复实验和论证,提出了度量疲劳/瞌睡的物理量,是Percent Eye Closure的缩写,指在一定的时间内眼睛闭合时所占的时间比例。根据PERCLOS值测量结果,即可判断出管制员的疲劳状态。
进一步地,通过计算单位时间内眼睑闭合程度大于70%或80%的对应的时间段的总和得到所述单位时间内的闭眼时间。
在具体试验中有P70和P80两种测量方式。其中P80被认为最能反映人的疲劳程度,即单位时间内眼睑闭合程度大于80%时,检测效果最好。
进一步地,通过所述管制员佩戴的传感器获得所述管制员的脉搏值和血压值。管制员佩戴传感器,就可以检测到管制员实时的脉搏值和血压值,传感器成本低,获取管制员的脉搏值和血压值的方法简单,易于实现。
第二方面,本发明提供一种基于概率统计方法的管制员疲劳检测系统,包括:
脉搏值和血压值获取模块,用于获取管制员的脉搏值和血压值,所述血压值包括舒张压值和收缩压值;
疲劳检测值输出模块,用于预先获取基于概率统计方法的疲劳检测模型,将所述脉搏值、所述舒张压值和所述收缩压值输入所述疲劳检测模型,得到PERCLOS值仿真结果;
疲劳检测模块,用于根据所述PERCLOS值仿真结果,进行所述管制员的疲劳检测:
所述PERCLOS值仿真结果大于实验确定的阈值,判定所述管制员处于疲劳状态。
本发明的技术方案为先通过脉搏值和血压值获取模块,获取管制员的脉搏值和血压值,所述血压值包括舒张压值和收缩压值;接着通过疲劳检测值输出模块,获取预先基于概率统计方法的疲劳检测模型,将所述脉搏值、所述舒张压值和所述收缩压值输入所述疲劳检测模型,得到PERCLOS值仿真结果;最后通过疲劳检测模块,根据所述PERCLOS值仿真结果,进行所述管制员的疲劳检测:所述PERCLOS值仿真结果大于实验确定的阈值,判定所述管制员处于疲劳状态。
本发明基于概率统计方法的管制员疲劳检测系统,采用人体生理指标血压值和脉搏值参数,将血压值和脉搏值参数输入预先基于概率统计方法建立的疲劳检测模型,得到PERCLOS值仿真结果进行管制员的疲劳检测。通常对管制员的疲劳检测都是利用人的面部特征,如,眨眼闭合程度数据(直接反映人疲劳程度的参数),然后计算得到PERCLOS值仿真结果进行疲劳检测判定,但检测人的面部特征需采用精度高的检测设备,实现起来成本高;而本发明中是利用间接反映人的疲劳程度的参数血压值和脉搏值进行疲劳检测,血压值和脉搏值获取方法简单,易于实现,成本低,通过间接参数可直接为管制员提供有效的疲劳检测。
进一步地,建立所述疲劳检测模型,包括疲劳检测模型建立子模块,用于:
获得多个管制员的眼睑闭合程度数据,计算得到PERCLOS值测量结果;
根据所述脉搏值、所述舒张压值和所述收缩压值,结合所述PERCLOS值测量结果,计算联合分布函数;
根据所述联合分布函数,计算条件概率分布函数;
根据所述条件概率分布函数,结合疲劳状态下的阈值,计算得到疲劳条件概率。
基于概率统计方法建立疲劳检测模型,就是将多个管制员的脉搏值、舒张压值和收缩压值三个参数,结合对应的多个管制员的眼睑闭合程度数据通过计算,得到PERCLOS值测量结果与三个参数间的关系,确立疲劳条件概率函数关系,该疲劳检测模型是通过大量数据实验得到的,可根据此模型对管制员提供有效的疲劳检测。
进一步地,所述计算得到PERCLOS值测量结果,包括疲劳检测值计算子模块,用于:
从所述眼睑闭合数据中获取所述管制员清醒状态下的上下眼睑最大距离;
将所述眼睑闭合数据除以所述上下眼睑最大距离,得到眼睑闭合程度;
根据所述眼睑闭合程度,计算单位时间内的闭眼时间;
将所述闭眼时间除以所述单位时间得到PERCLOS值测量结果。
PERCLOS值测量结果是卡内基梅隆研究所经过反复实验和论证,提出了度量疲劳/瞌睡的物理量,是Percent Eye Closure的缩写,指在一定的时间内眼睛闭合时所占的时间比例。根据PERCLOS值测量结果,即可判断出管制员的疲劳状态。进一步地,所述疲劳检测值计算子模块包括闭眼时间子模块,用于:
通过计算单位时间内眼睑闭合程度大于70%或80%的对应的时间段的总和得到所述单位时间内的闭眼时间。
在具体试验中有P70和P80两种测量方式。其中P80被认为最能反映人的疲劳程度,即单位时间内眼睑闭合程度大于80%时,检测效果最好。
进一步地,所述系统还包括:
脉搏和血压检测模块,用于通过所述管制员佩戴的传感器获得所述管制员的脉搏值和血压值。
管制员佩戴传感器,就可以检测到管制员实时的脉搏值和血压值,传感器成本低,获取管制员的脉搏值和血压值的方法简单,易于实现。
附图说明
为了更清楚地说明本发明具体实施方式或现有技术中的技术方案,下面将对具体实施方式或现有技术描述中所需要使用的附图作简单地介绍。
图1示出了本发明第一实施例所提供的基于概率统计方法的管制员疲劳检测方法的流程图;
图2示出了本发明第一实施例所提供的基于概率统计方法的管制员疲劳检测方法的PERCLOS测量原理示意图;
图3示出了本发明第三实施例所提供的基于概率统计方法的管制员疲劳检测系统的示意图。
具体实施方式
下面将结合附图对本发明技术方案的实施例进行详细的描述。以下实施例仅用于更加清楚地说明本发明的技术方案,因此只是作为示例,而不能以此来限制本发明的保护范围。
实施例一
图1示出了本发明第一实施例所提供的基于概率统计方法的管制员疲劳检测方法的流程图;如图1所示,根据本发明第一实施例的基于概率统计方法的管制员疲劳检测方法,包括:
步骤S1,获取管制员的脉搏值和血压值,血压值包括舒张压值和收缩压值;
步骤S2,获取预先基于概率统计方法的疲劳检测模型,将脉搏值、舒张压值和收缩压值输入疲劳检测模型,得到PERCLOS值仿真结果;
步骤S3,根据PERCLOS值仿真结果,进行管制员的疲劳检测:
PERCLOS值仿真结果大于实验确定的阈值,判定管制员处于疲劳状态。
本发明的技术方案为先获取管制员的脉搏值和血压值,血压值包括舒张压值和收缩压值;接着获取预先基于概率统计方法的疲劳检测模型,将脉搏值、舒张压值和收缩压值输入疲劳检测模型,得到PERCLOS值仿真结果;最后根据PERCLOS值仿真结果,进行管制员的疲劳检测:PERCLOS值仿真结果大于实验确定的阈值,判定管制员处于疲劳状态。
本发明基于概率统计方法的管制员疲劳检测方法,采用人体生理指标血压值和脉搏值参数,将血压值和脉搏值参数输入预先基于概率统计方法建立的疲劳检测模型,得到PERCLOS值仿真结果进行管制员的疲劳检测。通常对管制员的疲劳检测都是利用人的面部特征,如,眨眼闭合程度数据(直接反映人疲劳程度的参数),然后计算得到PERCLOS值仿真结果进行疲劳检测判定,但检测人的面部特征需采用精度高的检测设备,实现起来成本高;而本发明中是利用间接反映人的疲劳程度的参数血压值和脉搏值进行疲劳检测,血压值和脉搏值获取方法简单,易于实现,成本低,通过间接参数可直接为管制员提供有效的疲劳检测。
其中,管制员的脉搏和血压可通过佩戴的手环或其他检测设备得到,管制员的眼睑闭合程度数据通过高清智能算法摄像机对被测者脸部特征进行全程实时录像获得。
具体地,建立疲劳检测模型,包括:
获得多个管制员的眼睑闭合程度数据,计算得到PERCLOS值测量结果;
根据所述脉搏值、所述舒张压值和所述收缩压值,结合所述PERCLOS值测量结果,计算联合分布函数;
根据联合分布函数,计算条件概率分布函数;
根据条件概率分布函数,结合疲劳状态下的阈值,计算得到疲劳条件概率。
基于概率统计方法建立疲劳检测模型,就是将多个管制员的脉搏值、舒张压值和收缩压值三个参数,结合对应的多个管制员的眼睑闭合程度数据通过计算,得到PERCLOS值测量结果与三个参数间的关系,确立疲劳条件概率函数关系,该疲劳检测模型是通过大量数据实验得到的,可根据此模型对管制员提供有效的疲劳检测。
具体建模过程如下:
1)、令脉搏值为X1,舒张压值为,收缩压值为X2,PERCLOS值测量结果为X3,求联合分布函数为F(x1,x2,x3,x4)。
2)、求取条件概率分布函数F(x4|x1,x2,x3),f(x1,x2,x3,x4)为的联合概率密度函数,则(X1,X2,X3,X4)关于(X1,X2,X3)的边缘概率密度为:
2)、求取条件概率分布函数F(x4|x1,x2,x3),f(x1,x2,x3,x4)为(X1,X2,X3,X4)的联合概率密度函数,则(X1,X2,X3,X4)关于(X1,X2,X3)的边缘概率密度为:
Figure BDA0001173277580000091
在X1=x1,X2=x2,X3=x3的条件下X4的条件概率密度为:
Figure BDA0001173277580000092
条件概率函数为:
Figure BDA0001173277580000093
3)、求取处于疲劳状态时的条件概率为:
Figure BDA0001173277580000094
根据上述过程,计算得到α值,然后当输入X1、X2和X3时,即输入脉搏值、舒张压值和收缩压值三个参数值,就可计算得到值X4,此时为PERCLOS值仿真结果,然后根据PERCLOS值仿真结果可判断管制员的疲劳状态。
具体地,计算得到PERCLOS值测量结果,包括:
从眼睑闭合数据中获取管制员清醒状态下的上下眼睑最大距离;
将眼睑闭合数据除以上下眼睑最大距离,得到眼睑闭合程度;
根据眼睑闭合程度,计算单位时间内的闭眼时间;
将闭眼时间除以单位时间得到PERCLOS值测量结果。
PERCLOS值测量结果是卡内基梅隆研究所经过反复实验和论证,提出了度量疲劳/瞌睡的物理量,是Percent Eye Closure的缩写,指在一定的时间内眼睛闭合时所占的时间比例。根据PERCLOS值测量结果,即可判断出管制员的疲劳状态。
具体地,计算PERCLOS值测量结果的过程为:
1、进行人眼定位;
2、完成定位后,利用动态模板匹配的方法跟踪眼睛;
3、计算PERCLOS值测量结果。
其中,第一步,进行人眼定位的主要过程如下:
眼睛区域与周围区域相比,具有灰度值较低且灰度变化率较大的特点。因此可基于眼睛图像的灰度信息进行定位。分为以下两个步骤:
1)、眼睛粗略定位
准确定位人脸后,根据面部器官分布,人眼在脸部的上半部,可以很简单的确定一个大概区域。观察人脸图片,发现眼部在水平方向经过皮肤、左眼眼白、左眼瞳孔、左眼眼白、皮肤、右眼眼白、右眼瞳孔、右眼眼白、皮肤、灰度变化较大。在灰度变化突变处进行微分,将产生高值,将其绝对值累加,则灰度变化越大的那一行,累积值越大。计算公式如下:
Δhf(x,y)=f(x,y)-f(x-1,y) (5)
Figure BDA0001173277580000101
f(x,y)为得到的人脸区域的灰度图像,通过实验发现,在眼睛处导数变化值之和的绝对值最大,通过此方法可粗略判断人眼所在线的位置。
2)、人眼精确定位
通过观察发现眼睛周围Cb值较高,而Cr值较低,因此由式(7)计算得到特征图,以突出眼部特征。
Figure BDA0001173277580000111
其中,EyeMap是眼睛特征图,(Cb)2,
Figure BDA0001173277580000112
(Cb/Cr)都归一化到[0,255]之间,
Figure BDA0001173277580000113
是由Cr求反得到(255,Cr)。在得到EyeMap图后,设定阀值T,将EyeMap小于T的值设为0,这一步可视为一个简单的滤波以去掉非眼部特征的干扰。
得到EyeMap滤波图后,结合人眼粗定位结果,从左到右搜索,按比例定义相对于人脸区域一定大小的框,当框进EyeMap滤波图值的和最大时,即为人眼。
第二步,完成定位后,利用动态模板匹配的方法跟踪眼睛,具体过程为:第一步中,f(x,y)为得到的人脸区域的灰度图像,利用此灰度图像作为眼睛模板,设眼睛模板左上角的任一位置为(x,y),下一帧的搜索范围是位置(x,y)沿上、下、左、右4个方向各扩展10个像素。其公式为:
Figure BDA0001173277580000114
上式中,N是模板中像索的个数;M为模板;I为图像中待匹配的部分。
根据上式可得所有大于阈值p的最大值所对应的坐标为最匹配的位置,以此得到的眼睛图像作为下一帧图像的模板。用同样的方式继续进行追踪,在追踪的过程中,若得到的p均小于阈值或两眼的行距过大则重新回到眼睛的检测过程。
3、第三步,计算PERCLOS值测量结果。
第一种方法是基于人眼闭眼时间计算得到的,具体如图2所示,图2示出了本发明第一实施例所提供的基于概率统计方法的管制员疲劳检测方法的PERCLOS测量原理示意图;如图2所示,图中曲线为一次眼睛闭合与睁开过程中睁开程度随时间的变化曲线,可根据此曲线得到所需测量的眼睛某个程度的闭合或睁开持续的时间,从而计算出PERCLOS值测量结果。
图中t1为眼睛完全睁开到闭合的时间;t2为眼睛完全睁开到闭合80%的时间;t3为眼睛完全睁开到下一次睁开的时间;t4为眼睛完全睁开到下一次睁开80%的时间。通过测量出t1到t4的值就能计算出PERCLOS的值f。只要测量出的值,通过公式(9)即可计算出PERCLOS值测量结果:
Figure BDA0001173277580000121
式中,f为眼睛闭合时间所占某一特定时间的百分率,表示在一次闭眼—睁眼过程中,眼睛接近闭合的时间越长,疲劳的可能就越大。
具体地,通过计算单位时间内眼睑闭合程度大于70%或80%的对应的时间段的总和得到所述单位时间内的闭眼时间。
在具体试验中有P70,P80以下种测量方式。其中P70是指将眼睑闭合程度大于70%的眼睛状态判断为闭合状态,以初始时刻管制员清醒时的上下眼睑最大距离为标准,若以后得到的距离小于此距离的70%则判断为闭合。
P80是指将闭合程度大于80%的眼睛状态判断为闭合状态。以初始时刻管制员清醒时的上下眼睑最大距离为标准,若以后得到的距离小于此距离的80%则判断为闭合。
其中P80被认为最能反映人的疲劳程度,即单位时间内眼睑闭合程度大于80%时,检测效果最好。对于P80测量方式来说,我们认为当PERCLOS值测量结果f>0.5时,认为管制员处于疲劳状态。
具体地,通过管制员佩戴的传感器获得管制员的脉搏值和血压值。
管制员佩戴传感器,就可以检测到管制员实时的脉搏值和血压值,传感器成本低,获取管制员的脉搏值和血压值的方法简单,易于实现。例如,管制员佩戴手环来检测实时的脉搏值和血压值。
实施例二
实施例一中,对于实施例一第三步中PERCLOS值测量结果的计算,还有如下的方式:
同样如第一步,先进行人眼定位;然后进行第二步,利用动态模板匹配的方法跟踪眼睛,接着,进行第三步,进行PERCLOS值测量结果的计算,具体过程如下:
疲劳识别基于PERCLOS的P80模型,即将闭合程度大于80%的眼睛状态判断为闭合状态。以初始时刻管制员清醒时的上下眼睑最大距离为标准,若以后得到的距离小于此距离的80%则判断为闭合。假设实验视频帧率10f·s-1分辨率为640×480,时长60s。则以每6s视频作为1个检测单元,间隔0.33s取1帧作眼睛状态检测。统计每个检测单元内18帧图像的状态,得到眼睛闭合帧数CloseFrame_Num和处理的总帧数SumFrame_Num,依据式(10)计算相应的PERCLOS值仿真结果。
Figure BDA0001173277580000131
如果所得PERCLOS值测量结果大于实验确定的阈值50%,则判断此时管制员可能已处于疲劳状态,通过报警系统进行警告。
实施例三
图3示出了本发明第三实施例所提供的基于概率统计方法的管制员疲劳检测系统的示意图;如图3所示,本发明中的基于概率统计方法的管制员疲劳检测系统10,包括:
脉搏值和血压值获取模块101,用于获取管制员的脉搏值和血压值,血压值包括舒张压值和收缩压值;
疲劳检测值输出模块102,用于预先获取基于概率统计方法的疲劳检测模型,将脉搏值、舒张压值和所述收缩压值输入疲劳检测模型,得到PERCLOS值仿真结果;
疲劳检测模块103,用于根据PERCLOS值仿真结果,进行管制员的疲劳检测:
PERCLOS值仿真结果大于实验确定的阈值,判定管制员处于疲劳状态。
本发明的技术方案为先通过脉搏值和血压值获取模块101,获取管制员的脉搏值和血压值,血压值包括舒张压值和收缩压值;然后通过疲劳检测值输出模块102,获取预先基于概率统计方法的疲劳检测模型,将脉搏值、舒张压值和所述收缩压值输入疲劳检测模型,得到PERCLOS值仿真结果;最后通过疲劳检测模块104,根据PERCLOS值仿真结果,进行管制员的疲劳检测:PERCLOS值仿真结果大于实验确定的阈值,判定管制员处于疲劳状态。
本发明基于概率统计方法的管制员疲劳检测系统10,采用人体生理指标血压值和脉搏值参数,将血压值和脉搏值参数输入预先基于概率统计方法建立的疲劳检测模型,得到PERCLOS值仿真结果进行管制员的疲劳检测。通常对管制员的疲劳检测都是利用人的面部特征,如,眨眼闭合程度数据(直接反映人疲劳程度的参数),然后计算得到PERCLOS值仿真结果进行疲劳检测判定,但检测人的面部特征需采用精度高的检测设备,实现起来成本高;而本发明中是利用间接反映人的疲劳程度的参数血压值和脉搏值进行疲劳检测,血压值和脉搏值获取方法简单,易于实现,成本低,通过间接参数可直接为管制员提供有效的疲劳检测。
具体地,建立疲劳检测模型,包括疲劳检测模型建立子模块,用于:
获得多个管制员的眼睑闭合程度数据,计算得到PERCLOS值测量结果;
根据脉搏值、舒张压值和收缩压值,结合PERCLOS值测量结果,计算联合分布函数;
根据联合分布函数,计算条件概率分布函数;
根据条件概率分布函数,结合疲劳状态下的阈值,计算得到疲劳条件概率。
基于概率统计方法建立疲劳检测模型,就是将多个管制员的脉搏值、舒张压值和收缩压值三个参数,结合对应的多个管制员的眼睑闭合程度数据通过计算,得到PERCLOS值测量结果与三个参数间的关系,确立疲劳条件概率函数关系,该疲劳检测模型是通过大量数据实验得到的,可根据此模型对管制员提供有效的疲劳检测。
具体地,计算得到PERCLOS值测量结果,包括疲劳检测值计算子模块,用于:
从眼睑闭合数据中获取所述管制员清醒状态下的上下眼睑最大距离;
将眼睑闭合数据除以上下眼睑最大距离,得到眼睑闭合程度;
根据眼睑闭合程度,计算单位时间内的闭眼时间;
将闭眼时间除以单位时间得到PERCLOS值测量结果。
PERCLOS值测量结果是卡内基梅隆研究所经过反复实验和论证,提出了度量疲劳/瞌睡的物理量,是Percent Eye Closure的缩写,指在一定的时间内眼睛闭合时所占的时间比例。根据PERCLOS值测量结果,即可判断出管制员的疲劳状态。
具体地,疲劳检测值计算子模块包括闭眼时间子模块,用于:
通过计算单位时间内眼睑闭合程度大于70%或80%的对应的时间段的总和得到所述单位时间内的闭眼时间。
在具体试验中有P70,P80两种测量方式。其中P80被认为最能反映人的疲劳程度,即单位时间内眼睑闭合程度大于80%时,检测效果最好。
具体地,系统还包括脉搏和血压检测模块,用于通过管制员佩戴的传感器获得管制员的脉搏值和血压值。
管制员佩戴传感器,就可以检测到管制员实时的脉搏值和血压值,传感器成本低,获取管制员的脉搏值和血压值的方法简单,易于实现。例如,管制员佩戴手环来检测实时的脉搏值和血压值。
综上所述,本发明提供的一种基于概率统计方法的管制员疲劳检测方法及系统,运用间接反映人身体指标的参数(血压和脉搏),代替常用的利用人的面部特征对管制员的疲劳状态进行检测,主要是基于概率统计方法建立间接参数(血压值和脉搏值)与PERCLOS值仿真结果的关系,最终还是通过PERCLOS值仿真结果判定管制员的疲劳状态,由于人的面部特征要经过高精度的设备进行实时采集,而人的脉搏和血压值很容易测量,因此,利用血压和脉搏值对管制员进行疲劳检测,易于实现,成本低。
最后应说明的是:以上各实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述各实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的范围,其均应涵盖在本发明的权利要求和说明书的范围当中。

Claims (8)

1.基于概率统计方法的管制员疲劳检测方法,其特征在于,包括:
步骤S1,获取管制员的脉搏值和血压值,所述血压值包括舒张压值和收缩压值;
步骤S2,获取预先基于概率统计方法的疲劳检测模型,将所述脉搏值、所述舒张压值和所述收缩压值输入所述疲劳检测模型,得到PERCLOS值仿真结果;
步骤S3,根据所述PERCLOS值仿真结果,进行所述管制员的疲劳检测:
所述PERCLOS值仿真结果大于实验确定的阈值,判定所述管制员处于疲劳状态,
建立所述疲劳检测模型,包括:
获得多个管制员的眼睑闭合程度数据,计算得到PERCLOS值测量结果;
根据所述脉搏值、所述舒张压值和所述收缩压值,结合所述PERCLOS值测量结果,计算联合分布函数;
根据所述联合分布函数,计算条件概率分布函数;
根据所述条件概率分布函数,结合疲劳状态下的阈值,计算得到疲劳条件概率。
2.根据权利要求1所述基于概率统计方法的管制员疲劳检测方法,其特征在于,
所述计算得到PERCLOS值测量结果,包括:
从所述眼睑闭合数据中获取所述管制员清醒状态下的上下眼睑最大距离;将所述眼睑闭合数据除以所述上下眼睑最大距离,得到眼睑闭合程度;
根据所述眼睑闭合程度,计算单位时间内的闭眼时间;
将所述闭眼时间除以所述单位时间得到PERCLOS值测量结果。
3.根据权利要求2所述基于概率统计方法的管制员疲劳检测方法,其特征在于,
通过计算单位时间内眼睑闭合程度大于70%或80%的对应的时间段的总和得到所述单位时间内的闭眼时间。
4.根据权利要求1所述基于概率统计方法的管制员疲劳检测方法,其特征在于,
通过所述管制员佩戴的传感器获得所述管制员的脉搏值和血压值。
5.基于概率统计方法的管制员疲劳检测系统,其特征在于,包括:
脉搏值和血压值获取模块,用于获取管制员的脉搏值和血压值,所述血压值包括舒张压值和收缩压值;
疲劳检测值输出模块,用于预先获取基于概率统计方法的疲劳检测模型,将所述脉搏值、所述舒张压值和所述收缩压值输入所述疲劳检测模型,得到PERCLOS值仿真结果;
疲劳检测模块,用于根据所述PERCLOS值仿真结果,进行所述管制员的疲劳检测:
所述PERCLOS值仿真结果大于实验确定的阈值,判定所述管制员处于疲劳状态,
建立所述疲劳检测模型,包括疲劳检测模型建立子模块,用于:
获得多个管制员的眼睑闭合程度数据,计算得到PERCLOS值测量结果;
根据所述脉搏值、所述舒张压值和所述收缩压值,结合所述PERCLOS值测量结果,计算联合分布函数;
根据所述联合分布函数,计算条件概率分布函数;
根据所述条件概率分布函数,结合疲劳状态下的阈值,计算得到疲劳条件概率。
6.根据权利要求5所述基于概率统计方法的管制员疲劳检测系统,其特征在于,
所述计算得到PERCLOS值测量结果,包括疲劳检测值计算子模块,用于:
从所述眼睑闭合程度数据中获取所述管制员清醒状态下的上下眼睑最大距离;将所述眼睑闭合数据除以所述上下眼睑最大距离,得到眼睑闭合程度;
根据所述眼睑闭合程度,计算单位时间内的闭眼时间;
将所述闭眼时间除以所述单位时间得到PERCLOS值测量结果。
7.根据权利要求6所述基于概率统计方法的管制员疲劳检测系统,其特征在于,
所述疲劳检测值计算子模块包括闭眼时间子模块,用于:
通过计算单位时间内眼睑闭合程度大于70%或80%的对应的时间段的总和得到所述单位时间内的闭眼时间。
8.根据权利要求5所述基于概率统计方法的管制员疲劳检测系统,其特征在于,所述系统还包括:
脉搏和血压检测模块,用于通过所述管制员佩戴的传感器获得所述管制员的脉搏值和血压值。
CN201611115807.5A 2016-12-07 2016-12-07 基于概率统计方法的管制员疲劳检测方法及系统 Active CN106725364B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611115807.5A CN106725364B (zh) 2016-12-07 2016-12-07 基于概率统计方法的管制员疲劳检测方法及系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611115807.5A CN106725364B (zh) 2016-12-07 2016-12-07 基于概率统计方法的管制员疲劳检测方法及系统

Publications (2)

Publication Number Publication Date
CN106725364A CN106725364A (zh) 2017-05-31
CN106725364B true CN106725364B (zh) 2020-08-07

Family

ID=58881314

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611115807.5A Active CN106725364B (zh) 2016-12-07 2016-12-07 基于概率统计方法的管制员疲劳检测方法及系统

Country Status (1)

Country Link
CN (1) CN106725364B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109214693B (zh) * 2018-02-13 2021-11-12 中国民用航空总局第二研究所 空中交通管制员疲劳风险的评估方法、系统、介质及设备

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2454916A (en) * 2007-11-23 2009-05-27 Dimuth Jayawarna Fatigue monitoring using facial images
WO2014017090A1 (ja) * 2012-07-26 2014-01-30 日産自動車株式会社 運転者疲労度推定装置及び運転者疲労度推定方法
US10490049B2 (en) * 2013-12-10 2019-11-26 General Electric Company Systems and methods for identifying patient distress
CN204890010U (zh) * 2015-08-07 2015-12-23 北京环度智慧智能技术研究所有限公司 一种驾驶员测评系统
CN105719431A (zh) * 2016-03-09 2016-06-29 深圳市中天安驰有限责任公司 一种疲劳驾驶检测系统

Also Published As

Publication number Publication date
CN106725364A (zh) 2017-05-31

Similar Documents

Publication Publication Date Title
JP6084953B2 (ja) コンテンツ評価システム及びそれを用いたコンテンツ評価方法
CN106539581B (zh) 基于概率统计方法的管制员疲劳检测方法及系统
CN106599821A (zh) 基于bp神经网络的管制员疲劳检测方法及系统
CN109044314B (zh) 一种基于欧拉视频放大的非接触式心率监测方法
CN109389806A (zh) 基于多信息融合的疲劳驾驶检测预警方法、系统及介质
US11083398B2 (en) Methods and systems for determining mental load
CN108875485A (zh) 一种底图录入方法、装置及系统
CN110276271A (zh) 融合ippg和深度信息抗噪声干扰的非接触心率估计法
Stuart et al. Quantifying saccades while walking: validity of a novel velocity-based algorithm for mobile eye tracking
CN109009017A (zh) 一种智能健康监测系统及其数据处理方法
CN106510736B (zh) 基于多维心理状态指标的心理状态判定方法与系统
CN110717461A (zh) 一种疲劳状态识别方法、装置和设备
CN111105881B (zh) 一种3d测量人类表型的数据库系统
CN111967296A (zh) 虹膜活体检测方法、门禁控制方法及装置
CN111829661A (zh) 一种基于人脸解析的额温测量方法及系统
Szankin et al. Long distance vital signs monitoring with person identification for smart home solutions
CN106725364B (zh) 基于概率统计方法的管制员疲劳检测方法及系统
Mirabet-Herranz et al. LVT Face Database: A benchmark database for visible and hidden face biometrics
CN118098581A (zh) 情绪状态的监测方法及系统
Andreotti et al. Improved heart rate detection for camera-based photoplethysmography by means of Kalman filtering
CN112528767A (zh) 基于机器视觉的施工机械操作员疲劳作业检测系统及方法
CN112716468A (zh) 基于三维卷积网络的非接触心率测量方法及装置
CN116881853A (zh) 基于多模态融合的注意力评估方法、系统、设备及介质
CN117056872A (zh) 一种脑疲劳超前预测方法
Kim et al. Low-cost real-time driver drowsiness detection based on convergence of ir images and eeg signals

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant