CN113925512B - 基于视野焦点的疲劳检测方法及装置 - Google Patents

基于视野焦点的疲劳检测方法及装置 Download PDF

Info

Publication number
CN113925512B
CN113925512B CN202111196755.XA CN202111196755A CN113925512B CN 113925512 B CN113925512 B CN 113925512B CN 202111196755 A CN202111196755 A CN 202111196755A CN 113925512 B CN113925512 B CN 113925512B
Authority
CN
China
Prior art keywords
distance
visual field
driver
pupil size
focus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111196755.XA
Other languages
English (en)
Other versions
CN113925512A (zh
Inventor
刘倩
黄镨
张星月
赫康
潘宇威
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dongfeng Motor Corp
Original Assignee
Dongfeng Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dongfeng Motor Corp filed Critical Dongfeng Motor Corp
Priority to CN202111196755.XA priority Critical patent/CN113925512B/zh
Publication of CN113925512A publication Critical patent/CN113925512A/zh
Application granted granted Critical
Publication of CN113925512B publication Critical patent/CN113925512B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/02Subjective types, i.e. testing apparatus requiring the active assistance of the patient
    • A61B3/024Subjective types, i.e. testing apparatus requiring the active assistance of the patient for determining the visual field, e.g. perimeter types
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/11Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils
    • A61B3/112Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils for measuring diameter of pupils

Abstract

本发明公开了一种基于视野焦点的疲劳检测方法及装置,属于疲劳检测技术领域。该方法包括:在车辆前方设置多个远近距离不同的标定物,获取驾驶员注视远近距离不同的标定物时的瞳孔大小;在行车过程中,获取驾驶员的瞳孔大小,根据瞳孔大小得出驾驶员视野焦点的距离;获取车辆前方障碍物的距离,根据视野焦点的距离和障碍物的距离判断是否疲劳驾驶。当车辆前方的视野范围内出现障碍物时,人眼会通过调整虹膜改变瞳孔大小,调整进入晶状体的光线的范围和数量,实现人眼聚焦以看清楚障碍物。本发明利用该特性,通过获取驾驶员的瞳孔大小,根据瞳孔大小得出驾驶员视野焦点的距离,最后根据视野焦点的距离和障碍物的距离有效判断驾驶员是否疲劳驾驶。

Description

基于视野焦点的疲劳检测方法及装置
技术领域
本发明属于疲劳检测技术领域,具体涉及一种基于视野焦点的疲劳检测方法及装置。
背景技术
疲劳驾驶,是指驾驶员在长时间连续行车后,产生生理机能和心理机能的失调,而在客观上出现驾驶技能下降的现象。驾驶员睡眠质量差或不足,长时间驾驶车辆,容易出现疲劳。疲劳驾驶极易引起交通事故,因此,实时对驾驶员进行疲劳检测并予以提醒可以有效地减少交通事故的发生。
目前有通过判断驾驶员是否打呵欠来判断驾驶员是否疲劳,但呵欠产生原因并未精确到是人疲劳,还是由其他原因产生。因此,基于呵欠、不动作等方案判断驾驶疲劳不准确。
发明内容
针对现有技术中存在的问题,本发明提供一种基于视野焦点的疲劳检测方法及装置,利用驾驶员的视野焦点准确检测驾驶疲劳。
为实现上述目的,本发明提供了一种基于视野焦点的疲劳检测方法,包括以下步骤:
在车辆前方设置多个远近距离不同的标定物,获取驾驶员注视远近距离不同的标定物时的瞳孔大小;
在行车过程中,获取驾驶员的瞳孔大小,根据瞳孔大小得出驾驶员视野焦点的距离;
获取车辆前方障碍物的距离,根据视野焦点的距离和障碍物的距离判断是否疲劳驾驶。
在一些可选的实施方案中,标定物等间隔设置。
在一些可选的实施方案中,距离车辆越近,标定物越密集;距离车辆越远,标定物越稀疏。
在一些可选的实施方案中,标定物的距离为:1m,1.5m,2m,3m,5m,10m,20m,50m,80m,100m,150m,200m。
在一些可选的实施方案中,设远近距离不同的标定物对应的瞳孔大小依次为:T1、T2、T3……Tn,相邻两瞳孔大小构成一个区间Ti至Ti+1,i=1,2,3……n-1;
根据行车过程中驾驶员的瞳孔大小T,得出T所在的区间,进而得出该区间所对应的视野焦点距离范围;
判断障碍物的距离是否位于该区间所对应的视野焦点距离范围;若是,则疲劳驾驶。
在一些可选的实施方案中,根据标定物的距离及其对应的瞳孔大小,拟合出距离与瞳孔大小之间的关系,进而根据该关系以及瞳孔大小得出行车过程中驾驶员视野焦点的距离。
在一些可选的实施方案中,计算视野焦点的距离和障碍物的距离的差的绝对值,若该绝对值大于预设阈值,则疲劳驾驶。
在一些可选的实施方案中,瞳孔大小为瞳孔直径。
在一些可选的实施方案中,瞳孔大小为瞳孔像素点数占眼球像素点数的比例值。
一种基于视野焦点的疲劳检测装置,包括:
标定模块,用于在车辆前方设置多个远近距离不同的标定物,获取驾驶员注视远近距离不同的标定物时的瞳孔大小;
距离模块,用于在行车过程中,获取驾驶员的瞳孔大小,根据瞳孔大小得出驾驶员视野焦点的距离;
判断模块,用于获取车辆前方障碍物的距离,根据视野焦点的距离和障碍物的距离判断是否疲劳驾驶。
本发明与现有技术相比,具有以下优点及有益效果:
在驾驶过程中,当车辆前方的视野范围内出现障碍物时,驾驶员通常会注意到该障碍物;为了看清楚障碍物,人眼会通过调整虹膜改变瞳孔大小,进而调整进入晶状体的光线的范围和数量,实现人眼聚焦。本发明利用该特性,通过获取驾驶员的瞳孔大小,进而根据瞳孔大小得出驾驶员视野焦点的距离,最后根据视野焦点的距离和障碍物的距离有效判断驾驶员是否疲劳驾驶。
此外,当驾驶员没有注意到障碍物时,系统会误认为驾驶员疲劳驾驶,进而会给予驾驶员提示,但该提示会提醒驾驶员及时发现障碍物,因此本发明还能提高行车安全性。
附图说明
图1是本发明实施例的基于视野焦点的疲劳检测方法流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。此外,下面所描述的本发明各个实施方式中所涉及到的技术特征只要彼此之间未构成冲突就可以相互组合。
本发明实施例的基于视野焦点的疲劳检测方法,如图1所示,包括以下步骤:
S1、在车辆前方设置多个远近距离不同的标定物,获取驾驶员注视远近距离不同的标定物时的瞳孔大小。
标定物可等间隔设置,也可以在距离车辆越近的地方标定物越密集,距离车辆越远的地方标定物越稀疏。例如:标定物的距离可设置为:1m,1.5m,2m,3m,5m,10m,20m,50m,80m,100m,150m,200m。
S2、在行车过程中,获取驾驶员的瞳孔大小,根据瞳孔大小得出驾驶员视野焦点的距离。
可根据标定物的距离及其对应的瞳孔大小,拟合出距离与瞳孔大小之间的关系,可线性拟合或多项式拟合,进而根据拟合出的方程以及瞳孔大小得出行车过程中驾驶员视野焦点的距离。
S3、获取车辆前方障碍物的距离,根据视野焦点的距离和障碍物的距离判断是否疲劳驾驶。
计算视野焦点的距离和障碍物的距离的差的绝对值,若该绝对值大于预设阈值,则疲劳驾驶。
在一些可选的实施方案中,可设远近距离不同的标定物对应的瞳孔大小依次为:T1、T2、T3……Tn,相邻的两瞳孔大小构成一个区间Ti至Ti+1,i=1,2,3……n-1;
根据行车过程中驾驶员的瞳孔大小T,得出T所在的区间,进而得出该区间所对应的视野焦点距离范围;
最后判断障碍物的距离是否位于该区间所对应的视野焦点距离范围;若是,则认为是疲劳驾驶。
优选地,瞳孔大小可为瞳孔直径,通过图像处理算法估算出瞳孔的直径。或将瞳孔像素点数占眼球像素点数的比例值作为瞳孔大小。
下面给出一个具体的实施例,该实施例包括3部分:
1、人眼焦点判断学习:
人眼中最小的黑色圆为瞳孔。人眼通过调整虹膜改变瞳孔大小,调整进入晶状体的光线的范围和数量,实现人眼焦点近处/远处切换;
可在车前地面投影图片,分别投影车前1m,1.5m,2m,3m,5m,10m等距离,三次重复目视同一物体,分析监测摄像头拍摄的驾驶员瞳孔占像素数量与眼球占像素数量的比例,分别为T1,T15,T2,T3,T5,T10等。其中,T1,T15,T2,T3,T5,T10分别对应驾驶员注视车前1m,1.5m,2m,3m,5m,10m距离障碍物的瞳孔所占像素点与眼睛所占像素点的比例。
2、人眼焦点距离计算
在行车过程中,通过疲劳检测摄像头拍摄驾驶员瞳孔大小及眼球大小,计算Td,Td=瞳孔占像素数/眼球像素数。
通过对比Td和T1,T15,T2,T3,T5,T10的大小,得出驾驶员眼睛聚焦的距离Ld。
3、疲劳判断
车身ADAS摄像头抓取前方障碍物的距离L;
当人产生疲劳时,焦点的距离Ld与实际障碍的距离L存在差异;系统进行警报提示驾驶员。
为了减少误判,避免驾驶员未及时注意到出现的障碍物,可在障碍物出现一段时间后判断人眼是否注意到该障碍物,如果驾驶员眼睛聚焦的距离与障碍物的距离接近,则认为没有疲劳驾驶。
本发明还提供一种基于视野焦点的疲劳检测装置,包括:
标定模块,用于在车辆前方设置多个远近距离不同的标定物,获取驾驶员注视远近距离不同的标定物时的瞳孔大小;
距离模块,用于在行车过程中,获取驾驶员的瞳孔大小,根据瞳孔大小得出驾驶员视野焦点的距离;
判断模块,用于获取车辆前方障碍物的距离,根据视野焦点的距离和障碍物的距离判断是否疲劳驾驶。
综上所述,本发明通过标定瞳孔大小,确认眼睛聚焦的障碍物距离,并与ADAS输入的障碍物距离,确认人眼是否失焦,进而判断是否疲劳驾驶。且当驾驶员没有注意到障碍物时,虽然系统会误认为驾驶员疲劳驾驶,给予驾驶员提示,但该提示会提醒驾驶员及时发现障碍物,因此本发明还能提高行车安全性。
需要指出,根据实施的需要,可将本申请中描述的各个步骤/部件拆分为更多步骤/部件,也可将两个或多个步骤/部件或者步骤/部件的部分操作组合成新的步骤/部件,以实现本发明的目的。
本领域的技术人员容易理解,以上仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明的保护范围之内。

Claims (8)

1.一种基于视野焦点的疲劳检测方法,其特征在于,包括以下步骤:
在车辆前方设置多个远近距离不同的标定物,获取驾驶员注视远近距离不同的标定物时的瞳孔大小;
在行车过程中,获取驾驶员的瞳孔大小,根据瞳孔大小得出驾驶员视野焦点的距离;具体为:根据标定物的距离及其对应的瞳孔大小,拟合出距离与瞳孔大小之间的关系,进而根据该关系以及瞳孔大小得出行车过程中驾驶员视野焦点的距离;
获取车辆前方障碍物的距离,根据视野焦点的距离和障碍物的距离判断是否疲劳驾驶;具体为:计算视野焦点的距离和障碍物的距离的差的绝对值,若该绝对值大于预设阈值,则疲劳驾驶。
2.根据权利要求1所述的基于视野焦点的疲劳检测方法,其特征在于,标定物等间隔设置。
3.根据权利要求1所述的基于视野焦点的疲劳检测方法,其特征在于,距离车辆越近,标定物越密集;距离车辆越远,标定物越稀疏。
4.根据权利要求3所述的基于视野焦点的疲劳检测方法,其特征在于,标定物的距离为:1m,1.5m,2m,3m,5m,10m,20m,50m,80m,100m,150m,200m。
5.根据权利要求1所述的基于视野焦点的疲劳检测方法,其特征在于,设远近距离不同的标定物对应的瞳孔大小依次为:T1、T2、T3……Tn,相邻两瞳孔大小构成一个区间Ti至Ti+1,i=1,2,3……n-1;
根据行车过程中驾驶员的瞳孔大小T,得出T所在的区间,进而得出该区间所对应的视野焦点距离范围;
判断障碍物的距离是否位于该区间所对应的视野焦点距离范围;若是,则疲劳驾驶。
6.根据权利要求1所述的基于视野焦点的疲劳检测方法,其特征在于,瞳孔大小为瞳孔直径。
7.根据权利要求1所述的基于视野焦点的疲劳检测方法,其特征在于,瞳孔大小为瞳孔像素点数占眼球像素点数的比例值。
8.一种基于视野焦点的疲劳检测装置,其特征在于,包括:
标定模块,用于在车辆前方设置多个远近距离不同的标定物,获取驾驶员注视远近距离不同的标定物时的瞳孔大小;
距离模块,用于在行车过程中,获取驾驶员的瞳孔大小,根据瞳孔大小得出驾驶员视野焦点的距离;具体为:根据标定物的距离及其对应的瞳孔大小,拟合出距离与瞳孔大小之间的关系,进而根据该关系以及瞳孔大小得出行车过程中驾驶员视野焦点的距离;
判断模块,用于获取车辆前方障碍物的距离,根据视野焦点的距离和障碍物的距离判断是否疲劳驾驶;具体为:计算视野焦点的距离和障碍物的距离的差的绝对值,若该绝对值大于预设阈值,则疲劳驾驶。
CN202111196755.XA 2021-10-14 2021-10-14 基于视野焦点的疲劳检测方法及装置 Active CN113925512B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111196755.XA CN113925512B (zh) 2021-10-14 2021-10-14 基于视野焦点的疲劳检测方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111196755.XA CN113925512B (zh) 2021-10-14 2021-10-14 基于视野焦点的疲劳检测方法及装置

Publications (2)

Publication Number Publication Date
CN113925512A CN113925512A (zh) 2022-01-14
CN113925512B true CN113925512B (zh) 2023-10-20

Family

ID=79279280

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111196755.XA Active CN113925512B (zh) 2021-10-14 2021-10-14 基于视野焦点的疲劳检测方法及装置

Country Status (1)

Country Link
CN (1) CN113925512B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101593352A (zh) * 2009-06-12 2009-12-02 浙江大学 基于面部朝向和视觉焦点的驾驶安全监测系统
CN103886307A (zh) * 2014-04-15 2014-06-25 王东强 一种视线跟踪及疲劳预警方法
CN106293032A (zh) * 2015-06-08 2017-01-04 北京三星通信技术研究有限公司 便携终端设备及其控制方法和装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7431455B2 (en) * 2005-03-22 2008-10-07 Amo Manufacturing Usa, Llc Pupilometer for pupil center drift and pupil size measurements at differing viewing distances
DE102017202659A1 (de) * 2017-02-20 2018-08-23 Bayerische Motoren Werke Aktiengesellschaft System und Verfahren zur Erkennung der Müdigkeit eines Fahrzeugführers

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101593352A (zh) * 2009-06-12 2009-12-02 浙江大学 基于面部朝向和视觉焦点的驾驶安全监测系统
CN103886307A (zh) * 2014-04-15 2014-06-25 王东强 一种视线跟踪及疲劳预警方法
CN106293032A (zh) * 2015-06-08 2017-01-04 北京三星通信技术研究有限公司 便携终端设备及其控制方法和装置

Also Published As

Publication number Publication date
CN113925512A (zh) 2022-01-14

Similar Documents

Publication Publication Date Title
US9526448B2 (en) State estimation device and state estimation program
EP1801730B1 (en) Method of detecting vehicle-operator state
US7835834B2 (en) Method of mitigating driver distraction
US8384534B2 (en) Combining driver and environment sensing for vehicular safety systems
US7253739B2 (en) System and method for determining eye closure state
KR20160110388A (ko) 운전자의 안전한 운전상태 검측 방법 및 장치
US20160272217A1 (en) Two-step sleepy driving prevention apparatus through recognizing operation, front face, eye, and mouth shape
CN108621794B (zh) 车辆的显示系统及车辆的显示系统的控制方法
EP2338416A1 (en) Line-of-sight direction determination device and line-of-sight direction determination method
JP4899059B2 (ja) 眠気検知装置
JPWO2008029802A1 (ja) 走行情報提供装置
EP2117432A2 (en) Anti-drowsing device and anti-drowsing method
WO2007092512A2 (en) Driver drowsiness and distraction monitor
JP2015207163A (ja) 状態推定装置、および状態推定プログラム
JP7154959B2 (ja) 走行状況判断情報基盤の運転者状態認識装置及び方法
JP2020191089A (ja) 顔生体の検出方法及び検出装置、電子機器、並びにコンピュータ読み取り可能な媒体
JP2017023519A (ja) 状態推定装置および状態推定プログラム
JP2009219555A (ja) 眠気検知装置、運転支援装置、眠気検知方法
CN113925512B (zh) 基于视野焦点的疲劳检测方法及装置
WO2014195821A1 (en) A light monitoring system, a glare prevention system, a vehicle and a method of monitoring glare
DE102019004692B3 (de) Vorrichtung und Verfahren zur Ermittlung von Bilddaten der Augen, von Augenpositionen und/oder einer Blickrichtung eines Fahrzeugnutzers in einem Fahrzeug
JP2019046141A (ja) 運転者監視装置、運転者監視方法、及びプログラム
Mašanović et al. Driver monitoring using the in-vehicle camera
Li et al. Vision-based estimation of driver drowsiness with ORD model using evidence theory
CN111267865B (zh) 基于视觉的安全驾驶预警方法、系统及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant