CN101035463A - 用于生成个体警戒水平指征的方法以及装置 - Google Patents

用于生成个体警戒水平指征的方法以及装置 Download PDF

Info

Publication number
CN101035463A
CN101035463A CNA2005800307428A CN200580030742A CN101035463A CN 101035463 A CN101035463 A CN 101035463A CN A2005800307428 A CNA2005800307428 A CN A2005800307428A CN 200580030742 A CN200580030742 A CN 200580030742A CN 101035463 A CN101035463 A CN 101035463A
Authority
CN
China
Prior art keywords
alarm level
gaze
indication
level indication
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2005800307428A
Other languages
English (en)
Inventor
布鲁诺·法博斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
BIOCOGNISAFE
Original Assignee
BIOCOGNISAFE
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BIOCOGNISAFE filed Critical BIOCOGNISAFE
Publication of CN101035463A publication Critical patent/CN101035463A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/163Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • B60K28/066Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver actuating a signalling device
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • G06V40/19Sensors therefor
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Medical Informatics (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Ophthalmology & Optometry (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Hospice & Palliative Care (AREA)
  • Developmental Disabilities (AREA)
  • Social Psychology (AREA)
  • Psychology (AREA)
  • Psychiatry (AREA)
  • Pathology (AREA)
  • Educational Technology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Chemical & Material Sciences (AREA)
  • Emergency Management (AREA)
  • Business, Economics & Management (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • Eye Examination Apparatus (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Road Signs Or Road Markings (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Manufacture, Treatment Of Glass Fibers (AREA)

Abstract

本发明公开了用于生成个体的警戒水平指征的方法和装置,其使用一注视获取单元提供该个体至少一只眼睛的注视数据流,一处理单元接收该注视数据流并确定警戒水平。

Description

用于生成个体警戒水平指征的方法以及装置
技术领域
本发明涉及认知系统领域。更确切地说,本发明属于个体警戒水平检测领域。
背景技术
尽管科学技术在发展,人类仍然需要完成复杂的任务,其中的小错误可能代价很高。错误可能例如由于疲劳/睡意而发生,在移动中的交通工具如一辆卡车的情况下,这种错误的结果可能是悲惨的。
已知使用各种方法来检测睡意。例如,在PERCLOS(眼睑闭合百分比)方法中,随着时间推移,对在瞳孔上的眼睑闭合百分比进行测量,并反映出慢的眼睑闭合而不是眨眼。令人遗憾的是,这种检测通常用处有限,因为,在这一刻已经太晚,以致于不能实施备选的策略,形势可能早就紧急了。因此需要可以预测睡意的方法以及装置。
另一个现有技术的方法中,使用EEG(脑电图)测量已知的、和被测者的睡意有关的超过30Hz的信号分量。令人遗憾的是这种方法是麻烦的。
所以需要有可以克服至少一个上述缺点的方法以及装置。
发明内容
本发明一个目的在于提供一种用于生成个体警戒水平指征的方法装置。
本发明另一个目的在于提供一种用于在个体警戒水平降低的情况下警告个体的方法以及装置。
本发明另一个目的在于提供一种用于预测个体睡意的方法以及装置。
根据本发明的第一方面,在此提供一种用于生成个体警戒水平指征的装置,该装置包括一注视获取单元,其提供该个体至少一个眼睛的注视数据流,一处理单元,其接收该注视数据流并使用该注视数据流确定警戒水平指征,以及一数据提供单元,其接收并提供该警戒水平指征。
根据本发明的另一个方面,在此提供一种用于生成个体警戒水平指征的方法,该方法包括获取该个体的多个注视方向,分析所得的该个体的多个注视方向以确定注视模式,并且使用该注视模式生成警戒水平指征。
根据本发明的另一个方面,在此提供一种用于预测个体睡意的方法,该方法包括获取该个体的多个注视方向,分析所获得的该个体的多个注视方向以确定注视模式,使用该注视模式生成警戒水平指征,并使用所述警戒水平的指征提供该个体的睡意指征。
附图说明
本发明的更多特征以及优点将从以下参照附图的详细说明中变得明显,其中:
图1是框图,显示一使用个体警戒水平指征的装置的实施方式;
图2是流程图,显示一根据警戒水平指征实施动作的实施方式;
图3是流程图,显示如何获取个体的多个注视方向;
图4是流程图,显示如何分析该个体的多个注视方向,以提供注视模式;和
图5是流程图,显示如何用上述模式生成警戒水平指征。
需要注意的是,所有附图中,相同的特征以相同的参考数字标记。
具体实施方式
睡意的定义,也称为困倦,可见于Santamaria和Chiappa“正常成人睡意的脑电图”《临床神经生理学杂志》,4,4,1987,327-379页。困倦也被Wright在“民用飞机舱上的警戒:在长距离飞行期间困倦和睡眠的产生以及生理参数上的相关变化”中称为“0.5水平”,《生物工程学》,44,1,82(25页)。虽然这两份最近的参考文献均揭示了困倦的定义,但是应当理解“困倦”的定义不应限于这些定义,熟悉技术的读者可以在相关的文献中找到其它困倦的定义。本说明书包括所有这类定义。
请参照图1,其中显示使用个体警戒水平指征的装置8的实施方式。
装置8包含图像获取单元10,其为注视获取单元的实施方式,处理单元12,数据提供单元14,用户界面16和存储单元18。
图像获取单元10适合于提供图像数据流信号,该信号为注视数据流的一个实施方式。该图像数据流信号包含个体的多个即时-空间图像。更确切地说,该即时-空间图像至少包含该个体的眼睛。经过预定,该即时-空间图像可以只包含该个体一只眼睛的图像。应当意识到,优选地,图像获取单元10是数字式黑白图像获取单元,为了在白天或夜晚检测该个体的眼睛,其还具有红外传感器。图像获取单元10提供的结果图像优选为从黑图像中减去白图像而获得。
处理单元12适合于使用图像获取单元10提供的图像数据流信号,以及使用存储单元18提供的恢复数据信号来提供该个体的警戒水平指征。处理单元12还适用于提供数据信号存入到存储单元18中。处理单元12选自现场可编程门阵列(FPGA),处理器,微控制器,专用电路等。
数据提供单元14接收警戒水平指征并提供检测信号给用户界面16。
用户界面16适于根据提供给用户界面16的检测信号,将信号提供给个体(或者以下讨论的另一个实体)。该信号可以是传感数据,其选自视频信号,听觉信号,刺激信号和移动信号。该用户界面16因此可以包含例如声音提供单元,显示单元,运动提供单元,移动电话,等等。熟悉技术的读者将意识到,现有的用以提供信息给个体—例如汽车中的LCD显示屏,汽车导航控制板等等—的用户界面,可以有利地用于提供信号给个体。
存储单元18适于存储数据信号,以及进一步提供以下所介绍的恢复数据信号。
参照图2,其中显示如何根据生成的警戒水平指征来执行动作。
根据步骤20,获取个体的多个注视方向。该多个注视方向通过图像获取单元10获取。
参照图3,其显示该个体的多个注视方向如何获取。
根据步骤30,获取具有瞬时位置的图像。该图像通过图像获取单元10获得。如上所述,获取的图像优选为从个体的黑图像(其中眼睛的瞳孔是黑色的)中减去个体的白图像(其中眼睛的瞳孔是白色的)而获得的结果图像。熟悉技术的读者将意识到这对于定位眼睛的瞳孔有巨大的优势。
根据步骤32,在获得的图像中,检测出眼睛相对于该个体头部的位置。该个体的眼睛位置由处理单元12检测。更确切地说,该眼睛的位置是用检测眼睛瞳孔的Kalman算法进行检测,其公开于“唇面实时跟踪”,计算机视觉和图形识别研讨会,Olivier,Pentland和Berard于波多黎各,1997年六月,123-129页。应当意识到,基于对眼睛位置的检测,每只眼睛与一X坐标和一Y坐标相关联,用于唯一地识别每只眼睛的位置。
根据步骤34,提供具有相应的瞬时位置指征的该眼睛的位置。该眼睛的位置被提供于存贮器中,图1未示。
再回到图2,根据步骤22,分析所获得的该个体的多个注视方向,以提供一注视模式。
参照图4,其显示如何分析获得的该个体的多个注视方向。
根据步骤40,在图像中提供了具有时间指征的该眼睛的位置。
根据步骤42,用所述眼睛的位置和时间指征确定眼注视位置。该眼注视位置通过处理单元12确定。
根据步骤44,使用处理单元12测定两眼位置之间的移动频率。
根据步骤46,使用测定的眼注视位置和测定的移动频率来形成一注视模式。
再回到图2,并根据步骤24,使用形成的注视模式生成警戒水平指征。
参见图5,其中显示如何用形成的模式生成警戒水平指征。
根据步骤50,将形成的模式与现有模式进行对比。应当了解,多个现有模式存储于存储单元18中。每个现有模式与警戒水平相关。事实上,已经预知在个体的警戒水平发生减少的情形下,α频率(可以用EEG测量)的数值增加,眼注视位置大致集中在一点,并且可以观察到眼睛扫视长度减少。此外,眼注视位置变得更加结构化,眼注视频率减少而眼注视位置的持续时间增加。因此,可以将个体警戒水平和分配给该个体的工作量关联起来,并且进一步和该个体的注视模式关联起来。
根据步骤52,利用该个体的注视模式与多个现有模式的比较结果确定警戒水平指征。该警戒水平指征通过处理单元12加以确定。更确切地说,该警戒水平是利用用于每个现有模式的相应警戒水平来选择的,该现有模式作为步骤50中执行比较的结果,是与该个体的现有模式接近的。使用超过一项相应的警戒水平,可以执行插补法。
当提供用于个体的警戒水平指征已经公开时,熟悉技术的读者也应当了解,用于个体的警戒水平的变化指征也可以被提供。同样地,熟悉技术的读者将意识到,警戒水平指征优选和相应瞬时位置的指征一同提供,图1中为了清楚之目的没有显示该瞬时位置。
根据步骤54,确定的警戒水平指征提供给数据提供单元。还应当理解,该确定的警戒水平指征也可以和相应的注视数据流模式一起提供给存储单元18。
再回到图2,根据步骤26,按照产生的警戒水平指征来执行动作。该动作依赖于各种标准,例如应用需求(application sought),警戒水平,警戒水平变化等等。举例而言,可为一警戒水平提供第一给定阈值,或可为该警戒水平的变化提供第二给定阈值。这种情况下,当该警戒水平变化达到第二给定阈值或者当警戒水平指征变得低于第一给定阈值时,则可以提供一信息信号。该信息信号可以包括警报信号。
该动作由个体的用户界面16执行。可选地,该动作可以在远端位置执行。
在一个选择性实施方式中,用于生成个体的警戒水平指征的该装置包括注视获取单元,其提供所述个体的至少一只眼睛的注视数据流,一处理单元,其接收和使用所提供的注视数据流以产生警戒水平指征,和数据提供单元,其接收和提供该警戒水平指征。该注视获取单元优选图象获取单元。在一个实施方式中,该处理单元使用接收到的随时间变化的注视数据流和一公式来产生警戒水平指征。此公式公开于“a new method for describing search patterns andquantifying visual load using eye movement data”,Chia-Fen Chi和Fang-TsanLin,International Journal of Industrial Ergonomics 19(1997)249-257,合并于此作为参考。
熟悉技术的读者将了解,所公开的实施方式可以用于许多个体警戒水平监视是至关重要的应用中,例如该个体是交通工具操作者的情况,该个体是工厂操作者的情况,该个体是发电厂操作者的情况,等等。
此外,熟悉技术的读者将了解,这种方法和装置可以检测睡意的早期阶段(睡眠阶段);即可以预测睡意。可以进行这种预测具有极大的优点,因为可以实施适当的措施而避免潜在性的,可能在此后的昏睡阶段发生的致命错误。该方法和装置也可以用于监测警戒水平随时间的演变,因此可以用于提供该个体剩余认知资源的信息指示。该剩余认知资源信息指示因而可能与事件/事故的风险指征相关。于是应当了解,各种警告信号可以随后提供给该个体。例如,可提供一定制的测试给该个体,以评定其认知能力。该个体也可以收到与警戒指征相配的情报/建议,例如停止汽车。同样地,一个操作者也可以收到关于该个体的信息,以在更大尺度上采取必要的措施。
虽然已经公开了数据提供单元14提供检测信号给用户界面16,应当了解,该检测信号可以通过至少下列一种方式提供给远端区域,即主体区域网(BAN),局域网(LAN),城市区域网(MAN)和广域网(WAN)。
虽然框图中的图解是作为离散组件的组群,它们通过不同的数据信号连接来互相联系,熟悉本领域技术的人士应当了解,优化的实施方式是通过软硬件组件的结合来提供的,具有一些执行软件或硬件系统的给定功能或操作的组件,和许多通过在计算机应用或操作系统中的数据通信来执行的数据通道图解。因此该结构图解可以用于有效启示此优化的实施方式。
应当注意,本发明可以作为方法执行,可以体现于系统中,电脑可读媒介物中,电信号或电-磁信号中。
以上描述的本发明的实施方式仅为示范。本发明的保护范围由所附的权利要求所限定。

Claims (32)

1、用于生成个体的警戒水平指征的方法,所述方法包括:
获取所述个体的多个注视方向;
分析所获得的所述个体的多个注视方向以确定注视模式;和
用所述注视模式生成所述警戒水平指征;和
提供所述被生成的所述警戒水平的指征。
2、如权利要求1所述的方法,其中获取所述个体的多个注视方向包括获取具有相应的瞬时位置指征的多个图像,在各获得的图像中检测所述个体的一只眼睛的位置,并提供具有所述相应的瞬时位置指征的所述检测到的眼睛位置用于每一获得的图像。
3、如权利要求2所述的方法,其中所述分析获得的多个注视方向包括使用所述检测到的位置确定所述眼睛的眼注视位置,并进一步确定至少两个连续的眼注视位置之间的移动频率。
4、如权利要求3所述的方法,其中所述生成警戒水平指征包括,将所述注视模式与多个现有注视模式加以比较,以提供所述警戒水平指征。
5、如权利要求1-4中任意一项所述的方法,其中所述生成警戒水平指征包括,将所述注视模式与多个现有注视模式加以比较,以提供所述警戒水平指征。
6、如权利要求14任意一项所述的方法,其中所述生成警戒水平指征包括,使用给定的随时间变化的公式计算所述警戒水平。
7、如权利要求1-4任意一项所述的方法,其中所述生成警戒水平指征还包括,将所述生成的警戒水平指征与给定标准比较。
8、如权利要求1-7中任意一项所述的方法,还包括,如果所述警戒水平指征低于给定阈值,则提供一信息信号。
9、如权利要求8所述的方法,其中所述信息信号包括警告信号。
10、如权利要求1-7中任意一项所述的方法,其中生成至少两个连贯的警戒水平,还包括在所述至少两个警戒水平之间提供变化指征。
11、如权利要求10所述的方法,还包括,如果所述变化超过给定阈值,则提供一信息信号。
12、如权利要求11所述的方法,其中所述信息信号包括警告信号。
13、如权利要求1-12中任意一项所述的方法,还包括存储具有所述注视模式的所述警戒水平指征。
14、如权利要求2所述的方法,其中,为每个所述的多个图像生成相应的黑图像和相应的白图像,进一步地,在每个获得的图像中对所述眼睛位置的检测是通过从所述黑图像中减去所述白图像而完成。
15、用于提供个体的警戒水平指征的装置,所述装置包括:
注视获取单元,其提供所述个体的至少一只眼睛的注视数据流;
处理单元,其接收所述注视数据流并使用所述注视数据流确定所述警戒水平指征;和
数据提供单元,其接收和提供所述警戒水平指征。
16、如权利要求15所述的装置,其中所述处理单元随着时间的推移接收所述注视数据流,并使用公式提供所述警戒水平指征。
17、如权利要求15所述的装置,还包括一存储单元,其包含多个现有注视模式,各现有注视模式包括眼注视位置和至少两个眼睛位置之间的移动频率,以及相应的警戒水平;进一步地,所述处理单元将确定的注视模式与所述多个现有模式中的至少一个加以比较,以确定所述警戒水平。
18、如权利要求15-17任意一项所述的装置,其中所述注视获取单元包括图像获取单元。
19、如权利要求18所述的装置,其中所述图像获取单元包括数字照相机,其提供一黑白图像数据流,和红外传感器。
20、如权利要求15-19任意一项所述的装置,还包括一用户界面,其接收所述警戒水平指征并根据所述警戒水平指征提供信号给所述个体。
21、如权利要求20所述的装置,其中所述提供的信号包括感觉信号。
22、如权利要求21所述的装置,其中所述感觉信号选自视觉信号,听觉信号,刺激信号和移动信号。
23、如权利要求17所述的装置,其中所述数据提供单元通过至少一个以下网络将所述警戒水平指征提供至远端区域:主体区域网(BAN),局域网(LAN),城域网(MAN)和广域网(WAN)。
24、用于预测个体睡意的方法,所述方法包括:
获取所述个体的多个注视方向;
分析获得的所述个体的多个注视方向以确定一注视模式;
用所述注视模式生成警戒水平指征;和
用所述警戒水平指征提供所述个体的睡意指征。
25、如权利要求24所述的方法,其中获取所述个体的多个注视方向包括获取具有相应的瞬时位置指征的多个图像,在各获得的图像中检测所述个体的一只眼睛的位置,并就每一获得的图像提供具有相应的瞬时位置指征的所述检测到的眼睛位置。
26、如权利要求25所述的方法,其中所述分析获得的多个注视方向包括使用所述检测到的位置确定所述眼睛的眼注视位置,并进一步确定至少两个连续的眼注视位置之间的移动频率。
27、如权利要求26所述的方法,其中所述生成警戒水平指征包括,将所述注视模式与多个现有注视模式加以比较,以提供所述警戒水平指征。
28、如权利要求24-26任意一项所述的方法,其中所述生成警戒水平指征包括,使用给定的随时间变化的公式计算所述警戒水平。
29、如权利要求24-28任意一项所述的方法,其中所述睡意指征的提供还包括,如果所述睡意指征超过给定阈值,则提供一警告信号。
30、如权利要求25所述的方法,其中,为每个所述的多个图像生成相应的黑图像和相应的白图像,进一步地,在每个获得的图像中对所述眼睛位置的检测是通过从所述黑图像中减去所述白图像而完成。
31、计算机可读的媒介物,包括计算机可读指令,其执行时使计算机实施权利要求1-14中任意一项所述的方法。
32、计算机可读的媒介物,包括计算机可读指令,其执行时使计算机实施权利要求24-30中任意一项所述的方法。
CNA2005800307428A 2004-09-13 2005-09-08 用于生成个体警戒水平指征的方法以及装置 Pending CN101035463A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/938,663 US7435227B2 (en) 2004-09-13 2004-09-13 Method and apparatus for generating an indication of a level of vigilance of an individual
US10/938,663 2004-09-13

Publications (1)

Publication Number Publication Date
CN101035463A true CN101035463A (zh) 2007-09-12

Family

ID=36033311

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2005800307428A Pending CN101035463A (zh) 2004-09-13 2005-09-08 用于生成个体警戒水平指征的方法以及装置

Country Status (10)

Country Link
US (1) US7435227B2 (zh)
EP (1) EP1799106B1 (zh)
JP (1) JP4845886B2 (zh)
CN (1) CN101035463A (zh)
AT (1) ATE437605T1 (zh)
AU (1) AU2005284627A1 (zh)
BR (1) BRPI0515251A (zh)
CA (1) CA2578226C (zh)
DE (1) DE602005015738D1 (zh)
WO (1) WO2006029506A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106055083A (zh) * 2015-04-02 2016-10-26 埃西勒国际通用光学公司 用于监测人的视觉行为的方法
CN107548483A (zh) * 2015-03-27 2018-01-05 法雷奥舒适驾驶助手公司 控制方法、控制装置、系统以及包括这样的控制装置的机动车辆

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7918807B2 (en) * 2005-08-17 2011-04-05 General Electric Company System, method and computer instructions for assessing alertness of an operator of an image review system
US20090089108A1 (en) * 2007-09-27 2009-04-02 Robert Lee Angell Method and apparatus for automatically identifying potentially unsafe work conditions to predict and prevent the occurrence of workplace accidents
EP2271251A4 (en) * 2008-04-14 2012-09-19 Univ Johns Hopkins SYSTEMS AND METHOD FOR CHECKING THE VESTIBULAR AND OKULOMOTOR FUNCTION
US8570176B2 (en) * 2008-05-28 2013-10-29 7352867 Canada Inc. Method and device for the detection of microsleep events
CN103340637B (zh) * 2013-06-06 2016-04-06 同济大学 基于眼动与脑电融合的驾驶员警觉度智能监控系统及方法
US10037080B2 (en) 2016-05-31 2018-07-31 Paypal, Inc. User physical attribute based device and content management system
US9798385B1 (en) * 2016-05-31 2017-10-24 Paypal, Inc. User physical attribute based device and content management system
DE102018209717A1 (de) * 2018-06-15 2019-12-19 Siemens Healthcare Gmbh Verfahren zur Steuerung des Betriebs einer Medizintechnikeinrichtung, Medizintechnikeinrichtung, Computerprogramm und elektronisch lesbarer Datenträger
US20200135315A1 (en) * 2018-10-31 2020-04-30 Waste Repurposing International, Inc. Unsaleable Pharmaceutical Item Handling and Disposal Systems, Methods, and Devices
US11661195B2 (en) * 2019-03-13 2023-05-30 Federal Express Corporation Mitigating operational risk in aircraft
SE544806C2 (en) * 2020-04-09 2022-11-22 Tobii Ab Driver alertness detection method, device and system
EP4210568A1 (en) 2020-09-11 2023-07-19 Harman Becker Automotive Systems GmbH System and method for determining cognitive demand
US20220117517A1 (en) 2020-10-19 2022-04-21 Harman Becker Automotive Systems Gmbh System and method for determining heart beat features
US20240260872A1 (en) 2021-05-28 2024-08-08 Harman International Industries, Incorporated System and method for quantifying a mental state

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01158579A (ja) * 1987-09-09 1989-06-21 Aisin Seiki Co Ltd 像認識装置
US5360971A (en) * 1992-03-31 1994-11-01 The Research Foundation State University Of New York Apparatus and method for eye tracking interface
JP3293308B2 (ja) * 1994-03-10 2002-06-17 三菱電機株式会社 人物状態検出装置
JP3257310B2 (ja) * 1994-12-22 2002-02-18 トヨタ自動車株式会社 漫然運転検出装置
US5570698A (en) * 1995-06-02 1996-11-05 Siemens Corporate Research, Inc. System for monitoring eyes for detecting sleep behavior
JP3739113B2 (ja) * 1995-07-10 2006-01-25 日産ディーゼル工業株式会社 覚醒度低下検出装置
JP3426060B2 (ja) * 1995-07-28 2003-07-14 三菱電機株式会社 顔画像処理装置
JP3455627B2 (ja) * 1996-03-22 2003-10-14 日産ディーゼル工業株式会社 車両における覚醒度低下検出装置
US6542081B2 (en) 1996-08-19 2003-04-01 William C. Torch System and method for monitoring eye movement
US6070098A (en) * 1997-01-11 2000-05-30 Circadian Technologies, Inc. Method of and apparatus for evaluation and mitigation of microsleep events
JP3509839B2 (ja) * 1997-03-31 2004-03-22 三菱自動車工業株式会社 覚醒度推定装置
JP3480483B2 (ja) * 1997-03-31 2003-12-22 三菱自動車工業株式会社 覚醒度推定装置
JPH1134688A (ja) * 1997-07-15 1999-02-09 Omron Corp 車両運転業務従事者の心身情報監視システム及び安全運行管理システム
US5892837A (en) * 1997-08-29 1999-04-06 Eastman Kodak Company Computer program product for locating objects in an image
AUPO980197A0 (en) 1997-10-15 1997-11-06 Millennium Electronics Pty. Limited Alert device
WO1999018842A1 (en) * 1997-10-16 1999-04-22 The Board Of Trustees Of The Leland Stanford Junior University Method for inferring mental states from eye movements
WO2001074236A1 (en) 2000-03-31 2001-10-11 University Technologies International Inc. A diagnostic test for attention deficit hyperactivity disorder
JP4696339B2 (ja) * 2000-07-11 2011-06-08 マツダ株式会社 車両の制御装置
US7011410B2 (en) * 2000-11-22 2006-03-14 Eyetect, L.L.C. Method and apparatus for monitoring eye tremor
JP4162375B2 (ja) * 2000-12-01 2008-10-08 日産ディーゼル工業株式会社 車両安全運行管理装置
US7027621B1 (en) * 2001-03-15 2006-04-11 Mikos, Ltd. Method and apparatus for operator condition monitoring and assessment
JP2002331850A (ja) * 2001-05-07 2002-11-19 Nissan Motor Co Ltd 運転行動意図検出装置
IL143597A0 (en) 2001-06-06 2002-04-21 Suchard Eytan Method and apparatus for inferring physical/mental fitness through eye response analysis
JP2002370559A (ja) * 2001-06-18 2002-12-24 Nisshin Seifun Group Inc 自動車用居眠り防止装置
US6927694B1 (en) * 2001-08-20 2005-08-09 Research Foundation Of The University Of Central Florida Algorithm for monitoring head/eye motion for driver alertness with one camera
WO2003070093A1 (en) * 2002-02-19 2003-08-28 Volvo Technology Corporation System and method for monitoring and managing driver attention loads
CN100398065C (zh) * 2002-10-15 2008-07-02 沃尔沃技术公司 解释对象的头部和眼睛活动的方法和装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107548483A (zh) * 2015-03-27 2018-01-05 法雷奥舒适驾驶助手公司 控制方法、控制装置、系统以及包括这样的控制装置的机动车辆
CN107548483B (zh) * 2015-03-27 2021-06-08 法雷奥舒适驾驶助手公司 控制方法、控制装置、系统以及包括这样的控制装置的机动车辆
CN106055083A (zh) * 2015-04-02 2016-10-26 埃西勒国际通用光学公司 用于监测人的视觉行为的方法
CN106055083B (zh) * 2015-04-02 2019-06-07 依视路国际公司 用于监测人的视觉行为的方法

Also Published As

Publication number Publication date
WO2006029506A1 (en) 2006-03-23
EP1799106A4 (en) 2008-02-13
BRPI0515251A (pt) 2008-07-15
EP1799106B1 (en) 2009-07-29
US20060055546A1 (en) 2006-03-16
US7435227B2 (en) 2008-10-14
CA2578226C (en) 2014-06-17
JP2008512153A (ja) 2008-04-24
ATE437605T1 (de) 2009-08-15
CA2578226A1 (en) 2006-03-23
EP1799106A1 (en) 2007-06-27
AU2005284627A1 (en) 2006-03-23
JP4845886B2 (ja) 2011-12-28
DE602005015738D1 (de) 2009-09-10

Similar Documents

Publication Publication Date Title
CN101035463A (zh) 用于生成个体警戒水平指征的方法以及装置
Ahlstrom et al. Processing of eye/head-tracking data in large-scale naturalistic driving data sets
DE102017113747B4 (de) Dynamische anpassung von radarparametern
Morando et al. A reference model for driver attention in automation: Glance behavior changes during lateral and longitudinal assistance
CN108647437A (zh) 一种自动驾驶汽车评价方法及评价系统
CN104442566B (zh) 一种车内乘员危险状态报警装置及报警方法
CN105286802A (zh) 基于视频信息的驾驶员疲劳检测方法
CN202568277U (zh) 疲劳检测装置
CN111661059A (zh) 分心驾驶监测方法、系统及电子设备
CN106022291A (zh) 一种基于神经信号的紧急状态下驾驶员刹车意图检测方法
Kutila et al. Driver cognitive distraction detection: Feature estimation and implementation
Kumar et al. Detecting distraction in drivers using electroencephalogram (EEG) signals
CN201821451U (zh) 一种驾驶员踏板操作行为的测量装置
WO2018213581A1 (en) Deceleration alert device and method
CN111062300A (zh) 驾驶状态检测方法、装置、设备及计算机可读存储介质
CN102269656B (zh) 一种驾驶员踏板操作行为的测量装置及其监测方法
CN109886100A (zh) 一种基于区域生成网络的行人检测系统
Dehzangi et al. Unobtrusive driver drowsiness prediction using driving behavior from vehicular sensors
DE102013013166A1 (de) Kraftwagen mit Head-up-Anzeige und zugehöriger Gestenbedienung
EP3934929B1 (de) Verfahren zur klassifizierung von objekten innerhalb eines kraftfahrzeugs
Zhou et al. Characterization of the lateral control performance by human drivers on highways
CN1675086A (zh) 用于检测座椅的占用状况的方法和装置
CN105852887A (zh) 方向盘、疲劳检测系统及方法
Bongiorno et al. Analysis of different visual strategies of'isolated vehicle'and'disturbed vehicle'
Hong et al. Influence of visual environments on struck-by hazards for construction equipment operators through virtual eye-tracking

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1114319

Country of ref document: HK

C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication
REG Reference to a national code

Ref country code: HK

Ref legal event code: WD

Ref document number: 1114319

Country of ref document: HK