CN106326912B - 使用者疲劳度分析部件 - Google Patents

使用者疲劳度分析部件 Download PDF

Info

Publication number
CN106326912B
CN106326912B CN201610507064.XA CN201610507064A CN106326912B CN 106326912 B CN106326912 B CN 106326912B CN 201610507064 A CN201610507064 A CN 201610507064A CN 106326912 B CN106326912 B CN 106326912B
Authority
CN
China
Prior art keywords
user
parameter
real
time
fatigue strength
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610507064.XA
Other languages
English (en)
Other versions
CN106326912A (zh
Inventor
M·罗尔
C·巴劳
T·维莱特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
EssilorLuxottica SA
Original Assignee
Essilor International Compagnie Generale dOptique SA
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Essilor International Compagnie Generale dOptique SA filed Critical Essilor International Compagnie Generale dOptique SA
Publication of CN106326912A publication Critical patent/CN106326912A/zh
Application granted granted Critical
Publication of CN106326912B publication Critical patent/CN106326912B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/25—Fusion techniques
    • G06F18/251—Fusion techniques of input or preprocessed data
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1103—Detecting eye twinkling
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/163—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/4806—Sleep evaluation
    • A61B5/4815—Sleep quality
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6801—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient specially adapted to be attached to or worn on the body surface
    • A61B5/6802—Sensor mounted on worn items
    • A61B5/6803—Head-worn items, e.g. helmets, masks, headphones or goggles
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271—Specific aspects of physiological measurement analysis
    • A61B5/7282—Event detection, e.g. detecting unique waveforms indicative of a medical condition
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02—Alarms for ensuring the safety of persons
    • G08B21/06—Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2560/00—Constructional details of operational features of apparatus; Accessories for medical measuring apparatus
    • A61B2560/02—Operational features
    • A61B2560/0242—Operational features adapted to measure environmental factors, e.g. temperature, pollution
    • G—PHYSICS
    • G08—SIGNALLING
    • G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B31/00—Predictive alarm systems characterised by extrapolation or other computation using updated historic data

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Surgery (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Biomedical Technology (AREA)
  • Public Health (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Psychiatry (AREA)
  • Developmental Disabilities (AREA)
  • Child & Adolescent Psychology (AREA)
  • Educational Technology (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • Physiology (AREA)
  • General Physics & Mathematics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Ophthalmology & Optometry (AREA)
  • Dentistry (AREA)
  • Artificial Intelligence (AREA)
  • Emergency Management (AREA)
  • Business, Economics & Management (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Signal Processing (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • General Engineering & Computer Science (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明提供了一种使用者疲劳度分析部件，包括：‑被配置成用于存储多个计算机可执行指令的存储器；以及‑用于执行这些计算机可执行指令的处理器，其中，这些计算机可执行指令包括用于进行以下操作的指令：‑接收指示该使用者的实时视觉行为的至少一个视觉行为参数，‑提供指示该使用者的睡眠质量历史记录的至少一个睡眠质量历史记录参数，‑基于对该至少一个视觉行为参数和该至少一个睡眠质量历史记录参数的组合的分析来确定该使用者的疲劳度。

Description

使用者疲劳度分析部件
技术领域
本发明涉及一种使用者疲劳度分析部件、一种实时视觉行为测量装置以及一种用于确定使用者的疲劳度的方法。
背景技术
在许多情况下，确定使用者的疲劳度可能是有用的。
例如，一些活动需要很高的集中度。能够给进行这样的活动的使用者或第三方提供该使用者的疲劳度的指示是有用的。事实上，已观察到，在进行活动时行为的改变可能在该活动的成就方面导致非常不同的结果。
通常，当一个人驾驶时，分析此人的疲劳度可能是非常有用的，以便在所确定的疲劳度大于阈值并且驾驶表现出风险时提供警报。
因此，需要一种用于准确地确定人的疲劳度的系统。
本发明的一个目的是提供这样的装置以及提供这样的确定的方法。
发明内容
为此，本发明提出了一种使用者疲劳度分析部件，该使用者疲劳度分析部件包括：
-被配置成用于存储多个计算机可执行指令的存储器；以及
-用于执行这些计算机可执行指令的处理器，其中，这些计算机可执行指令包括用于进行以下操作的指令：
-接收指示活动中的使用者的实时视觉行为的至少一个视觉行为参数，
-提供指示该使用者的睡眠质量历史记录的至少一个睡眠质量历史记录参数，该睡眠质量历史记录是当该使用者在睡眠时例如使用与该使用者相关的客观测量值确定的，
-基于对该至少一个视觉行为参数和该至少一个睡眠质量历史记录参数的组合的分析来确定该使用者的疲劳度。
有利地，基于对该使用者的实时视觉行为和该使用者的睡眠质量历史记录的组合的分析来确定该使用者的疲劳度提供了对该使用者的疲劳度的高度准确的估计。
实际上，诸位发明人已经观察到，人的实时视觉行为可以非常精确地关联使用者的疲劳度，然而，实时视觉行为与睡眠质量历史记录的组合提高了指示使用者的疲劳度的准确度。
根据可以单独或组合地考虑的另外多个实施例：
-该视觉行为参数至少与该使用者的眼睑活动相关；和/或
-这些计算机可执行指令进一步包括用于进行以下操作的指令
o接收与该使用者的头部的实时移动相关的实时头部移动数据，并且
o鉴于该实时头部移动数据来确定该疲劳度；和/或
-这些计算机可执行指令进一步包括用于进行以下操作的指令：
o接收与该使用者的环境的至少一个实时参数相关的实时环境数据，并且
o鉴于该实时环境数据来确定该疲劳度；和/或
-该使用者的环境的实时参数与由该使用者接收到的光的特征相关，所述特征包括时间特征、光谱特征、光的强度中的至少一者；和/或
-该使用者的环境的实时参数与该使用者的环境的温度和/或噪声和/或当天的时间相关；和/或
-这些计算机可执行指令进一步包括用于进行以下操作的指令：
o接收与该使用者的生理的至少一个实时参数相关的实时生理数据，并且
o鉴于该实时生理数据来确定该疲劳度；和/或
-该使用者的生理的实时参数与该使用者的出汗和/或该使用者的脉搏和/或该使用者的呼吸节奏和/或该使用者的肌肉痉挛相关；和/或
-这些计算机可执行指令进一步包括用于进行以下操作的指令：
o接收与该使用者的生活习惯的至少一个参数相关的生活习惯数据，并且
o基于该生活习惯数据来调节该疲劳度；和/或
-该使用者的生活习惯的参数与该使用者的饮食习惯和/或该使用者的身体活动习惯和/或该使用者的生活节奏相关；和/或
-该睡眠质量历史记录参数至少与该使用者的睡眠周期效率历史记录相关；和/或
-该睡眠质量历史记录参数至少与睡眠生理数据相关，该睡眠生理数据与该使用者睡眠时的生理的至少一个参数相关，并且这些计算机可执行指令进一步包括鉴于该实时生理数据来确定该疲劳度的多个指令；和/或
-该使用者睡眠时的生理的参数与该使用者睡眠时的呼吸和/或该使用者睡眠时的移动和/或该使用者睡眠时的脉搏和/或该使用者睡眠时发出的声音相关；和/或
-该睡眠质量历史记录参数至少与睡眠环境数据相关，该睡眠环境数据与该使用者睡眠时的环境的至少一个参数相关，并且这些计算机可执行指令进一步包括鉴于该睡眠环境数据来确定该疲劳度的多个指令；和/或
-该使用者睡眠时的环境的参数与该使用者的睡眠环境的温度和/或该使用者的睡眠环境的噪声和/或该使用者的睡眠环境的由该使用者接收到的光的特征相关，所述睡眠环境的光包括时间特征、光谱特征、光的强度中的至少一者；和/或
-这些计算机可执行指令进一步包括用于进行以下操作的指令：
o接收来自该使用者关于其疲劳度的反馈，并且
o调节对用于确定该疲劳的该至少一个视觉行为参数和该至少一个睡眠质量历史记录参数的组合的分析，这种调节基于来自该使用者的反馈。
本发明进一步涉及一种实时视觉行为测量装置，该实时视觉行为测量装置包括被配置成用于实时测量指示使用者的视觉行为的至少一个视觉行为参数的至少一个传感器以及被配置成用于将所测量的实时视觉行为参数传达给根据本发明的使用者疲劳度分析部件的通信单元。
本发明进一步涉及一种组件，该组件包括根据本发明的使用者疲劳度分析部件和实时视觉行为测量装置，该实时视觉行为测量装置包括被配置成用于实时地测量指示使用者的视觉行为的至少一个视觉行为参数的至少一个传感器以及被配置成用于将所测量的实时视觉行为参数传达给该使用者疲劳度分析部件的通信单元。
该实时视觉行为测量装置可以是被安排成戴在该使用者的头部上的头戴式装置。
本发明还涉及一种用于确定使用者的疲劳度的系统，该系统包括：
-根据本发明的实时视觉行为测量装置，
-存储指示该使用者的睡眠质量的睡眠质量参数的存储器，
-根据本发明的使用者疲劳度分析部件。
本发明进一步涉及一种用于确定使用者的疲劳度的方法，该方法包括：
-实时视觉行为测量步骤，在该步骤过程中，实时测量指示该使用者的视觉行为的至少一个视觉行为参数，
-睡眠质量历史记录参数提供步骤，在该步骤过程中，提供指示该使用者的睡眠质量历史记录的至少一个睡眠质量历史记录参数，
-分析步骤，在该步骤过程中，基于对该至少一个视觉行为参数和该至少一个睡眠质量历史记录参数的组合的分析来确定该使用者的疲劳度。
根据可以单独或组合地考虑的另外多个实施例：
-该视觉行为参数至少与该使用者的眼睑活动相关；和/或
-该方法进一步包括：
o实时头部移动数据测量步骤，在该步骤过程中，实时测量与该使用者的头部的移动相关的实时头部移动数据，并且
o在该分析步骤过程中，鉴于该实时头部移动数据来确定该疲劳度；和/或
-该方法进一步包括：
o实时环境数据测量步骤，在该步骤过程中，实时测量与该使用者的环境的至少一个参数相关的实时环境数据，并且
o在该分析步骤过程中，鉴于该实时环境数据来确定该疲劳度；和/或
-该使用者的环境的参数与由该使用者接收到的光的特征相关，所述特征包括时间特征、光谱特征、光的强度中的至少一者；和/或
-该使用者的环境的参数与该使用者的环境的温度和/或噪声和/或当天的时间相关；和/或
-该方法进一步包括：
-实时生理数据测量步骤，在该步骤过程中，实时测量与该使用者的生理的至少一个参数相关的实时生理数据，并且
-在该分析步骤过程中，鉴于该实时生理数据来确定该疲劳度；和/或
-该使用者的生理的参数与该使用者的出汗和/或该使用者的脉搏和/或该使用者的呼吸节奏和/或该使用者的肌肉痉挛相关；和/或
-该方法进一步包括
o生活习惯数据提供步骤，在该步骤过程中，提供与该使用者的生活习惯的至少一个参数相关的生活习惯数据，并且
o在该分析步骤过程中，基于该生活习惯数据来调节该疲劳度；和/或
-该使用者的生活习惯的参数与该使用者的饮食习惯和/或该使用者的身体活动习惯和/或该使用者的生活节奏相关；和/或
-该睡眠质量历史记录参数至少与该使用者的睡眠周期效率历史记录相关；和/或
-该睡眠质量历史记录参数至少与睡眠生理数据相关，该睡眠生理数据与该使用者睡眠时的生理的至少一个参数相关，并且在该分析步骤过程中，鉴于该实时生理数据来确定该疲劳度；和/或
-该使用者睡眠时的生理的参数与该使用者睡眠时的呼吸和/或该使用者睡眠时的移动和/或该使用者睡眠时的脉搏和/或该使用者睡眠时发出的声音相关；和/或
-该睡眠质量历史记录参数至少与睡眠环境数据相关，该睡眠环境数据与该使用者睡眠时的环境的至少一个参数相关，并且在该分析步骤过程中，鉴于该睡眠环境数据来确定该疲劳度；和/或
-该使用者睡眠时的环境的参数与该使用者的睡眠环境的温度和/或该使用者的睡眠环境的噪声和/或该使用者的睡眠环境的由该使用者接收到的光的特征相关，所述睡眠环境的光包括时间特征、光谱特征、光的强度中的至少一者。
本发明进一步涉及一种计算机程序产品，该计算机程序产品包括一个或多个存储的指令序列，这些指令序列是处理器可访问的、并且在被该处理器执行时致使该处理器实施根据本发明的方法的步骤。
本发明还涉及一种计算机可读存储介质，该计算机可读存储介质具有记录在其上的程序；其中，该程序使该计算机执行本发明的方法。
本发明进一步涉及一种包括处理器的装置，该处理器被适配成用于存储一个或多个指令序列并且实施根据本发明的方法的步骤中的至少一个步骤。
如从以下讨论中明显的是，除非另有具体规定，否则应认识到，贯穿本说明书，使用了如“计算”、“运算”等术语的讨论是指计算机或计算系统或类似的电子计算装置的动作和/或过程，该动作和/或过程对于在该计算系统的寄存器和/或存储器内表示为物理(如电子)量的数据进行操纵和/或将其转换成在该计算系统的存储器、寄存器或其他此类信息存储、传输或显示设备内类似地表示为物理量的其他数据。
本发明的实施例可以包括用来执行在此所述操作的设备。此设备可以是为所期望的目的而专门构建的，或此设备可以包括通用计算机或被储存在计算机中的计算机程序选择性地激活或重新配置的数字信号处理器(“DSP”)。这种计算机程序可以存储在计算机可读存储介质中，如但不限于任何类型的磁盘，包括软盘、光盘、CD-ROM、磁光盘、只读存储器(ROM)、随机存取存储器(RAM)、电可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)、磁性或光学卡，或任何其他类型的适合于存储电子指令并且能够耦联到计算机系统总线上的介质。
此处所提出的方法和显示器并非本来就与任何具体的计算机或其他装置相关。不同通用系统都可以与根据此处的传授内容的程序一起使用，或者其可以证明很方便地构建更专用的装置以执行所希望的方法。
各种这些系统所希望的结构将从以下描述中得以明了。此外，本发明的实施例并没有参照任何具体的编程语言而进行描述。将认识到的是，各种编程语言都可以用来实现如在此描述的本发明的传授内容。
附图说明
现将仅以示例方式并且参考以下附图对本发明的实施例进行描述，在附图中：
-图1是根据本发明的使用者疲劳度分析部件的示意性表示；
-图2是根据本发明的方法的流程的图示；并且
-图3是根据本发明的实时行为测试装置的表示。
具体实施方式
附图中的元件仅是为了简洁和清晰而展示的并且不一定是按比例绘制的。例如，图中的某些元件的尺寸可以相对于其他尺寸被放大，以便帮助提高对本发明的实施例的理解。
如图1上所展示的，本发明涉及一种使用者疲劳度分析部件10。该疲劳度分析部件可以包括：
-通信模块12，
-存储器14，以及
-处理器16。
通信模块12可以被安排成用于接收数据。例如，该数据可以是指示疲劳度分析部件的使用者的视觉行为参数的实时视觉行为数据。
实时视觉行为数据通常由多个传感器测量出并且被发送到通信模块12。这些传感器可以通过导线连接到该通信模块，或者通信可以是无线的。无线通信可以使用不同的通信协议，如蓝牙、紫蜂、WiFi或其他。
该通信模块可以进一步接收指示至少一个睡眠质量参数的睡眠历史记录数据。
该睡眠历史记录数据可以存储在远程实体中。该远程实体可以包括不同的存储对象，如个人数字助理、音频/视频装置、移动电话、MPEG-1、音频层3(MP3)播放器、个人计算机、膝上型计算机、平板、蓝牙耳机、手表、手环等。
与该远程实体的通信一般是无线通信或通过互联网。该远程实体可以是Web服务器、文件服务器、媒体服务器等，通信模块经由多种已知协议中的任一种协议(如超文本传送协议(HTTP))来与这些服务器通信。
存储器14存储有待由处理器16来执行的多个计算机可执行指令。
存储器14还可以存储指示该疲劳度分析部件的使用者的至少一个睡眠质量参数的睡眠历史数据。
处理器16被配置成用于执行存储在存储器14中的这些计算机可执行指令的至少一部分。
这些计算机可执行指令包括使该处理器实施本发明的方法的多个指令。
如图2上所展示的，本发明的方法至少包括：
-实时视觉行为接收步骤S1，
-睡眠质量历史记录参数提供步骤S2，以及
-分析步骤S4，
在实时视觉行为测量步骤S1过程中，实时接收指示使用者的视觉行为的至少一个视觉行为参数。典型地，该视觉行为参数可以由至少一个传感器实时测量，并且所测量的参数实时发送到使用者疲劳度分析部件。
例如，视觉行为参数可以至少与使用者的眼睑活动(例如打开频率和打开力度或近会聚点的偏移)相关。
在本发明的意义上，“实时”是指在同一时间或以小于或等于几秒的时移测量和发送使用者的视觉行为参数的事实。
在睡眠质量历史记录参数提供步骤S2过程中，将指示使用者的睡眠质量历史记录的至少一个睡眠质量历史记录参数提供至使用者疲劳度分析部件。
该睡眠质量历史记录参数可以通过由使用者提供的主观指示来确定。例如，使用者可以每天早晨提供关于晚上的睡眠质量的指示，如取决于使用者对其睡眠质量的感觉的等级。
可以使用睡眠时与使用者相关的客观测量值来确定睡眠质量历史记录。
例如，发明人已经观察到，与使用者的睡眠周期效率历史记录相关的睡眠质量历史记录参数在确定使用者的疲劳度时是高度相关的。
睡眠质量历史记录参数可以至少与睡眠生理数据相关，睡眠生理数据与使用者睡眠时的生理的至少一个参数相关。
可以例如通过测量使用者睡眠时的呼吸和/或使用者睡眠时的移动和/或使用者睡眠时的脉搏和/或使用者睡眠时发出的声音来获得该睡眠生理数据。
使用者睡眠时的环境可能影响使用者的睡眠质量。因此，根据本发明的实施例，睡眠质量历史记录参数至少与睡眠环境数据相关，睡眠环境数据与使用者睡眠时的环境的至少一个参数相关。
例如，使用者睡眠时的环境的参数可以与使用者的睡眠环境的温度和/或使用者的睡眠环境的噪声和/或使用者的睡眠环境的由使用者接收到的光的特征相关，所述睡眠环境的光包括时间特征、光谱特征、光的强度中的至少一者。
为了提高疲劳度确定的准确度，睡眠环境的光可以与睡眠周期中使用者接收到这样的光时的定时进行组合。
在分析步骤S4过程中，基于对视觉行为参数和睡眠质量历史记录参数的组合的分析来确定使用者的疲劳度。
如先前所指示的，组合实时视觉行为和睡眠质量历史记录有助于提高确定使用者的疲劳度的准确度和精确度。
本发明的方法可以进一步包括过去疲劳度提供步骤，在该步骤过程中，提供表示使用者的过去疲劳度的数据。在分析步骤S4过程中，这样的过去疲劳度可以被考虑用于更准确地确定使用者的疲劳度。例如，考虑使用者最近是否已具有高疲劳度可以用于提高本发明的方法的准确度。为了甚至更多地提高本发明的方法的准确度和精确度，该方法可以包括测量并提供另外的实时参数。
如图2所展示的，本发明的方法可以进一步包括：
-实时头部移动数据测量步骤S31，和/或
-实时环境数据测量步骤S32，和/或
-实时生理数据测量步骤S33，和/或
-生活习惯数据提供步骤S34。
在实时头部移动数据测量步骤S31过程中，实时测量和提供与使用者的头部的移动相关的实时头部移动数据。在该分析步骤过程中，可以鉴于该实时头部移动数据来确定疲劳度。
典型地，实时头部移动可以与使用者的疲劳度关联。例如，头部歪斜或者缓慢下降和突然抬起可以提供疲劳度增大的指示。
当确定疲劳度时还可以考虑到使用者的实时环境。在实时环境数据测量步骤S32过程中，实时测量与使用者的环境的至少一个参数相关的实时环境数据。
在该分析步骤过程中，可以鉴于该实时环境数据来确定疲劳度。
例如，使用者的环境的参数可以与由使用者实时接收到的光的特征相关，所述特征包括时间特征、光谱特征、以及光的强度中的至少一者。
使用者的环境的另外的参数可以被视为是使用者的环境的温度和/或噪声和/或当天的时间。
其他实时生理参数可以与使用者的疲劳度相关。在实时生理数据测量步骤S33过程中，实时测量与使用者的生理的至少一个参数相关的实时生理数据。
在该分析步骤过程中，可以鉴于该实时生理数据来确定疲劳度。
使用者的生理的参数可以与使用者的出汗和/或使用者的脉搏和/或使用者的呼吸节奏和/或使用者的肌肉痉挛相关。
在确定/预测使用者的疲劳度时，使用者的生活习惯可能是相关的。在生活习惯数据提供步骤S34过程中，提供与使用者的生活习惯的至少一个参数相关的生活习惯数据。
在分析步骤S4过程中，基于该生活习惯数据来调节疲劳度。
典型地，使用者的生活习惯与使用者的饮食习惯和/或使用者的身体活动习惯和/或使用者的生活节奏和能够对使用者的疲劳度产生影响的任何其他生活习惯参数相关。
本发明的方法可以进一步包括反馈步骤，在该步骤过程中，使用者提供关于其当前疲劳度的反馈，例如使用疲劳度比例。
可以基于来自使用者的反馈来调节对用于确定疲劳度的至少一个视觉行为参数和至少一个睡眠质量历史记录参数的组合的分析。有利地，这样的反馈使使用者可以定制分析并且因此有助于提高本发明的方法和/或疲劳度分析部件的准确度。
如图3所表示的，本发明进一步涉及实时视觉行为测量装置20。该实时视觉行为测量装置包括被配置成用于实时测量指示使用者的视觉行为的至少一个视觉行为参数的至少一个传感器32以及被配置成用于将所测量的实时视觉行为参数传达给根据本发明的使用者疲劳度分析部件10的通信单元38。
在图3所表示的实例中，实时视觉行为测量装置20是头戴式装置，该头戴式装置包括旨在被戴在使用者的头部上的框架。
另外，在图3的实例中，使用者疲劳度分析部件10嵌入在实时视觉行为测量装置20中。
本发明并不限于这样的实施例；具体地，使用者疲劳度分析部件10可以是在使该实时视觉行为测量装置与该通信单元通信的远程实体中。
该远程实体可以包括不同的计算对象，如个人数字助理、音频/视频装置、移动电话、MPEG-1、音频层3(MP3)播放器、个人计算机、膝上型计算机、平板、蓝牙耳机、手表、手环等。
通过不同的通信装置和协议(像蓝牙、紫蜂、WiFi、或其他)可以完成通信。
取决于有待考虑的实时参数的类型，实时视觉行为测量装置20可以包括不同类型的传感器。
典型地，实时视觉行为测量装置20可以包括头部移动检测传感器30，该头部移动检测传感器可以包括被配置成用于感测使用者的头部的取向和位置以及取向和位置的变化的加速度计和/或陀螺仪和/或罗盘。
头部移动检测部件30可以被放置在实时视觉行为测量装置20的框架24上，在图3所展示的。
实时视觉行为测量装置可以进一步包括被安排成用于测量使用者的眼睛移动和活动的眼睛行为传感器32，如眼睛跟踪装置32。
该实时行为测量装置可以进一步包括光传感器18，该光传感器被安排成用于测量光的特征，如时间特征、光谱特征以及强度特征。
图3上表示的头戴式装置20还可以包括两个光学镜片22。这些光学镜片22可以符合使用者的光学处方。这些光学镜片22还可以是具有光学功能的有源镜片，这些有源镜片可以例如适应于使用者的需求。
以上已经借助于实施例描述了本发明，这些实施例并不限制本发明的发明构思。
对于参考了以上说明的实施例的本领域技术人员来说，还可以提出很多进一步的修改和变化，这些实施例仅以实例方式给出，无意限制本发明的范围，本发明的范围仅由所附权利要求书予以限定。
在权利要求书中，词“包括”不排除其他的元件或步骤，并且不定冠词“一个(a)”或“一个(an)”不排除多个。不同的特征在相互不同的从属权利要求中被引用的单纯事实并不表示不能有利地使用这些特征的组合。权利要求书中的任何参考符号都不应被解释为限制本发明的范围。

Claims (13)

1.一种使用者疲劳度分析部件，包括：
-被配置成用于存储多个计算机可执行指令的存储器；以及
-用于执行这些计算机可执行指令的处理器，其中，这些计算机可执行指令包括用于进行以下操作的指令：
-接收指示活动中的使用者的实时视觉行为的至少一个视觉行为参数，
-接收与该使用者的头部的实时移动相关的实时头部移动数据，
-接收与该使用者的生活习惯的至少一个参数相关的生活习惯数据，
-提供指示该使用者的睡眠质量历史记录的至少一个睡眠质量历史记录参数，该睡眠质量历史记录是当该使用者在睡眠时确定的，
-基于对该至少一个视觉行为参数、该至少一个睡眠质量历史记录参数和该实时头部移动数据的组合的分析来确定该使用者的疲劳度，以及
-基于该生活习惯数据来调节该疲劳度。
2.根据权利要求1所述的部件，其中，该视觉行为参数至少与该使用者的眼睑活动相关。
3.根据权利要求1或2所述的部件，其中，这些计算机可执行指令进一步包括用于进行以下操作的指令：
-接收与该使用者的环境的至少一个实时参数相关的实时环境数据，并且
-鉴于该实时环境数据来确定该疲劳度。
4.根据权利要求3所述的部件，其中，该使用者的环境的实时参数与由该使用者接收到的光的特征相关，所述特征包括时间特征、光谱特征、光的强度中的至少一者。
5.根据权利要求3所述的部件，其中，该使用者的环境的实时参数与该使用者的环境的温度和/或噪声和/或当天的时间相关。
6.根据权利要求1或2所述的部件，其中，这些计算机可执行指令进一步包括用于进行以下操作的指令：
-接收与该使用者的生理的至少一个实时参数相关的实时生理数据，并且
-鉴于该实时生理数据来确定该疲劳度。
7.根据权利要求1或2所述的部件，其中，该睡眠质量历史记录参数至少与该使用者的睡眠周期效率历史记录相关。
8.根据权利要求1或2所述的部件，其中，该睡眠质量历史记录参数至少与睡眠生理数据相关，该睡眠生理数据与该使用者睡眠时的生理的至少一个参数相关，
并且其中，这些计算机可执行指令进一步包括鉴于该实时生理数据来确定该疲劳度的多个指令。
9.根据权利要求1或2所述的部件，其中，该睡眠质量历史记录参数至少与睡眠环境数据相关，该睡眠环境数据与该使用者睡眠时的环境的至少一个参数相关，并且
其中，这些计算机可执行指令进一步包括鉴于该睡眠环境数据来确定该疲劳度的多个指令。
10.根据权利要求1或2所述的部件，其中，这些计算机可执行指令进一步包括用于进行以下操作的指令：
-接收来自该使用者关于其疲劳度的反馈，并且
-调节对用于确定该疲劳的该至少一个视觉行为参数和该至少一个睡眠质量历史记录参数的组合的分析，这种调节基于来自该使用者的该反馈。
11.一种实时视觉行为测量装置，包括被配置成用于实时测量指示使用者的视觉行为的至少一个视觉行为参数的至少一个传感器以及被配置成用于将所测量的实时视觉行为参数传达给根据权利要求1至10中任一项所述的使用者疲劳度分析部件的通信单元。
12.根据权利要求11所述的实时视觉行为测量装置，其中，该实时视觉行为测量装置是被安排成戴在该使用者的头部上的头戴式装置。
13.一种用于确定使用者的疲劳度的系统，该系统包括：
-根据权利要求11或12所述的实时视觉行为测量装置，以及
-存储指示该使用者的睡眠质量的睡眠质量参数的存储器。
CN201610507064.XA 2015-07-01 2016-06-30 使用者疲劳度分析部件 Active CN106326912B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP15306067.8 2015-07-01
EP15306067.8A EP3113134B1 (en) 2015-07-01 2015-07-01 A user fatigue level analysis component

Publications (2)

Publication Number Publication Date
CN106326912A CN106326912A (zh) 2017-01-11
CN106326912B true CN106326912B (zh) 2019-08-16

Family

ID=53539625

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610507064.XA Active CN106326912B (zh) 2015-07-01 2016-06-30 使用者疲劳度分析部件

Country Status (3)

Country Link
US (1) US10624570B2 (zh)
EP (1) EP3113134B1 (zh)
CN (1) CN106326912B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2683914C1 (ru) * 2017-10-17 2019-04-02 Акционерное Общество "Группа Компаний "Сервиссофт" Устройство телеметрического контроля состояния бодрствования рулевого вахтовой смены экипажа корабля
US11803237B2 (en) 2020-11-14 2023-10-31 Facense Ltd. Controlling an eye tracking camera according to eye movement velocity

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6147612A (en) * 1999-11-10 2000-11-14 Ruan; Ying Chao Dual function optic sleep preventing device for vehicle drivers
ZA200608191B (en) * 2004-04-01 2008-07-30 William C Torch Biosensors, communicators, and controllers monitoring eye movement and methods for using them
FI120960B (fi) * 2004-07-01 2010-05-31 Suunto Oy Menetelmä ja laitteisto liikuntasuorituksen aikaisen suorirustason ja väsymisen mittaamiseksi
US7733224B2 (en) * 2006-06-30 2010-06-08 Bao Tran Mesh network personal emergency response appliance
KR101041636B1 (ko) * 2010-11-01 2011-06-17 한원흠 적외선 센서 안경
CN103281959A (zh) * 2011-05-20 2013-09-04 松下电器产业株式会社 视觉疲劳度测定装置、视觉疲劳度测定方法、视觉疲劳度测定系统及三维眼镜
US9380978B2 (en) * 2011-06-29 2016-07-05 Bruce Reiner Method and apparatus for real-time measurement and analysis of occupational stress and fatigue and performance outcome predictions
JP5870706B2 (ja) * 2012-01-20 2016-03-01 オムロンヘルスケア株式会社 睡眠表示プログラム、睡眠表示方法及び睡眠表示装置
US20130243208A1 (en) * 2012-03-19 2013-09-19 Mark S. Fawer Computer user alertness monitoring system
US20150164400A1 (en) * 2012-07-26 2015-06-18 Nissan Motor Co., Ltd. Driver's fatigue degree estimation apparatus and driver's fatigue degree estimation method
EP3071092A1 (en) * 2013-11-22 2016-09-28 Koninklijke Philips N.V. Apnea safety control
RU2014101664A (ru) * 2014-01-21 2015-07-27 Общество с ограниченной ответственностью "Аби Девелопмент" Способы и системы для определения степени утомления оператора
CN104146722B (zh) * 2014-08-18 2017-02-15 吉林大学 一种基于头部信号的驾驶疲劳检测分级预警方法
CN104574817A (zh) * 2014-12-25 2015-04-29 清华大学苏州汽车研究院（吴江） 一种适用于智能手机的基于机器视觉疲劳驾驶预警系统
CN104574820B (zh) * 2015-01-09 2017-02-22 安徽清新互联信息科技有限公司 一种基于眼睛特征的疲劳驾驶检测方法
CN104688251A (zh) * 2015-03-02 2015-06-10 西安邦威电子科技有限公司 一种多姿态下的疲劳及非正常姿态驾驶检测方法

Also Published As

Publication number Publication date
EP3113134B1 (en) 2019-03-06
CN106326912A (zh) 2017-01-11
EP3113134A1 (en) 2017-01-04
US20170000399A1 (en) 2017-01-05
US10624570B2 (en) 2020-04-21

Similar Documents

Publication Publication Date Title
US10360806B2 (en) Method and apparatus for providing exercise program based on feedback
US10660534B2 (en) Method, apparatus, and system providing exercise guide information
CN106456000B (zh) 生物测定信号的基于运动的估计
EP3355761B1 (en) Emotional/behavioural/psychological state estimation system
CN107209807B (zh) 疼痛管理可穿戴设备
US20170143246A1 (en) Systems and methods for estimating and predicting emotional states and affects and providing real time feedback
US20180242907A1 (en) Determining metabolic parameters using wearables
EP3106084B1 (en) Method and apparatus for evaluating physiological aging level
CN105748057A (zh) 信息显示方法和支持该信息显示方法的电子设备
JP2016510232A (ja) 睡眠段階分けの精度を増加するための感覚刺激
CN109864704A (zh) 生物信号质量评价设备和生物信号质量评价方法
KR101988334B1 (ko) 이동 전화기 및 이동전화기에서 재생되는 미디어 컨텐츠의 효율성 분석 방법
CN106326912B (zh) 使用者疲劳度分析部件
Pustiek et al. Challenges in wearable devices based pervasive wellbeing monitoring
WO2019037045A1 (zh) 一种心理压力评估方法及设备
KR102177740B1 (ko) 인지 능력 평가 방법, 이의 시스템 및 이를 위한 웨어러블 디바이스
CN108968972A (zh) 柔性疲劳检测装置以及信息处理方法及装置
US11016295B2 (en) Eyeglasses wearable device, method of controlling the eyeglasses wearable device and data management server
US11324426B1 (en) System, method, and computer program product for real-time evaluation of psychological and physiological states using embedded sensors of a mobile device
US20210137450A1 (en) Breath monitoring and feedback application and methods
JP2008009501A (ja) 課金方法
EP3138478B1 (en) A heart rate sensing wearable device
KR20150105514A (ko) 생체신호기반 서비스 방법 및 이를 적용한 휴대용 단말기 및 컴퓨터로 읽을 수 있는 기록매체
Ireland et al. Towards quantifying the impact of Parkinson's disease using GPS and lifespace assessment
CN108135481B (zh) 使用者偏头痛分析组件

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20180223

Address after: France Sharon Ton Le Pon

Applicant after: Essilor International Ltd.

Address before: France Sharon Ton Le Pon

Applicant before: Essilor International General Optical Co., Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant