CN109791722A - 用于监控机动车辆的驾驶员的设备和方法 - Google Patents

用于监控机动车辆的驾驶员的设备和方法 Download PDF

Info

Publication number
CN109791722A
CN109791722A CN201780025237.7A CN201780025237A CN109791722A CN 109791722 A CN109791722 A CN 109791722A CN 201780025237 A CN201780025237 A CN 201780025237A CN 109791722 A CN109791722 A CN 109791722A
Authority
CN
China
Prior art keywords
driver
alertness
alarm signal
attention
state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201780025237.7A
Other languages
English (en)
Inventor
V.朗塞勒
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Valeo Comfort and Driving Assistance SAS
Original Assignee
Valeo Comfort and Driving Assistance SAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Valeo Comfort and Driving Assistance SAS filed Critical Valeo Comfort and Driving Assistance SAS
Publication of CN109791722A publication Critical patent/CN109791722A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/4806Sleep evaluation
    • A61B5/4812Detecting sleep stages or cycles
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/746Alarms related to a physiological condition, e.g. details of setting alarm thresholds or avoiding false alarms
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • B60K28/066Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver actuating a signalling device
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • B60W2040/0827Inactivity or incapacity of driver due to sleepiness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00Input parameters relating to data
    • B60W2556/45External transmission of data to or from the vehicle
    • B60W2556/50External transmission of data to or from the vehicle for navigation systems

Abstract

本发涉及一种用于监控机动车辆驾驶员的方法,其包括以下步骤:a)评估所述驾驶员的警觉状态;和b)根据评估的所述驾驶员的警觉状态,发射用于通知驾驶员他们的警觉状态的至少一个警报信号,该方法还包括以下个性化警报信号的先前步骤:由驾驶员从预定义的一组警报信号中选择适于在步骤b)发射的至少一个警报信号;在个性化数据库中与驾驶员标识符相对应地记录每个所选警报信号。本发明还涉及相关的设备。

Description

用于监控机动车辆的驾驶员的设备和方法
技术领域
本发明大体涉及监控机动车辆驾驶员的领域。
更具体地,本发明涉及一种用于监控该驾驶员的设备和方法。.
背景技术
众所周知,对机动车辆的驾驶员进行监控以便检测可能导致车辆控制不足的可能的警觉丧失(即丧失其驾驶能力)。
例如,这种能力丧失可能是由于困倦和/或驾驶员分心造成的。
为此,由控制单元测量和解释驾驶员监控参数,以便从中推断出与驾驶员的警觉状态有关的信息。必要时,发出警报信号以通知驾驶员他们的警觉状态。
但是,驾驶员通常认为这些警报信号具有侵入性和破坏性。因此,经常注意到驾驶员忽略监控设备发出的警报信号,并且通常快速停用监控设备。
在这些情况下,现有的监控设备的兴趣有限,并且对提高机动车辆安全性没有显着帮助。
发明内容
为了克服现有技术的上述缺点,本发明提出了一种监控方法和设备,当检测到驾驶员的警觉性降低(即驾驶员的意识水平和/或注意力水平的降低)时,该监控方法和设备允许驾驶员个性化一个或多个警报信号的发射。
更具体地,本发明提供一种用于监控机动车辆驾驶员的方法,其包括以下步骤:
a)评估所述驾驶员的警觉状态;和
b)根据评估的所述驾驶员的警觉状态,发射用于通知驾驶员他们的警觉状态的至少一个警报信号,
并且还包括以下个性化警报信号的先前步骤:
-由驾驶员从预定义的一组警报信号中选择适于在步骤b)期间发射的至少一个警报信号;
-在个性化数据库中与驾驶员标识符相对应地记录每个所选警报信号。
根据本发明的用于监控驾驶员的方法有利地允许驾驶员选择一个或多个优选警报信号以及编辑与驾驶员标识符相关的驾驶员文件。
根据本发明的用于监控驾驶员的方法和设备由驾驶员自己个性化,其被更好地接受,因此可以完全实现其安全作用。
根据本发明的方法的其他非限制性和有利的特征如下,其单独地或根据所有可能的技术组合所采用:
-在选择步骤期间,驾驶员从视觉、听觉或触觉类型的一个或多个信号中或从他们的任何一个组合中选择每个警报信号;
-在选择步骤期间,驾驶员还选择要执行的所述警报信号的发射的预定重复次数以及,可选地,在该警报信号的两次重复之间的延迟,并且在记录步骤期间,重复次数和两次重复之间的延迟被记录在所述个性化数据库中,与驾驶员标识符相对应;
-在所评估的警觉状态属于预定的一组可能的警觉状态的情况下,在所述选择步骤期间,驾驶员将每个所选警报信号与驾驶员的所述可能的警觉状态关联,并且在记录步骤期间,所选警报信号与可能的所关联的警觉状态对应地被记录;
-评估警觉状态包括评估困倦状态或分心状态;
-在步骤a)期间,能够将驾驶员的困倦状态评估为警觉意识、失去警觉或瞌睡状态,并且能够将驾驶员的分心状态评估为集中、稍微分心或高度分心的状态,并且其中,在步骤b)期间,当驾驶员的困倦状态指示他们已经失去警觉或正在打瞌睡,或当驾驶员分心状态指示他们轻微分心或高度分心时,则发出所述警报信号;
-在选择步骤期间,驾驶员将所选的警报信号与每个可能的分心或困倦状态相关联,并且在记录步骤期间,所选的警报信号被记录在个性化数据库中,与所关联的可能的分心或困倦状态相对应;
-自动确定车辆驾驶员的标识符,并且在步骤b)期间,发出记录在个性化数据库中的警报信号,该警报信号与该标识符相对应并且对应于在步骤b)中评估的驾驶员的警觉状态;
-自动确定车辆驾驶员的标识符,恢复与该标识符相关联的个性化数据库,并且要求驾驶员修改每个所选的警报信号用于当前行程;
-在选择步骤之前,驾驶员测试每个警报信号;以及
-执行先前步骤,所述先前步骤测试适于发射以通知驾驶员他们的警觉状态的每个警报信号的有效性。
本发明还涉及一种用于监控机动车辆驾驶员的设备,其包括:
-用于评估驾驶员警觉状态的设备;
-用于根据所评估的驾驶员的警觉状态,发射用于通知驾驶员他们的警觉状态的警报信号的设备;
-与驾驶员的交互式接口,其允许驾驶员从预定义的一组警报信号中选择适于由发射设备发射的一个或多个警报信号;
-个性化数据库,其中每个所选的警报信号与驾驶员标识符相对应地被记录。
附图说明
参考通过非限制性示例提供的附图提供的以下描述将提供对本发明的性质及其如何生产的理解。
在附图中:
-图1示意性地示出了根据本发明的监控方法的各个步骤;
-图2示意性地示出了根据本发明的监控设备的各种元件。
具体实施方式
设备
图2示意性地示出了根据本发明的监控设备的各种元件。
根据本发明的监控设备500包括:
-能够评估驾驶员警觉状态的设备300;
-用于根据评估的驾驶员的警觉状态发射警报信号400并用于通知驾驶员他们的警觉状态的设备;
-与驾驶员的交互式接口100,其允许驾驶员从预定义的一组警报信号中选择适于由发射设备发射的一个或多个警报信号;和
-个性化数据库200,其中每个所选择的警报信号与驾驶员标识符相对应地被记录。
能够评估驾驶员的警觉状态的设备300有利地允许识别驾驶员的各种警觉状态。
能够评估驾驶员警觉状态的设备可以评估至少两种警觉状态,包括至少一个令人满意的警觉状态和一个不令人满意的警觉状态。
优选地,能够评估驾驶员的警觉状态的设备评估属于预定义的一组可能警觉状态的警觉状态。
有利地,能够评估驾驶员警觉状态的设备300包括用于测量驾驶员监控参数的设备和控制单元,该控制单元从该测量设备接收信息并且被编程为根据收到的信息评估驾驶员的警觉状态。
优选地,测量设备记录驾驶员相关信息而不与驾驶员交互,因此不会打扰他们。特别是,测量设备不向驾驶员发射任何信号。这具有允许测量设备记录驾驶员的自然行为而驾驶员不受测量设备的任何打扰或限制的优点。
因此,用于测量驾驶员的监控参数的设备不与驾驶员交互。
作为变型,可以设想与驾驶员交互的测量设备,该设备例如发射用于驾驶员的信号并检测他们的响应。
在这里描述的实施例中,测量设备包括用于捕获驾驶员头部图像的至少一个设备。
该图像捕获设备包括例如与驾驶员相对设置的摄像机,例如在车辆的仪表板上,在车辆的速度和/或转速表盘附近。
作为变型,它可以包括任何图像捕获设备,该图像捕获设备被定位成使得驾驶员的面部在其驾驶位置进入该图像捕获设备的视野。
例如,由测量设备测量的所述监控参数涉及驾驶员的观察方向和/或眼睛的运动和/或凝视的聚焦和/或驾驶员的头部的位置/或驾驶员的眼睑的闭合和/或驾驶员的面部肌肉的收缩和/或驾驶员的嘴唇的运动。
根据由测量设备捕获的驾驶员头部的至少一个图像来确定该测量的驾驶员的监控参数。
该参数也可以基于驾驶员头部的两个或更多个图像来确定。
然后,它还可以包括与在驾驶员的头部的多个图像捕获上测量的一组数据有关的统计信息。
特别地,当驾驶员的监控参数涉及驾驶员的观察方向时,图像捕获设备可以包括本领域技术人员已知的用于监控观看方向的任何设备。与驾驶员的观察方向有关的监控参数尤其可以是与图像捕捉设备相关联的参考系中的观察方向,或者是与驾驶员的头部相关联的参考系中的观察方向,或者是在这样的参考系中驾驶员的瞳孔的位置。它可以包括驾驶员凝视从道路移动的时段和/或频率。
它还可以包括聚焦在同一点上的时段,即观察方向恒定的时段,聚焦在同一点上的时刻的频率,眼睛抽动(即聚焦在同一点上的两个时刻之间的眼睛的移动)的频率和时段。
监控参数还可以包括与从在预定时段期间拍摄的多个图像捕获所测量的一组观察方向有关的统计信息,例如,凝视的平均方向,该平均方向的标准偏差,以及该观察方向的统计分布。
与头部的姿势有关的驾驶员监控参数可以包括在与图像捕获设备相关联的参考系中驾驶员的头部的位置和取向。它还可以包括,例如,与从在预定时段期间拍摄的多个图像捕获所测量的一组姿势有关的统计信息,头部运动的频谱,或者在给定时间间隔内头部的平均位置。
与驾驶员眼睑闭合有关的驾驶员监控参数可以包括眼睛的眨眼频率,眼睑的闭合时段,眼睑的闭合速度,眼睛的眨眼时段,各种类别的眼睛闭合的分类,或与驾驶员眼睑的闭合频率或时段有关的平均或标准偏差类型统计信息。
与面部肌肉的收缩相关的监控参数通常包括面部肌肉的收缩频率或面部肌肉的收缩频率的平均类型或统计分布的统计信息。例如,面部肌肉的这种收缩表示打哈欠。
测量设备还可以包括两个图像捕获设备,其允许通过立体视觉重建驾驶员头部的三维图像。
作为变型,测量设备可以包括其他类型的传感器,其允许测量其他类型的监控参数,除了前面提到的监控参数中的至少一个之外,或者通过替换该监控参数。
例如,测量设备可包括适于测量车辆方向盘上的手压的传感器。
测量设备可以包括例如能够测量车辆乘客舱中的音量的声音传感器。
测量设备还可以包括例如一个或多个生物识别传感器,其允许测量例如心率和/或呼吸率和/或驾驶员的瞳孔的尺寸变化的频率和/或幅度和/或驾驶员的体温和/或驾驶员的血糖水平和/或驾驶员的大脑活动。
能够评估驾驶员的警觉状态的设备的控制单元300被编程为根据评估规则和所述监控参数的测量值来评估驾驶员的警觉状态。
评估规则由控制单元的评估模块实现。
如前所述,本发明可以提供对应于满意或不令人满意的警觉状态的至少两种警觉状态。
举例来说,当测量的监控参数与驾驶员的观察方向有关时,当驾驶员的观察方向远离道路持续多于2秒的时段时,或者因为驾驶员的眼睑闭合超过500毫秒的时段时,驾驶员的警惕状态可被认为是不令人满意的。
更具体地,在第一种情况下,驾驶员的注意力水平不足,而在第二种情况下,涉及驾驶员的意识水平。
有利地,用于评估驾驶员的警觉状态的设备能够从预定义的一组可能的警觉状态评估驾驶员的警觉状态。
因此,用于评估驾驶员的警觉状态的设备可以根据分心状态和/或困倦状态精确地评估警觉状态。
评估规则优选地包括作为输出的驾驶员的多个可能的分心状态和/或困倦状态,其对应于驾驶员的各种可能的警觉状态。
可以提供以下警觉状态以评估驾驶员的分心状态:集中,稍微分心,高度分心。
驾驶员分心的“集中”状态对应于驾驶的满意的警觉状态。
相反,驾驶员分心的“稍微分心”和“高度分心”状态对应于驾驶的不令人满意的警觉状态。
例如,当驾驶员将他们的凝视从道路移开以便查看他们的电话或者以看到车辆的乘客室内时,通常会发生这种情况。
这种情况对应于驾驶员的视觉分心。
在这种情况下测量的监控参数例如是与驾驶员的观察方向有关的参数。
由于听觉的分心,驾驶员也可能将其注意力从驾驶转移开。例如,当车辆乘客舱中存在过大噪音时,例如,由于铃声、音乐播放或热烈讨论,通常会发生这种情况。
由于认知分心,驾驶员也可能将注意力从驾驶转移开。当驾驶员被吸收在讨论中,例如在电话上,或者通过他们自己的想法时,通常会发生这种情况。
后两种情况可以例如通过测量与眼睛的运动和/或凝视的焦点有关的监控参数来检测。
还可以确定驾驶员的分心是否具有视觉、听觉或认知性质的。
处理由测量设备记录的图像可以提供与分心性质相关的指示。除了测量设备的图像捕获设备之外,还可以使用放置在乘客舱内的声音传感器。
有利地,因此可以提供以下分心状态:低视觉和/或听觉和/或认知分心以及高视觉和/或听觉和/或认知分心。
有利地提供以下状态以评估驾驶员的困倦状态:意识警觉、失去警觉性和瞌睡。
意识警觉状态被认为是驾驶员的满意的警觉状态。
相反,失去警觉性和瞌睡对应于驾驶员不令人满意的警觉状态。
失去警觉性,也称为放松意识状态,对应于降低的意识水平,其特征在于大脑活动的特定程式,特别是阿尔法脑波的存在,其频率在8到12赫兹(Hz)内变化。身体动作比警觉意识状态更不频繁,反应时间延长。注意力更加不稳定,因此难以专注于任务。
嗜睡对应于睡眠和意识之间的中间状态,其特征在于大脑活动的特定程式(特别是这样脑波的存在,其频率在3.5到7.5赫兹(Hz)内变化)、眼球运动缓慢和肌肉张力减少。可以检测到打哈欠的存在。如果驾驶员正在打瞌睡,则可以观察到微睡眠。
根据第一简化实施例,所述评估规则包括驾驶员监控参数的测量值与该监控参数的阈值之间的比较。
例如,当驾驶员监控参数是驾驶员的眼睑的闭合频率或时段时,第一评估规则可以包括测量的频率或时段与阈值频率或时段之间的比较。当测量的频率或时段大于阈值频率或时段时,第一评估规则作为输出返回驾驶员的不令人满意的警觉状态,例如,该不令人满意的警觉状态表示他们已经失去警觉性、稍微分心、高度分心、甚至睡着了。
作为说明,例如,当驾驶员将他们的凝视从道路移开持续1.6到2秒内的时间间隔,则可以确定稍微分心状态,并且例如,当驾驶员将他们的凝视从道路移开严格大于2秒的时间间隔时,则可以确定高度分心状态。
根据第二优选实施例,所述评估规则由适于在监控参数和驾驶员的警觉状态之间建立因果关系结构的学习算法确定。该学习算法最初使用初始预定义数据库进行训练,该初始预定义数据库包括输入变量对,其包括监控参数和预定义的相关警觉状态。
该初始数据库包括与各种驾驶员有关的数据,使得评估规则的初始性能水平对于大多数驾驶员来说是满意的。
初始数据库不同于由用户个性化的数据库200。
学习算法例如基于该数据库确定观察警觉状态的可能性,并且优选地确定由驾驶员提供的分心或困倦状态,从而知道监控参数具有所述测量值。
评估规则基于学习算法作为输出返回警觉状态、特别是根据驾驶员监控参数的测量值的困倦或分心的最可能状态。
优选地,不管实施例如何,测量监控参数的多个测量值,并且根据该多个测量值评估驾驶员的警觉状态,特别是困倦或分心的状态。
作为变型,控制单元还可以接收由车辆的其他设备发送的数据,例如与GPS、加速/制动、某些车辆功能的激活(诸如移动电话到车辆的激活无线连接的激活)有关的数据。
在用于确定驾驶员的警觉状态的评估规则中可以考虑指示不适合于道路的驾驶轨迹的数据。该数据可以包括,例如,车辆相对于其路径中心的横向偏移、车辆的横向稳定性、驾驶员在方向盘上施加的微校正的频率和幅度。该数据也可以替代地形成测量的驾驶员监控参数。
本发明的监控设备500还包括用于发射警报信号400的设备(图1)。
该警报信号的发射允许向驾驶员通知警觉状态不足。然后,驾驶员可以采取行动以改善其警觉状态,例如,通过休息以歇息或通过中断电话交谈。
由警报信号发射设备发出的警报信号可以是视觉的、听觉的和/或触觉的。
视觉信号可以包括发射在打开仪表板、中央后视镜和/或车辆前侧支柱上的指示器、闪烁或发光闪光。
听觉警告可以是记录的消息,或可选地从一组音调或音乐中选择的声音,可选地从一组音轨中选择的声音。
触觉信号可以涉及方向盘、安全带和/或驾驶员座椅中的振动。
根据本发明的监控设备还包括与驾驶员的交互式接口,其允许他们从预定义的一组警报信号中选择适于由发射设备发射的一个或多个警报信号。
最后,根据本发明的用于监控驾驶员的设备包括与警报信号相关的个性化数据库,其中每个所选警报信号与驾驶员标识符相对应地被记录。
例如,与根据本发明的监控设备的警报信号有关的个性化数据库200可以允许建立驾驶员文件,其中每个文件对于给定的驾驶员包括由所述驾驶员选择的一个或多个警报信号。
与警报信号(尤其是驾驶员文件)有关的个性化数据库200可以集成在例如先前定义的控制单元中。
一旦驾驶员进入机动车辆,驾驶员就可以通过例如对话框标识他们自己。
作为变型,相关的机动车辆有利地可以进一步包括驾驶员识别系统。
该识别系统从存储的驾驶员列表中自动标识车辆驾驶员。该识别系统例如基于驾驶员的面部识别(该驾驶员的面部识别是基于驾驶员的头部图像)、基于处理生物识别信息(例如指纹)或基于驾驶员使用的联系人钥匙的标识。
该识别系统例如可以将驾驶员标识符发送到控制单元,然后控制单元被编程为相对于与该驾驶员标识符相关的警报信号从个性化数据库200中选择信息。例如,控制单元可以被编程为选择与识别系统发送的标识符相对应的驾驶员文件。
方法
图1示意性地示出了根据本发明的监控方法的步骤。
驾驶员正常驾驶车辆,没有任何特别限制。
在车辆由驾驶员驾驶的同时,实施根据本发明的监控方法。该方法包括以下步骤:
a)评估30所述驾驶员的警觉状态;和
b)根据评估的所述驾驶员的警觉状态,发射40至少一个警报信号,其用于通知驾驶员他们的警觉状态。
它还包括以下个性化警报信号的发射的先前步骤:
-由驾驶员从预定义的一组警报信号中选择10适于在步骤b)期间发射的一个或多个警报信号;
-在所述个性化数据库200中存储20与驾驶员标识符相对应的每个所选警报信号。
评估的驾驶员警觉状态有利地属于预定义的一组驾驶员的可能警觉状态。
优选地,评估警觉状态包括评估驾驶员的困倦状态或分心状态,如先前所定义的。
有利地,在选择步骤期间,驾驶员将每个所选警报信号与驾驶员的可能警报状态中的一个相关联,并且在记录步骤期间,与相关联的可能警报状态相对应地记录所选警报信号。
评估警觉状态有利地包括测量至少一个驾驶员监控参数的步骤和使用所测量的所述至少一个监控参数的至少一个测量值以根据所述估算规则和所述监控参数的测量值来评估驾驶员的警觉状态的步骤。
测量监控参数和使用监控参数的所述测量结果的这些步骤以特别有利的方式由测量设备和控制单元根据前述过程实现。
根据由控制单元评估的驾驶员的警觉状态,所述控制单元可以控制或可以不控制用于驾驶员的警报信号的发射。
如前所述,当用于评估警觉状态的设备作为输出返回不令人满意的警觉状态时,发出所述警报信号。有利地,当检测到以下分心或困倦状态中的至少一个时发出警报信号:轻微分心(视觉和/或听觉),高度分心(视觉和/或听觉),失去警觉或困倦。
根据本发明的监控方法,由驾驶员对警报信号的发射进行个性化,使得该发出的信号被该驾驶员更好地接受。报警信号的以下特征中的至少一个可由驾驶员个性化:
-报警信号的性质,例如视觉、听觉和/或触觉,如前所述;
-报警信号的强度和/或频率;
-警报信号的潜在重复次数;
-必要时,所述报警信号的两次重复之间的延迟。
在记录步骤期间,这些特征中的每一个优选地与所述载体的标识符相对应地记录在所述个性化数据库200中。作为变型,来自这些特征的一个或多个特征与所述载体的该标识符相对应地存储在所述个性化数据库200中。
警报信号的重复次数是可以为零的整数。
实际上,例如,警报信号可以重复一次或两次。在这些条件下,驾驶员可以决定是否在每次重复时改变警报信号。
例如,他们可以选择第一视觉信号,然后选择听觉信号。特别地,他们可以决定在每次重复时增加警报信号的强度。当警报信号重复多于一次时,驾驶员可以在每次重复警报信号之间选择各种延迟。
在听觉或触觉信号的情况下,可以为驾驶员提供也选择由警报信号发射设备发出的振动的听觉频率或频率。
优选地,当识别出分心或困倦状态时,驾驶员根据检测到的困倦或分心状态将不同的警报信号关联起来。
特别地,他们可以根据检测到的分心或困倦状态分配不同的警报信号,具体地,取决于是否检测到轻微分心、高度分析、警觉性丧失或困倦。
可选地,可以组合各种警报信号。例如,对于一些警觉状态,驾驶员可以选择意图同时发射的多个警报信号的组合。
此外,所有警报信号可以不一定与所有警觉状态相关联。更具体地,可以禁止将一些警报信号与一些警觉状态相关联。
例如,可以排除驾驶员将视觉警报信号与对应于困倦的困倦状态相关联。作为变型,当驾驶员选择在检测到困倦状态时必须发出视觉信号时,可以需要将其与另外的警报信号组合。
本发明的方法还可以排除将声音警报信号与听觉分心(轻微或高)相关联和将视觉信号与视觉分心(轻微或高)相关联的可能性。
还可以规定触觉警报信号与任何视觉或听觉警报信号相关联。
此外,对于一些警觉状态,可以默认提供警报信号的一些特征,而驾驶员不必修改它们。
例如,与驾驶员的高度分心或困倦相关联的分心和困倦状态相关联的警报信号的强度可以默认编程为最大值。类似地,对于这些警觉状态,可以默认编程听觉警报和/或听觉、视觉和/或触觉警报的组合,其被排除在个性化之外。
根据本发明的方法,每个选择的警报信号与驾驶员标识符相对应地记录在个性化数据库200中。
有利地,与驾驶员标识符相对应地记录驾驶员文件,该驾驶员文件包含与一个或多个警报信号的可个性化特征有关的驾驶员的所有选择。
有利地,在本发明的方法中,当驾驶员进入车辆时,它们在车辆启动时由如先前所描述的识别设备自动标识,或者他们标识自身。然后恢复与所标识的驾驶员对应的个性化数据库200。在这些条件下,当检测到不令人满意的警觉状态时,发射与所标识的驾驶员的选择相对应的一个或多个警报信号。
特别地,一旦标识驾驶员,本发明的方法允许:
-在步骤a)期间,评估驾驶员的警觉状态,优选地该警觉状态属于预定义的一组可能的警觉状态,例如,属于如先前限定的警觉状态;和
-在本发明的方法的步骤b)期间,在必要时,发射警报信号,该警报信号与所标识的驾驶员的标识符对应地记录在个性化数据库200中,并且对于该警报信号,可能的相关联的警觉状态与在步骤a)中评估的驾驶员的警觉性对应。
根据本发明的监控方法还可以包括这样的步骤:当已经标识驾驶员并且已经恢复相应的个性化数据库200时,要求驾驶员修改他们对一个或多个警报信号的先前个性化选择。
这种选择是有利的,例如,当驾驶员先前已经选择了一个或多个听觉警报但随后伴随着他们不想打扰的乘客时。因此,视觉或触觉警报信号可以是优选的并且被选择用于当前行程,以便不打扰乘客的可能休息。
有利地,本发明的方法允许驾驶员在选择警报信号的步骤之前测试各种类型的警报信号。在驾驶员因此已知地选择了他们优选的警报类型的情况下,当检测到驾驶员的不令人满意的警觉状态时发出警报信号是更好接受的。
根据本发明的用于监控驾驶员的方法还可以包括这样的步骤,在由驾驶员选择适于在步骤b)期间发射的一个或多个警报信号之前,测试每个警报信号的有效性。
有利地,在本发明的方法的这种实施例中,警报信号发射设备发射预定类型和强度的测试警报信号。
优选地,在测试阶段期间,当用于评估警觉状态的设备检测到不令人满意的警觉状态时,发射这样的信号。在这些条件下,如果在发出所述测试警报信号之后检测到满意的警觉状态或者如果驾驶员决定停止驾驶持续预定时段,则认为测试警报信号是有效的。
因此,优选地,提供给驾驶员的一个或多个警报信号先前已对他们对一组驾驶员的有效性进行过测试和预选。
作为变型,提供给驾驶员的一个或多个警报信号先前已对它们对车辆驾驶员的特定效果进行过测试和预选。
例如,对警报信号的有效性的测试然后有利地允许确定警报信号的阈值强度(视觉、听觉或触觉),低于该阈值强度,警报信号对于通知驾驶员他们的警觉状态是无效的。优选地,对于每种类型的警报,该阈值强度存储在存储器中,优选地与驾驶员标识符相对应地存储在存储器中,使得驾驶员不能选择低于该阈值强度的强度。

Claims (12)

1.一种用于监控机动车辆驾驶员的方法,其包括以下步骤:
a)评估(30)所述驾驶员的警觉状态;和
b)根据评估的所述驾驶员的警觉状态,发射(40)用于通知驾驶员他们的警觉状态的至少一个警报信号,
所述方法还包括以下个性化警报信号的先前步骤:
-由驾驶员从预定义的一组警报信号中选择(10)适于在步骤b)期间发射的至少一个警报信号;
-在个性化数据库(200)中与驾驶员标识符相对应地记录(20)每个所选警报信号。
2.根据权利要求1所述的用于监控机动车辆驾驶员的方法,其中,在所述选择步骤期间,驾驶员从视觉、听觉或触觉类型的一个或多个信号中或从他们的任何一个组合中选择每个警报信号。
3.根据前述权利要求中任一项所述的用于监控机动车辆驾驶员的方法,其中,在选择步骤期间,驾驶员选择要执行的所述警报信号的发射的预定重复次数以及,可选地,在该警报信号的两次重复之间的延迟,并且在记录步骤期间,重复次数和两次重复之间的延迟被记录在所述个性化数据库(200)中,与驾驶员标识符相对应。
4.根据前述权利要求中的任一项所述的用于监控机动车驾驶员的方法,其中,在所评估的警觉状态属于预定的一组可能的警觉状态的情况下,在所述选择步骤期间,驾驶员将每个所选警报信号与驾驶员的所述可能的警觉状态关联,并且在记录步骤期间,所选警报信号与可能的所关联的警觉状态对应地被记录。
5.根据前述权利要求中任一项所述的用于监控机动车辆驾驶员的方法,其中,评估警觉状态包括评估困倦状态或分心状态。
6.根据权利要求5所述的用于监控机动车辆驾驶员的方法,其中,在步骤a)期间,能够将驾驶员的困倦状态评估为警觉意识、失去警觉或瞌睡状态,并且能够将驾驶员的分心状态评估为集中、稍微分心或高度分心的状态,并且其中,在步骤b)期间,当驾驶员的困倦状态指示他们已经失去警觉或正在打瞌睡,或当驾驶员分心状态指示他们轻微分心或高度分心时,则发出所述警报信号。
7.根据如权利要求5和6中任一项所述的用于监控机动车辆驾驶员的方法,其中,在选择步骤期间,驾驶员将所选的警报信号与每个可能的分心或困倦状态相关联,并且在记录步骤期间,所选的警报信号被记录在个性化数据库(200)中,与所关联的可能的分心或困倦状态相对应。
8.根据前述权利要求中的任一项所述的用于监控机动车辆驾驶员的方法,其中,还自动确定车辆驾驶员的标识符,并且在步骤b)期间,发出记录在个性化数据库(200)中的警报信号,该警报信号与该标识符相对应并且对应于在步骤a)中评估的驾驶员的警觉状态。
9.根据前述权利要求中任一项所述的用于监控机动车辆驾驶员的方法,其中,自动确定车辆驾驶员的标识符,恢复与该标识符相关联的个性化数据库,并且要求驾驶员修改每个所选的警报信号用于当前行程。
10.根据前述权利要求中任一项所述的用于监控机动车辆驾驶员的方法,其中,在选择步骤之前,驾驶员测试每个警报信号。
11.根据前述权利要求中任一项所述的用于监控机动车辆驾驶员的方法,其中,执行先前步骤,所述先前步骤测试适于发射以通知驾驶员他们的警觉状态的每个警报信号的有效性。
12.一种用于监控机动车辆驾驶员的设备,其包括:
-用于评估驾驶员警觉状态的设备(300);
-用于根据所评估的驾驶员的警觉状态,发射用于通知驾驶员他们的警觉状态的警报信号的设备(400);
-与驾驶员的交互式接口(100),其允许驾驶员从预定义的一组警报信号中选择适于由发射设备发射的一个或多个警报信号;
-个性化数据库(200),其中每个所选的警报信号与驾驶员标识符相对应地被记录。
CN201780025237.7A 2016-03-01 2017-03-01 用于监控机动车辆的驾驶员的设备和方法 Pending CN109791722A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
FR1651689 2016-03-01
FR1651689A FR3048544B1 (fr) 2016-03-01 2016-03-01 Dispositif et methode de surveillance d'un conducteur d'un vehicule automobile
PCT/EP2017/054833 WO2017149047A1 (fr) 2016-03-01 2017-03-01 Dispositif et méthode de surveillance d'un conducteur d'un véhicule automobile

Publications (1)

Publication Number Publication Date
CN109791722A true CN109791722A (zh) 2019-05-21

Family

ID=55808694

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780025237.7A Pending CN109791722A (zh) 2016-03-01 2017-03-01 用于监控机动车辆的驾驶员的设备和方法

Country Status (6)

Country Link
US (1) US20190122525A1 (zh)
EP (1) EP3424031A1 (zh)
JP (1) JP2019512780A (zh)
CN (1) CN109791722A (zh)
FR (1) FR3048544B1 (zh)
WO (1) WO2017149047A1 (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6992045B2 (ja) * 2016-07-22 2022-01-13 ハーマン インターナショナル インダストリーズ インコーポレイテッド 触覚誘導システム
CN109803583A (zh) * 2017-08-10 2019-05-24 北京市商汤科技开发有限公司 驾驶状态监控方法、装置和电子设备
EP3576074A1 (en) * 2018-06-01 2019-12-04 Volvo Car Corporation Method and system for assisting drivers to drive with precaution
US10970571B2 (en) 2018-06-04 2021-04-06 Shanghai Sensetime Intelligent Technology Co., Ltd. Vehicle control method and system, vehicle-mounted intelligent system, electronic device, and medium
CN109002757A (zh) * 2018-06-04 2018-12-14 上海商汤智能科技有限公司 驾驶管理方法和系统、车载智能系统、电子设备、介质
US10915769B2 (en) 2018-06-04 2021-02-09 Shanghai Sensetime Intelligent Technology Co., Ltd Driving management methods and systems, vehicle-mounted intelligent systems, electronic devices, and medium
US11180158B1 (en) * 2018-07-31 2021-11-23 United Services Automobile Association (Usaa) Routing or driving systems and methods based on sleep pattern information
CN111079476B (zh) 2018-10-19 2024-03-26 上海商汤智能科技有限公司 驾驶状态分析方法和装置、驾驶员监控系统、车辆
EP3730331B1 (en) 2019-04-26 2023-03-08 Zenuity AB Method and device for controlling a driver assistance
KR102218526B1 (ko) * 2019-07-26 2021-02-19 엘지전자 주식회사 졸음 운전을 방지하기 위한 방법, 시스템 및 차량
JP7328828B2 (ja) * 2019-08-27 2023-08-17 フォルシアクラリオン・エレクトロニクス株式会社 状態推定装置、状態推定プログラムおよび状態推定方法
KR20220000536A (ko) * 2020-06-26 2022-01-04 현대자동차주식회사 차량 주행 제어 장치 및 방법
JP2022063952A (ja) * 2020-10-13 2022-04-25 株式会社東海理化電機製作所 制御装置、提示システム、及びプログラム
WO2023119763A1 (ja) * 2021-12-21 2023-06-29 パナソニックIpマネジメント株式会社 運転者状態推定装置

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003070093A1 (en) * 2002-02-19 2003-08-28 Volvo Technology Corporation System and method for monitoring and managing driver attention loads
US20070001830A1 (en) * 2005-06-30 2007-01-04 Dagci Oguz H Vehicle speed monitoring system
US20070028911A1 (en) * 2005-08-04 2007-02-08 Speed Paintball Co., Ltd. Three-in-one high-pressure gas cylinder magazine
CN101540090A (zh) * 2009-04-14 2009-09-23 华南理工大学 基于多元信息融合的驾驶员疲劳监测装置及其监测方法
US20100033333A1 (en) * 2006-06-11 2010-02-11 Volva Technology Corp Method and apparatus for determining and analyzing a location of visual interest
CN102368946A (zh) * 2010-06-03 2012-03-07 松下电器产业株式会社 瞳孔遮蔽状态检测装置和具有它的车载照相机
US20120057749A1 (en) * 2010-09-03 2012-03-08 Honda Motor Co., Ltd. Inattention determining device
US20140132405A1 (en) * 2012-06-22 2014-05-15 GM Global Technology Operations LLC Alert systems and methods for a vehicle
CN104794856A (zh) * 2014-01-22 2015-07-22 径卫视觉科技(上海)有限公司 驾驶员注意力综合测评系统
CN105354987A (zh) * 2015-11-26 2016-02-24 南京工程学院 车载型疲劳驾驶检测与身份认证装置及其检测方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080042814A1 (en) * 2006-08-18 2008-02-21 Motorola, Inc. Mode sensitive vehicle hazard warning apparatuses and method
US7710248B2 (en) * 2007-06-12 2010-05-04 Palo Alto Research Center Incorporated Human-machine-interface (HMI) customization based on collision assessments
ITBO20080081A1 (it) * 2008-02-07 2009-08-08 Ferrari Spa Metodo di controllo di un veicolo per adattare il comportamento dinamico del veicolo stesso allo stato psico-fisico del guidatore
US20140276090A1 (en) * 2011-03-14 2014-09-18 American Vehcular Sciences Llc Driver health and fatigue monitoring system and method using optics
US9425654B2 (en) * 2013-09-30 2016-08-23 Google Inc. Contactless electrical coupling for a rotatable LIDAR device
DE102014207807A1 (de) * 2014-04-25 2015-10-29 Bayerische Motoren Werke Aktiengesellschaft Personenbezogene Fahrerunterstützung
US9669758B2 (en) * 2015-07-30 2017-06-06 Honda Motor Co., Ltd. System for alerting a driver and method thereof

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2003070093A1 (en) * 2002-02-19 2003-08-28 Volvo Technology Corporation System and method for monitoring and managing driver attention loads
US20070001830A1 (en) * 2005-06-30 2007-01-04 Dagci Oguz H Vehicle speed monitoring system
US20070028911A1 (en) * 2005-08-04 2007-02-08 Speed Paintball Co., Ltd. Three-in-one high-pressure gas cylinder magazine
US20100033333A1 (en) * 2006-06-11 2010-02-11 Volva Technology Corp Method and apparatus for determining and analyzing a location of visual interest
CN101540090A (zh) * 2009-04-14 2009-09-23 华南理工大学 基于多元信息融合的驾驶员疲劳监测装置及其监测方法
CN102368946A (zh) * 2010-06-03 2012-03-07 松下电器产业株式会社 瞳孔遮蔽状态检测装置和具有它的车载照相机
US20120057749A1 (en) * 2010-09-03 2012-03-08 Honda Motor Co., Ltd. Inattention determining device
US20140132405A1 (en) * 2012-06-22 2014-05-15 GM Global Technology Operations LLC Alert systems and methods for a vehicle
CN104794856A (zh) * 2014-01-22 2015-07-22 径卫视觉科技(上海)有限公司 驾驶员注意力综合测评系统
CN105354987A (zh) * 2015-11-26 2016-02-24 南京工程学院 车载型疲劳驾驶检测与身份认证装置及其检测方法

Also Published As

Publication number Publication date
WO2017149047A1 (fr) 2017-09-08
EP3424031A1 (fr) 2019-01-09
FR3048544B1 (fr) 2021-04-02
FR3048544A1 (fr) 2017-09-08
JP2019512780A (ja) 2019-05-16
US20190122525A1 (en) 2019-04-25

Similar Documents

Publication Publication Date Title
CN109791722A (zh) 用于监控机动车辆的驾驶员的设备和方法
US10867218B2 (en) Biometric sensor fusion to classify vehicle passenger state
CN107697069B (zh) 汽车驾驶员疲劳驾驶智能控制方法
US11312384B2 (en) Personalized device and method for monitoring a motor vehicle driver
US6346887B1 (en) Eye activity monitor
EP2648618B1 (en) System for monitoring a vehicle driver
US20060011399A1 (en) System and method for controlling vehicle operation based on a user's facial expressions and physical state
US6337629B1 (en) Method and a system for monitoring a person
CN109878527A (zh) 分心感测系统
KR101259663B1 (ko) 무력상태 모니터
WO2015175435A1 (en) Driver health and fatigue monitoring system and method
WO2001031604A1 (en) Alertness monitoring system
CN107428245B (zh) 用于预测机动车辆驾驶员的警觉水平的设备和方法
US20150125126A1 (en) Detection system in a vehicle for recording the speaking activity of a vehicle occupant
US11813060B2 (en) System and method for biometric evoked response monitoring and feedback
CN109435844A (zh) 一种驾驶辅助及司机行为检测方法
JP2020052482A (ja) 危険運転防止装置
FR3048543A1 (fr) Dispositif et methode de surveillance d'un conducteur d'un vehicule de transport
CN111476977A (zh) 安全驾驶预警系统
Santhiya et al. Improved Authentication and Drowsiness Detection from Facial Features using Deep Learning Framework in Real Time Environments
CN107007292A (zh) 用于获知疲劳的方法
CN113168758B (zh) 确定车辆驾驶者的困倦水平的方法
CN107273789B (zh) 用于提供警告信号以识别将面临的微睡的方法
CN115578835B (zh) 基于方向盘的驾驶员疲劳检测方法及装置
KR102643541B1 (ko) 인공지능을 이용한 졸음 운전 방지 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190521