CN110268451A - 驾驶员和乘客的健康和睡眠互动 - Google Patents

驾驶员和乘客的健康和睡眠互动 Download PDF

Info

Publication number
CN110268451A
CN110268451A CN201880011187.1A CN201880011187A CN110268451A CN 110268451 A CN110268451 A CN 110268451A CN 201880011187 A CN201880011187 A CN 201880011187A CN 110268451 A CN110268451 A CN 110268451A
Authority
CN
China
Prior art keywords
vehicle
feedback
passenger
driver
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201880011187.1A
Other languages
English (en)
Inventor
R·M·阿尔特斯
A·海因里希
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips Electronics NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips Electronics NV filed Critical Koninklijke Philips Electronics NV
Publication of CN110268451A publication Critical patent/CN110268451A/zh
Pending legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7246Details of waveform analysis using correlation, e.g. template matching or determination of similarity
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0219Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0022Monitoring a patient using a global network, e.g. telephone networks, internet
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02405Determining heart rate variability
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/05Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/053Measuring electrical impedance or conductance of a portion of the body
    • A61B5/0531Measuring skin impedance
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165Evaluating the state of mind, e.g. depression, anxiety
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/486Bio-feedback
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/7405Details of notification to user or communication with user or patient ; user input means using sound
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/7455Details of notification to user or communication with user or patient ; user input means characterised by tactile indication, e.g. vibration or electrical stimulation

Abstract

在一个实施例中,提出了一种装置,所述装置接收驾驶员的驾驶风格,感测车辆内的驾驶员和/或至少一个乘客的一个或多个参数,将所述一个或多个参数与所述驾驶风格进行相关,并且基于所述至少一个乘客的经相关的一个或多个参数来触发对所述驾驶员的反馈,或者基于所述驾驶员的经相关的一个或多个参数来触发对所述乘客的反馈。除了其他特征之外,本发明还提供了用于增加驾驶员与一个或多个乘客之间的正面互动并且减少或避免负面互动的机制,这可以使得基于测得的健康/康乐数据与驾驶风格或行为之间的相关性来更安全地使用车辆。

Description

驾驶员和乘客的健康和睡眠互动
相关申请的交叉引用
本申请要求2017年2月10日提交的美国临时申请序列号62/457433的权益和优先权,通过引用将其整体并入本文。
技术领域
本发明总体上涉及车辆安全性,尤其涉及管理车辆内或多个车辆之间的车辆乘员的互动以促使安全性。
背景技术
通常,驾驶员和乘客难以察觉对方正在体验的事情或对方的健康状况。由于汽车座椅的定位情况,长时间观看另一个人可能是不舒服的,或者这种观察可能至少部分地受到阻挡。另外,在长途行驶期间,驾驶员或乘客注意力可能集中在别处。另外,乘客可以彼此正面互动或与车辆的驾驶员正面互动,或者也可以不进行这些互动。在乘客的行为对驾驶员产生负面影响的情况下,可能会发生事故或者使驾驶员、其他乘客或甚至其他参与者(例如,附近的其他车辆)受到伤害。
国际专利申请公布文件WO 2014121182 A1(在下文中,括号内的“182Pub”得到该公布文件的公开支持)在管理车辆中的操作者的压力以例如防止路怒(参见例如“182Pub”中的背景技术)的背景下进行了描述,并且还(例如从第3页第30行开始)描述了能够收集或者能够被配置为收集指示车辆的操作特征的信息(例如,数据、元数据和/或信令)的一组传感器中的至少一部分。例如,该组传感器中的至少一个传感器(例如,一个传感器、两个传感器、多于两个传感器等)能够检测或者能够被配置为检测车辆的运动。“182Pub”还(从第4页第8行开始)描述了该组传感器的至少另一部分能够收集或者能够被配置为收集指示车辆乘员(例如,车辆的操作者或车辆的乘客)行为的信息。“182Pub”还(从第2页第12行开始)描述了能够被组合或以其他方式集成以生成丰富的数据、元数据和/或信令组的三种类型的信息,这些数据、元数据和/或信令能够被利用或以其他方式利用以生成表示车辆操作者的情绪状态的状况度量,并且在一种情况下,能够通过将状况度量提供给车辆的操作者来提供状况度量。
虽然降低不同车辆的乘客在道路上发生冲突的可能性对于驾驶员群体来说是有益的,但是车辆内的乘客之间的压力有时也可能会引起道路上的安全问题。
发明内容
本发明的一个目的是开发一种管理一个车辆乘员的行为和/或状况对车辆的另一乘员的影响的车辆乘员互动系统。为了更好地解决这种问题,在本发明的第一方面中,提出了一种装置,所述装置接收驾驶员的驾驶风格,感测车辆内的驾驶员和/或至少一个乘客的一个或多个参数,将所述一个或多个参数与所述驾驶风格进行相关,并且基于所述至少一个乘客的经相关的一个或多个参数来触发对所述驾驶员的反馈,或者基于所述驾驶员的经相关的一个或多个参数来触发对所述乘客的反馈。除了其他特征之外,本发明还提供了用于增加驾驶员与一个或多个乘客之间的正面互动并且/或者减少或避免负面互动的机制,这可以使得基于测得的健康/康乐数据与驾驶风格或行为之间的相关性来更安全地使用车辆。
在一个实施例中,所述参数对应于心率、心率变异性、皮肤电活动、加速度计数据、压力指标、焦虑指标或晕动病指标中的一个或任何组合。例如,所述装置测量(或接收)涉及例如乘客的健康或康乐的变化(例如,压力、焦虑、晕动病等)的度量,这些度量与由车辆移动信息(例如,快速加速、速度、怪异的移动等)指示的驾驶风格有关。可以从驾驶员接收类似的度量,这种度量可能是由驾驶员的驾驶风格引起的乘客行为(例如,不适、担心等)的结果。通过监测这些参数,向车辆中的乘员告知实时信息以使得能够产生对正面影响驾驶体验的适当反应。
在一个实施例中,所述装置通过将信号传送到触觉设备、视觉设备、听觉设备或视听设备中的一个或任何组合来触发所述反馈,其中,所述反馈包括触觉反馈、视觉反馈或听觉反馈中的一个或任何组合。例如,在对驾驶员进行反馈的情况下,可以通过嵌入在车辆的方向盘、扶手、座椅、变速杆等内的或嵌入在驾驶员穿戴的可穿戴设备内的触觉设备以触觉方式提供反馈,也可以在驾驶员或车辆结构中拥有的可穿戴设备或移动设备上提供的振动提醒。除了触觉反馈之外或者代替触觉反馈,可以使用车辆显示屏或仪表板(或者经由可穿戴设备或移动设备的用户接口功能),利用文本或警报灯或者经由眼镜(例如,谷歌眼镜)在视觉上提供对驾驶员的反馈,并且/或者(例如使用头戴式耳机、车辆扬声器,或者驾驶员的可穿戴设备和/或移动设备的嘟嘟声或嗡嗡声)在听觉上提供对驾驶员的反馈。也可以(例如使用他或她自己的可穿戴设备、移动设备和/或车辆内的结构(例如,附近的扬声器、扶手中的电动机/致动器、座椅等))向乘客提供类似的反馈机制。这种反馈影响每个乘员而使他们改变各自的行为以获得正面的驾驶体验和安全的行驶。
在一个实施例中,所述装置可以被配置为:在不向所述乘客提醒对所述驾驶员的反馈(例如经由触觉反馈、文本反馈等)的情况下或者在不向所述驾驶员提醒对所述至少一个乘客的反馈(例如经由触觉反馈、文本反馈等)的情况下传送所述信号。换句话说,可以将反馈不明显地提供给预期的接收者。这种反馈可以防止出现令人尴尬的局面并且/或者降低冲突进一步升级的可能性,从而通过避免冲突来促进行驶更加和谐。
在一个实施例中,装置还被配置为接收从一个或多个其他车辆中的一个或多个乘员感测的一个或多个参数,所述一个或多个参数包括生理信息、情绪信息、或生理信息与情绪信息的组合,其中,所述相关和所述触发都基于所述一个或多个乘员。在进行这个操作的过程中,所述装置会触发关于他或她的驾驶行为对他们周围的其他驾驶员如何产生负面影响的反馈,从而有助于减少冲突。
在一个实施例中,装置被配置为:接收从车辆的驾驶员感测的一个或多个第一参数以及从所述车辆中的乘客感测的一个或多个第二参数,所述一个或多个第一参数和所述一个或多个第二参数各自包括生理信息、行为信息、或生理信息与行为信息的组合;基于所接收的一个或多个第一参数和所接收的一个或多个第二参数来预测所述驾驶员和所述乘客的各自的瞌睡水平;并且基于针对所述驾驶员的所预测的瞌睡水平来触发对所述车辆中的所述乘客的反馈,或者基于针对所述乘客的所预测的瞌睡水平来触发对所述驾驶员的反馈。例如,监测驾驶员和一个或多个乘客的睡眠状态。在驾驶员和乘客都希望保持清醒并且驾驶员的注意力正在下降的情况下,向乘客发送反馈以影响乘客以使他或她注意使驾驶员保持清醒,包括采取如下的一种或多种行动:与驾驶员交谈,打开收音机,改变车辆环境设置(例如,较冷的空气)等。如果驾驶员希望乘客助其保持清醒并且感觉到乘客的注意力正在降低,则驾驶员接收反馈并且可以要求乘客保持提醒。通过相互监测车辆内乘员的瞌睡水平,通过计算机辅助的协同努力来确保每个乘员的安全。
在一个实施例中,装置被配置为:接收包括驾驶员和乘客的车辆的路线和驾驶时间的驾驶计划;基于所接收的驾驶计划来确定所述乘客开始持续定义时间段的打盹时段或注意力不集中时段的时间;并且向所述乘客触发关于所述时间的建议。例如,当对乘客打个盹或者注意力不集中的最佳时间进行安排(例如当乘客与驾驶员切换角色时乘客保持神清气爽)时考虑规划的路线和驾驶时间。
在一个实施例中,装置还被配置为:基于以下各项中的一个或任何组合来确定所述时间:关于所述驾驶员的睡眠行为的信息、关于所述乘客的睡眠行为的信息、关于沿着所述路线的行驶的安全性的信息、关于沿着所述路线的行驶的复杂性的信息、所述驾驶员经过的驾驶时间、一天中的时间、交通状况、建筑物或天气。例如,装置建议在较安全的路线时间段(例如具有较低的事故发生可能性和/或对驾驶技能的挑战较少)和/或根据其他因素(包括驾驶员已经经过的驾驶时间、一天中的时间(例如人们在夜间早些时候会感觉更加瞌睡)等)来打盹(或者在一些实施例中允许乘客注意力不集中)。装置使得能够智能地决定建议的打盹或注意力不集中的开始时间,从而实现安全行驶。
在一个实施例中,所述信息中的至少一个是从所述车辆的外部的源接收的。例如,装置可以使用被存储在存储用户数据的外部数据库中的信息,这些信息包括个人信息(例如,驾驶员和/或乘客的睡眠模式、道路交通事故的统计数据、交通模式等),其中,外部数据库减轻了对车辆内的一个或多个设备(尤其是电池供电的设备)的存储容量的需求。
参考下文描述的(一个或多个)实施例,本发明的这些方面和其他方面将是明显的并且得到阐明。
附图说明
参考以下附图能够更好地理解本发明的许多方面,附图是示意性的。附图中的部件不一定是按比例绘制的,而是将重点放在清楚地说明本发明的原理上。此外,在附图中,相同的附图标记在若干视图中表示对应的部分。
图1是图示根据本发明的实施例的其中使用车辆乘员互动系统的示例性车辆的示意图。
图2是图示根据本发明的实施例的其中可以实施车辆乘员互动系统的全部或部分功能的示例性可穿戴设备的示意图。
图3是图示根据本发明的实施例的其中可以实施车辆乘员互动系统的全部或部分功能的示例性移动设备的示意图。
图4是图示根据本发明的实施例的其中可以实施车辆乘员互动系统的全部或部分功能的示例性车辆处理单元的示意图。
图5是图示根据本发明的实施例的示例性车辆乘员互动方法的流程图。
图6是图示根据本发明的实施例的另一示例性车辆乘员互动方法的流程图。
图7是图示根据本发明的实施例的另一示例性车辆乘员互动方法的流程图。
具体实施方式
本文公开了车辆乘员互动系统的某些实施例,该车辆乘员互动系统可以通过以下措施来提高车辆行驶的安全性:增加车辆驾驶员(即,控制车辆导航的车辆人类乘员)与一个或多个车辆内乘客之间的正面互动,并且/或者减少或避免负面互动,从而使得可能更安全地使用车辆。在车辆乘员互动系统的一个实施例中,装置包括存储器和一个或多个处理器,该一个或多个处理器监测驾驶员和/或乘客的健康和/或康乐以及驾驶员的驾驶风格。这种监测可以由嵌入(或从外部附接到)车辆结构的一个或多个传感器、被附接到乘员的(一个或多个)可穿戴设备中的一个或多个传感器、乘员的移动设备中的一个或多个传感器或其任何组合来执行。装置将驾驶风格与(一个或多个)健康参数进行相关,并且触发对一个乘员的关于另一个乘员的健康或康乐的变化的反馈,以促使所有乘员感到正面和安全的驾驶体验。在一些实施例中,装置可以使用所监测的健康参数来预测乘员的瞌睡水平。在一些实施例中,装置可以使用关于驾驶计划的信息来向乘客建议给定行程期间的打盹/注意力不集中时间。该建议寻求在行驶路线期间的打盹/注意力不集中时间,这对驾驶构成较低的挑战并且/或者在没有乘客注意的情况下能够安全的导航。
简单地说,车辆乘员之间的负面互动可能会带来负面的驾驶体验,并且可能会导致无法解决的伤害甚至事故。通过提供关于车辆乘员的健康和康乐的计算机辅助智能,车辆乘员互动系统的某些实施例能够减轻具有这种负面体验的风险并且为所有相关乘员提供正面和安全的行驶。
在总结了本公开内容的车辆乘员互动系统的某些特征之后,现在将详细参考对附图所示的车辆乘员互动系统的描述。虽然车辆乘员互动系统将结合这些附图进行描述,但是并不旨在将车辆乘员互动系统限制于本文公开的一个或多个实施例。例如,虽然主要在管理一个车辆中的乘员之间的互动的背景下进行描述,但是在一些实施例中,也可以根据车辆乘员互动系统来管理多个车辆的乘员之间的互动。另外,虽然描述识别或描述了一个或多个实施例的细节,但是这些细节并不一定是每一个实施例的部分,并且所有的各种所述优点也不一定与单个实施例或所有实施例相关联。相反,其目的是覆盖与权利要求所限定的公开内容一致的所有替代、修改和等价方案。另外,应当理解,在本公开内容的背景下,权利要求不一定限于说明书中阐述的特定实施例。
现在参考图1,图1示出了示例性车辆10,在示例性车辆10中可以实施车辆乘员互动系统的某些实施例。本领域普通技术人员应当理解,在本公开内容的背景下,车辆10是许多车辆中的一个示例,并且车辆乘员互动系统的一些实施例可以用于除了图1所描绘的类型之外的其他类型的车辆。图1图示了车辆10,车辆10具有车辆处理单元12、外部车辆传感器14(例如,前部传感器14A和后部传感器14B)以及内部车辆传感器16(例如,16A和16B)。注意,传感器14、16和车辆处理单元12的数量在一个实施例中是说明性的,并且在一些实施例中可以使用更少或更多数量的一个或多个这些类型的部件。内部车辆传感器16位于车辆10的车厢中。外部车辆传感器14位于车辆10的外部。外部车辆传感器14和内部车辆传感器16能够与车辆处理单元12通信,例如经由无线介质(例如,蓝牙、近场通信(NFC)和/或各种已知的光编码技术之一等)和/或有线介质(例如通过一条或多条CAN总线)进行通信。内部车辆传感器16可以包括以下各项中的至少一个:温度传感器、麦克风、相机、光传感器、压力传感器、加速度计、接近度传感器(包括信标)、射频识别(RFID)或其他编码光技术以及其他传感器。外部车辆传感器14可以包括以下各项中的至少一个:温度传感器、用于测量降水和/或湿度的传感器、麦克风、相机、光传感器、压力传感器、加速度计等。在一些实施例中,车辆10包括地理位置传感器(例如,全球导航卫星系统(GNSS)接收器,包括全球定位系统(GPS)接收器等)。地理位置传感器提供位置坐标(例如,纬度、经度、高度)。
图1还图示了能够与至少一个云(例如,云1)18通信的车辆处理单元12。也就是说,车辆处理单元12能够(例如经由遥测,例如根据基于例如全球移动通信系统或GSM标准等配置的一个或多个网络)与云平台(云18)的一个或多个设备通信。车辆10还包括与车辆10的操作(例如,速度、刹车、方向盘的转动、车轮的转动等)有关的车辆传感器。车辆10能够由主要控制车辆10的导航(例如,方向、车辆速度、加速度等)的(人类)驾驶员20驾驶。
驾驶员20可以在穿戴可穿戴物22(在本文中也被称为驾驶员可穿戴物或可穿戴设备)时驾驶车辆10。驾驶员可穿戴物22可以包括例如飞利浦健康手表或另一健身跟踪器或智能手表。在一些实施例中,驾驶员可穿戴物22可以包括胸带、臂带、耳机、项链、腰带、衣服、头带或其他类型的可穿戴形式因素。在一些实施例中,驾驶员可穿戴物22可以是可植入设备,其可以包括位于皮肤下方或植入别处的生物相容性传感器。当驾驶员20没有驾驶车辆10时,驾驶员20也可以穿戴驾驶员可穿戴物22。驾驶员20还可以在占用在车辆10中存在的驾驶员移动设备24(例如,智能电话、平板电脑、便携式电脑、笔记本电脑、计算机等)时驾驶车辆10。驾驶员可穿戴物22能够(例如经由蓝牙、802.11、NFC等)与驾驶员移动设备24和驻留在其上的移动软件应用程序(“app”)和/或车辆处理单元12进行通信。驾驶员移动设备24能够与至少一个云(例如,云2)26进行通信。在一些情况下,驾驶员移动设备24能够与车辆处理单元12进行通信。有时,乘客28可以与驾驶员20一起乘坐车辆10。在一些情况下,乘客28可以穿戴可穿戴物30(在本文中也被称为乘客可穿戴物或可穿戴设备)。在一些情况下,乘客移动设备32(例如,智能电话、平板电脑、便携式电脑、笔记本电脑、计算机等)可以与车辆10中的乘客28一起出现。乘客可穿戴物30能够与乘客移动设备32进行通信。乘客移动设备32能够与至少一个云(例如,云2)26进行通信。在一些实施例中,乘客移动设备32能够与车辆处理单元12进行通信。下面描述对移动设备24和32的进一步讨论。移动设备24和32的其他示例可以参见2013年12月4日提交的标题为“Presentation of physiologicaldata”的国际申请公开WO 2015084353 A1,其描述了被实施为驾驶员移动设备和乘客移动设备的用户设备的示例。
通常,可穿戴设备22、30可以与车辆处理单元12以及相应的移动设备24、32进行无线通信。在一些实施例中,可穿戴设备22、30可以(例如经由遥测,例如通过蜂窝网络)直接地或者经由中间设备(例如分别经由移动设备24、32)与云18、26中的一者或两者进行通信。类似地,车辆处理单元12可以与云18、26中的一者或两者进行通信。在一些实施例中,车辆10内的所有设备都可以彼此通信并且/或者与云18、26进行通信。
使得能够与云18、26进行通信的网络可以包括适合于在无线网络中使用的多种不同的数字蜂窝技术中的任何一种,包括:GSM、GPRS、CDMAOne、CDMA2000、演进数据优化(EV-DO)、EDGE、通用移动电信系统(UMTS)、数字增强无绳电信(DECT)、数字AMPS(IS-136/TDMA)以及集成数字增强网络(iDEN)等。在一些实施例中,可以使用无线保真(WiFi)来实现与云18、26上的设备进行通信。访问云18、26(其可以是包括一个或多个网络的广域网的部分,该广域网全部或部分地包括互联网)可以通过访问一个或多个网络来进一步实现,该一个或多个网络包括PSTN(公用交换电话网路)、POTS、综合服务数字网络(ISDN)、以太网、光纤、DSL/ADSL、WiFi、紫蜂、BT、BTLE等。
云18、26可以各自包括内部云、外部云、私有云或公共云(例如,商业云)。例如,私有云可以使用各种云系统来实施,各种云系统包括例如桉树系统、VMWareHyperV。公共云可以包括例如AmazonAmazon Web这些云提供的云计算资源可以包括例如存储资源(例如,存储区域网络(SAN)、网络文件系统(NFS)和Amazon)、网络资源(例如,防火墙、负载平衡器和代理服务器)、内部私有资源、外部私有资源、安全公共资源、基础架构即服务(IaaS)、平台即服务(PaaS)或软件即服务(SaaS)。可以根据多种不同配置中的一种配置来实施云架构。例如,如果根据MICROSOFT AZURETM进行配置,则会提供角色,这些角色是利用托管代码构建的离散可扩展部件。工作者角色用于通用开发并且可以为网络角色执行后台处理。网络角色提供网络服务器并且经由HTTP(超文本传输协议)或HTTPS(HTTP安全)端点来监听网络请求并对其做出响应。根据租户定义的配置(例如,资源、客户操作系统)来实例化VM角色。操作系统和VM更新由云来管理。网络角色和工作者角色在VM角色中运行,VM角色是租户控制下的虚拟机。存储和SQL服务可供这些角色使用。与其他云一样,硬件和软件环境或平台(包括扩展、负载平衡等)由云来处理。
在一些实施例中,云18、26的服务可以在一些实施例中根据(在服务器设备上运行的)多个逻辑分组的服务器(被称为服务器场)来实施。服务器场的设备可以在地理上是分散的,作为单个实体进行管理,或者在多个服务器场之间进行分布,代表可穿戴物22、30、移动设备装置24、32和/或车辆处理单元12中的一个或多个或与其一起运行一个或多个应用程序。每个服务器场内的设备可能是由不同部件组成的。服务器场的设备中的一个或多个设备可以根据一种类型的操作系统平台(例如,由华盛顿州雷蒙德市的微软公司制造的WINDOWS NT)进行操作,而其他设备中的一个或多个设备可以根据另一种操作系统平台(例如,Unix或Linux)进行操作。服务器场的设备组可以在逻辑上被分组为可以使用广域网(WAN)连接或中间区域网络(MAN)连接互连的服务器场,并且每个设备可以各自被称为文件服务器设备、应用服务器设备、网络服务器设备、代理服务器设备或网关服务器设备(并且根据它们来进行操作)。
在一些实施例中,车辆10还包括至少一个相机34。相机34可以被定位为查看驾驶员的面部。在一些实施例中,相机34被定位为观察乘客的面部。在一些实施例中,车辆10可以包括用于观察车辆10中的人的多个相机。相机34能够与车辆处理单元12、可穿戴物22、30、移动设备24、32和/或云(例如,云18和/或云26)中的至少一个进行通信。在一些实施例中,相机34包括生命体征相机,例如,飞利浦的生命体征相机。该生命体征相机使用基于标准红外(IR)的相机通过感测皮肤颜色和身体移动(例如,胸部移动)的变化来远程测量心脏率和呼吸速率。例如,每当心脏跳动时,皮肤颜色就会因额外的血液流过血管而发生变化。驻留在生命体征相机内的算法相机检测这些微小的皮肤颜色变化,放大该信号,并且通过分析颜色变化的频率来计算脉搏率信号。对于呼吸,生命体征相机关注胸部和/或腹部的上升和下降,使用算法来放大信号并且确定准确的呼吸速率。生命体征相机也具有运动鲁棒性,在运动过程中使用面部跟踪来获得准确的读数。生命体征相机(其具有非干扰性的脉搏率和呼吸率测量功能)使得能够跟踪情绪、睡眠模式和活动水平,并且能够用于帮助检测驾驶员和/或乘客的困倦(例如,瞌睡水平)、压力和注意力水平。通常,在监测健康时,脉搏率和呼吸速率监测是有用的,特别是作为情绪的生理指标。可以在可穿戴设备22、30和/或移动设备24、32的相机中找到相同或相似的功能。
驾驶员可穿戴物22和/或乘客可穿戴物30包括以下各项中的至少一个:加速度计、光体积描记(PPG)传感器、用于检测皮肤电活动(EDA)的传感器(例如,检测皮肤的电特性的变化,包括皮肤导电性、皮肤流电反应、皮肤电反应)、血压袖带、血糖监测仪、心电图传感器、步数计数器传感器、陀螺仪、SpO2传感器(例如提供动脉血氧饱和度的估计值)、呼吸传感器、姿势传感器、压力传感器、皮肤流电反应传感器、温度传感器、压力传感器、光传感器和其他生理参数传感器。驾驶员可穿戴物22和/或乘客可穿戴物30能够感测与心率、心率变异性、呼吸速率、脉搏传输时间、血压、温度以及其他生理参数有关的信号。其他可能的参数和传感器参见2004年9月13日提交的标题为“System for monitoring and managing bodyweight and other physiological conditions including iterative andpersonalized planning,intervention and reporting capability”的US 8398546的表1中的描述。在一些实施例中,上文针对驾驶员可穿戴物22描述的传感器可以替代地(例如未被驾驶员20穿戴)被集成在车辆10的结构中,也可以被定位在车辆10中的驾驶员20附近。例如,车辆方向盘可以包括这些传感器中的一个传感器(例如,ECG传感器)。作为另一示例,车辆10的驾驶员的座椅可以包括传感器(例如,压力传感器)。
对于某些实施例,对车辆乘员互动系统的处理可以被包括在以下各项中的一个或任何组合中:车辆处理单元12、云(例如、云18和/或26的一个或多个设备)、驾驶员可穿戴物22、乘客可穿戴物30、驾驶员移动设备24和/或乘客移动设备32。本发明的各种实施例提出了克服缺乏监测驾驶员和乘客的问题的方式并且向这些人提供关于另一个人的体验或健康状况的更新情况。在下面的描述中,针对某些实施例,车辆乘员互动系统的主要处理功能被描述为被实施在车辆处理单元12中,其中,由各种车辆传感器14、16、可穿戴物22、30、(一个或多个)相机34和/或移动设备24来传送生理参数,并且在车辆10内的各种结构(例如,座椅、视觉显示屏、听觉设备等)、可穿戴物22、30和/或移动设备24处实施反馈。应当理解,在一些实施例中,车辆10内部或外部的其他设备(例如,(一个或多个)云18和/或26)可以是用于处理功能的主要位置,因此预想到其处于本发明的范围内。
现在将注意力转向图2,图2图示了其中可以实施车辆乘员互动系统的全部或部分功能的可穿戴设备36的示例。驾驶员可穿戴物22或乘客可穿戴物30可以根据图2中描绘的可穿戴设备36的架构和功能来构造。特别地,图2图示了示例性可穿戴设备36的示例性架构(例如,硬件和软件)。本领域普通技术人员应当理解,在本公开内容的背景下,图2中描绘的可穿戴设备36的架构仅是一个示例,并且在一些实施例中,可以使用额外的、更少的和/或不同的部件来实现相似的和/或额外的功能。在一个实施例中,可穿戴设备36包括多个传感器38(例如,38A-38N)、分别耦合到传感器38的一个或多个信号调理电路40(例如,SIG CONDCKT 40A-SIG COND CKT 40N)以及处理电路42(包括一个或多个处理器),处理电路42接收来自信号调理电路40的调理信号。在一个实施例中,处理电路42包括模数转换器(ADC)、数模转换器(DAC)、微控制器单元(MCU)、数字信号处理器(DSP)和存储器(MEM)44。在一些实施例中,处理电路42可以包括比图2中描绘的部件更少的或额外的部件。例如,在一个实施例中,处理电路42可以完全由微控制器单元组成。在一些实施例中,处理电路42可以包括信号调理电路40。
存储器44包括操作系统(OS)和应用软件(ASW)46,存储器44在一个实施例中包括车辆乘员互动系统的一种或多种功能。在一些实施例中,可以包括额外的软件以用于实现物理跟踪和/或行为跟踪以及其他功能。在所描绘的实施例中,应用软件46包括用于处理从传感器38接收的信号的传感器测量模块(SMM)48、用于基于对控制信令触发激活的接收(例如在一个实施例中从车辆处理单元12(图1)接收,但是在一些实施例中也可以从可穿戴设备36内部的其他设备或软件触发反馈)来激活可穿戴设备36的反馈电路的反馈模块(FM)50以及通信模块(CM)52。在一些实施例中,可以包括用于实现车辆乘员互动系统的公开功能的额外模块以及其他功能,或者模块48-52中的一个或多个模块可以与应用软件46分离或者相对于彼此以不同的布置进行封装。在一些实施例中,可以在可穿戴设备36中使用少于全部模块48-52的模块。
传感器测量模块48包括用于处理由传感器38测量的信号(以及相关联的数据)的可执行代码(指令)。例如,传感器38可以测量一个或多个参数(生理参数、情绪参数等),包括心率、心率变异性、皮肤电活动和/或身体运动(例如使用单轴或三轴加速度计进行测量)。传感器测量模块48可以分析这些参数中的一个或多个参数,使得能够导出穿戴可穿戴设备36的对象的健康和/或康乐指标,包括压力指标、焦虑指标、晕动病指标、瞌睡程度等。在一些实施例中,对应于这些参数中的一个或多个参数的原始数据被传送到车辆处理单元12(图1),车辆处理单元12从原始数据中导出这些指标。在一些实施例中,传感器测量模块48的功能可以以分布式计算方式在本地和在其他设备(例如,车辆处理单元12)处实现。传感器测量模块48可以控制传感器38中的一个或多个传感器的采样率。
反馈模块50包括用于接收触发信号和激活反馈电路的可执行代码(指令)。在一个实施例中,触发信号可以从车辆10内的另一个设备(图1)进行传送,包括从另一个可穿戴物、移动设备或车辆处理单元12(图1)。在一些实施例中,可穿戴设备36的应用软件46(例如可穿戴设备36实现的用于确定乘客或驾驶员压力和/或沮丧、瞌睡和/或适当的打盹/注意力不集中时间的处理功能)传达触发信号。在一些实施例中,触发信号从车辆10(图1)内的其他设备(例如,相机34)进行传送,或者从车辆10外部的设备(例如从(一个或多个)云18、26的设备)进行传送。反馈模块50基于接收到触发信号来激活可穿戴设备36的一个或多个电路。例如,可穿戴设备36中的振动电动机可被激活而以触觉方式向可穿戴设备36的使用者提醒例如乘客压力(或者当乘客穿戴时提醒驾驶员的压力)或瞌睡。作为另一示例,可以激活可穿戴设备36的照明状态(例如,发光二极管或LED)而以可视方式提醒可穿戴设备36的使用者,或者可以激活音频电路(例如,蜂鸣器)而以听觉方式提醒可穿戴设备36的使用者。在一些实施例中,可穿戴设备36可以包括显示屏,其中以文本或图形消息或照明的形式呈现提醒。在一些实施例中,可以实施触觉、视觉或听觉反馈的任何组合。在一些实施例中,可以根据触发信号在强度上调制反馈。例如,可以根据被监测对象的情绪、行为或生理状态或状况来改变LED光激活(例如,闪光灯)或显示照明的频率。例如,在监测乘客的生理或情绪状态的情况下,可以例如以反映压力水平强度的方式调制来自车辆处理单元12的触发信号,当压力增加时,这可以经由更快速的闪光或者增大的嘟嘟声频率或音量或者增大的振动强度或者转变到其他反馈机制(例如,蜂鸣器到嘟嘟声,嘟嘟声到视觉刺激等)以及其他形式的反馈而表现在反馈中。通常,可以以反映所感测的健康或康乐变化的方式来调整反馈,以在一些实施例中使得能够区分变化水平。在一些实施例中,可穿戴设备36可以将信号传送到另一个设备以激活该另一个设备中的反馈机制。
通信模块52包括用于执行以下操作的可执行代码(指令):使得可穿戴设备36的通信电路54能够根据多种不同的通信技术中的一种或多种通信技术(例如,NFC、蓝牙、紫蜂、802.11、无线保真、GSM等从车辆10内部或车辆10外部的一个或多个设备(例如,其他可穿戴设备、移动设备、云设备、车辆处理单元、相机等)接收数据并且/或者将数据发送到上述设备。出于说明的目的,通信模块52在本文中被描述为提供对与车辆处理单元12(图1)的通信的控制。在一个实施例中,经由结合通信模块52的通信电路54将一个或多个感测参数传送到车辆处理单元12,并且经由结合通信模块52的通信电路54从车辆处理单元12接收触发信号。如上所述,被传送到车辆处理单元12的参数可以是原始数据或导出数据或这两者的组合。
如上所述,在一个实施例中,处理电路42被耦合到通信电路54。通信电路54用于实现可穿戴设备36与车辆10(图1)内部或外部的其他设备之间的无线通信。通信电路54被描绘为蓝牙(BT)电路,但不限于这种收发器配置。例如,在一些实施例中,通信电路54可以被实施为以下各项中的任何一种或组合:NFC电路、Wi-Fi电路、基于紫蜂的收发器电路、BT低能量、802.11、GSM、LTE、CDMA、WCDMA,以及诸如基于光学或超声的技术之类的其他电路。在一些实施例中,可以使用根据上述通信规范/标准中的一个以上的通信规范/标准的多个收发器电路。
处理电路42还被耦合到输入/输出(I/O)设备或外围设备,包括输入接口56(INPUT)和输出接口58(OUT)。在一些实施例中,可以省略输入接口56和/或输出接口58,或者可以将这两者的功能组合成单个部件。
注意,在一些实施例中,可以将前述电路和/或软件中的一个或多个电路和/或软件的功能组合到更少的部件/模块中,或者在一些实施例中,可以将前述电路和/或软件中的一个或多个电路和/或软件的功能进一步分布在额外的部件/模块或设备中。例如,处理电路42可以被封装为包括微控制器(微控制器单元或MCU)、DSP和存储器44的集成电路,而ADC和DAC可以被封装为被耦合到处理电路42的单独的集成电路。在一些实施例中,可以组合上面列出的部件的功能中的一种或多种功能(例如,由微控制器执行的DSP的功能)。
如上所述,传感器38包括能够测量生理、情绪和/或行为参数的传感器中的一个或任何组合。例如,典型的生理参数包括心率、心率变异性、心率恢复、血流速率、活动水平、肌肉活动(包括核心移动、身体取向/位置、力量、速度、加速度等)、肌肉张力、血容量、血压、血氧饱和度、呼吸速率、出汗、皮肤温度、皮肤电活动(皮肤导电反应、皮肤流电反应、皮肤电反应等)、体重以及身体组成成分(例如,体重指数或BMI)、发音器官移动(特别是在演讲期间)、虹膜扫描(例如使用成像传感器)。生理参数可以用于确定各种信息。例如,典型的行为信息包括各种睡眠水平行为、车辆驾驶风格行为(例如使用加速计传感器来测量或检测方向盘上的快速、不规则的方向盘移动和/或手位置,脚移动(例如在刹车踏板或加速踏板上的移动),手的移位移动等。注意,在一些实施例中,车辆传感器可以提供类似的驾驶风格表征。其他信息包括驾驶位置(例如使用全球导航卫星系统(GNSS)传感器/接收器),包括它们之间的起点和终点以及(一条或多条)路线。作为另一示例,可以基于生理信息(包括压力、焦虑)来收集情绪信息。这些指示器可以包括瞳孔扩张或其他面部特征改变、心率、声音模式和/或音量、手势感测、呼吸速率等。其他信息可以包括疾病,例如,晕动病。传感器38还可以包括惯性传感器(例如,陀螺仪)和/或磁力计,它们可以例如帮助确定驾驶行为和与晕动病的相关性。在一些实施例中,如上所述,传感器38可以包括GNSS传感器(包括GPS接收器)以便于确定距离、速度、加速度、位置、高度等(例如,位置数据,或者一般地,感测移动)。在一些实施例中,除了驻留在可穿戴设备36中之外或代替这种情况,GNSS传感器(例如,GNSS接收器和(一个或多个)天线)还可以被包括在(一个或多个)移动设备24、32(图1)和/或车辆10(图1)中。在一些实施例中,可以经由被耦合到处理电路42的通信电路54或其他电路来实现GNSS功能。传感器38还可以包括弯曲传感器和/或力传感器(例如使用可变电阻)、肌电图传感器、心电图传感器(例如,EKG、ECG)、磁性传感器、光体积描记(PPG)传感器、生物阻抗传感器、红外接近度传感器、声学/超声/音频传感器、应变仪、皮肤流电传感器/汗液传感器、pH传感器、温度传感器以及光电管。传感器38可以包括用于检测环境参数和/或状况(例如,气压、湿度、室外温度、污染水平、噪声水平等)的其他和/或额外类型的传感器。这些感测的环境参数/状况中的一个或多个可能对确定用户状态产生影响。注意,可以基于微机电系统(MEMS)基础设施中的压电、压阻或电容技术来构造传感器38中的一个或多个传感器。
信号调理电路40包括放大器和滤波器以及其他信号调理部件,以在处理电路42处实施进一步的处理之前调理包括与所感测的生理参数和/或位置信号相对应的数据的感测信号。虽然图2中将信号调理电路40描绘为分别与每个传感器38相关联,但是在一些实施例中也可以使用较少的信号调理电路40(例如共用于超过一个传感器38)。在一些实施例中,信号调理电路40(或其功能)可以并入其他地方,例如并入相应的传感器38的电路中或者并入处理电路42中(或者并入在处理电路42中驻留的部件中)。另外,虽然上面的描述涉及单向信号流(例如从传感器38到信号调理电路40),但是在一些实施例中,信号流也可以是双向的。例如,在光学测量的情况下,微控制器可以使光学信号从传感器38的电路中的或耦合到传感器38的电路的光源(例如,(一个或多个)发光二极管或(一个或多个)LED)发出,其中,传感器38(例如,光电管)接收反射/折射信号。
通信电路54由处理电路42管理和控制(例如运行通信模块52)。通信电路54用于与车辆处理单元12(图1)无线接口连接,并且/或者在一些实施例中,通信电路54用于与车辆10(图1)内部和/或外部的一个或多个设备无线接口连接。在一个实施例中,通信电路54可以被配置为蓝牙收发器,但是在一些实施例中,也可以使用其他和/或额外的技术,例如,Wi-Fi、GSM、LTE、CDMA及其衍生物、紫蜂、NFC等。在图2中描绘的实施例中,通信电路54包括发送器电路(TX CKT)、开关(SW)、天线、接收器电路(RX CKT)、混合电路(MIX)以及跳频控制器(HOP CTL)。发送器电路和接收器电路包括适合于提供相应的RF信号发送和接收的部件,包括调制器/解调器、滤波器以及放大器。在一些实施例中,解调/调制和/或滤波可以部分地或全部地由DSP执行。开关在接收模式与发送模式之间切换。混合电路可以被实施为频率合成器和频率混合器,它们由处理电路42来控制。跳频控制器基于来自发送器电路的调制器的反馈来控制发射信号的跳频。在一些实施例中,跳频控制器的功能可以由微控制器或DSP来实施。对通信电路54的控制可以由微控制器、DSP或这两者的组合来实施。在一些实施例中,通信电路54可以具有其自己的专用控制器,该专用控制器由微控制器来监督和/或管理。
在针对通信电路54的一个示例性操作中,可以在天线处(例如以2.4GHz)接收信号并且由开关将该信号引导到接收器电路。接收器电路(其与混合电路协作)在归于跳频控制器的跳频控制下将接收到的信号转换为中频(IF)信号,然后转换到基带以供ADC进一步处理。在发送侧,(例如来自处理电路42的DAC)基带信号被转换为IF信号,然后由与混合电路协作的发送器电路转换为RF信号,其中,RF信号通过开关并且在跳频控制器提供的跳频控制下从天线发出。发送器电路和接收器电路的调制器和解调器可以执行频移键控(FSK)型调制/解调,但不限于这种类型的调制/解调,这种类型的调制/解调使得能够进行IF与基带之间的转换。在一些实施例中,解调/调制和/或滤波可以部分地或全部地由DSP来执行。存储器44存储通信模块52,通信模块52在由微控制器运行时控制蓝牙(和/或其他协议)发送/接收。
虽然通信电路54被描绘为IF型收发器,但是在一些实施例中,也可以实施直接转换架构。如上所述,通信电路54可以根据其他和/或额外的收发器技术来实施。
图2中将处理电路42描绘为包括ADC和DAC。对于感测功能,ADC将来自信号调理电路40的调理信号进行转换并且将该信号数字化以供微控制器和/或DSP进一步处理。ADC还可以用于将经由输入接口56接收的模拟输入转换为数字格式以供微控制器进一步处理。ADC还可以用于对经由通信电路54接收的信号的基带处理。DAC将数字信息转换为模拟信息。DAC的用于感测功能的角色可以是控制从传感器38发出信号(例如,光学信号或声学信号)。DAC还可以用于使得从输出接口58输出模拟信号。而且,DAC可以用于将来自微控制器和/或DSP的数字信息和/或指令转换为被馈送到发送器电路的模拟信号。在一些实施例中,可以使用额外的转换电路。
微控制器和DSP为可穿戴设备36提供处理功能。在一些实施例中,这两个处理器的功能可以被组合到单个处理器中,或者进一步被分布在额外的处理器之间。DSP提供专门的数字信号处理,并且使得能够从微控制器卸载处理负载。DSP可以被实施在(一个或多个)专用集成电路中或被实施为现场可编程门阵列(FPGA)。在一个实施例中,DSP包括流水线架构,其包括中央处理单元(CPU)、多个循环缓冲器以及根据哈佛架构的单独的程序和数据存储器。DSP还包括双总线,其实现了并行指令和数据获取。DSP还可以包括指令高速缓冲存储器和I/O控制器,例如,模拟设备DSP中发现的那些指令高速缓冲存储器和I/O控制器,但是也可以使用其他DSP制造商(例如,飞思卡尔多核MSC81xx系列、德州仪器C6000系列等)。DSP通常用于使用寄存器和数学部件来进行数学处理,数学部件可以包括乘法器、算术逻辑单元(ALU,其执行加法运算、减法运算、绝对值运算、逻辑运算、固定点单元与浮点单元之间的转换等),以及桶式移位器。DSP实施快速乘法累加(MAC)的能力使得能够高效运行快速傅里叶变换(FFT)和有限脉冲响应(FIR)滤波。部分或全部的DSP功能可以由微控制器来执行。DSP通常在可穿戴设备36中提供编码功能和解码功能。例如,编码功能可以涉及编码与信息传输相对应的命令或数据。而且,解码功能可以涉及对(例如在由ADC处理之后)从传感器38接收的信息进行解码。
微控制器包括用于运行软件/固件(尤其是被存储在存储器44中的软件/固件)的硬件设备。微控制器能够是任何定制的或商用的处理器、中央处理单元(CPU)、(以微芯片或芯片组的形式的)基于半导体的微处理器、宏处理器,或通常用于运行软件指令的任何设备。合适的商用微处理器的示例包括英特尔公司的微处理器,这里仅举几个非限制性示例。微控制器提供对可穿戴设备36的管理和控制。
存储器44(在本文中也被称为非瞬态计算机可读介质)能够包括易失性存储器元件(例如,随机存取存储器(RAM,例如,DRAM、SRAM、SDRAM等))和非易失性存储器元件(例如,ROM、闪速存储器、固态存储器、EPROM、EEPROM等)中的任何一种或组合。此外,存储器44可以包含电子、磁性和/或其他类型的存储介质。存储器44可以用于在给定的时间段内和/或基于给定的存储量约束来存储传感器数据以供稍后处理。
存储器44中的软件可以包括一个或多个单独的程序,这些程序中的每个程序都包括用于实施逻辑功能的可执行指令的有序列表。在图2的示例中,存储器44中的软件包括合适的操作系统和应用软件46,在一个实施例中,应用软件46分别经由模块48、50和52而包括传感器测量能力、反馈生成能力和通信能力。
操作系统基本上控制计算机程序(例如,应用软件46和相关联的模块48-52)的运行并且提供调度,输入-输出控制,文件和数据管理,存储器管理以及通信控制和相关服务。存储器44还可以包括用户数据(包括体重、身高、年龄、性别、目标、体重指数(BMI)),其可以由运行可执行代码的微控制器用于准确解读测量参数。用户数据还可以包括将过去记录的数据与先前的背景(包括睡眠历史)进行相关的历史数据。在一些实施例中,用户数据可以被存储在别处(例如被存储在移动设备24、32(图1)处、车辆处理单元12(图1)处或远处(例如被存储在(一个或多个)云18、26(图1)中的存储设备中))。
存储器44中的软件包括源程序、可执行程序(目标代码)、脚本或包括要执行的指令集的任何其他实体。当为源程序时,程序可以经由编译器、汇编器、解释器等进行翻译,以便与操作系统一起正确操作。此外,软件能够被编写为(a)面向对象的编程语言,其具有数据和方法的类,或者(b)过程编程语言,其具有例程、子例程和/或函数,例如但不限于C、C++、Python、Java等。该软件可以被实施在计算机程序产品中,该计算机程序产品可以是非瞬态计算机可读介质或其他介质。
(一个或多个)输入接口56包括用于输入用户输入的一个或多个接口(例如包括用户接口),例如,按钮或麦克风或(一个或多个)传感器(例如用于检测用户输入,包括触摸型显示屏)。在一些实施例中,输入接口56可以用作用于(例如经由有线连接)将下载信息下载到可穿戴设备36的通信端口。(一个或多个)输出接口58包括用于呈现反馈或(例如有线)数据传输的一个或多个接口,包括用户接口(例如,呈现图形的显示屏或其他类型的用户接口,虚拟或增强现实接口等)或者用于(例如有线)传输被存储在存储器44中的信息的通信接口。输出接口58可以包括其他类型的反馈设备,例如,照明设备(例如,LED)、听觉设备(例如,音调发生器和扬声器)和/或触觉反馈设备(例如,振动电动机)和/或电反馈设备。
现在参考图3,图3示出了其中可以实施车辆乘员互动系统的全部或部分功能的示例性移动设备60。驾驶员移动设备24和乘客移动设备32均可以根据图3中描绘的移动设备60的架构和功能来构造。特别地,图3图示了示例性移动设备60的示例性架构(例如,硬件和软件)。本领域普通技术人员应当理解,在本公开内容的背景下,图3中描绘的移动设备60的架构仅是一个示例,并且在一些实施例中,也可以使用额外的,更少的和/或不同的部件来实现类似和/或额外的功能。在所描绘的示例中,移动设备60被实施为智能手机,但是在一些实施例中,也可以使用其他类型的设备,包括工作站、便携式电脑、笔记本电脑、平板电脑等。在一些实施例中,可以使用移动设备60来提供车辆乘员互动系统的某些实施例的全部功能,或者在一些实施例中,可以结合可穿戴设备36(图2)、车辆处理单元12(图1)或(一个或多个)云18、26(图1)的一个或多个设备中的一个或任何组合来提供车辆乘员互动系统的功能。在下面的描述中,移动设备60被描述为提供参数感测,反馈和通信功能,类似于针对可穿戴设备36所描述的那样,能够理解,在一些实施例中,移动设备60可以提供车辆乘员互动系统的更少或更多的功能。
移动设备60包括至少两个不同的处理器,包括基带处理器(BBP)62和应用处理器(APP)64。众所周知,基带处理器62主要处理与基带通信相关的任务,并且应用处理器64通常处理输入和输出以及除了与基带处理直接相关的应用之外的所有应用。基带处理器62包括专用处理器,该专用处理器用于部署与协议栈(PROT STK)相关联的功能(例如但不限于GSM(全球移动通信系统)协议栈)以及其他功能。应用处理器64包括多核处理器,该多核处理器用于运行应用程序,包括应用软件46A的全部或部分。基带处理器62和应用处理器64具有各自的相关联的存储器(例如,MEM)66、68(包括随机存取存储器(RAM)、闪速存储器等)以及外围设备和运行时钟。存储器66、68在本文中也均被称为非瞬态计算机可读介质。注意,虽然被描绘为驻留在存储器68中,但是应用软件46A的全部或部分模块也可以被存储在存储器66中,分布在存储器66、68中,或者驻留在其他存储器中。
基带处理器62可以部署协议栈的功能以使得移动设备60能够访问一种或多种无线网络技术,包括WCDMA(宽带码分多址)、CDMA(码分多址)、EDGE(GSM增强数据率演进)、GPRS(通用分组无线服务)、紫蜂(例如基于IEEE 802.15.4)、蓝牙、Wi-Fi(无线保真,例如基于IEEE 802.11)和/或LTE(长期演进)及其变体和/或其他电信协议、标准和/或规范。基带处理器62管理无线电通信和控制功能,包括信号调制、射频移位和编码。基带处理器62包括或者可以被耦合到无线电模块(例如,RF前端)70和/或GSM(或其他通信标准)调制解调器以及模拟和数字基带电路(ABB、DBB、分别在图3中示出)。无线电模块70包括一个或多个天线、收发器和功率放大器,以使得能够接收和发送多个不同频率的信号,从而使得能够访问蜂窝(和/或无线)网络。模拟基带电路被耦合到无线电模块70并且提供GSM调制解调器的模拟域与数字域之间的接口。模拟基带电路包括:包含模数转换器(ADC)和数模转换器(DAC)的电路,控制和电源管理/分配部件,以及用于处理经由应用处理器64间接接收的或者从用户接口(UI)72(例如,麦克风、耳机、铃声、振动器电路、触摸屏等)直接接收的模拟信号和/或数字信号的音频编码译码器。ADC将任何模拟信号数字化,以便由数字基带电路进行处理。数字基带电路部署GSM协议栈的一个或多个层次(例如,第1层、第2层等)的功能并且包括微控制器(例如,微控制器单元或MCU,其在本文中也被称为处理器)和数字信号处理器(DSP,其在本文中也被称为处理器),它们通过共享存储器接口进行通信(该存储器包括数据和控制信息以及指示对由应用处理器64处理的数据采取的动作的参数)。MCU可以被实施为运行实时操作系统(RTIOS)的RISC(精简指令集计算机)机器,其中,核心具有多个外围设备(例如,被封装为集成电路的电路),例如,RTC(实时时钟)、SPI(串行外设接口)、I2C(内部集成电路)、UART(通用异步接收器/发送器)、基于IrDA(红外数据协会)的设备、SD/MMC(安全数字/多媒体卡)卡控制器、键盘扫描控制器、USB设备、GPRS加密模块、TDMA(时分多址)、智能卡读卡器接口(其例如用于一个或多个SIM(用户识别模块)卡)、定时器以及其他外围设备。对于接收侧功能,MCU指示DSP接收例如来自模拟基带电路的同相/正交(I/Q)样本并且执行检测、解调和解码并且向MCU报告。对于发送侧功能,MCU向DSP提供可发送数据和辅助信息,DSP对该数据进行编码并且将其提供给模拟基带电路(例如由DAC转换为模拟信号)。
应用处理器64在操作系统(OS)的控制下操作,该操作系统使得能够实施多个用户应用程序,包括应用程序软件46A。应用处理器64可以被实施为片上系统(SOC)并且支持(被耦合到互联网的)(一个或多个)云18、26(图1)的多个多媒体相关特征(其包括用于访问的一个或多个计算设备的基于网络浏览/云的访问功能)。例如,应用处理器64可以运行应用软件46A(例如,中间件,类似于可穿戴设备36的一些实施例,其可以包括具有一个或多个应用程序接口(API)或者与之可操作地相关联的浏览器)的通信功能,以使得能够访问云计算框架或其他网络而提供远程数据访问/存储/处理,并且通过与嵌入式操作系统协作来访问日历、位置服务、用户数据、公共数据等。例如,在一些实施例中,车辆乘员互动系统可以使用云计算服务来操作,其中,可以通过(一个或多个)云18、26(图1)的一个或多个设备来实现对经由移动设备60间接接收的或者从可穿戴设备36或车辆处理单元12(图1)直接接收的原始参数数据和/或导出的参数数据的处理,并且可以将(用于触发反馈的)触发信号从(一个或多个)云18、26(或其他设备)传送到移动设备60,移动设备60继而又可以(例如在视觉上,在听觉上,或者经由触觉机制)激活移动设备60内部的反馈或者将触发信号中继到其他设备(例如,可穿戴设备36和/或车辆处理单元12)。在所描绘的示例中,应用软件46A依赖于车辆处理单元12基于移动设备60对生理参数的感测(以及将该生理参数传送到车辆处理单元12)而进行的处理,并且响应于车辆处理单元12发送触发信号而激活移动设备60处的一种或多种类型的反馈功能,应当理解,在一些实施例中,在移动设备60处可以发生额外的和/或不同的处理。应用处理器64通常包括处理器核(进阶精简指令集机器或ARM)并且还包括或者可以被耦合到多媒体模块(其用于对图片、视频和/或音频进行解码/编码)、图形处理单元(GPU)、通信接口(COMM)74以及设备接口。在一个实施例中,通信接口74可以包括无线接口,包括蓝牙(BT)(并且/或者在一些实施例中包括紫蜂等)模块,该模块使得能够与可穿戴设备36、其他移动设备和/或车辆处理单元12进行无线通信。在一些实施例中,根据应用软件46A中的对应的通信软件,通信接口74可以包括用于与本地802.11网络进行接口连接的Wi-Fi模块。应用处理器64还包括全球导航卫星系统(GNSS)接收器76,或者在所描绘的实施例中,应用处理器64耦合到GNSS接收器76,GNSS接收器76用于使得能够访问卫星网络以例如提供位置坐标。在一些实施例中,GNSS接收器76(其与应用软件46A中的GNSS功能相关联)收集背景数据(时间和位置数据,包括位置坐标和高度)以例如在使用移动设备60的驾驶员和/或乘客远离车辆时帮助建立行为模式(结合感测功能)。注意,虽然被描述为GNSS接收器76,但是也可以使用其他室内/室外定位系统,包括基于蜂窝网络信号和/或Wi-Fi的三角测量的定位系统。
被耦合到应用处理器64的设备接口可以包括用户接口72,包括显示屏。在一些实施例中,该显示屏类似于可穿戴设备用户接口的显示屏,可以以若干可用技术中的一种来实施,这些技术包括LCD或液晶显示(或其变体,例如,薄膜晶体管(TFT)LCD、平面内切换(IPS)LCD)技术、基于发光二极管(LED)的技术(例如,有机LED(OLED)、有源矩阵OLED(AMOLED))、视网膜技术或基于触觉的技术,或者虚拟/增强现实技术。例如,用户接口72可以以传达消息(例如,文本消息)和/或符号/图形(例如,警报或提醒图标、闪烁屏幕等)和/或闪光灯(LED)的形式呈现视觉反馈。在一些实施例中,除了显示屏、小键盘、麦克风、扬声器、耳机连接器、I/O接口(例如,USB(通用串行总线))、SD/MMC卡以及其他外围设备之外或者作为其替代方案,可以配置用户接口72。例如,扬声器可以用于以听觉方式提供反馈,并且/或者用户接口72可以包括向用户提供振动反馈的振动电动机。可以使用视觉、听觉或触觉反馈中的一个或任何组合,并且如前所述,当被呈现在显示屏上时,反馈格式的强度变化可以用于提供通过例如与初始压力水平(例如,黄色)不同的颜色(例如,红色)指示的给定的健康状况和/或(例如压力越来越大的)情绪的水平。
图像捕获设备(IMAGE CAPTURE)78也被耦合到应用处理器64。图像捕获设备78包括光学传感器(例如,电荷耦合设备(CCD)或互补金属氧化物半导体(CMOS)光学传感器)。在一个实施例中,如上所述,图像捕获设备78可以被配置为生命体征相机。通常,图像捕获设备78可以用于检测用户的各种生理参数,包括血压(例如基于远程光体积描记(PPG))、心率和/或呼吸模式。图像捕获设备78还包括控制和管理电池82的操作的电力管理设备80。上面描述的和/或在图3中描绘的部件通过一条或多条总线来共享数据,并且在所描绘的示例中,上面描述的和/或在图3中描绘的部件经由数据总线84来共享数据。本领域普通技术人员应当理解,在本公开内容的背景下,可以在一些实施例中部署针对上述方案的变型以实现类似的功能。
在所描绘的实施例中,应用处理器64运行应用软件46A,应用软件46A包括传感器测量模块48A、反馈模块50A和通信模块52A。传感器测量模块48A从移动设备60的传感器接收生理参数和/或背景数据(例如,位置数据),包括分别从图像捕获设备78和GNSS接收器76接收生理参数和/或背景数据(例如,位置数据)。反馈模块50A经由UI 72向用户提供视觉、听觉和/或触觉反馈。通信模块52A将原始参数和/或导出的参数传送到位于车辆10内部或外部的一个或多个其他设备,并且还接收触发信号以激活反馈功能。例如,在一个实施例中,移动设备60将参数传送到车辆处理单元12(图1)并且从车辆处理单元12接收触发信号,反馈模块50A结合用户接口72向用户(例如,驾驶员或乘客)提供反馈。应用软件46A的这些模块48A、50A和54A类似于结合图2描述的应用软件46的相同编号的模块。因此,为了简洁起见,在此省略了对这些模块的进一步描述。
现在参考图4,图4示出了其中可以实施车辆乘员互动系统的全部或部分功能的示例性车辆处理单元86的实施例。车辆处理单元12(图1)可以包括图4中描绘的车辆处理单元86的功能和结构。车辆处理单元86的功能可以单独实施,或者在一些实施例中,车辆处理单元86的功能可以与一个或多个额外的设备组合实施。在一个实施例中,车辆处理单元86可以被实施为计算机,但是在一些实施例中,车辆处理单元86可以被实施为应用服务器(例如在车辆乘员互动系统的功能主要是远程实施的情况下就是如此)。本领域普通技术人员应当理解,在本公开内容的背景下,示例性车辆处理单元86仅仅说明一个实施例,并且一些实施例可以包括更少的或额外的部件。在该示例中,车辆处理单元86被描绘为计算机系统。应当理解,这里省略了计算机系统的某些公知部件,以避免模糊车辆处理单元86的相关特征。在一个实施例中,车辆处理单元86包括硬件部件和软件部件,包括一个或多个处理器(图中示出了一个),例如,处理器(PROCESS)88、(一个或多个)输入/输出(I/O)接口90(I/O)以及存储器92(MEM),它们都被耦合到一条或多条数据总线(例如,数据总线94(DBUS))。存储器92(在本文中也被称为非瞬态计算机可读介质)可以包括易失性存储器元件(例如,随机存取存储器RAM,例如,DRAM和SRAM等)和非易失性存储器元件(例如,ROM、闪速存储器、固态存储器、EPROM、EEPROM、硬盘驱动器、磁带、CDROM等)中的任何一种或组合。存储器92可以存储本机操作系统(OS)、一个或多个本机应用程序、仿真系统或用于各种操作系统和/或仿真硬件平台、仿真操作系统等中的任何一个的仿真应用程序。在一些实施例中,一个或多个单独的存储设备(STOR DEV)可以被耦合到数据总线94,并且/或者车辆处理单元86可以经由网络和通信功能被耦合到网络存储设备,下文将进一步进行描述。
在所描绘的实施例中,车辆处理单元86经由I/O接口90被耦合到通信接口(COM)96、用户接口(UI)98以及一个或多个传感器100。在一些实施例中,通信接口96、用户接口98以及一个或多个传感器100可以直接耦合到数据总线94。通信接口96包括用于无线功能(例如,蓝牙、近场通信、Wi-Fi等)的硬件和软件,使得能够与位于车辆10(图1)内部的设备(包括可穿戴设备36(图2)、移动设备60(图3)以及其他设备(例如,相机34))进行无线通信,并且任选地使得能够与位于车辆10外部的车辆10的传感器100进行无线通信。在一些实施例中,可以经由通信接口96来实现车辆处理单元86与附近的其他车辆中的移动设备和/或可穿戴设备之间的无线通信。在一个实施例中,通信接口96还包括蜂窝调制解调器功能,从而使得蜂窝通信能够访问(一个或多个)云18、26的计算功能(图1),以例如访问公共数据结构或专有数据结构(例如,数据库)。例如,用户简档可以位于(一个或多个)云18、26的一个或多个设备中,并且包括用户数据(例如,驾驶员和/或乘客的年龄、性别、睡眠历史、活动历史等)和/或公共统计信息(例如,道路信息,包括交通统计信息(例如经由WAZE或DOT网站)、道路地理/拓扑信息、针对(一条或多条)道路的受伤/死亡统计信息、建筑信息、天气数据、地图/位置服务等)。在一些实施例中,天气数据可以经由位于车辆10内部(或者位于车辆10外部)的传感器来采集,或者可以经由在车辆10内部发现的独立设备(包括通过使用网络设备)来采集。在一些实施例中,这些信息中的一个或多个信息可以暂时存储在本地(例如暂时存储在存储设备和/或存储器92中)。
I/O接口90可以包括任何数量的用于输入和输出信号(例如,模拟数据或数字数据)的接口,以通过各种网络并根据各种协议和/或标准来传送信息(例如,数据)。
用户接口98包括以下各项中的一个或任何组合:具有或不具有图形用户接口(GUI)的显示屏、平视显示器、小键盘、车辆按钮/开关/旋钮或使得能够输入用于车辆控件、麦克风、鼠标等的用户命令并且/或者给驾驶员和/或乘客反馈的其他机构。例如,用户接口98可以包括专用照明设备(例如,内部状态灯,例如,警报灯或警示灯或图案)或提供视觉反馈的其他机构,包括具有表情符号图标或其他符号图形或甚至针对乘客情绪或睡眠状态的文本警报的控制台显示器。在一些实施例中,用户接口98包括一个或多个振动电动机(其例如在驾驶员和/或乘客的座椅、操纵杆、方向盘、扶手等中),以向车辆10内(图1)的驾驶员和/或乘客提供触觉反馈,例如向乘客警告驾驶员情绪(例如在乘客的行为使驾驶员恼火或受到压力的情况下,或者在驾驶员睡着的情况下)或者警告驾驶员(例如在驾驶员的驾驶风格使乘客受到压力或产生疾病的情况下,或者当驾驶员需要乘客注意时乘客却睡着的情况下)。在一些实施例中,用户接口98包括扬声器和/或麦克风,以例如提供对前述驾驶员和/或乘客状态或状况发出警报的语音嘟嘟声或其他声音(例如,音调或说话)。也可以改变各种反馈的强度,例如随着病情恶化而提高声音的频率或音量(例如,当乘客的晕动病恶化时,对用户警告的频率和/或强度提高)。在一些实施例中,可以基于参数强度来改变用于呈现反馈的设备。注意,可以在任何一个时间使用上述各种反馈技术和/或设备中的一个或任何组合。
传感器100包括内部传感器和外部传感器(例如,内部传感器16和外部传感器14,图1),包括相机传感器(例如,相机34,图1)和/或位置定位传感器(例如,GNSS接收器)。传感器100包括与车辆运动相关联的车辆传感器,包括惯性运动传感器(例如,陀螺仪、磁力计)、负载传感器、位置传感器、速度传感器和/或加速度传感器。换句话说,传感器100测量与驾驶员的驾驶风格相关联的车辆移动信息,包括突然启动和突然停止、快速加速、速度、急转弯和/或怪异的移动。
在图4中描绘的实施例中,存储器92包括操作系统(OS)和应用软件(ASW)46B。注意,在一些实施例中,可以在没有操作系统的情况下实施应用软件46B。在一个实施例中,应用软件46B包括传感器测量模块48B、反馈模块50B、通信模块52B、驾驶风格相关器(DSC)模块102、瞌睡预测(SP)模块104以及打盹/提醒(NA)模块106。传感器测量模块48B经由通信模块52B从传感器100(和/或从位于车辆10(图1)内部和/或外部的其他设备)接收原始参数或导出的参数以及格式以供在模块102-106中使用。在一些实施例中,这种功能可以位于被配置为提供在车辆处理单元中可用的格式的数据的其他设备中,因此,在一些实施例中,这种功能可以从应用软件46B中省去。更一般地,一些实施例可以组合前述功能或者将这种功能进一步分配在额外的模块和/或设备之间。在一些实施例中,数据被提供给反馈模块50B以用于(例如经由用户接口98)向车辆10的乘员中的一个乘员提供反馈并且/或者与通信模块52B组合以用于向一个或多个其他车辆的乘客提供反馈。例如,在一些实施例中,(例如经由通信模块52B并结合通信接口96)将原始参数或导出的参数传送到用于确定车辆10的乘员的一个或多个乘员的健康和/或康乐的其他设备,该其他设备包括可穿戴设备36(图2)、移动设备60(图3)或(一个或多个)云18、26(图1)的一个或多个设备。通信模块52B的通信功能通常使得连接到一个或多个网络(NW)(例如,个域网、无线局域网、广域网、蜂窝网络等)的设备之间能够进行通信,包括实现网络浏览和/或通过使用一个或多个API来访问云服务。
驾驶风格相关器模块102包括用于(例如从传感器100和/或其他设备)接收传感器数据的可执行代码(指令),该传感器数据感测驾驶员和/或乘客的健康和/或康乐参数,传感器数据涉及(例如来自测量反映驾驶员的驾驶风格的车辆移动的传感器100的)车辆运动信息,(例如基于最近时间的刺激-反应与背景中的类似的刺激-反应的刺激-反应相关性)将驾驶风格/车辆运动与参数进行相关,并且触发反馈(以例如使得激活用户接口98的反馈机构并且/或者传送信号以触发执行反馈的其他非车辆设备)。继续参考图4并且还参考图5,图5示出了与驾驶风格相关器模块102的功能相对应的示例性车辆乘员互动方法102A,该方法包括:接收指示驾驶员操作车辆的驾驶风格的车辆移动信息(108);接收从车辆中的驾驶员或至少一个乘客中的一个或多个感测的一个或多个参数,该一个或多个参数包括生理信息、情绪信息、或生理信息与情绪信息的组合(110);将一个或多个参数与车辆移动信息进行相关(112);并且基于至少一个乘客的经相关的一个或多个参数来触发对驾驶员的反馈,或者基于驾驶员的经相关的一个或多个参数来触发对至少一个乘客的反馈(114)。生理信息和情绪信息能够包括压力、焦虑、疾病、沮丧、愤怒等,它们是根据一个或多个生理参数(例如,皮肤导电性、心率、心率变异性等)来确定的。在一个实施例中,可以以不显眼的方式提供反馈。例如,可以(例如在视觉上,在听觉上和/或经由触觉刺激)向驾驶员提醒乘客的经模块102与驾驶风格关联的焦虑或焦虑变化(例如,焦虑正在增加),这种反馈以对乘客透明的方式存在(例如,与用户的可穿戴设备36通信的触觉刺激或越来越快或增强的触觉刺激,或者通过激活方向盘中的振动电动机所引起的刺激),从而影响驾驶员的驾驶风格的变化(例如,降低速度、减少急转弯等)。在一些实施例中,驾驶风格相关器模块102可以(例如经由通信接口150并结合通信模块52B)从车辆10(图1)的一个或多个乘客的可穿戴设备36接收一个或多个参数并且相应地做出响应。例如,两个乘客中的一个乘客可能正遭受晕动病,并且驾驶风格相关器模块102将该疾病与驾驶风格进行相关并且触发对驾驶员的反馈。可以利用反馈强度的变化和/或反馈方式的变化(例如,蜂鸣器转变到嘟嘟声,或反之亦然)来反映被监测乘员的状况和/或状态的变化。在一些实施例中,反馈可以包括关于相关性的指令,例如,对晕动病的警告以及与连续的突然停止和突然启动的相关性。在一些实施例中,反馈可以包括代替相关的反馈或者除了相关的反馈之外的建议(例如,“驾驶员-乘客B正遭受晕动病——建议您逐渐启动和停止以避免引起晕动病”)。在一些实施例中,可以从其他车辆的乘员接收参数。例如,车辆处理单元86的无线范围内的另一个驾驶员A可以检测到驾驶员B生气,并且在将这种愤怒与该驾驶员的驾驶风格进行相关之后,触发提醒驾驶员A和/或建议驾驶员A进行降低其他车辆的驾驶员B的这种愤怒的驾驶风格的反馈。在一些实施例中,驾驶风格相关器模块102可以(例如经由地理坐标和当前时间的通信)访问包括地理位置中的其他车辆的乘员的健康和/或康乐的远程数据库,并且基于该信息来确保类似的结果。
瞌睡预测模块104包括用于(例如从传感器100和/或车辆10(图1)内的乘员的其他设备)接收传感器数据的可执行代码(指令),该传感器数据感测驾驶员和乘客的健康和/或康乐参数,预测乘员的瞌睡水平,并且触发向乘员中的一个乘员提醒另一个乘员的瞌睡状态的反馈。继续参考图4并且还参考图6,图6示出了与瞌睡预测模块104的功能相对应的示例性车辆乘员互动方法104A,该方法包括:接收从车辆的驾驶员感测的一个或多个第一参数以及从车辆的乘客感测的一个或多个第二参数,该一个或多个第一参数和该一个或多个第二参数各自包括生理信息、行为信息、或生理信息与行为信息的组合(116);基于所接收的一个或多个第一参数和所接收的一个或多个第二参数来预测驾驶员和乘客的各自的瞌睡水平(118);并且基于针对驾驶员的所预测的瞌睡水平来触发对车辆中的乘客的反馈,或者基于针对乘客的所预测的瞌睡水平来触发对驾驶员的反馈(120)。例如,由瞌睡预测模块104执行的预测可以基于指示瞌睡的参数(例如基于感测的呼吸速率,例如单独使用视觉检测到的胸腔和/或腹部的扩张,或者与其他参数(包括(例如从可穿戴设备36确定的)心率数据、睡眠历史(例如,驾驶员已经经过的驾驶时间、一天中的时间等))组合使用)与瞌睡的阈值水平的比较。瞌睡的阈值水平可以基于学习的行为(例如经由可穿戴设备36(图2)的监测和记录和/或记录到提供睡眠习惯(包括用户的正常睡眠行为)的云18、26(图1),并且/或者根据针对个人特性(例如,年龄、性别、职业、针对这些人口统计信息的睡眠统计信息、一天中的小时等)的基于人群的统计信息的知识,这些信息例如是从远程数据库访问得到的)。例如,在驾驶员希望乘客保持觉醒的情况下,基于瞌睡预测水平超过瞌睡阈值而确定乘客瞌睡或甚至已经睡着(这提示要给驾驶员反馈),该反馈允许驾驶员唤醒乘客。类似地,基于针对驾驶员的预测水平超过瞌睡阈值,向乘客呈现反馈以帮助驾驶员保持觉醒(例如提示乘客打开收音机或者与驾驶员多聊天)。虽然描述了单个阈值,但是在一些实施例中,也可以使用多个阈值,其中,超过一个阈值的瞌睡水平与超过另一个阈值的瞌睡水平会触发不同类型的反馈(例如将作为针对第一阈值的反馈的安静或昏暗的光替换为针对第二阈值的反馈的利用大的声音或更高强度的光)。
打盹/提醒(NA)模块106包括用于接收驾驶计划并且建议乘客在驾驶期间打盹或至少允许注意力不集中的时间的可执行代码(指令)。继续参考图4并且还参考图7,图7示出了与打盹/提醒模块106的功能相对应的示例性车辆乘员互动方法106A,该方法包括:接收包括针对包括驾驶员和乘客的车辆的路线和驾驶时间的驾驶计划(122),其中,路线和驾驶时间可以包括与路线和/或驾驶时间相关的数据,例如,当前交通数据、预测的交通数据、当前天气数据、预测的天气数据、当前建筑数据或道路危险数据、未来建筑数据或道路危险数据等;基于所接收的驾驶计划来确定乘客开始持续定义时间段的打盹时段或注意力不集中时段的时间(124);并且向乘客触发关于该时间的建议(126)。打盹/提醒模块106基于关于路线和驾驶时间、(一个或多个)乘客和/或驾驶(例如,关于驾驶员和/或乘客的睡眠行为的信息、沿着给定路线行驶的安全性和/或复杂性、驾驶员经过的驾驶时间、一天中的时间(例如,晚上、早上、中午)、交通状况、存在建筑物/车道封闭和/或天气)中的一个或任何组合来确定该时间。在一些实施例中,打盹/提醒模块106可以从远程数据库访问这种信息中的一个或多个信息。在一些实施例中,可以从车辆10(图1)内部或外部的传感器和/或设备访问天气信息。在一个实施例中,该计划包括规划的路线,该规划的路线至少包括起点和目的地以及这两点之间的路径。可以经由口头输入的命令或文本输入的命令将该计划加载到车辆逻辑单元中,或者在一些实施例中,可以将该计划从地图app进行传输(或者从(一个或多个)云18、26下载)。当乘客能够最佳地打盹时(例如当乘客与驾驶员切换角色时保持神清气爽),在安排中考虑所规划的路线和(一个或多个)驾驶时间。如上所述,这种安排建议在路线的较安全的路段上打盹或至少允许乘客注意力不集中。安全路段可以包括(例如根据访问远程数据库访问所确定的)具有较低事故发生率和/或对于驾驶员而言具有较小挑战性的路段。该建议的一个目标是安全行驶。
注意,方法102A、104A和106A可以分别根据对应的模块102、104和106来实施,模块102、104和106由一个或多个处理器来运行。在一个实施例中,方法102A、104A和/或106A可以在由(例如在同一设备中或在多个设备之间分布的)一个或多个处理器运行的非瞬态计算机可读介质上实施。类似地,在一些实施例中,方法102A、104A和/或106A可以在(例如位于车辆10(图1)内的或远离车辆10的)单个设备内实施,或者由位于车辆10内部和/或外部的多个设备来实施。
再次参考图4,应用软件46B的运行可以由处理器88在操作系统的管理和/或控制下实施(或者在一些实施例中在不使用OS的情况下实施)。处理器88(或者多个处理器)可以被实施为定制的或商用的处理器、中央处理单元(CPU)或若干处理器中的辅助处理器、(以微芯片的形式的)基于半导体的微处理器、宏处理器、一个或多个专用集成电路(ASIC)、多个经适当配置的数字逻辑门和/或其他公知的包括以独立方式和以各种组合方式协调车辆处理单元86的整体操作的离散元件的电气配置。
当车辆处理单元86的某些实施例是至少部分地利用软件(包括固件)来实施(如图4中所描绘的)时,应当注意,软件能够被存储在各种非瞬态计算机可读介质上,以供各种计算机相关系统或方法使用或与之结合使用。在该文件的背景下,计算机可读介质可以包括电子、磁性、光学或其他物理设备或装置,这些设备或装置可以包含或存储计算机程序(例如,可执行代码或指令),以供计算机相关系统或方法使用或与之结合使用。软件可以嵌入在各种计算机可读介质中,以供指令执行系统、装置或设备使用或与之结合使用,该指令执行系统、装置或设备例如为基于计算机的系统、包含处理器的系统或能够从指令执行系统、装置或设备提取指令并执行指令的其他系统。
当车辆处理单元86的某些实施例是至少部分地利用硬件来实施时,可以利用以下技术中的任何一种或组合来实施这种功能:具有用于对数据信号实施逻辑功能的逻辑门的(一个或多个)离散逻辑电路、具有适当的组合逻辑门的专用集成电路(ASIC)、(一个或多个)可编程门阵列(PGA)、现场可编程门阵列(FPGA)、继电器、接触器等,这些技术在本领域中是公知的。
流程图中的任何过程描述或框应当被理解为表示模块、代码段或代码部分,其包括用于实施过程中的特定逻辑功能或步骤的一个或多个可执行指令,并且替代实施方案被包括在该实施例的范围内,其中,如本公开内容的领域中的技术人员所理解的,根据所涉及的功能,可以根据所示或所讨论的顺序来执行这些功能,包括基本上同时地或以相反的顺序来执行这些功能。
在实施例中,针对第一装置的权利要求包括:存储器,其包括指令;以及一个或多个处理器,其被配置为运行所述指令以执行以下操作:接收指示操作车辆的驾驶员的驾驶风格的车辆移动信息;接收从所述车辆中的所述驾驶员或至少一个乘客中的一个或多个感测的一个或多个参数,所述一个或多个参数包括生理信息、情绪信息、或生理信息与情绪信息的组合;将所述一个或多个参数与所述车辆移动信息进行相关;并且基于所述至少一个乘客的经相关的一个或多个参数来触发对所述驾驶员的反馈,或者基于所述驾驶员的经相关的一个或多个参数来触发对所述至少一个乘客的反馈。
在实施例中,根据前一权利要求所述的第一装置,其中,所述参数对应于心率、心率变异性、皮肤电活动、加速度计数据、压力指标、焦虑指标或晕动病指标中的一个或任何组合。
在实施例中,根据前述权利要求中的任一项所述的第一装置,其中,所述一个或多个处理器被配置为运行所述指令以通过将信号传送到触觉设备、视觉设备、听觉设备或视听设备中的一个或任何组合来触发所述反馈,其中,所述反馈包括触觉反馈、视觉反馈或听觉反馈中的一个或任何组合。
在实施例中,根据前述权利要求中的任一项所述的第一装置,其中,传送所述信号包括:在不向所述乘客提醒对所述驾驶员的反馈的情况下或者在不向所述驾驶员提醒对所述至少一个乘客的反馈的情况下传送所述信号。
在实施例中,根据前述权利要求中的任一项所述的第一装置,其中,对所述驾驶员的反馈被配置为影响所述驾驶风格的变化,并且对所述至少一个乘客的反馈被配置为影响所述至少一个乘客的行为的变化。
在实施例中,根据前述权利要求中的任一项所述的第一装置,其中,所述一个或多个处理器还被配置为运行所述指令以执行以下操作:接收从所述车辆中的一个或多个额外的乘客感测的一个或多个参数,所述一个或多个参数包括生理信息、情绪信息、或生理信息与情绪信息的组合,其中,所述相关和所述触发都基于所述一个或多个额外的乘客。
在实施例中,根据前述权利要求中的任一项所述的第一装置,其中,所述一个或多个处理器还被配置为运行所述指令以执行以下操作:接收从一个或多个其他车辆中的一个或多个乘员感测的一个或多个参数,所述一个或多个参数包括生理信息、情绪信息、或生理信息与情绪信息的组合,其中,所述相关和所述触发都基于所述一个或多个乘员。
在实施例中,根据前述权利要求中的任一项所述的第一装置,其中,所述一个或多个处理器还被配置为运行所述指令以执行以下操作:接收指示在所述触发的时间之后和接近所述触发的时间时操作所述车辆的所述驾驶员的经调整的驾驶风格的额外的车辆移动信息。
在实施例中,根据前述权利要求中的任一项所述的第一装置,其中,所述一个或多个处理器和所述存储器位于所述车辆的结构内,位于所述车辆内的移动设备中,位于所述车辆内的可穿戴设备中,或者位于所述车辆外部的设备中。
在实施例中,一种实施前述第一装置权利要求中的任一项的功能的方法。
在实施例中,一种非瞬态计算机可读介质,其当由一个或多个处理器运行时使得实施前述第一装置权利要求中的任一项的功能。
在实施例中,针对第二装置的权利要求包括:存储器,其包括指令;以及一个或多个处理器,其被配置为运行所述指令以执行以下操作:接收从车辆的驾驶员感测的一个或多个第一参数以及从所述车辆中的乘客感测的一个或多个第二参数,所述一个或多个第一参数和所述一个或多个第二参数各自包括生理信息、行为信息、或生理信息与行为信息的组合;基于所接收的一个或多个第一参数和所接收的一个或多个第二参数来预测所述驾驶员和所述乘客的各自的瞌睡水平;并且基于针对所述驾驶员的所预测的瞌睡水平来触发对所述车辆中的所述乘客的反馈,或者基于针对所述乘客的所预测的瞌睡水平来触发对所述驾驶员的反馈。
在实施例中,根据前一权利要求所述的第二装置,其中,所述一个或多个处理器还被配置为运行所述指令以执行以下操作:将各自的所预测的瞌睡水平与对应的瞌睡阈值进行比较,其中,所述触发还基于所述比较。
在实施例中,根据前述第二装置权利要求中的任一项所述的第二装置,其中,对所述驾驶员的反馈被配置为向所述驾驶员提醒所述乘客已经超过瞌睡阈值或者已经入睡。
在实施例中,根据前述第二装置权利要求中的任一项所述的第二装置,其中,对所述乘客的反馈被配置为向所述乘客提醒所述驾驶员已经超过瞌睡阈值。
在实施例中,根据前述第二装置权利要求中的任一项所述的第二装置,其中,所述一个或多个处理器被配置为运行所述指令以通过将信号传送到触觉设备、视觉设备、听觉设备或视听设备中的一个或任何组合来触发各自的反馈,其中,所述反馈包括触觉反馈、视觉反馈或听觉反馈中的一个或任何组合。
在实施例中,根据前述第二装置权利要求中的任一项所述的第二装置,其中,所述一个或多个处理器和所述存储器位于所述车辆的结构内,位于所述车辆内的移动设备中,位于所述车辆内的可穿戴设备中,或者位于所述车辆外部。
在实施例中,一种实施前述第二装置权利要求中的任一项的功能的方法。
在实施例中,一种非瞬态计算机可读介质,其当由一个或多个处理器运行时使得实施前述第二装置权利要求中的任一项的功能。
在实施例中,针对第三装置的权利要求包括:存储器,其包括指令;以及一个或多个处理器,其被配置为运行所述指令以执行以下操作:接收包括驾驶员和乘客的车辆的路线和驾驶时间的驾驶计划;基于所接收的驾驶计划来确定所述乘客开始持续定义时间段的打盹时段或注意力不集中时段的时间;并且向所述乘客触发关于所述时间的建议。
在实施例中,根据前述第三装置权利要求所述的第三装置,其中,所述一个或多个处理器还被配置为运行所述指令以基于以下各项中的一个或任何组合来确定所述时间:关于所述驾驶员的睡眠行为的信息、关于所述乘客的睡眠行为的信息、关于沿着所述路线的行驶的安全性的信息、关于沿着所述路线的行驶的复杂性的信息、所述驾驶员经过的驾驶时间、一天中的时间、交通状况、建筑物或天气。
在实施例中,根据前述第三装置权利要求中的任一项所述的第三装置,其中,所述信息中的至少一个是从所述车辆的外部的源接收的。
在实施例中,根据前述第三装置权利要求中的任一项所述的第三装置,其中,所述一个或多个处理器还被配置为运行所述指令以触发反馈来帮助所述乘客在所述打盹的时间段之外保持注意力,其中,所述一个或多个处理器被配置为运行所述指令以通过将信号传送到触觉设备、视觉设备、听觉设备或视听设备中的一个或任何组合来触发所述反馈,其中,所述反馈包括触觉反馈、视觉反馈或听觉反馈中的一个或任何组合。
在实施例中,根据前述第三装置权利要求中的任一项所述的第三装置,其中,所述一个或多个处理器和所述存储器位于所述车辆内部或者位于所述车辆外部。
在实施例中,一种实施前述第三装置权利要求中的任一项的功能的方法。
在实施例中,一种非瞬态计算机可读介质,其当由一个或多个处理器运行时使得实施前述第三装置权利要求中的任一项的功能。
注意,在上述实施例中,可以组合两个或更多个实施例。例如,单个装置可以组合第一装置、第二装置和/或第三装置的功能。
注意,可以使用所公开的实施例的各种组合,因此,参考实施例或参考一个实施例并不意味着不将来自该实施例的特征与来自其他实施例的特征一起使用。
在权利要求中,“包括”一词不排除其他元件或步骤,并且词语“一”或“一个”不排除多个。单个处理器或其他单元可以实现在权利要求中记载的若干项的功能。虽然某些措施被记载在互不相同的从属权利要求中,但是这并不指示不能有利地使用这些措施的组合。计算机程序可以被存储/被分布在合适的介质上,例如与其他硬件一起或作为其他硬件的部分供应的光学存储介质或固态介质,但是也可以被以其他形式分布。权利要求中的任何附图标记都不应被解释为对范围的限制。

Claims (20)

1.一种装置,包括:
存储器,其包括指令;以及
一个或多个处理器,其被配置为运行所述指令以执行以下操作:
接收指示操作车辆的驾驶员的驾驶风格的车辆移动信息;
接收从所述车辆中的所述驾驶员或至少一个乘客中的一个或多个感测的一个或多个参数,所述一个或多个参数包括生理信息、情绪信息、或生理信息与情绪信息的组合;
将所述一个或多个参数与所述车辆移动信息进行相关;并且
基于所述至少一个乘客的经相关的一个或多个参数来触发对所述驾驶员的反馈,或者基于所述驾驶员的经相关的一个或多个参数来触发对所述至少一个乘客的反馈。
2.根据权利要求1所述的装置,其中,所述参数对应于心率、心率变异性、皮肤电活动、加速度计数据、压力指标、焦虑指标或晕动病指标中的一个或任何组合。
3.根据权利要求1所述的装置,其中,所述一个或多个处理器被配置为运行所述指令以通过将信号传送到触觉设备、视觉设备、听觉设备或视听设备中的一个或任何组合来触发所述反馈,其中,所述反馈包括触觉反馈、视觉反馈或听觉反馈中的一个或任何组合。
4.根据权利要求3所述的装置,其中,传送所述信号包括:在不向所述乘客提醒对所述驾驶员的反馈的情况下或者在不向所述驾驶员提醒对所述至少一个乘客的反馈的情况下传送所述信号。
5.根据权利要求3所述的装置,其中,对所述驾驶员的反馈被配置为影响所述驾驶风格的变化,并且对所述至少一个乘客的反馈被配置为影响所述至少一个乘客的行为的变化。
6.根据权利要求1所述的装置,其中,所述一个或多个处理器还被配置为运行所述指令以执行以下操作:
接收从所述车辆中的一个或多个额外的乘客感测的一个或多个参数,所述一个或多个参数包括生理信息、情绪信息、或生理信息与情绪信息的组合,其中,所述相关和所述触发都基于所述一个或多个额外的乘客。
7.根据权利要求1所述的装置,其中,所述一个或多个处理器还被配置为运行所述指令以执行以下操作:
接收从一个或多个其他车辆中的一个或多个乘员感测的一个或多个参数,所述一个或多个参数包括生理信息、情绪信息、或生理信息与情绪信息的组合,其中,所述相关和所述触发都基于所述一个或多个乘员。
8.根据权利要求1所述的装置,其中,所述一个或多个处理器还被配置为运行所述指令以执行以下操作:
接收指示在所述触发的时间之后和接近所述触发的时间时操作所述车辆的所述驾驶员的经调整的驾驶风格的额外的车辆移动信息。
9.根据权利要求1所述的装置,其中,所述一个或多个处理器和所述存储器位于所述车辆的结构内,位于所述车辆内的移动设备中,位于所述车辆内的可穿戴设备中,或者位于所述车辆外部的设备中。
10.一种装置,包括:
存储器,其包括指令;以及
一个或多个处理器,其被配置为运行所述指令以执行以下操作:
接收从车辆的驾驶员感测的一个或多个第一参数以及从所述车辆中的乘客感测的一个或多个第二参数,所述一个或多个第一参数和所述一个或多个第二参数各自包括生理信息、行为信息、或生理信息与行为信息的组合;
基于所接收的一个或多个第一参数和所接收的一个或多个第二参数来预测所述驾驶员和所述乘客的各自的瞌睡水平;并且
基于针对所述驾驶员的所预测的瞌睡水平来触发对所述车辆中的所述乘客的反馈,或者基于针对所述乘客的所预测的瞌睡水平来触发对所述驾驶员的反馈。
11.根据权利要求10所述的装置,其中,所述一个或多个处理器还被配置为运行所述指令以执行以下操作:
将各自的所预测的瞌睡水平与对应的瞌睡阈值进行比较,其中,所述触发还基于所述比较。
12.根据权利要求10所述的装置,其中,对所述驾驶员的反馈被配置为向所述驾驶员提醒所述乘客已经超过瞌睡阈值或者已经入睡。
13.根据权利要求10所述的装置,其中,对所述乘客的反馈被配置为向所述乘客提醒所述驾驶员已经超过瞌睡阈值。
14.根据权利要求10所述的装置,其中,所述一个或多个处理器被配置为运行所述指令以通过将信号传送到触觉设备、视觉设备、听觉设备或视听设备中的一个或任何组合来触发各自的反馈,其中,所述反馈包括触觉反馈、视觉反馈或听觉反馈中的一个或任何组合。
15.根据权利要求10所述的装置,其中,所述一个或多个处理器和所述存储器位于所述车辆的结构内,位于所述车辆内的移动设备中,位于所述车辆内的可穿戴设备中,或者位于所述车辆外部。
16.一种装置,包括:
存储器,其包括指令;以及
一个或多个处理器,其被配置为运行所述指令以执行以下操作:
接收包括驾驶员和乘客的车辆的路线和驾驶时间的驾驶计划;
基于所接收的驾驶计划来确定所述乘客开始持续定义时间段的打盹时段或注意力不集中时段的时间;并且
向所述乘客触发关于所述时间的建议。
17.根据权利要求16所述的装置,其中,所述一个或多个处理器还被配置为运行所述指令以基于以下各项中的一个或任何组合来确定所述时间:关于所述驾驶员的睡眠行为的信息、关于所述乘客的睡眠行为的信息、关于沿着所述路线的行驶的安全性的信息、关于沿着所述路线的行驶的复杂性的信息、所述驾驶员经过的驾驶时间、一天中的时间、交通状况、建筑物或天气。
18.根据权利要求17所述的装置,其中,所述信息中的至少一个是从所述车辆的外部的源接收的。
19.根据权利要求16所述的装置,其中,所述一个或多个处理器还被配置为运行所述指令以触发反馈来帮助所述乘客在所述打盹的时间段之外保持注意力,其中,所述一个或多个处理器被配置为运行所述指令以通过将信号传送到触觉设备、视觉设备、听觉设备或视听设备中的一个或任何组合来触发所述反馈,其中,所述反馈包括触觉反馈、视觉反馈或听觉反馈中的一个或任何组合。
20.根据权利要求16所述的装置,其中,所述一个或多个处理器和所述存储器位于所述车辆内部或者位于所述车辆外部。
CN201880011187.1A 2017-02-10 2018-02-09 驾驶员和乘客的健康和睡眠互动 Pending CN110268451A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762457433P 2017-02-10 2017-02-10
US62/457,433 2017-02-10
US201762598711P 2017-12-14 2017-12-14
US62/598,711 2017-12-14
PCT/EP2018/053316 WO2018146266A1 (en) 2017-02-10 2018-02-09 Driver and passenger health and sleep interaction

Publications (1)

Publication Number Publication Date
CN110268451A true CN110268451A (zh) 2019-09-20

Family

ID=61521472

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880011187.1A Pending CN110268451A (zh) 2017-02-10 2018-02-09 驾驶员和乘客的健康和睡眠互动

Country Status (5)

Country Link
US (1) US20190357834A1 (zh)
EP (1) EP3580734A1 (zh)
JP (1) JP2020512616A (zh)
CN (1) CN110268451A (zh)
WO (1) WO2018146266A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110712650A (zh) * 2019-10-14 2020-01-21 长安大学 一种电刺激防疲劳系统及控制方法
CN111524607A (zh) * 2020-03-26 2020-08-11 北京三快在线科技有限公司 配送员的信息处理方法、获取方法、展示方法及系统
CN112937438A (zh) * 2021-02-08 2021-06-11 浙江大学 一种乘员运动预期提示系统
CN113197573A (zh) * 2021-05-19 2021-08-03 哈尔滨工业大学 基于表情识别及脑电融合的观影印象检测方法
CN113425299A (zh) * 2020-03-23 2021-09-24 安波福技术有限公司 包括预测性睡眠风险因素的驾驶员警觉性监测
WO2023045717A1 (en) * 2021-09-26 2023-03-30 Mercedes-Benz Group AG Method and device for intelligent health management of a cabin of a vehicle
TWI819885B (zh) * 2022-11-07 2023-10-21 鴻華先進科技股份有限公司 動暈症誘發提示方法
US11826147B2 (en) * 2019-02-04 2023-11-28 Nec Corporation Arousal level control apparatus, arousal level control method, and recording medium

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10618522B2 (en) * 2018-03-27 2020-04-14 Hong Kong Productivity Council (HKPC) Drowsiness detection and intervention system and method
US11284834B1 (en) * 2018-05-07 2022-03-29 NightWare, Inc. Systems and methods for automated stress monitoring and intervention
CN110633593A (zh) * 2018-06-21 2019-12-31 北京嘀嘀无限科技发展有限公司 一种恶性事件预测方法及系统
US11180158B1 (en) * 2018-07-31 2021-11-23 United Services Automobile Association (Usaa) Routing or driving systems and methods based on sleep pattern information
JP7139894B2 (ja) * 2018-11-06 2022-09-21 トヨタ自動車株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
US11490843B2 (en) * 2018-11-16 2022-11-08 Toyota Motor North America, Inc. Vehicle occupant health monitor system and method
EP3666182A1 (en) * 2018-12-11 2020-06-17 Koninklijke Philips N.V. Device, system and method for providing bio-feedback to a user
CN113302076A (zh) * 2018-12-28 2021-08-24 贾迪安光学技术有限公司 用于车辆碰撞后支持的系统、装置和方法
KR20200085969A (ko) * 2019-01-07 2020-07-16 현대자동차주식회사 차량 및 그 제어 방법
US11501401B2 (en) * 2019-03-02 2022-11-15 ANI Technologies Private Limited Allocation of vehicles using fitness information
DE102019203996A1 (de) * 2019-03-25 2020-10-01 Zf Friedrichshafen Ag Vorrichtung und Verfahren zum Erkennen von Kinetose eines Menschen in einem Fahrzeug
DE102019204691A1 (de) * 2019-04-02 2020-10-08 Thyssenkrupp Ag Verfahren und Einrichtung zur Überwachung eines fahrbetriebsbedingten Gesundheitszustandes von Insassen eines insbesondere autonomen Fahrzeugs
JP7031998B2 (ja) * 2019-04-19 2022-03-08 矢崎総業株式会社 オーディオ制御システム及びオーディオ制御方法
US11325531B2 (en) * 2019-04-19 2022-05-10 GM Global Technology Operations LLC System for promoting passenger trust and mitigating motion sickness in a vehicle
TWI749323B (zh) * 2019-04-30 2021-12-11 先進光電科技股份有限公司 行動載具輔助系統
US10926773B2 (en) * 2019-05-10 2021-02-23 Denso International America, Inc. Systems and methods for mitigating motion sickness in a vehicle
US11105645B2 (en) * 2019-05-28 2021-08-31 Glazberg, Applebaum & co. Navigation in vehicles and in autonomous cars
US10780825B1 (en) * 2019-06-21 2020-09-22 Milton Nathan System and a method for alerting a driver of presence of a passenger in a vehicle
US11551644B1 (en) 2019-07-23 2023-01-10 BlueOwl, LLC Electronic ink display for smart ring
US11949673B1 (en) 2019-07-23 2024-04-02 BlueOwl, LLC Gesture authentication using a smart ring
US11537917B1 (en) 2019-07-23 2022-12-27 BlueOwl, LLC Smart ring system for measuring driver impairment levels and using machine learning techniques to predict high risk driving behavior
US11594128B2 (en) 2019-07-23 2023-02-28 BlueOwl, LLC Non-visual outputs for a smart ring
US11637511B2 (en) 2019-07-23 2023-04-25 BlueOwl, LLC Harvesting energy for a smart ring via piezoelectric charging
US11537203B2 (en) 2019-07-23 2022-12-27 BlueOwl, LLC Projection system for smart ring visual output
US11909238B1 (en) 2019-07-23 2024-02-20 BlueOwl, LLC Environment-integrated smart ring charger
US11853030B2 (en) 2019-07-23 2023-12-26 BlueOwl, LLC Soft smart ring and method of manufacture
DE102019218299A1 (de) * 2019-11-26 2021-05-27 Zf Friedrichshafen Ag Detektieren von Kinetose
US11749109B2 (en) * 2019-12-19 2023-09-05 Etalyc Inc. Adaptive traffic management system
US11345298B2 (en) * 2019-12-26 2022-05-31 Panasonic Intellectual Property Management Co., Ltd. Driver monitoring device and driver monitoring method
DE102020201442A1 (de) * 2020-02-06 2021-08-12 Zf Friedrichshafen Ag Verfahren zum Feststellen von Kinetose
EP3895949B1 (en) * 2020-04-17 2023-08-16 Toyota Jidosha Kabushiki Kaisha Method and device for evaluating user discomfort
US11820402B2 (en) 2020-07-02 2023-11-21 Qualcomm Incorporated Motion sickness detection system for autonomous vehicles
JP7456355B2 (ja) 2020-11-03 2024-03-27 株式会社デンソー 乗員検知システム
USD985619S1 (en) 2021-08-23 2023-05-09 Waymo Llc Display screen or portion thereof with graphical user interface

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2903349A1 (fr) * 2006-07-05 2008-01-11 Renault Sas Dispositif de securite prenant en compte l'etat du conducteur
EP2942012A1 (en) * 2014-05-08 2015-11-11 Continental Automotive GmbH Driver assistance system
CN106023550A (zh) * 2016-07-19 2016-10-12 姚前 一种报警方法、装置和系统
US20160311440A1 (en) * 2015-04-22 2016-10-27 Motorola Mobility Llc Drowsy driver detection
CN106114454A (zh) * 2016-08-11 2016-11-16 陈世庆 一种车辆报警系统
US9500489B1 (en) * 2016-03-03 2016-11-22 Mitac International Corp. Method of adjusting a navigation route based on detected passenger sleep data and related system
CN106156663A (zh) * 2015-04-14 2016-11-23 小米科技有限责任公司 一种终端环境检测方法及装置
CN106211056A (zh) * 2016-06-24 2016-12-07 乐视控股(北京)有限公司 一种行程信息的共享方法和装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
MXPA06002836A (es) 2000-06-16 2006-06-14 Bodymedia Inc Sistema para vigilar y administrar el peso corporal y otras condiciones fisiologicas, que incluyen la planeacion, intervencion y capacidad de reporte iterativa y personalizada.
US9149236B2 (en) 2013-02-04 2015-10-06 Intel Corporation Assessment and management of emotional state of a vehicle operator
KR102457776B1 (ko) 2013-12-04 2022-10-24 애플 인크. 생리학적 데이터의 제시

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2903349A1 (fr) * 2006-07-05 2008-01-11 Renault Sas Dispositif de securite prenant en compte l'etat du conducteur
EP2942012A1 (en) * 2014-05-08 2015-11-11 Continental Automotive GmbH Driver assistance system
CN106156663A (zh) * 2015-04-14 2016-11-23 小米科技有限责任公司 一种终端环境检测方法及装置
US20160311440A1 (en) * 2015-04-22 2016-10-27 Motorola Mobility Llc Drowsy driver detection
US9500489B1 (en) * 2016-03-03 2016-11-22 Mitac International Corp. Method of adjusting a navigation route based on detected passenger sleep data and related system
CN106211056A (zh) * 2016-06-24 2016-12-07 乐视控股(北京)有限公司 一种行程信息的共享方法和装置
CN106023550A (zh) * 2016-07-19 2016-10-12 姚前 一种报警方法、装置和系统
CN106114454A (zh) * 2016-08-11 2016-11-16 陈世庆 一种车辆报警系统

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11826147B2 (en) * 2019-02-04 2023-11-28 Nec Corporation Arousal level control apparatus, arousal level control method, and recording medium
CN110712650A (zh) * 2019-10-14 2020-01-21 长安大学 一种电刺激防疲劳系统及控制方法
CN113425299A (zh) * 2020-03-23 2021-09-24 安波福技术有限公司 包括预测性睡眠风险因素的驾驶员警觉性监测
CN111524607A (zh) * 2020-03-26 2020-08-11 北京三快在线科技有限公司 配送员的信息处理方法、获取方法、展示方法及系统
CN112937438A (zh) * 2021-02-08 2021-06-11 浙江大学 一种乘员运动预期提示系统
CN113197573A (zh) * 2021-05-19 2021-08-03 哈尔滨工业大学 基于表情识别及脑电融合的观影印象检测方法
WO2023045717A1 (en) * 2021-09-26 2023-03-30 Mercedes-Benz Group AG Method and device for intelligent health management of a cabin of a vehicle
TWI819885B (zh) * 2022-11-07 2023-10-21 鴻華先進科技股份有限公司 動暈症誘發提示方法

Also Published As

Publication number Publication date
JP2020512616A (ja) 2020-04-23
US20190357834A1 (en) 2019-11-28
EP3580734A1 (en) 2019-12-18
WO2018146266A1 (en) 2018-08-16

Similar Documents

Publication Publication Date Title
CN110268451A (zh) 驾驶员和乘客的健康和睡眠互动
EP3579745B1 (en) Alert system of the onset of a hypoglycemia event while driving a vehicle
US10696249B2 (en) Automatic car setting adjustments by identifying driver with health watch wearable or in-car sensors
US10529114B2 (en) Information processing apparatus, system, and method for displaying bio-information or kinetic information
CN105015551B (zh) 驾驶员状态监测系统、用于控制该系统的方法及车辆
CN105930631A (zh) 用于测量生物信号的方法及其可穿戴电子设备
US20190007354A1 (en) Proximity triggered sampling
US10470971B2 (en) Garment with remote controlled vibration array
US20200078260A1 (en) Garment with remote controlled vibration array
CN106441326A (zh) 提供路线信息的方法和用于处理路线信息的电子装置
WO2016061056A1 (en) Systems, devices, and methods for dynamic control
US20180375807A1 (en) Virtual assistant system enhancement
CN108475536A (zh) 用于提供活动指导信息的方法和支持所述方法的电子装置
CN107923980A (zh) 用于提供位置信息的方法和装置
US20200193858A1 (en) Unobtrusive motivation estimation
WO2019219414A1 (en) Adapting silence periods for digital messaging
US20170169190A1 (en) Health coaching system based on user simulation
US20180277013A1 (en) Messaging system
US11355226B2 (en) Ambulatory path geometric evaluation
US20190325777A1 (en) Consequence recording and playback in digital programs
US20190121803A1 (en) Scoring of micromodules in a health program feed
US20190103189A1 (en) Augmenting ehealth interventions with learning and adaptation capabilities

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190920