JP2020512616A - 運転者及び乗客の健康及び睡眠のインタラクション - Google Patents

運転者及び乗客の健康及び睡眠のインタラクション Download PDF

Info

Publication number
JP2020512616A
JP2020512616A JP2019542690A JP2019542690A JP2020512616A JP 2020512616 A JP2020512616 A JP 2020512616A JP 2019542690 A JP2019542690 A JP 2019542690A JP 2019542690 A JP2019542690 A JP 2019542690A JP 2020512616 A JP2020512616 A JP 2020512616A
Authority
JP
Japan
Prior art keywords
vehicle
feedback
driver
passenger
parameters
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2019542690A
Other languages
English (en)
Inventor
ロナルダス マリア アーツ
ロナルダス マリア アーツ
アドリアンヌ へインリッチ
アドリアンヌ へインリッチ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Koninklijke Philips NV
Original Assignee
Koninklijke Philips NV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Koninklijke Philips NV filed Critical Koninklijke Philips NV
Publication of JP2020512616A publication Critical patent/JP2020512616A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7246Details of waveform analysis using correlation, e.g. template matching or determination of similarity
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0219Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0022Monitoring a patient using a global network, e.g. telephone networks, internet
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02405Determining heart rate variability
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/05Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves 
    • A61B5/053Measuring electrical impedance or conductance of a portion of the body
    • A61B5/0531Measuring skin impedance
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165Evaluating the state of mind, e.g. depression, anxiety
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/48Other medical applications
    • A61B5/486Bio-feedback
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/7405Details of notification to user or communication with user or patient ; user input means using sound
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/742Details of notification to user or communication with user or patient ; user input means using visual displays
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/74Details of notification to user or communication with user or patient ; user input means
    • A61B5/7455Details of notification to user or communication with user or patient ; user input means characterised by tactile indication, e.g. vibration or electrical stimulation

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Physiology (AREA)
  • Psychiatry (AREA)
  • Cardiology (AREA)
  • Educational Technology (AREA)
  • Social Psychology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Psychology (AREA)
  • Hospice & Palliative Care (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • General Physics & Mathematics (AREA)
  • Developmental Disabilities (AREA)
  • Artificial Intelligence (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Mechanical Engineering (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Pulmonology (AREA)
  • Traffic Control Systems (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
  • Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)

Abstract

1つの実施形態において、運転者の運転スタイルを受信し、運転者及び/又は車両内の少なくとも1人の乗客の1つ又は複数のパラメータを検知し、パラメータを運転スタイルに相関付け、少なくとも1人の乗客の相関付けられているパラメータの、運転者へのフィードバック、又は、運転者の相関付けられているパラメータの、乗客へのフィードバックをトリガする装置が提示される。本発明は、他の特徴の中でも、運転者と乗客との間の肯定的なインタラクションを増大し、否定的なインタラクションを低減するためのメカニズムを提供し、これによって、測定される健康/ウェルビーイングデータと運転スタイル又は挙動との間の相関に基づいて車両がより安全に使用される。

Description

関連出願
本出願は、参照によりその全体が本明細書に組み込まれる、2017年2月10日に提出された米国仮特許出願第62/457,433号の利益及び優先権を主張する。
[0001] 本発明は、一般に、車両安全性に関し、特に、安全性を促進するため車両内での又は複数の車両内での車両乗員のインタラクションの管理に関する。
[0002] 一般に、運転者及び乗客は、他者が経験していること又は他者の健康状態を知覚することは困難である。自動車座席の位置取りに起因して、長期間にわたって他の人間を見ることは不快である可能性があり、又は、そのような視野は、少なくとも部分的に閉塞される可能性がある。さらに、長時間の移動中、運転者又は乗客の注意は他の箇所に集中され得る。さらに、乗客は、互いに又は車両の運転者と積極的にインタラクションする場合もあれば、しない場合もある。乗客の挙動が運転者に悪影響を及ぼす場合、事故が発生するか、又は、運転者、他の乗客若しくはさらには他の関与者(例えば、近傍にある他の自動車)に苛立ちが募る場合がある。
[0003] 国際特許出願公開第WO2014121182A1号パンフレット(以下、「’182号パンフレット」と本公開文献で呼ぶ)は、運転中の激怒を防止するなどのための(例えば、‘182号パンフレットの背景を参照されたい)、車両内の操作者のストレス管理のコンテキストにおいて記載されており、車両の動作特徴を示す情報(例えば、データ、メタデータ、及び/又はシグナリング)を収集することができ、又は、収集するように構成することができるセンサグループの少なくとも一部分を記載している(例えば、3ページ30行目から始まる部分)。例えば、センサグループの少なくとも1つのセンサ(例えば、1つのセンサ、2つのセンサ、3つ以上のセンサなど)が、車両の運動を検出することができ、又は、検出するように構成することができる。‘182号パンフレットは、センサグループの少なくとも別の部分が、車両の操作者又は車両の乗客のような、車両の乗員の挙動を示す情報を収集することができ、又は、収集するように構成することができることをさらに記載している(4ページ8行目から始まる部分)。‘182号パンフレット(2ページ12行目から始まる部分)は、車両操作者の感情状態を表す状態測度を生成するために利用又は他の様態で活用することができるデータ、メタデータ、及び/又はシグナリングの豊富なグループを生成するために、3つのタイプの情報を組み合わせ又は他の様態で統合することができること、並びに、状態測度を、車両の運転者に対してレンダリングすることによって供給することができることをさらに記載している。
[0004] 種々の車両の乗客の間での道路上の諍いの可能性を軽減することは、運転者のコミュニティにとっては有益であるが、時として、車両内の乗客間のストレスは、路上の安全性の懸念につながる。
[0005] 本発明の1つの目的は、1人の車両乗員の挙動及び/又は状態の、車両の別の乗員に対する影響を管理する車両乗員インタラクションシステムを開発することである。
そのような懸念に良好に対処するために、本発明の第1の態様において、運転者の運転スタイルを受信し、運転者及び/又は車両内の少なくとも1人の乗客の1つ又は複数のパラメータを検知し、パラメータを運転スタイルに相関付け、少なくとも1人の乗客の相関付けられているパラメータの、運転者へのフィードバック、又は、運転者の相関付けられているパラメータの、乗客へのフィードバックをトリガする装置が提示される。本発明は、他の特徴の中でも、運転者と乗客との間の肯定的なインタラクションを増大し、及び/又は、否定的なインタラクションを低減するためのメカニズムを提供し、これによって、測定される健康/ウェルビーイングデータと運転スタイル又は挙動との間の相関に基づいて車両がより安全に使用される。
[0006] 1つの実施形態において、パラメータは、心拍数、心拍変動、皮膚電位、加速度計データ、ストレスの指標、不安の指標、又は乗り物酔いの指標のうちの1つ又は任意の組み合わせに対応する。例えば、装置は、車両運動情報(例えば、速い加速度、速度、不規則な動きなど)によって示されるものとして運転スタイルに相関付けられる、例えば乗客の健康又はウェルビーイング(例えば、ストレス、不安、乗り物酔いなど)の変化への関与を測定する(又はその測度を受信する)。運転者の運転スタイルからもたらされる乗客挙動(例えば、動揺、困惑など)の結果である同様の測度が、運転者から受信される。これらのパラメータをモニタリングすることによって、車両内の乗員は、適切な反応が運転体験に肯定的に影響を及ぼすことを可能にするためのリアルタイム情報を通知される。
[0007] 1つの実施形態において、装置は、触覚デバイス、視覚デバイス、音響デバイス、又は音響視覚デバイスのうちの1つ又は任意の組み合わせに信号を通信することによってフィードバックをトリガし、フィードバックは、触覚フィードバック、視覚フィードバック、又は音響フィードバックのうちの1つ又は任意の組み合わせを含む。例えば、運転者向けのフィードバックの場合、フィードバックは、車両のステアリングホイール、肘掛け、座席、ギア転換装置などの中に埋め込まれた、又は、運転者が装着するウェアラブルデバイス内に埋め込まれた触覚デバイスによって触覚的に提示され、振動警告が、運転者が所持するウェアラブル又はモバイルデバイス上に、又は、車両の構造内で提示される。触覚フィードバックに加えて、又は、その代わりに、運転者へのフィードバックは、テキスト若しくは警報灯を有する車両表示画面又はダッシュボードを使用して(又はウェアラブル又はモバイルデバイスのユーザインターフェース機能を介して)、又は眼鏡類(例えば、Googleグラス)を介して視覚的に、及び/又は、聴覚的に(例えば、ヘッドセット、車両スピーカ、又は、運転者のウェアラブルデバイス及び/又はモバイルデバイスのビープ若しくはブザーを使用して)提示されてもよい。同様のフィードバックメカニズムが、乗客に提示される(例えば、乗客自身のウェアラブル、モバイルデバイス、及び/又は、近傍のスピーカ、肘掛け、座席内のモータ/アクチュエータなどのような、車両内の構造を使用して)。フィードバックは、肯定的な運転体験、及び安全な移動を助長するために、乗客のそれぞれの挙動を変化させるように、各乗員に影響を及ぼす。
[0008] 1つの実施形態において、装置は、乗客に、運転者に対するフィードバックについて警告することなく、又は、運転者に、少なくとも1人の乗客に対するフィードバックについて警告することなく(例えば、触覚フィードバック、テキストフィードバックなどを介して)、信号を通信するように構成される。言い換えれば、フィードバックは、意図される受信者に注意を引かないように提示される。そのようなフィードバックは、当惑させる若しくは落ち着かない状況を防止し、及び/又は、諍いがさらに激化する機会を低減し、諍いが回避されることによって、移動における調和がより促進される。
[0009] 1つの実施形態において、装置は、1つ又は複数の他の車両内の1人又は複数の乗員から検知される1つ又は複数のパラメータを受信するようにさらに構成され、1つ又は複数のパラメータは、生理学的情報、感情的情報、又は、生理学的情報と感情的情報との組み合わせを含み、相関及びトリガは1人又は複数の乗員に基づく。そうするにあたって、装置は、自身の運転挙動が、自身の周囲で運転する他者にどのように否定的な影響を及ぼしているかに関するフィードバックをトリガし、諍いを低減するのを助ける。
[0010] 1つの実施形態において、装置は、車両の運転者から検知される1つ又は複数の第1のパラメータ及び車両内の乗客から検知される1つ又は複数の第2のパラメータを受信することであって、1つ又は複数の第1のパラメータ及び1つ又は複数の第2のパラメータは各々、生理学的情報、挙動情報、又は生理学的情報と挙動情報との組み合わせを含む、受信することと、受信されている1つ又は複数第1のパラメータ及び1つ又は複数の第2のパラメータに基づいて、運転者及び乗客のそれぞれの眠気レベルを予測することと、運転者の予測眠気レベルに基づいて車両内の乗客に、又は、乗客の予測眠気レベルに基づいて運転者に、フィードバックをトリガすることとを行うように構成されている。例えば、運転者及び1人又は複数の乗客の睡眠状態がモニタリングされる。運転者と乗客の両方が覚醒したままでいることを所望し、且つ、運転者の注意が低下している場合、運転者に話しかけること、ラジオをオンにすること、車両環境設定を変更すること(例えば、空気をより低温にする)などのような行動を取ることを含め、乗客の注意を運転者の覚醒を維持することに向けるように乗客に影響を及ぼすために、乗客にフィードバックが送信される。運転者が乗客によって覚醒したままにされると予測し、且つ、乗客の注意が低下しているものとして検知される場合、運転者はフィードバックを受信し、乗客が警告を維持することを要求する。車両内の乗員の眠気レベルの手動モニタリングを通じて、各乗員の安全が、コンピュータによって支援される共同努力を通じて保証される。
[0011] 1つの実施形態において、装置は、運転者及び乗客を含む車両の経路及び運転時間を含む運転計画を受信することと、乗客が、受信されている運転計画に基づく規定の持続時間にわたって継続する仮眠又は注意緩和期間を開始する時間を判定することと、時間に関して乗客への推奨をトリガすることとを行うように構成されている。例えば、乗客が仮眠する(例えば、気分を入れ替えて、例として乗客が運転者と役割を切り替えるときを警告するために)か、又は、注意を緩和される最良の時間をスケジュールするときに、計画されている経路及び運転時間が考慮に入れられる。
[0012] 1つの実施形態において、装置は、運転者の睡眠挙動に関する情報、乗客の睡眠挙動に関する情報、経路に沿った移動の安全性に関する情報、経路に沿った移動の複雑さに関する情報、運転者による経過運転時間、日時、交通、建造物、又は天候のうちの1つ又は任意の組み合わせに基づいて、上記時間を判定するようにさらに構成されている。例えば、装置は、より安全な経路範囲(例えば、事故の発生率がより低く、且つ/又は、運転技能に対してそれほどの困難を呈しない)上で、且つ/又は、運転者の経過運転時間、日時(例えば、夜中はより早くにより眠くなりやすい)などを含む他の要因に従って、仮眠を推奨する(又は、いくつかの実施形態において、乗客の注意が緩和されることを可能にする)。装置は、安全な移動を可能にする、推奨される仮眠又は注意緩和の開始時間に関するインテリジェントな決定を可能にする。
[0013] 1つの実施形態において、上記情報のうちの少なくとも1つは、車両外部のソースから受信される。例えば、装置は、個人情報(例えば、運転者及び/又は乗客の睡眠パターン、交通事故に関する統計、交通パターンなど)を含むユーザデータを記憶する外部データベース内に記憶されている情報を使用し、外部データベースは、車両内の1つ又は複数の1つ又は複数のデバイス、特に、バッテリによって給電されるデバイスのメモリ容量に対する必要性を軽減する。
[0014] 本発明のこれらの及び他の態様は、以降説明される実施形態から明らかになり、それらの実施形態を参照することによって解明される。
[0015] 本発明の多くの態様は図式的な添付の図面を参照すると、よりよく理解することができる。図面内の構成要素は、必ずしも原寸に比例してはおらず、むしろ本発明の原理を明瞭に説明していることが強調されるものである。その上、図面において、同様の参照符号は、いくつかの図全体を通じて対応する部分を指定している。
[0016] 本発明の一実施形態による、車両乗員インタラクションシステムが使用される例示的な車両を示す概略図である。 [0017] 本発明の一実施形態による、車両乗員インタラクションシステムの機能の全部又は一部が実施される例示的なウェアラブルデバイスを示す概略図である。 [0018] 本発明の一実施形態による、車両乗員インタラクションシステムの機能の全部又は一部が実施される例示的なモバイルデバイスを示す概略図である。 [0019] 本発明の一実施形態による、車両乗員インタラクションシステムの機能の全部又は一部が実施される例示的な車両処理ユニットを示す概略図である。 [0020] 本発明の一実施形態による、例示的な車両乗員インタラクション方法を示す流れ図である。 [0021] 本発明の一実施形態による、別の例示的な車両乗員インタラクション方法を示す流れ図である。 [0022] 本発明の一実施形態による、別の例示的な車両乗員インタラクション方法を示す流れ図である。
[0023] 車両の運転者(すなわち、車両のナビゲーションを制御する車両の人間の乗員)と、車両内の1人又は複数の乗客との間の肯定的なインタラクションを増大することによって、及び/又は、否定的なインタラクションを低減若しくは回避することによって、車両移動の安全性を改善する車両乗員インタラクションシステムの特定の実施形態が本明細書において開示されており、車両のより安全である可能性がある使用がもたらされる。車両乗員インタラクションシステムの1つの実施形態において、装置は、メモリと、運転者の健康及び/若しくはウェルビーイング並びに運転者の運転スタイルをモニタリングする1つ又は複数のプロセッサとを備える。そのようなモニタリングは、車両の構造内に埋め込まれている(又はその外部に取り付けられている)か、乗員に付着されているウェアラブル装置内にあるか、乗員のモバイルデバイス内にあるか、又はそれらの組み合わせである1つ又は複数のセンサによって実施される。装置は、運転スタイルを健康パラメータに相関付け、すべての乗員にとって肯定的で安全な運転体験を促進するために、1人の乗員に対する、他の乗員の健康状態又はウェルビーイングの変化に関するフィードバックをトリガする。いくつかの実施形態において、装置は、乗員の眠気のレベルを予測するために、モニタリングされている健康パラメータを使用する。いくつかの実施形態において、装置は、所与の移動の間に乗客に対して仮眠/注意緩和時間を推奨するために、運転計画に関する情報を使用する。推奨は、運転に対して課される困難がより低く、且つ/又は、乗客が注意することなくナビゲートするのに安全である移動経路の間に仮眠/注意緩和時間を求める。
[0024] やや脱線するが、車両の乗員の間での否定的なインタラクションは、否定的な運転体験を呈し、対処されていない苛立ちを、さらには事故を招く可能性がある。車両乗員健康状態及びウェルビーイングに関するコンピュータ支援インテリジェンスを提供することによって、車両乗員インタラクションシステムの特定の実施形態は、そのような否定的な体験をしてしまう危険性を軽減し、関与するすべての乗員にとって肯定的で安全な移動を可能にする。
[0025] 本開示の車両乗員インタラクションシステムの特定の特徴を要約したが、ここで、図面に示されているものとしての、車両乗員インタラクションシステムの説明を詳細に参照する。車両乗員インタラクションシステムはこれらの図面に関連して説明するが、車両乗員インタラクションシステムを本明細書において開示されている1つ又は複数の実施形態に限定することは意図されていない。例えば、1つの車両内の乗員の間でのインタラクションを管理するコンテキストにおいて主に説明されているが、いくつかの実施形態において、複数の車両の乗員の間でのインタラクションを、車両乗員インタラクションシステムに従って管理することができる。さらに、説明は、1つ又は複数の実施形態の仕様を識別又は記載しているが、そのような仕様は必ずしも、すべての実施形態の一部ではなく、様々な記述されている利点のすべてが必ずしも、単一の実施形態又はすべての実施形態に関連付けられるとも限らない。逆に、添付の特許請求の範囲によって規定される、本開示と一致するすべての代替形態、修正形態及び均等物を包含することが意図されている。さらに、本開示のコンテキストにおいて、特許請求の範囲は、必ずしも、本明細書において記載されている特定の実施形態に限定されるものではないことも理解されるべきである。
[0026] ここで図1を参照すると、車両乗員インタラクションシステムの特定の実施形態が実施される例示的な車両10が示されている。本開示のコンテキストにおいて、車両1は多くの中の1つの例であること、及び、車両乗員インタラクションシステムのいくつかの実施形態は、図1に示すタイプの他のタイプの車両において使用されてもよいことが、当業者には理解されるべきである。図1は、車両処理ユニット12、外部車両センサ14(例えば、前部センサ14A及び後部センサ14B)、及び内部車両センサ16(例えば、16A及び16B)を有する車両10を示す。センサ14、16及び車両処理ユニット12の量は、1つの実施形態の例示であること、及び、いくつかの実施形態において、より少ない又はより多い量の、1つ又は複数のこれらのタイプの構成要素が使用されてもよいことに留意されたい。内部車両センサ16は、車両10の客室内に位置する。外部車両センサ14は、車両10の外部に位置する。外部車両センサ14及び内部車両センサ16は、ワイヤレス媒体(例えば、とりわけ、Bluetooth(登録商標)、近接場通信(NFC)及び/又は様々な既知の光符号化技術のうちの1つ)及び/又は有線媒体(例えば、1つ又は複数のCANバスを介して)などを介して、車両処理ユニット12と通信することが可能である。内部車両センサ16は、温度センサ、マイクロフォン、カメラ、光センサ、圧力センサ、加速度計、他のセンサの中でも、ビーコン、無線周波数識別(RFID)又は他の符号化光技術を含む近接センサのうちの少なくとも1つを含む。外部車両センサ14は、温度センサ、降水及び/又は湿度を測定するためのセンサ、マイクロフォン、カメラ、光センサ、圧力センサ、加速度計などを含む。いくつかの実施形態において、車両10は、地理的位置センサ(例えば、とりわけ、全地球測位システム(GPS)受信機を含む、全地球的航法衛星システム(GNSS)受信機)を含む。地理的位置センサは、位置座標(例えば、緯度、経度、高度)を提供する。
[0027] 図1は、少なくとも1つのクラウド(例えば、クラウド1)18と通信することが可能な車両処理ユニット12をさらに示す。すなわち、車両処理ユニット12は、(例えば、とりわけ、例としてグローバルシステムフォーモバイルコミュニケーションズすなわちGSM(登録商標)規格に従って構成される1つ又は複数のネットワークなどによるテレメトリを介して)クラウドプラットフォーム(クラウド18)の1つ又は複数のデバイスと通信することが可能である。車両10はまた、車両10の動作(例えば、速度、制動、ステアリングホイールの回転、車輪の回転など)に関係付けられる車両センサを含む。車両10は、車両10のナビゲーション(例えば、方向、車両速度、加速度など)を主に制御する(人間の)運転者20によって運転されることが可能である。
[0028] 運転者20は、ウェアラブル装置22(本明細書においては、運転者ウェアラブル装置又はウェアラブルデバイスとしても参照される)を装着しながら車両10を運転する。運転者ウェアラブル装置22は、例えば、Philips Health Watch又は別のフィットネストラッカ若しくはスマートウォッチを含む。いくつかの実施形態において、運転者ウェアラブル装置22は、胸郭バンド、腕章、イヤピース、ネックレス、ベルト、衣服、ヘッドバンド、又は別のタイプのウェアラブルフォームファクタを含む。いくつかの実施形態において、運転者ウェアラブル装置22は、皮膚の下に存在するか又は他の場所に埋め込まれる生体適合性センサを含む、埋め込み可能デバイスであってもよい。運転者20はまた、車両10を運転していないときにも、運転者ウェアラブル装置22を装着してもよい。運転者20はさらに、車両10内に存在する自身の運転者モバイルデバイス24(例えば、スマートフォン、タブレット、ラップトップ、ノートブック、コンピュータなど)を保持しながら車両10を運転することができる。運転者ウェアラブル装置22は、運転者モバイルデバイス24及びその上に存在するモバイルソフトウェアアプリケーション(「アプリ」)及び/又は車両処理ユニット12と通信することが可能である(例えば、Bluetooth(登録商標)、802.11、NFCなどを介して)。運転者モバイルデバイス24は、少なくとも1つのクラウド(例えば、クラウド2)26と通信することが可能である。いくつかの事例において、運転者モバイルデバイス24は、車両処理ユニット12と通信することが可能である。時として、乗客28が、運転者20とともに車両10に搭乗する。いくつかの事例において、乗客28は、ウェアラブル装置30(本明細書においては乗客ウェアラブル装置又はウェアラブルデバイスとしても参照される)を装着する。いくつかの事例において、乗客モバイルデバイス32(例えば、スマートフォン、タブレット、ラップトップ、ノートブック、コンピュータなど)が、車両10内の乗客28とともに存在する。乗客ウェアラブル装置30は、車両処理ユニット32と通信することが可能である。乗客モバイルデバイス32は、少なくとも1つのクラウド(例えば、クラウド2)26と通信することが可能である。いくつかの実施形態において、乗客モバイルデバイス32は、車両処理ユニット12と通信することが可能である。モバイルデバイス24及び32のさらなる論述は後述する。モバイルデバイス24及び32の他の例は、運転者モバイルデバイス及び乗客モバイルデバイスとして具現化されるユーザデバイスの一例を記載している、2013年12月4日に出願された「Presentation of physiological data」と題する国際特許出願公開第2015084353A1号パンフレットに見出される。
[0029] 概して、ウェアラブルデバイス22、30は、車両処理ユニット12及びそれぞれのモバイルデバイス24、32とワイヤレス通信する。いくつかの実施形態において、ウェアラブルデバイス22、30は、直接的に(例えば、セルラネットワークを通じてなど、テレメトリを介して)、又は、中間デバイス(例えば、それぞれモバイルデバイス24、32)を介してのいずれかで一方又は両方のクラウド18、26と通信する。同様に、車両処理ユニット12は、一方又は両方のクラウド18、26と通信する。いくつかの実施形態において、車両10内のすべてのデバイスは、互いと及び/又はクラウド18、26と通信する。
[0030] クラウド18、26への通信を可能にするネットワークは、とりわけ、GSM(登録商標)、GPRS、CDMAOne、CDMA2000、エボリューションデータオプティマイズド(EV−DO)、EDGE、ユニバーサルモバイルテレコミュニケーションシステム(UMTS)、Digital Enhanced Cordless Telecommunications(DECT)、デジタルAMPS(IS−136/TDMA)、及び統合デジタル拡張ネットワーク(iDEN)を含む、ワイヤレスネットワーク内で使用するのに適した複数の異なるデジタルセルラ技術のうちのいずれかを含む。いくつかの実施形態において、クラウド18、26上のデバイスとの通信は、ワイヤレスフィデリティ(Wi−Fi(登録商標))を使用して達成される。全体的に又は部分的にインターネットを含む1つ又は複数のネットワークを含む広域ネットワークの一部であるクラウド18、26へのアクセスは、とりわけ、PSTN(公衆交換電話網)、POTS、総合デジタル通信網(ISDN)、Ethernet、Fiber、DSL/ADSL、Wi−Fi(登録商標)、Zigbee(登録商標)、BT、BTLEを含む1つ又は複数のネットワークへのアクセスを通じてさらに可能にされる。
[0031] クラウド18、26は各々、内部クラウド、外部クラウド、プライベートクラウド、又は公衆クラウド(例えば、商用クラウド)を含む。例えば、プライベートクラウドは、例えばEucalyptusシステム、VMWare vSphere(登録商標)、又はMicrosoft(登録商標)HyperVを含む様々なクラウドシステムを使用して実施される。公衆クラウドは、例えば、Amazon EC2(登録商標)、Amazon Web Services(登録商標)、Terremark(登録商標)、Savvis(登録商標)、又はGoGrid(登録商標)を含む。これらのクラウドによって提供されるクラウドコンピューティングリソースは、例えば、ストレージリソース(例えば、ストレージエリアネットワーク(SAN)、ネットワークファイルシステム(NFS)、及びAmazon S3(登録商標))、ネットワークリソース(例えば、ファイアウォール、ロードバランサ、及びプロキシサーバ)、内部プライベートリソース、外部プライベートリソース、安全な公衆リソース、サービス型インフラストラクチャ(IaaS)、サービス型プラットフォーム(PaaS)、又はサービス型ソフトウェア(SaaS)を含む。クラウドアーキテクチャは、複数の異なる構成のうちの1つに従って具現化される。例えば、MICROSOFT AZURE(商標)に従って構成される場合、マネージドコードによって構築される離散スケーラブルコンポーネントであるロールが提供される。ワーカロールは、一般的拡張のためのものであり、ウェブロールのための背景処理を実施する。ウェブロールは、ウェブサーバを提供し、HTTP(ハイパーテキスト転送プロトコル)又はHTTPS(HTTPセキュア)エンドポイントを介してウェブ要求をリスンし、これに応答する。VMロールは、テナント定義の構成(例えば、リソース、ゲストオペレーティングシステム)に従ってインスタンス化される。オペレーティングシステム及びVMの更新は、クラウドによって管理される。ウェブロール及びワーカロールは、VMロール内で作動し、VMロールは、テナントの制御下にある仮想マシンである。ストレージ及びSQLサービスは、ロールによって使用されるために利用可能である。他のクラウドと同様に、スケーリング、負荷分散などを含む、ハードウェア及びソフトウェア環境又はプラットフォームは、クラウドによって取り扱われる。
[0032] いくつかの実施形態において、クラウド18、26のサービスは、いくつかの実施形態において、サーバファームとして参照される、複数の論理的にグループ分けされたサーバ(サーバデバイス上で作動する)において実施される。サーバファームのデバイスは、地理的に離散され、単一のエンティティとして統制され、又は、複数のサーバファームの間で分散され、ウェアラブル装置22、30、モバイルデバイス24、32、及び/又は車両処理ユニット12のうちの1つ又は複数の代わりに又はそれらとともに1つ又は複数のアプリケーションを実行する。各サーバファーム内のデバイスは異機種環境にあってもよい。サーバファームのデバイスのうちの1つ又は複数は、1つのタイプのオペレーティングシステムプラットフォーム(例えば、ワシントン州レッドモンド所在のMicrosoft Corp.によって製造されるWINDOWS(登録商標) NT)に従って動作してもよく、一方、他のデバイスのうちの1つ又は複数は、別のタイプのオペレーティングシステムプラットフォーム(例えば、Unix又はLinux(登録商標))に従って動作してもよい。サーバファームのデバイスのグループは、広域ネットワーク(WAN)接続又は中域ネットワーク(MAN)接続を使用して相互接続されるファームとして論理的にグループ分けされ、各デバイスは各々、ファイルサーバデバイス、アプリケーションサーバデバイス、ウェブサーバデバイス、プロキシサーバデバイス、又はゲートウェイサーバデバイスとして参照される(また、それに従って動作する)。
[0033] いくつかの実施形態において、車両10はまた、少なくとも1つのカメラ34を含む。カメラ34は、運転者の顔を視野に収めるように配置される。いくつかの実施形態において、カメラ34は、乗客の顔を視野に収めるように配置される。いくつかの実施形態において、車両10は、車両10内の複数の人間を視野に収めるように複数のカメラを含む。カメラ34は、車両処理ユニット12、ウェアラブル装置22、30、モバイルデバイス24、32、及び/又はクラウド(例えば、クラウド18及び/又はクラウド26)のうちの少なくとも1つと通信することが可能である。いくつかの実施形態において、カメラ34は、Philips Vital Signs Cameraのようなバイタルサインカメラを含む。バイタルサインカメラは、皮膚色及び体の動き(例えば、胸部の動き)の変化を検知することによって、標準的な赤外線(IR)ベースのカメラを使用して心拍数及び呼吸数を遠隔測定する。例えば、心臓が鼓動しているときはいつでも、血管を通じて追加の血液が流れるために、皮膚色が変化する。バイタルサインカメラ内に存在するアルゴリズムが、これらのわずかな皮膚色変化を検出し、信号を増幅し、色変化の頻度を分析することによって脈拍数信号を計算する。呼吸について、バイタルサインカメラは、胸部及び/又は腹部の上昇及び下降に焦点を当て、アルゴリズムを使用して信号を増幅し、正確な呼吸数を判定する。バイタルサインカメラはまた、動きに強く、顔追跡を使用して運動中に正確な読み値を得る。バイタルサインカメラは、その目立たない脈拍数及び呼吸数機能によって、心的状態、睡眠パターン、及び活動レベルの追跡を可能にし、運転者及び/又は乗客の眠気(例えば、眠気レベル)、ストレス、及び注意レベルを検出するのを助けるために使用することができる。概して、脈拍数及び呼吸数モニタリングは、特に感情の生理学的指標として、健康状態をモニタリングするときに有用である。同じ又は同様に機能が、ウェアラブルデバイス22、30及び/又はモバイルデバイス24、32のカメラに見出される。
[0034] 運転者ウェアラブル装置22及び/又は乗客ウェアラブル装置30は、加速度計、皮膚電位(EDA)を検出するためのフォトプレチスモグラム(PPG)センサ(例えば、皮膚コンダクタンス、電気皮膚反応、皮膚電気反応を含む皮膚の電気特性の変動を検出する)、血圧計カフ、血糖モニタ、心電センサ、歩数センサ、ジャイロスコープ、SpO2センサ(例えば、動脈血酸素飽和度の推定値を与える)、呼吸センサ、姿勢センサ、応力センサ、電気皮膚反応センサ、温度センサ、圧力センサ、光センサ、及び他の生理学的パラメータのセンサのうちの少なくとも1つを含む。運転者ウェアラブル装置22及び/又は乗客ウェアラブル装置30は、他の生理学的パラメータの中でも、心拍数、心拍変動、呼吸数、脈波伝搬時間、血圧、温度に関係する信号を検知することが可能である。他の可能なパラメータ及びセンサは、2004年9月13日に出願された「System for monitoring and managing body weight and other physiological conditions including iterative and personalized planning, intervention and reporting capability」と題する米国特許第8398546号の表1に記載されている。いくつかの実施形態において、運転者ウェアラブル装置22の上述したセンサは、依然として車両10内の運転者20に近接して位置決めされたままで、代わりに車両10の構造内に統合されてもよい(例えば、運転者20によって装着されない)。例えば、車両ステアリングホイールが、上記センサの1つ(例えば、ECGセンサ)を含んでもよい。別の例として、車両10の運転席がセンサ(例えば、圧力センサ)を含んでもよい。
[0035] 車両乗員インタラクションシステムの特定の実施形態の処理は、車両処理ユニット12、クラウド(例えば、クラウド18及び/又は26の1つ又は複数のデバイス)、運転者ウェアラブル装置22、乗客ウェアラブル装置30、運転者モバイルデバイス24、及び/又は乗客モバイルデバイス32のうちの1つ又は任意の組み合わせに含まれる。本発明の様々な実施形態は、運転者及び乗客をモニタリングし、他の人の体験及び健康状態に関するそのような人に対する更新を提供する手法の欠如を克服することを提案する。以下の説明において、車両乗員インタラクションシステムの特定の実施形態の主な処理機能は、様々な車両センサ14、16、ウェアラブル装置22、30、カメラ34、及び/又はモバイルデバイス24によって通信される生理学的パラメータ、並びに、車両10内の様々な構造物(例えば、座席、視覚表示画面、音響デバイスなど)、ウェアラブル装置22、30、及び/又はモバイルデバイス24において実施されるフィードバックを用いて、車両処理ユニット12内で達成されるものとして説明される。車両10内又は外部の他のデバイス(例えば、クラウド18及び/又は26)が、いくつかの実施形態において、処理機能のための主なロケーションであってもよく、したがって、本発明の範囲内にあることが企図されることが理解されるべきである。
[0036] ここで、車両乗員インタラクションシステムの機能の全部又は一部が実施される例示的なウェアラブルデバイス36を示す図2に注目する。運転者ウェアラブル装置22又は乗客ウェアラブル装置30は、図2に示すウェアラブルデバイス36のアーキテクチャ及び機能に従って構築される。特に、図2は、例示的なウェアラブルデバイス36の例示的なアーキテクチャ(例えば、ハードウェア及びソフトウェア)を示す。本開示のコンテキストにおいて、図2に示すウェアラブルデバイス36は1つの例に過ぎないこと、及び、いくつかの実施形態において、追加の、より少ない、及び/又は異なる構成要素が、類似の及び/又は追加の機能を達成するために使用されることが、当業者には理解されるべきである。1つの実施形態において、ウェアラブルデバイス36は、複数のセンサ38(例えば、38A〜38N)、それぞれセンサ38に結合されている1つ又は複数の信号調整回路40(例えば、SIG COND CKT40A〜SIG COND CKT40N)、及び、信号調整回路40から調整済み信号を受信する処理回路42(1つ又は複数のプロセッサを含む)を備える。1つの実施形態において、処理回路42は、アナログ−デジタル変換器(ADC)、デジタル−アナログ変換器(DAC)、マイクロコントローラユニット(MCU)、デジタル信号プロセッサ(DSP)、及びメモリ(MEM)44を備える。いくつかの実施形態において、処理回路42は、図2に示すものよりも少ない又は追加の構成要素を含む。例えば、1つの実施形態において、処理回路42は、全体がマイクロコントローラユニットから成る。いくつかの実施形態において、処理回路42は、信号調整回路40を含む。
[0037] メモリ44は、オペレーティングシステム(OS)、及び、1つの実施形態において車両乗員インタラクションシステムの1つ又は複数の機能を備えるアプリケーションソフトウェア(ASW)46を備える。いくつかの実施形態において、他の機能の中でも、物理的追跡及び/又は挙動追跡を可能にするための追加のソフトウェアが含まれる。図示されている実施形態において、アプリケーションソフトウェア46は、センサ38から受信される信号を処理するためのセンサ測定モジュール(SMM)48と、起動をトリガする制御シグナリングの受信に基づいてウェアラブルデバイス36のフィードバック回路を起動するためのフィードバックモジュール(FM)50(例えば、1つの実施形態においては車両処理ユニット12(図1)から受信されるが、いくつかの実施形態において、フィードバックは他のデバイス、又は、ウェアラブルデバイス36の内部のソフトウェアからトリガされる)と、通信モジュール(CM)52とを備える。いくつかの実施形態において、他の機能の中でも、車両乗員インタラクションシステムの開示されている機能を達成するために使用される追加のモジュールが含まれ、又は、モジュール48〜52のうちの1つ若しくは複数が、アプリケーションソフトウェア46から分離され、若しくは、互いに対して、示されているものとは異なる構成内にパッケージされる。いくつかの実施形態では、モジュール48〜52の全部よりも少ないモジュールが、ウェアラブルデバイス36内で使用される。
[0038] センサ測定モジュール48は、センサ38によって測定される信号(及び関連データ)を処理するための実行可能コード(命令)を含む。例えば、センサ38は、心拍数、心拍変動、皮膚電位、及び/又は体の動き(例えば、単軸又は3軸加速度計測定を使用して)を含む1つ又は複数のパラメータ(生理学的、感情など)を測定する。これらのパラメータのうちの1つ又は複数は、センサ測定モジュール48によって分析され、ストレスの指標、不安の指標、乗り物酔いの指標、眠気などを含む、ウェアラブルデバイス36を装着している対象者の健康状態及び/又はウェルビーイングの指標を導出することが可能になる。いくつかの実施形態において、これらのパラメータのうちの1つ又は複数に対応する未加工データが車両処理ユニット12(図1)に通信され、車両処理ユニット1は、未加工データから指標を導出する。いくつかの実施形態において、センサ測定モジュール48の機能は、ローカルに、及び、分散コンピューティング様式で他のデバイス(例えば、車両処理ユニット12)において達成される。センサ測定モジュール48は、センサ38のうちの1つ又は複数のサンプリングレートを制御する。
[0039] フィードバックモジュール50は、トリガ信号を受信し、フィードバック回路を起動するための実行可能コード(命令)を含む。1つの実施形態において、トリガ信号は、別のウェアラブル装置、モバイルデバイス、又は車両処理ユニット12(図1)を含む、車両10(図1)内の別のデバイスから通信される。いくつかの実施形態において、例えば、乗客又は運転者のストレス及び/又は苛立ち、眠気、及び/又は適切な仮眠/注意緩和時間を判定するための処理機能がウェアラブルデバイス36によって達成される場合、ウェアラブルデバイス36のアプリケーションソフトウェア46が、トリガ信号を通信する。いくつかの実施形態において、トリガ信号は、車両10(図1)内の他のデバイス(例えば、カメラ34)、又は、車両10の外部の他のデバイスから(例えば、クラウド18、26のデバイスから)通信される。フィードバックモジュール50は、トリガ信号に基づいて、ウェアラブルデバイス36の1つ又は複数の回路を起動する。例えば、ウェアラブルデバイス36内の振動モータが、例えば、乗客のストレス(又は乗客が装着しているときは運転者のストレス)又は眠気について、ウェアラブルデバイス36の保持者に触覚的に警告するために、起動される。別の例として、ウェアラブルデバイス36の照明(例えば、発光ダイオードすなわちLED)が、ウェアラブルデバイス36の保持者に視覚的に警告するために起動され、又は、音響回路(例えば、ブザー)が、ウェアラブルデバイス36の保持者に聴覚的に警告するために起動される。いくつかの実施形態において、ウェアラブルデバイス36は、表示画面を備え、警告は、テキスト若しくはグラフィックメッセージ、又は照明の形態で提示される。いくつかの実施形態において、触覚、視覚、又は聴覚フィードバックの任意の組み合わせが実施される。いくつかの実施形態において、フィードバックは、トリガ信号に応じて強度が変調される。例えば、LED光活性化(例えば、点滅光)又はディスプレイ照明の頻度が、モニタリングされている対象者の感情、挙動、又は生理学的状態又は条件に応じて変更される。例えば、乗客の生理学的状態又は感情状態をモニタリングする場合、例えば、車両処理ユニット12からのトリガ信号が、ストレスレベルの強度を反映するように変調され、これはフィードバックにおいて、他のフィードバック形式の中でも、ストレスが増大するにつれてより高速になる照明の点滅、又は、ビープオン周波数若しくは音量の増大、又は、振動強度の増大、又は、他のフィードバックメカニズムへの遷移(例えば、ブザーからビープへ、ビープから視覚的刺激へ、など)を介して現れる。概して、フィードバックは、いくつかの実施形態において、変化のレベルを区別することを可能にするために検知されている健康状態又はウェルビーイングを反映するように調整される。いくつかの実施形態において、ウェアラブルデバイス36は、別のデバイスに、その別のデバイス内のフィードバックメカニズムを起動するための信号を通信する。
[0040] 通信モジュール52は、ウェアラブルデバイス36の通信回路54が、車両10の内部又は車両10の外部にある1つ又は複数のデバイス(例えば、他のウェアラブルデバイス、モバイルデバイス、クラウドデバイス、車両処理ユニット、カメラなど)に対してデータを送受信するために、複数の異なる通信技術(例えば、NFC、Bluetooth(登録商標)、Zigbee(登録商標)、802.11、ワイヤレスフィデリティ、GSM(登録商標)など)のうちの1つ又は複数に従って動作することを可能にするための実行可能コード(命令)を含む。例示を目的として、通信モジュール52は、本明細書において、車両処理ユニット12(図1)との通信の制御を可能にするものとして説明される。1つの実施形態において、1つ又は複数の検知されているパラメータは、通信モジュール52と協働する通信回路54を介して車両処理ユニット12に通信され、トリガ信号は、通信モジュール52と協働する通信回路54を介して車両処理ユニット12から受信される。上記で説明したように、車両処理ユニット12に通信されるパラメータは、未加工データ若しくは導出データ、又は、両方の組み合わせである。
[0041] 上記で示したように、1つの実施形態において、処理回路42は、通信回路54に結合される。通信回路54は、ウェアラブルデバイス36と、車両10(図1)内又は外部の他のデバイスとの間のワイヤレス通信を可能にする役割を果たす。通信回路54は、Bluetooth(登録商標)(BT)回路として示されているが、この送受信機構成には限定されない。例えば、いくつかの実施形態において、通信回路54は、NFC回路、Wi−Fi(登録商標)回路、とりわけ、光学又は超音波ベースの技術などの、Zigbee(登録商標)、BT低エネルギー、802.11、GSM(登録商標)、LTE、CDMA、WCDMA(登録商標)に基づく送受信回路のうちのいずれか1つ又は組み合わせとして具現化される。いくつかの実施形態において上述した通信仕様/規格の2つ以上による、複数の送受信回路が使用される。
[0042] 処理回路42は、入力インターフェース56(INPUT)及び出力インターフェース58(OUT)を含む、入出力(I/O)デバイス又は周辺装置にさらに結合される。いくつかの実施形態において、入力インターフェース56及び/若しくは出力インターフェース58は省かれ、又は、両方の機能が単一の構成要素に組み合わされる。
[0043] いくつかの実施形態において、前述した回路及び/又はソフトウェアのうちの1つ又は複数の機能は、より少ない構成要素/モジュールに組み合わされ、又は、いくつかの実施形態において、追加の構成要素/モジュール若しくはデバイスの間でさらに分散される。例えば、処理回路42は、マイクロコントローラ(マイクロコントローラユニットすなわちMCU)、DSP、及びメモリ44を含む集積回路としてパッケージされ、一方、ADC及びDACは、処理回路42に結合されている別個の集積回路としてパッケージされる。いくつかの実施形態において、上記で列挙した構成要素の機能のうちの1つ又は複数は、マイクロコントローラによって実施されるDSPの機能のように、組み合わされる。
[0044] 上記で示したように、センサ38は、生理学的パラメータ、感情的パラメータ、及び/又は挙動パラメータを測定することが可能なセンサのうちの1つ又は任意の組み合わせを含む。例えば、典型的な生理学的パラメータは、心拍数、心拍変動、心拍数回復、血流速度、活動レベル、筋活動(体幹運動、体の向き/位置、力、速度、加速度など)、筋緊張、血液量、血圧、血液酸素飽和度、呼吸数、発汗、皮膚温度、皮膚電位(皮膚伝導反応、電気皮膚反応、皮膚電気反応など)、体重、及び体組成(例えば、体格指数すなわちBMI)、咬合器運動(特に発話中)、虹彩スキャン(例えば、撮像センサを使用する)を含む。生理学的パラメータは、様々な情報を判定するために使用される。例えば、典型的な挙動情報は、様々な睡眠レベル挙動、車両運転スタイル挙動(例えば、急速で不規則なステアリングホイールの動き及び/又はステアリングホイール上の手の位置を測定又は検出するために加速度計センサを使用する)、足の動き(例えば、ブレーキペダル又はアクセルペダル上での動き)、手によるシフト運動などを含む。いくつかの実施形態において、車両センサは、運転スタイルをより単純に特性化することを可能にする。他の情報は、開始点及び終点並びに間の経路を含む、運転位置(例えば、全地球的航法衛星システム(GNSS)センサ/受信機を使用する)を含む。別の例として、感情情報は、ストレス、不安を含む、生理学的情報に基づいて収集される。そのような指標は、とりわけ、瞳孔拡張又は他の顔特徴変化、心拍数、音声パターン及び/又は音量、ジェスチャ検知、呼吸数を含む。他の情報は、乗り物酔いのような、吐き気を含む。センサ38はまた、慣性センサ(例えば、ジャイロスコープ)及び/又は磁気計を含み、これは、例えば、運転挙動及び乗り物酔いとの相関の判定を支援する。いくつかの実施形態において、上記で示したように、センサ38は、距離、速度、加速度、位置、高度など(例えば、位置データ、又は一般的には運動の検知)の判定を促進するためのGPS受信機を含むGNSSセンサを含む。いくつかの実施形態において、GNSSセンサ(例えば、GNSS受信機及びアンテナ)は、ウェアラブルデバイス36内に存在するのに加えて、又はそれに代えて、モバイルデバイス24、32(図1)及び/又は車両10(図1)に含まれる。いくつかの実施形態において、GNSS機能は、通信回路54、又は、処理回路42に結合されている他の回路を介して達成される。センサ38はまた、屈曲センサ及び/又は力センサ(例えば、可変抵抗を使用する)、筋電センサ、心電センサ(例えば、EKG、ECG)、磁気センサ、フォトプレシスモグラフィ(PPG)センサ、生体インピーダンスセンサ、赤外線近接センサ、音響/超音波/オーディオセンサ、ひずみゲージ、電気皮膚/発汗センサ、pHセンサ、温度センサ、及びフォトセルを含む。センサ38は、例えば、大気圧、湿度、屋外温度、汚染、雑音レベルなどの、環境パラメータ及び/又は条件を検出するための他の及び/又は追加のタイプのセンサを含む。これらの検知される環境パラメータ/条件のうちの1つ又は複数は、ユーザの状態の判定に影響を及ぼす場合がある。センサ38のうちの1つ又は複数は、微小電気機械システム(MEMS)インフラストラクチャにおける圧電、ピエゾ抵抗又は容量性技術に基づいて構築される。
[0045] 信号調整回路40は、他の信号調整構成要素の中でも、処理回路42においてさらなる処理が実施される前に、検知されている生理学的パラメータ及び/又は位置信号に対応するデータを含む、検知されている信号を調整するための増幅器及びフィルタを含む。図2にはそれぞれ各センサ38と関連付けられるものとして示されているが、いくつかの実施形態において、より少ない信号調整回路40が使用される(例えば、2つ以上のセンサ38に対して共有される)。いくつかの実施形態において、信号調整回路40(又はその機能)は、それぞれのセンサ38の回路内又は処理回路42内(又はその中に存在する構成要素内)など、他の場所に組み込まれる。さらに、一方向信号流(例えば、センサ38から信号調整回路40へ)を含むものとして上述されているが、いくつかの実施形態において、信号流は双方向であってもよい。例えば、光学測定の場合、マイクロコントローラは、光信号が、センサ38の回路内にあるか又は当該回路に結合されている光源(例えば、発光ダイオードすなわちLED)から放出されるようにし、センサ38(例えば、フォトセル)は反射/屈折信号を受信する。
[0046] 通信回路54は、処理回路42(例えば、通信モジュール52を実行する)によって管理及び制御される。通信回路54は、車両処理ユニット12(図1)、並びに/又は、いくつかの実施形態において車両10(図1)内及び/若しくは外部の1つ若しくは複数のデバイスとワイヤレスにインターフェースするために使用される。1つの実施形態において、通信回路54は、Bluetooth(登録商標)送受信機として構成されるが、いくつかの実施形態において、とりわけ、Wi−Fi(登録商標)、GSM(登録商標)、LTE、CDMA及びその派生物、Zigbee(登録商標)、NFCのような、他の及び/又は追加の技術が使用されてもよい。図2に示す実施形態において、通信回路54は、送信回路(TX CKT)、スイッチ(SW)、アンテナ、受信回路(RX CKT)、混合回路(MIX)、及び周波数ホッピングコントローラ(HOP CTL)を備える。送信回路及び受信回路は、変調器/復調器、フィルタ、及び増幅器を含む、RF信号のそれぞれの送信及び受信を可能にするのに適した構成要素を含む。いくつかの実施形態において、復調/変調及び/又はフィルタリングは、部分的に又は全体的にDSPによって実施される。スイッチは、受信モードと送信モードとの間で切り替える。混合回路は、処理回路42によって制御されるものとしての、周波数合成器及び周波数混合器として具現化される。周波数ホッピングコントローラは、送信回路の変調器からのフィードバックに基づいて送信信号のホッピング周波数を制御する。いくつかの実施形態において、周波数ホッピングコントローラの機能は、マイクロコントローラ又はDSPによって実施される。通信回路54の制御は、マイクロコントローラ、DSP、又は両方の組み合わせによって実施される。いくつかの実施形態において、通信回路54は、マイクロコントローラによって監督及び/又は管理されるそれ自体の専用コントローラを有する。
[0047] 通信回路54の1つの例示的な動作において、信号(例えば、2.4GHzの)が、アンテナにおいて受信され、スイッチによって受信回路へと方向付けられる。受信回路は、混合回路と協働して、周波数ホッピングコントローラに帰する周波数ホッピング制御の下で、受信信号を中間周波数(IF)信号に変換し、その後、ADCによるさらなる処理のためにベースバンドに変換する。送信側では、ベースバンド信号(例えば、処理回路42のDACからの)が、混合回路と協働する送信回路によってIF信号に変換され、その後、RFに変換され、RF信号はスイッチに通され、周波数ホッピングコントローラによって与えられる周波数ホッピング制御の下でアンテナから放出される。送信回路及び受信回路の変調器及び復調器は、周波数偏移変調(FSK)タイプの変調/復調を実施するが、IFとベースバンドとの間の変換を可能にするこのタイプの変調/復調には限定されない。いくつかの実施形態において、復調/変調及び/又はフィルタリングは、部分的に又は全体的にDSPによって実施される。メモリ44は、マイクロコントローラによって実行されると、Bluetooth(登録商標)(及び/又は他のプロトコル)送信/受信を制御する通信モジュール52を記憶する。
[0048] 通信回路54はIFタイプの送受信機として図示されているが、いくつかの実施形態において、直接変換アーキテクチャが実施されてもよい。上記で言及したように、通信回路54は、他の及び/又は追加の送受信技術に従って具現化されてもよい。
[0049] 処理回路42は、図2においてはADC及びDACを含むものとして図示されている。検知機能のために、ADCは、信号調整回路40からの調整済み信号を変換し、マイクロコントローラ及び/又はDSPによるさらなる処理のために信号をデジタル化する。ADCはまた、入力インターフェース56を介して受信されるアナログ入力を、マイクロコントローラによるさらなる処理のためのデジタルフォーマットに変換するためにも使用される。ADCはまた、通信回路54を介して受信される信号のベースバンド処理にも使用される。DACは、デジタル情報をアナログ情報に変換する。検知機能のためのその役割は、センサ38からの、光信号又は音響信号のような信号の放出を制御することである。DACは、出力インターフェース58からアナログ信号を出力させるためにさらに使用される。また、DACは、マイクロコントローラ及び/又はDSPからのデジタル情報及び/又は命令を、送信回路に供給されるアナログ信号に変換するためにも使用される。いくつかの実施形態において、追加の変換回路が使用されてもよい。
[0050] マイクロコントローラ及びDSPは、ウェアラブルデバイス36の処理機能を提供する。いくつかの実施形態において、両方のプロセッサの機能が、単一のプロセッサに組み合わされ、又は、追加のプロセッサの間でさらに分散される。DSPは、特殊なデジタル信号処理を提供し、マイクロコントローラからの処理負荷の負荷軽減を可能にする。DSPは、特殊な集積回路において又はフィールドプログラマブルゲートアレイ(FPGA)として具現化される。1つの実施形態において、DSPは、中央処理装置(CPU)、複数の回路バッファ、並びに、ハーバードアーキテクチャによる別個のプログラムメモリ及びデータメモリを備える、パイプラインアーキテクチャを備える。DSPは、同時の命令及びデータフェッチを可能にするデュアルバスをさらに備える。DSPはまた、Analog Devices SHARC(登録商標)DSPに見られるような命令キャッシュ及びI/Oコントローラを備えるが、DSPの他の製造業者が使用されてもよい(例えば、FreescaleマルチコアMSC81xxファミリ、Texas Instruments C6000シリーズなど)。DSPは、概して、レジスタ、並びに、乗算器、算術論理演算ユニット(ALU、加算、減算、絶対値、論理演算、固定小数点演算ユニットと浮動小数点演算ユニットとの間の変換などを実施する)、及びバレルシフタを含む数学構成要素を使用した数学操作に利用される。DSPが高速に乗累算(MAC)を実施することができることによって、高速フーリエ変換(FFT)及び有限インパルス応答(FIR)フィルタリングの効率的な実行が可能である。DSP機能の一部又は全部は、マイクロコントローラによって実施されてもよい。DSPは概して、ウェアラブルデバイス36内の符号化及び復号機能を提供する。例えば、符号化機能は、情報の転送に対応するコマンド又はデータを符号化することを含む。また、復号機能は、(例えば、ADCによる処理の後に)センサ38から受信される情報を復号することを含む。
[0051] マイクロコントローラは、特にメモリ44に記憶されているものなど、ソフトウェア/ファームウェアを実行するためのハードウェアデバイスを含む。マイクロコントローラは、任意のカスタムメイドの若しくは市販のプロセッサ、中央処理装置(CPU)、半導体ベースのマイクロプロセッサ(マイクロチップ若しくはチップセットの形態の)、マクロプロセッサ、又は一般にソフトウェア命令を実行するための任意のデバイスとすることができる。適切な市販のマイクロプロセッサの例は、いくつかの非限定例を挙げると、Intel(登録商標)のItanium(登録商標)及びAtom(登録商標)マイクロプロセッサを含む。マイクロコントローラは、ウェアラブルデバイス36の管理及び制御を可能にする。
[0052] メモリ44(本明細書においては非一時的コンピュータ可読媒体としても参照される)は、揮発性メモリ要素(例えば、ランダムアクセスメモリ(DRAM、SRAM、SDRAMなどのようなRAM))及び不揮発性メモリ要素(例えば、ROM、フラッシュ、ソリッドステート、EPROM、EEPROMなど)のうちのいずれか1つ又は組み合わせを含むことができる。その上、メモリ44は、電子、磁気、及び/又は他のタイプの記憶媒体を組み込む。メモリ44は、後の処理のために、所与の時間期間にわたって、且つ/又は、所与の記憶量制約に基づいて、センサデータを記憶するために使用される。
[0053] メモリ44内のソフトウェアは、1つ又は複数の別個のプログラムを含み、それらの各々が、論理機能を実施するための実行可能命令の順序付けされたリストを含む。図2の例において、メモリ44内のソフトウェアは、適切なオペレーティングシステム、並びに、1つの実施形態においてそれぞれモジュール48、50、及び52を介したセンサ測定機能、フィードバック生成機能、及び通信機能を含むアプリケーションソフトウェア46を含む。
[0054] オペレーティングシステムは、本質的に、アプリケーションソフトウェア46及び関連モジュール48〜52のような、コンピュータプログラムの実行を制御し、スケジューリング、入出力制御、ファイル及びデータ管理、メモリ管理、及び通信制御並びに関連サービスを提供する。メモリ44はまた、測定パラメータを正確に解釈するために実行可能コードを実行するマイクロコントローラによって使用される、体重、身長、年齢、性別、目標(goal)、体格指数(BMI)を含む、ユーザデータを含む。ユーザデータはまた、睡眠履歴を含む、過去に記録されたデータを以前のコンテキストに関係付ける履歴データを含む。いくつかの実施形態において、ユーザデータは、他の場所に(例えば、モバイルデバイス24、32(図1)、車両処理ユニット12(図1)に)、又は遠隔的に(例えば、クラウド18、26(図1)内の記憶デバイス内に)記憶される。
[0055] メモリ44内のソフトウェアは、ソースプログラム、実行可能プログラム(オブジェクトコード)、スクリプト、又は、実施されるべき命令セットを含む任意の他のエンティティを含む。ソースプログラムの場合、プログラムは、オペレーティングシステムに関連して適切に動作するように、コンパイラ、アセンブラ、インタープリタなどを介して翻訳される。さらに、ソフトウェアは、例えば、限定ではないがとりわけC、C++、Python、Java(登録商標)などの、(a)データ及びメソッドのクラスを有するオブジェクト指向プログラミング言語、又は、(b)ルーチン、サブルーチン、及び/若しくは関数を有する手続き型プログラミング言語として書くことができる。ソフトウェアは、非一時的コンピュータ可読媒体又は他の媒体であってもよいコンピュータプログラム製品内で具現化される。
[0056] 入力インターフェース56は、ボタン又はマイクロフォン又はセンサ(例えば、ユーザ入力を検出するために、タッチタイプディスプレイスクリーンとして含む)のような、ユーザ入力を入力するための1つ又は複数のインターフェース(例えば、ユーザインターフェースを含む)を含む。いくつかの実施形態において、入力インターフェース56は、ダウンロードされた情報のための、ウェアラブルデバイス36に対する(有線接続などを介する)通信ポートとしての役割を果たす。出力インターフェース58は、ユーザインターフェース(例えば、グラフィック若しくは他のタイプのユーザインターフェースを提示する表示画面、仮想又は拡張現実インターフェースなど)又はメモリ44内に記憶されている情報を(例えば、有線で)転送するための通信インターフェースを含む、フィードバックを提示するための、又は、データ転送(例えば、有線)のための1つ又は複数のインターフェースを含む。出力インターフェース58は、照明デバイス(例えば、LED)、オーディオデバイス(例えば、音源及びスピーカ)、並びに/又は、触覚フィードバックデバイス(例えば、振動モータ)及び/若しくは電気フィードバックデバイスのような、他のタイプのフィードバックデバイスを含んでもよい。
[0057] ここで、図3を参照すると、車両乗員インタラクションシステムの機能の全部又は一部が実施される例示的なモバイルデバイス60が示されている。運転者モバイルデバイス24又は乗客モバイルデバイス32は各々、図3に示すモバイルデバイス60のアーキテクチャ及び機能に従って構築される。特に、図3は、例示的なモバイルデバイス60の例示的なアーキテクチャ(例えば、ハードウェア及びソフトウェア)を示す。本開示のコンテキストにおいて、図3に示すモバイルデバイス60は1つの例に過ぎないこと、及び、いくつかの実施形態において、追加の、より少ない、及び/又は異なる構成要素が、類似の及び/又は追加の機能を達成するために使用されることが、当業者には理解されるべきである。図示されている例において、モバイルデバイス60はスマートフォンとして具現化されているが、いくつかの実施形態において、ワークステーション、ラップトップ、ノートブック、タブレットなどを含む、他のタイプのデバイスが使用される。モバイルデバイス60は、いくつかの実施形態において、車両乗員インタラクションシステムの特定の実施形態の全機能を提供するために、又は、いくつかの実施形態において、ウェアラブルデバイス36(図2)、車両処理ユニット12(図1)、若しくはクラウド18、26(図1)の1つ若しくは複数のデバイスのうちの1つ若しくは任意の組み合わせとともに、車両乗員インタラクションシステムの機能を提供するために使用される。以下の説明において、モバイルデバイス60は、モバイルデバイス60がいくつかの実施形態において車両乗員インタラクションシステムのより少ない又はより多い機能を提供してもよいという理解の下で、ウェアラブルデバイス36について説明したものと同様の、パラメータ検知、フィードバック、及び通信機能を提供するものとして説明される。
[0058] モバイルデバイス60は、ベースバンドプロセッサ(BBP)62及びアプリケーションプロセッサ(APP)64を含む、少なくとも2つの異なるプロセッサを備える。既知であるように、ベースバンドプロセッサ62は主に、ベースバンド通信関連タスクを取り扱い、アプリケーションプロセッサ64は概して、入力及び出力、並びに、ベースバンド処理に直接関係するもの以外のすべてのアプリケーションを取り扱う。ベースバンドプロセッサ62は、限定ではないが、他の機能の中でも、GSM(登録商標)(グローバルシステムフォーモバイルコミュニケーションズ)プロトコルスタックのような、プロトコルスタック(PROT STK)と関連付けられる機能を展開するための専用プロセッサを含む。アプリケーションプロセッサ64は、アプリケーションソフトウェア46Aの全部又は一部を含む、アプリケーションを作動させるためのマルチコアプロセッサを含む。ベースバンドプロセッサ62及びアプリケーションプロセッサ64は、ランダムアクセスメモリ(RAM)、フラッシュメモリなどを含む、それぞれの関連メモリ(例えば、MEM)66、68、及び周辺装置、並びにランニングクロックを有する。メモリ66、68は各々、本明細書においては、非一時的コンピュータ可読媒体としても参照される。メモリ68内に存在するものとして図示されているが、アプリケーションソフトウェア46Aのモジュールの全部又は一部は、メモリ66内に記憶されてもよく、メモリ66、68の間で分散されてもよく、又は、他のメモリ内に存在してもよいことに留意されたい。
[0059] ベースバンドプロセッサ62は、モバイルデバイス60が、その様々な変形並びに/又は他の電気通信プロトコル、規格、及び/若しくは仕様の中でも、WCDMA(登録商標)(広域符号分割多元接続)、CDMA(符号分割多元接続)、EDGE(GSM(登録商標)進化型高速データレート)、GPRS(汎用パケット無線サービス)、Zigbee(登録商標)(例えば、IEEE802.15.4に基づく)、Bluetooth(登録商標)、Wi−Fi(登録商標)(IEEE802.11などに基づくワイヤレスフィデリティ)、及び/又はLTE(ロングタームエボリューション,)を含む、1つ又は複数のワイヤレスネットワーク技術にアクセスすることを可能にするためのプロトコルスタックの機能を展開する。ベースバンドプロセッサ62は、信号変調、無線周波数偏移、及び符号化を含む、無線通信及び制御機能を管理する。ベースバンドプロセッサ62は、無線機(例えば、RFフロントエンド)70及び/又はGSM(登録商標)(又は他の通信規格の)モデム、並びに、アナログ及びデジタルベースバンド回路(それぞれ図3のABB、DBB)を備えるか、又は、それらに結合され得る。無線機70は、複数の異なる周波数の信号の受信及び送信を可能にするための1つ又は複数のアンテナ、送受信機、及び電力増幅器を備え、セルラ(及び/又はワイヤレス)ネットワークへのアクセスを可能にする。アナログベースバンド回路は、無線機70に結合され、GSM(登録商標)モデムのアナログドメインとデジタルドメインとの間のインターフェースを提供する。アナログベースバンド回路は、アナログ−デジタル変換器(ADC)及びデジタル−アナログ変換器(DAC)、並びに、制御及び電力管理/分配構成要素、及び、アプリケーションプロセッサ64を介して間接的に又はユーザインターフェース(UI)72(例えば、マイクロフォン、イヤピース、着信音、振動回路、タッチスクリーンなど)から直接的に受信されるアナログ及び/又はデジタル信号を処理するためのオーディオコーデックを含む回路を含む。ADCは、デジタルベースバンド回路によって処理するために、任意のアナログ信号をデジタル化する。デジタルベースバンド回路は、GSM(登録商標)プロトコルスタック(例えば、レイヤ1、レイヤ2など)1つ又は複数のレベルの機能を展開し、共有メモリインターフェース(アプリケーションプロセッサ64によって処理されるデータに対して取られるべき措置を命令するデータ及び制御情報及びパラメータを含むメモリ)を介して通信するマイクロコントローラ(例えば、マイクロコントローラすなわちMCU、本明細書においてはプロセッサとしても参照される)及びデジタル信号プロセッサ(DSP、本明細書においてはプロセッサとしても参照される)を含む。MCUは、とりわけ、RTC(リアルタイムクロック)、SPI(シリアルペリフェラルインターフェース)、I2C(inter−integrated circuit)、UART(汎用非同期送受信回路)、IrDA(赤外線データ協会)、SD/MMC(セキュアデジタル/マルチメディアカード)カードコントローラ、キーパッドスキャンコントローラ、及びUSBデバイスに基づくデバイス、GPRS暗号モジュール、TDMA(時分割多元接続)、スマートカードリーダインターフェース(例えば、1つ又は複数のSIM(加入者識別モジュール)カードのための)、タイマなどのような複数の周辺装置(例えば、集積回路としてパッケージされている回路)を有するコアを有する、リアルタイムオペレーティングシステム(RTOS)を作動させるRISC(縮小命令セットコンピュータ)マシンとして具現化される。受信側機能について、MCUは、DSPに、例えば、アナログベースバンド回路から同相/直交(I/Q)サンプルを受信し、MCUへ折り返し報告させることを伴う検出、復調、及び復号を実施するように命令する。送信側機能に関して、MCUは、送信可能データ及び補助情報をDSPに提示し、DSPは、データを符号化し、アナログベースバンド回路に提供する(例えば、DACによってアナログ信号に変換される)。
[0060] アプリケーションプロセッサ64は、アプリケーションソフトウェア46Aを含む、複数のユーザアプリケーションの実施を可能にするオペレーティングシステム(OS)の制御下で動作する。アプリケーションプロセッサ64は、システムオンチップ(SOC)として具現化され、インターネットに結合されているクラウド18、26(図1)の1つ又は複数のコンピューティングデバイスにアクセスするためのウェブブラウジング/クラウドベースアクセス機能を含む、複数のマルチメディア関連機能をサポートする。例えば、アプリケーションプロセッサ64は、遠隔データアクセス/記憶/処理を可能にし、組み込みオペレーティングシステムと協働することによって、カレンダー、位置サービス、ユーザデータ、公衆データなどにアクセスするために、クラウドコンピューティングフレームワーク又は他のネットワークへのアクセスを可能にするために、アプリケーションソフトウェア46A(例えば、ウェアラブルデバイス36のいくつかの実施形態と同様に、1つ又は複数のアプリケーションプログラムインターフェース(API)を有するか又はAPIと関連して動作可能なブラウザを含む、ミドルウェア)の通信機能を実行する。例えば、いくつかの実施形態において、車両乗員インタラクションシステムは、クラウドコンピューティングサービスを使用して動作し、ここで、モバイルデバイス60を介して間接的に、又は、ウェアラブルデバイス36若しくは車両処理ユニット12(図1)から直接的に受信される未加工及び/又は導出パラメータデータの処理は、クラウド18、26(図1)の1つ又は複数のデバイスによって達成され、トリガ信号(フィードバックをトリガするための)は、クラウド18、26(又は他のデバイス)からモバイルデバイス60へと通信され、モバイルデバイス60は、モバイルデバイス60の内部のフィードバックを(例えば、視覚的に、聴覚的に、又は触覚メカニズムを介して)作動させ、又は、トリガ信号を他のデバイス(例えば、ウェアラブルデバイス36及び/又は車両処理ユニット12)に中継する。図示されている例において、アプリケーションソフトウェア46Aは、モバイルデバイス60による生理学的パラメータの検知(及び車両処理ユニット12への同パラメータの通信)に基づく車両処理ユニット12による処理に依拠し、いくつかの実施形態において追加の及び/又は異なる処理がモバイルデバイス60において行われ得るという理解の下で、モバイルデバイス60において1つ又は複数のタイプのフィードバック機能を作動させるために、車両処理ユニット12によって送信されるトリガ信号に応答する。アプリケーションプロセッサ64は、一般に、プロセッサコア(アドバンストRISCマシンすなわちARM)を備え、マルチメディアモジュール(画像、ビデオ、及び/又はオーディオを復号/符号化するための)、グラフィックスプロセッシングユニット(GPU)、通信インターフェース(COMM)74、及びデバイスインターフェースをさらに備えるか、又は、それらに結合され得る。1つの実施形態において、通信インターフェース74は、ウェアラブルデバイス36、他のモバイルデバイス、及び/又は車両処理ユニット12とのワイヤレス通信を可能にするBluetooth(登録商標)(BT)(及び/又は、いくつかの実施形態においてはとりわけZigbee(登録商標))を含む、ワイヤレスインターフェースを含む。いくつかの実施形態において、通信インターフェース74は、アプリケーションソフトウェア46内の対応する通信ソフトウェアに従って、ローカル802.11ネットワークとインターフェースするためのWi−Fi(登録商標)モジュールを含む。アプリケーションプロセッサ64は、例えば、位置座標を提供するために衛星インターフェースへのアクセスを可能にするための全地球的航法衛星システム(GNSS)受信機76をさらに備え、又は、図示の実施形態においては、これに結合されている。いくつかの実施形態において、GNSS受信機76は、アプリケーションソフトウェア46A内のGNSS機能に関連して、例えば、モバイルデバイス60を保持する運転者及び/又は乗客が車両から離れているときに、(検知機能と協働して)挙動のパターンを確立するのを助けるために、コンテキストデータ(位置座標及び高度を含む、時間及び位置データ)を収集する。GNSS受信機76として図示されているが、セルラネットワーク信号及び/又はWi−Fi(登録商標)の三角測量に基づくものを含む、他の屋内/屋外測位システムが使用されてもよいことに留意されたい。
[0061] アプリケーションプロセッサ64に結合されているデバイスインターフェースは、表示画面を含む、ユーザインターフェース72を含む。いくつかの実施形態においてウェアラブルデバイスユーザインターフェースの表示画面と同様の表示画面は、LCDすなわち液晶ディスプレイ(又は、薄膜トランジスタ(TFT)LCD、面内切替(IPS)LCDのようなその変形形態)、アクティブマトリックスOLED(AMOLED)、網膜若しくは触覚に基づく技術、又は、仮想/拡張現実技術を含む、いくつかの利用可能な技術のうちの1つにおいて具現化される。例えば、ユーザインターフェース72は、メッセージング(例えば、テキストメッセージ)及び/若しくは記号/グラフィック(例えば、警報若しくは警告アイコン、点滅画面など)、並びに/又は、点滅光(LED)の形態で、視覚フィードバックを提示する。いくつかの実施形態において、ユーザインターフェース72は、表示画面に加えて又は代えて、他の周辺装置の中でも、キーパッド、マイクロフォン、スピーカ、イヤピースコネクタ、I/Oインターフェース(例えば、USB(ユニバーサルシリアルバス))、SD/MMCカードとして構成される。例えば、スピーカは、フィードバックを聴覚的に提供するために使用され、及び/又は、ユーザインターフェース72は、振動フィードバックをユーザに提供する振動モータを含む。視覚、聴覚、又は触覚フィードバックのうちの1つ又は任意の組み合わせが使用されてもよく、前述したように、フィードバックのフォーマットの強度の変動が、例えば、表示画面上で提示されるときに、初期ストレスレベル(例えば、黄色)とは異なる色(例えば、赤色)によって指示されるように、所与の健康条件及び/又は感情(例えば、ますますストレスを受けている)のレベルを提供するために使用される。
[0062] アプリケーションプロセッサ64にはまた、画像キャプチャデバイス(IMAGE CAPTURE)78も結合されている。画像キャプチャデバイス78は、光学センサ(例えば、電荷結合素子(CCD)又は相補型金属酸化膜半導体(CMOS)光学センサ)を含む。1つの実施形態において、画像キャプチャデバイス78は、上述したように、バイタルサインカメラとして構成される。概して、画像キャプチャデバイス78は、血圧(例えば、遠隔フォトプレチスモグラフィ(PPG)に基づく)、心拍数、及び/又は呼吸パターンを含む、ユーザの様々な生理学的パラメータを検出するために使用される。バッテリ82の動作を制御及び管理する電力管理デバイス80も含まれている。上述した及び/又は図3に示されている構成要素は、1つ又は複数のバスにわたって、及び、図示されている例においては、データバス84を介して、データを共有する。本開示のコンテキストにおいて、上記に対する変形形態が、いくつかの実施形態において、同様の機能を達成するために展開されることが、当業者には理解されるべきである。
[0063] 図示されている実施形態において、アプリケーションプロセッサ64は、センサ測定モジュール48A、フィードバックモジュール50A、及び通信モジュール52Aを含むアプリケーションソフトウェア46Aを作動させる。センサ測定モジュール48Aは、それぞれ画像キャプチャデバイス78及びGNSS受信機76を含む、モバイルデバイス60のセンサから、生理学的パラメータ及び/又はコンテキストデータ(例えば、位置データ)を受信する。フィードバックモジュール50Aは、UI72を介してユーザに視覚、聴覚、及び触覚フィードバックを提供する。通信モジュール52Aは、車両10内又は外部に位置する1つ又は複数の他のデバイスに未加工及び/又は導出パラメータを通信し、また、フィードバック機能を作動させるためのトリガ信号を受信する。例えば、1つの実施形態において、モバイルデバイス60は、パラメータを車両処理ユニット12(図1)に通信し、車両処理ユニット12から、フィードバックモジュール50Aがユーザインターフェース72と協働して、ユーザ(例えば、運転者又は乗客)にフィードバックを提供するトリガ信号を受信する。アプリケーションソフトウェア46Aのこれらのモジュール48A、50A、及び54Aは、図2に関連して説明した、アプリケーションソフトウェア46の同様の符号を付したモジュールと同様であり、したがって、簡潔にするために、これらのさらなる説明は省く。
[0064] ここで、図4を参照すると、車両乗員インタラクションシステムの機能の全部又は一部が実施される例示的な車両処理ユニット86の一実施形態が示されている。車両処理ユニット12(図1)は、図4に示す車両処理ユニット86の機能及び構造を含む。車両処理ユニット86の機能は、単独で、又は、いくつかの実施形態においては、1つ若しくは複数の追加のデバイスと組み合わせて実施される。1つの実施形態において、車両処理ユニット86は、コンピュータとして具現化されるが、いくつかの実施形態において、(例えば、車両乗員インタラクションシステムの機能が主に遠隔して実施される場合)アプリケーションサーバとして具現化される。本開示のコンテキストにおいて、例示的な車両処理ユニット86は1つの実施形態の例示に過ぎないこと、及び、いくつかの実施形態はより少ない又は追加の構成要素を含むことを、当業者は理解すべきである。車両処理ユニット86は、この例においてはコンピュータシステムとして図示されている。ここで、車両処理ユニット86の関連する特徴が分かりにくくなるのを避けるために、コンピュータシステムの特定のよく知られていた構成要素は省かれていることが理解されるべきである。1つの実施形態において、車両処理ユニット86は、すべてデータバス94(DBUS)のような1つ又は複数のデータバスに結合されている、プロセッサ(PROCESS)88のような1つ又は複数のプロセッサ(図示せず)、入出力(I/O)インターフェース90(I/O)、及びメモリ92(MEM)を含む、ハードウェア及びソフトウェア構成要素を備える。メモリ92(本明細書においては非一時的コンピュータ可読媒体としても参照される)は、揮発性メモリ要素(例えば、DRAM、及びSRAMなどのようなランダムアクセスメモリRAM)及び不揮発性メモリ要素(例えば、ROM、フラッシュ、ソリッドステート、EPROM、EEPROM、ハードドライブ、テープ、CDROMなど)のうちのいずれか1つ又は組み合わせを含む。メモリ92は、ネイティブオペレーティングシステム(OS)、1つ若しくは複数のネイティブアプリケーション、エミュレーションシステム、若しくは、様々なオペレーティングシステムのエミュレートされているアプリケーション、及び/又は、エミュレートされているハードウェアプラットフォーム、エミュレートされているオペレーティングシステムなどを記憶する。いくつかの実施形態において、1つ若しくは複数の別個の記憶デバイス(STOR DEV)が、データバス94に結合され、及び/又は、車両処理ユニット86が、下記にさらに説明するように、ネットワーク及び通信機能を介してネットワークストレージに結合される。
[0065] 図示されている実施形態において、車両処理ユニット86は、I/Oインターフェース90を介して、通信インターフェース(COM)96、ユーザインターフェース(UI)98、及び1つ又は複数のセンサ100に結合される。いくつかの実施形態において、通信インターフェース96、ユーザインターフェース98、及び1つ又は複数のセンサ100は、データバス94に直接的に結合される。通信インターフェース96は、ワイヤレス機能(例えば、Bluetooth(登録商標)、近接場通信、Wi−Fi(登録商標)など)のためのハードウェア及びソフトウェアを含み、ウェアラブルデバイス36(図2)、モバイルデバイス60(図3)を含む、車両10(図1)の内部に位置するデバイスとのワイヤレス通信、他のデバイス(例えば、カメラ34)の間でのワイヤレス通信、及び、任意選択的に、車両10の外部に位置する車両10のセンサ100とのワイヤレス通信を可能にする。いくつかの実施形態において、ワイヤレス通信は、車両処理ユニット86と、他の近傍の車両内のモバイルデバイス及び/又はウェアラブルデバイスとの間の通信インターフェース96を介して有効化される。1つの実施形態において、通信インターフェース96は、公衆又は私有データ構造(例えば、データベース)などにアクセスするために、クラウド18、26(図1)のコンピューティング機能にアクセスするためのセルラ通信を可能にするためのセルラモデム機能をさらに含む。例えば、ユーザプロファイルは、クラウド18、26の1つ又は複数のデバイス内に位置し、ユーザデータ(例えば、運転者及び/又は乗客の年齢、性別、睡眠履歴、活動履歴など)及び/又は公表統計値(例えば、交通統計(例えば、WAZE又はDOTウェブサイトを介する)、道路地形/トポロジ、道路の傷害/死亡統計、建造物情報、天候データ、地図作成/位置サービスなどを含む、道路情報)を含む。いくつかの実施形態において、天候データは、車両10内に位置する(又は、車両10の外部に位置する)センサを介して、又は、netatmoデバイスを使用することを含め、車両10内に見出される独立型デバイスを介して取得される。いくつかの実施形態において、それらの情報のうちの1つ又は複数は、一時的な期間にわたってローカルに(例えば、記憶デバイス及び/又はメモリ92内に)記憶される。
[0066] I/Oインターフェース90は、様々なネットワークにわたって、且つ、様々なプロトコル及び/又は規格に従って情報(例えば、データ)を搬送するために、信号(例えば、アナログ又はデジタルデータ)を入出力するための任意の数のインターフェースを含む。
[0067] ユーザインターフェース98は、グラフィカルユーザインターフェース(GUI)を有する若しくは有しない表示画面、ヘッドアップディスプレイ、キーパッド、車両制御のためのユーザコマンドの入力を可能にするための車両ボタン/スイッチ/ノブ若しくは他のメカニズム、マイクロフォン、マウスなど、並びに/又は、運転者及び/若しくは乗客に対するフィードバックのうちの1つ又は任意の組み合わせを含む。例えば、ユーザインターフェース98は、専用照明(例えば、警報光又は警戒光若しくはパターンのような内部状態光)、又は、乗客の心情若しくは睡眠状態の絵文字アイコン若しくは他の記号グラフィック若しくはさらにはテキスト警報を有するコンソールディスプレイを含む、視覚フィードバックを提供するための他のメカニズムを含む。いくつかの実施形態において、ユーザインターフェース98は、(例えば、乗客による挙動が運転者を悩ましている若しくは運転者にストレスを与えている場合、又は、運転者が眠くなってきている場合)運転者の心情について乗客に警報するか、又は、(例えば、運転者の運転スタイルが乗客に対するストレス若しくは吐き気を引き起こしている場合、又は、運転者が乗客の注意力を必要としているときに、乗客が眠りに落ちようとしている場合)運転者に警報するなどのために、車両10(図1)内の運転者及び/又は乗客に触覚フィードバックを提供するための1つ又は複数の振動モータ(例えば、運転者及び/又は乗客の座席、スティックシフト、ステアリングホイール、肘掛けなどの中)を含む。いくつかの実施形態において、ユーザインターフェース98は、前述した運転者及び/又は乗客の状態又は条件について警報する言葉のビープ音又は他の音声(例えば、トーン又は言葉の発話)を提供するなどのための、スピーカ及び/又はマイクロフォンを含む。状況が悪化するにつれて音声の周波数又は音量を増大するなど(例えば、乗客の乗り物酔いが悪化するにつれて、ユーザに対する警報の周波数及び/又は強度が増大される)、様々なフィードバックの強度を変更することもできる。いくつかの実施形態において、フィードバックを提示するために使用されるデバイスが、パラメータ強度に基づいて変更される。上述した様々なフィードバック技法及び/又はデバイスのうちの1つ又は任意の組み合わせを常に使用することができることに留意されたい。
[0068] センサ100は、カメラセンサ(例えば、カメラ34、図1)及び/又は位置特定センサ(例えば、GNSS受信機)を含む、内部及び外部センサ(例えば、内部センサ16及び外部センサ14、図1)を含む。センサ100は、慣性運動センサ(例えば、ジャイロスコープ、磁気計)、荷重センサ、位置センサ、速度センサ、及び/又は加速度センサを含む、車両運動と関連付けられる車両センサを含む。言い換えれば、センサ100は、発進及び停止の唐突さ、急速の加速、速度、急旋回、並びに/又は奇妙な動きを含む、運転者の運転スタイルと関連付けられる車両運動を測定する。
[0069] 図4に示す実施形態において、メモリ92は、オペレーティングシステム(OS)及びアプリケーションソフトウェア(ASW)46Bを備える。いくつかの実施形態において、アプリケーションソフトウェア46Bは、オペレーティングシステムなしで実施されることに留意されたい。1つの実施形態において、アプリケーションソフトウェア46Bは、センサ測定モジュール48B、フィードバックモジュール50B、通信モジュール52B、運転スタイル相関(DSC)モジュール102、眠気予測(SP)モジュール104、及び仮眠/警戒(NA)モジュール106を備える。センサ測定モジュール48Bは、センサ100(並びに/又は、車両10(図1)内及び/若しくは車両10の外部に位置する他のデバイス)から、通信モジュール52B、及び、モジュール102〜106において使用するためのフォーマットを介して、未加工又は導出パラメータを受信する。いくつかの実施形態において、そのような機能は、車両処理ユニット内の使用可能なフォーマットにおいてデータを提供するように構成されている他のデバイス内に位置し、したがって、いくつかの実施形態において、アプリケーションソフトウェア46Bから省かれる。より一般的には、いくつかの実施形態は、前述した機能を組み合わせ、又は、追加のモジュール及び/若しくはデバイスの間で機能をさらに分散させる。いくつかの実施形態において、データは、車両10の乗員のうちの1人に(例えば、ユーザインターフェース98を介して)フィードバックを提供するために、及び/又は、通信モジュール52Bと組み合わせて、1つ若しくは複数の他の車両の乗員にフィードバックを提供するために、フィードバックモジュール50Bに提供される。例えば、いくつかの実施形態において、未加工又は導出パラメータは、ウェアラブルデバイス36(図2)、モバイルデバイス60(図3)、又はクラウド18、26(図1)の1つ若しくは複数のデバイスを含む、車両10の乗員のうちの1人又は複数の健康状態及び/又はウェルビーイングを判定するために使用される他のデバイスに(例えば、通信インターフェース96と協働する通信モジュール52Bを介して)通信される。通信モジュール52Bの通信機能は、概して、1つ又は複数のAPIを使用することを通じてウェブブラウジング及び/又はクラウドサービスへのアクセスを可能にすることを含め、1つ又は複数のネットワーク(NW)(例えば、パーソナルエリアネットワーク、ローカルワイヤレスエリアネットワーク、広域ネットワーク、セルラネットワークなど)に接続されるデバイスの間での通信を可能にする。
[0070] 運転スタイル相関モジュール102は、運転者及び/又は乗客の健康状態及び/又はウェルビーイングパラメータを検知するセンサデータ(例えば、センサ100及び/又は他のデバイスからの)、車両運動情報に関与するセンサデータ(例えば、運転者の運転スタイルを反映する車両運動を測定するセンサ100からの)を受信し、運転スタイル/車両運動をパラメータに相関付け(例えば、時間的に近接し、コンテキストにおいて類似している刺激−反応関連付けに基づいて)、フィードバックをトリガする(例えば、ユーザインターフェース98のフィードバックメカニズムの起動を引き起こし、及び/又は、フィードバックを実施する他の非車両デバイスをトリガするための信号を通信する)ための実行可能コード(命令)を含む。引き続き図4を参照し、図5も参照すると、運転スタイル相関モジュール102の機能に対応する例示的な車両乗員インタラクション方法102Aが示されている。方法は、車両を操作している運転者の運転スタイルを示す車両運動情報を受信するステップ(108)と、車両内の運転者又は少なくとも1人の乗客のうちの1人又は複数から検知される1つ又は複数のパラメータを受信するステップ(110)であって、1つ又は複数のパラメータは、生理学的情報、感情的情報、又は生理学的情報と感情的情報との組み合わせを含む、1つ又は複数のパラメータを受信するステップ(110)と、1つ又は複数のパラメータを車両運動情報と相関付けるステップ(112)と、少なくとも1人の乗客の相関されている1つ若しくは複数のパラメータに基づいて運転者に対して、又は、運転者の相関されている1つ若しくは複数のパラメータに基づいて少なくとも1人の乗客に対してフィードバックをトリガするステップ(114)とを有する。生理学的情報及び感情的情報は、1つ又は複数の生理学的パラメータ(例えば、皮膚コンダクタンス、心拍数、心拍変動など)から判定されるストレス、不安感、吐き気、苛立ち、憤怒などを含んでもよい。1つの実施形態において、フィードバックは、目立たないように提示される。例えば、運転者は、モジュール102によって運転スタイルに相関付けられるものとしての不安感又は不安感の変化(例えば、増大)に対して警告され(例えば、視覚的に、聴覚的に、及び/又は触覚刺激を介して)、そのようなフィードバックは、乗客に対してトランスペアレントであるように提示され(例えば、ユーザのウェアラブルデバイス36に通信されるか、又は、ステアリングホイール内の振動モータの起動によって引き起こされる、触覚刺激又はますます急速になっていく若しくは増強されていく触覚刺激)、したがって、運転者の運転スタイルの変化に影響を及ぼす(例えば、減速、さほど急でない旋回など)。いくつかの実施形態において、運転スタイル相関モジュール102は、車両10(図1)の1人又は複数の乗客のウェアラブルデバイス36から1つ又は複数のパラメータを(例えば、通信モジュール52Bと協働する通信インターフェース150を介して)受信し、それに従って応答する。例えば、2人の乗客のうちの1人が乗り物酔いを受けており、運転スタイル相関モジュール102は、その吐き気を運転スタイルに相関付け、運転者に対するフィードバックをトリガする。モニタリングされている乗員の条件及び/又は状態の変化は、フィードバックの強度の変化及び/又はフィードバックの様式の変化(例えば、ブザーからビープ音への遷移、又はその逆)によって反映される。いくつかの実施形態において、フィードバックは、乗り物酔いの警告、並びに、継続的な急停止及び発進への相関のような、相関に関する命令を含む。いくつかの実施形態において、フィードバックは、相関されているフィードバックに替わる又はそれに加えての推奨を含む(例えば、「運転者へ−乗客Bが乗り物酔いになっています。乗り物酔いを起こさないように徐々に発進及び停止することを推奨します」)いくつかの実施形態において、パラメータは、他の車両の乗員から受信される。例えば、車両処理ユニット86のワイヤレス範囲内の別の運転者Aが、運転者Bが憤怒に駆られていることを検出し、その憤怒が運転者の運転スタイルに相関付けられた後、運転者Aに警告し、及び/又は、運転者Aに、他の車両の運転者Bのこの憤怒を低減する運転スタイルを推奨するフィードバックがトリガされる。いくつかの実施形態において、運転スタイル相関モジュール102は、その地理的位置内の(例えば、地理座標及び現在時刻の通信を介して)他の車両の乗員の健康状態及び/又はウェルビーイングを含む遠隔データベースにアクセスし、その情報に基づいて、同様の結果が起こる。
[0071] 眠気予測モジュール104は、運転者及び乗客の健康状態及び/又はウェルビーイングパラメータを検知し、乗員の眠気のレベルを予測し、他の乗員の眠気状態について、乗員の1人に警告するフィードバックをトリガする、(例えば、センサ100及び/又は車両10(図1)内の乗員の他のデバイスからの)センサデータを受信するための実行可能コード(命令)を含む。引き続き図4を参照し、図6も参照すると、眠気予測モジュール104の機能に対応する例示的な車両乗員インタラクション方法104Aが示されている。方法は、車両の運転者から検知される1つ又は複数の第1のパラメータ及び車両内の乗客から検知される1つ又は複数の第2のパラメータを受信するステップ(116)であって、1つ又は複数の第1のパラメータ及び1つ又は複数の第2のパラメータは各々、生理学的情報、挙動情報、又は生理学的情報と挙動情報との組み合わせを含む、受信するステップ(116)と、受信されている1つ又は複数第1のパラメータ及び1つ又は複数の第2のパラメータに基づいて、運転者及び乗客のそれぞれの眠気レベルを予測するステップ(118)と、運転者の予測眠気レベルに基づいて車両内の乗客に、又は、乗客の予測眠気レベルに基づいて運転者に、フィードバックをトリガするステップ(120)とを有する。例えば、眠気予測モジュール104によって実施される予測は、眠気を示すパラメータ(例えば、単独の、又は、心拍データ、睡眠履歴(例えば、ウェアラブルデバイス36から判定されるものとしての)、運転者履歴(例えば、運転者が運転していた経過時間)、日時などを含む、他のパラメータと組み合わさった、胸腔及び/又は腹部の視覚的に検出される膨張のような、検知される呼吸数に基づく)と、閾値眠気レベルとの比較に基づく。閾値眠気レベルは、ユーザの通常の睡眠挙動を含む睡眠習慣を提供する(例えば、ウェアラブルデバイス36(図2)によるモニタリング及び記録並びに/又はクラウド18、26(図1)への記録を介して)学習されている挙動に基づき、及び/又は、遠隔データベースからアクセスされるような同様の個人の特性(例えば、年齢、性別、職業、それらの層の睡眠統計、日時など)の人口に基づく統計の知識に基づく。例えば、運転者が乗客に覚醒したままでいることを所望する場合、眠気閾値を超える眠気予測レベルに基づいて、乗客が眠気に襲われており、又は、さらには眠りに落ちていることが判定され、これによって運転者へのフィードバックが促進され、フィードバックは、運転者が乗客を起こすことを許可する。同様に、眠気閾値を超える運転者の予測レベルに基づいて、運転者を覚醒したままにするのを助けるために乗客にフィードバックが提示される(例えば乗客にラジオをかけるか、又は、運転者ともっと話すように促す)。単一の閾値が記載されているが、いくつかの実施形態において、複数の閾値が使用され、1つの閾値対別の閾値の眠気レベルを超えることによって、異なるタイプのフィードバックがトリガされる(例えば、第1のフィードバックの穏やかな又は薄暗い光が、第2のフィードバックのにぎやかな又は高強度の光に置き換えられる)。
[0072] 仮眠/警戒(NA)モジュール106は、運転計画を受信し、運転中に乗客が仮眠を取るか又は少なくとも注意を緩和することを許可するための時間を推奨するための実行可能コード(命令)を含む。引き続き図4を参照し、図7も参照すると、仮眠/警戒モジュール106の機能に対応する例示的な車両乗員インタラクション方法106Aが示されている。方法は、運転者及び乗客を含む車両の経路及び運転時間を含む運転計画を受信するステップ(122)であって、経路及び運転時間は、現在の交通データ、予測交通データ、現在の天候データ、予測天候データ、現在の建造物又は道路障害物データ、将来の構造物又は道路障害物データなどのような経路及び/又は運転時間に関係するデータを含む、受信するステップ(122)と、乗客が、受信されている運転計画に基づいて規定の継続時間にわたって継続する仮眠又は注意緩和期間を開始するための時間を判定するステップ(124)と、上記時間に関する乗客への推奨をトリガするステップ(126)とを有する。仮眠/警戒モジュール106は、運転者及び/若しくは乗客の睡眠挙動、所与の経路に沿った移動安全性及び/若しくは複雑度、運転者の経過運転時間、日時(例えば、夜、朝、午後)、交通条件、建造物/車線閉鎖の存在、並びに/又は天候に関する情報のような、経路及び運転時間、乗客、及び/又は運転に関するデータのうちの1つ又は任意の組み合わせに基づいて時間を決定する。いくつかの実施形態において、仮眠/警戒モジュール106は、遠隔データベースからそのような情報のうちの1つ又は複数にアクセスする。いくつかの実施形態において、天候情報は、車両10(図1)内又は外部のセンサ及び/又はデバイスからアクセスされる。計画は、1つの実施形態において、少なくとも出発点と目的地とを含む計画経路、及び、2地点間の経路を含む。計画は、言葉の又はテキスト入力されるコマンドを介して車両論理にロードされ、又は、いくつかの実施形態においては地図アプリから転送される(又は、クラウド18、26からダウンロードされる)。乗客が最良に仮眠する(例えば、気分を入れ替えて、乗客が運転者と役割を切り替えるときを警告するために)ことができるときに、計画されている経路及び運転時間がスケジューリングにおいて考慮に入れられる。上記で示したように、スケジュールは、経路のより安全な範囲上で、仮眠を推奨し、又は少なくとも、乗客が注意を緩和することを可能にする。安全な範囲は、(例えば、遠隔データベースアクセスへのアクセスから判定されるものとして)事故発生率がより低く、且つ/又は、運転者にとって困難がより少ない範囲を含む。推奨における1つの目標は、安全な移動である。
[0073] 方法102A、104A、及び106Aは、1つ又は複数のプロセッサによって実行されるものとしての、それぞれ対応するモジュール102、104及び106に従って実施されることに留意されたい。1つの実施形態において、方法102A、104A、及び/又は106Aは、1つ又は複数のプロセッサによって実行される非一時的コンピュータ可読媒体上で実施される(例えば、同じデバイス内で又は複数のデバイス内で分散される)。同様に、いくつかの実施形態において、方法102A、104A、及び/又は106Aは、単一のデバイス(例えば、車両10(図1)内に位置するか又は車両10から遠隔して位置する)内で実施され、又は、車両10内及び/又は外部に位置する複数のデバイスによって実施される。
[0074] 再び図4に戻って参照すると、アプリケーションソフトウェア46Bの実行は、オペレーティングシステムの管理及び/又は制御の下で(又は、いくつかの実施形態においてはOSを用いることなく)プロセッサ88によって実施される。プロセッサ88は、カスタムメイド若しくは市販のプロセッサ、複数のプロセッサの間の中央処理装置(CPU)若しくは補助プロセッサ、半導体ベースのマイクロプロセッサ(マイクロチップの形態の)、マクロプロセッサ、1つ若しくは複数の特定用途向け集積回路(ASIC)、複数の適切に構成されているデジタル論理ゲート、及び/又は、車両処理ユニット86の全体的な動作を協調させる個別の要素を個々に及び様々な組み合わせにおいての両方で備える他のよく知られた電気的構成として具現化される。
[0075] 図4に示すように、車両処理ユニット86の特定の実施形態が少なくとも部分的にソフトウェア(ファームウェアを含む)によって実施されるとき、ソフトウェアは、様々なコンピュータ関連システム又は方法によって使用するための、又は、それと協働する様々な非一時的コンピュータ可読媒体上に記憶することができることが留意されるべきである。本明細書のコンテキストにおいて、コンピュータ可読媒体は、コンピュータ関連システム又は方法によって使用するための、又は、それと協働するコンピュータプログラム(例えば、実行可能コード又は命令)を含む又は記憶する電子、磁気、光、又は他の物理デバイス又は装置を含む。ソフトウェアは、コンピュータベースのシステム、プロセッサ含有システム、又は、命令実行システム、装置、若しくはデバイスから命令をフェッチし、命令を実行することができる他のシステムのような、命令実行システム、装置、又はデバイスによって使用するための、又は、それと協働する様々なコンピュータ可読媒体内に組み込まれる。
[0076] 車両処理ユニット86の特定の実施形態が少なくとも部分的にハードウェアによって実施されるとき、そのような機能は、すべて当該技術分野においてよく知られた以下の技術、すなわち、データ信号に対して論理機能を実施するための論理ゲートを有する個別論理回路、適切な組み合わせ論理ゲートを有する特定用途向け集積回路(ASIC)、プログラマブルゲートアレイ(PGA)、フィールドプログラマブルゲートアレイ(FPGA)、中継器、接触器などのいずれか又は組み合わせによって実施される。
[0077] 流れ図における任意のプロセス記述又はブロックは、プロセス内の特定の論理機能又はステップを実施するための1つ又は複数の実行可能命令を含むコードのモジュール、セグメント、又は部分を表しているものとして理解されるべきであり、本開示の技術分野の当業者には理解されるように、関与する機能に応じて、機能が、同時又は逆順を含めて、図示又は論述されている順序から外れて実行されてもよい、代替の実施態様が、実施形態の範囲内に含まれる。
[0078] 一実施形態において、命令を含むメモリと、1つ又は複数のプロセッサとを備え、1つ又は複数のプロセッサは、車両を操作している運転者の運転スタイルを示す車両運動情報を受信することと、車両内の運転者又は少なくとも1人の乗客のうちの1人又は複数から検知される1つ又は複数のパラメータを受信することであって、1つ又は複数のパラメータは、生理学的情報、感情的情報、又は生理学的情報と感情的情報との組み合わせを含む、1つ又は複数のパラメータを受信することと、1つ又は複数のパラメータを車両運動情報と相関付けることと、少なくとも1人の乗客の相関されている1つ若しくは複数のパラメータに基づいて運転者に対して、又は、運転者の相関されている1つ若しくは複数のパラメータに基づいて少なくとも1人の乗客に対してフィードバックをトリガすることとを行うための命令を実行する、第1の装置である。
[0079] 一実施形態において、パラメータが、心拍数、心拍変動、皮膚電位、加速度計データ、ストレスの指標、不安の指標、又は乗り物酔いの指標のうちの1つ又は任意の組み合わせに対応する、前記第1の装置である。
[0080] 一実施形態において、1つ又は複数のプロセッサが、触覚デバイス、視覚デバイス、音響デバイス、又は音響視覚デバイスのうちの1つ又は任意の組み合わせに信号を通信することによってフィードバックをトリガするための命令を実行し、フィードバックは、触覚フィードバック、視覚フィードバック、又は音響フィードバックのうちの1つ又は任意の組み合わせを含む、前記第1の装置である。
[0081] 一実施形態において、信号を通信することが、運転者に対するフィードバックについて乗客に警告することなく、又は、少なくとも1人の乗客に対するフィードバックに対して運転者に警告することなく信号を通信することを含む、前記第1の装置である。
[0082] 一実施形態において、運転者に対するフィードバックが、運転スタイルの変化に影響を及ぼし、少なくとも1人の乗客に対するフィードバックが、少なくとも1人の乗客の挙動の変化に影響を及ぼす、前記第1の装置である。
[0083] 一実施形態において、1つ又は複数のプロセッサがさらに車両内の1人又は複数の追加の乗客から検知される1つ又は複数のパラメータを受信するための命令を実行し、1つ又は複数のパラメータは、生理学的情報、感情的情報、又は、生理学的情報と感情的情報との組み合わせを含み、相関及びトリガは1人又は複数の追加の乗客に基づく、前記第1の装置である。
[0084] 一実施形態において、1つ又は複数のプロセッサがさらに、1つ又は複数の他の車両内の1人又は複数の乗員から検知される1つ又は複数のパラメータを受信するための命令を実行し、1つ又は複数のパラメータは、生理学的情報、感情的情報、又は、生理学的情報と感情的情報との組み合わせを含み、相関及びトリガは1人又は複数の乗員に基づく、前記第1の装置である。
[0085] 一実施形態において、1つ又は複数のプロセッサがさらに、トリガに対して時間的に後続し、近接する、車両を操作している運転者の調整されている運転スタイルを示す追加の車両運動情報を受信するための命令を実行する、前記第1の装置である。
[0086] 一実施形態において、1つ又は複数のプロセッサ及びメモリが車両の構造内、車両内のモバイルデバイス内、車両内のウェアラブルデバイス内、又は、車両の外部のデバイス内に位置する、前記第1の装置である。
[0087] 一実施形態において、前記第1の装置のいずれか1つの機能を実施する方法である。
[0088] 一実施形態において、1つ又は複数のプロセッサによって実行されると、前記第1の装置のいずれか1つの機能が実施されるようにする、非一時的コンピュータ可読媒体である。
[0089] 一実施形態において、命令を含むメモリと、1つ又は複数のプロセッサとを備え、1つ又は複数のプロセッサは、車両の運転者から検知される1つ又は複数の第1のパラメータ及び車両内の乗客から検知される1つ又は複数の第2のパラメータを受信することであって、1つ又は複数の第1のパラメータ及び1つ又は複数の第2のパラメータは各々、生理学的情報、挙動情報、又は生理学的情報と挙動情報との組み合わせを含む、受信することと、受信されている1つ又は複数第1のパラメータ及び1つ又は複数の第2のパラメータに基づいて、運転者及び乗客のそれぞれの眠気レベルを予測することと、運転者の予測眠気レベルに基づいて車両内の乗客に、又は、乗客の予測眠気レベルに基づいて運転者に、フィードバックをトリガすることとを行うための命令を実行する、第2の装置である。
[0090] 一実施形態において、1つ又は複数のプロセッサがさらに、それぞれの予測眠気レベルと、対応する眠気閾値とを比較するための命令を実行し、トリガは比較にさらに基づく、前記第2の装置である。
[0091] 一実施形態において、運転者に対するフィードバックが、乗客が眠気閾値を超えた又は眠りに落ちたことを、運転者に警告する、前記第2の装置である。
[0092] 一実施形態において、乗客に対するフィードバックが、運転者が眠気閾値を超えたことを、乗客に警告する、前記第2の装置である。
[0093] 一実施形態において、1つ又は複数のプロセッサが、触覚デバイス、視覚デバイス、音響デバイス、又は音響視覚デバイスのうちの1つ又は任意の組み合わせに信号を通信することによってそれぞれのフィードバックをトリガするための命令を実行し、フィードバックは、触覚フィードバック、視覚フィードバック、又は音響フィードバックのうちの1つ又は任意の組み合わせを含む、前記第2の装置である。
[0094] 一実施形態において、1つ又は複数のプロセッサ及びメモリが車両の構造内、車両内のモバイルデバイス内、車両内のウェアラブルデバイス内、又は、車両の外部に位置する、前記第2の装置である。
[0095] 一実施形態において、前記第2の装置のいずれか1つの機能を実施する方法である。
[0096] 一実施形態において、1つ又は複数のプロセッサによって実行されると、前記第2の装置のいずれか1つの機能が実施されるようにする、非一時的コンピュータ可読媒体である。
[0097] 一実施形態において、命令を含むメモリと、1つ又は複数のプロセッサとを備え、1つ又は複数のプロセッサは、運転者及び乗客を含む車両の経路及び運転時間を含む運転計画を受信することと、乗客が、受信されている運転計画に基づく規定の持続時間にわたって継続する仮眠又は注意緩和期間を開始する時間を判定することと、時間に関して乗客への推奨をトリガすることとを行うための命令を実行する、第3の装置である。
[0098] 一実施形態において、1つ又は複数のプロセッサがさらに、運転者の睡眠挙動に関する情報、乗客の睡眠挙動に関する情報、経路に沿った移動の安全性に関する情報、経路に沿った移動の複雑さに関する情報、運転者による経過運転時間、日時、交通、建造物、又は天候のうちの1つ又は任意の組み合わせに基づいて、上記時間を判定するための命令を実行する、前記第3の装置である。
[0099] 一実施形態において、上記情報のうちの少なくとも1つが車両の外部のソースから受信される、前記第3の装置である。
[00100] 一実施形態において、1つ又は複数のプロセッサがさらに、乗客が仮眠期間外で集中したままにするのを助けるためのフィードバックをトリガするための命令を実行し、1つ又は複数のプロセッサが、触覚デバイス、視覚デバイス、音響デバイス、又は音響視覚デバイスのうちの1つ又は任意の組み合わせに信号を通信することによってフィードバックをトリガするための命令を実行し、フィードバックは、触覚フィードバック、視覚フィードバック、又は音響フィードバックのうちの1つ又は任意の組み合わせを含む、前記第3の装置である。
[00101] 一実施形態において、1つ又は複数のプロセッサ及びメモリが車両内又は車両の外部に位置する、前記第3の装置である。
[00102] 一実施形態において、前記第3の装置のいずれか1つの機能を実施する方法である。
[00103] 一実施形態において、1つ又は複数のプロセッサによって実行されると、前記第3の装置のいずれか1つの機能が実施されるようにする、非一時的コンピュータ可読媒体である。
[00104] 上述した実施形態において、2つ以上の実施形態が組み合わされることに留意されたい。例えば、単一の装置が、第1の装置、第2の装置、及び/又は第3の装置の機能を組み合わせる。
[00105] 開示されている実施形態の様々な組み合わせが使用され、したがって、一実施形態又は1つの実施形態に対する参照は、その実施形態に由来する特徴を、他の実施形態に由来する特徴による仕様から除外するようには意図されていない。
[00106] 特許請求の範囲において、「備える」という単語は、他の要素又はステップを除外せず、単数形は複数を除外しない。単一のプロセッサ又は他のユニットが、特許請求の範囲内で記載されているいくつかの項目の機能を満たすことができる。特定の方策が相互に異なる従属請求項に記載されているというだけのことは、これらの方策の組み合わせを好都合に使用することができないということを示すものではない。コンピュータプログラムは、他のハードウェアとともに又はその一部として供給される光媒体又は固体状態媒体のような、適切な媒体上に記憶/分散されるが、他の形態で分散されてもよい。特許請求の範囲内の任意の参照符号は、それらの範囲を限定されるようには解釈されないものとする。

Claims (20)

  1. 命令を含むメモリと、
    1つ又は複数のプロセッサと
    を備え、前記1つ又は複数のプロセッサは、
    車両を操作している運転者の運転スタイルを示す車両運動情報を受信することと、
    前記車両内の前記運転者又は少なくとも1人の乗客のうちの1人又は複数から検知される1つ又は複数のパラメータを受信することであって、前記1つ又は複数のパラメータは、生理学的情報、感情的情報、又は生理学的情報と感情的情報との組み合わせを含む、1つ又は複数のパラメータを受信することと、
    前記1つ又は複数のパラメータを前記車両運動情報と相関付けることと、
    前記少なくとも1人の乗客の相関されている前記1つ若しくは複数のパラメータに基づいて前記運転者に対して、又は、前記運転者の相関されている前記1つ若しくは複数のパラメータに基づいて前記少なくとも1人の乗客に対して、フィードバックをトリガすることと
    を行うように前記命令を実行する、装置。
  2. 前記1つ又は複数のパラメータは、心拍数、心拍変動、皮膚電位、加速度計データ、ストレスの指標、不安の指標、又は乗り物酔いの指標のうちの1つ又は任意の組み合わせに対応する、請求項1に記載の装置。
  3. 前記1つ又は複数のプロセッサが、触覚デバイス、視覚デバイス、音響デバイス、又は音響視覚デバイスのうちの1つ又は任意の組み合わせに信号を通信することによって前記フィードバックをトリガするように前記命令を実行し、前記フィードバックは、触覚フィードバック、視覚フィードバック、又は音響フィードバックのうちの1つ又は任意の組み合わせを含む、請求項1に記載の装置。
  4. 前記信号を通信することが、前記運転者に対する前記フィードバックについて前記乗客に警告することなく、又は、前記少なくとも1人の乗客に対する前記フィードバックに対して前記運転者に警告することなく前記信号を通信することを含む、請求項3に記載の装置。
  5. 前記運転者に対する前記フィードバックが、前記運転スタイルの変化に影響を及ぼし、前記少なくとも1人の乗客に対する前記フィードバックが、前記少なくとも1人の乗客の挙動の変化に影響を及ぼす、請求項3に記載の装置。
  6. 前記1つ又は複数のプロセッサがさらに、
    前記車両内の1人又は複数の追加の乗客から検知される1つ又は複数のパラメータを受信するように前記命令を実行し、前記1つ又は複数のパラメータは、生理学的情報、感情的情報、又は、生理学的情報と感情的情報との組み合わせを含み、前記相関及び前記トリガは前記1人又は複数の追加の乗客に基づく、請求項1に記載の装置。
  7. 前記1つ又は複数のプロセッサがさらに、
    1つ又は複数の他の車両内の1人又は複数の乗員から検知される1つ又は複数のパラメータを受信するように前記命令を実行し、前記1つ又は複数のパラメータは、生理学的情報、感情的情報、又は、生理学的情報と感情的情報との組み合わせを含み、前記相関及び前記トリガは前記1人又は複数の乗員に基づく、請求項1に記載の装置。
  8. 前記1つ又は複数のプロセッサがさらに、
    前記トリガに時間的に近接して後続する、前記車両を操作している前記運転者の調整されている運転スタイルを示す追加の車両運動情報を受信するように前記命令を実行する、請求項1に記載の装置。
  9. 前記1つ又は複数のプロセッサ及び前記メモリが前記車両の構造内、前記車両内のモバイルデバイス内、前記車両内のウェアラブルデバイス内、又は、前記車両の外部のデバイス内に位置する、請求項1に記載の装置。
  10. 命令を含むメモリと、
    1つ又は複数のプロセッサと
    を備え、前記1つ又は複数のプロセッサは、
    車両の運転者から検知される1つ又は複数の第1のパラメータ及び前記車両内の乗客から検知される1つ又は複数の第2のパラメータを受信することであって、前記1つ又は複数の第1のパラメータ及び前記1つ又は複数の第2のパラメータは各々、生理学的情報、挙動情報、又は生理学的情報と挙動情報との組み合わせを含む、受信することと、
    受信されている前記1つ又は複数の第1のパラメータ及び前記1つ又は複数の第2のパラメータに基づいて、前記運転者及び前記乗客のそれぞれの眠気レベルを予測することと、
    前記運転者の予測されている前記眠気レベルに基づいて前記車両内の前記乗客に、又は、前記乗客の予測されている前記眠気レベルに基づいて前記運転者に、フィードバックをトリガすることと
    を行うように前記命令を実行する、装置。
  11. 前記1つ又は複数のプロセッサがさらに、
    前記それぞれの予測されている眠気レベルと、対応する眠気閾値とを比較するように前記命令を実行し、前記トリガは前記比較にさらに基づく、請求項10に記載の装置。
  12. 前記運転者に対する前記フィードバックは、前記乗客が眠気閾値を超えた又は眠りに落ちたことを、前記運転者に警告する、請求項10に記載の装置。
  13. 前記乗客に対する前記フィードバックは、前記運転者が眠気閾値を超えたことを、前記乗客に警告する、請求項10に記載の装置。
  14. 前記1つ又は複数のプロセッサが、触覚デバイス、視覚デバイス、音響デバイス、又は音響視覚デバイスのうちの1つ又は任意の組み合わせに信号を通信することによってそれぞれの前記フィードバックをトリガするように前記命令を実行し、前記フィードバックは、触覚フィードバック、視覚フィードバック、又は音響フィードバックのうちの1つ又は任意の組み合わせを含む、請求項10に記載の装置。
  15. 前記1つ又は複数のプロセッサ及び前記メモリが前記車両の構造内、前記車両内のモバイルデバイス内、前記車両内のウェアラブルデバイス内、又は、前記車両の外部に位置する、請求項10に記載の装置。
  16. 命令を含むメモリと、
    1つ又は複数のプロセッサと
    を備え、前記1つ又は複数のプロセッサは、
    運転者及び乗客を含む車両の経路及び運転時間を含む運転計画を受信することと、
    前記乗客が、受信されている前記運転計画に基づく規定の持続時間にわたって継続する仮眠又は注意緩和期間を開始する時間を判定することと、
    前記時間に関して前記乗客への推奨をトリガすることと
    を行うように前記命令を実行する、装置。
  17. 前記1つ又は複数のプロセッサがさらに、前記運転者の睡眠挙動に関する情報、前記乗客の睡眠挙動に関する情報、前記経路に沿った移動の安全性に関する情報、前記経路に沿った移動の複雑さに関する情報、前記運転者による経過運転時間、日時、交通、建造物、又は天候のうちの1つ又は任意の組み合わせに基づいて、前記時間を判定するための前記命令を実行する、請求項16に記載の装置。
  18. 前記情報のうちの少なくとも1つは、前記車両の外部のソースから受信される、請求項17に記載の装置。
  19. 前記1つ又は複数のプロセッサがさらに、前記乗客が前記仮眠期間外で集中したままにするのを助けるためのフィードバックをトリガするように前記命令を実行し、前記1つ又は複数のプロセッサが、触覚デバイス、視覚デバイス、音響デバイス、又は音響視覚デバイスのうちの1つ又は任意の組み合わせに信号を通信することによって前記フィードバックをトリガするように前記命令を実行し、前記フィードバックは、触覚フィードバック、視覚フィードバック、又は音響フィードバックのうちの1つ又は任意の組み合わせを含む、請求項16に記載の装置。
  20. 前記1つ又は複数のプロセッサ及び前記メモリが前記車両内又は前記車両の外部に位置する、請求項16に記載の装置。
JP2019542690A 2017-02-10 2018-02-09 運転者及び乗客の健康及び睡眠のインタラクション Pending JP2020512616A (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762457433P 2017-02-10 2017-02-10
US62/457,433 2017-02-10
US201762598711P 2017-12-14 2017-12-14
US62/598,711 2017-12-14
PCT/EP2018/053316 WO2018146266A1 (en) 2017-02-10 2018-02-09 Driver and passenger health and sleep interaction

Publications (1)

Publication Number Publication Date
JP2020512616A true JP2020512616A (ja) 2020-04-23

Family

ID=61521472

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019542690A Pending JP2020512616A (ja) 2017-02-10 2018-02-09 運転者及び乗客の健康及び睡眠のインタラクション

Country Status (5)

Country Link
US (1) US20190357834A1 (ja)
EP (1) EP3580734A1 (ja)
JP (1) JP2020512616A (ja)
CN (1) CN110268451A (ja)
WO (1) WO2018146266A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7456355B2 (ja) 2020-11-03 2024-03-27 株式会社デンソー 乗員検知システム

Families Citing this family (41)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10618522B2 (en) * 2018-03-27 2020-04-14 Hong Kong Productivity Council (HKPC) Drowsiness detection and intervention system and method
US11284834B1 (en) * 2018-05-07 2022-03-29 NightWare, Inc. Systems and methods for automated stress monitoring and intervention
CN110633593A (zh) * 2018-06-21 2019-12-31 北京嘀嘀无限科技发展有限公司 一种恶性事件预测方法及系统
US11180158B1 (en) * 2018-07-31 2021-11-23 United Services Automobile Association (Usaa) Routing or driving systems and methods based on sleep pattern information
JP7139894B2 (ja) * 2018-11-06 2022-09-21 トヨタ自動車株式会社 情報処理装置、情報処理システム、情報処理方法及びプログラム
US11490843B2 (en) * 2018-11-16 2022-11-08 Toyota Motor North America, Inc. Vehicle occupant health monitor system and method
EP3666182A1 (en) * 2018-12-11 2020-06-17 Koninklijke Philips N.V. Device, system and method for providing bio-feedback to a user
CN113302076A (zh) * 2018-12-28 2021-08-24 贾迪安光学技术有限公司 用于车辆碰撞后支持的系统、装置和方法
KR20200085969A (ko) * 2019-01-07 2020-07-16 현대자동차주식회사 차량 및 그 제어 방법
US11826147B2 (en) * 2019-02-04 2023-11-28 Nec Corporation Arousal level control apparatus, arousal level control method, and recording medium
US11501401B2 (en) * 2019-03-02 2022-11-15 ANI Technologies Private Limited Allocation of vehicles using fitness information
DE102019203996A1 (de) * 2019-03-25 2020-10-01 Zf Friedrichshafen Ag Vorrichtung und Verfahren zum Erkennen von Kinetose eines Menschen in einem Fahrzeug
DE102019204691A1 (de) * 2019-04-02 2020-10-08 Thyssenkrupp Ag Verfahren und Einrichtung zur Überwachung eines fahrbetriebsbedingten Gesundheitszustandes von Insassen eines insbesondere autonomen Fahrzeugs
JP7031998B2 (ja) * 2019-04-19 2022-03-08 矢崎総業株式会社 オーディオ制御システム及びオーディオ制御方法
US11325531B2 (en) * 2019-04-19 2022-05-10 GM Global Technology Operations LLC System for promoting passenger trust and mitigating motion sickness in a vehicle
TWI749323B (zh) * 2019-04-30 2021-12-11 先進光電科技股份有限公司 行動載具輔助系統
US10926773B2 (en) * 2019-05-10 2021-02-23 Denso International America, Inc. Systems and methods for mitigating motion sickness in a vehicle
US11105645B2 (en) * 2019-05-28 2021-08-31 Glazberg, Applebaum & co. Navigation in vehicles and in autonomous cars
US10780825B1 (en) * 2019-06-21 2020-09-22 Milton Nathan System and a method for alerting a driver of presence of a passenger in a vehicle
US11551644B1 (en) 2019-07-23 2023-01-10 BlueOwl, LLC Electronic ink display for smart ring
US11853030B2 (en) 2019-07-23 2023-12-26 BlueOwl, LLC Soft smart ring and method of manufacture
US11594128B2 (en) 2019-07-23 2023-02-28 BlueOwl, LLC Non-visual outputs for a smart ring
US11949673B1 (en) 2019-07-23 2024-04-02 BlueOwl, LLC Gesture authentication using a smart ring
US11537203B2 (en) 2019-07-23 2022-12-27 BlueOwl, LLC Projection system for smart ring visual output
US11637511B2 (en) 2019-07-23 2023-04-25 BlueOwl, LLC Harvesting energy for a smart ring via piezoelectric charging
US11479258B1 (en) 2019-07-23 2022-10-25 BlueOwl, LLC Smart ring system for monitoring UVB exposure levels and using machine learning technique to predict high risk driving behavior
US11909238B1 (en) 2019-07-23 2024-02-20 BlueOwl, LLC Environment-integrated smart ring charger
CN110712650B (zh) * 2019-10-14 2020-10-09 长安大学 一种电刺激防疲劳系统及控制方法
DE102019218299A1 (de) * 2019-11-26 2021-05-27 Zf Friedrichshafen Ag Detektieren von Kinetose
US11749109B2 (en) * 2019-12-19 2023-09-05 Etalyc Inc. Adaptive traffic management system
US11345298B2 (en) * 2019-12-26 2022-05-31 Panasonic Intellectual Property Management Co., Ltd. Driver monitoring device and driver monitoring method
DE102020201442A1 (de) * 2020-02-06 2021-08-12 Zf Friedrichshafen Ag Verfahren zum Feststellen von Kinetose
US11554781B2 (en) * 2020-03-23 2023-01-17 Aptiv Technologies Limited Driver alertness monitoring including a predictive sleep risk factor
CN111524607A (zh) * 2020-03-26 2020-08-11 北京三快在线科技有限公司 配送员的信息处理方法、获取方法、展示方法及系统
EP3895949B1 (en) * 2020-04-17 2023-08-16 Toyota Jidosha Kabushiki Kaisha Method and device for evaluating user discomfort
US11820402B2 (en) 2020-07-02 2023-11-21 Qualcomm Incorporated Motion sickness detection system for autonomous vehicles
CN112937438B (zh) * 2021-02-08 2022-08-30 浙江大学 一种乘员运动预期提示系统
CN113197573B (zh) * 2021-05-19 2022-06-17 哈尔滨工业大学 基于表情识别及脑电融合的观影印象检测方法
USD985619S1 (en) 2021-08-23 2023-05-09 Waymo Llc Display screen or portion thereof with graphical user interface
CN115973174A (zh) * 2021-09-26 2023-04-18 梅赛德斯-奔驰集团股份公司 用于车辆的车厢智能健康管理的方法和设备
TWI819885B (zh) * 2022-11-07 2023-10-21 鴻華先進科技股份有限公司 動暈症誘發提示方法

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
MXPA06002836A (es) 2000-06-16 2006-06-14 Bodymedia Inc Sistema para vigilar y administrar el peso corporal y otras condiciones fisiologicas, que incluyen la planeacion, intervencion y capacidad de reporte iterativa y personalizada.
FR2903349A1 (fr) * 2006-07-05 2008-01-11 Renault Sas Dispositif de securite prenant en compte l'etat du conducteur
US9149236B2 (en) 2013-02-04 2015-10-06 Intel Corporation Assessment and management of emotional state of a vehicle operator
EP4123657A1 (en) 2013-12-04 2023-01-25 Apple Inc. Presentation of physiological data
EP2942012A1 (en) * 2014-05-08 2015-11-11 Continental Automotive GmbH Driver assistance system
CN106156663A (zh) * 2015-04-14 2016-11-23 小米科技有限责任公司 一种终端环境检测方法及装置
US9821657B2 (en) * 2015-04-22 2017-11-21 Motorola Mobility Llc Drowsy driver detection
US9500489B1 (en) * 2016-03-03 2016-11-22 Mitac International Corp. Method of adjusting a navigation route based on detected passenger sleep data and related system
CN106211056A (zh) * 2016-06-24 2016-12-07 乐视控股(北京)有限公司 一种行程信息的共享方法和装置
CN106023550A (zh) * 2016-07-19 2016-10-12 姚前 一种报警方法、装置和系统
CN106114454A (zh) * 2016-08-11 2016-11-16 陈世庆 一种车辆报警系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7456355B2 (ja) 2020-11-03 2024-03-27 株式会社デンソー 乗員検知システム

Also Published As

Publication number Publication date
CN110268451A (zh) 2019-09-20
EP3580734A1 (en) 2019-12-18
US20190357834A1 (en) 2019-11-28
WO2018146266A1 (en) 2018-08-16

Similar Documents

Publication Publication Date Title
JP2020512616A (ja) 運転者及び乗客の健康及び睡眠のインタラクション
KR102568511B1 (ko) 차량의 운전 동안 저혈당 이벤트의 개시의 경보 시스템
US10696249B2 (en) Automatic car setting adjustments by identifying driver with health watch wearable or in-car sensors
US10950112B2 (en) Wrist fall detector based on arm direction
US11019005B2 (en) Proximity triggered sampling
US10493914B2 (en) System and method for vehicle collision mitigation with vulnerable road user context sensing
US10470971B2 (en) Garment with remote controlled vibration array
CN105015551B (zh) 驾驶员状态监测系统、用于控制该系统的方法及车辆
US9905108B2 (en) Systems, methods, and apparatus for monitoring alertness of an individual utilizing a wearable device and providing notification
US20200078260A1 (en) Garment with remote controlled vibration array
CN106448259B (zh) 一种车辆预警的方法、装置及系统
US20180375807A1 (en) Virtual assistant system enhancement
JP2018187365A (ja) 車両用呼吸監視システム、車両用呼吸監視方法及び車両用呼吸監視装置
US20200193858A1 (en) Unobtrusive motivation estimation
US10610146B1 (en) Utilizing wearable devices in an internet of things environment
WO2019219414A1 (en) Adapting silence periods for digital messaging
US20180277013A1 (en) Messaging system
US11355226B2 (en) Ambulatory path geometric evaluation
US20190121803A1 (en) Scoring of micromodules in a health program feed
US20190325777A1 (en) Consequence recording and playback in digital programs
US20190103189A1 (en) Augmenting ehealth interventions with learning and adaptation capabilities
WO2021203930A1 (zh) 一种心律检测控制方法及终端
CN117854098A (zh) 健康监测方法、装置和电子设备
JP2017033042A (ja) 利用者状態監視システム、および利用者状態監視方法