JP6087088B2 - 乗り物の操作者の遂行見積もりを向上させるためのシステムおよび方法 - Google Patents

乗り物の操作者の遂行見積もりを向上させるためのシステムおよび方法 Download PDF

Info

Publication number
JP6087088B2
JP6087088B2 JP2012191997A JP2012191997A JP6087088B2 JP 6087088 B2 JP6087088 B2 JP 6087088B2 JP 2012191997 A JP2012191997 A JP 2012191997A JP 2012191997 A JP2012191997 A JP 2012191997A JP 6087088 B2 JP6087088 B2 JP 6087088B2
Authority
JP
Japan
Prior art keywords
module
operator
vehicle
state
estimate
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2012191997A
Other languages
English (en)
Other versions
JP2013054744A (ja
Inventor
レヴィン,ダニエル
ヴェステルヴァル,レナ
マルックラ,グスタフ
クロンベリ,ペータ
ヴィクトル,トレント
Original Assignee
ボルボ カー コーポレイション
ボルボ カー コーポレイション
ボルボ テクノロジー コーポレイション
ボルボ テクノロジー コーポレイション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ボルボ カー コーポレイション, ボルボ カー コーポレイション, ボルボ テクノロジー コーポレイション, ボルボ テクノロジー コーポレイション filed Critical ボルボ カー コーポレイション
Publication of JP2013054744A publication Critical patent/JP2013054744A/ja
Application granted granted Critical
Publication of JP6087088B2 publication Critical patent/JP6087088B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/163Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0872Driver physiology
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/10Accelerator pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/18Steering angle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • B60W2554/801Lateral distance
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W40/09Driving style or behaviour

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Psychiatry (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • Educational Technology (AREA)
  • Developmental Disabilities (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Hospice & Palliative Care (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Description

本発明は、乗り物の操作者の遂行見積もりを向上させるためのシステムに関し、より詳細に述べれば、それぞれが操作者の乗り物の操作の遂行状態、および生理学的状態および行動状態のうちの少なくとも1つの見積もりを行なう2つのモジュールを有するシステムに関する。
本発明はまた、乗り物の操作者の遂行見積もりを向上させるための対応する方法にも関係する。
交通事故は、しばしば、たとえば眠気、病気、注意散漫、酩酊等々によって引き起こされる運転者の障害に起因して発生する。運転者の障害によって引き起こされる事故を防止するためには、運転者に警告メッセージを提供して周囲の交通状況に対する運転者の注意を回復すること、または、決定的な状況においては、運転者に対して、休憩を取るかもしくは別の運転者と乗り物の運転を交替するように勧告することが極めて重要なこととなり得る。
運転者の挙動を予測し、運転者が現在の運転状況または乗り物の環境に気付いていない場合に警告メッセージを運転者に提供することを試みるシステムがいくつか知られている。しかしながら、運転者がそれを自分のこととして反応できる警告メッセージを提供することが極めて重要であると言える。言い換えると、運転者の障害の種々の原因に対してそれぞれ異なる警告メッセージを提供することが極めて重要なこととなり得る。たとえば、眠そうな運転者には、たとえば酩酊している運転者、または注意散漫な運転者のために意図されたメッセージではなく、眠気のために意図された警告メッセージが与えられる必要がある。実際には運転者が眠そうであるときに、たとえば注意散漫な運転者のために意図された警告メッセージは、運転者がそれを自分のこととせず、正しく、かつ望ましい形でそのメッセージに反応しないという結果をもたらす可能性がある。
特許文献1は、運転者の生理学的な挙動を監視するためのシステムについて述べている。このシステムは、たとえば運転者の目の動き、凝視方向、閉瞼の量、瞬きの動き、頭の動き等々を測定する。警告メッセージは、事故を引き起こす可能性のある複数の生理学的挙動のうちの1つをシステムが検出したときに、乗り物の運転者に対して提供される。
米国特許第6,974,414号明細書
しかしながら、このシステムをはじめ、ほかの周知のシステムは、運転者の障害の実際の原因の間を良好に区別すること、すなわち測定された障害の背後にある偶発的要因を明確に決定することができない。したがって、乗り物の運転者の遂行見積もりを向上させるためのシステムを提供することが望ましい。
本発明の態様によれば、上に示した事項を少なくとも部分的に乗り物の操作者の遂行見積もりを向上させるためのシステムによって満たすことができ、当該システムは、乗り物の操作の遂行状態の見積もりを行なうための第1の方法を実装する第1のモジュールと、操作者の生理学的状態および行動状態のうちの少なくとも1つの見積もりを行なうための第2の方法を実装する第2のモジュールと、第1および第2のモジュールのうちの1つと第1および第2のモジュールのうちの他方の1つの間において見積もりによる状態を共有するための手段と、を包含し、それにおいて第1および第2のモジュールのうちの1つの実装された見積もりの方法が、第1および第2のモジュールのうちの他方の1つの状態に基づいて調整され、それによって乗り物の操作の遂行状態および操作者の生理学的状態および/または行動状態のうちの少なくとも1つの見積もりを向上させる。
本発明は、モジュール間においてたとえば見積もりによる状態を共有することによって、それらのモジュールのうちの1つまたは両方によって実行される方法を、より良好にそれぞれの見積もりを行なうべく調整することができるという理解に基づいている。たとえば、第1のモジュールを、障害性の運転遂行が生じていることを検出するだけであるとすることができるが、これは、たとえば車線維持等を検出するための現在知られているシステムによって提供できる。障害性の運転遂行の実際の理由(1つまたは複数)および/または原因(1つまたは複数)は、第1のモジュールだけによっては良好に識別できないことがある。しかしながら、第2のモジュールから第1のモジュールへ、操作者の生理学的状態および/または行動状態の見積もりによる状態を分け与えることによって、第1のモジュールに、障害性の運転遂行の理由(1つまたは複数)および/または原因(1つまたは複数)の分類を決定できるような情報を与えることができる。注意する必要があるが、共有される見積もりによる状態もまた、モジュール間における少なくとも中間の見積もりによる状態を共有することを包含でき、言い換えると、モジュールのうちの1つが、必ずしも『完全/充分な状態見積もり』を共有せずに、むしろ、たとえば状態見積もり方法のうちの1つの機能ブロックの1つによって提供される中間の状態見積もりを共有することが許される。これにより、第1のモジュールに第2のモジュールから障害性運転遂行の原因の徴候が提供されたとき、第1の方法の見積もりを向上させるためにそれの調整を実行することができる。システムは、当然のことながら、順序を逆にして、すなわち第2のモジュールが操作者の生理学的状態および/または行動状態の見積もりを行ない、第1のモジュールからの共有される見積もりが、第2のモジュールに対して、第2のモジュールが生理学的状態および/または行動状態の見積もりについての実際の要因(1つまたは複数)を決定することができるような情報を提供するという形においても機能することができる。したがって、本発明によるシステムを用いれば、操作者の遂行見積もりの分類および決定を行なうことが可能となり得る。それに加えて、第1および第2の方法のうちの1つの見積もりを、第1および第2の方法のうちの他方の1つの見積もりに基づいて分類することは、障害性の運転遂行の原因(1つまたは複数)を見積もるための、先行技術のシステムと比べて向上するとみられる堅牢なシステムを提供することができる。したがって、第1の方法が特定の運転遂行の見積もりを行ない、第2の方法が、第1の方法の見積もりの分類が達成され得るように、第1のモジュールに対する入力としてそれの見積もりを提供することができる。これは、当然のことながら上で述べたとおり、順序を逆にすること、すなわち、第1の方法の見積もりが第2の方法の検出を分類するための入力として第2のモジュールに対して提供されることも可能である。
追加の例によれば、眠そうな運転遂行は分単位の遅いプロセスであり、注意散漫な運転は秒単位の速いプロセスである。第1の方法のアルゴリズムは、したがって、受け取った第2のモジュールからの見積もりに基づいて、分単位または秒単位で働くべく適合させることができる。これは、たとえば、第2のモジュールが注意散漫な運転を検出するときに都合のよいことがある。これにより、第1のモジュールのアルゴリズムは、秒単位で動作して、たとえば、上で述べたとおり分単位で作用する眠そうな運転挙動に関して典型的とし得る運転挙動をふるい落とすべく構成することができる。したがって、第2のモジュールがそれの見積もりを第1のモジュールに提供するとき、第1のモジュールの第1の方法は、それのアルゴリズムの時間範囲を調整することができる。
それに加えて、たとえば第2のモジュールから第1のモジュールへ状態の見積もりを提供するとき、第2のモジュールの見積もりが正しいことを確実にするために、第1のモジュールを、さらに、第2のモジュールによって見積もられた運転挙動を捜し求めるべく構成することができる。たとえば、第2のモジュールが眠そうな運転遂行を検出したとき、分単位で作用して眠そうな運転の徴候を見付けるべく第1のモジュールのアルゴリズムを構成することができる。
さらにまた、この種のシステムは、乗り物の操作者に対して警告メッセージを提供することが不可欠となり得る乗り物警告システムにおいても有益となることがある。したがって、特定の警告信号/メッセージが障害性の運転の見積もりによる原因(1つまたは複数)に関して適合され、その警告信号/メッセージを乗り物の操作者に提供することもできる。
以下における『遂行見積もり』という用語は、障害性の運転の原因(1つまたは複数)、すなわち乗り物の操作者の特定の挙動の原因(1つまたは複数)の見積もりとして解釈されるものとする。
また『第1のモジュール』および『第2のモジュール』という表現は、それぞれ乗り物の内部および/または外部からデータを獲得する内部および外部センサ/検出器からデータを受信するべく構成されるサブシステム(物理的なデバイス、プログラマブル機能ブロック等)を意味しているものと理解される必要がある。受信されたデータに基づいて、これらのモジュールは、それぞれ、乗り物の操作の遂行状態および操作者の生理学的状態および行動状態についての見積もり(1つまたは複数)を提供する。
以下においては、第1および第2のモジュールのうちの1つと第1および第2のモジュールのうちの他方の1つの間において見積もりによる状態の共有を実装するための3つの例示的な実施態様を説明する。
第1の例示的な共有実装においては、第1のモジュールの第1の方法が、外部センサ(1つまたは複数)/検出器(1つまたは複数)からの受信データに基づいて乗り物操作の遂行状態の見積もりを行なう。第2のモジュールの第2の方法は、内部センサ(1つまたは複数)/検出器(1つまたは複数)からの受信データに基づいて操作者の生理学的状態および行動状態のうちの少なくとも1つの見積もりを行なう。続いて第2のモジュールは、それの見積もりによる状態を第1のモジュールに対して提供し、言い換えると第2のモジュールは、それの見積もりを第1のモジュールに分け与える。第1のモジュールの第1の方法は、その後、受け取った第2の方法の見積もりに基づいて調整される。
第2の例示的な共有実装においては、第1の共有実装と比較して逆の『方向』で見積もりが共有される。したがって、第1および第2の方法が上で述べたとおりのそれぞれの見積もりを実行し、続いて第1のモジュールが第2のモジュールへ、それの見積もりによる状態を提供し、言い換えると第1のモジュールがそれの見積もりを第2のモジュールに分け与える。第2のモジュールの第2の方法は、その後、受け取った第1の方法の見積もりに基づいて調整される。
第3の例示的な共有実装においては、第1の方法がそれの見積もりによる状態を第2のモジュールに分け与え、第2の方法がそれの見積もりによる状態を第1のモジュールに分け与え、言い換えると共有が両『方向』において提供される。この場合においては、あらかじめ決定済みの数の共有サイクルにわたって第1および第2の方法の見積もりによる状態を調整することができる。たとえば第2の方法が、それの見積もりによる状態を受け取った第1の方法の見積もりに基づいて調整した場合に、第2の方法がそれの新しい見積もりによる状態を第1の方法に分け与え、第1の方法は、それの見積もりを調整することができる。続いて第1の方法が更新後の見積もりを第2の方法に再び提供するか、または見積もりが充分に信頼できるとシステムが判断した場合には、その遂行見積もりを、たとえば乗り物警告システムまたは乗り物の人間機械インターフェース(HMI)に対して出力することができる。
しかしながらここで注意する必要があるが、遂行見積もりは、必ずしも第1および第2のモジュールのうちの1つだけからの出力として与えられなければならないということはなく、見積もりは、両方のモジュールから乗り物の警告システムまたはHMIへの出力として与えられることもある。それに加えて、出力される見積もりを、見積もりが乗り物の警告システムまたはHMIに提供される前に信頼度の値と比較してそれぞれの見積もりの重み付けを行なうことによって2つのモジュールの組み合わせとすることもできる。
本発明の実施態様によれば、第1の方法を、乗り物の車線維持、乗り物の速度、乗り物の車間距離維持、および乗り物のステアリング挙動のうちの少なくとも1つを検出するべく構成することができる。これにより第1の方法は、乗り物の操作者が、操作者の障害によって生じることがある態様で乗り物を操作しているか否かを検出することができる。たとえば、乗り物が車線の一方の側から他方の側へドリフトしている場合、統制されていない加速/減速を行なっている場合、または先行する乗り物までの車間距離維持能力が低下していることが示される場合に乗り物の操作者の障害が生じていることがありがちとなり得る。しかしながら第1の方法を、さらに、不正確なステアリング、交通の変化に対する遅い反応時間、制動の直後に続くアクセル・ペダルの踏み込み、多様なステアリング・ホイール移動パターン等々といった乗り物の挙動を検出するべく構成することもできる。それに加えて、第1の方法は、たとえばカメラ(1つまたは複数)、レーダ、GPS、乗り物対乗り物通信、乗り物対インフラストラクチャ通信等々により、乗り物の操作遂行状態の検出のための情報を獲得することができる。
さらにまた、第2の方法を、操作者の凝視方向、操作者の頭の動き、操作者の身体の動き、および操作者のまぶたの挙動のうちの少なくとも1つを検出するべく構成することができる。したがって、第2の方法は、乗り物の操作者を、特に操作者の生理学的状態および/または行動状態を検出する。しかしながら注意する必要があるが、第2の方法は、操作者の複数のそのほかの生理学的状態または行動状態、たとえばラジオまたは環境コントロール・システムといった多様な乗り物システムとのインタラクション、ほかの搭乗者とのインタラクション、音声パターン、音声認識、トリガされた事象への応答/反応、種々の皮膚パラメータにおける変化、呼吸または雰囲気中のアルコール含量、瞳応答、心拍数等々を検出するべく構成することもできる。それに加えて、第2の方法は、たとえばカメラ(1つまたは複数)、オーディオ認識、ボタン操作、EKG等によって操作者の生理学的状態および/または行動状態を検出するための情報を獲得することができる。
本発明の実施態様によれば、第1のモジュールが、複数のあらかじめ定義済みの方法を包含することが許され、それにおいてはあらかじめ定義済みの方法のそれぞれが、操作者の特定の運転遂行状態を検出するべく構成される。複数のあらかじめ定義済みの方法のそれぞれは、これにより、操作者の特定の運転遂行状態を検出するべく微調整される。利点は、より精巧なシステムを構成できることであり、それにおいてはあらかじめ定義済みの方法のそれぞれに、操作者の特定の運転遂行状態を検出するべく特別に設計されたアルゴリズム(1つまたは複数)を提供できる。それに加えて、複数のあらかじめ定義済みの方法のうちの1つの選択は、第2のモジュールの見積もりに基づくことができる。これにより、第2のモジュールの見積もりを、複数のあらかじめ定義済みの方法のうちのいずれの1つが選択されるべきかについて第1のモジュールが決定可能となるように、第1のモジュールへの入力として与えることができる。第2および第3の例示的な共有実装は、上に詳細を述べたとおり、当然のことながら本発明のこの実施態様についても有効である。
たとえば、あらかじめ定義済みの方法に、上で述べたとおりの多様な時間範囲を有する、すなわち分単位または秒単位の車線維持アルゴリズム、または乗り物の多様な操作を検出するためのアルゴリズムを提供することができる。さらにまた、あらかじめ定義済みの方法に、ステアリング・ホイールの動きパターンまたは速度維持パターンを検出するためのアルゴリズムを提供することができる。さらにまた、あらかじめ定義済みの方法は、上で述べたアルゴリズムの組み合わせを使用してもよい。
さらにまた、第1のモジュールは、複数の運転遂行状態を受け取り、かつ第2のモジュールの見積もりに基づいて見積もりによる運転遂行の重み付けを行なうべく構成された重み付け手段を包含することができる。これにより、複数のあらかじめ定義済みの方法のそれぞれのためのアルゴリズムが並列して実行され、かつ重み付け手段が提供される。重み付け手段には、たとえば、第2のモジュールから受け取った見積もりに基づいて多様な重み付けパラメータを提供することができる。重み付けパラメータは、線形または、平方根計算、対数関数等といった非線形計算を使用することができる。第2のモジュールは、重み付け手段が操作者の運転遂行の現在の原因を見積もることが可能となるように第2の方法からの見積もりを第1のモジュールに提供する。言い換えると、重み付け手段は、複数の運転遂行状態および第2のモジュールからの見積もりに基づいて運転遂行状態を分類する。第2および第3の例示的な共有実装は、本発明のこの実施態様についても有効であるが、この場合は、重み付け手段と第2のモジュールの間においても共有を提供することができる。それに加えて、操作者の検出される運転遂行状態は、眠気/疲労、注意散漫、病気、酩酊、危険運転挙動、および粗悪な運転のうちの1つとすることができる。多様な操作者の遂行状態を分類する利点は、上で述べたとおり、運転者の障害の原因をより精密に検出できることである。これはたとえば、乗り物の操作者が自分のこととして適切に反応することが可能な警告信号/メッセージを乗り物の警告システムから乗り物の操作者に提供することが可能になるような情報を乗り物の警告システムに提供することができる。
本発明の別の態様によれば、乗り物の操作者の遂行見積もりを向上させるための方法が提供され、それにおいて乗り物は、乗り物の操作の遂行状態の見積もりを行なうための第1の方法を実装する第1のモジュールと、操作者の生理学的状態および行動状態のうちの少なくとも1つの見積もりを行なうための第2の方法を実装する第2のモジュールと、を有するシステムを包含し、それにおいてはこの方法が、乗り物の操作の遂行状態の見積もりのための第1のモジュールに対するセンサ・データを受信するステップと、操作者の生理学的状態および行動状態のうちの少なくとも1つの見積もりのための第2のモジュールに対するセンサ・データを受信するステップと、第1および第2のモジュールのうちの1つと第1および第2のモジュールのうちの他方の1つの間において見積もりによる状態を共有するステップと、第1のモジュールおよび第2のモジュールのうちの1つの実装された方法を、第1のモジュールおよび第2のモジュールのうちの他方の1つの見積もりに基づいて調整し、それによって乗り物の操作の遂行状態および操作者の生理学的状態および/または行動状態のうちの少なくとも1つの見積もりを向上させるステップと、を包含する。本発明のこの態様は、手前の態様に関係して上で述べたものと類似する利点を提供する。
本発明のさらに別の態様によれば、乗り物の操作者の遂行見積もりを向上させるためのコンピュータ・プログラム・プロダクトを具体化するコンピュータ可読媒体が提供され、それにおいて乗り物は、乗り物の操作の遂行状態の見積もりを行なうための第1の方法を実装する第1のモジュールと、操作者の生理学的状態および行動状態のうちの少なくとも1つの見積もりを行なうための第2の方法を実装する第2のモジュールと、を有するシステムを包含し、それにおいてはコンピュータ・プログラム・プロダクトが、プロセッサによって実行されたときに、乗り物の操作の遂行状態の見積もりのための第1のモジュールに対するセンサ・データを受信するべく構成されたコードと、操作者の生理学的状態および行動状態のうちの少なくとも1つの見積もりのための第2のモジュールに対するセンサ・データを受信するべく構成されたコードと、第1および第2のモジュールのうちの1つと第1および第2のモジュールのうちの他方の1つの間において見積もりによる状態を共有するべく構成されたコードと、第1のモジュールおよび第2のモジュールのうちの1つの実装された方法を、第1のモジュールおよび第2のモジュールのうちの他方の1つの見積もりに基づいて調整し、それによって乗り物の操作の遂行状態および操作者の生理学的状態および/または行動状態のうちの少なくとも1つの見積もりを向上させるべく構成されたコードと、を包含する。本発明のこの態様もまた、手前の本発明の態様に関係して上で述べたものと類似する利点を提供する。
本発明のこのほかの目的、特徴、および利点については、以下の詳細な開示、付随する特許請求の範囲の従属請求項をはじめ、図面から明らかになるであろう。
次に本発明のこれらの、およびそのほかの態様について、本発明の例示的な実施態様を示している以下に列挙した添付図面を参照してより詳細に説明する。
外部センサが装備された乗り物およびそれの前端における座標系を示した斜視図である。 内部センサが装備された乗り物の内部の斜視図である。 乗り物の操作者の顔の座標系を図示した図である。 第1および第2のモジュールおよびHMIを有する本発明によるシステムの実施態様を図示した図である。 図4に図示した実施態様による第1のモジュールの実施態様を図示した図である。 図4に図示した実施態様による第1のモジュールのさらに別の実施態様を図示した図である。 図4乃至6に図示したシステムを利用するための方法の実施態様を示したフローチャートである。
以下、本発明の例示的な実施態様が示されている添付図面を参照して本発明をより詳細に説明する。しかしながら、本発明は、多くの異なる形で具体化されることを許容し、ここに示されている実施態様に限定されると解釈されるべきでなく、むしろこれらの実施態様は、詳細および完全性のために提供されている。全体を通じて類似した要素の参照には類似した参照文字を用いる。
以下においては、乗り物の操作者の遂行見積もりを向上させるためのシステムを参照して本発明が説明されている。乗り物には、乗り物の操作者の情報を引き出すための内部センサ(1つまたは複数)、および乗り物の操作をはじめ、乗り物の周囲環境の情報を引き出すための外部センサ(1つまたは複数)が好ましく装備される。より良好な理解に資するために、ここで図1乃至3を参照して内部センサおよび外部センサを説明する。
図1は、例示的な乗り物を図示しており、ここではそれを自動車100とするが、それに本発明によるシステムを組み込むことができる。自動車100には、追い越し、乗り物の速度、乗り物のヨー・レート等々といった乗り物の操作をはじめ、乗り物の周囲環境、たとえば車線のマーク、道路のマーク、道路の湾曲、周囲の乗り物等々を検出するべく配される外部センサ104が提供される。外部センサ104は、たとえばカメラまたはレーダ・センサとすることができる。カメラが物体の高さおよび幅の決定時に高精度を提供する一方、レーダ・センサが物体までの距離の決定時に高精度を提供することから、好ましくは、カメラおよびレーダ・センサの組み合わせが使用されるとすることができる。これによって、周囲の物体のサイズ、位置、速度等を決定することが可能になる。自動車100の位置に関して言えば、ここではデカルト座標系として図示されている座標系102が自動車100の前端に置かれる。座標系102は、乗り物に追従するべく構成され、軸は、長さ方向(x軸)、横方向(y軸)、および垂直方向(z軸)をそれぞれ表わす。検出される物体は、自動車100の座標系102に関連して乗り物のシステムに、自動車100と相対的なその物体のサイズおよび位置をシステムが決定することが可能となるように提供される。システムに、異なるセンサ104から検出された物体が連続して提供されることから、周囲の交通環境の速度および加速度を決定することも可能になる。
図2は、乗り物の操作者202を含む自動車100の内部を図示しており、それにおいては、自動車100に、ここではカメラ・システム204として図示されている内部センサが装備される。カメラ・システム204は、乗り物の操作の間における乗り物の操作者202の挙動を決定するべく配される。さらにまた、カメラ・システム204は、操作者の顔のあらかじめ決定済みの数の位置に焦点を合わせるべく配することができる。これらの位置は、たとえば、目、まぶた、眉、鼻、口、頬等々とすることができる。カメラ・システム204は、その自動車100を通常操作する特定の操作者202のためにあらかじめ較正すること、または自動車100の運転席に操作者202が入る都度較正することができる。カメラ・システム204が操作者の顔の種々の位置を検出することから、顔の挙動の見積もりが可能になる。したがって、カメラ・システム204は、たとえば頭および目の方向、頭の姿勢、目のサッケード、頭‐目のサッケード、閉瞼、および閉瞼の速度等を検出することができる。またカメラ・システム204は、図3に図示されているが、操作者の顔304に関連して座標系302を使用することによって、操作者の頭が右または左に回転(ヨー)305しているか否か、上または下に回転(ピッチ)306しているか否か、あるいは右または左の肩に向かって傾斜(ロール)307しているか否かを検出することもできる。顔304の座標系302は、好ましくは極座標系とし、それの原点が操作者の目の間に位置決めされる。
さらにまた内部センサは、カメラ・システム204に代えて、またはそれに追加して別のタイプの操作者検出手段を含むこともできる。これはたとえば、操作者のEKGまたはEEGを検出するためのセンサ、ステアリング挙動を検出するためのステアリング・ホイール・センサ、一貫性のない自動車100の加速および/または制動を検出するためのアクセル・ペダルおよび/またはブレーキ・ペダルにおけるセンサ、たとえばインフォテインメント・システムの多様な機能のいずれかを操作者202が調整しているか否かといったことを検出する自動車100の多様なボタンにおけるセンサを含むことができる。さらに別の内部センサを、操作者202の酩酊を検出するための呼吸分析センサまたは瞳サイズ・センサとすることができる。
次に、本発明によるシステムの例示的な実施態様を図示した図4を参照する。システム400は、第1のモジュール402および第2のモジュール404を包含しており、それにおいてそれらのモジュールのうちの少なくとも1つが、図示された実施態様においては、たとえば人間機械インターフェース(HMI)406またはその類と接続される。図4の例示的な実施態様においては、第1のモジュール402がHMI406に接続され、第2のモジュール404は、破線で図示されているが、HMI406と接続することが可能である。第1のモジュール402は、図示されている実施態様においては、乗り物の操作の遂行状態、すなわち乗り物の操作者202の現在の運転遂行の見積もりを行なうべく構成されたシステムである。それに加えて第1のモジュール402は、乗り物の操作の遂行状態を検出するための運転遂行見積もりアルゴリズムを有する第1の方法408を包含している。乗り物の操作の遂行状態は、操作の間における自動車100の特定の挙動を意味するものと理解される必要があり、たとえばそれは、乗り物の車線維持、乗り物の速度、乗り物の車間距離維持、および乗り物のステアリング挙動である。しかしながらそれが、乗り物の操作者202の任意のほかのタイプの運転遂行にも適用できる本発明の範囲を限定することはない。さらにまた、第1の方法408が乗り物の操作の遂行状態の見積もりを行なうために、図1との関連から上で述べたとおり、外部センサ(1つまたは複数)104が、第1のモジュール402にセンサ・データを提供する。
さらにまた、第2のモジュール404は、図示されている実施態様においては、乗り物の操作者202の生理学的状態および行動状態(1つまたは複数)の見積もり、すなわち操作者202の生理学的状態および行動状態における何らかの変化の検出および見積もりを行なうべく構成されたシステムである。操作者の生理学的状態および行動状態(1つまたは複数)の見積もりは、第2のモジュール404内に実装された第2の方法410によって提供され、図2および3との関連から上で述べた内部センサ(1つまたは複数)からセンサ・データを受信する。第2のモジュールによって見積もりが行なわれる生理学的状態および行動状態の例は、たとえば凝視方向の見積もり、顔の方向、乗り物システムとのインタラクション、閉瞼の持続時間、閉瞼の速度、開瞼の速度、乗り物のほかの搭乗者(1人または複数)との会話、EEGおよび/またはEKGの見積もり、トリガされた事象(1つまたは複数)に対する応答/反応時間等々を含むことができる。
また図4にも図示されているとおり、第1のモジュール402および第2のモジュール404は、それぞれの方法によって提供される見積もり(1つまたは複数)を共有するために互いに接続されている。この例示的な実施態様においては、3つの異なる共有実装412、414、416が存在することが図示されているが、それにおいて第1の共有実装412は、第2のモジュール404によって見積もりが行なわれた生理学的状態および/または行動状態(1つまたは複数)を第1のモジュール402に提供する。第2の共有実装414においては、第1のモジュール402によって見積もりが行なわれた乗り物の操作の遂行状態が第2のモジュール404と共有され、第3の共有実装416においては、第1のモジュール402および第2のモジュール404によって提供される見積もりが互いの間において共有され、言い換えると第3の共有実装416は、第1の共有実装412と第2の共有実装414の組み合わせである。第3の共有実装416は、第1のモジュール402および第2のモジュール404の見積もりが、第1のモジュール402および第2のモジュール404のうちの他方の1つの見積もりに基づいて連続的に更新され、調整される反復プロセスとすることもできる。次に例示的な共有実装について、より詳細に説明する。
第1の例示的な共有実装412においては、第1のモジュール402の第1の方法408が乗り物の操作の遂行状態の見積もりを行ない、第2のモジュール404の第2の方法410が、上で述べたとおりの操作者の生理学的状態および行動状態(1つまたは複数)のうちの少なくとも1つの見積もりを行なう。第2のモジュール404は、それの見積もりによる状態を第1のモジュール402に対して提供し、言い換えると第2のモジュール404は、それの見積もりを第1のモジュール402に分け与える。第1のモジュール402の第1の方法408は、その後、受け取った第2の方法410の見積もりに基づいて調整される。たとえば第1のモジュール402が、自動車100の現在の運転遂行の見積もりを、たとえば一貫性のない車線維持とした場合に、それが、その運転遂行の実際の理由(1つまたは複数)および/または原因(1つまたは複数)を単独で決定できないことがある。しかしながら、第2のモジュール404がそれの見積もりによる状態を第1のモジュール402に分け与えるときには、第1のモジュール402の第1の方法408を、障害性の運転遂行、すなわち一貫性のない車線維持の理由(1つまたは複数)および/または原因(1つまたは複数)の分類を決定できるように調整することができる。第1の共有実装の実施態様のさらに別の例によれば、第2のモジュール404が自動車100の乗り物の操作者202のゆっくりした閉瞼速度をより長い期間にわたってまぶたが閉じられていることとともに検出した場合には、第2のモジュール404は、第1のモジュール402に、乗り物の操作者202のまぶたの挙動の見積もりを提供することができる。第1のモジュール402が第2のモジュール404から見積もりを受け取ったとき、第1のモジュール402を、この例の場合であれば、乗り物の操作者202の特定のまぶたの挙動に起因することがある乗り物の操作の多様な遂行状態の見積もりを行なうべく適合させることができる。第1のモジュール402が乗り物の操作のその種の状態、たとえば分単位の一貫性のない車線維持を検出した場合には、眠気または疲労の見積もりおよび分類を行なうことが可能である。その後第1のモジュール402が、たとえば乗り物の警告システムまたはHMI406に、見積もりによる分類を提供し、乗り物の操作者202に適切な警告メッセージ/信号を提供することができる。例としては、乗り物の操作者202に対して休憩を取る必要がある旨の大きく明瞭なメッセージがある。
第2の例示的な共有実装414においては、第1の共有実装412と比較して『逆の方向』で見積もりが共有される。したがって、第1の方法408および第2の方法410が上で述べたとおりのそれぞれの見積もりを実行し、続いて第1のモジュール402が第2のモジュール404へ、第1の方法408の見積もりによる状態を提供し、言い換えると第1のモジュール402がそれの見積もりを第2のモジュール404に分け与える。第2のモジュール404の第2の方法410は、その後、受け取った第1の方法408の見積もりに基づいて調整される。これにより、第2の方法410は、第2の方法410が最初に見積もりを行なった特定の生理学的状態および/または行動状態についての実際の原因(1つまたは複数)/理由(1つまたは複数)を決定可能になることがある。またたとえば、第1のモジュール402が第2のモジュール404に、一貫性のないステアリングの挙動、一貫性のない加速および制動の見積もりを提供した場合に、第2のモジュール404は、たとえば乗り物の操作者202の酩酊の検出および見積もりを行なうべく調整することができる。第2のモジュール404がその種の挙動を検出した場合に、第2のモジュール404は、たとえば自動車100の警告システムまたはHMI406に見積もりによる分類を提供し、操作者202に適切な警告メッセージ/信号を提供することができる。
第3の例示的な共有実装416においては、第1のモジュール402がそれの見積もりによる状態を第2のモジュール404に分け与え、第2のモジュール404がそれの見積もりによる状態を第1のモジュール402に分け与え、言い換えると共有が両『方向』において提供される。この場合においては、あらかじめ決定済みの数の共有サイクルにわたって第1のモジュール402および第2のモジュール404の見積もりによる状態を調整することができる。たとえば、第1のモジュール402が一貫性のない車線維持の見積もりを行なった場合に、その種の一貫性のない車線維持の原因の見積もりを行なうべく第2のモジュール404を適合させることができる。第2のモジュール404は、続いて、たとえば自動車100のインフォテインメント・システムに向かって指向された操作者の凝視を伴ったインフォテインメント・システムのボタン押しの検出および見積もりを行なう。第2のモジュール404は、その後、確立した見積もりを第1のモジュール402に提供することができる。その後、第1の方法408を、たとえば事故が発生する尤度を決定するために、たとえば自動車100の周囲の物体の見積もりを行なうべく適合させることができる。周囲にある物体が近づいてくる場合には、第1のモジュール402が、その後に続いて、近づいてくる物体に操作者202の凝視が向けられているか否かについての決定および見積もりを第2のモジュール404が行なうことができるように、それの見積もりを第2のモジュール404に提供することができる。第1のモジュール402および/または第2のモジュール404は、その後、状況の逼迫度に応じて、たとえば自動車100の警告システムまたはHMI406に対して、適切な警告メッセージ/信号が乗り物の操作者202に提供されるように、操作者202の遂行見積もりの分類を提供することができる。
ここで注意する必要があるが、モジュール402、404のそれぞれの見積もりは、多様な時間間隔で更新することができる。たとえば、湾曲した道路を高速で走行している自動車100は、直線道路を低速で走行している自動車100より頻繁に更新すること、すなわちモジュール402、404が乗り物の操作および生理学的状態ならびに行動状態の見積もりをより頻繁に提供することができる。
図5および6は、本発明による第1のモジュール402’、402”についての2つの異なる実施態様を図示しており、次にこれについて説明する。ここでは、図4に関連して上で説明した例示的な共有実装412、414、416が、図5および6の実施態様についても等しく適用可能であり、したがって、説明が必要となる相違が存在しない限りにおいては追加の説明を行なっていないことに注意する必要がある。
図5によれば、第1のモジュール402’が、複数のあらかじめ定義済みの方法502、504、506を包含しており、そのそれぞれは、操作者202の特定の運転遂行(1つまたは複数)を検出するためのアルゴリズム(1つまたは複数)を伴って構成されている。図5の実施態様においては、3つのあらかじめ定義済みの方法502、504、506が図示されているが、当然のことながら本発明は、望ましい場合にはより多くの、またはより少ないあらかじめ定義済みの方法を伴って等しく適用することが可能である。あらかじめ定義済みの方法502、504、506のそれぞれは、眠そうな運転、注意散漫な運転、酩酊した運転、危険運転、粗悪な運転等々といった操作者202の特定の運転遂行を検出するべく構成される。たとえば、第1の例示的な共有実装412がシステム400によって提供される場合においては、第1のモジュール402’が、上で述べたとおり第2のモジュール404によって提供される見積もりを受け取る。第2のモジュール404の特定の見積もりに応じて、あらかじめ定義済みの方法のうちの1つ、ここでは502が、第1のモジュール402’が乗り物の操作の遂行状態の見積もりにそのあらかじめ定義済みの方法502のアルゴリズム(1つまたは複数)を利用するように選択される。選択されたあらかじめ定義済みの方法502が、図5においては眠そうな運転を検出するための方法として図示されているが、同様に、乗り物の操作者202のほかの遂行状態の検出に適した任意のそのほかの方法とすることもできる。
次に図6を参照し、本発明による第1のモジュール402”のさらに別の実施態様を、上で述べたとおりの第1の例示的な共有実装412に関して説明する。図6の実施態様もまた、図5を参照して上で述べたとおり、複数のあらかじめ定義済みの方法502、504、506を包含している。さらにまた図6の実施態様においては、第1のモジュール402’が重み付けデバイス508も包含しており、それが、複数のあらかじめ定義済みの方法502、504、506のためのアルゴリズムを受け取るべく構成されている。これにより、複数のあらかじめ定義済みの方法502、504、506が並列に動作し、重み付けデバイス508は、見積もりによる乗り物の操作者202の運転遂行の重み付けを、受け取った第2のモジュール404による見積もりに基づいて行なう。たとえば、第2のモジュール404が、操作者のまぶたの挙動について、たとえばゆっくりした速度の閉瞼/開瞼であるとの見積もりを行なっている場合には、重み付けデバイス508が、たとえば第1のモジュール402”は主として(たとえば70乃至80%の割合で)眠そうな運転遂行を検出する必要があるが、同時に酩酊した運転遂行も(たとえば20乃至30%の割合で)検出する必要があるという重み付けを行なうことができる。
図5および6に図示した実施態様は、第1の例示的な共有実装412に関して述べられているが、それらは、同様に第2の例示的な共有実装414および第3の例示的な共有実装416を使用しても等しく適用可能であることに注意する必要がある。図6の実施態様によれば、上で述べたとおり、第1のモジュール402”の重み付けデバイス508と第2のモジュール404の間をはじめ、両方のモジュール402”と404の間に共有を提供することができる。
特許請求の範囲において、用語『包含』は、そのほかの要素またはステップを排除せず、また複数であると明示していないことは、複数であることを排除しない。単一のコンピュータまたはそのほかのユニットが、特許請求の範囲の中に列挙されているいくつかの項目の機能を満たすことはあり得る。相互に異なる従属請求項の中で特定の手段が列挙されているという単なる事実は、それらの手段の組み合わせが都合よく使用できないことを示していない。
主として本発明は、いくつかの実施態様を参照して以上のとおり説明されてきた。しかしながら当業者によって容易に認識されるとおり、付随する特許請求の範囲によって定義されるとおりの本発明の範囲内において、上で述べた開示以外の実施態様についても等しく可能性を有する。たとえば、本発明は、上で説明した自動車のほか、トラック、バス、ダンプカー、ホイール・ローダ、およびそのほかのタイプの乗り物にも適用可能である。また本発明は、乗り物の環境を検出するためのカメラおよび/またはレーダ・センサの使用に限定されることはなく、ほかの周知の適切なセンサも当然のことながら有効である。2つより多くのモジュールを使用することも可能であり、たとえば密度、周囲の乗り物の速度、現在の天候条件等々といった多様な交通条件を検出するべく構成された第3のモジュールを上記のシステムに提供することもできる。
100 自動車、乗り物
102 座標系
104 外部センサ
202 操作者、乗り物の操作者
204 カメラ・システム、内部センサ
400 システム
402 第1のモジュール
402’ 第1のモジュール
402” 第1のモジュール
404 第2のモジュール
406 人間機械インターフェース(HMI)
408 第1の方法
410 第2の方法
412 第1の共有実装
414 第2の共有実装
416 第3の共有実装
502 あらかじめ定義済みの方法
504 あらかじめ定義済みの方法
506 あらかじめ定義済みの方法
508 重み付け手段、重み付けデバイス

Claims (8)

  1. 乗り物(100)の操作者(202)の遂行見積もりを向上させるためのシステム(400)であって、
    ‐乗り物の操作の遂行状態の見積もりを行なうための第1の方法(408)を実装する第1のモジュール(402,402’,402”)と、
    ‐前記操作者(202)の生理学的状態および行動状態のうちの少なくとも1つの見積もりを行なうための第2の方法(410)を実装する第2のモジュール(404)と、
    ‐前記第1のモジュール(402,402’,402”)および前記第2のモジュール(404)のうちの1つと前記第1のモジュール(402,402’,402”)および前記第2のモジュール(404)のうちの他方の1つの間において見積もりによる状態を共有するための手段と、
    を包含し、
    それにおいて前記第1のモジュール(402,402’,402”)の前記実装された見積もりの方法が、前記第2のモジュール(404)の状態に基づいて調整され、それによって前記乗り物の操作の遂行状態および前記操作者(202)の前記生理学的状態および/または行動状態のうちの少なくとも1つの前記見積もりを向上させ、
    前記第1のモジュール(402,402’,402”)は、複数のあらかじめ定義済みの方法(502,504,506)を包含し、それにおいて前記あらかじめ定義済みの方法(502,504,506)のそれぞれは、前記操作者(202)の特定の運転遂行状態を検出するべく構成され、
    前記第1のモジュール(402)は、さらに、前記複数の運転遂行状態を受け取り、かつ前記第2のモジュール(404)の前記見積もりに基づいて見積もりによる前記操作者(202)の運転遂行の重み付けを行なうべく構成された重み付け手段(508)を包含する、
    システム(400)。
  2. 前記第1の方法(408)は、乗り物の車線維持、乗り物の速度、乗り物の車間距離維持、および乗り物のステアリング挙動のうちの少なくとも1つを検出するべく構成される、請求項1に記載のシステム。
  3. 前記第2の方法(410)は、操作者の凝視方向、操作者の頭の動き、操作者のまぶたの挙動、および身体の動きのうちの少なくとも1つを検出するべく構成される、請求項1または2に記載のシステム。
  4. 前記操作者の前記検出される運転遂行状態は、眠気/疲労、注意散漫、酩酊、危険運転挙動、および粗悪な運転のうちの1つである、請求項に記載のシステム。
  5. 乗り物の操作者の遂行見積もりを向上させるための方法であって、前記乗り物が、
    ‐乗り物の操作の遂行状態の見積もりを行なうための第1の方法(408)を実装する第1のモジュール(402,402’,402”)と、
    ‐前記操作者(202)の生理学的状態および行動状態のうちの少なくとも1つの見積もりを行なうための第2の方法(410)を実装する第2のモジュール(404)と、を有するシステムを包含し、それにおいて前記方法が、
    ‐前記乗り物の操作の遂行状態の見積もりのための前記第1のモジュール(402,402’,402”)に対するセンサ・データを受信するステップ(S1)と、
    ‐前記操作者(202)の生理学的状態および行動状態のうちの少なくとも1つの見積もりのための前記第2のモジュール(404)に対するセンサ・データを受信するステップ(S2)と、
    ‐前記第1および前記第2のモジュールのうちの1つと前記第1および前記第2のモジュールのうちの他方の1つの間において見積もりによる状態を共有するステップ(S3)と、
    ‐前記第1のモジュール(402,402’,402”)の前記実装された方法を、前記第2のモジュール(404)の前記見積もりに基づいて調整し、それによって前記乗り物の操作の遂行状態および前記操作者(202)の前記生理学的状態および/または行動状態のうちの少なくとも1つの前記見積もりを向上させるステップ(S4)と、
    を包含し、
    前記第1のモジュール(402,402’,402”)は、複数のあらかじめ定義済みの方法(502,504,506)を包含し、それにおいて前記あらかじめ定義済みの方法(502,504,506)のそれぞれは、前記操作者(202)の特定の運転遂行状態を検出するべく構成され、
    前記第1のモジュールは、さらに、前記複数の運転遂行状態を受け取り、かつ前記第2のモジュール(404)の前記見積もりに基づいて見積もりによる前記操作者(202)の運転遂行の重み付けを行なうべく構成された重み付け手段(508)を包含する、
    方法。
  6. 前記第1の方法(408)は、乗り物の車線維持、乗り物の速度、乗り物の車間距離維持、および乗り物のステアリング挙動のうちの少なくとも1つを検出するべく構成される、請求項に記載の方法。
  7. 前記第2の方法(410)は、操作者の凝視方向、操作者の頭の動き、操作者のまぶたの挙動、および身体の動きのうちの少なくとも1つを検出するべく構成される、請求項またはに記載の方法。
  8. 乗り物の操作者の遂行見積もりを向上させるためのコンピュータ・プログラム・プロダクトを具体化するコンピュータ可読媒体であって、前記乗り物が、乗り物の操作の遂行状態の見積もりを行なうための第1の方法(408)を実装する第1のモジュール(402,402’,402”)と、前記操作者(202)の生理学的状態および行動状態のうちの少なくとも1つの見積もりを行なうための第2の方法(410)を実装する第2のモジュール(404)と、を有するシステムを包含し、前記コンピュータ・プログラム・プロダクトが、プロセッサによって実行されたときに、
    ‐前記乗り物の操作の遂行状態の見積もりのための前記第1のモジュール(402,402’,402”)に対するセンサ・データを受信(S1)するべく構成されたコードと、
    ‐前記操作者(202)の生理学的状態および行動状態のうちの少なくとも1つの見積もりのための前記第2のモジュール(404)に対するセンサ・データを受信(S2)するべく構成されたコードと、
    ‐前記第1および前記第2のモジュールのうちの1つと前記第1および前記第2のモジュールのうちの他方の1つの間において見積もりによる状態を共有(S3)するべく構成されたコードと、
    ‐前記第1のモジュール(402,402’,402”)の前記実装された方法を、前記第2のモジュール(404)の前記見積もりに基づいて調整(S4)し、それによって前記乗り物の操作の遂行状態および前記操作者(202)の前記生理学的状態および/または行動状態のうちの少なくとも1つの前記見積もりを向上させるべく構成されたコードと、
    を包含し、
    前記第1のモジュール(402,402’,402”)は、複数のあらかじめ定義済みの方法(502,504,506)を包含し、それにおいて前記あらかじめ定義済みの方法(502,504,506)のそれぞれは、前記操作者(202)の特定の運転遂行状態を検出するべく構成され、
    前記第1のモジュールは、さらに、前記複数の運転遂行状態を受け取り、かつ前記第2のモジュール(404)の前記見積もりに基づいて見積もりによる前記操作者(202)の運転遂行の重み付けを行なうべく構成された重み付け手段(508)を包含する、
    コンピュータ可読媒体。
JP2012191997A 2011-09-02 2012-08-31 乗り物の操作者の遂行見積もりを向上させるためのシステムおよび方法 Active JP6087088B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP11179798.1 2011-09-02
EP11179798.1A EP2564765B1 (en) 2011-09-02 2011-09-02 System and method for improving a performance estimation of an operator of a vehicle

Publications (2)

Publication Number Publication Date
JP2013054744A JP2013054744A (ja) 2013-03-21
JP6087088B2 true JP6087088B2 (ja) 2017-03-01

Family

ID=44785308

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012191997A Active JP6087088B2 (ja) 2011-09-02 2012-08-31 乗り物の操作者の遂行見積もりを向上させるためのシステムおよび方法

Country Status (4)

Country Link
US (1) US9101313B2 (ja)
EP (1) EP2564765B1 (ja)
JP (1) JP6087088B2 (ja)
CN (1) CN102975721B (ja)

Families Citing this family (63)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6219952B2 (ja) * 2012-08-14 2017-10-25 ボルボ ラストバグナー アーベー ドライバの運転状態を判断する方法
JP5940972B2 (ja) * 2012-12-21 2016-06-29 ダイムラー・アクチェンゲゼルシャフトDaimler AG 居眠り運転警報装置および居眠り運転警報方法
US8847771B2 (en) * 2013-01-25 2014-09-30 Toyota Motor Engineering & Manufacturing North America, Inc. Method and apparatus for early detection of dynamic attentive states for providing an inattentive warning
US8876535B2 (en) 2013-03-15 2014-11-04 State Farm Mutual Automobile Insurance Company Real-time driver observation and scoring for driver's education
KR101500361B1 (ko) * 2013-06-07 2015-03-10 현대자동차 주식회사 단기 운전성향 판정 장치 및 그 방법
DE102013210682A1 (de) * 2013-06-07 2014-12-11 Continental Teves Ag & Co. Ohg Verfahren und Fahrerassistenzsystem zur Beurteilung und/oder Aufrechterhaltung der Aufmerksamkeit eines Fahrzeugführers
GB2516698B (en) * 2013-07-30 2017-03-22 Jaguar Land Rover Ltd Vehicle distributed network providing feedback to a user
DE102013219888A1 (de) * 2013-10-01 2015-04-02 Scania Cv Ab Vorrichtung zur Darstellung einer Information über eine bevorstehende Übernahme einer manuellen Steuerung eines Fahrzeugs
EP2862741B1 (en) 2013-10-15 2017-06-28 Volvo Car Corporation Vehicle driver assist arrangement
US9354073B2 (en) * 2013-12-09 2016-05-31 Harman International Industries, Inc. Eye gaze enabled navigation system
KR101539302B1 (ko) * 2013-12-11 2015-07-30 현대자동차주식회사 차량 및 그 제어방법
US9734685B2 (en) 2014-03-07 2017-08-15 State Farm Mutual Automobile Insurance Company Vehicle operator emotion management system and method
US9135803B1 (en) * 2014-04-17 2015-09-15 State Farm Mutual Automobile Insurance Company Advanced vehicle operator intelligence system
US20150302718A1 (en) * 2014-04-22 2015-10-22 GM Global Technology Operations LLC Systems and methods for interpreting driver physiological data based on vehicle events
US9283847B2 (en) 2014-05-05 2016-03-15 State Farm Mutual Automobile Insurance Company System and method to monitor and alert vehicle operator of impairment
US10373259B1 (en) 2014-05-20 2019-08-06 State Farm Mutual Automobile Insurance Company Fully autonomous vehicle insurance pricing
US10599155B1 (en) 2014-05-20 2020-03-24 State Farm Mutual Automobile Insurance Company Autonomous vehicle operation feature monitoring and evaluation of effectiveness
US9792656B1 (en) 2014-05-20 2017-10-17 State Farm Mutual Automobile Insurance Company Fault determination with autonomous feature use monitoring
US10185999B1 (en) 2014-05-20 2019-01-22 State Farm Mutual Automobile Insurance Company Autonomous feature use monitoring and telematics
US9972054B1 (en) 2014-05-20 2018-05-15 State Farm Mutual Automobile Insurance Company Accident fault determination for autonomous vehicles
US11669090B2 (en) 2014-05-20 2023-06-06 State Farm Mutual Automobile Insurance Company Autonomous vehicle operation feature monitoring and evaluation of effectiveness
US10319039B1 (en) 2014-05-20 2019-06-11 State Farm Mutual Automobile Insurance Company Accident fault determination for autonomous vehicles
CN106471556B (zh) * 2014-06-23 2021-11-16 株式会社电装 驾驶员的驾驶不能状态检测装置
JP6372388B2 (ja) 2014-06-23 2018-08-15 株式会社デンソー ドライバの運転不能状態検出装置
DE112015002934B4 (de) 2014-06-23 2021-12-16 Denso Corporation Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers
US10540723B1 (en) 2014-07-21 2020-01-21 State Farm Mutual Automobile Insurance Company Methods of providing insurance savings based upon telematics and usage-based insurance
JP6486640B2 (ja) * 2014-10-09 2019-03-20 株式会社日立製作所 運転特性診断装置、運転特性診断システム、運転特性診断方法、情報出力装置、情報出力方法
DE102014220759B4 (de) 2014-10-14 2019-06-19 Audi Ag Überwachung eines Aufmerksamkeitsgrads eines Fahrers eines Fahrzeugs
US9946531B1 (en) 2014-11-13 2018-04-17 State Farm Mutual Automobile Insurance Company Autonomous vehicle software version assessment
US11347067B2 (en) * 2014-12-12 2022-05-31 Young Optics Inc. Display system
US20160356232A1 (en) * 2015-06-05 2016-12-08 Hyundai Motor Company System and method of controlling safety during key-off of vehicle
JP6692610B2 (ja) * 2015-06-09 2020-05-13 富士通株式会社 検出プログラム、検出方法および検出装置
US20160362111A1 (en) * 2015-06-12 2016-12-15 Jaguar Land Rover Limited Driver awareness sensing and indicator control
US9805601B1 (en) 2015-08-28 2017-10-31 State Farm Mutual Automobile Insurance Company Vehicular traffic alerts for avoidance of abnormal traffic conditions
KR101825787B1 (ko) * 2015-10-05 2018-02-07 주식회사 만도 운전자 졸음 경고 시스템 및 방법
DE102015016442A1 (de) * 2015-12-17 2017-06-22 Daimler Ag Verfahren zum Steuern wenigstens einer Komponente eines Kraftfahrzeugs
US11719545B2 (en) 2016-01-22 2023-08-08 Hyundai Motor Company Autonomous vehicle component damage and salvage assessment
US10324463B1 (en) 2016-01-22 2019-06-18 State Farm Mutual Automobile Insurance Company Autonomous vehicle operation adjustment based upon route
US9940834B1 (en) 2016-01-22 2018-04-10 State Farm Mutual Automobile Insurance Company Autonomous vehicle application
US11441916B1 (en) 2016-01-22 2022-09-13 State Farm Mutual Automobile Insurance Company Autonomous vehicle trip routing
US10395332B1 (en) 2016-01-22 2019-08-27 State Farm Mutual Automobile Insurance Company Coordinated autonomous vehicle automatic area scanning
US11242051B1 (en) 2016-01-22 2022-02-08 State Farm Mutual Automobile Insurance Company Autonomous vehicle action communications
US10134278B1 (en) 2016-01-22 2018-11-20 State Farm Mutual Automobile Insurance Company Autonomous vehicle application
US10308246B1 (en) 2016-01-22 2019-06-04 State Farm Mutual Automobile Insurance Company Autonomous vehicle signal control
JP2019535089A (ja) 2016-08-19 2019-12-05 マサチューセッツ インスティテュート オブ テクノロジー 視覚配分管理を提供するシステムおよび方法
JP7139331B2 (ja) 2016-08-19 2022-09-20 マサチューセッツ インスティテュート オブ テクノロジー 資源配分管理を改善するために注意力バッファを使用するシステムおよび方法
US10496890B2 (en) * 2016-10-28 2019-12-03 International Business Machines Corporation Vehicular collaboration for vehicular blind spot detection
WO2018099720A1 (en) * 2016-11-30 2018-06-07 Volvo Truck Corporation A method of preventing a driver to drive a vehicle while intoxicated
WO2018111061A1 (es) * 2016-12-15 2018-06-21 Kitazawa Molina Elvia Isabel Sistema con correlación de datos para detección de nivel de fatiga y calificación de calidad de conducción en operadores de automóviles y camiones
CN108297874B (zh) * 2017-04-18 2021-06-29 黄海虹 一种用于共享汽车的驾驶员身份授权系统
CN106965675B (zh) * 2017-04-26 2019-02-05 华迅金安(北京)科技有限公司 一种货车集群智能安全作业系统
MY192254A (en) * 2017-06-01 2022-08-11 Univ Kebangsaan Malaysia A system and a method to determine and control emotional state of a vehicle operator
JP6805092B2 (ja) * 2017-07-13 2020-12-23 クラリオン株式会社 警告出力装置、警告出力方法、及び警告出力システム
CN107640152B (zh) * 2017-08-08 2019-11-22 吉利汽车研究院(宁波)有限公司 一种车道保持辅助系统的可靠性控制装置及方法
CN109747656A (zh) * 2017-11-02 2019-05-14 罗曦明 人工智能车辆辅助驾驶方法、装置、设备及存储介质
JP2019095892A (ja) * 2017-11-20 2019-06-20 シャープ株式会社 車両用運転支援装置、および車両用運転支援プログラム
US10852728B2 (en) * 2017-12-27 2020-12-01 Intel Corporation Remote driver state consideration for autonomous vehicles
CN111079476B (zh) 2018-10-19 2024-03-26 上海商汤智能科技有限公司 驾驶状态分析方法和装置、驾驶员监控系统、车辆
US10825196B2 (en) * 2019-02-15 2020-11-03 Universal City Studios Llc Object orientation detection system
CN110406541B (zh) * 2019-06-12 2021-02-19 天津五八到家科技有限公司 驾驶数据处理方法、设备、系统及存储介质
CN112550298B (zh) * 2019-09-26 2022-10-25 上海汽车集团股份有限公司 驾驶行为评价方法、装置及存储介质
US20220180109A1 (en) * 2020-12-04 2022-06-09 Nauto, Inc. Devices and methods for monitoring drivers of vehicles
CN115841735A (zh) * 2022-09-05 2023-03-24 重庆交通大学 基于人、道路、环境动态耦合的安全驾驶辅助系统

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3235522B2 (ja) * 1997-07-22 2001-12-04 トヨタ自動車株式会社 走行レーン逸脱警報装置
US6580973B2 (en) * 2000-10-14 2003-06-17 Robert H. Leivian Method of response synthesis in a driver assistance system
JP3861600B2 (ja) * 2001-01-29 2006-12-20 日産自動車株式会社 脇見運転および居眠り運転警報装置
JP5019145B2 (ja) * 2001-09-28 2012-09-05 株式会社エクォス・リサーチ 運転者情報収集装置
JP4603264B2 (ja) * 2002-02-19 2010-12-22 ボルボ テクノロジー コーポレイション 運転者注意負荷の監視と管理とを行なうシステムおよび方法
EP2204118B1 (en) * 2002-10-15 2014-07-23 Volvo Technology Corporation Method for interpreting a drivers head and eye activity
CA2925145A1 (en) * 2003-07-07 2005-01-13 Insurance Services Office, Inc. Traffic information system
DE10343683A1 (de) * 2003-09-20 2005-04-21 Daimler Chrysler Ag Informationssystem für Kraftfahrzeuge
DE10355221A1 (de) * 2003-11-26 2005-06-23 Daimlerchrysler Ag Verfahren und Computerprogramm zum Erkennen von Unaufmerksamkeiten des Fahrers eines Fahrzeugs
ITBO20060089A1 (it) * 2006-02-10 2007-08-11 Ferrari Spa Metodo di controllo di un veicolo per adattare il comportamento dinamico del veicolo stesso allo stato psico-fisico del guidatore.
JP4274225B2 (ja) * 2006-10-13 2009-06-03 トヨタ自動車株式会社 車載警告装置
EP2082383B1 (en) * 2006-10-13 2012-06-13 Toyota Jidosha Kabushiki Kaisha On-board warning apparatus and warning method
GB0622715D0 (en) * 2006-11-15 2006-12-27 Ibm An apparatus for processing event data
US8161454B2 (en) * 2007-01-22 2012-04-17 Ford Motor Company Software architecture for developing in-vehicle software applications
JP4182131B2 (ja) * 2007-03-13 2008-11-19 トヨタ自動車株式会社 覚醒度判定装置及び覚醒度判定方法
DE102007046037B3 (de) * 2007-09-26 2009-04-16 Siemens Ag Vorrichtung zur Erhöhung der Sicherheit im Straßenverkehr
JP2009157607A (ja) * 2007-12-26 2009-07-16 Toyota Central R&D Labs Inc ドライバ状態推定装置及びプログラム
CN101980660B (zh) * 2008-09-19 2013-01-16 松下电器产业株式会社 注意力分散检测装置、及注意力分散检测方法
JP5184596B2 (ja) * 2010-09-03 2013-04-17 本田技研工業株式会社 脇見判定装置

Also Published As

Publication number Publication date
US20130073115A1 (en) 2013-03-21
CN102975721A (zh) 2013-03-20
EP2564765A1 (en) 2013-03-06
EP2564765B1 (en) 2017-12-13
JP2013054744A (ja) 2013-03-21
US9101313B2 (en) 2015-08-11
CN102975721B (zh) 2016-09-28

Similar Documents

Publication Publication Date Title
JP6087088B2 (ja) 乗り物の操作者の遂行見積もりを向上させるためのシステムおよび方法
US10421459B2 (en) Contextual-assessment vehicle systems
US11993277B2 (en) Inward/outward vehicle monitoring for remote reporting and in-cab warning enhancements
US8085139B2 (en) Biometric vehicular emergency management system
JP7352566B2 (ja) 情報処理装置、移動装置、および方法、並びにプログラム
Kaplan et al. Driver behavior analysis for safe driving: A survey
JP6219952B2 (ja) ドライバの運転状態を判断する方法
EP2564777B1 (en) Method for classification of eye closures
US20170369069A1 (en) Driving behavior analysis based on vehicle braking
CN109716411B (zh) 用以监测驾驶员的活动水平的方法和设备
CN115503728A (zh) 用于预测人类驾驶操纵并减少人类驾驶错误的驾驶员和环境监测
JP2016045714A (ja) 車載制御装置
US11587461B2 (en) Context-sensitive adjustment of off-road glance time
US20220111867A1 (en) Vehicle behavioral monitoring
JP2013054734A (ja) 物体の状態についての乗り物の操作者の期待を決定するための方法、システム、およびコンピュータ・プログラム・プロダクトを具体化するコンピュータ可読媒体
CN112292081A (zh) 用于自主车辆的乘员意识监视
KR20190134909A (ko) 주행상황 판단 정보 기반 운전자 상태 인식 장치 및 방법
CN117842085A (zh) 驾驶状态检测与预警方法、系统、电子设备及存储介质
CN113370990A (zh) 驾驶辅助方法和驾驶辅助装置
Kouchak et al. Non-intrusive distraction pattern detection using behavior triangulation method
Adarsh et al. Drowsiness Detection System in Real Time Based on Behavioral Characteristics of Driver using Machine Learning Approach
JP7192668B2 (ja) 覚醒度判定装置
WO2021262166A1 (en) Operator evaluation and vehicle control based on eyewear data
Adhikari et al. Driver Distraction Detection System Using Intelligent Approach Of Vision Based System.
Alomari Human-centric detection and mitigation approach for various levels of cell phone-based driver distractions

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150701

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20160317

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160414

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160426

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160725

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160823

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20161121

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170110

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170201

R150 Certificate of patent or registration of utility model

Ref document number: 6087088

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250