JP5248558B2 - 運転者注意負荷の監視と管理とを行なうシステムおよび方法 - Google Patents

運転者注意負荷の監視と管理とを行なうシステムおよび方法 Download PDF

Info

Publication number
JP5248558B2
JP5248558B2 JP2010178387A JP2010178387A JP5248558B2 JP 5248558 B2 JP5248558 B2 JP 5248558B2 JP 2010178387 A JP2010178387 A JP 2010178387A JP 2010178387 A JP2010178387 A JP 2010178387A JP 5248558 B2 JP5248558 B2 JP 5248558B2
Authority
JP
Japan
Prior art keywords
driver
driving
attention
feedback
caution
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2010178387A
Other languages
English (en)
Other versions
JP2011019921A (ja
Inventor
ヴィクター,トレント
Original Assignee
ボルボ テクノロジー コーポレイション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ボルボ テクノロジー コーポレイション filed Critical ボルボ テクノロジー コーポレイション
Publication of JP2011019921A publication Critical patent/JP2011019921A/ja
Application granted granted Critical
Publication of JP5248558B2 publication Critical patent/JP5248558B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1113Local tracking of patients, e.g. in a hospital or private home
    • A61B5/1114Tracking parts of the body
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/163Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W40/09Driving style or behaviour
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/01Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • A61B5/015By temperature mapping of body part
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1103Detecting eye twinkling
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/191Highlight information
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/33Illumination features
    • B60K2360/338Light strips
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60TVEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2201/00Particular use of vehicle brake systems; Special systems using also the brakes; Special software modules within the brake system controller
    • B60T2201/02Active or adaptive cruise control system; Distance control
    • B60T2201/022Collision avoidance systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60TVEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2201/00Particular use of vehicle brake systems; Special systems using also the brakes; Special software modules within the brake system controller
    • B60T2201/08Lane monitoring; Lane Keeping Systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60TVEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T2201/00Particular use of vehicle brake systems; Special systems using also the brakes; Special software modules within the brake system controller
    • B60T2201/08Lane monitoring; Lane Keeping Systems
    • B60T2201/086Lane monitoring; Lane Keeping Systems using driver related features
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • B60W2040/0827Inactivity or incapacity of driver due to sleepiness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/22Psychological state; Stress level or workload
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • Medical Informatics (AREA)
  • Veterinary Medicine (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Molecular Biology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Pathology (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Physiology (AREA)
  • Human Computer Interaction (AREA)
  • Hospice & Palliative Care (AREA)
  • Developmental Disabilities (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Educational Technology (AREA)
  • Psychology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Social Psychology (AREA)
  • Automation & Control Theory (AREA)
  • Psychiatry (AREA)
  • Emergency Management (AREA)
  • Business, Economics & Management (AREA)
  • Ophthalmology & Optometry (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Traffic Control Systems (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Description

本発明は、運転者の安全確保を容易にするシステムおよび方法に関し、特に眠気と注意散漫と同様の有害条件とが運転者の能力に及ぼす影響に対する対応策に関する。
全ての種類の自動車の運転者は、眠気と注意散漫とが自身の自動車制御能力に及ぼす影響に気づかないことがよくある。人間は、概して、特に運転者として、自身の作業遂行能力を適正に判断することができない。一般に、運転者は、自身の能力を実際より高く感じている。基本的に良好な運転技術を有する人物でも、自動車を運転するときに常に一貫して能力を発揮できるわけではない。さらにまた、走行中に運転のためのタスクの実行に関して運転者にごくわずかな要求しか課せられないときがよくある。その結果として、運転者は、運転のためのタスクにあまり注意を払わなくなる心理状態に陥ってしまう。当然ながら、運転者の不注意は、車両衝突事故、特に自動車衝突事故を招く主な原因となる。米国高速道路交通安全事業団(NHTSA)が1年間に牽引撤去された自動車による250万件を超える衝突事故に関して行なった研究によれば、運転者の不注意が、衝突事故の推定25〜56パーセントを引き起こした主たる衝突原因となっている。この研究において、不注意は、視覚的な注意散漫と精神的な注意散漫(上の空で見ている)と眠気との3つの構成要素を有するものとして定義された。不注意によって引き起こされる一般的な種類の衝突事故は、後側の衝突、交差点での衝突、車線変更または合流時の衝突、分岐点での衝突、単独車両衝突事故および低速度制限道路で起こる衝突である。
運転者が眠気を催すことは、周知の現象である。少なくとも1つの調査から、調査対象の運転者の57パーセントが前年に運転中に眠気を催したことがあり、23パーセントが実際に居眠り運転をしたことがあることがわかった。疲労が運転者の作業遂行能力と注意深さと判断力を鈍らせることは周知である。眠気によって引き起こされる衝突は、深刻な交通安全問題であり、全体の23パーセントもの衝突事故に疲労が関係していると推定された。
技術的観点から、自動車内において用いられうる自動車電話、ナビゲーション援助装置、インターネットおよびその他の種類の電子サービスを使用することができる新しい情報システムおよび機能が持続的かつ急速に増加している。自動車電話の使用が運転者に及ぼす影響は、自動車電話が幅広く用いられていることから、最も世間の注目を浴びてきたが、ナビゲーション援助装置およびITサービスの売上げも急速に増加している。自動車電話だけで米国では1年間に300〜1000人の事故死を引き起こしたと推定されており、この数は2004年には年間4000人に達すると予測される。電話を手に持って使用すること、標識を読むこと、飲食、他の搭乗者とのやりとり、物を仔細に眺めることおよび車内の装置を操作すること等の注意散漫要因は、運転者の注意を過剰に引き付け、以って安全を脅かすことにもなりかねない。これらの新しい種類のサービスおよび活動が運転環境においてより一般的になってきても安全運転が脅かされないことが特に重要である。
運転者の作業負荷は、これらの新しい機能および技術の利用に基づいて増大する。本明細書においては、「作業負荷」は、人物の多忙さの度合いと必要なタスクを行なうために要求される労力の大きさとを指すものと理解されたい。運転者が多数のことを行なわなければならず、高い作業負荷に直面している場合は、同時に行なわなければならないことが多いという点において、高い注意要求量が運転者に課せられる。運転者は、しばしば自動車の運転制御に関係がなく、したがって厳密に言えば運転状況とは無関係の事柄に注意を向ける。これらの事柄は、しばしば二次タスクと呼ばれており、運転者の注意を運転のための一次タスクからそらさせる潜在的な注意散漫要因である。二次タスクは、運転者がそれによって運転という一次制御タスクに十分な注意を払えなくなるほど注意を引き付けられる場合に、注意散漫要因(視覚的、聴覚的、認知的および生体力学的注意散漫要因)となる。その結果として、車線維持および速度制御等の運転作業の遂行および最終的には安全が脅かされる。
運転のためのタスクと二次タスクとは、図1において線図に示されるように一部の二次タスクが運転に関連あるという意味において重複する。運転のためのタスクと二次タスクとがこうした関係にあることから、2つの問題が生じる。第1に、「運転状況と無関係」な二次タスク情報とそうでないものとを線引きすることが困難になり得;第2に、運転に関連ある一定の二次タスク、たとえば道路標識を見ることまたは走行経路を選定することもまた、図1においてグラフに示されるように、安全を脅かしうる。
運転者は、注意散漫が運転のためのタスクに及ぼす影響に気づかないことがよくあることも理解されなければならない。さらにまた、運転者は、自身が疲労によって機能を損なわれて重度の覚醒喪失または抑制できない睡眠発作を起こす点まで来たということを確実に判断することができない。本明細書に記載の注意管理システムは、眠気を催す状況、注意をそらさせる状況および/または高作業負荷状況において運転者を補助することにより、安全を高めることを意図している。
本明細書に開示の注意管理システムおよび方法の目的は、眠気を催す状況、注意をそらさせる状況および/または高作業負荷状況において運転者を補助することにより安全を高めることにある。眠気管理装置と、注意散漫管理装置と、前側衝突および車線変更警告システムの注意散漫適応管理装置と、運転者の目視行動から観察または推測される運転要求量推定に基づいて少なくとも部分的に制御される作業負荷管理装置とを含むことを特徴としうる多数の注意管理システムの機能仕様を提供する。また、これらの運転者注意管理タスクを行なうために適切に用いられうるハードウェアシステムを説明する。さらに、ヒューマンマシンインタラクション(HMI)に基づく即時眠気および注意散漫管理装置の開発のための「プラットフォーム」と、連続的および走行後注意フィードバック・システムの説明とを開示する。HMI手法の目的は、切迫事故警告と注意フィードバックとの両方を用いて好ましい行動の変化を起こさせることによって運転者の不注意を是正することにある。
運転者**と運転者の二次タスクとの相互関係を示す線図である。 検出、演算、HMIおよび電源用ハードウェアおよび機能モジュールを含む注意管理システムの1つの実施例の流れ図である。 その上にいくつかの眠気管理対策装置が例示的に実施されうるプラットフォームの線図である。 運転者に対して行なわれうる警告表示の例を示す図である。 対話型運転者応答パネルの例を示す図である。 運転者凝視方向再誘導の実施例の図である。 運転者の不注意を構成する要素の相互作用を示す線図である。 本発明の教示にしたがって実時間運転者情報を表示するさまざまな「能動的」グラフ表示の図である。 最適注意レベルの表示に対する比較形式の実時間運転者フィードバックを示す図である。 作業負荷/不注意レベルの増加検出の根拠の例示的な説明形式の図である。 走行後フィードバックの画面表示の例を示す図である。 前側衝突状況警告のヘッドアップまたは画面表示の例を示す図である。 車線変更衝突状況に関する警告のヘッドアップまたは画面表示の例を示す図である。 運転者の頭部および/または目の動き等の生理学的特徴の測定が行なわれ、また他の段階において、運転者注意散漫または注意負荷レベル等の行動パラメータが評価され、さらにまた他の段階において、運転者に対して前記評価に関するフィードバックが行なわれる、本発明にしたがって実施されるシステムおよび方法の例を示す流れ図である。
少なくとも1つの実施例において、本発明は、それに基づいて本発明の機能が達成されうる例示的なハードウェアを含む、自動車における注意管理概念の実施を可能にするシステムおよび方法を提供する。本明細書において、運転者は視覚的に得られるどのような支援を必要とし、かつ支持を得るためにはそれをどのように概念化するべきかと;運転者の目視行動の実時間認識をどのように適用すれば、運転上の過失を減らし、かつ事故を防ぐことができるかと;商業的な実施可能性はどうかとを含むいくつかの基本的な疑問および目標を取り上げる。機能的な説明は、眠気管理装置と;注意散漫管理装置と;前側衝突および車線変更警告装置の注意散漫適応管理装置と;作業負荷管理装置との例に関して行なわれる。目視行動からの運転要求量の推定を実施するシステムおよび方法も含まれる。
これらのシステムおよび方法の1つ以上をいわゆる注意管理システムを構成するものとして個別的および集合的に説明する。これらのシステムの考えられる1つの構成要素および本明細書に記載のいくつかの発明の1つの構成要素は、これらのシステムおよび方法をデモンストレーションおよび試験用に実施するのに用いられうる注意支援デモンストレータである。目視行動からの運転要求量推定の例も本明細書において説明される。
1つの実施例において、注意管理システムは、(1)検出、(2)演算、(3)HMIおよび(4)電源用のハードウェアを含む。ユニットまたは機能モジュールは、例として図2に示されるように構成され(相互に関連づけられ)うるとともに、自動車およびトラック等の車両における実施に適する。
シーイングマシーンズ社(SeeingMachines)から入手可能であり、かつ自動車に取り付けられるようにされうるような目視行動検出装置が用いられる。この種のシステムは、(1)ステレオカメラヘッドと、(2)パーソナルコンピュータ(PC)と、(3)適切な運転用ソフトウェアとを含みうる。スマートアイ(SMARTEYE)の商標の下に製造および販売されている目視行動検出装置等も任意で用いられうる。
自動車性能信号は、CANバスから取得されうる。さらにまた、ハンドル角度検出装置と車線追跡用ハードウェアおよびソフトウェアとが用いられうる。注記ボックスおよびビデオ記録用ハードウェアが用いられる。車載パーソナルコンピュータまたは同様の能力を有する演算装置が用いられる。これに代わる方法として、かつ特に試験と実施とを容易にするために、例として「ディレクター(Director)」および「シミュリンク(Simulink)」等のソフトウェアを実行するラップトップコンピュータが用いられうる。さらにまた、xPCを配設し、かつ使用することができる。ハードウェアの観点から、LED制御用ハードウェアが用いられる。音声HMI(警告音、記録メッセージ)は、前記演算装置を介して得られる。ユーザ入力用のタッチスクリーンも用いられうる。これらの実施例のいくつかは、製品開発に適するとともに、システムの試験を容易にするが、商品化される場合には、いくつかの構成要素が直接自動車に組み込まれることを理解されたい。
座席振動機構または同様の運転者警報装置が含まれうる。好適な実施例においては、LED HUD(ヘッドアップ表示装置)が用いられる。LED制御装置によって制御されるLEDアレイ(表示装置)も用いられうる。システム全体の電源は、搭載車両から分岐接続されうる。
眠気管理装置は、2つの構成で実施されうる。第1の例において、前記管理装置は、完全にPCを基本とする。すなわち、いかなる外部ハードウェアまたは外部通信機能も必要とされない。この実施例は、シナリオを基本とする。すなわち、眠気症状の発現が、実時間ではなしに、実PERCLOS(走査パターン、視線固定の回数および長さ、サッケード潜在性等を考慮する分析)データに基づいて追跡される。このハードウェア機能は、LEDを基本とする装置またはHUD等の視覚表示または座席振動等の物理的刺激等の刺激により運転者を刺激する。また他の実施例においては、HMIハードウェアおよびシミュリンク(Simulink)通信が実施される。
いくつかの眠気管理対策を実施する上での基礎となりうるとともに、試験を行なう上での基礎となりうる「プラットフォーム」が望ましい。このような実施のためのプラットフォームの一例が、図3において略図に示されている。
図3の例は、ディレクター・プログラムを示すと見なされうる。このような構成を異なるHMI構成要素に関して容易に変更して、たとえば(1)運転者に対する連続的情報ストリーミングと、(2)注意警告と、(3)切迫危険警報と、(4)運転者応答試験と、(5)走行後要約情報と、(6)オペレータ入力設定メニューとを提供することができる。
本発明の1つの実施例において、運転者に対する注意警告が提供される。運転者は、複数の形態の警告間において選択を行なうことができるが、警告を完全に動作不能にすることはできない。例として、ビープ音に続いて、「<眠気原因の自動挿入>、『休憩しましょう』」といったような任意の音声メッセージの警告が運転者に対して発せられうる。これに代わるものとして、アイコンが、個別的に、または可聴警告とともに、または印刷形態の警告と一緒に運転者に表示されうる。
例示的なアイコン警告は、(a)大幅な閉瞼の検出と、(b)ハンドル操作のふらつきの検出と、(c)車線維持のふらつきの検出と、(d)運転者の眠気の検出とに関して、図4(a)〜(d)に示されている。検出された運転者の状態によって、これらのアイコンの1個以上が同時に表示されうる。
また他の実施例においては、マイクロホンが含まれて、運転者は、電話応答機およびその他のカスタマイズ可能な音声再生装置と全く同じように独自の警告を録音または供給することができるようになっている。
さらに他の実施例においては、運転者物理的刺激警告が適用される。好ましくは、運転者は、設定メニューで複数の種類の警告間において選択を行なうことができるが、少なくとも1つの実施例では、オペレータがこの物理的警告を完全に動作不能にすることが防がれている。このような物理的刺激の一例は、座席振動である。
また他の形態においては、点滅する「HUD」LEDが用いられて、この場合も単独で、または本明細書に記載のその他の種類の警告とともに、運転者を鋭く刺激しうる。好適な実施例において、最大3つの前記種類の警告が作動時に同時に提示されることを可能にする機能が運転者に提供される。
運転者応答機能、すなわち信号に対する反応時間も提供される。この機能に関しては、運転者は、動作可能および動作不能のいずれにすることもできるとともに、設定メニューで複数の形態の警告間において選択を行なうこともできる。
所定の時間後、たとえば警告から5〜8秒後に、運転者応答機能が動作する。例として、ビープ音とともに、図5に示されるように、タッチスクリーン上に示されるボタンの下に「押す」の文字が表示される。運転者が所定の時間内に反応しない場合、またはアルゴリズムに基づく何らかのその他の反応時間にしたがって、警報警告が発せられる。これは、運転者が自動車を停止させるか、または注意を喚起され、かつその事実がシステムにより検出されるか、または運転者がこの機能のスイッチを切るまで続く。
オペレータにカスタマイズ機能を提供するために、HMI構成要素を介して選択されうる例示的な選択肢を以下に示す:
Figure 0005248558
注意散漫管理装置は、例として2つの実施例で実施されうる。第1の実施例において、この注意散漫管理装置は、完全にPCを基本としており、いかなる外部ハードウェアまたは通信機能も有さない。前記管理装置は、シナリオを基本とする。すなわち、注意散漫の発現が実時間ではなしに時系列的に示される。ハードウェア機能はシミュレートされる。第2の実施例は、実時間通信の機能を含むハードウェアの実施に基づく。
本発明のまた他の態様は、安全スレッショルドに基づく注意散漫警告である。安全を脅かす注意散漫行動を運転者に通知する警告が提供される。前記において認識されたように、運転者は、注意散漫が自身の運転能力に及ぼす影響に気づかないことがよくある。このため、安全に基づく注意散漫警告の目的は、運転のための制御タスクの実行能力の低下に関するフィードバックを提供することにある。すなわち、注意散漫が検出される(すなわち脇見行動が適切な安全スレッショルドを超え、かつ/または自動車性能が脇見行動時に低下する)場合に、システムは、以下の1つ以上の警報を発する。単純なビープ音等の音またはどの能力の低下が検出されたかを示す能力別音声メッセージが発せられうる。たとえば、脇見行動が脇見安全スレッショルド基準(たとえば、欧州連合は4回の脇見または1回2秒の脇見時間を推奨し、米国自動車協会は、合計10秒の脇見時間を推奨した)を超えると、「視覚的な注意散漫を検出」または「道路から目をそらしすぎ」というメッセージが発せられうる。二次タスク遂行時の脇見行動時にハンドル操作が基準から逸脱する場合は、「脇見をしているときにハンドル操作が不安定になります」というメッセージが発せられうる。二次タスク遂行時の脇見行動時に車線維持が基準から逸脱する場合は、「脇見をしているときに車線維持が不安定になります」といったようなメッセージが発せられうる。二次タスク遂行時の脇見行動時に大幅な速度低下が検出されると、「脇見をしているときに大幅に速度低下します」といったようなメッセージが発せられうる。多数の原因が検出される場合は、「脇見を検出」といったような一般的なメッセージが発せられうる。二次タスク遂行時の脇見行動時、異なる種類の道路時または異なる要求量レベル時に制御タスクの割り込みが検出されると、それに対応する警告が発せられる。これらの警告の形態には、運転者録音または供給メッセージ、座席の前側部分における座席振動または以下に説明される凝視方向再誘導が含まれうる。
本発明の開示には、図6に示される「凝視方向再誘導」という新しい概念が含まれる。これにおいて、インタフェースは、運転者の注意散漫が検出されると、運転者の目を前方の運転場面(すなわち前面ガラスを通して見える光景)に誘導する。例として、3つのLED「線」の1つ以上(左、中央または右)をたどる波状の光が、運転者の凝視が検出された位置によって始動する。波状の光の後に、任意で大きな円が点灯し得、然る後にLEDの中心線が点灯する。これらの各々は、運転者の注意を必要とされる位置により明確に集中させることを目的とする。これらのいくつかのLED灯火の正確な配置およびタイミングは重要ではなく、色も重要ではない。実際に、タイミングは、閾下、すなわち前記灯火が意識的に知覚されないほど高速であってもよい。これに代わる方法として、適切な灯火が最初にゆっくりと点滅し、運転者がシステムにより評価されて、是正行動が取られたかどうかが判断されてもよい。是正行動が取られなかった場合には、点滅タイミングと光の強さとが増加されうる。
注意散漫フィードバック用の設定メニューは、以下に示される例示的な論理を有しうる。
Figure 0005248558
また他の態様において、本発明には、運転者の目視行動から導出される運転要求量推定を用いた作業負荷管理の概念が取り入れられる。一般に、「作業負荷管理」の概念は、情報を類別するとともに、運転者の作業負荷が十分に低くなって情報を受理することに伴う危険が避けられる程度になるまで運転者に対する情報の提示を潜在的に遅らせる優先順位体系である。一体的な車内情報システムのインタフェースは、運転のためのタスクに適正な注意が払われることを保証しうるようにされうる。本明細書において示される注意散漫管理アルゴリズムからの出力は、作業負荷管理装置への入力として用いられうる。
本明細書において開示されるタイプの作業負荷管理装置は、運転要求量の運転要求量視覚活動測度を用いて運転者の作業負荷を正確に測定する。これは、運転者の「視覚的活動性」、すなわち頭部および目の動き(回転)の変動性がどの程度かの測度である。この頭部および目の動きの測度は、2002年10月15日出願の米国仮特許出願第60/418,171号により詳細に説明されており、前記出願の開示は、該出願に記載される「視覚活動」アルゴリズムを含めて、特に参照により本明細書に取り入れられる。さらに、運転要求量視覚活動測度は、さらにまた、本明細書に開示の作業負荷管理HMIにおける新しい機能を可能にする。
作業負荷管理装置の1つの態様は、可聴対話のダイアログまたは情報を一時停止することである。例として、これは、システム始動または自動始動情報(たとえばテキスト・音声変換電子メールおよび重要でないナビゲーション・システム情報)とランダム始動の音声ダイアログ(たとえば着信および発信電話会話)とが、高視覚活動期間中に一時停止されうることを含む。
一例として、運転者に記憶装置から一連の電子メール、たとえば10件の新しい電子メールが届けられることがあり、これらの電子メールは、テキスト・音声変換システムによって声高く「音読」されることになる。このような音声伝達中に、管理システムにより運転者の高視覚活動期間が検出される。このことに呼応して、システムは、音声伝達を一時停止して、運転者の注意負荷が所定のレベルを超えて増加することを防ぐ。例として、こうしたレベルは、それを超えると運転能力が脅かされる注意負荷に対応する。任意で、管理システムは、高注意負荷状態であることを運転者に通知する役割をも果たしうる信号音等により、こうした中断を運転者に伝える音響確認装置を含みうる。この音声伝達は、注意負荷が十分に低下して、例としてこのような音声情報を運転者が安全に受理することができる状態に対応する所定のレベルになったことをシステムが検出することによって、運転者による始動またはシステムによる始動に基づいて再開されうる。
また他の態様において、連続的および/または走行後注意負荷フィードバックが、前記開示の管理システムにより可能になる。この態様は、一般にフィードバック原理と呼ばれる基本的な人間行動特性にしたがって可能となった。この原理は、一般に、フィードバックは作業遂行能力を高めるという考え方である。このことは、タスク/技術の習得(たとえば安全運転の習得)および労働意欲のいずれに関しても真実である。前記において認識されたように、運転者は、一般に、自身の作業遂行能力を適正に判断することができない。タスク/技術の遂行に関する直接的かつ正確かつ即時的かつ連続的な情報をどの程度得ることができるかは、運転者の作業遂行能力と意欲とを高める上での重要な要素である。注意フィードバックは、運転者が以前は得ることができなかった固有運転フィードバック形式を構成する。この方法は、切迫事故警告というよりむしろ好ましい行動修正および生活習慣の変更の1つである。たとえば、警戒度を増させる主要なメカニズムは、「決定影響」であると考える研究者もいる。決定の影響の概念は、こうした性質の情報(運転者注意負荷および警戒度)は、停車して休憩をとること、コーヒーを飲むこと、アルコールの消費量を減らすこと、またはその他のこうした行動を変更することをするか否かについての運転者の決定に影響を与えるとしている。
よって、注意フィードバックの目的は、複数(多数)の時間枠、たとえば(1)即時(姿勢を変える、または複雑なタスクを中断するといったような短期的な補償行動);(2)走行中(たとえば停車して少し眠る、自動車電話のスイッチを切る);(3)毎日(注意負荷が低かった日は睡眠時間を増やす、前部座席からビデオ画面を取り外す);(4)長期(異なる睡眠習慣または気のそらせ方を採用する)の1つ以上にわたって好ましい行動の変更を促すことにある。このフィードバックは、不注意な行動に関する運転者の自己認識を高めるとともに、より良好な自己管理を可能にする。
2つの主要なフィードバック形式が考えられる。第1は、運転者に実時間注意情報、たとえば運転中に提示される情報を提供する連続的車内フィードバックである。この情報は、本質的に安全を脅かさない方法で伝えられる。この概念は、一種の注意メータ、警戒度メータ(警戒メータ)または安全/非安全運転度メータを提供するものである。第2のフィードバック形式は、一旦運転を停止すると、より詳細な注意情報を運転者に提供する走行後フィードバックである。
走行後フィードバックを「ファイル」に保存することにより、事故発生率等の結果を尺度とするのではなしに原因行動に主眼を置いた、全車両に基づく安全性フィードバックが可能になる。おそらくは運転者の容認を得るのに貢献する1つの選択肢は、階層システムである。このような階層システムにおいては、運転者は、連続的にデータにアクセスすることができ、車両管理者は、要約データにアクセスすることができ、規制当局は、要約データにアクセスすることを許可されうる。したがって、車両運転者の場合は、本発明は、必ずしも雇用者報告特性に関する運転者の危惧を招くわけではなく、有用なツールとしてさらに喜ばれうる。
注意フィードバックを提供可能にするためには、管理システムを運用可能にしなければならない。不注意は、眠気/障害、注意散漫および高作業負荷要素によって構成されると見なされうる。したがって、図7に示されるように、各種類の不注意を考慮した総合モデルが好ましい。前記図に、運転者の不注意と作業負荷と眠気および注意散漫等の個人的特徴とを選択的に考慮しうる、本発明にしたがって構成される1つのシステムモデルが示されている。
本発明のまた他の態様において、さまざまな情報またはフィードバックを運転者に表示する独特な方法が提供される。連続的注意フィードバックの場合は、図8(a)〜(c)に、管理システムによって検出または生成された実時間運転者情報を表示するさまざまな「能動的」図形表示が示されている。一例として、この表示は、眠気と注意散漫と作業負荷との組合せ測度としての注意/不注意のレベル等の「包括的」または合成注意フィードバック値の表示であってもよい。図8(a)の場合は、傾向情報を有さずに単純に積み重ねられた灯火が例示されている。図8(b)の場合は、現在レベルのまわりに枠が配置されるとともに、「フェードアウト」の形態をとる傾向情報が提供される「航空機用レーダー形式」の表示が用いられている。図8(c)には、瞬間的な「実時間」情報が伸縮棒(相対的に幅広)として右側に示され、かつ所定の長さの期間に関する総統計値(平均値および中央値等)がより狭幅の棒により左側に示されるヒストグラムが図示されている。このような態様で、傾向情報が示される。図8(c)に図示されている例には、5つの以前の期間が示されている。表示および記憶容量制御論理にしたがって、いかなる個数の以前の期間も表示されうることを理解されたい。
また他の態様において、本発明は、さらにまた、実時間運転者フィードバックを最適な注意レベルの表示との比較形式で提供する。運転者が自身の注意散漫または過負荷の度合いを最適な注意度に対して観察することができる、このような表示の一例となる実施例が、図9に示されている。
さらに他の態様において、本発明は、検出された運転者不注意期間を測定し、かつその状態を通知するのに用いられうる。運転者は、その時に、何が問題だったのかを「尋ねる」こと(たとえばタッチスクリーンに触れること等により)ができるとともに、作業負荷/不注意レベルの増加検出の根拠の説明を受けることができる。このようなフィードバックは、例として、言語メッセージおよび/または図10に示されるようなグラフの形態で提供されうる。前記図においては、眠気と注意散漫と作業負荷との3つのグラフ表示が右側に示されるとともに、これらの効果を組合せたものが、相対的な運転者注意度が示される左側に表示されている。
前記に説明されたように、前記態様の走行報告は、運転者の学習および行動の改善に極めて有利でありうる。よって、走行後フィードバックを画面表示する本発明の方法を図11において開示するとともに、例示的に図示する。この図示された例においては、表示画面からのメニュー選択において、走行後フィードバックが選択され、これに関連ある閉瞼率およびハンドル操作の安定性等の測定特性の表示が履歴形式で表示されている。有利な点として、この同じ情報は、当然ながら、後の分析および使用のために記録されうる。
さらにまた、前記に記述された運転者の能力は、前側衝突、後側衝突および車線変更衝突警告(FCW、RCWおよびLCW)システム等のその他の自動車システムの注意散漫適応にも用いられうる。後側衝突事故は、自動車の衝突事故の約28パーセントを占める。運転者の不注意が一因となった事故は、これらの事故の60パーセントを超えるため、衝突警告および回避システムは、衝突事故を減少させ、かつ事故死を防ぐための重要なツールとなる。本発明の注意管理システムの1つの目的は、交通環境において不注意と安全限界事象、たとえば先行車両の急ブレーキと運転者が道路から目をそらせた状態との同時発生を検出することにある。この2つの例を目視行動情報として用いて、前側衝突および車線変更警告を適応させることができる。
数量化された二次タスクの検出(たとえばボタンを押す動作または目の動きを検出することによる)を統合することは、運転者が潜在的に注意をそらさせる装置またはその他の種類のタスクに手をとられているか否かにしたがって衝突警告スレッショルドを動的に調節することにより、衝突警告システムを大きく向上させる。たとえば、衝突警告システムは、運転者が携帯電話での会話に携わっていることが検出された場合は、早めに警告を発しうる。早期の衝突警告は、遅れた警告または警告皆無の場合に比べて、運転者をより迅速に反応させ、かつより多くの衝突事故を回避するのに役立つ。運転者が運転のためのタスクのある一定の局面に関して不注意であるとき、たとえば前方から目をそらせているときに前側衝突の可能性が検出された場合、または側方を見ていなかったときに車線変時衝突の可能性が検出された場合は、こうした状態の警告が早めに発せられる。研究により、運転者が目をそらせているときに1秒早めに警告を発することは、衝突を回避するのに極めて効果的であることがわかった。
運転者が注意していることが検出された場合は、警告を遅らせることまたは取り消すことさえできる。警告の提示を遅らせることによって、前側衝突および車線変更警告アルゴリズムは、より長い時間をかけて、警告が必要であることをより確実に確かめることができ、以って誤警報が減少する。さらにまた、運転者が道路またはサイドミラーを見ているときに衝突警告を作動させないことを選択する運転者取消しによっても、迷惑な誤警報が解消される。
実施戦略として、第1段階において、このような警告は、「穏やか」であるが、状態が悪化し、かつ衝突がより差し迫ってくるにつれて強さを増しうる。前側衝突警告の場合は、ヘッドアップまたは画面表示警告が最初に表示されるが、後に衝突の状況が深刻化すると鳴らされる可聴警告がさらに加わりうる。このような警告とその制御パラメータ(運転者に対して表示されてもされなくてもよい)との一例が、前側衝突状況に関して図12に、車線変更衝突状況に関して図13に示されている。
運転者の特徴に関して前記に説明された検出機能は、特に説明されたもの以外のその他の環境およびその他の目的に用いられうる。これらの検出機能は、さらにまた、その他の車内システムに一体化されて用いられうる。たとえば、受動的安全機能として、運転者/搭乗者の頭部が展開したエアバッグを受けるのに適した位置にないことを検出する「スマート」エアバッグが得られうる。これに呼応して、エアバッグの展開は、検出された頭部位置に対応して修正されうる。
また他の機能において、検出された行動を用いて、運転者を識別するか、または少なくとも認定された運転者がハンドルを握ることを除外して、以って盗難防止を容易にすることができる。頭部および目の検出装置を用いて、自動的にミラーおよび座席位置等を設定することもできる。口唇追跡を用いて、音声認識付属装置を向上させることができる。接近してくるヘッドランプ用のフィルタと運転者用表示装置の表示とを、目の位置および動きに基づいて適応させることができる。

Claims (6)

  1. 運転者が運転タスクに対して払っている注意を監視することで、運転の実行能力を高める方法において、
    運転者の頭部及び/または目の動きに基づき、運転者の視覚的活動性を測定する段階と、
    測定された前記視覚的活動性に基づき、運転者が前記運転タスクに対して払っている注意の度合いを評価する段階と、
    前記注意の度合いの評価に基づき得られた、運転者が前記運転タスクに対して払っている注意の度合いの情報を、走行後において、走行後注意フィードバックとして運転者に与える段階と、から成り、
    前記注意の度合いを評価する段階は、眠気、注意散漫及び高作業負荷要素によって構成される不注意を考慮する段階であって、各種類の前記不注意を考慮する段階からなることを特徴とする方法。
  2. 前記走行後注意フィードバックとして運転者に与える段階において、一旦運転を停止すると、注意情報を運転者に提供する請求項1に記載の方法。
  3. 前記走行後注意フィードバックとして運転者に与える段階において、注意情報を表示画面に表示する請求項2に記載の方法。
  4. 前記走行後注意フィードバックとして運転者に与える段階において、注意情報を、測定された特性の履歴形式で提供する請求項2または3に記載の方法。
  5. 前記方法は、前記走行後注意フィードバックが後の分析および使用のために記録される段階から成る請求項2ないし4のいずれかに記載の方法。
  6. 前記方法は、前記走行後注意フィードバックが階層システムの要約データとして車両管理者に提供される段階から成る請求項5に記載の方法。
JP2010178387A 2002-02-19 2010-08-09 運転者注意負荷の監視と管理とを行なうシステムおよび方法 Expired - Fee Related JP5248558B2 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US35713502P 2002-02-19 2002-02-19
US60/357,135 2002-02-19
US41817102P 2002-10-15 2002-10-15
US60/418,171 2002-10-15

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2003569057A Division JP4603264B2 (ja) 2002-02-19 2003-02-19 運転者注意負荷の監視と管理とを行なうシステムおよび方法

Publications (2)

Publication Number Publication Date
JP2011019921A JP2011019921A (ja) 2011-02-03
JP5248558B2 true JP5248558B2 (ja) 2013-07-31

Family

ID=27760455

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2003569057A Expired - Fee Related JP4603264B2 (ja) 2002-02-19 2003-02-19 運転者注意負荷の監視と管理とを行なうシステムおよび方法
JP2010178387A Expired - Fee Related JP5248558B2 (ja) 2002-02-19 2010-08-09 運転者注意負荷の監視と管理とを行なうシステムおよび方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2003569057A Expired - Fee Related JP4603264B2 (ja) 2002-02-19 2003-02-19 運転者注意負荷の監視と管理とを行なうシステムおよび方法

Country Status (8)

Country Link
US (1) US6974414B2 (ja)
EP (4) EP2314207A1 (ja)
JP (2) JP4603264B2 (ja)
CN (1) CN100488443C (ja)
AU (1) AU2003211065A1 (ja)
BR (1) BR0307760A (ja)
ES (1) ES2392082T3 (ja)
WO (1) WO2003070093A1 (ja)

Families Citing this family (220)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8604932B2 (en) * 1992-05-05 2013-12-10 American Vehicular Sciences, LLC Driver fatigue monitoring system and method
US9129505B2 (en) 1995-06-07 2015-09-08 American Vehicular Sciences Llc Driver fatigue monitoring system and method
US8301108B2 (en) 2002-11-04 2012-10-30 Naboulsi Mouhamad A Safety control system for vehicles
US7336804B2 (en) * 2002-10-28 2008-02-26 Morris Steffin Method and apparatus for detection of drowsiness and quantitative control of biological processes
WO2004081900A1 (en) * 2003-03-07 2004-09-23 Innocorp. Ltd. Vehicle for simulating impaired driving
DE10314119A1 (de) * 2003-03-28 2004-10-21 Dieter Dr. Bastian Verfahren zur Ermittlung eines integralen Risikopotentials für einen Verkehrsteilnehmer und Einrichtung zur Durchführung des Verfahrens
DE10322458A1 (de) * 2003-05-16 2004-12-02 Daimlerchrysler Ag Verfahren und Vorrichtung zur Beeinflussung der Beanspruchung eines Fahrers in einem Kraftfahrzeug
CN1802273B (zh) * 2003-06-06 2010-05-12 沃尔沃技术公司 根据被解释的驾驶员活动控制车辆子系统的方法和装置
EP1914106A3 (en) * 2003-06-06 2008-09-24 Volvo Technology Corporation An attention management system and method
US8164464B2 (en) * 2005-03-24 2012-04-24 Matos Jeffrey A Method and system of aircraft pilot assessment
US7452336B2 (en) * 2003-09-06 2008-11-18 Interactive Neuro Technology, Inc. Interactive neural training device
JP4432420B2 (ja) * 2003-09-17 2010-03-17 横浜ゴム株式会社 作業快適度評価装置および作業快適度評価方法
JP4239771B2 (ja) * 2003-09-18 2009-03-18 日産自動車株式会社 車両用運転操作補助装置および車両用運転操作補助装置を備えた車両
KR100569009B1 (ko) * 2003-12-30 2006-04-07 현대자동차주식회사 차량용 정보 시스템의 사용성 평가 시스템
JP4277081B2 (ja) * 2004-03-17 2009-06-10 株式会社デンソー 運転支援装置
JP4595377B2 (ja) * 2004-04-28 2010-12-08 株式会社デンソー 運転者状態検出装置及びプログラム
US7435227B2 (en) * 2004-09-13 2008-10-14 Biocognisafe (Bcs) Technologies Method and apparatus for generating an indication of a level of vigilance of an individual
JP2006130010A (ja) * 2004-11-04 2006-05-25 Denso Corp 視覚認識支援装置
DE102004054472B3 (de) * 2004-11-11 2006-03-16 Bayerische Motoren Werke Ag Fahrerassistenzsystem
JP4442402B2 (ja) * 2004-11-26 2010-03-31 日産自動車株式会社 車両用運転操作補助装置および車両用運転操作補助装置を備えた車両
JP4773080B2 (ja) * 2004-12-17 2011-09-14 株式会社デンソー 視認力向上支援装置
US20060149426A1 (en) * 2005-01-04 2006-07-06 Unkrich Mark A Detecting an eye of a user and determining location and blinking state of the user
US9165280B2 (en) * 2005-02-22 2015-10-20 International Business Machines Corporation Predictive user modeling in user interface design
US7301465B2 (en) * 2005-03-24 2007-11-27 Tengshe Vishwas V Drowsy driving alarm system
US7403124B2 (en) * 2005-05-10 2008-07-22 Fuji Jukogyo Kabushiki Kaisha Driving support equipment for vehicles
US20060259206A1 (en) * 2005-05-16 2006-11-16 Smith Matthew R Vehicle operator monitoring system and method
US7532958B2 (en) 2005-06-24 2009-05-12 General Motors Corporation Method for real-time assessment of driver workload by a navigation or telematics device
US7394393B2 (en) 2005-08-02 2008-07-01 Gm Global Technology Operations, Inc. Adaptive driver workload estimator
JP2007072632A (ja) * 2005-09-05 2007-03-22 Toyota Motor Corp 車載警報装置
JP4815960B2 (ja) * 2005-09-09 2011-11-16 日産自動車株式会社 視認状態判断装置、自動車、及び視認状態判断方法
DE102005047648A1 (de) * 2005-10-05 2007-04-12 Volkswagen Ag Eingabevorrichtung für ein Kraftfahrzeug
DE102005052424A1 (de) * 2005-11-03 2007-05-10 Robert Bosch Gmbh Projektionsanzeige
US7428449B2 (en) * 2006-03-14 2008-09-23 Temic Automotive Of North America, Inc. System and method for determining a workload level of a driver
US20090209829A1 (en) * 2006-03-24 2009-08-20 Pioneer Corporation Apparatus for detecting driver's mental state and method for detecting mental state
US8487775B2 (en) 2006-06-11 2013-07-16 Volvo Technology Corporation Method and apparatus for determining and analyzing a location of visual interest
JP2008013004A (ja) * 2006-07-04 2008-01-24 Fuji Heavy Ind Ltd 芳香発生による運転支援システム
KR100753839B1 (ko) * 2006-08-11 2007-08-31 한국전자통신연구원 적응형 차량 인터페이스 제공 장치 및 방법
KR100753838B1 (ko) * 2006-08-11 2007-08-31 한국전자통신연구원 적응형 차량 운전지원 장치 및 방법
EP2407947B8 (en) * 2006-10-13 2014-04-23 Toyota Jidosha Kabushiki Kaisha On-board warning apparatus and warning method
JP4793650B2 (ja) * 2006-11-07 2011-10-12 アイシン精機株式会社 体調管理システム
GB0622715D0 (en) * 2006-11-15 2006-12-27 Ibm An apparatus for processing event data
JP4211841B2 (ja) * 2006-11-15 2009-01-21 トヨタ自動車株式会社 ドライバ状態推定装置、サーバ、ドライバ情報収集装置及び運転者状態推定システム
US8161454B2 (en) * 2007-01-22 2012-04-17 Ford Motor Company Software architecture for developing in-vehicle software applications
JP4518083B2 (ja) * 2007-01-29 2010-08-04 株式会社デンソー 覚醒維持装置
US8068968B2 (en) * 2007-02-06 2011-11-29 Denso Corporation Vehicle travel control system
SE530880C2 (sv) * 2007-02-19 2008-10-07 Scania Cv Abp Förfarande, anordning och datorprogramprodukt för att uppskatta tröttheten hos en förare av ett motorfordon samt ett motorfordon innehållande en sådan anordning
JP4182131B2 (ja) * 2007-03-13 2008-11-19 トヨタ自動車株式会社 覚醒度判定装置及び覚醒度判定方法
JP2008234009A (ja) * 2007-03-16 2008-10-02 Denso Corp 健康管理支援システム
US7652583B2 (en) * 2007-03-20 2010-01-26 Deere & Company Method and system for maintaining operator alertness
US20080243558A1 (en) * 2007-03-27 2008-10-02 Ash Gupte System and method for monitoring driving behavior with feedback
US20080243005A1 (en) * 2007-03-30 2008-10-02 Searete Llc, A Limited Liability Corporation Of The State Of Delaware Computational user-health testing
JP4259587B2 (ja) * 2007-03-30 2009-04-30 株式会社デンソー データベース装置、注意喚起装置及び運転支援装置
US7979177B2 (en) * 2007-04-30 2011-07-12 Ford Motor Company System and method for updating vehicle computing platform configuration information
US20090043586A1 (en) * 2007-08-08 2009-02-12 Macauslan Joel Detecting a Physiological State Based on Speech
US20090089108A1 (en) * 2007-09-27 2009-04-02 Robert Lee Angell Method and apparatus for automatically identifying potentially unsafe work conditions to predict and prevent the occurrence of workplace accidents
FR2923046B1 (fr) * 2007-10-31 2012-11-16 Airbus France Dispositif de gestion d'une phase de reveil pour un pilote d'un avion.
US9665910B2 (en) 2008-02-20 2017-05-30 Hartford Fire Insurance Company System and method for providing customized safety feedback
AT506667B1 (de) * 2008-04-03 2013-06-15 Gesunde Arbeitsplatzsysteme Gmbh Verfahren zum prüfen des ermüdungsgrades einer ein gerät bedienenden person
JP4727688B2 (ja) * 2008-04-23 2011-07-20 トヨタ自動車株式会社 覚醒度推定装置
US8275348B2 (en) * 2008-05-30 2012-09-25 Volkswagen Ag Method for managing telephone calls in a vehicle
US9493149B2 (en) * 2008-07-02 2016-11-15 Michael Phelan Driver authentication system and method for monitoring and controlling vehicle usage
US9045101B2 (en) * 2008-07-02 2015-06-02 Michael Phelan Driver authentication system and method for monitoring and controlling vehicle usage
ITCH20080018A1 (it) * 2008-08-08 2010-02-09 Leonardo Bellante Anti sleep driver (asd)
DE102008042539A1 (de) * 2008-10-01 2010-04-08 Robert Bosch Gmbh Verfahren zur Anzeige eines Warnhinweises in einem Fahrzeug
DE102008056343A1 (de) * 2008-11-07 2010-05-12 Bayerische Motoren Werke Aktiengesellschaft Warnsystem für ein Kraftfahrzeug
KR101173944B1 (ko) * 2008-12-01 2012-08-20 한국전자통신연구원 차량 운전자의 감성 조절 시스템 및 방법
WO2010091464A1 (en) * 2009-02-11 2010-08-19 Seeing Machines Limited Method and system for monitoring an operator of machinery
JP4837762B2 (ja) * 2009-06-18 2011-12-14 本田技研工業株式会社 車載機器操作装置
US8369608B2 (en) * 2009-06-22 2013-02-05 Toyota Motor Engineering & Manufacturing North America, Inc. System and method for detecting drowsy facial expressions of vehicle drivers under changing illumination conditions
US20110039572A1 (en) * 2009-08-12 2011-02-17 Pm&L Concepts, Inc. Cellular device control
CN102481121B (zh) * 2009-09-03 2015-04-22 皇家飞利浦电子股份有限公司 意识监测
CN101690666B (zh) * 2009-10-13 2011-05-04 北京工业大学 汽车驾驶员驾驶工作负荷测量方法
BR112012012635A2 (pt) 2009-12-18 2016-07-12 Honda Motor Co Ltd sistema e método para fornecer alerta de aviso de acidente em veículo
US20110187518A1 (en) * 2010-02-02 2011-08-04 Ford Global Technologies, Llc Steering wheel human/machine interface system and method
US8552850B2 (en) * 2010-02-17 2013-10-08 Honeywell International Inc. Near-to-eye tracking for adaptive operation
CN101843496A (zh) * 2010-04-23 2010-09-29 北京工业大学 驾驶工作负荷成套检测方法
US9460471B2 (en) 2010-07-16 2016-10-04 Hartford Fire Insurance Company System and method for an automated validation system
US9710154B2 (en) * 2010-09-03 2017-07-18 Microsoft Technology Licensing, Llc Dynamic gesture parameters
US8880282B2 (en) * 2010-10-04 2014-11-04 Toyota Motor Engineering & Manufacturing North America, Inc. Method and system for risk prediction for a support actuation system
US9952046B1 (en) * 2011-02-15 2018-04-24 Guardvant, Inc. Cellular phone and personal protective equipment usage monitoring system
US9265477B2 (en) 2011-02-17 2016-02-23 Sharp Laboratories Of America, Inc. Adaptive lightweight acoustic signal classification for physiological monitoring
US9292471B2 (en) 2011-02-18 2016-03-22 Honda Motor Co., Ltd. Coordinated vehicle response system and method for driver behavior
US8698639B2 (en) 2011-02-18 2014-04-15 Honda Motor Co., Ltd. System and method for responding to driver behavior
US8731736B2 (en) 2011-02-22 2014-05-20 Honda Motor Co., Ltd. System and method for reducing driving skill atrophy
US20120329020A1 (en) * 2011-02-25 2012-12-27 Pulsar Informatics, Inc. Systems and methods for presonalized fatigue education and risk management
KR20120117232A (ko) * 2011-04-14 2012-10-24 현대자동차주식회사 차량 내에서의 감성선곡 시스템 및 그 방법
EP2523434A1 (en) 2011-05-11 2012-11-14 10n2 Technologies, Inc. A method for limiting the use of a mobile communications device dependent on the travelling speed
WO2012176535A1 (ja) * 2011-06-20 2012-12-27 本田技研工業株式会社 車載機器操作装置及び報知装置
US8878660B2 (en) 2011-06-28 2014-11-04 Nissan North America, Inc. Vehicle meter cluster
US8872640B2 (en) * 2011-07-05 2014-10-28 Saudi Arabian Oil Company Systems, computer medium and computer-implemented methods for monitoring health and ergonomic status of drivers of vehicles
DE102011111213A1 (de) * 2011-08-20 2013-02-21 GM Global Technology Operations LLC (n. d. Gesetzen des Staates Delaware) Vorrichtung und Verfahren zur Ausgabe von Informationen
JP2013043044A (ja) * 2011-08-26 2013-03-04 Canon Inc 瞬目計測装置、方法、及びプログラム
EP2564765B1 (en) 2011-09-02 2017-12-13 Volvo Car Corporation System and method for improving a performance estimation of an operator of a vehicle
WO2013039490A1 (en) * 2011-09-14 2013-03-21 Hewlett-Packard Development Company, L.P. Determining risk associated with a determined labor type for candidate personnel
DE102011083833A1 (de) * 2011-09-30 2013-04-04 Bayerische Motoren Werke Aktiengesellschaft Fahrzeug mit einer Vorrichtung zur Beeinflussung der Aufmerksamkeit des Fahrers und zur Ermittlung der Blickrichtung des Fahrers
DE102011083836A1 (de) * 2011-09-30 2013-04-04 Bayerische Motoren Werke Aktiengesellschaft Fahrzeug mir einer Vorrichtung zur Beeinflussung der Aufmerksamkeit des Fahrers und zur Ermittlung der Bediensicherheit
US20130089847A1 (en) * 2011-10-11 2013-04-11 John Allen Baker SYSTEMS AND METHODS FOR MONITORING eLEARNING SYSTEM DATA AND GENERATING RECOMMENDATIONS
DE102011085825A1 (de) * 2011-11-07 2013-05-08 Robert Bosch Gmbh Verfahren und Vorrichtung zum Warnen des Fahrers eines Kraftfahrzeugs bei mangelnder Aufmerksamkeit
DE102011117850B4 (de) * 2011-11-08 2020-12-03 Audi Ag Verfahren zum Betrieb eines Fahrzeugsystems eines Kraftfahrzeugs und Kraftfahrzeug
TW201337847A (zh) * 2012-03-15 2013-09-16 Utechzone Co Ltd 具有照明光源之車用眼控裝置
ES2589000T3 (es) * 2012-04-24 2016-11-08 Universitat De Barcelona Sistema y procedimiento de medir la atención
CN102723003B (zh) * 2012-05-28 2015-01-07 华为终端有限公司 阅读状态提醒的方法和移动终端
CN102682598B (zh) * 2012-05-31 2014-03-26 山东交通学院 一种能够消除振荡的交通信息发布方法
JP5533938B2 (ja) * 2012-06-01 2014-06-25 株式会社デンソー 運転能力低下判定装置
DE102012215397A1 (de) * 2012-08-30 2014-03-06 Robert Bosch Gmbh Interaktive Aufmerksamkeitssteigerung
DE112012006975T5 (de) * 2012-10-04 2015-08-06 Mitsubishi Electric Corporation Fahrzeugbordinformations -Verarbeitungsvorrichtung
WO2014062107A1 (en) * 2012-10-19 2014-04-24 Autoliv Development Ab Driver attentiveness detection method and device
CN102915193B (zh) * 2012-10-24 2015-04-01 广东欧珀移动通信有限公司 一种网页浏览方法、装置及智能终端
DE102012219508A1 (de) * 2012-10-25 2014-04-30 Robert Bosch Gmbh Verfahren und Vorrichtung zur Fahrerzustandserkennung
US20140278629A1 (en) * 2013-03-12 2014-09-18 PayrollHero.com Pte. Ltd. Method for employee parameter tracking
US9141583B2 (en) * 2013-03-13 2015-09-22 Ford Global Technologies, Llc Method and system for supervising information communication based on occupant and vehicle environment
US9751534B2 (en) 2013-03-15 2017-09-05 Honda Motor Co., Ltd. System and method for responding to driver state
US8954340B2 (en) * 2013-03-15 2015-02-10 State Farm Mutual Automobile Insurance Company Risk evaluation based on vehicle operator behavior
US10499856B2 (en) 2013-04-06 2019-12-10 Honda Motor Co., Ltd. System and method for biological signal processing with highly auto-correlated carrier sequences
JP5842857B2 (ja) * 2013-04-08 2016-01-13 株式会社デンソー 覚醒度改善装置
FI124068B (en) * 2013-05-03 2014-02-28 Jyvaeskylaen Yliopisto Procedure for improving driving safety
US20140358423A1 (en) * 2013-05-29 2014-12-04 Sony Corporation Method and apparatus for automatically warning driver to take a break
IN2013MU02083A (ja) * 2013-06-19 2015-07-10 Tata Consultancy Services Ltd
CN104249370B (zh) * 2013-06-27 2016-05-11 比亚迪股份有限公司 一种车载智能机器人的控制方法、控制装置及控制系统
CN103315754B (zh) * 2013-07-01 2015-11-25 深圳市飞瑞斯科技有限公司 一种疲劳检测方法及装置
DE102013013869B4 (de) * 2013-08-20 2019-06-19 Audi Ag Verfahren zum Betrieb eines Fahrerassistenzsystems zur Warnung vor zu großer Ablenkung und Kraftfahrzeug
US9501693B2 (en) * 2013-10-09 2016-11-22 Honda Motor Co., Ltd. Real-time multiclass driver action recognition using random forests
US9881221B2 (en) 2013-10-24 2018-01-30 Conduent Business Services, Llc Method and system for estimating gaze direction of vehicle drivers
WO2015060874A1 (en) * 2013-10-25 2015-04-30 Empire Technology Development Llc Operator alertness monitor
US20150123820A1 (en) * 2013-11-04 2015-05-07 Airbus S.A.S. Systems and methods for detecting pilot over focalization
CN105723431B (zh) * 2013-11-12 2019-02-05 三菱电机株式会社 驾驶辅助图像生成装置、显示装置、显示系统及生成方法
JP6044516B2 (ja) * 2013-11-12 2016-12-14 株式会社デンソー 運転支援装置
KR102113767B1 (ko) * 2013-11-28 2020-05-21 현대모비스 주식회사 운전자 상태 감지 장치 및 그 방법
US10417486B2 (en) 2013-12-30 2019-09-17 Alcatel Lucent Driver behavior monitoring systems and methods for driver behavior monitoring
US9135849B2 (en) 2014-01-31 2015-09-15 International Business Machines Corporation Variable operating mode HMD application management based upon crowd determined distraction
JP5967116B2 (ja) * 2014-02-27 2016-08-10 株式会社デンソー 車載システム、情報処理装置、及びプログラム
CN106033638A (zh) * 2015-03-19 2016-10-19 鸿富锦精密工业(武汉)有限公司 智能提醒系统及智能提醒方法
CN104008664B (zh) * 2014-04-18 2017-03-01 小米科技有限责任公司 路况信息获取方法及相关装置
JP5866567B2 (ja) * 2014-05-26 2016-02-17 パナソニックIpマネジメント株式会社 集中度の評価装置、プログラム
CN106471556B (zh) * 2014-06-23 2021-11-16 株式会社电装 驾驶员的驾驶不能状态检测装置
US10475127B1 (en) 2014-07-21 2019-11-12 State Farm Mutual Automobile Insurance Company Methods of providing insurance savings based upon telematics and insurance incentives
DE102014216208A1 (de) * 2014-08-14 2016-02-18 Robert Bosch Gmbh Verfahren und eine Vorrichtung zum Bestimmen einer Reaktionszeit eines Fahrzeugführers
US10377303B2 (en) * 2014-09-04 2019-08-13 Toyota Motor Engineering & Manufacturing North America, Inc. Management of driver and vehicle modes for semi-autonomous driving systems
US9747812B2 (en) 2014-10-22 2017-08-29 Honda Motor Co., Ltd. Saliency based awareness modeling
US10524716B2 (en) 2014-11-06 2020-01-07 Maven Machines, Inc. System for monitoring vehicle operator compliance with safe operating conditions
DE102014224120B4 (de) 2014-11-26 2022-01-05 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zum Ausgeben von Audiobeiträgen für ein Fahrzeug
US10009738B2 (en) 2014-12-23 2018-06-26 Palo Alto Research Center Incorporated System and method for determining an appropriate time for providing a message to a driver
US10099608B2 (en) * 2015-01-16 2018-10-16 Ford Global Technologies, Llc Haptic vehicle alert based on wearable device
DE102015201456B4 (de) * 2015-01-28 2016-12-15 Volkswagen Aktiengesellschaft Verfahren und System zur Ausgabe einer Warnmeldung in einem Fahrzeug
KR101646449B1 (ko) * 2015-02-12 2016-08-05 현대자동차주식회사 시선 인식 시스템 및 방법
CN104636890B (zh) * 2015-03-13 2021-06-29 中国民航大学 一种空中交通管制员工作负荷测量方法
JP2016173651A (ja) * 2015-03-16 2016-09-29 株式会社デンソーアイティーラボラトリ ドライバ状態改善支援装置及びドライバ状態改善支援方法
CN104680714A (zh) * 2015-03-24 2015-06-03 北京嘀嘀无限科技发展有限公司 用于向用户发送提醒的方法及系统
WO2016156462A1 (en) * 2015-03-31 2016-10-06 Philips Lighting Holding B.V. Lighting system and method for improving the alertness of a person
US20160297362A1 (en) * 2015-04-09 2016-10-13 Ford Global Technologies, Llc Vehicle exterior side-camera systems and methods
US10328852B2 (en) * 2015-05-12 2019-06-25 University Of North Dakota Systems and methods to provide feedback to pilot/operator by utilizing integration of navigation and physiological monitoring
CN104898834A (zh) * 2015-05-18 2015-09-09 百度在线网络技术(北京)有限公司 行为状态的调整方法及装置
CN104905802A (zh) * 2015-06-05 2015-09-16 张程 一种测量注意力的方法和装置
US10475299B2 (en) 2015-07-20 2019-11-12 Banner Engineering Corporation Modular indicator
US9997031B2 (en) 2015-07-20 2018-06-12 Banner Engineering Corporation Modular indicator
CN105011952B (zh) * 2015-08-07 2018-03-16 北京环度智慧智能技术研究所有限公司 驾驶员极速测评系统及方法
US9771082B2 (en) 2015-08-13 2017-09-26 International Business Machines Corporation Reducing cognitive demand on a vehicle operator by generating passenger stimulus
JP6358212B2 (ja) * 2015-09-17 2018-07-18 トヨタ自動車株式会社 車両用覚醒制御システム
JP6515764B2 (ja) * 2015-09-28 2019-05-22 株式会社デンソー 対話装置及び対話方法
WO2017100167A1 (en) * 2015-12-06 2017-06-15 Voicebox Technologies Corporation System and method of conversational adjustment based on user's cognitive state and/or situational state
CN105708480A (zh) * 2016-01-26 2016-06-29 北京航空航天大学 基于检测反应任务的驾驶员注意力测试装置
DE102016202966A1 (de) * 2016-02-25 2017-08-31 Bayerische Motoren Werke Aktiengesellschaft Akustische Wiedergabe eines digitalen Audio-Mediums in einem Kraftfahrzeug
DE102016202968B4 (de) 2016-02-25 2024-05-02 Bayerische Motoren Werke Aktiengesellschaft Akustische Wiedergabe eines digitalen Audio-Mediums in einem Kraftfahrzeug
FR3048544B1 (fr) * 2016-03-01 2021-04-02 Valeo Comfort & Driving Assistance Dispositif et methode de surveillance d'un conducteur d'un vehicule automobile
CN105725995B (zh) * 2016-04-19 2019-10-25 北京理工大学 一种驾驶分心行为的检测系统
CN105894855A (zh) * 2016-04-22 2016-08-24 乐视控股(北京)有限公司 危险驾驶的提示方法及装置
JP6790440B2 (ja) * 2016-04-27 2020-11-25 株式会社デンソー 運転支援装置
JP6694649B2 (ja) * 2016-07-07 2020-05-20 国立研究開発法人産業技術総合研究所 生理状態判定装置、生理状態判定方法、生理状態判定装置用プログラムおよび、生理状態判定システム
US9809165B1 (en) 2016-07-12 2017-11-07 Honda Motor Co., Ltd. System and method for minimizing driver distraction of a head-up display (HUD) in a vehicle
EP3500466A2 (en) 2016-08-19 2019-06-26 Massachusetts Institute of Technology Systems and methods for using an attention buffer to improve resource allocation management
JP2019535089A (ja) 2016-08-19 2019-12-05 マサチューセッツ インスティテュート オブ テクノロジー 視覚配分管理を提供するシステムおよび方法
CN106361357B (zh) * 2016-08-30 2020-04-28 西南交通大学 驾驶能力的测试方法与系统
US10093322B2 (en) 2016-09-15 2018-10-09 International Business Machines Corporation Automatically providing explanations for actions taken by a self-driving vehicle
CN109890662B (zh) * 2016-11-11 2022-03-15 本田技研工业株式会社 车辆控制系统、车辆控制方法及存储介质
DE102016014383A1 (de) * 2016-12-02 2018-06-07 Lucas Automotive Gmbh Erweitertes Fahreraufmerksamkeitsmodul für Fahrerassistenzsysteme
EP3859495B1 (en) * 2016-12-06 2023-05-10 Vuelosophy Inc. Systems and methods for tracking motion and gesture of heads and eyes
JP2018102617A (ja) * 2016-12-27 2018-07-05 オムロン株式会社 感情推定装置、方法およびプログラム
US10059336B2 (en) 2017-01-06 2018-08-28 Toyota Research Institute, Inc. Systems and methods for dynamically adjusting a vehicle trajectory according to deviations of a driver from expected inputs
JP6834578B2 (ja) * 2017-02-22 2021-02-24 トヨタ自動車株式会社 車両用健康診断装置
JP2018142258A (ja) * 2017-02-28 2018-09-13 オムロン株式会社 生産管理装置、方法およびプログラム
WO2018158704A1 (en) * 2017-02-28 2018-09-07 Omron Corporation Work management apparatus, method, and program
JP2018142259A (ja) * 2017-02-28 2018-09-13 オムロン株式会社 作業管理装置、方法およびプログラム
WO2018158702A1 (en) * 2017-02-28 2018-09-07 Omron Corporation Production management apparatus, method, and program
DE102017206485A1 (de) * 2017-04-18 2018-10-18 Robert Bosch Gmbh Vorrichtung und Verfahren zur Steuerung eines Fahrzeugs
US10134279B1 (en) 2017-05-05 2018-11-20 Toyota Motor Engineering & Manufacturing North America, Inc. Systems and methods for visualizing potential risks
CN107161152A (zh) * 2017-05-24 2017-09-15 成都志博科技有限公司 车道偏移监测的驾驶员检测系统
CN109094568B (zh) * 2017-06-20 2022-05-03 奥迪股份公司 驾驶精力付出评估系统和方法
WO2019028798A1 (zh) * 2017-08-10 2019-02-14 北京市商汤科技开发有限公司 驾驶状态监控方法、装置和电子设备
DE102017009353A1 (de) 2017-10-09 2019-04-11 Daimler Ag Varfahran zur Ansteuerung von Fahrzeugfunktion
US10748426B2 (en) 2017-10-18 2020-08-18 Toyota Research Institute, Inc. Systems and methods for detection and presentation of occluded objects
JP6965727B2 (ja) * 2017-12-21 2021-11-10 株式会社デンソー 居眠り警報装置
CN109979594A (zh) * 2017-12-28 2019-07-05 北京京东尚科信息技术有限公司 数据处理方法及其系统、计算机系统和可读存储介质
EP3576074A1 (en) * 2018-06-01 2019-12-04 Volvo Car Corporation Method and system for assisting drivers to drive with precaution
US10915769B2 (en) 2018-06-04 2021-02-09 Shanghai Sensetime Intelligent Technology Co., Ltd Driving management methods and systems, vehicle-mounted intelligent systems, electronic devices, and medium
CN109002757A (zh) * 2018-06-04 2018-12-14 上海商汤智能科技有限公司 驾驶管理方法和系统、车载智能系统、电子设备、介质
JP6626549B1 (ja) * 2018-09-20 2019-12-25 三菱ロジスネクスト株式会社 判定装置および判定方法
CN109278556A (zh) * 2018-11-19 2019-01-29 深圳和而泰智能控制股份有限公司 汽车安全装置
SE543249C2 (en) * 2018-12-12 2020-11-03 Lincoding Ab Alcolock device using mapping gaze and motion parameters
KR20200072999A (ko) 2018-12-13 2020-06-23 현대자동차주식회사 운전자 경고 출력 시스템 및 그 제어 방법
US11488399B2 (en) * 2018-12-19 2022-11-01 Magna Electronics Inc. Vehicle driver monitoring system for determining driver workload
EP3680141B1 (en) * 2018-12-28 2023-05-10 The Hi-Tech Robotic Systemz Ltd System and method for engaging a driver during autonomous driving mode
US11364929B2 (en) 2019-01-04 2022-06-21 Toyota Research Institute, Inc. Systems and methods for shared control of a vehicle
EP3730331B1 (en) * 2019-04-26 2023-03-08 Zenuity AB Method and device for controlling a driver assistance
TWI749323B (zh) * 2019-04-30 2021-12-11 先進光電科技股份有限公司 行動載具輔助系統
US10759441B1 (en) * 2019-05-06 2020-09-01 Cambridge Mobile Telematics Inc. Determining, scoring, and reporting mobile phone distraction of a driver
US11383720B2 (en) * 2019-05-31 2022-07-12 Lg Electronics Inc. Vehicle control method and intelligent computing device for controlling vehicle
US11255685B2 (en) 2019-08-15 2022-02-22 International Business Machines Corporation Real-time route determination based on localized information
US11267482B2 (en) 2019-10-11 2022-03-08 International Business Machines Corporation Mitigating risk behaviors
JP7276082B2 (ja) * 2019-11-11 2023-05-18 マツダ株式会社 運転者状態推定装置
AU2019369206A1 (en) 2019-12-16 2021-07-01 Beijing Didi Infinity Technology And Development Co., Ltd. Systems and methods for distinguishing a driver and passengers in an image captured inside a vehicle
EP4076191A4 (en) * 2019-12-17 2024-01-03 Indian Institute of Science SYSTEM AND METHOD FOR MONITORING THE COGNITIVE LOAD OF A DRIVER OF A VEHICLE
US11707971B2 (en) * 2019-12-20 2023-07-25 Bayerische Motoren Werke Aktiengesellschaft Method, apparatus, and program for delivering a scent alert
US20230061784A1 (en) * 2020-01-29 2023-03-02 NetraDyne, Inc. Combination alerts
KR20220000536A (ko) * 2020-06-26 2022-01-04 현대자동차주식회사 차량 주행 제어 장치 및 방법
DE102020208203A1 (de) 2020-07-01 2022-01-05 Robert Bosch Gesellschaft mit beschränkter Haftung Verfahren zum Überwachen eines Fahrzeuginnenraumes eines Fahrzeugs
CN111976734A (zh) * 2020-08-28 2020-11-24 陕西科技大学 一种监测驾驶员规范驾驶的方法及系统
US20220392261A1 (en) * 2021-06-04 2022-12-08 Rockwell Collins, Inc. Pilot safety system with context-sensitive scan pattern monitoring and alerting
US11861916B2 (en) 2021-10-05 2024-01-02 Yazaki Corporation Driver alertness monitoring system
US11840145B2 (en) * 2022-01-10 2023-12-12 GM Global Technology Operations LLC Driver state display
US20230373494A1 (en) * 2022-05-17 2023-11-23 Michael Phelan Driver authentication system and method for monitoring and controlling vehicle usage

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS6412503U (ja) * 1987-07-13 1989-01-23
US5465079A (en) * 1992-08-14 1995-11-07 Vorad Safety Systems, Inc. Method and apparatus for determining driver fitness in real time
US5402109A (en) * 1993-04-29 1995-03-28 Mannik; Kallis H. Sleep prevention device for automobile drivers
GB2285681A (en) * 1994-01-07 1995-07-19 Robert Joseph Terry Sleep warning-alarm spectacle frames
US5585785A (en) * 1995-03-03 1996-12-17 Gwin; Ronnie Driver alarm
US5689241A (en) * 1995-04-24 1997-11-18 Clarke, Sr.; James Russell Sleep detection and driver alert apparatus
US5570698A (en) * 1995-06-02 1996-11-05 Siemens Corporate Research, Inc. System for monitoring eyes for detecting sleep behavior
JPH09267660A (ja) * 1996-04-01 1997-10-14 Mitsubishi Motors Corp 車両用覚醒度情報出力装置
JP3183161B2 (ja) * 1996-04-12 2001-07-03 三菱自動車工業株式会社 覚醒度推定装置
SE515699C2 (sv) * 1996-06-12 2001-09-24 Saab Automobile Signalindikeringsanordning samt förfarande för indikering av tillstånd i system i ett fordon
US6265978B1 (en) * 1996-07-14 2001-07-24 Atlas Researches, Ltd. Method and apparatus for monitoring states of consciousness, drowsiness, distress, and performance
JP3388101B2 (ja) * 1996-07-23 2003-03-17 三菱電機株式会社 覚醒低下警報装置
JPH10181379A (ja) * 1996-12-27 1998-07-07 Mitsubishi Electric Corp 覚醒判定装置および覚醒判定方法
JP3414191B2 (ja) * 1997-04-18 2003-06-09 日産自動車株式会社 車間距離警報装置
WO1998049028A1 (en) * 1997-04-25 1998-11-05 Applied Science Group, Inc. An alertness monitor
EP0908860A1 (en) * 1997-10-13 1999-04-14 Cebollas Y Derivados, S.L. Device for sensing the opening of the eyelids and the initial sleeping phase
US5900819A (en) * 1998-04-21 1999-05-04 Meritor Heavy Vehicle Systems, Llc Drowsy driver detection system
US6087941A (en) * 1998-09-01 2000-07-11 Ferraz; Mark Warning device for alerting a person falling asleep
US6091334A (en) * 1998-09-04 2000-07-18 Massachusetts Institute Of Technology Drowsiness/alertness monitor
FR2784887B1 (fr) * 1998-10-22 2001-01-19 Renault Systeme pour surveiller des yeux afin de detecter et de prevenir des baisses de vigilance d'un conducteur de vehicule
US6130617A (en) * 1999-06-09 2000-10-10 Hyundai Motor Company Driver's eye detection method of drowsy driving warning system
US6120461A (en) * 1999-08-09 2000-09-19 The United States Of America As Represented By The Secretary Of The Army Apparatus for tracking the human eye with a retinal scanning display, and method thereof
JP4163844B2 (ja) * 2000-06-29 2008-10-08 日産ディーゼル工業株式会社 車両の追突回避装置
AUPQ896000A0 (en) * 2000-07-24 2000-08-17 Seeing Machines Pty Ltd Facial image processing system
US6599243B2 (en) * 2001-11-21 2003-07-29 Daimlerchrysler Ag Personalized driver stress prediction using geographical databases

Also Published As

Publication number Publication date
EP2314207A1 (en) 2011-04-27
CN1627915A (zh) 2005-06-15
US6974414B2 (en) 2005-12-13
AU2003211065A1 (en) 2003-09-09
ES2392082T3 (es) 2012-12-04
WO2003070093A1 (en) 2003-08-28
JP2005517484A (ja) 2005-06-16
US20030181822A1 (en) 2003-09-25
EP1478268B1 (en) 2012-06-20
EP1478268A1 (en) 2004-11-24
EP2305106A1 (en) 2011-04-06
JP2011019921A (ja) 2011-02-03
BR0307760A (pt) 2006-04-04
CN100488443C (zh) 2009-05-20
EP2296008A1 (en) 2011-03-16
EP1478268A4 (en) 2008-05-14
JP4603264B2 (ja) 2010-12-22

Similar Documents

Publication Publication Date Title
JP5248558B2 (ja) 運転者注意負荷の監視と管理とを行なうシステムおよび方法
JP4841425B2 (ja) 運転者の行動解釈に基づいて自動車のサブシステムを制御する方法および機構
US11709488B2 (en) Manual control re-engagement in an autonomous vehicle
CA3083676C (en) Method and system for augmented alerting based on driver's state in hybrid driving
Baldwin et al. Perceived urgency mapping across modalities within a driving context
Baldwin et al. Loudness interacts with semantics in auditory warnings to impact rear-end collisions
JP2011180873A (ja) 運転支援装置、及び運転支援方法
Horberry et al. Human-centered design for an in-vehicle truck driver fatigue and distraction warning system
US11518305B2 (en) Techniques for generating vehicle-to-pedestrian (V2P) communications based on driver monitoring
US11556175B2 (en) Hands-free vehicle sensing and applications as well as supervised driving system using brainwave activity
EP1914106A2 (en) An attention management system and method
Arun et al. Hypovigilance warning system: A review on driver alerting techniques
JP2013182521A (ja) ネットワークシステムおよび検知システム
KR20090043221A (ko) 운전자 상태 맞춤형 차선 이탈 방지 경고 방법 및 시스템
WO2022258150A1 (en) Computer-implemented method of assisting a driver, computer program product, driving assistance system, and vehicle
Grover et al. Development of A Direct Driver Status Monitoring Assessment Scheme
US20240227833A1 (en) Determining risk for a user of an autonomous vehicle
Huysamen et al. Driver Availability Monitoring Systems (DAMS) Final Report
Zhang et al. Driver state assessment and driver support systems
Hickman et al. Guidelines on limiting distraction from visual displays (VDs) in vehicles
CN114132329A (zh) 一种驾驶员注意力保持方法及系统
JP2020095421A (ja) 情報提示システム、情報提示処理装置及びそのプログラム

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120508

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20120705

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20120710

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121101

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20121127

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130226

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130319

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130410

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160419

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees