JP2014518647A - 少なくとも1人の車両乗員を監視する方法及び装置、及び少なくとも1つのアシスタント装置を作動させるための方法 - Google Patents

少なくとも1人の車両乗員を監視する方法及び装置、及び少なくとも1つのアシスタント装置を作動させるための方法 Download PDF

Info

Publication number
JP2014518647A
JP2014518647A JP2014504169A JP2014504169A JP2014518647A JP 2014518647 A JP2014518647 A JP 2014518647A JP 2014504169 A JP2014504169 A JP 2014504169A JP 2014504169 A JP2014504169 A JP 2014504169A JP 2014518647 A JP2014518647 A JP 2014518647A
Authority
JP
Japan
Prior art keywords
vehicle
image
vehicle occupant
determined
range
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2014504169A
Other languages
English (en)
Inventor
ガリア・ヴァイトル
ラルフ・ヘアトヴィッヒ
ミヒャエル・シュラウフ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mercedes Benz Group AG
Original Assignee
Daimler AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daimler AG filed Critical Daimler AG
Publication of JP2014518647A publication Critical patent/JP2014518647A/ja
Pending legal-status Critical Current

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02416Detecting, measuring or recording pulse rate or heart rate using photoplethysmograph signals, e.g. generated by infrared radiation
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/16Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0872Driver physiology

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Veterinary Medicine (AREA)
  • Surgery (AREA)
  • Cardiology (AREA)
  • Medical Informatics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Biomedical Technology (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Social Psychology (AREA)
  • Physiology (AREA)
  • Psychiatry (AREA)
  • Hospice & Palliative Care (AREA)
  • Educational Technology (AREA)
  • Developmental Disabilities (AREA)
  • Child & Adolescent Psychology (AREA)
  • Psychology (AREA)
  • Traffic Control Systems (AREA)
  • Measuring Pulse, Heart Rate, Blood Pressure Or Blood Flow (AREA)
  • Emergency Alarm Devices (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Auxiliary Drives, Propulsion Controls, And Safety Devices (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

本発明は、車両(1)の少なくとも1人の車両乗員(2)を監視するための方法及び装置に関し、その際少なくとも1つの画像取込装置(3)を使用して車両乗員の画像(2)が取り込まれ、及び画像処理装置を使用して解析される。本発明に従い、取り込まれた画像の画像解析により車両乗員(2)の少なくとも1つの生命徴候が判定される。さらに、本発明は、車両(1)の少なくとも1つのアシスタント装置の作動方法に関する。
【選択図】図1

Description

本発明は、請求項1の前段の特徴に従った少なくとも1人の車両乗員を監視する方法、請求項8の前段の特徴に従った少なくとも1人の車両乗員を監視するための装置及び請求項9の前段の特徴に従った少なくとも1つのアシスタント装置を作動するための方法に関する。
従来技術では、特許文献1に記載されているように、車両運転者に警告する方法が公知である。その際車両センサーは危機的な状況を検出する。さらに、運転者の注意力を判定するが、その際にはカメラ装置によって運転者の画像が取り込まれ、画像が演算処理装置によって加工される。画像から運転者の注意力が判定されるが、その際には演算処理装置によって運転者の視線の方向が判定される。運転者の注意力が高いことが判定されると、警告の出力は行なわれない。複数の警告が同時に出力される場合、運転者の視線の方向にある危機的な状況を警告する第一の警告は、運転者の視線の方向外にある危機的な状況を警告する第二の警告の後で初めて出力される。
出願人の特許文献2には、その完全な内容がここに参照により援用されるが、疲労した車両の運転者を支援するための運転者アシスタントシステムが記載されている。この運転者アシスタントシステムは、運転者の疲労を検知するための疲労検知システムを含んでいる。疲労検知システムによって運転者の疲労が検知されると、車両の警告点滅灯がさらに別の道路使用者に警告するために作動される。
さらに、非特許文献1では、その完全な内容がここに参照により援用されるが、低解像度のビデオカメラを使用して、通常の室内照明条件下で検知された、人物の顔の動画像列に基づいて人物の心拍数が判定される方法が記載されている。その際、肌から反射される光の輝度の違いが測定され、解析される。まず顔の位置がカメラの視野内で同定され、ビデオ画像はそのカットが赤、緑、青の部分に細分化され分析される。心臓発作の間は血管中の圧力が高まるために、血管、特に動脈は軽く拡張している。この拡張は光吸収の増大の原因となり、そのために顔から反射される光の輝度の低下も招く。
欧州特許明細書第1182089B2号明細書 独国特許出願公開第102009016936A1号明細書
Ming-Zher Poh,Daniel J.McDuff and Rosalind W.Picard,"Non-contact, automated cardiac pulse measurements using videoimaging and blind source separation"Opt. Express 18、10762-10774(2010)
本発明の課題は、車両内の少なくとも1人の車両乗員を監視するための改善された方法と改善された装置、及び車両の少なくとも1つのアシスタント装置を作動するための改善された方法を提供することである。
この課題は発明に従い、請求項1の特徴を備えた、車両内の少なくとも1人の車両乗員を監視するための方法、請求項8の特徴を備えた、車両内の少なくとも1人の車両乗員を監視するための装置、請求項9の特徴を備えた、車両の少なくとも1つのアシスタント装置を作動するための方法によって解決される。
本発明の好ましい実施形態及び発展形態は、従属請求項に提示される。
車両内の少なくとも1人の車両乗員を監視するための方法では、少なくとも1つの画像取込装置を使用して車両乗員の画像が取り込まれ、及び画像処理装置を使用して解析される。
本発明によれば、取り込まれた画像の画像解析により車両乗員の少なくとも1つの生命徴候が判定される。このことは、車両乗員、例えば車両運転者の生命にかかわる状態(以後、生命状態という)を検出し、生命状態の悪化が評価されると、例えば車両のアシスタント装置の機能を作動させるというような適切な処理が実行されることを可能にし、それによって少なくとも潜在的な事故リスクに注意が促され、又は必要に応じて事故が回避され、救助が要請され及び/又は車両乗員の快適性が向上され、それによって生命状態が改善される。ここでは画像取込装置として、好ましくはすでに車両内に、例えばステアリングコラム範囲に取り付けられ、及び車両乗員、好ましくは車両運転者の方向を向いた画像取込装置が使用される。このような画像取込装置は、例えば車両内の車両運転者の注意力検知のために取り付けられている。この方法を実施するためには、例えばいわゆるCCDカメラのような低解像度のビデオカメラで十分である。専用の照明装置も不要で、車両では普通の、太陽光のような環境光で十分である。
適切には、生命徴候として特に脈拍数又は心拍数、及び/又は呼吸数、及び/又は心臓の圧送能力、及び/又は血圧、及び/又は車両乗員の血中酸素濃度、及び/又は車両乗員の自律的身体機能、特に自律神経系の機能が検出される。この生命徴候を使用して、車両乗員の現在の生命状態は十分正確に判定されることができ、それによって場合により例えば車両運転者などの車両乗員の不注意が、又は迫ってくるあるいはすでに生じている意識消失又は重度の健康問題が推測できる。有利には検出された生命徴候が車両内で記録され、保存され、その結果この記録は例えば非常事態において診療の際に提供されることができる。この記録は例えば病院又は救急センターへ自動で実行される緊急通報と共に送信されることができ、その結果迅速で適切な救助が実行され得る。
好ましくは少なくとも1つの生命徴候が、光吸収量及び/又は車両乗員の肌範囲の反射光輝度の検出により、及び/又はこの光吸収量及び/又はこの反射光輝度の変化を判定することにより検出される。心臓発作の間は血管中の圧力が高まるために、血管、特に動脈は軽く拡張している。この拡張は光吸収量の増大の原因となり、そのために肌の範囲から反射される光の輝度の低下も招く。時間の経過により肌の範囲の反射光の輝度が異なることから、生命徴候を、特に脈拍数を判定することができる。この方法は、光電式容積脈波記録法とも呼ばれる。本方法の基本は例えば非特許文献1に記載されており、その完全な内容がここに参照により援用される。
好ましくは画像処理中に少なくとも1つの、画像解析に適した範囲が各画像内で検索され、この範囲のみが解析される。この範囲は、車両乗員の十分大きな肌の範囲が撮影されている画像内の範囲である。好ましくは画像解析に適した範囲として、車両乗員の顔が含まれる画像が検索され及び解析される。なぜならこの範囲では十分大きく、解析可能な肌範囲が使用できるからであり、また例えば特に、注意力検知のために使用されている画像取込装置は、すでに車両内に取り付けられており、車両乗員、特に車両運転者の顔へ向けられているからである。本方法により、同時に複数の車両乗員の1つ又は複数の生命徴候を判定することが可能であり、その際車両乗員の顔が写っている画像範囲が判定され、及び別々に解析される。
適切には車両乗員の画像としてカラー画像、特にいわゆるRGB画像が取り込まれ、その際に画像解析に適した画像範囲が個々のカラーチャンネルに分割され、少なくとも1つの生命徴候を判定するために少なくとも1つのカラーチャンネルが解析される。例えば画像解析に適した範囲は、赤、緑、青の成分に、つまりカラーチャンネルに分割される。その際好ましくは特に緑の成分又はカラーチャンネルが解析される。なぜならこのカラーチャンネルにおいて、解析の結果の精度が最高であるからである。
好ましくは高速フーリエ変換を使用して、画像解析のために適した範囲のカラーチャンネルのスペクトル出力密度が判定される。判定されたスペクトル出力密度を使用して、時間の経過による肌の範囲の反射光の輝度の差が、及びそこから生命徴候が判定され得る。
このようにして判定された生命徴候は、車両乗員の状態の全体像が改善されて得られるようにするため、他の方法で判定された車両乗員の状態と組み合わせ得る。このようにして、例えば早期に及び適切なエラー率で車両運転者の疲労又は不注意が確認され得る。こうして例えば車両シート内のセンサーによって各車両乗員、特に車両運転者の動きを判定することができる。この動きから不安、ストレス又は疲労開始の兆しが示され得る。これには例えば判定された脈拍数を組み合わせることができ、それによってより適切な評価が得られる。
車両内の少なくとも1人の車両乗員を監視するための、特に車両内の少なくとも1人の車両乗員を監視するための方法を実施するための装置において、少なくとも1つの画像取込装置によって車両乗員の画像を取り込むことができ、画像処理装置を使用して解析可能である。発明に従い、画像取込装置を使用して取り込まれた画像の画像解析によって車両乗員の少なくとも1つの生命徴候が判定可能である。このことは、該装置を使って実行可能な、車両内の少なくとも1人の車両乗員を監視するための方法ですでに記述されているように、車両乗員、例えば車両運転者の生命状態を判定し、生命状態の悪化が検出されると、例えば車両のアシスタント装置の機能を作動させるというような適切な処理が実行されることを可能にし、それによって少なくとも潜在的な事故リスクに注意が促され、又は必要に応じて事故が回避され、救助が要請され及び/又は車両乗員の快適性が向上され、それによって生命状態が改善される。
車両の少なくとも1つのアシスタント装置を作動するための方法では、車両内の少なくとも1人の車両乗員を監視するための方法の実行下において、判定された生命徴候の値がこの生命徴候の所与の値又は値域から逸脱していると、本発明に従い、車両のアシスタント装置の少なくとも1つの機能が作動される。このようにして、車両乗員、特に車両運転者の生命徴候が悪化又は悪化しつつある場合には、アシスタント装置が支援しつつ介入して、例えば潜在的な事故リスクに注意が促され、又は必要に応じて事故が阻止され、救助が要請され及び/又は車両乗員の快適性が向上され、それによって生命兆候が改善される。
好ましくはアシスタント装置の機能として車両の操舵装置、制動装置及び/又はドライブトレインへの介入、及び/又は視覚的、聴覚的及び/又は触覚による警告装置が作動される。このようにして、車両は例えば出願人の特許文献2(その完全な内容がここに参照により援用される)に記載されているように、それによって対応する介入が車両の操舵装置、制動装置及び/又はドライブトレインに行なわれ、例えば自動的に路肩へと操舵され、そこで停車される。特に有利には、車両の操舵装置、制動装置及び/又はドライブトレインへの介入は、車両が自律的に最寄りの緊急設備、例えば最寄りの病院の緊急治療室まで制御されるように実施される。
別法として、又は追加的に、車両の警報装置、例えば外部の警告装置は、車両のハザードフラッシャー及び/又はホーンの形で作動されることができ、それによって他の道路使用者に警告され、及び/又は車室内の警告装置が作動されることができ、それによって車両乗員に警告され、例えば居眠りしている車両運転者が起こされ、又は他の車両乗員に対して車両運転者の生命状態が悪化した又は悪化していることの注意が促され、その結果他の車両乗員が例えば車両のステアリングホィール及び/又はハンドブレーキを操作することができ、それによって車両が制動され及び/又は路肩まで操舵される。
別法として、又は追加的に、適切にはアシスタント装置の機能として少なくとも1つの快適性機能及び/又は緊急通報機能が作動される。例えば判定された生命徴候が特に車両運転者の疲労を示している場合、快適性機能又は複数のこのような快適性機能の作動により、車両乗員の生命徴候が改善され得る。例えば車両シートのマッサージ機能、車室内ベンチレーション及び/又は車両のエアコン機能が作動されてよい。その際車両乗員の元気回復のために例えばエッセンシャルオイル又は他のリフレッシュ手段が車両の室内に提供されてよい。さらに、該当する車両乗員に視覚的、聴覚的及び/又は触覚による手段でその最新の生命状況に注意を促すことができ、好ましくは例えば休憩時間の挿入、定期的な運動、及び/又は十分な水分摂取などの適切な対抗措置の推奨と結びつけられる。車両乗員は、このようにして例えば必要な薬の服用に気づかされる。さらに、例えば生命徴候を使用してストレスレベルの高まりが検知されると、車両運転者を支援する及び/又は落ち着かせる車両の装置、例えば車両のナビゲーション装置又はオーディオ装置が、つまり例えばカーラジオが作動される。
それに加えて、車両乗員には迫っている健康リスク、例えば迫っている心血管性の痛みが警告され得る。その際特に有利には、車両乗員、例えば車両運転者の生命徴候が、より長い期間にわたって、例えば数日又は数週間にわたって判定され、その経過が分析され、その結果緩慢な悪化も判定され得る。特に高齢及び/又は健康を害している又は健康を損なった車両乗員、特に車両運転者は、それによってその安心感と健康状態が著しく向上する。加えて医学的な緊急事態においては、自動緊急通報が実行され、その際好ましくは検出された生命徴候が救急センター又は病院に伝えられ、その結果迅速で適切な医学的処置が実行され得る。このために、好ましくは車両の現在の位置データも判定され、緊急通報と共に伝えられる。
本発明の実施形態を図を使用して以下で詳細に説明する。
車両乗員と、車両乗員に向けられた画像取込装置を備えた車両の模式図である。
図1は車両乗員2を乗せた車両1の模式図であり、車両乗員に向けられた画像取込装置3を車両乗員の監視装置として備えている。車両乗員2を監視する方法では、画像取込装置3を使用して車両乗員2の画像が取り込まれ、例えば動画像列の形で、及び詳細には図示していない画像処理装置を使用して解析され、それにより、このようにして例えば車両乗員2の脈拍数又は心拍数、及び/又は呼吸数、及び/又は心臓の圧送能力、及び/又は血圧、及び/又は血中酸素濃度、及び/又は車両乗員2の自律的身体機能、特に自律神経系機能のような車両乗員2の少なくとも1つの生命徴候が判定できる。判定された車両乗員2の生命徴候を使用して、車両乗員2の生命状態及び生命状態の変化が判定され得る。
画像取込装置3は、好ましくは個々に示されているように、すでに車両1内に、例えばステアリングコラム範囲に取り付けられ、及び車両乗員2に、ここに示された例では車両運転者の方向を向いた画像取込装置3が使用される。監視方法を実施するためには、いわゆるCCDカメラのような低解像度のビデオカメラで十分である。専用の照明装置も不要で、車両1では普通の、太陽光のような環境光で十分である。
少なくとも1つの生命徴候が、光吸収量及び/又は車両乗員2の肌範囲の反射光輝度の検出により、及び/又はこの光吸収量及び/又はこの反射光輝度の変化を判定することにより検出される。心臓発作の間は血管中の圧力が高まるために、血管、特に動脈は軽く拡張している。この拡張は光吸収量の増大の原因となり、そのために肌の範囲から反射される光の輝度の低下も招く。時間の経過により肌の範囲の反射光の輝度が異なることから、車両乗員2の生命徴候を、特に脈拍数又は心拍数を判定することができる。この方法は、光電式容積脈波記録法とも呼ばれる。本方法の基本は例えば非特許文献1に記述されており、その完全な内容がここに参照により援用される。
好ましくは画像処理中に、適切な方法を使用して少なくとも1つの、画像解析に適した範囲が各画像内で検索され、この範囲のみが解析される。この範囲は、車両乗員2の十分大きな肌の範囲が撮影されている画像内の範囲である。好ましくは画像解析に適した範囲として、車両乗員2の顔が含まれる画像が検索され及び解析される。なぜならこの範囲では十分大きく、解析可能な肌範囲が使用できるからであり、また例えば特に、注意力検知のために使用されている画像取込装置3は、すでに車両1内に取り付けられており、車両乗員2、特に車両運転者の顔へ向けられているからである。
このような画像解析に適した範囲は、例えば画像内顔検出法を使用して見つけ出すことができる。本方法により、複数の車両乗員2が画像取込装置3によって取り込まれた場合に、同時に複数の車両乗員2の1つ又は複数の生命徴候を判定することが可能であり、その際車両乗員2の顔が写っている画像範囲が判定され、及び別々に解析される。
車両乗員の画像2として、適切にはカラー画像、特にいわゆるRGB画像が取り込まれ、その際に画像解析に適した画像範囲が個々の色成分又はカラーチャンネルに分割され、RGB画像では対応するRGBカラーチャンネルの赤、緑及び青であり、及び少なくとも1つの生命徴候を判定するために少なくとも1つのカラーチャンネルが解析される。その際好ましくは特に緑の成分又はカラーチャンネルが解析される。なぜならこのカラーチャンネルにおいて、解析された結果の精度が最高であるからである。
高速フーリエ変換を使用して、画像解析のために適した範囲のカラーチャンネルのスペクトル出力密度が判定される。判定されたスペクトル出力密度を使用して、時間の経過による肌の範囲の反射光の輝度の差が、及びそこから車両乗員2の生命徴候が判定され得る。
本方法は、画像取込装置3の解像度が低くてよいこと、及び通常の環境好条件下で、つまり追加の専用光源なしであることから、非常に簡単で安価に車両1で実行及び実施できる。加えて本方法は、異なった肌の色に対して、及び画像撮影中の車両乗員2及び運動に対しても非常に信頼性が高い。生命徴候の判定は、車両乗員2の生命状態及び生命状態の変化を、判定された生命徴候に基づいて十分に高い精度で特定可能にするために十分に正確であり、その結果例えば急な非常事態を示しかつ医療支援が必要である生命状態が、又は例えば車両1の安全運転に与え得る影響が、高い信頼性で認識できる。
本監視方法又はこのようにして判定された車両乗員2、特に車両運転者の生命徴候は、車両1の少なくとも1つのアシスタント装置を作動するための方法で使用することができる。その際、判定された生命徴候の値が所与の値又は値域から逸脱していると、少なくとも1つのアシスタント装置の機能が作動される。
このようにして、車両乗員2、特に車両運転者の生命徴候が悪化又は悪化しつつある場合には、アシスタント装置が支援しつつ介入して、それにより例えば事故が阻止され、救助が要請され及び/又は車両乗員2の快適性が向上され、それによって生命状態が改善される。
好ましくはアシスタント装置の機能として車両1の操舵装置、制動装置及び/又はドライブトレインへの介入、及び/又は視覚的、聴覚的及び/又は触覚による警告装置が作動される。このようにして、車両1は例えば出願人の特許文献2(その完全な内容がここに参照により援用される)に記載されているように、それによって対応する介入が車両1の操舵装置、制動装置及び/又はドライブトレインに行なわれ、例えば自動的に路肩へと操舵され、そこで停車される。特に有利には、車両1の操舵装置、制動装置及び/又はドライブトレインへの介入は、車両1が自律的に最寄りの緊急設備、例えば最寄りの病院緊急室まで制御されるように実施される。
別法として、又は追加的に、車両1の警報装置、例えば外部の警告装置は、車両1のハザードフラッシャー及び/又はホーンの形で作動されることができ、それによって他の道路使用者に警告され、及び/又は車室内の警告装置が作動されることができ、それによって車両乗員2に警告され、例えば居眠りしている車両運転者が起こされ、又は他の車両乗員2に対して車両運転者の生命状態が悪化したことの注意が促され、この生命状態が場合によって健康状態の悪化を示し、その結果他の車両乗員が例えば車両1のステアリングホィール及び/又はハンドブレーキを操作することができ、それによって車両1が制動され及び/又は路肩まで操舵される。
別法として、又は追加的に、適切にはアシスタント装置の機能として少なくとも1つの快適性機能及び/又は緊急通報機能が作動される。例えば判定された生命徴候が特に車両運転者の疲労を示している場合、快適性機能又は複数のこのような快適性機能の作動により、車両乗員2の生命徴候が改善され得る。
例えば車両シートのマッサージ機能、車室内ベンチレーション及び/又は車両1のエアコン機能が作動させられてよい。その際車両乗員2の元気回復のために例えばエッセンシャルオイル又は他のリフレッシュ手段が車両1の室内に提供されてよい。さらに、該当する車両乗員2に視覚的、聴覚的及び/又は触覚による手段でその最新の生命状況に注意を促すことができ、好ましくは例えば休憩時間の挿入、定期的な運動、及び/又は十分な水分摂取などの適切な対抗措置の推奨と結びつけられる。車両乗員2は、このようにして例えば必要な薬の服用に気づかされる。さらに、例えば生命徴候を使用してストレスレベルの高まりが検知されると、車両運転者を支援する及び/又は落ち着かせる車両1の装置、例えば車両1のナビゲーション装置又はオーディオ装置が、つまり例えばカーラジオが作動される。
それに加えて、車両乗員2には迫っている健康リスク、例えば迫っている心血管性の痛みが警告され得る。特に高齢及び/又は健康を害している又は健康を損なった車両乗員2、特に、とりわけ車両運転者は、それによって安心感と快適さが著しく向上する。加えて医学的な緊急事態においては、自動緊急通報が実行され、その際好ましくは検出され保存された生命徴候が救急センター又は病院に伝えられ、その結果迅速で適切な医学的処置が実行され得る。このために、好ましくは車両1の現在の位置データも判定され、緊急通報と共に伝えられる。
監視方法を使用して判定された生命徴候は、車両乗員2の状態の改善された全体像が得られるようにするために、他の方法で判定された車両乗員2の状態と組み合わせ得る。このようにして、例えば早期に及び適切なエラー率で車両運転者の疲労又は不注意が確認され得る。こうして例えば車両シート内のセンサーによって各車両乗員2、特に車両運転者の動きを検出することができる。この動きから不安、ストレス又は疲労開始の兆しが示され得る。加えて、不注意検知機能が元々車両1内に取り付けられているため、画像取込装置は不注意検知機能としても使用することができる。このように判定された車両乗員2の追加の値は、例えば判定された脈拍数と組み合わせられ、それによってより適切に判定された車両乗員2の生命状態を得ることができる。
例えばより信頼性の高い解析を得るために、画像取込装置として単純な白黒カメラを使用してよい。暗い道路区間で又は暗闇の中で生命徴候を検出するために、画像取込装置として赤外線カメラを使用してよい。赤外線領域への切替えは、自動的に、自動ヘッドライトコントロールに使用されているような輝度検出を使用して行なうことができる。
すでに言及したように、好ましくは特に緑の成分又はカラーチャンネルが解析される。なぜならこのカラーチャンネルにおいて、判定結果の精度が最高であるからである。カラーカメラを使用する場合、画像信号の3つすべてのRGBコンポーネントが重み付けされて解析されると、信頼性が高まる。なぜなら3つすべてのRGBチャンネルが、測定された生命徴候に関する情報を重複して持っているからである。
本実施方法の利点は、顔面部の1つの同じ画像信号によって脈拍も呼吸数も判定できることにある。呼吸数を測定するためにカメラが胸部で旋回する必要はない。一般的に、顔面部、胸部又は他の身体部位の間でカメラの方向を変えることは不要である。
すでに言及したように専用の照明装置は不要である。なぜなら車両では普通の、例えば太陽光のような環境光で十分であるからである。実現性分析は、例えば橋の下やトンネルの中のような、濃い影になった道路区間のような暗い道路区分を走行する場合に画像列が欠如しても、それが短時間(数分)である場合は日中の運転者の状態の全体解析に対して悪影響はないことを示している。日中で長時間暗い場合又は夜間の場合、画像処理用のデータを撮影するために赤外線カメラを使用する必要がある。このようにして生成された画像は、白黒カメラと同じ品質である。しかしこのことは制約ではない。なぜなら本方法はまた白黒画像を使って処理しても信頼性が高いからである。
専門用語について:「高速フーリエ変換」は「Fast−Fourier−Transform(FFT)」という名称でよく知られている。
すでに言及したように、前述の方法により、車両乗員例えば車両運転者の不注意が、又は迫ってくるあるいはすでに生じている意識消失又は重度の健康問題が推測できる。さらに、生命データの非接触式の測定により、a)頻脈、徐脈、短心症、b)心拍変動(安静時、ストレス時、歓喜時)及びc)ウイルス感染傾向の検知(肌の温度、脈拍、呼吸数)の診断値が得られる。
生命徴候の判定された値が所与の値又は値域から逸脱していると、少なくとも1つのアシスタント装置の機能が作動されることが記述されている。しかし判定された生命徴候を他の方法で判定された車両乗員の値(注意力、不安、疲労、ストレスなど)と組み合わせることも可能であり、少なくとも1つの快適性機能、緊急通報機能の作動又は対抗措置の推奨のために使用される。このような推奨は、休憩時間の挿入、定期的な運動、及び/又は十分な水分摂取、又は必要な薬の服用であってよい。

Claims (10)

  1. 車両(1)内の少なくとも1人の車両乗員(2)を監視するための方法であって、少なくとも1つの画像取込装置(3)を使用して前記車両乗員(2)の画像が取り込まれ、及び画像処理装置を使用して解析される方法において、取り込まれた画像の画像解析によって前記車両乗員(2)の少なくとも1つの生命徴候が判定されることを特徴とする方法。
  2. 生命徴候として脈拍数、及び/又は呼吸数、及び/又は心臓の圧送能力、及び/又は血圧、及び/又は前記車両乗員(2)の血中酸素濃度、及び/又は前記車両乗員(2)の自律的身体機能が判定されることを特徴とする請求項1に記載の方法。
  3. 少なくとも1つの生命徴候が、光吸収量及び/又は前記車両乗員(2)の肌範囲の反射光輝度の検出により、及び/又はこの光吸収量及び/又はこの反射光輝度の変化を判定することにより検出されることを特徴とする請求項1又は2に記載の方法。
  4. 画像処理中に、少なくとも1つの、画像解析に適した範囲が各画像内で検索され、この範囲のみが解析されることを特徴とする請求項1〜3のうちのいずれか一項に記載の方法。
  5. 画像解析に適した範囲が各画像内で検索され及び解析され、該範囲が前記車両乗員(2)の顔を含んでいることを特徴とする請求項4に記載の方法。
  6. 前記車両乗員(2)の画像としてカラー画像が取り込まれ、その際画像解析に適した画像範囲が個々のカラーチャンネルに分割され及び少なくとも1つの生命徴候を判定するために少なくとも1つのカラーチャンネルが解析されることを特徴とする請求項4又は5に記載の方法。
  7. 高速フーリエ変換を使用して、画像解析のために適した範囲のカラーチャンネルのスペクトル出力密度が判定されることを特徴とする請求項6に記載の方法。
  8. 車両内(1)の少なくとも1人の車両乗員(2)を監視するための装置であって、少なくとも1つの画像取込装置(3)を使用して前記車両乗員(2)の画像が取り込まれ、及び画像処理装置を使用して解析される装置において、前記画像取込装置(3)を使用して、取り込まれた画像の画像解析によって前記車両乗員(2)の少なくとも1つの生命徴候が判定されることを特徴とする装置。
  9. 請求項1〜7のうちのいずれか一項に記載の方法を用いて、前記車両(1)の少なくとも1つのアシスタント装置を作動するための方法であって、車両内の少なくとも1人の車両乗員を監視するための方法の実行下において判定された生命徴候の値がこの生命徴候のための所与の値又は値域から逸脱している場合に、前記アシスタント装置の少なくとも1つの機能が作動されることを特徴とする方法。
  10. 前記アシスタント装置の機能として前記車両(1)の操舵装置、制動装置及び/又はドライブトレインへの介入、及び/又は視覚的、聴覚的及び/又は触覚による警告装置、及び/又は少なくとも1つの快適性機能及び/又は緊急通報機能が作動されることを特徴とする請求項9に記載の方法。
JP2014504169A 2011-04-12 2011-12-09 少なくとも1人の車両乗員を監視する方法及び装置、及び少なくとも1つのアシスタント装置を作動させるための方法 Pending JP2014518647A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102011016772.2A DE102011016772B4 (de) 2011-04-12 2011-04-12 12.04.2021Verfahren und Vorrichtung zur Überwachung zumindest eines Fahrzeuginsassen und Verfahren zum Betrieb zumindest einer Assistenzvorrichtung
DE102011016772.2 2011-04-12
PCT/EP2011/006209 WO2012139619A1 (de) 2011-04-12 2011-12-09 Verfahren und vorrichtung zur überwachung zumindest eines fahrzeuginsassen und verfahren zum betrieb zumindest einer assistenzvorrichtung

Publications (1)

Publication Number Publication Date
JP2014518647A true JP2014518647A (ja) 2014-08-07

Family

ID=45350730

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2014504169A Pending JP2014518647A (ja) 2011-04-12 2011-12-09 少なくとも1人の車両乗員を監視する方法及び装置、及び少なくとも1つのアシスタント装置を作動させるための方法

Country Status (4)

Country Link
US (1) US10140532B2 (ja)
JP (1) JP2014518647A (ja)
DE (1) DE102011016772B4 (ja)
WO (1) WO2012139619A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018074148A1 (ja) * 2016-10-19 2018-04-26 マツダ株式会社 運転支援装置
JP2018065445A (ja) * 2016-10-19 2018-04-26 マツダ株式会社 運転支援装置
JP2021531068A (ja) * 2018-07-26 2021-11-18 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 対象の脈拍を検出する装置、システム及び方法

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102011110486A1 (de) * 2011-08-17 2013-02-21 Daimler Ag Verfahren und Vorrichtung zur Überwachung zumindest eines Fahrzeuginsassen und Verfahren zum Betrieb zumindest einer Assistenzvorrichtung
FR2998159B1 (fr) * 2012-11-22 2016-01-01 Peugeot Citroen Automobiles Sa Procede et systeme de gestion du stress d'un conducteur de vehicule automobile
DE102013200777A1 (de) * 2013-01-18 2014-07-24 Ford Global Technologies, Llc Verfahren und Vorrichtung für Fahrzeugzugangskontrolle
US20150379362A1 (en) * 2013-02-21 2015-12-31 Iee International Electronics & Engineering S.A. Imaging device based occupant monitoring system supporting multiple functions
EP2772189A1 (en) * 2013-02-28 2014-09-03 Koninklijke Philips N.V. Apparatus and method for determining vital sign information from a subject
US11334066B2 (en) * 2013-03-27 2022-05-17 Pixart Imaging Inc. Safety monitoring apparatus and method thereof for human-driven vehicle
US8874301B1 (en) 2013-07-09 2014-10-28 Ford Global Technologies, Llc Autonomous vehicle with driver presence and physiological monitoring
WO2015018675A1 (en) * 2013-08-07 2015-02-12 Koninklijke Philips N.V. Monitoring system and method for monitoring the hemodynamic status of a subject
DE102014206678A1 (de) * 2014-04-07 2015-10-08 Bayerische Motoren Werke Aktiengesellschaft Kontinuierliche Blutdruckmessung bei Fahrzeugführern
US20150294547A1 (en) * 2014-04-15 2015-10-15 Denso Corporation Driver condition detection apparatus, driving assistance apparatus, driver condition detection method, and driving assistance method
US10373259B1 (en) 2014-05-20 2019-08-06 State Farm Mutual Automobile Insurance Company Fully autonomous vehicle insurance pricing
US10599155B1 (en) 2014-05-20 2020-03-24 State Farm Mutual Automobile Insurance Company Autonomous vehicle operation feature monitoring and evaluation of effectiveness
US9715711B1 (en) 2014-05-20 2017-07-25 State Farm Mutual Automobile Insurance Company Autonomous vehicle insurance pricing and offering based upon accident risk
US9972054B1 (en) 2014-05-20 2018-05-15 State Farm Mutual Automobile Insurance Company Accident fault determination for autonomous vehicles
US11669090B2 (en) 2014-05-20 2023-06-06 State Farm Mutual Automobile Insurance Company Autonomous vehicle operation feature monitoring and evaluation of effectiveness
US10475127B1 (en) 2014-07-21 2019-11-12 State Farm Mutual Automobile Insurance Company Methods of providing insurance savings based upon telematics and insurance incentives
US10831204B1 (en) 2014-11-13 2020-11-10 State Farm Mutual Automobile Insurance Company Autonomous vehicle automatic parking
FR3029157B1 (fr) * 2014-12-02 2018-03-02 Renault S.A.S. Procede d'assistance a au moins un occupant d'un vehicule accidente et systeme d'assistance dedie
FR3032817B1 (fr) * 2015-02-17 2018-03-23 Agence Francaise De Securisation Des Reseaux Routiers Systeme de confirmation d'autorisation d'emprunt de voie reservee a certains types de vehicules
US9688271B2 (en) * 2015-03-11 2017-06-27 Elwha Llc Occupant based vehicle control
KR101639804B1 (ko) * 2015-05-15 2016-07-25 주식회사 한글과컴퓨터 구급이 가능한 무인 스마트카 및 그의 운용 방법
US20210258486A1 (en) 2015-08-28 2021-08-19 State Farm Mutual Automobile Insurance Company Electric vehicle battery conservation
JP2017051350A (ja) * 2015-09-08 2017-03-16 Idec株式会社 緊急処理システム
US9744809B2 (en) * 2015-11-05 2017-08-29 Continental Automotive Systems, Inc. Enhanced sound generation for quiet vehicles
CN105389949A (zh) * 2015-12-18 2016-03-09 李俊娇 一种汽车疲劳驾驶预警装置
US10395332B1 (en) 2016-01-22 2019-08-27 State Farm Mutual Automobile Insurance Company Coordinated autonomous vehicle automatic area scanning
US10324463B1 (en) 2016-01-22 2019-06-18 State Farm Mutual Automobile Insurance Company Autonomous vehicle operation adjustment based upon route
US11719545B2 (en) 2016-01-22 2023-08-08 Hyundai Motor Company Autonomous vehicle component damage and salvage assessment
US11441916B1 (en) 2016-01-22 2022-09-13 State Farm Mutual Automobile Insurance Company Autonomous vehicle trip routing
US10503168B1 (en) 2016-01-22 2019-12-10 State Farm Mutual Automotive Insurance Company Autonomous vehicle retrieval
US10134278B1 (en) 2016-01-22 2018-11-20 State Farm Mutual Automobile Insurance Company Autonomous vehicle application
US11242051B1 (en) 2016-01-22 2022-02-08 State Farm Mutual Automobile Insurance Company Autonomous vehicle action communications
US10335045B2 (en) 2016-06-24 2019-07-02 Universita Degli Studi Di Trento Self-adaptive matrix completion for heart rate estimation from face videos under realistic conditions
US10686776B2 (en) 2016-07-22 2020-06-16 Samsung Electronics Co., Ltd. Authorized control of an embedded system using end-to-end secure element communication
CN106600894A (zh) * 2016-12-16 2017-04-26 合肥寰景信息技术有限公司 一种疲劳驾驶和酒后驾驶监控预警系统
DE102017205386A1 (de) * 2017-03-30 2018-10-04 Robert Bosch Gmbh Fahrerbeobachtungsvorrichtung und Verfahren zum Beobachten eines Fahrers in einem Fahrzeug zum Bestimmen zumindest einer Position des Fahrers in dem Fahrzeug
DE102017112536A1 (de) 2017-06-07 2018-12-13 Dr. Ing. H.C. F. Porsche Aktiengesellschaft Fahrzeuginsassenbeobachtung mittels Terahertz-Strahlung
JP7014951B2 (ja) * 2017-06-20 2022-02-02 テイ・エス テック株式会社 乗物用シート
DE102018001970A1 (de) 2018-03-12 2019-09-12 Daimler Ag Verfahren zum Betreiben eines Regelsystems zur automatisierten Fahrzeugführung
CN109131072A (zh) * 2018-08-13 2019-01-04 上海擎感智能科技有限公司 心率监控安全驾驶方法、系统、存储介质及车机
DE102018218215A1 (de) * 2018-10-24 2020-04-30 Robert Bosch Gmbh Insassenüberwachungssystem für ein Fahrzeug
CN109532746A (zh) * 2018-12-20 2019-03-29 刘山平 一种具有人体遗忘自救功能的汽车
DE102019000060A1 (de) * 2019-01-03 2020-07-09 Preh Car Connect Gmbh Steuern eines Fahrzeugs unter Verwendung eines Steuerungssystems
TWI715216B (zh) * 2019-09-27 2021-01-01 宏碁股份有限公司 非侵入性酒測監視系統及其方法
DE102019128401A1 (de) * 2019-10-21 2021-04-22 Bayerische Motoren Werke Aktiengesellschaft Verfahren und Steuereinheit zum Betrieb einer Beleuchtungseinheit als Lichtsensor
DE102020203890A1 (de) 2020-03-25 2021-09-30 Volkswagen Aktiengesellschaft Kraftfahrzeug
FR3122564A1 (fr) * 2021-05-07 2022-11-11 Valeo Systemes Thermiques Système d’aide pour fournir une information de diagnostic

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08234805A (ja) * 1995-02-22 1996-09-13 Yamaha Motor Co Ltd 作業者の快適化システム及びその装置
EP1182089A2 (de) * 2000-08-16 2002-02-27 Robert Bosch Gmbh Verfahren zur Warnung eines Fahrers eines Fahrzeugs
WO2006064635A1 (ja) * 2004-12-17 2006-06-22 Konica Minolta Holdings, Inc. 診断システム
JP2008284165A (ja) * 2007-05-17 2008-11-27 Auto Network Gijutsu Kenkyusho:Kk 生体情報取得装置
JP2009213779A (ja) * 2008-03-12 2009-09-24 Denso Corp 車両用操作入力装置
JP2010264095A (ja) * 2009-05-15 2010-11-25 Nissan Motor Co Ltd 心拍数測定装置および心拍数測定方法
JP2010284165A (ja) * 1999-04-09 2010-12-24 Pharmacia & Upjohn Co Llc 抗菌ワクチン組成物

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5729619A (en) 1995-08-08 1998-03-17 Northrop Grumman Corporation Operator identity, intoxication and drowsiness monitoring system and method
CN1956680A (zh) 2004-05-24 2007-05-02 日本先锋公司 生物信息检测装置
GB0607270D0 (en) * 2006-04-11 2006-05-17 Univ Nottingham The pulsing blood supply
US20080214944A1 (en) * 2007-02-09 2008-09-04 Morris Margaret E System, apparatus and method for mobile real-time feedback based on changes in the heart to enhance cognitive behavioral therapy for anger or stress reduction
US7972266B2 (en) 2007-05-22 2011-07-05 Eastman Kodak Company Image data normalization for a monitoring system
IL183386A0 (en) * 2007-05-24 2007-09-20 Wavebreak Technologies Ltd Systems and methods for counting an audience
US20100324437A1 (en) 2007-09-12 2010-12-23 Freeman Jenny E Device and method for assessing physiological parameters
US8106783B2 (en) 2008-03-12 2012-01-31 Denso Corporation Input apparatus, remote controller and operating device for vehicle
DE102009016936A1 (de) 2009-04-08 2009-11-19 Daimler Ag Fahrassistenzsystem zum Unterstützen eines Fahrers bei Ermüdung
US8649562B2 (en) * 2009-10-06 2014-02-11 Koninklijke Philips N.V. Method and system for processing a signal including at least a component representative of a periodic phenomenon in a living being
US20110224875A1 (en) * 2010-03-10 2011-09-15 Cuddihy Mark A Biometric Application of a Polymer-based Pressure Sensor
US8718748B2 (en) * 2011-03-29 2014-05-06 Kaliber Imaging Inc. System and methods for monitoring and assessing mobility

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08234805A (ja) * 1995-02-22 1996-09-13 Yamaha Motor Co Ltd 作業者の快適化システム及びその装置
JP2010284165A (ja) * 1999-04-09 2010-12-24 Pharmacia & Upjohn Co Llc 抗菌ワクチン組成物
EP1182089A2 (de) * 2000-08-16 2002-02-27 Robert Bosch Gmbh Verfahren zur Warnung eines Fahrers eines Fahrzeugs
WO2006064635A1 (ja) * 2004-12-17 2006-06-22 Konica Minolta Holdings, Inc. 診断システム
JP2008284165A (ja) * 2007-05-17 2008-11-27 Auto Network Gijutsu Kenkyusho:Kk 生体情報取得装置
JP2009213779A (ja) * 2008-03-12 2009-09-24 Denso Corp 車両用操作入力装置
JP2010264095A (ja) * 2009-05-15 2010-11-25 Nissan Motor Co Ltd 心拍数測定装置および心拍数測定方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
MING-ZHER POH, ET AL.: "Non-contact, automated cardiac pulse measurements using video imaging and blind source separation", OPTIC EXPRESS, vol. Vol. 18, Issue 10, JPN6014048918, 2010, US, pages 10762 - 10774, XP002685985, ISSN: 0002943500, DOI: 10.1364/OE.18.010762 *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2018074148A1 (ja) * 2016-10-19 2018-04-26 マツダ株式会社 運転支援装置
JP2018065445A (ja) * 2016-10-19 2018-04-26 マツダ株式会社 運転支援装置
JP2018065446A (ja) * 2016-10-19 2018-04-26 マツダ株式会社 運転支援装置
US11179082B2 (en) 2016-10-19 2021-11-23 Mazda Motor Corporation Driving assistance device
JP2021531068A (ja) * 2018-07-26 2021-11-18 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 対象の脈拍を検出する装置、システム及び方法
JP7340546B2 (ja) 2018-07-26 2023-09-07 コーニンクレッカ フィリップス エヌ ヴェ 対象の脈拍を検出する装置、システム及び方法

Also Published As

Publication number Publication date
WO2012139619A1 (de) 2012-10-18
DE102011016772B4 (de) 2024-04-25
US10140532B2 (en) 2018-11-27
DE102011016772A1 (de) 2012-10-18
US20140104405A1 (en) 2014-04-17

Similar Documents

Publication Publication Date Title
JP2014518647A (ja) 少なくとも1人の車両乗員を監視する方法及び装置、及び少なくとも1つのアシスタント装置を作動させるための方法
US20140221781A1 (en) Method and Device for Monitoring at Least One Vehicle Occupant and Method for Operating at Least One Assistance Device
US10327705B2 (en) Method and device to monitor at least one vehicle passenger and method to control at least one assistance device
US9682711B2 (en) Apparatus and method for detecting driver status
JP7032966B2 (ja) 車両安全支援装置および方法
JP6627684B2 (ja) 運転手状態判定装置、車両制御システム
US9855956B2 (en) Driving assist device
CN104875744B (zh) 驾驶员身体状态监测方法及系统
US10198952B2 (en) Operator alertness monitor
US20160009295A1 (en) On-vehicle situation detection apparatus and method
KR20130050113A (ko) 위험단계별 경고기능을 갖는 차량 운행보조 시스템 및 그 방법
JP4973551B2 (ja) 運転者状態判定装置
US20140293053A1 (en) Safety monitoring apparatus and method thereof for human-driven vehicle
US20160082979A1 (en) Situation awareness system and method
KR102272774B1 (ko) 차량, 및 차량의 제어방법
KR102113767B1 (ko) 운전자 상태 감지 장치 및 그 방법
CN107719065B (zh) 一种防危险驾驶及智能驾驶环境调节方法及系统
KR101646418B1 (ko) 심박 신호 기반 운전자 상태 판단 장치 및 방법
JPWO2021053780A1 (ja) 認知機能推定装置、学習装置、および、認知機能推定方法
JP2018135002A (ja) 車両用健康診断装置
WO2018211966A1 (ja) 運転者監視装置、運転者監視方法及び運転者監視のためのプログラム
US20210153792A1 (en) System and method for determining the perceptual load and the level of stimulus perception of a human brain
KR20180101785A (ko) 심전도 신호를 이용한 운전자의 졸음운전 진단 방법 및 장치
Langer et al. Driver Condition Detection
JP2022139284A (ja) 危険認知及び/又は危険予測の評価装置

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20141118

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20141121

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20141225

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150217

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20150721

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20151215