DE112015002944T5 - Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers - Google Patents

Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers Download PDF

Info

Publication number
DE112015002944T5
DE112015002944T5 DE112015002944.3T DE112015002944T DE112015002944T5 DE 112015002944 T5 DE112015002944 T5 DE 112015002944T5 DE 112015002944 T DE112015002944 T DE 112015002944T DE 112015002944 T5 DE112015002944 T5 DE 112015002944T5
Authority
DE
Germany
Prior art keywords
driver
detecting
head portion
section
head
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE112015002944.3T
Other languages
English (en)
Inventor
Hiroto Banno
Yutaka Munaoka
Takeshi Enya
Takuhiro Omi
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Corp
Original Assignee
Denso Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Corp filed Critical Denso Corp
Publication of DE112015002944T5 publication Critical patent/DE112015002944T5/de
Pending legal-status Critical Current

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • B60W30/09Taking automatic action to avoid collision, e.g. braking and steering
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/14Adaptive cruise control
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/20Analysis of motion
    • G06T7/292Multi-camera tracking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • G06T7/55Depth or shape recovery from multiple images
    • G06T7/593Depth or shape recovery from multiple images from stereo images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • G06T7/73Determining position or orientation of objects or cameras using feature-based methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/171Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403Image sensing, e.g. optical camera
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/043Identity of occupants
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/10Accelerator pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/12Brake pedal position
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/18Steering angle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/223Posture, e.g. hand, foot, or seat position, turned or inclined
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • B60W2554/802Longitudinal distance
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00Input parameters relating to objects
    • B60W2554/80Spatial relation or speed relative to objects
    • B60W2554/804Relative longitudinal speed
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • G06T2207/10012Stereo images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10016Video; Image sequence
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10028Range image; Depth image; 3D point clouds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30241Trajectory
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30268Vehicle interior
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/10Recognition assisted with metadata
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/12Acquisition of 3D measurements of objects
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Automation & Control Theory (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Signal Processing (AREA)
  • Emergency Management (AREA)
  • Business, Economics & Management (AREA)
  • Traffic Control Systems (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)

Abstract

Eine Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers weist auf: einen Kopferfassungsabschnitt (61), der aufeinanderfolgend einen Kopfabschnitt, der höher als der Hals des Fahrers ist, auf der Grundlage eines Bildes eines Fahrersitzes, das von einer Abbildungsvorrichtung (21) aufgenommen wird, die in einem Fahrzeug (10) montiert ist, erfasst; und einen Außer-Rahmenzustandserfassungsabschnitt (71), der während der Fahrt des Fahrzeugs (10), wenn der Kopfabschnitt, der von dem Kopferfassungsabschnitt (61) erfasst wird, außerhalb eines vorbestimmten Bereiches in dem Bild liegt, erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren. Die Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers weist einen Kopferfassungsabschnitt (61), einen Trajektorienerlangungsabschnitt (62), der die Trajektorie des Kopfabschnitts aus Positionen des Kopfabschnitts, die von dem Kopferfassungsabschnitt (61) erfasst wird, erlangt, und einen Außer-Rahmenzustandserfassungsabschnitt (71) auf.

Description

  • QUERVERWEIS AUF BETREFFENDE ANMELDUNGEN
  • Die vorliegende Erfindung basiert auf der am 23. Juni 2014 eingereichten japanischen Patentanmeldung Nr. 2014-128387 und der am 16. Februar 2015 eingereichten japanischen Patentanmeldung Nr. 2015-28001 , deren Offenbarungen hiermit durch Bezugnahme darauf enthalten sind.
  • TECHNISCHES GEBIETE
  • Die vorliegende Erfindung betrifft eine Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers, die erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • STAND DER TECHNIK
  • Während der Fahrt eines Fahrzeugs kann der Fahrer aufgrund einer plötzlichen Krankheit oder Ähnlichem nicht mehr in der Lage sein zu fahren, was zu einem Verkehrsunfall führt. Aus diesem Grund wurde vorgeschlagen, einen derartigen Fahrunvermögenzustand des Fahrers zu erfassen, um einen Unfall zu verhindern.
  • Eine Notfallevakuierungsvorrichtung, die in der Patentliteratur 1 beschrieben ist, erkennt Informationen über eine Sichtlinie, ein Blinken und eine Gesichtsrichtung eines Fahrers aus einem aufgenommenen Bild des Fahrers ebenso wie Messinformationen über einen Herzschlag, eine Atmung und Gehirnwellen des Fahrers. Die Vorrichtung, die in der Patentliteratur 1 beschrieben ist, erkennt den Zustand des Fahrers, der den Grad der Verschlechterung des Bewusstseins, den Wachheitsgrad und die Haltung des Fahrers enthält, unter Verwendung verschiedener Arten von erlangten Informationen und unterstützt die Notfallevakuierung, wenn sich der Zustand des Fahrers verschlechtert.
  • Die Erfinder der vorliegenden Erfindung haben herausgefunden, dass, da die Vorrichtung, die in der Patentliteratur 1 beschrieben ist, den Zustand des Fahrers unter Verwendung verschiedener Arten von Informationen erkennt, die Verarbeitung zum Erfassen des Fahrunvermögenzustands des Fahrers kompliziert ist.
  • LITERATUR DES STANDS DER TECHNIK
  • PATENTLITERATUR
    • Patentliteratur 1: JP 2014-019301 A
  • ZUSAMMENFASSUNG DER ERFINDUNG
  • Es ist eine Aufgabe der vorliegenden Erfindung, eine Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers zu schaffen, die auf einfache Weise erfassen kann, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Gemäß einem Aspekt der vorliegenden Erfindung enthält eine Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers: einen Kopferfassungsabschnitt, der aufeinanderfolgend einen Kopfabschnitt, der höher als ein Hals des Fahrers ist, auf der Grundlage eines Bildes eines Fahrersitzes, das von einer Abbildungsvorrichtung aufgenommen wird, die in einem Fahrzeug montiert ist, erfasst; und einen Außer-Rahmenzustandserfassungsabschnitt, der während der Fahrt des Fahrzeugs erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn der Kopfabschnitt, der von dem Kopferfassungsabschnitt erfasst wird, außerhalb eines vorbestimmten Bereiches in dem Bild ist.
  • Gemäß der Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers erfasst die Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers aufeinanderfolgend einen Kopfabschnitt des Fahrers auf der Grundlage eines aufgenommenen Bildes eines Fahrersitzes. Wenn der Fahrer normalerweise das Fahrzeug fährt, liegt der Kopfabschnitt des Fahrers normalerweise innerhalb eines vorbestimmten Bereiches des Bildes des Fahrersitzes. Wenn im Gegensatz dazu der Fahrer aufgrund einer plötzlichen Krankheit sein Bewusstsein verliert, kann der Kopfabschnitt des Fahrers außerhalb des vorbestimmten Bereiches gelangen. Daher kann der Fahrunvermögenzustand des Fahrers auf einfache Weise durch Erfassen, dass der Fahrer nicht mehr in der Lage ist zu fahren, in dem Fall, in dem der Kopfabschnitt außerhalb des vorbestimmten Bereiches liegt, erfasst werden.
  • Gemäß einem zweiten Aspekt der vorliegenden Erfindung enthält eine Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers: einen Kopferfassungsabschnitt, der aufeinanderfolgend einen Kopfabschnitt, der höher als ein Hals des Fahrers ist, auf der Grundlage eines Bildes eines Fahrersitzes, das von einer Abbildungsvorrichtung aufgenommen wird, die in einem Fahrzeug montiert ist, erfasst; einen Trajektorienerlangungsabschnitt, der eine Trajektorie des Kopfabschnitts aus Positionen des Kopfabschnitts, der von dem Kopferfassungsabschnitt erfasst wird, erlangt; und einen Außer-Rahmenzustandserfassungsabschnitt, der während der Fahrt des Fahrzeugs auf der Grundlage der Trajektorie, die von dem Trajektorienerlangungsabschnitt erlangt wird, erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Gemäß der Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers erfasst die Vorrichtung zum Erfassen eines Fahrunvermögenzustands des Fahrers aufeinanderfolgend den Kopfabschnitt des Fahrers auf der Grundlage des Bildes des Fahrersitzes und erlangt eine Trajektorie des Kopfabschnitts aus Positionen des erfassten Kopfabschnitts. Wenn der Fahrer aufgrund einer plötzlichen Krankheit nicht mehr in der Lage ist zu fahren, verschiebt sich der Kopfabschnitt des Fahrers häufig gegenüber einer Position während der Fahrt und kehrt nicht zu der Position während der Fahrt zurück. Daher kann der Fahrunvermögenzustand des Fahrers auf einfache Weise auf der Grundlage der Trajektorie des Kopfabschnitts des Fahrers erfasst werden.
  • KURZE BESCHREIBUNG DER ZEICHNUNGEN
  • Die obigen und weitere Aspekte, Merkmale und Vorteile der vorliegenden Erfindung werden anhand der folgenden detaillierten Beschreibung mit Bezug auf die zugehörigen Zeichnungen deutlich. Es zeigen:
  • 1 ein Blockdiagramm, das eine Konfiguration einer Vorrichtung zum Erfassen eines Fahrunvermögenzustands darstellt;
  • 2 eine Ansicht, die das Innere eines Fahrzeugs darstellt, das mit der Vorrichtung zum Erfassen eines Fahrunvermögenzustands ausgerüstet ist;
  • 3 eine Ansicht, die einen Fahrersitz des Fahrzeugs darstellt, das mit der Vorrichtung zum Erfassen eines Fahrunvermögenzustands ausgerüstet ist;
  • 4 ein Blockdiagramm, das Funktionen einer Steuerung darstellt;
  • 5A eine Ansicht, die eine Haltung während einer normalen Fahrt darstellt;
  • 5B eine Ansicht, die eine Haltung darstellt, wenn der Fahrer plötzlich krank geworden ist und seine Haltung einbricht (innerhalb von FA);
  • 5C eine Ansicht, die eine Haltung in dem Zustand darstellt, in dem der Fahrer plötzlich krank geworden ist und die Haltung einbricht (außerhalb von FA);
  • 6 eine Ansicht, die eine Haltung in dem Zustand darstellt, in dem der Fahrer ein Objekt aufnimmt;
  • 7A eine Ansicht, die eine Haltung während einer normalen Fahrt darstellt;
  • 7B eine Ansicht, die eine Haltung in dem Zustand darstellt, in dem der Fahrer plötzlich krank geworden ist;
  • 8 eine Ansicht, die eine Haltung in dem Zustand darstellt, in dem der Fahrer beiseite sieht;
  • 9 eine Ansicht, die eine Haltung in dem Zustand darstellt, in dem der Fahrer ein Objekt aufnimmt;
  • 10A eine Ansicht, die eine Gesichtsrichtung während einer normalen Fahrt darstellt;
  • 10B eine Ansicht, die eine Gesichtsrichtung in dem Zustand darstellt, in dem der Fahrer plötzlich krank geworden ist;
  • 11 eine Ansicht, die eine Änderung der Gesichtsrichtung in dem Zustand darstellt, in dem der Fahrer beiseite sieht;
  • 12 ein Diagramm, das ein Schwingens bzw. Schütteln eines Kopfabschnitts darstellt, das durch eine äußere Kraft verursacht wird;
  • 13 ein Diagramm, das einen Amplitudenbereich eines Schüttelns des Kopfabschnitts darstellt, das als Fahrunvermögenzustand bestimmt wird;
  • 14A eine Ansicht, die einen Gesichtsausdruck während einer normalen Fahrt darstellt;
  • 14B eine Ansicht, die einen Gesichtsausdruck in dem Zustand darstellt, in dem der Fahrer plötzlich krank geworden ist;
  • 15A eine Ansicht, die einen normalen Zustand darstellt;
  • 15B eine Ansicht, die einen Zustand darstellt, in dem der Fahrer das Weiße eines Auges zeigt;
  • 15C eine Ansicht, die einen Zustand darstellt, in dem der Fahrer das Weiße des Auges vollständig zeigt;
  • 16A ein Flussdiagramm, das eine Verarbeitungsprozedur zum Erfassen eines Fahrunvermögenzustands darstellt;
  • 16B ein Flussdiagramm, das die Fortsetzung der 16A darstellt und eine Verarbeitungsprozedur zum Erfassen eines Fahrunvermögenzustands zeigt;
  • 17 ein Diagramm, das eine Unterroutine darstellt, die eine Verarbeitungsprozedur zum Erfassen eines Haltungseinbruchs darstellt;
  • 18 eine Ansicht, die einen Modus zum Benachrichtigen des Fahrers hinsichtlich eines Haltungseinbruchspegels darstellt;
  • 19 eine Ansicht, die einen Rahmenbereich einer Außer-Rahmenbestimmung gemäß einer ersten Modifikation darstellt;
  • 20 eine Ansicht, die einen Rahmenbereich einer Außer-Rahmenbestimmung gemäß einer zweiten Modifikation darstellt;
  • 21 eine Ansicht, die einen Rahmenbereich einer Außer-Rahmenbestimmung gemäß einer dritten Modifikation darstellt;
  • 22 eine Ansicht, die einen Rahmenbereich einer Außer-Rahmenbestimmung gemäß einer vierten Modifikation darstellt; und
  • 23 eine Ansicht, die Rahmenbereiche und Bestimmungszeiten für die der Außer-Rahmenbestimmung gemäß einer zweiten Ausführungsform darstellt.
  • BESCHREIBUNG DER AUSFÜHRUNGSFORMEN
  • Im Folgenden werden Ausführungsformen der Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers mit Bezug auf die Zeichnungen beschrieben. In en vorliegenden Ausführungsformen enthält der Fahrunvermögenzustand des Fahrers den Zustand, in dem der Fahrer aufgrund einer plötzlichen Krankheit sein Bewusstsein verloren hat und somit nicht mehr in der Lage ist zu fahren, und den Zustand, in dem der Fahrer eine plötzliche Krankheit wie beispielsweise einen Herzanfall erlitten hat, seinen Körper trotz seines nicht verlorenen Bewusstseins nicht bewegen kann und somit nicht mehr in der Lage ist zu fahren. In den folgenden Ausführungsformen werden in sämtlichen Zeichnungen identische oder äquivalente Elemente mit denselben Bezugszeichen bezeichnet, und deren Beschreibung wird nicht wiederholt.
  • (Erste Ausführungsform)
  • Eine Erfassungsvorrichtung 100 (Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers oder Fahrunvermögenzustandserfassung eines Fahrers) gemäß der vorliegenden Ausführungsform wird im Folgenden mit Bezug auf die 1 bis 3 beschrieben. Die Erfassungsvorrichtung 100 enthält eine Steuerung 50, eine Fahrerzustandserkennungsvorrichtung 20, eine Fahrzeuginformationserkennungsvorrichtung 30, eine Fahrumgebungserkennungsvorrichtung 40, eine HMI (Mensch-Maschine-Schnittstelle) 80 und eine Speichervorrichtung 52 und erfasst den Fahrunvermögenzustand eines Fahrers. Wenn der Fahrer gefragt wird, ob er nicht mehr in der Lage ist zu fahren, und keine Antwort empfangen wird, gibt die Erfassungsvorrichtung 100 einen Befehl zum sicheren Stoppen des Fahrzeugs an eine Fahrzeugsteuerung 90 aus.
  • Die Fahrerzustandserkennungsvorrichtung 20 enthält mehrere Fahrerkameras 21, einen Sitzgurtsensor 22 und einen Sitzflächensensor 23. Die Fahrerkameras 21 entsprechen einer Abbildungsvorrichtung, der Sitzgurtsensor 22 entspricht einem Größenerfassungsabschnitt und der Sitzflächensensor 23 entspricht einem Sitzdruckerfassungsabschnitt. Die Fahrerkameras 21 sind beispielsweise jeweils eine CCD-Kamera und dienen zum Aufnehmen eines Bildes des Fahrersitzes, der von einer Beleuchtungsvorrichtung wie beispielsweise einer LED im nahen Infrarotbereich beleuchtet wird. Wie es in 2 und 3 dargestellt ist, sind die Fahrerkameras 21 an einem Messgerätefeld 14 im Wesentlichen in der Mitte eines unteren Endes eines Rückspiegels 16 und an linken und rechten A-Säulen 17 dem Fahrer zugewandt montiert. Die Fahrerkameras 21 können an einem Armaturenbrett 13 (durch eine gestrichelte Line dargestellt) und einer Lenksäule anstelle des Messgerätefeldes 14 angeordnet sein. Die Fahrerkameras 21 können an einem linken Ende oder einem rechten Ende des Rückspielgels 16 (durch eine gestrichelte Linie dargestellt) anstelle an dem unteren Ende des Rückspiegels 16 angeordnet sein. Die vier Fahrerkameras 21 bilden jeweils einen Fahrerzustandsmonitor und nehmen jede Sekunde mehrere zehn Bilder einer oberen Hälfte des Fahrers, der auf einem Fahrersitz 11 sitzt, von der Vorderseite auf.
  • Der Sitzgurtsensor 22 ist ein Sensor zum Erfassen einer Ziehgröße eines Sitzgurtes 12. Insbesondere ist der Sitzgurtsensor 22 eine Kodiereinrichtung, die einen Motordrehwinkel eines Entwickelns und Aufwickelns des Sitzgurtes 12 erfasst. Der Sitzflächensensor 23 ist ein Sensor, der eine Druckverteilung eines Sitzabschnitts 11a des Fahrersitzes 11 erfasst.
  • Die Fahrzeuginformationserkennungsvorrichtung 30 enthält einen Fahrzeuggeschwindigkeitssensor 31, einen Lenksensor 32, einen Beschleunigersensor 33 und einen Bremssensor 34. Der Fahrzeuggeschwindigkeitssensor 31 ist ein Sensor, der die Geschwindigkeit eines Fahrzeugs 10 erfasst. Der Lenksensor 32 ist ein Sensor, der den Lenkwinkel eines Lenkrads 15 erfasst. Der Beschleunigersensor 33 ist ein Sensor, der die Beschleunigeröffnung, das heißt die Betätigungsgröße des Gaspedals, erfasst. Der Bremssensor 34 ist ein Sensor, der die Betätigungsgröße eines Bremspedals erfasst.
  • Die Fahrumgebungserkennungsvorrichtung 40 enthält eine vordere und hintere Kameras 41, einen vordere und hintere Sensoren 42, eine Fahrzeugnavigationseinrichtung 43 und einen G-Sensor 44. Die vorderen und hinteren Kameras 41 sind jeweils eine Kamera, die ein Bild der Vorderseite des Fahrzeugs 10, die eine weiße Linie auf einer Straße enthält, aufnimmt, oder eine Kamera, die ein Bild der Rückseite und der Seite diagonal hinter dem Fahrzeug 10 aufnimmt. Der vorderen und hinteren Sensoren 42 sind jeweils ein Sensor wie beispielsweise ein Ultraschallsensor, ein Laserradarsensor oder ein Millimeterradarsensor und dienen zum Erfassen eines Objektes, das vor oder hinter dem Fahrzeug 10 angeordnet ist, um einen Abstand zwischen dem Fahrzeug 10 und dem Objekt, das vor oder hinter dem Fahrzeug 10 angeordnet ist, zu erlangen. Die relative Geschwindigkeit in Bezug auf das vordere Fahrzeug oder das hintere Fahrzeug kann auf der Grundlage des Abstands zwischen dem Fahrzeug 10 und dem vorderen Fahrzeug oder dem hinteren Fahrzeug, der von dem vorderen/hinteren Sensor 42 erlangt wird, berechnet werden.
  • Die Fahrzeugnavigationsvorrichtung 43 berechnet eine derzeitige Position des Fahrzeugs 10 unter Verwendung eines GPS-Signals, das von einem GPS-Empfänger empfangen wird, und Informationen, die von verschiedenen Sensoren einschließlich dem G-Sensor erlangt werden, und berechnet einen Pfad von der derzeitigen Position zu einem Ziel. Der G-Sensor 44 ist ein Sensor, der beispielsweise an einem Sitz 11 installiert ist, und die dreidimensionale Beschleunigung nach vorne/hinten, links/rechts, und oben/unten in Bezug auf das Fahrzeug 10 erfasst. Der G-Sensor 44 kann ein Sensor sein, der in der Fahrzeugnavigationsvorrichtung 43 angeordnet ist, oder kann ein Sensor sein, der in einem fortgeschrittenen Fahrzeugbetriebssystem (AVOS) angeordnet ist, wenn das Fahrzeug 10 das AVOS aufweist. Das heißt, der G-Sensor 44 kann mit verwendet werden, wenn er bereits für eine Anwendung installiert ist.
  • Die Steuerung 50 ist ein Mikrocomputer, der eine CPU, einen ROM, einen RAM und eine I/O enthält. Die Steuerung 50 erlangt verschiedene Arten von Informationen von der Fahrerzustandserkennungsvorrichtung 20, der Fahrzeuginformationserkennungsvorrichtung 30, der Fahrumgebungserkennungsvorrichtung 40, der Speichervorrichtung 52 und der HMI 80. Die Steuerung 50 ist mit verschiedenen Vorrichtungen mittels drahtgebundener Kommunikation wie beispielsweise einem CAN oder mittels drahtloser Kommunikation wie beispielsweise einem LAN und Bluetooth (eingetragene Marke) verbunden. Die CPU der Steuerung 50 führt verschiedene Programme, die in dem ROM gespeichert sind, aus, um Funktionen eines Bildanalyseabschnitts 60, eines Lernabschnitts 51 und eines Zustandserfassungsabschnitts 70 durchzuführen, um den Fahrunvermögenzustand des Fahrers zu erfassen. Jeder Abschnitt wird später genauer beschrieben.
  • Die HMI 80 (entspricht einem Haltungsbenachrichtigungsabschnitt und einem Frageabschnitt) enthält eine Anzeige 81, einen Lautsprecher 82 und einen Aufhebungsschalter 83. Die Anzeige 81 entspricht einer Anzeige der Fahrzeugnavigationsvorrichtung 43 oder einer Anzeige, die in das Messgerätefeld 14 eingebaut ist. Die Anzeige 81 kann eine berührungsempfindliche Anzeige sein, die mit einer Flüssigkristallfläche oder einer organischen EL-Fläche (EL: Elektrolumineszenz) ausgerüstet ist. Die Anzeige 81 benachrichtigt hinsichtlich eines Einbruchspegels der Haltung des Fahrers auf der Grundlage der Haltung des Fahrers, die von dem Bild erfasst wird. Genauer gesagt zeigt die Anzeige 81 die Haltung des Fahrers in fünf Stufen an. Bei dem Haltungseinbruchspegel 5, der der höchste Einbruchspegel ist, kann der Fahrer die Fahrhaltung aufgrund einer plötzlichen Krankheit nicht mehr halten und ist somit nicht mehr in der Lage zu fahren. Der Fahrer kann den Zustand der Haltung, der auf der Anzeige 81 angezeigt wird, betrachten, um die eigene Fahrhaltung zu überprüfen. Wenn der Haltungseinbruchspegel sich dem Pegel bzw. der Stufe 5 annähert, kann der Fahrer die Fahrhaltung korrigieren, bevor bestimmt wird, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Der Lautsprecher 82 ist ein fahrzeugeigener Lautsprecher, der mit der Fahrzeugnavigationsvorrichtung 43, einer Audioausrüstung und Ähnlichem gemeinsam verwendet wird. Wenn ein Fahrunvermögenzustand des Fahrers erfasst wird, fragt der Lautsprecher 82 den Fahrer mittels Tonausgabe, ob der Fahrer nicht mehr in der Lage ist zu fahren. Die Anzeige 81 kann einen Bildschirm anzeigen, der den Fahrer fragt, ob dieser nicht mehr in der Lage ist zu fahren. Der Lautsprecher 82 kann hinsichtlich des Haltungseinbruchspegels des Fahrers mittels Tonausgabe benachrichtigen.
  • Der Aufhebungsschalter 83 ist ein Schalter, der eine Erfassung des Fahrunvermögenzustands stoppt. Eine einmalige Betätigung des Aufhebungsschalters 83 bewirkt ein Stoppen der Erfassung des Fahrunvermögenzustands während einer Reise bzw. Fahrt. Wenn der Aufhebungsschalter 83 während der Fahrt bzw. Reise betätigt wird, wird die Erfassung des Fahrunvermögenzustands während des Betriebs des Aufhebungsschalters 83 oder während einer bestimmten Periode (wenige Sekunden) ab dem Start der Betätigung gestoppt. Wenn somit der Fahrer ein Objekt aufnimmt, kann der Aufhebungsschalter 83 im Voraus betätigt werden. Auf diese Weise kann sogar dann, wenn die Haltung des Fahrers einbricht, eine fehlerhafte Erfassung, dass der Fahrer nicht mehr in der Lage ist zu fahren, verhindert werden.
  • Verschiedene Funktionen der Steuerung 50 werden im Folgenden mit Bezug auf 4 beschrieben. Der Bildanalyseabschnitt 60 enthält einen Kopferfassungsabschnitt 61, einen Trajektorienerlangungsabschnitt 62, einen Krampferfassungsabschnitt 63, einen Neigungserfassungsabschnitt 64, einen Gesichtsrichtungserfassungsabschnitt 65 und einen Weißaugenerfassungsabschnitt 66.
  • Der Kopferfassungsabschnitt 61 erfasst aufeinanderfolgend den Kopfabschnitt, der höher als der Hals des Fahrers ist, auf der Grundlage des Bildes des Fahrersitzes, das von jeder Fahrerkamera 21 aufgenommen wird. Genauer gesagt extrahiert der Kopferfassungsabschnitt 61 jedes Mal, wenn eine jeweilige Fahrerkamera 21 ein Bild des Fahrersitzes aufnimmt, eine Kante, die den Umriss des Kopfabschnitts des Fahrers angibt, aus dem Bild des Fahrersitzes und erfasst einen Bereich, der von der erfassten Kante umgeben ist, als Kopfabschnitt.
  • Der Trajektorienerlangungsabschnitt 62 erlangt eine Trajektorie des Kopfabschnitts des Fahrers aus Positionen des Kopfabschnitts des Fahrers, der aufeinanderfolgend von dem Kopferfassungsabschnitt 61 erfasst wird. Der Trajektorienerlangungsabschnitt 62 verwendet beispielsweise die Mitte des Kopfabschnitts des Fahrers, die in jedem Bild erfasst wird, als Position des Kopfabschnitts und verbindet die Positionen des Kopfabschnitts in den Bildern miteinander, um die Trajektorie des Kopfabschnitts zu erlangen.
  • Der Krampferfassungsabschnitt 63 erfasst einen Krampf des Fahrers, das heißt eine unfreiwillige Kontraktion von Muskeln eines Rumpfes, der niedriger als der Kopfabschnitt und der Hals des Fahrers ist. Genauer gesagt extrahiert der Krampferfassungsabschnitt 63 Kanten von Umrissen des Kopfabschnitts und des Rumpfes des Fahrers in jedem Bild. Wenn die Kanten, die in aufeinanderfolgenden Bildern extrahiert werden, regelmäßig (periodisch) vibrieren, erfasst der Krampferfassungsabschnitt 63, dass der Fahrer einen Krampf hat.
  • Der Neigungserfassungsabschnitt 64 erfasst eine Neigung θ des Kopfabschnitts in Bezug auf den Rumpf des Fahrers auf der Grundlage des Bildes des Fahrersitzes. Genauer gesagt erfasst der Neigungserfassungsabschnitt 64 Bereiche, die von den Kanten umgeben sind, die Umrisse des Kopfabschnitts und des Rumpfes repräsentieren, als Kopfabschnitt und Rumpf ebenso wie er Mittelachsen des Kopfabschnitts und des Rumpfes erfasst. Der Neigungserfassungsabschnitt 64 stellt die Neigung der Mittelachse des Kopfabschnitts in Bezug auf die Mittelachse des Rumpfes als die Neigung θ des Kopfabschnitts ein. Die Richtung des Rumpfes wird durch Vergleichen eines vorbestimmten Richtungsmusters des Rumpfes mit einer erfassten Richtung des Rumpfes bestimmt, und die Mittelachse des Rumpfes wird aus dem derart ausgerichteten Rumpf erfasst. Merkmale wie beispielsweise Augen, Nase und Mund eines Gesichts, die in dem Kopfabschnitt enthalten sind, werden extrahiert, und die Mittelachse des Kopfabschnitts wird auf der Grundlage der dreidimensionalen Anordnung der Merkmale des Gesichts erfasst. Wenn der Kopfabschnitt nach vorne geneigt ist, verringert sich ein Abstand zwischen den Gesichtsmerkmalen und einem vorderen Teil des Fahrzeugs. Wenn der Kopfabschnitt nach hinten geneigt ist, erhöht sich der Abstand zwischen den Gesichtsmerkmalen und dem vorderen Teil des Fahrzeugs. Um die Mittelachse des Kopfabschnitts zu erfassen, kann der Abstand der Gesichtsmerkmale in der Längsrichtung des Fahrzeugs verwendet werden.
  • Alternativ erfasst der Neigungserfassungsabschnitt 64 den Sitzgurt 12 des Fahrersitzes in dem Bild des Fahrersitzes und erfasst die Neigung θ des Kopfabschnitts in Bezug auf den Rumpf aus einer relativen Position zwischen dem Sitzgurt 12 und dem Kopfabschnitt. Da der Rumpf des Fahrers durch den Sitzgurt 12 beschränkt wird, kann die Position des Sitzgurtes 12 aus der Position des Rumpfes geschätzt werden.
  • Der Gesichtsrichtungserfassungsabschnitt 65 erfasst eine Gesichtsrichtung des Fahrers in Bezug auf den Vorderteil des Fahrzeugs 10 auf der Grundlage des Bildes des Fahrersitzes. Der Gesichtsrichtungserfassungsabschnitt 65 erfasst die Neigung des Gesichts in Bezug auf die vertikale Fläche, die der Vorderfläche des Fahrzeugs 10 gegenüberliegt, als Gesichtsrichtung.
  • Der Weißaugenerfassungsabschnitt 66 enthält einen Gesichtsausdruckserfassungsabschnitt 67 und einen Weißaugengradberechnungsabschnitt 68 und erfasst den Zustand, in dem der Fahrer das Weiße seiner Augen zeigt (der Fahrer rollt seine Augen). Hier enthält der Zustand, in dem der Fahrer das Weiße seiner Augen zeigt, einen Zustand, in dem der Fahrer das Weiße seiner Augen vollständig zeigt, wie es in 15C dargestellt ist, und einen Zustand, in dem ein schwarzer Augenbereich kleiner als eine vorbestimmte Abmessung ist, wie es in 15B dargestellt ist. Das heißt, der Zustand, in dem der Fahrer das Weiße seiner Augen zeigt, bezieht sich auf einen Zustand, in dem das Schwarze des Auges aus dem Gleichgewicht gelangt und kleiner als ein vorbestimmter Bereich ist.
  • Der Gesichtsausdruckserfassungsabschnitt 67 erfasst den Augenumriss und den schwarzen Augenbereich des Fahrers aus dem Bild des Fahrersitzes. Hier ist der Augenumriss des Fahrers eine Grenzlinie zwischen dem Augenlid und dem Auge. Der schwarze Augenbereich ist ein innerer Bereich des Augenumrisses, ein Bereich, der eine niedrigere Helligkeit als das Weiße des Auges aufweist, beispielsweise ein Bereich eines Schwarzen ebenso wie Blauen, Braunen, Grauen oder Ähnlichem. Der Gesichtsausdruckserfassungsabschnitt 67 erfasst das Öffnen des Mundes des Fahrers aus der erfassten Kante, die den Mundumriss angibt.
  • Der Weißaugengradberechnungsabschnitt 68 berechnet den Weißaugengrad des Auges des Fahrers auf der Grundlage des Augenumrisses und des schwarzen Augenbereiches, die von dem Gesichtsausdruckserfassungsabschnitt 67 erfasst werden.
  • Insbesondere berechnet der Weißaugengradberechnungsabschnitt 68 den Weißaugengrad aus einem Verhältnis einer Längslänge Lb des schwarzen Augenbereiches zu einer Längslänge Lw + Lb eines Bereiches, der von dem Augenumriss umgeben ist (15A bis 15C). Wenn die Länge Lb in Bezug auf die Länge Lw + Lb kleiner ist, wird der Weißaugengrad größer. Alternativ berechnet der Weißaugengradberechnungsabschnitt 68 den Weißaugengrad aus dem Abstand Lb zwischen dem Oberen des Augenumrisses und dem Unteren des schwarzen Augenbereiches. Wenn der Abstand Lb kleiner ist, wird der Weißaugengrad größer. Alternativ berechnet der Weißaugengradberechnungsabschnitt 68 den Weißaugengrad auf der Grundlage eines Verhältnisses eines Bereiches bzw. einer Fläche des schwarzen Augenbereiches zu einem Bereich bzw. einer Fläche eines weißen Augenbereiches, der durch Subtrahieren des Bereiches des schwarzen Augenbereiches von einem Bereich des gesamten Auges, der von dem Augenumriss umgeben ist, erhalten wird. Wenn der Bereich des schwarzen Augenbereiches in Bezug auf den Bereich des weißen Augenbereiches kleiner ist, wird der Weißaugengrad größer.
  • Alternativ berechnet der Weißaugengradberechnungsabschnitt 68 den Weißaugengrad auf der Grundlage der Abplattung des schwarzen Augenbereiches. In dem Weißaugenzustand ist der schwarze Augenbereich aufwärts gerichtet, die Abplattung des schwarzen Augenbereiches wird offensichtlich groß, und wenn die Abplattung des schwarzen Augenbereiches größer ist, wird der Weißaugengrad größer. Alternativ berechnet der Weißaugengradberechnungsabschnitt 68 den Weißaugengrad aus einem Abstand Lc zwischen einer Mittellinie der Längsmitte des Bereiches, der von dem Augenumriss umgeben ist, und dem Unteren des schwarzen Augenbereiches.
  • Wenn der Fahrer in der Lage ist zu fahren, lernt der Lernabschnitt 51 die Neigung θ des Kopfabschnitts, die von dem Neigungserfassungsabschnitt 64 erfasst wird. Wenn der Fahrer in der Lage ist zu fahren, lernt der Lernabschnitt 51 die Gesichtsrichtung, die von dem Gesichtsrichtungserfassungsabschnitt 65 erfasst wird. Wenn der Fahrer in der Lage ist zu fahren, lernt der Lernabschnitt 51 außerdem die Amplitude des Schüttelns des Kopfabschnitts, der von dem Kopferfassungsabschnitt 61 erfasst wird. Das heißt, der Lernabschnitt 51 lernt eine Gewohnheit der Fahrhaltung des Fahrers. Wenn mehrere Fahrer das Fahrzeug 10 verwenden, lernt der Lernabschnitt 51 eine Gewohnheit der Fahrhaltung jedes Fahrers.
  • Der Zustandserfassungsabschnitt 70 enthält einen Außer-Rahmenzustandserfassungsabschnitt 71, einen Haltungseinbruchszustandserfassungsabschnitt 72, einen Richtungseinbruchszustandserfassungsabschnitt 73, einen Schüttelzustandserfassungsabschnitt 74 und einen Weißaugenzustandsberechnungsabschnitt 75.
  • Während der Fahrt des Fahrzeugs 10 bestimmt der Außer-Rahmenzustandserfassungsabschnitt 71 den Außer-Rahmenzustand. In dem Fall, in dem der Kopfabschnitt außerhalb des Rahmens ist, erfasst der Außer-Rahmenzustandserfassungsabschnitt 71, dass der Fahrer nicht mehr in der Lage ist zu fahren. Genauer gesagt erfasst der Außer-Rahmenzustandserfassungsabschnitt 71, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn der Kopfabschnitt des Fahrers, der von dem Kopferfassungsabschnitt 61 erfasst wird, außerhalb eines Bereiches FA des Bildes liegt. Hier ist der Bereich FA ein vorbestimmter Bereich in dem Bild, das von den Fahrerkameras 21 aufgenommen wird. Während einer normalen Fahrt ist der Kopfabschnitt des Fahrers niemals außerhalb des Bereiches FA. Der Bereich FA kann der gesamte Bereich des aufgenommenen Bildes sein.
  • Während der Fahrer das Fahrzeug 10 normal fährt, wie es in 6 dargestellt ist, liegt sogar dann, wenn der Fahrer ein Objekt aufnimmt, der Kopfabschnitt des Fahrers gewöhnlich innerhalb des Bereiches FA des Bildes. Wenn im Gegensatz dazu der Fahrer plötzlich krank wird und sein Bewusstsein verliert, kann, wie es in den 5A bis 5C dargestellt ist, der Kopfabschnitt des Fahrers außerhalb des Bereiches FA gelangen. Wenn somit der Kopfabschnitt des Fahrers außerhalb des Bereiches FA des Bildes gelangt, erfasst der Außer-Rahmenzustandserfassungsabschnitt 71, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Wenn zu diesem Zeitpunkt der Außer-Rahmenzustandserfassungsabschnitt 71 die Trajektorie, die der Kopfabschnitt sich bewegt hat, bevor der Kopfabschnitt außerhalb des Bereiches FA gelangt ist, berücksichtigt, die von dem Trajektorienerlangungsabschnitt 62 erlangt wird, ist es möglich, die Genauigkeit der Erfassung des Fahrunvermögenzustands des Fahrers zu verbessern. Der Fall, in dem der Kopfabschnitt des Fahrers aufgrund einer Unschärfe des Bildes in dem Bereich FA nicht erfasst werden kann, kann entsprechend der Trajektorie des Kopfabschnitts von dem Fall unterschieden werden, in dem der Kopfabschnitt des Fahrers aufgrund der Bewegung des Fahrers in dem Bereich FA nicht erfasst werden kann, was die Genauigkeit der Erfassung des Fahrunvermögenzustands des Fahrers verbessert.
  • Wenn der Fahrer zeitweilig den Kopfabschnitt verschiebt oder der Kopfabschnitt aufgrund einer Unschärfe des Bildes nicht erfasst werden kann, wird der Kopfabschnitt häufig in der Nähe einer letzten Position der Trajektorie erneut erfasst. Wenn somit der Kopferfassungsabschnitt 61 den Kopfabschnitt nicht erfassen kann, sucht der Kopferfassungsabschnitt 61 in der Nähe der letzten Position der Trajektorie, die von dem Trajektorienerlangungsabschnitt 62 erlangt wurde. Auf diese Weise kann sogar dann, wenn der Kopfabschnitt des Fahrers nicht erfasst werden kann, der Kopfabschnitt effizient erneut unter Verwendung der Trajektorie des Kopfabschnitts erfasst werden.
  • Der Haltungseinbruchszustandserfassungsabschnitt 72 bestimmt, ob die Haltung des Fahrers während der Fahrt des Fahrzeugs 10 einbricht. Wenn bestimmt wird, dass die Haltung des Fahrers einbricht, erfasst der Haltungseinbruchszustandserfassungsabschnitt 72, dass der Fahrer nicht mehr in der Lage ist zu fahren. Genauer gesagt, wenn die Neigung θ des Kopfabschnitts, die von dem Neigungserfassungsabschnitt 64 erfasst wird, größer als ein Schwellenwert Th1 (ein relativer Neigungsschwellenwert) ist, erfasst der Haltungseinbruchszustandserfassungsabschnitt 72, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Da der Rumpfteil des Fahrers im Allgemeinen durch den Fahrersitz 11 und den Sitzgurt 12 beschränkt wird, bewegt sich der Rumpf sogar dann kaum, wenn der Fahrer sein Bewusstsein verliert. Da der Kopfabschnitt des Fahrers im Allgemeinen nicht beschränkt wird, muss der Fahrer seinen Kopfabschnitt bewusst halten. Wenn der Fahrer plötzlich krank wird und sein Bewusstsein verliert, kann daher der Fahrer seinen Kopfabschnitt nicht mehr halten, und wie es in 7A und 7b dargestellt ist, wird der Kopfabschnitt häufig stark in irgendeiner Richtung in Richtung des Rumpfes geneigt.
  • Wenn der Fahrer während der Fahrt beiseite sieht, dreht der Fahrer im Allgemeinen seinen Hals. Wie es in 8 dargestellt ist, ist somit die Neigung des Kopfabschnitts in Bezug auf den Rumpf klein. Wenn der Fahrer ein Objekt, das von dem Fahrersitz entfernt angeordnet ist, aufnimmt, neigt der Fahrer im Allgemeinen bewusst seinen Rumpf, und somit ist, wie es in 9 dargestellt ist, die Neigung θ des Kopfabschnitts in Bezug auf den Rumpf klein. Wenn somit die Neigung θ des Kopfabschnitts größer als der Schwellenwert Th1 ist, erfasst der Haltungseinbruchszustandserfassungsabschnitt 72, dass der Fahrer nicht mehr in der Lage ist zu fahren. Wenn zu diesem Zeitpunkt der Fahrer sein Gesicht von der Vorderseite des Fahrzeugs 10 weg dreht, erfasst der Haltungseinbruchszustandserfassungsabschnitt 72, dass der Fahrer nicht mehr in der Lage ist zu fahren, wodurch eine fehlerhafte Erfassung des Fahrunvermögenzustands verhindert wird.
  • Der Richtungseinbruchszustandserfassungsabschnitt 73 bestimmt, ob die Gesichtsrichtung des Fahrers während der Fahrt des Fahrzeugs 10 einbricht, und wenn bestimmt wird, dass die Gesichtsrichtung einbricht, erfasst der Richtungseinbruchszustandserfassungsabschnitt 73, dass der Fahrer nicht mehr in der Lage ist zu fahren. Genauer gesagt erfasst der Richtungseinbruchszustandserfassungsabschnitt 73, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn die Gesichtsrichtung in Bezug auf die Vorderseite des Fahrzeugs 10, die von dem Gesichtsrichtungserfassungsabschnitt 65 erfasst wird, während einer Zeit T2 (eine Richtungseinbruchsbestimmungszeit) oder länger größer als ein Schwellenwert Th2 (ein Gesichtsrichtungsschwellenwert) war.
  • Wenn der Fahrer plötzlich krank wird, kann der Fahrer im Allgemeinen die Gesichtsrichtung nicht halten, und wie es in 10A und 10B dargestellt ist, verbleibt die Gesichtsrichtung in Bezug auf die Vorderseite des Fahrzeugs 10 eingebrochen. Wenn im Gegensatz dazu der Fahrer während der Fahrt beiseite sieht, lässt der Fahrer im Allgemeinen häufig die Gesichtsrichtung danach unmittelbar zurückkehren. Somit erfasst der Richtungseinbruchszustandserfassungsabschnitt 73 in dem obigen Fall, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Alternativ erfasst der Richtungseinbruchszustandserfassungsabschnitt 73, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn die Gesichtsrichtung in Bezug auf die Vorderseite des Fahrzeugs 10, die von dem Gesichtsrichtungserfassungsabschnitt 65 erfasst wird, größer als der Schwellenwert Th2 ist und der Fahrer seine Hände von dem Lenkrad 15 wegnimmt bzw. weggenommen hat. Ob der Fahrer das Lenkrad 15 verlässt bzw. verlassen hat, kann aus einem Bild oder unter Verwendung eines Drucksensors, der an einem Lenkrad 15 installiert ist, erfasst werden.
  • Wenn der Fahrer plötzlich krank wird, kann der Fahrer im Allgemeinen die Gesichtsrichtung nicht halten, und, wie es in 10A und 10B dargestellt ist, die Gesichtsrichtung in Bezug auf die Vorderseite des Fahrzeugs 10 bricht ein und der Fahrer nimmt seine Hände von dem Lenkrad 15 weg. Wenn andererseits der Fahrer während der Fahrt beiseite sieht, wie es in 11 dargestellt ist, ändert der Fahrer im Allgemeinen die Gesichtsrichtung, während er das Lenkrad 15 hält. Wenn der Fahrer beiseite sieht, kann der Fahrer seinen Hals drehen, um die Gesichtsrichtung zu ändern, ohne den Kopfabschnitt zu neigen. Somit erfasst der Richtungseinbruchszustandserfassungsabschnitt 73 in dem obigen Fall, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Wenn die Gesichtsrichtung, die von dem Gesichtsrichtungserfassungsabschnitt 65 erfasst wird, größer als der Schwellenwert Th2 ist und die Beschleunigeröffnung größer als eine vorbestimmte Öffnung ist, erfasst der Richtungseinbruchszustandserfassungsabschnitt 73, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Wenn der Fahrer während der Fahrt beiseite sieht, drückt er im Allgemeinen das Gaspedal nicht so viel. Wenn dementsprechend die Gesichtsrichtung in Bezug auf die Vorderseite des Fahrzeugs 10 größer als der Schwellenwert Th2 ist und die Beschleunigeröffnung größer als die vorbestimmte Öffnung ist, bricht die Gesichtsrichtung wahrscheinlich aufgrund einer plötzlichen Krankheit anstatt aufgrund eines Beiseitesehens ein. Somit erfasst der Richtungseinbruchszustandserfassungsabschnitt 73 in dem obigen Fall, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Wenn die Gesichtsrichtung, die von dem Gesichtsrichtungserfassungsabschnitt 65 erfasst wird, größer als der Schwellenwert Th2 ist und das Gaspedal und die Bremse während einer Zeit T3 (Betriebsbestimmungszeit) oder länger nicht betrieben bzw. betätigt wurden, erfasst der Richtungseinbruchszustandserfassungsabschnitt 73, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Wenn der Fahrer plötzlich krank wird, bricht im Allgemeinen die Gesichtsrichtung in Bezug auf die Vorderseite des Fahrzeugs 10 ein, und das Gaspedal und die Bremse werden während einer Zeit, die länger als eine Zeit T3 ist, nicht betätigt. Wenn im Gegensatz dazu der Fahrer während der Fahrt beiseite sieht, ändert der Fahrer im Allgemeinen eher die Gesichtsrichtung und betätigt das Gaspedal und die Bremse innerhalb der Zeit T3. Somit erfasst der Richtungseinbruchszustandserfassungsabschnitt 73 in dem obigen Fall, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Der Schüttelzustandserfassungsabschnitt 74 bestimmt den Schüttelzustand des Kopfabschnitts des Fahrers aufgrund einer äußeren Kraft während der Fahrt des Fahrzeugs 10, und wenn der Kopfabschnitt ungewöhnlich schüttelt, erfasst der Schüttelzustandserfassungsabschnitt 74, dass der Fahrer nicht mehr in der Lage ist zu fahren. Genauer gesagt erfasst der Schüttelzustandserfassungsabschnitt 74, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn während einer Periode, während der eine Zeit T5 (Schüttelbestimmungszeit) nach Ausübung einer äußeren Kraft auf das Fahrzeug 10 verstreicht, die Amplitude eines Schüttelns des Kopfabschnitts, der von dem Kopferfassungsabschnitt 61 erfasst wird, kleiner als eine Amplitude Am1 (erste Amplitude) oder größer als eine Amplitude Am2 (zweite Amplitude) ist. Die Amplitude Am2 ist größer als die Amplitude Am1.
  • Wie es in 12 dargestellt ist, wird, wenn eine äußere Kraft auf das Fahrzeug 10 ausgeübt wird, nach einer vorbestimmten Zeit eine Vibration auf den Fahrer übertragen. Normalerweise schwingt bzw. schüttelt bzw. wackelt der Kopfabschnitt des Fahrers in einem Fall, in dem der Fahrer sein Bewusstsein nicht verloren hat, wenn eine äußere Kraft (genauer gesagt eine vertikale äußere Kraft) auf das Fahrzeug 10 ausgeübt wird, mit einer Amplitude in dem Bereich der Amplitude Am1 bis zu der Amplitude Am2, wie es in 13 dargestellt ist. Wenn im Gegensatz dazu der Fahrer plötzlich krank wird und steif wird, ist die Amplitude des Schüttelns des Kopfabschnitts kleiner als gewöhnlich. Wenn der Fahrer plötzlich krank wird und plötzlich entspannt, ist die Amplitude des Schüttelns des Kopfabschnitts größer als gewöhnlich. Somit erfasst der Schüttelzustandserfassungsabschnitt 74 in einem derartigen Fall den Fahrunvermögenzustand des Fahrers.
  • Die Zeit T5 ist eine Zeit, die es dauert, bis die äußere Kraft nach Ausübung der äußeren Kraft auf das Fahrzeug 10 für den Fahrer irrelevant wird. Die Amplitude Am1 und die Amplitude Am2 sind Zeitfunktionen, und 13 stellt ein Beispiel dar. Bei der Bestimmung des Schüttelzustands werden auf einfache Weise ein minimaler Wert der Amplitude Am1 und ein maximaler Wert der Amplitude Am2 während einer Periode, in der die Zeit T5 nach Ausübung einer äußeren Kraft verstreicht, als Schwellenwerte eingestellt.
  • Der Weißaugenzustandsberechnungsabschnitt 75 bestimmt das Weiße des Auges während der Fahrt des Fahrzeugs 10, und wenn der Weißaugenerfassungsabschnitt 66 den Weißaugenzustand erfasst, erfasst der Weißaugenzustandsberechnungsabschnitt 75, dass der Fahrer nicht mehr in der Lage ist zu fahren. Genauer gesagt, wenn der Weißaugengrad, der von dem Weißaugengradberechnungsabschnitt 68 berechnet wird, größer als ein Schwellenwert Th3 (Weißaugenschwellenwert) ist, erfasst der Weißaugenzustandsberechnungsabschnitt 75, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Wenn der Fahrer in der Lage ist zu fahren, zeigt der Fahrer normalerweise niemals das Weiße der Augen. Wenn im Gegensatz dazu der Fahrer plötzlich krank wird, kann, wie es in 14A und 14B dargestellt ist, der Fahrer das Weiße der Augen zeigen. Wenn somit der Weißaugenzustand erfasst wird, erfasst der Weißaugenzustandsberechnungsabschnitt 75, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Die Speichervorrichtung 52 (ein Speicherabschnitt) speichert einen Schwellenwert und einen Bestimmungswert, die von einem Zustandserfassungsabschnitt verwendet werden. Außerdem speichert die Speichervorrichtung 52 die Neigung θ des Kopfabschnitts, die Gesichtsrichtung und die Amplitude des Schüttelns des Kopfabschnitts, die von dem Lernabschnitt 58 gelernt werden. Die Speichervorrichtung 52 registriert persönliche Informationen, die eine medizinische Historie und ein Alter des Fahrers enthalten. Wenn es mehrere Fahrer gibt, werden persönliche Informationen von jedem Fahrer registriert. Die Speichervorrichtung 52 registriert die Haltung des Fahrers, die nicht als Fahrunvermögenzustand bestimmt wird, und die Haltung des Fahrers, die als Fahrunvermögenzustand bestimmt wird. Die Haltung des Fahrers, die nicht als Fahrunvermögenzustand bestimmt wird, enthält eine normale Fahrhaltung und häufig angenommene Haltungen. Die Haltung des Fahrers, die als Fahrunvermögenzustand bestimmt wird, enthält eine Haltung, die der Fahrer annimmt, wenn er chronisch krank bei einem Krampf ist. Der Fahrer nimmt im Voraus Bilder, die von seiner Haltung auf dem Fahrersitz zu registrieren sind, mit den Fahrerkameras 21 auf und registriert die Haltung in der Speichervorrichtung 52.
  • Im Folgenden wird eine Verarbeitungsprozedur zum Erfassen des Fahrunvermögenzustands des Fahrers mit Bezug auf die Flussdiagramme der 16A und 16B beschrieben. Diese Verarbeitungsprozedur wird von der Steuerung 50 ausgeführt.
  • Es wird bestimmt, ob die Fahrzeuggeschwindigkeit des Fahrzeugs 10 gleich oder kleiner als V ist (S10). V kann 0 km/h (Halten) betragen, oder kann ausreichend niedrig sein, so dass ein Halten bestimmt wird (beispielsweise 1 km/h). Wenn die Fahrzeuggeschwindigkeit gleich oder kleiner als V ist (S10: Ja), wird die Bestimmung in S10 wiederholt, bis die Fahrzeuggeschwindigkeit größer als V ist. Wenn die Fahrzeuggeschwindigkeit größer als V ist (S10: Nein), wird bestimmt, dass das Fahrzeug fährt, und die Verarbeitung zum Erfassen des Fahrunvermögenzustands des Fahrers startet, um den Außer-Rahmenzustand zu bestimmen.
  • Hier kann in der Bestimmung in S10 bestimmt werden, ob der Fahrer fährt. Wenn der Fahrer fährt, kann die Bestimmung in S10 wiederholt werden, und wenn das Fahrzeug fährt und der Fahrer nicht fährt, kann die Verarbeitung zum Erfassen des Fahrunvermögenzustands des Fahrers gestartet werden. Es wird beispielsweise bestimmt, ob die Fahrzeuggeschwindigkeit des Fahrzeugs gleich oder größer als V2 (beispielsweise 50 km/h) ist, der Lenkwinkel, der von dem Lenksensor 32 erfasst wird, gleich oder größer als ein vorbestimmter Winkel ist, oder die Lenkwinkelgeschwindigkeit gleich oder größer als eine vorbestimmte Winkelgeschwindigkeit ist. V2 ist ein Wert, der angibt, dass der Fahrer das Gaspedal betätigt, und der vorbestimmte Winkel und die vorbestimmte Winkelgeschwindigkeit sind Größen, die angeben, dass der Fahrer das Lenkrad betätigt. Wenn mindestens eine der drei Bedingungen erfüllt ist, wird bestimmt, dass der Fahrer fährt, und die Verarbeitung zum Erfassen des Fahrunvermögenzustands des Fahrers wird nicht gestartet.
  • Bei der Bestimmung des Außer-Rahmenzustands werden zunächst der Kopfabschnitt und der Rumpf des Fahrers in dem Bild des Fahrersitzes erfasst (S11). Zu diesem Zeitpunkt werden Gesichtsmerkmale, die in dem Kopfabschnitt des Fahrers enthalten sind, erfasst, um den Fahrer zu authentifizieren. Der Fahrer kann im Voraus mittels Kommunikation mit einem mobilen Endgerät wie beispielsweise einem Smartphone oder mittels Kommunikation mit einem Schlüssel des Fahrzeugs 10, in dem persönliche Informationen registriert sind, authentifiziert werden.
  • Anschließend wird bestimmt, ob die Position des Kopfabschnitts erfasst werden kann (S12). Wenn die Position des Kopfabschnitts nicht erfasst wird (S12: Nein), werden Trajektorieninformationen des Kopfabschnitts aus Positionen des Kopfabschnitts, die in der unten beschriebenen Verarbeitung in S19 aufgezeichnet wurden, erlangt und es wird bestimmt, ob die Trajektorieninformationen den Außer-Rahmenzustand angeben (S13). Das heißt, es wird bestimmt, ob ein Grund für eine Nichterfassung der Position des Kopfabschnitts darin liegt, dass der Kopfabschnitt außerhalb eines Abbildungsbereiches liegt oder das Bild unscharf ist.
  • Wenn die Trajektorieninformationen des Kopfabschnitts nicht den Außer-Rahmenzustand angeben (S13: Nein), wird bestimmt, dass der Kopfabschnitt aufgrund einer Unschärfe des Bildes nicht erfasst werden kann, und die Prozedur kehr zur Verarbeitung in S10 zurück. Wenn im Gegensatz dazu die Trajektorieninformationen des Kopfabschnitts den Außer-Rahmenzustand angeben (S13: Ja), wird bestimmt, dass der Kopfabschnitt außerhalb des Abbildungsbereiches liegt. In diesem Fall werden, um zu bestätigen, dass der Kopfabschnitt außerhalb des Abbildungsbereiches liegt, Informationen von dem Sitzgurtsensor 22 und dem Sitzflächensensor 23 unterstützend verwendet (S14).
  • Anschließend wird bestimmt, ob der Außer-Rahmenzustand eine Zeit T0 (Außer-Rahmenbestimmungszeit) oder länger angedauert hat (S15). Genauer gesagt wird bestimmt, ob während der Zeit T0 oder länger die Position des Kopfabschnitts außerhalb des Bereiches FA lag und außerdem die Ziehgröße des Sitzgurtes 12 um eine erste Ziehgröße oder mehr größer als die Größe ist, die bei der Befestigung des Sitzgurtes 12 erfasst wurde, und außerdem ein Hochdruckabschnitt in der Druckverteilung des Sitzabschnitts 11a bei einem Ende des Sitzabschnitts 11a liegt. Wenn diese drei Bedingungen erfüllt sind, wird bestimmt, dass der Fahrer während der Zeit T0 oder länger außerhalb des Rahmens war. Hier kann die folgende Bedingung festgelegt werden: Die Ziehgröße je Größenerfassungszeit, die von dem Sitzgurtsensor 22 erfasst wird, das heißt, die Ziehgeschwindigkeit des Sitzgurtes 12, ist größer als eine zweite Ziehgröße.
  • Informationen von dem Sitzgurtsensor 22 und dem Sitzflächensensor 23 müssen nicht verwendet werden. Das heißt, die Verarbeitung in S14 muss nicht ausgeführt werden, und in der Verarbeitung in S15 kann nur bestimmt werden, ob die Position des Kopfabschnitts kontinuierlich während der Zeit T0 oder länger außerhalb des Bereiches FA lag.
  • Hier wird die Zeit T0 auf der Grundlage von persönlichen Informationen, die in der Speichervorrichtung 52 registriert sind, eingestellt. Wenn das Alter höher ist, ist beispielsweise die Zeit T0 kleiner. Eine kleinere Zeit T0 wird für eine Person eingestellt, die eine bestimmte medizinische Historie aufweist, im Vergleich zu einer Person, die keine bestimmte medizinische Historie aufweist. Außerdem wird die Zeit T0 entsprechend dem Zustand des Fahrers und der Fahrumgebung geändert. In dem Zustand, in dem der Fahrer ein Zeichen eines Fahrunvermögenzustands zeigt, in dem Zustand, in dem die Wahrscheinlichkeit, dass der Fahrer nicht mehr in der Lage ist zu fahren, hoch ist, oder bei einer Fahrumgebung, bei der eine Kollision wahrscheinlich auftritt, wenn der Fahrer nicht mehr in der Lage ist zu fahren, wird die Zeit T0 verringert, um eine Erfassung des Fahrunvermögenzustands des Fahrers zu erleichtern.
  • Insbesondere wenn die Position des Kopfabschnitts, die in der Verarbeitung in S19 aufgezeichnet wird, mit einer Amplitude vibriert, die größer als eine vorbestimmte Amplitude ist, das heißt, wenn der Kopfabschnitt unstetig schüttelt bzw. wackelt, ist die Wahrscheinlichkeit des Fahrunvermögenzustands hoch, und somit wird die Zeit T0 verringert. Wenn die Bewegungsgeschwindigkeit des Kopfabschnitts schneller ist, bricht die Haltung aufgrund einer plötzlichen Krankheit schneller ein als bei einem Aufnehmen eines Objektes. Somit wird in den erlangten Trajektorieninformationen des Kopfabschnitts, wenn die Bewegungsgeschwindigkeit des Kopfabschnitts höher ist, die Zeit T0 verringert. In dem Fall eines Haltungseinbruchs aufgrund einer plötzlichen Krankheit wird, wenn sich der Kopfabschnitt dem Ende des Bereiches FA annähert, die Bewegungsgeschwindigkeit des Kopfabschnitts häufig schneller. Wenn somit die Bewegungsgeschwindigkeit des Kopfabschnitts schneller wird, wenn sich die aufgezeichnete Position des Kopfabschnitts dem Ende des Bereiches FA annähert, bricht die Haltung wahrscheinlicher aufgrund einer plötzlichen Krankheit als aufgrund eines Aufnehmens eines Objektes ein. Wenn daher die Bewegungsgeschwindigkeit des Kopfabschnitts schneller wird, wenn sich die aufgezeichnete Position des Kopfabschnitts dem Ende des Bereiches FA annähert, wird die Zeit T0 verringert. Wenn ein Krampf erfasst wird, ist die Wahrscheinlichkeit des Fahrunvermögenzustands hoch, und somit wird die Zeit T0 verringert.
  • Um eine Kollision zu vermeiden, muss eine geeignete Fahrzeugsteuerung früher starten, wenn die Fahrzeuggeschwindigkeit höher ist. Somit wird die Zeit T0 verringert, wenn die Fahrzeuggeschwindigkeit des Fahrzeugs 10 höher ist. Um eine Kollision zu vermeiden, muss eine geeignete Fahrzeugsteuerung früher als eine TTC (Zeit bis zur Kollision) starten, die durch Teilen eines Abstands zwischen einem vorausbefindlichen Fahrzeug und dem eigenen Fahrzeug durch deren Relativgeschwindigkeit erhalten wird, kürzer ist. Somit wird die Zeit T0 verringert, wenn die TTC kürzer ist. Wenn eine Fahrunterstützungssteuerung wie beispielsweise eine ACC (adaptive Fahrtregelung) und eine LKA (Fahrspurhalteunterstützung) in dem Fahrzeug 10 durchgeführt wird, kann die Haltung des Fahrers eine lange Zeit einbrechen. Somit wird die Zeit T0 erhöht. Außerdem kann die Zeit T0 in der Woche oder in einem Zeitrahmen verringert werden, zu dem eine plötzliche Krankheit wie beispielsweise ein Herzanfall statistisch häufig auftritt.
  • Wenn der Nicht-Außerrahmenzustand die Zeit T0 oder länger angedauert hat (S15: Nein), schreitet die Prozedur zur Verarbeitung in S21. Wenn der Außer-Rahmenzustand die Zeit T0 oder länger angedauert hat (S15: Ja), wird bestimmt, dass der Fahrer nicht mehr in der Lage ist zu fahren, und der Fahrer wird über den Fahrunvermögenzustand befragt. Genauer gesagt wird mittels Tonausgabe von dem Lautsprecher 82, Anzeigen auf der Anzeige 81, Blinken eines Blinkers (nicht dargestellt) oder Ähnlichem hinsichtlich der Erfassung des Fahrunvermögenzustands informiert, und es wird bestimmt, ob der Fahrer innerhalb einer vorbestimmten Zeit darauf antwortet (S16).
  • Wenn innerhalb der vorbestimmten Zeit irgendein Kontakt des Fahrers mit einer berührungsempfindlichen Anzeige, eine Sprache des Fahrers, ein Betrieb des Lenkrads 15, der Bremse usw. des Fahrzeugs 10 oder ein Betrieb eines bestimmten Schalters erfasst wird, wird bestimmt, dass der Fahrer darauf antwortet (S16: Nein). Wenn keines von diesen erfasst wird, wird bestimmt, dass der Fahrer nicht darauf antwortet (S16: Ja).
  • Wenn bestimmt wird, dass der Fahrer antwortet, wird die Erkennung, dass der Fahrer in der Lage ist zu fahren, mittels Tonausgabe von dem Lautsprecher 82 oder Anzeigen auf der Anzeige 81 gemeldet (S17). Wenn im Gegensatz dazu bestimmt wird, dass der Fahrer nicht antwortet, wird die Fahrzeugsteuerung 90 angewiesen, das Fahrzeug geeignet zu bremsen und zu lenken, um das Fahrzeug zu stoppen. Um hinsichtlich dieses Umstands die umgebenden Fahrzeuge zu benachrichtigen, wird die Fahrzeugsteuerung 90 angewiesen, einen Scheinwerfer einzuschalten und die Hupe zu betätigen (S18). Außerdem wird dieser Umstand ebenfalls anderen Insassen des Fahrzeugs 10 gemeldet.
  • Wenn in der Verarbeitung in S12 bestimmt wird, dass die Position des Kopfabschnitts erfasst werden kann (S12: Ja), werden die Position des Kopfabschnitts und des Rumpfes aufgezeichnet (S19). Trajektorieninformationen über den Kopfabschnitt können aus Positionen des Kopfabschnitts, die in jedem Bild aufgezeichnet sind, erlangt werden.
  • Anschließend wird bestimmt, ob die Position des Kopfabschnitts außerhalb des voreingestellten Bereiches FA liegt bzw. gelangt ist (S20). Wenn die Position des Kopfabschnitts innerhalb des Abbildungsbereiches liegt, aber außerhalb des Bereiches FA liegt bzw. gelangt ist (S20: Ja), schreitet die Prozedur zur Verarbeitung in S15, um den Außer-Rahmenzustand zu bestimmen.
  • Anschließend wird auf der Grundlage der Relativposition des Kopfabschnitts zu dem Rumpf bestimmt, ob die Haltung des Fahrers die Haltung ist, die als Fahrunvermögenzustand bestimmt wird, der in der Speichervorrichtung 52 registriert ist, (S21). Wenn die Haltung des Fahrers die Haltung ist, die als Fahrunvermögenzustand bestimmt wird (S21: Ja), wird bestimmt, dass der Fahrer nicht mehr in der Lage ist zu fahren, und die Prozedur schreitet zur Verarbeitung in S16.
  • Wenn die Haltung des Fahrers keine Haltung ist, die als Fahrunvermögenzustand bestimmt wird (S21: Nein), wird bestimmt, ob die Haltung des Fahrers die Position ist, die nicht als Fahrunvermögenzustand bestimmt wird und die in der Speichervorrichtung 52 registriert ist (S22). Wenn die Haltung des Fahrers die Haltung ist, die nicht als Fahrunvermögenzustand bestimmt wird (S22: Ja), kehrt die Prozedur zur Verarbeitung in S10 zurück. Wenn die Haltung des Fahrers sich von der Haltung unterscheidet, die nicht als Fahrunvermögenzustand bestimmt wird (S22: Nein), wird ein Haltungseinbruch bestimmt.
  • Es wird bestimmt, ob ein Haltungseinbruch erfasst wird (S23). Genauer gesagt wird der Haltungseinbruch entsprechend der Verarbeitung der Unterroutine der 17 erfasst. Zunächst werden die Neigung des Kopfabschnitts und die Neigungsrichtung des Kopfabschnitts berechnet (S231). Anschließend werden die Neigung des Rumpfes und die Neigungsrichtung des Rumpfes berechnet (S232). Dann wird ein Winkel, den die berechnete Neigung des Rumpfes mit der berechneten Neigung des Kopfabschnitts ausbildet, das heißt die Neigung θ des Kopfabschnitts in Bezug auf den Rumpf, berechnet (S233). Die berechnete Neigung θ des Kopfabschnitts wird gelernt, wenn der Fahrunvermögenzustand des Fahrers nicht erfasst wird. Wenn dann die berechnete Neigung θ des Kopfabschnitts größer als der Schwellenwert Th1 (relativer Neigungsschwellenwert) ist, wird ein Haltungseinbruch erfasst (S234). Wenn der Haltungseinbruch nicht erfasst wird (S23: Nein), schreitet die Prozedur zur Bestimmung eines Gesichtsrichtungseinbruchs in S25.
  • Wenn ein Haltungseinbruch erfasst wird (S23: Ja) wird bestimmt, ob während der Zeit T1 oder länger die Neigung θ des Kopfabschnitts kontinuierlich größer als der Schwellenwert Th1 war und das Gesicht nicht kontinuierlich zur Vorderseite des Fahrzeugs 10 gerichtet war (S24).
  • Hier kann die folgende einfache Bedingung festgelegt werden: Während der Zeit T1 oder länger ist die Neigung θ des Kopfabschnitts kontinuierlich größer als der Schwellenwert Th1 oder das Gesicht ist nicht kontinuierlich zur Vorderseite des Fahrzeugs 10 gerichtet. Hier kann die folgende Bedingung festgelegt werden: Während der Zeit T1 oder länger variieren die berechnete Neigungsrichtung des Kopfabschnitts und die Neigungsrichtung des Rumpfes nicht kontinuierlich, das heißt, die Position des Kopfabschnitts und die Position des Rumpfes liegen kontinuierlich innerhalb eines Bereiches UA (Nichtbewegungsbestimmungsbereich). In dem Bereich UA wird angenommen, dass der Kopfabschnitt und der Rumpf stationär sind. Alternativ kann die folgende Bedingung festgelegt werden: Die berechnete Neigung θ des Kopfabschnitts ist um einen Bestimmungswert D1 (ein Neigungsbestimmungswert) oder mehr größer als eine gelernte Neigung des Kopfabschnitts. Alternativ kann die folgende Bedingung festgelegt werden: Das Lenkrad 15 wird während der Zeit T3 (eine Betriebsbestimmungszeit) oder länger nicht betätigt.
  • Hier wird die Zeit T1 ähnlich wie die die Zeit T0 auf der Grundlage von persönlichen Informationen, die in der Speichervorrichtung 52 registriert sind, eingestellt und entsprechend der Fahrzeuggeschwindigkeit, der TTC und dem Vorhandensein bzw. der Abwesenheit einer Ausführung einer Fahrunterstützungssteuerung geändert. Der Schwellenwert Th1 verringert sich, wenn ein Krampf erfasst wird. Außerdem kann die Zeit T1 ähnlich wie die Zeit T0 in der Woche oder in einem Zeitrahmen verringert werden, in dem eine plötzliche Krankheit wie beispielsweise ein Herzanfall statistisch häufig auftritt.
  • Wenn während der Zeit T1 oder länger die Neigung θ des Kopfabschnitts größer als der Schwellenwert Th1 war und das Gesicht nicht zur Vorderseite des Fahrzeugs 10 gerichtet war (S24: Ja), wird bestimmt, dass der Fahrer nicht mehr in der Lage ist zu fahren, und die Prozedur schreitet zur Frageverarbeitung in S16. Wenn während der Zeit T1 oder länger die Neigung θ des Kopfabschnitts nicht kontinuierlich größer als der Schwellenwert Th1 war, oder wenn das Gesicht kontinuierlich zur Vorderseite des Fahrzeugs gerichtet war (S24: Nein), wird als Nächstes ein Gesichtsrichtungseinbruch bestimmt.
  • Es wird bestimmt, ob ein Einbruch der Gesichtsrichtung erfasst wird (S25). Genauer gesagt wird die Gesichtsrichtung des Fahrers in Bezug auf die Richtung zur Vorderseite des Fahrzeugs erfasst. Wenn dann die erfasste Gesichtsrichtung größer als der Schwellenwert Th2 (ein Gesichtsrichtungsschwellenwert) ist, wird ein Einbruch der Gesichtsrichtung erfasst. Wenn der Gesichtsrichtungseinbruch nicht erfasst wird (S25: Nein), schreitet die Prozedur zu einer Schüttelzustandsbestimmung in S28. Die erfasste Gesichtsrichtung wird gelernt, wenn der Fahrunvermögenzustand des Fahrers nicht erfasst wird.
  • Wenn der Gesichtsrichtungseinbruch erfasst wird (S25: Ja), wird bestimmt, ob die Gesichtsrichtung während der Zeit T2 (Richtungseinbruchsbestimmungszeit) oder länger kontinuierlich größer als der Schwellenwert Th2 war (S26).
  • Hier wird die Zeit T2 ähnlich wie die Zeit T0 auf der Grundlage von persönlichen Informationen, die in der Speichervorrichtung 52 registriert sind, eingestellt und entsprechend der Fahrzeuggeschwindigkeit, der TTC und dem Vorhandensein bzw. der Abwesenheit einer Ausführung einer Fahrunterstützungssteuerung geändert. Außerdem kann die Zeit T2 ähnlich wie die Zeit T0 in der Woche oder in einem Zeitrahmen, in dem eine plötzliche Krankheit wie beispielsweise ein Herzanfall statistisch häufig auftritt, verringert werden. Wenn ein Krampf erfasst wird, wird der Schwellenwert Th2 verringert.
  • Wenn die Gesichtsrichtung während der Zeit T2 oder länger kontinuierlich größer als der Schwellenwert Th2 war (S26: Ja), wird bestimmt, dass der Fahrer nicht mehr in der Lage ist zu fahren, und die Prozedur schreitet zur Frageverarbeitung in S16.
  • Wenn die Gesichtsrichtung während der Zeit T2 oder länger nicht kontinuierlich größer als der Schwellenwert Th2 war (S26: Nein), wird bestimmt, ob der Fahrer während der Zeit T3 oder länger seine Hände von dem Lenkrad 15 genommen hat, die Beschleunigeröffnung größer als eine vorbestimmte Öffnung ist oder das Gaspedal und das Bremspedal nicht betätigt wurden (S27). Wenn mindestens eine dieser drei Bedingungen in der Verarbeitung in S27 erfüllt ist (S27: Ja), wird bestimmt, dass der Fahrer nicht mehr in der Lage ist zu fahren, und die Prozedur schreitet zur Frageverarbeitung in S16. Wenn keine der drei Bedingungen in der Verarbeitung in S27 erfüllt ist (S27: Nein), wird der Schüttelzustand bestimmt.
  • Hier kann in der Bestimmungsverarbeitung in S26 die Bedingung, dass mindestens eine der drei Bedingungen in der Verarbeitung in S27 erfüllt ist, eingestellt werden. In der Bestimmungsverarbeitung in S26 und S27 kann die folgende Bedingung eingestellt werden: Die erfasste Gesichtsrichtung ist um den Bestimmungswert D1 (Neigungsbestimmungswert) oder mehr größer als die gelernte Gesichtsrichtung. Da der Fahrer im Allgemeinen nicht in den Fahrunvermögenzustand gelangt ist, wenn die Hände des Fahrers höher als der Hals des Fahrers sind, kann die Bedingung, dass die Hände des Fahrers niedriger als der Hals des Fahrers angeordnet sind, eingestellt werden.
  • Im Folgenden wird bei der Schüttelzustandsbestimmung bestimmt, ob eine abnorme Unstetigkeit des Kopfabschnitts bei Ausübung einer äußeren Kraft erfasst wird (S28). Genauer gesagt wird bestimmt, ob, bis die Zeit T5 (eine Schüttelbestimmungszeit) verstrichen ist, nachdem eine äußere Kraft auf das Fahrzeug 10 ausgeübt wurde, die Amplitude des Schwingens bzw. Schüttelns des Kopfabschnitts kleiner als die Amplitude Am1 (erste Amplitude) oder größer als die Amplitude Am2 (zweite Amplitude) ist.
  • Hier kann die folgende Bedingung eingestellt werden: Der Kopfabschnitt vibriert mit einer abnormen Amplitude, während die Zeit T5 verstreicht, nachdem eine äußere Kraft auf das Fahrzeug 10 ausgeübt wurde, und nach dem Verstreichen der Zeit T5 liegt die Position des Kopfabschnitts innerhalb des Bereiches UA. Das heißt, es kann die folgende Bedingung eingestellt werden: Der Kopfabschnitt vibriert entsprechend einer äußeren Kraft, und nachdem die Wirkung der äußeren Kraft abgeklungen ist, ändert sich die Position des Kopfabschnitts nicht. Alternativ kann die folgende Bedingung eingestellt werden: Wenn der Fahrunvermögenzustand des Fahrers nicht erfasst wird, wird eine Amplitude eines Schüttelns des Kopfabschnitts gelernt, und die erfasste Amplitude des Schüttelns des Kopfabschnitts ist um den Bestimmungswert D2 (Amplitudenbestimmungswert) oder mehr größer als die gelernte Amplitude des Schüttelns des Kopfabschnitts. Es kann eine Bedingung eingestellt werden, dass das Lenkrad 15 während der Zeit T3 oder länger nicht kontinuierlich betätigt wurde.
  • Wenn eine abnorme Unstetigkeit des Kopfabschnitts bei Ausübung einer äußeren Kraft erfasst wird (S28: Ja), wird bestimmt, dass der Fahrer nicht mehr in der Lage ist zu fahren, und die Prozedur schreitet zur Frageverarbeitung in S16. Wenn eine abnorme Unstetigkeit des Kopfabschnitts bei Ausübung einer äußeren Kraft nicht erfasst wird (S28: Nein), wird der Weißaugenzustand bestimmt.
  • Es wird bestimmt, ob der Weißaugenzustand erfasst wird (S29). Genauer gesagt, wenn der berechnete Weißaugengrad größer als der Schwellenwert Th3 (Weißaugenschwellenwert) ist, wird bestimmt, dass der Weißaugenzustand erfasst wird. Hier wird der Weißaugengrad jedes der beiden Augen des Fahrers berechnet, und wenn die beiden Weißaugengrade beider Augen jeweils größer als der Schwellenwert Th3 sind, wird bestimmt, dass der Weißaugenzustand erfasst wird. Wenn jedoch nur ein Auge erfasst wird, oder wenn der Weißaugenzustand auf einfache Weise erfasst wird, kann die Erfassung des Weißaugenzustands auch auf der Grundlage des Weißaugengrads nur eines Auges bestimmt werden.
  • Wenn bestimmt wird, dass der Weißaugenzustand nicht erfasst wird (S29: Nein), wurde in der Außer-Rahmenbestimmung, der Haltungseinbruchsbestimmung, der Gesichtsrichtungseinbruchsbestimmung, der Schüttelzustandsbestimmung und der Weißaugenzustandsbestimmung jeweils der Fahrunvermögenzustand des Fahrers nicht erfasst, und somit schreitet die Prozedur zur Verarbeitung in S10.
  • Wenn bestimmt wird, dass der Weißaugenzustand erfasst wird (S29: Ja), wird bestimmt, ob der Weißaugengrad während der Zeit T4 (Weißaugenbestimmungszeit) oder länger größer als der Schwellenwert Th3 war (S30). Hier kann eine Bedingung eingestellt werden, dass das Lenkrad 15 während der Zeit T3 oder länger nicht kontinuierlich betätigt wurde.
  • Hier wird die Zeit T4 ähnlich wie die Zeit T0 auf der Grundlage von persönlichen Informationen, die in der Speichervorrichtung 52 registriert sind, eingestellt und entsprechend der Fahrzeuggeschwindigkeit und der TTC geändert. Wenn ein Krampf erfasst wird, wird der Schwellenwert Th3 verringert. Ähnlich wie die Zeit T0 kann die Zeit T4 in der Woche oder in einem Zeitrahmen, in dem eine plötzliche Krankheit wie beispielsweise ein Herzanfall statistisch häufig auftritt, verringert werden.
  • Wenn der Weißaugengrad während der Zeit T4 oder länger nicht kontinuierlich größer als der Schwellenwert Th3 war (S30: Nein), schreitet die Prozedur zur Verarbeitung in S10. Wenn der Weißaugengrad während der Zeit T4 oder länger kontinuierlich größer als der Schwellenwert Th3 war (S30: Ja), wird der Fahrunvermögenzustand des Fahrers erfasst, und die Prozedur schreitet zur Frageverarbeitung in S16. Hier wird diese Verarbeitung beendet.
  • Wie es in 18 dargestellt ist, wird der Haltungseinbruchspegel des Fahrers auf der Anzeige 81 auf der Grundlage der erfassten Neigung θ des Kopfabschnitts in Bezug auf den Rumpf, der erfassten Gesichtsrichtung und der erfassten Position des Kopfabschnitts angezeigt. Wenn die erfasste Neigung θ des Kopfabschnitts größer ist, wird der Haltungseinbruchspegel auf größer eingestellt. Wenn die erfasste Gesichtsrichtung größer ist, wird der Haltungseinbruchspegel größer gemacht. Wenn die erfasste Position des Kopfabschnitts von einer Standardposition während der Fahrt entfernt ist, wird der Haltungseinbruchspegel auf höher eingestellt. Die Standardposition während der Fahrt ist die Position des Kopfes beim Start des Fahrzeugs 10 oder eine mittlere Position des Kopfabschnitts zu dem Zeitpunkt, zu dem der Fahrunvermögenzustand des Fahrers nicht erfasst wird.
  • Gemäß der vorliegenden Ausführungsform können die folgenden Wirkungen erzielt werden.
  • Durch Erfassen, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn der Kopfabschnitt des Fahrers außerhalb des Bereiches FA gelangt, kann der Fahrunvermögenzustand des Fahrers schnell erfasst werden. Außerdem kann unter Berücksichtigung der Trajektorie, die erlangt wird, bis der Kopfabschnitt außerhalb des Bereiches FA gelangt, die Genauigkeit der Erfassung des Fahrunvermögenzustands des Fahrers verbessert werden.
  • Wenn der Fahrer ein Objekt, das von dem Fahrersitz entfernt angeordnet ist, aufnimmt, kehrt der Kopfabschnitt normalerweise zu dem Bereich FA zurück, auch dann, wenn der Kopfabschnitt zeitweilig außerhalb des Bereiches FA liegt. Somit kann durch Einstellen der Bedingung, dass der Kopfabschnitt des Fahrers während der Zeit T0 oder länger außerhalb des Bereiches FA war, eine falsche Erfassung des Fahrunvermögenzustands des Fahrers verhindert werden.
  • Wenn der Bereich FA das gesamte Bild einnimmt, kann die Erfassungsverarbeitung weiter vereinfacht werden, da der Fahrunvermögenzustand des Fahrers erfasst wird, wenn der Kopfabschnitt des Fahrers nicht in dem Bild vorhanden ist.
  • Wenn die Haltung des Fahrers aufgrund einer plötzlichen Krankheit einbricht, wird geschätzt, dass die Ziehgröße des Sitzgurtes 12 zu diesem Zeitpunkt um eine erste Ziehgröße oder mehr größer als die Ziehgröße bei der Anbringung des Sitzgurtes ist. Sogar wenn der Kopfabschnitt des Fahrers nicht erfasst werden kann, wird, wenn die Ziehgröße des Sitzgurtes 12 um die erste Ziehgröße oder mehr größer als die Ziehgröße bei der Anbringung ist, herausgefunden, dass der Kopfabschnitt des Fahrers außerhalb des Abbildungsbereiches gelangt ist. Somit kann durch Einstellen der Bedingung, dass die Ziehgröße des Sitzgurtes 12 um die erste Ziehgröße oder mehr größer als die Ziehgröße bei der Anbringung ist, der Fahrunvermögenzustand des Fahrers mit hoher Genauigkeit erfasst werden.
  • Die Haltung des Fahrers bricht noch schneller ein, wenn der Fahrer plötzlich krank wird, als wenn der Fahrer ein Objekt aufnimmt. Aus diesem Grund wird der Sitzgurt 12 schneller herausgezogen, wenn der Fahrer plötzlich krank wird, als wenn der Fahrer ein Objekt aufnimmt. Somit kann durch Einstellen einer Bedingung, dass die Ziehgröße des Sitzgurtes 12 je Größenerfassungszeit größer als eine zweite Ziehgröße ist, eine falsche Erfassung des Fahrunvermögenzustands des Fahrers verhindert werden.
  • Wenn die Haltung des Fahrers aufgrund einer plötzlichen Krankheit einbricht, wird geschätzt, dass ein Hochdruckabschnitt einer Druckverteilung des Sitzabschnitts 11a des Fahrersitzes sich zu einem Ende des Sitzabschnitts 11a neigt. Sogar wenn der Kopfabschnitt des Fahrers nicht erfasst werden kann, wird, wenn der Hochdruckabschnitt der Druckverteilung des Sitzabschnitts 11a des Fahrersitzes bei dem Ende des Sitzabschnitts 11a liegt, herausgefunden, dass der Kopfabschnitt des Fahrers außerhalb des Abbildungsbereiches liegt. Somit kann durch Einstellen der Bedingung, dass der Hochdruckabschnitt der Druckverteilung des Sitzabschnitts 11a des Fahrersitzes bei dem Ende des Sitzabschnitts 11a liegt, der Fahrunvermögenzustand des Fahrers mit hoher Genauigkeit erfasst werden.
  • Durch Verringern der Zeit T0, wenn der Kopfabschnitt mit einer Amplitude vibriert, die größer als eine vorbestimmte Amplitude ist, das heißt, wenn der Kopfabschnitt unstetig schwingt bzw. schüttelt, kann die Zeit, die benötigt wird, um den Fahrunvermögenzustand des Fahrers zu bestimmen, verringert werden.
  • Durch Verringern der Zeit T0, wenn die Bewegungsgeschwindigkeit des Kopfabschnitts höher ist, kann die Zeit, die benötigt wird, um den Fahrunvermögenzustand des Fahrers zu bestimmen, verringert werden.
  • Durch Verringern der Zeit, die benötigt wird, um den Fahrunvermögenzustand zu bestimmen, wenn die Bewegungsgeschwindigkeit des Kopfabschnitts höher wird, wenn sich der Kopfabschnitt dem Ende des Bereiches FA annähert, kann die Zeit, die benötigt wird, um den Fahrunvermögenzustand des Fahrers zu bestimmen verringert werden.
  • Wenn die Neigung θ des Kopfabschnitts in Bezug auf den Rumpf größer als der Schwellenwert Th1 ist, tritt der Haltungseinbruch wahrscheinlicher aufgrund einer plötzlichen Krankheit anstatt aufgrund eines Aufnehmens eines Objektes auf. Daher kann durch Erfassen, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn die Neigung θ des Kopfabschnitts in Bezug auf den Rumpf größer als der Schwellenwert Th1 ist, der Fahrunvermögenzustand des Fahrers mit hoher Genauigkeit erfasst werden.
  • Wenn der Fahrer während der Fahrt den Kopfabschnitt stark in Richtung des Rumpfes bewusst neigt, wird geschätzt, dass der Fahrer aus Sicherheitsgründen sein Gesicht fortgesetzt zur Vorderseite des Fahrzeugs 10 richtet. Somit kann durch Einstellen der Bedingung, dass das Gesicht nicht zur Vorderseite des Fahrzeugs 10 gerichtet ist, eine falsche Erfassung des Fahrunvermögenzustands des Fahrers verhindert werden.
  • Wenn der Fahrer während der Fahrt den Kopfabschnitt bewusst stark in Richtung des Rumpfes neigt, wird geschätzt, dass der Fahrer aus Sicherheitsgründen den Kopfabschnitt schnell zur Anfangsposition zurückkehren lässt. Somit kann durch Einstellen der Bedingung, dass der Kopfabschnitt während der Zeit T1 oder länger stark in Bezug auf den Rumpf geneigt war, eine falsche Erfassung des Fahrunvermögenzustands des Fahrers verhindert werden.
  • Durch Einstellen der Bedingung, dass die Positionen des Kopfabschnitts und des Rumpfes während der Zeit T1 oder länger unverändert waren, während der Kopfabschnitt stark in Bezug auf den Rumpf geneigt war, kann eine falsche Erfassung des Fahrunvermögenzustands des Fahrers verhindert werden.
  • Durch Einstellen der Bedingung, dass die erfasste Neigung θ des Kopfabschnitts um den Bestimmungswert D1 oder mehr größer als die gelernte Neigung des Kopfabschnitts ist, kann sogar dann, wenn der Fahrer die Gewohnheit hat, den Kopfabschnitt in Bezug auf den Rumpf zu neigen, eine falsche Erfassung des Fahrunvermögenzustands des Fahrers verhindert werden.
  • Wenn die Gesichtsrichtung in Bezug auf die Vorderseite des Fahrzeugs 10 während der Zeit T2 oder länger größer als der Schwellenwert Th2 war, bricht die Gesichtsrichtung wahrscheinlicher aufgrund einer plötzlichen Krankheit anstatt aufgrund eines Beiseitesehens ein. Dementsprechend kann durch Erfassen in einem derartigen Fall, dass der Fahrer nicht mehr in der Lage ist zu fahren, der Fahrunvermögenzustand des Fahrers mit hoher Genauigkeit erfasst werden.
  • Wenn die Gesichtsrichtung in Bezug auf die Vorderseite des Fahrzeugs 10 größer als der Schwellenwert Th2 ist und der Fahrer seine Hände von dem Lenkrad 15 wegnimmt, bricht die Gesichtsrichtung wahrscheinlicher aufgrund einer plötzlichen Krankheit anstatt aufgrund eines Beiseitesehens ein. Daher kann durch Erfassen in einem derartigen Fall, dass der Fahrer nicht mehr in der Lage ist zu fahren, der Fahrunvermögenzustand des Fahrers mit hoher Genauigkeit erfasst werden.
  • Wenn die Gesichtsrichtung in Bezug auf die Vorderseite des Fahrzeugs 10 größer als der Schwellenwert Th2 ist und die Beschleunigeröffnung größer als die vorbestimmte Öffnung ist, bricht die Gesichtsrichtung wahrscheinlicher aufgrund einer plötzlichen Krankheit anstatt aufgrund eines Beiseitesehens ein. Dementsprechend kann durch Erfassen in einem derartigen Fall, dass der Fahrer nicht mehr in der Lage ist zu fahren, der Fahrunvermögenzustand des Fahrers mit hoher Genauigkeit erfasst werden.
  • Wenn die Gesichtsrichtung in Bezug auf die Vorderseite des Fahrzeugs 10 größer als der Schwellenwert Th2 ist und das Gaspedal und die Bremse während einer Zeit, die länger als die Zeit T3 ist, nicht betätigt wurden, bricht die Gesichtsrichtung wahrscheinlicher aufgrund einer plötzlichen Krankheit als aufgrund eines Beiseitesehens ein. Dementsprechend kann durch Erfassen in einem derartigen Fall, dass der Fahrer nicht mehr in der Lage ist zu fahren, der Fahrunvermögenzustand des Fahrers mit hoher Genauigkeit erfasst werden.
  • Wenn der Fahrer in der Lage ist zu fahren, wird im Allgemeinen das Lenkrad innerhalb der Zeit T3 betätigt. Somit kann durch Einstellen der Bedingung, dass das Lenkrad während einer Zeit, die länger als die Zeit T3 ist, nicht betätigt wurde, eine falsche Erfassung des Fahrunvermögenzustands des Fahrers verhindert werden.
  • Wenn der Fahrer in der Lage ist zu fahren, drückt der Fahrer niemals fortgesetzt das Gaspedal während einer Zeit, die länger als die Zeit T3 ist. Somit kann durch Einstellen der Bedingung, dass die Beschleunigeröffnung größer als die vorbestimmte Öffnung während einer Zeit war, die länger als die Zeit T3 ist, eine falsche Bestimmung des Fahrunvermögenzustands des Fahrers verhindert werden.
  • Wenn der Fahrer während der Fahrt absichtlich die Gesichtsrichtung in Bezug auf die Vorderseite des Fahrzeugs 10 ändert, wird er wahrscheinlich sein Gesicht nach vorne zurückkehren lassen. Somit kann durch Einstellen der Bedingung, dass die Gesichtsrichtung in Richtung der Vorderseite 10 während der Zeit T2 oder länger größer als der Schwellenwert Th2 war, eine falsche Erfassung des Fahrunvermögenzustands des Fahrers verhindert werden.
  • Wenn der Fahrer plötzlich krank wird, wird er im Allgemeinen nicht in den Fahrunvermögenzustand gelangen, wenn seine Hände höher als sein Hals sind. Somit kann durch Einstellen der Bedingung, dass die Hände des Fahrers niedriger als der Hals des Fahrers sind, eine falsche Erfassung des Fahrunvermögenzustands des Fahrers verhindert werden.
  • In einer Periode, die es dauert, bis die Zeit T5 verstrichen ist, nachdem eine äußere Kraft auf das Fahrzeug ausgeübt wurde, kann durch Erfassen, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn die Amplitude des Schüttelns des Kopfabschnitts kleiner als die Amplitude Am1 oder größer als die Amplitude Am2 ist, der Fahrunvermögenzustand des Fahrers auf einfache Weise erfasst werden.
  • Wenn der Fahrer sein Bewusstsein verloren hat, vibriert der Kopfabschnitt im Allgemeinen entsprechend der äußeren Kraft. Wenn dann die Wirkung der äußeren Kraft abgeklungen ist, wird der Kopfabschnitt stationär. Wenn andererseits der Fahrer den Kopfabschnitt gewöhnlich vibrieren lässt, vibriert der Kopfabschnitt unabhängig von der Wirkung der äußeren Kraft. Somit kann durch Einstellen der Bedingung, dass der Kopfabschnitt entsprechend der äußeren Kraft vibriert und die Position des Kopfabschnitts sich nach dem Abklingen der Wirkung der äußeren Kraft nicht ändert, eine falsche Erfassung des Fahrunvermögenzustands des Fahrers verhindert werden.
  • Durch Einstellen der Bedingung, dass die erfasste Amplitude des Schüttelns des Kopfabschnitts um einen Wert, der einen Bestimmungswert D2 überschreitet, größer als die gelernte Amplitude des Schüttelns des Kopfabschnitts ist, kann sogar dann, wenn der Fahrer die Gewohnheit hat, den Kopf zu schwingen bzw. schütteln, eine falsche Erfassung des Fahrunvermögenzustands des Fahrers verhindert werden.
  • Wenn der Weißaugenzustand erfasst wird, kann durch Erfassen, dass der Fahrer nicht mehr in der Lage ist zu fahren, der Fahrunvermögenzustand des Fahrers mit hoher Genauigkeit erfasst werden.
  • Der Augenumriss und der schwarze Augenbereich des Fahrers werden auf der Grundlage des Bildes erfasst. Dann wird der Weißaugengrad auf der Grundlage des erfassten Augenumrisses und des schwarzen Augenbereiches berechnet, und wenn der Weißaugengrad größer als der Schwellenwert Th3 ist, wird erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren. Somit kann der Weißaugenzustand des Fahrers mit hoher Genauigkeit erfasst werden, und es kann der Fahrunvermögenzustand des Fahrers mit hoher Genauigkeit erfasst werden.
  • In dem Zustand, in dem der Fahrer in der Lage ist zu fahren, verbleibt sogar dann, wenn der Fahrer sein Auge nach oben rollt, um zeitweilig den Weißaugengrad zu erhöhen, der Weißaugengrad nicht groß. Somit kann durch Einstellen der Bedingung, dass der Weißaugengrad während einer Zeit T4 oder länger größer als der Schwellenwert Th3 war, eine falsche Erfassung des Fahrunvermögenzustands des Fahrers verhindert werden.
  • Durch Einstellen der Bedingung, dass der Weißaugengrad der jeweiligen Augen größer als der Schwellenwert Th3 ist, wird sogar dann, wenn der Weißaugenzustand irrtümlicherweise erfasst wird, da der Fahrer eine Augenbinde auf einem Auge aufweist, oder ein Auge ein künstliches Auge ist, der Fahrunvermögenzustand des Fahrers in dem Fall nicht erfasst, in dem der Fahrer das Weiße des anderen Auges nicht zeigt. Somit kann eine falsche Erfassung des Fahrunvermögenzustands des Fahrers verhindert werden.
  • Da das Verhältnis der Längslänge Lb des schwarzen Augenbereiches zu der Längslänge Lw + Lb des Auges mit dem Anteil des Weißaugenbereiches an dem gesamten Bereich des Auges korreliert, kann der Weißaugengrad aus dem Verhältnis der Längslänge Lb des schwarzen Augenbereiches zu der Längslänge Lw + Lb des Auges berechnet werden.
  • Wenn der Abstand Lb zwischen dem Oberen des Augenumrisses und dem Unteren des schwarzen Augenbereiches kleiner ist, wird der Weißaugengrad größer. Somit kann der Weißaugengrad aus dem Abstand Lb zwischen dem Oberen des Augenumrisses und dem Unteren des schwarzen Augenbereiches berechnet werden.
  • Der Weißaugengrad kann aus dem Verhältnis des Bereiches des Weißaugenbereiches zu dem Bereich des schwarzen Augenbereiches berechnet werden.
  • In dem Weißaugenzustand ist der schwarze Augenbereich aufwärts gerichtet und somit wird die Abplattung des schwarzen Augenbereiches scheinbar groß. Somit kann der Weißaugengrad aus der Abplattung des schwarzen Augenbereiches berechnet werden.
  • Wenn der Abstand Lc zwischen der Längsmittellinie des gesamten Auges und dem Unteren des schwarzen Augenbereiches größer ist, wird der schwarze Augenbereich größer, und der Weißaugengrad wird größer. Somit kann der Weißaugengrad aus dem Abstand Lc zwischen der Mittellinie und dem Unteren des schwarzen Augenbereiches berechnet werden.
  • Im Allgemeinen ist die Wahrscheinlichkeit, dass der Fahrer in den Fahrunvermögenzustand gelangt, höher, wenn der Fahrer einen Krampf hat als wenn der Fahrer keinen Krampf hat. Wenn somit ein Krampf erfasst wird, kann der Fahrunvermögenzustand des Fahrers durch Verringern der Schwellenwerte Th1 und Th2 noch schneller erfasst werden.
  • Durch Verringern bzw. Verkürzen der Zeiten T0, T1, T2 und T4, wenn die Fahrzeuggeschwindigkeit höher ist, kann die Zeit, die benötigt wird, um den Fahrunvermögenzustand des Fahrers zu bestimmen, verringert werden, wenn die Fahrzeuggeschwindigkeit höher ist, womit eine geeignete Fahrzeugsteuerung früher gestartet werden kann.
  • Durch Verringern der Zeiten T0, T1, T2 und T4, wenn sich die TTC verringert, kann die Zeit, die benötigt wird, um den Fahrunvermögenzustand des Fahrers zu bestimmen, verringert werden, wenn sich die TTC verringert, womit eine geeignete Fahrzeugsteuerung früher gestartet wird.
  • Durch Einstellen der Zeiten T0, T1, T2 und T4 auf der Grundlage von persönlichen Informationen, die einen medizinische Historie und das Alter des Fahrers enthalten, kann die Zeit, die benötigt wird, um den Fahrunvermögenzustand zu bestimmen, entsprechend den Eigenschaften eines jeden Fahrers eingestellt werden.
  • In dem Fall, in dem eine Fahrunterstützungssteuerung in dem Fahrzeug durchgeführt wird, kann eine falsche Erfassung des Fahrunvermögenzustands durch Verlängern der Zeiten T0, T1 und T2 verhindert werden.
  • Durch Melden des Einbruchsgrads der Haltung des Fahrers an den Fahrer kann der Fahrer die eigene Haltung erkennen. Aus diesem Grund kann der Fahrer sogar dann, wenn die Fahrhaltung einbricht, die Haltung korrigieren, so dass der Fahrunvermögenzustand nicht erfasst wird. Dieses kann eine falsche Erfassung des Fahrunvermögenzustands verhindern.
  • Durch Fragen des Fahrers, ob der Fahrer nicht mehr in der Lage ist zu fahren, wenn der Fahrunvermögenzustand des Fahrers erfasst wird, kann, wenn der Fahrunvermögenzustand des Fahrers falsch erfasst wird, eine Fahrzeugsteuerung zum sichern Stoppen des Fahrzeugs vermieden werden.
  • (Erste Modifikation der ersten Ausführungsform)
  • Bei der Bestimmung des Außer-Rahmenzustands durch den Außer-Rahmenzustandserfassungsabschnitt 71 kann der vorbestimmte Bereich FA elliptisch sein, wie es in 19 dargestellt ist. Die Ellipse weist eine Hauptachse entlang der Breite des Fahrzeugs 10 und eine Nebenachse entlang der Höhe des Fahrzeugs 10 auf.
  • Wenn mehrere Bewegungen des Kopfabschnitts des Fahrers während der Fahrt betrachtet werden, bewegt sich der Kopfabschnitt des Fahrers nach rechts und links, wenn das Fahrzeug nach rechts und links dreht, und der Kopfabschnitt des Fahrers bewegt sich in dem elliptischen Bereich, der eine Hauptachse in der Links-Rechts-Richtung aufweist. Somit kann dadurch, dass der Bereich FA elliptisch ist, sogar dann, wenn der Fahrer den Kopfabschnitt bei einem normalen Betrieb bewegt, eine falsche Erfassung des Fahrunvermögenzustands verhindert werden.
  • (Zweite Modifikation der ersten Ausführungsform)
  • Die Erfassungsvorrichtung 100 kann einen Verformungsabschnitt enthalten, der den Bereich FA entsprechend der Absicht des Nutzers, der den Fahrer beinhaltet, oder Fahrerinformationen über den Fahrer verformt. Der Verformungsabschnitt kann als eine Funktion des Zustandserfassungsabschnitts 70 ausgebildet sein. Eine Verformung beinhaltet eine Vergrößerung, Verkleinerung und eine Gestaltänderung des Bereiches FA. Der Verformungsabschnitt verformt den Bereich FA entsprechend einer Eingabe des Nutzers in die HMI 80. Die HMI 80 kann einen Vergrößerungsschalter und einen Verkleinerungsschalter enthalten, und die Anzeige 81 kann eine berührungsempfindliche Anzeige sein.
  • Wie es in 20 dargestellt ist, kann, wenn der Fahrer die Gewohnheit hat, die Fahrhaltung gegenüber einer Standardposition zu verschieben, oder eine Erfassung des Fahrunvermögenzustands schwierig ist, der Fahrer einen Vergrößerungsschalter oder Ähnliches betätigen, um den Bereich FA in einen Bereich FAa zu vergrößern.
  • In dem Fall, in dem der Fahrer eine alte Person oder eine Person ist, die eine chronische Krankheit aufweist, kann der Fahrer oder die Familie des Fahrers einen Verkleinerungsschalter oder Ähnliches betätigen, um den Bereich FA in einen Bereich FAb zu verkleinern, um den Fahrunvermögenzustand noch schneller erfassen zu können. In dem Fall, in dem der Fahrer ein Fahrer eines Busses oder Taxis ist, kann ein Administrator des Busses oder Taxis den Verkleinerungsschalter oder Ähnliches betätigen, um den Bereich FA in den Bereich FAb zu verkleinern, um den Fahrunvermögenzustand noch schneller erfassen zu können. In 20 sind die Bereiche FA, FAa und FAb elliptisch, können jedoch auch rechteckig sein.
  • Unabhängig von der Absicht des Nutzers kann der Verformungsabschnitt den Bereich FA entsprechend den Fahrerinformationen vergrößern oder verkleinern. Die Fahrerinformationen enthalten ein Alter, eine medizinische Historie und/oder eine Gewohnheit der Fahrhaltung des Fahrers und sind in der Speichervorrichtung 52 gespeichert. Die Gewohnheit der Fahrhaltung kann von dem Lernabschnitt 51 aus dem Kopfabschnitt des Fahrers gelernt werden oder kann durch im Voraus Abbilden der Haltung des Fahrers durch den Fahrer registriert werden.
  • Der Verformungsabschnitt vergrößert beispielsweise den Bereich FA in den Bereich FAa, wenn der Fahrer eine Gewohnheit der Fahrhaltung aufweist, und verkleinert den Bereich FA in den Bereich FAb, wenn der Fahrer eine alte Person oder eine Person ist, die eine medizinische Historie aufweist. Der Verformungsabschnitt kann den Bereich FA entsprechend der Fahrzeuggeschwindigkeit, der TTC und dem Vorhandensein bzw. der Abwesenheit der Fahrunterstützungssteuerung vergrößern oder verkleinern, oder kann den Bereich FA in der Woche oder in einem Zeitrahmen, in dem eine plötzliche Krankheit wie beispielsweise ein Herzanfall statistisch häufig auftritt, verkleinern.
  • Der Verformungsabschnitt ändert den Bereich FA entsprechend der Absicht des Fahrers und/oder den Fahrerinformationen und kann den Bereich entsprechend sowohl der Absicht des Nutzers als auch den Fahrerinformationen ändern. Der Verformungsabschnitt kann den Bereich FA vergrößern oder verkleinern. Der Verformungsabschnitt kann den Bereich FA entsprechend der Absicht des Nutzers oder den Fahrerinformationen verformen.
  • Durch Verformen des Bereiches FA auf diese Weise entsprechend der Absicht des Nutzers oder den Fahrerinformationen kann der Fahrunvermögenzustand entsprechend der Absicht des Nutzers oder den Fahrerinformationen erfasst werden. Wenn beispielsweise die Wahrscheinlichkeit eines Fahrunvermögenzustands hoch ist, kann der Fahrunvermögenzustand schnell erfasst werden. Wenn der Fahrer die Gewohnheit hat, seine Fahrhaltung gegenüber der Standardposition zu verschieben, kann durch Verformen des Bereiches FA entsprechend der Gewohnheit eine falsche Erfassung des Fahrunvermögenzustands verhindert werden.
  • (Dritte Modifikation der ersten Ausführungsform)
  • Die Erfassungsvorrichtung 100 enthält einen Übertragungsabschnitt, der den Bereich FA auf ein Bild entsprechend der Absicht des Nutzers, der den Fahrer enthält, oder den Fahrerinformationen über den Fahrer überträgt. Der Übertragungsabschnitt kann als eine Funktion des Zustandserfassungsabschnitts 70 ausgebildet sein. Der Übertragungsabschnitt bewegt den Bereich FA entsprechend einer Eingabe in die HMI 80 durch den Nutzer, beispielsweise einem Ziehen auf die berührungsempfindliche Anzeige. Das heißt, diese Modifikation unterscheidet sich von der zweiten Modifikation darin, dass der Bereich FA entsprechend der Absicht des Nutzers oder den Fahrerinformationen bewegt wird anstelle dass der Bereich FA verformt wird.
  • Wie es in 21 dargestellt ist, kann, wenn der Fahrer die Gewohnheit hat, die Fahrhaltung gegenüber der Standardposition zu verschieben, durch Bewegen des Bereiches FA an einen Bereich FAc entsprechend der Gewohnheit eine falsche Erfassung des Fahrunvermögenzustands verhindert werden. In 21 ist der Bereich FA rechteckig, kann jedoch auch elliptisch sein. Die zweite Modifikation kann mit der dritten Modifikation kombiniert werden, so dass der Bereich FA sowohl bewegt als auch verformt wird.
  • (Vierte Modifikation der ersten Ausführungsform)
  • Die Fahrerkameras 21 enthalten beispielsweise eine Stereo-Kamera. Wie es in 22 dargestellt ist, ist der Bereich FA ein dreidimensionaler Bereich, der sich in der Breitenrichtung und der Vorne-Hinten-Richtung des Fahrzeugs 10 erstreckt. Die Stereo-Kameras sind beispielsweise an rechten und linken Enden des Rückspiegels 16 installiert. Die Gestalt des Bereiches FA ist nicht auf einen Kubus beschränkt, sondern kann auch eine ovale Kugel sein. Wenn der Bereich FA eine ovale Kugel ist, erstreckt sich eine Hauptachse der ovalen Kugel entlang der Breite des Fahrzeugs 10. Die zweite Modifikation oder die dritte Modifikation kann zusammen mit der vierten Modifikation verwendet werden.
  • Die Stereo-Kamera kann die Position des Kopfabschnitts des Fahrers dreidimensional erlangen. Das heißt, die Position des Kopfabschnitts in der Breitenrichtung des Fahrzeugs 10 ebenso wie die Position des Kopfabschnitts in der Vorne-Hinten-Richtung kann erlangt werden. Somit kann durch Einstellen des Bereiches FA auf dreidimensionale Weise sogar dann, wenn der Fahrer nicht mehr in der Lage ist zu fahren und zur Seite fällt, oder der Fahrer nicht mehr in der Lage ist zu fahren und nach vorne fällt, der Fahrunvermögenzustand des Fahrers durch eine Außer-Rahmenzustandsbestimmung erfasst werden.
  • (Zweite Ausführungsform)
  • Im Folgenden wird der Unterschied zwischen einer Erfassungsvorrichtung 100 gemäß der zweiten Ausführungsform und der Erfassungsvorrichtung 100 gemäß der ersten Ausführungsform beschrieben. Die Erfassungsvorrichtung 100 gemäß der zweiten Ausführungsform unterscheidet sich von der Erfassungsvorrichtung 100 gemäß der ersten Ausführungsform in der Weise, in der der Außer-Rahmenzustand von dem Außer-Rahmenzustandserfassungsabschnitt 71 bestimmt wird.
  • In dieser Ausführungsform stellt der Außer-Rahmenzustandserfassungsabschnitt 71 drei Bereiche als den Bereich FA, der ein vorbestimmter Bereich bei der Außer-Rahmenzustandsbestimmung ist, ein: einen Bereich FA1 (ein erster vorbestimmter Bereich), einen Bereich FA2 (ein zweiter vorbestimmter Bereich) und einen Bereich FA3. Der Bereich FA1 ist der kleinste Bereich. Der Bereich FA2 enthält einen Bereich, der größer als der Bereich FA1 ist, und enthält den Bereich FA1 und den Bereich außerhalb des Bereiches FA1 (Endseite des Bildes). Der Bereich FA3 enthält einen Bereich, der größer als der Bereich FA2 ist, und enthält den Bereich FA2 und den Bereich außerhalb des Bereiches FA2. In dieser Ausführungsform weisen der Bereich FA1, der Bereich FA2 und der Bereich FA3 eine gemeinsame Mitte auf. In dieser Ausführungsform werden drei Bereiche als vorbestimmter Bereich bei der Außer-Rahmenzustandsbestimmung eingestellt, aber es können auch nur mindestens zwei Bereiche eingestellt werden.
  • Der Außer-Rahmenzustandserfassungsabschnitt 71 stellt eine Außer-Rahmenbestimmungszeit für jeden vorbestimmten Bereich ein. Das heißt, der Außer-Rahmenzustandserfassungsabschnitt 71 stellt als Außer-Rahmenbestimmungszeit die Zeiten T01, T02 und T03 für jeweils den Rahmen FA1, den Rahmen FA2 und den Rahmen FA3 ein.
  • Der Außer-Rahmenzustandserfassungsabschnitt 71 erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn der Kopfabschnitt des Fahrers außerhalb mindestens eines vorbestimmten Bereiches während der Außer-Rahmenbestimmungszeit, die dem vorbestimmten Bereich entspricht, oder länger gelangt ist.
  • Das heißt, in dieser Ausführungsform gibt es drei Bedingungen: (1) der Kopfabschnitt des Fahrers liegt außerhalb des Bereiches FA1 während der Zeit T01 oder länger; (2) der Kopfabschnitt des Fahrers liegt außerhalb des Bereiches FA2 während der Zeit T02 oder länger, und (3) der Kopfabschnitt des Fahrers liegt außerhalb des Bereiches FA3 während der Zeit T03 oder länger. Wenn mindestens eine der drei Bedingungen (1) bis (3) erfüllt ist, erfasst der Außer-Rahmenzustandserfassungsabschnitt 71, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Somit wird in den Flussdiagrammen der 16A und 16B bestimmt, ob mindestens eine der drei Bedingungen (1) bis (3) erfüllt ist, anstelle in der Verarbeitung in S15 zu bestimmen, ob der Kopfabschnitt während der Zeit T0 oder länger kontinuierlich außerhalb des Bereiches FA war. Wenn die mindestens eine Bedingung erfüllt ist, schreitet die Prozedur zur Verarbeitung in S14, und wenn keine der drei Bedingungen erfüllt ist, schreitet die Prozedur zur Verarbeitung in S21.
  • Wenn der Fahrer ein Objekt, das von dem Fahrersitz entfernt angeordnet ist, aufnimmt, wird im Allgemeinen aus Sicherheitsgründen, wenn der Fahrer von der normalen Fahrposition entfernt ist, eine Verweilzeit verringert. Dann stellt der Außer-Rahmenzustandserfassungsabschnitt 71 die Außer-Rahmenbestimmungszeit auf kürzer ein, wenn der vorbestimmte Bereich größer ist. Das heißt, der Außer-Rahmenzustandserfassungsabschnitt 71 stellt die Außer-Rahmenbestimmungszeit derart ein, dass T01 > T02 > T03 gilt.
  • In dem Fall beispielsweise, in dem die Zeit T01 auf drei Sekunden eingestellt ist und die Zeit T02 auf eine Sekunde eingestellt ist, wird sogar dann, wenn drei Sekunden nicht verstrichen sind, nachdem der Kopfabschnitt des Fahrers außerhalb des Bereiches FA1 gelangt ist, zu dem Zeitpunkt, zu dem eine Sekunde verstrichen ist, nachdem der Kopfabschnitt des Fahrers außerhalb des Bereiches FA2 gelangt ist, der Fahrunvermögenzustand des Fahrers erfasst.
  • Ähnlich wie die Zeit T0 werden die Zeiten T01, T02 und T03 auf der Grundlage von persönlichen Informationen, die in der Speichervorrichtung 52 registriert sind, eingestellt und entsprechend der Fahrzeuggeschwindigkeit, der TTC und dem Vorhandensein bzw. der Abwesenheit der Ausführung der Fahrunterstützungssteuerung geändert. Ähnlich wie die Zeit T0 können die Zeiten T01, T02 und T03 außerdem in der Woche oder in einem Zeitrahmen, in dem eine plötzliche Krankheit wie beispielsweise ein Herzanfall statistisch häufig auftritt, verringert werden. Außerdem können die Zeiten T01, T02 und T03 ähnlich wie die Zeit T0 entsprechend der Amplitude der Position des Kopfabschnitts, der Bewegungsgeschwindigkeit des Kopfabschnitts und der Erfassung eines Krampfes verringert werden.
  • In 23 sind der Bereich FA1, der Bereich FA2 und der Bereich FA3 elliptisch. Der Bereich FA1, der Bereich FA2 und der Bereich FA3 können jedoch auch rechteckig sein. Außerdem kann die zweite Modifikation oder die dritte Modifikation der ersten Ausführungsform verwendet werden, um jeden der Bereiche FA1, FA2 und FA3 zu verformen oder zu bewegen. Die vierte Modifikation der ersten Ausführungsform kann verwendet werden, um den Bereich FA1, den Bereich FA2 und den Bereich FA3 dreidimensional einzustellen.
  • In der oben beschriebenen zweiten Ausführungsform werden mehrere vorbestimmte Bereiche unterschiedlicher Größen mit derselben Mitte eingestellt, und die Außer-Rahmenbestimmungszeit wird für jeden vorbestimmten Bereich eingestellt. Das heißt, die Außer-Rahmenbestimmungszeit wird entsprechend dem Abweichungsgrad von der normalen Fahrposition eingestellt. Somit kann der Fahrunvermögenzustand des Fahrers entsprechend dem Abweichungsgrad von der normalen Fahrposition erfasst werden.
  • Da die Außer-Rahmenbestimmungszeit auf kürzer eingestellt wird, wenn der Abweichungsgrad von der normalen Fahrposition größer ist, kann eine falsche Erfassung des Fahrunvermögenzustands verhindert werden, und es kann der Fahrunvermögenzustand des Fahrers früh erfasst werden.
  • (Weitere Ausführungsformen)
  • Die Fahrerkamera 21 kann eine der vier Kameras sein, die in einem Fahrzeuginnenraum montiert sind. Mindestens eine Fahrerkamera 21 muss bzw. kann bereitgestellt werden.
  • Der Außer-Rahmenzustandserfassungsabschnitt 71 kann auf der Grundlage der Trajektorie, die von dem Trajektorienerlangungsabschnitt 62 erlangt wird, erfassen, dass der Fahrer nicht mehr in der Lage ist zu fahren. Wenn der Fahrer plötzlich krank wird und nicht mehr in der Lage ist zu fahren, bewegt sich der Kopfabschnitt des Fahrers häufig von einer Position bei einer Fahrt und kehrt nicht zu der Position bei der Fahrt zurück, und daher kann der Fahrunvermögenzustand des Fahrers auf der Grundlage der Trajektorie des Kopfabschnitts erfasst werden.
  • Der Richtungseinbruchszustandserfassungsabschnitt 73 kann außerdem erfassen, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn das Gesicht des Fahrers weiter nach unten als ein Schwellenwert Th2d (Abwärtsschwellenwert) gerichtet ist oder weiter nach oben als ein Schwellenwert Th2u (Aufwärtsschwellenwert) gerichtet ist. Wenn der Fahrer plötzlich krank wird und sein Bewusstsein verliert, wird das Gesicht des Fahrers im Allgemeinen weiter als der Schwellenwert Th2d nach unten gerichtet oder weiter als der Schwellenwert Th2u nach oben gerichtet. Wenn somit die Gesichtsrichtung des Fahrers stark nach unten oder oben gerichtet ist, wird bestimmt, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Der Schüttelzustandserfassungsabschnitt 64 kann erfassen, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn während der Fahrt des Fahrzeugs 10 bei Ausübung einer äußeren Kraft auf das Fahrzeug 10 der Kopfabschnitt, der von dem Kopferfassungsabschnitt 61 erfasst wird, in die Richtung der äußeren Kraft während einer Zeit T6 (Rückkehrbestimmungszeit) oder länger geneigt ist bzw. war. Wenn der Fahrer sein Bewusstsein nicht verloren hat, ist normalerweise sogar dann, wenn eine Ausübung der äußeren Kraft (insbesondere äußere Kraft in der Rechts-Links-Richtung oder Vorwärts-Rückwärts-Richtung) auf das Fahrzeug 10 der Kopfabschnitt des Fahrers in die Richtung der äußeren Kraft geneigt, aber der Kopf kehrt innerhalb der Zeit T6 an die Ursprungsposition zurück. Wenn im Gegensatz dazu der Fahrer plötzlich krank wird und sein Bewusstsein verliert, weist der Kopfabschnitt des Fahrers einen niedrigen Widerstand gegen die äußere Kraft auf und verbleibt während der Zeit T6 oder länger in die Richtung der äußeren Kraft geneigt. Somit kann der Schüttelzustandserfassungsabschnitt 74 den Fahrunvermögenzustand des Fahrers in dem obigen Fall erfassen.
  • Wenn die Öffnung des Mundes (insbesondere Längsöffnung) die von dem Gesichtsausdruckserfassungsabschnitt 67 erfasst wird, größer als eine Öffnungsbestimmungsgröße ist, kann der Weißaugenzustandsberechnungsabschnitt 75 außerdem erfassen, dass der Fahrer nicht mehr in der Lage ist zu fahren. Wenn der Fahrer plötzlich krank wird und das Weiße seiner Augen zeigt, neigt der Fahrer dazu, seinen Mund zu öffnen. Somit kann der Fahrunvermögenzustand des Fahrers erfasst werden, wenn die Öffnung des Mundes des Fahrers größer als eine Öffnungsbestimmungsgröße ist.
  • Auch wenn die Außer-Rahmenbestimmung, die Haltungseinbruchsbestimmung, die Gesichtsrichtungseinbruchsbestimmung, die Schüttelzustandsbestimmung und die Weißaugenzustandsbestimmung sämtlich durchgeführt werden, kann zum Erzielen der höchsten Genauigkeit beim Erfassen des Fahrunvermögenzustands des Fahrers auch nur mindestens eine der obigen Bestimmungen durchgeführt werden. Es kann eine beliebige Anzahl der Bestimmungen durchgeführt werden. In diesem Fall können die Außer-Rahmenbestimmung, die Haltungseinbruchsbestimmung, die Gesichtsrichtungseinbruchsbestimmung, die Schüttelzustandsbestimmung, die Weißaugenzustandsbestimmung in dieser Reihenfolge durchgeführt werden.
  • In dem Fall beispielsweise, in dem die Haltungseinbruchsbestimmung mit der Schüttelzustandsbestimmung kombiniert wird, kann durch Durchführen der Schüttelzustandsbestimmung, wenn der Fahrunvermögenzustand des Fahrers bei der Haltungseinbruchsbestimmung nicht erfasst wird, der Fahrunvermögenzustand des Fahrers mit hoher Genauigkeit erfasst werden.
  • In dem Fall, in dem die Gesichtsrichtungseinbruchsbestimmung mit der Schüttelzustandsbestimmung kombiniert wird, kann das Durchführen der Schüttelzustandsbestimmung, wenn der Fahrunvermögenzustand des Fahrers bei der Gesichtsrichtungseinbruchsbestimmung nicht erfasst werden kann, der Fahrunvermögenzustand des Fahrers mit hoher Genauigkeit erfasst werden.
  • In dem Fall, in dem die Schüttelzustandsbestimmung mit der Weißaugenzustandsbestimmung kombiniert wird, kann durch durchführen der Weißaugenzustandsbestimmung, wenn der Fahrunvermögenzustand des Fahrers bei der Schüttelzustandsbestimmung nicht erfasst wird, der Fahrunvermögenzustand des Fahrers mit hoher Genauigkeit erfasst werden.
  • Der Lernabschnitt 51 kann die Haltung des Fahrers, die er einnimmt, lernen, wenn falsch erfasst wird, dass der Fahrer nicht mehr in der Lage ist zu fahren. Das heißt, die Haltung des Fahrers, die er einnimmt, wenn der Fahrunvermögenzustand erfasst wird, aber der Fahrer eine Antwort gibt, kann gelernt werden. Dann kann die gelernte Haltung die Haltung sein, die nicht als Fahrunvermögenzustand bestimmt wird.
  • Statistische Werte des Schwellenwertes und des Bestimmungswertes können jeweils in der Speichervorrichtung 52 gespeichert werden und als Anfangswerte verwendet werden. Die statistischen Werte des Schwellenwertes und des Bestimmungswertes sind jeweils statistische Werte des Schwellenwertes und des Bestimmungswertes für den Fahrer jeweiliger Fahrzeuge. Das Fahrzeug 10 kann jeden Schwellenwert und jeden Bestimmungswert, die für den Fahrer eingestellt sind, an ein Informationszentrum übertragen, und das Informationszentrum kann Statistiken über die Werte sammeln.
  • Wenn der Fahrer hinsichtlich des Fahrunvermögenzustands gefragt werden kann und antwortet, wird erkannt, dass der Fahrer während einer bestimmten Zeit nach der Antwort in der Lage ist zu fahren. Die Verarbeitung zum Erfassen des Fahrunvermögenzustands des Fahrers kann mit einem Zeitintervall ausgeführt werden, das von dem Fahrer eingestellt wird (beispielsweise einmal jede Stunde).
  • Die äußere Kraft, die auf das Fahrzeug 10 ausgeübt wird, kann durch eine andere Komponente als mit dem G-Sensor 44, beispielsweise mit dem Sitzflächensensor 23, erfasst werden.
  • Gemäß einem ersten Aspekt enthält eine Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers einen Kopferfassungsabschnitt, der aufeinanderfolgend auf der Grundlage eines Bildes eines Fahrersitzes, das von einer Abbildungsvorrichtung aufgenommen wird, die in einem Fahrzeug montiert ist, einen Kopfabschnitt erfasst, der höher als ein Hals des Fahrers ist, und deinen Außer-Rahmenzustandserfassungsabschnitt, der während der Fahrt des Fahrzeugs, wenn der Kopfabschnitt, der von dem Kopferfassungsabschnitt erfasst wird, außerhalb eines vorbestimmten Bereiches in dem Bild ist, erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Die Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers erfasst aufeinanderfolgend einen Kopfabschnitt des Fahrers auf der Grundlage eines aufgenommenen Bildes eines Fahrersitzes. Wenn der Fahrer das Fahrzeug normal fährt, liegt der Kopfabschnitt des Fahrers normalerweise innerhalb des vorbestimmten Bereiches des Bildes des Fahrersitzes. Wenn im Gegensatz dazu der Fahrer sein Bewusstsein aufgrund einer plötzlichen Krankheit verliert, kann der Kopfabschnitt des Fahrers außerhalb des vorbestimmten Bereiches gelangen. Daher kann der Fahrunvermögenzustand des Fahrers auf einfache Weise durch Erfassen, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn der Kopfabschnitt außerhalb des vorbestimmten Bereiches gelangt bzw. gelangt ist, auf einfache Weise erfasst werden.
  • Gemäß einem zweiten Aspekt enthält eine Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers einen Kopferfassungsabschnitt, der aufeinanderfolgend auf der Grundlage eines Bildes eines Fahrersitzes, das von einer Abbildungsvorrichtung aufgenommen wird, die in einem Fahrzeug montiert ist, einen Kopfabschnitt erfasst, der höher als ein Hals des Fahrers ist, einen Trajektorienerlangungsabschnitt, der eine Trajektorie des Kopfabschnitts aus Positionen des Kopfabschnitts, der von dem Kopferfassungsabschnitt erfasst wird, erlangt, und einen Zustandserfassungsabschnitt, der auf der Grundlage der Trajektorie, die von dem Trajektorienerlangungsabschnitt erlangt wird, erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  • Die Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers erfasst aufeinanderfolgend den Kopfabschnitt des Fahrers auf der Grundlage des Bildes des Fahrersitzes und erlangt eine Trajektorie des Kopfabschnitts aus Positionen des erfassten Kopfabschnitts. Wenn der Fahrer aufgrund einer plötzlichen Krankheit nicht mehr in der Lage ist zu fahren, verschiebt sich häufig der Kopfabschnitt des Fahrers gegenüber einer Position bei einer Fahrt und kehrt zu der Position bei der Fahrt nicht zurück. Daher kann der Fahrunvermögenzustand eines Fahrers auf einfache und schnelle Weise auf der Grundlage der Trajektorie des Kopfabschnitts des Fahrers erfasst werden.
  • Man beachte, dass ein Flussdiagramm oder die Verarbeitung des Flussdiagramms in der vorliegenden Anmeldung mehrere Schritte (auch als Abschnitte bezeichnet) enthält, die jeweils beispielsweise mit S10 bezeichnet werden. Außerdem kann jeder Schritt in mehrere Unterschritte unterteilt sein und es können mehrere Schritte in einen einzelnen Schritt kombiniert werden.
  • Während verschiedene Ausführungsformen, Konfigurationen und Aspekte der Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers beispielhaft beschrieben wurden, sind die Ausführungsformen, Konfigurationen und Aspekte der Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nicht auf die oben beschriebenen beschränkt. Es sind beispielsweise Ausführungsformen, Konfigurationen und Aspekte, die aus einer geeigneten Kombination von technischen Elemente erhalten werden, die in unterschiedlichen Ausführungsformen, Konfigurationen und Aspekten beschrieben sind, ebenfalls innerhalb des Bereiches der Ausführungsformen, Konfiguration und Aspekte der Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers enthalten.

Claims (25)

  1. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers, die aufweist: einen Kopferfassungsabschnitt (61), der aufeinanderfolgend einen Kopfabschnitt, der höher als ein Hals des Fahrers ist, auf der Grundlage eines Bildes eines Fahrersitzes, das von einer Abbildungsvorrichtung (21) aufgenommen wird, die in einem Fahrzeug (10) montiert ist, erfasst; und einen Außer-Rahmenzustandserfassungsabschnitt (71), der während der Fahrt des Fahrzeugs (10) erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn der Kopfabschnitt, der von dem Kopferfassungsabschnitt (61) erfasst wird, außerhalb eines vorbestimmten Bereiches in dem Bild liegt.
  2. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach Anspruch 1, die außerdem aufweist: einen Verformungsabschnitt, der den vorbestimmten Bereich entsprechend einer Absicht eines Nutzers, der den Fahrer enthält, oder entsprechend Fahrerinformationen über den Fahrer verformt.
  3. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach Anspruch 1 oder 2, die außerdem aufweist: einen Übertragungsabschnitt, der den vorbestimmten Bereich entsprechend einer Absicht eines Nutzers, der den Fahrer enthält, oder entsprechend Fahrerinformationen über den Fahrer überträgt.
  4. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach Anspruch 2 oder 3, wobei die Fahrerinformationen ein Alter, eine medizinische Historie und/oder eine Gewohnheit einer Fahrhaltung des Fahrers enthalten.
  5. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 1 bis 4, wobei eine Gestalt des vorbestimmten Bereiches eine Ellipse ist, die eine Hauptachse aufweist, die sich entlang einer Breite des Fahrzeugs (10) erstreckt.
  6. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 1 bis 5, wobei der Außer-Rahmenzustandserfassungsabschnitt (71) erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn der Kopfabschnitt während einer Außer-Rahmenbestimmungszeit (T0) außerhalb des vorbestimmten Bereiches war.
  7. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach Anspruch 6, wobei mindestens ein erster vorbestimmter Bereich und ein zweiter vorbestimmter Bereich, der den ersten vorbestimmten Bereich und einen Bereich außerhalb des ersten vorbestimmten Bereiches enthält, als vorbestimmte Bereiche eingestellt werden; die Außer-Rahmenbestimmungszeit (T0) für jeden der vorbestimmten Bereiche eingestellt wird; und der Außer-Rahmenzustandserfassungsabschnitt (71) erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn der Kopfabschnitt des Fahrers außerhalb mindestens eines der vorbestimmten Bereiche während der Außer-Rahmenbestimmungszeit (T0), die dem mindestens einen vorbestimmten Bereich entspricht, war.
  8. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach Anspruch 7, wobei die Außer-Rahmenbestimmungszeit (T0) auf kürzer eingestellt wird, wenn irgendeiner der vorbestimmten Bereiche größer ist.
  9. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 1 bis 8, wobei die Abbildungsvorrichtung (21) durch eine Stereo-Kamera bereitgestellt wird; und der vorbestimmte Bereich durch einen dreidimensional eingestellten Bereich bereitgestellt wird.
  10. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 1 bis 9, die außerdem aufweist: einen Trajektorienerlangungsabschnitt (62), der eine Trajektorie des Kopfabschnitts aus Positionen des Kopfabschnitts, der von dem Kopferfassungsabschnitt (61) erfasst wird, erlangt, wobei während der Fahrt des Fahrzeugs (10) der Außer-Rahmenzustandserfassungsabschnitt (71) auf der Grundlage dessen, dass der Kopfabschnitt, der von dem Kopferfassungsabschnitt (61) erfasst wird, außerhalb eines vorbestimmten Bereiches des Bildes ist, und auf der Grundlage der Trajektorie, die von dem Trajektorienerlangungsabschnitt (62) erlangt wird, bis der Kopfabschnitt außerhalb des vorbestimmten Bereiches gelangt ist, erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  11. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers, die aufweist: einen Kopferfassungsabschnitt (61), der aufeinanderfolgend einen Kopfabschnitt, der höher als ein Hals des Fahrers ist, auf der Grundlage eines Bildes eines Fahrersitzes, das von einer Abbildungsvorrichtung (21) aufgenommen wird, die in einem Fahrzeug (10) montiert ist, erfasst; einen Trajektorienerlangungsabschnitt (62), der eine Trajektorie des Kopfabschnitts aus Positionen des Kopfabschnitts, der von dem Kopferfassungsabschnitt (61) erfasst wird, erlangt; und einen Außer-Rahmenzustandserfassungsabschnitt (71), der während der Fahrt des Fahrzeugs (10) auf der Grundlage der Trajektorie, die von dem Trajektorienerlangungsabschnitt (62) erlangt wird, erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren.
  12. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach Anspruch 1, wobei der vorbestimmte Bereich durch einen gesamten Bereich des Bildes bereitgestellt wird.
  13. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach Anspruch 10 oder 11, wobei wenn der Kopferfassungsabschnitt (61) den Kopfabschnitt nicht erfasst, der Kopferfassungsabschnitt (61) in einer Nachbarschaft einer letzten Position der Trajektorie, die von dem Trajektorienerlangungsabschnitt (62) erlangt wurde, sucht.
  14. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 6 bis 8, die außerdem aufweist: einen Größenerfassungsabschnitt (22), der eine Ziehgröße eines Sitzgurtes des Fahrersitzes erfasst, wobei der Außer-Rahmenzustandserfassungsabschnitt (71) erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn die Ziehgröße, die von dem Größenerfassungsabschnitt (22) erfasst wird, um eine erste Ziehgröße größer als eine Ziehgröße ist, die zu einem Zeitpunkt einer Anbringung des Sitzgurtes ist.
  15. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach Anspruch 14, wobei der Außer-Rahmenzustandserfassungsabschnitt (72) erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn die Ziehgröße je Größenerfassungszeit größer als eine zweite Ziehgröße ist, wobei die Ziehgröße von dem Größenerfassungsabschnitt (22) erfasst wird.
  16. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 6 bis 8, 14 und 15, die außerdem aufweist: einen Sitzdruckerfassungsabschnitt (23), der eine Druckverteilung eines Sitzabschnitts (11a) des Fahrersitzes erfasst, wobei der Außer-Rahmenzustandserfassungsabschnitt (71) erfasst, dass der Fahrer nicht mehr in der Lage ist zu fahren, wenn ein Hochdruckabschnitt in der Druckverteilung, die von dem Sitzdruckerfassungsabschnitt (23) erfasst wird, in Richtung eines Endes des Sitzabschnitts (11a) vorgespannt ist.
  17. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 6 bis 8 und 14 bis 16, wobei wenn eine Position des Kopfabschnitts, die aufeinanderfolgend von dem Kopferfassungsabschnitt (61) erfasst wird, mit einer Amplitude vibriert, die größer als eine vorbestimmte Amplitude ist, die Außer-Rahmenbestimmungszeit (T0) verringert wird.
  18. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 6 bis 8 und 14 bis 17, wobei wenn eine Bewegungsgeschwindigkeit des Kopfabschnitts, der aufeinanderfolgend von dem Kopferfassungsabschnitt (61) erfasst wird, schneller ist, die Außer-Rahmenbestimmungszeit (T0) verringert wird.
  19. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 6 bis 8 und 14 bis 18, wobei wenn eine Bewegungsgeschwindigkeit des Kopfabschnitts schneller ist, wenn sich eine Position des Kopfabschnitts, der aufeinanderfolgend von dem Kopferfassungsabschnitt (61) erfasst wird, einem Ende des vorbestimmten Bereiches annähert, die Außer-Rahmenbestimmungszeit (T0) verringert wird.
  20. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 6 bis 8 und 14 bis 19, die außerdem aufweist: einen Krampferfassungsabschnitt (63), der einen Krampf des Fahrers erfasst, wobei wenn der Krampferfassungsabschnitt (63) den Krampf erfasst, die Außer-Rahmenbestimmungszeit (T0) verringert wird.
  21. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 6 bis 8 und 14 bis 20, wobei wenn eine Fahrzeuggeschwindigkeit des Fahrzeugs (10) höher ist, die Außer-Rahmenbestimmungszeit (T0) verringert wird.
  22. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 6 bis 8 und 14 bis 21, wobei wenn eine Zeit bis zu einer Kollision, die durch Teilen eines Abstands zu einem vorausbefindlichen Fahrzeug durch eine Relativgeschwindigkeit in Bezug auf das vorausbefindliche Fahrzeug erhalten wird, kleiner ist, die Außer-Rahmenbestimmungszeit (T0) verringert wird.
  23. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 6 bis 8 und 14 bis 22, die außerdem aufweist: einen Speicherabschnitt (52), der persönliche Informationen, die eine medizinische Historie und ein Alter des Fahrers enthalten, registriert, wobei die Außer-Rahmenbestimmungszeit (T0) auf der Grundlage der persönlichen Informationen, die in dem Speicherabschnitt (52) registriert sind, eingestellt wird.
  24. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 6 bis 8 und 14 bis 23, wobei wenn eine Fahrunterstützungssteuerung in dem Fahrzeug (10) durchgeführt wird, die Außer-Rahmenbestimmungszeit (T0) vergrößert wird.
  25. Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers nach einem der Ansprüche 1 bis 24, wobei ein Fahrunvermögenzustand durch einen Zustand bereitgestellt wird, in dem der Fahrer plötzlich krank wird.
DE112015002944.3T 2014-06-23 2015-06-08 Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers Pending DE112015002944T5 (de)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2014-128387 2014-06-23
JP2014128387 2014-06-23
JP2015-028001 2015-02-16
JP2015028001A JP6372388B2 (ja) 2014-06-23 2015-02-16 ドライバの運転不能状態検出装置
PCT/JP2015/002864 WO2015198541A1 (ja) 2014-06-23 2015-06-08 ドライバの運転不能状態検出装置

Publications (1)

Publication Number Publication Date
DE112015002944T5 true DE112015002944T5 (de) 2017-03-16

Family

ID=54937652

Family Applications (1)

Application Number Title Priority Date Filing Date
DE112015002944.3T Pending DE112015002944T5 (de) 2014-06-23 2015-06-08 Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers

Country Status (5)

Country Link
US (3) US10474914B2 (de)
JP (1) JP6372388B2 (de)
CN (4) CN114512030B (de)
DE (1) DE112015002944T5 (de)
WO (1) WO2015198541A1 (de)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3239899A1 (de) * 2016-04-28 2017-11-01 Panasonic Intellectual Property Management Co., Ltd. Bestimmungsvorrichtung, bestimmungsverfahren und aufzeichnungsmedium mit darauf gespeichertem bestimmungsprogramm

Families Citing this family (58)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112015002934B4 (de) 2014-06-23 2021-12-16 Denso Corporation Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers
CN106471556B (zh) 2014-06-23 2021-11-16 株式会社电装 驾驶员的驾驶不能状态检测装置
JP6372388B2 (ja) * 2014-06-23 2018-08-15 株式会社デンソー ドライバの運転不能状態検出装置
US10733426B2 (en) * 2015-10-15 2020-08-04 Daikin Industries, Ltd. Driver state determination device and driver state determination method
JP6575293B2 (ja) * 2015-10-21 2019-09-18 いすゞ自動車株式会社 状態判定装置
KR101745190B1 (ko) * 2015-12-03 2017-06-08 현대자동차주식회사 입체감 설정 시스템 및 방법
KR101777518B1 (ko) * 2016-04-07 2017-09-11 엘지전자 주식회사 인테리어 카메라 장치, 이를 포함하는 차량 운전 보조장치 및 이를 포함하는 차량
JP5997410B1 (ja) * 2016-05-10 2016-09-28 勇 大森 運転者異常発生検出器及びこれを用いた安全装置
JP6775135B2 (ja) * 2016-05-20 2020-10-28 マツダ株式会社 ドライバ状態検出装置
US10318831B2 (en) * 2016-07-21 2019-06-11 Gestigon Gmbh Method and system for monitoring the status of the driver of a vehicle
US10357186B2 (en) * 2016-08-09 2019-07-23 Georgia Tech Research Corporation Wheelchair in-seat activity tracker
US10719724B2 (en) * 2016-08-23 2020-07-21 Blinkeyelabs Electronics Private Limited Safety system for an automobile
JP6895731B2 (ja) 2016-10-11 2021-06-30 株式会社東海理化電機製作所 運転者状態推定装置
TW201821313A (zh) * 2016-12-14 2018-06-16 鴻海精密工業股份有限公司 汽車行車安全智能檢測環及汽車方向盤
DE102017201405B4 (de) * 2017-01-30 2018-12-13 Audi Ag Verfahren zum Betreiben eines Kraftfahrzeugs
JP2018131029A (ja) * 2017-02-14 2018-08-23 株式会社東海理化電機製作所 車両用制御装置
JP6737212B2 (ja) * 2017-03-14 2020-08-05 オムロン株式会社 運転者状態推定装置、及び運転者状態推定方法
DE102017205386A1 (de) * 2017-03-30 2018-10-04 Robert Bosch Gmbh Fahrerbeobachtungsvorrichtung und Verfahren zum Beobachten eines Fahrers in einem Fahrzeug zum Bestimmen zumindest einer Position des Fahrers in dem Fahrzeug
US11117515B2 (en) * 2017-05-19 2021-09-14 Yazaki Corporation Monitoring system
WO2019030855A1 (ja) * 2017-08-09 2019-02-14 三菱電機株式会社 運転不能状態判定装置および運転不能状態判定方法
JP6804416B2 (ja) 2017-09-25 2020-12-23 矢崎総業株式会社 監視システム
CN107891806A (zh) * 2017-10-13 2018-04-10 信利光电股份有限公司 一种车辆安全系统及其使用方法
JP7091632B2 (ja) * 2017-10-25 2022-06-28 いすゞ自動車株式会社 安全運転促進装置及び安全運転促進方法
JP7024332B2 (ja) * 2017-11-07 2022-02-24 トヨタ自動車株式会社 ドライバモニタシステム
JP2019091267A (ja) * 2017-11-15 2019-06-13 オムロン株式会社 脇見判定装置、脇見判定方法、およびプログラム
JP2019091281A (ja) * 2017-11-15 2019-06-13 オムロン株式会社 脇見判定装置、脇見判定方法及び脇見判定のためのプログラム
US11188074B1 (en) 2017-11-29 2021-11-30 United Services Automobile Association (Usaa) Systems and methods for remotely controlling operation of a vehicle
JP7003612B2 (ja) 2017-12-08 2022-01-20 株式会社デンソー 異常検知装置、及び異常検知プログラム
CN110163908A (zh) * 2018-02-12 2019-08-23 北京宝沃汽车有限公司 找寻目标物的方法、装置及存储介质
US10275670B1 (en) 2018-03-07 2019-04-30 State Farm Mutual Automobile Insurance Company Image analysis technologies for identifying abnormal vehicle conditions
US10776644B1 (en) * 2018-03-07 2020-09-15 State Farm Mutual Automobile Insurance Company Image analysis technologies for assessing safety of vehicle operation
JP7068606B2 (ja) * 2018-03-15 2022-05-17 オムロン株式会社 運転評価装置、車載機、運転評価方法、及びコンピュータプログラム
JP6848912B2 (ja) 2018-03-23 2021-03-24 株式会社デンソー 状態判定装置、状態判定プログラム及びコンピュータ読み出し可能持続的有形記録媒体
JP6844568B2 (ja) * 2018-03-27 2021-03-17 日本電気株式会社 余所見判定装置、余所見判定システム、余所見判定方法、プログラム
JP7102850B2 (ja) * 2018-03-28 2022-07-20 マツダ株式会社 ドライバ状態判定装置
US11254270B1 (en) 2018-05-02 2022-02-22 State Farm Mutual Automobile Insurance Company Technologies for using image analysis to facilitate adjustments of vehicle components
CN108438000A (zh) * 2018-05-15 2018-08-24 北京兴科迪电子技术研究院 驾驶员突发疾病察觉装置、方法和系统
WO2019220572A1 (ja) * 2018-05-16 2019-11-21 三菱電機株式会社 運転不能検知装置及び運転不能検知方法
JP7283037B2 (ja) * 2018-07-26 2023-05-30 ソニーグループ株式会社 情報処理装置、情報処理方法、およびプログラム
JP6811218B2 (ja) 2018-09-05 2021-01-13 矢崎総業株式会社 ワイヤハーネス
JP2020039674A (ja) * 2018-09-12 2020-03-19 トヨタ紡織株式会社 シート及び姿勢推定システム
JP7180228B2 (ja) * 2018-09-20 2022-11-30 いすゞ自動車株式会社 車両用監視装置
JP7187918B2 (ja) * 2018-09-20 2022-12-13 いすゞ自動車株式会社 車両用監視装置
CN111079475A (zh) 2018-10-19 2020-04-28 上海商汤智能科技有限公司 驾驶状态检测方法和装置、驾驶员监控系统、车辆
WO2020105751A1 (ko) * 2018-11-21 2020-05-28 엘지전자 주식회사 탑승자 모니터링 방법 및 이를 위한 장치
KR20200132468A (ko) * 2019-05-17 2020-11-25 삼성전자주식회사 첨단 운전자 지원 장치 및 이의 객체를 검출하는 방법
US11571155B2 (en) 2019-06-06 2023-02-07 Honda Motor Co., Ltd. System and method for completing a measurement of anxiety
CN110281870A (zh) * 2019-07-11 2019-09-27 安徽富煌科技股份有限公司 一种基于3d全景技术的车厢内安全辅助系统及危险处理方法
CN111016913B (zh) * 2019-12-05 2020-12-22 乐清市风杰电子科技有限公司 基于图像信息的司机状态控制系统及方法
JP7485521B2 (ja) * 2020-02-28 2024-05-16 株式会社Subaru 車両用制御装置
CN111931640B (zh) * 2020-08-07 2022-06-10 上海商汤临港智能科技有限公司 异常坐姿识别方法、装置、电子设备及存储介质
DE102020214910A1 (de) * 2020-11-27 2022-06-02 Robert Bosch Gesellschaft mit beschränkter Haftung Verfahren zur Überwachung eines Fahrzeuginnenraums
CN112622892B (zh) * 2020-12-14 2023-03-24 深圳技术大学 基于人脸和肢体姿态识别的紧急制动方法及系统
WO2022201345A1 (ja) * 2021-03-24 2022-09-29 日本電気株式会社 運転者照合システム、運転者照合方法、記憶媒体
US20220319045A1 (en) * 2021-04-01 2022-10-06 MohammadSado Lulu System For Posture Detection Using The Camera Of A Hand-Held Device
CN113561982A (zh) * 2021-08-06 2021-10-29 上汽通用五菱汽车股份有限公司 一种驾驶员昏迷处理方法、装置及可读存储介质
CN115320578B (zh) * 2022-07-11 2024-09-24 东风汽车集团股份有限公司 一种车辆避让行人控制方法及相关设备
WO2024075205A1 (ja) * 2022-10-05 2024-04-11 三菱電機株式会社 乗員状態判定装置、乗員状態判定システム、乗員状態判定方法及びプログラム

Family Cites Families (120)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS60152904A (ja) * 1984-01-20 1985-08-12 Nippon Denso Co Ltd 車両運転者位置認識装置
JPS60178596A (ja) 1984-02-25 1985-09-12 株式会社デンソー 居眼り運転防止装置
JPH01158579A (ja) * 1987-09-09 1989-06-21 Aisin Seiki Co Ltd 像認識装置
US8604932B2 (en) * 1992-05-05 2013-12-10 American Vehicular Sciences, LLC Driver fatigue monitoring system and method
JPH06222258A (ja) * 1993-01-23 1994-08-12 Asahi Optical Co Ltd パッシブ自動焦点カメラ
US5353013A (en) * 1993-05-13 1994-10-04 Estrada Richard J Vehicle operator sleep alarm
JP3115457B2 (ja) 1993-08-16 2000-12-04 三菱電機株式会社 運転者異常事態発生警報装置
JP3433554B2 (ja) 1995-02-17 2003-08-04 マツダ株式会社 自動車の走行制御装置
JPH09188163A (ja) * 1996-01-10 1997-07-22 Kazunari Konishi オ−トマチック自動車におけるフ−トペダル装置
JP3183161B2 (ja) * 1996-04-12 2001-07-03 三菱自動車工業株式会社 覚醒度推定装置
JPH10960A (ja) * 1996-06-12 1998-01-06 Yazaki Corp 運転者監視装置
FR2773521B1 (fr) * 1998-01-15 2000-03-31 Carlus Magnus Limited Procede et dispositif pour surveiller en continu l'etat de vigilance du conducteur d'un vehicule automobile, afin de detecter et prevenir une tendance eventuelle a l'endormissement de celui-ci
JP3622533B2 (ja) 1998-10-23 2005-02-23 株式会社デンソー 車間制御装置
JP4337130B2 (ja) * 1999-06-10 2009-09-30 マツダ株式会社 運転装置の制御装置
JP3555541B2 (ja) * 2000-03-07 2004-08-18 株式会社デンソー 車両用緊急通報システム
DE10121192A1 (de) * 2000-05-09 2001-11-15 Denso Corp Klimaanlage mit kontaktfreiem Temperatursensor
JP2003022500A (ja) * 2001-07-09 2003-01-24 Mitsubishi Motors Corp ドライバーの覚醒度検出装置
US6927694B1 (en) * 2001-08-20 2005-08-09 Research Foundation Of The University Of Central Florida Algorithm for monitoring head/eye motion for driver alertness with one camera
JP3943367B2 (ja) * 2001-10-31 2007-07-11 株式会社デンソー 車両用乗員頭部検出装置
US7044742B2 (en) 2001-12-26 2006-05-16 Kabushikikaisha Equos Research Emergency reporting apparatus
US6937745B2 (en) * 2001-12-31 2005-08-30 Microsoft Corporation Machine vision system and method for estimating and tracking facial pose
ATE539558T1 (de) * 2002-04-25 2012-01-15 Panasonic Corp Objektdetektionseinrichtung, objektdetektionsserver und objektdetektionsverfahren
WO2004004320A1 (en) * 2002-07-01 2004-01-08 The Regents Of The University Of California Digital processing of video images
US20060187067A1 (en) * 2002-08-14 2006-08-24 Simpson William A Instantaneous sleep activated alarm
EP2204118B1 (de) * 2002-10-15 2014-07-23 Volvo Technology Corporation Verfahren zur Auswertung der Kopf-und Augenaktivität eines Fahrers
JP4325271B2 (ja) * 2003-05-12 2009-09-02 日産自動車株式会社 状態検出装置及び状態検出システム
KR100527466B1 (ko) * 2003-07-28 2005-11-09 현대자동차주식회사 운전자 머리 위치 측정방법 및 장치
JP2005108033A (ja) * 2003-09-30 2005-04-21 Toshiba Corp 運転者状況判定装置および運転者状況判定方法
US7508979B2 (en) * 2003-11-21 2009-03-24 Siemens Corporate Research, Inc. System and method for detecting an occupant and head pose using stereo detectors
JP4711826B2 (ja) * 2003-11-30 2011-06-29 ボルボ テクノロジー コーポレイション 運転者の障害を認識するための方法およびシステム
JP2005173635A (ja) * 2003-12-05 2005-06-30 Fujitsu Ten Ltd 居眠り検出装置、カメラ、光遮断センサおよびシートベルトセンサ
JP4059224B2 (ja) * 2004-04-13 2008-03-12 株式会社デンソー 運転者の外観認識システム
DE102004036119B4 (de) * 2004-07-24 2007-06-28 Fendt, Günter Fahrerassistenzsystem zur Müdigkeitserkennung bzw. Aufmerksamkeitsbeurteilung eines Fahrzeugführers
JP4915735B2 (ja) * 2004-11-16 2012-04-11 学校法人日本大学 疲労判定システム及び疲労判定方法
JP4622544B2 (ja) * 2005-01-27 2011-02-02 アイシン精機株式会社 車両の運転支援装置
CN101714210B (zh) * 2005-02-23 2013-08-21 富士通株式会社 图像处理方法、图像处理装置以及图像处理系统
JP4735310B2 (ja) 2005-04-15 2011-07-27 株式会社デンソー 走行支援装置
US8846016B2 (en) * 2005-12-21 2014-09-30 Avon Products, Inc. Hair treatment compositions
US7860280B2 (en) * 2006-06-09 2010-12-28 Samsung Electronics Co., Ltd. Facial feature detection method and device
CN101466305B (zh) * 2006-06-11 2012-05-30 沃尔沃技术公司 用于确定和分析视觉兴趣位置的方法
US8050453B2 (en) * 2006-06-15 2011-11-01 Omron Corporation Robust object tracking system
JP2007331652A (ja) 2006-06-16 2007-12-27 Toyota Motor Corp 車両停止装置
JP4497133B2 (ja) * 2006-07-12 2010-07-07 アイシン・エィ・ダブリュ株式会社 運転支援方法及び運転支援装置
JP4420002B2 (ja) * 2006-09-14 2010-02-24 トヨタ自動車株式会社 視線先推定装置
JP4922715B2 (ja) * 2006-09-28 2012-04-25 タカタ株式会社 乗員検出システム、警報システム、制動システム、車両
JP2008094221A (ja) * 2006-10-11 2008-04-24 Denso Corp 目状態検出装置および目状態検出装置の取り付け方法
JP4211841B2 (ja) * 2006-11-15 2009-01-21 トヨタ自動車株式会社 ドライバ状態推定装置、サーバ、ドライバ情報収集装置及び運転者状態推定システム
US20080204239A1 (en) * 2007-02-28 2008-08-28 Christopher Marszalek Apparatus, system and/or method for wirelessly securing and/or for wirelessly monitoring an article
JP2008269496A (ja) * 2007-04-24 2008-11-06 Takata Corp 乗員情報検出システム、乗員拘束システム、車両
US7848548B1 (en) * 2007-06-11 2010-12-07 Videomining Corporation Method and system for robust demographic classification using pose independent model from sequence of face images
JP4946672B2 (ja) * 2007-07-04 2012-06-06 オムロン株式会社 脇見検出装置および方法、並びに、プログラム
JP4332813B2 (ja) * 2007-07-23 2009-09-16 株式会社デンソー 自動車用ユーザーもてなしシステム
CN101406390B (zh) * 2007-10-10 2012-07-18 三星电子株式会社 检测人体部位和人的方法和设备以及对象检测方法和设备
JP4582137B2 (ja) * 2007-10-11 2010-11-17 株式会社デンソー 眠気度判定装置
US7860813B2 (en) * 2008-01-24 2010-12-28 Nec Laboratories America, Inc. Monitoring driving safety using semi-supervised sequential learning
JP4941678B2 (ja) * 2008-05-30 2012-05-30 トヨタ自動車株式会社 警報制御装置
US20100014711A1 (en) * 2008-07-16 2010-01-21 Volkswagen Group Of America, Inc. Method for controlling an illumination in a vehicle interior in dependence on a head pose detected with a 3D sensor
US8538072B2 (en) * 2008-08-27 2013-09-17 Imprivata, Inc. Systems and methods for operator detection
WO2010032424A1 (ja) * 2008-09-18 2010-03-25 学校法人中部大学 眠気予兆検出装置
JP4666062B2 (ja) * 2008-11-17 2011-04-06 株式会社デンソー 画像撮影装置および方法
JP5326521B2 (ja) * 2008-11-26 2013-10-30 日産自動車株式会社 覚醒状態判断装置及び覚醒状態判断方法
CN201423980Y (zh) * 2009-01-05 2010-03-17 陈新杰 车辆驾驶的视觉辅助标志组合
CN101732055B (zh) * 2009-02-11 2012-04-18 北京智安邦科技有限公司 驾驶员疲劳检测方法及系统
US8063786B2 (en) * 2009-02-24 2011-11-22 Panasonic Automotive Systems Company Of America Division Of Panasonic Corporation Of North America Method of detecting drowsiness of a vehicle operator
US8344894B2 (en) * 2009-04-02 2013-01-01 GM Global Technology Operations LLC Driver drowsy alert on full-windshield head-up display
CN101593352A (zh) * 2009-06-12 2009-12-02 浙江大学 基于面部朝向和视觉焦点的驾驶安全监测系统
JP2011043961A (ja) * 2009-08-20 2011-03-03 Toyota Motor Corp 運転者監視装置
US9460601B2 (en) * 2009-09-20 2016-10-04 Tibet MIMAR Driver distraction and drowsiness warning and sleepiness reduction for accident avoidance
US8963829B2 (en) * 2009-10-07 2015-02-24 Microsoft Corporation Methods and systems for determining and tracking extremities of a target
US8564534B2 (en) * 2009-10-07 2013-10-22 Microsoft Corporation Human tracking system
CN102054163B (zh) * 2009-10-27 2013-06-05 南京理工大学 基于单目视觉的驾驶员疲劳检测方法
JP2011164825A (ja) * 2010-02-08 2011-08-25 Daihatsu Motor Co Ltd 運転状態判断装置
JP2011203869A (ja) * 2010-03-24 2011-10-13 Toyota Motor Corp 車両用居眠り防止装置
JP5178797B2 (ja) 2010-09-13 2013-04-10 キヤノン株式会社 表示制御装置及び表示制御方法
CN102567710B (zh) * 2010-12-30 2014-09-24 财团法人车辆研究测试中心 用以检测车辆内驾驶者的驾驶状态的方法及系统
US20140012491A1 (en) 2011-03-17 2014-01-09 Toyota Jidosha Kabushiki Kaisha Traveling support apparatus and traveling support method
JP2012203551A (ja) * 2011-03-24 2012-10-22 Komatsu Ltd 居眠り抑制システム及びダンプトラック
WO2012135018A2 (en) 2011-03-25 2012-10-04 Tk Holdings Inc. System and method for determining driver alertness
CN202088896U (zh) * 2011-05-26 2011-12-28 臧安迪 基于驾驶员面部识别的机动车安全控制系统
DE112011105430T5 (de) 2011-07-11 2014-04-17 Toyota Jidosha Kabushiki Kaisha Fahrzeug-Notfallevakuierungsvorrichtung
DE112011105431B4 (de) * 2011-07-11 2019-05-29 Toyota Jidosha Kabushiki Kaisha Fahrzeug-Notfallevakuierungsvorrichtung
WO2013008299A1 (ja) 2011-07-11 2013-01-17 トヨタ自動車株式会社 車両の緊急退避装置
CN102881116A (zh) * 2011-07-13 2013-01-16 上海库源电气科技有限公司 一种疲劳驾驶预警系统及方法
EP2564765B1 (de) 2011-09-02 2017-12-13 Volvo Car Corporation System und Verfahren zur Verbesserung der Leistungsschätzung eines Fahrzeugbedieners
JP2013097456A (ja) * 2011-10-28 2013-05-20 Denso Corp 運転者顔状態報知装置
CN102436715B (zh) * 2011-11-25 2013-12-11 大连海创高科信息技术有限公司 疲劳驾驶检测方法
CN102426757A (zh) * 2011-12-02 2012-04-25 上海大学 基于模式识别的安全驾驶监控系统和方法
KR101283304B1 (ko) * 2011-12-12 2013-07-12 기아자동차주식회사 운전자의 눈부심 검출 장치 및 그 방법과 이를 이용한 눈부심 차단 시스템 및 그 방법
US9274597B1 (en) * 2011-12-20 2016-03-01 Amazon Technologies, Inc. Tracking head position for rendering content
CN202383802U (zh) * 2011-12-31 2012-08-15 长安大学 货车疲劳驾驶声光警告系统
CN102592143B (zh) * 2012-01-09 2013-10-23 清华大学 一种驾驶员行车中手持电话违规行为检测方法
JP2013156707A (ja) * 2012-01-26 2013-08-15 Nissan Motor Co Ltd 運転支援装置
JP5505434B2 (ja) * 2012-02-09 2014-05-28 株式会社デンソー 脇見判定装置
US20130257620A1 (en) 2012-03-30 2013-10-03 Utechzone Co., Ltd. Device and method for detecting driver's attention through interactive voice questioning
JP6047318B2 (ja) * 2012-07-06 2016-12-21 矢崎総業株式会社 ドライバ状態検出装置及びドライバ状態報知装置
US20140019167A1 (en) 2012-07-16 2014-01-16 Shuli Cheng Method and Apparatus for Determining Insurance Risk Based on Monitoring Driver's Eyes and Head
JP2014019301A (ja) 2012-07-18 2014-02-03 Toyota Motor Corp 緊急退避装置
US9679209B2 (en) * 2012-07-25 2017-06-13 Denso Corporation State monitoring apparatus
KR101390906B1 (ko) * 2012-08-21 2014-05-02 자동차부품연구원 타이어 방향 감지에 따른 방향 지시등 제어 시스템 및 그 방법
WO2014057309A1 (en) * 2012-10-10 2014-04-17 Freescale Semiconductor, Inc. Method and apparatus for determining a risk level in manually operated systems
WO2014128273A1 (en) 2013-02-21 2014-08-28 Iee International Electronics & Engineering S.A. Imaging device based occupant monitoring system supporting multiple functions
CN203242124U (zh) * 2013-05-22 2013-10-16 重庆工业职业技术学院 基于头部运动检测的疲劳驾驶报警器
CN103315754B (zh) * 2013-07-01 2015-11-25 深圳市飞瑞斯科技有限公司 一种疲劳检测方法及装置
US20150009010A1 (en) * 2013-07-03 2015-01-08 Magna Electronics Inc. Vehicle vision system with driver detection
CN103434400B (zh) 2013-08-09 2018-07-06 浙江吉利汽车研究院有限公司 防酒驾和防瞌睡系统及防酒驾和防瞌睡方法
CN103473890B (zh) * 2013-09-12 2015-09-16 合肥工业大学 基于多信息的驾驶员疲劳实时监测系统及监测方法
US9330305B2 (en) * 2013-12-29 2016-05-03 Google Technology Holdings LLC Method and device for detecting a seating position in a vehicle
CN103767715B (zh) * 2014-01-15 2015-10-28 中国人民解放军国防科学技术大学 一种驾驶员安全驾驶状态检测装置
CN103770733B (zh) * 2014-01-15 2017-01-11 中国人民解放军国防科学技术大学 一种驾驶员安全驾驶状态检测方法及装置
US9721173B2 (en) * 2014-04-04 2017-08-01 Conduent Business Services, Llc Machine learning approach for detecting mobile phone usage by a driver
WO2015192980A1 (de) * 2014-06-20 2015-12-23 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung, verfahren und computerprogramm zur detektion eines sekundenschlafs
JP6372388B2 (ja) * 2014-06-23 2018-08-15 株式会社デンソー ドライバの運転不能状態検出装置
JP6379720B2 (ja) 2014-06-23 2018-08-29 株式会社デンソー ドライバの運転不能状態検出装置
JP6331751B2 (ja) 2014-06-23 2018-05-30 株式会社デンソー ドライバの運転不能状態検出装置
CN106471556B (zh) * 2014-06-23 2021-11-16 株式会社电装 驾驶员的驾驶不能状态检测装置
DE112015002934B4 (de) * 2014-06-23 2021-12-16 Denso Corporation Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers
JP2016045714A (ja) 2014-08-22 2016-04-04 株式会社デンソー 車載制御装置
JP6331875B2 (ja) 2014-08-22 2018-05-30 株式会社デンソー 車載制御装置
JP6341055B2 (ja) 2014-10-24 2018-06-13 株式会社デンソー 車載制御装置
CN104318714B (zh) * 2014-11-12 2018-06-15 沈阳美行科技有限公司 一种疲劳驾驶预警方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3239899A1 (de) * 2016-04-28 2017-11-01 Panasonic Intellectual Property Management Co., Ltd. Bestimmungsvorrichtung, bestimmungsverfahren und aufzeichnungsmedium mit darauf gespeichertem bestimmungsprogramm

Also Published As

Publication number Publication date
US11820383B2 (en) 2023-11-21
US20210158064A1 (en) 2021-05-27
CN111710190A (zh) 2020-09-25
CN114512030B (zh) 2024-04-30
CN111311963A (zh) 2020-06-19
US10936888B2 (en) 2021-03-02
CN111311963B (zh) 2024-05-07
US20170161576A1 (en) 2017-06-08
CN106463065B (zh) 2020-07-21
CN106463065A (zh) 2017-02-22
JP6372388B2 (ja) 2018-08-15
US10474914B2 (en) 2019-11-12
CN114512030A (zh) 2022-05-17
US20200057898A1 (en) 2020-02-20
WO2015198541A1 (ja) 2015-12-30
JP2016027452A (ja) 2016-02-18

Similar Documents

Publication Publication Date Title
DE112015002944T5 (de) Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers
DE112015002934B4 (de) Vorrichtung zum Erfassen eines Fahrunvermögenzustands eines Fahrers
DE112015002948B4 (de) Vorrichtung zum erfassen eines fahrunvermögenzustands eines fahrers
DE102018002963B4 (de) Fahrerüberwachungsapparat und fahrerüberwachungsverfahren
DE102017214353B4 (de) Fahrerzustands-erfassungssystem, fahrerzustands-erfassungsverfahren und diese enthaltendes fahrzeug
DE112016002612B4 (de) Fahrzeugsteuervorrichtung, Fahrzeugsteuerverfahren und Fahrzeugsteuerprogramm
DE112015003856T5 (de) Fahrzeuggebundene Steuervorrichtung
DE102012214852B4 (de) Verfahren und Vorrichtung zum Selektieren von Objekten in einem Umfeld eines Fahrzeugs
DE112016000695T5 (de) Evakuierungssteuervorrichtung und Evakuierungssteuerverfahren
DE102013101959B4 (de) Fahrzeugsteuervorrichtung
DE102018124857A1 (de) Fahrassistenzvorrichtung und Fahrassistenzverfahren
DE102018220286A1 (de) Ablenkungserfassungssystem
DE102017110283A1 (de) Steuern von funktionen und ausgaben von autonomen fahrzeugen auf der grundlage einer position und aufmerksamkeit von insassen
DE112011105430T5 (de) Fahrzeug-Notfallevakuierungsvorrichtung
DE102019109505A1 (de) Datenverarbeitungsvorrichtung, überwachungssystem, wecksystem, datenverarbeitungsverfahren und datenverarbeitungsprogramm
DE102014011264A1 (de) Verfahren zur Berechnung einer Rückholzeit
DE102015116280B4 (de) Fahrzeuginformation-Präsentationseinrichtung
DE102018127605A1 (de) Informationsverarbeitungsvorrichtung, fahrerüberwachungssystem, informationsverarbeitungsverfahren und informationsverarbeitungsprogramm
DE102018127600A1 (de) Informationsverarbeitungsvorrichtung, Fahrerüberwachungssystem, Informationsverarbeitungsverfahren und Informationsverarbeitungsprogramm
DE112017006982T5 (de) Bedienungseignungsbeurteilungsvorrichtung,bedienungseignungsbeurteilungsverfahren undbedienungseignungsbeurteilungsprogramm
JP6614286B2 (ja) ドライバの運転不能状態検出装置
DE102016223909A1 (de) Verfahren und Vorrichtung zur sensorgestützten Fahrerzustandsbewertung
DE112019007484T5 (de) Informationsverarbeitungsvorrichtung, programm und informationsverarbeitungsverfahren

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication