DE102015117610A1 - A method for checking a perception of a visual warning by a vehicle user, driver assistance system and motor vehicle - Google Patents

A method for checking a perception of a visual warning by a vehicle user, driver assistance system and motor vehicle Download PDF

Info

Publication number
DE102015117610A1
DE102015117610A1 DE102015117610.6A DE102015117610A DE102015117610A1 DE 102015117610 A1 DE102015117610 A1 DE 102015117610A1 DE 102015117610 A DE102015117610 A DE 102015117610A DE 102015117610 A1 DE102015117610 A1 DE 102015117610A1
Authority
DE
Germany
Prior art keywords
motor vehicle
visual warning
vehicle user
vehicle
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102015117610.6A
Other languages
German (de)
Inventor
Abdulsalam Giumaa
Michael Burke
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Connaught Electronics Ltd
Original Assignee
Connaught Electronics Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Connaught Electronics Ltd filed Critical Connaught Electronics Ltd
Priority to DE102015117610.6A priority Critical patent/DE102015117610A1/en
Priority to EP16775221.1A priority patent/EP3362308A1/en
Priority to PCT/EP2016/073223 priority patent/WO2017063892A1/en
Publication of DE102015117610A1 publication Critical patent/DE102015117610A1/en
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B60K35/285—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver for improving awareness by directing driver's gaze direction or eye points
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • B60K35/658—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the instruments being ergonomically adjustable to the user
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W50/16—Tactile feedback to the driver, e.g. vibration or force feedback to the driver on the steering wheel or the accelerator pedal
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1113—Local tracking of patients, e.g. in a hospital or private home
    • A61B5/1114—Tracking parts of the body
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/163—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state by tracking eye movement, gaze, or pupil change
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/18—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state for vehicle drivers or machine operators
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/486—Bio-feedback
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • A61B5/7267—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/742—Details of notification to user or communication with user or patient ; user input means using visual displays
    • A61B5/743—Displaying an image simultaneously with additional graphical information, e.g. symbols, charts, function plots
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/746—Alarms related to a physiological condition, e.g. details of setting alarm thresholds or avoiding false alarms
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149—Instrument input by detecting viewing direction not otherwise provided for
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/195—Blocking or enabling display functions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/21—Optical features of instruments using cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/60—Structural details of dashboards or instruments
    • B60K2360/65—Features of dashboards
    • B60K2360/658—Dashboard parts used as air ducts
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818—Inactivity or incapacity of driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143—Alarm means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/225—Direction of gaze
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2720/00—Output or target parameters relating to overall vehicle dynamics
    • B60W2720/10—Longitudinal speed
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0181—Adaptation to the pilot/driver

Landscapes

  • Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Optics & Photonics (AREA)
  • Automation & Control Theory (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Molecular Biology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Medical Informatics (AREA)
  • Surgery (AREA)
  • Ophthalmology & Optometry (AREA)
  • Biophysics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Traffic Control Systems (AREA)
  • Instrument Panels (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zum Überprüfen einer Wahrnehmung eines visuellen Warnhinweises in einem Kraftfahrzeug (1) an einen Fahrzeugnutzer (8) des Kraftfahrzeugs (1) durch den Fahrzeugnutzer (8), bei welchem folgende Schritte durchgeführt werden: – Ausgeben des visuellen Warnhinweises an einer vorbestimmten Position (14) innerhalb des Kraftfahrzeugs (1) mittels eines in einem Innenraum (6) des Kraftfahrzeugs (1) angeordneten Anzeigeelements (3) des Kraftfahrzeugs (1); – Erfassen einer Blickrichtung (9) des Fahrzeugnutzers (8) mittels einer Kamera (4) des Kraftfahrzeugs (1); – Bestimmen einer Sichtzone (10) des Fahrzeugnutzers (8), in welcher der Fahrzeugnutzer (8) Information wahrnimmt, anhand der Blickrichtung (9); – Überprüfen, ob der visuelle Warnhinweis innerhalb der Sichtzone (10) liegt; wobei – der visuelle Warnhinweis von einem Auswertesystem (5) des Kraftfahrzeugs (1) als von dem Fahrzeugnutzer (8) als erkannt angenommen wird, wenn der visuelle Warnhinweis innerhalb der Sichtzone (10) liegt.The invention relates to a method for checking a perception of a visual warning in a motor vehicle (1) to a vehicle user (8) of the motor vehicle (1) by the vehicle user (8), in which the following steps are performed: outputting the visual warning on a vehicle predetermined position (14) within the motor vehicle (1) by means of a in an interior (6) of the motor vehicle (1) arranged display element (3) of the motor vehicle (1); - Detecting a viewing direction (9) of the vehicle user (8) by means of a camera (4) of the motor vehicle (1); - Determining a viewing zone (10) of the vehicle user (8), in which the vehicle user (8) perceives information, based on the viewing direction (9); - checking that the visual warning is within the viewing zone (10); wherein - the visual warning is assumed to be recognized by an evaluation system (5) of the motor vehicle (1) as being recognized by the vehicle user (8) when the visual warning lies within the viewing zone (10).

Description

Die Erfindung betrifft ein Verfahren zum Überprüfen einer Wahrnehmung eines visuellen Warnhinweises in einem Kraftfahrzeug an einen Fahrzeugnutzer des Kraftfahrzeugs durch den Fahrzeugnutzer. Die Erfindung betrifft auch ein Fahrerassistenzsystem sowie ein Kraftfahrzeug mit einem Fahrerassistenzsystem. The invention relates to a method for checking a perception of a visual warning in a motor vehicle to a vehicle user of the motor vehicle by the vehicle user. The invention also relates to a driver assistance system and to a motor vehicle having a driver assistance system.

Üblicherweise ist in einem Innenraum eines Kraftfahrzeugs zumindest ein Anzeigeelement zur Ausgabe eines visuellen Warnhinweises an einen Fahrzeugnutzer des Kraftfahrzeugs angeordnet. So kann der visuelle Warnhinweis beispielsweise durch das Aufleuchten einer Ölstandskontrollleuchte in dem Kraftfahrzeug ausgegeben werden. Dabei kann es vorkommen, dass der Fahrzeugnutzer den visuellen Warnhinweis nicht wahrnimmt. Nachteilig ist dadurch der möglicherweise nicht mehr ordnungsgemäß ablaufende weitere Betrieb des Kraftfahrzeugs, wodurch auch die Sicherheit des Kraftfahrzeugs und anderer Verkehrsteilnehmer beeinträchtigt werden kann. Usually, at least one display element for outputting a visual warning to a vehicle user of the motor vehicle is arranged in an interior of a motor vehicle. Thus, the visual warning can be issued, for example, by the lighting of an oil level indicator light in the motor vehicle. It may happen that the vehicle user does not perceive the visual warning. A disadvantage is the possibly no longer properly running further operation of the motor vehicle, whereby the safety of the motor vehicle and other road users can be affected.

Es ist Aufgabe der Erfindung, ein Verfahren, ein Fahrerassistenzsystem sowie ein Kraftfahrzeug zu schaffen, mittels welchem bzw. bei welchem das fahrzeugnutzererfolgende Wahrnehmen eines visuellen Warnhinweises, der in dem Kraftfahrzeug erzeugt wird, verbessert ist. It is an object of the invention to provide a method, a driver assistance system and a motor vehicle, by means of which or in which the vehicle user subsequent perception of a visual warning, which is generated in the motor vehicle, is improved.

Diese Aufgabe wird erfindungsgemäß durch ein Verfahren, durch ein Fahrerassistenzsystem sowie durch ein Kraftfahrzeug mit den Merkmalen gemäß den jeweiligen unabhängigen Ansprüchen gelöst. This object is achieved by a method by a driver assistance system and by a motor vehicle with the features according to the respective independent claims.

Bei einem erfindungsgemäßen Verfahren wird eine Wahrnehmung eines visuellen Warnhinweises in einem Kraftfahrzeug, welcher an einen Fahrzeugnutzer des Kraftfahrzeugs ausgegeben wird, durch einen Fahrzeugnutzer, insbesondere von einem Auswertesystem des Kraftfahrzeugs, überprüft. Es wird der visuelle Warnhinweis in einer vorbestimmten Position innerhalb des Kraftfahrzeugs mittels eines in einem Innenraum des Kraftfahrzeugs angeordneten Anzeigeelements des Kraftfahrzeugs ausgegeben und es wird eine Blickrichtung des Fahrzeugnutzers mittels zumindest einer Kamera des Kraftfahrzeugs erfasst. Weiterhin wird eine Sichtzone des Fahrzeugnutzers, in welcher der Fahrzeugnutzer Informationen wahrnimmt, anhand der Blickrichtung bestimmt. Es wird überprüft ob der visuelle Warnhinweis innerhalb der Sichtzone liegt. Der visuelle Warnhinweis wird von einem Auswertesystem des Kraftfahrzeugs als erkannt angenommen, wenn der visuelle Warnhinweis innerhalb der Sichtzone liegt. In a method according to the invention, a perception of a visual warning in a motor vehicle, which is output to a vehicle user of the motor vehicle, is checked by a vehicle user, in particular by an evaluation system of the motor vehicle. The visual warning is output in a predetermined position within the motor vehicle by means of a display element of the motor vehicle arranged in an interior of the motor vehicle, and a viewing direction of the vehicle user is detected by means of at least one camera of the motor vehicle. Furthermore, a viewing zone of the vehicle user, in which the vehicle user perceives information, determined by the viewing direction. It is checked if the visual warning lies within the viewing zone. The visual warning is assumed to be recognized by an evaluation system of the motor vehicle when the visual warning lies within the viewing zone.

Durch das erfindungsgemäße Verfahren kann das Überprüfen der Wahrnehmung des visuellen Warnhinweises von dem Fahrzeugnutzer wesentlich verbessert wird. Es kann effektiver und zuverlässiger überprüft werden, ob der Fahrzeugnutzer den visuellen Warnhinweis wahrgenommen hat. Es wird nicht mehr nur ein Warnhinweis ausgegeben, ohne eine Aussage über die Wahrnehmungswahrscheinlichkeit des Warnhinweises durch den Fahrzeugnutzer zu erzeugen. Vielmehr wird nun grundsätzlich auch beurteilt, ob der Fahrzeugnutzer den Warnhinweis überhaupt wahrnehmen kann beziehungsweise wahrgenommen hat. Dazu wird anhand spezifischer Auswertungsweisen abgeschätzt, ob eine Wahrnehmung erfolgt sein könnte. Abhängig von diesen Wahrscheinlichkeitsabschätzungen wird dann von einer Wahrnehmung ausgegangen oder nicht. By the method according to the invention, the checking of the perception of the visual warning by the vehicle user can be substantially improved. It can be more effectively and reliably checked whether the vehicle user has perceived the visual warning. It is no longer just a warning issued without producing a statement about the probability of perception of the warning by the vehicle user. Rather, it is now basically also assessed whether the vehicle user can perceive the warning at all or has perceived. For this purpose, it is estimated on the basis of specific evaluation methods whether a perception could have occurred. Depending on these probability estimates, a perception is then assumed or not.

Es wird als der visuelle Warnhinweis beispielsweise eine Ölstandskontrollleuchte, eine Navigationshinweiswarnung, eine Geschwindigkeitsbegrenzungswarnung oder eine sonstige Warnung bezüglich eines Betriebszustands des Kraftfahrzeugs ausgegeben. Der visuelle Warnhinweis wird durch das Anzeigeelement an der vorbestimmten Position innerhalb des Kraftfahrzeugs ausgegeben. So ist es beispielsweise bekannt, dass, falls eine Ölstandswarnung ausgegeben werden soll, diese beispielsweise auf dem Anzeigeelement an der vorbestimmten Position angezeigt wird. Es kann also von dem jeweiligen Typ des visuellen Warnhinweises auf die jeweilige vorbestimmte Position des Anzeigeelements geschlossen werden. Das Anzeigeelement ist insbesondere an einem Armaturenbrett des Kraftfahrzeugs oder an einem Cockpit des Kraftfahrzeugs angeordnet. As the visual warning, for example, an oil level warning lamp, a navigation advice warning, a speed limit warning, or other warning regarding an operating state of the motor vehicle is output. The visual warning is output by the display element at the predetermined position within the motor vehicle. For example, it is known that if an oil level warning is to be output, it is displayed on the display element at the predetermined position, for example. It can thus be concluded from the respective type of visual warning to the respective predetermined position of the display element. The display element is arranged in particular on a dashboard of the motor vehicle or on a cockpit of the motor vehicle.

Das Erfassen der Blickrichtung des Fahrzeugnutzers mittels der Kamera kann beispielsweise durch ein Auswerten von mit der Kamera aufgenommenen Bildern erfolgen. So kann in den Bildern beispielsweise eine Ausrichtung einer Pupille des Fahrzeugnutzers erkannt werden. Anhand der Ausrichtung der Pupille kann dann beispielsweise die Blickrichtung des Fahrzeugnutzers bestimmt werden. Die Ausrichtung der Pupille kann beispielsweise mit einem gängigen Objekterkennungsverfahren aus dem Bereich des maschinellen Sehens erkannt werden. Die Ausrichtung der Pupille kann hierbei auch über mehrere Bilder, welche mit der Kamera bereitgestellt werden, verfolgt werden, wodurch auch eine Änderung der Blickrichtung des Fahrzeugnutzers erkannt werden kann. Beispielsweise kann es sein, dass zumindest ein Auge des Fahrzeugnutzers mit der Kamera erfasst wird und das zumindest eine erfasste Auge mit Augen in einer Datenbank verglichen wird. Die Datenbank kann beispielsweise Augen mit unterschiedlichen Pupillenausrichtungen aufweisen. Jede dieser Pupillenausrichtungen kann dann beispielsweise mit einer bestimmten Blickrichtung verknüpft sein. So kann dann anhand einer Ähnlichkeitsmessung festgestellt werden, mit welchem Auge aus der Datenbank das erfasste Auge am besten übereinstimmt. Die dem am besten übereinstimmenden Auge aus der Datenbank zugeordnete Blickrichtung kann dann als die Blickrichtung des Fahrzeugnutzers angenommen werden. Für das Vergleichen des erfassten Auges mit den Augen in der Datenbank kann beispielsweise ein Matching-Verfahren nach dem Prinzip der Kreuzkorrelation und/oder der Transinformation (mutual information) genutzt werden. Die Blickrichtung des Fahrzeugnutzers kann auch mittels mehreren Kameras des Kraftfahrzeugs erfasst werden. The detection of the viewing direction of the vehicle user by means of the camera can take place, for example, by evaluating images recorded with the camera. For example, an orientation of a pupil of the vehicle user can be recognized in the images. Based on the orientation of the pupil can then be determined, for example, the line of sight of the vehicle user. The orientation of the pupil can be recognized, for example, with a conventional object recognition method from the field of machine vision. The orientation of the pupil can in this case also be tracked over a plurality of images which are provided with the camera, as a result of which a change in the viewing direction of the vehicle user can also be detected. For example, it may be that at least one eye of the vehicle user is detected with the camera and the at least one detected eye is compared with eyes in a database. For example, the database may have eyes with different pupil orientations. Each of these pupil alignments can then, for example, with a specific line of sight be linked. Thus, it can then be determined by means of a similarity measurement with which eye from the database the detected eye best matches. The viewing direction assigned to the best matching eye from the database can then be taken as the viewing direction of the vehicle user. For example, a matching method based on the principle of cross-correlation and / or mutual information can be used for comparing the detected eye with the eyes in the database. The viewing direction of the vehicle user can also be detected by means of several cameras of the motor vehicle.

Anhand der Blickrichtung kann dann die Sichtzone des Fahrzeugnutzers bestimmt werden. Innerhalb der Sichtzone nimmt der Fahrzeugnutzer Information wahr. Die Sichtzone kann beispielsweise als Gesichtsfeld beschrieben werden. Mit dem Gesichtsfeld bezeichnet man in der Physiologie und Augenheilkunde alle zentralen und peripheren Punkte und Gegenstände des Außenraums, die bei ruhiger, gerader Kopfhaltung und gerade ausgerichtetem, bewegungslosem Blick visuell wahrgenommen werden können, auch ohne sie direkt zu fixieren. So kann die Sichtzone beispielsweise auch aus einer Datenbank entnommen werden, in welcher beispielsweise verschiedene Sichtzonen verschiedenen Blickrichtungen zugeordnet sind. Based on the direction of view then the viewing zone of the vehicle user can be determined. Within the viewing zone, the vehicle user perceives information. The viewing zone can be described as a visual field, for example. In the field of physiology and ophthalmology, the visual field refers to all central and peripheral points and objects of the external space that can be visually perceived with a calm, straight head posture and a straight-line, motionless look, even without fixing them directly. For example, the viewing zone can also be taken from a database in which, for example, different viewing zones are assigned to different viewing directions.

Es wird überprüft, ob der visuelle Warnhinweis innerhalb der Sichtzone liegt. So kann beispielsweise überprüft werden, ob ein von dem Anzeigeelement ausgestrahltes Lichtsignal bis innerhalb der Sichtzone Auswirkungen hat. Überprüft wird also beispielsweise, ob Photonen von dem Anzeigeelement in die Sichtzone des Fahrzeugnutzers treffen. Ergibt die Überprüfung, dass der visuelle Warnhinweis innerhalb der Sichtzone liegt, so wird der visuelle Warnhinweis von dem Auswertesystem als von dem Fahrzeugnutzer erkannt angenommen. Es kann dann also davon ausgegangen werden, dass der Fahrzeugnutzer den visuellen Warnhinweis wahrgenommen hat. Durch die Wahrnehmung wird der Fahrzeugnutzer also auf den durch das Anzeigeelement ausgegebenen visuellen Warnhinweis aufmerksam. It is checked if the visual warning lies within the viewing zone. For example, it can be checked whether a light signal emitted by the display element has an effect up to within the viewing zone. Thus, for example, it is checked whether photons from the display element in the viewing zone of the vehicle user meet. If the check reveals that the visual warning lies within the viewing zone, then the visual warning is accepted by the evaluation system as being recognized by the vehicle user. It can then be assumed that the vehicle user has perceived the visual warning. By the perception of the vehicle user is thus aware of the issued by the display element visual warning.

Insbesondere ist es vorgesehen, dass der visuelle Warnhinweis von dem Auswertesystem als von dem Fahrzeugnutzer als nicht erkannt angenommen wird, wenn der visuelle Warnhinweis außerhalb der Sichtzone liegt, wobei dann ein Aufmerksamkeitserhöhungssignal in dem Kraftfahrzeug für den Fahrzeugnutzer erzeugt wird. Der visuelle Warnhinweis liegt insbesondere dann außerhalb der Sichtzone, wenn Photonen, welche von dem Anzeigeelement abgegeben werden, nicht in die Sichtzone gelangen. Es kann dann angenommen werden, dass der visuelle Warnhinweis von dem Fahrzeugnutzer nicht wahrgenommen wird. Die Aufmerksamkeit des Fahrzeugnutzers wird dadurch also nicht auf den visuellen Warnhinweis gelenkt. Als Folge wird insbesondere das Aufmerksamkeitserhöhungssignal in dem Kraftfahrzeug für den Fahrzeugnutzer erzeugt. Durch das Aufmerksamkeitserhöhungssignal soll die Aufmerksamkeit des Fahrzeugnutzers auf den visuellen Warnhinweis gelenkt werden. Der Fahrzeugnutzer soll also zur Wahrnehmung des visuellen Warnhinweises anhand des Aufmerksamkeitserhöhungssignals gebracht werden. Dies kann beispielsweise auch schon dadurch erfolgen, dass der Fahrzeugnutzer sich nach der Erzeugung des Aufmerksamkeitserhöhungssignals gründlich in dem Inneren des Kraftfahrzeugs umsieht, um den Grund für das Erzeugen des Aufmerksamkeitserhöhungssignals zu ermitteln. In particular, it is provided that the visual warning is assumed by the evaluation system to be unrecognized by the vehicle user if the visual warning lies outside the viewing zone, in which case an attention-increasing signal is generated in the motor vehicle for the vehicle user. The visual warning is outside the viewing zone, in particular, when photons emitted by the display element do not enter the viewing zone. It can then be assumed that the visual warning is not perceived by the vehicle user. The attention of the vehicle user is therefore not directed to the visual warning. As a result, in particular, the attention-increasing signal is generated in the motor vehicle for the vehicle user. The attention-increasing signal is intended to draw the attention of the vehicle user to the visual warning. The vehicle user should therefore be brought to the perception of the visual warning by the attention increase signal. For example, this can already be done by the vehicle user looking around the interior of the motor vehicle thoroughly after the generation of the attention-increasing signal in order to determine the reason for generating the attention-increasing signal.

Vorzugsweise ist es vorgesehen, dass das Aufmerksamkeitserhöhungssignal visuell und/oder akustisch und/oder haptisch ausgegeben wird. So kann das visuelle Aufmerksamkeitserhöhungssignal beispielsweise durch eine Beleuchtung und/oder eine Beleuchtungsänderung innerhalb des Kraftfahrzeugs ausgegeben werden. Das akustische Aufmerksamkeitserhöhungssignal kann beispielsweise über ein Audiosystem des Kraftfahrzeugs ausgegeben werden. So kann beispielsweise ein Warnton oder ein Warnsignal als das akustische Aufmerksamkeitserhöhungssignal in dem Kraftfahrzeug ausgegeben werden. Als das Warnsignal kann beispielsweise auch ein Text mit dem genauen Hintergrund des visuellen Warnhinweises ausgegeben werden. So kann der visuelle Warnhinweis dadurch beispielsweise in Worte gefasst werden und dem Fahrzeugnutzer dadurch mit den Worten akustisch bereitgestellt werden. Als das haptische Aufmerksamkeitserhöhungssignal kann beispielsweise das Vibrieren eines in Kontakt mit dem Fahrzeugnutzer stehenden Kraftfahrzeugteils vorgesehen sein. So kann als das vibrierende Kraftfahrzeugteil beispielsweise ein Lenkrad, ein Fahrzeugsitz oder ein Sicherheitsgurt des Kraftfahrzeugs ausgebildet sein. Insgesamt kann das Aufmerksamkeitserhöhungssignal dadurch vielfältig und durch mehrere Sinne des Fahrzeugnutzers erfassbar ausgegeben werden, sodass das die Wahrnehmung effektiver und nachdrücklicher erfolgen kann. Preferably, it is provided that the attention-increasing signal is output visually and / or acoustically and / or haptically. Thus, the visual attention-increasing signal can be output, for example, by a lighting and / or a change in the illumination within the motor vehicle. The acoustic attention-increasing signal can be output via an audio system of the motor vehicle, for example. For example, a warning sound or a warning signal may be output as the acoustic attention-increasing signal in the motor vehicle. For example, a text with the exact background of the visual warning can also be output as the warning signal. Thus, the visual warning can thus be worded, for example, and thus provided acoustically to the vehicle user with the words. As the haptic attention-increasing signal, for example, vibration of a motor vehicle part in contact with the vehicle user may be provided. For example, a steering wheel, a vehicle seat or a safety belt of the motor vehicle may be formed as the vibrating motor vehicle part. Overall, the attention-increasing signal can thus be issued in a variety of ways and by several senses of the vehicle user detectable, so that the perception can be made more effective and more emphatic.

Weiterhin vorzugsweise ist es vorgesehen, dass als das Aufmerksamkeitserhöhungssignal ein visuelles Warnsignal mittels einer Innenraumbeleuchtung des Kraftfahrzeugs ausgegeben wird. Die Innenraumbeleuchtung dient dabei insbesondere der Erleuchtung des Innenraums. Die Innenraumbeleuchtung wird üblicherweise bei Personenkraftwagen mit geschlossenem Aufbau durch Leuchten im Fahrzeugdach ausgebildet. Die Innenraumbeleuchtung kann beispielsweise durch Soffittenlampen und/oder Leuchtdioden (LEDs) bereitgestellt werden. Die Innenraumbeleuchtung kann aber beispielsweise auch eine Handschuhfachbeleuchtung und/oder eine Gepäckraumbeleuchtung umfassen. Auch kann von der Fahrzeuginnenraumbeleuchtung eine Leseleuchte umfasst sein. Durch die Innenraumbeleuchtung kann das Aufmerksamkeitserhöhungssignal effektiver und nachdrücklicher ausgegeben werden. Furthermore, it is preferably provided that a visual warning signal is output by means of an interior lighting of the motor vehicle as the attention-increasing signal. The interior lighting is used in particular the illumination of the interior. The interior lighting is usually formed in passenger cars with a closed structure by lights in the vehicle roof. The interior lighting can be provided for example by Soffittenlampen and / or light-emitting diodes (LEDs). The interior lighting can but For example, also include a glove compartment lighting and / or a luggage compartment lighting. Also, a reading light may be included in the vehicle interior lighting. Through the interior lighting, the attention-increasing signal can be output more effectively and emphatically.

Insbesondere ist es vorgesehen, dass das visuelle Farbsignal im Farbton geändert wird und/oder in der Helligkeit geändert wird. Durch den Farbton wird eine vom Menschen als grundlegend empfundene Eigenschaft einer Farbe beschrieben. Der Farbton bezeichnet in der Farbenleere die Eigenschaft, nach der man Farbempfindungen nach beispielsweise Rot, Gelb oder Grün unterscheidet. Durch die Änderung des Farbtons des visuellen Warnsignals kann das Aufmerksamkeitserhöhungssignal deutlicher und nachdrücklicher ausgegeben werden. So ist der Mensch besonders sensibel für Farbtonänderungen und/oder Helligkeitsänderungen in seiner Sichtzone. Die Innenraumbeleuchtung ist insbesondere derart ausgestaltet, dass ein von der Innenraumbeleuchtung ausgestrahltes Licht möglichst in sämtlich unterschiedlich positionierte Sichtzonen des Fahrzeugnutzers eintreffen kann. Die Helligkeit ist ein Überbegriff subjektiver Eindrücke und objektiver Messgrößen für die Stärke einer visuellen Wahrnehmung von sichtbarem Licht. Durch das Ändern der Helligkeit kann das Aufmerksamkeitserhöhungssignal deutlicher und nachdrücklicher für den Fahrzeugnutzer erzeugt werden. Ergänzend oder alternativ kann die Innenraumbeleuchtung allerdings auch blinkend ausgestaltet werden. In der blinkenden Ausgestaltung wird die Innenraumbeleuchtung beispielsweise in vorbestimmten Abständen, insbesondere in kurzen Abständen beispielsweise unter einer Sekunde, ein- und ausgeschaltet. Dadurch kann das Aufmerksamkeitserhöhungssignal wiederum effektiver und nachdrücklicher ausgegeben werden, sodass die Aufmerksamkeit des Fahrzeugnutzers auf das Vorhandensein des visuellen Warnhinweises gelenkt wird. In particular, it is provided that the visual color signal in the color tone is changed and / or changed in brightness. The hue describes a characteristic of a color perceived by humans as fundamental. The hue in the color void designates the property according to which one distinguishes color sensations according to, for example, red, yellow or green. By changing the hue of the visual warning signal, the attention-increasing signal can be output more clearly and emphatically. Thus, the person is particularly sensitive to changes in hue and / or brightness changes in his vision zone. The interior lighting is in particular designed such that a light emitted by the interior lighting light can arrive as possible in all differently positioned viewing zones of the vehicle user. Brightness is an umbrella term for subjective impressions and objective measures of the strength of a visual perception of visible light. By changing the brightness, the attention-increasing signal can be generated more clearly and emphatically for the vehicle user. In addition or as an alternative, however, the interior lighting can also be made flashing. In the flashing embodiment, the interior lighting is switched on and off, for example, at predetermined intervals, in particular at short intervals, for example, under one second. As a result, the attention-increasing signal can again be output more effectively and more emphatically, so that the attention of the vehicle user is directed to the presence of the visual warning.

In einer weiteren Ausführungsform kann es vorgesehen sein, dass eine Sicherheitsrelevanz des visuellen Warnhinweises bestimmt wird, und der Farbton des visuellen Warnsignals abhängig von der Sicherheitsrelevanz eingestellt wird. So kann die Sicherheitsrelevanz beispielsweise dadurch charakterisiert sein, wie bedeutend der visuelle Warnhinweis für den sicheren Betrieb des Kraftfahrzeugs ist. Hier kann beispielsweise unterschieden werden, ob eine Temperatur eines Motors des Kraftfahrzeugs zu hoch ist und der Motor zu überhitzen droht, wodurch bleibende Schäden an dem Motor und/oder einem Kühlkreislauf des Kraftfahrzeugs entstehen können, oder ob die Sicherheitsrelevanz niedrig eingestuft wird, wie dies beispielsweise bei fehlender Wischwasserflüssigkeit der Fall sein kann. Der Farbton kann nun beispielsweise bei niedriger Sicherheitsrelevanz nur leicht geändert werden und bei hoher Sicherheitsrelevanz stark geändert werden. So kann beispielsweise bei starker Sicherheitsrelevanz ein roter Farbton durch die Innenraumbeleuchtung ausgegeben werden. Bei der niedrigen Sicherheitsrelevanz kann der Farbton beispielsweise gar nicht geändert werden oder aber lediglich in feinen Nuancen, sodass der Fahrzeugnutzer nicht durch die Innenraumbeleuchtung erschreckt und dadurch eventuell vom Verkehrsgeschehen abgelenkt wird. Dadurch kann das Kraftfahrzeug sicherer betrieben werden. In a further embodiment, it may be provided that a security relevance of the visual warning is determined, and the color tone of the visual warning signal is set depending on the security relevance. For example, the safety relevance may be characterized by how significant the visual warning for the safe operation of the motor vehicle is. Here, for example, it can be distinguished whether a temperature of an engine of the motor vehicle is too high and the engine threatens to overheat, whereby permanent damage to the engine and / or a cooling circuit of the motor vehicle may arise, or if the safety relevance is classified low, as for example in the absence of wiper water liquid may be the case. The color tone can now only be changed slightly, for example with low security relevance, and can be greatly changed with high security relevance. For example, in the case of strong safety relevance, a red color tone can be emitted through the interior lighting. For example, with low safety relevance, the color tone can not be changed at all, or only in subtle nuances, so that the vehicle user is not frightened by the interior lighting and thus may be distracted from the traffic. As a result, the motor vehicle can be operated more safely.

In einer weiteren Ausführungsform kann es vorgesehen sein, dass abhängig von dem Erzeugen des Aufmerksamkeitserhöhungssignals eine Geschwindigkeit des Kraftfahrzeugs angepasst wird. So kann es beispielsweise der Fall sein, dass der visuelle Warnhinweis von dem Auswertesystem als von dem Fahrzeugnutzer als nicht erkannt angenommen wird und dadurch die Geschwindigkeit des Kraftfahrzeugs angepasst wird. So kann es beispielsweise sein, dass durch den visuellen Warnhinweis eine aktuell gültige Geschwindigkeitsbegrenzung für das Kraftfahrzeug während der Fahrt des Kraftfahrzeugs ausgegeben wird und der Fahrzeugnutzer diesen visuellen Warnhinweis gemäß dem Auswertesystem nicht wahrgenommen hat. So kann dann ein Eingriff in die Geschwindigkeit des Kraftfahrzeugs durchgeführt werden, um die Geschwindigkeit des Kraftfahrzeugs beispielsweise innerhalb des vorgeschriebenen Rahmens zu halten. Ergänzend oder alternativ kann beispielsweise auch in eine Steuerung des Kraftfahrzeugs eingegriffen werden, falls der Fahrzeugnutzer gemäß dem Auswertesystem den visuellen Warnhinweis nicht wahrgenommen hat. Durch das Anpassen der Geschwindigkeit des Kraftfahrzeugs abhängig von dem Erzeugen des Aufmerksamkeitserhöhungssignals kann das Kraftfahrzeug sicherer betrieben werden. In a further embodiment it may be provided that a speed of the motor vehicle is adjusted depending on the generation of the attention-increasing signal. For example, it may be the case that the visual warning is assumed by the evaluation system as not recognized by the vehicle user, and thereby the speed of the motor vehicle is adjusted. For example, it may be that a currently valid speed limit for the motor vehicle during the drive of the motor vehicle is output by the visual warning and the vehicle user has not perceived this visual warning according to the evaluation system. Thus, an intervention in the speed of the motor vehicle can then be performed in order to keep the speed of the motor vehicle within the prescribed range, for example. Additionally or alternatively, for example, a control of the motor vehicle may also be intervened if the vehicle user has not perceived the visual warning in accordance with the evaluation system. By adjusting the speed of the motor vehicle depending on the generation of the attention-increasing signal, the motor vehicle can be operated more safely.

In einer weiteren Ausführungsform kann es vorgesehen sein, dass der Fahrzeugnutzer auf das Tragen einer Augenverdeckung, wie insbesondere beispielsweise einer, insbesondere getönten, Brille, hin überprüft wird, insbesondere, falls das Erfassen der Blickrichtung des Fahrzeugnutzers fehlschlägt. So kann es vorgesehen sein, dass, falls das Erfassen der Blickrichtung des Fahrzeugnutzers fehlschlägt, eine Überprüfung des Fahrzeugnutzers hin auf das Tragen der Augenverdeckung durchgeführt wird. Die Augenverdeckung kann dabei beispielsweise als Sonnenbrille oder Augenklappe ausgebildet sein. Das Überprüfen auf das Tragen der Augenverdeckung hin kann beispielsweise ebenfalls mit einem Objekterkennungsverfahren aus dem Bereich des maschinellen Sehens durchgeführt werden. So kann das Überprüfen beispielsweise in vorbestimmten Zeitabständen durchgeführt werden oder aber lediglich, falls das Erfassen der Blickrichtung des Fahrzeugnutzers fehlschlägt. Dadurch kann für das Auswertesystem ein Grund gefunden werden, warum die Blickrichtung des Fahrzeugnutzers nicht erkannt werden kann. Das Auswertesystem kann dadurch also so lange mit dem Bestimmen der Blickrichtung aussetzen, bis das Tragen der Augenverdeckung nicht mehr nachgewiesen wird. Ein Energieverbrauch des Auswertesystems kann somit niedriger gehalten werden und/oder eine Rechenkapazität des Auswertesystems kann somit für andere Anwendungen genutzt werden. In a further embodiment, it may be provided that the vehicle user is checked for the wearing of an eye masking, such as in particular, for example, a pair of glasses, in particular tinted glasses, in particular if the detection of the viewing direction of the vehicle user fails. Thus, it can be provided that, if the detection of the viewing direction of the vehicle user fails, a check of the vehicle user is carried out towards the wearing of the eye masking. The eye concealment can be designed, for example, as sunglasses or eyepatch. For example, checking for wearing of the eye mask may also be performed with a machine vision object detection method. For example, the checking may be carried out at predetermined time intervals or else only if the detection of the viewing direction of the vehicle user fails. This can be for the Evaluation system a reason can be found why the viewing direction of the vehicle user can not be detected. Thus, the evaluation system can thus suspend so long with the determination of the line of sight, until the wearing of the eye occlusion is no longer detected. An energy consumption of the evaluation system can thus be kept lower and / or a computing capacity of the evaluation system can thus be used for other applications.

Weiterhin kann es vorgesehen sein, dass, falls bei dem Fahrzeugnutzer das Tragen der Augenverdeckung erkannt wird, anstatt der Blickrichtung eine Ausrichtung des Kopfs des Fahrzeugnutzers mittels der Kamera erfasst wird, und die Sichtzone anhand der Ausrichtung des Kopfs bestimmt wird, und überprüft wird, ob der visuelle Warnhinweis innerhalb der Sichtzone liegt, wobei der visuelle Warnhinweis von dem Auswertesystem des Kraftfahrzeugs als von dem Fahrzeugnutzer als erkannt angenommen wird, wenn der visuelle Warnhinweis innerhalb der Sichtzone liegt. Es kann also die Sichtzone anhand der Ausrichtung des Kopfs bestimmt werden. Somit kann die Sichtzone auch bestimmt werden, falls der Fahrzeugnutzer die Augenverdeckung trägt. Nach dem Bestimmen der Sichtzone anhand der Ausrichtung des Kopfs kann dann wiederum überprüft werden, ob der visuelle Warnhinweis innerhalb der Sichtzone liegt. Falls dies der Fall ist, wird von dem Auswertesystem angenommen, dass der Fahrzeugnutzer den visuellen Warnhinweis wahrgenommen hat. Falls der visuelle Warnhinweis außerhalb der anhand der Ausrichtung des Kopfs bestimmten Sichtzone liegt, kann dann ebenfalls wiederum das Aufmerksamkeitserhöhungssignal erzeugt beziehungsweise ausgegeben werden. Dadurch kann das Kraftfahrzeug auch sicherer betrieben werden, falls der Fahrzeugnutzer die Augenverdeckung trägt. Furthermore, it can be provided that, if the vehicle user detects the wearing of the eye mask, instead of the viewing direction an orientation of the head of the vehicle user is detected by the camera, and the viewing zone is determined based on the orientation of the head, and it is checked whether the visual warning is within the viewing zone, the visual warning being accepted by the vehicle's evaluation system as being recognized by the vehicle user when the visual warning is within the viewing zone. So it can be determined based on the orientation of the head, the viewing zone. Thus, the viewing zone can also be determined if the vehicle user is wearing the eye mask. After determining the viewing zone based on the orientation of the head, it is then again possible to check whether the visual warning lies within the viewing zone. If this is the case, the evaluation system assumes that the vehicle user has perceived the visual warning. If the visual warning is outside the viewing zone determined by the orientation of the head, the attention-increasing signal can then likewise be generated or output. As a result, the motor vehicle can also be operated more safely if the vehicle user is wearing the eye cover.

Weiterhin kann es vorgesehen sein, dass der visuelle Warnhinweis durch eine Warnleuchte als das Anzeigeelement ausgegeben wird. Durch die Warnleuchte kann beispielsweise eine Kontrollleuchte des Kraftfahrzeugs und/oder ein sonstiger Warnhinweisgeber in dem Innenraum des Kraftfahrzeugs beschrieben werden. So kann die Warnleuchte beispielsweise als Motortemperaturkontrollleuchte oder als Ölstandskontrollleuchte ausgebildet sein. Furthermore, it can be provided that the visual warning is output by a warning light as the display element. For example, a warning light of the motor vehicle and / or another warning indicator in the interior of the motor vehicle can be described by the warning light. For example, the warning light can be designed as an engine temperature control light or as an oil level control light.

Weiterhin kann es vorgesehen sein, dass der visuelle Warnhinweis mittels des in einem Cockpit des Kraftfahrzeugs angeordneten Anzeigeelements ausgegeben wird. So ist das Anzeigeelement also insbesondere in dem Cockpit des Kraftfahrzeugs angeordnet und nicht in einem Bereich des Innenraums, welcher von dem Fahrzeugnutzer bei üblicher Blickrichtung während des Fahrens gar nicht eingesehen werden kann. Vorteilhaft ist, dass das Darbieten der Wahrnehmung des visuellen Warnhinweises dadurch situationsgerechter an die Situation des Fahrzeugnutzers während der Fahrzeugführung angepasst werden kann. Furthermore, it can be provided that the visual warning is output by means of the arranged in a cockpit of the motor vehicle display element. Thus, the display element is thus arranged in particular in the cockpit of the motor vehicle and not in an area of the interior, which can not be viewed by the vehicle user in the usual direction while driving. It is advantageous that the presentation of the perception of the visual warning can thereby be adapted to the situation of the vehicle user during vehicle guidance.

Die Erfindung betrifft ein Fahrerassistenzsystem für ein Kraftfahrzeug mit zumindest einer Kamera und einem Auswertesystem. Das Fahrerassistenzsystem ist dazu ausgebildet, ein erfindungsgemäßes Verfahren durchzuführen. Das Auswertesystem kann beispielsweise separat von der Kamera ausgebildet sein oder aber in der Kamera integriert sein. The invention relates to a driver assistance system for a motor vehicle with at least one camera and an evaluation system. The driver assistance system is designed to carry out a method according to the invention. The evaluation system may for example be formed separately from the camera or integrated in the camera.

Vorzugsweise ist vorgesehen, dass die Kamera als 3D-Kamera, insbesondere als plenoptische Kamera ausgebildet ist. Durch die 3D-Kamera kann der Fahrzeugnutzer zumindest teilweise dreidimensional erfasst werden. Ein mit der 3D-Kamera aufgenommenes Bild des Fahrzeugnutzers kann beispielsweise dadurch mit einem Tiefenwert versehen werden. Es lässt sich dadurch die Blickrichtung und/oder die Ausrichtung des Kopfs präziser und zuverlässiger bestimmen. Die 3D-Kamera kann beispielsweise als Time-of-Flight(TOF)-Kamera oder aber als plenoptische Kamera ausgebildet sein. Die plenoptische Kamera kann als Lichtfeldkamera beschrieben werden und stellt ein 4D-Lichtfeld von der erfassten Szene, insbesondere von dem Fahrzeugnutzer, bereit. Auch kann durch die 3D-Kamera präzise erkannt werden, ob der Fahrzeugnutzer die Augenverdeckung trägt. It is preferably provided that the camera is designed as a 3D camera, in particular as a plenoptic camera. By the 3D camera, the vehicle user can be at least partially detected in three dimensions. An image of the vehicle user taken with the 3D camera can be provided with a depth value, for example. It can thereby determine the direction of view and / or the orientation of the head more precise and reliable. The 3D camera can be designed, for example, as a time-of-flight (TOF) camera or as a plenoptic camera. The plenoptic camera may be described as a light field camera and provides a 4D light field from the captured scene, particularly from the vehicle user. The 3D camera can also be used to precisely detect whether the vehicle user is wearing the eye mask.

Die Erfindung betrifft auch ein Kraftfahrzeug mit einem erfindungsgemäßen Fahrerassistenzsystem. The invention also relates to a motor vehicle having a driver assistance system according to the invention.

Die mit Bezug auf das erfindungsgemäße Verfahren vorgestellten bevorzugten Ausführungsformen und deren Vorteile gelten entsprechend für das erfindungsgemäße Fahrerassistenzsystem sowie für das erfindungsgemäße Kraftfahrzeug. The preferred embodiments presented with reference to the method according to the invention and their advantages apply correspondingly to the driver assistance system according to the invention and to the motor vehicle according to the invention.

Mit Angaben „oben“, „unten“, „vorne“, „hinten“, „horizontal“, „vertikal“ etc. sind die bei bestimmungsgemäßem Gebrauch und bestimmungsgemäßem Anordnen der Kamera gegebenen Positionen und Orientierungen angegeben. The statements "top", "bottom", "front", "rear", "horizontal", "vertical", etc., indicate the positions and orientations given when the camera was used and used as intended.

Weitere Merkmale der Erfindung ergeben sich aus den Ansprüchen, den Figuren und der Figurenbeschreibung. Die vorstehend in der Beschreibung genannten Merkmale und Merkmalskombinationen sowie die nachfolgend in der Figurenbeschreibung genannten und/oder in den Figuren alleine gezeigten Merkmale und Merkmalskombinationen sind nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Kombinationen oder in Alleinstellung verwendbar, ohne den Rahmen der Erfindung zu verlassen. Es sind somit auch Ausführungen von der Erfindung als umfasst und offenbart anzusehen, die in den Figuren nicht explizit gezeigt und erläutert sind, jedoch durch separierte Merkmalskombinationen aus den erläuterten Ausführungen hervorgehen und erzeugbar sind. Es sind auch Ausführungen und Merkmalskombinationen als offenbart anzusehen, die somit nicht alle Merkmale eines ursprünglich formulierten unabhängigen Anspruchs aufweisen. Further features of the invention will become apparent from the claims, the figures and the description of the figures. The features and feature combinations mentioned above in the description as well as the features and feature combinations mentioned below in the description of the figures and / or in the figures alone can be used not only in the respectively specified combination but also in other combinations or in isolation, without the scope of To leave invention. There are thus also embodiments of the invention as encompassed and disclosed, which are not explicitly shown and explained in the figures, but by separated Feature combinations emerge from the described embodiments and can be generated. Embodiments and combinations of features are also to be regarded as disclosed, which thus do not have all the features of an originally formulated independent claim.

Die Ausführungsbeispiele der Erfindung werden nachfolgend anhand schematischer Zeichnungen näher erläutert. The embodiments of the invention will be explained in more detail with reference to schematic drawings.

Dabei zeigen: Showing:

1 eine schematische Draufsicht auf ein Ausführungsbeispiel eines erfindungsgemäßen Kraftfahrzeugs mit einem Fahrerassistenzsystem; und 1 a schematic plan view of an embodiment of a motor vehicle according to the invention with a driver assistance system; and

2 eine schematische Seitenansicht des erfindungsgemäßen Kraftfahrzeugs mit dem Fahrerassistenzsystem. 2 a schematic side view of the motor vehicle according to the invention with the driver assistance system.

In den Figuren werden gleiche oder funktionsgleiche Elemente mit den gleichen Bezugszeichen versehen. In the figures, identical or functionally identical elements are provided with the same reference numerals.

In 1 ist schematisch ein Kraftfahrzeug 1 mit einem Fahrerassistenzsystem 2 dargestellt. Das Fahrerassistenzsystem 2 umfasst in dem Ausführungsbeispiel ein Anzeigeelement 3, eine Kamera 4 und ein Auswertesystem 5. Das Auswertesystem 5 kann beispielsweise in die Kamera 4 integriert sein oder aber separat zu der Kamera 4 ausgebildet sein. Gemäß dem Ausführungsbeispiel ist die Kamera 4 in einem Innenraum 6 des Kraftfahrzeugs 1 angeordnet. Die Kamera 4 ist vorzugsweise so angeordnet, dass ein Gesicht 7 eines Fahrzeugnutzers 8 erfasst werden kann. Die Kamera 4 kann auch als 3D-Kamera, beispielsweise als plenoptische Kamera, ausgebildet sein. In 1 is schematically a motor vehicle 1 with a driver assistance system 2 shown. The driver assistance system 2 includes in the embodiment a display element 3 , a camera 4 and an evaluation system 5 , The evaluation system 5 For example, in the camera 4 be integrated or separately to the camera 4 be educated. According to the embodiment, the camera 4 in an interior 6 of the motor vehicle 1 arranged. The camera 4 is preferably arranged so that a face 7 a vehicle user 8th can be detected. The camera 4 can also be designed as a 3D camera, for example as a plenoptic camera.

Mittels der Kamera 4 wird eine Blickrichtung 9 des Fahrzeugnutzers 8 erfasst. Die Blickrichtung 9 kann beispielsweise durch eine Hauptausrichtung der Augen des Fahrzeugnutzers 8 beschrieben werden. Anhand der Blickrichtung 9 kann eine Sichtzone 10 des Fahrzeugnutzers bestimmt werden. In der Sichtzone 10 nimmt der Fahrzeugnutzer 8 Informationen wahr. Die Sichtzone 10 entspricht beispielsweise einem Gesichtsfeld. Als das Gesichtsfeld bezeichnet man in der Physiologie und Augenheilkunde alle zentralen und peripheren Punkte und Gegenstände des Außenraums, die bei ruhiger, gerader Kopfhaltung und gerade ausgerichtetem, bewegungslosem Blick visuell wahrgenommen werden können, auch ohne sie direkt zu fixieren. By means of the camera 4 becomes a line of sight 9 of the vehicle user 8th detected. The direction of view 9 For example, by a main orientation of the eyes of the vehicle user 8th to be discribed. Based on the direction of view 9 can be a viewing zone 10 be determined by the vehicle user. In the viewing zone 10 takes the vehicle user 8th Information true. The viewing zone 10 corresponds for example to a field of view. In physiology and ophthalmology, the field of vision refers to all central and peripheral points and objects of the external space that can be visually perceived in a calm, even head posture and a straight-lined, motionless look, even without fixing them directly.

Die Blickrichtung 9 kann beispielsweise durch Verfahren aus den Bereichen des maschinellen Sehens und des maschinellen Lernens bestimmt werden. So kann beispielsweise anhand eines Trainingsdatensatzes von Blickrichtungen, welchen Augen mit bestimmten Pupillenpositionen zugeordnet sind, ein Klassifikator oder mehrere Klassifikatoren erzeugt werden, um das mit der Kamera 4 erfasste Auge des Fahrzeugnutzers 8 hinsichtlich der Blickrichtung 9 zu klassifizieren und dadurch die Richtung des Blicks des Fahrzeugnutzers 8 zu bestimmen. Die Sichtzone 10 erstreckt sich in horizontaler und vertikaler Richtung bezüglich einer Fahrzeugquerebene des Kraftfahrzeugs 1 und ist somit als dreidimensionale Zone ausgebildet. The direction of view 9 can be determined, for example, by methods from the fields of machine vision and machine learning. Thus, for example, based on a training data set of viewing directions, which eyes are associated with specific pupil positions, a classifier or several classifiers are generated, with the camera 4 captured eye of the vehicle user 8th with regard to the viewing direction 9 to classify and thereby the direction of the view of the vehicle user 8th to determine. The viewing zone 10 extends in the horizontal and vertical directions with respect to a vehicle transverse plane of the motor vehicle 1 and is thus formed as a three-dimensional zone.

Das Anzeigeelement 3 ist in dem Innenraum 6 angeordnet. Gemäß dem Ausführungsbeispiel von 1 ist das Anzeigeelement 3 an einem Cockpit 11 des Kraftfahrzeugs 1 angeordnet. Das Anzeigeelement 3 kann beispielsweise als Warnleuchte und/oder Kontrollleuchte des Kraftfahrzeugs 1 ausgebildet sein. So kann durch das Anzeigeelement 3 beispielsweise auch ein Beleuchtungselement auf einem Armaturenbrett 12 des Kraftfahrzeugs 1 von dem Anzeigeelement 3 umfasst sein. The display element 3 is in the interior 6 arranged. According to the embodiment of 1 is the display element 3 at a cockpit 11 of the motor vehicle 1 arranged. The display element 3 can, for example, as a warning light and / or indicator light of the motor vehicle 1 be educated. So can through the display element 3 For example, a lighting element on a dashboard 12 of the motor vehicle 1 from the display element 3 includes his.

Weiterhin weist das Kraftfahrzeug 1 eine Innenraumbeleuchtung 13 auf. Die Innenraumbeleuchtung 13 kann beispielsweise Soffittenlampen und/oder Leuchtdioden (LEDs) umfassen. Durch die Innenraumbeleuchtung 13 wird insbesondere der Innenraum 6 zumindest teilweise ausgeleuchtet. Furthermore, the motor vehicle 1 an interior lighting 13 on. The interior lighting 13 For example, it may comprise festoon lamps and / or light-emitting diodes (LEDs). Through the interior lighting 13 especially the interior 6 at least partially illuminated.

Das erfindungsgemäße Verfahren läuft nun beispielsweise wie folgt ab. Es wird ein visueller Warnhinweis an einer vorbestimmten Position 14 innerhalb des Kraftfahrzeugs 1 mittels des in dem Innenraum 6 angeordneten Anzeigeelements 3 ausgegeben. Der visuelle Warnhinweis kann beispielsweise auf einen Ölstand des Kraftfahrzeugs 1 bezogen sein. Durch die vorbestimmte Position 14 ist bekannt, an welcher Stelle in dem Innenraum 6 des Kraftfahrzeugs 1 der visuelle Warnhinweis ausgegeben wird. Nun wird anhand der mit der Kamera 4 erfassten Blickrichtung 9 die Sichtzone 10 bestimmt. Weiterhin wird überprüft, ob der visuelle Warnhinweis innerhalb der Sichtzone 10 liegt. Liegt der visuelle Warnhinweis innerhalb der Sichtzone 10, so wird der visuelle Warnhinweis von dem Auswertesystem 5 als von dem Fahrzeugnutzer 8 als erkannt angenommen. Es wird also von dem Auswertesystem 5 davon ausgegangen, das der Fahrzeugnutzer 8 den visuellen Warnhinweis wahrgenommen hat. Für den Fall, dass der visuelle Warnhinweis außerhalb der Sichtzone 10 liegt, wird der visuelle Warnhinweis von dem Auswertesystem 5 als von dem Fahrzeugnutzer 8 als nicht erkannt angenommen. In diesem Fall wird dann ein Aufmerksamkeitserhöhungssignal 15 in dem Kraftfahrzeug 1 für den Fahrzeugnutzer 8 erzeugt. Durch das Aufmerksamkeitserhöhungssignal 15 wird der Fahrzeugnutzer 8 auf das Vorhandensein des visuellen Warnhinweises nachdrücklich aufmerksam gemacht. The process according to the invention now proceeds as follows, for example. It becomes a visual warning at a predetermined position 14 within the motor vehicle 1 by means of in the interior 6 arranged display element 3 output. The visual warning can, for example, an oil level of the motor vehicle 1 be related. By the predetermined position 14 is known at which point in the interior 6 of the motor vehicle 1 the visual warning is issued. Now it will be with the camera 4 recorded line of sight 9 the viewing zone 10 certainly. It also checks if the visual warning is within the viewing zone 10 lies. Is the visual warning within the viewing zone? 10 , so the visual warning from the evaluation system 5 as by the vehicle user 8th accepted as recognized. So it is from the evaluation system 5 assumed that the vehicle user 8th perceived the visual warning. In the event that the visual warning is outside the viewing zone 10 is the visual warning from the evaluation system 5 as by the vehicle user 8th assumed not recognized. In this case, then becomes an attention-increasing signal 15 in the motor vehicle 1 for the vehicle user 8th generated. By the attention-increasing signal 15 becomes the vehicle user 8th on the presence the visual warning.

Das Aufmerksamkeitserhöhungssignal 15 kann dabei beispielsweise visuell und/oder akustisch und/oder haptisch ausgegeben werden. So kann das Aufmerksamkeitserhöhungssignal 15 beispielsweise über ein Audiosystem des Kraftfahrzeugs 1 ausgegeben werden. Ergänzend oder alternativ kann das Aufmerksamkeitserhöhungssignal 15 beispielsweise auch mittels der Innenraumbeleuchtung 13 ausgegeben werden. So kann ein visuelles Warnsignal, welches mittels der Innenraumbeleuchtung 13 als das Aufmerksamkeitserhöhungssignal 15 ausgegeben wird, dadurch charakterisiert sein, dass ein Farbton und/oder eine Helligkeit des visuellen Warnsignals geändert wird. So kann der Fahrzeugnutzer 8 beispielsweise durch einen Farbtonwechsel der Innenraumbeleuchtung 13 von Weiß auf Rot darauf hingewiesen werden, dass der visuelle Warnhinweis ausgegeben wird. Der Fahrzeugnutzer 8 kann sodann seine Blickrichtung 9 ändern und nach dem visuellen Warnhinweis innerhalb des Innenraums 6 suchen. Bei dem akustischen Aufmerksamkeitserhöhungssignal 15 kann beispielsweise auch eine Textmeldung ausgegeben werden, welche den Warnhinweis in Worten beschreibt und/oder beschreibt, an welcher Stelle des Innenraums 6 sich das Anzeigeelement 3 befindet und somit wo sich die vorbestimmte Position 14 befindet. Ergänzend oder alternativ wird eine Sicherheitsrelevanz des visuellen Warnhinweises bestimmt. Dadurch wird bestimmt, wie wichtig beziehungsweise bedeutend der visuelle Warnhinweis für den Fahrzeugnutzer 8 beziehungsweise für die Sicherheit des Kraftfahrzeugs 1 ist. Abhängig von der Sicherheitsrelevanz wird dann der Farbton des Aufmerksamkeitserhöhungssignals 15 eingestellt. So kann beispielsweise bei einem weniger bedeutenden visuellen Warnhinweis ein grüner Farbton ausgegeben werden, während bei einem sehr bedeutenden visuellen Warnhinweis ein roter Farbton des Aufmerksamkeitserhöhungssignals 15 ausgegeben werden kann. The attention-increasing signal 15 can be issued, for example, visually and / or acoustically and / or haptically. So can the attention-increasing signal 15 for example via an audio system of the motor vehicle 1 be issued. Additionally or alternatively, the attention increase signal 15 for example, by means of the interior lighting 13 be issued. So can a visual warning signal, which means the interior lighting 13 as the attention-increasing signal 15 is outputted, characterized in that a hue and / or a brightness of the visual warning signal is changed. So can the vehicle user 8th for example, by a change in color of the interior lighting 13 from white to red, it should be noted that the visual warning is issued. The vehicle user 8th can then his line of sight 9 change and after the visual warning inside the interior 6 search. In the acoustic attention-increasing signal 15 For example, a text message can also be output which describes the warning in words and / or describes at which point in the interior 6 itself the display element 3 and thus where is the predetermined position 14 located. Additionally or alternatively, a safety relevance of the visual warning is determined. This determines how important or significant the visual warning is for the vehicle user 8th or for the safety of the motor vehicle 1 is. Depending on the safety relevance then the hue of the attention increase signal 15 set. For example, with a less significant visual alert, a green hue may be output, while with a very significant visual alert, a red hue of the attention enhancement signal 15 can be issued.

Darüber hinaus kann beispielsweise auch eine Geschwindigkeit des Kraftfahrzeugs 1 abhängig von dem Erzeugen des Aufmerksamkeitserhöhungssignals 15 angepasst werden. Wird beispielsweise festgestellt, dass der visuelle Warnhinweis nicht innerhalb der Sichtzone 10 liegt und dadurch das Überschreiten einer aktuell geltenden Geschwindigkeitsbegrenzung unerkannt bleibt, so kann beispielsweise die Geschwindigkeit des Kraftfahrzeugs 1 angepasst werden. Das Aufmerksamkeitserhöhungssignal 15 kann dann beispielsweise auch als Steuersignal vorliegen, durch welches die Geschwindigkeit des Kraftfahrzeugs 1 angepasst wird. In addition, for example, a speed of the motor vehicle 1 depending on the generation of the attention-increasing signal 15 be adjusted. For example, it is determined that the visual warning is not within the viewing zone 10 If, for example, the speed limit of the motor vehicle remains undetected, and thus the exceeding of a currently valid speed limit remains unrecognized 1 be adjusted. The attention-increasing signal 15 can then be present, for example, as a control signal by which the speed of the motor vehicle 1 is adjusted.

Weiterhin wird der Fahrzeugnutzer 8 vorzugsweise auf das Tragen einer Augenverdeckung hin überprüft. Dies kann beispielsweise nur dann durchgeführt werden, falls das Erfassen der Blickrichtung 9 des Fahrzeugnutzers 8 fehlschlägt. Wird das Tragen der Augenverdeckung dann beispielsweise bei dem Fahrzeugnutzer 8 erkannt, so kann anstatt der Blickrichtung 9 eine Ausrichtung eines Kopfs 16 des Fahrzeugnutzers 8 bestimmt werden. Anhand der Ausrichtung des Kopfs 16 kann dann wiederum die Sichtzone 10 bestimmt werden und es kann überprüft werden, ob der visuelle Warnhinweis innerhalb der Sichtzone 10 liegt oder nicht. Die Augenverdeckung kann dabei beispielsweise als Sonnenbrille ausgebildet sein. Furthermore, the vehicle user 8th preferably checked for wearing eye seal. This can be done, for example, only if the detection of the viewing direction 9 of the vehicle user 8th fails. If the wearing of the eye mask then, for example, the vehicle user 8th recognized, so instead of the line of sight 9 an alignment of a head 16 of the vehicle user 8th be determined. Based on the orientation of the head 16 can then turn the viewing zone 10 be determined and it can be checked if the visual warning within the viewing zone 10 is or not. The eye cover can be designed, for example, as sunglasses.

2 zeigt einen Teil des Kraftfahrzeugs 1 in einer seitlichen Schnittdarstellung. Gezeigt ist der Fahrzeugnutzer 8 in einer seitlichen Darstellung mit der in einen Umgebungsbereich des Kraftfahrzeugs 1 gerichteten Blickrichtung 9. Die Blickrichtung 9 wird umgeben von der Sichtzone 10. Außerhalb der Sichtzone 10 ist das Anzeigeelement 3 angeordnet. Der Fahrzeugnutzer 8 nimmt den visuellen Warnhinweis, welcher durch das Anzeigeelement 3 ausgegeben wird, also gemäß dem Ausführungsbeispiel von 2 aus Sicht des Auswertesystems 5 nicht wahr. So wird als Folge beispielsweise das Aufmerksamkeitserhöhungssignal 15 durch die Innenraumbeleuchtung 13 erzeugt und ausgegeben. Durch das Aufmerksamkeitserhöhungssignal 15 wird der Fahrzeugnutzer 8 darauf hingewiesen, dass sich insbesondere im Bereich des Cockpits 11 und/oder des Armaturenbretts 12 der visuelle Warnhinweis befindet. 2 shows a part of the motor vehicle 1 in a lateral sectional view. Shown is the vehicle user 8th in a side view with the in a surrounding area of the motor vehicle 1 directed line of sight 9 , The direction of view 9 is surrounded by the viewing zone 10 , Outside the viewing zone 10 is the display element 3 arranged. The vehicle user 8th takes the visual warning, which passes through the display element 3 is output, ie according to the embodiment of 2 from the point of view of the evaluation system 5 Is not it. For example, as a result, the attention-increasing signal becomes 15 through the interior lighting 13 generated and output. By the attention-increasing signal 15 becomes the vehicle user 8th noted that especially in the area of the cockpit 11 and / or the dashboard 12 the visual warning is located.

So kann es beispielsweise vorkommen, dass der Fahrzeugnutzer 8 in Richtung der Sonne mit dem Kraftfahrzeug 1 fährt und deshalb durch die Sonneneinstrahlung von dem visuellen Warnhinweis abgelenkt wird. Durch die Sonneneinstrahlung kann es schwieriger sein, den visuellen Warnhinweis wahrzunehmen. Die Sichtzone 10 kann sich also somit im Fall der Blendung durch Sonnenstrahlung und/oder extremer Helligkeit verändern, insbesondere verkleinern im Vergleich zu dem Fall ohne die Sonneneinstrahlung und/oder dem Vorhandensein der extremen Helligkeit. Es kann somit möglich sein, dass der visuelle Warnhinweis ohne die störende Sonneneinstrahlung innerhalb der Sichtzone 10 liegt und somit von dem Fahrzeugnutzer 8 erkannt wird, aber bei Vorhandensein der störenden Sonneneinstrahlung der visuelle Warnhinweis außerhalb der Sichtzone 10 liegt, obwohl die Blickrichtung 9 des Fahrzeugnutzers 8 beibehalten wird. For example, it may happen that the vehicle user 8th in the direction of the sun with the motor vehicle 1 moves and therefore is deflected by the sunlight from the visual warning. Sun exposure can make it harder to see the visual warning. The viewing zone 10 Thus, in the case of glare due to solar radiation and / or extreme brightness, it may thus change, in particular reduce, compared to the case without the solar radiation and / or the presence of the extreme brightness. It may thus be possible for the visual warning to be displayed without the disturbing solar radiation within the viewing zone 10 lies and therefore by the vehicle user 8th is detected, but in the presence of disturbing solar radiation, the visual warning outside the viewing zone 10 lies, although the line of sight 9 of the vehicle user 8th is maintained.

Weiterhin kann es vorgesehen sein, dass eine Helligkeit in dem Kraftfahrzeug 1 gemessen wird und, falls die Helligkeit einen Helligkeitsgrenzwert überschreitet, das Aufmerksamkeitserhöhungssignal 15 ergänzend oder anstatt der visuellen Ausgabe akustisch ausgegeben wird. Die akustische Ausgabe kann dann, wie bereits erwähnt, über ein Audiosystem des Kraftfahrzeugs 1 erfolgen. Furthermore, it can be provided that a brightness in the motor vehicle 1 is measured and, if the brightness exceeds a brightness threshold, the attention increase signal 15 in addition or instead of the visual output is output acoustically. The acoustic output can then, as already mentioned, via an audio system of the motor vehicle 1 respectively.

Claims (14)

Verfahren zum Überprüfen einer Wahrnehmung eines visuellen Warnhinweises in einem Kraftfahrzeug (1) an einen Fahrzeugnutzer (8) des Kraftfahrzeugs (1) durch den Fahrzeugnutzer (8), bei welchem folgende Schritte durchgeführt werden: – Ausgeben des visuellen Warnhinweises an einer vorbestimmten Position (14) innerhalb des Kraftfahrzeugs (1) mittels eines in einem Innenraum (6) des Kraftfahrzeugs (1) angeordneten Anzeigeelements (3) des Kraftfahrzeugs (1); – Erfassen einer Blickrichtung (9) des Fahrzeugnutzers (8) mittels zumindest einer Kamera (4) des Kraftfahrzeugs (1); – Bestimmen einer Sichtzone (10) des Fahrzeugnutzers (8), in welcher der Fahrzeugnutzer (8) Information wahrnimmt, anhand der Blickrichtung (9); – Überprüfen, ob der visuelle Warnhinweis innerhalb der Sichtzone (10) liegt; wobei – der visuelle Warnhinweis von einem Auswertesystem (5) des Kraftfahrzeugs (1) als von dem Fahrzeugnutzer (8) als erkannt angenommen wird, wenn der visuelle Warnhinweis innerhalb der Sichtzone (10) liegt. Method for checking a perception of a visual warning in a motor vehicle ( 1 ) to a vehicle user ( 8th ) of the motor vehicle ( 1 ) by the vehicle user ( 8th ), in which the following steps are carried out: issuing the visual warning at a predetermined position ( 14 ) within the motor vehicle ( 1 ) by means of an interior ( 6 ) of the motor vehicle ( 1 ) arranged display element ( 3 ) of the motor vehicle ( 1 ); - detecting a line of sight ( 9 ) of the vehicle user ( 8th ) by means of at least one camera ( 4 ) of the motor vehicle ( 1 ); - determining a viewing zone ( 10 ) of the vehicle user ( 8th ) in which the vehicle user ( 8th ) Perceives information based on the viewing direction ( 9 ); - Check whether the visual warning within the viewing zone ( 10 ) lies; where - the visual warning from an evaluation system ( 5 ) of the motor vehicle ( 1 ) than by the vehicle user ( 8th ) is assumed to be recognized when the visual warning within the viewing zone ( 10 ) lies. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass der visuelle Warnhinweis von dem Auswertesystem (5) als von dem Fahrzeugnutzer (8) als nicht erkannt angenommen wird, wenn der visuelle Warnhinweis außerhalb der Sichtzone (10) liegt, wobei dann ein Aufmerksamkeitserhöhungssignal (15) in dem Kraftfahrzeug (1) für den Fahrzeugnutzer (8) erzeugt wird. A method according to claim 1, characterized in that the visual warning from the evaluation system ( 5 ) than by the vehicle user ( 8th ) is assumed to be unrecognized if the visual warning is outside the viewing zone ( 10 ), in which case an attention-increasing signal ( 15 ) in the motor vehicle ( 1 ) for the vehicle user ( 8th ) is produced. Verfahren nach Anspruch 2, dadurch gekennzeichnet, dass das Aufmerksamkeitserhöhungssignal (15) visuell und/oder akustisch und/oder haptisch ausgegeben wird. Method according to Claim 2, characterized in that the attention- increasing signal ( 15 ) is output visually and / or acoustically and / or haptically. Verfahren nach Anspruch 3, dadurch gekennzeichnet, dass als das Aufmerksamkeitserhöhungssignal (15) ein visuelles Warnsignal mittels einer Innenraumbeleuchtung (13) des Kraftfahrzeugs (1) ausgegeben wird. Method according to claim 3, characterized in that as the attention- increasing signal ( 15 ) a visual warning signal by means of an interior lighting ( 13 ) of the motor vehicle ( 1 ) is output. Verfahren nach Anspruch 4, dadurch gekennzeichnet, dass das visuelle Warnsignal (15) im Farbton geändert wird und/oder in der Helligkeit geändert wird. Method according to claim 4, characterized in that the visual warning signal ( 15 ) is changed in hue and / or changed in brightness. Verfahren nach Anspruch 5, dadurch gekennzeichnet, dass eine Sicherheitsrelevanz des visuellen Warnhinweises bestimmt wird, und der Farbton des visuellen Warnsignals (15) abhängig von der Sicherheitsrelevanz eingestellt wird. A method according to claim 5, characterized in that a security relevance of the visual warning is determined, and the hue of the visual warning signal ( 15 ) is set depending on the safety relevance. Verfahren nach einem der Ansprüche 2 bis 6, dadurch gekennzeichnet, dass abhängig von dem Erzeugen des Aufmerksamkeitserhöhungssignals (15) eine Geschwindigkeit des Kraftfahrzeugs (1) angepasst wird. Method according to one of Claims 2 to 6, characterized in that, depending on the generation of the attention- increasing signal ( 15 ) a speed of the motor vehicle ( 1 ) is adjusted. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der Fahrzeugnutzer (8) auf das Tragen einer Augenverdeckung hin überprüft wird, insbesondere nur falls das Erfassen der Blickrichtung (9) des Fahrzeugnutzers (8) fehlschlägt. Method according to one of the preceding claims, characterized in that the vehicle user ( 8th ) is checked for the wearing of an eye concealment, in particular only if the detection of the viewing direction ( 9 ) of the vehicle user ( 8th ) fails. Verfahren nach Anspruch 8, dadurch gekennzeichnet, dass falls bei dem Fahrzeugnutzer (8) das Tragen der Augenverdeckung erkannt wird, anstatt der Blickrichtung (9) eine Ausrichtung des Kopfs (16) des Fahrzugnutzers (8) mittels der Kamera (4) erfasst wird, und die Sichtzone (10) anhand der Ausrichtung des Kopfs (16) bestimmt wird, und überprüft wird, ob der visuelle Warnhinweis innerhalb der Sichtzone (10) liegt, wobei der visuelle Warnhinweis von dem Auswertesystem (5) des Kraftfahrzeugs (1) als von dem Fahrzeugnutzer (8) als erkannt angenommen wird, wenn der visuelle Warnhinweis innerhalb der Sichtzone (10) liegt. A method according to claim 8, characterized in that if the vehicle user ( 8th ) the wearing of the eye mask is recognized, instead of the line of vision ( 9 ) an alignment of the head ( 16 ) of the vehicle user ( 8th ) by means of the camera ( 4 ), and the visual zone ( 10 ) based on the orientation of the head ( 16 ) is checked, and it is checked whether the visual warning within the visual zone ( 10 ), whereby the visual warning from the evaluation system ( 5 ) of the motor vehicle ( 1 ) than by the vehicle user ( 8th ) is assumed to be recognized when the visual warning within the viewing zone ( 10 ) lies. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der visuelle Warnhinweis durch eine Warnleuchte als das Anzeigeelement (3) ausgegeben wird. Method according to one of the preceding claims, characterized in that the visual warning by a warning light as the display element ( 3 ) is output. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass der visuelle Warnhinweis mittels des in einem Cockpit (11) des Kraftfahrzeugs (1) angeordneten Anzeigeelements (3) ausgegeben wird. Method according to one of the preceding claims, characterized in that the visual warning by means of in a cockpit ( 11 ) of the motor vehicle ( 1 ) arranged display element ( 3 ) is output. Fahrerassistenzsystem (2) mit zumindest einer Kamera (4) und einem Auswertesystem (5), welches dazu ausgebildet ist, ein Verfahren nach einem der vorhergehenden Ansprüche durchzuführen. Driver assistance system ( 2 ) with at least one camera ( 4 ) and an evaluation system ( 5 ), which is adapted to carry out a method according to one of the preceding claims. Fahrerassistenzsystem (2) nach Anspruch 12, dadurch gekennzeichnet, dass die Kamera (4) als 3D-Kamera, insbesondere als plenoptische Kamera, ausgebildet ist. Driver assistance system ( 2 ) according to claim 12, characterized in that the camera ( 4 ) is designed as a 3D camera, in particular as a plenoptic camera. Kraftfahrzeug (1) mit einem Fahrerassistenzsystem (2) nach Anspruch 12 oder 13. Motor vehicle ( 1 ) with a driver assistance system ( 2 ) according to claim 12 or 13.
DE102015117610.6A 2015-10-16 2015-10-16 A method for checking a perception of a visual warning by a vehicle user, driver assistance system and motor vehicle Withdrawn DE102015117610A1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
DE102015117610.6A DE102015117610A1 (en) 2015-10-16 2015-10-16 A method for checking a perception of a visual warning by a vehicle user, driver assistance system and motor vehicle
EP16775221.1A EP3362308A1 (en) 2015-10-16 2016-09-29 Method for examining a perception of a visual warning notice by a vehicle user, driver assistance system and motor vehicle
PCT/EP2016/073223 WO2017063892A1 (en) 2015-10-16 2016-09-29 Method for examining a perception of a visual warning notice by a vehicle user, driver assistance system and motor vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102015117610.6A DE102015117610A1 (en) 2015-10-16 2015-10-16 A method for checking a perception of a visual warning by a vehicle user, driver assistance system and motor vehicle

Publications (1)

Publication Number Publication Date
DE102015117610A1 true DE102015117610A1 (en) 2017-04-20

Family

ID=57047223

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102015117610.6A Withdrawn DE102015117610A1 (en) 2015-10-16 2015-10-16 A method for checking a perception of a visual warning by a vehicle user, driver assistance system and motor vehicle

Country Status (3)

Country Link
EP (1) EP3362308A1 (en)
DE (1) DE102015117610A1 (en)
WO (1) WO2017063892A1 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102017118365A1 (en) * 2017-08-11 2019-02-14 Valeo Schalter Und Sensoren Gmbh Head-up display with several optional filters for one vehicle
WO2019029966A1 (en) * 2017-08-07 2019-02-14 Bayerische Motoren Werke Aktiengesellschaft Method and device for driver state evaluation and vehicle
DE102017130628A1 (en) 2017-12-20 2019-07-11 Autoliv Development Ab System, method and computer program product for increasing driving safety in traffic

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102018213230A1 (en) * 2018-08-07 2020-02-13 Volkswagen Aktiengesellschaft Method and control device for warning a driver of a motor vehicle and motor vehicle with such a control device

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19921488A1 (en) * 1999-05-08 2000-11-16 Bosch Gmbh Robert Method and device for monitoring the interior and surroundings of a vehicle
DE112009004768T5 (en) * 2009-05-12 2012-10-11 Toyota Jidosha Kabushiki Kaisha ASSESSMENT DEVICE FOR THE VISUAL DETECTION AREA AND DRIVE SUPPORT DEVICE
DE102013206739A1 (en) * 2013-04-16 2014-10-16 Bayerische Motoren Werke Aktiengesellschaft Method for determining whether an occupant of a vehicle notices relevant objects in the vicinity of the vehicle

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5821859B2 (en) * 2013-01-18 2015-11-24 株式会社デンソー Display system

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19921488A1 (en) * 1999-05-08 2000-11-16 Bosch Gmbh Robert Method and device for monitoring the interior and surroundings of a vehicle
DE112009004768T5 (en) * 2009-05-12 2012-10-11 Toyota Jidosha Kabushiki Kaisha ASSESSMENT DEVICE FOR THE VISUAL DETECTION AREA AND DRIVE SUPPORT DEVICE
DE102013206739A1 (en) * 2013-04-16 2014-10-16 Bayerische Motoren Werke Aktiengesellschaft Method for determining whether an occupant of a vehicle notices relevant objects in the vicinity of the vehicle

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019029966A1 (en) * 2017-08-07 2019-02-14 Bayerische Motoren Werke Aktiengesellschaft Method and device for driver state evaluation and vehicle
CN110691726A (en) * 2017-08-07 2020-01-14 宝马股份公司 Method and device for evaluating the state of a driver, and vehicle
US11628845B2 (en) 2017-08-07 2023-04-18 Bayerische Motoren Werke Aktiengesellschaft Method and device for driver state evaluation and vehicle
DE102017118365A1 (en) * 2017-08-11 2019-02-14 Valeo Schalter Und Sensoren Gmbh Head-up display with several optional filters for one vehicle
DE102017118365B4 (en) 2017-08-11 2019-09-19 Valeo Schalter Und Sensoren Gmbh Head-up display with several optional filters for one vehicle
DE102017130628A1 (en) 2017-12-20 2019-07-11 Autoliv Development Ab System, method and computer program product for increasing driving safety in traffic

Also Published As

Publication number Publication date
WO2017063892A1 (en) 2017-04-20
EP3362308A1 (en) 2018-08-22

Similar Documents

Publication Publication Date Title
EP3452317B1 (en) Method for improving light conditions from the point of view of a driver of a motor vehicle
DE102017214353B4 (en) DRIVER CONDITION DETECTION SYSTEM, DRIVER CONDITION DETECTION METHOD AND VEHICLE CONTAINING THE SAME
DE102016111783B4 (en) Display device for superimposing a virtual image in the field of view of a user
EP2986225B1 (en) Method for determining if a vehicle occupant is aware of relevant objects in the surroundings of the vehicle
DE102017103282A1 (en) DISPLAY CONTROL FOR ONE VEHICLE
DE102019208663B4 (en) Method for supporting a driver with regard to objects and motor vehicle relevant to a traffic situation
DE102017103287A1 (en) DISPLAY CONTROL FOR ONE VEHICLE
DE102012022691A1 (en) Object representation on head-up displays depending on a user's view
EP1617371A2 (en) Method for marking information in a displayed night vision image being captured by a vehicle-mounted image recording device and night vision device therefor
DE102016001204B4 (en) Motor vehicle
AT519767B1 (en) METHOD AND SYSTEM FOR CONTROLLING OR BZW. FOR TRAINING THE DRIVING BEHAVIOR OF A DRIVER BY HIS VISION
DE102015117610A1 (en) A method for checking a perception of a visual warning by a vehicle user, driver assistance system and motor vehicle
DE102015219111A1 (en) Driver assistance system and method for adjusting the illumination of controls on motor vehicles
DE102014201036A1 (en) Image-based classification of driver status and / or driver behavior
DE112018007715B4 (en) VEHICLE ON-BOARD DISPLAY CONTROL DEVICE
DE102014224484A1 (en) Method for adapting the external appearance of a motor vehicle and motor vehicle with an adaptable external appearance
DE202013006467U1 (en) Vehicle environment monitoring system
DE102020127764A1 (en) VEHICLE DISPLAY IMPROVEMENT
DE102017119834A1 (en) A method for assisting a driver of a motor vehicle in a turn, driver assistance system and motor vehicle
DE112019007195T5 (en) DISPLAY CONTROL DEVICE, DISPLAY CONTROL METHOD AND DISPLAY CONTROL PROGRAM
DE102012200762A1 (en) Method for signaling traffic condition in environment of vehicle, involves recording surrounding area of vehicle using sensor, and indicating recognized sensitive object on display arranged in rear view mirror housing of vehicle
EP3162635A1 (en) Camera-based display system
WO2022128652A1 (en) Device for avoiding or reducing kinetosis
DE102020210055A1 (en) Method and device for monitoring the interior of a vehicle
DE102016011246A1 (en) A method of monitoring a condition of at least one occupant of a vehicle

Legal Events

Date Code Title Description
R163 Identified publications notified
R005 Application deemed withdrawn due to failure to request examination