DE10339314B3 - Verfahren zur Anzeigesteuerung von unterschiedlichen Informationen in einem Fahrzeug und optoakustische Informationseinheit - Google Patents

Verfahren zur Anzeigesteuerung von unterschiedlichen Informationen in einem Fahrzeug und optoakustische Informationseinheit Download PDF

Info

Publication number
DE10339314B3
DE10339314B3 DE10339314A DE10339314A DE10339314B3 DE 10339314 B3 DE10339314 B3 DE 10339314B3 DE 10339314 A DE10339314 A DE 10339314A DE 10339314 A DE10339314 A DE 10339314A DE 10339314 B3 DE10339314 B3 DE 10339314B3
Authority
DE
Germany
Prior art keywords
driver
dual
drv
display
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
DE10339314A
Other languages
English (en)
Inventor
Bernd Dipl.-Ing. Duckstein
David Dipl.-Ing. Przewozny
Siegmund Dr.-Ing. Pastoor
Hans Dipl.-Ing. Röder
Klaus Dipl.-Ing. Schenke
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Original Assignee
Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV filed Critical Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Priority to DE10339314A priority Critical patent/DE10339314B3/de
Priority to EP04786169A priority patent/EP1658191B1/de
Priority to PCT/DE2004/001870 priority patent/WO2005021314A1/de
Priority to DE502004007688T priority patent/DE502004007688D1/de
Priority to US10/569,933 priority patent/US20090040196A1/en
Priority to AT04786169T priority patent/ATE402037T1/de
Application granted granted Critical
Publication of DE10339314B3 publication Critical patent/DE10339314B3/de
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/26—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using acoustic output
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60—Instruments characterised by their location or relative disposition in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • B60K35/654—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the user being the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/65—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive
    • B60K35/656—Instruments specially adapted for specific vehicle types or users, e.g. for left- or right-hand drive the user being a passenger
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80—Arrangements for controlling instruments
    • B60K35/81—Arrangements for controlling instruments for controlling displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143—Touch sensitive instrument input devices
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143—Touch sensitive instrument input devices
    • B60K2360/1438—Touch screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149—Instrument input by detecting viewing direction not otherwise provided for
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/1526—Dual-view displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/21—Optical features of instruments using cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Instrument Panels (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

Derartige Informationseinheiten werden zur Darstellung von Navigations- und Mediendaten in modernen Fahrzeugen eingesetzt und sind aus der Praxis vor allem mit getrennten Displays, aber auch mit Dual-View-Displays, auf denen die Informationen zeitlich alternativ angezeigt werden, bekannt. Die Anzeigesteuerung erfolgt dort manuell, was sich negativ auf den Komfort für den Fahrer und die Fahrsicherheit auswirkt. Bei dem erfindungsgemäßen Verfahren wird deshalb automatisch die aktuelle Blickrichtung des Fahrers (DRV) fortlaufend detektiert und die für den Fahrer fahrtrelevanten Informationen (NAV) nur dann nahezu verzögerungsfrei angezeigt, wenn der Fahrer (DRV) Blickkontakt mit dem Dual-View-Display (DISP) hat, wohingegen in den Intervallen ohne Blickkontakt alternativ fahrtunrelevante Informationen (MEDIA) angezeigt werden können, wobei die aktuelle Blickrichtung durch eine videobasierte Detektion der Kopfdrehung und/oder Augenbewegung des Fahrers (DRV) auf der Basis eines statischen oder dynamischen Detektionsverfahrens ermittelt und in der Auswertung nur eine binäre Entscheidung (THR) getroffen wird, ob der Fahrer (DRV) das Dual-View-Display (DISP) aktuelle anblickt oder nicht. Es können handelsübliche Displays in Verbindung mit Videokameras (CAM) und einer vereinfachten Software verwendet werden.

Description

  • Die Erfindung bezieht sich auf ein Verfahren zur Anzeigesteuerung von unterschiedlichen Informationen auf einem gemeinsamen Dual-View-Display durch den Fahrer während der Fahrt in einem Fahrzeug, wobei auch ein möglicher Beifahrer das Dual-View-Display betrachten kann, und auf eine optoakustische Informationseinheit in einem Fahrzeug zur Anzeige unterschiedlicher Informationen auf einem Dual-View-Display mit einer Programmeinheit und einer Anzeigesteuereinheit, insbesondere zur Durchführung des Verfahrens.
  • Derartige optoakustische Informationseinheiten werden beispielsweise für eine Darstellung von Fahrzeugführungs- und Zustandsinformationen (Navigationsdisplay zur Darstellung fahrtrelevanter Daten, wie Straßenkarte, Verkehrsinformationen, und Zielführungsinformationen, Betriebsdaten über das Fahrzeug, wie Geschwindigkeit und Motortemperatur) sowie zur Darstellung von Fernsehbildern (Mediendisplay zur Darstellung fahrtunrelevanter Daten, beispielsweise Videofilme, TV-Übertragungen, Internetseiten) in modernen Autos eingesetzt und sind aus der Praxis in verschiedenen Ausführungsformen bekannt. Dabei werden auch unterschiedliche Verfahren zur Steuerung der Anzeige auf dem Display als wesentlicher Teil der optoakustischen Informa tionseinheit angewendet, die sich hauptsächlich in ihrem Komfort für den Fahrer als Hauptanwender unterscheiden. Wenn auch im Folgenden oft von der Anwendung im Auto oder allgemeiner im Verkehrsgeschehen auf dem Lande ausgegangen wird, beziehen sich die Ausführungen auch genauso auf Fahrzeuge für das Verkehrsgeschehen auf und in dem Wasser und in der Luft. Überall dort, wo mit einem Fahrzeug ein Weg gefunden und über das Fahrzeug Informationen eingeholt sowie Passagiere transportiert werden müssen, sind derartige Informationseinheiten zur Komfortsteigerung des Fahrers und seiner Beifahrer einsetzbar. Am häufigsten werden derzeit jedoch noch separate Displays für die Navigationsanzeige und die Medienwiedergabe verwendet. Die Mediendisplays für die Passagiere im Fond werden beispielsweise in die Kopfstützen der Vordersitze eingebaut, aus dem Wagendach herunter geklappt oder mit Hilfe eines flexiblen Tragarmes als Satellit ausgeführt. Für den Beifahrer wird das Display entweder ausklappbar im Bereich der Sonnenblende oder ausfahrbar in die Instrumentenkonsole eingebaut, wobei das Risiko besteht, dass das freie Sichtfeld des Fahrers eingeschränkt wird und der Fahrer ungewollt durch die Medienwiedergabe abgelenkt wird. Das Navigationsdisplay wird üblicherweise in die Mittelkonsole eingebaut oder unterhalb des Rückspiegels auf die Instrumentenkonsole gesetzt (diese Lösung wird oft bei nachrüstbaren Systemen angeboten).
  • Ein gänzlich anderer Ausführungsweg besteht darin, ein gemeinsames Display für die zeitlich alternative (selektive) Navigations- und Medienanzeige zu verwenden (Dual-View-Display, zu unterscheiden von der Bezeichnung „Dual-View" für Multimediapräsentationen im Split-Screen- oder Picture-in-Picture-Modus), welches durch zusätzliche optische und/oder elektrische Komponenten eine selektive Wiedergabe der beiden Informationsquellen in Richtung auf den Fahrer bzw. den Beifahrer gestattet. Dabei handelt es sich in der einfachsten Form um einen manuellen Umschalter in einem Adapterkabel, mit dem zwischen den unterschiedlichen Informationen hin- und hergeschaltet werden kann. Als Variante sind auch bereits Informationseinheiten bekannt, die fahrtunrelevante Daten ausschließlich im Stillstand des Fahrzeugs anzeigen und während der Fahrt nur den gegebenenfalls vorhandenen Ton weiterlaufen lassen, was entsprechend unkomfortabel für den Beifahrer ist.
  • Aus der DE 197 37 942 A1 ist eine fest im Armaturenbrett eines Kraftfahrzeugs eingebaute Informationseinheit bekannt, bei der das Dual-View-Display ein Flüssigkristallelement aufweist, das in einer ersten Schaltstellung in einem großen Winkelbereich lichtdurchlässig und in einer zweiten Schaltstellung außerhalb eines kleinen Winkelbereichs lichtundurchlässig ist. Dabei ist der große Winkelbereich auf Fahrer und Beifahrer, der kleine Winkelbereich aber nur auf den Beifahrer ausgerichtet. In dem kleinen Winkelbereich ist das dargestellte Bild ständig sichtbar, wohingegen der große Winkelbereich in ausgeschalteter Stellung dunkel ist. Es ist immer nur ein Bildinhalt darstellbar, eine Umschaltung zwischen verschiedenen Bildinhalten muss daher manuell erfolgen. Um eine besonders hohe Differenz zwischen den Lichtdurchlässigkeiten in Fahrer- und Beifahrerblickrichtung zu erhalten, kann die Ansteuerspannung des Flüssigkristallelements in Abhängigkeit von der Temperatur geregelt werden. Dazu können innerhalb und außerhalb des kleinen Winkelbereichs Fotosensoren angeordnet sein, die die durchgelassene Lichtmenge detektieren und über eine Veränderung der Ansteuerspannung optimieren. Durch den kleinen Winkelbereich wird der Beifahrer, will er während der Fahrt einen Film betrachten, gezwungen, seinen Kopf stark zu fixieren, was insbesondere durch die auftretenden Fahrbewegungen schnell zur Ermüdung führt. Über das Verfahren zur Anzeigesteuerung, also zum Umschalten zwischen den beiden Einblickbereichen wird in der Offenlegungsschrift keine Angabe gemacht, es ist aber davon auszugehen, dass es sich hierbei um eine manuell zu betätigende elektronische Umstellung handelt, die vom Fahrer und auch vom Beifahrer ausgeführt werden kann. Es muss also insbesondere der Fahrer zur möglichen Betrachtung der für ihn fahrtrelevanten Daten eine aktive Handlung ausführen, die entsprechende Bewegungen und auch Zeit benötigt. Vergleichbar ist dieser Vorgang mit dem manuellen Einschalten eines Verkehrssenders im Radio. Eine Ablenkung des Fahrers vom Fahrgeschehen und eine relativ große (in einer aktuellen Entscheidungssituation gegebenenfalls zu große) Zeitspanne vom Wunsch oder der Erfordernis der Datenbetrachtung bis zu deren Darstellung treten somit auf. Des weiteren muss auch ständig die Umschaltung der verschiedenen Bildinhalte erfolgen.
  • Aus der DE 199 20 789 A1 ist eine umschaltfreie Informationseinheit bekannt, deren Display mit einem Zylinderlinsenraster arbeitet, das die gleichzeitige Betrachtung von zwei verschiedenen Bildinhalten aus unterschiedlichen Blickrichtungen ermöglicht. Im Prinzip kommen für diese richtungsselektive Wiedergabe ähnliche Methoden in Betracht, wie sie auch für die selektive Wiedergabe eines linken und eines rechten Stereobildes in Rasterstreifenform bei autostereoskopischen 3D-Displays angewendet werden und allgemein bekannt sind, sodass es sich bei der zeitgleichen dualen Betrachtung im Auto um eine neue Anwendung handelt. Der Unterschied zur 3D-Wiedergabe besteht jedoch darin, dass der laterale Abstand zwischen den beiden Betrachtungszonen sehr groß ist (ca. 70 cm; bei der Stereowiedergabe entspricht der laterale Abstand dem Augenabstand von ca. 65 mm), was entsprechende Anforderungen an die Rasterung stellt. Diese Ausführungsform hat den generellen Nachteil, dass die örtliche Bildauflösung reduziert wird, weil nur noch die Hälfte der Bildpunkte des Displays für die Navigationsanzeige bzw. für die Medienwiedergabe zur Verfügung steht. Bei der theoretisch möglichen zeitsequenziellen richtungsselektiven Wiedergabe müsste die Bildwiederholrate für beide Bildinhalte halbiert werden. Dazu würden spezielle Displays mit einer sehr hohen Bildwiederholrate (mehr als 120 Hz) für die flimmerfreie Wiedergabe der beiden Bilder (mehr als 60 Hz) benötigt werden. Mit heutigen Flachbildschirmen (LCD-Monitore, Plasmabildschirme, Elektrolumineszenz-Displays) kann diese Anforderung jedoch nicht erfüllt werden.
  • In der DE 199 51 001 A1 wird eine Vorrichtung offenbart, bei der die Blickrichtung des Fahrers genutzt wird, um Informationen aus verschiedenen Datenquellen in das Blickfeld einzublenden. Zweck dieser Vorrichtung ist es, den Fahrer von der Aufgabe zu entbinden, seinen Blick auf ein Anzeigegerät zu lenken, um Informationen abzulesen. Die Informationen werden entweder in das hauptsächliche Blickfeld des Fahrers eingeblendet (Head-up Display; in diesem Fall wird die Windschutzscheibe für die Einspiegelung verwendet) oder direkt auf die Netzhaut abgebildet. Durch Spracheingabe oder Veränderungen der Blickrichtung soll der Fahrer auch in die Lage versetzt werden, die auf diese Weise in seinem Blickfeld dargestellten Geräte und Funktionen zu aktivieren. Wenn der Blick zu lange von der Straße abgewendet wird, erfolgt eine Warnung. Die erfasste Blickrichtung des Fahrers wird nicht verwendet, um Informationen in das (hauptsächliche) Blickfeld einzublenden, sondern um ein Anzeigegerät, das im sekundären Blickfeld liegt (z.B. in der Mittelkonsole), bei erkannter Blickzuwendung automatisch umzuschalten.
  • Aus der Literatur zu Computer-Anwenderschnittstellen ist die Nutzung der Blickrichtung als Mausersatz für die Auswahl von Aktionen oder Befehlen auf einem Display bekannt (Eye Mouse, wird z.B. als Lösung für körperlich Behinderte eingesetzt). In der DE 101 21 392 A1 wird diese Lösung im Fahrzeug angewendet, um einen Befehl, der auf einer Anzeige dargestellt wird, mit dem Blick auszuwählen. Dabei kann die übliche Klicktaste zur Aktivierung des Befehls am Lenkrad angebracht sein. Es erfolgt somit eine blickgesteuerte Auswahl oder Aktivierung von Elementen auf dem Display.
  • Aus der DE 197 46 764 A1 , von der die vorliegende Erfindung als nächstliegendem Stand der Technik ausgeht, ist eine ebenfalls auf dem Zylinderlinsenrasterprinzip aufbauende, aber umschaltbare Informationseinheit bekannt, bei der ein gerasterter Bildinhalt aus zwei verschiedenen Blickrichtungen betrachtet werden kann. Dies erfolgt durch die Verschiebung eines vorge spannten Exzenterhebels, über den die Zylinderlinsenrasterplatte zur Lichtablenkung in unterschiedliche Richtungen seitlich verschiebbar ist. Durch die Darstellung jeweils nur eines Bildinhaltes vermindert sich zwar das Auflösungsproblem, problematisch bleibt jedoch die manuelle Umschaltbarkeit, die die bereits weiter oben erwähnten Komfort- und Zeiteinbußen mit sich bringt. Zudem bedingt das Verschieben oder Verschwenken der Zylinderrasterplatte nur eine Änderung des möglichen Einblickwinkels, eine Umschaltung der Bildinhalte muss zusätzlich erfolgen. Zusammenfassend gesehen sind somit aus dem Stand der Technik nur Verfahren und sie umsetzende Systeme bekannt, bei dem der Einblickwinkel und unabhängig davon die dargestellte Information von Hand durch den bewusst umzusetzenden Wunsch zumindest des Fahrers eingestellt werden kann. Dadurch wird in erhöhtem Maße die Aufmerksamkeit des Fahrers verlangt und vom Verkehrsgeschehen abgezogen sowie der Komfort erheblich eingeschränkt.
  • Die Aufgabe für die Erfindung ist daher darin zu sehen, ein gattungsgemäßes Verfahren zur Anzeigesteuerung von unterschiedlichen Informationen auf einem gemeinsamen Dual-View-Display anzugeben, das für den Fahrer bei der Betrachtung fahrtrelevanter Informationen den größtmöglichen Komfort bietet. Dabei soll der Fahrer nicht durch die ungewollte Betrachtung der Medienwiedergabe von seiner Aufgabe als Fahrzeugführer abgelenkt werden und somit eine hohe Fahrsicherheit gewährleistet werden. Weiterhin soll aber auch ein möglicher Beifahrer in seinem Komfort bei der Betrachtung fahrtunrelevanter Daten nicht unnötig und komfortmindernd belastet werden. Das Verfahren soll schnell und störungsunempfindlich in seinem Ablauf sein. Ebenso soll eine optoakustische Informationseinheit zur Umsetzung insbesondere des erfindungsgemäßen Verfahrens einfach und robust in ihrem Aufbau und in ihrer Handhabung sein. Darüber hinaus soll sie, insbesondere das verwendete Display, kostengünstig und zugänglich für aktuelle Mediendarstellungen sein. Die Lösungen für diesen Aufgabenkomplex sind den beiden nebengeordneten Hauptansprüchen zu entnehmen. Vorteilhafte Wei terbildungen werden in jeweiligen Unteransprüchen aufgezeigt und im Folgenden im Zusammenhang mit der Erfindung näher erläutert.
  • Bei dem erfindungsgemäßen Verfahren im Dual-View-Betrieb wird automatisch die aktuelle Blickrichtung des Fahrers fortlaufend detektiert. Wird festgestellt, dass der Fahrer das Dual-View-Display anblickt, werden sofort die für den Fahrer fahrtrelevanten Informationen angezeigt. Dadurch hat der Fahrer stets die benötigten Informationen zur Verfügung, ohne dass er Handlungen durchführen muss. Er wird vom System beobachtet und kann seine Entscheidung, fahrrelevante Informationen erhalten zu wollen, intuitiv durch die Wahl seiner Blickrichtung anzeigen. Untersuchungen zur Fahrsicherheit haben gezeigt, dass dem Fahrer maximal eine Sekunde Zeit für das Ablesen der Instrumente zur Verfügung steht; wenn die Aufmerksamkeit länger als eine Sekunde auf die Anzeigen gerichtet ist, steigt das Unfallrisiko signifikant. Die Unterbrechung der Medienpräsentation für den Beifahrer wird sich also im Anwendungsfall in engen zeitlichen Grenzen halten, sodass das erfindungsgemäße Verfahren einen hohen Betrachtungskomfort für den Beifahrer garantiert. Dadurch, dass jedes Mal, wenn der Fahrer das Dual-View-Display anblickt, die fahrtrelevanten Daten angezeigt werden, erfolgt auch ein Erziehungsprozess. Der Fahrer kann fahrtunrelevante Daten, die einem Beifahrer in den Phasen des abgewendeten Blicks angeboten werden, nicht betrachten. Sie verschwinden automatisch, wenn der Fahrer das Dual-View-Display anschaut. Der Fahrer wird also durch eine Medienabspielung visuell nicht abgelenkt und die Fahrsicherheit ist gewährleistet. Untersuchungen mit Navigationssystemen haben auch eine systematische Abhängigkeit der Blickfrequenz von der Komplexität der aktuellen Navigation aufgezeigt. Im Normalfall bedeutet die Unterbrechung der Medienpräsentation beim Blick des Fahrers auf das Dual-View-Display (kurzzeitige Umschaltung in den Navigationsmodus) keine große Beeinträchtigung für den Beifahrer; auch übliche Filmpräsentationen im Fernsehen werden durch sehr viel länger andauernde Werbeblöcke unterbrochen. Bei einer häufigeren Unterbrechung wird der Beifahrer ohnehin auf seine Medienpräsentation verzichten und das Verkehrsgeschehen beobachten.
  • Die nahezu verzögerungsfreie Darstellung fahrtrelevanter Daten beim Blickkontakt des Fahrers mit dem Dual-View-Display kann durch eine entsprechende Detektionstechnik erreicht werden. Der Fahrer wird für ihn störungsfrei von eine Videokamera beobachtet. Die Auswertung der detektierten Bilder erfolgt dann binär als Ja- oder Nein-Entscheidung, da vom System lediglich zu entscheiden ist, ob der Fahrer das Gebiet des Displays anblickt oder nicht. Dadurch kann eine Datenverarbeitung in Echtzeit erreicht werden. Eine geringe Verzögerung ergibt sich dann lediglich durch den Steuerbefehl zum Umschalten des Bildinhaltes. Bei dem erfindungsgemäßen Verfahren werden also beide Informationsquellen alternativ unter Nutzung der vollen Bildauflösung des Displays angezeigt, die Umschaltung zwischen beiden Informationsquellen erfolgt automatisch in Abhängigkeit von der aktuellen Blickrichtung des Fahrers. Aufgrund der selektiven, nicht-zeitgleichen Darstellung der unterschiedlichen Bildinhalte für Fahrer und Beifahrer kann die volle örtliche Auflösung des Displays in üblicher Ausrichtung des Displays (Querformat) genutzt werden. Das erfindungsgemäße Verfahren ist somit technisch einfach mit handelsüblichen Bauteilen zu realisieren und zeigt gegenüber den bekannten Ansätzen für ein Dual-View-Display zusammenfassen folgende Vorzüge:
    • – Es können handelsübliche Flachbildschirme verwendet werden.
    • – Das Dual-View-Display kann im üblichen Breitbildformat (4:3, 16:9,...) verwendet werden. Das ist besonders vorteilhaft, wenn für den Beifahrer TV-Programme oder Spielfilme von DVD dargestellt werden sollen (aufgrund der vertikalen Ausrichtung der Farbfilterstreifen ist für die bekannte Lösung mit einem Trennraster bei heutigen handelsüblichen Flachbildschirmen ein Betrieb im unvorteilhaften Hochformat notwendig).
    • – Es ist keine besondere Bildsignalaufbereitung, wie beispielsweise spalten- oder zeilenweises Verkämmen der Bilder für Fahrer und Beifahrer, erforderlich.
    • – Es gibt keinen Verlust an Bildauflösung und Helligkeit: Fahrer und Beifahrer sehen die volle Auflösung und Lichtstärke des Displays, beispielsweise 1024 × 786 Punkte.
    • – Es gibt keine so gravierenden Realisierungsbarrieren wie in den stereobasierten Ansätzen aufgrund der dort zu realisierenden extremen Distanz zwischen den Betrachtungszonen.
    • – Es wird durch den automatischen Verfahrensablauf ein optimaler Komfort für den Fahrer bei gleichzeitiger Gewährleistung der Fahrsicherheit geboten.
  • In der Realisierung des erfindungsgemäßen Verfahrens ist vorgesehen, dass die optoakustische Informationseinheit neben dem Dual-View-Display, einer Programmeinheit für die darzustellenden Informationen und einer Anzeigesteuereinheit zur Ausführung der aus der Datenverarbeitung resultierenden Anforderungen auch eine videobasierte Detektionseinheit zur fortlaufenden, automatischen Ermittlung der aktuellen Blickrichtung des Fahrers aufweist, die zumindest eine in unmittelbarer Nähe des Displays angeordnete Videokamera, die auf den Fahrer ausgerichtet ist, und eine auf die Anzeigesteuereinheit führende Auswerteeinheit umfasst. Somit handelt es sich um ein einfaches und kostengünstiges System, das auch für eine Nachrüstung geeignet ist. Dabei kann das Dual-View-Display bevorzugt in die Mittelkonsole eines Fahrzeugs integriert werden. Die Videokamera kann direkt oberhalb des Displays in einer Blende angeordnet sein. Möglich ist auch eine Integration direkt in den Displayrand oder – bei transparenten Displays – eine Positionierung hinter den Bildschirm.
  • Durch den automatischen Umschaltmodus im erfindungsgemäßen Verfahren hat der Fahrer keine Gelegenheit, ablenkende Bildinhalte direkt zu betrachten. Es besteht allerdings unter Umständen das Risiko, dass der Fahrer die Medienpräsentation im peripheren Blickfeld verfolgt und von der Beobachtung des Verkehrsgeschehens abgelenkt wird. Dies kann verhindert werden, wenn die Informationen richtungsselektiv angezeigt werden, wobei die fahrtrelevanten Informationen nur dem Fahrer und die fahrtunrelevanten Informationen nur dem Beifahrer angezeigt werden. Eine solche richtungsselektive Beleuchtung für ein Dual-View-Display ist beispielsweise aus der DE 197 35 177 A1 bekannt. Für die Realisierung kann ein Rückbeleuchtungssystem mit zwei alternativen Beleuchtungsrichtungen, von denen die eine zum Fahrer und die andere zum Beifahrer verläuft, integriert sein. Zur Realisierung kann beispielsweise ein handelsübliches Transmissionspaneel (LCD-Display) mit modifizierter Rückbeleuchtung verwendet werden. Die technische Lösung für die richtungsselektive Rückbeleuchtung besteht vorzugsweise in zwei auf den Fahrer bzw. Beifahrer ausgerichteten weißen LED-Arrays. LEDs ermöglichen eine nahezu verzögerungsfreie Aktivierung/Deaktivierung der Beleuchtung, sind zudem langlebig und weisen einen hohen Wirkungsgrad auf. Bei einer Aktivierung der fahrtrelevanten Daten wird gleichzeitig die auf den Fahrer ausgerichtete Beleuchtungseinrichtung aktiviert. In den Phasen der Mediendarstellung hingegen wird die auf den Beifahrer ausgerichtete Beleuchtungseinrichtung aktiviert. Dabei klammert diese auf jeden Fall den Fahrer aus. Die auf diesen ausgerichtete Beleuchtungseinrichtung kann jedoch auch den Beifahrer erfassen, sodass dieser auch die fahrtrelevanten Informationen betrachten kann.
  • Mittels einer vorgesehenen manuellen Bedieneinrichtung, beispielsweise ein einfacher Umschalter, zum wahlweisen Aktivieren, Deaktivieren und Umschalten zwischen den unterschiedlichen Informationen kann der Beifahrer auswählen, ob er in den Unterbrechungen seiner Medienpräsentation einen dunklen Bildschirm oder das Navigationsdisplay angeboten bekommen möchte. Darüber hinaus kann die Anzeigesteuerung auch aus dem automatischen Vorgang herausgenommen und vom Fahrer oder Beifahrer manuell situationsadäquat konfiguriert werden. Beispielsweise kann das Dual-View-Display permanent die Navigationsinformation darstellen, wenn kein Beifahrer an Bord ist. Bei langer Autobahnfahrt mit Beifahrer kann der Navigationsmodus zeitweise abgeschaltet werden, um ungewollte Unterbrechungen der Filmpräsentation zu verhindern. Im automatisch gesteuerten Umschalten des dargestellten Bildinhalts kann darüber hinaus bereits enthalten sein, dass dauerhaft die fahrtrelevanten Informationen angezeigt werden, wenn die aktuelle Blickrichtung des Fahrers nicht ermittelt werden kann. Dies kann beispielsweise dann der Fall sein, wenn die natürliche Beleuchtung des Fahrers nicht für eine Bilderfassung ausreicht (Dämmerung, Tunneldurchfahrt) oder extrem schwankt (Fahrt durch eine Baumallee mit seitlich einfallendem Sonnenlicht). Der Beifahrer muss dann eine vorübergehende Unterbrechung seiner Medienpräsentation in Kauf nehmen. Besondere Kundenwünsche bezüglich des Schaltverhaltens bei extremen Lichtverhältnissen können in der Software berücksichtigt werden. Auch bei ungünstigen Lichtverhältnissen und insbesondere natürlich bei Nachtfahrten kann jedoch ein sicherer Betrieb des Navigationsdisplays gewährleistet werden, wenn der Fahrer aktiv, insbesondere mit Infrarotlicht, beleuchtet wird. Dafür kann in ummittelbarer Nähe des Displays eine auf den Fahrer ausgerichtete Beleuchtungseinrichtung, insbesondere mit Infrarotlichtquellen, angeordnet sein. Insbesondere kann vorgesehen sein, dass die zumindest eine Videokamera und die auf den Fahrer ausgerichtete Beleuchtungseinrichtung hinter einer infrarotlichtdurchlässigen Scheibe, insbesondere im Displaybereich, angeordnet sind. Es kann somit kommerziell ein Komplettsystem zur Verfügung gestellt werden, bei dem im Displayrand die Videokamera und die Infrarotbeleuchtung bereits integriert sind. Damit entfallen Einzelinstallationen und störende Verkabelungen.
  • Neben der Integration eines richtungsselektiven Beleuchtungssystems zur Erhöhung der Verkehrssicherheit durch verringerte Ablenkung des Fahrers kann im Verfahren nach der Erfindung auch vorgesehen sein, dass die Dauer des mit dem Dual-View-Display vom Fahrer hergestellten Blickkontaktes detektiert und oberhalb eines vorgegebenen Schwellwertes ein Warnsignal von einer akustischen und/oder optischen Warneinrichtung abgegeben wird. Aus Untersuchungen ist bekannt, dass ein Autofahrer maximal für eine Zeitdauer von einer Sekunde auf das Navigationsdisplay oder andere Instrumente schauen darf. Bei längerem Blick auf die Anzeigen steigt das Unfallrisiko jedoch signifikant an. Die genannte Ausführungsform der Erfindung senkt dagegen das Unfallrisiko im Vergleich zu heutigen permanent eingeschalteten Navigationsdisplays erheblich, weil der Fahrer nach Ablauf einer Sekunde akustisch oder optisch (beispielsweise durch ein blinkendes Display) aufgefordert wird, wieder in Fahrtrichtung zu schauen. Diese Maßnahme kann auch im Rahmen eines Fahrerassistenzsystems dazu verwendet werden, den Fahrer durch Sprachausgabe aufzufordern, nach vorne zu schauen, wenn er seinen Blick zu lange auf das Navigationsdisplay richtet.
  • Für die Software für das Verfahren nach der Erfindung mit einer videobasierten Erkennung der Blickzuwendung in Richtung auf das Dual-View-Display kommen pixelbasierte Verfahren (Vergleich von Bildmustern und Kantenmustern) und merkmalsbasierte Verfahren (Finden und Auswerten der Position der Augenwinkel, Nasenlöcher, Mundwinkel etc. bzw. der Pupille und ggf. zusätzlicher Lichtreflexe auf der Cornea) in Frage. Das angewendete Detektionsverfahren wird dabei so ausgewählt, dass es möglichst robust ist gegenüber Veränderungen der Umgebungsbeleuchtung (Fahrt bei Sonnenschein oder bei Nacht). Zur Einhaltung der Echtzeitbedingung umfasst der verwendete Algorithmus möglichst wenige Rechenoperationen, sodass eine Implementierung auf einer Mikroprozessorplattform möglich ist. Diesem Erfordernis kommt auch das binäre Entscheidungsschema für den Umschaltautomatismus entgegen. Um auch bei Nachtfahrten einsetzbar zu sein, ist, wie bereits erwähnt, eine aktive Beleuchtung des Fahrers mit Infrarot-LEDs erforderlich. Die Auswertung basiert dann zwangsläufig nur auf der Verwendung von Intensitätsbildern ohne natürliche Farbinformationen.
  • Zur Verdeutlichung der weiteren Softwarewahl und der Erfindung wird anhand von Figuren im speziellen Beschreibungsteil an Ausführungsbeispielen der Betriebsablauf des Verfahrens nach der Erfindung im automatisierten Modus beschrieben. Dabei zeigt die
  • 1 eine in einem Auto installierte Informationseinheit zur Durchführung des Verfahrens nach der Erfindung,
  • 2 ein Blockdiagramm des Grundprinzips des Verfahrens nach der Erfindung,
  • 3 ein Blockdiagramm des Verfahrens nach der Erfindung mit zusätzlicher Kamera,
  • 4 Kantenbilder als Referenz- und Aktuellbilder,
  • 5 Beispiele für Bewegungsvektoren,
  • 6 die Messung bei der vereinfachten Cornea-Reflex-Methode und
  • 7 die Berechnung des Toleranzwertes für die vereinfachte Cornea-Reflex-Methode
  • Die 1 zeigt in einer Fotomontage die Anordnung einer blickgesteuerten Informationseinheit VIU nach der Erfindung mit einem Dual-View-Display DISP in der Mittelkonsole MC eines Autos. Über dem Dual-View-Display DISP sind Infrarot-LEDs und eine Videokamera hinter einer infrarotlichtdurchlässigen Blende IRB angeordnet. Diverse Schalter einer manuellen Bedienvorrichtung MUD ermöglichen eine Auswahl verschiedener Betriebsmodi, beispielsweise „Navigation dauerhaft an" NavOn, „automatischer Umschaltbetrieb" Automatik und „Navigation dauerhaft aus" NavOff). Diese Schalter können als einfache mechanische Taster oder auch als frei konfigurierbare Touchscreen-Elemente in das Display integriert sein. Weitere Funktionselemente sind hinter dem Dual-View-Display DISP angeordnet und auf dem Bild nicht sichtbar.
  • Im Folgenden werden Initialisierung und Betrieb der Blicksteuerung als essenzielle Grundprinzipien des Verfahrens nach der Erfindung beschrieben. Beim natürlichen Sehen werden kleinere Änderungen der Blickrichtung durch eine entsprechende Drehung des Augapfels in Bezug auf den Kopf bewirkt.
  • Bei größeren Blickbewegungen oder bei einer längeren Fixationsdauer findet zusätzlich eine Drehung des gesamten Kopfes in Richtung auf das fixierte Objekt statt. Die bekannten Verfahren zur Blickmessung haben das Ziel, die Ausrichtung der Sehachse, d.h. den aktuellen Drehwinkel des Augapfels mit Bezug auf ein externes Referenzobjekt, in einem möglichst großen Blickwinkelbereich stabil zu messen (Cornea-Reflex-Methode, vergleiche DE 199 53 835 C1 und die dort zitierten Druckschriften) oder minimale Blickbewegungen relativ zur Ausrichtung des Kopfes zu erfassen (Limbus-Tracking-Methode, vergleiche DE 199 53 835 C1 und die dort zitierten Druckschriften). Bei dem hier beschriebenen Verfahren nach der Erfindung geht es im Unterschied zu den bekannten Blickmessverfahren darum, eine Ja/Nein-Entscheidung in Bezug auf die Fixation eines ausgewählten Objekts (das Display) mit möglichst geringem Aufwand und geringer Störanfälligkeit zu treffen. Deshalb kann die bevorzugte Ausführungsform des implementierten Detektionsverfahrens auf der Auswertung einer Summe von äußerlich sichtbaren und über eine Kamera zu erfassenden Bildmerkmalen beruhen, die auf eine Blickzuwendung schließen lassen. Das Grundprinzip hierzu stellt der Referenzbildvergleich dar (vergleiche 2). Vor Beginn der Fahrt schaltet der Fahrer das Dual-View-Display mit einem Druckschalter in unmittelbarer Nähe des Displays ein. In diesem Augenblick nimmt die in unmittelbarer Nähe des Monitors angebrachte Kamera ein Bild des Fahrers auf, das als Referenzbild für die zu detektierende Blickzuwendung gespeichert wird. Während der Fahrt wird das Referenzbild mit den aktuellen Videobildern verglichen, um eine Blickzuwendung in Richtung auf das Dual-View-Display zu erkennen.
  • Beim Bildvergleich wird ein Ähnlichkeitswert ermittelt. Dieser Wert kann durch einen Intensitätsvergleich der Bildpunkte in einem vordefinierten Bereich (vorzugsweise ein Block von Bildpunkten, der den Bereich der Augen umfasst) berechnet werden. In einem ersten Schritt wird der vordefinierte Bereich durch ein Blockmatching-Verfahren im aktuellen Kamerabild P gesucht (durch Vergleich der Intensitätswerte in Bildblöcken des Referenzbildes Pref und des aktuellen Kamerabildes P). Für den „Best Match" (beste Übereinstimmung) werden anschließend die aufsummierten absoluten Differenzen der Intensitätswerte in den korrespondierenden Blöcken des aktuellen Bildes P und des Referenzbildes Pref zu einem Ähnlichkeitswert zusammengefasst. Um das Verfahren möglichst unempfindlich gegen Veränderungen des Umgebungslichtes zu machen, kann es vorteilhaft sein, nicht mit stark beleuchtungsabhängigen Intensitätswerten, sondern mit Bildkonturen zu arbeiten. Dazu werden mit Hilfe von Kantenoperatoren (z.B. dem „Canny Edge"-Detector oder dem „Sobel"- Operator) die signifikanten Konturen im Referenzbild Pref und im aktuellen Videobild P extrahiert. Anschließend wird nach der oben beschriebenen Methode – aber auf Grundlage der Kantenbilder – ein Ähnlichkeitswert für den "Best Match" ermittelt. Wenn der so ermittelte Ähnlichkeitswert eine vordefinierte Ähnlichkeitsschwelle (Schwellwert THR) erreicht, wird ein Signal ausgelöst, das die Bildquelle des Displays DISP von der Medienquelle MEDIA auf die Navigationsanzeige NAV umschaltet. Gleichzeitig wird die auf den Fahrer DRV ausgerichtete Rückbeleuchtung BL1 des Displays DISP eingeschaltet. Sobald der Fahrer DRV den Kopf/Blick wieder vom Dual-View-Display DISP abwendet, wird die Rückbeleuchtung BL1 ausgeschaltet und die Medienquelle MEDIA zugeschaltet.
  • Dieses um eine gerichtete Rückbeleuchtung erweiterte Grundprinzip einer blickgesteuerten Informationseinheit VIU mit einem Dual-View-Display DISP ist In der 2 als Blockdiagramm dargestellt. Wenn das Referenzbild Pref und das aktuelle Kamerabild P der Videokamera CAM vom Fahrer DRV hinreichend übereinstimmen (die Differenz ist kleiner als ein Schwellwert THR, ja/nein-Entscheidung), wird auf eine Blickzuwendung geschlossen. In diesem Fall wird die Navigationsanzeige NAV auf das Dual-View-Display DISP durchgeschaltet und die auf den Fahrer DRV ausgerichtete Rückbeleuchtung BL1 eingeschaltet. Die Rückbeleuchtung BL2 für den Beifahrer PASS und die Medienquelle MEDIA werden vorübergehend ausgeschaltet Die im folgenden beschriebenen Verfahren dienen dazu, die Blickzuwendung des Fahrers auf das Dual-View-Display möglichst zuverlässig von Blickzuwendungen auf Objekte der Fahrumgebung (beim Blick durch die Windschutzscheibe) bzw. im Auto (beim Blick auf den Rückspiegel und die restlichen Instrumente) zu unterscheiden. Besonders kritisch sind solche Blickzuwendungen, die eine vergleichbare seitliche Drehung des Kopfes und der Augen erfordern wie der Blick auf das Dual-View-Display (gleiche azimutale Ausrichtung).
  • Das erste modifizierte Verfahren umfasst eine Gegenprobe mit einer zusätzlichen Kamera. Eine zusätzliche Videokamera CAM2 (vergleiche 3) wird vorzugsweise unterhalb des inneren Rückspiegels in gleicher azimutaler Lage (bezogen auf den Kopf des Fahrers) wie die Videokamera CAM1 des Dual-View-Displays DISP angebracht. Bei der initialen Kalibrierung des Systems wird ein Referenzbild Pref1 beim Blick in die Richtung von Videokamera CAM1 sowie ein Referenzbild Pref2 beim Blick in die Richtung von Videokamera CAM2 aufgenommen. Während des Betriebs werden zwei Ähnlichkeitswerte SIM1 und SIM2 durch Vergleich der aktuellen Kamerabilder P1/P2 mit den zugehörigen Referenzbildern Pref1/Pref2 ermittelt. Die Berechnung erfolgt für beide Signalquellen nach einem der oben beschriebenen Verfahren. Auf eine Blickzuwendung zum Dual-View-Display DISP wird nur dann geschlossen, wenn Videokamera CAM1 einen besseren Ähnlichkeitswert SIM1 liefert als Videokamera CAM2 (SIM1 > SIM2) und dieser Ähnlichkeitswert zudem den vordefinierten Schwellwert für die Ähnlichkeit THR erreicht.
  • Die 4 zeigt die Kantenbilder der oberen, im Rückspiegelbereich angeordneten Kamera CAM2 und der unteren, im Bereich des Dual-View-Displays DISP angeordneten Kamera CAM1 (jeweils links das Referenzbild Pref1/Pref2 und rechts das aktuelle Bild P1/P2) für den Fall, dass der Fahrer DRV auf das Dual-View-Display DISP schaut, das heißt, in Richtung auf Videokamera CAM1. Die eingezeichneten Rechtecke markieren die für die Berechnung der Ähnlichkeitswerte SIM1 und SIM2 verwendeten Blockgrenzen im Augenbereich. Es ist zu erkennen, dass die oberen Blöcke deutlich von einander abweichen und die unteren Blöcke einander sehr ähnlich sind. In diesem Fall signalisiert das Verfahren nach der Erfindung eine Blickzuwendung zum Dual-View-Display DISP und steuert die entsprechenden Umschaltungen an.
  • Eine andere Methode zur Verbesserung der Detektionssicherheit stellt die Auswertung von Bewegungsvektoren („Visual Flow") dar (vergleiche 5). Die bisher dargestellten Methoden werten statische Bildmerkmale für die Detektion einer möglichen Blickzuwendung aus. Die Zuverlässigkeit des Verfahrens nach der Erfindung kann jedoch durch Berücksichtigung des natürlichen Bewegungsablaufs im Zuge der Blickzuwendung noch verbessert werden (dynamische Blickzuwendungsgeste durch Drehung des Kopfes und der Augen, Bewegung der Augenlider). Zu diesem Zweck werden zeitlich aufeinander folgende Bilder der einen oder beider Videokameras mit Methoden der Bewegungsvektorschätzung (Visual Flow) analysiert. Solche Methoden sind z.B. im Zusammenhang mit der digitalen Bilddatenkompression (z.B. der bewegungskompensierten Prädiktion bei der Datenkompression nach MPEG-2) und der digitalen Formatkonversion (bewegungsadaptive örtliche/zeitliche Bildinterpolation) bekannt. Es gibt bereits echtzeitfähige Hardwarelösungen für die Bewegungsschätzungen – zumeist auf der Grundlage eines Blockmatchingverfahrens. Bei als bekannt vorausgesetzter Aufnahmegeometrie (Position der Videokameras, des Dual-View-Displays und des Fahrers) und der Annahme, dass der Fahrer die überwiegende Zeit nach vorne schaut, kann allein aus der Richtung der Bewegungsvektoren auf eine mögliche Blickzuwendung geschlossen werden. In Verbindung mit der Auswertung statischer Bildmerkmale kann das Ergebnis der Bewegungsvektorschätzung im Rahmen einer Konsistenzprüfung zur Verbesserung der Zuverlässigkeit der Blickzuwendungsdetektion verwendet werden. Die Bewegungsvektoren weisen in der Tendenz nach unten (negativer Mittelwert der vertikalen Komponente der Vektoren), wenn eine Blickzuwendung in Richtung auf das in der Mittelkonsole angebrachte Dual-View-Display stattfindet.
  • Weitere Detektionsverfahren basieren auf der direkten Blickmessung. Mit den bislang beschriebenen Methoden sind Blickzuwendungen durch Augenbewegungen ohne eine nennenswerte Kopfdrehung schwer zu detektieren. Derartige Blickzuwendungen sind insbesondere dann zu erwarten, wenn das Dual-View-Display nicht in der Mittelkonsole, sondern höher angebracht wird (im oder auf dem Hauptinstrumentenbrett). Für diesen Fall soll eine vereinfachte Form der bekannten Cornea-Reflex-Methode (vergleiche DE 199 53 835 C1 und die dort zitierten Druckschriften) eingesetzt werden. Die vereinfachte Form sieht vor, dass die zur Erzeugung des Lichtreflexes erforderlichen Leuchtdioden in der unmittelbaren Nähe der Kameraachse angeordnet sind. Auf diese Weise erscheint die Pupille als heller Fleck im Kamerabild (vergleichbar mit dem Rotaugen-Effekt beim Fotografieren mit einem Blitzlichtgerät); zudem liegt der Lichtreflex beim Blick in die Kamera im Zentrum des Pupillenbildes und lässt sich dort durch eine Intensitäts-Schwellwertoperation lokalisieren (vergleiche 6).
  • In der in 6 skizzierten Ausführungsform befindet sich das Dual-View-Display DISP unmittelbar über der blickmessenden Videokamera CAM1. Infrarot-Leuchtdioden IR-LED sind direkt unterhalb der Videokamera CAM1 angeordnet. In der oberen Darstellung in 6 blickt der Fahrer DRV direkt in die Kamera bzw. auf das Dual-View-Display DISP. Das Kamerabild P des Auges EYE des Fahrers DRV zeigt einen zentralen Reflexpunkt auf der Hornhaut des Auges mit Iris und Pupille. In der unteren Darstellung in 6 blickt der Fahrer seitlich am Dual-View-Display DISP vorbei. Deutlich ist im entsprechenden Kamerabild P der dezentrale Reflexpunkt auf der Hornhaut zu erkennen.
  • Zur Detektion einer Blickzuwendendung zum Dual-View-Display DISP kann somit ein größtenteils aufnahmegeometrisch bestimmter Toleranzbereich angegeben werden, in dem sich der Lichtreflex bezogen auf das Zentrum der Pupille befinden muss, wenn der Fahrer auf das Dual-View-Display schaut. In der 7 ist die Berechnung eines Toleranzwertes b' für eine gegebene Aufnahmegeometrie unter Annahme der allgemein bekannten Gullstrandschen Werte für das schematische Durchschnittsauge dargestellt. Im Unterschied zur bekannten Cornea-Reflex-Methode ist für die hier beschriebene Anwendung also keine individuelle Kalibrierung des Messverfahrens erforderlich; stattdessen wird vom Gullstrandschen Durchschnittsauge und einfach messbaren Größen des technischen Aufbaus ausgegangen, was das Detektionsverfahren bedeutend vereinfacht. Weiterhin wird vereinfachend angenommen, dass sich das Auge EYE um den Krümmungsmittelpunkt der Hornhaut (Cornea) dreht. Der gesuchte Toleranzwert b' berechnet sich dann nach dem Strahlensatz zu b' = c·B/C·F/A.
  • Dabei bedeuten
    A = Abstand der messenden Videokamera (Hauptebene) vom Auge des Fahrers (z.B. 70 cm)
    B = Abstand des Displayrandes von der optischen Achse der Videokamera
    C = Abstand des Displayrandes vom Auge des Fahrers (≅ A)
    c = Abstand der Pupillenebene vom Krümmungsmittelpunkt der Cornea (4,1 mm, nach Gullstrand)
    F = Abstand der (fiktiven) Bildebene der Videokamera vom Linsenzentrum (≅ Brennweite, z. B. 4 mm) und
    b' = Abstand des Lichtreflexes vom Zentrum der Pupille im Kamerabild.
    •
    • A
    Abstand CAM/EYE
    b'
    Toleranzwert
    B
    Abstand Rand DISP/CAM
    BL1
    Rückbeleuchtung DRV
    BL2
    Rückbeleuchtung PASS
    c
    Abstand Pupillenebene/Krümmungsmittelpunkt der Cornea
    C
    Abstand Rand DISP/EYE
    CAM
    Videokamera
    DISP
    Dual-View-Display
    DRV
    Fahrer
    EYE
    Auge des Fahrers
    F
    Abstand der Bildebene CAM/Linsenzentrum
    IRB
    infrarotlichtdurchlässige Blende
    IR-LED
    Infrarot-Leuchtdiode
    MEDIA
    Medienquelle
    MC
    Mittelkonsole
    MUD
    manuelle Bedienvorrichtung
    NAV
    Navigationsanzeige
    P
    aktuelles Kamerabild
    Pref
    Referenzbild
    PASS
    Beifahrer
    SIM
    Ähnlichkeitswert
    THR
    Schwellwert für Ähnlichkeitswert SIM
    VIU
    blickgesteuerte Informationseinheit

Claims (23)

  1. Verfahren zur Anzeigesteuerung von unterschiedlichen Informationen auf einem gemeinsamen Dual-View-Display durch den Fahrer während der Fahrt in einem Fahrzeug, wobei auch ein möglicher Beifahrer das Dual-View-Display betrachten kann, dadurch gekennzeichnet, dass automatisch die aktuelle Blickrichtung des Fahrers (DRV) fortlaufend detektiert wird und die für den Fahrer fahrtrelevanten Informationen (NAV) nur dann nahezu verzögerungsfrei angezeigt werden, wenn der Fahrer (DRV) Blickkontakt mit dem Dual-View-Display (DISP) hat, wohingegen in den Intervallen ohne Blickkontakt alternativ fahrtunrelevante Informationen (MEDIA) angezeigt werden können, wobei die aktuelle Blickrichtung durch eine videobasierte Detektion der Kopfdrehung und/oder Augenbewegung des Fahrers (DRV) auf der Basis eines statischen oder dynamischen Detektionsverfahrens ermittelt und in der Auswertung nur eine binäre Entscheidung (THR) getroffen wird, ob der Fahrer (DRV) das Dual-View-Display (DISP) aktuell anblickt oder nicht.
  2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Informationen richtungsselektiv angezeigt werden, wobei die fahrtrelevanten Informationen (NAV) nur dem Fahrer (DRV) und die fahrtunrelevanten Informationen (MEDIA) nur dem Beifahrer (PASS) angezeigt werden.
  3. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass dauerhaft die fahrtrelevanten Informationen (NAV) angezeigt werden, wenn die aktuelle Blickrichtung des Fahrers (DRV) nicht ermittelt werden kann.
  4. Verfahren nach einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, dass das verwendete Detektionsverfahren pixel- oder merkmalsbasiert arbeitet.
  5. Verfahren nach einem der Ansprüche 1 bis 4, dadurch gekennzeichnet, dass als statisches Detektionsverfahren die Cornea-Reflex-Methode zur stabilen Messung eines möglichst großen Blickwinkelbereichs oder die Limbus-Tracking-Methode zur Erfassung einer minimalen relativen Blickbewegung verwendet wird.
  6. Verfahren nach Anspruch 5, dadurch gekennzeichnet, dass eine vereinfachte Cornea-Reflex-Methode, bei der die Pupille als heller Fleck detektiert und ein entsprechender Toleranzbereich für die Lage des Lichtreflexes auf der Hornhaut definiert wird, verwendet wird.
  7. Verfahren nach einem der Ansprüche 1 bis 6, dadurch gekennzeichnet, dass ein differenzbildender Ähnlichkeitsvergleich zwischen einem Referenzbild (Pref), bei dem der Fahrer (DRV) das Dual-View-Display (DISP) anblickt, und einem aktuellen Bild (P) durchgeführt und ein Ähnlichkeitswert (SIM) ermittelt wird, wobei die binäre Entscheidung in Abhängigkeit von einem vorgegebenen Schwellwert (THR) für den ermittelten Ähnlichkeitswert durchgeführt wird.
  8. Verfahren nach Anspruch 7, dadurch gekennzeichnet, dass der Ähnlichkeitswert (SIM) in einem vordefinierten Bereich unter Anwendung eines Blockmatching-Verfahrens oder mit Intensitätswerten oder Kantenoperatoren ermittelt wird.
  9. Verfahren nach Anspruch 1 bis 8, dadurch gekennzeichnet, dass das dynamische Detektionsverfahren auf der Auswertung von Bewegungsvektoren, insbesondere unter Anwendung eines Blockmatching-Verfahrens, beruht.
  10. Verfahren nach einem der Ansprüche 1 bis 9, dadurch gekennzeichnet, dass die Anzeigesteuerung auch manuell vorgenommen werden kann.
  11. Verfahren nach einem der Ansprüche 1 bis 10, dadurch gekennzeichnet, dass die Dauer des mit dem Dual-View-Display (DISP) vom Fahrer (DRV) hergestellten Blickkontaktes detektiert und oberhalb eines vorgegebenen Schwellwertes ein Warnsignal, eine Warnmeldung oder eine Aufforderung an den Fahrer abgegeben wird.
  12. Verfahren nach einem der Ansprüche 1 bis 11, dadurch gekennzeichnet, dass der Fahrer (DRV) aktiv, insbesondere mit Infrarotlicht (IR-LED), beleuchtet wird.
  13. Verfahren nach Anspruch 1 bis 12, dadurch gekennzeichnet, dass die videobasierte Detektion auf Videoaufnahmen an zwei unterschiedlichen Aufnahmeorten basiert, wobei der eine Aufnahmeort der Position des Dual-View-Displays (DISP) entspricht und der andere Ort azimutal darüber ausgerichtet ist und von beiden Aufnahmeorten aus Referenzbilder (Pref) erstellt werden.
  14. Optoakustische Informationseinheit in einem Fahrzeug zur Anzeige unterschiedlicher Informationen auf einem Dual-View-Display mit einer Programmeinheit und einer Anzeigesteuereinheit, insbesondere zur Durchführung des Verfahrens nach einem der Ansprüche 1 bis 9, dadurch gekennzeichnet, dass eine videobasierte Detektionseinheit zur fortlaufenden, automatischen Ermittlung der aktuellen Blickrichtung des Fahrers (DRV) mit zumindest einer in unmittelbarer Nähe des Dual-View-Displays (DISP) angeordneten Videokamera (CAM) und eine auf die Anzeigesteuereinheit führende Auswerteeinheit vorgesehen sind.
  15. Optoakustische Informationseinheit nach Anspruch 14, dadurch gekennzeichnet, dass das Dual-View-Display (DISP) in die Mittelkonsole (MC) des Fahrzeugs integriert ist.
  16. Optoakustische Informationseinheit nach Anspruch 14 oder 15, dadurch gekennzeichnet, dass das Dual-View-Display (DISP) als Flachdisplay, insbesondere mit Querformat, ausgebildet ist.
  17. Optoakustische Informationseinheit nach einem der Ansprüche 14 bis 16, dadurch gekennzeichnet, dass in das Dual-View-Display (DISP) ein umschaltbares, der Darstellung der unterschiedlichen Informationen dienendes Rückbeleuchtungssystem (BL1, BL2) mit zwei alternativen Beleuchtungsrichtungen, von denen die eine zum Fahrer (DRV) und die andere zum Beifahrer (PASS) verläuft, integriert ist.
  18. Optoakustische Informationseinheit nach einem der Ansprüche 14 bis 17, dadurch gekennzeichnet, dass eine manuelle Bedieneinrichtung (MUD) zum wahlweisen Aktivieren, Deaktivieren und Umschalten zwischen den unterschiedlichen Informationen vorgesehen ist.
  19. Optoakustische Informationseinheit nach einem der Ansprüche 14 bis 18, dadurch gekennzeichnet, dass eine akustische und/oder optische Warneinrichtung vorgesehen ist.
  20. Optoakustische Informationseinheit nach einem der Ansprüche 14 bis 19, dadurch gekennzeichnet, dass in ummittelbarer Nähe des Dual-View-Displays (DISP) und/oder der Videokamera (CAM) eine auf den Fahrer (DRV) ausgerichtete Beleuchtungseinrichtung (BL1), insbesondere mit Infrarotlichtquellen (IR-LED), angeordnet ist.
  21. Optoakustische Informationseinheit nach einem der Ansprüche 14 bis 20, dadurch gekennzeichnet, dass die zumindest eine Videokamera (CAM) und die auf den Fahrer (DRV) ausgerichtete Beleuchtungseinrichtung (BL1) hinter einer infrarotlichtdurchlässigen Blende (IRB), insbesondere im Displaybereich, angeordnet sind.
  22. Optoakustische Informationseinheit nach einem der Ansprüche 14 bis 21, dadurch gekennzeichnet, dass azimutal zu der zumindest einen Videokamera (CAM1) eine zweite Videokamera (CAM2) vorgesehen ist.
  23. Optoakustische Informationseinheit nach einem der Ansprüche 14 bis 22, dadurch gekennzeichnet, dass die zweite Videokamera (CAM2) im Bereich des Rückspiegels eines Autos als Fahrzeug vorgesehen ist.
DE10339314A 2003-08-27 2003-08-27 Verfahren zur Anzeigesteuerung von unterschiedlichen Informationen in einem Fahrzeug und optoakustische Informationseinheit Expired - Fee Related DE10339314B3 (de)

Priority Applications (6)

Application Number Priority Date Filing Date Title
DE10339314A DE10339314B3 (de) 2003-08-27 2003-08-27 Verfahren zur Anzeigesteuerung von unterschiedlichen Informationen in einem Fahrzeug und optoakustische Informationseinheit
EP04786169A EP1658191B1 (de) 2003-08-27 2004-08-24 Verfahren zur anzeigesteuerung von unterschiedlichen informationen in einem fahrzeug und optoakustische informationseinheit
PCT/DE2004/001870 WO2005021314A1 (de) 2003-08-27 2004-08-24 Verfahren zur anzeigesteuerung von unterschiedlichen informationen in einem fahrzeug und optoakustische informationseinheit
DE502004007688T DE502004007688D1 (de) 2003-08-27 2004-08-24 Verfahren zur anzeigesteuerung von unterschiedlichen informationen in einem fahrzeug und optoakustische informationseinheit
US10/569,933 US20090040196A1 (en) 2003-08-27 2004-08-24 Method of controlling the display of various data in a vehicle and Opto-acoustic data unit
AT04786169T ATE402037T1 (de) 2003-08-27 2004-08-24 Verfahren zur anzeigesteuerung von unterschiedlichen informationen in einem fahrzeug und optoakustische informationseinheit

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE10339314A DE10339314B3 (de) 2003-08-27 2003-08-27 Verfahren zur Anzeigesteuerung von unterschiedlichen Informationen in einem Fahrzeug und optoakustische Informationseinheit

Publications (1)

Publication Number Publication Date
DE10339314B3 true DE10339314B3 (de) 2005-04-21

Family

ID=34258232

Family Applications (2)

Application Number Title Priority Date Filing Date
DE10339314A Expired - Fee Related DE10339314B3 (de) 2003-08-27 2003-08-27 Verfahren zur Anzeigesteuerung von unterschiedlichen Informationen in einem Fahrzeug und optoakustische Informationseinheit
DE502004007688T Expired - Lifetime DE502004007688D1 (de) 2003-08-27 2004-08-24 Verfahren zur anzeigesteuerung von unterschiedlichen informationen in einem fahrzeug und optoakustische informationseinheit

Family Applications After (1)

Application Number Title Priority Date Filing Date
DE502004007688T Expired - Lifetime DE502004007688D1 (de) 2003-08-27 2004-08-24 Verfahren zur anzeigesteuerung von unterschiedlichen informationen in einem fahrzeug und optoakustische informationseinheit

Country Status (5)

Country Link
US (1) US20090040196A1 (de)
EP (1) EP1658191B1 (de)
AT (1) ATE402037T1 (de)
DE (2) DE10339314B3 (de)
WO (1) WO2005021314A1 (de)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1795398A1 (de) * 2005-12-09 2007-06-13 Olympus Corporation Informationswiedergabevorrichtung in einem Fahrzeug
DE102006011288A1 (de) * 2006-03-10 2007-09-13 Siemens Ag Verfahren zur Auswahl von Funktionen mithilfe einer Benutzerschnittstelle und Benutzerschnittstelle
DE102007005028A1 (de) 2007-02-01 2008-08-07 Volkswagen Ag Verfahren und Vorrichtung zum Wiedergeben von Information auf einer Projektionsfläche in einem Fahrzeug
DE102009008492A1 (de) * 2009-02-11 2010-08-19 Audi Ag Kraftfahrzeug mit einer Wiedergabeeinrichtung zur in Abhängigkeit der erfassten Sitzposition des Fahrers steuerbare Wiedergabe von Bildinformationen
DE102012201805A1 (de) 2012-02-07 2013-08-08 Robert Bosch Gmbh Vorrichtung und Verfahren zum Bestimmen eines Kompensationsparameters für ein Übersprechen bei einem mehrsichtbetriebsfähigen Anzeigegerät
DE102014204800A1 (de) * 2014-03-14 2015-09-17 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zum Bereitstellen einer graphischen Nutzerschnittstelle in einem Fahrzeug
DE102015111909A1 (de) 2015-07-22 2017-01-26 Deutsches Zentrum für Luft- und Raumfahrt e.V. Verfahren und Vorrichtung zum Hinweisen eines Piloten auf relevante Fluginformationen in Abhängigkeit von seiner Augentätigkeit
DE102015222388A1 (de) * 2015-11-13 2017-05-18 Bayerische Motoren Werke Aktiengesellschaft Vorrichtung und Verfahren zum Steuern einer Anzeigeeinrichtung in einem Kraftfahrzeug
DE102016013806A1 (de) 2016-11-18 2017-05-24 Daimler Ag System und Verfahren zur Erkennung einer Blickrichtung eines Fahrers in einem Fahrzeug
WO2021122891A1 (de) 2019-12-18 2021-06-24 Continental Automotive Gmbh Verfahren zum betreiben einer anzeigeeinheit eines fahrzeugs und anzeigeeinheit
DE102020211859A1 (de) 2020-09-22 2022-03-24 Volkswagen Aktiengesellschaft Verfahren und Anzeigesystem zum Anzeigen von Informationen für einen Fahrer
DE102021122464A1 (de) 2021-08-31 2023-03-02 Audi Aktiengesellschaft Verfahren zum Einstellen eines Sichtbereichs für einen Bildschirm
DE102013013227B4 (de) 2013-08-08 2024-08-08 Audi Ag Kraftwagen mit Anzeigeeinheit und Sicherung gegen eine Fahrerablenkung

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4628199B2 (ja) * 2005-07-01 2011-02-09 アルパイン株式会社 表示装置
KR20080046286A (ko) * 2005-09-20 2008-05-26 후지쓰 텐 가부시키가이샤 차량 탑재용 표시 장치
US8073492B2 (en) * 2005-10-24 2011-12-06 Broadcom Corporation Simultaneously multi-networked handheld multimedia gateways
JP2007302154A (ja) * 2006-05-12 2007-11-22 Alps Electric Co Ltd 車載用入力装置
JP2007308084A (ja) * 2006-05-22 2007-11-29 Fujitsu Ten Ltd 車載用表示装置及び音響制御方法
DE102007025530A1 (de) * 2007-05-31 2008-12-04 Volkswagen Ag Informationsvermittlungsvorrichtung und Verfahren zur Vermittlung von Informationen
US20100014711A1 (en) * 2008-07-16 2010-01-21 Volkswagen Group Of America, Inc. Method for controlling an illumination in a vehicle interior in dependence on a head pose detected with a 3D sensor
TWI423247B (zh) * 2008-12-26 2014-01-11 Wistron Corp 可切換啟動多視角顯示螢幕之執行程式之影像系統及其方法
FR2941307B1 (fr) * 2009-01-19 2012-03-30 Peugeot Citroen Automobiles Sa Systeme d'affichage d'informations notamment pour vehicule automobile et vehicule automobile comportant un tel systeme d'affichage.
DE102009032069A1 (de) * 2009-07-07 2011-01-13 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zum Bereitstellen einer Benutzerschnittstelle in einem Fahrzeug
US20110144857A1 (en) * 2009-12-14 2011-06-16 Theodore Charles Wingrove Anticipatory and adaptive automobile hmi
CN103124943A (zh) * 2010-06-10 2013-05-29 沃尔沃拉斯特瓦格纳公司 基于车辆的显示系统和用于操作其的方法
EP2420410A1 (de) * 2010-08-19 2012-02-22 Harman Becker Automotive Systems GmbH Verfahren zur Darstellung eines Bildes in einem Fahrzeug
CN102756689A (zh) * 2011-04-29 2012-10-31 昆达电脑科技(昆山)有限公司 消去车辆驾驶者的视觉死角的方法及系统
US9526455B2 (en) * 2011-07-05 2016-12-27 Saudi Arabian Oil Company Systems, computer medium and computer-implemented methods for monitoring and improving health and productivity of employees
US10108783B2 (en) 2011-07-05 2018-10-23 Saudi Arabian Oil Company Systems, computer medium and computer-implemented methods for monitoring health of employees using mobile devices
US9962083B2 (en) 2011-07-05 2018-05-08 Saudi Arabian Oil Company Systems, computer medium and computer-implemented methods for monitoring and improving biomechanical health of employees
AU2012279038B2 (en) 2011-07-05 2015-09-24 Saudi Arabian Oil Company Floor mat system and associated, computer medium and computer-implemented methods for monitoring and improving health and productivity of employees
US10307104B2 (en) 2011-07-05 2019-06-04 Saudi Arabian Oil Company Chair pad system and associated, computer medium and computer-implemented methods for monitoring and improving health and productivity of employees
US9710788B2 (en) 2011-07-05 2017-07-18 Saudi Arabian Oil Company Computer mouse system and associated, computer medium and computer-implemented methods for monitoring and improving health and productivity of employees
US9844344B2 (en) 2011-07-05 2017-12-19 Saudi Arabian Oil Company Systems and method to monitor health of employee when positioned in association with a workstation
US9492120B2 (en) 2011-07-05 2016-11-15 Saudi Arabian Oil Company Workstation for monitoring and improving health and productivity of employees
KR101785618B1 (ko) 2012-02-02 2017-11-06 삼성전자주식회사 멀티심 모바일 단말의 위치 파악 방법 및 장치
CN104169838B (zh) 2012-04-12 2017-07-21 英特尔公司 基于人眼追踪而选择性地使显示器背光
JP5754410B2 (ja) * 2012-04-13 2015-07-29 トヨタ自動車株式会社 表示装置
EP2664476B1 (de) * 2012-05-14 2017-10-11 Volvo Car Corporation Instrumentenclusteranordnung
US8849509B2 (en) * 2012-05-17 2014-09-30 Ford Global Technologies, Llc Method and apparatus for interactive vehicular advertising
TWI471834B (zh) * 2012-11-20 2015-02-01 Wintek Corp 顯示模組
DE102013015291A1 (de) * 2013-09-14 2015-03-19 Man Truck & Bus Ag Verfahren und Vorrichtung zur Anzeige von visuellen Informationen in einem Fahrzeug, insbesondere in einem Nutzfahrzeug
US9722472B2 (en) 2013-12-11 2017-08-01 Saudi Arabian Oil Company Systems, computer medium and computer-implemented methods for harvesting human energy in the workplace
JP2016099477A (ja) * 2014-11-20 2016-05-30 パイオニア株式会社 投影装置、投影方法、プログラムおよび記憶媒体
DE102014225383A1 (de) * 2014-12-10 2016-06-16 Robert Bosch Gmbh Verfahren zum Betreiben eines Kraftfahrzeugs, Kraftfahrzeug
CN104461005B (zh) * 2014-12-15 2018-01-02 东风汽车公司 一种车载屏幕开关控制方法
FR3030386B1 (fr) * 2014-12-22 2018-03-23 Autoliv Development Ab Module d'asistance de volant de vehicule
KR102309316B1 (ko) * 2015-06-02 2021-10-05 엘지전자 주식회사 차량용 디스플레이 장치 및 이를 구비한 차량
US9889311B2 (en) 2015-12-04 2018-02-13 Saudi Arabian Oil Company Systems, protective casings for smartphones, and associated methods to enhance use of an automated external defibrillator (AED) device
US10642955B2 (en) 2015-12-04 2020-05-05 Saudi Arabian Oil Company Devices, methods, and computer medium to provide real time 3D visualization bio-feedback
US10475351B2 (en) 2015-12-04 2019-11-12 Saudi Arabian Oil Company Systems, computer medium and methods for management training systems
US10628770B2 (en) 2015-12-14 2020-04-21 Saudi Arabian Oil Company Systems and methods for acquiring and employing resiliency data for leadership development
KR20180051842A (ko) * 2016-11-09 2018-05-17 엘지전자 주식회사 디스플레이 장치 및 디스플레이 제어 방법
DE102016224235A1 (de) 2016-12-06 2018-06-07 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zur Anpassung der Darstellung von Bild- und/oder Bedienelementen auf einer grafischen Benutzerschnittstelle
EP3342619A1 (de) * 2016-12-27 2018-07-04 Volkswagen Aktiengesellschaft Anwenderschnittstellen, computerprogrammprodukt, signalfolge, fortbewegungsmittel und verfahren zum anzeigen von informationen auf einer anzeigeeinrichtung
EP3409629B2 (de) * 2017-06-01 2024-02-28 Otis Elevator Company Bildanalytik zur aufzugswartung
US10824132B2 (en) 2017-12-07 2020-11-03 Saudi Arabian Oil Company Intelligent personal protective equipment
US10870556B2 (en) * 2017-12-12 2020-12-22 Otis Elevator Company Method and system for detecting elevator car operating panel condition
US10961082B2 (en) 2018-01-02 2021-03-30 Otis Elevator Company Elevator inspection using automated sequencing of camera presets
US10941018B2 (en) * 2018-01-04 2021-03-09 Otis Elevator Company Elevator auto-positioning for validating maintenance
JP6737370B2 (ja) * 2019-03-25 2020-08-05 日本精機株式会社 投影装置
CN110126740A (zh) * 2019-05-29 2019-08-16 辽宁科大物联科技有限公司 一种汽车电子后视镜的控制方法及装置
CN213056885U (zh) * 2020-08-11 2021-04-27 上海商汤临港智能科技有限公司 车辆

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19951001A1 (de) * 1999-10-22 2001-05-31 Bosch Gmbh Robert Vorrichtung zur Darstellung von Informationen in einem Fahrzeug
DE10121392A1 (de) * 2001-05-02 2002-11-21 Bosch Gmbh Robert Vorrichtung zur Steuerung von Geräten mittels Blickrichtung

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3513664B2 (ja) * 1993-10-04 2004-03-31 本田技研工業株式会社 車両用情報表示装置
JPH1166320A (ja) * 1997-08-12 1999-03-09 Mitsubishi Electric Corp 目画像追跡装置
DE19736995B4 (de) * 1997-08-26 2009-05-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung zum Bestimmen eines Fixationspunktes
US6200139B1 (en) * 1999-02-26 2001-03-13 Intel Corporation Operator training system
DE19953835C1 (de) * 1999-10-30 2001-05-23 Hertz Inst Heinrich Rechnerunterstütztes Verfahren zur berührungslosen, videobasierten Blickrichtungsbestimmung eines Anwenderauges für die augengeführte Mensch-Computer-Interaktion und Vorrichtung zur Durchführung des Verfahrens
US6663491B2 (en) * 2000-02-18 2003-12-16 Namco Ltd. Game apparatus, storage medium and computer program that adjust tempo of sound
JP3790680B2 (ja) * 2001-05-25 2006-06-28 株式会社東芝 画像処理システム及びこれを用いた運転支援システム
JP4425496B2 (ja) * 2001-07-03 2010-03-03 アルパイン株式会社 表示装置
GB0119176D0 (en) * 2001-08-06 2001-09-26 Ocuity Ltd Optical switching apparatus
US6926429B2 (en) * 2002-01-30 2005-08-09 Delphi Technologies, Inc. Eye tracking/HUD system
US7197165B2 (en) * 2002-02-04 2007-03-27 Canon Kabushiki Kaisha Eye tracking using image data
JP3909251B2 (ja) * 2002-02-13 2007-04-25 アルパイン株式会社 視線を用いた画面制御装置
US6873714B2 (en) * 2002-02-19 2005-03-29 Delphi Technologies, Inc. Auto calibration and personalization of eye tracking system using larger field of view imager with higher resolution
AU2003214595A1 (en) * 2002-03-07 2003-09-16 Yechezkal Evan Spero Enhanced vision for driving
US6927674B2 (en) * 2002-03-21 2005-08-09 Delphi Technologies, Inc. Vehicle instrument cluster having integrated imaging system
US6668221B2 (en) * 2002-05-23 2003-12-23 Delphi Technologies, Inc. User discrimination control of vehicle infotainment system
JPWO2004011987A1 (ja) * 2002-07-29 2005-11-24 シャープ株式会社 視差バリア層付き基板および視差バリア層付き基板の製造方法ならびに３次元表示装置
JP2004067031A (ja) * 2002-08-08 2004-03-04 Nissan Motor Co Ltd 操作者判別装置およびこれを用いた車載装置
CN100339249C (zh) * 2002-08-19 2007-09-26 皇家飞利浦电子股份有限公司 在交通工具内显示图像的显示系统
US7202792B2 (en) * 2002-11-11 2007-04-10 Delphi Technologies, Inc. Drowsiness detection system and method
US6859144B2 (en) * 2003-02-05 2005-02-22 Delphi Technologies, Inc. Vehicle situation alert system with eye gaze controlled alert signal generation
US6842670B2 (en) * 2003-05-02 2005-01-11 Chung Shan Institute Of Science And Technology Eye-tracking driving system

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19951001A1 (de) * 1999-10-22 2001-05-31 Bosch Gmbh Robert Vorrichtung zur Darstellung von Informationen in einem Fahrzeug
DE10121392A1 (de) * 2001-05-02 2002-11-21 Bosch Gmbh Robert Vorrichtung zur Steuerung von Geräten mittels Blickrichtung

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1972502A1 (de) * 2005-12-09 2008-09-24 Olympus Corporation Informationswiedergabevorrichtung in einem Fahrzeug
EP1795398A1 (de) * 2005-12-09 2007-06-13 Olympus Corporation Informationswiedergabevorrichtung in einem Fahrzeug
DE102006011288A1 (de) * 2006-03-10 2007-09-13 Siemens Ag Verfahren zur Auswahl von Funktionen mithilfe einer Benutzerschnittstelle und Benutzerschnittstelle
DE102007005028B4 (de) 2007-02-01 2022-10-27 Volkswagen Ag Verfahren und Vorrichtung zum Wiedergeben von Information auf einer Projektionsfläche in einem Fahrzeug
DE102007005028A1 (de) 2007-02-01 2008-08-07 Volkswagen Ag Verfahren und Vorrichtung zum Wiedergeben von Information auf einer Projektionsfläche in einem Fahrzeug
DE102009008492A1 (de) * 2009-02-11 2010-08-19 Audi Ag Kraftfahrzeug mit einer Wiedergabeeinrichtung zur in Abhängigkeit der erfassten Sitzposition des Fahrers steuerbare Wiedergabe von Bildinformationen
DE102012201805A1 (de) 2012-02-07 2013-08-08 Robert Bosch Gmbh Vorrichtung und Verfahren zum Bestimmen eines Kompensationsparameters für ein Übersprechen bei einem mehrsichtbetriebsfähigen Anzeigegerät
DE102013013227B4 (de) 2013-08-08 2024-08-08 Audi Ag Kraftwagen mit Anzeigeeinheit und Sicherung gegen eine Fahrerablenkung
DE102014204800A1 (de) * 2014-03-14 2015-09-17 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zum Bereitstellen einer graphischen Nutzerschnittstelle in einem Fahrzeug
US10592078B2 (en) 2014-03-14 2020-03-17 Volkswagen Ag Method and device for a graphical user interface in a vehicle with a display that adapts to the relative position and operating intention of the user
DE102015111909A1 (de) 2015-07-22 2017-01-26 Deutsches Zentrum für Luft- und Raumfahrt e.V. Verfahren und Vorrichtung zum Hinweisen eines Piloten auf relevante Fluginformationen in Abhängigkeit von seiner Augentätigkeit
DE102015111909B4 (de) 2015-07-22 2019-10-02 Deutsches Zentrum für Luft- und Raumfahrt e.V. Verfahren und Vorrichtung zum Hinweisen eines Piloten auf relevante Fluginformationen in Abhängigkeit von seiner Augentätigkeit
DE102015222388A1 (de) * 2015-11-13 2017-05-18 Bayerische Motoren Werke Aktiengesellschaft Vorrichtung und Verfahren zum Steuern einer Anzeigeeinrichtung in einem Kraftfahrzeug
US11623516B2 (en) 2015-11-13 2023-04-11 Bayerische Motoren Werke Aktiengesellschaft Device and method for controlling a display device in a motor vehicle
DE102016013806B4 (de) 2016-11-18 2018-12-20 Daimler Ag System und Verfahren zur Erkennung einer Blickrichtung eines Fahrers in einem Fahrzeug
DE102016013806A1 (de) 2016-11-18 2017-05-24 Daimler Ag System und Verfahren zur Erkennung einer Blickrichtung eines Fahrers in einem Fahrzeug
DE102019220012A1 (de) * 2019-12-18 2021-06-24 Continental Automotive Gmbh Verfahren zum Betreiben einer Anzeigeeinheit eines Fahrzeugs und Anzeigeeinheit
WO2021122891A1 (de) 2019-12-18 2021-06-24 Continental Automotive Gmbh Verfahren zum betreiben einer anzeigeeinheit eines fahrzeugs und anzeigeeinheit
DE102020211859A1 (de) 2020-09-22 2022-03-24 Volkswagen Aktiengesellschaft Verfahren und Anzeigesystem zum Anzeigen von Informationen für einen Fahrer
DE102021122464A1 (de) 2021-08-31 2023-03-02 Audi Aktiengesellschaft Verfahren zum Einstellen eines Sichtbereichs für einen Bildschirm
WO2023030826A1 (de) 2021-08-31 2023-03-09 Audi Ag Verfahren zum einstellen eines sichtbereichs für einen bildschirm
DE102021122464B4 (de) 2021-08-31 2023-05-25 Audi Aktiengesellschaft Verfahren zum Einstellen eines Sichtbereichs für einen Bildschirm

Also Published As

Publication number Publication date
EP1658191A1 (de) 2006-05-24
US20090040196A1 (en) 2009-02-12
DE502004007688D1 (de) 2008-09-04
WO2005021314A1 (de) 2005-03-10
ATE402037T1 (de) 2008-08-15
EP1658191B1 (de) 2008-07-23

Similar Documents

Publication Publication Date Title
DE10339314B3 (de) Verfahren zur Anzeigesteuerung von unterschiedlichen Informationen in einem Fahrzeug und optoakustische Informationseinheit
EP1783531B1 (de) Projektionsanzeige
DE102004050181B4 (de) Aktives Nachtsichtsystem mit adaptiver Bildgebung
DE102007044535B4 (de) Verfahren zur Fahrerinformation in einem Kraftfahrzeug
DE102016213687B4 (de) Verfahren zum Steuern einer Anzeigevorrichtung für ein Kraftfahrzeug, Anzeigevorrichtung für ein Kraftfahrzeug und Kraftfahrzeug mit einer Anzeigevorrichtung
DE102015219111B4 (de) Fahrerassistenzsystem und Verfahren zur Anpassung der Beleuchtung von Bedienelementen bei Kraftfahrzeugen
DE112015002481T5 (de) Head-up-Display-Vorrichtung
DE102015215180A1 (de) Blickabhängige Einstellung der Helligkeit der Anzeige eines Head-Up-Displays
DE102017103282A1 (de) Anzeigesteuerung für ein fahrzeug
DE202014102291U1 (de) Rückspiegelposition verwendendes Rücksichtkamerasystem
DE102007047643A1 (de) Vorrichtung zum Erfassen eines Augenzustands und Verfahren zum Anbringen derselben
DE10261291A1 (de) Anzeigeeinrichtung für ein Fahrzeug
DE19921488A1 (de) Verfahren und Vorrichtung zur Überwachung des Innenraums und des Umfeldes eines Fahrzeugs
DE10257484B4 (de) Vorrichtung und Verfahren zum Darstellen der Umgebung eines Fahrzeugs
JP2004058828A (ja) 車両前方表示システム
DE10203413A1 (de) Automobiles Infrarot-Nachtsichtgerät
DE102012019508A1 (de) Kraftfahrzeug mit Umgebungssensor und Display
DE102012020170A1 (de) Anzeigesystem zum elektronischen Anzeigen eines rückwärtigen Bereichs eines Kraftfahrzeugs sowie Verfahren zum Betreiben eines Anzeigesystems
DE102004034532B4 (de) Verfahren zur Kennzeichnung von Bildinformationen in der Darstellung eines mit einer fahrzeugseitigen Bildaufnahmeeinrichtung aufgenommenen Nachtsichtbildes und zugehöriges Nachtsichtsystem
DE102015118977A1 (de) Erfassungsvorrichtung für ein Kraftfahrzeug, Fahrerassistenzsystem sowie Kraftfahrzeug
DE102004034358B4 (de) Vorrichtung und Verfahren zur Darstellung von Informationen in einem Kraftfahrzeug
DE102019004692B3 (de) Vorrichtung und Verfahren zur Ermittlung von Bilddaten der Augen, von Augenpositionen und/oder einer Blickrichtung eines Fahrzeugnutzers in einem Fahrzeug
DE102016224235A1 (de) Verfahren und Vorrichtung zur Anpassung der Darstellung von Bild- und/oder Bedienelementen auf einer grafischen Benutzerschnittstelle
DE102019220012A1 (de) Verfahren zum Betreiben einer Anzeigeeinheit eines Fahrzeugs und Anzeigeeinheit
DE19921997A1 (de) Verfahren zur Steuerung der Leuchtdichte einer Anzeigeeinheit in einem Fahrzeug und Vorrichtung zu dessen Ausführung

Legal Events

Date Code Title Description
8100 Publication of patent without earlier publication of application
8322 Nonbinding interest in granting licences declared
8364 No opposition during term of opposition
8320 Willingness to grant licences declared (paragraph 23)
R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee

Effective date: 20120301