DE102014118798A1 - System und Verfahren zur Blickverfolgung - Google Patents

System und Verfahren zur Blickverfolgung Download PDF

Info

Publication number
DE102014118798A1
DE102014118798A1 DE102014118798.9A DE102014118798A DE102014118798A1 DE 102014118798 A1 DE102014118798 A1 DE 102014118798A1 DE 102014118798 A DE102014118798 A DE 102014118798A DE 102014118798 A1 DE102014118798 A1 DE 102014118798A1
Authority
DE
Germany
Prior art keywords
feature
user
function
gaze
operating mode
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
DE102014118798.9A
Other languages
English (en)
Inventor
Theodore C. Wingrove
Paul A. Morris
Kyle Entsminger
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Visteon Global Technologies Inc
Original Assignee
Visteon Global Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from US14/559,561 external-priority patent/US20150185834A1/en
Application filed by Visteon Global Technologies Inc filed Critical Visteon Global Technologies Inc
Publication of DE102014118798A1 publication Critical patent/DE102014118798A1/de
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146Instrument input by gesture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146Instrument input by gesture
    • B60K2360/14643D-gesture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149Instrument input by detecting viewing direction not otherwise provided for

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Offenbart werden ein System und Verfahren zur Blickverfolgung. Das System weist eine Verfolgungsvorrichtung zum Erkennen eines Blicks auf, der einem Benutzer zugeordnet ist, entweder auf ein erstes Funktionsmerkmal oder ein zweites Funktionsmerkmal; und eine Steuereinrichtung, die dazu konfiguriert ist, auf Grundlage einer Erkennung des Blicks auf ein erstes Funktionsmerkmal, einen Betriebsmodus einer ersten Funktion zuzuordnen, und dazu konfiguriert ist auf Grundlage einer Erkennung des Blicks auf das zweite Funktionsmerkmal, den Betriebsmodus einer zweiten Funktion zuzuordnen.

Description

  • PRIORITÄTSANSPRUCH
  • Diese Patentanmeldung beansprucht Priorität gegenüber der vorläufigen US-Patentanmeldung Nr. 61/921,015, eingereicht am 26. Dezember 2013, mit der Bezeichnung „System and Method of Gaze Tracking”, die derzeit anhängig ist. Diese Patentanmeldung enthält die gesamte ausführliche Beschreibung der US-Patentanmeldung Nr. 61/921,015.
  • ALLGEMEINER STAND DER TECHNIK
  • Benutzereingaberegelungen für bestimmte Funktionsmerkmale in einer intelligenten Vorrichtung sind bestimmten Funktionen zugewiesen, und eine Benutzereingabe ist erforderlich, um die bestimmte Funktion einer anderen Funktion zuzuweisen. Beispielsweise kann eine Lautstärketaste, die sich an einem Smartphone auf- und abwärts bewegen kann, dazu verwendet werden, die zugewiesene Lautstärke eines Klingeltons zu ändern, oder sie kann dazu verwendet werden, die derzeitige Wiedergabelautstärke von Musik von einer Media-Player-Anwendung zu ändern. Der Benutzer muss mittels Berührung oder Sprachbefehl mit der Anwendung interagieren, um die Funktion des Funktionsmerkmals zu ändern.
  • Ebenso werden verschiedene Funktionsmerkmale in einem Fahrzeug über ihre eigene spezielle Funktion oder Schaltfläche, Taste oder Benutzerschnittstelle geregelt und eingestellt. Beispielsweise wird die Radiolautstärke durch eine Lautstärke-Drucktaste oder einen Drehregler eingestellt, während eine Klimatisierungseinheit von einem anderen Drehregler oder einer anderen Drucktaste eingestellt wird. Außerdem kann der Benutzer in einigen Fällen die Möglichkeit erhalten, verschiedene Funktionsmerkmale über verschiedene Menüs auf einer Benutzerschnittstelle zu regeln, ein bestimmtes Funktionsmerkmal auszuwählen und das Funktionsmerkmal auf einem Berührungsbildschirm mit virtuellen Drucktasten oder anderen Eingabeelementen einzustellen. Wie die intelligente Vorrichtung interagiert der Benutzer in beiden Fällen mit einer Anwendung [durch] physische Eingabe, um ein Funktionsmerkmal zu regeln und einzustellen.
  • Solche physischen Interaktionen wie etwa das Durchblättern verschiedener Menüs zum Einstellen einer Anzahl von Funktionsmerkmalen werden für die Benutzer während des Fahrens immer schwieriger. Darüber hinaus haben diese physischen Interaktionen dazu geführt, dass abgelenkte Fahrer auf der Straße zwischen mehreren Schnittstellen wechseln mussten, um Funktionsmerkmale einzustellen, und zwischen mehreren Knöpfen oder Tasten zum Regeln und Einstellen bestimmter Funktionsmerkmale wechseln mussten.
  • KURZDARSTELLUNG
  • Der Aspekt der vorliegenden Offenbarung stellt ein Blickverfolgungssystem zum Einstellen eines Fahrzeugfunktionsmerkmals und ein Verfahren zum Einstellen eines Funktionsmerkmals in einem Fahrzeug mittels Blickverfolgung bereit. Das Blickverfolgungssystem verwendet eine Verfolgungsvorrichtung, eine Steuereinrichtung, eine Benutzerschnittstelle und eine Eingabevorrichtung.
  • In einem Aspekt kann das Blickverfolgungssystem eine Verfolgungsvorrichtung zum Erkennen der Bewegung und Richtung der Augen eines Benutzers an einem Funktionsmerkmal im Fahrzeug nach einer vorgegebenen Zeitspanne aufweisen. Die Verfolgungsvorrichtung kann kommunizierend mit einer Steuereinrichtung verbunden sein. Die Steuereinrichtung kann dazu konfiguriert sein, von der Verfolgungsvorrichtung ein Ausgangssignal zu empfangen, das die Bewegung und Richtung der Augen des Benutzers angibt, und kann auch dazu konfiguriert sein, ein Funktionsmerkmal auf Grundlage des Ausgangs des Sensors zu regeln und einzustellen. Das Blickverfolgungssystem kann ferner eine Benutzerschnittstelle aufweisen, die kommunizierend mit der Steuereinrichtung verbunden ist, um ein Bild zum Einstellen und Regeln des ausgewählten Funktionsmerkmals anzuzeigen. Außerdem kann das Blickverfolgungssystem eine Eingabevorrichtung aufweisen, die dazu konfiguriert ist, das ausgewählte Funktionsmerkmal den Wünschen des Benutzers entsprechend einzustellen.
  • In einem weiteren Aspekt schließt das Verfahren zum Einstellen eines Funktionsmerkmals in einem Fahrzeug mittels Blickverfolgung das Erkennen der Bewegung und Richtung des Blicks eines Benutzers über eine Verfolgungsvorrichtung ein. Wenn die Bewegung und Richtung des Blicks des Benutzers erkannt wurden, aktiviert die Steuereinrichtung auf Grundlage des Blicks des Benutzers das Funktionsmerkmal als das festgelegte Funktionsmerkmal, das geregelt werden soll. Das Verfahren schließt ferner das Einstellen des vom Blick des Benutzers aktivierten Funktionsmerkmals mithilfe einer Eingabevorrichtung ein.
  • Die Aspekte der vorliegenden Offenbarung stellen verschiedene Vorteile bereit. Beispielsweise muss der Benutzer nicht mehr mit physischen Eingabereglern interagieren, um das Menü oder Funktionsmerkmal zu aktivieren, innerhalb dessen der Benutzer eine Regelung durchführen will. Der Benutzer muss nicht mehr mit mehreren physischen Eingabereglern interagieren, um ein einzelnes Funktionsmerkmal oder mehrere Funktionsmerkmale im Fahrzeug zu regeln. Stattdessen muss der Benutzer nur eine einzige Eingabevorrichtung verwenden, um mehrere Funktionsmerkmale im Fahrzeug zu regeln. Darüber hinaus ist der Benutzer während des Fahrens weniger abgelenkt, wenn er versucht, mehrere Eingaberegler zu verwenden, um ein Funktionsmerkmal zu regeln und einzustellen.
  • KURZE BESCHREIBUNG DER ZEICHNUNGEN
  • Weitere Vorteile der vorliegenden Offenbarung werden ohne Weiteres deutlich, indem ihr Verständnis durch Bezugnahme auf die nachfolgende detaillierte Beschreibung in Verbindung mit den begleitenden Zeichnungen vertieft wird; es zeigen:
  • 1 ein Beispiel einer Darstellung eines Benutzers, der ein Blickverfolgungssystem zum Einstellen eines Funktionsmerkmals in einem Fahrzeug benutzt, gemäß der vorliegenden Offenbarung;
  • 2 ein Beispiel eines Blockdiagrams des Blickverfolgungssystems gemäß der vorliegenden Offenbarung; und
  • 3 ein Beispiel eines Ablaufdiagramms eines Verfahrens zum Einstellen eines Funktionsmerkmals in einem Fahrzeug mittels Blickverfolgung, gemäß der vorliegenden Offenbarung.
  • 4(a), (b) und (c) stellen eine Beispielimplementierung des Blickverfolgungssystems aus 2 dar, das in einem Fahrzeug implementiert ist.
  • AUSFÜHRLICHE BESCHREIBUNG
  • Es werden detaillierte Beispiele der vorliegenden Offenbarung bereitgestellt; allerdings versteht es sich, dass die offenbarten Beispiele nur beispielhaft sind und in verschiedenen und alternativen Formen ausgeführt werden können. Es ist nicht vorgesehen, dass diese Beispiele alle möglichen Formen der Offenbarung veranschaulichen und beschreiben. Vielmehr sind die in der Beschreibung verwendeten Begriffe beschreibende, aber keine einschränkenden Begriffe, und es versteht sich, dass verschiedene Änderungen vorgenommen werden können, ohne vom Geist und Umfang der Offenbarung abzuweichen.
  • Die hier offenbarten Aspekte stellen ein Blickverfolgungssystem ein Verfahren zum Einstellen eines Fahrzeugfunktionsmerkmals und ein Verfahren zum Einstellen eines Funktionsmerkmals in einem Fahrzeug mittels Blickverfolgung bereit. Das Blickverfolgungssystem nutzt eine Verfolgungsvorrichtung, eine Steuereinrichtung, eine grafische Benutzerschnittstelle 26 und eine Eingabevorrichtung.
  • 1 ist eine Darstellung eines Benutzers 10, der ein Blickverfolgungssystem 12 zum Einstellen eines Funktionsmerkmals 14 in einem Fahrzeug 16 benutzt, gemäß der vorliegenden Offenbarung. Wie in 1 gezeigt, kann ein Benutzer 10 ein Funktionsmerkmal 14 zum Einstellen aktivieren, etwa eine Temperaturregelungseinheit und insbesondere die Temperatur und Gebläsedrehzahl der Einheit. Der Benutzer 10 kann für eine vorgegebene Zeitspanne das Funktionsmerkmal 14 anvisieren oder darauf schauen, um das Funktionsmerkmal 14, beispielsweise Funktionsmerkmal „A” 14, zu steuern. Wenn der Benutzer 10 für die vorgegebene Zeitspanne auf das Funktionsmerkmal „A” 14 schaut, das ein Regler zum Einstellen der Temperatur sein kann, kann das Blickverfolgungssystem 12 erkennen, dass der Benutzer 10 möglicherweise die Temperatur einstellen möchte, und das System 12 kann es dem Benutzer 10 ermöglichen, das ausgewählte Funktionsmerkmal 14 mithilfe einer Eingabevorrichtung 20 wie etwa einem Wechselschalter einzustellen, wie in 1 gezeigt.
  • In 1 ist das Funktionsmerkmal „A” 14 an zwei getrennten Positionen gezeigt. Das Blickverfolgungssystem 12 kann eine genaue Position betrachten, auf die der Blick gerichtet ist, wobei dem Blick eine X- und Y-Koordinate zugeordnet ist, und den genauen Punkt triangulieren, auf den der Blick gerichtet ist.
  • Außerdem kann ein Funktionsmerkmal in ein erstes Funktionsmerkmal eingebettet sein. Beispielsweise kann das Blickverfolgungssystem 12 feststellen, dass ein Benutzer auf ein Radio schaut, und dann triangulieren, auf welchen Teil des Radios der Benutzer schaut (d. h. die Titelauswahl, die Lautstärke, die Höhen-/Tiefeneinstellung usw.). Auf diese Weise ist die Funktionsmerkmalerkennung nicht auf eine allgemeine Zone in einer einzelnen Richtung beschränkt.
  • Ferner sind zwei Funktionsmerkmale gezeigt. Die Anzahl der implementierten Funktionsmerkmale ist jedoch nicht auf zwei beschränkt.
  • Die Eingabevorrichtung 20 oder der Wechselschalter kann eine Aufwärts- /Abwärtsfunktion aufweisen. Außerdem kann sich die Funktion der Eingabevorrichtung 20 oder des Wechselschalters abhängig vom optischen Ziel oder Funktionsmerkmal 14 ändern, das der Benutzer 10 anvisiert.
  • Wenn der Benutzer 10 etwa auf das Funktionsmerkmal „A” 14 für Temperatur schaut, kann der Wechselschalter die Temperatur einstellen. Wenn der Benutzer alternativ das Funktionsmerkmal B betrachtet und die Gebläsedrehzahl einer Temperaturregelungseinheit einstellen möchte, kann der Wechselschalter die Gebläsedrehzahl einstellen. Außerdem kann der Benutzer 10 zunächst das Funktionsmerkmal „A” 14 zum Einstellen der Temperatur des Fahrzeugs 16 mithilfe des Wechselschalters anvisieren, und nach dem Einstellen der Temperatur des Fahrzeugs 16 kann der Benutzer 10 auf das Funktionsmerkmal B schauen, um die Gebläsedrehzahl einzustellen. Wenn der Benutzer 10 das Funktionsmerkmal B anvisiert, kann der Benutzer 10 mit dem Wechselschalter nicht mehr die Temperatur des Fahrzeugs 16 ändern, der nun dazu konfiguriert sein kann, das Funktionsmerkmal „B” oder die Gebläsedrehzahl des Temperatursteuermoduls einzustellen.
  • Unter Bezugnahme auf 2 wird ein Blockdiagramm eines Blickverfolgungssystems 12 gemäß der vorliegenden Offenbarung bereitgestellt. Das Blickverfolgungssystem 12 kann eine Verfolgungsvorrichtung 22 zum Erkennen der Bewegung oder Richtung der Augen eines Benutzers 10 an einem Funktionsmerkmal 14 im Fahrzeug 16 nach einer vorgegebenen Zeitspanne aufweisen.
  • In einem Beispiel kann die Verfolgungsvorrichtung 22 ein Sensor sein. Insbesondere kann der Sensor ein Infrarotsensor oder ein anderer Sensor sein, der dazu konfiguriert ist, der Bewegung des Auges eines Benutzers 10 zu folgen. Außerdem kann der Sensor eine Vielzahl von Sensoren zum Verfolgen der beiden Augen des Benutzers 10 sein. Beispielsweise kann der Sensor zwei Infrarotsensoren aufweisen, die jeweils einzeln eines der Augen des Benutzers 10 verfolgen können oder die Bewegungen beider Augen des Benutzers 10 zugleich zu verfolgen. Die Vielzahl von Sensoren kann dazu benutzt werden, die Genauigkeit der Verfolgung der Bewegung oder Richtung der Augen des Benutzers 10 zu gewährleisten.
  • Die Verfolgungsvorrichtung 22 ist nicht auf einen Sensorentyp beschränkt. In einem anderen Beispiel kann die Verfolgungsvorrichtung 22 auch, ohne darauf beschränkt zu sein, eine Kamera, eine Vielzahl von Kameras oder eine Kombination von Sensoren und Kameras sein.
  • Das Blickverfolgungssystem 12 kann auch eine Steuereinrichtung 24 aufweisen. Die Steuereinrichtung 24 kann kommunizierend mit der Verfolgungsvorrichtung 22 verbunden sein. Die Verfolgungsvorrichtung 22 kann eine drahtgebundene oder drahtlose Verbindung zur Steuereinrichtung 24 aufweisen. Die Steuereinrichtung 24 kann eine beliebige Kombination aus Speicher, wie etwa Schreib- /Lesespeicher (RAM) oder Lesespeicher (ROM), Verarbeitungsressourcen oder einen Mikrocontroller oder eine Zentralverarbeitungseinheit (CPU) oder Hardware- oder Softwaresteuerlogik aufweisen, um die Verwaltung der Steuereinrichtung 24 zu ermöglichen.
  • Außerdem kann die Steuereinrichtung 24 einen oder mehrere drahtlose, drahtgebundene oder in beliebiger Kombination davon vorliegende Kommunikationsanschlüsse zum Kommunizieren mit externen Ressourcen sowie verschiedene Eingabe- und Ausgabevorrichtungen (E/A-Vorrichtungen), wie etwa eine Tastatur, eine Maus, Zeiger, Berührungssteuerungen und Anzeigevorrichtungen aufweisen. Die Steuereinrichtung 24 kann auch einen oder mehrere Datenbusse aufweisen, die betriebsfähig sind, um Kommunikation von Verwaltungsinformationen zwischen verschiedenen Hardwarekomponenten zu übertragen, und kann mithilfe von Drahtleitungskommunikationsdatenbussen, drahtloser Netzwerkkommunikation oder einer beliebigen Kombination davon kommunizieren. Die Steuereinrichtung 24 kann dazu konfiguriert sein, von der Verfolgungsvorrichtung 22 ein Ausgangssignal zu empfangen, das die Bewegung und Richtung des Auges eines Benutzers 10 anzeigt.
  • Die Steuereinrichtung 24 aus 2 kann auch dazu konfiguriert sein, ein Funktionsmerkmal 14 auf Grundlage der Ausgabe des Sensors zu regeln und einzustellen. Mit anderen Worten, die Steuereinrichtung 24 kann ein Funktionsmerkmal 14 im Fahrzeug 16 auf Grundlage der Richtung der Augen des Benutzers 10regeln und einstellen. Wenn der Sensor beispielsweise erkennt, dass der Benutzer 10 die Radiolautstärke anvisiert, kann die Steuereinrichtung 24 dazu konfiguriert sein, festzustellen, dass der Benutzer 10 die Radiolautstärke anvisiert, und kann dazu konfiguriert sein, die Radiolautstärke gemäß den Wünschen des Benutzers 10 zu regeln und einzustellen. Die Steuereinrichtung 24 kann Hardware, Software oder eine Kombination aus Hardware und Software verwenden, um das Funktionsmerkmal 14 automatisch gemäß dem Blick des Benutzers 10 zu regeln und einzustellen.
  • Das Blickverfolgungssystem 12 kann auch (ohne darauf beschränkt zu sein) eine grafische Benutzerschnittstelle 26 aufweisen, die kommunizierend mit der Steuereinrichtung 24 verbunden ist. Die grafische Benutzerschnittstelle 26 kann dazu konfiguriert sein, verschiedene Menüs von verschiedenen Funktionsmerkmalen 14 im Fahrzeug 16 anzuzeigen, wie etwa, ohne darauf beschränkt zu sein, Radio, Satellitenradio, MP3, Klimaanlage, GPS und Telefon. Die grafische Benutzerschnittstelle 26 kann einen Berührungsbildschirm und Drucktasten zum Auswählen verschiedener Funktionsmerkmale 14 aufweisen. Außerdem kann die grafische Benutzerschnittstelle 26 dazu konfiguriert sein, dem Benutzer 10 das Funktionsmerkmal 14, das der Benutzer 10 anvisiert, optisch anzuzeigen. Wenn der Benutzer 10 beispielsweise die Temperaturanzeige im Fahrzeug 16 anvisiert, kann die grafische Benutzerschnittstelle 26 die virtuelle Temperaturanzeige anzeigen. Alternativ kann die grafische Benutzerschnittstelle 26 einen Bildschirm zum Einstellen und Regeln der Temperaturanzeige anzeigen. Mit anderen Worten, die grafische Benutzerschnittstelle 26 kann die aktuelle Temperatur im Fahrzeug 16 anzeigen und kann die Anzeige zum Einstellen des Fahrzeugs 16 anzeigen.
  • 2 weist ferner eine Eingabevorrichtung 20 auf. Die Eingabevorrichtung 20 kann kommunizierend mit der Steuereinrichtung 24 verbunden sein und kann dazu konfiguriert sein, das auf Grundlage des vom Sensor erkannten Blicks des Benutzers 10 ausgewählte Funktionsmerkmal 14 zu regeln. Die Eingabevorrichtung 20 kann auch kommunizierend mit einem beliebigen Funktionsmerkmal 14 im Fahrzeug 16 verbunden sein. Die Eingabevorrichtung 20 kann eine drahtgebundene Verbindung oder eine drahtlose Verbindung aufweisen. Insbesondere kann die Eingabevorrichtung 20, ohne darauf beschränkt zu sein, ein Wechselschalter mit den Fähigkeiten zum Bewegen nach oben/unten, links/rechts oder beidem, eine Drucktaste, einen Berührungsbildschirm, ein Sprachbefehl oder eine Gestensteuerung sein. In einem Beispiel ist die Eingabevorrichtung 20 ein Wechselschalter, der auf und ab bewegt werden kann, um die Temperatur im Fahrzeug 16 zu ändern, wenn der Benutzer 10 auf die Temperaturanzeige schaut. Wenn der Wechselschalter nach oben bewegt wird, steigt die Temperatur an. Wenn der Wechselschalter nach unten bewegt wird, sinkt die Temperatur entsprechend. Außerdem kann der Wechselschalter kommunizierend mit der grafischen Benutzerschnittstelle 26 verbunden sein und während der Benutzung auf dieser angezeigt werden.
  • Ferner kann die Funktion des Wechselschalters immer dann wechseln, wenn der Benutzer 10 seinen Blick oder seine Anvisierung auf ein jeweiliges Funktionsmerkmal 14 umlenkt. Mit anderen Worten, der Wechselschalter kann multifunktional sein und für alle, einige oder eines der Funktionsmerkmale 14 im Fahrzeug 16 benutzt werden. Wenn der Benutzer 10 beispielsweise, wie in 1 erörtert, zunächst „A” (von Funktionsmerkmal 14) anvisiert, kann der Wechselschalter dazu konfiguriert sein, eine Einstellung einer ersten Funktion (d. h. Temperatur) zu ermöglichen. Nach einiger Zeit kann der Benutzer 10 seinen Blick abwenden und auf Funktionsmerkmal „B” blicken. Als Reaktion kann der Wechselschalter einer zweiten Funktion (d. h. Lautstärke) zugeordnet werden.
  • Ein Benutzer 10 kann ein bestimmtes Funktionsmerkmal 14 für eine vorgegebene Zeitspanne anvisieren, während die Verfolgungsvorrichtung 22 die Bewegung oder Richtung der Augen des Benutzers 10 erkennt. Die Verfolgungsvorrichtungen 22 gibt (darauf basierend, dass der Benutzer 10 für eine vorgegebene Zeitspanne auf ein Funktionsmerkmal blickt) ein Signal aus, das die Erkennung anzeigt, und die Steuereinrichtung 24 bestimmt auf Grundlage der Richtung der Augen des Benutzers 10, welches Funktionsmerkmal 14 der Benutzer 10 regeln möchte. Wenn die Steuereinrichtung 24 das Funktionsmerkmal 14 bestimmt hat, kann der Benutzer 10 wahlweise das Funktionsmerkmal 14 auf der grafischen Benutzerschnittstelle 26 optisch betrachten, und der Benutzer 10 kann die Eingabevorrichtung 20 benutzen, um die Funktion des Funktionsmerkmals 14 zu regeln und einzustellen. Außerdem kann der Benutzer 10 einen zweiten Punkt (d. h. „B”) des Funktionsmerkmals 14 für eine vorgegebene Zeitspanne anvisieren, während der das System 12 die Bewegung der Augen des Benutzers 10 erkennen kann. Die Steuereinrichtung 24 kann dazu konfiguriert sein, das zweite Funktionsmerkmal 14 mithilfe der Eingabevorrichtung 20 basierend auf dem Blick des Benutzers 10 zu regeln und einzustellen.
  • Beispielsweise kann der Benutzer 10 seine Augen eine Sekunde lang auf das Stereosystem des Fahrzeugs 16 richten, woraufhin der Blick des Benutzers 10 von der Verfolgungsvorrichtung 22 erkannt wird. Die Steuereinrichtung 24 stellt dann fest, dass der Benutzer 10 das Stereosystem anvisiert, und kann andere Funktionen auf der grafischen Benutzerschnittstelle 26 anzeigen, unter denen der Benutzer 10 mithilfe der Eingabevorrichtung 20 wie etwa einem Wechselschalter auswählen kann. Der Benutzer 10 verwendet den Wechselschalter, um die verschiedenen Titel zu durchlaufen und den Titel auszuwählen, den der Benutzer 10 wiedergeben möchte. Wenn der Benutzer 10 einen Titel ausgewählt hat, möchte der Benutzer 10 möglicherweise die Lautstärke der Musik in der Musik erhöhen oder senken. Dazu kann der Benutzer 10 auf einen Lautstärkeregler des Stereosystems blicken und die Eingabevorrichtung 20 dazu benutzen, die Lautstärke wunschgemäß einzustellen.
  • Unter Bezugnahme auf 3 wird ein Ablaufdiagramm eines Verfahrens 300 zum Einstellen eines Funktionsmerkmals in einem Fahrzeug mittels Blickverfolgung gemäß der vorliegenden Offenbarung bereitgestellt. Das Verfahren schließt das Erkennen der Bewegung und Richtung des Blicks eines Benutzers nach einer vorgegebenen Zeitspanne über eine Verfolgungsvorrichtung 100 ein. Die Verfolgungsvorrichtung kann ein Sensor sein, insbesondere ein Infrarotsensor oder eine Vielzahl von Sensoren. Alternativ kann die Verfolgungsvorrichtung eine Kamera oder eine Vielzahl von Kameras sein. Die Verfolgungsvorrichtung kann auch eine Kombination aus Sensoren und Kameras sein. Die Verfolgungsvorrichtung kann an einem beliebigen Ort im vorderen Bereich des Fahrzeugs angeordnet sein.
  • Wenn die Bewegung und Richtung des Blicks des Benutzers von der Verfolgungsvorrichtung erkannt wurden, aktiviert die Steuereinrichtung auf Grundlage des Blicks des Benutzers automatisch das Funktionsmerkmal, das geregelt werden soll 102. Wenn der Benutzer beispielsweise das GPS-Menü in einer Benutzerschnittstelle anvisiert, aktiviert die Steuereinrichtung automatisch das GPS-Menü als das Funktionsmerkmal, das der Benutzer regeln möchte. Außerdem kann das aktivierte Funktionsmerkmal auf der Benutzerschnittstelle angezeigt werden, um dem Benutzer optisch anzuzeigen, welches Funktionsmerkmal der Benutzer regeln und einstellen wird 104.
  • Das Verfahren schließt ferner das Einstellen des vom Blick des Benutzers aktivierten Funktionsmerkmals mithilfe einer Eingabevorrichtung ein. Die Eingabevorrichtung kann, ohne darauf beschränkt zu sein, ein Wechselschalter, eine Drucktaste, ein Berührungsbildschirm, ein Sprachbefehl oder eine Geste sein. Die Eingabevorrichtung kann an einer beliebigen Position in Reichweite des Benutzers angeordnet sein. Beispielsweise kann die Eingabevorrichtung, etwa eine Drucktaste oder ein Wechselschalter, in der Nähe der Armlehne oder am Lenkrad des Fahrzeugs angeordnet sein, damit der Benutzer leichten Zugriff erhält, um das von ihm aktivierte Funktionsmerkmal einzustellen. Außerdem ermöglicht es die Eingabevorrichtung dem Benutzer, nur eine Vorrichtung zu verwenden und jedes Funktionsmerkmal im Fahrzeug einzustellen. Mit anderen Worten, die Eingabevorrichtung ist für die verschiedenen Funktionsmerkmale im Fahrzeug multifunktional. Zum Beispiel kann der Benutzer die Eingabevorrichtung dazu benutzen das Radio im Fahrzeug zu regeln und einzustellen, und kann dann dieselbe Eingabevorrichtung dazu benutzen, auf Grundlage des Blicks des Benutzers im Fahrzeug die Klimatisierung oder die Temperatur im Fahrzeug einzustellen.
  • 4(a), (b) und (c) stellen eine Beispielimplementierung des oben erörterten Blickverfolgungssystems dar, das in einem Fahrzeug 400 implementiert ist. Das Fahrzeug 400 weist eine Anzeige 450 (bei der es sich um die oben erörterte grafische Benutzerschnittstelle 26 handeln kann, aber nicht muss), ein Radio 410, eine Windschutzscheibe 420 und eine Lüftungs- und Klimatisierungseinheit 430 auf. Das Fahrzeug 400 kann mit einem Wechselschalter 440 ausgestattet sein, der mit einer Eingabevorrichtung 20 verbunden ist. Wie oben erläutert, kann der Wechselschalter 440 dazu konfiguriert sein, verschiedene Aspekte im Zusammenhang mit dem Blickverfolgungssystem und den Fahrzeugelementen wie oben erörtert zu regeln. Somit kann der Wechselschalter 440 dazu konfiguriert sein, die Lautstärke, die Wärme oder die Anzeige im Zusammenhang mit einen GPS einzustellen.
  • Ferner kann ein Durchschnittsfachmann, das in 4 gezeigte Beispiel auf Grundlage einer bevorzugten Implementierung modifizieren. Auf diese Weise können die Module und elektronischen Systeme, die gemeinsam mit dem Blickverfolgungssystem installiert sind, gemäß den Wünschen des Umsetzenden maßgefertigt geliefert werden.
  • Außerdem ist das Blickverfolgungssystem sowohl mit einer Anzeige 450 als auch einem Wechselschalter 440 ausgestattet. In verschiedenen Ausführungsformen kann das Blickverfolgungssystem auch entweder mit der Anzeige 450 oder dem Wechselschalter 440 ausgestattet sein.
  • Bezug nehmend auf 4(a) blickt ein Benutzer 10 auf das Radio 410. Unter Verwendung der hier offenbarten Aspekte kann eine Verfolgungsvorrichtung 22 erkennen, dass der Benutzer 10 auf das Radio 410 blickt (d. h. eine Kopfwinkeldrehung erkennen oder erkennen, wohin die Augen einer Person blicken). In einem Beispiel kann das Blickverfolgungssystem dazu konfiguriert sein, den Wechselschalter 440 an eine Funktion zu koppeln, die dem Radio 410 zugeordnet ist (über die Eingabevorrichtung 20). Beispielsweise kann der Wechselschalter 440 dazu konfiguriert sein, die Lautstärke zu erhöhen oder zu senken, einen Titel auszuwählen oder einen Radiosender umzuschalten.
  • Bezug nehmend auf 4(b) blickt der Benutzer 10 nun auf die Windschutzscheibe 420. In dem hier dargestellten Beispiel kann die Anzeige 450 nun dazu konfiguriert sein, eine Funktion anzuzeigen, die einem GPS zugeordnet ist. Ferner kann der Wechselschalter 440 auch dazu konfiguriert sein, mit dem GPS zusammenzuwirken und zu interagieren. In dem Beispiel aus 4(b) kann die Erkennung eines Blicks auf die Windschutzscheibe in einer Ausführungsform nach dem Verstreichen einer vorgegebenen Zeitspanne erfolgen.
  • Bezug nehmend auf 4(b) blickt der Benutzer nun auf eine Lüftungs- und Klimatisierungseinheit 430. Entsprechend können die Anzeige 450, der Wechselschalter 440 oder sowohl die Anzeige 450 als auch der Wechselschalter 440 dazu konfiguriert sein, mit der Lüftungs- und Klimatisierungseinheit 430 zusammenzuwirken und zu interagieren.
  • In den vorstehenden Beispielen wird ein System in einem Fahrzeug beschrieben. Ein Durchschnittsfachmann kann jedoch die oben beschriebenen Aspekte in anderen Systemen umsetzen, bei denen ein einzelner Eingabemechanismus zur Regelung verschiedener Funktionen genutzt wird.
  • Obwohl Beispiele der Offenbarung dargestellt und beschrieben wurden, sollen diese Beispiele nicht alle möglichen Formen der Offenbarung darstellen und beschreiben. Vielmehr sind die in der Beschreibung verwendeten Begriffe beschreibende, aber keine einschränkenden Begriffe, und es versteht sich, dass verschiedene Änderungen vorgenommen werden können, ohne vom Geist und Umfang der Offenbarung abzuweichen. Außerdem können die Funktionsmerkmale und verschiedenen implementierenden Ausführungsformen kombiniert werden, um weitere Beispiele der Offenbarung zu bilden.

Claims (16)

  1. System zur Blickverfolgung, umfassend: eine Verfolgungsvorrichtung zum Erkennen eines Blicks, der einem Benutzer zugeordnet ist, auf entweder ein erstes Funktionsmerkmal oder ein zweites Funktionsmerkmal; und eine Steuereinrichtung zum Zuordnen, auf Grundlage der Erkennung des Blicks auf ein erstes Funktionsmerkmal, eines Betriebsmodus zu einer ersten Funktion, und zum Zuordnen, auf Grundlage der Erkennung des Blicks auf das zweite Funktionsmerkmal, des Betriebsmodus zu einer zweiten Funktion.
  2. System nach Anspruch 1, wobei die Steuereinrichtung ferner dazu konfiguriert ist, auf Grundlage dessen, dass die Verfolgungsvorrichtung einen Wechsel des Blicks des Benutzers vom ersten Funktionsmerkmal zum zweiten Funktionsmerkmal erkennt, den zugeordneten Betriebsmodus von der ersten Funktion zur zweiten Funktion umzuschalten.
  3. System nach Anspruch 2, wobei die Steuereinrichtung den zugeordneten Modus in Reaktion darauf umschaltet, dass der Blick des Benutzers wenigstens für eine vorgegebene Zeitspanne stattfindet.
  4. System nach Anspruch 2, wobei die erste Funktion und die zweite Funktion zwei der folgenden sind: ein Unterhaltungssystem, ein Lüftungs- und Klimatisierungssystem, ein GPS-System, ein Fenstersteuerungssystem.
  5. System nach Anspruch 1, ferner umfassend eine Eingabevorrichtung, wobei der Betriebsmodus über die Eingabevorrichtung auf Grundlage des erkannten Blicks geregelt wird.
  6. System nach Anspruch 1, wobei der Betriebsmodus auf Grundlage des erkannten Blicks einer bestimmten grafischen Benutzerschnittstelle zugeordnet wird.
  7. System nach Anspruch 5, wobei der Betriebsmodus auf Grundlage des erkannten Blicks einer bestimmten grafischen Benutzerschnittstelle zugeordnet wird.
  8. System nach Anspruch 5, wobei die Eingabevorrichtung an einen Wechselschalter gekoppelt ist.
  9. Verfahren zur Blickverfolgung, umfassend: Erkennen des Blicks eines Benutzers auf entweder ein erstes Funktionsmerkmal oder ein zweites Funktionsmerkmal; und Aktivieren eines Betriebsmodus unter Zuordnung zu einer ersten Funktion auf Grundlage einer Erkennung des Blicks des Benutzers auf das erste Funktionsmerkmal, und Aktivieren des Betriebsmodus unter Zuordnung zu einer zweiten Funktion auf Grundlage einer Erkennung des Blicks des Benutzers auf das zweite Funktionsmerkmal.
  10. Verfahren nach Anspruch 9, ferner umfassend Umschalten des zugeordneten Betriebsmodus von der ersten Funktion zur zweiten Funktion auf Grundlage dessen, dass die Verfolgungsvorrichtung einen Wechsel des Blicks des Benutzers vom ersten Funktionsmerkmal zum zweiten Funktionsmerkmal erkennt.
  11. Verfahren nach Anspruch 9, ferner umfassend Umschalten des zugeordneten Modus in Reaktion darauf, dass der Blick des Benutzers auf das zweite Funktionsmerkmal wenigstens für eine vorgegebene Zeitspanne stattfindet.
  12. Verfahren nach Anspruch 9, wobei die erste Funktion und die zweite Funktion zwei der folgenden sind: ein Unterhaltungssystem, ein Lüftungs- und Klimatisierungssystem, ein GPS-System, ein Fenstersteuerungssystem.
  13. Verfahren nach Anspruch 9, ferner umfassend, dass der Betriebsmodus über eine Eingabevorrichtung auf Grundlage des erkannten Blicks geregelt wird.
  14. Verfahren nach Anspruch 9, wobei der Betriebsmodus auf Grundlage des erkannten Blicks einer bestimmten grafischen Benutzerschnittstelle zugeordnet wird.
  15. Verfahren nach Anspruch 13, wobei der Betriebsmodus auf Grundlage des erkannten Blicks auch einer bestimmten grafischen Benutzerschnittstelle zugeordnet wird.
  16. Verfahren nach Anspruch 14, wobei die Eingabevorrichtung an einen Wechselschalter gekoppelt ist.
DE102014118798.9A 2013-12-26 2014-12-17 System und Verfahren zur Blickverfolgung Withdrawn DE102014118798A1 (de)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201361921015P 2013-12-26 2013-12-26
US61/921,015 2013-12-26
US14/559,561 US20150185834A1 (en) 2013-12-26 2014-12-03 System and method for gaze tracking
US14/559,561 2014-12-03

Publications (1)

Publication Number Publication Date
DE102014118798A1 true DE102014118798A1 (de) 2015-07-02

Family

ID=53372187

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102014118798.9A Withdrawn DE102014118798A1 (de) 2013-12-26 2014-12-17 System und Verfahren zur Blickverfolgung

Country Status (1)

Country Link
DE (1) DE102014118798A1 (de)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102020207143A1 (de) 2020-06-08 2021-12-09 Volkswagen Aktiengesellschaft Kraftfahrzeug mit einem Sprachdialogsystem und Sprachdialogsystem
DE102020213770A1 (de) 2020-11-02 2022-05-05 Continental Automotive Gmbh Anzeigevorrichtung für ein Fahrzeug

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102020207143A1 (de) 2020-06-08 2021-12-09 Volkswagen Aktiengesellschaft Kraftfahrzeug mit einem Sprachdialogsystem und Sprachdialogsystem
DE102020213770A1 (de) 2020-11-02 2022-05-05 Continental Automotive Gmbh Anzeigevorrichtung für ein Fahrzeug

Similar Documents

Publication Publication Date Title
EP3040816B1 (de) Verfahren und vorrichtung zur eingabe von daten mit zwei eingabearten und haptischer rückkopplung, insbesondere in einem kraftfahrzeug
DE102004029203B4 (de) Bedienvorrichtung für ein Kraftfahrzeug
EP3494004B1 (de) Verfahren zur steuerung einer anzeigevorrichtung für ein fahrzeug und fahrzeug mit einer anzeigevorrichtung
DE102012022312A1 (de) Informationswiedergabesystem und Verfahren zur Informationswiedergabe
WO2011110294A1 (de) Verfahren und vorrichtung zum betreiben einer benutzerschnittstelle
DE102007032753A1 (de) Mobiles Endgerät mit einer Dreheingabevorrichtung und Verfahren zur Empfindlichkeitseinstellung unter Verwendung derselben
WO2010040782A1 (de) Verfahren und vorrichtung zum anzeigen von informationen, insbesondere in einem fahrzeug
DE102007025530A1 (de) Informationsvermittlungsvorrichtung und Verfahren zur Vermittlung von Informationen
DE102017218120A1 (de) Verfahren zur Bereitstellung einer haptischen Rückmeldung an einen Bediener einer berührungssensitiven Anzeigeeinrichtung
DE102012009429A1 (de) Verfahren zur Fernkonfiguration eines Fahrzeugs durch Visualisierung der Fahrzeugbedienung, sowie Endgerät und Fahrzeug hierfür
DE102015217853A1 (de) Benutzeroberflächeneinrichtung, Fahrzeug mit derselben und Verfahren zum Steuern derselben
EP2196359B1 (de) Bedienverfahren und Bedieneinrichtung
WO2015135737A1 (de) Verfahren und vorrichtung zum bereitstellen einer graphischen nutzerschnittstelle in einem fahrzeug
DE102013227220A1 (de) Blindsteuerungssystem für fahrzeug
DE102013100328A1 (de) Adaptives Schnittstellensystem
DE102017204976B4 (de) Bediensystem zur Steuerung zumindest einer bedienbaren Einrichtung, Fahrzeug mit einem Bediensystem und Verfahren zum Betreiben eines Bediensystems
EP2987066B1 (de) Kraftfahrzeug mit einer anzeige- und bedienvorrichtung und entsprechendes verfahren
DE102013000069B4 (de) Kraftfahrzeug-Bedienschnittstelle mit einem Bedienelement zum Erfassen einer Bedienhandlung
DE102014118798A1 (de) System und Verfahren zur Blickverfolgung
DE102016221075A1 (de) Ausströmer für eine Fahrzeugklimaanlage, Fahrzeug mit einer Fahrzeugklimaanlage, Verfahren, Vorrichtung und computerlesbares Speichermedium mit Instruktionen zum Anzeigen von Einstellgrössen einer Fahrzeugklimaanlage
WO2018001877A1 (de) Verfahren zum betreiben einer bedienvorrichtung in einem kraftfahrzeug sowie bedienvorrichtung und kraftfahrzeug
WO2014111241A1 (de) Verfahren und system zum steuern wenigstens einer funktionseinheit sowie kraftwagen und mobiles endgerät mit einem solchen system
EP2808775B1 (de) Controller für ein Informationswiedergabesystem für ein Fahrzeug
DE102008061989A1 (de) Verfahren und Vorrichtung zum Steuern einer optischen und/oder akustischen Ausgabe in einem Fahrzeug
DE102016212819A1 (de) Verfahren zur Bereitstellung einer Zugangseinrichtung zu einer persönlichen Datenquelle

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R083 Amendment of/additions to inventor(s)
R016 Response to examination communication
R082 Change of representative

Representative=s name: MERH-IP MATIAS ERNY REICHL HOFFMANN PATENTANWA, DE

R119 Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee