DE102013001384A1 - Method and system for viewing direction-dependent control of a plurality of functional units and motor vehicles and mobile terminal with such a system - Google Patents

Method and system for viewing direction-dependent control of a plurality of functional units and motor vehicles and mobile terminal with such a system Download PDF

Info

Publication number
DE102013001384A1
DE102013001384A1 DE102013001384.4A DE102013001384A DE102013001384A1 DE 102013001384 A1 DE102013001384 A1 DE 102013001384A1 DE 102013001384 A DE102013001384 A DE 102013001384A DE 102013001384 A1 DE102013001384 A1 DE 102013001384A1
Authority
DE
Germany
Prior art keywords
symbols
functional units
motor vehicle
control
menu structure
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
DE102013001384.4A
Other languages
German (de)
Inventor
Marcus Kühne
Johann Schneider
Ulrich Müller
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Audi AG
Original Assignee
Audi AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Audi AG filed Critical Audi AG
Priority to DE102013001384.4A priority Critical patent/DE102013001384A1/en
Priority to PCT/EP2014/000039 priority patent/WO2014114428A1/en
Publication of DE102013001384A1 publication Critical patent/DE102013001384A1/en
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11—Instrument graphical user interfaces or menu aspects
    • B60K2360/115—Selection of menu items
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143—Touch sensitive instrument input devices
    • B60K2360/1438—Touch screens
    • B60K2360/1442—Emulation of input devices
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/149—Instrument input by detecting viewing direction not otherwise provided for

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Instrument Panels (AREA)
  • User Interface Of Digital Computer (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

Die Erfindung betrifft ein Verfahren zum blickrichtungsabhängigen Steuern einer Mehrzahl von Funktionseinheiten (12, 14, 16, 18), insbesondere eines Kraftwagens, mit den Schritten: Überprüfen mittels einer Steuereinrichtung (20), ob ein vorgegebenes Bedienelement betätigt worden ist; falls dieses Bedienelement (26) betätigt worden ist: Anzeigen einer Menüstruktur auf einer Anzeigeeinrichtung (24), welche eine Mehrzahl von Symbolen (48, 50, 52, 54) umfasst, denen jeweils eine der Funktionseinheiten (12, 14, 16, 18) zugeordnet wird; Überprüfen mittels einer Blickerfassungseinrichtung (22), ob der Blick (34) eines Nutzers auf eines der Symbole gerichtet ist; falls der Blick auf eines der Symbole (48, 50, 52, 54) gerichtet ist: optisches Hervorheben dieses Symbols (48, 50, 52, 54) und Zuordnen des Bedienelements (26) zu diesem Symbol (48, 50, 52, 54) zum Auswählen der entsprechenden Funktionseinheit (12, 14, 16, 18). Des Weitern betrifft die Erfindung ein System (10) zum blickrichtungsabhängigen Steuern einer Mehrzahl von Funktionseinheiten (12, 14, 16, 18) sowie einen Kraftwagen und ein mobiles Endgerät mit einem solchen System (10).The invention relates to a method for controlling a plurality of functional units (12, 14, 16, 18), in particular a motor vehicle, which is dependent on the viewing direction, comprising the steps of: checking by means of a control device (20) whether a given operating element has been actuated; if this control element (26) has been actuated: displaying a menu structure on a display device (24) which comprises a plurality of symbols (48, 50, 52, 54), each of which one of the functional units (12, 14, 16, 18) is assigned; Checking by means of a gaze detection device (22) whether a user's gaze (34) is directed towards one of the symbols; if the view is directed to one of the symbols (48, 50, 52, 54): optically highlighting this symbol (48, 50, 52, 54) and assigning the control element (26) to this symbol (48, 50, 52, 54) ) to select the corresponding functional unit (12, 14, 16, 18). The invention further relates to a system (10) for controlling a plurality of functional units (12, 14, 16, 18) depending on the direction of view, as well as a motor vehicle and a mobile terminal with such a system (10).

Description

Die Erfindung betrifft Verfahren sowie ein System zum blickrichtungsabhängigen Steuern einer Mehrzahl von Funktionseinheiten und einen Kraftwagen sowie ein mobiles Endgerät mit einem solchen System.The invention relates to a method and a system for viewing direction-dependent control of a plurality of functional units and a motor vehicle and a mobile terminal with such a system.

Aus der DE 101 21 392 A1 ist ein System zur blickrichtungsabhängigen Steuerung von Funktionseinheiten eines Kraftwagens als bekannt zu entnehmen. Mittels einer Blickerkennungseinrichtung kann erfasst werden, ob und auf welchen Bereich einer Anzeigeeinrichtung der Blick eines Nutzers gerichtet worden ist. Jeweiligen Bereichen der Anzeigeeinrichtung sind dabei entsprechende Steuerfunktionen für die jeweiligen Funktionseinheiten zugeordnet. Sobald mittels der Blickerkennungseinrichtung erfasst worden ist, dass der Blick des Nutzers auf einen bestimmen Bereich der Anzeigeeinrichtung gerichtet worden ist, wird dieser Bereich optisch hervorgehoben.From the DE 101 21 392 A1 a system for viewing direction-dependent control of functional units of a motor vehicle is to be taken as known. By means of a gaze detection device it can be detected whether and to which area of a display device the gaze of a user has been directed. Respective areas of the display device are associated with corresponding control functions for the respective functional units. As soon as it has been detected by means of the gaze recognition device that the gaze of the user has been directed to a specific area of the display device, this area is optically highlighted.

Die DE 10 2009 034 069 A1 zeigt ein Verfahren zum Bedienen eines Kraftfahrzeugs, bei welchem ein auf einem Display angezeigtes Symbol ausgewählt wird, sobald erkannt worden ist, dass der Blick eines Bedieners auf dieses Symbol gerichtet worden ist. Dabei wird das ausgewählte Symbol optisch gekennzeichnet, wobei bei Erkennung eines entsprechenden akustischen Befehls, die dem Symbol zugeordnete Funktionseinheit gemäß dem akustischen Befehl angesteuert wird.The DE 10 2009 034 069 A1 shows a method for operating a motor vehicle, in which a symbol displayed on a display is selected as soon as it has been recognized that the view of an operator has been directed to this symbol. In this case, the selected symbol is optically marked, whereby upon recognition of a corresponding acoustic command, the functional unit assigned to the symbol is activated in accordance with the acoustic command.

Die DE 10 2007 049 710 A1 zeigt ein System mit einer Blickerfassungseinrichtung, mittels welcher erfasst werden kann, ob ein Nutzer ein bestimmtes Bedienelement zumindest für eine vorgegebene Zeitdauer angesehen hat, wodurch erkannt wird, dass eben dieses Bedienelement bedient bzw. bedienend ausgelöst werden soll.The DE 10 2007 049 710 A1 shows a system with a gaze detection device, by means of which it can be detected whether a user has viewed a particular control element at least for a predetermined period of time, whereby it is recognized that just this control element should be triggered or operated.

Die EP 2390139 A1 zeigt ein System zur Innenraumbeleuchtung eines Kraftwagens, welches eine Blickerfassungseinrichtung umfasst, mittels welcher erfasst wird, auf welche Bereiche des Innenraums der Blick des Fahrers gerichtet ist, wobei die Bereiche des Innenraums, auf welche augenblicklich der Blick des Fahrers gerichtet ist, beleuchtet werden.The EP 2390139 A1 shows a system for interior lighting of a motor vehicle, which includes a gaze detecting means, by means of which is detected, which areas of the interior of the driver's view is directed, the areas of the interior, on which the driver's gaze is currently directed, are illuminated.

Die DE 10 2009 046 451 A1 zeigt ein Verfahren und eine Vorrichtung zur Erfassung der Blickzuwendung eines Fahrzeuginsassens auf eine Infotainment-Einrichtung eines Kraftwagens. Sobald erkannt worden ist, dass der Blick des Fahrzeuginsassens auf das Infotainmentsystem gerichtet worden ist, erfolgt eine Ausgabe eines entsprechenden Blickzuwendungssignals.The DE 10 2009 046 451 A1 shows a method and apparatus for detecting the gaze of a vehicle occupant on an infotainment device of a motor vehicle. Once it has been recognized that the view of the vehicle occupant has been directed to the infotainment system, an output of a corresponding Blickzuwendungssignals.

Es ist die Aufgabe der vorliegenden Erfindung, eine verbesserte Ansteuerung von einer Mehrzahl von Funktionseinheiten unter Zuhilfenahme einer Blickerfassungseinrichtung zu ermöglichen.It is the object of the present invention to enable improved control of a plurality of functional units with the aid of a gaze detection device.

Diese Aufgabe wird durch ein Verfahren zum Steuern einer Mehrzahl von Funktionseinheiten mit den Merkmalen des Patentanspruchs 1, durch ein System zum Steuern einer Mehrzahl von Funktionseinheiten mit den Merkmalen des Patentanspruchs 6 und durch einen Kraftwagen mit den Merkmalen des Patentanspruchs 8 sowie durch ein mobiles Endgerät mit den Merkmalen des Patentanspruchs 11 gelöst. Vorteilhafte Ausgestaltungen mit zweckmäßigen und nicht-trivialen Weiterbildungen der Erfindung sind in den abhängigen Ansprüchen angegeben.This object is achieved by a method for controlling a plurality of functional units having the features of patent claim 1, by a system for controlling a plurality of functional units having the features of patent claim 6 and by a motor vehicle having the features of patent claim 8 and by a mobile terminal the features of claim 11 solved. Advantageous embodiments with expedient and non-trivial developments of the invention are specified in the dependent claims.

Das erfindungsgemäße Verfahren zum Steuern einer Mehrzahl von Funktionseinheiten, insbesondere eines Kraftwagens, umfasst die folgenden Schritte:

  • – Überprüfen mittels einer Steuereinrichtung, ob ein vorgegebenes Bedienelement betätigt worden ist;
  • – falls dieses Bedienelement betätigt worden ist: Anzeigen einer Menüstruktur auf einer Anzeigeeinrichtung, welche eine Mehrzahl von Symbolen umfasst, denen jeweils eine der Funktionseinheiten zugeordnet wird;
  • – Überprüfen mittels einer Blickerfassungseinrichtung, ob der Blick eines Nutzers auf eines der Symbole gerichtet ist;
  • – falls der Blick auf eines der Symbole gerichtet ist: optisches Hervorheben dieses Symbols und Zuordnen des Bedienelements zu diesem Symbol zum Auswählen der entsprechenden Funktionseinheit.
The method according to the invention for controlling a plurality of functional units, in particular of a motor vehicle, comprises the following steps:
  • - Check by means of a control device, whether a predetermined operating element has been actuated;
  • If this control element has been actuated, displaying a menu structure on a display device which comprises a plurality of symbols to which one of the functional units is assigned in each case;
  • Checking, by means of a gaze detector, whether the gaze of a user is directed at one of the symbols;
  • - if the view is directed to one of the symbols: highlight this symbol visually and assign the operating element to this symbol to select the corresponding functional unit.

Im Gegensatz zum Stand der Technik ist es also bei dem erfindungsgemäßen Verfahren zum Steuern einer Mehrzahl von Funktionseinheiten also gerade vorgesehen, mittels eines Bedienelements eine bestimmte Menüstruktur mit einer Mehrzahl von Symbolen, welchen den jeweiligen zu steuernden Funktionseinheiten zugeordnet werden bzw. zugeordnet sind, auf einer Anzeigeeinrichtung aufzurufen. Sobald diese Menüstruktur aufgerufen worden ist bzw. angezeigt worden ist, kann unter Zuhilfenahme der Blickerfassungseinrichtung überprüft werden, ob der Blick eines Nutzers auf eines der Symbole gerichtet ist, wobei danach das durch den Nutzer fokussierte Symbol optisch hervorgehoben und das Bedienelement, mittels welchem die Menüstruktur zuvor aufgerufen worden ist, diesem Symbol zum Auswählen der entsprechenden Funktionseinheit zugeordnet wird.In contrast to the prior art, it is therefore provided in the inventive method for controlling a plurality of functional units just by means of a control a certain menu structure with a plurality of symbols, which are assigned to the respective functional units to be controlled or assigned on a To call up the display device. Once this menu structure has been called or has been displayed, it can be checked with the aid of the gaze detecting means, whether the view of a user is directed to one of the symbols, after which the icon focused by the user highlighted and the control element, by means of which the menu structure previously assigned to this icon for selecting the corresponding functional unit.

Die Besonderheit der Erfindung liegt unter anderem also auch darin, dass eine Aktivierung und Auswahlbestätigung in diesem gesonderten, die Menüstruktur aufweisenden Eingabemodus über ein und dasselbe Bedienelement erfolgt. Dadurch muss der Nutzer nicht erst umgreifen, um ein weiteres Bedienelement zu erreichen bzw. dieses betätigen zu können, so dass eine wesentlich vereinfachte Steuerung jeweiliger Funktionseinheiten mit einer geringeren Ablenkung des Nutzers ermöglicht wird.The peculiarity of the invention lies, inter alia, in the fact that an activation and selection confirmation in this separate, the Menu structure having input mode via one and the same control element takes place. As a result, the user does not have to first reach around in order to be able to reach or actuate a further operating element, so that a substantially simplified control of respective functional units is made possible with a smaller distraction of the user.

In vorteilhafter Ausgestaltung der Erfindung ist es vorgesehen, dass falls mittels der Blickerfassungseinrichtung erkannt worden ist, dass der Blick auf eines der Symbole gerichtet worden ist und anschließend das Bedienelement betätigt worden ist, das Bedienelement zum Steuern von Funktionen der entsprechenden Funktionseinheit freigeschaltet wird. Mit anderen Worten ist es also vorzugsweise vorgesehen, dass mittels ein- und demselben Bedienelement nicht nur eine Auswahlbestätigung des entsprechenden Symbols erfolgen kann, auf welches der Blick des Nutzers gerichtet worden ist, sondern dass mittels desselben Bedienelements auch noch entsprechende Funktionen der dem Symbol zugeordneten Funktionseinheit gesteuert werden können. Somit können dem Bedienelement drei unterschiedliche Funktionalitäten zugeordnet sein, nämlich zum einen, dass mittels des Bedienelements die besagte Menüstruktur überhaupt aufgerufen werden kann und zum anderen, dass mittels des Bedienelements eine Auswahlbestätigung eines bestimmten Symbols und somit auch der zugeordneten Funktionseinheit erfolgen kann und dass darüber hinaus zusätzlich noch mit ein- und demselben Bedienelement entsprechende Funktionen der ausgewählten Funktionseinheit gesteuert bzw. bedient werden können. Dadurch ergibt sich der Vorteil, dass ohne ein jegliches Umgreifen der Nutzer mittels Bedienung von ein und demselben Bedienelement entsprechende Funktionseinheiten besonders einfach steuern kann.In an advantageous embodiment of the invention, it is provided that if it has been detected by means of the gaze detection device that the view has been directed to one of the symbols and then the operating element has been actuated, the operating element for controlling functions of the corresponding functional unit is unlocked. In other words, it is thus preferably provided that by means of one and the same control element not only a selection confirmation of the corresponding symbol can be made, to which the user's gaze has been directed, but also by means of the same control element corresponding functions of the functional unit assigned to the symbol can be controlled. Thus, the control element can be assigned to three different functionalities, namely, on the one hand, that said menu structure can be called by means of the control element and, on the other hand, that by means of the control element a selection confirmation of a specific symbol and thus also of the associated functional unit can take place and that beyond Additionally, corresponding functions of the selected functional unit can be controlled or operated with one and the same control element. This results in the advantage that without any embracing of the user by means of operation of one and the same control element corresponding functional units can control very easily.

Eine weitere vorteilhafte Ausführungsform der Erfindung sieht vor, dass die Symbole mit einem vorgegebenen Abstand voneinander beabstandet angezeigt werden, welcher größer als ein Auflösungsvermögen der Blickerfassungseinrichtung ist. Mit anderen Worten werden die Symbole so weit voneinander beabstandet angezeigt, dass mittels der verwendeten Blickerfassungseinrichtung eindeutig überprüft werden kann, auf welches der Symbole der Blick des Fahrzeuginsassens bzw. Nutzers gerichtet ist.A further advantageous embodiment of the invention provides that the symbols are displayed at a predetermined distance apart from one another, which is greater than a resolution capability of the gaze detection device. In other words, the symbols are displayed so far apart from each other that it is possible to unambiguously check by means of the used gaze detection device to which of the symbols the gaze of the vehicle occupant or user is directed.

Gemäß einer weiteren vorteilhaften Ausführungsform der Erfindung ist es vorgesehen, dass die Menüstruktur in Querrichtung mit einer größeren Ausdehnung als in Hochrichtung angezeigt wird. Die Menüstruktur wird also korrespondierend zu einem Gesichtsfeld des Nutzers, welches ebenfalls breiter als hoch ist, angezeigt, so dass die entsprechenden Symbole besonders einfach von einem Nutzer erfasst werden können.According to a further advantageous embodiment of the invention, it is provided that the menu structure is displayed in the transverse direction with a greater extent than in the vertical direction. The menu structure is thus displayed corresponding to a field of view of the user, which is also wider than high, so that the corresponding symbols can be detected particularly easily by a user.

In weiterer vorteilhafter Ausgestaltung der Erfindung ist es vorgesehen, dass die Blickerfassungseinrichtung erst nach dem Anzeigen der Menüstruktur aktiviert wird. Dies ist insbesondere dann von Vorteil, wenn es vorgesehen ist, dass lediglich innerhalb der Menüstruktur überhaupt eine blickrichtungserfassungsabhängige Steuerung der jeweiligen Funktionseinheiten erfolgen soll. In diesem Fall kann dadurch eine entsprechende Energieeinsparung erzielt werden, da die Blickerfassungseinrichtung nur dann aktiviert ist, wenn diese auch tatsächlich benötigt wird.In a further advantageous embodiment of the invention, it is provided that the gaze detection device is activated only after displaying the menu structure. This is particularly advantageous if it is provided that merely a viewing direction detection-dependent control of the respective functional units should take place within the menu structure. In this case, a corresponding energy saving can be achieved because the gaze detection device is activated only when it is actually needed.

Das erfindungsgemäße System zum Steuern einer Mehrzahl von Funktionseinheiten, insbesondere eines Kraftwagens, umfasst ein Bedienelement, mittels welchem eine Menüstruktur auf einer Anzeigeeinrichtung, welche eine Mehrzahl von Symbolen umfasst, denen jeweils eine der Funktionseinheiten zugeordnet ist, aufrufbar ist; eine Blickerfassungseinrichtung, welche dazu ausgelegt ist, zu überprüfen, ob der Blick eines Nutzers auf eines der Symbole gerichtet ist; eine Steuereinrichtung, welche dazu ausgelegt ist, bei einer erkannten Ausrichtung des Blicks auf eines der Symbole dieses optisch hervorzuheben und das Bedienelement diesem Symbol zum Auswählen der entsprechenden Funktionseinheit zuzuordnen. Vorteilhafte Ausführungen des erfindungsgemäßen Verfahrens sind als vorteilhafte Ausführungen des Systems anzusehen, wobei hier insbesondere das System Mittel umfasst, mit denen die Verfahrensschritte durchführbar sind.The system according to the invention for controlling a plurality of functional units, in particular of a motor vehicle, comprises an operating element, by means of which a menu structure can be called up on a display device which comprises a plurality of symbols to which one of the functional units is assigned in each case; a gaze detector adapted to check whether a user's gaze is directed to one of the symbols; a control device which is designed to visually emphasize this in a recognized orientation of the view of one of the symbols and assign the operating element to this symbol for selecting the corresponding functional unit. Advantageous embodiments of the method according to the invention are to be regarded as advantageous embodiments of the system, in which case in particular the system comprises means with which the method steps can be carried out.

In vorteilhafter Ausgestaltung des Systems ist es vorgesehen, dass das Bedienelement berührungsempfindlich ausgebildet ist. Dadurch kann auf besonders einfache Weise eine Betätigung des Bedienelements durch einen Nutzer erfasst werden. Bei Berührung des Bedienelements kann sodann die entsprechende Menüstruktur angezeigt und ein Eingabemodus via Blickrichtungserkennung aktiviert werden.In an advantageous embodiment of the system, it is provided that the operating element is formed touch-sensitive. As a result, an actuation of the operating element can be detected by a user in a particularly simple manner. When the operating element is touched, the corresponding menu structure can then be displayed and an input mode can be activated via viewing direction detection.

Der erfindungsgemäße Kraftwagen umfasst das erfindungsgemäße System oder eine vorteilhafte Ausführungsform des erfindungsgemäßen Systems.The motor vehicle according to the invention comprises the system according to the invention or an advantageous embodiment of the system according to the invention.

In vorteilhafter Ausgestaltung des Kraftwagens ist es vorgesehen, dass das Bedienelement an einem Lenkrad des Kraftwagens angeordnet ist. Dadurch kann ein Nutzer während der Steuerung des Kraftwagens ohne ein Umgreifen das Bedienelement auf besonders einfache und intuitive Weise bedienen, so dass der Nutzer möglichst wenig vom Verkehrsgeschehen abgelenkt wird und zum anderen auch besonders schnell entsprechende Lenkbewegungen ausführen kann, da er die Hände während der Bedienung am Lenkrad belassen werden können.In an advantageous embodiment of the motor vehicle, it is provided that the operating element is arranged on a steering wheel of the motor vehicle. As a result, a user can operate the control element in a particularly simple and intuitive manner during the control of the motor vehicle, so that the user is distracted as little as possible from the traffic situation and, on the other hand, can execute corresponding steering movements particularly quickly, since his hands are in operation can be left on the steering wheel.

Eine weitere vorteilhafte Ausführungsform des Kraftwagens sieht vor, dass die Anzeigeeinrichtung ein Kombiinstrument und/oder ein Head-up-Display des Kraftwagens umfasst.A further advantageous embodiment of the motor vehicle provides that the Indicator comprises an instrument cluster and / or a head-up display of the motor vehicle.

Das erfindungsgemäße mobile Endgerät umfasst ein erfindungsgemäßes System oder eine vorteilhafte Ausführungsform des erfindungsgemäßen Systems. Bei dem mobilen Endgerät kann es sich beispielsweise um ein Handy, ein Smartphone, ein Tablet-PC, ein Notebook oder dergleichen handeln. Mittels der durch das Bedienelement aufrufbaren Menüstruktur mit den entsprechenden Symbolen können im Falle des mobilen Endgerätes ebenfalls unterschiedliche Funktionseinheiten bzw. Applikationen des mobilen Endgeräts über eine entsprechende blickrichtungsabhängige Auswahl von diesen zugeordneten Symbolen ausgewählt und vorzugsweise auch mittels ein- und desselben Bedienelements auf besonders einfache und intuitive Weise angesteuert bzw. gesteuert werden.The mobile terminal according to the invention comprises a system according to the invention or an advantageous embodiment of the system according to the invention. The mobile terminal may be, for example, a mobile phone, a smartphone, a tablet PC, a notebook or the like. In the case of the mobile terminal, different functional units or applications of the mobile terminal can also be selected via a corresponding view direction-dependent selection of symbols assigned to them by means of the menu structure which can be called up by the operating element, and preferably also by means of one and the same operating element in a particularly simple and intuitive manner Be controlled or controlled manner.

Weitere Vorteile, Merkmale und Einzelheiten der Erfindung ergeben sich aus der nachfolgenden Beschreibung bevorzugter Ausführungsbeispiele sowie anhand der Zeichnung. Die vorstehend in der Beschreibung genannten Merkmale und Merkmalskombinationen sowie die nachfolgend in der Figurenbeschreibung genannten und/oder in den Fig. alleine gezeigten Merkmale und Merkmalskombinationen sind nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Kombinationen oder in Alleinstellung verwendbar, ohne den Rahmen der Erfindung zu verlassen.Further advantages, features and details of the invention will become apparent from the following description of preferred embodiments and from the drawing. The features and combinations of features mentioned above in the description as well as the features and feature combinations mentioned below in the description of the figures and / or shown alone in the figures can be used not only in the respectively indicated combination but also in other combinations or alone, without the frame to leave the invention.

Die Zeichnung zeigt in:The drawing shows in:

1 eine schematische Darstellung eines Systems zum Steuern einer Mehrzahl von Funktionseinheiten eines Kraftwagens mit Hilfe einer Blickerfassungseinrichtung; 1 a schematic representation of a system for controlling a plurality of functional units of a motor vehicle by means of a gaze detection device;

2 ein ausschnittsweise dargestelltes Lenkrad eines Kraftwagens mit einer Mehrzahl von Bedienelementen; 2 a fragmentary illustrated steering wheel of a motor vehicle with a plurality of controls;

3 ein Kombiinstrument eines Kraftwagens; und in 3 an instrument cluster of a motor vehicle; and in

4 das in 3 gezeigte Kombiinstrument, wobei eine Menüstruktur mit einer Mehrzahl von Symbolen angezeigt wird, denen jeweils eine der Funktionseinheiten des Kraftwagens zugeordnet ist. 4 this in 3 shown instrument cluster, wherein a menu structure is displayed with a plurality of symbols, each associated with one of the functional units of the motor vehicle.

Ein insgesamt mit 10 bezeichnetes System zum Steuern einer Mehrzahl von Funktionseinheiten 12 bis 18 eines hier nicht dargestellten Kraftwagens ist in einer schematischen Darstellung in 1 gezeigt. Im vorliegenden Fall handelt es sich bei der Funktionseinheit 12 um ein Radio, bei der Funktionseinheit 14 um eine Klimaautomatik, bei der Funktionseinheit 16 um eine Navigationseinrichtung und bei der Funktionseinheit 18 um eine Mobilfunkschnittstelle des Kraftwagens.A total with 10 designated system for controlling a plurality of functional units 12 to 18 a motor vehicle, not shown here is in a schematic representation in 1 shown. In the present case, it is the functional unit 12 to a radio, at the functional unit 14 to an automatic climate control, in the functional unit 16 to a navigation device and the functional unit 18 to a mobile radio interface of the motor vehicle.

Alle Funktionseinheiten 12 bis 18 sind mit einer Steuereinrichtung 20 des Systems 10 informationstechnisch verbunden. Neben den hier dargestellten Funktionseinheiten 12 bis 18 kann das System 10 bzw. die Steuereinrichtung 20 noch mit weiteren Funktionseinheiten des Kraftwagens, beispielsweise einem Fahrerassistenzsystem oder dergleichen, verbunden sein.All functional units 12 to 18 are with a control device 20 of the system 10 Information technology connected. In addition to the functional units shown here 12 to 18 can the system 10 or the control device 20 be connected to other functional units of the motor vehicle, such as a driver assistance system or the like.

Das System 10 umfasst ferner noch eine Blickerfassungseinrichtung 22 sowie eine Anzeigeeinrichtung 24, welche beide ebenfalls mit der Steuereinrichtung 20 informationstechnisch verbunden sind. Darüber hinaus ist ein Bedienelement 26 vorgesehen, mittels welchem die Anzeigeeinrichtung 24 bzw. entsprechend mittels der Anzeigeeinrichtung 24 angezeigte Funktionen der jeweiligen Funktionseinheiten 12 bis 18 steuerbar sind, wobei das Bedienelement 26 ebenfalls informationstechnisch mit der Steuereinrichtung 20 gekoppelt ist.The system 10 further comprises a gaze detecting device 22 and a display device 24 which also both with the control device 20 Information technology are connected. In addition, there is a control 26 provided by means of which the display device 24 or accordingly by means of the display device 24 displayed functions of the respective functional units 12 to 18 are controllable, with the operating element 26 also information technology with the control device 20 is coupled.

In 2 ist ein Lenkrad 28 des Kraftwagens gezeigt, wobei das besagte Bedienelement 26 am Lenkrad 28 angeordnet ist. Am Lenkrad 28 können noch weitere Bedienelemente 30, 32 vorgesehen sein, mittels welchen ebenfalls die Funktionseinheiten 12 bis 18 ansteuerbar sein können. Das Bedienelement 26 ist im vorliegenden Fall berührungsempfindlich ausgebildet, so dass auf besonders einfache Weise eine Betätigung des Bedienelements 26 durch einen Nutzer detektiert werden kann.In 2 is a steering wheel 28 shown the motor vehicle, said control element 26 at the steering wheel 28 is arranged. At the steering wheel 28 can have more controls 30 . 32 be provided by means of which also the functional units 12 to 18 can be controlled. The operating element 26 is formed in the present case touch-sensitive, so that in a particularly simple manner an actuation of the operating element 26 can be detected by a user.

In 3 ist in einer schematischen Darstellung ein Kombiinstrument 36 des Kraftwagens gezeigt, welches Teil der Anzeigeeinrichtung 24 ist. Vorliegend ist das Kombiinstrument 36 als ein Display ausgebildet, so dass Rundinstrumente 38, 40, mittels welchen beispielsweise die Drehzahl des Kraftwagens oder die Geschwindigkeit des Kraftwagens angezeigt werden können, nicht mehr als Analoginstrumente vorgesehen sind, sondern vielmehr mittels des als Display ausgebildeten Kombiinstruments 36 eingeblendet bzw. angezeigt werden können.In 3 is a schematic representation of an instrument cluster 36 of the motor vehicle, which part of the display device 24 is. In the present case is the instrument cluster 36 designed as a display, allowing round instruments 38 . 40 , by means of which, for example, the speed of the motor vehicle or the speed of the motor vehicle can be displayed, are no longer provided as analog instruments, but rather by means of the instrument cluster designed as a display 36 can be displayed or displayed.

Innerhalb der Rundinstrumente 38 bzw. 40 sind jeweilige Anzeigebereiche 42, 44 vorgesehen, innerhalb welchen nicht näher bezeichnete Funktionen von beispielsweise einem der Funktionseinheiten 12 bis 18 angezeigt werden können. Mittels der Blickerfassungseinrichtung 22 kann der Blick 34 des Nutzers erfasst und überprüft werden, ob dieser auf eines der Anzeigebereiche 42 bzw. 44 gerichtet ist und falls dies der Fall sein sollte, wird der entsprechende Anzeigebereich 42 bzw. 44 optisch hervorgehoben, so dass dem Nutzer kenntlich gemacht wird, dass die Blickerfassung erfolgreich und seine Interaktionsabsicht mit dem entsprechenden Anzeigebereich 42 bzw. 44 und den entsprechend zugeordneten Funktionseinheiten 12 bis 18 erkannt worden ist. Das optische Hervorheben, beispielsweise durch Umranden, farbliches Invertieren der jeweiligen Anzeigebereiche 42 bzw. 44 oder dergleichen erfolgt dabei nur dann, wenn zuvor eine Berührung oder Annäherung an das Bedienelement 30 erkannt worden ist, mittels welchem die Steuerung der entsprechenden Funktionseinheiten 12 bis 18 bei einer entsprechenden Zuweisung zu einer der Anzeigebereiche 42, 44 vorgegeben worden ist.Inside the round instruments 38 respectively. 40 are respective display areas 42 . 44 provided within which unspecified functions of, for example, one of the functional units 12 to 18 can be displayed. By means of the gaze detection device 22 can the look 34 the user can be recorded and checked, whether this on one of the display areas 42 respectively. 44 and, if so, the corresponding display area 42 respectively. 44 visually highlighted so that the user is made aware that the eye tracking is successful and his intention to interact with the corresponding display area 42 respectively. 44 and the correspondingly assigned functional units 12 to 18 has been recognized. The visual highlighting, for example by edges, color inversion of the respective display areas 42 respectively. 44 or the like takes place only if previously a touch or approach to the control 30 has been recognized, by means of which the control of the corresponding functional units 12 to 18 with a corresponding assignment to one of the display areas 42 . 44 has been specified.

Sollte der Nutzer besonders schnell und einfach auf einen Teil oder auf sämtliche Funktionseinheiten 12 bis 18 zugreifen wollen bzw. eines dieser Funktionseinheiten 12 bis 18 auswählen wollen, so kann er das Bedienelement 26 betätigen, wonach sich die Anzeige des Kombiinstruments 36 wie in 4 dargestellt.Should the user be particularly quick and easy on a part or on all functional units 12 to 18 want to access or one of these functional units 12 to 18 he wants to select the control element 26 Press, after which the display of the instrument cluster 36 as in 4 shown.

Mittels der Steuereinrichtung 20 wird überprüft, ob das Bedienelement 26 betätigt worden ist und falls dieses Bedienelement 26 betätigt worden ist, wird die in 4 gezeigte Menüstruktur 46 auf dem Kombiinstrument der Anzeigeeinrichtung 24 eingeblendet bzw. dargestellt, wobei die Menüstruktur 46 eine Mehrzahl von Symbolen 48 bis 54 umfasst, denen jeweils die Funktionseinheiten 12 bis 18 zugeordnet sind bzw. werden. Das als Notenschlüssel ausgebildete Symbol 48 ist somit dem als Radio ausgebildeten Funktionseinheit 12 zugeordnet, das als Frostsymbol ausgebildete Symbol 50 ist der als Klimaautomatik ausgebildeten Funktionseinheit 14 zugeordnet, das als Kompass dargestellte Symbol 52 ist der als Navigationseinrichtung ausgebildeten Funktionseinheit 16 zugeordnet und das als Mobilfunkgerät angezeigte Symbol 54 ist der als Mobilfunkschnittstelle ausgebildeten Funktionseinheit 18 zugeordnet.By means of the control device 20 will check if the control 26 has been operated and if this control 26 has been pressed, the in 4 shown menu structure 46 on the instrument cluster of the display device 24 displayed or displayed, the menu structure 46 a plurality of symbols 48 to 54 each comprising the functional units 12 to 18 are assigned or are. The symbol designed as a clef 48 is thus the functional unit designed as a radio 12 assigned, the symbol formed as a frost symbol 50 is the functional unit designed as automatic climate control 14 assigned to the icon shown as a compass 52 is the functional unit designed as a navigation device 16 assigned and displayed as a mobile device icon 54 is the trained as a mobile interface functional unit 18 assigned.

Vorliegend wird die Blickerfassungseinrichtung 22 erst nach dem Anzeigen der Menüstruktur 46 aktiviert. Alternativ ist es aber genauso gut möglich, dass die Blickerfassungseinrichtung 22 auch vor dem Aktivieren bzw. Anzeigen der Menüstruktur 46 aktiviert bleibt, beispielsweise um die in 3 gezeigten Anzeigebereiche 40 bzw. 42 mittels einer entsprechenden Blickrichtungserkennung ansteuern bzw. auswählen zu können.The present invention will be the gaze detection device 22 only after displaying the menu structure 46 activated. Alternatively, however, it is just as possible for the eye detection device 22 also before activating or displaying the menu structure 46 remains activated, for example, the in 3 shown display areas 40 respectively. 42 be able to control or select by means of a corresponding sighting direction detection.

Mittels der aktivierten Blickerfassungseinrichtung 22 wird überprüft, ob der Blick 34 des Nutzers auf eines der Symbole 48 bis 54 gerichtet ist. Im vorliegenden Fall sei der Blick 34 auf das Symbol 50 gerichtet, welches entsprechend durch eine Umrandung 56 optisch hervorgehoben wird, wobei das Bedienelement 26 zu dem Symbol 50 zum Auswählen der entsprechenden Funktionseinheit 14 zugeordnet wird. Ferner wird, falls mittels der Blickerfassungseinrichtung 22 erkannt worden ist, dass der Blick auf das Symbol 50 gerichtet worden ist und anschließend das Bedienelement 26 betätigt worden ist, das Bedienelement 26 zum Steuern von entsprechenden Funktionen der entsprechenden Funktionseinheit 14 freigeschaltet. Beispielsweise kann bei entsprechender Umrandung 56 des Symbols 50 und anschließender Betätigung des Bedienelements 26 ein weiteres hier nicht dargestelltes Untermenü eingeblendet werden, mittels welchem verschiedenste Einstellungen an der als Klimaautomatik ausgebildeten Funktionseinheit 14 vorgenommen werden können. Dieses Menü kann beispielsweise durch eine entsprechende Betätigung des Bedienelements 26 innerhalb dieses Untermenüs wieder verlassen werden, so dass sich die in 4 gezeigte Darstellung der Menüstruktur 46 wieder ergibt.By means of the activated eye detection device 22 will check if the look 34 of the user on one of the icons 48 to 54 is directed. In the present case is the view 34 on the icon 50 directed, which accordingly by a border 56 is visually highlighted, with the operating element 26 to the symbol 50 to select the appropriate functional unit 14 is assigned. Further, if by means of the gaze detecting means 22 It has been recognized that the look on the icon 50 has been directed and then the control 26 has been pressed, the control 26 for controlling corresponding functions of the corresponding functional unit 14 unlocked. For example, with appropriate border 56 of the symbol 50 and subsequent actuation of the operating element 26 another submenu not shown here will be displayed, by means of which various settings on the trained as a climate control functional unit 14 can be made. This menu can, for example, by a corresponding operation of the control 26 within this submenu, so that the in 4 shown representation of the menu structure 46 again results.

Durch eine entsprechende Ausrichtung des Blicks 34 auf die anderen Symbole 48, 52 oder 54 wird eine entsprechende optische Hervorhebung, beispielsweise wiederum mittels der Umrandung 56 bei den entsprechenden Symbolen 48, 52 oder 54 erzielt. Mit anderen Worten kann der Nutzer durch eine entsprechende Ausrichtung seines Blicks 34 zwischen den jeweiligen Symbolen 48 bis 54 und in diesen zugeordneten Funktionseinheiten 12 bis 18 wählen und durch Betätigung des Bedienelements 26 seine blickrichtungsgesteuerte Auswahl bestätigen.Through a corresponding orientation of the gaze 34 on the other symbols 48 . 52 or 54 is a corresponding visual highlighting, for example, again by means of the border 56 with the corresponding symbols 48 . 52 or 54 achieved. In other words, the user can by an appropriate orientation of his gaze 34 between the respective symbols 48 to 54 and in these associated functional units 12 to 18 select and by pressing the control element 26 confirm its viewing direction controlled selection.

Die Symbole 48 bis 54 sind dabei mit einem vorgegebenen Abstand voneinander beabstandet angezeigt, welcher größer als ein Auflösungsvermögen der Blickerfassungseinrichtung 22 ist. Im vorliegenden Fall sind die Symbole 48 bis 54 einzeilig dargestellt und in Querrichtung x nebeneinander angeordnet. Für diesen Fall bedeutet es, dass die Symbole 48 bis 54 in Querrichtung x einen jeweils so großen Abstand voneinander aufweisen, dass mittels der Blickerfassungseinrichtung 22 eindeutig erfasst werden kann, auf welches der Symbole 48 bis 54 der Blick 34 eines Nutzers gerichtet ist.The symbols 48 to 54 are displayed spaced apart from each other at a predetermined distance, which is greater than a resolution of the eye detection device 22 is. In the present case, the symbols 48 to 54 shown in a single line and arranged x side by side in the transverse direction. For this case it means that the symbols 48 to 54 in the transverse direction x each have such a large distance from each other that by means of the gaze detection device 22 can be clearly detected on which of the symbols 48 to 54 the view 34 of a user.

Sollten noch weitere, hier nicht dargestellte Symbole innerhalb der Menüstruktur 46 vorgesehen und oberhalb der hier angezeigten Symbole angezeigt, also beispielsweise eine zweizeilige Anordnung der Symbole, vorgesehen sein, so sind die jeweiligen Symbole auch in Hochrichtung y entsprechend weit voneinander beabstandet, so dass eine eindeutige Zuordnung des fokussierten Blicks 34 auf die jeweiligen Symbole mittels der Blickerfassungseinrichtung 22 erfolgen kann. Ferner weist die gesamte Menüstruktur 46 in Querrichtung x eine größere Ausdehnung als in Hochrichtung y auf bzw. wird entsprechend angezeigt, was dem typischen Gesichtsfeld eines Nutzers entspricht.Should more, not shown here symbols within the menu structure 46 provided and displayed above the symbols displayed here, so for example, a two-line arrangement of the symbols to be provided, the respective symbols are also in the vertical direction y correspondingly far apart, so that an unambiguous assignment of the focused view 34 to the respective symbols by means of the gaze detection device 22 can be done. Furthermore, the entire menu structure has 46 in the transverse direction x a greater extent than in the vertical direction y or is displayed accordingly, which corresponds to the typical field of view of a user.

Wie zu erkennen, wird trotz der Einblendung der Menüstruktur 46 nach wie vor zumindest noch das Rundinstrument 38 eingeblendet, bei welchem im vorliegenden Fall die Geschwindigkeit des Kraftwagens angezeigt werden soll. Damit das Rundinstrument 38 trotz der Einblendung der Menüstruktur 46 noch vollständig angezeigt werden kann, wird dies im Gegensatz zu der in 3 gezeigten Darstellung etwas verkleinert angezeigt. Sollte hingegen die Anzeigeeinrichtung 24 beispielsweise noch ein Head-up-Display umfassen, kann die Geschwindigkeitsanzeige beispielsweise auch innerhalb des Head-up-Displays erfolgen. Alternativ oder auch zusätzlich ist es möglich, dass die hier gezeigte Menüstruktur 46 mit ihren Symbolen 48 bis 54 bei einer Betätigung des Bedienelements 26 innerhalb des Head-up-Displays angezeigt wird. Die Menüführung bzw. Bedienung der Menüstruktur 46 mit einer entsprechenden Bedienung der zugeordneten Funktionseinheiten 12 bis 18 erfolgt analog zu der bereits beschriebenen Bedienung, falls die Menüstruktur 46 innerhalb des Kombiinstruments 38 angezeigt wird.As you can see, despite the display of the menu structure 46 still at least the round instrument 38 in which, in the present case, the speed of the Motor vehicle to be displayed. So that the round instrument 38 despite the display of the menu structure 46 can still be fully displayed, this is unlike the in 3 shown slightly reduced displayed. On the other hand, should the display device 24 For example, include a head-up display, the speed indicator can also be done, for example, within the head-up display. Alternatively or additionally, it is possible that the menu structure shown here 46 with their symbols 48 to 54 upon actuation of the operating element 26 within the head-up display. The menu navigation or operation of the menu structure 46 with a corresponding operation of the assigned functional units 12 to 18 takes place analogously to the operation already described, if the menu structure 46 inside the instrument cluster 38 is shown.

Anhand der 1 bis 4 wurde bislang lediglich darauf eingegangen, dass das System 10 in einem Kraftwagen eingesetzt wird. Darüber hinaus ist es jedoch auch möglich, dass das System 10 als Teil eines mobilen, hier nicht dargestellten Endgerätes ausgebildet ist. Bei dem mobilen Endgerät kann es sich beispielsweise um ein Mobilfunktelefon, ein Smartphone, ein Tablet-PC, ein Notebook oder dergleichen handeln. Bei den Funktionseinheiten handelt es sich bei dem mobilen Endgerät vorzugsweise um entsprechende Applikationen, wobei analog zu den bisher beschriebenen Verfahrensschritten ebenfalls durch Betätigen eines entsprechenden Bedienelements eine entsprechende Menüstruktur mit einer Mehrzahl von den Funktionseinheiten bzw. Applikationen zugeordneten Symbolen angezeigt werden kann. Die Bedienung der Menüstruktur mit ihren entsprechenden Symbolen und zugeordneten Applikationen bzw. Funktionseinheiten erfolgt dabei analog zu dem bisher beschriebenen Verfahren.Based on 1 to 4 So far, it has only been considered that the system 10 used in a motor vehicle. In addition, however, it is also possible that the system 10 is designed as part of a mobile, not shown here terminal. The mobile terminal may be, for example, a mobile phone, a smartphone, a tablet PC, a notebook or the like. In the case of the functional units, the mobile terminal is preferably a corresponding application, whereby a corresponding menu structure with a plurality of symbols assigned to the functional units or applications can also be displayed analogously to the previously described method steps by actuating a corresponding control element. The operation of the menu structure with their corresponding symbols and associated applications or functional units is carried out analogously to the method described so far.

Mittels des beschriebenen Systems 10 bzw. Verfahrens wird somit das Aufrufen einer entsprechenden Menüstruktur mit einer Mehrzahl von jeweiligen Funktionseinheiten bzw. Applikationen zugeordneten Symbolen ermöglicht, wobei in Kombination mit einer Blickerfassungseinrichtung bzw. Blickerkennung eine besonders schnelle und intuitive Steuerung jeweiliger Funktionseinheiten über eine blickrichtungsgesteuerte Auswahl der jeweiligen Symbole erfolgen kann.By means of the described system 10 Thus, a corresponding menu structure can be called up with a plurality of symbols assigned to respective functional units or applications, wherein in combination with a gaze detection device or gaze recognition, a particularly fast and intuitive control of respective functional units can take place via a view direction-controlled selection of the respective symbols.

Die Menüstruktur 46 kann dabei auf besonders einfache Weise durch entsprechende Betätigung des vorgegebenen Bedienelements 26 aufgerufen und gegebenenfalls, also falls die Menüstruktur nicht mehr gebraucht werden sollte, beispielsweise durch eine entsprechende Betätigung des Bedienelements 26 wieder verlassen werden. Eine Bestätigung der Auswahl der entsprechenden Symbole 48 bis 54 oder weiterer Symbole erfolgt dabei durch eine Art Bestätigung mit den Augen bzw. über den Blick 34 und über das vorzugsweise mechanisch betätigbare Bedienelement 26. Der Vorteil besteht insbesondere darin, dass eine Aktivierung und Auswahlbestätigung in diesem gesonderten Eingabemodus, bei welchem die Menüstruktur 46 angezeigt wird, über ein- und dasselbe Bedienelement 26 erfolgen kann. Dadurch ist kein Umgreifen notwendig und eine geringere Ablenkung des Nutzers ist dabei die Folge, da dieser die entsprechenden Symbole 48 bis 54 und die zugeordneten Funktionseinheiten besonders einfach, schnell und intuitiv auswählen sowie auch bedienen kann.The menu structure 46 can in a particularly simple manner by appropriate actuation of the given operating element 26 called and optionally, so if the menu structure should not be needed, for example, by a corresponding actuation of the control 26 be left again. A confirmation of the selection of the corresponding symbols 48 to 54 or other symbols is done by a kind of confirmation with the eyes or over the view 34 and via the preferably mechanically actuated operating element 26 , The advantage is in particular that an activation and selection confirmation in this separate input mode, in which the menu structure 46 is displayed via the same control element 26 can be done. As a result, no embrace is necessary and a smaller distraction of the user is the result, since this the corresponding symbols 48 to 54 and the assigned functional units very easy, fast and intuitive to select and operate.

ZITATE ENTHALTEN IN DER BESCHREIBUNG QUOTES INCLUDE IN THE DESCRIPTION

Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant has been generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.

Zitierte PatentliteraturCited patent literature

  • DE 10121392 A1 [0002] DE 10121392 A1 [0002]
  • DE 102009034069 A1 [0003] DE 102009034069 A1 [0003]
  • DE 102007049710 A1 [0004] DE 102007049710 A1 [0004]
  • EP 2390139 A1 [0005] EP 2390139 A1 [0005]
  • DE 102009046451 A1 [0006] DE 102009046451 A1 [0006]

Claims (11)

Verfahren zum blickrichtungsabhängigen Steuern einer Mehrzahl von Funktionseinheiten (12, 14, 16, 18), insbesondere eines Kraftwagens, mit den Schritten: – Überprüfen mittels einer Steuereinrichtung (20), ob ein vorgegebenes Bedienelement betätigt worden ist; – falls dieses Bedienelement (26) betätigt worden ist: Anzeigen einer Menüstruktur auf einer Anzeigeeinrichtung (24), welche eine Mehrzahl von Symbolen (48, 50, 52, 54) umfasst, denen jeweils eine der Funktionseinheiten (12, 14, 16, 18) zugeordnet wird; – Überprüfen mittels einer Blickerfassungseinrichtung (22), ob der Blick (34) eines Nutzers auf eines der Symbole gerichtet ist; – falls der Blick auf eines der Symbole (48, 50, 52, 54) gerichtet ist: optisches Hervorheben dieses Symbols (48, 50, 52, 54) und Zuordnen des Bedienelements (26) zu diesem Symbol (48, 50, 52, 54) zum Auswählen der entsprechenden Funktionseinheit (12, 14, 16, 18).Method for viewing direction-dependent control of a plurality of functional units ( 12 . 14 . 16 . 18 ), in particular a motor vehicle, comprising the steps of: - checking by means of a control device ( 20 ), whether a predetermined operating element has been actuated; - if this control element ( 26 ): displaying a menu structure on a display device ( 24 ) containing a plurality of symbols ( 48 . 50 . 52 . 54 ), to each of which one of the functional units ( 12 . 14 . 16 . 18 ) is assigned; Checking by means of a gaze detection device ( 22 ), if the view ( 34 ) of a user is directed to one of the symbols; - if the view of one of the symbols ( 48 . 50 . 52 . 54 ): visual highlighting of this symbol ( 48 . 50 . 52 . 54 ) and assigning the control element ( 26 ) to this symbol ( 48 . 50 . 52 . 54 ) for selecting the corresponding functional unit ( 12 . 14 . 16 . 18 ). Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass falls mittels der Blickerfassungseinrichtung (22) erkannt worden ist, dass der Blick (34) auf eines der Symbole (48, 50, 52, 54) gerichtet worden ist, und anschließend das Bedienelement (26) betätigt worden ist, das Bedienelement (26) zum Steuern von Funktionen der entsprechenden Funktionseinheit (12, 14, 16, 18) freigeschaltet wird.A method according to claim 1, characterized in that if by means of the gaze detection device ( 22 ) has been recognized that the view ( 34 ) on one of the symbols ( 48 . 50 . 52 . 54 ), and then the control element ( 26 ), the operating element ( 26 ) for controlling functions of the corresponding functional unit ( 12 . 14 . 16 . 18 ) is unlocked. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass die Symbole (48, 50, 52, 54) mit einem vorgegebenen Abstand voneinander beabstandet angezeigt werden, welcher größer als ein Auflösungsvermögen der Blickerfassungseinrichtung (22) ist.Method according to claim 1 or 2, characterized in that the symbols ( 48 . 50 . 52 . 54 ) are displayed at a predetermined distance apart, which is greater than a resolution of the eye-detection device ( 22 ). Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Menüstruktur (46) in Querrichtung (x) mit einer größeren Ausdehnung als in Hochrichtung (y) angezeigt wird.Method according to one of the preceding claims, characterized in that the menu structure ( 46 ) is displayed in the transverse direction (x) with a greater extent than in the vertical direction (y). Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Blickerfassungseinrichtung (22) erst nach dem Anzeigen der Menüstruktur (46) aktiviert wird.Method according to one of the preceding claims, characterized in that the eye-detection device ( 22 ) only after displaying the menu structure ( 46 ) is activated. System (10) zum blickrichtungsabhängigen Steuern einer Mehrzahl von Funktionseinheiten (12, 14, 16, 18), insbesondere eines Kraftwagens, mit: – einem Bedienelement (26), mittels welchem eine Menüstruktur (46) auf einer Anzeigeeinrichtung (24), welche eine Mehrzahl von Symbolen (48, 50, 52, 54) umfasst, denen jeweils eine der Funktionseinheiten (12, 14, 16, 18) zugeordnet ist, aufrufbar ist; – einer Blickerfassungseinrichtung (22), welche dazu ausgelegt ist, zu überprüfen, ob der Blick (34) eines Nutzers auf eines der Symbole (48, 50, 52, 54) gerichtet ist; – einer Steuereinrichtung (20), welche dazu ausgelegt ist, bei einer erkannten Ausrichtung des Blicks (34) auf eines der Symbole (48, 50, 52, 54) dieses optisch hervorzuheben und das Bedienelement (26) diesem Symbol (48, 50, 52, 54) zum Auswählen der entsprechenden Funktionseinheit (12, 14, 16, 18) zuzuordnen.System ( 10 ) for viewing direction-dependent control of a plurality of functional units ( 12 . 14 . 16 . 18 ), in particular of a motor vehicle, comprising: - a control element ( 26 ), by means of which a menu structure ( 46 ) on a display device ( 24 ) containing a plurality of symbols ( 48 . 50 . 52 . 54 ), to each of which one of the functional units ( 12 . 14 . 16 . 18 ) is callable; A gaze detection device ( 22 ), which is designed to check whether the view ( 34 ) of a user on one of the symbols ( 48 . 50 . 52 . 54 ) is directed; A control device ( 20 ), which is designed, with a recognized orientation of the gaze ( 34 ) on one of the symbols ( 48 . 50 . 52 . 54 ) to emphasize this visually and the operating element ( 26 ) this symbol ( 48 . 50 . 52 . 54 ) for selecting the corresponding functional unit ( 12 . 14 . 16 . 18 ). System (10) nach Anspruch 6, dadurch gekennzeichnet, dass das Bedienelement (26) berührungsempfindlich ausgebildet ist.System ( 10 ) according to claim 6, characterized in that the operating element ( 26 ) is formed touch-sensitive. Kraftwagen mit einem System (10) nach einem der Ansprüche 6 oder 7.Car with a system ( 10 ) according to one of claims 6 or 7. Kraftwagen nach Anspruch 8, dadurch gekennzeichnet, dass das Bedienelement (26) an einem Lenkrad (28) des Kraftwagens angeordnet ist.Motor vehicle according to claim 8, characterized in that the operating element ( 26 ) on a steering wheel ( 28 ) of the motor vehicle is arranged. Kraftwagen nach Anspruch 8 oder 9, dadurch gekennzeichnet, dass die Anzeigeinrichtung (24) ein Kombiinstrument (36) und/oder ein Head-Up-Display des Kraftwagens umfasst.Motor vehicle according to claim 8 or 9, characterized in that the display device ( 24 ) an instrument cluster ( 36 ) and / or a head-up display of the motor vehicle. Mobiles Endgerät mit einem System (10) nach einem der Ansprüche 6 oder 7.Mobile terminal with a system ( 10 ) according to one of claims 6 or 7.
DE102013001384.4A 2013-01-26 2013-01-26 Method and system for viewing direction-dependent control of a plurality of functional units and motor vehicles and mobile terminal with such a system Pending DE102013001384A1 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE102013001384.4A DE102013001384A1 (en) 2013-01-26 2013-01-26 Method and system for viewing direction-dependent control of a plurality of functional units and motor vehicles and mobile terminal with such a system
PCT/EP2014/000039 WO2014114428A1 (en) 2013-01-26 2014-01-10 Method and system for controlling, depending on the line of vision, a plurality of functional units, motor vehicle and mobile terminal having said system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102013001384.4A DE102013001384A1 (en) 2013-01-26 2013-01-26 Method and system for viewing direction-dependent control of a plurality of functional units and motor vehicles and mobile terminal with such a system

Publications (1)

Publication Number Publication Date
DE102013001384A1 true DE102013001384A1 (en) 2014-07-31

Family

ID=49955316

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102013001384.4A Pending DE102013001384A1 (en) 2013-01-26 2013-01-26 Method and system for viewing direction-dependent control of a plurality of functional units and motor vehicles and mobile terminal with such a system

Country Status (2)

Country Link
DE (1) DE102013001384A1 (en)
WO (1) WO2014114428A1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102015113066A1 (en) 2015-08-07 2017-02-09 Dr. Ing. H.C. F. Porsche Aktiengesellschaft Display system and operating system of a motor vehicle
DE102021126191A1 (en) 2021-10-08 2023-04-13 Bayerische Motoren Werke Aktiengesellschaft DEVICE AND METHOD FOR OPERATION OF A VEHICLE, IN PARTICULAR MOTOR VEHICLE, AND VEHICLE

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10121392A1 (en) 2001-05-02 2002-11-21 Bosch Gmbh Robert Device for controlling devices by viewing direction
DE102007049710A1 (en) 2007-10-17 2009-04-23 Robert Bosch Gmbh Visual triggering of operations in a motor vehicle
DE102009034069A1 (en) 2008-11-10 2010-05-12 Volkswagen Ag Operating device for a motor vehicle
DE102009046451A1 (en) 2009-11-06 2011-05-12 Robert Bosch Gmbh Method for detecting vision attention to assembly area of e.g. infotainment device of motor vehicle, involves outputting signal via interface when viewing direction of occupant is directed to area so as to detect vision attention to area
EP2390139A1 (en) 2010-05-31 2011-11-30 Volvo Car Corporation Interior lighting and illumination control

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120169582A1 (en) * 2011-01-05 2012-07-05 Visteon Global Technologies System ready switch for eye tracking human machine interaction control system
DE102012006966A1 (en) * 2012-04-04 2012-11-08 Daimler Ag Method for triggering vehicle-side executable function e.g. ventilation function, involves determining operation patch observed by rider, and triggering vehicle-side executable function in user-controlled manner based on determined patch

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10121392A1 (en) 2001-05-02 2002-11-21 Bosch Gmbh Robert Device for controlling devices by viewing direction
DE102007049710A1 (en) 2007-10-17 2009-04-23 Robert Bosch Gmbh Visual triggering of operations in a motor vehicle
DE102009034069A1 (en) 2008-11-10 2010-05-12 Volkswagen Ag Operating device for a motor vehicle
DE102009046451A1 (en) 2009-11-06 2011-05-12 Robert Bosch Gmbh Method for detecting vision attention to assembly area of e.g. infotainment device of motor vehicle, involves outputting signal via interface when viewing direction of occupant is directed to area so as to detect vision attention to area
EP2390139A1 (en) 2010-05-31 2011-11-30 Volvo Car Corporation Interior lighting and illumination control

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102015113066A1 (en) 2015-08-07 2017-02-09 Dr. Ing. H.C. F. Porsche Aktiengesellschaft Display system and operating system of a motor vehicle
DE102021126191A1 (en) 2021-10-08 2023-04-13 Bayerische Motoren Werke Aktiengesellschaft DEVICE AND METHOD FOR OPERATION OF A VEHICLE, IN PARTICULAR MOTOR VEHICLE, AND VEHICLE

Also Published As

Publication number Publication date
WO2014114428A1 (en) 2014-07-31

Similar Documents

Publication Publication Date Title
EP3047355B1 (en) Method and system for operating at least one display device of a motor vehicle, and motor vehicle comprising a system for operating at least one display device
DE102014016222A1 (en) Method and system for operating a touch-sensitive display device of a motor vehicle
DE102009032069A1 (en) Method and device for providing a user interface in a vehicle
DE102009034069A1 (en) Operating device for a motor vehicle
DE102012215407A1 (en) Providing an input for a control
DE102014200993A1 (en) User interface and method for adapting a view on a display unit
DE102013003059A1 (en) Method for controlling functional unit of motor vehicle, involves automatically detecting whether view of vehicle occupant to given area is directed by view detection unit
DE102013217558A1 (en) Method for controlling an information display device and device with an information display device
DE102014015087A1 (en) Operating a control system for a motor vehicle and control system for a motor vehicle
DE102014222195A1 (en) Vehicle operation depending on the driving mode
DE102013000069B4 (en) Motor vehicle user interface with a control element for detecting a control action
DE102015201901A1 (en) Determining a position of a vehicle-foreign object in a vehicle
DE102014011118B4 (en) Method for operating a light function of motor vehicle headlights and motor vehicle with a display device and a control element for operating the light function of the motor vehicle headlights
DE102013000744A1 (en) Method and system for controlling at least one functional unit and motor vehicle and mobile terminal with such a system
DE102013001384A1 (en) Method and system for viewing direction-dependent control of a plurality of functional units and motor vehicles and mobile terminal with such a system
DE102013011531B4 (en) Method for operating an assistance system of a motor vehicle and assistance system for a motor vehicle
DE102016001998A1 (en) A motor vehicle operating device and method for operating an operating device to effect an interaction between a virtual display plane and a hand
DE102013003047A1 (en) Method for controlling functional unit of motor vehicle, involves activating control function for controlling functional unit, when user has performed given blink pattern that is specified as double blink of the user
DE102012005886B4 (en) Method for operating an operating device of a motor vehicle
DE102013001382A1 (en) Display system and method for viewing direction dependent operation of a display system
DE102014001183B4 (en) Method and system for triggering at least one function of a motor vehicle
DE102015201722A1 (en) Method for operating an input device, input device
DE102013013168A1 (en) Method for operating an infotainment system of a motor vehicle and infotainment system for a motor vehicle
DE102013011414A1 (en) Method for controlling mirror function in motor car, involves executing display of function of mirror adjusting mechanism in display unit as direct reaction to actuation of operating element for activating mechanism
EP3976411B1 (en) Method for graphically configuring a display instrument in a motor vehicle and motor vehicle for carrying out said method

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R082 Change of representative

Representative=s name: HOFSTETTER, SCHURACK & PARTNER - PATENT- UND R, DE

R016 Response to examination communication