DE102009018590B4

DE102009018590B4 - Motor vehicle with an operating device and associated method

Info

Publication number: DE102009018590B4
Application number: DE102009018590.9A
Authority: DE
Inventors: Dr. Neugebauer Moritz; Dr. Oel Peter
Original assignee: Volkswagen AG
Current assignee: Volkswagen AG
Priority date: 2009-04-23
Filing date: 2009-04-23
Publication date: 2022-11-17
Anticipated expiration: 2029-04-24
Also published as: DE102009018590A1

Abstract

Kraftfahrzeug (1) mit einer Bedienvorrichtung (4) zur menügeführten Bedienung des Kraftfahrzeuges (1), wobei die Bedienvorrichtung (4) ein Display (12) umfasst, und wobei das Kraftfahrzeug (1) eine Spracheingabevorrichtung (26) umfasst, dadurch gekennzeichnet, dass das Kraftfahrzeug (1) eine Recheneinrichtung (10) eingerichtet zur Darstellung einer von der Anzeige auf dem Display (12) unabhängigen Liste von Untermenüs mittels des Displays (12) umfasst, die einem Schlüsselwort in einem von der Spracheingabevorrichtung (26) aufgenommenen Sprachbefehl zugeordnet sind, wobei die Liste zumindest einen ersten Eintrag umfasst, der auf ein erstes Untermenü verweist, und einen zweiten Eintrag umfasst, der auf ein zweites Untermenü verweist, und wobei das erste Untermenü einer anderen Menüebene zugeordnet ist als das zweite Untermenü.

Motor vehicle (1) with an operating device (4) for menu-guided operation of the motor vehicle (1), the operating device (4) comprising a display (12), and the motor vehicle (1) comprising a voice input device (26), characterized in that the motor vehicle (1) has a computing device (10) set up to display a list of submenus, which is independent of what is shown on the display (12), by means of the display (12) and which is assigned to a keyword in a voice command recorded by the voice input device (26). , wherein the list comprises at least a first entry that refers to a first submenu and a second entry that refers to a second submenu, and wherein the first submenu is assigned to a different menu level than the second submenu.

Description

Die Erfindung betrifft ein Kraftfahrzeug mit einer Bedienvorrichtung zur menügeführten Bedienung des Kraftfahrzeuges, wobei die Bedienvorrichtung ein Display umfasst, und wobei das Kraftfahrzeug eine Spracheingabevorrichtung umfasst.The invention relates to a motor vehicle with an operating device for menu-guided operation of the motor vehicle, the operating device comprising a display and the motor vehicle comprising a voice input device.

Eine menügeführte Bedienung des Kraftfahrzeuges ist z. B. aus der DE 10 2006 050 017 A1 bekannt.A menu-driven operation of the motor vehicle is z. B. from the DE 10 2006 050 017 A1 known.

Die Bedienung von Kraftfahrzeugen mittels Spracheingaben ist aus der US 4 827 520 A und der EP 1 342 605 A1 bekannt, wobei Letztere eine Vorrichtung zur Steuerung einer Bildschirmanzeige für ein Kraftfahrzeug zur Auswahl von Menüpunkten beschreibt, wobei Mittel zur sprachgesteuerten Betätigung, Mittel zur manuellen Betätigung sowie zumindest ein Bildschirm mit einem Analoginstrumentenbereich und mit einer Bildschirmanzeige für die Menüführung vorgesehen sind.The operation of motor vehicles using voice inputs is from the U.S. 4,827,520 A and the EP 1 342 605 A1 known, the latter describing a device for controlling a screen display for a motor vehicle for selecting menu items, with means for voice-controlled actuation, means for manual actuation and at least one screen with an analog instrument area and with a screen display for menu navigation being provided.

Die DE 10 2008 033 056 A1 offenbart ein Kraftfahrzeug mit einer Bedienvorrichtung zur manuellen Eingabe eines Befehls zur Bedienung einer Funktion des Kraftfahrzeuges sowie mit einem Mikrofon zur akustischen Eingabe eines Befehls zur Bedienung der Funktion des Kraftfahrzeuges, wobei das Kraftfahrzeug eine Steuerung zur Erkennung einer mittels der Bedienvorrichtung erfolgten manuellen Eingabe, zur Ermittlung einer der manuellen Eingabe entsprechenden zugelassenen akustischen Eingabe und zur akustischen Ausgabe der ermittelten zugelassenen akustischen Eingabe mittels eines Lautsprechers aufweist.the DE 10 2008 033 056 A1 discloses a motor vehicle with an operating device for manually inputting a command for operating a function of the motor vehicle and with a microphone for acoustically inputting a command for operating the function of the motor vehicle, the motor vehicle having a controller for detecting a manual input made using the operating device for determination has a permitted acoustic input corresponding to the manual input and for the acoustic output of the determined permitted acoustic input by means of a loudspeaker.

Die DE 103 60 655 A1 offenbart ein Bediensystem für ein Kraftfahrzeug mit einer Bildschirmanzeige, einem manuellen Betätigungsmittel, einer Steuer- und Auswerteeinheit, Sprachsteuermitteln und mehreren Fahrzeugsystemen, wie ein Navigationssystem, eine Heizungs- und Klimaanlage, ein Mobiltelefon, ein Videosystem, ein Audiosystem, wobei die Fahrzeugsysteme Signale an die Auswerte- und Steuereinheit übertragen, aus denen die Steuer- und Auswerteeinheit aktuelle Systemzustände ermittelt, und wobei die Bedienung aller Applikationen und/oder Funktionen und/oder Subfunktionen und/oder Optionen und/oder Statusanzeigen in verschiedenen Menüebenen einer Menüstruktur durch das manuelle Betätigungsmittel erfolgt. the DE 103 60 655 A1 discloses an operating system for a motor vehicle with a screen display, a manual operating means, a control and evaluation unit, voice control means and several vehicle systems, such as a navigation system, a heating and air conditioning system, a mobile phone, a video system, an audio system, the vehicle systems sending signals to the Transfer evaluation and control unit, from which the control and evaluation unit determines current system states, and the operation of all applications and / or functions and / or sub-functions and / or options and / or status displays in different menu levels of a menu structure by the manual operating means.

Zusätzlich können vorgegebene Applikationen und/oder Funktionen und/oder Subfunktionen und/oder Optionen und/oder Statusanzeigen in verschiedenen Menüebenen der Menüstruktur, redundant zur Bedienung mit dem manuellen Betätigungsmittel, mit den Sprachsteuermitteln durch eine entsprechende Spracheingabe bedient werden. Zur Sprachbedienung sind Schlüsselworte für die Sprachsteuermittel in mindestens zwei Begriffsgruppen aufgeteilt, die durch einfache Regeln festlegbar sind und die bestimmen, welche Schlüsselworte zur Menüführung aktuell eingebbar sind. Eine erste Begriffsgruppe umfasst aktuell in einem aktiven Darstellungsbereich der Bildschirmanzeige angezeigte Einträge, die gleichzeitig als Schlüsselworte einen ersten Teilwortschatz den Sprachsteuerungsmitteln zur Verfügung stellen. Die Schlüsselworte der ersten Begriffsgruppe sind daher vom aktiven Darstellungsbereich und/oder von der Menüebene abhängig. Eine zweite Begriffsgruppe umfasst lokale Schlüsselworte, die als zweiter Teilwortschatz den Sprachsteuerungsmitteln zusätzlich zum ersten Teilwortschatz zur Verfügung stehen und von der aktuellen Menüebene abhängig sind. Eine dritte Begriffsgruppe umfasst globale Schlüsselworte, die als dritter Teilwortschatz zusätzlich zum ersten und zweiten Teilwortschatz den Sprachsteuerungsmitteln zur Verfügung stehen und unabhängig von der aktuellen Menüebene und/oder vom aktiven Darstellungsbereich sind. Bei der Spracheingabe eines Schlüsselwortes, das mindestens zwei Begriffsgruppen zugeordnet ist, wird die der aktuellen Menüebene und/oder dem aktiven Darstellungsbereich zugeordnete Funktion ausgeführt.In addition, predefined applications and/or functions and/or subfunctions and/or options and/or status displays in different menu levels of the menu structure can be operated with the voice control means by means of a corresponding voice input, redundant to operation with the manual operating means. For voice control, keywords for the voice control means are divided into at least two groups of terms that can be defined using simple rules and that determine which keywords can currently be entered for menu navigation. A first group of terms includes entries currently displayed in an active display area of the screen display, which at the same time make a first partial vocabulary available to the voice control means as keywords. The keywords of the first group of terms are therefore dependent on the active display area and/or the menu level. A second group of terms includes local key words that are available to the voice control means as a second partial vocabulary in addition to the first partial vocabulary and are dependent on the current menu level. A third group of terms includes global keywords that are available to the voice control means as a third partial vocabulary in addition to the first and second partial vocabulary and are independent of the current menu level and/or the active display area. When a keyword that is assigned to at least two groups of terms is spoken, the function assigned to the current menu level and/or the active display area is executed.

Die DE 103 60 656 A1 betrifft ein Bediensystem für ein Fahrzeug mit einer Bildschirmanzeige mit mehreren Darstellungsbereichen zur Darstellung von Einträgen einer Menüstruktur mit mehreren Menüebenen, einem manuellen Betätigungsmittel zur Auswahl und/oder Aktivierung von mindestens einem Eintrag in einer aktuellen Menüebene aus der Menüstruktur, Sprachsteuermitteln für eine redundante Auswahl und/oder Aktivierung von mindestens einem Eintrag aus der Menüstruktur. Dabei werten die Sprachsteuermittel die aktuelle Menüebene und/oder einen aktiven Darstellungsbereich und/oder eine aktuelle Cursorposition aus und ermitteln in Abhängigkeit von der Auswertung eine Bedienabsicht, wobei die Sprachsteuermittel nach ihrer Aktivierung mindestens einen der ermittelten Bedienabsicht zugeordneten Sprachdialog zur Auswahl und/oder Aktivierung von einem oder mehreren Einträgen aus der Menüstruktur starten.the DE 103 60 656 A1 relates to an operating system for a vehicle with a screen display with multiple display areas for displaying entries in a menu structure with multiple menu levels, a manual operating means for selecting and/or activating at least one entry in a current menu level from the menu structure, voice control means for a redundant selection and/or or activation of at least one entry from the menu structure. The voice control means evaluate the current menu level and/or an active display area and/or a current cursor position and, depending on the evaluation, determine an operating intention, with the voice control means, after activation, at least one voice dialog assigned to the determined operating intention for selecting and/or activating start one or more entries from the menu structure.

Die EP 1 164 464 B1 betrifft ein Verfahren zum Steuern eines Systems, insbesondere eines elektrischen und/oder elektronischen Systems mit mehreren Anwendungseinrichtungen, bei dem eingegebene Steuerinformation in Form eines gesprochenen Befehls erfasst wird; wobei die erfassten Steuerinformationen identifiziert werden und automatisch eine Bestimmung vorgenommen wird, mit welcher Anwendungseinrichtung die erfasste Steuerinformation verknüpft ist. Falls die erfasste Steuerinformation mit einer einzigen Anwendungseinrichtung verknüpft ist, wird die verknüpfte Anwendungseinrichtung und die erfasste Steuerinformation als eine Ansage oder Anzeige zum Bestätigen der erfassten Ein-gabe von Steuerinformationen zurückgemeldet und eine Steuerung entsprechend der erfassten Steuerinformationen in der Anwen-dungseinrichtung ausgeführt. Falls die erfasste Steuerinformation mit mehr als einer Anwendungseinrichtung verknüpft ist, wird eine Eingabeaufforderung zum Auswählen einer Anwendungseinrichtung bereitgestellt, mit der die erfasste Steuerinformation verknüpft werden soll, wobei auf die Auswahl der Anwendungseinrichtung hin eine Steuerung entsprechend der erfassten Steuerinformation in der Anwendungseinrichtung ausgeführt wird.the EP 1 164 464 B1 relates to a method for controlling a system, in particular an electrical and/or electronic system with a number of application devices, in which input control information is recorded in the form of a spoken command; wherein the collected control information is identified and a determination is automatically made as to which application device the collected control information is associated with. If the collected control information is associated with a single application device, the associated application will be a direction and the detected control information is returned as an announcement or display for confirming the detected input of control information, and control is executed in accordance with the detected control information in the application device. If the collected control information is associated with more than one application device, a prompt is provided for selecting an application device to which the collected control information is to be associated, upon selection of the application device control corresponding to the collected control information being executed in the application device.

Es ist Aufgabe der Erfindung, eine robustere bzw. verbesserte Bedienung von Kraftfahrzeugen mittels Spracheingaben anzugeben. Robust in diesem Sinne soll insbesondere bedeuten, dass weniger bzw. keine falschen Bedienungen aufgrund eines Sprachbefehls vorgenommen werden.It is the object of the invention to specify a more robust or improved operation of motor vehicles by means of voice inputs. Robust in this sense is intended to mean in particular that fewer or no incorrect operations are carried out on the basis of a voice command.

Vorgenannte Aufgabe wird durch ein Kraftfahrzeug gemäß den Ansprüchen 1 bis 13 sowie durch ein Verfahren gemäß den Ansprüchen 14 und 15 gelöst. Dabei umfasst ein Kraftfahrzeug unter anderem eine Bedienvorrichtung zur menügeführten Bedienung des Kraftfahrzeuges, wobei die Bedienvorrichtung ein Display und vorteilhafterweise eine dem Display zugeordnete Bedienanordnung umfasst, wobei das Kraftfahrzeug eine Spracheingabevorrichtung umfasst, und wobei das Kraftfahrzeug eine Recheneinrichtung zur Darstellung einer von der Anzeige auf dem Display unabhängigen Liste von Untermenüs mittels des Displays umfasst, die einem Schlüsselwort in einem von der Spracheingabevorrichtung aufgenommenen Sprachbefehl zugeordnet sind.The aforementioned object is achieved by a motor vehicle according to claims 1 to 13 and by a method according to claims 14 and 15. A motor vehicle includes, among other things, an operating device for menu-guided operation of the motor vehicle, the operating device including a display and advantageously an operating arrangement assigned to the display, the motor vehicle including a voice input device, and the motor vehicle having a computing device for displaying one of the displays on the display includes independent list of submenus by means of the display, which are associated with a keyword in a recorded by the voice input device voice command.

Eine menügeführte Bedienung im Sinne der Erfindung soll insbesondere bedeuten, dass ausgehend einem Hauptmenü Untermenüs vorgesehen sind. Untermenüs sollen dabei insbesondere Menüs sein, die durch einen Aufruf in der obersten Menüebene, also dem Hauptmenü, oder einem anderen Untermenü aufgerufen werden. Untermenüs können insbesondere wiederum den Aufruf weiterer Untermenüs vorsehen. Ein Schlüsselwort in einem Sprachbefehl kann auch der Sprachbefehl selbst sein. In dem Sprachbefehl „Bitte zeige mein Telefonbuch an.“ ist zum Beispiel das Wort „Telefonbuch“ das Schlüsselwort. Lautet der Sprachbefehl dagegen lediglich „Telefonbuch“, ist „Telefonbuch“ gleichzeitig das Schlüsselwort. Eine Liste von Untermenüs soll im Sinne der Erfindung Einträge umfassen, die jeweils auf (zumindest) ein Untermenü verweisen. Beispiele für derartige Listen sind zum Beispiel in 7 und 10 dargestellt. Eine von der Anzeige auf dem Display unabhängige Liste ist im Sinne der Erfindung insbesondere eine Liste, die lediglich von dem identifizierten Schlüsselwort eines Sprachbefehls abhängig ist. Eine von der Anzeige auf dem Display unabhängige Liste ist insbesondere eine Liste, die von dem aktuell dargestellten Untermenü oder Hauptmenü unabhängig ist.A menu-driven operation in the sense of the invention should mean in particular that sub-menus are provided starting from a main menu. In particular, submenus should be menus that are called up by calling up the top menu level, ie the main menu, or another submenu. In particular, submenus can in turn provide for calling up further submenus. A keyword in a voice command can also be the voice command itself. For example, in the voice command "Please view my phone book.", the word "phone book" is the keyword. If, on the other hand, the voice command is only "phone book", "phone book" is also the key word. According to the invention, a list of submenus should include entries that each refer to (at least) one submenu. Examples of such lists are in 7 and 10 shown. According to the invention, a list that is independent of the display is in particular a list that is only dependent on the identified key word of a voice command. A list that is independent of what is displayed on the display is in particular a list that is independent of the submenu or main menu currently being displayed.

In vorteilhafter Ausgestaltung der Erfindung umfasst die menügeführte Bedienung eine Menütiefe von zumindest drei, insbesondere zumindest vier, Ebenen. In weiterhin vorteilhafter Ausgestaltung der Erfindung ist ein Untermenü, das in der Liste aufgeführt ist, mittels der Bedienanordnung aufrufbar. In weiterhin vorteilhafter Ausgestaltung der Erfindung ist ein Untermenü, das in der Liste aufgeführt ist, mittels eines weiteren Sprachbefehls aufrufbar. Ein weiterer Sprachbefehl im Sinne der Erfindung ist insbesondere der angezeigten Liste zugeordnet. Ein derartiger Sprachbefehl kann zum Beispiel einem Eintrag der Liste (bzw. dessen Benennung) entsprechen, der auf ein Untermenü verweist. Ist zum Beispiel ein Eintrag einer angezeigten Liste von Untermenüs „Hilfe Telefonbuch“, so lautet ein weiterer Sprachbefehl im Sinne der Erfindung zum Aufruf des entsprechenden Untermenüs beispielsweise „Hilfe Telefonbuch“. Ein weiterer Sprachbefehl im Sinne der Erfindung kann jedoch alternativ oder zusätzlich auch eine weitere Identifikation eines Eintrags, wie etwa dessen Stellung in der Liste sein bzw. umfassen. Soll zum Beispiel in dem in 10 dargestellten Beispiel das Untermenü „Radio Senderliste“ aufgerufen werden, so lautet ein weiterer Sprachbefehl zum Beispiel „Radio Senderliste“ oder „Vierter Treffer“ oder „Vierter Eintrag“.In an advantageous embodiment of the invention, the menu-driven operation includes a menu depth of at least three, in particular at least four, levels. In a further advantageous refinement of the invention, a submenu that is included in the list can be called up using the operating arrangement. In a further advantageous refinement of the invention, a submenu that is included in the list can be called up using a further voice command. Another voice command within the meaning of the invention is assigned in particular to the displayed list. Such a voice command can, for example, correspond to an entry in the list (or its designation), which refers to a submenu. For example, if an entry in a displayed list of submenus is “Phone book help”, a further voice command within the meaning of the invention for calling up the corresponding submenu is, for example, “Phone book help”. Another voice command within the meaning of the invention can, however, alternatively or additionally, also be or include a further identification of an entry, such as its position in the list. Should, for example, in the in 10 If the submenu "Radio station list" is called up in the example shown, then another voice command is, for example, "Radio station list" or "Fourth hit" or "Fourth entry".

In weiterhin vorteilhafter Ausgestaltung der Erfindung ist die Bedienanordnung als multifunktionale Bedieneinrichtung, insbesondere als über dem Display angeordneter transparenter Touchscreen, oder als Dreh-/Drücksteller ausgestaltet. In weiterhin vorteilhafter Ausgestaltung der Erfindung ist ein Untermenü, das in der Liste aufgeführt ist, durch Berührung des Touchscreens im Bereich eines auf das Untermenü verweisenden Eintrags in der Liste aufrufbar.In a further advantageous embodiment of the invention, the operating arrangement is designed as a multifunctional operating device, in particular as a transparent touchscreen arranged above the display, or as a rotary/push button. In a further advantageous embodiment of the invention, a submenu that is included in the list can be called up by touching the touchscreen in the area of an entry in the list that refers to the submenu.

In weiterhin vorteilhafter Ausgestaltung der Erfindung sind zumindest drei Untermenüs einem ersten Schlüsselwort zugeordnet. In weiterhin vorteilhafter Ausgestaltung der Erfindung sind zumindest drei Untermenüs einem zweiten Schlüsselwort zugeordnet. In weiterhin vorteilhafter Ausgestaltung der Erfindung sind zumindest zwei Untermenüs einem dritten Schlüsselwort zugeordnet.In a further advantageous embodiment of the invention, at least three submenus are assigned to a first keyword. In a further advantageous embodiment of the invention, at least three submenus are assigned to a second keyword. In a further advantageous embodiment of the invention, at least two submenus are assigned to a third keyword.

Erfindungsgemäß ist vorgesehen, dass die Liste zumindest einen ersten Eintrag, der auf ein erstes Untermenü verweist, und einen zweiten Eintrag umfasst, der auf ein zweites Untermenü verweist, wobei das erste Untermenü einer anderen Menüebene zugeordnet ist als das zweite Untermenü.According to the invention, the list includes at least a first entry that refers to a first submenu and a second entry that refers to a second submenu, the first submenu being assigned to a different menu level than the second submenu.

In weiterhin vorteilhafter Ausgestaltung der Erfindung umfasst die Liste Einträge, die auf Menüs unterschiedlicher Menütiefe verweisen.In a further advantageous embodiment of the invention, the list includes entries that refer to menus with different menu depths.

In weiterhin vorteilhafter Ausgestaltung der Erfindung ist mittels der Recheneinrichtung auf dem Display eine Liste der letzten N aufgerufenen Untermenüs anzeigbar, wobei N eine natürliche Zahl zwischen 3 und 10 ist. In weiterhin vorteilhafter Ausgestaltung der Erfindung ist mittels der Recheneinrichtung auf dem Display eine Liste der häufigsten N aufgerufenen Untermenüs anzeigbar, wobei N eine natürliche Zahl zwischen 3 und 10 ist. In weiterhin vorteilhafter Ausgestaltung der Erfindung ist mittels der Recheneinrichtung auf dem Display eine Liste von N von einem Benutzer ausgewählten Untermenüs anzeigbar, wobei N eine natürliche Zahl zwischen 3 und 10 ist.In a further advantageous embodiment of the invention, a list of the last N called submenus can be displayed on the display by means of the computing device, where N is a natural number between 3 and 10. In a further advantageous embodiment of the invention, a list of the N most frequently called submenus can be displayed on the display by means of the computing device, where N is a natural number between 3 and 10. In a further advantageous embodiment of the invention, a list of N submenus selected by a user can be displayed on the display by means of the computing device, where N is a natural number between 3 and 10.

In einer Ausgestaltung der Erfindung umfasst die Liste zumindest drei auf unterschiedliche Untermenüs verweisende Einträge.In one embodiment of the invention, the list includes at least three entries that refer to different submenus.

Kraftfahrzeug im Sinne der Erfindung ist insbesondere ein individuell im Straßenverkehr benutzbares Landfahrzeug. Kraftfahrzeuge im Sinne der Erfindung sind insbesondere nicht auf Landfahrzeuge mit Verbrennungsmotor beschränkt.Motor vehicle within the meaning of the invention is in particular a land vehicle that can be used individually in road traffic. Motor vehicles within the meaning of the invention are in particular not limited to land vehicles with internal combustion engines.

Weitere Vorteile und Einzelheiten ergeben sich aus der nachfolgenden Beschreibung von Ausführungsbeispielen. Dabei zeigen:

1 ein Ausführungsbeispiel eines Kraftfahrzeuges in einer Prinzipdarstellung,
2 eine ausschnittsweise Innenansicht des Kraftfahrzeuges gemäß 1,
3 ein Ausführungsbeispiel einer Bedienvorrichtung,
4 ein Ausführungsbeispiel einer Menüstruktur zur menügeführten Bedienung des Kraftfahrzeuges gemäß 1,
5 ein Ausführungsbeispiel eines Verfahrens zur Bedienung des Kraftfahrzeuges gemäß 1,
6 ein Ausführungsbeispiel einer Anzeige, die einem Bediener zur Eingabe eines Sprachbefehls auffordert,
7 ein Ausführungsbeispiel einer von der Anzeige auf einem Display unabhängigen Liste von Untermenüs, die einem Schlüsselwort in einem von einer Spracheingabevorrichtung aufgenommenen Sprachbefehl zugeordnet sind,
8 ein Ausführungsbeispiel eines Menüs „Telefonbuch“,
9 ein weiteres Ausführungsbeispiel einer Anzeige, die einen Bediener zur Eingabe eines Sprachbefehls auffordert,
10 ein weiteres Ausführungsbeispiel einer von der Anzeige auf einem Display unabhängigen Liste von Untermenüs, die einem Schlüsselwort in einem von einer Spracheingabevorrichtung aufgenommenen Sprachbefehl zugeordnet sind,
11 ein Ausführungsbeispiel der Darstellung eines Untermenüs „Radio Setup“ und
12 eine alternative Ausgestaltung einer Anzeige, die einen Bediener zur Eingabe eines Sprachbefehls auffordert.

Further advantages and details result from the following description of exemplary embodiments. show:

1 an embodiment of a motor vehicle in a schematic representation,
2 according to a partial interior view of the motor vehicle 1 ,
3 an embodiment of an operating device,
4 according to an exemplary embodiment of a menu structure for menu-driven operation of the motor vehicle 1 ,
5 according to an exemplary embodiment of a method for operating the motor vehicle 1 ,
6 an embodiment of a display that prompts an operator to enter a voice command,
7 an exemplary embodiment of a list of submenus that is independent of the display on a display and that is assigned to a keyword in a voice command recorded by a voice input device,
8th an embodiment of a menu “phone book”,
9 another embodiment of a display that prompts an operator to enter a voice command,
10 a further exemplary embodiment of a list of submenus, independent of the display on a display, which are assigned to a keyword in a voice command recorded by a voice input device,
11 an exemplary embodiment of the display of a “Radio Setup” submenu and
12 an alternative embodiment of a display that prompts an operator to enter a voice command.

1 zeigt ein Kraftfahrzeug 1 in einer Prinzipdarstellung, das in 2 in einer ausschnittsweisen Innenansicht dargestellt ist. Das Kraftfahrzeug 1 umfasst eine in beispielhafter Ausgestaltung in einem Armaturenbrett 5 des Kraftfahrzeuges 1 angeordnete Bedienvorrichtung 4. In alternativer oder zusätzlicher Ausgestaltung kann eine derartige Bedienvorrichtung jedoch auch vor einem Lenkrad 2, insbesondere in einem Kombiinstrument integriert, angeordnet sein. Die Bedienvorrichtung 4 umfasst ein in 3 dargestelltes Display 12 zur veränderlichen Darstellung von Informationen, über dem ein transparenter Touchscreen 11 angeordnet ist. Es kann vorgesehen sein, dass die Bedienvorrichtung 4 darüber hinaus einen Aktor 13 zur Erzeugung von haptischem Feedback umfasst. Die Bedienvorrichtung 4 ist über eine Anzeigesteuerung 10 an ein Bussystem 25 gekoppelt und dient der Bedienung eines Entertainmentsystems 20, einer Klimaautomatik 21, einem Navigationssystem 22, einem Telefon 23 sowie einem Zugang 24 zum Internet. Dazu werden auf dem Display 12 Bedienelemente angezeigt, wobei eine Berührung des Touchscreens 11 im Bereich eines dargestellten Bedienelementes zu einer entsprechenden Ausführung einer durch das Bedienelement repräsentierten Funktion des Kraftfahrzeuges 1 führt. Die Anzeigesteuerung 10 ist ein Ausführungsbeispiel für eine Recheneinrichtung im Sinne der Ansprüche. 1 shows a motor vehicle 1 in a schematic representation, which in 2 is shown in a fragmentary interior view. The motor vehicle 1 comprises an operating device 4 arranged in an exemplary embodiment in a dashboard 5 of the motor vehicle 1. In an alternative or additional embodiment, however, such an operating device can also be arranged in front of a steering wheel 2, in particular integrated in an instrument cluster. The operating device 4 comprises an in 3 shown display 12 for the variable display of information, over which a transparent touch screen 11 is arranged. It can be provided that the operating device 4 also includes an actuator 13 for generating haptic feedback. The operating device 4 is coupled to a bus system 25 via a display control 10 and is used to operate an entertainment system 20, an automatic climate control system 21, a navigation system 22, a telephone 23 and access 24 to the Internet. For this purpose, control elements are shown on the display 12, touching the touchscreen 11 in the area of a displayed control element leading to a corresponding execution of a function of the motor vehicle 1 represented by the control element. The display controller 10 is an exemplary embodiment of a computing device within the meaning of the claims.

In alternativer Ausgestaltung kann anstelle des Touchscreens 11 oder zusätzlich zum Touchscreen 11 eine Bedieneinrichtung 3, zum Beispiel ein Dreh-/Drücksteller oder entsprechende Pfeiltasten, vorgesehen sein, mittels dessen entsprechende Funktionen des Kraftfahrzeuges 1 im Zusammenwirken mit mittels des Displays 12 dargestellten Informationen bedient werden können. Die Bedienung des Kraftfahrzeuges 1 mittels der Bedienvorrichtung 4 erfolgt menügeführt. Dabei sind die mittels des Displays 12 im Zusammenwirken mit der Anzeigesteuerung 10 anzeigbaren Bedienelemente in einer Menüstruktur gegliedert, wie sie beispielhaft in 4 dargestellt ist. Das in 4 dargestellte Menü ist nicht vollständig dargestellt, sondern kann weitere Untermenüs umfassen, die aus Gründen der Übersichtlichkeit in 4 nicht dargestellt sind. Die in 4 dargestellte Menüstruktur besitzt eine Menütiefe von 5, das heißt, es sind 5 Ebenen (Ebene 0, Ebene I, Ebene II, Ebene III, Ebene IV) für das Hauptmenü (Ebene 0) und die untergeordneten Untermenüs (Ebene I, Ebene II, Ebene III, Ebene IV) vorgesehen.In an alternative embodiment, instead of the touchscreen 11 or in addition to the touchscreen 11, an operating device 3, for example a rotary/push button or corresponding arrow keys, can be provided, by means of which the corresponding functions of the motor vehicle 1 can be operated in conjunction with information presented by means of the display 12 . The operation of the motor vehicle 1 by means of the operating device 4 is menu-driven. The operating elements that can be displayed by means of the display 12 in conjunction with the display controller 10 are divided into a menu structure, as shown in FIG 4 is shown. This in 4 menu shown is not shown in full, but may include further submenus which, for reasons of clarity, are shown in 4 are not shown. In the 4 The menu structure shown has a menu depth of 5, i.e. there are 5 levels (level 0, level I, level II, level III, level IV) for the main menu (level 0) and the subordinate submenus (level I, level II, level III, level IV).

Zur Bedienung des Kraftfahrzeugs 1 umfasst dieses zudem eine Spracheingabevorrichtung, die ein Mikrofon sowie eine Auswertung zur Erkennung von Sprachbefehlen umfasst. Das Entertainmentsystem 20, die Klimaautomatik 21, das Navigationssystem 22, das Telefon 23, der Zugang 24 zum Internet, die Spracheingabevorrichtung 26 sowie die Anzeigesteuerung 10 sind datentechnisch über das Bussystem 25 miteinander verbunden.To operate the motor vehicle 1, it also includes a voice input device, which includes a microphone and an evaluation for recognizing voice commands. The entertainment system 20, the automatic climate control 21, the navigation system 22, the telephone 23, the access 24 to the Internet, the voice input device 26 and the display control 10 are connected to one another via the bus system 25 in terms of data technology.

5 zeigt ein Ausführungsbeispiel eines Verfahrens zur Bedienung des Kraftfahrzeuges 1. Dabei erfolgt in einem Schritt 31 eine Spracheingabe. Ist vorgesehen, dass die Spracheingabe erst mittels zum Beispiel eines Bedienelementes aktiviert werden muss, so kann darüber hinaus vorgesehen werden, dass vor der Eingabe eines Sprachbefehls ein entsprechendes Bedienelement betätigt wird und mittels des Displays 12 daraufhin eine Eingabemaske dargestellt wird, wie sie beispielhaft in 6 gezeigt ist. 5 shows an exemplary embodiment of a method for operating the motor vehicle 1. In a step 31, a voice input takes place. If it is provided that the voice input must first be activated by means of a control element, for example, it can also be provided that before a voice command is entered, a corresponding control element is actuated and an input mask is then shown by means of the display 12, as is shown by way of example in 6 is shown.

Wird ein zulässiger Sprachbefehl erkannt, so folgt ein Schritt 32, in dem mittels des Displays 12 eine Liste von Untermenüs angezeigt wird, die einem Schlüsselwort des Sprachbefehls zugeordnet sind. Lautet der Sprachbefehl zum Beispiel „Bitte zeige mein Telefonbuch an.“, so werden - wie beispielhaft in 7 dargestellt - in einer Liste Einträge 41, 42, 43, 44 angezeigt, die auf die Untermenüs „Telefonbuch“ (Eintrag 41), „Telefon“ (Eintrag 42), „Nummer wählen“ (Eintrag 43) und „Hilfe Telefon“ (Eintrag 44) der in 4 dargestellten Menüstruktur verweisen. In beispielhafter Ausgestaltung kann auch vorgesehen sein, dass ein Feld 40 angezeigt wird, in dem der Textbefehl als Text dargestellt wird.If a permissible voice command is recognized, a step 32 follows, in which a list of submenus which are associated with a key word of the voice command is displayed by means of the display 12 . For example, if the voice command is "Please show my phone book.", then - as exemplified in 7 - Entries 41, 42, 43, 44 are displayed in a list, which refer to the submenus "Telephone book" (entry 41), "Telephone" (entry 42), "Dial number" (entry 43) and "Telephone help" (entry 44) the in 4 refer to the menu structure shown. In an exemplary embodiment, it can also be provided that a field 40 is displayed in which the text command is displayed as text.

Dem Schritt 32 folgt ein Schritt 33, in dem ein Eintrag der Liste ausgewählt wird. Soll zum Beispiel das Untermenü zur Anzeige des Telefonbuchs angezeigt werden, so kann zum Beispiel der Touchscreen 11 im Bereich des Eintrags 41 berührt werden. Alternativ oder zusätzlich kann vorgesehen sein, dass dieses Untermenü zur Anzeige des Telefonbuchs auch durch einen weiteren Sprachbefehl aufgerufen bzw. angezeigt wird. Ein solcher Sprachbefehl kann zum Beispiel „Telefonbuch“ oder „Den ersten Eintrag bitte“ oder „Erster Treffer“ lauten. Dem Schritt 33 folgt ein Schritt 34, in dem - wie beispielhaft in 8 dargestellt - das ausgewählte Untermenü aufgerufen und mittels des Displays 12 dargestellt wird.Step 32 is followed by a step 33 in which an entry in the list is selected. For example, if the submenu for displaying the telephone book is to be displayed, the touchscreen 11 can be touched in the area of entry 41, for example. Alternatively or additionally, it can be provided that this submenu for displaying the phone book is also called up or displayed by another voice command. Such a voice command can be, for example, "phone book" or "first entry please" or "first hit". Step 33 is followed by a step 34 in which--as shown in FIG 8th shown - the selected submenu is called up and shown by means of the display 12.

9, 10 und 11 zeigen ein weiteres auf der Menüstruktur gemäß 4 basierendes Ausführungsbeispiel zur Erläuterung des Verfahrens zum Betrieb des Kraftfahrzeugs 1. Dabei ist jedoch eine alternative Ausgestaltung der angezeigten Inhalte vorgesehen. Wiederum optional kann ein Bedienelement zur Aktivierung der Spracheingabe vorgesehen werden. Ist ein derartiges Bedienelement vorgesehen und wird es betätigt, so wird eine in 9 dargestellte Eingabemaske angezeigt. Erfolgt zum Beispiel der Sprachbefehl „Radio einstellen“, so wird darin das Schlüsselwort Radio erkannt. Entsprechend erfolgt mittels der Bedienvorrichtung 4 bzw. des Displays 12 eine Anzeige gemäß 10. Dabei wird eine Liste mit Einträgen 51, 52, 53, 54 angezeigt, die auf Untermenüs verweisen, die dem Schlüsselwort „Radio“ zugeordnet sind. Die entsprechenden Untermenüs sind in dem gewählten Beispiel „Radio“ (Eintrag 51), „Radio Setup“ (Eintrag 52), „Audio Setup“ (Eintrag 53) und „Radio Senderliste“ (Eintrag 54). Darüber hinaus kann ein Feld 50 zur Anzeige des Sprachbefehls, in diesem Falle „Radio einstellen“, vorgesehen sein. 9 , 10 and 11 show another according to the menu structure 4 based exemplary embodiment for explaining the method for operating the motor vehicle 1. However, an alternative embodiment of the displayed content is provided. Again optionally, a control element for activating the voice input can be provided. If such a control element is provided and it is actuated, an in 9 shown input mask is displayed. For example, if the voice command “tune to radio” is given, the keyword radio will be recognized in it. Accordingly, a display according to FIG 10 . A list of entries 51, 52, 53, 54 is displayed, which refer to submenus that are assigned to the keyword "Radio". In the selected example, the corresponding submenus are “Radio” (entry 51), “Radio Setup” (entry 52), “Audio Setup” (entry 53) and “Radio Station List” (entry 54). In addition, a field 50 for displaying the voice command, in this case “tune to the radio”, can be provided.

Wird nun der Touchscreen 11 im Bereich des Eintrags 52 berührt, so wird mittels der Bedienvorrichtung 4 bzw. des Displays 12 das in 11 dargestellte Untermenü „Radio Setup“ angezeigt. Der Aufruf dieses Menüs kann in alternativer oder zusätzlicher Ausgestaltung auch mittels eines weiteren Sprachbefehls erfolgen. Ein solcher Sprachbefehl kann zum Beispiel „Setup Radio“, „Radio Setup“, „Zweiter Eintrag“, „Eintrag zwei“, „Zweiter Treffer“, „Treffer zwei“ oder „Nummer 2“ lauten.If the touchscreen 11 is now touched in the area of the entry 52, the in 11 "Radio Setup" submenu shown. In an alternative or additional embodiment, this menu can also be called up by means of a further voice command. Such a voice command can be, for example, "Setup Radio", "Radio Setup", "Second entry", "Entry two", "Second hit", "Hit two" or "Number 2".

In alternativer oder zusätzlicher Ausgestaltung kann vorgesehen sein, dass das Kraftfahrzeug 1 es ermöglicht, die letzten N angewählten Untermenüs, die häufigsten N angewählten Untermenüs oder ausgewählte N Untermenüs anzuzeigen, wobei N eine natürlich Zahl, vorteilhafterweise zwischen 3 und 10 ist. Zur Unterstützung dieser Funktion kann vorgesehen sein, die Bedienmaske gemäß 9 um entsprechende mittels des Displays 12 dargestellte Bedienelemente 61, 62 und 63 zu ergänzen, wie dies in 12 dargestellt ist. Wird der Touchscreen 11 im Bereich des Bedienelementes 61 berührt, so werden Einträge bezüglich der letzten zehn angewählten Untermenüs in einer Liste angezeigt. Wird der Touchscreen 11 im Bereich des Bedienelementes 62 berührt, so werden Einträge bezüglich der häufigsten zehn angewählten Untermenüs in einer Liste angezeigt. Wird der Touchscreen 11 im Bereich des Bedienelements 63 berührt, so wird eine Liste mit Einträgen bezüglich von einem Benutzer ausgewählter Untermenüs angezeigt. Diese Liste kann bis zu 10 auf Untermenüs verweisende Einträge umfassen. Alternativ oder zusätzlich zur Auswahl der Bedienelemente 61, 62 und 63 mittels Berührung des Touchscreens 11 kann auch vorgesehen sein, dass der Benennung dieser Bedienelemente 61, 62, 63 zugeordnete Sprachbefehle von der Spracheingabevorrichtung 26 erkannt werden. Entsprechende Sprachbefehle könnten zum Beispiel lauten: „Letzte zehn“, „Häufigste zehn“ und „Eigene zehn“. Erfolgt zum Beispiel der Sprachbefehl „Letzte zehn“, so werden Einträge bezüglich der letzten zehn angewählten Untermenüs in einer Liste angezeigt. Erfolgt zum Beispiel der Sprachbefehl „Häufigste zehn“, so werden Einträge bezüglich der häufigsten zehn angewählten Untermenüs in einer Liste angezeigt. Erfolgt zum Beispiel der Sprachbefehl „Eigene zehn“, so wird eine Liste mit Einträgen bezüglich von einem Benutzer ausgewählter Untermenüs angezeigt.In an alternative or additional embodiment, it can be provided that the motor vehicle 1 makes it possible to display the last N selected submenus, the most frequently N selected submenus or selected N submenus, where N is a natural number, advantageously between 3 and 10. To support this function, the operating mask according to 9 to supplement corresponding control elements 61, 62 and 63 shown by means of the display 12, as is shown in 12 is shown. If the touchscreen 11 is touched in the area of the operating element 61, entries relating to the last ten selected submenus are displayed in a list. If the touchscreen 11 is touched in the area of the operating element 62, entries relating to the ten most frequently selected submenus are displayed in a list. If the touchscreen 11 is touched in the area of the operating element 63, a list with entries relating to submenus selected by a user is displayed. This list can contain up to 10 entries referencing submenus senior As an alternative or in addition to selecting the operating elements 61, 62 and 63 by touching the touchscreen 11, it can also be provided that the naming of these operating elements 61, 62, 63 is associated with voice commands recognized by the voice input device 26. Corresponding voice commands could be, for example: "Last ten", "Frequent ten" and "Own ten". If, for example, the voice command “last ten” is given, entries relating to the last ten submenus selected are displayed in a list. If, for example, the voice command “Frequently ten” is given, entries relating to the ten most frequently selected submenus are displayed in a list. For example, if the voice command "Own ten" is given, a list of entries pertaining to submenus selected by a user is displayed.

Die übrigen in 4 dargestellten Untermenüs können zum Teil durch weitere Sprachbefehle mit entsprechenden Schlüsselwörtern als Listeneinträge angezeigt werden. Wird zum Beispiel das Schlüsselwort „Zieleingabe“ erkannt, so wird eine Liste mit einem Eintrag, der auf das Untermenü „Zieleingabe“ verweist, einem Eintrag, der auf das Untermenü „Ort eingeben“ verweist, einem Eintrag, der auf das Untermenü „Straße eingeben“ verweist, einem Eintrag, der auf das Untermenü „Hausnummer/Kreuzung“ verweist sowie einem Eintrag, der auf das Untermenü „Sonderziele“ verweist, angezeigt.The rest in 4 Some of the submenus shown can be displayed as list entries using additional voice commands with appropriate keywords. For example, if the keyword "Where to" is recognized, a list will be displayed with an entry pointing to the "Where to" submenu, an entry pointing to the "Enter City" submenu, an entry pointing to the "Enter Street" submenu ", an entry that refers to the "House number/intersection" submenu and an entry that refers to the "Points of interest" submenu.

BezugszeichenlisteReference List

11: Kraftfahrzeugmotor vehicle
22: Lenkradsteering wheel
33: Bedieneinrichtungoperating device
44: Bedienvorrichtungoperating device
55: Armaturenbrettdashboard
1010: Recheneinrichtung/Anzeigesteuerungcomputing device/display control
1111: Touchscreentouch screen
1212: Displayscreen
1313: Aktoractuator
2020: Entertainmentsystementertainment system
2121: Klimaautomatikclimate control
2222: Navigationssystemnavigation system
2323: Telefonphone
2424: Zugang zum Internetaccess to the internet
2525: Bussystembus system
2626: Spracheingabevorrichtungvoice input device
31,32,33,3431,32,33,34: SchrittStep
40, 5040, 50: FeldField
41, 42, 43, 44 51, 52, 53, 5441, 42, 43, 44 51, 52, 53, 54: Eintragentry
61, 62, 6361, 62, 63: dargestelltes Bedienelementcontrol shown

Claims

Motor vehicle (1) with an operating device (4) for menu-guided operation of the motor vehicle (1), the operating device (4) comprising a display (12), and the motor vehicle (1) comprising a voice input device (26), characterized in that the motor vehicle (1) has a computing device (10) set up to display a list of submenus, which is independent of what is shown on the display (12), by means of the display (12) and which is assigned to a keyword in a voice command recorded by the voice input device (26). , wherein the list comprises at least a first entry that refers to a first submenu and a second entry that refers to a second submenu, and wherein the first submenu is assigned to a different menu level than the second submenu.

Motor vehicle (1) after claim 1 , characterized in that the operating device (4) comprises an operating arrangement (11) assigned to the display (12).

Motor vehicle (1) after claim 1 or 2 , characterized in that the menu-driven operation includes a menu depth of at least three levels.

Motor vehicle (1) after claim 2 , characterized in that a submenu that is listed in the list can be called by means of the operating arrangement.

Motor vehicle (1) according to one of the preceding claims, characterized in that a submenu which is included in the list can be called up by means of a further voice command.

Motor vehicle (1) according to one of claims 2 , 4 or 5 , characterized in that the operating arrangement is designed as a multifunctional operating device as a transparent touchscreen arranged above the display (12) or as a rotary/push button.

Motor vehicle (1) after claim 6 , characterized in that a submenu that is listed in the list by touching the Touchsc reens (11) can be called in the area of an entry in the list that refers to the submenu.

Motor vehicle (1) according to one of the preceding claims, characterized in that at least three submenus are assigned to a first keyword.

Motor vehicle (1) after claim 8 , characterized in that at least three submenus are associated with a second keyword.

Motor vehicle (1) after claim 9 , characterized in that at least two submenus are associated with a third keyword.

Motor vehicle (1) according to one of the preceding claims, characterized in that a list of the last N called up submenus can be displayed on the display (12) by means of the computing device (10), N being a natural number between 3 and 10.

Motor vehicle (1) according to one of the preceding claims, characterized in that a list of the N most frequently accessed submenus can be displayed on the display (12) by means of the computing device (10), N being a natural number between 3 and 10.

Motor vehicle (1) according to one of the preceding claims, characterized in that a list of N submenus selected by a user can be displayed on the display (12) by means of the computing device (10), N being a natural number between 3 and 10.

Method for operating a motor vehicle (1) configured according to one of the preceding claims, having an operating device (4) for menu-guided operation of the motor vehicle (1), the operating device (4) having a display (12) and an operating arrangement assigned to the display (12). , and wherein the motor vehicle (1) comprises a voice input device (26), characterized in that by means of the display (12) a list of a keyword in a voice command recorded by the voice input device (26) that is independent of what is displayed on the display (12). associated submenus is displayed, the list comprising at least a first entry that refers to a first submenu and a second entry that refers to a second submenu, and wherein the first submenu is assigned to a different menu level than the second submenu.

procedure after Claim 14 , characterized in that the list comprises at least three entries referring to different submenus.