EP2517098A1 - Verfahren und vorrichtung zur bedienung technischer einrichtungen, insbesondere eines kraftfahrzeugs - Google Patents

Verfahren und vorrichtung zur bedienung technischer einrichtungen, insbesondere eines kraftfahrzeugs

Info

Publication number
EP2517098A1
EP2517098A1 EP10795278A EP10795278A EP2517098A1 EP 2517098 A1 EP2517098 A1 EP 2517098A1 EP 10795278 A EP10795278 A EP 10795278A EP 10795278 A EP10795278 A EP 10795278A EP 2517098 A1 EP2517098 A1 EP 2517098A1
Authority
EP
European Patent Office
Prior art keywords
input unit
command
voice
manual
operating
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
EP10795278A
Other languages
English (en)
French (fr)
Inventor
Ronald Hain
Herbert Meier
Nhu Nguyen Thien
Thomas Rosenstock
Alexander Stege
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Continental Automotive GmbH
Original Assignee
Continental Automotive GmbH
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Continental Automotive GmbH filed Critical Continental Automotive GmbH
Publication of EP2517098A1 publication Critical patent/EP2517098A1/de
Ceased legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue

Definitions

  • the invention relates to a method and to a device for operating technical devices, in particular a motor vehicle, wherein voice inputs are passed through a voice input unit and manual inputs by a manual input unit as operating instructions to a control unit to ⁇ generated by the command corresponding command and the corresponding technical device is supplied, which then executes the operating instruction associated with the operation.
  • the object of the invention is therefore to provide a method and a device for operating technical devices. fen, whereby a simple operation is possible even with greater complexity of the technical facilities.
  • This object is achieved for a method in that a basic structure of the command is determined by the voice input unit or the manual Eingabeein ⁇ standardized and ⁇ closing through the manual input unit or the voice ⁇ input unit is carried out an addition to the basic structure of the command.
  • the operating procedure can be a control for the operation of a device.
  • an operating process may be a control of one or more components of an infotainment system, the z. B. may contain a phone book or navigation information. It is understood that even more input levels can be present.
  • the ring buffer When the voice input is continuously stored in a ring buffer of the voice input unit, the ring buffer performs a period of voice input before the start time of the voice input
  • Speech recognition for speech recognition is available, so are always the last seconds or minutes of recorded voice input for speech recognition available.
  • Speech recognition by the speech input unit may be activated by manual operation of a switching element and / or by a gesture recognition element.
  • the switching element may be a separate switching element or else an element of the manual input unit.
  • the operating instructions of the speech input unit preferably consist of code words stored in the control unit, which are stored as a thesaurus.
  • the method and the apparatus are preferably applicable to tech ⁇ African devices of a motor vehicle.
  • the invention is not limited to such an application but can also be applied to other applications such. B. be used in ticket machines.
  • the object is achieved in a device by a voice input unit and a manual input unit for triggering operating instructions that can be fed to a control unit and by a command corresponding to the operating instruction generated and the corresponding technical device zuleitbar, then the operation of the operating instruction associated executable is, wherein by the voice input unit or the manual input unit ei ⁇ ne basic structure of the command and then by the ma ⁇ nual input unit or the voice input unit is a He ⁇ completion of the basic structure of the command.
  • the manual input unit a keypad aufwei ⁇ sen, wherein the input unit preferably having a particular bervolutionungsemp ⁇ find pending keypad, a touch screen.
  • the device has a display with a display field for displaying image representations and / or basic structures of the commands and / or additions that can be defined by the manual input unit or the speech input unit the basic structures of the commands and / or menus and / or submenus, the combination of the manual input, the memory input can be displayed in the context of an object displayed on the display field, without having to increase the vocabulary of the speech recognizer.
  • a certain object reference ge ⁇ taken in the voice input it can,.
  • it may be essential to refer to the speech recognizer by dividing the keypad into different domains such as "switches,”"signallamps," and "road map” for the speech recognizer Increased detection rate.
  • the display is an electro-optical display such.
  • an LCD To combine the manual input unit with representations on the display panel of the display, the display field of the transparent manual input unit can be stored.
  • the semantic information contained in the speech input can even be used to relate a sequence of manual inputs to one another, such as, for example, B. by pressing two various points on the map in connection with the question "how far is it from there to there?"
  • FIG. 1 shows a block diagram of a device for operating technical devices of a motor vehicle
  • FIG. 2 shows a flow chart of a method for determining and controlling a function
  • FIG. 3 shows a flow diagram of a method for determining and controlling an object.
  • the device shown in FIG. 1 has a microphone 1 for voice input into a ring buffer 2 of a voice input unit 3.
  • the speech input unit 3 further comprises aticianrken ⁇ ner 4, by comparing the speech input with codewords of a stored thesaurus to codewords and upon detection of a voice input and assignment to one or more stored codewords generates a corresponding voice signal 11 and a merge unit 5 is fed.
  • an LCD screen 6 is provided with a front arranged transparent touch screen 7, wherein the
  • Touchscreen 7 is divided into a plurality of touch positions.
  • the tactile signal 12 generated by the manual application of a touch position is registered in a touchscreen unit 8 and a corresponding touch signal 13 is likewise fed to the assembly unit 5 via a graphical user interface 9 controlling the display on the LCD screen 6.
  • the touch signal 13 and the speech signal 11 are supplied from the to ⁇ sammenboatiser 5 a control unit 10, from which a corresponding command 14 is generated and fed to the execution of a technical device, not shown.
  • the voice input unit 3 must, if it was not acti ⁇ fourth, first be activated. For this purpose a entspre ⁇ sponding start probe position of the touch screen 7 is applied, thereby using the graphical user interface a Startsig- nal 15 of the control unit 10 we fed, then 16 feeds a Ak ⁇ tiv istssignal the speech recognizer 4, and thus the voice input unit 3 is activated.
  • the desired function is first determined on a touchscreen by actuating the corresponding touchscreen coordinate.
  • a recognizer vocabulary is set from a code word thesaurus for the selected function.
  • a name now acquired by a speech input unit is checked to see if it is valid or not valid. If it is not valid, a new voice input must be made.
  • Touchscreen selected function linked and issued a corresponding execution command Touchscreen selected function linked and issued a corresponding execution command.
  • the name (code ⁇ word) can also be accessed via a graphical user interface of the voice input.
  • Touchscreens are entered and thus trigger the execution command.
  • the desired object is first determined on a touchscreen by actuating the corresponding touchscreen coordinate. Further, if it is determined that a voice input unit is activated, a recognizer vocabulary for possible commands is set from a command to the selected object. A spoken command now detected by a speech input unit is checked for validity or invalidation.
  • System displays a pop-up window with information about this hotel, eg. Name, address and telephone number.
  • the pop-up window has z.
  • two buttons called “Call” and "Navigate

Abstract

Die Erfindung bezieht sich auf ein Verfahren und eine Vorrichtung zur Bedienung technischer Einrichtungen, insbesondere eines Kraftfahrzeugs, wobei Spracheingaben durch eine Spracheingabeeinheit (3) und Manuelleingaben durch eine manuelIe Eingabeeinheit als Bedienanweisungen einer Steuereinheit (10) zugeleitet werden, durch die ein der Bedienanweisung entsprechender Befehl erzeugt und der entsprechenden technischen Einrichtung zugeleitet wird, die dann den der Bedienanweisung zugeordneten Bedienvorgang ausführt. Durch die Spracheingabeeingabeeinheit (3) oder die manuelle Eingabeeinheit wird eine Grundstruktur des Befehls festgelegt und anschließend erfolgt durch die manuelle Eingabeeinheit (3) oder die Spracheingabeeinheit eine Ergänzung der Grundstruktur des Befehls.

Description

Beschreibung
Verfahren und Vorrichtung zur Bedienung technischer Einrichtungen, insbesondere eines Kraftfahrzeugs
Die Erfindung bezieht sich auf ein Verfahren und auf eine Vorrichtung zur Bedienung technischer Einrichtungen, insbesondere eines Kraftfahrzeugs, wobei Spracheingaben durch eine Spracheingabeeinheit und Manuelleingaben durch eine manuelle Eingabeeinheit als Bedienanweisungen einer Steuereinheit zu¬ geleitet werden, durch die ein der Bedienanweisung entsprechender Befehl erzeugt und der entsprechenden technischen Einrichtung zugeleitet wird, die dann den der Bedienanweisung zugeordneten Bedienvorgang ausführt.
Bei einer Vorrichtung der eingangs genannten Art ist es bekannt Bedienanweisungen entweder rein durch Navigieren und Betätigen eines Touchscreen-Menüs oder rein durch Drücken einer Push-to-talk-Taste und anschließender Spracheingabe ein- zugeben.
Bei zunehmender Komplexität und Vielseitigkeit der elektri¬ schen und elektronischen Systeme in Kraftfahrzeugen wird auch die Bedienung aller Funktionen unüberschaubar.
Werden nur die Tasten des Touchscreens benutzt, wird die An¬ zahl der Tasten unüberschaubar.
Eine reine Sprachbedienung stößt schnell an ihre Grenzen, wenn es um die Steuerung komplexer Mechanismen geht, da entweder ein natürlichsprachiger Dialog ermöglicht werden muss, was hohe Resourcenanforderungen mit sich bringt, oder der Benutzer gezwungen ist, eine Liste von Kommandos auswendig zu lernen .
Aufgabe der Erfindung ist es daher ein Verfahren und eine Vorrichtung zur Bedienung technischer Einrichtungen zu schaf- fen, wobei auch bei größerer Komplexität der technischen Einrichtungen eine einfache Bedienung ermöglicht ist.
Diese Aufgabe wird für ein Verfahren dadurch gelöst, dass durch die Spracheingabeeinheit oder die manuelle Eingabeein¬ heit eine Grundstruktur des Befehls festgelegt wird und an¬ schließend durch die manuelle Eingabeeinheit oder die Sprach¬ eingabeeinheit eine Ergänzung der Grundstruktur des Befehls erfolgt .
Durch dieses Verfahren erfolgt zunächst eine Vorauswahl durch die zuerst aktivierte Eingabeeinheit und anschließend eine Unterauswahl durch die danach aktivierte Eingabeeinheit. Damit sind nur eine begrenzte Anzahl von Bedienanweisungen für die Spracheingabeeinheit und die manuelle Eingabeeinheit erforderlich .
Der Bedienvorgang kann eine Ansteuerung zum Betrieb eines Ge- räts sein. Weiterhin kann ein Bedienvorgang eine Ansteuerung eines oder mehrerer Komponenten eines Infotainmentsystems sein, das z. B. ein Telefonbuch oder Navigationsinformationen enthalten kann. Es versteht sich, dass auch noch weitere Eingabestufen vorhanden sein können.
Wird die Spracheingabe kontinuierlich in einem Ringpuffer der Spracheingabeeinheit gespeichert, wobei der Ringpuffer einen Zeitabschnitt der Spracheingabe vor dem StartZeitpunkt der
Spracherkennung für die Spracherkennung zur Verfügung stellt, so stehen immer die letzten Sekunden oder Minuten der aufgenommenen Spracheingabe für die Spracherkennung zur Verfügung. Eine Spracherkennung durch die Spracheingabeeinheit kann durch manuelle Betätigung eines Schaltelements und/oder durch ein Gestikerkennungselement aktiviert werden. Dabei kann das Schaltelement ein separates Schaltelement oder aber auch ein Element der manuellen Eingabeeinheit sein.
Damit wird eine kontinuierlich im Hintergrund mitlaufende Spracherkennung vermieden, die sehr resourcenaufwendig wäre und leicht zu Fehlerkennungen führen würde.
Die Bedienanweisungen der Spracheingabeeinheit bestehen vorzugsweise aus in der Steuereinheit gespeicherten Codeworten, die als Thesaurus gespeichert sind.
Das Verfahren und die Vorrichtung sind vorzugsweise bei tech¬ nischen Einrichtungen eines Kraftfahrzeugs anwendbar. Die Erfindung ist aber nicht auf eine solche Anwendung beschränkt sondern kann auch auf anderen Anwendungsgebieten wie z. B. bei Fahrkartenautomaten angewendet werden.
Die Aufgabe wird bei einer Vorrichtung gelöst durch eine Spracheingabeeinheit und einer manuellen Eingabeeinheit zur Auslösung von Bedienanweisungen, die einer Steuereinheit zuleitbar sind und durch die ein der Bedienanweisung entsprechender Befehl erzeugbar und der entsprechenden technischen Einrichtung zuleitbar ist, durch die dann der der Bedienanweisung zugeordnete Bedienvorgang ausführbar ist, wobei durch die Spracheingabeeinheit oder die manuelle Eingabeeinheit ei¬ ne Grundstruktur des Befehls und anschließend durch die ma¬ nuelle Eingabeeinheit oder die Spracheingabeeinheit eine Er¬ gänzung der Grundstruktur des Befehls erfolgt. Dabei kann die manuelle Eingabeeinheit ein Tastenfeld aufwei¬ sen, wobei die Eingabeeinheit vorzugsweise ein berührungsemp¬ findliches Tastenfeld insbesondere ein Touchscreen aufweist.
Weist weiterhin die Vorrichtung eine Anzeige mit einem Anzei- gefeld zum Anzeigen von Bilddarstellungen und/oder von durch die manuelle Eingabeeinheit oder die Spracheingabeeinheit festlegbaren Grundstrukturen der Befehle und/oder Ergänzungen der Grundstrukturen der Befehle und/oder von Menüs und/oder von Untermenüs auf, so kann durch die Kombination mit der manuellen Eingabe die Speichereingabe in den Kontext eines auf dem Anzeigefeld dargestellten Objekts dargestellt werden, oh- ne das Vokabular des Spracherkenners vergrößern zu müssen. Wird in der Spracheingabe auf ein gewisses Objekt Bezug ge¬ nommen, kann es z. B. durch „hier", „da" oder „dieses" refe- renziert werden, anstatt es benennen zu müssen. Durch Einteilung des Tastenfeldes in verschiedene Domänen wie „Schalter", „Signallampen" und „Straßenkarte" für den Spracherkenner wird eine wesentliche Erhöhung der Erkennungsrate erreicht.
Umgekehrt führt die Erweiterung eines Tastendrucks mit einer Spracheingabe zu einer Art gesprochenem Kontextmenü. Sind bei einem Verfahren nach dem Stand der Technik mehrere Aktionen als Reaktion auf das Drücken eines Tasters möglich, wird eine Liste (Kontextmenü) auf dem Anzeigefeld eingeblendet, aus der der Benutzer die gewünschte Option herausholen und anwählen muss. Bei dem erfindungsgemäßen Verfahren erfolgt diese Aus- wähl automatisch durch Auswertung der Spracheingabe.
Vorzugsweise ist die Anzeige eine elektrooptische Anzeige wie z. B. ein LCD. Zur Kombination der manuellen Eingabeeinheit mit Darstellungen auf dem Anzeigefeld der Anzeige kann das Anzeigefeld der transparenten manuellen Eingabeeinheit hinterlegt sein.
Dadurch können sich sehr intuitive Bedienschritte ergeben wie z. B. das Tippen auf einem bestimmten Punkt einer angezeigten Land- oder Straßenkarte in Verbindung mit der Spracheingabe „führ mich dort hin" oder „wie weit ist es dort hin".
Durch die in der Spracheingabe enthaltene sematische Informa- tion kann sogar eine Folge von manuellen Eingaben zueinander in Bezug gesetzt werden wie z. B. durch das Drücken von zwei verschiedenen Punkten auf der Landkarte in Verbindung mit der Frage „Wie weit ist es von da nach da?"
Ausführungsbeispiele der Erfindung sind in der Zeichnung dargestellt und werden im Folgenden näher beschrieben. Es zeigen :
Figur 1 ein Blockschaltbild einer Vorrichtung zur Bedienung technischer Einrichtungen eines Kraftfahrzeugs,
Figur 2 ein Ablaufdiagramm eines Verfahrens zur Ermittlung und Ansteuerung einer Funktion und
Figur 3 ein Ablaufdiagramm eines Verfahrens zur Ermittlung und Ansteuerung eines Objekts.
Die in Figur 1 dargestellte Vorrichtung weist ein Mikrofon 1 für eine Spracheingabe in einen Ringpuffer 2 einer Spracheingabeeinheit 3 auf.
Die Spracheingabeeinheit 3 weist weiterhin einen Spracherken¬ ner 4 auf, durch den die Spracheingabe mit Codeworten eines gespeicherten Thesaurus an Codeworten verglichen und bei Erkennen einer Spracheingabe und Zuordnung zu einem oder mehreren gespeicherten Codewörtern ein entsprechendes Sprachsignal 11 erzeugt und einer Zusammenführeinheit 5 zugeleitet wird.
Weiterhin ist ein LCD-Bildschirm 6 mit einem davor angeordneten transparenten Touchscreen 7 vorhanden, wobei der
Touchscreen 7 in eine Mehrzahl Tastpositionen eingeteilt ist.
Das durch manuelles Beaufschlagen einer Tastposition erzeugte Tastsignal 12 wird in einer Touchscreeneinheit 8 registriert und ein entsprechendes Touchsignal 13 über eine die Anzeige auf dem LCD-Bildschirm 6 steuernde graphische Benutzeroberfläche 9 ebenfalls der Zusammenführeinheit 5 zugeleitet. Das Touchsignal 13 und das Sprachsignal 11 werden von der Zu¬ sammenführeinheit 5 einer Steuereinheit 10 zugeführt, von der ein entsprechender Befehl 14 erzeugt und zur Ausführung einer nicht dargestellten technischen Einrichtung zugeleitet wird.
Die Spracheingabeeinheit 3 muss, wenn sie noch nicht akti¬ viert war, zuvor aktiviert werden. Dazu wird eine entspre¬ chende Start-Tastposition des Touchscreens 7 beaufschlagt, wodurch über die graphische Benutzeroberfläche ein Startsig- nal 15 der Steuereinheit 10 zugeleitet wir, die dann ein Ak¬ tivierungssignal 16 dem Spracherkenner 4 zuleitet und damit die Spracheingabeeinheit 3 aktiviert.
Bei dem in Figur 2 dargestellten Ablaufdiagramm wird zunächst auf einem Touchscreen die gewünschte Funktion durch Betätigen der entsprechenden Touchscreenkoordinate ermittelt.
Wird weiterhin festgestellt, dass eine Spracheingabeeinheit aktiviert ist, wird ein Erkenner-Vokabular aus einem Code- wortthesaurus für die ausgewählte Funktion gesetzt.
Ein nun von einer Spracheingabeeinheit erfasster Name wird darauf geprüft, ob er gültig oder nicht gültig ist. Ist er nicht gültig, muss eine neue Spracheingabe erfolgen.
Ist er gültig, werden der Name (Codewort) mit der am
Touchscreen ausgewählten Funktion verknüpft und ein entsprechender Ausführungsbefehl ausgegeben.
Ist die Spracheingabe nicht aktiviert, kann der Name (Code¬ wort) auch über eine graphische Benutzeroberfläche des
Touchscreens eingegeben werden und so den Ausführungsbefehl auslösen . Bei dem in Figur 3 dargestellten Ablaufdiagramm wird zunächst auf einem Touchscreen das gewünschte Objekt durch Betätigen der entsprechenden Touchscreen-Koordinate ermittelt. Wird weiterhin festgestellt, dass eine Spracheingabeeinheit aktiviert ist, wird ein Erkenner-Vokabular für mögliche Kommandos aus einem Kommandothesarus für das ausgewählte Objekt gesetzt . Ein nun von einer Spracheingabeeinheit erfasstes gesprochenes Kommando wird darauf geprüft, ob es gültig oder ungültig ist.
Ist es nicht gültig, muss eine neue Spracheingabe erfolgen. Ist es gültig, werden das Kommando mit dem am Touchscreen ausgewählten Objekt verknüpft und ein entsprechender Ausführungsbefehl ausgegeben.
Im Folgenden werden mehrere Ablaufbeispiele aufgeführt.
Sprachbefehl nach Anwahl eines Displayobjekts
Auswahl eines Objekts per Sprache
Benutzer hat die Kartendarstellung seines Infotainment- Systems offen und die Sonderziele-Symbole sind auf der Karte zu sehen
Benutzer drückt auf den Touchscreen an der Position eines Hotelsymbols und spricht „Info" - System erkennt die Anwahl des Sonderziels System erkennt anhand der Sprachaktivität, dass der
Benutzer einen besonderen Wunsch hat. Bei fehlender
Sprachaktivität passiert nichts - System lädt das Kommandovokabular für die entsprechende
Bearbeitung und für die Spracherkennung mit den Audiodaten durch
System erkennt das Kommando „Info"
System zeigt ein pop-up Fenster mit der Information über dieses Hotel, z. B. Namen, Adresse und Telefon-Nr.
Auswahl einer Funktion per Sprache
Das Pop-up-Fenster hat z. B. zwei Tasten „Anrufen" und „Navigieren
Benutzer drückt auf das Fenster an einer Position außer- halb der beiden Tasten und spricht „Anrufen"
System lädt das Kommandovokabular für die entsprechende Bearbeitung und für die Spracherkennung mit den Audiodaten durch
System wählt die Telefon-Nr. des Hotels.
Sprachbefehl erfolgt vor einem Drücken auf eine Taste des Touchscreen
Auswahl einer Funktion per Sprache Benutzer hat Telefonbuch seines Infotainment-Systems offen und möchte einen Eintrag löschen
Benutzer spricht „Lösche Eintrag"
Benutzer drückt auf den Touchscreen an der Listenposition des zu löschenden Eintrags
System erkennt die Auswahl des Listeneintrags
System erkennt anhand der Sprachaktivität, dass der Benut¬ zer einen besonderen Wunsch hat. Bei fehlender Sprachaktivität würde z. B. die Standardfunktion „Wählen" ausgeführt werden
System lädt das Kommandovokabular für die Bearbeitung eines Listeneintrags und führt die Spracherkennung mit den gespeicherten Audiodaten durch
System erkennt das Kommando „Lösche Eintrag"
System löscht den selektierten Listeneintrag.
Auswahl eines Objekts per Sprache
Benutzer hat Media-Player seines Infotainment-Systems of¬ fen und möchte eine bestimmte CD oder Playlist zum Abspie len auswählen
Benutzer spricht „Beatles, Weißes Album"
Benutzer drückt auf den Touchscreen für die Funktionsaus¬ wahl „Play"
System erkennt die gewünschte Funktion „Play" System erkennt anhand der Sprachaktivität, dass „Play" mit einer Nebenbedingung verknüpft werden soll
System lädt das Vokabular für alle abspielbaren Medien und führt die Spracherkennung mit den gespeicherten Audiodaten durch
System erkennt die Titelauswahl „Beatles, White Album"
System spielt die ausgewählte CD.

Claims

Patentansprüche
1. Verfahren zur Bedienung technischer Einrichtungen, insbesondere eines Kraftfahrzeugs, wobei Spracheingaben durch eine Spracheingabeeinheit und Manuelleingaben durch eine manuelle Eingabeeinheit als Bedienanweisungen einer Steu¬ ereinheit zugeleitet werden, durch die ein der Bedienanweisung entsprechender Befehl erzeugt und der entsprechenden technischen Einrichtung zugeleitet wird, die dann den der Bedienanweisung zugeordneten Bedienvorgang ausführt, dadurch gekennzeichnet, dass durch die
Spracheingabeeinheit (3) oder die manuelle Eingabeeinheit eine Grundstruktur des Befehls festgelegt wird und an¬ schließend durch die manuelle Eingabeeinheit oder die Spracheingabeeinheit (3) eine Ergänzung der Grundstruktur des Befehls erfolgt.
2. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Spracheingabe kontinuierlich in einem Ringpuffer (2) der Spracheingabeeinheit (3) gespeichert wird, wobei der Ringpuffer (2) einen Zeitabschnitt der Spracheingabe vor dem StartZeitpunkt der Spracherkennung für die
Spracherkennung zur Verfügung stellt.
3. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass eine Spracherkennung durch die Spracheingabeeinheit (3) durch manuelle Betäti¬ gung eines Schaltelements und/oder durch ein Gestikerkennungselement aktiviert wird.
4. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die Bedienanweisungen der Spracheingabeeinheit (3) aus in der Steuereinheit (10) gespeicherten Codeworten bestehen.
5. Vorrichtung zur Bedienung technischer Einrichtungen, insbesondere eines Kraftfahrzeugs, zur Durchführung des Verfahrens nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, mit einer Spracheingabeeinheit (3) und einer manuellen Eingabeeinheit zur Auslösung von Bedienanweisungen, die einer Steuereinheit (10) zuleitbar sind und durch die ein der Bedienanweisung entsprechender Befehl erzeugbar und der entsprechenden technischen Einrichtung zuleitbar ist, durch die dann der der Bedienanweisung zugeordnete Bedienvorgang ausführbar ist, wobei durch die Spracheingabeeinheit (3) oder die manuelle Ein¬ gabeeinheit eine Grundstruktur des Befehls und anschlie¬ ßend durch die manuelle Eingabeeinheit oder die Sprach¬ eingabeeinheit eine Ergänzung der Grundstruktur des Befehls erfolgt.
Vorrichtung nach Anspruch 5, dadurch gekennzeichnet, dass die manuelle Eingabeeinheit ein Tastenfeld aufweist.
Vorrichtung nach einem der Ansprüche 5 und 6, dadurch gekennzeichnet, dass die Eingabeeinheit ein berüh¬ rungsempfindliches Tastenfeld (7) aufweist.
Vorrichtung nach einem der Ansprüche 5 bis 7, dadurch gekennzeichnet, dass die Vorrichtung eine Anzeige mit einem Anzeigefeld zum Anzeigen von Bilddarstellungen und/oder von durch die manuelle Eingabeeinheit oder die Spracheingabeeinheit (3) festlegbaren Grundstrukturen der Befehle und/oder Ergänzungen der Grundstrukturen der Befehle und/oder von Menüs und/oder von Untermenüs auf¬ weist.
Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Anzeige eine elektrooptische Anzeige ist.
Vorrichtung nach einem der Ansprüche 5 bis 9, dadurch gekennzeichnet, dass das Anzeigefeld der transparen^ ten manuellen Eingabeeinheit hinterlegt ist.
EP10795278A 2009-12-21 2010-12-09 Verfahren und vorrichtung zur bedienung technischer einrichtungen, insbesondere eines kraftfahrzeugs Ceased EP2517098A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102009059792A DE102009059792A1 (de) 2009-12-21 2009-12-21 Verfahren und Vorrichtung zur Bedienung technischer Einrichtungen, insbesondere eines Kraftfahrzeugs
PCT/EP2010/069264 WO2011076578A1 (de) 2009-12-21 2010-12-09 Verfahren und vorrichtung zur bedienung technischer einrichtungen, insbesondere eines kraftfahrzeugs

Publications (1)

Publication Number Publication Date
EP2517098A1 true EP2517098A1 (de) 2012-10-31

Family

ID=43536613

Family Applications (1)

Application Number Title Priority Date Filing Date
EP10795278A Ceased EP2517098A1 (de) 2009-12-21 2010-12-09 Verfahren und vorrichtung zur bedienung technischer einrichtungen, insbesondere eines kraftfahrzeugs

Country Status (5)

Country Link
US (1) US20120284031A1 (de)
EP (1) EP2517098A1 (de)
CN (1) CN102667708A (de)
DE (1) DE102009059792A1 (de)
WO (1) WO2011076578A1 (de)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8971503B1 (en) 2012-04-02 2015-03-03 Ipdev Co. Method of operating an ordering call center using voice recognition technology
DE102013001219B4 (de) * 2013-01-25 2019-08-29 Inodyn Newmedia Gmbh Verfahren und System zur Sprachaktivierung eines Software-Agenten aus einem Standby-Modus
CN104881117B (zh) * 2015-05-22 2018-03-27 广东好帮手电子科技股份有限公司 一种通过手势识别激活语音控制模块的装置和方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1168302A2 (de) * 2000-06-21 2002-01-02 Volkswagen Aktiengesellschaft Spracherkennungssytem mit einem aktiven Bereitschaftszustand
DE102008051756A1 (de) * 2007-11-12 2009-05-14 Volkswagen Ag Multimodale Benutzerschnittstelle eines Fahrerassistenzsystems zur Eingabe und Präsentation von Informationen

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE4116455A1 (de) 1991-05-18 1992-11-19 Oberspree Habelwerk Gmbh Speicher-brunnen-kollektor-kombination
DE4216455C2 (de) * 1991-05-20 1994-02-10 Ricoh Kk Sprachsteuereinrichtung
DE19711365A1 (de) 1997-03-19 1998-09-24 Bosch Gmbh Robert Elektrisches Gerät
US7720682B2 (en) * 1998-12-04 2010-05-18 Tegic Communications, Inc. Method and apparatus utilizing voice input to resolve ambiguous manually entered text input
DE19932776A1 (de) 1999-07-14 2001-01-25 Volkswagen Ag Verfahren und Vorrichtung zur Darstellung von Eingabeoptionen
DE19933524A1 (de) * 1999-07-16 2001-01-18 Nokia Mobile Phones Ltd Verfahren zur Eingabe von Daten in ein System
JP3594011B2 (ja) * 2001-11-30 2004-11-24 株式会社デンソー ナビゲーション装置
US20030112277A1 (en) * 2001-12-14 2003-06-19 Koninklijke Philips Electronics N.V. Input of data using a combination of data input systems
GB2385697B (en) * 2002-02-14 2005-06-15 Canon Kk Speech processing apparatus and method
US11275405B2 (en) * 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
AU2003296981A1 (en) * 2002-12-10 2004-06-30 Kirusa, Inc. Techniques for disambiguating speech input using multimodal interfaces
DE10360656A1 (de) * 2003-12-23 2005-07-21 Daimlerchrysler Ag Bediensystem für ein Fahrzeug
US20050197843A1 (en) * 2004-03-07 2005-09-08 International Business Machines Corporation Multimodal aggregating unit
JP4097219B2 (ja) * 2004-10-25 2008-06-11 本田技研工業株式会社 音声認識装置及びその搭載車両
JP4667138B2 (ja) * 2005-06-30 2011-04-06 キヤノン株式会社 音声認識方法及び音声認識装置
US7729911B2 (en) * 2005-09-27 2010-06-01 General Motors Llc Speech recognition method and system
JP4878471B2 (ja) * 2005-11-02 2012-02-15 キヤノン株式会社 情報処理装置およびその制御方法
US20070124507A1 (en) * 2005-11-28 2007-05-31 Sap Ag Systems and methods of processing annotations and multimodal user inputs
EP2142888B1 (de) * 2007-04-30 2014-12-17 Peiker acustic GmbH & Co. KG Navigationssystem
DE102007037567A1 (de) * 2007-08-09 2009-02-12 Volkswagen Ag Verfahren zur multimodalen Bedienung mindestens eines Gerätes in einem Kraftfahrzeug
TW200928315A (en) * 2007-12-24 2009-07-01 Mitac Int Corp Voice-controlled navigation device and method thereof
DE102008008948A1 (de) * 2008-02-13 2009-08-20 Volkswagen Ag Systemarchitektur und Verfahren zur multimodalen Informationseingabe
DE102008027958A1 (de) * 2008-03-03 2009-10-08 Navigon Ag Verfahren zum Betrieb eines Navigationssystems

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1168302A2 (de) * 2000-06-21 2002-01-02 Volkswagen Aktiengesellschaft Spracherkennungssytem mit einem aktiven Bereitschaftszustand
DE102008051756A1 (de) * 2007-11-12 2009-05-14 Volkswagen Ag Multimodale Benutzerschnittstelle eines Fahrerassistenzsystems zur Eingabe und Präsentation von Informationen

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of WO2011076578A1 *

Also Published As

Publication number Publication date
CN102667708A (zh) 2012-09-12
DE102009059792A1 (de) 2011-06-22
US20120284031A1 (en) 2012-11-08
WO2011076578A1 (de) 2011-06-30

Similar Documents

Publication Publication Date Title
EP2223046B1 (de) Multimodale benutzerschnittstelle eines fahrerassistenzsystems zur eingabe und präsentation von informationen
EP3373123B1 (de) Verfahren und vorrichtung zur darstellung von empfohlenen bedienhandlungen eines vorschlagssystems und interaktion mit dem vorschlagssystem
US5890122A (en) Voice-controlled computer simulateously displaying application menu and list of available commands
US7099829B2 (en) Method of dynamically displaying speech recognition system information
DE102006011288A1 (de) Verfahren zur Auswahl von Funktionen mithilfe einer Benutzerschnittstelle und Benutzerschnittstelle
EP2451672A1 (de) Verfahren und vorrichtung zum bereitstellen einer benutzerschnittstelle in einem fahrzeug
DE102008008948A1 (de) Systemarchitektur und Verfahren zur multimodalen Informationseingabe
EP2026328B1 (de) Verfahren zur multimodalen Bedienung mindestens eines Gerätes in einem Kraftfahrzeug
DE102007036425B4 (de) Menügesteuertes Mehrfunktionssystem insbesondere für Fahrzeuge
WO2015106830A1 (de) Anwenderschnittstelle und verfahren zum steuern einer lautstärke mittels einer berührungssensitiven anzeigeeinheit
WO2011076578A1 (de) Verfahren und vorrichtung zur bedienung technischer einrichtungen, insbesondere eines kraftfahrzeugs
DE102011017261A1 (de) Verfahren und Vorrichtung zum Bereitstellen einer Nutzerschnittstelle, insbesondere in einem Fahrzeug
DE102013224979A1 (de) Kraftfahrzeug-Bedienvorrichtung mit berührungssensitiver Eingabefläche
DE102004010406B3 (de) Informations- oder Unterhaltungssystem eines Kraftfahrzeuges und Verfahren zur Auswahl eines Listeneintrags
DE102006055252B4 (de) Anordnung und Verfahren zur multimodalen Auswahl von Objekten in Telekommunikationsanwendungen
EP2766210B1 (de) Verfahren zum bereitstellen einer bedienvorrichtung in einem fahrzeug und bedienvorrichtung
DE102009018590A1 (de) Kraftfahrzeug
DE102008026030B4 (de) Informations- und Assistenzsystem sowie ein Verfahren zu dessen Steuerung
DE102008033441B4 (de) Verfahren zum Betrieb eines Bediensystems für ein Fahrzeug und Bediensystem für ein Fahrzeug
DE102013016196A1 (de) Kraftfahrzeugbedienung mittels kombinierter Eingabemodalitäten
WO2021004682A1 (de) Verfahren zum betreiben eines bediensystems in einem fahrzeug und bediensystem in einem fahrzeug
DE102009058151B4 (de) Verfahren zum Betreiben eines Sprachdialogsystems mit semantischer Bewertung und Sprachdialogsystem dazu
US11194466B2 (en) Procedure for entering commands for an electronic setup
WO2020200557A1 (de) Verfahren und vorrichtung zur interaktion mit einem umgebungsobjekt im umfeld eines fahrzeugs
EP2703205A1 (de) Verfahren zum Anzeigen und Bedienen von Funktionsgruppen und/oder Funktionen sowie eine Anzeige- und Bedienvorrichtung

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20120723

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

DAX Request for extension of the european patent (deleted)
17Q First examination report despatched

Effective date: 20170803

REG Reference to a national code

Ref country code: DE

Ref legal event code: R003

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION HAS BEEN REFUSED

18R Application refused

Effective date: 20181228