EP2217992A2 - Method and apparatus for operating a device in a vehicle with a voice controller - Google Patents

Method and apparatus for operating a device in a vehicle with a voice controller

Info

Publication number
EP2217992A2
EP2217992A2 EP08844381A EP08844381A EP2217992A2 EP 2217992 A2 EP2217992 A2 EP 2217992A2 EP 08844381 A EP08844381 A EP 08844381A EP 08844381 A EP08844381 A EP 08844381A EP 2217992 A2 EP2217992 A2 EP 2217992A2
Authority
EP
European Patent Office
Prior art keywords
operating
input
operating step
control unit
vehicle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
EP08844381A
Other languages
German (de)
French (fr)
Inventor
Lorenz Bohrer
Christof Bobzin
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Volkswagen AG
Original Assignee
Volkswagen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Volkswagen AG filed Critical Volkswagen AG
Publication of EP2217992A2 publication Critical patent/EP2217992A2/en
Ceased legal-status Critical Current

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
    • B60R16/0373—Voice control
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements

Definitions

  • the present invention relates to a method for operating a device of a vehicle, in which an operating step is selected and a function associated with the operating step is carried out.
  • the invention further relates to a device for operating a device of a vehicle having a display device for displaying operating steps, a first operating unit for haptic input for selecting an operating step, a second operating unit for voice input designed as a voice control unit for selecting an operating step and a control unit, which is coupled to the display device, the first operating unit and the voice control unit, and with the control signals for executing a function can be generated, which is associated with a selected operating step.
  • the operation should be so intuitive, simple and quick to carry out that the driver can operate the devices of the vehicle whose information is displayed by the display device, even while driving, even if the display device, if necessary, complex structures can be displayed.
  • the information representation and the operation associated with an information presentation in the motor vehicle thus contribute to safety in guiding the motor vehicle.
  • voice control In order in particular to enable the driver of a vehicle to operate the devices of the vehicle in which he does not have to keep his eyes away from the driving, it is known to use voice control.
  • the driver presses in this case, a so-called push-to-talk button, which may be provided for example on the steering wheel, whereupon he makes a speech input. Pressing the push-to-talk button activates the voice control.
  • acoustic signals are recorded by a microphone in the interior of the vehicle and analyzed with a speech recognition unit and converted into control commands.
  • a disadvantage of such an operating system is that the voice control does not flow smoothly into the operation of, for example, a multi-function operating device, but voice commands can only be entered by previously pressing the push-to-talk key.
  • the method according to the invention is characterized in that the selection of the operating step automatically activates a voice control for an input following the operating step.
  • the voice control is automatically activated for the input following the operating step.
  • the input following the operating step does not necessarily have to be carried out by means of a linguistic input.
  • it can also by means of a haptic input, d. H. z. B. by pressing a control element or touching a touch screen, performed.
  • the user is presented with the available operating steps by means of buttons on a display device.
  • a voice control symbol associated with the buttons will be displayed if the selection of the operating step also automatically activates the voice control for an input following the operating step.
  • the user can also recognize whether any voice control is possible for an input following the operating step.
  • an operating procedure is carried out which comprises a plurality of operating steps, which are carried out by a linguistic and / or haptic input. Regardless of whether a previous operating step has been carried out by a linguistic or a haptic input, in the method according to the invention the following operating step can take place by means of a linguistic input or a haptic input. This gives the user a high degree of flexibility. He does not have to decide whether the input is linguistic or hap- tic. Both input options are provided for the operating steps with voice control function. One operation usually has a limited number of choices. The options are assigned in an embodiment of the method according to the invention in each case words or phrases composed of several words. In the method, the vocabulary is now limited by speech recognition speech recognition to the words associated with the choices, or occurring in the phrases of choices for the current operation.
  • the haptic input takes place in particular by touching a touch-sensitive surface by an object, such. B. the user's finger.
  • the device for the haptic input can thus be combined with the display of a display device by a so-called touch screen is provided.
  • the device is characterized in that the control unit is designed such that the speech control unit is automatically activated by the selection of an operating step for an input following the operating step.
  • the voice control unit may comprise a microphone for detecting voice spoken within the vehicle and a voice recognition unit which converts speech detected by the microphone into input signals that can be processed by the control unit.
  • the speech recognition unit can be coupled to a memory in which a vocabulary is stored whose words or phrases composed of several words can be converted by the speech recognition unit into input signals.
  • the vocabulary can be limited depending on the words or the words occurring in the phrases, which are assigned to a limited number of choices of the operating step.
  • the first operating unit comprises a touch-sensitive surface.
  • the first operating unit and a display of the display device are provided in particular by a touchscreen.
  • the first operating unit is arranged in the vehicle remote from the display device.
  • Figure 1 shows schematically an embodiment of an operating device according to the invention
  • Figure 2 shows the display of the display in the display device before the selection of an operating step
  • Figure 3 shows the display of the display of the display device, for the operating step, the following input.
  • FIG. 1 the basic structure of the operating device according to the invention, which is also suitable for carrying out the method according to the invention, is explained with reference to FIG. 1:
  • the device comprises a central control unit 1. This is coupled to a display device 2, which has a display 3.
  • the display may be a liquid crystal display known per se. However, any other display for visualizing information may also be used.
  • the display device 2 is arranged in the vehicle 8 so that the display 3 is located in the driver's primary field of vision.
  • This "primary field of vision" is usually defined so that the line of sight B of the driver 9 is an angular range in a vertical plane arranged in the vehicle longitudinal direction at a certain angle ⁇ downwards or upwards from the horizontal which intersects the eyes of the driver 9,
  • the primary field of vision of the driver 9 is defined so that the angle ⁇ is less than 30.degree ..
  • To view the display 3, the driver 9 thus has to turn his gaze downward less than 30.degree from an average size of the driver 9.
  • the display device 3 is further arranged substantially at the center of the vehicle 9, so that the display 3 can be viewed by both the driver 9 and a passenger.
  • an operating element 6 is arranged, which is also coupled to the control unit 1.
  • the operating element 6 is, for example, a mechanical operating element, in particular a rotary-push-button switch, which may be provided by further mechanical switches, for. B. key switches, is surrounded.
  • the "range” includes the range in which the driver 9, who has an average size, can readily grasp, ie with little or no change in his position, in a position which he normally occupies while driving To grip control element 6, the driver 9 in particular must not or only slightly prevent.
  • the display device 2 displays, inter alia, information which is assigned to an operator via the operating element 6. are net. For example, from the first display device 2 different buttons can be displayed, which can be controlled and selected via the control element 6. Direct operation via the display 3 of the display device 2 is thus not required.
  • the display 3 of the display device 2 is designed as a touch screen. The display 3 thus has a touch-sensitive surface, so that an operation can also be made directly via the display 3.
  • a voice control unit which comprises a microphone 4 and a voice recognition unit 5.
  • the microphone 4 can be switched on and off by the control unit 1. It detects speech spoken within the vehicle 8.
  • the speech 4 detected by the microphone is transmitted by means of electrical signals to the speech recognition unit 5, which analyzes the speech information and converts it into input signals.
  • a memory may be provided in the speech recognition unit, which comprises the totality of the words contained in the totality of the selection options for operating steps. It is possible to carry out an operating step by uttering a single word or a phrase composed of several words.
  • the control unit 1 is further coupled to a Fahrbusbus 7.
  • the devices of the vehicle 8, which are to be operated via the operating device, are also coupled to this Fahrzugbus 7.
  • data is transmitted from the vehicle devices via the vehicle bus 7 to the control unit 1.
  • the data is processed there.
  • graphics data are generated, which are displayed graphically by the displays 3 of the display device 2.
  • the user such. B. the driver 9, via the control element 6 or designed as a touch screens displays 3 of the display device 2 make inputs, which are transmitted to the control unit 1. There, these inputs are processed and converted as needed into control signals, via which the vehicle devices are controlled.
  • control unit 1 is connected to a memory 10, from which data can be read out.
  • memory 10 On the memory 10, a variety of data required for the processing of the data received from the control unit may be stored.
  • the method according to the invention or the device according to the invention is explained below by means of an example in which a contact person is selected, for example, to initiate a telephone call:
  • buttons on the display 3 of the display device 2 via which he can call specific groups of contact persons.
  • buttons for calling the business contacts and a button for calling the private contacts.
  • buttons on the bottom left with which the voice control can be activated as a global setting.
  • this global activation of voice control does not mean that in each case the operation can be done via a linguistic input. Rather, the buttons that allow voice control after being operated will display microphones as an additional icon to alert the user that speech will be available after selecting the appropriate button.
  • the user selects the middle button for the private contacts via the operating element 6. This selection is transmitted to the control unit 1.
  • the function assigned to this operating step is then executed by the control unit 1 by reading out from the memory 10 a list of the user's private contacts. Simultaneously with the execution of this operation, the voice control is automatically activated for an input following the operation. The activation of the voice control via the control unit 1.
  • the microphone 4 is turned on by the control unit 1 and detects speech within the vehicle.
  • a list of private contact persons is displayed on the display 3 of the display device 2. Each contact person is assigned a button that can be selected by means of the control element 6 or via a linguistic input.
  • the user can now either a linguistic input or an input by means of the control element 6 a specific contact for z. For example, select a call.
  • an operating step and an input following the operating step have been explained, which can be haptic or linguistic.
  • an operating sequence comprising a plurality of operating steps can be carried out in the manner explained above.
  • an operating step can be carried out by a linguistic input or a haptic input, regardless of whether the previous operating step was carried out by a linguistic input or haptic input.
  • the input can only be made by haptic means.
  • a subsequent operating step can, however, then, if fundamentally possible, also take place via a linguistic input.
  • the push-to-talk function which is usually implemented in a separate operating element, is thus integrated into the selection of an operating step preceding the linguistic input. This makes operation easier, since no separate push-to-talk button must be pressed.
  • the vocabulary to be recognized in the speech recognition is limited by coupling to the current operating context, whereby the speech recognition can be accelerated and improved.

Abstract

The present invention relates to a method for operating a device in a vehicle (8), in which an operating step is selected and a function associated with the operating step is performed. The method according to the invention is characterized in that the operation of selecting the operating step automatically activates a voice controller for input following the operating step. The invention also relates to an apparatus for operating a device in a vehicle (8), said apparatus having a display apparatus (2) for displaying operating steps, a first operating unit (6) for haptic input for selecting an operating step, a voice control unit (4, 5) for voice input for selecting an operating step, and a control unit (1) which is coupled to the display apparatus (2), the first operating unit (6) and the voice control unit (4, 5) and can be used to generate control signals for performing a function associated with a selected operating step. The apparatus according to the invention is characterized in that the control unit (1) is designed in such a manner that the operation of selecting an operating step automatically activates the voice control unit (4, 5) for input following the operating step.

Description

Verfahren und Vorrichtung zum Bedienen einer Einrichtung eines Fahrzeugs mit einer Sprachsteuerung Method and device for operating a device of a vehicle with a voice control
Die vorliegende Erfindung betrifft ein Verfahren zum Bedienen einer Einrichtung eines Fahrzeugs, bei welchem ein Bedienschritt ausgewählt wird und eine dem Bedienschritt zugeordnete Funktion ausgeführt wird. Die Erfindung betrifft ferner eine Vorrichtung zum Bedienen einer Einrichtung eines Fahrzeugs mit einer Anzeigevorrichtung zum Anzeigen von Bedienschritten, einer ersten Bedieneinheit für eine haptische Eingabe zur Auswahl eines Bedienschritts, einer als Sprachsteuerungseinheit ausgebildeten zweiten Bedieneinheit für eine sprachliche Eingabe zur Auswahl eines Bedienschritts und einer Steuereinheit, die mit der Anzeigevorrichtung, der ersten Bedieneinheit und der Sprachsteuerungseinheit gekoppelt ist, und mit der Steuersignale zum Ausführen einer Funktion erzeugbar sind, die einem ausgewählten Bedienschritt zugeordnet ist.The present invention relates to a method for operating a device of a vehicle, in which an operating step is selected and a function associated with the operating step is carried out. The invention further relates to a device for operating a device of a vehicle having a display device for displaying operating steps, a first operating unit for haptic input for selecting an operating step, a second operating unit for voice input designed as a voice control unit for selecting an operating step and a control unit, which is coupled to the display device, the first operating unit and the voice control unit, and with the control signals for executing a function can be generated, which is associated with a selected operating step.
Ursprünglich wurden die verschiedenen in einem Fahrzeug, insbesondere einem Kraftfahrzeug, vorgesehenen Einrichtungen über separate Bedienelemente bedient. Beispielsweise gab es Drehschalter zum Einstellen der Lüftung sowie der Temperatur, Schalter zum Einstellen der verschiedenen Lüftungsdüsen, Schalter zum Bedienen der Beleuchtungseinrichtungen für den Innenraum des Fahrzeugs, entsprechende Schalter für die Beleuchtungs- und Scheinwerfereinrichtungen außen am Fahrzeug und Bedienelemente für ein Radio oder einen CD-Spieler. Bei modernen Kraftfahrzeugen sind mittlerweile so viele Einrichtungen zum Einstellen verschiedener Fahrzeugfunktionen, Informationssysteme, einschließlich Fahrerassistenzsysteme und Unterhaltungssysteme, vorgesehen, dass es nicht mehr zweckmäßig ist, für alle Fahrzeugeinrichtungen separate Bedienelemente vorzusehen. Aus diesem Grund erfolgt die Bedienung der vielfältigen Fahrzeugeinrichtungen über ein einheitliches Bedienkonzept mit wenigen Bedienelementen, die in Verbindung mit einer Anzeigevorrichtung bedient werden. Dabei werden von dem Display der Anzeigevorrichtung Schaltflächen angezeigt, welche von dem Bedien- element ausgewählt werden können.Originally, the various devices provided in a vehicle, in particular a motor vehicle, were operated via separate operating elements. For example, there have been rotary switches for setting the ventilation and the temperature, switches for setting the various ventilation nozzles, switches for operating the illumination devices for the interior of the vehicle, corresponding switches for the lighting and headlight devices outside the vehicle and controls for a radio or a CD Player. In modern motor vehicles, so many means for setting various vehicle functions, information systems, including driver assistance systems and entertainment systems, are now provided that it is no longer appropriate to provide separate controls for all vehicle equipment. For this reason, the operation of the diverse vehicle facilities via a uniform operating concept with a few controls that are operated in conjunction with a display device. In this case, buttons are displayed by the display of the display device, which can be selected by the control element.
Die Bedienung der verschiedenen Einrichtungen des Fahrzeugs und die Aufnahme vonThe operation of the various facilities of the vehicle and the inclusion of
Informationen, die von diesen Einrichtungen geliefert werden können, beanspruchen dieInformation that can be supplied by these facilities is claimed by the
Aufmerksamkeit des Fahrers unter Umständen derart, dass das gleichzeitige sichere Führen des Kraftfahrzeugs durch den Fahrer nicht oder nur noch eingeschränkt möglich ist. Will somit der Fahrer Einrichtungen des Fahrzeugs, deren Informationen über die Anzeigeeinrichtung dargestellt werden, bedienen, sollte er dies unter Umständen vor dem Beginn einer Fahrt tun oder die Fahrt für die Bedienung unterbrechen. Derartige Beeinträchtigungen für die Bedienung sind jedoch unerwünscht. Sie führen vielfach da- zu, dass der Fahrer die Einrichtungen des Fahrzeugs während der Fahrt bedient, obwohl dies zu einer Ablenkung führen kann, die ein Sicherheitsrisiko darstellen kann.Attention of the driver under circumstances such that the simultaneous safe driving of the motor vehicle by the driver is not or only possible to a limited extent is. Thus, if the driver wants to operate facilities of the vehicle whose information is displayed via the display device, he may do so before the start of a journey or interrupt the trip for the operation. Such impairments to the operation are undesirable. In many cases, they cause the driver to operate the equipment of the vehicle while driving, although this can lead to a distraction that can pose a safety risk.
Es ist daher wünschenswert, die Informationen im Kraftfahrzeug so darzustellen, dass sie schnell und intuitiv vom Fahrer aufgenommen werden können, so dass das Erfassen der dargestellten Informationen nicht zu einer Ablenkung des Fahrers während der Fahrt führt. Ferner soll die Bedienung so intuitiv, einfach und schnell durchführbar sein, dass der Fahrer die Einrichtungen des Fahrzeugs, deren Informationen von der Anzeigeeinrichtung dargestellt werden, auch während der Fahrt bedienen kann, selbst wenn von der Anzeigeeinrichtung gegebenenfalls komplexe Strukturen darstellbar sind. Die Infor- mationsdarstellung und die mit einer Informationsdarstellung verbundene Bedienung in dem Kraftfahrzeug trägt somit zur Sicherheit beim Führen des Kraftfahrzeugs bei.It is therefore desirable to display the information in the motor vehicle so that it can be quickly and intuitively recorded by the driver, so that the detection of the displayed information does not lead to a distraction of the driver while driving. Furthermore, the operation should be so intuitive, simple and quick to carry out that the driver can operate the devices of the vehicle whose information is displayed by the display device, even while driving, even if the display device, if necessary, complex structures can be displayed. The information representation and the operation associated with an information presentation in the motor vehicle thus contribute to safety in guiding the motor vehicle.
Um insbesondere dem Fahrer eines Fahrzeugs eine Bedienung der Einrichtungen des Fahrzeugs zu ermöglichen, bei welcher er den Blick nicht vom Fahrgeschehen abwen- den muss, ist es bekannt, eine Sprachsteuerung einzusetzen. Der Fahrer drückt in diesem Fall eine so genannte Push-to-Talk-Taste, die beispielsweise am Lenkrad vorgesehen sein kann, woraufhin er eine sprachliche Eingabe vornimmt. Nach Drücken der Push-to-Talk-Taste wird die Sprachsteuerung aktiviert. Für ein bestimmtes Zeitintervall werden akustische Signale von einem Mikrofon im Innenraum des Fahrzeugs aufge- nommen und mit einer Spracherkennungseinheit analysiert und in Steuerbefehle umgewandelt. Nachteilhaft an einem solchen Bediensystem ist, dass sich die Sprachsteuerung nicht fließend in die Bedienung beispielsweise einer Multifunktionsbedieneinrich- tung einfügt, sondern Sprachbefehle nur durch vorheriges Drücken der Push-to-Talk- Taste eingegeben werden können.In order in particular to enable the driver of a vehicle to operate the devices of the vehicle in which he does not have to keep his eyes away from the driving, it is known to use voice control. The driver presses in this case, a so-called push-to-talk button, which may be provided for example on the steering wheel, whereupon he makes a speech input. Pressing the push-to-talk button activates the voice control. For a specific time interval, acoustic signals are recorded by a microphone in the interior of the vehicle and analyzed with a speech recognition unit and converted into control commands. A disadvantage of such an operating system is that the voice control does not flow smoothly into the operation of, for example, a multi-function operating device, but voice commands can only be entered by previously pressing the push-to-talk key.
Es ist die Aufgabe der vorliegenden Erfindung, ein Verfahren und eine Vorrichtung zum Bedienen einer Einrichtung eines Fahrzeugs bereitzustellen, welche eine verbesserte Sprachsteuerung bereitstellt.It is the object of the present invention to provide a method and an apparatus for operating a device of a vehicle, which provides an improved voice control.
Diese Aufgabe wird durch ein Verfahren mit den Merkmalen des Anspruchs 1 und eine Vorrichtung mit den Merkmalen des Anspruchs 8 gelöst. Vorteilhafte Aus- und Weiterbildungen ergeben sich aus den Unteransprüchen. Das erfindungsgemäße Verfahren ist dadurch gekennzeichnet, dass durch die Auswahl des Bedienschritts automatisch eine Sprachsteuerung für eine dem Bedienschritt folgende Eingabe aktiviert wird.This object is achieved by a method having the features of claim 1 and an apparatus having the features of claim 8. Advantageous embodiments and further developments emerge from the subclaims. The method according to the invention is characterized in that the selection of the operating step automatically activates a voice control for an input following the operating step.
Es ist in diesem Fall somit nicht erforderlich, dass der Nutzer für die Sprachsteuerung einen weiteren Bedienschritt vornimmt, indem er beispielsweise eine so genannte Push- to-Talk-Taste drückt. Die Sprachsteuerung wird vielmehr für die dem Bedienschritt folgende Eingabe automatisch aktiviert. Die dem Bedienschritt folgende Eingabe muss je- doch nicht notwendigerweise mittels einer sprachlichen Eingabe durchgeführt werden. Bevorzugt kann sie auch mittels einer haptischen Eingabe, d. h. z. B. durch Betätigen eines Bedienelements oder Berühren eines Touchscreens, durchgeführt werden.In this case, it is thus not necessary for the user to carry out another operating step for voice control, for example by pressing a so-called push-to-talk key. Instead, the voice control is automatically activated for the input following the operating step. However, the input following the operating step does not necessarily have to be carried out by means of a linguistic input. Preferably, it can also by means of a haptic input, d. H. z. B. by pressing a control element or touching a touch screen, performed.
Bevorzugt kann mittels einer Eingabe festgelegt werden, ob durch die Auswahl des nächsten Bedienschritts oder der folgenden Bedienschritte automatisch die Sprachsteuerung für eine dem jeweiligen Bedienschritt folgende Eingabe aktiviert werden soll. Es kann somit eine globale Einstellung für die Sprachsteuerung vorgenommen werden, und zwar für die Bedienschritte, für welche eine Sprachsteuerung zur Verfügung steht. Gemäß einer bevorzugten Weiterbildung werden dem Nutzer die zur Auswahl stehenden Bedienschritte mittels Schaltflächen auf einer Anzeigevorrichtung dargestellt. Dabei wird ein den Schaltflächen zugeordnetes Sprachsteuerungssymbol angezeigt, wenn durch die Auswahl des Bedienschritts ferner automatisch die Sprachsteuerung für eine dem Bedienschritt folgende Eingabe aktiviert werden wird. An Hand dieses Sprachsteuerungs- symbols kann der Nutzer auch erkennen, ob überhaupt eine Sprachsteuerung für eine dem Bedienschritt folgende Eingabe möglich ist.Preferably, it can be determined by means of an input whether the selection of the next operating step or of the following operating steps should automatically activate the voice control for an input following the respective operating step. It can thus be made a global setting for the voice control, namely for the operations for which a voice control is available. According to a preferred development, the user is presented with the available operating steps by means of buttons on a display device. A voice control symbol associated with the buttons will be displayed if the selection of the operating step also automatically activates the voice control for an input following the operating step. On the basis of this voice control symbol, the user can also recognize whether any voice control is possible for an input following the operating step.
Gemäß einer bevorzugten Ausbildung des erfindungsgemäßen Verfahrens wird ein Bedienablauf durchgeführt, der mehrere Bedienschritte umfasst, die durch eine sprachliche und/oder eine haptische Eingabe durchgeführt werden. Unabhängig davon, ob ein vor- hergehender Bedienschritt durch eine sprachliche oder eine haptische Eingabe erfolgt ist, kann bei dem erfindungsgemäßen Verfahren der folgende Bedienschritt durch eine sprachliche Eingabe oder eine haptische Eingabe erfolgen. Hierdurch erhält der Nutzer eine hohe Flexibilität. Er muss sich nicht festlegen, ob die Eingabe sprachlich oder hap- tisch erfolgt. Für die Bedienschritte mit Sprachsteuerungsfunktion sind jeweils beide Ein- gabemöglichkeiten vorgesehen. Bei einem Bedienschritt gibt es üblicherweise eine begrenzte Anzahl von Auswahlmöglichkeiten. Den Auswahlmöglichkeiten sind bei einer Ausgestaltung des erfindungsgemäßen Verfahrens jeweils Worte oder aus mehreren Worten zusammengesetzte Phrasen zugeordnet. Bei dem Verfahren wird nun der Wortschatz von einer Spracherkennung der Sprachsteuerung auf die Worte begrenzt, die den Auswahlmöglichkeiten zugeordnet sind, oder die in den Phrasen der Auswahlmöglichkeiten für den aktuellen Bedienschritt vorkommen.According to a preferred embodiment of the method according to the invention, an operating procedure is carried out which comprises a plurality of operating steps, which are carried out by a linguistic and / or haptic input. Regardless of whether a previous operating step has been carried out by a linguistic or a haptic input, in the method according to the invention the following operating step can take place by means of a linguistic input or a haptic input. This gives the user a high degree of flexibility. He does not have to decide whether the input is linguistic or hap- tic. Both input options are provided for the operating steps with voice control function. One operation usually has a limited number of choices. The options are assigned in an embodiment of the method according to the invention in each case words or phrases composed of several words. In the method, the vocabulary is now limited by speech recognition speech recognition to the words associated with the choices, or occurring in the phrases of choices for the current operation.
Die haptische Eingabe erfolgt insbesondere durch Berührung einer berührungsempfindli- chen Oberfläche durch ein Objekt , wie z. B. dem Finger des Nutzers. Die Einrichtung für die haptische Eingabe kann somit mit dem Display einer Anzeigevorrichtung kombiniert werden, indem ein so genannter Touchscreen vorgesehen ist.The haptic input takes place in particular by touching a touch-sensitive surface by an object, such. B. the user's finger. The device for the haptic input can thus be combined with the display of a display device by a so-called touch screen is provided.
Die erfindungsgemäße Vorrichtung ist dadurch gekennzeichnet, dass die Steuereinheit so ausgebildet ist, dass durch die Auswahl eines Bedienschritts automatisch die Sprach- steuerungseinheit für eine dem Bedienschritt folgende Eingabe aktiviert wird. Die Sprachsteuerungseinheit kann ein Mikrofon zum Erfassen von innerhalb des Fahrzeugs gesprochener Sprache und eine Spracherkennungseinheit umfassen, welche vom Mikrofon erfasste Sprache in Eingabesignale umsetzt, die von der Steuereinheit verarbeitbar sind. Bevorzugt kann die Spracherkennungseinheit mit einem Speicher gekoppelt sein, in dem ein Wortschatz gespeichert ist, dessen Worte oder aus mehreren Worten zusammengesetzte Phrasen von der Spracherkennungseinheit in Eingabesignale umsetzbar sind. Bevorzugt ist bei einem Bedienschritt der Wortschatz in Abhängigkeit von den Worten oder den in den Phrasen vorkommenden Worten, die einer begrenzten Anzahl von Auswahlmöglichkeiten des Bedienschritts zugeordnet sind, begrenzbar.The device according to the invention is characterized in that the control unit is designed such that the speech control unit is automatically activated by the selection of an operating step for an input following the operating step. The voice control unit may comprise a microphone for detecting voice spoken within the vehicle and a voice recognition unit which converts speech detected by the microphone into input signals that can be processed by the control unit. Preferably, the speech recognition unit can be coupled to a memory in which a vocabulary is stored whose words or phrases composed of several words can be converted by the speech recognition unit into input signals. Preferably, in one operating step the vocabulary can be limited depending on the words or the words occurring in the phrases, which are assigned to a limited number of choices of the operating step.
Gemäß einer bevorzugten Ausgestaltung der erfindungsgemäßen Vorrichtung umfasst die erste Bedieneinheit eine berührungsempfindliche Oberfläche. Die erste Bedieneinheit und ein Display der Anzeigevorrichtung werden insbesondere von einem Touchscreen bereitgestellt. Ferner ist es auch möglich, dass alternativ oder zusätzlich die erste Bedieneinheit im Fahrzeug abgesetzt von der Anzeigevorrichtung angeordnet ist.According to a preferred embodiment of the device according to the invention, the first operating unit comprises a touch-sensitive surface. The first operating unit and a display of the display device are provided in particular by a touchscreen. Furthermore, it is also possible that, alternatively or additionally, the first operating unit is arranged in the vehicle remote from the display device.
Die Erfindung wird nun an Hand eines Ausführungsbeispiels mit Bezug zu den Zeichnungen erläutert.The invention will now be explained with reference to an embodiment with reference to the drawings.
Figur 1 zeigt schematisch ein Ausführungsbeispiel einer erfindungsgemäßen Bedienvorrichtung, Figur 2 zeigt die Anzeige des Displays in der Anzeigevorrichtung vor der Auswahl eines Bedienschritts und1 shows schematically an embodiment of an operating device according to the invention, Figure 2 shows the display of the display in the display device before the selection of an operating step and
Figur 3 zeigt die Anzeige des Displays der Anzeigevorrichtung, für die dem Bedienschritt folgende Eingabe.Figure 3 shows the display of the display of the display device, for the operating step, the following input.
Zunächst wird der prinzipielle Aufbau der erfindungsgemäßen Bedienvorrichtung, welche auch geeignet ist, das erfindungsgemäße Verfahren durchzuführen, mit Bezug zu Figur 1 erläutert:First, the basic structure of the operating device according to the invention, which is also suitable for carrying out the method according to the invention, is explained with reference to FIG. 1:
Die Vorrichtung umfasst eine zentrale Steuereinheit 1. Diese ist mit einer Anzeigevorrichtung 2 gekoppelt, welche ein Display 3 aufweist. Bei dem Display kann es sich um ein an sich bekanntes Flüssigkristalldisplay handeln. Beliebige andere Displays zum visuellen Darstellen von Informationen können jedoch auch eingesetzt werden. Die Anzeigevorrichtung 2 ist in dem Fahrzeug 8 so angeordnet, dass das Display 3 im primären Sichtbe- reich des Fahrers liegt. Dieser „primäre Sichtbereich" wird üblicherweise so definiert, dass die Blickrichtung B des Fahrers 9 ein Winkelbereich in einer vertikalen, in Fahrzeuglängsrichtung angeordneten Ebene um einen bestimmten Winkel α nach unten bzw. nach oben von der Horizontalen, welche die Augen des Fahrers 9 schneidet, abweicht. Der primäre Sichtbereich des Fahrers 9 ist dabei so definiert, dass der Winkel α kleiner als 30° ist. Um das Display 3 zu betrachten, muss der Fahrer 9 somit seinen Blick weniger als 30° von der Horizontalen nach unten wenden. Dabei geht man von einer Durchschnittsgröße des Fahrers 9 aus. Die Anzeigevorrichtung 3 ist ferner im Wesentlichen in der Mitte des Fahrzeugs 9 angeordnet, so dass das Display 3 sowohl vom Fahrer 9 als auch von einem Beifahrer betrachtet werden kann.The device comprises a central control unit 1. This is coupled to a display device 2, which has a display 3. The display may be a liquid crystal display known per se. However, any other display for visualizing information may also be used. The display device 2 is arranged in the vehicle 8 so that the display 3 is located in the driver's primary field of vision. This "primary field of vision" is usually defined so that the line of sight B of the driver 9 is an angular range in a vertical plane arranged in the vehicle longitudinal direction at a certain angle α downwards or upwards from the horizontal which intersects the eyes of the driver 9, The primary field of vision of the driver 9 is defined so that the angle α is less than 30.degree .. To view the display 3, the driver 9 thus has to turn his gaze downward less than 30.degree from an average size of the driver 9. The display device 3 is further arranged substantially at the center of the vehicle 9, so that the display 3 can be viewed by both the driver 9 and a passenger.
In Reichweite des Fahrers 9 ist ein Bedienelement 6 angeordnet, welches auch mit der Steuereinheit 1 gekoppelt ist. Bei dem Bedienelement 6 handelt es sich beispielsweise um ein mechanisches Bedienelement, insbesondere um einen Dreh-Drück-Schalter, der gegebenenfalls von weiteren mechanischen Schaltern, z. B. Tastschaltern, umgeben ist. Die „Reichweite" umfasst den Bereich, in den der Fahrer 9, der eine durchschnittliche Größe aufweist, ohne Weiteres, d. h. ohne oder nur mit einer geringen Veränderung seiner Position, in einer Stellung, die er normalerweise beim Fahren einnimmt, greifen kann. Um das Bedienelement 6 zu greifen, muss sich der Fahrer 9 insbesondere nicht oder nur geringfügig vorbeugen.Within reach of the driver 9, an operating element 6 is arranged, which is also coupled to the control unit 1. The operating element 6 is, for example, a mechanical operating element, in particular a rotary-push-button switch, which may be provided by further mechanical switches, for. B. key switches, is surrounded. The "range" includes the range in which the driver 9, who has an average size, can readily grasp, ie with little or no change in his position, in a position which he normally occupies while driving To grip control element 6, the driver 9 in particular must not or only slightly prevent.
Gemäß einer Ausgestaltung der Bedienvorrichtung zeigt die Anzeigevorrichtung 2 unter anderem Informationen an, welche einer Bedienung über das Bedienelement 6 zugeord- net sind. Beispielsweise können von der ersten Anzeigevorrichtung 2 verschiedene Schaltflächen angezeigt werden, welche über das Bedienelement 6 angesteuert und ausgewählt werden können. Eine direkte Bedienung über das Display 3 der Anzeigevorrichtung 2 ist somit nicht erforderlich. Gemäß einer weiteren Ausgestaltung der Bedien- Vorrichtung ist jedoch das Display 3 der Anzeigevorrichtung 2 als Touchscreen ausgestaltet. Das Display 3 weist somit eine berührungsempfindliche Oberfläche auf, so dass eine Bedienung auch direkt über das Display 3 erfolgen kann.According to one embodiment of the operating device, the display device 2 displays, inter alia, information which is assigned to an operator via the operating element 6. are net. For example, from the first display device 2 different buttons can be displayed, which can be controlled and selected via the control element 6. Direct operation via the display 3 of the display device 2 is thus not required. According to a further embodiment of the operating device, however, the display 3 of the display device 2 is designed as a touch screen. The display 3 thus has a touch-sensitive surface, so that an operation can also be made directly via the display 3.
Ferner ist mit der Steuereinheit 1 eine Sprachsteuerungseinheit gekoppelt, welche ein Mikrofon 4 und eine Spracherkennungseinheit 5 umfasst. Das Mikrofon 4 kann von der Steuereinheit 1 ein und ausgeschaltet werden. Es erfasst Sprache, die innerhalb des Fahrzeugs 8 gesprochen wird. Die von dem Mikrofon erfasste Sprache 4 wird mittels elektrischer Signale an die Spracherkennungseinheit 5 übertragen, welche die Sprachinformation analysiert und in Eingabesignale umsetzt. Hierfür kann in der Spracherken- nungseinheit ein Speicher vorgesehen sein, welcher die Gesamtheit der Worte umfasst, die in der Gesamtheit der Auswahlmöglichkeiten für Bedienschritte enthalten ist. Dabei ist es möglich, einen Bedienschritt durch das Aussprechen eines einzelnen Wortes oder einer aus mehreren Worten zusammengesetzten Phrase auszuführen.Furthermore, coupled to the control unit 1 is a voice control unit which comprises a microphone 4 and a voice recognition unit 5. The microphone 4 can be switched on and off by the control unit 1. It detects speech spoken within the vehicle 8. The speech 4 detected by the microphone is transmitted by means of electrical signals to the speech recognition unit 5, which analyzes the speech information and converts it into input signals. For this purpose, a memory may be provided in the speech recognition unit, which comprises the totality of the words contained in the totality of the selection options for operating steps. It is possible to carry out an operating step by uttering a single word or a phrase composed of several words.
Die Steuereinheit 1 ist ferner mit einem Fahrzugbus 7 gekoppelt. Die Einrichtungen des Fahrzeugs 8, welche über die Bedienvorrichtung bedient werden sollen, sind auch mit diesem Fahrzugbus 7 gekoppelt. Ferner ist es auch möglich, dass einige Fahrzeugeinrichtungen direkt mit der Steuereinheit 1 gekoppelt sind. Von den Fahrzeugeinrichtungen werden Daten gegebenenfalls über den Fahrzeugbus 7 an die Steuereinheit 1 übertra- gen. Dort werden die Daten verarbeitet. Es werden ferner Grafikdaten erzeugt, die von den Displays 3 der Anzeigevorrichtung 2 grafisch wiedergegeben werden. Des Weiteren kann der Nutzer, wie z. B. der Fahrer 9, über das Bedienelement 6 oder die als Touch- screens ausgestalteten Displays 3 der Anzeigevorrichtung 2 Eingaben tätigen, welche an die Steuereinheit 1 übertragen werden. Dort werden diese Eingaben verarbeitet und bei Bedarf in Steuersignale umgesetzt, über welche die Fahrzeugeinrichtungen angesteuert werden.The control unit 1 is further coupled to a Fahrbusbus 7. The devices of the vehicle 8, which are to be operated via the operating device, are also coupled to this Fahrzugbus 7. Furthermore, it is also possible for some vehicle devices to be coupled directly to the control unit 1. If necessary, data is transmitted from the vehicle devices via the vehicle bus 7 to the control unit 1. The data is processed there. Furthermore, graphics data are generated, which are displayed graphically by the displays 3 of the display device 2. Furthermore, the user, such. B. the driver 9, via the control element 6 or designed as a touch screens displays 3 of the display device 2 make inputs, which are transmitted to the control unit 1. There, these inputs are processed and converted as needed into control signals, via which the vehicle devices are controlled.
Des Weiteren ist die Steuereinheit 1 mit einem Speicher 10 verbunden, aus welchem Daten ausgelesen werden können. Auf dem Speicher 10 können vielfältige Daten, die für die Verarbeitung der von der Steuereinheit empfangenen Daten erforderlich sind, gespeichert sein. Im Folgenden wird das erfindungsgemäße Verfahren bzw. die erfindungsgemäße Vorrichtung an Hand eines Beispiels erläutert, bei dem eine Kontaktperson beispielsweise zum Initiieren eines Telefonanrufs ausgewählt wird:Furthermore, the control unit 1 is connected to a memory 10, from which data can be read out. On the memory 10, a variety of data required for the processing of the data received from the control unit may be stored. The method according to the invention or the device according to the invention is explained below by means of an example in which a contact person is selected, for example, to initiate a telephone call:
Wie in Figur 2 gezeigt, werden dem Nutzer auf dem Display 3 der Anzeigevorrichtung 2 mehrere Schaltflächen angezeigt, über welche er bestimmte Gruppen von Kontaktpersonen aufrufen kann. Wie in Figur 2 gezeigt, gibt es eine Schaltfläche zum Aufrufen der geschäftlichen Kontakte und eine Schaltfläche zum Aufrufen der privaten Kontakte. Des Weiteren gibt es links unten eine Schaltfläche, mit der als globale Einstellung die Sprachsteuerung aktiviert werden kann. Diese globale Aktivierung der Sprachsteuerung bedeutet jedoch nicht, dass in jedem Fall die Bedienung über eine sprachliche Eingabe erfolgen kann. Vielmehr werden bei den Schaltflächen, bei denen nach ihrer Betätigung eine Sprachsteuerung möglich ist, Mikrofone als Zusatzsymbol angezeigt, um den Nutzer darauf hinzuweisen, dass nach der Auswahl der entsprechenden Schaltfläche eine Spracheingabe möglich ist.As shown in FIG. 2, the user is presented with a plurality of buttons on the display 3 of the display device 2, via which he can call specific groups of contact persons. As shown in Figure 2, there is a button for calling the business contacts and a button for calling the private contacts. Furthermore, there is a button on the bottom left, with which the voice control can be activated as a global setting. However, this global activation of voice control does not mean that in each case the operation can be done via a linguistic input. Rather, the buttons that allow voice control after being operated will display microphones as an additional icon to alert the user that speech will be available after selecting the appropriate button.
In dem in Figur 2 gezeigten Fall wählt der Nutzer über das Bedienelement 6 die mittlere Schaltfläche für die privaten Kontakte aus. Diese Auswahl wird an die Steuereinheit 1 übertragen. Von der Steuereinheit 1 wird daraufhin die diesem Bedienschritt zugeordne- te Funktion ausgeführt, indem aus dem Speicher 10 eine Liste mit den privaten Kontakten des Nutzers ausgelesen wird. Gleichzeitig mit der Ausführung dieses Bedienschritts wird automatisch die Sprachsteuerung für eine dem Bedienschritt folgende Eingabe aktiviert. Die Aktivierung der Sprachsteuerung erfolgt über die Steuereinheit 1. Das Mikrofon 4 wird von der Steuereinheit 1 eingeschaltet und erfasst innerhalb des Fahrzeugs gesprochene Sprache. Gleichzeitig wird auf dem Display 3 der Anzeigevorrichtung 2 eine Liste mit privaten Kontaktpersonen angezeigt. Dabei ist jeder Kontaktperson eine Schaltfläche zugeordnet, die mittels des Bedienelements 6 oder über eine sprachliche Eingabe ausgewählt werden kann.In the case shown in FIG. 2, the user selects the middle button for the private contacts via the operating element 6. This selection is transmitted to the control unit 1. The function assigned to this operating step is then executed by the control unit 1 by reading out from the memory 10 a list of the user's private contacts. Simultaneously with the execution of this operation, the voice control is automatically activated for an input following the operation. The activation of the voice control via the control unit 1. The microphone 4 is turned on by the control unit 1 and detects speech within the vehicle. At the same time, a list of private contact persons is displayed on the display 3 of the display device 2. Each contact person is assigned a button that can be selected by means of the control element 6 or via a linguistic input.
Der Nutzer kann nun entweder über eine sprachliche Eingabe oder über eine Eingabe mittels des Bedienelements 6 eine bestimmte Kontaktperson für z. B. einen Anruf auswählen.The user can now either a linguistic input or an input by means of the control element 6 a specific contact for z. For example, select a call.
Damit die Spracherkennungseinheit 5 die sprachliche Eingabe schnell und sicher erfas- sen kann, wird der Wortschatz, welcher für die Spracherkennung zur Verfügung steht, auf die Namen begrenzt, die in der Liste mit privaten Kontakten vorkommen. An Hand der Figuren 2 und 3 wurde ein Bedienschritt und eine dem Bedienschritt folgende Eingabe erläutert, welche haptisch oder sprachlich erfolgen kann. Allgemein kann jedoch auf die vorstehend erläuterte Weise ein Bedienablauf durchgeführt werden, der mehrere Bedienschritte umfasst. In diesem Fall kann ein Bedienschritt durch eine sprachliche Eingabe oder eine haptische Eingabe erfolgen, unabhängig davon, ob der vorhergehende Bedienschritt durch eine sprachliche Eingabe oder haptische Eingabe erfolgt ist. Es ist jedoch möglich, dass für bestimmte Bedienschritte keine sprachliche Eingabemöglichkeit zur Verfügung steht. In diesem Fall kann die Eingabe nur auf hapti- schem Weg erfolgen. Ein darauf folgender Bedienschritt kann dann jedoch, falls grund- sätzlich möglich, auch über eine sprachliche Eingabe erfolgen.In order for the speech recognition unit 5 to be able to detect the speech input quickly and reliably, the vocabulary available for the speech recognition is limited to the names which occur in the list of private contacts. With reference to FIGS. 2 and 3, an operating step and an input following the operating step have been explained, which can be haptic or linguistic. In general, however, an operating sequence comprising a plurality of operating steps can be carried out in the manner explained above. In this case, an operating step can be carried out by a linguistic input or a haptic input, regardless of whether the previous operating step was carried out by a linguistic input or haptic input. However, it is possible that for certain operating steps no linguistic input option is available. In this case, the input can only be made by haptic means. A subsequent operating step can, however, then, if fundamentally possible, also take place via a linguistic input.
Bei dem erfindungsgemäßen Verfahren und der erfindungsgemäßen Vorrichtung wird somit die Push-to-Talk-Funktion, welche üblicherweise in einem separaten Bedienelement verwirklicht wird, in die Auswahl eines Bedienschritts, welcher der sprachlichen Eingabe vorhergeht, integriert. Hierdurch wird die Bedienung erleichtert, da keine separate Push-to-Talk-Taste betätigt werden muss.In the method according to the invention and the device according to the invention, the push-to-talk function, which is usually implemented in a separate operating element, is thus integrated into the selection of an operating step preceding the linguistic input. This makes operation easier, since no separate push-to-talk button must be pressed.
Außerdem wird der zu erkennende Wortschatz bei der Spracherkennung durch Koppelung an den aktuellen Bedienkontext eingegrenzt, wodurch die Spracherkennung be- schleunigt und verbessert werden kann. In addition, the vocabulary to be recognized in the speech recognition is limited by coupling to the current operating context, whereby the speech recognition can be accelerated and improved.
BEZUGSZEICHENLISTELIST OF REFERENCE NUMBERS
Steuereinheitcontrol unit
Anzeigevorrichtungdisplay device
Displaydisplay
Mikrofonmicrophone
SpracherkennungseinheitVoice recognition unit
Bedienelementoperating element
Fahrzeugbusvehicle bus
Fahrzeugvehicle
Fahrerdriver
Speicher Storage

Claims

PAT E N TA N S P R Ü C H E PAT EN TA NSPR O CHE
1. Verfahren zum Bedienen einer Einrichtung eines Fahrzeugs (8), bei welchem ein Bedienschritt ausgewählt wird und eine dem Bedienschritt zugeordnete Funktion ausgeführt wird, dadurch gekennzeichnet, dass durch die Auswahl des Bedienschritts automatisch eine Sprachsteuerung für eine dem Bedienschritt folgende Eingabe aktiviert wird.Method for operating a device of a vehicle (8), in which an operating step is selected and a function assigned to the operating step is carried out, characterized in that the selection of the operating step automatically activates a voice control for an input following the operating step.
2. Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass die dem Bedienschritt folgende Eingabe sowohl mittels einer sprachlichen Eingabe als auch mittels einer haptischen Eingabe durchgeführt werden kann.2. The method according to claim 1, characterized in that the subsequent operation of the operating step can be carried out both by means of a linguistic input and by means of a haptic input.
3. Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass mittels einer Eingabe festgelegt wird, ob durch die Auswahl des nächsten Bedienschritts oder der folgenden Bedienschritte automatisch die Sprachsteuerung für eine dem jeweiligen Bedienschritt folgende Eingabe aktiviert wird.3. The method according to claim 1 or 2, characterized in that it is determined by means of an input, whether automatically selected by the selection of the next operating step or the following operating steps, the voice control for the respective operating step input.
4. Verfahren nach einem der vorstehenden Ansprüche, dadurch gekennzeichnet, dass dem Nutzer die zur Auswahl stehenden Bedienschritte mittels Schaltflächen auf einer Anzeigevorrichtung (2) dargestellt werden, und dass ein den Schaltflächen zugeordnetes Sprachsteuerungssymbol angezeigt wird, wenn durch die Auswahl des Bedienschritts ferner automatisch die Sprachsteuerung für eine dem Bedienschritt folgende Eingabe aktiviert werden wird.4. The method according to any one of the preceding claims, characterized in that the user to the selection of operating steps by means of buttons on a display device (2) are shown, and that a buttons associated with the speech control icon is displayed, if automatically selected by the selection of the operating step Voice control is activated for an input following the operating step.
5. Verfahren nach einem der vorstehenden Ansprüche, dadurch gekennzeichnet, dass ein Bedienablauf durchgeführt wird, der mehrere Bedienschritte umfasst, die durch eine sprachliche Eingabe und/oder eine haptische Eingabe durchgeführt werden, und unabhängig davon, ob ein vorhergehender Bedienschritt durch eine sprachliche Eingabe oder eine haptische Eingabe erfolgt ist, der folgende Bedienschritt durch eine sprachliche Eingabe oder eine haptische Eingabe erfolgen kann. 5. The method according to any one of the preceding claims, characterized in that an operating sequence is carried out, which comprises a plurality of operating steps, which are performed by a linguistic input and / or a haptic input, and regardless of whether a previous operating step by a linguistic input or a haptic input is made, the following operating step can be done by a linguistic input or a haptic input.
6. Verfahren nach einem der vorstehenden Ansprüche, dadurch gekennzeichnet, dass es bei einem Bedienschritt eine begrenzte Anzahl von Auswahlmöglichkeiten gibt, dass den Auswahlmöglichkeiten jeweils Worte oder aus mehreren Worten zusammengesetzte Phrasen zugeordnet sind, und dass der Wortschatz von einer Spracherkennung der Sprachsteuerung auf die Worte begrenzt wird, die den Auswahlmöglichkeiten zugeordnet sind, oder die in den Phrasen der Auswahlmöglichkeiten für den aktuellen Bedienschritt vorkommen.6. The method according to any one of the preceding claims, characterized in that there are a limited number of choices in an operation that the choices each words or words composed of several words are assigned phrases, and that the vocabulary of a speech recognition of the speech control on the words is limited, which are assigned to the selections, or occur in the phrases of the choices for the current operating step.
7. Verfahren nach einem der vorstehenden Ansprüche, dadurch gekennzeichnet, dass die haptische Eingabe durch Berührung einer berührungsempfindlichen Oberfläche durch ein Objekt erfolgt.7. The method according to any one of the preceding claims, characterized in that the haptic input is effected by touching a touch-sensitive surface by an object.
8. Vorrichtung zum Bedienen einer Einrichtung eines Fahrzeugs (8) mit,8. Device for operating a device of a vehicle (8) with,
- einer Anzeigevorrichtung (2) zum Anzeigen von Bedienschritten, einer ersten Bedieneinheit (6) für eine haptische Eingabe zur Auswahl eines Bedienschritts, - einer Sprachsteuerungseinheit (4, 5) für eine sprachliche Eingabe zur Auswahl eines Bedienschritts und einer Steuereinheit (1 ), die mit der Anzeigevorrichtung (2), der ersten Bedieneinheit (6) und der Sprachsteuerungseinheit (4, 5) gekoppelt ist, und mit der Steuersignale zum Ausführen einer Funktion erzeugbar sind, die einem ausgewählten Bedienschritt zugeordnet ist, dadurch gekennzeichnet, dass- A display device (2) for displaying operations, a first operating unit (6) for a haptic input for selecting an operating step, - a voice control unit (4, 5) for a speech input for selecting an operating step and a control unit (1), the with the display device (2), the first operating unit (6) and the voice control unit (4, 5) is coupled, and are generated with the control signals for performing a function associated with a selected operating step, characterized in that
- die Steuereinheit (1 ) so ausgebildet ist, dass durch die Auswahl eines Bedienschritts automatisch die Sprachsteuerungseinheit (4, 5) für eine dem Bedienschritt folgende Eingabe aktiviert wird.- The control unit (1) is designed so that automatically the voice control unit (4, 5) is activated for an operation following the step by the selection of an operating step.
9. Vorrichtung nach Anspruch 8, dadurch gekennzeichnet, dass die Sprachsteuerungseinheit ein Mikrofon (4) zum Erfassen von innerhalb des Fahrzeugs (8) gesprochener Sprache und eine Spracherkennungseinheit (5) um- fasst, welche vom Mikrofon (4) erfasste Sprache in Eingabesignale umsetzt, die von der Steuereinheit (1 ) verarbeitbar sind. 9. The device according to claim 8, characterized in that the voice control unit comprises a microphone (4) for detecting voice spoken within the vehicle (8) and a voice recognition unit (5), which converts speech detected by the microphone (4) into input signals which are processable by the control unit (1).
10. Vorrichtung nach Ansprüche 8 oder 9, dadurch gekennzeichnet, dass die Spracherkennungseinheit (4, 5) mit einem Speicher gekoppelt ist, in dem der Wortschatz gespeichert ist, dessen Worte oder aus mehreren Worten zusam- mengesetzte Phrasen von der Spracherkennungseinheit (5) in Eingabesignale umsetzbar sind, und dass bei einem Bedienschritt der Wortschatz in Abhängigkeit von den Worten oder den in den Phrasen vorkommenden Worten, die einer begrenzten Anzahl von Auswahlmöglichkeiten des Bedienschritts zugeordnet sind, begrenzbar ist.10. The device according to claims 8 or 9, characterized in that the speech recognition unit (4, 5) is coupled to a memory in which the vocabulary is stored, whose words or phrases composed of several words from the speech recognition unit (5) in Input signals are implemented, and that in one operating step, the vocabulary in response to the words or occurring in the phrases words that are associated with a limited number of choices of the operating step, can be limited.
1 1. Vorrichtung nach einem der Ansprüche 8 bis 10, dadurch gekennzeichnet, dass die erste Bedieneinheit eine berührungsempfindliche Oberfläche umfasst.1 1. Device according to one of claims 8 to 10, characterized in that the first operating unit comprises a touch-sensitive surface.
12. Vorrichtung nach Anspruch 11 , dadurch gekennzeichnet, dass die erste Bedieneinheit (6) und ein Display (3) der Anzeigevorrichtung (2) von einem Touchscreen bereitgestellt werden.12. The device according to claim 11, characterized in that the first operating unit (6) and a display (3) of the display device (2) are provided by a touch screen.
13. Vorrichtung nach einem der Ansprüche 8 bis 10, dadurch gekennzeichnet, dass die erste Bedieneinheit (6) im Fahrzeug (8) abgesetzt von der Anzeigevorrichtung (2) angeordnet ist. 13. Device according to one of claims 8 to 10, characterized in that the first operating unit (6) in the vehicle (8) offset from the display device (2) is arranged.
EP08844381A 2007-11-02 2008-10-31 Method and apparatus for operating a device in a vehicle with a voice controller Ceased EP2217992A2 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102007052345A DE102007052345A1 (en) 2007-11-02 2007-11-02 Method and device for operating a device of a vehicle with a voice control
PCT/EP2008/064830 WO2009056637A2 (en) 2007-11-02 2008-10-31 Method and apparatus for operating a device in a vehicle with a voice controller

Publications (1)

Publication Number Publication Date
EP2217992A2 true EP2217992A2 (en) 2010-08-18

Family

ID=40401064

Family Applications (1)

Application Number Title Priority Date Filing Date
EP08844381A Ceased EP2217992A2 (en) 2007-11-02 2008-10-31 Method and apparatus for operating a device in a vehicle with a voice controller

Country Status (4)

Country Link
US (1) US9193315B2 (en)
EP (1) EP2217992A2 (en)
DE (1) DE102007052345A1 (en)
WO (1) WO2009056637A2 (en)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102011013755B4 (en) 2010-12-31 2021-07-08 Volkswagen Aktiengesellschaft Method and device for alphanumeric voice input in motor vehicles
US20130030811A1 (en) * 2011-07-29 2013-01-31 Panasonic Corporation Natural query interface for connected car
CN105966334A (en) * 2015-10-12 2016-09-28 乐卡汽车智能科技（北京）有限公司 Method and device for controller running of vehicle-mounted information entertainment system
CN106383644A (en) * 2016-09-19 2017-02-08 广东小天才科技有限公司 Voice recognition enabling method and apparatus for electronic device
JP7243567B2 (en) * 2019-10-18 2023-03-22 トヨタ自動車株式会社 Change operation support device
DE102022105688A1 (en) 2022-03-10 2023-09-14 Audi Aktiengesellschaft Operating device with a rotary-push control element, method for operating a motor vehicle, control device, and motor vehicle
CN114811353B (en) * 2022-04-28 2023-11-28 青岛海尔科技有限公司 Control method of intelligent support based on voice, intelligent support and storage medium

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5450525A (en) * 1992-11-12 1995-09-12 Russell; Donald P. Vehicle accessory control with manual and voice response
DE59504191D1 (en) 1994-06-06 1998-12-17 Volkswagen Ag Multifunction device for actuating different actuators in a motor vehicle and motor vehicle with such a multifunction device
DE19715325A1 (en) 1997-04-12 1998-10-15 Bayerische Motoren Werke Ag Display and menu selection of road vehicle functions
DE19914631A1 (en) 1999-03-31 2000-10-12 Bosch Gmbh Robert Input procedure in a driver information system
DE10028869A1 (en) 1999-07-06 2001-01-11 Volkswagen Ag Supporting command/data entry in motor vehicles involves input menu giving principal possible command/data entries via menu fields emphasizing available speech command/data entries
DE10012572C2 (en) 2000-03-15 2003-03-27 Bayerische Motoren Werke Ag Device and method for voice input of a destination using a defined input dialog in a route guidance system
US20020077830A1 (en) * 2000-12-19 2002-06-20 Nokia Corporation Method for activating context sensitive speech recognition in a terminal
US20040215464A1 (en) * 2002-01-09 2004-10-28 Nelson Warren Fred Voice activated-automotive window display unit
US7221358B2 (en) * 2002-09-24 2007-05-22 Fujitsu Ten Limited In-vehicle digital broadcast reception apparatus
DE10360655A1 (en) * 2003-12-23 2005-07-21 Daimlerchrysler Ag Operating system for a vehicle
EP1555652B1 (en) 2004-01-19 2007-11-14 Harman Becker Automotive Systems GmbH Activation of a speech dialogue system
DE102005007317A1 (en) 2005-02-17 2006-08-24 Robert Bosch Gmbh Method and device for voice control of a device or a system in a motor vehicle
FI20065040L (en) * 2006-01-20 2007-11-12 Head Inhimillinen Tekijae Oy User interface and computer program product and method for implementing it

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See references of WO2009056637A2 *

Also Published As

Publication number Publication date
WO2009056637A2 (en) 2009-05-07
US9193315B2 (en) 2015-11-24
WO2009056637A3 (en) 2009-07-02
US20110007006A1 (en) 2011-01-13
DE102007052345A1 (en) 2009-05-07

Similar Documents

Publication Publication Date Title
EP2200858B9 (en) Vehicle system comprising an assistance functionality
EP1853465B1 (en) Method and device for voice controlling a device or system in a motor vehicle
EP2217992A2 (en) Method and apparatus for operating a device in a vehicle with a voice controller
EP0057892A2 (en) Multi-function control part
DE102009036371A1 (en) Method for providing user interface in vehicle i.e. motor vehicle, involves displaying anchor object for graphical object in display region, where anchor object permits operation of graphical object by operating device
DE602004010054T2 (en) Actuation of a speech dialogue system
WO2013023751A1 (en) Method for operating an electronic device or an application, and corresponding apparatus
EP3526790B1 (en) Multimodal dialog in a motor vehicle
EP2941685B1 (en) Operating method and operating system in a vehicle
EP2125422B1 (en) Information device and method for providing items of information in a motor vehicle with improved operability
EP2951663B1 (en) System-initiated help function for operating an apparatus associated with a vehicle - input of spaces
DE102014222195A1 (en) Vehicle operation depending on the driving mode
DE102010055132A1 (en) Method for providing user interface in vehicle, involves assigning subset of information to operating section and another subset of information to another operating section
DE102007052343B4 (en) Method and device for displaying data in a vehicle
EP2924551A1 (en) Method and device for providing a graphical user interface in a vehicle
DE102013014887A1 (en) Motor vehicle operating device with deflection-poor input mode
EP2925552B1 (en) Operating method and operating system in a road vehicle
DE10147738A1 (en) Voice guidance switching device
EP2137022B1 (en) Information system and method for furnishing information in a motor vehicle with improved operability
WO2014117932A1 (en) System-initiated help function for each journey and/or for each user for operating an apparatus associated with a vehicle
DE102007052342B4 (en) Method for operating devices of a vehicle
DE102014005596B4 (en) Method and assistance system for assisting a passenger and / or driver of a public transport
DE10126673B4 (en) Motor vehicle with information system
DE102010008355A1 (en) Method for supporting user of motor car when operating car functions, involves detecting state of car devices during control step, and performing acoustic illustration of control step depending on detected state of car devices
EP3336663B1 (en) Operating system, method for operating an operating system and a motor vehicle provided with operating system

Legal Events

Date Code Title Description
PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

17P Request for examination filed

Effective date: 20100602

AK Designated contracting states

Kind code of ref document: A2

Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MT NL NO PL PT RO SE SI SK TR

AX Request for extension of the european patent

Extension state: AL BA MK RS

RIN1 Information on inventor provided before grant (corrected)

Inventor name: BOBZIN, CHRISTOF

Inventor name: BOHRER, LORENZ

17Q First examination report despatched

Effective date: 20101213

APBK Appeal reference recorded

Free format text: ORIGINAL CODE: EPIDOSNREFNE

APBN Date of receipt of notice of appeal recorded

Free format text: ORIGINAL CODE: EPIDOSNNOA2E

APBR Date of receipt of statement of grounds of appeal recorded

Free format text: ORIGINAL CODE: EPIDOSNNOA3E

APAF Appeal reference modified

Free format text: ORIGINAL CODE: EPIDOSCREFNE

RAP1 Party data changed (applicant data changed or rights of an application transferred)

Owner name: VOLKSWAGEN AKTIENGESELLSCHAFT

DAX Request for extension of the european patent (deleted)
REG Reference to a national code

Ref country code: DE

Ref legal event code: R003

APBT Appeal procedure closed

Free format text: ORIGINAL CODE: EPIDOSNNOA9E

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION HAS BEEN REFUSED

18R Application refused

Effective date: 20150507