DE102017206876B4 - Method of operating a voice control system in a motor vehicle and voice control system - Google Patents
Method of operating a voice control system in a motor vehicle and voice control system Download PDFInfo
- Publication number
- DE102017206876B4 DE102017206876B4 DE102017206876.0A DE102017206876A DE102017206876B4 DE 102017206876 B4 DE102017206876 B4 DE 102017206876B4 DE 102017206876 A DE102017206876 A DE 102017206876A DE 102017206876 B4 DE102017206876 B4 DE 102017206876B4
- Authority
- DE
- Germany
- Prior art keywords
- control system
- voice
- voice control
- speech
- area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/037—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for occupant comfort, e.g. for automatic adjustment of appliances according to personal settings, e.g. seats, mirrors, steering wheel
- B60R16/0373—Voice control
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
Abstract
Verfahren zum Betreiben eines Sprachsteuerungssystem im Innenraum eines Kraftfahrzeuges (1), wobei der Innenraum in mindestens zwei Bereiche unterteilt ist und jeder Bereich mit mindestens einem Sensor zur Spracherfassung (3) und mindestens einer Lichtsignalvorrichtung (4) in Form einer Lichtleiste ausgestattet ist, bei dema. das Sprachsteuerungssystem bereichsspezifisch aktiviert wird,b. Sprache über die Sensoren (3) als Sprachsignale erfasst wird,c. anhand der Sprachsignale der örtliche Bereich, aus dem die Sprache stammt, ermittelt wird,d. eine Interpretation der Sprachinhalte erfolgt,e. bereichsspezifisch unter Verwendung der Lichtsignalvorrichtung (4) eine Statusmeldung ausgegeben wird,i. wobei die Statusmeldung einen Zustand des Sprachsteuerungssystems sowie eine Charakterisierung der Sprachinhalte beschreibt,ii. wobei die Zustände Bereitschaft, Erfassung, Auswertung, Ausführung und Abschluss darstellbar sind, undiii. wobei als Lichtsignale Licht veränderlicher Helligkeit, Farbe und/oder Leuchtfrequenz genutzt wird.A method for operating a voice control system in the interior of a motor vehicle (1), the interior being divided into at least two areas and each area being equipped with at least one sensor for voice detection (3) and at least one light signal device (4) in the form of a light strip, in which a . the voice control system is activated area-specifically, b. Speech is detected as speech signals via the sensors (3), c. the local area from which the speech originates is determined on the basis of the speech signals, d. the language content is interpreted, e. A status message is output in an area-specific manner using the light signal device (4), i. wherein the status message describes a state of the voice control system and a characterization of the voice content, ii. wherein the states readiness, detection, evaluation, execution and completion can be represented, andiii. whereby light of variable brightness, color and / or luminous frequency is used as light signals.
Description
Die vorliegende Erfindung betrifft ein Verfahren zum Betreiben eines Sprachsteuerungssystems in einem Kraftfahrzeug, wobei der Innenraum des Fahrzeuges in mindestens eine erste und eine zweite Zone unterteilt ist und in jeder Zone Sprachinformationen erfasst und anschließend bereichsbezogen oder bereichsübergreifend ausgeführt werden, wobei der jeweilige Status dieses Vorgangs dem Bediener und/oder den Fahrzeuginsassen durch Lichtsignale visualisiert wird. Ferner betrifft die Erfindung eine Vorrichtung für ein Kraftfahrzeug, mit deren Hilfe ein solches Verfahren ausgeführt werden kann.The present invention relates to a method for operating a voice control system in a motor vehicle, wherein the interior of the vehicle is divided into at least a first and a second zone and voice information is recorded in each zone and then carried out area-related or cross-area, the respective status of this process being the Operator and / or the vehicle occupant is visualized by light signals. The invention also relates to a device for a motor vehicle, with the aid of which such a method can be carried out.
In modernen Fahrzeugen ist eine Vielzahl von Einrichtungen vorhanden, die über entsprechende Mensch-Maschine-Schnittstellen gesteuert werden. In der Vergangenheit erfolgte diese Steuerung vielfach über mechanische Vorrichtungen (Schalter, Drehknöpfe etc.). Aufgrund der steigenden Anzahl notwendiger Funktionen zur Steuerung aller Einrichtungen stoßen die heutigen Bedienkonzepte in Kraftfahrzeugen an ihre Grenzen. Dabei ist nicht nur die zunehmende Unübersichtlichkeit nachteilig, auch steigende Kosten für solche Bedienvorrichtungen haben zu einem Bedarf an neuen technischen Lösungen geführt.In modern vehicles there is a large number of devices that are controlled via appropriate human-machine interfaces. In the past, this control was often carried out using mechanical devices (switches, rotary knobs, etc.). Due to the increasing number of functions required to control all devices, today's operating concepts in motor vehicles are reaching their limits. Not only is the increasing lack of clarity a disadvantage, the rising costs for such operating devices have also led to a need for new technical solutions.
Um die vorhandenen Mensch-Maschine-Schnittstellen in einem Kraftfahrzeug zu optimieren, wurden Sprachsteuerungssysteme zur Sprachbedienung entwickelt. Waren derartige Systeme ursprünglich vielfach auf eine Person, zumeist den Fahrer, ausgerichtet, sind zwischenzeitlich Systeme bekannt geworden, bei denen die Sprachinformationen mehrerer Fahrzeuginsassen erfasst und ausgeführt werden können. Hierzu ist es notwendig, die Herkunft des Sprachbefehls zu lokalisieren, um anschließend den Sprachbefehl, gegebenenfalls auch auf den Bereich der Sprachherkunft beschränkt, auszuführen.In order to optimize the existing human-machine interfaces in a motor vehicle, voice control systems for voice control were developed. Such systems were originally geared towards one person, mostly the driver, but systems have now become known in which the voice information of several vehicle occupants can be recorded and executed. For this it is necessary to localize the origin of the voice command in order to then execute the voice command, possibly also limited to the area of the voice origin.
Hinsichtlich der auszuführenden Funktionen standen solche zur Fahrzeugbedienung im Vordergrund. Zunehmend werden jedoch Mensch-Maschine-Schnittstellen nachgefragt, die weitergehende Anforderungen der Fahrzeuginsassen erfassen und ausführen können.With regard to the functions to be carried out, those for operating the vehicle were in the foreground. However, there is increasing demand for human-machine interfaces that can record and carry out further requirements of vehicle occupants.
Beispielhaft für eine sprachbasierte Mensch-Maschine-Schnittstelle sei hier die Schrift
Ein ähnliches Verfahren wird in der
Da die Sprache unterschiedlicher Bediener sehr individuell ist, werden an die Erkennung von Sprachinformationen hohe Anforderungen gestellt. Vielfach ist es daher notwendig, einen Sprachdialog zwischen dem System und dem Bediener aufzubauen. Sollte die Spracherkennungsvorrichtung nicht nur für den Fahrer, sondern auch für die Fahrzeuginsassen auf den übrigen Sitzplätzen vorgesehen sein, können die notwendigen Rückmeldungen bzw. die sich ergebenden Nachfragen ein Ausmaß erreichen, welches als störend empfunden wird und die eigentliche Sprachbedienung behindert.Since the language of different operators is very individual, high demands are placed on the recognition of language information. In many cases it is therefore necessary to set up a voice dialog between the system and the operator. If the speech recognition device is intended not only for the driver but also for the vehicle occupants in the other seats, the necessary feedback or the resulting inquiries can reach an extent that is perceived as annoying and hinders the actual voice control.
Als Alternative zu einem sprachbasierten Dialog bietet sich eine textliche Darstellung der erfassten Sprache an. Hierbei kommen üblicherweise Ausgabevorrichtungen in Form von Bildschirmen zum Einsatz. Um jedoch Inhalte auf einem Bildschirm erfassen zu können, ist es notwendig, dass der Bediener den Blick auf ihn richtet. Insbesondere für den Fahrer resultiert hieraus eine Ablenkung.As an alternative to a language-based dialog, a textual representation of the recorded language is available. Output devices in the form of screens are usually used here. However, in order to be able to capture content on a screen, it is necessary for the operator to direct his gaze towards him. This results in a distraction for the driver in particular.
US 2015 / 0 040 012 A1 offenbart eine Spracherkennungssoftware, bei welcher Kommandos in transkribierten Anwendereingaben identifiziert und farblich hervorgehoben werden.US 2015/0 040 012 A1 discloses speech recognition software in which commands in transcribed user inputs are identified and highlighted in color.
Trotz der beschriebenen bekannten Ansätze besteht weiterhin die Forderung, eine Sprachsteuerung zu realisieren, die einerseits für mehrere Fahrzeuginsassen ausgelegt ist und sitzplatzbezogene Aktivitäten auslösen kann, die aber andererseits eine möglichst geringe Störung der jeweils anderen Fahrzeuginsassen zur Folge hat.Despite the known approaches described, there is still the requirement to implement voice control that is designed for several vehicle occupants and can trigger seat-related activities, but which also results in the least possible disruption to the other vehicle occupants.
Der vorliegenden Erfindung liegt daher die Aufgabe zugrunde, ein Verfahren zum Betreiben eines Mehr-Zonen-Sprachsteuerungssystems bereitzustellen, welches die Interaktion des Nutzers mit dem technischen System maßgeblich verbessert. Erfindungsgemäß wird diese Aufgabe durch ein Verfahren mit den Merkmalen des Anspruchs 1 sowie einer Vorrichtung mit den Merkmalen des Anspruchs 5 gelöst. Vorteilhafte Aus- und Weiterbildungen ergeben sich aus den abhängigen Ansprüchen.The present invention is therefore based on the object of providing a method for operating a multi-zone voice control system which significantly improves the interaction of the user with the technical system. According to the invention, this object is achieved by a method having the features of
Erfindungsgemäß wird dabei ein Verfahren zum Betreiben eines Sprachsteuerungssystems im Innenraum eines Kraftfahrzeuges vorgeschlagen, wobei der Innenraum in mindestens zwei Bereiche unterteilt ist und jeder Bereich mit mindestens einem Sensor zur Spracherfassung und mindestens einer Lichtsignalvorrichtung ausgestattet ist. Das erfindungsgemäße Verfahren sieht vor,
- - das Sprachsteuerungssystem bereichsspezifisch zu aktivieren,
- - Sprache über die Sensoren zu erfassen,
- - anhand der Sprachsignale den örtlichen Bereich, aus dem die Sprache stammt, zu ermitteln und
- - bereichsspezifisch eine Statusmeldung auszugeben, wobei die Statusmeldung einen definierten Zustand des Sprachsteuerungssystems darstellt.
- - activate the voice control system for specific areas,
- - to capture speech via the sensors,
- - Using the speech signals to determine the local area from which the speech originates and
- - to output a status message specific to the area, the status message representing a defined state of the voice control system.
Mit dem beschriebenen Verfahren erhält der Nutzer in einer Fahrzeugumgebung vorteilhafterweise eine direkt erfassbare und unmittelbare Rückkopplung über den Zustand des Spracherkennungssystems in seinem Bereich. Dieses ist insbesondere deshalb von Vorteil, da in einer Fahrsituation mit fahrzeugbedingten Außen- und Innengeräuschen sowie Geräuschen, die beispielsweise aus Gesprächen der Fahrzeuginsassen, vorhandenen Musikwiedergabeeinrichtungen oder auch Infotainmenteinrichtungen stammen, eine komplexe Geräuschkulisse resultiert, die es einem Nutzer ohne die erfindungsgemäße Lösung nicht erlaubt, den Zustand des Sprachsteuerungssystems in seinem Bereich zweifelsfrei zu erkennen und darauf aufbauend eine Spracheingabe zu tätigen. So wäre er beispielsweise im Unklaren, ob er eine Spracheingabe absetzen kann, ob eine getätigte Spracheingabe eindeutig erkannt wurde oder ob die Ausführung eines Sprachbefehls erfolgreich abgeschlossen ist.With the method described, the user in a vehicle environment advantageously receives directly detectable and immediate feedback about the state of the speech recognition system in his area. This is particularly advantageous because in a driving situation with vehicle-related exterior and interior noises as well as noises that originate, for example, from conversations between the vehicle occupants, existing music playback devices or infotainment devices, a complex background noise results that a user without the solution according to the invention does not allow a user to to recognize without a doubt the state of the voice control system in its area and to make a voice input based on this. For example, he would be unclear whether he can issue a voice input, whether a voice input that has been made has been clearly recognized or whether the execution of a voice command has been successfully completed.
Das erfindungsgemäße Verfahren sieht vor, den Innenraum eines Kraftfahrzeuges in mindestens zwei Bereiche zu unterteilen. Bei den Bereichen handelt es sich beispielsweise jeweils um den Fahrersitzplatz, den Beifahrersitzplatz und/oder die Sitzplätze der Rücksitzbank. Auch beliebige Kombinationen (Vordersitze zusammen und Rücksitze zusammen) sind denkbare Konfigurationen im Sinne der Erfindung.The method according to the invention provides for the interior of a motor vehicle to be divided into at least two areas. The areas are, for example, the driver's seat, the front passenger seat and / or the seats on the rear bench. Any combinations (front seats together and rear seats together) are also conceivable configurations within the meaning of the invention.
In jedem Bereich ist mindestens eine Sensorvorrichtung zur Spracherfassung (z.B. ein Mikrofon) vorhanden. Die Anzahl der Sensoren beeinflusst dabei nicht nur die mögliche Anzahl getrennter Bereiche. Sie richtet sich ebenfalls nach den akustischen Gegebenheiten in dem Fahrzeug sowie der notwendigen Abgrenzung der Sprache zwischen den einzelnen Fahrzeuginsassen. Mit der richtigen Anzahl und der richtigen Positionierung der Mikrofone lässt sich die Erfassungsqualität einerseits sowie die Zuordnung zu den Sprachquellen andererseits optimieren. Gleichzeitig ist sie so festzulegen, dass im Zuge der Spracherfassung eine Zuordnung der Sprache zu dem jeweiligen Bereich fehlerfrei möglich wird.In each area there is at least one sensor device for speech detection (e.g. a microphone). The number of sensors not only influences the possible number of separate areas. It is also based on the acoustic conditions in the vehicle and the necessary delimitation of language between the individual vehicle occupants. With the correct number and correct positioning of the microphones, the detection quality on the one hand and the assignment to the speech sources on the other hand can be optimized. At the same time, it is to be determined in such a way that an assignment of the language to the respective area is possible without errors in the course of the language acquisition.
Neben den Sensoren zur Spracherfassung befindet sich in jedem Bereich mindestens eine Lichtsignalvorrichtung. Die mindestens eine Lichtsignalvorrichtung dient dazu, die Status des Sprachsteuerungssystems bereichsbezogen zu visualisieren und den/die Fahrzeuginsassen bei der Nutzung des Sprachsteuerungssystems zu unterstützen.In addition to the sensors for voice detection, there is at least one light signal device in each area. The at least one light signal device is used to visualize the status of the voice control system in an area-related manner and to support the vehicle occupant (s) in using the voice control system.
Bei dem erfindungsgemäßen Verfahren wird das Sprachsteuerungssystem nach dem Fahrzeugstart zunächst in einen Ruhezustand versetzt. Dieser Zustand wird dem Nutzer durch ein entsprechendes Signal der Lichtsignalvorrichtung angezeigt. Auch eine Lösung, bei der das Sprachsteuerungssystem im Ruhezustand kein optisches Signal mittels der Lichtsignalvorrichtung ausgibt, stellt eine Lösung im Sinne der Erfindung dar.In the method according to the invention, the voice control system is first put into a state of rest after the vehicle has started. This state is indicated to the user by a corresponding signal from the light signal device. A solution in which the voice control system does not output an optical signal by means of the light signal device in the idle state represents a solution within the meaning of the invention.
Der Einsatz des Sprachsteuerungssystems beginnt mit einem Aktivierungsschritt. Für diese Aktivierung kommt als Aktivierungssignal eine Sprachäusserung oder aber eine Betätigung eines Bedienelementes in Betracht.The use of the voice control system begins with an activation step. A speech utterance or an actuation of an operating element can be considered as the activation signal for this activation.
Mit der Aktivierung wechselt das Sprachsteuerungssystem aus dem Ruhezustand in einen Zustand der Betriebsbereitschaft. In diesem Zustand ist das Sprachsteuerungssystem in der Lage, die Sprache der Fahrzeuginsassen zu erfassen, auszuwerten und auszuführen. Der Zustand der Betriebsbereitschaft wird dem Nutzer des Systems über ein entsprechendes Lichtsignal angezeigt.When activated, the voice control system changes from the idle state to a state of operational readiness. In this state, the voice control system is able to record, evaluate and execute the voice of the vehicle occupants. The status of the operational readiness is indicated to the user of the system via a corresponding light signal.
Anschließend beginnt die Spracherfassung. Hierzu wird auf die entsprechenden Sensoren in den einzelnen Bereichen zurückgegriffen, die z.B. als Mikrofone ausgeführt sein können. Speech capture then begins. For this purpose, the corresponding sensors in the individual areas are used, which can be implemented as microphones, for example.
Aus der erfassten Sprache lässt sich unter Einsatz eines Steuergerätes mit einem entsprechenden Ortungsalgorithmus der Ort der Sprache ableiten. Als geeignetes Verfahren kann hier insbesondere auf die Auswertung einer Laufzeitdifferenz oder einer Pegeldifferenz zurückgegriffen werden. Solche Verfahren sind beispielsweise aus der
Sowohl im Zustand der Betriebsbereitschaft als auch während der Spracherfassung, der Sprachauswertung und der Ausführung der erkannten Sprachinhalte werden mit Hilfe der Signalvorrichtungen bereichsspezifisch Statusmeldungen ausgegeben. Diese Statusmeldungen beschreiben den Zustand des Sprachsteuerungssystems. Ebenso im Sinne des erfindungsgemäßen Verfahrens ist die Ausgabe einer Statusmeldung, mit der das Ergebnis der Sprachauswertung, z.B. „Sprachinhalt erkannt/nicht erkannt“ oder „Sprachinhalt beschreibt eine Bedienfunktion“ bzw. „Sprachinhalt beschreibt eine offene Frage“ dokumentiert wird.Area-specific status messages are output with the aid of the signaling devices both in the operational readiness state and during the voice acquisition, the voice evaluation and the execution of the recognized voice content. These status messages describe the State of the voice control system. Also within the meaning of the method according to the invention is the output of a status message with which the result of the voice evaluation, for example “voice content recognized / not recognized” or “voice content describes an operating function” or “voice content describes an open question”, is documented.
Als Signalvorrichtungen kommen insbesondere Lichtleisten in Betracht, die typischerweise als Ambientebeleuchtung im Innenraum von Kraftfahrzeugen installiert sind. Aber auch die Ausgabe unter Einsatz anderer Lichtleisten stellt eine Ausgestaltungsform des erfindungsgemäßen Verfahrens dar. Der Inhalt der jeweiligen Statusmeldungen wird dabei über die Art des Lichtsignals verschlüsselt.In particular, light strips, which are typically installed as ambient lighting in the interior of motor vehicles, come into consideration as signal devices. However, the output using other light strips also represents an embodiment of the method according to the invention. The content of the respective status messages is encrypted using the type of light signal.
Die Art des Lichtsignals sowie der dazugehörige Status des Sprachsteuerungssystems stellt eine zu konfigurierende Variante für die Ausführung des Sprachsteuerungssystems dar. Ein Ausführungsbeispiel für die Status des Sprachsteuerungssystems im Sinne der Erfindung stellt sich wie folgt dar:
- Status 1: Ruhezustand
- Status 2: Betriebsbereitschaft
- Status 3: Spracherfassung laufend
- Status 4: Sprachauswertung laufend
- Status 5: Sprachinhalt erkannt
- Status 6: Aktivität in Umsetzung
- Status 7: Umsetzung abgeschlossen
- State 1: idle state
- Status 2: operational readiness
- Status 3: Voice recording ongoing
- Status 4: Voice evaluation ongoing
- Status 5: Speech content recognized
- Status 6: Activity in implementation
- Status 7: Implementation completed
Nachdem eine Sprachinformation erkannt und ausgeführt worden ist, wird die Bedienvorrichtung wieder in den Bereitschaftszustand versetzt. Dieser Zustand wird beibehalten, bis ein erneuter Sprachbefehl erfolgt. Somit kann der Nutzer nach Abschluss eines Sprachsteuerungsvorganges davon ausgehen, dass das System wieder unmittelbar zur Spracheingabe zur Verfügung steht. Wird innerhalb einer zu definierenden Zeitspanne keine erneute Sprachinformation detektiert, wird das System in den Ruhezustand versetzt.After voice information has been recognized and executed, the operating device is put back into the standby state. This state is retained until a new voice command is issued. Thus, after completing a voice control process, the user can assume that the system is immediately available again for voice input. If no new voice information is detected within a defined period of time, the system is put into the idle state.
Eine Ausführung des erfindungsgemäßen Verfahrens sieht zur bereichsbezogenen Aktivierung des Sprachsteuerungssystems das Sprechen eines Schlüsselwortes oder einer Wortsequenz vor. Wird das Schlüsselwort erkannt oder enthält die Wortsequenz ebenfalls mindestens ein definiertes, zu erkennendes Schlüsselwort, so wird das Sprachsteuerungssystem aus dem Ruhezustand in den Zustand der Betriebsbereitschaft versetzt. Vorteil dieser sprachbasierten Aktivierung ist die Möglichkeit, ohne manuelles Betätigen eines Bedienelementes den Bereitschaftszustand des Sprachsteuerungssystems herzustellen.One embodiment of the method according to the invention provides for the area-related activation of the voice control system to speak a keyword or a word sequence. If the key word is recognized or the word sequence also contains at least one defined key word to be recognized, the voice control system is switched from the idle state to the operational readiness state. The advantage of this voice-based activation is the possibility of setting the voice control system to standby without manually operating an operating element.
In einer alternativen Ausführungsform des erfindungsgemäßen Verfahrens erfolgt die Aktivierung durch das Betätigen eines Bedienelementes. Hierzu sind optional entsprechende Elemente in den jeweiligen Bereichen des Innenraums anzuordnen. Diese Ausführungsform erfordert zwar einen manuellen Bedienvorgang, vorteilhafterweise ist jedoch ein NichtErkennen des Sprachbefehls ausgeschlossen.In an alternative embodiment of the method according to the invention, activation takes place by actuating an operating element. For this purpose, appropriate elements are optionally to be arranged in the respective areas of the interior. Although this embodiment requires a manual operating process, a non-recognition of the voice command is advantageously excluded.
Für die Ausgabe der Statusmeldung kommen im Sinne der Erfindung unterschiedliche Lichtsignale in Betracht. Insbesondere Varianten unterschiedlicher Helligkeit, Farbe oder Leuchtfrequenz stellen geeignete Statusmeldungen im Sinne der Erfindung dar. Vorteil der Statusmeldung auf Basis von Lichtsignalen ist die Vermeidung von Störungen der anderen Fahrzeuginsassen bei einem sprachbasierten Dialog.For the purposes of the invention, different light signals can be considered for the output of the status message. In particular, variants of different brightness, color or light frequency represent suitable status reports within the meaning of the invention. The advantage of the status report based on light signals is the avoidance of disturbances to the other vehicle occupants in a voice-based dialogue.
Bei einer Ausbildung des erfindungsgemäßen Verfahrens handelt es sich bei den Sprachinhalten um Bedienbefehle, mit deren Hilfe in den jeweiligen Bereichen die Sprachbefehle der Benutzer in entsprechende Bedienvorgänge umgesetzt werden. In einer weiteren Ausbildung können aber auch Fragen, z.B. „Wie wird das Wetter morgen?“ oder „Wo ist der nächste Bäcker?“, als Sprachinhalte verwendet werden. Die in diesem Fall notwendige Auswertung ist in entsprechenden Programmcodes im Steuergerät des Systems zu hinterlegen.In one embodiment of the method according to the invention, the voice content is operating commands, with the aid of which the voice commands of the users are converted into corresponding operating processes in the respective areas. In a further training course, questions such as "How will the weather be tomorrow?" Or "Where is the next baker?" Can also be used as language content. The evaluation required in this case must be stored in the corresponding program code in the system's control unit.
Weitere Ausbildungen des erfindungsgemäßen Verfahrens sehen vor, dass sowohl die Sensoren zur Spracherfassung als auch die Lichtsignalvorrichtungen zur Statusausgabe nicht fest im Fahrzeug verbaut sind. Stattdessen ist eine Lösung außerhalb des Schutzbereiches der Ansprüche darstellbar, bei der auf die entsprechenden Einrichtungen eines im Innenraum des Fahrzeuges sich befindenden Mobilgerätes zurückgegriffen wird. Derartige Geräte, z.B. Smartphones oder Tablet-PCs, sind über entsprechende Systemkopplungen (z.B. über eine sogenannte Bluetoothkopplung) in das Sprachsteuerungssystem zu integrieren und mittels geeigneter Softwarekomponenten an das Sprachsteuerungssystem anzubinden.Further developments of the method according to the invention provide that both the sensors for voice detection and the light signal devices for status output are not permanently installed in the vehicle. Instead, a solution outside the scope of protection of the claims can be presented, in which the corresponding devices of a mobile device located in the interior of the vehicle are used. Such devices, e.g. smartphones or tablet PCs, are to be integrated into the voice control system via appropriate system connections (e.g. via a so-called Bluetooth connection) and connected to the voice control system using suitable software components.
Die Erfindung betrifft weiterhin eine Vorrichtung, deren Aufbau nachfolgend anhand eines Ausführungsbeispiels mit Bezug zu den
In den
Im Bereich eines jeden Sitzplatzes ist zusätzlich mindestens eine Signalvorrichtung vorhanden. In der dargestellten Ausführungsform in
Ebenfalls Bestandteil der erfindungsgemäßen Vorrichtung ist eine optional vorzusehende zentrale Eingabevorrichtung
Vervollständigt wird die Vorrichtung durch ein zentrales Steuergerät
Bei einer weiteren Ausbildung der erfindungsgemäßen Vorrichtung sind zusätzlich Sitzbelegungssensoren
In
Um die Sprache eines Insassen erfassen zu können, wird das System zunächst aus dem Ruhezustand in den Bereitschaftszustand überführt 100. Dieses erfolgt bereichsbezogen durch einen der Fahrzeuginsassen, der sich auf einem Sitzplatz des betreffenden Bereiches aufhält. Dabei kann es sich um den Fahrer oder einen der Fahrgäste handeln. In der Erfindung wird zugrunde gelegt, dass mindestens zwei Bereiche existieren.In order to be able to capture the speech of an occupant, the system is first transferred 100 from the idle state to the standby state. This is done area-related by one of the vehicle occupants who is in a seat in the relevant area. This can be the driver or one of the passengers. The invention is based on the fact that at least two areas exist.
Im Erfassungszustand ist das System in der Lage, im Verlauf des Verfahrensschrittes
Nach dem Erfassen der Sprache in Schritt
In Schritt
In Schritt
Begleitet werden die Schritte
Nach Ausführung der Aktion stellt das Steuergerät
BezugszeichenlisteList of reference symbols
- 11
- Fahrzeugvehicle
- 22
- SitzSeat
- 33
- Sensorsensor
- 44th
- LichtsignalvorrichtungLight signal device
- 55
- SitzbelegungssensorSeat occupancy sensor
- 66th
- EingabevorrichtungInput device
- 77th
- SteuergerätControl unit
- 100100
- Überführung vom Ruhezustand in den BereitschaftszustandTransfer from the idle state to the standby state
- 200200
- Erfassung der SprachinhalteAcquisition of the language content
- 300300
- SprachortungVoice tracking
- 400400
- Semantische Auswertung der SprachinhalteSemantic evaluation of the language content
- 500500
- Ausführen der abgeleiteten AktionPerform the derived action
Claims (5)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102017206876.0A DE102017206876B4 (en) | 2017-04-24 | 2017-04-24 | Method of operating a voice control system in a motor vehicle and voice control system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102017206876.0A DE102017206876B4 (en) | 2017-04-24 | 2017-04-24 | Method of operating a voice control system in a motor vehicle and voice control system |
Publications (2)
Publication Number | Publication Date |
---|---|
DE102017206876A1 DE102017206876A1 (en) | 2018-10-25 |
DE102017206876B4 true DE102017206876B4 (en) | 2021-12-09 |
Family
ID=63714233
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102017206876.0A Active DE102017206876B4 (en) | 2017-04-24 | 2017-04-24 | Method of operating a voice control system in a motor vehicle and voice control system |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102017206876B4 (en) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102020003922A1 (en) | 2020-06-30 | 2021-12-30 | Daimler Ag | Voice control system and motor vehicle |
DE102021204944A1 (en) | 2021-05-17 | 2022-11-17 | Volkswagen Aktiengesellschaft | Method for displaying a state of a language assistance system, language assistance system and motor vehicle |
DE102021129692A1 (en) | 2021-11-15 | 2023-05-17 | Bayerische Motoren Werke Aktiengesellschaft | METHOD OF PRODUCING AN AUDIBLE ALERT IN OR ON A VEHICLE |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2028062A2 (en) | 2007-08-23 | 2009-02-25 | Delphi Technologies, Inc. | System and method for optimizing speech recognition in a vehicle |
US20090055178A1 (en) | 2007-08-23 | 2009-02-26 | Coon Bradley S | System and method of controlling personalized settings in a vehicle |
US20140207452A1 (en) | 2013-01-24 | 2014-07-24 | Microsoft Corporation | Visual feedback for speech recognition system |
US20150040012A1 (en) | 2013-07-31 | 2015-02-05 | Google Inc. | Visual confirmation for a recognized voice-initiated action |
DE102013016806A1 (en) | 2013-10-10 | 2015-04-16 | e.solutions GmbH | Seat-related voice control of a device function in a motor vehicle |
US20170025124A1 (en) | 2014-10-09 | 2017-01-26 | Google Inc. | Device Leadership Negotiation Among Voice Interface Devices |
DE102016212647A1 (en) | 2015-12-18 | 2017-06-22 | Volkswagen Aktiengesellschaft | A method of operating a voice control system in an interior and voice control system |
-
2017
- 2017-04-24 DE DE102017206876.0A patent/DE102017206876B4/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2028062A2 (en) | 2007-08-23 | 2009-02-25 | Delphi Technologies, Inc. | System and method for optimizing speech recognition in a vehicle |
US20090055178A1 (en) | 2007-08-23 | 2009-02-26 | Coon Bradley S | System and method of controlling personalized settings in a vehicle |
US20140207452A1 (en) | 2013-01-24 | 2014-07-24 | Microsoft Corporation | Visual feedback for speech recognition system |
US20150040012A1 (en) | 2013-07-31 | 2015-02-05 | Google Inc. | Visual confirmation for a recognized voice-initiated action |
DE102013016806A1 (en) | 2013-10-10 | 2015-04-16 | e.solutions GmbH | Seat-related voice control of a device function in a motor vehicle |
US20170025124A1 (en) | 2014-10-09 | 2017-01-26 | Google Inc. | Device Leadership Negotiation Among Voice Interface Devices |
DE102016212647A1 (en) | 2015-12-18 | 2017-06-22 | Volkswagen Aktiengesellschaft | A method of operating a voice control system in an interior and voice control system |
Also Published As
Publication number | Publication date |
---|---|
DE102017206876A1 (en) | 2018-10-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102016212647B4 (en) | Method for operating a voice control system in an indoor space and voice control system | |
DE3238855C2 (en) | Speech recognition device | |
EP1031456B1 (en) | Procedure and device to support a motor vehicle user when operating vehicle components | |
DE102017216837A1 (en) | Gesture and facial expression control for a vehicle | |
DE102006009291A1 (en) | Method and device for operating at least two functional components of a system, in particular of a vehicle | |
EP2983937B1 (en) | Method and device for proactive dialogue guidance | |
DE102015224555A1 (en) | Method for operating a vehicle | |
WO2005022511A1 (en) | Support method for speech dialogue used to operate vehicle functions | |
DE102017206876B4 (en) | Method of operating a voice control system in a motor vehicle and voice control system | |
WO2018069027A1 (en) | Multimodal dialog in a motor vehicle | |
EP3254172A1 (en) | Determination of a position of a non-vehicle object in a vehicle | |
DE102017103391A1 (en) | Method for improving the user-friendliness of a vehicle | |
EP1121684B1 (en) | Method and device for information and/or messages by means of speech | |
DE102016212681A1 (en) | Control device and method for voice-based operation of a motor vehicle | |
DE102018215293A1 (en) | Multimodal communication with a vehicle | |
EP3947011A1 (en) | Method for providing voice control in sign language in a voice control system for a vehicle | |
DE102013001885A1 (en) | System-initiated help function per trip and / or per user for the operation of a device associated with a vehicle | |
DE102007042583B4 (en) | Method for communication between a natural person and an artificial speech system and communication system | |
DE102018220693A1 (en) | Control system and method for controlling a function of a vehicle | |
EP3115886B1 (en) | Method for operating a voice controlled system and voice controlled system | |
EP2907048A1 (en) | Motor vehicle having a speech translation system | |
DE102013013695A1 (en) | Motor vehicle with voice recognition | |
DE102010056174A1 (en) | Method for assisting operating person during operating display device of motor car, involves processing speech signals by speech recognition device during existence of speech signals, and controlling functional unit of car based on signals | |
DE102008025532B4 (en) | A communication system and method for performing communication between a user and a communication device | |
DE102015007361B3 (en) | Method for operating at least one functional device of a motor vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R012 | Request for examination validly filed | ||
R016 | Response to examination communication | ||
R082 | Change of representative |
Representative=s name: HOEFER & PARTNER PATENTANWAELTE MBB, DE |
|
R018 | Grant decision by examination section/examining division | ||
R082 | Change of representative | ||
R020 | Patent grant now final |