DE102007042580A1 - Person i.e. passenger, and artificial language system communication enabling method for vehicle, involves recognizing acoustic and/or textual input of person by language system and different information as input by system - Google Patents
Person i.e. passenger, and artificial language system communication enabling method for vehicle, involves recognizing acoustic and/or textual input of person by language system and different information as input by system Download PDFInfo
- Publication number
- DE102007042580A1 DE102007042580A1 DE200710042580 DE102007042580A DE102007042580A1 DE 102007042580 A1 DE102007042580 A1 DE 102007042580A1 DE 200710042580 DE200710042580 DE 200710042580 DE 102007042580 A DE102007042580 A DE 102007042580A DE 102007042580 A1 DE102007042580 A1 DE 102007042580A1
- Authority
- DE
- Germany
- Prior art keywords
- person
- input
- information
- language system
- language
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/24—Speech recognition using non-acoustical features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/038—Indexing scheme relating to G06F3/038
- G06F2203/0381—Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer
Abstract
Description
Die Erfindung betrifft ein Verfahren zur Kommunikation zwischen einer natürlichen Person und einem künstlichen Sprachsystem, durch welches abhängig von einem Erkennen einer Eingabe der Person durch das künstliche Sprachsystem eine Antwort von dem künstlichen Sprachsystem ausgegeben wird. Des Weiteren betrifft die Erfindung ein Kommunikationssystem mit einem künstlichen Sprachsystem, welches zur Kommunikation mit einer natürlichen Person ausgebildet ist.The The invention relates to a method for communication between a natural Person and an artificial one Language system through which dependent from recognizing an input of the person by the artificial one Speech system, a response is output from the artificial language system. Furthermore, the invention relates to a communication system with an artificial one Speech system, which is used to communicate with a natural Person is trained.
Natürlichsprachliche bekannte Dialogsysteme sind nur für die Interpretation von sprachlichen, akustischen oder textuellen Eingaben ausgebildet. Dadurch ist die Kommunikation relativ eingeschränkt und auch die Informationserfassung und Darbietung durch ein künstliches Sprachsystem beschränkt.Natural language known dialogue systems are only for the interpretation of linguistic, acoustic or textual inputs. This is the communication relatively restricted and also the information gathering and presentation by an artificial one Language system limited.
Es ist Aufgabe der vorliegenden Erfindung, ein Verfahren und ein Kommunikationssystem zu schaffen, bei welchem die Kommunikation zwischen einer natürlichen Person und einem künstlichen Sprachsystem erweitert werden kann.It It is an object of the present invention to provide a method and a communication system in which the communication between a natural one Person and an artificial language system can be extended.
Diese Aufgabe wird durch ein Verfahren, welches die Merkmale nach Anspruch 1 aufweist, und ein Kommunikationssystem, welches die Merkmale nach Anspruch 11 aufweist, gelöst.These The object is achieved by a method which has the features according to claim 1, and a communication system incorporating the features Claim 11, solved.
Bei einem erfindungsgemäßen Verfahren wird eine Kommunikation zwischen einer natürlichen Person und einem künstlichen Sprachsystem durchgeführt, wobei das künstliche Sprachsystem abhängig von einem Erkennen einer Eingabe der Person eine Antwort ausgibt. Durch das Sprachsystem wird neben einer akustischen Eingabe der Person und/oder einer textuellen Eingabe der Person zumindest eine weitere davon unterschiedliche Information als Eingabe erkannt. Die Kommunikationsmöglichkeit zwischen einer Person und dem Sprachsystem kann dadurch wesentlich erweitert und auch flexibilisiert werden. Darüber hinaus kann die Informationsdarbietung durch das Sprachsystem in Form einer Ausgabe einer Antwort ebenfalls wesentlich erweitert werden.at a method according to the invention a communication between a natural person and an artificial one Language system performed, being the artificial one Language system dependent from a recognition of an input of the person gives a response. The language system is next to an acoustic input of the Person and / or a textual input of the person at least one further different information recognized as input. The communication option between a person and the language system can be essential expanded and also made more flexible. In addition, the information presentation through the speech system in the form of an output of a response as well be significantly expanded.
Vorzugsweise wird als weitere Information eine Geste der Person als Eingabe erkannt. Gerade dann, wenn die Kommunikation zwischen der natürlichen Person und dem Sprachsystem in einer relativ lauten Umgebung, durch anderweitige Geräusche beeinträchtigten Akustik vonstatten gehen soll, oder bei sprachbehinderten Personen, kann durch eine derartige Geste einer Person die eindeutige Eingabe ermöglicht werden. Darüber hinaus kann dies auch schneller als durch eine optionale textuelle Eingabe der Person erfolgen.Preferably As a further information, a gesture of the person is recognized as an input. Especially when the communication between the natural Person and the language system in a relatively noisy environment, through impaired other sounds Acoustics or speech-impaired persons, can be enabled by such a gesture of a person's unique input. About that This can also be faster than through an optional textual Enter the person.
Vorzugsweise kann als weitere Information eine Bedienung eines Bedienelements durch die Person als Eingabe erkannt werden. Gerade bei der Verwendung in einem Fahrzeug kann diesbezüglich eine Bedienung eines Bedienelements und sogar die spezifische Art der Bedienung eines Bedienelements durch das Sprachsystem als Eingabe erkannt werden und daraus eine Antwort generiert werden. So können diesbezüglich Bedieninformationen automatisch von dem Sprachsystem an die natürliche Person ausgegeben werden, um die weitere Bedienung unterstützend begleiten zu können. Darüber hinaus können der Person Alternativen zur Bedienung des Bedienelements ausgegeben werden.Preferably can as further information an operation of a control be recognized by the person as input. Especially when using in a vehicle can in this regard an operation of a control element and even the specific type the operation of an operating element by the language system as input be recognized and a response generated from it. In this way, operating information can be provided automatically output from the language system to the natural person, to support the further operation to be able to accompany. About that can out the person spent alternatives to operate the control become.
Nicht zuletzt kann durch eine derartige Erkennung der Bedienung eines Bedienelements auch automatisch eine für die Person wichtige oder zumindest begleitende interessante Information über andere Bedienelemente und/oder andere Geräte im Fahrzeug, welche gegebenenfalls mit der Bedienung des Bedienelements gekoppelt sind oder auch nicht, als Antwort ausgegeben werden.Not Finally, by such detection of the operation of a Control also automatically for the person important or at least accompanying interesting information about other controls and / or other devices in the vehicle, which optionally with the operation of the control element coupled or not, are output as a response.
Vorzugsweise wird als weitere Information eine von einem von dem Sprachsystem unterschiedlichen technischen Gerät generierte Information als Eingabe erkannt. Diesbezüglich können Informationen von Sensoren oder sonstigen Systemen als Eingabe in Form von entsprechenden Signalen verstanden werden. Auch dadurch kann die mittels dem Sprachsystem der natürlichen Person anbietbare Informationsmenge deutlich erweitert werden.Preferably As another piece of information, one of the language system becomes one different technical device generated information as input recognized. In this regard, can Information from sensors or other systems as input in Form of corresponding signals are understood. Also by it can provide the amount of information that can be provided by the natural person's language system be extended significantly.
Fehlfunktionen oder Warnhinweise oder auch grundsätzlich Betriebsinformationen über diese technischen Geräte können dann automatisch oder zu Zeitpunkten, die von der natürlichen Person gewünscht sind, durch das Sprachsystem als Antwort ausgegeben werden.malfunction or warnings or in principle operating information about this technical equipment can then automatically or at times other than natural Person desired are issued by the language system in response.
Vorzugsweise wird die Information des technischen Geräts durch eine direkte Verbindung mit dem Sprachsystem diesem übermittelt. Es kann somit vorgesehen sein, dass das technische Gerät direkt mit dem Sprachsystem zum Datenaustausch verbunden ist.Preferably is the information of the technical device through a direct connection with the language system transmitted to this. It can thus be provided that the technical device directly connected to the voice system for data exchange.
Es kann auch vorgesehen sein, dass diese Übermittlung der Informationen vom technischen Gerät zum Sprachsystem betriebsspezifisch erfolgt. Die Betriebsspezifizierung kann hier abhängig vom technischen Gerät und/oder vom Sprachsystem sein.It may also be provided that this transmission of information from the technical device to the language system is carried out company-specific. The operation specification can be dependent here from the technical device and / or the language system.
Es kann auch vorgesehen sein, dass die von dem technischen Gerät übermittelten Informationen in ein von dem Sprachsystem verwendeten Datenformat konvertiert werden. Dadurch kann die besonders aufwandsarme Verwertung der Information ermöglicht werden und darüber hinaus die Datenmenge optimiert werden. Der Speicherbedarf kann dadurch minimiert werden und nicht benötigte Datenmengen können gelöscht werden.It can also be provided that the information transmitted by the technical device is converted into a data format used by the speech system. As a result, it is possible to utilize the information with particularly little effort and, moreover, the data volume op be timed. The memory requirement can be minimized and unneeded amounts of data can be deleted.
Nicht zuletzt kann durch eine derartige Konvertierung in ein von dem Sprachsystem verwendeten Datenformat auch die Kompatibilität relativ hoch gehalten werden.Not last, by such a conversion into one of the language system The data format used also kept the compatibility relatively high.
Vorzugsweise ist ein technisches Gerät eine optische Detektoreinheit oder ein Touchscreen oder eine Tonlagen- und/oder Stimmenerkennungseinrichtung oder eine sonstige Sensorik. Dies sind lediglich beispielhafte technische Geräte, deren Aufzählung als nicht abschließend zu verstehen ist. Prinzipiell können alle Geräte vorgesehen sein, die entsprechende Informationen zur Ausgabe das Sprachsystem generieren können. Insbesondere bei einer Betrachtung von technischen Geräten in einem Fahrzeug können eine Vielzahl von Systemen und Einrichtungen diesbezüglich verwendet werden. In dem Zusammenhang können auch thermische Sensoren, Drucksensoren, Lasersensoren, Radarsensoren, Ultraschallsensoren und dergleichen als technische Geräte verstanden werden. Ebenso sind unter optischen Detektorein heiten Kameras zu verstehen, welche Licht im sichtbaren Spektralbereich detektieren können.Preferably is a technical device an optical detector unit or a touch screen or a pitch and / or voice recognition device or another sensor. These are merely exemplary technical devices whose enumeration as not final to understand. In principle, you can all devices be provided with the appropriate information to issue the Can generate language system. Especially when considering technical devices in one Vehicle can used a variety of systems and facilities in this regard become. In the context can also thermal sensors, pressure sensors, laser sensors, radar sensors, Ultrasonic sensors and the like understood as technical devices become. Similarly, cameras are under optical Detektorein units understand which light can detect in the visible spectral range.
Somit können auch Informationen, welche von Fahrerassistenzsystemen, insbesondere ACC-(Adaptive Cruise Control)Systemen, Spurüberschreitungssystemen, Nachtsichtsystemen und dergleichen detektiert werden, an das Sprachsystem übermittelt und von diesem ausgegeben werden.Consequently can also information which of driver assistance systems, in particular ACC (Adaptive Cruise Control) systems, lane crossing systems, Night vision systems and the like are detected, transmitted to the speech system and be spent by this.
Vorzugsweise wird ein Erkennungsmodus des Sprachsystems zur Erkennung der akustischen und/oder textuellen Eingabe der Person und/oder der weiteren Eingabeinformation spezifisch aktiviert. Durch diese Vorgehensweise kann verhindert werden, dass eine unerwünschte Ausgabe des Sprachsystems erfolgt, da dies durch eine Geste oder eine sonstige akustische Äußerung der Auffassung ist, eine Eingabe erhalten zu haben. Gerade bei der Verwendung in einem Fahrzeug kann somit verhindert werden, dass aufgrund der Vielzahl an Eingabemöglichkeiten das Sprachsystem relativ häufig unerwünschte Antworten ausgibt, wenn sich ein Fahrzeuginsasse bewegt oder ein akustisches Signal von sich gibt.Preferably is a recognition mode of the speech system for the detection of the acoustic and / or textual input of the person and / or further input information specifically activated. This procedure can be prevented be that an undesirable Output of the language system is done as this by a gesture or another acoustic utterance of Conception is to have received an input. Especially when using in a vehicle can thus be prevented due to the Variety of input options the language system is relatively common undesirable Answers when a vehicle occupant moves or enters gives an acoustic signal.
Die Aktivierung des Erkennungsmodus kann durch die Person spezifisch erfolgen. Diesbezüglich kann insbesondere vorgesehen sein, dass ein vorgesehenes Bedienelement eines Infotainmentsystems im Fahrzeug betätigt wird. Die Aktivierung des Erkennungsmodus kann selbstverständlich jedoch auch zusätzlich oder anstatt dazu durch eine Spracheingabe in Form eines speziellen Codeworts oder durch eine spezifische Gestik erfolgen.The Activation of the detection mode may be specific by the person respectively. In this regard can be provided in particular that an intended operating element an infotainment system is operated in the vehicle. The activation Of course, however, the detection mode may also be additional or instead of voice input in the form of a special codeword or by a specific gesture.
Insbesondere ist das Sprachsystem einem Infotainmentsystem in einem Fahrzeug zugeordnet, welches mit einem Fahrzeuginsassen kommunizieren kann. Das Infotainmentsystem kann beispielsweise eine Rundfunkeinheit und/oder einen CD-Spieler und/oder einen DVD-Spieler und/oder eine Navigationseinheit und dergleichen umfassen.Especially the voice system is an infotainment system in a vehicle assigned, which can communicate with a vehicle occupant. The infotainment system may, for example, a broadcasting unit and / or a CD player and / or a DVD player and / or a Navigation unit and the like include.
Das Infotainmentsystem ist in bevorzugter Weise zum Empfang von über ein Rundfunknetz übertragenen Informationen ausgebildet. Insbesondere kann hierbei der Empfang von digital übertragenen Rundfunksignalen genannt werden. In diesem Zusammenhang sei beispielhaft DAB (Digital Audio Broadcast) genannt.The Infotainment system is preferably for receiving over a Broadcasting network Information is trained. In particular, in this case the reception from digitally transmitted Radio signals are called. In this context, be exemplary Called DAB (Digital Audio Broadcast).
Ein erfindungsgemäßes Kommunikationssystem umfasst ein künstliches Sprachsystem, welches zur Kommunikation mit einer natürlichen Person, welche dem Kommunikationssystem ebenfalls zugeordnet ist, ausgebildet ist. Das künstliche Sprachsystem ist abhängig von einem Erkennen einer Eingabe der Person zur Ausgabe einer Antwort ausgebildet. Das Sprachsystem ist zur Verarbeitung einer akustischen und/oder textuellen Eingabe der Person und zumindest zur Verarbeitung zumindest einer weiteren davon unterschiedlichen Information als Eingabe ausgebildet. Die Informationsdarbietung durch das Kommunikationssystem sowie die Informationsverarbeitung kann dadurch wesentlich erweitert werden.One inventive communication system includes an artificial one Speech system, which is used to communicate with a natural Person who is also assigned to the communication system, is trained. The artificial language system depends on formed by recognizing an input of the person to issue a response. The speech system is for processing an acoustic and / or textual input of the person and at least for processing at least one further different information formed as input. The information presentation by the communication system as well the information processing can be extended considerably.
Vorzugsweise ist eine weitere Information als Eingabe eine Geste der Person und/oder eine von einem technischen Gerät erzeugte Information.Preferably is another information input as a gesture of the person and / or one of a technical device generated information.
Das Kommunikationssystem ist bevorzugterweise einem Infotainmentsystem in einem Fahrzeug zugeordnet.The Communication system is preferably an infotainment system assigned in a vehicle.
Vorteilhafte Ausgestaltungen des erfindungsgemäßen Verfahrens sind als vorteilhafte Ausgestaltungen des erfindungsgemäßen Kommunikationssystems anzusehen.advantageous Embodiments of the method according to the invention are advantageous To look at embodiments of the communication system according to the invention.
Ein Ausführungsbeispiel der Erfindung wird nachfolgend anhand schematischer Zeichnungen näher erläutert. Es zeigen:One embodiment The invention is explained in more detail below with reference to schematic drawings. It demonstrate:
In den Figuren werden gleiche oder funktionsgleiche Elemente mit den gleichen Bezugszeichen versehen.In The figures are the same or functionally identical elements with the provided the same reference numerals.
In
Zur
Entwicklung der Dialogstruktur
Die
beispielhaft graphisch dargestellte Dialogstruktur
Die
Eingabealternativen
Darüber hinaus
ist dem ersten Strukturteil
Der
erste Strukturteil
Das
dritte Strukturteil
Der
dritte Strukturteil
Der
zweite Strukturteil
Des
Weiteren umfasst das zweite Strukturteil
Beispielhaft
ist wiederum gezeigt, dass das Szenario
Der
zweite Strukturteil
Die
der Dialogstruktur
In
einfacher und aufwandsarmer Weise ist es möglich, die komplexe Struktur
darzustellen und einzelne Strukturteile
Natürlichsprachliche
Dialoge in der Datenverarbeitung umfassen die Verarbeitung einer
textuellen oder sprachlichen Eingabe in prosaischer Form. Auf Basis
dieser Eingabe wird meist auf der Grundlage einzelner Fallunterscheidungen,
welche in die Tausende gehen können,
eine passende Antwort ausgegeben. Die Antwort kann dabei ebenfalls
in textueller, sprachlicher oder bildlicher Form prosaischen Inhalts
erfolgen. Die Kommunikationsregeln können miteinander in Verbindung
gesetzt werden, um Gesprächsabläufe zu konzipieren.
Zur übersichtlicheren und
verbesserten Generierung solcher Dialoge werden diese und auch die
damit einhergehenden Verbindungen und Verknüpfungen der Dialogstruktur
Die graphische Modellierung beinhaltet die Bearbeitung einzelner Formulierungen sowie mehrerer Alternativen für die Eingabe als auch für die Ausgabe. Gruppen von Eingabe- und Anwortalternativen können zusammengesetzt werden, um eine Kommunikationsregel zu bilden. Die einzelnen Formulierungen können jeweils aus einem allgemeinen Verzeichnis für Eingaben als auch für Antworten gewählt werden. Mehrere Regeln, welche einen definierten Start- und Endpunkt haben können, können zu einem Szenario zusammengesetzt werden. Alle Szenarien stehen vorzugsweise damit im Zusammenhang. Abhängig vom erstellten Szenario können Eingabe- und Antwortalternativen mehrfach existieren, wobei sie durch die Zuordnung zu einem Szenario unterschieden werden können. Die Zuordnung zu einem Szenario kann auch dynamisch in die Antwort in Form einer Variablen aufgenommen werden. Ebenso kann diesbezüglich ein Platzhalter oder eine weitere Funktion dynamisch in die Antwort eingebunden werden. Ebenso kann die zuvor geäußerte Antwort des künstlichen Sprachsystems als Voraussetzung für das Verstehen einer nachfolgenden Eingabe herangezogen werden.The graphical modeling involves the processing of individual formulations as well as several alternatives for the input as well the edition. Groups of input and response alternatives can be put together to form a communication rule. The individual formulations can in each case from a general directory for inputs as well as for answers chosen become. Several rules that define a defined start and end point can have, can be assembled into a scenario. All scenarios are available preferably related thereto. Depending on the scenario created can Input and response alternatives exist multiple times, by the assignment to a scenario can be distinguished. The Assignment to a scenario can also be dynamic in the response Form of a variable. Similarly, in this regard Placeholder or another function dynamically in the response be involved. Likewise, the previously expressed answer of the artificial Language system as a prerequisite for understanding a subsequent Input be used.
Innerhalb der Antworten kann auch ein expliziter Absprung in den Kontext eines anderen Szenarios enthalten sein. Auch lassen sich die bereits zu einem Szenario zusammengestellten Kommunikationsregeln kopieren, indem das gesamte Szenario umbenannt und in einen anderen Zusammenhang eingebunden wird.Within The answers can also be an explicit jump into the context of a be included in other scenarios. Also, the already can be copying communication rules compiled in a scenario, by renaming the whole scenario and putting it into a different context becomes.
Bei
dem in
In
Zum Erzeugen der Sprachgrammatik für das künstliche Sprachsystem werden der Sprachgrammatik einzelne Worte und/oder Wortkombinationen zugrunde gelegt. Der Kommunikation wird ein Satz von Kommunikationsregeln mit jeweils einer Eingabe einer Person und einer korrespondierenden Ausgabe des Sprachsystems zugeordnet, und zumindest eine Eingabe der Person in das Sprachsystem wird einem der Sprachgrammatik zugrunde gelegten Wort und/oder einer Wortkombination zugeordnet.To the Generating the speech grammar for the artificial one Language system are the speech grammar single words and / or Based on word combinations. The communication becomes a sentence of Communication rules with one input each of a person and associated with a corresponding output of the speech system, and at least one input of the person in the language system becomes one of Speech grammar underlying word and / or a word combination assigned.
Gemäß der Darstellung
in
Die
Zuordnung einer Eingabe zu einem Wort und/oder einer Wortkombination
wird durch eine automatische Konvertierung durchgeführt und
dadurch die Sprachgrammatik definiert. Diesbezüglich wird die automatische
Konvertierung durch ein entsprechendes Konvertierungsverfahren durchgeführt, wie dies
in
Bei
der erzeugten Sprachgrammatik
Bei der automatischen Konvertierung werden einzelne Alternativen einer Eingabe analysiert und abhängig davon eine zu priorisierende Konvertierung und somit eine Zuordnung einer Alternative zu einem Wort und/oder einer Wortkombination durchgeführt. Die automatische Konvertierung kann insbesondere abhängig von einem Platzhalter und/oder einer Variablen und/oder zumindest einer Funktion in einer Alternative einer Eingabe durchgeführt werden. Ein Platzhalter kann diesbezüglich beispielsweise ein Füllwort wie „äh" oder dergleichen sein.at The automatic conversion will become one single alternatives Input analyzed and dependent of which a prioritized conversion and thus an assignment an alternative to a word and / or a word combination. The automatic conversion may depend in particular on a placeholder and / or a variable and / or at least one function in an alternative an input performed become. A wildcard in this regard may be, for example, a noise word such as "er" or the like.
Ein Variable kann insbesondere durch einen Wert eines Betriebsparameters eines Geräts oder eines Systems oder durch einen sonstigen Ergebniswert definiert werden. Insbesondere können hier beispielsweise technische Gerate in einem Fahrzeug, wie Motor, Klimaanlage, Fahrerassistenzsysteme und dergleichen genannt werden.One In particular, variable can be defined by a value of an operating parameter of a device or a system or other result value become. In particular, you can here, for example, technical devices in a vehicle, such as engine, Air conditioning, driver assistance systems and the like may be mentioned.
Eine Funktion wird insbesondere durch eine Hilfefunktion und/oder eine Funktion zur Änderung eines Profils einer Kommunikationsregel oder einer Verknüpfung von Regeln zueinander definiert.A Function is in particular by a help function and / or a Function to change a Profile of a communication rule or a link from Rules defined to each other.
Die
bereits erwähnten
Kommunikationsregeln eines natürlichsprachlichen
Kommunikationssystems bestehen aus einem Eingabeteil und einem Antwortteil.
Der Eingabeteil kann dabei durch den Benutzer in textueller, sprachlicher
oder sonstiger Form geäußert werden.
Eine sprachliche Äußerung kann
mit Hilfe einer Spracherkennung das akustische Signal erkennen und
in maschinenlesbare Form konvertieren. Bekannte Wörter oder
Wortkombinationen, so genannte Phrasen, werden als Sprachgrammatik bezeichnet
und vor der Laufzeit der Spracherkennung erstellt und bereitgestellt.
Da die einzelnen Phrasen der Sprachgrammatik inhaltlich den möglichen
Benutzereingaben innerhalb des Regelwerks
In
Ist das künstliche Sprachsystem derart ausgebildet, dass es abhängig von einem Erkennen einer Eingabe der natürlichen Person eine Antwort ausgeben kann, so ist hier insbesondere vorgesehen, dass das Sprachsystem neben einer akustischen und/oder textuellen Eingabe der Person zumindest eine weitere davon unterschiedliche Information als Eingabe erkennen kann.is the artificial one Language system designed such that it depends on a recognition of a Entering the natural Person can give an answer, so here is provided in particular, that the language system in addition to an acoustic and / or textual Entering the person at least one more different Can recognize information as input.
Als weitere Information bezüglich einer Eingabe kann in diesem Zusammenhang eine Geste der Person und/oder eines Bedienelements durch die Person und/oder eine von dem Sprachsystem unterschiedlichen technischen Gerät generierte Information verstanden werden.When further information regarding An input can in this context be a gesture of the person and / or an operating element by the person and / or one of the language system generated different technical device Information to be understood.
Das
Kommunikationssystem
Darüber hinaus
sind technische Geräte
vorgesehen, welche Informationen erzeugen können, die das Sprachsystem
als Eingabe erkennen und verwerten kann. In diesem Zusammenhang
können
ein optischer Sensor
Vorzugsweise
ist vorgesehen, dass die durch die akustische Eingabe und/oder die
textliche Eingabe erzeugten Signale direkt an das künstliche Sprachsystem
Der
grundlegende Mechanismus einer Kommunikation zwischen einem künstlichen
Sprachsystem
Vorzugsweise
ist vorgesehen, dass bei einer derartig multifunktionalen Möglichkeit
einer Erkennung unterschiedlichster Informationen durch das Sprachsystem
Es
ist bei dem Kommunikationssystem
Vorzugsweise werden die Bewegung des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars von den als Antwort durch das Sprachsystem auszugebenden Informationen gesteuert, wobei insbesondere eine Synchronisierung, vorzugsweise eine automatische Synchronisierung, zwischen der Bewegung des Avatars und/oder der Gestaltung des Avatars und/oder der visuell dargestellten Umgebung des Avatars mit den als Antwort ausgegebenen Informationen durchgeführt wird.Preferably be the movement of the avatar and / or the design of the avatar and / or the visually presented environment of the avatar of the in response controlled by the language system information, wherein in particular a synchronization, preferably an automatic Synchronization, between the movement of the avatar and / or the Design of the avatar and / or the visual environment of the Avatars with the information output in response.
Beim
Einsatz des Kommunikationssystems
Die
Visualisierung und Steuerung eines virtuellen Wesens erfordert die
Abstimmung mit den Inhalten, die durch dieses Wesen vermittelt werden
sollen. Aus diesem Grund ist es wichtig, dass das Aussehen und die
Bewegung sowie das virtuelle Umfeld des virtuellen Wesens durch
den auszugebenden Inhalt gesteuert werden. Dies kann insbesondere
dann erfolgen, wenn die Antwortalternativen des Sprachsystems
Vorzugsweise
wird eine Bewegung des Avatars oder eines Körperteils des Avatars mit einer
Abfolge von durch das Sprachsystem
Vorzugsweise
wird die Verknüpfung
abhängig
von einer von dem Sprachsystem
Neben einer einfachen Lippenbewegung kann diesbezüglich auch die Bewegung jeglicher anderer Körperteile des Avatars auf die situationsbezogen erforderliche Ausgabe synchronisiert werden.Next a simple lip movement in this regard, the movement of any other body parts the avatar synchronizes to the situation-specific output required become.
Auch dann, wenn keine explizite Sprachausgabe erfolgen soll, sondern lediglich eine visuelle Darstellung von Handlungen oder Abläufen, kann auch diesbezüglich eine exakte Synchronisierung erfolgen. So kann in diesem Zusammenhang beispielsweise auch eine Wartungs- oder Instandsetzungsanleitung an einen Fahrzeugnutzer visuell ausgegeben werden, indem beispielsweise auf einem Bildschirm ein akustisch nicht hinterlegter Text angezeigt wird, welcher durch die Bewegungen und Handlungen des visuell dargestellten Avatars demonstriert wird. Auch diesbezüglich kann die korrekte Bewegung und Handlung des Avatars zeitgenau auf den spezifisch gezeigten Text synchronisiert werden. In diesem Zusammenhang können beispielsweise Einstellungen von Systemen im Fahrzeug, wie beispielsweise Radio, CD-Spieler und dergleichen, oder auch selbstdurchzuführende War tungsarbeiten, wie Kontrolle des Ölstands, Kontrolle der Scheibenwaschflüssigkeit und dergleichen erläutert werden.Even if no explicit speech output is to take place, but merely a visual representation of actions or sequences, an exact synchronization can also take place in this regard. So in this context, for example, a maintenance or Instandungsanungsan be displayed visually to a vehicle user by, for example, displayed on a screen, an acoustically unpublished text, which is demonstrated by the movements and actions of the visual avatar. Also in this regard, the correct movement and action of the avatar can be synchronized in a timely manner to the specific text shown. In this context, for example, settings of systems in the vehicle, such as radio, CD player and the like, or self-to-carry out maintenance work, such as oil level control, control of windscreen washer fluid and the like can be explained.
In diesem Zusammenhang kann dann auch die Synchronisierung des auf der Anzeigeeinheit dargestellten Umfelds des Avatars entsprechend angepasst werden und beispielsweise bei einer Erläuterung zur Füllstandskontrolle des Motoröls im Hintergrund des Avatars der Motorraum des spezifischen Fahrzeugtyps dargestellt, insbesondere relativ detailgetreu dargestellt, werden. Weitere Beispiele sind die Erläuterung der Durchführung eines Reifenwechsels oder eines Fremdstarts etc.. Dadurch kann für einen Nutzer bei relativ komplexen Abläufen oder Handlungen oder Einstellungen der rein textlichen und/oder akustischen Mitteilung auch die Darstellung in bewegten Bildern unterstützend ermöglicht werden, was sehr hilfreich sein kann.In this connection can then sync on the environment of the avatar displayed corresponding to the display unit be adapted and for example in an explanation for level control of the engine oil in the background of the avatar the engine compartment of the specific vehicle type represented, in particular relatively detailed represent, be. Further examples are the explanation the implementation a tire change or a third-party etc. etc. This allows for a user in relatively complex processes or acts or attitudes of purely textual and / or acoustic Communication also allows the presentation in moving images supporting what can be very helpful.
In
Durch
diese Struktur wird die Ausgabe von Informationen natürlicher
Sprache mittels eines künstlichen
Sprachsystems
Vorzugsweise
wird ein Wert eines Zustandsparameters durch einen Platzhalter in
einer definierten in dem Sprachsystem
Während der Verarbeitung von Ereignissen des Bordsystems, beispielsweise eines Bussystems, in einem Fahrzeug, die der multimodalen Eingabe des natürlich sprachlichen Sprachsystems zuzurechnen ist, kann der Zugriff auf Informationen aus den Bordinformationssystemen auch während der Generierung der Antwortalternative eine Rolle spielen. So können in Antworten aktuelle Werte und Stati des Fahrzeugs oder von Teilkomponenten davon eingebunden werden, um Informationen akustisch auszugeben. Dies kann beispielsweise die Ansage der aktuellen Geschwindigkeit oder der Motortemperatur sein.During the Processing events of the on-board system, for example one Bus system, in a vehicle that is the multimodal input of the Naturally linguistic system, access to Information from the on-board information systems also during the Generation of the answer alternative play a role. So can in Answers current values and statuses of the vehicle or subcomponents be integrated into it to output information acoustically. This can be, for example, the announcement of the current speed or the engine temperature.
Diese Eigenschaft kann insbesondere dann zum Tragen kommen, wenn ein physisches Anzeigeinstrument im Fahrzeug für die Ausgabe eines entsprechenden Werts vorgesehen ist.These Property can come into play especially if a physical Indicator in the vehicle for the output of a corresponding value is provided.
Wird
bei der Verarbeitung einer derartigen Antwort ein entsprechender
Platzhalter, welcher vorab definiert und hinterlegt wird, erkannt,
wird der zu diesem Platzhalter gehörige Wert aus dem Bordinformationssystem
ermittelt und eingebunden. Dies ist in
Der
Zugriff wird somit in Form eines Platzhalters in die Formulierung
einer Antwort integriert. Die Einbindung des Werts des Platzhalters
kann sowohl innerhalb eines Antworttextes der Fall sein, kann aber
auch bereits bei der Auswahl einer Antwort erfolgen, wenn die Ausgabe
einer Antwort mit einer spezifischen Bedingung verknüpft ist.
Die Identifikation des Platzhalters mit dem Zugriff auf das Bordinformationssystem
Die
Schnittstellenkomponente
Die
Schnittstellenkomponente
Durch die erläuterte Vorgehensweise kann ermöglicht werden, dass in statische Komponenten einer Antwort dynamische Teile eingefügt werden können, die darüber hinaus dynamisch angefragt werden können.By the explained Approach can be made be that in static components of a response dynamic parts added can be the above can be dynamically requested.
Claims (13)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE200710042580 DE102007042580A1 (en) | 2007-09-07 | 2007-09-07 | Person i.e. passenger, and artificial language system communication enabling method for vehicle, involves recognizing acoustic and/or textual input of person by language system and different information as input by system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE200710042580 DE102007042580A1 (en) | 2007-09-07 | 2007-09-07 | Person i.e. passenger, and artificial language system communication enabling method for vehicle, involves recognizing acoustic and/or textual input of person by language system and different information as input by system |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102007042580A1 true DE102007042580A1 (en) | 2009-03-12 |
Family
ID=40339972
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE200710042580 Ceased DE102007042580A1 (en) | 2007-09-07 | 2007-09-07 | Person i.e. passenger, and artificial language system communication enabling method for vehicle, involves recognizing acoustic and/or textual input of person by language system and different information as input by system |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102007042580A1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102018205093A1 (en) * | 2018-04-05 | 2019-10-10 | Audi Ag | Method for operating a device by means of voice input |
US11505209B2 (en) | 2017-11-09 | 2022-11-22 | Continental Automotive Gmbh | System for automated driving with assistance for a driver in performing a non-driving activity |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE10117410A1 (en) * | 2001-04-06 | 2002-11-07 | Daimler Chrysler Ag | Method and device for outputting data about information of a motor vehicle |
DE10249060A1 (en) * | 2002-05-14 | 2003-11-27 | Philips Intellectual Property | Dialog control for electrical device |
DE102006015332A1 (en) * | 2005-04-04 | 2006-11-16 | Denso Corp., Kariya | Guest service system for vehicle users |
-
2007
- 2007-09-07 DE DE200710042580 patent/DE102007042580A1/en not_active Ceased
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE10117410A1 (en) * | 2001-04-06 | 2002-11-07 | Daimler Chrysler Ag | Method and device for outputting data about information of a motor vehicle |
DE10249060A1 (en) * | 2002-05-14 | 2003-11-27 | Philips Intellectual Property | Dialog control for electrical device |
DE102006015332A1 (en) * | 2005-04-04 | 2006-11-16 | Denso Corp., Kariya | Guest service system for vehicle users |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11505209B2 (en) | 2017-11-09 | 2022-11-22 | Continental Automotive Gmbh | System for automated driving with assistance for a driver in performing a non-driving activity |
DE102018205093A1 (en) * | 2018-04-05 | 2019-10-10 | Audi Ag | Method for operating a device by means of voice input |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP1986889B1 (en) | Device and method for interactive information dispensing and/or assistance for the user of a motor vehicle | |
EP1961606B1 (en) | Device and method for interactive information display and/or support for the user of a motor vehicle | |
DE10008226C2 (en) | Voice control device and voice control method | |
EP2200858A1 (en) | Vehicle system comprising an assistance functionality | |
DE102015224555A1 (en) | Method for operating a vehicle | |
DE102006039126A1 (en) | Method for speech recognition and speech reproduction | |
DE102018207735A1 (en) | Speech recognition device and method for controlling the same | |
EP2026328A1 (en) | Method for multimodal control of at least one device in a motor vehicle | |
DE102007042583B4 (en) | Method for communication between a natural person and an artificial speech system and communication system | |
DE102017206876B4 (en) | Method of operating a voice control system in a motor vehicle and voice control system | |
EP1121684B1 (en) | Method and device for information and/or messages by means of speech | |
DE102015205042A1 (en) | Method for controlling an audio signal output for a vehicle | |
DE102007042580A1 (en) | Person i.e. passenger, and artificial language system communication enabling method for vehicle, involves recognizing acoustic and/or textual input of person by language system and different information as input by system | |
DE102009030263A1 (en) | Method for controlling menu-based operation and information system of vehicle, involves displaying menu and forming controlling element for controlling menu | |
DE102017102593A1 (en) | Method and device for detecting the signaling state of at least one signaling device | |
DE102010051833A1 (en) | Method for performing interaction of vehicle system with user in motor vehicle, involves satisfying logical state-specific transition condition of initial state, if evaluated user input coincides with predetermined user input | |
DE102019220205A1 (en) | Adaptive adjustment of an optical output to the eyesight | |
DE102007042581A1 (en) | Method for display of information in natural language, involves integrating value of state parameter deposited in language system with response structure, and searching assigned retainer in response of artificial language system | |
DE102007042579A1 (en) | Method for producing language grammar for artificial language system to communicate with natural person, involves arranging input of person and corresponding output of language system to communicate sentence | |
EP3115886B1 (en) | Method for operating a voice controlled system and voice controlled system | |
DE102008025532B4 (en) | A communication system and method for performing communication between a user and a communication device | |
DE102007042582A1 (en) | Dialogue structure i.e. infotainment system substructure, developing method for artificial language system in vehicle for communication with passenger, involves graphically plotting defined communication rules and connection between rules | |
DE102021101660A1 (en) | Method and device for providing user guidance for a vehicle user | |
EP2790952B1 (en) | Method and device for checking the plausibility of a signal from a seat sensor in a motor vehicle | |
DE102013001868B4 (en) | Method for operating a motor vehicle using gesture control and motor vehicles with a gesture detection device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
OM8 | Search report available as to paragraph 43 lit. 1 sentence 1 patent law | ||
OP8 | Request for examination as to paragraph 44 patent law | ||
8131 | Rejection |