DE102007042583B4 - Method for communication between a natural person and an artificial speech system and communication system - Google Patents

Method for communication between a natural person and an artificial speech system and communication system Download PDF

Info

Publication number
DE102007042583B4
DE102007042583B4 DE200710042583 DE102007042583A DE102007042583B4 DE 102007042583 B4 DE102007042583 B4 DE 102007042583B4 DE 200710042583 DE200710042583 DE 200710042583 DE 102007042583 A DE102007042583 A DE 102007042583A DE 102007042583 B4 DE102007042583 B4 DE 102007042583B4
Authority
DE
Germany
Prior art keywords
avatar
output
information
movement
speech
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE200710042583
Other languages
German (de)
Other versions
DE102007042583A1 (en
Inventor
Stefan Sellschopp
Valentin Nicolescu
Helmut Prof. Dr. Krcmar
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Audi AG
Original Assignee
Audi AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Audi AG filed Critical Audi AG
Priority to DE200710042583 priority Critical patent/DE102007042583B4/en
Publication of DE102007042583A1 publication Critical patent/DE102007042583A1/en
Application granted granted Critical
Publication of DE102007042583B4 publication Critical patent/DE102007042583B4/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • G06T13/205—3D [Three Dimensional] animation driven by audio data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/20—3D [Three Dimensional] animation
    • G06T13/40—3D [Three Dimensional] animation of characters, e.g. humans, animals or virtual beings
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1081—Input via voice recognition

Abstract

Verfahren zur Kommunikation zwischen einer natürlichen Person und einem künstlichen Sprachsystem, durch welches abhängig von einem Erkennen einer Eingabe eine Antwort ausgegeben wird und zur Unterstützung der Ausgabe ein Avatar eingesetzt wird, wobei die Bewegung des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars an die als Antwort durch das Sprachsystem auszugebenden Informationen gekoppelt, und die Bewegung des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars mit den als Antwort auszugebenden Informationen automatisch synchronisiert werden, dadurch gekennzeichnet, dass bei einer akustischen Sprachausgabe des Sprachsystems die Bewegung der Lippen des Avatars mit der korrekten Aussprache der Wörter synchronisiert wird und die Lippenbewegung des Avatars für eine Mehrzahl von nationalen Sprachen spezifisch mit der für die jeweilige korrekte Aussprache von Wörtern der jeweiligen Sprache synchronisiert wird.A method for communicating between a natural person and an artificial speech system by which a response is output based on a recognition of an input and an avatar is used to assist the output, wherein the movement of the avatar and / or the design of the avatar and / or the visually presented environment of the avatar coupled to the information to be output in response by the speech system, and the motion of the avatar and / or the design of the avatar and / or the visually presented environment of the avatar are automatically synchronized with the information to be output in response, characterized that in an acoustic speech output of the speech system the movement of the lips of the avatar is synchronized with the correct pronunciation of the words and the lip movement of the avatar for a plurality of national languages specifically with that for the respective correct pronunciation of words of the respective S is synchronized.

Figure 00000001
Figure 00000001

Description

Die Erfindung betrifft ein Verfahren zur Kommunikation zwischen einer natürlichen Person und einem künstlichen Sprachsystem, durch welches abhängig von einem Erkennen einer Eingabe durch die Person eine Antwort ausgegeben wird und zur Unterstützung der Ausgabe ein künstliches virtuelles Wesen, ein so genannter Avatar, eingesetzt wird. Des Weiteren betrifft die Erfindung ein Kommunikationssystem mit einem künstlichen Sprachsystem, welches zur Kommunikation mit der natürlichen Person ausgebildet ist.The The invention relates to a method for communication between a natural Person and an artificial one Language system through which dependent from a recognition of an input by the person issued a response will and for support the issue an artificial one virtual being, a so-called avatar. Furthermore The invention relates to a communication system with an artificial one Language system, which is used to communicate with the natural Person is trained.

Aus der DE 101 17 410 A1 ist ein Verfahren und eine Vorrichtung zur Ausgabe von Daten über eine Information eines Kraftfahrzeugs bekannt. Eine Eingabe wird durch das künstliche Sprachsystem erkannt, wobei abhängig davon eine sprachliche, visuelle oder fühlbare Ausgabe erzeugt wird.From the DE 101 17 410 A1 For example, a method and a device for outputting data about information of a motor vehicle are known. An input is recognized by the artificial speech system, depending on which a linguistic, visual or tactile output is generated.

Darüber hinaus ist aus der DE 100 08 226 C2 eine Vorrichtung zur Sprachsteuerung sowie eine Verfahren zur Sprachsteuerung bekannt. In Abhängigkeit von einer Sprachausgabe werden bildhafte Hinweise auf der Anzeige dargestellt, wobei diesbezüglich lediglich vereinfachte symbolhafte Körperteilen eines Menschen nachempfundene Bilder gezeigt werden, die jeweils für sich statisch sind.In addition, from the DE 100 08 226 C2 a device for voice control and a method for voice control known. Depending on a speech output pictorial references are displayed on the display, in this regard, only simplified symbolic body parts of a human-modeled images are shown, each of which is static in itself.

Aus der DE 10 2006 052 897 A1 ist ein Verfahren und ein System gemäß dem Oberbegriff der unabhängigen Ansprüche bekannt.From the DE 10 2006 052 897 A1 there is known a method and a system according to the preamble of the independent claims.

Kommunikationssysteme, bei denen ein derartiges virtuelles Wesen auf einer Anzeigeeinheit dargestellt wird und zur Informationsübermittlung unterstützend verwendet wird, sind bekannt. Ein wesentliches Problem dabei ist jedoch, dass die Darstellung oder Bewegung dieses Avatars aufgrund der Komplexität einer Kommunikationsstruktur nicht mit der ausgegebenen Information bzw. deren Bedeutung übereinstimmt. Es kann zu einem Fehlver ständnis der ausgegebenen Antworten oder zu einem generellen Nichtverstehen der Information führen. Es ist Aufgabe der vorliegenden Erfindung, ein Verfahren sowie ein Kommunikationssystem zu schaffen, bei dem die Unterstützung der Informationsausgabe durch einen Avatar verbessert werden kann.Communication systems in which such a virtual being on a display unit is displayed and used to assist in the transmission of information is known. A major problem with this, however, is that the appearance or movement of this avatar due to the complexity of a Communication structure not with the information output or whose meaning is the same. It can lead to a misunderstanding of issued answers or to a general lack of understanding of the Lead information. It is an object of the present invention, a method and a To create a communication system in which the support of the Information output by an avatar can be improved.

Diese Aufgabe wird durch ein Verfahren, welches die Merkmale nach Anspruch 1 aufweist, und ein Kommunikationssystem, welches die Merkmale nach Anspruch 8 aufweist, gelöst.These The object is achieved by a method which has the features according to claim 1, and a communication system incorporating the features Claim 8, solved.

Bei einem erfindungsgemäßen Verfahren wird eine Kommunikation zwischen einer natürlichen Person und einem künstlichen Sprachsystem durchgeführt. Abhängig von einem Erkennen einer Eingabe durch die Person wird eine Antwort durch das Sprachsystem ausgegeben, wobei die Ausgabe der Antwort durch einen Avatar zumindest unterstützt wird. Die Bewegung des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars werden an die als Antwort durch das Sprachsystem auszugebenden Informationen gekoppelt. Durch diese definierte Miteinanderverknüpfung kann stets gewährleistet werden, dass die Information verständlich übermittelt und visuell unterstützt wird. Fehlinterpretationen der Antwort des Sprachsystem oder sogar ein Nichtverstehen der Information kann dadurch verhindert werden.at a method according to the invention a communication between a natural person and an artificial one Language system performed. Dependent recognition of an input by the person becomes an answer output by the language system, the output of the response is supported by an avatar at least. The movement of the Avatars and / or the design of the avatar and / or the visual The environment of the avatar shown will pass through in response coupled to the language system information. Through this defined interconnection can always be guaranteed that the information is conveyed understandably and visually supported. Misinterpretations of the answer of the language system or even one Not understanding the information can be prevented.

Die Bewegungen des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars werden mit den als Antwort auszugebenden Informationen automatisch synchronisiert. Es ist somit quasi jederzeit die Situation gegeben, dass sich der Avatar richtig verhält, sich richtig darstellt und in der richtigen Umgebung präsentiert, wodurch der Inhalt der zu übermittelnden Information visuell exakt unterstützt wird und somit die Wahrnehmbarkeit und auch die Deutung der zu übermittelnden Information quasi keine Fehlinterpretationen mehr zulässt.The Movements of the avatar and / or the design of the avatar and / or the visually presented environment of the avatar will be with the answer Automatically synchronizes information to be output. It is thus almost always given the situation that the avatar is right behaves properly represented and presented in the right environment, whereby the content of the information to be transmitted visually supported exactly becomes and thus the perceptibility and also the interpretation of the to be conveyed Information virtually no longer allows misinterpretations.

Bei einer akustischen Sprachausgabe eines Sprachsystems wird die Bewegung der Lippen des Avatars mit der korrekten Aussprache der Wörter synchronisiert. Wie durch die entsprechenden Hinterlegung der phonetischen Aussprache und die mögliche Verknüpfung wird dies bei dem Verfahren automatisch durchgeführt, so dass insbesondere beispielsweise die Lippenbewegung des Avatars bei jedem Wort präzise erfolgt.at an acoustic speech output of a speech system becomes the movement The avatar's lips are synchronized with the correct pronunciation of the words. As with the corresponding deposit of phonetic pronunciation and the possible shortcut if this is done automatically in the method, so that in particular, for example the avatar's lip movement is precise with each word.

Die Lippenbewegung des Avatars wird für eine Mehrzahl von nationalen Sprachen oder auch Dialekten spezifisch mit der für die jeweilige korrekte Aussprache von Wörtern der jeweiligen Sprache synchronisiert. Entsprechendes gilt selbstverständlich auch für die Demonstration der Information durch die Bewegung des Avatars ohne akustische Sprache und auch für die Umgebungsanpassung des Avatars. So kann diesbezüglich sprachenspezifisch die Gestik des Avatars für die Darstellung einer Information in einer ersten nationalen Sprache unterschiedlich zur Bewegung des Avatars zur Darstellung der gleichen Information in einer zweiten nationalen Sprache sein. In diesem Zusammenhang kann den nationalen Sprachen und den damit verbundenen Personen dieser Länder sowie gegebenenfalls auch den jeweils geltenden kulturellen und anderweitige Gepflogenheiten Rechnung getragen werden.The Lip movement of the avatar is for a majority of national Languages or dialects specific to the respective one correct pronunciation of words synchronized to the respective language. The same applies, of course for the Demonstration of the information by the movement of the avatar without acoustic language and also for the environment customization of the avatar. So can in this regard language-specific the avatar's gestures for the presentation of information in a first national language different from the movement of the avatar to represent the same information be in a second national language. In this context Can the national languages and related people these countries as well as, if applicable, the applicable cultural and other practices are taken into account.

Vorzugsweise werden die Bewegungen des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars von den als Antwort durch das Sprachsystem auszugebenden Informationen gesteuert. Das heißt, die Informationen bilden die grundlegende Basis dafür, wie sich der Avatat bewegt und/oder seine Umgebung dargestellt wird oder wie er selbst ausgestaltet wird. Durch dieses Steuern wird quasi durch die zu übermittelnde Information und der darin umfasste Inhalt im Hinblick darauf, was eigentlich mitgeteilt werden soll präzise und abgestimmt durch die Bewegung und/oder die Gestaltung des Avatars und/oder dessen Umgebungsdarstellung erreicht. Ein in der Information auch zu übermittelnder Emotionszustand kann dann durch den Avatar besser übermittelt werden.Preferably, the avatar's movements and / or the avatar's design and / or the avatar's visual environment are controlled by the information to be output in response to the speech system. This means, the information forms the basic basis for how the avatar moves and / or its environment is presented or how it is designed. By means of this control, the information to be transmitted and the content included in it are achieved in a precise and coordinated manner by the movement and / or the design of the avatar and / or its environment representation, with regard to what is actually to be communicated. An emotion state to be transmitted in the information can then be transmitted better by the avatar.

Vorzugsweise wird die Bewegung des Avatars oder eines Körperteils des Avatars mit der Abfolge von durch das Sprachsystem zu vermittelnden Informationen in einer Antwort abhängig von der Art der Informationen automatisch synchronisiert.Preferably becomes the movement of the avatar or part of the body of the avatar with the Sequence of information to be conveyed by the language system in an answer dependent automatically synchronized by the type of information.

Insbesondere wird die korrekte phonetische Aussprache von Wörtern in dem Sprachsystem gespeichert und die Bewegung des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars an die korrekte phonetische Aussprache geknüpft. Dadurch kann eine äußerst realitätsnahe Darstellung einer Handlung bzw. einer Aussprache erreicht werden, wodurch die Aufmerksamkeit der Person im Hinblick auf die Aufnahme der durch das Sprachsystem ausgegebenen Information in Form der Antwort wesentlich erhöht wird.Especially the correct phonetic pronunciation of words in the speech system is stored and the movement of the avatar and / or the design of the avatar and / or the visually presented environment of the avatar to the correct one phonetic pronunciation. This allows a very realistic representation an action or a pronunciation can be achieved, causing attention the person with regard to the inclusion of the through the language system output information in the form of the response is substantially increased.

Vorzugsweise wird die Verknüpfung abhängig von einer von dem Sprachsystem erkannten Eingabe automatisch durchgeführt.Preferably becomes the link dependent automatically performed by an input recognized by the speech system.

Es kann auch vorgesehen sein, dass die Verknüpfung abhängig von einer durch die Person durchgeführten Einstellung erfolgt. In diesem Zusammenhang kann vorgesehen sein, dass beispielsweise die Person die spezifische nationale Sprache einstellen kann, in der sie die durch das Sprachsystem ausgegebene Antwort haben möchte. So kann beispielsweise die Ausgabe in deutscher Sprache oder englischer Sprache oder dergleichen eingestellt werden. Die dann den Wörtern der spezifischen nationalen Sprache zugrundeliegenden phonetischen Aussprachen werden dann automatisch an die präzise Bewegung des Avatars oder eines Körperteils des Avatars oder an dessen Gestaltung oder an die visuell dargestellte Umgebung des Avatars geknüpft.It It may also be provided that the link depends on a person's attitude he follows. In this context, it may be provided that, for example the person can set the specific national language in who wants to have the answer given by the language system. So For example, the output in German or English Language or the like can be set. Then the words of the specific national language phonetic pronunciations are then automatically connected to the precise movement of the avatar or of a body part of the avatar or on its design or visually presented The environment of the avatar is knotted.

Vorzugsweise wird das Sprachsystem einem Infotainmentsystem in einem Fahrzeug zugeordnet und es kann mit einem Fahrzeuginsassen kommunizieren. Die Kommunikation kann neben dem Austausch akustischer Signale, insbesondere Wörter und Sätze, auch zur Kommunikation mittels Text und/oder Gestik und/oder sonstiger Informationsübertragung erfolgen.Preferably the voice system becomes an infotainment system in a vehicle assigned and it can communicate with a vehicle occupant. In addition to the exchange of acoustic signals, in particular words and Sentences, also for communication by means of text and / or gestures and / or other information transfer respectively.

Das Infotainmentsystem des Fahrzeugs kann beispielsweise eine Rundfunkeinheit und/oder einen CD-Spieler und/oder einen DVD-Spieler und/oder eine Navigationseinrichtung und dergleichen umfassen. Dies ist lediglich eine beispielhafte Aufzählung, welche nicht abschließend zu verstehen ist.The Infotainment system of the vehicle, for example, a broadcasting unit and / or a CD player and / or a DVD player and / or a Navigation device and the like include. This is just an exemplary list, which not final to understand.

Ein erfindungsgemäßen Kommunikationssystem umfasst ein künstliches Sprachsystem, welches zur Kommunikation mit einer dem Kommunikationssystem zugeordneten natürlichen Person ausgebildet ist. Das Sprachsystem ist abhängig von einem Erkennen einer Eingabe durch die Person zur Ausgabe einer Antwort ausgebildet, wobei zur Unterstützung der Ausgabe ein Avatar einsetzbar ist. Die Bewegung des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars ist an die als Antwort an das Sprachsystem auszugebenden Informationen gekoppelt.One inventive communication system includes an artificial one Speech system used for communication with a communication system associated natural Person is trained. The language system depends on a recognition of a Input trained by the person to issue a response, being in support the output of an avatar can be used. The movement of the avatar and / or the design of the avatar and / or the visually presented The avatar's environment is in response to the language system coupled information to be output.

Vorzugsweise ist das Sprachsystem einem Infotainmentsystem in einem Fahrzeug zugeordnet und zur Kommunikation mit einem Fahrzeuginsassen ausgebildet.Preferably the voice system is an infotainment system in a vehicle assigned and trained for communication with a vehicle occupant.

Vorteilhafte Ausgestaltungen des erfindungsgemäßen Verfahren sind als vorteilhafte Ausgestaltungen des erfindungsgemäßen Kommunikationssystems zu sehen.advantageous Embodiments of the method according to the invention are advantageous Embodiments of the communication system according to the invention see.

Die Regeln eines natürlichsprachlichen Sprachsystems sind in einen Eingabe- und einen Antwortteil untergliedert. Für die korrekte Steuerung der Sprachausgabe durch das Sprachsystem sind Informationen zu hinterlegen, wie genau ein bestimmtes Wort oder eine Wortkombination ausgesprochen werden soll. Durch die Visualisierung und Steuerung eines virtuellen Wesens ist gerade die Abstimmung mit den Inhalten der Informationen durch dieses Wesen vermittelt werden sollen, besonders wichtig und kann durch das er findungsgemäße Verfahren sowie das erfindungsgemäße Kommunikationssystem gewährleistet werden. Aus diesem Grund ist es besonders vorteilhaft, wenn das Aussehen und die Bewegungen sowie das virtuelle Umfeld des virtuellen Wesens durch den auszugebenden Inhalt gesteuert werden. Dies kann insbesondere dann erfolgen, wenn die Antwortalternativen des Sprachsystems bereits die Steuerinformationen sowohl für das virtuelle Wesen als auch die korrekte Aussprache von Wörtern integrieren.The Rules of a natural language language system are divided into an input and a response part. For the correct Control of the speech output by the speech system is information to deposit exactly how a particular word or combination of words should be pronounced. By visualizing and controlling a Virtual essence is just the vote with the content of Information should be conveyed by this being, especially important and can by he inventive method and the communication system according to the invention guaranteed become. For this reason, it is particularly advantageous if the Appearance and movements as well as the virtual environment of the virtual Being controlled by the content to be output. This can especially when the answer alternatives of the language system already the tax information for both the virtual being and the correct pronunciation of words integrate.

Ein Ausführungsbeispiel der Erfindung wird nachfolgend anhalnd schematischer Zeichnungen näher erläutert. Es zeigen:One embodiment The invention will be explained in more detail in the following semi-schematic drawings. It demonstrate:

1 eine schematische Darstellung eines natürlichsprachlichen Dialogs in einer graphischen Modellierung gemäß dem erfindungsgemäßen Verfahren; 1 a schematic representation of a natural language dialogue in a graphic modeling according to the invention Ver drive;

2 eine schematische Darstellung einer Konvertierung von Kommunikationsregeln eines natürlichsprachlichen Kommunikationssystems in eine Sprachgrammatik; 2 a schematic representation of a conversion of communication rules of a natural language communication system in a speech grammar;

3 eine schematische Darstellung einer Konvertierung von Informationen von einer Eingabemodalität zur Verarbeitung im Kommunikationssystem; 3 a schematic representation of a conversion of information from an input modality for processing in the communication system;

4 eine schematische Darstellung einer Integration der Steuerung von Ausspracheinformationen in Antworten des künstlichen Sprachsystems; und 4 a schematic representation of an integration of the control of pronunciation information in responses of the artificial speech system; and

5 eine schematische Darstellung eines Zugriffs auf Werte eines Bordinformationssystems eines Fahrzeugs bei der Abarbeitung von Antwortalternativen des künstlichen Sprachsystems. 5 a schematic representation of access to values of an on-board information system of a vehicle in the processing of response alternatives of the artificial language system.

In den Figuren werden gleiche oder funktionsgleiche Elemente mit den gleichen Bezugszeichen versehen.In The figures are the same or functionally identical elements with the provided the same reference numerals.

In 1 ist in einer schematischen Darstellung eine Dialogstruktur 1 für ein künstliches Sprachsystem gezeigt, welches zur Kommunikation mit einer natürlichen Person mittels natürlicher Sprache ausgebildet ist.In 1 is a schematic representation of a dialogue structure 1 for an artificial language system designed to communicate with a natural person through natural language.

Zur Entwicklung der Dialogstruktur 1 ist ein Verfahren vorgesehen, bei dem der Dialogstruktur 1 ein Modell zugrunde gelegt wird, durch welches definierte Kommunikationsregeln und Verbindungen zwischen den Kommunikationsregeln bei der Entwicklung der Dialogstruktur 1 graphisch dargestellt werden.For the development of the dialogue structure 1 a procedure is provided in which the dialogue structure 1 a model is used, by which defined communication rules and connections between the communication rules in the development of the dialogue structure 1 graphically displayed.

Die beispielhaft graphisch dargestellte Dialogstruktur 1 umfasst einen ersten Strukturteil 2, einen zweiten Strukturteil 3 und einen dritten Strukturteil 4. Der erste Strukturteil 2 umfasst eine oder mehrere Eingabealternativen 5, denen entwicklungsspezifisch eine oder mehrere Antwortalternativen 6 zugeordnet sind. Diese sind graphisch dargestellt bzw. beispielsweise durch Anklicken der dargestellten Balken aufrufbar.The exemplary graphically displayed dialog structure 1 comprises a first structural part 2 , a second structural part 3 and a third structural part 4 , The first structural part 2 includes one or more input alternatives 5 which are developmentally one or more alternative answers 6 assigned. These are represented graphically or can be called up, for example, by clicking on the bars shown.

Die Eingabealternativen 5 und die Antwortalternativen 6 sind zu einer Kommunikationsregel 7 verknüpft.The input alternatives 5 and the answer alternatives 6 are a communication rule 7 connected.

Darüber hinaus ist dem ersten Strukturteil 2 ein graphisch dargestellter Startpunkt 8 zugeordnet, welcher mit der ersten Kommunikationsregel 7 verknüpft ist.In addition, the first structural part 2 a graphically illustrated starting point 8th associated with the first communication rule 7 is linked.

Der erste Strukturteil 2 der Dialogstruktur 1 ist über eine erste Verbindung 9 mit dem zweiten Strukturteil 3 und über eine zweite Verbindung 10 mit dem dritten Strukturteil 4 verknüpft. Diese graphische Darstellung gewährleistet für die Entwicklung die schnelle Übersichtlichkeit und die gemäß dem Modell mögliche Ausgestaltung einer Kommunikation.The first structural part 2 the dialogue structure 1 is about a first connection 9 with the second structural part 3 and a second connection 10 with the third structural part 4 connected. This graph ensures the development of the quick overview and the possible configuration of a communication according to the model.

Das dritte Strukturteil 4 umfasst ein Szenario, welches lediglich eine Kommunikationsregel 11 aufweist, welche wiederum im Ausführungsbeispiel mehrere Eingabealternativen 12 sowie damit verbundene oder diesen zugeordnete Antwortalternativen 13 aufweist. Selbstverständlich kann vorgesehen sein, dass einem Szenario des dritten Strukturteils 4 auch mehrere Kommunikationsregeln zugeordnet sind, welche insbesondere auch miteinander verknüpft sein können.The third structural part 4 includes a scenario that is just a communication rule 11 which in turn has several input alternatives in the exemplary embodiment 12 and associated or associated answer alternatives 13 having. Of course, it can be provided that a scenario of the third structural part 4 Also, a plurality of communication rules are assigned, which in particular can also be linked together.

Der dritte Strukturteil 4 und insbesondere die Kommunikationsregel 11 ist über eine weitere Verknüpfung 14 mit einem Endpunkt 15 der Dialogstruktur 1 verknüpft.The third structural part 4 and in particular the communication rule 11 is about another link 14 with an endpoint 15 the dialogue structure 1 connected.

Der zweite Strukturteil 3 weist beispielhaft ebenfalls ein Szenario 16 auf, welchem wiederum lediglich eine Kommunikationsregel 17 zugeordnet ist.The second structural part 3 exemplarily also has a scenario 16 on which in turn only a communication rule 17 assigned.

Auch dieses Szenario 16 kann eine Mehrzahl von Kommunikationsregeln umfassen, welche miteinander verknüpft sein können. Die Kommunikationsregel 17 weist ebenfalls beispielhaft mehrere Eingabealternativen 18 sowie diesen zugeordnete Antwortalternativen 19 auf.Also this scenario 16 may include a plurality of communication rules that may be linked together. The communication rule 17 also exemplifies several input alternatives 18 and their associated answer alternatives 19 on.

Des Weiteren umfasst das zweite Strukturteil 3 weitere Szenarien 21, 22 und 23, welche über eine Verknüpfung 20 mit dem Szenario 16 verknüpft sind. Die Kommunikation ist somit sowohl von dem Szenario 16 mit einem oder mehreren der Szenarien 21 bis 23 möglich, als auch zwischen den Szenarien 21 bis 23.Furthermore, the second structural part comprises 3 other scenarios 21 . 22 and 23 which have a link 20 with the scenario 16 are linked. The communication is thus both of the scenario 16 with one or more of the scenarios 21 to 23 possible, as well as between the scenarios 21 to 23 ,

Beispielhaft ist wiederum gezeigt, dass das Szenario 21 zumindest eine Kommunikationsregel 24 aufweist, welche beispielhaft eine Mehrzahl von Eingabealternativen 25 und diesen zugeordnet eine Mehrzahl von Antwortalternativen 26 aufweist.By way of example, it is shown again that the scenario 21 at least one communication rule 24 which exemplifies a plurality of input alternatives 25 and associated therewith a plurality of response alternatives 26 having.

Der zweite Strukturteil 3 und insbesondere die Szenarien 21 bis 23 sind über Verknüpfungen 27, 28 und 29 mit dem Endpunkt 15 verknüpft.The second structural part 3 and in particular the scenarios 21 to 23 are about shortcuts 27 . 28 and 29 with the endpoint 15 connected.

Die der Dialogstruktur 1 zugeordnete und zugrundegelegte Modellierung wird vollständig graphisch realisiert.The dialogue structure 1 assigned and underlying modeling is realized completely graphically.

In einfacher und aufwandsarmer Weise ist es möglich, die komplexe Struktur darzustellen und einzelne Strukturteile 2 bis 4 und/oder Kommunikationsregeln und/oder Eingabealternativen und/oder Antwortalternativen an vielfältigen Positionen der Struktur anzuordnen und dadurch weitere Verknüpfungsmöglichkeiten und Änderungen im Hinblick auf die Entwicklung der Dialogstruktur 1 durchführen zu können. Stets kann die Übersichtlichkeit und unmittelbare Darstellung der geänderten Dialogstruktur 1 erkannt und nachvollzogen werden.In a simple and low-effort way, it is possible to represent the complex structure and individual structural parts 2 to 4 and / or communication rules and / or input alternatives and / or Ant alternative forms in various positions of the structure and thereby further linking possibilities and changes with regard to the development of the dialogue structure 1 to carry out. The clarity and immediate presentation of the changed dialogue structure can always be a given 1 be recognized and understood.

Natürlichsprachliche Dialoge in der Datenverarbeitung umfassen die Verarbeitung einer textuellen oder sprachlichen Eingabe in prosaischer Form. Auf Basis dieser Eingabe wird meist auf der Grundlage einzelner Fallunterscheidungen, welche in die Tausende gehen können, eine passende Antwort ausgegeben. Die Antwort kann dabei ebenfalls in textueller, sprachlicher oder bildlicher Form prosaischen Inhalts erfolgen. Die Kommunikationsregeln können miteinander in Verbindung gesetzt werden, um Gesprächsabläufe zu konzipieren. Zur übersichtlicheren und verbesserten Generierung solcher Dialoge werden diese und auch die damit einhergehenden Verbindungen und Verknüpfungen der Dialogstruktur 1 graphisch generiert. Dadurch können umfangreichere Dialoge erstellt werden, die mehr Formulierungs- und Antwortalternativen auf eine einfach Weise miteinander verbinden können.Natural-language dialogues in data processing include the processing of a textual or linguistic input in a prosaic form. Based on this input, a suitable answer is usually issued based on individual case distinctions that can go into the thousands. The answer can also be given in textual, linguistic or pictorial form prosaic content. The communication rules can be connected with one another in order to conceive call flows. For the clearer and improved generation of such dialogues, these and also the associated connections and links of the dialogue structure 1 generated graphically. This allows more extensive dialogues to be created that can more easily combine more formulation and response alternatives.

Die graphische Modellierung beinhaltet die Bearbeitung einzelner Formulierungen sowie mehrerer Alternativen für die Eingabe als auch für die Ausgabe. Gruppen von Eingabe- und Anwortalternativen können zusammengesetzt werden, um eine Kommunikationsregel zu bilden. Die einzelnen Formulierungen können jeweils aus einem allgemeinen Verzeichnis für Eingaben als auch für Antworten gewählt werden. Mehrere Regeln, welche einen definierten Start- und Endpunkt haben können, können zu einem Szenario zusammengesetzt werden. Alle Szenarien stehen vorzugsweise damit im Zusammenhang. Abhängig vom erstellten Szenario können Eingabe- und Antwortalternativen mehrfach existieren, wobei sie durch die Zuordnung zu einem Szenario unterschieden werden können. Die Zuordnung zu einem Szenario kann auch dynamisch in die Antwort in Form einer Variablen aufgenommen werden. Ebenso kann diesbezüglich ein Platzhalter oder eine weitere Funktion dynamisch in die Antwort eingebunden werden. Ebenso kann die zuvor geäußerte Antwort des künstlichen Sprachsystems als Voraussetzung für das Verstehen einer nachfolgenden Eingabe herangezogen werden.The graphical modeling involves the processing of individual formulations as well as several alternatives for the input as well the edition. Groups of input and response alternatives can be put together to form a communication rule. The individual formulations can in each case from a general directory for inputs as well as for answers chosen become. Several rules that define a defined start and end point can have, can be assembled into a scenario. All scenarios are available preferably related thereto. Depending on the scenario created can Input and response alternatives exist multiple times, by the assignment to a scenario can be distinguished. The Assignment to a scenario can also be dynamic in the response Form of a variable. Similarly, in this regard Placeholder or another function dynamically in the response be involved. Likewise, the previously expressed answer of the artificial Language system as a prerequisite for understanding a subsequent Input be used.

Innerhalb der Antworten kann auch ein expliziter Absprung in den Kontext eines anderen Szenarios enthalten sein. Auch lassen sich die bereits zu einem Szenario zusammengestellten Kommunikationsregeln kopieren, indem das gesamte Szenario umbenannt und in einen anderen Zusammenhang eingebunden wird.Within The answers can also be an explicit jump into the context of a be included in other scenarios. Also, the already can be copying communication rules compiled in a scenario, by renaming the whole scenario and putting it into a different context becomes.

Bei dem in 1 beispielhaft dargestellten Modell der Dialogstruktur 1 in seiner graphischen Darstellung sind die Szenarien innerhalb eines möglichen Regelwerks schematisch abgebildet. In 1 ist die Option von Absprüngen zwischen Szenarien nicht explizit dargestellt, kann jedoch ebenso vorgesehen sein.At the in 1 exemplified model of the dialogue structure 1 in its graphical representation, the scenarios are shown schematically within a possible set of rules. In 1 however, the option of jumps between scenarios is not explicitly shown, but may be provided as well.

In 2 ist in einer schematischen Darstellung die Konvertierung von Kommunikationsregeln 31 bis 34 eines natürlichsprachlichen Kommunikationssystems, welches ein künstliches Sprachsystem aufweist, das mit einer natürlichen Person mittels Sprache kommunizieren kann, in eine spezifische Sprachgrammatik gezeigt.In 2 is a schematic representation of the conversion of communication rules 31 to 34 a natural language communication system having an artificial language system that can communicate with a natural person by means of speech, shown in a specific speech grammar.

Zum Erzeugen der Sprachgrammatik für das künstliche Sprachsystem werden der Sprachgrammatik einzelne Worte und/oder Wortkombinationen zugrunde gelegt. Der Kommunikation wird ein Satz von Kommunikationsregeln mit jeweils einer Eingabe einer Person und einer korrespondierenden Ausgabe des Sprachsystems zugeordnet, und zumindest eine Eingabe der Person in das Sprachsystem wird einem der Sprachgrammatik zugrunde gelegten Wort und/oder einer Wortkombination zugeordnet.To the Generating the speech grammar for the artificial one Language system are the speech grammar single words and / or Based on word combinations. The communication becomes a sentence of Communication rules with one input each of a person and associated with a corresponding output of the speech system, and at least one input of the person in the language system becomes one of Speech grammar underlying word and / or a word combination assigned.

Gemäß der Darstellung in 2 ist der Satz von Kommunikationsregeln 31 bis 34 durch ein Regelwerk 30 gebildet, welches dem künstlichen Sprachsystem zugrunde gelegt wird. Im Ausführungsbeispiel umfasst das Regelwerk 30 beispielhaft vier Kommunikationsregeln 31, 32, 33 und 34, welchen jeweils ein oder mehrere Eingabealternativen bzw. Benutzereingaben und dazu mögliche Antwortalternativen bzw. Antworten des Systems zugeordnet werden, wie dies durch die Blöcke dargestellt ist.As shown in 2 is the set of communication rules 31 to 34 through a set of rules 30 formed, which is based on the artificial language system. In the embodiment, the rules include 30 exemplarily four communication rules 31 . 32 . 33 and 34 which are each assigned one or more input alternatives or user inputs and possible response alternatives or responses of the system, as represented by the blocks.

Die Zuordnung einer Eingabe zu einem Wort und/oder einer Wortkombination wird durch eine automatische Konvertierung durchgeführt und dadurch die Sprachgrammatik definiert. Diesbezüglich wird die automatische Konvertierung durch ein entsprechendes Konvertierungsverfahren durchgeführt, wie dies in 2 durch das Blockelement 35 angedeutet ist. Dieses Tool ist somit im Hinblick auf den Ablauf der automatischen Konvertierung zwischen dem Regelwerk 30 und der zu erzeugenden Sprachgrammatik 36 der Spracherkennung zwischengeschaltet.The assignment of an input to a word and / or a word combination is performed by an automatic conversion and thereby defines the speech grammar. In this regard, the automatic conversion is performed by a corresponding conversion method, as in 2 through the block element 35 is indicated. This tool is thus in terms of the process of automatic conversion between the rules 30 and the speech grammar to be generated 36 interposed the speech recognition.

Bei der erzeugten Sprachgrammatik 36 sind dann gemäß der beispielhaften Darstellungen in 2 mehrere Eingaben 37, 38, 39 und 40 als mögliche Benutzereingaben definiert.In the generated speech grammar 36 are then in accordance with the exemplary illustrations in 2 several inputs 37 . 38 . 39 and 40 defined as possible user input.

Bei der automatischen Konvertierung werden einzelne Alternativen einer Eingabe analysiert und abhängig davon eine zu priorisierende Konvertierung und somit eine Zuordnung einer Alternative zu einem Wort und/oder einer Wortkombination durchgeführt. Die automatische Konvertierung kann insbesondere abhängig von einem Platzhalter und/oder einer Variablen und/oder zumindest einer Funktion in einer Alternative einer Eingabe durchgeführt werden. Ein Platzhalter kann diesbezüglich beispielsweise ein Füllwort wie „äh” oder dergleichen sein.In automatic conversion, individual alternatives of an input are analyzed and, depending on this, a conversion to be prioritized and thus an assignment of an alternative to a word and / or a word combination carried out. The automatic conversion can be carried out in particular depending on a placeholder and / or a variable and / or at least one function in an alternative of an input. A wildcard in this regard may be, for example, a noise word such as "er" or the like.

Ein Variable kann insbesondere durch einen Wert eines Betriebsparameters eines Geräts oder eines Systems oder durch einen sonstigen Ergebniswert definiert werden. Insbesondere können hier beispielsweise technische Geräte in einem Fahrzeug, wie Motor, Klimaanlage, Fahrerassistenzsysteme und dergleichen genannt werden.One In particular, variable can be defined by a value of an operating parameter of a device or a system or other result value become. In particular, you can here for example technical devices in a vehicle, such as engine, Air conditioning, driver assistance systems and the like may be mentioned.

Eine Funktion wird insbesondere durch eine Hilfefunktion und/oder eine Funktion zur Änderung eines Profils einer Kommunikationsregel oder einer Verknüpfung von Regeln zueinander definiert.A Function is in particular by a help function and / or a Function to change a Profile of a communication rule or a link from Rules defined to each other.

Die bereits erwähnten Kommunikationsregeln eines natürlichsprachlichen Kommunikationssystems bestehen aus einem Eingabeteil und einem Antwortteil. Der Eingabeteil kann dabei durch den Benutzer in textueller, sprachlicher oder sonstiger Form geäußert werden. Eine sprachliche Äußerung kann mit Hilfe einer Spracherkennung das akustische Signal erkennen und in maschinenlesbare Form konvertieren. Bekannte Wörter oder Wortkombinationen, so genannte Phrasen, werden als Sprachgrammatik bezeichnet und vor der Laufzeit der Spracherkennung erstellt und bereitgestellt. Da die einzelnen Phrasen der Sprachgrammatik inhaltlich den möglichen Benutzereingaben innerhalb des Regelwerks 30 des natürlichsprachlichen Kommunikationssystems entsprechen, bietet sich die automatische Konvertierung an. Bei dieser Konvertierung werden die einzelnen Eingabealternativen vorzugsweise analysiert und je nach Verwendung von Platzhaltern, Variablen und weiteren Funktionen konvertiert. Das Ergebnis der Konvertierung ist die Sprachgrammatik 36, die alle möglichen vom natürlichsprachlichen künstlichen Sprachsystem semantisch verstandenen Eingaben enthält. Dadurch ist die Spracherkennung in der Lage, all diese möglichen Eingaben mit einer höheren Sicherheit zu erkennen.The already mentioned communication rules of a natural language communication system consist of an input part and a response part. The input part can be expressed by the user in textual, linguistic or other form. A speech utterance can recognize the acoustic signal with the help of a speech recognition and convert it into machine-readable form. Known words or word combinations, so-called phrases, are referred to as speech grammar and created and provided before the speech recognition time. Since the individual phrases of the speech grammar contentwise the possible user input within the rules 30 of the natural language communication system, the automatic conversion is useful. In this conversion, the individual input alternatives are preferably analyzed and converted depending on the use of wildcards, variables, and other functions. The result of the conversion is the speech grammar 36 containing all sorts of semantically understood inputs from the natural language artificial language system. This enables speech recognition to detect all these possible inputs with greater security.

In 3 ist eine schematische Darstellung einer Konvertierung eines Signals von technischen Geräten und anderweitigen Eingabesignalen zur Verarbeitung im Kommunikationssystem gezeigt.In 3 Fig. 3 is a schematic illustration of a conversion of a signal from technical devices and other input signals for processing in the communication system.

Ist das künstliche Sprachsystem derart ausgebildet, dass es abhängig von einem Erkennen einer Eingabe der natürlichen Person eine Antwort ausgeben kann, so ist hier insbesondere vorgesehen, dass das Sprachsystem neben einer akustischen und/oder textuellen Eingabe der Person zumindest eine weitere davon unterschiedliche Information als Eingabe erkennen kann.is the artificial one Language system designed such that it depends on a recognition of a Entering the natural Person can give an answer, so here is provided in particular, that the language system in addition to an acoustic and / or textual Entering the person at least one more different Can recognize information as input.

Als weitere Information bezüglich einer Eingabe kann in diesem Zusammenhang eine Geste der Person und/oder eines Bedienelements durch die Person und/oder eine von dem Sprachsystem unterschiedlichen technischen Gerät generierte Information verstanden werden.When further information regarding An input can in this context be a gesture of the person and / or an operating element by the person and / or one of the language system generated different technical device Information to be understood.

Das Kommunikationssystem 41 umfasst somit neben der natürlichen Person eine akustische Eingabemöglichkeit 42 sowie eine Eingabemöglichkeit 43, durch welche eine Texteingabe erfolgen kann.The communication system 41 thus includes an acoustic input option in addition to the natural person 42 as well as an input possibility 43 through which a text input can be made.

Darüber hinaus sind technische Geräte vorgesehen, welche Informationen erzeugen können, die das Sprachsystem als Eingabe erkennen und verwerten kann. In diesem Zusammenhang können ein optischer Sensor 44 und/oder ein zur haptischen Eingabe ausgebildetes Gerät 45 und/oder ein Drucksensor 46 und/oder eine Einrichtung zur Akustikanalyse 47 und/oder ein Lasersensor 48 und/oder ein Radarsensor 49 vorgesehen sein. Dies sind lediglich beispielhafte technische Geräte, deren Aufzählung nicht abschließend zu verstehen ist. Eines oder mehrere dieser Geräte können beispielsweise einem Fahrerassistenzsystem eines Fahrzeugs oder einer anderweitigen Einrichtung im Fahrzeug zugeordnet sein.In addition, technical devices are provided which can generate information that the language system can recognize as input and utilize. In this context, an optical sensor 44 and / or a device designed for haptic input 45 and / or a pressure sensor 46 and / or a device for acoustic analysis 47 and / or a laser sensor 48 and / or a radar sensor 49 be provided. These are merely exemplary technical devices whose enumeration is not exhaustive. One or more of these devices may for example be associated with a driver assistance system of a vehicle or another device in the vehicle.

Vorzugsweise ist vorgesehen, dass die durch die akustische Eingabe und/oder die textliche Eingabe erzeugten Signale direkt an das künstliche Sprachsystem 50 zur weiteren Verarbeitung übergeben werden. Insbesondere ist vorzugsweise vorgesehen, dass die von den Komponenten 44 bis 49 erzeugten Signale zunächst an eine Einheit zur Signalkonvertierung 51 übertragen werden, und diese dann ein Ausgangssignal an das künstliche Sprachsystem 50 übermittelt.It is preferably provided that the signals generated by the acoustic input and / or the textual input directly to the artificial speech system 50 for further processing. In particular, it is preferably provided that that of the components 44 to 49 signals generated first to a unit for signal conversion 51 be transmitted, and then this an output signal to the artificial language system 50 transmitted.

Der grundlegende Mechanismus einer Kommunikation zwischen einem künstlichen Sprachsystem 50 und einer natürlichen Person kann durch eine derartige Erweiterung wesentlich flexibler und mit mehr Informationsgehalt ermöglicht werden. Der grundlegende Mechanismus der fallbasierten Auswahl einer Antwort bzw. allgemein einer Reaktion kann bei Verwendung eines solchen Systems oder Systemteils gemäß der Darstellung in 3 in Kombination mit technischen Geräten zu weiteren Verarbeitungen genutzt werden. So können speziell im Fahrzeug beispielsweise neben der akustischen Eingabe durch den Fahrer auch die Bedienung eines Bedienelements oder die Erkennung einer Geste durch eine Kamera als Eingabe dem natürlichsprachlichen Sprachsystem 50 zugeführt werden. Als Reaktion auf diese Eingaben kann ebenso wie bei akustischer Eingabe auch eine entsprechende Antwort oder Reaktion erfolgen. Dabei werden die eingehenden Signale der angeschlossenen Geräte, wie Bedienelement oder Kamera oder dergleichen, in ein Format konvertiert, das durch das Sprachsystem 50 verarbeitet werden kann. Diese Konvertierung kann neben den beiden als Beispiel genannten Geräten auch weitere Elemente, wie Touchscreens, Tonlagen- und Stimmerkennungseinrichtungen sowie weitere Einheiten umfassen.The basic mechanism of communication between an artificial language system 50 and a natural person can be made much more flexible and with more information content by such an extension. The basic mechanism of case-based selection of a response, or response in general, can be obtained using such a system or part of a system as shown in FIG 3 used in combination with technical equipment for further processing. Thus, especially in the vehicle, for example, in addition to the acoustic input by the driver, the operation of a control element or the detection of a gesture by a camera as input to the natural language language system 50 be supplied. In response to these inputs, as with acoustic input, a corresponding response or response may also be provided on. In this case, the incoming signals of the connected devices, such as control or camera or the like, converted into a format that by the language system 50 can be processed. In addition to the two devices mentioned as examples, this conversion can also include other elements, such as touchscreens, pitch and voice recognition devices, and other units.

Vorzugsweise ist vorgesehen, dass bei einer derartig multifunktionalen Möglichkeit einer Erkennung unterschiedlichster Informationen durch das Sprachsystem 50 eine Sicherheit dahingehend eingeführt ist, dass beispielsweise in einem Fahrzeug ein Fahrzeuginsasse zunächst den Erkennungsmodus aktivieren kann. Dies kann beispielsweise durch spezifische manuelle Betätigung eines expliziten Bedienelements vorgesehen sein. Dadurch kann einem unerwünschten Aktivieren des Sprachsystems vorgebeugt werden, da somit verhindert wird, dass jegliche Bewegung oder sonstige Information von einem technischen Gerät bereits stets als Eingabe von dem Sprachsystem 50 erkannt wird, was üblicherweise nicht permanent erwünscht ist.It is preferably provided that in such a multifunctional possibility of recognition of a wide variety of information by the language system 50 a security is introduced in that, for example, in a vehicle, a vehicle occupant can first activate the detection mode. This can be provided, for example, by specific manual actuation of an explicit operating element. This can prevent unwanted activation of the speech system, thus preventing any movement or other information from a technical device already being always input from the speech system 50 is detected, which is usually not permanently desired.

Es ist bei dem Kommunikationssystem 41 des Weiteren vorgesehen, dass zur Kommunikation zwischen einer natürlichen Person und einem künstlichen Sprachsystem 50, durch welches abhängig von einem Erkennen einer Eingabe der Person eine Antwort ausgegeben wird, zur Unterstützung der Ausgabe ein virtueller Avatar eingesetzt wird. Die Bewegung des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars werden an die als Antwort durch das Sprachsystem 50 auszugebenden Informationen gekoppelt. Dies ist beispielhaft in einer schematischen Darstellung gemäß 4 gezeigt, welche eine Integration der Steuerung von Ausspracheinformationen in Antworten des Sprachsystems 50 zeigt.It is in the communication system 41 further provided for communication between a natural person and an artificial language system 50 by which a response is output depending on a recognition of an input of the person, a virtual avatar is used to support the output. The movement of the avatar and / or the design of the avatar and / or the visually presented environment of the avatar are sent to the response by the speech system 50 coupled information to be output. This is exemplary in a schematic representation according to 4 shown integrating the control of pronunciation information in responses of the speech system 50 shows.

Vorzugsweise werden die Bewegung des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars von den als Antwort durch das Sprachsystem auszugebenden Informationen gesteuert, wobei insbesondere eine Synchronisierung, vorzugsweise eine automatische Synchronisierung, zwischen der Bewegung des Avatars und/oder der Gestaltung des Avatars und/oder der visuell dargestellten Umgebung des Avatars mit den als Antwort ausgegebenen Informationen durchgeführt wird.Preferably be the movement of the avatar and / or the design of the avatar and / or the visually presented environment of the avatar of the in response controlled by the language system information, wherein in particular a synchronization, preferably an automatic Synchronization, between the movement of the avatar and / or the Design of the avatar and / or the visual environment of the Avatars with the information output in response.

Beim Einsatz des Kommunikationssystems 41 in einem Fahrzeug, bei dem das künstliche Sprachsystem 50 zur Sprachausgabe sowie zur Visualisierung des virtuellen Wesens, dem Avatar, ausgebildet ist, sind eine Vielzahl von Informationen bedeutend und notwendig. Für die korrekte Steuerung der Sprachausgabe sind diesbezüglich Informationen zu hinterlegen, wie genau ein bestimmtes Wort oder eine Wortkombination ausgesprochen werden soll. Dies spielt insbesondere bei der Verwendung von Fremdwörtern oder Eigennamen eine bedeutende Rolle, um die korrekte Aussprache gewährleisten zu können.When using the communication system 41 in a vehicle where the artificial language system 50 are designed for voice output as well as for the visualization of the virtual being, the avatar, a large amount of information is important and necessary. For the correct control of the speech output, information about how exactly a particular word or a combination of words should be pronounced is to be stored there. This plays an important role in the use of foreign words or proper names in order to ensure the correct pronunciation.

Die Visualisierung und Steuerung eines virtuellen Wesens erfordert die Abstimmung mit den Inhalten, die durch dieses Wesen vermittelt werden sollen. Aus diesem Grund ist es wichtig, dass das Aussehen und die Bewegung sowie das virtuelle Umfeld des virtuellen Wesens durch den auszugebenden Inhalt gesteuert werden. Dies kann insbesondere dann erfolgen, wenn die Antwortalternativen des Sprachsystems 50 bereits die Steuerinformationen sowohl für das virtuelle Wesen als auch die korrekte Aussprache von Wörtern integrieren. Dies ist in 4 dargestellt, wobei hier die Integration von zumindest einer Regel 31 des Regelwerks 30 gezeigt ist und eine Verknüpfung mit der Sprachausgabe 52 des Sprachsystems 50 sowie mit einer Steuerung 53 des Avatars und einer Steuerung 54 der virtuellen Umgebung des Avatars gezeigt ist.The visualization and control of a virtual being requires coordination with the content that is to be conveyed by this being. For this reason, it is important that the appearance and movement as well as the virtual environment of the virtual being be controlled by the content to be output. This can be done especially if the answer alternatives of the language system 50 already integrate the control information for both the virtual essence and the correct pronunciation of words. This is in 4 shown here, with the integration of at least one rule 31 of the rules 30 is shown and a link with the speech output 52 of the language system 50 as well as with a controller 53 the avatar and a controller 54 the virtual environment of the avatar is shown.

Vorzugsweise wird eine Bewegung des Avatars oder eines Körperteils des Avatars mit einer Abfolge von durch das Sprachsystem 50 zu vermittelnden Informationen in einer Antwort abhängig von der Art der Informationen automatisch synchronisiert. Die korrekte phonetische Aussprache von Wörtern in dem Sprachsystem 50 wird vorzugsweise gespeichert und die Bewegung des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars wird an die korrekte phonetische Aussprache spezifisch geknüpft. Dadurch kann stets eine realitätsnahe Darstellung einer Handlung und/oder einer Aussprache erreicht werden.Preferably, a movement of the avatar or a body part of the avatar is performed with a sequence of through the speech system 50 information to be conveyed in a response automatically synchronized depending on the nature of the information. The correct phonetic pronunciation of words in the speech system 50 is preferably stored and the movement of the avatar and / or the design of the avatar and / or the visually presented environment of the avatar is specifically tied to the correct phonetic pronunciation. As a result, a realistic representation of an action and / or a pronunciation can always be achieved.

Vorzugsweise wird die Verknüpfung abhängig von einer von dem Sprachsystem 50 erkannten Eingabe automatisch durchgeführt und insbesondere abhängig von einer durch die natürliche Person durchgeführten Einstellung ermöglicht. Als Eingaben der Person können diesbezüglich spezifische Sprachen, wie Deutsch, Englisch oder dergleichen ausgewählt werden, wobei dann eine automatische Synchronisierung beispielsweise der Lippenbewegung des Avatars bei der Aussprache eines entsprechenden Wortes in dieser gewählten Sprache durchgeführt wird. Eine nicht zu der korrekten Aussprache eines Wortes passende Lippenbewegung des Avatars kann dadurch vermieden werden, wodurch eine wesentliche Verbesserung des Kommunikationssystems erreicht werden kann. Die Realitätsnähe kann dadurch wesentlich erhöht werden.Preferably, the association is dependent on one of the speech system 50 recognized input automatically and in particular made possible depending on a performed by the natural person setting. As inputs of the person, specific languages such as German, English, or the like may be selected in this regard, and then automatic synchronization of, for example, the lip movement of the avatar upon pronunciation of a corresponding word in that selected language is performed. A lip movement of the avatar that does not correspond to the correct pronunciation of a word can thereby be avoided, whereby a substantial improvement of the communication system can be achieved. The realism can be significantly increased.

Neben einer einfachen Lippenbewegung kann diesbezüglich auch die Bewegung jeglicher anderer Körperteile des Avatars auf die situationsbezogen erforderliche Ausgabe synchronisiert werden.In addition to a simple lip movement In this regard, the movement of any other parts of the body of the avatar can be synchronized to the situation-specific required output.

Auch dann, wenn keine explizite Sprachausgabe erfolgen soll, sondern lediglich eine visuelle Darstellung von Handlungen oder Abläufen, kann auch diesbezüglich eine exakte Synchronisierung erfolgen. So kann in diesem Zusammenhang beispielsweise auch eine Wartungs- oder Instandsetzungsanleitung an einen Fahrzeugnutzer visuell ausgegeben werden, indem beispielsweise auf einem Bildschirm ein akustisch nicht hinterlegter Text angezeigt wird, welcher durch die Bewegungen und Handlungen des visuell dargestellten Avatars demonstriert wird. Auch diesbezüglich kann die korrekte Bewegung und Handlung des Avatars zeitgenau auf den spezifisch gezeigten Text synchronisiert werden. In diesem Zusammenhang können beispielsweise Einstellungen von Systemen im Fahrzeug, wie beispielsweise Radio, CD-Spieler und dergleichen, oder auch selbstdurchzuführende Wartungsarbeiten, wie Kontrolle des Ölstands, Kontrolle der Scheibenwaschflüssigkeit und dergleichen erläutert werden.Also then, if no explicit speech should be made, but just a visual representation of actions or procedures, too in this regard an exact synchronization takes place. So in this context For example, a maintenance or repair manual to be visually output to a vehicle user, for example On a screen, an acoustically unmarked text is displayed becomes, which through the movements and actions of the visually represented Avatars is demonstrated. Also in this regard, the correct movement and action of the avatar timely to the specific shown Text to be synchronized. In this context, for example Settings of systems in the vehicle, such as radio, CD player and the like, or self-service, like checking the oil level, Check the windscreen washer fluid and the like explained become.

In diesem Zusammenhang kann dann auch die Synchronisierung des auf der Anzeigeeinheit dargestellten Umfelds des Avatars entsprechend angepasst werden und beispielsweise bei einer Erläuterung zur Füllstandskontrolle des Motoröls im Hintergrund des Avatars der Motorraum des spezifischen Fahrzeugtyps dargestellt, insbesondere relativ detailgetreu dargestellt, werden. Weitere Beispiele sind die Erläuterung der Durchführung eines Reifenwechsels oder eines Fremdstarts etc.. Dadurch kann für einen Nutzer bei relativ komplexen Abläufen oder Handlungen oder Einstellungen der rein textlichen und/oder akustischen Mitteilung auch die Darstellung in bewegten Bildern unterstützend ermöglicht werden, was sehr hilfreich sein kann.In this connection can then sync on the environment of the avatar displayed corresponding to the display unit be adapted and for example in an explanation for level control of the engine oil in the background of the avatar the engine compartment of the specific vehicle type represented, in particular relatively detailed represent, be. Further examples are the explanation the implementation a tire change or a third-party etc. etc. This allows for a user in relatively complex processes or acts or attitudes of purely textual and / or acoustic Communication also allows the presentation in moving images supporting what can be very helpful.

In 5 ist in einer schematischen Darstellung der Zugriff auf Werte eines Bordinformationssystems in einem Fahrzeug bei der Abarbeitung von Antwortalternativen des Sprachsystems 50 gezeigt.In 5 is a schematic representation of the access to values of an on-board information system in a vehicle during the processing of response alternatives of the speech system 50 shown.

Durch diese Struktur wird die Ausgabe von Informationen natürlicher Sprache mittels eines künstlichen Sprachsystems 50 ermöglicht, wobei in einer durch Wörter formulierten Antwort des Sprachsystems 50 zumindest ein Wert eines Zustandsparameters eines Geräts und/oder eines Ereignisses eingebunden und mitgeteilt wird. Als Gerät können beispielsweise technische Geräte in einem Fahrzeug vorgesehen sein, deren Zustandsparameter beispielsweise Betriebsparameter darstellen. Als Ereignisse können anderweitige Dinge vorgesehen sein, welche beispielsweise die Umgebung des Fahrzeugs oder Sportveranstaltungen oder dergleichen betreffen können. So kann beispielsweise als Zustandsparameter eines Ereignisses die Temperatur in der Fahrzeugumgebung eingebunden und mitgeteilt werden. Ebenso kann jedoch auch beispielsweise der Spielstand eines gegenwärtig stattfindenden oder bereits beendeten Fußballspiels als Zustandsparameter eines Ereignisses eingebunden und mitgeteilt werden. Dies sind lediglich beispielhafte Nennungen für Ereignisse und zugeordnete mögliche Zustandsparameter, wodurch lediglich verdeutlicht werden soll, welche Fülle von derartigen Möglichkeiten vorliegen und berücksichtigt werden können.Through this structure, the output of information of natural language by means of an artificial language system 50 allowing, in a worded answer of the language system 50 at least one value of a state parameter of a device and / or an event is integrated and communicated. As a device, for example, technical devices may be provided in a vehicle whose state parameters represent operating parameters, for example. As events, other things may be provided, which may concern, for example, the environment of the vehicle or sporting events or the like. For example, as a condition parameter of an event, the temperature in the vehicle environment can be integrated and communicated. Likewise, however, for example, the score of a currently held or already ended football match can be integrated and communicated as a state parameter of an event. These are merely exemplary mentions for events and associated possible state parameters, which merely clarifies the abundance of such possibilities that can be present and taken into account.

Vorzugsweise wird ein Wert eines Zustandsparameters durch einen Platzhalter in einer definierten in dem Sprachsystem 50 hinterlegten Antwortstruktur eingebunden. Insbesondere wird bei einer zu generierenden Antwort des Sprachsystems 50 ein gegebenenfalls zugeordneter Platzhalter gesucht und bei einem Vorhandensein eines Platzhalters der diesem Platzhalter zugeordnete Wert des Zustandsparameters automatisch angefordert.Preferably, a value of a state parameter is defined by a wildcard in a defined language system 50 embedded response structure embedded. In particular, in the case of a response to be generated by the speech system 50 an optionally assigned placeholder searched and automatically requested in the presence of a placeholder of this placeholder associated value of the state parameter.

Während der Verarbeitung von Ereignissen des Bordsystems, beispielsweise eines Bussystems, in einem Fahrzeug, die der multimodalen Eingabe des natürlich sprachlichen Sprachsystems zuzurechnen ist, kann der Zugriff auf Informationen aus den Bordinformationssystemen auch während der Generierung der Antwortalternative eine Rolle spielen. So können in Antworten aktuelle Werte und Stati des Fahrzeugs oder von Teilkomponenten davon eingebunden werden, um Informationen akustisch auszugeben. Dies kann beispielsweise die Ansage der aktuellen Geschwindigkeit oder der Motortemperatur sein.During the Processing events of the on-board system, for example one Bus system, in a vehicle that is the multimodal input of the Naturally linguistic system, access to Information from the on-board information systems also during the Generation of the answer alternative play a role. So can in Answers current values and statuses of the vehicle or subcomponents be integrated into it to output information acoustically. This can be, for example, the announcement of the current speed or the engine temperature.

Diese Eigenschaft kann insbesondere dann zum Tragen kommen, wenn ein physisches Anzeigeinstrument im Fahrzeug für die Ausgabe eines entsprechenden Werts vorgesehen ist.These Property can come into play especially if a physical Indicator in the vehicle for the output of a corresponding value is provided.

Wird bei der Verarbeitung einer derartigen Antwort ein entsprechender Platzhalter, welcher vorab definiert und hinterlegt wird, erkannt, wird der zu diesem Platzhalter gehörige Wert aus dem Bordinformationssystem ermittelt und eingebunden. Dies ist in 5 beispielhaft dargestellt. Dazu ist vorgesehen, dass dem Regelwerk 30 des natürlichsprachlichen Sprachsystems 50 zumindest eine Kommunikationsregel 55 zugeordnet ist, die wiederum zumindest eine Eingabealternative 56 sowie eine zugeordnete Antwortalternative 57 aufweist. Diese Antwortalternative 57 ist erweitert, indem ihr beispielsweise ein Platzhalter zugeordnet bzw. darin hinterlegt ist. Wird nun durch die natürliche Person eine entsprechende Benutzereingabe bzw. Eingabealternative 56 durchgeführt, so wird die zugeordnete Antwortalternative 57 generiert und erkannt, dass der erforderliche Platzhalter vorhanden ist. In diesem Zusammenhang wird der für den Platzhalter erforderliche Wert eines Zustandsparameters über eine Schnittstellenkomponente 58 abgefragt, welche wiederum mit dem Bordinformationssystem 59 kommuniziert und den entsprechenden Wert des Zustandsparameters für den Platzhalter abfragt und wieder für die Antwortausgabe weiterleitet.If, during the processing of such a response, a corresponding placeholder, which is defined in advance and deposited, is recognized, the value belonging to this placeholder is determined and integrated from the on-board information system. This is in 5 exemplified. For this it is provided that the rules 30 of the natural language language system 50 at least one communication rule 55 is assigned, in turn, at least one input alternative 56 and an associated answer alternative 57 having. This answer alternative 57 is extended, for example, by assigning or storing a placeholder. Now by the natural person a corresponding user input or input alternative 56 performed, then the associated answer alternative 57 generated and recognized that the required placeholder exists. In this context, the value required for the placeholder becomes an standparameters via an interface component 58 queried, which in turn with the onboard information system 59 communicates and queries the corresponding value of the state parameter for the placeholder and forwards it again for the response output.

Der Zugriff wird somit in Form eines Platzhalters in die Formulierung einer Antwort integriert. Die Einbindung des Werts des Platzhalters kann sowohl innerhalb eines Antworttextes der Fall sein, kann aber auch bereits bei der Auswahl einer Antwort erfolgen, wenn die Ausgabe einer Antwort mit einer spezifischen Bedingung verknüpft ist. Die Identifikation des Platzhalters mit dem Zugriff auf das Bordinformationssystem 59, die Ermittlung des gewünschten technischen Werts sowie die Abfrage und Weiterleitung dieses Werts erfolgen gemäß der Darstellung im Ausführungsbeispiel in 5 über die gesonderte Schnittstellenkomponente 58. Diese stellt den direkten Bezug zu den existierenden Bordsystemen her.The access is thus integrated in the form of a placeholder in the formulation of a response. The inclusion of the value of the placeholder can be the case both within a response text, but can also already be used in the selection of a response if the output of a response is linked to a specific condition. The identification of the placeholder with access to the on-board information system 59 , the determination of the desired technical value and the query and forwarding of this value carried out as shown in the embodiment in 5 via the separate interface component 58 , This establishes a direct relationship to the existing on-board systems.

Die Schnittstellenkomponente 58 kann insbesondere auch als Softwareapplikation, beispielsweise als Java-Applikation, ausgebildet werden.The interface component 58 In particular, it can also be designed as a software application, for example as a Java application.

Die Schnittstellenkomponente 58 ist so spezifiziert, dass sie im Systemverbund genau weiß, wo bestimmte Informationen abgelegt bzw. abgefragt werden können und wohin sie diese spezifisch weiterübertragen soll. Die Schnittstellenkomponente 58 ist somit ein wesentlicher Teil im Hinblick auf die präzise Auffindung, Abfrage und Übermittlung des Werts der Zustandskomponente, welche dem Platzhalter zugeordnet ist.The interface component 58 is specified in such a way that it knows exactly in the system group where certain information can be stored or queried and where it should transfer it specifically. The interface component 58 is thus an essential part with regard to the precise finding, retrieval and transmission of the value of the state component associated with the placeholder.

Durch die erläuterte Vorgehensweise kann ermöglicht werden, dass in statische Komponenten einer Antwort dynamische Teile eingefügt werden können, die darüber hinaus dynamisch angefragt werden können.By the explained Approach can be made be that in static components of a response dynamic parts added can be the above can be dynamically requested.

Claims (9)

Verfahren zur Kommunikation zwischen einer natürlichen Person und einem künstlichen Sprachsystem, durch welches abhängig von einem Erkennen einer Eingabe eine Antwort ausgegeben wird und zur Unterstützung der Ausgabe ein Avatar eingesetzt wird, wobei die Bewegung des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars an die als Antwort durch das Sprachsystem auszugebenden Informationen gekoppelt, und die Bewegung des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars mit den als Antwort auszugebenden Informationen automatisch synchronisiert werden, dadurch gekennzeichnet, dass bei einer akustischen Sprachausgabe des Sprachsystems die Bewegung der Lippen des Avatars mit der korrekten Aussprache der Wörter synchronisiert wird und die Lippenbewegung des Avatars für eine Mehrzahl von nationalen Sprachen spezifisch mit der für die jeweilige korrekte Aussprache von Wörtern der jeweiligen Sprache synchronisiert wird.A method for communicating between a natural person and an artificial speech system by which a response is output based on a recognition of an input and an avatar is used to assist the output, wherein the movement of the avatar and / or the design of the avatar and / or the visually presented environment of the avatar coupled to the information to be output in response by the speech system, and the motion of the avatar and / or the design of the avatar and / or the visually presented environment of the avatar are automatically synchronized with the information to be output in response, characterized that in an acoustic speech output of the speech system the movement of the lips of the avatar is synchronized with the correct pronunciation of the words and the avatar's lip movement for a plurality of national languages is specifically synchronized with that for the respective correct pronunciation of words of the respective one Language is synchronized. Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Bewegung des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars von den als Antwort durch das Sprachsystem auszugebenden Informationen gesteuert werden.Method according to claim 1, characterized in that that the movement of the avatar and / or the design of the avatar and / or the visually presented environment of the avatar of the as Answer controlled by the language system information to be output become. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass eine Bewegung des Avatars oder eines Körperteils des Avatars mit der Abfolge von durch das Sprachsystem zu vermittelnden Informationen in einer Antwort abhängig von der Art der Informationen automatisch synchronisiert wird.Method according to one of the preceding claims, characterized characterized in that a movement of the avatar or a body part of the avatar with the sequence of mediating through the language system Information in a response depends on the type of information is automatically synchronized. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass die korrekte phonetische Aussprache von Wörtern in dem Sprachsystem gespeichert wird und die Bewegung des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars an die korrekte phonetische Aussprache geknüpft wird.Method according to one of the preceding claims, characterized characterized in that the correct phonetic pronunciation of words in the language system is stored and the movement of the avatar and / or the design of the avatar and / or the visual environment of the avatar is tied to the correct phonetic pronunciation. Verfahren nach Anspruch 4, dadurch gekennzeichnet, dass die Verknüpfung abhängig von einer von dem Sprachsystem erkannten Eingabe automatisch durchgeführt wird.Method according to claim 4, characterized in that that the linkage dependent is performed automatically by an input recognized by the speech system. Verfahren nach Anspruch 4 oder 5, dadurch gekennzeichnet, dass die Verknüpfung abhängig von einer durch die Person durchgeführten Einstellung erfolgt.Method according to claim 4 or 5, characterized that the linkage dependent from a personal attitude. Verfahren nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, dass das Sprachsystem einem Infotainmentsystem in einem Fahrzeug zugeordnet wird und mit einem Fahrzeuginsassen kommunizieren kann.Method according to one of the preceding claims, characterized characterized in that the speech system is an infotainment system in assigned to a vehicle and communicate with a vehicle occupant can. Kommunikationssystem mit einer natürlichen Person und einem künstlichen Sprachsystem, welches zur Kommunikation mit der natürlichen Person ausgebildet ist und abhängig von einem Erkennen einer Eingabe zur Ausgabe einer Antwort ausgebildet ist, wobei zur Unterstützung der Ausgabe der Avatar einsetzbar ist, wobei die Bewegung des Avatars und/oder die Gestaltung des Avatars und/oder die visuell dargestellte Umgebung des Avatars an die als Antwort durch das Sprachsystem auszugebenden Informationen gekoppelt ist, dadurch gekennzeichnet, dass bei einer akustischen Sprachausgabe des Sprachsystems die Bewegung der Lippen des Avatars mit der korrekten Aussprache der Wörter synchronisiert ist und die Lippenbewegung des Avatars für eine Mehr zahl von nationalen Sprachen spezifisch mit der für die jeweilige korrekte Aussprache von Wörtern der jeweiligen Sprache synchronisiert ist.A communication system comprising a natural person and an artificial language system adapted to communicate with the natural person and responsive to recognition of an input for outputting a response, the avatar being usable to assist the output, the movement of the avatar and / or or the design of the avatar and / or the visually presented environment of the avatar is coupled to the information to be output in response to the speech system, characterized in that in an acoustic speech output of the speech system the movement of the lips of the ava tars is synchronized with the correct pronunciation of the words and the lip movement of the avatar for a plurality of national languages is specifically synchronized with that for the respective correct pronunciation of words of the respective language. Kommunikationssystem nach Anspruch 8, dadurch gekennzeichnet, dass das Sprachsystem einem Infotainmentsystem in einem Fahrzeug zugeordnet ist und mit einem Fahrzeuginsassen kommunizieren kann.Communication system according to claim 8, characterized in that that the speech system is an infotainment system in a vehicle is assigned and can communicate with a vehicle occupant.
DE200710042583 2007-09-07 2007-09-07 Method for communication between a natural person and an artificial speech system and communication system Active DE102007042583B4 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
DE200710042583 DE102007042583B4 (en) 2007-09-07 2007-09-07 Method for communication between a natural person and an artificial speech system and communication system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE200710042583 DE102007042583B4 (en) 2007-09-07 2007-09-07 Method for communication between a natural person and an artificial speech system and communication system

Publications (2)

Publication Number Publication Date
DE102007042583A1 DE102007042583A1 (en) 2009-03-12
DE102007042583B4 true DE102007042583B4 (en) 2010-12-09

Family

ID=40339975

Family Applications (1)

Application Number Title Priority Date Filing Date
DE200710042583 Active DE102007042583B4 (en) 2007-09-07 2007-09-07 Method for communication between a natural person and an artificial speech system and communication system

Country Status (1)

Country Link
DE (1) DE102007042583B4 (en)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102012213668A1 (en) * 2012-08-02 2014-05-22 Bayerische Motoren Werke Aktiengesellschaft Method and device for operating a voice-controlled information system for a vehicle
WO2014068788A1 (en) * 2012-11-05 2014-05-08 三菱電機株式会社 Speech recognition device
DE102017219955A1 (en) 2017-11-09 2019-05-09 Continental Automotive Gmbh System for automated driving with the assistance of a driver when performing a non-driving activity
DE102018222156A1 (en) * 2018-12-18 2020-06-18 Volkswagen Aktiengesellschaft Method, arrangement and use for generating a response in response to a voice input information

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10008226C2 (en) * 2000-02-22 2002-06-13 Bosch Gmbh Robert Voice control device and voice control method
DE10117410A1 (en) * 2001-04-06 2002-11-07 Daimler Chrysler Ag Method and device for outputting data about information of a motor vehicle
DE102006052897A1 (en) * 2005-11-11 2007-06-14 Volkswagen Ag Information e.g. vehicle data, device for use in motor vehicle, has display device, and processing device attached to storage that stores vehicle data, where vehicle data are displayed in partially animated manner via display device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10008226C2 (en) * 2000-02-22 2002-06-13 Bosch Gmbh Robert Voice control device and voice control method
DE10117410A1 (en) * 2001-04-06 2002-11-07 Daimler Chrysler Ag Method and device for outputting data about information of a motor vehicle
DE102006052897A1 (en) * 2005-11-11 2007-06-14 Volkswagen Ag Information e.g. vehicle data, device for use in motor vehicle, has display device, and processing device attached to storage that stores vehicle data, where vehicle data are displayed in partially animated manner via display device

Also Published As

Publication number Publication date
DE102007042583A1 (en) 2009-03-12

Similar Documents

Publication Publication Date Title
EP1986889B1 (en) Device and method for interactive information dispensing and/or assistance for the user of a motor vehicle
EP2200858A1 (en) Vehicle system comprising an assistance functionality
EP1961606A2 (en) Device and method for interactive information display and/or support for the user of a motor vehicle
DE102015224555A1 (en) Method for operating a vehicle
DE10008226C2 (en) Voice control device and voice control method
DE102006036338A1 (en) Method for generating a context-based speech dialog output in a speech dialogue system
DE102007042583B4 (en) Method for communication between a natural person and an artificial speech system and communication system
EP2026328A1 (en) Method for multimodal control of at least one device in a motor vehicle
DE102006057278A1 (en) Method for the possibility of adapting the driving situation of a vehicle run by a driver
EP1121684B1 (en) Method and device for information and/or messages by means of speech
DE102007042580A1 (en) Person i.e. passenger, and artificial language system communication enabling method for vehicle, involves recognizing acoustic and/or textual input of person by language system and different information as input by system
DE102019220205A1 (en) Adaptive adjustment of an optical output to the eyesight
DE102010051833A1 (en) Method for performing interaction of vehicle system with user in motor vehicle, involves satisfying logical state-specific transition condition of initial state, if evaluated user input coincides with predetermined user input
DE102007042579A1 (en) Method for producing language grammar for artificial language system to communicate with natural person, involves arranging input of person and corresponding output of language system to communicate sentence
DE102007042581A1 (en) Method for display of information in natural language, involves integrating value of state parameter deposited in language system with response structure, and searching assigned retainer in response of artificial language system
EP3115886B1 (en) Method for operating a voice controlled system and voice controlled system
DE102008025532B4 (en) A communication system and method for performing communication between a user and a communication device
DE102007042582A1 (en) Dialogue structure i.e. infotainment system substructure, developing method for artificial language system in vehicle for communication with passenger, involves graphically plotting defined communication rules and connection between rules
DE102008045123B4 (en) Assistance and information device in a motor vehicle and method for outputting information
EP1826687B1 (en) Method and device for program supported handling of technical documentation
DE102018221712B4 (en) Method for operating an interactive information system for a vehicle, and a vehicle
EP4124211B1 (en) Method and device for generating voice outputs in a vehicle
DE102012006680A1 (en) Method for contextual information retrieval
DE102023004112A1 (en) AI-assisted voice control of a vehicle infotainment system
DE102018200915A1 (en) Method and system for visualizing a vehicle condition

Legal Events

Date Code Title Description
OM8 Search report available as to paragraph 43 lit. 1 sentence 1 patent law
OP8 Request for examination as to paragraph 44 patent law
8364 No opposition during term of opposition
R020 Patent grant now final

Effective date: 20110309