EP3791386A1 - Efficient dialogue configuration - Google Patents

Efficient dialogue configuration

Info

Publication number
EP3791386A1
EP3791386A1 EP19726908.7A EP19726908A EP3791386A1 EP 3791386 A1 EP3791386 A1 EP 3791386A1 EP 19726908 A EP19726908 A EP 19726908A EP 3791386 A1 EP3791386 A1 EP 3791386A1
Authority
EP
European Patent Office
Prior art keywords
dialog
protocol
dialogue
keyword
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
EP19726908.7A
Other languages
German (de)
French (fr)
Inventor
Christoph Neumann
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Gk Easydialog
Original Assignee
Gk Easydialog
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Gk Easydialog filed Critical Gk Easydialog
Publication of EP3791386A1 publication Critical patent/EP3791386A1/en
Withdrawn legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/18—Speech classification or search using natural language modelling
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L2015/088—Word spotting
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Definitions

  • the present invention is directed to a method for efficient dialog design and interpretation in a computerized automated dialogue system.
  • the present invention provides u. a. the advantages that the workload is reduced when creating dialogs and thus the error rate. Moreover, it is possible to consider a context of partial dialogues and to dynamically create a dialogue depending on this context. Furthermore, the proposed method can initiate a dialogue with a human user himself.
  • the present invention further relates to a correspondingly configured system arrangement and to a computer program product with control commands which execute the method or operate the system arrangement.
  • US 2015/0134337 A1 shows a conversation-based search system with a conversation scenario.
  • DE 10 2012 019 178 A1 shows a computer program product for interpreting a user input in order to execute a task on a computing device having at least one processor.
  • DE 60 030 920 T2 discloses methods of collecting data associated with a voice of a user of a speech system in conjunction with a data warehouse.
  • NLP Natural Language Processing
  • NLP Natural Language Translation
  • dialog systems are known in the prior art in which a machine system interacts with a human user and receives voice commands from the human user. Responses to these commands are then initiated and the user receives a corresponding response.
  • Such systems are known, for example, under the registered trademark "Alexa” or "Siri”.
  • Alexa or "Siri”.
  • infotainment industry such systems are used for example in the automotive sector, where the user can control a navigation system or other functions linguistically.
  • the prior art also shows devices which, for example, serve to convert sound to text and back again.
  • Such systems are generally referred to as “speech recognition" systems. This can be done in such a way that the human user speaks a sentence and the recorded acoustic signals are then assigned to a text by means of pattern matching. It is also known to provide a text which is then converted into natural acoustic speech. This technique is commonly referred to as "text-to-speech".
  • NLP Natural Language Processing NLP
  • dialog systems are implemented in such a way that the user gives an acoustic or textual input, which is converted into a text. Then, a corresponding source code is controlled, which controls the further dialogue. In such a dialog control or a dialog protocol is deposited, which answer is given to which question. In addition, it can be specified which action is executed on which command. For this purpose, a separate source code is provided for each dialog, which hard-coded describes the dialogue history.
  • the proposed method should be constructed so dynamically that dialogue modules can be selected and used at runtime.
  • a method for efficient dialog design and interpretation in a computer-aided, automated dialog system comprising storing a plurality of dialog protocols for at least one keyword, the dialog protocols each specifying a dynamic sequence of a dialog, a selection of a dialog protocol in Dependency of at least one keyword provided at runtime, assignment of text modules to dialog units of the dialog protocol, and execution of the dialog protocol at runtime.
  • the method steps can be carried out iteratively and / or in a different order.
  • the individual steps can have sub-steps.
  • the storage of a plurality of dialog protocols can be iterative, and new dialog protocols can always be entered.
  • the assignment of text modules to dialogue units of the dialog protocol can be carried out at runtime, ie during the dialog, or even beforehand. Executing the dialog protocol at runtime involves several sub-steps, such as those provided for the speech recognition process or natural language understanding process.
  • the proposed method comprises known techniques, which have not been mentioned here, since they can be implemented on the basis of conventional components.
  • the user typically inputs an acoustic question or answer and then also receives an acoustic answer or question.
  • the acoustic signals ie the language
  • an output text is also converted back to speech.
  • a dialogue system is created which communicatively interacts with the user.
  • the invention is also aimed at textual dialogue systems, eg chatbots.
  • the proposed method is an efficient method since, according to the invention, a decoupling of the dialog protocols from the individual text modules takes place. In this way it is possible that dialogs do not have to be hard-coded and thus have to be created individually.
  • the disadvantage of the state of the art is overcome that according to conventional methods the dialog design proceeds in such a way that the text modules are already embedded in the source code.
  • Keywords can also be generated by the dialog protocol depending on the context (then no external control command is required). For example, twice the question was misunderstood, then automatically forwarded to a replacement question.
  • the proposed method is computer-aided and automated in such a way that the proposed method can interact automatically with a user and thus the proposed system can also design dialogues themselves based on the dialogue protocols. Consequently, all procedures computer-based, whereby only the user provides an acoustic or textual input.
  • dialog protocols are stored for at least one keyword each time.
  • dialogue protocols are created which, for example, provide activities as dialog units that are linked with one another in terms of time or logic.
  • the dialog protocols thus do not specify any conventional rigid sequences, but rather specify when which actor performs an activity without specifying which text modules are used. This overcomes the disadvantage of the prior art that a linking of dialog logic and text modules takes place.
  • the dialog protocols specify, for example, that in the case of a specific user input, a request is made by the dialog system.
  • dialog protocols may specify that if the user suggests a topic, corresponding keywords are extracted and then the dialog system has to ask a question. If it is detected that the user himself is asking a question, the dialog protocol provides that the system looks for and provides a corresponding answer.
  • a dialog protocol corresponds to a dynamic process of a conversation or dialogue between the dialog system and the user.
  • dialog protocols are provided in advance, d. H. before the runtime, and are therefore already available if the dialog is started.
  • the dialog protocols can be described as abstract because they have no concrete text modules, but rather provide which dynamic flow of the dialogue should take.
  • the individual dialog protocols are assigned keywords, ie one or more keywords.
  • a keyword may be referred to as a topic with respect to which the dialogue is conducted. So
  • conventional methods can be used which select one sentence from a particularly prominent noun.
  • the user may ask for the weather and then the proposed method will be able to extract by conventional methods that the user will actually ask for the weather.
  • the pitch of the input can be taken into account and then recognized whether this is a statement or a question. If it is detected that there is a question concerning the weather, the corresponding keyword is "Weather" and a dialogue protocol is selected which provides that the dialogue system asks a question and then an expected response from the user Answered question at the beginning.
  • the proposed procedure can provide for a question to be posed by the dialogue system, which refers to a specific location. Then the text module is assigned "Where would you like to know the current weather?". The dialog protocol may then provide that the user has to respond. If a corresponding answer is provided, the location can be extracted from this and, in turn, provision can then be made for the dialogue system to provide a response. At this point in time, the dialogue system has the keyword "weather” and then, for example, the location "Munich", which is provided by the user.
  • the system can perform a database query using a provided interface, and then the dialog protocol can provide that the dialog system must respond and terminate the procedure after the response.
  • the dialog system can carry out the weather forecast and in this case read out the weather parameters from a database provide. Since typically the request should be satisfactorily answered, the process can terminate.
  • a partial dialog protocol can provide a branch to another partial dialog protocol, and then, for example, a dialog protocol for the keyword "excursion destination" can be selected. If the dialogue system has thus answered the request for the weather, the dialogue log can branch out in such a way that a partial dialogue protocol is selected which asks the user whether he wants to make an excursion in fine weather.
  • the process described above then repeats itself and after a corresponding database query the user can be proposed suitable activities that fit both the topic "weather” as well as the topic "Munich”. In doing so, the system, as a location, opens up the excursion destination "Munich" automatically from the previous dialogue process, without the user having to say it again. In this way, a dynamic process of a dialog is created and the dialog protocol is decoupled from the actual text modules.
  • text modules are also assigned to diagnostic units of the dialogue protocol, which can be done either at runtime or in advance.
  • the runtime is always the execution time of the dialog itself.
  • the disadvantage is overcome that the provided source code provides both the text modules and the individual activities, ie the dialog units.
  • the dialogue units of the dialogue protocol can be defined as abstract building blocks, which provide that a dialogue system must ask a question. How the question is to be concretely formulated is indicated by the corresponding text module.
  • This provides a further advantage over the prior art, namely that the proposed method is particularly language-independent. This allows generic dialog protocols to be created using text modules in all languages. So a dialogue protocol can only be used with text modules of the German language.
  • an existing dialog protocol including text modules can be ported unchanged into a new development environment (without rewriting the source code or even rewriting it into another programming language) as long as a DCS (Dialog Control Script) is available in the development environment.
  • DCS Dialog Control Script
  • the dialog protocol Since the dialog protocols have now been selected and a single dialog protocol is available, including the text modules, the dialog can now be carried out or the dialog protocol can be executed. Thus, the user is guided through the dynamic dialogue by means of the dialogue protocol and always receives corresponding information or questions, if the dialog protocol so provides. Since the dialog protocol can also provide partial protocols, it is always possible to branch to another partial dialog protocol if the user gives an appropriate input. If, for example, the user has not been sufficiently informed, then another dialog can be entered which specifies how the user can otherwise be helped. In turn, the corresponding text modules are selected and presented to the user. According to one aspect of the present invention, the dialog protocol specifies a presence of dialog units and a dialog history that places the dialog units in temporal succession.
  • a dialogue history can be provided that is independent of text modules per se.
  • the dialog units only provide when the proposed method should act and when the user should act. In addition, it can be specified which activity is specifically intended as a diagnostic unit.
  • a dialogue unit may be an input by the user or by the dialogue system.
  • a dialog unit can provide control commands that are to be processed at a specific point within the dialog.
  • two dialog units can be cascaded one after the other, both of which must be operated by the dialog system, wherein first a database query is made in the first dialog unit, and in the second diagnostic unit it is specified that the read information is provided to the user got to.
  • the temporal sequence can be a flowchart, whereby a logical sequence can generally also be specified as an alternative to the temporal sequence. So it can be provided that always a user input has to wait and then has to be answered. It is also possible that the dialogue units provide that the dialogue system initiates the dialogue and then the user replies.
  • the diagnostic units are stored as alphanumeric parameters. This has the advantage that a memory-efficient and simple human-readable form can be selected, in which the dialog units are stored. Thus, the individual dialog units can be outsourced to a separate file and provided to the proposed method. According to a further aspect of the present invention, the diagnostic units are stored in tabular form. This has the advantage that the activities or actors can be entered at the columns and in the rows a continuous index can be entered, to which a partial logging protocol can refer. Thus, a dialog can be dynamically created in such a way that the respective index is addressed, and at the end of the partial dialog protocol, another index is dynamically referenced, which is then called up and another sub-dialog can be executed. Thus, the individual lines specify a partial dialogue protocol, which can be composed dynamically.
  • the keyword is provided by means of a user input and / or by a control command.
  • a control command This has the advantage that both the user can make an acoustic or textual input, from which the keyword is extracted, or else control commands are executed, which then select the appropriate dialog protocol.
  • a macro can be created, which in turn comprises a plurality of control commands. These control commands are set up to provide the keyword.
  • a combination of user input and control command can also take place in such a way that the user selects a first keyword and the control command for this purpose models a context, whereupon the corresponding dialog protocol is selected.
  • the keyword is provided using technology to understand a natural language.
  • This has the advantage that already installed or implemented components can be used for so-called "natural language understanding".
  • a user it is thus possible for a user to make a user input acoustically, to convert this textually, and then to use one or more key words from this acoustic input. Words will be extracted.
  • Another inventive aspect of the NLU is a mapping of a set of different matchable ones
  • Keywords on a keyword for example, house, buildings, skyscrapers are all mapped to "house" or age: 43, 49 is both mapped to age group 40-49. This includes in particular “false” speech recognition results. So in English “cups” are pronounced in many dialects almost like “cats”, so for example “cats” is used as trigger for a system where you want to recognize "cups”.
  • a dialog unit specifies an activity of an actor within the dialog protocol. This has the advantage that the dialog unit can specify whether a question, an answer or a control command is now to be provided.
  • Corresponding actors are either the user with whom the dialogue is conducted or the dialogue system. In this case, other actors can be used, such as an external database, which is to be addressed by means of a control command.
  • the dynamic sequence of the dialogue describes partial dialogs which are compiled on the basis of branches.
  • This has the advantage that the dialog can be created dynamically at runtime and then corresponding sub-dialog protocols can be used.
  • the user input can be waited for and, depending on the user input, another sub-dialog can again be selected.
  • a branch depending on a user input and / or by a Control command selected has the advantage that not only the acoustic or textual user inputs can be used but, on the contrary, a control command, such as a database query, can also be initiated by means of a user input.
  • each diagnostic unit specifies an activity of the dialog system, an activity of a user, the execution of control commands and / or a termination of the method.
  • This has the advantage that the individual activities can be specified, which are not only directed to the dialog system itself or the human user, but rather it can also be proposed which control commands are executed to answer the user input.
  • it can be specified at what point in time the dialog protocol stipulates that the method terminates because the user request has been successfully answered.
  • executing the dialog protocol at runtime includes operating an audio conversation between the dialog system and a user.
  • This has the advantage that conventional components can be used which convert an acoustic input into text and then convert a textual output back into acoustic information.
  • the method is carried out on a mobile terminal, in a vehicle or on a stationary computing unit.
  • a stationary arithmetic unit may be, for example, a conventional personal computer of a user.
  • When used in the vehicle is typically one User interface for use, which guides the driver through a dialogue.
  • interfaces to existing Internet based services are provided. This has the advantage that software components already implemented can be reused and Internet services can be queried, which provide information for answering the user requests or provide services such as shopping facilities.
  • a system arrangement for efficient dialog design and interpretation in a computer-aided Dialogsys- tem comprising a memory unit configured to store a plurality of dialog protocols to at least one keyword, the dialogue protocols each specify a dynamic sequence of a dialogue, set up a computer for selecting a dialog protocol as a function of at least one keyword provided at runtime, another arithmetic unit configured for assigning text modules to dialog units of the dialog protocol, and a dialog unit configured for executing the dialog protocol at runtime.
  • the object is also achieved by a computer program product with control commands which implement the proposed method or operate the proposed system arrangement.
  • the system arrangement provides structural features which functionally correspond to the individual process steps.
  • the system arrangement is for carrying out the proposed method.
  • the proposed method is again set up to operate the system arrangement.
  • the method steps can also be used as structural features of the system arrangement. be formed.
  • the system arrangement includes devices that are actually set up as already stated, and does not merely cover generic components for suitability. Further advantageous embodiments will be explained in more detail with reference to the attached figures. Show it:
  • FIG. 2 shows a system arrangement for efficient dialog design and interpretation according to one aspect of the present invention
  • FIG. 3 shows another example of a system arrangement for efficient dialog design and interpretation according to another aspect of the present invention
  • FIG. 5 is a schematic flow diagram of the proposed method for efficient dialog design and interpretation according to another aspect of the present invention.
  • Figure 1 shows on the left side a human user handing an input to a speech recognition system.
  • a voice recognition system is a Speech Recognition Service (SRS) system.
  • SRS Speech Recognition Service
  • the individual dialogs are implemented separately, and a flow logic is specified here, which contains corresponding text modules. This is particularly disadvantageous because the dialog protocols must be linked to the text modules. Here- By no separate maintenance can be done and there is an increased technical effort.
  • FIG. 2 shows an adaptation of the system according to FIG. 1 and provides a further component, namely a selection unit, for example a "Dialog Control Script" unit DCS.
  • a selection unit for example a "Dialog Control Script" unit DCS.
  • This unit precedes the text modules on the right-hand side, and then the corresponding dialog can be selected at runtime and the text modules on the right-hand side merely have to be integrated into the system.
  • the disadvantage is overcome that, as shown in FIG. 1, the dialog protocols are not stored on the right-hand side in the three schematic units together with text modules, but rather the dialog protocols are stored in the upstream unit DCS and from the right Page, only the individual text blocks need to be read.
  • the individual dialog protocols are not stored in the DCS but are called / read dynamically / at runtime by the DCS.
  • the additive component creates DCS specific dialog profiles and then selects further parameters from the right side.
  • PVD stands for Parameter Voice Dialog, for example PVD1, PVD2 and PVD3.
  • FIG. 3 shows a corresponding system according to the invention, wherein on the left-hand side above a user request, a so-called "user request” UR, which is transmitted to an interpretation component, which is referred to herein as the "Natural Language Understanding” component NLU. Then, an answer or a question is generated, which takes place in a further component, which in the present case is referred to as "System Answer / Prompt" SA / P. Then, the method can terminate, which is marked on the right side by the corresponding arrow to the outside, or it is again a transmission of the textual response to the so-called “Voice Service” VS, which in turn the textual output in speech converts and provides to the user, who can then make a user input again. The reverse direction is also provided in this figure.
  • the use case - "system asks, user answers” (voice sur vey) is advantageous.
  • the use of the voice service is not mandatory
  • dialog protocol including dialog units which specify the dialog procedure.
  • a start dialog unit is shown on the top left, which then branches to the first dialog unit.
  • a user input can be obtained and, depending on the response provided, either the dialog unit 5 or 21 is referenced.
  • the corresponding dialog units can be stored in tabular form, whereby the numerical index can be a row number.
  • each box shown corresponds to a dialog unit assigned to an actor.
  • the dialog unit 11 is provided by a user, and in a subsequent dialog unit, the dialogue is terminated by the proposed dialog system.
  • the two arrows on the left illustrate that even more dialog units can be provided and that the proposed example according to FIG. 4 is merely a section of a larger-scale dialogue protocol. Since more than two branches are possible as well as diagonal steps in another dialog branch, a branch from 11 to 2 is also possible. All this contributes to a good user experience.
  • FIG. 5 shows a schematic flow diagram of a method for efficient dialog design and interpretation in a computer-aided, automated dialog system, comprising storing 100 a plurality of dialog protocols for at least one keyword each, the dialog protocols each specifying a dynamic sequence of a dialog. ren, selecting 101 a dialog protocol depending at least a keyword provided at runtime, an association 103 of text modules to dialogue units of the dialog protocol, and an execution 104 of the dialog protocol at runtime.
  • the components of a dialog to be parameterized in a voice dialog system and not hard-coded, and dialog units to be unambiguously classified by indexes, which makes it possible for the source code or the script to remain unchanged, and new dialogues can be displayed as parameter tables, and dialogs can also be displayed by a voice dialog system
  • Development environment can be ported in the other or made accessible via interfaces.
  • the software does not have to be changed and multi-part or recursive dialogs can be carried out, in particular allowing the machine to ask and the user to answer.
  • the control program itself must, according to one aspect of the present invention, be ported once per new development environment, but not the DP.
  • the machine first asks, and then the user answers, and finally the response is permanently stored (via a control command).
  • This allows the simple implementation of applications using this dialogue structure, in particular voice surveys and voice data collections.
  • Dialog history and user input can also be stored permanently (on disk or in a database), which is beneficial for voice surveys / data collections.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • User Interface Of Digital Computer (AREA)
  • Communication Control (AREA)
  • Machine Translation (AREA)

Abstract

The invention relates to a method for an efficient dialogue configuration and interpretation in a computer-supported automated dialogue system. The invention offers, inter alia, the advantage that the work complexity when generating dialogues, and thus also the error propensity, is reduced. Furthermore, it is possible to take the context of sub-dialogs into consideration and dynamically generate a dialogue depending on said context. Furthermore, the method can automatically initiate a dialogue with a human user. The invention further relates to a correspondingly designed system assembly and to a computer program product with control commands which carry out the method or operate the system assembly.

Description

Effiziente Dialoqqestaltunq  Efficient Dialoqqestaltunq
Die vorliegende Erfindung ist gerichtet auf ein Verfahren zur effizienten Dia- loggestaltung und Interpretation in einem rechnergestützten, automatisierten Dialogsystem. Die vorliegende Erfindung bietet u. a. die Vorteile, dass bei der Erstellung von Dialogen der Arbeitsaufwand reduziert wird und somit auch die Fehleranfälligkeit. Darüber hinaus ist es möglich, einen Kontext von Teildialogen zu berücksichtigen und in Abhängigkeit dieses Kontextes dy- namisch einen Dialog zu erstellen. Ferner kann das vorgeschlagene Verfah- ren einen Dialog mit einem menschlichen Benutzer selbst initiieren. Die vor- liegende Erfindung betrifft ferner eine entsprechend eingerichtete Systeman- ordnung sowie ein Computerprogrammprodukt mit Steuerbefehlen, welche das Verfahren ausführen bzw. die Systemanordnung betreiben. The present invention is directed to a method for efficient dialog design and interpretation in a computerized automated dialogue system. The present invention provides u. a. the advantages that the workload is reduced when creating dialogs and thus the error rate. Moreover, it is possible to consider a context of partial dialogues and to dynamically create a dialogue depending on this context. Furthermore, the proposed method can initiate a dialogue with a human user himself. The present invention further relates to a correspondingly configured system arrangement and to a computer program product with control commands which execute the method or operate the system arrangement.
US 2015/ 0134337 A1 zeigt ein konversationsbasiertes Suchsystem mit ei- nem Konversationsszenario. US 2015/0134337 A1 shows a conversation-based search system with a conversation scenario.
DE 10 2012 019 178 A1 zeigt ein Computerprogrammprodukt zum Interpre- tieren einer Benutzereingabe, um einen Task auf einer mindestens einen Prozessor aufweisenden Rechenvorrichtung auszuführen. DE 10 2012 019 178 A1 shows a computer program product for interpreting a user input in order to execute a task on a computing device having at least one processor.
DE 60 030 920 T2 zeigt Verfahren zum Sammeln von Daten, die einer Stimme eines Benutzers eines Sprachsystems zugeordnet sind, in Zusam- menhang mit einem Data-Warehouse bzw. Datenreservoir. DE 60 030 920 T2 discloses methods of collecting data associated with a voice of a user of a speech system in conjunction with a data warehouse.
DE 11 2016 003 335 T5 zeigt Systeme für die Verarbeitung von natürlicher Sprache, Natural Language Processing NLP, und insbesondere NLP- Systeme, die Systeme für die Generierung von natürlicher Sprache, Natural Language Generation NLG, beinhalten, welche wiederum Systeme für die Übersetzung von natürlicher Sprache, Natural Language Translation NLT, Systeme für die Verarbeitung von natürlich sprachlichen Fragen und Antwor- ten, Natural Language Processing Question & Answer NLP Q&A, Systeme für Dialoge in natürlicher Sprache und dergleichen mehr beinhalten. DE 11 2016 003 335 T5 shows Natural Language Processing (NLP) systems and, in particular, NLP systems that incorporate Natural Language Generation (NLG) generation systems, which in turn provide systems for the Natural language translation, Natural Language Translation NLT, natural language processing systems and responses, Natural Language Processing Question & Answer NLP Q & A, natural language dialog systems and the like.
Aus dem Stand der Technik sind sogenannte Dialogsysteme bekannt, wobei ein maschinelles System mit einem menschlichen Benutzer interagiert und Sprachbefehle des menschlichen Benutzers entgegennimmt. Auf diese Be- fehle werden sodann Reaktionen initiiert und der Benutzer erhält eine ent- sprechende Antwort. Solche Systeme sind beispielsweise unter der einge- tragenen Marke„Alexa“ oder„Siri“ bekannt. Neben der Infotainmentbranche finden solche Systeme beispielsweise im Automobilbereich Einsatz, wo der Benutzer ein Navigationssystem oder andere Funktionen sprachlich steuern kann. So-called dialog systems are known in the prior art in which a machine system interacts with a human user and receives voice commands from the human user. Responses to these commands are then initiated and the user receives a corresponding response. Such systems are known, for example, under the registered trademark "Alexa" or "Siri". In addition to the infotainment industry such systems are used for example in the automotive sector, where the user can control a navigation system or other functions linguistically.
Der Stand der Technik zeigt ferner Vorrichtungen, welche beispielsweise der Umwandlung von Schall in Text und wieder zurück dienen. Solche Systeme werden generell als„Speech Recognition“-Systeme bezeichnet. Dies kann derart erfolgen, dass der menschliche Benutzer einen Satz spricht und die aufgenommenen akustischen Signale sodann mittels Pattern Matching ei- nem Text zugeordnet werden. Es ist auch bekannt, einen Text bereitzustel- len, der sodann in natürliche akustische Sprache umgewandelt wird. Dieses Verfahren wird generell als„Text-To-Speech“ bezeichnet. The prior art also shows devices which, for example, serve to convert sound to text and back again. Such systems are generally referred to as "speech recognition" systems. This can be done in such a way that the human user speaks a sentence and the recorded acoustic signals are then assigned to a text by means of pattern matching. It is also known to provide a text which is then converted into natural acoustic speech. This technique is commonly referred to as "text-to-speech".
Darüber hinaus ist ein Interpretieren von Text bekannt, was beispielsweise im Rahmen des sogenannten„Natural Language Understanding“ erfolgt. Solche Verfahren ermöglichen es, dass aus einem bestehenden Textstück Schlüsselwörter extrahiert werden und sodann weiterverarbeitet werden. Darüber hinaus sind Techniken der natürlichen Sprachverarbeitung bekannt, was auch als Natural Language Processing NLP bekannt ist. Herkömmliche Dialogsysteme werden derart implementiert, dass der Benut- zer eine akustische oder textliche Eingabe gibt, die in einen Text umgewan- delt wird. Sodann wird ein entsprechender Quellcode angesteuert, welcher den weiteren Dialog steuert. In einer solchen Dialogsteuerung bzw. einem Dialogprotokoll ist hinterlegt, welche Antwort auf welche Frage gegeben wird. Darüber hinaus kann angegeben sein, welche Aktion auf welchen Befehl ausgeführt wird. Hierzu wird für jeden Dialog ein eigener Quelltext bereitge- stellt, welcher hartcodiert den Dialogverlauf beschreibt. Solche Bausteine, die einen Dialog beschreiben, haben den Nachteil, dass hier der komplette Dialog modelliert werden muss und insbesondere auch die bereitgestellten Textbausteine hinterlegt werden müssen. Ein solcher Dialog läuft starr ab, sobald er neu gestartet wird. Somit ist es nur schwer möglich, ein Kontext- wissen einfließen zu lassen, und der Dialog läuft typischerweise jedesmal gleich ab. In addition, an interpretation of text is known, which takes place, for example, in the context of the so-called "Natural Language Understanding". Such methods allow key words to be extracted from an existing piece of text and then further processed. In addition, natural language processing techniques are known, also known as Natural Language Processing NLP. Conventional dialog systems are implemented in such a way that the user gives an acoustic or textual input, which is converted into a text. Then, a corresponding source code is controlled, which controls the further dialogue. In such a dialog control or a dialog protocol is deposited, which answer is given to which question. In addition, it can be specified which action is executed on which command. For this purpose, a separate source code is provided for each dialog, which hard-coded describes the dialogue history. Such modules that describe a dialog have the disadvantage that here the complete dialog must be modeled and in particular also the provided text modules have to be stored. Such a dialogue will run rigidly as soon as it is restarted. Thus, it is difficult to incorporate contextual knowledge, and the dialogue is typically the same each time.
Darüber hinaus besteht der Nachteil, dass solche einzelnen fest codierten Dialoge aufwändig zu implementieren sind, da bezüglich jeder Anfrage und jeder Dialogverzweigung ein eigener Dialog vorab erstellt werden muss. So- mit ergibt sich ein weiteres Problem, nämlich dass hierzu ein umfangreicher Quellcode entsteht, der entsprechend getestet werden muss. Dieses Testen ist arbeitsaufwändig und zudem potenziell fehleranfällig. Zudem empfindet oftmals der Benutzer keinen intuitiven Dialogverlauf, da die Dialoge bereits vorab fest vorgegeben sind. In addition, there is the disadvantage that such individual hard-coded dialogs are complicated to implement, since with respect to each request and each dialog branch a separate dialog must be created in advance. This raises another problem, namely that an extensive source code is created for this purpose, which must be tested accordingly. This testing is labor intensive and potentially error prone. In addition, the user often does not experience an intuitive dialogue process, since the dialogues are already predefined in advance.
Es ist daher eine Aufgabe der vorliegenden Erfindung, ein verbessertes Ver- fahren zur effizienten Dialoggestaltung und Interpretation vorzuschlagen, welches es ermöglicht, dass dynamische Dialoge entstehen, welche in Ab- hängigkeit einer Benutzereingabe individuell verlaufen können. Das vorge- schlagene Verfahren soll derart dynamisch aufgebaut sein, dass Dialogbau- steine zur Laufzeit ausgewählt und verwendet werden können. Darüber hin aus ist es eine Aufgabe der vorliegenden Erfindung, eine entsprechend ein- gerichtete Systemanordnung bereitzustellen sowie ein Computerprogramm- produkt mit Steuerbefehlen, welche das vorgeschlagene Verfahren imple- mentieren bzw. die vorgeschlagene Systemanordnung betreiben. It is therefore an object of the present invention to propose an improved method for efficient dialogue design and interpretation, which makes it possible to create dynamic dialogs which can run individually as a function of a user input. The proposed method should be constructed so dynamically that dialogue modules can be selected and used at runtime. Moreover, it is an object of the present invention to provide a correspondingly directed system arrangement as well as a computer program product with control commands which implement the proposed method or operate the proposed system arrangement.
Die Aufgabe wird gelöst mit den Merkmalen des Patentanspruchs 1. Weitere vorteilhafte Ausgestaltungen sind in den Unteransprüchen angegeben. The object is solved with the features of claim 1. Further advantageous embodiments are specified in the dependent claims.
Demgemäß wird ein Verfahren zur effizienten Dialoggestaltung und Interpre- tation in einem rechnergestützten, automatisierten Dialogsystem vorgeschla- gen, aufweisend ein Abspeichern einer Mehrzahl von Dialogprotokollen zu jeweils mindestens einem Schlüsselwort, wobei die Dialogprotokolle jeweils eine dynamische Abfolge eines Dialogs spezifizieren, ein Auswahlen eines Dialogprotokolls in Abhängigkeit mindestens eines zur Laufzeit bereitgestell- ten Schlüsselworts, ein Zuordnen von Textbausteinen zu Dialogeinheiten des Dialogprotokolls und ein Ausführen des Dialogprotokolls zur Laufzeit. Accordingly, a method for efficient dialog design and interpretation in a computer-aided, automated dialog system is proposed, comprising storing a plurality of dialog protocols for at least one keyword, the dialog protocols each specifying a dynamic sequence of a dialog, a selection of a dialog protocol in Dependency of at least one keyword provided at runtime, assignment of text modules to dialog units of the dialog protocol, and execution of the dialog protocol at runtime.
Der Fachmann erkennt hierbei, dass die Verfahrensschritte iterativ und/oder in anderer Reihenfolge ausgeführt werden können. Zudem können die ein- zelnen Schritte Unterschritte aufweisen. So kann beispielsweise das Abspei- chern einer Mehrzahl von Dialogprotokollen iterativ erfolgen, und es können stets neue Dialogprotokolle eingepflegt werden. Das Zuordnen von Textbau- steinen zu Dialogeinheiten des Dialogprotokolls kann zur Laufzeit, also wäh- rend des Dialogs, durchgeführt werden, oder aber auch bereits vorab. Das Ausführen des Dialogprotokolls zur Laufzeit umfasst mehrere Unterschritte, wie sie beispielsweise beim Speech-Recognition-Vorgang bzw. Natural- Language-Understanding-Vorgang vorgesehen sind. The person skilled in the art recognizes that the method steps can be carried out iteratively and / or in a different order. In addition, the individual steps can have sub-steps. Thus, for example, the storage of a plurality of dialog protocols can be iterative, and new dialog protocols can always be entered. The assignment of text modules to dialogue units of the dialog protocol can be carried out at runtime, ie during the dialog, or even beforehand. Executing the dialog protocol at runtime involves several sub-steps, such as those provided for the speech recognition process or natural language understanding process.
Insbesondere umfasst das vorgeschlagene Verfahren bekannte Techniken, welche vorliegend nicht angeführt wurden, da sie auf Basis herkömmlicher Komponenten implementiert werden können. So gibt der Benutzer erfin- dungsgemäß typischerweise eine akustische Frage bzw. Antwort ein und erhält sodann eben auch eine akustische Antwort bzw. Frage. Dies impliziert, dass die akustischen Signale, also die Sprache, in einen Text konvertiert wird und bei der maschinellen Antwort sodann eben auch ein Ausgabetext wieder in Sprache konvertiert wird. Auf diese Art und Weise entsteht ein Dia- logsystem, welches kommunikativ mit dem Benutzer interagiert. Die Erfin dung ist auch auf textuelle Dialogsysteme, z.B. chatbots gerichtet. In particular, the proposed method comprises known techniques, which have not been mentioned here, since they can be implemented on the basis of conventional components. Thus, according to the invention, the user typically inputs an acoustic question or answer and then also receives an acoustic answer or question. This implies that the acoustic signals, ie the language, are converted into a text and in the case of the machine response then an output text is also converted back to speech. In this way, a dialogue system is created which communicatively interacts with the user. The invention is also aimed at textual dialogue systems, eg chatbots.
Das vorgeschlagene Verfahren ist ein effizientes Verfahren, da erfindungs- gemäß eine Entkopplung der Dialogprotokolle von den einzelnen Textbau- steinen erfolgt. Auf diese Art und Weise ist es möglich, dass Dialoge nicht hartcodiert hinterlegt werden müssen und somit jeweils einzeln erstellt wer- den müssen. Somit wird erfindungsgemäß der Nachteil des Stands der Technik überwunden, dass gemäß herkömmlicher Verfahren die Dialogge- staltung derart abläuft, dass die Textbausteine bereits in den Quellcode ein- gebettet sind. Erfindungsgemäß ist es hingegen möglich, dass Dialogproto- kolle vorgesehen werden, welche dynamisch Einzeldialoge zusammenstellen und zudem eine Entkopplung der Textbausteine erfolgen kann. Darüber hin aus ist eine Interpretation der Dialoge möglich, da situationsspezifisch auf den Dialogverlauf eingegangen werden kann und nicht nur Schlüsselwörter als Benutzereingabe verwendet werden können, welche durch den Benutzer selbst bereitgestellt werden, sondern vielmehr können Steuerbefehle ent- sprechende Schlüsselwörter beibringen. Schlüsselwörter können auch vom Dialogprotokoll in Abhängigkeit vom Kontext erzeugt werden (dann muss gar kein externer Steuerbefehl vorliegen). Z.B. zweimalig wurde die Frage falsch verstanden, dann wird automatisch zu einer Ersatzfrage weitergeleitet. The proposed method is an efficient method since, according to the invention, a decoupling of the dialog protocols from the individual text modules takes place. In this way it is possible that dialogs do not have to be hard-coded and thus have to be created individually. Thus, according to the invention, the disadvantage of the state of the art is overcome that according to conventional methods the dialog design proceeds in such a way that the text modules are already embedded in the source code. In contrast, it is possible according to the invention to provide dialog protocols which compile individual dialogs dynamically and, moreover, a decoupling of the text modules can be carried out. In addition, an interpretation of the dialogs is possible, since the dialogue history can be dealt with in a situation-specific manner and not only keywords can be used as user input, which are provided by the user himself, but rather control commands can teach corresponding keywords. Keywords can also be generated by the dialog protocol depending on the context (then no external control command is required). For example, twice the question was misunderstood, then automatically forwarded to a replacement question.
Das vorgeschlagene Verfahren läuft rechnergestützt und automatisiert derart ab, dass das vorgeschlagene Verfahren selbsttätig mit einem Benutzer inter agieren kann und somit das vorgeschlagene System auch Dialoge selbst anhand der Dialogprotokolle entwerfen kann. Folglich werden alle Verfah- rensschritte computerbasiert durchgeführt, wobei lediglich der Benutzer eine akustische oder textuelle Eingabe liefert. The proposed method is computer-aided and automated in such a way that the proposed method can interact automatically with a user and thus the proposed system can also design dialogues themselves based on the dialogue protocols. Consequently, all procedures computer-based, whereby only the user provides an acoustic or textual input.
Um dies durchzuführen, erfolgt ein Abspeichern einer Mehrzahl von Dialog- protokollen zu jeweils mindestens einem Schlüsselwort. Somit werden Dia- logprotokolle erstellt, welche beispielsweise als Dialogeinheiten Aktivitäten vorsehen, die zeitlich bzw. logisch miteinander in Verbindung gesetzt wer- den. Die Dialogprotokolle spezifizieren also keine herkömmlichen starren Abläufe, sondern sehen vielmehr vor, wann welcher Akteur eine Aktivität ausführt, ohne hierbei festzulegen, welche Textbausteine verwendet werden. Dies überwindet den Nachteil des Stands der Technik, dass eine Verknüp- fung von Dialoglogik und Textbausteinen erfolgt. Die Dialogprotokolle spezi- fizieren beispielsweise, dass bei einer bestimmen Benutzereingabe ein Nachfragen durch das Dialogsystem erfolgt. Darüber hinaus können Dialog- protokolle spezifizieren, dass, falls der Benutzer ein Thema vorschlägt, ent- sprechende Schlüsselwörter extrahiert werden und sodann das Dialogsys- tem eine Frage zu stellen hat. Wird erkannt, dass der Benutzer selbst eine Frage stellt, so sieht das Dialogprotokoll vor, dass das System nach einer entsprechenden Antwort sucht und diese bereitstellt. Somit entspricht einem Dialogprotokoll also einem dynamischen Ablauf eines Gesprächs bzw. Dia- logs zwischen dem Dialogsystem und dem Benutzer. In order to do this, a plurality of dialog protocols are stored for at least one keyword each time. Thus, dialogue protocols are created which, for example, provide activities as dialog units that are linked with one another in terms of time or logic. The dialog protocols thus do not specify any conventional rigid sequences, but rather specify when which actor performs an activity without specifying which text modules are used. This overcomes the disadvantage of the prior art that a linking of dialog logic and text modules takes place. The dialog protocols specify, for example, that in the case of a specific user input, a request is made by the dialog system. In addition, dialog protocols may specify that if the user suggests a topic, corresponding keywords are extracted and then the dialog system has to ask a question. If it is detected that the user himself is asking a question, the dialog protocol provides that the system looks for and provides a corresponding answer. Thus, a dialog protocol corresponds to a dynamic process of a conversation or dialogue between the dialog system and the user.
Die Dialogprotokolle werden vorab bereitgestellt, d. h. vor der Laufzeit, und stehen somit bereits zur Verfügung, falls der Dialog gestartet wird. Somit können die Dialogprotokolle als abstrakt dahingehend bezeichnet werden, da sie keine konkreten Textbausteine aufweisen, sondern vielmehr vorsehen, welcher dynamische Ablauf der Dialog nehmen soll. The dialog protocols are provided in advance, d. H. before the runtime, and are therefore already available if the dialog is started. Thus, the dialog protocols can be described as abstract because they have no concrete text modules, but rather provide which dynamic flow of the dialogue should take.
Den einzelnen Dialogprotokollen sind Schlüsselwörter zugeordnet, d. h. ein oder mehrere Schlüsselwörter. Ein Schlüsselwort kann beispielsweise als ein Thema bezeichnet werden, bezüglich dessen der Dialog geführt wird. So können herkömmliche Verfahren verwendet werden, welche aus einem Satz ein besonders hervorstehendes Substantiv auswählen. So kann in einem Anwendungsszenario der Benutzer beispielsweise nach dem Wetter fragen und sodann ist das vorgeschlagene Verfahren anhand von herkömmlichen Methoden in der Lage zu extrahieren, dass der Benutzer tatsächlich nach dem Wetter fragt. Hierzu kann auch die Tonlage der Eingabe berücksichtigt werden und sodann erkannt werden, ob es sich hier um eine Aussage oder um eine Frage handelt. Wird erkannt, dass eine Frage bezüglich des Wet- ters vorliegt, so ist das entsprechende Schlüsselwort„Wetter“, und es wird ein Dialogprotokoll ausgewählt, welches vorsieht, dass das Dialogsystem eine Frage stellt und sodann auf eine erwartete Antwort seitens des Benut- zers die eingangs gestellte Frage beantwortet. The individual dialog protocols are assigned keywords, ie one or more keywords. For example, a keyword may be referred to as a topic with respect to which the dialogue is conducted. So For example, conventional methods can be used which select one sentence from a particularly prominent noun. For example, in an application scenario, the user may ask for the weather and then the proposed method will be able to extract by conventional methods that the user will actually ask for the weather. For this purpose, the pitch of the input can be taken into account and then recognized whether this is a statement or a question. If it is detected that there is a question concerning the weather, the corresponding keyword is "Weather" and a dialogue protocol is selected which provides that the dialogue system asks a question and then an expected response from the user Answered question at the beginning.
An dieser Stelle sind noch keine Textbausteine vorgesehen, sondern ledig- lich die einzelnen Aktivitäten des Protokolls. So kann auf die Frage nach dem Wetter das vorgeschlagene Verfahren vorsehen, dass eine Frage sei- tens des Dialogsystems gestellt wird, welche sich auf eine bestimmte Ort- schaft bezieht. Sodann wird der Textbaustein zugeordnet„An welchem Ort möchten Sie das aktuelle Wetter erfahren?“. Daraufhin kann das Dialogpro- tokoll vorsehen, dass der Benutzer zu antworten hat. Wird eine entspre- chende Antwort bereitgestellt, so kann hieraus die Ortschaft extrahiert wer- den und hieraufhin kann wiederum vorgesehen werden, dass das Dialogsys- tem eine Antwort bereitstellen muss. Zu diesem Zeitpunkt liegt dem Dialog- system also das Schlüsselwort„Wetter“ vor und dann beispielsweise der Ort „München“, welcher von dem Benutzer bereitgestellt wird. Mit dieser Informa- tion kann das System mittels einer bereitgestellten Schnittstelle eine Daten- bankabfrage durchführen, und sodann kann das Dialogprotokoll vorsehen, dass das Dialogsystem eine Antwort geben muss und nach der Antwort das Verfahren terminiert. So kann das Dialogsystem die Wetteransage durchfüh- ren und hierbei die ausgelesenen Wetterparameter aus einer Datenbank bereitstellen. Da hierbei typischerweise die Anfrage zufriedenstellend beant- wortet sein sollte, kann das Verfahren terminieren. At this point, no text modules are provided, but only the individual activities of the protocol. Thus, when asked about the weather, the proposed procedure can provide for a question to be posed by the dialogue system, which refers to a specific location. Then the text module is assigned "Where would you like to know the current weather?". The dialog protocol may then provide that the user has to respond. If a corresponding answer is provided, the location can be extracted from this and, in turn, provision can then be made for the dialogue system to provide a response. At this point in time, the dialogue system has the keyword "weather" and then, for example, the location "Munich", which is provided by the user. With this information, the system can perform a database query using a provided interface, and then the dialog protocol can provide that the dialog system must respond and terminate the procedure after the response. In this way, the dialog system can carry out the weather forecast and in this case read out the weather parameters from a database provide. Since typically the request should be satisfactorily answered, the process can terminate.
Es kann jedoch auch ein Teildialogprotokoll eine Verzweigung zu einem an- deren Teildialogprotokoll vorsehen und sodann kann beispielsweise ein Dia- logprotokoll zum Schlüsselwort„Ausflugsziel“ gewählt werden. Hat das Dia- logsystem also die Anfrage nach dem Wetter beantwortet, so kann das Dia- logprotokoll derart verzweigen, dass ein Teildialogprotokoll gewählt wird, welches den Benutzer frägt, ob er bei schönem Wetter einen Ausflug ma- chen will. Der oben beschriebene Vorgang wiederholt sich dann und nach einer entsprechenden Datenbankabfrage können dem Benutzer geeignete Aktivitäten vorgeschlagen werden, die sowohl zum Thema„Wetter“ als auch zum Thema„München“ passen. Dabei erschließt sich das System als Ort das Ausflugsziel„München“ selbsttätig aus dem vorherigen Dialogverlauf, ohne dass der User es noch einmal sagen muss. Auf diese Art und Weise wird ein dynamischer Ablauf eines Dialogs kreiert und es erfolgt eine Ab- kopplung des Dialogprotokolls von den tatsächlichen Textbausteinen. However, it is also possible for a partial dialog protocol to provide a branch to another partial dialog protocol, and then, for example, a dialog protocol for the keyword "excursion destination" can be selected. If the dialogue system has thus answered the request for the weather, the dialogue log can branch out in such a way that a partial dialogue protocol is selected which asks the user whether he wants to make an excursion in fine weather. The process described above then repeats itself and after a corresponding database query the user can be proposed suitable activities that fit both the topic "weather" as well as the topic "Munich". In doing so, the system, as a location, opens up the excursion destination "Munich" automatically from the previous dialogue process, without the user having to say it again. In this way, a dynamic process of a dialog is created and the dialog protocol is decoupled from the actual text modules.
Erfindungsgemäß erfolgt zudem ein Zuordnen von Textbausteinen zu Dia- logeinheiten des Dialogprotokolls, was entweder zur Laufzeit erfolgen kann oder vorab. Bei der Laufzeit handelt es sich immer um die Ausführungszeit des Dialogs an sich. Erfindungsgemäß wird der Nachteil überwunden, dass der bereitgestellte Quellcode sowohl die Textbausteine als auch die einzel- nen Aktivitäten, d. h. die Dialogeinheiten, bereitstellt. So können die Dia- logeinheiten des Dialogprotokolls als abstrakte Bausteine definiert werden, welche vorsehen, dass ein Dialogsystem eine Frage stellen muss. Wie die Frage denn nunmehr konkret auszugestalten ist, gibt der entsprechende Textbaustein an. Hierdurch stellt sich ein weiterer Vorteil gegenüber dem Stand der Technik ein, nämlich dass das vorgeschlagene Verfahren beson- ders sprachunabhängig ist. So können generische Dialogprotokolle erstellt werden und hierzu Textbausteine in allen Sprachen verwendet werden. So kann ein Dialogprotokoll lediglich mit Textbausteinen der deutschen Sprache verwendet werden. Wählt der Benutzer nunmehr eine andere Sprache, so ist nicht ein neuer Quellcode zu verwenden, sondern vielmehr werden sodann dem unveränderten Dialogprotokoll lediglich andere Textbausteine, bei- spielsweise in englischer Sprache, zugeordnet. Somit ist das System auch weniger wartungsintensiv als herkömmliche Systeme, da die Dialoglogik, also die Dialogprotokolle, von den tatsächlich anzuwendenden textuellen Inhalten getrennt werden. Folglich entsteht auch bei der Wartung eines sol- chen Systems bzw. bei der Durchführung eines solchen Verfahrens weniger Aufwand als bei herkömmlichen Systemen bzw. Verfahren. According to the invention, text modules are also assigned to diagnostic units of the dialogue protocol, which can be done either at runtime or in advance. The runtime is always the execution time of the dialog itself. According to the invention, the disadvantage is overcome that the provided source code provides both the text modules and the individual activities, ie the dialog units. Thus, the dialogue units of the dialogue protocol can be defined as abstract building blocks, which provide that a dialogue system must ask a question. How the question is to be concretely formulated is indicated by the corresponding text module. This provides a further advantage over the prior art, namely that the proposed method is particularly language-independent. This allows generic dialog protocols to be created using text modules in all languages. So a dialogue protocol can only be used with text modules of the German language. If the user now selects another language, then a new source code is not to be used, but rather only other text modules, for example in English, are assigned to the unchanged dialog protocol. Thus, the system is also less maintenance-intensive than conventional systems, since the dialogue logic, so the dialogue protocols are separated from the actually applicable textual content. Consequently, also in the maintenance of such a system or in the implementation of such a method less effort than in conventional systems or methods.
Außerdem kann ein bestehendes Dialogprotokoll samt Textbausteinen un- verändert in eine neue Entwicklungsumgebung portiert werden (ohne Quell- code neu zu schreiben oder gar in eine andere Programmiersprache umzu- schreiben), solange in der Entwicklungsumgebung ein DCS (Dialog Control Script) bereitsteht.  In addition, an existing dialog protocol including text modules can be ported unchanged into a new development environment (without rewriting the source code or even rewriting it into another programming language) as long as a DCS (Dialog Control Script) is available in the development environment.
Da nunmehr die Dialogprotokolle ausgewählt wurden und ein einzelnes Dia- logprotokoll vorliegt, wozu auch bereits die Textbausteine vorliegen, kann nunmehr der Dialog durchgeführt werden bzw. das Dialogprotokoll ausge- führt werden. Somit wird der Benutzer anhand des Dialogprotokolls durch den dynamischen Dialog geführt und bekommt immer dann entsprechende Angaben bzw. Fragen, falls dies das Dialogprotokoll vorsieht. Da das Dialog- protokoll auch Teilprotokolle vorsehen kann, kann jederzeit zu einem ande- ren Teildialogprotokoll verzweigt werden, falls der Benutzer eine entspre- chende Eingabe gibt. Wurde beispielsweise der Benutzer nicht ausreichend informiert, so kann in einen anderen Dialog übergeleitet werden, welcher vorsieht, wie dem Benutzer ansonsten geholfen werden kann. Flierzu werden wiederum die entsprechenden Textbausteine ausgewählt und dem Benutzer präsentiert. Gemäß einem Aspekt der vorliegenden Erfindung spezifiziert das Dialogpro- tokoll ein Vorhandensein von Dialogeinheiten und einen Dialogverlauf, wel- cher die Dialogeinheiten in temporale Abfolge setzt. Dies hat den Vorteil, dass ein Dialogverlauf bereitgestellt werden kann, der unabhängig von Text- bausteinen an sich ist. Die Dialogeinheiten sehen lediglich vor, wann das vorgeschlagene Verfahren agieren soll und wann der Benutzer agieren soll. Darüber hinaus kann spezifiziert werden, welche Aktivität konkret als Dia- logeinheit vorgesehen ist. So kann eine Dialogeinheit eine Eingabe durch den Benutzer oder durch das Dialogsystem sein. Darüber hinaus kann eine Dialogeinheit Steuerbefehle vorsehen, die an einem bestimmten Punkt in- nerhalb des Dialogs abgearbeitet werden sollen. So können erfindungsge- mäß zwei Dialogeinheiten hintereinandergeschaltet werden, welche beide von dem Dialogsystem bedient werden müssen, wobei zuerst eine Daten- bankabfrage in der ersten Dialogeinheit erfolgt, und in der zweiten Dia- logeinheit ist spezifiziert, dass die ausgelesene Information an den Benutzer bereitgestellt werden muss. Bei der temporalen Abfolge kann es sich um ein Ablaufdiagramm handeln, wobei generell alternativ zur temporalen Abfolge auch eine logische Abfolge spezifiziert werden kann. So kann vorgesehen sein, dass stets eine Benutzereingabe abgewartet werden muss und sodann geantwortet werden muss. Es ist auch möglich, dass die Dialogeinheiten vorsehen, dass das Dialogsystem den Dialog initiiert und sodann der Benut- zer antwortet. Since the dialog protocols have now been selected and a single dialog protocol is available, including the text modules, the dialog can now be carried out or the dialog protocol can be executed. Thus, the user is guided through the dynamic dialogue by means of the dialogue protocol and always receives corresponding information or questions, if the dialog protocol so provides. Since the dialog protocol can also provide partial protocols, it is always possible to branch to another partial dialog protocol if the user gives an appropriate input. If, for example, the user has not been sufficiently informed, then another dialog can be entered which specifies how the user can otherwise be helped. In turn, the corresponding text modules are selected and presented to the user. According to one aspect of the present invention, the dialog protocol specifies a presence of dialog units and a dialog history that places the dialog units in temporal succession. This has the advantage that a dialogue history can be provided that is independent of text modules per se. The dialog units only provide when the proposed method should act and when the user should act. In addition, it can be specified which activity is specifically intended as a diagnostic unit. Thus, a dialogue unit may be an input by the user or by the dialogue system. In addition, a dialog unit can provide control commands that are to be processed at a specific point within the dialog. Thus, according to the invention, two dialog units can be cascaded one after the other, both of which must be operated by the dialog system, wherein first a database query is made in the first dialog unit, and in the second diagnostic unit it is specified that the read information is provided to the user got to. The temporal sequence can be a flowchart, whereby a logical sequence can generally also be specified as an alternative to the temporal sequence. So it can be provided that always a user input has to wait and then has to be answered. It is also possible that the dialogue units provide that the dialogue system initiates the dialogue and then the user replies.
Gemäß einem weiteren Aspekt der vorliegenden Erfindung werden die Dia- logeinheiten als alphanumerische Parameter abgespeichert. Dies hat den Vorteil, dass eine speichereffiziente und einfache menschenlesbare Form gewählt werden kann, in der die Dialogeinheiten abgespeichert werden. So können die einzelnen Dialogeinheiten in eine gesonderte Datei ausgelagert werden und dem vorgeschlagenen Verfahren bereitgestellt werden. Gemäß einem weiteren Aspekt der vorliegenden Erfindung werden die Dia- logeinheiten tabellarisch abgespeichert. Dies hat den Vorteil, dass an den Spalten die Aktivitäten bzw. Akteure eingetragen werden können und in den Zeilen ein fortlaufender Index eingetragen werden kann, zu dem ein Teildia- logprotokoll verweisen kann. So kann ein Dialog dynamisch kreiert werden, derart, dass der jeweilige Index angesprochen wird, und am Ende des Teil dialogprotokolls wird auf einen weiteren Index dynamisch verwiesen, der so- dann aufgerufen wird und ein weiterer Teildialog ausgeführt werden kann. Somit spezifizieren also die einzelnen Zeilen ein Teildialogprotokoll, welche dynamisch zusammengesetzt werden können. According to a further aspect of the present invention, the diagnostic units are stored as alphanumeric parameters. This has the advantage that a memory-efficient and simple human-readable form can be selected, in which the dialog units are stored. Thus, the individual dialog units can be outsourced to a separate file and provided to the proposed method. According to a further aspect of the present invention, the diagnostic units are stored in tabular form. This has the advantage that the activities or actors can be entered at the columns and in the rows a continuous index can be entered, to which a partial logging protocol can refer. Thus, a dialog can be dynamically created in such a way that the respective index is addressed, and at the end of the partial dialog protocol, another index is dynamically referenced, which is then called up and another sub-dialog can be executed. Thus, the individual lines specify a partial dialogue protocol, which can be composed dynamically.
Gemäß einem weiteren Aspekt der vorliegenden Erfindung wird das Schlüs- selwort mittels einer Benutzereingabe und/oder durch einen Steuerbefehl bereitgestellt . Dies hat den Vorteil, dass sowohl der Benutzer eine akusti- sche oder textliche Eingabe tätigen kann, woraus das Schlüsselwort extra- hiert wird, oder aber es werden Steuerbefehle ausgeführt, welche sodann das geeignete Dialogprotokoll auswählen. Somit kann beispielsweise ein Makro erstellt werden, der wiederum mehrere Steuerbefehle umfasst. Diese Steuerbefehle sind eingerichtet, das Schlüsselwort bereitzustellen. Auch kann eine Kombination aus Benutzereingabe und Steuerbefehl derart erfol- gen, dass der Benutzer ein erstes Schlüsselwort wählt und der Steuerbefehl hierzu einen Kontext modelliert, woraufhin das entsprechende Dialogproto- koll ausgewählt wird. According to a further aspect of the present invention, the keyword is provided by means of a user input and / or by a control command. This has the advantage that both the user can make an acoustic or textual input, from which the keyword is extracted, or else control commands are executed, which then select the appropriate dialog protocol. Thus, for example, a macro can be created, which in turn comprises a plurality of control commands. These control commands are set up to provide the keyword. A combination of user input and control command can also take place in such a way that the user selects a first keyword and the control command for this purpose models a context, whereupon the corresponding dialog protocol is selected.
Gemäß einem weiteren Aspekt der vorliegenden Erfindung wird das Schlüs- selwort unter Verwendung einer Technologie zum Verstehen einer natürli- chen Sprache bereitgestellt. Dies hat den Vorteil, dass bereits installierte bzw. implementierte Komponenten zur sogenannten„Natural Language Un- derstanding“ Einsatz finden können. Somit ist es also möglich, dass ein Be- nutzer eine Benutzereingabe akustisch tätigt, diese textuell konvertiert wird und sodann aus dieser akustischen Eingabe ein oder mehrere Schlüssel- Wörter extrahiert werdenwird. Ein weiterer Erfindungsgemäßer Aspekt der NLU ist ein Mapping von einem Satz von verschiedenen matchbaren In accordance with another aspect of the present invention, the keyword is provided using technology to understand a natural language. This has the advantage that already installed or implemented components can be used for so-called "natural language understanding". Thus, it is thus possible for a user to make a user input acoustically, to convert this textually, and then to use one or more key words from this acoustic input. Words will be extracted. Another inventive aspect of the NLU is a mapping of a set of different matchable ones
Schlüsselwörtern auf ein Schlüsselwort (z.B. Haus, Gebäude, Wolkenkratzer werden alle auf„Haus“ gemappt) oder Alter: 43, 49 wird beides auf Alters- gruppe 40-49 gemappt. Das schließt insbesondere auch„falsche“ speech recognition resultate ein. So wird in Englisch„cups“ in vielen Dialekten fast wie„cats“ ausgesprochen, daher wird beispielsweise„cats“ als Trigger für ein System verwendet, wo man„cups“ erkennen möchte. Keywords on a keyword (for example, house, buildings, skyscrapers are all mapped to "house") or age: 43, 49 is both mapped to age group 40-49. This includes in particular "false" speech recognition results. So in English "cups" are pronounced in many dialects almost like "cats", so for example "cats" is used as trigger for a system where you want to recognize "cups".
Gemäß einem weiteren Aspekt der vorliegenden Erfindung spezifiziert je- weils eine Dialogeinheit eine Aktivität eines Akteurs innerhalb des Dialogpro- tokolls. Dies hat den Vorteil, dass die Dialogeinheit angeben kann, ob nun- mehr eine Frage, eine Antwort oder ein Steuerbefehl bereitzustellen ist. Ent- sprechende Akteure sind entweder der Benutzer, mit dem der Dialog geführt wird, oder aber auch das Dialogsystem. Hierbei können auch weitere Akteu- re verwendet werden, wie beispielsweise eine externe Datenbank, welche mittels eines Steuerbefehls anzusprechen ist. In accordance with another aspect of the present invention, a dialog unit specifies an activity of an actor within the dialog protocol. This has the advantage that the dialog unit can specify whether a question, an answer or a control command is now to be provided. Corresponding actors are either the user with whom the dialogue is conducted or the dialogue system. In this case, other actors can be used, such as an external database, which is to be addressed by means of a control command.
Gemäß einem weiteren Aspekt der vorliegenden Erfindung beschreibt die dynamische Abfolge des Dialogs Teildialoge, welche anhand von Verzwei- gungen zusammengestellt werden. Dies hat den Vorteil, dass der Dialog dy- namisch zur Laufzeit erstellt werden kann und sodann eben auch entspre- chende Teildialogprotokolle Verwendung finden. Hierbei kann auf die Benut- zereingabe gewartet werden und in Abhängigkeit der Benutzereingabe kann wiederum ein weiterer Teildialog ausgewählt werden. Hierdurch ergibt sich ein dynamisches Zusammenstellen von Teildialogen zur Laufzeit zu einem Gesamtdialog. Dies entspricht der Zusammenstellung von Teildialogprotokol- len zu einem Dialogprotokoll. According to a further aspect of the present invention, the dynamic sequence of the dialogue describes partial dialogs which are compiled on the basis of branches. This has the advantage that the dialog can be created dynamically at runtime and then corresponding sub-dialog protocols can be used. Here, the user input can be waited for and, depending on the user input, another sub-dialog can again be selected. This results in a dynamic compilation of partial dialogues at runtime to an overall dialogue. This corresponds to the compilation of partial dialog protocols into a dialog protocol.
Gemäß einem weiteren Aspekt der vorliegenden Erfindung wird eine Ver- zweigung in Abhängigkeit einer Benutzereingabe und/oder durch einen Steuerbefehl ausgewählt. Dies hat den Vorteil, dass nicht nur die akusti- schen oder textlichen Benutzereingaben Verwendung finden können, son- dern vielmehr kann auch mittels einer Benutzereingabe ein Steuerbefehl, wie eine Datenbankabfrage, veranlasst werden. According to another aspect of the present invention, a branch depending on a user input and / or by a Control command selected. This has the advantage that not only the acoustic or textual user inputs can be used but, on the contrary, a control command, such as a database query, can also be initiated by means of a user input.
Gemäß einem weiteren Aspekt der vorliegenden Erfindung gibt jede Dia- logeinheit eine Aktivität des Dialogsystems, eine Aktivität eines Benutzers, ein Ausführen von Steuerbefehlen und/oder ein Terminieren des Verfahrens vor. Dies hat den Vorteil, dass die einzelnen Aktivitäten spezifiziert werden können, welche sich nicht nur auf das Dialogsystem an sich bzw. den menschlichen Benutzer richten, sondern vielmehr kann auch vorgeschlagen werden, welche Steuerbefehle zur Beantwortung der Benutzereingabe aus- geführt werden. Darüber hinaus kann spezifiziert werden, an welchem Zeit- punkt das Dialogprotokoll vorsieht, dass das Verfahren terminiert, da die Be- nutzeranfrage erfolgreich beantwortet wurde. According to a further aspect of the present invention, each diagnostic unit specifies an activity of the dialog system, an activity of a user, the execution of control commands and / or a termination of the method. This has the advantage that the individual activities can be specified, which are not only directed to the dialog system itself or the human user, but rather it can also be proposed which control commands are executed to answer the user input. In addition, it can be specified at what point in time the dialog protocol stipulates that the method terminates because the user request has been successfully answered.
Gemäß einem weiteren Aspekt der vorliegenden Erfindung umfasst das Aus- führen des Dialogprotokolls zur Laufzeit ein Betreiben eines akustischen Dia- logs zwischen dem Dialogsystem und einem Benutzer. Dies hat den Vorteil, dass herkömmliche Komponenten Anwendung finden können, welche eine akustische Eingabe in Text umwandeln und sodann eine textuelle Ausgabe wieder in akustische Information umwandeln können. In accordance with another aspect of the present invention, executing the dialog protocol at runtime includes operating an audio conversation between the dialog system and a user. This has the advantage that conventional components can be used which convert an acoustic input into text and then convert a textual output back into acoustic information.
Gemäß einem weiteren Aspekt der vorliegenden Erfindung wird das Verfah- ren auf einem mobilen Endgerät, in einem Fahrzeug oder auf einer stationä- ren Recheneinheit ausgeführt. Dies hat den Vorteil, dass diverse Anwen- dungsszenarien abgedeckt werden können und alle gängigen Endgeräte bedient werden können. Bei einer stationären Recheneinheit kann es sich beispielsweise um einen herkömmlichen Personal Computer eines Benut- zers handeln. Bei einem Einsatz im Fahrzeug kommt typischerweise eine Benutzerschnittstelle zum Einsatz, welche den Fahrer durch einen Dialog führt. According to a further aspect of the present invention, the method is carried out on a mobile terminal, in a vehicle or on a stationary computing unit. This has the advantage that various application scenarios can be covered and all current end devices can be operated. A stationary arithmetic unit may be, for example, a conventional personal computer of a user. When used in the vehicle is typically one User interface for use, which guides the driver through a dialogue.
Gemäß einem weiteren Aspekt der vorliegenden Erfindung werden Schnitt- steilen zu bestehenden internetbasierten Diensten bereitgestellt. Dies hat den Vorteil, dass bereits implementierte Softwarekomponenten Wiederver- wendung finden können und Internetdienste abgefragt werden können, wel- che Information zur Beantwortung der Benutzeranfragen bereitstellen bzw. Dienste wie Einkaufsmöglichkeiten bereitstellen. In accordance with another aspect of the present invention, interfaces to existing Internet based services are provided. This has the advantage that software components already implemented can be reused and Internet services can be queried, which provide information for answering the user requests or provide services such as shopping facilities.
Die Aufgabe wird auch gelöst durch eine Systemanordnung zur effizienten Dialoggestaltung und Interpretation in einem rechnergestützten Dialogsys- tem, aufweisend eine Speichereinheit eingerichtet zum Abspeichern einer Mehrzahl von Dialogprotokollen zu jeweils mindestens einem Schlüsselwort, wobei die Dialogprotokolle jeweils eine dynamische Abfolge eines Dialogs spezifizieren, eine Recheneinheit eingerichtet zum Auswahlen eines Dialog- protokolls in Abhängigkeit mindestens eines zur Laufzeit bereitgestellten Schlüsselworts, eine weitere Recheneinheit eingerichtet zum Zuordnen von Textbausteinen zu Dialogeinheiten des Dialogprotokolls und eine Dialogein- heit eingerichtet zum Ausführen des Dialogprotokolls zur Laufzeit. The object is also achieved by a system arrangement for efficient dialog design and interpretation in a computer-aided Dialogsys- tem, comprising a memory unit configured to store a plurality of dialog protocols to at least one keyword, the dialogue protocols each specify a dynamic sequence of a dialogue, set up a computer for selecting a dialog protocol as a function of at least one keyword provided at runtime, another arithmetic unit configured for assigning text modules to dialog units of the dialog protocol, and a dialog unit configured for executing the dialog protocol at runtime.
Die Aufgabe wird auch gelöst durch ein Computerprogrammprodukt mit Steuerbefehlen, welche das vorgeschlagene Verfahren implementieren bzw. die vorgeschlagene Systemanordnung betreiben. The object is also achieved by a computer program product with control commands which implement the proposed method or operate the proposed system arrangement.
Erfindungsgemäß ist es besonders vorteilhaft, dass die Systemanordnung strukturelle Merkmale bereitstellt, welche funktional den einzelnen Verfah- rensschritten entsprechen. Somit dient die Systemanordnung zum Ausführen des vorgeschlagenen Verfahrens. Das vorgeschlagene Verfahren ist wiede- rum eingerichtet, die Systemanordnung zu betreiben. Somit können die Ver- fahrensschritte auch als strukturelle Merkmale der Systemanordnung nach- gebildet werden. Die Systemanordnung umfasst Einrichtungen, welche tat- sächlich derart eingerichtet sind, wie es bereits angeführt wurde, und um- fasst nicht lediglich generische Komponenten zur Eignung. Weitere vorteilhafte Ausgestaltungen werden anhand der beigefügten Figu- ren näher erläutert. Es zeigen: According to the invention, it is particularly advantageous that the system arrangement provides structural features which functionally correspond to the individual process steps. Thus, the system arrangement is for carrying out the proposed method. The proposed method is again set up to operate the system arrangement. Thus, the method steps can also be used as structural features of the system arrangement. be formed. The system arrangement includes devices that are actually set up as already stated, and does not merely cover generic components for suitability. Further advantageous embodiments will be explained in more detail with reference to the attached figures. Show it:
Fig. 1 : ein herkömmliches Dialogsystem als Ausgangspunkt für die vorlie- gende Erfindung; 1 shows a conventional dialogue system as a starting point for the present invention;
Fig. 2: eine Systemanordnung zur effizienten Dialoggestaltung und Inter pretation gemäß einem Aspekt der vorliegenden Erfindung; FIG. 2 shows a system arrangement for efficient dialog design and interpretation according to one aspect of the present invention; FIG.
Fig. 3: ein weiteres Beispiel einer Systemanordnung zur effizienten Dia- loggestaltung und Interpretation gemäß einem weiteren Aspekt der vorliegenden Erfindung; FIG. 3 shows another example of a system arrangement for efficient dialog design and interpretation according to another aspect of the present invention; FIG.
Fig. 4: ein beispielhaftes Dialogprotokoll mit Dialogeinheiten gemäß einem 4 shows an exemplary dialog protocol with dialog units according to a
Aspekt der vorliegenden Erfindung; und  Aspect of the present invention; and
Fig. 5: ein schematisches Ablaufdiagramm des vorgeschlagenen Verfah- rens zur effizienten Dialoggestaltung und Interpretation gemäß ei- nem weiteren Aspekt der vorliegenden Erfindung. Fig. 1 zeigt auf der linken Seite einen menschlichen Benutzer, welcher eine Eingabe an ein Spracherkennungssystem übergibt. Bei einem Spracherken- nungssystem handelt es sich um ein„Speech Recognition Service“-System SRS. Wie auf der rechten Seite eingezeichnet ist, sind die einzelnen Dialoge separat implementiert, und hierbei wird eine Ablauflogik spezifiziert, welche entsprechende Textbausteine beinhaltet. Dies ist besonders nachteilig, da die Dialogprotokolle mit den Textbausteinen verknüpft werden müssen. Hier- durch kann keine getrennte Wartung erfolgen und es resultiert ein gesteiger- ter technischer Aufwand. 5 is a schematic flow diagram of the proposed method for efficient dialog design and interpretation according to another aspect of the present invention. Figure 1 shows on the left side a human user handing an input to a speech recognition system. A voice recognition system is a Speech Recognition Service (SRS) system. As shown on the right-hand side, the individual dialogs are implemented separately, and a flow logic is specified here, which contains corresponding text modules. This is particularly disadvantageous because the dialog protocols must be linked to the text modules. Here- By no separate maintenance can be done and there is an increased technical effort.
Fig. 2 zeigt erfindungsgemäß eine Anpassung des Systems gemäß Fig. 1 und sieht hierbei eine weitere Komponente vor, nämlich eine Auswahleinheit, beispielsweise eine„Dialog Control Script“-Einheit DCS. Diese Einheit ist den Textbausteinen auf der rechten Seite vorgeschaltet, und sodann kann zur Laufzeit der entsprechende Dialog ausgewählt werden und es müssen die Textbausteine auf der rechten Seite lediglich in das System integriert wer- den. Somit wird erfindungsgemäß der Nachteil überwunden, dass nicht, wie in Fig. 1 gezeigt, auf der rechten Seite in den drei schematischen Einheiten die Dialogprotokolle abgespeichert sind mitsamt Textbausteinen, sondern vielmehr sind die Dialogprotokolle in der vorgeschalteten Einheit DCS abge- speichert und von der rechten Seite müssen lediglich die einzelnen Textbau- steine eingelesen werden. Alternativ sind die einzelnen Dialogprotokolle nicht in der DCS abgespeichert, sondern werden dynamisch/ zur Laufzeit von der DCS aufgerufen /eingelesen. Somit schafft die additive Komponente DCS spezifische Dialogverläufe und wählt sodann weitere Parameter von der rechten Seite aus. PVD steht vorliegend für Parameter Voice Dialog, bei spielsweise PVD1 , PVD2 und PVD3. According to the invention, FIG. 2 shows an adaptation of the system according to FIG. 1 and provides a further component, namely a selection unit, for example a "Dialog Control Script" unit DCS. This unit precedes the text modules on the right-hand side, and then the corresponding dialog can be selected at runtime and the text modules on the right-hand side merely have to be integrated into the system. Thus, according to the invention, the disadvantage is overcome that, as shown in FIG. 1, the dialog protocols are not stored on the right-hand side in the three schematic units together with text modules, but rather the dialog protocols are stored in the upstream unit DCS and from the right Page, only the individual text blocks need to be read. Alternatively, the individual dialog protocols are not stored in the DCS but are called / read dynamically / at runtime by the DCS. Thus, the additive component creates DCS specific dialog profiles and then selects further parameters from the right side. PVD stands for Parameter Voice Dialog, for example PVD1, PVD2 and PVD3.
Fig. 3 zeigt ein entsprechendes erfindungsgemäßes System, wobei auf der linken Seite oben eine Benutzeranfrage, ein sogenannter„User Request“ UR erfolgt, der an eine Interpretationskomponente übermittelt wird, die vorlie- gend„Natural Language Understanding“-Komponente NLU genannt wird. Sodann wird eine Antwort bzw. eine Frage generiert, was in einer weiteren Komponente erfolgt, die vorliegend als„System Answer/Prompt“ S A/P be- zeichnet wird. Sodann kann das Verfahren terminieren, was auf der rechten Seite durch den entsprechenden Pfeil nach außen gekennzeichnet ist, oder aber es erfolgt wieder ein Übermitteln der textuellen Antwort an den soge- nannten„Voice Service“ VS, der die textuelle Ausgabe wiederum in Sprache umwandelt und an den Benutzer bereitstellt, der dann wieder eine Benutzer- eingabe tätigen kann. Die umgekehrte Richtung ist in dieser Figur ebenfalls vorgesehen. Der Use case -„System fragt, Benutzer antwortet“ (voice sur- vey) ist vorteilhaft. Die Verwendung des Voice Service ist nicht verpflichtend 3 shows a corresponding system according to the invention, wherein on the left-hand side above a user request, a so-called "user request" UR, which is transmitted to an interpretation component, which is referred to herein as the "Natural Language Understanding" component NLU. Then, an answer or a question is generated, which takes place in a further component, which in the present case is referred to as "System Answer / Prompt" SA / P. Then, the method can terminate, which is marked on the right side by the corresponding arrow to the outside, or it is again a transmission of the textual response to the so-called "Voice Service" VS, which in turn the textual output in speech converts and provides to the user, who can then make a user input again. The reverse direction is also provided in this figure. The use case - "system asks, user answers" (voice sur vey) is advantageous. The use of the voice service is not mandatory
Fig. 4 zeigt ein Dialogprotokoll mitsamt Dialogeinheiten, welche den Dialog- ablauf spezifizieren. Flierzu ist links oben eine Startdialogeinheit eingezeich- net, welche sodann in die erste Dialogeinheit verzweigt. Hierbei kann eine Benutzereingabe eingeholt werden und in Abhängigkeit der bereitgestellten Antwort wird entweder in die Dialogeinheit 5 oder 21 verwiesen. Die entspre- chenden Dialogeinheiten können tabellarisch abgespeichert werden, wobei es sich bei dem numerischen Index um eine Zeilennummer handeln kann. Wie in der vorliegenden Figur gezeigt ist, kann somit dynamisch verzweigt werden, und jedes eingezeichnete Kästchen entspricht einer Dialogeinheit, die einem Akteur zugeordnet wird. So kann beispielsweise spezifiziert wer- den, dass die Dialogeinheit 11 von einem Benutzer bereitgestellt wird, und in einer darauffolgenden Dialogeinheit erfolgt ein Terminieren des Dialogs durch das vorgeschlagene Dialogsystem. Die beiden Pfeile auf der linken Seite verdeutlichen, dass noch weitere Dialogeinheiten vorgesehen werden können und dass es sich bei dem vorgeschlagenen Beispiel gemäß Fig. 4 lediglich um einen Ausschnitt aus einem Dialogprotokoll größeren Umfangs handelt. Da mehr als zwei Verzweigungen ebenso möglich sind wie diagona- le Schritte in einen anderen Dialogast, ist eine Verzweigung von 11 auf 2 zurück auch möglich. All das trägt zu einer guten„User Experience“ bei. 4 shows a dialog protocol including dialog units which specify the dialog procedure. A start dialog unit is shown on the top left, which then branches to the first dialog unit. In this case, a user input can be obtained and, depending on the response provided, either the dialog unit 5 or 21 is referenced. The corresponding dialog units can be stored in tabular form, whereby the numerical index can be a row number. Thus, as shown in the present figure, it is possible to branch dynamically, and each box shown corresponds to a dialog unit assigned to an actor. For example, it can be specified that the dialog unit 11 is provided by a user, and in a subsequent dialog unit, the dialogue is terminated by the proposed dialog system. The two arrows on the left illustrate that even more dialog units can be provided and that the proposed example according to FIG. 4 is merely a section of a larger-scale dialogue protocol. Since more than two branches are possible as well as diagonal steps in another dialog branch, a branch from 11 to 2 is also possible. All this contributes to a good user experience.
Fig. 5 zeigt in einem schematischen Ablaufdiagramm ein Verfahren zur effi zienten Dialoggestaltung und Interpretation in einem rechnergestützten, au- tomatisierten Dialogsystem, aufweisend ein Abspeichern 100 einer Mehrzahl von Dialogprotokollen zu jeweils mindestens einem Schlüsselwort, wobei die Dialogprotokolle jeweils eine dynamische Abfolge eines Dialogs spezifizie- ren, ein Auswählen 101 eines Dialogprotokolls in Abhängigkeit mindestens eines zur Laufzeit bereitgestellten 102 Schlüsselworts, ein Zuordnen 103 von Textbausteinen zu Dialogeinheiten des Dialogprotokolls, und ein Ausführen 104 des Dialogprotokolls zur Laufzeit. Erfindungsgemäß ist es besonders vorteilhaft, dass die Komponenten eines Dialogs in einem Voice-Dialog-System parametrisiert und nicht hartcodiert abgelegt werden und Dialogeinheiten durch Indexe eindeutig klassifiziert werden, wodurch es möglich wird, dass der Quellcode bzw. das Skript un- verändert bleibt, und neue Dialoge als Parameter-Tabellen dargestellt wer- den können, und Dialoge zudem von einer Voice-Dialog-System-5 shows a schematic flow diagram of a method for efficient dialog design and interpretation in a computer-aided, automated dialog system, comprising storing 100 a plurality of dialog protocols for at least one keyword each, the dialog protocols each specifying a dynamic sequence of a dialog. ren, selecting 101 a dialog protocol depending at least a keyword provided at runtime, an association 103 of text modules to dialogue units of the dialog protocol, and an execution 104 of the dialog protocol at runtime. According to the invention, it is particularly advantageous for the components of a dialog to be parameterized in a voice dialog system and not hard-coded, and dialog units to be unambiguously classified by indexes, which makes it possible for the source code or the script to remain unchanged, and new dialogues can be displayed as parameter tables, and dialogs can also be displayed by a voice dialog system
Entwicklungsumgebung in die andere portiert bzw. mittels Schnittstellen zu- gänglich gemacht werden können. Hierbei muss die Software nicht geändert werden und es können mehrteilige bzw. rekursive Dialoge durchgeführt wer- den, wobei insbesondere ermöglicht wird, dass die Maschine fragt und der Benutzer antwortet. Das Steuerprogramm selbst muss gemäß einem Aspekt der vorliegenden Erfindung einmal pro neuer Entwicklungsumgebung portiert werden, die DP dagegen nicht. Development environment can be ported in the other or made accessible via interfaces. In this case, the software does not have to be changed and multi-part or recursive dialogs can be carried out, in particular allowing the machine to ask and the user to answer. The control program itself must, according to one aspect of the present invention, be ported once per new development environment, but not the DP.
Erfindungsgemäß ist es schließlich vorteilhaft, dass die Maschine zunächst fragt, und dann der Benutzer antwortet, und die Antwort schließlich (per Steuerbefehl) dauerhaft gespeichert wird. Dies erlaubt die einfache Imple- mentation von Anwendungen, die diese Dialogstruktur benutzen, insbeson- dere von Umfragen (voice surveys) und von Datensammlungen (voice data collections). Finally, according to the invention, it is advantageous that the machine first asks, and then the user answers, and finally the response is permanently stored (via a control command). This allows the simple implementation of applications using this dialogue structure, in particular voice surveys and voice data collections.
Der Dialogverlauf und Benutzereingaben können auch dauerhaft gespeichert werden (auf Festplatte oder in einer Datenbank), was vorteilhaft für voice surveys/ data collections ist. Dialog history and user input can also be stored permanently (on disk or in a database), which is beneficial for voice surveys / data collections.

Claims

A n s p r ü c h e Claims
1. Verfahren zur effizienten Dialoggestaltung und Interpretation in einem rechnergestützten, automatisierten Dialogsystem, aufweisend: 1. A method for efficient dialog design and interpretation in a computerized, automated dialog system, comprising:
- Abspeichern (100) einer Mehrzahl von Dialogprotokollen zu jeweils mindes- tens einem Schlüsselwort, wobei die Dialogprotokolle jeweils eine dynami- sche Abfolge eines Dialogs spezifizieren und die dynamische Abfolge des Dialogs Teildialoge beschreibt, welche anhand von Verzweigungen zusam- mengestellt werden;  - storing (100) a plurality of dialog protocols for at least one keyword each, the dialog protocols each specifying a dynamic sequence of a dialog and describing the dynamic sequence of the dialog partial dialogs, which are compiled by means of branches;
- Auswahlen (101 ) eines Dialogprotokolls in Abhängigkeit mindestens eines zur Laufzeit bereitgestellten (102) Schlüsselworts, wobei das Schlüsselwort mittels einer Benutzereingabe und durch einen Steuerbefehl bereitgestellt wird, wobei der Benutzer das Schlüsselwort wählt und der Steuerbefehl hier zu einen Kontext modelliert, woraufhin das entsprechende Dialogprotokoll ausgewählt wird;  Selections (101) of a dialog protocol as a function of at least one keyword (102) provided at runtime, wherein the keyword is provided by means of a user input and a control command, wherein the user selects the keyword and the control command models a context here, whereupon the corresponding one Dialog protocol is selected;
- Zuordnen (103) von Textbausteinen zu Dialogeinheiten des Dialogproto- kolls; und  - assignment (103) of text modules to dialog units of the dialog protocol; and
- Ausführen (104) des Dialogprotokolls zur Laufzeit.  Execute (104) the dialog protocol at runtime.
2. Verfahren nach Anspruch 1 , wobei das Dialogprotokoll ein Vorhandensein von Dialogeinheiten und einen Dialogverlauf, welcher die Dialogeinheiten in temporale Abfolge setzt, spezifiziert. 2. The method of claim 1, wherein the dialog protocol specifies a presence of dialog units and a dialog history that sets the dialog units in temporal succession.
3. Verfahren nach Anspruch 1 oder 2, wobei die Dialogeinheiten als alpha- numerische Parameter abgespeichert werden. 3. The method of claim 1 or 2, wherein the dialog units are stored as alphanumeric parameters.
4. Verfahren nach einem der vorhergehenden Ansprüche, wobei die Dia- logeinheiten tabellarisch abgespeichert werden. 4. The method according to any one of the preceding claims, wherein the Diologo units are stored in tabular form.
5. Verfahren nach einem der vorhergehenden Ansprüche, wobei das 5. The method according to any one of the preceding claims, wherein the
Schlüsselwort unter Verwendung einer Technologie zum Verstehen einer natürlichen Sprache bereitgestellt wird. Keyword is provided using a technology for understanding a natural language.
6. Verfahren nach einem der vorhergehenden Ansprüche, wobei jeweils eine Dialogeinheit eine Aktivität eines Akteurs innerhalb des Dialogprotokolls spe- zifiziert. 6. The method according to any one of the preceding claims, wherein each one dialog unit specifying an activity of an actor within the dialogue protocol.
7. Verfahren nach einem der vorhergehenden Ansprüche, wobei eine Ver- zweigung in Abhängigkeit einer Benutzereingabe und/ oder durch einen Steuerbefehl ausgewählt wird. 7. The method according to any one of the preceding claims, wherein a branch depending on a user input and / or by a control command is selected.
8. Verfahren nach einem der vorhergehenden Ansprüche, wobei jede Dia- logeinheit eine Aktivität des Dialogsystems, eine Aktivität eines Benutzers, ein Ausführen von Steuerbefehlen und/ oder ein Terminieren des Verfahrens vorgibt. 8. The method according to claim 1, wherein each dialog unit specifies an activity of the dialog system, an activity of a user, the execution of control commands and / or a termination of the method.
9. Verfahren nach einem der vorhergehenden Ansprüche, wobei das Ausfüh- ren (104) des Dialogprotokolls zur Laufzeit ein Betreiben eines akustischen Dialogs zwischen dem Dialogsystem und einem Benutzer umfasst. 9. The method of claim 1, wherein executing (104) the dialog protocol at runtime comprises operating an audible dialog between the dialog system and a user.
10. Verfahren nach einem der vorhergehenden Ansprüche, wobei das Ver- fahren auf einem mobilen Endgerät, in einem Fahrzeug oder auf einer stati onären Recheneinheit ausgeführt wird. 10. The method according to any one of the preceding claims, wherein the method is carried out on a mobile terminal, in a vehicle or on a stati onary computing unit.
11. Verfahren nach einem der vorhergehenden Ansprüche, wobei Schnitt- steilen zu bestehenden internetbasierten Diensten bereitgestellt werden. 11. Method according to one of the preceding claims, wherein interfaces are provided to existing Internet-based services.
12. Systemanordnung zur effizienten Dialoggestaltung und Interpretation in einem rechnergestützten Dialogsystem, aufweisend: 12. System arrangement for efficient dialogue design and interpretation in a computer-based dialog system, comprising:
- eine Speichereinheit eingerichtet zum Abspeichern (100) einer Mehrzahl von Dialogprotokollen zu jeweils mindestens einem Schlüsselwort, wobei die Dialogprotokolle jeweils eine dynamische Abfolge eines Dialogs spezifizieren und die dynamische Abfolge des Dialogs Teildialoge beschreibt, welche an- hand von Verzweigungen zusammengestellt werden; - eine Recheneinheit eingerichtet zum Auswahlen (101 ) eines Dialogproto- kolls in Abhängigkeit mindestens eines zur Laufzeit bereitgestellten (102) Schlüsselworts, wobei das Schlüsselwort mittels einer Benutzereingabe und durch einen Steuerbefehl bereitstellbar ist, wobei der Benutzer das Schlüs- selwort wählt und der Steuerbefehl hierzu einen Kontext modelliert, worauf- hin das entsprechende Dialogprotokoll auswählbar ist; a memory unit configured to store (100) a plurality of dialog protocols for at least one keyword, the dialog protocols each specifying a dynamic sequence of a dialog and describing the dynamic sequence of the dialog component dialogs which are assembled by means of branches; - An arithmetic unit set up for selecting (101) a dialog protocol in response to at least one provided at runtime (102) keyword, wherein the keyword is provided by a user input and by a control command, the user selects the keyword and the control command for this purpose modeling a context, whereupon the corresponding dialog protocol can be selected;
- eine weitere Recheneinheit eingerichtet zum Zuordnen (103) von Textbau- steinen zu Dialogeinheiten des Dialogprotokolls; und  - A further arithmetic unit arranged for assigning (103) of text blocks to dialog units of the dialogue protocol; and
- eine Dialogeinheit eingerichtet zum Ausführen (104) des Dialogprotokolls zur Laufzeit.  a dialog unit configured to execute (104) the dialog protocol at runtime.
13. Computerprogrammprodukt mit Steuerbefehlen, welche das Verfahren nach einem der Ansprüche 1 bis 11 ausführen, wenn sie auf einem Compu- ter zur Ausführung gebracht werden. 13. Computer program product with control commands, which carry out the method according to one of claims 1 to 11, when they are executed on a computer ter.
EP19726908.7A 2018-05-29 2019-05-26 Efficient dialogue configuration Withdrawn EP3791386A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
EP18000483.0A EP3576084B1 (en) 2018-05-29 2018-05-29 Efficient dialog design
PCT/EP2019/025156 WO2019228667A1 (en) 2018-05-29 2019-05-26 Efficient dialogue configuration

Publications (1)

Publication Number Publication Date
EP3791386A1 true EP3791386A1 (en) 2021-03-17

Family

ID=62495532

Family Applications (2)

Application Number Title Priority Date Filing Date
EP18000483.0A Active EP3576084B1 (en) 2018-05-29 2018-05-29 Efficient dialog design
EP19726908.7A Withdrawn EP3791386A1 (en) 2018-05-29 2019-05-26 Efficient dialogue configuration

Family Applications Before (1)

Application Number Title Priority Date Filing Date
EP18000483.0A Active EP3576084B1 (en) 2018-05-29 2018-05-29 Efficient dialog design

Country Status (5)

Country Link
US (1) US11488600B2 (en)
EP (2) EP3576084B1 (en)
JP (1) JP7448240B2 (en)
CN (1) CN112204656A (en)
WO (1) WO2019228667A1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3576084B1 (en) 2018-05-29 2020-09-30 Christoph Neumann Efficient dialog design

Family Cites Families (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6665644B1 (en) 1999-08-10 2003-12-16 International Business Machines Corporation Conversational data mining
GB2372864B (en) * 2001-02-28 2005-09-07 Vox Generation Ltd Spoken language interface
US7606714B2 (en) * 2003-02-11 2009-10-20 Microsoft Corporation Natural language classification within an automated response system
JP4849662B2 (en) * 2005-10-21 2012-01-11 株式会社ユニバーサルエンターテインメント Conversation control device
JP4849663B2 (en) * 2005-10-21 2012-01-11 株式会社ユニバーサルエンターテインメント Conversation control device
JP5149737B2 (en) * 2008-08-20 2013-02-20 株式会社ユニバーサルエンターテインメント Automatic conversation system and conversation scenario editing device
US8126715B2 (en) * 2008-11-26 2012-02-28 Microsoft Corporation Facilitating multimodal interaction with grammar-based speech applications
US9378202B2 (en) * 2010-03-26 2016-06-28 Virtuoz Sa Semantic clustering
EP2575128A3 (en) 2011-09-30 2013-08-14 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
FR2989209B1 (en) * 2012-04-04 2015-01-23 Aldebaran Robotics ROBOT FOR INTEGRATING NATURAL DIALOGUES WITH A USER IN HIS BEHAVIOR, METHODS OF PROGRAMMING AND USING THE SAME
US20140180695A1 (en) * 2012-12-25 2014-06-26 Microsoft Corporation Generation of conversation to achieve a goal
US9466294B1 (en) * 2013-05-21 2016-10-11 Amazon Technologies, Inc. Dialog management system
JP6025785B2 (en) * 2013-07-08 2016-11-16 インタラクションズ リミテッド ライアビリティ カンパニー Automatic speech recognition proxy system for natural language understanding
KR101491843B1 (en) * 2013-11-13 2015-02-11 네이버 주식회사 Conversation based search system and search method
RU2014111971A (en) * 2014-03-28 2015-10-10 Юрий Михайлович Буров METHOD AND SYSTEM OF VOICE INTERFACE
EP2933070A1 (en) * 2014-04-17 2015-10-21 Aldebaran Robotics Methods and systems of handling a dialog with a robot
US10726831B2 (en) * 2014-05-20 2020-07-28 Amazon Technologies, Inc. Context interpretation in natural language processing using previous dialog acts
US20150370787A1 (en) * 2014-06-18 2015-12-24 Microsoft Corporation Session Context Modeling For Conversational Understanding Systems
US9830249B2 (en) * 2015-03-04 2017-11-28 International Business Machines Corporation Preemptive trouble shooting using dialog manager
US10659403B2 (en) * 2015-03-25 2020-05-19 Pypestream, Inc. Systems and methods for navigating nodes in channel based chatbots using natural language understanding
US10418032B1 (en) * 2015-04-10 2019-09-17 Soundhound, Inc. System and methods for a virtual assistant to manage and use context in a natural language dialog
JP6601069B2 (en) * 2015-09-01 2019-11-06 カシオ計算機株式会社 Dialog control apparatus, dialog control method, and program
JP2017049471A (en) * 2015-09-03 2017-03-09 カシオ計算機株式会社 Dialogue control apparatus, dialogue control method, and program
JP6960914B2 (en) * 2015-10-21 2021-11-05 グーグル エルエルシーGoogle LLC Parameter collection and automatic dialog generation in the dialog system
US10394963B2 (en) 2015-10-22 2019-08-27 International Business Machines Corporation Natural language processor for providing natural language signals in a natural language output
EP3374880A1 (en) * 2015-11-12 2018-09-19 Semantic Machines, Inc. Interaction assistant
CN106095833B (en) * 2016-06-01 2019-04-16 竹间智能科技（上海）有限公司 Human-computer dialogue content processing method
US10606952B2 (en) * 2016-06-24 2020-03-31 Elemental Cognition Llc Architecture and processes for computer learning and understanding
JP6819988B2 (en) * 2016-07-28 2021-01-27 国立研究開発法人情報通信研究機構 Speech interaction device, server device, speech interaction method, speech processing method and program
US12020174B2 (en) * 2016-08-16 2024-06-25 Ebay Inc. Selecting next user prompt types in an intelligent online personal assistant multi-turn dialog
CN106528522A (en) * 2016-08-26 2017-03-22 南京威卡尔软件有限公司 Scenarized semantic comprehension and dialogue generation method and system
US20180131642A1 (en) * 2016-11-04 2018-05-10 Microsoft Technology Licensing, Llc Conversation runtime
US20180261223A1 (en) * 2017-03-13 2018-09-13 Amazon Technologies, Inc. Dialog management and item fulfillment using voice assistant system
US10547729B2 (en) * 2017-03-27 2020-01-28 Samsung Electronics Co., Ltd. Electronic device and method of executing function of electronic device
US10666581B2 (en) * 2017-04-26 2020-05-26 Google Llc Instantiation of dialog process at a particular child node state
AU2018273197B2 (en) * 2017-05-22 2021-08-12 Genesys Cloud Services Holdings II, LLC System and method for dynamic dialog control for contact center systems
AU2018280354B2 (en) * 2017-06-09 2019-09-19 E & K Escott Holdings Pty Ltd Improvements to artificially intelligent agents
US10902533B2 (en) * 2017-06-12 2021-01-26 Microsoft Technology Licensing, Llc Dynamic event processing
US20190026346A1 (en) * 2017-07-24 2019-01-24 International Business Machines Corporation Mining procedure dialogs from source content
CN107657017B (en) * 2017-09-26 2020-11-13 百度在线网络技术（北京）有限公司 Method and apparatus for providing voice service
US10425247B2 (en) * 2017-12-12 2019-09-24 Rovi Guides, Inc. Systems and methods for modifying playback of a media asset in response to a verbal command unrelated to playback of the media asset
US10498898B2 (en) * 2017-12-13 2019-12-03 Genesys Telecommunications Laboratories, Inc. Systems and methods for chatbot generation
US10839160B2 (en) * 2018-01-19 2020-11-17 International Business Machines Corporation Ontology-based automatic bootstrapping of state-based dialog systems
US10430466B2 (en) * 2018-01-25 2019-10-01 International Business Machines Corporation Streamlining support dialogues via transitive relationships between different dialogues
US20190251966A1 (en) * 2018-02-15 2019-08-15 DMAI, Inc. System and method for prediction based preemptive generation of dialogue content
US10699708B2 (en) * 2018-04-24 2020-06-30 Accenture Global Solutions Limited Robotic agent conversation escalation
EP3576084B1 (en) 2018-05-29 2020-09-30 Christoph Neumann Efficient dialog design
US11308940B2 (en) * 2019-08-05 2022-04-19 Microsoft Technology Licensing, Llc Counterfactual annotated dialogues for conversational computing

Also Published As

Publication number Publication date
WO2019228667A1 (en) 2019-12-05
EP3576084B1 (en) 2020-09-30
US11488600B2 (en) 2022-11-01
JP2022501652A (en) 2022-01-06
EP3576084A1 (en) 2019-12-04
JP7448240B2 (en) 2024-03-12
US20210210092A1 (en) 2021-07-08
CN112204656A (en) 2021-01-08

Similar Documents

Publication Publication Date Title
DE60222093T2 (en) METHOD, MODULE, DEVICE AND VOICE RECOGNITION SERVER
EP1927980B1 (en) Method for classifying spoken language in spoken dialogue systems
DE10220524B4 (en) Method and system for processing voice data and recognizing a language
EP1964110B1 (en) Method for triggering at least one first and second background application via a universal language dialogue system
DE69822296T2 (en) PATTERN RECOGNITION IN A DISTRIBUTED SYSTEM
DE60005326T2 (en) DETECTION UNITS WITH COMPLEMENTARY LANGUAGE MODELS
EP1336955B1 (en) Method for natural speech synthesis in a computer-based dialogue system
DE60201262T2 (en) HIERARCHICAL LANGUAGE MODELS
EP1435088B1 (en) Dynamic creation of a conversational system from dialogue objects
DE102011103528A1 (en) Modular speech recognition architecture
EP0987682B1 (en) Method for adapting linguistic language models
EP1361737A1 (en) Method and system for speech signal processing and classification of dialogues
DE60105063T2 (en) DEVELOPMENT TOOL FOR A DIALOG FLOW INTERPRETER
DE69333762T2 (en) Voice recognition system
EP3152753A1 (en) Assistance system that can be controlled by means of voice inputs, having a functional device and a plurality of voice recognition modules
EP3576084B1 (en) Efficient dialog design
EP3115886B1 (en) Method for operating a voice controlled system and voice controlled system
EP1659571A2 (en) Speech dialogue system and method for running it
EP3735688B1 (en) Method, device and computer-readable storage medium having instructions for processing a speech input, motor vehicle, and user terminal with speech processing
DE102019217751A1 (en) Method for operating a speech dialogue system and speech dialogue system
EP2141692A1 (en) Automated speech-controlled support of a user
EP1363271A1 (en) Method and system for processing and storing of dialogue speech data
EP1959430A2 (en) Method for automatically generating voiceXML speech applications from speech dialog models
WO2018091662A1 (en) Method for creating and/or changing a collection of data sets for a dialog-guided technical aid for support in the creation and/or changing of data-processing programs or database entries
EP4040433A1 (en) Dynamic generation of a chain of function modules of a virtual assistant

Legal Events

Date Code Title Description
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE INTERNATIONAL PUBLICATION HAS BEEN MADE

PUAI Public reference made under article 153(3) epc to a published international application that has entered the european phase

Free format text: ORIGINAL CODE: 0009012

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: REQUEST FOR EXAMINATION WAS MADE

17P Request for examination filed

Effective date: 20201208

AK Designated contracting states

Kind code of ref document: A1

Designated state(s): AL AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HR HU IE IS IT LI LT LU LV MC MK MT NL NO PL PT RO RS SE SI SK SM TR

AX Request for extension of the european patent

Extension state: BA ME

DAV Request for validation of the european patent (deleted)
DAX Request for extension of the european patent (deleted)
STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: EXAMINATION IS IN PROGRESS

17Q First examination report despatched

Effective date: 20211027

STAA Information on the status of an ep patent application or granted ep patent

Free format text: STATUS: THE APPLICATION IS DEEMED TO BE WITHDRAWN

18D Application deemed to be withdrawn

Effective date: 20220507