DE10033915B4

DE10033915B4 - Testing device for speech dialogues

Info

Publication number: DE10033915B4
Application number: DE2000133915
Authority: DE
Inventors: Marian Trinkel; Christel Müller
Original assignee: Deutsche Telekom AG
Current assignee: Deutsche Telekom AG
Priority date: 2000-07-05
Filing date: 2000-07-05
Publication date: 2005-11-03
Anticipated expiration: 2020-07-06
Also published as: DE10033915A1

Abstract

System aufweisend eine erste passive Rechnereinheit, auf der eine Menuführung realisiert ist, die einen mit der Einheit verbundenen Dialogpartner über Sprachanweisungen anleitet, mit Hilfe gesprochener Worte oder erzeugter Tonsignale, insbesondere über DTMF-Signale, vorgegebene Menupunkte auszuwählen, dadurch gekennzeichnet, dass für einen Test der auf der ersten Rechnereinheit laufenden dialoggesteuerten Menuführung der Dialogpartner als eine zweite Rechnereinheit (3, 6, 13) ausgebildet ist, die aktiv ist und ein Sprachmodul aufweist, das gesprochene Worte und/oder Tonsignale generiert und diese der ersten Rechnereinheit (2, 5, 14) zur Führung eines Dialoges zuführt.system comprising a first passive computer unit on which realizes a menu guide which is a dialogue partner associated with the unit via voice prompts instructs, by means of spoken words or generated sound signals, especially about DTMF signals to select predetermined menu items, characterized that for a test of running on the first computer unit dialog-driven menu navigation the dialogue partner as a second computer unit (3, 6, 13) is formed which is active and has a speech module that is spoken Words and / or sound signals generated and these the first computer unit (2, 5, 14) for guidance to a dialog.

Description

Die vorliegende Erfindung betrifft ein System aufweisend eine erste passive Rechnereinheit, auf der eine Menuführung realisiert ist, die einen mit der Einheit verbundenen Dialogpartner üner Sprachanweisungen anleitet, mit Hilfe gesprochener Worte oder erzeugter Tonsignale, insbesondere über DTMF-Signale (Digital Ton Multi Frequency), vorgegebene Menupunkte auszuwählen (dialoggesteuerte Menueführung). Die Erfindung betrifft weiterhin eine Rechnereinheit, die über eine Datenleitung, insbesondere über das Internet oder eine Telefonleitung, Zugang zu einer anderen Rechnereinheit hat, auf der ein dialoggeführtes Menu abrufbar ist.The The present invention relates to a system comprising a first passive computer unit on which a menu guide is realized, the one with the unit associated dialogue partner guides voice instructions, by means of spoken words or generated sound signals, in particular via DTMF signals (digital Sound Multi Frequency), to select preset menu items (dialog controlled menu guide). The invention further relates to a computer unit, which has a Data line, in particular via the Internet or a telephone line, access to another computer unit has, on the one conversational Menu is available.

Derartige Systeme mit dialoggesteuerter Menueführung werden seit einiger Zeit eingesetzt und gewinnen immer stärker an Bedeutung. Vermittels dieser Systeme kann ein Benutzer über das Telephon bei einer anderen elektronischen Einheit anrufen und einen von dieser Einheit vorgegebenen Dialog (Sprachbox) führen, um eine Service-Leistung in Anspruch zu nehmen. Zunächst fanden solche Systeme Anwendung bei der Fernabfrage von Anrufbeantwortern, die über DTMF-Signale ansteuerbar waren. Heute setzen sich immer stärker Systeme durch, bei denen der Nutzer sich vermittels gesprochener Worte durch ein vorgegebenes Menue "navigieren" kann, um letztendlich eine gewünschte Information zu erhalten, eine Bestellung aufzugeben oder eine Dienstleistung in Anspruch zu nehmen. So vereinfacht diese dialoggesteuerte Menueführung beispielsweise das An- oder Abmelden von Gas-, Wasser- oder Stromzählern. Da diese Systeme im Laufe der Zeit immer komplexer und damit auch störanfälliger werden, ist es zunehmend wichtiger, sie vor Inbetriebnahme einer eingehenden Prüfung zu unterziehen.such Systems with dialog-driven menu guidance have been around for some time used and win more and more in importance. By means of these systems, a user can use the Call the telephone at another electronic unit and one from this unit predetermined dialogue (voicebox) to to make use of a service. Initially, such systems were used in the remote inquiry of answering machines, which can be controlled via DTMF signals were. Today, systems are becoming increasingly prevalent in which the user speaks by spoken words through a given Menu can "navigate" to ultimately a desired one Receiving information, placing an order or providing a service to claim something. For example, this dialog-driven menu guide simplifies this Logging in or out of gas, water or electricity meters. Because these systems are in the As time goes by, it becomes more and more complex and more prone to failure more importantly, before commissioning an in-depth review undergo.

Ein System zu Fernsteuerung eines Anrufbeantworters mittels Sprachbefehlen, die von einem Benutzer gesprochen werden, ist z.B. aus der DE 195 14 849 A1 bekannt.A system for remote control of an answering machine by means of voice commands spoken by a user, for example, from DE 195 14 849 A1 known.

Die bislang bekannten Möglichkeiten zum Testen der Systeme erschöpfen sich darin, dass eine Vielzahl von Testpersonen sich vermittels ihrer Sprache durch die Dialoge navigiert und die Reaktionen des elektronischen Gegenübers registriert. Diese Art der Tests ist mit einem großen Aufwand verbunden, der mit der Komplexität der Systeme entsprechend wächst. So müssen zunächst auf das jeweils zu testende Produkt zugeschnittene Testkonzepte erdacht werden, die den Testpersonen mitgeteilt werden, bevor diese mit den eigentlichen Test beginnen können. Um einfache Systeme zu testen, bedarf es schon einer Kapazität von mehreren Mannmonaten. Die benötigte Kapazität wächst mit der Komplexität der Systeme nahezu exponen-tiell. Letztendlich ist es schon heute nicht mehr möglich, die vorhandenen Systeme mit ausreichender Genauigkeit zu untersuchen, so dass diese im späteren Betrieb zwangsläufig Unzulänglichkeiten aufweisen müssen. Mit dem Aufwand der Testreihen verlängert sich zudem die Zeit, bis ein Produkt an den Markt gebracht werden kann, und die Einführung von Updates verspätet sich bisweilen solange, dass das Produkt an Aktualität verliert.The previously known options exhaust to test the systems The fact that a large number of test persons mediate themselves navigated their language through the dialogues and the reactions of the electronic counterpart registered. This type of testing is associated with a great deal of effort with the complexity the systems grow accordingly. So have to first customized test concepts for each product to be tested be thought out, which will be communicated to the test persons before this can start with the actual test. To simple systems too testing, it already requires a capacity of several man months. The needed capacity grows with the complexity of systems almost exponential. After all, it's already today not possible anymore, Examine the existing systems with sufficient accuracy so this later Operation inevitably shortcomings must have. The effort of the test series also prolongs the time until a product can be put on the market and the introduction of Updates are delayed sometimes so long that the product loses its topicality.

Aufgabe der vorliegenden Erfindung ist es nunmehr, ein System zu schaffen, das bei hoher Flexibilität und geringen Bereitstellungskosten fähig ist, solche Einheiten aufweisend eine dialoggesteuerte Menueführung in kurzer Zeit und mit einer hohen Präzision zu testen und so zur Schaffung verbesserter und aktuellerer Systeme mit derartigen Sprachboxen beizutragen.task It is now the object of the present invention to provide a system that with high flexibility and low provisioning costs, having such units a dialog-controlled menu guide in a short time and with a high precision test and so on Creating improved and more up-to-date systems with such voice boxes.

Diese Aufgabe wird durch das System nach Anspruch 1 gelöst und eine Rechnereinheit nach Anspruch 9 gelöst.These Problem is solved by the system according to claim 1 and a Computer unit according to claim 9 solved.

Der Grundgedanke der Erfindung liegt darin, den menschlichen Tester, der sich mittels der eigenen Sprache oder der Übermittlung von Ton-Signalen durch den maschinellen Dialog navigiert, durch eine Rechnereinheit insbesondere einen Computer zu ersetzen. Dabei ist diese zweite Rechnereinheit insofern aktiv, als sie den Dialog, der sich in vorgegebenen Grenzen bewegt, aktiv und individuell gestalten und beeinflussen kann. Beispielsweise kann sie nicht vorgesehene Äußerungen tun, um das zu testende System an seine Grenzen zu führen. Es ist der zweiten aktiven Einheit auch möglich, den Dialog selbstständig zu beenden. Diese aktive Einheit ist daher vorteilhafterweise so zu konzipieren, dass sie die zu testende passive Einheit an "Intelligenz" übertrifft, um diese mit Grenzsituationen kontrolliert konfrontieren zu können. Diese zweite Einheit weist zur Schaffung der Dialogiahigkeit ein programmiertes Sprachmodul auf, das gesprochene Worte oder einfache Tonsignale (DTMF-Signale) generiert und diese Laute der ersten Rechnereinheit zur Führung des Dialoges übermittelt. Auf diese Art wird mit der Erfindung eine besonders zuverlässige und vorallem kostengünstige Möglichkeit geschaffen, die zu Dialogen mit dem Nutzer geeigneten Einheiten wie Computer, Sprach- und/oder Dialogboxen zu testen. Dabei haben die automatisch durchgeführten Tests neben den geringen Kosten auch den Vorteil der hohen Qualität, da sich automatisch eine entsprechend große Anzahl von Tests durchführen lassen. So tragen die besonders wirtschaftlichen Tests zu einem signifikanten Personalabbau bei und senken damit die Kosten.Of the The basic idea of the invention is to provide the human tester, by means of their own language or the transmission of sound signals by navigates the machine dialog, in particular by a computer unit to replace a computer. In this case, this second computer unit insofar active as the dialogue, which is within given limits moves, actively and individually design and influence. For example can it not provided comments to push the system being tested to its limits. It it is also possible for the second active unit to independently start the dialogue break up. This active unit is therefore advantageously too conceive that it surpasses the passive unit being tested to "intelligence" in order to deal with borderline situations to confront in a controlled manner. This second unit encourages dialogue programmed voice module, the spoken words or simple Sound signals (DTMF signals) generated and these sounds of the first computer unit to the leadership of the dialogue. In this way, with the invention, a particularly reliable and especially cheap way created to dialogues with the user appropriate units like computers, voice and / or dialog boxes to test. Have along the automatically performed Tests in addition to the low cost and the advantage of high quality, since automatically a correspondingly large Number of tests to let. So the particularly economical tests contribute to one Significant staff reductions and thus reduce the costs.

Weitere Vorteile liegen auf der Hand: So sind während der Testphase insofern Zeiteinsparungen möglich, als sich eine Vielzahl von Tests parallel durchfuhren lässt und die Tests auch außerhalb der vorher zu beachtenden Regelarbeitszeiten durchgeführt werden können. Wegen der Beschleunigung der Tests können die Produkte schneller im Markt eingeführt werden und weisen daher eine höhere Aktualität und Anpassungsfähigkeit auf. Aus der Vielzahl der Tests lassen sich zudem eine Reihe von programmspezifischen Parametern, wie die z. B. mittlere Service-Durchlaufzeit, ermitteln und zur Optimierung der Kosten des durch die Dialogbox geschaffenen Services nutzen. Zudem werden die durch die menschlichen Tester zwangsläufig entstehenden Unzulänglichkeiten vermieden, die aus deren natürlicher Nachlässigkeit resultieren. Durch den Automaten lassen sich unabhängige, objektive und damit zertifizierbare Tests durchführen.Further advantages are obvious: In this way, time savings are achieved during the test phase possible, as a large number of tests can be carried out in parallel and the tests can also be carried out outside of the previously observed normal working hours. Due to the acceleration of the tests, the products can be introduced faster in the market and therefore have a higher timeliness and adaptability. From the large number of tests, a number of program-specific parameters, such as the z. B. average service lead time, determine and use to optimize the cost of the service created by the dialog box. It also avoids the inadequacies inherent in human testers resulting from their natural negligence. The machine can be used for independent, objective and thus certifiable tests.

Zur Realisierung des Systems können beide Rechnereinheiten in nur einem Computer untergebracht sein. Dazu wird neben der eigentlichen und von einem Programm realisierten dialoggesteuerten Menueführung eine Art gespiegeltes Programm installiert, das dem Menue die gewünschten Vorgaben machen kann. Der Vorteil einer solchen Realisierung liegt darin, dass die Tests autonom und ohne weitere Hilfsmittel, wie verbindende Datenleitungen, durchgeführt werden können. Solche auf nur einem einzigen Rechner untergebrachten Systeme sind gerade zum Test von wenig umfangreichen Menueführungen besonders geeignet. Sie sind jeweils auf die spezielle Anwendung zugeschnitten und damit besonders kompakt und schnell.to Realization of the system can both computer units can be accommodated in only one computer. This is done in addition to the actual and realized by a program dialog controlled menu guide Installed a kind of mirrored program that gives the menu the desired Defaults can make. The advantage of such a realization lies in that the tests are autonomous and without further aids, such as connecting data lines, can be performed. Such on a single computer accommodated systems are just for Test of little extensive menu guides particularly suitable. They are each tailored to the specific application and thus very compact and fast.

In einer für komplexe Anwendungen zu bevorzugenden Ausführungsform sind die Rechnereinheiten voneinander getrennte Computer, die über eine Datenleitung, insbesondere über das Internet oder ein Telephonnetz, miteinander verbunden sind. Auf diese Weise, bei der der aktive Computer den Anrufer und der passive Computer den Angerufenen darstellt, wird der Dialog besonders realitätsnah und unter Berücksichtigung der durch die oft schlechte Qualität der Datenleitung geschaffenen Unwägbarkeiten simuliert. Weiterer Vorteil der getrennten Computer ist, dass sich von zentraler Stelle aus jede Dialoganwendung einer anderen Einheit testen lässt. Eine solche Zentralisierung trägt zu einer weiteren Kostensenkung und so vor allem zu einer größeren Flexibilität beim Einsatz der Erfindung bei. Zudem lassen sich die Tests besser koordinieren und die zentral gesammelten Ergebnisse mit guter Statistik auswerten.In one for complex applications to preferred embodiment are the computer units Computers separated from each other via a data line, in particular via the Internet or a telephone network, are interconnected. On this way in which the active computer is the caller and the passive one Computer represents the called party, the dialogue is particularly realistic and under consideration the one created by the often poor quality of the data line uncertainties simulated. Another advantage of the separate computer is that from a central point every dialogue application of another unit lets test. A carries such centralization to a further cost reduction and thus above all to a greater flexibility in the use of the invention. In addition, the tests can be better coordinated and evaluate the centrally collected results with good statistics.

Für die Realisierung der aktiven Einheit sind verschiedene Ausführungsformen vorteilhaft. So kann die Generierung der für den Test zu verwendenden Worte in einer einfachen Ausführungsform anhand eines Wörterbuches geschehen, das in einer für den Computer zugänglichen Antwortdatei gespeichert ist. Ein solcher Zugriff ist schnell und entsprechend komfortabel. Für die technische Umsetzung ist es dabei denkbar, die Worte über Verweise auf das Wörterbuch direkt in das Programm zu implementieren. Die Erfindung bedient sich dann eines Satzes für den Test einer speziellen Einheit benötigter Begriffe. In einer anderen vorteilhaften Ausführungsform wird die Antwortdatei mit menschlichen Stimmen besprochen. Sie enthält damit einen fest vorgegebenen üegendialog. In diesem Falle könnte die zweite aktive Einheit sogar von einem einfachen Tonband realisiert sein. In einer weiteren Ausführungsform wird die Intelligenz der aktiven Einheit dadurch gesteigert, dass die vom passiven Computer vorgegebenen Worte vom aktiven Computer aufgegriffen und wie ein Echo auf den passiven Computer reflektiert werden. Diese Ausführungsform garantiert eine hohe Flexibilität des Systems.For the realization In the active unit, various embodiments are advantageous. So can the generation of for the words to be used in a simple embodiment using a dictionary done that in one for the Computer accessible Answer file is stored. Such access is fast and easy accordingly comfortable. For the technical implementation, it is conceivable, the words about references to the dictionary to implement directly in the program. The invention operates then a sentence for the Test a special unit of required terms. In another advantageous embodiment the answer file is discussed with human voices. It contains it a fixed üegendialog. In this case could the second active unit may even be realized by a simple tape recorder. In a further embodiment the intelligence of the active unit is increased by the fact that the from the passive computer given words taken from the active computer and how an echo is reflected on the passive computer. This embodiment guarantees a high flexibility of the system.

Für aufwendigere und der Realität besser ange-passte Testreihen ist es vorteilhaft, wenn der aktive Computer das Sprachmodul einen Stimmengenerator aufweist, der mittels vorgegebener Kriterien selbstständig Worte einer menschlichen Sprache generiert.For more elaborate and the reality better adapted test series, it is advantageous if the active Computer, the speech module has a voice generator, by means of independent criteria Generated words of a human language.

Diese selbst generierten Worte können die Unzulänglichkeiten der menschlichen Sprache mit ihrem Reichtum an Vielfalt besser simulieren und damit härtere Testbedingungen für das System schaffen. Gleichfalls ist es vorteilhaft, die aktive Einheit, insbesondere das Sprachmodul mit Mitteln zur Variation der Aussprache der generierten Wörter auszustatten. Auf diese Weise wird eine noch größere Annäherung an die Realität erreicht.These self-generated words can the shortcomings to better simulate human language with its wealth of diversity and thus harder Test conditions for to create the system. Likewise, it is advantageous to use the active Unit, in particular the speech module with means for varying the Pronunciation of generated words equip. In this way an even closer approach to reality is achieved.

Die Erfindung lässt sich vorteilhaft einsetzen zur Realisierung von Testmaschinen für die genannten DTMF Applikationen und Sprachapplikationen, aber auch Video-und/oder e-business- Applikationen.The Invention leaves to use advantageous for the realization of test machines for the mentioned DTMF applications and voice applications, but also video and / or e-business applications.

Die Erfindung wird im folgenden anhand der 1 bis 3 näher beschrieben. Es zeigen:The invention will be described below with reference to the 1 to 3 described in more detail. Show it:

1 ein auf einem Computer realisiertes System, 1 a system realized on a computer,

2 ein auf zwei Computern realisiertes System und 2 a system realized on two computers and

3 ein auf einem Computer realisiertes System, wobei die Einheiten über ein externes Netz verbunden sind. 3 a system implemented on a computer, the units being connected via an external network.

In 1 ist das erfindungsgemäße System 1 mit zwei in diesem Falle über eine interne Datenleitung verbundenen Rechnereinheiten 2 und 3 gezeigt. Auf der einen ersten passiven Einheit 2 ist eine Menueführung in Form einer Dialog-Applikation realisiert. Auf der zweiten aktiven Einheit 3 läuft ein Testprogramm (Testapplikation), das ein Sprachmodul bildet. Das Sprachmodul generiert gesprochene Worte und/oder Tonsignale und führt diese Laute der ersten Rechnereinheit 2 zur Führung des Dialoges zu. Die beiden Rechnereinheiten 2 und 3 greifen auf einen gemeinsamen Speicher 4 zu, der einerseits die Dialog-Applikation und andererseits die Testapplikation beinhaltet. Beide Einheiten 2 und 3 verhalten sich wie Dialogpartner und kommunizieren nicht über herkömmliche Daten sondern über digitalisierte Laute, insbesondere gesprochene Worte oder erzeugte Ton Signale (DTMF-Signale). Die Dialogführung läuft nach einem Schema ab, das sich als Hintereinanderschaltung von Abfragen darstellen lässt.In 1 is the system according to the invention 1 with two computer units connected in this case via an internal data line 2 and 3 shown. On the one first passive unit 2 is implemented a menu guide in the form of a dialog application. On the second active unit 3 runs a test program (test application), which forms a language module. The speech module generates spoken words and / or sound signals and carries these sounds of the first computer unit 2 to lead the dialogue too. The two computer units 2 and 3 access a shared memory 4 to, on the one hand contains the dialogue application and on the other hand, the test application. Both units 2 and 3 behave like dialogue partners and communicate not via conventional data but via digitized sounds, in particular spoken words or generated sound signals (DTMF signals). The dialog is based on a scheme that can be represented as a series of queries.

In 2 ist ein System gezeigt, bei dem ein passiver Computer 5 und ein aktiver Computer 6 über ein Telephonnetz 7 kommunizieren. Beide Computer greifen dabei auf ihre eigene Datenbank 8 bzw. 9 zu. Auf dem aktiven Computer 5 läuft wiederum eine Testapplikation 10, während die zu testende Dialog-Applikation 11 auf dem passiven Rechner 6 installiert ist. Der Dialog zwischen beiden Einheiten 5 und 6 erfolgt in der Weise, dass Anforderungen 11 an den passiven Computer übermittelt werden und die Antwortdaten 12 über das Netz 7 zurückgesendet werden.In 2 is a system shown where a passive computer 5 and an active computer 6 over a telephone network 7 communicate. Both computers access their own database 8th respectively. 9 to. On the active computer 5 in turn runs a test application 10 while the dialog application being tested 11 on the passive computer 6 is installed. The dialogue between both units 5 and 6 done in the way that requirements 11 be transmitted to the passive computer and the response data 12 over the net 7 be sent back.

3 zeigt nunmehr das System vereint in einem Rechner mit zwei getrennten Einheiten 12 und 13, wobei beide Einheiten, wie im Falle des Beispiels nach 1, auf eine Datenbank 14 zugreifen, die Einheiten jedoch nicht über einen internen Bus, sondern ein externes Netz 15 verbunden sind. Die Kommunikation erfolgt wiederum über Anforderungen 11 und Antwortdaten 12. 3 now shows the system united in a computer with two separate units 12 and 13 , where both units, as in the case of the example 1 , to a database 14 However, the units do not have an internal bus but an external network 15 are connected. In turn, communication takes place via requirements 11 and answer data 12 ,

Claims

System comprising a first passive computer unit on which a menu guide is implemented, which instructs a dialogue partner connected to the unit via voice instructions, using spoken words or generated audio signals, in particular via DTMF signals to select predetermined menu items, characterized in that for a test the dialogue-controlled menu operation of the dialogue partners running on the first computer unit as a second computer unit ( 3 . 6 . 13 ) is formed, which is active and has a speech module that generates spoken words and / or sound signals and this the first computer unit ( 2 . 5 . 14 ) leads to the conduct of a dialogue.

System according to claim 1, characterized in that the computer units are separate computers ( 5 . 6 ), which are connected via a data line ( 7 ) are interconnected.

System according to claim 2, characterized in that the data line ( 7 ) is the internet or a telephone network.

System according to one of the preceding claims, characterized in that the active computer ( 3 . 6 . 13 ) to an answer file ( 4 . 8th . 9 . 14 ) which contains specific answers and / or a dictionary.

System according to claim 4, characterized in that the answer file contains recordings of human voices.

System according to one of the preceding claims, characterized in that the active unit ( 3 . 6 . 13 ) that of the passive unit ( 2 . 5 . 14 ) picks up given words of the menu guidance and feeds them like an echo to the passive unit.

System according to one of the preceding claims, characterized characterized in that the voice module has a voice generator, by means of predetermined criteria independently words of a human Language generated.

System according to one of the preceding claims, characterized characterized in that the speech module comprises means for varying the pronunciation the generated words having.

Computer unit, via a data line, in particular via the Internet or a telephone line, access to another computer unit has, on the one conversational Menu is callable, characterized by a language module that has a linguistic Dialog with the menu leads, to test the function of the menu.

Computer unit according to one of the preceding claims by means that are a record of the dialogue resulting from the dialogue Allow results.