WO2016192825A1 - Zustandsindikator für ein datenverarbeitungssystem - Google Patents

Zustandsindikator für ein datenverarbeitungssystem Download PDF

Info

Publication number
WO2016192825A1
WO2016192825A1 PCT/EP2016/000554 EP2016000554W WO2016192825A1 WO 2016192825 A1 WO2016192825 A1 WO 2016192825A1 EP 2016000554 W EP2016000554 W EP 2016000554W WO 2016192825 A1 WO2016192825 A1 WO 2016192825A1
Authority
WO
WIPO (PCT)
Prior art keywords
data processing
processing system
user
indicator
operating state
Prior art date
Application number
PCT/EP2016/000554
Other languages
English (en)
French (fr)
Inventor
Andreas BLATTNER
Stefan Mayer
Hannes MÖGELE
Christine Ullmann
Original Assignee
Audi Ag
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Audi Ag filed Critical Audi Ag
Publication of WO2016192825A1 publication Critical patent/WO2016192825A1/de

Links

Classifications

    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/225—Feedback of the input speech
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00—Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/06—Transformation of speech into a non-audible representation, e.g. speech visualisation or speech processing for tactile aids
    • G10L21/10—Transforming into visible information
    • G10L21/14—Transforming into visible information by displaying frequency domain information

Definitions

  • the present invention relates to a method for restraining an operating state in a dialog of a user with a
  • the present invention relates to a data processing system for carrying out the presented method.
  • the user interface or the system connected to the user interface passes through various states that affect the interaction with the user. For example, after a recognized and detected voice input, the system switches to a processing mode that uses computational capacity comprised by the system to interpret the voice input. Accordingly, the system is only limitedly available during the execution of the processing mode and, for example, can not accept new voice commands. If the user is not made aware of the internal state of the system, namely the processing mode, it may happen that the user in vain transmits new voice commands to the system and interferes with or even aborts interaction between the system and the user.
  • EP 1 127 748 A2 is a
  • Speech control device that supports voice output with artificial facial expressions and / or gestures.
  • German patent application DE 10 2011 121 110 A1 relates to a
  • a method of operating a speech dialogue system for a vehicle wherein color codes of different color sets differ
  • Data processing system is in operative contact with at least one to be displayed on a display unit status indicator, located in
  • Data processing system and / or an input of the user changes dynamically and thereby provides feedback to the user. Embodiments result from the description and the dependent claims.
  • the presented method is used in particular for the visualization of
  • System states of a data processing system when interacting with a user via a user interface, such as a
  • Speech recognition system To the user with an input of bspw.
  • a dynamically changing feedback of the data processing system to the user it is the
  • Data processing system can be detected and processed. In order to provide the user with an efficient and user-friendly feedback on a current operating state of a respective
  • a virtual agent can be used, which serves as a virtual user interface and is visualized via an embodiment of the inventively provided state indicator, for example.
  • a moving cube or a point cloud and the user provides various interaction options. It is provided according to the invention that the status indicator changes dynamically as a function of the current operating state of the
  • Data processing system or the virtual agent changes and / or provides appropriate action options for the current operating state.
  • an interaction between the user and the data processing system can be coordinated, whereby both
  • a data processing system in a vehicle various operating states of the data processing system by a state indicator, d. H. for example, a data processing system
  • condition indicator is to be understood as meaning any collection of graphic and / or acoustic patterns which is suitable for determining different operating states of a system
  • a status indicator may be used as
  • Display unit such as. A screen is displayed to be configured.
  • an operating state means any state of a data processing system in which the
  • Data processing system pursues a particular task or a particular state, such as.
  • a state "Active / Available” or “receptive” accepts.
  • the state indicator is to be changed in its movement as a function of the current operating state of a particular data processing system.
  • a state indicator in the form of a cube is shown as being rigid in a first operating state and rotating in a second operating state in order, for example, to distinguish a standby mode from an active mode.
  • a dynamically changing 3D visual object is selected as the status indicator.
  • Operating conditions are assigned to a respective movement pattern of a respective state indicator fixed or from a respective user to a specific operating state of a respective Be assigned to data processing system.
  • abstract shapes such as three-dimensional point clouds, for
  • Non-human, state indicator can in an interaction of a data processing system with a respective user, emotional communication patterns, such as discomfort or anger, as they are known from human communication avoided or
  • a voice dialogue system is selected as the data processing system.
  • the state indicator provided according to the invention can be used, for example, for phases of "listening” and “speaking” for a respective user during an interaction with a user
  • the user may be presented with a continuous processing of a command entered by the user, so that the user can dispense with repetitive input of the command due to ignorance of a suspected failure to recognize the command by the data processing system and even longer processing steps will not interfere with the interaction between human and Cause data processing system.
  • Operating state of the data processing system at least one
  • the state indicator provided according to the invention indicates a standby mode by slowly turning a cube to the left, wherein within the cube a message symbol lights up, which indicates to the user new notifications that the user transmits
  • Interaction with the data processing system can retrieve.
  • Interaction option be provided with the respective data processing system, which can be displayed by additional graphical symbols and / or movements and / or audible cues.
  • the status indicator assigns a specific acoustic and / or visual pattern to each operating state of the following list of operating states of the data processing system:
  • Condition indicator lead an interaction with a user and, for example, a voice dialogue system complement such that an efficient and natural for the user interaction takes place, in which the user the
  • Data processing system provides time for processing if and only if needed by the data processing system and then enters commands when they can be received by the data processing system. Additional activation of the data processing system, for example by a push-to-talk key, can be achieved by using a constantly displayed and dynamically updated operating state
  • the state indicator provided according to the invention changes at least partially as a function of a frequency of a voice input currently being made by a respective user.
  • the status indicator for example, a
  • Frequency spectrum or a transformation of the frequency spectrum of the voice input reproduces, so that the user is given a direct feedback on a recognition performance of the data processing system and the user if necessary changes his language and, for example, speaks louder or clearer. This can be done, for example, by the status indicator a critical
  • Threshold for example, a volume is displayed, which is required for a correct recognition performance. Furthermore, the present invention relates to a data processing system having a user interface and a display unit, wherein the
  • User interface with at least one to be displayed on the display unit status indicator is in operative contact, which is configured to be a function of a current operating state of the
  • the presented data processing system is used in particular for
  • Data processing system is configured to execute a virtual agent for controlling functions of a vehicle.
  • the presented data processing system is particularly suitable for providing a visualization of a virtual agent for guiding an interaction of the data processing system with a user.
  • the state indicator provided according to the invention is configured, for example, as a movable cube and as a virtual agent or
  • the status indicator dynamically visualizes various operating states of the data processing system or
  • the virtual agent can display various options for action by means of the status indicator, from which the user can select in a respective operating state. It is understood that the features mentioned above and those yet to be explained not only in the particular combination, but also in other combinations or alone, without the scope of the
  • FIG. 1 shows an assignment of visual patterns to operating states of a data processing system according to a possible embodiment of the presented method.
  • FIG. 2 shows a further assignment of visual patterns
  • FIG. 1 shows a table 1 which differs in column 3
  • the visual patterns are based on a cube, which is modified depending on the operating state of the speech dialogue system.
  • Voice dialogue system by a slow rotation of the cube to the left indicates, as indicated in box 7. Furthermore, an operating state 12 "ready to take” is displayed by aligning the cube with the user, as shown in box 9.
  • Alignment is illustrated by a colored mark 11 and can be activated, for example, in response to activation of a push-to-talk button or by addressing the voice dialogue system by the user.
  • An operating state 14 "listening" may be accomplished by color flickering of the user-facing cube in a user's voice frequency, as shown in box 13.
  • box 15 a cube is shown, which turns on when activating a
  • Operating state 16 "Processing / obtaining information” rotates or tilts.
  • An operating state 18 "responses" can, for example, be effected by a transition of the cube into a slow or normal rotation to the left, wherein colored light is emitted in the direction of the user, as indicated in field 17.
  • a feedback of a speech dialogue system to a user is generated by means of a spatial or three-dimensional point cloud according to Table 2. Different occurrences of the point cloud in
  • the operating state 10 "Active / Available” is assigned a slow rotation of the point cloud to the left, as indicated in field 21.
  • the operating state 12 "ready for recording” is associated with a deformation of the point cloud to a point line, for example, in response to activation of a push-to-talk button or an address of the
  • Speech dialogue system by the user, as indicated in box 23.
  • the operating state 14 "listening" is by a resonant the
  • Pointed line in a voice frequency of the user as indicated in box 25. Further, the operating state 6 "processing / obtaining information" is assigned a deformation of the dot line or the point cloud to a clockwise rotating point circle, as in field 27
  • a point cloud which deforms as a function of speech signals of a response is assigned to the operating state 18 "responses", as indicated in field 29.

Landscapes

  • Engineering & Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Die vorliegende Erfindung betrifft ein Verfahren zum Rückmeiden eines Betriebszustands eines Datenverarbeitungssystems bei einem Dialog eines Nutzers mit dem Datenverarbeitungssystem, wobei das Datenverarbeitungssystem mit mindestens einem auf einer Anzeigeeinheit darzustellenden Zustandsindikator in Wirkkontakt steht, der sich in Abhängigkeit eines aktuellen Betriebszustands des Datenverarbeitungssystem und/oder einer Eingabe des Nutzers dynamisch ändert und dadurch eine Rückmeldung an den Nutzer bereitstellt. Ferner betrifft die vorliegende Erfindung ein Datenverarbeitungssystem zur Ausführung des vorgestellten Verfahrens.

Description

Zustandsindikator für ein Datenverarbeitungssystem
Die vorliegende Erfindung betrifft ein Verfahren zum Rückmeiden eines Betriebszustands bei einem Dialog eines Nutzers mit einer
Benutzerschnittstelle eines Systems. Ferner betrifft die vorliegende Erfindung ein Datenverarbeitungssystem zum Ausführen des vorgestellten Verfahrens.
Bei einer Interaktion eines Nutzers mit einem System über eine
Benutzerschnittstelle, wie bspw. einem Spracherkennungssystem, durchläuft die Benutzerschnittstelle bzw. das mit der Benutzerschnittstelle verbundene System verschiedene Zustände, die sich auf die Interaktion mit dem Nutzer auswirken. Beispielsweise wechselt das System nach einer erkannten und erfassten Spracheingabe in einen Verarbeitungsmodus, in dem von dem System umfasste Rechenkapazität verwendet wird, um die Spracheingabe zu interpretieren. Entsprechend ist das System während der Ausführung des Verarbeitungsmodus nur eingeschränkt verfügbar und kann bspw. keine neuen Sprachbefehle entgegennehmen. Wird der Nutzer auf den inneren Zustand des Systems, nämlich den Verarbeitungsmodus nicht hingewiesen, kann es vorkommen, dass der Nutzer vergeblich neue Sprachbefehle an das System übermittelt und eine Interaktion zwischen dem System und dem Nutzer gestört oder sogar abgebrochen wird.
In der europäischen Patentanmeldung EP 1 127 748 A2 wird eine
Vorrichtung zur Sprachsteuerung offenbart, die Sprachausgaben mit künstlicher Mimik und/oder Gestik unterstützt.
Die deutsche Offenlegungsschrift DE 10 2011 121 110 A1 betrifft ein
Verfahren zum Betreiben eines Sprachdialogsystems für ein Fahrzeug, bei dem Farbcodes aus verschiedenen Farbsätzen verschiedenen
Systemzuständen des Sprachdialogsystems zugeordnet werden. Ein System, bei dem sich eine visuelle Rückmeldung in Abhängigkeit eines in Abhängigkeit eines manuell auszuwählenden Betriebszustand eines Systems ändert, ist in der deutschen Offenlegungsschrift DE 2011 015 693 A1 offenbart.
Vor diesem Hintergrund wird ein Verfahren zum Rückmeiden eines
Betriebszustands eines Datenverarbeitungssystems bei einem Dialog eines Nutzers mit dem Datenverarbeitungssystem vorgestellt, wobei das
Datenverarbeitungssystem mit mindestens einem auf einer Anzeigeeinheit darzustellenden Zustandsindikator in Wirkkontakt steht, der sich in
Abhängigkeit eines aktuellen Betriebszustands des
Datenverarbeitungssystem und/oder einer Eingabe des Nutzers dynamisch ändert und dadurch eine Rückmeldung an den Nutzer bereitstellt. Ausgestaltungen ergeben sich aus der Beschreibung und den abhängigen Ansprüchen.
Das vorgestellte Verfahren dient insbesondere zur Visualisierung von
Systemzuständen eines Datenverarbeitungssystems bei einer Interkation mit einem Nutzer über eine Benutzerschnittstelle, wie bspw. einem
Spracherkennungssystem. Um den Nutzer bei einer Eingabe von bspw.
Sprachbefehlen zu unterstützen, ist vorgesehen, dass dem Nutzer ein aktueller Betriebszustand des Datenverarbeitungssystems dargestellt, d. h. bspw. visualisiert dargestellt wird. Durch eine sich dynamisch ändernde Rückmeldung des Datenverarbeitungssystems an den Nutzer, ist es dem
Nutzer möglich, einen inneren Zustand des Datenverarbeitungssystems, d. h. einen Betriebszustand des Datenverarbeitungssystems, zu erkennen und seine Eingaben entsprechend zu koordinieren, d. h. insbesondere zeitlich so zu organisieren, dass die Eingaben effizient von dem
Datenverarbeitungssystem erfasst und verarbeitet werden können. Um dem Nutzer eine effiziente und für den Nutzer angenehme Rückmeldung über einen aktuellen Betriebszustand eines jeweiligen
Datenverarbeitungssystems bereitzustellen, kann bspw. ein virtueller Agent verwendet werden, der als virtuelle Benutzerschnittstelle dient und über eine Ausgestaltung des erfindungsgemäß vorgesehenen Zustandsindikators, bspw. durch einen beweglichen Kubus oder eine Punktwolke visualisiert wird und dem Nutzer verschiedene Interaktionsmöglichkeiten bereitstellt. Es ist erfindungsgemäß vorgesehen, dass sich der Zustandsindikator dynamisch in Abhängigkeit des aktuellen Betriebszustands des
Datenverarbeitungssystems bzw. des virtuellen Agenten ändert und/oder zu dem aktuellen Betriebszustand passende Handlungsoptionen bereitstellt bzw. anzeigt. Durch eine dynamische Darstellung von Betriebszuständen des Datenverarbeitungssystems kann eine Interaktion zwischen Nutzer und Datenverarbeitungssystem koordiniert werden, wodurch sowohl auf
Nutzerseite als auch auf Seiten des Datenverarbeitungssystems Ressourcen gespart und mehrfache Ausführungen bzw. Nennungen von Befehlen vermieden werden.
Es ist insbesondere vorgesehen, dass einem jeweiligen Nutzer eines
Systems, wie bspw. einem Datenverarbeitungssystem in einem Fahrzeug, verschiedene Betriebszustände des Datenverarbeitungssystems durch einen Zustandsindikator, d. h. bspw. ein das Datenverarbeitungssystem
repräsentierendes Symbol, das sich in Abhängigkeit eines jeweilig aktuellen Betriebszustands ändert, eindeutig rückgemeldet werden.
Unter einem Zustandsindikator ist im Kontext der vorgestellten Erfindung jede Ansammlung an grafischen und/oder akustischen Mustern zu verstehen, die dazu geeignet ist, verschiedene Betriebszustände eines
Datenverarbeitungssystems derart anzuzeigen, dass ein jeweiliger Nutzer die verschiedenen Betriebszustände schnell und intuitiv erkennen und unterscheiden kann. Insbesondere kann ein Zustandsindikator als
beweglicher Kubus oder als Punktwolke, der bzw. die auf einer
Anzeigeeinheit, wie bspw. einem Bildschirm dargestellt wird, ausgestaltet sein.
Unter einem Betriebszustand ist im Kontext der vorgestellten Erfindung jeder Zustand eines Datenverarbeitungssystems zu verstehen, in dem das
Datenverarbeitungssystem einer bestimmten Aufgabe nachgeht bzw. einen bestimmten Zustand, wie bspw. einen Zustand "Aktiv/Verfügbar" oder "Aufnahmebereit" annimmt.
Ferner ist denkbar, dass der Zustandsindikator zusätzlich zur Änderung seiner grafischen bzw. geometrischen und/oder akustischen Muster in seiner Bewegung in Abhängigkeit des aktuellen Betriebszustands eines jeweiligen Datenverarbeitungssystems zu ändern ist. Dies bedeutet, dass bspw. ein Zustandsindikator in Form eines Kubus bei einem ersten Betriebszustand starr und bei einem zweiten Betriebszustand rotierend dargestellt wird, um bspw. einen Standby-Modus von einem Aktiv-Modus zu unterscheiden. In einer möglichen Ausgestaltung des vorgestellten Verfahrens ist
vorgesehen, dass als Zustandsindikator ein sich dynamisch änderndes visuelles 3D-Objekt gewählt wird.
Durch einen Zustandsindikator in dreidimensionaler Ausgestaltung ist es einem Nutzer besonders schnell möglich, Bewegungen bzw. Änderungen des Zustandsindikators zu erkennen und entsprechend zugewiesene
Betriebszustände zu unterscheiden. Es ist denkbar, dass jeweilige
Betriebszustände einem jeweiligen Bewegungsmuster eines jeweiligen Zustandsindikators fest zugewiesen sind oder von einem jeweiligen Nutzer zu einem bestimmten Betriebszustand eines jeweiligen Datenverarbeitungssystems zugewiesen werden. Die Verwendung von abstrakten Formen, wie bspw. dreidimensionalen Punktwolken, zum
Anzeigen von Betriebszuständen, bzw. als Visualisierung eines
Kommunikationsverlaufs zwischen Datenverarbeitungssystem und Nutzer, ist für einen menschlichen Nutzer deutlich besser zu abstrahieren als bspw. künstliche Gesichter mit entsprechender künstlicher Mimik. Durch einen abstrakten, d. h. nicht menschlichen, Zustandsindikator können bei einer Interaktion eines Datenverarbeitungssystems mit einem jeweiligen Nutzer emotionale Kommunikationsmuster, wie bspw. Unbehagen oder Wut, wie sie aus der menschlichen Kommunikation bekannt sind, vermieden bzw.
zumindest reduziert werden.
In einer weiteren möglichen Ausgestaltung des vorgestellten Verfahrens ist vorgesehen, dass als Datenverarbeitungssystem ein Sprachdialogsystem gewählt wird.
Der erfindungsgemäß vorgesehene Zustandsanzeiger kann bspw. dazu verwendet werden, Phasen des "Hörens" und "Sprechens" für einen jeweiligen Nutzer während einer Interaktion mit einem
Datenverarbeitungssystem anzuzeigen. Dies bedeutet, dass dem Nutzer jederzeit klar ist, ob das Datenverarbeitungssystem aufnahmebereit ist und, ob eine Spracheingabe aktuell Sinn macht. Entsprechend werden sinnfreie Spracheingaben, die das Datenverarbeitungssystem aufgrund von bspw. anderen Aufgaben nicht aufnehmen bzw. verarbeiten kann, vermieden.
Weiterhin kann dem Nutzer eine andauernde Verarbeitung eines durch den Nutzer eingegebenen Befehls angezeigt werden, so dass der Nutzer auf wiederholte Eingaben des Befehls aufgrund von Unkenntnis über ein vermutetes Nichterkennen des Befehls durch das Datenverarbeitungssystem verzichten kann und auch längere Verarbeitungsschritte keine Störung der Interaktion zwischen Mensch und Datenverarbeitungssystem verursachen. In einer weiteren möglichen Ausgestaltung des vorgestellten Verfahrens ist vorgesehen, dass der Zustandsindikator für mindestens einen
Betriebszustand des Datenverarbeitungssystems mindestens eine
Interaktionsmöglichkeit mit dem Datenverarbeitungssystem durch den Nutzer bereitstellt.
Es ist denkbar, dass der erfindungsgemäße Zustandsindikator sowohl zum Anzeigen von Betriebszuständen eines jeweiligen
Datenverarbeitungssystems als auch zum Bereitstellen bzw. Anzeigen von Handlungsoptionen für einen jeweiligen Nutzer verwendet wird. Dies bedeutet, dass der erfindungsgemäß vorgesehene Zustandsanzeiger bspw. einen Standby-Modus durch langsames Drehen eines Kubus nach links anzeigt, wobei innerhalb des Kubus ein Nachrichtensymbol aufleuchtet, das dem Nutzer neue Benachrichtigungen anzeigt, die der Nutzer durch
Interaktion mit dem Datenverarbeitungssystem abrufen kann.
Selbstverständlich kann jede beliebige Art von Handlungs- bzw.
Interaktionsoption mit dem jeweiligen Datenverarbeitungssystem vorgesehen sein, die durch zusätzliche grafische Symbole und/oder Bewegungen und/oder akustische Hinweise angezeigt werden kann.
In einer weiteren möglichen Ausgestaltung des vorgestellten Verfahrens ist vorgesehen, dass der Zustandsindikator jedem Betriebszustand der folgenden Liste an Betriebszuständen des Datenverarbeitungssystems ein spezifisches akustisches und/oder visuelles Muster zuordnet:
"Aktiv/Verfügbar", "Aufnahmebereit", "Zuhören", "Verarbeiten/Informationen Beschaffen" und "Antworten".
Durch eine Zuordnung jeweiliger visueller und/oder akustischer Muster bzw. Bewegungen zu jeweiligen Betriebszuständen kann ein jeweiliges
Datenverarbeitungssystem mittels des erfindungsgemäß vorgesehenen Zustandsindikators eine Interaktion mit einem Nutzer führen und bspw. ein Sprachdialogsystem derart ergänzen, dass eine effiziente und für den Nutzer natürliche Interaktion stattfindet, in der der Nutzer dem
Datenverarbeitungssystem genau dann Zeit zur Verarbeitung einräumt, wenn diese von dem Datenverarbeitungssystem benötigt wird und genau dann Befehle eingibt, wenn diese von dem Datenverarbeitungssystem empfangen werden können. Zusätzliches Aktivieren des Datenverarbeitungssystems, durch bspw. eine push-to-talk Taste, kann durch Verwendung eines ständig angezeigten und dynamisch an einen aktuellen Betriebszustand
angepassten Zustandsindikator vermieden werden.
In einer weiteren möglichen Ausgestaltung des vorgestellten Verfahrens ist vorgesehen, dass eine Spracheingabe des Nutzers mittels einer
Visualisierung einer Frequenz der Spracheingabe durch den
Zustandsindikator an den Nutzer rückgemeldet wird.
Um einen Betriebszustand "Aufnahme von Spracheingabe" darzustellen, kann bspw. vorgesehen sein, dass sich der erfindungsgemäß vorgesehene Zustandsanzeiger zumindest teilweise in Abhängigkeit einer Frequenz einer durch einen jeweiligen Nutzer aktuell vorgenommenen Spracheingabe verändert. Dies bedeutet, dass der Zustandsanzeiger bspw. ein
Frequenzspektrum oder eine Transformation des Frequenzspektrums der Spracheingabe wiedergibt, so dass dem Nutzer ein direktes Feedback über eine Erkennungsleistung des Datenverarbeitungssystems gegeben wird und der Nutzer ggf. seine Sprache ändert und bspw. lauter oder deutlicher spricht. Dazu kann bspw. durch den Zustandsindikator ein kritischer
Schwellenwert zu bspw. einer Lautstärke eingeblendet werden, der für eine korrekte Erkennungsleistung erforderlich ist. Ferner betrifft die vorliegende Erfindung ein Datenverarbeitungssystem mit einer Benutzerschnittstelle und einer Anzeigeeinheit, wobei die
Benutzerschnittstelle mit mindestens einem auf der Anzeigeeinheit darzustellenden Zustandsindikator in Wirkkontakt steht, der dazu konfiguriert ist, sich in Abhängigkeit eines aktuellen Betriebszustands des
Datenverarbeitungssystems und/oder einer Eingabe des Nutzers dynamisch zu ändern und eine Rückmeldung an den Nutzer bereitzustellen.
Das vorgestellte Datenverarbeitungssystem dient insbesondere zur
Ausführung des vorgestellten Verfahrens.
In einer möglichen Ausgestaltung des vorgestellten
Datenverarbeitungssystems ist vorgesehen, dass das
Datenverarbeitungssystem dazu konfiguriert ist, einen virtuellen Agenten zum Steuern von Funktionen eines Fahrzeugs auszuführen.
Das vorgestellte Datenverarbeitungssystem eignet sich insbesondere zum Bereitstellen einer Visualisierung eines virtuellen Agenten zum Anleiten einer Interaktion des Datenverarbeitungssystems mit einem Nutzer. Dies bedeutet, dass der erfindungsgemäß vorgesehene Zustandsindikator bspw. als beweglicher Kubus ausgestaltet ist und als virtueller Agent bzw.
Repräsentant des Datenverarbeitungssystems gegenüber dem Nutzer ausgestaltet ist. Entsprechend visualisiert der Zustandsindikator dynamisch verschiedene Betriebszustände des Datenverarbeitungssystems bzw.
Übergänge zwischen verschiedenen Betriebszuständen und stellt dem
Nutzer entsprechend eine andauernde Rückmeldung bezüglich des
Datenverarbeitungssystems bereit. Ferner kann der virtuelle Agent mittels des Zustandsindikators verschiedene Handlungsoptionen anzeigen, aus denen der Nutzer bei einem jeweiligen Betriebszustand wählen kann. Es versteht sich, dass die voranstehend genannten und die nachstehend noch zu erläuternden Merkmale nicht nur in der jeweils angegebenen Kombination, sondern auch in anderen Kombinationen oder in Alleinstellung verwendbar sind, ohne den Rahmen der
vorliegenden Erfindung zu verlassen.
Die Erfindung ist anhand einer Ausführungsform in dem
Ausführungsbeispiel und der Zeichnung schematisch dargestellt und wird im Folgenden schematisch und ausführlich beschrieben.
Figur 1 zeigt eine Zuordnung visueller Muster zu Betriebszuständen eines Datenverarbeitungssystems gemäß einer möglichen Ausgestaltung des vorgestellten Verfahrens. Figur 2 zeigt eine weitere Zuordnung visueller Muster zu
Betriebszuständen eines Datenverarbeitungssystems gemäß einer weiteren möglichen Ausgestaltung des vorgestellten Verfahrens.
In Figur 1 ist eine Tabelle 1 dargestellt, die in Spalte 3 verschiedene
Betriebszustände eines Sprachdialogsystems und in Spalte 5 entsprechend zugewiesene visuelle Muster enthält.
In der in Figur 1 dargestellten Ausführungsform basieren die visuellen Muster auf einem Kubus, der je nach Betriebszustand des Sprachdialogsystems modifiziert wird.
Entsprechend wird ein Betriebszustand 10 "Aktiv/Verfügbar" des
Sprachdialogsystems durch eine langsame Drehung des Kubus nach links anzeigt, wie in Feld 7 angedeutet. Weiterhin wird ein Betriebszustand 12 "Aufnahmebereit" durch ein Ausrichten des Kubus zum Nutzer hin dargestellt, wie in Feld 9 dargestellt. Die
Ausrichtung wird dabei durch eine farbliche Markierung 11 verdeutlicht und kann bspw. in Reaktion auf eine Aktivierung einer push-to-talk Taste oder durch eine Ansprache des Sprachdialogsystems durch den Nutzer aktiviert werden.
Ein Betriebszustand 14 "Zuhören" kann durch farbliches Aufflackern des zum Nutzer hin ausgerichteten Kubus in einer Sprachfrequenz des Nutzers erfolgen, wie in Feld 13 dargestellt.
In Feld 15 ist ein Kubus dargestellt, der sich in bei Aktivierung eines
Betriebszustands 16 "Verarbeiten/Informationen Beschaffen" dreht bzw. kippt.
Ein Betriebszustand 18 "Antworten" kann bspw. durch einen Übergang des Kubus in eine langsame bzw. normale Drehung nach links erfolgen, wobei farbliches Licht in Richtung des Nutzers ausgestrahlt wird, wie in Feld 17 angedeutet.
In Figur 2 wird eine Rückmeldung eines Sprachdialogsystems an einen Nutzer mittels einer räumlichen bzw. dreidimensionalen Punktwolke gemäß Tabelle 2 erzeugt. Verschiedene Ausprägungen der Punktwolke in
Abhängigkeit von den bereits in Figur 1 erläuterten Betriebszuständen in Spalte 3 sind in Spalte 20 dargestellt.
Entsprechend ist dem Betriebszustand 10 "Aktiv/Verfügbar" eine langsame Drehung der Punktwolke nach links zugeordnet, wie in Feld 21 angedeutet. Weiterhin ist dem Betriebszustand 12 "Aufnahmebereit" eine Verformung der Punktwolke zu einer Punktelinie zugeordnet, die bspw. in Abhängigkeit einer Aktivierung einer push-to-talk Taste oder einer Ansprache des
Sprachdialogsystems durch den Nutzer erfolgt, wie in Feld 23 angedeutet.
Der Betriebszustand 14 "Zuhören" wird durch ein Mitschwingen der
Punktelinie in einer Sprachfrequenz des Nutzers rückgemeldet, wie in Feld 25 angedeutet. Ferner ist dem Betriebszustand 6 "Verarbeiten/Informationen Beschaffen" eine Verformung der Punktelinie bzw. der Punktwolke zu einem sich im Uhrzeigersinn drehenden Punktekreis zugeordnet, wie in Feld 27
angedeutet. Eine sich in Abhängigkeit von Sprachsignalen einer Antwort verformende Punktwolke ist dem Betriebszustand 18 "Antworten" zugeordnet, wie in Feld 29 angedeutet.

Claims

Patentansprüche
1. Verfahren zum Rückmeiden eines Betriebszustands eines
Datenverarbeitungssystems bei einem Dialog eines Nutzers mit dem
Datenverarbeitungssystem, wobei das Datenverarbeitungssystem mit mindestens einem auf einer Anzeigeeinheit darzustellenden
Zustandsindikator in Wirkkontakt steht, der sich in Abhängigkeit eines aktuellen Betriebszustands des Datenverarbeitungssystem und/oder einer Eingabe des Nutzers dynamisch ändert und dadurch eine Rückmeldung an den Nutzer bereitstellt.
2. Verfahren nach Anspruch 1 , wobei als Zustandsindikator ein
akustisches und/oder visuelles Muster gewählt wird.
3. Verfahren nach einem der voranstehenden Ansprüche, wobei als
Zustandsindikator ein sich dynamisch änderndes visuelles 3D-Objekt gewählt wird.
4. Verfahren nach einem der voranstehenden Ansprüche, wobei der Zustandsindikator für mindestens einen Betriebszustand des
Datenverarbeitungssystems mindestens eine Interaktionsmöglichkeit mit dem Datenverarbeitungssystem durch den Nutzer bereitstellt.
5. Verfahren nach einem der voranstehenden Ansprüche, wobei der Zustandsindikator jedem Betriebszustand der folgenden Liste an
Betriebszuständen des Datenverarbeitungssystems ein spezifisches akustisches und/oder visuelles Muster zuordnet: "Aktiv/Verfügbar",
"Aufnahmebereit", "Zuhören", "Verarbeiten/Informationen Beschaffen" und "Antworten".
6. Verfahren nach einem der voranstehenden Ansprüche, wobei der Zustandsindikator dem Nutzer für einen jeweiligen Betriebszustand des Datenverarbeitungssystems spezifische Zusatzinformationen bereitstellt.
7. Verfahren nach einem der voranstehenden Ansprüche, wobei als Datenverarbeitungssystem ein Sprachdialogsystem gewählt wird.
8. Verfahren nach einem der voranstehenden Ansprüche, wobei eine Spracheingabe des Nutzers mittels einer Visualisierung einer Frequenz der Spracheingabe durch den Zustandsindikator an den Nutzer rückgemeldet wird.
9. Verfahren nach einem der voranstehenden Ansprüche, wobei der Zustandsindikator dem Nutzer eine Anzahl an zur Verfügung stehenden Meldungen des Datenverarbeitungssystems für einen jeweiligen
Betriebszustand anzeigt.
10. Verfahren nach einem der voranstehenden Ansprüche, wobei als Zustandsindikator ein beweglicher Kubus und/oder eine bewegliche
Punktwolke gewählt wird.
11. Datenverarbeitungssystem mit einer Benutzerschnittstelle und einer Anzeigeeinheit, wobei die Benutzerschnittstelle mit mindestens einem auf der Anzeigeeinheit darzustellenden Zustandsindikator in Wirkkontakt steht, der dazu konfiguriert ist, sich in Abhängigkeit eines aktuellen Betriebszustands des Datenverarbeitungssystems und/oder einer Eingabe des Nutzers dynamisch zu ändern und eine Rückmeldung an den Nutzer bereitzustellen.
12. Datenverarbeitungssystem nach Anspruch 11 , wobei die
Anzeigeeinheit eine bildgebende und/oder tongebende Einheit ist.
13. Datenverarbeitungssystem nach Anspruch 11 oder 12, wobei das Datenverarbeitungssystem dazu konfiguriert ist, einen virtuellen Agenten zum Steuern von Funktionen eines Fahrzeugs auszuführen.
PCT/EP2016/000554 2015-06-05 2016-04-06 Zustandsindikator für ein datenverarbeitungssystem WO2016192825A1 (de)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102015007244.7 2015-06-05
DE102015007244.7A DE102015007244A1 (de) 2015-06-05 2015-06-05 Zustandsindikator für ein Datenverarbeitungssystem

Publications (1)

Publication Number Publication Date
WO2016192825A1 true WO2016192825A1 (de) 2016-12-08

Family

ID=55752244

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2016/000554 WO2016192825A1 (de) 2015-06-05 2016-04-06 Zustandsindikator für ein datenverarbeitungssystem

Country Status (2)

Country Link
DE (1) DE102015007244A1 (de)
WO (1) WO2016192825A1 (de)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2133164A (en) * 1982-12-10 1984-07-18 Victor Company Of Japan Audio signal information display device
EP1127748A2 (de) 2000-02-22 2001-08-29 Robert Bosch Gmbh Vorrichtung und Verfahren zur Sprachsteuerung
DE10338512A1 (de) * 2003-08-22 2005-03-17 Daimlerchrysler Ag Unterstützungsverfahren für Sprachdialoge zur Bedienung von Kraftfahrzeugfunktionen
US20120089392A1 (en) * 2010-10-07 2012-04-12 Microsoft Corporation Speech recognition user interface
DE102011015693A1 (de) 2011-03-31 2012-10-04 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zum Bereitstellen einer Nutzerschnittstelle, insbesondere in einem Fahrzeug
DE102011121110A1 (de) 2011-12-14 2013-06-20 Volkswagen Aktiengesellschaft Verfahren zum Betreiben eines Sprachdialogsystems in einem Fahrzeug und dazugehöriges Sprachdialogsystem
DE102013013695A1 (de) * 2013-08-16 2015-02-19 Audi Ag Kraftfahrzeug mit Spracherkennung

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101625668B1 (ko) * 2009-04-20 2016-05-30 삼성전자 주식회사 전자기기 및 전자기기의 음성인식방법
US20140331166A1 (en) * 2013-05-06 2014-11-06 Samsung Electronics Co., Ltd. Customize smartphone's system-wide progress bar with user-specified content

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2133164A (en) * 1982-12-10 1984-07-18 Victor Company Of Japan Audio signal information display device
EP1127748A2 (de) 2000-02-22 2001-08-29 Robert Bosch Gmbh Vorrichtung und Verfahren zur Sprachsteuerung
DE10008226A1 (de) * 2000-02-22 2001-09-06 Bosch Gmbh Robert Vorrichtung zur Sprachsteuerung und Verfahren zur Sprachsteuerung
DE10338512A1 (de) * 2003-08-22 2005-03-17 Daimlerchrysler Ag Unterstützungsverfahren für Sprachdialoge zur Bedienung von Kraftfahrzeugfunktionen
US20120089392A1 (en) * 2010-10-07 2012-04-12 Microsoft Corporation Speech recognition user interface
DE102011015693A1 (de) 2011-03-31 2012-10-04 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zum Bereitstellen einer Nutzerschnittstelle, insbesondere in einem Fahrzeug
DE102011121110A1 (de) 2011-12-14 2013-06-20 Volkswagen Aktiengesellschaft Verfahren zum Betreiben eines Sprachdialogsystems in einem Fahrzeug und dazugehöriges Sprachdialogsystem
DE102013013695A1 (de) * 2013-08-16 2015-02-19 Audi Ag Kraftfahrzeug mit Spracherkennung

Also Published As

Publication number Publication date
DE102015007244A1 (de) 2016-12-08

Similar Documents

Publication Publication Date Title
DE102012219119B4 (de) Intelligente Fenstererstellung in einer grafischen Benutzeroberfläche
EP1986889B1 (de) Vorrichtung und verfahren zur interaktiven informationsausgabe und/oder hilfestellung für den benutzer eines kraftfahrzeugs
DE112014006409T5 (de) Fahrzeugsteuervorrichtung und Fahrzeugsteuerverfahren
WO2009056525A1 (de) Verfahren zur festlegung eines zielrufes zur benutzung einer aufzugsanlage und eine aufzugsanlage
EP2574881A1 (de) Verfahren zum Betrieb eines Bediensystems für ein Fahrzeug und Bediensystem für ein Fahrzeug
EP3040817A1 (de) Vorrichtung und verfahren zur eingabe eines textes über virtuelle bedienelemente mit haptischer rückkopplung zur simulation einer tastenhaptik, insbesondere in einem kraftfahrzeug
DE102015224555A1 (de) Verfahren zum Betreiben eines Fahrzeugs
EP3097468A1 (de) Anwenderschnittstelle und verfahren zur anpassung einer ansicht auf einer anzeigeeinheit
DE102017218120A1 (de) Verfahren zur Bereitstellung einer haptischen Rückmeldung an einen Bediener einer berührungssensitiven Anzeigeeinrichtung
DE10008226C2 (de) Vorrichtung zur Sprachsteuerung und Verfahren zur Sprachsteuerung
EP2951663B1 (de) Systeminitiierte hilfefunktion für die bedienung von einer, einem fahrzeug zugeordneten vorrichtung - eingabe von leerzeichen
DE102013000744A1 (de) Verfahren und System zum Steuern wenigstens einer Funktionseinheit sowie Kraftwagen und mobiles Endgerät mit einem solchen System
DE102017206876A1 (de) Verfahren und Vorrichtung zur Ausgabe einer Statusmeldung in einem Kraftfahrzeug mit Sprachsteuerungssystem
DE102014019192A1 (de) Darstellung des Online-Status einer hypriden Sprachbedienung
WO2016192825A1 (de) Zustandsindikator für ein datenverarbeitungssystem
WO2017140569A1 (de) Kraftfahrzeug-bedienvorrichtung und verfahren zum betreiben einer bedienvorrichtung, um eine wechselwirkung zwischen einer virtuellen darstellungsebene und einer hand zu bewirken
DE102013007256A1 (de) Verfahren zum personalisierten Betreiben einer graphischen Benutzeroberfläche eines Kraftwagens und Kraftwagen mit einer solchen graphischen Benutzeroberfläche
McWilliams et al. A secondary assessment of the impact of voice interface turn delays on driver attention and arousal in field conditions
DE102014018423B4 (de) Kraftfahrzeug mit durch peripheres Sehen interpretierbarer Zustandsanzeige sowie entsprechendes Verfahren
DE102013011531A1 (de) Verfahren zum Betreiben eines Assistenzsystems eines Kraftwagens und Assistenzsystem für einen Kraftwagen
DE102015222682A1 (de) Verfahren zum Aktivieren eines Bedienelements eines Kraftfahrzeugs und Bediensystem für ein Kraftfahrzeug
DE102017211518A1 (de) Verfahren zum Erzeugen einer virtuellen Umgebung für einen Benutzer in einem Fahrzeug, entsprechendes Virtual-Reality-System sowie Fahrzeug
DE102013013168A1 (de) Verfahren zum Betreiben eines Infotainment-Systems eines Kraftwagens und Infotainment-System für einen Kraftwagen
EP3976411B1 (de) Verfahren zur grafischen konfigurierung eines anzeigeinstrumentes in einem kraftfahrzeug und kraftfahrzeug zur durchführung des verfahrens
DE102013003047A1 (de) Verfahren und System zum blickrichtungsabhängigen Steuern einer Funktionseinheit

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16716163

Country of ref document: EP

Kind code of ref document: A1

122 Ep: pct application non-entry in european phase

Ref document number: 16716163

Country of ref document: EP

Kind code of ref document: A1