DE19905076C2 - Sprachsteuerungsmodul - Google Patents

Sprachsteuerungsmodul

Info

Publication number
DE19905076C2
DE19905076C2 DE19905076A DE19905076A DE19905076C2 DE 19905076 C2 DE19905076 C2 DE 19905076C2 DE 19905076 A DE19905076 A DE 19905076A DE 19905076 A DE19905076 A DE 19905076A DE 19905076 C2 DE19905076 C2 DE 19905076C2
Authority
DE
Germany
Prior art keywords
voice
command
recognition device
speech
game
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
DE19905076A
Other languages
English (en)
Other versions
DE19905076A1 (de
Inventor
Jong-Ding Wang
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Transpacific Plasma Wilmington Del Us LLC
Original Assignee
Primax Electronics Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Primax Electronics Ltd filed Critical Primax Electronics Ltd
Publication of DE19905076A1 publication Critical patent/DE19905076A1/de
Application granted granted Critical
Publication of DE19905076C2 publication Critical patent/DE19905076C2/de
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63HTOYS, e.g. TOPS, DOLLS, HOOPS OR BUILDING BLOCKS
    • A63H30/00Remote-control arrangements specially adapted for toys, e.g. for toy vehicles
    • A63H30/02Electrical arrangements
    • A63H30/04Electrical arrangements using wireless transmission
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20Input arrangements for video game devices
    • A63F13/21Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/215Input arrangements for video game devices characterised by their sensors, purposes or types comprising means for detecting acoustic signals, e.g. using a microphone
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/424Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving acoustic input signals, e.g. by using the results of pitch or rhythm extraction or voice recognition
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/25Output arrangements for video game devices
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1081Input via voice recognition
    • AHUMAN NECESSITIES
    • A63SPORTS; GAMES; AMUSEMENTS
    • A63FCARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60Methods for processing data by generating or executing the game program
    • A63F2300/6063Methods for processing data by generating or executing the game program for sound processing
    • A63F2300/6072Methods for processing data by generating or executing the game program for sound processing of an input signal, e.g. pitch and rhythm extraction, voice recognition
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS OR SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Description

Die Erfindung betrifft ein Sprachsteuerungsmodul, insbesondere zum Steuern ei­ ner Spielsteuerung, gemäß dem Oberbegriff des Anspruchs 1.
Die Benutzerschnittstelle eines Computerspieles, wie beispielsweise ein Compu­ ter-Joystick, umfaßt üblicherweise einen beweglichen Steuerknüppel und mehrere Steuerknöpfe. Der Vorteil des Steuerknüppels und der Steuerknöpfe liegt in einem einfachen Betrieb und einfacher Bedienung. Die Voreinstellungen und Funktionen der Steuerknöpfe variieren jedoch von Spiel zu Spiel. Dies ist offensichtlich nicht benutzerfreundlich, da sich der Benutzer abhängig vom gerade verwendeten Pro­ gramm an die jeweiligen unterschiedlichen Funktionen für jeden Steuerknopf erin­ nern muß. Wenn der Benutzer ferner in das Spiel vertieft ist, kann es passieren, daß er unbeabsichtigt den falschen Knopf drückt, da er nicht in der Lage ist, gleichzeitig die Tastatur und den Bildschirm zu betrachten. Dies stört den Spiel­ ablauf und führt zur Frustration beim Benutzer.
Mit dem Vorteil der Spracherkennungstechnologie sind die vorerwähnten Nachteile lösbar. Es gibt derzeit verschiedene Spracherkennungsmodule auf dem Markt, einschließlich Spracherkennung für kontinuierliches Sprechen und Sprach­ erkennungseinrichtungen für einzelne Befehle. Wie die Namen bereits implizieren, erkennt die Spracherkennung für kontinuierliches Sprechen kontinuierlich gespro­ chene Sprache und die Spracherkennung für einzelne Kommandos nur einzeln, mit Zwischenpausen gesprochene Worte.
Im kontinuierlichen Erkennungsmodus wird ein Sprachsignal ständig über das Mi­ krofon eingegeben und der Signalerkennungsprozeß läuft sofort ab. In diesem Vorgang werden die eingehenden Sprachsignale mit bereits existierenden, im Speicher gespeicherten Befehlen verglichen. Wenn ein eingehendes Sprachsignal identisch mit einem der gespeicherten Befehle ist, dann wird der entsprechende Befehl ausgeführt. Wenn es jedoch zu viele vorbestimmte Befehle gibt, dauert es zu lange Zeit, um jeden einzelnen individuell zu vergleichen. Wenn das Zeitinter­ vall zwischen zwei eingehenden Sprachsignalen nicht lange genug ist, dann wird der Befehl nicht sofort ausgeführt.
Im Kommandomodus für einzeln mit Zwischenpausen gesprochene Worte wird bevorzugt zunächst ein Knopf gedrückt, bevor der Sprachbefehl eingegeben wird. Dies setzt die Steuerung in Bereitschaft, so daß diese ein eingehendes Sprachsi­ gnal erwartet. Wenn der eingegebene Sprachbefehl identisch mit einem vorbe­ stimmten Befehl ist, dann wird dieser ausgeführt. Hierbei erfolgt eine Erkennung nur dann, wenn ein Knopf gedrückt wird, so daß die Speicherkapazität von vorbe­ stimmten Befehlen höher ist. Dies ist für einen Benutzer jedoch nicht vollständig befriedigend.
Aus der US PS 4 704 696 ist ein Verfahren mit einer Vorrichtung zur Sprachsteue­ rung eines Computers bekannt. Hierbei ist lediglich eine einzige Spracherken­ nungseinrichtung vorgesehen, welche dazu dient, ein kontinuierliches Sprachsi­ gnal in Spielbefehle umzusetzen, welche üblicherweise von einer Eingabevorrich­ tung an den Computer übergeben werden, wie Spielbefehle "links", "rechts", "Feu­ er" o. ä. Diese Befehle werden sonst üblicherweise mit einem Joystick eingegeben.
Aus der Druckschrift DE 38 53 294 T2 ist ein Verfahren zur Beendigung eines Te­ lefonanrufes durch Sprachsteuerung bekannt. Auch bei diesem System ist ledig­ lich eine einzige Spracherkennungsvorrichtung bekannt. Die weiterhin erwähnten "Vorrichtungen zum Erkennen der vom Benutzer ausgesprochenen Äußerungen" bearbeiten nicht eine Spracheingabe vom Mikrofon, sondern lediglich den Aus­ gang der Spracherkennungsvorrichtung. Somit handelt es sich bei diesen Vor­ richtungen nicht um jeweilige "Spracherkennungsvorrichtungen" im eigentlichen Sinne. Es wird im wesentlichen lediglich eine zusätzliche Funktionen zur Verfü­ gung gestellt, welche eine irrtümliche Beendigung des Gesprächs aufgrund der Sprachsteuerung verhindern sollen.
Die Druckschrift DE 690 26 474 T2 offenbart ein System mit nur einer Spracher­ kennungseinrichtung in Form einer Spracherkennungseinheit. Die mit "Spracher­ kennungseinrichtung" bezeichneten Teile sind tatsächlich "Musteranpaßabschnit­ te", d. h. diese vergleichen Sprachmuster aus dem Mikrofon mit Sprachmustern in einem Wörterbuch. Diese "Musteranpaßabschnitte" arbeiten nicht zeitlich versetzt sondern parallel und analysieren ein und dieselbe Spracheingabe mit unterschied­ lichen Analysemethoden.
Der Erfindung liegt die Aufgabe zugrunde, ein verbessertes Sprachsteuermodul der o. g. Art zur Verfügung zu stellen, welches die vorgenannten Nachteile besei­ tigt und eine Spielsteuerung zur Verfügung stellt, welche eine kontinuierliche Spracherkennung und eine Spracherkennung einzelner Befehle kombiniert.
Diese Aufgabe wird durch die Erfindung mit den im Anspruch 1 gekennzeichneten Merkmalen gelöst. Vorteilhafte Ausgestaltungen ergeben sich aus den abhängigen Ansprüchen.
Erfindungsgemäß wird ein Sprachsteuermodul zum Steuern einer Spielsteuerung zur Verfügung gestellt, welche folgendes aufweist, ein Mikrofon zur Eingabe von Sprachsignalen; eine erste Spracherkennungseinrichtung zum Konvertieren des vom Mikrofon innerhalb einer vorbestimmten Zeit kommenden Sprachsignals in einen entsprechenden Spielbefehl; und eine zweite Spracherkennungseinrichtung zum Konvertieren der von dem Mikrofon kommenden, kontinuierlichen Sprachsi­ gnale in einen entsprechenden Schaltbefehl; wobei das Sprachsteuerungsmodul derart ausgebildet ist, daß dieses nach Konvertierung des kontinuierlichen Sprachsignals durch die zweite Spracherkennungseinrichtung in einen Schaltbe­ fehl die erste Spracherkennungseinrichtung für die vorbestimmte Zeit aktiviert und das Sprachsignal für die vorbestimmte Zeit ausschließlich der ersten Spracher­ kennungseinrichtung zuführt.
Dies hat den Vorteil, daß das Sprachsteuerungsmodul automatisch jedes Sprach­ signal unterscheidet, ohne die Notwendigkeit einen Knopf zu drücken, wodurch sich eine einfache Bedienung und ein flüssigerer Spielablauf ergibt.
Die Erfindung wird im folgenden anhand der Zeichnung näher erläutert. Es zeigen:
Fig. 1 eine bevorzugte Ausführungsform eines erfindungsgemäßen Sprach­ steuermoduls zur Verwendung mit einem Computerspielsystem, in schematischer, perspektivischer Darstellung,
Fig. 2 ein Blockschaltbild eines in Fig. 1 dargestellten Computer-Joysticks,
Fig. 3 ein Blockschaltbild des in Fig. 2 dargestellten Sprachsteuerungsmo­ duls,
Fig. 4 ein Flußdiagramm der Spracherkennungseinrichtung für kontinuierli­ ches Sprechen und
Fig. 5 eine bevorzugte Ausführungsform für verschiedene in Fig. 3 darge­ stellte Befehldateien.
Die in Fig. 1 dargestellte bevorzugte Ausführungsform eines erfindungsgemäßen Sprachsteuerungsmodules 12 zur Verwendung mit einem Computerspielsystem 10 umfaßt einen Computer-Joystick 18. Das Computerspielsystem 10 umfaßt eine Spielsteuerung 16, das Sprachsteuerungsmodul 12 zum Auswerten von eingehenden Sprachsignalen zum Steuern der Spielsteuerung 16, eine Anzeigeein­ richtung 14 zum Darstellen eines Bildes auf einem Bildschirm, und den Computer- Joystick 18 zum Erzeugen von Cursorsignalen, wie auch zum Erzeugen von Ein­ gangssignalen von der Tastatur zum Steuern der Spielsteuerung 16. Die Spiel­ steuerung 16 ist beispielsweise ein PC oder eine PC-Spielebox. Das Sprachsteue­ rungsmodul 12 umfaßt ein Mikrofon 28 zur Eingabe von Sprachsignalen und einen Lautsprecher, um einem Benutzer das Resultat einer jeden Konvertierung von der Spracherkennungseinrichtung mitzuteilen.
Der Computer-Joystick 18 umfaßt ein Gehäuse 22, eine Steuerschaltung 20, wel­ che innerhalb des Gehäuses 22 zum Steuern der Spielsteuerung 16 angeordnet ist, einen beweglichen Griff 24, welcher auf dem Gehäuse 22 angeordnet und mit der Steuerschaltung 20 zum Erzeugen von Verschiebungssignalen zum Steuern der Verschiebung von Objekten des Spieles verbunden ist, mehrere Funktionsta­ sten 26, welche auf dem Gehäuse 22 angeordnet und mit der Steuerschaltung 20 zum Erzeugen mehrerer Tastendrucksignale verbunden sind, und ein Sprach­ steuerungsmodul 12, welches elektrisch mit der Steuerschaltung 20 zum Verar­ beiten von eingehenden Sprachsignalen verbunden ist. Das in Fig. 3 dargestellte Sprachsteuerungsmodul 12 umfaßt eine Spracherkennungseinrichtung 32 für ei­ nen Befehlsmodus zum Ausführen einer Erkennung im Befehlsmodus, eine Spra­ cherkennungseinrichtung 34 für einen kontinuierlichen Sprechmodus zum Ausfüh­ ren einer Spracherkennung von kontinuierlicher Sprache, und einen Schalter 36 zum Senden von eingegangenen Sprachsignalen von dem Mikrofon 28 zur Spra­ cherkennungseinrichtung 34 für kontinuierliches Sprechen oder zur Spracherken­ nungseinrichtung 32 für den Befehlsmodus.
Die Spracherkennungseinrichtung 34 für kontinuierliches Sprechen umfaßt einen Speicher 35 zum Speichern einer Steuerbefehldatei 38, welche ausgeführt wird, wenn das eingegebene Sprachsignal identisch mit dem in der Steuerbefehldatei 38 abgespeicherten, vorbestimmten Befehl ist. Die in der Steuerbefehldatei 38 gespeicherten, vorbestimmten Befehle sind in zwei Kategorien unterteilbar, näm­ lich einerseits Ausführungsbefehle zum direkten Ausführen oder andererseits Schaltbefehle zum Umschalten des Erkennungsmodus. Die Spracherkennungs­ einrichtung 32 für den Befehlsmodus umfaßt ebenfalls einen Speicher 33 zum Speichern mehrerer Spielbefehldateien 40, wobei jede Spielbefehldatei 40 einem Schaltbefehl der Steuerbefehldatei 38 entspricht. Die Spracherkennungseinrich­ tung 34 für kontinuierliches Sprechen konvertiert das vom Mikrofon 28 eingegebe­ ne Sprachsignal in einen entsprechenden Schaltbefehl gemäß der Steuerbe­ fehldatei 38 und triggert bzw. aktiviert daraufhin die Spracherkennungseinrichtung 32 für den Befehlsmodus zum Konvertieren des Sprachsignals in einen entspre­ chenden Spielbefehl gemäß der Spielbefehldatei 40 entsprechend dem konver­ tierten Schaltbefehl der Steuerbefehldatei 38, so daß die Spielsteuerung 16 ge­ steuert wird.
Wie aus Fig. 3 ersichtlich, ist eine Steuerleitung, welche von der Spracherken­ nungseinrichtung 34 für kontinuierliches Sprechen zum Steuern des Schalters 36 verwendet wird, durch eine Verbindungsleitung 44 im Sprachsteuerungsmodul 12 dargestellt. Die von der Spracherkennungseinrichtung 32 für den Befehlsmodus verwendete Steuerleitung zum Steuern des Schalters 36 ist als eine Verbin­ dungsleitung 46 dargestellt. Eine Sprache übertragende Leitung zwischen der Spracherkennungseinrichtung 34 für kontinuierliches Sprechen und dem Schalter 36 ist als eine Verbindungsleitung 41 dargestellt. Eine Sprache übertragende Lei­ tung zwischen der Spracherkennungseinrichtung 32 für den Befehlsmodus und dem Schalter 36 ist als Verbindungsleitung 42 dargestellt. Eine von der Spracher­ kennungseinrichtung 34 für kontinuierliches Sprechen zum Steuern der Spracher­ kennungseinrichtung 32 für den Befehlsmodus verwendete Steuerleitung ist als Verbindungsleitung 48 dargestellt.
Während der Spracherkennung durch das Sprachsteuerungsmodul 12 ist der Schalter 36 zuerst derart eingestellt, daß das vom Mikrofon 28 kommende Sprachsignal der Spracherkennungseinrichtung 34 für kontinuierliches Sprechen zugeführt wird. Wenn dieses Sprachsignal identisch mit einem der Ausführbefehle der Steuerbefehldatei 38 ist, dann überträgt die Spracherkennungseinrichtung 34 für kontinuierliches Sprechen diesen Ausführbefehl an die Spielsteuerung 16 zum direkten Ausführen über die Steuerschaltung 20. Wenn das von der Spracherken­ nungseinrichtung 34 für kontinuierliches Sprechen empfangene Sprachsignal identisch mit einem Schaltkommando in der Steuerbefehldatei 38 ist, dann akti­ viert die Spracherkennungseinrichtung 34 für kontinuierliches Sprechen die Spracherkennungseinrichtung 32 für den Befehlsmodus und schaltet gleichzeitig den Schalter 36 über die Steuerleitung 44 derart um, daß das vom Mikrofon 28 kom­ mende Sprachsignal der Spracherkennungseinrichtung 32 für den Befehlsmodus für 3 Sekunden zugeführt wird.
Nach Aktivierung der Spracherkennungseinrichtung 32 für den Befehlsmodus wählt diese eine entsprechende Spielbefehldatei 40 gemäß dem von der Spra­ cherkennungseinrichtung 34 für kontinuierliches Sprechen konvertierten Schalt­ befehl und konvertiert daraufhin die Sprachsignale in einen entsprechenden Spiel­ befehl gemäß der gewählten Spielbefehldatei 40. Nach 3 Sekunden schaltet die Spracherkennungseinrichtung 32 für den Befehlsmodus den Schalter 36 über die Steuerleitung 46 um, so daß die Sprachsignale wieder der Spracherkennungsein­ richtung 34 für kontinuierliches Sprechen zugeführt werden. Wenn das Sprachsi­ gnal des Benutzers erfolgreich in einen Befehl konvertiert wurde, dann sendet das Sprachsteuerungsmodul 12 über die Lautsprecher 30 ein Signal an den Benutzer, wie beispielsweise zwei hohe Pieptöne, so daß der Benutzer erfährt, daß seine Eingabe erfolgreich war. Wenn die Sprachsignale nicht in einem Befehl konvertiert werden können, dann sendet das Sprachsteuerungsmodul 12 über den Lautspre­ cher 30 ein Signal, wie beispielsweise einen niedrigen Piepton, aus, so daß der Benutzer erfährt, daß seine Eingabe nicht erfolgreich war.
Nachfolgend wird unter Bezugnahme auf Fig. 4 die Spracherkennungseinrichtung 34 für kontinuierliches Sprechen erläutert:
Schritt 52 Empfange vom Schalter 36 zugeführte Sprachsignale;
Schritt 54 Erkenne, ob das Sprachsignal ein Steuerbefehl gemäß der Steuer­ befehldatei 38 ist oder nicht; wenn nicht, gehe zurück zu Schritt 52 und warte auf eine neue Eingabe;
Schritt 56 Konvertieren das eingegebene Sprachsignal in ein entsprechendes Steuerkommando und stelle fest, ob dieses ein Schaltbefehl ist oder nicht; wenn ja, gehe zu Schritt 60;
Schritt 58 Zuführen des Befehls an die Spielsteuerung 16 über Steuerschaltung 20, so daß die Spielsteuerung 16 den Befehl ausführt, Informieren des Benutzers über den Lautsprecher 30, daß die Eingabe korrekt ist, Zurückgehen zu Schritt 52 und warten auf eine neue Eingabe;
Schritt 60 Aktivieren der Spracherkennungseinrichtung 32 für den Befehlsmo­ dus über die Steuerleitung 45 und Steuern des Schalters 36 zum Zuführen des vom Mikrofon 28 kommenden Sprachsignals für drei Sekunden an die Spracherkennungseinrichtung 32 für den Befehls­ modus; nach drei Sekunden, Zurückgehen zu Schritt 52 und warten auf eine weitere Eingabe.
Die in Fig. 5 dargestellte Steuerbefehldatei 62 umfaßt zwei Ausführbefehle und zwei Schaltbefehle. "Start" und "verlasse" sind Ausführbefehle und "ändere Waf­ fen" und "ändere Fahrzeug" sind Schaltbefehle 64, 66. Jeder Schaftbefehl ent­ spricht einer Spielbefehldatei. Beispielsweise entspricht der Schaltbefehl 64 "än­ dere Waffen" der Spielbefehldatei 68, welche zwei Befehle, wie beispielsweise "Rakete" und "Maschinengewehr" umfaßt, und der Schaltbefehl 66 "ändere Fahr­ zeug" entspricht beispielsweise einer Spielbefehldatei 70, welche Spielbefehle umfaßt, wie beispielsweise "Motorboot" und "Helikopter". Bei Eingabe des Sprach­ signals "ändere Waffen" wird dieses erfolgreich in einen Schaltbefehl 64 über die Spracherkennungseinrichtung 34 für kontinuierliches Sprechen konvertiert. Bei Eingabe des Sprachsignals "Rakete" innerhalb von drei Sekunden, konvertiert die Spracherkennungseinrichtung 32 für den Befehlsmodus diese Eingabe in einen Spielbefehl gemäß der Spielbefehldatei 68. Dieser Spielbefehl wird dann an die Spielsteuerung 16 zur direkten Ausführung übertragen. Wenn jedoch nach "ände­ re Waffen" "Motorboot" eingegeben wird, dann erzeugt die Spracherkennungsein­ richtung 32 für den Befehlsmodus ein niedriges Piepsignal über den Lautsprecher 30, weil "Motorboot" nicht in der Spielbefehldatei 68 vorhanden ist. Dieses Signal informiert den Benutzer darüber, sein Sprachkommando erneut einzugeben.
Erfindungsgemäß steuert das Sprachsteuerungsmodul 12 die Sprachsteuerung 16 über vom Mikrofon 28 kommende Sprachbefehle. Die Spracherkennungseinrich­ tung 34 für kontinuierliches Sprechen erkennt, ob die Spracheingabe ein Schaltbefehl ist oder nicht. Ist dies der Fall, dann aktiviert die Spracherkennungseinrich­ tung 34 für kontinuierliches Sprechen die Spracherkennungseinrichtung 32 für den Befehlsmodus zum Konvertieren des vom Mikrofon 28 kommenden Sprachsignals innerhalb einer vorbestimmten Zeitspanne in einen entsprechenden Spielbefehl zum Steuern der Spielsteuerung 16. Daher ist es nicht notwendig, irgendwelche Knöpfe zu drücken, und das Sprachsteuerungsmodul 12 unterscheidet automa­ tisch entsprechende Signale. Dies vereinfacht die Verwendung des Sprachsteue­ rungsmoduls 12 und macht den Spielablauf flüssiger.

Claims (6)

1. Sprachsteuerungsmodul (12) zum Steuern einer Spielsteuerung (16) gekennzeichnet durch,
ein Mikrofon (28) zur Eingabe von Sprachsignalen;
eine erste Spracherkennungseinrichtung (32) zum Konvertieren des vom Mikrofon (28) innerhalb einer vorbestimmten Zeit kommenden Sprachsi­ gnals in einen entsprechenden Spielbefehl; und
eine zweite Spracherkennungseinrichtung (34) zum Konvertieren der von dem Mikrofon (28) kommenden, kontinuierlichen Sprachsignale in einen entsprechenden Schaltbefehl;
wobei das Sprachsteuerungsmodul (12) derart ausgebildet ist, daß dieses nach Konvertierung des kontinuierlichen Sprachsignals durch die zweite Spracherkennungseinrichtung (34) in einen Schaltbefehl die erste Spra­ cherkennungseinrichtung (32) für die vorbestimmte Zeit (16) aktiviert und das Sprachsignal für die vorbestimmte Zeit ausschließlich der ersten Spra­ cherkennungseinrichtung (32) zuführt.
2. Sprachsteuerungsmodul (12) nach Anspruch 1, dadurch gekennzeichnet, daß ein Schalter (36) zum wahlweise Zuführen der von dem Mikrofon (28) kommenden Sprachsignale an die erste oder zweite Spracherkennungsein­ richtung (32, 34) vorgesehen ist, wobei nach der Konvertierung des Schalt­ befehls die zweite Spracherkennungseinrichtung (34) den Schalter (36) derart steuert, daß dieser die vom Mikrofon (28) kommenden Sprachsignale der ersten Spracherkennungseinrichtung (32) zuführt, so daß die erste Spracherkennungseinrichtung (32) die Sprachsignale in einen entspre­ chenden Spielbefehl konvertiert.
3. Sprachsteuerungsmodul (12) nach Anspruch 1 oder 2, dadurch gekenn­ zeichnet, daß die zweite Spracherkennungseinrichtung (34) einen Speicher (35) zum Abspeichern einer Steuerbefehldatei (38) aufweist, welche Sprachsignale von mehreren Schaltbefehlen umfaßt, und daß die erste Spracherkennungseinrichtung (32) ebenfalls einen Speicher (33) zum Spei­ chern mehrerer Spielbefehldateien (40) umfaßt, wobei jede Spielbefehldatei (40) einem Schaftkommando der Steuerbefehldatei (38) entspricht und Sprachsignale von mehreren Spielbefehlen enthält, wobei ferner nach Kon­ vertierung der vom Mikrofon (28) kommenden Sprachsignale in einen ent­ sprechenden Sprachbefehl gemäß der Steuerbefehldatei (38) die zweite Spracherkennungseinrichtung (34) die erste Spracherkennungseinrichtung (32) zum Konvertieren der vom Mikrofon (28) kommenden Sprachsignale in einen entsprechenden Spielbefehl gemäß der Spielbefehldatei (40) ent­ sprechend dem konvertierten Schaltbefehl, aktiviert.
4. Sprachsteuerungsmodul (12) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, daß eine Ausgabeeinrichtung (30) vorgesehen ist, zum Bestätigen jeder von der ersten oder zweiten Spracherkennungsein­ richtung (32, 34) durchgeführten Konvertierung.
5. Sprachsteuerungsmodul (12) nach Anspruch 4, dadurch gekennzeichnet, daß die Ausgabevorrichtung ein Lautsprecher (30) ist.
6. Sprachsteuerungsmodul (12) nach einem der vorhergehenden Ansprüche, dadurch gekennzeichnet, daß die erste und zweite Spracherkennungsein­ richtung (32, 34) in einem Computer-Joystick (18) angeordnet sind, welcher zum Erzeugen von Zeiger- und Tastenbefehlsignalen zum Steuern der Spielsteuerung (16) dient.
DE19905076A 1998-10-15 1999-02-08 Sprachsteuerungsmodul Expired - Fee Related DE19905076C2 (de)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW087117150A TW495710B (en) 1998-10-15 1998-10-15 Voice control module for control of game controller

Publications (2)

Publication Number Publication Date
DE19905076A1 DE19905076A1 (de) 2000-05-25
DE19905076C2 true DE19905076C2 (de) 2002-06-20

Family

ID=21631673

Family Applications (1)

Application Number Title Priority Date Filing Date
DE19905076A Expired - Fee Related DE19905076C2 (de) 1998-10-15 1999-02-08 Sprachsteuerungsmodul

Country Status (3)

Country Link
US (2) US6456977B1 (de)
DE (1) DE19905076C2 (de)
TW (1) TW495710B (de)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7722453B2 (en) 2001-03-27 2010-05-25 Igt Interactive game playing preferences
US7862427B2 (en) 2004-10-04 2011-01-04 Igt Wide area progressive jackpot system and methods
US7883413B2 (en) 2001-03-27 2011-02-08 Igt Interactive game playing preferences
US8133115B2 (en) 2003-10-22 2012-03-13 Sony Computer Entertainment America Llc System and method for recording and displaying a graphical path in a video game
US8204272B2 (en) 2006-05-04 2012-06-19 Sony Computer Entertainment Inc. Lighting control of a user environment via a display device
US8243089B2 (en) 2006-05-04 2012-08-14 Sony Computer Entertainment Inc. Implementing lighting control of a user environment
US8284310B2 (en) 2005-06-22 2012-10-09 Sony Computer Entertainment America Llc Delay matching in audio/video systems
US8289325B2 (en) 2004-10-06 2012-10-16 Sony Computer Entertainment America Llc Multi-pass shading
US8480466B2 (en) 2001-03-27 2013-07-09 Igt Method and apparatus for previewing a game
US8602882B2 (en) 2004-10-04 2013-12-10 Igt Jackpot interfaces and services on a gaming machine
US9108108B2 (en) 2007-09-05 2015-08-18 Sony Computer Entertainment America Llc Real-time, contextual display of ranked, user-generated game play advice
US9126116B2 (en) 2007-09-05 2015-09-08 Sony Computer Entertainment America Llc Ranking of user-generated game play advice

Families Citing this family (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7230582B1 (en) * 1999-02-12 2007-06-12 Fisher-Rosemount Systems, Inc. Wearable computer in a process control environment
JP3419754B2 (ja) * 2000-10-30 2003-06-23 株式会社ソニー・コンピュータエンタテインメント 入力音声をキャラクタの動作に反映させるエンタテインメント装置、方法および記憶媒体
JP2002239226A (ja) * 2000-12-13 2002-08-27 Sony Computer Entertainment Inc コンピュータに実行させるためのオブジェクトの表示プログラムを記録したコンピュータ読み取り可能な記録媒体、オブジェクトの表示プログラムを実行するプログラム実行装置、コンピュータに実行させるためのオブジェクトの表示プログラム、コンピュータに実行させるためのキャラクタの表示プログラムを記録した記録媒体、キャラクタの表示プログラムを実行するプログラム実行装置、コンピュータに実行させるためのキャラクタの表示プログラム
JP2002248261A (ja) * 2000-12-22 2002-09-03 Sony Computer Entertainment Inc オブジェクト表示プログラム、オブジェクト表示プログラムを記憶したコンピュータ読み取り可能な記憶媒体、オブジェクト表示プログラムを実行するプログラム実行装置、キャラクタ戦闘表示プログラム、キャラクタ戦闘表示プログラムを記憶したコンピュータ読み取り可能な記憶媒体、キャラクタ戦闘表示プログラムを実行するプログラム実行装置
US20020110246A1 (en) * 2001-02-14 2002-08-15 Jason Gosior Wireless audio system
US7085722B2 (en) * 2001-05-14 2006-08-01 Sony Computer Entertainment America Inc. System and method for menu-driven voice control of characters in a game environment
DE10163214A1 (de) * 2001-12-21 2003-07-10 Philips Intellectual Property Verfahren und Steuersystem zur Sprachsteuerung eines Gerätes
US7909699B2 (en) * 2002-06-27 2011-03-22 Igt Scan based configuration control in a gaming environment
US20040254794A1 (en) * 2003-05-08 2004-12-16 Carl Padula Interactive eyes-free and hands-free device
US20050009604A1 (en) * 2003-07-11 2005-01-13 Hsien-Ta Huang Monotone voice activation device
EP1498163A1 (de) * 2003-07-16 2005-01-19 Hsien-Ta Huang Vorrichtung zur Spielsteuerung mittels Spracherkennung
US7382356B2 (en) * 2003-09-15 2008-06-03 Sharper Image Corp. Input unit for games and musical keyboards
US20050169252A1 (en) * 2004-02-03 2005-08-04 Andrew Riggs Game controller including an integrated communicator
WO2006019987A2 (en) * 2004-07-15 2006-02-23 Mad Doc Software, Llc Audio visual games and computer programs embodying interactive speech recognition and methods related thereto
US20060046845A1 (en) * 2004-08-26 2006-03-02 Alexandre Armand Device for the acoustic control of a game system and application
US20070060302A1 (en) * 2005-08-17 2007-03-15 Igt Scan based configuration control in a gaming environment
TWI278762B (en) * 2005-08-22 2007-04-11 Delta Electronics Inc Method and apparatus for speech input
JP4311425B2 (ja) 2006-09-07 2009-08-12 日立工機株式会社 電池パック、充電器、及び電動工具
US20090098920A1 (en) * 2007-10-10 2009-04-16 Waterleaf Limited Method and System for Auditing and Verifying User Spoken Instructions for an Electronic Casino Game
US20100070932A1 (en) * 2008-09-18 2010-03-18 Nissan Technical Center North America, Inc. Vehicle on-board device
CN101377797A (zh) * 2008-09-28 2009-03-04 腾讯科技(深圳)有限公司 一种应用语音控制游戏系统的方法和游戏系统
US10786736B2 (en) 2010-05-11 2020-09-29 Sony Interactive Entertainment LLC Placement of user information in a game space
CN102800312A (zh) * 2011-05-24 2012-11-28 鸿富锦精密工业(深圳)有限公司 语音控制系统及方法
US9342817B2 (en) 2011-07-07 2016-05-17 Sony Interactive Entertainment LLC Auto-creating groups for sharing photos
US9256396B2 (en) * 2011-10-10 2016-02-09 Microsoft Technology Licensing, Llc Speech recognition for context switching
US9132354B2 (en) * 2011-12-22 2015-09-15 Microsoft Technology Licensing, Llc Game having a plurality of engines
US8793136B2 (en) * 2012-02-17 2014-07-29 Lg Electronics Inc. Method and apparatus for smart voice recognition
CN103366740B (zh) * 2012-03-27 2016-12-14 联想(北京)有限公司 语音命令识别方法及装置
US9433856B2 (en) 2012-10-26 2016-09-06 Infosys Limited Methods for synthesizing a voice guiding signal to a gaming controller and devices thereof
US9833707B2 (en) 2012-10-29 2017-12-05 Sony Interactive Entertainment Inc. Ambient light control and calibration via a console
US9372531B2 (en) 2013-03-12 2016-06-21 Gracenote, Inc. Detecting an event within interactive media including spatialized multi-channel audio content
US9530410B1 (en) * 2013-04-09 2016-12-27 Google Inc. Multi-mode guard for voice commands
US9067135B2 (en) 2013-10-07 2015-06-30 Voyetra Turtle Beach, Inc. Method and system for dynamic control of game audio based on audio analysis
US9338541B2 (en) 2013-10-09 2016-05-10 Voyetra Turtle Beach, Inc. Method and system for in-game visualization based on audio analysis
US9716958B2 (en) 2013-10-09 2017-07-25 Voyetra Turtle Beach, Inc. Method and system for surround sound processing in a headset
US10063982B2 (en) 2013-10-09 2018-08-28 Voyetra Turtle Beach, Inc. Method and system for a game headset with audio alerts based on audio track analysis
US8979658B1 (en) 2013-10-10 2015-03-17 Voyetra Turtle Beach, Inc. Dynamic adjustment of game controller sensitivity based on audio analysis
US9406297B2 (en) * 2013-10-30 2016-08-02 Haier Us Appliance Solutions, Inc. Appliances for providing user-specific response to voice commands
US9545580B2 (en) * 2013-11-04 2017-01-17 Intralot S.A. — Integrated Lottery Systems and Services Computer systems and computer-implemented methods for conducting and playing personalized games based on vocal and non-vocal game entries
KR102208477B1 (ko) 2014-06-30 2021-01-27 삼성전자주식회사 마이크 운용 방법 및 이를 지원하는 전자 장치
US9811313B2 (en) 2015-08-17 2017-11-07 Microsoft Technology Licensing, Llc Voice-triggered macros
US11176930B1 (en) * 2016-03-28 2021-11-16 Amazon Technologies, Inc. Storing audio commands for time-delayed execution
US10561942B2 (en) 2017-05-15 2020-02-18 Sony Interactive Entertainment America Llc Metronome for competitive gaming headset
US10972203B2 (en) 2017-06-12 2021-04-06 Gracenote, Inc. Detecting and responding to rendering of interactive video content
US10922051B2 (en) 2017-07-05 2021-02-16 Hewlett-Packard Development Company, L.P. Application-specific profile managers
US10128914B1 (en) 2017-09-06 2018-11-13 Sony Interactive Entertainment LLC Smart tags with multiple interactions
US11698927B2 (en) 2018-05-16 2023-07-11 Sony Interactive Entertainment LLC Contextual digital media processing systems and methods
KR20200043642A (ko) 2018-10-18 2020-04-28 삼성전자주식회사 동작 상태에 기반하여 선택한 마이크를 이용하여 음성 인식을 수행하는 전자 장치 및 그의 동작 방법
US11410649B2 (en) 2019-10-31 2022-08-09 International Business Machines Corporation Voice commands to facilitate in-game communication
CN114931747B (zh) * 2022-07-25 2022-10-14 深圳市景创科技电子股份有限公司 一种游戏控制器和智能语音控制方法

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4704696A (en) * 1984-01-26 1987-11-03 Texas Instruments Incorporated Method and apparatus for voice control of a computer

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5386494A (en) * 1991-12-06 1995-01-31 Apple Computer, Inc. Method and apparatus for controlling a speech recognition function using a cursor control device
US5513129A (en) * 1993-07-14 1996-04-30 Fakespace, Inc. Method and system for controlling computer-generated virtual environment in response to audio signals
US5739811A (en) * 1993-07-16 1998-04-14 Immersion Human Interface Corporation Method and apparatus for controlling human-computer interface systems providing force feedback
US5809466A (en) * 1994-11-02 1998-09-15 Advanced Micro Devices, Inc. Audio processing chip with external serial port
US5995155A (en) * 1995-07-17 1999-11-30 Gateway 2000, Inc. Database navigation system for a home entertainment system
US5774841A (en) * 1995-09-20 1998-06-30 The United States Of America As Represented By The Adminstrator Of The National Aeronautics And Space Administration Real-time reconfigurable adaptive speech recognition command and control apparatus and method
US6015344A (en) * 1996-04-05 2000-01-18 Rlt Acquisition, Inc. Prize redemption system for games
US5993314A (en) * 1997-02-10 1999-11-30 Stadium Games, Ltd. Method and apparatus for interactive audience participation by audio command
US5893064A (en) * 1997-05-14 1999-04-06 K2 Interactive Llc Speech recognition method and apparatus with voice commands and associated keystrokes

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4704696A (en) * 1984-01-26 1987-11-03 Texas Instruments Incorporated Method and apparatus for voice control of a computer

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8435105B2 (en) 2001-03-27 2013-05-07 Igt Interactive game playing preferences
US7722453B2 (en) 2001-03-27 2010-05-25 Igt Interactive game playing preferences
US7883413B2 (en) 2001-03-27 2011-02-08 Igt Interactive game playing preferences
US7918738B2 (en) 2001-03-27 2011-04-05 Igt Interactive game playing preferences
US8480466B2 (en) 2001-03-27 2013-07-09 Igt Method and apparatus for previewing a game
US8133115B2 (en) 2003-10-22 2012-03-13 Sony Computer Entertainment America Llc System and method for recording and displaying a graphical path in a video game
US7862427B2 (en) 2004-10-04 2011-01-04 Igt Wide area progressive jackpot system and methods
US8602882B2 (en) 2004-10-04 2013-12-10 Igt Jackpot interfaces and services on a gaming machine
US9311772B2 (en) 2004-10-04 2016-04-12 Igt Jackpot interfaces and services on a gaming machine
US8289325B2 (en) 2004-10-06 2012-10-16 Sony Computer Entertainment America Llc Multi-pass shading
US8284310B2 (en) 2005-06-22 2012-10-09 Sony Computer Entertainment America Llc Delay matching in audio/video systems
US8243089B2 (en) 2006-05-04 2012-08-14 Sony Computer Entertainment Inc. Implementing lighting control of a user environment
US8204272B2 (en) 2006-05-04 2012-06-19 Sony Computer Entertainment Inc. Lighting control of a user environment via a display device
US9108108B2 (en) 2007-09-05 2015-08-18 Sony Computer Entertainment America Llc Real-time, contextual display of ranked, user-generated game play advice
US9126116B2 (en) 2007-09-05 2015-09-08 Sony Computer Entertainment America Llc Ranking of user-generated game play advice

Also Published As

Publication number Publication date
US20020161586A1 (en) 2002-10-31
US6456977B1 (en) 2002-09-24
TW495710B (en) 2002-07-21
DE19905076A1 (de) 2000-05-25

Similar Documents

Publication Publication Date Title
DE19905076C2 (de) Sprachsteuerungsmodul
EP0553487B1 (de) Verfahren zur Erleichterung der Bedienung von Endgeräten in Fernmeldeanlagen
DE60032982T2 (de) Spracherkennung zur Steuerung eines Geräts
DE4029717A1 (de) Sprachgesteuertes fernbedienungssystem
EP1139333A2 (de) Spracherkennungsverfahren und Spracherkennungsvorrichtung
DE69819690T2 (de) Spracherkennungsvorrichtung unter verwendung eines befehlslexikons
DE4126029C2 (de)
DE3709670A1 (de) Haushaltsgeraet mit einer programmschalteinrichtung
DE60217729T2 (de) Verfahren zum erkennen eines elektronischen geräts in einem mehrfachsteuersystem
DE10152444A1 (de) Verfahren und Vorrichtung zum Ansteuern einer Fahrzeugzusatzeinrichtung
DE2517525C3 (de) Verfahren und Signalisierungsidentifizierer zum Erkennen von Fernmelde-Signalisierungskriterien
DE3326538A1 (de) Elektronisches geraet zum eingeben von musterdaten durch fingerbetaetigung
EP0467157A2 (de) Sprachgesteuertes Gerät der Unterhaltungselektronik, insbesondere Videorecorder
EP0963876A2 (de) Verfahren zum Zuweisen einer auswählbaren Möglichkeit zu einem Stellmittel
DE4029716C2 (de) Sprachgesteuertes Fernbedienungssystem
DE3040032C2 (de) Rechner mit Sprachausgabe
DE19839466A1 (de) Verfahren und Steuereinrichtung zur Bedienung technischer Einrichtungen eines Fahrzeugs
DE3904917A1 (de) Sender fuer eine fernsteuerung
DE4202041A1 (de) Verfahren zur erleichterung der bedienung von endgeraeten in fernmeldeanlagen
DE3403836C2 (de)
DE60030702T2 (de) Steuerung der Kapazität eines verteilten Spracherkennungssystems
DE102008060117A1 (de) Maschine mit Bediengerät für sicherheitsrelevante Funktionen
DE10146470B4 (de) Auswahl von Software- und Hardwarefunktionen mit einem Kraft-/Momentensensor
WO2001088903A1 (de) Verwaltung von spracher kennungsergebnissen
AT403220B (de) Datenverarbeitungssystem

Legal Events

Date Code Title Description
OP8 Request for examination as to paragraph 44 patent law
8125 Change of the main classification

Ipc: G10L 15/22

D2 Grant after examination
8364 No opposition during term of opposition
8328 Change in the person/name/address of the agent

Representative=s name: ZEITLER, VOLPERT, KANDLBINDER, 80539 MUENCHEN

8327 Change in the person/name/address of the patent owner

Owner name: TRANSPACIFIC PLASMA LLC, WILMINGTON, DEL., US

8328 Change in the person/name/address of the agent

Representative=s name: EPPING HERMANN FISCHER, PATENTANWALTSGESELLSCHAFT

8339 Ceased/non-payment of the annual fee