JP2003047768A - ゲーム環境におけるキャラクタのメニュー方式音声制御システムおよび方法 - Google Patents

ゲーム環境におけるキャラクタのメニュー方式音声制御システムおよび方法

Info

Publication number
JP2003047768A
JP2003047768A JP2002138393A JP2002138393A JP2003047768A JP 2003047768 A JP2003047768 A JP 2003047768A JP 2002138393 A JP2002138393 A JP 2002138393A JP 2002138393 A JP2002138393 A JP 2002138393A JP 2003047768 A JP2003047768 A JP 2003047768A
Authority
JP
Japan
Prior art keywords
menu
command
commands
level
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2002138393A
Other languages
English (en)
Inventor
Seth C H Luisi
シー． エイチ． ルイシ セス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Interactive Entertainment America LLC
Original Assignee
Sony Computer Entertainment America LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Computer Entertainment America LLC filed Critical Sony Computer Entertainment America LLC
Publication of JP2003047768A publication Critical patent/JP2003047768A/ja
Pending legal-status Critical Current

Links

Classifications

    • A63F13/10—
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/40—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment
    • A63F13/42—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle
    • A63F13/424—Processing input control signals of video game devices, e.g. signals generated by the player or derived from the environment by mapping the input signals into game commands, e.g. mapping the displacement of a stylus on a touch screen to the steering angle of a virtual vehicle involving acoustic input signals, e.g. by using the results of pitch or rhythm extraction or voice recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/215—Input arrangements for video game devices characterised by their sensors, purposes or types comprising means for detecting acoustic signals, e.g. using a microphone
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/45—Controlling the progress of the video game
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/50—Controlling the output signals based on the game progress
    • A63F13/53—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game
    • A63F13/533—Controlling the output signals based on the game progress involving additional visual information provided to the game scene, e.g. by overlay to simulate a head-up display [HUD] or displaying a laser sight in a shooting game for prompting the player, e.g. by displaying a game menu
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1081—Input via voice recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/226—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics
    • G10L2015/228—Procedures used during a speech recognition process, e.g. man-machine dialogue using non-speech characteristics of application context

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Theoretical Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Computational Linguistics (AREA)
  • Business, Economics & Management (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Tourism & Hospitality (AREA)
  • Optics & Photonics (AREA)
  • Economics (AREA)
  • Human Resources & Organizations (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

(57)【要約】 ゲーム・システムにおいて、ユーザは、音声コマンドを
用いて、ゲーム環境のキャラクタの動作を制御する。学
習モードでは、利用可能な音声コマンドが、表示装置上
のコマンドメニューに表示される。非学習モードでは、
利用可能な音声コマンドは表示されない。話者に依存せ
ず、コンテキストに応じる音声認識モジュールは、利用
可能な音声コマンドの語彙を含む。ゲーム環境の一また
は複数のキャラクタの動作を制御するために、音声コマ
ンドの使用は、制御装置からの入力と組み合わされる。

Description

【発明の詳細な説明】
【０００１】(１)発明の背景 （１−１）技術分野 本発明は、一般に電子エンタテインメント装置に係り、
特にゲーム環境におけるキャラクタの、メニュー方式に
よる音声制御のためのシステムおよび方法に関する。
【０００２】（１−２）背景技術の説明 ゲーム・システムのような電子エンタテインメントシス
テムにおいて、ユーザは、一般的に、一種の手動で作動
させるコントローラ・デバイスを使用してゲームプログ
ラムと対話をする。一般のコントローラ・デバイスと
は、ボタン、ジョイスティック、スイッチ、キーボード
およびこれらの組合せである。ゲーム・システムのなか
には、例えば、ドライビングシミュレーションのための
ハンドルとペダル、およびフライトシミュレーションの
ための操縦かんおよびペダル等の、特別に設計された制
御デバイスを使用するものもある。
【０００３】各ゲーム・システムは、一般的に、そのシ
ステム上で行うことができる大部分のゲームに対して共
通に設計された、手動で作動させるコントローラ・デバ
イスを用い、ボタンまたはキーストロークは、各ゲーム
にとって異なる意味が付与されている。一つのゲームで
は、ある特定のボタンがパンチに該当し、その一方で、
他のゲームでは、同じボタンが魚雷を発射することに該
当する。したがって、特別なゲーム環境という状況で
は、コントローラ・デバイスの使用法は、ユーザにとっ
てあまり直観的に認識できるものではない。
【０００４】手動で作動させるコントローラ・デバイス
の使用は、どのボタンまたはキーが特定の動作に割り当
てられているかをユーザが記憶することを余儀なくす
る。複雑なゲームについては、ボタンの数またはキース
トロークの組合せが非常に多数である可能性がある。多
くのゲームにおいて、ユーザは、単一キャラクタの動き
を制御するだけである。ユーザがキャラクタの集団を制
御するゲームでは、複数キャラクタが一集団として動作
するため、事実上、キャラクタの集団が単一のキャラク
タとして動作することを意味する。
【０００５】手動で動作させるコントローラ・デバイス
を使用して、ユーザに複数のキャラクタを個々に制御さ
せることは可能であるが、非常に複雑であり、学習し利
用することが困難になることも考えられる。
【０００６】(2) 発明の開示 本発明によれば、ゲーム環境におけるキャラクタの、メ
ニュー方式による音声制御を実現するためのシステムお
よび方法が開示される。本発明のシステムは、ゲーム・
ソフトウェアおよび音声認識モジュールを含む。音声認
識モジュールは、ゲーム環境で一または複数のキャラク
タの動作を制御するために使用可能なコマンドワードま
たはフレーズの語彙によって、話者に依存せず、コンテ
キストに応じることができる。ゲーム環境において、ユ
ーザは、一または複数のキャラクタの動作を制御するた
め、マイクロフォンに向かって語彙の中から選んだコマ
ンドを話す。
【０００７】学習モードにおいて、利用可能なコマンド
のメニューが、ユーザに対して表示される。レベル１・
コマンドメニューは、制御のために利用可能なキャラク
タを示す。レベル２・コマンドメニューは、レベル１メ
ニューから選択された一または複数のキャラクタのため
の利用可能動作を示す。レベル２・メニューの利用可能
動作は、ゲームの現在の状態に応じて定まる。レベル３
・コマンドメニューは、レベル２メニューから選択され
たキャラクタ動作のための利用可能オプションを示す。
レベル３メニューの利用可能オプションもまた、ゲーム
の現在の状態に応じて定まる。
【０００８】非学習モードにおいて、利用可能コマンド
のメニューは、ユーザに対して表示されない。ユーザ
は、音声認識モジュールの語彙として記憶されたコマン
ドを話す。音声認識モジュールは、コンテキストに応じ
ることができる。つまり、レベル１コマンドが前もって
入力されていなければ、レベル２コマンドに反応せず、
レベル２コマンドが前もって入力されていなければレベ
ル３コマンドに反応しない。このように、ユーザは、ゲ
ーム環境において、一または複数のキャラクタを制御す
るために、センテンスタイプのコマンド(行為者および
動作)を口頭で入力する。
【０００９】(3) 図面の詳細な説明 図1は、本発明に係る電子的エンタテインメントシステ
ム100の一実施形態のブロック図である。システム100
は、メインメモリ110、中央処理装置(ＣＰＵ) 112、ベ
クトル演算処理装置VU0 111およびVU1 113、画像処理装
置(GPU) 114、入出力プロセッサ(IOP) 116、IOPメモリ1
18、コントローラ・インタフェース120、メモリカード1
22、ユニバーサルシリアルバス(ＵＳＢ)インタフェース
124、および、IEEE 1394インタフェース126を含むが、
これに限定されるものではない。システム100は、ま
た、オペレーティングシステム読取り専用メモリ(ＯＳ
ＲＯＭ) 128、音声処理装置(ＳＰＵ) 132、光ディス
ク制御装置134、そして、ハードディスクドライブ(ＨＤ
Ｄ)136を含み、それらは、バス146でIOP 116に接続され
ている。システム100は、好ましくは電子ゲームコンソ
ールである。しかし、システム100はまた、汎用計算
機、セットトップボックス、または携帯型のゲーム装置
として実現することができる。
【００１０】CPU 112、VU0 111、VU1 113、GPU 114およ
びIOP 116は、システムバス144を介して通信する。CPU
112は、専用バス142を介して、メインメモリ110と通信
する。VU1 113およびGPU 114もまた、専用バス140を介
して通信できる。CPU 112は、OS ROM 128およびメイン
メモリ110に格納されたプログラムを実行する。
【００１１】メインメモリ110は、事前に記憶されたプ
ログラムを含むことができ、また、CD-ROM、DVD-ROMま
たは光ディスク制御装置134を使用している他の光ディ
スク(不図示)からIOP 116を介して転送されるプログラ
ムを含むことができる。IOP 116は、CPU 112、VU0 11
1、VU1 113、GPU 114およびコントローラ・インタフェ
ース120のような、システム100の他の装置間のデータ交
換を制御する。
【００１２】GPU 114は、CPU 112およびVU0 111からの
作図命令を実行して、表示装置(不図示)に表示するため
の画像を生成する。VU1 113は、オブジェクトを三次元
座標から二次元の座標に変換し、二次元の座標をGPU 11
4に送信する。SPU 132は、オーディオ装置(不図示)への
出力である音声信号を作成するための指示を実行する。
【００１３】システム100のユーザは、コントローラ・
インタフェース120を介してCPU 112に指示を与える。例
えば、ユーザは、メモリカード122に特定のゲーム情報
を記憶するようにCPU 112に指示したり、いくつかの指
定動作を実行するようにゲームのキャラクタに指示する
こともある。他の装置は、USBインタフェース124および
IEEE 1394インタフェース126でシステム100に接続され
ることもある。好ましい実施態様において、USBマイク
ロフォン(不図示)は、ユーザがシステム100に音声コマ
ンドを提供できるよう、USBインタフェース124に接続さ
れている。
【００１４】図２は、本発明に係る、図１のメインメモ
リ110の一実施形態のブロック図である。メインメモリ1
10は、光ディスク制御装置134の光ディスクからメイン
メモリ110へロードされた、ゲーム・ソフトウェア212お
よび音声認識モジュール214を含むが、これに限定され
るものではない。ゲーム・ソフトウェア212は、システ
ム100のユーザがゲームをすることができるようにす
る、CPU 112、VU0 111、VU1 113およびSPU 132によって
実行可能な命令を含む。図2の実施形態では、ゲーム・
ソフトウェア212は、ユーザが３人の歩兵のキャラクタ
・チームを制御する戦闘シミュレーション・ゲームであ
る。他の実施形態では、ゲーム・ソフトウェア212は、
他のいかなる種類のゲームであってもよく、これはロー
ルプレイングゲーム(ＲＰＧ)、フライト・シミュレーシ
ョン・ゲーム、そして、都市構築シミュレーション・ゲ
ームを含むが、これに限定されない。
【００１５】音声認識モジュール214は、CPU 112により
実行される、話者に依存しない、コンテキストに応じる
音声認識装置である。他の実施形態においては、IOP 11
6が音声認識モジュール214を実行する。音声認識モジュ
ール214は、ゲーム・ソフトウェア212の指令に該当する
コマンド語彙を含む。このコマンドは、シングルワード
コマンドとマルチプルワードコマンドとを含む。入力音
声信号(発せられた言葉)が語彙のなかのコマンドと一致
するときに、音声認識モジュール214はゲーム・ソフト
ウェア212に通知する。そして、ゲーム・ソフトウェア2
12は、CPU 112に適切な命令を与える。
【００１６】システム100およびゲーム・ソフトウェア2
12のユーザは、マイクロフォンおよびUSBインタフェー
ス124を介して一以上のコマンドを入力して、ゲーム・
ソフトウェア212のキャラクタの動作を制御する。音声
コマンドは、好ましくは、制御装置のコマンドとともに
使用される。しかし、ゲーム・ソフトウェア212の他の
実施形態では、音声コマンドだけを実行する場合もあ
る。
【００１７】図3Aは、本発明に係る、システム100に接
続された表示装置310のレベル１・メニューコマンド・
スクリーン322の一実施形態の図である。レベル１メニ
ュー330は、３つのレベル１・コマンド・アイテム、チ
ーム・アイテム332、アルファ・アイテム334およびブラ
ボ・アイテム336を含む。３つのレベル１・コマンド・
アイテムが表示されているけれども、ゲーム・ソフトウ
ェア212は、レベル１・コマンド・アイテムをいくつで
も使用できる。レベル１・メニューコマンド・スクリー
ン322は、ユーザが、ボタン、または、この機能に特化
した制御装置上の他のデバイスを作動させ解除したとき
に現れる。レベル１・メニューコマンド・スクリーン32
2はまた、レベル１・メニュー330の裏にある現在のゲー
ム画像(不図示)を含む。
【００１８】レベル１・メニュー330は、レベル1・コマ
ンドについて利用可能な選択項目をユーザに示すために
表示装置310に現れる。
【００１９】ゲーム・ソフトウェア212の、図2の実施形
態において、ユーザは、ボタンを作動させるかまたはジ
ョイスティックを操作するというような制御装置の動作
を用いて、チーム・リーダ・キャラクタの動作を制御す
る。ユーザは、音声コマンドを入力して、２人のキャラ
クタ・チームの動作を制御する。チーム・アイテム332
は、動作を行う２人のキャラクタ・チームの両方のメン
バーを選択するチームコマンドの利用可能性を表す。ア
ルファ・アイテム334は、動作を行う一人のメンバー、
アルファを選択するコマンドの利用可能性を表す。ブラ
ボ・アイテム336は、動作を行う一人のメンバー、ブラ
ボを選択するコマンドの利用可能性を表す。
【００２０】ユーザは、「チーム」という言葉をマイクロ
フォンに向かって言ってチーム・アイテム332を選択
し、「アルファ」という言葉を言ってアルファ・アイテム
334を選択し、「ブラボ」という言葉を言ってブラボ・ア
イテム336を選択する。音声認識モジュール214は、レベ
ル１・コマンドのうちの一つを認識すると、ゲーム・ソ
フトウェア212に通知し、その後、ゲーム・ソフトウェ
ア212は、レベル２・メニューコマンド・スクリーンを
表示する。
【００２１】図３Ｂは、本発明に係る、表示装置310の
レベル２・メニューコマンド・スクリーン324の一実施
形態の図である。図３Ｂの実施形態において、ユーザ
は、チーム・アイテム332を選択するために、マイクロ
フォンに向かって「チーム」と話す。レベル２・メニュー
コマンド・スクリーン324は、レベル２・メニュー340を
表示する。レベル２・メニュー340は、前もって選択さ
れたレベル１・コマンド(チーム・アイテム322)、およ
び、３つのレベル２・コマンド、すなわち、ホールド・
ポジション・アイテム342、デプロイ・アイテム344、フ
ァイア・アット・ウィル・アイテム346、を含む。３つ
のレベル２・コマンド・アイテムが表示されているが、
ゲーム・ソフトウェア212は、レベル２・コマンド・ア
イテムをいくつでも使用できる。
【００２２】レベル２・メニュー340は、２人のキャラ
クタ・チームのために利用可能なコマンドを図示する。
利用可能なコマンドは、ゲームの現在の状態に応じて定
まる。例えば、ユーザが口頭でホールド・ポジション・
アイテム342を選択すると、ゲーム環境に、２人のキャ
ラクタ・チームが現れ、ホールド・ポジションする。ユ
ーザが口頭でチーム・アイテム332を次に選んだとき
は、ホールド・ポジション・アイテム342が現れず、フ
ォロー・アイテム(不図示)が代わりに現れる。
【００２３】チーム・アイテム332およびホールド・ポ
ジション・アイテム342の組合せは完結したコマンドで
あるので、スクリーン324が表示されているときにユー
ザが「ホールド・ポジション」と言うと、ゲーム・ソフト
ウェア212は、その後、スクリーン324を表示することを
止め、ゲーム環境において、選択されたキャラクタが選
択された動作を行うようにさせる(チームの双方のキャ
ラクタがホールド・ポジションする）。同様に、チーム
・アイテム332およびファイア・アット・ウィル・アイ
テム346の組合せは完結したコマンドであるので、スク
リーン324が表示されているときにユーザが「ファイア・
アット・ウィル」と言うと、ゲーム・ソフトウェア212
は、その後、スクリーン324を表示することを止め、ゲ
ーム環境において、選択されたキャラクタが選択された
動作を行うようにさせる(チームの双方のキャラクタが
武器に点火する)。チーム・アイテム332およびデプロイ
・アイテム344の組合せは、完結したコマンドではな
い。スクリーン324が表示されているときにユーザが「デ
プロイ」と言うと、ゲーム・ソフトウェア212は、その
後、レベル３・メニュー・コマンド画面を表示する。
【００２４】図３Ｃは、本発明に係る、表示装置310上
のレベル３・メニューコマンド・スクリーン326の一実
施形態の図である。レベル３・メニューコマンド・スク
リーン326は、前もって選択されたレベル１・コマンド
(チーム・アイテム332)、前もって選択されたレベル２
・コマンド(デプロイ344)および二つのレベル３・コマ
ンド（フラグ・アイテム352およびスモーク・アイテム35
4）を含むレベル３・メニュー350を表示する。ゲーム・
ソフトウェア212についての、図2の実施形態において、
２人の歩兵のキャラクタ・チームは破片(フラグ)手榴弾
およびスモーク手榴弾を配備できる。２つのレベル３・
コマンドのみが表示されているが、ゲーム・ソフトウェ
ア212は、レベル３・コマンドをいくつでも含むことが
できる。
【００２５】チーム・アイテム332、デプロイ・アイテ
ム344およびフラグ・アイテム352の組合せは、完結した
コマンドであるので、スクリーン326が表示されている
ときにユーザが「フラグ」と言うと、ソフトウェア・モジ
ュール212は、スクリーン326を表示するのを止め、ゲー
ム環境において、選択されたキャラクタに選択された動
作を行わせる(チームの双方のメンバーはフラグ手榴弾
を配備する）。チーム・アイテム332、デプロイ・アイ
テム344およびスモーク・アイテム354の組合せは完結し
たコマンドであるので、スクリーン326が表示されてい
るときにユーザが「スモーク」と言うと、ソフトウェア・
モジュール212はスクリーン326を表示するのを止めて、
ゲーム環境において、選択されたキャラクタに選択され
た動作を行わせる(チームの双方のメンバーは、スモー
ク手榴弾を配備する)。
【００２６】図3Cにおいては、３つのメニュー・レベル
のみが表示されているが、メニュー・レベル数がいくつ
であっても本発明の範囲内である。好ましい実施態様に
おいては、使いやすさのために、そして、さまざまなコ
マンド組合せの学習を容易にするために、メニュー・レ
ベルの数は３つとなっている。一旦、ユーザが、すべて
のさまざまなコマンドの組合せを学習するかまたは記憶
すると、ユーザは、コマンドメニューを使用せずにゲー
ムをすることができる（非学習モード）。
【００２７】図２と関連させて上記で述べたように、音
声認識モジュール214は、コンテキストに応じるもので
ある。例えば、「デプロイ」という言葉は、音声認識モジ
ュール214の語彙のなかにある。しかし、音声認識モジ
ュール214は、「チーム」または「アルファ」のようなレベ
ル１・コマンドという状況において「デプロイ」という語
を認識するだけである。換言すれば、音声認識モジュー
ル214は、レベル１・コマンドの入力がなければ、入力
されたレベル２・コマンドに対して反応せず、レベル２
・コマンドが入力されなければ、入力されたレベル３・
コマンドに対して反応しない。このように、音声認識モ
ジュール212は、ゲーム環境においてキャラクタの動作
を制御するために、ゲーム・ソフトウェア212が使用す
るセンテンスタイプのコマンド(行為者および動作)を認
識する。
【００２８】図３Ａから３Ｃは、左から右に分岐するブ
ランチ・メニューとしてコマンドメニュー330、340およ
び350を示しているが、ユーザに対して利用可能なコマ
ンドを表示するための他のいかなる構成であっても、本
発明の範囲内である。
【００２９】図４は、本発明の一実施例に係る、キャラ
クタに対するメニュー方式音声コマンドのための方法ス
テップを表すフローチャートである。まず、ステップ41
2において、音声コマンド機能に割り当てられている制
御装置ボタンをユーザが作動させたかどうか、ゲーム・
ソフトウェア212が決定する。そうでない場合には、そ
の後、ゲーム・ソフトウェア212は、制御装置ボタン信
号のモニタリングを続行する。ボタンが作動させられた
場合、ステップ414において、ゲーム・ソフトウェア212
は、ボタンがリリースされたかどうか決定する。ボタン
がリリースされたら、この方法は、ステップ416を学習
モードで続行する。ボタンがリリースされなかった場
合、この方法は、ステップ４２８を非学習モードで続行
する。
【００３０】ステップ416において、ゲーム・ソフトウ
ェア212は、レベル１・メニューコマンド・スクリーン
上にレベル１・コマンドを表示する。その後、ステップ
418において、音声認識モジュール214は、ユーザが口頭
でレベル１・コマンドを入力したかどうか決定する。レ
ベル１・コマンドが入力されない場合は、この方法はス
テップ416へ戻る。ユーザが口頭でレベル１・コマンド
を入力した場合、その後、ステップ420において、ゲー
ム・ソフトウェア212は、レベル２・メニューコマンド
・スクリーンにレベル２・コマンドを表示する。
【００３１】ステップ422において、音声認識モジュー
ル214は、ユーザが口頭でレベル２・コマンドを入力し
たかどうか決定する。
【００３２】レベル２・コマンドが入力されない場合
は、この方法は、ステップ420に戻る。ユーザが口頭で
レベル２・コマンドを入力した場合、方法はステップ２
４２を続ける。
【００３３】入力されたレベル２・コマンドが関連レベ
ル３・コマンドを有していなければ、ステップ438にお
いて、ゲーム・ソフトウェア212は、そのコマンドを実
行する。それによって、ゲーム環境の一または複数のキ
ャラクタは、選択された動作を実行する。入力されたレ
ベル２・コマンドが関連レベル３・コマンドを有してい
れば、ステップ426において、ソフトウェア212は、レベ
ル３・コマンド・スクリーンにレベル３・コマンドを表
示する。ステップ428において、音声認識モジュール214
は、ユーザが口頭でレベル３・コマンドを入力したかど
うか決定する。レベル３・コマンドが入力されない場合
は、この方法はステップ424へ戻る。ユーザが口頭でレ
ベル３・コマンドを入力した場合、ステップ438におい
て、ゲーム・ソフトウェア212は、このコマンドを実行
する。それによって、ゲーム環境の一または複数のキャ
ラクタは、選択された動作を実行する。
【００３４】非学習モードでは、各レベルにおける利用
可能なコマンドは、ユーザに対して表示されない。ステ
ップ430において、音声認識モジュール214は、ユーザが
口頭でレベル１・コマンドを入力したかどうか決定す
る。レベル１・コマンドが入力されていなければ、音声
認識モジュール214は、レベル１・コマンドを検出しよ
うとし続ける。ユーザが口頭でレベル１・コマンドを入
力すれば、ステップ432において、音声認識モジュール2
14は、ユーザが口頭でレベル２・コマンドを入力したか
どうか決定する。レベル２・コマンドが入力されなけれ
ば、音声認識モジュール214は、レベル２・コマンドを
検出しようとし続ける。ユーザがレベル２・コマンドを
入力すれば、この方法はステップ434を続ける。
【００３５】入力されたレベル２・コマンドが関連レベ
ル３・コマンドを有していなければ、この方法は、ゲー
ム・ソフトウェア212がコマンドを実行するステップ438
を続ける。それによって、ゲーム環境の一または複数の
キャラクタは、選択された動作を実行する。入力された
レベル２・コマンドが関連レベル３・コマンドを有して
いれば、ステップ436において、音声認識モジュール214
が、ユーザがレベル３・コマンドを口頭で入力したかど
うかを決定する。ユーザが口頭でレベル３・コマンドを
入力しなければ、音声認識モジュール214は、レベル３
・コマンドを検出しようとし続ける。ユーザが口頭でレ
ベル３・コマンドを入力すれば、ステップ438におい
て、ゲーム・ソフトウェア212は、そのコマンドを実行
する。それによって、ゲーム環境の一または複数のキャ
ラクタは、選択された動作を実行する。
【００３６】非学習モードにおいては、あたかもユーザ
が、一または複数のキャラクタに対し、実際に口頭で指
令を与えているかのように、ユーザはゲーム環境を体験
する。これによって、ゲームプレイがより直観的で現実
的なものとなる。ゲーム・ソフトウェア212の一実施形
態において、ユーザがキャラクタのうちの一人に音声コ
マンドを与えた後、予め記録された、コマンドの肯定応
答または他の可聴式レスポンスが、スピーカまたはヘッ
ドセット(不図示)を介して、ユーザに対して再生され
る。
【図面の簡単な説明】
【図１】図1は、本発明に係る、電子的エンタテインメ
ントシステムの一形態のブロック図である。
【図２】図２は、本発明に係る、図1のメインメモリの
一形態のブロック図である。
【図３Ａ】図３Ａは、本発明に係る、表示装置上のレベ
ル１・メニューコマンド・スクリーンの一形態の図であ
る。
【図３Ｂ】図３Ｂは、本発明に係る、表示装置上のレベ
ル２・メニューコマンド・スクリーンの一形態の図であ
る。
【図３Ｃ】図３Ｃは、本発明に係る、表示装置上のレベ
ル３・メニューコマンド・スクリーンの一形態の図であ
る。
【図４】図４は、本発明の一実施形態に係る、キャラク
タに対するメニュー方式音声コマンドのための方法ステ
ップのフローチャートである。
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 ＦＩ テーマコート゛(参考） Ｇ１０Ｌ 15/00 Ｇ１０Ｌ 3/00 ５５１Ｈ 15/08 ５３１Ｗ 15/10 ５３１Ｊ (72)発明者 セス シー． エイチ． ルイシ アメリカ合衆国、カリフォルニア州 94404−2175、 フォスター シティー、 イースト ヒルスデイル ブルバード 919 Ｆターム(参考） 2C001 BA02 BB05 BB08 CA07 CB01 5D015 AA02 KK01 5E501 AA17 BA05 BA12 CB15 DA14 DA17 FA03 FA05 FA42 FA45

Claims (30)

    【特許請求の範囲】
  1. 【請求項１】キャラクタの音声制御のためのシステムに
    おいて、 ユーザから音声コマンドを受け付けるように操作可能な
    マイクロフォンと、 メモリに格納された音声認識モジュールであって、前記
    音声コマンドを認識するよう構成された音声認識モジュ
    ールと、 前記メモリに格納されたソフトウエアであって、キャラ
    クタの動作を制御するために、認識された音声コマンド
    に応答するよう構成されたソフトウェアと、 を備えるシステム。
  2. 【請求項２】請求項１記載のシステムにおいて、 前記ソフトウェアは、利用可能なコマンドのメニューを
    表示装置に表示するシステム。
  3. 【請求項３】請求項２記載のシステムにおいて、 前記ソフトウェアは、利用可能なコマンドについてのレ
    ベル１・メニューを、制御装置からの信号に応答して表
    示装置に表示するシステム。
  4. 【請求項４】請求項３記載のシステムにおいて、 前記ソフトウェアは、利用可能なコマンドについてのレ
    ベル２・メニューを、前記ユーザによって話されたレベ
    ル１・コマンドを認識する前記音声認識モジュールに応
    答して前記表示装置に表示するシステム。
  5. 【請求項５】請求項４記載のシステムにおいて、 前記ソフトウェアは、キャラクタの動作を制御するため
    のコマンドを、前記ユーザにより話されたレベル２・コ
    マンドを認識する前記音声認識モジュールに応答して実
    行するシステム。
  6. 【請求項６】請求項４記載のシステムにおいて、 前記ソフトウェアは、利用可能なレベル３・コマンド
    を、前記ユーザによって話されたレベル２・コマンドを
    認識する前記音声認識モジュールに応答して前記表示装
    置に表示する。
  7. 【請求項７】請求項６記載のシステムにおいて、 前記ソフトウェアは、キャラクタの動作を制御するため
    のコマンドを、前記ユーザによって話されたレベル３・
    コマンドを認識する前記音声認識モジュールに応答して
    実行する。
  8. 【請求項８】請求項1記載のシステムにおいて、 一または複数のキャラクタの動作を制御するために、前
    記ソフトウェアにコマンドを入力するための制御装置を
    さらに備える。
  9. 【請求項９】請求項８記載のシステムにおいて、 前記ユーザは、前記制御装置を用いて、一のキャラクタ
    の動作を制御し、前記音声コマンドを用いて、少なくと
    も一の、他のキャラクタの動作を制御する。
  10. 【請求項１０】請求項１記載のシステムにおいて、 前記音声コマンドは、連続的に話された少なくとも二つ
    の語を含む。
  11. 【請求項１１】キャラクタを制御するための方法であっ
    て、 ユーザに対し、コマンドのメニューを表示するステップ
    と、 前記メニュー内のコマンドに該当する、発せられた言葉
    を認識するステップと、 キャラクタに動作を行わせるために、認識されたコマン
    ドを実行するステップと、 を備える方法。
  12. 【請求項１２】請求項１１記載の方法において、 前記コマンドのメニューは、利用可能なキャラクタのメ
    ニューを含む。
  13. 【請求項１３】請求項１１に記載の方法において、 前記コマンドのメニューは、選択されたキャラクタのた
    めの利用可能な動作のメニューを含み、 前記利用可能な動作のメニューにおけるアイテムは、ゲ
    ーム環境の状況に応じて定まる。
  14. 【請求項１４】請求項１１記載の方法において、 発せられた言葉を認識する前記ステップは、前記発せら
    れた言葉のコンテキストを評価することを含む。
  15. 【請求項１５】請求項１１記載の方法において、 前記発せられた言葉は、少なくとも二つの語を含む。
  16. 【請求項１６】請求項１５記載の方法において、 前記発せられた言葉は、センテンスタイプのコマンドで
    ある。
  17. 【請求項１７】コンピュータ読込可能な媒体であって、 ユーザに対し、コマンドのメニューを表示するステップ
    と、 前記メニュー内のコマンドに該当する、発せられた言葉
    を認識するステップと、 キャラクタに動作を行わせるために、認識されたコマン
    ドを実行するステップとを実行することにより、キャラ
    クタを制御するための指令を備える。
  18. 【請求項１８】請求項１７記載のコンピュータ読込可能
    な媒体において、 前記コマンドのメニューは、利用可能なキャラクタのメ
    ニューを含む。
  19. 【請求項１９】請求項１７記載のコンピュータ読込可能
    な媒体において、 前記コマンドのメニューは、選択されたキャラクタのた
    めの利用可能なメニューを含み、 前記利用可能な動作のメニューのアイテムは、ゲーム環
    境の状態に応じて定まる。
  20. 【請求項２０】請求項１７記載のコンピュータ読込可能
    な媒体であって、 発せられた言葉を認識するステップは、前記発せられた
    言葉のコンテキストを評価することを含む。
  21. 【請求項２１】請求項１７に記載のコンピュータ読込可
    能な媒体において、 前記発せられた言葉は、少なくとも二つの語を含む。
  22. 【請求項２２】請求項２１記載のコンピュータ読込可能
    な媒体において、 前記発せられた言葉は、センテンスタイプのコマンドで
    ある。
  23. 【請求項２３】キャラクタを制御するためのシステムで
    あって、 ユーザに対し、コマンドのメニューを表示するための手
    段と、 前記メニュー内のコマンドに該当する、発せられた言葉
    を認識するための手段と、 キャラクタに動作を行わせるために、認識されたコマン
    ドを実行するための手段と、 を備えるシステム。
  24. 【請求項２４】請求項２３記載のシステムにおいて、 前記コマンドのメニューは、利用可能なキャラクタのメ
    ニューを含む。
  25. 【請求項２５】請求項２３記載のシステムにおいて、 前記コマンドのメニューは、選択されたキャラクタのた
    めの利用可能な動作のメニューを含み、 前記利用可能な動作のメニューにおけるアイテムは、ゲ
    ーム環境の状態に応じて定まる。
  26. 【請求項２６】請求項２３記載のシステムにおいて、 発せられた言葉を認識するための前記手段は、前記発せ
    られた言葉のコンテキストを評価する。
  27. 【請求項２７】請求項２３記載のシステムにおいて、 前記発せられた言葉は、少なくとも二つの語を含む。
  28. 【請求項２８】請求項２７記載のシステムにおいて、 前記発せられた言葉は、センテンスタイプのコマンドで
    ある。
  29. 【請求項２９】請求項２３記載のシステムにおいて、 発せられた言葉を認識するための前記手段は、話者に依
    存しない、コンテキストに応じる認識装置である。
  30. 【請求項３０】請求項２３記載のシステムにおいて、 前記コマンドのメニューは、分岐メニューとして、前記
    ユーザに対して表示される。
JP2002138393A 2001-05-14 2002-05-14 ゲーム環境におけるキャラクタのメニュー方式音声制御システムおよび方法 Pending JP2003047768A (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US09/859034 2001-05-14
US09/859,034 US7085722B2 (en) 2001-05-14 2001-05-14 System and method for menu-driven voice control of characters in a game environment

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2005306175A Division JP2006099125A (ja) 2001-05-14 2005-10-20 ゲーム環境におけるキャラクタのメニュー方式音声制御システムおよび方法

Publications (1)

Publication Number Publication Date
JP2003047768A true JP2003047768A (ja) 2003-02-18

Family

ID=25329828

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2002138393A Pending JP2003047768A (ja) 2001-05-14 2002-05-14 ゲーム環境におけるキャラクタのメニュー方式音声制御システムおよび方法
JP2005306175A Pending JP2006099125A (ja) 2001-05-14 2005-10-20 ゲーム環境におけるキャラクタのメニュー方式音声制御システムおよび方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
JP2005306175A Pending JP2006099125A (ja) 2001-05-14 2005-10-20 ゲーム環境におけるキャラクタのメニュー方式音声制御システムおよび方法

Country Status (6)

Country Link
US (4) US7085722B2 (ja)
EP (1) EP1262955B1 (ja)
JP (2) JP2003047768A (ja)
KR (1) KR100464877B1 (ja)
CN (1) CN1385783A (ja)
DE (1) DE60235674D1 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008004486A1 (fr) * 2006-07-06 2008-01-10 Panasonic Corporation Dispositif d'entrée vocale
US9108108B2 (en) 2007-09-05 2015-08-18 Sony Computer Entertainment America Llc Real-time, contextual display of ranked, user-generated game play advice
US9126116B2 (en) 2007-09-05 2015-09-08 Sony Computer Entertainment America Llc Ranking of user-generated game play advice
US9833707B2 (en) 2012-10-29 2017-12-05 Sony Interactive Entertainment Inc. Ambient light control and calibration via a console
US10128914B1 (en) 2017-09-06 2018-11-13 Sony Interactive Entertainment LLC Smart tags with multiple interactions
US10561942B2 (en) 2017-05-15 2020-02-18 Sony Interactive Entertainment America Llc Metronome for competitive gaming headset

Families Citing this family (287)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
AU6630800A (en) 1999-08-13 2001-03-13 Pixo, Inc. Methods and apparatuses for display and traversing of links in page character array
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
FR2823896B1 (fr) * 2001-04-23 2003-10-24 E Bourgeois Ets Simulateur de vol adapte a une famille d'aeronefs
US7085722B2 (en) * 2001-05-14 2006-08-01 Sony Computer Entertainment America Inc. System and method for menu-driven voice control of characters in a game environment
ITFI20010199A1 (it) 2001-10-22 2003-04-22 Riccardo Vieri Sistema e metodo per trasformare in voce comunicazioni testuali ed inviarle con una connessione internet a qualsiasi apparato telefonico
US20030083881A1 (en) * 2001-11-01 2003-05-01 Shu-Ming Liu Voice input module that stores personal data
US7099829B2 (en) * 2001-11-06 2006-08-29 International Business Machines Corporation Method of dynamically displaying speech recognition system information
US7669134B1 (en) 2003-05-02 2010-02-23 Apple Inc. Method and apparatus for displaying information during an instant messaging session
US8133115B2 (en) 2003-10-22 2012-03-13 Sony Computer Entertainment America Llc System and method for recording and displaying a graphical path in a video game
US20050169252A1 (en) * 2004-02-03 2005-08-04 Andrew Riggs Game controller including an integrated communicator
KR100576555B1 (ko) * 2004-03-25 2006-05-08 (주)이진공작 사용자의 참여 및 대화가 가능한 텔레비전 방송을 통한에이 알 에스 게임 서비스 장치 및 방법
JP4452541B2 (ja) 2004-04-01 2010-04-21 本田技研工業株式会社 シミュレーション装置
DE102005014486B4 (de) * 2004-03-31 2009-04-09 Honda Motor Co., Ltd. Fahrrad-Simulationsvorrichtung
US7976385B2 (en) * 2004-05-11 2011-07-12 Mattel, Inc. Game controller with sensitivity adjustment
US7704135B2 (en) * 2004-08-23 2010-04-27 Harrison Jr Shelton E Integrated game system, method, and device
US20060046845A1 (en) * 2004-08-26 2006-03-02 Alexandre Armand Device for the acoustic control of a game system and application
US20060071933A1 (en) 2004-10-06 2006-04-06 Sony Computer Entertainment Inc. Application binary interface for multi-pass shaders
US9083798B2 (en) 2004-12-22 2015-07-14 Nuance Communications, Inc. Enabling voice selection of user preferences
US7917365B2 (en) * 2005-06-16 2011-03-29 Nuance Communications, Inc. Synchronizing visual and speech events in a multimodal application
US8090584B2 (en) 2005-06-16 2012-01-03 Nuance Communications, Inc. Modifying a grammar of a hierarchical multimodal menu in dependence upon speech command frequency
US7636126B2 (en) 2005-06-22 2009-12-22 Sony Computer Entertainment Inc. Delay matching in audio/video systems
TWI278762B (en) * 2005-08-22 2007-04-11 Delta Electronics Inc Method and apparatus for speech input
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US8073700B2 (en) 2005-09-12 2011-12-06 Nuance Communications, Inc. Retrieval and presentation of network service results for mobile device using a multimodal browser
US7633076B2 (en) 2005-09-30 2009-12-15 Apple Inc. Automated response to and sensing of user activity in portable devices
US7965859B2 (en) 2006-05-04 2011-06-21 Sony Computer Entertainment Inc. Lighting control of a user environment via a display device
US7880746B2 (en) 2006-05-04 2011-02-01 Sony Computer Entertainment Inc. Bandwidth management through lighting control of a user environment via a display device
US7848314B2 (en) 2006-05-10 2010-12-07 Nuance Communications, Inc. VOIP barge-in support for half-duplex DSR client on a full-duplex network
US9208785B2 (en) 2006-05-10 2015-12-08 Nuance Communications, Inc. Synchronizing distributed speech recognition
US8332218B2 (en) 2006-06-13 2012-12-11 Nuance Communications, Inc. Context-based grammars for automated speech recognition
US7676371B2 (en) 2006-06-13 2010-03-09 Nuance Communications, Inc. Oral modification of an ASR lexicon of an ASR engine
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8374874B2 (en) 2006-09-11 2013-02-12 Nuance Communications, Inc. Establishing a multimodal personality for a multimodal application in dependence upon attributes of user interaction
US8145493B2 (en) 2006-09-11 2012-03-27 Nuance Communications, Inc. Establishing a preferred mode of interaction between a user and a multimodal application
US8073697B2 (en) 2006-09-12 2011-12-06 International Business Machines Corporation Establishing a multimodal personality for a multimodal application
US7957976B2 (en) 2006-09-12 2011-06-07 Nuance Communications, Inc. Establishing a multimodal advertising personality for a sponsor of a multimodal application
US8086463B2 (en) 2006-09-12 2011-12-27 Nuance Communications, Inc. Dynamically generating a vocal help prompt in a multimodal application
US7827033B2 (en) 2006-12-06 2010-11-02 Nuance Communications, Inc. Enabling grammars in web page frames
US8612230B2 (en) 2007-01-03 2013-12-17 Nuance Communications, Inc. Automatic speech recognition with a selection list
KR100780531B1 (ko) * 2007-01-10 2007-11-30 한국문화콘텐츠진흥원 구화 교육용 게임 시스템
US8069047B2 (en) 2007-02-12 2011-11-29 Nuance Communications, Inc. Dynamically defining a VoiceXML grammar in an X+V page of a multimodal application
US7801728B2 (en) 2007-02-26 2010-09-21 Nuance Communications, Inc. Document session replay for multimodal applications
US8150698B2 (en) 2007-02-26 2012-04-03 Nuance Communications, Inc. Invoking tapered prompts in a multimodal application
US7840409B2 (en) 2007-02-27 2010-11-23 Nuance Communications, Inc. Ordering recognition results produced by an automatic speech recognition engine for a multimodal application
US9208783B2 (en) 2007-02-27 2015-12-08 Nuance Communications, Inc. Altering behavior of a multimodal application based on location
US7822608B2 (en) 2007-02-27 2010-10-26 Nuance Communications, Inc. Disambiguating a speech recognition grammar in a multimodal application
US7809575B2 (en) 2007-02-27 2010-10-05 Nuance Communications, Inc. Enabling global grammars for a particular multimodal application
US8713542B2 (en) 2007-02-27 2014-04-29 Nuance Communications, Inc. Pausing a VoiceXML dialog of a multimodal application
US8938392B2 (en) 2007-02-27 2015-01-20 Nuance Communications, Inc. Configuring a speech engine for a multimodal application based on location
US8843376B2 (en) 2007-03-13 2014-09-23 Nuance Communications, Inc. Speech-enabled web content searching using a multimodal browser
US7945851B2 (en) 2007-03-14 2011-05-17 Nuance Communications, Inc. Enabling dynamic voiceXML in an X+V page of a multimodal application
US8670987B2 (en) 2007-03-20 2014-03-11 Nuance Communications, Inc. Automatic speech recognition with dynamic grammar rules
US8515757B2 (en) 2007-03-20 2013-08-20 Nuance Communications, Inc. Indexing digitized speech with words represented in the digitized speech
US8909532B2 (en) 2007-03-23 2014-12-09 Nuance Communications, Inc. Supporting multi-lingual user interaction with a multimodal application
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
US8788620B2 (en) 2007-04-04 2014-07-22 International Business Machines Corporation Web service support for a multimodal client processing a multimodal application
US8862475B2 (en) 2007-04-12 2014-10-14 Nuance Communications, Inc. Speech-enabled content navigation and control of a distributed multimodal browser
US8725513B2 (en) 2007-04-12 2014-05-13 Nuance Communications, Inc. Providing expressive user interaction with a multimodal application
US8328637B2 (en) * 2007-06-21 2012-12-11 Microsoft Corporation Combat action selection using situational awareness
ITFI20070177A1 (it) 2007-07-26 2009-01-27 Riccardo Vieri Sistema per la creazione e impostazione di una campagna pubblicitaria derivante dall'inserimento di messaggi pubblicitari all'interno di uno scambio di messaggi e metodo per il suo funzionamento.
US9053089B2 (en) 2007-10-02 2015-06-09 Apple Inc. Part-of-speech tagging using latent analogy
US8595642B1 (en) 2007-10-04 2013-11-26 Great Northern Research, LLC Multiple shell multi faceted graphical user interface
US8165886B1 (en) 2007-10-04 2012-04-24 Great Northern Research LLC Speech interface system and method for control and interaction with applications on a computing system
US8364694B2 (en) 2007-10-26 2013-01-29 Apple Inc. Search assistant for digital media assets
US8620662B2 (en) 2007-11-20 2013-12-31 Apple Inc. Context-aware unit selection
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8327272B2 (en) 2008-01-06 2012-12-04 Apple Inc. Portable multifunction device, method, and graphical user interface for viewing and managing electronic calendars
US8065143B2 (en) 2008-02-22 2011-11-22 Apple Inc. Providing text input using speech data and non-speech data
US8289283B2 (en) 2008-03-04 2012-10-16 Apple Inc. Language input interface on a device
US20090247293A1 (en) 2008-03-26 2009-10-01 Aristocrat Technologies Australia Pty Limited Gaming machine
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US8082148B2 (en) 2008-04-24 2011-12-20 Nuance Communications, Inc. Testing a grammar used in speech recognition for reliability in a plurality of operating environments having different background noise
US9349367B2 (en) 2008-04-24 2016-05-24 Nuance Communications, Inc. Records disambiguation in a multimodal application operating on a multimodal device
US8229081B2 (en) 2008-04-24 2012-07-24 International Business Machines Corporation Dynamically publishing directory information for a plurality of interactive voice response systems
US8214242B2 (en) 2008-04-24 2012-07-03 International Business Machines Corporation Signaling correspondence between a meeting agenda and a meeting discussion
US8121837B2 (en) 2008-04-24 2012-02-21 Nuance Communications, Inc. Adjusting a speech engine for a mobile computing device based on background noise
AU2009201551A1 (en) 2008-05-02 2009-11-19 Aristocrat Technologies Australia Pty Limited A gaming system and a method of monitoring a gaming device
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US8464150B2 (en) 2008-06-07 2013-06-11 Apple Inc. Automatic language identification for dynamic text processing
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
JP5349860B2 (ja) * 2008-08-07 2013-11-20 株式会社バンダイナムコゲームス プログラム、情報記憶媒体及びゲーム装置
US8768702B2 (en) 2008-09-05 2014-07-01 Apple Inc. Multi-tiered voice feedback in an electronic device
US8898568B2 (en) 2008-09-09 2014-11-25 Apple Inc. Audio user interface
US8396714B2 (en) 2008-09-29 2013-03-12 Apple Inc. Systems and methods for concatenation of words in text to speech synthesis
US8352268B2 (en) 2008-09-29 2013-01-08 Apple Inc. Systems and methods for selective rate of speech and speech preferences for text to speech synthesis
US8712776B2 (en) 2008-09-29 2014-04-29 Apple Inc. Systems and methods for selective text to speech synthesis
US8583418B2 (en) 2008-09-29 2013-11-12 Apple Inc. Systems and methods of detecting language and natural language strings for text to speech synthesis
US8352272B2 (en) 2008-09-29 2013-01-08 Apple Inc. Systems and methods for text to speech synthesis
US8355919B2 (en) 2008-09-29 2013-01-15 Apple Inc. Systems and methods for text normalization for text to speech synthesis
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US11287939B2 (en) 2008-10-09 2022-03-29 Aristocrat Technologies Australia Pty Limited Gaming system and gaming system processor module
US11385758B2 (en) 2008-10-09 2022-07-12 Aristocrat Technologies Australia Pty Limited Gaming system and gaming system processor module
AU2009222627B2 (en) 2008-10-09 2011-07-21 Aristocrat Technologies Australia Pty Limited Gaming system and gaming system processor module
WO2010067118A1 (en) 2008-12-11 2010-06-17 Novauris Technologies Limited Speech recognition involving a mobile device
US8862252B2 (en) 2009-01-30 2014-10-14 Apple Inc. Audio user interface for displayless electronic device
US8380507B2 (en) 2009-03-09 2013-02-19 Apple Inc. Systems and methods for determining the language to use for speech generated by a text to speech engine
US8380513B2 (en) 2009-05-19 2013-02-19 International Business Machines Corporation Improving speech capabilities of a multimodal application
US10706373B2 (en) 2011-06-03 2020-07-07 Apple Inc. Performing actions associated with task items that represent tasks to perform
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10540976B2 (en) 2009-06-05 2020-01-21 Apple Inc. Contextual voice commands
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US8290780B2 (en) 2009-06-24 2012-10-16 International Business Machines Corporation Dynamically extending the speech prompts of a multimodal application
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US8719714B2 (en) 2009-07-08 2014-05-06 Steelseries Aps Apparatus and method for managing operations of accessories
US9737796B2 (en) 2009-07-08 2017-08-22 Steelseries Aps Apparatus and method for managing operations of accessories in multi-dimensions
US8510117B2 (en) 2009-07-09 2013-08-13 Nuance Communications, Inc. Speech enabled media sharing in a multimodal application
US8416714B2 (en) 2009-08-05 2013-04-09 International Business Machines Corporation Multimodal teleconferencing
US8682649B2 (en) 2009-11-12 2014-03-25 Apple Inc. Sentiment prediction from textual data
US10912991B2 (en) * 2009-12-09 2021-02-09 Sony Interactive Entertainment LLC Portable game controller settings
US8523673B1 (en) * 2009-12-14 2013-09-03 Markeith Boyd Vocally interactive video game mechanism for displaying recorded physical characteristics of a player in a virtual world and in a physical game space via one or more holographic images
US8600743B2 (en) 2010-01-06 2013-12-03 Apple Inc. Noise profile determination for voice-related feature
US8381107B2 (en) 2010-01-13 2013-02-19 Apple Inc. Adaptive audio feedback system and method
US8311838B2 (en) 2010-01-13 2012-11-13 Apple Inc. Devices and methods for identifying a prompt corresponding to a voice input in a sequence of prompts
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
DE112011100329T5 (de) 2010-01-25 2012-10-31 Andrew Peter Nelson Jerram Vorrichtungen, Verfahren und Systeme für eine Digitalkonversationsmanagementplattform
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US10786736B2 (en) 2010-05-11 2020-09-29 Sony Interactive Entertainment LLC Placement of user information in a game space
US9183560B2 (en) 2010-05-28 2015-11-10 Daniel H. Abelow Reality alternate
US8639516B2 (en) 2010-06-04 2014-01-28 Apple Inc. User-specific noise suppression for voice quality improvements
US8713021B2 (en) 2010-07-07 2014-04-29 Apple Inc. Unsupervised document clustering using latent semantic density analysis
US9104670B2 (en) 2010-07-21 2015-08-11 Apple Inc. Customized search or acquisition of digital media assets
US20120032779A1 (en) * 2010-08-04 2012-02-09 Nokia Corporation Method and apparatus for accessing content within a device
US9002715B2 (en) * 2010-08-09 2015-04-07 Mitsubishi Electric Corporation Information processor
US8719006B2 (en) 2010-08-27 2014-05-06 Apple Inc. Combined statistical and rule-based part-of-speech tagging for text-to-speech synthesis
US8719014B2 (en) 2010-09-27 2014-05-06 Apple Inc. Electronic device with text error correction based on voice recognition data
US10762293B2 (en) 2010-12-22 2020-09-01 Apple Inc. Using parts-of-speech tagging and named entity recognition for spelling correction
US10515147B2 (en) 2010-12-22 2019-12-24 Apple Inc. Using statistical language models for contextual lookup
US8562434B2 (en) 2011-01-16 2013-10-22 Google Inc. Method and system for sharing speech recognition program profiles for an application
US8781836B2 (en) 2011-02-22 2014-07-15 Apple Inc. Hearing assistance system for providing consistent human speech
CN102671383A (zh) * 2011-03-08 2012-09-19 德信互动科技（北京）有限公司 基于声控的游戏实现装置和方法
CN102671381A (zh) * 2011-03-08 2012-09-19 德信互动科技（北京）有限公司 基于声控的游戏实现装置和方法
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US20120310642A1 (en) 2011-06-03 2012-12-06 Apple Inc. Automatically creating a mapping between text data and audio data
US9911349B2 (en) * 2011-06-17 2018-03-06 Rosetta Stone, Ltd. System and method for language instruction using visual and/or audio prompts
US8812294B2 (en) 2011-06-21 2014-08-19 Apple Inc. Translating phrases from one language into another using an order-based set of declarative rules
US9342817B2 (en) 2011-07-07 2016-05-17 Sony Interactive Entertainment LLC Auto-creating groups for sharing photos
US8706472B2 (en) 2011-08-11 2014-04-22 Apple Inc. Method for disambiguating multiple readings in language conversion
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
US8762156B2 (en) 2011-09-28 2014-06-24 Apple Inc. Speech recognition repair using contextual information
US9256396B2 (en) * 2011-10-10 2016-02-09 Microsoft Technology Licensing, Llc Speech recognition for context switching
CN103127718A (zh) * 2011-11-30 2013-06-05 北京德信互动网络技术有限公司 基于声控的游戏实现装置和方法
KR102022318B1 (ko) 2012-01-11 2019-09-18 삼성전자 주식회사 음성 인식을 사용하여 사용자 기능을 수행하는 방법 및 장치
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
CN103366743A (zh) * 2012-03-30 2013-10-23 北京千橡网景科技发展有限公司 操作语音命令的方法和装置
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US8775442B2 (en) 2012-05-15 2014-07-08 Apple Inc. Semantic search using a single-source semantic model
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
WO2013185109A2 (en) 2012-06-08 2013-12-12 Apple Inc. Systems and methods for recognizing textual identifiers within a plurality of words
JP5306518B1 (ja) * 2012-06-08 2013-10-02 株式会社 ディー・エヌ・エー ゲームを提供する装置
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
FI124994B (fi) 2012-06-29 2015-04-15 Tribe Studios Oy Epälineaarisen tietokonepelin parannettu rakenne
CN102855873A (zh) * 2012-08-03 2013-01-02 海信集团有限公司 一种控制电子设备的方法及电子设备
KR101987255B1 (ko) * 2012-08-20 2019-06-11 엘지이노텍 주식회사 음성 인식 장치 및 이의 음성 인식 방법
US9576574B2 (en) 2012-09-10 2017-02-21 Apple Inc. Context-sensitive handling of interruptions by intelligent digital assistant
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
US8935167B2 (en) 2012-09-25 2015-01-13 Apple Inc. Exemplar-based latent perceptual modeling for automatic speech recognition
US9433856B2 (en) 2012-10-26 2016-09-06 Infosys Limited Methods for synthesizing a voice guiding signal to a gaming controller and devices thereof
US10373615B2 (en) * 2012-10-30 2019-08-06 Google Technology Holdings LLC Voice control user interface during low power mode
EP2941769B1 (en) * 2013-01-04 2019-05-08 Kopin Corporation Bifurcated speech recognition
EP4138075A1 (en) 2013-02-07 2023-02-22 Apple Inc. Voice trigger for a digital assistant
US10642574B2 (en) 2013-03-14 2020-05-05 Apple Inc. Device, method, and graphical user interface for outputting captions
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US9977779B2 (en) 2013-03-14 2018-05-22 Apple Inc. Automatic supplementation of word correction dictionaries
US9733821B2 (en) 2013-03-14 2017-08-15 Apple Inc. Voice control to diagnose inadvertent activation of accessibility features
US9368114B2 (en) 2013-03-14 2016-06-14 Apple Inc. Context-sensitive handling of interruptions
US10572476B2 (en) 2013-03-14 2020-02-25 Apple Inc. Refining a search based on schedule items
KR101857648B1 (ko) 2013-03-15 2018-05-15 애플 인크. 지능형 디지털 어시스턴트에 의한 사용자 트레이닝
US9687730B2 (en) 2013-03-15 2017-06-27 Steelseries Aps Gaming device with independent gesture-sensitive areas
US9423874B2 (en) 2013-03-15 2016-08-23 Steelseries Aps Gaming accessory with sensory feedback device
US9604147B2 (en) 2013-03-15 2017-03-28 Steelseries Aps Method and apparatus for managing use of an accessory
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
WO2014144579A1 (en) 2013-03-15 2014-09-18 Apple Inc. System and method for updating an adaptive speech recognition model
KR101904293B1 (ko) 2013-03-15 2018-10-05 애플 인크. 콘텍스트-민감성 방해 처리
KR101759009B1 (ko) 2013-03-15 2017-07-17 애플 인크. 적어도 부분적인 보이스 커맨드 시스템을 트레이닝시키는 것
US20140329589A1 (en) * 2013-05-03 2014-11-06 Steelseries Aps Method and apparatus for configuring a gaming environment
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
EP3008641A1 (en) 2013-06-09 2016-04-20 Apple Inc. Device, method, and graphical user interface for enabling conversation persistence across two or more instances of a digital assistant
EP3008964B1 (en) 2013-06-13 2019-09-25 Apple Inc. System and method for emergency calls initiated by voice command
CN105453026A (zh) 2013-08-06 2016-03-30 苹果公司 基于来自远程设备的活动自动激活智能响应
US10258886B2 (en) 2013-09-04 2019-04-16 Nvidia Corporation Dynamic interface control device mapping when game sharing
US11130055B2 (en) 2013-09-04 2021-09-28 Nvidia Corporation System and method for granting remote access to a video game executed on a video game console or network client
US9545580B2 (en) * 2013-11-04 2017-01-17 Intralot S.A. — Integrated Lottery Systems and Services Computer systems and computer-implemented methods for conducting and playing personalized games based on vocal and non-vocal game entries
US9698999B2 (en) * 2013-12-02 2017-07-04 Amazon Technologies, Inc. Natural language control of secondary device
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
US9620105B2 (en) 2014-05-15 2017-04-11 Apple Inc. Analyzing audio input for efficient speech and music recognition
US10592095B2 (en) 2014-05-23 2020-03-17 Apple Inc. Instantaneous speaking of content on touch devices
US9502031B2 (en) 2014-05-27 2016-11-22 Apple Inc. Method for supporting dynamic grammars in WFST-based ASR
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
CN106471570B (zh) 2014-05-30 2019-10-01 苹果公司 多命令单一话语输入方法
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US9734193B2 (en) 2014-05-30 2017-08-15 Apple Inc. Determining domain salience ranking from ambiguous words in natural speech
US10289433B2 (en) 2014-05-30 2019-05-14 Apple Inc. Domain specific language for encoding assistant dialog
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US20160078864A1 (en) * 2014-09-15 2016-03-17 Honeywell International Inc. Identifying un-stored voice commands
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9711141B2 (en) 2014-12-09 2017-07-18 Apple Inc. Disambiguating heteronyms in speech synthesis
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US10252171B2 (en) * 2015-04-02 2019-04-09 Nvidia Corporation System and method for cooperative game control
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US11416212B2 (en) * 2016-05-17 2022-08-16 Microsoft Technology Licensing, Llc Context-based user agent
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
CN106056989B (zh) * 2016-06-23 2018-10-16 广东小天才科技有限公司 一种语言学习方法及装置、终端设备
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
CN210129283U (zh) * 2016-10-05 2020-03-06 金泰克斯公司 基于车辆的远程控制系统
CN106528137A (zh) * 2016-10-11 2017-03-22 深圳市天易联科技有限公司 与虚拟角色对话的方法及装置
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
DK201770429A1 (en) 2017-05-12 2018-12-14 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK179549B1 (en) 2017-05-16 2019-02-12 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
US11998313B2 (en) 2018-01-05 2024-06-04 Children's Hospital Medical Center Systems and methods for respiration-controlled virtual experiences
US11698927B2 (en) 2018-05-16 2023-07-11 Sony Interactive Entertainment LLC Contextual digital media processing systems and methods
US20200005661A1 (en) * 2018-06-27 2020-01-02 Cubic Corporation Phonic fires trainer
CN109360561A (zh) * 2018-11-13 2019-02-19 东软集团股份有限公司 语音控制方法及系统、存储介质、语音模块、主控系统
CN109646952A (zh) * 2018-12-14 2019-04-19 北京智明星通科技股份有限公司 一种互动游戏界面显示方法、装置及终端
CN109857363B (zh) * 2019-01-17 2021-10-22 腾讯科技（深圳）有限公司 一种音效播放的方法以及相关装置
CN109741745A (zh) * 2019-01-28 2019-05-10 中国银行股份有限公司 一种交易导航方法及装置
CN112742024B (zh) * 2020-08-20 2023-02-10 腾讯科技（深圳）有限公司 虚拟对象的控制方法、装置、设备及存储介质
CN111957044A (zh) * 2020-09-04 2020-11-20 网易（杭州）网络有限公司 多人对抗游戏的角色控制方法、装置和电子设备
CN113707144B (zh) * 2021-08-24 2023-12-19 深圳市衡泰信科技有限公司 一种高尔夫模拟器的控制方法及系统
CN114931747B (zh) * 2022-07-25 2022-10-14 深圳市景创科技电子股份有限公司 一种游戏控制器和智能语音控制方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09265379A (ja) * 1996-02-09 1997-10-07 Canon Inc 画像操作装置及び方法
WO1998002223A1 (fr) * 1996-07-11 1998-01-22 Sega Enterprises, Ltd. Systeme de reconnaissance vocale, procede de reconnaissance vocale et jeu les mettant en pratique

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS58195957A (ja) * 1982-05-11 1983-11-15 Casio Comput Co Ltd 音声によるプログラム実行方式
US4757525A (en) * 1982-09-29 1988-07-12 Vmx, Inc. Electronic audio communications system with voice command features
US5274560A (en) * 1990-12-03 1993-12-28 Audio Navigation Systems, Inc. Sensor free vehicle navigation system utilizing a voice input/output interface for routing a driver from his source point to his destination point
JPH05293252A (ja) * 1992-04-07 1993-11-09 Robert M Best 音声対立を利用する対話ビデオゲーム方法
EP0580361B1 (en) * 1992-07-21 2000-02-02 Pioneer Electronic Corporation Disc player and method of reproducing information of the same
US5890122A (en) * 1993-02-08 1999-03-30 Microsoft Corporation Voice-controlled computer simulateously displaying application menu and list of available commands
NO954684L (no) * 1994-11-21 1996-05-22 Compaq Computer Corp Apparat og fremgangsmåte for interaktiv lek med en datamaskin
US5617407A (en) * 1995-06-21 1997-04-01 Bareis; Monica M. Optical disk having speech recognition templates for information access
US6028593A (en) * 1995-12-01 2000-02-22 Immersion Corporation Method and apparatus for providing simulated physical interactions within computer generated environments
CN1103076C (zh) 1997-05-30 2003-03-12 刘达民 利用语音讯号控制游戏软件的方法及装置
US6077164A (en) 1997-08-18 2000-06-20 Liu; Da-Ming Method of using speech to control a game program, and game machine controller therefor
JP3829014B2 (ja) * 1998-06-03 2006-10-04 株式会社コナミデジタルエンタテインメント ビデオゲーム装置
US7251315B1 (en) * 1998-09-21 2007-07-31 Microsoft Corporation Speech processing for telephony API
TW495710B (en) 1998-10-15 2002-07-21 Primax Electronics Ltd Voice control module for control of game controller
JP2000181676A (ja) 1998-12-11 2000-06-30 Nintendo Co Ltd 画像処理装置
JP2000229172A (ja) 1999-02-10 2000-08-22 Konami Co Ltd ゲームシステムおよびゲーム用プログラムが記録されたコンピュータ読み取り可能な記憶媒体
US6529876B1 (en) * 1999-03-26 2003-03-04 Stephen H. Dart Electronic template medical records coding system
JP4258890B2 (ja) 1999-05-26 2009-04-30 株式会社デンソー 音声認識装置、その装置を用いたナビゲーションシステム
JP2001029649A (ja) 1999-07-21 2001-02-06 Taito Corp 音声認識により音声視覚表示を行うゲーム機
US6554707B1 (en) 1999-09-24 2003-04-29 Nokia Corporation Interactive voice, wireless game system using predictive command input
US6571208B1 (en) * 1999-11-29 2003-05-27 Matsushita Electric Industrial Co., Ltd. Context-dependent acoustic models for medium and large vocabulary speech recognition with eigenvoice training
KR20000072753A (ko) 2000-09-25 2000-12-05 오재덕 근거리 무선통신 수단을 내장한 지능형 장난감
JP2002222436A (ja) * 2000-11-22 2002-08-09 Sony Computer Entertainment Inc オブジェクト制御方法、コンピュータに実行させるためのオブジェクト制御処理プログラム、コンピュータに実行させるためのオブジェクト制御処理プログラムを記録したコンピュータ読み取り可能な記録媒体、オブジェクト制御処理プログラムを実行するプログラム実行装置
US6928433B2 (en) 2001-01-05 2005-08-09 Creative Technology Ltd Automatic hierarchical categorization of music by metadata
US7085722B2 (en) 2001-05-14 2006-08-01 Sony Computer Entertainment America Inc. System and method for menu-driven voice control of characters in a game environment
KR20010079324A (ko) * 2001-07-06 2001-08-22 신호철 유,무선 네트웍게임상의 음성인식 시스템

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09265379A (ja) * 1996-02-09 1997-10-07 Canon Inc 画像操作装置及び方法
WO1998002223A1 (fr) * 1996-07-11 1998-01-22 Sega Enterprises, Ltd. Systeme de reconnaissance vocale, procede de reconnaissance vocale et jeu les mettant en pratique

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008004486A1 (fr) * 2006-07-06 2008-01-10 Panasonic Corporation Dispositif d'entrée vocale
US8279171B2 (en) 2006-07-06 2012-10-02 Panasonic Corporation Voice input device
US9108108B2 (en) 2007-09-05 2015-08-18 Sony Computer Entertainment America Llc Real-time, contextual display of ranked, user-generated game play advice
US9126116B2 (en) 2007-09-05 2015-09-08 Sony Computer Entertainment America Llc Ranking of user-generated game play advice
US10486069B2 (en) 2007-09-05 2019-11-26 Sony Interactive Entertainment America Llc Ranking of user-generated game play advice
US9833707B2 (en) 2012-10-29 2017-12-05 Sony Interactive Entertainment Inc. Ambient light control and calibration via a console
US9950259B2 (en) 2012-10-29 2018-04-24 Sony Interactive Entertainment Inc. Ambient light control and calibration via a console
US10561942B2 (en) 2017-05-15 2020-02-18 Sony Interactive Entertainment America Llc Metronome for competitive gaming headset
US10128914B1 (en) 2017-09-06 2018-11-13 Sony Interactive Entertainment LLC Smart tags with multiple interactions
US10541731B2 (en) 2017-09-06 2020-01-21 Sony Interactive Entertainment LLC Smart tags with multiple interactions

Also Published As

Publication number Publication date
US20100029387A1 (en) 2010-02-04
US20060190270A1 (en) 2006-08-24
KR20020088058A (ko) 2002-11-25
JP2006099125A (ja) 2006-04-13
EP1262955B1 (en) 2010-03-17
DE60235674D1 (de) 2010-04-29
KR100464877B1 (ko) 2005-01-06
CN1385783A (zh) 2002-12-18
US7233904B2 (en) 2007-06-19
US7085722B2 (en) 2006-08-01
EP1262955A3 (en) 2004-03-03
EP1262955A2 (en) 2002-12-04
US7877262B2 (en) 2011-01-25
US20070244704A1 (en) 2007-10-18
US7613616B2 (en) 2009-11-03
US20020169617A1 (en) 2002-11-14

Similar Documents

Publication Publication Date Title
US7233904B2 (en) Menu-driven voice control of characters in a game environment
US10926173B2 (en) Custom voice control of video game character
JP2000181676A (ja) 画像処理装置
JPH04266781A (ja) ビデオゲーム方法および装置
US20100092933A1 (en) System and method for an interactive phoneme video game
JP7137294B2 (ja) 情報処理プログラム、情報処理装置、情報処理システム、及び情報処理方法
WO2003070341A1 (fr) Programme de jeu avec clavier et dispositif de jeu avec clavier
JPH1176609A (ja) ゲームキャラクタとの相性診断方法、ビデオゲーム装置及び記録媒体
JP2003024625A (ja) ビデオゲームのプログラムを記録したコンピュータ読み取り可能な記録媒体及びビデオゲームのプログラム及びビデオゲーム処理方法及びビデオゲーム処理装置
JPH06315572A (ja) 音声ゲーム機
JP2002085834A (ja) ゲーム装置
JP2005027885A (ja) 単音音声コントロールによる制御装置
JP4476255B2 (ja) ゲームプログラム、ゲーム装置及びゲーム制御方法
JP2009028217A (ja) ゲームプログラム、ゲーム装置及びゲーム制御方法
JP3554866B2 (ja) ゲームプログラム
KR102450665B1 (ko) 조립 모듈을 이용한 퀘스트 해결형 전자책 서비스 제공 시스템 및 방법
JP2002159740A (ja) 音声指令によるビデオゲーム装置の制御方法
US20240091648A1 (en) Systems and methods for controlling dialogue complexity in video games
US20230017974A1 (en) Voice user interface processing method and recording medium
EP4140549A1 (en) Ai onboarding assistant
KR20240110193A (ko) 가상현실 환경에서 브라켓 위치 설정 및 조작이 가능한 컴퓨터 프로그램
JP2020072804A5 (ja)
JP2009034375A (ja) ゲームプログラム、ゲーム装置及びゲーム制御方法
JP2022121986A (ja) ゲームシステムおよびゲーム制御方法
KR20200067815A (ko) 게임 캐릭터 제어 시스템, 서버 및 게임 캐릭터 제어 방법

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20031224

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20040323

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20040525

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20040824

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20040827

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20041124

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20050621

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20051020

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20051205

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20060120

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20060804

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20080207

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20080213

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080310