JP7397224B2 - ゲームプレイのためにユーザを指導するシステム及び方法 - Google Patents

Description

本開示は、ゲームプレイのためにユーザを指導するシステム及び方法に関する。

ビデオゲームは、プレイヤが克服する方法を見つけ出す挑戦を提示するように設計されているのが一般的である。一部のゲームでは、これはマルチプレイヤ設定で他のプレイヤを打ち負かすという挑戦であり、他のゲームでは、これは困難なコンピュータ制御のエンティティを倒すという挑戦であり得る。通常、プレイヤはこれらの挑戦を何度も試み、ゲームのいくつかの複雑さを徐々に学んでスキルを向上させる。さらに、最も困難な状況の一部は頻繁に発生しない可能性があり、プレイヤが以前の遭遇で学んだ教訓を思い出すのが難しくなる。特定のゲームでスキルを向上させるのに時間がかかることに不満を感じるプレイヤもいる。

本発明の実施形態が生み出されたのは、この背景においてである。

本開示の実施形態は、ゲームプレイのためにユーザを指導するシステム及び方法を提供する。

ある実施形態では、様々なゲームジャンルのプレイヤが新しいゲームを学ぶ際のフラストレーションを軽減するためのコーチングシステムが提供される。コーチングはプレイヤのスキルの向上を加速させる。

一実施形態では、仮想ユーザの死亡及び仮想ユーザが逃した攻撃などの一連のゲームプレイイベントが経時的に記録され、収集されてグループ化されたシーケンスになる。本明細書に記載のシステム及び方法は、特定の状況での以前の失敗のビデオ及びコントローラ入力キャプチャを見直して、どの代替戦略を使用する必要があったかを調べて学習するためのユーザインタフェース（ＵＩ）を提供する。システム及び方法は、ゲームのプレイ中に発生する失敗に焦点を当てている。

ある実施形態では、本明細書に記載のシステム及び方法は、ゲームフックまたはテレメトリを使用して、ゲームプレイイベントなど、コーチングを適用できるゲーム中のポイントを識別する。例えば、コーチングは、仮想ユーザの死亡後または仮想ユーザへの攻撃後に適用することができる。ゲームプレイイベントの前の最後のＸ時間単位のゲームの記録（Ｘは正の実数）がメモリデバイスに保存される。記録は、仮想ユーザの死亡や仮想ユーザへの攻撃などの問題を記述するタグと共に保存される。システム及び方法は、ユーザから受信した入力選択などのオーバーレイと共に記録を再生する専用のＵＩを生成する。また、タイムラインスクラバーが専用のＵＩに沿って提供され、ユーザが最後のＸ時間単位で前後にスクロールできるようにする。また、専用のＵＩは、ユーザのスキルレベルを上げるためにユーザに提供するメカニクスまたは状況に関するヒントを含む。

一実施形態では、セルフコーチングインタフェースを処理する方法が記載される。方法は、ユーザによるゲームプレイ中にゲームプレイイベントを識別することを含む。ゲームプレイイベントは、スキル閾値を下回っているとタグ付けされる。方法は、ゲームプレイイベントの時間窓の記録を生成することと、ゲームプレイイベントの記録のためにゲームテレメトリを処理することとをさらに含む。ゲームテレメトリは、時間窓のゲームプレイイベントの前のインタラクティブアクションの進行を識別するために使用される。方法は、セルフコーチングインタフェースでオーバーレイコンテンツを生成することを含む。オーバーレイコンテンツは、セルフコーチングインタフェースを介して表示されるとき、記録の１つまたは複数の画像フレームに適用される。オーバーレイコンテンツは、記録の再生中に１つまたは複数の画像フレームに表示される。オーバーレイコンテンツは、ユーザのスキルをスキル閾値を超えるように向上させるためのヒントを提供する。

ある実施形態では、ゲームのプレイ中にプレイヤのセルフコーチングを容易にする方法が記載される。方法は、一連のゲームプレイイベントをゲームイベントデータとして記録することを含む。一連のゲームプレイイベントは、ユーザアイデンティティ（ＩＤ）に関連付けられる。方法はさらに、複数の所定のゲームプレイイベントに基づいて一連のゲームプレイイベントを分類することと、複数の所定のゲームプレイイベントの１つに関するコーチングセッションを開始するために１つまたは複数の入力を受信することとを含む。１つまたは複数の入力に応答して、方法は、ゲームイベントデータの一部を取得することを含む。ゲームイベントデータの一部は、一連のゲームプレイイベントのうちの１つの発生の所定の期間内に記録される。一連のゲームプレイイベントの１つは、複数の所定のイベントの１つとして分類される。方法は、ゲームイベントデータの一部をタイムラインバーと共に表示して、プレイヤのセルフコーチングを容易にすることを含む。

ある実施形態では、一連のゲームプレイイベントを有するゲームがユーザアイデンティティを認証した後にアクセスされると、一連のゲームプレイイベントはユーザアイデンティティに関連付けられる。

一実施形態では、方法は、タイムラインバーに沿って時間を示す入力を受信することと、時間を示す入力に従ってゲームイベントデータの一部を変換することも含む。

ある実施形態では、方法は、追加の一連のゲームプレイイベントを追加のゲームイベントデータとして記録することも含む。追加の一連のゲームプレイイベントは、ユーザＩＤに関連付けられる。方法は、複数の所定のゲームプレイイベントに基づいて追加の一連のゲームプレイイベントを分類することを含む。１つまたは複数の入力に応答して、方法は、追加のゲームイベントデータの一部を取得することを含む。追加のゲームイベントデータの一部は、追加の一連のゲームプレイイベントのうちの１つの発生の所定の期間内に記録される。追加の一連のゲームプレイイベントの１つは、複数の所定のイベントの１つとして分類される。方法は、追加のゲームイベントデータの一部をタイムラインバーと共に表示して、プレイヤのセルフコーチングを容易にすることを含む。

一実施形態では、方法は、追加の一連のゲームプレイイベントを追加のゲームイベントデータとして記録することを含む。追加の一連のゲームプレイイベントは、他のユーザＩＤに関連付けられる。方法は、複数の所定のゲームプレイイベントに基づいて追加の一連のゲームプレイイベントを分類することを含む。１つまたは複数の入力に応答して、方法は、追加のゲームイベントデータの一部を取得することを含む。追加のゲームイベントデータの一部は、追加の一連のゲームプレイイベントのうちの１つの発生の所定の期間内に記録される。追加の一連のゲームプレイイベントの１つは、複数の所定のイベントの１つとして分類される。方法は、追加のゲームイベントデータの一部をタイムラインバーと共に表示して、プレイヤのセルフコーチングを容易にすることを含む。

本明細書に記載のシステム及び方法のいくつかの利点には、ユーザがビデオゲームを理解し、ゲームをプレイするスキルを迅速に習得できるようにするユーザインタフェースを提供することが含まれる。また、コーチングセッションがビデオゲームに関連付けられ、ユーザがセルフコーチングできるようにアクセスされるため、ビデオゲームが改善される。さらに、不要なネットワークトラフィックが削減される。ユーザがコーチングセッション中に学習したレッスンをビデオゲームのプレイに適用すると、ユーザは、コーチングセッションを適用しない場合に比べて少ないエラーでビデオゲームをプレイすることができる。これらのエラーは、ユーザが使用するクライアントデバイスと、ビデオゲームが実行されるサーバシステムとの間のネットワークトラフィックを不必要に増加させる。

本開示の他の態様は、本開示に記載の実施形態の原理を例を挙げて示す下記の詳細な説明を、添付図面と併せて読むと明らかになろう。

本開示の様々な実施形態は、添付図面と併せて、以下の記載を参照することによって、最も良く理解される。

ゲームのプレイを示すシステムの実施形態の図である。

ゲームの仮想シーンを示すシステムの実施形態の図である。

ゲームの別の仮想シーンを示す図１のシステムの実施形態の図である。

仮想ユーザが死亡するさらに別の仮想シーンを示す図１のシステムの実施形態の図である。

ユーザＩＤ１のゲームレコーダによるゲームイベントデータの記録を示すシステムの実施形態の図である。

ユーザＩＤ２～Ｎまでのゲームイベントデータの記録を示すゲームレコーダの実施形態である。

ユーザをトレーニングするためのコーチングセッションを生成するコーチングプログラムの使用を示すシステムの実施形態の図である。

図１の仮想シーンの１つまたは複数の仮想オブジェクト上の１つまたは複数の仮想オブジェクトのオーバーレイを示すためのコーチングシーンの実施形態の図である。

図１のシステムのディスプレイデバイス上にレンダリングされ、表示されるコーチングシーンの実施形態の図である。

図１のディスプレイデバイス上での図７Ａのコーチングシーンと別のコーチングシーンの同時表示を示す実施形態の図である。

ユーザＩＤ１に関連付けられた図７のコーチングシーンと、ユーザＩＤ Ｎに関連付けられた別のコーチングシーンとの同時レンダリング及び表示を示す、図１のディスプレイデバイスの実施形態の図である。

ディスプレイ画面上にコーチングシーンをレンダリングする代わりに、またはレンダリングすることに加えて、プロセッサが、ヘッドフォンを介して音声としてユーザに出力されるオーディオデータを生成することを示すシステムの実施形態の図である。

図６のコーチングセッションを生成するための推論トレーニングエンジンの使用を示すシステムの実施形態の図である。

モデルをトレーニングする方法の実施形態を示すフローチャートである。

プロセッサシステムと複数のデバイスとの間のルータ及びモデムとコンピュータネットワークとを介した通信を示すシステムの実施形態の図である。

プロセッサシステムをゲームコンソール内に実装できることを示すシステムの実施形態の図である。

コンピュータネットワークとスマートフォンとの間のルータ及びモデムを使用しない、コンピュータネットワークを介したスマートフォンとプロセッサシステムとの間の通信を示すシステムの実施形態の図である。

ヘッドフォンの実施形態の図である。

ディスプレイ画面上にコーチングシーンまたは仮想シーンの画像を表示するためのディスプレイデバイスの実施形態の図である。

本開示の様々な実施態様による、クラウドビデオゲームをクライアントデバイスにストリーミングするために実行される様々な動作を概念的に示すフロー図である。

クライアントデバイスのディスプレイデバイスとインタフェースするために互換性があり、コンピュータネットワークを介してゲームホストシステムと通信することができるゲームコンソールの実施形態のブロック図である。

ヘッドマウントディスプレイ（ＨＭＤ）のコンポーネントを示すためのＨＭＤの実施形態の図である。

情報サービスプロバイダ（ＩＮＳＰ）アーキテクチャの実施形態を示す。

ユーザにゲームプレイを指導するためのシステム及び方法を記載する。本開示の様々な実施形態は、これらの特定の詳細の一部またはすべてが無くても実践されることに留意されたい。他の例では、本開示の様々な実施形態を不必要に分かりにくくしないように、周知のプロセス動作については詳述していない。

図１は、ゲームのプレイを示すシステム１００の実施形態の図である。システム１００は、ゲームの仮想シーン１１０を表示するディスプレイデバイス１を含む。ディスプレイデバイス１は、カメラ１０１の前にある実世界環境の１つまたは複数の画像をキャプチャするカメラ１０１を有する。例えば、カメラ１０１は、カメラ１０１の視野内の１つまたは複数の画像をキャプチャする。一例として、各仮想シーンは画像フレームである。一実施形態では、画像及び画像フレームという用語は、本明細書では交換可能に使用される。本明細書で使用されるディスプレイデバイスの例には、スマートテレビ、テレビ、プラズマディスプレイデバイス、液晶ディスプレイ（ＬＣＤ）デバイス、及び発光ダイオード（ＬＥＤ）ディスプレイデバイスが含まれる。ユーザ１は、ゲームコントローラ１を使用して、ビデオゲームなどのゲームをプレイしている。ビデオゲームの例には、シングルプレイヤゲームまたはマルチプレイヤゲームが含まれる。ゲームコントローラ１の例には、ＰｌａｙＳｔａｔｉｏｎ（商標）コントローラ、Ｘｂｏｘ（商標）コントローラ、Ｎｉｎｔｅｎｄｏ（商標）コントローラが含まれる。一例として、ゲームコントローラは、複数のジョイスティックと複数のボタンとを含む。

ディスプレイデバイス１は、ゲームの複数の画像を表示する。ユーザ１は、サーバシステムによってユーザ１に割り当てられたユーザアカウント１にログインして、サーバシステムからゲームにアクセスする。例えば、ユーザに割り当てられたユーザアイデンティティ（ＩＤ）と、サーバシステムによってユーザに割り当てられたパスワードが、サーバシステムによって認証されて、ユーザがゲームにアクセスできると判断される。

ゲームにアクセスすると、ユーザ１は、ゲームコントローラ１を使用してゲームをプレイする。ゲームのプレイ中に、仮想シーン１１０が生成され、ユーザ１に割り当てられたユーザＩＤ１が仮想シーン１１０に表示される。

ゲームにおいて、ユーザ１は、ゲームコントローラ１を使用して、仮想ユーザ１０２が登ることができる仮想傾斜路１１２を構築して、別の仮想ユーザ１０４よりも高さの利点を有する。仮想ユーザ１０２、仮想傾斜路１１２、及び仮想ユーザ１０４は、仮想シーン１１０内にある。また、ゲームにおいて、仮想ユーザ１０２の動きは、ゲームコントローラ１を用いてユーザ１によって制御される。ユーザ１は、ゲームコントローラ１を使用して、仮想ユーザ１０２が手に持っている仮想銃１０８を制御する。例えば、ユーザ１は、ゲームコントローラ１を使用して、仮想ユーザ１０４を撃つように仮想銃１０８を制御する。仮想銃１０８は、仮想シーン１１０の一部である。仮想ユーザ１０４は、マルチプレイヤゲームにおいて、ユーザ２またはユーザ３などの別のユーザによって制御される。

ゲームのプレイ中、仮想シーン１１０では、仮想ユーザ１０２が仮想ユーザ１０４を射撃し、仮想ユーザ１０４が仮想ユーザ１０２を射撃している間に、仮想弾丸１０６が仮想ユーザ１０２に向けられる。仮想弾丸１０６は、仮想ユーザ１０２の側面から仮想ユーザ１０２の方に向けられている。仮想シーン１１０は、仮想ユーザ１０２で仮想弾丸１０６を発射した仮想ユーザを含まない。仮想シーン１１０は、仮想木１０５及び仮想壁１０７を含む。仮想木１０５、仮想壁１０７、仮想傾斜路１１２、仮想ユーザ１０２、仮想銃１０８、仮想弾丸１０８、仮想ユーザ１０４のそれぞれは、仮想オブジェクトの例であることに留意されたい。

一実施形態では、サーバシステムは、ユーザＩＤ及びパスワードを認証して、ユーザがゲームプレイのために複数のゲームにアクセスできるようにする。

ある実施形態では、ディスプレイデバイス１の代わりに、ヘッドマウントディスプレイ（ＨＭＤ）が使用される。ＨＭＤはユーザ１によって頭部に装着される。

図２は、ゲームの仮想シーン２０２を示すシステム１００の実施形態の図である。仮想シーン２０２は、ディスプレイデバイス１に表示され、ゲームのプレイ中に仮想シーン１１０の次に来る。例えば、仮想シーン１１０及び２０２の両方が同じゲームセッション中に表示される。ユーザ１は、仮想弾丸１０６（図１）による命中から仮想ユーザ１０２を救うことができない。仮想弾丸１０８が仮想ユーザ１０２に命中した後、仮想ユーザ１０２はゲーム内で死亡し、仮想シーン２０２の仮想ドローン２０４によってビームを当てられる。また、仮想ユーザ１０２がゲーム内で死亡する前に、ユーザ１は、ゲームコントローラ１を制御して、仮想ユーザ１０４を殺すように仮想ユーザ１０２及び仮想銃１０８（図１）をさらに制御することにかろうじて成功する。仮想ユーザ１０４が殺されると、仮想ユーザ１０４は、仮想シーン２０２内の別の仮想ドローン２０６によってビームを当てられる。また、仮想シーン２０２には、ユーザＩＤ１が表示されている。

図３は、ゲームの別の仮想シーン３０２を示すシステム１００の実施形態の図である。仮想シーン３０２は、仮想シーン２０２（図２）が表示された後、または仮想シーン１１０（図１）が表示される前に表示される。仮想シーン３０２において、仮想ユーザ１０２は、ゲームコントローラ１を介してユーザ１によって制御される。仮想シーン３０２は、ディスプレイデバイス１上に表示される。仮想ユーザ１０２は、仮想銃１０８を使用して仮想ユーザ１０４を撃つように制御される。また、仮想シーン３０２は、仮想ユーザ１０２によって構築された仮想壁３０４を含む。例えば、ユーザ１は、ゲームコントローラ１を使用して、仮想ユーザ１０４によって発射される仮想弾丸から仮想ユーザ１０２を保護する仮想壁３０４を構築するように仮想ユーザ１０２を制御する。

仮想シーン３０２では、仮想弾丸３０６が背後から仮想ユーザ１０２に命中する。ユーザ１は、どの仮想ユーザが仮想ユーザ１０２に向けて仮想弾丸３０６を発射したかを、仮想シーン３０２から見ることはできない。仮想シーン３０２は、仮想ユーザ１０２に仮想弾丸３０６を撃った仮想ユーザを含まない。

仮想シーン３０２は、図１及び２の仮想シーン１１０及び２０２が表示されるゲームセッションと同じまたは異なるゲームセッション中にディスプレイデバイス１に表示されることに留意されたい。例えば、仮想ユーザ１０２が仮想シーン２０２で死亡した後、ゲームのゲームプログラムがサーバシステムのプロセッサによって実行されて、ユーザ１が、仮想ユーザ１０２がリスポーンする、または回復する、または生き返るのを待つ待機期間を提供する。本明細書で使用されるプロセッサの例には、マイクロプロセッサ、マイクロコントローラ、中央処理装置（ＣＰＵ）、特定用途向け集積回路（ＡＳＩＣ）、またはプログラマブルロジックデバイス（ＰＬＤ）が含まれる。待機時間は、ゲームが仮想シーン３０２を表示する前に生じる。この例では、ユーザ１は、仮想シーン２０２と３０２の表示の間にユーザアカウント１からログアウトしないので、仮想シーン１１０、２０２、及び３０２は同じゲームセッション中に表示される。別の例として、仮想ユーザ１０２が仮想シーン２０２で死亡した後、ユーザ１はユーザアカウント１からログアウトする。ユーザ１は後でユーザアカウント１にログインする。ユーザ１がユーザアカウント１にログインした後、仮想シーン３０２が表示される。この例では、仮想シーン３０２は、仮想シーン１１０及び２０２が表示されるゲームセッションとは異なるゲームセッション中に表示される。

一実施形態では、ゲームセッションは、ユーザ１によって制御される仮想ユーザ１０２が死亡するかゲームセッションに勝利した時点で終了する。仮想ユーザ１０２は、仮想ユーザ１０２がゲームセッションで他のすべての仮想ユーザを殺すか、またはゲームセッション中に事前に記憶された期間を超えて生き残ったときに、ゲームセッションに勝つ。仮想ユーザ１０２が死亡すると、仮想ユーザ１０２はリスポーンされ、別のゲームセッションを開始することができ、仮想ユーザ１０２が死亡するか別のゲームセッションに勝つと、別のゲームセッションは終了する。

図４は、仮想ユーザ１０２が死亡するさらに別の仮想シーン４０２を示すシステム１００の実施形態の図である。仮想シーン４０２は、仮想シーン３０２（図３）が表示された後に表示される。例えば、仮想シーン３０２及び４０２の両方が同じゲームセッション中に表示される。仮想シーン４０２では、仮想ユーザ１０２及び１０４が殺される。仮想ユーザ１０２は、仮想弾丸３０６（図３）によって殺される。仮想シーン４０２は、仮想ユーザ１０２及び１０４にビームを当てるために使用される仮想ドローン２０４及び２０６を含む。

図５Ａは、ゲームレコーダ５０２によるゲームイベントデータ５１０の記録を示すシステム５００の実施形態の図である。システム５００は、プロセッサシステム５０５を含む。プロセッサシステム５０５の例は、データセンタまたは複数のデータセンタの１つまたは複数のサーバを含むサーバシステムである。プロセッサシステム５０５の別の例には、サーバシステムの１つまたは複数のプロセッサが含まれる。プロセッサシステム５０５のさらに別の例には、１つまたは複数の仮想マシンが含まれる。ゲームレコーダ５０２の例は、ゲームイベントデータ５１０のビデオデータとオーディオデータの両方を記録するデジタルビデオレコーダである。プロセッサシステム５０５は、ゲームレコーダ５０２、ゲームプロセッサ５０６、及びコーチングプロセッサ５０８を含む。ゲームプロセッサ５０６は、ゲームレコーダ５０２及びコーチングプロセッサ５０８に結合される。コーチングプロセッサ５０８は、ゲームレコーダ５０２に結合される。

ゲームプロセッサ５０６は、ゲームプログラム５２８を実行して、ユーザ１及び他のユーザによるゲームのプレイを容易にする。一例として、ゲームプログラム５２８は、ゲームエンジン及びレンダリングエンジンを含む。ゲームエンジンは、仮想シーンの様々な仮想オブジェクトの位置及び向きを決定するために実行される。仮想シーンは、仮想オブジェクトの一例である背景を含む。レンダリングエンジンは、仮想シーンの仮想オブジェクトの色、強度、シェーディング、照明などのグラフィックスパラメータを決定するために実行される。ゲームプログラム５２８は、プロセッサシステム５０２の１つまたは複数のメモリデバイスに記憶され、１つまたは複数のメモリデバイスはゲームプロセッサ５０６に結合される。ゲームプログラム５２８が実行されるとき、ゲームイベントデータ５１０が生成され、仮想シーン１１０、２２０、３０２、及び４０２（図１～４）がディスプレイデバイス１に表示される。

生成されたゲームイベントデータ５１０は、ユーザＩＤ１用である。例えば、ゲームイベントデータ５１０の仮想シーン１１０（図１）、２０２（図２）、３０２（図３）、及び４０２（図４）は、ゲームプログラム５２８の実行時に生成される。ゲームプログラム５２８は、ユーザ１のユーザＩＤ１と、パスワードもしくは電話番号またはそれらの組み合わせなどの他の情報とがプロセッサシステム５０５によって認証されたとき、実行される。

一例として、ゲームイベントデータ５１０は、仮想シーン２０２（図２）に示されている仮想ユーザ１０２の死亡１に至る複数のゲームイベント１～ｍを含み、ここで、ｍは正の整数である。例示すると、ゲームイベントデータ５１０は、仮想シーン１１０（図１）及び２０２のデータを含む。さらに例示すると、ゲームイベント５１２は仮想シーン１１０のデータであり、ゲームイベント５１４は仮想シーン２０２のデータである。別の例として、ゲームイベントデータ５１０は、仮想シーン４０２（図４）に示されている仮想ユーザ１０２の死亡ｘに至る複数のゲームイベント１～ｎを含み、ここで、ｎ及びｘは正の整数である。例示すると、ゲームイベントデータ５１０は、仮想シーン３０２（図３）及び４０２のデータを含む。さらに例示すると、ゲームイベント５１６は仮想シーン３０２のデータであり、ゲームイベント５１８は仮想シーン４０２のデータである。別の例として、ゲームイベントデータ５１０は、仮想ユーザ１０２の健康レベルが所定の閾値未満に低下するまでの複数のゲームイベント１からｏまでを含み、ここで、ｏは正の整数である。例示すると、ゲームイベント５２０は、仮想ユーザ１０２が完全な健康を有する仮想シーンのデータであり、ゲームイベント５２２は、仮想ユーザ１０２の健康が所定の閾値未満に低下した仮想シーンのデータである。さらに別の例として、ゲームイベントデータ５１０は、仮想ユーザの健康レベルが所定の閾値未満に低下するまでの複数のゲームイベント１～ｐを含み、ここで、ｐは正の整数である。例示すると、ゲームイベント５２４は、仮想ユーザ１０２が完全な健康を有する仮想シーンのデータであり、ゲームイベント５２６は、仮想ユーザ１０２の健康が所定の閾値未満に低下した仮想シーンのデータである。ゲームイベント５２０からゲームイベント５２２までの一連のゲームイベントは、ゲームイベント５２４からゲームイベント５２６までの一連のゲームイベントの発生と同じまたは異なるゲームセッション中に発生することに留意されたい。

ゲームプログラム５２８の実行中に、ゲームレコーダ５０２は、ゲームイベントデータ５１０を記録する。例えば、ゲームレコーダ５０２のプロセッサは、ゲームイベントデータ５１０をゲームレコーダ５０２の１つまたは複数のメモリデバイスに記憶する、または書き込む。メモリデバイスの例には、読み取り専用メモリ、ランダムアクセスメモリ、及びそれらの組み合わせが含まれる。例示すると、メモリデバイスは、フラッシュメモリデバイス、または独立ディスクの冗長アレイ（ＲＡＩＤ）である。

ゲームプログラム５２８の実行中または実行後に、記録されたゲームイベントデータ５１０が、ゲームレコーダ５０２からコーチングプロセッサ５０８に提供される。例えば、コーチングプロセッサ５０８は、ゲームレコーダ５０２からゲームイベントデータ５１０を取得するためにゲームレコーダ５０２に定期的に要求する。コーチングプロセッサ５０８からの要求の受信に応答して、ゲームレコーダ５０２は、ゲームレコーダ５０２の１つまたは複数のメモリデバイスからゲームイベントデータ５１０にアクセスし、例えば読み取り、ゲームイベントデータ５１０をコーチングプロセッサ５０８に送信する。別の例として、ゲームレコーダ５０２は、定期的にゲームイベントデータをコーチングプロセッサ５０８に送信する。例示すると、コーチングプロセッサ５０８から要求を受信することなく、ゲームレコーダ５０２は、ゲームレコーダ５０２の１つまたは複数のメモリデバイスからゲームイベントデータ５１０にアクセスし、ゲームイベントデータ５１０をコーチングプロセッサ５０８に送信する。

ゲームプログラム５２８の実行中または実行後に、コーチングプログラム５３０がコーチングプロセッサ５０８によって実行される。例えば、コーチングプログラム５３０は、仮想シーン２０２（図２）の表示後、仮想シーン３０２（図３）の表示前、または仮想シーン４０２（図４）の表示後に実行される。

コーチングプログラム５３０は、コーチングプログラム５３０がプロセッサシステム５０５によって実行されるときに、コーチングプログラム５３０によって実行されるものとして本明細書に記載される機能を実行することに留意されたい。ある実施形態では、ゲームレコーダ５０２の代わりに、複数のゲームレコーダが使用されることにさらに留意されたい。同様に、ゲームプロセッサ５０６の一実施形態では、複数のゲームプロセッサが使用される。一実施形態では、コーチングプロセッサ５０８の代わりに、複数のコーチングプロセッサが使用される。

一実施形態では、ゲームレコーダ５０２、ゲームプロセッサ５０６、及びコーチングプロセッサ５０８は、バスを介して互いに結合される。

ある実施形態では、コーチングプログラム５３０は、ゲームプログラム５２８の一部であり、ゲームプログラム５２８に統合される。例えば、コーチングプログラム５２０のコンピュータプログラムコードには、ゲームプログラム５２８のコンピュータプログラムコードが散在している。

一実施形態では、ゲームイベントは、本明細書ではゲームプレイイベントと呼ばれることがある。

ある実施形態では、仮想ユーザ１０２の死亡が発生するたびに、コーチングプログラム５３０は、死亡が発生したことをゲームイベントデータ５１０から識別する。例えば、コーチングプログラム５３０は、仮想シーン２０２が仮想ユーザ２０４の上に仮想ドローン２０４を含むと判断して、仮想ユーザ１０２が死亡したと判断する。コーチングプログラム５２０は、仮想ユーザ１０２が死亡する仮想シーン２０２に、死亡または逝去などのキーワードを割り当てるなど、タグを付け、プロセッサシステム５０５の１つまたは複数のメモリデバイス内にキーワードをメタデータとして記憶する。仮想ユーザ１０２が死亡するたびに、コーチングプログラム５３０は、ユーザ１のスキルレベルが、プロセッサシステム５０５の１つまたは複数のメモリデバイスに記憶されている予め設定された閾値を下回っていると判断する。例えば、仮想ユーザ１０２がゲーム内で死亡するたびに、ゲームプログラム５２８は、ユーザＩＤ１に対応するスキルレベルを予め設定された閾値未満に低下させる。

図５Ｂは、ユーザＩＤ２～Ｎまでのゲームイベントデータ５０４の記録を示すゲームレコーダ５０２の実施形態であり、ここで、Ｎは正の整数である。ユーザＩＤ２～Ｎは、ゲームをプレイしている他のユーザ２～Ｎに割り当てられる。例えば、ユーザＩＤ２はユーザ２に割り当てられ、ユーザＩＤ NはユーザＮに割り当てられる。

ゲームイベントデータ５０４は、ユーザＩＤ Ｘについての一連のゲームイベント１～ｑと、ユーザＩＤ Ｎについて記録された別の一連のゲームイベント１～ｒとを含む。例えば、ゲームイベント５５０は、ゲームプログラム５２８（図５Ａ）の実行時にアクセスされる仮想シーンのデータを含む。ゲームイベントｑは、仮想ユーザ１０２の死亡ｑを含む。ゲームプログラム５２８は、ユーザＩＤ Ｎがプロセッサシステム５０５（図５Ａ）によって認証された後にアクセスされる。別の例として、ゲームイベント５５２は、ゲームプログラム５２８の実行時にアクセスされる仮想シーンのデータを含む。ゲームイベント５５２は、ゲームコントローラＮを介してユーザＮによって制御される仮想ユーザの死亡１を含む。別の例として、ゲームイベント５５４は、ゲームプログラム５２８の実行時にアクセスされる仮想シーンのデータを含み、ゲームイベント５５６は、ゲームプログラム５２８の実行時にアクセスされる仮想シーンのデータを含む。ゲームイベント５５６は、ゲームコントローラＮを介してユーザＮによって制御される仮想ユーザの死亡ｒを含み、ここで、ｒは正の整数である。ゲームプログラム５２８の実行中または実行後に、記録されるゲームイベントデータ５０４は、ゲームイベントデータ５１０（図５Ａ）がゲームレコーダ５０２からコーチングプロセッサ５０８（図５Ａ）に提供されるのと同じ方法で、ゲームレコーダ５０２からコーチングプロセッサ５０８に提供される。

図６は、ユーザ１をトレーニングするためのコーチングセッション６０８を生成するためのコーチングプログラム５３０の使用を示すシステム６００の実施形態の図である。システム６００は、ユーザＩＤ１のゲームイベントデータ５１０を含む。また、システム６００は、コーチングプログラム５３０、ユーザＩＤ２～Ｎのゲームイベントデータ５０４、クライアントデバイス６０２、選択されたゲームイベントデータ６０４、及びメタデータ６０６を含む。本明細書で使用されるクライアントデバイスの例には、デスクトップコンピュータ、ラップトップコンピュータ、タブレット、スマートフォン、ハンドヘルドリモートコントローラとスマートテレビの組み合わせ、ハンドヘルドコントローラ（ＨＨＣ）とゲームコンソールの組み合わせ、ならびにハンドヘルドコントローラとヘッドマウントディスプレイ（ＨＭＤ）の組み合わせが含まれる。ゲームコントローラはＨＨＣの一例である。ディスプレイデバイス１は、クライアントデバイス６０２のディスプレイデバイスの一例である。

ユーザＩＤ１のゲームイベントデータ５１０は、ビデオデータ６１２及びオーディオデータ６１４を含む。一例として、ゲームイベントデータのビデオデータは、仮想シーンに表示される複数の仮想オブジェクトの位置、向き、及びグラフィックスパラメータを含む。また、一例として、ゲームイベントデータのオーディオデータは、仮想シーン内の１つまたは複数の仮想オブジェクトによって発せられる音素、語彙、歌詞、またはフレーズを含む。同様に、ユーザＩＤ２～Ｎのゲームイベントデータ５０４は、ユーザＩＤ２～Ｎのそれぞれのビデオデータ及びオーディオデータを含む。

メタデータ６０６の例には、ゲーム内で仮想オブジェクトを生成するための１つまたは複数のゲーム状態などのゲームテレメトリが含まれる。例えば、メタデータ６０６は、あるゲーム状態を含み、そのゲーム状態に基づいて、仮想シーンで表示も出力も発話もされない仮想オブジェクトがコーチングシーンに表示される。別の例として、メタデータ６０６は、ゲームプログラム５２８の実行中に表示された仮想シーン１１０または２０２または３０２または４０２（図１～４）などの仮想シーン内の１つまたは複数の仮想オブジェクトの位置及び向きに関連付けられた情報である。例示すると、メタデータ６０６は、仮想シーン１１０に表示された仮想弾丸１０６の位置の周囲に仮想矩形フレームが表示される位置である。仮想矩形フレームは、仮想シーン１１０には表示されない。別の例として、メタデータ６０６は、仮想シーン１１０にも２０２にも３０２にも４０２（図１～４）にも表示されない仮想ユーザの位置及び向きである。表示されていない仮想ユーザが、仮想弾丸１０６（図１）または３０６（図３）を発射する。コーチングプログラム５３０は、仮想ユーザ１０２に向けて仮想弾丸１０６を発射している仮想ユーザを示すために、仮想弾丸１０６の位置の隣の位置、例えばその右側の位置に、仮想ユーザ１０２を撃った仮想ユーザを生成する。さらに別の例として、メタデータ６０６は、仮想シーン１１０にも２０２にも３０２にも４０２にも表示されていない、仮想弾丸を発射した仮想ユーザのユーザ名である。別の例として、メタデータ６０６を使用せずに、仮想シーン１１０にも２０２にも３０２にも４０２にも表示されない仮想ユーザの視点からのカメラビューを生成する。例えば、メタデータ６０６を使用せずに、仮想シーン１１０にも２０２にも３０２にも４０２にも表示されていない仮想ユーザの視点から、仮想シーン１１０または２０２または３０２または４０２のアクションリプレイを生成する。

コーチングセッション６０８の例にはコーチングシーンの表示が含まれ、コーチングシーンでは、ユーザ１がゲームをプレイすることはできないが、ユーザ１による以前のゲームプレイ、またはユーザ２～Ｎによる以前のゲームプレイ、またはそれらの組み合わせに基づいて学習することができる。例えば、コーチングプログラム５３０は、プロセッサシステム５０５（図５Ａ）によって実行されて、ユーザＩＤ１のためのコーチングセッション６０８を生成する。コーチングシーンの例は、コーチングプログラム５３０の実行時に生成及びレンダリングされる仮想シーンである。コーチングセッション６０８が生成されるとき、１つまたは複数のコーチングシーンがクライアントデバイス６０２に表示される。コーチングシーンは、ユーザＩＤに対して表示されたとき、そのユーザＩＤに対してゲームのプレイを許可しない。例えば、ユーザＩＤ１に対するコーチングシーンの表示中、ゲームプログラム５２８（図５Ａ）は、ユーザＩＤ１のプロセッサシステム５０５によって実行されない。例示すると、ユーザＩＤ１の場合、プロセッサシステム５０５は、ユーザＩＤ１に対する１つまたは複数のコーチングシーンの表示中にゲームプログラム５２８を実行することによって生成される仮想シーンをレンダリングしない。代わりに、プロセッサシステム５０５は、ユーザＩＤ１のための１つまたは複数のコーチングシーンをレンダリングするためのコーチングプログラム５３０を実行する。

動作６１０において、コーチングプログラム５３０は、クライアントデバイス６０２から入力信号６１６を受信して、コーチングセッション６０８を開始する。例えば、ゲームのプレイ中に、ユーザ１はクライアントデバイス１のボタンを選択して、コーチングセッション６０８を開始するための入力信号６１６を生成する。例示すると、仮想シーン２０２または４０２（図２または４）で仮想ユーザ１０２が死亡した後、ユーザ１はゲームコントローラ１（図１）のボタンを選択する。選択を受信すると、ゲームコントローラ１は、コーチングセッション６０８を開始するための入力信号６１６を生成する。入力信号６１６は、クライアントデバイス６０２からコーチングプログラム５３０に送信される。

コーチングプログラム５３０は、入力信号６１６を受信し、入力信号６１６から、コーチングセッション６０８が開始されるべきであることを識別する。コーチングセッション６０８が開始されることを識別すると、コーチングプログラム５３０は、コーチングプログラム５２０が開始される１つまたは複数のユーザＩＤ６２２に対する要求６２０を含む出力信号６１８を生成する。例えば、出力信号６１８は、ユーザＩＤ１、ユーザＩＤ２、ユーザＩＤ Ｎ、または、ユーザＩＤ１、ＩＤ２、及びＩＤ Ｎのうちの２つ以上の組み合わせに基づいて、コーチングプログラム５３０が開始されるべきかどうかに関する情報を取得するために、クライアントデバイス６０２へのクエリを含む。例示すると、出力信号６１８は、ゲームのゲームプレイのためにアクセスされるユーザＩＤ１、ユーザＩＤ２、ユーザＩＤ Ｎ、またはそれらの２つ以上の組み合わせを取得するための問い合わせを含む。

クライアントデバイス６０２は、コーチングプログラム５３０から１つまたは複数のユーザＩＤ６２２の要求６２０を受信する。例えば、クライアントデバイス６０２は、クライアントデバイス６０２のディスプレイ画面に１つまたは複数のユーザＩＤ６２２に対する要求６０２を表示する。例示すると、クライアントデバイス６０２は、クライアントデバイス６０２のディスプレイ画面にユーザＩＤ１～Ｎのリストを表示する。別の例として、クライアントデバイス６０２は、ユーザ１が装着したヘッドフォンを介して音声を出力し、ユーザ１に１つまたは複数のユーザＩＤ６２２を求める。ヘッドフォンは、クライアントデバイス６０２の一部であるか、またはクライアントデバイス６０２に結合されている。さらに別の例として、クライアントデバイス６０２は、クライアントデバイス６０２の１つまたは複数のスピーカを介して音声を出力し、ユーザ１に１つまたは複数のユーザＩＤ６２２を求める。

クライアントデバイス６０２は、ユーザ１から１つまたは複数のユーザＩＤ６２２を受信し、１つまたは複数のユーザＩＤ６２２を含む入力信号６２３を生成する。例えば、ユーザ１は、ゲームコントローラ１の１つまたは複数のボタンを選択して、１つまたは複数のユーザＩＤ６２２を提供する。例示すると、ユーザ１は、ゲームコントローラ１の１つまたは複数のボタンを選択して、クライアントデバイス６０２のディスプレイ画面に表示されたユーザＩＤ１～Ｎのうちの１つまたは複数を選択する。クライアントデバイス６０２は、入力信号６２３をコーチングプログラム５３０に送信する。

入力信号６２３内の１つまたは複数のユーザＩＤ６２２を受信すると、コーチングプログラム５３０は、出力信号６２４を生成し、出力信号６２４には、１つまたは複数のユーザＩＤ６２２に対してコーチングセッション６０８が生成されるゲームシーケンスタイプを識別するための要求６２６が含まれる。例えば、要求６２６は、ゲームシーケンスタイプがタイプ１か、またはタイプ２かに関する問い合わせである。タイプ１のゲームシーケンスの例には、仮想ユーザの死亡に至る複数のゲームイベントが含まれ、タイプ２のゲームシーケンスの例には、仮想ユーザの健康レベルの低下につながる複数のゲームイベントが含まれる。例示すると、タイプ１はゲームイベント５１２～５１４、ならびにゲームイベント５１６及び５１８を含み、タイプ２はゲームイベント５２０～５２２、ならびに５２４～５２６を含む（図５Ａ）。

クライアントデバイス６０２は、ゲームシーケンスタイプを識別するための要求６２６を含む出力信号６２４を受信し、クライアントデバイス６０２のユーザインタフェースまたは別のタイプのインタフェースを介して、ユーザ１に要求を出力する。例えば、クライアントデバイス６０２は、クライアントデバイス６０２のディスプレイ画面を介して要求６２６を表示またはレンダリングする。例示すると、クライアントデバイス６０２は、仮想ユーザ１０２の死亡（図１～４）及び仮想ユーザ１０２の健康レベルの所定の閾値未満への低下を含むゲームシーケンスタイプのリストを表示する。別の例として、クライアントデバイス６０２は、クライアントデバイス６０２の１つまたは複数のスピーカを介して音声を出力し、音声は、ゲームシーケンスタイプの要求６２６を含む。さらに別の例として、クライアントデバイス６０２は、要求６２６への応答を取得するために、ヘッドフォンを介してユーザ１に音声を出力する。

要求６２６に応答して、ユーザ１は、クライアントデバイス６０２のユーザインタフェースまたは別のタイプのインタフェースを介して、ゲームシーケンスタイプ識別子６２８を提供する。例えば、ユーザ１は、ゲームコントローラ１の１つまたは複数のボタンを選択して、ゲームシーケンスタイプ識別子６２８を提供する。例示すると、ユーザ１は、１つまたは複数のボタンを選択して、仮想ユーザ１０２の死亡または仮想ユーザ１０２の健康レベルの低下のいずれかのゲームシーケンスタイプを選択する。ゲームシーケンスタイプ識別子６２８の選択を受信すると、クライアントデバイス６０２は、ゲームシーケンスタイプ識別子６２８を含む入力信号６３０を生成し、入力信号６３０をコーチングプログラム５３０に送信する。

コーチングプログラム５３０は、入力信号６３０を受信し、入力信号６３０からゲームシーケンスタイプ識別子６２８を識別する。ゲームシーケンス識別子６２８を識別すると、コーチングプログラム５３０は、ゲームシーケンス識別子６２８によって識別されたシーケンスタイプのゲームイベントを識別するための要求６３２を含む出力信号６３４を生成する。例えば、仮想ユーザ１０２の死亡というゲームイベント５１４または５１８（図５Ａ）に対してコーチングセッション６０８が生成されるべきかどうかを決定するために、コーチングプログラム５３０は、ゲームイベント５１４または５１８を識別するための要求６３２を生成する。コーチングプログラム５３０は、出力信号６３４をクライアントデバイス６０２に送信する。

出力信号６３４を受信すると、クライアントデバイス６０２は、出力信号６３４から要求６３２を識別し、クライアントデバイス６０２のユーザインタフェースまたは別のインタフェースを介して要求６３２をユーザ１に提供する。例えば、クライアントデバイス６０２は、クライアントデバイス６０２のディスプレイ画面にゲームイベント５１４及び５１８のリストを表示する。例示すると、クライアントデバイス６０２は、クライアントデバイス６０２のディスプレイ画面に仮想シーン２０２及び仮想シーン４０２を表示して、ユーザ１が仮想シーン２０２及び４０２のうちの１つを選択できるようにする。

ユーザ１は、要求６３２に応答して、コーチングセッション６０８を生成するゲームイベントを識別する。ゲームイベントは、ゲームイベント識別子６３６を提供するために識別される。例えば、ユーザ１は、ゲームコントローラ１の１つまたは複数のボタンを介して、ゲームイベント５１４を識別する仮想シーン２０２、またはゲームイベント５１８を識別する仮想シーン４０２を選択する。仮想シーン２０２または４０２の選択の受信に応答して、クライアントデバイス６０２は、ゲームイベント識別子６３６を有する入力信号６３８を生成し、入力信号６３８をコーチングプログラム５３０に送信する。

入力信号６３８を受信すると、コーチングプログラム５３０は、ゲームイベント識別子６３６を識別し、ゲームユーザＩＤ６２２に対してコーチングセッション６０８が生成されるゲームイベントデータ６０４を選択する。例えば、コーチングプログラム５３０は、ゲームプログラム５２８がユーザＩＤ１に対して実行されるときに表示される仮想シーン２０２（図２）に基づいて記録されたゲームイベント５１４（図５Ａ）を識別するゲームイベント識別子６３６を識別する。選択されたゲームイベントデータ６０４の例には、ゲームイベント５１４またはゲームイベント５１８（図５Ａ）が含まれる。

コーチングセッション６０８が生成されるゲームイベント識別子６３６を識別すると、コーチングプログラム５３０がプロセッサシステム５０５によって実行されて、選択されたゲームイベントデータ６０４を出力するために、ゲームイベント識別子６３６によって識別されたゲームイベントの記録の時点から所定の時間間隔内に記録されたゲームイベントデータ５１０の一部を記憶する。例えば、コーチングセッション６０８が生成されるゲームイベント５１４を識別すると、コーチングプログラム５３０は、ゲームイベント５１４が記録される時点の前の所定の時間間隔内に記録される１つまたは複数のゲームイベントを記憶する。コーチングプログラム５３０は、ゲームイベント５１４も記憶する。１つまたは複数のゲームイベントは、ゲームイベント５１４の発生につながるか、またはもたらす。例示すると、コーチングプログラム５３０は、プロセッサシステム５０５の１つまたは複数のメモリデバイスから、ゲームイベント５１４が記録された時点より前の所定の時間間隔外に記録された１つまたは複数のゲームイベントを削除する。ゲームイベント５１４及び所定の時間間隔内のゲームイベントは、コーチングプログラム５３０によって、選択されたゲームイベントデータ６０４として記憶される。また、この図では、プロセッサシステム５０５は、ゲームイベント５１４が記録された時点の前の所定の時間間隔内に記録された１つまたは複数のゲームイベントを、プロセッサシステム５０５の１つまたは複数のメモリデバイス内に保持して、選択されたゲームイベントデータ６０４を保持する。削除される１つまたは複数のゲームイベントは、保持される１つまたは複数のゲームイベントにつながり、保持される１つまたは複数のゲームイベントは、ゲームイベント５１４につながる。保持される１つまたは複数のゲームイベントは、選択されたゲームイベントデータ６０４である。

さらに説明すると、ゲームのゲームセッション中、ゲームプログラム５２８の実行時に、一連の仮想シーンが生成され、記録される。一連の仮想シーンは、第１シリーズ、第２シリーズ、及び第３シリーズを含む。第１シリーズは、仮想ユーザ１０２が、レンガまたは金属棒など、仮想兵器及び仮想オブジェクト等のアイテムを収集して、仮想ユーザ１０２を仮想弾丸から守る連続する仮想シーンの第１セットを含む。第２シリーズは、仮想ユーザ１０２が他の仮想ユーザと戦う、連続する仮想シーンの第２セットを含む。第３シリーズは、ゲームイベント５１２及び５１４（図５Ａ）が記録される仮想シーン１１０及び２０２（図１及び２）などの連続する仮想シーンの第３セットを含む。第２シリーズは第１シリーズの後に続き、第３シリーズは第２シリーズの後に続く。プロセッサシステム５０５は、仮想シーンの第１及び第２シリーズを削除し、仮想シーンの第３シリーズを保持する。第３シリーズは、選択されたゲームイベントデータ６０４である。

別の例として、コーチングプログラム５３０は、ゲームイベントデータ５１０の一部を含む選択されたゲームイベントデータ６０４を、プロセッサシステム５０５の１つまたは複数のメモリデバイス内に記憶する。選択されたゲームイベントデータ６０４が記憶されるプロセッサシステム５０５の１つまたは複数のメモリデバイスは、ゲームイベントデータ５１０が記録される１つまたは複数のメモリデバイスとは異なる、例えば同じではない。一実施形態では、異なる１つまたは複数のメモリデバイスに記憶される代わりに、選択されたゲームイベントデータ６０４は、ゲームイベントデータ５１０がメモリデバイスに記録されるメモリアドレスとは異なるメモリアドレスでメモリデバイスに記憶される。

さらに別の例として、コーチングセッション６０８が生成されるゲームイベント５１４を識別すると、コーチングプログラム５３０は、ゲームイベント５１４が記録される時点より前の所定の時間間隔内に記録された１つまたは複数のゲームイベントと、ゲームイベント５１４が記録された時点の後の予め設定された時間間隔内に記録された１つまたは複数のゲームイベントと、ゲームイベント５１４とを記憶する。ゲームイベント５１４が記録された時点の前の所定の時間間隔内に記録される１つまたは複数のゲームイベント、ゲームイベント５１４、及びゲームイベント５１４が記録された時点の後の予め設定された時間間隔内に記録された１つまたは複数のゲームイベントは、選択されたゲームイベントデータ６０４である。例えば、コーチングセッション６０８が生成されるゲームイベント５１４を識別すると、コーチングプログラム５３０は、ゲームイベント５１４が記録された時点の後の予め設定された時間間隔内に記録される１つまたは複数のゲームイベントを記憶する。ゲームイベント５１４の後には、ゲームイベント５１４が記録された時点の後の予め設定された時間間隔内に記録された１つまたは複数のゲームイベントが続く。例示すると、コーチングプログラム５３０は、プロセッサシステム５０５の１つまたは複数のメモリデバイスから、ゲームイベント５１４が記録された時点の後の予め設定された時間間隔外に記録された１つまたは複数のゲームイベントを削除する。ゲームイベント５１４が記録された時点の後の予め設定された時間間隔内に発生する１つまたは複数のゲームイベントは、削除される１つまたは複数のゲームイベントにつながる。また、この例では、プロセッサシステム５０５は、ゲームイベント５１４が記録された時点の後の予め設定された時間間隔内に記録された１つまたは複数のゲームイベントを、プロセッサシステム５０５の１つまたは複数のメモリデバイス内に保持する。

さらに説明すると、ゲームのゲームセッション中、ゲームプログラム５２８の実行時に、一連の仮想シーンが生成される。一連の仮想シーンは、第１シリーズ、第２シリーズ、及び第３シリーズを含む。第１シリーズは、仮想シーン２０２に示されるようにゲームイベント５１４において仮想ユーザ１０２が死亡した後、仮想銃弾から仮想ユーザ１０２を守るために、レンガまたは金属棒など、仮想武器及び仮想オブジェクト等のアイテムを仮想ユーザ１０２が収集する、連続する仮想シーンの第１セットを含む。第２シリーズは、仮想ユーザ１０２が他の仮想ユーザと踊る連続する仮想シーンの第２セットを含む。第３シリーズは、仮想ユーザ１０２が他の仮想ユーザと踊り続ける連続する仮想シーンの第３セットを含む。第２シリーズは第１シリーズの後に続き、第３シリーズは第２シリーズの後に続く。プロセッサシステム５０５は、仮想シーンの第２及び第３シリーズを削除し、仮想シーンの第１シリーズを保持する。第１シリーズは、選択されたゲームイベントデータ６０４である。

選択されたゲームイベントデータ６０４に基づいて、コーチングプログラム５３０は、メタデータ６０６を処理して、ユーザ１がゲームイベント識別子６３６によって識別されるゲームイベントの発生の１つまたは複数の理由を確認できるようにすることでユーザ１のゲームスキルを高めることができる、オーバーレイなどの仮想オブジェクトを生成及びレンダリングする。例えば、コーチングプログラム５３０は、メタデータ６０６を処理して、仮想ユーザ１０２を撃った仮想ユーザの位置及び向きを識別し、仮想ユーザ１０２を撃った仮想ユーザのオーバーレイを含めることを決定する。オーバーレイが表示されると、ユーザ１は、仮想ユーザ１０２の死亡の理由を見ることができる。死亡の理由は、仮想ユーザ１０２を撃った仮想ユーザである。オーバーレイは仮想オブジェクトの一例である。また、コーチングプログラム５３０は、仮想ユーザを強調するために仮想ユーザを囲む仮想フレームを生成する。別の例として、コーチングプログラム５３０は、メタデータ６０６から仮想弾丸１０６の位置を識別し、仮想ユーザ１０２がジャンプするか仮想壁によって保護されていた場合、仮想ユーザ１０２は仮想弾丸１０６によって殺されなかったであろうと判断する。コーチングプログラム５３０は、射撃中にジャンプするように、または仮想ユーザ１０２の周囲に壁を構築するように仮想ユーザ１０２を制御するようにユーザ１に表示するためのコーチングコメントを生成する。コーチングコメントにより、ユーザ１は、仮想ユーザ１０２が仮想弾丸１０６に当たらないように保護することができる。ユーザ１は、コーチングコメントを見直すことができる。仮想ユーザ１０２が別の仮想弾丸で殺されそうになる同様の状況に直面した場合、ユーザ１がコーチングコメントに従えば、仮想ユーザ１０２を他の仮想弾丸から守ることができる。

コーチングプログラム５３０は、選択されたゲームイベントデータ６０４にオーバーレイしてコーチングセッション６０８を生成するために、メタデータ６０６に従って仮想オブジェクトのオーバーレイを生成する。例えば、コーチングプログラム５３０は、選択されたイベントデータ６０４として記憶された仮想シーン内の仮想オブジェクトの周囲に仮想フレームをオーバーレイする。別の例として、コーチングプログラム５３０は、仮想シーン２０２に仮想オブジェクトをオーバーレイする。仮想シーン２０２にオーバーレイされた仮想オブジェクトは、仮想弾丸１０６（図１）を発射した。さらに別の例として、コーチングプログラム５３０は、オーバーレイとして、弾丸１０６を発射した仮想オブジェクトのユーザ名またはユーザＩＤを追加する。

コーチングプログラム５３０は、コーチングセッション６０８をクライアントデバイス６０２に提供する。例えば、プロセッサシステム５０５は、コーチングプログラム５３０を実行して、メタデータ６０６に基づいて生成された１つまたは複数の仮想オブジェクトが選択されたゲームイベントデータ６０４にオーバーレイされる１つまたは複数のコーチングシーンを生成する。例示すると、１つまたは複数のコーチングシーンは、仮想シーン２０２上の１つまたは複数の仮想オブジェクトのオーバーレイを含む。１つまたは複数のコーチングシーンは、クライアントデバイス６０２のディスプレイ画面に表示される。

コーチングセッション６０８は、入力６４０がクライアントデバイス６０２から受信されるまで続く。例えば、入力６４０は、ユーザ１がゲームコントローラ１の１つまたは複数のボタンを選択してコーチングセッション６０８を終了するときに生成される。入力６４０は、入力信号６４２内でコーチングプログラム５３０に送信される。コーチングプログラム５３０は、コーチングプログラム５３０からコーチングセッション６０８を終了するための入力６４０を識別し、コーチングセッション６０８を終了する。例えば、コーチングプログラム５３０は、入力６４０の受信に応答して、ユーザＩＤ１のコーチングセッション５３０を終了する。例示すると、ユーザＩＤ１のゲームプログラム５２８の実行は、ユーザＩＤ１のコーチングセッション６０８が終了した後も継続する。

一実施形態では、コーチングプログラム５３０は、クライアントデバイス６０２に、ゲームシーケンスタイプを識別すること、及びゲームシーケンスタイプのゲームイベントを識別することを要求しない。例えば、コーチングプログラム５３０は、信号６２４及び６３４をクライアントデバイス６０２に送信しない。ユーザ１は、ゲームシーケンスタイプとゲームシーケンスタイプのゲームイベントとを識別する必要は無い。そうではなく、コーチングプログラム５３０は、仮想ユーザ１０２の死亡のゲームイベント５１４または５１８の直後に、コーチングセッション６０８を開始するための入力信号６１６が受信されたと判断する。例えば、コーチングプログラム５３０は、入力信号６１６が、ゲームイベント５１４または５１８の発生の終了時、及びゲームイベント５１４または５１８の後に続くゲームイベントの発生前に受信されたと判断する。そう判断すると、コーチングプログラム５３０は、コーチングセッション６０８がゲームイベント５１４または５１８のために生成されるべきであると判断する。

一実施形態では、コーチングセッション６０８は、ゲームのプレイ中に発生する。例えば、コーチングプログラム５３０とゲームプログラム５２８の両方が、プロセッサシステム５０５によって同時に実行される。ユーザ１がゲームをプレイする前に、コーチングプログラム５３０をゲームプログラム５２８と同時に実行するための選択を示す入力信号が、プロセッサシステム５０５によってクライアントデバイス６０２のゲームコントローラ１から受信される。入力信号を受信すると、プロセッサシステム５０５は、コーチングプログラム５３０を実行する。コーチングプログラム５３０が実行されるとき、メタデータ６０６に基づいて１つまたは複数の仮想オブジェクトが生成され、ゲームプログラム５２８の実行によって生成される仮想シーンの仮想オブジェクトと共に表示するために、プロセッサシステム５０６のコーチングプログラム５３０によってレンダリングされる。例えば、メタデータ６０６に基づいて生成された１つまたは複数の仮想オブジェクトは、コーチングセッション６０８中に仮想シーン１１０、２０２、３０２、及び４０２に表示される。

一実施形態では、コーチングシーンは、本明細書では、セルフコーチングユーザインタフェースなどのセルフコーチングインタフェースと呼ばれる。

図７Ａは、仮想シーン１１０（図１）で１つまたは複数の仮想オブジェクトの使用を示すためのコーチングシーン７００の実施形態の図である。メタデータ６０６（図６）に基づいて、１つまたは複数の仮想オブジェクトが生成される。コーチングシーン７００は、仮想ユーザ１０２、仮想銃１０８、仮想弾丸１０６、及び仮想傾斜路１１２を含む。コーチングシーン７００は、コーチングプログラム５３０（図６）の実行時に生成され、ディスプレイデバイス１に表示される。

コーチングシーン７００は、仮想コメント７０２、仮想フレーム７０４、別の仮想フレーム７０６、銃ＩＤ７０８、仮想フレーム７１０、弾丸ＩＤ７１２、銃ＩＤ７１４、仮想フレーム７１６、仮想銃７１８、仮想ユーザ７２０、仮想フレーム７２２、仮想ユーザＩＤ７２４、仮想ゲームコントローラ７２６、及び仮想ボタンＩＤ７２８を含む。コーチングシーン７００は、ユーザ１をコーチングするのに不要な仮想オブジェクトでコーチングシーン７００を乱雑にしないように、仮想木１０５及び仮想壁１０７を除外する。仮想コメント７０２、仮想フレーム７０４、仮想フレーム７０６、銃ＩＤ７０８、仮想フレーム７１０、弾丸ＩＤ７１２、銃ＩＤ７１４、仮想フレーム７１６、仮想銃７１８、仮想ユーザ７２０、仮想フレーム７２２、仮想ユーザＩＤ７２４、仮想ゲームコントローラ７２６、及び仮想ボタンＩＤ７２８は、メタデータ６０６に基づいて生成された、オーバーレイなどの１つまたは複数の仮想オブジェクトの例である。仮想ユーザ７２０は、仮想シーン１１０（図１Ａ）にはいないことに留意されたい。

仮想コメント７０２は、ユーザ１が仮想弾丸１０６に当たらないように、コーチングコメント「今すぐジャンプ！または、今すぐ壁の構築を開始！」である。仮想フレーム７０４は、仮想ユーザ１０２を強調するために仮想ユーザ１０２の周囲に延びている。同様に、仮想フレーム７０６は、仮想銃１０８の周囲に延びている。銃ＩＤ７０８は、仮想銃１０８を強調するために仮想銃１０８のタイプを識別する。例えば、銃ＩＤ７０８は、仮想銃１０８がショットガンかピストルか半自動銃か二連銃かＡＫ－４７かを識別する。仮想フレーム７１０は、仮想弾丸１０６を強調するために仮想弾丸１０６の周囲に延びている。弾丸ＩＤ７１２は、仮想弾丸１０６のタイプを識別する。仮想弾丸のタイプの例には、鉛円頭弾、セミジャケット弾、及びフルメタルジャケット弾等が含まれる。

仮想フレーム７１６は、仮想ユーザ７２０が手に持っている仮想銃７１８の周囲に延びている。銃ＩＤ７１４は、仮想銃７１８のタイプを識別する。仮想フレーム７２２は、仮想ユーザ７２０を強調するために仮想ユーザ７２０の周囲に延びている。仮想ユーザＩＤ７２４は、仮想弾丸１０６で仮想ユーザ１０２を撃った仮想ユーザ７２０を制御する別のユーザに割り当てられるユーザＩＤである。ユーザＩＤ７２４は、プロセッサシステム５０５（図５Ａ）によって割り当てられる。仮想ゲームコントローラ７２６は、ゲームをプレイし、仮想ユーザ１０２を制御するユーザ１が使用または手に持つゲームコントローラ１の画像である。仮想ボタンＩＤ７２８は、仮想ユーザ１０２の死亡につながる仮想シーン１１０（図１）の発生中にユーザ１によって選択されるボタンである。仮想シーン７００にメタデータ６０６を提供することによって、コーチングプログラム５３０は、ユーザ１のスキルレベルを向上させるために、ユーザ１のセルフコーチングを容易にする。

コーチングシーン７００は、タイムラインスクラバー７３０に沿って、またはタイムラインスクラバー７３０と同時に表示される。タイムラインスクラバー７３０は、タイムバー、タイムスケール、時間軸、またはタイムラインである。コーチングプログラム５３０は、コーチングセッション６０８の一部であるタイムスクラバー７３０を生成及びレンダリングする。ユーザ１は、ゲームコントローラ１を使用して、タイムラインスクラバー７３２のセグメント７３２、７３４、及び７３６などの多くのセグメントのうちの１つを選択して、プロセッサシステム５０５からコーチングシーン７００にアクセスし、コーチングシーン７００を見る。例えば、セグメント７３２が選択されると、コーチングシーン７００がディスプレイデバイス１に表示される。

タイムラインスクラバー７３０は、選択されたゲームイベントデータ６０４をディスプレイ画面１に表示するためのセグメントを含む。一例として、タイムラインスクラバー７３０はセグメントを含み、各セグメントは、ゲームコントローラ１を介してユーザ１によって選択されて、入力信号を生成することができる。入力信号が受信されるとき、ゲームイベントに至るまでの仮想シーン、ゲームイベントの仮想シーン、及びゲームイベントの後に発生する仮想シーンの再生が、仮想シーンの１つまたは複数の上に重ねられたオーバーレイコンテンツと共に、コーチングプログラム５３０によって再生される。別の例として、タイムラインスクラバー７３０は、コーチングシーンの表示を可能にするために、ゲームコントローラ１を介してユーザ１によって選択できるセグメントのセット７３８を含み、コーチングシーンには、メタデータ６０６に基づいて生成された１つまたは複数の仮想オブジェクトが、仮想ユーザ１０２の死亡の仮想シーン２０２などの仮想シーンが記録された時点の前の所定の期間中に記録された仮想シーンの部分にオーバーレイされる。所定の期間は、－Ｐ時間単位から０時間単位にわたる。ここで、時間単位は、秒または分であってよい。さらに、タイムラインスクラバー７３０は、コーチングシーンを見るために、ゲームコントローラ１を介してユーザ１が選択できるセグメント７３６を含み、コーチングシーンには、メタデータ６０６に基づいて生成された１つまたは複数の仮想オブジェクトが、仮想ユーザ１０２の死亡時に記録された仮想シーン２０２などの仮想シーンの一部にオーバーレイされる。タイムラインスクラバー７３０のセグメント７３６が、ゲームコントローラ１を介してユーザ１によって選択されるとき、仮想ユーザ１０２が死亡した仮想シーン２０２内の仮想オブジェクトの１つまたは複数にオーバーレイされたメタデータ６０６に基づいて生成された１つまたは複数の仮想オブジェクトを含むコーチングシーンが、コーチングプログラム５３０によってレンダリングされ、ディスプレイデバイス１に表示される。仮想ユーザ１０２の死亡は、０単位で記録される。タイムラインスクラバー７３０は、コーチングシーンの表示を可能にするために、ゲームコントローラ１を介してユーザ１によって選択できるセグメントのセット７４０を含み、コーチングシーンには、メタデータ６０６に基づいて生成された１つまたは複数の仮想オブジェクトが、仮想ユーザ１０２の死亡の仮想シーン２０２などの仮想シーンが記録された時点の後の予め設定された期間中に記録される仮想シーンの部分にオーバーレイされる。所定の期間は、０時間単位からM時間単位にわたる。ここで、時間単位は、秒または分であってよい。時間単位－ＰとＭの間に時間窓がある。

一実施形態では、コーチングシーン７００は、仮想フレーム７０４、仮想フレーム７０６、及び銃ＩＤ７０８のうちの１つまたは複数を除外する。例えば、コーチングプログラム５３０は、仮想フレーム７０４、仮想フレーム７０６、及び銃ＩＤ７０８のうちの１つまたは複数が、ユーザ１のスキルレベルを上げるために必要ではないと判断し、したがって、仮想フレーム７０４、仮想フレーム７０６、及び銃ＩＤ７０８のうちの１つまたは複数を生成しない。

ある実施形態では、コーチングシーンにおいて仮想オブジェクトの周囲にフレームが延びる代わりに、コーチングプログラム５３０は、仮想オブジェクトを、コーチングシーンの他の仮想オブジェクトの色または強度または陰影と比較して実質的に異なる色または強度または陰影でレンダリングすることによって仮想オブジェクトを強調表示する。例えば、仮想弾丸１０６の周囲にフレーム７１０と、仮想ユーザ７２０の周囲にフレーム７２２とが延びる代わりに、コーチングプログラム５３０は、仮想弾丸１０６及び仮想ユーザ７２０を、仮想ユーザ１０２及び仮想銃１０８の強度よりも実質的に大きい強度を有するようにレンダリングする。この場合も、仮想ユーザ１０２及び仮想銃１０８と比較して仮想弾丸１０６及び仮想ユーザ７２０を強調表示することは、ユーザ１のセルフコーチングを容易にする。

ある実施形態では、コーチングシーン７００は、仮想木１０５及び仮想壁１０７を含む。

一実施形態では、コーチングプログラム５３０は、死亡または健康レベルの低下などのエンドゲームイベントに至るゲームイベントの数に基づいて、時間単位－ＰとＭの間の期間を変更する。例えば、コーチングプログラム５２０は、仮想ユーザ１０２の第１の死に至る戦闘シーケンスに仮想ユーザ１０２が関与する第１の時間の長さは、仮想ユーザ１０２の第２の死に至る第２の戦闘シーケンスに仮想ユーザ１０２が関与する第２の時間の長さより長いと判断する。第１の戦闘シーケンスは１人または複数の仮想ユーザと対戦し、第２の戦闘シーケンスは１人または複数の仮想ユーザと対戦する。コーチングプログラム５２０は、第１の死に至る選択されたゲームイベントデータ６０４を第１の時間の長さにわたって記憶し、第２の死に至る選択されたゲームイベントデータ６０４を第２の時間の長さにわたって記憶する。このようにして、第１及び第２の戦闘シーケンス全体が、コーチングプログラム５２０によってキャプチャされ、記憶される。

図７Ｂは、ディスプレイデバイス１にレンダリングされて表示されるコーチングシーン７５０の実施形態の図である。コーチングシーン７５０は、タイムラインスクラバー７３０のセグメント７５２の選択を示す入力信号に応答して、コーチングシーン７５０によってレンダリングされる。セグメント７５２は、ゲームコントローラ１の１つまたは複数のボタンを使用して、ユーザ１によって選択される。

セグメント７５２はセグメント７３４から連続しており、セグメント７３４はセグメント７３２から連続している。例えば、セグメント７５２は、仮想シーン１１０（図１）が記録される時点と仮想シーン２０２（図２）が記録される時点との間に記録される仮想シーンからの１つまたは複数の仮想オブジェクトを含む。タイムラインスクラバー７３０のセグメントに対応する各仮想シーンは、ディスプレイ画面１に表示された後に記録される。

コーチングシーン７５０は、仮想コメント７５４、仮想フレーム７５６、仮想弾丸７５８、及び弾丸ＩＤ７６０を含む。仮想コメント７５４は、コーチングプログラム５３０（図６）によって生成され、仮想ユーザ１０２が仮想弾丸７５８によって撃たれるのを防ぐようにユーザ１を指導する。例えば、仮想コメント７５４は、「今すぐ、ジャンプ！」を含む。仮想フレーム７５６は、仮想弾丸１０６（図７Ａ）が発射された後に仮想ユーザ７２０によって発射された仮想弾丸７５８の周囲に延びている、または取り囲んでいる。仮想フレーム７５６は、仮想弾丸７５８を強調表示する。弾丸ＩＤ７６０は、仮想弾丸７５８のタイプを識別する。コーチングシーン７５０は、ユーザ１を指導するために不要な仮想オブジェクトでコーチングシーン７５０を乱雑にしないように、仮想木１０５及び仮想壁１０７を除外する。

コーチングシーン７５０では、図７Ａのコーチングシーン７００における仮想オブジェクトと比較した仮想オブジェクトの進行が示されていることに留意されたい。例えば、コーチングシーン７５０では、仮想銃７１８から発射された仮想弾丸７５８を囲む仮想フレーム７５６が示されている。仮想フレーム７５６は、仮想弾丸１０６を囲む仮想フレーム７１０が生成された後に生成される。仮想弾丸７５８は、仮想弾丸１０６が発射された後に発射される。また、コーチングシーン７５０では、仮想コメント７５４は、仮想壁を構築するオプション無しで仮想ユーザ１０２がジャンプするように制御するようにユーザ１に指示する。コーチングプログラム５３０は、仮想弾丸７５８が発射された時点では、ユーザ１が仮想壁を構築するには遅すぎると判断する。

一実施形態では、セグメント７５２の隣のセグメント７５３がゲームコントローラ１を介してユーザ１によって選択されるとき、プロセッサシステム５０５はメタデータ６０６を処理して、コーチングシーン７５０に示される仮想弾丸７５８の位置と比較して、仮想ユーザ１０２により近い仮想弾丸７５８の位置を表示する。セグメント７５３は、第２の仮想シーンがゲームレコーダ５０２によって記録される時点から時間的に連続する第１の仮想シーンからの１つまたは複数の仮想オブジェクトを含むコーチングシーンに対応する。第１及び第２の仮想シーンにおける仮想弾丸７５８の位置は、仮想弾丸７５８の動きを規定する。コーチングシーン７５０は、第２の仮想シーンの再生からの仮想オブジェクトを含む。

ある実施形態では、コーチングシーン７５０は、仮想木１０５及び仮想壁１０７を含む。

一実施形態では、仮想コメント７０２及び７５４は、スキルレベルを予め設定された閾値よりも高くするためのユーザ１へのヒントの例である。例えば、次のゲームセッション中に、ユーザ１が仮想ユーザ１０２を制御するか、仮想ユーザ１０２の少なくとも一方の側に仮想壁を構築するとき、仮想ユーザ１０２が、仮想ユーザ１０２の側面または背後からの仮想弾丸に当たる可能性が低減される。仮想ユーザ１０２は、ゲームセッションの間、より長く生き続けることができ、ゲームプログラム５２８は、ユーザ１のスキルレベルを、予め設定された閾値より上に上げる。各ヒントは、仮想ユーザ１０２の死亡の理由を提供する。例えば、仮想ユーザ１０２は、前のゲームセッション中に仮想壁を構築せず、ジャンプもしなかったために、前のゲームセッション中に死亡した。

図８Ａは、ディスプレイデバイス１でのコーチングシーン７００と別のコーチングシーン８００の同時表示を示す実施形態の図である。コーチングシーン７００に加えて、コーチングシーン８００が、コーチングプログラム５３０（図６）によってディスプレイデバイス１にレンダリングされる。例えば、コーチングセッション６０８（図６）は、コーチングシーン７００及び８００を含む。別の例として、入力信号は、クライアントデバイス６０２からコーチングプログラム５３０によって受信される。入力信号は、コーチングシーン７００が生成される元になる仮想シーン１１０（図１）から記録されたゲームイベントデータのゲームイベント識別子６３６（図６）の選択と、コーチングシーン８００が生成される元になる仮想シーン３０２（図３）から記録されたゲームイベントデータの別のゲームイベント識別子の選択とを示す。この例では、タイムラインスクラバー７３０のセグメント７３２の選択がクライアントデバイス６０２から受信されるとき、コーチングシーン７００及び８００の両方が、コーチングプログラム５３０によって生成され、レンダリングされる。また、この例では、タイムラインスクラバー７３０は、コーチングプログラム５３０によって生成され、コーチングシーン７００及び８００に沿ってレンダリングされる。

コーチングシーン８００は、仮想シーン３０２（図３）に基づいて生成される。例えば、仮想シーン３０２が記録され、仮想シーン３０２からの１つまたは複数の仮想オブジェクトがコーチングシーン８００に含まれる。例示すると、仮想ユーザ１０２、仮想弾丸３０６、及び仮想銃１０８がコーチングシーン８００に含まれる。別の例として、コーチングシーン８００は、セグメント７３２に対応する時点に表示及び記録された仮想シーン３０２に基づいて生成される。例示すると、仮想シーン３０２は、仮想ユーザ１０２のゲームイベントｑの時点より前のいくつかの時間セグメントで記録される。仮想シーン３０２は、コーチングシーン７００が生成される元になる仮想シーン１１０と同じ方法で記録される。

コーチングシーン８００は、ユーザＩＤ８０２、仮想フレーム８０４、仮想ユーザ８０６、仮想銃８０８、仮想フレーム８１０、銃ＩＤ８１２、仮想弾丸３０６、弾丸ＩＤ８１６、及び仮想フレーム８１８を含む。ユーザＩＤ８０２、仮想フレーム８０４、仮想ユーザ８０６、仮想銃８０８、仮想フレーム８１０、銃ＩＤ８１２、弾丸ＩＤ８１６、及び仮想フレーム８１８は、メタデータ６０６（図６）に基づいて生成された仮想オブジェクトの１つまたは複数のオーバーレイの例である。

仮想フレーム８０４は、仮想ユーザ１０２の死亡ｘの理由である仮想ユーザ８０６を強調するために、仮想ユーザ８０６の周囲に延びている。仮想ユーザ８０６は、ゲームコントローラを介して別のユーザによって制御される。仮想フレーム８１０は、仮想ユーザ８０６が手に持った仮想銃８０８の周囲に延びて、仮想銃８０８を強調する。銃ＩＤ８１２は、仮想銃８０８のタイプを識別する。ユーザＩＤ８０２は、仮想ユーザ８０６を制御する他のユーザに割り当てられる。ユーザＩＤ８０２は、プロセッサシステム５０５（図５Ａ）によって割り当てられる。

仮想フレーム８１８は、仮想ユーザ８０６によって仮想ユーザ１０２に向けられた仮想弾丸３０６を強調するために、仮想弾丸３０６の周囲に延びている。弾丸ＩＤ８１６は、仮想弾丸３０６を識別する。また、コーチングシーン８００は、ユーザ１のコーチングを容易にするために仮想コメント７０２を含む。

一実施形態では、コーチングシーン８００内に表示される仮想コメントは、仮想コメント７０２とは異なる。例えば、コーチングシーン８００内に表示される仮想コメントは、「今すぐジャンプ！」または「今すぐ壁の構築を開始！」の代わりに、「ジャンプ！」または「壁を構築せよ」である。

ある実施形態では、コーチングシーン８００内の１つまたは複数の仮想オブジェクトは、コーチングプログラム５３０によって強調表示されない。例えば、コーチングプログラム５３０は、ユーザ１のスキルレベルを高めるために仮想ユーザ１０２及び仮想銃１０８を強調する必要はないと判断し、仮想フレーム７０４及び仮想フレーム７０６を生成しないと判断する。

図８Ｂは、ユーザＩＤ１に関連付けられたコーチングシーン７００と、ユーザＩＤ Ｎに関連付けられた別のコーチングシーン８５０との同時レンダリング及び表示を示す、ディスプレイデバイス１の実施形態の図である。コーチングシーン８５０は、コーチングプログラム５３０（図５Ａ）によって生成される。コーチングシーン８５０は、ユーザＩＤ Ｎについて生成される。例えば、入力信号６２３（図６）が、ユーザ１を識別するユーザＩＤ１を含み、ユーザＩＤ Ｎが割り当てられた別のユーザを識別するユーザＩＤ Ｎを含むとき、コーチングプログラム５３０は、プロセッサシステム５０５の１つまたは複数のメモリデバイスから、ユーザＩＤ Ｎについて記録されたゲームイベントデータ５０４にアクセスし、ゲームイベントデータ５０４の一部を、選択されたゲームイベントデータ６０４の一部として、プロセッサシステム５０５の１つまたは複数のメモリデバイスに記憶する。例示すると、ゲームイベントデータ５０４が記録される１つまたは複数のメモリデバイスは、選択されたゲームイベントデータ６０４が記録される１つまたは複数のメモリデバイスとは異なる。ユーザＩＤ Ｎのメタデータ６０６に基づいて生成された１つまたは複数の仮想オブジェクトは、ユーザＩＤ Ｎの選択されたゲームイベントデータ６０４の一部にコーチングプログラム５３０によってオーバーレイされて、ユーザＩＤ Ｎのコーチングシーン８５０が生成される。ゲームイベントデータ５０４は、ユーザＩＤ Ｎを有する他のユーザによるゲームのゲームプレイ中に生成される。

コーチングシーン８５０は、仮想木８５２、仮想ユーザ８５４、仮想銃８５６、銃ＩＤ８５８、ユーザＩＤ８６０、仮想フレーム８６２、別の仮想フレーム８６４、仮想ユーザ８６６、仮想銃８６８、仮想フレーム８７０、別の仮想フレーム８７２、銃ＩＤ８７４、仮想弾丸８７６、仮想フレーム８７８、銃ＩＤ８８０、仮想ユーザ８８２、仮想フレーム８８４、仮想銃８８６、仮想フレーム８８８、仮想壁８９０、別の仮想壁８９２、仮想健康状態８９４、ユーザＩＤ８９７、及び仮想傾斜路８９９を含む。コーチングシーン８５０は、仮想コントローラ８９６及び仮想ボタン８９８をさらに含む。ユーザＩＤ８６０、仮想フレーム８６２、仮想フレーム８６４、仮想ユーザ８５４、仮想銃８５６、銃ＩＤ８５８、仮想フレーム８７２、銃ＩＤ８７４、仮想フレーム８８８、仮想フレーム８８４、仮想フレーム８７０、仮想コントローラ８９６、及び仮想ボタン８９８は、オーバーレイのためにメタデータ６０６に基づいて生成された１つまたは複数の仮想オブジェクトの例である。

コーチングシーン８５０は、ゲームプログラム５２８（図５Ａ）の実行時に生成され、仮想ユーザ８８２の死に至る仮想シーンに基づいて、ユーザＩＤ Ｎに対して生成される。例えば、コーチングシーン８５０が生成される元になる仮想シーンは、コーチングシーン８５０に表示される仮想オブジェクトのうちの１つまたは複数を含む。コーチングシーン８５０が生成される元になる仮想シーンは、コーチングシーン８５０で表示するためにメタデータ６０６に基づいて生成された１つまたは複数の仮想オブジェクトを除外する。例示すると、コーチングシーン８５０が生成される元になる仮想シーンは、仮想弾丸８７６、仮想銃８８６、仮想ユーザ８８２、仮想傾斜路８９９、仮想壁８９０及び８９２、仮想木８５２、ユーザＩＤ８９７、仮想ユーザ８６６、及び仮想銃８６８を含む。ユーザＩＤ Ｎの仮想シーンは、他のユーザがゲームプログラム５２８にアクセスした後に生成される。ゲームプログラム５２８は、ユーザＩＤ Ｎがプロセッサシステム５０５によって認証されたとき、他のユーザによってアクセスされる。

仮想フレーム８６２は仮想ユーザ８５４を囲み、仮想フレーム８６４は仮想銃８５６を囲む。銃ＩＤ８５８は、仮想銃８５６のタイプを識別する。ユーザＩＤ８６０は、ゲームコントローラまたは別のタイプのコントローラを介して仮想ユーザ８５４を制御するユーザに割り当てられる。仮想フレーム８７８は、仮想銃８５６から仮想ユーザ８８２に向かって発射される仮想弾丸８７６の周囲に延びている。

仮想健康状態８９４は、仮想ユーザ８８２の健康状態である。仮想フレーム８８４は仮想ユーザ８８２の周囲に延びており、仮想フレーム８８８は仮想銃８８６の周囲に延びている。仮想ユーザ８８２は、仮想傾斜路８９９に立っており、仮想壁８９０及び８９２によって２つの側面が囲まれている。銃ＩＤ８８０は、仮想銃８８６のタイプを識別する。また、銃ＩＤ８７４は、仮想銃８６８のタイプを識別する。仮想フレーム８７２は仮想銃８６８を囲み、仮想フレーム８７０は仮想銃８６６を囲む。ユーザＩＤ８９７は、ゲームコントローラまたは別のタイプのコントローラを介して仮想ユーザ８６６を制御しているユーザを識別する。

仮想コントローラ８９６は、仮想ユーザ８８２を制御するために他のユーザによって使用されるキーボードなどのコントローラの画像である。仮想ボタン８９８は、仮想コントローラ８９６によって表されるコントローラ上のボタンを識別する。ボタンは、ゲームのプレイ中のセグメント７３２に対応する時点で、他のユーザによって選択される。

タイムラインスクラバー７３０は、コーチングシーン７００及び８５０の表示に沿って、または表示と同時に表示される。例えば、コーチングプログラム５３０（図６）は、コーチングシーン７００及び８５０と共にタイムラインスクラバー７３０を表示するために、コーチングシーン７００及び８５０の同時表示と共にタイムラインスクラバー７３０をレンダリングする。セグメント７３２の選択がクライアントデバイス６０２（図６）のゲームコントローラ１（図１）から受信されたとき、コーチングプログラム５３０はコーチングシーン８５０をレンダリングする。コーチングシーン８５０は、セグメント７３２に対応する時点に記録された仮想シーンに基づいて生成される。セグメント７３６は、仮想ユーザ８８２を制御する他のユーザによるゲームのプレイ中に、仮想ユーザ８８２の死亡が発生した時点０を示す。

仮想ユーザ８８２は、仮想ユーザ８６６を撃っている。銃撃戦の間、仮想ユーザ８５４は仮想ユーザ８８２を撃っている。仮想壁８９２は、仮想ユーザ８８２が仮想弾丸８７６によって負傷するのを防ぐ。ユーザ１は、コーチングシーン８５０から、仮想ユーザ１０２の側面に仮想壁８９０などの仮想壁を構築して、仮想ユーザ７２０が発射した仮想弾丸１０６から仮想ユーザ１０２を保護することを学ぶことができる。

一実施形態では、コーチングプログラム５３０の代わりに、コーチングエンジンが使用される。一例として、エンジンは、エンジンによって実行されるものとして本明細書に記載される機能を実行するためのソフトウェアとハードウェアの組み合わせである。例示すると、エンジンは、エンジンによって実行されるものとして本明細書に記載される機能を実行するようにプログラムされたＰＬＤまたはＡＳＩＣである。

一実施形態では、本明細書に記載するように、任意の仮想フレームが仮想オブジェクトを取り囲んで、仮想オブジェクトを強調する。

図８Ｃは、ディスプレイ画面１にコーチングシーンをレンダリングする代わりに、またはレンダリングすることに加えて、プロセッサシステム５０５が、ヘッドフォンを８０３を介して音声としてユーザ１に出力されるオーディオデータ８０５を生成することを示すシステム８０１の実施形態の図である。ヘッドフォン８０３は、ユーザ１の耳に近接するようにユーザ１によって装着される。コーチングセッション６０８の間、コーチングプログラム５３０は、音声としてユーザ１に出力されるオーディオデータ８０５を生成する。例えば、コーチングセッション６０８中、仮想コメント７０２を表示する代わりに、または表示することに加えて、コーチングプログラム５３０はオーディオデータ８０５をヘッドフォン８０３に送信する。オーディオデータ８０５は、ディスプレイ画面１に表示される仮想コメント７０２と同時に、またはその代わりに音声として出力される「射撃中にジャンプ」などのメッセージを含む。ヘッドフォン８０３は、ユーザ１へのメッセージとしてオーディオデータ８０５を出力する。

ある実施形態では、仮想オブジェクト７０２、７０４、７０６、７０８、７１０、７１２、７１４、７１６、７１８、７２０、７２２、７２４、７２６、７２８（図７Ａ）、７５６、７５８（図７Ｂ）、８０２、８０４、８０６、８０８、８１０、８１２、８１６、８１８（図８Ａ）、８５４、８５６、８５８、８６０、８６４、８７８、８８０、８８４、８８８、８７０、８７２、８７４、及び８９７は、メタデータ６０６に基づいてコーチングプログラム５３０によって生成されたオーバーレイコンテンツの例である。

図９は、コーチングセッション６０８（図６）を生成するための推論トレーニングエンジン９０２の使用を示すシステム９００の実施形態の図である。システム９００は、人工知能（ＡＩ）プロセッサ９０４、ユーザＩＤ１のゲームイベントデータ５１０、及びユーザＩＤ２～Ｎのゲームイベントデータ５０４を含む。ＡＩプロセッサ９０４は、プロセッサシステム５０５（図５Ａ）のプロセッサである。

推論トレーニングエンジン９０２は、特徴抽出器９０６、特徴分類器９０８、及びトレーニング対象のモデル９１０を含む。特徴抽出器９０６、特徴分類器９０８、及びモデル９１０のそれぞれの例は、ＡＳＩＣである。特徴抽出器９０６、特徴分類器９０８、及びモデル９１０のそれぞれの例は、ＰＬＤである。モデル９１０の例は、回路要素のネットワークである。各回路要素は、１つまたは複数の入力と１つまたは複数の出力を有する。回路要素の入力は、１つまたは複数の回路要素の１つまたは複数の出力に結合される。例示すると、モデル９１０はニューラルネットワークまたは人工知能モデルである。特徴分類器９０８は、特徴抽出器９０６及びモデル９１０に結合される。

推論トレーニングエンジン９０２は、ゲームレコーダ５０２の１つまたは複数のメモリデバイスから、ゲームイベントデータ５１０及びゲームイベントデータ５０４に、読み取りなどでアクセスする。特徴抽出器９０６は、ゲームイベントデータ５１０及び５０４から特徴を抽出する。特徴が抽出されると、特徴分類器９０８は、抽出された特徴を分類する。コーチングセッション６０８を開始する死亡または健康レベルの低下などのゲームイベントを決定し、メタデータ６０６に基づいて生成された仮想オブジェクトの１つまたは複数のオーバーレイに関連付ける仮想シーンの１つまたは複数の仮想オブジェクトを識別するように、分類された特徴を使用してモデル９１０をトレーニングする。

図１０は、モデル９１０をトレーニングする方法１０００の実施形態を示すフローチャートである。方法１０００の動作１００２において、特徴抽出器９０６は、ゲームイベントデータ５１０及びゲームイベントデータ５０４（図９）から特徴を識別する。例えば、特徴抽出器９０６は、仮想シーン２０２（図２）の仮想ユーザ１０２の骨格が垂直面ではなく水平面に横たわっていると判断する、または仮想シーン２０２が、仮想ユーザ１０２にビームを当てるために仮想ユーザ１０２の骨格の上に仮想ドローン２０４を含むと判断する、または「私は死にそうだ」または「私は死んでいる」などの言葉が仮想シーン２０２で仮想ユーザ１０２によって発声されたと判断する、またはそれらの組み合わせで仮想シーン２０２における仮想ユーザ１０２の死亡を判断する。別の例として、特徴抽出器９０６は、仮想シーン２０２内の仮想ユーザ１０２の仮想健康状態の健康レベルがゼロに低下したと判断して、健康レベルが所定の閾値未満に低下したと判断する。

方法１０００の動作１００４は、動作１００２の後に発生する。動作１００４において、特徴分類器９０８は、ゲームイベントデータ５１０及び５０４から抽出された特徴を分類する。例えば、特徴分類器９０８は、仮想ユーザ１０２の骨格が水平面に横たわっているので、仮想ユーザ１０２が死亡したと判断する。別の例として、特徴分類器９０８は、仮想シーン２０２が仮想ユーザ１０２の骨格の上に仮想ドローン２０４を含むので、仮想ユーザ１０２が死亡したと判断する。さらに別の例として、特徴分類器９０８は、仮想シーン２０２が、仮想シーン２０２で仮想ユーザ１０２によって発声された同じ文に単語「Ｉ（私）」及び「ｄｅａｄ（死んでいる）」、または「Ｉ（私）」及び「ｄｉｅ（死ぬ）」を含むため、仮想ユーザ１０２が死亡したと判断する。別の例として、特徴分類器９０８は、仮想シーン２０２の仮想ユーザ１０２の健康レベルが所定の閾値未満に低下したため、仮想ユーザ１０２の健康状態が低いと判断する。

方法１０００の動作１００６は、動作１００４の後に発生する。動作１００６において、モデル９１０は、シーケンスタイプのゲームイベントの数に基づいてトレーニングされて、次のゲームセッション中のシーケンスタイプのゲームイベントの発生確率を判断する。例えば、モデル９１０は、仮想ユーザ１０２が次のゲームセッション中に死亡する確率、または仮想ユーザ１０２の健康レベルが次のゲームセッション中に閾値未満に低下する確率を判断する。例示すると、仮想ユーザ１０２が過去１０回のゲームセッションのうち少なくとも６回で死亡したと判断すると、モデル９１０は、仮想ユーザ１０２が次のゲームセッション中に死亡する確率が高い、例えば、予め設定された閾値を超えると判断する。その一方で、仮想ユーザ１０２が過去１０回のゲームセッションのうち少なくとも６回、生き延びたと判断すると、モデル９１０は、仮想ユーザ１０２が次のゲームセッション中に死亡する確率が低い、例えば、予め設定された閾値未満であると判断する。

方法１０００の動作１００８が、動作１００６に続く。動作１００８は、プロセッサシステム５０５によって実行される。次のゲームセッション中にシーケンスタイプのゲームイベントが発生する確率が低いと判断すると、プロセッサシステム５０５は、動作１００８で、次のゲームセッションのためにコーチングセッション６０８を開始することを推奨しない。その一方で、次のゲームセッション中にシーケンスタイプのゲームイベントが発生する確率が高いと判断すると、プロセッサシステム５０５は、動作１００８で、次のゲームセッションのためにコーチングセッション６０８を開始することを推奨する。例えば、プロセッサシステム５０５は、メッセージを生成し、ディスプレイデバイス１に表示するためにメッセージをレンダリングする。メッセージは、ユーザ１がコーチングセッション６０８を開始したいかどうかをユーザ１にクエリする。別の例として、プロセッサシステム５０５は、ユーザ１がコーチングセッション６０８を開始したいかどうかをユーザ１に示すメッセージを含むオーディオデータを生成し、オーディオデータをヘッドフォン９１０（図９）に送信する。オーディオデータは、ヘッドフォン９１０によって音声としてユーザ１に出力される。

ディスプレイ画面１に表示されたメッセージを見る、またはヘッドフォン９１０によって音声として出力されるメッセージを聞くと、ユーザ１は、コーチングセッション６０８を開始することを示すために、ゲームコントローラ１の１つまたは複数のボタンを選択して入力信号を生成する。コーチングセッション６０８を開始することを示す入力信号を受信すると、プロセッサシステム５０５は、コーチングセッション６０８を開始する。例えば、プロセッサシステム５０５は、コーチングシーン７００（図７Ａ）またはコーチングシーン７５０（図７Ｂ）またはコーチングシーン７００及び８００の両方（図８Ａ）またはコーチングシーン７００及び８５０の両方（図８Ｂ）をディスプレイ画面１に表示するためにレンダリングする。その一方で、コーチングセッション６０８を開始しないことを示す入力信号を受信すると、プロセッサシステム５０５は、コーチングセッション６０８を開始しない。

図１１Ａは、プロセッサシステム５０５と、ディスプレイデバイス１１０６及びハンドヘルドコントローラ１１０８を含む複数のデバイスとの間の、ルータ及びモデム１１０４ならびにコンピュータネットワーク１１０２を介した通信を示すシステム１１００の実施形態の図である。ディスプレイデバイス１１０６の例には、ディスプレイデバイス１（図１）、ＬＣＤディスプレイデバイス、ＬＥＤディスプレイデバイス、プラズマディスプレイデバイス、ＨＭＤが含まれる。ハンドヘルドコントローラ１１０８の例には、タッチスクリーン、キーパッド、マウス、ゲームコントローラ１、及びキーボードが含まれる。ディスプレイデバイス１１０６及びハンドヘルドコントローラ１１０８のそれぞれは、ユーザ１によって使用される。また、ユーザ２～Ｎのそれぞれは、ハンドヘルドコントローラ１１０８と同じ構造及び機能を有するハンドヘルドコントローラと、ディスプレイデバイス１１０６と同じ構造及び機能を有するディスプレイデバイスとを使用する。ディスプレイデバイス１１０６及びハンドヘルドコントローラ１１０８は、クライアントデバイス６０２（図６）の例である。

システム１１００は、ルータ及びモデム１１０４、コンピュータネットワーク１１０２、及びプロセッサシステム５０５をさらに含む。システム１１００は、ヘッドフォン１１１０及びディスプレイデバイス１１０６も含む。ディスプレイデバイス１１０６は、ＬＣＤディスプレイ画面、ＬＥＤディスプレイ画面、またはプラズマディスプレイ画面などのディスプレイ画面１１１２を含む。ディスプレイデバイス１（図１）は、ディスプレイデバイス１１０６の一例である。コンピュータネットワーク１１０２の例には、インターネットまたはイントラネットまたはそれらの組み合わせが含まれる。ルータ及びモデム１１０４の例には、ゲートウェイ装置が含まれる。ルータ及びモデム１１０４の別の例には、ルータ装置及びモデム装置が含まれる。

ディスプレイ画面１１１２は、有線接続を介してルータ及びモデム１１０４に結合される。本明細書で使用される有線接続の例には、データをシリアル方式またはパラレル方式で、またはユニバーサルシリアルバス（ＵＳＢ）プロトコルを適用することによって転送する転送ケーブルが含まれる。

ハンドヘルドコントローラ１１０８は、コントロール１１１８、デジタル信号プロセッサシステム（ＤＳＰＳ）１１２０、及び通信デバイス１１２２を含む。コントロール１１１８は、通信デバイス１１２２に結合されたＤＳＰＳ１１２０に結合される。コントロール１１１８の例には、ボタン及びジョイスティックが含まれる。通信デバイス１１２２の例には、通信デバイス１１２２とルータ及びモデム１１０４との間で、Ｗｉ－Ｆｉ（商標）またはＢｌｕｅｔｏｏｔｈ（商標）などの無線プロトコルを使用した通信を可能にする通信回路が含まれる。

通信デバイス１１２２は、有線接続または無線接続を介してヘッドフォン１１１０に結合される。本明細書で使用される無線接続の例には、Ｗｉ－Ｆｉ（商標）またはＢｌｕｅｔｏｏｔｈ（商標）プロトコルなどの無線プロトコルを適用する接続が含まれる。また、通信デバイス１１２２は、無線接続を介してルータ及びモデム１１０４に結合される。無線接続の例には、Ｗｉ－Ｆｉ（商標）接続及びＢｌｕｅｔｏｏｔｈ（商標）接続が含まれる。ルータ及びモデム１１０４は、プロセッサシステム５０５に結合されたコンピュータネットワーク１１０２に結合される。

ゲームのプレイ中、プロセッサシステム５０５は、ゲームプログラム５２８を実行して、ゲームの１つまたは複数のゲーム状態から画像フレームデータを生成し、伝送制御プロトコル／インターネットプロトコル（ＴＣＰ／ＩＰ）などのネットワーク通信プロトコルを画像フレームデータに適用して、１つまたは複数のパケットを生成し、そのパケットをコンピュータネットワーク１１０２を介してルータ及びモデム１１０４に送信する。ルータ及びモデム１１０４のモデムは、コンピュータネットワーク１１０２から受信した１つまたは複数のパケットにネットワーク通信プロトコルを適用して、画像フレームデータを取得または抽出し、ルータ及びモデム１１０４のルータに画像フレームデータを提供する。ルータは、１つまたは複数のパケット内で受信された画像フレームデータに基づいて、ゲームの１つまたは複数の画像を表示するために、ルータとディスプレイ画面１１１２との間の有線接続を介して画像フレームデータをディスプレイ画面１１１２にルーティングする。

ゲームの１つまたは複数の画像の表示中に、ゲームレコーダ５０２は、ゲームイベントデータ５１０及び５０４を記録し、これを使用して、コーチングセッション６０８を生成する、または、モデル９１０をトレーニングする、またはそれらの組み合わせを行う。また、ゲームプログラム５２８の実行中、ハンドヘルドコントローラ１１０８のコントロール１１１８は、入力信号６１６、６２３、６３０、６３８、もしくは６４２、またはタイムラインスクラバー７３０のセグメントの選択を示す入力信号、またはＤＳＰＳ１１２０によって処理される、本明細書に記載される任意の他の入力信号などの入力信号を生成するために、ユーザ１によって選択または移動される。ＤＳＰＳ１１２０は、入力信号内の情報と同じ情報を有する処理された入力信号を出力するために、入力信号を測定、サンプリング、フィルタリング、もしくは増幅、またはそれらの組み合わせなどで処理する。例えば、ＤＳＰＳ１１２０は、ユーザ１によって選択されたゲームコントローラ１のボタンを識別する。別の例として、ＤＳＰＳ１１２０は、ゲームコントローラ１のジョイスティックが動かされたかどうか、またはゲームコントローラ１のボタンがユーザ１によって選択されたかどうかを識別する。処理された入力信号は、ＤＳＰＳ１１２０から通信デバイス１１２２に送信される。通信デバイス１１２２は、無線プロトコルを処理された入力信号に適用して、１つまたは複数の無線パケットを生成し、無線パケットをルータ及びモデム１１０４に送信する。無線パケットは、処理された入力信号に含まれる情報と同じ情報を含む。

ルータ及びモデム１１０４のルータは、通信デバイス１１２２から無線パケットを受信し、無線プロトコルを適用して、無線パケットから処理された入力信号を取得または抽出する。ルータ及びモデム６０４のルータは、処理された入力信号をルータ及びモデム６０４のモデムに提供する。モデムは、処理された入力信号にネットワーク通信プロトコルを適用し、１つまたは複数のネットワークパケットを生成する。例えば、モデムは、処理された入力信号が、ゲームプログラム５０６を実行しているプロセッサシステム５０２に送信されることを決定し、プロセッサシステム５０５のネットワークアドレスを１つまたは複数のネットワークパケット内に埋め込む。モデムは、コンピュータネットワーク１１０２を介してプロセッサシステム５０５に１つまたは複数のネットワークパケットを送信する。

プロセッサシステム５０５は、ルータ及びモデム１１０４から受信した１つまたは複数のネットワークパケットにネットワーク通信プロトコルを適用して、処理された入力信号内の情報を取得または抽出し、図６を参照して上記で説明した方法で情報を処理して、コーチングセッション６０８を開始する、またはコーチングセッション６０８の開始を推奨する（図６）。プロセッサシステム５０５は、出力信号６１８、６２４、もしくは６３４（図６）、または本明細書に記載される任意の他の出力信号、または本明細書に記載されるコーチングシーンの画像フレームデータを含む任意の他の出力信号、または本明細書に記載するオーディオデータを含む出力信号などの出力信号を生成し、ネットワーク通信プロトコルを出力信号に適用して、１つまたは複数のネットワークパケットを生成する。プロセッサシステム５０５は、コンピュータネットワーク１１０２を介して１つまたは複数のネットワークパケットをルータ及びモデム１１０４に送信する。

ルータ及びモデム１１０４のモデムは、コンピュータネットワーク１１０２を介して受信した１つまたは複数のネットワークパケットにネットワーク通信プロトコルを適用して、出力信号を取得または抽出する。ルータ及びモデム１１０４のルータは、無線プロトコルを出力信号に適用して、１つまたは複数の無線パケットを生成し、ハンドヘルドコントローラ１１０８の通信デバイス１１２２に無線パケットを送信する。ハンドヘルドコントローラ１１０８の通信デバイス１１２２は、ルータ及びモデム１１０４から受信した１つまたは複数の無線パケットに無線プロトコルを適用して、出力信号を取得または抽出し、ユーザ１に対して音声としてのオーディオデータの出力のために出力信号をヘッドフォン１１１０に送信する。例えば、通信デバイス１１２２は、ユニバーサルシリアルバス（ＵＳＢ）プロトコルなどの有線プロトコルを適用して、オーディオデータを有する１つまたは複数のパケットを生成し、１つまたは複数のパケットを有線接続を介してヘッドフォン１１１０に送信する。別の例として、通信デバイス１１２２は、無線プロトコルをオーディオデータに適用して、１つまたは複数の無線パケットを生成し、無線接続を介して１つまたは複数の無線パケットをヘッドフォン１１１０に送信する。

また、ルータ及びモデム１１０４のルータは、出力信号をディスプレイ画面１１１２に送信する。出力信号を受信すると、ディスプレイ画面１１１２は、出力信号の画像フレームデータに従って、１つまたは複数の画像フレームを表示する。

一実施形態では、通信デバイス１１２２は、ケーブルなどの有線接続を介してルータ及びモデム１１０４と通信する。

一実施形態では、ディスプレイ画面１１１２は、無線通信プロトコルを適用する通信デバイスなどの通信デバイスを介してルータ及びモデム１１０４に結合される。通信デバイスは、ディスプレイデバイス１１０６の一部である。例えば、ディスプレイ画面１１１２は通信デバイスに結合される。ルータ１１０４は、コンピュータネットワーク１１０２を介して受信した画像フレームデータに無線プロトコルを適用して、１つまたは複数の無線パケットを生成し、１つまたは複数の無線パケットをディスプレイデバイス１１０６の通信デバイスに送信する。通信デバイスは、無線プロトコルを１つまたは複数の無線パケットに適用して、画像フレームデータを抽出または取得し、本明細書に記載するコーチングシーンの１つまたは複数の画像を表示するために、画像フレームデータをディスプレイ画面１１１２に送信する。

一実施形態では、ディスプレイデバイス１１０６及びハンドヘルドコントローラ１１０８は、スマートフォンまたはタブレットまたはラップトップなどのモバイルデバイス内に統合される。

図１１Ｂは、プロセッサシステム５０５がゲームコンソール１１２２内に実装できることを示すシステム１１２０の実施形態の図である。システム１１２０は、ディスプレイデバイス１１０６、ハンドヘルドコントローラ１１０８、ヘッドフォン１１１０、ゲームコンソール１１２２、ルータ及びモデム１１０４、コンピュータネットワーク１１０２、ならびにサーバシステム１１２４を含む。ゲームコンソール１１２４の例は、ビデオゲームコンソール、またはコンピュータ、または中央処理装置（ＣＰＵ）とグラフィックス処理装置（ＧＰＵ）の組み合わせである。例示すると、ゲームコンソール１１２４は、Ｓｏｎｙ ＰｌａｙＳｔａｔｉｏｎ（商標）またはＭｉｃｒｏｓｏｆｔ Ｘｂｏｘ（商標）である。ゲームコンソール１１２４は、プロセッサシステム５０５と、Ｗｉ－Ｆｉ（商標）通信デバイスまたはＢｌｕｅｔｏｏｔｈ（商標）通信デバイスなどの通信デバイス１１２６とを含む。一例として、本明細書で使用されるプロセッサシステムは、１つまたは複数のＣＰＵ及び１つまたは複数のＧＰＵを含み、１つまたは複数のＣＰＵは１つまたは複数のＧＰＵに結合される。

サーバシステム１１２４の例は、１つまたは複数のデータセンタ内に１つまたは複数のサーバを含む。例示すると、サーバはゲームコンソールまたはサーバブレードであってよい。別の例として、サーバシステム１１２４は、１つまたは複数の仮想マシンを含む。通信デバイス１１２６は、Ｗｉ－Ｆｉ（商標）接続またはＢｌｕｅｔｏｏｔｈ（商標）接続などの無線接続を介してディスプレイデバイス１１０６の通信デバイスに結合される。さらに、通信デバイス１１２６は、無線接続を介してハンドヘルドコントローラ１１０８の通信デバイス１１２２に結合される。通信デバイス１１２６は、プロセッサシステム５０５に結合される。プロセッサシステム５０５は、有線接続を介してルータ及びモデム１１０４に結合される。ルータ及びモデム１１０４は、コンピュータネットワーク１１０２を介してサーバシステム１１２４に結合される。

プロセッサシステム５０５は、サーバシステム１１２４の代わりに、またはサーバシステム１１２４と連携して、ディスプレイデバイス１１０６のディスプレイ画面１１１２に仮想シーンを表示するためにゲームを実行する。例えば、ゲームコントローラ１を介してユーザ１によって提供されるログイン情報の受信に応答して、プロセッサシステム５０５は、コンピュータネットワーク１１０２を介してサーバシステム１１２４に要求を送信し、ログイン情報が有効であるかどうかを判断する。ゲームコントローラ１から受信したログイン情報が有効であるというインジケーションを、コンピュータネットワーク１１０２を介してサーバシステム１１２４から受信すると、プロセッサシステム５０５は、ゲームコントローラ１及びゲームコンソール１１２２を介してユーザ１によるゲームのプレイのためにゲームプログラム５２８を実行する。その一方で、ゲームコントローラ１から受信したログイン情報が無効であるというインジケーションを、コンピュータネットワーク１１０２を介してサーバシステム１１２４から受信すると、プロセッサシステム５０５は、ゲームコントローラ１及びゲームコンソール１１２２を介したユーザ１によるプレイのためのゲームプログラム５２８を実行しない。

通信デバイス１１２６は、入力信号６１６、６２３、６３０、６３８、もしくは６４２（図６）、またはタイムラインスクラバー７３０のセグメントの選択を示す入力信号、または本明細書に記載の任意の他の入力信号などの入力信号を有する無線パケットをハンドヘルドコントローラ１１０８から受信し、無線プロトコルを無線パケットに適用して、無線パケットから入力信号を抽出し、入力信号をプロセッサシステム５０５に提供する。プロセッサシステム５０５は、出力信号６１８、６２４、もしくは６３４（図６）、または本明細書に記載の任意の他の出力信号、または本明細書に記載のコーチングシーンの画像フレームデータを含む任意の他の出力信号、または本明細書に記載のオーディオデータを含む出力信号など出力信号を、上記方法で入力信号に基づいて、生成する。例えば、プロセッサシステム５０５は、コーチングセッション６０８のためのデータを生成する。プロセッサシステム５０５は、出力信号を通信デバイス１１２６に提供する。通信デバイス１１２６は、無線プロトコルを出力信号に適用して１つまたは複数の無線パケットを生成し、ハンドヘルドコントローラ１１０８の通信デバイス１１２２、またはディスプレイデバイス１１０６、またはディスプレイデバイス１１０６及びハンドヘルドコントローラ１１０８の両方に無線パケットを送信する。

一実施形態では、プロセッサシステム５０５によって実行されるものとして本明細書に記載される機能の一部は、ゲームコンソール１１２２のプロセッサシステム５０５によって実行され、プロセッサシステム５０５によって実行されるものとして本明細書に記載される残りの機能は、代わりにサーバシステム１１２４によって実行される。

ある実施形態では、プロセッサシステム５０５は、有線接続を介してディスプレイデバイス１１０６に結合される。出力信号は、本明細書に記載されるコーチングシーン、または本明細書に記載される仮想シーンの１つまたは複数の画像をディスプレイデバイス１１０６に表示するために、有線接続を介してプロセッサシステムからディスプレイデバイス１１０６に送信される。

一実施形態では、ゲームはゲームコンソール１１２２に記憶され、ネットワーク化されていないゲームである。この実施形態では、ゲームはシングルプレイヤゲームまたはマルチプレイヤゲームであり、ゲームコンソール１１２２は、サーバシステム１１２４からゲームの任意の部分にアクセスするためにサーバシステム１１２４と通信することはない。

図１１Ｃは、コンピュータネットワーク１１０２とスマートフォン１１４２との間にルータ及びモデム１１０４を使用せずに、コンピュータネットワーク１１０２を介したスマートフォン１１４２とプロセッサシステム５０５との間の通信を示すシステム１１４０の実施形態の図である。システム１１４０は、スマートフォン１１４２、ヘッドフォン１１１０、セルラーネットワーク１１４４、コンピュータネットワーク１１０２、及びプロセッサシステム５０５を含む。スマートフォン１１４２は、クライアントデバイス６０２（図６）の一例である。

スマートフォン１１４２は、第４世代セルラー無線（４Ｇ）接続または第５セルラー無線（５Ｇ）接続などのセルラー無線接続を介してセルラーネットワーク１１４４に結合される。セルラーネットワーク１１４４は、プロセッサシステム５０５に結合されたコンピュータネットワーク１１０２に結合される。

スマートフォン１１４２は、入力信号６１６、６２３、６３０、６３８、もしくは６４２、またはタイムラインスクラバー７３０のセグメントの選択を示す入力信号、または本明細書に記載の任意の他の入力信号などの入力信号に、４Ｇまたは５Ｇプロトコルなどのセルラー通信プロトコルを適用することによって、１つまたは複数のパケットを生成し、その１つまたは複数のパケットをセルラーネットワーク１１４４に送信する。セルラーネットワーク１１４４は、１つまたは複数のパケットを受信し、セルラー通信プロトコルを適用して入力信号を取得または抽出し、ネットワーク通信プロトコルを入力信号に適用して１つまたは複数のネットワークパケットを生成する。セルラーネットワーク１１４４によって生成された１つまたは複数のネットワークパケットは、コンピュータネットワーク１１０２を介してプロセッサシステム５０５に送信される。プロセッサシステム５０５は、セルラーネットワーク１１０２から受信した１つまたは複数のネットワークパケットを上述の方法で処理して、出力信号６１８、６２４、もしくは６３４、または本明細書に記載の任意の他の出力信号、または本明細書に記載のコーチングシーンの画像フレームデータを含む任意の他の出力信号、または本明細書に記載のオーディオデータを含む出力信号などの出力信号を生成し、出力信号を含む１つまたは複数のネットワークパケットを、コンピュータネットワーク１１０２を介してセルラーネットワーク１１４４に送信する。

セルラーネットワーク１１４４は、プロセッサシステム５０５から受信した１つまたは複数のネットワークパケットにネットワーク通信プロトコルを適用して、出力信号を取得または抽出し、その出力信号にセルラー通信プロトコルを適用して、１つまたは複数のパケットを生成する。セルラーネットワーク１１０２は、出力信号を含む１つまたは複数のパケットをスマートフォン１１４２に送信する。

図１２Ａは、ヘッドフォン１１１０の実施形態の図である。ヘッドフォン１１１０は、通信デバイス１２０２、デジタル‐アナログ（Ｄ／Ａ）コンバータ１２０４、オーディオアンプ１２０６、及びスピーカ１２０８を含む。通信デバイス１２０２の一例は、有線プロトコルまたは無線プロトコルを適用する通信回路である。

通信デバイス１２０２は、ハンドヘルドコントローラ１１０８の通信デバイス１１２２（図１１Ａ）またはスマートフォン１１４２（図１１Ｃ）に結合される。デジタル‐アナログコンバータ１２０４は、通信デバイス１２０２に結合され、オーディオアンプ１２０６は、デジタル‐アナログコンバータ１２０４に結合される。また、スピーカ１２０８は、オーディオアンプ１２０６に結合される。

通信デバイス１２０２は、通信デバイス１１２２（図１１Ａ）またはスマートフォン１１４２（図１１Ｃ）からオーディオデータ８０５（図８Ｃ）を有する１つまたは複数のパケットを受信し、有線プロトコルまたは無線プロトコルなどのプロトコルを適用して、１つまたは複数のパケットからオーディオデータ８０５を抽出または取得する。通信デバイス１２０２は、オーディオデータ８０５をデジタル‐アナログコンバータ１２０４に送信する。デジタル‐アナログコンバータ１２０４は、オーディオデータ８０５をデジタル形式からアナログ形式に変換して、アナログオーディオ信号を出力する。デジタル‐アナログコンバータ１２０４は、オーディオデータ８０５に基づいて出力されたアナログオーディオ信号をオーディオアンプ１２０６に送信する。オーディオアンプ１２０６は、アナログオーディオ信号の振幅または大きさを増加させるなどの増幅を行って、電気信号である増幅されたオーディオ信号を出力する。スピーカ１２０８は、増幅されたオーディオ信号の電気エネルギーを音声エネルギーに変換して、ユーザ１（図１）が聞く音声を出力する。

一実施形態では、スピーカ１２０８の代わりに、複数のスピーカが使用される。

図１２Ｂは、ディスプレイ画面１１１２に、本明細書に記載のコーチングシーンまたは仮想シーンの画像を表示するためのディスプレイデバイス１２５０の実施形態の図である。ディスプレイデバイス１２５０は、ディスプレイデバイス１（図１）の一例である。ディスプレイデバイス１２５０は、通信デバイス１２５２及びディスプレイ画面１１１２を含む。ディスプレイデバイス１２５０の例には、ＬＣＤディスプレイデバイス、ＬＥＤディスプレイデバイス、及びプラズマディスプレイデバイスが含まれる。ディスプレイ画面１１１２の例には、ＬＣＤディスプレイ画面、ＬＥＤディスプレイ画面、及びプラズマディスプレイ画面が含まれる。例示すると、ディスプレイデバイス１２５０は、スマートフォン１１４２またはゲームコントローラ１またはタブレットまたはコンピュータのディスプレイデバイスである。コンピュータの例には、デスクトップコンピュータ及びラップトップコンピュータが含まれる。通信デバイス１２５２の例には、データの通信に有線または無線のプロトコルを適用する通信回路が含まれる。通信デバイス１２５２は、ディスプレイ画面１１１２に結合される。

オーディオデータ８０５（図８Ｃ）などの他の形式のデータを生成する代わりに、またはそれに加えて、プロセッサシステム５０５は、本明細書に記載するコーチングシーンまたは仮想シーンの画像フレームデータを生成する。プロセッサシステム５０５がオーディオデータ５０５を有する１つまたは複数のパケットを生成するのと同じ方法で、プロセッサシステム５０５または通信デバイス１１２６（図１１Ｂ）は、ネットワーク通信プロトコル、有線プロトコル、または無線プロトコルなどのプロトコルを画像フレームデータに適用することによって、１つまたは複数のパケットを生成し、その１つまたは複数のパケットをディスプレイデバイス１２５０に送信する。例えば、図１１Ａを参照すると、プロセッサシステム５０５は、ネットワーク通信プロトコルを画像フレームデータに適用して、１つまたは複数のネットワークパケットを生成し、コンピュータネットワーク１１０２を介して１つまたは複数のネットワークパケットをルータ及びモデム１１０４に送信する（図１１Ａ）。ルータ及びモデム１１０４は、ルータ及びモデム１１０４がオーディオデータ８０５を有する１つまたは複数のネットワークパケットを処理するのと同じ方法で、画像フレームデータを有する１つまたは複数のネットワークパケットを処理して、１つまたは複数のネットワークパケットから画像フレームデータを取得し、無線プロトコルを画像フレームデータに適用して、１つまたは複数の無線パケットを生成し、１つまたは複数の無線パケットを通信デバイス１２５２に送信する。別の例として、図１１Ｂを参照すると、ゲームコンソール１１２２の通信デバイス１１２６は、無線プロトコルを画像フレームデータに適用して、１つまたは複数の無線パケットを生成し、無線パケットをディスプレイデバイス１２５０の通信デバイス１２５２に送信する。別の例として、図１１Ｃを参照すると、セルラーネットワーク１１４４は、プロセッサシステム５０５からコンピュータネットワーク１１０２を介して画像フレームデータを有する１つまたは複数のネットワークパケットを受信し、ネットワーク通信プロトコルを適用して、１つまたは複数のネットワークパケットから画像フレームデータを抽出し、画像フレームデータにセルラー通信プロトコルを適用して、１つまたは複数のパケットを生成する。セルラーネットワーク１１４４は、画像フレームデータを有する１つまたは複数のパケットをスマートフォン１１４２に送信する。

図１２Ｂを再び参照すると、通信デバイス１１５２は、画像フレームデータを有する１つまたは複数のパケットを受信し、セルラー通信プロトコル、有線プロトコル、または無線プロトコルなどのプロトコルを適用して、１つまたは複数のパケットから画像フレームデータを抽出または取得し、画像フレームデータをディスプレイ画面１１１２に送信する。画像フレームデータを受信すると、ディスプレイ画面１１１２は、本明細書に記載するコーチングシーンまたは仮想シーンを表示する。

図１３は、本開示の実施態様による、クラウドビデオゲームをクライアントデバイスにストリーミングするために実行される様々な動作を概念的に示すフロー図である。クライアントデバイスの例には、ゲームコントローラ、スマートフォン、ゲームコンソール、及びコンピュータが含まれる。ゲームサーバ１３０２は、ビデオゲームを実行し、生の（圧縮されていない）ビデオ１３０４及びオーディオ１３０６を生成する。ゲームイベントデータ５１０またはゲームイベントデータ５０４またはそれらの組み合わせは、ビデオ１００４及びオーディオ１３０６の組み合わせの記録の一例である。ゲームサーバ１３０２は、プロセッサシステム５０５の一例である。ビデオ１３０４及びオーディオ１３０６は、例示の図の参照番号１３０８に示されるように、ストリーミングのためにキャプチャされ、符号化される。符号化により、ビデオ及びオーディオのストリームが圧縮されて、帯域幅の使用量は低減され、ゲーム体験は最適化される。符号化形式の例には、Ｈ．２６５／ＭＰＥＧ－Ｈ、Ｈ．２６４／ＭＰＥＧ－４、Ｈ．２６３／ＭＰＥＧ－４、Ｈ．２６２／ＭＰＥＧ－２、ＷＭＶ、ＶＰ６／７／８／９、等が含まれる。

符号化されたオーディオ１３１０及び符号化されたビデオ１３１２は、コンピュータネットワーク１１０２（図１１Ａ）の一例であるコンピュータネットワーク１３２０を介して送信する目的で、参照番号１３１４に示されるように、ネットワークパケットにさらにパケット化される。一部の実施形態では、ネットワークパケット符号化プロセスは、データ暗号化プロセスも採用することによって、データセキュリティを強化する。例示の実施態様では、オーディオパケット１３１６及びビデオパケット１３１８は、コンピュータネットワーク１３２０を介してトランスポートするために生成される。

ゲームサーバ１３０２はさらに、触覚フィードバックデータ１３２２を生成し、これもネットワーク送信のためにネットワークパケットにパケット化される。例示の実施態様では、触覚フィードバックパケット１３２４が、コンピュータネットワーク１３２０を介したトランスポートのために生成される。

生のビデオ及びオーディオと触覚フィードバックデータとを生成する前述の動作が、データセンタのゲームサーバ１３０２で実行され、ビデオ及びオーディオを符号化する動作、ならびに符号化されたオーディオ／ビデオ及び触覚フィードバックデータをトランスポートするためのパケット化の動作は、データセンタのストリーミングエンジンによって行われる。参照番号１３２０に示されるように、オーディオパケット、ビデオパケット、及び触覚フィードバックパケットは、コンピュータネットワークを介してトランスポートされる。参照番号１３２６に示されるように、オーディオパケット１３１６、ビデオパケット１３１８、及び触覚フィードバックパケット１３２４は、クライアントデバイス６０２（図６）によって分解され、例えば、解析されて、符号化されたオーディオ１３２８、符号化されたビデオ１３３０、及び触覚フィードバックデータ１３２２をクライアントデバイス６０２でネットワークパケットから抽出する。データが暗号化されている場合、データの解読も行われる。次に、符号化されたオーディオ１３２８及び符号化されたビデオ１３３０は、参照番号１３３４に示されるように、クライアントデバイスにより復号されて、クライアントデバイス６０２のディスプレイデバイス１３４０にレンダリングするためのクライアント側の生のオーディオ及びビデオデータが生成される。触覚フィードバックデータ１３２２は、クライアントデバイス６０２のプロセッサによって処理されて、コントローラデバイス１３４２で、または、例えば、ＨＭＤ等の、触覚効果をレンダリングすることができる他のインタフェースデバイスで、触覚フィードバック効果を生成する。コントローラデバイス１３４２は、ゲームコントローラ１の一例である。触覚効果の一例は、コントローラデバイス１３４２の振動またはランブルである。

当然ながら、ビデオゲームはユーザ入力に応答し、その結果、ユーザ入力の伝送及び処理について上述したのと同様の手順フローであるが、方向がクライアントデバイスからサーバへと逆である手順フローが実行される。図示のように、コントローラデバイス１３４２、または、例えば、ユーザ１の身体部分などの別の入力デバイス、またはそれらの組み合わせは、入力データ１３４８を生成する。制御入力信号６１６、６２３、６３０、６３８、及び６４２（図６）のいずれも、入力データ１３４８の一例である。この入力データ１３４８は、コンピュータネットワーク１３２０を介してデータセンタにトランスポートするために、クライアントデバイスでパケット化される。入力データパケット１３４６は、ゲームサーバ１３０２により解凍及び再構築されて、データセンタ側で入力データ１３４８を定義する。入力データ１３４８は、ゲームサーバ１３０２に供給され、ゲームサーバ１３０２は、入力データ１３４８を処理して、ゲームのゲーム状態を生成する。

オーディオパケット１３１６、ビデオパケット１３１８、及び触覚フィードバックパケット１３２４のコンピュータネットワーク１３２０を介したトランスポート中に、一部の実施形態では、コンピュータネットワーク１３２０を介したデータの伝送が監視されて、サービス品質が保証される。例えば、参照番号１３５０により示されるように、アップストリーム及びダウンストリームの両方のネットワーク帯域幅を含むコンピュータネットワーク１３２０のネットワーク条件が監視され、ゲームストリーミングは、利用可能な帯域幅の変化に応じて調整される。すなわち、参考番号１３５２により示されるように、ネットワークパケットの符号化及び復号は、現在のネットワーク条件に基づいて制御される。

図１４は、クライアントデバイスのディスプレイデバイスとインタフェースするために互換性があり、かつ、プロセッサシステム５０５（図５）等のゲームホストシステムとコンピュータネットワーク１３２０を介して通信できるゲームコンソール１４００の実施形態のブロック図である。ゲームコンソール１１２２（図１１）は、ゲームコンソール１４００の一例である。ゲームコンソール１４００は、データセンタＡ内に位置するか、またはユーザ１が居る場所に位置する。一部の実施形態では、ゲームコンソール１４００を使用して、ＨＭＤ１４０５上に表示されるゲームを実行する。ゲームコンソール１４００は、ゲームコンソール１４００に接続可能な様々な周辺機器を備えている。ゲームコンソール１４００は、セルプロセッサ１４２８、ダイナミックランダムアクセスメモリ（ＸＤＲＡＭ）ユニット１４２６、専用ビデオランダムアクセスメモリ（ＶＲＡＭ）ユニット１４３２を備えるリアリティシンセサイザグラフィックスプロセッサユニット１４３０、及び入力／出力（Ｉ／Ｏ）ブリッジ１４３４を有する。ゲームコンソール１４００はまた、Ｉ／Ｏブリッジ１４３４を通してアクセス可能な、ディスク１４４０ａから読み出すためのＢｌｕ Ｒａｙ（登録商標）ディスクリードオンリメモリ（ＢＤ－ＲＯＭ）光ディスクリーダ１４４０と、取り外し可能スロットインハードディスクドライブ（ＨＤＤ）１４３６とを有する。オプションで、ゲームコンソール１４００はまた、コンパクトフラッシュ（登録商標）メモリカード、及びメモリスティック（登録商標）メモリカードなどを読み出すためのメモリカードリーダ１４３８を含み、メモリカードリーダ１４３８は、Ｉ／Ｏブリッジ１４３４を介して同様にアクセス可能である。Ｉ／Ｏブリッジ１４３４はまた、ＵＳＢ２．０ポート１４２４と、ギガビットイーサネット（登録商標）ポート１４２２と、ＩＥＥＥ８０２．１１ｂ／ｇ無線ネットワーク（Ｗｉ－Ｆｉ（商標））ポート１４２０と、Ｂｌｕｅｔｏｏｔｈ（登録商標）接続を支援することができるＢｌｕｅｔｏｏｔｈ無線リンクポート１４１８とに接続する。

動作中、Ｉ／Ｏブリッジ１４３４は、ゲームコントローラからの、及びＨＭＤ１４０５からのデータを含む、無線、ＵＳＢ、及びイーサネット（登録商標）のデータすべてを扱う。例えば、ユーザ１が、ゲームプログラム５２８（図１１Ａ）など、ゲームコードの一部の実行によって生成されたゲームをプレイしているとき、Ｉ／Ｏブリッジ１４３４は、ゲームコントローラ１３４２または１４０３から、及び／またはＨＭＤ１４０５から、Ｂｌｕｅｔｏｏｔｈリンクを介して、本明細書に記載の入力データまたは入力信号を受信し、入力データをセルプロセッサ１４２８に向け、セルプロセッサ１４２８は、それに応じて、ゲームの現在の状態を更新する。一例として、ＨＭＤ１４０５内のカメラは、ユーザ１のジェスチャをキャプチャして、ジェスチャを表す画像を生成する。ゲームコントローラ１３４２は、ＨＨＣの一例であるゲームコントローラ１の一例である。

無線ポート、ＵＳＢポート、及びイーサネット（登録商標）ポートは、ゲームコントローラ１３４２及び１４０３とＨＭＤ１４０５とに加えて、例えば、リモートコントロール１４０４、キーボード１４０６、マウス１４０８、例えば、Ｓｏｎｙ Ｐｌａｙｓｔａｔｉｏｎ Ｐｏｒｔａｂｌｅ（登録商標）エンターテインメントデバイスなどのポータブルエンターテインメントデバイス１４１０、例えば、ＥｙｅＴｏｙ（登録商標）ビデオカメラ１４１２などのビデオカメラ、マイクロフォンヘッドセット１４１４，及びマイクロフォン１４１５などの他の周辺機器への接続性も提供する。ポータブルエンターテインメントデバイス１４１０は、ゲームコントローラの一例である。一部の実施形態では、このような周辺機器は、ゲームコンソール１４００に無線で接続され、例えば、ポータブルエンターテイメントデバイス１４１０は、Ｗｉ－Ｆｉ（商標）アドホック接続を介して通信し、マイクロフォンヘッドセット１４１４は、Ｂｌｕｅｔｏｏｔｈリンクを介して通信する。マイクロフォンヘッドセット１４１４は、ヘッドフォン８０３（図８Ｃ）の一例である。

これらのインタフェースの提供は、ゲームコンソール１４００がまた、デジタルビデオレコーダ（ＤＶＲ）、セットトップボックス、デジタルカメラ、ポータブルメディアプレイヤ、ボイスオーバインターネットプロトコル（ＩＰ）電話、携帯電話、プリンタ、及びスキャナなどの他の周辺機器に潜在的に対応可能であることを意味する。

さらに、レガシーメモリカードリーダ１４１６は、ＵＳＢポート１４２４を介してゲームコンソール１４００に接続され、ゲームコンソール１４００によって使用される種類のメモリカード１４４８の読み取りを可能にする。ゲームコントローラ１３４２及び１４０３とＨＭＤ１４０５とは、Ｂｌｕｅｔｏｏｔｈリンク１４１８を介してゲームコンソール１４００と無線で通信するように、またはＵＳＢポート１４２４に接続され、それによってゲームコントローラ１３４２及び１４０３とＨＭＤ１４０５とのバッテリを充電するための電力も受け取るように動作可能である。一部の実施形態では、ゲームコントローラ１３４２及び１４０３とＨＭＤ１４０５とはそれぞれ、メモリ、プロセッサ、メモリカードリーダ、例えば、フラッシュメモリなどの永久メモリ、例えば、照らされた球形部分、発光ダイオード（ＬＥＤ）、もしくは赤外線ライトなどの発光体、超音波通信用のマイクロフォン及びスピーカ、音響チャンバ、デジタルカメラ、内部時計、例えば、ゲームコンソール１４００に面する球形部分などの認識可能な形状、ならびに、例えば、Ｂｌｕｅｔｏｏｔｈ、Ｗｉ－Ｆｉなどのプロトコルを使用する無線デバイス等を含む。

ゲームコントローラ１３４２は、ユーザ１の両手で使用するように設計されたコントローラであり、ゲームコントローラ１４０３は、アタッチメントを備えた片手コントローラである。ＨＭＤ１４０５は、ユーザ１の頭の上及び／または目の前に収まるように設計されている。１つまたは複数のアナログジョイスティックと従来のコントロールボタンとに加えて、各ゲームコントローラ１３４２及び１４０３は、三次元位置決定の影響を受ける。同様に、ＨＭＤ１４０５は、３次元位置決定の影響を受ける。その結果、一部の実施形態では、ゲームコントローラ１３４２及び１４０３とＨＭＤ１４０５のユーザ１によるジェスチャ及び動きは、従来のボタンまたはジョイスティックのコマンドに加えて、またはそれらの代わりに、ゲームへの入力として変換される。オプションで、Ｐｌａｙｓｔａｔｉｏｎ（商標）ポータブルデバイスなどの他の無線対応の周辺機器がコントローラとして使用される。Ｐｌａｙｓｔａｔｉｏｎ（商標）ポータブルデバイスの場合、追加のゲームまたは制御情報（例えば、制御命令または命の数）は、デバイスのディスプレイ画面上に提供されてよい。一部の実施形態では、ダンスマット（図示せず）、ライトガン（図示せず）、ハンドル及びペダル（図示せず）、または特注コントローラなど、他の代替的または補助的な制御デバイスが使用される。特注コントローラの例には、即答クイズゲーム（同様に図示せず）用の１つまたはいくつかの大型ボタンが含まれる。

リモートコントロール１４０４も、Ｂｌｕｅｔｏｏｔｈリンク１４１８を介してゲームコンソール１４００と無線で通信するように動作可能である。リモートコントロール１４０４は、Ｂｌｕ Ｒａｙ（商標）ディスクＢＤ－ＲＯＭリーダ１４４０の動作に適した制御、及びディスクコンテンツのナビゲーションに適した制御を含む。

Ｂｌｕ Ｒａｙ（商標）ディスクＢＤ－ＲＯＭリーダ１４４０は、従来の記録済みＣＤ及び記録可能なＣＤと、いわゆるスーパーオーディオＣＤとに加えて、ゲームコンソール１４００に対応するＣＤ－ＲＯＭを読み出すように動作可能である。Ｂｌｕ Ｒａｙ（商標）ディスクＢＤ－ＲＯＭリーダ１４４０はまた、従来の記録済みのＤＶＤ及び記録可能なＤＶＤに加えて、ゲームコンソール１１００に対応するデジタルビデオディスクＲＯＭ（ＤＶＤ－ＲＯＭ）を読み出すように動作可能である。Ｂｌｕ Ｒａｙ（商標）ディスクＢＤ－ＲＯＭリーダ１４４０は、ゲームコンソール１４００に対応するＢＤ－ＲＯＭと、従来の記録済みのＢｌｕ－Ｒａｙディスク及び記録可能なＢｌｕ－Ｒａｙディスクとを読み出すようにさらに動作可能である。

ゲームコンソール１４００は、リアリティシンセサイザグラフィックスユニット１４３０を介して生成または復号されたオーディオ及びビデオを、ディスプレイ画面１４４４及び１つまたは複数のラウドスピーカ１４４６を有する、例えば、モニタまたはテレビセット等のディスプレイ及び音声出力デバイス１４４２にオーディオコネクタ１４５０及びビデオコネクタ１４５２を通して供給するように動作可能であり、または、Ｂｌｕｅｔｏｏｔｈ（登録商標）無線リンクポート１１１８を介してＨＭＤ１４０５のディスプレイデバイスにオーディオ及びビデオを供給するように動作可能である。オーディオコネクタ１４５０は、様々な実施形態において、従来のアナログ及びデジタル出力を含み、他方、ビデオコネクタ１４５２は、コンポーネントビデオ、Ｓビデオ、コンポジットビデオ、及び１つまたは複数の高解像度マルチメディアインタフェース（ＨＤＭＩ（登録商標））出力を様々に含む。結果として、ビデオ出力は、位相反転線（ＰＡＬ）または全国テレビジョン方式委員会（ＮＴＳＣ）などの形式、または、２２２０ｐ、１０８０ｉ、もしくは１０８０ｐの高解像度であってよい。オーディオ処理、例えば、生成、復号などは、セルプロセッサ１４０８によって行われる。ゲームコンソール１４００のオペレーティングシステムは、Ｄｏｌｂｙ（登録商標）５．１サラウンドサウンド、Ｄｏｌｂｙ（登録商標）シアターサラウンド（ＤＴＳ）、及びＢｌｕ－Ｒａｙ（登録商標）ディスクの７．１サラウンドサウンドの復号を支援する。ディスプレイ及び音声出力デバイス１４４２は、ディスプレイデバイス１（図１）の一例である。

一部の実施形態では、ビデオカメラ、例えば、ビデオカメラ１４１２等は、単一の電荷結合素子（ＣＣＤ）、ＬＥＤインジケータ、及びハードウェアベースのリアルタイムデータ圧縮及び符号化装置を備え、これにより、圧縮されたビデオデータは、ゲームコンソール１４００により復号されるために、画像内ベースのＭＰＥＧ（ｍｏｔｉｏｎ ｐｉｃｔｕｒｅ ｅｘｐｅｒｔ ｇｒｏｕｐ）規格などの適切な形式で送信される。ビデオカメラ１４１２のＬＥＤインジケータは、例えば、不利な照明条件などを知らせるために、ゲームコンソール１４００からの適切な制御データに応答して点灯するように配置される。ビデオカメラ１１１２の一部の実施形態は、ＵＳＢ、ＢｌｕｅｔｏｏｔｈまたはＷｉ－Ｆｉ通信ポートを介してゲームコンソール１４００に様々に接続する。ビデオカメラの様々な実施形態は、１つまたは複数の関連付けられたマイクロフォンを含み、オーディオデータも送信できる。ビデオカメラのいくつかの実施形態では、ＣＣＤは、高解像度ビデオキャプチャに適した解像度を有する。使用時、ビデオカメラによってキャプチャされた画像は、ゲーム内に組み込まれる、またはゲーム制御入力として解釈される。別の実施形態では、ビデオカメラは、赤外光を検出するのに適した赤外線カメラである。

様々な実施形態では、ゲームコンソール１４００の通信ポートのうちの１つを介して、例えば、ビデオカメラまたはリモートコントロールなどの周辺機器とのデータ通信が正常に行われるように、デバイスドライバなどの適切なソフトウェアが備えられる。

一部の実施形態では、ゲームコンソール１４００、ＨＨＣ、及びＨＭＤ１４０５を含む前述のシステムデバイスは、ＨＭＤ１４０５がゲームのインタラクティブセッションのビデオを表示及びキャプチャすることを可能にする。システムデバイスは、ゲームのインタラクティブセッションを開始し、インタラクティブセッションは、ユーザ１及び他のユーザとゲームとの間の双方向性を定義する。システムデバイスは、さらに、ユーザ１によって操作されるＨＨＣ及び／またはＨＭＤ１４０５の初期位置及び向きを決定する。ゲームコンソール１４００は、ユーザ１とゲームとの双方向性に基づいて、ゲームの現在の状態を決定する。システムデバイスは、ゲームとのユーザ１のインタラクティブセッション中、ＨＨＣ及び／またはＨＭＤ１４０５の位置及び向きを追跡する。システムデバイスは、ゲームの現在の状態と、ＨＨＣ及び／またはＨＭＤ１４０５の追跡された位置及び向きとに基づいて、インタラクティブセッションの観客ビデオストリームを生成する。一部の実施形態において、ＨＨＣは、ＨＨＣのディスプレイ画面上に観客ビデオストリームをレンダリングする。様々な実施形態において、ＨＭＤ１４０５は、ＨＭＤ１４０５のディスプレイ画面上に観客ビデオストリームをレンダリングする。

図１５を参照すると、ＨＭＤ１５０２のコンポーネントを示す図が示されている。ＨＭＤ１５０２は、ＨＭＤ１４０５（図１４）の一例である。ＨＭＤ１５０２は、プログラム命令を実行するためのプロセッサ１５００を含む。メモリデバイス１５０２は、記憶目的のために備えられる。メモリデバイス１５０２の例には、揮発性メモリ、不揮発性メモリ、またはそれらの組み合わせが含まれる。任意のユーザ１（図１）が見る視覚的インタフェース、例えば、保存データから生成された画像フレームの表示などを提供するディスプレイデバイス１５０４が含まれる。ＨＭＤ１５０２の電源として、バッテリ１５０６が備えられる。動作検出モジュール１５０８は、磁力計１５１０、加速度計１５１２、及びジャイロスコープ１５１４などの様々な種類の動作感知ハードウェアのうちのいずれかを含む。

加速度計は、加速度及び重力誘起反力を測定するデバイスである。単軸及び多軸モデルは、異なる方向における加速度の大きさ及び方向を検出するために利用可能である。加速度計は、傾き、振動、及び衝撃を感知するために使用される。一実施形態では、３つの加速度計１５１２は、重力の方向を提供するために使用され、重力の方向は、２つの角度、例えば、世界空間ピッチ及び世界空間ロールなどについての絶対基準を与える。

磁力計は、ＨＭＤ１５０２付近の磁場の強度及び方向を測定する。一部の実施形態では、３つの磁力計１５１０は、ＨＭＤ１５０２内で使用され、世界空間ヨー角度についての絶対基準を保証する。様々な実施形態では、磁力計は、±８０マイクロステラの地球の磁場にわたるように設計される。磁力計は金属の影響を受け、実際のヨーに対して単調なヨー測定を提供する。一部の実施形態において、磁場は実世界環境内の金属により歪み、これによりヨー測定に歪みが生じる。様々な実施形態において、この歪みは、他のセンサ、例えば、ジャイロスコープ１５１４、カメラ１５１６等からの情報を使用して較正される。一実施形態では、加速度計１５１２は、ＨＭＤ１５０２の傾き及びアジマスを取得するために磁力計１５１０と共に使用される。

ジャイロスコープは、角運動量の原理に基づいて、向きを測定または維持するデバイスである。一実施形態では、ジャイロスコープ１５１４に代わって、３つのジャイロスコープが、慣性感知に基づいて、各軸（ｘ、ｙ、及びｚ）に対する動きに関する情報を提供する。ジャイロスコープは、高速回転の検出を助ける。しかしながら、ジャイロスコープは、一部の実施形態では、絶対基準が存在しないと、時間の経過と共にドリフトする。これは、定期的なジャイロスコープのリセットをトリガし、リセットは、物体の視覚追跡、加速度計、磁力計などに基づく位置／向きの決定など、他の入手可能な情報を使用して行うことができる。

カメラ１５１６は、ユーザ１～３のいずれかを取り囲む実世界環境、例えば、部屋、小屋、自然環境などの画像及び画像ストリームをキャプチャするために備えられる。様々な実施形態では、例えば、ユーザ１がＨＭＤ１５０２のディスプレイ等を見ているとき、ユーザ１から離れる方に向いた、背面を向いたカメラ、及び、例えば、ユーザ１がＨＭＤ１５０２のディスプレイ等を見ているとき、ユーザ１の方を向いた、前面を向いたカメラを含む、複数のカメラが、ＨＭＤ１５０２に含まれる。さらに、いくつかの実施形態では、実世界環境内の物体の深度情報を感知するために、深度カメラ１５１８がＨＭＤ１５０２に含まれる。

ＨＭＤ１５０２は、オーディオ出力を提供するためのスピーカ１５２０を含む。また、一部の実施形態では、周囲環境からの音声、ユーザ１が行った発話などを含む、実世界環境からのオーディオをキャプチャするために、マイクロフォン１５２２が含まれる。ＨＭＤ１５０２は、ユーザ１に触覚フィードバックを提供するための触覚フィードバックモジュール１５２４、例えば、振動デバイスなどを含む。一実施形態では、触覚フィードバックモジュール１５２４は、ユーザ１に触覚フィードバックを提供するためのＨＭＤ１５０２の動き及び／または振動を発生させることができる。

ＬＥＤ１５２６は、ＨＭＤ１５０２のステータスの視覚インジケータとして備えられる。例えば、ＬＥＤは、バッテリレベル、電源オンなどを示してよい。ＨＭＤ１５０２がメモリカードからの情報を読み出し、メモリカードに情報を書き込むことを可能にするために、カードリーダ１５２８が備えられる。周辺機器の接続、または他のデバイス、例えば、他のポータブルデバイス、コンピュータなどへの接続を可能にするためのインタフェースの一例としてＵＳＢインタフェース１５３０が備えられる。ＨＭＤ１５０２の様々な実施形態では、様々な種類のインタフェースのいずれかが、ＨＭＤ１５０２のより高い接続性を可能にするために含まれてよい。

無線ネットワーク技術を介してインターネットへの接続を可能にするために、Ｗｉ－Ｆｉ（商標）モジュール１５３２が含まれる。また、ＨＭＤ１５０２は、他のデバイスへの無線接続を可能にするために、Ｂｌｕｅｔｏｏｔｈ（商標）モジュール１５３４を含む。一部の実施形態では、他のデバイスへの接続のために通信リンク１５３６も含まれる。一実施形態では、通信リンク１５３６は、無線通信に赤外線伝送を利用する。他の実施形態では、通信リンク１５３６は、他のデバイスとの通信のために、様々な無線または有線の伝送プロトコルのいずれかを利用する。

入力ボタン／センサ１５３８は、ユーザ１（図１）に入力インタフェースを提供するために含まれる。ボタン、タッチパッド、ジョイスティック、トラックボールなど、様々な種類の入力インタフェースのいずれかが含まれる。様々な実施形態では、超音波技術を介して他のデバイスとの通信を容易にするために、超音波通信モジュール１５４０がＨＭＤ１５０２に含まれる。

ユーザ１から生理学的データを検出できるようにバイオセンサ１５４２が含まれる。一実施形態では、バイオセンサ１５４２は、ユーザ１の皮膚を通してユーザ１の生体電気信号を検出するために、１つまたは複数の乾電極を含む。

ＨＭＤ１５０２の前述のコンポーネントは、ＨＭＤ１５０２内に含まれ得る単なる例示的なコンポーネントとして記載した。様々な実施形態では、ＨＭＤ１５０２は、上記の様々なコンポーネントの一部を含んでもよく、含まなくてもよい。

図１６は、情報サービスプロバイダ（ＩＮＳＰ）アーキテクチャの実施形態を示す。ＩＮＳＰ１３０２は、地理的に分散し、コンピュータネットワーク１６０６、例えばＬＡＮ、ＷＡＮ、またはそれらの組み合わせなどを介して接続されたユーザ１に多数の情報サービスを配信する。コンピュータネットワーク１１０２（図１１Ａ）は、コンピュータネットワーク１６０６の一例である。ＷＡＮの例にはインターネットが含まれ、ＬＡＮの例にはイントラネットが含まれる。ユーザ１はクライアントデバイス１６２０－１を操作し、別のユーザ２は別のクライアントデバイス１６２０－２を操作し、さらに別のユーザ３はさらに別のクライアントデバイス１６２０－３を操作する。クライアントデバイス１６２０－１は、クライアントデバイス６０２（図６）の一例である。

一部の実施形態では、各クライアントデバイス１６２０－１、１６２０－２、及び１６２０－３は、中央処理装置（ＣＰＵ）、ディスプレイ、及び入力／出力（Ｉ／Ｏ）インタフェースを含む。各クライアントデバイス１６２０－１、１６２０－２、及び１６２０－３の例には、パーソナルコンピュータ（ＰＣ）、携帯電話、ネットブック、タブレット、ゲームシステム、パーソナルデジタルアシスタント（ＰＤＡ）、ゲームコンソール１４００及びディスプレイデバイス、ＨＭＤ１５０２（図１５）、ゲームコンソール１４００及びＨＭＤ１５０２、デスクトップコンピュータ、ラップトップコンピュータ、スマートテレビなどが含まれる。一部の実施形態では、ＩＮＳＰ１６０２は、クライアントデバイスのタイプを認識し、採用する通信方法を調整する。

一部の実施形態では、ＩＮＳＰは、株価更新などの一種類のサービス、またはブロードキャスト媒体、ニュース、スポーツ、ゲームなどの様々なサービスを提供する。さらに、各ＩＮＳＰによって提供されるサービスは動的である、すなわち、任意の時点でサービスを追加することができる、または取り除くことができる。したがって、特定の個人に特定の種類のサービスを提供するＩＮＳＰは、時間の経過と共に変わり得る。例えば、クライアントデバイス１６２０－１がユーザ１の居住地にあるとき、クライアントデバイス１６２０－１は、クライアントデバイス１６２０－１の近くのＩＮＳＰによってサービスを提供され、ユーザ１が異なる都市に移動すると、クライアントデバイス１６２０－１は、異なるＩＮＳＰによってサービスを提供される。居住地のＩＮＳＰは、要求された情報及びデータを新しいＩＮＳＰに転送し、その結果、情報は、新しい都市までクライアントデバイス１６２０－１を「追いかけて」、データをよりクライアントデバイス１６２０－１に近くし、アクセスを容易にする。様々な実施形態では、クライアントデバイス１６２０－１の情報を管理するマスタＩＮＳＰと、マスタＩＮＳＰからの制御下でクライアントデバイス１６２０－１と直接的にインタフェースをとるサーバＩＮＳＰとの間に、マスタ－サーバ関係が確立される。一部の実施形態では、クライアントデバイス１６２０－１が世界中を移動すると、あるＩＳＰから別のＩＳＰにデータが転送され、これにより、クライアントデバイス１６２０－１にサービスを提供するのにより良い位置に存在するＩＮＳＰが、これらのサービスを届けるＩＮＳＰとなる。

ＩＮＳＰ１６０２は、コンピュータネットワーク１６０６を経由して顧客にコンピュータベースのサービスを提供するアプリケーションサービスプロバイダ（ＡＳＰ）１６０８を含む。ＡＳＰモデルを使用して提供されるソフトウェアは、オンデマンドソフトウェアまたはサービスとしてのソフトウェア（ＳａａＳ）とも称されることもある。顧客関係管理などのコンピュータベースのサービスへのアクセスを提供する簡単な形式は、ハイパーテキスト転送プロトコル（ＨＴＴＰ）などの標準プロトコルを使用することによる。アプリケーションソフトウェアは、ベンダのサーバに常駐し、ベンダによって提供される特殊用途クライアントソフトウェア、及び／または他のリモートインタフェース、例えば、シンクライアント等によって、ハイパーテキストマークアップ言語（ＨＴＭＬ）等を使用して、ウェブブラウザを通して各クライアントデバイス１６２０－１、１６２０－２、及び１６２０－３によってアクセスされる。

広い地理的領域で提供されるサービスは、多くの場合、クラウドコンピューティングを使用する。クラウドコンピューティングとは、動的にスケーラブルで、多くの場合、仮想化されたリソースがコンピュータネットワーク１６０６を介したサービスとして提供されるコンピューティング様式である。ユーザ１～３は、ユーザをサポートする「クラウド」のテクノロジインフラストラクチャの専門家である必要はない。一部の実施形態では、クラウドコンピューティングは、サービスとしてのインフラストラクチャ（ＩａａＳ）、サービスとしてのプラットフォーム（ＰａａＳ）、及びサービスとしてのソフトウエア（ＳａａＳ）などの異なるサービスに分けられる。クラウドコンピューティングサービスは、多くの場合、ウェブブラウザからアクセスされる一般的なビジネスアプリケーションをオンラインで提供し、一方で、ソフトウェア及びデータはサーバに記憶されている。クラウドという用語は、コンピュータネットワーク図におけるコンピュータネットワーク１６０６の描かれ方に基づいて、例えば、サーバ、ストレージ、及びロジックを使用する、コンピュータネットワーク１６０６のメタファーとして使用され、コンピュータネットワーク１６０６が隠し持つ複雑なインフラストラクチャの抽象的概念である。

さらに、ＩＮＳＰ１６０２は、本明細書ではゲーム処理サーバとも呼ばれるゲーム処理プロバイダ（ＧＰＰ）１６１０を含み、ゲーム処理プロバイダ（ＧＰＰ）１６１０は、シングル及びマルチプレイヤのビデオゲームをプレイするためにクライアントデバイス１６２０－１、１６２０－２、及び１６２０－３によって使用される。コンピュータネットワーク１６０６を介してプレイされるほとんどのビデオゲームは、ゲームサーバへの接続を介して動作する。通常、ゲームは、クライアントデバイス１６２０－１、１６２０－２、及び１６２０－３からデータを収集し、他のユーザが操作する他のクライアントにデータを配信する専用サーバアプリケーションを使用する。これは、ピアツーピア構成よりも効率的かつ効果的であるが、サーバアプリケーションをホストするために別個のサーバが使用される。一部の実施形態では、ＧＰＰ１６１０は、集中型ＧＰＰ１６１０にさらに依存することなく情報を交換するクライアントデバイス１６２０－１、１６２０－２、及び１６２０－３の間の通信を確立する。

専用ＧＰＰは、クライアントとは独立して実行するサーバである。このようなサーバは、通常、データセンタに配置された専用ハードウェア上で実行し、より多くの帯域幅及び専用処理能力を提供する。専用サーバは、大部分のＰＣベースのマルチプレイヤゲームのためのゲームサーバをホストする方法である。大規模なマルチプレイヤオンラインゲームは、通常、ゲームタイトルを所有しているソフトウェア会社がホストする専用サーバ上で実行し、専用サーバでコンテンツを制御及び更新できる。

ブロードキャスト処理サーバ（ＢＰＳ）１６１２は、本明細書ではブロードキャスト処理プロバイダとも呼ばれ、オーディオまたはビデオ信号を視聴者に配信する。非常に狭い範囲の視聴者へのブロードキャストは、ナローキャストと呼ばれることもある。ブロードキャスト配信の最後の区間は、信号がクライアントデバイス１６２０－１、１６２０－２、及び１６２０－３にどのように到達するかであり、一部の実施形態では、信号は、ラジオ局もしくはテレビ局と同様に無線でアンテナ及び受信機に、またはケーブルテレビもしくはケーブルラジオもしくは局を介した「ワイヤレスケーブル」を通して配信される。コンピュータネットワーク１６０６はまた、様々な実施形態において、信号及び帯域幅の共有を可能にするマルチキャスティングを用いて特に、無線信号またはテレビ信号のいずれかをクライアントデバイス１６２０－１、１６２０－２、及び１６２０－３にもたらす。歴史的に、ブロードキャストは、いくつかの実施形態では、地理的領域、例えば、全国放送、地域放送などによって区切られていた。しかしながら、高速インターネットの普及により、コンテンツは世界のほぼ全ての国に到達できるので、ブロードキャストは地理によって規定されない。

ストレージサービスプロバイダ（ＳＳＰ）１６１４は、コンピュータストレージ空間及び関連する管理サービスを提供する。ＳＳＰ１６１４は、定期的なバックアップ及びアーカイブも提供する。ストレージをサービスとして提供することにより、クライアントデバイス１６２０－１、１６２０－２、及び１６２０－３は、サービスとしてストレージが使用されない場合と比較して、より多くのストレージを使用する。別の大きな利点は、ＳＳＰ１６１４がバックアップサービスを含み、クライアントデバイス１６２０－１、１６２０－２、及び１６２０－３は、ハードドライブに障害が発生してもデータが失われないことである。さらに、一部の実施形態では、複数のＳＳＰは、クライアントデバイス１６２０－１、１６２０－２、及び１６２０－３から受信したデータの全体的または部分的なコピーを有し、クライアントデバイス１６２０－１、１６２０－２、及び１６２０－３が配置されている場所やクライアントのタイプに関係なく、クライアントデバイス１６２０－１、１６２０－２、及び１６２０－３が、効率的な方法でデータにアクセスするのを可能にする。例えば、ユーザ１は、自宅のコンピュータによって個人ファイルにアクセスし、ユーザ１が移動している間は携帯電話によって個人ファイルにアクセスする。

通信プロバイダ１６１６は、クライアントデバイス１６２０－１、１６２０－２、及び１６２０－３への接続性を提供する。通信プロバイダ１６１６の一種は、コンピュータネットワーク１６０６へのアクセスを提供するインターネットサービスプロバイダ（Ｉ６Ｐ）である。ＩＳＰは、ダイヤルアップ、デジタル加入者線（ＤＳＬ）、ケーブルモデム、ファイバ、無線、または専用の高速インターコネクトなど、インターネットプロトコルデータグラムの供給に適したデータ伝送技術を使用してクライアントデバイス１６２０－１、１６２０－２、及び１６２０－３を接続する。通信プロバイダ１６１６は、一部の実施形態では、電子メール、インスタントメッセージング、及びショートメッセージサービス（ＳＭＳ）テキストなどのメッセージングサービスも提供する。別の種類の通信プロバイダは、コンピュータネットワーク１６０６への直接のバックボーンアクセスを提供することによって帯域幅またはネットワークアクセスを販売するネットワークサービスプロバイダ（ＮＳＰ）である。ネットワークサービスプロバイダの例には、電気通信事業者、データ通信事業者、無線通信プロバイダ、インターネットサービスプロバイダ、高速インターネットアクセスを提供するケーブルテレビ事業者などが含まれる。

データ交換部１６１８は、ＩＮＳＰ１３０２内のいくつかのモジュールを相互接続し、コンピュータネットワーク１６０６を介してこれらのモジュールをクライアントデバイス１６２０－１、１６２０－２、及び１６２０－３に接続する。データ交換部１６１８は、様々な実施形態において、ＩＮＳＰ１６０２のすべてのモジュールが近接している小さい領域をカバーする、または様々なモジュールが地理的に分散しているときには大きな地理的領域をカバーする。例えば、データ交換部１６０２は、データセンタのキャビネット内の高速のギガビットイーサネット（登録商標）、または大陸間仮想ＬＡＮを含む。

一部の実施形態では、サーバシステムとクライアントデバイス１６２０－１～１６２０－３との間の通信は、無線技術を使用して容易にされてよい。このような技術は、例えば、５Ｇ無線通信技術を含み得る。５Ｇは第５世代のセルラーネットワーク技術である。５Ｇネットワークはデジタルセルラーネットワークであり、ここでは、プロバイダがカバーするサービスエリアが、セルと呼ばれる小さい地理的領域に分割される。音声と画像を表すアナログ信号は、電話でデジタル化され、アナログ－デジタルコンバータによって変換され、ビットのストリームとして伝送される。セル内のすべての５Ｇ無線デバイスは、セル内のローカルアンテナアレイ及び低パワー自動化送受信装置（送信部及び受信部）を用いて電波によって通信し、この通信は、他のセル内で再使用される周波数のプールから送受信装置によって割り当てられた周波数チャネル上で行われる。ローカルアンテナは、高帯域幅光ファイバまたは無線バックホール接続によって、電話網及びインターネットに接続される。他のセルネットワークと同様に、１つのセルから別のセルに移動するモバイルデバイスは、新しいセルに自動的に転送される。当然ながら、５Ｇネットワークは単に通信ネットワークタイプの一例であり、本開示の実施形態は、前の世代の無線または有線通信、ならびに５Ｇの後に来る後の世代の有線または無線技術を用いてもよい。

様々な実施形態において、本明細書に記載される一部の実施形態の１つまたは複数の特徴は、本明細書に記載される残りの１つまたは複数の実施形態の１つまたは複数の特徴と組み合わされることに留意されたい。

本開示に記載の実施形態は、ハンドヘルドデバイス、マイクロプロセッサシステム、マイクロプロセッサベースもしくはプログラム可能な消費者向け電気製品、小型コンピュータ、メインフレームコンピュータなどを含む様々なコンピュータシステム構成で実践されてよい。一実施態様では、本開示に記載の実施形態は、有線または無線ネットワークを通してリンクされたリモート処理デバイスによってタスクが行われる分散コンピューティング環境で実践される。

前述の実施形態を念頭に置いて、一実施態様では、本開示に記載の実施形態は、コンピュータシステムに記憶されたデータを伴う様々なコンピュータ実施動作を採用することを理解されたい。これらの動作は、物理量の物理的操作を要する動作である。本開示に記載の実施形態の一部を形成する本明細書に記載される動作のうちのいずれも、有用な機械動作である。本開示に記載の一部の実施形態はまた、これらの動作を行うためのデバイスまたは装置に関する。装置は、必要な目的のために特別に構築される、または装置は、コンピュータに記憶されたコンピュータプログラムにより選択的に起動または構成される汎用コンピュータである。具体的には、一実施形態において、様々な汎用マシンは、本明細書の教示に従って書かれたコンピュータプログラムと共に使用される、または、必要な動作を行うためにさらに特化した装置を構築するほうがより好都合な場合がある。

ある実施態様では、本開示に記載の一部の実施形態は、コンピュータ可読媒体上のコンピュータ可読コードとして具体化される。コンピュータ可読媒体は、後にコンピュータシステムにより読み出されるデータを記憶する任意のデータストレージデバイスである。コンピュータ可読媒体の例には、ハードドライブ、ネットワーク接続型ストレージ（ＮＡＳ）、ＲＯＭ、ＲＡＭ、コンパクトディスクＲＯＭ（ＣＤ－ＲＯＭ）、記録可能ＣＤ（ＣＤ－Ｒ）、書き換え可能ＣＤ（ＣＤ－ＲＷ）、磁気テープ、光学データストレージデバイス、非光学データストレージデバイスなどが含まれる。例として、コンピュータ可読媒体は、コンピュータ可読コードが分散方式で記憶及び実行されるように、ネットワークで結合されたコンピュータシステム上に分散されたコンピュータ可読有形媒体を含む。

さらに、上記の実施形態の一部は、ゲーム環境に関して記載されているが、一部の実施形態では、ゲームの代わりに、他の環境、例えば、ビデオ会議環境などが使用される。

方法の動作を特定の順序で記載したが、当然ながら、オーバーレイ動作の処理が所望の方法で実行される限り、動作間に他のハウスキーピング動作が実行されてよく、または動作がわずかに異なる時間に起こるように調整されてよく、またはシステム内に動作を分散することで、処理に関連する様々な間隔で処理動作が起こることを可能にしてよい。

本開示に記載の前述の実施形態は、理解を明確にするためにある程度詳細に説明したが、添付の特許請求の範囲内で特定の変更及び修正を実施できることは明らかであろう。したがって、本実施形態は、限定ではなく例示としてみなされるべきであり、本実施形態は、本明細書に記載される詳細に限定されるべきではなく、添付の請求項の範囲及び均等物の中で修正されてよい。

Claims (20)

1. セルフコーチングインタフェースを処理する方法であって、
   ユーザによるゲームプレイ中のゲームプレイイベントを識別することであって、前記ゲームプレイイベントは、ゲームが前記ユーザによってプレイされている間にスキル閾値を下回ったとしてタグ付けされる、前記識別することと、
   前記ゲームプレイイベントの時間窓の記録を生成することと、
   前記ゲームプレイイベントの前記記録のためにゲームテレメトリを処理することであって、前記ゲームテレメトリを使用して、前記時間窓の前記ゲームプレイイベントの前のインタラクティブアクションの進行を識別する、前記処理することと、
   前記セルフコーチングインタフェースでオーバーレイコンテンツを生成することと
   を含み、前記オーバーレイコンテンツは、前記セルフコーチングインタフェースを介して表示されたときに前記記録の１つまたは複数の画像フレームに適用され、前記オーバーレイコンテンツは、前記記録の再生中に、前記１つまたは複数の画像フレームに表示され、
   前記オーバーレイコンテンツは、前記タグ付けされたゲームプレイイベントの前記スキル閾値を超えるように前記ユーザのスキルを向上させるためのヒントを提供する、
   方法。
2. 前記時間窓が、前記ゲームプレイイベントの前の期間、前記ゲームプレイイベントの時点、及び前記ゲームプレイイベントの後の期間を含む、請求項１に記載の方法。
3. 前記時間窓が、前記ゲームプレイイベント及び前記ゲームプレイイベントの前に発生する他のゲームプレイイベントと共に変化する、請求項１に記載の方法。
4. 前記ゲームテレメトリが、前記ユーザの前記スキルが前記閾値を下回る理由を識別するために処理される、請求項１に記載の方法。
5. 前記ゲームテレメトリが、前記時間窓の前記記録にない仮想オブジェクトを識別するために処理される１つまたは複数のゲーム状態を含む、請求項４に記載の方法。
6. 前記インタラクティブアクションの進行が、前記時間窓の前記記録にない仮想オブジェクトの動きを含む、請求項１に記載の方法。
7. 前記オーバーレイコンテンツが、前記仮想オブジェクトを含む、請求項６に記載の方法。
8. 前記オーバーレイコンテンツが、前記仮想オブジェクトの周囲に配置されるフレームを含む、請求項６に記載の方法。
9. タイムラインスクラバーを生成することと、
   前記タイムラインスクラバーのセグメントの選択を受信することと、
   前記セグメントの選択に基づいて、前記セルフコーチングインタフェースと前記オーバーレイコンテンツとを変更することと
   をさらに含む、請求項１に記載の方法。
10. 前記セルフコーチングインタフェースと共に表示するための別のセルフコーチングインタフェースを生成することをさらに含み、前記別のセルフコーチングインタフェースは、別のユーザのゲームプレイに関連付けられ、前記ゲームプレイイベントと同じタイプである、請求項１に記載の方法。
11. 前記セルフコーチングインタフェースと共に表示するための別のセルフコーチングインタフェースを生成することをさらに含み、前記別のセルフコーチングインタフェースは、前記ユーザのゲームプレイの異なるゲームセッションに関連付けられ、前記ゲームプレイイベントと同じタイプである、請求項１に記載の方法。
12. 前記オーバーレイコンテンツが前記セルフコーチングインタフェース上にオーバーレイされるコーチングセッションを開始するかどうかを判断するように人工知能モデルをトレーニングすることをさらに含む、請求項１に記載の方法。
13. 前記セルフコーチングインタフェースが、前記ゲームプレイイベントの発生中に仮想シーンに表示される１つまたは複数の仮想オブジェクトを除外する、請求項１に記載の方法。
14. 前記セルフコーチングインタフェースが、前記ゲームプレイイベントの発生中に仮想シーンに表示されない１つまたは複数の仮想オブジェクトを含む、請求項１に記載の方法。
15. セルフコーチングインタフェースを処理するためのサーバシステムであって、
    プロセッサであって、
    ユーザによるゲームプレイ中のゲームプレイイベントを識別することであって、前記ゲームプレイイベントは、ゲームが前記ユーザによってプレイされている間にスキル閾値を下回ったとしてタグ付けされる、前記識別することと、
    前記ゲームプレイイベントの時間窓の記録を生成することと、
    前記ゲームプレイイベントの前記記録のためのゲームテレメトリを処理することであって、前記ゲームテレメトリが、前記時間窓の前記ゲームプレイイベントの前のインタラクティブアクションの進行を識別するために使用される、前記処理することと、
    オーバーレイコンテンツを前記セルフコーチングインタフェースで生成することであって、前記オーバーレイコンテンツは、前記セルフコーチングインタフェースを介して表示されたときに前記記録の１つまたは複数の画像フレームに適用され、前記オーバーレイコンテンツは、前記記録の再生中に、前記１つまたは複数の画像フレームに表示される、前記生成することと、
    を行うように構成され、
    前記オーバーレイコンテンツは、前記タグ付けされたゲームプレイイベントの前記スキル閾値を超えるように前記ユーザのスキルを向上させるためのヒントを提供する、
    前記プロセッサと、
    前記ゲームプレイイベントの前記記録を記憶するために前記プロセッサに結合されたメモリデバイスと、を含む、サーバシステム。
16. 前記プロセッサが、前記セルフコーチングインタフェースと共に表示するための別のセルフコーチングインタフェースを生成するように構成され、前記別のセルフコーチングインタフェースは、別のユーザのゲームプレイに関連付けられ、前記ゲームプレイイベントに関連する、請求項１５に記載のサーバシステム。
17. 前記プロセッサが、前記セルフコーチングインタフェースと共に表示するための別のセルフコーチングインタフェースを生成するように構成され、前記別のセルフコーチングインタフェースは、前記ユーザのゲームプレイの異なるゲームセッションと、前記ゲームプレイイベントとに関連付けられる、請求項１５に記載のサーバシステム。
18. 前記時間窓が、前記ゲームプレイイベント、及び前記ゲームプレイイベントの前に発生する他のゲームプレイイベントと共に変化する、請求項１５に記載の方法。
19. セルフコーチングインタフェースを処理するためのシステムであって、
    ゲームのプレイ中にゲームプレイイベントの生成を容易にするためにユーザによって使用されるように構成されたクライアントデバイスと、
    コンピュータネットワークを介して前記クライアントデバイスに結合されたサーバと
    を含み、前記サーバは、
    前記ゲームプレイイベントを識別することであって、前記ゲームプレイイベントは、ゲームが前記ユーザによってプレイされている間にスキル閾値を下回ったとしてタグ付けされる、前記識別することと、
    前記ゲームプレイイベントの時間窓の記録を生成することと、
    前記ゲームプレイイベントの前記記録のためのゲームテレメトリを処理することであって、前記ゲームテレメトリが、前記時間窓の前記ゲームプレイイベントの前のインタラクティブアクションの進行を識別するために使用される、前記処理することと、
    前記セルフコーチングインタフェースでオーバーレイコンテンツを生成することと、
    を行うように構成され、
    前記オーバーレイコンテンツは、前記セルフコーチングインタフェースを介して表示されたときに前記記録の１つまたは複数の画像フレームに適用され、前記オーバーレイコンテンツは、前記記録の再生中に、前記１つまたは複数の画像フレームに表示され、
    前記オーバーレイコンテンツは、前記タグ付けされたゲームプレイイベントの前記スキル閾値を超えるように前記ユーザのスキルを向上させるためのヒントを提供する、
    システム。
20. 前記サーバが、前記セルフコーチングインタフェースと共に表示するための別のセルフコーチングインタフェースを生成するように構成され、前記別のセルフコーチングインタフェースは、別のユーザのゲームプレイに関連付けられ、前記ゲームプレイイベントに関連する、請求項１９に記載のシステム。

Images