JP2023027017A - ジェスチャベーススキル検索 - Google Patents

Abstract

【課題】ジェスチャベーススキル検索のための方法を提供する。【解決手段】１つ以上の仮想アクションに関するマップがメモリに格納され得る。仮想アクションは、実世界環境で対応するアクションを実行することに関連付けられたデータ集合に関連付けられ得る。実世界環境でのユーザによるアクションに関するデータが取り込まれ得る。仮想環境内のユーザの現在の進捗レベルが特定される。現在の特定された進捗レベルは、１つ以上の使用可能な仮想アクションに関連付けられる。取り込まれたデータは、使用可能な仮想アクションのうちの特定された仮想アクションに対応し得、これは、マップにより示される、取り込まれたデータと、特定された仮想アクションに関連付けられたデータ集合とのマッチングに基づく。特定された仮想アクションに対応する命令の検索が、１つ以上のデータベースにおいて開始される。【選択図】なし

Description

本発明は、概して、ネットワークデバイスの検索に関する。より具体的には、本発明は、ゲーム内スキルのジェスチャベース検索に関する。

関連技術の説明
現在利用可能なデジタルゲームタイトルは、プレーヤが（それぞれのアバタまたはキャラクタを介して）様々な異なる種類のアクティビティに従事して、様々なゲーム内スキルを行使できる、様々な異なるゲーム内シナリオに対応する。例えば、レーシングゲームのタイトルでは、プレーヤの運転スキルが試され得、一方、一人称シューティングゲームのタイトルでは、プレーヤの照準精度が試され得、他の戦闘ゲームのタイトルでは、剣、ナイフ、斧、ハンマー、ショベル、魔法効果などの武器を伴うプレーヤのスキルが試され得る。同様に、様々な仮想地形では、プレーヤは、ゲーム環境内で水泳、登山、ジャンプ、及び他のアクションを介して自身のアバタを制御及びナビゲートすることが求められ得る。

プレーヤは通常、１つ以上の種類のゲームコントローラを使用して、自身のアバタを制御し得る。現在、様々なボタン、タッチパッド、センサ、マイクなどを様々な構成及びレイアウトで備えた様々な異なるコントローラ（及びコントローラ変更形態）が存在する。様々な種類のゲーム内の動き、操作、または他のゲーム内アクションの行使を実行するために、様々な組み合わせのユーザ入力（例えば一連または同時のボタン押下、タッチパッドジェスチャもしくは他のジェスチャ、口頭コマンド、または他の入力）が求められ得る。異なるゲームタイトルは異なるアクティビティを含み得るため、特定の入力の組み合わせが、異なるゲーム内の動きを生じる場合がある。さらに、入力の組み合わせを誤って入力すると、プレーヤが意図したものとは異なるゲーム内アクションを生じる場合がある。

ゲーム内アクション及びコントローラのこのような多様性及び複雑さは、プレーヤが新たな、またはなじみのないゲームタイトル、コントローラ、またはゲームコンソールシステムを紹介された時に、参入障壁となる。よって、初心者または経験の浅いプレーヤは、ヘルプまたは他の種類のガイダンスなしでは、ゲームプレイが難しく、苛立ちを感じ得る。しかし、このようなヘルプまたはガイダンスの検索は、プレーヤがゲーム内環境における仮想要素の語彙または名称に精通していない場合に生じ得る言語の壁により、複雑になり得る。プレーヤは、どのようにこのような検索を行うかも知らない場合がある。例えば、他のプレーヤがアクションを実行するのを（例えばゲーム内オブジェクトを使用するか否かを）見るだけでは、アクションもしくはオブジェクトの名称、またはこのようなアクションを自分で実行する方法は、プレーヤに必ずしも伝わらない。

従って、当技術分野では、ゲーム内スキルのジェスチャベース検索のための改善されたシステム及び方法が必要とされている。

本発明の実施形態は、ジェスチャベーススキル検索のためのシステム及び方法を含む。メモリは、１つ以上の仮想アクションに関するマップを格納し、各仮想アクションは、実世界環境で対応するアクションを実行することに関連付けられたデータ集合に関連付けられる。ジェスチャベース検索サーバは、実世界環境でのユーザによるアクションに関するデータを取り込む。ジェスチャベース検索サーバは、仮想環境内でのユーザの現在の進捗レベルを特定し、これは、１つ以上の使用可能な仮想アクションに関連付けられる。ジェスチャベース検索サーバは、取り込まれたデータが、使用可能な仮想アクションのうちの特定された仮想アクションに対応することを、マップにより示される、取り込まれたデータと、特定された仮想アクションに関連付けられたデータ集合とのマッチングに基づいて、判別する。ジェスチャベース検索サーバは、１つ以上のデータベースで、特定された仮想アクションに対応する命令を検索し始める。

ジェスチャベーススキル検索のためのシステムが実装され得る例示的なネットワーク環境を示す。 ジェスチャベーススキル検索のためのシステムにデータを提供するのに使用され得る例示的なユニフォームデータシステム（ＵＤＳ）を示す。 ジェスチャベーススキル検索のための例示的な方法を示すフローチャートである。 ジェスチャベーススキル検索を実行するのに使用され得る例示的なユーザデバイスのブロックレベル図である。 本発明の実施形態で使用され得る例示的な電子エンターテインメントシステムのブロック図である。

本発明の実施形態は、ジェスチャベーススキル検索のためのシステム及び方法を含む。メモリは、１つ以上の仮想アクションに関するマップを格納し、各仮想アクションは、実世界環境で対応するアクションを実行することに関連付けられたデータ集合に関連付けられる。ジェスチャベース検索サーバは、実世界環境でのユーザによるアクションに関するデータを取り込む。ジェスチャベース検索サーバは、仮想環境内でのユーザの現在の進捗レベルを特定し、これは、１つ以上の使用可能な仮想アクションに関連付けられる。ジェスチャベース検索サーバは、取り込まれたデータが、使用可能な仮想アクションのうちの特定された仮想アクションに対応することを、マップにより示される、取り込まれたデータと、特定された仮想アクションに関連付けられたデータ集合とのマッチングに基づいて、判別する。ジェスチャベース検索サーバは、１つ以上のデータベースで、特定された仮想アクションに対応する命令を検索し始める。

図１は、ジェスチャベーススキル検索のためのシステムが実装され得る例示的なネットワーク環境を示す。ネットワーク環境１００は、配信用のデジタルコンテンツ（例えばゲーム、他のアプリケーション及びサービス）を提供する１つ以上のコンテンツソースサーバ１１０と、１つ以上のコンテンツプロバイダサーバアプリケーションプログラムインターフェース（ＡＰＩ）１２０と、コンテンツ配信ネットワークサーバ１３０と、ジェスチャベース検索サーバ１４０と、１つ以上のユーザデバイス１５０Ａ～１５０Ｎとを含み得る。本明細書で説明されるサーバには、ネットワークインターフェース及びメディアインターフェース、非一時的コンピュータ可読ストレージ（メモリ）、並びにメモリに格納され得る命令を実行するため、またはメモリに格納され得る情報にアクセスするためのプロセッサなど、標準のハードウェアコンピューティングコンポーネントを含む当技術分野で周知の任意の種類のサーバが含まれ得る。複数のサーバの機能は、単一のサーバに統合され得る。前述のサーバ（または統合されたサーバ）のいずれも、特定のクライアント側の特性、キャッシュの特性、またはプロキシサーバの特性を呈し得る。これらの特性は、サーバの特定のネットワーク配置またはサーバの特定の構成に依存し得る。

コンテンツソースサーバ１１０は、配信可能な様々なデジタルコンテンツを維持し、提供し得る。コンテンツソースサーバ１１０は、任意のコンテンツプロバイダに関連付けられ得、コンテンツプロバイダは、自身のコンテンツを、通信ネットワークを介してアクセス可能にする。このようなコンテンツには、デジタルビデオ及びゲームだけでなく、他の種類のデジタルアプリケーション及びサービスも含まれ得る。このようなアプリケーション及びサービスには、ユーザデバイス１５０に提供され得る任意の様々な異なるデジタルコンテンツ及び機能が含まれ得る。コンテンツソースサーバ１１０の例として、ダウンロード可能なコンテンツ及び／またはストリーミングコンテンツを提供するインターネットウェブサイトが挙げられ得る。コンテンツソースサーバ１１０により提供されるコンテンツには、映画、ゲーム、静的／動的コンテンツ、写真、ソーシャルメディアコンテンツ、ソーシャルメディアウェブサイトなど、任意の種類のマルチメディアコンテンツが含まれ得る。ユーザデバイス１５０には、複数の異なる種類のコンピューティングデバイスが含まれ得る。いくつかの実施形態では、コンテンツデータは、コンテンツソースサーバ１１０からコンピューティングデバイスに送信され、次に、コンテンツデータは、コンピューティングデバイスにより、ユーザデバイス１５０の使用に適したフォーマットにレンダリングされる。

コンテンツソースサーバ１１０からのコンテンツは、コンテンツプロバイダサーバＡＰＩ１２０を介して提供され得、これにより、様々な種類のコンテンツソースサーバ１１０が、ネットワーク環境１００内の他のサーバ（例えばユーザデバイス１５０）と通信することが可能となる。コンテンツプロバイダサーバＡＰＩ１２０は、コンテンツを提供するコンテンツソースサーバ１１０、並びにユーザデバイス１５０の特定の言語、オペレーティングシステム、プロトコルなどに特化し得る。複数の異なる種類のコンテンツソースサーバ１１０を含むネットワーク環境１００では、同様に対応する数のコンテンツプロバイダサーバＡＰＩ１２０が存在し得、これにより、異なるユーザデバイス１５０にコンテンツ及び他のサービスを提供するための様々なフォーマット化、変換、並びに他のクロスデバイス及びクロスプラットフォームの通信プロセスが可能となり、異なるユーザデバイス１５０は、異なるオペレーティングシステム、プロトコルなどを使用して、このようなコンテンツを処理し得る。よって、様々な異なるユーザデバイス１５０と互換性があるように、異なるフォーマットのアプリケーション及びサービスが使用可能な状態にされ得る。

コンテンツソースサーバ１１０はまた、ソーシャルメディアアプリケーションに関連付けられたオンラインサーバを含み得、ソーシャルメディアアプリケーションは、ユーザのソーシャルコンタクトを特定するために、ユーザに１つ以上のソーシャルメディアグラフを提供するようにプログラムされ得る。これらのユーザは、ソーシャルコンタクトではない、またはユーザと社会的に関連付けられていない場合があるが、ユーザと１つ以上のビデオゲームをプレイした可能性がある。友達リストは、各友達が所有するゲームの描写、友達のオンラインステータスの特定（例えばオンライン、オフライン、非アクティブなど）、友達の最新ログイン及びその期間、友達が最後にプレイしたゲームなど、ユーザの友達に関する追加情報を含み得る。ソーシャルネットワークは、ユーザデータを含み、これには、ユーザのソーシャルグラフ、投稿、写真、ビデオ、経歴情報などのデータが含まれる。

コンテンツプロバイダサーバＡＰＩ１２０はさらに、コンテンツソースサーバ１１０がホストするコンテンツまたは提供するサービスに、ユーザデバイス１５０のそれぞれが、直接またはコンテンツ配信ネットワークサーバ１３０を介して、アクセスすることを促進し得る。メタデータなど、アクセスされたコンテンツまたはサービスに関する追加情報も、コンテンツプロバイダサーバＡＰＩ１２０により、ユーザデバイス１５０に提供され得る。後述されるように、追加情報（すなわちメタデータ）は、ユーザデバイス１５０に提供されるコンテンツまたはサービスに関する詳細を提供するために使用可能であり得る。いくつかの実施形態では、コンテンツソースサーバ１１０からコンテンツプロバイダサーバＡＰＩ１２０を介してユーザデバイス１５０に提供されるサービスは、特定のゲーム、チーム、コミュニティなどに関連付けられたチャットサービス、評定、及びプロファイルなど、他のコンテンツまたはサービスに関連付けられたサービスに対応することを含み得る。このような事例では、コンテンツソースサーバ１１０はまた、コンテンツプロバイダサーバＡＰＩ１２０を介して、互いに通信し得る。

コンテンツ配信ネットワークサーバ１３０には、様々なコンテンツ構成及びサービス構成を含む、コンテンツソースサーバ１１０からのコンテンツに関連したリソース、ファイルなどを、ユーザデバイス１５０に提供するサーバが含まれ得る。コンテンツ配信ネットワークサーバ１３０は、特定のコンテンツまたはサービスへのアクセスを要求するユーザデバイス１５０によっても、呼び出され得る。コンテンツ配信ネットワークサーバ１３０には、汎用管理サーバ、ゲームサーバ、ストリーミングメディアサーバ、ダウンロード可能コンテンツをホストするサーバ、及び当技術分野で既知の他のコンテンツ配信サーバが含まれ得る。

ジェスチャベース検索サーバ１４０には、ユーザデバイス１５０からデータを受信することができる当技術分野で既知の任意のデータサーバが含まれ得る。ジェスチャベース検索サーバ１４０によりレンダリングされるコンテンツは、本質的に任意の種類のコンピュータアプリケーション用であり得、数ある中でもゲーム、映画、オーディオ、画像、マルチメディアなどの１つ以上の種類のコンテンツを含み得る。いくつかの実施形態では、コンテンツまたはコンテンツの部分は、ジェスチャベース検索サーバ１４０により生成される。いくつかの実施形態では、コンテンツまたはコンテンツの部分は、コンテンツソースサーバ１１０からネットワーク１００を介してコンピューティングデバイスにストリーミングされる。いくつかの実施形態では、コンテンツまたはコンテンツの部分は、クラウドゲームインフラストラクチャからネットワーク１００を介してコンピューティングデバイスにストリーミングされる。インフラストラクチャは、コンテンツソースサーバ１１０からネットワーク１００を介してコンピューティングデバイスに様々な種類のコンテンツを送信するように、命令し得る。

例示的な実施形態では、ジェスチャベース検索サーバ１４０は、１つ以上のゲームタイトルの検索マップを含むストアを格納し得る、またはストアにアクセスし得る。各ゲームタイトルは、異なる検索マップに関連付けられ得、検索マップは、それぞれのゲームタイトルで使用可能なゲーム内アクション（例えばゲーム環境内で剣を振る）に関する情報、ゲーム内アクションがどのように実世界同等アクションに対応するかに関する情報（例えば実世界環境内でオブジェクトを振る）、及び１つ以上の種類のコントローラを使用してゲーム環境内でアクションを開始することに関連付けられた関連入力の組み合わせ（複数可）を含み得る。いくつかのゲームタイトルはさらに、関連するゲーム内環境の様々なレベル、アクティビティ、またはその他の部分で使用可能なアクションの種類を制限し得る。このような制限は、ＵＤＳシステムにより生成されるアクティビティファイル（図２に関連してさらに詳しく説明される）に保存され得、さらに、ゲーム環境またはゲームプレイセッションの特定の部分で、特定のゲームタイトルのゲームプレイに活発に関与する検索ユーザによる検索を、フィルタリングするために使用され得る。

ユーザに合わせてカスタマイズできる様々なトリガーを使用して、ジェスチャベーススキル検索が開始され得る。例えば、口頭コマンド、キーベースコマンド、またはジェスチャコマンドは、ユーザがこのようなジェスチャベーススキル検索を開始したいことを示し得る。このようなコマンドは、（例えばユーザデバイス（複数可）１５０の）カメラ及び／または他のセンサをトリガーして、ユーザがいる実世界環境に関する画像及び／または他のセンサデータを取り込み得る。例えば、カメラは、実世界で腕を振るユーザの画像を取り込み得、デジタル環境で剣を振るアバタが再現される。カメラ（図４に関連してさらに詳しく論じられる）は、カメラの立体視対、赤外線カメラ、深度カメラ、またはこれらの組み合わせなどの複数の画像取り込みデバイスを含むように構成され得る。いくつかの実施形態では、１つ以上のマイクロホン（図４に関連してさらに詳しく説明される）も使用して、ユーザの実世界環境から音声を取り込むことができる。一方、ユーザに（例えばコントローラ、モバイルデバイス、ウェアラブルデバイス、ハンドヘルドデバイスなどを経由して）関連付けられた他のセンサ（例えば加速度計、ジャイロスコープ）も、実世界アクションに関するデータを取り込み得る。

このような画像、音声、及び他のセンサデータは、分析のためにジェスチャベース検索サーバ１４０に提供され得る。ジェスチャベース検索サーバ１４０は、格納されたマップを使用して、実世界アクションに関する受信センサデータを、関連するゲームタイトル内で使用可能なゲーム内アクションとマッチングさせることが可能であり得る。いくつかの実施態様では、受信センサデータが、複数の使用可能なゲーム内アクションを示し得、このような場合、異なるパラメータを使用して、使用可能なゲーム内アクションがフィルタリングされ得る。上記のように、いくつかのゲームタイトルでは、ゲーム環境またはゲームセッションの様々な部分で、様々なゲーム内アクションが可能である。このようなデータは、アクティビティファイルで提供され、使用可能なゲーム内アクションをフィルタリングし、検索ユーザに現在関連付けられているゲーム環境またはゲームセッションの特定された部分で使用可能であり得るゲーム内アクションを特定するために使用され得る。代替的または付加的に、複数の使用可能なゲーム内アクションに関するメニューが、検索ユーザによる選択のために、グラフィカルユーザインターフェースに表示され得る。

ゲーム内アクションが特定または選択されると、ユーザに関連付けられたコントローラの表示、並びに特定されたゲーム内アクションを実行するためのコントローラの使用方法に関する指示を含むように、グラフィックユーザインターフェースがジェスチャベース検索サーバ１４０により更新され得る。このような指示には、視覚的指示、音声的指示、及び／またはテキストによる指示が含まれ得る。いくつかの実施形態では、指示は、ポップアップウィンドウ内にオーバーレイとして提供され得る。あるいは、ユーザがまだゲーム環境内でゲームプレイに関与している間は、ゲームプレイセッション中にユーザデバイス１５０に提供され得る。

よって、ジェスチャベース検索サーバ１４０は、実世界アクションに関するデータを１つ以上のゲーム内アクションにマッピングし、その後さらに、ゲーム内アクションのうちの特定された１つを、入力組み合わせ及び関連する命令にマッピングし得る。従って、ゲームを活発にプレイしているユーザは、（例えば従来のオンライン検索を実行するために）ゲーム内環境を離れることなく、現在のゲームプレイセッションを一時停止もしくは終了することなく、または別のデバイスもしくはプラットフォームに切り替えることなく、ジェスチャベース検索サーバ１４０により実行される検索を開始し得る。

ユーザデバイス１５０は、ネットワーク環境１００内で（例えば他のサーバに）内部サービスを提供するサーバであり得る。このような場合、ユーザデバイス１５０は、本明細書で説明されるコンテンツソースサーバ１１０のうちの１つに対応し得る。あるいは、ユーザデバイス１５０は、任意の数の異なるゲームコンソール、モバイルデバイス、ラップトップ、及びデスクトップを含み得るクライアントデバイスであってもよい。このようなユーザデバイス１５０はまた、非限定的に例えば、ダウンロードされたサービスの場合に好適であり得るメモリカードまたはディスクドライブなどの他の記憶媒体のデータに、アクセスするように構成され得る。このようなユーザデバイス１５０は、非限定的に例えばネットワークインターフェース、メディアインターフェース、非一時的コンピュータ可読ストレージ（メモリ）、及びメモリに格納され得る命令を実行するプロセッサなど、標準的ハードウェアコンピューティングコンポーネントを含み得る。これらのユーザデバイス１５０はまた、様々な異なるオペレーティングシステム（例えばｉＯＳ、Ａｎｄｒｏｉｄ（登録商標））、アプリケーション、またはコンピューティング言語（例えばＣ＋＋、ＪａｖａＳｃｒｉｐｔ（登録商標））を用いて、実行され得る。例示的なクライアントデバイス１５０は、図５に関して本明細書で詳しく説明される。各ユーザデバイス１５０は、デジタルコンテンツストリームのコレクションの参加者または他の種類の観客に関連付けられ得る。

いくつかの実施形態では、ユーザデバイス１５０は、コンピューティングデバイスまたはゲームコンソールの処理ハードウェア上のローカルでゲームを実行するように構成される。ゲームまたはコンテンツは、物理メディア形態など（例えばデジタルディスク、テープ、カード、サムドライブ、ソリッドステートチップ、またはソリッドステートカードなど）の任意の形態で、または通信ネットワークを介してインターネットからダウンロードすることにより、取得され得る。いくつかの実施形態では、コンピューティングデバイスは、通信ネットワークを介したクラウドゲームインフラストラクチャとの通信において、クライアントとして機能する。クラウドゲームインフラストラクチャは、ユーザデバイス１５０によりプレイされているビデオゲームを維持及び実行し得る。ユーザデバイス１５０、コントローラ、及びカメラ（及び他のセンサ）から受信された入力は、クラウドゲームインフラストラクチャに送信され得、クラウドゲームインフラストラクチャは、入力を処理して、実行中のビデオゲームのゲーム状態に反映させる。

ビデオデータ、オーディオデータ、及び触覚フィードバックデータなどのビデオゲームからのゲームデータは、コンテンツソースサーバ１１０からユーザデバイス１５０へ送信され得る。コンピュータシステムはさらに、好適なデバイスに送信する前にゲームデータを処理してもよく、または好適なデバイスにゲームデータを直接送信してもよい。例えば、ビデオ及びオーディオストリームは、ユーザデバイス１５０に送信され得る。

ユーザデバイス１５０はまた、ユーザデバイス１５０内の慣性センサから慣性センサデータを受信するように構成されたコントローラを含み得る、またはコントローラに関連付けられ得る。慣性センサデータは、ユーザデバイス１５０が関連付けられたユーザの動きに従ったコントローラ及び／またはユーザデバイス１５０の動きを示す。ユーザの動きは、ユーザデバイス１５０内に表示される仮想現実シーンに基づく。慣性センサデータから、ユーザデバイス１５０の動きの経路または軌跡及び動きの速度が特定され得る。いくつかの実施形態では、ヘッドマウントディスプレイの動きの経路または軌跡は、前傾、後傾、左傾、右傾、頭部左回転、頭部右回転、頭部上向き傾斜、頭部下向き傾斜、スクワット、及びジャンプを含むユーザの動きの集合内の１つ以上のユーザの動きに対応する。しかし、他の実施形態では、ヘッドマウントディスプレイの動きの経路または軌跡は、本質的に、人体の運動能力内の任意のユーザの動きに対応し得る。

いくつかの実施形態では、ユーザデバイス１５０または別のコンピューティングデバイス、例えばテレビ、コンピュータなどに表示される仮想現実（ＶＲ）または拡張現実（ＡＲ）シーン内で、ユーザデバイス１５０を使用して、仮想オブジェクトを、例えばつかむ、動かす、押す、引くなど操作することができる。ユーザがユーザデバイス１５０を装着している状態で自身の手を動かすと、ゲーム内の仮想手が動く。さらに、ユーザがユーザデバイス１５０を装着している状態で自身の指を動かすと、ゲーム内の仮想手の指が動く。指の位置及び／または配向は、上記及び図５に記載されるカメラを使用して取り込まれた画像データから特定され、仮想手の指の動きが生成される。仮想オブジェクトの１つ以上の例として、仮想車両、ユーザの仮想手、仮想ユーザ、仮想剣、ユーザのアバタ、仮想指、仮想指関節、仮想木、仮想花などが挙げられる。

ユーザデバイス１５０のディスプレイは、仮想インタラクティブオブジェクトを有する仮想空間または仮想環境に、アバタを組み込んだ３次元シーンを生成し得る。ジェスチャベース検索サーバ１４０は、ユーザデバイス１５０により取り込まれたユーザに関する視覚的情報及び／または距離情報を受信する。ジェスチャベース検索サーバ１４０は、ユーザの動きを記述する動き情報を抽出する。動き情報は、ユーザの身体内の主要点から構成されたユーザの「骨格」の動きを記述するように、符号化され得る。ジェスチャベース検索サーバ１４０は、ユーザのユーザデバイス１５０Ａ～１５０Ｎに提示されるＶＲ空間に、ユーザのアバタ、識別子、代表的な画像などのユーザ関連情報を導入することを可能にすることにより、コンテンツの増強を可能にし得る。

ユーザのアバタは、単一のデジタル画像からアニメーション化された３Ｄアバタに自動的に変換され得る。具体的には、ユーザは、デジタル画像または他の画像をユーザデバイス１５０にアップロードし、引き換えに、様々な顔の表情及び／またはアニメーションを特徴とする１つ以上のアバタを受け取り得る。アバタは、任意の静止画像またはアニメーション画像（例えばＧＩＦ形式）としてユーザに表示され、使用される。例えば、アバタは、ＳＭＳ、ＭＭＳ、電子メールメッセージ、チャット（Ｆａｃｅｂｏｏｋ（登録商標）チャットなど）、インスタントメッセンジャー（ＳｋｙｐｅまたはＷｉｎｄｏｗｓ（登録商標）メッセンジャーなど）、Ｔｗｉｔｔｅｒ（登録商標）、ブログ、フォーラム、またはユーザの感情を表示する目的の他の電子通信手段を介して、他のユーザに送信され得る。

いくつかの実施形態では、アバタは、ユーザに現実的に基づき得、例えば同じ顔の特徴、衣服、及び体型を有する。他の実施形態では、アバタは、例えばユーザの動きを、有名人、映画スター、政治家、ビデオゲームのキャラクタ、または別のユーザの顔の特徴にマッピングすることにより、意図的に非現実的にされ得る。アバタは、現実的な要素と意図的に非現実的な要素との融合であり得、例えばユーザの顔がアバタに使用され得るが、異なる衣服または異なる体型がアバタに与えられ得る。あるいは、ユーザの体がアバタに使用され得るが、有名人、映画スター、政治家、ビデオゲームのキャラクタ、または別のユーザの顔がアバタに与えられ得る。

実施形態では、Ｓｏｎｙ（登録商標）Ｐｌａｙｓｔａｔｉｏｎ ３（登録商標）エンターテインメントデバイス（ＰＳ３）などのユーザデバイス１５０Ａのユーザは、オンラインサーバから使用可能な多数の仮想３Ｄ環境のうちの１つのインスタンス内をナビゲートし、各仮想３Ｄ環境には、現在オンラインである他のユーザの総数のうちの比較的少ない割合が存在する。この環境内では、これらのユーザはアバタで表され、これにより、他のユーザデバイス１５０Ｂ～１５０Ｎ上の他のユーザとのソーシャルインタラクション、及び仮想環境自体とのソーシャルインタラクションが可能となり、仮想環境は、ビリヤード台、ボウリング場、アーケードゲーム、及びテレビ画面のストリーミングオンラインコンテンツなどの設備を提供し得る。

ユーザデバイス１５０Ａは、ユーザの動き及び／または対応するアバタの動きを記述する情報を、他のユーザデバイス１５０Ｂ～１５０Ｎに、またはジェスチャベース検索サーバ１４０に送信し、ジェスチャベース検索サーバ１４０は次に、この情報を他のユーザデバイス１５０Ｂ～１５０Ｎに送り、これにより、他のユーザデバイス１５０Ｂ～１５０Ｎは、アバタによる正確な動きを特徴とするシーンを生成することができる。ユーザデバイス１５０Ａは、他のユーザの動き及び／または対応するアバタの動きを記述する情報を、他のユーザデバイス１５０Ｂ～１５０Ｎから、またはジェスチャベース検索サーバ１４０などの仲介デバイスから受信し、ジェスチャベース検索サーバ１４０は次に、この情報を他のユーザデバイス１５０Ｂ～１５０Ｎから受信すると、この情報を第１のユーザデバイス１５０Ａに送り、これにより、第１のユーザデバイス１５０Ａは、第２のアバタによる正確な動きを特徴とするシーンを生成することができる。

ユーザデバイス１５０Ａに関連付けられたユーザは、各ユーザの物理的環境の特性に基づいて、仮想現実環境内で他のユーザデバイス１５０Ｂ～１５０Ｎとマッチングされ得る。一実施例では、各ユーザが位置する物理空間の特性に関する情報は、ジェスチャベース検索サーバ１４０により受信され得る。各ユーザの物理空間の特性に関する情報を使用して、類似した特性を有する異なる物理空間に位置するユーザがマッチングされ得る。ユーザは、仮想マルチプレーヤエンターテインメント体験に参加するためにマッチングされる。このマッチングは、各ユーザが位置する物理空間の特性に基づき得る。例えば、マッチングは、各ユーザが位置する物理空間の特性の類似度に基づいて実行され得る。

ユーザデバイス１５０またはコンピューティングデバイスは、取り込まれたユーザの動きの表現を生成し、ユーザの動きの生成された表現をアバタに実行させる。ユーザデバイス１５０はまた、受信された第２のユーザの動きの表現を生成し、第２のユーザの動きの生成された表現を第２のアバタに実行させる。ユーザデバイス１５０はまた、必要に応じて、仮想空間または仮想環境、並びに任意の仮想インタラクティブオブジェクトを更新する。

仮想環境内のイベントが物理基準位置に関して参照されるように、仮想環境内の任意の関連イベントは、共通の座標系を使用してユーザデバイス１５０間で通信され得る。共通の座標系を確立するために、位置データの単一インスタンスのみがユーザデバイス１５０間で交換される必要があり、確かにこれは実のところ、データの一方向転送であり得る（１つのユーザデバイス１５０Ａは別のユーザデバイス１５０Ｂに、第１のユーザデバイス１５０Ａの第２のユーザデバイス１５０Ｂに対する位置及び配向を伝える）。しかし、ユーザデバイス１５０が位置データを複数回交換する、例えば共有された座標系での仮想インタラクションのセッション中に頻繁に交換する場合、より信頼性が高くなる可能性がある。実環境におけるユーザデバイス１５０の後続の関連する動きは、仮想環境において再現され得る。従って、ユーザデバイスの実際位置と仮想位置は、実質的に一致することが理解されよう。

共通基準位置から離れる後続の動きは、ユーザデバイス１５０の加速度計及びジャイロスコープ（動きセンサ）を使用して、ジェスチャベース検索サーバ１４０（動き追跡構造として機能する）により追跡され、共通基準位置に関する変位及び配向の累積的な変化が維持され得る。加速度、速度、変位（側方及び回転の両方）の関係はよく知られており、ここでは詳しく説明しない。加速度計及びジャイロスコープは別個に言及されてもよく、または動きセンサとしてまとめて言及されてもよいが、加速度計及びジャイロスコープはまとめて加速度計と見なすこともでき、主な違いは検出された加速度の側方性質または回転性質であることが理解されよう。

図２は、ジェスチャベーススキル検索のためのシステムにデータを提供するのに使用され得る例示的なユニフォームデータシステム（ＵＤＳ）２００を示す。ＵＤＳにより提供されるデータに基づいて、ジェスチャベース検索サーバ１４０は、ユーザが関与したゲーム内オブジェクト、エンティティ、アクティビティ、及びイベントを認識し、よって、ゲーム内アクティビティの分析、及びゲーム内アクティビティに関連するフィルタリングに対応することができる。各ユーザインタラクションは、ゲーム内インタラクションの種類、ゲーム内環境における位置、ゲーム内タイムラインにおける時点、並びに関与する他のプレーヤ、オブジェクト、エンティティなどのメタデータに関連付けられ得る。よって、関連するアクティビティ、エンティティ、設定、結果、アクション、効果、位置、及びキャラクタ統計を含む、ゲームセッション中に発生し得る様々なユーザインタラクションのいずれに関しても、メタデータを追跡することができる。このようなデータはさらに、集約され、データモデルに適用され、分析対象となり得る。このようなＵＤＳデータモデルを使用して、ゲームにわたり統一した方法で、コンテキスト情報が情報の各部分に割り当てられ得る。

図２に示されるように、例示的なコンソール２２８（例えばユーザデバイス１５０）と、例示的なサーバ２１８（例えばストリーミングサーバ２２０、アクティビティフィードサーバ２２４、ユーザ生成コンテンツ（ＵＧＣ）サーバ２３２、及びオブジェクトサーバ２２６）とが示される。一実施例では、コンソール２２８は、コンテンツソースサーバ１１０、コンテンツ配信ネットワークサーバ１３０、クラウドサーバで実施され得、またはこれらと関連して実施され得、あるいはサーバ２１８と図１のサーバとの任意の組み合わせで実施され得る。例示的な実施例では、コンテンツレコーダ２０２は、インタラクティブコンテンツタイトル２３０からのコンテンツ（例えばメディア）を受信して、コンテンツリングバッファ２０８に記録し得る。このようなリングバッファ２０８は、複数のコンテンツセグメント（例えばｖ１、ｖ２及びｖ３）と、各セグメントの開始時刻（例えばＶ１＿ＳＴＡＲＴ＿ＴＳ、Ｖ２＿ＳＴＡＲＴ＿ＴＳ、Ｖ３＿ＳＴＡＲＴ＿ＴＳ）と、各セグメントの終了時刻（例えばＶ１＿ＥＮＤ＿ＴＳ、Ｖ２＿ＥＮＤ＿ＴＳ、Ｖ３＿ＥＮＤ＿ＴＳ）とを格納し得る。このようなセグメントは、コンソール２２８によりメディアファイル２１２（例えばＭＰ４、ＷｅｂＭなど）として格納され得る。このようなメディアファイル２１２は、格納及びその後のストリーミングまたは使用のためにストリーミングサーバ２２０にアップロードされ得るが、メディアファイル２１２は、任意のサーバ、クラウドサーバ、任意のコンソール２２８、または任意のユーザデバイス１５０に格納されてもよい。各セグメントのこのような開始時刻及び終了時刻は、コンテンツタイムスタンプファイル２１４としてコンソール２２８により格納され得る。このようなコンテンツタイムスタンプファイル２１４は、ストリーミングＩＤも含み得、これはメディアファイル２１２のストリーミングＩＤと一致し、これにより、コンテンツタイムスタンプファイル２１４は、メディアファイル２１２に関連付けられる。このようなコンテンツタイムスタンプファイル２１４は、アクティビティフィードサーバ２２４及び／またはＵＧＣサーバ２３２にアップロードされ格納され得るが、コンテンツタイムスタンプファイル２１４は、任意のサーバ、クラウドサーバ、任意のコンソール２２８、または任意のユーザデバイス１５０に格納されてもよい。

コンテンツレコーダ２０２がインタラクティブコンテンツタイトル２３０からコンテンツを受信して記録すると同時に、オブジェクトライブラリ２０４は、インタラクティブコンテンツタイトル２３０からデータを受信し、オブジェクトレコーダ２０６は、データを追跡して、オブジェクトの開始時及び終了時を特定する。オブジェクトライブラリ２０４及びオブジェクトレコーダ２０６は、プラットフォームサーバ１２０、クラウドサーバ、またはサーバ２１８のうちのいずれかに実装され得る。オブジェクトレコーダ２０６がオブジェクトの開始を検出すると、オブジェクトレコーダ２０６は、オブジェクトライブラリ２０４からオブジェクトデータ（例えばオブジェクトがアクティビティである場合は、アクティビティとのユーザインタラクション、アクティビティＩＤ、アクティビティ開始時刻、アクティビティ終了時刻、アクティビティ結果、アクティビティ種類など）を受信し、アクティビティデータ（例えばＡｃｔｉｖｉｔｙＩＤ１，ＳＴＡＲＴ＿ＴＳ、ＡｃｔｉｖｉｔｙＩＤ２，ＳＴＡＲＴ＿ＴＳ、ＡｃｔｉｖｉｔｙＩＤ３，ＳＴＡＲＴ＿ＴＳ）をオブジェクトリングバッファ２１０に記録する。オブジェクトリングバッファ２１０に記録されるこのようなアクティビティデータは、オブジェクトファイル２１６に格納され得る。このようなオブジェクトファイル２１６はまた、アクティビティ開始時刻、アクティビティ終了時刻、アクティビティＩＤ、アクティビティ結果、アクティビティ種類（例えば対抗試合、クエスト、タスクなど）、アクティビティに関連するユーザデータまたはピアデータを含み得る。例えば、オブジェクトファイル２１６は、アクティビティ中に使用されるアイテムに関するデータを格納し得る。このようなオブジェクトファイル２１６は、オブジェクトサーバ２２６に格納され得るが、オブジェクトファイル２１６は、任意のサーバ、クラウドサーバ、任意のコンソール２２８、または任意のユーザデバイス１５０に格納されてもよい。

このようなオブジェクトデータ（例えばオブジェクトファイル２１６）は、コンテンツデータ（例えばメディアファイル２１２及び／またはコンテンツタイムスタンプファイル２１４）に関連付けられ得る。一実施例では、ＵＧＣサーバ２３２は、コンテンツタイムスタンプファイル２１４を格納し、コンテンツタイムスタンプファイル２１４のストリーミングＩＤと、オブジェクトファイル２１６の対応するアクティビティＩＤとのマッチングに基づいて、コンテンツタイムスタンプファイル２１４をオブジェクトファイル２１６に関連付ける。別の実施例では、オブジェクトサーバ２２６は、オブジェクトファイル２１６を格納し得、オブジェクトファイル２１６に関するクエリをＵＧＣサーバ２３２から受信し得る。このようなクエリは、クエリと共に送信されるコンテンツタイムスタンプファイル２１４のストリーミングＩＤにマッチングするオブジェクトファイル２１６のアクティビティＩＤを検索することにより、実行され得る。さらに別の実施例では、格納されたコンテンツタイムスタンプファイル２１４のクエリは、コンテンツタイムスタンプファイル２１４の開始時刻及び終了時刻を、クエリと共に送信される対応するオブジェクトファイル２１６の開始時刻及び終了時刻とマッチングさせることにより、実行され得る。このようなオブジェクトファイル２１６も、ＵＧＣサーバ２３２により、マッチングしたコンテンツタイムスタンプファイル２１４に関連付けられ得るが、関連付けは、任意のサーバ、クラウドサーバ、任意のコンソール２２８、または任意のユーザデバイス１５０によって実行されてもよい。別の実施例では、オブジェクトファイル２１６及びコンテンツタイムスタンプファイル２１４は、各ファイル２１６、２１４の作成中に、コンソール２２８により関連付けられ得る。

ＵＤＳ２００により生成されたアクティビティファイルは、ジェスチャベース検索サーバ１４０により提供またはアクセスされ得、実世界アクションに関するデータを分析、フィルタリングし、１つ以上のマップでゲーム内アクションとマッチングするのに使用される。例えば、アクティビティファイルは、検索ユーザが検索を開始した時に、１つ以上のゲーム内アクションを実行する特定のピアプレーヤによる特定のゲームタイトルの特定のゲームプレイセッションに関するゲームプレイデータを含み得る。ジェスチャベース検索サーバ１４０は、アクティビティファイルからのデータを使用して、ゲームタイトル、プレーヤ、実行されているゲーム内アクション、及びゲーム内アクションと検索トリガーとの時間的近接性（例えばリアルタイムまたはほぼリアルタイムで検索するため）を特定し得る。検索を行う際の特定されたパラメータまたは条件は、関連性の検索結果をフィルタリングするために、ジェスチャベース検索サーバ１４０により使用され得る。

図３は、ジェスチャベーススキル検索のための例示的な方法を示すフローチャートである。図３の方法３００は、ＣＤ、ＤＶＤ、またはハードドライブなどの不揮発性メモリを含むがこれらに限定されない非一時的コンピュータ可読記憶媒体内に、実行可能な命令として具現化され得る。記憶媒体の命令は、プロセッサ（複数可）により実行されて、記憶媒体をホストする、あるいは記憶媒体にアクセスするコンピューティングデバイスの様々なハードウェアコンポーネントに、方法を実施させ得る。図３に特定されたステップ（及びステップの順序）は、例示的なものであり、ステップの様々な代替物、均等物、または派生物を含み得、これにはステップの実行順序が含まれるが、これに限定されない。

ステップ３１０にて、１つ以上の仮想アクションに関するマップがメモリに格納される。各仮想アクション（例えば仮想環境内で実行されるアクション）は、実世界環境での対応するアクションの実行に関連付けられたデータ集合に、及び仮想アクションのパフォーマンスを生じる入力組み合わせに関する命令データに、関連付けられる。マップの様々なバリエーションは、特定のゲームタイトル、ゲームタイトルの集合、ゲームジャンル、ゲーム開発者、ゲームコンソール、ゲームコントローラ、コントローラ変更形態の集合、ゲーム環境、ゲーム内アクティビティなどに関連付けられ得る。

ステップ３２０にて、実世界環境内のユーザによる動きに関するデータが取り込まれる。実世界環境内のユーザによる動きは、ユーザデバイス１５０（及び関連センサ）により取り込まれた実世界環境データにより示され得る。データは、ユーザデバイス１５０のカメラにより取り込まれた画像データであり得る。別の実施形態では、データは、ユーザデバイス１５０上の慣性センサにより取り込まれ得る。１つ以上の画像と、ユーザデバイス１５０により取り込まれた実世界環境とインタラクトするユーザの画像データと共に、実世界環境データは、ジェスチャベース検索サーバ１４０に転送され得る。

ステップ３３０にて、仮想環境内のユーザの現在の進捗レベルは、ユーザによる現在のゲームプレイに関連付けられた１つ以上のアクティビティファイルに基づいて、特定され得る。現在の特定された進捗レベルは、１つ以上の使用可能な仮想動作に関連付けられる。ユーザは、ユーザの特定された進捗レベル及び他のユーザの進捗レベルに基づいて、他のユーザのうちの１人以上とマッチングされ得る。他のユーザに関連付けられたアクティビティファイルも取得され、ステップ３２０で取り込まれた実世界動作データを分析するのに使用され得る。

ステップ３４０にて、取り込まれたデータが、使用可能な仮想動作のうちの特定された仮想動作に対応することが、マップにより示される、取り込まれたデータと、特定された仮想動作に関連付けられたデータ集合とのマッチングに基づいて、判別される。実施形態では、取り込まれたデータと、特定された仮想動作に関連付けられたデータ集合との差は、マップにより示される。差が所定の閾値内である場合、取り込まれたデータは、特定された使用可能な仮想動作に対応することが判定され得る。実施形態では、使用可能な仮想動作は、仮想動作を正しく実行する他のユーザに基づいてフィルタリングされ、１つ以上の使用可能な仮想動作は、フィルタリングされたユーザに基づく。

ステップ３５０にて、１つ以上のデータベースで、特定された仮想動作に対応する命令の検索が開始される。いくつかの実施形態では、命令は、マップ自体に格納され得る。マップはまた、命令が保持される他のデータベースへのリンクを有してもよく、あるいは他のデータベースを指してもよい。よって、特定されたゲーム内アクションの命令は取得され、ユーザデバイス１５０に提供され得る。

図４は、ジェスチャベーススキル検索を実行するのに使用され得る例示的なユーザデバイスのブロックレベル図である。有効な構成及び機能に応じて、図４に示されるコンポーネントより多いまたは少ないコンポーネントが、ユーザデバイス４００に含まれてもよく、ユーザデバイスから除外されてもよいことを、理解されたい。ユーザデバイス４００は、プログラム命令を実行するためのプロセッサ４０２を含み得る。メモリ４０６がデータ格納目的で設けられ、メモリ４０６には、揮発性メモリ及び不揮発性メモリの両方が含まれ得る。ユーザが視認することができる視覚的インターフェースを提供するディスプレイ４１６が含まれる。ディスプレイ４１６は、１つの単一ディスプレイで、または目ごとの別個のディスプレイ画面の形態で、定義され得る。２つのディスプレイ画面が提供される場合、左目のビデオコンテンツと右目のビデオコンテンツを別々に提供することが可能である。例えば、各目に対しビデオコンテンツを別個に表示することにより、仮想現実シーンの三次元コンテンツの臨場感制御が向上し得る。

動き検出モジュール４１８は、磁力計４２０、加速度計４２４、及びジャイロスコープ４２６などの様々な種類の動き検知ハードウェアのうちのいずれかを含み得る。ユーザデバイス４００には、慣性センサ４２２が備えられ得、慣性センサ４２２は、ユーザデバイス４００が関連付けられたユーザの動きに従って、ユーザデバイス４００の動きを示す慣性センサデータを生成するように構成される。磁力計４２０は、ユーザデバイス４００付近の磁場の強度及び方向を測定する。いくつかの実施形態では、ユーザデバイス４００内で３つの磁力計４２０を使用して、世界空間ヨー角度の絶対基準が確保される。いくつかの実施形態では、磁力計４２０は、地球の磁場である±８０マイクロステラの範囲で測定するように設計される。磁力計は、金属の影響を受け、実際のヨーによる単調なヨー測定を提供する。磁場は環境内の金属により歪む場合があり、これによりヨー測定に歪みが生じる。必要に応じて、この歪みは、ジャイロスコープまたはカメラなどの他のセンサからの情報を用いて、較正することができる。いくつかの実施形態では、ユーザデバイス４００の傾斜角及び方位角を得るために、加速度計４２４が磁力計４２０と共に使用される。

いくつかの実施形態では、本発明はまた、ユーザの身体上に配置された１つ以上の外部慣性センサも含み得る。本発明は、ユーザにより行われた具体的な動きを特定するために、外部慣性センサデータを、ユーザデバイス４００内の慣性センサ４２２から受信された慣性センサデータと比較する動作を含み得る。

加速度計４２４は、加速度及び重力誘起反力を測定するデバイスである。単軸モデル及び多軸（例えば６軸）モデルが、様々な方向の加速の大きさ及び方向を検出することができる。加速度計４２４を使用して、傾き、振動、及び衝撃が感知される。一実施形態では、３つの加速度計４２４を使用して重力方向が提供され、これにより、２つの角度（世界空間ピッチ及び世界空間ロール）の絶対基準が与えられる。

ジャイロスコープ４２６は、角運動量の原理に基づいて、配向を測定または維持するためのデバイスである。一実施形態では、３つのジャイロスコープ４２６は、慣性感知に基づいて、それぞれの軸（ｘ、ｙ、及びｚ）にわたる動きに関する情報を提供する。ジャイロスコープ４２６は、高速回転の検出に役立つ。しかし、ジャイロスコープ４２６は、絶対基準の存在なしでは、時間の経過と共にドリフトし得る。このため、定期的にジャイロスコープ４２６を再設定する必要があり、再設定は、オブジェクトの視覚追跡、加速度計、磁力計などに基づく位置／配向特定といった、他の使用可能な情報を用いて行われ得る。

ユーザデバイス４００が露出する実世界環境の画像及び画像ストリームを取り込むために、カメラ４０４が設けられる。後面カメラ４０４（ユーザがユーザデバイス４００のディスプレイを見ている時にユーザから離れる方向を向くカメラ）と、前面カメラ４０４（ユーザがユーザデバイス４００のディスプレイを見ている時にユーザ側を向くカメラ）とを含む複数のカメラ４０４が（任意で）、ユーザデバイス４００に含まれ得る。いくつかの実施形態では、ユーザデバイス４００が露出する実世界環境内の物体の深度情報を感知するためのカメラ４０４が、ユーザデバイス４００に含まれ得る。

ユーザデバイス４００には、オーディオ出力を提供するためのスピーカ４１２が含まれる。また、周囲環境からの音、ユーザによる発言などを含む実世界環境からの音声を取り込むために、マイクロホン４１４も含まれ得る。

無線ネットワーク技術を介してユーザデバイス４００のインターネットへの接続を可能にするために、ＷｉＦｉ（登録商標）モジュール４１０が含まれ得る。また、ユーザデバイス４００は、他のデバイスへの無線接続を可能にするために、ブルートゥース（登録商標）モジュール４０８も含み得る。

図４に示されるユーザデバイス４００のコンポーネントは、ユーザデバイス４００に含まれ得るコンポーネントの例であり、ユーザデバイス４００に含むことができる全ての可能なコンポーネントを表すものではないことを、理解されたい。例えば、様々な実施形態では、ユーザデバイス４００は、図４に示されるコンポーネントのうちのいくつかを含んでもよく、または含まなくてもよい。いくつかの実施形態では、ユーザデバイス４００は、図４に示されていない追加のコンポーネントを含み得る。

例示的な実施形態では、検索ユーザは、仮想環境内でアバタ（例えばピアプレーヤに関連付けられたアバタ）により実行されているゲーム内動作４３０を見ることができる。図４に示されるゲーム内動作４３０は、ジャンプまたは飛躍であり得る。ユーザは、ジェスチャベース検索をトリガーした後、実世界環境で対応するジェスチャ４４０を実行し得る。ユーザは、ユーザデバイス４００の１つ以上のセンサを、保持している、装着している、あるいはユーザデバイス４００の１つ以上のセンサの検知範囲内に存在している状態であり得る。ユーザデバイス４００は、ユーザジェスチャ４４０に関するセンサデータを、分析のために、ジェスチャベース検索サーバ１４０に提供し得る。

ジェスチャベース検索サーバ１４０は、センサデータにより特徴付けられるユーザジェスチャ４４０が、１つ以上の使用可能なゲーム内動作に関連付けられていることを特定し得る。検索をトリガーした条件に関連付けられた１つ以上のアクティビティファイルに基づいて、使用可能なゲーム内動作は、さらにフィルタリングされ得る。例えば、検索は、特定のゲームプレイセッション中に、または特定のゲームプレイセッションに時間的に近接して、トリガーされた可能性がある。よって、フィルタリングされたゲーム内動作の部分集合が特定され得る。ジェスチャベース検索サーバ１４０はさらに、特定または選択されたゲーム内動作が、特定または選択されたゲーム内動作を生じる入力組み合わせに対応する命令集合にマッピングされることを、特定し得る。その後、ジェスチャベース検索サーバ１４０は、マッピングされた命令集合に基づいてコンボディスプレイ４４０を生成し、生成したコンボディスプレイ４４０を、提示及び表示するように、ユーザデバイス１５０に提供し得る。

図５は、本発明の実施形態で使用され得る例示的な電子エンターテインメントシステムのブロック図である。エンターテインメントシステム５００は、電子ゲームコンソールであり得る。あるいは、エンターテインメントシステム５００は、汎用コンピュータ、セットトップボックス、ハンドヘルドゲームデバイス、タブレットコンピューティングデバイス、モバイルコンピューティングデバイス、または携帯電話として実装され得る。エンターテインメントシステムは、特定のフォームファクタ、目的、または設計に応じてより多くのまたはより少ない動作コンポーネントを含み得る。

図５のＣＰＵ５１０、ベクトルユニット５１５、グラフィック処理装置５２０、及びＩ／Ｏプロセッサ５２５は、システムバス５８５を介して通信する。さらに、図５のＣＰＵ５１０は、専用バス５８０を介してメインメモリ５０５と通信し、一方、ベクトルユニット５１５とグラフィック処理装置５２０は、専用バス５９０を介して通信し得る。図５のＣＰＵ５１０は、ＯＳ ＲＯＭ５５５及びメインメモリ５０５に格納されたプログラムを実行する。図５のメインメモリ５０５は、事前に格納されたプログラムと、光ディスク制御ユニット５７０を使用してＣＤ－ＲＯＭ、ＤＶＤ－ＲＯＭ、または他の光ディスク（図示せず）からＩ／Ｏプロセッサ５２５を介して転送されたプログラムとを含み得る。図５のＩ／Ｏプロセッサ５２５はまた、無線または他の通信ネットワーク（例えば４Ｇ、ＬＴＥ、及び３Ｇなど）を介して転送されるコンテンツの導入を可能にし得る。図５のＩ／Ｏプロセッサ５２５は主に、ＣＰＵ５１０、ベクトルユニット５１５、グラフィック処理装置５２０、及びコントローラインターフェース５３５を含むエンターテインメントシステム５００の様々なデバイス間のデータ交換を制御する。

図５のグラフィック処理装置５２０は、ＣＰＵ５１０及びベクトルユニット５１５から受信したグラフィック命令を実行して、ディスプレイデバイス（図示せず）に表示する画像を生成する。例えば、図５のベクトルユニット５１５は、オブジェクトを三次元座標から二次元座標に変換し、二次元座標をグラフィック処理装置５２０に送信し得る。さらに、音声処理装置５６０は、命令を実行して音声信号を生成し、音声信号は、スピーカ（図示せず）などのオーディオデバイスに出力される。他のデバイスは、ＵＳＢインターフェース５４５、及び無線トランシーバなどのＩＥＥＥ１３９４インターフェース５５０を介して、エンターテインメントシステム５００に接続され得、これらは、システム５００の中に、またはプロセッサなどの何らかの他のコンポーネントの一部として、埋め込まれ得る。

図５のエンターテインメントシステム５００のユーザは、コントローラインターフェース５３５を介して、ＣＰＵ５１０に命令を提供する。例えば、ユーザは、特定のゲーム情報をメモリカード５４０または他の非一時的コンピュータ可読記憶媒体に格納するようにＣＰＵ５１０に命令し得る、または何らかの具体的なアクションを実行するようにゲーム内のキャラクタに命令し得る。

本発明は、様々なエンドユーザデバイスにより動作可能であり得るアプリケーションに実装され得る。例えば、エンドユーザデバイスは、パーソナルコンピュータ、ホームエンターテインメントシステム（例えばＳｏｎｙ ＰｌａｙＳｔａｔｉｏｎ２（登録商標）またはＳｏｎｙ ＰｌａｙＳｔａｔｉｏｎ３（登録商標）またはＳｏｎｙ ＰｌａｙＳｔａｔｉｏｎ４（登録商標））、ポータブルゲームデバイス（例えばＳｏｎｙ ＰＳＰ（登録商標）またはＳｏｎｙ Ｖｉｔａ（登録商標））、または下位ではあるが異なる製造業者のホームエンターテインメントシステムであり得る。本明細書で説明される本発明の方法は、様々なデバイスで動作可能であることが十分に意図される。本発明はまた、クロスタイトル中立性により実施され得、本システムの実施形態は、様々な発行者からの様々なタイトルにわたり利用することができる。

本発明は、様々なデバイスを使用して動作可能であり得るアプリケーションに実装され得る。非一時的コンピュータ可読記憶媒体は、実行のために命令を中央処理装置（ＣＰＵ）に提供することに関与する任意の媒体（複数可）を指す。このような媒体は、光ディスクもしくは磁気ディスク及びダイナミックメモリなどの不揮発性媒体及び揮発性媒体をそれぞれ含むがこれらに限定されない多くの形態をとり得る。非一時的コンピュータ可読媒体の一般的な形態には、例えば、フロッピー（登録商標）ディスク、フレキシブルディスク、ハードディスク、磁気テープ、任意の他の磁気媒体、ＣＤ－ＲＯＭディスク、デジタルビデオディスク（ＤＶＤ）、任意の他の光学媒体、ＲＡＭ、ＰＲＯＭ、ＥＰＲＯＭ、ＦＬＡＳＨＥＰＲＯＭ、及び任意の他のメモリチップまたはカートリッジが含まれる。

実行のために１つ以上の命令の１つ以上のシーケンスをＣＰＵに伝えることに、様々な形態の伝送媒体が関与し得る。バスは、データをシステムＲＡＭに伝え、ＣＰＵは、システムＲＡＭから命令を取得して実行する。任意で、システムＲＡＭにより受信された命令は、ＣＰＵによる実行前または実行後のいずれかに、固定ディスクに格納され得る。様々な形態のストレージが、ストレージを実施するのに必要なネットワークインターフェース及びネットワークトポロジと同様に、実装され得る。

本技術の上記の詳細な説明は、例示及び説明の目的で提示されている。これは、包括的であること、または開示された詳細な形態に本技術を限定することを、意図するものではない。上記の教示に照らして、多くの変更形態及び変形形態が可能である。説明される実施形態は、本技術の原理及びその実際の適用を最も良く説明するために、かつ、他の当業者が、様々な実施形態において、及び企図する特定の使用に適した様々な変更形態により、本技術を利用することを可能にするために、選択された。本技術の範囲は、特許請求の範囲により定義されることが意図される。

Claims (19)

1. ジェスチャベーススキル検索の方法であって、
   メモリに１つ以上の仮想アクションに関するマップを格納することであって、各仮想アクションは、実世界環境で対応するアクションを実行することに関連付けられたデータ集合に関連付けられる、前記格納することと、
   前記実世界環境でのユーザによるアクションに関するデータを取り込むことと、
   前記仮想環境内の前記ユーザの現在の進捗レベルを特定することであって、前記特定された現在の進捗レベルは、１つ以上の使用可能な仮想アクションに関連付けられる、前記特定することと、
   前記取り込まれたデータが、前記使用可能な仮想アクションのうちの特定された仮想アクションに対応することを、前記マップにより示される、前記取り込まれたデータと、前記特定された仮想アクションに関連付けられた前記データ集合とのマッチングに基づいて、判別することと、
   前記特定された仮想アクションに対応する命令の表示を生成することと、
   を含む、方法。
2. 前記格納されたマップは、さらに、前記特定された仮想アクションに対応する前記命令に関するデータを格納する、請求項１に記載の方法。
3. 前記命令の前記表示を生成することは、前記格納されたマップに基づく、請求項１に記載の方法。
4. 前記実世界環境での前記ユーザによる前記アクションに関する前記データは、カメラ、加速度計、ジャイロスコープ、及び慣性センサのうちの少なくとも１つにより取り込まれる、請求項１に記載の方法。
5. 前記取り込まれたデータが前記特定された仮想アクションに対応することを判別することは、さらに、前記取り込まれたデータと、前記特定された仮想アクションに関連付けられた前記データ集合との差が、所定の閾値内にあることに基づく、請求項１に記載の方法。
6. 前記取り込まれたデータが前記使用可能な仮想アクションのうちの特定された仮想アクションに対応することを判別することは、検索トリガーまたは前記現在の進捗レベルに関連付けられた１つ以上の条件に基づいて、前記使用可能な仮想アクションをフィルタリングすることを含む、請求項１に記載の方法。
7. 前記検索トリガーまたは前記現在の進捗レベルに関連付けられた１つ以上のアクティビティファイルに基づいて、前記条件を特定することを、さらに含む、請求項６に記載の方法。
8. 前記格納されたマップは、ゲームタイトル、ゲームタイトルの集合、ゲームジャンル、ゲーム開発者、ゲームコンソール、ゲームコントローラ、コントローラ変更形態の集合、ゲーム環境、及びゲーム内アクティビティのうちの少なくとも１つに特有である、請求項１に記載の方法。
9. 前記マップは、複数の異なるマップと共に格納され、前記方法は、さらに、前記ユーザの前記仮想環境に基づいて前記マップを特定することを含む、請求項１に記載の方法。
10. ジェスチャベーススキル検索のためのシステムであって、
    １つ以上の仮想アクションに関するマップを格納するメモリであって、各仮想アクションは、実世界環境で対応するアクションを実行することに関連付けられたデータ集合に関連付けられる、前記メモリと、
    前記メモリに格納された命令を実行するプロセッサと、
    を備え、前記プロセッサは、
    前記実世界環境でのユーザによるアクションに関するデータの取り込みを開始する命令と、
    前記仮想環境内の前記ユーザの現在の進捗レベルを特定する命令であって、前記特定された現在の進捗レベルは、１つ以上の使用可能な仮想アクションに関連付けられる、前記特定する命令と、
    前記取り込まれたデータが、前記使用可能な仮想アクションのうちの特定された仮想アクションに対応することを、前記マップにより示される、前記取り込まれたデータと、前記特定された仮想アクションに関連付けられた前記データ集合とのマッチングに基づいて、判別する命令と、
    前記特定された仮想アクションに対応する命令の表示を生成する命令と、
    を実行する、システム。
11. 前記格納されたマップは、さらに、前記特定された仮想アクションに対応する前記命令に関するデータを格納する、請求項１０に記載のシステム。
12. 前記プロセッサは、前記格納されたマップに基づいて、前記命令の前記表示を生成する、請求項１０に記載のシステム。
13. 通信インターフェースをさらに備え、前記実世界環境での前記ユーザによる前記アクションに関する前記データは、前記通信インターフェースを介して前記プロセッサと通信を行うカメラ、加速度計、ジャイロスコープ、及び慣性センサのうちの少なくとも１つにより取り込まれる、請求項１０に記載のシステム。
14. 前記プロセッサは、前記取り込まれたデータが前記特定された仮想アクションに対応することを、前記取り込まれたデータと、前記特定された仮想アクションに関連付けられた前記データ集合との差が、所定の閾値内にあることにさらに基づいて判別する、請求項１０に記載のシステム。
15. 前記プロセッサは、検索トリガーまたは前記現在の進捗レベルに関連付けられた１つ以上の条件に基づいて、前記使用可能な仮想アクションをフィルタリングすることにより、前記取り込まれたデータが前記使用可能な仮想アクションのうちの特定された仮想アクションに対応することを判別する、請求項１０に記載のシステム。
16. 前記プロセッサは、前記検索トリガーまたは前記現在の進捗レベルに関連付けられた１つ以上のアクティビティファイルに基づいて、前記条件を特定する命令をさらに実行する、請求項１５に記載のシステム。
17. 前記格納されたマップは、ゲームタイトル、ゲームタイトルの集合、ゲームジャンル、ゲーム開発者、ゲームコンソール、ゲームコントローラ、コントローラ変更形態、ゲーム環境、及びゲーム内アクティビティのうちの少なくとも１つに特有である、請求項１０に記載のシステム。
18. 前記マップは、複数の異なるマップと共に格納され、前記システムは、さらに、前記ユーザの前記仮想環境に基づいて前記マップを特定することを含む、請求項１０に記載のシステム。
19. ジェスチャベーススキル検索の方法を実行するためにプロセッサにより実行可能なプログラムが具現化された非一時的コンピュータ可読記憶媒体であって、前記方法は、
    メモリに１つ以上の仮想アクションに関するマップを格納することであって、各仮想アクションは、実世界環境で対応するアクションを実行することに関連付けられたデータ集合に関連付けられる、前記格納することと、
    前記実世界環境でのユーザによるアクションに関するデータを取り込むことと、
    前記仮想環境内の前記ユーザの現在の進捗レベルを特定することであって、前記特定された現在の進捗レベルは、１つ以上の使用可能な仮想アクションに関連付けられる、前記特定することと、
    前記取り込まれたデータが、前記使用可能な仮想アクションのうちの特定された仮想アクションに対応することを、前記マップにより示される、前記取り込まれたデータと、前記特定された仮想アクションに関連付けられた前記データ集合とのマッチングに基づいて、判別することと、
    前記特定された仮想アクションに対応する命令の表示を生成することと、
    を含む、非一時的コンピュータ可読記憶媒体。

Images