JP2014525049A5 - - Google Patents

Claims (10)

1. ロジックサブシステムと；
   保管されたインストラクションを含むデータ保持サブシステムと、を含み、
   インストラクションが前記ロジックサブシステムによって実行されると：
   表現空間におけるヘッドマウントディスプレイシステム上に配置された一つまたはそれ以上の動作センサーと前記ヘッドマウントディスプレイシステム上に配置されたものではない前記表現空間における一つまたはそれ以上の映像センサーとを含んでいる、位置及び向き検知システムから視聴者の位置データ及び視聴者の向きデータを受取り；
   前記視聴者の位置データ及び前記視聴者の向きデータから、表現空間の中に視聴者を配置し、前記表現空間において前記視聴者が直面している方向を判断し、かつ、前記表現空間におけるヘッドマウントディスプレイの向きを決定し：
   前記視聴者の位置データ及び前記視聴者の向きデータに基づいて、前記視聴者の視野の中にある前記表現空間の領域にマップされた立体映像の領域及び向きを判断することによって、前記ヘッドマウントディスプレイシステムに対して送付する表現映像を決定し、前記表現映像は、前記立体映像における対象物の第１の視点に対応しており、かつ、
   前記表現映像を前記ヘッドマウントディスプレイシステムに対して送付し、
   前記視聴者の位置データ及び前記視聴者の向きデータにおける変化を検出し、かつ、
   前記視聴者の位置データ及び前記視聴者の向きデータにおいて検出された前記変化に基づいて、前記ヘッドマウントディスプレイシステムに送付するための異なる表現映像を決定し、前記異なる表現映像は、前記立体映像における前記対象物の第２の異なる視点に対応している、
   ことを特徴とするコンピューターデバイス。
2. 前記インストラクションは実行されると、さらに、
   前記ヘッドマウントディスプレイシステム上の眼球トラッキング映像センサーから、眼球トラッキングデータを受取り、かつ、前記眼球トラッキングデータに基づいて、前記表現映像を決定する、
   請求項１に記載のコンピューターデバイス。
3. 前記インストラクションは、さらに、
   前記立体映像の入力を受取り、前記立体映像を前記表現空間に対してマップするように構成されている、
   請求項１に記載のコンピューターデバイス。
4. 前記立体映像データは、複数のアングルからキャプチャーされたシーンのビデオ映像データを含む、
   請求項１に記載のコンピューターデバイス。
5. 前記インストラクションは実行されると、さらに、
   前記向きデータから、前記ヘッドマウントディスプレイシステムのロール、ピッチ、ヨーを検知する、
   請求項１に記載のコンピューターデバイス。
6. 前記インストラクションは実行されると、さらに、
   ユーザーインターフェイスにリクエストしているユーザー入力を検知し；
   表示のために前記ヘッドマウントディスプレイシステムに対して送付するユーザーインターフェイス映像を決定し、前記ユーザーインターフェイス映像はユーザーインターフェイスエレメントを含んでおり；
   前記ユーザーインターフェイス映像とインタラクションしているユーザージェスチャーを検知し；かつ、
   それに応じて、前記ユーザーインターフェイス映像上のユーザージェスチャーの効果を説明する変更されたユーザーインターフェイスを送付する、
   請求項１に記載のコンピューターデバイス。
7. 前記ユーザーインターフェイスエレメントは、プッシュ可能、及び／又は、プル可能なエレメントである、
   請求項６に記載のコンピューターデバイス。
8. 前記インストラクションは実行されると、
   前記表現空間の中の複数の視聴者を検知し、前記表現空間におけるそれぞれの視聴者の位置に基づいて、前記複数の視聴者それぞれに対して送付する異なった映像を決定する、
   請求項１に記載のコンピューターデバイス。
9. 前記インストラクションは実行されると、さらに、
   音声入力を受取り、前記音声入力における音声コマンドを検知し、かつ、前記音声入力に応じた機能を実行する、
   請求項１に記載のコンピューターデバイス。
10. 立体ビデオ映像データを表現する方法であって、前記方法は：
    前記立体ビデオ映像データを受取るステップと；
    前記立体ビデオ映像データのピクセルを表現空間における位置と関連付けることによって、前記立体ビデオ映像データを前記表現空間に対してマッピングするステップと；
    複数の映像キャプチャーデバイスから視聴者トラッキング映像データを受取るステップと；
    ヘッドマウントディスプレイシステム上に一つまたはそれ以上の動作センサーから動作データを受け取るステップと；
    前記視聴者トラッキング映像データを介して前記表現空間の中に視聴者を配置し、前記表現空間の中で前記視聴者が直面している方向を判断するステップと；
    前記動作データから、前記表現空間における前記ヘッドマウントディスプレイシステムの向きを決定するステップと；
    前記ヘッドマウントディスプレイシステム上の映像センサーから眼球トラッキングデータを受取るステップと；
    前記眼球トラッキングデータから、前記視聴者の視界が向けられる方向を決定するステップと；
    前記視聴者のトラッキング映像データ、前記動作データ、および、前記眼球トラッキングデータに基づいて、前記視聴者の視野の中にある前記表現空間の領域にマップされた立体映像の領域及び向きを判断することによって、前記ヘッドマウントディスプレイシステムに対して送付する表現映像を決定するステップであり、前記表現映像は、前記立体ビデオ映像データにおける対象物の第１の視点に対応している、ステップと；
    前記表現映像を前記ヘッドマウントディスプレイシステムに対して送付するステップと、
    前記視聴者のトラッキング映像データ、前記動作データ、および、前記眼球トラッキングデータにおける変化を検出するステップと、
    前記視聴者のトラッキング映像データ、前記動作データ、および、前記眼球トラッキングデータにおいて検出された前記変化に基づいて、前記ヘッドマウントディスプレイシステムに送付するための異なる表現映像を決定するステップであり、前記異なる表現映像は、前記立体ビデオ映像データにおける前記対象物の第２の異なる視点に対応している、ステップと、を含む、
    ことを特徴とする方法。