JP2022541177A - 複数のディスプレイデバイスのための連続した仮想空間の提供 - Google Patents

Abstract

本明細書に開示されるものは、複数のディスプレイデバイスのための連続した仮想空間をレンダリングするための、システム、方法、およびコンピュータプログラム製品の実施形態である。ある実施形態は、仮想平面上への仮想カメラの投影を識別し、仮想平面上への仮想カメラの投影の交差部分に基づいて、表示平面面積を決定することによって、動作する。その後、表示平面面積上の複数の実世界ディスプレイデバイスに相関がある、複数の仮想窓に関する位置が、（ｉ）ディスプレイデバイスの性質および（ｉｉ）仮想カメラの焦点距離に基づいて、計算される。仮想窓をそれらの個別の表示平面面積位置において設置した後、仮想窓の背後のコンテンツが、識別され、対応する実世界ディスプレイデバイスに提供される。

Description

ビデオは、従来的に、複数の実世界ディスプレイデバイス上の大きいフォーラム内に表示される。そうすることによって、システムが、実世界ディスプレイデバイスを横断した、ビデオ内のコンテンツの移動を例証するために利用される。しかしながら、以前のシステムは、ビデオのコンテンツを凝集した方式において実世界ディスプレイデバイスに提供する、誤った管理を行っている。例えば、以前のシステムは、ビデオ内に提供される必要なコンテンツを記憶する、発生させる、およびレンダリングするための、具体的なハードウェアおよびソフトウェア要件に依拠している。したがって、以前のシステムは、異なる数および／または構成のディスプレイデバイスに容易に適合することが不可能である。また、以前のシステムは、それらの間の顕著な遅延を伴うことなく、実世界ディスプレイデバイスを横断した、ビデオ内のオブジェクトの移動を提供する困難に直面している。

本明細書に提供されるものは、複数のディスプレイデバイスのための連続した仮想空間を提供するための、システム、装置、デバイス、方法、および／またはコンピュータプログラム製品の実施形態、および／またはそれらの組み合わせおよび副次的組み合わせである。

本開示は、複数の実世界ディスプレイデバイスを横断してビデオを提示するためのシステムを説明する。これまで、そのようなシステムは、一意のファイルを決定し、発生させ、およびそれらがビデオのそれらの部分を提示するために、実世界ディスプレイデバイスに伝送する。しかしながら、以前の基礎となるプロセスは、そのシステムおよび実世界ディスプレイデバイスの記憶および計算能力に依拠していた。具体的には、例えば、そのシステムは、一意のファイルのそれぞれを処理するための十分な記憶および計算能力を有することが要求され、実世界ディスプレイデバイスは、受信されたファイルを再生することが要求される。また、以前のシステムは、ディスプレイデバイスの実世界への設置に関する自動化を提供し、コンテンツが凝集した方式において実世界ディスプレイデバイスを横断して提示されるように、本設置に基づいて仮想場面を処理することが、不可能である。

いくつかの実施形態では、ビデオを提示するとき、本システムは、それらの対応する実世界ディスプレイデバイス（例えば、数および構成）に基づいて、仮想環境内の仮想平面上に仮想窓を提供する。そうすることによって、本システムは、これが仮想窓のそれぞれに焦点を当て、その中に提示されるオブジェクト（例えば、ビデオ内のコンテンツ）を識別することを可能にする、位置および場所内の仮想環境内に仮想カメラを提供する。したがって、本システムは、仮想窓を識別し、そのデータをそれらの個別の実世界ディスプレイデバイスに送信することが可能である。

以前のシステムと異なり、そのような方式において動作することによって、本明細書に説明される実施形態は、共有されるカメラの観点から仮想環境内にコンテンツを提示するために適切なデータを実世界ディスプレイデバイスに提供することが可能である。そうすることによって、本システムは、凝集した方式において実世界ディスプレイデバイスを横断してコンテンツを提示することが可能である。

例えば、いくつかの実施形態では、本システムは、実世界のコンサートのビデオを複数の実世界ディスプレイデバイスに中継することができる。そうすることによって、本システムは、実世界ディスプレイデバイスを表す仮想世界内に仮想窓を生成し、仮想窓を囲繞する仮想平面面積を定義することができる。本システムは、仮想平面面積内にビデオの場面を提示する。ひいては、本システムは、仮想窓に対するオブジェクトの空間位置を決定し、特定の仮想窓の要求されるデータのみを関連付けられる実世界ディスプレイデバイスに伝送する。そのような方式において動作することによって、本システムは、実世界により酷似する、凝集した方式において、場面内で移動するオブジェクトを提示することが可能である。また、本システムは、特定の実世界のディスプレイデバイスが表示するために必要とするデータのみを送信することも可能である。

付随の図面が、本明細書に組み込まれ、本明細書の一部を形成する。

図１は、いくつかの実施形態による、複数のディスプレイデバイスのための連続した仮想空間を提供する、システムのブロック図を図示する。

図２は、いくつかの実施形態による、連続した仮想空間を表示する、複数のディスプレイデバイスを図示する。

図３Ａ、３Ｂ、４Ａ、および４Ｂは、いくつかの実施形態による、仮想空間の中への仮想カメラ投影の斜視図を図示する。 図３Ａ、３Ｂ、４Ａ、および４Ｂは、いくつかの実施形態による、仮想空間の中への仮想カメラ投影の斜視図を図示する。 図３Ａ、３Ｂ、４Ａ、および４Ｂは、いくつかの実施形態による、仮想空間の中への仮想カメラ投影の斜視図を図示する。 図３Ａ、３Ｂ、４Ａ、および４Ｂは、いくつかの実施形態による、仮想空間の中への仮想カメラ投影の斜視図を図示する。

図５および６は、いくつかの実施形態による、連続した仮想空間を提供するためのプロセスを図示する、フローチャートを図示する。 図５および６は、いくつかの実施形態による、連続した仮想空間を提供するためのプロセスを図示する、フローチャートを図示する。

図７は、種々の実施形態を実装するために有用な例示的コンピュータシステムを図示する。

図面では、同様の参照番号は、概して、同じまたは類似する要素を示す。加えて、概して、参照番号の最も左の桁が、参照番号が最初に出現する図面を識別する。

図１は、複数のディスプレイデバイスのための連続した仮想空間を提供するための、システム１００のブロック図を図示する。システム１００は、中央サーバ１０２と、１つ以上のローカルサーバ１０４と、１つ以上の実世界ディスプレイデバイス１０６、１０８、および１１０とを含む。中央サーバ１０２は、それらの個別のディスプレイデバイス１０６と通信する、ローカルサーバ１０４と通信する。これらのサーバおよび／またはデバイスは、同一のエンティティまたは異なるエンティティによって管理および／または提供されてもよい。例えば、中央サーバ１０２は、サードパーティエンティティによって管理および／または提供されてもよく、ローカルサーバ１０４およびディスプレイデバイス１０６は、組織および／または企業によって管理および／または提供されてもよい。

中央サーバ１０２は、通信ラインまたは媒体１１２を経由してローカルサーバ１０４と通信する。ひいては、ローカルサーバ１０４は、通信ラインまたは媒体１１４を経由してディスプレイデバイス１０８と通信する。通信ラインまたは媒体１１２および１１４は、私設または公共のものもであってもよい。

したがって、中央サーバ１０２は、ディスプレイデバイス１０６、１０８、および１１０が再生するためのビデオファイルを記憶および／または提供する。したがって、中央サーバ１０２は、外部ソースからビデオファイルを受信してもよい。中央サーバ１０２は、ディスプレイデバイス１０６、１０８、および１１０にビデオファイルを提供する際に分散型再生システムとして作用することができる。ビデオファイルは、複製された実世界環境を含有してもよい。実世界のイベントの複製を含有するビデオファイルの実施例は、実世界のイベント（例えば、ライブコンサート）のライブ録画または以前に録画された実世界のイベント（例えば、テレビ番組「Ｎｕｍｂ３ｒｓ」）を含む。

中央サーバ１０２は、次いで、ディスプレイデバイス１０６、１０８、および１１０上に提示されるべきコンテンツを識別する。コンテンツは、場面（例えば、持続的アクションのシーケンス）を含んでもよく、これは、次いで、１つ以上のオブジェクトを含んでもよい。故に、場面および／またはオブジェクトは、現実またはエクステンデッドリアリティ（例えば、拡張現実、複合現実、および／または仮想現実）において生じ得る。これらの考え方に従うと、ビデオファイルの場面および／またはオブジェクトは、２次元である。

上記に議論されるように、中央サーバ１０２は、ディスプレイデバイス１０６、１０８、および１１０のセットと通信する、ローカルサーバ１０４と通信する。例えば、ローカルサーバ１０４ａは、ディスプレイデバイス１０６の第１のセットと通信してもよく、ローカルサーバ１０４ｂは、ディスプレイデバイス１０８の第２のセットと通信してもよく、ローカルサーバ１０４ｃは、ディスプレイデバイス１１０の第３のセットと通信してもよい。したがって、ローカルサーバ１０４およびディスプレイデバイス１０６、１０８、および１１０のセットは、異なる場所（例えば、建築物の中）に提供されてもよい。ひいては、ディスプレイデバイス１０６、１０８、および１１０の各セットは、同一のビデオファイルを提示する。各個別のディスプレイデバイスは、相互（例えば、ディスプレイデバイス１０６ａ、１０８ａ、および１１０ａ）と同期する。

故に、ディスプレイデバイス１０６、１０８、および１１０のセットの数に応じて、中央サーバ１０２および／またはローカルサーバ１０４は、ビデオファイルから場面を連続的かつ同期的に提示するために適切な処理を実施する。当業者によって理解されるであろうように、場面は、ビデオファイルのクロップを表す。

例えば、ディスプレイデバイス（例えば、ディスプレイデバイス１０６）の単一のみのセットが、存在する場合、中央サーバ１０２またはローカルサーバ１０４ａが、処理を実施してもよい、またはそれらが、そうすることによって単一のサーバとして作用してもよい。しかしながら、ディスプレイデバイス１０６、１０８、および１１０の複数のセット（例えば、ディスプレイデバイス１０６および１０８）が、存在する場合、中央サーバ１０２は、オリジナルビデオファイルからのデータのコピーをローカルサーバ１０４（例えば、ローカルサーバ１０４ａおよび１０４ｂ）に送信する。したがって、時間データが、持続的に配信される。ローカルサーバ１０４は、その後、異なるセットからの対応するディスプレイデバイス（例えば、ディスプレイデバイス１０６ａおよび１０８ａ）が、中央サーバ１０２のビデオファイルを同期して提示するように、タイミングデータとともに、処理を実施する。

単純にするために、以下の開示は、処理ステップを実施するものとして中央サーバ１０２を議論するであろう。しかしながら、前述に照らして、当業者は、ディスプレイデバイス１０６、１０８、および１１０のセットの数に応じて、中央サーバ１０２および／またはローカルサーバ１０４が、処理ステップを実施し得ることを容易に理解するであろう。

中央サーバ１０２は、ディスプレイデバイス１０６、１０８、および１１０の各セット自体の性質またはそれらの間の関係に関連するデータを受信する。データは、予め記憶され、認定された個人によって手動で提供されてもよい。ディスプレイデバイス１０６、１０８、および１１０のそれぞれに関連する例示的データは、定義される実世界平面上の地理的位置（例えば、壁上の具体的場所）、ディスプレイの分解能（例えば、７２０ｐ、１，０８０ｐ、２Ｋ等）、物理的サイズ（例えば、３２インチ、５０インチ、６０インチ等）、視認距離（例えば、６．３～１０．４フィート、６．９～１１．５フィート、７．５～１２．５フィート、および８．１～１３．５フィート等）、技術タイプ（例えば、液晶ディスプレイ（ＬＣＤ）、有機発光ダイオードディスプレイ（ＯＬＥＤ）、プラズマディスプレイパネル（ＰＤＰ）等）、およびディスプレイタイプ（例えば、２次元）を含む。各セット内のディスプレイデバイス１０６、１０８、および１１０間の関係に関連する例示的データは、各セット内のディスプレイデバイス１０６、１０８、および１１０のそれぞれの間の距離を含む。例えば、隣接するディスプレイデバイス１０６ａ、１０６ｂ、および１０６ｃ間の距離が、該当する。

隣接するディスプレイデバイス１０６、１０８、および１１０間の距離およびディスプレイデバイス１０６、１０８、および１１０のサイズに基づいて、中央サーバ１０２は、ディスプレイデバイス１０６、１０８、および１１０の構成（例えば、行および列の数）を決定する。図２は、視認者２０４のための連続した仮想空間を提供する、単一行の状態にある３つのディスプレイデバイス２０２の例示的な空間構成を図示する。しかしながら、他の構成も、当業者に明白となるであろうように、可能性として考えられる。

図１に戻って参照すると、連続した仮想空間を提供するために、中央サーバ１０２は、ディスプレイデバイス１０６、１０８、および１１０に提示されるべきビデオファイルの一部（例えば、ビデオクロップ）を識別する。上記に述べられるように、ビデオファイルは、実世界環境または仮想環境であってもよい。故に、中央サーバ１０２は、複製された実世界環境内または仮想環境内の位置および／または場所において仮想カメラを設置する。

ここで図３Ａおよび３Ｂを参照すると、中央サーバ１０２（図１に図示される）は、次いで、ビデオクリップの一部の仮想環境３００内に仮想平面３０２を提供してもよい。いくつかの実施形態では、複数の仮想平面３０２が、仮想環境３００内に提供されてもよい。仮想平面３０２は、物理的に相互と別個である。したがって、仮想平面は、異なる軸上にあり得る。これらの考え方に従うと、１つの仮想平面が、ｙ軸に対して平行に延設されてもよく、別の仮想平面が、ｘ軸に対して平行に延設されてもよい。下記により詳細に議論されるであろうように、仮想平面３０２は、それら自体の仮想カメラ３０６および仮想平面面積３１０と関連付けられる。また、仮想平面３０２はそれぞれ、実世界ディスプレイデバイス１０６、１０８、および１１０のセットに対応してもよい。例えば、第１の仮想平面が、実世界ディスプレイデバイス１０６の第１のセットに対応してもよく、第２の仮想平面が、実世界ディスプレイデバイス１０８の第２のセットに対応してもよい。

図３Ａは、複製された環境３００内の仮想平面３０２の斜視正面図を図示する。図３Ｂは、複製された環境３００内の仮想平面３０２の斜視背面図を図示する。複製された環境３００は、オブジェクト３０４を含む。したがって、仮想平面３０２は、少なくとも部分的にオブジェクト３０４の正面に位置付けられる。ビデオの場面は、２次元または３次元であり得るため、複製された環境３００および／またはオブジェクト３０４もまた、２次元または３次元であり得、オブジェクトは、実世界オブジェクトまたは仮想オブジェクトであり得る。

中央サーバ１０２（図１に示される）は、次いで、仮想平面３０２を識別し、複製された環境３００内に仮想カメラ３０６を設置する。仮想カメラ３０６は、仮想平面３０２上に、オブジェクト３０４の少なくとも一部を捕捉する、投影３０８を提供する。したがって、仮想カメラ３０６の投影３０８は、仮想平面３０２と交差する。そうすることによって、交差部分は、仮想平面３０２上に表示平面面積３１０を画定する。これらの考え方に従うと、仮想カメラ３０６の投影３０８は、任意の閉鎖された形状であり、仮想平面３０２上に表示平面面積３１０の形状を画定し得る。例えば、図示されるように、投影３０８の形状は、長方形錐台であってもよく、表示平面面積３１０の形状は、長方形であってもよい。表示平面面積３１０の形状は、実世界ディスプレイの形状にかかわらず、長方形であってもよい。例えば、実世界ディスプレイが、正方形である（すなわち、辺が、等しい長さを有する）場合、表示平面面積３１０は、依然として、長方形である。

表示平面面積３１０は、仮想平面３０２上の任意の場所にあってもよい。表示平面面積３１０は、完全にオブジェクト３０４の正面にあってもよい。下記により詳細に説明されるであろうように、表示平面面積３１０のサイズは、仮想カメラ３０６の投影３０８、仮想平面３０２上の仮想窓の数、および／または仮想平面３０２内の仮想窓の構成に基づく。

したがって、仮想平面３０２上への仮想カメラ３０６の投影３０８は、表示平面面積３１０を画定する。表示平面面積３１０は、仮想窓が、据え付けらればならない場所を画定し、表示平面面積３１０のサイズおよび仮想平面３０２までのカメラ３０２の距離に基づいて、種々の視野を提供する。例えば、視野は、ａｒｃｔａｎ（０．５×（表示平面面積３１０の幅／表示平面面積３１０までの仮想カメラ３０６の距離））×２に等しくてもよい。ここで図４Ａおよび４Ｂを参照すると、ビデオクリップの一部の複製された環境３００（例えば、複製された実世界環境または仮想環境）内の仮想平面４０２上の複数の仮想窓４１２が、図示される。図４Ａは、複製された環境４００内の仮想平面４０２の斜視正面図を図示する。図４Ｂは、複製された環境４００内の仮想平面４０２の斜視背面図を図示する。上記に記載されるように、仮想窓４１２は、実世界ディスプレイデバイス１０６、１０８、および１１０（図１に描写される）の各セット内の特定のディスプレイデバイスに対応し、それとの１対１の相関を有する。例えば、仮想窓４１２ａは、ディスプレイデバイス１０６ａ、１０８ａ、および／または１１０ａに対応してもよく、仮想窓４１２ｂは、ディスプレイデバイス１０６ｂ、１０８ｂ、および／または１１０ｂに対応してもよく、仮想窓４１２ｃは、ディスプレイデバイス１０６ｃ、１０８ｃ、および／または１１０ｃに対応してもよい。

仮想窓４１２は、仮想平面４０２内に２次元の空間場所（例えば、ｘ位置およびｙ位置）を有する。いくつかの実施形態では、仮想平面４０２内の仮想窓４１２の空間場所は、実世界内の（図１の）実世界ディスプレイデバイス１０６、１０８、および１１０の空間場所および実世界ディスプレイデバイス１０６、１０８、および１１０の特性に基づく。これは、仮想世界内での実世界ディスプレイの再生成を可能にする。例えば、実世界ディスプレイデバイス１０６、１０８、および１１０が、実世界内に具体的な空間場所を有する場合、仮想世界内の仮想窓４１２の空間設置は、それに基づく。他の実施形態では、実世界ディスプレイデバイス１０６、１０８、および１１０の空間場所は、仮想窓４１２の空間場所に基づく。例えば、仮想窓４１２は、仮想世界内に具体的な空間場所を有し、実世界内の実世界ディスプレイデバイス１０６、１０８、および１１０の空間場所は、それに基づく。したがって、これらの実施形態のいずれにおいても、仮想世界は、実世界の単位に類似する単位を有する。例えば、１仮想世界単位は、実世界における具体的なインチ数（例えば、１インチ、３インチ、６インチ、または１２インチ）に類似し得る。

そのような方式において動作することによって、仮想カメラ４０２は、仮想窓４１２に対する仮想環境内の仮想カメラ４０２と、実世界ディスプレイデバイス１０６、１０８、および１１０との同一の空間関係を有する、実世界内の想像カメラを表し得る。

上記に説明されるように、仮想カメラ４０６は、仮想平面４０２のうちの１つの上に投影を提供し、投影は、表示平面面積４１０を決定する。これらの考え方に従うと、仮想窓４１２は、表示平面面積４１０の少なくとも一部の中に設置される。故に、仮想カメラ４０６は、その投影を仮想窓４１２のそれぞれの上に集束させることが可能である。したがって、コンテンツ（例えば、図３Ａのオブジェクト３０４）が、仮想環境４００内かつ仮想窓４１２の背後に提供されるため、仮想カメラ４０６は、オブジェクトを含む仮想窓４１２のビューを捕捉し、これは、次いで、対応するディスプレイデバイス１０６、１０８、および１１０（図１に示される）に提供される。

また、上記に記載されるように、表示平面面積４１０のサイズは、仮想カメラ４０６の投影、仮想平面４０２上の仮想窓４１２の数、および／または仮想平面４０２上の仮想窓４１２の構成に依存する。したがって、投影によって提供される仮想カメラ４０６の視野および表示平面面積４１０のサイズは、仮想窓４１２のサイズおよび構成に依存する。例えば、表示面積平面４１０は、仮想窓４１２の構成（例えば、１（行）×３（列））に少なくとも等しい、またはそれを上回るサイズを有してもよい。したがって、仮想窓４１２は、表示平面面積４１０のサイズ、複数の仮想窓４１２のそれぞれのサイズ、および／または仮想カメラ４０６の焦点距離に基づいて較正される。

また、表示平面面積４１０および／または仮想窓に対する仮想カメラ４０６の場所を決定した後、複数の子仮想カメラが、仮想カメラ４０６のために提供されてもよい。したがって、仮想カメラ４０６は、マスタ仮想カメラと見なされ得る。故に、仮想カメラ４０６（またはマスタ仮想カメラ）は、子仮想カメラの能力（例えば、視認距離、焦点、明瞭度等）を決定してもよい。したがって、子カメラは、仮想カメラ４０６の性質を継承し得る。

これらの考え方に従うと、子仮想カメラはそれぞれ、仮想窓４１２のうちの１つに対応してもよい。したがって、仮想窓４１２が、（図１の）実世界ディスプレイデバイス１０６、１０８、１１０に対応するため、子仮想カメラもまた、実世界ディスプレイデバイス１０６、１０８、１１０に対応してもよい。子仮想カメラはそれぞれ、特定の実世界ディスプレイデバイスに対応してもよい。例えば、子仮想カメラは、実世界ディスプレイデバイスと１：１の比率を有してもよい。したがって、子仮想カメラは、それらの対応する仮想窓４１２内のコンテンツに関連するデータを提供してもよい。

図５および６は、ある実施形態による、複数のディスプレイデバイスのための連続した仮想空間を提供するための方法５００および６００に関するフローチャートである。方法５００および６００は、ハードウェア（例えば、回路網、専用論理、プログラマブル論理、マイクロコード等）、ソフトウェア（例えば、処理デバイス上で実行する命令）、またはそれらの組み合わせを含み得る、処理論理によって実施されることができる。全てのステップが、本明細書に提供される開示を実施するために必要とされるわけではない場合があることを理解されたい。さらに、ステップのうちのいくつかが、当業者によって理解されるであろうように、同時に、または図５および６に示されるものと異なる順序において実施されてもよい。

ここで図５を参照すると、ディスプレイデバイス１０６、１０８、および１１０の単一のみのセット（例えば、ディスプレイデバイス１０６）に連続した仮想空間を提供するための方法５００が、図１および２を参照して説明されるものとする。しかしながら、方法５００は、その例示的実施形態に限定されない。

５０２において、中央サーバ１０２が、実世界ディスプレイデバイス１０６、１０８、および１１０の１つ以上のセットに関連する表示情報を入手する。上記に説明されるように、実世界ディスプレイデバイス１０６、１０８、および１１０の各セットは、同一のビデオファイルを表示するために提供される。例えば、図２に図示されるように、ディスプレイデバイスのセットが、視認者２０４のための連続した仮想空間１０２を提供する。したがって、中央サーバ１０２は、セット内の各ディスプレイデバイスおよびセット自体の（例えば、センチメートル単位）位置、（例えば、度単位）回転、（例えば、センチメートル単位）寸法、（例えば、ピクセル単位）分解能、および（例えば、センチメートル単位）アスペクト比を受信する。

５０４において、中央サーバ１０２は、実世界ディスプレイデバイス１０６、１０８、および１１０の単一のセット（例えば、ディスプレイデバイス１０６のみ）またはディスプレイデバイス１０６、１０８、および１１０の複数のセット（例えば、ディスプレイデバイス１０６および１０８）が存在するかどうかを決定する。中央サーバ１０２が、ディスプレイデバイス１０６、１０８、および１１０の複数のセットが存在すると決定した場合、方法５００は、５０６に進む。しかしながら、中央サーバ１０２が、ディスプレイデバイス１０６、１０８、および１１０の単一のみのセットが存在すると決定した場合、方法５００は、５０８に進む。

５０６において、中央サーバ１０２は、タイミングデータに加えて、表示実世界デバイス１０６、１０８、および１１０上で視認されるべきコンテンツを１つ以上のローカルサーバ１０４に転送する。そうするために、中央サーバ１０２は、ローカルサーバ１０４のタイムスタンプおよび／またはタイムコードを送信する。これは、ディスプレイデバイス１０６、１０８、および１１０の複数のセットの種々のセットの対応するディスプレイデバイス（例えば、ディスプレイデバイス１０６ａおよび１０８ａ）が、同一または類似のデータを同時に提示することを可能にするであろう。

５０８において、中央サーバ１０２またはローカルサーバ１０４は、ディスプレイデバイス１０６、１０８、および１１０上で視認されるべきコンテンツに基づいて、実世界ディスプレイデバイス１０６、１０８、および１１０のセットのそれぞれの間で共有されるべき複製された環境の１つ以上の性質を決定する。

故に、いくつかの実施形態では、ディスプレイデバイス１０６、１０８、または１１０の単一のセット（例えば、ディスプレイデバイス１０６）が存在する場合、中央サーバ１０２または個別のローカルサーバ１０４は、実世界ディスプレイデバイス１０６、１０８、または１１０の特定のセットの性質を決定する。他の実施形態では、実世界ディスプレイデバイス１０６、１０８、および１１０の複数のセット（例えば、ディスプレイデバイス１０６および１０８）が存在する場合、ローカルサーバ１０４は、それらの個別の実世界ディスプレイデバイス１０６、１０８、および１１０に関する性質を決定する。

５１０において、中央サーバ１０２またはローカルサーバ１０４は、仮想平面上に提供され、実世界ディスプレイデバイスの各セットに対応する、仮想窓からマスタ仮想カメラを生成する。上記に議論されるように、マスタ仮想カメラが、仮想平面のために提供されてもよい。マスタ仮想カメラの性質を決定した後、仮想窓に対応する、複数の子仮想カメラが、提供されてもよい。

５１２において、中央サーバ１０２またはローカルサーバ１０４は、仮想環境内の複数の窓に関連する性質に基づいて、マスタカメラの視認ポートおよび／またはその子カメラの視認ポートを修正する。

５１４において、中央サーバ１０２またはローカルサーバ１０４は、仮想窓４１２内のコンテンツのそれらのビューに基づいて、マスタまたは仮想カメラからデータを受信する。

５１６において、中央サーバ１０２またはローカルサーバ１０４は、個別の複数の仮想窓４１２に対応する、複数の実世界ディスプレイデバイス１０６、１０８、および１１０にデータを提供する。

上記に解説されるように、ディスプレイデバイス１０６、１０８、および１１０の単一のセット（例えば、ディスプレイデバイス１０６）が存在する場合、中央サーバ１０２または適切なローカルサーバ（例えば、ローカルサーバ１０４ａ）が、ステップ５０８、５１０、および５１２を実施する。これらの考え方に従うと、上記に記載されるように、中央サーバ１０２および適切なローカルサーバ１０４は、単一のサーバに組み合わせられてもよい。しかしながら、ディスプレイデバイス１０６、１０８、および１１０の複数のセット（例えば、ディスプレイデバイス１０６および１０８）が存在する場合、ローカルサーバ１０４は、中央サーバ１０２からタイミングデータを受信し、タイミングデータに従って、ステップ５０８、５１０、５１２、および５１４を実施する。

ここで図６を参照すると、方法６００が、図１、３、４、および５を参照して説明されるものとする。しかしながら、方法６００は、それらの例示的実施形態に限定されない。

６０２において、中央サーバ１０２またはローカルサーバ１０４は、複製された環境３００（例えば、複製された実世界環境または仮想環境）内に提供される、仮想平面３０２上への仮想カメラ３０６の投影３０８を識別する。

６０４において、中央サーバ１０２またはローカルサーバ１０４は、仮想平面３０２上への仮想カメラ３０６の投影３０８の交差部分に基づいて、表示平面面積３１０を決定する。

６０６において、中央サーバ１０２またはローカルサーバ１０４は、（ｉ）複数の実世界ディスプレイデバイス１０６、１０８、および１１０の１つ以上の性質および（ｉｉ）仮想カメラ４０２の焦点距離に基づいて、表示平面面積４１０上に提供される、複数の仮想窓４１２のそれぞれに関する位置を計算する。故に、複数の仮想窓４１２はそれぞれ、複数のディスプレイデバイス１０６、１０８、および１１０の個別のものに関連／対応する。

６０８において、中央サーバ１０２またはローカルサーバ１０４は、表示平面面積４１０上の位置において複数の仮想窓４１２を設置する。

６１０において、中央サーバ１０２またはローカルサーバ１０４は、少なくとも部分的に複数の仮想窓４１２のうちの少なくとも１つの背後にある、コンテンツを識別する。コンテンツは、２次元または３次元であり得る、オブジェクト３０４であってもよい。

６１２において、中央サーバ１０２またはローカルサーバ１０４は、コンテンツを有する複数の仮想窓４１２のうちの少なくとも１つに関連する複数のディスプレイデバイス１０６、１０８、および１１０の個別のものに、データを提供する。

図６に関して上記に説明されるように、ステップ６０２、６０４、６０６、６０８、６１０、および６１２が、中央サーバ１０２および／またはローカルサーバ１０４によって実施されてもよい。例えば、いくつかの実施形態では、ステップ６０２、６０４、６０６、６０８、６１０、および／または６１２は、中央サーバ１０２によって実施され、ローカルサーバ１０４に提供される。

種々の実施形態が、例えば、図７に示されるコンピュータシステム７００等の１つ以上の周知のコンピュータシステムを使用して実装されてもよい。１つ以上のコンピュータシステム７００が、例えば、本明細書に議論される実施形態のうちのいずれかおよびそれらの組み合わせおよび副次的組み合わせを実装するために使用されてもよい。

コンピュータシステム７００は、プロセッサ７０４等の１つ以上のプロセッサ（中央処理ユニットまたはＣＰＵとも呼ばれる）を含んでもよい。プロセッサ７０４は、通信インフラストラクチャまたはバス７０６に接続されてもよい。

コンピュータシステム７００はまた、ユーザ入力／出力インターフェース７０２を通して通信インフラストラクチャ７０６と通信し得る、モニタ、キーボード、ポインティングデバイス等のユーザ入力／出力デバイス７０３を含んでもよい。

プロセッサ７０４のうちの１つ以上のものは、グラフィック処理ユニット（ＧＰＵ）であってもよい。ある実施形態では、ＧＰＵは、数学的に集約的なアプリケーションを処理するために設計される、特殊な電子回路である、プロセッサであってもよい。ＧＰＵは、コンピュータグラフィックアプリケーション、画像、ビデオ等に対して共通である、数学的に集約的なデータ等のデータの大型ブロックの並行処理のために効率的である、並列構造を有してもよい。

コンピュータシステム７００はまた、ランダムアクセスメモリ（ＲＡＭ）等のメインまたは一次メモリ７０８を含んでもよい。メインメモリ７０８は、１つ以上のレベルのキャッシュを含んでもよい。メインメモリ７０８は、その中に制御論理（すなわち、コンピュータソフトウェア）および／またはデータを記憶していてもよい。

コンピュータシステム７００はまた、１つ以上の二次記憶デバイスまたはメモリ７１０を含んでもよい。二次メモリ７１０は、例えば、ハードディスクドライブ７１２および／またはリムーバブル記憶デバイスまたはドライブ７１４を含んでもよい。リムーバブル記憶ドライブ７１４は、フロッピー（登録商標）ディスクドライブ、磁気テープドライブ、コンパクトディスクドライブ、光学記憶デバイス、テープバックアップデバイス、および／または任意の他の記憶デバイス／ドライブであってもよい。

リムーバブル記憶ドライブ７１４は、リムーバブル記憶ユニット７１８と相互作用してもよい。リムーバブル記憶ユニット７１８は、その上にコンピュータソフトウェア（制御論理）および／またはデータを記憶している、コンピュータ使用可能または可読記憶デバイスを含んでもよい。リムーバブル記憶ユニット７１８は、フロッピー（登録商標）ディスク、磁気テープ、コンパクトディスク、ＤＶＤ、光学記憶ディスク、および／または任意の他のコンピュータデータ記憶デバイスであってもよい。リムーバブル記憶ドライブ７１４は、リムーバブル記憶ユニット７１８から読み取る、および／またはそれに書き込んでもよい。

二次メモリ７１０は、コンピュータプログラムおよび／または他の命令および／またはデータがコンピュータシステム７００によってアクセスされることを可能にするための、他の手段、デバイス、コンポーネント、媒介、または他のアプローチを含んでもよい。そのような手段、デバイス、コンポーネント、媒介、または他のアプローチは、例えば、リムーバブル記憶ユニット７２２およびインターフェース７２０を含んでもよい。リムーバブル記憶ユニット７２２およびインターフェース７２０の実施例は、プログラムカートリッジおよびカートリッジインターフェース（ビデオゲームデバイス内に見出されるもの等）、リムーバブルメモリチップ（ＥＰＲＯＭまたはＰＲＯＭ等）および関連付けられるソケット、メモリスティックおよびＵＳＢポート、メモリカードおよび関連付けられるメモリカードスロット、および／または任意の他のリムーバブル記憶ユニットおよび関連付けられるインターフェースを含み得る。

コンピュータシステム７００はさらに、通信またはネットワークインターフェース７２４を含んでもよい。通信インターフェース７２４は、コンピュータシステム７００が、外部デバイス、外部ネットワーク、外部エンティティ等（個々に、そして集合的に、参照番号７２８によって参照される）の任意の組み合わせと通信および相互作用することを可能にしてもよい。例えば、通信インターフェース７２４は、コンピュータシステム７００が、有線および／または無線（またはそれらの組み合わせ）であり得、ＬＡＮ、ＷＡＮ、インターネット等の任意の組み合わせを含み得る、通信経路７２６を経由して外部または遠隔デバイス７２８と通信することを可能にし得る。制御論理および／またはデータが、通信経路７２６を介してコンピュータシステム７００に、またはそれから伝送されてもよい。

コンピュータシステム７００はまた、いくつかの非限定的な実施例を挙げると、携帯情報端末（ＰＤＡ）、デスクトップワークステーション、ラップトップまたはノート型パソコン、ネットブック、タブレット、スマートフォン、スマートウォッチまたは他のウェアラブル、装置、モノのインターネットの一部、および／または埋設システムのうちのいずれか、またはそれらの任意の組み合わせであってもよい。

コンピュータシステム７００は、限定ではないが、遠隔または分散型クラウドコンピューティングソリューション、ローカルまたはオンプレミスソフトウェア（「オンプレミス」のクラウドベースのソリューション）、「アズ・ア・サービス」モデル（例えば、コンテンツ・アズ・ア・サービス（ＣａａＳ）、デジタルコンテンツ・アズ・ア・サービス（ＤＣａａＳ）、ソフトウェア・アズ・ア・サービス（ＳａａＳ）、管理ソフトウェア・アズ・ア・サービス（ＭＳａａＳ）、プラットフォーム・アズ・ア・サービス（ＰａａＳ）、デスクトップ・アズ・ア・サービス（ＤａａＳ）、フレームワーク・アズ・ア・サービス（ＦａａＳ）、バックエンド・アズ・ア・サービス（ＢａａＳ）、モバイルバックエンド・アズ・ア・サービス（ＭＢａａＳ）、インフラストラクチャ・アズ・ア・サービス（ＩａａＳ）等）、および／または前述の実施例または他のサービスまたは配信パラダイムの任意の組み合わせを含む、ハイブリッドモデルを含む、任意の配信パラダイムを通して任意のアプリケーションおよび／またはデータにアクセスまたはホストする、クライアントまたはサーバであってもよい。

コンピュータシステム７００内の任意の適用可能なデータ構造、ファイルフォーマット、およびスキーマは、限定ではないが、ＪａｖａＳｃｒｉｐｔ（登録商標）オブジェクト表記（ＪＳＯＮ）、拡張マークアップ言語（ＸＭＬ）、さらに別のマークアップ言語（ＹＡＭＬ）、拡張可能ハイパーテキストマークアップ言語（ＸＨＴＭＬ）、無線マークアップ言語（ＷＭＬ）、ＭｅｓｓａｇｅＰａｃｋ、ＸＭＬユーザインターフェース言語（ＸＵＬ）、または任意の他の機能的に類似する表現を単独または組み合わせにおいて含む、規格から導出され得る。代替として、専用データ構造、フォーマット、またはスキーマが、排他的に、または公知またはオープンな規格との組み合わせにおいてのいずれかで使用されてもよい。

いくつかの実施形態では、その上に記憶される制御論理（ソフトウェア）を有する、有形非一過性コンピュータ使用可能または可読媒体を備える、有形非一過性装置または製造品は、本明細書では、コンピュータプログラム製品またはプログラム記憶デバイスとも称され得る。これは、限定ではないが、コンピュータシステム７００、メインメモリ７０８、二次メモリ７１０、およびリムーバブル記憶ユニット７１８および７２２、および前述のものの任意の組み合わせを具現化する、有形製品を含む。そのような制御論理は、１つ以上のデータ処理デバイス（コンピュータシステム７００等）によって実行されると、そのようなデータ処理デバイスを本明細書に説明されるように動作させてもよい。

本開示に含有される教示に基づいて、図７に示されるもの以外のデータ処理デバイス、コンピュータシステム、および／またはコンピュータアーキテクチャを使用して、本開示の実施形態を作製および使用する方法が、当業者に明白となるであろう。特に、実施形態は、本明細書に説明されるもの以外のソフトウェア、ハードウェア、および／またはオペレーティングシステム実装とともに動作することができる。

任意の他の節ではなく、詳細な説明の節が、請求項を解釈するために使用されることを意図することを理解されたい。他の節は、本発明者らによって考慮されるような、１つ以上であるが全てではない例示的実施形態を記載することができ、したがって、本開示または添付の請求項をいかようにも限定することを意図していない。

本開示は、例示的分野および用途に関して例示的実施形態を説明するが、本開示が、それらに限定されるものではないことを理解されたい。他の実施形態およびそれに対する修正が、可能性として考えられ、本開示の範囲および精神内のものである。例えば、本段落の一般性を限定することなく、実施形態は、図に図示される、および／または本明細書に説明される、ソフトウェア、ハードウェア、ファームウェア、および／またはエンティティに限定されない。さらに、実施形態（本明細書に明示的に説明されているかどうかにかかわらず）は、本明細書に説明される実施例以外の分野および用途に有意な有用性を有する。

実施形態は、規定される機能の実装およびその関係を図示する機能構成要素の補助を借りて本明細書に説明されている。これらの機能構成要素の境界は、本明細書では、説明の利便性のために任意に定義されている。代替の境界が、規定される機能および関係（またはその均等物）が適切に実施される限り、定義されることができる。また、代替実施形態が、本明細書に説明されているものと異なる順序を使用して、機能ブロック、ステップ、動作、方法等を実施することができる。

本明細書における、「一実施形態」、「ある実施形態」、「例示的実施形態」、または類似語句の言及は、説明される実施形態が、特定の特徴、構造、または特性を含み得るが、全ての実施形態が、必ずしもその特定の特徴、構造、または特性を含み得ないことを示す。また、そのような語句は、必ずしも同一の実施形態を参照しているわけではない。さらに、特定の特徴、構造、または特性が、ある実施形態に関連して説明されているとき、本明細書に明示的に言及または説明されているかどうかにかかわらず、そのような特徴、構造、または特性を他の実施形態に組み込むことは、当業者の知識の範囲内であろう。加えて、いくつかの実施形態は、それらの派生語とともに、表現「結合される」および「接続される」を使用して説明されることができる。これらの用語は、必ずしも相互の同義語として意図されていない。例えば、いくつかの実施形態は、２つ以上の要素が相互と直接物理的または電気的に接触していることを示すために、用語「接続される」および／または「結合される」を使用して説明されることができる。しかしながら、用語「結合される」はまた、２つ以上の要素が相互と直接接触していないが、なおもさらに、相互と協働または相互作用することも意味することができる。

本開示の範疇および範囲は、上記に説明される例示的実施形態のうちのいずれかによって限定されるべきではなく、以下の請求項およびその均等物によってのみ定義されるべきである。

Claims (20)

1. 複数のディスプレイデバイスのための連続した環境を提供するためのコンピュータ実装方法であって、
   少なくとも１つのプロセッサによって、仮想平面上への仮想カメラの投影を識別することであって、前記仮想平面は、複製された実世界環境内または仮想環境内に提供される、ことと、
   前記少なくとも１つのプロセッサによって、前記仮想平面上への前記仮想カメラの投影の交差部分に基づいて、表示平面面積を決定することと、
   前記少なくとも１つのプロセッサによって、（ｉ）複数の実世界ディスプレイデバイスの１つ以上の性質および（ｉｉ）前記仮想カメラの焦点距離に基づいて、前記表示平面面積上の複数の仮想窓のそれぞれに関する位置を計算することであって、前記複数の仮想窓のうちの少なくとも１つは、前記複数の実世界ディスプレイデバイスの個別のものに対応する、ことと、
   前記少なくとも１つのプロセッサによって、前記表示平面面積上の前記位置において前記複数の仮想窓を設置することと、
   前記少なくとも１つのプロセッサによって、少なくとも部分的に前記複数の仮想窓のうちの少なくとも１つの背後にあるコンテンツを識別することと、
   前記少なくとも１つのプロセッサによって、前記コンテンツを有する前記複数の仮想窓のうちの少なくとも１つに関連する前記複数の実世界ディスプレイデバイスの個別のものにデータを提供することと
   を含み、
   前記識別すること、決定すること、計算すること、設置すること、および提供することのうちの少なくとも１つが、１つ以上のコンピュータによって実施される、コンピュータ実装方法。
2. 前記コンテンツは、前記仮想カメラによって捕捉される、請求項１に記載のコンピュータ実装方法。
3. 前記コンテンツは、３次元仮想オブジェクトである、請求項１に記載のコンピュータ実装方法。
4. 前記少なくとも１つのプロセッサによって、前記複製された環境内の前記仮想カメラの場所を決定することと、
   前記少なくとも１つのプロセッサによって、前記場所における前記複製された環境内の前記仮想カメラをレンダリングすることと
   をさらに含む、請求項１に記載のコンピュータ実装方法。
5. 前記複製された環境内の前記仮想カメラの場所は、前記実世界環境内の前記複数の実世界ディスプレイデバイスの１つ以上の性質に基づく、請求項４に記載のコンピュータ実装方法。
6. 前記複製された環境内の前記仮想カメラの場所は、前記表示平面面積までの前記仮想カメラの焦点距離に基づく、請求項４に記載のコンピュータ実装方法。
7. 前記仮想カメラの投影は、定義された形状である、請求項１に記載のコンピュータ実装方法。
8. 前記定義された形状は、長方形錐台である、請求項７に記載のコンピュータ実装方法。
9. 前記表示平面面積は、少なくとも前記複数の仮想窓のそれぞれを包含する、請求項１に記載のコンピュータ実装方法。
10. 前記複数の仮想窓のそれぞれは、前記複数の実世界デバイスの個別のものに対応する、請求項１に記載のコンピュータ実装方法。
11. 前記複数の実世界ディスプレイデバイスは、それぞれが前記連続した環境を提供する実世界ディスプレイデバイスの第１のセットと、実世界ディスプレイデバイスの第２のセットとを備える、請求項１０に記載のコンピュータ実装方法。
12. 前記仮想カメラは、複数の仮想カメラを含み、前記複数のカメラのそれぞれは、前記複数の仮想窓の個別のものに焦点を当てる、請求項１１に記載のコンピュータ実装方法。
13. 前記複数の仮想窓のそれぞれは、前記実世界ディスプレイデバイスの第１のセットおよび前記実世界ディスプレイデバイスの第２のセットのそれぞれの個別のものに対応する、請求項１１に記載のコンピュータ実装方法。
14. 前記実世界ディスプレイデバイスの第１のセット、前記実世界ディスプレイデバイスの第２のセット、および前記仮想窓は、同一の構成を有する、請求項１２に記載のコンピュータ実装方法。
15. 前記複数の実世界ディスプレイデバイスの１つ以上の性質は、前記複数の実世界ディスプレイデバイスの分解能と、位置と、寸法とを含む、請求項１に記載のコンピュータ実装方法。
16. システムであって、
    メモリと、
    少なくとも１つのプロセッサであって、前記少なくとも１つのプロセッサは、前記メモリに結合され、
    仮想平面上への仮想カメラの投影を識別することであって、前記仮想平面は、複製された環境内に提供される、ことと、
    前記仮想平面上への前記仮想カメラの投影の交差部分に基づいて、表示平面面積を決定することと、
    （ｉ）複数の実世界ディスプレイデバイスの１つ以上の性質および（ｉｉ）前記仮想カメラの焦点距離に基づいて、前記表示平面面積上の複数の仮想窓のそれぞれに関する位置を計算することであって、前記複数の仮想窓のうちの少なくとも１つは、前記複数の実世界ディスプレイデバイスの個別のものに対応する、ことと、
    前記表示平面面積上の前記位置において、前記複数の仮想窓を設置することと、
    少なくとも部分的に前記複数の仮想窓のうちの少なくとも１つの背後にあるコンテンツを識別することと、
    前記コンテンツを有する前記複数の仮想窓のうちの少なくとも１つに関連する前記複数の実世界ディスプレイデバイスの個別のものにデータを提供することと
    を行うように構成される、少なくとも１つのプロセッサと
    を備える、システム。
17. 前記少なくとも１つのプロセッサはさらに、
    前記複製された環境内の前記仮想カメラの場所を決定することと、
    前記場所における前記複製された環境内の仮想カメラをレンダリングすることと
    を行うように構成される、請求項１２に記載のシステム。
18. 前記仮想カメラの投影は、長方形錐台である、請求項１４に記載のシステム。
19. 前記複数の実世界ディスプレイデバイスの１つ以上の性質は、前記複数の実世界ディスプレイデバイスの分解能と、位置と、寸法とを含む、請求項１４に記載のシステム。
20. 非一過性コンピュータ可読デバイスであって、前記非一過性コンピュータ可読デバイスは、その上に記憶される命令を有し、前記命令は、少なくとも１つのコンピューティングデバイスによって実行されると、前記少なくとも１つのコンピューティングデバイスに、
    仮想平面上への仮想カメラの投影を識別することであって、前記仮想平面は、複製された実世界環境内または仮想環境内に提供される、ことと、
    前記仮想平面上への前記仮想カメラの投影の交差部分に基づいて、表示平面面積を決定することと、
    （ｉ）複数の実世界ディスプレイデバイスの１つ以上の性質および（ｉｉ）前記仮想カメラの焦点距離に基づいて、前記表示平面面積上の複数の仮想窓のそれぞれに関する位置を計算することであって、前記複数の仮想窓のうちの少なくとも１つは、前記複数の実世界ディスプレイデバイスの個別のものに対応する、ことと、
    前記表示平面面積上の前記位置において前記複数の仮想窓を設置することと、
    少なくとも部分的に前記複数の仮想窓のうちの少なくとも１つの背後にあるコンテンツを識別することと、
    前記コンテンツを有する前記複数の仮想窓のうちの少なくとも１つに関連する前記複数の実世界ディスプレイデバイスの個別のものにデータを提供することと
    を含む動作を実施させる、非一過性コンピュータ可読デバイス。

Images