JP7449523B2 - 情報処理システム、情報処理方法、情報処理プログラム - Google Patents

Description

本開示は、情報処理システム、情報処理方法、情報処理プログラムに関する。

従来から、音楽及び動画を複数のユーザに配信するサービスとして、「Ｍｉｒｒａｔｉｖ」が知られている（例えば、非特許文献１参照）。

"Ｍｉｒｒａｔｉｖ"、［ｏｎｌｉｎｅ］、株式会社ミラティブ、［２０１９年１２月１８日検索］、インターネット（ＵＲＬ：ｈｔｔｐｓ：／／ｗｗｗ．ｍｉｒｒａｔｉｖ．ｃｏｍ／）

上記のような従来技術では、実空間で視聴可能なサービスであり、仮想空間に発展させることが難しい。

そこで、本開示は、仮想空間において好適なコンテンツ配信技術を提供することを目的とする。

本開示の一局面によれば、第１仮想空間の画像を含むコンテンツを配信する第１ユーザの状態を検出する第１検出部と、前記第１ユーザに係る第１端末装置又は前記コンテンツを視聴する第２ユーザに係る第２端末装置を介して前記第１ユーザ又は前記第２ユーザに視認可能な前記第１仮想空間の画像を描画する第１描画処理部と、前記第１ユーザに対応付けられた第１表示媒体を記憶する第１記憶部と、を備え、前記第１仮想空間の画像は、複数の階層を有し、前記第１描画処理部は、前記複数の階層のうちの、前記第１表示媒体に係る層の第１画像領域を描画する第１描画部と、前記複数の階層のうちの、第１ユーザインターフェースに係る層の第２画像領域を描画する第２描画部とを備え、前記第１描画部は、前記第１検出部により検出された前記第１ユーザの状態に基づいて、前記第１画像領域における前記第１表示媒体の状態を変化させる、情報処理システムが開示される。

本開示によれば、仮想空間において好適なコンテンツ配信技術が得られる。

本実施形態に係る仮想現実生成システムのブロック図である。 左右の目でそれぞれ視認される画像の説明図である。 本実施形態による仮想空間の画像の構造の説明図である。 ホーム画面（ロビー画面）に対応する仮想空間の説明図である。 ホーム画像の階層構造の説明図である。 図５におけるユーザの視点からの視界範囲（正面を視ている場合）の拡大図である。 装着型装置から視たホーム画像の一例を示す図である。 操作領域の前後の入れ替える態様の説明図である。 操作領域の前後の入れ替える態様の説明図である。 配信画像に対応する仮想空間の概略的な側面図である。 配信画像に対応する仮想空間の、上面視による概略的な平面図である。 配信画像の階層構造の説明図である。 鏡と配信画像の各層との関係を上面視で示す説明図である。 配信画像に係るインターフェース表示層の説明図である。 配信ユーザが装着型装置を介して視た配信画像の一例を示す図である。 視聴ユーザが装着型装置を介して視た配信画像の一例を示す図である。 スマートフォン用の配信画像の一例を示す図である。 コンテンツ配信側の端末装置の機能を示す概略的なブロック図である。 アバタの描画情報の一例の説明図である。 コンテンツ視聴側の端末装置の機能を示す概略的なブロック図である。 サーバ装置の機能を示す概略的なブロック図である。 特定コンテンツの配信開始に至るまでの動作の一例を示すフロー図である。 特定コンテンツの視聴開始に至るまでの動作の一例を示すフロー図である。 配信ユーザによる特定コンテンツの配信中（すなわち視聴ユーザによる特定コンテンツの視聴中）の動作の一例を示すフロー図である。

以下、添付図面を参照しながら実施形態について詳細に説明する。

図１を参照して、本発明の一実施形態に係る仮想現実生成システム１の概要について説明する。図１は、本実施形態に係る仮想現実生成システム１のブロック図である。

仮想現実生成システム１は、サーバ装置１０（外部処理装置の一例）と、１つ以上の端末装置２０と、を備える。図１では簡便のため、３つの端末装置２０を図示しているが、端末装置２０の数は２つ以上であればよい。

サーバ装置１０は、例えば１つ以上の仮想現実を提供する運営者が管理するサーバ等の情報処理システムである。端末装置２０は、例えば携帯電話、スマートフォン、タブレット端末、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、装着型装置（ヘッドマウントディスプレイ、メガネ型装置等）又はゲーム装置等の、ユーザによって使用される装置である。端末装置２０は、典型的にはユーザごとに異なる態様で、複数がサーバ装置１０にネットワーク３を介して接続されうる。

端末装置２０は、本実施形態に係る仮想現実アプリケーションを実行可能である。仮想現実アプリケーションは、ネットワーク３を介してサーバ装置１０や所定のアプリケーション配信サーバから端末装置２０に受信されてもよく、あるいは端末装置２０に備えられた記憶装置又は端末装置２０が読取可能なメモリカード等の記憶媒体にあらかじめ記憶されていてもよい。サーバ装置１０及び端末装置２０は、ネットワーク３を介して通信可能に接続される。例えば、サーバ装置１０及び端末装置２０が協動して、仮想現実に関する多様な処理を実行する。

端末装置２０は、コンテンツ配信側の端末装置２０Ａ（第１端末装置の一例）と、コンテンツ視聴側の端末装置２０Ｂ（第２端末装置の一例）とを含む。なお、以下では、説明上、コンテンツ配信側の端末装置２０Ａと、コンテンツ視聴側の端末装置２０Ｂとは、別々の端末装置として説明するが、コンテンツ配信側の端末装置２０Ａが、コンテンツ視聴側の端末装置２０Ｂとなる場合や、その逆の場合もありうる。なお、以下では、端末装置２０Ａ及び端末装置２０Ｂとを特に区別しない場合は、単に「端末装置２０」と称する場合がある。

各端末装置２０は、サーバ装置１０を介して互いに通信可能に接続されている。なお、以下では、「一の端末装置２０が情報を他の端末装置２０に送信する」とは、「一の端末装置２０が情報をサーバ装置１０を介して他の端末装置２０に送信する」ことを意味する。同様に、「一の端末装置２０が情報を他の端末装置２０から受信する」とは、「一の端末装置２０が情報をサーバ装置１０を介して他の端末装置２０から受信する」ことを意味する。ただし、変形例では、各端末装置２０は、サーバ装置１０を介さずに通信可能に接続されてもよい。

なお、ネットワーク３は、無線通信網や、インターネット、ＶＰＮ（Ｖｉｒｔｕａｌ Ｐｒｉｖａｔｅ Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）、有線ネットワーク、又はこれらの任意の組み合わせ等を含んでよい。

図１に示す例では、仮想現実生成システム１は、スタジオユニット３０Ａ、３０Ｂを含む。スタジオユニット３０Ａ、３０Ｂは、コンテンツ配信側の端末装置２０Ａと同様、コンテンツ配信側の装置である。スタジオユニット３０Ａ、３０Ｂは、コンテンツ制作用のスタジオ、部屋、ホール等に配置され得る。

各スタジオユニット３０は、コンテンツ配信側の端末装置２０Ａ、及び／又は、サーバ装置１０と同様の機能を有することができる。以下、説明を簡単にするために、コンテンツ配信側の端末装置２０Ａがサーバ装置１０を介して各コンテンツ視聴側の端末装置２０Ｂに対して各種のコンテンツを配信する場合を主に説明する。しかしながら、これに代えて又はこれに加えて、配信ユーザに対向するスタジオユニット３０Ａ、３０Ｂが、コンテンツ配信側の端末装置２０Ａと同様の機能を有することにより、サーバ装置１０を介して各コンテンツ視聴側の端末装置２０Ｂに対して各種のコンテンツを配信してもよい。なお、変形例では、仮想現実生成システム１は、スタジオユニット３０Ａ、３０Ｂを備えていなくてもよい。

以下では、仮想現実生成システム１が、情報処理システムの一例を実現するが、特定の一の端末装置２０の各要素（図１の端末通信部２１から端末制御部２５参照）が、情報処理システムの一例を実現してもよいし、複数の端末装置２０が、協動して情報処理システムの一例を実現してもよい。また、サーバ装置１０が単独で、情報処理システムの一例を実現してもよいし、サーバ装置１０と１つ以上の端末装置２０が、協動して情報処理システムの一例を実現してもよい。

ここで、本実施形態に係る仮想現実の概要について説明する。本実施形態に係る仮想現実は、例えば教育、旅行、ロールプレイング、シミュレーション、ゲームやコンサートのようなエンターテイメント等、任意の現実に対する仮想現実等であって、仮想現実の実行に伴い、アバタのような仮想現実媒体が用いられる。例えば、本実施形態に係る仮想現実は、３次元の仮想空間と、当該仮想空間内に登場する各種の仮想現実媒体と、当該仮想空間内で提供される各種のコンテンツとにより実現される。

仮想現実媒体は、仮想現実に使用される電子データであり、例えば、カード、アイテム、ポイント、サービス内通貨（又は仮想現実内通貨）、チケット、キャラクタ、アバタ、パラメータ等、任意の媒体を含む。また、仮想現実媒体は、レベル情報、ステータス情報、パラメータ情報（体力値及び攻撃力等）又は能力情報（スキル、アビリティ、呪文、ジョブ等）のような、仮想現実関連情報であってもよい。また、仮想現実媒体は、ユーザによって仮想現実内で取得、所有、使用、管理、交換、合成、強化、売却、廃棄、又は贈与等され得る電子データであるが、仮想現実媒体の利用態様は本明細書で明示されるものに限られない。

本実施形態では、ユーザは、仮想空間内で各種コンテンツを視聴する視聴ユーザ（第２ユーザの一例）と、後述する配信者アバタＭ２（第１表示媒体の一例）を介して仮想空間内で後述する特定コンテンツを配信する配信ユーザ（第１ユーザの一例）とを含む。

なお、配信ユーザは、視聴ユーザとして、他の配信ユーザによる特定コンテンツを視聴することも可能であるし、逆に、視聴ユーザも、配信ユーザとして、特定コンテンツを配信することも可能でありうる。ただし、以下では、説明の複雑化を防止する都合上、視聴ユーザとは、その時の視聴ユーザであるとし、配信ユーザは、その時の配信ユーザであるとする。なお、以下では、配信ユーザと視聴ユーザとを特に区別しない場合は、単に「ユーザ」と称する場合がある。また、視聴ユーザに係る視聴者アバタＭ１（第２表示媒体の一例）と配信者アバタＭ２とを特に区別しない場合は、単に「アバタ」と称する場合がある。

なお、アバタは、典型的には、正面方向を有するキャラクタの形態であり、人や動物又はその類の形態を有してよい。アバタは、各種アバタアイテムに対応付けられることで、多様な容姿（描画されたときの容姿）を有することができる。

視聴ユーザ及び配信ユーザは、基本的には、例えば、頭部又は顔の一部に装着型装置を装着し、当該装着型装置を介して仮想空間を視認する。なお、装着型装置は、ヘッドマウントディスプレイやメガネ型装置であってもよい。メガネ型装置は、いわゆるＡＲ（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）グラスやＭＲ（Ｍｉｘｅｄ Ｒｅａｌｉｔｙ）グラスであってよい。いずれの場合でも、装着型装置は、端末装置２０とは別であってもよいし、端末装置２０の一部又は全部の機能を実現してもよい。本実施形態では、一例として、端末装置２０は、ヘッドマウントディスプレイにより実現されるものとする。

以下では、サーバ装置１０が配信する各種コンテンツのうちの、配信ユーザによる特定コンテンツを主に説明する。また、以下の説明では、ヘッドマウントディスプレイを介して視聴されることが好適なコンテンツについて説明する。

配信ユーザによる特定コンテンツとは、配信ユーザに係る配信者アバタＭ２であって、配信ユーザの向きや位置、動き等に応じて向きや位置、動き等を変化させる配信者アバタＭ２が仮想空間内に登場するコンテンツを指すものとする。なお、配信ユーザの向きや位置、動きとは、配信ユーザの顔や手等の身体の一部や全部の向き、位置、動きのみならず、配信ユーザの視線の向き、位置、動き又はその類を含む概念である。配信ユーザによる特定コンテンツは、典型的には、動画コンテンツである。

配信ユーザによる特定コンテンツは、典型的には、配信者アバタＭ２を介して任意の態様でエンターテイメントを提供するものである。例えば、配信ユーザによる特定コンテンツは、踊りや音楽、マジック等のような各種のパフォーマンス、チャット、会合、集会、会議、又はその類に関連してもてよい。

また、配信ユーザによる特定コンテンツは、教育系であってもよい。例えば、配信ユーザによる特定コンテンツは、配信者アバタＭ２を介して配信ユーザからの指導やアドバイス等を含んでよい。例えば、ダンスのレッスンに係る仮想現実で提供されるコンテンツとして、ダンスの先生からの指導やアドバイス等を含んでよい。この場合、ダンスの先生が配信ユーザとなり、生徒が視聴ユーザとなり、仮想現実において生徒が先生から個別的に指導を受けることができる。

また、配信ユーザによる特定コンテンツは、２人以上の配信ユーザによるコラボレーション（以下、「コラボ」と省略）の形態を含んでよい。これにより、多様な態様での配信が可能となり、配信ユーザ間での交流が促進される。

なお、サーバ装置１０は、配信ユーザによる特定コンテンツ以外のコンテンツを配信することも可能である。サーバ装置１０が提供するコンテンツ（仮想現実で提供されるコンテンツ）の種類や数は、任意であるが、本実施形態では、一例として、サーバ装置１０が提供するコンテンツは、各種の映像のようなデジタルコンテンツを含んでよい。映像は、リアルタイムの映像であってもよいし、非リアルタイムの映像であってもよい。また、映像は、実画像に基づく映像であってもよいし、ＣＧ（Ｃｏｍｐｕｔｅｒ Ｇｒａｐｈｉｃｓ）に基づく映像であってもよい。映像は、情報提供用の映像であってよい。この場合、映像は、特定のジャンルの情報提供サービス（旅や、住まい、食品、ファッション、健康、美容等に関する情報提供サービス）、特定のユーザによる放送サービス（例えばＹｏｕｔｕｂｅ（登録商標））等に関するものであってよい。

仮想現実におけるコンテンツの提供態様は、多様であり、ヘッドマウントディスプレイの表示機能を利用して提供される態様以外であってもよい。例えば、コンテンツが映像である場合、仮想空間内の表示装置（仮想現実媒体）のディスプレイ上に、映像を描画することで、当該コンテンツの提供が実現されてもよい。なお、仮想空間内の表示装置は、任意の形態であり、仮想空間内に設置されるスクリーンや、仮想空間内に設置される大画面ディスプレイ、仮想空間内の携帯端末のディスプレイ等であってよい。

また、仮想現実におけるコンテンツは、ヘッドマウントディスプレイを介する以外の方法によっても視聴可能であってもよい。例えば、仮想現実におけるコンテンツは、スマートフォンやタブレット等を介して直接的に（ヘッドマウントディスプレイを介することなく）視聴されてもよい。

（サーバ装置の構成）
サーバ装置１０の構成について具体的に説明する。サーバ装置１０は、サーバコンピュータにより構成される。サーバ装置１０は、複数台のサーバコンピュータにより協動して実現されてもよい。例えば、サーバ装置１０は、各種のコンテンツを提供するサーバコンピュータや、各種の認証サーバを実現するサーバコンピュータ等により協動して実現されてもよい。また、サーバ装置１０は、Ｗｅｂサーバを含んでよい。この場合、後述する端末装置２０の機能の一部は、Ｗｅｂサーバから受領したＨＴＭＬ文書やそれに付随する各種プログラム（Ｊａｖａｓｃｒｉｐｔ）をブラウザが処理することによって実現されてもよい。

サーバ装置１０は、図１に示すように、サーバ通信部１１と、サーバ記憶部１２と、サーバ制御部１３と、を備える。

サーバ通信部１１は、外部装置と無線又は有線によって通信し、情報の送受信を行うインターフェースを含む。サーバ通信部１１は、例えば無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）通信モジュール又は有線ＬＡＮ通信モジュール等を含んでもよい。サーバ通信部１１は、ネットワーク３を介して、端末装置２０との間で情報を送受信可能である。

サーバ記憶部１２は、例えば記憶装置であって、仮想現実に係る各種処理に必要な種々の情報及びプログラムを記憶する。

サーバ制御部１３は、専用のマイクロプロセッサ又は特定のプログラムを読み込むことにより特定の機能を実現するＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）や、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）等を含んでよい。例えばサーバ制御部１３は、端末装置２０と協動して、端末装置２０の表示部２３に対するユーザ操作に応じて仮想現実アプリケーションを実行する。

（端末装置の構成）
端末装置２０の構成について説明する。図１に示すように、端末装置２０は、端末通信部２１と、端末記憶部２２と、表示部２３と、入力部２４と、端末制御部２５とを備える。

端末通信部２１は、外部装置と無線又は有線によって通信し、情報の送受信を行うインターフェースを含む。端末通信部２１は、例えばＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）（登録商標）や、ＬＴＥ－Ａ（ＬＴＥ－Ａｄｖａｎｃｅｄ）、第五世代移動通信システム、ＵＭＢ（Ｕｌｔｒａ Ｍｏｂｉｌｅ Ｂｒｏａｄｂａｎｄ）等のモバイル通信規格に対応する無線通信モジュール、無線ＬＡＮ通信モジュール、又は有線ＬＡＮ通信モジュール等を含んでもよい。端末通信部２１は、ネットワーク３を介して、サーバ装置１０との間で情報を送受信可能である。

端末記憶部２２は、例えば一次記憶装置及び二次記憶装置を含む。例えば端末記憶部２２は、半導体メモリ、磁気メモリ、又は光メモリ等を含んでもよい。端末記憶部２２は、サーバ装置１０から受信する、仮想現実の処理に用いられる種々の情報及びプログラムを記憶する。仮想現実の処理に用いられる情報及びプログラムは、端末通信部２１を介して外部装置から取得されてもよい。例えば、仮想現実アプリケーションプログラムが、所定のアプリケーション配信サーバから取得されてもよい。以下、アプリケーションプログラムを、単にアプリケーションともいう。

また、端末記憶部２２は、仮想空間を描画するためのデータ、例えば建物のような屋内の空間や、屋外の空間の画像等を記憶する。なお、仮想空間を描画するためのデータは、仮想空間ごとに複数種類用意され、使い分けられてもよい。

また、端末記憶部２２は、３次元の仮想空間内に配置された種々のオブジェクトに投影（テクスチャマッピング）するための種々の画像（テクスチャ画像）を記憶する。

例えば、端末記憶部２２は、各ユーザに対応付けられる仮想現実媒体としての視聴者アバタＭ１の描画情報を記憶する。仮想空間内に視聴者アバタＭ１は、視聴者アバタＭ１の描画情報に基づいて描画される。

また、端末記憶部２２は、各配信ユーザに対応付けられる仮想現実媒体としての配信者アバタＭ２の描画情報を記憶する。仮想空間内に配信者アバタＭ２は、配信者アバタＭ２の描画情報に基づいて描画される。

また、端末記憶部２２は、例えば各種のギフトオブジェクト、建物、壁、又はＮＰＣ（Ｎｏｎ Ｐｌａｙｅｒ Ｃｈａｒａｃｔｅｒ）等のような、視聴者アバタＭ１や配信者アバタＭ２とは異なる各種のオブジェクトに係る描画情報を記憶する。仮想空間内に各種のオブジェクトは、かかる描画情報に基づいて描画される。なお、ギフトオブジェクトとは、一のユーザから他のユーザへのギフト（贈り物）に対応するオブジェクトであり、アイテムの一部である。ギフトオブジェクトは、アバタの身に着けるもの（服やアクセサリー）や配信画像を装飾するもの（花火やお花等）、背景（壁紙）又はその類や、ガチャ（抽選）を回すことのできるチケット又はその類であってよい。

表示部２３は、例えば液晶ディスプレイ又は有機ＥＬ（Ｅｌｅｃｔｒｏ－Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイ等の表示デバイスを含む。表示部２３は、多様な画像を表示可能である。表示部２３は、例えばタッチパネルで構成され、多様なユーザ操作を検出するインターフェースとして機能する。なお、表示部２３は、上述したように、ヘッドマウントディスプレイに内蔵される形態であってよい。

入力部２４は、物理キーを含んでもよいし、マウス等のようなポインティングデバイスをはじめとする任意の入力インターフェースを更に含んでもよい。また、入力部２４は、音声入力やジェスチャ入力、視線入力のような、非接触型のユーザ入力を受付可能であってもよい。なお、ジェスチャ入力には、ユーザの各種状態を検出するためのセンサ（画像センサや、加速度センサ、距離センサ等）や、センサ技術やカメラを統合した専用モーションキャプチャー、ジョイパッドのようなコントローラ等）が利用されてもよい。また、視線検出用のカメラは、ヘッドマウントディスプレイ内に配置されてもよい。なお、上述したように、ユーザの各種状態は、例えばユーザの向きや位置、動き又はその類であり、この場合、ユーザの向きや位置、動きとは、ユーザの手や身体の向き、位置、動きのみならず、配信ユーザの視線の向き、位置、動き又はその類を含む概念である。

端末制御部２５は、１つ以上のプロセッサを含む。端末制御部２５は、端末装置２０全体の動作を制御する。

端末制御部２５は、端末通信部２１を介して情報の送受信を行う。例えば、端末制御部２５は、仮想現実に係る各種処理に用いられる種々の情報及びプログラムを、サーバ装置１０及び他の外部サーバの少なくとも一方から受信する。端末制御部２５は、受信した情報及びプログラムを、端末記憶部２２に記憶する。例えば、端末記憶部２２には、Ｗｅｂサーバに接続するためのブラウザ（インターネットブラウザ）が格納されてよい。

端末制御部２５は、ユーザの操作に応じて仮想現実アプリケーションを起動する。端末制御部２５は、サーバ装置１０と協動して、仮想現実に係る各種処理を実行する。例えば、端末制御部２５は、仮想空間の画像を表示部２３に表示させる。画面上には、例えばユーザ操作を検出するＧＵＩ（Ｇｒａｐｈｉｃ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）が表示されてもよい。端末制御部２５は、入力部２４を介して、ユーザ操作を検出可能である。例えば端末制御部２５は、ユーザのジェスチャによる各種操作（タップ操作、ロングタップ操作、フリック操作、及びスワイプ操作等に対応する操作）を検出可能である。端末制御部２５は、操作情報をサーバ装置１０に送信する。

端末制御部２５は、仮想空間（画像）とともに配信者アバタＭ２等を描画し、表示部２３に表示させる。この場合、例えば、図２に示すように、左右の目でそれぞれ視認される画像Ｇ２００、Ｇ２０１を生成することで、立体視画像を生成してよい。図２には、左右の目でそれぞれ視認される画像Ｇ２００、Ｇ２０１が模式的に示されている。なお、以下では、特に言及しない限り、仮想空間の画像とは、画像Ｇ２００、Ｇ２０１で表現される画像全体を指す。また、端末制御部２５は、例えば配信ユーザによる各種操作に応じて、仮想空間内において配信者アバタＭ２の各種動きを実現させる。端末制御部２５の具体的な描画処理は後述する。

図３は、本実施形態による仮想空間の画像の構造の説明図である。

本実施形態では、仮想空間の画像は、図３に概念的に示すように、複数の階層３００を有する。この場合、端末制御部２５は、各層の画像領域を描画し、各層の画像領域をオーバーレイすることで、仮想空間の画像を生成する。なお、図３に示す例では、階層３００は、４つの層３０１から３０４からなるが、層数は任意である。

複数の層は、配信者アバタＭ２が表示される配信アバタ表示層Ｊ０、視聴者アバタＭ１が表示されるユーザアバタ表示層Ｊ１、ユーザインターフェースが表示されるインターフェース表示層Ｊ２、背景層Ｊ３、各種の補助情報が表示される補助情報表示層Ｊ５、又はその類の層うちの、任意の２つの以上の組み合わせを含んでよい。

以下では、複数の層の前後関係（又は背後）は、仮想空間の画像を視るユーザの視点を基準とし、また、各層間の距離の関係は、仮想空間の画像を視るユーザの視線方向に沿った距離を基準とする。

複数の層は、背景層Ｊ３を含む場合、背景層Ｊ３は最も背後の層となるが、他の層の前後関係は、適宜、設定されてよい。例えば、ある仮想空間の画像に係る複数の層が、配信アバタ表示層Ｊ０と、インターフェース表示層Ｊ２と、背景層Ｊ３と、補助情報表示層Ｊ５とを含む場合、前側から順に、配信アバタ表示層Ｊ０、インターフェース表示層Ｊ２、補助情報表示層Ｊ５、及び背景層Ｊ３を含んでよい。

インターフェース表示層Ｊ２は、上述した入力部２４に関連する層であり、非接触型のユーザ入力を受付可能とする。インターフェース表示層Ｊ２は、好ましくは、仮想空間内のユーザの手の届く距離（すなわち操作可能な距離）に配置される。これにより、ユーザは、ヘッドマウントディスプレイを装着しながら仮想空間内を移動せずに各種入力が可能であり、酔いの生じ難い態様で、インターフェース表示層Ｊ２を介して各種の入力を行うことができる。

補助情報表示層Ｊ５は、好ましくは、インターフェース表示層Ｊ２の背後に配置される。この場合、補助情報表示層Ｊ５は、仮想空間内のユーザの手の届かない（移動せずには届かない）距離に配置される。これにより、インターフェース表示層Ｊ２の前側に補助情報表示層Ｊ５が配置される場合に比べて、インターフェース表示層Ｊ２の視認性を高めることができる。

補助情報表示層Ｊ５に表示される補助情報は、任意であるが、例えば、特定コンテンツの視聴ユーザ（すなわち当該特定コンテンツを視聴している視聴ユーザ）からの入力情報、配信ユーザ及び／又は他のユーザへの案内／お知らせ情報、及び、配信ユーザに贈られるギフトオブジェクトを含むアイテム情報のうちの少なくともいずれか１つを含んでよい。

なお、補助情報表示層Ｊ５は、補助情報の属性ごとに異なる層を形成する態様で、複数の層からなってもよい。例えば、ギフトオブジェクトが描画される補助情報表示層Ｊ５を他の補助情報表示層Ｊ５とは別に設定してもよい。この場合、ギフトオブジェクトが描画される補助情報表示層Ｊ５は、他の補助情報表示層Ｊ５よりも配信アバタ表示層Ｊ０に近い背後に配置されてもよい。あるいは、ギフトオブジェクトが描画される補助情報表示層Ｊ５は、他の補助情報表示層Ｊ５とは異なり、配信アバタ表示層Ｊ０よりも前側に配置されてもよい。

背景層Ｊ３は、仮想空間の外側の境界（外殻）を境界付ける機能を有してよい。なお、仮想空間は、背景層Ｊ３を実質的に有さない無限空間であってもよいし、円柱型や天球型の空間であってよい。

（仮想現実の例）
サーバ制御部１３は、端末装置２０と協動して、表示部２３上に仮想空間の画像を表示し、仮想現実の進行やユーザの操作に応じて仮想空間の画像を更新していく。

なお、以下で説明する描画処理は、端末装置２０により実現されるが、他の実施形態では、以下で説明する描画処理の一部又は全部が、サーバ制御部１３により実現されてもよい。例えば、以下の説明において、端末装置２０に表示される仮想空間の画像の少なくとも一部を、サーバ装置１０が生成したデータに基づいて端末装置２０に表示させるウェブ表示とし、画面の少なくとも一部を、端末装置２０にインストールされているネイティブアプリケーションによって表示させるネイティブ表示としてもよい。

ここで、図４から図１４を参照して、仮想現実生成システム１により生成される仮想空間の画像のいくつかの例について説明する。

図４は、ホーム画面（ロビー画面）に対応する仮想空間の説明図である。図５は、ホーム画面の画像（以下、「ホーム画像Ｈ１」と称する）の階層構造の説明図である。図５Ａは、図４におけるユーザの視点からの視界範囲（正面を視ている場合）Ｒ５００の拡大図である。図６は、ヘッドマウントディスプレイから視たホーム画像Ｈ１の一例を示す図である。図７Ａ及び図７Ｂは、操作領域の前後の入れ替え態様の説明図である。

ホーム画像Ｈ１は、各種の仮想空間へ移動する際の入口となる仮想空間（以下、「ホーム空間」と称する）を表す。図４には、ホーム空間内に位置するユーザが模式的に示されている。ホーム空間には、後述するように、各種コンテンツを選択するための操作領域Ｇ３００が配置されている。ユーザは、ホーム空間から、所望の配信ユーザによる特定コンテンツを視聴したり、自身が配信ユーザになって特定コンテンツを配信したり、他のユーザとコラボの形態で特定コンテンツを配信（以下、「コラボ配信」とも称する）したり等、各種活動を行うことができる。

本実施形態では、一例として、ホーム画像Ｈ１は、前側から順に、インターフェース表示層Ｊ２（第２ユーザインターフェースに係る層の一例）、補助情報表示層Ｊ５、及び背景層Ｊ３を含む。なお、変形例では、上述したような他の層を含んでもよいし、一部の層（例えば補助情報表示層Ｊ５や背景層Ｊ３）が省略されてもよい。

図５には、インターフェース表示層Ｊ２と、補助情報表示層Ｊ５、及び背景層Ｊ３の配置例が、ユーザの位置（視聴者アバタＭ１又は配信者アバタＭ２の位置）を通る所定基準軸Ｉとともに上面視で示されている。本明細書において、上面視とは、特に言及しない限り、仮想空間の上下方向を基準とした上面視である。

本実施形態では、図５に示すように、インターフェース表示層Ｊ２と、補助情報表示層Ｊ５、及び背景層Ｊ３は、上面視で、所定基準軸Ｉまわりに、異なる径ｒ１、ｒ２、ｒ３の円柱の表面を形成する態様で配置され、各径ｒ１、ｒ２、ｒ３は、それぞれの層とユーザとの間の距離に対応する。なお、背景層Ｊ３に係る径ｒ３は、無限大（無限遠）であってもよい。また、インターフェース表示層Ｊ２の径ｒ１は、上述したように、ユーザの手が届く範囲内に設定されてもよい。また、径ｒ１は、ユーザごとに調整可能であってもよい。これにより、ユーザの手の長さや嗜好に応じた距離感でインターフェース表示層Ｊ２を形成できる。

インターフェース表示層Ｊ２は、好ましくは、ホーム空間内のユーザの位置を基準に配置される。換言すると、ユーザがホーム空間内に入ると、ユーザがインターフェース表示層Ｊ２に対して所定の位置関係に位置付けられる。本実施形態では、インターフェース表示層Ｊ２は、ホーム空間内のユーザの位置を基準として、当該ユーザがその場で手の届く範囲内に配置される。これにより、ユーザは、ヘッドマウントディスプレイを装着しながら仮想空間内を移動せずに各種入力が可能であり、酔いの生じ難い態様で、インターフェース表示層Ｊ２を介して各種の入力を行うことができる。

インターフェース表示層Ｊ２は、好ましくは、入力部２４として機能する複数の平面状の操作領域Ｇ３００を含む。この場合、複数の平面状の操作領域Ｇ３００は、ユーザにより選択可能な選択ボタンとして機能できる。なお、平面状の操作領域Ｇ３００のサイズや形状は、任意であり、操作領域Ｇ３００の属性に応じて異なってもよい。これにより、ユーザが属性ごとの操作領域Ｇ３００を識別しやすくなる。

この場合、操作領域Ｇ３００を操作することで実現される各種処理（各種第２処理の一例）は、任意であるが、例えば、ユーザインターフェース（例えば複数の平面状の操作領域Ｇ３００）の配置を変更する処理、ユーザを仮想空間の任意の場所又は特定の場所に移動させる処理（例えば配信ユーザを配信用の場所に移動させる処理）、各種のコンテンツの配信開始処理、各種のコンテンツの視聴開始処理、各種のコンテンツの視聴終了処理、音声入力処理、配信ユーザへギフトを贈る処理、アバタアイテムの抽選処理、アバタアイテムの選択／交換処理、文字入力処理、及び、これらの処理のいずれかを実行可能な状態に移行するための処理、又は、これらの任意の組み合わせを含んでよい。これにより、ユーザは、インターフェース表示層Ｊ２を介して多様な操作を実現できる。

コンテンツの視聴開始処理に対応付けられる複数の平面状の操作領域Ｇ３００は、選択候補のコンテンツ等の内容が対応付けられる態様で、描画されてもよい。例えば、操作領域Ｇ３００のそれぞれには、選択候補のコンテンツ（例えば配信ユーザによる特定コンテンツ）のサムネイル画像やリアルタイムの映像が描画されてもよい（図４参照）。また、コラボ配信のサムネイルには、当該コラボ配信を行う複数の配信ユーザの配信者アバタＭ２が描画されてもよい。これにより、ユーザは、どのようなコンテンツが視聴可能であるかを容易に把握でき、所望の操作領域Ｇ３００（例えば所望の特定コンテンツに係る操作領域Ｇ３００）を容易に選択することが可能となる。

また、複数の平面状の操作領域Ｇ３００は、好ましくは、図４に示すように、複数列をなす態様で配置される。これにより、例えば配信ユーザ数の増加（及びそれに伴い配信中の特定コンテンツ数の増加）等に起因して、平面状の操作領域Ｇ３００の数が増加した場合でも、ユーザの視認可能な範囲内に効率的に多くの操作領域を配置できる。

この場合、複数の平面状の操作領域Ｇ３００は、少なくとも一部が、所定基準軸Ｉまわりの第１曲面５０１（図４及び図５Ａ参照）に沿って複数の列で配置される。所定基準軸Ｉは、ユーザの位置を通り、ホーム空間の上下方向に延在する軸である。このとき、ホーム空間の上面視では、第１曲面５０１は、インターフェース表示層Ｊ２を形状付ける円形状の形態であってよく、曲率中心は所定基準軸Ｉ上に位置してよい。ただし、変形例では、第１曲面５０１は、ホーム空間の上面視で、楕円形状やその類の形状であってもよい。これにより、ユーザは、自身を中心とした同等の距離間で複数の平面状の操作領域Ｇ３００を見ることができ、操作性が向上する。なお、平面状の操作領域Ｇ３００が第１曲面５０１に沿って配置されるとは、ホーム空間の上面視で、操作領域Ｇ３００の平面状に係る平面内の方向が、第１曲面５０１の接線方向に平行な態様であってよい。あるいは、第１曲面５０１の曲率半径が十分小さい場合、操作領域Ｇ３００が第１曲面５０１に投影される態様であってよい。

また、複数の平面状の操作領域Ｇ３００は、好ましくは、カテゴリごとに纏まる態様で配置されてもよい。例えば、第１曲面５０１に沿った一の領域であって、ユーザの視点から視て正面の領域には、ユーザの“おすすめ”のカテゴリに係る操作領域Ｇ３００が配置され、正面の領域の左右側には異なるカテゴリ（例えば、“コラボまち”、“ゲーム”、“ビギナー”、“フォロー”等）が配置されてもよい。このような、各操作領域Ｇ３００の配置は、スマートフォンの画面における各種アプリのアイコンの配置と同様の態様で、ユーザごとにカスタマイズされてもよい。図４には、ユーザの視点から視て正面の領域が領域Ｒ５００（図５参照）で模式的に示されている。ホーム画像Ｈ１は、ユーザの視点から視て正面の領域に基づいて生成される。なお、ユーザの視点から視て正面の領域Ｒ５００の位置は、ユーザの視線の方向や顔の向きが変化するとそれに伴い変化してよい。これにより、実空間での視野の変化と仮想空間での視野の変化の間の整合性を高めることができる。

また、複数の平面状の操作領域Ｇ３００は、好ましくは、前後に複数層をなす態様で配置される。例えば、複数の平面状の操作領域Ｇ３００は、所定基準軸Ｉまわりの第１曲面５０１に沿って複数の列で配置される第１グループと、所定基準軸Ｉまわりの第２曲面５０２に沿って複数の列で配置される第２グループとを含んでよい。この場合、第２曲面５０２は、図４に示すように、第１曲面５０１に対して背後にオフセットされてよい。この場合、ユーザの視点から視たとき、第１曲面５０１に沿って配置された第１グループの複数の操作領域Ｇ３００（以下、第２グループと区別するために、「操作領域Ｇ３００－１」とも称する）の背後に、第２曲面５０２に沿って配置された第２グループの複数の操作領域Ｇ３００（以下、第１グループと区別するために、「操作領域Ｇ３００－２」とも称する）がオーバーラップする関係となる。このとき、ユーザの視点から視たとき、第２グループの操作領域Ｇ３００－２は、第１グループの操作領域Ｇ３００－１の背後から一部が可視であってもよい。この場合、ユーザに背後側の操作領域の存在を知ってもらうことが可能となるとともに、ユーザの目に留まりうる操作領域の数を効率的に増加させることが可能となる。なお、第２曲面に対して、更に背後側にオフセットした第３曲面を設定し、更なる平面状の操作領域Ｇ３００を配置してもよい。このように、ユーザの視点から視て２つ以上の任意の数で平面状の操作領域Ｇ３００をオーバーラップする態様で配置してもよい。

また、このような前後にオーバーラップした複数の平面状の操作領域Ｇ３００の場合、多数の操作領域Ｇ３００を、ユーザにより操作可能に配置しつつ、描画に関する処理負荷を効率的に低減できる。例えば、操作領域Ｇ３００－１に関してのみサムネイル画像やリアルタイムの映像の完全な描画を行いつつ、操作領域Ｇ３００－２に関しては不完全な描画（例えばテクスチャを変化させるなどの加工）を行うことによって、全体としての描画に関する処理負荷を低減することも可能である。また、同様の観点から、操作領域Ｇ３００－１のうちの、ユーザの視点から視て正面の領域Ｒ５００内の操作領域Ｇ３００－１に関してのみサムネイル画像やリアルタイムの映像の完全な描画を行いつつ、正面の領域Ｒ５００外の操作領域Ｇ３００－１に関しては不完全な描画（例えばテクスチャを変化させるなどの加工）を行うことによって、全体としての描画に関する処理負荷を低減することも可能である。例えば、正面の領域Ｒ５００内の操作領域Ｇ３００－１となる可能性が高いデータをユーザの端末装置２０においてプリキャッシュやプリロードすることによって、レイテンシを低減しつつ、ネットワーク３を介して提出されるリクエストの数、及びそれに伴いネットワーク３に課されるリクエストの量、並びにリクエストに応答するために使用される計算リソースを、効率的に低減することが可能となる。この場合、正面の領域Ｒ５００内の操作領域Ｇ３００－１となる可能性が高いデータは、ユーザごとの傾向に基づき予測されてよいし、人工知能に基づく機械学習等により決定されてもよい。

図５Ａには、第１曲面５０１と第２曲面５０２との関係が上面視で模式的に示されている。第１曲面５０１と第２曲面５０２との間のオフセット距離は、異なる属性の層間の距離（例えばインターフェース表示層Ｊ２と補助情報表示層Ｊ５の間の距離）よりも有意に小さくてよい。これにより、同じインターフェース表示層Ｊ２であることがユーザにもわかりやすくなり、また、複数の平面状の操作領域Ｇ３００が奥側にも存在することを直感的に理解しやすくなる。

このような複数の平面状の操作領域Ｇ３００が配置されるインターフェース表示層Ｊ２の場合、ユーザは、特定の操作により、ユーザインターフェース（例えば複数の平面状の操作領域Ｇ３００）の配置を変更可能であってよい。これにより、ユーザの好みや嗜好に応じたユーザインターフェース（例えば複数の平面状の操作領域Ｇ３００）の配置が可能となる。

例えば、複数の平面状の操作領域Ｇ３００の一部は、複数の平面状の操作領域Ｇ３００の配置を変更するボタンとして機能してよい。あるいは、ユーザは、手を左右に動かすジェスチャ入力により、複数の平面状の操作領域Ｇ３００を、ユーザの視点から視て左右に移動させてもよい。図６には、ユーザの操作により、左側の操作領域Ｇ３００（図６では、「Ｇ３００Ｌ」と表記）がユーザの視点から視て正面に移動している途中の状態が示されている。このように、複数の平面状の操作領域Ｇ３００は、第１曲面５０１に沿って左右に移動されてもよい。これにより、複数の平面状の操作領域Ｇ３００のうちの、ユーザの視点から視て正面に位置する操作領域Ｇ３００を容易に変更させることができる。この場合、複数の平面状の操作領域Ｇ３００は、正面の領域に位置する平面状の操作領域Ｇ３００がカテゴリごとに変化する態様で、移動されてもよい。これにより、カテゴリごとの纏まりを維持できるので、見やすさと操作性の両立を図ることができる。

あるいは、複数の平面状の操作領域Ｇ３００の一部又は全部は、連続的に、定期的に又は不定期的に、第１曲面５０１（及び／又は第２曲面５０２）に沿って左右に移動されてもよいし、周回する態様で移動されてもよい。このような動きは、ユーザによる設定に基づいて適宜変更可能であってもよいし、所定の移動条件の成立イベントに基づいて実現されてもよい。

また、上述したように前後にオーバーラップした複数の平面状の操作領域Ｇ３００の場合、ユーザは、所定入力を行うことにより、前後を入れ替えることが可能であってよい。例えば、上述したように、ユーザの視点から視たとき、第１曲面５０１に沿って配置された第１グループの複数の操作領域Ｇ３００－１の背後に、第２曲面５０２に沿って配置された第２グループの複数の操作領域Ｇ３００－２がオーバーラップする場合、図７Ａに模式的に示すように、ユーザは、手を所定の態様で動かす所定入力により、第１グループと第２グループとを入れ替えることができてよい。これにより、直感的な操作が可能となり、操作性が向上する。この場合、第２曲面５０２に沿って配置されていた第２グループの複数の操作領域Ｇ３００－２は、第１グループとして第１曲面５０１に沿って配置され、かつ、第１曲面５０１に沿って配置されていた第１グループの複数の操作領域Ｇ３００－１は、第２グループとして第２曲面５０２に沿って配置されることになる。なお、このような前後入れ替え操作は、複数の平面状の操作領域Ｇ３００のうちの、ユーザの視点から視て正面に位置する操作領域Ｇ３００にだけ適用されてもよい。これにより、複数の平面状の操作領域Ｇ３００の全体を入れ替える場合に比べて処理負荷を低減できる。

なお、前後入れ替え態様は、図７Ａにて矢印で模式的に示すように、第１曲面５０１に沿って配置された第１グループの複数の操作領域Ｇ３００－１の全体がそのまま後ろに回るような態様であってもよいし、図７Ｂにて矢印で模式的に示すように、第１曲面５０１に沿って配置された第１グループの複数の操作領域Ｇ３００－１のうちの上側が上側から後ろに回りかつ下側が下側から後ろに回るような態様であってもよい。また逆に、図７Ｂにて矢印で模式的に示すように、第２曲面５０２に沿って配置された第２グループの複数の操作領域Ｇ３００－２のうちの上側が上側から前方に回りかつ下側が下側から前方に回るような態様で、第１グループと第２グループの切り替えが実現可能であってもよい。なお、ここでは、２つのグループについて説明したが、３つ以上のグループ（すなわち、前後に３層以上でオーバーラップした複数の平面状の操作領域Ｇ３００）の場合も同様である。

なお、本実施形態では、ホーム画像Ｈ１は、ユーザアバタ表示層Ｊ１を含まないが、これに限られない。例えば、ホーム画像Ｈ１は、インターフェース表示層Ｊ２よりも手前側（ユーザの視点に近い側）にユーザアバタ表示層Ｊ１を含んでもよい。この場合、ホーム画像Ｈ１のユーザアバタ表示層Ｊ１には、ユーザが手を前に出したときなど、手が描画されてもよい。これにより、ユーザは、手の動きを見ながら、複数の平面状の操作領域Ｇ３００に対する操作を行うことができるので、操作性が向上する。

図８Ａ及び図８Ｂは、配信画像に対応する仮想空間の説明図であり、図８Ａは、概略的な側面図であり、図８Ｂは、上面視による概略的な平面図である。図８Ａ及び図８Ｂでは、配信ユーザが模式的に符号８０８で指示され、それに対応した配信者アバタＭ２の位置が点線の囲みで模式的に示されている。図９は、配信ユーザによる特定コンテンツの画像（以下、「配信画像Ｈ２」と称する）の階層構造の説明図である。図１０は、鏡と配信画像Ｈ２の各層との関係を上面視により示す説明図である。図１１は、配信ユーザ用の配信画像Ｈ２０に係るインターフェース表示層Ｊ２の説明図である。図１２は、配信ユーザがヘッドマウントディスプレイ（第１装着型装置の一例）を介して視た配信画像Ｈ２の一例を示す図である。図１３は、視聴ユーザがヘッドマウントディスプレイ（第２装着型装置の一例）を介して視た配信画像Ｈ２の一例を示す図である。図１４は、スマートフォン用の配信画像Ｈ２の一例を示す図である。なお、図１４に示す配信画像Ｈ２は、ヘッドマウントディスプレイを介さずに視認する場合の画像であり、スマートフォン以外の同様の端末用としても利用できる。

配信画像Ｈ２は、配信ユーザによる特定コンテンツの制作用の仮想空間（以下、「コンテンツ制作空間」と称する）やその類の仮想空間であって、配信者アバタＭ２が配置される仮想空間に係る画像に対応する。なお、コンテンツ制作空間は、例えば現実世界におけるスタジオなどの空間に対応してよい。配信ユーザは、コンテンツ制作空間において、特定コンテンツの制作活動を行うことができる。

本実施形態では、配信画像Ｈ２は、配信ユーザ用の配信画像Ｈ２０（図１２参照）と、視聴ユーザ用の配信画像であって、ヘッドマウントディスプレイを介して視認可能な配信画像Ｈ２１（図１３参照）と、視聴ユーザ用の配信画像であって、ヘッドマウントディスプレイを介さずに視認可能な配信画像Ｈ２２（以下、「スマートフォン用の配信画像Ｈ２２」とも称する）（図１４参照）とを含む。以下、特に言及しない限り、配信画像Ｈ２とは、これらの任意の配信画像に対応する。

本実施形態では、一例として、配信画像Ｈ２は、前側から順に、配信アバタ表示層Ｊ０、インターフェース表示層Ｊ２（第１ユーザインターフェースに係る層の一例）、補助情報表示層Ｊ５、ユーザアバタ表示層Ｊ１、及び背景層Ｊ３を含む。なお、変形例では、上述したような他の層を含んでもよいし、一部の層（例えば補助情報表示層Ｊ５や背景層Ｊ３）が省略されてもよい。また、インターフェース表示層Ｊ２及び補助情報表示層Ｊ５は、適宜、統合されてもよい。

図９には、配信アバタ表示層Ｊ０、インターフェース表示層Ｊ２、補助情報表示層Ｊ５、ユーザアバタ表示層Ｊ１、及び背景層Ｊ３の配置例が、配信ユーザの位置（配信者アバタＭ２の位置）を通る所定基準軸Ｉとともに上面視で示されている。

本実施形態では、図９に示すように、配信アバタ表示層Ｊ０、インターフェース表示層Ｊ２、補助情報表示層Ｊ５、ユーザアバタ表示層Ｊ１、及び背景層Ｊ３は、上面視で、所定基準軸Ｉを通るユーザの視線方向に沿って、異なる距離ｄ１からｄ５の鉛直面を形成する態様で配置される。この場合、距離ｄ１からｄ５のそれぞれは、それぞれの層とユーザとの間の距離に対応する。なお、背景層Ｊ３に係る距離ｄ５は、無限大であってもよいし、仮想カメラの視点から最も遠い距離の面（ファークリップ面）に応じた距離であってもよい。この場合、仮想カメラのファークリップ面から最も近い距離の面（ニアクリップ面）にインターフェース表示層Ｊ２を設定してもよい。なお、この場合、配信ユーザの視点と仮想カメラは、配信者アバタＭ２の顔や頭部オブジェクトと同位置に設定されてもよく、配信者アバタＭ２の視点から前方に向かう方向に仮想カメラの光軸を有してもよい。この場合、配信者アバタＭ２の顔や配信者アバタＭ２の頭部は、配信ユーザの視点からは描画対象にしない一方、配信者アバタＭ２の腕や手（前に手を出して操作する際の手や腕の動き）は、描画対象としてもよい。なお、この場合でも、他のユーザ（例えば視聴ユーザ）からは、配信者アバタＭ２は、配信アバタ表示層Ｊ０として描画対象となりうる。また、インターフェース表示層Ｊ２の距離ｄ２は、上述したように、ユーザの手が届く範囲内に設定されてもよい。また、距離ｄ２は、ユーザごとに調整可能であってもよい。また、距離ｄ２は、上述した径ｒ１（図５参照）と同じであってもよい。これにより、ユーザの手の長さや嗜好に応じた距離感でインターフェース表示層Ｊ２を形成できる。また、距離ｄ２が径ｒ１（図５参照）と同じである場合、配信ユーザ用の配信画像Ｈ２０とホーム画像Ｈ１との間で同様（共通）の操作性を実現でき、利便性を高めることができる。

配信者アバタＭ２が活動する仮想空間であるコンテンツ制作空間は、任意であり、例えば図８Ａ及び図８Ｂに示す例では、配信ルーム８００を含み、配信ルーム８００内には、配信者アバタＭ２の着替え用のクローゼット８０１や、テーブル８０２が配置されてよい。配信ユーザは、クローゼット８０１内のアバタアイテムのうちから、所望のアバタアイテムを選んで、配信者アバタＭ２の準備（スタンバイ）を行うことができる。なお、アバタアイテムとは、配信者アバタＭ２等のアバタに対応付けて描画されるアイテムであり、例えば、髪型、衣服、装着具、肌の色等を含んでよい。

本実施形態では、コンテンツ制作空間は、好ましい例として、配信ルーム８００内に鏡（ミラー）８０５が配置される。鏡８０５は、現実世界の鏡と同様、光（可視光）を反射する性質を有する。鏡８０５に映る像は、配信画像Ｈ２０に対応する。従って、配信ユーザは、自身に対応する配信者アバタＭ２を鏡８０５の前に位置させることで、正面（鏡８０５）を視ながら、自身の各種状態（向き、位置、及び動き）に対応した配信者アバタＭ２の各種状態（及びそれに伴い配信画像Ｈ２０の状態）を確認できる。これにより、配信ユーザは、鏡８０５に正対する状態（正面を向いた状態）かつ視線を鏡８０５に向けたまま、自身の各種状態（向き、位置、及び動き）及びそれに伴う配信者アバタＭ２の状態（及びそれに伴い配信画像Ｈ２０の状態）を確認できる。このようにして、配信ユーザは、鏡８０５に向かって正対した状態で、自身の動きを確認しつつリアルタイムに適宜自身の動きを修正できるので、自己のイメージ通りの所望の配信画像Ｈ２０を容易に生成できる。

図１０には、配信ルーム８００内の鏡８０５と、配信ユーザと、配信画像Ｈ２の各層の位置関係が、上面視で示されている。図１０において、領域Ｒ５０２は、図９に示した領域Ｒ５０１に対応する領域であり、配信ユーザの視点から正面を視たときの、鏡８０５越しの視野に対応する領域Ｒ５０２は、鏡８０５に仮想カメラが配置されていると仮定したときの、当該仮想カメラの視野に対応する。この場合、鏡８０５内の仮想カメラは、撮像した像を鏡８０５に表示することで、鏡８０５と同様の機能を果たすことができる。

配信アバタ表示層Ｊ０には、配信者アバタが描画される。この場合、配信アバタ表示層Ｊ０には、鏡８０５の前に立つ配信ユーザの各種状態（向き、位置、及び動き）に応じた状態で配信者アバタＭ２が描画される。なお、配信ユーザの各種状態（向き、位置、及び動き）は、上述したように、入力部２４を介して取得できる。

インターフェース表示層Ｊ２は、好ましくは、鏡８０５の前に立つ配信ユーザの位置を基準に配置される。換言すると、配信ユーザが鏡８０５の前に立つと、配信ユーザがインターフェース表示層Ｊ２に対して所定の位置関係に位置付けられる。本実施形態では、インターフェース表示層Ｊ２は、鏡８０５の前に立つときの配信ユーザの位置を基準として、当該ユーザがその場で手の届く範囲内に配置される。なお、所定の位置関係は、ユーザにより適宜変更可能であってもよい。これより、ユーザの嗜好や体格に応じたインターフェース表示層Ｊ２を実現できる。

インターフェース表示層Ｊ２は、好ましくは、入力部２４として機能する１つ以上の操作領域を含む。各種の操作領域は、配信ユーザにより選択可能な選択ボタンとして機能できる。例えば、配信ユーザは、非接触型のユーザ入力を介して、所望の選択ボタンを選択（操作）可能であってよい。

この場合、操作領域を操作することで実現される各種処理（各種第１処理の一例）は、任意であるが、例えば、特定コンテンツの配信開始処理、特定コンテンツの配信終了処理、音声入力処理、配信ユーザがギフトを受け取る処理、アイテムの抽選処理（例えば、アバタに係るアイテム）、各種のアイテムの選択／交換処理、文字入力処理、他のユーザに対する承認処理、配信コンテンツのパラメータ（例えば後述する配信画像Ｈ２の各種パラメータ）の値を変化させる処理、及びこれらの処理を実行可能な状態に移行するための処理、のうちの少なくともいずれか１つを含んでよい。

図１１には、配信ユーザ用の配信画像Ｈ２０における各種アイコンの形態の操作領域Ｇ１００の例が示されている。図１１に示す例では、各種の操作領域Ｇ１００は、チャット（コメント）を行うための操作領域Ｇ１０１、スクリーンショットを取得するための操作領域Ｇ１０２、ゲームをするための操作領域Ｇ１０３、他の動画コンテンツをシェア（視聴ユーザと配信ユーザで同じ動画を視聴する態様のシェア等を含む）するための操作領域Ｇ１０４、ガチャ（抽選）を回すための操作領域Ｇ１０５等を含む。なお、ガチャによる抽選対象物は、任意であるが、例えばアバタアイテムであってよい。

インターフェース表示層Ｊ２における操作領域は、常時、表示されてもよいし、特定の場合だけ表示されてもよい。これにより、インターフェース表示層Ｊ２における操作領域を介した操作を可能としつつ、配信者アバタＭ２の表示領域を拡大して配信者アバタＭ２全体を表示可能とすることができる。

また、インターフェース表示層Ｊ２における特定の操作領域は、上述したようなホーム画像Ｈ１に係る操作領域Ｇ３００と同様の態様で表示されてもよい。この場合も、インターフェース表示層Ｊ２における各種操作領域は、図７Ａ及び図７Ｂを参照して上述した態様で前後入れ替え可能とされてもよい。

また、好ましい実施形態では、インターフェース表示層Ｊ２における操作領域は、配信画像Ｈ２の各種パラメータを調整するための操作領域Ｇ１２０「以下、「スマホ小窓領域Ｇ１２０」とも称する」を含む。スマホ小窓領域Ｇ１２０には、視聴ユーザ用の配信画像Ｈ２１の一部又は全部及び／又はスマートフォン用の配信画像Ｈ２２の一部又は全部が表示されてよい。

スマホ小窓領域Ｇ１２０を介して調整可能な配信画像Ｈ２の各種パラメータは、例えば仮想カメラに係るパラメータであり、具体的には、明るさ、仮想カメラとの間の距離（すなわち鏡８０５と配信ユーザとの間の距離）、仮想カメラの光軸方向、仮想カメラの横方向の位置（光軸方向に交差する横方向での、配信ユーザに対する位置）、ズーム（倍率）等を含んでよい。この場合、例えば、配信ユーザは、スマホ小窓領域Ｇ１２０をスマートフォンと見立てて操作する態様で、例えばピンチアウトやピンチインにより、スマホ小窓領域Ｇ１２０内の画像のズームを変更可能であってもよいし、スワイプにより、スマホ小窓領域Ｇ１２０内の画像を平行移動可能であってもよい。あるいは、配信ユーザは、スマホ小窓領域Ｇ１２０の位置を移動させる操作を行うことで、仮想カメラの位置（自身に対する相対的な位置）を変更可能であってもよい。また、配信ユーザは、スマホ小窓領域Ｇ１２０を介して、仮想カメラの状態を制御することで、仮想カメラの位置を配信ユーザの移動に自動的に追従するような追従モードと、仮想カメラの位置を固定する固定モードとの間の切替が可能であってもよい。この場合、追従モードにより移動型の配信を行うことが可能となる。また、配信ユーザは、スマホ小窓領域Ｇ１２０を介して、仮想カメラの状態を制御することで、ＡＦＫ（Ａｗａｙ Ｆｒｏｍ Ｋｅｙｂｏａｒｄ）の状態やミュート状態のような、視聴ユーザに見せたくない状態を形成可能であってもよい。これにより、不要な物体の描画による処理負荷の増加を防止しつつ、配信ユーザの利便性を高めることができる。

ところで、ユーザは、ヘッドマウントディスプレイ等を装着した状態では、実空間での操作とは異なり、配信画像Ｈ２の各種パラメータを調整する際の操作性が悪くなりやすいが、スマホ小窓領域Ｇ１２０を設けることで、操作性が良好となる。

また、スマホ小窓領域Ｇ１２０にスマートフォン用の配信画像Ｈ２２が表示される場合、配信ユーザは、ヘッドマウントディスプレイを介して視聴される場合の配信画像Ｈ２１に略一致する配信画像Ｈ２０とともに、スマートフォンで視聴される場合の配信画像Ｈ２２を確認しながら、特定コンテンツを制作できる。なお、スマホ小窓領域Ｇ１２０に代えて又は加えて、タブレット小窓部のような、他の視聴デバイス用の小窓部が設定されてもよい。配信ユーザは、所望の小窓部を選択して配信画像Ｈ２０に表示させることが可能であってもよい。

図１２に示す例では、配信者アバタＭ２を映す鏡８０５に隣接してスマホ小窓領域Ｇ１２０が表示されている。スマホ小窓領域Ｇ１２０は、スマートフォンに表示される場合の配信画像Ｈ２２（図１４参照）を表してもよい。この場合、配信ユーザは、スマートフォンで視聴する視聴ユーザの端末装置２０上の配信画像Ｈ２２の状態をリアルタイムに確認しながら、配信を行うことができる。

なお、変形例では、配信画像Ｈ２０は、配信中の画像と、配信前の準備画像の２つの概念を含んでよい。配信前の準備画像の場合、インターフェース表示層Ｊ２において、クローゼット８０１（図８Ａ参照）を開いて着替えを行うための操作領域Ｇ１０６（図１１参照）や、配信を開始するための操作領域Ｇ１０７（図１１参照）等が描画されてもよい。

補助情報表示層Ｊ５には、配信画像Ｈ２に係る特定コンテンツの視聴ユーザからのギフトアイテムや応援メッセージ等の文字情報がリアルタイムに描画されてよい。これにより、配信ユーザは、視聴ユーザの反応や視聴ユーザとの交流等を楽しみながら、特定コンテンツの配信を行うことができる。また、補助情報表示層Ｊ５には、特定コンテンツの配信名やタイトル等が描画されてもよい。例えば、図１２に示す例では、「まったり雑談配信」という配信名Ｇ１１と、ハート型のギフトオブジェクトＧ１２、「初見です・・・」といった各種コメントＧ１３等が描画されている。

ユーザアバタ表示層Ｊ１には、配信画像Ｈ２に係る特定コンテンツの視聴ユーザの視聴者アバタＭ１が描画されてよい。これにより、配信ユーザは、視聴ユーザの数や状態を把握しながら、配信を行うことができる。なお、ユーザアバタ表示層Ｊ１に描画される視聴者アバタＭ１は、対応する視聴ユーザの状態（向き、位置、及び動き）に応じた状態で描画されてもよい。これにより、配信ユーザは、視聴ユーザの状態を把握しながら配信を行うことができる。

この場合、ユーザアバタ表示層Ｊ１の状態を配信ユーザが容易に把握できるように、配信アバタ表示層Ｊ０に描画される配信者アバタＭ２は、半透明に描画されてもよい。この場合、配信ユーザは、配信者アバタＭ２の背後のユーザアバタ表示層Ｊ１の状態を容易に確認できる。なお、配信者アバタＭ２の半透明状態とソリッド状態との間は、配信ユーザによる入力により切り替え可能とされてもよい。この場合、配信ユーザは、配信者アバタＭ２の状態と、配信者アバタＭ２の背後のユーザアバタ表示層Ｊ１の状態とを選択的に確認することが容易となる。

背景層Ｊ３には、配信ルーム８００の壁等が描画されてもよい。あるいは、背景層Ｊ３には、配信ルーム８００の壁越しの風景が描画されてもよい。なお、配信画像Ｈ２に係る特定コンテンツの視聴ユーザの視聴者アバタＭ１は、コンテンツ制作空間とは異なる仮想空間（以下、「視聴空間」）に入室してもよい。この場合、背景層Ｊ３には、視聴空間に係る背景が描画されてもよい。この場合、視聴空間の画像である視聴ユーザ用の配信画像Ｈ２１（図１３参照）は、配信ユーザ用の配信画像Ｈ２０（図１２参照）に対して、背景層Ｊ３が異なってもよい。このように、視聴空間は、配信ユーザ用の配信画像Ｈ２０の表す仮想空間（コンテンツ制作空間）との間で不整合があってもよい。これにより、視聴ユーザ用の配信画像Ｈ２１を、配信ユーザ用の配信画像Ｈ２０とは異なる観点から最適化できる。

なお、変形例では、図８Ｂに模試的に示すように、配信ルーム８００は、前面側にハーフミラー（マジックミラー）の壁体８１０を有してもよい。この場合、壁体８１０は、外部から室内を見ることができる反面、内部からは室外を見ることができず鏡８０５と同様に反射する機能を有する。この場合、配信ユーザは、壁体８１０を上述した鏡８０５と同様の態様で利用して、配信を行うことができる。一方、視聴ユーザは、配信ルーム８００内の配信ユーザ（配信者アバタＭ２）を、壁体８１０越しに視聴できる。なお、この場合、配信画像Ｈ２の背景層Ｊ３は、配信ルーム８００の内部に代えて、特製の舞台等の描画を含んでよい。

次に、図１５以降を参照して、上述した仮想現実生成システム１の構成例を順に説明していく。

図１５は、コンテンツ配信側の端末装置２０Ａの機能を示す概略的なブロック図である。図１６は、アバタの描画情報の一例の説明図である。図１５及び図１６の説明において、特に言及しない限り、配信ユーザとは、一の配信ユーザを指し、配信画像Ｈ２（Ｈ２０）とは、当該一の配信ユーザによる特定コンテンツを形成する配信画像Ｈ２を指す。

端末装置２０Ａは、図１５に示すように、第１描画処理部２００Ａと、第２描画処理部２００Ｂと、第１情報生成部２１０Ａと、第１通信部２２０Ａと、第１表示部２３０Ａと、第１記憶部２４０Ａと、第１ユーザインターフェース部２５０Ａとを含む。

第１描画処理部２００Ａ、第２描画処理部２００Ｂ、第１情報生成部２１０Ａ、第１通信部２２０Ａ、第１表示部２３０Ａ、及び第１ユーザインターフェース部２５０Ａの各機能は、図１に示した端末装置２０Ａの端末制御部２５が、端末通信部２１、端末記憶部２２、表示部２３及び入力部２４と協動して、仮想現実アプリケーションを実行することで実現できる。また、第１記憶部２４０Ａは、図１に示した端末装置２０Ａの端末記憶部２２により実現できる。

第１描画処理部２００Ａは、上述した配信ユーザ用の配信画像Ｈ２０（図１２参照）（第１仮想空間の画像の一例）を描画する。第１描画処理部２００Ａは、例えば所定のフレームレートで配信ユーザ用の配信画像Ｈ２０（図１２参照）を生成する。

第１描画処理部２００Ａは、第１描画部２０１Ａと、第２描画部２０２Ａと、第３描画部２０３Ａとを含む。

第１描画部２０１Ａは、配信ユーザ用の配信画像Ｈ２０（図１２参照）における配信アバタ表示層Ｊ０の画像領域（第１画像領域の一例）を描画する。配信画像Ｈ２０における配信アバタ表示層Ｊ０は、上述したとおりである。第１描画部２０１Ａは、例えば第１記憶部２４０Ａに記憶されるアバタの描画情報（図１６の表７００参照）に基づいて、配信アバタ表示層Ｊ０の画像領域における配信者アバタＭ２を描画してもよい。図１６には、アバタの描画情報の一例が表７００で模試的に示されている。

この場合、アバタの描画情報は、各アバタＩＤに、顔パーツＩＤ、髪型パーツＩＤ、服装パーツＩＤ等が対応付けられる。顔パーツＩＤ、髪型パーツＩＤ、服装パーツＩＤ等の容姿に係るパーツ情報は、アバタを特徴付けるパラメータであり、各ユーザにより選択されてよい。例えば、アバタに係る顔パーツＩＤ、髪型パーツＩＤ、服装パーツＩＤ等の容姿に係る情報は、複数種類用意される。また、顔パーツＩＤについては、顔の形、目、口、鼻等の各種類にそれぞれパーツＩＤが用意され、顔パーツＩＤに係る情報は、当該顔を構成する各パーツのＩＤの組み合わせで管理されてもよい。この場合、各アバタＩＤに紐付けられた容姿に係る各ＩＤに基づいて、サーバ装置１０のみならず端末装置２０側においても各アバタを描画することが可能となる。

なお、第１描画部２０１Ａは、例えば配信者アバタＭ２がクローゼット８０１（図８Ａ参照）を開いて着替え等を行った場合（すなわち髪型や服装に係るＩＤを変化させた場合）は、それに応じて配信者アバタＭ２の容姿を更新する。

また、第１描画部２０１Ａは、第１情報生成部２１０Ａの第１検出部２１１Ａ（後述）からの検出結果（配信ユーザの状態の検出結果）に基づいて、配信者アバタＭ２の状態を変化させる。本実施形態では、上述したように、第１描画部２０１Ａは、鏡８０５（図８Ａ参照）に対面する配信ユーザの状態を、配信者アバタＭ２に置き換える態様で、配信者アバタＭ２を描画する。

例えば、配信者アバタＭ２が正面方向を有するキャラクタの形態である場合、第１描画部２０１Ａは、配信ユーザが右を向くと、配信者アバタＭ２が左を向き、配信ユーザが下を向くと、配信者アバタＭ２が下を向くといった態様で、配信者アバタＭ２の向きを配信ユーザの向きに連動させてもよい。なお、この場合、向きは、顔だけであってもよいし、身体だけであってもよいし、これらの組み合わせであってもよい。これにより、配信者アバタＭ２と配信ユーザとの間の向きの整合性（連動性）が高くなり、配信者アバタＭ２の向きによる表現の多様化が可能となる。

また、配信者アバタＭ２が視線方向を有するキャラクタの形態である場合、第１描画部２０１Ａは、配信ユーザの視線が右を向くと、配信者アバタＭ２の視線が左を向き、配信ユーザの視線が下を向くと、配信者アバタＭ２の視線が下を向くといった態様で、配信者アバタＭ２の視線の向きを配信ユーザの視線の向きに連動させてもよい。また、瞬きなど、目の各種動きを連動させてもよい。また、鼻や口などの動きを連動させてもよい。これにより、配信者アバタＭ２と配信ユーザとの間のパーツごとの整合性（連動性）が高くなり、配信者アバタＭ２による表情の多様化が可能となる。

また、配信者アバタＭ２が手を有するキャラクタの形態である場合、第１描画部２０１Ａは、配信ユーザが右手を上げると、配信者アバタＭ２が左手を上げ、配信ユーザが両手を上げると、配信者アバタＭ２が両手を上げるといった態様で、配信者アバタＭ２の手の動きを配信ユーザの手の動きに連動させてもよい。また、指など手の各部の動きについても連動させてもよい。また、足等の他のパーツについても同様に連動させてもよい。これにより、配信者アバタＭ２と配信ユーザとの間の整合性（連動性）が高くなり、配信者アバタＭ２のパーツの動き等による表現の多様化が可能となる。

また、配信画像Ｈ２０における配信者アバタＭ２の位置（描画位置）が可変である場合（すなわち、配信者アバタＭ２が位置を変化させるキャラクタである場合）、第１描画部２０１Ａは、配信ユーザが右に移動すると、配信者アバタＭ２が左に移動し、配信ユーザが鏡８０５から離れると、配信者アバタＭ２が遠ざかるといった態様で、配信ユーザの位置（鏡８０５に対する位置）に応じて、配信画像Ｈ２０における配信者アバタＭ２の位置を変化させてよい。これにより、配信者アバタＭ２と配信ユーザとの間の移動（位置）に関する整合性（連動性）が高くなり、配信者アバタＭ２の位置の変化による表現の多様化が可能となる。

第２描画部２０２Ａは、配信ユーザ用の配信画像Ｈ２０（図１２参照）におけるインターフェース表示層Ｊ２の画像領域（第２画像領域の一例）を描画する。配信画像Ｈ２０におけるインターフェース表示層Ｊ２は、上述したとおりである。

第２描画部２０２Ａは、上述した各種の操作領域Ｇ１００（図１１参照）やスマホ小窓領域Ｇ１２０（図１２参照）を描画する。この場合、第２描画部２０２Ａは、常時、各種の操作領域Ｇ１００やスマホ小窓領域Ｇ１２０を描画してもよいし、適宜、一部又は全部の描画を省略してもよい。例えば、第２描画部２０２Ａは、後述する視聴ユーザ情報取得部２２２Ａからのコラボ承認／非承認指示に応答して、コラボ承認／非承認用の操作領域Ｇ１１７、Ｇ１１８（図１１参照）を出力させてもよい。これにより、インターフェース表示層Ｊ２を介して操作可能なバリエーションを増加しつつ、インターフェース表示層Ｊ２の表示の簡素化（見やすさ）を図ることができる。

第３描画部２０３Ａは、配信ユーザ用の配信画像Ｈ２０（図１２参照）における残りの層の画像領域（第３画像領域の一例）を描画する。すなわち、第３描画部２０３Ａは、配信画像Ｈ２０における配信アバタ表示層Ｊ０及びインターフェース表示層Ｊ２以外の層の画像領域を描画する。例えば、第３描画部２０３Ａは、配信画像Ｈ２０の階層構造に応じて、背景層Ｊ３や補助情報表示層Ｊ５の各画像領域を描画してよい。

本実施形態では、上述したように、一例として、配信画像Ｈ２０は、前側から順に、配信アバタ表示層Ｊ０、インターフェース表示層Ｊ２、補助情報表示層Ｊ５、ユーザアバタ表示層Ｊ１、及び背景層Ｊ３を含む。

従って、本実施形態では、第３描画部２０３Ａは、補助情報表示層Ｊ５、ユーザアバタ表示層Ｊ１、及び背景層Ｊ３の各画像領域を描画する。

第３描画部２０３Ａは、後述する視聴ユーザ情報取得部２２２Ａからのギフト描画指示に応答して、例えば第１記憶部２４０Ａに記憶されるギフトオブジェクトの描画情報に基づいて、補助情報表示層Ｊ５の画像領域におけるギフトオブジェクトを描画してもよい。なお、ギフトオブジェクトに係る描画情報は、ギフトＩＤごとに、第１記憶部２４０Ａに記憶されてよい。ギフト描画指示は、描画対象のギフトオブジェクトを特定するギフトＩＤと、座標情報とを含んでよい。座標情報は、配信画像Ｈ２０における描画位置を指示する情報であり、時系列で変化してよい。また、座標情報は、ギフトオブジェクトの動きを表す動き情報を含んでもよい。動き情報は、例えば、回転しながら落下する等の動きを表してもよい。これにより、ギフトオブジェクトの表現の多様化を図ることができる。

また、第３描画部２０３Ａは、後述する視聴ユーザ情報取得部２２２Ａからの視聴ユーザ描画指示に応答して、例えば第１記憶部２４０Ａに記憶されるアバタの描画情報（図１６の表７００参照）に基づいて、ユーザアバタ表示層Ｊ１の画像領域における視聴者アバタＭ１（視聴ユーザの視聴者アバタＭ１）を描画してもよい。視聴ユーザ描画指示は、特定コンテンツを視聴している視聴ユーザに係る視聴者アバタＭ１を描画するための各種情報を含んでよい。例えば、視聴者アバタＭ１を描画するための各種情報は、視聴者アバタＭ１の情報（例えばアバタＩＤ、顔パーツＩＤ、髪型パーツＩＤ、服装パーツＩＤ等）や、座標情報を含んでよい。また、視聴者アバタＭ１に動きを持たせる仕様の場合、視聴ユーザ描画指示は、視聴ユーザの状態を表す情報（又はそれに基づく視聴者アバタＭ１の状態を表す情報）を含んでよい。これにより、配信ユーザ用の配信画像Ｈ２０において視聴ユーザの動きが表現可能となるので、配信ユーザと視聴ユーザとの一体感を高めることができる。

また、第３描画部２０３Ａは、後述する視聴ユーザ情報取得部２２２Ａからのコメント描画指示に応答して、ユーザアバタ表示層Ｊ１の画像領域に各種コメントを描画してもよい。コメント描画指示は、コメントＩＤや座標情報を含んでよい。なお、定形コメントに係る描画情報は、コメントＩＤごとに、第１記憶部２４０Ａに記憶されてよい。なお、定形コメントに関するコメントＩＤに代えて、コンテンツ視聴側の端末装置２０Ｂから送信されうるテキスト情報（例えば、チャット等のメッセージ）が利用されてもよい。これにより、視聴ユーザのそれぞれからの固有のメッセージ等の送信が可能となり、配信ユーザ用の配信画像Ｈ２０における、配信ユーザと視聴ユーザとの一体感を高めることができる。

また、第３描画部２０３Ａは、配信ユーザにより選択されている背景ＩＤに対応した背景画像を背景層Ｊ３に描画してよい。背景画像は、背景ＩＤごとに、第１記憶部２４０Ａに記憶されてよい。なお、背景画像は、配信ユーザによりカスタマイズされてもよい。

第２描画処理部２００Ｂは、上述したホーム画像Ｈ１（図６参照）（第２仮想空間の画像の一例）を描画する。第２描画処理部２００Ｂは、例えば所定のフレームレートでホーム画像Ｈ１（図６参照）を生成する。

第２描画処理部２００Ｂは、第４描画部２０４Ｂと、第５描画部２０５Ｂとを含む。

第４描画部２０４Ｂは、ホーム画像Ｈ１（図６参照）におけるインターフェース表示層Ｊ２の画像領域（第４画像領域の一例）を描画する。ホーム画像Ｈ１におけるインターフェース表示層Ｊ２は、上述したとおりである。第４描画部２０４Ｂは、後述する第１入力処理部２５２Ａからの指令に応答して複数の操作領域Ｇ３００の配置等を変更してよい（図６や図７Ａ参照）。

第５描画部２０５Ｂは、ホーム画像Ｈ１（図６参照）における残りの層の画像領域（第５画像領域の一例）を描画する。すなわち、第５描画部２０５Ｂは、ホーム画像Ｈ１におけるインターフェース表示層Ｊ２以外の層の画像領域を描画する。例えば、第５描画部２０５Ｂは、ホーム画像Ｈ１の階層構造に応じて、背景層Ｊ３や補助情報表示層Ｊ５の各画像領域を描画してよい。これにより、描画に関する処理負荷を大きく増加させることなく、ユーザに必要となりうる各種情報を効率的に提供可能とすることができる。

本実施形態では、上述したように、一例として、ホーム画像Ｈ１は、前側から順に、インターフェース表示層Ｊ２、補助情報表示層Ｊ５、及び背景層Ｊ３を含む。

従って、本実施形態では、第５描画部２０５Ｂは、補助情報表示層Ｊ５及び背景層Ｊ３の各画像領域を描画する。

第１情報生成部２１０Ａは、配信ユーザに係る各種情報（以下、「配信ユーザ情報」と称する）を生成する。配信ユーザ情報は、後述する第１ユーザインターフェース部２５０Ａで利用される配信ユーザの状態（第１検出部２１１Ａにより検出された配信ユーザの状態）を表す情報を含む。また、配信ユーザ情報は、視聴ユーザ用の配信画像Ｈ２１（図１３参照）を描画するために必要な情報を含む。例えば、配信ユーザ情報は、配信者アバタＭ２を描画するための情報（例えばアバタＩＤや、顔パーツＩＤ、髪型パーツＩＤ、服装パーツＩＤ等）を含む。また、配信ユーザによる特定コンテンツが、配信ユーザによる音声を含む場合、配信ユーザ情報は、入力部２４のマイク等を介して取得される音声情報を含んでよい。これにより、特定コンテンツの構成する各種情報を分離した形で扱うことができ、分散処理が可能となる。

本実施形態では、第１情報生成部２１０Ａは、第１検出部２１１Ａと、第１音声情報生成部２１２Ａと、第１テキスト情報生成部２１３Ａとを含む。

第１検出部２１１Ａは、配信ユーザの状態（ユーザの向きや位置、動き又はその類）を検出する。第１検出部２１１Ａは、上述した入力部２４を介して、配信ユーザの状態を検出してもよい。第１検出部２１１Ａは、ホーム画像Ｈ１が描画されている状態では、例えばホーム画像Ｈ１のフレームレートに応じた周期で、配信ユーザの状態を検出してもよい。また、第１検出部２１１Ａは、配信ユーザ用の配信画像Ｈ２０が描画されている状態では、例えば配信ユーザ用の配信画像Ｈ２０（図１２参照）のフレームレートに応じた周期で、配信ユーザの状態を検出してもよい。これにより、配信ユーザの状態（及びそれに伴い配信者アバタＭ２の表示）を高い頻度で検出（更新）できる。

第１検出部２１１Ａは、例えば、配信ユーザの操作に応じてオン／オフ状態が切り替わってよい。例えば、インターフェース表示層Ｊ２に表示されうる配信開始用のボタン（図１１の操作領域Ｇ１０７参照）を配信ユーザが操作した場合、後述する第１入力検出部２５１Ａにより当該操作が検出され、後述する第１入力処理部２５２Ａからの指令に応答して第１検出部２１１Ａがオン状態に遷移してよい。これにより、インターフェース表示層Ｊ２を介して操作可能なバリエーションを増加しつつ、インターフェース表示層Ｊ２の表示の簡素化（見やすさ）を図ることができる。インターフェース表示層Ｊ２の表示の簡素化を図ることで、背後の層の見やすさを高めることができる。

第１音声情報生成部２１２Ａは、配信ユーザの発話に基づく音声情報を生成する。例えば、第１音声情報生成部２１２Ａは、入力部２４のマイク等を介して配信ユーザの音声情報を生成する。なお、第１音声情報生成部２１２Ａは、入力部２４を介して得られる音声データを加工して配信ユーザの音声情報を生成してもよい。この場合、加工方法は、配信ユーザにより選択可能であってもよいし、音声データの加工が配信ユーザにより手動で実現されてもよい。

第１音声情報生成部２１２Ａは、例えば、配信ユーザの操作に応じてオン／オフ状態が切り替わってよい。例えば、インターフェース表示層Ｊ２に表示されうるミュートボタン（図示せず）を配信ユーザが操作した場合、後述する第１入力検出部２５１Ａにより当該操作が検出され、後述する第１入力処理部２５２Ａからの指令に応答して第１音声情報生成部２１２Ａがオフ状態に遷移してよい。

第１テキスト情報生成部２１３Ａは、配信ユーザの発話及び／又は文字入力に基づくテキスト情報を生成する。例えば、第１テキスト情報生成部２１３Ａは、配信ユーザが視聴ユーザと対話（チャット等）を行う際のテキスト情報を生成する。

第１テキスト情報生成部２１３Ａは、例えば、配信ユーザの操作に応じてオン／オフ状態が切り替わってよい。例えば、インターフェース表示層Ｊ２に表示されうるコメント用のボタン（図１１の操作領域Ｇ１０１参照）を配信ユーザが操作した場合、後述する第１入力検出部２５１Ａにより当該操作が検出され、後述する第１入力処理部２５２Ａからの指令に応答して第１テキスト情報生成部２１３Ａがオン状態に遷移してよい。これにより、インターフェース表示層Ｊ２を介して操作可能なバリエーションを増加しつつ、インターフェース表示層Ｊ２の表示の簡素化（見やすさ）を図ることができる。

この場合、第１情報生成部２１０Ａは、配信ユーザの状態を表す情報（又はそれに基づく配信者アバタＭ２の状態を表す情報）（以下、単に「配信者アバタＭ２の状態情報」と称する）と、配信者アバタＭ２の情報（例えばアバタＩＤ、顔パーツＩＤ、髪型パーツＩＤ、服装パーツＩＤ等）と、適宜、音声情報やテキスト情報と、をセットとして配信ユーザ情報に含ませてよい。この場合、第１情報生成部２１０Ａは、配信者アバタＭ２の状態情報や音声情報、テキスト情報のような、動的に変化する情報には、タイムスタンプを付与する態様で配信ユーザ情報を生成してもよい。これにより、コンテンツ視聴側の端末装置２０Ｂは、かかる配信ユーザ情報を受信すると、受信した配信ユーザ情報に基づいて、上述したような配信画像Ｈ２１であって音声の出力を伴う配信画像Ｈ２１を、配信ユーザによる特定コンテンツとして出力できる。

第１通信部２２０Ａは、サーバ装置１０や他の端末装置２０（例えばコンテンツ視聴側の端末装置２０Ｂ）と通信する。本実施形態では、第１通信部２２０Ａは、配信処理部２２１Ａと、視聴ユーザ情報取得部２２２Ａとを含む。

配信処理部２２１Ａは、第１情報生成部２１０Ａにより生成される配信ユーザ情報を、コンテンツ視聴側の端末装置２０Ｂに送信する。なお、変形例では、配信処理部２２１Ａは、第１描画処理部２００Ａにより生成された配信画像Ｈ２０に基づく動画データを端末装置２０Ｂに送信してもよい。

配信処理部２２１Ａは、例えば配信ユーザによる操作等に応じて、リアルタイムで配信ユーザ情報をコンテンツ視聴側の端末装置２０Ｂに送信してもよいし（すなわちライブ配信を実現してもよいし）、非リアルタイムで配信ユーザ情報をコンテンツ視聴側の端末装置２０Ｂに送信してもよい。非リアルタイムの場合、配信処理部２２１Ａは、配信ユーザによる手動での編集後の動画データ又は編集後の配信ユーザ情報をコンテンツ視聴側の端末装置２０Ｂに送信してもよい。

視聴ユーザ情報取得部２２２Ａは、コンテンツ視聴側の端末装置２０Ｂから各種の視聴ユーザ情報を取得する。視聴ユーザ情報取得部２２２Ａは、取得した視聴ユーザ情報に基づいて、上述したギフト描画指示や、視聴ユーザ描画指示、コメント描画指示、コラボ承認／非承認指示等を生成する。なお、視聴ユーザ情報は、これらのギフト描画指示、視聴ユーザ描画指示、コメント描画指示、コラボ承認／非承認指示等を生成するために必要な情報が含められる。

第１表示部２３０Ａは、第１描画処理部２００Ａにより生成された配信ユーザ用の配信画像Ｈ２０（図１２参照）や第２描画処理部２００Ｂにより生成されたホーム画像Ｈ１を、端末装置２０Ａの表示部２３に出力する。なお、本実施形態では、上述したように、表示部２３は、一例として、ヘッドマウントディスプレイの形態である。

第１記憶部２４０Ａには、上述したアバタの描画情報（図１６の表７００参照）等が記憶される。

第１ユーザインターフェース部２５０Ａは、入力部２４を介して、配信ユーザの各種入力を検出し、各種入力に応じた処理を実行する。第１ユーザインターフェース部２５０Ａは、第１入力検出部２５１Ａと、第１入力処理部２５２Ａとを含む。

第１入力検出部２５１Ａは、上述したインターフェース表示層Ｊ２を介した配信ユーザによる各種入力を検出する。例えば、第１入力検出部２５１Ａは、上述した各種の操作領域Ｇ１００（図１１参照）やスマホ小窓領域Ｇ１２０（図１２参照）、操作領域Ｇ３００等を介した入力等を検出する。

この場合、第１入力検出部２５１Ａは、第１検出部２１１Ａにより検出された配信ユーザの状態と、インターフェース表示層Ｊ２の状態（例えば各種の操作領域Ｇ１００やスマホ小窓領域Ｇ１２０の位置や表示状態）とに基づいて、配信ユーザによるインターフェース表示層Ｊ２を介した入力を検出してよい。例えば、第１入力検出部２５１Ａは、各種の操作領域Ｇ１００のうちの、一の操作領域に対してタップする動作を検出した場合に、当該一の操作領域に対する選択操作を検出してよい。これにより、ユーザは仮想空間内における簡易な動きで選択操作を実現できる。

第１入力処理部２５２Ａは、ホーム画像Ｈ１において、第１入力検出部２５１Ａにより検出された各種入力に応じた各種処理（各種第２処理の一例）を実行する。各種処理は、任意であるが、上述したように、例えば、ユーザインターフェース（例えば複数の平面状の操作領域Ｇ３００）の配置を変更する処理や、ユーザを仮想空間の任意の場所又は特定の場所に移動させる処理（例えば配信ユーザを配信用の場所に移動させる処理）等であってよい。なお、各種処理は、適宜、第２描画処理部２００Ｂによる各種の描画処理や画面の遷移（例えば仮想空間の移動）を伴ってもよい。

また、第１入力処理部２５２Ａは、配信ユーザ用の配信画像Ｈ２０（図１２参照）において、第１入力検出部２５１Ａにより検出された各種入力に応じた各種処理（各種第１処理の一例）を実行する。各種処理は、任意であるが、上述したように、例えば、特定コンテンツの配信開始処理、特定コンテンツの配信終了処理、音声入力処理、配信ユーザがギフトを受け取る処理等であってよい。なお、各種処理は、適宜、第１描画処理部２００Ａによる各種の描画処理や画面の遷移（例えば仮想空間の移動）を伴ってもよい。例えば、ギフトを受け取る処理を実行可能な状態に移行するための処理は、第１描画処理部２００Ａの第３描画部２０３Ａによるお知らせ情報（ギフトが贈られた旨のお知らせ情報）の描画や、第１描画処理部２００Ａの第２描画部２０２Ａによる受け取り用ボタンの描画等を伴ってもよい。

このように、本実施形態によれば、配信ユーザ用の配信画像Ｈ２０は、上述したように、複数の階層を有するので、配信ユーザ用の配信画像Ｈ２０の画像を階層化して処理負荷を効率的に低減できる。例えば、特定コンテンツを動画形式で配信する場合は、配信アバタ表示層Ｊ０の画像領域及びインターフェース表示層Ｊ２の画像領域のうちの配信アバタ表示層Ｊ０の画像領域をインターフェース表示層Ｊ２の画像領域よりも高い頻度で描画（更新）する等によって、配信ユーザ用の配信画像Ｈ２０を描画する際の全体としての処理負荷を効率的に低減できる。また、配信ユーザ用の配信画像Ｈ２０を階層化することで、“空間”としての距離感をユーザに効果的に与えることができる。また、配信ユーザ用の配信画像Ｈ２０を階層化することで、例えば各層の画像領域の属性ごとに適切な距離で配置でき、例えば酔いが生じがたい態様の操作性の高いユーザインターフェースの描画と、視認しやすい配信者アバタＭ２等の描画の両立等が可能となる。

図１７は、コンテンツ視聴側の端末装置２０Ｂの機能を示す概略的なブロック図である。

端末装置２０Ｂは、図１７に示すように、第１描画処理部２００Ａ’と、第２描画処理部２００Ｂと、第２情報生成部２１０Ｂと、第２通信部２２０Ｂと、第２表示部２３０Ｂと、第２記憶部２４０Ｂと、第２ユーザインターフェース部２５０Ｂとを含む。

第１描画処理部２００Ａ’、第２描画処理部２００Ｂ、第２情報生成部２１０Ｂ、第２通信部２２０Ｂ、第２表示部２３０Ｂ、及び第２ユーザインターフェース部２５０Ｂの各機能は、図１に示した端末装置２０Ｂの端末制御部２５が、端末通信部２１、端末記憶部２２、表示部２３及び入力部２４と協動して、仮想現実アプリケーションを実行することで実現できる。また、第２記憶部２４０Ｂは、図１に示した端末装置２０Ｂの端末記憶部２２により実現できる。

第１描画処理部２００Ａ’は、後述する配信ユーザ情報取得部２２２Ｂからの配信ユーザ描画指示に応答して、視聴ユーザ用の配信画像Ｈ２１（図１３参照）を描画する。この場合、配信ユーザ描画指示は、コンテンツ配信側の端末装置２０Ａから送信される配信ユーザ情報（端末装置２０Ａの第１情報生成部２１０Ａにより生成される配信ユーザ情報）に基づいて生成される。第１描画処理部２００Ａ’は、例えば配信ユーザ情報の更新周期に対応したフレームレートで視聴ユーザ用の配信画像Ｈ２１（図１３参照）を生成してよい。

第１描画処理部２００Ａ’は、第１描画部２０１Ｂと、第２描画部２０２Ｂと、第３描画部２０３Ｂとを含む。

第１描画部２０１Ｂは、視聴ユーザ用の配信画像Ｈ２１（図１３参照）における配信アバタ表示層Ｊ０の画像領域（第１画像領域の一例）を描画する。視聴ユーザ用の配信画像Ｈ２１における配信アバタ表示層Ｊ０は、上述したとおりである。第１描画部２０１Ｂは、配信ユーザ情報と、例えば第１記憶部２４０Ａに記憶されるアバタの描画情報（図１６の表７００参照）とに基づいて、配信アバタ表示層Ｊ０の画像領域における配信者アバタＭ２を描画してもよい。この場合、第１記憶部２４０Ａに記憶されるアバタの描画情報を利用するので、比較的負荷の少ない処理で配信者アバタＭ２を描画できる。

第１描画部２０１Ｂの動作は、上述したコンテンツ配信側の端末装置２０Ａの第１描画部２０１Ａと同様の機能を有する。この場合、配信者アバタＭ２を描画するための各種情報は、配信ユーザ描画指示に含まれてよい。すなわち、配信ユーザ描画指示は、配信者アバタＭ２の情報（例えばアバタＩＤや、顔パーツＩＤ、髪型パーツＩＤ、服装パーツＩＤ等）や、配信ユーザの状態を表す情報（又はそれに基づく配信者アバタＭ２の状態を表す情報）等を含んでよい。

第２描画部２０２Ｂは、視聴ユーザ用の配信画像Ｈ２１（図１３参照）におけるインターフェース表示層Ｊ２の画像領域（第２画像領域の一例）を描画する。第２描画部２０２Ｂの動作は、上述したコンテンツ配信側の端末装置２０Ａの第２描画部２０２Ａと同様の機能を有する。ただし、視聴ユーザ用の配信画像Ｈ２１におけるインターフェース表示層Ｊ２には、配信ユーザ用の配信画像Ｈ２０（図１２参照）におけるインターフェース表示層Ｊ２とは異なる操作領域が描画されてもよい。例えば、第２描画部２０２Ｂは、図１３に示すように、ギフトを配信ユーザに贈るための操作領域Ｇ１０８や、コラボ配信の要請を配信ユーザに送信するための操作領域Ｇ１０９等を描画してもよい。なお、コラボ配信の要請は、配信ユーザ側から発出することが可能であってもよく、この場合、コラボ配信の要請を視聴ユーザに送信するための操作領域は、配信ユーザ用の配信画像Ｈ２０（図１２参照）に描画されてもよい。これにより、コラボ配信が促進され、ユーザ間の交流を効果的に促進できる。

第３描画部２０３Ｂは、視聴ユーザ用の配信画像Ｈ２１（図１３参照）における残りの層の画像領域（第３画像領域の一例）を描画する。第３描画部２０３Ｂの動作は、上述したコンテンツ配信側の端末装置２０Ａの第３描画部２０３Ａと同様の機能を有する。ただし、補助情報表示層Ｊ５における描画内容は、適宜、異なってもよい。例えば、視聴ユーザ用の配信画像Ｈ２１においては、図１３に示すように、視聴者アバタＭ１（図１２参照）が描画されなくてもよい。

第２描画処理部２００Ｂは、上述したホーム画像Ｈ１（図６参照）（第２仮想空間の画像の一例）を描画する。第２描画処理部２００Ｂは、例えば所定のフレームレートでホーム画像Ｈ１（図６参照）を生成する。

第２描画処理部２００Ｂは、第４描画部２０４Ｂと、第５描画部２０５Ｂを含む。第２描画処理部２００Ｂは、端末装置２０Ａの第２描画処理部２００Ｂと実質的に同様であってよい。これにより、共通のハードウェアリソースを利用した効率的な構成を実現できる。

第２情報生成部２１０Ｂは、視聴ユーザに係る各種の視聴ユーザ情報を生成する。各種の視聴ユーザ情報は、後述する第２ユーザインターフェース部２５０Ｂで利用される視聴ユーザの状態（第２検出部２１１Ｂにより検出された視聴ユーザの状態）を表す情報を含む。また、各種の視聴ユーザ情報は、上述したコンテンツ配信側の端末装置２０Ａの視聴ユーザ情報取得部２２２Ａにおいてギフト描画指示、視聴ユーザ描画指示、コメント描画指示、コラボ承認／非承認指示等を生成するために必要な情報を含む。

本実施形態では、第２情報生成部２１０Ｂは、第２検出部２１１Ｂと、第２音声情報生成部２１２Ｂと、第２テキスト情報生成部２１３Ｂとを含む。

第２検出部２１１Ｂは、視聴ユーザの状態（ユーザの向きや位置、動き又はその類）を検出する。第２検出部２１１Ｂは、上述した入力部２４を介して、視聴ユーザの状態を検出してもよい。

第２検出部２１１Ｂは、ホーム画像Ｈ１が描画されている状態では、例えばホーム画像Ｈ１のフレームレートに応じた周期で、視聴ユーザの状態を検出してもよい。また、第２検出部２１１Ｂは、視聴ユーザ用の配信画像Ｈ２１（図１３参照）が描画されている状態では、例えば配信ユーザ情報の更新周期に対応した周期で、視聴ユーザの状態を検出してもよい。

第２音声情報生成部２１２Ｂは、視聴ユーザの発話に基づく音声情報を生成する。例えば、第２音声情報生成部２１２Ｂは、入力部２４のマイク等を介して視聴ユーザの音声情報を生成する。なお、第２音声情報生成部２１２Ｂは、入力部２４を介して得られる音声データを加工して視聴ユーザの音声情報を生成してもよい。この場合、加工方法は、視聴ユーザにより選択可能であってもよいし、音声データの加工が視聴ユーザにより手動で実現されてもよい。

第２音声情報生成部２１２Ｂは、例えば、視聴ユーザの操作に応じてオン／オフ状態が切り替わってよい。例えば、視聴ユーザ用の配信画像Ｈ２１（図１３参照）におけるインターフェース表示層Ｊ２に表示されうるミュートボタン（図示せず）を視聴ユーザが操作した場合、後述する第２入力検出部２５１Ｂにより当該操作が検出され、後述する第２入力処理部２５２Ｂからの指令に応答して第２音声情報生成部２１２Ｂがオフ状態に遷移してよい。

第２テキスト情報生成部２１３Ｂは、視聴ユーザの発話及び／又は文字入力に基づくテキスト情報を生成する。例えば、第２テキスト情報生成部２１３Ｂは、視聴ユーザが配信ユーザと対話（チャット等）を行う際のテキスト情報を生成する。

第２テキスト情報生成部２１３Ｂは、例えば、視聴ユーザの操作に応じてオン／オフ状態が切り替わってよい。例えば、インターフェース表示層Ｊ２に表示されうるコメント用のボタン（図１３には図示せず）を視聴ユーザが操作した場合、後述する第２入力検出部２５１Ｂにより当該操作が検出され、後述する第２入力処理部２５２Ｂからの指令に応答して第２テキスト情報生成部２１３Ｂがオン状態に遷移してよい。これにより、インターフェース表示層Ｊ２を介して操作可能なバリエーションを増加しつつ、インターフェース表示層Ｊ２の表示の簡素化（見やすさ）を図ることができる。

この場合、第２情報生成部２１０Ｂは、視聴ユーザの状態を表す情報（又はそれに基づく視聴者アバタＭ１の状態を表す情報）（以下、単に「視聴者アバタＭ１の状態情報」と称する）と、視聴者アバタＭ１の情報（例えばアバタＩＤ、顔パーツＩＤ、髪型パーツＩＤ、服装パーツＩＤ等）と、適宜、音声情報と、をセットとして視聴ユーザ情報に含ませてよい。この場合、第２情報生成部２１０Ｂは、視聴者アバタＭ１の状態情報や音声情報のような、動的に変化する情報には、タイムスタンプを付与する態様で視聴ユーザ情報を生成してもよい。これにより、コンテンツ配信側の端末装置２０Ａは、かかる視聴ユーザ情報を受信すると、受信した視聴ユーザ情報に基づいて、上述したような配信画像Ｈ２０におけるユーザアバタ表示層Ｊ１における視聴者アバタＭ１を描画できる。

第２通信部２２０Ｂは、サーバ装置１０や他の端末装置２０（例えばコンテンツ配信側の端末装置２０Ａ）と通信する。本実施形態では、第２通信部２２０Ｂは、配信処理部２２１Ｂと、配信ユーザ情報取得部２２２Ｂとを含む。

配信処理部２２１Ｂは、第２情報生成部２１０Ｂにより生成される視聴ユーザ情報を、コンテンツ配信側の端末装置２０Ａに送信する。

配信ユーザ情報取得部２２２Ｂは、コンテンツ配信側の端末装置２０Ａから配信ユーザ情報を取得し、上述した配信ユーザ描画指示を第１描画処理部２００Ａ’に与える。配信ユーザ情報は、上述したようにコンテンツ配信側の端末装置２０Ａの配信処理部２２１Ａにより生成される。

第２表示部２３０Ｂは、第１描画処理部２００Ａ’や第２描画処理部２００Ｂにより生成された配信画像Ｈ２０やホーム画像Ｈ１を、端末装置２０Ｂの表示部２３に出力する。なお、本実施形態では、上述したように、表示部２３は、一例として、ヘッドマウントディスプレイの形態である。

第２記憶部２４０Ｂには、上述したアバタの描画情報（図１６の表７００参照）等が記憶される。

第２ユーザインターフェース部２５０Ｂは、入力部２４を介して、視聴ユーザの各種入力を検出し、各種入力に応じた処理を実行する。第２ユーザインターフェース部２５０Ｂは、第２入力検出部２５１Ｂと、第２入力処理部２５２Ｂとを含む。

第２入力検出部２５１Ｂは、上述したインターフェース表示層Ｊ２を介した視聴ユーザによる各種入力を検出する。例えば、第２入力検出部２５１Ｂは、上述した第２描画部２０２Ｂや第４描画部２０４Ｂにより描画されるインターフェース表示層Ｊ２を介した入力等を検出する。

この場合、第２入力検出部２５１Ｂは、第２検出部２１１Ｂにより検出された視聴ユーザの状態と、インターフェース表示層Ｊ２の状態（例えば各種の操作領域Ｇ１００やスマホ小窓領域Ｇ１２０の位置や表示状態）とに基づいて、視聴ユーザによるインターフェース表示層Ｊ２を介した入力を検出してよい。例えば、第２入力検出部２５１Ｂは、ホーム画像Ｈ１において、上述した複数の平面状の操作領域Ｇ３００に対する視聴ユーザによる各種操作を検出したり、視聴ユーザ用の配信画像Ｈ２１（図１３参照）において、各種操作領域（コラボ配信の要請を配信ユーザに送信するための操作領域等）に対する視聴ユーザによる各種操作を検出したりする。

第２入力処理部２５２Ｂは、ホーム画像Ｈ１において第２入力検出部２５１Ｂにより検出された各種入力に応じた各種処理（各種第２処理の一例）を実行する。各種処理は、任意であるが、上述したように、例えば、ユーザインターフェース（例えば複数の平面状の操作領域Ｇ３００）の配置を変更する処理や、ユーザを仮想空間の任意の場所又は特定の場所に移動させる処理（例えば視聴ユーザを視聴用の場所に移動させる処理）等であってよい。なお、各種処理は、適宜、第２描画処理部２００Ｂによる各種の描画処理や画面の遷移（例えば仮想空間の移動）を伴ってもよい。例えば、ギフトを贈る処理を実行可能な状態に移行するための処理は、第２描画処理部２００Ｂの第４描画部２０４Ｂによるギフト選択用の画面の描画等を伴ってもよい。

また、第２入力処理部２５２Ｂは、視聴ユーザ用の配信画像Ｈ２１（図１３参照）において、第２入力検出部２５１Ｂにより検出された各種入力に応じた各種処理（各種第２処理の一例）を実行する。各種処理は、任意であるが、上述したように、例えば、特定コンテンツの視聴終了処理、音声入力処理、配信ユーザへギフトを贈る処理等であってよい。なお、各種処理は、適宜、第１描画処理部２００Ａ’による各種の描画処理や画面の遷移（例えば仮想空間の移動）を伴ってもよい。例えば、配信ユーザへギフトを贈る処理は、第１描画処理部２００Ａ’の第３描画部２０３Ｂによるお知らせ情報（ギフトが受け取られた旨のお知らせ情報）の描画等を伴ってもよい。

図１８は、サーバ装置１０の機能を示す概略的なブロック図である。

サーバ装置１０は、主に、通信部１００と、記憶部１１０と、を含む。

通信部１００は、配信ユーザによる特定コンテンツの配信及び／又は視聴に必要とされる様々な情報（例えば、配信ユーザ情報や視聴ユーザ情報等）を、コンテンツ配信側の端末装置２０Ａ及び／又はコンテンツ視聴側の端末装置２０Ｂとの間において通信することができる。

記憶部１１０は、配信ユーザによる特定コンテンツの配信及び／又は視聴に必要とされる様々な情報を記憶することができる。

このように、本実施形態によれば、視聴ユーザ用の配信画像Ｈ２１は、上述したように、複数の階層を有するので、視聴ユーザ用の配信画像Ｈ２１の画像を階層化して処理負荷を効率的に低減できる。例えば、インターフェース表示層Ｊ２のうちの、ユーザの視点から視て正面の領域内の画像領域をその他の画像領域よりも高い頻度で描画（更新）する等によって、視聴ユーザ用の配信画像Ｈ２１を描画する際の全体としての処理負荷を効率的に低減できる。また、視聴ユーザ用の配信画像Ｈ２１を階層化することで、“空間”としての距離感をユーザに効果的に与えることができる。また、視聴ユーザ用の配信画像Ｈ２１を階層化することで、例えば各層の画像領域の属性ごとに適切な距離で配置でき、例えば酔いが生じがたい態様の操作性の高いユーザインターフェースの描画と、視認しやすい操作領域Ｇ３００等の描画の両立等が可能となる。

なお、本実施形態では、サーバ装置１０は、上述したホーム画像Ｈ１や配信画像Ｈ２の描画機能を有しておらず、かかる描画機能は、上述したようにコンテンツ配信側の端末装置２０Ａ及び／又はコンテンツ視聴側の端末装置２０Ｂにより実現されている。しかしながら、ホーム画像Ｈ１及び／又は配信画像Ｈ２の描画機能の一部又は全部は、サーバ装置１０により実現されてもよい。これは、描画機能以外の機能についても適宜同様であってよい。

次に、図１９以降を参照して、図１に示した仮想現実生成システム１において行われる動作例について説明する。

図１９は、図１に示した仮想現実生成システム１において行われるコンテンツ配信側の端末装置２０Ａの動作であって、特定コンテンツの配信開始に至るまでの動作の一例を示すフロー図である。

まず、ステップＳ１９０において、配信ユーザとなるユーザは、ヘッドマウントディスプレイである端末装置２０Ａを装着し、仮想現実アプリケーションを起動させる。これにより、ユーザは、ホーム空間内に位置し（ステップＳ１９１）、ホーム画像Ｈ１を視認できる。ユーザは、ホーム画像Ｈ１におけるインターフェース表示層Ｊ２の操作領域を操作して、コンテンツ制作空間に移動する（ステップＳ１９２）。配信ユーザは、コンテンツ制作空間に移動すると、適宜、配信者アバタＭ２の着替え等の準備を行い（ステップＳ１９３）、その後、鏡８０５の前に立ち、配信画像Ｈ２０（配信前の準備画像）を視認する（ステップＳ１９４）。なお、配信前の準備画像としての配信画像Ｈ２０は、配信アバタ表示層Ｊ０とインターフェース表示層Ｊ２のみを含んでもよく、配信アバタ表示層Ｊ０とインターフェース表示層Ｊ２と背景層Ｊ３のみを含んでもよい。なお、配信前の準備画像としての配信画像Ｈ２０には、インターフェース表示層Ｊ２に配信開始用の操作領域Ｇ１０７（図１１参照）が描画されてよい。また、別の実施形態では、コンテンツ制作空間に移動すると同時に配信がスタートされてもよい。

配信ユーザは、配信画像Ｈ２０を見て配信をスタートさせることを決定すると、インターフェース表示層Ｊ２における対応する操作領域Ｇ１０７（図１１参照）を操作して、配信画像Ｈ２０を含む特定コンテンツの配信を開始する（ステップＳ１９５）。このようにして、特定コンテンツの配信が開始されると、コンテンツ視聴側の端末装置２０Ｂのホーム画像Ｈ１におけるインターフェース表示層Ｊ２に、当該特定コンテンツを選択できる操作領域Ｇ３００（図６及び図７Ａ等参照）が描画される。

図２０は、図１に示した仮想現実生成システム１において行われるコンテンツ視聴側の端末装置２０Ｂの動作であって、特定コンテンツの視聴開始に至るまでの動作の一例を示すフロー図である。

まず、ステップＳ２００において、視聴ユーザとなるユーザは、ヘッドマウントディスプレイである端末装置２０Ｂを装着し、仮想現実アプリケーションを起動させる。これにより、ユーザは、ホーム空間内に位置し（ステップＳ２０１）、ホーム画像Ｈ１を視認できる。ユーザは、ホーム画像Ｈ１におけるインターフェース表示層Ｊ２の操作領域Ｇ３００を操作して、所望の特定コンテンツを選択する（ステップＳ２０２）。このようにして、視聴ユーザは、特定コンテンツの視聴を開始できる（ステップＳ２０３）。

図２１は、図１に示した仮想現実生成システム１において行われるコンテンツ配信側の端末装置２０Ａ、コンテンツ視聴側の端末装置２０Ｂ、及びサーバ装置１０の動作であって、配信ユーザによる特定コンテンツの配信中（すなわち視聴ユーザによる特定コンテンツの視聴中）の動作の一例を示すフロー図である。

なお、図２１において、左側には、一のコンテンツ配信側の端末装置２０Ａにより行われる動作が示され、中央には、サーバ装置１０（ここでは１つのサーバ装置１０）により行われる動作が示され、右側には、一のコンテンツ視聴側の端末装置２０Ｂにより行われる動作が示されている。

ステップＳ２１０において、配信ユーザは、鏡８０５の前で演技等を行う。これにより、コンテンツ配信側の端末装置２０Ａは、演技等に応じた配信ユーザ情報を生成する。コンテンツ配信側の端末装置２０Ａは、このような配信ユーザ情報をサーバ装置１０に送信する。なお、配信ユーザ情報は、伝送される（伝送された）情報と基準時間に基づくタイムスタンプとの対応関係がコンテンツ配信側の端末装置２０Ａ及びコンテンツ視聴側の端末装置２０Ｂの両方において明らかであるという条件が満たされる限りにおいて、任意の多重方式により相互に多重されサーバ装置１０に送信されてもよい。このような条件が満たされていれば、コンテンツ視聴側の端末装置２０Ｂは、配信ユーザ情報を受信したときに、配信ユーザ情報に対応するタイムスタンプに従って適切に処理することができる。多重方式については、配信ユーザ情報は、それぞれ、別々のチャネルを介して送信されてもよいし、配信ユーザ情報のうちの一部が同一のチャネルを介して送信されてもよい。チャネルは、タイムスロット、周波数帯域、及び／又は、拡散符号等を含み得る。なお、基準時間を利用した動画（特定コンテンツ）の配信方法は、ここでの参照により本願明細書に組み込まれる特許第６８０３４８５号公報に開示される態様で実現されてもよい。

次に、ステップＳ２１０における動作と並行して、コンテンツ配信側の端末装置２０Ａは、ステップＳ２１２において、視聴ユーザ用の配信画像Ｈ２１を描画するための配信ユーザ情報を継続的にコンテンツ視聴側の端末装置２０Ｂに送信するとともに、コンテンツ配信側の端末装置２０Ａに配信ユーザ用の配信画像Ｈ２０（図１２参照）を出力する。

コンテンツ配信側の端末装置２０Ａは、ステップＳ２１０及びステップＳ２１２における動作を、以下に説明するステップＳ２１４からステップ２２２における動作と並行して行うことができる。

次に、ステップＳ２１４において、サーバ装置１０は、コンテンツ配信側の端末装置２０Ａから継続的に送信されてくる配信ユーザ情報を、コンテンツ視聴側の端末装置２０Ｂに送信（転送）する。

ステップＳ２１６において、コンテンツ視聴側の端末装置２０Ｂは、サーバ装置１０から配信ユーザ情報を受信して記憶部１４０に記憶させる。一実施形態では、音声情報が他の情報に比べて大きな容量を有する可能性及び／又は通信回線に障害が発生する可能性を考慮して、コンテンツ視聴側の端末装置２０Ｂは、サーバ装置１０から受信した配信ユーザ情報を一時的に端末記憶部２２（図１参照）に記憶（バッファリング）することができる。

このような配信ユーザ情報を受信及び記憶することに並行して、ステップＳ２１８において、コンテンツ視聴側の端末装置２０Ｂは、コンテンツ配信側の端末装置２０Ａからサーバ装置１０を介して受信及び記憶した配信ユーザ情報を用いて、視聴ユーザ用の配信画像Ｈ２１を生成して特定コンテンツを再生する。

上述したステップＳ２１６及びステップＳ２１８における動作と並行して、ステップＳ２２０において、コンテンツ視聴側の端末装置２０Ｂは、視聴ユーザ情報を生成し、視聴ユーザ情報をサーバ装置１０を介してコンテンツ配信側の端末装置２０Ａに送信する。視聴ユーザ情報は、例えば、視聴ユーザがギフトを贈る操作を行った場合等にだけ生成されてもよい。

ステップＳ２２２において、サーバ装置１０は、コンテンツ視聴側の端末装置２０Ｂから受信した視聴ユーザ情報を、コンテンツ配信側の端末装置２０Ａに送信（転送）する。

ステップＳ２２４において、コンテンツ配信側の端末装置２０Ａは、視聴ユーザ情報をサーバ装置１０を介して受信することができる。

ステップＳ２２６において、コンテンツ配信側の端末装置２０Ａは、基本的にステップＳ２１０におけるものと同様の動作を行うことができる。例えば、コンテンツ配信側の端末装置２０Ａは、ステップＳ２２４において受信した視聴ユーザ情報に基づいて、ギフト描画指示を生成し、配信画像Ｈ２０における補助情報表示層Ｊ５に、対応するギフトオブジェクトを描画する。

このようにして、図２１に示す処理は、配信ユーザによる特定コンテンツの配信が終了するまで又は当該特定コンテンツの視聴ユーザがいなくなるまで継続的に実行されてよい。

なお、図２１に示す例において、各処理の実行主体は、上述のように多様な態様で変更可能である。例えば、ステップＳ２１２の処理のうち、配信ユーザ用の配信画像Ｈ２０を生成する処理は、端末装置２０Ａに代えて、サーバ装置１０で実現されてもよい。また、ステップＳ２１８の処理のうち、視聴ユーザ用の配信画像Ｈ２１を生成する処理は、端末装置２０Ａやサーバ装置１０で実現されてもよい。この場合、ステップＳ２１６では、配信ユーザ情報に代えて、視聴ユーザ用の配信画像Ｈ２１のデータが受信されてよい。また、ステップＳ２２６の処理のうち、視聴ユーザ情報に基づいて配信画像Ｈ２０における補助情報表示層Ｊ５にギフトオブジェクトを描画する処理は、端末装置２０Ａに代えて、サーバ装置１０で実現されてもよい。

（変形例）
上述した実施形態は、端末装置２０Ａ、２０Ｂとして装着型装置（ヘッドマウントディスプレイ）を用いた態様について説明したが、本願発明に係る仮想現実生成システム１、を携帯電話、スマートフォン、タブレット端末、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）などを端末装置２０Ａ（第１端末装置の一例）、端末装置２０Ｂ（第２端末装置の一例）として用いたメタバース（インターネット上の仮想空間）として構成してもよい。以下では、このような態様とした場合の変形例について説明するが、メタバースとして構成した場合の論点として、設定され得るシーン（場面）及び画面の切り替えとユーザインターフェース（ＵＩ）の態様について説明する。以下の説明で触れていない事項については、技術的に合理性のある範囲内で上述した実施形態の説明が適用される。なお、以下において、ユーザインターフェースは、上述した実施形態における、入力部２４、第１ユーザインターフェース部２５０Ａ、及び／又は第２ユーザインターフェース部２５０Ｂによって実現される。

まず、メタバースとして構成した場合の、設定され得るシーン（場面）と、各シーンにおけるユーザインターフェースについて説明する。

各ユーザが共に視聴（以下、「共聴」という）するようなシーンについては、ユーザインターフェースは、再生、停止、言語設定などの操作を階層的にメニューにすることが好ましい。すなわち、一つの大スクリーンを用いて共聴する場合でも、音量、字幕言語設定、再生・停止・早送りなどは個別に操作できることとし、直接の操作に加えて、それらの権限設定が階層化することが好ましい。ユーザインターフェースの例としては、例えば、［動画を再生＞リスト表示＞共聴／自分だけ＞ここに固定／みんなで操作］、［再生中にスクリーン操作＞（権限がある場合）再生／停止／早送り／巻き戻し／終了］といった態様としてよい。

アバタへエモート（感情表現）を付与するようなシーンについては、共聴時、各ユーザは視線をスクリーンに向けるので、通常の表情エモート選択ではなく、より簡易に、かつ、ターゲットしている方向を明示しながらすばやく設定する（例えば、セミオート）ことが好ましい。ユーザインターフェースの例としては、例えば、［共聴スクリーン＞観戦モード＞スティックの上下左右が｛笑顔マーク、ハートマーク、拍手マーク、ｓｅｍｉ－ａｕｔｏ｝に変わる］、［セミオート＞ほかの人が反応したらそれに従う／映像に歓声があったら自動で反応］といった態様としてよい。

ユーザが講演者としてプレゼンテーションを行うようなシーンであるプレゼンテーションモードについては、ユーザのうち講演者にはシナリオや画面共有したい資料、その表示ユーザインターフェースなどが見えているのに対し、他のユーザにはメニューもユーザインターフェースも表示されないようにしてよい（ただし、バーチャルキャストは表示される）。ユーザインターフェースの例としては、例えば、［次のページに送る／いま喋るテキスト／次の画像］といった態様としてよい。講演者となるユーザは後ろを振り返るわけにはいかないため、操作とプレビュー、準備された画像やテキストがスクリーンに表示されることとなる。

ユーザがクイズ番組やオンライン教育用に選択肢だけで高速に回答するようなシーンである着席回答モードについては、ユーザインターフェースの例としては、例えば、個々のユーザに対し、選択肢の回答と挙手ボタンが表示されるようにしてよい。自由すぎないように、オーガナイザーに指定されると、一定条件を満たすまでそのユーザインターフェースで固定される。問題と回答の選択肢のセットになっており、タイマー、得点、ベットするコインの数などが含まれてよい。

建物を配置するようなシーンである配置モードについては、階層としては、［配置→ショップ→アウトドア→購入（残金・決済・ローン）→確定→場所→向き→他ユーザの操作可能／不可能…］といった態様となるが、これを３次元空間の直接配置にすると、「持って、落とす」という程度の対応しかできないので向きをそろえることは難しい。さらに、その後の「他者が見える・さわれる・移動できるかどうか」といった属性設定も行ない難い。そこで、ユーザインターフェースの例として、例えば、［３次元空間で自由に歩行→メニュー開く→ショップ］といった態様とすることができ、このとき、３次元空間は２次元のショップ画面の背景に薄く表示されており、他者からはメニューやショップは見えないようにしてよい。これを表示している間、他者からは虫眼鏡マークが頭に浮いていて「ショップ」の作業中であることが理解できるような状態で硬直しているように見える。配置決定かつ他者との衝突があるオブジェクト配置の場合は、他者に「建設予定地」が表示され、そこに他のユーザがいる場合は処理待ちになる。一定時間待っても解決しない場合は再度確認画面に戻るようにしてよく、また、キャンセルすると配置場所・向きについて一つ戻るようにしてよい。

次に、メタバースとして構成した場合の、画面の切り替えとユーザインターフェースについて説明する。

ユーザの視点については、自己視点で操作しているのみでは、俯瞰や第三者視点で観たいときに難が生じる。そこで、視点の切り替えとして、ユーザインターフェースで［俯瞰］を選択した時に俯瞰状態で観ることができるようにしてよい。ユーザインターフェースの例としては、例えば、［メニュー→ドローンフォト→決定でドローン操作モードに入る］といった態様としてよい。この際、アバタは固定とし、エモートや手などでモーションを作りながら、スティックで操作したドローンからの空撮ができるようにしてよい。

スクリーンショットを取った時のレイアウトビューについては、連写モードと連動し、「シェアしますか？」という確認画面が表示され、ユーザインターフェースの例としては、例えば、［フィルムロールを開く→過去の撮影を数枚並べて左右選択／上下でシェア／フィルタ／レイアウト（縦長、横長、正方形）／削除などを操作決定］といった態様としてよい。

メタバース空間内でのゲーム（Ｉｎ－Ｓｐａｃｅ－Ｇａｍｅ）時におけるゲームビューについては、ゲームのルールに従った判定やスコアシートが表示される。また、ゲームをアシストするための情報（例えば、ゲームがボウリングであれば目標であるピン、ジャンケンであれば相手が今まで出してきた指の出し方など）が表示されてもよい。一方、ゲームによって、その性格に応じ、武器の持ち替え、相手のＨＰ表示、味方グループとの連絡などは、他のユーザに見られたくない情報であるので、表示されないようにしてもよい。

ゲームが、乗り物の操作、例えば自動車レースゲームである場合、順位表示、地図表示などが表示されてよい。自動車レースゲームの場合、ハンドル操作への置き換え制御が行われ、自動車に乗る選択をすると、ユーザインターフェースはドライブＵＩに制約される。このモードの時、ハンドコントローラは、手の代わりではなく、ステアリングホイールやアクセル・ブレーキ操作の代わりとして置き換えられ、左右動作がハンドル、上下動作がギアチェンジやアクセル／ブレーキ操作になるようにしてよい。

以上のほか、例えば、スマホ互換に関するビューが表示されてもよい。これは、いわゆるバーチャルスマホ表示とは異なり、スマホの購買決定に関するものであって、画面内に３次元背景を隠すような形でユーザインターフェース（スマホＵＩ）を表示することにより、決定などをしやすくする。ユーザインターフェースとしては、例えば、多様なハンドコントローラに実装されたトラックパッドとスティックをどのように使うか（スワイプ、タッチ、長押し、ドラッグなど）について、ユーザの環境に合わせて定義すればよい。なお、上述した自動車レースゲームにおけるハンドコントローラを含め、ここでいうハンドコントローラ、トラックパッド、スティックは、実物であってもよいし、仮想空間上に描画されたバーチャルなものであってもよい。

以上、この発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。

１ 仮想現実生成システム
３ ネットワーク
１０ サーバ装置
１１ サーバ通信部
１２ サーバ記憶部
１３ サーバ制御部
２０、２０Ａ、２０Ｂ 端末装置
２１ 端末通信部
２２ 端末記憶部
２３ 表示部
２４ 入力部
２５ 端末制御部
３０Ａ、３０Ｂ スタジオユニット
１４０ 記憶部
２００ 通信部
２００Ａ、２００Ａ’ 第１描画処理部
２０１Ａ、２０１Ｂ 第１描画部
２０２Ａ、２０２Ｂ 第２描画部
２０３Ａ、２０３Ｂ 第３描画部
２００Ｂ 第２描画処理部
２０４Ｂ 第４描画部
２０５Ｂ 第５描画部
２１０ 記憶部
２１０Ａ 第１情報生成部
２１０Ｂ 第２情報生成部
２１１Ａ 第１検出部
２１１Ｂ 第２検出部
２１２Ａ 第１音声情報生成部
２１２Ｂ 第２音声情報生成部
２１３Ａ 第１テキスト情報生成部
２１３Ｂ 第２テキスト情報生成部
２２０Ａ 第１通信部
２２０Ｂ 第２通信部
２２１Ａ、２２１Ｂ 配信処理部
２２２Ａ 視聴ユーザ情報取得部
２２２Ｂ 配信ユーザ情報取得部
２３０Ａ 第１表示部
２３０Ｂ 第２表示部
２４０Ａ 第１記憶部
２４０Ｂ 第２記憶部
２５０Ａ 第１ユーザインターフェース部
２５０Ｂ 第２ユーザインターフェース部
２５１Ａ 第１入力検出部
２５１Ｂ 第２入力検出部
２５２Ａ 第１入力処理部
２５２Ｂ 第２入力処理部

Claims (28)

1. 第１仮想空間の画像を含むコンテンツを配信する第１ユーザの状態を検出する第１検出部と、
   前記第１ユーザに係る第１端末装置又は前記コンテンツを視聴する第２ユーザに係る第２端末装置を介して前記第１ユーザ又は前記第２ユーザに視認可能な前記第１仮想空間の画像を描画する第１描画処理部と、
   前記第１ユーザに対応付けられた第１表示媒体を記憶する第１記憶部と、を備え、
   前記第１仮想空間の画像は、複数の階層を有し、
   前記第１描画処理部は、
   前記複数の階層のうちの、前記第１表示媒体に係る層の第１画像領域を描画する第１描画部と、
   前記複数の階層のうちの、第１ユーザインターフェースに係る層の第２画像領域を描画する第２描画部とを備え、
   前記第１描画部は、前記第１検出部により検出された前記第１ユーザの状態に基づいて、前記第１画像領域における前記第１表示媒体の状態を変化させるとともに、前記第１表示媒体を半透明に、又は、半透明状態とソリッド状態との間で切り替え可能に、描画する、情報処理システム。
2. 前記第１表示媒体は、正面方向を有するキャラクタの形態であり、
   前記第１検出部は、前記第１ユーザの状態として、現実空間における前記第１ユーザの向き、位置、及び動きのうちの少なくともいずれか１つのユーザ情報を検出し、
   前記第１描画部は、前記ユーザ情報に応じた前記キャラクタの向き、位置、及び動きのうちの少なくともいずれか１つが実現されるように前記第１画像領域を描画する、請求項１に記載の情報処理システム。
3. 第１仮想空間の画像を含むコンテンツを配信する第１ユーザの状態を検出する第１検出部と、
   前記第１ユーザに係る第１端末装置又は前記コンテンツを視聴する第２ユーザに係る第２端末装置を介して前記第１ユーザ又は前記第２ユーザに視認可能な前記第１仮想空間の画像を描画する第１描画処理部と、
   前記第１ユーザに対応付けられた第１表示媒体を記憶する第１記憶部と、を備え、
   前記第１仮想空間の画像は、複数の階層を有し、
   前記第１描画処理部は、
   前記複数の階層のうちの、前記第１表示媒体に係る層の第１画像領域を描画する第１描画部と、
   前記複数の階層のうちの、第１ユーザインターフェースに係る層の第２画像領域を描画する第２描画部とを備え、
   前記第１描画部は、前記第１検出部により検出された前記第１ユーザの状態に基づいて、前記第１画像領域における前記第１ユーザのアバタとして機能する前記第１表示媒体の状態を変化させるとともに、前記第１仮想空間に設けられる鏡に映る像に基づいて、前記第１仮想空間に配置される前記第１表示媒体を描画することで、前記第１画像領域を生成する、情報処理システム。
4. 前記第１描画処理部は、前記複数の階層のうちの、背景に係る層と、背景よりも前記第１ユーザ用の視点に近い側にかつ前記第２画像領域よりも前記第１ユーザ用の視点から遠い側に位置する層のうちの、少なくともいずれか一方の層の第３画像領域を描画する第３描画部を更に備える、請求項３に記載の情報処理システム。
5. 前記第３描画部は、前記第２ユーザに係る情報を、前記第３画像領域に含ませる、請求項４に記載の情報処理システム。
6. 前記第２ユーザに対応付けられた第２表示媒体を記憶する第２記憶部を更に備え、
   前記第３描画部は、前記第２ユーザに係る情報として、前記第２表示媒体を描画する、請求項５に記載の情報処理システム。
7. 前記第３描画部は、前記第２ユーザからの入力情報、前記第１ユーザ及び／又は前記第２ユーザへの案内／お知らせ情報、及び、前記第１ユーザに贈られるギフトオブジェクトを含むアイテム情報のうちの少なくともいずれか１つを、前記第３画像領域に含ませる、請求項４に記載の情報処理システム。
8. 前記第１検出部により検出された前記第１ユーザの状態と、前記第２画像領域の状態とに基づいて、前記第１ユーザによる前記第１ユーザインターフェースを介した入力を検出する第１入力検出部と、
   前記第１入力検出部により検出された前記入力に応じた各種第１処理を実行する第１入力処理部とを更に備える、請求項１から７のうちのいずれか１項に記載の情報処理システム。
9. 前記各種第１処理は、前記コンテンツの配信開始処理、前記コンテンツの配信終了処理、音声入力処理、ギフトを受け取る処理、前記第１表示媒体に対応付けて描画可能なアイテムの抽選処理、前記第１表示媒体に対応付けて描画可能なアイテムの選択／交換処理、文字入力処理、他のユーザに対する承認処理、前記コンテンツのパラメータの値を変化させる処理、及びこれらの処理を実行可能な状態に移行するための処理、のうちの少なくともいずれか１つを含む、請求項８に記載の情報処理システム。
10. 前記第１描画処理部は、前記第１端末装置、前記第１端末装置に通信可能に接続される外部処理装置、前記第１端末装置に通信可能に接続される前記第２端末装置、前記第１端末装置に通信可能に接続される前記第２ユーザに係る端末装置であって前記第２端末装置とは異なる端末装置、又は、これらの任意の組み合わせ、により実現される、請求項１から９のうちのいずれか１項に記載の情報処理システム。
11. 前記第１仮想空間は、円柱型又は天球型である、請求項１から１０のうちのいずれか１項に記載の情報処理システム。
12. 前記第１端末装置又は前記第２端末装置を介して前記第１ユーザ又は前記第２ユーザに視認可能な第２仮想空間の画像を描画する第２描画処理部を更に備え、
    前記第２仮想空間の画像は、複数の階層を有し、
    前記第２描画処理部は、
    前記複数の階層のうちの、第２ユーザインターフェースに係る層の第４画像領域を描画する第４描画部と、
    前記複数の階層のうちの、前記第１ユーザ又は前記第２ユーザ用の視点から視て前記第４画像領域よりも背後側に位置する層の第５画像領域を描画する第５描画部とを備え、
    前記第４描画部は、前記第２ユーザインターフェースに係る複数の平面状の操作領域を、球面又は湾曲面に沿って配置される態様で、描画する、請求項１から１１のうちのいずれか１項に記載の情報処理システム。
13. 前記第４描画部は、前記第２仮想空間における前記第２ユーザの位置に対応した位置に、前記第２仮想空間の上下方向に延在する所定基準軸に基づいて、前記複数の平面状の操作領域のうちの少なくとも一部を、前記所定基準軸まわりの第１曲面に沿って複数の列で描画する、請求項１２に記載の情報処理システム。
14. 前記第４描画部は、前記複数の平面状の操作領域のうちの他の一部を、前記所定基準軸まわりの第１曲面に対し前記第１ユーザ又は前記第２ユーザ用の視点から視て背後側にオフセットした第２曲面に沿って複数の列で描画する、請求項１３に記載の情報処理システム。
15. 前記第２仮想空間に入室している第２ユーザの状態を検出する第２検出部と、
    前記第２検出部により検出された前記第２ユーザの状態と、前記第４画像領域の状態とに基づいて、前記第２ユーザによる前記第２ユーザインターフェースを介した入力を検出する第２入力検出部と、
    前記第２入力検出部により検出された前記入力に応じた各種第２処理を実行する第２入力処理部とを更に備える、請求項１４に記載の情報処理システム。
16. 前記各種第２処理は、前記第２ユーザインターフェースの配置を変更する処理、前記第１ユーザを前記第１仮想空間の任意の場所又は特定の場所に移動させる処理、前記コンテンツの配信開始処理、前記コンテンツの視聴開始処理、前記コンテンツの視聴終了処理、音声入力処理、ギフトを贈る処理、アバタアイテムの抽選処理、アバタアイテムの選択／交換処理、文字入力処理、及び、これらの処理のいずれかを実行可能な状態に移行するための処理、のうちの少なくともいずれか１つを含む、請求項１５に記載の情報処理システム。
17. 前記特定の場所は、前記第１表示媒体に対応付けて描画可能なアイテムの選択であって、前記第１ユーザによる選択が可能となる場所を含む、請求項１６に記載の情報処理システム。
18. 前記第２曲面に沿った前記操作領域は、前記第１曲面に沿って描画される前記操作領域に対して、前記第２ユーザ用の視点から視て背後側に重なるように描画され、
    前記第２入力処理部は、前記第２入力検出部により検出された所定入力に基づいて、前記第４描画部に、前記第１曲面に沿って描画されていた前記操作領域が前記第２曲面に沿い、かつ、前記第２曲面に沿って描画されていた前記操作領域が前記第１曲面に沿うように、前記第２ユーザインターフェースの配置を変更させる、請求項１６又は１７に記載の情報処理システム。
19. 前記複数の平面状の操作領域には、前記各種第２処理が対応付けられる、請求項１５から１８のうちのいずれか１項に記載の情報処理システム。
20. 前記第５画像領域は、前記複数の階層のうちの、背景に係る層の画像領域と、前記複数の階層のうちの、背景よりも前記第１ユーザ又は前記第２ユーザ用の視点に近い側に位置する層の画像領域であって、前記複数の平面状の操作領域のうちの少なくとも一部に関する情報を含む画像領域と、を含む、請求項１２から１９のうちのいずれか１項に記載の情報処理システム。
21. 前記第２描画処理部は、前記第１端末装置、前記第１端末装置に通信可能に接続される外部処理装置、前記第１端末装置に通信可能に接続される前記第２端末装置、前記第１端末装置に通信可能に接続される前記第２ユーザに係る端末装置であって前記第２端末装置とは異なる端末装置、又は、これらの任意の組み合わせ、により実現される、請求項１２から２０のうちのいずれか１項に記載の情報処理システム。
22. 前記第２仮想空間は、円柱型又は天球型である、請求項１２から２１のうちのいずれか１項に記載の情報処理システム。
23. コンピュータにより実行される情報処理方法であって、
    第１仮想空間の画像を含むコンテンツを配信する第１ユーザの状態を検出する第１検出ステップと、
    前記第１ユーザに係る第１端末装置又は前記コンテンツを視聴する第２ユーザに係る第２端末装置を介して前記第１ユーザ又は前記第２ユーザに視認可能な前記第１仮想空間の画像を描画する第１描画処理ステップと、
    前記第１ユーザに対応付けられた第１表示媒体を記憶する第１記憶ステップと、を備え、
    前記第１仮想空間の画像は、複数の階層を有し、
    前記第１描画処理ステップは、
    前記複数の階層のうちの、前記第１表示媒体に係る層の第１画像領域を描画する第１描画ステップと、
    前記複数の階層のうちの、第１ユーザインターフェースに係る層の第２画像領域を描画する第２描画ステップとを備え、
    前記第１描画ステップは、前記第１検出ステップにより検出された前記第１ユーザの状態に基づいて、前記第１画像領域における前記第１表示媒体の状態を変化させるとともに、前記第１表示媒体を半透明に、又は、半透明状態とソリッド状態との間で切り替え可能に、描画する、情報処理方法。
24. コンピュータにより実行される情報処理方法であって、
    第１仮想空間の画像を含むコンテンツを配信する第１ユーザの状態を検出する第１検出ステップと、
    前記第１ユーザに係る第１端末装置又は前記コンテンツを視聴する第２ユーザに係る第２端末装置を介して前記第１ユーザ又は前記第２ユーザに視認可能な前記第１仮想空間の画像を描画する第１描画処理ステップと、
    前記第１ユーザに対応付けられた第１表示媒体を記憶する第１記憶ステップと、を備え、
    前記第１仮想空間の画像は、複数の階層を有し、
    前記第１描画処理ステップは、
    前記複数の階層のうちの、前記第１表示媒体に係る層の第１画像領域を描画する第１描画ステップと、
    前記複数の階層のうちの、第１ユーザインターフェースに係る層の第２画像領域を描画する第２描画ステップとを備え、
    前記第１描画ステップは、前記第１検出ステップにより検出された前記第１ユーザの状態に基づいて、前記第１画像領域における前記第１ユーザのアバタとして機能する前記第１表示媒体の状態を変化させるとともに、前記第１仮想空間に設けられる鏡に映る像に基づいて、前記第１仮想空間に配置される前記第１表示媒体を描画することで、前記第１画像領域を生成する、情報処理方法。
25. 前記第１端末装置又は前記第２端末装置を介して前記第１ユーザ又は前記第２ユーザに視認可能な第２仮想空間の画像を描画する第２描画処理ステップを更に備え、
    前記第２仮想空間の画像は、複数の階層を有し、
    前記第２描画処理ステップは、
    前記複数の階層のうちの、第２ユーザインターフェースに係る層の第４画像領域を描画する第４描画ステップと、
    前記複数の階層のうちの、前記第１ユーザ又は前記第２ユーザ用の視点から視て前記第４画像領域よりも背後側に位置する層の第５画像領域を描画する第５描画ステップとを備え、
    前記第４描画ステップは、前記第２ユーザインターフェースに係る複数の平面状の操作領域を、球面又は湾曲面に沿って配置される態様で、描画する、請求項２３又は２４に記載の情報処理方法。
26. コンピュータに、
    第１仮想空間の画像を含むコンテンツを配信する第１ユーザの状態を検出する第１検出機能と、
    前記第１ユーザに係る第１端末装置又は前記コンテンツを視聴する第２ユーザに係る第２端末装置を介して前記第１ユーザ又は前記第２ユーザに視認可能な前記第１仮想空間の画像を描画する第１描画処理機能と、
    前記第１ユーザに対応付けられた第１表示媒体を記憶する第１記憶機能と、を実行させ、
    前記第１仮想空間の画像は、複数の階層を有し、
    前記第１描画処理機能は、
    前記複数の階層のうちの、前記第１表示媒体に係る層の第１画像領域を描画する第１描画機能と、
    前記複数の階層のうちの、第１ユーザインターフェースに係る層の第２画像領域を描画する第２描画機能とを備え、
    前記第１描画機能は、前記第１検出機能により検出された前記第１ユーザの状態に基づいて、前記第１画像領域における前記第１表示媒体の状態を変化させるとともに、前記第１表示媒体を半透明に、又は、半透明状態とソリッド状態との間で切り替え可能に、描画する、情報処理プログラム。
27. コンピュータに、
    第１仮想空間の画像を含むコンテンツを配信する第１ユーザの状態を検出する第１検出機能と、
    前記第１ユーザに係る第１端末装置又は前記コンテンツを視聴する第２ユーザに係る第２端末装置を介して前記第１ユーザ又は前記第２ユーザに視認可能な前記第１仮想空間の画像を描画する第１描画処理機能と、
    前記第１ユーザに対応付けられた第１表示媒体を記憶する第１記憶機能と、を実行させ、
    前記第１仮想空間の画像は、複数の階層を有し、
    前記第１描画処理機能は、
    前記複数の階層のうちの、前記第１表示媒体に係る層の第１画像領域を描画する第１描画機能と、
    前記複数の階層のうちの、第１ユーザインターフェースに係る層の第２画像領域を描画する第２描画機能とを備え、
    前記第１描画機能は、前記第１検出機能により検出された前記第１ユーザの状態に基づいて、前記第１画像領域における前記第１ユーザのアバタとして機能する前記第１表示媒体の状態を変化させるとともに、前記第１仮想空間に設けられる鏡に映る像に基づいて、前記第１仮想空間に配置される前記第１表示媒体を描画することで、前記第１画像領域を生成する、情報処理プログラム。
28. 前記第１端末装置又は前記第２端末装置を介して前記第１ユーザ又は前記第２ユーザに視認可能な第２仮想空間の画像を描画する第２描画処理機能を、前記コンピュータに更に実行させ、
    前記第２仮想空間の画像は、複数の階層を有し、
    前記第２描画処理機能は、
    前記複数の階層のうちの、第２ユーザインターフェースに係る層の第４画像領域を描画する第４描画機能と、
    前記複数の階層のうちの、前記第１ユーザ又は前記第２ユーザ用の視点から視て前記第４画像領域よりも背後側に位置する層の第５画像領域を描画する第５描画機能とを備え、
    前記第４描画機能は、前記第２ユーザインターフェースに係る複数の平面状の操作領域を、球面又は湾曲面に沿って配置される態様で、描画する、請求項２６又は２７に記載の情報処理プログラム。