JP6382928B2 - 仮想空間における画像の表示を制御するためにコンピュータによって実行される方法、当該方法をコンピュータに実現させるためのプログラム、および、コンピュータ装置 - Google Patents

Description

本開示は、仮想空間を提供するための技術に関し、より特定的には、仮想空間における画像の表示の制御に関する。

従来、ヘッドマウントデバイス（以下、「ＨＭＤ」と称する）を用いた仮想空間の提供について種々提案されている。たとえば、特開２０１６−９３３６２号公報（特許文献１）は、複数のポリゴンを含む仮想空間を提供する技術を開示する。

特開２０１６−９３３６２号公報

提供される仮想空間において、ポリゴン等のオブジェクトの数がより多くなることにより、当該仮想空間が興趣が高まることが期待される。一方で、多くのオブジェクトが表示されることにより、ユーザが、注目するオブジェクトを視認できなくなる、または、視認しにくくなる、という事態が生じ得る。ユーザは、仮想カメラを制御して視野が変更すれば、注目するオブジェクトを見ることもできる。しかしながら、そのような場合、ユーザは、仮想カメラを制御するための入力を必要とされる。したがって、ユーザに与える負担をより少なくすることが求められている。

本開示は、係る実情に鑑み考え出されたものであり、ある局面における目的は、仮想空間の提供において、ユーザが必要とされる入力をより少なくすることである。

ある実施の形態に従うと、ヘッドマウントデバイスを用いて提供される仮想空間において画像の表示を制御するためにコンピュータによって実行される方法が提供される。方法は、複数のオブジェクトを含む仮想空間を定義するステップと、複数のオブジェクトのそれぞれに関連付けられた情報に基づいて、複数のオブジェクトから１つ以上のオブジェクトを選択するステップと、選択されたオブジェクトの透過率を他のオブジェクトの透過率よりも高く設定するステップとを含む。

他の実施の形態に従うと、ヘッドマウントデバイスを用いて提供される仮想空間において画像の表示を制御するためにコンピュータによって実行される方法が提供される。方法は、複数のオブジェクトを含む仮想空間を定義するステップと、複数のオブジェクトのそれぞれに関連付けられた情報に基づいて、複数のオブジェクトから１つ以上のオブジェクトを選択するステップと、選択されたオブジェクトを縮小するステップとを含む。

ある実施の形態に従った方法は、仮想空間に含まれる複数のオブジェクトから、各オブジェクトに関連付けられた情報に基づいて１つ以上のオブジェクトを選択し、選択されたオブジェクトの透過率を高める。これにより、ユーザが注目するオブジェクト以外のオブジェクトの透過率が自動的に高められ、注目するオブジェクトを見やすくするためにユーザが必要とされる負担が少なくなる。

他の実施の形態に従った方法は、仮想空間に含まれる複数のオブジェクトから、各オブジェクトに関連付けられた情報に基づいて１つ以上のオブジェクトを選択し、選択されたオブジェクトを縮小する。これにより、ユーザが注目するオブジェクト以外のオブジェクトが自動的に縮小され、注目するオブジェクトを見やすくするためにユーザが必要とされる負担が少なくなる。

仮想空間に含まれるオブジェクトの透過処理を説明するための図である。 仮想空間に含まれるオブジェクトの透過処理を説明するための図である。 ある実施の形態に従うＨＭＤシステムの構成の概略を表す図である。 一局面に従うコンピュータのハードウェア構成の一例を表すブロック図である。 ある実施の形態に従うＨＭＤに設定されるｕｖｗ視野座標系を概念的に表す図である。 ある実施の形態に従う仮想空間を表現する一態様を概念的に表す図である。 ある実施の形態に従うＨＭＤを装着するユーザの頭部を上から表した図である。 仮想空間において視界領域をＸ方向から見たＹＺ断面を表す図である。 仮想空間において視界領域をＹ方向から見たＸＺ断面を表す図である。 ある実施の形態に従うコントローラの概略構成を表す図である。 ある実施の形態に従うコンピュータをモジュール構成として表わすブロック図である。 一局面に従うサーバのハードウェア構成の一例を表すブロック図である。 ある実施の形態に従うＨＭＤシステムにおいて実行される処理の一部を表わすシーケンスチャートである。 ユーザ情報格納部内のデータの構造の一例を模式的に示す図である。 あるユーザについての、図１４の基本情報として格納される情報の一例を模式的に示す図である。 あるユーザについての、図１４の移動履歴情報として格納される情報の一例を模式的に示す図である。 イベント情報内のデータの構造の一例を模式的に示す図である。 透過オブジェクト設定の入力画面の一例を模式的に示す図である。 ユーザの目の位置から特定のオブジェクトまでの空間の一例を説明するための図である。 図１９を参照して説明されたような空間を用いたオブジェクトの選択を説明するための図である。 ネットワークにおいて、複数のＨＭＤのそれぞれが、複数のユーザのそれぞれに仮想空間を提供する状況を模式的に示す図である。 更新後のイベント情報の内容を模式的に示す図である。 ネットワークシステムにおいて他のユーザに話しかけたユーザに提示される視界画像の変化を示す図である。 ネットワークシステムにおけるユーザ間の交流に関連した視界画像の変化の一例を説明するための図である。 ある実施の形態においてプロセッサによって実行される、視界画像の生成の処理のフローチャートである。 図２５のステップＳ４０のサブルーチンのフローチャートである。 図２５のステップＳ４０のサブルーチンのフローチャートである。 図２５のステップＳ４０のサブルーチンのフローチャートである。 図２５のステップＳ４０のサブルーチンのフローチャートである。 ある実施の形態における、仮想空間画像の生成を説明するための図である。 図３０に示された仮想空間画像を生成するための処理のフローチャートである。 他の実施の形態におけるプロセッサによって実行される、視界画像の生成の処理のフローチャートである。 図３２に示された処理に従って生成される視界画像の一例を説明するための図である。 他のコンピュータの仮想カメラの移動に従った視界領域の変更の一例を説明するための図である。

以下に、図面を参照しつつ、仮想空間を提供するためのコンピュータの実施の形態について説明する。以下の説明では、同一の部品および構成要素には同一の符号を付してある。それらの名称および機能も同じである。したがって、これらの説明は繰り返さない。

［開示の概要］
図１および図２を参照して、本開示の概要を説明する。本開示のコンピュータは、複数のオブジェクトを含む仮想空間において、複数のオブジェクトのうち一部を選択し、選択されたオブジェクトの表示態様を変更する。これにより、提供される仮想空間では、選択されたオブジェクトは、表示態様が変更される。表示態様の変更の一例は、透過率の上昇である。他の例は、縮小である。

図１および図２は、仮想空間に含まれるオブジェクトの透過処理を説明するための図である。本開示では、コンテンツ表示装置の一例であるヘッドマウントデバイスが、ユーザに仮想空間を提供する。オブジェクトは、ユーザのアバターであってもよいし、イベント会場の設置物や小物等であってもよい。

図１および図２のそれぞれにおいて、分図Ａは、ユーザによって認識される画像を示し、分図Ｂは、仮想空間のうち、仮想カメラによって捉えられる視界領域を示す。分図Ａに示された視野座標系の３軸（ｕ軸、ｖ軸、ｗ軸）のそれぞれは、分図Ｂに示されたグローバル座標系の３軸（水平方向のｘ軸、鉛直方向のｙ軸、および、前後方向のｚ軸）のそれぞれに対応する。視野座標系の３軸とグローバル座標系の３軸との対応関係は、図５を参照して後述する。

図１の分図Ｂの視界領域２３は、仮想空間画像２２のうち、仮想ユーザに対応する仮想カメラ１が捉える領域である。図１の分図Ａの視界画像２０００は、ヘッドマウントデバイスがユーザに提供する画像である。

図１の分図Ｂの視界領域２３は、９個のオブジェクト９００，９１０，９１２〜９１８を含む。しかしながら、図１の分図Ａの視界画像２０００では、ユーザは、オブジェクト９１５〜９１７に遮られることによって、オブジェクト９００およびオブジェクト９１０を視認しづらい。

図２の分図Ａおよび分図Ｂにおいてオブジェクト９１５〜９１７が破線で示されることは、オブジェクト９１５〜９１７の透過度が図１よりも高められたことを意味する。図２の分図Ａに示されるようにオブジェクト９１５〜９１７の透過度が高められたことにより、ユーザは、オブジェクト９００およびオブジェクト９１０を視認しやすくなる。

本開示において、オブジェクトの透過度が高めることにより、当該オブジェクトは、透き通るように表示されてもよいし、表示されなくてもよい。

［ＨＭＤシステムの構成］
ユーザに仮想空間を提供するためのシステムを、「ＨＭＤ（Head Mount Display）システム」と称する。ＨＭＤとは、モニタを備える所謂ヘッドマウントディスプレイと、スマートフォンその他のモニタを有する端末を装着可能なヘッドマウント機器のいずれをも含み得る。ＨＭＤシステムは、ヘッドマウントデバイスを含む。ユーザは、ヘッドマウントデバイスを使用することにより仮想空間を提供される。図３を参照して、ＨＭＤシステム１００の構成について説明する。

図３は、ある実施の形態に従うＨＭＤシステム１００の構成の概略を表す図である。ある局面において、ＨＭＤシステム１００は、家庭用のシステムとしてあるいは業務用のシステムとして提供される。

図３に示されるように、ＨＭＤシステム１００は、ＨＭＤ１１０と、ＨＭＤセンサ１２０と、コンピュータ２００とを備える。ＨＭＤ１１０は、モニタ１１２と、注視センサ１４０とを含む。ある局面において、コンピュータ２００は、ネットワーク１９に接続可能であり、ネットワーク１９に接続されているサーバ１５０と通信可能である。別の局面において、ＨＭＤ１１０は、ＨＭＤセンサ１２０の代わりに、センサ１１４を含み得る。

ある実施の形態に従うＨＭＤ１１０は、ユーザの頭部に装着され、動作中に仮想空間をユーザに提供し得る。より具体的には、ＨＭＤ１１０は、右目用の画像および左目用の画像をモニタ１１２にそれぞれ表示する。ユーザの各目がそれぞれの画像を視認すると、ユーザは、両目の視差に基づき当該画像を３次元の画像として認識し得る。

モニタ１１２は、例えば、非透過型の表示装置として実現される。ある局面において、モニタ１１２は、ユーザの両目の前方に位置するようにＨＭＤ１１０の本体に配置されている。したがって、ユーザは、モニタ１１２に表示される３次元画像を視認すると、仮想空間に没入することができる。ある実施の形態において、仮想空間は、例えば、背景、ユーザが操作可能なオブジェクト、ユーザが選択可能なメニューの画像を含む。ある実施の形態において、モニタ１１２は、所謂スマートフォンその他の情報表示端末が備える液晶モニタまたは有機ＥＬ（Electro Luminescence）モニタとして実現され得る。

ある局面において、モニタ１１２は、右目用の画像を表示するためのサブモニタと、左目用の画像を表示するためのサブモニタとを含み得る。別の局面において、モニタ１１２は、右目用の画像と左目用の画像とを一体として表示する構成であってもよい。この場合、モニタ１１２は、高速シャッタを含む。高速シャッタは、画像がいずれか一方の目にのみ認識されるように、右目用の画像と左目用の画像とを交互に表示可能に作動する。

ＨＭＤセンサ１２０は、複数の光源（図示しない）を含む。各光源は例えば、赤外線を発するＬＥＤ（Light Emitting Diode）により実現される。ＨＭＤセンサ１２０は、ＨＭＤ１１０の動きを検出するためのポジショントラッキング機能を有する。ＨＭＤセンサ１２０は、この機能を用いて、現実空間内におけるＨＭＤ１１０の位置および傾きを検出する。

別の局面において、ＨＭＤセンサ１２０は、カメラにより実現されてもよい。この場合、ＨＭＤセンサ１２０は、カメラから出力されるＨＭＤ１１０の画像情報を用いて、画像解析処理を実行することにより、ＨＭＤ１１０の位置および傾きを検出することができる。

別の局面において、ＨＭＤ１１０は、位置検出器として、ＨＭＤセンサ１２０の代わりに、センサ１１４を備えてもよい。ＨＭＤ１１０は、センサ１１４を用いて、ＨＭＤ１１０自身の位置および傾きを検出し得る。例えば、センサ１１４が角速度センサ、地磁気センサ、加速度センサ、あるいはジャイロセンサ等である場合、ＨＭＤ１１０は、ＨＭＤセンサ１２０の代わりに、これらの各センサのいずれかを用いて、自身の位置および傾きを検出し得る。一例として、センサ１１４が角速度センサである場合、角速度センサは、現実空間におけるＨＭＤ１１０の３軸周りの角速度を経時的に検出する。ＨＭＤ１１０は、各角速度に基づいて、ＨＭＤ１１０の３軸周りの角度の時間的変化を算出し、さらに、角度の時間的変化に基づいて、ＨＭＤ１１０の傾きを算出する。

注視センサ１４０は、ユーザ１９０の右目および左目の視線が向けられる方向（視線方向）を検出する。当該方向の検出は、例えば、公知のアイトラッキング機能によって実現される。注視センサ１４０は、当該アイトラッキング機能を有するセンサにより実現される。ある局面において、注視センサ１４０は、右目用のセンサおよび左目用のセンサを含むことが好ましい。注視センサ１４０は、例えば、ユーザ１９０の右目および左目に赤外光を照射するとともに、照射光に対する角膜および虹彩からの反射光を受けることにより各眼球の回転角を検出するセンサであってもよい。注視センサ１４０は、検出した各回転角に基づいて、ユーザ１９０の視線方向を検知することができる。

サーバ１５０は、コンピュータ２００にプログラムを送信し得る。別の局面において、サーバ１５０は、他のユーザによって使用されるＨＭＤに仮想現実を提供するための他のコンピュータ２００と通信し得る。例えば、アミューズメント施設において、複数のユーザが参加型のゲームを行なう場合、各コンピュータ２００は、各ユーザの動作に基づく信号を他のコンピュータ２００と通信して、同じ仮想空間において複数のユーザが共通のゲームを楽しむことを可能にする。

ある実施の形態に従うと、ＨＭＤシステム１００は、コントローラ１６０をさらに備えてもよい。コントローラ１６０はモーションセンサ１３０を含み得る。

コントローラ１６０は、ユーザ１９０からコンピュータ２００への命令の入力を受け付ける。ある局面において、コントローラ１６０は、ユーザ１９０によって把持可能に構成される。別の局面において、コントローラ１６０は、ユーザ１９０の身体あるいは衣類の一部に装着可能に構成される。別の局面において、コントローラ１６０は、コンピュータ２００から送られる信号に基づいて、振動、音、光のうちの少なくともいずれかを出力するように構成されてもよい。

モーションセンサ１３０は、ある局面において、ユーザの手に取り付けられて、ユーザの手の動きを検出する。例えば、モーションセンサ１３０は、手の回転速度、回転数等を検出する。検出された信号は、コンピュータ２００に送られる。モーションセンサ１３０は、例えば、手袋型のコントローラ１６０に設けられている。ある実施の形態において、現実空間における安全のため、コントローラ１６０は、手袋型のようにユーザ１９０の手に装着されることにより容易に飛んで行かないものに装着されるのが望ましい。別の局面において、ユーザ１９０に装着されないセンサがユーザ１９０の手の動きを検出してもよい。例えば、ユーザ１９０を撮影するカメラの信号が、ユーザ１９０の動作を表わす信号として、コンピュータ２００に入力されてもよい。モーションセンサ１３０とコンピュータ２００とは、有線により、または無線により互いに接続される。無線の場合、通信形態は特に限られず、例えば、Ｂｌｕｅｔｏｏｔｈ（登録商標）その他の公知の通信手法が用いられる。

［コンピュータのハードウェア構成］
図４を参照して、本実施の形態に係るコンピュータ２００について説明する。図４は、一局面に従うコンピュータ２００のハードウェア構成の一例を表すブロック図である。コンピュータ２００は、主たる構成要素として、プロセッサ１０と、メモリ１１と、ストレージ１２と、入出力インターフェイス１３と、通信インターフェイス１４とを備える。各構成要素は、それぞれ、バス１５に接続されている。

プロセッサ１０は、コンピュータ２００に与えられる信号に基づいて、あるいは、予め定められた条件が成立したことに基づいて、メモリ１１またはストレージ１２に格納されているプログラムに含まれる一連の命令を実行する。ある局面において、プロセッサ１０は、ＣＰＵ（Central Processing Unit）、ＭＰＵ（Micro Processor Unit）、ＦＰＧＡ（Field-Programmable Gate Array）その他のデバイスとして実現される。

メモリ１１は、プログラムおよびデータを一時的に保存する。プログラムは、例えば、ストレージ１２からロードされる。データは、コンピュータ２００に入力されたデータと、プロセッサ１０によって生成されたデータとを含む。ある局面において、メモリ１１は、ＲＡＭ（Random Access Memory）その他の揮発メモリとして実現される。

ストレージ１２は、プログラムおよびデータを永続的に保持する。ストレージ１２は、例えば、ＲＯＭ（Read-Only Memory）、ハードディスク装置、フラッシュメモリ、その他の不揮発記憶装置として実現される。ストレージ１２に格納されるプログラムは、ＨＭＤシステム１００において仮想空間を提供するためのプログラム、シミュレーションプログラム、ゲームプログラム、ユーザ認証プログラム、他のコンピュータ２００との通信を実現するためのプログラムを含む。ストレージ１２に格納されるデータは、仮想空間を規定するためのデータおよびオブジェクト等を含む。

別の局面において、ストレージ１２は、メモリカードのように着脱可能な記憶装置として実現されてもよい。さらに別の局面において、コンピュータ２００に内蔵されたストレージ１２の代わりに、外部の記憶装置に保存されているプログラムおよびデータを使用する構成が使用されてもよい。このような構成によれば、例えば、アミューズメント施設のように複数のＨＭＤシステム１００が使用される場面において、プログラムやデータの更新を一括して行なうことが可能になる。

ある実施の形態において、入出力インターフェイス１３は、ＨＭＤ１１０、ＨＭＤセンサ１２０、モーションセンサ１３０、およびコントローラ１６０との間で信号を通信する。ある局面において、入出力インターフェイス１３は、ＵＳＢ（Universal Serial Bus）インターフェイス、ＤＶＩ（Digital Visual Interface）、ＨＤＭＩ（登録商標）（High-Definition Multimedia Interface）その他の端子を用いて実現される。なお、入出力インターフェイス１３は上述のものに限られない。

ある実施の形態において、入出力インターフェイス１３は、さらに、コントローラ１６０と通信し得る。例えば、入出力インターフェイス１３は、モーションセンサ１３０から出力された信号の入力を受ける。別の局面において、入出力インターフェイス１３は、プロセッサ１０から出力された命令を、コントローラ１６０に送る。当該命令は、振動、音声出力、発光等をコントローラ１６０に指示する。コントローラ１６０は、当該命令を受信すると、その命令に応じて、振動、音声出力または発光のいずれかを実行する。

通信インターフェイス１４は、ネットワーク１９に接続されて、ネットワーク１９に接続されている他のコンピュータ（例えば、サーバ１５０）と通信する。ある局面において、通信インターフェイス１４は、例えば、ＬＡＮ（Local Area Network）その他の有線通信インターフェイス、あるいは、ＷｉＦｉ（Wireless Fidelity）（登録商標）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＮＦＣ（Near Field Communication）その他の無線通信インターフェイスとして実現される。なお、通信インターフェイス１４は上述のものに限られない。

ある局面において、プロセッサ１０は、ストレージ１２に格納されている１つ以上のプログラムをメモリ１１にロードし、当該プログラムに含まれる一連の命令を実行する。当該１つ以上のプログラムは、コンピュータ２００のオペレーティングシステム、仮想空間を提供するためのアプリケーションプログラム、コントローラ１６０を用いて仮想空間で実行可能なゲームソフトウェア等を含み得る。プロセッサ１０は、入出力インターフェイス１３を介して、仮想空間を提供するための信号をＨＭＤ１１０に送る。ＨＭＤ１１０は、その信号に基づいてモニタ１１２に映像を表示する。

図４に示される例では、コンピュータ２００は、ＨＭＤ１１０の外部に設けられる構成が示されているが、別の局面において、コンピュータ２００は、ＨＭＤ１１０に内蔵されてもよい。一例として、モニタ１１２を含む携帯型の情報通信端末（例えば、スマートフォン）がコンピュータ２００として機能してもよい。

また、コンピュータ２００は、複数のＨＭＤ１１０に共通して用いられる構成であってもよい。このような構成によれば、例えば、複数のユーザに同一の仮想空間を提供することもできるので、各ユーザは同一の仮想空間で他のユーザと同一のアプリケーションを楽しむことができる。

ある実施の形態において、複数のコンピュータ２００がネットワーク１９上のサーバ１５０を介してデータを共有することにより、当該複数のコンピュータ２００のそれぞれのユーザに同一の仮想空間を提供することができてもよい。

ある実施の形態において、ＨＭＤシステム１００では、グローバル座標系が予め設定されている。グローバル座標系は、現実空間における鉛直方向、鉛直方向に直交する水平方向、ならびに、鉛直方向および水平方向の双方に直交する前後方向にそれぞれ平行な、３つの基準方向（軸）を有する。本実施の形態では、グローバル座標系は視点座標系の一つである。そこで、グローバル座標系における水平方向、鉛直方向（上下方向）、および前後方向は、それぞれ、ｘ軸、ｙ軸、ｚ軸と規定される。より具体的には、グローバル座標系において、ｘ軸は現実空間の水平方向に平行である。ｙ軸は、現実空間の鉛直方向に平行である。ｚ軸は現実空間の前後方向に平行である。

ある局面において、ＨＭＤセンサ１２０は、赤外線センサを含む。赤外線センサが、ＨＭＤ１１０の各光源から発せられた赤外線をそれぞれ検出すると、ＨＭＤ１１０の存在を検出する。ＨＭＤセンサ１２０は、さらに、各点の値（グローバル座標系における各座標値）に基づいて、ＨＭＤ１１０を装着したユーザ１９０の動きに応じた、現実空間内におけるＨＭＤ１１０の位置および傾きを検出する。より詳しくは、ＨＭＤセンサ１２０は、経時的に検出された各値を用いて、ＨＭＤ１１０の位置および傾きの時間的変化を検出できる。

グローバル座標系は現実空間の座標系と平行である。したがって、ＨＭＤセンサ１２０によって検出されたＨＭＤ１１０の各傾きは、グローバル座標系におけるＨＭＤ１１０の３軸周りの各傾きに相当する。ＨＭＤセンサ１２０は、グローバル座標系におけるＨＭＤ１１０の傾きに基づき、ｕｖｗ視野座標系をＨＭＤ１１０に設定する。ＨＭＤ１１０に設定されるｕｖｗ視野座標系は、ＨＭＤ１１０を装着したユーザ１９０が仮想空間において物体を見る際の視点座標系に対応する。

［ｕｖｗ視野座標系］
図５を参照して、ｕｖｗ視野座標系について説明する。図５は、ある実施の形態に従うＨＭＤ１１０に設定されるｕｖｗ視野座標系を概念的に表す図である。ＨＭＤセンサ１２０は、ＨＭＤ１１０の起動時に、グローバル座標系におけるＨＭＤ１１０の位置および傾きを検出する。プロセッサ１０は、検出された値に基づいて、ｕｖｗ視野座標系をＨＭＤ１１０に設定する。

図５に示されるように、ＨＭＤ１１０は、ＨＭＤ１１０を装着したユーザの頭部を中心（原点）とした３次元のｕｖｗ視野座標系を設定する。より具体的には、ＨＭＤ１１０は、グローバル座標系を規定する水平方向、鉛直方向、および前後方向（ｘ軸、ｙ軸、ｚ軸）を、グローバル座標系内においてＨＭＤ１１０の各軸周りの傾きだけ各軸周りにそれぞれ傾けることによって新たに得られる３つの方向を、ＨＭＤ１１０におけるｕｖｗ視野座標系のピッチ方向（ｕ軸）、ヨー方向（ｖ軸）、およびロール方向（ｗ軸）として設定する。

ある局面において、ＨＭＤ１１０を装着したユーザ１９０が直立し、かつ、正面を視認している場合、プロセッサ１０は、グローバル座標系に平行なｕｖｗ視野座標系をＨＭＤ１１０に設定する。この場合、グローバル座標系における水平方向（ｘ軸）、鉛直方向（ｙ軸）、および前後方向（ｚ軸）は、ＨＭＤ１１０におけるｕｖｗ視野座標系のピッチ方向（ｕ軸）、ヨー方向（ｖ軸）、およびロール方向（ｗ軸）に一致する。

ｕｖｗ視野座標系がＨＭＤ１１０に設定された後、ＨＭＤセンサ１２０は、ＨＭＤ１１０の動きに基づいて、設定されたｕｖｗ視野座標系におけるＨＭＤ１１０の傾き（傾きの変化量）を検出できる。この場合、ＨＭＤセンサ１２０は、ＨＭＤ１１０の傾きとして、ｕｖｗ視野座標系におけるＨＭＤ１１０のピッチ角（θｕ）、ヨー角（θｖ）、およびロール角（θｗ）をそれぞれ検出する。ピッチ角（θｕ）は、ｕｖｗ視野座標系におけるピッチ方向周りのＨＭＤ１１０の傾き角度を表す。ヨー角（θｖ）は、ｕｖｗ視野座標系におけるヨー方向周りのＨＭＤ１１０の傾き角度を表す。ロール角（θｗ）は、ｕｖｗ視野座標系におけるロール方向周りのＨＭＤ１１０の傾き角度を表す。

ＨＭＤセンサ１２０は、検出されたＨＭＤ１１０の傾き角度に基づいて、ＨＭＤ１１０が動いた後のＨＭＤ１１０におけるｕｖｗ視野座標系を、ＨＭＤ１１０に設定する。ＨＭＤ１１０と、ＨＭＤ１１０のｕｖｗ視野座標系との関係は、ＨＭＤ１１０の位置および傾きに関わらず、常に一定である。ＨＭＤ１１０の位置および傾きが変わると、当該位置および傾きの変化に連動して、グローバル座標系におけるＨＭＤ１１０のｕｖｗ視野座標系の位置および傾きが変化する。

ある局面において、ＨＭＤセンサ１２０は、赤外線センサからの出力に基づいて取得される赤外線の光強度および複数の点間の相対的な位置関係（例えば、各点間の距離など）に基づいて、ＨＭＤ１１０の現実空間内における位置を、ＨＭＤセンサ１２０に対する相対位置として特定してもよい。また、プロセッサ１０は、特定された相対位置に基づいて、現実空間内（グローバル座標系）におけるＨＭＤ１１０のｕｖｗ視野座標系の原点を決定してもよい。

［仮想空間］
図６を参照して、仮想空間についてさらに説明する。図６は、ある実施の形態に従う仮想空間２を表現する一態様を概念的に表す図である。仮想空間２は、中心２１の３６０度方向の全体を覆う全天球状の構造を有する。図６では、説明を複雑にしないために、仮想空間２のうちの上半分の天球が例示されている。仮想空間２では各メッシュが規定される。各メッシュの位置は、仮想空間２に規定されるＸＹＺ座標系における座標値として予め規定されている。コンピュータ２００は、仮想空間２に展開可能なコンテンツ（静止画、動画等）を構成する各部分画像を、仮想空間２において対応する各メッシュにそれぞれ対応付けて、ユーザによって視認可能な仮想空間画像２２が展開される仮想空間２をユーザに提供する。

ある局面において、仮想空間２では、中心２１を原点とするＸＹＺ座標系が規定される。ＸＹＺ座標系は、例えば、グローバル座標系に平行である。ＸＹＺ座標系は視点座標系の一種であるため、ＸＹＺ座標系における水平方向、鉛直方向（上下方向）、および前後方向は、それぞれＸ軸、Ｙ軸、Ｚ軸として規定される。したがって、ＸＹＺ座標系のＸ軸（水平方向）がグローバル座標系のｘ軸と平行であり、ＸＹＺ座標系のＹ軸（鉛直方向）がグローバル座標系のｙ軸と平行であり、ＸＹＺ座標系のＺ軸（前後方向）がグローバル座標系のｚ軸と平行である。

ＨＭＤ１１０の起動時、すなわちＨＭＤ１１０の初期状態において、仮想カメラ１が、仮想空間２の中心２１に配置される。仮想カメラ１は、現実空間におけるＨＭＤ１１０の動きに連動して、仮想空間２を同様に移動する。これにより、現実空間におけるＨＭＤ１１０の位置および向きの変化が、仮想空間２において同様に再現される。

仮想カメラ１には、ＨＭＤ１１０の場合と同様に、ｕｖｗ視野座標系が規定される。仮想空間２における仮想カメラのｕｖｗ視野座標系は、現実空間（グローバル座標系）におけるＨＭＤ１１０のｕｖｗ視野座標系に連動するように規定されている。したがって、ＨＭＤ１１０の傾きが変化すると、それに応じて、仮想カメラ１の傾きも変化する。また、仮想カメラ１は、ＨＭＤ１１０を装着したユーザの現実空間における移動に連動して、仮想空間２において移動することもできる。

仮想カメラ１の向きは、仮想カメラ１の位置および傾きに応じて決まるので、ユーザが仮想空間画像２２を視認する際に基準となる視線（基準視線５）は、仮想カメラ１の向きに応じて決まる。コンピュータ２００のプロセッサ１０は、基準視線５に基づいて、仮想空間２における視界領域２３を規定する。視界領域２３は、仮想空間２のうち、ＨＭＤ１１０を装着したユーザの視界に対応する。

注視センサ１４０によって検出されるユーザ１９０の視線方向は、ユーザ１９０が物体を視認する際の視点座標系における方向である。ＨＭＤ１１０のｕｖｗ視野座標系は、ユーザ１９０がモニタ１１２を視認する際の視点座標系に等しい。また、仮想カメラ１のｕｖｗ視野座標系は、ＨＭＤ１１０のｕｖｗ視野座標系に連動している。したがって、ある局面に従うＨＭＤシステム１００は、注視センサ１４０によって検出されたユーザ１９０の視線方向を、仮想カメラ１のｕｖｗ視野座標系におけるユーザの視線方向とみなすことができる。

［ユーザの視線］
図７を参照して、ユーザの視線方向の決定について説明する。図７は、ある実施の形態に従うＨＭＤ１１０を装着するユーザ１９０の頭部を上から表した図である。

ある局面において、注視センサ１４０は、ユーザ１９０の右目および左目の各視線を検出する。ある局面において、ユーザ１９０が近くを見ている場合、注視センサ１４０は、視線Ｒ１およびＬ１を検出する。別の局面において、ユーザ１９０が遠くを見ている場合、注視センサ１４０は、視線Ｒ２およびＬ２を検出する。この場合、ロール方向ｗに対して視線Ｒ２およびＬ２がなす角度は、ロール方向ｗに対して視線Ｒ１およびＬ１がなす角度よりも小さい。注視センサ１４０は、検出結果をコンピュータ２００に送信する。

コンピュータ２００が、視線の検出結果として、視線Ｒ１およびＬ１の検出値を注視センサ１４０から受信した場合には、その検出値に基づいて、視線Ｒ１およびＬ１の交点である注視点Ｎ１を特定する。一方、コンピュータ２００は、視線Ｒ２およびＬ２の検出値を注視センサ１４０から受信した場合には、視線Ｒ２およびＬ２の交点を注視点として特定する。コンピュータ２００は、特定した注視点Ｎ１の位置に基づき、ユーザ１９０の視線方向Ｎ０を特定する。コンピュータ２００は、例えば、ユーザ１９０の右目Ｒと左目Ｌとを結ぶ直線の中点と、注視点Ｎ１とを通る直線の延びる方向を、視線方向Ｎ０として検出する。視線方向Ｎ０は、ユーザ１９０が両目により実際に視線を向けている方向である。また、視線方向Ｎ０は、視界領域２３に対してユーザ１９０が実際に視線を向けている方向に相当する。

別の局面において、ＨＭＤシステム１００は、ＨＭＤシステム１００を構成するいずれかのパーツに、マイクおよびスピーカを備えてもよい。ユーザは、マイクに発話することにより、仮想空間２に対して、音声による指示を与えることができる。

また、別の局面において、ＨＭＤシステム１００は、テレビジョン放送受信チューナを備えてもよい。このような構成によれば、ＨＭＤシステム１００は、仮想空間２においてテレビ番組を表示することができる。

さらに別の局面において、ＨＭＤシステム１００は、インターネットに接続するための通信回路、あるいは、電話回線に接続するための通話機能を備えていてもよい。

［視界領域］
図８および図９を参照して、視界領域２３について説明する。図８は、仮想空間２において視界領域２３をＸ方向から見たＹＺ断面を表す図である。図９は、仮想空間２において視界領域２３をＹ方向から見たＸＺ断面を表す図である。

図８に示されるように、ＹＺ断面における視界領域２３は、領域２４を含む。領域２４は、仮想カメラ１の基準視線５と仮想空間２のＹＺ断面とによって定義される。プロセッサ１０は、仮想空間における基準視線５を中心として極角αを含む範囲を、領域２４として規定する。

図９に示されるように、ＸＺ断面における視界領域２３は、領域２５を含む。領域２５は、基準視線５と仮想空間２のＸＺ断面とによって定義される。プロセッサ１０は、仮想空間２における基準視線５を中心とした方位角βを含む範囲を、領域２５として規定する。

ある局面において、ＨＭＤシステム１００は、コンピュータ２００からの信号に基づいて、視界画像２６をモニタ１１２に表示させることにより、ユーザ１９０に仮想空間を提供する。視界画像２６は、仮想空間画像２２のうち視界領域２３に重畳する部分に相当する。ユーザ１９０が、頭に装着したＨＭＤ１１０を動かすと、その動きに連動して仮想カメラ１も動く。その結果、仮想空間２における視界領域２３の位置が変化する。これにより、モニタ１１２に表示される視界画像２６は、仮想空間画像２２のうち、仮想空間２においてユーザが向いた方向の視界領域２３に重畳する画像に更新される。ユーザは、仮想空間２における所望の方向を視認することができる。

ユーザ１９０は、ＨＭＤ１１０を装着している間、現実世界を視認することなく、仮想空間２に展開される仮想空間画像２２のみを視認できる。そのため、ＨＭＤシステム１００は、仮想空間２への高い没入感覚をユーザに与えることができる。

ある局面において、プロセッサ１０は、ＨＭＤ１１０を装着したユーザ１９０の現実空間における移動に連動して、仮想空間２において仮想カメラ１を移動し得る。この場合、プロセッサ１０は、仮想空間２における仮想カメラ１の位置および向きに基づいて、ＨＭＤ１１０のモニタ１１２に投影される画像領域（すなわち、仮想空間２における視界領域２３）を特定する。

ある実施の形態に従うと、仮想カメラ１は、二つの仮想カメラ、すなわち、右目用の画像を提供するための仮想カメラと、左目用の画像を提供するための仮想カメラとを含むことが望ましい。また、ユーザ１９０が３次元の仮想空間２を認識できるように、適切な視差が、二つの仮想カメラに設定されていることが好ましい。本実施の形態においては、仮想カメラ１が二つの仮想カメラを含み、二つの仮想カメラのロール方向が合成されることによって生成されるロール方向（ｗ）がＨＭＤ１１０のロール方向（ｗ）に適合されるように構成されているものとして、本開示に係る技術思想を例示する。

［コントローラ］
図１０を参照して、コントローラ１６０の一例について説明する。図１０は、ある実施の形態に従うコントローラ１６０の概略構成を表す図である。

図１０の分図（Ａ）に示されるように、ある局面において、コントローラ１６０は、右コントローラ８００と左コントローラとを含み得る。右コントローラ８００は、ユーザ１９０の右手で操作される。左コントローラは、ユーザ１９０の左手で操作される。ある局面において、右コントローラ８００と左コントローラとは、別個の装置として対称に構成される。したがって、ユーザ１９０は、右コントローラ８００を把持した右手と、左コントローラを把持した左手とをそれぞれ自由に動かすことができる。別の局面において、コントローラ１６０は両手の操作を受け付ける一体型のコントローラであってもよい。以下、右コントローラ８００について説明する。

右コントローラ８００は、グリップ３０と、プレート３１と、天面３２とを備える。グリップ３０は、ユーザ１９０の右手によって把持されるように構成されている。例えば、グリップ３０は、ユーザ１９０の右手の掌と３本の指（中指、薬指、小指）とによって保持され得る。

グリップ３０は、ボタン３３，３４と、モーションセンサ１３０とを含む。ボタン３３は、グリップ３０の側面に配置され、右手の中指による操作を受け付ける。ボタン３４は、グリップ３０の前面に配置され、右手の人差し指による操作を受け付ける。ある局面において、ボタン３３，３４は、トリガー式のボタンとして構成される。モーションセンサ１３０は、グリップ３０の筐体に内蔵されている。なお、ユーザ１９０の動作がカメラその他の装置によってユーザ１９０の周りから検出可能である場合には、グリップ３０は、モーションセンサ１３０を備えなくてもよい。

プレート３１は、その円周方向に沿って配置された複数の赤外線ＬＥＤ３５を含む。赤外線ＬＥＤ３５は、コントローラ１６０を使用するプログラムの実行中に、当該プログラムの進行に合わせて赤外線を発光する。赤外線ＬＥＤ３５から発せられた赤外線は、右コントローラ８００と左コントローラ（図示しない）との各位置や姿勢（傾き、向き）を検出するために使用され得る。図１０に示される例では、二列に配置された赤外線ＬＥＤ３５が示されているが、配列の数は図１０に示されるものに限られない。一列あるいは３列以上の配列が使用されてもよい。

天面３２は、ボタン３６，３７と、アナログスティック３８とを備える。ボタン３６，３７は、プッシュ式ボタンとして構成される。ボタン３６，３７は、ユーザ１９０の右手の親指による操作を受け付ける。アナログスティック３８は、ある局面において、初期位置（ニュートラルの位置）から３６０度任意の方向への操作を受け付ける。当該操作は、例えば、仮想空間２に配置されるオブジェクトを移動するための操作を含む。

ある局面において、右コントローラ８００および左コントローラは、赤外線ＬＥＤ３５その他の部材を駆動するための電池を含む。電池は、充電式、ボタン型、乾電池型等を含むが、これらに限定されない。別の局面において、右コントローラ８００と左コントローラは、例えば、コンピュータ２００のＵＳＢインターフェイスに接続され得る。この場合、右コントローラ８００および左コントローラは、電池を必要としない。

図１０の分図（Ｂ）は、右コントローラ８００を把持するユーザ１９０の右手に対応して仮想空間に配置されるハンドオブジェクト８１０の一例を示す。例えば、ユーザ１９０の右手に対応するハンドオブジェクト８１０に対して、ヨー、ロール、ピッチの各方向が規定される。例えば、入力操作が、右コントローラ８００のボタン３４に対して行なわれると、ハンドオブジェクト８１０の人差し指を握りこんだ状態とし、入力操作がボタン３４に対して行なわれていない場合には、分図（Ｂ）に示すように、ハンドオブジェクト８１０の人差し指を伸ばした状態とすることもできる。例えば、ハンドオブジェクト８１０において親指と人差し指とが伸びている場合に、親指の伸びる方向がヨー方向、人差し指の伸びる方向がロール方向、ヨー方向の軸およびロール方向の軸によって規定される平面に垂直な方向がピッチ方向としてハンドオブジェクト８１０に規定される。

［ＨＭＤの制御装置］
図１１を参照して、ＨＭＤ１１０の制御装置について説明する。ある実施の形態において、制御装置は周知の構成を有するコンピュータ２００によって実現される。図１１は、ある実施の形態に従うコンピュータ２００をモジュール構成として表わすブロック図である。

図１１に示されるように、コンピュータ２００は、表示制御モジュール２２０と、仮想空間制御モジュール２３０と、メモリモジュール２４０と、通信制御モジュール２５０とを備える。表示制御モジュール２２０は、サブモジュールとして、仮想カメラ制御モジュール２２１と、視界領域決定モジュール２２２と、視界画像生成モジュール２２３と、基準視線特定モジュール２２４とを含む。仮想空間制御モジュール２３０は、サブモジュールとして、仮想空間定義モジュール２３１と、仮想オブジェクト生成モジュール２３２と、手オブジェクト管理モジュール２３３とを含む。

ある実施の形態において、表示制御モジュール２２０と仮想空間制御モジュール２３０とは、プロセッサ１０によって実現される。別の実施の形態において、複数のプロセッサ１０が表示制御モジュール２２０と仮想空間制御モジュール２３０として作動してもよい。メモリモジュール２４０は、メモリ１１またはストレージ１２によって実現される。通信制御モジュール２５０は、通信インターフェイス１４によって実現される。

ある局面において、表示制御モジュール２２０は、ＨＭＤ１１０のモニタ１１２における画像表示を制御する。仮想カメラ制御モジュール２２１は、仮想空間２に仮想カメラ１を配置し、仮想カメラ１の挙動、向き等を制御する。視界領域決定モジュール２２２は、視界領域２３を規定する。視界画像生成モジュール２２３は、決定された視界領域２３に基づいて、モニタ１１２に表示される視界画像２６を生成する。

基準視線特定モジュール２２４は、注視センサ１４０からの信号に基づいて、ユーザ１９０の視線を特定する。

仮想空間制御モジュール２３０は、ユーザ１９０に提供される仮想空間２を制御する。仮想空間定義モジュール２３１は、仮想空間２を表わす仮想空間データを生成することにより、ＨＭＤシステム１００における仮想空間２を規定する。

仮想オブジェクト生成モジュール２３２は、仮想空間２に表示される対象物を生成する。対象物は、一例では、ネットワーク１９（図１等）上の他のＨＭＤシステム１００のユーザのアバター、ならびに、イベント会場におけるステージおよびスクリーン等の設置物を含む。対象物は、他の例では、ゲームのストーリーの進行に従って表示される森、山その他を含む風景、動物等を含む。

手オブジェクト管理モジュール２３３は、手オブジェクトを仮想空間２に配置する。以下の説明において、仮想空間２に配置された手オブジェクトは、「仮想手」とも称する。手オブジェクトは、例えば、コントローラ１６０を保持したユーザ１９０の右手あるいは左手に対応する。ある局面において、手オブジェクト管理モジュール２３３は、左手オブジェクト９１０または右手オブジェクト９２０を仮想空間２に配置するためのデータを生成する。別の局面において、手オブジェクト管理モジュール２３３は、ユーザ１９０によるコントローラ１６０の操作に応じて、左手オブジェクト９１０または右手オブジェクト９２０が他のオブジェクト（例えば、オブジェクト９００またはオブジェクト１０００）を回転させる動作を示すためのデータを生成する。当該動作は、例えば、オブジェクト９００として示されるハンドルを握る手が、当該ハンドルを回転させることを含む。

メモリモジュール２４０は、コンピュータ２００が仮想空間２をユーザ１９０に提供するために使用されるデータを保持している。ある局面において、メモリモジュール２４０は、空間情報２４１と、オブジェクト情報２４２と、ユーザ情報２４３と、イベント情報２４４とを保持している。

空間情報２４１は、仮想空間２を提供するために規定された１つ以上のテンプレートを保持している。

オブジェクト情報２４２は、仮想空間２において再生されるコンテンツ、当該コンテンツで使用されるオブジェクトを表示するための情報を保持している。当該コンテンツは、例えば、ゲーム、現実社会と同様の風景を表したコンテンツ等を含み得る。

ユーザ情報２４３は、ＨＭＤシステム１００の制御装置としてコンピュータ２００を機能させるためのプログラム、オブジェクト情報２４２に保持される各コンテンツを使用するアプリケーションプログラム等を保持している。メモリモジュール２４０に格納されているデータおよびプログラムは、ＨＭＤ１１０のユーザによって入力される。あるいは、プロセッサ１０が、当該コンテンツを提供する事業者が運営するコンピュータ（例えば、サーバ１５０）からプログラムあるいはデータをダウンロードして、ダウンロードされたプログラムあるいはデータをメモリモジュール２４０に格納する。

イベント情報２４４は、ＨＭＤシステム１００がユーザに仮想空間の一例として提供するイベント会場に対応する、イベントに関する情報を保持している。イベント情報として保持される情報は、図１７等を参照して後述する。

通信制御モジュール２５０は、ネットワーク１９を介して、サーバ１５０その他の情報通信装置と通信し得る。

ある局面において、表示制御モジュール２２０および仮想空間制御モジュール２３０は、ユニティテクノロジーズ社によって提供されるＵｎｉｔｙ（登録商標）を用いて実現され得る。

［サーバのハードウェア構成］
図１２を参照して、本実施の形態に係るサーバ１５０について説明する。図１２は、一局面に従うサーバ１５０のハードウェア構成の一例を表すブロック図である。サーバ１５０は、主たる構成要素として、プロセッサ５１０と、メモリ５１１と、ストレージ５１２と、通信インターフェース５１４とを備える。各構成要素は、それぞれ、バス５１５に接続されている。

プロセッサ５１０は、サーバ１５０に与えられる信号に基づいて、あるいは、予め定められた条件が成立したことに基づいて、メモリ５１１またはストレージ５１２に格納されているプログラムに含まれる一連の命令を実行する。ある局面において、プロセッサ５１０は、ＣＰＵ、ＭＰＵ、ＦＰＧＡ、その他のデバイスとして実現される。

メモリ５１１は、プログラムおよびデータを格納する。プログラムは、例えば、ストレージ５１２からロードされる。データは、サーバ１５０に入力されたデータと、プロセッサ５１０によって生成されたデータとを含む。メモリ５１１は、ＲＡＭその他の揮発メモリとしても実現される。

ストレージ５１２は、プログラムおよびデータを永続的に保持する。ストレージ５１２は、例えば、ＲＯＭ、ハードディスク装置、フラッシュメモリ、その他の不揮発記憶装置として実現される。ストレージ５１２に格納されるプログラムは、各ＨＭＤシステム１００において提供される仮想空間を、２以上のコンテンツ表示装置を含むネットワークシステムにおける他のＨＭＤシステム１００に対する入力に従って調整するためのプログラムを含む。ストレージ５１２は、ネットワークシステムの各ユーザの情報を格納するためのユーザ情報格納部５１２Ａを含む。

通信インターフェース５１４は、ネットワーク１９を介して他のコンピュータ（例えば、コンピュータ２００）と通信する。ある局面において、通信インターフェース５１４は、例えば、ＬＡＮその他の有線通信インターフェイス、あるいは、ＷｉＦｉ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＮＦＣ、その他の無線通信インターフェイスとして実現される。ただし、通信インターフェース５１４は上述のものに限られない。

［制御構造］
図１３を参照して、ＨＭＤシステム１００の制御構造について説明する。図１３は、ある実施の形態に従うＨＭＤシステム１００において実行される処理の一部を表わすシーケンスチャートである。

ステップＳ１３１０にて、コンピュータ２００のプロセッサ１０は、仮想空間定義モジュール２３１として、仮想空間画像データを特定する。

ステップＳ１３１０では、プロセッサ１０は、たとえば、サーバ１５０に対し、イベントへの参加を申請する情報を送信してもよい。これに応じて、サーバ１５０は、コンピュータ２００に、当該イベントの会場を表わす仮想空間の画像データ（仮想空間画像データ）を送信してもよい。

ステップＳ１３２０にて、プロセッサ１０は、仮想カメラ１を初期化する。例えば、プロセッサ１０は、仮想カメラ１を仮想空間２において予め規定された中心点に配置し、仮想カメラ１の視線をユーザ１９０が向いている方向に向ける。

ステップＳ１３３０にて、プロセッサ１０は、視界画像生成モジュール２２３として、初期の視界画像を表示するための視界画像データを生成する。生成された視界画像データは、視界画像生成モジュール２２３を介して通信制御モジュール２５０によってＨＭＤ１１０に送られる。

ステップＳ１３３２にて、ＨＭＤ１１０のモニタ１１２は、コンピュータ２００から受信した信号に基づいて、視界画像を表示する。ＨＭＤ１１０を装着したユーザ１９０は、視界画像を視認すると仮想空間２を認識し得る。

ステップＳ１３３４にて、ＨＭＤセンサ１２０は、ＨＭＤ１１０から発信される複数の赤外線光に基づいて、ＨＭＤ１１０の位置と傾きを検知する。検知結果は、動き検知データとして、コンピュータ２００に送られる。

ステップＳ１３４０にて、プロセッサ１０は、ＨＭＤ１１０の位置と傾きとに基づいて、ＨＭＤ１１０を装着したユーザ１９０の視界方向を特定する。プロセッサ１０は、アプリケーションプログラムを実行し、アプリケーションプログラムに含まれる命令に基づいて、仮想空間２においてオブジェクトを表示させる。ユーザ１９０は、そのアプリケーションプログラムの実行により仮想空間２において視認可能なコンテンツを楽しむ。

ある局面において、当該コンテンツは、ユーザにイベント会場を体感させるためのアプリケーション（以下、「イベントアプリケーション」ともいう）を含む。イベントアプリケーションは、ユーザに、仮想空間として、イベント会場内の風景を提供する。プロセッサ１０は、ＨＭＤ１１０の位置と傾きに応じて、ユーザに視認させる仮想空間画像を変更する。

ステップＳ１３５０にて、コントローラ１６０は、ユーザ１９０の操作を検出し、検出された操作を示す信号をコンピュータ２００に送信する。当該信号は、表示された２つ以上のオブジェクトのうち１つ以上のオブジェクトを指定する操作を含む。より具体的には、当該信号は、仮想手を表示させ、当該仮想手で、表示された２つ以上のオブジェクトのうち１つ以上のオブジェクトに触れる動作を示す操作を示す信号を含む。当該信号は、選択された２以上のメニューから１以上のメニューを選択する操作を示す信号を含む。

ステップＳ１３５２にて、プロセッサ１０は、コントローラ１６０から受信した信号に基づいて、ユーザの状態（アプリケーションの状態）を判断する。

ステップＳ１３６０にて、プロセッサ１０は、サーバ１５０および／または他のＨＭＤ１１０から、仮想空間内の各オブジェクトの設定を取得する。

ステップＳ１３７０で、プロセッサ１０は、ＨＭＤ１１０の位置および傾き、ユーザ１９０の操作、ならびに／または、各オブジェクトの設定に従って、視界画像を更新し、更新された視界画像を表示するためのデータ（視界画像データ）をＨＭＤ１１０に送信する。視界画像の更新は、仮想空間内のオブジェクトの透過度の変更、オブジェクトの消去、および、オブジェクトの移動の中のいずれかを含んでもよい。

ステップＳ１３７２にて、ＨＭＤ１１０のモニタ１１２は、受信した視界画像データに基づいて視界画像を更新し、更新後の視界画像を表示する。

［データ構造］
（サーバ１５０のユーザ情報格納部５１２Ａ）
図１４〜図１６を参照して、ユーザ情報格納部５１２Ａ（図１２）に格納されるデータの構造の一例を説明する。図１４は、ユーザ情報格納部５１２Ａ内のデータの構造の一例を模式的に示す図である。

図１４に示されるように、ユーザ情報格納部５１２Ａは、ユーザＤＢ（データベース）を格納する。ユーザＤＢは、各ユーザのＩＤ（ユーザＩＤ）に関連付けられた、基本情報および移動履歴情報を含む。

図１５は、あるユーザについての、図１４の基本情報として格納される情報の一例を模式的に示す図である。基本情報は、各ユーザについて、当該ユーザが参加したイベントの履歴（イベント参加履歴）、および、仮想空間内で表示を制限するオブジェクト（アバター）に対応するユーザを特定する情報（表示制限ユーザＩＤ）を含む。図１５の例では、ユーザがこれまで参加したイベントは、「イベントＡ」および「イベントＣ」を含む。また、図１５の例では、ユーザは、ＩＤ「０００００５」およびＩＤ「０００１０４」のそれぞれのユーザに対応するアバターの表示を制限することをサーバ１５０に登録している。

本明細書において、オブジェクトの表示について「制限」との文言は、オブジェクトを透過度を上げて表示すること、または、オブジェクトを完全に透過させることにより当該オブジェクトの表示を行なわないことを意味する。

図１６は、あるユーザについての、図１４の移動履歴情報として格納される情報の一例を模式的に示す図である。図１６に示されるように、移動履歴情報は、イベントごとに、ユーザの位置情報の履歴を含む。移動履歴情報では、時刻とユーザの位置とが関連付けられている。サーバ１５０のプロセッサ５１０は、たとえば、システム内の各ＨＭＤシステム１００から、ＨＭＤシステム１００のユーザの位置情報について、一定時間ごと、または、当該ユーザの位置情報が一定距離以上移動したことに応じて、仮想空間におけるユーザの位置情報を特定するための情報を取得する。プロセッサ５１０は、取得した情報を、移動履歴情報として格納する。

（コンピュータ２００のイベント情報２４４）
図１７および図１８を参照して、イベント情報２４４（図１１）に格納されるデータの構造の一例を説明する。図１７は、イベント情報２４４内のデータの構造の一例を模式的に示す図である。図１８は、透過オブジェクト設定の入力画面の一例を模式的に示す図である。

図１７に示されるように、イベント情報２４４は、ＨＭＤシステム１００のユーザが参加中のイベントについての情報を格納している。格納される情報は、「操作中のユーザ」「参加中のイベント名」、「透過オブジェクト設定」、「保護オブジェクト」、「制限オブジェクト」および「参照オブジェクト」を含む。

「操作中のユーザ」は、ＨＭＤシステム１００を利用しているユーザのＩＤを示す。プロセッサ１０は、たとえばユーザがコンピュータ２００の使用を開始するときに、ユーザにＩＤの入力を要求する。当該要求に応じて入力されたＩＤを、プロセッサ１０は、イベント情報２４４に格納する。

「参加中のイベント名」は、参加しているイベントの名称である。ユーザは、たとえば、ＨＭＤ１１０に対して参加を希望するイベントの名称を入力する。プロセッサ１０は、当該入力に応じて、サーバ１５０に対して、当該イベントの会場を表わす仮想空間の画像データを要求する。サーバ１５０は、当該要求に応じて、コンピュータ２００に、当該画像データを送信する。

「透過オブジェクト設定」は、参加中のイベントにおける、オブジェクトの透過に関する設定を表わす。透過オブジェクト設定では、たとえば以下の４つの項目について、ＯＮまたはＯＦＦを特定する情報が登録される。

・直接設定
・他ユーザの指定を参照
・特定オブジェクトまでの見通しを確保
・オブジェクトの動作を参照
透過オブジェクト設定における各項目は、たとえば、図１８に示されるような入力画面において設定される。ユーザは、コントローラ１６０を操作することによって、入力画面に対して情報を入力してもよい。図１８の入力画面に対する情報の入力について説明する。

図１８の入力画面９９０は、４つの設定項目のそれぞれを選択するためのチェックボックス９９１〜９９４と、設定終了ボタン９９５とを含む。

チェックボックズ９９１は、「直接設定」に対応する。チェックボックズ９９２は、「他ユーザの指定を参照」に対応する。チェックボックズ９９３は、「特定オブジェクトまでの見通しを確保」に対応する。チェックボックズ９９４は、「オブジェクトの動作を参照」に対応する。ユーザは、チェックボックズ９９１〜９９４のそれぞれにチェックを入力するかしないかによって、上記４つの項目のそれぞれに従ったオブジェクトの透過設定を有効にするか否かを設定することができる。チェックボックス９９１〜９９４のそれぞれに対するチェックの入力の有無は、設定終了ボタン９９５に対する操作によって確定される。

「直接設定」は、制限オブジェクトおよび保護オブジェクトの直接的な指定を受付けるかどうかを特定する。プロセッサ１０は、仮想空間画像の表示において、制限オブジェクトとして登録されているオブジェクトの透過度を他のオブジェクトに対して高くする。プロセッサ１０は、仮想空間画像の表示において、保護オブジェクトとして登録されているオブジェクトは、当該オブジェクトの透過度を高くする条件が成立しても透過度を高めることなく表示する。「直接設定」の設定がＯＮであれば、プロセッサ１０は、制限オブジェクトおよび保護オブジェクトの直接的な指定を受付け、ＯＦＦであれば、当該指定を受付けない。

「他ユーザの指定を参照」は、ネットワークシステムにおける他のユーザの表示の制限を参照して、仮想空間画像における各オブジェクトの表示を制限するかどうかを特定する。「他ユーザの指定を参照」の設定がＯＮであれば、プロセッサ１０は、他のユーザの表示制限ユーザＩＤにおいて登録されているユーザを表わすアバターの表示を制限する。「他ユーザの指定を参照」の設定がＯＦＦであれば、プロセッサ１０は、他のユーザの設定に従ったアバターの表示の制限を実行しない。

「特定オブジェクトまでの見通しを確保」は、仮想空間において、ＨＭＤ１１０のユーザの目の位置から特定のオブジェクトまでの空間に位置するオブジェクトの表示を制限するか否かを特定する。「特定オブジェクトまでの見通しを確保」の設定がＯＮであれば、プロセッサ１０は、ユーザの目の位置から特定のオブジェクトまでの空間を特定し、仮想空間画像において特定された空間の内部に位置するオブジェクトの透過度を上げる。

プロセッサ１０は、特定された空間の内部に位置する全てのオブジェクトの透過度を上げてもよいし、一部のオブジェクトの透過度を上げてもよい。

また、プロセッサ１０は、当該空間に一部のみを含まれるオブジェクトについては、透過度を上げてもよいし、上げなくてもよいし、当該オブジェクトの当該空間の内部に位置する部分のみの透過度を上げてもよい。

図１９は、仮想カメラから特定のオブジェクトまでの空間の一例を説明するための図である。図１９において、ユーザＵは、ＨＭＤ１１０のユーザを示す。オブジェクトＯＢは、特定のオブジェクトを示す。空間ＳＰは、ユーザＵの目の位置とオブジェクトＯＢの位置とに基づいて特定される空間の一例を示す。空間ＳＰは、ユーザＵの目の位置（右目と左目の中心点）を頂点とし、オブジェクトＯＢを底面とする、錐体である。ユーザＵの目の位置は、仮想カメラの位置の一例である。仮想カメラの位置は、ユーザＵの両目の双方を頂点としオブジェクトＯＢを底面とする立体を特定してもよい。

図２０は、図１９を参照して説明されたような空間を用いたオブジェクトの選択を説明するための図である。図２０の分図Ａは、ユーザによって認識される画像を示し、分図Ｂは、仮想空間のうち、仮想カメラによって捉えられる視界領域を示す。分図Ｂには、図１９を参照して説明された態様で設定された空間ＳＰが示されている。

プロセッサ１０は、たとえば、仮想空間において、空間ＳＰに含まれるオブジェクトを選択する。プロセッサ１０は、視界領域２３に含まれる９個のオブジェクト９００，９１０，９１２〜９１８から、たとえば以下に説明するような方法で３個のオブジェクト９１５〜９１７を選択し、選択されたオブジェクト９１５〜９１７を透過対象として選択する。

すなわち、プロセッサ１０は、ユーザの目の位置（仮想カメラ１の位置）とオブジェクト９００（基準オブジェクトの一例）の位置とに基づいて、空間ＳＰを特定する。空間ＳＰは、４個のオブジェクト９１０，９１５〜９１７を含む。オブジェクト９１０は、たとえば保護オブジェクト（図１７等）として登録されることにより、表示が制限されないように保護されているとする。これにより、プロセッサ１０は、選択された４個のオブジェクト９１０，９１５〜９１７から、オブジェクト９１０以外の３個のオブジェクト９１５〜９１７を、透過処理の対象として設定する。

図１８に戻って、「オブジェクトの動作を参照」は、ユーザの移動履歴に従って、仮想空間において当該ユーザに対応するオブジェクト（たとえば、アバター）の表示を制限するか否かを特定する。「オブジェクトの動作を参照」の設定がＯＮであれば、プロセッサ１０は、仮想空間内のオブジェクトに対応するユーザの移動履歴情報（図１６）を参照する。プロセッサ１０は、当該ユーザの移動履歴情報に基づいて、当該ユーザが予め定められた頻度以上の頻度で移動している場合には、当該ユーザに対応するオブジェクトの表示を制限する。頻度とは、単位時間当たりの移動距離であってもよいし、単位時間当たりの移動回数であってもよい。

図１７に戻って、「保護オブジェクト」と「制限オブジェクト」のそれぞれは、上記「直接設定」の設定がＯＮにされているときに設定された保護オブジェクトと制限オブジェクトのそれぞれを示す。図１７の例では、保護オブジェクトとして、ユーザＩＤ「０００００２」が登録され、制限オブジェクトとして、ユーザＩＤ「０１２６８４」が登録されている。

「参照オブジェクト」は、オブジェクトの表示に関して参照される他のユーザを表わす。プロセッサ１０は、「参照オブジェクト」の設定がＯＮであれば、所定の態様で交流した他のユーザのＩＤを、参照オブジェクトとして登録する。本開示におけるネットワーク上のユーザ同士の交流について、図２１を参照して説明する。

［ネットワーク上でのユーザ間の交流］
図２１および図２２を参照して、ネットワーク上でのユーザ間の交流について説明する。図２１は、ネットワークにおいて、複数のＨＭＤのそれぞれが、複数のユーザのそれぞれに仮想空間を提供する状況を模式的に示す図である。図２２は、更新後のイベント情報の内容を模式的に示す図である。

図２１に示されたネットワークシステムでは、コンピュータ２００Ａ〜２００Ｆのそれぞれが、コンテンツ表示装置を構成する。コンピュータ２００Ａ〜２００Ｆは、ネットワーク１９を介してサーバ１５０と通信可能である。コンピュータ２００Ａ〜２００Ｆのそれぞれは、ＨＭＤ１１０Ａ〜１１０Ｆのそれぞれに、仮想空間画像２２Ａ〜２２Ｆのそれぞれを表示させる。仮想空間画像２２Ａ〜２２Ｆは、５個のオブジェクト９００，９０１，９０２，９０３，９０４を含む、同一のイベントを表わす画像である。

５個のオブジェクト９００，９０１，９０２，９０３，９０４のうち、オブジェクト９０１は、ＨＭＤ１１０Ａのユーザを表わす。このことから、ＨＭＤ１１０Ａのユーザに提供される仮想空間画像２２Ａは、オブジェクト９０１の目の位置に対応する視界画像を表わす。ＨＭＤ１１０Ａのユーザの位置および傾きに従って、コンピュータ２００Ａは、仮想空間画像２２Ａによって表される視界画像を更新する。

ＨＭＤ１１０Ａは、ユーザの位置および傾きをサーバ１５０に通知してもよい。サーバ１５０は、ＨＭＤ１１０Ａのユーザの位置および傾きを、ネットワーク内のＨＭＤ１１０Ａ以外のＨＭＤ１１０（ＨＭＤ１１０Ｂ〜１１０Ｆ）に通知してもよい。ＨＭＤ１１０Ｂ〜１１０Ｆは、当該通知に応じて、ＨＭＤ１１０Ａに対応するオブジェクト（オブジェクト９０１）の表示態様（たとえば、仮想空間における位置）を変更してもよい。

オブジェクト９０４は、ＨＭＤ１１０Ｂのユーザを表わす。このことから、ＨＭＤ１１０Ｂのユーザに提供される仮想空間画像２２Ｂは、オブジェクト９０４の目の位置に対応する視界画像を表わす。

ＨＭＤ１１０Ａのユーザが仮想空間画像２２Ａにおいてオブジェクト９０４を指定する動作を実行すると、ＨＭＤ１１０Ａは、当該動作の入力を、コンピュータ２００Ａへ通知する。コンピュータ２００Ａは、当該動作の入力をサーバ１５０へ通知する。サーバ１５０は、当該動作の入力を、オブジェクト９０４に対応するコンピュータ（コンピュータ２００Ｂ）に通知する。当該通知に応じて、コンピュータ２００Ｂは、ＨＭＤ１１０Ｂに、仮想空間画像２２Ｂにおけるオブジェクト９０１（ＨＭＤ１１０Ａに対応するオブジェクト）の表示態様を変更させてもよい。

上記のように、ＨＭＤ１１０ＡのユーザがＨＭＤ１１０Ｂのユーザに対応するオブジェクトを指定したことが、ＨＭＤ１１０Ｂに接続されるコンピュータ２００Ｂに通知される。すなわち、あるユーザが当該ユーザに提示された仮想空間画像において他のユーザに対応するオブジェクトを指定することにより、当該他のユーザに対応するコンピュータ（コンテンツ表示装置）にそのことが通知される。これにより、ネットワークにおいて互いに異なるＨＭＤを利用するユーザ同士の交流が可能になる。

図１７の「参照オブジェクト」は、このような交流の相手のユーザのＩＤを表わす。「参照オブジェクト」としてＩＤが登録される条件は、適宜設定され得る。一例では、ユーザＡがユーザＢを指定したときに、ユーザＢがユーザＡの「参照オブジェクト」として登録される。他の例では、ユーザＡがユーザＢを指定したときに、ユーザＡがユーザＢの「参照オブジェクト」として登録される。

「参照オブジェクト」として登録される「指定」の種類は、適宜設定され得る。一例では、当該「指定」は、ユーザに話しかけるための指定である。他の例では、当該「指定」は、ユーザを追随するための指定である。

たとえば、ユーザＡが、当該ユーザＡに提示された仮想空間画像において、ユーザＢに対応するオブジェクトに話しかけるための動作を行なう。動作の一例は、ユーザＢを表わすオブジェクト上に一定時間以上継続して注視点を置くことである。他の例は、ユーザＢを表わすオブジェクトを仮想手で触れることである。これに応じて、ユーザＢの「参照オブジェクト」には、ユーザＡのＩＤが登録される。すなわち、図１７に示された情報は、図２２に示されるように更新される。図２２では、図１７と比較して、「参照オブジェクト」の欄にＩＤ「００５０５０」が追加されている。ＩＤ「００５０５０」は、ユーザＡを表わす。

［ユーザ間の交流に関連した視界画像の表示態様］
図２３および図２４は、ネットワークシステムにおけるユーザ間の交流に関連した視界画像の変化の一例を説明するための図である。図２３は、ネットワークシステムにおいて他のユーザに話しかけたユーザに提示される視界画像の変化を示す。図２４は、ネットワークシステムにおいて他のユーザに話しかけられたユーザに提示される視界画像の変化を示す。一例として、ユーザＡがユーザＢに話しかけた状況を想定する。このような状況において、図２３は、ユーザＡ（話しかけた側）に提示される視界画像の変化を示す。図２４は、ユーザＢ（話しかけられた側）に提示される視界画像の変化を示す。

図２３に示されるように、ユーザＡに仮想空間を提供するＨＭＤシステム１００のプロセッサ１０によって生成される、３つの視界画像２３０１〜２３０３が示されている。視界画像２３０１は、ユーザＢに対応するオブジェクト９２１を含む。ユーザＡは、オブジェクト９２１に対して話しかけるための操作を入力する。当該操作の一例は、オブジェクト９２１上に所定時間以上注視点を位置させることである。当該操作の他の例は、オブジェクト９２１を仮想手で触れることである。プロセッサ１０は、ユーザＡからオブジェクト９２１（ユーザＢ）に対して話しかけるための操作を入力されると、表示される視界画像を、視界画像２３０１から視界画像２３０２へと変更する。

視界画像２３０１では右方を向いていたオブジェクト９２１が、視界画像２３０２では、正面を向いている。

プロセッサ１０は、さらにユーザＡがオブジェクト９２１を指定する操作を続けると、ユーザＡに提供する視界画像を、視界画像２３０２から視界画像２３０３へと変更する。視界画像２３０３は、視界画像２３０２と比較して、オブジェクト９２１が表わすユーザ（ユーザＢ）のプロフィールを表示するプレート１６１４をさらに表示する。プロセッサ１０は、たとえば、サーバ１５０のユーザ情報格納部５１２Ａに格納されたユーザＢの基本情報等に基づいてプレート１６１４を表示する。図２３の例では、プレート１６１４に表示される情報は、オブジェクト９２１によって表されるユーザの、「表示名」（図１５）と「イベント参加履歴」（図１５）とを含む。

次に、図２４について説明する。図２４には、ユーザＢに仮想空間を提供するＨＭＤシステム１００のプロセッサ１０によって生成される、３つの視界画像２４０１〜２４０３が示されている。視界画像２４０１は、ユーザＡおよびユーザＢに無関係のユーザを表わすオブジェクト９３２と、ユーザＡに対応するオブジェクト９３１とを含む。プロセッサ１０は、ユーザＡがユーザＢに話しかける操作を入力したことに応じて、ユーザに提示する視界画像を、視界画像２４０１から視界画像２４０２へと変更する。

視界画像２４０２では、視界画像２４０１では左を向いていたオブジェクト９３１が正面を向いている。

プロセッサ１０は、ユーザＡがユーザＢに話しかける操作を行なったことに応じて、ユーザに提示する視界画像を、視界画像２４０２から視界画像２４０３へとさらに変更してもよい。視界画像２４０３は、視界画像２４０２と比較して、オブジェクト９３１を強調して表示するための枠２３０４を表示する。これにより、視界画像２４０３を提示されたユーザＢは、オブジェクト９３１に対応するユーザＡが話しかけてきたことを容易に理解し得る。

［視界画像の生成］
次に、図２５を参照して、コンピュータ２００における視界画像の生成の処理内容について説明する。図２５は、プロセッサ１０によって実行される、視界画像の生成の処理のフローチャートである。プロセッサ１０は、たとえばストレージ１２に格納されたプログラムを実行することにより、図２５の処理を実現する。

図２５を参照して、ステップＳ１０で、プロセッサ１０は、ＨＭＤ１１０に表示させる仮想空間画像を取得する。プロセッサ１０は、たとえば、ユーザからイベントの指定を受付け、指定されたイベントの会場を表示するための仮想空間画像をサーバ１５０に要求する。そして、プロセッサ１０は、当該要求に対してサーバ１５０から供給された仮想空間画像を、ＨＭＤ１１０に表示させる仮想空間画像として取得する。

プロセッサ１０は、ユーザから指定されたイベントの名称をイベント情報（図１７等）に登録してもよい。プロセッサ１０は、さらに、当該イベントの名称を、サーバ１５０に通知してもよい。コンピュータ２００からイベントの名称を通知されると、サーバ１５０のプロセッサ５１０は、通知されたイベントの名称を、通知元のコンピュータ２００に対応するユーザの基本情報（図１８）のイベント参加履歴に登録してもよい。

ステップＳ２０で、プロセッサ１０は、ステップＳ１０で特定された仮想空間画像のうち、ＨＭＤ１１０の位置および傾きに基づいて、視界画像として表示する部分を特定する。

ステップＳ３０で、プロセッサ１０は、ステップＳ２０で特定された視界画像に含まれるオブジェクトを特定する。

ステップＳ４０で、プロセッサ１０は、ステップＳ３０で特定されたオブジェクトのうち、透過処理の対象となるオブジェクトを選択する。プロセッサ１０は、たとえば、図１７に示されたようなイベント情報２４４内のデータを参照して、透過処理の対象のオブジェクトを特定する。ステップＳ４０の制御の詳細は、図２６〜図２９を参照して後述する。

ステップＳ５０で、プロセッサ１０は、ステップＳ４０で選択されたオブジェクトの透過度を上げることにより、ステップＳ２０で特定された視界画像を修正する。

図２５を参照して説明されたように、プロセッサ１０は、一部のオブジェクトに対して透過処理を施すためにＨＭＤ１１０の位置および傾きに基づいて特定された視界画像を修正することにより、視界画像を生成する。

［透過処理の対象のオブジェクトの特定］
図２６〜図２９のそれぞれは、図２５のステップＳ４０のサブルーチンのフローチャートである。プロセッサ１０は、透過オブジェクト設定（図１７等）に従って、図２６〜図２９のそれぞれに示されたサブルーチンを実行するか否かを決定する。透過オブジェクト設定における４つの項目（直接設定、他ユーザの指定を参照、特定オブジェクトまでの見通しを確保、オブジェクトの動作を参照）のうち、項目「直接設定」は、図２６のサブルーチンに対応する。項目「他ユーザの指定を参照」は、図２７のサブルーチンに対応する。項目「特定オブジェクトまでの見通しを確保」は、図２８のサブルーチンに対応する。項目「オブジェクトの動作を参照」は、図２９のサブルーチンに対応する。

プロセッサ１０は、透過オブジェクト設定における４つの項目のうち、ＯＮが設定されている項目を選択する。プロセッサ１０は、図２６〜図２９における４つのサブルーチンのうち、選択された項目に対応するサブルーチンを実行する。

（直接設定：図２６）
図２５のステップＳ４０で、プロセッサ１０は、項目「透過オブジェクト設定」の設定がＯＮであれば、図２６のサブルーチンを実行する。

図２６を参照して、ステップＳ４１２で、プロセッサ１０は、透過対象のオブジェクトの指定を受付ける。ユーザは、たとえば、ＨＭＤ１１０に対して、オブジェクトを指定するための情報を入力する。当該情報の入力は、たとえば、オブジェクト上に所定時間以上継続して注視点を位置させることである。プロセッサ１０は、ＨＭＤ１１０から、透過対象のオブジェクトの指定を受付ける。

プロセッサ１０は、指定されたオブジェクトを、透過対象のオブジェクトとして選択して、制御を図２５の処理に戻す。

プロセッサ１０は、上記のように指定されたオブジェクトに対応するユーザＩＤを、イベント情報（図１７等）において「制限オブジェクト」として登録してもよい。プロセッサ１０は、上記のように指定されたオブジェクトに対応するユーザＩＤをサーバ１５０に通知してもよい。当該通知に応じて、サーバ１５０のプロセッサ５１０は、通知されたユーザＩＤを、通知元のコンピュータ２００に対応するユーザの基本情報において、「表示制限ユーザＩＤ」として登録してもよい。

（他ユーザの指定を参照：図２７）
図２５のステップＳ４０で、プロセッサ１０は、項目「他ユーザの指定を参照」の設定がＯＮであれば、図２７のサブルーチンを実行する。

図２７を参照して、ステップＳ４２２で、プロセッサ１０は、サーバ１５０のユーザＤＢの基本情報（図１５）から、他のユーザの表示制限ユーザＩＤを読み出す。ここで、他のユーザは、たとえば、プロセッサ１０が含まれるＨＭＤシステム１００のユーザが参加しているのと同じイベントに参加するユーザを含む。

ステップＳ４２４で、プロセッサ１０は、ステップＳ４２２の結果、特定数以上のユーザの基本情報において表示制限ユーザＩＤとして登録されているユーザＩＤを特定し、当該ユーザＩＤに対応するオブジェクトを特定する。プロセッサ１０は、特定されたオブジェクトを、透過対象のオブジェクトとして選択して、制御を図２５の処理に戻す。

（特定オブジェクトまでの見通しを確保：図２８）
図２５のステップＳ４０で、プロセッサ１０は、項目「特定オブジェクトまでの見通しを確保」の設定がＯＮであれば、図２８のサブルーチンを実行する。

図２８を参照して、ステップＳ４３２で、プロセッサ１０は、当該プロセッサ１０を含むＨＭＤシステム１００のユーザの目の位置を特定する。

ステップＳ４３４で、プロセッサ１０は、基準オブジェクトの位置を特定する。基準オブジェクトとは、仮想空間においてユーザに優先的に視認されるべきオブジェクトである。

一例では、仮想空間において開催されるイベントごとに、基準オブジェクトが設定されている。プロセッサ１０は、たとえば、サーバ１５０から、基準オブジェクトを特定する情報を取得する。

他の例では、プロセッサ１０は、ユーザから基準オブジェクトの特定を受け付ける。プロセッサ１０は、特定された基準オブジェクトを、イベント情報（図１７等）に登録してもよい。

ステップＳ４３６で、プロセッサ１０は、ステップＳ４３２で特定されたユーザの目の位置と、ステップＳ４３４で特定された基準オブジェクトの位置とに基づいて、仮想空間における、ユーザの目の位置から基準オブジェクトまでの空間を特定する。当該空間の特定は、たとえば図１９を参照して説明された態様で実行される。

ステップＳ４３８で、プロセッサ１０は、仮想空間において、ステップＳ４３６で特定された空間に含まれるオブジェクトを特定する。そして、プロセッサ１０は、特定されたオブジェクトを透過対象のオブジェクトとして選択して、図２５に制御を戻す。

なお、プロセッサ１０は、ステップＳ４３８において特定されたオブジェクトのうち、保護オブジェクト（図１７等）として登録されているオブジェクト以外のオブジェクトを、透過対象のオブジェクトとして選択してもよい。これにより、保護オブジェクトは、透過対象から除外される。保護オブジェクトの一例は、仮想空間によって表現されるイベント会場に設置されたスクリーンを表わすオブジェクトである。他の例は、当該イベント会場における司会者を表わすオブジェクト（アバター）である。

（オブジェクトの動作を参照：図２９）
図２５のステップＳ４０で、プロセッサ１０は、項目「オブジェクトの動作を参照」の設定がＯＮであれば、図２９のサブルーチンを実行する。

図２９を参照して、ステップＳ４４２で、プロセッサ１０は、ステップＳ３０（図２５）で特定された視界画像内のオブジェクトのうち、ネットワークシステムのユーザを表わすオブジェクトを選択する。すなわち、仮想空間内に表示されるオブジェクトは、ユーザを表わすオブジェクトとステージ等のアクセサリを表わすオブジェクトとを含み得る。ステップＳ４４２で、プロセッサ１０は、ユーザを表わすオブジェクトを選択する。

ステップＳ４４４で、プロセッサ１０は、ステップＳ４４２で選択されたオブジェクトのうち、一定の頻度以上の頻度で移動しているユーザを表わすオブジェクトを特定する。プロセッサ１０は、このようなオブジェクトを、たとえば各ユーザの移動履歴情報（図１６）が参照することによって特定する。そして、プロセッサ１０は、このように特定されたオブジェクトを透過対象のオブジェクトとして選択して、図２５へ制御を戻す。

［本開示の要約］
開示された技術的特徴は、たとえば以下のような構成を含む。

（構成１）
仮想空間における画像の表示を制御するためにコンピュータ２００によって実行される方法が提供される。コンピュータ２００の仮想空間定義モジュール２３１は、複数のオブジェクトを含む仮想空間を定義する。プロセッサ１０は、仮想空間から仮想空間画像を生成する（図２５）。プロセッサ１０は、複数のオブジェクトのそれぞれに関連付けられた情報（たとえば、対応するユーザＩＤが「制限オブジェクト」または「表示制限ユーザＩＤ」として登録されているか）に基づいて、複数のオブジェクトから１つ以上のオブジェクトを選択する（図２５のステップＳ４０）。プロセッサ１０は、選択されたオブジェクトの透過率を他のオブジェクトの透過率よりも高く設定する（図２５のステップＳ５０）。

オブジェクトの透過率が高められることによって、オブジェクトは、薄い色で表示されてもよいし、表示されなくなってもよい。仮想空間において、各オブジェクトに対応した音声が出力されてもよい。オブジェクトの透過率が高められたことに応じて、当該オブジェクトに対応した音声の出力は、停止されてもよいし、停止されなくてもよい。すなわち、仮想空間において、オブジェクトが表示されなくなっても当該オブジェクトに対応する音声だけは出力される場合があり得る。

ユーザは、たとえば入力画面（図１８）に対して情報を入力することにより、どのような方法で透過対象のオブジェクトを選択するかを指定することができる。

プロセッサ１０は、透過対象のオブジェクトを選択するための指定を、仮想空間画像が提示される前に受け付けてもよいし、仮想空間画像が提示されている間に受け付けてもよい。

（構成２）
選択されたオブジェクトは、当該選択をされたときの位置とは異なる場所に配置されてもよい。

すなわち、仮想空間画像の生成は、図３０に示されるように、選択されたオブジェクトを、当該選択されたときの位置とは異なる場所に配置することを含んでもよい。図３０は、ある実施の形態における、仮想空間画像の生成を説明するための図である。

図３０において、分図Ａは、ユーザによって認識される画像を示し、分図Ｂは、仮想空間のうち、仮想カメラによって捉えられる視界領域を示す。図３０の分図Ａおよび分図Ｂにおいて、オブジェクト９１５Ａ〜９１７Ａのそれぞれは、オブジェクト９１５〜９１７のそれぞれを縮小して示すものである。図３０の分図Ａおよび分図Ｂにおいて、オブジェクト９１５〜９１７が破線で示されていることは、透過度が上げられたことによってオブジェクト９１５〜９１７が画面に表示されなくなったことを意味する。

図３１は、図３０に示された仮想空間画像を生成するための処理のフローチャートである。図３１の処理は、図２５の処理と比較して、ステップＳ６０をさらに含む。図３１の処理では、プロセッサ１０は、ステップＳ５０で選択されたオブジェクトの透過度を高めるように仮想空間画像を修正した後、さらに、選択されたオブジェクトを再配置することにより、仮想空間画像を修正する。当該再配置により、選択されたオブジェクトは、透過度を上げられることなく、仮想空間画像内の元の場所とは異なる場所に配置される。元の場所とは異なる場所とは、たとえば、空間ＳＰ外であってもよい。再配置されるときに、選択されたオブジェクトは、縮小されていてもよい。

（構成３）
図３２は、他の実施の形態におけるプロセッサ１０によって実行される、視界画像の生成の処理のフローチャートである。他の実施の形態において、プロセッサ１０は、仮想空間から仮想空間画像を生成する。このとき、プロセッサ１０は、仮想空間に含まれる複数のオブジェクトから、各オブジェクトに関連付けられた情報に基づいて１つ以上のオブジェクトを選択し、仮想空間画像において、選択されたオブジェクトを縮小させて表示する。図３２を参照して、他の実施の形態における仮想空間画像の生成態様を説明する。

図２５に示された処理と比較して、図３２の処理では、プロセッサ１０は、図２５を参照して説明されたステップＳ１０〜ステップＳ３０の制御を実行した後、ステップＳ４０の代わりに、ステップＳＡ４０の制御を実行する。

ステップＳＡ４０で、プロセッサ１０は、ステップＳ３０で特定されたオブジェクトのうち、縮小処理の対象となるオブジェクトを選択する。縮小処理の対象となるオブジェクトは、たとえば、図２５および図２６〜図２９を参照して説明された態様と同様の態様で選択される。

ステップＳＡ５０で、プロセッサ１０は、ステップＳＡ４０で選択されたオブジェクトを縮小させることにより、ステップＳ２０で特定された視界画像を修正する。

図３３は、図３２に示された処理に従って生成される視界画像の一例を説明するための図である。図３３において、分図Ａは、ステップＳ２０で特定される視界画像を示す。分図Ｂは、ステップＳＡ５０における縮小後の視界画像を示す。

図３３において、分図Ａでは、視界画像２０００は９個のオブジェクト９００，９１０〜９１７を含む。このうち、３個のオブジェクト９１５，９１６，９１７が選択される。これにより、分図Ｂの画像２００１は、オブジェクト９１５，９１６，９１７の代わりに、オブジェクト９１５Ｘ，９１６Ｘ，９１７Ｘを含む。オブジェクト９１５Ｘ，９１６Ｘ，９１７Ｘは、オブジェクト９１５，９１６，９１７より小さい。このため、オブジェクト９００において、オブジェクト９１５Ｘ，９１６Ｘ，９１７Ｘによって覆われる面積は、オブジェクト９１５，９１６，９１７によって覆われる面積よりも小さい。したがって、ユーザは、画像２０００よりも画像２００１の中の方が、オブジェクト９００をより見易いと感じる。

図３２および図３３を参照して説明された例に関連して図２６〜図２９のそれぞれに示されたサブルーチンが実行される場合、各サブルーチンの処理では、「透過対象のオブジェクト」の代わりに、「縮小対象のオブジェクト」が選択される。

図３２および図３３を参照して説明された例において、プロセッサ１０は、オブジェクト９１５，９１６，９１７を縦および横の双方において縮小することにより、オブジェクト９１５Ｘ，９１６Ｘ，９１７Ｘを生成する。ただし、この実施の形態において「縮小」は、縦および横の少なくとも一方であればよい。また、「縮小」において、縦および横における縮小率が同一である必要はない。たとえば、縮小において、プロセッサ１０は、オブジェクトの縦方向のサイズを５０％とし、オブジェクトの横方向のサイズを２０％としてもよい。

（構成４）
プロセッサ１０は、各オブジェクトに関連付けられた情報は、仮想空間における位置情報（図１６の「位置」）を含む。プロセッサ１０は、仮想空間における仮想カメラから予め定められたオブジェクトまでの空間を特定し（図１９の空間ＳＰ）、特定された空間内の位置を指定する位置情報に関連付けられたオブジェクトから、１つ以上のオブジェクトを選択してもよい（図２０）。

プロセッサ１０は、予め定められた態様に従って、空間ＳＰ内のオブジェクトの一部のみを透過対象として選択してもよい。予め定められた態様の一例は、保護オブジェクトを透過対象から除外することである。予め定められた態様の他の例は、予め定められた方向位置するオブジェクトを１つおきに透過対象として選択することである。

（構成５）
プロセッサ１０は、仮想カメラ１（図１等）を、当該プロセッサ１０が搭載されるコンピュータ２００とは他のコンピュータのユーザの視線の移動に応じて移動させてもよい。

たとえば、図２１に示されたようなネットワークにおいて、コンピュータ２００Ａのプロセッサ１０は、コンピュータ２００Ａによる仮想空間の画像の生成に利用される仮想カメラを、コンピュータ２００Ｂによる仮想空間の画像の生成に利用される仮想カメラの移動に従って移動させてもよい。この場合、ＨＭＤ１１０Ａのユーザ（たとえば、ユーザＡ）に提供される視界画像の視点は、ＨＭＤ１１０Ｂのユーザ（たとえば、ユーザＢ）の視点の移動に追随するように移動する。したがって、ユーザＡは、ユーザＢの視線の動きを体感できる。

プロセッサ１０は、「他のコンピュータ」として、たとえば、各コンピュータが関連付けられるユーザに基づいて選択する。一例では、プロセッサ１０は、当該プロセッサ１０が搭載されたコンピュータ２００における「参照オブジェクト」（図１７等）に対応するユーザＩＤのユーザによって操作されるコンピュータを選択する。図２１の例に従えば、コンピュータ２００ＡのユーザＡは、ユーザＢを表わすオブジェクトを「参照オブジェクト」として設定した場合、ユーザＢの視線の動きに従って移動する視界画像を提供される。サーバ１５０の記憶装置は、各コンピュータを操作しているユーザのＩＤを格納していてもよい。各コンピュータのプロセッサは、サーバ１５０の記憶装置を参照することにより、どのＩＤのユーザがどのコンピュータを操作しているかを特定してもよい。

図３４は、他のコンピュータの仮想カメラの移動に従った視界領域の変更の一例を説明するための図である。図３４の例は、仮想カメラ１の位置が、オブジェクト９９９の位置の変化に追随して変化することを説明する。コンピュータ２００Ａ（図２１）のプロセッサ１０は、図３４内の仮想カメラ１の位置を制御する。オブジェクト９９９の位置は、たとえば、コンピュータ２００Ｂ（図２１）に接続されたＨＭＤ１１０によって捉えられたユーザの動きに従って変化する。

図３４において、分図Ｂにおけるオブジェクト９９９の位置は、分図Ａと比較して右方に移動している。一方、図３４において、仮想カメラ１とオブジェクト９９９との相対的な位置関係は、分図Ａと分図Ｂの双方において変化がない。つまり、プロセッサ１０は、仮想カメラ１の位置を、オブジェクト９９９の位置の変化に従って移動させる。仮想カメラ１の位置の変化により、視界領域は、分図Ａの領域２３Ｃから分図Ｂの領域２３Ｄへと変化している。

図３４の例によれば、プロセッサ１０は、ユーザに、オブジェクト９９９の位置の変化に従って移動する仮想カメラ１に対応する画像を提示する。これにより、当該ユーザには、他のユーザ（オブジェクト９９９によって表されるユーザ）の視界の変化に追随して変化する視界が提供される。例えば、仮想空間においてユーザが他のユーザに話しかけるのに先立ち、まず、当該他のユーザのプロフィールを確認したい場合がある。このとき、ユーザは、図２３の視界画像２３０３にプレート１６１４として表示する等の態様で、まず、他のユーザのプロフィールを視認する。しかし、ユーザがプレート１６１４の表示内容を確認して、当該他のユーザに話しかけようとする際に、当該他のユーザが仮想空間内で別の位置に移動していることがある。このような場合であっても、例えばユーザが仮想手のオブジェクトでプレート１６１４に対して特定の操作をする等により、当該他のユーザの視界の変化に追随して、ユーザの視界を変化させることで、ユーザが当該他のユーザを視認することが容易になる。これにより、ユーザが他のユーザのプロフィール等を確認したうえで、当該他のユーザに話しかけるための操作（例えば、話しかけるユーザに対応するアバターオブジェクトを、仮想手のオブジェクトなどで指定する等の操作）をしやすくなる。

なお、図３４の例において、オブジェクト９１５は、図Ａでは空間ＳＰに含まれているが、分図Ｂでは、空間ＳＰに含まれていない。このことから、オブジェクト９１５は、分図Ａでは破線で示されているが、分図Ｂでは実線で示されている。すなわち、オブジェクト９１５は、分図Ａの状態では透過対象であるが、分図Ｂの状態では透過対象ではない。

（構成６）
プロセッサ１０は、オブジェクトの位置情報の履歴（図１６の移動履歴情報）が予め定められた条件を満たす場合（予め定められた頻度以上で移動しているか）に、当該オブジェクトを透過対象のオブジェクトとして選択してもよい。たとえば、直近の履歴が上記条件を満たすオブジェクトは、現在提供されている仮想空間において高い頻度で移動しているオブジェクトの一例である。過去の履歴が上記条件を満たすオブジェクトは、過去に提供された別の仮想空間において高い頻度で移動していたオブジェクトの一例である。

（構成７）
プロセッサ１０は、表示態様を変更されるべきことを示す情報（制限オブジェクト：図１７、表示制限ユーザＩＤ：図１５、等）に関連付けられているオブジェクトを、透過対象または縮小対象のオブジェクトとして選択してもよい。

（構成８）
表示態様を変更されるべきことを示す情報は、コンピュータ２００に接続されたヘッドマウントデバイスに対する入力によって各オブジェクトに付与されてもよいし（制限オブジェクト：図１７）、コンピュータ２００がアクセス可能な記憶装置（サーバ１５０のストレージ５１２）に他のユーザによって登録されてもよい（表示制限ユーザＩＤ：図１５）。

今回開示された各実施の形態は全ての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は上記した説明ではなくて特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内での全ての変更が含まれることが意図される。また、実施の形態および各変形例において説明された発明は、可能な限り、単独でも、組合わせても、実施されることが意図される。

１０，５１０ プロセッサ、１９ ネットワーク、２２，２２Ａ，２２Ｂ，２２Ｆ 仮想空間画像、２３ 視界領域、１００ ＨＭＤシステム、１１０ ＨＭＤ、１１２ モニタ、１２０ ＨＭＤセンサ、１３０ モーションセンサ、１４０ 注視センサ、１５０ サーバ、１６０ コントローラ、２００，２００Ａ〜２００Ｆ コンピュータ、２２０ 表示制御モジュール、２２１ 仮想カメラ制御モジュール、２２２ 視界領域決定モジュール、２２３ 視界画像生成モジュール、２２４ 基準視線特定モジュール、２３０ 仮想空間制御モジュール、２３１ 仮想空間定義モジュール、２３２ 仮想オブジェクト生成モジュール、２３３ 手オブジェクト管理モジュール、２４０ メモリモジュール、２４１ 空間情報、２４２ オブジェクト情報、２４３ ユーザ情報、２４４ イベント情報、２５０ 通信制御モジュール、５１２Ａ ユーザ情報格納部。

Claims (10)

1. ヘッドマウントデバイスを用いて提供される仮想空間において、仮想カメラによって捉えられる視界領域の画像の表示を制御するためにコンピュータによって実行される方法であって、
   前記仮想カメラは、前記ヘッドマウントデバイスを装着したユーザの移動に連動して前記仮想空間において移動するように構成されており、
   複数のオブジェクトを含む仮想空間を定義するステップと、
   前記複数のオブジェクトのそれぞれに関連付けられた各前記オブジェクトの前記仮想空間における位置情報に基づいて、前記複数のオブジェクトから１つ以上のオブジェクトを選択するステップと、
   前記選択されたオブジェクトの透過率を他のオブジェクトの透過率よりも高く設定するステップとを含み、
   前記選択するステップは、
   前記仮想空間における前記仮想カメラから前記複数のオブジェクトの中の基準オブジェクトまでの空間を特定することと、
   特定された前記空間内の位置を指定する位置情報に関連付けられたオブジェクトから、１つ以上のオブジェクトを選択することとを含み、
   前記基準オブジェクトは、優先的に表示されるように登録されたオブジェクトであり、
   前記選択するステップは、さらに、前記位置情報によって指定される位置の履歴が予め定められた条件を満たすオブジェクトを選択することを含み、
   前記選択するステップにおいてさらに選択されるオブジェクトは、予め定められた頻度以上の頻度で移動する１つ以上のオブジェクトを含む、方法。
2. ヘッドマウントデバイスを用いて提供される仮想空間において、仮想カメラによって捉えられる視界領域の画像の表示を制御するためにコンピュータによって実行される方法であって、
   前記仮想カメラは、前記ヘッドマウントデバイスを装着したユーザの移動に連動して前記仮想空間において移動するように構成されており、
   複数のオブジェクトを含む仮想空間を定義するステップと、
   前記複数のオブジェクトのそれぞれに関連付けられた各前記オブジェクトの前記仮想空間における位置情報に基づいて、前記複数のオブジェクトから１つ以上のオブジェクトを選択するステップとを含み、
   前記選択するステップは、
   前記仮想空間における前記仮想カメラから前記複数のオブジェクトの中の基準オブジェクトまでの空間を特定することと、
   特定された前記空間内の位置を指定する位置情報に関連付けられたオブジェクトから、１つ以上のオブジェクトを選択することとを含み、
   前記基準オブジェクトは、優先的に表示されるように登録されたオブジェクトであり、
   前記選択されたオブジェクトを、当該選択をされたときの位置とは異なる場所に配置するステップをさらに含み、
   前記選択するステップは、特定された前記空間内の位置を指定する位置情報に関連付けられたオブジェクトから選択する前記１つ以上のオブジェクトとして、
   予め前記ユーザにより保護オブジェクトとして登録されたオブジェクトを除くオブジェクトから１つ以上のオブジェクトを選択すること、
   前記仮想空間に参加している他のユーザによって表示制限するオブジェクトとして指定されているオブジェクトと同じ１つ以上のオブジェクトを選択すること、または、
   前記位置情報によって指定される位置の履歴に基づく、予め定められた頻度以上の頻度で移動する１つ以上のオブジェクトを選択することを含む、方法。
3. 前記選択されたオブジェクトの透過率を他のオブジェクトの透過率よりも高く設定するステップをさらに備える、請求項２に記載の方法。
4. ヘッドマウントデバイスを用いて提供される仮想空間において、仮想カメラによって捉えられる視界領域の画像の表示を制御するためにコンピュータによって実行される方法であって、
   前記仮想カメラは、前記ヘッドマウントデバイスを装着したユーザの移動に連動して前記仮想空間において移動するように構成されており、
   複数のオブジェクトを含む仮想空間を定義するステップと、
   前記複数のオブジェクトのそれぞれに関連付けられた各前記オブジェクトの前記仮想空間における位置情報に基づいて、前記複数のオブジェクトから１つ以上のオブジェクトを選択するステップと、
   前記選択されたオブジェクトを縮小するステップとを含み、
   前記選択するステップは、
   前記仮想空間における前記仮想カメラから前記複数のオブジェクトの中の基準オブジェクトまでの空間を特定することと、
   特定された前記空間内の位置を指定する位置情報に関連付けられたオブジェクトから、１つ以上のオブジェクトを選択することとを含み、
   前記基準オブジェクトは、優先的に表示されるように登録されたオブジェクトであり、
   前記選択するステップは、特定された前記空間内の位置を指定する位置情報に関連付けられたオブジェクトから選択する前記１つ以上のオブジェクトとして、
   予め前記ユーザにより保護オブジェクトとして登録されたオブジェクトを除くオブジェクトから１つ以上のオブジェクトを選択すること、
   前記仮想空間に参加している他のユーザによって表示制限するオブジェクトとして指定されているオブジェクトと同じ１つ以上のオブジェクトを選択すること、または、
   前記位置情報によって指定される位置の履歴に基づく、予め定められた頻度以上の頻度で移動する１つ以上のオブジェクトを選択することを含む、方法。
5. 他のコンピュータのユーザの視線の移動に応じて、前記ヘッドマウントデバイスによって提供される仮想空間の視界画像を移動させるステップをさらに備える、請求項１〜請求項４のいずれか１項に記載の方法。
6. 前記複数のオブジェクトの中の少なくとも１つを移動するための操作を受け付けるためのステップをさらに備える、請求項１〜請求項５のいずれか１項に記載の方法。
7. 前記選択するステップは、さらに、表示態様を変更されるべきことを示す情報に関連付けられているオブジェクトを選択することを含む、請求項１〜請求項６のいずれか１項に記載の方法。
8. 前記表示態様を変更されるべきことを示す情報は、前記ヘッドマウントデバイスに対する入力、および、前記コンピュータがアクセス可能な記憶装置への他のユーザによる登録、のうち少なくとも一方によって、オブジェクトに関連付けられる、請求項７に記載の方法。
9. 請求項１〜請求項８のいずれか１項に記載の方法をコンピュータに実行させる、プログラム。
10. 請求項９に記載のプログラムを格納したメモリと、
    前記プログラムを実行するためのプロセッサとを備える、仮想空間における画像の表示を制御するためのコンピュータ装置。