JP2024068986A - 表示制御装置 - Google Patents

Abstract

【課題】複数のレイヤの仮想オブジェクトを重畳して表示する場合に、仮想オブジェクトの重なりを回避する。【解決手段】サーバ装置２０は、ＡＲを実現するためのデータをネットワーク２経由でヘッドマウントディスプレイ１０に配信する。このデータは、ヘッドマウントディスプレイ１０において仮想オブジェクトを表示するためのポリゴンデータを含んでいる。ヘッドマウントディスプレイ１０は、サーバ装置２０から配信されるデータを用いて仮想オブジェクトを表示する。ヘッドマウントディスプレイ１０は、各々のレイヤについて取得されたデータに応じた仮想オブジェクトをレイヤ単位で重畳して表示する場合に、２以上の前記仮想オブジェクトの表示位置が重なるときは、その２以上の仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する。【選択図】図１

Description

本発明は、仮想オブジェクトを表示するための技術に関する。

ＸＲ（クロスリアリティ）とは、現実世界と仮想世界を融合することで現実にはないものを知覚できるようにする技術の総称であり、ＶＲ（仮想現実）、ＡＲ（拡張現実）、ＭＲ（複合現実）といった技術を含む。ＸＲの実現において、例えばヘッドマウントディスプレイ（ＨＭＤ）等の表示端末は、様々な仮想オブジェクトを表示するために、仮想的な３次元空間における３次元座標を有するポリゴンデータを取得して描画する。

例えば特許文献１には、プレーヤなどの被写体を撮影し、撮像画像から切り出された被写体画像をゲームのキャラクタの画像と合成して表示するときに、キャラクタと被写体画像とが重なっていると判定された場合は、重ならないように被写体画像またはキャラクタを移動させて再配置処理を行うことが開示されている。ＸＲにおいても、仮想オブジェクトの作成者が異なっており、それらの位置が統括的に管理されていない場合等においては、２つ以上の仮想オブジェクトが重なって表示される場合があり得る。

特許６３６２６３４号公報

本発明は、複数のレイヤの仮想オブジェクトを重畳して表示する場合に、仮想オブジェクトの重なりを回避することを目的とする。

上記課題を解決するため、本発明は、各レイヤに属する１以上の仮想オブジェクトを表示するためのデータを、複数のレイヤについて取得する取得部と、各々の前記レイヤについて取得された前記データに応じた仮想オブジェクトを前記レイヤ単位で重畳して表示面に表示する表示制御部であって、２以上の前記仮想オブジェクトの表示位置が重なる場合には、当該２以上の仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する表示制御部とを備えることを特徴とする表示制御装置を提供する。

本発明によれば、複数のレイヤの仮想オブジェクトを重畳して表示する場合に、仮想オブジェクトの重なりを回避することが可能となる。

本発明の一実施形態に係る仮想オブジェクト表示システム１の構成を例示する図である。 同実施形態に係るヘッドマウントディスプレイ１０のハードウェア構成の一例を示すブロック図である。 同実施形態に係るサーバ装置２０のハードウェア構成の一例を示すブロック図である。 ヘッドマウントディスプレイ１０の機能構成の一例を示すブロック図である。 ヘッドマウントディスプレイ１０のソフトウェア構成の一例を示す図である。 同実施形態に係るレイヤデータの構成を例示する図である。 同実施形態における重なり回避対象となる仮想オブジェクトの属性を例示する図である。 ヘッドマウントディスプレイ１０の動作の一例を示すフローチャートである。 同実施形態において現実の３次元空間を例示する図である。 同実施形態において或るレイヤに属する仮想オブジェクトを例示する図である。 同実施形態において別のレイヤに属する仮想オブジェクトを例示する図である。 同実施形態においてさらに別のレイヤに属する仮想オブジェクトを例示する図である。 同実施形態において現実の３次元空間に仮想オブジェクトが重畳されて表示されている様子を例示する図である。 仮想オブジェクトの表示位置の変更を例示する図である。

［構成］
図１は、本発明の一実施形態に係る仮想オブジェクト表示システム１の一例を示す図である。仮想オブジェクト表示システム１は、複数のユーザがそれぞれ利用する複数のヘッドマウントディスプレイ１０と、これらヘッドマウントディスプレイ１０に対して、ＸＲを実現するためのデータを提供するサーバ装置２０とを備えている。ヘッドマウントディスプレイ１０とサーバ装置２０はネットワーク２により通信可能に接続される。ネットワーク２は、例えばＬＡＮ（Local Area Network）又はＷＡＮ（Wide Area Network）、若しくはこれらの組み合わせであり、有線区間又は無線区間を含んでいる。

ヘッドマウントディスプレイ１０は、本発明に係る表示制御装置として機能する。本実施形態ではＸＲの一例として、ＡＲ（拡張現実）を実現する場合を説明するが、これに限らず、ＶＲやＭＲ等のＸＲ全般において実現可能である。サーバ装置２０は、ＡＲを実現するためのデータをネットワーク２経由でヘッドマウントディスプレイ１０に配信する。このデータは、ヘッドマウントディスプレイ１０において仮想オブジェクトを表示するためのポリゴンデータを含んでいる。ヘッドマウントディスプレイ１０は、サーバ装置２０から配信されるデータを用いて、現実の３次元空間に対して仮想オブジェクトを重畳させて表示する。

本実施形態では、ユーザの頭部に装着されるタイプのユーザ端末としてヘッドマウントディスプレイ１０を例示している。ただし、ユーザ端末は、本実施形態の例に限らず、例えば眼鏡型やコンタクトレンズ型などのウェアラブルコンピュータであってもよいし、スマートホンやタブレットなどのコンピュータであってもよい。

図２は、ヘッドマウントディスプレイ１０のハードウェア構成を例示する図である。ヘッドマウントディスプレイ１０は、物理的には、プロセッサ１００１、メモリ１００２、ストレージ１００３、通信装置１００４、入力装置１００５、出力装置１００６、表示装置１００７、撮像装置１００８及びこれらを接続するバスなどを含むコンピュータとして構成されている。なお、以下の説明では、「装置」という文言は、回路、デバイス、ユニットなどに読み替えることができる。ヘッドマウントディスプレイ１０のハードウェア構成は、図に示した各装置を１つ又は複数含むように構成されてもよいし、一部の装置を含まずに構成されてもよい。

ヘッドマウントディスプレイ１０における各機能は、プロセッサ１００１、メモリ１００２などのハードウェア上に所定のソフトウェア（プログラム）を読み込ませることによって、プロセッサ１００１が演算を行い、通信装置１００４による通信、表示装置１００７による表示及び撮像装置１００８による撮像を制御したり、メモリ１００２及びストレージ１００３におけるデータの読み出し及び書き込みの少なくとも一方を制御したりすることによって実現される。

プロセッサ１００１は、例えば、オペレーティングシステムを動作させてコンピュータ全体を制御する。プロセッサ１００１は、周辺装置とのインターフェース、制御装置、演算装置、レジスタなどを含む中央処理装置（ＣＰＵ：Central Processing Unit）によって構成されてもよい。また、例えばベースバンド信号処理部や呼処理部などがプロセッサ１００１によって実現されてもよい。

プロセッサ１００１は、プログラム（プログラムコード）、ソフトウェアモジュール、データなどを、ストレージ１００３及び通信装置１００４の少なくとも一方からメモリ１００２に読み出し、これらに従って各種の処理を実行する。プログラムとしては、後述する動作の少なくとも一部をコンピュータに実行させるプログラムが用いられる。ヘッドマウントディスプレイ１０の機能ブロックは、メモリ１００２に格納され、プロセッサ１００１において動作する制御プログラムによって実現されてもよい。各種の処理は、１つのプロセッサ１００１によって実行されてもよいが、２以上のプロセッサ１００１により同時又は逐次に実行されてもよい。プロセッサ１００１は、１以上のチップによって実装されてもよい。なお、プログラムは、ネットワーク２経由でヘッドマウントディスプレイ１０に送信されてもよい。

メモリ１００２は、コンピュータ読み取り可能な記録媒体であり、例えば、ＲＯＭ（Read Only Memory）、ＥＰＲＯＭ（Erasable Programmable ＲＯＭ）、ＥＥＰＲＯＭ（Electrically Erasable Programmable ＲＯＭ）、ＲＡＭ（Random Access Memory）などの少なくとも１つによって構成されてもよい。メモリ１００２は、レジスタ、キャッシュ、メインメモリ（主記憶装置）などと呼ばれてもよい。メモリ１００２は、本実施形態に係る方法を実施するために実行可能なプログラム（プログラムコード）、ソフトウェアモジュールなどを保存することができる。

ストレージ１００３は、コンピュータ読み取り可能な記録媒体であり、例えば、ＣＤ－ＲＯＭ（Compact Disc ＲＯＭ）などの光ディスク、ハードディスクドライブ、フレキシブルディスク、光磁気ディスク(例えば、コンパクトディスク、デジタル多用途ディスク、Ｂｌｕ－ｒａｙ（登録商標）ディスク)、スマートカード、フラッシュメモリ(例えば、カード、スティック、キードライブ)、フロッピー（登録商標）ディスク、磁気ストリップなどの少なくとも１つによって構成されてもよい。ストレージ１００３は、補助記憶装置と呼ばれてもよい。

通信装置１００４は、ネットワーク２を介してコンピュータ間の通信を行うためのハードウェア（送受信デバイス）であり、例えばネットワークデバイス、ネットワークコントローラ、ネットワークカード、通信モジュールなどともいう。通信装置１００４は、例えば周波数分割複信（ＦＤＤ：Frequency Division Duplex）及び時分割複信（ＴＤＤ：Time Division Duplex）の少なくとも一方を実現するために、高周波スイッチ、デュプレクサ、フィルタ、周波数シンセサイザなどを含んで構成されてもよい。例えば、送受信アンテナ、アンプ部、送受信部、伝送路インターフェースなどは、通信装置１００４によって実現されてもよい。送受信部は、送信部と受信部とで、物理的に、または論理的に分離された実装がなされてもよい。なお、ヘッドマウントディスプレイ１０が直接ネットワーク２に接続して通信を行うのではなく、例えばスマートホン等の通信機能を有するデバイスを介してネットワーク２に接続して通信を行うものであってもよい。

入力装置１００５は、外部からの入力を受け付ける入力デバイス（例えば、キー、マイクロホン、スイッチ、ボタン、各種センサなど）である。出力装置１００６は、外部への出力を実施する出力デバイス（例えばスピーカ、LEDランプなど）である。表示装置１００７は、例えば液晶素子や液晶駆動回路等を含む表示デバイスである。撮像装置１００８は、撮像素子を含む撮像デバイスである。

プロセッサ１００１、メモリ１００２などの各装置は、情報を通信するためのバスによって接続される。バスは、単一のバスを用いて構成されてもよいし、装置間ごとに異なるバスを用いて構成されてもよい。

また、ヘッドマウントディスプレイ１０は、マイクロプロセッサ、デジタル信号プロセッサ（ＤＳＰ：Digital Signal Processor）、ＡＳＩＣ（Application Specific Integrated Circuit）、ＰＬＤ（Programmable Logic Device）、ＦＰＧＡ（Field Programmable Gate Array）などのハードウェアを含んで構成されてもよく、当該ハードウェアにより、各機能ブロックの一部又は全てが実現されてもよい。例えば、プロセッサ１００１は、これらのハードウェアの少なくとも１つを用いて実装されてもよい。

図３は、サーバ装置２０のハードウェア構成を示す図である。サーバ装置２０は、物理的には、プロセッサ２００１、メモリ２００２、ストレージ２００３、通信装置２００４、及びこれらを接続するバスなどを含むコンピュータとして構成されている。これらの各装置は図示せぬ電源から供給される電力によって動作する。サーバ装置２０のハードウェア構成は、図３に示した各装置を１つ又は複数含むように構成されてもよいし、一部の装置を含まずに構成されてもよい。また、それぞれ筐体が異なる複数の装置が通信接続されて、サーバ装置２０を構成してもよい。

サーバ装置２０における各機能は、プロセッサ２００１、メモリ２００２などのハードウェア上に所定のソフトウェア（プログラム）を読み込ませることによって、プロセッサ２００１が演算を行い、通信装置２００４による通信を制御したり、メモリ２００２及びストレージ２００３におけるデータの読み出し及び書き込みの少なくとも一方を制御したりすることによって実現される。プロセッサ２００１、メモリ２００２、ストレージ２００３、通信装置２００４、及びこれらを接続するバスは、ヘッドマウントディスプレイ１０について説明したプロセッサ１００１、メモリ１００２、ストレージ１００３、通信装置１００４、及びこれらを接続するバスと、ハードウェアとしては同様であるため、その説明を省略する。

図４は、ヘッドマウントディスプレイ１０の機能構成の一例を示すブロック図である。図４に示すように、ヘッドマウントディスプレイ１０においては、取得部１１と、記憶部１２と、重なり判定部１３と、表示制御部１４といった機能が実現される。

取得部１１は、各種のデータを取得する。例えば取得部１１は、サーバ装置２０から、各レイヤに属する１以上の仮想オブジェクトを表示するためのデータを、複数のレイヤについて取得する。記憶部１２は、取得部１１により取得されたデータを記憶する。表示制御部１４は、各々のレイヤについて取得されたデータに応じた仮想オブジェクトを表示装置１００７の表示面に表示する。

ここで、図５は、ヘッドマウントディスプレイ１０のソフトウェア構成の一例を示すブロック図である。図５において、レイヤデータＬ１，Ｌ２，Ｌ３…（以下、レイヤデータＬという）は、各レイヤに対応するデータである。各レイヤデータＬは、図６に例示するように、レイヤ単位で独立して仮想オブジェクトを表現するポリゴンを描画するためのスクリプトとしての、ポリゴンデータＰＤ１，ＰＤ２…を含んでいる。このポリゴンデータＰＤ１，ＰＤ２…は、線で構成した多角形の集合によって各仮想オブジェクトの形状を規定するデータである。各々の仮想オブジェクトに対応するポリゴンデータには、３次元空間におけるその仮想オブジェクトの位置を示す３次元座標が記述されている。

各々のレイヤデータＬは、それぞれ異なる主体によって作成されたものである。一例を挙げると、レイヤデータＬ１は、ユーザに対してゲームを提供するために第１の事業者により作成されたプログラムであり、レイヤデータＬ２は、ユーザに対して各種ニュースを提供するために第２の事業者により作成されたプログラムであり、レイヤデータＬ３は、ユーザに対してルート案内を提供するために第３の事業者により作成されたプログラムである。ユーザは、これらの主体から購入や譲渡等により、自らが望むレイヤデータを入手することができる。なお、レイヤデータは複数であればよく、その数は図５に例示した３つに限定されない。また、１つのレイヤデータに含まれるオブジェクトデータは１以上であればよく、その数は図６に例示した２つに限定されない。

上記のように、仮想オブジェクトの作成者が異なっているから、各仮想オブジェクトの位置が重なってしまう場合がある。レイヤデーモンＬＤは、各々のレイヤデータを統合的に管理するプログラムによって実現されるバックグラウンドプロセスである。レイヤデーモンＬＤは、前述したレイヤデータの作成者とは異なる主体によって管理されている。レイヤデーモンＬＤは、ソフトウェア階層において各レイヤデータＬよりも上位に位置している。各レイヤデータＬに基づく表示は、レイヤデーモンＬＤの機能により制約される。図４で説明した重なり判定部１３及び表示制御部１４は、主にこのレイヤデーモンＬＤによって実現される。

図４において、重なり判定部１３は、各々のレイヤについて取得されたデータに応じた仮想オブジェクトがレイヤ単位で重畳して表示される場合に、２以上の仮想オブジェクトの表示位置の少なくとも一部が重なるか否かを判定する。具体的には、各々の仮想オブジェクトに対応するポリゴンデータには、３次元空間におけるその仮想オブジェクトの位置を示す３次元座標が記述されているから、重なり判定部１３は、各仮想オブジェクトに対応する３次元座標を比較して重なるがあるか否かを判定する。

表示制御部１４は、２以上の仮想オブジェクトの表示位置が重なると重なり判定部１３により判定された場合には、その２以上の仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する。つまり、表示制御部１４は、２以上の仮想オブジェクトの表示位置が重ならないように表示する。

本実施形態では、仮想オブジェクトの属性ごとに、他の仮想オブジェクトと重なった状態で表示しないことが指定されている。仮想オブジェクトの属性とは、その仮想オブジェクトのよってユーザに提供されるサービスの属性であり、例えば「広告」とか「情報提供」とか「危険通知」とか「（仮想オブジェクトに）動きがある」等である。この属性はオブジェクトデータにおいてメタデータとして記述されている。なお、「（仮想オブジェクトに）動きがある」とは、例えば仮想オブジェクトの表示位置が時間の経過に伴い変化していく仮想オブジェクトや、形状、模様又は色が時間の経過に伴い変化していく仮想オブジェクトである。

図７に示すように、他の仮想オブジェクトと重なった状態で表示しないように指定されている仮想オブジェクトの属性のリストが記憶部１２に記憶されている。この例では、「広告」、「危険通知」、「（仮想オブジェクト）動きがある」という属性の仮想オブジェクトは他の仮想オブジェクトと重なった状態で表示しないように指定されている。

このように、表示制御部１４は、表示位置が重なる２以上の仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトについて、他の仮想オブジェクトと重なった状態で表示しないことが指定されている場合には、その少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する。具体的には、表示制御部１４は、表示位置が重なる２以上の仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトが広告又は危険通知に関する仮想オブジェクトである場合に、その少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する。また、表示制御部１４は、表示位置が重なる２以上の仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトが動くように表示される仮想オブジェクトである場合に、その少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する。

［動作］
図８～１２を参照して、本実施形態の動作説明を行う。図８において、ＡＲ表示が開始されると、取得部１１は、各レイヤに属する仮想オブジェクトを表示するためのデータをサーバ装置２０から取得する（ステップＳ１１）。記憶部１２は、取得部１１により取得されたデータを記憶する。

重なり判定部１３は、各々の仮想オブジェクトに対応するポリゴンデータに記述されている仮想オブジェクトの３次元座標を参照して、２以上の仮想オブジェクトの表示位置の少なくとも一部が重なるか否かを判定する（ステップＳ１２）。

表示制御部１４は、２以上の仮想オブジェクトの表示位置が重なると重なり判定部１３により判定された場合には（ステップＳ１３；ＹＥＳ）、その２以上の仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトの表示位置を変更する（ステップＳ１４）。つまり、２以上の仮想オブジェクトの表示位置が重ならないように、少なくともいずれか一方の仮想オブジェクトの表示位置が変更される。ここで、表示位置が重なる２以上の仮想オブジェクトのうち、表示位置を変更する仮想オブジェクトはどの仮想オブジェクトであってもよいが、例えば、他の仮想オブジェクトと重なった状態で表示しないように指定されている仮想オブジェクトの表示位置は変更せずに、これ以外の仮想オブジェクトの表示位置を変更するという例が考えられる。

そして、表示制御部１４は、各仮想オブジェクトを表示装置１００７に表示する（ステップＳ１５）。このとき、仮想オブジェクトの表示位置が変更されている場合は（ステップＳ１３；ＹＥＳ）、その変更後の表示位置で仮想オブジェクトが表示されるし、仮想オブジェクトの表示位置が変更されていない場合は（ステップＳ１３；ＮＯ）、ポリゴンデータに記述されている表示位置で仮想オブジェクトが表示される。なお、ＡＲ表示においては、ヘッドマウントディスプレイ１０が撮像した現実の３次元空間の画像に対して仮想オブジェクトを重畳して表示するという方法もあるし、また、ユーザが透明の表示装置１００７を介して現実の３次元空間を観察するような場合にはその透明の表示装置１００７に仮想オブジェクトを表示することで、仮想オブジェクトを現実の３次元空間に重畳するという方法もある。本発明をＡＲに適用する場合には、どちらの方法を用いてもよい。

以上の処理が、各レイヤに属する仮想オブジェクトを表示する処理の開始又は終了のタイミングで繰り返し実行される。

ここで、図９は、現実の３次元空間を例示する図である。ＡＲ表示が、ヘッドマウントディスプレイ１０が撮像した現実の３次元空間の画像に対して仮想オブジェクトを重畳して表示する方法で実現される場合には、図９に例示するような画像がヘッドマウントディスプレイ１０の表示装置１００７に表示されることになる。

図１０は、或るレイヤに属する仮想オブジェクトを例示する図であり、図１１は、別のレイヤに属する仮想オブジェクトを例示する図であり、図１２は、さらに別のレイヤに属する仮想オブジェクトを例示する図である。ここで、図１０において、仮想オブジェクトＰ１は、「動きがある」という属性の仮想オブジェクトであるとする。また、図１１において、仮想オブジェクトＰ２は「広告」という属性の仮想オブジェクトであるとする。さらに、図１２において、仮想オブジェクトＰ３は「情報提供」という属性の仮想オブジェクトであるとする。

図１３は現実の３次元空間と各仮想オブジェクトとが重畳された様子を例示する図である。このとき、「動きがある」という属性の仮想オブジェクトＰ１は他の仮想オブジェクトと重ならないので、ポリゴンデータに記述された３次元座座標に従って表示される。一方、「広告」という属性の仮想オブジェクトＰ２は、他の仮想オブジェクトＰ３と重なっており、且つ、仮想オブジェクトＰ３は「情報提供」という、重なり回避の属性ではない属性の仮想オブジェクトである。よって、この場合は、仮想オブジェクトＰ２はポリゴンデータに記述された３次元座座標に従って表示される一方、仮想オブジェクトＰ３は図１４に示すように仮想オブジェクトＰ２と重ならないような表示位置に変更されて表示されることになる。

以上説明した実施形態によれば、複数のレイヤの仮想オブジェクトを重畳して表示する場合に、仮想オブジェクトの重なりを回避することが可能となる。

［変形例］
本発明は、上述した実施形態に限定されない。上述した実施形態を以下のように変形してもよい。また、以下の２つ以上の変形例を組み合わせて実施してもよい。
［変形例１］
重なり回避の対象となる仮想オブジェクトは上記実施形態の例示に限定されない。例えば重なり回避の対象となる仮想オブジェクトは、例えば表示装置１００７の表示面中心部等の所定表示エリア内の仮想オブジェクトであってもよい。この場合、記憶部１２には、重なり回避の対象となる仮想オブジェクトが表示される表示エリアが記憶されている。そして、表示制御部１４は、表示位置が重なる２以上の仮想オブジェクトが表示面における所定の表示エリアに表示される仮想オブジェクトである場合に、その２以上の仮想オブジェクトうち少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する。これにより、ユーザによって注目されやすい表示エリアにおいて仮想オブジェクトの重なりを回避することができる。

［変形例２］
重なり回避の対象となる仮想オブジェクトは、ユーザに注視されている仮想オブジェクトであってもよい。この場合、ヘッドマウントディスプレイ１０は、ユーザの眼球を含む範囲を撮像するイメージセンサ等のセンシング結果等に基づいて、表示装置１００７の表示面を閲覧するユーザがその表示面において注視している位置を特定する注視位置特定部を備える。そして、表示制御部１４は、表示位置が重なる２以上の仮想オブジェクトが表示面においてユーザが注視している位置に表示される仮想オブジェクトである場合に、その２以上の仮想オブジェクトうち少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する。これにより、ユーザによって注視されている表示エリアにおいて仮想オブジェクトの重なりを回避することができる。

［変形例３］
人物や動物等のキャラクタに相当する仮想オブジェクトが表示される際に、その仮想オブジェクトに付随して表示される仮想オブジェクトがある。例えば人物や動物等のキャラクタに相当する仮想オブジェクトの発話内容を意味する文字を線で囲んだ、いわゆる吹き出しと呼ばれるものである。このように或る仮想オブジェクトに付随する仮想オブジェクトが存在する場合、前者の仮想オブジェクトが重なり回避の対象に該当するのであれば、後者の仮想オブジェクトも重なり回避の対象としてもよい。この場合、表示制御部１４は、表示位置が重なる２以上の仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトとは異なる仮想オブジェクトであって、且つ、その１の仮想オブジェクトに付随して表示される仮想オブジェクトについては、その１の仮想オブジェクトとの位置関係を維持したまま表示位置を変更して表示する。これにより、互いに関連する仮想オブジェクト群について、他の仮想オブジェクトとの重なりを回避することができる。

［変形例４］
重なり回避の対象となる仮想オブジェクトがユーザの位置に応じて変化するようにしてもよい。例えばユーザの居る位置が鉄道の駅から所定範囲内であれば、鉄道の乗り換えに関する情報提供という属性の仮想オブジェクトを重なり回避の対象とするという例が考えられる。この場合、記憶部１２には、ユーザ（つまりヘッドマウントディスプレイ１０）の位置と、その位置において重なり回避の対象となる仮想オブジェクトの属性との関係（つまり位置に関連した条件）が記憶されている。また、ヘッドマウントディスプレイ１０は、周知の測位機能を備えている。そして、表示制御部１４は、表示位置が重なる２以上の仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトが、位置に関連した条件を満たす場合に、その少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する。これにより、ユーザの位置によって注目されやすい仮想オブジェクトの重なりを回避することができる。

［変形例５］
重なり回避の対象となる仮想オブジェクトが日又は時に応じて変化するようにしてもよい。例えばお昼休みに相当する時間帯であれば、ランチに関する情報提供という属性の仮想オブジェクトを重なり回避の対象とするという例が考えられる。この場合、記憶部１２には、日又は時の範囲と、その位置において重なり回避の対象となる仮想オブジェクトの属性との関係（つまり日又は時に関連した条件）が記憶されている。表示制御部１４は、表示位置が重なる２以上の仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトが、日又は時に関連した条件を満たす場合に、その少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する。これにより、日又は時に応じてユーザにより注目されやすい仮想オブジェクトの重なりを回避することができる。

［変形例６］
本発明をプログラムとしても提供してもよい。つまり、本発明は、各レイヤに属する１以上の仮想オブジェクトを表示するためのデータを、複数のレイヤについて取得する取得部と、各々の前記レイヤについて取得された前記データに応じた仮想オブジェクトを前記レイヤ単位で重畳して表示面に表示する表示制御部であって、２以上の前記仮想オブジェクトの表示位置が重なる場合には、当該２以上の仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する表示制御部として機能させるためのプログラムであってもよい。また、本発明を表示制御方法としても提供してもよい。

［そのほかの変形例］
上記実施の形態の説明に用いたブロック図は、機能単位のブロックを示している。これらの機能ブロック（構成部）は、ハードウェア及び／又はソフトウェアの任意の組み合わせによって実現される。また、各機能ブロックの実現手段は特に限定されない。すなわち、各機能ブロックは、物理的及び／又は論理的に結合した１つの装置により実現されてもよいし、物理的及び／又は論理的に分離した２つ以上の装置を直接的及び／又は間接的に（例えば、有線及び／又は無線）で接続し、これら複数の装置により実現されてもよい。例えば、ヘッドマウントディスプレイ１０の機能の少なくとも一部が、サーバ装置２０等の外部のコンピュータに実装されてもよい。

本明細書で説明した各態様／実施形態は、ＬＴＥ（Long Term Evolution）、ＬＴＥ－Ａ（LTE-Advanced）、ＳＵＰＥＲ ３Ｇ、ＩＭＴ－Ａｄｖａｎｃｅｄ、４Ｇ、５Ｇ、ＦＲＡ（Future Radio Access）、Ｗ－ＣＤＭＡ（登録商標）、ＧＳＭ（登録商標）、ＣＤＭＡ２０００、ＵＭＢ（Ultra Mobile Broadband）、ＩＥＥＥ ８０２．１１（Ｗｉ－Ｆｉ）、ＩＥＥＥ ８０２．１６（ＷｉＭＡＸ）、ＩＥＥＥ ８０２．２０、ＵＷＢ（Ultra-WideBand）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、その他の適切なシステムを利用するシステム及び／又はこれらに基づいて拡張された次世代システムに適用されてもよい。

本明細書で説明した各態様／実施形態の処理手順、シーケンス、フローチャートなどは、矛盾の無い限り、順序を入れ替えてもよい。例えば、本明細書で説明した方法については、例示的な順序で様々なステップの要素を提示しており、提示した特定の順序に限定されない。
本明細書で説明した各態様／実施形態は単独で用いてもよいし、組み合わせて用いてもよいし、実行に伴って切り替えて用いてもよい。また、所定の情報の通知（例えば、「Ｘであること」の通知）は、明示的に行うものに限られず、暗黙的（例えば、その所定の情報の通知を行わない）ことによって行われてもよい。

本明細書で使用する「システム」及び「ネットワーク」という用語は、互換的に使用される。

本明細書で説明した情報又はパラメータなどは、絶対値で表されてもよいし、所定の値からの相対値で表されてもよいし、対応する別の情報で表されてもよい。例えば、無線リソースはインデックスで指示されるものであってもよい。

上述したパラメータに使用する名称はいかなる点においても限定的なものではない。さらに、これらのパラメータを使用する数式等は、本明細書で明示的に開示したものと異なる場合もある。様々なチャネル（例えば、ＰＵＣＣＨ、ＰＤＣＣＨなど）及び情報要素（例えば、ＴＰＣなど）は、あらゆる好適な名称によって識別できるので、これらの様々なチャネル及び情報要素に割り当てている様々な名称は、いかなる点においても限定的なものではない。

本明細書で使用する「判定（determining）」、「決定（determining）」という用語は、多種多様な動作を包含する場合がある。「判定」、「決定」は、例えば、判定（judging）、計算（calculating）、算出（computing）、処理（processing）、導出（deriving）、調査（investigating）、探索（looking up）（例えば、テーブル、データベース又は別のデータ構造での探索）、確認（ascertaining） した事を「判定」「決定」したとみなす事などを含み得る。また、「判定」、「決定」は、受信（receiving） （例えば、情報を受信すること）、送信（transmitting）（例えば、情報を送信すること）、入力（input）、出力（output）、アクセス（accessing）（例えば、メモリ中のデータにアクセスすること）した事を「判定」「決定」したとみなす事などを含み得る。また、「判定」、「決定」は、解決（resolving）、選択（selecting）、選定（choosing）、確立（establishing）、比較（comparing）などした事を「判定」「決定」したとみなす事を含み得る。つまり、「判定」「決定」は、何らかの動作を「判定」「決定」したとみなす事を含み得る。

本発明は、ヘッドマウントディスプレイ１０において行われる処理のステップを備える情報処理方法として提供されてもよい。また、本発明は、ヘッドマウントディスプレイ１０において実行されるプログラムとして提供されてもよい。かかるプログラムは、光ディスク等の記録媒体に記録した形態で提供されたり、インターネット等のネットワークを介して、コンピュータにダウンロードさせ、これをインストールして利用可能にするなどの形態で提供されたりすることが可能である。

ソフトウェア、命令などは、伝送媒体を介して送受信されてもよい。例えば、ソフトウェアが、同軸ケーブル、光ファイバケーブル、ツイストペア及びデジタル加入者回線（ＤＳＬ）などの有線技術及び／又は赤外線、無線及びマイクロ波などの無線技術を使用してウェブサイト、サーバ、又は他のリモートソースから送信される場合、これらの有線技術及び／又は無線技術は、伝送媒体の定義内に含まれる。

本明細書で説明した情報、信号などは、様々な異なる技術のいずれかを使用して表されてもよい。例えば、上記の説明全体に渡って言及され得るデータ、命令、コマンド、情報、信号、ビット、シンボル、チップなどは、電圧、電流、電磁波、磁界若しくは磁性粒子、光場若しくは光子、又はこれらの任意の組み合わせによって表されてもよい。

本明細書で説明した用語及び／又は本明細書の理解に必要な用語については、同一の又は類似する意味を有する用語と置き換えてもよい。例えば、チャネル及び／又はシンボルは信号（シグナル）であってもよい。また、信号はメッセージであってもよい。また、コンポーネントキャリア（ＣＣ）は、キャリア周波数、セルなどと呼ばれてもよい。

本明細書で使用する「第１」、「第２」などの呼称を使用した要素へのいかなる参照も、それらの要素の量又は順序を全般的に限定するものではない。これらの呼称は、２つ以上の要素間を区別する便利な方法として本明細書で使用され得る。したがって、第１及び第２要素への参照は、２つの要素のみがそこで採用され得ること、又は何らかの形で第１要素が第２要素に先行しなければならないことを意味しない。

上記の各装置の構成における「手段」を、「部」、「回路」、「デバイス」等に置き換えてもよい。

「含む（ｉｎｃｌｕｄｉｎｇ）」、「含んでいる（ｃｏｍｐｒｉｓｉｎｇ）」、及びそれらの変形が、本明細書或いは特許請求の範囲で使用されている限り、これら用語は、用語「備える」と同様に、包括的であることが意図される。さらに、本明細書或いは特許請求の範囲において使用されている用語「又は（or）」は、排他的論理和ではないことが意図される。

本開示の全体において、例えば、英語でのa、an、及びtheのように、翻訳により冠詞が追加された場合、これらの冠詞は、文脈から明らかにそうではないことが示されていなければ、複数のものを含むものとする。

以上、本発明について詳細に説明したが、当業者にとっては、本発明が本明細書中に説明した実施形態に限定されるものではないということは明らかである。本発明は、特許請求の範囲の記載により定まる本発明の趣旨及び範囲を逸脱することなく修正及び変更態様として実施することができる。したがって、本明細書の記載は、例示説明を目的とするものであり、本発明に対して何ら制限的な意味を有するものではない。

１…仮想オブジェクト表示システム、２…ネットワーク、１０…ヘッドマウントディスプレイ、１１…取得部、１２…記憶部、１３…重なり判定部、１４…表示制御部、１００１…プロセッサ、１００２…メモリ、１００３…ストレージ、１００４…通信装置、１００５…入力装置、１００６…出力装置、１００７…表示装置、１００８…撮像装置、２０…サーバ装置、２００１…プロセッサ、２００２…メモリ、２００３…ストレージ、２００４…通信装置、ＬＤ…レイヤデーモン、Ｌ１，Ｌ２，Ｌ３…レイヤデータ、ＰＤ１，ＰＤ２…ポリゴンデータ、Ｐ１，Ｐ２，Ｐ３…仮想オブジェクト。

Claims (10)

1. 各レイヤに属する１以上の仮想オブジェクトを表示するためのデータを、複数のレイヤについて取得する取得部と、
   各々の前記レイヤについて取得された前記データに応じた仮想オブジェクトを前記レイヤ単位で重畳して表示面に表示する表示制御部であって、２以上の前記仮想オブジェクトの表示位置が重なる場合には、当該２以上の仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する表示制御部と
   を備えることを特徴とする表示制御装置。
2. 前記表示制御部は、表示位置が重なる２以上の前記仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトについて、他の仮想オブジェクトと重なった状態で表示しないことが指定されている場合には、当該少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する
   ことを特徴とする請求項１記載の表示制御装置。
3. 前記表示制御部は、表示位置が重なる２以上の前記仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトが広告に関する仮想オブジェクトである場合に、当該少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する
   ことを特徴とする請求項１記載の表示制御装置。
4. 前記表示制御部は、表示位置が重なる２以上の前記仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトが動くように表示される仮想オブジェクトである場合に、当該少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する
   ことを特徴とする請求項１記載の表示制御装置。
5. 前記表示制御部は、表示位置が重なる２以上の前記仮想オブジェクトが前記表示面における所定の表示エリアに表示される仮想オブジェクトである場合に、当該２以上の前記仮想オブジェクトうち少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する
   ことを特徴とする請求項１記載の表示制御装置。
6. 前記表示面を閲覧するユーザが当該表示面において注視している位置を特定する注視位置特定部を備え、
   前記表示制御部は、表示位置が重なる２以上の前記仮想オブジェクトが前記表示面において前記ユーザが注視している位置に表示される仮想オブジェクトである場合に、当該２以上の前記仮想オブジェクトうち少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する
   ことを特徴とする請求項１記載の表示制御装置。
7. 前記表示制御部は、表示位置が重なる２以上の前記仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトとは異なる仮想オブジェクトであって、且つ、当該１の仮想オブジェクトに付随して表示される仮想オブジェクトについては、当該１の仮想オブジェクトとの位置関係を維持したまま表示位置を変更して表示する
   ことを特徴とする請求項１記載の表示制御装置。
8. 前記表示制御部は、表示位置が重なる２以上の前記仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトが、位置に関連した条件を満たす場合に、当該少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する
   ことを特徴とする請求項１記載の表示制御装置。
9. 前記表示制御部は、表示位置が重なる２以上の前記仮想オブジェクトのうち少なくともいずれか１の仮想オブジェクトが、日又は時に関連した条件を満たす場合に、当該少なくともいずれか１の仮想オブジェクトの表示位置を変更して表示する
   ことを特徴とする請求項１記載の表示制御装置。
10. 前記取得部によって取得される各々の前記レイヤに対応するデータは、それぞれ異なる主体によって作成され、且つ、レイヤ単位で独立して実行されるスクリプトを含むデータであり、
    前記表示制御部は、各々の前記レイヤに対応するデータを管理するプログラムによって実現される
    ことを特徴とする請求項１記載の表示制御装置。

Images