JP2025035219A - 情報処理装置、頭部装着型表示装置および情報処理方法 - Google Patents

Abstract

【課題】頭部装着型表示装置を装着しているユーザが仮想オブジェクトの後方を簡便に視認できるようにすることができる。
【解決手段】情報処理装置は、頭部装着型表示装置を装着しているユーザの視線位置に存在する仮想オブジェクトを制御オブジェクトとして選択する選択手段と、前記ユーザが前記制御オブジェクトの後方を視認するための所定の動作をしたか否かを判定する判定手段と、前記ユーザが前記所定の動作をしたことに応答して、前記制御オブジェクトの後方が視認できるように前記制御オブジェクトの表示を制御する制御手段とを有する。
【選択図】図３

Description

本発明は、情報処理装置、頭部装着型情報表示装置および情報処理方法に関する。

近年、現実世界と仮想世界とを融合して新しい体験を作り出すＸＲ（Ｅｘｔｅｎｄｅｄ
Ｒｅａｌｉｔｙ）技術が知られている。ＸＲ技術は、仮想現実、複合現実、拡張現実、および代替現実の技術の総称である。仮想現実（Ｖｉｒｔｕａｌ Ｒｅａｌｉｔｙ、ＶＲ）技術は、ユーザに仮想空間を現実のように体験させることができる技術である。複合現実（Ｍｉｘｅｄ Ｒｅａｌｉｔｙ、ＭＲ）技術は、現実と仮想現実とをシームレスに融合して複合現実感をユーザに体験させることができる技術である。拡張現実（Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ、ＡＲ）は、現実空間に仮想世界を重ねて投影して見せる技術である。代替現実（Ｓｕｂｓｔｉｔｕｔｉｏｎａｌ Ｒｅａｌｉｔｙ、ＳＲ）は、過去の映像を現実世界に重ね合わせて投影して見せる技術である。

ＸＲ技術の一つとして、頭部装着型表示装置（Ｈｅａｄ Ｍｏｕｎｔｅｄ Ｄｉｓｐｌａｙ、ＨＭＤ）を利用したＸＲシステムがある。ＸＲシステムは、実際の外景に仮想オブジェクトなどを重畳表示させ、ＨＭＤを装着するユーザに提示することにより、ＸＲ空間を体験させることができる。

ＨＭＤは、ユーザの視線位置を検出する機能を搭載し、視線位置の情報を活用した表示制御が可能である。例えば、特許文献１では、所定の基準時間に亘る注目動作の継続に応じて、注目動作のなされた実オブジェクトに関連する仮想オブジェクトが表示されることが開示されている。特許文献２では、使用者の頭部の向きと視線方向との組み合わせによって、使用者に視認される画像が変化することが開示されている。

特開２０１６－８１３３９号公報 特開２０１６－８２４６６号公報

ＨＭＤを装着するユーザは、仮想オブジェクトの後方を一時的に視認したい場合、ハンドジェスチャなどのユーザーインターフェースで仮想オブジェクトを移動させたり、仮想オブジェクトの後方が見える位置まで実際に移動したりする。しかしながら、移動範囲が制限される場合、立ち位置を変えずに制御したい場合、または手足が自由に動かせない場合など、仮想オブジェクトの後方を確認することが困難な場合がある。

本発明は、頭部装着型表示装置を装着しているユーザが、仮想オブジェクトの後方を簡便に視認できるようにする情報処理装置を提供することを目的とする。

本発明に係る情報処理装置は、頭部装着型表示装置を装着しているユーザの視線位置に存在する仮想オブジェクトを制御オブジェクトとして選択する選択手段と、前記ユーザが前記制御オブジェクトの後方を視認するための所定の動作をしたか否かを判定する判定手段と、前記ユーザが前記所定の動作をしたことに応答して、前記制御オブジェクトの後方が視認できるように前記制御オブジェクトの表示を制御する制御手段とを有することを特
徴とする。

本発明によれば、頭部装着型表示装置を装着しているユーザが仮想オブジェクトの後方を簡便に視認できるようにすることができる。

ＨＭＤの外観を例示する図である。 ＨＭＤの構成例を示すブロック図である。 ＨＭＤの処理を例示するフローチャートである。 ３軸加速度センサおよび３軸角速度センサについて説明する図である。 覗き込み動作の判定処理を例示するフローチャートである。 覗き込み動作の判定について説明する図である。 オブジェクトに付与されるメタデータについて説明する図である。 制御オブジェクトの表示制御処理を例示するフローチャートである。 制御オブジェクトの移動方向について説明する図である。 制御オブジェクトの表示制御について説明する図である。 制御オブジェクトの強調表示について説明する図である。

＜実施形態＞
以下、図面を参照して本発明の実施の形態を説明する。

（装置の構成）
図１および図２を用いて、本実施形態に係る頭部装着型表示装置であるＨＭＤ１００の構成例について説明する。図１は、ＨＭＤ１００の外観を例示する図である。図１に示すＨＭＤ１００は、ユーザの頭部に装着される表示装置である。ＨＭＤ１００は、電源スイッチ、および装置の設定を制御するボタンなどの操作部材を備える。ユーザは、操作部材またはＨＭＤ１００と通信可能なコントローラなどを介して、ＨＭＤ１００を操作することができる。ＨＭＤ１００は、仮想オブジェクトの生成および画像の合成などを行う画像処理部などを有する。

頭部装着部材１０１は、ＨＭＤ１００をユーザの頭に安定して固定するための部材である。頭部装着部材１０１は、ユーザの頭部の動きに合わせて、ＨＭＤ１００がずれることなく動作できるように、ＨＭＤ１００をユーザの頭に固定する。なお、頭部装着部材１０１は、ＨＭＤ１００をユーザの頭部に固定する部材に限られず、ＨＭＤ１００をユーザの耳にかけて固定する部材であってもよい。

表示装置１０２は、ＨＭＤ１００の装着者であるユーザの眼前に、仮想オブジェクト、または現実空間の画像と仮想オブジェクトとの合成画像を表示する。表示装置１０２は、例えば、液晶ディスプレイまたは有機ＥＬ（ＥｌｅｃｔｒｏＬｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイである。表示装置１０２は、例えば、液晶パネルと、液晶パネルを制御するドライバ回路と、表示する画像を保持するメモリとを含む。表示装置１０２は、無透過型の表示ユニットでもよいし、レンズ越しに現実の空間を視認可能な光学透過型の表示ユニットでもよい。

撮影装置１０３は、ユーザの周囲の環境を撮影する装置（カメラユニット）である。撮影装置１０３は、ユーザの周囲の環境として、ユーザの前方の環境を撮影してもよい。ユーザの前方は、例えばユーザの頭部の正面とすることができる。

図２は、ＨＭＤ１００の構成例を示すブロック図である。図２に示すＨＭＤ１００は、撮像部２００、視線検出部２０１、移動検知部２０２、回転検知部２０３、情報処理部２０４、画像処理部２０５、表示部２０６を含む。なお、情報処理部２０４および画像処理部２０５は、ＨＭＤ１００が有する処理部として説明するが、情報処理部２０４および画像処理部２０５の処理または一部の処理は、ＨＭＤ１００と通信可能な外部の情報処理装置によって実行されてもよい。この場合、情報処理装置は、情報処理部２０４および画像処理部２０５の処理を実行し、ＨＭＤ１００の表示部２０６によって表示される仮想オブジェクトの表示を制御する。

情報処理部２０４は、撮像画像取得部２０７、オブジェクト保持部２０８、オブジェクト生成部２０９、視線情報取得部２１０、移動量算出部２１１、回転量算出部２１２、動作判定部２１３を含む。画像処理部２０５は、オブジェクト選択部２１４、オブジェクト制御部２１５、表示画像生成部２１６を含む。

撮像部２００は、光学系、画像センサ、画像センサを制御するドライバ回路、画像センサにより取得された信号をデジタル信号に変換するＡ／Ｄ変換回路、および得られたデジタル信号を画像として現像する現像回路を有する。撮像部２００は、撮像した画像データ（撮像画像）を、情報処理部２０４の撮像画像取得部２０７に送信する。撮像画像取得部２０７は、撮像部２００から受信した画像データを画像処理部２０５の表示画像生成部２１６へ送信する。また、撮像画像取得部２０７は、オブジェクト生成部２０９へ撮像画像を転送する。

視線検出部２０１は、ＨＭＤ１００の装着者であるユーザの視線方向を検出する。視線検出部２０１は、例えば、一眼レフカメラ等に用いられている装置であって、赤外発光ダイオードによりユーザの眼球を照射して、光源の角膜反射による反射像と瞳孔との関係から視線方向を検出する装置であってもよい。

情報処理部２０４の視線情報取得部２１０は、視線検出部２０１が検出した視線の情報（以下、視線情報とも記載される）を取得する。視線情報取得部２１０は、取得した視線情報をオブジェクト制御部２１５に送信する。

移動検知部２０２は、ＨＭＤ１００の移動を検知する。移動検知部２０２は、例えば、ＧＰＳ（Ｇｌｏｂａｌ ｐｏｓｉｔｉｏｎｉｎｇ ｓｙｓｔｅｍ）の位置情報、および加速度センサの出力などを用いてＨＭＤ１００の移動を検知することができる。

情報処理部２０４の移動量算出部２１１は、移動検知部２０２が検知したＨＭＤ１００の移動の情報を取得し、ＨＭＤ１００の移動方向および移動量を算出する。移動量算出部２１１は、算出したＨＭＤ１００の移動方向および移動量（以下、移動情報とも記載される）を動作判定部２１３に送信する。

回転検知部２０３は、ＨＭＤ１００の回転を検知する。回転検知部２０３は、例えば、回転変位センサの出力などを用いて、ＨＭＤ１００の回転を検知することができる。情報処理部２０４の回転量算出部２１２は、回転検知部２０３が検知した回転の情報を取得し、ＨＭＤ１００の回転方向および回転量（以下、回転情報とも記載される）を算出する。回転量算出部２１２は、算出したＨＭＤ１００の回転方向および回転量を動作判定部２１３に送信する。

動作判定部２１３は、移動量算出部２１１から受信したＨＭＤ１００の移動方向および移動量と、回転量算出部２１２から受信したＨＭＤ１００の回転方向および回転量とに基づいて、ＨＭＤ１００の動作を判定する。動作判定部２１３は、判定した動作の情報（以
下、動作情報とも記載される）を、画像処理部２０５のオブジェクト制御部２１５に送信する。

オブジェクト保持部２０８は、仮想空間を構成する仮想物体（仮想オブジェクト）のデータ（形状情報、位置姿勢情報など）および仮想空間中に照射する光源のデータ等、仮想空間に関するデータをメモリ等の記憶部に保持する。画像処理部２０５のオブジェクト選択部２１４は、オブジェクト保持部２０８から表示対象の仮想オブジェクトを選択し、選択した仮想オブジェクトのデータをオブジェクト制御部２１５に転送する。また、オブジェクト保持部２０８は、オブジェクト生成部２０９へ仮想オブジェクトのデータを送信し、他の仮想オブジェクトを生成させてもよい。

オブジェクト生成部２０９は、撮像画像取得部２０７から転送された画像データと、オブジェクト保持部２０８から転送された仮想オブジェクトのデータとに基づいて、仮想オブジェクトを生成する。オブジェクト生成部２０９は、生成した仮想オブジェクトを画像処理部２０５のオブジェクト選択部２１４へ送信する。

オブジェクト選択部２１４は、オブジェクト保持部２０８およびオブジェクト生成部２０９から、ユーザに対して表示する仮想オブジェクを選択する。オブジェクト選択部２１４は、選択した表示対象の仮想オブジェクトのデータを、オブジェクト制御部２１５に送信する。オブジェクト制御部２１５に送信される表示対象の仮想オブジェクトのデータは、表示画像データ、表示画角における配置位置データ、他の仮想オブジェクトとの重なり順序データなどを含む。

オブジェクト制御部２１５は、視線情報取得部２１０から受信した視線情報および動作判定部２１３から受信したＨＭＤ１００の動作情報に基づいて、オブジェクト選択部２１４が選択した仮想オブジェクトの表示を制御する。仮想オブジェクトの表示の制御は、仮想オブジェクトを移動すること、縮小すること、透過させること、および非表示にすることなどを含む。オブジェクト制御部２１５は、視線情報および動作情報に基づいて、仮想オブジェクトのデータを変更することにより、仮想オブジェクトの表示を制御する。オブジェクト制御部２１５は、表示の制御を適用した仮想オブジェクトのデータを、表示画像生成部２１６に送信する。

表示画像生成部２１６は、撮像画像取得部２０７から転送された現実空間を撮像した画像データと、オブジェクト制御部２１５から受信した仮想オブジェクトとの合成画像を生成する。表示画像生成部２１６は、生成した合成画像を表示部２０６に送信する。

（ＨＭＤの処理）
図３を用いて、本実施形態に係るＨＭＤ１００の処理について説明する。図３は、ＨＭＤ１００の処理を例示するフローチャートである。図３に示す処理は、ＨＭＤ１００を装着しているユーザが、ＨＭＤ１００の電源スイッチをオンにして、表示装置１０２に仮想オブジェクトが表示されることにより開始される。

ステップＳ３００において、視線情報取得部２１０は、視線検出部２０１で検出されたユーザの視線の情報に基づいて、表示装置１０２の表示画面におけるユーザの視線位置を取得する。視線情報取得部２１０は、オブジェクト制御部２１５に、ユーザの視線位置の情報を送信する。

ステップＳ３０１では、オブジェクト制御部２１５は、オブジェクト選択部２１４が選択した仮想オブジェクトのデータと、視線情報取得部２１０から受信した視線情報に基づいて、ユーザの視線位置に仮想オブジェクトが存在しているか否かを判定する。ユーザの
視線位置に仮想オブジェクトが存在している場合、処理はステップＳ３０２に進む。ユーザの視線位置に仮想オブジェクトが存在しない場合、処理はステップＳ３００に戻る。

なお、オブジェクト制御部２１５は、ユーザの視線位置に存在する仮想オブジェクトが、最前面に表示される仮想オブジェクトであるか否かを判定してもよい。ユーザの視線位置に存在する仮想オブジェクトが、最前面の仮想オブジェクトである場合、処理はステップＳ３０２に進む。ユーザの視線位置に存在する仮想オブジェクトが、最前面の仮想オブジェクトではない場合は、ステップＳ３００に戻る。

ステップＳ３０２では、オブジェクト制御部２１５は、視線位置に存在する仮想オブジェクトを、制御オブジェクトとして選択する。ステップＳ３０３では、視線情報取得部２１０は、ステップＳ３０２で選択された制御オブジェクトに対する視認時間が、所定時間ｔ（時間）よりも長いか否かを判定する。すなわち、視線情報取得部２１０は、所定時間ｔの間、制御オブジェクトに向けられた視線位置が変化していないかを判定する。所定時間ｔは、例えば、ユーザが制御オブジェクトを注視していると判定可能な時間とすることができる。

制御オブジェクトに対する視認時間が所定時間ｔよりも長い場合、処理はステップＳ３０４に進む。制御オブジェクトに対する視認時間が所定時間ｔ以下の場合、処理はステップＳ３００に戻る。

ステップＳ３０４では、動作判定部２１３は、ＨＭＤ１００の動作を判定する。ＨＭＤ１００はユーザの頭部に固定されており、動作判定部２１３は、ＨＭＤ１００の動作を判定することにより、ユーザの頭部の動作を判定することができる。動作判定部２１３は、具体的には、移動検知部２０２からＨＭＤ１００（ユーザの頭部）の移動方向および移動量を取得する。また、動作判定部２１３は、回転検知部２０３からＨＭＤ１００（ユーザの頭部）の回転方向および回転量を取得する。動作判定部２１３は、ＨＭＤ１００（ユーザの頭部）の移動方向、移動量、回転方向および回転量のうち少なくともいずれかに基づいて、ＨＭＤ１００（ユーザ）の動作を判定する。なお、ステップＳ３０４における動作判定部２１３の判定処理は、ステップＳ３０３の処理が開始される前から実行してもよい。

ステップＳ３０５では、動作判定部２１３は、ユーザにより所定の動作が行われたか否かを判定する。所定の動作は、ＨＭＤ１００を装着しているユーザが、ステップＳ３０２で選択された制御オブジェクトの後方を視認するための動作であり、例えば、制御オブジェクトの後方を実際に覗き込むような動作である。なお、所定の動作は、覗き込む動作に限られず、後方を視認するための動作として予め定められた動作であってもよい。例えば、所定の動作は、制御オブジェクトを見ながら、制御オブジェクトを動かしたい方向に顔を向ける動作などであってもよい。

動作判定部２１３は、ＨＭＤ１００の移動方向、移動量、回転方向および回転量のうち少なくともいずれかに基づいて、ユーザが所定の動作をしたか否かを判定することができる。動作判定部２１３は、例えば、ＨＭＤ１００（ユーザの頭部）の移動量が所定範囲内の距離である場合に、ユーザが所定の動作をしたと判定することができる。また、動作判定部２１３は、ＨＭＤ１００（ユーザの頭部）の回転量が所定範囲内の角度である場合に、ユーザが所定の動作をしたと判定することができる。動作判定部２１３は、ユーザの頭部の移動量が所定範囲内の距離であることと、回転量が所定範囲内の角度であることの両方を満たす場合に、ユーザが所定の動作をしたと判定してもよい。

ユーザの頭部の移動量が所定範囲内の距離であるか否かは、所定範囲を定める第１閾値
および第２閾値（＞第１閾値）を設定し、ユーザの頭部の移動量が第１閾値以上、第２閾値以下であるか否かにより判定することができる。ユーザの頭部の回転量が所定範囲内の角度であるか否かは、所定範囲を定める第３閾値および第４閾値（＞第３閾値）を設定し、ユーザの頭部の回転量が第３閾値以上、第４閾値以下であるか否かにより判定することができる。

ユーザが所定の動作をした場合、処理はステップＳ３０６に進む。ユーザが所定の動作をしていない場合、処理はステップＳ３００に戻る。

ステップＳ３０６では、オブジェクト制御部２１５は、ユーザが所定の動作をしたことに応答してステップＳ３０２で選択した制御オブジェクトの表示を制御する。オブジェクト制御部２１５は、ユーザが制御オブジェクトの後方が視認できるように、制御オブジェクトの表示を制御する。オブジェクト制御部２１５は、例えば、制御オブジェクトに対して移動、縮小、透過および非表示のうち少なくともいずれかの表示制御を行うことにより、制御オブジェクトの表示を制御する。

オブジェクト制御部２１５は、表示の制御対象である制御オブジェクトのデータ、およびオブジェクト選択部２１４が選択した仮想オブジェクのデータを、表示画像生成部２１６に送信する。表示画像生成部２１６は、制御オブジェクトを含む仮想オブジェクトと撮像画像との合成画像を生成し、生成した合成画像を表示部２０６に送信する。表示部２０６は、表示画像生成部２１６から受信した合成画像を表示装置１０２に表示する。

ステップＳ３０７では、視線情報取得部２１０は、ユーザの視線位置が変化したか否かを判定する。視線情報取得部２１０は、例えば、ステップＳ３００で取得した視線位置からの変化量が、予め設定した閾値より大きい場合に、ユーザの視線位置が変化したと判定することができる。ユーザの視線位置が変化した場合、処理はステップＳ３０９に進む。ユーザの視線位置が変化していない場合、処理はステップＳ３０８に進む。

ステップＳ３０８では、動作判定部２１３は、ユーザによる所定の動作が終了したか否かを判定する。動作判定部２１３は、例えば、ステップＳ３０５において所定の動作が行われたと判定したときのＨＭＤ１００の位置姿勢（ユーザの頭部の位置姿勢）からの移動量および回転量に基づいて、所定の動作が終了したか否かを判定する。動作判定部２１３は、移動量が予め設定された移動量の閾値よりも大きい場合、回転量が予め設定された回転量の閾値よりも大きい場合、または移動量および回転量の両方がそれぞれの閾値よりも大きい場合に、所定の動作が終了したと判定することができる。所定の動作が終了した場合、処理はステップＳ３０９に進む。所定の動作が終了していない場合、制御オブジェクトの表示制御は元に戻されず、処理はステップＳ３０７に戻る。

ステップＳ３０９では、ＨＭＤ１００を装着しているユーザが制御オブジェクトを実際に覗き込むといった所定の動作が終了しており、オブジェクト制御部２１５は、ステップＳ３０６で行なった表示の制御を元に戻す。

（覗き込み動作の判定例）
図４（Ａ），４（Ｂ）、図５および図６（Ａ）～６（Ｃ）を用いて、覗き込み動作の判定例について説明する。覗き込み動作は、所定の動作の一例である。以下の例では、移動検知部２０２は、３軸方向の加速度を検出する加速度計（３軸加速度センサ）を備え、回転検知部２０３は、３軸方向の角速度を検出する角速度計（３軸角速度センサ、ジャイロセンサ）を備える。

図４（Ａ），４（Ｂ）は、３軸加速度センサおよび３軸角速度センサについて説明する
図である。移動検知部２０２の３軸加速度センサは、ＨＭＤ１００に搭載され、ＨＭＤ１００の３軸方向の加速度を検出する。図４（Ａ）で示すように、３軸加速度センサは、Ｘ軸（左右）、Ｙ軸（上下）、Ｚ軸（前後）の移動方向、およびそれぞれの方向における移動量を検出することができる。３軸加速度センサの出力は、移動量算出部２１１に送信される。移動量算出部２１１は、３軸加速度センサの出力データに基づいて、ＨＭＤ１００の移動方向および移動量を取得することができる。

回転検知部２０３の３軸角速度センサは、ＨＭＤ１００に搭載され、ＨＭＤ１００の３軸方向の角速度を検出する。図４（Ｂ）で示すように、３軸角速度センサは、ピッチ（左右方向を軸とする回転）、ヨー（上下方向を軸とする回転）、ロール（前後方向を軸とする回転）の回転方向、およびそれぞれの方向における回転量を検出することができる。３軸角速度センサの出力は、回転量算出部２１２に送信される。回転量算出部２１２は、３軸角速度センサの出力データに基づいて、ＨＭＤ１００の回転方向および回転量を取得することができる。

図５は、覗き込み動作の判定処理を例示するフローチャートである。図５に示す処理は、図３のステップＳ３０４およびステップ３０５で所定の動作が行われたかを判定する処理の具体例である。図６は、覗き込み動作の判定について説明する図である。以下の説明では、３軸加速度センサおよび３軸角速度センサは、それぞれ加速度センサおよび角速度センサと記載される。

図５のステップＳ５００では、移動検知部２０２は、加速度センサの出力を取得する。移動検知部２０２は、取得した加速度センサの出力を移動量算出部２１１に送信する。ステップＳ５０１では、移動量算出部２１１は、加速度の初期値が保存されているか否かを判定する。加速度の初期値は、ＨＭＤ１００の移動方向および移動量を算出するために用いられる。

加速度の初期値が保存されている場合、処理はステップＳ５０３に進む。加速度の初期値が保存されていない場合、処理はステップＳ５０２に進む。ステップＳ５０２では、移動量算出部２１１は、ステップＳ５００で取得した加速度センサの出力値を、加速度の初期値として保存する。処理はステップＳ５００に戻る。

ステップＳ５０３では、回転検知部２０３は、角速度センサの出力を取得する。回転検知部２０３は、取得した角速度センサの出力を回転量算出部２１２に送信する。ステップＳ５０４では、回転量算出部２１２は、角速度の初期値が保存されているか否かを判定する。角速度の初期値は、ＨＭＤ１００の回転方向および回転量を算出するために用いられる。

角速度の初期値が保存されている場合、処理はステップＳ５０６に進む。角速度の初期値が保存されていない場合、処理はステップＳ５０５に進む。ステップＳ５０５では、回転量算出部２１２は、ステップＳ５０３で取得した角速度センサの出力値を、角速度の初期値として保存する。処理は、ステップＳ５０４に戻る。

ステップＳ５０６では、移動量算出部２１１は、加速度の初期値からの変化量に基づいて、移動方向および移動量を移動情報として取得する。また、回転量算出部２１２は、角速度の初期値からの変化量に基づいて、回転方向および回転量を回転情報として取得する。

ステップＳ５０７では、動作判定部２１３は、ＨＭＤ１００の移動量が所定範囲内の距離であるか否かを判定する。所定範囲を定める距離の閾値は、移動方向における距離の上
限値と下限値とで指定されればよい。また、所定範囲を定める距離の閾値は、上下方向、左右方向、前後方向ごとに設けられてもよい。

図６（Ａ）の例では、ユーザの頭部の前方上方向への移動量の閾値は、移動量Ａに設定されている。また、図６（Ｂ）の例では、ユーザの頭部の左上方向または右上方向への移動量の閾値は、移動量Ｂに設定されている。ステップＳ５０６で取得した移動量について、動作判定部２１３は、前方上方向への移動量が０～移動量Ａの範囲内であり、左上方向または右上方向への移動量が０～移動量Ｂの範囲内である場合に、移動量が所定範囲内の距離であると判定することができる。なお、移動量を判定するための距離の閾値は、図６（Ａ），６（Ｂ）の例に限られず、所定の動作がどのような動作であるかに応じて設定されればよい。また、移動量を判定するための距離の閾値は、ユーザの動きの特性に応じて、ユーザごとに設定されてもよい。

ステップＳ５０７で、ＨＭＤ１００の移動量が所定範囲内の距離である場合、処理はステップＳ５１０に進む。ＨＭＤ１００の移動量が所定範囲内の距離でない場合、処理はステップＳ５０８に進む。

ステップＳ５１０では、動作判定部２１３は、ＨＭＤ１００の回転量が所定範囲内の角度であるか否かを判定する。所定範囲を定める角度の閾値は、回転角度の上限値と下限値とで指定されればよい。

図６（Ｃ）の例では、前方左方向または前方右方向へのユーザの頭部の回転量の閾値は、回転量Ｃに設定されている。ステップＳ５０６で取得した回転量について、動作判定部２１３は、前方左方向または前方右方向への回転量が０～回転量Ｃの範囲内である場合に、回転量が所定範囲内の角度であると判定することができる。なお、回転量を判定するための角度の閾値は、図６（Ｃ）の例に限られず、所定の動作に応じて設定されればよい。また、回転量を判定するための角度の閾値は、ユーザの動きの特性に応じて、ユーザごとに設定されてもよい。

ステップＳ５１０で、ＨＭＤ１００の回転量が所定範囲内の角度である場合、処理はステップＳ５１１に進む。ＨＭＤ１００の回転量が所定範囲内の角度でない場合、処理はステップＳ５０８に進む。

ステップＳ５０８では、回転量算出部２１２は、角速度の初期値をステップＳ５０３で取得した角速度センサの出力値に更新する。ステップＳ５０９では、移動量算出部２１１は、加速度の初期値をステップＳ５００で取得した加速度センサの出力値に更新する。角速度の初期値および加速度の初期値が更新されると、処理はテップＳ５００に戻る。

ステップＳ５１１では、動作判定部２１３は、ユーザの頭部の動作が覗き込み動作であると判定する。なお、図５に示す処理では、動作判定部２１３は、ＨＭＤ１００の移動量および回転量の両方がそれぞれの所定範囲内である場合に、覗き込み動作が行われたと判定するが、これに限られない。動作判定部２１３は、移動量が所定範囲内の距離であれば、覗き込み動作が行われたと判定してもよいし、回転量が所定範囲内の角度であれば、覗き込み動作が行われたと判定してもよい。

また、図５に示す処理では、動作判定部２１３は、ユーザの頭部の動作が覗き込み動作であるか否かを、ＨＭＤ１００の移動量および回転量が所定の条件を満たすか否かにより判定するが、さらに移動方向および回転方向に対する条件を用いて判定してもよい。例えば、動作判定部２１３は、移動量が所定範囲内の距離であって移動方向がユーザの前方である場合は覗き込み動作と判定し、移動量が所定範囲内の距離であって移動方向がユーザ
の後方である場合は覗き込み動作でないと判定する。また、動作判定部２１３は、回転量が所定範囲内の角度であっても、回転方向が、ユーザが後ろを向く際の方向である場合には、覗き込み動作でないと判定してもよい。

覗き込み動作を含む所定の動作が行われたか否かは、移動方向、移動量、回転方向および回転量のうち少なくともいずれかを、それぞれに予め設定された閾値と比較することにより判定することができる。移動方向、移動量、回転方向および回転量のそれぞれの閾値は、判定対象の所定の動作に応じて設定される。

（表示制御方法を示すメタデータ）
図７を用いて、制御オブジェクトの表示制御について説明する。制御オブジェクトは、ユーザが所定の動作をしたことに応答して、移動、縮小、透過および非表示のうちいずれかの制御（表示制御）が適用される。オブジェクトの種類と適用される表示制御の種類との対応関係は、予め定めておくことができる。オブジェクトの種類は、例えば、移動可能か否か、縮小可能か否かなどに応じて設定される種類である。

どのような表示制御が適用されるかは、制御オブジェクトの種類によって異なってもよい。制御オブジェクトごとに異なる表示制御が適用される場合、移動、縮小、透過および非表示のうちいずれの表示制御が適用されるかは、それぞれの制御オブジェクトのデータに、メタデータとして付与することができる。制御オブジェクトは、ユーザが所定の動作をしたことに応答して、移動、縮小、透過および非表示のうちいずれの表示制御が適用されるかを示すメタデータと対応づけて、オブジェクト保持部２０８に記憶される。オブジェクト制御部２１５は、メタデータに基づいて制御オブジェクトの表示を制御することができる。

図７は、オブジェクトに付与されるメタデータについて説明する図である。仮想オブジェクトは、種類によって移動が想定される場合と、移動が想定されない場合がある。そのため、仮想オブジェクトがメタデータとして表示制御の方法を有することで、オブジェクト制御部２１５は、制御オブジェクトのメタデータを参照して、制御オブジェクトの表示を適切に制御することができる。

図７の例では、オブジェクトの「人形」および「車」は、現実空間においても移動させることができる。そこで、オブジェクトの「人形」および「車」は、「移動」の表示制御方法がメタデータとして付与される。付与されたメタデータは、仮想オブジェクトのデータと対応付けてオブジェクト保持部２０８に保存される。

オブジェクトの「ビル」および「壁」は、現実空間において移動することは想定されないため、「ビル」および「壁」のオブジェクトを移動させた場合、ユーザは違和感を覚える可能性がある。したがって、オブジェクトの「ビル」および「壁」は、処理方法「透過」の表示制御方法がメタデータとして付与される。付与されたメタデータは、仮想オブジェクトのデータと対応付けてオブジェクト保持部２０８に保存される。なお、表示制御方法は、図７に示す「移動」および「透過」に限定されない。表示制御方法は、ユーザが制御オブジェクトの後方を視認できるような制御であればよく、縮小、回転および非表示などによる制御を含んでもよい。

（制御オブジェクトの表示制御）
図８、図９（Ａ）～９（Ｃ）および図１０（Ａ）～１０（Ｄ）を用いて、制御オブジェクトの表示制御について説明する。図８は、制御オブジェクトの表示制御処理を例示するフローチャートである。図８に示す例では、移動検知部２０２は、３軸加速度センサを備え、回転検知部２０３は、３軸角速度センサを備える。

図８に示す処理は、図３のステップＳ３０６の処理の具体的な処理の例である。ＨＭＤ１００は、図３のステップＳ３００～Ｓ３０４と同様の処理を実行し、ステップＳ３０５では、所定の動作の一例として、ユーザが覗き込み動作をしたか否かを判定する。図８に示す制御オブジェクトの表示制御処理は、ユーザが覗き込み動作をしたと判定された場合に実行される。

ステップＳ８０１では、動作判定部２１３は、移動量算出部２１１からＨＭＤ１００（ユーザの頭部）の移動方向を取得する。ＨＭＤ１００の移動方向は、制御オブジェクトの表示を制御するために用いられる。動作判定部２１３は、取得したＨＭＤ１００の移動方向をオブジェクト制御部２１５に転送する。

ステップＳ８０２では、動作判定部２１３は、移動量算出部２１１からＨＭＤ１００の移動量を取得する。ＨＭＤ１００の移動量は、制御オブジェクトの表示を制御するために用いられる。動作判定部２１３は、取得したＨＭＤ１００の移動量をオブジェクト制御部２１５に転送する。

ステップＳ８０３では、オブジェクト制御部２１５は、制御オブジェクトを表示する際の制御方法が「移動」であるか否かを判定する。オブジェクト制御部２１５は、図７を用いて説明したメタデータから、制御オブジェクトを表示する際の制御方法を取得することができる。制御オブジェクトの表示の制御方法が「移動」である場合、処理はステップＳ８０４に進む。

制御オブジェクトの表示の制御方法が「移動」ではない場合、処理はステップＳ８１４に進む。ステップＳ８１４では、オブジェクト制御部２１５は、制御オブジェクトを透過させて、後方が視認できるように制御する。オブジェクト制御部２１５は、制御オブジェクトの透過率を上げることにより、制御オブジェクトを透過させることができる。オブジェクト制御部２１５は、ユーザが後方が視認できる範囲で制御オブジェクトの透過率を設定すればよい。なお、図１０の例では、制御オブジェクトを透過させる例を示すが、制御オブジェクトの制御方法は、メタデータで指定された透過以外の制御であってもよい。

ステップＳ８０４では、オブジェクト制御部２１５は、制御オブジェクトの移動量を算出する。オブジェクト制御部２１５は、例えば、ユーザの頭部の移動量および回転量の少なくともいずれかに基づいて、制御オブジェクトを移動させる距離を決定することができる。オブジェクト制御部２１５は、表示装置１０２の表示画角サイズに応じて適切に移動されるように、制御オブジェクトの移動量を算出してもよい。

図９（Ａ）～９（Ｃ）を用いて、ステップＳ８０５～Ｓ８０７の制御オブジェクトの移動方向の決定について説明する。図９（Ａ）～９（Ｃ）は、制御オブジェクトの移動方向について説明する図である。図９（Ａ）は、ＨＭＤ１００を装着しているユーザが、制御オブジェクト９００の後方（背面にある表示）を視認しようとする場合の表示例を示す。図９（Ａ）は、ユーザの視線が、所定時間ｔよりも長い時間、視線位置９０１に向けられている状態を示す。

ステップＳ８０５～Ｓ８０７では、オブジェクト制御部２１５は、ステップＳ８０１で取得したＨＭＤ１００の移動方向に基づいて、制御オブジェクト９００を移動させる方向を決定する。なお、図８の例では、ユーザが行った覗き込み動作は、右側から覗き込む動作、または左側から覗き込む動作のいずれかとする。

ステップＳ８０５では、オブジェクト制御部２１５は、ＨＭＤ１００を装着しているユ
ーザが、制御オブジェクトの右側から覗き込む動作をしたか否かを判定する。ユーザが制御オブジェクトの右側から覗き込む動作をした場合、処理はステップＳ８０６に進む。ユーザの動作が右側から覗き込む動作ではなかった場合、処理はステップＳ８０７に進む。

ステップＳ８０６では、オブジェクト制御部２１５は、制御オブジェクトの移動方向を左側に決定する。制御オブジェクトの移動方向が左側に決定されると、オブジェクト制御部２１５は、図９（Ｂ）に示すように、制御オブジェクト９００を左側（矢印で示される方向）に移動するように制御する。制御オブジェクト９００が左側に移動されることで、ユーザは、後方の仮想オブジェクト９０２および現実空間を視認できるようになる。

ステップＳ８０７では、ＨＭＤ１００を装着しているユーザが、制御オブジェクトの左側から覗き込む動作をしたと想定され、オブジェクト制御部２１５は、制御オブジェクトの移動方向を右側に決定する。制御オブジェクトの移動方向が右側に決定されると、オブジェクト制御部２１５は、図９（Ｃ）で示すように、制御オブジェクト９００を、右側（矢印で示される方向）に移動するように制御する。制御オブジェクト９００が右側に移動されることで、ユーザは、後方の仮想オブジェクト９０２および現実空間を視認できるようになる。

なお、ステップＳ８０５～Ｓ８０７の例では、所定の動作は、右側または左側から覗き込む動作として説明したが、これに限られな。例えば、所定の動作が上側から覗き込む動作の場合、オブジェクト制御部２１５は、制御オブジェクトの移動方向を下側に決定することができる。所定の動作が下側から覗き込む動作の場合、オブジェクト制御部２１５は、制御オブジェクトの移動方向を上側に決定することができる。

また、ステップＳ８０５～Ｓ８０７の例では、制御オブジェクトの移動方向は、ＨＭＤ１００の移動方向に基づいて決定されるが、ＨＭＤ１００の回転方向を考慮して決定されてもよい。ＨＭＤ１００の回転方向を考慮することで、オブジェクト制御部２１５は、ユーザが制御オブジェクトの後方をどの方向から覗き込んでいるかを精度よく検出することができる。オブジェクト制御部２１５は、ユーザが制御オブジェクトを覗き込んでいる方向と反対側に制御オブジェクトを移動させるように制御すればよい。このように、オブジェクト制御部２１５は、ＨＭＤ１００（ユーザの頭部）の移動方向および回転方向の少なくともいずれかに基づいて、制御オブジェクトを移動させる方向を決定することができる。

図１０（Ａ）～１０（Ｄ）を用いて、ステップＳ８０８～Ｓ８１４の制御オブジェクトの表示制御について説明する。図１０（Ａ）～１０（Ｄ）は、制御オブジェクトの表示制御について説明する図である。具体的には、オブジェクト制御部２１５は、制御オブジェクトを移動させる方向に他の仮想オブジェクトが存在する場合、制御オブジェクトが他の仮想オブジェクトに重ならないように縮小する制御を行う。

図１０（Ａ）は、ＨＭＤ１００を装着しているユーザが、制御オブジェクト１０００の後方（背面にある表示）を視認しようとする場合の表示例を示す。図１０（Ａ）は、ユーザの視線が、所定時間ｔよりも長い時間、視線位置１００１に向けられている状態を示す。ＨＭＤ１００は、制御オブジェクト１０００とは異なる他の仮想オブジェクト１００２を表示している。

ステップＳ８０８～Ｓ８１４では、オブジェクト制御部２１５は、制御オブジェクトの表示を制御する。オブジェクト制御部２１５は、制御オブジェクトを移動させる方向に他の仮想オブジェクトが存在するか否かに応じて、制御オブジェクトの制御方法を変更する。

ステップＳ８０８では、オブジェクト制御部２１５は、制御オブジェクトを移動させる方向に、他の仮想オブジェクトが存在するか否かを判定する。移動方向に他の仮想オブジェクトが存在する場合、処理はステップＳ８０９に進む。移動方向に他の仮想オブジェクトが存在しない場合、処理はステップＳ８１３に進む。

ステップＳ８１３では、制御オブジェクトを移動させる方向に他の仮想オブジェクトが存在しないため、オブジェクト制御部２１５は、ステップＳ８０４で算出された移動量に基づいて、制御オブジェクトを移動させる。図１０（Ｂ）の例では、ＨＭＤ１００を装着しているユーザが、制御オブジェクト１０００の左側から覗き込む動作をした場合、制御オブジェクト１０００は右側に移動される。制御オブジェクト１０００の右側には他の仮想オブジェクトが存在しないため、制御オブジェクト１０００は、移動されても仮想オブジェクト１００２等の他の仮想オブジェクトとは重ならない。

ステップＳ８０９～Ｓ８１２は、制御オブジェクトを移動させる方向に他の仮想オブジェクトが存在する場合の処理である。オブジェクト制御部２１５は、制御オブジェクトを移動させる方向に他の仮想オブジェクトが存在する場合、制御オブジェクトを移動先で縮小する。図１０（Ｃ）の例では、ＨＭＤ１００を装着しているユーザが、制御オブジェクト１０００の右側から覗き込む動作をした場合、制御オブジェクト１０００は左側に移動して他の仮想オブジェクト１００２と重なってしまう。

そこで、図１０（Ｄ）で示すように、オブジェクト制御部２１５は、制御オブジェクト１０００を移動させても他の仮想オブジェクト１００２に重ならないように、制御オブジェクト１０００を縮小する。ただし、縮小によって見づらくならないようにするため、図８に示す処理の例では、縮小率についての閾値が設定される。

ステップＳ８０９では、オブジェクト制御部２１５は、縮小率の閾値α（所定の縮小率）を設定する。閾値αは、例えば、制御オブジェクトの種類（文字を含むか否か等）または表示画面のサイズ等に基づいて、制御オブジェクトが視認可能となるような範囲で設定される。ステップＳ８１０では、オブジェクト制御部２１５は、制御オブジェクトが、移動先で他の仮想オブジェクトと重ならないための縮小率βを算出する。

ステップＳ８１１では、オブジェクト制御部２１５は、縮小率βが閾値α以上であるか否かを判定する。縮小率βが閾値α以上である場合、制御オブジェクトは、閾値αの縮小率で縮小すれば他の仮想オブジェクトには重ならない。この場合、処理はステップＳ８１２に進む。一方、縮小率βが閾値α未満である場合、制御オブジェクトは、閾値αの縮小率で縮小しても他の仮想オブジェクトと重なってしまう。この場合、処理はステップＳ８１４に進む。

ステップＳ８１２では、移動先で制御オブジェクトが縮小率βで縮小されても視認可能であり、図１０（Ｄ）で示すように、オブジェクト制御部２１５は、制御オブジェクト１０００を縮小して移動させるように制御する。

ステップＳ８１４では、縮小率βが閾値αより小さく、制御オブジェクトは縮小率βで縮小すると視認が困難となる。すなわち、制御オブジェクトが視認可能となるように閾値αの縮小率で縮小しても、制御オブジェクトは他の仮想オブジェクトと重なってしまう。したがって、オブジェクト制御部２１５は、制御オブジェクトを移動せず、透過させることで後方が視認できるように制御する。

ステップ８１２～Ｓ８１４において、オブジェクト制御部２１５が制御オブジェクトの
表示を制御することにより、ユーザは、制御オブジェクトの後方を視認できるようになる。

オブジェクト制御部２１５は、表示を制御した仮想オブジェクトのデータを含め、オブジェクト選択部２１４が選択した仮想オブジェクトのデータを、表示画像生成部２１６に送信する。表示画像生成部２１６は、撮像画像に仮想オブジェクトを重畳表示した合成画像を生成する。表示部２０６は、表示画像生成部２１６が生成した合成画像を表示装置１０２に表示する。

図８に示す制御オブジェクトの表示制御処理が終了すると、図３のステップＳ３０７，Ｓ３０８と同様に、ユーザの視線位置が変化したか、または所定の動作が終了したかが判定される。ユーザの視線位置が変化した場合、または所定の動作が終了した場合、オブジェクト制御部２１５は、Ｓ３０９と同様に、ステップ８１２～Ｓ８１４で行なった制御オブジェクトの表示の制御を元に戻す。

（制御オブジェクトの強調表示）
図１１（Ａ），１１（Ｂ）を用いて、制御オブジェクトの強調表示について説明する。制御オブジェクトは、ユーザの視線位置に存在する仮想オブジェクトであり、ユーザが所定の動作をすることによって表示が制御される。オブジェクト制御部２１５は、図３のステップＳ３０２で選択された制御オブジェクトを強調表示することで、制御対象である仮想オブジェクトをユーザに認識させることができる。

図１１（Ａ）において、ＨＭＤ１００の装着者であるユーザの視線が所定時間ｔよりも長い時間、視線位置１１０１に向けられると、オブジェクト制御部２１５は、制御オブジェクト１１００を制御対象として選択し強調表示を行うように制御する。オブジェクト制御部２１５は、例えば図１１（Ｂ）に示すように、制御オブジェクト１１００の輪郭を光らせる強調表示１１０２をすることができる。なお、強調表示の方法は、制御オブジェクトの輪郭を光らせることに限定されない。オブジェクト制御部２１５は、ユーザが認識しやすいように表示を制御すればよく、例えば、制御オブジェクト自体を点滅させるように制御してもよい。

オブジェクト制御部２１５は、図３のステップＳ３０２で制御オブジェクトが選択されてから、制御オブジェクトの表示の制御が開始されるまでの間、制御オブジェクトの強調表示を行うように制御してもよい。また、オブジェクト制御部２１５は、制御オブジェクトが選択されてから、所定の動作が終了するまでの間、制御オブジェクトの強調表示を行うように制御してもよい。

上記の実施形態によれば、ＨＭＤ１００は、ユーザが所定の動作をしたことに応答して、ユーザの視線位置に存在する仮想オブジェクトの表示を制御することにより、当該仮想オブジェクトの後方を視認可能とすることができる。すなわち、ＨＭＤ１００は、ＨＭＤ１００を装着しているユーザが自身の視線位置に存在する仮想オブジェクトの後方を視認するための所定の動作をする前と後とで、当該仮想オブジェクトの表示が異なるように制御する。ユーザは、所定の動作として、例えば仮想オブジェクトの後方を覗き込む動作をすることで、当該仮想オブジェクトの後方を簡便に視認することができる。

上記の実施形態はあくまで一例であり、本発明の要旨の範囲内で上記実施形態の構成を適宜変形したり変更したりすることにより得られる構成も、本発明に含まれる。上記実施形態の構成を適宜組み合わせて得られる構成も、本発明に含まれる。

なお、上記の実施形態の各機能部（図２）は、個別のハードウェアであってもよいし、
そうでなくてもよい。２つ以上の機能部の機能が、共通のハードウェアによって実現されてもよい。１つの機能部の複数の機能のそれぞれが、個別のハードウェアによって実現されてもよい。１つの機能部の２つ以上の機能が、共通のハードウェアによって実現されてもよい。また、各機能部は、ハードウェアによって実現されてもよいし、そうでなくてもよい。例えば、装置が、プロセッサと、制御プログラムが格納されたメモリとを有していてもよい。そして、装置が有する少なくとも一部の機能部の機能が、プロセッサがメモリから制御プログラムを読み出して実行することにより実現されてもよい。

＜その他の実施形態＞
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。

本実施形態の開示は、以下の構成、方法、プログラム、および媒体を含む。
（構成１）
頭部装着型表示装置を装着しているユーザの視線位置に存在する仮想オブジェクトを制御オブジェクトとして選択する選択手段と、
前記ユーザが前記制御オブジェクトの後方を視認するための所定の動作をしたか否かを判定する判定手段と、
前記ユーザが前記所定の動作をしたことに応答して、前記制御オブジェクトの後方が視認できるように前記制御オブジェクトの表示を制御する制御手段と
を有することを特徴とする情報処理装置。
（構成２）
前記判定手段は、前記ユーザの頭部の移動方向、移動量、回転方向および回転量のうち少なくともいずれかに基づいて、前記ユーザが前記所定の動作をしたか否かを判定する
ことを特徴とする構成１に記載の情報処理装置。
（構成３）
前記判定手段は、前記ユーザの頭部の移動量が所定範囲内の距離である場合に、前記ユーザが前記所定の動作をしたと判定する
ことを特徴とする構成２に記載の情報処理装置。
（構成４）
前記判定手段は、前記ユーザの頭部の回転量が所定範囲内の角度である場合に、前記ユーザが前記所定の動作をしたと判定する
ことを特徴とする構成２または３に記載の情報処理装置。
（構成５）
前記制御手段は、前記ユーザが前記所定の動作をしたことに応答して、前記制御オブジェクトに対して移動、縮小、透過および非表示のうち少なくともいずれかの表示制御を行う
ことを特徴とする構成１～４のいずれかに記載の情報処理装置。
（構成６）
前記制御手段は、前記ユーザの頭部の移動方向および回転方向の少なくともいずれかに基づいて、前記制御オブジェクトを移動させる方向を決定する
ことを特徴とする構成５に記載の情報処理装置。
（構成７）
前記制御手段は、前記ユーザの頭部の移動量および回転量の少なくともいずれかに基づいて、前記制御オブジェクトを移動させる距離を決定する
ことを特徴とする構成５または６に記載の情報処理装置。
（構成８）
前記制御手段は、前記制御オブジェクトを移動させる方向に他の仮想オブジェクトが存
在する場合、前記制御オブジェクトが前記他の仮想オブジェクトに重ならないように縮小する制御を行う
ことを特徴とする構成５～７のいずれかに記載の情報処理装置。
（構成９）
前記制御手段は、前記制御オブジェクトを所定の縮小率で縮小しても、前記制御オブジェクトが前記他の仮想オブジェクトと重なる場合には、前記制御オブジェクトを透過させるように制御する
ことを特徴とする構成８に記載の情報処理装置。
（構成１０）
オブジェクトの種類と表示制御の種類との対応関係が予め定められており、
前記制御手段は、移動、縮小、透過および非表示のうち前記制御オブジェクトの種類に対応する表示制御を、前記制御オブジェクトに対して行う
ことを特徴とする構成５～９のいずれかに記載の情報処理装置。
（構成１１）
前記制御手段は、前記選択手段により選択された前記制御オブジェクトの強調表示を行うように制御する
ことを特徴とする構成１～１０のいずれかに記載の情報処理装置。
（構成１２）
前記制御手段は、前記選択手段により前記制御オブジェクトが選択されてから、前記制御オブジェクトの表示制御が開始されるまでの間、または前記所定の動作が終了するまでの間、前記制御オブジェクトの強調表示を行うように制御する
ことを特徴とする構成１１に記載の情報処理装置。
（構成１３）
頭部装着型表示装置を装着して視認される仮想オブジェクトの表示を制御する制御手段を有し、
前記頭部装着型表示装置を装着しているユーザが自身の視線位置に存在する仮想オブジェクトの後方を視認するための所定の動作をする前と後とで、当該仮想オブジェクトの表示が異なる
ことを特徴とする情報処理装置。
（構成１４）
構成１～１２のいずれかに記載の情報処理装置と、
前記制御オブジェクトの表示が制御された画像を表示する表示手段と、
を有することを特徴とする頭部装着型表示装置。
（方法）
頭部装着型表示装置を装着しているユーザの視線位置に存在する仮想オブジェクトを制御オブジェクトとして選択するステップと、
前記ユーザが前記制御オブジェクトの後方を視認するための所定の動作をしたか否かを判定するステップと、
前記ユーザが前記所定の動作をしたことに応答して、前記制御オブジェクトの後方が視認できるように前記制御オブジェクトの表示を制御するステップと
を有することを特徴とする情報処理方法。
（プログラム）
コンピュータを、構成１～１３のいずれかに記載の情報処理装置の各手段として機能させるためのプログラム。
（媒体）
コンピュータを、構成１～１３のいずれかに記載の情報処理装置の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。

１００：頭部装着型表示装置（ＨＭＤ）、２１０：視線情報取得部、２１３：動作判定
部、２１５：オブジェクト制御部

Claims (17)

1. 頭部装着型表示装置を装着しているユーザの視線位置に存在する仮想オブジェクトを制御オブジェクトとして選択する選択手段と、
   前記ユーザが前記制御オブジェクトの後方を視認するための所定の動作をしたか否かを判定する判定手段と、
   前記ユーザが前記所定の動作をしたことに応答して、前記制御オブジェクトの後方が視認できるように前記制御オブジェクトの表示を制御する制御手段と
   を有することを特徴とする情報処理装置。
2. 前記判定手段は、前記ユーザの頭部の移動方向、移動量、回転方向および回転量のうち少なくともいずれかに基づいて、前記ユーザが前記所定の動作をしたか否かを判定する
   ことを特徴とする請求項１に記載の情報処理装置。
3. 前記判定手段は、前記ユーザの頭部の移動量が所定範囲内の距離である場合に、前記ユーザが前記所定の動作をしたと判定する
   ことを特徴とする請求項２に記載の情報処理装置。
4. 前記判定手段は、前記ユーザの頭部の回転量が所定範囲内の角度である場合に、前記ユーザが前記所定の動作をしたと判定する
   ことを特徴とする請求項２に記載の情報処理装置。
5. 前記制御手段は、前記ユーザが前記所定の動作をしたことに応答して、前記制御オブジェクトに対して移動、縮小、透過および非表示のうち少なくともいずれかの表示制御を行う
   ことを特徴とする請求項１に記載の情報処理装置。
6. 前記制御手段は、前記ユーザの頭部の移動方向および回転方向の少なくともいずれかに基づいて、前記制御オブジェクトを移動させる方向を決定する
   ことを特徴とする請求項５に記載の情報処理装置。
7. 前記制御手段は、前記ユーザの頭部の移動量および回転量の少なくともいずれかに基づいて、前記制御オブジェクトを移動させる距離を決定する
   ことを特徴とする請求項５に記載の情報処理装置。
8. 前記制御手段は、前記制御オブジェクトを移動させる方向に他の仮想オブジェクトが存在する場合、前記制御オブジェクトが前記他の仮想オブジェクトに重ならないように縮小する制御を行う
   ことを特徴とする請求項５に記載の情報処理装置。
9. 前記制御手段は、前記制御オブジェクトを所定の縮小率で縮小しても、前記制御オブジェクトが前記他の仮想オブジェクトと重なる場合には、前記制御オブジェクトを透過させるように制御する
   ことを特徴とする請求項８に記載の情報処理装置。
10. オブジェクトの種類と表示制御の種類との対応関係が予め定められており、
    前記制御手段は、移動、縮小、透過および非表示のうち前記制御オブジェクトの種類に対応する表示制御を、前記制御オブジェクトに対して行う
    ことを特徴とする請求項５に記載の情報処理装置。
11. 前記制御手段は、前記選択手段により選択された前記制御オブジェクトの強調表示を行うように制御する
    ことを特徴とする請求項１に記載の情報処理装置。
12. 前記制御手段は、前記選択手段により前記制御オブジェクトが選択されてから、前記制御オブジェクトの表示制御が開始されるまでの間、または前記所定の動作が終了するまでの間、前記制御オブジェクトの強調表示を行うように制御する
    ことを特徴とする請求項１１に記載の情報処理装置。
13. 頭部装着型表示装置を装着して視認される仮想オブジェクトの表示を制御する制御手段を有し、
    前記頭部装着型表示装置を装着しているユーザが自身の視線位置に存在する仮想オブジェクトの後方を視認するための所定の動作をする前と後とで、当該仮想オブジェクトの表示が異なる
    ことを特徴とする情報処理装置。
14. 請求項１～１２のいずれか１項に記載の情報処理装置と、
    前記制御オブジェクトの表示が制御された画像を表示する表示手段と、
    を有することを特徴とする頭部装着型表示装置。
15. 頭部装着型表示装置を装着しているユーザの視線位置に存在する仮想オブジェクトを制御オブジェクトとして選択するステップと、
    前記ユーザが前記制御オブジェクトの後方を視認するための所定の動作をしたか否かを判定するステップと、
    前記ユーザが前記所定の動作をしたことに応答して、前記制御オブジェクトの後方が視認できるように前記制御オブジェクトの表示を制御するステップと
    を有することを特徴とする情報処理方法。
16. コンピュータを、請求項１～１３のいずれか１項に記載の情報処理装置の各手段として機能させるためのプログラム。
17. コンピュータを、請求項１～１３のいずれか１項に記載の情報処理装置の各手段として機能させるためのプログラムを格納したコンピュータが読み取り可能な記憶媒体。

Images