JPWO2019044188A1 - 情報処理装置、情報処理方法、及びプログラム - Google Patents

Abstract

【課題】情報処理装置、情報処理方法、及びプログラムを提供する。【解決手段】空間に配置された仮想表示面に立体画像が表示されるように、表示部の表示を制御する表示制御部を備え、前記表示制御部は、ユーザの視点の位置に基づいて、前記空間における前記仮想表示面の配置を制御する、情報処理装置。【選択図】図８

Description

本開示は、情報処理装置、情報処理方法、及びプログラムに関する。

近年、コンテンツを立体的に表示することが可能な立体画像表示技術が普及しつつある。例えばディスプレイ上に右眼用画像及び左眼用画像を水平方向にずらして表示することでユーザに両眼視差を与え、奥行き方向の任意の距離にコンテンツを表示することが可能である。

立体画像表示技術には、専用の眼鏡を装着してディスプレイを見る方式、左右の眼の前に各々異なるディスプレイが配されるような専用の装置を装着する方式に加え、下記特許文献１のようにユーザが眼鏡や装置を装着する必要のない方式も提案されている。

特開２０１５−０１２５６０号公報

しかし、ユーザはディスプレイの枠等の実在する物体を手掛かりとして奥行きを認識してしまうため、ディスプレイの表示面の端近傍に画面より手前に飛び出した部分や奥に引っ込んだ部分が表示されると、立体感の損失や、酔いが生じる恐れがあった。

そこで、本開示では、立体感の損失、または酔いの発生を抑制することが可能な、新規かつ改良された情報処理装置、情報処理方法、及びプログラムを提案する。

本開示によれば、空間に配置された仮想表示面に立体画像が表示されるように、表示部の表示を制御する表示制御部を備え、前記表示制御部は、ユーザの視点の位置に基づいて、前記空間における前記仮想表示面の配置を制御する、情報処理装置が提供される。

また、本開示によれば、プロセッサが、空間に配置された仮想表示面に立体画像が表示されるように、表示部の表示を制御することを含み、前記空間における前記仮想表示面の配置は、ユーザの視点の位置に基づいて制御される、情報処理方法が提供される。

また、本開示によれば、コンピュータに、空間に配置された仮想表示面に立体画像が表示されるように、表示部の表示を制御する表示制御機能を実現させ、前記表示制御機能は、ユーザの視点の位置に基づいて、前記空間における前記仮想表示面の配置を制御する、プログラムが提供される。

以上説明したように本開示によれば、立体感の損失、または酔いの発生を抑制することが可能となる。

なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。

本開示の一実施形態に係る情報処理装置１の構成例を示すブロック図である。 同実施形態に係る表示部２０の一例を示す説明図である。 同実施形態に係る表示部２０の一例を示す説明図である。 同実施形態に係る表示部２０の他の例を示す説明図である。 同実施形態に係る表示部２０の他の例を示す説明図である。 同実施形態に係る表示部２０の他の例を示す説明図である。 表示制御部１０が表示させる仮想表示面ＶＤの一例を示す説明図である。 第１の表示制御例を説明するための説明図である。 第１の表示制御例を説明するための説明図である。 第２の表示制御例を説明するための説明図である。 ステレオコンテンツが有する視差範囲の例を示す説明図である。 第３の表示制御例を説明するための説明図である。 第３の表示制御例を説明するための説明図である。 第４の表示制御例を説明するための説明図である。 第５の表示制御例を説明するための説明図である。 第６の表示制御例を説明するための説明図である。 第６の表示制御例を説明するための説明図である。 第６の表示制御例を説明するための説明図である。 同実施形態に係る表示制御部１０の構成の一例を示すブロック図である。 同実施形態に係る情報処理装置１の動作例を示すフローチャートである。 変形例１に係る表示制御部１０−２の構成例を示すブロック図である。 変形例２を説明するための説明図である。 ハードウェア構成例を示す説明図である。

以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

なお、説明は以下の順序で行うものとする。
＜＜１．概要＞＞
＜１−１．背景＞
＜１−２．概略構成＞
＜＜２．表示部の具体例と基本的な表示制御＞＞
＜＜３．表示制御部の詳細＞＞
＜３−１．仮想表示面に関する表示制御＞
＜３−２．表示制御部の構成例＞
＜＜４．動作例＞＞
＜＜５．変形例＞＞
＜５−１．変形例１＞
＜５−２．変形例２＞
＜５−３．変形例３＞
＜＜６．ハードウェア構成例＞＞
＜＜７．むすび＞＞

＜＜１．概要＞＞
＜１−１．背景＞
本開示の一実施形態についての説明にあたり、まず本開示の一実施形態の創作に至った背景を説明する。

水平方向にずらされた左眼用画像と右眼用画像を含む所謂ステレオコンテンツ（立体画像の一例）をそれぞれユーザの左眼と右眼に観察されるように表示することが行われている。ユーザは、左眼用画像と右眼用画像との間ずれである両眼視差（単に視差と呼ぶ場合もある）により、奥行きを知覚することが可能となる。

ユーザの左眼と右眼にそれぞれ異なる画像（左眼用画像と右眼用画像）を表示させるために、様々な技術が開発されている。例えば、専用の眼鏡を装着してディスプレイを見る方式、左右の眼の前に各々異なるディスプレイが配されるような専用の装置を装着する方式、ユーザが眼鏡や装置を装着することなく左右の眼に異なる画像を表示可能な方式等が存在する。

このようにステレオコンテンツをディスプレイに表示させる場合、画面（ディスプレイの表示面）より手前に飛び出した部分または奥に引っ込んだ部分が画面の端近傍に存在し、画面の端と重なると、立体感の損失や、酔いが生じることが知られている。このような現象は、ユーザが実在するディスプレイの枠（以下、画面枠とも称する）を手掛かりとして奥行きを認識してしまうため、ステレオコンテンツが本来持つ両眼視差が抑制されることで発生する。また、ステレオコンテンツが画面枠に張り付いたように見えることから、このような現象は張り付き効果（または額縁効果）と呼ばれている。

このような張り付き効果の影響を抑制するため、透明なディスプレイを用いることも行われている。しかし、ステレオコンテンツの端部では、ユーザは本来のディスプレイ平面の両眼視差を認識するため、ステレオコンテンツの持つ両眼視差が突然消失したように感じられ、同様な張り付き効果が生じる場合がある。その結果、やはり立体感の損失や、酔いが発生する恐れがあった。

そこで、上記事情を一着眼点にして本実施形態を創作するに至った。本実施形態によれば、空間に配置された仮想的な表示面（仮想表示面）に立体画像が表示されるように、表示を制御することで、張り付き効果の影響を抑制し、立体感の損失、または酔いの発生を抑制することが可能である。以下、本実施形態に係る情報処理装置の構成について説明する。

＜１−２．概略構成＞
図１は、本開示の一実施形態に係る情報処理装置１の構成例を示すブロック図である。図１に示すように、情報処理装置１は、表示制御部１０、表示部２０、センサ部３０、及び記憶部４０を備える。

表示制御部１０は、表示部２０の表示を制御する表示制御機能を有する。より具体的には、表示制御部１０は、仮想空間、または実空間に配置された仮想表示面にステレオコンテンツが表示されるように、表示部２０の表示を制御する。ステレオコンテンツは、例えば記憶部４０から取得されてもよい。仮想表示面については図７等を参照して後述する。

表示部２０は、表示制御部１０の制御に従い、表示を行う。本実施形態に係る表示部２０は、少なくともユーザの左眼と右眼に異なる画像を提示するように立体表示を行うことが可能な表示装置である。本実施形態を適用可能な表示部２０の例については図２〜図６を参照して後述する。

センサ部３０は、ユーザまたは周辺環境に関する各種情報を取得（センシング）する機能を有し、少なくともユーザの視点の位置を検出するためのセンサを含む。センサ部３０は、それ自身がユーザの視点の位置を検出してユーザの視点の位置の情報を表示制御部１０へ出力してもよいし、ユーザの視点の位置を検出するための情報を表示制御部１０へ出力してもよい。

例えば、情報処理装置１が実空間に固定される場合、ユーザの視点の位置を検出するためのセンサは、ユーザ方向を撮像する撮像部であってもよい。また、後述するように情報処理装置１がユーザに装着されて移動する装置である場合、ユーザの視点の位置を検出するためのセンサは、加速度センサ、ジャイロセンサ、方位センサ、撮像部のうちいずれか、または上記の組み合わせであってもよい。
また、センサ部３０は、さらに実空間におけるユーザの視界に相当する領域を撮像するように配置された撮像部を含んでもよい。

記憶部４０は、上述した表示制御部１０が各機能を実行するためのプログラムやパラメータを記憶する。また、記憶部４０には、表示制御部１０が表示させるステレオコンテンツや、仮想空間に関する情報が記憶されていてもよい。

以上、情報処理装置１の概略構成を説明した。なお、図１に示した構成は一例であって、本技術は係る例に限定されない。例えば、表示制御部１０は、情報処理装置１の外部に備えられた表示部の表示を制御してもよい。また、表示制御部１０は、不図示の通信部を介して、他の装置から取得したステレオコンテンツが仮想表示面に表示されるように、表示を制御してもよい。また、情報処理装置１がセンサ部を有していなくてもよく、情報処理装置１の外部に設置されたセンサから、上述した情報が情報処理装置１へ送信されてもよい。

＜＜２．表示部の具体例と基本的な表示制御＞＞
続いて、図１を参照して説明した表示部２０の具体例と、表示制御部１０による基本的な表示制御について、図２〜図７を参照して説明する。

図２、図３は、本実施形態に係る表示部２０の一例を示す説明図である。図２に示すように、表示部２０は、表示部２０の表示面が実空間における水平面に対して垂直になるように固定的に配置されてもよい。係る場合、表示制御部１０は、例えばユーザの視点Ｅから見て反対側、つまり表示部２０の奥側に仮想空間ＶＷを配置し、仮想空間ＶＷを表示部２０に表示させてもよい。図３には、図２に示したユーザの視点Ｅから見たユーザの視界Ｆの一例が示されている。図３に示すように、表示部２０に仮想空間ＶＷが表示されている。仮想空間ＶＷは、窓の向こうに存在するかのように表示されたり、表示部２０の枠を辺とした箱であるかのようにその中身が表示されたりしてもよい。

図４、図５は、本実施形態に係る表示部２０の他の例を示す説明図である。図４に示すように、表示部２０は、表示部２０の表示面が実空間における水平面に対して斜めに（非垂直に）なるように固定的に配置されてもよい。係る場合、表示制御部１０は、図４に示すように表示部２０の表示面と交差するように、つまり表示部２０の手前側と奥側の両方に領域を有するように仮想空間ＶＷを配置し、仮想空間ＶＷを表示部２０に表示させてもよい。図５には、図４に示したユーザの視点Ｅから見たユーザの視界Ｆの一例が示されている。図５に示すように、表示部２０に仮想空間ＶＷが表示されている。

なお、図５では、表示部２０の奥側にのみ仮想空間ＶＷが表示されているが、表示制御部１０は、仮想空間内の表示部２０の手前側に仮想オブジェクトを配置して、表示部２０の手前側に仮想オブジェクトが観察されるように表示させてもよい。また、後述するように、表示制御部１０は、表示部２０の表示面と交差するように仮想オブジェクトを配置してもよい。

図６は、本実施形態に係る表示部２０の他の例を示す説明図である。図６に示す例では、情報処理装置１はユーザに装着される装着型の装置であり、ユーザが情報処理装置１を装着した際に、ユーザの眼前に表示部２０が位置する。図６に示す例において、情報処理装置１は、例えば頭部に装着されるメガネ型のヘッドマウントディスプレイ（ＨＭＤ：Head Mounted Display）であってもよく、係る場合、表示部２０はメガネレンズ部分に相当する。なお、情報処理装置１は、ヘッドバンド型（頭部の全周を回るバンドで装着されるタイプ。側頭部だけでなく頭頂部を通るバンドが設ける場合もある）のＨＭＤや、ヘルメットタイプ（ヘルメットのバイザー部分が表示部２０に相当する）のＨＭＤであってもよい。

図６に示す例において、表示制御部１０は例えばユーザの視点Ｅから見て反対側、つまり表示部２０の奥側に仮想空間ＶＷを配置し、仮想空間ＶＷを表示部２０に表示させてもよい。また、図６に示すように表示部２０はユーザの視界Ｆを覆っていてもよく、係る場合、ユーザは自身が仮想空間ＶＷに存在するかのような没入感を得ることが可能となる。

また、表示制御部１０は、仮想空間ＶＷを実空間に基づいて配置してもよいし、実空間とは独立に配置してもよい。例えば、図６に示したように実空間の壁や床（または地面）と仮想空間ＶＷの壁や床(または地面)を整合させることで、

また、図６に示す例のように、情報処理装置１はユーザに装着される装着型の装置である場合、表示制御部１０は、センサ部３０により取得される情報に基づいて、ユーザの視点の位置を特定し、仮想空間ＶＷが定位するように表示を制御してもよい。仮想空間ＶＷが定位しているような表示の制御方法は周知技術により実現可能であるためここでの詳細な説明は省略する。

表示制御部１０は、図２〜図６に示したような表示部２０に対して配置された仮想空間ＶＷに仮想的な表示面である仮想表示面を配置し、仮想表示面にステレオコンテンツを表示させてもよい。図７は、表示制御部１０が表示させる仮想表示面ＶＤの一例を示す説明図である。なお、図７には、図４、図５を参照して説明したように表示部２０の表示面が実空間における水平面に対して斜めになるように表示部２０が配置された場合を例に示している。

図７に示すように表示部２０が配置された場合、表示制御部１０は、表示部２０の表示面と交差するように仮想表示面ＶＤを配置してもよい。係る構成により、ユーザは、仮想表示面ＶＤについて、飛び出し方向（手前方向）の立体感と引っ込み方向（奥方向）の立体感の両方を得ることが可能となる。その結果、より小さい視差量で十分な立体感を得やすいという効果がある。

仮想表示面ＶＤは、例えば平面的な仮想オブジェクトとして仮想空間ＶＷに配置されてもよい。そして、表示制御部１０は、仮想表示面ＶＤにステレオコンテンツを表示させる。仮想表示面ＶＤは、枠を有しない平面の立体画像表示装置が配置されているかのようにユーザに観察される。このように仮想表示面ＶＤには実在するディプレイとは異なり枠を有しないため、上述した張り付き効果の影響が抑制され、立体感の損失、または酔いの発生を抑制することが可能となる。

なお、上記では、表示部２０の表示面が実空間における水平面に対して斜めになるように表示部２０が配置された場合を例に説明したが、図２、図３、図６を参照して説明したような表示部２０の例においても同様に、表示制御部１０は仮想空間ＶＷに仮想表示面を配置し、仮想表示面にステレオコンテンツを表示させ得る。また、以下においても主に表示部２０の表示面が実空間における水平面に対して斜めになるように表示部２０が配置された場合を例に説明するが、他の場合も同様に適用可能である。

また、図２〜図７では、表示制御部１０が表示部２０に仮想空間ＶＷを表示させる例を示したが、本技術は係る例に限定されない。表示部２０が光学透過性を有する場合、表示制御部１０は、仮想空間ＶＷを表示させなくてもよい。係る場合、表示制御部１０は上述した仮想空間ＶＷの代わりに、実空間に仮想表示面ＶＤを配置し、実空間に仮想表示面ＶＤが存在するかのように表示部２０の表示を制御する。また、後述するセンサ部３０がユーザの視線方向を撮像する撮像部を有する場合、表示制御部１０は、係る撮像部の撮像により取得された画像に基づいて表示部２０に表示させた実空間に仮想表示面ＶＤを配置してもよい。

なお、このように表示制御部１０が実空間に仮想表示面ＶＤを配置する場合、表示部２０は図２、図３に示したように配置されてもよいし、図４、図５に示したように配置されてもよいし、図６に示したように配置されてもよい。表示制御部１０が実空間に仮想表示面ＶＤを配置し、かつ図６に示したように情報処理装置１がＨＭＤである場合、仮想表示面ＶＤの配置が変更されない限り仮想表示面ＶＤが実空間に定位するように表示されてもよい。仮想表示面ＶＤを実空間に定位させるような表示制御は、例えばセンサ部３０により取得される情報に基づいて特定されるユーザの視点の位置を用いて実現される。

＜＜３．表示制御部の詳細＞＞
以上、表示部２０の具体例と表示制御部１０による基本的な表示制御について説明した。上述したように、表示制御部１０は、仮想空間、または実空間に仮想表示面を配置し、当該仮想表示面にステレオコンテンツが表示されるように表示部２０の表示を制御する。

本実施形態に係る表示制御部１０は、仮想表示面ＶＤに関するさらなる表示制御（仮想表示面ＶＤに表示されるステレオコンテンツに基づく表示制御を含む）を行うことで、より立体感を高めたり、酔いの発生を抑制したりする効果を得ることが可能である。以下、表示制御部１０による仮想表示面に関する表示制御の幾つかの例と、係る表示制御を実現するための表示制御部１０の構成の一例について説明する。

なお、以下では主に、図３、図４、図７に示した例と同様に、表示部２０の表示面が実空間における水平面に対して斜めになるように表示部２０が配置された場合を例に説明を行う。ただし、特に言及しない限り、図２、図３、図６を参照して説明したような表示部２０の例においても同様に以下に説明する表示制御は適用可能である。また、以下では、表示制御部１０が仮想空間ＶＷを表示させ、仮想空間ＶＷに仮想表示面ＶＤが配置される例を主に説明し、実空間に仮想表示面が配置される例については変形例として後述する。

また、以下に説明する仮想表示面に関する表示制御例は、全てが同時に実現されなくてもよく、表示制御部１０は、以下に説明する表示制御例のうち、いくつかの表示制御を行うための機能を有していなくてもよい。

＜３−１．仮想表示面に関する表示制御例＞
（第１の表示制御例）
まず、仮想表示面に関する第１の表示制御例（以下単に第１の表示制御例とも称する）について説明する。実空間に固定された固定ディスプレイにステレオコンテンツが表示される場合、ユーザが快適に観察可能な範囲は限られている。例えば、ユーザは固定ディスプレイの正面から観察するとステレオコンテンツの持つ立体感を正しく感じ、快適に観察することが可能であるが、正面からずれた位置から観察すると歪んだ両眼視差や、逆視で観察してしまう場合があり、疲労や酔いが生じる恐れがある。

仮想表示面ＶＤが実空間に固定的に配置されると、上記と同様の問題が生じ得る。例えば、図２〜図５に示したように実空間に固定的に配置された表示部２０に対する仮想表示面ＶＤの配置が固定される場合、または図６に示した例において、仮想表示面ＶＤが定位するように表示される場合、仮想表示面ＶＤは実空間に固定的に配置される。

そこで、表示制御部１０は、ユーザの視点の位置に基づいて、仮想空間ＶＷにおける仮想表示面ＶＤの配置を制御してもよい。なお、本明細書において「仮想表示面の配置を制御する」とは仮想表示面が配置された空間における仮想表示面の位置、姿勢（角度）、大きさのうち少なくともいずれか一つを制御することを含む。

以下では、第１の表示制御例として、表示制御部１０がユーザの視点と仮想表示面ＶＤの中心点とを結んだ直線（以下、ユーザの視線と呼ぶ）が、仮想表示面との関係に係る所定の条件を満たすように、仮想表示面ＶＤの配置を制御する例を説明する。図８、図９は、第１の表示制御例を説明するための説明図である。なお、図８以降では、見易さを優先するため仮想空間ＶＷを示すハッチングを省略している。

ユーザの視線と仮想表示面ＶＤとの関係に係る所定の条件は、ユーザの視線と仮想表示面ＶＤとがなす角に関する条件であってもよい。例えば、図８に示す例において、表示制御部１０は、ユーザの視点Ｅと仮想表示面ＶＤの中心点ＶＤＣとを結んだ直線と仮想表示面ＶＤとがなす角が垂直であるという条件を満たすように、仮想表示面ＶＤの姿勢を制御する。

図８は、図４に示した例と同様に、横方向から表示部２０を見た図である。図８に示すように、ある時刻Ｔ１１において、ユーザの視線Ｇ１１と仮想表示面ＶＤは垂直である。ユーザの視点Ｅの位置が変化した場合、仮想表示面ＶＤはユーザの視点Ｅの位置に応じて回転し、図８に示す時刻Ｔ１２において、ユーザの視線Ｇ１２と垂直になるように仮想表示面ＶＤが配置される。つまり、表示制御部１０は、実空間における水平方向のユーザの視点移動に応じて、ユーザの視線に対して垂直になるように仮想表示面ＶＤの姿勢（角度）を制御する（回転させる）。

図９は、真上から、つまり図８に示すＹ軸方向の逆向きに表示部２０を見た平面図である。図９に示すように、ある時刻Ｔ１３において、ユーザの視線Ｇ１３と仮想表示面ＶＤは垂直である。ユーザの視点Ｅの位置が変化した場合、仮想表示面ＶＤはユーザの視点Ｅの位置に応じて回転し、図９に示す時刻Ｔ１４において、時ユーザの視線Ｇ１２と垂直になるように仮想表示面ＶＤが配置される。つまり、表示制御部１０は、実空間における垂直方向のユーザの視点移動に応じて、ユーザの視線に対して垂直になるように仮想表示面ＶＤの姿勢を制御する（回転させる）。

上述第１の表示制御例により、ユーザは常にユーザに対して正対するように動く立体表示装置が仮想空間に存在するかのように感じられる。つまり、上述したように仮想表示面ＶＤの姿勢が制御されることで、ユーザは常に仮想表示面ＶＤの正面からステレオコンテンツを観察した状態となり、常に快適にステレオコンテンツを観察することが可能となる。

なお、上記では、ユーザの視線と仮想表示面ＶＤとがなす角が垂直になるように仮想表示面ＶＤの姿勢が制御される例を説明したが、本実施形態は係る例に限定されない。例えば、仮想表示面ＶＤはユーザの視線と常に垂直でなくてもよく、仮想表示面ＶＤとユーザの視線とがなす角は垂直を含む所定の範囲内であってもよい。係る場合、例えば所定の条件は、ユーザの視線と仮想表示面ＶＤとがなす角が垂直を含む所定の範囲内であることであってもよい。さらに、係る場合、表示制御部１０は、ユーザの視線と仮想表示面ＶＤとがなす角が所定の範囲内に収まっている間に、仮想表示面ＶＤの姿勢を変更しなくてもよい。係る構成により、例えば仮想表示面ＶＤの姿勢が頻繁に変化する事による違和感が軽減され得る。

また、表示制御部１０は、所定の条件を満たすため、仮想表示面ＶＤの姿勢を制御することに代えて、仮想表示面ＶＤの位置または大きさを制御してもよい。例えば、表示制御部１０は、仮想表示面ＶＤの位置を移動させることで、ユーザの視線と仮想表示面ＶＤとがなす角を垂直に保つこと可能である。また、表示制御部１０は、仮想表示面ＶＤの位置の制御、姿勢の制御、及び大きさの制御のうち複数の制御を組み合わせて、所定の条件を満たすようにしてもよい。

（第２の表示制御例）
続いて、仮想表示面に関する第２の表示制御例（以下単に第２の表示制御例とも称する）について説明する。上述したように仮想空間ＶＷに配置された仮想表示面ＶＤにステレオコンテンツを表示することで、画面枠の存在に伴う張り付き効果を抑制することが可能である。ただし、ステレオコンテンツの端部における両眼視差の急激な消失に伴う張り付き効果が発生する恐れがある。

そこで、表示制御部１０は、ステレオコンテンツの周縁部の透明度が、ステレオコンテンツの中心部の透明度よりも高くなるように、ステレオコンテンツの透明度を制御してもよい。さらに表示制御部１０は、ステレオコンテンツの端部に近い程、透明度が高くなるように、ステレオコンテンツの透明度を制御してもよい。係る例について、第２の表示制御例として、図１０を参照して説明する。図１０は、第２の表示制御例を説明するための説明図である。

表示制御部１０は、例えば図１０に示すようなステレオコンテンツＣ２１に対して周縁部の透明度が中心部の透明度よりも高くなるような透明度の制御を施し、ステレオコンテンツＣ２２を透明な仮想表示面ＶＤに表示させる。図１０に示すステレオコンテンツＣ２２の周縁部Ｃ２２１は、ステレオコンテンツＣ２２の中心部よりも透明度が高く、さらにステレオコンテンツＣ２２の端部に近い程、透明度が高い。係る透明度の変化は、線形であってもよいし、非線形であってもよい。

仮想表示面ＶＤが仮想空間ＶＷに配置される場合、表示制御部１０は、前景であるステレオコンテンツと背景である仮想空間ＶＷとを透明度に応じたα値による混合（アルファブレンディング）して仮想空間ＶＷと合成を行うことで、透明度を表示に反映してもよい。

上述した第２の表示制御により、ユーザはステレオコンテンツの端部で両眼視差が急激に消失しているように感じ難くなり、立体感の損失、または酔いの発生をより抑制することが可能である。

（第３の表示制御例）
続いて、仮想表示面に関する第３の表示制御例（以下単に第３の表示制御例とも称する）について説明する。多様なステレオコンテンツを表示しようとする場合、当該ステレオコンテンツが有する視差の範囲も多様である。図１１は、ステレオコンテンツが有する視差範囲の例を示す説明図である。

図１１に示すパターンＰ３１の例では、仮想表示面ＶＤに視差範囲Ｒ３１を有するステレオコンテンツＣ３１が表示されている。視差範囲Ｒ３１は、仮想表示面ＶＤの位置に対して、飛び出し方向に大きな視差を含むため、図１１に示すパターンＰ３１の例では飛び出し方向にステレオコンテンツＣ３１の一部領域Ｃ３１１が仮想空間ＶＷからはみ出ている。

また、図１１に示すパターンＰ３２の例では、仮想表示面ＶＤに視差範囲Ｒ３２を有するステレオコンテンツＣ３２が表示されている。視差範囲Ｒ３２は、仮想表示面ＶＤの位置に対して、引っ込み方向に大きな視差を含むため、図１１に示すパターンＰ３２の例では引っ込み方向にステレオコンテンツＣ３２の一部領域Ｃ３２１が仮想空間ＶＷからはみ出ている。

また、図１１に示すパターンＰ３３では、仮想表示面ＶＤに視差範囲Ｒ３３を有するステレオコンテンツＣ３３が表示されている。視差範囲Ｒ３３は、仮想表示面ＶＤの位置に対して、飛び出し方向、及び引っ込み方向の両方に大きな視差を含むため、図１１に示すパターンＰ３３の例では飛び出し方向、及び引っ込み方向の両方にそれぞれステレオコンテンツＣ３２の一部領域Ｃ３３１と一部領域Ｃ３３２が仮想空間ＶＷからはみ出ている。

このように飛び出し方向、引っ込み方向、またはその両方の視差が大きすぎる場合、仮想空間ＶＷに配置された仮想表示面ＶＤにステレオコンテンツを正常に表示させることが出来ない恐れがある。特に、表示部２０からの飛び出し量、引っ込み量、またはそれらの合計が大きすぎる場合に、視認性、立体感、または仮想空間ＶＷへの定位感の低下が発生する恐れがある。

そこで、表示制御部１０は、ステレオコンテンツが有する視差範囲（視差情報の一例）に基づいて仮想表示面ＶＤの配置を制御してもよい。係る例について、第３の表示制御例として、図１２、図１３を参照して説明する。図１２、図１３は、第３の表示制御例を説明するための説明図である。

図１２には、図１１に示したステレオコンテンツＣ３１が表示されるパターンＰ３１が示されている。図１２に示すパターンＰ３４において、表示制御部１０は、仮想表示面ＶＤの位置を表示部２０の奥側方向へ移動させる制御により、適正な配置を実現する。表示制御部１０は、例えばパターンＰ３４のように仮想空間ＶＷにステレオコンテンツＣ３１の視差範囲Ｒ３１が収まるように仮想表示面ＶＤの位置を制御してもよい。また、表示制御部１０は、視差範囲から特定される表示部２０からの飛び出し量、引っ込み量、及び飛び出し量と引っ込み量の合計、のうちいずれかが所定の範囲に収まるように、仮想表示面ＶＤの位置を制御してもよい。

なお、図示しないが、図１１に示したパターンＰ３２の場合、表示制御部１０は、例えば、仮想表示面ＶＤの位置を表示部２０の手前方向へ移動させる制御により、適正な配置を実現してもよい。

図１３には、図１１に示したステレオコンテンツＣ３３が表示されるパターンＰ３３が示されている。ステレオコンテンツＣ３３が有する視差範囲Ｒ３３は仮想表示面ＶＤの位置に対して、引っ込み方向に大きな視差を含むため、仮想表示面ＶＤを移動させるだけでは、適正に仮想表示面ＶＤを配置することが困難である。そこで、表示制御部１０は、図１３に示すパターンＰ３５のように、仮想表示面ＶＤの大きさを小さくする制御により、適正な配置を実現する。

表示制御部１０は、例えばパターンＰ３５のように仮想表示面ＶＤに表示されたステレオコンテンツＣ３３の視差範囲Ｒ３５が仮想空間ＶＷに収まるように仮想表示面ＶＤの大きさを制御してもよい。また、表示制御部１０は、視差範囲から特定される表示部２０からの飛び出し量、引っ込み量、及び飛び出し量と引っ込み量の合計、のうちいずれかが所定の範囲に収まるように、仮想表示面ＶＤの大きさを制御してもよい。なお、図１３に示すように仮想表示面ＶＤの大きさの変化に伴い、仮想表示面ＶＤに表示されたステレオコンテンツＣ３３の視差範囲も変化し得る。

上述した第３の表示制御により、ステレオコンテンツを適正な配置で表示させることが可能である。

（第４の表示制御例）
続いて、仮想表示面に関する第４の表示制御例（以下単に第４の表示制御例とも称する）について説明する。仮想空間ＶＷに仮想表示面ＶＤが配置される場合、仮想空間ＶＷと仮想表示面ＶＤに表示されるステレオコンテンツとの輝度差によっては境界が明確に認識されてしまい、同一空間に存在しているような実在感が低下する恐れがある。

そこで、表示制御部１０は、ステレオコンテンツの色情報に基づいて、仮想表示面ＶＤの周囲の色を制御してもよい。係る例について、第４の表示制御例として、図１４を参照して説明する。図１４は、第４の表示制御例を説明するための説明図である。

表示制御部１０は、例えば図１４に示すようなステレオコンテンツＣ４１の色情報に基づいて、仮想表示面ＶＤの周囲にフレアのような効果ＶＥ４１を表示させる。効果ＶＥ４１の色は、ステレオコンテンツＣ４１の色情報に基づいて決定されてもよく、ステレオコンテンツＣ４１と近い色、またはステレオコンテンツＣ４１とつながって見えるような色であってもよい。例えば、例えばステレオコンテンツＣ４１の主要な背景色、ステレオコンテンツＣ４１から推定された照明光色、あるいはステレオコンテンツＣ４１の端部の色が効果ＶＥ４１の色として用いられてもよい。また、図１４に示す効果ＶＥ４１の周縁部ＶＥ４１１のように外側端部に近い程、透明度を高くするように効果ＶＥ４１を表示させることで、空間との繋がりがより自然に表現される。

なお、仮想空間ＶＷに仮想表示面ＶＤが配置される場合、表示制御部１０はフレアのような効果を表示させる代わりに、ＣＧ（Computer Graphics）技法を用いて仮想表示面ＶＤの周囲の色を制御してもよい。例えば、表示制御部１０は仮想空間ＶＷの描画に使用する照明光の色をステレオコンテンツの色情報に基づいて制御することで、仮想表示面ＶＤの周囲の色を制御してもよい。

上述した第４の表示制御により、空間とステレオコンテンツとの繋がりが自然に表現され、同一空間に存在しているような実在感が得られる。

（第５の表示制御例）
続いて、仮想表示面に関する第５の表示制御例（以下単に第５の表示制御例とも称する）について説明する。仮想表示面ＶＤに表示させるステレオコンテンツの背景が平坦な場合、両眼視差の手掛かりが乏しくなり、係る領域の視差変化をユーザが感じにくくなるため、空間に平面が存在するように知覚され、ステレオコンテンツの奥行き感が損なわれる恐れがある。

そこで、表示制御部１０は、ステレオコンテンツから平坦な背景領域を検出し、当該平坦な背景領域の透明度がステレオコンテンツにおける他の領域の透明度よりも高くなるように、ステレオコンテンツの透明度を制御してもよい。係る例について、第５の表示制御例として、図１５を参照して説明する。図１５は、第５の表示制御例を説明するための説明図である。

図１５のパターンＰ５１に示すように、仮想空間ＶＷに配置された仮想表示面ＶＤにステレオコンテンツＣ５１が表示される例について考える。係る場合、表示制御部１０は、パターンＰ５２に示すように平坦な背景領域Ｃ５２１の透明度が、前景領域Ｃ５５２（他の領域）が透明度よりも高くなるような制御を施したステレオコンテンツＣ５２を仮想表示面ＶＤに表示させる。平坦な背景領域Ｃ５２１は、例えばステレオコンテンツＣ５１から検出される視差に基づいて特定され得る。

上述した第５の表示制御により、平坦な背景領域の透明度が高くなることで、更に奥の背景となる仮想空間ＶＷが認識され、背景領域を平面として認識し難くなる。その結果、ステレオコンテンツの前景領域が同一空間に存在しているような実在感が得られる。

（第６の表示制御例）
続いて、仮想表示面に関する第６の表示制御例（以下単に第６の表示制御例とも称する）について説明する。表示制御部１０は、さらにステレオコンテンツの実在感を高めるため、ステレオコンテンツに基づいて仮想的な影（仮想影）を表示させてもよい。例えば、表示制御部１０はステレオコンテンツから特定される前景領域と空間とに基づいて、当該前景領域に対応する仮想影を表示させてもよい。係る例について、第６の表示制御例として、図１６〜図１８を参照して説明する。図１６〜図１８は、第６の表示制御例を説明するための説明図である。

図１６に示すようなステレオコンテンツＣ６１を表示させる場合、表示制御部１０は、ステレオコンテンツＣ６１の視差検出等により、図１６に示すような奥行きマップＤＭ６１を生成する。さらに、図１６に示すように、表示制御部１０は、奥行きマップＤＭ６１から前景領域ＦＲを特定し、影生成用画像ＦＰ６１を生成する。影生成用画像ＦＰ６１において前景領域ＦＲ以外の領域は透明であってもよい。

表示制御部１０は、影生成用画像ＦＰ６１を射影変換することにより前景領域ＦＲを変形させて生成（描画）した仮想影を表示させてもよい。また、表示制御部１０は、図１７に示すように仮想空間ＶＷに影生成用画像ＦＰ６１と仮想的な光源Ｌを配置して、ＣＧ技法のシャドウマッピングを用いて仮想影ＶＳを生成（描画）してもよい。なお、影生成用画像ＦＰ６１の配置は、例えば仮想表示面ＶＤの配置と同一の配置、または仮想表示面ＶＤの配置に応じた配置であることが望ましい。そして、図１８に示すように、表示制御部１０は、仮想空間ＶＷに配置された仮想表示面ＶＤにステレオコンテンツＣ６１を表示させると共に、生成（描画）した仮想影ＶＳを、表示させる。係る構成により仮想空間ＶＷの床平面に、ステレオコンテンツＣ６１の前景領域に対応する仮想影ＶＳが表示される。

上述した第６の表示制御により、ステレオコンテンツに含まれる前景物体が同一空間に存在しているかのような実在感を高めることが可能である。

なお、上記では、仮想空間ＶＷに基づき、仮想空間ＶＷの床に存在するように仮想影ＶＳを表示させる例を示したが、係る例に限定されない。仮想空間ＶＷの面ではなく空中に影が表示されてもよい。

（第７の表示制御例）
続いて、仮想表示面に関する第７の表示制御例（以下単に第７の表示制御例とも称する）について説明する。表示部２０の表示領域から仮想表示面ＶＤがはみ出してしまうと、張り付き効果が生じてしまうため、仮想表示面ＶＤは、立体感を損なわないために表示部２０の表示領域にその全体が含まれることが望ましい。しかし、仮想表示面ＶＤが表示領域から仮想表示面ＶＤがはみ出してしまう場合がある。そこで、表示制御部１０は、表示部２０の表示範囲に仮想表示面ＶＤの全体が含まれるように、仮想表示面ＶＤの位置または仮想表示面ＶＤの大きさを制御してもよい。

例えば、図６を参照して説明したように、表示部２０がユーザに装着された装置の表示部である場合、表示制御部１０は、仮想表示面ＶＤの配置が変更されない限りユーザの視点移動に応じて仮想表示面ＶＤが定位するように表示させる。そのため、仮想表示面ＶＤの配置が変更されない場合、仮想表示面ＶＤに対してユーザの視点が近づき過ぎると、表示部２０の表示領域に仮想表示面ＶＤの全体が含まれなくなってしまう恐れがある。そこで、表示制御部１０は、ユーザの視点の位置に基づいて、表示部２０の表示範囲に仮想表示面ＶＤの全体が含まれるように、仮想表示面ＶＤの位置または仮想表示面ＶＤの大きさを制御してもよい。

また、表示部２０が実空間に対して固定的に配置される場合であっても、第７の表示制御例は有効である。例えば、表示制御部１０が上述した他の表示制御例で説明したように仮想表示面ＶＤの配置を制御しようとした場合に、仮想表示面ＶＤの全体が表示部２０の表示範囲に含まれなくなってしまう恐れがある。係る場合には、表示制御部１０は、第７の表示制御例に係る表示制御を優先し、表示部２０の表示範囲に仮想表示面ＶＤの全体が含まれるように、仮想表示面ＶＤの位置または仮想表示面ＶＤの大きさを制御してもよい。

上述した第７の表示制御により、表示部２０の表示範囲に仮想表示面ＶＤの全体が含まれるように、仮想表示面ＶＤの位置または仮想表示面ＶＤの大きさを制御され、張り付き効果の発生を抑制することが可能である。

＜３−２．表示制御部の構成例＞
以上、仮想表示面に関する表示制御例について説明した。続いて、上述した仮想表示面に関する表示制御例を実現可能な表示制御部１０の構成の一例について図１９を参照して説明する。図１９は、表示制御部１０の構成の一例を示すブロック図である。

図１９に示すように、表示制御部１０は、視差検出部１１、配置制御部１２、平坦検出部１３、透明度制御部１４、色抽出部１５、前景領域特定部１６、及び描画部１８の機能を有する。

視差検出部１１は、例えばステレオコンテンツに含まれる左眼用画像と右眼用画像とのステレオマッチング等を行い、ステレオコンテンツの視差を検出する。また視差検出部１１は、検出された視差に関する視差情報を配置制御部１２、平坦検出部１３、及び前景領域特定部１６へ出力する。

配置制御部１２は、描画部１８が描画する仮想表示面の配置を制御する。配置制御部１２は、例えば上述した第１の表示制御例、第３の表示制御例、及び第７の表示制御例が実現されるように仮想表示面の配置を制御する。例えば、配置制御部１２は、センサ部３０から提供されるユーザの視点の位置の情報に基づいて、第１の制御例や第７の制御例のような配置制御を実現する。また、配置制御部１２は、視差検出部１１により検出された視差範囲（視差情報の一例）に基づいて第３の表示制御例のような配置制御を実現する。

平坦検出部１３は、ステレオコンテンツから平坦な背景領域を検出し、透明度制御部１４へ出力する。平坦検出部１３は、例えば視差検出部１１により検出された視差に基づいて、視差変化の小さい領域を平坦な背景領域として検出してもよい。

透明度制御部１４は、仮想表示面に表示されるステレオコンテンツの透明度を制御する。図１９に示すように、透明度制御部１４は、周縁透明度制御部１４２と、背景透明度制御部１４４として機能し得る。

周縁透明度制御部１４２は、上述した第２の表示制御例が実現されるように、ステレオコンテンツの周縁部の透明度を制御する。例えば、周縁透明度制御部１４２は、ステレオコンテンツの端部に近い程、透明度が高くなるようにステレオコンテンツの透明度を制御する。

背景透明度制御部１４４は、上述した第５の表示制御例が実現されるように、平坦検出部１３により検出された平坦な背景領域の透明度が、ステレオコンテンツの他の領域の透明度よりも高くなるように、ステレオコンテンツの透明度を制御する。

色抽出部１５は、ステレオコンテンツからステレオコンテンツの色情報を抽出し、描画部１８へ出力する。ステレオコンテンツの色情報は、例えばステレオコンテンツの主要な背景色、ステレオコンテンツから推定された照明光色、あるいはステレオコンテンツの端部の色の輝度や彩度等の情報であってもよい。

前景領域特定部１６は、ステレオコンテンツから前景領域を特定する。例えば、前景領域特定部１６は、図１６を参照して説明したように、視差検出部１１から提供される視差情報に基づく奥行きマップから前景領域を特定してもよい。なお、前景領域特定部１６による前景領域の特定方法は上述した例に限定されず、例えば周知の物体検出手法により検出された物体の領域が前景領域として特定されてもよい。

描画部１８は、図１９に示すように仮想空間描画部１８２、仮想影描画部１８４、及び仮想表示面描画部１８６として機能し、それぞれ表示部２０に表示される仮想空間、仮想影、及び仮想表示面を描画する。

仮想空間描画部１８２は、上述した第４の表示制御例が実現されるように、色抽出部１５から提供される色情報に基づいて仮想空間を描画してもよい。

仮想影描画部１８４は、上述した第６の表示制御例が実現されるように、前景領域特定部１６により特定された前景領域に基づいて、仮想影を描画する。また、前景領域特定部１６は、仮想空間描画部１８２により描画された仮想空間にさらに基づいて仮想影を描画してもよい。

仮想表示面描画部１８６は、配置制御部１２の制御に従って仮想表示面を仮想空間に配置し、仮想表示面にステレオコンテンツを描画する。係る構成により、上述した第１の表示制御例、第２の表示制御例、及び第７の表示制御例が実現される。また、仮想表示面描画部１８６が描画するステレオコンテンツの透明度は透明度制御部１４により制御される。係る構成により、上述した第３の表示制御例、第５の表示制御例が実現される。

以上、上述した表示制御例を実現し得る表示制御部１０の構成の一例について説明した。なお、図１９に示したのは一例であり、表示制御部１０は図１９に示した全ての機能を有していなくてもよい。例えば、上述した表示制御例のうち、一部が実現されない場合、表示制御部１０は係る表示制御例を実現するための機能を有していなくてもよい。

＜＜４．動作例＞＞
続いて、本実施形態に係る情報処理装置１の動作例について図２０を参照して説明する。図２０は、本実施形態に係る情報処理装置１の動作例を示すフローチャートである。

まず、図２０に示すように、センサ部３０がユーザの視点の位置を検出する（Ｓ１０２）。続いて、表示制御部１０の視差検出部１１がステレオコンテンツから視差を検出して視差情報を取得する（Ｓ１０４）。続いて、表示制御部１０の配置制御部１２が、ユーザの視点の位置、及び視差情報に基づいて仮想表示面の配置を制御する（Ｓ１０６）。

続いて、表示制御部１０の平坦検出部１３が視差情報に基づいてステレオコンテンツから平坦な背景領域を検出する（Ｓ１０８）。続いて、表示制御部１０の透明度制御部１４がステレオコンテンツの透明度を制御する（Ｓ１１０）。続いて、表示制御部１０の色抽出部１５がステレオコンテンツから色情報を抽出する（Ｓ１１１）。続いて、表示制御部１０の前景領域特定部１６が視差情報に基づいてステレオコンテンツから前景領域を特定する（Ｓ１１２）。

続いて、表示制御部１０の描画部１８により、仮想空間、仮想影、及び仮想表示面が描画される（Ｓ１１４〜Ｓ１１８）。まず、ステップＳ１１４において、描画部１８の仮想空間描画部１８２がステップＳ１１１で抽出された色情報に基づき仮想空間を描画する。

続いて、ステップＳ１１６において、描画部１８の仮想影描画部１８４がステップＳ１１２で検出された前景領域と、ステップＳ１１４で描画された仮想空間に基づき仮想影を描画する。

続いて、ステップＳ１１８において、描画部１８の仮想表示面描画部１８６がステップ１０６における配置制御に従い仮想表示面を配置し、ステップＳ１１０におけるステレオコンテンツの透明度の制御に従ってステレオコンテンツを仮想表示面に描画する。

そして描画部１８により描画された仮想空間、仮想影、及びステレオコンテンツが表示部２０に表示される（Ｓ１２０）。

＜＜５．変形例＞＞
以上、本開示の一実施形態を説明した。以下では、本開示の一実施形態の幾つかの変形例を説明する。なお、以下に説明する各変形例は、単独で本開示の実施形態に適用されてもよいし、組み合わせで本開示の実施形態に適用されてもよい。また、各変形例は、本開示の実施形態で説明した構成に代えて適用されてもよいし、本開示の実施形態で説明した構成に対して追加的に適用されてもよい。

＜５−１．変形例１＞
上記では、表示制御部１０が仮想空間に仮想表示面を配置する場合について主に説明しが、上述したように表示制御部は、実空間に仮想表示面を配置してもよい。係る例について変形例１として説明する。また、変形例１に係る表示制御部を表示制御部１０−２とし、表示制御部１０−２の構成例について図２１を参照して説明する。図２１は、変形例１に係る表示制御部１０−２の構成例を示すブロック図である。

なお、図２１に示す表示制御部１０−２の構成のうち、図１９に示した表示制御部１０と同様の構成については同一の符号を付しているため、説明を省略する。表示制御部１０−２は、描画部１９の機能が描画部１８の機能と異なる点において図１９に示した表示制御部１０と異なる。描画部１９は、図２１に示すように仮想影描画部１９４、及び仮想表示面描画部１９６として機能する。

ここで、図２１に示す表示制御部１０−２は、図１９に示した表示制御部１０と同様に、上述した第１の表示制御例〜第７の表示制御例を実現するための構成例である。ただし、本変形例では、仮想空間の代わりに実空間に仮想表示面が配置される。

そのため、第６の表示制御例における仮想影の描画方法、第２の表示制御例、第５の表示制御例におけるステレオコンテンツの透明度を空間に反映させるための描画方法が異なる。一方で、上述した第１の表示制御例、第２の表示制御例、及び第７の表示制御例は、空間に依らない制御である。

仮想影描画部１９４は、上述した仮想影描画部１８４と同様に、上述した第６の表示制御例が実現されるように、前景領域特定部１６により特定された前景領域に基づいて、仮想影を描画する。ただし、仮想影描画部１９４は、実空間にさらに基づいて仮想影を描画してもよい。例えば、仮想影描画部１９４は、センサ部３０により取得される実空間の情報（例えば撮像により得られた画像）に基づいて、実空間における床や地面、壁などに仮想影が存在するかのように仮想影を描画してもよい。

仮想表示面描画部１９６は、上述した仮想表示面描画部１８６と同様に、配置制御部１２の制御に従って仮想表示面を仮想空間に配置し、仮想表示面にステレオコンテンツを描画する。係る構成により、上述した第１の表示制御例、第２の表示制御例、及び第７の表示制御例が実現される。また、仮想表示面描画部１９６が描画するステレオコンテンツの透明度は透明度制御部１４により制御される。

本変形例では、第２の表示制御例、第５の表示制御例における透明度の制御は輝度や彩度のレベルの制御であってもよく、仮想表示面描画部１９６は、透明度制御部１４の透明度の制御に応じた輝度や彩度でステレオコンテンツを仮想表示面に描画してもよい。

また、図示していないが、描画部１９は上述した第４の表示制御例を実現するため、色抽出部１５が抽出した色情報に基づき、図１４に示したフレアのような効果を描画する機能を有してもよい。

上述したように、仮想表示面が実空間に配置される場合であっても、第１の表示制御例〜第７の表示制御例が実現される。

＜５−２．変形例２＞
表示部２０が実空間に固定的に配置される場合には、ユーザの視点の位置に基づいて、ユーザから見える正しい視点画像を描画することが望ましい。係る描画を行うことにより、仮想空間が定位しているようにユーザに見せることが可能である。係る例について変形例２として、図２２を参照して説明する。図２２は、変形例２を説明するための説明図である。

本変形例に係る表示制御部は、図２２に示すように、ユーザの視点の位置を仮想視点として仮想カメラＶＣを仮想的に設置し、例えば上述した仮想空間ＶＷや仮想表示面ＶＤに係る描画を行って当該仮想視点での視点画像を取得する。本変形例に係る表示制御部は、ユーザの姿勢（顔の向き、または視線方向）に基づいて仮想カメラＶＣの方向を設定してもよいし、仮想カメラが仮想表示面ＶＤに向くように仮想カメラＶＣの方向を設定してもよい。

続いて、本変形例に係る表示制御部は、仮想カメラＶＣと同一の位置、方向で仮想プロジェクタＶＰを仮想的に配置し、仮想プロジェクタＶＰから、仮想的に設置した表示部２０の仮想表面ＶＦ上に、視点画像を投影する。ここで、仮想プロジェクタＶＰは、仮想カメラＶＣと同一のパラメータ（例えば焦点距離パラメータ、歪みパラメータ等）で視点画像を投影してもよい。

さらに、本変形例に係る表示制御部は、仮想表面ＶＦ上に投影されて生成された画像を正射影して、表示画像ＤＰを取得する。表示画像ＤＰは、現在のユーザの視点の位置以外から見ると歪んだ画像となるが、現在のユーザの視点の位置から見ると正常な画像として知覚される。

図２２では１視点分の処理しか示していないが、本変形例に係る表示制御部は、左眼、及び右眼の２視点分の視点において上記の処理を行い、左眼用の表示画像、及び右眼用の表示画像を取得する。

上述した変形例２によれば、仮想空間が定位しているようにユーザに見せることが可能である。なお、実空間に仮想表示面が配置される場合も同様に変形例２は適用可能である。

＜５−３．変形例３＞
上記実施形態では、立体画像として左眼用画像と右眼用画像を含むステレオコンテンツが用いられる例を説明したが、本技術は係る例に限定されない。例えば、立体画像は、２次元画像と視差画像とを含む画像であってもよいし、２次元画像と距離画像とを含む画像であってもよい。なお、立体画像が視差画像や距離画像を含む場合には、視差情報は視差画像や距離画像から取得され得る。

＜＜６．ハードウェア構成例＞＞
以上、本開示の実施形態を説明した。最後に、図２３を参照して、本開示の実施形態に係る情報処理装置のハードウェア構成について説明する。図２３は、本開示の実施形態に係る情報処理装置１のハードウェア構成の一例を示すブロック図である。本開示の実施形態に係る情報処理装置１による情報処理は、ソフトウェアと、以下に説明するハードウェアとの協働により実現される。

図２３に示すように、情報処理装置１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）９０１、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）９０２、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）９０３及びホストバス９０４ａを備える。また、情報処理装置１は、ブリッジ９０４、外部バス９０４ｂ、インタフェース９０５、入力装置９０６、出力装置９０７、ストレージ装置９０８、ドライブ９０９、接続ポート９１１、通信装置９１３、及びセンサ９１５を備える。情報処理装置１は、ＣＰＵ９０１に代えて、又はこれとともに、ＤＳＰ若しくはＡＳＩＣ等の処理回路を有してもよい。

ＣＰＵ９０１は、演算処理装置および制御装置として機能し、各種プログラムに従って情報処理装置１内の動作全般を制御する。また、ＣＰＵ９０１は、マイクロプロセッサであってもよい。ＲＯＭ９０２は、ＣＰＵ９０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ９０３は、ＣＰＵ９０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。ＣＰＵ９０１は、例えば、表示制御部１０を形成し得る。

ＣＰＵ９０１、ＲＯＭ９０２及びＲＡＭ９０３は、ＣＰＵバスなどを含むホストバス９０４ａにより相互に接続されている。ホストバス９０４ａは、ブリッジ９０４を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス９０４ｂに接続されている。なお、必ずしもホストバス９０４ａ、ブリッジ９０４および外部バス９０４ｂを分離構成する必要はなく、１つのバスにこれらの機能を実装してもよい。

入力装置９０６は、例えば、マウス、キーボード、タッチパネル、ボタン、マイクロフォン、スイッチ及びレバー等、ユーザによって情報が入力される装置によって実現される。また、入力装置９０６は、例えば、赤外線やその他の電波を利用したリモートコントロール装置であってもよいし、情報処理装置１の操作に対応した携帯電話やＰＤＡ等の外部接続機器であってもよい。さらに、入力装置９０６は、例えば、上記の入力手段を用いてユーザにより入力された情報に基づいて入力信号を生成し、ＣＰＵ９０１に出力する入力制御回路などを含んでいてもよい。情報処理装置１のユーザは、この入力装置９０６を操作することにより、情報処理装置１に対して各種のデータを入力したり処理動作を指示したりすることができる。

出力装置９０７は、取得した情報をユーザに対して視覚的又は聴覚的に通知することが可能な装置で形成される。このような装置として、ＣＲＴディスプレイ装置、液晶ディスプレイ装置、プラズマディスプレイ装置、ＥＬディスプレイ装置及びランプ等の表示装置や、スピーカ及びヘッドホン等の音声出力装置や、プリンタ装置等がある。出力装置９０７は、例えば、情報処理装置１が行った各種処理により得られた結果を出力する。具体的には、表示装置は、情報処理装置１が行った各種処理により得られた結果を、テキスト、イメージ、表、グラフ等、様々な形式で視覚的に表示する。他方、音声出力装置は、再生された音声データや音響データ等からなるオーディオ信号をアナログ信号に変換して聴覚的に出力する。出力装置９０７は、例えば表示部２０を形成し得る。

ストレージ装置９０８は、情報処理装置１の記憶部の一例として形成されたデータ格納用の装置である。ストレージ装置９０８は、例えば、ＨＤＤ等の磁気記憶部デバイス、半導体記憶デバイス、光記憶デバイス又は光磁気記憶デバイス等により実現される。ストレージ装置９０８は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置などを含んでもよい。このストレージ装置９０８は、ＣＰＵ９０１が実行するプログラムや各種データ及び外部から取得した各種のデータ等を格納する。上記ストレージ装置９０８は、例えば、記憶部４０を形成し得る。

ドライブ９０９は、記憶媒体用リーダライタであり、情報処理装置１に内蔵、あるいは外付けされる。ドライブ９０９は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記憶媒体に記録されている情報を読み出して、ＲＡＭ９０３に出力する。また、ドライブ９０９は、リムーバブル記憶媒体に情報を書き込むこともできる。

接続ポート９１１は、外部機器と接続されるインタフェースであって、例えばＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）などによりデータ伝送可能な外部機器との接続口である。

通信装置９１３は、例えば、ネットワーク９２０に接続するための通信デバイス等で形成された通信インタフェースである。通信装置９１３は、例えば、有線若しくは無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）又はＷＵＳＢ（Ｗｉｒｅｌｅｓｓ ＵＳＢ）用の通信カード等である。また、通信装置９１３は、光通信用のルータ、ＡＤＳＬ（Ａｓｙｍｍｅｔｒｉｃ Ｄｉｇｉｔａｌ Ｓｕｂｓｃｒｉｂｅｒ Ｌｉｎｅ）用のルータ又は各種通信用のモデム等であってもよい。この通信装置９１３は、例えば、インターネットや他の通信機器との間で、例えばＴＣＰ／ＩＰ等の所定のプロトコルに則して信号等を送受信することができる。

センサ９１５は、例えば、加速度センサ、ジャイロセンサ、地磁気センサ、光センサ、音センサ、測距センサ、力センサ等の各種のセンサである。センサ９１５は、情報処理装置１の姿勢、移動速度等、情報処理装置１自身の状態に関する情報や、情報処理装置１の周辺の明るさや騒音等、情報処理装置１の周辺環境に関する情報を取得する。また、センサ９１５は、ＧＰＳ信号を受信して装置の緯度、経度及び高度を測定するＧＰＳセンサを含んでもよい。センサ９１５は、例えば、センサ部３０を形成し得る。

なお、ネットワーク９２０は、ネットワーク９２０に接続されている装置から送信される情報の有線、または無線の伝送路である。例えば、ネットワーク９２０は、インターネット、電話回線網、衛星通信網などの公衆回線網や、Ｅｔｈｅｒｎｅｔ（登録商標）を含む各種のＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）などを含んでもよい。また、ネットワーク９２０は、ＩＰ−ＶＰＮ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ−Ｖｉｒｔｕａｌ Ｐｒｉｖａｔｅ Ｎｅｔｗｏｒｋ）などの専用回線網を含んでもよい。

以上、本開示の実施形態に係る情報処理装置１の機能を実現可能なハードウェア構成の一例を示した。上記の各構成要素は、汎用的な部材を用いて実現されていてもよいし、各構成要素の機能に特化したハードウェアにより実現されていてもよい。従って、本開示の実施形態を実施する時々の技術レベルに応じて、適宜、利用するハードウェア構成を変更することが可能である。

なお、上述のような本開示の実施形態に係る情報処理装置１の各機能を実現するためのコンピュータプログラムを作製し、ＰＣ等に実装することが可能である。また、このようなコンピュータプログラムが格納された、コンピュータで読み取り可能な記録媒体も提供することができる。記録媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリ等である。また、上記のコンピュータプログラムは、記録媒体を用いずに、例えばネットワークを介して配信されてもよい。

＜＜７．むすび＞＞
以上説明したように、本開示の実施形態によれば、仮想表示面に立体画像を表示させることで、張り付き効果の発生を抑制し、立体感の損失、または酔いの発生を抑制することが可能である。さらに、仮想表示面の配置をユーザの視点の位置に基づいて制御することにより、ユーザの視点が移動してもユーザが快適に観察することが可能である。

以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。

例えば、上記実施形態による各動作における各ステップは、必ずしも図２０のフローチャートに記載された順序に沿って時系列に処理する必要はない。各動作における各ステップは、フローチャートに記載された順序と異なる順序で処理されても、並列的に処理されてもよい。

また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。

なお、以下のような構成も本開示の技術的範囲に属する。
（１）
空間に配置された仮想表示面に立体画像が表示されるように、表示部の表示を制御する表示制御部を備え、
前記表示制御部は、ユーザの視点の位置に基づいて、前記空間における前記仮想表示面の配置を制御する、情報処理装置。
（２）
前記表示制御部は、前記ユーザの視点と前記仮想表示面の中心点とを結んだ直線が、前記仮想表示面との関係に係る所定の条件を満たすように、前記仮想表示面の配置を制御する、前記（１）に記載の情報処理装置。
（３）
前記所定の条件は、前記直線と前記仮想表示面とがなす角に関する条件である、前記（２）に記載の情報処理装置。
（４）
前記表示制御部は、前記表示部の表示範囲に前記仮想表示面の全体が含まれるように、前記仮想表示面の位置または前記仮想表示面の大きさを制御する、前記（３）に記載の情報処理装置。
（５）
前記表示部は前記ユーザに装着された装置の表示部である、前記（４）に記載の情報処理装置。
（６）
前記表示制御部は、前記立体画像に係る視差情報にさらに基づいて、前記仮想表示面の配置を制御する、前記（１）〜（５）のいずれか一項に記載の情報処理装置。
（７）
前記表示制御部は、前記視差情報に基づいて特定される前記表示部からの飛び出し量または引っ込み量に基づいて、前記仮想表示面の位置または前記仮想表示面の大きさを制御する、前記（６）に記載の情報処理装置。
（８）
前記表示制御部は、前記飛び出し量、前記引っ込み量、及び前記飛び出し量と前記引っ込み量の合計、のうちいずれかが所定の範囲に収まるように、前記仮想表示面の位置または前記仮想表示面の大きさを制御する、前記（７）に記載の情報処理装置。
（９）
前記表示制御部は、前記仮想表示面に表示される前記立体画像の透明度を制御する、前記（１）〜（８）のいずれか一項に記載の情報処理装置。
（１０）
前記表示制御部は、前記立体画像の端部に近い程、透明度が高くなるように、前記立体画像の透明度を制御する、前記（９）に記載の情報処理装置。
（１１）
前記表示制御部は、前記立体画像に基づいて、前記立体画像の透明度を制御する、前記（９）または（１０）に記載の情報処理装置。
（１２）
前記表示制御部は、前記立体画像から検出される平坦な背景領域の透明度が、前記立体画像における他の領域の透明度よりも高くなるように、前記立体画像の透明度を制御する、前記（１１）に記載の情報処理装置。
（１３）
前記表示制御部は、前記立体画像の色情報に基づいて、前記仮想表示面の周囲の色を制御する、前記（１）〜（１２）のいずれか一項に記載の情報処理装置。
（１４）
前記表示制御部は、前記立体画像に基づいて影を表示させる、前記（１）〜（１３）のいずれか一項に記載の情報処理装置。
（１５）
前記表示制御部は、前記立体画像から特定される前景領域に基づいて前記影を表示させる、前記（１４）に記載の情報処理装置。
（１６）
前記表示制御部は、前記空間にさらに基づいて前記影を表示させる、前記（１４）または（１５）に記載の情報処理装置。
（１７）
前記空間は仮想空間または実空間である、前記（１）〜（１６）のいずれか一項に記載の情報処理装置。
（１８）
前記表示部は光学的透過性を有し、前記空間は実空間である、前記（１７）に記載の情報処理装置。
（１９）
プロセッサが、空間に配置された仮想表示面に立体画像が表示されるように、表示部の表示を制御することを含み、
前記空間における前記仮想表示面の配置はユーザの視点の位置に基づいて制御される、情報処理方法。
（２０）
コンピュータに、
空間に配置された仮想表示面に立体画像が表示されるように、表示部の表示を制御する表示制御機能を実現させ、
前記表示制御機能は、ユーザの視点の位置に基づいて、前記空間における前記仮想表示面の配置を制御する、プログラム。

１ 情報処理装置
１０ 表示制御部
２０ 表示部
３０ センサ部
４０ 記憶部

Claims (20)

1. 空間に配置された仮想表示面に立体画像が表示されるように、表示部の表示を制御する表示制御部を備え、
   前記表示制御部は、ユーザの視点の位置に基づいて、前記空間における前記仮想表示面の配置を制御する、情報処理装置。
2. 前記表示制御部は、前記ユーザの視点と前記仮想表示面の中心点とを結んだ直線が、前記仮想表示面との関係に係る所定の条件を満たすように、前記仮想表示面の配置を制御する、請求項１に記載の情報処理装置。
3. 前記所定の条件は、前記直線と前記仮想表示面とがなす角に関する条件である、請求項２に記載の情報処理装置。
4. 前記表示制御部は、前記表示部の表示範囲に前記仮想表示面の全体が含まれるように、前記仮想表示面の位置または前記仮想表示面の大きさを制御する、請求項３に記載の情報処理装置。
5. 前記表示部は前記ユーザに装着された装置の表示部である、請求項４に記載の情報処理装置。
6. 前記表示制御部は、前記立体画像に係る視差情報にさらに基づいて、前記仮想表示面の配置を制御する、請求項１に記載の情報処理装置。
7. 前記表示制御部は、前記視差情報に基づいて特定される前記表示部からの飛び出し量または引っ込み量に基づいて、前記仮想表示面の位置または前記仮想表示面の大きさを制御する、請求項６に記載の情報処理装置。
8. 前記表示制御部は、前記飛び出し量、前記引っ込み量、及び前記飛び出し量と前記引っ込み量の合計、のうちいずれかが所定の範囲に収まるように、前記仮想表示面の位置または前記仮想表示面の大きさを制御する、請求項７に記載の情報処理装置。
9. 前記表示制御部は、前記仮想表示面に表示される前記立体画像の透明度を制御する、請求項１に記載の情報処理装置。
10. 前記表示制御部は、前記立体画像の端部に近い程、透明度が高くなるように、前記立体画像の透明度を制御する、請求項９に記載の情報処理装置。
11. 前記表示制御部は、前記立体画像に基づいて、前記立体画像の透明度を制御する、請求項９に記載の情報処理装置。
12. 前記表示制御部は、前記立体画像から検出される平坦な背景領域の透明度が、前記立体画像における他の領域の透明度よりも高くなるように、前記立体画像の透明度を制御する、請求項１１に記載の情報処理装置。
13. 前記表示制御部は、前記立体画像の色情報に基づいて、前記仮想表示面の周囲の色を制御する、請求項１に記載の情報処理装置。
14. 前記表示制御部は、前記立体画像に基づいて影を表示させる、請求項１に記載の情報処理装置。
15. 前記表示制御部は、前記立体画像から特定される前景領域に基づいて前記影を表示させる、請求項１４に記載の情報処理装置。
16. 前記表示制御部は、前記空間にさらに基づいて前記影を表示させる、請求項１４に記載の情報処理装置。
17. 前記空間は仮想空間または実空間である、請求項１に記載の情報処理装置。
18. 前記表示部は光学的透過性を有し、前記空間は実空間である、請求項１７に記載の情報処理装置。
19. プロセッサが、空間に配置された仮想表示面に立体画像が表示されるように、表示部の表示を制御することを含み、
    前記空間における前記仮想表示面の配置は、ユーザの視点の位置に基づいて制御される、情報処理方法。
20. コンピュータに、
    空間に配置された仮想表示面に立体画像が表示されるように、表示部の表示を制御する表示制御機能を実現させ、
    前記表示制御機能は、ユーザの視点の位置に基づいて、前記空間における前記仮想表示面の配置を制御する、プログラム。

Images