JP6784289B2 - 情報処理装置、情報処理方法、及びプログラム - Google Patents

Description

本開示は、情報処理装置、情報処理方法、及びプログラムに関する。

透過型の表示部を有する装置（シースルーディスプレイ）が利用されている（例えば、特許文献１、２）。透過型の表示部を用いることで、例えば現実空間を背景として、仮想のオブジェクトを重畳表示させることができる。

特開２００７−０６５０８０号公報 特開２０１０−１４５８５９号公報

しかし、表示されるオブジェクト（表示オブジェクト）の表示サイズや表示位置によっては、当該表示オブジェクトの全部が表示部の表示領域に含まれない見切れが発生する場合がある。透過型の表示部において見切れが発生する場合、例えば表示オブジェクトが途中で切れたような見た目となり、ユーザに違和感を与えてしまう恐れがあった。

そこで、本開示では、見切れの発生によるユーザへの違和感を軽減することが可能な、新規かつ改良された情報処理装置、情報処理方法、プログラムを提案する。

本開示によれば、透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生をユーザに通知させる通知制御部を備える、情報処理装置が提供される

また、本開示によれば、透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生をユーザに通知させる、情報処理方法が提供される。

また、本開示によれば、コンピュータシステムに、透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生をプロセッサがユーザに通知させる、通知制御機能を実現させるための、プログラム。

以上説明したように本開示によれば、見切れの発生によるユーザへの違和感を軽減することが可能である。

本開示の第一の実施形態に係る情報処理装置の外観を示す説明図である。 同実施形態に係る見切れ発生時のユーザの視界の例を示す説明図である。 同実施形態に係る情報処理装置の構成例を示す説明図である。 同実施形態に係る表示制御部が表示させる枠の例を示す説明図である。 同実施形態に係る表示部の構成例を示す説明図である。 同実施形態に係る情報処理装置の動作例を示す説明図である。 本開示の第二の実施形態に係る表示制御部が表示オブジェクトに所定の処理を施すために用いる処理パターンの例を示す説明図である。 同実施形態に係る表示制御部が表示オブジェクトに施す所定の処理の一例を説明するための説明図である。 同実施形態に係る情報処理装置の動作例を示す説明図である。 第三の実施形態に係る情報処理装置の構成例を示す説明図である。 同実施形態に係る表示制御部が見切れ検出部に提供する画角に関する情報を説明するための説明図である。 表示制御部が見切れ検出部に提供する画角に関する情報を説明するための説明図である。 同実施形態に係る表示制御部が表示させる見切れの発生を通知するための補助ＵＩの一例を示す説明図である 同実施形態に係る表示制御部が表示させる見切れの発生を通知するための補助ＵＩの他の一例を示す説明図である 同実施形態に係る表示制御部が表示させる見切れの発生を通知するための補助ＵＩの他の一例を示す説明図である 同実施形態に係る情報処理装置の動作例を示す説明図である。 同実施形態に係る変形例を示す説明図である。 本開示に係る情報処理装置のハードウェア構成の一例を示す説明図である。

以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

また、本明細書及び図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットを付して区別する場合もある。ただし、実質的に同一の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。

なお、説明は以下の順序で行うものとする。
＜＜１．第一の実施形態＞＞
＜１−１．第一の実施形態の概要＞
＜１−２．第一の実施形態の構成＞
＜１−３．第一の実施形態の動作＞
＜１−４．第一の実施形態の効果＞
＜＜２．第二の実施形態＞＞
＜２−１．第二の実施形態の概要＞
＜２−２．第二の実施形態の構成＞
＜２−３．第二の実施形態の動作＞
＜２−４．第二の実施形態の効果＞
＜＜３．第三の実施形態＞＞
＜３−１．第三の実施形態の概要＞
＜３−２．第三の実施形態の構成＞
＜３−３．第三の実施形態の動作＞
＜３−４．第三の実施形態の変形例＞
＜３−５．第三の実施形態の効果＞
＜＜４．ハードウェア構成例＞＞
＜＜５．むすび＞＞

＜＜１．第一の実施形態＞＞
＜１−１．第一の実施形態の概要＞
まず、図１を参照しながら本開示の第一の実施形態に係る情報処理装置の概要を説明する。図１は、本開示の第一の実施形態に係る情報処理装置の外観を示す説明図である。

図１に示すように、本開示の第一の実施形態に係る情報処理装置１−１は、撮像部１１０と、表示部１８０Ａ，１８０Ｂとを備える眼鏡型の表示デバイスである。

情報処理装置１−１は、撮像部１１０が実空間を撮像することにより得られた撮像画像に基づき、表示オブジェクトを表示部１８０Ａ、１８０Ｂの表示領域１８５Ａ、１８５Ｂに表示する。本実施形態にかかる表示オブジェクトは、例えば、実空間に対応してユーザに提示したい情報（画像、実空間の物体に対する説明テキスト、ナビゲーションアイコン、警告エフェクト等）であってもよいし、動的に移動するゲームキャラクタや固定された建物等の３Ｄオブジェクトであってもよい。本実施形態に係る表示オブジェクトの更なる例に関しては後述する。

表示部１８０Ａ、１８０Ｂはそれぞれ表示領域１８５Ａ、１８５Ｂを有し、表示領域１８５Ａ、１８５Ｂに表示オブジェクトが表示される。表示部１８０Ａ、１８０Ｂは透過型の表示部（シースルーディスプレイ）であり、ユーザは情報処理装置１−１を装着している場合であっても、表示領域１８５Ａ、１８５Ｂに表示される画像と共に実空間を視認することが可能である。例えば、表示部１８０Ａ、１８０Ｂは、表示領域１８５Ａ、１８５Ｂにおいて光を透過する構成であり、さらに表示領域１８５Ａ、１８５Ｂ以外の領域においても光を透過する構成であってよい。なお、表示オブジェクトが奥行きを有する３Ｄモデル等である場合、表示部１８０Ａ、及び表示部１８０Ｂは、それぞれ、右目用、及び左目用の画像を表示することで、ユーザに両眼視差を知覚させることが可能である。

表示オブジェクトの表示サイズによっては、見切れが発生する。本開示において見切れとは、例えば、透過型の表示部の表示領域（本実施形態においては表示部１８０Ａ，１８０Ｂの表示領域１８５Ａ，１８５Ｂ）に、少なくとも一部の領域が表示される表示オブジェクトの全部が当該表示領域に含まれない状態を意味する。図２は見切れ発生時のユーザの視界の例を示す説明図である。図２に示す境界Ｒ１０は、表示部１８０Ａ、１８０Ｂにおける表示領域１８５Ａ，１８５Ｂの境界（外縁）を示している。表示部１８０Ａ、１８０Ｂは透過性が高いため、ユーザは境界Ｒ１０を認識することは困難である。

図２に示す表示オブジェクトＣ１０は、境界Ｒ１０の内部（表示領域）に含まれて表示される可視領域Ｃ１２と、表示領域内に含まれないため表示されない非可視領域Ｃ１４、Ｃ１６、Ｃ１８を含む。すなわち、表示オブジェクトＣ１０は、一部の領域（可視領域Ｃ１２）が表示領域１８５Ａ，１８５Ｂに表示されるが、全部が表示領域１８５Ａ，１８５Ｂには含まれていないため、見切れが発生している。

図２に示すように、見切れが発生すると、境界Ｒ１０付近で表示オブジェクトＣ１０が切れたように表示される。しかし、上述したようにユーザは境界Ｒ１０を認識し難いため、見切れが発生した場合、ユーザには表示オブジェクトＣ１０が何もない場所において途中で切れたように見え、ユーザに違和感を与える恐れがあった。

また、例えばテキスト表示等、表示オブジェクト全体を見た場合と表示オブジェクトの一部を見た場合とで意味が異なり得る表示オブジェクトが表示される場合には、見切れによりユーザが表示オブジェクトの意味を正しく理解できない恐れがあった。

そこで、上記事情を一着眼点にして本実施形態を創作するに至った。本実施形態によれば、見切れが発生しているか否かをユーザにとって認識し易くするための補助ＵＩを表示させることで、見切れによるユーザへの違和感を軽減することが可能である。以下、このような効果を有する本実施形態の構成について詳細に説明する。

＜１−２．第一の実施形態の構成＞
以上、本開示の第一の実施形態に係る情報処理装置１−１の概要を説明した。続いて、本実施形態による情報処理装置１−１の構成について図３を参照して説明する。

図３は、本実施形態に係る情報処理装置１−１の構成例を示す説明図である。図３に示すように、本実施形態に係る情報処理装置１−１は、撮像部１１０、画像認識部１２０、表示制御部１３０、記憶部１７０、表示部１８０を備える。

（撮像部）
撮像部１１０は、画像を取得するカメラモジュールである。撮像部１１０は、ＣＣＤ（Charge Coupled Device）またはＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の撮像素子を用いて実空間を撮像することにより撮像画像を取得する。例えば、本実施形態における撮像部１１０は、情報処理装置１−１を装着するユーザの視界と同等の画角を有してもよく、撮像部１１０により撮像される範囲は当該ユーザの視界と見なされてもよい。なお、撮像部１１０により取得された撮像画像は、画像認識部１２０に提供される。

また、撮像部１１０は撮像素子を二つ有し、二つの画像を同時に取得するステレオカメラであってもよい。かかる場合、当該二つの撮像素子は水平に並べられ、後述する画像認識部１２０が取得された複数の画像をステレオマッチング法等により解析することで、実空間の三次元形状情報（深度情報）を取得することが可能となる。

（画像認識部）
画像認識部１２０は、撮像部１１０により取得された撮像画像を解析し、実空間の三次元形状や実空間に存在する物体やマーカ等の認識を行う。例えば、画像認識部１２０は、同時に取得された複数画像に対するステレオマッチング法や、時系列的に取得された複数画像に対するＳｆＭ（Structure from Motion）法等を行うことで、実空間の三次元形状を認識し、三次元形状情報を取得してもよい。また、画像認識部１２０は、予め用意された特徴点情報と、撮像画像から検出された特徴点情報のマッチングを行うことで、実空間に存在する物体やマーカ等を認識し、当該物体やマーカ等の情報を取得してもよい。画像認識部１２０により取得された上記の情報は、表示制御部１３０に提供される。
（表示制御部）
表示制御部１３０は、表示部１８０の表示を制御する。例えば、表示制御部１３０は、画像認識部１２０から提供される実空間の三次元情報や物体情報等に基づいて、表示オブジェクトを透過型の表示部１８０に表示させる。

例えば、表示制御部１３０は、撮像画像から検出された物体の物体情報（当該物体の種類や位置等の情報）に基づいて、表示オブジェクトを表示させてもよい。例えば、表示制御部１３０は、当該物体情報に基づいて、当該物体に関する説明を行うテキストデータを取得し、当該テキストデータを所定のフォントを用いてレンダリングした結果（テキスト表示）を表示オブジェクトとして表示させてもよい。

なお、表示オブジェクトや表示オブジェクトを表示させるための情報（例えばテキストデータ等）は、記憶部１７０に記憶されていてもよい。また、表示制御部１３０は記憶部１７０から表示オブジェクトを直接取得してもよいし、記憶部１７０に記憶された情報に基づいて、表示オブジェクトを生成（例えばレンダリング）して、表示オブジェクトを表示させてもよい。

また、表示制御部１３０は、表示オブジェクトの空間内位置（実空間、または仮想空間における位置）を特定する。

空間内位置は、例えばＡＲ（Augmented Reality）マーカや所定の物体等の実空間における物体（実物体）の位置に基づいて特定されてもよい。また、表示オブジェクトが自由に移動可能なゲームキャラクタ等のように、実物体によって固定されない場合、空間内位置はアプリケーションによって動的に設定（特定）されてもよい。

なお、表示オブジェクトの空間内位置は、実空間、または仮想空間（仮想的な三次元空間）で設定される座標系における座標値として表現されてもよい。また、かかる場合、ユーザの位置も同様に表示オブジェクトの空間内位置が表現される座標系において設定されてもよい。例えば、ユーザの位置は、実空間で設定される座標系における情報処理装置１−１の座標値として設定されてもよい。また、空間内位置が仮想空間で設定される座標系における座標値として表現される場合、ユーザの位置は、当該仮想空間内で、表示オブジェクトをレンダリングするための仮想的な視点の座標値として表現されてもよい。

また、表示制御部１３０は、ユーザの位置から所定の画角でレンダリングを行い、表示部１８０の表示領域に表示オブジェクトを表示させる。ここで、例えば、表示領域における当該表示オブジェクトの表示サイズは、ユーザの位置と表示オブジェクトの空間内位置によって決定される。

例えば、実物体に応じて空間内位置が特定される場合、ユーザが当該実物体に近づくと、表示サイズは大きくなり、ユーザが当該実物体から遠ざかると、表示サイズは小さくなるように、表示制御が行われてもよい。かかる構成によれば、ユーザは当該表示オブジェクトを実物体と対応付けて知覚することが可能であり、当該表示オブジェクトをより現実的に感じることが可能である。

また、表示領域における当該表示オブジェクトの表示位置も同様に、ユーザの位置と表示オブジェクトの空間内位置によって決定されてもよい。

上記のように表示サイズと表示位置は、ユーザの位置と表示オブジェクトの空間内位置に基づいて決定されるため、ユーザの位置と表示オブジェクトの空間内位置によっては、見切れが発生する場合がある。例えば、表示サイズにおける高さが表示領域の高さより大きい場合には、少なくとも高さ方向において見切れが発生する。

また、表示制御部１３０は、見切れが発生しているか否か（見切れの発生有無）をユーザにとって認識し易くするための補助ＵＩ（User Interface）を表示させる。例えば、表示制御部１３０は、補助ＵＩとして、表示部１８０の表示領域の周縁部に枠を表示させてもよい。図４は、表示制御部１３０が表示させる枠の例を示す説明図である。

図４に示す枠Ｆ２０は、表示制御部１３０が補助ＵＩとして、表示部１８０の表示領域の周縁部のうち、外縁に表示させた枠である。また、図４においても見切れが発生しており、図２を参照して説明した表示オブジェクトＣ１０の例と同様に、図４に示す表示オブジェクトＣ２０は、可視領域Ｃ２２と、非可視領域Ｃ２４、Ｃ２６、Ｃ２８を含む。

しかし、図４では、枠Ｆ２０が表示されることで、ユーザは枠Ｆ２０を通して表示オブジェクトＣ２０が表示される空間を覗いているような感覚を受けるため、見切れが発生した場合であっても違和感が軽減する。また、ユーザは枠Ｆ２０により、見切れの発生を認識し易くなるため、表示オブジェクトＣ２０の全体が表示されておらず、表示領域外にも情報が存在することを理解可能となり、可視領域Ｃ２２のみで意味を誤解してしまうことが抑制される。さらに、ユーザは枠Ｆ２０により、見切れにより表示オブジェクトが切れている場所と、見切れた理由（例えば現在のユーザの位置では表示サイズが大きすぎる等）を理解し易くなるため、例えばユーザは自ら移動することで見切れを解消することできる。

なお、表示制御部１３０が表示させる補助ＵＩは上述した図４の例に限定されない。例えば、表示制御部１３０が表示させる枠は実線ではなく破線や点線であってもよいし、ユーザが視認可能な範囲で薄い色や輝度、細い線としてもよい。また、表示制御部１３０は補助ＵＩを常に表示させるのではなく、例えば点滅するように表示させてもよい。かかる構成によれば、ユーザの視覚をできるだけ邪魔せずに、かつ、見切れの発生を認識し易くすることが出来る。また、表示制御部１３０は、表示領域全体、または表示領域のうち表示オブジェクトが表示される領域を除く領域を薄く色づけする補助ＵＩを表示させることで、見切れの発生を認識し易くしてもよい。

（記憶部）
記憶部１７０は、表示オブジェクトの情報を記憶する。記憶部１７０に記憶される表示オブジェクトの情報は、例えば、画像、エフェクトの表示情報、マーキングの表示情報、シルエットの表示情報、テキストや３Ｄモデル等のレンダリング情報等を含んでもよい。

例えば、本実施形態に係る表示オブジェクトは、実物体や他の表示オブジェクト（以下、まとめて物体と呼ぶ場合がある）の動きを強調、または演出する効果を有するエフェクト表示等であってもよい。

また、本実施形態に係る表示オブジェクトは、物体に対応付けられたマーキング表示であってもよい。また、本実施形態に係る表示オブジェクトは、実空間、または仮想空間内での進路や、行動のお手本を示すナビゲーション表示であってもよい。また、本実施形態に係る表示オブジェクトは、物体に重畳されるシルエットや当該物体に関するセンシング結果を示すオブジェクトであってもよい。

また、本実施形態に係る表示オブジェクトはゲームキャラクタやゲームにおけるアイテム、建物等を示す３Ｄオブジェクトや画像であってもよい。また、本実施形態に係る表示オブジェクトゲームやナビゲーションにおける過去の履歴を示す３Ｄオブジェクトや画像（例えばレースゲームにおける所謂ゴーストカー）であってもよい。

また、本実施形態に係る表示オブジェクトは周囲の人物等の物体、当該物体に関するマニュアル、プロパティ情報（名前、速度、属性等）を示すテキストを提示するオブジェクトであってもよい。なお、係る表示オブジェクトの表示位置は、当該物体に重畳される位置であってもよいし、当該物体に重ならないような当該物体付近の位置であってもよい。

また、本実施形態に係る表示オブジェクトは空間の任意の位置を表示位置とする仮想の広告や垂れ幕のオブジェクト等であってもよい。

（表示部）
表示部１８０は、表示オブジェクトを表示する、透過型（シースルー型）のディスプレイ（表示部）である。以下では、表示部１８０の構成例について図５を参照して説明する。図５は、表示部１８０の構成例を示す説明図である。

図５に示すように本実施形態に係る表示部１８０は、反射型の空間光変調部１８２、ファインダーレンズ等より成るコリメート光学系１８４、ホログラム型の導光板（導波路）１８６を有する。導光板１８６は、ユーザの瞳２２に対し奥行き方向に相対向する光学面１８６２及び１８６４と、光学面１８６４に設けられ、位置に係らず均等なホログラム表面の干渉縞ピッチを有する反射型体積ホログラムグレーティング１８６６及び１８６８と、を有する。

図５に示すように、空間光変調部１８２が画像を変調して射出した光は、コリメート光学系１８４によって画角が互いに異なる平行光束群とされ、導光板１８６に光学面１８６２から入射する。導光板１８６に入射された光は、反射型体積ホログラムグレーティング１８６６に入射し、反射型体積ホログラムグレーティング１８６６により回折反射される。反射型体積ホログラムグレーティング１８６６により回折反射された光は、導光板１８６内部において、光学面１８６２及び１８６４の間で全反射を繰り返しながら導光し、反射型体積ホログラムグレーティング１８６８に向けて進行する。反射型体積ホログラムグレーティング１８６８に入射した光は、回折反射により全反射条件から外れ、導光板１８６から射出されてユーザの瞳２２に入射する。

なお、図１を参照して説明した表示部１８０の表示領域１８５Ａ，１８５Ｂは、図５に示す導光板１８６における反射型体積ホログラムグレーティング１８６８の領域に相当する。

なお、透過型の表示部１８０の構成は上記の例に限定されない。例えば、表示部１８０は、ハーフミラー等を用いて反射させた画像を表示させる構成であってもよいし、ユーザの網膜に光を照射することで画像を表示させる構成であってもよい。

＜１−３．第一の実施形態の動作＞
以上、本開示の第一の実施形態に係る情報処理装置１−１の構成例について説明した。続いて、図６を参照して、本実施形態に係る情報処理装置１−１の動作例について、特に表示制御部１３０による表示制御に関する動作に着目して説明する。図６は、本実施形態に係る情報処理装置１−１の動作例を説明するためのフローチャート図である。

まず、表示制御部１３０が、表示部１８０の表示領域の外縁に枠（補助ＵＩ）を表示させる（Ｓ１０２）。続いて、表示制御部１３０は、表示オブジェクトを表示させる（Ｓ１０４）。

なお、上記で説明した動作は一例であって、本実施形態にかかる表示制御部１３０の表示制御に係る動作は上記に限定されない。例えば、表示制御部１３０は、上記の一連の処理（ステップＳ１０２〜Ｓ１０４）や、オブジェクト表示処理（ステップＳ１０４）を繰り返し行うことで、現状のユーザ位置等に応じた表示オブジェクトの表示を随時更新させてもよい。

＜１−４．第一の実施形態の効果＞
以上、本開示に係る第一の実施形態について説明した。本実施形態によれば、見切れが発生しているか否かをユーザにとって認識し易くするための補助ＵＩ（例えば表示領域外縁の枠等）を表示させることで、見切れが発生した際のユーザへの違和感を軽減させることが可能である。また、ユーザは見切れの発生を認識することで、表示オブジェクト全体が表示されておらず、表示領域外にも情報が存在することを理解可能となるため、表示領域に表示された表示オブジェクトの一部のみで意味を誤解してしまうことが抑制される。さらに、ユーザは見切れにより表示オブジェクトが切れている場所と、見切れた理由（例えば現在のユーザの位置では表示サイズが大きすぎる等）を理解し易くなるため、自らの移動等により表示領域の外に存在する情報を見ようとすることが可能となる。

＜＜２．第二の実施形態＞＞
＜２−１．第二の実施形態の概要＞
上述した第一の実施形態では、見切れが発生しているか否かをユーザにとって認識し易くするための補助ＵＩを表示させる例を説明した。これに対し、以下では、第二の実施形態として、表示オブジェクトに所定の処理を施すことで、見切れが発生しているか否かをユーザに認識し易くする例について説明する。

第二の実施形態に係る情報処理装置では、表示オブジェクトのうち、表示領域の周縁部に表示される領域に対して、所定の処理が施されるように表示制御を行うことで、見切れ発生によるユーザへの違和感を軽減させる。以下では、上記の効果を奏する第二の実施形態の構成と動作を順次詳細に説明する。

＜２−２．第二の実施形態の構成＞
本開示の第二の実施形態に係る情報処理装置は図１、図３を参照して説明した第一の実施形態に係る情報処理装置１−１と同様に、透過型の表示部を有する眼鏡型の表示デバイスである。本実施形態に係る情報処理装置は、第一の実施形態に係る情報処理装置１−１と一部において同様の構成を有するため、適宜省略しながら説明を行う。

本実施形態に係る情報処理装置の外観は、図１を参照して説明した第一の実施形態に係る情報処理装置１の外観と同様である。また、本実施形態に係る情報処理装置は、図３に示した第一の実施形態に係る情報処理装置１−１と同様に、撮像部１１０、画像認識部１２０、表示制御部１３０、記憶部１７０、表示部１８０を備える。本実施形態に係る撮像部１１０、画像認識部１２０、記憶部１７０、表示部１８０の構成は、第一の実施形態に係る撮像部１１０、画像認識部１２０、記憶部１７０、表示部１８０の構成と実質的に同一であるため、説明を省略する。以下では、本実施形態に係る表示制御部１３０について、第一の実施形態に係る表示制御部１３０と異なる部分を中心に説明を行う。

（表示制御部）
本実施形態に係る表示制御部１３０は、第一の実施形態に係る表示制御部１３０と同様に、表示部１８０の表示を制御する。

例えば、本実施形態に係る表示制御部１３０は、第一の実施形態に係る表示制御部１３０と同様に、画像認識部１２０から提供される実空間の三次元情報や物体情報等に基づいて、表示オブジェクトを透過型の表示部１８０に表示させる。

本実施形態に係る表示制御部１３０による表示オブジェクトに関する情報の取得、空間内位置の特定、レンダリングの処理については、第一の実施形態に係る表示制御部１３０による上記それぞれの処理と同様であるため、ここでの説明は省略する。

また、本実施形態に係る表示制御部１３０は、ユーザにとって見切れの発生有無を認識し易くするため、表示オブジェクトに所定の処理を施し、上記所定の処理が施された表示オブジェクトを、表示部１８０の表示領域に表示させる。以下では、図７を参照して、表示制御部１３０が表示オブジェクトに施す所定の処理について説明する。

図７は本実施形態に係る表示制御部１３０が表示オブジェクトに所定の処理を施すために用いる処理パターンの例を示す説明図である。表示制御部１３０は、表示部１８０の表示領域に表示させる表示オブジェクトに、図７に示す処理パターンを適用する処理を行う。図７に示す処理パターンは、輝度が高い領域では低い透過度で表示され、輝度が低い領域では高い透過度で表示されるようにアルファフェード処理を行う透過処理のための処理パターンである。

図７に示す周縁部Ｅ１は、表示制御部１３０が表示を制御可能な表示部１８０の表示領域の周縁部を示している。図７に示す処理パターンにおいて、周縁部Ｅ１は、中央から遠ざかり外縁に近づくにつれて輝度が低下している。したがって、図７に示す処理パターンを適用して上記のアルファフェード処理を行うと、周縁部Ｅ１において、中央から遠ざかり外縁に近づくにつれて透過度が高くなるように（アルファフェードされて）表示オブジェクトが表示される。

図８は、本実施形態に係る表示制御部１３０が表示オブジェクトに施す所定の処理の一例を説明するための説明図である。図８においても見切れが発生しており、図２を参照して説明した表示オブジェクトＣ１０の例と同様に、図８に示す表示オブジェクトＣ３０は、可視領域Ｃ３２と、非可視領域Ｃ３４、Ｃ３６、Ｃ３８を含む。

表示制御部１３０が図７に示す処理パターンを表示オブジェクトＣ３０に適用して透過処理を行ったため、図８に示す境界Ｒ３０の周辺（周縁部）と重なる半透過領域Ｃ３２２、Ｃ３２４、Ｃ３２６（周縁領域）は、アルファフェードされて表示される。

係る構成によれば、ユーザは半透過領域Ｃ３２２、Ｃ３２４、Ｃ３２６がアルファフェードされていることにより、見切れの発生を認識し易くなる。そのため、表示オブジェクトＣ３０の全体が表示されておらず、表示領域外にも情報が存在することを理解可能となり、可視領域Ｃ３２のみで意味を誤解してしまうことが抑制される。さらに、ユーザは半透過領域Ｃ３２２、Ｃ３２４、Ｃ３２６により、見切れにより表示オブジェクトが切れている場所と、見切れた理由（例えば現在のユーザの位置では表示サイズが大きすぎる等）を理解し易くなる。そのため、例えばユーザは自ら移動することで見切れを解消可能であることを理解することが可能となる。

上記のアルファフェード処理は、例えば、表示制御部１３０が表示させるべき表示オブジェクトを特定し、レンダリングを行う際に行われてもよい。

なお、表示制御部１３０が行う所定の処理は、図７の処理パターンを用いたアルファフェード処理に限定されない。例えば、表示制御部１３０は、中央から遠ざかるにつれて透過度が高くなるように処理するための円形、または楕円形（例えばガウス分布状）の処理パターンを用いてアルファフェード処理を行ってもよい。また、表示制御部１３０は、表示領域の周縁部において、表示オブジェクトのレンダリング方法を異ならせる処理を行うことで、見切れの発生を認識し易くしてもよい。例えば、表示制御部１３０は、表示領域の周縁部において、ワイヤフレームレンダリングを行い、周縁部以外の領域において、ポリゴンレンダリングを行ってもよい。

＜２−３．第二の実施形態の動作＞
以上、本開示の第二の実施形態に係る情報処理装置の構成例について説明した。続いて、図９を参照して、本実施形態に係る情報処理装置の動作例について、特に表示制御部１３０による表示制御に関する動作に着目して説明する。図９は、本実施形態に係る情報処理装置の動作例を説明するためのフローチャート図である。

まず、表示制御部１３０は、表示オブジェクトのレンダリングの際に、図７を参照して説明したような処理パターンを用いて、表示領域の周縁部にアルファフェード処理を行う（Ｓ２０２）。続いて、表示制御部１３０は、アルファフェード処理済みの表示オブジェクトを表示部１８０に表示させる（Ｓ２０４）。

なお、上記で説明した動作は一例であって、本実施形態にかかる表示制御部１３０の表示制御に係る動作は上記に限定されない。例えば、表示制御部１３０は、上記の一連の処理（ステップＳ２０２〜Ｓ２０４）を繰り返し行うことで、現状のユーザ位置等に応じた表示オブジェクトの表示を随時更新させてもよい。
＜２−４．第二の実施形態の効果＞
以上、本開示に係る第二の実施形態について説明した。本実施形態によれば、表示オブジェクトに対して所定の処理を行うことで、見切れが発生しているか否かをユーザに認識し易くし、見切れが発生した際のユーザへの違和感を軽減させることが可能である。また、ユーザは見切れの発生を認識することで、表示オブジェクト全体が表示されておらず、表示領域外にも情報が存在することを理解可能となるため、表示領域に表示された表示オブジェクトの一部のみで意味を誤解してしまうことが抑制される。さらに、ユーザは見切れにより表示オブジェクトが切れている場所と、見切れた理由（例えば現在のユーザの位置では表示サイズが大きすぎる等）を理解し易くなるため、自らの移動等により表示領域の外に存在する情報を見ようとすることが可能となる。

＜＜３．第三の実施形態＞＞
＜３−１．第三の実施形態の概要＞
上述した第一の実施形態、及び第二の実施形態では、見切れが発生しているか否かに関わらず、ユーザに見切れの発生有無を認識し易くさせるための処理（補助ＵＩの表示、または所定の処理）を行う例を説明した。これに対し、以下では、第三の実施形態として、見切れの発生が検出された場合に、ユーザの情報、表示オブジェクトの情報、環境の情報等に基づいて見切れの発生の通知方法を決定し、補助ＵＩの出力、または所定の処理を行う例を説明する。

第三の実施形態に係る情報処理装置では、見切れの発生が検出された場合に、補助ＵＩが表示される、または所定の処理が施されることで、見切れが発生しない場合にユーザの視覚を邪魔することなく、見切れ発生によるユーザへの違和感を軽減させる。以下では、上記の効果を奏する第三の実施形態の構成と動作を順次詳細に説明する。

＜３−２．第三の実施形態の構成＞
本開示の第三の実施形態に係る情報処理装置は、図１、図３を参照して説明した第一の実施形態に係る情報処理装置と同様に、透過型の表示部を有する眼鏡型の表示デバイスである。まず、本実施形態に係る情報処理装置の外観は、図１を参照して説明した第一の実施形態に係る情報処理装置１の外観と同様である。また、本実施形態に係る情報処理装置は、第一の実施形態に係る情報処理装置１−１、及び第二の実施形態に係る情報処理装置と一部において同様の構成を有するため、適宜省略しながら説明を行う。

図１０は、本実施形態に係る情報処理装置１−３の構成例を示す説明図である。図１０に示すように、本実施形態に係る情報処理装置１−３は、撮像部１１０、画像認識部３２０、表示制御部３３０、見切れ検出部３４０、センサ部３５０、通知方法判定部３６０、記憶部１７０、表示部１８０を備える。本実施形態に係る撮像部１１０、記憶部１７０、表示部１８０の構成は、第一の実施形態に係る撮像部１１０、記憶部１７０、表示部１８０の構成と実質的に同一であるため、説明を省略する。以下では、本実施形態に係る情報処理装置１−３について本実施形態に特有の構成を中心に説明を行う。

（画像認識部）
本実施形態に係る画像認識部３２０は、図３を参照して説明した画像認識部１２０と同様に撮像部１１０により取得された撮像画像を解析し、実空間の三次元形状や実空間に存在する物体やマーカ等の認識を行う。画像認識部３２０により取得された三次元形状情報や実空間に存在する物体やマーカの情報は、表示制御部３３０、及び通知方法判定部３６０に提供される。

（表示制御部）
本実施形態に係る表示制御部３３０は、第一の実施形態に係る表示制御部１３０と同様に、透過型の表示部１８０の表示を制御する。

例えば、本実施形態に係る表示制御部１３０は、第一の実施形態に係る表示制御部１３０と同様に、画像認識部３２０から提供される実空間の三次元情報や物体情報等に基づいて、表示オブジェクトを透過型の表示部１８０に表示させる。

本実施形態に係る表示制御部３３０による表示オブジェクトに関する情報の取得、空間内位置の特定、レンダリングの処理については、第一の実施形態に係る表示制御部１３０による上記それぞれの処理と同様であるため、ここでの説明は省略する。

また、表示制御部３３０は表示オブジェクトのレンダリングにおける画角に関する情報を見切れ検出部３４０に提供する。図１１Ａ、図１１Ｂは、表示制御部３３０が見切れ検出部３４０に提供する画角に関する情報を説明するための説明図である。

図１１Ａに示す画角範囲Ｒ４０は、三次元空間内でレンダリングを行う視点Ｖから表示オブジェクトの表示面Ｐに画角θに相当する領域を投影した範囲を示している。また、図１１Ｂは、表示面Ｐにおける表示オブジェクトＣ４０と画角範囲Ｒ４０の関係を示している。上記の画角範囲Ｒ４０、及び表示オブジェクトＣ４０の情報が表示制御部３３０から見切れ検出部３４０に提供される。なお、画角範囲Ｒ４０は、表示部１８０における表示領域に対応する。

また、表示制御部３３０は、後述する見切れ検出部３４０による、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、見切れの発生をユーザに通知させる通知制御部としての機能を有する。

例えば、表示制御部３３０は、通知制御部として、後述する見切れ検出部３４０により見切れの発生が検出された場合に、見切れの発生をユーザに通知させてもよい。かかる構成によれば、見切れが発生しない場合にはユーザは見切れを意識する必要がないため、ユーザの視覚等を邪魔する恐れが軽減される。

また、表示制御部３３０は、表示オブジェクトと表示領域の配置関係に応じた通知制御を行う。表示オブジェクトと表示領域の配置関係に応じた通知制御の例については後述する。

また、表示制御部３３０は、通知方法判定部３６０により決定された通知方法により、見切れの発生をユーザに通知させてもよい。なお、通知方法判定部３６０による通知方法の決定については後述する。

例えば、表示制御部３３０は、通知方法判定部３６０による通知方法の決定に基づき、第一の実施形態で説明したような表示部による補助ＵＩ（補助情報）の表示によりユーザに見切れの発生を通知してもよい。

補助ＵＩ（補助情報）は、例えば第一の実施形態で説明したように、表示領域の周縁部に枠が表示されることで、ユーザに通知されてもよい。係る構成によれば、第一の実施形態で説明したように、ユーザは枠を通して表示オブジェクトが表示される空間を覗いているような感覚を受けると共に、見切れの発生や発生理由を理解することが可能となるため、見切れが発生した場合であっても違和感が軽減する。

また、第一の実施形態においては、見切れの発生検出を行っていない例を説明したが、本実施形態では、見切れの発生検出を行っているため、見切れの発生検出に基づいて、第一の実施形態よりも多様な補助ＵＩを用いることが可能である。以下では、図１２〜１４を参照して、見切れの発生が検出された場合に表示制御部３３０が表示させる見切れの発生を通知するための補助ＵＩの例を説明する。

図１２は、表示制御部３３０が表示させる見切れの発生を通知するための補助ＵＩの一例を示す説明図である。図１２においても見切れが発生しており、図２を参照して説明した表示オブジェクトＣ１０の例と同様に、図１２に示す表示オブジェクトＣ５０は、境界Ｒ５０の内部に表示される可視領域Ｃ５２と、表示されない非可視領域Ｃ５４、Ｃ５６、Ｃ５８を含む。

図１２に示すテキスト表示Ｕ５０は、表示オブジェクトＣ５０が表示領域（境界Ｒ５０の内部）に含まれる度合を示す補助ＵＩ（補助情報）である。すなわち、図１２の例において、表示制御部３３０は通知制御部としての機能を発揮し、表示オブジェクトが表示領域に含まれる度合を示す情報として、テキスト表示Ｕ５０を表示させて、ユーザに通知させている。係る構成によれば、ユーザは、表示オブジェクトがどの程度表示領域に含まれているのかを理解することが可能となる。

図１３は、表示制御部３３０が表示させる見切れの発生を通知するための補助ＵＩの他の一例を示す説明図である。図１３においても見切れが発生しており、図２を参照して説明した表示オブジェクトＣ１０の例と同様に、図１３に示す表示オブジェクトＣ６０は、表示領域の境界Ｒ６０の内部に表示される可視領域Ｃ６２と、表示されない非可視領域Ｃ６４、Ｃ６６、Ｃ６８を含む。

図１３に示す線分Ｕ６２、Ｕ６４は、表示領域の周縁部のうち、表示オブジェクトＣ６０の見切れが発生している辺を示す補助ＵＩである。すなわち、図１３の例において、補助ＵＩ（補助情報）は、表示領域の周縁部のうち表示オブジェクトと重なる領域を含む辺に線分が表示されることで、ユーザに通知されている。係る構成によれば、ユーザは、どこで見切れが発生しているのかをより容易に理解することが可能となる。なお、上述した図１３の例によれば、表示オブジェクトと表示領域の配置関係に応じて表示させる線分が異なるため、上述した図１３の例は、表示制御部３３０が行う、表示オブジェクトと表示領域の配置関係に応じた通知制御の一例でもある。

図１４は、表示制御部３３０が表示させる見切れの発生を通知するための補助ＵＩの他の一例を示す説明図である。図１４においても見切れが発生しており、図２を参照して説明した表示オブジェクトＣ１０の例と同様に、図１４に示す表示オブジェクトＣ７０は、表示領域の境界Ｒ７０の内部に表示される可視領域Ｃ７２と、表示されない非可視領域Ｃ７４、Ｃ７６、Ｃ７８を含む。

図１４に示す縮小オブジェクトＵ７０は、表示オブジェクトＣ７０を表示領域に縮小表示させることで、表示オブジェクトＣ７０の全体を示す、補助ＵＩ（補助情報）である。係る構成によれば、ユーザは見切れの発生を認識することが可能であると共に、見切れが発生した場合であっても、表示オブジェクトの全体概要を把握することが可能である。なお、表示オブジェクトを縮小せずに全体表示可能である場合（例えば、表示領域に収まる表示サイズであるが、表示位置により見切れが発生した場合）には、縮小されない表示オブジェクトが表示オブジェクトの全体を示す補助ＵＩとして表示されてもよい。

なお、見切れの発生が検出された場合に、本実施形態に係る表示制御部３３０が表示させる見切れの発生を通知するための補助ＵＩは上記の例に限定されない。例えば、表示制御部３３０は、表示領域全体、または表示領域のうち表示オブジェクトが表示される領域を除く領域を薄く色づけする補助ＵＩを表示させてもよい。また、表示制御部３３０は、上記で説明した複数の補助ＵＩの例を組み合わせて表示させてもよい。

また、表示制御部３３０は、通知方法判定部３６０による通知方法の決定に基づき、第二の実施形態で説明したように、所定の処理を施した表示オブジェクトを表示領域に表示させることでユーザに見切れの発生を通知してもよい。

上記所定の処理は、例えば第二の実施形態で説明したように、表示オブジェクトのうち、表示領域の周縁部と重なる周縁領域に対して施されてもよい。例えば、上記所定の処理は、第二の実施形態で説明したように、表示オブジェクトのうち、周縁領域における透過度を変更する（他の領域とは異ならせる）処理であってもよい。

なお、本実施形態に係る表示制御部３３０が行う所定の処理は上記の例に限定されない。例えば、所定の処理は、周縁領域におけるレンダリング方法、色、テクスチャ、透過度、模様、のうち少なくともいずれか一つを変更する処理であってもよい。また、所定の処理は、周縁領域におけるレンダリング方法、色、テクスチャ、透過度、模様、のうち少なくともいずれか一つを変更することで、周縁領域の視認性を周縁領域以外の表示オブジェクトの領域の視認性よりも低下させる処理であってもよい。係る構成によれば、ユーザに見切れの発生と、見切れが発生している発生場所を認識させることが可能である。

また、所定の処理は、表示オブジェクト全体をフェードアウトさせ、その後非表示にさせる処理であってもよい。

（見切れ検出部）
図１０に示す見切れ検出部３４０は、表示制御部３３０から提供される画角に関する情報に基づき、見切れの発生を検出する。

本実施形態に係る見切れ検出部３４０は、図１１Ｂを参照して説明した画角範囲Ｒ４０、及び表示オブジェクトＣ４０の情報に基づき、見切れの発生を検出する。例えば、見切れ検出部３４０は、表示オブジェクトＣ４０が画角範囲Ｒ４０に収まっていない場合に見切れの発生を検出してもよい。

見切れ検出部３４０は、見切れの発生を検出した場合に、当該検出結果（見切れの発生検出）を表示制御部３３０に提供する。

（センサ部）
図１０に示すセンサ部３５０は、ユーザやユーザの置かれた環境に関するセンシングを行い、ユーザの情報と環境の情報を取得する。例えば、センサ部３５０は、マイク、ＧＰＳ（Global Positioning System）センサ、加速度センサ、視覚（視線、注視点、焦点、瞬目等）センサ、生体情報（心拍、体温、血圧、脳波等）センサ、ジャイロセンサ、照度センサ等の各種センサを含んでもよい。また、センサ部３５０は、取得したユーザの情報と環境の情報を通知方法判定部３６０に提供する。

（通知方法判定部）
通知方法判定部３６０は、見切れの発生の通知方法の決定（判定）を行う。例えば、通知方法判定部３６０は、ユーザの情報、表示オブジェクトの情報、または環境の情報に基づいて、見切れの発生の通知方法を決定（判定）してもよい。

ここで、ユーザの情報は、例えば、ユーザの行動を示す行動情報、ユーザの動きを示す動き情報、生体情報、注視情報等を含んでもよい。行動情報は、例えば、静止中、歩行中、走行中、自動車運転中、階段昇降中等ユーザの現在の行動を示す情報であり、センサ部３５０により取得された加速度等のセンサ情報等から認識・取得されてもよい。また、動き情報は、移動速度、移動方向、移動加速度、コンテンツの位置への接近等の情報であり、センサ部３５０により取得された加速度、ＧＰＳデータ等のセンサ情報等から認識・取得されてもよい。また、生体情報は、ユーザの心拍、体温発汗、血圧、脈拍、呼吸、瞬目、眼球運動、脳波等の情報であり、センサ部３５０により取得されてもよい。また、注視情報は、視線、注視点、焦点、両眼の輻輳等のユーザの注視に関する情報であり、センサ部３５０により取得されてもよい。

また、表示オブジェクトの情報は、例えば、表示オブジェクトの表示位置、色、アニメーション特性、表示オブジェクトの属性等の情報を含んでもよい。表示位置は、表示部１８０において、表示オブジェクトが表示されるべき位置であってもよい。また、色の情報は、表示オブジェクトが有する色の情報であってもよい。また、アニメーション特性の情報は、例えば、表示オブジェクトの移動速度、移動方向、軌道、更新頻度（動きの頻度）等の情報であってもよい。表示オブジェクト属性の情報は、例えば、表示オブジェクト種類（テキスト表示、画像、ゲームキャラクタ、エフェクト等）、重要度、優先度等の情報であってもよい。上述した表示オブジェクトの情報は、例えば、記憶部１７０に記憶され、表示制御部３３０を介して通知方法判定部３６０に提供されてもよいし、表示制御部３３０により算出されて、通知方法判定部３６０に提供されてもよい。

また、環境の情報は、例えば、背景、周辺状況、場所、照度、高度、気温、風向き、風量、時刻等の情報を含んでもよい。背景の情報は、例えば、実空間等の背景に存在する色（背景色）や、背景に存在する情報の種類や重要度等の情報であり、撮像部１１０によって取得されてもよいし、または画像認識部３２０によって認識、及び取得が行われてもよい。また、周辺状況の情報は、ユーザ以外の人物や自動車が周辺に存在するか否かという情報や、混雑度等の情報であってもよく、画像認識部３２０によって認識、及び取得が行われてもよい。また、場所の情報は、例えば、屋内、屋外、水中、危険な場所等、ユーザがいる場所の特性を示す情報でもよいし、自宅、会社、慣れた場所、初めて訪れる場所等、当該場所のユーザにとっての意味を示す情報でもよい。場所の情報は、センサ部３５０により取得されてもよいし、画像認識部３２０によって認識、及び取得が行われてもよい。また、照度、高度、気温、風向き、風量、時刻（例えばＧＰＳ時刻）の情報は、センサ部３５０により取得されてもよい。

以下、上記で説明した、ユーザの情報、表示オブジェクトの情報、または環境の情報に基づく、通知方法判定部３６０による通知方法の決定についていくつか例を挙げて説明する。

例えば、表示オブジェクトが実空間の物体に重畳されて表示され、実物体を別の物に見せるような表示オブジェクトである場合、表示オブジェクトに所定の処理（アルファフェード等）を施すと本来の目的（実物体を別の物に見せること）が達成されない恐れがある。従って、通知方法判定部３６０は、表示オブジェクトが実空間の物体に重畳されて表示される表示オブジェクトであるという情報に基づいて、補助ＵＩの表示を通知方法として決定してもよい。

また、見切れの発生をユーザに明示したい場合には、通知方法判定部３６０は補助ＵＩの表示を通知方法として決定してもよい。

例えば、表示オブジェクトがテキスト表示である場合には、見切れが発生していることをユーザに認識させないと、ユーザは誤った情報を認識してしまう恐れがある。従って、通知方法判定部３６０は、表示オブジェクトがテキスト表示という表示オブジェクトの属性の情報に基づいて、補助ＵＩの表示を通知方法として決定してもよい。

また、表示オブジェクトが実空間の物体のサイズに合わせて表示される場合にも、見切れが発生していることをユーザに認識させないと、ユーザに表示オブジェクトが実空間の物体のサイズに合わせて表示されていることが認識されない恐れがある。従って、通知方法判定部３６０は、実空間の情報（環境の情報）と上記のような表示オブジェクトであるという表示オブジェクトの情報に基づいて、補助ＵＩの表示を通知方法として決定してもよい。

また、ユーザの視線を表示領域外へ誘導すべき場合にも、見切れが発生していることをユーザに明示的に通知させることが望ましい。従って、通知方法判定部３６０は、ユーザの生体情報や注視情報、環境の情報等に基づいて、ユーザの視線を表示領域外へ誘導すべきと判定可能な場合に、補助ＵＩの表示を通知方法として決定してもよい。

また、ユーザの焦点が表示オブジェクトに合っていない（合焦していない）、または、ユーザが表示オブジェクトを注視していない場合には、ユーザの視覚を邪魔することなく、見切れの発生を示唆することが望ましい。従って、通知方法判定部３６０は、ユーザの注視情報に基づいて、所定の処理を通知方法として決定してもよい。

また、ユーザの動きや、視線の移動が大きい場合にも同様に、ユーザの視覚を邪魔することなく、見切れの発生を示唆することが望ましい。従って、通知方法判定部３６０は、動き（加速度等）や、ユーザの注視情報に基づいて、所定の処理を通知方法として決定してもよい。

また、表示オブジェクトが、世界観の演出（雰囲気の演出）のためのオブジェクトである場合、途切れた表示や輪郭のボケ表示が許容され得ることがある。従って、通知方法判定部３６０は、表示オブジェクトの属性の情報に基づき、表示オブジェクトが上記のようなオブジェクトである場合には、所定の処理を通知方法として決定してもよい。

また、表示オブジェクトが、リスト表示やタイル状での表示等が行われるオブジェクトである場合、境界においてアルファフェード処理等が行われていても機能や意味が損なわれないことがある。したがって、通知方法判定部３６０は、表示オブジェクトの属性情報に基づき、表示オブジェクトが上記のようなオブジェクトである場合には、所定の処理を通知方法として決定してもよい。

以上、通知方法判定部３６０による通知方法の決定の例を説明したが、通知方法判定部３６０による通知方法の決定は上記の例に限定されず、上述したユーザの情報、表示オブジェクトの情報、環境の情報等の組み合わせにより多様な方法で決定されてもよい。

＜３−３．第三の実施形態の動作＞
以上、本開示の第三の実施形態に係る情報処理装置の構成例について説明した。続いて、図１７を参照して、本実施形態に係る情報処理装置の動作例について、特に表示制御部３３０、見切れ検出部３４０、通知方法判定部３６０等による表示制御に関する動作に着目して説明する。図１５は、本実施形態に係る情報処理装置の動作例を説明するためのフローチャート図である。

まず、見切れ検出部３４０が、表示制御部３３０から提供される画角に関する情報に基づき、見切れの発生を検出する（Ｓ３０４）。見切れの発生が検出されなかった場合（Ｓ３０４においてＮＯ）、所定の処理が行われていない表示オブジェクトが表示される（Ｓ３１０）。

一方、見切れの発生が検出された場合（Ｓ３０４においてＹＥＳ）、通知方法判定部３６０により通知方法の決定が行われる（Ｓ３０６）。通知方法判定部３６０が、補助ＵＩの表示を通知方法として決定した場合（Ｓ３０６においてＹＥＳ）、表示制御部３３０は、補助ＵＩと所定の処理が行われていない表示オブジェクトを表示部１８０に表示させる（Ｓ３０８、Ｓ３１０）。

一方、通知方法判定部３６０が、所定の処理を通知方法として決定した場合（Ｓ３０６においてＮＯ）、表示制御部３３０は、所定の処理を表示制御部に施し、当該所定の処理が施された表示オブジェクトを表示部１８０に表示させる（Ｓ３１２）。

なお、上記で説明した動作は一例であって、本実施形態にかかる表示制御部３３０の表示制御に係る動作は上記に限定されない。例えば、表示制御部３３０は、上記の一連の処理（ステップＳ３０４〜Ｓ３１２）を繰り返し行うことで、現状のユーザ位置等に応じた表示オブジェクトの表示を随時更新させてもよい。

＜３−４．第三の実施形態の変形例＞
以上、本開示の第三の実施形態を説明した。以下では、本実施形態の幾つかの変形例を説明する。なお、以下に説明する各変形例は、単独で本実施形態に適用されてもよいし、組み合わせで本実施形態に適用されてもよい。また、各変形例は、本実施形態で説明した構成に代えて適用されてもよいし、本実施形態で説明した構成に対して追加的に適用されてもよい。

（変形例１）
上記実施形態では、見切れの発生を通知する補助ＵＩ（補助情報）は、表示制御部３３０により表示部１８０に表示されてユーザに通知される例を説明したが、本実施形態は係る例に限定されない。

例えば、補助ＵＩは表示部１８０に表示されるのではなく、振動、照明（ＬＥＤの発光等）、音声等により出力されてもよい。例えば、本実施形態に係る情報処理装置は、振動、照明、音声、のうち少なくともいずれか一つを出力する出力部を有してもよい。また、本実施形態に係る情報処理装置は、振動、照明、音声、のうち少なくともいずれか一つを含む方法で、見切れの発生を通知させる通知制御部をさらに有してもよい。

係る構成によれば、表示部１８０の表示を変更することなく、ユーザに見切れの発生を通知することが可能である。

（変形例２）
上記実施形態では、見切れ検出部３４０が、画角範囲に表示オブジェクトが収まっているか否かに基づいて見切れの発生検出を行う例を説明したが、本実施形態は係る例に限定されない。

例えば、見切れ検出部は、表示オブジェクトが有する所定の領域のうち一部の領域が表示領域に含まれない場合に、見切れの発生を検出してもよく、表示制御部３３０は、係る場合に、通知制御部としての機能を発揮して見切れの発生をユーザに通知してもよい。

図１６は本変形例による見切れの発生検出を説明するための説明図である。図１６に示す表示オブジェクトＣ８０の全体が表示されるためには、例えば、画角範囲が領域Ｒ８０のように表示オブジェクトＣ８０の全体を含む必要がある。しかし、本変形例に係る見切れ検出部は、画角範囲が予め設定された領域Ｒ８２の全てを含む場合には、画角範囲が表示オブジェクトＣ８０の全てを含まない場合であっても見切れの発生を検出しなくてもよい。また、本変形例に係る見切れ検出部は、領域Ｒ８２が画角範囲に収まらない場合には、見切れの発生を検出してもよい。例えば、所定の領域Ｒ８２は、表示オブジェクトＣ８０の重要な領域を含むように設定されてもよい。係る構成によれば、表示オブジェクトのうち、重要な領域において見切れが発生した場合のみ、見切れの発生が検出される。

＜３−５．第三の実施形態の効果＞
以上、本開示に係る第二の実施形態について説明した。本実施形態によれば、見切れの発生が検出された場合に、補助ＵＩが表示される、または所定の処理が施されることで、見切れが発生しない場合にユーザの視覚を邪魔することなく、見切れ発生によるユーザへの違和感を軽減させることが可能である。また、ユーザは見切れの発生を認識することで、表示オブジェクト全体が表示されておらず、表示領域外にも情報が存在することを理解可能となるため、表示領域に表示された表示オブジェクトの一部のみで意味を誤解してしまうことが抑制される。さらに、ユーザは見切れにより表示オブジェクトが切れている場所と、見切れた理由（例えば現在のユーザの位置では表示サイズが大きすぎる等）を理解し易くなるため、自らの移動等により表示領域の外に存在する情報を見ようとすることが可能となる。

＜＜４．ハードウェア構成例＞＞
以上、本開示の各実施形態を説明した。上述した表示制御処理（通知制御処理）、見切れの発生検出処理、通知方法判定処理等の情報処理は、ソフトウェアと、以下に説明する情報処理装置１のハードウェアとの協働により実現される。

図１７は、情報処理装置１のハードウェア構成の一例を示す説明図である。図１７に示したように、情報処理装置１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１３と、入力装置１４と、出力装置１５と、ストレージ装置１６と、撮像装置１７と、通信装置１８とを備える。

ＣＰＵ１１は、演算処理装置及び制御装置として機能し、各種プログラムに従って情報処理装置１内の動作全般を制御する。また、ＣＰＵ１１は、マイクロプロセッサであってもよい。ＲＯＭ１２は、ＣＰＵ１１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ１３は、ＣＰＵ１１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはＣＰＵバス等から構成されるホストバスにより相互に接続されている。主に、ＣＰＵ１１、ＲＯＭ１２及びＲＡＭ１３とソフトウェアとの協働により、画像認識部１２０、３２０、表示制御部１３０、３３０、見切れ検出部３４０、通知方法判定部３６０、及び第三の実施形態の変形例１における通知制御部等の機能が実現される。

入力装置１４は、マウス、キーボード、タッチパネル、ボタン、マイクロフォン、スイッチ及びレバー等ユーザが情報を入力するための入力手段と、ユーザによる入力に基づいて入力信号を生成し、ＣＰＵ１１に出力する入力制御回路等から構成されている。情報処理装置１のユーザは、該入力装置１４を操作することにより、情報処理装置１に対して各種のデータを入力したり処理動作を指示したりすることができる。

出力装置１５は、例えば、液晶ディスプレイ（ＬＣＤ）装置、ＯＬＥＤ装置及びランプ等の表示装置を含む。さらに、出力装置１５は、スピーカー及びヘッドホン等の音声出力装置を含む。例えば、表示装置は、撮像された画像や生成された画像等を表示する。一方、音声出力装置は、音声データ等を音声に変換して出力する。出力装置１５は、図３を参照して説明した表示部１８０や、第三の実施形態の変形例１における出力部に対応する。

ストレージ装置１６は、データ格納用の装置である。ストレージ装置１６は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置及び記憶媒体に記録されたデータを削除する削除装置等を含んでもよい。ストレージ装置１６は、ＣＰＵ１１が実行するプログラムや各種データを格納する。ストレージ装置１６は、図３を参照して説明した記憶部１７０に対応する。

撮像装置１７は、光を集光する撮影レンズ及びズームレンズ等の撮像光学系、及びＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）またはＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）等の信号変換素子を備える。撮像光学系は、被写体から発せられる光を集光して信号変換部に被写体像を形成し、信号変換素子は、形成された被写体像を電気的な画像信号に変換する。撮像装置１７は、図３を参照して説明した撮像部１１０に対応する。

通信装置１８は、例えば、通信網に接続するための通信デバイス等で構成された通信インタフェースである。また、通信装置１８は、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）対応通信装置、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）対応通信装置、有線による通信を行うワイヤー通信装置、またはブルートゥース（登録商標）通信装置を含んでもよい。

＜＜５．むすび＞＞
以上説明したように、本開示の各実施形態によれば、見切れの発生によるユーザへの違和感を軽減することが可能である。

以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。

例えば、上記実施形態では、表示オブジェクトが眼鏡型の表示デバイスに表示される例を説明したが、本技術はかかる例に限定されない。例えば、自動車のフロントガラス等に画像を表示させる透過型のヘッドアップディスプレイにおいて本技術が適用されてもよいし、透過型かつ設置型の表示デバイスにおいて本技術が適用されてもよい。

また、上記実施形態では、表示制御（通知制御）を行う情報処理装置が表示部を有する例を説明したが、本技術はかかる例に限定されない。例えば、表示制御（通知制御）を行う情報処理装置と、表示部を有する表示デバイスは異なる装置であってもよい。

また、上記実施形態では、表示制御（通知制御）を行う情報処理装置が撮像部や画像認識部、記憶部等を備える例を説明したが、本技術はかかる例に限定されない。例えば、表示制御（通知制御）を行う情報処理装置は、撮像画像や画像認識結果、表示オブジェクト等の情報を他の装置から直接、またはネットワーク等を介して受け取って表示制御（表示制御）を行ってもよい。

また、上記第三の実施形態では、補助ＵＩの出力、または所定の処理（周縁領域のアルファフェード処理等）、のいずれかによって見切れの発生の通知が行われる例を説明したが、本技術はかかる例に限定されない。例えば、補助ＵＩの出力と所定の処理（周縁領域のアルファフェード処理等）の両方が組み合わされて、見切れの発生の通知が行われてもよい。

また、上記実施形態における各ステップは、必ずしもフローチャート図として記載された順序に沿って時系列に処理する必要はない。例えば、上記実施形態の処理における各ステップは、フローチャート図として記載した順序と異なる順序で処理されても、並列的に処理されてもよい。

また、情報処理装置１に内蔵されるＣＰＵ、ＲＯＭ及びＲＡＭ等のハードウェアに、上述した情報処理装置１の機能を発揮させるためのコンピュータプログラムも作成可能である。また、該コンピュータプログラムを記憶させた記憶媒体も提供される。また、当該コンピュータプログラムを実行させるコンピュータの数は特に限定されない。例えば、当該コンピュータプログラムを、複数のコンピュータ（例えば、複数のサーバ等）が互いに連携して実行してもよい。なお、単数のコンピュータ、または、複数のコンピュータが連携するものを、「コンピュータシステム」とも称する。

また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。

なお、以下のような構成も本開示の技術的範囲に属する。
（１）
透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生をユーザに通知させる通知制御部を備える、情報処理装置。
（２）
前記通知制御部は、前記見切れの発生が検出された場合に、前記見切れの発生を前記ユーザに通知させる、前記（１）に記載の情報処理装置。
（３）
前記通知制御部は、前記表示オブジェクトと前記表示領域は位置関係に応じた通知制御を行う、前記（１）または（２）に記載の情報処理装置。
（４）
前記見切れの発生は、前記表示部による補助情報の表示により前記ユーザに通知される、前記（１）〜（３）のいずれか一項に記載の情報処理装置。
（５）
前記補助情報は、前記表示領域の周縁部に枠が表示されることで前記ユーザに通知される、前記（４）に記載の情報処理装置。
（６）
前記補助情報は、前記表示領域の周縁部のうち前記表示オブジェクトと重なる領域を含む辺に線分が表示されることで前記ユーザに通知される、前記（４）に記載の情報処理装置。
（７）
前記補助情報は、前記表示オブジェクトの全体を示す、前記（４）に記載の情報処理装置。
（８）
前記補助情報は、前記表示オブジェクトが前記表示領域に含まれる度合を示す情報である、前記（４）に記載の情報処理装置。
（９）
前記見切れの発生は、所定の処理を施した前記表示オブジェクトが前記表示領域に表示されることで前記ユーザに通知される、前記（１）〜（８）のいずれか一項に記載の情報処理装置。
（１０）
前記所定の処理は、前記表示オブジェクトのうち、前記表示領域の周縁部と重なる周縁領域に対して施される、前記（９）に記載の情報処理装置。
（１１）
前記所定の処理は、前記周縁領域におけるレンダリング方法、色、明度、透過度のうち少なくともいずれか一つを変更する処理である、前記（１０）に記載の情報処理装置。
（１２）
前記所定の処理は、前記表示オブジェクトをフェードアウトさせることを含む、前記（９）に記載の情報処理装置。
（１３）
前記見切れの発生は、振動、照明、音声、のうち少なくともいずれか一つを含む方法でユーザに通知される、前記（１）〜（１２）のいずれか一項に記載の情報処理装置。
（１４）
前記通知制御部は、前記表示オブジェクトが有する所定の領域のうち一部の領域が前記表示領域に含まれない場合に、前記見切れの発生を前記ユーザに通知させる、前記（１）〜（１３）のいずれか一項に記載の情報処理装置。
（１５）
前記情報処理装置は、ユーザの情報、表示オブジェクトの情報、環境の情報、のうち少なくともいずれか一つに基づいて、前記見切れの発生の通知方法を判定する、通知方法判定部をさらに備える、前記（１）〜（１４）のいずれか一項に記載の情報処理装置。
（１６）
前記ユーザの情報は、ユーザの行動を示す行動情報、ユーザの動きを示す動き情報、生体情報、注視情報、のうち少なくともいずれか一つを含む、前記（１５）に記載の情報処理装置。
（１７）
前記表示オブジェクトの情報は、表示位置、色、表示オブジェクトの属性のうち少なくともいずれか一つの情報を含む、前記（１５）または（１６）に記載の情報処理装置。
（１８）
前記環境の情報は、背景、照度、場所、のうち少なくともいずれか一つの情報を含む、前記（１５）〜（１７）のいずれか一項に記載の情報処理装置。
（１９）
透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生をプロセッサがユーザに通知させることを含む、情報処理方法。
（２０）
コンピュータシステムに、
透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生をユーザに通知させる、通知制御機能を実現させるための、プログラム。

１ 情報処理装置
１１０ 撮像部
１２０ 画像認識部
１３０ 表示制御部
１７０ 記憶部
１８０ 表示部
１８２ 空間光変調部
１８４ コリメート光学系
１８５Ａ、１８５Ｂ 表示領域
１８６ 導光板
３２０ 画像認識部
３３０ 表示制御部
３４０ 見切れ検出部
３５０ センサ部
３６０ 通知方法判定部

Claims (16)

1. 透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生をユーザに通知させる通知制御部を備え、
   前記通知制御部は、前記表示オブジェクトと前記表示領域の配置関係に応じた通知制御を行い、
   前記見切れの発生は、補助情報として、前記表示部によって、前記表示領域の周縁部に枠が表示されることで前記ユーザに通知される、
   情報処理装置。
2. 透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生をユーザに通知させる通知制御部を備え、
   前記通知制御部は、前記表示オブジェクトと前記表示領域の配置関係に応じた通知制御を行い、
   前記見切れの発生は、補助情報として、前記表示部によって、前記表示領域の周縁部のうち前記表示オブジェクトと重なる領域を含む辺に線分が表示されることで前記ユーザに通知される、
   情報処理装置。
3. 透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生をユーザに通知させる通知制御部を備え、
   前記通知制御部は、前記表示オブジェクトと前記表示領域の配置関係に応じた通知制御を行い、
   前記見切れの発生は、前記表示部によって、前記表示オブジェクトの全体を示す補助情報の表示により前記ユーザに通知される、
   情報処理装置。
4. 透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生をユーザに通知させる通知制御部を備え、
   前記通知制御部は、前記表示オブジェクトと前記表示領域の配置関係に応じた通知制御を行い、
   前記見切れの発生は、前記表示部によって、前記表示オブジェクトが前記表示領域に含まれる度合を示す情報である補助情報の表示により前記ユーザに通知される、
   情報処理装置。
5. 透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生をユーザに通知させる通知制御部を備え、
   前記見切れの発生は、所定の処理を施した前記表示オブジェクトが前記表示領域に表示されることで前記ユーザに通知される、
   情報処理装置。
6. 前記所定の処理は、前記表示オブジェクトのうち、前記表示領域の周縁部と重なる周縁領域に対して施される、請求項５に記載の情報処理装置。
7. 前記所定の処理は、前記周縁領域におけるレンダリング方法、色、明度、透過度のうち少なくともいずれか一つを変更する処理である、請求項６に記載の情報処理装置。
8. 前記所定の処理は、前記表示オブジェクトをフェードアウトさせることを含む、請求項５に記載の情報処理装置。
9. 透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生をユーザに通知させる通知制御部を備え、
   前記見切れの発生は、振動、照明、音声、のうち少なくともいずれか一つを含む方法でユーザに通知される、
   情報処理装置。
10. 前記通知制御部は、前記表示オブジェクトが有する所定の領域のうち一部の領域が前記表示領域に含まれない場合に、前記見切れの発生を前記ユーザに通知させる、請求項１〜９のいずれか一項に記載の情報処理装置。
11. 透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生をユーザに通知させる通知制御部と、
    ユーザの情報、表示オブジェクトの情報、環境の情報、のうち少なくともいずれか一つに基づいて、前記見切れの発生の通知方法を判定する、通知方法判定部と、
    を備える、
    情報処理装置。
12. 前記ユーザの情報は、ユーザの行動を示す行動情報、ユーザの動きを示す動き情報、生体情報、注視情報、のうち少なくともいずれか一つを含む、請求項１１に記載の情報処理装置。
13. 前記表示オブジェクトの情報は、表示位置、色、表示オブジェクトの属性のうち少なくともいずれか一つの情報を含む、請求項１１または１２に記載の情報処理装置。
14. 前記環境の情報は、背景、照度、場所、のうち少なくともいずれか一つの情報を含む、請求項１１〜１３のいずれか一項に記載の情報処理装置。
15. 透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生をプロセッサが、所定の処理を施した前記表示オブジェクトを前記表示領域に表示させることでユーザに通知することを含む、
    情報処理方法。
16. コンピュータシステムに、
    透過型の表示部の表示領域に、少なくとも一部の領域が表示される表示オブジェクトの全部が表示領域に含まれない見切れの発生検出に基づいて、前記見切れの発生を所定の処理を施した前記表示オブジェクトを前記表示領域に表示させることでユーザに通知させる、通知制御機能を実現させるための、プログラム。

Images