JP5895658B2 - 表示制御装置および表示制御方法 - Google Patents

Description

本発明は、表示制御装置および表示制御方法に関するものである。

近年、ディスプレイの小型化・薄型化・低価格化により、様々な場所に情報表示環境を低コストで構築できるようになってきている。例えば、テーブルの天板面にディスプレイを埋め込み、テーブルに情報表示機能を持たせる技術も普及してきている。しかし、かかる技術を用いた場合、本来のテーブルとしての機能も果たす必要があり、その際、テーブル上に置かれた物体により、表示面に表示される表示情報が遮蔽されてしまうといった状況が発生する。

かかる状況に対応するため、例えば、表示面とその表示面に表示される表示情報を閲覧する閲覧者との間に遮蔽物が存在する場合、その遮蔽物を検出し、表示情報が遮蔽物によって遮蔽されないように自動的に情報表示レイアウトを構築する技術が存在する（例えば、特許文献１参照）。かかる技術においては、表示面上の物体を表示情報の情報量を減ずる存在と捉え、その情報量を減ずる状態を回避することを目的としている。

しかし、表示面上の物体と表示情報と閲覧者の関係を考えた場合、表示面上の物体自体も、表示情報と同様に閲覧者にとっては意味があると考えられる。そこで、表示面上に存在する物体を検出し、検出された物体に応じて、表示面に物体に関する付加情報を表示するといった技術が存在する（特許文献２参照）。

特開２００４−３０２１２４号公報 特願２０１１−１９６２６２号

しかしながら、かかる技術のように、閲覧者にとって情報を得る対象、あるいは焦点を当てる対象が表示面上の物体が主となるような場合は、物体から離れた位置に情報を表示すると、閲覧者の視界に入らない可能性が高くなってしまう。また、表示面上の物体が主となり、表示情報の内容がその付加情報であるならば、表示情報が物体の近傍に存在していた方が、物体との関連性を直感的に把握しやすくなる。

表示面に情報を表示する目的が広告・宣伝などであった場合、まず、見てもらうことが重要となる。主注目対象に焦点を当てている際に、表示情報を主注目対象の近傍に配置し、閲覧者の視界に入るようにしておくことで、次の注目対象とする気づきとなるような構成は有効である。この際、表示情報は、その情報内容の一部が遮蔽されていても問題はなく、遮蔽している物体の位置を容易に変更することが可能であり、その遮蔽状態を解除することで、隠されている情報が可視状態になればよい。

例えば、ファーストフード・レストランなどにおいては、トレイ上に広告が印刷された紙を置くことが多い。この際、広告情報は、トレイ上に置かれる料理・食器などにより、部分的に遮蔽された状態になってしまう。しかし、本来このような状況での利用者の主目的は食事であり、主注目対象は料理・食器である。主目的を果たす過程で自然と目に入る位置に広告が存在するので、広告情報の存在にも気づきやすくなる。

また、ある情報要素を自覚的に明らかにしないことによって注意を引く広告手法の一つであるティザー広告のように、情報の一部が遮蔽されている状態は、その遮蔽されている部分には、どのような情報が表示されているのだろうと閲覧者の興味を引く効果を発生させるメリットもある。また、閲覧者が遮蔽状態にある部分の情報を取得するには、遮蔽している物体を移動させる行為を必要とさせるが、この行為を検出することにより、閲覧者が表示情報を閲覧したことを間接的に検出することもできる。

本発明では、表示面に表示される電子的な情報と、表示面に表示される情報とは異なる別種の物理情報媒体が共存しているような環境を想定する。このような環境において、物理情報媒体の存在によって、電子的な情報が部分的に遮蔽されるような情報表示レイアウトを自動的に構築することにより、電子的な情報に対する気づきを発生させる、興味を持たせる仕組みについて説明する。また、電子的な情報を遮蔽状態にしている物体の状態変化を検出することにより、閲覧者の情報の閲覧状態、特に、積極的な閲覧状態を検出する仕組みについても言及する。

上記問題を解決するために、本発明のある観点によれば、表示部の表示面を少なくとも一方向から遮蔽するオブジェクトを検出する検出部と、前記表示部による表示を制御する表示制御部と、を備え、前記表示制御部は、前記表示面上で前記オブジェクトにより遮蔽される領域と重なる領域に表示情報を配置する表示位置調整部を備える、ことを特徴とする、表示制御装置が提供される。

前記表示制御装置は、前記オブジェクトの性質を特定する特定部をさらに備え、前記表示位置調整部は、前記特定部による特定結果に応じて前記表示情報の位置を決定してもよい。

前記表示制御部は、前記オブジェクトにより遮蔽される領域と前記表示情報との位置関係に応じて、前記表示情報に含まれる内容の位置を決定する情報内容配置調整部をさらに備えてもよい。

前記表示制御部は、前記表示情報に対する操作に基づいて、前記表示情報を移動させる入力情報処理部をさらに備えてもよい。

前記表示制御部は、前記表示情報に対する操作に基づいて、全容情報の一部が表示された状態から前記全容情報が表示された状態に変更する入力情報処理部をさらに備えてもよい。

また、本発明の別の観点によれば、表示部の表示面を少なくとも一方向から遮蔽するオブジェクトを検出するステップと、前記表示部による表示を制御するステップと、を含み、前記表示を制御するステップは、前記表示面上で前記オブジェクトにより遮蔽される領域と重なる領域に表示情報を配置するステップを含む、ことを特徴とする、表示制御方法が提供される。

以上説明したように本発明によれば、電子的な情報に対する気づきを発生させることが可能である。また、電子的な情報に対する興味を持たせることが可能である。

本発明の第１の実施形態に係る表示制御装置の機能構成を示す図である。 表示面に遮蔽物体が載せられている状態を示す図である。 表示面に遮蔽物体が載せられている状態を示す図である。 表示情報の表示レイアウトの構成例を示す図である。 表示情報の表示レイアウトの構成例を示す図である。 表示情報に含まれる内容の位置決定例を示す図である。 表示制御装置の動作の流れを示すフローチャートである。 本発明の第２の実施形態に係る表示制御装置の機能構成を示す図である。 表示情報に対する操作に基づく表示情報の移動例を示す図である。 表示情報に対する操作に基づく表示情報の移動例を示す図である。 表示部が壁画ディスプレイにより構成される場合の例を示す図である。

以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。

また、本明細書および図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットを付して区別する場合もある。ただし、実質的に同一の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。

［第１の実施形態の説明］
まず、本発明の第１の実施形態について説明する。本発明の第１の実施形態では、表示面上を遮蔽する遮蔽物体の検出および検出された遮蔽物体に応じた情報表示レイアウトの自動構成の仕組みについて説明する。

［構成の説明］
図１は、本発明の第１の実施形態に係る表示制御装置１０Ａの機能構成を示す図である。図１に示すように、本発明の第１の実施形態に係る表示制御装置１０Ａは、表示部１０１、遮蔽物体検出部１０２、遮蔽物体特定部１０３、表示制御部１０４および記憶部１０５を備える。

表示部１０１は、例えば、液晶ディスプレイ、ＥＬ（ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイなどにより構成される。例えば、後に説明するように、表示部１０１は、記憶部１０５に備えられている表示情報記憶部１０５ａにより記憶されている表示情報を、表示位置調整部１０４ａによって決定された情報表示レイアウトに従って、表示部１０１の表示面に表示する。なお、図１に示した例では、表示部１０１が表示制御装置１０Ａと一体化されているが、表示部１０１は表示制御装置１０Ａと別体に構成されていてもよい。

遮蔽物体検出部１０２は、例えば、物体の接触を検出することが可能なデバイス（例えば、タッチセンサ、圧力センサ、静電容量センサなど）または非接触により物体を検出することが可能なデバイス（例えば、撮像素子、赤外線センサ、光センサ、温度センサ、磁界センサなど）により構成される。遮蔽物体検出部１０２は、表示部１０１の表示面を少なくとも一方向から遮蔽する遮蔽物体を検出する。

閲覧者が表示情報を閲覧している場合には、遮蔽物体は、表示部１０１による閲覧者への情報表示量を減ずる物体となる。この場合、遮蔽物体検出部１０２は、表示部１０１の表示面に表示される表示情報と表示情報の閲覧者との間に存在する遮蔽物体を検出することが可能である。

遮蔽物体検出部１０２による遮蔽物体の検出結果には、少なくとも、表示面上で遮蔽物体により遮蔽される領域が含まれる。また、遮蔽物体の検出結果には、遮蔽物体を特定するための情報（例えば、遮蔽物体の特徴量の検出結果、遮蔽物体に敷設されたマーカの検出結果など）が含まれていてもよいし、検出状態の変化（例えば、検出状態から非検出状態への変化など）の検出結果が含まれていてもよい。

ここで、遮蔽物体検出部１０２による遮蔽物体の検出例について、図２、図３および図１１を参照しながら説明する。図２は、表示部１０１の表示面１０１ａに遮蔽物体２０１が載せられている状態を示す図である。表示面１０１ａに遮蔽物体２０１が載せられた場合、例えば、遮蔽物体検出部１０２は、遮蔽物体２０１により遮蔽される領域２０２の位置を検出する。例えば、領域２０２の位置は、表示面１０１ａの座標系における領域２０２の位置であってもよい。また、遮蔽物体検出部１０２は、遮蔽物体の特徴量（例えば、遮蔽物体の形状、遮蔽物体の検出信号など）を検出する。

図３は、表示部１０１の表示面１０１ａに遮蔽物体３０１が載せられている状態を示す図である。遮蔽物体３０１は、例えば、特定パターンを有するマーカ３０２が表示面１０１ａに接触する面３０１ａに敷設されている。表示面１０１ａに遮蔽物体３０１が載せられた場合、例えば、遮蔽物体検出部１０２は、遮蔽物体３０１により遮蔽される領域３０３の位置を検出する。領域３０３の位置は、表示面１０１ａの座標系におけるマーカ３０２の位置であってもよいし、表示面１０１ａの座標系における領域３０３の位置であってもよい。また、遮蔽物体検出部１０２は、遮蔽物体３０１に敷設されたマーカ３０２を検出する。

図１１は、表示部１１０１が壁画ディスプレイにより構成される場合の例を示す図である。特に、図１１は、表示部１１０１が壁画ディスプレイにより構成される場合において、表示部１１０１と閲覧者とが存在する空間１１００を上から見た図である。空間１１００には、表示部１１０１に表示された表示情報を閲覧できる有効領域１１０２が存在する。有効領域１１０２は、表示部１１０１の視野角、情報表示能力（例えば、表示情報の内容を閲覧できる距離など）、遮蔽物体の検出に用いられるデバイスの能力（例えば、検出範囲など）などによって規定される。表示情報の閲覧者は、例えば、有効領域１１０２に存在する。

また、空間１１００には、表示部１１０１に表示された表示情報を閲覧できない無効領域１１０３が存在する。無効領域１１０３に閲覧者が存在する場合には、閲覧者は、視野角、情報表示能力、デバイスの能力などの関係上、表示部１１０１に表示された表示情報を閲覧するのが困難な状況にある。

例えば、無効領域１１０３に閲覧者が存在する場合、閲覧者が視野角の範囲外であるため表示情報が閲覧困難な状態である。また、例えば、無効領域１１０３に閲覧者が存在する場合、閲覧者と表示情報との距離が遠いため表示情報が閲覧困難な状態である。また、例えば、無効領域１１０３に閲覧者が存在する場合、遮蔽物体が検出範囲外に存在する可能性が高いため、遮蔽物体により遮蔽される領域を考慮した情報表示がなされない状態である。かかる理由により、無効領域１１０３に閲覧者が存在する場合には、本実施形態の対象から除外されてもよい。

物体１１０４は、空間１１００に存在し、例えば、柱のような構造をした物体である。このとき、例えば、遮蔽物体検出部１０２は、空間１１００に存在する遮蔽物体を検出する。図２および図３に示した例とは異なり、表示部１１０１の表示面に対して遮蔽物体となり得る物体が、表示面と非接触な状態で存在するとき、表示部１１０１と閲覧者との位置関係により、遮蔽物体の検出が異なる。

例えば、閲覧者が地点Ｐ１から表示部１１０１を閲覧している場合、物体１１０４により遮蔽された状態は、遮蔽状態１１０５として遮蔽物体検出部１０２により検出される。一方、閲覧者が地点Ｐ２から表示部１１０１を閲覧している場合、物体１１０４により遮蔽された状態は、遮蔽状態１１０６として遮蔽物体検出部１０２により検出される。表示部１１０１と閲覧者の地点Ｐ１・Ｐ２、および物体１１０４との位置関係から、遮蔽状態１１０６には、物体１１０４があるため遮蔽された遮蔽領域１１０７が存在し、遮蔽状態１１０５には遮蔽領域は存在しない。

図１１に示した例のように、有効領域１１０２に存在する閲覧者の位置を検出するデバイスは、上記したように、遮蔽物体検出部１０２を構成する各種のデバイスであってもよいし、他のデバイス（例えば、人体検出センサなど）であってもよいし、これらの組み合わせであってもよい。なお、遮蔽物体検出部１０２は、遮蔽物体を検出する諸機能により表示部１０１の情報表示機能を阻害することのない構成であることが望ましい。

図１に戻って説明を続ける。記憶部１０５は、表示制御装置１０Ａにおける動作に使用される各種のプログラム、各種のデータなどを記憶する機能を有する。記憶部１０５に記憶されている各種のデータは、遮蔽物体特定部１０３、表示制御部１０４における各処理において参照される。例えば、記憶部１０５は、表示情報記憶部１０５ａおよび遮蔽物体情報記憶部１０５ｂを有し、表示情報記憶部１０５ａは、表示情報に関するデータを記憶しており、遮蔽物体情報記憶部１０５ｂは、遮蔽物体に関する情報を記憶している。

表示情報に関するデータには、例えば、表示情報自体（表示情報のソース）、表示情報のサイズ、表示情報を構成する各情報要素に関する情報などが含まれていてもよい。また、表示情報に関するデータには、表示情報を構成する各情報要素の遮蔽優先度が含まれていてもよい。例えば、遮蔽優先度は、高いほど遮蔽物体により遮蔽される部分（以下、「被遮蔽部分」とも言う。）として決定され易くなる。

また、表示情報に関するデータには、表示情報の構成が含まれていてもよい。この表示情報の構成は、例えば、表示情報内の各情報要素のレイアウトである。また、表示情報に関するデータには、表示情報の表示優先度が含まれていてもよい。表示優先度は、高いほどその表示情報が表示部１０１に表示され易くなる。

また、表示情報に関するデータには、遮蔽物体情報記憶部１０５ｂに記憶されている遮蔽物体に関する情報との関連度が含まれていてもよい。例えば、遮蔽物体との関連度が高い表示情報ほど、優先的に表示部１０１に表示されてもよい。また、表示情報に関するデータには、遮蔽物体が存在しない場合における情報表示の有無、遮蔽物体が存在しない場合における情報表示の優先度などが含まれていてもよい。

また、表示情報に関するデータには、情報表示の状態変化に関する情報が含まれてもよい。状態変化に関する情報は、例えば、ある遮蔽物体が認識されることによって、情報表示された後、トリガーとなった遮蔽物体が、対象領域からの除去などによって、認識されなくなった場合、ただちに表示情報を非表示にするといった情報であってもよい。あるいは、状態変化に関する情報は、遮蔽物体が認識されなくなったときから所定時間を経過したら、情報を非表示にするといった情報であってもよい。あるいは、状態変化に関する情報は、同、不同に関わらず、新たな遮蔽物体が認識されるまで、表示形態を維持するといった情報であってもよい。

遮蔽物体に関する情報には、遮蔽物体の特徴量（例えば、遮蔽物体の形状、遮蔽物体から検出される検出信号など）および遮蔽物体の性質（例えば、その遮蔽物体の種類など）が含まれていてもよい。また、遮蔽物体に関する情報には、遮蔽物体により遮蔽される表示面における領域のサイズが含まれていてもよい。また、遮蔽物体に関する情報には、遮蔽物体自体のもつ発信情報（例えば、マーカなど）およびその発信情報と遮蔽物体との物理的な位置関係が含まれていてもよい。また、遮蔽物体に関する情報には、当該遮蔽物体の検出時に表示される表示情報を識別するための情報が含まれていてもよい。

遮蔽物体特定部１０３は、遮蔽物体を特定する機能を有する。例えば、遮蔽物体特定部１０３は、遮蔽物体検出部１０２による遮蔽物体の検出結果および遮蔽物体情報記憶部１０５ｂにより記憶されている遮蔽物体に関する情報に基づいて、表示部１０１の表示面を遮蔽する遮蔽物体を特定する。遮蔽物体の特定は、遮蔽物体が有する何らかの性質の特定であってもよい。

ここで、遮蔽物体の性質は、例えば、遮蔽物体検出部１０２により遮蔽物体の特徴量（例えば、遮蔽物体の形状、検出信号など）が検出され、遮蔽物体に関する情報に物体毎の特徴量が含まれる場合には、検出された特徴量と物体毎の特徴量との照合結果に基づいて特定されてもよい。また、遮蔽物体検出部１０２により遮蔽物体に敷設されたマーカが検出され、遮蔽物体に関する情報に物体毎のマーカが含まれる場合には、検出されたマーカと物体毎のマーカとの照合結果に基づいて特定されてもよい。

表示制御部１０４は、表示位置調整部１０４ａおよび情報内容配置調整部１０４ｂを有しており、表示部１０１による表示を制御する機能を有する。例えば、表示制御部１０４は、遮蔽物体特定部１０３による特定結果および記憶部１０５により記憶されている情報に基づいて、表示部１０１の表示面に表示する表示情報のレイアウトを構築する。表示位置調整部１０４ａは、表示部１０１の表示面上で遮蔽物体により遮蔽される領域と重なる領域に表示情報を配置する。

例えば、表示位置調整部１０４ａは、遮蔽物体特定部１０３による遮蔽物体の特定結果と、遮蔽物体情報記憶部１０５ｂにより記憶されている当該遮蔽物体に関する情報と、表示情報記憶部１０５ａにより記憶されている表示情報に関するデータとに基づいて、表示情報と遮蔽物体との位置関係、表示情報のサイズ、表示情報の姿勢（回転、傾きなど）などを決定する。図４および図５は、表示情報の表示レイアウトの構成例を示す図である。

特に、図４は、表示部１０１の表示面１０１ａの上に、遮蔽物体４０１が載せられた状態を示している。図４に示す遮蔽物体４０１は、縦書きを主な構成とする情報媒体（例えば、パンフレットなど）である。遮蔽物体４０１の背面には、図３に示した例で挙げたような固有のマーカが印刷されており、このマーカは遮蔽物体検出部１０２により検出され、この検出結果に基づいて遮蔽物体特定部１０３により遮蔽物体４０１の性質（例えば、遮蔽物体の表示面１０１ａにおける遮蔽領域の位置・範囲、縦書きの情報媒体など）が特定される。表示位置調整部１０４ａは、特定結果に応じて表示情報の位置を決定する。

例えば、図４に示すように、表示対象の表示情報が４種類存在したとする。かかる場合、表示位置調整部１０４ａは、例えば、各表示情報の一部分が遮蔽物体４０１によって遮蔽される位置に各表示情報の表示領域候補４０２を設定する。図４に示した例では、表示情報の種類は４種類であるが、表示情報の種類は４種類に限定されない。

例えば、表示位置調整部１０４ａは、遮蔽物体４０１が縦書きの情報媒体であるという性質および縦書きの情報媒体を閲覧する閲覧者の一般的な視線の動きを考慮し、図４における＜１＞〜＜４＞のように右上から左下にかけて優先順位を設定してもよい。例えば、表示優先度が設けられている場合、表示優先度の高い表示情報から順に、優先順位の高い位置に設定されてもよい。また、表示優先度は、遮蔽物体４０１毎に決められていてもよい。かかる場合、表示優先度は、遮蔽物体４０１との関連度の高さに応じて定められてもよい。

図５は、表示部１０１の表示面１０１ａの上に、遮蔽物体４０１が載せられた状態を示している。図５に示す遮蔽物体４０１は、横書きを主な構成とする情報媒体である。図５に示した例においても、図４に示した例と同様に、表示位置調整部１０４ａは、遮蔽物体の特定結果に応じて表示情報の位置を決定する。

例えば、表示位置調整部１０４ａは、遮蔽物体４０１が横書きの情報媒体であるという性質および横書きの情報媒体を閲覧する閲覧者の一般的な視線の動きを考慮し、図５における＜１＞〜＜４＞のように左上から右下にかけて優先順位を設定してもよい。

図１に戻って説明を続ける。情報内容配置調整部１０４ｂは、遮蔽物体により遮蔽される領域と表示情報との位置関係に応じて、表示情報に含まれる内容（以下、「情報要素」とも言う。）の位置を決定する。例えば、情報内容配置調整部１０４ｂは、表示位置調整部１０４ａにより構成された表示レイアウトと、表示情報記憶部１０５ａにより記憶されている表示情報に関するデータとに基づいて、表示情報に含まれる内容（情報要素）の配置、サイズなどを決定する。このとき、表示情報の被遮蔽領域が考慮される。

図６は、表示情報に含まれる情報要素の位置決定例を示す図である。表示情報は、例えば、文章、図、絵などからなる情報要素の集まりから構成される。図６に示したように、例えば、表示情報６０１ａは、情報要素Ａ〜Ｄから構成され、図６に示すように情報要素レイアウトが構成されているとする。ここでは、情報要素レイアウトを構成する情報要素が情報要素Ａ〜Ｄの４種類である例を示しているが、情報要素の種類は４種類に限定されない。

例えば、遮蔽物体が表示部１０１の表示面上に載せられ、表示情報のレイアウトが図４に示したような配置に決定されたとき、遮蔽物体６０１に遮蔽される領域に表示情報６０１ａを配置すると、情報要素レイアウト６０２ａに示すようになる。このとき、遮蔽物体６０１と表示情報６０１ａとの位置関係により、表示情報６０１ａの被遮蔽部分は異なってしまう。

例えば、情報要素Ａ〜Ｄのうち、レイアウト６０２ａに示すように表示情報６０１ａが配置された場合、左上および右上に存在する表示情報６０１ａの情報要素Ａは被遮蔽状態にならない。しかし、例えば、情報要素Ａの遮蔽優先度が最も高い場合には、情報要素Ａを被遮蔽状態とするのが好ましい。したがって、情報内容配置調整部１０４ｂは、表示位置調整部１０４ａにより決定された表示レイアウトにおける表示情報の被遮蔽領域と表示情報を構成する各情報要素の遮蔽優先度とに基づいて、左上および右上に存在する表示情報６０１ａの情報要素レイアウトを情報要素レイアウト６０１ｂに示すように変更する。

このように、情報内容配置調整部１０４ｂは、情報要素のレイアウトを変更することにより、レイアウト６０２ｂに示すように、遮蔽優先度が高い情報要素を被遮蔽領域としたレイアウトを構成することが可能となる。以上、第１の実施形態に係る表示制御装置１０Ａの構成について説明した。続いて、第１の実施形態に係る表示制御装置１０Ａの動作の流れについて説明する。特に、表示部１０１に表示情報を表示する表示制御装置１０Ａの動作の流れについて説明する。

［動作の説明］
図７は、本発明の第１の実施形態に係る表示制御装置１０Ａの動作の流れを示す図である。図７に示すように、本発明の第１の実施形態に係る表示制御装置１０Ａは、遮蔽物体検出部１０２により、表示部１０１の表示面上の遮蔽物体を検出する。遮蔽物体が検出された場合（ステップＳ７０１で「ＹＥＳ」）、遮蔽物体が表示部１０１の表示面上には、遮蔽物体による遮蔽領域が存在する状態となる。この場合、遮蔽物体に関する情報は、遮蔽物体特定部１０３に出力され、ステップＳ７０２に動作が遷移される。

遮蔽物体が検出されない場合（ステップＳ７０１で「ＮＯ」）、表示部１０１の表示面上には、遮蔽物体による遮蔽領域が存在しない状態となる。この場合、ステップＳ７０６に動作が遷移される。

動作がステップＳ７０２に遷移された場合、遮蔽物体特定部１０３により、遮蔽物体検出部１０２から出力された遮蔽物体に関する情報と遮蔽物体情報記憶部１０５ｂに記憶された遮蔽物体に関する情報とに基づいて、遮蔽物体を特定する（ステップＳ７０２）。これにより、表示部１０１の表示面上における遮蔽領域（例えば、遮蔽物体自体が持つ情報発信部分の表示面上での位置に基づいた遮蔽領域の位置など）などといった表示情報のレイアウトを決定するために必要な情報が決定する。ここで決定された情報表示に関する情報は、表示制御部１０４に出力される。

続いて、表示制御部１０４の表示位置調整部１０４ａにより、遮蔽物体特定部１０３からの情報表示に関する情報、遮蔽物体特定部１０３によって特定された遮蔽物体に関する情報および表示情報に関するデータに基づいて、表示レイアウト（例えば、表示情報の種類、数、表示位置、表示サイズ、表示姿勢など）を決定する（ステップＳ７０３）。その際、表示面上の遮蔽物体が考慮される。ここで決定した表示レイアウトに関する情報は、情報内容配置調整部１０４ｂに出力される。

続いて、表示制御部１０４の情報内容配置調整部１０４ｂにより、表示位置調整部１０４ａにより構成された表示レイアウトおよび記憶部１０５に記憶されている表示情報に関するデータに基づいて、表示情報内の内容のレイアウト（例えば、各情報要素の配置、サイズなど）を決定する（ステップＳ７０４）。その際、表示情報の被遮蔽領域が考慮される。ここで決定した各情報要素のレイアウトを含んだ表示レイアウトは、表示部１０１に出力される。

動作がステップＳ７０６に遷移された場合には、遮蔽物体検出部１０２によって遮蔽物体が検出されなくなった場合に、動作がステップＳ７０７に遷移されてもよい。また、表示情報記憶部１０５ａに表示情報が存在する場合は（ステップＳ７０６で「ＹＥＳ」）、動作がステップＳ７０７に遷移されてもよい。表示情報記憶部１０５ａに表示情報が存在しない場合は（ステップＳ７０６で「ＮＯ」）、動作がステップＳ７０１に遷移されてもよい。

動作がステップＳ７０７に遷移された場合には、表示情報記憶部１０５ａに記憶された情報表示の状態変化に関するルールに従って、表示状態を変えてもよい。例えば、遮蔽物体が認識できなくなったらすぐに表示情報も消してもよいし、認識できなくなった後、所定時間経過によって表示情報を消してもよい。また、表示情報記憶部１０５ａに表示情報が存在する場合は、表示制御部１０４の表示位置調整部１０４ａにより、表示情報記憶部１０５ａに記憶されている表示情報に関するデータに基づいて、表示レイアウト（例えば、表示情報の種類、数、表示位置、表示サイズ、表示姿勢など）を決定する。ここで決定した表示レイアウトに関する情報は、表示部１０１に出力される。

動作がステップＳ７０５に遷移された場合には、表示部１０１により、前段階までの処理により決定した表示レイアウトに基づいた情報表示を行う（ステップＳ７０５）。図７の開始から終了間の処理が繰り返され、表示情報の表示が行われる。

［効果の説明］
以上に説明したように、本発明の第１の実施形態によれば、表示部１０１の表示面に表示される電子的な情報とは異なる別種の物理情報媒体が共存している環境下において、ある情報要素を自覚的に明らかにしないようにすることができる。したがって、注意を引く広告手法の一つであるディザー広告のように、物理情報媒体の存在によって、電子的な情報が部分的に被遮蔽状態になるような情報表示レイアウトを自動的に構成することにより、電子的な情報に対する気づきを発生させる、興味を持たせる情報表示を実現することができる。

本実施形態による方式では、遮蔽状態にある表示情報に対して閲覧者による遮蔽物体の表示面上での状態変化、例えば、表示面上の遮蔽物体の位置の変更、表示面上からの遮蔽物体の除去などが起こり、表示情報の遮蔽状態が解除された場合、閲覧者がその遮蔽状態が解除された情報を積極的に見たと位置づける。この遮蔽状態にあった表示情報の遮蔽状態が解除されたという状態変化は、遮蔽物体検出部１０２により測定することが可能であり、これは、間接的に閲覧者の積極的な閲覧行為の測定となる。

また、閲覧者の閲覧状況のデータを情報表示レイアウトの構築の際のフィードバックに利用する（例えば、このフィードバック情報を基に、表示情報に関するデータの表示優先度などのパラメータに更新をかける）ことで、表示情報をより閲覧者の注意を引く、見てもらえる表示形体にしていくことが可能となる。

また、表示情報として動画を扱うことも可能である。表示情報として動画を扱う場合、例えば、一部遮蔽されている状態であっても画像を再生し、画面上に動きの変化部分を発生させることで、より注意を引く効果を生むことも可能である。また、遮蔽状態にある場合は、動画のサムネイルを遮蔽物体により一部が遮蔽された状態で表示しておき、その遮蔽状態が解消されると動画を再生するといった仕組みにすることも可能である。

［第２の実施形態の説明］
続いて、本発明の第２の実施形態について説明する。本発明の第１の実施形態においては、表示制御装置１０Ａに対する閲覧者の入力行為は、遮蔽物体を介した行為（例えば、遮蔽物体を置く、移動させる、除去するといった行為）であり、表示情報に対して直接操作を行わない構成であった。

一方、本発明の第２の実施形態では、表示情報に対して、閲覧者が直接的な入力行為を行うことが可能な仕組み（例えば、表示面に表示された表示情報に対するタッチ入力による表示の操作を可能とする仕組み）について説明する。また、第２の実施形態では、表示情報と直接インタラクションが可能になることを踏まえた表示情報のレイアウトについても言及する。

［構成の説明］
図８は、本発明の第２の実施形態に係る表示制御装置１０Ｂの機能構成を示す図である。図８に示すように、本発明の第２の実施形態に係る表示制御装置１０Ｂは、入力部８０１および入力情報処理部８０２を備える点が、本発明の第１の実施形態に係る表示制御装置１０Ａと異なる。以下、本発明の第１の実施形態と同等の機能を有する構成要素に関しては、同じ番号を付し、説明を省略する。

入力部８０１は、例えば、接触的に物体を検出することが可能な、タッチセンサ、圧力センサ、静電容量センサにより構成される。あるいは、入力部８０１は、非接触的に物体を検出することが可能な、撮像素子、赤外線センサ、光センサ、温度センサ、磁界センサなどの計測機能を利用したデバイスである。例えば、入力部８０１は、スタイラスペンのような機器を媒介して入力操作を行うデバイスであってもよいし、上記計測機能を利用して指による非機器媒介型の入力を行う機能を有するデバイスであってもよい。かかる構成により、入力部８０１は、表示部１０１の表示面に表示される表示情報に対する操作入力行為を検出することが可能である。

表示制御部１０４は、表示位置調整部１０４ａ、情報内容配置調整部１０４ｂおよび入力情報処理部８０２を備えており、遮蔽物体特定部１０３による遮蔽物体の特定結果、記憶部１０５に記憶されている情報、入力部８０１からの操作入力情報に基づいて、表示部１０１の表示面に出力する表示情報のレイアウトを構築する。

入力情報処理部８０２は、入力部８０１により閲覧者による表示情報に対する操作入力情報を記憶部１０５の表示情報記憶部１０５ａに記憶されている表示情報の操作入力に対するルールに関するデータに基づいて処理し、それに伴う表示情報の表示形態の変更指令などの情報を、表示位置調整部１０４ａ、情報内容配置調整部１０４ｂに対して出力する。表示位置調整部１０４ａ、情報内容配置調整部１０４ｂでは、入力情報処理部８０２から得られた閲覧者の入力行為を反映した情報形態に基づいた処理を行う。

表示情報に関するデータは、例えば、当該表示データを、例えば、サムネイル、付箋のように簡略化、あるいは形式化した形態のデータを持つ。このような別種の表現スタイルを持つ表示情報の場合、表示情報に関するデータは、入力部８０１によって、表示情報に対して、操作入力が行われた際のインタラクションルールに関する情報も持つ。例えば、インタラクションルールは、表示情報が付箋形態の表示スタイルによって表示部１０１の表示面に表示されていた場合、閲覧者によるその表示情報に対する入力行為（例えば、タッチするといったアクション）を受けたとき、全容表示する形態に移行するといったルールである。

［動作の説明］
ここでは、本発明の第１の実施形態に係る構成に表示情報に対する操作入力が行える機能が付加されることで、可能となる動作について、図９および図１０を参照しながら説明する。

図９は、表示情報に対する操作に基づく表示情報の移動例を示す図であり、表示制御装置１０の表示面を示している。本発明の第１の実施形態では、ある表示情報に関して、被遮蔽部分の情報を閲覧したい場合には、遮蔽物体の位置を変更する必要があった。一方、本発明の第２の実施形態では、表示中の表示情報に対して操作入力が可能であるため、閲覧者による操作入力（ここでは、指入力によるドラッグ＆ドロップ）が、入力部８０１により検知され、入力情報処理部８０２により解読され、表示情報レイアウトに反映される（例えば、表示面上の対象表示情報の位置を移動させることができる）。

解読の結果、例えば、入力情報処理部８０２は、表示情報９０２に対する操作に基づいて、表示情報９０２を移動させる。図９に示した例では、遮蔽物体９０１により遮蔽された表示情報９０２が閲覧者９０３による操作により移動されている。このような操作により、対象の表示情報は、遮蔽物体による被遮蔽状態から脱し、閲覧者は被遮蔽領域のない情報閲覧が可能となる。

図１０は、表示情報に対する操作に基づく表示情報の移動例を示す図であり、表示制御装置１０の表示面を示している。ここでは、表示情報により、遮蔽物体に対する補足説明を行うような状況を想定している。このとき、各表示情報１００２は、遮蔽物体１００１による被遮蔽領域を持つ表示情報群であり、各表示情報の内容は、遮蔽物体１００１の持つ情報に対する補足情報であるとする。

このとき、各表示情報が、遮蔽物体１００１に対する補足情報の全容を表示するような形態を取ったとすると、閲覧者の見る情報は過剰となり、各表示情報が遮蔽物体１００１のどの部分に対する補足情報であるのか直感的に理解しづらくなってしまう。そのため、図１０に示した例では、表示情報１００２は形式化された付箋状の表示形態を取っており、それぞれの表示情報１００２の表示位置は、遮蔽物体１００１の補足情報と関連した相対位置を取っているとする。このように、全容状態を形式化した付箋状の状態で表示することも、表示情報の情報内容の遮蔽ということができる。

このとき、閲覧者１００３が、ある付箋状の表示情報に対して操作入力（ここでは、指入力による表示情報に対するタップ）を行うと、その操作入力情報は、入力部８０１により検知され、入力情報処理部８０２により解読され、表示情報レイアウトに反映される（例えば、表示面上の対象表示情報の位置を移動させることができる）。解読の結果、例えば、入力情報処理部８０２は、表示情報１００２に対する操作に基づいて、全容情報の一部が表示された状態から全容情報が表示された状態に変更する。

ここでは、対象の表示情報の表示形態が、付箋状の形態から全容形態に変更される。また、全容形態への変更による対象表示情報の情報表示領域の拡大に伴い、遮蔽物体に対して、左下に配置されていた付箋状の表示情報が干渉しない位置へと移動を行う。図１０のような表示形態を取ることで、情報表示スペースを有効に利用することが可能となる。

［効果の説明］
以上に説明したように、本発明の第２の実施形態によれば、本発明の第１の実施形態に、表示情報に対して、閲覧者が直接、積極的な入力行為を行える仕組みを追加することで、表示情報との直接的なインタラクションが可能になる。これにより、表示情報のレイアウト、特に、閲覧者とインタラクションを行うことが可能であることを前提としたレイアウト、遮蔽方式を取ることも可能となる。

本発明の第１の実施形態の場合、１つの遮蔽物体に対して、複数の被遮蔽領域を持つ表示情報が存在した場合、遮蔽物体に対する操作により、ある１つの表示情報の被遮蔽状態が解除された場合、その表示情報に注目することができる。しかし、例えば、遮蔽物体の操作により、同時に複数の表示情報の被遮蔽状態が解除された場合、閲覧者は、被遮蔽状態にあったどの表示情報に対して注目したのかを見分けることができない。

本発明の第２の実施形態の場合、付箋化した表示情報を表示面上の遮蔽物体の位置変化に応じて変化させ、遮蔽物体との相対位置が変化しない表示位置を取る（表示領域制限にかかる場合は、その限りではない）ようにする。そして、その表示情報の全容を見るためには、その表示情報（付箋状）に対して入力行為を行うことにすると、積極的な閲覧状態の計測により表示情報の全容表示を正確に行うことが可能となる。

［変形例の説明］
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。

表示制御装置を構成する各ブロックは、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などから構成され、記憶部により記憶されているプログラムがＣＰＵによりＲＡＭに展開されて実行されることにより、その機能が実現され得る。あるいは、表示制御装置１０を構成する各ブロックは、専用のハードウェアにより構成されていてもよいし、複数のハードウェアの組み合わせにより構成されてもよい。

また、例えば、複数種類の表示情報を扱う場合、例えば、表示優先度は高いが、表示情報のうちのいくつかは、遮蔽物体と関連性の高い情報であり、残りのものは関連性が低い情報であるといった場合も想定される。かかる場合には、関連性の高い情報群に関しては、遮蔽物体により情報の一部が遮蔽されるような情報表示レイアウトを取り、残りのものは表示面上の遮蔽物体、および遮蔽物体と関連性が高い表示情報により情報を遮蔽されることがないレイアウトを取るといったことも可能である。

また、表示面上に遮蔽物体が存在しない場合の情報表示に関しては、遮蔽物体自体にも情報発信能力があり、閲覧者が遮蔽物体に注目する過程で、表示情報に関心・注意を引くといった効果とはならない。しかし、どこにも遮蔽部分がない表示情報を表示する、あるいは、情報表示空間において、より前面に存在する表示情報を遮蔽物とみなして、部分的に隠した情報表示手法に則ることも可能である。上記においては、物理媒体としての遮蔽物体により表示面が遮蔽される場合について主に説明したが、本実施形態は、表示面が電子情報媒体としての表示情報により遮蔽される場合にも広く適用され得る。したがって、上記の遮蔽物体は、電子情報媒体としての表示情報を包含するオブジェクトであってもよい。

また、遮蔽物体の状態に関わらず、常に遮蔽されることなく表示面上に表示しておきたい表示情報に関しては、特許文献１に記載された技術を利用した情報表示手法による情報表示を行ってもよい。

また、遮蔽物体が記憶部に登録されていない物体である場合、外部センサ、例えば、カメラ、深度センサなどを利用してその物体の性質を解析する機能を組み込むことも可能である。

また、表示情報記憶部１０５ａに記憶させる表示情報に関して、表示情報に関するステータス情報を手動入力するだけではなく、表示情報の内容を解析して、自動的にステータス情報を入力する形式を組み組むことも可能である。例えば、表示情報の内容を文字群、絵群などに分類、文字群はさらに文字の大きさ、文字の属性（数字部分、フォント）などに切り分け、それぞれに優先度を割り振ってもよい（例えば、数字部分、色が部分的に変わる部分、強調文字になっている部分などの優先度を高くしてもよい）。

また、表示位置調整部１０４ａと情報内容配置調整部１０４ｂとの間で、ｎ回フィードバックループを回すことで、表示レイアウトをより適切な状態にする仕組みを組み込んでもよい。閲覧者の遮蔽状態にある表示情報に対する操作入力の情報を蓄積することで、どの表示情報、あるいは、ある表示情報のどの部分に対して注目したかを学習し、表示レイアウトをより適切な状態にする仕組みを組み込んでもよい。

また、入力部８０１の機能は、遮蔽物体検出部１０２を構成する機能により実現してもよい。

尚、本明細書において、フローチャートに記述されたステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的に又は個別的に実行される処理をも含む。また時系列的に処理されるステップでも、場合によっては適宜順序を変更することが可能であることは言うまでもない。

１０（１０Ａ、１０Ｂ） 表示制御装置
１０１ 表示部
１０１ａ 表示面
１０２ 遮蔽物体検出部（検出部）
１０３ 遮蔽物体特定部（特定部）
１０４ 表示制御部
１０５ 記憶部
１０５ａ 表示情報記憶部
１０５ｂ 遮蔽物体情報記憶部
１０４ａ 表示位置調整部
１０４ｂ 情報内容配置調整部
８０１ 入力部
８０２ 入力情報処理部

Claims (5)

1. 表示部の表示面を少なくとも一方向から遮蔽するオブジェクトおよび前記表示面を閲覧する閲覧者を検出する検出部と、
   前記表示部による表示を制御する表示制御部と、
   前記オブジェクトの性質を特定する特定部と、
   を備え、
   前記表示制御部は、
   前記閲覧者が前記表示部の視野角および表示能力により規定される有効領域内に存在する場合、前記表示面上で前記オブジェクトにより遮蔽される領域と重なる領域に表示情報の少なくとも一部を配置する表示位置調整部を備え、
   前記表示位置調整部は、前記特定部により特定された前記オブジェクトの性質と前記表示情報の関連度に応じて前記表示情報の位置を決定する、
   ことを特徴とする、表示制御装置。
2. 前記表示制御部は、
   前記オブジェクトにより遮蔽される領域と前記表示情報との位置関係に応じて、前記表示情報に含まれる内容の位置を決定する情報内容配置調整部をさらに備える、
   ことを特徴とする、請求項１に記載の表示制御装置。
3. 前記表示制御部は、
   前記表示情報に対する操作に基づいて、前記表示情報を移動させる入力情報処理部をさらに備える、
   ことを特徴とする、請求項１または２に記載の表示制御装置。
4. 前記表示制御部は、
   前記表示情報に対する操作に基づいて、全容情報の一部が表示された状態から前記全容情報が表示された状態に変更する入力情報処理部をさらに備える、
   ことを特徴とする、請求項１または２に記載の表示制御装置。
5. 表示部の表示面を少なくとも一方向から遮蔽するオブジェクトおよび前記表示面を閲覧する閲覧者を検出するステップと、
   前記表示部による表示を制御するステップと、
   前記オブジェクトの性質を特定するステップと、
   を含み、
   前記表示を制御するステップは、
   前記閲覧者が前記表示部の視野角および表示能力により規定される有効領域内に存在する場合、前記表示面上で前記オブジェクトにより遮蔽される領域と重なる領域に表示情報の少なくとも一部を配置するステップを含み、
   前記オブジェクトにより遮蔽される領域と重なる領域に表示情報の少なくとも一部を配置するステップは、前記オブジェクトの性質を特定するステップにより特定された前記オブジェクトの性質と前記表示情報の関連度に応じて前記表示情報の位置を決定する、
   ことを特徴とする、表示制御方法。

Images