JP2008243125A - 表示制御装置、媒体管理装置、及びプログラム - Google Patents

Abstract

【課題】表示画面上での媒体の配置状態に応じて、その媒体に記録された画像の元となる電子情報等を表す画像をその表示画面に表示できるようにする。
【解決手段】水平型表示装置１０と、共有画面制御装置３０とを備える。水平型表示装置１０では、ＩＤ検出部１８１が紙媒体の紙ＩＤを検出し、配置状態算出部１８２が紙媒体の配置状態を算出し、通信部１９がこれらの情報を共有画面制御装置３０に送信する。これにより、共有画面制御装置３０では、通信部３９が紙ＩＤ及び配置状態を受信し、制御部３１による制御の下、配置状態管理部３２がこれらの情報を変化があれば登録し、文書取得部３３が紙ＩＤに対応する電子文書や関連する電子文書を取得し、表示状態管理部３４が電子文書の画像の表示状態を算出し、水平型表示装置１０の表示部１１１に電子文書がその表示状態で表示されるようにする。
【選択図】図８

Description

本発明は、表示制御装置、媒体管理装置、プログラムに関する。

表示エリアが撮影された撮影画像を経時的に連続して取得し、この連続して取得された撮影画像ごとに表示エリアを認識し、この認識された表示エリアに合わせて表示画像を調整する表示制御装置が知られている（例えば、特許文献１参照）。

特開２００６−７２０７１号公報

ここで、従来、表示画面上での媒体の配置状態に応じて、その媒体に記録された画像の元となる電子情報等を表す画像をその表示画面に表示するような仕組みは提案されていなかった。

本発明の目的は、表示画面上での媒体の配置状態に応じて、その媒体に記録された画像の元となる電子情報等を表す画像をその表示画面に表示できるようにすることにある。

請求項１に記載の発明は、
表示画面上での媒体の配置状態を特定する状態特定手段と、
前記媒体に記録された画像の元となる電子情報、又は、当該電子情報に関連する電子情報を特定する情報特定手段と、
前記状態特定手段により特定された配置状態に応じて、前記情報特定手段により特定された電子情報を表す特定画像が前記表示画面に表示されるように制御する制御手段と
を備えたことを特徴とする表示制御装置である。
請求項２に記載の発明は、
前記制御手段は、過去における前記特定画像の前記表示画面上での表示状態に更に応じて、前記特定画像が表示されるように制御することを特徴とする請求項１記載の表示制御装置である。
請求項３に記載の発明は、
前記情報特定手段により特定された電子情報は、所定の操作によって関連付けられた複数の要素を含み、
前記表示状態は、前記所定の操作が行われた際の前記特定画像の前記表示画面上での表示状態であることを特徴とする請求項２記載の表示制御装置である。
請求項４に記載の発明は、
前記情報特定手段により特定された電子情報は、所定の順序関係にある複数の要素を含み、
前記制御手段は、前記媒体に記録された画像の元となる電子情報に対する前記複数の要素の各々の前記所定の順序関係における先後に更に応じて、前記特定画像が表示されるように制御することを特徴とする請求項１記載の表示制御装置である。
請求項５に記載の発明は、
前記状態特定手段により特定された配置状態において前記媒体が他の媒体の上に重なっていることが示されている場合に、当該媒体を当該他の媒体に基づいて特定する媒体特定手段を更に備えたことを特徴とする請求項１記載の表示制御装置である。
請求項６に記載の発明は、
複数の媒体の重なり状態を特定する状態特定手段と、
前記複数の媒体に記録された画像の元となる電子情報を特定する情報特定手段と、
前記状態特定手段により特定された重なり状態に応じて、前記情報特定手段により特定された電子情報を更新する更新手段と
を備えたことを特徴とする媒体管理装置である。
請求項７に記載の発明は、
前記状態特定手段は、前記複数の媒体の重なり状態として、当該複数の媒体の重なり合う部分の面積を特定し、
前記更新手段は、前記状態特定手段により特定された面積が所定の閾値を超える場合に、前記電子情報を一体として処理されるように更新することを特徴とする請求項６記載の媒体管理装置である。
請求項８に記載の発明は、
前記状態特定手段は、前記複数の媒体の重なり状態として、当該複数の媒体の重なり順序を特定し、
前記更新手段は、前記状態特定手段により特定された重なり順序と、前記電子情報の各媒体に対応する要素の順序とが合致するように、当該電子情報を更新することを特徴とする請求項６記載の媒体管理装置である。
請求項９に記載の発明は、
コンピュータに、
表示画面上での媒体の配置状態を特定する機能と、
前記媒体に記録された画像の元となる電子情報、又は、当該電子情報に関連する電子情報を特定する機能と、
前記配置状態に応じて、特定された電子情報を表す特定画像が前記表示画面に表示されるように制御する機能と
を実現させるためのプログラムである。
請求項１０に記載の発明は、
コンピュータに、
複数の媒体の重なり状態を特定する機能と、
前記複数の媒体に記録された画像の元となる電子情報を特定する機能と、
前記重なり状態に応じて、特定された電子情報を更新する機能と
を実現するためのプログラムである。

請求項１の発明は、表示画面上での媒体の配置状態に応じて、その媒体に記録された画像の元となる電子情報等を表す画像をその表示画面に表示することができるという効果を有する。
請求項２の発明は、過去における画像の表示状態を再現することができるという効果を有する。
請求項３の発明は、電子情報に含まれる複数の要素を関連付ける操作を行った際の表示状態を再現することができるという効果を有する。
請求項４の発明は、電子情報に含まれる複数の要素が有する順序関係に応じて、電子情報を表す画像を表示することができるという効果を有する。
請求項５の発明は、媒体が重なっていても、表示対象の電子情報に対応する画像が記録された媒体を特定することができるという効果を有する。
請求項６の発明は、媒体の重なり状態を、媒体に記録された画像の元となる電子情報に反映させることができるという効果を有する。
請求項７の発明は、媒体を重ねることにより、媒体に記録された画像の元となる電子情報が一体として処理されるようにできるという効果を有する。
請求項８の発明は、媒体の重なり順序と、媒体に記録された画像の元となる電子情報における要素の順序とを合致させることができるという効果を有する。
請求項９の発明は、表示画面上での媒体の配置状態に応じて、その媒体に記録された画像の元となる電子情報等を表す画像をその表示画面に表示することができるという効果を有する。
請求項１０の発明は、媒体の重なり状態を、媒体に記録された画像の元となる電子情報に反映させることができるという効果を有する。

以下、添付図面を参照して、本発明を実施するための最良の形態（以下、「実施の形態」という）について詳細に説明する。
本実施の形態では、表示装置の一例として、複数のユーザが取り囲んで議論等を行うための水平型表示装置を用いる。ユーザが持ち込んだ紙媒体をこの水平型表示装置の上に置き、紙媒体に対応する電子文書やその関連する電子文書を水平型表示装置上の共有画面で共有することで、議論等が行われる。そこで、まず、この水平型表示装置の機構について説明する。

図１は、水平型表示装置１０に紙媒体２０を載せた場合の断面図である。紙媒体２０は水平型表示装置１０に接触するのが普通であるが、図では見易さのため、水平型表示装置１０と紙媒体２０との間に隙間を設けて示している。
図示するように、水平型表示装置１０は、議論等を行う作業台としての天板１１と、天板１１を支持する脚部１２ａ〜１２ｄとを備える。また、天板１１に対して背面から画像を投影する投影ユニット１３と、投影ユニット１３を移動自在に支持するキャスター１４ａ〜１４ｄと、天板１１に投影させる画像を映し出すプロジェクタ１５とを備える。更に、紙媒体２０の裏面に対して赤外光を照射する赤外光光源１７と、紙媒体２０の裏面で反射された赤外光を受光する赤外カメラ１８とを備える。但し、図１は断面図のため、脚部１２ｃ及び１２ｄ、キャスター１４ｃ及び１４ｄについては、図に現れていない。

天板１１は、その周囲の任意の位置にユーザが立って議論等に参加できるよう、例えば、円形のものを用いる。また、例えばガラス板等の基材に乳白色の半透明フィルターを貼り付けて透過型スクリーンを形成し、投影ユニット１３により投影された画像を表示する表示画面（例えば、大画面ディスプレイ）として機能させる。更に、天板１１は、表示された画像に対するユーザの操作を検知するタッチパネルの機能も備える。ここで、タッチパネルは、天板１１の表面を接触を検知するための素子を配置した透明なスクリーンで覆うことで実現してもよいし、天板１１の表面で縦、横に赤外光を走らせてその遮断された位置を検出することで実現してもよい。但し、本実施の形態では、図示するように、天板１１に紙媒体２０が置かれることがある。従って、天板１１が備えるタッチパネルの機能は、紙媒体２０の裏面によるタッチを、ユーザ操作としてのタッチとは区別して処理するものとする。例えば、タッチされている箇所が一定の面積を超える場合には、ユーザ操作を表す信号を発生させないようにすればよい。
脚部１２ａ〜１２ｄは、４本脚の場合の例であるが、脚部の数はこれに限らない。

投影ユニット１３は、天板１１の側の面が開いた四角柱の箱からなっており、その中にミラー１３ａ及び１３ｂを備える。ここで、ミラー１３ａ及び１３ｂは、図のような角度で固定され、投影ユニット１３の箱の側面に取り付けられているものとする。
キャスター１４ａ〜１４ｄは、天板１１、脚部１２ａ〜１２ｄ、プロジェクタ１５からなるテーブルの移動に合わせて投影ユニット１３を動かせるよう、投影ユニット１３の底面に取り付けられている。但し、テーブルに対する投影ユニット１３の相対的位置がずれることのないようにする。尚、ここでは、キャスターを４つとしたが、その数はこれに限らない。
プロジェクタ１５は、天板１１の下に吊り下げられて固定され、ミラー１３ａの方向に画像を投影する。すると、その画像はミラー１３ｂで反射し、天板１１に投影されることになる。

赤外光光源１７は、例えば、赤外カメラ１８のシャッタタイミングに同期させてパルス点灯する。これにより、天板１１の紙媒体２０が載る可能性のある領域に対して、定期的に赤外光が照射されることになる。この赤外光光源１７としては、例えば、赤外ＬＥＤを用いるとよい。
赤外カメラ１８は、赤外光が照射された紙媒体２０の裏面を、赤外領域に感度を有するイメージセンサによって撮像する。そして、撮像された画像を解析することにより、紙媒体２０のＩＤ及び位置が検出される。ここで、イメージセンサとしては、例えば、ＣＭＯＳセンサやＣＣＤセンサを用いるとよい。
本実施の形態では、このように赤外光を用いて画像を読み取ることで、プロジェクタ１５の可視光による映像に影響を与えないようにしている。また、更に確実な投影やＩＤの認識を行うために、天板１１には、一定の角度の光以外を透過させるホログラフィック光素子を用いてもよい。或いは、電気的に透過／不透過を変えられるフィルムを天板１１に貼り付け、投影とＩＤの認識を短い周期で切り替える方法も考えられる。

一方、紙媒体２０の裏面には、赤外光光源１７及び赤外カメラ１８を用いてそのＩＤ及び位置が検出されるよう、赤外領域に吸収域を持つ色材（例えば、トナー）を用いて形成された符号画像２６が印刷されている。

図２は、符号画像２６を構成する画像等の一例を示した図である。
まず、符号画像２６を構成する単位パターンについて説明する。
図２（ａ）は、単位パターンの一例を示したものである。
単位パターンとは、情報埋め込みの最小単位である。図では、黒塗りの領域と斜線の領域をドット配置可能な領域とし、その間にある白色の領域をドット配置不可能な領域としている。そして、ドット配置可能な領域のうち、黒塗りの領域にドットが配置され、斜線の領域にはドットが配置されていないことを示している。即ち、図は、ドットを配置可能な９箇所の中から選択した２箇所にドットを配置することで単位パターンを構成した例を示したものである。ここで、９箇所の中から２箇所を選択する組み合わせは３６（＝_９Ｃ_２）通りなので、単位パターンは、３６種類存在する。このうち、４種類の単位パターンは、同期パターンとして使用される。同期パターンとは、画像の回転を検出したり、識別符号の相対的な位置を特定したりするためのパターンである。特に、画像の回転を検出する必要があることから、４種類の同期パターンとしては、そのうちの１つの同期パターンを９０度回転するとそのうちの別の同期パターンになるようなものが選ばれる。また、この４種類の単位パターンを除く３２種類の単位パターンは、識別符号を表現する情報パターンとして使用され、５ビットの情報が表現される。

ところで、図２（ａ）に示したドットは、あくまで情報表現のためのドットであり、画像を構成する最小の点を意味するドットとは必ずしも一致しない。本実施の形態において、情報表現のためのドット（図２（ａ）の最小の四角）は、６００ｄｐｉにおける２ドット×２ドットの大きさを有している。６００ｄｐｉにおける１ドットの大きさは０．０４２３ｍｍなので、情報表現のためのドット（図２（ａ）の最小の四角）の一辺は、８４．６μｍ（＝０．０４２３ｍｍ×２）である。情報表現のためのドットは、大きくなればなるほど目に付きやすくなるため、できるだけ小さいほうが好ましい。ところが、あまり小さくすると、プリンタで印刷できなくなってしまう。そこで、情報表現のためのドットの大きさとして、５０μｍより大きく１００μｍより小さい上記の値を採用している。但し、上記の値８４．６μｍは、あくまで計算上の数値であり、実際に印刷されたトナー像では１００μｍ程度になる。

次に、このような単位パターンから構成される符号ブロックについて説明する。
図２（ｂ）に、符号ブロックのレイアウトの一例を示す。尚、ここでは、画像ではなく、パターン画像によって置き換えられる直前の符号配列で示している。即ち、図２（ｂ）の最小の四角（以下、「単位ブロック」という）に、図２（ａ）のような単位パターン（３６通りの単位パターンのいずれか）が配置され、その画像が媒体に形成されることになる。
図２（ｂ）のレイアウトでは、符号ブロックの左上の１つの単位ブロックに、同期符号が配置されている。また、同期符号が配置された単位ブロックの右側の４つの単位ブロック、同期符号が配置された単位ブロックの下側の４つの単位ブロック、更には、これらの単位ブロックに囲まれた１６（＝４×４）個の単位ブロックに識別符号が配置されている。

本実施の形態では、紙媒体２０のＩＤを符号化し、符号画像２６における識別符号とする。こうすることで、赤外カメラ１８で撮像した画像を解析すると紙媒体２０のＩＤが得られ、水平型表示装置１０にどの紙媒体２０が載せられたかが分かる。
一方、水平型表示装置１０上の紙媒体２０の位置は、赤外カメラ１８が撮像した画像内での符号画像の位置及び大きさに基づいて求める。例えば、赤外カメラ１８が撮像した画像内で、符号画像が上側にあれば、略鉛直上方からの赤外光を受光したことが分かり、符号画像が下側にあれば、鉛直方向よりも水平方向に近い方向から赤外光を受光したことが分かる。また、符号画像２６の大きさを予め決めておき、赤外カメラ１８で撮像した画像内の符号画像の大きさと比較することで、赤外カメラ１８から符号画像２６までの距離を認識する。そして、ここで求めた方向及び距離から、紙媒体２０の３次元空間内での位置を特定する。

尚、符号画像２６を形成するために用いるトナーには、Ｋ（カーボンを含む黒）のトナーや、特殊トナーがある。
ここで、特殊トナーとしては、可視光領域（４００ｎｍ〜７００ｎｍ）における最大吸収率が７％以下であり、近赤外領域（８００ｎｍ〜１０００ｎｍ）における吸収率が３０％以上の不可視トナーが例示される。但し、「可視」及び「不可視」は、目視により認識できるかどうかとは関係しない。符号画像が可視光領域における特定の波長の吸収に起因する発色性の有無により認識できるかどうかで「可視」と「不可視」とを区別する。また、可視光領域における特定の波長の吸収に起因する発色性が若干あるが人間の目で認識し難いものも、「不可視」に含める。

以上、紙媒体２０の裏面のＩＤの認識方法の一例を述べた。しかしながら、ＩＤの認識方法はこれには限らない。例えば、上記では、ＩＤを紙媒体２０の裏面の全面に印刷することとしたが、紙媒体２０の両面に印刷したり、全面ではなく端部にのみ印刷したりするようにしてもよい。また、上記では、ドットパターンをＩＤとして印刷するようにしたが、事前に取り決めた文字又は記号を紋様状に印刷するようにしてもよい。但し、この場合も、ＩＤは、個々の紙媒体２０に対してユニークなもので、かつ、方向性を持つことが必要となる。

尚、本実施の形態では、実質的に水平な表示画面を有する表示装置の一例として、水平型表示装置１０を用いた。ここで、「実質的に水平」とは、天板１１が地面又は床面と完全に平行であることまでを要求する趣旨ではなく、天板１１の上に紙媒体２０を載せてもずれ落ちない程度に水平であればよいものとする。また、以下、水平型表示装置１０に適用した場合について説明するが、垂直型等、他のタイプの表示装置に適用してもよい。
また、実施の形態では、水平型表示装置１０に載せる媒体として紙媒体２０を用いたが、画像を記録することができるものであれば、その材質は紙以外であってもよい。例えば、プラスチック、金属、陶器等が考えられる。

ところで、今日、紙媒体２０等の物理的な媒体に出力した文書（紙文書）と電子文書とが別々に管理されており、同一文書でも新版と旧版とが混同されるなど、ユーザの円滑なドキュメントワークを妨げている。例えば、紙文書に加えた編集は、後からオリジナルの電子文書に対して再び行わなくてはならず、二重の作業が必要になっている。また、会議参加者がそれぞれ異なる媒体で文書を持ち寄った際、共通の場に並べて議論できないなど、媒体の多様化はドキュメントワークに大きな支障を生むことが予想される。
こうした背景から、紙文書と電子文書を関連付けて表示できる手段や、紙文書と電子文書の編集操作をリンクする手段が必要になっている。

そこで、本実施の形態では、水平型表示装置１０を用いて、図３〜７に示すような表示及び操作を実現する。
まず、電子文書の画像の表示方法について説明する。
図３は、紙媒体２０に対応する電子文書（オリジナルの電子文書）を表す画像や、それに関連する電子文書を表す画像を、紙媒体２０の近傍に表示した例である。但し、紙媒体２０に対応する電子文書の画像は、紙媒体２０の真下に表示してもよい。

具体的には、以下のような操作により、このような表示が行われる。
まず、紙媒体２０を水平型表示装置１０の上に載せる。すると、紙媒体２０に対応する電子文書の画像４０（例えば、ウィンドウ）が表示される。また、この電子文書に関連する電子文書の画像もその周囲に表示される。このとき、関連する電子文書の画像が既に画面上に表示されている場合は、画像４０の周囲に寄り集まってくるような表示とするとよい。画像４１ａ〜４１ｄがこのように寄り集まってくる画像を示している。一方、関連する電子文書の画像が画面上に表示されていない場合は、画像４０の周囲に突如として出現するような表示とするとよい。画像４２ａ、４２ｂがこのように突如として出現した画像を示している。

ここで、関連する電子文書とは、次のようなものをいう。
例えば、ある電子文書を作成する際に参照した別の電子文書である。この場合、ある電子文書を作成する際に、別の電子文書を一定時間以上開いていれば、関連する電子文書と判断するとよい。
また、ユーザの意思で関連付けた電子文書である。水平型表示装置１０に表示された電子文書の画像群を指で囲んだり、電子文書の画像どうしを線で結んだりする操作をした場合等に、それらの電子文書を関連付けることが考えられる。

更に、関連する電子文書を記憶する際には、関連性だけでなく、関連付けたときの電子文書の表示画面上での表示状態、例えば、位置、角度、表示サイズ等を記憶するようにしてもよい。こうすることで、関連付けたときの状況を、呼び出した際に再現する。尚、位置を記憶しておく場合、その位置は、水平型表示装置１０の表示画面上の絶対的な位置であってもよいし、ある文書（電子文書でも紙文書でもよい）に対する相対的な位置であってもよい。また、ここでは、関連付けの操作を行った際の表示状態を再現することについて述べたが、再現する表示状態はこれに限らず、過去の如何なる時点における表示状態であってもよい。

図４及び図５は、複数ページからなる電子文書を表示した例である。
この場合は、以下の表示方法がある。
第一に、全ページを重ねて表紙のみを表示する方法である。
第二に、全ページを一覧表示する方法である。
第三に、隣接ページ、任意のページ等、一部のページのみを表示する方法である。

図４に、第二の表示方法による表示の例を示す。
このうち、図４（ａ）では、紙媒体２０を水平型表示装置１０に置くと、紙媒体２０に対応する電子文書の全ページを表す画像４３が紙媒体２０の右側に一覧表示される。尚、ここでは、水平型表示装置１０上の画面に画像４３が収まる例を示したが、画像４３が画面に収まらないことも考えられる。そのような場合は、画像４３を縮小して表示したり、全ページが表示されていないことを示す記号を画像４３と共に表示したりしてもよい。
また、図４（ｂ）では、紙媒体２０を水平型表示装置１０に置くと、紙媒体２０に対応する電子文書の各ページの画像４４が紙媒体２０の周りに敷き詰めて表示される。これは、水平型表示装置１０の画面の枠と紙媒体２０の輪郭とが略平行になるように紙媒体２０が置かれた場合に有効な表示方法である。

また、図５に、第三の表示方法による表示の例を示す。この例は、紙媒体２０を水平型表示装置１０に載せた際に、紙媒体２０に対応する電子文書のページのうち、紙媒体２０に記録された画像の元となるページの前後の数ページを表示する例である。
このうち、図５（ａ）では、前ページを並べた状態を表す画像４５ａを紙媒体２０の左側に表示し、後ページを並べた状態を表す画像４５ｂを紙媒体２０の右側に表示している。
また、図５（ｂ）では、前ページを束ねた状態を表す画像４６ａを紙媒体２０の左側に表示し、後ページを束ねた状態を表す画像４６ｂを紙媒体２０の右側に表示している。
尚、ここでは、紙媒体２０に記録された画像の元となるページに比べて、前ページであれば左側に、後ページであれば右側に表示するようにした。しかしながら、順序関係としてはページの順序だけでは限らず、また、表示位置も左右には限らない。即ち、所定の順序関係における先後に応じて画像を表示するものであればよい。

ところで、本実施の形態において、紙媒体２０の裏面のＩＤは、連続的に読み取られている。従って、紙媒体２０を回転させると、電子文書の画像も同期して回転する。また、紙媒体２０を移動させると、それに追随して電子文書の画像も移動する。更に、紙媒体２０を水平型表示装置１０から所定の高さ以上に持ち上げると、電子文書の画像は非表示となる。
また、電子文書の画像は、等倍で表示してもよいが、必要に応じて表示サイズを変更してもよい。

次に、紙文書の編集と電子文書の編集をリンクさせるための操作について説明する。
本実施の形態では、例えば、紙文書に次のような編集を行った場合、電子文書にも同じ編集を反映させ、表示する。
第一に、複数の文書をまとめ、複数ページを持つ単一文書にするという編集である。
第二に、複数ページを持つ単一文書を分割し、複数の文書にするという編集である。
第三に、複数ページを持つ単一文書の任意のページを削除するという編集である。
第四に、複数ページを持つ単一文書の任意のページを並べ替えるという編集である。
第五に、複数ページを持つ単一文書の任意のページを回転させるという編集である。
第六に、記入した情報を電子データとして記録する所謂電子ペンを用いて書き込むという編集である。
第七に、紙面の一部又は全部を消去するという編集である。

また、このような編集の結果を電子文書に対して保存するための方法としては、次のようなものがある。
例えば、紙文書を水平型表示装置１０から所定の高さ以上に持ち上げ、紙文書の端部で水平型表示装置１０の画面を任意の回数叩くことにより、電子文書の編集結果の保存を指示するとよい。これは、会議等の終了後、乱雑に重ねてあった紙の端を揃えて１つの束にするという極めて自然な作法である。
また、紙文書を水平型表示装置１０の表示面に立てることにより、電子文書の編集結果を保存するようにしてもよい。
更に、紙文書を水平型表示装置１０から所定の高さ以上に持ち上げることで、電子文書は非表示となるが、この操作を電子文書の編集結果の保存指示としてもよい。
或いは、複数ページを持つ紙文書のページを揃えると、電子文書の編集結果が保存されるようにしてもよい。

ここで、紙文書における重なり、分割、並べ替え等の認識について説明する。
図６は、紙文書の重なりの認識について説明するための図である。
このうち、図６（ａ）は、複数の紙媒体２０を少しずつずらして重ね合わせた場合を示している。尚、図は、紙媒体２０を裏面から見た図であり、交差斜線で示すように、符号画像２６が全面に印刷されている。複数の紙媒体２０は、このように紙をずらして一括で読み取られる。
また、図６（ｂ）は、複数の紙媒体２０を束として認識する場合を示している。複数の紙媒体２０を認識した後、紙が重なっている場合はその重なりの度合いを検知する。そして、所定の面積以上の重なりがあった場合、複数の紙媒体２０を束として認識する。

図７は、紙文書の分割及び並べ替えを示した図である。
このうち、図７（ａ）は、束として認識されている複数の紙媒体２０から任意の紙媒体２０を抜き出した場合を示す。この場合、抜き出した紙媒体２０の裏面の符号画像２６が再び露出する。これにより、この抜き出された紙媒体２０は、単一の紙媒体２０として認識される。
また、図７（ｂ）は、紙媒体２０の重なり順序を変更する場合を示す。任意の紙媒体２０を別の紙媒体２０に重ねた場合、裏面の符号画像２６の切れ具合から重なり順序を認識する。例えば、（ｂ）を、紙媒体２０を重ねた状態を裏面から見た図とし、左側の紙媒体２０の紙ＩＤを「Ｐ００２」、中央の紙媒体２０の紙ＩＤを「Ｐ００３」、右側の紙媒体２０の紙ＩＤを「Ｐ００４」とする。このとき、（ｂ）の上図において、紙ＩＤ「Ｐ００２」は、矩形領域において認識される。また、紙ＩＤ「Ｐ００３」は、矩形領域から紙ＩＤ「Ｐ００２」が認識された領域を除いた領域において認識される。更に、紙ＩＤ「Ｐ００４」は、矩形領域から紙ＩＤ「Ｐ００３」（及び紙ＩＤ「Ｐ００２」）が認識された領域を除いた領域において認識される。このような認識結果を解析することで、左側の紙媒体２０が一番下にあり、中央の紙媒体２０がその上に重ねられており、右側の紙媒体２０がその上に重ねられていることが分かる。従って、（ｂ）の上図の状態から下図の状態へと紙媒体２０の並べ替えが行われても、その並べ替えは認識することができる。

次に、このような概略動作を実現する表示システムの構成について説明する。
図８は、本実施の形態における表示システムの構成例を示した図である。
図示するように、本実施の形態の表示システムは、水平型表示装置１０と、水平型表示装置１０上の共有画面を制御する共有画面制御装置３０とを含む。尚、水平型表示装置１０と共有画面制御装置３０との間は、例えばＬＡＮによって接続される。また、図では、１つの共有画面制御装置３０に対して、１つの水平型表示装置１０のみが接続されているが、複数の水平型表示装置１０が接続されていても構わない。

ここで、各装置の内部の機能構成について説明する。
水平型表示装置１０は、画像を表示するための処理を行う表示部１１１と、紙媒体２０のＩＤ（以下、「紙ＩＤ」という）を検出するＩＤ検出部１８１と、天板１１上での紙媒体２０の位置、方向、サイズ等の状態（以下、「配置状態」という）を算出する配置状態算出部１８２と、共有画面制御装置３０との間で情報の送受信を行う通信部１９とを備える。
表示部１１１は、通信部１９が共有画面制御装置３０から受信した表示状態に関する情報、例えば、表示位置や表示方向に関する情報に従い、天板１１に投影する画像をプロジェクタ１５に出力する。
ＩＤ検出部１８１は、赤外カメラ１８が撮像した画像を解析することにより、紙ＩＤを検出する。
配置状態算出部１８２は、赤外カメラ１８が撮像した画像を解析することにより、配置状態を算出する。
通信部１９は、自身のＩＤ、紙ＩＤ、配置状態に関する情報を共有画面制御装置３０に送信したり、電子文書及び表示部１１１における表示状態に関する情報を共有画面制御装置３０から受信したりする。

共有画面制御装置３０は、装置全体の動作を制御する制御部３１と、水平型表示装置１０上での紙媒体２０の配置状態を管理する配置状態管理部３２と、水平型表示装置１０に表示する電子文書を取得する文書取得部３３と、水平型表示装置１０上での画像の表示状態を管理する表示状態管理部３４と、水平型表示装置１０との間で情報の送受信を行う通信部３９とを備える。
制御部３１は、通信部３９が受信した紙ＩＤ及び配置状態を取り出し、配置状態管理部３２、文書取得部３３、表示状態管理部３４に必要な情報を渡して動作を制御する。
配置状態管理部３２は、どの水平型表示装置１０にどの紙媒体２０が載っているかを管理する。また、その紙媒体２０がどのような位置にどのような向きでどのような重なり具合で載っているかも管理する。即ち、本実施の形態では、媒体の配置状態を特定する状態特定手段の一例として、また、媒体の重なり状態を特定する状態特定手段の一例として、配置状態管理部３２を設けている。

文書取得部３３は、水平型表示装置１０に表示すべき電子文書のページを特定し、その電子文書のページを、文書サーバ（図示せず）、事前に電子文書を格納しておいた共有画面制御装置３０内のメモリ（図示せず）等から読み出す。ここで、電子文書は、媒体に記録された画像の元となる電子情報の一例である。また、本実施の形態では、電子情報を特定する情報特定手段の一例として、文書取得部３３を設けている。
表示状態管理部３４は、どの水平型表示装置１０のどの位置にどの電子文書のどのページの画像を表示するかを決定し管理する。ここで、電子文書のページの画像は、電子情報を表す特定画像の一例である。また、本実施の形態では、表示を制御する制御手段の一例として、表示状態管理部３４を設けている。
通信部３９は、水平型表示装置１０から装置ＩＤ、紙ＩＤ、配置状態に関する情報を受信する。また、水平型表示装置１０に対して電子文書及び表示状態に関する情報を送信する。

尚、図８のシステム構成では、水平型表示装置１０とは別に共有画面制御装置３０を設けたが、共有画面制御装置３０は、水平型表示装置１０と一体に設けてもよい。そして、このような構成を採用した場合は、管理情報において、装置ＩＤは必ずしも管理しなくてよい。

次に、配置状態管理部３２が参照及び更新を行う配置状態管理テーブル、表示状態管理部３４が参照及び更新を行う表示状態管理テーブル、文書取得部３３が参照する文書管理テーブル及び関連文書管理テーブルについて説明する。尚、これらのテーブルは、後述するメインメモリ９２や磁気ディスク装置９３に記憶しておくとよい。また、ここでは、便宜上テーブル形式で示すが、これはあくまで一例であり、同様の対応関係を管理可能な形式であれば、他の如何なる形式を採用してもよい。

これらのテーブルについて説明する前に、まず、水平型表示装置１０上の紙媒体２０の配置状態、及び、水平型表示装置１０上の画像の表示状態の表現方法について説明しておく。
図９は、水平型表示装置１０の画面上に紙媒体２０を配置し、画像を表示した場合の例を示したものである。ここでは、紙媒体２０を太い実線の枠で表し、画像を細い実線の枠で示している。そして、紙媒体２０についても、画像についても、その中心点のＸ座標、Ｙ座標、幅、高さ、傾き、レイヤ（奥行き）の６つのパラメータで、その位置、方向、サイズ、重なりを表現している。

このうち、中心点の座標は、図９に示したような座標系で表す。ここでは、画面を長方形とし、画面の中心点を原点としている。そして、長手方向にＸ軸を、短手方向にＹ軸をとっている。尚、Ｘ座標及びＹ座標の単位としては、ｍｍ、ｃｍ等、画面の大きさに応じて定めたものを用いるとよい。
幅及び高さは、座標の単位を用いて長さを数値で表したものである。
また、傾きについては、図示していないが、例えば、Ｘ軸の正方向となす角度を用いるとよい。
更に、レイヤは、紙媒体２０や画像が重なっている場合に、その重なりの下から何番目に位置しているかを表す数値である。一番下に隠れていれば「１」が、一番上に載っていれば重なっている紙媒体２０の枚数と同じ数値が設定される。尚、このレイヤは、例えば、図７（ｂ）を参照して説明したような方法で求められる。

以下、図９の例を用いて具体的に説明する。
図９には、４枚の紙媒体が示されている。
まず、１枚は、（Ｘ１，Ｙ１）を中心とし、幅Ｗ１、高さＨ１の紙媒体である。図示しないが、この紙媒体の傾きはＧ１とする。また、この紙媒体は重なった状態にないので、そのレイヤＬ１は「１」である。
他の３枚は、紙媒体の束を構成しており、その１番上は、（Ｘ２，Ｙ２）を中心とし、幅Ｗ２、高さＨ２の紙媒体である。図示しないが、この紙媒体の傾きはＧ２とする。また、この紙媒体は３枚からなる束の１番上であるので、そのレイヤＬ２は「３」である。一方、上から２番目及び１番下の紙媒体は隠れているが、前者は、中心（Ｘ３，Ｙ３）、幅Ｗ３、高さＨ３、傾きＧ３で、そのレイヤＬ３は「２」であり、後者は、中心（Ｘ４，Ｙ４）、幅Ｗ４、高さＨ４、傾きＧ４で、そのレイヤＬ４は「１」である。

また、図９には、５つの画像も示されている。
まず、３つは、１枚だけ配置された紙媒体の近くに表示されている。このうち、１つは、（Ｘ５，Ｙ５）を中心とし、幅Ｗ５、高さＨ５の画像である。図示しないが、この画像の傾きはＧ５とする。また、この画像は重なった状態にないので、そのレイヤＬ５は「１」である。また、もう１つは、（Ｘ６，Ｙ６）を中心とし、幅Ｗ６、高さＨ６の画像である。図示しないが、この画像の傾きはＧ６とする。また、この画像は重なった状態にないので、そのレイヤＬ６は「１」である。更に、もう１つは、（Ｘ７，Ｙ７）を中心とし、幅Ｗ７、高さＨ７の画像である。図示しないが、この画像の傾きはＧ７とする。また、この画像は重なった状態にないので、そのレイヤＬ７は「１」である。
他の２つは、３枚の紙媒体からなる紙の束の左右に表示されている。このうち、１つは、（Ｘ８，Ｙ８）を中心とし、幅Ｗ８、高さＨ８の画像である。図示しないが、この画像の傾きはＧ８とする。また、この画像は重なった状態にないので、そのレイヤＬ８は「１」である。また、もう１つは、（Ｘ９，Ｙ９）を中心とし、幅Ｗ９、高さＨ９の画像である。図示しないが、この画像の傾きはＧ９とする。また、この画像は重なった状態にないので、そのレイヤＬ９は「１」である。

次に、紙媒体２０及び画像がこのように配置されていることを前提に、先に挙げたテーブルについて順に説明する。
第一に、配置状態管理テーブルについて説明する。
図１０（ａ）は、配置状態管理テーブルの具体的な内容を示した図である。ここでは、図９の画面を備えた水平型表示装置１０の装置ＩＤを「Ａ００１」とし、この装置ＩＤを記憶している。また、（Ｘ１，Ｙ１）を中心とする紙媒体、（Ｘ２，Ｙ２）を中心とする紙媒体、（Ｘ３，Ｙ３）を中心とする紙媒体、（Ｘ４，Ｙ４）を中心とする紙媒体の紙ＩＤを、それぞれ、「Ｐ００１」、「Ｐ００２」、「Ｐ００３」、「Ｐ００４」としている。更に、紙ＩＤが「Ｐ００２」、「Ｐ００３」、「Ｐ００４」の３枚の紙媒体に対しては、紙の束として認識されているため、束ＩＤ「Ｂ００１」が設定されている。

第二に、表示状態管理テーブルについて説明する。
図１０（ｂ）は、表示状態管理テーブルの具体的な内容を示した図である。ここでも、図９の画面を備えた水平型表示装置１０の装置ＩＤを「Ａ００１」とし、この装置ＩＤを記憶している。また、（Ｘ５，Ｙ５）を中心とする画像、（Ｘ６，Ｙ６）を中心とする画像、（Ｘ７，Ｙ７）を中心とする画像、（Ｘ８，Ｙ８）を中心とする画像、（Ｘ９，Ｙ９）を中心とする画像が表すページを、それぞれ、文書ＩＤ「Ｄ００１」の電子文書の第４ページ、文書ＩＤ「Ｄ０１１」の電子文書の第１ページ、文書ＩＤ「Ｄ０１２」の電子文書の第１ページ、文書ＩＤ「Ｄ００２」の電子文書の第３ページ、文書ＩＤ「Ｄ００２」の電子文書の第５ページとしている。

第三に、文書管理テーブルについて説明する。
図１１（ａ）は、文書管理テーブルの具体的な内容を示した図である。文書管理テーブルは、どの電子文書のどのページがどの紙媒体に印刷されているかを管理するものである。ここでは、文書ＩＤ「Ｄ００１」の電子文書の第４ページが紙ＩＤ「Ｐ００１」の紙媒体に、文書ＩＤ「Ｄ００２」の電子文書の第４ページが紙ＩＤ「Ｐ００２」の紙媒体に、文書ＩＤ「Ｄ００３」の電子文書の第２ページが紙ＩＤ「Ｐ００３」の紙媒体に、文書ＩＤ「Ｄ００４」の電子文書の第６ページが紙ＩＤ「Ｐ００４」の紙媒体に印刷されていることを記憶している。

第四に、関連文書管理テーブルについて説明する。
図１１（ｂ）は、関連文書管理テーブルの具体的な内容を示した図である。関連文書管理テーブルは、どの電子文書のどのページと別のどの電子文書のどのページとが関連付けられているかを管理するものである。また、この関連文書管理テーブルにおいては、電子文書どうしの関連付けが行われた際の各電子文書を表す画像の表示状態に関する情報も記憶している。ここでは、文書ＩＤ「Ｄ００１」の電子文書の第４ページが、文書ＩＤ「Ｄ０１１」の第１ページ、及び、文書ＩＤ「Ｄ０１２」の電子文書の第１ページと関連付けられている。そして、その関連付けの際、文書ＩＤ「Ｄ００１」の電子文書の第４ページを表す画像は、中心（Ｘ５，Ｙ５）、幅Ｗ５、高さＨ５、傾きＧ５、レイヤＬ５で表示され、文書ＩＤ「Ｄ０１１」の電子文書の第１ページを表す画像は、中心（Ｘ６，Ｙ６）、幅Ｗ６、高さＨ６、傾きＧ６、レイヤＬ６で表示され、文書ＩＤ「Ｄ０１２」の電子文書の第１ページを表す画像は、中心（Ｘ７，Ｙ７）、幅Ｗ７、高さＨ７、傾きＧ７、レイヤＬ７で表示されていたことを記憶している。

次に、本実施の形態の表示システムにおける動作を説明する。
図８では、まず、水平型表示装置１０において、ＩＤ検出部１８１が紙ＩＤを検出し、配置状態算出部１８２が配置状態を算出して、通信部１９が装置ＩＤと共に、これらの情報を共有画面制御装置３０に送信する。

これにより、共有画面制御装置３０の動作が開始する。尚、ここでは、図３の表示を実現するための動作と、図４及び図５の表示を実現するための動作とを分けて説明する。
図１２は、図３の表示を実現するための共有画面制御装置３０の動作を示したフローチャートである。この動作に先立ち、通信部３９が受信した装置ＩＤと紙ＩＤと配置状態との複数の組み合わせがメモリに記憶されているものとする。但し、同じ水平型表示装置１０から受信した情報について処理を行う場合、装置ＩＤは同じなので、以下の説明においては、特段の必要がない限り、装置ＩＤには言及しない。

この状態で、共有画面制御装置３０では、制御部３１が、メモリから紙ＩＤ及び配置状態を取り出し、配置状態管理部３２に渡す（ステップ３０１）。
これにより、配置状態管理部３２は、紙ＩＤ及び配置状態に変化があったかどうかを判定する（ステップ３０２）。即ち、まず、ステップ３０１で取り出した紙ＩＤをキーとして、図１０（ａ）の配置状態管理テーブルを検索し、配置状態を取得する。そして、検索された配置状態における６つのパラメータが、ステップ３０１で取り出した配置状態における６つのパラメータと一致するかどうかを判定する。ここで、全てのパラメータが一致すれば、「変化なし」となるが、いずれか１つのパラメータでも一致しなければ「変化あり」となる。

「変化なし」と判定された場合、処理はステップ３０６に進むが、「変化あり」と判定された場合、配置状態管理部３２は、配置状態登録処理を行う（ステップ３０３）。尚、配置状態登録処理については後述する。
配置状態登録処理が終了すると、制御部３１は、文書取得部３３に対して紙ＩＤに対応する電子文書及びそれに関連する電子文書を読み出すように指示する。これにより、文書取得部３３は、指示された電子文書を読み出す（ステップ３０４）。即ち、文書取得部３３は、紙ＩＤをキーとして、図１１（ａ）の文書管理テーブルを検索し、文書ＩＤ及びページ番号を取得する。そして、この文書ＩＤ及びページ番号に基づいて、該当する電子文書の該当ページを読み出す。また、文書取得部３３は、ここで取得した文書ＩＤ及びページ番号をキーとして、図１１（ｂ）の関連文書管理テーブルを検索し、関連する電子文書の文書ＩＤ及びページ番号を取得する。そして、この文書ＩＤ及びページ番号に基づいて、関連する電子文書のページを読み出す。尚、本実施の形態では、電子文書どうしを関連付ける操作を行った際の電子文書のページの画像の表示状態に関する情報も、併せて取得する。即ち、文書ＩＤ及びページ番号をキーとして、図１１（ｂ）の関連文書管理テーブルを検索した際に、関連付けられた双方の電子文書のページの表示状態を取得する。このようにして取得された情報は、制御部３１に戻される。

その後、制御部３１は、表示状態管理部３４に対して電子文書を表す画像の表示状態を決定するように指示する。これにより、表示状態管理部３４は、表示状態を決定する（ステップ３０５）。ここで、表示状態としては、表示位置、表示方向、表示サイズ等がある。表示状態管理部３４は、これらの表示状態を、紙媒体２０の配置位置に応じて決定するようにするとよい。表示位置は、例えば、図３に示したように、紙媒体２０の配置位置の近傍にしたり、真下にしたりすることが考えられる。また、関連する電子文書の画像の表示位置については、紙ＩＤに対応する電子文書の画像の周囲に均等に並ぶように決定してもよい。このようにして決定された表示状態に関する情報は、図１０（ｂ）に示した表示状態管理テーブルに登録されると共に、制御部３１に戻される。

次に、制御部３１は、通信部３９が保持するメモリ内に未処理の紙媒体２０に関する情報が存在しているかどうかを判定する（ステップ３０６）。
その結果、未処理の紙媒体２０に関する情報が存在していれば、ステップ３０１〜３０５の処理を繰り返す。一方、未処理の紙媒体２０に関する情報が存在していなければ、ステップ３０４で読み出した電子文書とステップ３０５で決定した表示状態の情報とからなる複数の組を水平型表示装置１０に送信する（ステップ３０７）。

尚、ステップ３０１で取り出した紙ＩＤ及び配置状態を有する紙媒体２０が他の紙媒体２０と重なり合っている場合は、互いに重なっている部分を有する複数の紙媒体２０（以下、「紙媒体群」という）についてステップ３０２〜３０５の処理を行う。ここで、紙媒体群は、それに含まれる紙媒体２０が他の少なくとも１つの紙媒体２０と重なり部分を有するものであればよく、紙媒体２０が他の全ての紙媒体２０と重なり部分を有することまでは要求しない。ステップ３０２において、このような紙媒体群については、紙媒体群全体として変化があったかどうかを判定し、ステップ３０３の配置状態登録処理も紙媒体群の単位で行う。

また、紙媒体群の中で特にその中の全ての紙媒体の重なり部分が所定の閾値を超えているものを「紙媒体束」と呼ぶ。図６（ｂ）に示したような束として認識された紙媒体２０である。本実施の形態では、この紙媒体束については、ステップ３０４で紙ＩＤの変換処理を行う。即ち、紙媒体束として取り扱われる紙媒体群については、ステップ３０１で取り出した紙ＩＤをそのまま用いて電子文書を特定するのではなく、束の最も上にある紙媒体に付された紙ＩＤを用いて電子文書を特定する。具体的には、配置状態管理部３２が、まず、配置状態管理テーブルを参照し、紙ＩＤに対応する束ＩＤが空白でないか判定する。ここで、束ＩＤが空白であるということは、その紙媒体は、紙媒体束を構成していないことを意味する。もし束ＩＤが空白でなければ、その紙媒体は紙媒体束を構成しているので、同じ束ＩＤに対応する配置状態に含まれるレイヤの値が最大の紙媒体２０を検索し、その紙媒体２０の紙ＩＤを用いて電子文書を特定する。

更に、本実施の形態において、ステップ３０２で「変化あり」と判定される態様としては、紙媒体２０が取り去られた場合、紙媒体２０が新たに配置された場合、既に配置されていた紙媒体２０の配置状態が変更された場合等がある。このうち、１つ目の場合については、ステップ３０３において、取り去られた紙媒体２０に関する情報を配置状態管理テーブルから削除し、ステップ３０４において、取り去られた紙媒体２０の紙ＩＤに対応する文書ＩＤ及びページ番号を特定し、ステップ３０５において、その文書ＩＤ及びページ番号に関する情報を表示状態管理テーブルから削除し、ステップ３０７において、その文書ＩＤ及びページ番号に対応する画像を消去する命令を送信すればよい。

一方、図１３は、図４及び図５の表示を実現するための共有画面制御装置３０の動作を示したフローチャートである。この動作に先立ち、通信部３９が受信した装置ＩＤと紙ＩＤと配置状態との複数の組み合わせがメモリに記憶されているものとする。但し、同じ水平型表示装置１０から受信した情報について処理を行う場合、装置ＩＤは同じなので、以下の説明においては、特段の必要がない限り、装置ＩＤには言及しない。

この状態で、共有画面制御装置３０では、制御部３１が、メモリから紙ＩＤ及び配置状態を取り出し、配置状態管理部３２に渡す（ステップ３２１）。
これにより、配置状態管理部３２は、紙ＩＤ及び配置状態に変化があったかどうかを判定する（ステップ３２２）。即ち、まず、ステップ３２１で取り出した紙ＩＤをキーとして、図１０（ａ）の配置状態管理テーブルを検索し、配置状態を取得する。そして、検索された配置状態における６つのパラメータが、ステップ３２１で取り出した配置状態における６つのパラメータと一致するかどうかを判定する。ここで、全てのパラメータが一致すれば、「変化なし」となるが、いずれか１つのパラメータでも一致しなければ「変化あり」となる。

「変化なし」と判定された場合、処理はステップ３２６に進むが、「変化あり」と判定された場合、配置状態管理部３２は、配置状態登録処理を行う（ステップ３２３）。尚、配置状態登録処理については後述する。
配置状態登録処理が終了すると、制御部３１は、文書取得部３３に対して紙ＩＤに対応する電子文書のページの前後のページを読み出すように指示する。これにより、文書取得部３３は、指示されたページを読み出す（ステップ３２４）。即ち、文書取得部３３は、紙ＩＤをキーとして、図１１（ａ）の文書管理テーブルを検索し、文書ＩＤ及びページ番号を取得する。そして、この文書ＩＤ及びページ番号に基づいて、該当する電子文書のそのページ以外のページを読み出す。このようにして取得された情報は、制御部３１に戻される。

その後、制御部３１は、表示状態管理部３４に対して電子文書を表す画像の表示状態を決定するように指示する。これにより、表示状態管理部３４は、表示状態を決定する（ステップ３２５）。ここで、表示状態としては、表示位置、表示方向、表示サイズ等がある。表示状態管理部３４は、これらの表示状態を、紙媒体２０の配置位置に応じて決定するようにするとよい。表示位置は、例えば、図４及び図５に示したように、紙媒体２０の配置位置の左側及び／又は右側にしたり、紙媒体２０の配置位置を除く全面にしたりすることが考えられる。このようにして決定された表示状態に関する情報は、図１０（ｂ）に示した表示状態管理テーブルに登録されると共に、制御部３１に戻される。

次に、制御部３１は、通信部３９が保持するメモリ内に未処理の紙媒体２０に関する情報が存在しているかどうかを判定する（ステップ３２６）。
その結果、未処理の紙媒体２０に関する情報が存在していれば、ステップ３２１〜３２５の処理を繰り返す。一方、未処理の紙媒体２０に関する情報が存在していなければ、ステップ３２４で読み出したページとステップ３２５で決定した表示状態の情報とからなる複数の組を水平型表示装置１０に送信する（ステップ３２７）。

尚、ステップ３２１で取り出した紙ＩＤ及び配置状態を有する紙媒体２０が他の紙媒体２０と重なり合っている場合は、互いに重なっている部分を有する複数の紙媒体２０（紙媒体群）についてステップ３２２〜３２５の処理を行う。ここで、紙媒体群は、それに含まれる紙媒体２０が他の少なくとも１つの紙媒体２０と重なり部分を有するものであればよく、紙媒体２０が他の全ての紙媒体２０と重なり部分を有することまでは要求しない。ステップ３２２において、このような紙媒体群については、紙媒体群全体として変化があったかどうかを判定し、ステップ３２３の配置状態登録処理も紙媒体群の単位で行う。

また、紙媒体群の中で特にその中の全ての紙媒体の重なり部分が所定の閾値を超えているものを「紙媒体束」と呼ぶ。図６（ｂ）に示したような束として認識された紙媒体２０である。本実施の形態では、この紙媒体束については、ステップ３２４で紙ＩＤの変換処理を行う。即ち、紙媒体束として取り扱われる紙媒体群については、ステップ３２１で取り出した紙ＩＤをそのまま用いて電子文書を特定するのではなく、束の最も上にある紙媒体に付された紙ＩＤを用いて電子文書を特定する。具体的には、配置状態管理部３２が、まず、配置状態管理テーブルを参照し、紙ＩＤに対応する束ＩＤが空白でないか判定する。ここで、束ＩＤが空白であるということは、その紙媒体は、紙媒体束を構成していないことを意味する。もし束ＩＤが空白でなければ、その紙媒体は紙媒体束を構成しているので、同じ束ＩＤに対応する配置状態に含まれるレイヤの値が最大の紙媒体２０を検索し、その紙媒体２０の紙ＩＤを用いて電子文書を特定する。

更に、本実施の形態において、ステップ３２２で「変化あり」と判定される態様としては、紙媒体２０が取り去られた場合、紙媒体２０が新たに配置された場合、既に配置されていた紙媒体２０の配置状態が変更された場合等がある。このうち、１つ目の場合については、ステップ３２３において、取り去られた紙媒体２０に関する情報を配置状態管理テーブルから削除し、ステップ３２４において、取り去られた紙媒体２０の紙ＩＤに対応する文書ＩＤ及びページ番号を特定し、ステップ３２５において、その文書ＩＤ及びページ番号に関する情報を表示状態管理テーブルから削除し、ステップ３２７において、その文書ＩＤ及びページ番号に対応する画像を消去する命令を送信すればよい。

次に、図１２及び図１３における配置状態登録処理について説明する。
図１４は、配置状態登録処理の流れを示したフローチャートである。尚、図１２及び図１３の動作においても述べたように、紙媒体２０又は紙媒体群についてこの処理は行われる。尚、ここでは、紙媒体群に含まれる紙媒体２０が有するレイヤの値のうち最大のものをＮとして説明する。
この処理において、配置状態管理部３２は、Ｎ枚の紙媒体２０のうち、上からｉ番目の紙媒体２０からｊ番目の紙媒体２０までの重なり状態を調べる。そのために、まず、変数ｊにＮを代入し（ステップ３４１）、変数ｉに変数ｊの値を代入する（ステップ３４２）。この時点では、ｉの値もｊの値もＮになっている。この状態で、ｊの値を１ずつ減じながら、重なり状態を調べる。但し、ｊが０になることはないので、まず、ｊが１より大きいかどうかを判定する（ステップ３４３）。ここで、ｊが１よりも大きければ、ｊから１を減じ（ステップ３４４）、ｉ番目の紙媒体２０からｊ番目の紙媒体２０までの重なり部分の面積を算出する（ステップ３４５）。

そして、重なり部分の面積が閾値よりも大きいかどうかを判定する（ステップ３４６）。その結果、閾値より大きければ、ステップ３４３へ戻り、ｊが０にならない限り、ｊから更に１を減じ、ｉ番目の紙媒体２０からｊ番目の紙媒体２０までの重なり部分の面積が閾値よりも大きいかどうかの判断を繰り返す。そして、ｊがある値になった時点で、ｉ番目の紙媒体２０からｊ番目の紙媒体２０までの重なり部分の面積が閾値以下になったとする。この場合、ｉ番目の紙媒体２０から（ｊ＋１）番目の紙媒体２０までを１つの束とし、その束について、配置状態を登録すると共に、同じ束ＩＤを登録する（ステップ３４７）。例えば、図１０（ａ）では、紙ＩＤ「Ｐ００２」、「Ｐ００３」、「Ｐ００４」の紙媒体２０が１つの束となり、束ＩＤ「Ｂ００１」が登録されている。
一方、ｊを減じていく過程でｊが１に達したとする。この場合、ｉ番目の紙媒体２０から１番下の紙媒体２０までを１つの束とし、その束について、配置状態を登録すると共に、同じ束ＩＤを登録する（ステップ３４８）。

尚、束として認識された紙媒体２０に記録された画像の元となる電子文書については、図示しない更新手段により、一体として処理されるように更新してもよい。ここで、一体として処理されるように更新する処理としては、例えば、複数の電子文書をまとめて１つのファイルとする処理がある。また、この更新手段は、図７（ｂ）に示したような紙媒体２０の並べ替えに応じて、電子文書のページを並べ替える更新処理を行ってもよい。

最後に、本実施の形態をコンピュータ９０にて実現するものとして、このコンピュータ９０のハードウェア構成について説明する。
図１５は、コンピュータ９０のハードウェア構成を示した図である。
図示するように、コンピュータ９０は、演算手段であるＣＰＵ（Central Processing Unit）９１と、記憶手段であるメインメモリ９２及び磁気ディスク装置（ＨＤＤ：Hard Disk Drive）９３とを備える。ここで、ＣＰＵ９１は、ＯＳ（Operating System）やアプリケーション等の各種ソフトウェアを実行し、上述した各機能を実現する。また、メインメモリ９２は、各種ソフトウェアやその実行に用いるデータ等を記憶する記憶領域であり、磁気ディスク装置９３は、各種ソフトウェアに対する入力データや各種ソフトウェアからの出力データ等を記憶する記憶領域である。
更に、コンピュータ９０は、外部との通信を行うための通信Ｉ/Ｆ９４と、ビデオメモリやディスプレイ等からなる表示機構９５と、キーボードやマウス等の入力デバイス９６とを備える。

尚、本実施の形態を実現するプログラムは、通信手段により提供することはもちろん、ＣＤ−ＲＯＭ等の記録媒体に格納して提供することも可能である。

本発明の実施の形態が適用される水平型表示装置の断面図である。 本発明の実施の形態で用いられる符号画像の例を示した図である。 本発明の実施の形態における表示例を示した図である。 本発明の実施の形態における表示例を示した図である。 本発明の実施の形態における表示例を示した図である。 本発明の実施の形態における操作例を示した図である。 本発明の実施の形態における操作例を示した図である。 本発明の実施の形態における表示システムの構成例を示した図である。 本発明の実施の形態で用いる座標系における紙媒体の配置状態及び画像の表示状態を示した図である。 本発明の実施の形態で用いられる配置状態管理テーブル及び表示状態管理テーブルの記憶内容の例を示した図である。 本発明の実施の形態で用いられる文書管理テーブル及び関連文書管理テーブルの記憶内容の例を示した図である。 本発明の実施の形態における共有画面制御装置の第１の動作例を示したフローチャートである。 本発明の実施の形態における共有画面制御装置の第２の動作例を示したフローチャートである。 本発明の実施の形態における配置状態登録処理の動作を示したフローチャートである。 本発明の実施の形態を実現可能なコンピュータのハードウェア構成図である。

符号の説明

１０…水平型表示装置、１１…天板、１３…投影ユニット、１５…プロジェクタ、２０…紙媒体

Claims (10)

1. 表示画面上での媒体の配置状態を特定する状態特定手段と、
   前記媒体に記録された画像の元となる電子情報、又は、当該電子情報に関連する電子情報を特定する情報特定手段と、
   前記状態特定手段により特定された配置状態に応じて、前記情報特定手段により特定された電子情報を表す特定画像が前記表示画面に表示されるように制御する制御手段と
   を備えたことを特徴とする表示制御装置。
2. 前記制御手段は、過去における前記特定画像の前記表示画面上での表示状態に更に応じて、前記特定画像が表示されるように制御することを特徴とする請求項１記載の表示制御装置。
3. 前記情報特定手段により特定された電子情報は、所定の操作によって関連付けられた複数の要素を含み、
   前記表示状態は、前記所定の操作が行われた際の前記特定画像の前記表示画面上での表示状態であることを特徴とする請求項２記載の表示制御装置。
4. 前記情報特定手段により特定された電子情報は、所定の順序関係にある複数の要素を含み、
   前記制御手段は、前記媒体に記録された画像の元となる電子情報に対する前記複数の要素の各々の前記所定の順序関係における先後に更に応じて、前記特定画像が表示されるように制御することを特徴とする請求項１記載の表示制御装置。
5. 前記状態特定手段により特定された配置状態において前記媒体が他の媒体の上に重なっていることが示されている場合に、当該媒体を当該他の媒体に基づいて特定する媒体特定手段を更に備えたことを特徴とする請求項１記載の表示制御装置。
6. 複数の媒体の重なり状態を特定する状態特定手段と、
   前記複数の媒体に記録された画像の元となる電子情報を特定する情報特定手段と、
   前記状態特定手段により特定された重なり状態に応じて、前記情報特定手段により特定された電子情報を更新する更新手段と
   を備えたことを特徴とする媒体管理装置。
7. 前記状態特定手段は、前記複数の媒体の重なり状態として、当該複数の媒体の重なり合う部分の面積を特定し、
   前記更新手段は、前記状態特定手段により特定された面積が所定の閾値を超える場合に、前記電子情報を一体として処理されるように更新することを特徴とする請求項６記載の媒体管理装置。
8. 前記状態特定手段は、前記複数の媒体の重なり状態として、当該複数の媒体の重なり順序を特定し、
   前記更新手段は、前記状態特定手段により特定された重なり順序と、前記電子情報の各媒体に対応する要素の順序とが合致するように、当該電子情報を更新することを特徴とする請求項６記載の媒体管理装置。
9. コンピュータに、
   表示画面上での媒体の配置状態を特定する機能と、
   前記媒体に記録された画像の元となる電子情報、又は、当該電子情報に関連する電子情報を特定する機能と、
   前記配置状態に応じて、特定された電子情報を表す特定画像が前記表示画面に表示されるように制御する機能と
   を実現させるためのプログラム。
10. コンピュータに、
    複数の媒体の重なり状態を特定する機能と、
    前記複数の媒体に記録された画像の元となる電子情報を特定する機能と、
    前記重なり状態に応じて、特定された電子情報を更新する機能と
    を実現するためのプログラム。

Images