JP6037915B2 - 情報表示システム、情報表示方法およびコンピュータプログラム - Google Patents

Description

本発明は、情報表示システム、情報表示方法およびコンピュータプログラムに関する。

従来、例えば特許文献１に記載される情報提供技術が知られている。特許文献１の情報提供技術では、利用者が所持している紙媒体を撮像し、該撮像情報に基づいて、画像認識処理により、紙面に印刷され利用者によって指示されたマーカを認識する。そして、該認識されたマーカに対応付けされている情報コンテンツを表示する。

特開２０１２−０１４６０６号公報

しかし、上述した従来の情報提供技術では、専用に作られたパンフレット等の紙面に印刷されたマーカを認識することにより、該マーカに対応付けされている情報コンテンツを表示させるものである。このため、一般の印刷物（例えば、広告や宣伝のためのチラシや、雑誌など）を対象にすることはできない。一般の印刷物には、様々な掲載情報（文字、図形、写真など）が掲載されており、それらの掲載情報に対応付けされている情報を利用者の簡易な操作により表示させることが要望されている。

本発明は、このような事情を考慮してなされたもので、様々な掲載情報が掲載されている掲載物を対象にして、利用者の簡易な操作により、該掲載物に掲載された掲載情報に対応付けされている関連情報を表示させることができる、情報表示システム、情報表示方法およびコンピュータプログラムを提供することを課題とする。

上記の課題を解決するために、本発明に係る情報表示システムは、所定の大きさの面を有し、前記面に対する直接または間接の接触によって該接触された前記面内の位置を示す位置情報を入力する位置入力部と、前記面を含む範囲を撮像する撮像部と、所定の掲載物の掲載面の画像情報と、前記掲載面に掲載されている掲載情報の前記掲載面内の掲載情報位置情報と、前記掲載情報に対応する関連情報とを記憶する記憶部と、情報を表示する表示画面を有する表示部と、前記撮像部によって撮像された撮像情報および前記画像情報に基づいて前記面上に置かれた前記掲載物の掲載面を特定し、前記位置入力部によって入力された位置情報および前記掲載情報位置情報に基づいて前記特定された掲載面の前記掲載情報を特定し、前記特定された掲載情報に対応する前記関連情報または該関連情報に基づいて取得された情報を前記表示画面に表示させる情報処理部と、を備えたことを特徴とする。

本発明に係る情報表示システムにおいて、前記情報処理部は、前記特定された掲載面の画像情報を前記表示画面に表示させることを特徴とする。

本発明に係る情報表示システムにおいて、前記情報処理部は、前記表示画面に表示させる画像情報に対応する掲載面に掲載されている掲載情報のうち、掲載情報位置情報と関連情報が前記記憶部に存在する掲載情報の領域を示す情報を前記表示画面に表示させることを特徴とする。

本発明に係る情報表示システムにおいて、前記情報処理部は、前記位置入力部によって入力された位置情報で示される位置の軌跡を前記表示画面に表示された掲載面の画像情報に重ねて表示させることを特徴とする。

本発明に係る情報表示システムにおいては、前記位置入力部によって入力された位置情報で示される位置に対応する掲載情報の掲載情報位置情報と関連情報が前記記憶部に記憶されている場合に報知を行う報知部を備えたことを特徴とする。

本発明に係る情報表示方法は、記憶部が、所定の掲載物の掲載面の画像情報と、前記掲載面に掲載されている掲載情報の前記掲載面内の掲載情報位置情報と、前記掲載情報に対応する関連情報とを記憶するステップと、撮像部が、所定の大きさの面を有し且つ前記面に対する直接または間接の接触によって該接触された前記面内の位置を示す位置情報を入力する位置入力部の前記面を含む範囲を撮像するステップと、前記位置入力部が、前記位置情報を入力するステップと、情報処理部が、前記撮像部によって撮像された撮像情報および前記画像情報に基づいて前記面上に置かれた前記掲載物の掲載面を特定し、前記位置入力部によって入力された位置情報および前記掲載情報位置情報に基づいて前記特定された掲載面の前記掲載情報を特定し、前記特定された掲載情報に対応する前記関連情報または該関連情報に基づいて取得された情報を表示部の表示画面に表示させるステップと、を含むことを特徴とする。

本発明に係るコンピュータプログラムは、所定の大きさの面を有し、前記面に対する直接または間接の接触によって該接触された前記面内の位置を示す位置情報を入力する位置入力部と、前記面を含む範囲を撮像する撮像部と、所定の掲載物の掲載面の画像情報と、前記掲載面に掲載されている掲載情報の前記掲載面内の掲載情報位置情報と、前記掲載情報に対応する関連情報とを記憶する記憶部と、を備える情報表示処理装置における情報表示処理を行うためのコンピュータプログラムであって、前記撮像部によって撮像された撮像情報および前記画像情報に基づいて前記面上に置かれた前記掲載物の掲載面を特定し、前記位置入力部によって入力された位置情報および前記掲載情報位置情報に基づいて前記特定された掲載面の前記掲載情報を特定し、前記特定された掲載情報に対応する前記関連情報または該関連情報に基づいて取得された情報を表示部の表示画面に表示させるステップ、をコンピュータに実行させるためのコンピュータプログラムであることを特徴とする。

本発明によれば、様々な掲載情報が掲載されている掲載物を対象にして、利用者の簡易な操作により、該掲載物に掲載された掲載情報に対応付けされている関連情報を表示させることができる。

本発明の一実施形態に係る情報表示システムの概観構成を示す概観構成図である。 図１に示す情報表示処理装置１０の電気的構成を示す装置構成図である。 本発明の一実施形態に係るデータベース１００の構成例である。 本発明の一実施形態に係るデータベース１００の構成例である。 本発明の一実施形態に係るデータベース１００の構成例である。 本発明の一実施形態に係る情報表示処理のフローチャートである。 本発明の一実施形態に係る情報表示処理のフローチャートである。 本発明の一実施形態に係る情報表示処理を説明するための説明図である。 本発明の一実施形態に係る情報表示処理を説明するための説明図である。 本発明の一実施形態に係る情報表示処理を説明するための説明図である。 本発明の一実施形態に係る情報表示処理を説明するための説明図である。 本発明に係る一実施例を説明するための表示画面例である。 本発明に係る一実施例を説明するためのタッチパッド１２のタッチ面４００の構成例である。

以下、図面を参照し、本発明の実施形態について説明する。
図１は、本発明の一実施形態に係る情報表示システムの概観構成を示す概観構成図である。図２は、図１に示す情報表示処理装置１０の電気的構成を示す装置構成図である。

図１において、情報表示処理装置１０は撮像部１１とタッチパッド１２を備える。情報表示処理装置１０は、通信手段３２によりディスプレイ装置３０に表示データを送信する。また、情報表示処理装置１０は、通信手段４２によりサーバ４０との間でデータを送受する。

タッチパッド１２は、所定の大きさの面（以下、タッチ面と称する）を有し、該タッチ面に対する直接または間接の接触によって該接触された該タッチ面内の位置を示す位置情報を入力する位置入力装置である。タッチパッド１２のタッチ面上には、掲載物５０が置かれる。掲載物５０は、タッチ面上に置かれた状態で利用者７０が掲載物５０の上からタッチ面を間接に接触できる紙などの媒体に、掲載情報が掲載されたものである。掲載情報としては、文字、図形、画像などがある。掲載物５０としては、一般の印刷物（例えば、広告や宣伝のためのチラシ、雑誌など）、特別に作製された印刷物（例えば、特定のイベントのパンフレットなど）、手書きの紙面など、様々なものが利用可能である。

撮像部１１は、タッチ面を含む範囲を撮像する。撮像範囲は、タッチ面の大きさに合わせて調節可能である。掲載物５０は、掲載情報が掲載された掲載面を撮像部１１で撮像できるように、該掲載面をタッチ面とは反対に向けてタッチ面上に置かれる。撮像部１１の撮像時のピントは、タッチ面上に合わせるようにする。また、タッチ面上に置かれた掲載物５０の掲載面にピントが合うように、適宜、調節可能とすることが好ましい。また、固定用治具６０を用いて掲載物５０がタッチ面上に固定されるようにすることが好ましい。

次に図２を参照して、図１に示す情報表示処理装置１０の電気的構成を説明する。図２において、情報表示処理装置１０は、撮像部１１とタッチパッド１２とＣＰＵ（情報処理装置）１３とスピーカ１４と振動部１５とメモリ１６とストレージ１７と通信インタフェース１８を有する。各部１１〜１８は、データを伝送するシステムバス１９に接続されている。これら情報表示処理装置１０を構成する各電気的構成部は、図１に示されるタッチパッド１２の装置内に実装されている。

撮像部１１は、撮像により取得した静止画像データである撮像情報を出力する。タッチパッド１２は、直接または間接の接触されたタッチ面内の位置を示す位置情報を出力する。ＣＰＵ１３は、メモリ１６に格納されるコンピュータプログラムを実行することにより、所定の情報処理を行う。スピーカ１４は、入力される音声信号を再生する。振動部１５は、入力される制御信号に従って振動を発生する。メモリ１６は、ＣＰＵ１３が実行するコンピュータプログラムや各種データを記憶する。ストレージ１７は、各種データを記憶する。通信インタフェース１８は、ディスプレイ装置３０に表示データを送信する通信手段３２と、サーバ４０との間でデータを送受する通信手段４２とを有する。通信手段３２、４２は、無線により通信するものであってもよく、又は有線により通信するものであってもよい。通信手段３２としては、例えば、通信ケーブルで直接的にディスプレイ装置３０と通信接続するものであってもよく、又は、近距離無線通信装置等を用いて無線によりディスプレイ装置３０と通信接続するものであってもよい。通信手段４２としては、例えば、携帯電話網や無線ＬＡＮ等の無線回線、または有線回線を利用するものが挙げられる。例えば、通信手段４２は、無線回線を利用してインターネット等の通信ネットワークに接続されるサーバ４０にアクセスすることが挙げられる。

図３、図４および図５は、本実施形態に係るデータベース１００の構成例である。データベース１００は、図２に示すストレージ１７に格納される。図３において、データベース１００は、掲載物５０の掲載面（例えば紙面）の静止画像データである画像情報１１０と、該掲載面に掲載されている掲載情報（例えば文字、画像）の該掲載面内の位置情報（掲載情報位置情報）であるレイアウト情報１２０と、該掲載情報のうちの文字情報（例えば文字、単語、文章）１３０とを有する。文字情報１３０は、文字で構成される掲載情報の関連情報である。レイアウト情報１２０は、掲載面内の基準点に対する、各掲載情報の相対位置を示す相対座標を有する。掲載面内の基準点としては、掲載面の中心点や、掲載面の一頂点などが利用できる。これらの情報１１０、１２０、１３０は、掲載物５０ごとに設けられる。

図４において、データベース１００は、掲載物５０の掲載面（例えば紙面）毎に、位置情報（掲載情報位置情報）と関連情報（例えば、ＵＲＬ（Uniform Resource Locator））の組を有する。関連情報は、同じ組の掲載情報位置情報に対応する掲載情報の関連情報である。例えば、ある掲載情報の関連情報であるＵＲＬは、該掲載情報の詳細な情報を取得できるサーバ４０内のファイルの所在を示す。

図５において、データベース１００は、辞書データ１４０と画像関連情報１５０と製品・価格情報１６０を有する。辞書データ１４０は、掲載情報の文字から単語を認識するための辞書データである。辞書データ１４０によって、掲載情報の文字から、関連情報を検索するための検索キーワードを取得することができる。画像関連情報１５０は、掲載情報の画像についての関連情報である。例えば、花の画像に対して該花の名前や特徴などの情報である。製品・価格情報１６０は、製品を示す掲載情報（例えば、製品の品名や型番など）の関連情報であって、該製品の価格、仕様、類似商品の情報などである。

次に、図６、図７を参照して、本実施形態に係る情報表示システムの動作を説明する。図６、図７は、本実施形態に係る情報表示処理のフローチャートである。

（ステップＳ１）撮像部１１がタッチパッド１２のタッチ面を含む範囲を撮像する。この撮像タイミングは、一定周期であってもよく、または、利用者７０が指定するタイミングであってもよい。撮像部１１から出力された撮像情報はメモリ１６に格納される。図８に撮像情報２０１の例が示されている。図８の撮像情報２０１は、タッチパッド１２のタッチ面上に置かれた雑誌のページが撮像部１１により撮像されて取得された静止画像データである。

（ステップＳ２）ＣＰＵ１３は、画像認識処理により、メモリ１６に格納された撮像情報２０１とデータベース１００内の画像情報１１０を照合し、両者の一致を判定する。

（ステップＳ３）ＣＰＵ１３は、ステップＳ２の判定の結果に基づいて、データベース１００に格納される掲載物５０の掲載面（例えば紙面）のデータ（画像情報１１０）を検出したかを判断する。この結果、検出した場合にはステップＳ４に進み、検出しなかった場合にはステップＳ１に戻る。

（ステップＳ４）ＣＰＵ１３は、ステップＳ２で検出されたデータベース１００内の画像情報１１０を通信インタフェース１８によりディスプレイ装置３０に送信し、ディスプレイ装置３０の表示画面に該画像情報１１０を表示させる。このとき、ＣＰＵ１３は、メモリ１６に格納された撮像情報２０１と画像情報１１０との比較によってタッチパッド１２のタッチ面に対する掲載面の位置および傾きを検出し、検出された位置および傾きをディスプレイ装置３０の表示画面への画像情報１１０の表示に反映させる。これにより、利用者７０は、タッチ面上に置かれた掲載面と同じ様にディスプレイ装置３０の表示画面に画像情報１１０が表示されるので、タッチ面上に置かれた掲載面と表示された画像情報１１０との対応付けがしやすい。

また、ＣＰＵ１３は、ディスプレイ装置３０の表示画面に表示させる画像情報１１０に対応する掲載面に掲載されている掲載情報のうち、掲載情報の登録情報がデータベース１００に存在する掲載情報の領域を示す情報（例えば図形など）をディスプレイ装置３０の表示画面に表示させる。掲載情報の登録情報は、掲載情報位置情報と関連情報で構成される。

例えば、該当する掲載情報の領域を囲む線を表示させる。例えば、図９に表示データ２０２の一例が示されている。表示データ２０２は、ＣＰＵ１３によって画像情報１１０から生成される。図９に示される表示データ２０２では、掲載情報の登録情報がデータベース１００に存在する掲載情報「ＸＸ」の領域を囲む矩形枠２０３を、画像情報１１０に重ねてディスプレイ装置３０の表示画面に表示させる。これにより、利用者７０は、掲載情報の登録情報がある掲載情報の位置をディスプレイ装置３０の表示画面上で認識できる。

なお、利用者７０が掲載面の再読み込みを指示できるように、再読み込み指示操作部を設けてもよい。ＣＰＵ１３は、再読み込み指示操作部により掲載面の再読み込みの指示があると、ステップＳ１に処理を戻す。

（ステップＳ５）ＣＰＵ１３は、タッチパッド１２からの位置情報の入力の受付を開始する。

（ステップＳ６）ＣＰＵ１３は、タッチパッド１２からの位置情報の入力があるかを判断する。この結果、位置情報の入力がある場合にはステップＳ７に進み、位置情報の入力がない場合にはステップＳ６でタッチパッド１２からの位置情報の入力を待つ。

（ステップＳ７）ＣＰＵ１３は、タッチパッド１２から入力された位置情報で示される位置の軌跡を、画像情報１１０に重ねてディスプレイ装置３０の表示画面に表示させる。この軌跡の表示では、ＣＰＵ１３は、ステップＳ４で検出したタッチパッド１２のタッチ面に対する掲載面の位置および傾きに基づいて、タッチパッド１２から入力された位置情報が示す位置に対応する画像情報１１０の画像内の位置を検出する。

例えば、図１０において、利用者７０がタッチパッド１２のタッチ面上に置かれた雑誌のページの掲載情報「ＸＸ」の領域２０４を指でなぞると、そのなぞられた領域２０４の位置情報がタッチパッド１２から順次出力される。ＣＰＵ１３は、該順次出力された位置情報が示す位置に対応する画像情報１１０の掲載面内の位置を順次検出する。そして、ＣＰＵ１３は、順次検出された位置を画像情報１１０に重ねてディスプレイ装置３０の表示画面に表示させる。これにより、ディスプレイ装置３０の表示画面には、表示データ２０２により、画像情報１１０に重ねて、掲載情報「ＸＸ」の領域を囲む矩形枠２０３と、利用者７０になぞられた領域２０４に対応する軌跡２０５とが表示される。これにより、利用者７０は、ディスプレイ装置３０の表示画面を見ながら、タッチパッド１２のタッチ面上の掲載面内をなぞっても、自分が掲載面内のどこをなぞっているのかが分かる。また利用者７０は、タッチパッド１２のタッチ面上から掲載物５０を外し、タッチパッド１２のタッチ面上を直接になぞっても、ディスプレイ装置３０の表示画面を見ながら、自分が掲載面内のどこを指定しているのかを認識できる。この場合、利用者７０はタッチ面上を直接になぞることができるので、タッチパッド１２の感度が良くなるという効果も得られる。また、利用者７０は掲載物５０の配置がずれることを気にしなくてもよいという効果も得られる。

（ステップＳ８）ＣＰＵ１３は、タッチパッド１２から入力された位置情報で示される位置に対して、データベース１００内に情報があるかを確認する。この情報の確認では、ＣＰＵ１３は、レイアウト情報１２０に基づいて、タッチパッド１２から入力された位置情報が示す位置に対応する画像情報１１０の掲載面内の位置に対して、掲載情報の登録情報があるかを調べる。

（ステップＳ９）ステップＳ８の確認の結果、掲載情報の登録情報がある場合にはステップＳ１０に進み、掲載情報の登録情報がない場合にはステップＳ１１に進む。

（ステップＳ１０）ＣＰＵ１３は、スピーカ１４または振動部１５を用いて報知を行う。スピーカ１４および振動部１５の両方を用いてもよく、または、スピーカ１４もしくは振動部１５のいずれか一方のみを用いてもよい。ＣＰＵ１３は、スピーカ１４に対しては所定の音声信号を出力する。ＣＰＵ１３は振動部１５に対しては所定の制御信号を出力する。これにより、利用者７０は、音声または振動によって、自分が指でなぞった場所の掲載情報が登録されていることを認識できる。

（ステップＳ１１）ＣＰＵ１３は、タッチパッド１２からの位置情報の入力が終了であるかを判断する。この位置情報の入力終了の判断では、ＣＰＵ１３は、一定期間連続してタッチパッド１２からの位置情報の入力が無い場合に、タッチパッド１２からの位置情報の入力が終了であると判断する。該入力が終了である場合にはステップＳ１２に進み、該入力が終了でない場合にはステップＳ７に戻る。

（ステップＳ１２）ＣＰＵ１３は、今回のタッチパッド１２からの位置情報の入力段階において上記ステップＳ８の結果が、掲載情報の登録情報ありである場合にはステップＳ１３に進む。一方、掲載情報の登録情報なしである場合には、ＣＰＵ１３は、ディスプレイ装置３０の表示画面に表示している入力位置の軌跡を消し、ステップＳ６に戻る。また、ＣＰＵ１３は、掲載情報の登録情報なしである場合には、該当する登録情報が無い旨をディスプレイ装置３０の表示画面に表示させてもよい。

（ステップＳ１３）ＣＰＵ１３は、上記ステップＳ８で掲載情報の登録情報ありの掲載情報に対応する関連情報または該関連情報に基づいて取得された情報を、ディスプレイ装置３０の表示画面に表示させる。この情報の表示処理を以下に説明する。

ＣＰＵ１３は、タッチパッド１２から入力された位置情報が示す位置に対応する画像情報１１０の掲載面内の位置に対応する関連情報があるかを調べる。具体的には、ＣＰＵ１３は、図４に示されるデータベース１００内の位置情報と関連情報の組の中に、該当する位置情報を有する組があるかを調べる。次いで、ＣＰＵ１３は、発見した組の関連情報(例えば、ＵＲＬ）をディスプレイ装置３０の表示画面に表示させる。又は、ＣＰＵ１３は、発見した組のＵＲＬにアクセスして取得した情報をディスプレイ装置３０の表示画面に表示させる。

又は、ＣＰＵ１３は、タッチパッド１２から入力された位置情報が示す位置に対応する画像情報１１０の掲載面の掲載情報に対応付けられている関連情報（図５の画像関連情報１５０または製品・価格情報１６０）があるかを調べる。次いで、ＣＰＵ１３は、発見した関連情報をディスプレイ装置３０の表示画面に表示させる。

又は、ＣＰＵ１３は、タッチパッド１２から入力された位置情報が示す位置に対応する画像情報１１０の掲載面の掲載情報が文字である場合には、辞書データ１４０によって、掲載情報の文字から、関連情報を検索するための検索キーワードを取得できるかを調べる。次いで、ＣＰＵ１３は、取得した検索キーワードを用いて、所定のサーバ４０（検索サーバ）から検索結果の情報を取得し、該取得した情報をディスプレイ装置３０の表示画面に表示させる。

例えば、図１１において、掲載情報「ＸＸ」の関連情報２０６は、ディスプレイ装置３０の表示画面上で、画像情報１１０に重ねて、又は、画像情報１１０の周辺に、表示される。このとき、掲載情報「ＸＸ」に対応することが利用者７０に分かりやすいように、関連情報２０６を掲載情報「ＸＸ」に関連付ける表示を行うことが好ましい。

なお、利用者７０が指定した領域２０４に対応する軌跡２０５をディスプレイ装置３０の表示画面に表示する際に、画像情報１１０のうち軌跡２０５を表示する周辺部分を拡大表示するようにしてもよい。この拡大表示は、元の画像情報１１０に重ねて表示してもよく、又は、元の画像情報１１０の表示に代えて拡大表示してもよい。

図１２は本発明に係る一実施例を説明するための表示画面例である。本実施例では、掲載物５０として広告チラシ（以下、広告チラシ５０と称する）を用いている。利用者７０は、広告チラシ５０をタッチパッド１２のタッチ面上に置く。タッチ面上には、広告チラシ５０の全面を置いてもよく、又は、広告チラシ５０の一部の面を置いてもよい。したがって、撮像部１１は、広告チラシ５０の掲載面の全面を撮像したり、又は、広告チラシ５０の掲載面の一部の面を撮像したりする。

データベース１００には、広告チラシ５０の掲載面の画像情報１１０を格納する。また、データベース１００には、広告チラシ５０に関するレイアウト情報１２０、文字情報１３０、辞書データ１４０、画像関連情報１５０および製品・価格情報１６０を格納する。

情報表示処理装置１０は、撮像部１１により、広告チラシ５０の掲載面の全面または一部の面を撮像し、撮像情報を取得する。次いで、情報表示処理装置１０は、取得された撮像情報を広告チラシ５０の掲載面の画像情報１１０と照合し、両者の一致を判定すると、該画像情報１１０をディスプレイ装置３０の表示画面に表示させる。このとき、広告チラシ５０の掲載面のうち、撮像情報に対応する部分の画像情報１１０のみを表示させるようにしてもよい。図１２の例では、撮像情報に対応する部分３０１の画像情報１１０のみが表示されている。

なお、広告チラシ５０の掲載面の画像情報１１０がデータベース１００内に無い場合には、所定のサーバ４０に対して、撮像情報を送信し、広告チラシ５０の掲載面の画像情報１１０を要求するようにしてもよい。また、データベース１００および所定のサーバ４０によって、広告チラシ５０の掲載面の画像情報１１０を取得できない場合には、その旨を利用者７０に報知するようにしてもよい。

次いで、情報表示処理装置１０は、タッチパッド１２からの位置情報の入力を受け付ける状態にする。利用者７０は、タッチパッド１２のタッチ面上に置かれた広告チラシ５０の掲載面上の所望の領域を指等（例えば、指示棒のような物でもよい）でなぞる。これにより、情報表示処理装置１０は、タッチパッド１２からの位置情報の入力に基づいて、利用者７０がなぞった軌跡をディスプレイ装置３０の表示画面に表示させる。図１２の例では、商品名「ＸＸＸ」の掲載情報の領域をなぞった軌跡３１０がディスプレイ装置３０の表示画面に表示されている。このとき情報表示処理装置１０は、利用者７０がなぞった軌跡の領域に対して、掲載情報の登録情報がデータベース１００内にある場合には、音声または振動を発生させる。

次いで、情報表示処理装置１０は、利用者７０がなぞった軌跡の領域に対して、データベース１００内に関連情報があるかを調べる。この結果、関連情報がある場合には、情報表示処理装置１０は、発見された関連情報または該関連情報に基づいて取得された情報をディスプレイ装置３０の表示画面に表示させる。

図１２の例では、商品名「ＸＸＸ」の掲載情報の関連情報である製品・価格情報１６０が表示画面の領域３０２、３０３に表示されている。表示画面の領域３０２には商品名「ＸＸＸ」の仕様が表示され、表示画面の領域３０３には類似商品の情報が表示されている。

また、図１２の例では、商品名「ＸＸＸ」の掲載情報の関連情報であるＵＲＬによって取得された情報が表示画面の領域３０４に表示されている。表示画面の領域３０４には、商品名「ＸＸＸ」の掲載情報の関連情報であるＵＲＬによって取得された商品名「ＸＸＸ」に関する情報が表示されている。図１２の例では、商品の最新の価格動向をインターネット上の価格比較サイトやＥコマースのサイトから取得し、取得された最安値の情報などを表示させている。また、最安値を提示している店舗のホームページ情報を確認するためのボタン３０５や、その商品を購入する手続きに進むためのボタン３０６を表示させている。

利用者７０がボタン３０５、３０６を操作するための操作部は、別途設ける。例えば、マウス等のポインティングデバイスを情報表示処理装置１０に設ける。又は、図１３に示されるように、タッチパッド１２のタッチ面４００を、利用者７０が掲載情報の指定に使用する領域４０１と、ボタン３０５、３０６などを操作するための操作部としての領域４０２とに分けるようにしてもよい。利用者７０による操作部の操作を示すポインタは、ディスプレイ装置３０の表示画面に表示させる。これにより、利用者７０は、ボタン３０５、３０６を操作して、最安値を提示している店舗のホームページ情報を確認したり、商品を最安値で購入したりできる。

なお、図１２の例では、商品の仕様と類似製品の情報が示されているが、その他の情報、例えば商品の他の色や他のアングルで撮影された写真などを提示するように、データベース１００内に該当する関連情報を格納しておいてもよい。

上述したように本発明によれば、様々な掲載情報（文字、図形、写真など）が掲載された掲載物（例えば、広告や宣伝のためのチラシや、雑誌など）を対象にして、それらの掲載情報に対応付けされている情報を、利用者が所望の掲載情報をなぞったり触れたり等の簡易な操作により表示させることができる。

以上、本発明の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。

例えば、スピーカ１４は、ディスプレイ装置３０に備えてもよい。また、ディスプレイ装置３０として、メガネ型ディスプレイを用いてもよい。この場合、撮像部１１およびスピーカ１４をメガネ型ディスプレイに実装するようにしてもよい。

また、報知部として音声または振動を発生させるように構成したが、発光により報知を行うようにしてもよい。

また、掲載物５０に使用される媒体は、利用者７０が掲載物５０を介してタッチ面を間接に触る場合には、利用者７０が掲載物５０の上からタッチ面を間接に接触できる（タッチパッド１２が間接の接触を検出できる）ものであればよい。例えば、紙、布、ビニールシート等が掲載物５０に使用できる。

なお、利用者７０が所望の掲載情報を指定する際にタッチパッド１２のタッチ面を直接に触る場合には、掲載物５０に用いられる媒体は、利用者７０が掲載物５０を介してタッチ面を間接に触ることを考慮しなくてもよい。

また、上述した情報表示処理装置１０を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行するようにしてもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものであってもよい。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、フラッシュメモリ等の書き込み可能な不揮発性メモリ、ＤＶＤ（Digital Versatile Disk）等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。

さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（例えばＤＲＡＭ（Dynamic Random Access Memory））のように、一定時間プログラムを保持しているものも含むものとする。
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。
また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。

１０…情報表示処理装置、１１…撮像部、１２…タッチパッド（位置入力部）、１３…ＣＰＵ（情報処理部）、１４…スピーカ（報知部）、１５…振動部（報知部）、１６…メモリ、１７…ストレージ、１８…通信インタフェース、３０…ディスプレイ装置

Claims (6)

1. 所定の大きさの面を有し、前記面に対する直接または間接の接触によって該接触された前記面内の位置を示す位置情報を入力する位置入力部と、
   前記面を含む範囲を撮像する撮像部と、
   所定の掲載物の掲載面の画像情報と、前記掲載面に掲載されている掲載情報の前記掲載面内の掲載情報位置情報と、前記掲載情報に対応する関連情報とを記憶する記憶部と、
   情報を表示する表示画面を有する表示部と、
   前記撮像部によって撮像された撮像情報および前記画像情報に基づいて前記面上に置かれた前記掲載物の掲載面を特定し、前記位置入力部によって入力された位置情報および前記掲載情報位置情報に基づいて前記特定された掲載面の前記掲載情報を特定し、前記特定された掲載情報に対応する前記関連情報または該関連情報に基づいて取得された情報を前記表示画面に表示させる情報処理部と、を備え、
   前記情報処理部は、前記特定された掲載面の前記画像情報を前記表示画面に表示させる情報表示システムであり、
   前記撮像部は、前記所定の掲載物の掲載面の一部の面を撮像し、
   前記情報処理部は、前記特定された掲載面のうち前記撮像部によって撮像された一部の面の撮像情報に対応する部分の前記画像情報のみを前記表示画面に表示させる、
   情報表示システム。
2. 前記情報処理部は、前記表示画面に表示させる画像情報に対応する掲載面に掲載されている掲載情報のうち、掲載情報位置情報と関連情報が前記記憶部に存在する掲載情報の領域を示す情報を前記表示画面に表示させることを特徴とする請求項１に記載の情報表示システム。
3. 前記情報処理部は、前記位置入力部によって入力された位置情報で示される位置の軌跡を前記表示画面に表示された掲載面の画像情報に重ねて表示させることを特徴とする請求項１又は２に記載の情報表示システム。
4. 前記位置入力部によって入力された位置情報で示される位置に対応する掲載情報の掲載情報位置情報と関連情報が前記記憶部に記憶されている場合に報知を行う報知部を備えたことを特徴とする請求項１から３のいずれか１項に記載の情報表示システム。
5. 記憶部が、所定の掲載物の掲載面の画像情報と、前記掲載面に掲載されている掲載情報の前記掲載面内の掲載情報位置情報と、前記掲載情報に対応する関連情報とを記憶するステップと、
   撮像部が、所定の大きさの面を有し且つ前記面に対する直接または間接の接触によって該接触された前記面内の位置を示す位置情報を入力する位置入力部の前記面を含む範囲を撮像するステップと、
   前記位置入力部が、前記位置情報を入力するステップと、
   情報処理部が、前記撮像部によって撮像された撮像情報および前記画像情報に基づいて前記面上に置かれた前記掲載物の掲載面を特定し、前記位置入力部によって入力された位置情報および前記掲載情報位置情報に基づいて前記特定された掲載面の前記掲載情報を特定し、前記特定された掲載情報に対応する前記関連情報または該関連情報に基づいて取得された情報を表示部の表示画面に表示させるステップと、
   前記情報処理部が、前記特定された掲載面の画像情報を前記表示画面に表示させるステップと、を含み、
   前記撮像部は、前記所定の掲載物の掲載面の一部の面を撮像し、
   前記情報処理部は、前記特定された掲載面のうち前記撮像部によって撮像された一部の面の撮像情報に対応する部分の前記画像情報のみを前記表示画面に表示させる、
   情報表示方法。
6. 所定の大きさの面を有し、前記面に対する直接または間接の接触によって該接触された前記面内の位置を示す位置情報を入力する位置入力部と、前記面を含む範囲を撮像する撮像部と、所定の掲載物の掲載面の画像情報と、前記掲載面に掲載されている掲載情報の前記掲載面内の掲載情報位置情報と、前記掲載情報に対応する関連情報とを記憶する記憶部と、を備える情報表示処理装置における情報表示処理を行うためのコンピュータプログラムであって、
   前記撮像部によって撮像された撮像情報および前記画像情報に基づいて前記面上に置かれた前記掲載物の掲載面を特定し、前記位置入力部によって入力された位置情報および前記掲載情報位置情報に基づいて前記特定された掲載面の前記掲載情報を特定し、前記特定された掲載情報に対応する前記関連情報または該関連情報に基づいて取得された情報を表示部の表示画面に表示させる第１ステップと、
   前記特定された掲載面の画像情報を前記表示画面に表示させる第２ステップと、をコンピュータに実行させるためのコンピュータプログラムであり、
   前記撮像部は、前記所定の掲載物の掲載面の一部の面を撮像し、
   前記第２ステップは、前記特定された掲載面のうち前記撮像部によって撮像された一部の面の撮像情報に対応する部分の前記画像情報のみを前記表示画面に表示させる、
   コンピュータプログラム。

Images