JP2007057958A - 表示制御装置及び表示制御方法 - Google Patents

Abstract

【課題】表示装置に複数の画像を同時表示させる際の表示性及び操作性を向上させることのできる表示制御装置を提供する。
【解決手段】表示装置４の画面ＤＰに表示する複数の画像Ｐ１を、該各画像Ｐ１内に含まれるキー項目Ｋ１が少なくとも一部分にて表示されるように部分的に重ね合わせて山積み表示する。
【選択図】 図７

Description

本発明は、表示制御装置及び表示制御方法にかかり、詳しくは、表示装置に複数の画像を同時表示する際に使用して好適な表示制御技術に関する。

近年、デジタルカメラの普及により、デジタル画像（以下、単に画像という）の撮影を手軽に楽しめるようになってきている。デジタルカメラで撮影した画像はコンピュータ（例えばパソコン）内部又は外部の記憶装置（可搬型記録メディアを含む）に保存したり、同コンピュータに接続された表示装置に表示して閲覧したりすることができる。

従来、コンピュータにより取り込んだ画像を表示装置に表示して閲覧する場合、該表示装置には、フォルダ内に保存されている画像がサムネイル（縮小画像）形式で縦横マトリクス状に表示されるのが一般的となっている。

しかしながら、上記方式では、記憶装置の画像保存数（ファイル数）が増え、フォルダの階層（ディレクトリ構造）が複雑化すると、目的の画像が格納されたフォルダを探し出すまでに時間がかかるという問題がある。また、１つのフォルダに多数の画像が格納されていると、上下左右にスクロール操作しながら膨大かつ判読し難いサムネイルを確認していかなければならないため、画像を探し出す手間が一段と大きくなる。加えて、このようにフォルダを探し出す操作、スクロール操作といった一連の操作は高齢者やコンピュータの操作に不慣れないわゆる情報弱者には複雑かつ分かり難い作業であり、デジタル画像の更なる利用拡大を図る上での阻害要因の一つともなっていた。

本発明は、こうした従来の実情に鑑みてなされたものであって、その目的は、表示装置に複数の画像を同時表示させる際の表示性及び操作性を向上させることのできる表示制御装置及び表示制御方法を提供することにある。

上記目的を達成するため、本発明の第１の態様は、操作装置と表示装置とに接続され、該表示装置に複数の画像を同時に表示する表示制御装置であって、外部装置から画像と該画像内容を規定したタグ情報とを取り込む取込手段と、前記画像及び前記タグ情報を記憶する記憶手段と、前記画像の判別要素となり得るキー項目を前記タグ情報から設定し、画像認識手段による画像認識結果に基づいて前記画像内に含まれる前記キー項目の位置を設定するキー管理手段と、前記表示装置に表示する複数の画像を、該各画像内に含まれる前記キー項目が少なくとも一部分にて表示されるように部分的に重ね合わせて山積み表示する表示手段と、を備えることを要旨とする。

この構成によれば、複数の画像はタグ情報から設定されたキー項目の少なくとも一部分が表示されるように部分的に重ね合わせられて山積み表示される。これにより、各画像の内容を直感的に判断可能とさせつつ、表示装置の一画面に表示可能な画像枚数を大幅に増加させることができる。よって、スクロール操作を極力不要とさせることができる。

上記構成の表示制御装置においては、前記タグ情報は、前記外部装置により生成される情報である、といった態様を採用することができる。この構成によれば、外部装置内で生成されたタグ情報を取り込むことで、ユーザによるタグ情報の設定作業を軽減させることができる。

上記構成の表示制御装置においては、前記記憶手段には、前記画像認識手段により認識された前記キー項目が類似性情報として記録され、前記取込手段は、前記外部装置から取り込んだ前記画像内に、前記類似性情報として記録されている前記キー項目が含まれている場合には、それを前記タグ情報として設定する機能を備える、といった態様を採用することができる。この構成によれば、画像認識手段により既に認識済のキー項目をタグ情報として設定することで、ユーザによるタグ情報の設定作業を軽減させることができる。

上記構成の表示制御装置においては、前記取込手段は、前記操作装置を通じてユーザにより入力された前記タグ情報を設定する機能を備える、といった態様を採用することができる。この構成によれば、ユーザは任意のタグ情報を設定することができる。

上記構成の表示制御装置においては、前記表示手段は、前記山積み表示する複数の画像の画面奥行き方向の配置順序を、前記タグ情報に含まれる時間情報、又は、その他数値の大小により表される情報を用いて設定する、といった態様を採用することができる。この構成によれば、時間情報又はそれに類するその他の数値情報を用いて奥行き方向の配置順序を設定することで、画像の閲覧が行いやすくなる。

上記構成の表示制御装置においては、前記表示手段は、前記山積み表示する複数の画像の画面垂直水平方向の配置順序を、前記タグ情報に含まれる緯度経度情報、又は、その他数値の大小により表される情報を２以上用いて設定する、といった態様を採用することができる。この構成によれば、緯度経度情報又はそれに類するその他の数値情報（２種類）を用いて垂直水平方向の配置順序を設定することで、画像の閲覧が行いやすくなる。

上記構成の表示制御装置においては、前記記憶手段には、前記操作装置を通じてユーザにより入力された表示・閲覧に関する操作情報が該ユーザの識別情報と関連付けて記録され、前記表示手段は、前記ユーザの操作情報に基づいて該ユーザの過去の表示・閲覧に関する傾向を分析し、該分析結果に基づいて前記山積み表示する複数の画像の配置順序を補助的に設定する機能を備える、といった態様を採用することができる。この構成によれば、ユーザの嗜好にあった画像配置を行うことができる。

上記構成の表示制御装置においては、前記表示手段は、前記山積み表示する複数の画像を前記キー項目毎にそれぞれ区分して表示する、といった態様を採用することができる。この構成によれば、山積み表示する複数の画像をキー項目（つまりは画像の内容）毎に区分することで、画像の閲覧がより行いやすくなる。

上記構成の表示制御装置においては、前記表示手段は、前記山積み表示した複数の画像の配置順序を、ユーザにより前記操作装置を通じて入力された情報に基づいて変更する機能を備える、といった態様を採用することができる。この構成によれば、ユーザは、山積み表示された画像の配置順序を操作装置を使用して任意に変更することができる。

上記構成の表示制御装置においては、前記キー管理手段は、前記山積み表示する複数の画像を、前記タグ情報に基づいて前記記憶手段より検索する機能を備える、といった態様を採用することができる。この構成によれば、ユーザは、タグ情報を入力することで目的の画像を検索することができる。

上記構成の表示制御装置においては、前記キー管理手段は、前記ユーザの過去の表示・閲覧に関する傾向を分析した結果に基づいて、前記山積み表示する複数の画像を前記記憶手段より検索する機能を備える、といった態様を採用することができる。この構成によれば、ユーザの過去の表示・閲覧に関する傾向から画像を検索することで、ユーザが元来意図していなかった画像に偶発的に到達することの楽しさや驚き、喜びを提供することができる。

上記構成の表示制御装置においては、前記キー管理手段は、互いに異なる前記タグ情報を持つ複数の画像を前記ユーザの操作情報に基づいて関連付け、該関連付けした一の画像を前記記憶手段より抽出する際にそれに関連付けられている他の画像を併せて抽出する機能を備える、といった態様を採用することができる。この構成によれば、タグ情報からは何ら関連性を見出せない画像同士であっても、ユーザの操作情報に基づいて画像間の関連性を見出すことで、関連付けした画像同士を同時に抽出して表示させることができる。

本発明の第２の態様は、表示装置に複数の画像を同時に表示する表示制御方法であって、画像と該画像内容を規定したタグ情報とを外部から取り込むステップと、前記画像の判別要素となり得るキー項目を前記タグ情報から設定し、前記画像内より前記キー項目を検出して該キー項目の位置を設定するステップと、前記表示装置に表示する複数の画像を、該各画像内に含まれる前記キー項目が少なくとも一部分にて表示されるように部分的に重ね合わせて山積み表示するステップと、を備えることを要旨とする。この方法によれば、上記第１の態様と同様の効果を奏することができる。

以下、本発明を具体化した一実施の形態を図１〜図７に従って説明する。
図１は、本実施の形態に係る表示制御システム１を示す全体構成図である。
表示制御システム１は表示制御装置２を備えている。表示制御装置２には操作装置３と表示装置４とが接続されているとともに、外部装置としてのデジタルカメラ５が接続されている。本実施の形態においては、表示制御装置２はパーソナルコンピュータにより構成され、操作装置３はキーボード及びマウスにより構成され、表示装置４は液晶モニタにより構成されている。なお、外部装置はデジタルカメラ５に限らず、その他、例えばカメラ内蔵型携帯電話機や、表示制御装置２にネットワーク接続された装置であってもよい。

表示制御装置２は、デジタルカメラ５から取得した複数の画像を表示装置４上に表示（山積み表示）するための表示制御ソフト６と、この表示制御ソフト６と連携して動作し、画像中に含まれる人物，建造物等（いわゆる被写体）の画像を各々の特徴量に基づいて検出するための画像認識ソフト７とを備えている。

なお、本実施の形態において「山積み表示」とは、表示対象とする複数の画像を各画像中の「キー項目」が少なくとも一部分にて必ず表示されるように部分的に重ね合わせて表示する態様をいう（図７参照）。ここで、「キー項目」とは、画像の判別要素となり得る画像部分を意味するもので、画像中に含まれる人物や建造物等がこれに該当する。キー項目は、後述するタグ情報Ｔ１（図２参照）の中から設定される。

表示制御ソフト６は、取込みソフト９と管理ソフト１０と表示ソフト１１とからなり、概略的には、取込みソフト９で取得した画像を管理ソフト１０を通じて表示ソフト１１に受け渡し、該表示ソフト１１から上記山積み表示用の表示データを表示装置４に出力する仕組みとなっている。なお、これら各ソフト９〜１１の詳細については後述する。本実施の形態においては、取込みソフト９が取込手段に相当し、管理ソフト１０がキー管理手段に相当し、表示ソフト１１が表示手段に相当する。

また、表示制御装置２はデータベース８を備えている。このデータベース８には、画像情報ファイルＦ１と、類似性情報ファイルＦ２と、操作情報ファイルＦ３と、表示データファイルＦ４とが格納されている。以下、各ファイルＦ１〜Ｆ４について説明する。

［画像情報ファイルＦ１］
図２は、画像情報ファイルＦ１を示す説明図である。
画像情報ファイルＦ１には、画像Ｐ１と該画像Ｐ１の内容を規定したタグ情報Ｔ１とが記録されている。タグ情報Ｔ１は、一次タグ情報Ｔ１１（図２（ａ））と、二次タグ情報Ｔ１２（図２（ｂ））と、三次タグ情報Ｔ１３（図２（ｃ））との３種類の情報に類別される。

一次タグ情報Ｔ１１は、デジタルカメラ５による画像Ｐ１の撮影時点で同カメラ５内で自動生成される情報である。これには例えば、撮影日時、撮影場所（緯度・経度情報）、撮影方位、撮影距離、撮影仰角、天候気温、撮影情報などが含まれる。この一次タグ情報Ｔ１１は、取込みソフト９による画像Ｐ１の取り込み時に同時に取り込まれる。

二次タグ情報Ｔ１２は、画像認識ソフト７により画像Ｐ１中に含まれるキー項目画像を認識した結果に基づいて、取込みソフト９により追加設定される情報である。例えば、図２（ｂ）では、画像認識ソフト７により認識した画像Ｐ１中の被写体Ａ，Ｂに関する情報が二次タグ情報Ｔ１２として設定されている。

三次タグ情報Ｔ１３は、ユーザによる操作装置３からの入力（例えばキーボード入力）に基づいて、取込みソフト９により追加設定される情報である。例えば、図２（ｃ）では、画像認識ソフト７により認識されなかった画像Ｐ１中の被写体Ｃ，Ｄに関する情報が、三次タグ情報Ｔ１３として設定されている。なお、三次タグ情報Ｔ１３は、これ以外にもその他任意の情報を設定することができる。

［類似性情報ファイルＦ２］
類似性情報ファイルＦ２には、画像認識ソフト７により認識可能なキー項目画像（人物，建造物などの被写体画像）がモデル画像として登録されている。画像認識ソフト７は、類似性情報ファイルＦ２に登録されているモデル画像と認識対象の画像とを比較し、その類似性を判定することで、画像Ｐ１中のキー項目を検出・認識する。

［操作情報ファイルＦ３］
操作情報ファイルＦ３には、画像の表示・閲覧に関するユーザの操作情報が該ユーザの識別情報（例えばユーザ個別の識別番号）と関連付けて記録されている。操作情報として記録する情報の種類は任意である。例えば、この操作情報ファイルＦ３には、表示実行時における日付、時刻、位置（閲覧を行う場所）、気温（閲覧開始時の気温）や、閲覧する画像の種類、閲覧回数、閲覧頻度、閲覧時間等の情報を記録することができる。この操作情報は、ユーザの過去の表示・閲覧に関する操作傾向を分析するために用いられる。

［表示データファイルＦ４］
表示データファイルＦ４には、過去に表示装置４に表示した表示データが記録されている。この表示データファイルＦ４に記録されている表示データを読み込むことで、過去に閲覧した山積み画像の表示データを表示することができる。

図３は、表示制御装置２のハードウェア構成を示すブロック図である。
表示制御装置２は、ＣＰＵ２１、メモリ２２、記憶装置２３、入力インターフェース（Ｉ／Ｆ）２４、出力Ｉ／Ｆ２５及びドライブ装置２６を備え、それらはバス２７を介して相互に接続されている。

ＣＰＵ２１は、記憶装置２３に格納されているプログラムやデータをメモリ２２へ転送し、同メモリ２２を利用してプログラムを実行する。メモリ２２はＲＯＭ、ＲＡＭ等により構成され、これには通常、キャッシュメモリ、システムメモリ、ディスプレイメモリ等が含まれる。記憶装置２３は、磁気ディスク装置、光ディスク装置、光磁気ディスク装置等により構成される。なお、上述した各種のプログラム（取込みソフト９、管理ソフト１０、表示ソフト１１、画像認識ソフト７）及びそれらプログラムの実行に必要なデータはこの記憶装置２３に格納されている。この記憶装置２３はデータベース８としても利用されている。

入力Ｉ／Ｆ２４には操作装置３が接続され、操作装置３からの操作入力に対応した操作信号をＣＰＵ２１に送出する。出力Ｉ／Ｆ２５には表示装置４が接続され、ＣＰＵ２１による制御の下、山積み表示用の表示データを表示装置４に出力する。

ＣＰＵ２１が実行するプログラムやデータは、記録媒体２８にて提供される。ドライブ装置２６は、記録媒体２８を駆動してその記録内容にアクセスし、記録媒体２８からプログラムやデータを読み出して記憶装置２３に格納する。記録媒体２８には、光ディスクや光磁気ディスク等の媒体の他、図示しない通信媒体を介してアップロード又はダウンロードされたプログラムを記録した媒体、ディスク装置等も含まれる。

次に、取込みソフト９、管理ソフト１０、表示ソフト１１における処理を個別具体的に説明する。
［取込みソフト９］
取込みソフト９は、デジタルカメラ５から画像Ｐ１と一次タグ情報Ｔ１１とを取り込み、二次タグ情報Ｔ１２と三次タグ情報Ｔ１３とを適宜追加設定して画像情報ファイルＦ１を生成する処理部である。

図４は、取込みソフト９における処理を示すフローチャートである。
ＣＰＵ２１は、まず、デジタルカメラ５が表示制御装置２に接続されたか否かを判定する（ステップ１００）。ステップ１００で肯定判定すると、ＣＰＵ２１はデジタルカメラ５から画像Ｐ１と一次タグ情報Ｔ１１との取り込みを行う（ステップ１０１）。

次にＣＰＵ２１は、画像認識ソフト７により類似性情報ファイルＦ２に基づいて画像Ｐ１に含まれているキー項目画像を検出し（ステップ１０２）、同類似性情報ファイルＦ２に登録されているモデル画像と類似する画像（人物や建造物等）が画像Ｐ１内に存在するか否か（類似性情報があるか否か）を判定する（ステップ１０３）。ここで肯定判定した場合は、ＣＰＵ２１は画像Ｐ１中より検出したキー項目画像に関する情報を二次タグ情報Ｔ１２として追加設定する（ステップ１０４）。

次にＣＰＵ２１は、ユーザによる操作装置３からのタグ情報の新規入力があるか否かを判定する（ステップ１０５）。ここで肯定判定（入力受付）した場合は、ＣＰＵ２１は同操作装置３を通じて入力された情報を三次タグ情報Ｔ１３として追加設定する（ステップ１０６）。

こうしてＣＰＵ２１は、一次タグ情報Ｔ１１に二次タグ情報Ｔ１２と三次タグ情報Ｔ１３とを適宜追加設定することでタグ情報Ｔ１を生成し、該タグ情報Ｔ１と画像Ｐ１とからなる画像情報ファイルＦ１を作成する（ステップ１０７）。この画像情報ファイルＦ１は管理ソフト１０に受け渡される、若しくは、ユーザの指示に基づいてデータベース８内に保存される。

［管理ソフト１０］
管理ソフト１０は、取込みソフト９により作成された画像情報ファイルＦ１を取得して、山積み表示用の画像ファイル（以下、表示用画像ファイルという）を生成する処理部である。

図５は、管理ソフト１０における処理を示すフローチャートである。
ＣＰＵ２１は、取込みソフト９から画像情報ファイルＦ１を取得すると（ステップ２００）、以下のいずれかの設定モード（ユーザによる設定）に従って、まずキー項目の設定を行う（ステップ２０１）。

第１設定モード：予め設定されたデフォルト値をキー項目として設定する。
第２設定モード：ユーザにより選択されたキー項目を設定する。
第３設定モード：操作情報ファイルＦ３に記録されているユーザの操作情報に基づいてキー項目の設定傾向を分析し、該分析結果からキー項目を自動設定する。

次にＣＰＵ２１は、画像認識ソフト７により類似性情報ファイルＦ２に基づいて画像Ｐ１中からキー項目画像を検出し（ステップ２０２）、先のステップ２０１で設定したキー項目が画像Ｐ１中に存在するか否かを判定する（ステップ２０３）。ここで肯定判定（キー項目を検出）した場合、続いてＣＰＵ２１は、画像Ｐ１中のキー項目の位置（座標位置）を上記検出結果に基づいて設定する（ステップ２０４）。一方、ステップ２０３で否定判定した場合は、ＣＰＵ２１は、画像Ｐ１中におけるキー項目無しとして処理する（ステップ２０５）。このステップ２０４又はステップ２０５を通じて作成されるファイルが、表示用画像ファイルとして作成される。

次にＣＰＵ２１は、全ての画像Ｐ１（画像情報ファイルＦ１）についてキー項目の位置設定を行ったか否かを判定する（ステップ２０６）。ここで肯定判定した場合は、ＣＰＵ２１は処理を終了し、ステップ２０４又はステップ２０５で作成した表示用画像ファイルを表示ソフト１１に出力する。一方、ステップ２０６で否定判定した場合は、ＣＰＵ２１はステップ２０２に戻り、全ての画像Ｐ１についてキー項目の位置設定を完了するまで、ステップ２０２〜２０５の処理を繰り返し行う。

［表示ソフト１１］
表示ソフト１１は、上記管理ソフト１０により作成された表示用画像ファイルを取得して、山積み表示用の表示データを作成する処理部である。

図６は、表示ソフト１１における処理を示すフローチャートである。
ＣＰＵ２１は、管理ソフト１０から表示用画像ファイルを取得すると（ステップ３００）、まず、山積み表示する複数の画像Ｐ１について、それらの表示装置４上での配置順序を設定する（ステップ３０１）。

具体的には、まず、各画像Ｐ１の画面奥行き方向の配置順序をタグ情報Ｔ１の中の時間情報（例えば一次タグ情報Ｔ１１として取得する撮影日時：図２（ａ）参照）に基づいて時系列順に設定（例えば撮影日時の新しいものほど画面手前に配置）する（ステップ３０１ａ）。なお、時間情報は撮影日時のみに限定されない。例えば、デジタルカメラ５から画像を取り込んだ日時であってもよい。また、必ずしも時間情報のみに限られない。その他数値の大小により表される情報（例えば被写体までの撮影距離、人物や建物の大きさ、人物の年齢、出展日情報など）を用いてもよい。

続いて、各画像Ｐ１の画面垂直水平方向の配置順序をタグ情報Ｔ１の中の緯度経度情報（例えば一次タグ情報Ｔ１１として取得する撮影場所：図２（ａ）参照）に基づいて設定する（ステップ３０１ｂ）。詳しくは、画面垂直方向の配置順序を緯度情報に基づいて決定し、画面水平方向の配置順序を経度情報に基づいて設定する。なお、必ずしも緯度経度情報に限られない。その他数値の大小により表される情報を２種類以上用いてその代用としてもよい（例えば、画面垂直方向の配置順序を撮影距離に基づいて決定し、画面水平方向の配置順序を撮影日時に基づいて決定する等）。

次にＣＰＵ２１は、操作情報ファイルＦ３からユーザの操作情報を検索し（ステップ３０２）、該操作情報からユーザの過去の表示・閲覧に関する傾向を分析して、配置順序に関する補助的な設定を行う（ステップ３０３）。具体的には、閲覧回数や閲覧頻度や閲覧時間などの操作情報をもとにユーザの興味のある画像を把握し、その画像が画面奥に配置されている場合にはそれをより画面手前に配置するようにする。

次にＣＰＵ２１は、上記設定した配置順序と、上記管理ソフト１０で設定された各画像Ｐ１のキー項目の位置とに基づいて、各画像Ｐ１をそれぞれキー項目の全部又は一部分が表示されるように部分的に重ね合わせて表示データを生成し、それを表示装置４に出力して山積み表示を実行する（ステップ３０４）。

次にＣＰＵ２１は、各画像Ｐ１の配置順序を変更する操作が操作装置３を通じてユーザによりなされたか否かを判定する（ステップ３０５）。ここで肯定判定した場合は、ＣＰＵ２１はそのユーザからの操作入力に応じた配置変更（配置順序の変更）を行う（ステップ３０６）。さらには、その際の操作情報を操作情報ファイルＦ３に記録する（ステップ３０７）。なお、配置順序を変更する方法としては、例えば、マウスによるドラッグ操作により配置順序を直接的に変更する方法の他、時間情報を変更するための「時計」を意味するアイコンや、緯度経度情報を変更するための「コンパス」を意味するアイコンを表示装置４上に表示し、それらのアイコンを用いて時間情報や緯度経度情報をそれぞれ変更することにより配置順序を間接的に変更する方法でもよい。

その後ＣＰＵ２１は、表示画像（表示データ）を変更する操作、若しくは、表示（閲覧）を終了する操作がユーザによりなされたか否かを判定する（ステップ３０８）。ここで肯定判定した場合は、続いてＣＰＵ２１は、表示データを保存するか否かを判定（ユーザに問い合わせ）する（ステップ３０９）。ここで、保存する旨の操作入力を受け取ると、ＣＰＵ２１は、その時点の表示データを表示データファイルＦ４へ保存して（ステップ３１０）、処理を終了する。

図７は、本実施の形態の表示制御システム１による山積み表示例を示す画面図である。
同図に示すように、各画像Ｐ１は、それぞれキー項目Ｋ１（なお、図ではキー項目Ｋ１が例えば人物に設定されている）が少なくとも一部分にて表示される態様で部分的に重なり合って表示される。キー項目Ｋ１が隠れずに表示されることで、ユーザは各画像Ｐ１がそれぞれどのような写真なのかといったことを、キー項目Ｋ１を頼りに直感的に判別して目的の画像を容易に探し出すことができる。また、各画像Ｐ１が部分的に重なり合って表示されることで、表示装置４の一画面ＤＰ内に表示する画像枚数を増やすことができる。従来のように画像Ｐ１をサムネイル表示せずともよいため、画像Ｐ１の閲覧が行いやすくなる。

以上記述したように、本実施の形態によれば、以下の効果を奏する。
（１）表示装置４に表示する複数の画像Ｐ１を、各画像Ｐ１のキー項目Ｋ１が少なくとも一部分にて必ず表示されるように部分的に重ね合わせて山積み表示する態様とした。これにより、各画像Ｐ１の内容をユーザに直感的に判断可能とさせるとともに、表示装置４の一画面ＤＰ内に表示可能な画像枚数を大幅に増加させることができる。その結果、スクロール操作を極力不要とした表示方式を実現することができる。

（２）デジタルカメラ５を表示制御装置２に接続するだけで、その後は何ら特別の操作を必要とすることなく、同カメラ５内に保存されている画像Ｐ１の山積み表示を行うことが可能である。このため、高齢者やコンピュータの操作に不慣れないわゆる情報弱者の人でも、画像の閲覧を気軽に楽しむことができる。

（３）デジタルカメラ５内で生成されるタグ情報（一次タグ情報Ｔ１１）をタグ情報Ｔ１として取り込むようにした。これにより、ユーザによるタグ情報Ｔ１の設定作業を極力軽減させることができる。

（４）デジタルカメラ５からの画像取り込み時に、画像認識ソフト７により類似性情報ファイルＦ２に基づいて画像検出を行い、同ソフト７により既に認識済みの画像を検出した場合には、それをタグ情報（一タグ情報Ｔ１２）として追加設定するようにした。これにより、ユーザによるタグ情報Ｔ１の設定作業を極力軽減させることができる。

（５）山積み表示する複数の画像Ｐ１の画面奥行き方向の配置順序を、タグ情報Ｔ１に含まれる時間情報を用いて設定するようにした。こうすれば、画面奥行き方向の配置順序を時系列順とすることができ、画像の閲覧が行いやすくなる。

（６）山積み表示する複数の画像Ｐ１の画面垂直水平方向の配置順序を、タグ情報Ｔ１に含まれる緯度経度情報を用いて設定するようにした。こうすれば、画面垂直水平方向の配置順序を緯度経度順とすることができ、画像の閲覧が行いやすくなる。

（７）操作情報ファイルＦ３に記録したユーザの操作情報に基づいて該ユーザの過去の表示・閲覧に関する傾向を分析し、該分析結果に基づいて各画像Ｐ１の配置順序を補助的に設定するようにした。これにより、ユーザの嗜好にあった画像配置を実現することができる。

なお、上記実施の形態は、以下の変形例の態様で実施してもよい。
（変形例１）上記実施の形態では、取込みソフト９で取得した画像を直接、管理ソフト１０を通じて表示ソフト１１に受け渡し、山積み表示を行う態様としたが、管理ソフト１０によりデータベース８内の画像を検索し、同データベース８から取得した画像を山積み表示させることも勿論可能である。この際には検索キーとして例えばタグ情報Ｔ１を利用することができる。こうすれば、データベース８内からユーザが希求する画像情報ファイルＦ１を取得して山積み表示を行うことができる。

（変形例２）上記変形例１では、ユーザの識別情報を検索キーとすることもできる。この場合、具体的には、まず、ユーザの識別情報に基づいて操作情報ファイルＦ３からそのユーザの操作情報を取得する。次に、操作情報からユーザの過去の表示・閲覧方法に関する傾向を分析（閲覧回数の多い画像や、閲覧頻度の高い画像等、ユーザが興味を持っている画像の種類を調べる）し、該分析結果に基づいて検索キーとするタグ情報を自動選定する。そして、選定したタグ情報に基づいてデータベース８内から画像を検索する。このような態様とすれば、ユーザの過去の表示・閲覧に関する傾向に基づき選定したタグ情報をキーとして画像が検索されるため、元来ユーザが意図していなかった画像に偶発的に到達することの楽しさや、驚き、喜びを提供することができる。

（変形例３）上記変形例１及び２変形例では、互いに異なるタグ情報Ｔ１を持つ２以上の画像Ｐ１をユーザの操作情報（例えば、いつも必ず同じ２枚を同時に閲覧している等）に基づいて関連付けし、該関連付けした一の画像を抽出する際にそれに関連付けられている他の画像を併せて抽出するようにしてもよい。この態様では、タグ情報Ｔ１からは何ら関連性を見出せない画像Ｐ１同士であっても、それら各画像Ｐ１同士を過去の操作情報に基づき関連付けして、それらを同時に山積み表示させることができる。

（変形例４）タグ情報Ｔ１は、図２に例示した情報に限定されない。
（変形例５）表示制御装置２は、パーソナルコンピュータに限定されない。
（変形例６）操作装置３は、キーボードやマウスのみに限定されない。例えば、ユーザの指の動きを認識する周知の動作認識ソフトを操作装置３として用いてもよい。図８は、動作認識ソフトを利用して画像の閲覧を行う際のユーザの操作イメージを例示した画面図である。操作ＯＰ１は画像Ｐ１１を両手（両指）で広げて該画像Ｐ１１のサイズを拡大する操作である。この操作ＯＰ１が行われた場合、操作情報には、画像Ｐ１１に対するユーザの興味有りとして記録される。操作ＯＰ２は画像Ｐ１２を指でドラッグして、該画像Ｐ１２を画面ＤＰ２の前面（手前）に寄せて閲覧する操作である。この操作ＯＰ２が行われた場合、操作情報には、画像Ｐ１２に対するユーザの興味有りとして記録される。操作ＯＰ３は画像Ｐ１３を指でドラッグして該画像Ｐ１３を山Ａ１（山積み表示領域）から引き出した後、すぐさま元の位置に戻すといった操作である。この操作ＯＰ３が行われた場合、操作情報には、画像Ｐ１３に対するユーザの興味無しとして記録される。操作ＯＰ４は画像Ｐ１４の角を指を使って折り曲げるといった操作である。この操作ＯＰ４が行われた場合、画像Ｐ１４に対するユーザの興味有りと判断して該画像Ｐ１４の保存処理を行う。操作ＯＰ５は、画像Ｐ１５を指を使ってぐちゃぐちゃと丸めるといった操作である。この操作ＯＰ５が行われた場合、画像Ｐ１５に対するユーザの興味なしと判断して該画像Ｐ１５を破棄（データ削除）する処理を行う。操作ＯＰ６は画像Ｐ１１を指でドラッグして山Ａ１から外し、該画像Ｐ１１を他の位置に移動させる操作である。この操作ＯＰ６が行われた場合、画像Ｐ１１を他の山Ａ２の区分にて保存する処理を行う。このようなユーザの操作情報は、次回、画像の検索を行う際や画像の配置順序を決定する際に利用される。

（変形例７）上記実施の形態においては、１回の表示処理で複数のキー項目を設定可能とし、該キー項目毎に山積み表示する領域を区分して表示するようにしてもよい。このようにすれば、山積み表示する各画像を画像の内容毎に区分することができ、画像の閲覧がより行いやすくなる。

（変形例８）その他上記実施の形態及び各変形例の構成における設計的事項は本発明の技術的思想の範囲内において適宜変更することができる。

一実施の形態の表示制御システムを示す全体構成図。 （ａ）〜（ｃ）は画像情報ファイル（画像及びタグ情報）を示す説明図。 表示制御装置のハードウェア構成図。 取込みソフトにおける処理を示すフローチャート。 管理ソフトにおける処理を示すフローチャート。 表示ソフトにおける処理を示すフローチャート。 表示装置に表示される山積み表示の一例を示す画面図。 動作認識ソフトを利用して画像閲覧を行う際のユーザの操作イメージを示す画面図。

符号の説明

１：表示制御システム、２：表示制御装置、３：操作装置、４：表示装置、５：デジタルカメラ（外部装置）、６：表示制御ソフト、７：画像認識ソフト（画像認識手段）、８：データベース（記憶手段）、９：取込みソフト（取込手段）、１０：管理ソフト（キー管理手段）、１１：表示ソフト（表示手段）、ＤＰ：画面、Ｆ１：画像情報ファイル、Ｆ２：類似性情報ファイル、Ｆ３：操作情報ファイル、Ｆ４：表示データファイル、Ｋ１：キー項目、Ｐ１，Ｐ１１，Ｐ１２，Ｐ１３，Ｐ１４，Ｐ１５：画像、Ｔ１：タグ情報、Ｔ１１：一次タグ情報、Ｔ１２：二次タグ情報、Ｔ１３：三次タグ情報。

Claims (13)

1. 操作装置と表示装置とに接続され、該表示装置に複数の画像を同時に表示する表示制御装置であって、
   外部装置から画像と該画像内容を規定したタグ情報とを取り込む取込手段と、
   前記画像及び前記タグ情報を記憶する記憶手段と、
   前記画像の判別要素となり得るキー項目を前記タグ情報から設定し、画像認識手段による画像認識結果に基づいて前記画像内に含まれる前記キー項目の位置を設定するキー管理手段と、
   前記表示装置に表示する複数の画像を、該各画像内に含まれる前記キー項目が少なくとも一部分にて表示されるように部分的に重ね合わせて山積み表示する表示手段と、
   を備える表示制御装置。
2. 前記タグ情報は、前記外部装置により生成される情報である、
   請求項１記載の表示制御装置。
3. 前記記憶手段には、前記画像認識手段により認識された前記キー項目が類似性情報として記録され、
   前記取込手段は、前記外部装置から取り込んだ画像内に、前記類似性情報として記録されている前記キー項目が含まれている場合には、それを前記タグ情報として設定する機能を備える、
   請求項１又は２記載の表示制御装置。
4. 前記取込手段は、前記操作装置を通じてユーザにより入力された前記タグ情報を設定する機能を備える、
   請求項１乃至３のいずれか一項記載の表示制御装置。
5. 前記表示手段は、前記山積み表示する複数の画像の画面奥行き方向の配置順序を、前記タグ情報に含まれる時間情報、又はその他数値の大小により表される情報を用いて設定する、
   請求項１乃至４のいずれか一項記載の表示制御装置。
6. 前記表示手段は、前記山積み表示する複数の画像の画面垂直水平方向の配置順序を、前記タグ情報に含まれる緯度経度情報、又はその他数値の大小により表される情報を２以上用いて設定する、
   請求項１乃至５のいずれか一項記載の表示制御装置。
7. 前記記憶手段には、前記操作装置を通じてユーザにより入力された表示・閲覧に関する操作情報が該ユーザの識別情報と関連付けて記録され、
   前記表示手段は、前記ユーザの操作情報に基づいて該ユーザの過去の表示・閲覧に関する傾向を分析し、該分析結果に基づいて前記山積み表示する複数の画像の配置順序を補助的に設定する機能を備える、
   請求項５又は６記載の表示制御装置。
8. 前記表示手段は、前記山積み表示する複数の画像を前記キー項目毎にそれぞれ区分して表示する、
   請求項１乃至７のいずれか一項記載の表示制御装置。
9. 前記表示手段は、前記山積み表示した複数の画像の配置順序を、ユーザにより前記操作装置を通じて入力された情報に基づいて変更する機能を備える、
   請求項１乃至８のいずれか一項記載の表示制御装置。
10. 前記キー管理手段は、前記山積み表示する複数の画像を、前記タグ情報に基づいて前記記憶手段より検索する機能を備える、
    請求項１乃至９のいずれか一項記載の表示制御装置。
11. 前記キー管理手段は、前記ユーザの過去の表示・閲覧に関する傾向を分析した結果に基づいて、前記山積み表示する複数の画像を前記記憶手段より検索する機能を備える、
    請求項７乃至１０のいずれか一項記載の表示制御装置。
12. 前記キー管理手段は、互いに異なる前記タグ情報を持つ複数の画像を前記ユーザの操作情報に基づいて関連付け、該関連付けした一の画像を前記記憶手段より抽出する際にそれに関連付けられている他の画像を併せて抽出する機能を備える、
    請求項１０又は１１記載の表示制御装置。
13. 表示装置に複数の画像を同時に表示する表示制御方法であって、
    画像と該画像内容を規定したタグ情報とを外部から取り込むステップと、
    前記画像の判別要素となり得るキー項目を前記タグ情報から設定し、前記画像内より前記キー項目を検出して該キー項目の位置を設定するステップと、
    前記表示装置に表示する複数の画像を、該各画像内に含まれる前記キー項目が少なくとも一部分にて表示されるように部分的に重ね合わせて山積み表示するステップと、
    を備える表示制御方法。

Images