JP2008090365A

JP2008090365A - 画像検索装置、画像検索プログラム及び画像検索方法

Info

Publication number: JP2008090365A
Application number: JP2006267404A
Authority: JP
Inventors: Yoshiyo Kamitaki; 佳代上瀧
Original assignee: Casio Computer Co Ltd
Current assignee: Casio Computer Co Ltd
Priority date: 2006-09-29
Filing date: 2006-09-29
Publication date: 2008-04-17
Anticipated expiration: 2026-09-29
Also published as: JP5217139B2

Abstract

【課題】ユーザの漠然とした検索要求に応じた画像を検索して表示する。
【解決手段】検索キーで検索された画像を表示部の中央部にて、縦軸上に配列表示するとともに（ステップＳ１０３）、画面の中央部に位置する画像を主画像として他の画像よりも拡大表示する（ステップＳ１０４）。主画像が有する他の検索キーを選択し（ステップＳ１０５）、選択された検索キーを有する画像を検索する（ステップＳ１０６）。そして、この検索された画像を表示部において、主画像の左右、横軸上に配列表示する（ステップＳ１０７）。
【選択図】図２

Description

本発明は、画像を検索して表示する画像検索装置、画像検索プログラム及び画像検索方法に関する。

従来、記憶された複数の画像の中からユーザが所望する画像を検索して表示する画像検索装置が知られている。この画像検索装置は、画像に手動的あるいは自動的に画像属性を付与し、この画像属性とともに画像を記憶する。そして、検索時にユーザが前記画像属性を検索キーとして入力すると、入力された検索キーに対応する画像属性の画像が検索されて表示される（例えば、特許文献１、特許文献２参照。）。
特開平１１−２１５４５１号公報特開２００５−０３９８５８号公報

しかしながら、実際にユーザが画像を検索して表示させようとする場合、ユーザが所望する画像を予め明確に意図しているとは限らず、例えば、ある場所を撮影した風景画像を見て、当該風景画像中の建築物に着目して当該建築物の画像を所望したり、さらには当該建築物の特定部分に着目して当該特定部分の画像を所望する等、画像を見ながら要求を変化させて最終的に所望の画像の検索表示に至る場合がある。

このように、表示された画像を見ることにより連想してユーザが検索要求を変化させつつ検索を行う検索形態においては、ユーザの連想による検索要求を検索キーの入力により明確に入力することは困難である。したがって、検索キーの入力を伴う従来の画像検索装置では、ユーザが予め明確な検索要求を意図している場合には効率的な画像検索が可能となるにしても、ユーザの検索要求が漠然としており、画像を見るに従って検索要求を明瞭化させていく検索形態においては、効率的な画像検索を行い得るものではなかった。

本発明は、かかる従来の課題に鑑みてなされたものであり、ユーザの漠然とした検索要求に応じた画像を検索して表示することのできる画像検索装置、画像検索プログラム及び画像検索方法を提供することを目的とする。

前記課題を解決するため請求項１記載の発明に係る画像検索装置にあっては、表示手段と、複数の画像を記憶した記憶手段と、この記憶手段に記憶されている複数の画像のうちいずれかを選択する画像選択手段と、この画像選択手段により選択された画像を前記表示手段に表示させる第１の表示制御手段と、この第１の表示制御手段により前記表示手段に表示されている画像に関連する画像を前記記憶手段に記憶されている複数の画像の中から検索する検索手段と、この検索手段により検索された画像を、前記第１の表示制御手段により前記表示手段に表示されている画像と同時に表示させる第２の表示制御手段とを備えること特徴とする。

また、請求項２記載の発明に係る画像検索装置にあっては、前記画像選択手段は、前記記憶手段に記憶されている複数の画像の中から複数の画像を選択する手段を含み、前記第１の表示制御手段は、前記画像選択手段により選択された複数の画像を前記表示手段に同時表示させる手段を含み、前記第１の表示制御手段により前記表示手段に同時表示されている複数の画像からいずれかの画像を選択する第１の選択手段を備え、前記検索手段は、前記第１の選択手段により選択された画像を主画像として、この主画像に関連する副画像を前記記憶手段から検索し、前記第２の表示制御手段は、前記検索手段により検索された副画像を前記主画像と同時に前記表示手段に表示させることを特徴とする。

また、請求項３記載の発明に係る画像検索装置にあっては、前記第１の選択手段は、前記表示手段が有する画面の中央部に表示されている画像を前記主画像として選択することを特徴とする。

また、請求項４記載の発明に係る画像検索装置にあっては、前記第１の表示制御手段は、前記表示手段に同時表示される前記複数の画像をスクロール表示させる手段を備え、前記第１の選択手段は、前記スクロール表示後において前記画面の中央部に表示されている画像を前記主画像として選択することを特徴とする。

また、請求項５記載の発明に係る画像検索装置にあっては、前記第１の選択手段は、操作により指定された画像を前記主画像として選択することを特徴とする。

また、請求項６記載の発明に係る画像検索装置にあっては、前記第１の表示制御手段は、前記操作により指定された主画像を前記表示手段が有する画面の中央部に移動して表示させることを特徴とする。

また、請求項７記載の発明に係る画像検索装置にあっては、前記第１の表示制御手段は、前記主画像を含む前記複数の画像を前記表示手段が有する画面上における一方の軸上に配列表示させる手段を含み、前記第２の表示制御手段は、前記一方の軸に交差する他方の軸上に前記副画像を配列表示させることを特徴とする。

また、請求項８記載の発明に係る画像検索装置にあっては、前記一方の軸と他方の軸とは、縦軸と横軸のいずれかであることを特徴とする。

また、請求項９記載の発明に係る画像検索装置にあっては、前記第１の表示制御手段は、前記主画像を他の画像とは異なる表示形態で前記表示手段に表示させることを特徴とする。

また、請求項１０記載の発明に係る画像検索装置にあっては、前記異なる表示形態とは、前記主画像を前記他の画像よりも拡大して表示する表示形態であることを特徴とする。

また、請求項１１記載の発明に係る画像検索装置にあっては、前記第２の表示制御手段により前記表示手段に表示された複数の副画像をスクロール表示させる手段を備えることを特徴とする。

また、請求項１２記載の発明に係る画像検索装置にあっては、前記第２の表示制御手段により前記表示手段に表示された複数の副画像のうちいずれかを選択する第２の選択手段を備え、前記第２の表示制御手段は、前記第２の選択手段により選択された副画像を他の副画像とは異なる表示形態で前記表示手段に表示させることを特徴とする。

また、請求項１３記載の発明に係る画像検索装置にあっては、前記異なる表示形態とは、前記副画像を前記他の副画像よりも拡大して表示する表示形態であることを特徴とする。

また、請求項１４記載の発明に係る画像検索装置にあっては、前記第２の表示制御手段は、前記検索手段により検索された画像の前記表示手段に表示された履歴に応じた表示形態で、前記画像を前記表示手段に表示させることを特徴とする。

また、請求項１５記載の発明に係る画像検索装置にあっては、前記履歴とは、前記表示手段に表示された回数又は前回表示手段に表示された時点からの経過時間の少なくともいずれかを一つを含み、前記表示形態とは表示サイズ、表示位置、主画像に対する表示位置のいずれか一つを含むことを特徴とする。

また、請求項１６記載の発明に係る画像検索装置にあっては、前記記憶手段は、前記複数の画像を複数のグループに分類して記憶しており、前記複数のグループのうちいずれかを選択するグループ選択手段を備え、前記画像選択手段は、前記グループ選択手段により選択されたグループに属する画像を選択する手段を含むことを特徴とする。

また、請求項１７記載の発明に係る画像検索装置にあっては、前記表示手段に表示された前記ブループに属する複数の画像のいずれかを選択する第３の選択手段を備え、前記検索手段は、前記第３の選択手段により選択された副画像を主画像として、この主画像に関連する副画像を前記記憶手段から検索することを特徴とする。

また、請求項１８記載の発明に係る画像検索装置にあっては、前記検索手段により検索された複数の画像をブループにして前記記憶手段に記憶させるグループ作成手段を備えることを特徴とする。

また、請求項１９記載の発明に係る画像検索プログラムにあっては、前記記憶手段は、各画像に対応して当該画像を検索するためのキー情報を記憶し、前記検索手段は、前記キー情報に基づき前記関連する画像を検索することを特徴とする。

また、請求項２０記載の発明に係る画像検索装置にあっては、表示手段と、複数の画像を記憶した記憶手段とを備える機器が有するコンピュータを、前記記憶手段に記憶されている複数の画像のうちいずれかを選択する画像選択手段と、この画像選択手段により選択された画像を前記表示手段に表示させる第１の表示制御手段と、この第１の表示制御手段により前記表示手段に表示されている画像に関連する画像を前記記憶手段に記憶されている複数の画像の中から検索する検索手段と、この検索手段により検索された画像を、前記第１の表示制御手段により前記表示手段に表示されている画像と同時に表示させる第２の表示制御手段として機能させることを特徴とする。

また、請求項２１記載の発明に係る画像検索方法にあっては、画像検索プログラム表示手段と、複数の画像を記憶した記憶手段とを備える機器における画像検索方法であって、この記憶手段に記憶されている複数の画像のうちいずれかを選択する画像選択ステップと、この画像選択ステップにより選択された画像を前記表示手段に表示させる第１の表示制御ステップと、この第１の表示制御ステップにより前記表示手段に表示されている画像に関連する画像を前記記憶手段に記憶されている複数の画像の中から検索する検索ステップと、この検索ステップにより検索された画像を、前記第１の表示制御ステップにより前記表示手段に表示されている画像と同時に表示させる第２の表示制御ステップとを含むこと特徴とする画像検索方法。

本発明によれば、表示されている画像に関連する画像を検索し、この検索された画像を表示させることから、ユーザの漠然とした検索要求に応じた画像を検索して表示することができる。したがって、ユーザが所望する画像を予め明確に意図せず、ユーザの検索要求が漠然としており、画像を見るに従って検索要求を明瞭化させていく検索形態であっても、効率的な画像検索を行うことができる。

以下、本発明の実施の形態を図にしたがって説明する。図１は、本発明一実施の形態を適用したデジタルカメラ１の電気的構成の概略を示すブロック図である。デジタルカメラ１は、撮像レンズ１０の光軸後方に配置された撮像素子であるＣＣＤ１１を備えている。ＣＣＤ１１は、タイミング発生器（ＴＧ）１２、垂直ドライバ１３によって走査駆動され、一定周期で１画面分の撮像信号を出力する。

ＣＣＤ１１の出力信号は、アナログ信号の状態でＲＧＢの原色成分毎に適宜ゲイン調整された後に、サンプルホールド回路（Ｓ／Ｈ）１４でサンプルホールドされ、Ａ／Ｄ変換器１５でデジタルデータに変換されカラープロセス回路１６に送られる。カラープロセス回路１６は画像補間処理を含むカラープロセス処理により、デジタル値の輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒを生成し、ＤＭＡ（ＤｉｒｅｃｔＭｅｍｏｒｙＡｃｃｅｓｓ）ＤＭＡコントローラ１７に出力する。

ＤＭＡコントローラ１７は輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒを、カラープロセス回路１６からの複合同期信号、メモリ書込みイネーブル信号、及びクロック信号を用いて一度ＤＭＡコントローラ１７内部のバッファに書込み、ＤＲＡＭインタフェース（Ｉ／Ｆ）１８を介してＤＲＡＭ１９にＤＭＡ転送する。制御部２０は、上記輝度及び色差信号データ、つまり画像データのＤＲＡＭ１９へのＤＭＡ転送終了後に、その画像データを、ＤＲＡＭインタフェース１８を介してＤＲＡＭ１９から読み出し、ＶＲＡＭコントローラ２１を介してＶＲＡＭ２２に書き込む。

デジタルビデオエンコーダ２３は、上記画像データを、ＶＲＡＭコントローラ２１を介してＶＲＡＭ２２より定期的に読出し、これらのデータを元にビデオ信号を発生して表示部２４に出力する。表示部２４は本発明の表示手段であり、液晶モニタとその駆動回路等により構成され、デジタルビデオエンコーダ２３からのビデオ信号に基づいた表示を行うことで、その時点でＶＲＡＭコントローラ２１から取り込まれている画像情報に基づくスルー画像を表示する。

キー入力部２５は、シャッターキーや撮影モードと再生モードを切り換え設定するとともに、再生モードにおいて検索モードを設定するためのモード設定キー等の各キー、カーソルキー、画像を選択するための選択キー、スクロールキー等を含み、スルー画像が表示されている状態でシャッターキーが操作されると、撮像開始用のトリガ信号を発生する。記録モードによる静止画撮像モード時には、上記トリガ信号に応じて制御部２０がＣＣＤ１１からのＤＲＡＭ１９への経路を停止し、ＤＲＡＭ１９に書込まれている１フレーム分の画像データを、ＤＲＡＭインタフェース１８を介して読み出し、ＪＰＥＧ回路２６に送る。ＪＰＥＧ回路２６では送られた画像データを圧縮符号化し、圧縮された画像データは制御部２０によって読み出され、静止画ファイルとして不揮発性メモリであるフラッシュメモリ２７に記憶される。

フラッシュメモリ２７に記憶された画像ファイルは、再生モードにおいて、操作キー等による選択操作に応じてＪＰＥＧ回路２６に読み込まれ、そこで画像データに復号された後、必要に応じて制御部２０で拡大あるいは縮小処理されて、ＶＲＡＭコントローラ２１を介してＶＲＡＭ２２へ送られ、表示部２４で表示される。

また、制御部２０は、主としてＣＰＵ及びその周辺回路と、ＣＰＵの作業用メモリであるＲＡＭ等から構成されるマイクロコンピュータであり、フラッシュメモリ２７に確保されているプログラム領域に格納されているプログラムに基づき動作し、前述した各部の動作を制御する。

以上の構成に係る本実施の形態において、前記フラッシュメモリ２７には、シャッターキーの操作により撮影された画像がファイル名を付されて記憶されているとともに、各画像のファイルのヘッダー情報、又は別途設けられた管理ファイルには、画像毎に検索キーが記憶されている。この検索キーとしては、撮影時刻、朝、午前、午後、夜等の撮影時間帯、撮影時刻のワールドタイム、露出、感度、記憶サイズ、記憶品質、認識した画像有する色、ホワイトバランス、認識した人物の名前、特徴、人数、風景や食べ物等の認識した被写体の種類、シーンを選択してプログラム撮影した場合のそのシーン名称、連写モードの種類等である。無論、検索キーはこれらに限らず、ユーザが連想するであろう語句等を適宜検索キーとすればよく、また、これらの検索キーを自動的に付しても、ユーザが予めキー操作により付してもよい。

さらに、各画像のファイルのヘッダー情報、又は別途設けられた管理ファイルには、各画像毎に表示部２４に表示された履歴が記憶されている。したがって、この履歴を参照することにより、当該画像が表示部２４に表示された回数や前回表示部２４に表示された時点からの経過時間を検出することができる。

そして、ユーザがフラッシュメモリ２７に記憶された画像を再生すべくキー入力部２５のモード設定キーを操作して再生モードを設定し、且つ再生モードにおける検索モードを設定すると、制御部２０はフラッシュメモリ２７に格納されているプログラムに基づき、図２及び図３に示す一連のフローチャートに示すような処理を実行する。すなわち、前記検索キーをランダムに選択し（ステップＳ１０１）、選択された検索キーを有する画像をフラッシュメモリ２７にて検索する（ステップＳ１０２）。そして、この検索された画像を表示部２４の中央部にて、縦軸上に配列表示するとともに（ステップＳ１０３）、画面の中央部に位置する画像を主画像として他の画像よりも拡大表示する（ステップＳ１０４）。したがって、以上の処理により図４（ａ）に示すように、検索キーにより検索された画像のうち、表示部２４の表示面積との関係で表示可能な画像Ａ〜Ｅ（縦軸画像）が表示部２４の中央部にて縦方向に配列表示されるとともに、その中央部に位置する画像Ｃが主画像として、他の画像よりも拡大して表示される。

なお、本実施の形態においては、初期画面においてランダムに選択した検索キーに基づき検索した画像を縦方向に配列表示するようにしたが、ユーザがキー操作により任意に選択した検索キーに基づき検索した画像を縦方向に配列表示するようにしたり、検索を行うことなく撮影時刻順に縦方向に配列表示したり、ランダムに選択した画像を縦方向に配列表示するようにしてもよい。

次に、前記主画像が有する全ての検索キー、を選択し（ステップＳ１０５）、選択された検索キーを有する画像をフラッシュメモリ２７にて検索する（ステップＳ１０６）。なお、全てのキーを選択することなく、その他の検索キー、つまりステップＳ１０１で選択した以外の他の検索キーを選択し、選択された検索キーを有する画像をフラッシュメモリ２７にて検索するようにしてもよい。そして、この検索された画像を表示部２４において、主画像の左右、横軸上に配列表示する（ステップＳ１０７）。したがって、以上のステップＳ１０５〜Ｓ１０７の処理により図４（ａ）に示すように、他の検索キーにより検索された画像であって主画像Ｃと共通の検索キーを有する画像のうち、表示部２４の表示面積との関係で表示可能な画像Ｃ１〜Ｃ４（横軸画像）が主画像Ｃの両側横方向に配列表示される。

このとき、画像Ｃ１〜Ｃ４は、前記画像毎の履歴に基づき、例えば図示のように、過去に表示部２４に表示された表示回数が多いほど大きく表示させる。また、表示履歴に基づき前回表示部２４に表示された時点からの経過時間が少ないほど、大きく表示してもよいし、表示回数が多いほど主画像の近くに表示するようにしてもよい。このうように、履歴に応じて異なる態様で画像を表示することにより、ユーザが興味を示している画像がより目立つように表示することができる。

次に、キー入力部２５にて縦スクロール操作が行われたか否かを判断し（ステップＳ１０８）、行われたならばスクロール操作に応じた方向及び移動量をもって、前記縦軸画像を縦方向にスクロールさせる（ステップＳ１０９）。しかる後に、ステップＳ１０４からの処理を再度実行する。したがって、図４（ａ）の状態から今回のスクロールにより、同図（ｂ）に示す状態に移行したとすると、ステップＳ１０４での処理により、中央部に位置する画像Ｆが主画像として、他の画像よりも拡大して表示される。また、ステップＳ１０５〜Ｓ１０７の処理により図４（ｂ）に示すように、他の検索キーにより検索された画像であって主画像Ｆと共通の検索キーを有する画像のうち、表示部２４の表示面積との関係で表示可能な画像Ｆ１〜Ｆ４（横軸画像）が主画像Ｆの両側横方向に配列表示されることとなる。

なお、本実施の形態においては、このようにスクロール表示により表示部２４の画面中央部に位置した画像を主画像とするようにしたが、画面上にカーソルを表示させてカーソルキー等の操作により、縦軸画像のいずれかを選択し、選択されたならば、縦軸画像をスクロールさせて選択された画像を主画像として表示部２４の中央部に移動表示させるようにしてもよいし、スクロールさせることなく当該画像位置のままで主画像とするようにしてもよい。また、本実施の形態においては、選択された主画像を画面中央部に表示するようにしたが、そのままの位置で拡大表示させてもよいし、拡大表示させることなく、強調表示を行ったり、逆に他の縦軸画像と同一の表示形態で表示するようにしてもよい。

一方、前記ステップＳ１０８の判断がＮＯであった場合には、このステップＳ１０８から図３のステップＳ１１０に進み、キー入力部２５にて横スクロール操作が行われたか否かを判断する。行われたならばスクロール操作に応じた方向及び移動量をもって、前記横軸画像を横方向にスクロールさせつつ、画面全体を横方向に移動させる（ステップＳ１１１）。したがって、このステップＳ１１１での処理により、図４（ｃ）に示すように、横軸画像が横方向にスクロールされ、これに伴って縦軸画像も横方向に移動して表示される。

また、この横方向へのスクロールに伴って画面中央部に位置した横軸画像にジャンプして、当該横軸画像を他の画像よりも拡大表示させる（ステップＳ１１２）。したがって、このステップＳ１１２での処理により、図４（ｃ）に示すように、画面中央部に位置した画像Ｆ２が他の画像よりも拡大して表示されることとなる。なお、このとき前記ステップＳ１０４の処理で拡大させた画像は本来の大きさでの表示に復帰させる。

次に、ステップＳ１１２でのジャンプが今回検索モード処理を実行してから（ユーザにより検索モードが設定されてから）最初のジャンプであるか否かを判断する（ステップＳ１１３）。最初のジャンプである場合には、ステップＳ１１２でジャンプする直前に主画像として表示されていた画像のファイル名（又は画像ナンバー）を記憶する（ステップＳ１１４）。また、キー入力部２５にて「戻るキー」が操作されたか否かを判断し（ステップＳ１１５）、操作された場合には、最初のジャンプの直前に主画像として表示されていた画像を表示すべく、ステップＳ１１４で記憶したファイル名の画像をフラッシュメモリ２７から読み出して、画面中央部に表示させ（ステップＳ１１６）、ステップＳ１０４に戻る。

そして、キー入力部２５のモード設定キーが操作され、この検索モードから他のモードに切り替えられる等により、検索モードの終了指示があったか否かを判断し（ステップＳ１１７）、終了指示があるまで図２のステップＳ１０８からの処理を繰り返す。

なお、本実施の形態においては、主画像となり得る画像を縦軸上に配列表示し、主画像と検索キーを共通にする副画像を横軸上に配列表示するようにしたが、これとは逆の配列表示としてもよい。また、各軸は縦軸と横軸とに限らず、斜状に延在する表示部２４の対角線上の軸であってもよい。

さらに、本実施の形態においては、ステップＳ１０１〜Ｓ１０３での処理により、初期画面で複数の画像（画像）を表示するようにしたが、ステップＳ１０１〜Ｓ１０３の処理を行うことなく、単一の画像を表示し、この画像を主画像としてステップＳ１０４以降の処理を行うようにしてもよい。

図５及び図６は、本発明の他の実施の形態における処理手順を示すフローチャートである。この実施の形態において、前記フラッシュメモリ２７には、アルバムと称される複数のホルダが設けられ、ホルダ毎に複数の画像が記憶されている。各アルバムには、「修学旅行」「運動会」等のイベント名が付されており、このイベントにおいて撮影された画像がファイル名を付されて対応するアルバム内に格納されている。すなわち、フラッシュメモリ２７に記録されている各画像ファイルには、アルバム名（イベント名）を示す情報が関連付けられている。なお、各画像のファイルのヘッダー情報、又は別途設けられた管理ファイルには、前述した実施の形態と同様に画像毎に検索キーが記憶されている。

そして、ユーザがフラッシュメモリ２７に記憶された画像を再生すべくキー入力部２５のモード設定キーを操作して再生モードを設定し、且つ再生モードにおける検索モードを設定すると、制御部２０はフラッシュメモリ２７に格納されているプログラムに基づき、図５及び図６に示す一連のフローチャートに示すような処理を実行する。すなわち、アルバムのリストを表示部２４に表示し、この表示されたユーザによりキー入力部２５での操作によって、リストからいずれか所望のアルバムが指定されることにより、フラッシュメモリ２７からアルバムを選択し（ステップＳ２０１）、選択されたアルバム内の画像をフラッシュメモリ２７から順次読み出して、読み出した順序で画像を表示部２４の中央部にて、縦軸上に配列表示する（ステップＳ２０２）。また、このとき画面の中央部に位置する画像を主画像として他の画像よりも拡大表示する（ステップＳ２０３）。したがって、以上の処理により図７（ａ）に示すように、ユーザにより選択されたアルバム（１）内の画像Ａ〜Ｅ（縦軸画像）が表示部２４の中央部にて縦方向に配列表示されるとともに、その中央部に位置する画像Ｃが主画像として、他の画像よりも拡大して表示される。

なお、本実施の形態においては、初期画面においてアルバムをユーザの操作により選択するようにしたが、ランダムに選択するようにしたり、所定の選択条件に従い自動選択するようにしてもよい。

次に、前記主画像が有する全ての検索キーを選択し（ステップＳ２０４）、選択された検索キーを有する画像をフラッシュメモリ２７にて検索する（ステップＳ２０５）。このとき、検索対象とする画像は、フラッシュメモリ２７に記憶されている全ての画像であってもよいし、他のアルバムのみ検索対象とすしてもよい。そして、この検索された画像を表示部２４において、主画像の左右、横軸上に配列表示する（ステップＳ２０６）。したがって、以上のステップＳ２０４〜Ｓ２０６の処理により図７（ａ）に示すように、検索キーにより検索された画像であって主画像Ｃと共通の検索キーを有する画像のうち、表示部２４の表示面積との関係で表示可能な画像Ｃ１〜Ｃ４（横軸画像）が主画像Ｃの両側横方向に配列表示される。

次に、キー入力部２５にて縦スクロール操作が行われたか否かを判断し（ステップＳ２０７）、行われたならばスクロール操作に応じた方向及び移動量をもって、前記縦軸画像を縦方向にスクロールさせる（ステップＳ２０８）。しかる後に、ステップＳ２０４からの処理を再度実行する。したがって、図７（ａ）の状態から今回のスクロールにより、同図（ｂ）に示す状態に移行したとすると、ステップＳ２０４での処理により、中央部に位置する画像Ｆが主画像として、他の画像よりも拡大して表示される。また、ステップＳ２０４〜２０６の処理により図７（ｂ）に示すように、検索キーにより検索された画像であって主画像Ｆと共通の検索キーを有する画像のうち、表示部２４の表示面積との関係で表示可能な画像Ｆ１〜Ｆ４（横軸画像）が主画像Ｆの両側横方向に配列表示されることとなる。

なお、本実施の形態においても、選択された主画像を画面中央部に表示するようにしたが、そのままの位置で拡大表示させてもよいし、拡大表示させることなく、強調表示を行ったり、逆に他の縦軸画像と同一の表示形態で表示するようにしてもよい。

また、ステップＳ２０７の判断がＮＯであった場合には、ユーザによるキー入力部２５での操作によりアルバム作成が指示されたか否かを判断する（ステップＳ２０９）。アルバム作成が指示された場合には、前記ステップＳ２０５で検索された複数の画像であって、ステップＳ２０６で主画像の左右、横軸上に配列表示された横軸画像及び主画像を含む新たなアルバムを作成して、フラッシュメモリ２７に記憶する（ステップＳ２１０）。

したがって、図７（ａ）の表示状態でアルバム作成指示を行うと、画像Ｃ１、Ｃ２、Ｃ、Ｃ３、Ｃ４・・・を含む新たなアルバムが作成されてフラッシュメモリ２７に記憶され、図７（ｂ）の表示状態でアルバム作成指示を行うと、画像Ｆ１、Ｆ２、Ｆ、Ｆ３、Ｆ４・・・を含む新たなアルバムが作成されてフラッシュメモリ２７に記憶される。これにより、ステップＳ２０４で選択された検索キーを共通にする複数の画像からなる新たなアルバムが自動的に作成されてフラッシュメモリ２７に記憶されることとなる。なお、このとき、アルバム名（ホルダ名）として、ステップＳ２０４で選択された検索キーを用いる。

また、前記ステップＳ２１０に続く図６のステップＳ２１１においては、キー入力部２５にて横スクロール操作が行われたか否かを判断する。行われたならばスクロール操作に応じた方向及び移動量をもって、前記横軸画像を横方向にスクロールさせる（ステップＳ２１２）。このとき、前述した第１の実施の形態とは異なり、画面全体を横方向に移動させることなく、主画像を含む横軸画像を横方向にスクロールさせる。したがって、このステップＳ２１２での処理により、図７（ｃ）に示すように、横軸画像のみが横方向にスクロールされる。

また、この横方向へのスクロールに伴って画面中央部に位置した横軸画像にジャンプして、当該横軸画像を他の画像よりも拡大表示させる（ステップＳ２１３）。したがって、このステップＳ２１３での処理により、図７（ｃ）に示すように、画面中央部に位置した画像Ｆ１が他の画像よりも拡大して表示されることとなる。なお、このとき前記ステップＳ２０３の処理で拡大させた画像は本来の大きさでの表示に復帰させる。

引き続き、前記ステップＳ２１３でジャンプした画像が含まれているアルバムをフラッシュメモリ２７から検索する（ステップＳ２１４）。次に、この検索されたアルバム内の画像をフラッシュメモリ２７から読み出し、前記ジャンプした画像を主画像としてアルバム内の画像を表示部２４の中央部にて、縦軸上に配列表示する（ステップＳ２１５）。

したがって、図７（ｂ）の状態で画像Ｆ１にジャンプしたとすると、同図（ｃ）に示すように、画像Ｆ１を含むアルバム（２）が検索されて、このアルバム（２）内の画像ＤＦ１、ＥＦ１、Ｆ１、ＧＦ１、ＨＦ１が読み出されて、それまで表示されていたアルバム（１）に代わって表示部２４の中央部にて、縦軸上に配列表示される。また、このとき画像Ｆ１は、主画像とされたことから、画面の中央部に他の画像よりも拡大して表示される。

また、ステップＳ２１３でのジャンプが今回検索モード処理を実行してから（ユーザにより検索モードが設定されてから）最初のジャンプであるか否かを判断する（ステップＳ２１６）。最初のジャンプである場合には、最初のジャンプである場合には、ステップＳ２１６でジャンプする直前に主画像として表示されていた画像のファイル名（又は画像ナンバー）を記憶する（ステップＳ２１７）。また、キー入力部２５にて「戻るキー」が操作されたか否かを判断し（ステップＳ２１８）、操作された場合には、最初のジャンプの直前に主画像として表示されていた画像を表示すべく、ステップＳ２１７で記憶したファイル名の画像をフラッシュメモリ２７から読み出して、画面中央部に表示させ（ステップＳ２１９）、ステップＳ２１４に戻る。

「戻るキー」が操作されなかった場合には、キー入力部２５のモード設定キーが操作され、この検索モードから他のモードに切り替えられる等により、検索モードの終了指示があったか否かを判断し（ステップＳ２２０）、終了指示があるまで図５のステップＳ２０４からの処理を繰り返す。したがって、前記ステップＳ２１５での処理によりアルバム（２）が縦軸上に配列表示されている状態で、ステップＳ２０４からの処理が実行されると、主画像である画像Ｆ１が有する検索キーの全てが選択され（ステップＳ２０４）、選択された検索キーを有する画像がフラッシュメモリ２７にて検索され（ステップＳ２０５）、この検索された画像を表示部２４において、主画像の左右、横軸上に配列表示される（ステップＳ２０６）。

無論、この状態でアルバム作成指示を行えば、前述と同様にして、前記ステップＳ２０５で検索された複数の画像であって、ステップＳ２０６で主画像の左右、横軸上に配列表示された横軸画像を含む新たなアルバムが作成されて、フラッシュメモリ２７に記憶されることとなる（ステップＳ２１０）。

なお、本実施の形態においては、アルバム内の画像を縦軸上に配列表示し、主画像と検索キーを共通にする副画像を横軸上に配列表示するようにしたが、これとは逆の配列表示としてもよい。また、ステップＳ２０９のアルバム作成判断と、ステップＳ２１０のアルバム作成処理を第２の実施の形態でのみ行うようにしたが、第１の実施の形態においても、同様のアルバム作成判断とアルバム作成処理を行うようにしてもよい。また、実施の形態においては、「戻るキー」が操作された場合には、最初のジャンプ画像が表示される直前の画面に戻るようにしたが、「戻るキー」が操作される都度、前回のジャンプ画像が表示される直前の画面に戻るようにしてもよい。また、実施の形態においては、本発明をデジタルカメラに適用した場合を示したが、複数の画像を記憶する各種機器に適用することができる。

さらに、実施の形態においては、本発明を静止画に適用した場合を示したが、動画や音声に適用するようにしてもよい。動画に適用した場合には、再生中の動画と関連する他の動画を検索してそのファイル名を表示させる等を行うことができ、音声に適用した場合には、関連する音声又は音声が含まれる静止画や動画を検索して表示し、あるいは音楽ファイルであれば再生中の音楽ファイルと関連する（曲調が類似する等）音楽ファイルを検索してそのファイル名を表示させたり、一部を再生したりすることができる。

また、実施の形態においては縦軸上に複数の画像を同時表示さるようにしが、選択画像のみを表示させるようにしてもよい。また、表示（選択）回数等の履歴に限ることなく、主画像との関連度、ユーザのお気に入り度、検索キーの一致個数等に応じて、横軸上に表示する画像の表示サイズを変更したり、主画像の近くに表示させるか否かを制御するようにしてもよい。

本発明の一実施の形態を適用したデジタルカメラの電気的構成の概略を示すブロック図である。第１の実施の形態における処理手順を示すフローチャートである。図２に続くフローチャートである。第１の実施の形態における表示遷移図である。第２の実施の形態における処理手順を示すフローチャートである。図５に続くフローチャートである。第２の実施の形態における表示遷移図である

符号の説明

１デジタルカメラ
１７ＤＭＡコントローラ
１９ＤＲＡＭ
２０制御部
２１ＶＲＡＭコントローラ
２２ＶＲＡＭ
２３デジタルビデオエンコーダ
２４表示部
２５キー入力部
２６ＪＰＥＧ回路
２７フラッシュメモリ

Claims

表示手段と、
複数の画像を記憶した記憶手段と、
この記憶手段に記憶されている複数の画像のうちいずれかを選択する画像選択手段と、
この画像選択手段により選択された画像を前記表示手段に表示させる第１の表示制御手段と、
この第１の表示制御手段により前記表示手段に表示されている画像に関連する画像を前記記憶手段に記憶されている複数の画像の中から検索する検索手段と、
この検索手段により検索された画像を、前記第１の表示制御手段により前記表示手段に表示されている画像と同時に表示させる第２の表示制御手段と、
を備えること特徴とする画像検索装置。
前記画像選択手段は、前記記憶手段に記憶されている複数の画像の中から複数の画像を選択する手段を含み、
前記第１の表示制御手段は、前記画像選択手段により選択された複数の画像を前記表示手段に同時表示させる手段を含み、
前記第１の表示制御手段により前記表示手段に同時表示されている複数の画像からいずれかの画像を選択する第１の選択手段を備え、
前記検索手段は、前記第１の選択手段により選択された画像を主画像として、この主画像に関連する副画像を前記記憶手段から検索し、
前記第２の表示制御手段は、前記検索手段により検索された副画像を前記主画像と同時に前記表示手段に表示させることを特徴とする請求項１記載の画像検索装置。
前記第１の選択手段は、前記表示手段が有する画面の中央部に表示されている画像を前記主画像として選択することを特徴とする請求項２記載の画像検索装置。
前記第１の表示制御手段は、前記表示手段に同時表示される前記複数の画像をスクロール表示させる手段を備え、
前記第１の選択手段は、前記スクロール表示後において前記画面の中央部に表示されている画像を前記主画像として選択することを特徴とする請求項３記載の画像検索装置。
前記第１の選択手段は、操作により指定された画像を前記主画像として選択することを特徴とする請求項２記載の画像検索装置。
前記第１の表示制御手段は、前記操作により指定された主画像を前記表示手段が有する画面の中央部に移動して表示させることを特徴とする請求項５記載の画像検索装置。
前記第１の表示制御手段は、前記主画像を含む前記複数の画像を前記表示手段が有する画面上における一方の軸上に配列表示させる手段を含み、
前記第２の表示制御手段は、前記一方の軸に交差する他方の軸上に前記副画像を配列表示させることを特徴とする請求項２から６にいずれか記載の画像検索装置。
前記一方の軸と他方の軸とは、縦軸と横軸のいずれかであることを特徴とする請求項７記載の画像検索装置。
前記第１の表示制御手段は、前記主画像を他の画像とは異なる表示形態で前記表示手段に表示させることを特徴とする請求項２から８にいずれか記載の画像検索装置。
前記異なる表示形態とは、前記主画像を前記他の画像よりも拡大して表示する表示形態であることを特徴とする請求項９記載の画像検索装置。
前記第２の表示制御手段により前記表示手段に表示された複数の副画像をスクロール表示させる手段を備えることを特徴とする請求項２から１０にいずれか記載の画像検索装置。
前記第２の表示制御手段により前記表示手段に表示された複数の副画像のうちいずれかを選択する第２の選択手段を備え、
前記第２の表示制御手段は、前記第２の選択手段により選択された副画像を他の副画像とは異なる表示形態で前記表示手段に表示させることを特徴とする請求項２から１１にいずれか記載の画像検索装置。
前記異なる表示形態とは、前記副画像を前記他の副画像よりも拡大して表示する表示形態であることを特徴とする請求項１２記載の画像検索装置。
前記第２の表示制御手段は、前記検索手段により検索された画像の前記表示手段に表示された履歴に応じた表示形態で、前記画像を前記表示手段に表示させることを特徴とする請求項１から１３にいずれか記載の画像検索装置。
前記履歴とは、前記表示手段に表示された回数又は前回表示手段に表示された時点からの経過時間の少なくともいずれかを一つを含み、前記表示形態とは表示サイズ、表示位置、主画像に対する表示位置のいずれか一つを含むことを特徴とする請求項１４記載の画像検索装置。
前記記憶手段は、前記複数の画像を複数のグループに分類して記憶しており、
前記複数のグループのうちいずれかを選択するグループ選択手段を備え、
前記画像選択手段は、前記グループ選択手段により選択されたグループに属する画像を選択する手段を含むことを特徴とする請求項１から８にいずれか記載の画像検索装置。
前記表示手段に表示された前記ブループに属する複数の画像のいずれかを選択する第３の選択手段を備え、
前記検索手段は、前記第３の選択手段により選択された副画像を主画像として、この主画像に関連する副画像を前記記憶手段から検索することを特徴とする請求項１６記載の画像検索装置。
前記検索手段により検索された複数の画像をブループにして前記記憶手段に記憶させるグループ作成手段を備えることを特徴とする請求項２から１７にいずれか記載の画像検索装置。
前記記憶手段は、各画像に対応して当該画像を検索するためのキー情報を記憶し、
前記検索手段は、前記キー情報に基づき前記関連する画像を検索することを特徴とする請求項１から１８にいずれか記載の画像検索装置。
表示手段と、複数の画像を記憶した記憶手段とを備える機器が有するコンピュータを、
前記記憶手段に記憶されている複数の画像のうちいずれかを選択する画像選択手段と、
この画像選択手段により選択された画像を前記表示手段に表示させる第１の表示制御手段と、
この第１の表示制御手段により前記表示手段に表示されている画像に関連する画像を前記記憶手段に記憶されている複数の画像の中から検索する検索手段と、
この検索手段により検索された画像を、前記第１の表示制御手段により前記表示手段に表示されている画像と同時に表示させる第２の表示制御手段と、
して機能させることを特徴とする画像検索プログラム。
表示手段と、複数の画像を記憶した記憶手段とを備える機器における画像検索方法であって、
この記憶手段に記憶されている複数の画像のうちいずれかを選択する画像選択ステップと、
この画像選択ステップにより選択された画像を前記表示手段に表示させる第１の表示制御ステップと、
この第１の表示制御ステップにより前記表示手段に表示されている画像に関連する画像を前記記憶手段に記憶されている複数の画像の中から検索する検索ステップと、
この検索ステップにより検索された画像を、前記第１の表示制御ステップにより前記表示手段に表示されている画像と同時に表示させる第２の表示制御ステップと、
を含むこと特徴とする画像検索方法。