JP2021114135A - 画像検索装置、画像検索方法、及び画像検索プログラム - Google Patents

Abstract

【課題】最初に入力された検索条件が正確なものでない場合であっても、所望の画像を検索することができる。【解決手段】画像検索装置１００は、ユーザ操作に基づく操作情報から第１メタデータを取得する第１メタデータ取得部１１０と、第１メタデータ取得部１１０が取得した第１メタデータに基づいて、第１メタデータに関連する１以上の第２メタデータを取得する第２メタデータ取得部１２０と、第２メタデータ取得部１２０が取得する１以上の第２メタデータに基づいて、第２メタデータのそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群を第２メタデータ毎に取得する画像データ取得部１３０と、画像データ取得部１３０が取得した１以上の画像データ群のそれぞれを表す画像群画像を生成し、生成した１以上の画像群画像を並べた表示画像を生成する表示画像生成部１４０と、を備えた。【選択図】図２

Description

本開示は、画像検索装置、画像検索方法、及び画像検索プログラムに関するものである。

検索条件としてメタデータが指定されると、画像を示す画像データと、当該画像の特徴を示す画像メタデータとを対応させて記憶した記憶装置から、指定されたメタデータに相当する画像メタデータに対応する画像データを検索する技術がある。

例えば、特許文献１には、画像を検索するための検索条件を受け付ける検索条件入力部と、検索条件に基づき第１のクエリを生成するクエリ生成部と、第１のクエリに基づきデータベース内の画像を検索する画像検索部と、検索によりヒットした画像のうち、所定操作により選択された複数画像間の関連性を推定する関連性推定部と、複数画像間の関連性に基づき第２のクエリを生成するクエリ補正部と、クエリ補正部により生成された第２のクエリをインタフェースに表示させる機能と、を備える画像検索装置が開示されている。

国際公開第２０１８／１５９０９５号公報

特許文献１に開示された従来の画像検索装置（以下「従来装置」という。）は、ユーザが入力した検索条件のみに基づく検索によりヒットした画像を、更に絞り込み検索することにより画像を検索するものである。そのため、従来装置では、ユーザが最初に入力する検索条件が正確なものでないと、所望の画像を検索することができない場合があるという問題点があった。

本開示は、上述の問題点を解決するためのもので、最初に入力された検索条件が正確なものでない場合であっても、所望の画像を検索することを可能にする画像検索装置を提供することを目的としている。

本開示に係る画像検索装置は、ユーザ操作に基づく操作情報を取得する操作取得部と、操作取得部が取得した操作情報から第１メタデータを取得する第１メタデータ取得部と、第１メタデータ取得部が取得した第１メタデータに基づいて、第１メタデータに関連する１以上の第２メタデータを取得する第２メタデータ取得部と、第２メタデータ取得部が取得する第２メタデータに基づいて、第２メタデータのそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群を、第２メタデータ毎に取得する画像データ取得部と、表示画像を生成する表示画像生成部であって、画像データ取得部が取得した１以上の画像データ群のそれぞれを表す画像群画像を生成し、生成した１以上の画像群画像を並べた表示画像を生成する表示画像生成部と、表示画像生成部が生成した表示画像を表示画像情報として出力する表示画像出力部と、を備えたものである。

本開示によれば、最初に入力された検索条件が正確なものでない場合であっても、所望の画像を検索することができる。

図１は、実施の形態１に係る画像検索装置が適用された画像検索システムの要部の構成の一例を示すブロック図である。 図２は、実施の形態１に係る画像検索装置の要部の構成の一例を示すブロック図である。 図３は、実施の形態１に係るメタデータ記憶装置が備えるメタデータベースに登録された内容の一例を説明するための説明図である。 図４は、実施の形態１に係る表示画像生成部が生成する表示画像の一例を示す説明図である。 図５Ａ及び図５Ｂは、実施の形態１に係る画像検索装置のハードウェア構成の一例を示す図である。 図６Ａは、実施の形態１に係る画像検索装置の処理の一例を説明するフローチャートである。 図６Ｂは、実施の形態１に係る画像検索装置の処理の一例を説明するフローチャートである。 図７は、実施の形態２に係る画像検索装置の要部の構成の一例を示すブロック図である。 図８Ａは、実施の形態２に係る画像検索装置の処理の一例を説明するフローチャートである。 図８Ｂは、実施の形態２に係る画像検索装置の処理の一例を説明するフローチャートである。 図９は、実施の形態３に係る画像検索装置の要部の構成の一例を示すブロック図である。 図１０Ａは、実施の形態２に係る画像検索装置の処理の一例を説明するフローチャートである。 図１０Ｂは、実施の形態２に係る画像検索装置の処理の一例を説明するフローチャートである。

以下、本開示の実施の形態について、図面を参照しながら詳細に説明する。

実施の形態１．

図１から図５、並びに、図６Ａ及び図６Ｂを参照して、実施の形態１に係る画像検索装置１００について説明する。
図１を参照して、実施の形態１に係る画像検索装置１００が適用された画像検索システム１の要部の構成について説明する。
図１は、実施の形態１に係る画像検索装置１００が適用された画像検索システム１の要部の構成の一例を示すブロック図である。
画像検索システム１は、撮像装置１０、画像蓄積装置２０、画像記憶装置３０、メタデータ記憶装置４０、操作入力装置５０、表示装置６０、ネットワーク７０、及び、画像検索装置１００を備える。

ネットワーク７０は、ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）又は無線ＬＡＮ等の通信ネットワークである。実施の形態１では、ネットワーク７０のノードとして、撮像装置１０、画像蓄積装置２０、画像記憶装置３０、メタデータ記憶装置４０、及び、画像検索装置１００が接続されているものとして説明する。

撮像装置１０は、例えば、監視カメラ、デジタルスチルカメラ、又は、デジタルビデオカメラ等の撮影した画像を画像データとして外部に出力可能な画像入力装置である。撮像装置１０が出力する画像データが示す画像は、静止画像であっても、動画像であっても良い。また、撮像装置１０が出力する画像データは、画像データが示す画像に対応する音声を示す音声情報を含むものであっても良い。
実施の形態１では、画像検索システム１は、一例として、撮像装置１０として、第１撮像装置１１及び第２撮像装置１２の２台の撮像装置１０を備えるものとして説明する。なお、実施の形態１では、第１撮像装置１１及び第２撮像装置１２は、監視カメラであるものとして説明する。また、撮像装置１０の台数は、２台に限定されるものではなく、１台であっても、３台以上であっても良い。

画像蓄積装置２０は、画像データを取得して、取得した画像データが示す画像の特徴を示す画像メタデータを生成する。画像蓄積装置２０は、取得した画像データと、生成した画像メタデータとを画像記憶装置３０に出力し、出力した画像データと画像メタデータとを対応付けて画像記憶装置３０に記憶させる。

画像記憶装置３０は、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）又はＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）等の記憶媒体を備えた記憶装置である。
画像記憶装置３０は、画像蓄積装置２０が出力した画像データと画像メタデータとを画像データベースとを受けて、当該画像データと当該画像メタデータとを記憶する。
画像記憶装置３０は、例えば、画像データベースを備え、画像蓄積装置２０が出力した画像データと画像メタデータとの対応付けを画像データベースで管理する。

画像メタデータは、例えば、画像を撮影した撮影日時を示す撮影日時情報、画像を撮影した撮影位置を示す撮影位置情報、画像を撮影した撮像装置１０を示す撮像装置情報、画像を撮影するトリガとなったセンサイベント等のイベントを示すイベント情報、又は、画像に写る物体の名称若しくは種別等を示す物体情報等である。
撮影日時情報、撮影位置情報、撮像装置情報、又は、イベント情報等の情報は、例えば、画像データのヘッダに含まれている。
例えば、画像蓄積装置２０は、画像データのヘッダから撮影日時情報、撮影位置情報、撮像装置情報、又は、イベント情報等の情報を抽出することにより、画像メタデータを生成する。画像データのヘッダから撮影日時情報、撮影位置情報、撮像装置情報、又は、イベント情報等の情報を抽出する方法は公知であるため、説明を省略する。

物体情報が示す物体の名称とは、例えば、物体が人物である場合、人物の氏名等である。
物体情報が示す物体の種別とは、例えば、物体が車両である場合、普通自動車、軽自動車、トラック、バス、自動二輪車、又は、自転車等である。
例えば、画像蓄積装置２０は、画像データが示す画像を画像解析技術により解析し、解析結果として取得した画像に写る物体の名称若しくは種別等に基づいて物体情報を生成することにより、画像メタデータを生成する。画像解析技術により画像に写る物体の名称若しくは種別等を取得する方法は公知であるため、詳細な説明を省略する。

操作入力装置５０は、ユーザからの入力操作を受け付けるキーボード又はマウス等の入力機器であって、ユーザからの入力操作であるユーザ操作を受けて、当該ユーザ操作を示す操作情報を画像検索装置１００に出力する。
表示装置６０は、入力された表示画像情報が示す表示画像を表示するディスプレイ又はプロジェクタ等の表示出力機器であって、画像検索装置１００が出力する表示画像情報を受けて、当該表示画像情報が示す表示画像を表示する。

画像検索装置１００は、操作入力装置５０からユーザ操作に基づく操作情報を取得し、取得した当該操作情報に基づいて、画像記憶装置３０に記憶された画像データを画像記憶装置３０から読み出す。画像検索装置１００は、読み出した当該画像データに基づいて、表示画像を生成し、生成した当該表示画像を表示画像情報として表示装置６０に出力する。

図２を参照して、実施の形態１に係る画像検索装置１００の要部の構成について説明する。
図２は、実施の形態１に係る画像検索装置１００の要部の構成の一例を示すブロック図である。
画像検索装置１００は、操作取得部１０１、第１メタデータ取得部１１０、第２メタデータ取得部１２０、画像データ取得部１３０、表示画像生成部１４０、及び、表示画像出力部１９９を備える。
画像検索装置１００は、上述の構成に加えて、選択群取得部１５０、優先度取得部１６０、最大個数取得部１７０、及び、優先度変更部１８０等を備えるものであっても良い。
実施の形態１では、画像検索装置１００は、操作取得部１０１、第１メタデータ取得部１１０、第２メタデータ取得部１２０、画像データ取得部１３０、表示画像生成部１４０、選択群取得部１５０、優先度取得部１６０、最大個数取得部１７０、優先度変更部１８０、及び、表示画像出力部１９９を備えるものとして説明する。

操作取得部１０１は、ユーザ操作に基づく操作情報を取得する。
具体的には、例えば、操作取得部１０１は、操作入力装置５０が出力する操作情報を取得する。
第１メタデータ取得部１１０は、操作取得部１０１が取得した操作情報から第１メタデータを取得する。
第１メタデータは、ユーザ操作により指定された情報であって、期間を示す期間情報、位置を示す位置情報、撮像装置情報、イベント情報、又は、物体情報等である。

第２メタデータ取得部１２０は、第１メタデータ取得部１１０が取得した第１メタデータに基づいて、第１メタデータに関連する１以上の第２メタデータを取得する。
ここでいう関連とは、類似又は近傍等を意味する。
なお、１以上の第２メタデータのうちの１つは、第１メタデータに相当するものである。

具体的には、例えば、第１メタデータが期間情報である場合、第２メタデータ取得部１２０は、第１メタデータである期間情報が示す期間に対して、時間的に近傍にある複数の期間を示す複数の期間情報と、第１メタデータである期間情報とを取得する。
より具体的には、例えば、第１メタデータである期間情報が示す期間がある日の１日間である場合、第２メタデータ取得部１２０は、第１メタデータである期間情報が示す日の近傍である当該日の３日前の１日間、当該日の２日前の１日間、当該日の１日前の１日間、当該日の当日の１日間、当該日の１日後の１日間、当該日の２日後の１日間、及び、当該日の３日後の１日間のそれぞれを示す７個の第２メタデータを取得する。

なお、期間情報が示す期間は、ある日の１日間に限定されるものではない。例えば、期間情報が示す期間は、ある週の１週間、ある月の１月間、ある年の１年間、又は、ある時刻、ある日、ある月若しくはある年から、他のある時刻、他のある日、他のある月若しくは他のある年までの期間等であっても良い。また、第２メタデータ取得部１２０が取得する第２メタデータの数は、７個に限定されるものではない。第２メタデータ取得部１２０が取得する第２メタデータの数は、１個以上であれば、６個以下でも、８個以上であっても良い。

また、例えば、第１メタデータが位置情報である場合、第２メタデータ取得部１２０は、第１メタデータである位置情報が示す位置に対して、空間的に近傍にある複数の位置を示す複数の位置情報と、第１メタデータである位置情報とを取得する。ここで言う位置とは、例えば、緯度及び経度、都市、地域、建物、又は、建物内のエリア等である。
具体的には、例えば、第１メタデータである位置情報が示す位置がある都市である場合、第２メタデータ取得部１２０は、第１メタデータである位置情報が示す都市の近傍にある１以上の都市のそれぞれを示す１以上の第２メタデータを取得する。第２メタデータ取得部１２０は、１以上の第２メタデータのうちの１つとして、第１メタデータである位置情報に相当する第２メタデータを取得しても良い。

また、例えば、第１メタデータが撮像装置情報である場合、第２メタデータ取得部１２０は、第１メタデータである撮像装置情報が示す撮像装置１０に類似する他の１以上の撮像装置１０、又は、当該撮像装置情報が示す撮像装置１０の用途に類似する用途の他の１以上の撮像装置１０のそれぞれを示す１以上の第２メタデータを取得する。第２メタデータ取得部１２０は、１以上の第２メタデータのうちの１つとして、第１メタデータである撮像装置情報に相当する第２メタデータを取得しても良い。
また、例えば、第１メタデータが監視カメラ等の予め定められた位置に固定された撮像装置１０を示す撮像装置情報である場合、第２メタデータ取得部１２０は、第１メタデータである撮像装置情報が示す撮像装置１０が固定された位置に対して、空間的に近傍の位置に固定された他の１以上の撮像装置１０のそれぞれを示す１以上の第２メタデータを取得する。第２メタデータ取得部１２０は、１以上の第２メタデータのうちの１つとして、第１メタデータである撮像装置情報に相当する第２メタデータを取得しても良い。

また、例えば、第１メタデータがイベント情報である場合、第２メタデータ取得部１２０は、第１メタデータであるイベント情報が示すイベントに類似する他の１以上のイベントのそれぞれを示す１以上の第２メタデータを取得する。具体的には、イベントに類似する他のイベントとは、第１メタデータであるイベント情報が示すイベントが、あるドアの開閉を検知するドアセンサに基づくセンサイベントである場合、当該イベントに類似する他のイベントとは、例えば、他のドアの開閉を検知するドアセンサに基づくセンサイベント等の同種のイベントである。イベントに類似する他のイベントは、同種のイベントに限定されるものではない。
第２メタデータ取得部１２０は、１以上の第２メタデータのうちの１つとして、第１メタデータであるイベント情報に相当する第２メタデータを取得しても良い。

また、例えば、第１メタデータが物体の種別を示す物体情報である場合、第２メタデータ取得部１２０は、第１メタデータである物体情報が示す物体の種別に類似する他の１以上の種別のそれぞれを示す１以上の第２メタデータを取得する。具体的には、例えば、第１メタデータである物体情報が示す物体の種別が普通自動車である場合、普通自動車は車両の一種であることから、物体の種別に類似する他の物体の種別とは、軽自動車、トラック、バス、自動二輪車、又は、自転車等である。第２メタデータ取得部１２０は、１以上の第２メタデータのうちの１つとして、第１メタデータである物体情報に相当する第２メタデータを取得しても良い。

例えば、第２メタデータ取得部１２０は、第１メタデータ取得部１１０が取得した第１メタデータに基づいて、第１メタデータに関連する１以上の第２メタデータを、メタデータ記憶装置４０から読み出すことにより取得する。
メタデータ記憶装置４０は、ＳＳＤ又はＨＤＤ等の記憶媒体を備えた記憶装置である。
具体的には、例えば、メタデータ記憶装置４０は、メタデータベースを備え、互いに関連する１以上のメタデータを１つのメタデータグループに対応付けて記憶する。

図３を参照して、実施の形態１に係るメタデータ記憶装置４０が備えるメタデータベースについて説明する。
図３は、実施の形態１に係るメタデータ記憶装置４０が備えるメタデータベースに登録された内容の一例を説明するための説明図である。
図３に示すように、メタデータベースには、車両グループ、監視カメラグループ、又は、センサイベントグループ等のメタデータグループが、予め登録されている。

また、メタデータベースには、互いに車両であるという点において関連する普通自動車、軽自動車、トラック、バス、自動二輪車、又は、自転車等のそれぞれを示すメタデータが、メタデータベースに予め登録された車両グループに対応付けられて、予め登録されている。
同様に、メタデータベースには、互いに監視カメラであるという点において共通する第１撮像装置１１、又は、第２撮像装置１２等のそれぞれを示すメタデータが、メタデータベースに予め登録された監視カメラグループに対応付けられて、予め登録されている。
同様に、メタデータベースには、互いに監視カメラである第１撮像装置１１、又は、第２撮像装置１２等が撮影する際のトリガとなるセンサイベントであるという点において共通する第１イベント、又は、第２イベント等のそれぞれを示すメタデータが、メタデータベースに予め登録されたセンサイベントグループに対応付けられて、予め登録されている。

図３に示すメタデータベースに登録された内容は、あくまで一例であり、これに限定されるものではない。
なお、図３に示すメタデータベースに登録された内容のうち、優先度については、後述する。

第２メタデータ取得部１２０は、第１メタデータ取得部１１０が取得した第１メタデータに基づいて、メタデータベースを検索し、第１メタデータに関連する１以上の第２メタデータを取得する。
具体的には、第１メタデータが普通自動車を示すメタデータである場合、第２メタデータ取得部１２０は、普通自動車を示すメタデータが対応付けられている車両グループに対応付けられた１以上のメタデータである普通自動車、軽自動車、トラック、バス、自動二輪車、又は、自転車等のそれぞれを示すメタデータを、第２メタデータとして取得する。

第２メタデータ取得部１２０が、第１メタデータ取得部１１０が取得した第１メタデータに基づいてメタデータベースを検索した結果、第１メタデータに対応するメタデータがメタデータベースに予め登録されていなかった場合、第２メタデータ取得部１２０は、第１メタデータを第２メタデータとして取得する。第２メタデータ取得部１２０は、当該場合、第１メタデータをメタデータベースに新規に追加して登録しても良い。

画像データ取得部１３０は、第２メタデータ取得部１２０が取得する１以上の第２メタデータに基づいて、第２メタデータのそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群を第２メタデータ毎に取得する。
具体的には、画像データ取得部１３０は、１以上の第２メタデータのそれぞれに該当する画像メタデータに対応する１以上の画像データを、第２メタデータ毎に画像記憶装置３０から読み出すことにより取得し、第２メタデータのそれぞれについて取得した１以上の画像データを１つの画像データ群とする。

より具体的には、例えば、第１メタデータが普通自動車を示すメタデータである場合、第２メタデータは、例えば、普通自動車、軽自動車、トラック、バス、自動二輪車、及び、自転車のそれぞれを示すメタデータとなる。画像データ取得部１３０は、普通自動車、軽自動車、トラック、バス、自動二輪車、及び、自転車を示す各メタデータに該当する画像メタデータに対応する１以上の画像データを、普通自動車、軽自動車、トラック、バス、自動二輪車、及び、自転車を示すメタデータ毎に取得する。

表示画像生成部１４０は、表示画像を生成する。
具体的には、表示画像生成部１４０は、画像データ取得部１３０が取得した１以上の画像データ群のそれぞれを表す画像群画像を生成する。
例えば、表示画像生成部１４０は、１以上の画像データ群のそれぞれについて、画像データ群に含まれる１以上の画像データのうち、画像データ群を代表する１以上の画像データを用いて、画像データ群毎に画像データ群を表す画像群画像を生成する。画像データ群に含まれる１以上の画像データのうち、画像群画像を生成するために用いる画像データ群を代表する１以上の画像データを選択する方法は、周知であるため説明を省略する。
更に、表示画像生成部１４０は、生成した１以上の画像群画像を並べた表示画像を生成する。
表示画像出力部１９９は、表示画像生成部１４０が生成した表示画像を表示画像情報として出力する。

以上のように構成することにより、画像検索装置１００は、ユーザにより入力された第１メタデータに関連する１以上の第２メタデータのそれぞれに該当する画像メタデータに対応する１以上の画像データを表す画像群画像を並べた表示画像を、表示装置６０を介してユーザに視覚的に提供することができる。
ユーザは、表示装置６０に表示される表示画像を視覚的に確認することにより、最初に入力された検索条件である第１メタデータが正確なものでない場合であっても、所望の画像を探し当てることができる。

表示画像生成部１４０は、第２メタデータ取得部１２０が取得する１以上の第２メタデータのそれぞれに対応付けられて予め付与された優先度に用いて、生成する１以上の画像群画像のそれぞれの態様、又は、生成した１以上の画像群画像を並べる態様を決定し、決定した態様に基づいて、１以上の画像群画像を並べた表示画像を生成しても良い。
例えば、表示画像生成部１４０は、優先度が高い第２メタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像の大きさを、優先度が低い第２メタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像の大きさと比較して、大きく生成する。
また、例えば、表示画像生成部１４０は、優先度が高い第２メタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像を、優先度が低い第２メタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像と比較して、表示装置６０の表示画面における左方又は上方に位置させるように、１以上の画像群画像を並べた表示画像を生成する。

優先度は、優先度取得部１６０により取得される。
具体的には、例えば、優先度は、図３に示すように、メタデータ記憶装置４０が備えるメタデータベースにおいて、メタデータベースに登録された１以上のメタデータのそれぞれに対応付けられて予め登録されている。優先度取得部１６０は、例えば、第２メタデータ取得部１２０が取得する１以上の第２メタデータのそれぞれに対応付けられて予め付与された優先度を、メタデータ記憶装置４０が備えるメタデータベースを用いて検索することにより取得する。

以上のように構成することにより、画像検索装置１００は、優先度が高い第２メタデータに該当する画像メタデータに対応する画像データ群を、優先度が低い第２メタデータに該当する画像メタデータに対応する画像データ群と比較して、視覚的に目立たせるようにした表示画像を、表示装置６０を介してユーザに提供することができる。

表示画像生成部１４０は、優先度取得部１６０が取得する優先度と、表示画像に並べる画像群画像の最大個数とを用いて、生成する１以上の画像群画像のそれぞれの態様、又は、生成した１以上の画像群画像を並べる態様を決定し、決定した態様に基づいて、１以上の画像群画像を並べた表示画像を生成しても良い。

例えば、表示画像生成部１４０は、生成した画像群画像の個数が、表示画像に並べる画像群画像の最大個数より多い場合、優先度取得部１６０が取得する優先度が高いものから順に、最大個数の画像群画像を生成する。例えば、表示画像生成部１４０は、当該場合において画像群画像を生成する際に、優先度が高い第２メタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像の大きさを、優先度が低い第２メタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像の大きさと比較して、大きく生成しても良い。

また、例えば、表示画像生成部１４０は、当該場合、優先度取得部１６０が取得する優先度が高いものから順に、最大個数の画像群画像を選択して、選択した最大個数の画像群画像を並べた表示画像を生成する際に、優先度が高い第２メタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像を、優先度が低い第２メタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像と比較して、表示装置６０の表示画面における左方又は上方に位置させるように、最大個数の画像群画像を並べた表示画像を生成しても良い。

最大個数は、最大個数取得部１７０により取得される。
具体的には、例えば、最大個数は、メタデータ記憶装置４０に予め記憶されている。最大個数取得部１７０は、例えば、表示画像生成部１４０が生成する表示画像に並べる画像群画像の最大個数を、メタデータ記憶装置４０から読み出すことにより取得する。最大個数は、予め最大個数取得部１７０が有していても良い。

図４は、実施の形態１に係る表示画像生成部１４０が生成する表示画像２００の一例を示す説明図である。
図４に示す表示画像２００は、一例として、メタデータベースに登録されたメタデータ及び優先度が図３に示すものである場合、且つ、第１メタデータが普通自動車を示すメタデータであり、最大個数取得部１７０が取得する最大個数が５である場合において、表示画像生成部１４０が生成したものである。
第１メタデータが普通自動車を示すメタデータであるため、例えば、第２メタデータは、図３に示すように、普通自動車、軽自動車、トラック、バス、自動二輪車、及び、自転車等のそれぞれを示すメタデータとなる。
図４に示す表示画像２００は、普通自動車、軽自動車、トラック、バス、自動二輪車、及び、自転車等のそれぞれを示すメタデータのうち、優先度が最も高い普通自動車から優先度が５番に高いトラックまでの５個のメタデータのそれぞれに該当する画像メタデータに対応する画像データ群を表す５個の画像群画像２０１，２０２，２０３，２０４，２０５を有している。

例えば、画像群画像２０１は、優先度が最も高い普通自動車を示すメタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像であり、当該画像データ群に含まれる３個の画像データに基づいて生成されている。
また、画像群画像２０２は、優先度が２番に高い自動二輪車を示すメタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像であり、当該画像データ群に含まれる１個の画像データに基づいて生成されている。
同様に、画像群画像２０３は、優先度が３番に高い自転車を示すメタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像、画像群画像２０４は、優先度が４番に高いトラックを示すメタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像、及び、画像群画像２０５は、優先度が４番に高い軽自動車を示すメタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像である。

図４に示す画像群画像２０１は、画像データ群に含まれる３個の画像データに基づいて生成されたものであるが、画像データ群に含まれる２個以下の画像データに基づいて生成されたものであっても、画像データ群に含まれる４個以上の画像データに基づいて生成されたものであっても良い。また、図４に示す画像群画像２０２，２０３，２０４，２０５は、画像データ群に含まれる１個の画像データに基づいて生成されたものであるが、画像データ群に含まれる２個以上の画像データに基づいて生成されたものであっても良い。

以上のように構成することにより、画像検索装置１００は、優先度が高い第２メタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像２０１，２０２，２０３，２０４，２０５について、優先度が高い順に予め定められた個数の画像群画像だけが表示される表示画像２００を、表示装置６０を介してユーザに提供することができる。

なお、画像データ取得部１３０は、第２メタデータ取得部１２０が取得する１以上の第２メタデータのうち、優先度取得部１６０が取得する優先度の高いものから順に、最大個数取得部１７０が取得する最大個数に相当する数以下の第２メタデータを選択し、選択した第２メタデータのそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群だけを第２メタデータ毎に取得しても良い。
このように構成することにより、画像検索装置１００は、表示画像生成部１４０が画像群画像を生成する必要のない第２メタデータに該当する画像メタデータに対応する画像データ群を取得する必要がなくなる。そのため、画像検索装置１００は、表示装置６０に表示画像情報を出力するまでに掛かる時間を削減することができる。

選択群取得部１５０は、操作取得部１０１が取得した操作情報から、画像データ取得部１３０が取得した１以上の画像データ群のうち、選択された画像データ群がいずれであるかを示す選択群情報を取得する。
具体的には、例えば、ユーザは、表示装置６０を介してユーザに提供さえれた図４に示す表示画像２００が有する１以上の画像群画像である５個の画像群画像２０１，２０２，２０３，２０４，２０５のうち、１個以上の画像群画像を選択するユーザ操作を、操作入力装置５０を用いて行う。操作取得部１０１は、当該ユーザ操作を示す操作情報を操作入力装置５０から取得する。選択群取得部１５０は、このようにして、操作取得部１０１が取得した操作情報から選択群情報を取得する。

表示画像生成部１４０は、選択群取得部１５０が取得した選択群情報が示す画像データ群に含まれる１以上の画像データが示す画像を並べて、当該１以上の画像を一覧表示可能な表示画像を生成する。
このように構成することにより、画像検索装置１００は、ユーザが最初に入力した検索条件が正確なものでない場合であっても、ユーザが所望の画像を検索できるようにすることができる。

画像検索装置１００は、選択群取得部１５０が取得した選択群情報が示す画像データ群に対応する画像メタデータに相当する第２メタデータに対応付けられて予め付与された優先度を変更しても良い。例えば、当該変更は、優先度変更部１８０が、優先度取得部１６０が取得する優先度を変更することにより行われる。
具体的には、優先度変更部１８０は、優先度取得部１６０が取得する１以上の優先度のうち、選択群取得部１５０が取得した選択群情報が示す画像データ群に対応する画像メタデータに相当する第２メタデータに対応付けられて予め付与された優先度を変更する。

より具体的には、例えば、優先度変更部１８０は、優先度取得部１６０が取得する１以上の優先度のうち、選択群取得部１５０が取得した選択群情報が示す画像データ群に対応する画像メタデータに相当する第２メタデータに対応付けられた優先度であって、メタデータ記憶装置４０が有するメタデータベースに予め登録された優先度を、より高い優先度になるように変更する。
このように構成することにより、画像検索装置１００は、ユーザが最初に入力した検索条件が正確なものでない場合であっても、ユーザが所望の画像を検索できるようにすることができるようにしつつ、ユーザが過去に一覧表示させた画像データ群に対応する画像メタデータに相当するメタデータの優先度を高くすることにより、ユーザが所望の画像をより検索しやすくすることができる。

図５Ａ及び図５Ｂは、実施の形態１に係る画像検索装置１００のハードウェア構成の一例を示す図である。
当該図を参照して、実施の形態１に係る画像検索装置１００の要部のハードウェア構成について説明する。

図５Ａに示す如く、画像検索装置１００はコンピュータにより構成されており、当該コンピュータはプロセッサ５０１及びメモリ５０２を有している。メモリ５０２には、当該コンピュータを、操作取得部１０１、第１メタデータ取得部１１０、第２メタデータ取得部１２０、画像データ取得部１３０、表示画像生成部１４０、表示画像出力部１９９、選択群取得部１５０、優先度取得部１６０、最大個数取得部１７０、及び、優先度変更部１８０として機能させるためのプログラムが記憶されている。メモリ５０２に記憶されているプログラムをプロセッサ５０１が読み出して実行することにより、操作取得部１０１、第１メタデータ取得部１１０、第２メタデータ取得部１２０、画像データ取得部１３０、表示画像生成部１４０、表示画像出力部１９９、選択群取得部１５０、優先度取得部１６０、最大個数取得部１７０、及び、優先度変更部１８０の機能が実現される。

また、図５Ｂに示す如く、画像検索装置１００は処理回路５０３により構成されても良い。この場合、操作取得部１０１、第１メタデータ取得部１１０、第２メタデータ取得部１２０、画像データ取得部１３０、表示画像生成部１４０、表示画像出力部１９９、選択群取得部１５０、優先度取得部１６０、最大個数取得部１７０、及び、優先度変更部１８０の機能が処理回路５０３により実現されても良い。

また、画像検索装置１００はプロセッサ５０１、メモリ５０２及び処理回路５０３により構成されても良い（不図示）。この場合、操作取得部１０１、第１メタデータ取得部１１０、第２メタデータ取得部１２０、画像データ取得部１３０、表示画像生成部１４０、表示画像出力部１９９、選択群取得部１５０、優先度取得部１６０、最大個数取得部１７０、及び、優先度変更部１８０の機能のうちの一部の機能がプロセッサ５０１及びメモリ５０２により実現されて、残余の機能が処理回路５０３により実現されるものであっても良い。

プロセッサ５０１は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、マイクロプロセッサ、マイクロコントローラ又はＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）を用いたものである。

メモリ５０２は、例えば、半導体メモリ又は磁気ディスクを用いたものである。より具体的には、メモリ５０２は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、フラッシュメモリ、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ−Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＳＳＤ、又は、ＨＤＤなどを用いたものである。

処理回路５０３は、例えば、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ Ｓｐｅｃｉｆｉｃ Ｉｎｔｅｇｒａｔｅｄ Ｃｉｒｃｕｉｔ）、ＰＬＤ（Ｐｒｏｇｒａｍｍａｂｌｅ Ｌｏｇｉｃ Ｄｅｖｉｃｅ）、ＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ Ｇａｔｅ Ａｒｒａｙ）、ＳｏＣ（Ｓｙｓｔｅｍ−ｏｎ−ａ−Ｃｈｉｐ）又はシステムＬＳＩ（Ｌａｒｇｅ−Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）を用いたものである。

図６Ａ及び図６Ｂを参照して、実施の形態１に係る画像検索装置１００の動作について説明する。
図６Ａ及び図６Ｂは、実施の形態１に係る画像検索装置１００の処理の一例を説明するフローチャートであり、図６Ａは、実施の形態１に係る画像検索装置１００の処理の一部を示し、図６Ｂは、実施の形態１に係る画像検索装置１００の処理の残部を示すものである。
画像検索装置１００は、図６Ａ及び図６Ｂに示すフローチャートの処理を繰り返し実行する。

まず、ステップＳＴ６０１にて、操作取得部１０１は、操作情報を取得する。
次に、ステップＳＴ６０２にて、第１メタデータ取得部１１０は、操作情報が第１メタデータを指定する操作情報であるか否かを判定する。
ステップＳＴ６０２にて、第１メタデータ取得部１１０が、操作情報が第１メタデータを指定する操作情報でないと判定した場合については後述する。
ステップＳＴ６０２にて、第１メタデータ取得部１１０が、操作情報が第１メタデータを指定する操作情報であると判定した場合、ステップＳＴ６０３にて、第１メタデータ取得部１１０は、操作情報から第１メタデータを取得する。

ステップＳＴ６０３の後、ステップＳＴ６１１にて、第２メタデータ取得部１２０は、第１メタデータに基づいて第２メタデータを検索して、第１メタデータに相当する第２メタデータが存在するか否かを判定する。
ステップＳＴ６１１にて、第２メタデータ取得部１２０が第２メタデータを検索した結果、第２メタデータ取得部１２０が第１メタデータに相当する第２メタデータが存在しないと判定した場合、ステップＳＴ６２１にて、第２メタデータ取得部１２０は、メタデータ記憶装置４０が有するメタデータベースに第１メタデータに相当するメタデータを新規に追加登録する。なお、第２メタデータ取得部１２０は、がメタデータを新規に追加登録する際に、当該メタデータに対応する優先度を０等の予め定められた値として登録しても良い。
ステップＳＴ６２１の後、ステップＳＴ６２２にて、第２メタデータ取得部１２０は、第１メタデータを第２メタデータとして取得する。
ステップＳＴ６１１にて、第２メタデータ取得部１２０が第２メタデータを検索した結果、第１メタデータに相当する第２メタデータが１以上存在すると判定した場合、ステップＳＴ６１２にて、第２メタデータ取得部１２０は、当該１以上の第２メタデータを取得する。

ステップＳＴ６１２の後、又は、ステップＳＴ６２２の後、ステップＳＴ６３１にて、優先度取得部１６０は、１以上の第２メタデータのそれぞれに対応する優先度を取得する。
ステップＳＴ６３１の後、ステップＳＴ６３２にて、最大個数取得部１７０は、表示画像に並べる画像群画像の最大個数を取得する。
ステップＳＴ６３２の後、ステップＳＴ６３３にて、画像データ取得部１３０は、１以上の第２メタデータのそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群を第２メタデータ毎に取得する。なお、画像データ取得部１３０は、ステップＳＴ６３３において、優先度取得部１６０が取得する優先度に基づいて、最大個数取得部１７０が取得する最大個数を上限とする第２メタデータについて、画像データ群を取得しても良い。

ステップＳＴ６３３の後、ステップＳＴ６３４にて、表示画像生成部１４０は、画像データ取得部１３０が取得した１以上の画像データ群のそれぞれを表す画像群画像を生成する。なお、表示画像生成部１４０は、ステップＳＴ６３４において、優先度取得部１６０が取得する優先度に基づいて、最大個数取得部１７０が取得する最大個数を上限とする画像データ群について、画像群画像を生成しても良い。
ステップＳＴ６３４の後、ステップＳＴ６３５にて、表示画像生成部１４０は、ステップＳＴ６３４にて表示画像生成部１４０が生成した１以上の画像群画像を並べた表示画像を生成する。なお、表示画像生成部１４０は、ステップＳＴ６３５において、優先度取得部１６０が取得する優先度に基づいて、最大個数取得部１７０が取得する最大個数を上限とする画像群画像を並べた表示画像を生成しても良い。

ステップＳＴ６３５の後、ステップＳＴ６３６にて、表示画像出力部１９９は、表示画像生成部１４０が生成した表示画像を表示画像情報として出力する。
ステップＳＴ６３６の後、画像検索装置１００は、図６Ａ及び図６Ｂに示すフローチャートの処理を終了し、画像検索装置１００は、ステップＳＴ６０１の処理に戻って図６Ａ及び図６Ｂに示すフローチャートの処理を繰り返し実行する。

ステップＳＴ６０２にて、第１メタデータ取得部１１０が、操作情報が第１メタデータを指定する操作情報でないと判定した場合について説明する。
当該場合、ステップＳＴ６４１にて、選択群取得部１５０は、表示画像出力部１９９が直前に出力した表示画像情報が、１以上の画像群画像を並べた表示画像を示す表示画像情報であるか否かを判定する。
ステップＳＴ６４１にて、選択群取得部１５０が、直前に出力された表示画像情報が、１以上の画像群画像を並べた表示画像を示す表示画像情報でないと判定した場合、画像検索装置１００は、図６Ａ及び図６Ｂに示すフローチャートの処理を終了し、画像検索装置１００は、ステップＳＴ６０１の処理に戻って図６Ａ及び図６Ｂに示すフローチャートの処理を繰り返し実行する。

ステップＳＴ６４１にて、選択群取得部１５０が、直前に出力された表示画像情報が、１以上の画像群画像を並べた表示画像を示す表示画像情報であると判定した場合、ステップＳＴ６４２にて、選択群取得部１５０は、操作情報が選択群情報であるか否かを判定する。
ステップＳＴ６４２にて、選択群取得部１５０が、操作情報が選択群情報でないと判定した場合、画像検索装置１００は、図６Ａ及び図６Ｂに示すフローチャートの処理を終了し、画像検索装置１００は、ステップＳＴ６０１の処理に戻って図６Ａ及び図６Ｂに示すフローチャートの処理を繰り返し実行する。

ステップＳＴ６４２にて、選択群取得部１５０が、操作情報が選択群情報であると判定した場合、ステップＳＴ６４３にて、選択群取得部１５０は、選択群情報を取得する。
ステップＳＴ６４３の後、ステップＳＴ６４４にて、優先度変更部１８０は、選択群情報が示す画像データ群に対応する画像メタデータに相当する第２メタデータに対応付けられて予め付与された優先度を変更する。

ステップＳＴ６４４の後、ステップＳＴ６４５にて、表示画像生成部１４０は、選択群情報が示す画像データ群に含まれる１以上の画像データが示す画像を並べた表示画像を生成する。
ステップＳＴ６４５の後、ステップＳＴ６４６にて、表示画像出力部１９９は、表示画像生成部１４０が生成した表示画像を表示画像情報として出力する。
ステップＳＴ６４６の後、画像検索装置１００は、図６Ａ及び図６Ｂに示すフローチャートの処理を終了し、画像検索装置１００は、ステップＳＴ６０１の処理に戻って図６Ａ及び図６Ｂに示すフローチャートの処理を繰り返し実行する。

以上のように、画像検索装置１００は、ユーザ操作に基づく操作情報を取得する操作取得部１０１と、操作取得部１０１が取得した操作情報から第１メタデータを取得する第１メタデータ取得部１１０と、第１メタデータ取得部１１０が取得した第１メタデータに基づいて、第１メタデータに関連する１以上の第２メタデータを取得する第２メタデータ取得部１２０と、第２メタデータ取得部１２０が取得する１以上の第２メタデータに基づいて、第２メタデータのそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群を第２メタデータ毎に取得する画像データ取得部１３０と、表示画像を生成する表示画像生成部１４０であって、画像データ取得部１３０が取得した１以上の画像データ群のそれぞれを表す画像群画像を生成し、生成した１以上の画像群画像を並べた表示画像を生成する表示画像生成部１４０と、表示画像生成部１４０が生成した表示画像を表示画像情報として出力する表示画像出力部１９９と、を備えた。
このように構成することで、画像検索装置１００は、最初に入力された検索条件に該当する画像だけでなく、関連する画像も検索することができる。そのため、画像検索装置１００は、最初に入力された検索条件が正確なものでない場合であっても、所望の画像を検索することができる。したがって、ユーザは、ユーザが最初に入力する検索条件が正確なものでない場合であっても、所望の画像を検索することができる。

また、以上のように、画像検索装置１００は、上述の構成に加えて、操作取得部１０１が取得した操作情報から、画像データ取得部１３０が取得した１以上の画像データ群のうち、選択された画像データ群がいずれであるかを示す選択群情報を取得する選択群取得部１５０を備え、表示画像生成部１４０は、選択群取得部１５０が取得した選択群情報が示す画像データ群に含まれる１以上の画像データが示す画像を並べた表示画像を生成するように構成した。
このように構成することで、画像検索装置１００は、最初に入力された検索条件が正確なものでない場合であっても、所望の画像を検索することができる。そのため、ユーザは、ユーザが最初に入力する検索条件が正確なものでない場合であっても、所望の画像を検索することができる。

また、以上のように、画像検索装置１００は、上述の構成に加えて、第２メタデータ取得部１２０が取得する１以上の第２メタデータのそれぞれに対応付けられて予め付与された優先度を取得する優先度取得部１６０を備え、表示画像生成部１４０は、優先度取得部１６０が取得する優先度に用いて、生成する１以上の画像群画像のそれぞれの態様、又は、生成した１以上の画像群画像を並べる態様を決定し、決定した態様に基づいて、１以上の画像群画像を並べた表示画像を生成するように構成した。
このように構成することで、画像検索装置１００は、最初に入力された検索条件が正確なものでない場合であっても、所望の画像を検索することができるようにしつつ、優先度が高い第２メタデータに該当する画像メタデータに対応する画像データ群を、優先度が低い第２メタデータに該当する画像メタデータに対応する画像データ群と比較して、視覚的に目立たせるようにした表示画像を、表示装置６０を介してユーザに提供することができる。

また、以上のように、画像検索装置１００は、上述の構成に加えて、第２メタデータ取得部１２０が取得する１以上の第２メタデータのそれぞれに対応付けられて予め付与された優先度を取得する優先度取得部１６０と、表示画像生成部１４０が生成する表示画像に並べる画像群画像の最大個数を取得する最大個数取得部１７０と、を備え、表示画像生成部１４０は、優先度取得部１６０が取得する優先度と、最大個数取得部１７０が取得する最大個数とを用いて、生成する１以上の画像群画像のそれぞれの態様、又は、生成した１以上の画像群画像を並べる態様を決定し、決定した態様に基づいて、１以上の画像群画像を並べた表示画像を生成するように構成した。
このように構成することで、画像検索装置１００は、最初に入力された検索条件が正確なものでない場合であっても、所望の画像を検索することができるようにしつつ、優先度が高い第２メタデータに該当する画像メタデータに対応する画像データ群を表す画像群画像について、予め定められた個数だけ表示される表示画像を、表示装置６０を介してユーザに提供することができる。

また、以上のように、画像検索装置１００は、上述の構成に加えて、第２メタデータ取得部１２０が取得する１以上の第２メタデータのそれぞれに対応付けられて予め付与された優先度を取得する優先度取得部１６０と、表示画像生成部１４０が生成する表示画像に並べる画像群画像の最大個数を取得する最大個数取得部１７０と、を備え、画像データ取得部１３０は、第２メタデータ取得部１２０が取得する１以上の第２メタデータのうち、優先度取得部１６０が取得する優先度の高いものから順に、最大個数取得部１７０が取得する最大個数に相当する数以下の第２メタデータを選択し、選択した第２メタデータのそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群を第２メタデータ毎に取得するように構成した。
このように構成することで、画像検索装置１００は、表示画像生成部１４０が画像群画像を生成する必要のない第２メタデータに該当する画像メタデータに対応する画像データ群を取得する必要がなくなる。そのため、画像検索装置１００は、表示装置６０に表示画像情報を出力するまでに掛かる時間を削減することができる。

また、以上のように、画像検索装置１００は、上述の構成に加えて、操作取得部１０１が取得した操作情報から、画像データ取得部１３０が取得した１以上の画像データ群のうち、選択された画像データ群がいずれであるかを示す選択群情報を取得する選択群取得部１５０と、第２メタデータ取得部１２０が取得する１以上の第２メタデータのそれぞれに対応付けられて予め付与された優先度を取得する優先度取得部１６０と、優先度取得部１６０が取得する優先度を変更する優先度変更部１８０と、を備え、優先度変更部１８０は、優先度取得部１６０が取得する１以上の優先度のうち、選択群取得部１５０が取得した選択群情報が示す画像データ群に対応する画像メタデータに相当する第２メタデータに対応付けられて予め付与された優先度を変更するように構成した。
このように構成することで、画像検索装置１００は、ユーザが最初に入力した検索条件が正確なものでない場合であっても、ユーザが所望の画像を検索できるようにすることができるようにしつつ、ユーザが過去に一覧表示させた画像データ群に対応する画像メタデータに相当するメタデータの優先度を高くすることにより、ユーザが所望の画像をより検索しやすくすることができる。

実施の形態２．
図７並びに図８Ａ及び図８Ｂを参照して、実施の形態２に係る画像検索装置１００ａについて説明する。
実施の形態２に係る画像検索装置１００ａが適用された画像検索システム１ａ（不図示）は、図１に一例として示す実施の形態１に係る画像検索システム１が備える画像検索装置１００が、画像検索装置１００ａに変更されたものに過ぎない。そのため、実施の形態２に係る画像検索システム１ａの要部の構成の一例を示すブロック図の記載については省略する。また、画像検索システム１ａが、実施の形態１に係る画像検索システム１と同様に備える撮像装置１０、画像蓄積装置２０、画像記憶装置３０、メタデータ記憶装置４０、操作入力装置５０、表示装置６０、及び、ネットワーク７０の説明については省略する。
実施の形態１では、ユーザが最初に入力する検索条件である第１メタデータが、１個の場合について説明したが、ユーザが最初に入力する第１メタデータは、１個に限定されるものではなく、２個以上であっても良い。
実施の形態２では、一例として、ユーザが最初に入力する第１メタデータが、２個の場合について説明する。

図７を参照して、実施の形態２に係る画像検索装置１００ａの要部の構成について説明する。
図７は、実施の形態２に係る画像検索装置１００ａの要部の構成の一例を示すブロック図である。
画像検索装置１００ａは、操作取得部１０１、第１メタデータ取得部１１０ａ、第２メタデータ取得部１２０ａ、画像データ取得部１３０ａ、表示画像生成部１４０ａ、及び、表示画像出力部１９９を備える。
画像検索装置１００ａは、上述の構成に加えて、選択群取得部１５０、優先度取得部１６０ａ、最大個数取得部１７０、及び、優先度変更部１８０ａ等を備えるものであっても良い。
実施の形態２に係る画像検索装置１００ａは、操作取得部１０１、第１メタデータ取得部１１０ａ、第２メタデータ取得部１２０ａ、画像データ取得部１３０ａ、表示画像生成部１４０ａ、選択群取得部１５０、優先度取得部１６０ａ、最大個数取得部１７０、優先度変更部１８０ａ、及び、表示画像出力部１９９を備えるものとして説明する。

画像検索装置１００ａは、実施の形態１に係る画像検索装置１００と比較して、実施の形態１に係る画像検索装置１００が備える操作取得部１０１、第１メタデータ取得部１１０、第２メタデータ取得部１２０、画像データ取得部１３０、表示画像生成部１４０、選択群取得部１５０、優先度取得部１６０、最大個数取得部１７０、優先度変更部１８０、及び、表示画像出力部１９９のうち、第１メタデータ取得部１１０、第２メタデータ取得部１２０、画像データ取得部１３０、表示画像生成部１４０、優先度取得部１６０、及び、優先度変更部１８０が、第１メタデータ取得部１１０ａ、第２メタデータ取得部１２０ａ、画像データ取得部１３０ａ、表示画像生成部１４０ａ、優先度取得部１６０ａ、及び、優先度変更部１８０ａに変更されたものである。
画像検索装置１００ａの構成において、実施の形態１に係る画像検索装置１００と同様の構成については、説明を省略する。

第１メタデータ取得部１１０ａは、実施の形態１に係る第１メタデータ取得部１１０が１個の第１メタデータを取得したのに対して、２個の第１メタデータを取得する。
なお、実施の形態２において、第１メタデータ取得部１１０ａが取得する２個の第１メタデータは、ＡＮＤ条件であるものとする。
また、第１メタデータ取得部１１０ａが取得する第１メタデータの個数は、２個に限定されるものではなく３個以上であっても良い。
実施の形態２では、第１メタデータ取得部１１０ａが第１撮像装置１１を示すメタデータと、第１イベントを示すメタデータとを２個の第１メタデータとして取得するものとして説明する。

第２メタデータ取得部１２０ａは、第１メタデータ取得部１１０が取得した複数の第１メタデータに基づいて、当該複数の第１メタデータのそれぞれについて、第１メタデータに関連する１以上の第２メタデータを取得する。
具体的には、例えば、第２メタデータ取得部１２０ａは、第１メタデータ取得部１１０が取得した２個の第１メタデータのそれぞれについて、第１メタデータに関連する１以上の第２メタデータを取得する。
第２メタデータ取得部１２０ａが第１メタデータに関連する１以上の第２メタデータを取得する方法は、実施の形態１に係る第２メタデータ取得部１２０が第１メタデータに関連する１以上の第２メタデータを取得する方法と同様であるため説明を省略する。
以下、実施の形態２では、メタデータ記憶装置４０が備えるメタデータベースに登録されているメタデータが図３に示すメタデータと同様であるものとして説明すする。
第２メタデータ取得部１２０ａは、第１撮像装置１１を示す第１メタデータに関連する第２メタデータとして、第１撮像装置１１を示すメタデータと、第２撮像装置１２を示すメタデータとを取得する。また、第２メタデータ取得部１２０ａは、第１イベントを示す第１メタデータに関連する第２メタデータとして、第１イベントを示すメタデータと、第２イベントを示すメタデータとを取得する。

画像データ取得部１３０ａは、第２メタデータ取得部１２０ａが取得した一方の第１メタデータに関連する１以上の第２メタデータのうちの１つと、第２メタデータ取得部１２０ａが取得した他方の第１メタデータに関連する１以上の第２メタデータのうちの１つとを順次組み合わせて、１以上の第２メタデータ組を生成する。画像データ取得部１３０ａは、生成した１以上の第２メタデータ組に基づいて、第２メタデータ組のそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群を第２メタデータ組毎に取得する。

具体的には、例えば、第２メタデータ取得部１２０ａが、第１撮像装置１１を示す第１メタデータに関連する第２メタデータとして、第１撮像装置１１を示すメタデータと、第２撮像装置１２を示すメタデータとを取得し、第１イベントを示す第１メタデータに関連する第２メタデータとして、第１イベントを示すメタデータと、第２イベントを示すメタデータとを取得する場合、画像データ取得部１３０ａは、第１撮像装置１１を示す第２メタデータと第１イベントを示す第２メタデータとを組み合わせた第２メタデータ組、第１撮像装置１１を示す第２メタデータと第２イベントを示す第２メタデータとを組み合わせた第２メタデータ組、第２撮像装置１２を示す第２メタデータと第１イベントを示す第２メタデータとを組み合わせた第２メタデータ組、及び、第２撮像装置１２を示す第２メタデータと第２イベントを示す第２メタデータとを組み合わせた第２メタデータ組の４個の第２メタデータ組を生成する。
画像データ取得部１３０ａは、生成した４個の第２メタデータ組のそれぞれに該当する画像メタデータに対応する画像データ群を第２メタデータ組毎に取得する。

表示画像生成部１４０ａは、画像データ取得部１３０ａが第２メタデータ組毎に取得した上述の４個の画像データ群のそれぞれを表す画像群画像を生成する。
更に、表示画像生成部１４０ａは、生成した１以上の画像群画像を並べた表示画像を生成する。

優先度取得部１６０ａは、第２メタデータ取得部１２０ａが取得した複数の第２メタデータのそれぞれの優先度を取得する。優先度取得部１６０ａは、取得した複数の第２メタデータのそれぞれの優先度を用いて、第２メタデータ組の優先度を算出することにより、第２メタデータ組の優先度を取得する。例えば、優先度取得部１６０ａは、第２メタデータ組に含まれる２以上の第２メタデータのそれぞれの優先度を加算することにより第２メタデータ組の優先度を取得する。第２メタデータ組の優先度を算出する方法は、第２メタデータ組に含まれる２以上の第２メタデータのそれぞれの優先度を加算する方法に限定されるものではない。表示画像生成部１４０ａは、例えば、第２メタデータ組に含まれる２以上の第２メタデータのそれぞれの優先度を乗算することにより第２メタデータ組の優先度を取得しても良いし、第２メタデータ組に含まれる２以上の第２メタデータのそれぞれの優先度を引数とする予め定められた計算式に基づいて、第２メタデータ組の優先度を算出して取得しても良い。

表示画像生成部１４０ａは、優先度取得部１６０ａが取得する第２メタデータの優先度に基づく第２メタデータ組の優先度に用いて、生成する１以上の画像群画像のそれぞれの態様、又は、生成した１以上の画像群画像を並べる態様を決定し、決定した態様に基づいて、１以上の画像群画像を並べた表示画像を生成しても良い。
また、表示画像生成部１４０ａは、優先度取得部１６０ａが取得する第２メタデータの優先度に基づく第２メタデータ組の優先度と、最大個数取得部１７０が取得する最大個数とを用いて、生成する１以上の画像群画像のそれぞれの態様、又は、生成した１以上の画像群画像を並べる態様を決定し、決定した態様に基づいて、１以上の画像群画像を並べた表示画像を生成しても良い。
１以上の画像群画像のそれぞれの態様、及び、１以上の画像群画像を並べる態様については、実施の形態１で説明したため、説明を省略する。

また、画像データ取得部１３０ａは、画像データ取得部１３０ａが生成した１以上の第２メタデータ組のうち、優先度取得部１６０ａが取得する第２メタデータの優先度に基づく第２メタデータ組の優先度の高いものから順に、最大個数取得部１７０が取得する最大個数に相当する数以下の第２メタデータ組を選択し、選択した第２メタデータ組のそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群を第２メタデータ組毎に取得しても良い。

優先度変更部１８０ａは、優先度取得部１６０ａが取得する複数の第２メタデータのそれぞれの優先度のうち、選択群取得部１５０が取得した選択群情報が示す画像データ群に対応する画像メタデータに相当する複数の第２メタデータのそれぞれに対応付けられて予め付与された優先度を変更する。
より具体的には、例えば、優先度変更部１８０ａは、優先度取得部１６０ａが取得する複数の第２メタデータのそれぞれの優先度のうち、選択群取得部１５０が取得した選択群情報が示す画像データ群に対応する画像メタデータに相当する複数の第２メタデータのそれぞれに対応付けられた優先度であって、メタデータ記憶装置４０が有するメタデータベースに予め登録された優先度を、より高い優先度になるように変更する。

画像検索装置１００ａの要部のハードウェア構成は、実施の形態１にて図５Ａ及び図５Ｂを参照して説明したものと同様であるため、図示及び説明を省略する。すなわち、操作取得部１０１、第１メタデータ取得部１１０ａ、第２メタデータ取得部１２０ａ、画像データ取得部１３０ａ、表示画像生成部１４０ａ、選択群取得部１５０、優先度取得部１６０ａ、最大個数取得部１７０、優先度変更部１８０ａ、及び、表示画像出力部１９９の各々の機能は、プロセッサ５０１及びメモリ５０２により実現されるものであっても良く、又は処理回路５０３により実現されるものであっても良い。

図８Ａ及び図８Ｂを参照して、実施の形態２に係る画像検索装置１００ａの動作について説明する。
図８Ａ及び図８Ｂは、実施の形態２に係る画像検索装置１００ａの処理の一例を説明するフローチャートであり、図８Ａは、実施の形態２に係る画像検索装置１００ａの処理の一部を示し、図８Ｂは、実施の形態２に係る画像検索装置１００ａの処理の残部を示すものである。
画像検索装置１００ａは、図８Ａ及び図８Ｂに示すフローチャートの処理を繰り返し実行する。

まず、ステップＳＴ８０１にて、操作取得部１０１は、操作情報を取得する。
次に、ステップＳＴ８０２にて、第１メタデータ取得部１１０ａは、操作情報が第１メタデータを指定する操作情報であるか否かを判定する。
ステップＳＴ８０２にて、第１メタデータ取得部１１０ａが、操作情報が第１メタデータを指定する操作情報でないと判定した場合については後述する。
ステップＳＴ８０２にて、第１メタデータ取得部１１０ａが、操作情報が第１メタデータを指定する操作情報であると判定した場合、ステップＳＴ８０３にて、第１メタデータ取得部１１０ａは、操作情報から第１メタデータを取得する。
実施の形態２では、第１メタデータ取得部１１０ａは、複数の第１メタデータを取得したものとして説明する。なお、第１メタデータ取得部１１０ａが１個の第１メタデータを取得した場合については、上述の実施の形態１にて説明したため省略する。

ステップＳＴ８０３の後、画像検索装置１００ａは、複数の第１メタデータの全てについて、第１メタデータ毎に、以下のステップＳＴ８１１及びＳＴ８１２の処理、又は、ステップＳＴ８１１、ステップＳＴ８２１、及びステップＳＴ８２２の処理を行う。
ステップＳＴ８１１にて、第２メタデータ取得部１２０ａは、第１メタデータに基づいて第２メタデータを検索して、第１メタデータに相当する第２メタデータが存在するか否かを判定する。
ステップＳＴ８１１にて、第２メタデータ取得部１２０ａが第２メタデータを検索した結果、第２メタデータ取得部１２０ａが第１メタデータに相当する第２メタデータが存在しないと判定した場合、ステップＳＴ８２１にて、第２メタデータ取得部１２０ａは、メタデータ記憶装置４０が有するメタデータベースに第１メタデータに相当するメタデータを新規に追加登録する。なお、第２メタデータ取得部１２０ａは、がメタデータを新規に追加登録する際に、当該メタデータに対応する優先度を０等の予め定められた値として登録しても良い。
ステップＳＴ８２１の後、ステップＳＴ８２２にて、第２メタデータ取得部１２０ａは、第１メタデータを第２メタデータとして取得する。
ステップＳＴ８１１にて、第２メタデータ取得部１２０ａが第２メタデータを検索した結果、第１メタデータに相当する第２メタデータが１以上存在すると判定した場合、ステップＳＴ８１２にて、第２メタデータ取得部１２０ａは、当該１以上の第２メタデータを取得する。

画像検索装置１００ａは、複数の第１メタデータの全てについて、ステップＳＴ８１２の処理、又は、ステップＳＴ８２２の処理を行った後、ステップＳＴ８１３の処理を行う。
ステップＳＴ８１３にて、画像データ取得部１３０ａは、１以上の第２メタデータ組を生成する。
ステップＳＴ８１３の後、ステップＳＴ８３１にて、優先度取得部１６０ａは、複数の第２メタデータのそれぞれに対応する優先度を取得して、１以上の第２メタデータ組のそれぞれの優先度を算出する。
ステップＳＴ８３１の後、ステップＳＴ８３２にて、最大個数取得部１７０は、表示画像に並べる画像群画像の最大個数を取得する。
ステップＳＴ８３２の後、ステップＳＴ８３３にて、画像データ取得部１３０ａは、１以上の第２メタデータ組のそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群を第２メタデータ組毎に取得する。なお、画像データ取得部１３０ａは、ステップＳＴ８３３において、優先度取得部１６０ａが取得する優先度に基づいて、最大個数取得部１７０が取得する最大個数を上限とする第２メタデータ組について、画像データ群を取得しても良い。

ステップＳＴ８３３の後、ステップＳＴ８３４にて、表示画像生成部１４０ａは、画像データ取得部１３０ａが取得した１以上の画像データ群のそれぞれを表す画像群画像を生成する。なお、表示画像生成部１４０ａは、ステップＳＴ８３４において、優先度取得部１６０ａが取得する優先度に基づいて、最大個数取得部１７０が取得する最大個数を上限とする画像データ群について、画像群画像を生成しても良い。
ステップＳＴ８３４の後、ステップＳＴ８３５にて、表示画像生成部１４０ａは、ステップＳＴ８３４にて表示画像生成部１４０ａが生成した１以上の画像群画像を並べた表示画像を生成する。なお、表示画像生成部１４０ａは、ステップＳＴ８３５において、優先度取得部１６０ａが取得する優先度に基づいて、最大個数取得部１７０が取得する最大個数を上限とする画像群画像を並べた表示画像を生成しても良い。

ステップＳＴ８３５の後、ステップＳＴ８３６にて、表示画像出力部１９９は、表示画像生成部１４０ａが生成した表示画像を表示画像情報として出力する。
ステップＳＴ８３６の後、画像検索装置１００ａは、図８Ａ及び図８Ｂに示すフローチャートの処理を終了し、画像検索装置１００ａは、ステップＳＴ８０１の処理に戻って図８Ａ及び図８Ｂに示すフローチャートの処理を繰り返し実行する。

ステップＳＴ８０２にて、第１メタデータ取得部１１０ａが、操作情報が第１メタデータを指定する操作情報でないと判定した場合について説明する。
当該場合、ステップＳＴ８４１にて、選択群取得部１５０は、表示画像出力部１９９が直前に出力した表示画像情報が、１以上の画像群画像を並べた表示画像を示す表示画像情報であるか否かを判定する。
ステップＳＴ８４１にて、選択群取得部１５０が、直前に出力された表示画像情報が、１以上の画像群画像を並べた表示画像を示す表示画像情報でないと判定した場合、画像検索装置１００ａは、図８Ａ及び図８Ｂに示すフローチャートの処理を終了し、画像検索装置１００ａは、ステップＳＴ８０１の処理に戻って図８Ａ及び図８Ｂに示すフローチャートの処理を繰り返し実行する。

ステップＳＴ８４１にて、選択群取得部１５０が、直前に出力された表示画像情報が、１以上の画像群画像を並べた表示画像を示す表示画像情報であると判定した場合、ステップＳＴ８４２にて、選択群取得部１５０は、操作情報が選択群情報であるか否かを判定する。
ステップＳＴ８４２にて、選択群取得部１５０が、操作情報が選択群情報でないと判定した場合、画像検索装置１００ａは、図８Ａ及び図８Ｂに示すフローチャートの処理を終了し、画像検索装置１００ａは、ステップＳＴ８０１の処理に戻って図８Ａ及び図８Ｂに示すフローチャートの処理を繰り返し実行する。

ステップＳＴ８４２にて、選択群取得部１５０が、操作情報が選択群情報であると判定した場合、ステップＳＴ８４３にて、選択群取得部１５０は、選択群情報を取得する。
ステップＳＴ８４３の後、ステップＳＴ８４４にて、優先度変更部１８０ａは、選択群情報が示す画像データ群に対応する画像メタデータに相当する第２メタデータ組に含まれる第２メタデータに対応付けられて予め付与された優先度を変更する。

ステップＳＴ８４４の後、ステップＳＴ８４５にて、表示画像生成部１４０ａは、選択群情報が示す画像データ群に含まれる１以上の画像データが示す画像を並べた表示画像を生成する。
ステップＳＴ８４５の後、ステップＳＴ８４６にて、表示画像出力部１９９は、表示画像生成部１４０ａが生成した表示画像を表示画像情報として出力する。
ステップＳＴ８４６の後、画像検索装置１００ａは、図８Ａ及び図８Ｂに示すフローチャートの処理を終了し、画像検索装置１００ａは、ステップＳＴ８０１の処理に戻って図８Ａ及び図８Ｂに示すフローチャートの処理を繰り返し実行する。

実施の形態３．
図９並びに図１０Ａ及び図１０Ｂを参照して、実施の形態３に係る画像検索装置１００ｂについて説明する。
実施の形態３に係る画像検索装置１００ｂが適用された画像検索システム１ｂ（不図示）は、図１に一例として示す実施の形態１に係る画像検索システム１が備える画像検索装置１００が、画像検索装置１００ｂに変更されたものに過ぎない。そのため、実施の形態３に係る画像検索システム１ｂの要部の構成の一例を示すブロック図の記載については省略する。また、画像検索システム１ｂが、実施の形態１に係る画像検索システム１と同様に備える撮像装置１０、画像蓄積装置２０、画像記憶装置３０、メタデータ記憶装置４０、操作入力装置５０、表示装置６０、及び、ネットワーク７０の説明については省略する。

図９を参照して、実施の形態３に係る画像検索装置１００ｂの要部の構成について説明する。
図９は、実施の形態３に係る画像検索装置１００ｂの要部の構成の一例を示すブロック図である。
画像検索装置１００ｂは、操作取得部１０１、第１メタデータ取得部１１０、第２メタデータ取得部１２０ｂ、画像データ取得部１３０、表示画像生成部１４０、選択群取得部１５０、優先度取得部１６０ｂ、最大個数取得部１７０、優先度変更部１８０ｂ、カテゴリ取得部１９０、及び、表示画像出力部１９９を備える。

画像検索装置１００ｂは、実施の形態１に係る画像検索装置１００と比較して、実施の形態１に係る画像検索装置１００が備えていないカテゴリ取得部１９０を備え、実施の形態１に係る画像検索装置１００が備える第２メタデータ取得部１２０、優先度取得部１６０、及び、優先度変更部１８０が、第２メタデータ取得部１２０ｂ、優先度取得部１６０ｂ、及び、優先度変更部１８０ｂに変更されたものである。
画像検索装置１００ｂの構成において、実施の形態１に係る画像検索装置１００と同様の構成については、説明を省略する。
なお、実施の形態３では、画像検索装置１００ｂは、実施の形態１に係る画像検索装置１００を変形したものとして説明するが、実施の形態２に係る画像検索装置１００ａを変形したものであっても良い。すなわち、画像検索装置１００ｂは、実施の形態２に係る画像検索装置１００ａと比較して、実施の形態２に係る画像検索装置１００ａが備えていないカテゴリ取得部１９０を備え、実施の形態２に係る画像検索装置１００ａが備える第２メタデータ取得部１２０ａ、優先度取得部１６０ａ、及び、優先度変更部１８０ａが、第２メタデータ取得部１２０ｂ、優先度取得部１６０ｂ、優先度変更部１８０ｂに変更されたものであっても良い。

カテゴリ取得部１９０は、カテゴリ分類を示すカテゴリ情報を取得する。カテゴリ分類とは、操作入力装置５０に対して入力操作を行う１以上のユーザのそれぞれを示すユーザ識別情報によるユーザ分類、１以上の撮像装置１０のそれぞれを示す撮像装置識別情報による撮像装置分類、又は、１以上の撮像装置１０により構成される１以上の撮像装置組のそれぞれを示す撮像装置組識別情報による撮像装置組分類等である。
上述のユーザ分類、撮像装置分類、又は、撮像装置組分類等は、カテゴリ分類の一例に過ぎず、カテゴリ分類は、ユーザ分類、撮像装置分類、又は、撮像装置組分類等に限定されるものではない。例えば、カテゴリ分類は、撮像装置１０が監視カメラである場合、１以上の監視領域のそれぞれを示す監視領域識別情報による監視領域分類であっても良い。
カテゴリ取得部１９０は、例えば、操作取得部１０１が取得する操作情報からカテゴリ情報を取得する。

第２メタデータ取得部１２０ｂは、第１メタデータ取得部１１０が取得した第１メタデータと、カテゴリ取得部１９０が取得するカテゴリ情報とに基づいて、第１メタデータに関連するメタデータのうち、カテゴリ情報が示すカテゴリ分類に属する１以上のメタデータを第２メタデータとして取得する。

具体的には、例えば、第２メタデータ取得部１２０ｂは、第１メタデータ取得部１１０が取得した第１メタデータに基づいて、第１メタデータに関連する１以上の第２メタデータを、メタデータ記憶装置４０から読み出すことにより取得する。メタデータ記憶装置４０は、例えば、１以上のカテゴリ分類のそれぞれに対応するメタデータベースを備え、メタデータベースのそれぞれは、互いに関連する１以上のメタデータを１つのメタデータグループに対応付けて記憶する。
第２メタデータ取得部１２０ｂは、カテゴリ取得部１９０が取得するカテゴリ情報が示すカテゴリ分類に対応するメタデータベースを用いて、第１メタデータ取得部１１０が取得した第１メタデータに関連する１以上の第２メタデータを、メタデータ記憶装置４０から読み出すことにより取得する。

例えば、画像を検索する際に、ユーザが所望する画像は、ユーザ毎に異なる。例えば、ユーザ毎に対応するメタデータベースを予め用意し、画像検索装置１００ｂが、画像検索装置１００ｂを使用するユーザに対応するメタデータベースを用いて第２メタデータを取得することにより、画像検索装置１００ｂを使用するユーザは、所望する画像を発見しやすくなる。
また、例えば、撮像装置１０毎に対応するメタデータベースを予め用意し、画像検索装置１００ｂが、カテゴリ分類情報が示すカテゴリ分類である撮像装置１０に対応するメタデータベースを用いて第２メタデータを取得することにより、画像検索装置１００ｂを使用するユーザは、所望する画像を発見しやすくなる。
また、例えば、撮像装置組毎に対応するメタデータベースを予め用意し、画像検索装置１００ｂが、カテゴリ分類情報が示すカテゴリ分類である撮像装置組に対応するメタデータベースを用いて第２メタデータを取得することにより、画像検索装置１００ｂを使用するユーザは、所望する画像を発見しやすくなる。

優先度取得部１６０ｂは、第２メタデータ取得部１２０ｂが取得する１以上の第２メタデータのそれぞれに対応付けられて予め付与された優先度を、当該カテゴリ情報が示すカテゴリ分類に対応するメタデータベースを用いて検索することにより取得する。
優先度変更部１８０ｂは、選択群取得部１５０が取得した選択群情報が示す画像データ群に対応する画像メタデータに相当する第２メタデータに対応付けられた優先度であって、該カテゴリ情報が示すカテゴリ分類に対応するメタデータベースに予め登録された優先度を、より高い優先度になるように変更する。

画像検索装置１００ｂの要部のハードウェア構成は、実施の形態１にて図５Ａ及び図５Ｂを参照して説明したものと同様であるため、図示及び説明を省略する。すなわち、操作取得部１０１、第１メタデータ取得部１１０、第２メタデータ取得部１２０ｂ、画像データ取得部１３０、表示画像生成部１４０、選択群取得部１５０、優先度取得部１６０ｂ、最大個数取得部１７０、優先度変更部１８０ｂ、カテゴリ取得部１９０、及び、表示画像出力部１９９の各々の機能は、プロセッサ５０１及びメモリ５０２により実現されるものであっても良く、又は処理回路５０３により実現されるものであっても良い。

図１０Ａ及び図１０Ｂを参照して、実施の形態３に係る画像検索装置１００ｂの動作について説明する。
図１０Ａ及び図１０Ｂは、実施の形態３に係る画像検索装置１００ｂの処理の一例を説明するフローチャートであり、図１０Ａは、実施の形態３に係る画像検索装置１００ｂの処理の一部を示し、図１０Ｂは、実施の形態３に係る画像検索装置１００ｂの処理の残部を示すものである。
画像検索装置１００ｂは、図１０Ａ及び図１０Ｂに示すフローチャートの処理を繰り返し実行する。

まず、ステップＳＴ１０００にて、カテゴリ取得部１９０は、カテゴリ情報を取得する。
ステップＳＴ１０００の後、ステップＳＴ１００１にて、操作取得部１０１は、操作情報を取得する。
次に、ステップＳＴ１００２にて、第１メタデータ取得部１１０は、操作情報が第１メタデータを指定する操作情報であるか否かを判定する。
ステップＳＴ１００２にて、第１メタデータ取得部１１０が、操作情報が第１メタデータを指定する操作情報でないと判定した場合については後述する。
ステップＳＴ１００２にて、第１メタデータ取得部１１０が、操作情報が第１メタデータを指定する操作情報であると判定した場合、ステップＳＴ１００３にて、第１メタデータ取得部１１０は、操作情報から第１メタデータを取得する。

ステップＳＴ１００３の後、ステップＳＴ１０１１にて、第２メタデータ取得部１２０ｂは、カテゴリ情報と第１メタデータとに基づいて第２メタデータを検索して、第１メタデータに相当し、且つ、カテゴリ情報が示すカテゴリ分類に属する第２メタデータが存在するか否かを判定する。
ステップＳＴ１０１１にて、第２メタデータ取得部１２０ｂが第２メタデータを検索した結果、第２メタデータ取得部１２０ｂが第１メタデータに相当し、且つ、当該カテゴリ分類に属する第２メタデータが存在しないと判定した場合、ステップＳＴ１０２１にて、第２メタデータ取得部１２０ｂは、当該カテゴリ分類に対応するメタデータベースに、第１メタデータに相当するメタデータを新規に追加登録する。なお、第２メタデータ取得部１２０ｂは、がメタデータを新規に追加登録する際に、当該メタデータに対応する優先度を０等の予め定められた値として登録しても良い。
ステップＳＴ１０２１の後、ステップＳＴ１０２２にて、第２メタデータ取得部１２０ｂは、第１メタデータを第２メタデータとして取得する。
ステップＳＴ１０１１にて、第２メタデータ取得部１２０ｂが第２メタデータを検索した結果、第１メタデータに相当し、且つ、当該カテゴリ分類に属する第２メタデータが１以上存在すると判定した場合、ステップＳＴ１０１２にて、第２メタデータ取得部１２０ｂは、当該１以上の第２メタデータを取得する。

ステップＳＴ１０１２の後、又は、ステップＳＴ１０２２の後、ステップＳＴ１０３１にて、優先度取得部１６０ｂは、１以上の第２メタデータのそれぞれに対応する優先度を取得する。
ステップＳＴ１０３１の後、ステップＳＴ１０３２にて、最大個数取得部１７０は、表示画像に並べる画像群画像の最大個数を取得する。
ステップＳＴ１０３２の後、ステップＳＴ１０３３にて、画像データ取得部１３０は、１以上の第２メタデータのそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群を第２メタデータ毎に取得する。なお、画像データ取得部１３０は、ステップＳＴ１０３３において、優先度取得部１６０ｂが取得する優先度に基づいて、最大個数取得部１７０が取得する最大個数を上限とする第２メタデータについて、画像データ群を取得しても良い。

ステップＳＴ１０３３の後、ステップＳＴ１０３４にて、表示画像生成部１４０は、画像データ取得部１３０が取得した１以上の画像データ群のそれぞれを表す画像群画像を生成する。なお、表示画像生成部１４０は、ステップＳＴ１０３４において、優先度取得部１６０ｂが取得する優先度に基づいて、最大個数取得部１７０が取得する最大個数を上限とする画像データ群について、画像群画像を生成しても良い。
ステップＳＴ１０３４の後、ステップＳＴ１０３５にて、表示画像生成部１４０は、ステップＳＴ１０３４にて表示画像生成部１４０が生成した１以上の画像群画像を並べた表示画像を生成する。なお、表示画像生成部１４０は、ステップＳＴ１０３５において、優先度取得部１６０ｂが取得する優先度に基づいて、最大個数取得部１７０が取得する最大個数を上限とする画像群画像を並べた表示画像を生成しても良い。

ステップＳＴ１０３５の後、ステップＳＴ１０３６にて、表示画像出力部１９９は、表示画像生成部１４０が生成した表示画像を表示画像情報として出力する。
ステップＳＴ１０３６の後、画像検索装置１００ｂは、図１０Ａ及び図１０Ｂに示すフローチャートの処理を終了し、画像検索装置１００ｂは、ステップＳＴ１００１の処理に戻って図１０Ａ及び図１０Ｂに示すフローチャートの処理を繰り返し実行する。

ステップＳＴ１００２にて、第１メタデータ取得部１１０が、操作情報が第１メタデータを指定する操作情報でないと判定した場合について説明する。
当該場合、ステップＳＴ１０４１にて、選択群取得部１５０は、表示画像出力部１９９が直前に出力した表示画像情報が、１以上の画像群画像を並べた表示画像を示す表示画像情報であるか否かを判定する。
ステップＳＴ１０４１にて、選択群取得部１５０が、直前に出力された表示画像情報が、１以上の画像群画像を並べた表示画像を示す表示画像情報でないと判定した場合、画像検索装置１００ｂは、図１０Ａ及び図１０Ｂに示すフローチャートの処理を終了し、画像検索装置１００ｂは、ステップＳＴ１００１の処理に戻って図１０Ａ及び図１０Ｂに示すフローチャートの処理を繰り返し実行する。

ステップＳＴ１０４１にて、選択群取得部１５０が、直前に出力された表示画像情報が、１以上の画像群画像を並べた表示画像を示す表示画像情報であると判定した場合、ステップＳＴ１０４２にて、選択群取得部１５０は、操作情報が選択群情報であるか否かを判定する。
ステップＳＴ１０４２にて、選択群取得部１５０が、操作情報が選択群情報でないと判定した場合、画像検索装置１００ｂは、図１０Ａ及び図１０Ｂに示すフローチャートの処理を終了し、画像検索装置１００ｂは、ステップＳＴ１００１の処理に戻って図１０Ａ及び図１０Ｂに示すフローチャートの処理を繰り返し実行する。

ステップＳＴ１０４２にて、選択群取得部１５０が、操作情報が選択群情報であると判定した場合、ステップＳＴ１０４３にて、選択群取得部１５０は、選択群情報を取得する。
ステップＳＴ１０４３の後、ステップＳＴ１０４４にて、優先度変更部１８０ｂは、選択群情報が示す画像データ群に対応する画像メタデータに相当し、且つ、カテゴリ情報が示すカテゴリ分類に属する第２メタデータに対応付けられて予め付与された優先度を変更する。

ステップＳＴ１０４４の後、ステップＳＴ１０４５にて、表示画像生成部１４０は、選択群情報が示す画像データ群に含まれる１以上の画像データが示す画像を並べた表示画像を生成する。
ステップＳＴ１０４５の後、ステップＳＴ１０４６にて、表示画像出力部１９９は、表示画像生成部１４０が生成した表示画像を表示画像情報として出力する。
ステップＳＴ１０４６の後、画像検索装置１００ｂは、図１０Ａ及び図１０Ｂに示すフローチャートの処理を終了し、画像検索装置１００ｂは、ステップＳＴ１００１の処理に戻って図１０Ａ及び図１０Ｂに示すフローチャートの処理を繰り返し実行する。

以上のように、画像検索装置１００ｂは、ユーザ操作に基づく操作情報を取得する操作取得部１０１と、操作取得部１０１が取得した操作情報から第１メタデータを取得する第１メタデータ取得部１１０と、第１メタデータ取得部１１０が取得した第１メタデータに基づいて、第１メタデータに関連する１以上の第２メタデータを取得する第２メタデータ取得部１２０ｂと、第２メタデータ取得部１２０ｂが取得する１以上の第２メタデータに基づいて、第２メタデータのそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群を第２メタデータ毎に取得する画像データ取得部１３０と、表示画像を生成する表示画像生成部１４０であって、画像データ取得部１３０が取得した１以上の画像データ群のそれぞれを表す画像群画像を生成し、生成した１以上の画像群画像を並べた表示画像を生成する表示画像生成部１４０と、表示画像生成部１４０が生成した表示画像を表示画像情報として出力する表示画像出力部１９９と、カテゴリ分類を示すカテゴリ情報を取得するカテゴリ取得部１９０と、を備え、第２メタデータ取得部１２０ｂは、第１メタデータ取得部１１０が取得した第１メタデータと、カテゴリ取得部１９０が取得するカテゴリ情報とに基づいて、第１メタデータに関連するメタデータのうち、カテゴリ情報が示すカテゴリ分類に属する１以上のメタデータを第２メタデータとして取得するように構成した。

このように構成することで、画像検索装置１００ｂは、最初に入力された検索条件に該当する画像だけでなく、関連する画像も検索することができる。そのため、画像検索装置１００ｂは、最初に入力された検索条件が正確なものでない場合であっても、所望の画像を検索することができる。したがって、ユーザは、ユーザが最初に入力する検索条件が正確なものでない場合であっても、所望の画像を検索することができる。
また、画像検索装置１００ｂは、第２メタデータを取得する際に、第１メタデータに関連するメタデータのうち、カテゴリ情報が示すカテゴリ分類に属する１以上のメタデータを第２メタデータとして取得するようにしたため、ユーザは、所望の画像を発見しやすくなる。

なお、本開示は、その発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略ができる。

１，１ａ，１ｂ 画像検索システム、１０ 撮像装置、１１ 第１撮像装置、１２ 第２撮像装置、２０ 画像蓄積装置、３０ 画像記憶装置、４０ メタデータ記憶装置、５０ 操作入力装置、６０ 表示装置、７０ ネットワーク、１００，１００ａ，１００ｂ 画像検索装置、１０１ 操作取得部、１１０，１１０ａ 第１メタデータ取得部、１２０，１２０ａ，１２０ｂ 第２メタデータ取得部、１３０，１３０ａ 画像データ取得部、１４０，１４０ａ 表示画像生成部、１５０ 選択群取得部、１６０，１６０ａ，１６０ｂ 優先度取得部、１７０ 最大個数取得部、１８０，１８０ａ，１８０ｂ 優先度変更部、１９０ カテゴリ取得部、１９９ 表示画像出力部、２００ 表示画像、２０１，２０２，２０３，２０４，２０５ 画像群画像、５０１ プロセッサ、５０２ メモリ、５０３ 処理回路。

Claims (9)

1. ユーザ操作に基づく操作情報を取得する操作取得部と、
   前記操作取得部が取得した前記操作情報から第１メタデータを取得する第１メタデータ取得部と、
   前記第１メタデータ取得部が取得した前記第１メタデータに基づいて、前記第１メタデータに関連する１以上の第２メタデータを取得する第２メタデータ取得部と、
   前記第２メタデータ取得部が取得する１以上の前記第２メタデータに基づいて、前記第２メタデータのそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群を前記第２メタデータ毎に取得する画像データ取得部と、
   表示画像を生成する表示画像生成部であって、前記画像データ取得部が取得した１以上の前記画像データ群のそれぞれを表す画像群画像を生成し、生成した１以上の前記画像群画像を並べた前記表示画像を生成する前記表示画像生成部と、
   前記表示画像生成部が生成した前記表示画像を表示画像情報として出力する表示画像出力部と、
   を備えたこと
   を特徴とする画像検索装置。
2. 前記操作取得部が取得した前記操作情報から、前記画像データ取得部が取得した１以上の前記画像データ群のうち、選択された前記画像データ群がいずれであるかを示す選択群情報を取得する選択群取得部を備え、
   前記表示画像生成部は、前記選択群取得部が取得した前記選択群情報が示す前記画像データ群に含まれる１以上の前記画像データが示す画像を並べた前記表示画像を生成すること
   を特徴とする請求項１記載の画像検索装置。
3. 前記第２メタデータ取得部が取得する１以上の前記第２メタデータのそれぞれに対応付けられて予め付与された優先度を取得する優先度取得部を備え、
   前記表示画像生成部は、前記優先度取得部が取得する前記優先度に用いて、生成する１以上の前記画像群画像のそれぞれの態様、又は、生成した１以上の前記画像群画像を並べる態様を決定し、決定した態様に基づいて、１以上の前記画像群画像を並べた前記表示画像を生成すること
   を特徴とする請求項１記載の画像検索装置。
4. 前記第２メタデータ取得部が取得する１以上の前記第２メタデータのそれぞれに対応付けられて予め付与された優先度を取得する優先度取得部を備え、
   前記表示画像生成部が生成する前記表示画像に並べる前記画像群画像の最大個数を取得する最大個数取得部を備え、
   前記表示画像生成部は、前記優先度取得部が取得する前記優先度と、前記最大個数取得部が取得する前記最大個数とを用いて、生成する１以上の前記画像群画像のそれぞれの態様、又は、生成した１以上の前記画像群画像を並べる態様を決定し、決定した態様に基づいて、１以上の前記画像群画像を並べた前記表示画像を生成すること
   を特徴とする請求項１記載の画像検索装置。
5. 前記第２メタデータ取得部が取得する１以上の前記第２メタデータのそれぞれに対応付けられて予め付与された優先度を取得する優先度取得部と、
   前記表示画像生成部が生成する前記表示画像に並べる前記画像群画像の最大個数を取得する最大個数取得部と、
   を備え、
   前記画像データ取得部は、前記第２メタデータ取得部が取得する１以上の前記第２メタデータのうち、前記優先度取得部が取得する前記優先度の高いものから順に、前記最大個数取得部が取得する前記最大個数に相当する数以下の前記第２メタデータを選択し、選択した前記第２メタデータのそれぞれに該当する前記画像メタデータに対応する１以上の前記画像データである前記画像データ群を前記第２メタデータ毎に取得すること
   を特徴とする請求項１記載の画像検索装置。
6. 前記操作取得部が取得した前記操作情報から、前記画像データ取得部が取得した１以上の前記画像データ群のうち、選択された前記画像データ群がいずれであるかを示す選択群情報を取得する選択群取得部と、
   前記第２メタデータ取得部が取得する１以上の前記第２メタデータのそれぞれに対応付けられて予め付与された優先度を取得する優先度取得部と、
   前記優先度取得部が取得する前記優先度を変更する優先度変更部と、
   を備え、
   前記優先度変更部は、前記優先度取得部が取得する１以上の前記優先度のうち、前記選択群取得部が取得した前記選択群情報が示す前記画像データ群に対応する前記画像メタデータに相当する前記第２メタデータに対応付けられて予め付与された前記優先度を変更すること
   を特徴とする請求項１記載の画像検索装置。
7. カテゴリ分類を示すカテゴリ情報を取得するカテゴリ取得部を備え、
   前記第２メタデータ取得部は、前記第１メタデータ取得部が取得した前記第１メタデータと、前記カテゴリ取得部が取得する前記カテゴリ情報とに基づいて、前記第１メタデータに関連するメタデータのうち、前記カテゴリ情報が示す前記カテゴリ分類に属する１以上のメタデータを前記第２メタデータとして取得すること
   を特徴とする請求項１記載の画像検索装置。
8. 操作取得部が、ユーザ操作に基づく操作情報を取得する操作取得ステップと、
   第１メタデータ取得部が、前記操作取得部が取得した前記操作情報から第１メタデータを取得する第１メタデータ取得ステップと、
   第２メタデータ取得部が、前記第１メタデータ取得部が取得した前記第１メタデータに基づいて、前記第１メタデータに関連する１以上の第２メタデータを取得する第２メタデータ取得ステップと、
   画像データ取得部が、前記第２メタデータ取得部が取得する前記第２メタデータに基づいて、前記第２メタデータのそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群を前記第２メタデータ毎に取得する画像データ取得ステップと、
   表示画像生成部が表示画像を生成する表示画像生成ステップであって、前記画像データ取得部が取得した１以上の前記画像データ群のそれぞれを表す画像群画像を生成し、生成した１以上の前記画像群画像を並べた前記表示画像を生成する前記表示画像生成ステップと、
   表示画像出力部が、前記表示画像生成部が生成した前記表示画像を表示画像情報として出力する表示画像出力ステップと、
   を備えたこと
   を特徴とする画像検索方法。
9. コンピュータに、
   ユーザ操作に基づく操作情報を取得する操作取得機能と、
   前記操作取得機能により取得された前記操作情報から第１メタデータを取得する第１メタデータ取得機能と、
   第１検索取得機能により取得された前記第１メタデータに基づいて、前記第１メタデータに関連する１以上の第２メタデータを取得する第２メタデータ取得機能と、
   前記第２メタデータ取得機能により取得された前記第２メタデータに基づいて、前記第２メタデータのそれぞれに該当する画像メタデータに対応する１以上の画像データである画像データ群を前記第２メタデータ毎に取得する画像データ取得機能と、
   表示画像を生成する表示画像生成機能であって、前記画像データ取得機能により取得された１以上の前記画像データ群のそれぞれを表す画像群画像を生成し、生成した１以上の前記画像群画像を並べた前記表示画像を生成する前記表示画像生成機能と、
   前記表示画像生成機能により生成された前記表示画像を表示画像情報として出力する表示画像出力機能と、
   を実現させるための画像検索プログラム。

Images