JP2002207741A - 画像データ検索装置、画像データ検索方法、画像データ検索プログラムおよび画像データ検索プログラムを記録したコンピュータ読み取り可能な記録媒体 - Google Patents

画像データ検索装置、画像データ検索方法、画像データ検索プログラムおよび画像データ検索プログラムを記録したコンピュータ読み取り可能な記録媒体

Info

Publication number
JP2002207741A
JP2002207741A JP2001005243A JP2001005243A JP2002207741A JP 2002207741 A JP2002207741 A JP 2002207741A JP 2001005243 A JP2001005243 A JP 2001005243A JP 2001005243 A JP2001005243 A JP 2001005243A JP 2002207741 A JP2002207741 A JP 2002207741A
Authority
JP
Japan
Prior art keywords
image
image data
search
object image
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2001005243A
Other languages
English (en)
Inventor
Takashi Kondo
尊司 近藤
Kyoko Nakamura
恭子 中村
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Minolta Co Ltd
Original Assignee
Minolta Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Minolta Co Ltd filed Critical Minolta Co Ltd
Priority to JP2001005243A priority Critical patent/JP2002207741A/ja
Priority to US10/040,379 priority patent/US20020111939A1/en
Publication of JP2002207741A publication Critical patent/JP2002207741A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53Querying
    • G06F16/532Query formulation, e.g. graphical querying

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Processing Or Creating Images (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

(57)【要約】 【課題】 検索キーとなるオブジェクト画像を適切に指
定することにより、ユーザの入力作業を軽減し、使い勝
手のよい画像データ検索装置を提供する。 【解決手段】 画像データベース内の画像が一覧表示さ
れる一覧ウィンドウ(a)または、画像検索が行なわれ
た結果の該当画像が表示される検索結果ウィンドウ
(b)が表示されると、その中の所望の人物の含まれる
画像がダブルクリックされる。すると、ダブルクリック
された画像が拡大表示される(c)。その中に写った人
物の顔の位置にマウスポインタが合わせられドラッグ操
作されると、その周辺画素が分析され、顔画像が切り出
される(A)。切り出された顔画像は、検索キーとなる
キー顔の顔入力枠位置までドラッグされ、顔入力枠の位
置でドロップされる。これにより、容易に検索キー画像
を指定することが可能となる。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、画像データ検索装
置、画像データ検索方法、画像データ検索プログラム、
および画像データ検索プログラムを記録したコンピュー
タ読み取り可能な記録媒体に関し、特に、検索キーとな
るオブジェクト画像を指定することで、容易に所望する
画像データを検索することのできる画像データ検索装
置、画像データ検索方法、画像データ検索プログラム、
および画像データ検索プログラムを記録したコンピュー
タ読み取り可能な記録媒体に関する。
【0002】
【従来の技術】デジタルカメラにより撮影された画像が
大量に蓄積されてくると、その中から所望の画像を探し
出すのは容易ではなくなる。このため、一般に、画像を
管理するための画像データベースソフトが利用され、こ
れによりユーザの所望する画像が検索されることが多
い。
【0003】
【発明が解決しようとする課題】しかしながら、このよ
うな従来の画像データベースソフトを利用する場合、ユ
ーザは、検索に必要なキーワードを画像データの登録時
に予め入力しておかなければならない。この入力作業に
はかなりの時間と労力とが必要とされる。
【0004】また、検索時にも、所望する画像に対応付
けて登録されているキーワードを適切に入力しなければ
ならず、入力ミスやキーワードを思い出せない場合等に
は、所望の画像が検索できないという事態も生じてい
た。
【0005】このため、キーワードの代わりに検索キー
となるオブジェクト画像を入力することにより、所望の
画像を検索するという方法も提案されている。しかしな
がら、検索キーとなるオブジェクト画像をどのようにし
て入力するかについての具体的な方法については未だ開
示されていない。
【0006】本発明は係る実情に鑑み考え出されたもの
であり、その目的は、検索キーとなるオブジェクト画像
を適切に指定することにより、ユーザの入力作業を軽減
し、使い勝手のよい画像データ検索装置、画像データ検
索方法、画像データ検索プログラム、および画像データ
検索プログラムを記録したコンピュータ読み取り可能な
記録媒体を提供することである。
【0007】
【課題を解決するための手段】上記目的を達成するため
に本発明のある局面に従うと、画像データ検索装置は、
検索キーとなるオブジェクト画像を指定するオブジェク
ト画像指定手段と、指定されたオブジェクト画像に基づ
いて、複数の画像データが登録されている画像データベ
ースから、指定されたオブジェクト画像と同一または類
似の画像を含む画像データを抽出する抽出手段とを備
え、オブジェクト画像指定手段は、画像データベースに
登録されている画像データを参照してオブジェクト画像
を指定することを特徴とする。
【0008】この発明によると、画像データベースに登
録されている画像データを参照して、オブジェクト画像
が指定される。このためオブジェクト画像を容易に指定
することが可能となり、入力作業に要する労力が軽減さ
れる。そして、指定されたオブジェクト画像に基づい
て、そのオブジェクト画像と類似する(同一も含む)画
像を含む画像データが画像データベースから抽出され
る。オブジェクト画像に基づいて画像データベースの検
索が行なわれるため、キーワード入力等が必須の作業で
なくなり、使い勝手が向上する。
【0009】したがって、検索キーとなるオブジェクト
画像を適切に指定することにより、ユーザの入力作業を
軽減し、使い勝手のよい画像データ検索装置を提供する
ことが可能となる。
【0010】また、本発明の別の局面に従うと、画像デ
ータ検索装置は、検索キーとなるオブジェクト画像を指
定するオブジェクト画像指定手段と、指定されたオブジ
ェクト画像に基づいて、複数の画像データが登録されて
いる画像データベースから、指定されたオブジェクト画
像と同一または類似の画像を含む画像データを複数抽出
する抽出手段とを備え、オブジェクト画像指定手段は、
画像データベースに登録されている画像データに含まれ
るオブジェクト画像とその画像データを特定する情報と
が関連付けて記録されている一覧テーブルを参照してオ
ブジェクト画像を指定し、抽出手段は、指定されたオブ
ジェクト画像に関連付けて記録されている画像データを
特定する情報を一覧テーブルから取得し、取得された特
定情報に基づいて画像データベースから画像データを抽
出することを特徴とする。
【0011】この発明によると、画像データベースに登
録されている画像データに含まれるオブジェクト画像の
記録された一覧テーブルを参照して、オブジェクト画像
が指定される。このためオブジェクト画像を容易に指定
することが可能となり、入力作業に要する労力が軽減さ
れる。
【0012】また、一覧テーブルには、オブジェクト画
像とそのオブジェクト画像を含む画像データを特定する
情報とが関連付けて記録されているため、指定されたオ
ブジェクト画像に基づいて、一覧テーブルから、そのオ
ブジェクト画像と類似する(同一も含む)画像を含む画
像データの特定情報が取得される。そして、特定情報に
基づいて、画像データベースから画像データが抽出され
る。
【0013】オブジェクト画像に基づいて画像データベ
ースの検索が行なわれるため、キーワード入力等が必須
の作業でなくなり、使い勝手が向上する。しかも一覧テ
ーブルを参照して該当する画像の特定情報が取得される
ため、検索時間が短縮される。
【0014】したがって、検索キーとなるオブジェクト
画像を適切に指定することにより、ユーザの入力作業を
軽減し、使い勝手のよい画像データ検索装置を提供する
ことが可能となる。
【0015】好ましくは、オブジェクト画像指定手段
は、複数のオブジェクト画像を指定することを特徴とす
る。
【0016】これによると、複数のオブジェクト画像が
指定され、それらのオブジェクト画像に基づいて、画像
データの検索が行なわれる。したがって、アンド検索や
オア検索を行なうことが可能となり、ユーザの意向を反
映したより柔軟な検索処理を行なうことができる。
【0017】本発明のさらに別の局面に従うと、画像デ
ータ検索装置は、キーワードを取得するキーワード取得
手段と、取得されたキーワードを、検索キーとなるオブ
ジェクト画像に変換する変換手段と、変換されたオブジ
ェクト画像に基づいて、複数の画像データが登録されて
いる画像データベースから、変換されたオブジェクト画
像と同一または類似の画像を含む画像データを抽出する
抽出手段とを備え、変換手段は、オブジェクト画像と該
オブジェクト画像のキーワードとを対応付けて記録した
テーブルに基づいて変換することを特徴とする。
【0018】この発明によると、オブジェクト画像とキ
ーワードとを対応付けて記録したテーブルに基づいて、
取得されたキーワードが検索キーとなるオブジェクト画
像に変換される。たとえばオブジェクト画像が人物の場
合、その人物の名前を入力すると、自動的にオブジェク
ト画像に変換される。このため、検索キーとなるオブジ
ェクト画像をより容易に指定することができ、入力作業
に要する労力が軽減される。
【0019】そして、変換されたオブジェクト画像に基
づいて、画像データベースから所望の画像データが抽出
される。オブジェクト画像に基づいて画像データベース
の検索が行なわれるため、従来のようなキーワード検索
時に必要とされるキーワード入力が必須の作業でなくな
り、使い勝手が向上する。
【0020】したがって、検索キーとなるオブジェクト
画像を適切に指定することにより、ユーザの入力作業を
軽減し、使い勝手のよい画像データ検索装置を提供する
ことが可能となる。
【0021】好ましくは、キーワード取得手段は、複数
のキーワードを取得することを特徴とする。
【0022】これによると、取得された複数のキーワー
ドが複数のオブジェクト画像に変換され、それらのオブ
ジェクト画像に基づいて画像データの検索が行なわれ
る。したがって、アンド検索やオア検索を行なうことが
可能となり、ユーザの意向を反映したより柔軟な検索処
理を行なうことができる。
【0023】好ましくは、オブジェクト画像は顔画像で
あることを特徴とする。これによると、顔画像が検索キ
ーとなるオブジェクト画像であるため、所望の顔画像を
含む画像データを適切に検索することが可能となる。
【0024】本発明のさらに別の局面に従うと、画像デ
ータ検索方法は、検索キーとなるオブジェクト画像を指
定するオブジェクト画像指定ステップと、指定されたオ
ブジェクト画像に基づいて、複数の画像データが登録さ
れている画像データベースから、指定されたオブジェク
ト画像と同一または類似の画像を含む画像データを抽出
する抽出ステップとを備え、オブジェクト画像指定ステ
ップは、画像データベースに登録されている画像データ
を参照してオブジェクト画像を指定することを特徴とす
る。
【0025】この発明によると、画像データベースに登
録されている画像データを参照して、オブジェクト画像
が指定される。このためオブジェクト画像を容易に指定
することが可能となり、入力作業に要する労力が軽減さ
れる。そして、指定されたオブジェクト画像に基づい
て、所望の画像データが画像データベースから抽出され
る。オブジェクト画像に基づいて画像データベースの検
索が行なわれるため、キーワード入力等が必須の作業で
なくなり、使い勝手が向上する。
【0026】したがって、検索キーとなるオブジェクト
画像を適切に指定することにより、ユーザの入力作業を
軽減し、使い勝手のよい画像データ検索方法を提供する
ことが可能となる。
【0027】本発明のさらに別の局面に従うと、画像デ
ータ検索方法は、検索キーとなるオブジェクト画像を指
定するオブジェクト画像指定ステップと、指定されたオ
ブジェクト画像に基づいて、複数の画像データが登録さ
れている画像データベースから、指定されたオブジェク
ト画像と同一または類似の画像を含む画像データを複数
抽出する抽出ステップとを備え、オブジェクト画像指定
ステップは、画像データベースに登録されている画像デ
ータに含まれるオブジェクト画像とその画像データを特
定する情報とが関連付けて記録されている一覧テーブル
を参照してオブジェクト画像を指定し、抽出ステップ
は、指定されたオブジェクト画像に関連付けて記録され
ている画像データを特定する情報を一覧テーブルから取
得し、取得された特定情報に基づいて画像データベース
から画像データを抽出することを特徴とする。
【0028】この発明によると、画像データベースに登
録されている画像データに含まれるオブジェクト画像の
記録された一覧テーブルを参照して、オブジェクト画像
が指定される。このためオブジェクト画像を容易に指定
することが可能となり、入力作業に要する労力が軽減さ
れる。
【0029】また、一覧テーブルには、オブジェクト画
像とそのオブジェクト画像を含む画像データを特定する
情報とが関連付けて記録されているため、指定されたオ
ブジェクト画像に基づいて、一覧テーブルから、そのオ
ブジェクト画像と類似する(同一も含む)画像を含む画
像データの特定情報が取得される。そして、特定情報に
基づいて、画像データベースから画像データが抽出され
る。
【0030】オブジェクト画像に基づいて画像データベ
ースの検索が行なわれるため、キーワード入力等が必須
の作業でなくなり、使い勝手が向上する。しかも一覧テ
ーブルを参照して該当する画像の特定情報が取得される
ため、検索時間が短縮される。
【0031】したがって、検索キーとなるオブジェクト
画像を適切に指定することにより、ユーザの入力作業を
軽減し、使い勝手のよい画像データ検索方法を提供する
ことが可能となる。
【0032】本発明のさらに別の局面に従うと、画像デ
ータ検索方法は、キーワードを取得するキーワード取得
ステップと、取得されたキーワードを、検索キーとなる
オブジェクト画像に変換する変換ステップと、変換され
たオブジェクト画像に基づいて、複数の画像データが登
録されている画像データベースから、変換されたオブジ
ェクト画像と同一または類似の画像を含む画像データを
抽出する抽出ステップとを備え、変換ステップは、オブ
ジェクト画像と該オブジェクト画像のキーワードとを対
応付けて記録したテーブルに基づいて変換することを特
徴とする。
【0033】この発明によると、オブジェクト画像とキ
ーワードとを対応付けて記録したテーブルに基づいて、
取得されたキーワードが検索キーとなるオブジェクト画
像に変換される。たとえばオブジェクト画像が人物の場
合、その人物の名前を入力すると、自動的にオブジェク
ト画像に変換される。このため、検索キーとなるオブジ
ェクト画像をより容易に指定することができ、入力作業
に要する労力が軽減される。
【0034】そして、変換されたオブジェクト画像に基
づいて、画像データベースから所望の画像データが抽出
される。オブジェクト画像に基づいて画像データベース
の検索が行なわれるため、従来のようなキーワード検索
時に必要とされるキーワード入力が必須の作業でなくな
り、使い勝手が向上する。
【0035】したがって、検索キーとなるオブジェクト
画像を適切に指定することにより、ユーザの入力作業を
軽減し、使い勝手のよい画像データ検索方法を提供する
ことが可能となる。
【0036】本発明のさらに別の局面に従うと、画像デ
ータ検索プログラムは、検索キーとなるオブジェクト画
像を指定するオブジェクト画像指定ステップと、指定さ
れたオブジェクト画像に基づいて、複数の画像データが
登録されている画像データベースから、指定されたオブ
ジェクト画像と同一または類似の画像を含む画像データ
を抽出する抽出ステップと、をコンピュータに実行さ
せ、オブジェクト画像指定ステップは、画像データベー
スに登録されている画像データを参照してオブジェクト
画像を指定することを特徴とする。
【0037】この発明によると、検索キーとなるオブジ
ェクト画像を適切に指定することにより、ユーザの入力
作業を軽減し、使い勝手のよい画像データ検索プログラ
ムを提供することが可能となる。
【0038】本発明のさらに別の局面に従うと、画像デ
ータ検索プログラムは、検索キーとなるオブジェクト画
像を指定するオブジェクト画像指定ステップと、指定さ
れたオブジェクト画像に基づいて、複数の画像データが
登録されている画像データベースから、指定されたオブ
ジェクト画像と同一または類似の画像を含む画像データ
を複数抽出する抽出ステップと、をコンピュータに実行
させ、オブジェクト画像指定ステップは、画像データベ
ースに登録されている画像データに含まれるオブジェク
ト画像とその画像データを特定する情報とが関連付けて
記録されている一覧テーブルを参照してオブジェクト画
像を指定し、抽出ステップは、指定されたオブジェクト
画像に関連付けて記録されている画像データを特定する
情報を一覧テーブルから取得し、取得された特定情報に
基づいて画像データベースから画像データを抽出するこ
とを特徴とする。
【0039】この発明によると、検索キーとなるオブジ
ェクト画像を適切に指定することにより、ユーザの入力
作業を軽減し、使い勝手のよい画像データ検索プログラ
ムを提供することが可能となる。
【0040】本発明のさらに別の局面に従うと、画像デ
ータ検索プログラムは、キーワードを取得するキーワー
ド取得ステップと、取得されたキーワードを、検索キー
となるオブジェクト画像に変換する変換ステップと、変
換されたオブジェクト画像に基づいて、複数の画像デー
タが登録されている画像データベースから、変換された
オブジェクト画像と同一または類似の画像を含む画像デ
ータを抽出する抽出ステップと、をコンピュータに実行
させ、変換ステップは、オブジェクト画像と該オブジェ
クト画像のキーワードとを対応付けて記録したテーブル
に基づいて変換することを特徴とする。
【0041】この発明によると、検索キーとなるオブジ
ェクト画像を適切に指定することにより、ユーザの入力
作業を軽減し、使い勝手のよい画像データ検索プログラ
ムを提供することが可能となる。
【0042】本発明のさらに別の局面に従うと、コンピ
ュータ読み取り可能な記録媒体は、上記いずれかに記載
の画像データ検索プログラムを記録する。
【0043】この発明によると、検索キーとなるオブジ
ェクト画像を適切に指定することにより、ユーザの入力
作業を軽減し、使い勝手のよい画像データ検索プログラ
ムを記録したコンピュータ読み取り可能な記録媒体を提
供することが可能となる。
【0044】
【発明の実施の形態】次に、本発明の実施の形態を図面
に基づいて詳細に説明する。
【0045】(第1の実施の形態)図1は、本発明の第
1の実施の形態における画像データ検索装置100の全
体構成を示す概略ブロック図である。図1を参照して、
画像データ検索装置100は、デジタルカメラにより撮
像された画像データを入力したり、キーワードや検索対
象となるキー画像を入力するための入力部101と、複
数の顔画像データが登録されている画像データベース
(DB)105と、登録および検索等の処理を行なう制
御部103と、入力のための選択メニューや検索結果等
を表示するための表示部107とを備える。
【0046】制御部103には、登録および検索を行な
うためのCPU(Central Processing Unit)、およ
び、CPUの作業領域でもあるRAM(Random Access
Memory)、プログラムが格納されているROM(Read O
nly Memory)等の必要なメモリが含まれる。画像データ
ベース105は、本図に示すように画像データ検索装置
100の内部に設けられたものでもよいし、ネットワー
ク等を介して接続可能な外部のデータベースであっても
よい。
【0047】図2は、図1の画像データ検索装置100
における全体処理の流れを示したフローチャートであ
る。画像データ検索装置100では、まず、ステップS
201において、メインメニューが表示部107に表示
される。メインメニューには、たとえば、画像データの
登録処理、画像データの検索処理、その他(一覧表示、
削除など)の処理などの項目が表示される。そして、表
示されたメインメニューに従い、ステップS203にお
いて、ユーザにより、所望の処理を行なうための入力処
理が行なわれる。
【0048】ユーザにより画像データの登録処理が選択
された場合は、ステップS205において、デジタルカ
メラにより撮像等された画像データを画像データベース
105に登録するための処理が行なわれる。画像データ
の検索処理が選択された場合は、ステップS207にお
いて、オブジェクト画像(キー顔)に基づいた所定の画
像データ検索処理が行なわれる。そして、その他の処理
が選択された場合は、ステップS209において、一覧
表示や削除等の該当する処理が行なわれる。これら選択
された処理が終了すると、再びステップS201の処理
へと戻る。
【0049】ステップS205の登録処理においては、
登録対象となる画像のファイルが参照され、そのファイ
ル作成日が日付情報として取得される。そして、日付情
報は、画像と関連付けて画像データベース105に登録
される。また、ユーザは、画像に対するキーワードを入
力することもできる。キーワード入力が行なわれた場合
は、そのキーワードも画像と関連付けて登録される。
【0050】図3は、図2の検索処理(ステップS20
7)の詳細を示すフローチャートである。本図に示すよ
うに、まずステップS301において、検索条件を設定
するための条件設定ウィンドウが表示される。
【0051】図4に、この表示される条件設定ウィンド
ウの例を示す。本図に示すように、条件設定ウィンドウ
には、検索対象となる期間、キーワード、および、キー
画像を入力することが可能となっている。キー画像は複
数指定することができ、複数のキー画像についてアンド
検索するかオア検索するかの指定を行なうことができ
る。また、キー画像の下には、「検索」、「一覧」、
「終了」の各キーが表示されており、ユーザによる選択
入力が可能となっている。
【0052】図3に戻って、ユーザにより「一覧」キー
が選択されると、ステップS313において、画像デー
タベース105に登録されている画像が一覧ウィンドウ
に表示される。なお、ユーザは、この一覧ウィンドウの
画像を参照して検索キーとなるキー画像を指定する。具
体的なキー画像の指定方法については後述する。
【0053】一覧ウィンドウの表示後は、再びステップ
S303に戻る。そして、条件設定ウィンドウにおい
て、期間、キーワード、および、キー画像が入力され、
「検索」キーが選択されると(ステップS303で“検
索”)、ステップS305に進み、まず指定された期間
内における期間検索が行なわれる。
【0054】次に、期間検索が行なわれた結果に対し
て、ステップS307において、キーワードによるキー
ワード検索が行なわれる。そして、キーワード検索が行
なわれた結果に対して、ステップS309において、キ
ー顔を基にした顔検索が行なわれる。
【0055】このように、期間検索、キーワード検索、
および、キー顔検索はアンド検索される。先に行なわれ
た検索により抽出された結果を対象として次の検索が行
なわれるため、先の検索から順に検索対象が絞り込まれ
ていく。ここでは、最も処理に時間を要するキー顔によ
る検索処理が最後に行なわれるため、キー顔検索が検索
対象の最も絞り込まれた状態での検索となる。このた
め、キー顔検索に要する時間が短縮され、全体として検
索効率が向上する。
【0056】このようにしてキー顔により最終的に検索
された結果が、ステップS311において、ウィンドウ
に表示される。ここで表示される検索結果ウィンドウは
条件設定ウィンドウとは別のウィンドウである。
【0057】検索結果がウィンドウに表示されると、再
びステップS303の処理へと戻る。そして、表示され
た検索結果を参照して、必要であれば再び検索のための
入力が行なわれ、ステップS305からステップS31
1までの処理が繰り返される。
【0058】ステップS303において、検索を終了す
る場合は、表示された条件設定ウィンドウの「終了」キ
ーがクリックされる。そして、顔画像の検索処理が終了
し、メインルーチンへと戻る。
【0059】なお、検索期間、キーワード、キー顔のい
ずれかがブランクの場合は、そのブランクとなった条件
に対する検索処理がスキップされることになる。たとえ
ば、キーワード入力がされなかった場合は、キーワード
検索(ステップS307)は行なわれない。したがっ
て、期間検索(ステップS305)が行なわれた結果に
対して、顔検索(ステップS309)が行なわれ、これ
が最終的な検索結果としてウィンドウ表示される(ステ
ップS311)。
【0060】図5は、図3の顔検索処理(ステップS3
09)を行なう際のキー顔を指定するための処理の流れ
を示したフローチャートである。この処理は、図4の条
件設定ウィンドウが表示され、さらに、画像データベー
ス105内の画像の一覧ウィンドウ、または、検索処理
が行なわれた結果である検索結果ウィンドウが別ウィン
ドウとして表示される状態で行なわれるものである。
【0061】まず、ユーザにより、一覧ウィンドウまた
は検索結果ウィンドウに表示される画像中の人物の顔の
位置にマウスポインタを合わせてドラッグ操作がなされ
ると、ステップS500において、そのドラッグ座標を
含む顔画像が切り出される。
【0062】そして、ドロップされると(ステップS5
01で“YES”)、その位置が顔入力枠内であれば
(ステップS502で“YES”)ステップS503へ
と進み、顔入力内でなければ(ステップS502で“N
O”)リターンする。ステップS503では、その切り
出された顔画像が使用可能であるか否かが判断される。
すなわち、切り出された画像が顔ではない場合や、顔で
あったとしても小さすぎるために十分な精度で検索がで
きないようなときは、使用不可能であると判断される。
【0063】切り出された顔画像が使用可能である場合
は(ステップS503で“YES”)、ステップS50
5において、その切り出された顔画像がキー顔として記
憶される。そして、ステップS507において、図4の
キー顔の顔入力枠にサムネイル画像として表示される。
【0064】図6は、このドラッグアンドドロップによ
りキー顔が指定される様子を説明するための図である。
本図を参照して、一覧ウィンドウ(a)または検索結果
ウィンドウ(b)内に表示される画像の中から、所望の
人物の含まれる画像がダブルクリックされると、その画
像が拡大表示される。
【0065】この拡大画像(c)に写った人物の顔の位
置にマウスポインタが合わせられ、ドラッグ操作が行な
われると、ドラッグされた位置に基づいてその周辺画素
が分析され、顔画像が切り出される。そして、切り出さ
れた顔画像は、図4の条件設定ウィンドウに表示されて
いるキー顔の顔入力枠へとドラッグされ、顔入力枠の位
置でドロップされる。これにより、その枠内にキー顔が
入力されることになる。
【0066】図7は、図3の顔検索処理(ステップS3
09)の詳細を示すフローチャートである。本図を参照
して、まずステップS701において、画像データベー
ス105の中の検索対象となる画像から顔領域の切り出
し処理が行なわれる。複数の顔が含まれる場合は全て切
り出される。
【0067】そして、ステップS703において、切り
出された各顔画像と条件設定ウィンドウに入力されたキ
ー顔との比較が行なわれる。
【0068】比較した結果、キー顔と類似する顔画像が
存在しないと判断された場合は(ステップS705で
“NO”)、ステップS713の処理へと進み、類似す
る顔が存在すると判断された場合は(ステップS705
で“YES”)、ステップS707の処理へと進む。な
お、ここで使用する「類似」には、「同一」も含まれ
る。
【0069】ステップS713では、キー顔検索がアン
ド検索か否かが判断される。すなわち、図4の条件設定
ウィンドウにおける入力の際に、アンド検索かオア検索
のいずれが指定されたかが判断される。
【0070】アンド検索の場合は(ステップS713で
“YES”)、現在対象としている画像は抽出すべき画
像ではないと判断され、ステップS715の処理へと進
む。そして次の画像があるか否かが判断される。一方、
アンド検索でない場合は(ステップS713で“N
O”)、ステップS709の処理へと進む。
【0071】ステップS707でも、キー顔検索がアン
ド検索か否かが判断される。アンド検索でない場合は
(ステップS707で“NO”)、ステップS711に
おいて、現在対象としている画像が所望の画像であると
判断され、抽出処理が行なわれる。
【0072】一方、アンド検索である場合は(ステップ
S707で“YES”)、ステップS709において、
検索キーとなる次のキー顔があるか否かが判断される。
次のキー顔がある場合は、ステップS703の処理へと
戻り、次のキー顔と対象画像から切り出された各顔画像
とが比較され、類似する画像があるか否かが判断される
(ステップS705)。
【0073】このようにして、アンド検索の場合は、指
定されたすべてのキー顔が、対象画像から切り出された
顔画像の中のいずれかの画像と類似する場合に、その対
象画像が所望の画像であるとして抽出される。一方、オ
ア検索の場合は、指定されたキー顔のうち、いずれか1
つ以上が、対象画像から切り出された顔画像と類似すれ
ば、その対象画像が所望の画像であるとして抽出され
る。
【0074】そして、ステップS715において、検索
対象となる次の画像があるか否かが判断される。次の画
像がある場合は、ステップS701の処理へと戻り、再
び上記処理が繰り返される(ステップS701からステ
ップS715)。次の画像がない場合は、顔検索処理を
終了し、図3の処理(ステップS310)へと戻る。
【0075】以上説明したように、本実施の形態におけ
る画像データ検索装置100によると、画像データベー
ス105に登録されている画像を参照して検索キーとな
るキー顔を指定することができる。このため、キーワー
ドの入力が必須ではなくなり、入力作業に対する労力を
軽減することが可能となる。しかも、キー顔の指定は、
画像データに写っている所望の顔をドラッグアンドドロ
ップすることにより行なわれるため、操作が容易であ
る。
【0076】たとえば、Aさんと一緒に旅行したときの
画像が見たいという要望に対しては、Aさんの顔画像を
キー顔として指定することにより、蓄積された大量の画
像データの中からAさんが写っている画像を適切に抽出
することができる。
【0077】しかも、アンド検索やオア検索を選択する
ことで、ユーザの所望する画像を柔軟に検索することが
可能となる。たとえば、AさんとBさんの両方が写って
いる画像を検索したい場合は、AさんとBさんをそれぞ
れキー顔に指定し、アンド検索を選択することで、所望
の画像を検索することができる。また、AさんとBさん
のいずれかが写っている画像を検索したい場合は、同じ
く両者をキー顔に指定し、オア検索を選択することで、
所望の画像を検索することができる。
【0078】(第2の実施の形態)続いて、本発明の第
2の実施の形態における画像データ検索装置200につ
いて説明する。画像データ検索装置200は、その全体
構成については、図1に示す画像データ検索装置100
の構成と同様である。また、全体処理の流れについても
図2に示したフローチャートと同様である。ただし、画
像データの登録処理(ステップS205)および検索処
理(ステップS207)の詳細については異なる。した
がって、以下、異なる処理についてのみ説明する。
【0079】図8は、本発明の第2の実施の形態におけ
る画像データ検索装置200の登録処理(ステップS2
05)の詳細を示すフローチャートである。本図を参照
して、ステップS801において、ユーザにより登録の
対象となる画像またはフォルダの指定が行なわれる。そ
して、その指定に従って、ステップS803において、
最初の画像が入力される。
【0080】ステップS805では、入力された画像に
人物が写っているか否かが判断される。写っている場合
には、ステップS807において、写っている人物すべ
ての顔画像の切り出し処理が行なわれる。次に、ステッ
プS809において、最初の人物の顔画像が読み出さ
れ、ステップS811において、その顔画像が顔辞書に
既に登録されているか否かが判断される。
【0081】登録されていない場合は、ステップS81
3において、その顔画像に対して対応する名前が入力さ
れる。そして、ステップS815において、切り出され
た顔画像と入力された名前とが対応付けて顔辞書に登録
される。一方、登録されている場合は、これらの処理を
スキップし、ステップS817の処理へと進む。
【0082】顔辞書への登録が終了すると、ステップS
817において、次に登録すべき人物があるか否かが判
断される。次の人物がある場合は、再びステップS81
1の処理へと戻り、上記処理が繰り返される(ステップ
S811からステップS817)。
【0083】画像に写っている人物すべてについて、顔
辞書への登録処理(ステップS811からステップS8
17)が行なわれると(ステップS817で“N
O”)、ステップS818の処理へと進み、現在、対象
とされている画像が、画像データベース105に登録さ
れる。なお、ステップS818における登録処理は、画
像検索装置100における登録処理と同様であるため、
説明を省略する。
【0084】次に、ステップS819において、登録す
べき次の画像があるか否かが判断される。次の画像があ
る場合はステップS805の処理へと戻り、再び同様の
処理が繰返される(ステップS805からステップS8
19)。そして、登録対象となる画像がなくなると(ス
テップS819で“NO”)、登録処理を終了し、メイ
ンルーチンへと戻る。
【0085】このように、本実施の形態においては、画
像データが画像データベース105に登録される際、そ
の画像に含まれる人物について、その人物の画像と名前
とが対応付けて顔辞書に記録される。なお、顔辞書は、
画像データベース100内に設けられてもよいし、別
途、設けられてもよい。
【0086】図9は、第2の実施の形態において、図3
の条件設定ウィンドウ表示処理(ステップS301)で
画面に表示されるウィンドウの例を示した図である。本
図に示すように、ユーザ入力が可能な項目としては、検
索期間、キーワード、および検索対象となる人物の名前
である。したがって、第1の実施の形態における条件設
定ウィンドウとは異なり、キー顔の代わりに検索対象と
なる名前の入力が可能となっている。
【0087】このウィンドウにおいて、名前が入力され
て「検索」キーがクリックされると、図3のステップS
305からステップS311までの各検索処理が行なわ
れる。ここで、指定された期間に基づく期間検索処理
(ステップS305)および入力されたキーワードによ
るキーワード検索処理(ステップS307)の各処理は
第1の実施の形態と同様であるが、顔検索処理(ステッ
プS309)の内容が少し異なる。
【0088】図10は、第2の実施の形態における、図
3の顔検索処理(ステップS307)の詳細を示すフロ
ーチャートである。本図に示すように、顔検索処理が開
始されると、ステップS1001において、条件設定ウ
ィンドウで入力された検索対象者の名前が、対応するキ
ー顔に変換される。すなわち、登録の際に作成された顔
辞書が参照されて、指定された名前に対応するキー顔が
読み出される。
【0089】検索対象となるキー顔が読み出されると、
以降の処理は図7に示した処理と全く同様である(ステ
ップS703からステップS715)。
【0090】このように、検索対象となる人の名前が指
定されると、自動的に顔辞書が参照され、その名前が対
応する人物のキー顔に変換される。そして、キー顔を基
に画像検索が行なわれる。したがって、ユーザは検索時
に所望の名前を入力すればよいだけとなり、操作が簡易
となる。
【0091】図11は、第2の実施の形態における画像
データ検索装置200の全体処理を説明するための概念
図である。本図を参照して、画像データが画像データベ
ース105に登録される際は、登録対象となる画像
(a)の中から人物の画像がキー顔として切り出され
る。本図の場合は、(A)と(B)の2人が画像に写っ
ているため、この2人の画像がキー顔として切り出さ
れ、顔辞書に登録される。
【0092】この際、それぞれのキー顔には、その人物
の名前が対応付けて登録される。ここでは、(A)のキ
ー顔には「田中」という名前が登録され、(B)のキー
顔には「鈴木」という名前がそれぞれ登録されている。
【0093】そして、鈴木さんの写っている画像を検索
したい場合は、ユーザにより「鈴木」という名前がキー
入力される。入力された名前は顔辞書を参照してキー顔
(B)に変換される。そして、変換されたキー顔(B)
をもとにして画像データベース105の中からそのキー
顔が含まれる画像が抽出される。
【0094】以上説明したように、本発明の本実施の形
態によると、キー顔とそのキー顔に対する名前とが予め
対応付けて顔辞書に登録されているため、ユーザはキー
顔を指定するという処理を行なうことなく、その人物の
名前を入力するだけでよい。すると、自動的にその名前
が対応するキー顔に変換され、変換されたキー顔に基づ
いたデータベースの検索処理が行なわれる。したがっ
て、ユーザが行なう検索時の入力作業に対する労力はよ
り一層軽減されることになる。
【0095】(第3の実施の形態)続いて、本発明の第
3の実施の形態における画像データ検索装置300につ
いて説明する。画像データ検索装置300の全体構成
も、図1に示す第1の実施の形態における画像データ検
索装置100と同様である。また、画像データ検索装置
300における全体処理の流れも図2に示したフローチ
ャートと同様である。ただし、画像データの登録処理
(ステップS205)および検索処理(ステップS20
7)の詳細については少し異なる。したがって、以下、
異なる処理についてのみ説明する。
【0096】図12は、本発明の第3の実施の形態にお
ける画像データ検索装置300の登録処理(ステップS
205)の詳細を示すフローチャートである。ここで示
す登録処理は、図8に示した第2の実施の形態における
画像データ検索装置200の登録処理とほぼ同様であ
る。ただし、ステップS1213およびステップS12
15の処理が、図8に示した処理と異なる。
【0097】すなわち、登録対象となる画像に人物が写
っている場合、その人物が既に顔辞書に登録された人物
でない場合は、ステップS1213において、その切り
出された顔画像がまず顔辞書に登録される。そして、ス
テップS1215において、その切り出された顔画像
と、画像データベース105の登録対象となる画像を特
定する情報、たとえばファイル名とが対応付けて登録さ
れる。画像の特定情報としては、その画像のファイル名
の他に、たとえば保存場所を示すような情報であっても
よい。
【0098】なお、画像データから切り出された顔画像
が既に登録されている場合は、顔辞書にその人物の顔画
像を登録するという処理(ステップS1213)がスキ
ップされ、ステップS1215の登録処理が行なわれ
る。すなわち、登録済みの切り出し顔画像と、画像の特
定情報とが対応付けて顔辞書に登録される。
【0099】その他の処理については図8と同様であ
る。以上の処理によると、切り出された顔画像とその顔
画像が含まれる画像データを特定する情報とがそれぞれ
対応付けて顔辞書に登録される。したがって、検索対象
となる顔画像がキー画像として指定されると、登録され
た顔辞書を参照することにより、容易に対象となる画像
を抽出することが可能となる。したがって、検索時の処
理時間が短縮され、検索効率も向上する。
【0100】図13は、第3の実施の形態における、図
3の顔検索処理(ステップS307)の詳細を示すフロ
ーチャートである。なお、本実施の形態においては、図
3のステップS301において表示される条件設定ウィ
ンドウは、図4で示した例と同様である。ただし、キー
画像を指定する際に、顔辞書に登録された顔画像を参照
することができる。
【0101】図13を参照して、ステップS1301に
おいて、最初のキー顔が取り出されると、ステップS1
303において、そのキー顔が顔辞書内に登録されてい
る顔画像を参照して指定された画像であるか否かが判断
される。
【0102】顔辞書を参照してキー顔が指定されたもの
でない場合、ステップS1305において、そのキー顔
に対応する顔画像が顔辞書内において検索される。そし
て、ステップS1307で、顔辞書に対応付けて登録さ
れている画像特定情報、たとえば画像ファイル名が読み
出され、そのファイル名から、画像データベース105
の中の該当する画像が抽出される。
【0103】ステップS1303において、指定された
キー画像が顔辞書を参照して指定されたものである場合
は、ステップS1305の処理をスキップし、ステップ
S1307の画像抽出処理へと進む。
【0104】対応する画像が画像データベース105か
ら抽出されると、ステップS1309において、次のキ
ー顔があるか否かが判断される。次のキー顔がある場合
は、ステップS1303の処理へと戻り、再び上述の処
理が繰返される(ステップS1303からステップS1
309)。
【0105】そして、次のキー顔がない場合は(ステッ
プS1309で“NO”)、ステップS1311の処理
へと進み、抽出された画像のアンド処理またはオア処理
が行なわれる。すなわち、条件設定ウィンドウにおい
て、アンド処理が選択された場合は、各キー顔に対応し
て抽出された画像のうち、すべてに共通する画像が最終
的な画像として抽出される。一方、オア検索が選択され
た場合は、抽出されたすべての画像が検索結果として決
定される。アンド処理またはオア処理が終了すると、本
検索処理を終了しメインルーチンへと戻る。
【0106】図14は、第3の実施の形態における画像
データ検索装置300の全体処理を説明するための概念
図である。また、図15は、図14の顔辞書の登録例を
示した図である。
【0107】図14を参照して、画像データが画像デー
タベース105に登録される際は、登録対象となる画像
(a)の中に含まれる人物(A)および(B)がそれぞ
れ顔画像として切り出され、顔辞書に登録される。そし
て、図15に示すように、顔辞書には切り出された顔画
像に対応付けて、その顔画像の含まれる画像のファイル
名が記録される。
【0108】たとえば、画像1には人物(A)と人物
(B)の2人が写っているため、各切り出された顔画像
に対応付けてそれぞれファイル名「画像1」が記録され
る。人物(A)は、画像2にも写っているため、顔辞書
内には顔画像(A)に対応する画像ファイル名として
「画像2」も記録される。一方、人物(B)は、画像
1、画像3および画像4に写っているため、顔辞書内に
はそれぞれのファイル名「画像1」、「画像3」、およ
び「画像4」が対応付けて記録される。
【0109】切り出された顔画像が既に顔辞書に登録さ
れている場合は、切り出し顔画像自体は登録されず、そ
の画像のファイル名のみが、既に登録されている切り出
し顔画像に対応付けて登録されることになる。したがっ
て、顔辞書には各切り出し顔画像に対して、1つあるい
は複数の画像ファイル名が記録されることになる。
【0110】そして、検索時に、検索キー顔として人物
(A)が指定された場合(b)、顔辞書内の切り出し顔
画像の中から該当する切り出し顔画像が検索される。そ
して、その切り出し顔画像(A)に対応して登録されて
いる画像ファイル名、「画像1」および「画像2」が読
み出される。そして、この画像ファイル名を基に、画像
データベース105内に登録されている画像1および画
像2が抽出される。
【0111】以上説明したように本実施の形態による
と、顔画像に対応付けてその顔画像の含まれる画像ファ
イル名が顔辞書に記録されている。このため、検索時に
キー顔が指定されると、その指定されたキー顔を含む画
像は顔辞書を参照することによって直ちに抽出されるこ
とになる。したがって、検索時の処理時間の短縮を図る
ことが可能となる。
【0112】(第4の実施の形態)最後に、本発明の第
4の実施の形態における画像データ検索装置400につ
いて説明する。画像データ検索装置400も、その全体
構成については図1に示す画像データ検索装置100と
同様である。また、全体処理の流れも図2に示すフロー
チャートと同様である。ただし、画像データの登録処理
(ステップS205)および画像データの検索処理(ス
テップS207)の詳細については少し異なる。したが
って、以下、異なる処理についてのみ説明する。
【0113】図16は、本発明の第4の実施の形態にお
ける画像データ検索装置400の登録処理(ステップS
205)の詳細を示すフローチャートである。本図に示
すように、画像データ検索装置400の登録処理は、図
12に示す画像データ検索装置300の登録処理とほぼ
同様である。
【0114】ただし、今回は、図12におけるステップ
S811の登録済みか否かの判断処理がない点において
異なる。すなわち、本実施の形態における登録処理で
は、切り出された顔画像が顔辞書に既に登録されている
か否かにかかわらず、順次顔辞書に登録される。そし
て、その顔画像に対応付けて、それを含む画像のファイ
ル名が登録される。
【0115】したがって、第3の実施の形態においては
既に登録済みの人物かどうかを判断して重複登録を避け
るように顔辞書が構成されていたが、本実施の形態にお
いては、切り出された顔画像とその顔画像を含む画像の
ファイル名とが1対1で登録されるため、同一人物の顔
画像が複数登録されることもあり得る構成となる。
【0116】この処理によると、画像データを登録する
際、その画像に写っている人物が顔辞書に既に登録され
ているか否かの判断を行なうことなく登録されるため、
結果として登録処理が高速となる。
【0117】図17は、この第4の実施の形態におけ
る、図3の顔検索処理(ステップS307)の詳細を示
すフローチャートである。本図に示すように、本実施の
形態における顔検索処理は、図13で示した第3の実施
の形態における顔検索処理と異なり、指定された検索キ
ー画像が顔辞書を参照して指定されたものであるか否か
という判断(ステップS1303の処理)が行なわれな
い。
【0118】顔辞書内には同一人物が複数登録されてい
る可能性があり、顔辞書を一覧として表示するには冗長
となるからである。したがって、ステップS1305に
示すように、常に、指定された検索キー顔画像に基づい
て、顔辞書内におけるそのキー顔に対応する顔画像が検
索される。そして、その顔画像に対応して記録されてい
る画像ファイル名が読み出され、画像データベース10
5から該当する画像データが抽出される。なお、その他
の処理においては、図13の処理と同様である。
【0119】図18は、第4の実施の形態における画像
データ検索装置400の全体処理を説明するための概念
図である。また、図19は、図18の顔辞書の登録例を
示した図である。図18および図19を参照して、ま
ず、画像データが画像データベース105に登録される
際には、登録対象となる画像(a)の中に含まれる人物
(A)および(B)がそれぞれ顔画像として切り出さ
れ、顔辞書に登録される。
【0120】そして、顔辞書においては、図19に示す
ように、切り出された顔画像(A)および(B)それぞ
れに対応付けて画像ファイル名「画像1」が記録され
る。たとえば、人物(A)が含まれる「画像3」という
画像データが画像データベース105に登録される際、
顔辞書には、切り出されたその人物(A)の顔画像と画
像ファイル名「画像3」とが対応付けて登録される。
【0121】したがって、ここでは、人物(A)につい
ての顔画像が、「画像1」と「画像3」のファイル名に
対して重複して登録されることになる。なお、各顔画像
に対しては、その顔画像の含まれる画像ファイル名が1
つ記録される。
【0122】したがって、検索キー顔として人物(A)
が指定された場合(b)、顔辞書を参照すると、その人
物に対応する切り出し顔画像が抽出される。そして、そ
の抽出された顔画像それぞれに対応付けて記録されてい
る画像ファイル名が読み出される。ここでは、「画像
1」および「画像2」が読み出される。そして、画像デ
ータベース105からその画像ファイル名に対応した画
像データが抽出される。
【0123】以上説明したように、本実施の形態による
と、画像データベース105に新たな画像を登録する
際、その画像に含まれる人物が切り出され、既に登録済
みが否かを判断されることなく、顔辞書内にその顔画像
および対応する画像ファイル名が記録される。したがっ
て、登録に要する処理時間が短縮される。
【0124】なお、第3および第4の実施の形態におけ
る画像検索装置300、400では、いずれもキー顔を
指定して、検索処理が行なわれている。しかし、第2の
実施の形態における画像検索装置200のように、名前
を入力して検索を行なうことも可能である。この場合、
顔辞書には、キー顔に対応づけて、それぞれの名前と画
像特定情報とが登録される。
【0125】今回示した画像検索方法は、上述した一連
の処理動作を機能させるためのプログラムによって実現
されることができる。画像データ検索プログラムは、予
め画像検索装置内のハードディスクにインストールされ
たものであってもよいし、CD−ROM、磁気テープの
ような取外し可能な記録媒体に記録されたものであって
もよい。いずれにせよ、画像データ検索プログラムはコ
ンピュータ読取可能な記録媒体に記録されている。
【0126】なお、コンピュータ読取可能な記録媒体と
しては、磁気テープやカセットテープなどのテープ系、
磁気ディスク(フレキシブルディスク、ハードディスク
装置等)や光ディスク(CD−ROM/MO/MD/D
VD等)などのディスク系、ICカード(メモリカード
を含む)や光カードなどのカード系、あるいはROM、
EPROM、EEPROM、フラッシュROMなどの半
導体メモリ等の固定的にプログラムを担持する媒体が考
えられる。
【0127】なお、記録媒体に格納される内容として
は、プログラムに限定されず、データであってもよい。
【0128】今回示した実施の形態においては、検索す
るオブジェクトとして、人物の顔画像を扱う場合につい
て説明した。顔など複雑なオブジェクトは、キー画像を
指定する際にデータを作成して使用することが困難であ
るため、本発明における検索方法を適用すると効果的だ
からである。しかし、この場合に限定されるわけではな
く、物や動植物などのオブジェクトであってもよい。さ
らには、幾何学的な図形(四角形、三角形、円、模様)
などに適用することも可能である。
【0129】また今回示した実施形態におけるそれぞれ
画像データ検索装置はインターネットの画像管理サービ
スを運営するサイトのサーバ上で動作するようにしても
よいし、デジタルカメラやスキャナなどの入力装置に内
蔵されたものであってもよい。
【0130】今回開示された実施の形態はすべての点で
例示であって制限的なものではないと考えられるべきで
ある。本発明の範囲は上記した説明ではなくて特許請求
の範囲によって示され、特許請求の範囲と均等の意味お
よび範囲内でのすべての変更が含まれることが意図され
る。
【図面の簡単な説明】
【図1】 本発明の第1の実施の形態における画像デー
タ検索装置100の全体構成を示す概略ブロック図であ
る。
【図2】 画像データ検索装置100における全体処理
の流れを示したフローチャートである。
【図3】 図2の検索処理(ステップS207)の詳細
を示すフローチャートである。
【図4】 図3の条件設定ウィンドウ表示処理(ステッ
プS301)で画面に表示される条件設定ウィンドウの
例を示した図である。
【図5】 図3の顔検索処理(ステップS309)を行
なう際のキー顔を指定するための処理の流れを示したフ
ローチャートである。
【図6】 ドラッグアンドドロップによりキー顔が指定
される様子を説明するための図である。
【図7】 図3の顔検索処理(ステップS309)の詳
細を示すフローチャートである。
【図8】 本発明の第2の実施の形態における画像デー
タ検索装置200の登録処理(ステップS205)の詳
細を示すフローチャートである。
【図9】 第2の実施の形態における、図3の条件設定
ウィンドウ表示処理(ステップS301)で画面に表示
されるウィンドウの例を示した図である。
【図10】 第2の実施の形態における、図3の顔検索
処理(ステップS307)の詳細を示すフローチャート
である。
【図11】 第2の実施の形態における画像データ検索
装置200の全体処理を説明するための概念図である。
【図12】 本発明の第3の実施の形態における画像デ
ータ検索装置300の登録処理(ステップS205)の
詳細を示すフローチャートである。
【図13】 第3の実施の形態における、図3の顔検索
処理(ステップS307)の詳細を示すフローチャート
である。
【図14】 第3の実施の形態における画像データ検索
装置300の全体処理を説明するための概念図である。
【図15】 図14の顔辞書の登録例を示した図であ
る。
【図16】 本発明の第4の実施の形態における画像デ
ータ検索装置400の登録処理(ステップS205)の
詳細を示すフローチャートである。
【図17】 第4の実施の形態における、図3の顔検索
処理(ステップS307)の詳細を示すフローチャート
である。
【図18】 第4の実施の形態における画像データ検索
装置400の全体処理を説明するための概念図である。
【図19】 図18の顔辞書の登録例を示した図であ
る。
【符号の説明】
100 画像データ検索装置、101 入力部、103
制御部、105 画像データベース、107 表示
部。
───────────────────────────────────────────────────── フロントページの続き Fターム(参考) 5B050 BA12 BA20 CA07 EA18 GA08 5B075 ND06 ND24 ND40 NK07 NK13 NK25 NK39 NK50 PP03 PP13 PP28 PQ02 PQ20 QS03 UU40

Claims (13)

    【特許請求の範囲】
  1. 【請求項1】 検索キーとなるオブジェクト画像を指定
    するオブジェクト画像指定手段と、 前記指定されたオブジェクト画像に基づいて、複数の画
    像データが登録されている画像データベースから、前記
    指定されたオブジェクト画像と同一または類似の画像を
    含む画像データを抽出する抽出手段とを備え、 前記オブジェクト画像指定手段は、前記画像データベー
    スに登録されている画像データを参照してオブジェクト
    画像を指定することを特徴とする、画像データ検索装
    置。
  2. 【請求項2】 検索キーとなるオブジェクト画像を指定
    するオブジェクト画像指定手段と、 前記指定されたオブジェクト画像に基づいて、複数の画
    像データが登録されている画像データベースから、前記
    指定されたオブジェクト画像と同一または類似の画像を
    含む画像データを複数抽出する抽出手段とを備え、 前記オブジェクト画像指定手段は、前記画像データベー
    スに登録されている画像データに含まれるオブジェクト
    画像と該画像データを特定する情報とが関連付けて記録
    されている一覧テーブルを参照してオブジェクト画像を
    指定し、 前記抽出手段は、前記指定されたオブジェクト画像に関
    連付けて記録されている画像データを特定する情報を前
    記一覧テーブルから取得し、前記取得された特定情報に
    基づいて前記画像データベースから画像データを抽出す
    ることを特徴とする、画像データ検索装置。
  3. 【請求項3】 前記オブジェクト画像指定手段は、複数
    のオブジェクト画像を指定することを特徴とする、請求
    項1または2に記載の画像データ検索装置。
  4. 【請求項4】 キーワードを取得するキーワード取得手
    段と、 前記取得されたキーワードを、検索キーとなるオブジェ
    クト画像に変換する変換手段と、 前記変換されたオブジェクト画像に基づいて、複数の画
    像データが登録されている画像データベースから、前記
    変換されたオブジェクト画像と同一または類似の画像を
    含む画像データを抽出する抽出手段とを備え、 前記変換手段は、オブジェクト画像と該オブジェクト画
    像のキーワードとを対応付けて記録したテーブルに基づ
    いて変換することを特徴とする、画像データ検索装置。
  5. 【請求項5】 前記キーワード取得手段は、複数のキー
    ワードを取得することを特徴とする、請求項4に記載の
    画像データ検索装置。
  6. 【請求項6】 前記オブジェクト画像は顔画像であるこ
    とを特徴とする、請求項1〜5のいずれかに記載の画像
    データ検索装置。
  7. 【請求項7】 検索キーとなるオブジェクト画像を指定
    するオブジェクト画像指定ステップと、 前記指定されたオブジェクト画像に基づいて、複数の画
    像データが登録されている画像データベースから、前記
    指定されたオブジェクト画像と同一または類似の画像を
    含む画像データを抽出する抽出ステップとを備え、 前記オブジェクト画像指定ステップは、前記画像データ
    ベースに登録されている画像データを参照してオブジェ
    クト画像を指定することを特徴とする、画像データ検索
    方法。
  8. 【請求項8】 検索キーとなるオブジェクト画像を指定
    するオブジェクト画像指定ステップと、 前記指定されたオブジェクト画像に基づいて、複数の画
    像データが登録されている画像データベースから、前記
    指定されたオブジェクト画像と同一または類似の画像を
    含む画像データを複数抽出する抽出ステップとを備え、 前記オブジェクト画像指定ステップは、前記画像データ
    ベースに登録されている画像データに含まれるオブジェ
    クト画像と該画像データを特定する情報とが関連付けて
    記録されている一覧テーブルを参照してオブジェクト画
    像を指定し、 前記抽出ステップは、前記指定されたオブジェクト画像
    に関連付けて記録されている画像データを特定する情報
    を前記一覧テーブルから取得し、前記取得された特定情
    報に基づいて前記画像データベースから画像データを抽
    出することを特徴とする、画像データ検索方法。
  9. 【請求項9】 キーワードを取得するキーワード取得ス
    テップと、 前記取得されたキーワードを、検索キーとなるオブジェ
    クト画像に変換する変換ステップと、 前記変換されたオブジェクト画像に基づいて、複数の画
    像データが登録されている画像データベースから、前記
    変換されたオブジェクト画像と同一または類似の画像を
    含む画像データを抽出する抽出ステップとを備え、 前記変換ステップは、オブジェクト画像と該オブジェク
    ト画像のキーワードとを対応付けて記録したテーブルに
    基づいて変換することを特徴とする、画像データ検索方
    法。
  10. 【請求項10】 検索キーとなるオブジェクト画像を指
    定するオブジェクト画像指定ステップと、 前記指定されたオブジェクト画像に基づいて、複数の画
    像データが登録されている画像データベースから、前記
    指定されたオブジェクト画像と同一または類似の画像を
    含む画像データを抽出する抽出ステップと、をコンピュ
    ータに実行させるための画像データ検索プログラムであ
    って、 前記オブジェクト画像指定ステップは、前記画像データ
    ベースに登録されている画像データを参照してオブジェ
    クト画像を指定することを特徴とする、画像データ検索
    プログラム。
  11. 【請求項11】 検索キーとなるオブジェクト画像を指
    定するオブジェクト画像指定ステップと、 前記指定されたオブジェクト画像に基づいて、複数の画
    像データが登録されている画像データベースから、前記
    指定されたオブジェクト画像と同一または類似の画像を
    含む画像データを複数抽出する抽出ステップと、をコン
    ピュータに実行させるための画像データ検索プログラム
    であって、 前記オブジェクト画像指定ステップは、前記画像データ
    ベースに登録されている画像データに含まれるオブジェ
    クト画像と該画像データを特定する情報とが関連付けて
    記録されている一覧テーブルを参照してオブジェクト画
    像を指定し、 前記抽出ステップは、前記指定されたオブジェクト画像
    に関連付けて記録されている画像データを特定する情報
    を前記一覧テーブルから取得し、前記取得された特定情
    報に基づいて前記画像データベースから画像データを抽
    出することを特徴とする、画像データ検索プログラム。
  12. 【請求項12】 キーワードを取得するキーワード取得
    ステップと、 前記取得されたキーワードを、検索キーとなるオブジェ
    クト画像に変換する変換ステップと、 前記変換されたオブジェクト画像に基づいて、複数の画
    像データが登録されている画像データベースから、前記
    変換されたオブジェクト画像と同一または類似の画像を
    含む画像データを抽出する抽出ステップと、をコンピュ
    ータに実行させるための画像データ検索プログラムであ
    って、 前記変換ステップは、オブジェクト画像と該オブジェク
    ト画像のキーワードとを対応付けて記録したテーブルに
    基づいて変換することを特徴とする、画像データ検索プ
    ログラム。
  13. 【請求項13】 請求項10〜12のいずれかに記載の
    画像データ検索プログラムを記録したコンピュータ読み
    取り可能な記録媒体。
JP2001005243A 2001-01-12 2001-01-12 画像データ検索装置、画像データ検索方法、画像データ検索プログラムおよび画像データ検索プログラムを記録したコンピュータ読み取り可能な記録媒体 Pending JP2002207741A (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2001005243A JP2002207741A (ja) 2001-01-12 2001-01-12 画像データ検索装置、画像データ検索方法、画像データ検索プログラムおよび画像データ検索プログラムを記録したコンピュータ読み取り可能な記録媒体
US10/040,379 US20020111939A1 (en) 2001-01-12 2002-01-09 Image data retrieval apparatus and method capable of facilitating retrieval of desired image data from image database

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001005243A JP2002207741A (ja) 2001-01-12 2001-01-12 画像データ検索装置、画像データ検索方法、画像データ検索プログラムおよび画像データ検索プログラムを記録したコンピュータ読み取り可能な記録媒体

Publications (1)

Publication Number Publication Date
JP2002207741A true JP2002207741A (ja) 2002-07-26

Family

ID=18873309

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001005243A Pending JP2002207741A (ja) 2001-01-12 2001-01-12 画像データ検索装置、画像データ検索方法、画像データ検索プログラムおよび画像データ検索プログラムを記録したコンピュータ読み取り可能な記録媒体

Country Status (2)

Country Link
US (1) US20020111939A1 (ja)
JP (1) JP2002207741A (ja)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005297411A (ja) * 2004-04-14 2005-10-27 Casio Comput Co Ltd 写真画像印刷装置およびプログラム
JP2006318352A (ja) * 2005-05-16 2006-11-24 Noritsu Koki Co Ltd 画像処理装置
JP2007060563A (ja) * 2005-08-26 2007-03-08 Fujifilm Holdings Corp 画像処理装置、画像処理方法及び画像処理プログラム
JP2007174026A (ja) * 2005-12-20 2007-07-05 Sony Corp 画像収集システム、電子機器および画像送信方法、プログラム、並びに記録媒体
JP2007179198A (ja) * 2005-12-27 2007-07-12 Canon Marketing Japan Inc 画像管理サーバおよび画像掲載情報生成方法およびプログラムおよび記録媒体
JP2008129703A (ja) * 2006-11-17 2008-06-05 Fujifilm Corp 撮像装置、方法、およびプログラム
JP2009224919A (ja) * 2008-03-14 2009-10-01 Kyocera Corp 携帯通信端末
JP2010237942A (ja) * 2009-03-31 2010-10-21 Nec Personal Products Co Ltd 嗜好情報処理システム、携帯情報端末、嗜好情報処理プログラム及び嗜好情報処理方法
JP2011516966A (ja) * 2008-04-02 2011-05-26 グーグル インコーポレイテッド デジタル画像集合内に自動顔認識を組み込む方法および装置
JP2014063246A (ja) * 2012-09-20 2014-04-10 Casio Comput Co Ltd 電子アルバム作成装置、及び電子アルバム作成方法、プログラム

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004234228A (ja) * 2003-01-29 2004-08-19 Seiko Epson Corp 画像検索装置、画像検索装置におけるキーワード付与方法、及びプログラム
US20050234896A1 (en) * 2004-04-16 2005-10-20 Nobuyuki Shima Image retrieving apparatus, image retrieving method and image retrieving program
GB2424091A (en) * 2005-03-11 2006-09-13 Alamy Ltd Ranking of images in the results of a search
JP5009577B2 (ja) * 2005-09-30 2012-08-22 富士フイルム株式会社 画像検索装置および方法並びにプログラム
JP2007101573A (ja) * 2005-09-30 2007-04-19 Fujifilm Corp プリント注文受付装置
JP5087856B2 (ja) * 2006-04-05 2012-12-05 株式会社ニコン 電子カメラ
US20080034284A1 (en) * 2006-07-28 2008-02-07 Blue Lava Technologies Method and system for displaying multimedia content
US8436911B2 (en) * 2006-09-14 2013-05-07 Freezecrowd, Inc. Tagging camera
US20080077595A1 (en) * 2006-09-14 2008-03-27 Eric Leebow System and method for facilitating online social networking
US7587392B2 (en) * 2006-09-15 2009-09-08 Microsoft Corporation Efficient navigation of search results
JP2008165424A (ja) * 2006-12-27 2008-07-17 Sony Corp 画像検索装置および方法、撮像装置、並びにプログラム
JP5268595B2 (ja) * 2008-11-28 2013-08-21 ソニー株式会社 画像処理装置、画像表示方法及び画像表示プログラム
JP5751898B2 (ja) * 2011-04-05 2015-07-22 キヤノン株式会社 情報処理装置、情報処理方法、プログラム及び記憶媒体

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5579471A (en) * 1992-11-09 1996-11-26 International Business Machines Corporation Image query system and method
US6181805B1 (en) * 1993-08-11 2001-01-30 Nippon Telegraph & Telephone Corporation Object image detecting method and system
US5915038A (en) * 1996-08-26 1999-06-22 Philips Electronics North America Corporation Using index keys extracted from JPEG-compressed images for image retrieval
US6813395B1 (en) * 1999-07-14 2004-11-02 Fuji Photo Film Co., Ltd. Image searching method and image processing method

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4622290B2 (ja) * 2004-04-14 2011-02-02 カシオ計算機株式会社 写真画像処理装置およびプログラム
JP2005297411A (ja) * 2004-04-14 2005-10-27 Casio Comput Co Ltd 写真画像印刷装置およびプログラム
JP2006318352A (ja) * 2005-05-16 2006-11-24 Noritsu Koki Co Ltd 画像処理装置
JP2007060563A (ja) * 2005-08-26 2007-03-08 Fujifilm Holdings Corp 画像処理装置、画像処理方法及び画像処理プログラム
JP2007174026A (ja) * 2005-12-20 2007-07-05 Sony Corp 画像収集システム、電子機器および画像送信方法、プログラム、並びに記録媒体
JP2007179198A (ja) * 2005-12-27 2007-07-12 Canon Marketing Japan Inc 画像管理サーバおよび画像掲載情報生成方法およびプログラムおよび記録媒体
JP2008129703A (ja) * 2006-11-17 2008-06-05 Fujifilm Corp 撮像装置、方法、およびプログラム
JP2009224919A (ja) * 2008-03-14 2009-10-01 Kyocera Corp 携帯通信端末
JP2011516966A (ja) * 2008-04-02 2011-05-26 グーグル インコーポレイテッド デジタル画像集合内に自動顔認識を組み込む方法および装置
US8897508B2 (en) 2008-04-02 2014-11-25 Google Inc. Method and apparatus to incorporate automatic face recognition in digital image collections
JP2014222519A (ja) * 2008-04-02 2014-11-27 グーグル インコーポレイテッド デジタル画像集合内に自動顔認識を組み込む方法および装置
KR101618735B1 (ko) * 2008-04-02 2016-05-09 구글 인코포레이티드 디지털 영상 컬렉션에 자동 얼굴 인식 기능을 통합하는 방법 및 장치
JP2010237942A (ja) * 2009-03-31 2010-10-21 Nec Personal Products Co Ltd 嗜好情報処理システム、携帯情報端末、嗜好情報処理プログラム及び嗜好情報処理方法
JP2014063246A (ja) * 2012-09-20 2014-04-10 Casio Comput Co Ltd 電子アルバム作成装置、及び電子アルバム作成方法、プログラム

Also Published As

Publication number Publication date
US20020111939A1 (en) 2002-08-15

Similar Documents

Publication Publication Date Title
JP2002207741A (ja) 画像データ検索装置、画像データ検索方法、画像データ検索プログラムおよび画像データ検索プログラムを記録したコンピュータ読み取り可能な記録媒体
US20180173709A1 (en) Content-aware filter options for media object collections
JP6918306B2 (ja) 写真管理装置、写真管理方法、およびプログラム
CN108364653B (zh) 语音数据处理方法及处理装置
JP4016610B2 (ja) 階層ディレクトリ構造を有する記録媒体、検索装置、検索プログラム、及び検索方法
JP4697913B2 (ja) データ検索装置及び方法
US9824447B2 (en) Information processing apparatus, information processing system, and information processing method
JP5448412B2 (ja) 情報処理装置およびその方法、プログラム、記録媒体
JP2002183205A (ja) データベース構築プログラムを記録したコンピュータ読み取り可能な記録媒体、データベース構築方法およびデータベース構築装置、ならびに、データベース検索プログラムを記録したコンピュータ読み取り可能な記録媒体、データベース検索方法およびデータベース検索装置
JP6372276B2 (ja) 情報処理システム、データ記憶方法及びプログラム
JP2006163527A (ja) 画像検索装置及び方法
JP2002169810A (ja) 画像検索プログラムを記録したコンピュータ読み取り可能な記録媒体、画像検索方法および画像検索装置
JP2014026596A (ja) 画像処理装置、その制御方法、および制御プログラム
JP2008305311A (ja) 表示装置および方法、プログラム、並びに記録媒体。
JPH1139320A (ja) 文書管理方法、文書検索方法、及び文書検索装置
JPH06332959A (ja) 画像ファイル装置
JP2010244425A (ja) 情報処理装置、情報処理方法、プログラム及び記憶媒体
JPH11282861A (ja) 画像情報検索ナビゲーションの処理方法及びその処理表示装置
JP2006004157A (ja) 画像検索プログラム、画像検索方法、画像検索装置及び記録媒体
JP4817585B2 (ja) 属性情報検索装置、属性情報検索方法およびその方法をコンピュータに実行させるプログラム
JP2009128946A (ja) メタデータ付与装置及び方法
JP2005157763A (ja) 検索装置及び検索制御方法
JP6230335B2 (ja) 情報処理装置及び情報処理方法
JP2009140339A (ja) 情報処理装置及び情報処理方法
JP2787945B2 (ja) 情報処理装置及び方法

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20050613

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061025

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090519

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20090929