JP5388399B2 - 顔認識に基づいたデジタル媒体の整理方法および装置 - Google Patents

Description

この非仮出願は米国仮出願番号60/519,639 出願日2003年11月14日の米国特許法119(e)条に基づいての優先権を主張するもので、仮出願の全内容は出願のための援用がされる。

本発明は媒体整理のためのコンピュータ利用に基づいた手法に関するもので、特に顔認識に基づいたデジタル媒体の整理方法および装置に関する。

近年デジタルカメラが、一つには電子画像記憶によってもたらされるフレキシビリティの故に普及してきている。パソコンやラップトップやネットワークを通じてアクセス可能なサーバーその他にデジタル写真を記憶させることで、ユーザーは画像を整理し、編集し共有することができる。また、フイルムを中心とする写真に比較して、デジタルカメラのユーザーは、少なくとも多少の低品質の画像が混ざっているプリントのセットについて費用と時間をかけることなく、一般に直ちに写真の質を評価することが出来る。アナログからデジタルへの広範囲な移行に鑑み、サービスプロバイダーおよびベンダーは、種々の製品、ウェブ利用に基づいたサービス、およびソフトウエアツール等を導入して来ている。ソフトウェアツールとしては、デジタル写真の編集用、および遠隔地からのユーザーのピクチャーファイルを使用するプリントおよび他の製品（たとえばホリデーカード）の注文サービス用等がある。ファイルブラウジングし、媒体を眺めるためのソフトウェアは一般に、ユーザーが電子アルバムにおいて写真を眺め整理する、たとえば、日付に基づいたり、（たとえば2003年10月）、出来事に基づいたり（たとえばスキー旅行20021月）してフォルダーに整理することを可能にする。平均的なユーザーが幾百という写真を持っていることを考えると、そのようなツールは写真の整理検索に便利な方法を提供してくれる。

このような既存の製品とサービスがあるにもかかわらず、本出願の発明者等は、デジタル写真便利に迅速に整理するためのより進んだ手法およびソフトウェアツールに対するニーズがあることを見つけた。

本発明はコンピュータ利用に基づいたデジタル媒体、特にデジタル写真を、認識手法を用いて整理する方法と装置を提供することを目的とする。

本発明は、複数のデジタル画像を記憶するメモリー、ユーザー入力を受けるユーザー入力デバイス、および、ディスプレイを用いて、コンピュータが実行するデジタル画像整理方法であって、前記メモリーに記憶されている前記複数のデジタル画像から顔を検出する顔検出ステップと、前記複数のデジタル画像から前記顔の部分を切り取り、分離された顔画像を生成する切り取りステップと、前記ユーザー入力デバイスによって、ユーザーにより選択された顔画像を特定の人を示す比較用の分類された顔画像とし、前記複数のデジタル画像から分離された顔画像のうちで未分類の顔画像と、前記比較用の分類された顔画像とを比較して、前記未分類の顔画像と前記比較用の分類された顔画像との類似性の程度を獲得する類似性程度獲得ステップと、前記ディスプレイに、前記選択された特定の人の顔画像を表示させると共に、前記複数のデジタル画像から分離された前記未分類の顔画像を前記類似性の程度の順番に並べて表示させる表示ステップと、前記選択された特定の人の顔画像と共に、前記類似性の程度の順番に並べて表示された前記未分類の顔画像が表示された前記ディスプレイ上で、前記ユーザー入力デバイスによりユーザー入力を受けて、前記未分類の顔画像のうちで前記ユーザー入力デバイスにより指示された顔画像を、前記選択された特定の人の顔画像に関連付けることにより同じ人の顔画像として分類する分類ステップと、を有することを特徴とするデジタル画像整理方法である。

また、本発明は、複数のデジタル画像を記憶するメモリーと、ユーザー入力を受けるユーザー入力デバイスと、ディスプレイに表示出力を行う表示出力手段と、前記メモリーに記憶されている複数のデジタル画像から顔を検出し、前記複数のデジタル画像から前記顔の部分を切り取り、分離された顔画像を生成する顔検出および切り取りユニットと、前記ユーザー入力デバイスによって、ユーザーにより選択された顔画像を特定の人を示す比較用の分類された顔画像とし、前記複数のデジタル画像から分離された顔画像のうちで未分類の顔画像と、前記比較用の分類された顔画像とを比較して、前記未分類の顔画像と前記比較用の分類された顔画像との類似性の程度を獲得する認識ユニットと、前記表示出力手段により前記ディスプレイに、前記選択された特定の人の顔画像を表示させると共に、前記複数のデジタル画像から分離された前記未分類の顔画像を前記類似性の程度の順番に並べて表示させ、前記ディスプレイ上で前記ユーザー入力デバイスによりユーザー入力を受けて、前記未分類の顔画像のうちで前記ユーザー入力デバイスにより指示された顔画像を、前記選択された特定の人の顔画像に関連付けることにより同じ人の顔画像として分類するコントロールユニットと、を有することを特徴とするデジタル画像整理装置である。

本発明の一実施態様によれば、認識アルゴリズムを適用し決定された類似性の関数として画像対象物を表示する操作が、対象物が分類される度に繰り返される。一実施例において、その対象物は顔である。

本発明の更なる特徴と利点は、添付の図面に沿った以下の詳細な記載を読めば明らかになる。

本発明の実施態様は以下に添付図面を参照しながらより具体的に開示される。一般的に、本発明は媒体整理のためのコンピュータ利用に基づいた方法とシステムを対象とするもので、特にデジタル写真において検出認識された対象物に従ってデジタル写真を整理するためのコンピュータ利用に基づいた方法とシステムを対象とする。以下に詳細が説明される一実施例において、デジタル写真のグループは、そこに現れる顔を検出認識することによって整理される。

本発明は、コンピュータにより実行されるソフトウェア製品として実施され、ユーザーのパソコン（あるいは他の適切なデバイス）にインストールされ、写真中に現れている人々に一致するようにデジタル写真コレクションをユーザーが整理できるようにする。一実施例においては、写真を整理処理するためのシステムには、少なくとも一つの顔認識アルゴリズムが付与されていて、それはモデルフォルダーにおける少なくとも一つの顔に対する、写真コレクション中に現れている顔の類似性を判定する。本発明は、ユーザーが異なる人々に対してのフォルダーを設定し、これらフォルダーの中の一つのあるいは幾つかのフォルダーに対して類似する顔を見つけ、検出された類似性に基づいてその“人々フォルダー”に写真を加えることができるように、実行することが可能である。本発明の一実施例が説明され、そこにおいてデジタル写真の整理を円滑に行う（たとえばユーザーが人々に応じて何百という写真をわずかな時間で整理できるようにする）ために、顔検出と認識がツール（たとえば、写真保存（記憶）／処理アプリケーションのためのプラグインソフトウェアとして）として用いられる。以下の記載では、図に示されている特定のディスプレイ画面に関しての具体的ワークフローを詳細に説明するが、多くの変形が可能であることはもちろんである。

図１は本発明の実施態様に従ったデジタル写真を整理するシステムのブロック図である。図１に示されるシステム１０は以下の構成要素を備えている。すなわち画像入力デバイス２０、媒体整理処理ユニット３０、プリントユニット４０、ユーザー入力処理ユニット５０およびディスプレイ６０である。図１に示されている構成要素の操作および構成要素間の機能的な相互関係は以下の説明から明らかにされる。

画像入力デバイス２０は、写真を表しているデジタル画像データを与える。画像入力デバイス２０は、デジタルカメラや写真フイルムに由来するデジタル画像データを供給するための一つあるいはそれ以上の任意の数のデバイスであり、たとえば記録媒体（ＣＤ−Ｒ、フロッピーディスク、その他）あるいはネットワーク接続である。画像入力デバイス２０はペーパーあるいはフイルム上に記録された画像をスキャンするためのスキャナーでもよく、それは光電的にＲ（赤）、Ｇ（緑）およびＢ（青）情報をフイルムから１フレームずつ読み取るＣＣＤセンサーを備えている。媒体整理処理ユニット３０はデジタル画像データを画像入力デバイス２０から受け取り、以下に詳細が説明されるやり方で認識利用に基づいた媒体整理を実行する。本出願の主対象ではないが、媒体整理処理ユニット３０は、画像圧縮、編集、色／濃度補正その他の、他の機能を、ユーザー入力デバイス５０からのコマンドに従って、実行することが出来る。ユーザーはグラフィカル・ユーザー・インターフェイス（ＧＵＩ）ディスプレイ画面、およびディスプレイ６０上に媒体整理処理ユニット３０によって出力された他の情報を見て、コマンドおよび他の情報を媒体整理処理ユニット３０へユーザー入力デバイス５０を通じて入力する。図１に示される実施態様において、ユーザー入力デバイス５０はキーボード５２とマウス５４を有する。プリントユニット４０は選択的に画像データを媒体整理処理ユニット３０から受け取りプリントを作成する。

図２は本発明の実施態様に従って、認識利用に基づいたデジタル写真の媒体整理を実行する媒体整理処理ユニット３０の詳細を図示している。図２に示されるように、この実施態様における媒体整理処理ユニット３０は、デジタル画像データを記憶する画像メモリー３２、顔検出／切り取り（cropping）ユニット３４、顔認識ユニット３６、および媒体整理コントロールユニット３８を有する。図２の種々の構成要素は離散した要素として図示されているが、それは説明を容易にするためであって、種々の構成要素の幾つかの作用操作は同じ物理的デバイス、たとえばユーザーのパソコンのマイクロプロセッサーによって実行される。図２の媒体整理処理ユニット３０の構成要素の作用操作は、次に図３乃至図７に関連して説明される。

図３は、本発明の一実施例に従った媒体整理コントロールユニット３８によってディスプレイ６０に出力された模範的ＧＵＩディスプレイ画面１００である。図３に図示されているＧＵＩディスプレイ画面１００は、ユーザーが媒体整理コントロールユニット３８によって供給される種々の媒体を整理し見る機能を開始しコントロールすることを可能にする。ディスプレイ画面１００は、“日付”とか“出来事”とか“場所”とか“人々”とかデジタル写真アルバムを構成する一般の媒体整理カテゴリーについてのカテゴリーリスト１０２を有する。従って、ユーザーはこのカテゴリーリスト１０２から選択し、これらの一般的カテゴリーに基づいてデジタル写真を整理したり、および／または以前に整理されたデジタル写真にアクセスしたりする。たとえば、ユーザーはカテゴリーリスト１０２から“日付”を選択し、日付によって整理されたデジタル写真を整理および／またはブラウズする。同様に、ユーザーは“出来事”を選択し、そこで写真の撮られた出来事(たとえば休暇２００２、卒業２００３、その他)によって整理されたデジタル写真を整理および／またはブラウズする。 更に本発明の原理に従えば、ユーザーは“人々”を選択し顔認識を用いてそこに現れている顔に基づいてデジタル写真を整理し、人々に基づいて以前に整理したデジタル写真をブラウズすることが出来る。カテゴリーリスト１０２における一般的カテゴリーの各々は大抵の場合多数のフォルダーを有していて、それらはさらにサブフォルダーを持っている。かくして、"人々“のカテゴリーの下に、個々のフォルダーが“家族”、“クラスメート”、“仕事仲間”等用に設定され、その各々はその特定のカテゴリーの個々のメンバー用サブフォルダーを有する。

GUIディスプレイ画面１００は写真を見るためのディスプレイ・ウインドウ１１０を備える。図３の例において、ディスプレイ・ウインドウ１１０は、選択されたフォルダーの写真のインデックスビュー（索引用表示）を表示する。これは“全写真表示”のボタン１１４を選択することで開始される。ユーザーはまた“顔表示”ボタン１１６を選択して、ディスプレイ・ウインドウ１１０中の選択されたフォルダーの写真に現れている顔の切り取り画面（cropped face）を見ることもできる。一群のデジタル写真からの顔部分の抽出および切り取りについては以下で詳細に説明される。個々の写真はディスプレイ・ウインドウ１１０の見たい写真の上でクリックし、“写真ビューアー”タブ１１２を選択することで見られる。本発明の原理によれば、顔認識利用に基づいた整理はディスプレイウインドウ１１０から“顔サーチ”ボタン１１８を選択することで開始される。ディスプレイ画面１００は、プリント注文、写真共有、画像編集等の種々のその他のアイコンとメニューを関連する機能を果たすために備えている。

図４は本発明の実施態様に従った顔認識に基づいてデジタル写真を整理するために、媒体整理処理ユニット３０によって実行される機能を示すフローダイアグラムである。最初にデジタル画像が、リスト１０２の一つあるいはそれ以上のデジタル写真アルバムカテゴリーにおける整理のために取り込まれる（ステップＳ２１２）。これらのデジタル画像は既存のフォルダー（たとえば画像メモリー３２に記憶されている）から取り込まれるか、あるいは画像入力デバイス２０のような外部媒体を通じて入力される。図５はデジタル写真を取り込むための模範的なGUIディスプレイ画面３００を図示していて、ユーザーが取り込まれるべきフォルダーあるいは個々の画像を選択できるようにしている。顔検出／切り取りユニット３４は取り込まれたデジタル写真における顔を検出し、取り込まれたデジタル写真における個々の顔が見られるようにそのデジタル写真から顔部分を切り出す（ステップＳ２１４）。顔検出／切り取りユニット３４は、米国特許出願 10/440,173、発明名称“Method and Apparatus for Red-Eye Detection”に開示されているような顔検出アルゴリズムを利用することが出来る。前記米国特許出願は、出願の参照による援用（incorporated by reference）がされる。顔検出のための他の手法も利用可能である。

ユーザーは、たとえば図５におけるGUIディスプレイ画面３００上の“顔の自動検出”ボタン３０６を選択することによって、取り込まれた画像の顔部分を自動的に検出し切り出すかどうかをコントロールすることが出来る。換言すれば、顔検出／切り取りユニット３４は、ユーザーが他の機能を実行している時、その裏で顔の検出と切り取りとを実行することが出来る。もしユーザーが写真の取り込みの時には顔検出をしないと決めるなら、ユーザーはいつでも“顔検出”メニューのオプション（図示されてない）を選択することが出来る。再度、顔検出／切り取りユニット３４は低い優先度で裏で作動しているということは、他のタスク（作業）を、検出が行われている間に実行できると言うことである。この顔検出作業は取り込まれた各デジタル画像に対して一回実行されるだけでよい。顔の検出と切り取りが取り込まれた一組のデジタル写真に対して実行された後に、ユーザーは、ディスプレイ・ウインドウ１１０における検出された顔を見るために、GUIディスプレイ画面１００の“顔表示”ボタン１１６を選択する。

一群の取り込まれたデジタル画像の検出および切り取りが実行された後はいつでも、ユーザーはそのデジタル写真についての顔認識利用に基づいた整理を開始することができる。図６は、デジタル写真の整理においてユーザーをアシストするために、モデル顔画像への類似性によってソートされた顔画像のディスプレイに関する模範的グラフィカル・ユーザー・インターフェイスディスプレイ画面である。顔検出／切り取りユニット３４はデジタル写真に現れている顔を抽出するが、顔の眺め（face view）として図６で見られるように、ユーザーが顔全体と周囲の特徴、頭とか首とかもし被っていれば帽子とかも見ることが出来るように、顔（顔領域４１４）より大きな領域を示す。これは顔部分それ自身を見るだけに比べてより良く画像を眺められることになる。

ユーザーは、GUIディスプレイ画面４００における“人々”カテゴリーの下のフォルダー４０２を選択し（カテゴリーリスト１０２における）、あるいは新しい人フォルダーを作成すること（Ｓ２１６）が出来る。顔検出のためのベースとなるには、選択されたフォルダーあるいは新しいフォルダーは少なくとも一つの顔画像を有していなければならない。ユーザーは“不明”というディスプレイ・ウインドウ部分４０６（すなわち、取り込まれた画像で特定の人フォルダーに関連してない顔を表示している）からどの顔でもドラッグ・アンド・ドロップすることが出来る。一旦ユーザーが“不明”の顔に一致する人フォルダーを選択すると（それは比較モデルとして働く）、顔認識ユニット３６は顔認識を適用し、不明の顔のその選択されたモデルに対する類似性を決定する（Ｓ２１８）。

以前に分類された人の画像が他の写真における同一人物とかなり異なって見えることがある（たとえば角度やポーズや撮影位置や年齢等が異なるため）。かくして本発明の好ましい実施態様ではこのような状況下で好結果を与えてくれる顔認識アルゴリズムを利用する。本発明の一実施例では、本件の米国出願と同日で出願された米国特許出願、発明名称“Method and Apparatus for Object Recognition Using Probability Models”に記載されている顔認識アルゴリズムを利用しており、前記米国特許出願は、出願の参照による援用（incorporated by reference）がされる。このような顔認識アルゴリズムは米国仮出願No.60/519,639、2003年11月14日出願にも開示されていて、その全部が、出願の参照による援用（incorporated by reference）がされる。顔検出ユニット３６が不明の顔の各々に対して類似性程度を獲得すると、媒体整理コントロールユニット３８が類似性程度（最も類似しているから最も類似してないまで）によって不明の顔をソートし、アップデートされた“不明”ディスプレイ・ウインドウ部分４０６（図６）をソートされた順番で示して出力する（Ｓ２２０）。このアップデートされたディスプレイ４００を利用しながら、ユーザーは“不明”ディスプレイ・ウインドウ部分４０６からモデル・ディスプレイ・ウインドウ部分４０８へ一つあるいはそれ以上のソートされた不明顔をドラッグ・アンド・ドロップすることが出来る（Ｓ２２２）。もしユーザーが不明顔をそのモデル・ディスプレイ・ウインドウ部分４０８へドラッグ・アンド・ドロップした後に、追加の不明顔があれば（Ｓ２２４）、その顔認識アルゴリズムは繰り返される（Ｓ２１８）。換言すれば、本発明の一実施態様における顔認識ユニット３６は、特に、異なる状態からの追加の顔がフォルダー４０２に追加されるにつれ、認識の精度が改良され認識結果は変化するので、モデルフォルダー４０２における画像に依存して異なる結果を出力するかもしれない。このようにして、ディスプレイ・ウインドウ部分４０６における不明顔の並べ方は、ユーザーが不明顔をモデル・ディスプレイ・ウインドウ部分４０８へドラッグ・アンド・ドロップするにつれてアップデートされ、不明顔とその対応するデジタル写真をモデルフォルダー４０２に迅速に且つ確実に関連付けるユーザーの能力を改善する。媒体整理コントロールユニット３８が、人々を基準にした媒体整理が完了したと判断すると（Ｓ２２４）、このプロセスは終了する。上述してきた手法を用いて、ユーザーは何百という写真でさえ、そこに現れている人々に基づいて短時間に整理することが出来る。

デジタル写真における顔を検出・認識すると、その結果情報は本発明の原理に従って写真を見ながらのプレゼンテーションを一層良いものにするために利用できる。たとえば図７Aに示されるように、デジタル写真における顔に対応したフォルダーネームはデジタル写真と一緒に表示することが出来る。これは一群のデジタル写真の“スライドプレゼンテーション”の間に行われる。更に図７Bに示されるように、分類された顔の名前は、ユーザーが表示されている顔の上にカーソルを動かすと、表示される。更にまた、人の名前をクリックすることで、媒体整理コントロールユニット３８は、図７B-７Cにおいて示されるように、検出された人に関してズームインするためのズーム機能を開始することが出来る。眺められているデジタル写真における多数の顔の間でパンニング表示を開始するために、一人以上の人を指定することが出来る。

以上、本発明の実施態様が顔認識との関連で説明されて来たが、本発明の原理はデジタル写真において検出され認識され得る他のタイプの対象物に基づいてデジタル写真を整理することにも適用できる。発明は上述したように説明されてきたが、種々の他の変更修正が本発明の精神と範囲を逸脱することなく可能であることは明らかである。たとえば、精度に依存して、デジタル写真は、そのユーザーに不正確にグループ化された写真の再配置のオプションを与えることを前提に、顔認識に基づいて人々フォルダーの中で自動的にグループ化される。

図１は本発明の実施態様に従ったデジタル媒体を整理するシステムのブロック図である。 図２は本発明の実施態様に従って図１に示されたシステムにおける媒体整理処理ユニットのより詳細な特徴を示すブロック図である 図３は本発明の実施態様に従って媒体の整理とブラウジングに関連した模範的グラフィカルユーザーインターフェイスのディスプレイ画面である。 図４は本発明の実施態様に従った認識利用に基づいたデジタル写真の整理のため実行される操作を示すフローダイアグラムである。 図５は本発明の実施態様に従って、顔認識利用に基づいたデジタル写真の整理のために画像をインポートすることに関連した模範的グラフィカルユーザーインターフェイスのディスプレイ画面である。 図６は、デジタル写真の整理において、ユーザーをアシストするモデル顔画像への類似性によってソートされる顔画像のディスプレイに関連した模範的グラフィカルユーザーインターフェイスのディスプレイ画面である。 図７A−７Cは本発明の実施態様に従った顔認識の結果を用いる模範的なデジタル写真のプレゼンテーション（提示）を示す。

Claims (20)

1. 複数のデジタル画像を記憶するメモリー、ユーザー入力を受けるユーザー入力デバイス、および、ディスプレイを用いて、コンピュータが実行するデジタル画像整理方法であって、
   前記メモリーに記憶されている前記複数のデジタル画像から顔を検出する顔検出ステップと、
   前記複数のデジタル画像から前記顔の部分を切り取り、分離された顔画像を生成する切り取りステップと、
   前記ユーザー入力デバイスによって、ユーザーにより選択された顔画像を特定の人を示す比較用の分類された顔画像とし、前記複数のデジタル画像から分離された顔画像のうちで未分類の顔画像と、前記比較用の分類された顔画像とを比較して、前記未分類の顔画像と前記比較用の分類された顔画像との類似性の程度を獲得する類似性程度獲得ステップと、
   前記ディスプレイに、前記選択された特定の人の顔画像を表示させると共に、前記複数のデジタル画像から分離された前記未分類の顔画像を前記類似性の程度の順番に並べて表示させる表示ステップと、
   前記選択された特定の人の顔画像と共に、前記類似性の程度の順番に並べて表示された前記未分類の顔画像が表示された前記ディスプレイ上で、前記ユーザー入力デバイスによりユーザー入力を受けて、前記未分類の顔画像のうちで前記ユーザー入力デバイスにより指示された顔画像を、前記選択された特定の人の顔画像に関連付けることにより同じ人の顔画像として分類する分類ステップと、
   を有することを特徴とするデジタル画像整理方法。
2. 前記メモリーには、複数のフォルダが設けられており、
   前記ユーザー入力デバイスによって、前記複数のフォルダのうちでユーザーが選択したフォルダを示す入力を受けるフォルダ選択ステップを有し、
   前記類似性程度獲得ステップは、前記ユーザーが選択したフォルダ内にある顔画像を前記比較用の分類された顔画像として、前記類似性の程度を獲得する、
   ことを特徴とする請求項１に記載のデジタル画像整理方法。
3. 前記分類ステップにより前記未分類の顔画像のうちで前記ユーザー入力デバイスにより指示された顔画像が分類されるごとに、前記類似性程度獲得ステップおよび前記表示ステップを繰り返し、
   前記分類されるごとに繰り返される前記類似性程度獲得ステップでは、前記分類ステップにより分類された顔画像に基づいて前記類似性の程度を獲得する、
   ことを特徴とする請求項２に記載のデジタル画像整理方法。
4. 前記分離された顔画像は顔自体の周囲領域を含んで見えるように表示される、
   ことを特徴とする請求項１から３のうちいずれか１項に記載のデジタル画像整理方法。
5. 前記分類に基づいて前記デジタル画像のプレゼンテーションをコントロールするステップを更に有する、
   ことを特徴とする請求項１から３のうちいずれか１項に記載のデジタル画像整理方法。
6. 前記デジタル画像のプレゼンテーションをコントロールするステップは、前記分類に基づいて、前記分離された顔画像に対するラベルを表示する、
   ことを特徴とする請求項５に記載のデジタル画像整理方法。
7. 前記ディスプレイに前記分類ステップで分類された顔画像を含む前記デジタル画像が表示されている状態で、前記ユーザー入力デバイスによって前記分類された顔画像が指示されると、その指示された顔画像にズームインする表示を行う、
   ことを特徴とする請求項１から３のうちいずれか１項に記載のデジタル画像整理方法。
8. 前記デジタル画像のプレゼンテーションは、スライドプレゼンテーションである、
   ことを特徴とする請求項５に記載のデジタル画像整理方法。
9. 前記分類された顔画像と共に、前記分類された顔画像に対するフォルダ名を表示する、
   ことを特徴とする請求項２または３に記載のデジタル画像整理方法。
10. 前記分類ステップにおける前記ユーザー入力は、前記分類された顔画像が表示された領域に、前記未分類の顔画像をドラッグする操作である、
    ことを特徴とする請求項１から３のうちいずれか１項に記載のデジタル画像整理方法。
11. 複数のデジタル画像を記憶するメモリーと、
    ユーザー入力を受けるユーザー入力デバイスと、
    ディスプレイに表示出力を行う表示出力手段と、
    前記メモリーに記憶されている複数のデジタル画像から顔を検出し、前記複数のデジタル画像から前記顔の部分を切り取り、分離された顔画像を生成する顔検出および切り取りユニットと、
    前記ユーザー入力デバイスによって、ユーザーにより選択された顔画像を特定の人を示す比較用の分類された顔画像とし、前記複数のデジタル画像から分離された顔画像のうちで未分類の顔画像と、前記比較用の分類された顔画像とを比較して、前記未分類の顔画像と前記比較用の分類された顔画像との類似性の程度を獲得する認識ユニットと、
    前記表示出力手段により前記ディスプレイに、前記選択された特定の人の顔画像を表示させると共に、前記複数のデジタル画像から分離された前記未分類の顔画像を前記類似性の程度の順番に並べて表示させ、前記ディスプレイ上で前記ユーザー入力デバイスによりユーザー入力を受けて、前記未分類の顔画像のうちで前記ユーザー入力デバイスにより指示された顔画像を、前記選択された特定の人の顔画像に関連付けることにより同じ人の顔画像として分類するコントロールユニットと、
    を有することを特徴とするデジタル画像整理装置。
12. 前記メモリーには、複数のフォルダが設けられており、
    前記ユーザー入力デバイスは、前記複数のフォルダのうちでユーザーが選択したフォルダを示す入力を受け、
    前記認識ユニットは、前記ユーザーが選択した人フォルダ内にある顔画像を前記比較用の分類された顔画像として、前記類似性の程度を獲得する、
    ことを特徴とする請求項１１に記載のデジタル画像整理装置。
13. 前記コントロールユニットは、前記未分類の顔画像のうちで前記ユーザー入力デバイスにより指示された顔画像が分類されるごとに、前記類似性の程度の獲得および前記表示を繰り返し、
    前記分類されるごとに繰り返される前記類似性の程度の獲得では、前記ユーザーが選択したフォルダに追加された顔画像に基づいて前記類似性の程度を獲得する、
    ことを特徴とする請求項１２に記載のデジタル画像整理装置。
14. 前記表示出力手段は、顔自体の周囲領域を含んで見えるように前記分離された顔画像を表示する、
    ことを特徴とする請求項１１から１３のうちいずれか１項に記載のデジタル画像整理装置。
15. 前記表示出力手段は、前記分類に基づいて前記デジタル画像のプレゼンテーションを出力する、
    ことを特徴とする請求項１１から１３のうちいずれか１項に記載のデジタル画像整理装置。
16. 前記表示出力手段は、前記分類に基づいて、前記分離された顔画像に対するラベルを表示する、
    ことを特徴とする請求項１５に記載のデジタル画像整理装置。
17. 前記表示出力手段は、前記コントロールユニットで分類された顔画像を含む前記デジタル画像が表示されている状態で、前記ユーザー入力デバイスによって前記分類された顔画像が指示されると、その指示された顔画像にズームインする表示を行う、
    ことを特徴とする請求項１１から１３のうちいずれか１項に記載のデジタル画像整理装置。
18. 前記デジタル画像のプレゼンテーションは、スライドプレゼンテーションである、
    ことを特徴とする請求項１５に記載のデジタル画像整理装置。
19. 前記表示出力手段は、前記分類された顔画像と共に、前記分類された顔画像に対するフォルダ名を表示する、
    ことを特徴とする請求項１１から１３のうちいずれか１項に記載のデジタル画像整理装置。
20. 前記ユーザー入力デバイスは、前記比較用の分類された顔画像が表示された表示領域に、前記未分類の顔画像をドラッグする操作を受ける、
    ことを特徴とする請求項１１から１３のうちいずれか１項に記載のデジタル画像整理装置。

Images