WO2007060980A1

WO2007060980A1 - 電子カメラおよび画像処理装置

Info

Publication number: WO2007060980A1
Application number: PCT/JP2006/323295
Authority: WO
Inventors: Hirotake Nozaki; Akira Ohmura; Yasuyuki Motoki; Nobuhiro Fujinawa
Original assignee: Nikon Corporation
Priority date: 2005-11-25
Filing date: 2006-11-22
Publication date: 2007-05-31
Also published as: EP1962497A4; EP1962497A1; US8488847B2; US20090135269A1; EP1962497B1; CN102231801A; CN102231801B

Abstract

　電子カメラは、撮像素子と、画像処理部と、顔検出部と、制御部と、顔画像生成部または顔認識データ生成部と、記録部とを備える。撮像素子は、撮影光学系による被写体像を光電変換して画像信号を生成する。画像処理部は、撮像素子からの画像信号に基づいて顔登録画像データを生成するとともに、画像信号に基づいてスルー画像データを生成する。顔検出部は、スルー画像データに基づいて撮影画面内の顔領域を検出する。制御部は、撮影光学系の撮影パラメータを顔領域の検出位置に応じて調整する。顔画像生成部は、顔領域の画像を切り出して顔画像データを生成する。顔認識データ生成部は、顔登録画像データの顔領域の部分から撮影人物の顔の特徴点を抽出し、特徴点に基づいて顔認識データを生成する。記録部は、顔認識データまたは顔画像データを記録する。

Description

明細書

電子カメラおよび画像処理装置

技術分野

[0001] 本発明は、人物の顔認識機能を備えた電子カメラおよび画像処理装置に関する。

背景技術

[0002] 従来から、人物の顔を撮影した撮影画像カゝら人物の顔の特徴点を抽出し、認識する人物に関する顔認識データと上記の特徴点との一致度に基づいて顔認識を行う技術が開示されている (特許文献 1参照)。かかる顔認識の技術では、予め電子カメラなどに顔認識データを登録する必要がある。特に顔認識の精度を向上させるためにはより多くの顔認識データが必要となるので、複数フレームの撮影画像から顔認識データを生成する必要がある。

[0003] ところで、顔認識データを生成するための登録撮影では、顔の特徴点が抽出し易いように被写体の顔を撮影する必要がある。そのため、上記の登録撮影を簡易に行うことができる撮影モードを備えた電子カメラが要望されている。

また、顔認識データを登録する場合、より多くの撮影画像データから顔認識データを生成できるようにすることが要望されている。例えば、他の電子カメラで撮影した画像データや過去に撮影した画像データから顔認識データを生成できれば、ユーザーの利便性は大幅に向上する。さらに、顔登録作業では、煩雑な作業を行うことなく顔登録をより簡易に行える手段が要望されて、る。

[0004] さらに、上記の電子カメラでは複数の顔認識データ力メモリに登録されるため、登録された顔認識データの管理'編集がユーザーにとって煩雑になる可能性が高い。例えば、撮影時に顔認識データを選択して特定の登録人物を電子カメラに識別させる場合や、編集時に特定の登録人物の顔認識データを削除する場合には、顔認識データの概要や顔認識データと登録人物との対応関係をユーザーが簡易かつ迅速に認識できることが要望される。

[0005] また、顔認識機能を有する電子カメラでは顔認識の結果に応じて撮影条件や画像処理等をカスタマイズすることが可能であるが、複数の認識対象が一度に撮影された状況でもユーザーの意図を適切に反映した制御を行なう電子カメラが要望されている。

また、撮影画面内で多数の顔が検出された場合や顔認識の判定に使用される顔認識データの総数が多い場合には、顔認識処理の演算量が非常に大きくなる。上記の場合には顔認識処理の演算時間が長くなるため、ユーザーの快適な撮影が妨げられるとともにシャッターチャンスを逃すおそれも高まる点でなお改善の余地があった特許文献 1：特開平 6 - 259534号公報

発明の開示

発明が解決しょうとする課題

[0006] 本発明は上記従来技術の課題の少なくとも 1つを解決するためのものである。本発明の目的の 1つは、顔認識データを生成する際の登録撮影を容易に行うことのできる電子カメラを提供することである。

また、本発明の目的の 1つは、予め人物を撮影した画像データを読み込んで、目的とする人物の顔認識データを容易に生成できる画像処理装置を提供することである。

[0007] また、本発明の目的の 1つは、顔認識データの概要や顔認識データと登録人物との対応関係をユーザーが簡易かつ迅速に認識できる電子カメラを提供することである。

また、本発明の目的の 1つは、複数の認識対象が一度に撮影された状況でも、顔認識の結果に応じてユーザーの意図を適切に反映した制御を行なう電子カメラを提供することである。

[0008] また、本発明の目的の 1つは、顔認識処理の演算量を状況に応じて適切に調整できる電子カメラを提供することである。

課題を解決するための手段

[0009] 第 1の発明に係る電子カメラは、撮像素子と、画像処理部と、顔検出部と、制御部と、顔画像生成部または顔認識データ生成部と、記録部とを備える。撮像素子は、撮影光学系による被写体像を光電変換して画像信号を生成する。画像処理部は、撮像素子からの画像信号に基づいて顔登録画像データを生成するとともに、画像信号に基づいてスルー画像データを生成する。顔検出部は、スルー画像データに基づいて撮影画面内の顔領域を検出する。制御部は、撮影光学系の撮影パラメータを顔領域の検出位置に応じて調整する。顔画像生成部は、顔領域の画像を切り出して顔画像データを生成する。顔認識データ生成部は、顔登録画像データの顔領域の部分から撮影人物の顔の特徴点を抽出し、特徴点に基づいて顔認識データを生成する。記録部は、顔画像データまたは顔認識データを記録する。

[0010] 第 2の発明に係る電子カメラは、撮像素子と、画像処理部と、制御部と、顔検出部と、顔画像生成部または顔認識データ生成部と、記録部とを備える。撮像素子は、撮影光学系による被写体像を光電変換して画像信号を生成する。画像処理部は、撮像素子からの画像信号に基づいて顔登録画像データを生成するとともに、画像信号に基づいてスルー画像データを生成する。制御部は、撮影光学系の撮影パラメータを撮影画面の中央部分を基準として調整する。顔検出部は、スルー画像データまたは顔登録画像データに基づいて、撮影画面の中央部分に位置する顔領域を検出する。顔画像生成部は、顔領域の画像を切り出して顔画像データを生成する。顔認識データ生成部は、顔登録画像データの顔領域の部分から撮影人物の顔の特徴点を抽出し、特徴点に基づいて顔認識データを生成する。記録部は、顔画像データまたは顔認識データを記録する。

[0011] 第 3の発明は、第 1または第 2の発明において、制御部は、スルー画像データに基づく顔検出時に撮像素子のレリーズ動作を実行する。

第 4の発明は、第 1から第 3のいずれかの発明において、スルー画像データの画像を表示する表示部をさらに備える。制御部は、顔登録画像データを生成する撮影モードにおいて表示部の電源をオンにする。

[0012] 第 5の発明は、第 1から第 3のいずれかの発明において、スルー画像データの画像を表示する表示部をさらに備える。画像処理部は、撮影画面中における顔の位置決めを補助するための構図補助表示をスルー画像データの中央部分に合成して出力する。

第 6の発明は、第 5の発明において、画像処理部は、被写体の撮影状態の見本表示をスルー画像データにさらに合成して出力する。 [0013] 第 7の発明は、第 1から第 6のいずれかの発明において、制御部は、顔登録画像データの生成時に顔登録画像データに対する電子ズーム処理を制限する。

第 8の発明は、第 1から第 7のいずれかの発明において、撮影光学系はズームレンズをさらに備える。制御部は、撮影パラメータの調整時およびレリーズ時にズームレンズの倍率調整範囲を通常撮影時よりも制限する。

[0014] 第 9の発明は、第 8の発明において、制御部は、レリーズ時にズームレンズのズーム位置を広角端に設定する。

第 10の発明は、第 1から第 9のいずれかの発明において、撮影画面上での像ぶれを補正する像ぶれ補正レンズと、電子カメラの光軸の角度変動を検出する角変位検出部と、レリーズ時において、角度変動に基づいて像ぶれ補正レンズを駆動させる補正レンズ駆動部と、をさらに備える。

[0015] 第 11の発明は、第 1から第 10のいずれかの発明において、画像信号のゲインを調整する撮像感度変更部をさらに備える。制御部は、レリーズ時に画像信号のゲインを通常撮影時の設定よりも高める。

第 12の発明は、第 1から第 11のいずれかの発明において、被写界に閃光発光を行う閃光発光部をさらに備える。制御部は、レリーズ時に閃光発光部の閃光発光を不能化する。

[0016] 第 13の発明は、第 1から第 12のいずれかの発明において、制御部はレリーズ時の撮影条件を示す撮影条件データを生成するとともに、該撮影条件データを顔画像データまたは顔認識データに対応付けて記録部に記録する。

第 14の発明は、第 1から第 13のいずれかの発明において、制御部は顔画像データまたは顔認識データの取得時期を示す取得時期データを生成するとともに、該取得時期データを顔画像データまたは顔認識データに対応付けて記録部に記録する

[0017] 第 15の発明は、第 1から第 14のいずれかの発明において、画像処理部は顔登録画像データに基づヽてインデックス画像データを生成する。制御部はインデックス画像データを顔画像データまたは顔認識データに対応付けて記録部に記録する。第 16の発明は、第 1から第 15のいずれかの発明において、制御部は、同一の撮影人物から生成した複数の顔画像データまたは顔認識データをグループ化して記録部に記録する。

[0018] 第 17の発明は、第 16の発明において、制御部は、撮影人物の顔の向き、撮影人物の眼鏡の有無および顔登録画像データの撮影条件のいずれかが異なる 2以上の顔画像データまたは顔認識データをグループ化する。

第 18の発明は、第 1から第 17のいずれかの発明において、制御部は、同一の撮影人物を撮影した顔登録画像データが複数生成されているときに、顔領域の検出状態に基づ!/ヽて顔登録画像データの優先順位を決定する。顔画像生成部または顔認識データ生成部は、優先順位が高、顔登録画像データから顔画像データまたは顔認識データを生成する。

[0019] 第 19の発明は、第 1から第 18のいずれかの発明において、制御部は、顔領域の検出状態に基づいて撮影人物の顔の向きを推定し、該顔の向きが所定方向と一致しないときには、撮像素子のレリーズ動作を不能化する。

第 20の発明は、第 1から第 18のいずれかの発明において、制御部は、顔領域の検出状態に基づ、て撮影人物の表情を推定し、該表情の種類に応じて撮像素子のレリーズ動作を不能化する。

[0020] 第 21の発明に係る電子カメラは、撮像素子と、顔検出部と、顔認識データ生成部と、制御部とを備える。撮像素子は、撮影光学系による被写体像を光電変換して画像信号を生成する。顔検出部は、撮像素子からの画像信号に基づいて撮影画面内の顔領域を検出する。顔認識データ生成部は、顔領域の部分から撮影人物の顔の特徴点を抽出し、特徴点に基づいて顔認識データを生成する。制御部は、顔認識データを生成するための撮影時の撮影条件を、通常撮影時の撮影条件よりも制限する。

[0021] 第 22の発明に係る画像処理装置は、制御部と、顔検出部と、顔画像生成部または顔認識データ生成部と、記録部と、を備える。制御部は、内蔵メモリ、記録媒体との接続部および外部通信手段の少なくとも 1つを有するとともに、電子カメラで予め生成された撮影画像データを内蔵メモリ、記録媒体、外部通信手段を介して接続されたコンピュータのいずれかから取得する。顔検出部は、撮影画像データに基づいて、撮影画面内の顔領域を検出する。顔画像生成部は、顔領域の画像を切り出して顔画像データを生成する。顔認識データ生成部は、撮影画像データの顔領域の部分から撮影人物の顔の特徴点を抽出し、特徴点に基づいて顔認識データを生成する。記録部は、顔画像データまたは顔認識データを記録する。

[0022] 第 23の発明は、第 22の発明において、撮影画像データの再生画像に顔領域を識別する表示を合成する画像処理部と、画像処理部の出力画像を表示する表示部と、をさらに備える。

第 24の発明は、第 23の発明において、ユーザーの入力を受け付ける入力部をさらに備える。顔検出部は、入力部からの入力に基づいて顔領域の検出精度を規定する閾値を変更する。

[0023] 第 25の発明は、第 23の発明において、ユーザーの入力を受け付ける入力部をさらに備える。顔画像生成部または顔認識データ生成部は、撮影画像データから複数の顔領域が検出された場合、入力部からの入力で選択された顔領域について顔画像データまたは顔認識データを生成する。

第 26の発明は、第 22から第 25のいずれかの発明において、制御部は、同一の撮影人物から生成した複数の顔画像データまたは顔認識データをグループ化して記録部に記録する。

[0024] 第 27の発明は、第 22から第 26のいずれかの発明において、制御部は、撮影画像データの顔領域の部分を所定のサイズに切り出してインデックス画像データを生成するとともに、該インデックス画像データを顔画像データまたは顔認識データに対応付けて記録部に記録する。

第 28の発明は、第 22から第 27のいずれかの発明において、撮影画像データは撮影時の撮影条件を記録した付属データ領域を有する。制御部は、付属データ領域の撮影条件に基づいて撮影条件データを生成するとともに、該撮影条件データを顔画像データまたは顔認識データに対応付けて記録部に記録する。

[0025] 第 29の発明は、第 22から第 28のいずれかの発明において、撮影画像データは撮影日時を記録した付属データ領域を有する。制御部は、付属データ領域の撮影日時に基づいて顔画像データまたは顔認識データの取得時期データを生成するとともに、該取得時期データを顔画像データまたは顔認識データに対応付けて記録部に記録する。

第 30の発明に係る電子カメラは、撮像素子と、顔検出部と、記録部と、顔認識部と、制御部と、を備える。撮像素子は、撮影光学系による被写体像を光電変換して画像信号を生成する。顔検出部は、画像信号に基づいて撮影画面の顔領域を検出し、該顔領域の部分から撮影人物の顔の特徴点を抽出する。記録部は、人物の顔の特徴点に基づいて予め生成された顔認識データと該顔認識データに対応する登録人物を示すためのインデックス画像データとを対応付けして記録する。顔認識部は、顔検出部の抽出した特徴点および顔認識データに基づいて撮影人物が登録人物であるカゝ否かを判定する。制御部は、顔認識データの指定に使用される表示項目とインデッタス画像データの画像とを関連付けて提示する編集画面を生成する。

[0026] 第 31の発明は、第 30の発明において、インデックス画像データは登録人物の撮影画像データであることを特徴とする。

第 32の発明は、第 31の発明において、インデックス画像データは、顔認識データの生成に使用された撮影画像データであることを特徴とする。

第 33の発明は、第 30から第 32のいずれかの発明において、記録部には、顔認識データの生成に使用された画像データの撮影条件が、顔認識データに対応付けされた状態で記録されて!ゝることを特徴とする。

[0027] 第 34の発明は、第 30から第 33のいずれかの発明において、記録部には、顔認識データの生成に使用された画像データの撮影時期が、顔認識データに対応付けされた状態で記録されて!ゝることを特徴とする。

第 35の発明は、第 30から第 34のいずれかの発明において、記録部には、登録人物の撮影時に適用される処理の設定が、顔認識データに対応付けされた状態で記録されて!/ヽることを特徴とする。

[0028] 第 36の発明は、第 30から第 35のいずれかの発明において、撮影画像の画像データを外部に送信する通信部をさらに備え、記録部には、登録人物の撮影時における画像データの送信の可否と、画像データの送信先のアドレス情報とが、顔認識データに対応付けされた状態で記録されていることを特徴とする。

第 37の発明は、第 30から第 36のいずれかの発明において、制御部は、編集画面の表示出力の可否を管理する個人認証手段を備えることを特徴とする。

[0029] 第 38の発明は、第 37の発明において、個人認証手段が顔認識部による顔認証を含むことを特徴とする。

第 39の発明は、第 31から第 38のいずれかの発明において、記録部には同一の登録人物に関する複数のインデックス画像データを記録可能であって、制御部は、インデッタス画像データのうちから任意の撮影画像データの画像を選択するとともに、該選択画像を表示項目に関連付けて編集画面で提示することを特徴とする。

[0030] 第 40の発明は、第 39の発明において、制御部は、インデックス画像データのうちで最新の撮影画像データの画像を選択することを特徴とする。

第 41の発明は、第 39の発明において、制御部は、インデックス画像データのうちで登録人物の顔正面を撮影した撮影画像データの画像を選択することを特徴とする。第 42の発明は、第 39の発明において、制御部は、インデックス画像データの画像を所定間隔ごとに順次切り替えて編集画面で提示することを特徴とする。

[0031] 第 43の発明に係る電子カメラは、撮像素子と、顔検出部と、記録部と、顔認識部と、制御部と、を備える。撮像素子は、撮影光学系による被写体像を光電変換して画像信号を生成する。顔検出部は、画像信号に基づいて撮影画面の顔領域を検出し、該顔領域の部分から撮影人物の顔の特徴点を抽出する。記録部は、登録人物の顔の特徴点に基づいて予め生成された顔認識データと、登録人物の撮影時に適用される撮影設定とを対応付けて記録する。顔認識部は、顔検出部の抽出した特徴点および顔認識データに基づいて、撮影人物が登録人物である力否かを判定する。制御部は、登録人物の優先順位を設定するとともに、登録人物の撮影時には撮影設定に基づいて撮影画像データを生成し、登録人物が複数検出された場合には登録人物のうちで最も優先順位の高い人物に対応する撮影設定を適用する。

[0032] 第 44の発明は、第 43の発明において、ユーザーの入力を受け付ける入力部をさらに備える。また、制御部は、入力部からの入力に基づいて登録人物を指定して優先順位を個別的に設定することを特徴とする。

第 45の発明は、第 44の発明において、登録人物の指定を行うための編集画面を表示する表示部をさらに備える。また、制御部は、編集画面上における登録人物の表示項目の表示位置または表示順を優先順位に応じて変化させることを特徴とする

[0033] 第 46の発明は、第 43から第 45のいずれかの発明において、制御部は、登録人物の登録順に優先順位を設定することを特徴とする。

第 47の発明は、第 43から第 45のいずれかの発明において、制御部は、登録人物を名称で整列して優先順位を設定することを特徴とする。

第 48の発明は、第 43から第 45のいずれかの発明において、記録部は、同一の登録人物に関する複数の顔認識データをグループ化して記録可能であって、制御部は、グループ化された顔認識データ群について、該顔認識データ群に含まれる顔認識データの数によって優先順位を設定することを特徴とする。

[0034] 第 49の発明は、第 43の発明において、記録部は、登録人物ごとの撮影回数を示す撮影回数データをさらに記録する。そして、制御部は、前記撮影回数データに基づ、て、撮影回数が多、登録人物の優先順位を高く設定することを特徴とする。第 50の発明に係る電子カメラは、撮像素子と、顔検出部と、記録部と、制御部と、顔認識部とを備える。撮像素子は、撮影光学系による被写体像を光電変換して画像信号を生成する。顔検出部は、画像信号に基づいて撮影画面の顔領域を検出し、該顔領域の部分から撮影人物の顔の特徴点を抽出する。記録部は、登録人物の顔の特徴点に基づいて予め生成された顔認識データを記録する。制御部は、顔認識対象の登録人物に関する顔認識データ群に含まれる顔認識データの数に基づいて、顔認識データ群から判定用顔認識データを選択する。顔認識部は、顔検出部の抽出した特徴点および判定用顔認識データに基づヽて、撮影人物が顔認識対象の登録人物か否かを判定する。

[0035] 第 51の発明は、第 50の発明において、制御部は、顔認識データの数および顔領域の数の積に対応する評価値が顔認識部の処理能力で規定される閾値を下回るように判定用顔認識データを選択することを特徴とする。

第 52の発明は、第 50または第 51の発明において、制御部は、顔認識対象の登録人物が複数の場合に、各登録人物に設定された優先順位に基づいて判定用顔認識データを重み付けして選択することを特徴とする。 [0036] 第 53の発明は、第 50から第 52のいずれかの発明において、制御部は、顔認識対象の登録人物が複数の場合に、顔認識データの記録数が多！、登録人物を優先して判定用顔認識データを選択することを特徴とする。

第 54の発明は、第 50から第 53のいずれかの発明において、制御部は、同一の登録人物に関して複数の顔認識データが記録されている場合に、取得時期が新しい顔認識データを優先して判定用顔認識データを選択することを特徴とする。

[0037] 第 55の発明は、第 50から第 54のいずれかの発明において、制御部は、同一の登録人物に関して取得時の撮影条件が異なる複数の顔認識データが記録されている場合に、取得時の撮影条件が現在の撮影条件に近似する顔認識データを優先して判定用顔認識データを選択することを特徴とする。

第 56の発明は、第 50から第 55のいずれかの発明において、制御部は、同一の登録人物に関して顔の向きが異なる複数の顔認識データが記録されている場合に、顔正面に対応する顔認識データを優先して判定用顔認識データを選択することを特徴とする。

[0038] 第 57の発明は、第 50から第 56のいずれかの発明において、記録部は、登録人物ごとの撮影回数を示す撮影回数データをさらに記録する。そして、制御部は、撮影回数データに基づいて、撮影回数が多い登録人物を優先して判定用顔認識データを選択することを特徴とする。

ここで、上記発明に関する構成を方法、記録媒体、コンピュータプログラムなどに変換して表現したものも本発明の具体的態様として有効である。

発明の効果

[0039] 本発明の一の形態の電子カメラでは、顔認識データを生成する際の登録撮影を容易に行うことが可能となる。

また、本発明の一の形態の画像処理装置では、予め人物を撮影した画像データを読み込んで、目的とする人物の顔認識データを容易に生成することができる。

また、本発明の一の形態の電子カメラでは、顔認識データの概要や顔認識データと登録人物との対応関係をユーザーが簡易かつ迅速に認識することができる。

[0040] また、本発明の一の形態の電子カメラでは、複数の認識対象が一度に撮影された状況でも、顔認識の結果に応じてユーザーの意図を適切に反映した制御を行なうことがでさる。

また、本発明の一の形態の電子カメラでは、顔認識処理の演算量を状況に応じて適切に調整することができる。

図面の簡単な説明

[0041] [図 1]第 1実施形態の電子カメラの構成を示すブロック図

[図 2]第 1実施形態の「顔登録モード」での動作を示す流れ図

[図 3]モード選択画面の一例を示す図

[図 4]登録人物の選択画面の一例を示す図

[図 5]登録人物の詳細情報画面の一例を示す図

[図 6]顔検出時におけるプレビュー画像の表示例を示す図

[図 7]第 1実施形態の「顔認識撮影モード」の動作を示す流れ図

[図 8]第 2実施形態の「顔登録モード」での動作を示す流れ図

[図 9]第 3実施形態の「顔登録モード」での動作を示す流れ図

[図 10]第 4実施形態の「顔登録モード」での動作を示す流れ図

[図 11]第 4実施形態におけるプレビュー画像の表示例を示す図

[図 12]第 5実施形態の「顔登録モード」での動作を示す流れ図

[図 13]顔登録モードを指定可能なモード選択画面の一例を示す図

[図 14]顔検出処理の再試行を確認する表示の一例を示す図

[図 15]選択枠による顔領域の選択状態を示す図

[図 16]「新規」および「追加」の選択表示の一例を示す図

[図 17]第 6実施形態における編集画面の立ち上げ操作で顔認証を行う場合の流れ図

[図 18]第 6実施形態の「顔認識撮影モード」の動作を示す流れ図

[図 19]第 7実施形態の「顔認識撮影モード」の動作を示す流れ図

発明を実施するための最良の形態

[0042] <第 1実施形態の説明 >

図 1は第 1実施形態の電子カメラの構成を示すブロック図である。電子カメラは、撮影光学系 11と、第 1レンズ駆動部 12と、揺動センサ部 13と、像ぶれ補正レンズ 14と、第 2レンズ駆動部 15と、撮像素子 16と、アナログ信号処理部 17 と、 AZD変換部 18と、内蔵メモリ 19と、画像処理部 20と、カード IZF21と、入出力 I ZF22と、操作部材 23および液晶モニタ 24と、閃光発光部 25と、 CPU26と、顔登録メモリ 27およびデータバス 28とを有している。なお、内蔵メモリ 19、画像処理部 20 、カード IZF21、入出力 IZF22および CPU26は、データバス 28を介して接続されている。

[0043] 撮影光学系 11は、ズームレンズ 11aと、合焦位置調節用のフォーカシングレンズ 1 lbとを含む複数のレンズ群で構成されてヽる。撮影光学系 11を構成する各レンズは、第 1レンズ駆動部 12によって光軸方向に駆動調整される。

揺動センサ部 13は、電子カメラの縦揺れを検出する縦方向角速度センサと、電子カメラの横揺れを検出する横方向角速度センサとを備えている。揺動センサ部 13は電子カメラの揺れを示すカメラ揺動データを CPU26に出力する。このカメラ摇動データは、像ぶれ補正レンズ 14の移動量の演算に使用される。

[0044] 像ぶれ補正レンズ 14は光軸直角方向に揺動可能に構成されている。第 2レンズ駆動部 15は、像ぶれ補正レンズ 14を縦方向に揺動させる縦揺動手段と、像ぶれ補正レンズ 14を横方向に揺動させる横揺動手段とで構成される。この第 2レンズ駆動部 1 5は、 CPU26が演算した像ぶれ補正レンズ 14の移動量に基づいて、像ぶれ補正レンズ 14を揺動させてぶれ補正を実行する。

[0045] 撮像素子 16は、撮影光学系 11を通過した光束を光電変換して被写体像のアナ口グ画像信号を生成する。この撮像素子 16は、非レリーズ時 (撮影待機時)にも所定間隔毎に被写体を露光し、間引き読み出しによるアナログ画像信号 (スルー画像信号）を出力する。スルー画像信号は、後述の AF演算、 AE演算および顔検出動作や、フアインダ用画像の生成などに使用される。

[0046] アナログ信号処理部 17は、相関二重サンプリングを行う CDS回路、アナログ画像信号の出力を増幅するゲイン回路、入力信号の波形を一定の電圧レベルにクランプするクランプ回路等で構成されている。 AZD変換部 18は撮像素子 16のアナログ画像信号をデジタル画像信号に変換する。内蔵メモリ 19は、画像処理部 20での画像処理の前工程および後工程でデータを一時的に保存する。なお、内蔵メモリ 19には後述の撮影画像データを記録可能な記録領域を設けることもできる。

[0047] 画像処理部 20はデジタル画像信号に所定の画像処理を施す。この画像処理部 20 はレリーズ時の画像信号に基づいて撮影画像データを生成する。また、画像処理部 20はスルー画像信号に基づ、てスルー画像データを順次生成する。このスルー画像データの解像度は、撮影画像データの解像度よりも低く設定される。スルー画像データは、 CPU26による顔認識処理に使用されるとともに、液晶モニタ 24の表示画像 (プレビュー画像）としても使用される。さらに、画像処理部 20は撮影画像データの圧縮処理なども実行する。さらにまた、画像処理部 20は、撮影画像の一部を切り出して解像度を変換する電子ズーム処理を行うことも可能である。

[0048] また、画像処理部 20は、 CPU26の指示により各種表示 (顔認識時の枠表示など）のビデオデータを生成し、上記のビデオデータをスルー画像データに重畳させて液晶モニタ 24に出力する。これによつて、プレビュー画像には上記の各種表示が合成される。

カード IZF21には、記録媒体 29を接続するためのコネクタが形成されている。記録媒体 29は公知の半導体メモリなどで構成される。そして、カード IZF21は、記録媒体 29に対する撮影画像データの書き込み Z読み込みを制御する。

[0049] 入出力 IZF22には、操作部材 23および液晶モニタ 24が接続されている。操作部材 23は入力釦ゃレリーズ釦などを備えている。操作部材 23の入力釦は、例えば、電子カメラの撮影モード (通常撮影モード、再生モード、顔登録モード、顔認識撮影モード等）の切り換え入力などを受け付ける。また、操作部材 23のレリーズ釦は、半押しによる AF動作の指示入力と、全押しによるレリーズ入力とを受け付ける。

[0050] 一方、液晶モニタ 24は主として電子カメラの背面部分に配置される。この液晶モ- タ 24には、撮影画像データの再生画像や電子カメラの各種設定を変更するための設定画面などが表示される。上記の設定画面には後述の顔認識データを編集するための編集画面が含まれる。また、撮影モードでの液晶モニタ 24には上記のプレビユー画像を動画表示することが可能である。したがって、ユーザーは、液晶モニタ 24 のプレビュー画像を確認しつつ被写体のフレーミングを行うことができる。 [0051] さらに、入出力 IZF22には外部接続端子が形成されている。そして、入出力 IZF2 2は、外部接続端子を介して接続されたコンピュータなどとのデータ送受信を USB ( Universal Serial Bus)や IEEE1394などのシリアル通信規格に準拠して制御する。また、入出力 IZF22の外部接続端子には、外部との無線通信を行うための拡張機器である通信ユニット 30を接続することも可能である。

[0052] 閃光発光部 25は、キセノン発光管、発光のエネルギを蓄えるメインコンデンサ、閃光を被写体に効率良く照射するための反射傘やレンズ部材、発光タイミングや光量を調整する発光制御回路など力構成されている。

CPU26は、不図示の ROMに格納されたシーケンスプログラムに従つて電子カメラの各部動作を制御する。例えば、 CPU26はスルー画像信号に基づいて公知のコントラスト方式の AF (オートフォーカス)演算や、公知の AE (自動露出）演算などを実行する。また、 CPU26は、上記のカメラ揺動データに基づいて像ぶれ補正レンズ 14の移動量を演算する。

[0053] さらに、 CPU26は顔検出部 31、顔認識部 32として機能する。顔検出部 31は、スル一画像データまたは撮影画像データから特徴点を抽出して被写体の顔領域、顔の大きさ等を検出する。例えば、顔検出部 31は、特開 2001— 16573号公報などに記載された特徴点抽出処理によって顔領域を抽出する。また、上記の特徴点としては、例えば、眉、目、鼻、唇の各端点、顔の輪郭点、頭頂点や顎の下端点などが挙げられる。

[0054] 顔認識部 32は、「顔登録モード」では、検出した顔の特徴点に基づいて顔認識データを生成する。例えば、顔認識部 32は、検出した顔の特徴点の位置、特徴点から求まる顔パーツの大きさ、各特徴点の相対距離など力登録人物の顔認識データを生成する。

また、顔認識部 32は、「顔認識撮影モード」では、撮影画面内の人物の顔が顔認識データの登録人物の顔か否かを判定する顔認識処理を行う。具体的には、まず顔認識部 32は検出された顔の特徴点に基づいて、撮影人物の顔の特徴点の位置、各顔パーツの大きさ、各特徴点の相対距離などを演算する。次に顔認識部 32は、上記の演算結果と顔認識データとを比較して所定の登録人物の顔と撮影人物の顔との相似度を求める。そして、顔認識部 32は上記の相似度が閾値を上回る場合に撮影人物が所定の登録人物に合致すると判定する。

[0055] なお、 CPU26は、顔認識処理の結果に基づ!/、て、撮影条件または画像処理の設定変更や、撮像素子 16へのレリーズ指示などを実行することが可能である。

顔登録メモリ 27には、 CPU26の顔認識部 32が生成した顔認識データが記録される。この顔登録メモリ 27には登録人物ごとにグループフォルダが生成されている。グループフォルダには、各登録人物の顔認識データがそれぞれ記録されている。すなわち、顔登録メモリ 27の顔認識データは、グループフォルダによって登録人物ごとにグループィ匕されている。例えば、グループフォルダには、同一の登録人物に関して顔の向き、眼鏡の有無および撮影条件などが異なる複数の顔認識データを記録することが可能である。そして、登録人物を指定することで、 CPU26はグループフォルダ内の顔認識データを顔登録メモリ 27から一括して読み出すことが可能となっている。

[0056] また、顔登録メモリ 27には、「登録人物の名称」および「顔認識時の処理設定」のデータが記録されて！ヽる。上記の「登録人物の名称」および「顔認識時の処理設定」は、各登録人物のグループフォルダにそれぞれ対応付けされて！ヽる。

ここで、「顔認識時の処理設定」には、登録人物が認識された場合に適用される電子カメラの各種制御の設定が記録されている。例えば、「顔認識時の処理設定」には、（1)撮影時の撮影条件の設定、（2)撮影画像データの画像処理の設定、（3)撮影画像データの記録先の設定、（4)撮影画像データの印刷指定の設定、（5)撮影画像データの送信設定、などが含まれる。

[0057] 上記（1)の撮影条件の設定には、各登録人物を撮影するときの露出補正値や、被写界深度の設定 (浅め、標準の選択)などが含まれる。また、登録人物の検出の際に CPU26が自動的に撮影を行う設定も可能である。上記（2)の画像処理の設定には、撮影画像データのソフトフォーカス処理の有無の設定、エッジ強調の抑制の設定などが含まれる。

上記（3)の記録先の設定では、撮影画像データの記録先となる記録媒体 29内の記録フォルダのディレクトリパスを各登録人物ごとに指定できる。すなわち、 CPU26 は顔登録メモリ 27のデータを参照し、各登録人物ごとに異なる記録フォルダに撮影画像データを記録することが可能となる。

[0058] 上記（4)の印刷指定の設定では、例えば、 DPOF (Digital Print Order Format)などの規格による撮影画像データの印刷指定の有無を各登録人物ごとに指定できる。なお、上記（5)の送信設定では、登録人物の撮影時における撮影画像データの送信の要否と

、送信先のアドレス情報 (電子メールアドレス）とを指定できる。

また、顔登録メモリ 27〖こは、「顔登録画像」、「顔認識データの登録時期」および「顔認識データの取得時の撮影条件」のデータが記録されて、る。上記の「顔登録画像」

、「顔認識データの登録時期」および「顔認識データの取得時の撮影条件」のデータは、グループフォルダ内の個々の顔認識データにそれぞれ対応付けされている。

[0059] 上記の「顔登録画像」は顔認識データ取得時の撮影画像データであって、所定の画素サイズにリサイズされている。そして、「顔登録画像」は上記の編集画面で液晶モニタ 24に表示される。すなわち、「顔登録画像」は、登録人物または顔認識データの識別性、検索性を高めるインデックス画像として機能する。例えば、「顔登録画像」によって、ユーザーは誰のどのような画像 (顔正面、横向きなど)力も顔認識データが生成されたかを編集画面で確認することも可能となる。

[0060] 「顔認識データの登録時期」は、その顔認識データの元となる顔登録画像データの撮影日時のデータである。また、「顔認識データの取得時の撮影条件」は、顔登録画像データの撮影条件のデータである。上記の撮影条件には、例えば、撮影光学系 1 1の焦点距離のデータや、撮影時のホワイトバランスおよび露出条件や、撮影時のフラッシュ発光の有無などが含まれる。なお、「顔認識データの登録時期」および「顔認識データの取得時の撮影条件」のデータは、 CPU26が顔認識処理で使用する顔認識データを絞り込む場合の判定にも使用される。

[0061] また、顔登録メモリ 27には、各登録人物ごとの撮影回数を示す撮影回数データも記録される。この撮影回数データの撮影回数は、 CPU26が顔認識撮影モードでの顔認識の結果に応じてインクリメントする。なお、上記の撮影回数は、ユーザーが編集画面などで手動で入力するようにしてもょ、。

以下、第 1実施形態の電子カメラの動作を「顔登録モード」と「顔認識撮影モード」とに分けて説明する。

[0062] (顔登録モードでの動作）

図 2は第 1実施形態の「顔登録モード」の動作を示す流れ図である。この「顔登録モード」は撮影モードの一種であって、ユーザーが登録人物の顔を撮影して顔認識データを生成するためのモードである。

ステップ 101：まず、ユーザーは操作部材 23により電子カメラの撮影モードを「顔登録モード」に設定する。

[0063] 例えば、電子カメラが「通常撮影モード」や「ポートレート撮影モード」に設定された状態において、ユーザーはモード選択画面を呼び出す操作を行う。これにより、 CP U26はモード選択画面（図 3 (a)参照）を液晶モニタ 24に表示する。そして、ユーザ一は操作部材 23でモード選択画面上の選択枠を操作し、 CPU26に「顔登録モード」の起動を指示する。これにより、 CPU26は「顔登録モード」の一連の動作を開始する。

[0064] ステップ 102 : CPU26は、液晶モニタ 24に「顔登録モード」のメニューを表示する（図 3 (b)参照)。このメニューでは、ユーザーは操作部材 23で選択枠を操作して「新規」または「追加」を CPU26に選択入力する。新たな人物の顔を登録する場合には、ユーザーは「新規」を選択入力する。一方、既に登録されている人物の顔をさらに撮影する場合には、ユーザーは「追加」を選択入力する。

[0065] ステップ 103 : CPU26は、メニュー（S 102)で「新規」が選択されたか否かを判定する。「新規」の場合 (YES側）には S104に移行する。一方、「追加」の場合 (NO側）には S 105〖こ移行する。

ステップ 104 : S102で「新規」が選択された場合、 CPU26は顔登録メモリ 27に新規登録人物 (今回撮影する登録人物）のグループフォルダを生成する。そして、 CPU 26は「登録人物の詳細情報画面」（図 5参照）を液晶モニタ 24に表示するとともに、ユーザーに「登録人物の名称」および「顔認識時の処理設定」の情報の入力を促す。図 5の「登録人物の詳細情報画面」で入力された情報は、グループフォルダに対応付けされた状態で顔登録メモリ 27に記録される。その後、 S106に移行する。

[0066] なお、ユーザーは「登録人物の名称」および「顔認識時の処理設定」の入力を省略することもできる。この場合には、ユーザーは、図 3 (b)の編集の項目力も図 5の「登録人物の詳細情報画面」を立ち上げて、これらの情報を後で改めて顔登録メモリ 27に人力することができる。

ステップ 105 :—方、 S102で「追加」が選択された場合、 CPU26は登録人物の選択画面（図 4参照）を液晶モニタ 24に表示し、今回撮影する登録人物をユーザーに選択入力させる。

[0067] ステップ 106 : CPU26は、電子カメラの撮影時の設定を顔登録撮影に適した設定に変更する。具体的には CPU26は以下の（1)〜（7)の設定を行う。

(D CPU26は、「顔登録モード」において AF方式を顔検出モードに設定する。この場合には、 CPU26はレリーズ釦の操作に関係なぐスルー画像データによって検出した顔領域に合わせてピント合わせを自動的に繰り返す。これにより、検出した顔にピントを合わせることが可能となる。なお、ユーザーがレリーズ釦を半押しした場合に CPU26が AFロックを行うようにしてもよ!ヽ。

[0068] (2) CPU26は、「顔登録モード」にお、て AE方式を顔検出領域を基準とするスポット AEモードに設定する。この場合には、 CPU26はスルー画像データによって検出した顔領域に合わせて AE演算を実行する。これにより、検出した顔の露出が最適化される。

(3) CPU26は、「顔登録モード」において画像処理部 20の電子ズーム処理を不能化する。または、 CPU26は、電子ズームの倍率を例えば 2倍程度に制限する等の手段で、電子ズームの最大倍率を通常時よりも小さくなるように制限する。電子ズームを行った場合には撮影した顔登録画像の情報量が少なくなつて、顔の特徴点の抽出精度が低下するからである。

[0069] (4) CPU26は、「顔登録モード」においてズームレンズ 11aの倍率調整範囲を通常撮影時よりも広角側に狭めて最大倍率を小さくする。顔検出時には、ズームレンズを広角側に設定して被写界深度を深くする方が顔検出できる可能性が増加するからである。また、ズームレンズを広角側に設定すれば、撮影画像が手ぶれする可能性も低下する力らである。なお、この場合において、ズームレンズ 11aの位置を広角端に固定すると被写界深度がより深くなるので特に好ましい。 [0070] ところで、撮影光学系の絞り（不図示)を絞っても被写界深度は深くなるが、この場合にはシャツタ秒時に相当する撮影時間が長くなつて顔登録画像が手ぶれする可能性が増加する。そのため、手ぶれを回避する観点から、 CPU26は絞りをできるだけ開放側に設定することがより好ましい。なお、 CPU26は、顔検出ができない場合に被写界深度を徐々に深くする制御を行ってもよい。

[0071] (5) CPU26は、「顔登録モード」において、揺動センサ部 13の出力に基づいて像ぶれ補正レンズ 14を移動させて光学的なぶれ補正を行う。手ぶれによる顔登録画像の撮影失敗を回避するためである。

(6) CPU26は、「顔登録モード」において、アナログ信号処理部 17における画像信号のゲイン設定 (撮像感度の設定)を通常撮影時の設定よりも高くする。撮像感度が高くなると上記の撮影時間は短くなるので、顔登録画像が手ぶれする可能性も低下するからである。

[0072] (7) CPU26は、「顔登録モード」において、閃光発光部 25の閃光発光を不能化する。撮影時に閃光発光を行うと撮影人物の顔に影ができて顔検出の精度が低下する力もである。なお、被写界が暗く十分な露出が確保できない状態で強制的に撮影する場合や、閃光発光時の顔認識データを意図的に取得しょうとする場合には、 CPU 26は閃光発光部 25を例外的に発光させるようにしてもょ、。

[0073] ステップ 107： CPU26は、撮像素子 16を駆動させてスルー画像信号の取得を行う。撮像素子 16は所定間隔毎に間引き読み出しでスルー画像信号を出力する。画像処理部 20はスルー画像信号に基づいてスルー画像データを生成する。そして、液晶モニタ 24にはスルー画像データに基づいてプレビュー画像が動画表示される。ステップ 108 :—方、 CPU26の顔検出部 31は、スルー画像データに公知の顔検出処理を施して撮影画面内の顔領域を検出する。

[0074] また、 S108では、顔検出部 31は顔領域の検出精度 (顔の検出正解率)を規定する閾値を低くして、顔候補の検出率を通常よりも高めにするのがより好ましい。顔検出がしにくい顔の向き (例えば横向きなど)で顔登録画像を撮影しょうとする場合もある力である。

なお、顔検出部 31が撮影画面内で人物の顔を検出した場合、画像処理部 20はプレビュー画像の顔領域の位置に矩形の枠を合成表示する（図 6参照)。これにより、ュ一ザ一はプレビュー画像で顔検出の有無を確認することができる。

[0075] ステップ 109 : CPU26は S 108で撮影画面力も顔検出されたか否かを判定する。

顔検出された場合 (YES側）には S110に移行する。一方、顔検出されていない場合 (NOftlJ)には S107に戻る。

ステップ 110： CPU26は、顔領域における顔の特徴点の検出状態に基づ!/、て顔の向きを推定する。そして、 CPU26は推定した顔の向きが、予め指定された顔の向き（正面向き、横向きなど)と一致する力否かを判定する。顔の向きが所定方向である場合 (YES側）には S111に移行する。一方、顔の向きが所定方向以外である場合 (N O側）には S107に戻る。このとき、 CPU26は「被写体の顔の向きを変えて撮影しなおして下さ、」などの警告表示を液晶モニタ 24等に表示させるようにしてもょ、。

[0076] ここで、 S110での顔の向きの検出は公知の手段によって行われる。例えば、特開平 9— 163212号公報のように、 CPU26が顔画像力も顔の輪郭と鼻の座標とを検出して顔の向きを計算してもよい。あるいは特開 2005— 209137号公報のように、顔方向毎に顔画像を分類登録した画像データベースに基づ!/、て CPU26が顔の向きを識另 IJするようにしてもよヽ。

[0077] S110での NO側の場合には CPU26はレリーズを行わず、被写体の顔の向きが変わるまで撮影が行われることはない。したがって、所定の顔の向きの顔登録画像から顔認識データを生成することが可能となる。

ステップ 111 : CPU26は、顔領域における顔の特徴点の検出状態に基づいて顔の表情を推定する。そして、 CPU26は推定した顔の表情がニュートラルな状態（目つぶりなどをして、な、標準状態)である力否かを判定する。顔の表情が-ユートラルである場合 (YES側）には S112に移行する。一方、顔の表情が-ユートラルでない場合 (NO側）には S107に戻る。このとき、 CPU26は「被写体の表情を変えて撮影しなおして下さ、」などの警告表示を液晶モニタ 24等に表示させるようにしてもょ、。

[0078] ここで、 S111での顔の表情の検出は公知の手段によって行われる。例えば、特開 2004— 272933号公報のように、普通の表情、目をつぶった顔、口を開いた顔、笑顔などのクラスに分類された学習用顔画像を予め用意し、 CPU26が正準判別分析による識別を行なった上で各クラスごとに設定された評価値で顔の表情を判別してちょい。

あるいは、開いた目、閉じた目、開いた口、閉じた口などの標準パターンを予め用意し、 CPU26が各パターンと顔領域とのマッチングをとり、パターンの組合せ力も表情を推定してもよい。

[0079] S111での NO側の場合には CPU26はレリーズを行わず、被写体の顔の表情が変わるまで撮影が行われることはない。したがって、顔の表情が-ユートラルな状態の顔登録画像をより確実に取得できる。笑顔や目をつぶった状態の画像から顔認識データを生成すると顔認識の精度が大きく低下する可能性もあるため、表情が-ユートラルな顔登録画像は顔認識に最も適した画像であると考えられるからである。

[0080] なお、 CPU26は、上記の S110および S111の処理をユーザーの設定に応じて省略することも可能である。

ステップ 112： CPU26は、検出した顔領域の位置を基準として AF演算および AE 演算を実行する。

ステップ 113 : CPU26はレリーズ釦が全押しされたか否かを判定する。レリーズ釦が全押しされた場合 (YES側）〖こは S114〖こ移行する。一方、レリーズ釦に入力がな V、場合 (NO側）には CPU26はレリーズ釦の全押し操作を待機する。

[0081] ステップ 114： CPU26は撮像素子 16を駆動させて被写体像を撮影する。その後、画像処理部 20はレリーズ時の画像信号に基づヽて撮影画像データ (顔登録画像データ）を生成する。

ステップ 115： CPU26の顔認識部 32は、顔登録画像データ（S 114)から登録人物の顔認識データを生成する。また、画像処理部 20は、顔登録画像データの顔領域をトリミングするとともに、解像度変換で所定のサイズにリサイズしてインデックス画像データを生成する。

[0082] ステップ 116： CPU26は、顔認識データ、インデックス画像データ、顔登録画像データの撮影条件および撮影日時を顔登録メモリ 27に記録する。上記の各データはそれぞれ対応付けされた状態で、 S 104または S 105で指定された登録人物のグループフォルダに記録される。上記の各データのうち、インデックス画像データは「顔登録画像」に対応する。また、撮影条件は「顔認識データの登録時期」に対応し、撮影条件は「顔認識データの取得時の撮影条件」に対応する。

[0083] 以上で、「顔登録モード」での一連の動作が終了する。なお、 CPU26は、 S116の後に S107に戻って登録人物の顔認識データの登録をさらに続行するようにしてもよい。

以下、第 1実施形態の「顔登録モード」の効果を説明する。上記の顔登録撮影では、撮影時の設定が顔登録に適した設定が変更されるとともに、顔領域の検出位置を基準として AF演算および AE演算が行われる（S 106、 S112)。そして、人物の顔を撮影した顔登録画像データに基づいて顔認識データが生成される（S114、 S115) 。そのため、ユーザーは登録したい人物に電子カメラを向けてレリーズするだけで、適正に撮影された顔登録画像に基づく顔認識データを容易に取得できる。

[0084] (顔認識撮影モードでの動作）

図 7は第 1実施形態の「顔認識撮影モード」の動作を示す流れ図である。この「顔認識撮影モード」は、指定した登録人物が撮影画面に存在する場合に、電子カメラが所定の制御を行って撮影画像データを取得する撮影モードである。

ステップ 201：まず、ユーザーは操作部材 23により電子カメラの撮影モードを「顔認識撮影モード」に設定する。

[0085] 例えば、電子カメラが「通常撮影モード」や「ポートレート撮影モード」に設定された状態において、ユーザーはモード選択画面を呼び出す操作を行う。これにより、 CP U26はモード選択画面（図 3 (a)参照）を液晶モニタ 24に表示する。そして、ユーザ一は操作部材 23でモード選択画面上の選択枠を操作し、 CPU26に「顔認識撮影モード」の起動を指示する。これにより、 CPU26は「顔認識撮影モード」の一連の動作を開始する。

[0086] ステップ 202 : CPU26は、登録人物の選択画面（図 4参照）を液晶モニタ 24に表示する。そして、 CPU26は、顔認識対象の登録人物 (撮影時に顔認識を行う登録人物 )の指定入力を受け付ける。なお、顔認識対象の登録人物を撮影前に予めユーザー力 SCPU26に指定入力しておくことも可能である。

ここで、「登録人物の選択画面」では、 CPU26は 1または 2以上の登録人物の指定を受け付けることができる。例えば、 CPU26は顔登録メモリ 27の登録人物の全指定を受け付けることもできる。また、グループフォルダを所定のカテゴリ（例えば、家族、サークルなど)で予めリンクするとともに、ユーザーが選択画面でカテゴリを指定入力することで、 CPU26にリンクされた登録人物の一括指定を入力することもできる。

[0087] ステップ 203： CPU26は、撮像素子 16を駆動させてスルー画像信号の取得を行う。撮像素子 16は所定間隔毎に間引き読み出しでスルー画像信号を出力する。画像処理部 20はスルー画像信号に基づいてスルー画像データを生成する。そして、液晶モニタ 24にはスルー画像データに基づいてプレビュー画像が動画表示される。ステップ 204 :—方、 CPU26の顔検出部 31は、スルー画像データに公知の顔検出処理を施して撮影画面内の顔領域を検出する。

[0088] ステップ 205 : CPU26は S204で撮影画面力も顔検出されたか否かを判定する。

顔検出された場合 (YES側）には S206に移行する。一方、顔検出されていない場合 (NO側）には S209に移行する。

ステップ 206： CPU26は、検出した顔領域の位置を基準として AF演算を実行する。なお、顔領域を複数検出した場合には、 CPU26は、撮影画面の中央に位置する顔領域または最も至近側に位置する顔領域を優先して AF演算を実行する。

[0089] ステップ 207 : CPU26の顔認識部 32は、検出した顔領域（S204)に対して顔認識処理を実行する。そして、顔認識部 32は、認識対象の顔（S202)が含まれているか否かを判定する。認識対象の顔が含まれている場合 (YES側）には S208に移行する。一方、認識対象の顔が含まれない場合 (NO側）〖こは S210〖こ移行する。

ステップ 208 : CPU26は、検出された登録人物に対応する「顔認識時の処理設定」のデータに基づ、て、電子カメラの撮影条件の設定や画像処理の設定などを変更する。その後、 S210に移行する。

[0090] ここで、認識対象の顔が撮影画面内に複数検出されている場合には、 CPU26は所定のアルゴリズムで登録人物の優先順位を決定する。そして、 CPU26は、優先順位が最も高い登録人物に対応する「顔認識時の処理設定」に基づいて電子カメラの各種設定を変更する。なお、「顔認識時の処理設定」で登録人物の自動撮影が設定されてヽる場合には、 CPU26は S211に移行して登録人物を自動的に撮影する。 [0091] ステップ 209 :—方、この場合には、 CPU26はユーザーによるレリーズ釦の半押し操作に応じて、通常撮影時のアルゴリズムで AFエリアを選択して AF演算を実行するステップ 210 : CPU26はレリーズ釦が全押しされたか否かを判定する。レリーズ釦が全押しされた場合 (YES側）には S211に移行する。一方、レリーズ釦に入力がな V、場合 (NO側）には CPU26はレリーズ釦の全押し操作を待機する。

[0092] ステップ 211： CPU26は撮像素子 16を駆動させて被写体像を撮影する。その後、画像処理部 20はレリーズ時の画像信号に基づヽて撮影画像データを生成する。なお、認識対象の顔が撮影されている場合には、画像処理部 20は S208で設定された画像処理を撮影画像データに施す。

ステップ 212 : CPU26は撮影画像データを記録媒体 29に記録する。なお、認識対象の顔が撮影されている場合、 CPU26は顔登録メモリ 27で指定されているディレクトリパスに基づ、て、所定の記録フォルダに撮影画像データを分類して記録することもできる。以上で、「顔認識撮影モード」での一連の動作が終了する。

[0093] 以下、本実施形態の「顔認識撮影モード」の効果を説明する。上記の顔認識撮影モードでは、顔認識データに基づいて撮影人物の顔認識が行われる（S207)。そして、認識対象の顔が検出された場合には、その登録人物に対応する設定で撮影時の各種処理などが行われる（S208、 S211、 S212)。そのため、登録人物の撮影時にユーザーの意図を反映させた処理を自動的に行うことができ、電子カメラを操作するユーザーの利便性が著しく向上する。

[0094] <第 2実施形態の説明 >

図 8は第 2実施形態の「顔登録モード」での動作を示す流れ図である。なお、図 8の S301〜S312iま図 2の S101〜S112にそれぞれ対応し、図 8の S315iま図 2の S11 6に対応するので重複説明を省略する。

ステップ 313 : CPU26は AF終了後に自動的にレリーズを行って、撮像素子 16を駆動させて被写体像を撮影する。その後、画像処理部 20はレリーズ時の画像信号に基づヽて撮影画像データ (顔登録画像データ）を生成する。

[0095] ステップ 314 : CPU26の顔認識部 32は、顔登録画像データ（S313)から登録人物の顔認識データを生成する。また、画像処理部 20は、顔登録画像データからインデックス画像データを生成する。

以下、第 2実施形態の「顔登録モード」の効果を説明する。第 2実施形態では、顔検出時には人物の顔を自動的に撮影して顔認識データが生成される（S313、 S314 )。そのため、ユーザーは登録したい人物に電子カメラを向けるだけで、適正な顔登録画像に基づく顔認識データを容易に取得することが可能となる。特に、第 2実施形態ではピント合わせおよびレリーズが自動化されるので、撮影光学系をユーザー自身に向けてユーザーの顔登録撮影を 1人のみで行うことも可能となる。

[0096] <第 3実施形態の説明 >

図 9は第 3実施形態の「顔登録モード」での動作を示す流れ図である。なお、図 9の S401〜S409iま図 2の S101〜S109にそれぞれ対応し、図 9の S414iま図 2の S11 6に対応するので重複説明を省略する。

ステップ 410： CPU26は、検出した顔領域の位置を基準として AF演算および AE 演算を実行する。

[0097] ステップ 411 : CPU26は自動的に所定回数のレリーズを連続して行ない、複数の撮影画像データ (顔登録画像データ）を取得する。ここで、 S411では CPU26は撮影条件をすベて同じにして複数の顔登録画像データを撮影する。例えば、被写体が静止して、な、場合や手ぶれが発生する場合には、同じ撮影条件でも異なる画像が撮影されるためである。なお、 CPU26は露出条件やホワイトバランスなどのパラメータを段階的に変化させてブラケティング撮影を行ってもよい。

[0098] ステップ 412 : CPU26の顔検出部 31は、 S411で取得した複数の顔登録画像データに対してそれぞれ顔検出処理を施して特徴点を抽出する。そして、 CPU26は、顔の特徴点の検出状態が良好な順 (例えば、抽出された特徴点の数が多い順)に各顔登録画像データに優先順位を設定する。なお、第 1実施形態の S110や S111で示したように、 CPU26は顔登録画像データの顔の向きや表情も考慮して上記の優先順位を設定してもよい。

[0099] ステップ 413 : CPU26は、 S411で取得した複数の顔登録画像データのうちで最も優先順位の高い顔登録画像データを選択する。そして、 CPU26の顔認識部 32は、この選択された顔登録画像データから顔認識データを生成する。また、画像処理部 2 0は、選択された顔登録画像データからインデックス画像データを生成する。

以下、第 3実施形態の「顔登録モード」の効果を説明する。第 3実施形態では、複数の顔登録画像データから最適な画像を選択して顔認識データを生成する。そのため、第 3実施形態によれば、顔認識撮影時における顔認識の精度をより向上させやすくなる。

[0100] <第 4実施形態の説明 >

図 10は第 4実施形態の「顔登録モード」での動作を示す流れ図である。なお、図 10 の S501〜S505iま図 2の S101〜S105ににそれぞれ対応し、図 10の S513、 S514 は図 2の S115、 S116にそれぞれ対応するので重複説明を省略する。

ステップ 506： CPU26は、電子カメラの撮影時の設定を顔登録撮影に適した設定に変更する。具体的には、 CPU26は S106の（3)〜（7)と同様の設定を行うとともに、以下の（a)および (b)の設定を行う。

[0101] (a) CPU26は、「顔登録モード」において撮影画面中央の AFエリアを選択して AF 演算を行う。この場合には、 CPU26はレリーズ釦が半押し操作に応じていわゆる中央重点 AFでピント合わせを行うとともに、ピントが合った時点で AFロックする制御を実行する。撮影画面中央で顔登録画像を取得することで、撮影光学系の収差の影響をより小さくして精度の高い顔認識データを生成するためである。

[0102] (b) CPU26は、「顔登録モード」において AE方式を撮影画面中央を基準とするスポット AEモードに設定する。これにより、撮影画面中央で撮影される顔の露出が最適化される。

ステップ 507： CPU26は、撮像素子 16を駆動させてスルー画像信号の取得を行う。撮像素子 16は所定間隔毎に間引き読み出しでスルー画像信号を出力する。画像処理部 20はスルー画像信号に基づいてスルー画像データを生成する。そして、液晶モニタ 24にはスルー画像データに基づいてプレビュー画像が動画表示される。

[0103] ここで、 S507での画像処理部 20は、プレビュー画像の撮影画面の中央に構図補助表示を合成する（図 11参照)。図 11の構図補助表示は撮影画面内における顔を収める位置を矩形状の枠で示したものである。この構図補助表示により、ユーザーはフレーミングの際に顔の位置決めを容易に行うことができる。そのため、ユーザーは状態のよい顔登録画像を簡単に撮影することが可能となる。なお、構図補助表示の他の例として、矩形状の枠の四隅のみをプレビュー画像に合成してもよい。あるいは、構図補助表示の他の例として、例えば、顔を収める範囲以外をモノクロ表示するなどの手段で、顔を収める範囲の内外で画像の表示色を変化させるようにしてもよい（いずれも図示を省略する）。

[0104] また、 S507での画像処理部 20は、プレビュー画像の中央以外の周辺領域に撮影見本表示を合成する（図 11参照)。図 11の撮影見本表示は所定方向を向!、た人物の顔の写真やイラストを表示したものである。例えば、正面向きの顔登録画像を撮影する場合、撮影見本表示には正面向きの顔画像が表示されることとなる。この撮影見本表示により、

今回の撮影に適した顔の状態 (顔の向きなど)をユーザーは視覚的に理解できる。そのため、ユーザーは状態のよい顔登録画像を簡単に撮影することが可能となる。なお、画像処理部 20は、「正面の顔を撮影して下さい」などのメッセージ表示をプレビュ一画像に合成してもよい。

[0105] ステップ 508 : CPU26はレリーズ釦が半押しされたか否かを判定する。レリーズ釦が半押しされた場合 (YES側）〖こは S509〖こ移行する。一方、レリーズ釦に入力がない場合 (NO側）には S 507に戻る。

ステップ 509 : CPU26は、ユーザーによるレリーズ釦半押し操作に応じて撮影画面中央を基準とする AF演算および AE演算を実行する。

[0106] ステップ 510 : CPU26はレリーズ釦が全押しされたか否かを判定する。レリーズ釦が全押しされた場合 (YES側）には S511に移行する。一方、レリーズ釦に入力がな

V、場合 (NO側）には CPU26はレリーズ釦の全押し操作を待機する。

ステップ 511 : CPU26は、ユーザーによるレリーズ釦全押し操作に応じて撮影画像データ (顔登録画像データ)を取得する。

[0107] ステップ 512 : CPU26の顔検出部 31は、顔登録画像データ（S511)の撮影画面中央の部分に公知の顔検出処理を施して撮影画面内の顔領域を検出する。

以下、第 4実施形態の「顔登録モード」の効果を説明する。第 4実施形態では、ユーザ一がマニュアル撮影した顔登録画像データに基づいて顔認識データが生成される。そのため、ユーザーの意図に即した顔認識データを作成することが可能となる。また、撮影光学系の収差の影響が少ない撮影画面中央で顔登録画像を取得するので、より精度の高、顔認識データを生成することが可能となる。

[0108] (第 1実施形態から第 4実施形態における顔登録モードの変形例）

上記の実施形態では撮影時に顔登録画像力ゝら顔認識データを生成する例を説明した。しかし、顔登録画像から顔認識データを生成する代わりに、 CPUが顔登録画像から顔領域の部分を切り出して顔画像データを生成し、この顔画像データをメモリや記録媒体に記録するようにしてもよい。そして、コンピュータによる後処理で顔画像データ力顔認識データを生成するようにすることもできる。

[0109] ここで、顔画像データは、顔登録画像の顔領域を例えば 80 X 80画素程度のサイズで切り出して生成される。力かる顔画像データの画像に対しては、解像度変換による変倍処理を施さないようにするのが好ましい。また、顔登録画像データの場合と同様に、 CPUは、上記の顔画像データに、インデックス画像データ、顔登録画像データの撮影条件および撮影日時を対応付けして記録しておくことが好ましい。さらに、上記の顔画像データについても、 CPUは、同一の撮影人物から生成した複数の顔画像データを同一のフォルダ等にグループ化して記録するのが好ましい。

[0110] <第 5実施形態の説明 >

第 5実施形態は第 1実施形態の変形例であって、本発明の画像処理装置の一形態である電子カメラによって撮影画像力顔認識データを生成する。ここで、第 5実施形態の電子カメラの構成は、第 1実施形態と共通するので重複説明は省略する。

(顔登録モードでの動作）

図 12は第 5実施形態の「顔登録モード」の動作を示す流れ図である。この「顔登録モード」は再生モードの一種であって、撮影画像データの再生時において顔認識データを生成するためのモードである。

[0111] ステップ 1101 :まず、ユーザーは操作部材 23により電子カメラを「再生モード」に設定する。 CPU26は記録媒体 29や内蔵メモリ 19から顔登録画像データ (顔認識データの生成に使用する撮影画像データ）を読み出して、顔登録画像データの再生画像を液晶モニタ 24に再生表示する。なお、 CPU26は、入出力 IZF22の外部接続端子または通信ユニット 30を介して接続されたコンピュータ (不図示)から顔登録画像データを読み出すこともできる。

[0112] ステップ 1102 :ユーザーは操作部材 23により電子カメラのモードを「顔登録モード」に設定する。

例えば、電子カメラが「再生モード」に設定された状態において、ユーザーはモード選択画面を呼び出す操作を行う。これにより、 CPU26はモード選択画面（図 13参照 )を液晶モニタ 24に表示する。そして、ユーザーは操作部材 23でモード選択画面上の選択枠を操作し、 CPU26に「顔登録モード」の起動を指示する。これにより、 CPU 26は「顔登録モード」の一連の動作を開始する。

[0113] ステップ 1103 : CPU26の顔検出部 31は、顔登録画像データ（S 1101)に公知の顔検出処理を施して撮影画面内の顔領域を検出する。

ステップ 1104： CPU26は撮影画面での顔領域の位置を画像処理部 20に出力する。そして、画像処理部 20は再生画像の顔領域の位置に矩形の枠を合成表示する（図 14〜図 16参照)。これにより、ユーザーは液晶モニタ 24で顔検出の状態を確認できる。

[0114] ステップ 1105： CPU26は顔検出処理の再試行をユーザーに確認する表示（「OK 」および「やり直し」の選択表示）を液晶モニタ 24に表示する（図 14参照)。登録しょうとする人物の顔に枠表示がない場合には、ユーザーは操作部材 23で「やり直し」を選択入力する。一方、登録しょうとする人物の顔に枠表示がある場合には、ユーザーは操作部材 23で「ΟΚ」を選択入力する。

[0115] そして、 CPU26は、上記の確認表示で「やり直し」（顔検出処理の再試行）が選択されたか否かを判定する。「やり直し」が選択された場合 (YES側）には S1106に移行する。一方、「OK」が選択された場合 (NO側）には S 1107に移行する。

ステップ 1106： CPU26の顔検出部 31は、操作部材 23からのユーザーの入力に基づいて、顔領域の検出精度を規定する閾値を変更する。

[0116] 例えば、選択したい人物の顔に枠表示がない場合には、ユーザーは上記の閾値を前回よりも低い値に変更する。その後、 S1103に戻って、顔検出部 31は顔登録画像データに顔検出処理を施して撮影画面内の顔領域を再検出する。この場合には、顔領域を正しく検出する正解率は低下する一方で顔候補 (枠表示される顔領域)の数は前回より増えるので、顔検出がしにくい状態の顔領域 (例えば横向きの顔など)を検出できる可能性がより向上する。

[0117] また、顔登録画像に多数の人物が写っており、かつ顔候補が必要以上に検出されている場合には、ユーザーは上記の閾値を前回よりも高い値に変更する。その後、 S 1103に戻って、顔検出部 31は顔登録画像データに顔検出処理を施して撮影画面内の顔領域を再検出する。この場合には、顔領域を正しく検出する正解率が高まるので、顔候補の数が絞り込まれて後述の選択作業 (S 1107)が容易となる。

[0118] ステップ 1107 : CPU26は顔登録画像のいずれかの顔領域（S 1103)に選択枠を合成表示する（図 15参照)。ユーザーは、操作部材 23で選択枠を操作して顔認識データを作成する人物を選択する一方で、 CPU26はユーザーの選択入力を受け付ける。なお、 S1107では、ユーザーは 1つの再生画像から複数の顔領域を選択することも可能である。

[0119] ステップ 1108 : CPU26は、選択された人物が新規の登録人物か否かをユーザーに確認する表示（「新規」および「追加」の選択表示）を液晶モニタ 24に表示する（図

16参照)。この画面では、ユーザーは入力釦で選択枠を操作して「新規」または「追カロ」を CPU26に選択入力する。新たな人物の顔を登録する場合には、ユーザーは「新規」を選択入力する。一方、既に登録されている人物の顔をさらに撮影する場合には、ユーザーは「追加」を選択入力する。

[0120] そして、 CPU26は、上記の確認表示で「新規」が選択されたか否かを判定する。「新規」が選択された場合 (YES側）には S1109に移行する。一方、「追加」が選択された場合 (NO側）には S 1110に移行する。

ステップ 1109 : S1108で「新規」が選択された場合、 CPU26は顔登録メモリ 27に新規登録人物のグループフォルダを生成する。そして、 CPU26は「登録人物の詳細情報画面」（図 5参照）を液晶モニタ 24に表示するとともに、ユーザーに「登録人物の名称」および「顔認識時の処理設定」の情報の入力を促す。図 5の「登録人物の詳細情報画面」で入力された情報は、グループフォルダに対応付けされた状態で顔登録メモリ 27に記録される。その後、 S1111に移行する。

[0121] なお、ユーザーは「登録人物の名称」および「顔認識時の処理設定」の入力を省略し、後で改めて図 5の「登録人物の詳細情報画面」を立ち上げて、これらの情報を顔登録メモリ 27に入力することも可能である。

ステップ 1110 :—方、 S 1108で「追加」が選択された場合、 CPU26は既に登録されている登録人物の選択画面（図 4参照）を液晶モニタ 24に表示し、顔認識データを追加する登録人物をユーザーに選択入力させる。

[0122] ステップ 1111 : CPU26の顔認識部 32は、顔登録画像データのうちで選択された顔領域 (S 1107)から登録人物の顔認識データを生成する。また、画像処理部 20は、顔登録画像データの顔領域をトリミングするとともに、解像度変換で所定のサイズにリサイズしてインデックス画像データを生成する。

ステップ 1112： CPU26は、顔登録画像データの付属データ領域に記録されて!ヽる撮影条件および撮影日時のデータを取得する。例えば、顔登録画像データが Exif (Exchangeable image file format for digital still cameras)規格に準拠し 7こ画像フアイルの場合には、 CPU26は画像ファイルにタグ形式で記録されてヽる撮影条件および撮影日時のデータを読み出して取得する。なお、顔登録画像データのデータ形式が上記の付属データ領域を含まない場合にはこの工程は省略される。

[0123] ステップ 1113： CPU26は、顔認識データ、インデックス画像データ、顔登録画像データの撮影条件および撮影日時を顔登録メモリ 27に記録する。上記の各データはそれぞれ対応付けされた状態で、 S 1109または SI 110で指定された登録人物のグループフォルダに記録される。上記の各データのうち、インデックス画像データは「顔登録画像」に対応する。また、撮影日時は「顔認識データの登録時期」に対応し、撮影条件は「顔認識データの取得時の撮影条件」に対応する。

[0124] 以上で、「顔登録モード」での一連の動作が終了する。なお、 S 1107で複数の顔領域が指定されて、る場合には、 CPU26は顔領域の数に応じて S 1108力 S 1113までの処理を繰り返す。

以下、第 5実施形態の「顔登録モード」の効果を説明する。上記の顔登録モードでは、再生時にお!ヽて記録媒体 29などから読み込んだ撮影画像データから顔認識データが生成される（SI 101、 SI 111)。すなわち、過去に撮影した撮影画像データや

、他の電子カメラで撮影された撮影画像データ力ゝら顔認識データを生成できるので、ユーザーの利便性が大幅に向上する。

[0125] また、上記の顔登録モードでは、顔検出処理で自動的に検出された顔領域に基づいて顔認識データが生成される（S 1103、 Sl l l D oこのとき、ユーザーは検出された顔領域のうちから顔認識データを生成する対象を指定すれば足りるので、顔認識データを容易に生成することができる。

(顔登録モードの動作の変形例）

上記の第 5実施形態では撮影時に顔登録画像力顔認識データを生成する例を説明した。しかし、顔登録画像から顔認識データを生成する代わりに、 CPUが顔登録画像から顔領域の部分を切り出して顔画像データを生成し、この顔画像データをメモリや記録媒体に記録するようにしてもよい。そして、コンピュータによる後処理で顔画像データ力顔認識データを生成するようにすることもできる。

[0126] ここで、顔画像データは、顔登録画像の顔領域を例えば 80 X 80画素程度のサイズで切り出して生成される。力かる顔画像データの画像に対しては、解像度変換による変倍処理を施さないようにするのが好ましい。また、顔登録画像データの場合と同様に、 CPUは、上記の顔画像データに、インデックス画像データ、顔登録画像データの撮影条件および撮影日時を対応付けして記録しておくことが好ましい。さらに、上記の顔画像データについても、 CPUは、同一の撮影人物から生成した複数の顔画像データを同一のフォルダ等にグループ化して記録するのが好ましい。

[0127] <第 6実施形態の説明 >

第 6実施形態は第 1実施形態の変形例であって、顔登録メモリ 27の各種データの編集画面の操作および表示と、顔認識撮影モードの動作とに関する。ここで、第 6実施形態の電子カメラの構成は、第 1実施形態と共通するので重複説明は省略する。

(編集画面の立ち上げ操作の説明）

第 6実施形態の電子カメラの編集画面について説明する。顔登録メモリ 27の各種データを編集または確認する場合、ユーザー (操作者）は操作部材 23によって編集画面を立ち上げる。 [0128] ここで、顔登録メモリ 27に登録された人物の情報は、電子カメラの所有者にとってプライバシーに属する情報である。そのため、電子カメラの CPU26は、ユーザー (操作者）に個人認証を実行し、所有者に予め許可されたユーザーの場合のみ編集画面を表示するように設定できる。ここで、個人認証の手段としては、例えば、パスヮードの入力による認証や、顔認証が挙げられる。また、指紋認証や虹彩認証等の公知のバイオメトリタス認証装置を電子カメラに搭載するようにしてもよい。なお、顔認証の場合は電子カメラの顔認識処理の構成をそのまま利用できることに加えて、不正なァクセスを試行するユーザーに対しては顔の撮影による心理的な抑止効果も働くので特に好ましい。

[0129] 図 17は、編集画面の立ち上げ操作で顔認証を行う場合の流れ図である。なお、顔登録メモリ 27には、編集画面へのアクセスが許可されたユーザーの顔認識データが予め記録されているものとする。

ステップ 2101：まず、ユーザーは操作部材 23により編集画面を立ち上げるための操作を行う。これにより、 CPU26は、液晶モニタ 24に「顔を撮影して下さい」等の顔撮影を促すメッセージを表示する。また、 CPU26は、電子カメラの各種設定を顔認証の撮影に適した設定に変更する。具体的には CPU26は以下の設定を行う。

[0130] まず、 CPU26は AF方式を顔検出モードに設定する。この場合には、 CPU26はレリ一ズ釦の操作に関係なく、スルー画像データによって検出した顔領域に合わせてピント合わせを自動的に繰り返す。また、 CPU26は、 AE方式を顔検出領域を基準とするスポット AEモードに設定する。この場合には、 CPU26はスルー画像データによつて検出した顔領域に合わせて AE演算を実行する。この場合には、ピント合わせおよびレリーズが自動化されるので、撮影光学系を操作者自身に向けて 1人で撮影することが可能となる。

[0131] なお、 S2101において、 CPU26は必要に応じてさらに以下の（1)〜（5)の設定を行う。

(D CPU26は、画像処理部 20の電子ズーム処理を不能化する。電子ズームを行つた場合には撮影した撮影画像の情報量が少なくなつて、顔の特徴点の抽出精度が低下するからである。 [0132] (2) CPU26は、ズームレンズ 11aの位置を広角端に固定する。顔検出時には、ズームレンズを広角側に設定して被写界深度を深くする方が顔検出できる可能性が増カロするカゝらである。また、ズームレンズを広角側に設定すれば、撮影画像が手ぶれする可能性も低下するからである。

(3) CPU26は、揺動センサ部 13の出力に基づいて像ぶれ補正レンズ 14を移動させて光学的なぶれ補正を行う。手ぶれによる撮影失敗を回避するためである。

[0133] (4) CPU26は、アナログ信号処理部 17における画像信号のゲイン設定 (撮像感度の設定)を通常撮影時の設定よりも高くする。撮像感度が高くなるとシャツタ秒時に相当する撮影時間は短くなるので、撮影画像が手ぶれする可能性も低下する力である。

(5) CPU26は、閃光発光部 25の閃光発光を不能化する。撮影時に閃光発光を行うと撮影人物の顔に影ができて顔検出の精度が低下するからである。なお、被写界が暗く十分な露出が確保できな、状態で強制的に撮影する場合には、 CPU26は閃光発光部 25を例外的に発光させるようにしてもょ、。

[0134] ステップ 2102 : CPU26は、撮像素子 16を駆動させてスルー画像信号の取得を行う。撮像素子 16は所定間隔毎に間引き読み出しでスルー画像信号を出力する。画像処理部 20はスルー画像信号に基づいてスルー画像データを生成する。

ステップ 2103 :—方、 CPU26の顔検出部 31は、スルー画像データに公知の顔検出処理を施して撮影画面内の顔領域を検出する。そして、 CPU26は、検出した顔領域の位置を基準として AF演算および AE演算を実行する。

[0135] ステップ 2104 : CPU26は AF終了後に自動的にレリーズを行って、撮像素子 16を駆動させて被写体像を撮影する。その後、画像処理部 20はレリーズ時の画像信号に基づヽて撮影画像データを生成する。

ステップ 2105 : CPU26の顔認識部 32は、 S2103での顔検出の結果に基づいて、撮影画像データ（S2104)の顔領域から顔の特徴点を抽出する。そして、顔認識部 3

2は、撮影人物の顔認識処理を実行する。

[0136] ステップ 2106 :顔認識部 32は、検出した顔が「編集画面へのアクセスが許可されたユーザー」の顔か否かを判定する。「編集画面へのアクセスが許可されたユーザー」の場合 (YES側）には S2107に移行する。一方、「編集画面へのアクセスが許可されたユーザー」ではない場合 (NO側）には、 CPU26は液晶モニタ 24に編集画面を表示することなく処理を終了する。

[0137] なお、 S2106の判定では、顔認識部 32は顔認識処理で相似度を判定する閾値を通常の撮影時よりも高く設定することが好ましい。この場合は、「編集画面へのァクセスが許可されたユーザー」をより確実に識別することが望まれるからである。

ステップ 2107 : CPU26は液晶モニタ 24に編集画面を表示させる。これにより、編集画面へのアクセスが許可されたユーザーは、編集画面で顔認識データの管理'編集を行うことが可能となる。

[0138] (編集画面の表示および操作の説明）

図 4および図 5は編集画面の表示の一例を示す図である。編集画面は、 GUI(Grap hical User Interface)形式の「登録人物の選択画面（図 4参照）」および「登録人物の詳細情報画面（図 5参照）」で構成されている。なお、以下に示す編集画面での表示処理'動作は、いずれも CPU26が所定のシーケンスプログラムに基づいて実行する

[0139] 図 4の「登録人物の選択画面」は編集画面の初期表示画面である。「登録人物の選択画面」では、顔登録メモリ 27の登録人物に対応する人物選択用表示項目が表示される。この人物選択用表示項目の数は顔登録メモリ 27の登録人物の数 (グループフオルダの数）に一致する。そして、「登録人物の選択画面」では人物選択用表示項目が一覧可能に表示される。なお、「登録人物の選択画面」には人物選択用表示項目の一部のみを表示し、スクロール形式または頁形式の画面切り替えで一覧可能としてもよい。

[0140] 上記の人物選択用表示項目にはそれぞれ「登録人物の名称」が表示される。この「登録人物の名称」には、顔登録メモリ 27で登録人物のグループフォルダに対応付けされている「登録人物の名称」のデータが使用される。また、人物選択用表示項目での識別性、検索性を高めるために、人物選択用表示項目には、対応する登録人物を示すインデックス画像が表示される。例えば、 CPU26は以下の手法で人物選択用表示項目のインデックス画像を設定する。 [0141] 第 1に、 CPU26は、所定のイラスト画像群力ユーザーが選択したイラスト画像をィンデッタス画像に設定する。力かるイラスト画像もユーザーの意図によって登録人物の特定や分類に役立てることができる。上記のイラスト画像は、不図示の ROM等に予め記録されたものであって、例えば GIF形式、 BMP形式等のデータ形式で構成される。なお、上記のイラスト画像には、例えばノ、ートマークや星などの図記号や「家族」、「友達」などの文字なども含まれる。

[0142] 第 2に、 CPU26は、顔登録メモリ 27の各グループフォルダに記録されている登録人物の「顔登録画像」をインデックス画像に設定する。この場合には顔登録画像によつて、人物選択用表示項目と登録人物との関係性が視覚的に明確になるので特に好ましい。

また、グループフォルダ内に複数の「顔登録画像」が記録されている場合には、 CP U26は以下の（1)〜（4)の!、ずれかの手法でインデックス画像を選択する。

[0143] (D CPU26は、複数の顔登録画像からユーザーが選択した顔登録画像をインデッタス画像に設定する。この場合には、ユーザーが最適であると判断した顔登録画像力 Sインデックス画像となるので、ユーザーの意図を反映させた表示画面にすることができる。

(2) CPU26は、顔登録メモリ 27の「顔認識データの登録時期」を参照し、複数の顔登録画像から最も撮影日時が新しい画像をインデックス画像に設定する。この場合には、登録人物に関する最新の顔登録画像が自動的にインデックス画像となるので、現在の登録人物に一番近い状態と考えられる顔を表示させることができる。

[0144] (3) CPU26は、複数の顔登録画像のうちで、顔正面を撮影した顔登録画像を選択してインデックス画像に設定する。この場合には、正面を向いた顔画像が自動的にィンデッタス画像となるので、人物選択用表示項目での識別性、検索性をより向上させることができる。なお、顔正面を撮影した顔登録画像が複数存在する場合には、 CP U26は上記（2)に示すように撮影日時の新しい画像をインデックス画像に設定する。

[0145] ここで、顔登録画像の顔向きの検出は以下のようにして行われる。例えば、顔認識データに予め顔の向きに関する識別情報を記録し、 CPU26が上記識別情報を参照して顔登録画像の顔の向きを判断してもよい。また、顔登録画像に対応する顔認識データに着目し、 CPU26は顔認識データでの目、鼻、口等の特徴点の抽出状態から顔の向きを類推するようにしてもよい。

[0146] (4) CPU26は、複数の顔登録画像を所定間隔ごとに順次切り替えて、スライドショ一形式でインデックス画像の表示設定を行う。この場合には、ユーザーは「登録人物の選択画面」で登録人物の顔登録画像の登録数 (すなわち、顔認識データの登録数 )を把握することが可能となる。また、インデックス画像の切り替えにより、視覚的変化に富んでエンタテイメント性の高ヽ「登録人物の選択画面」の表示を実現できる。

[0147] 次に、「登録人物の選択画面」での操作を説明する。「登録人物の選択画面」では、ユーザーは図 4におヽて太線で示す選択枠 (あるいはカーソル等）を操作部材 23で操作し、 CPU26に人物選択用表示項目の指定入力を行うことができる。なお、ユーザ一が表示項目を指定した上でさらに決定入力を行うと、液晶モニタ 24の表示画面が指定した登録人物に対応する「登録人物の詳細情報画面」に切り替わるようになつている。また、「登録人物の選択画面」では、表示項目に対応する登録人物のデータの一括削除を行うこともできる。

[0148] また、「登録人物の選択画面」では、上記した表示項目の指定操作によって、ユーザ一は顔認識対象の登録人物 (撮影時に顔認識を行う登録人物）を CPU26に指定入力できる。このとき、 CPU26は 1または 2以上の登録人物の指定を受け付けることができる。例えば、 CPU26は顔登録メモリ 27の登録人物の全指定を受け付けることもできる。また、グループフォルダを所定のカテゴリ（例えば、家族、サークルなど)で予めリンクするとともに、ユーザーが選択画面でカテゴリを指定入力することで、 CPU 26にリンクされた登録人物の一括指定を入力することもできる。

[0149] さらに、「登録人物の選択画面」では、ユーザーは登録人物の優先順位（「顔認識時の処理設定」が競合する場合の優先順位)を CPU26に設定入力できる。この優先順位は、表示項目の指定操作によって個別的に入れ替えることが可能である。また、 CPU26は、所定条件で登録人物の優先順位を変更することも可能である。例えば、 CPU26は、（1)登録人物の登録順、（2)登録人物の名称の文字列、（3)グループフオルダ内の顔認識データの数、（4)顔認識の指定回数、などを基準として登録人物を昇順'降順にソートし、ソート後の順番に従って優先順位を自動設定できる。また、 CPU26は、撮影回数データに基づいて撮影回数がより多い登録人物の優先順位を高く設定することもできる。なお、「登録人物の選択画面」では、人物選択用表示項目の表示位置または表示順は優先順位と対応しており、優先順位の高い順に人物選択用表示項目が表示されるようになっている。

[0150] 一方、図 5に示す「登録人物の詳細情報画面」は、上下に二分された画面構成となつている。「登録人物の詳細情報画面」の上部領域には、指定された登録人物に関する「登録人物の名称」および「顔認識時の処理設定」のデータが顔登録メモリ 27から読み出されてそれぞれ表示される。そして、「登録人物の詳細情報画面」では、「登録人物の名称」および「顔認識時の処理設定」の任意の項目を指定し、上記の各データの内容をそれぞれ変更できるように設定されている。なお、「登録人物の詳細情報画面」での変更内容は、顔登録メモリ 27の「登録人物の名称」および「顔認識時の処理設定」にそれぞれ上書きされて反映されることとなる。

[0151] また、「登録人物の詳細情報画面」の下部領域には、顔認識データに対応する顔認識データ用表示項目が表示される。顔認識データ用表示項目の総数は登録人物のグループフォルダ内にある顔認識データの数と一致する。そして、「登録人物の詳細情報画面」の下部領域には、顔認識データ用表示項目が一覧可能に表示される。なお、「登録人物の詳細情報画面」の下部領域には顔認識データ用表示項目の一部のみを表示し、スクロール形式または頁形式の画面切り替えで一覧可能としてもよい。

[0152] ここで、顔認識データ用表示項目には、個々の顔認識データに対応付けされているデータが表示される。具体的には、顔認識データ用表示項目には、インデックス画像としての「顔登録画像」と、「顔認識データの登録時期」と、「顔認識データの取得時の撮影条件」とがそれぞれ表示される。これらの情報により、各顔認識データの詳細をユーザーが把握することができ、顔認識データの取捨選択を容易に行うことが可能となる。なお、「顔認識データの取得時の撮影条件」については、顔認識データ用表示項目に直接表示することなぐプルダウン表示や別画面表示などで別途詳細に表示してちょい。

[0153] そして、「登録人物の詳細情報画面」では、図 5において太線で示される選択枠 (あるいはカーソル等）を操作部材 23で操作して、顔認識データ用表示項目をユーザーが指定できるようになつている。そして、「登録人物の詳細情報画面」では、指定した表示項目の表示順の入れ替えや、指定した表示項目に対応する顔認識データの削除、などを行うことが可能である。

[0154] 以上のように、「登録人物の選択画面」では人物選択用表示項目にインデックス画像が表示されるので、ユーザーは所定の登録人物の表示項目を容易に識別することできる。また、「登録人物の詳細情報画面」では顔認識データ用表示項目に顔登録画像が表示されるので、ユーザーは表示項目に対応する顔認識データの概要を視覚的に把握することができる。

[0155] (顔認識撮影モードでの動作）

以下、図 18を参照しつつ、第 6実施形態の電子カメラの「顔認識撮影モード」での動作を説明する。なお、図 18の S3101は図 7の S201に対応するので重複説明を省略する。

ステップ 3102 : CPU26は、登録人物の選択画面（図 4参照）を液晶モニタ 24に表示する。そして、 CPU26は、顔認識対象の登録人物 (撮影時に顔認識を行う登録人物）の指定入力を受け付ける。ここで、 S3102ではユーザーにより複数の登録人物が指定されるものとする。なお、顔認識対象の登録人物を撮影前に予めユーザーが CP U26に指定入力しておくことも可能である。

[0156] ステップ 3103 : CPU26は、撮像素子 16を駆動させてスルー画像信号の取得を行う。撮像素子 16は所定間隔毎に間引き読み出しでスルー画像信号を出力する。画像処理部 20はスルー画像信号に基づヽてスルー画像データを生成する。そして、液晶モニタ 24にはスルー画像データに基づいてプレビュー画像が動画表示される。ステップ 3104 :—方、 CPU26の顔検出部 31は、スルー画像データに公知の顔検出処理を施して撮影画面内の顔領域を検出する。

[0157] ステップ 3105 : CPU26は S3104で撮影画面力も顔検出されたか否かを判定する。顔検出された場合 (YES側）〖こは S3106〖こ移行する。一方、顔検出されていない場合 (NO側）には S3111に移行する。

ステップ 3106 : CPU26は、検出した顔領域の位置を基準として AF演算を実行する。なお、顔領域を複数検出した場合には、 CPU26は、撮影画面の中央に位置する顔領域または最も至近側に位置する顔領域を優先して AF演算を実行する。

[0158] ステップ 3107 : CPU26の顔認識部 32は、検出した顔領域（S3104)に対して顔認識処理を実行する。そして、顔認識部 32は、認識対象の顔（S3102)が含まれている力否かを判定する。認識対象の顔が含まれている場合 (YES側）〖こは S3108〖こ移行する。一方、認識対象の顔が含まれない場合 (NO側）には S3111に移行する。

[0159] ステップ 3108 : CPU26は認識対象の顔が複数検出されているカゝ否かを判定する。認識対象の顔が複数の場合 (YES側）〖こは S3109〖こ移行する。一方、認識対象の顔が 1つのみの場合 (NO側）には S3110に移行する。

ステップ 3109： CPU26は、編集画面で設定された登録人物の優先順位を参照し、顔認識された登録人物の優先順位をそれぞれ比較する。そして、 CPU26は、最も優先順位の高、登録人物に対応する「顔認識時の処理設定」のデータに基づ、て、電子カメラの撮影条件の設定や画像処理の設定などを変更する。その後、 S3112に移行する。なお、「顔認識時の処理設定」で登録人物の自動撮影が設定されている場合には、 CPU26は S3113に移行して登録人物を自動的に撮影する。

[0160] ステップ 3110 : CPU26は、検出された登録人物に対応する「顔認識時の処理設定」のデータに基づ、て、電子カメラの撮影条件の設定や画像処理の設定などを変更する。その後、 S3112に移行する。なお、「顔認識時の処理設定」で登録人物の自動撮影が設定されてヽる場合には、 CPU26は S3113に移行して登録人物を自動的に撮影する。

[0161] ステップ 3111 :—方、この場合には、 CPU26はユーザーによるレリーズ釦の半押し操作に応じて、通常撮影時のアルゴリズムで AFエリアを選択して AF演算を実行する。

ステップ 3112： CPU26はレリーズ釦が全押しされたか否かを判定する。レリーズ釦が全押しされた場合 (YES側）〖こは S3113〖こ移行する。一方、レリーズ釦に入力がな V、場合 (NO側）には CPU26はレリーズ釦の全押し操作を待機する。

[0162] ステップ 3113 : CPU26は撮像素子 16を駆動させて被写体像を撮影する。その後、画像処理部 20はレリーズ時の画像信号に基づ、て撮影画像データを生成する。なお、認識対象の顔が撮影されている場合には、画像処理部 20は S3109、 S3110 で設定された画像処理を撮影画像データに施す。

ステップ 3114 : CPU26は撮影画像データを記録媒体 29に記録する。また、認識対象の顔が撮影されている場合、 CPU26は顔登録メモリ 27で指定されているディレクトリパスに基づ、て、所定の記録フォルダに撮影画像データを分類して記録することちでさる。

[0163] さらに、 CPU26は、 S3109または S3110での顔認識の結果に基づいて顔登録メモリ 27の撮影回数データの撮影回数をインクリメントする。このとき、 CPU26は認識された全ての登録人物の撮影回数をインクリメントしてもよぐ優先順位に応じて選択された登録人物のみ撮影回数をインクリメントするようにしてもよい。以上で、「顔認識撮影モード」での一連の動作が終了する。

[0164] 以下、第 6実施形態の「顔認識撮影モード」の効果を説明する。上記の顔認識撮影モードでは、顔認識データに基づいて撮影人物の顔認識が行われる（S3107)。そして、認識対象の顔が検出された場合には、その登録人物に対応する設定で撮影時の各種処理など力 S行われる（S3109、 S3110、 S3113、 S3114)。そのため、登録人物の撮影時にユーザーの意図を反映させた処理を自動的に行うことができ、電子カメラを操作するユーザーの利便性が著しく向上する。

[0165] また、上記の顔認識撮影モードでは、複数の認識対象が一度に撮影された場合には、ユーザーの設定した優先順位が最も高い登録人物の設定が適用される（S3109 )。そのため、集合写真などの撮影においても撮影画像にユーザーの意図を適切に反映させることが可能となる。特に、上記の優先順位は編集画面でユーザーが自由に変更できるので、撮影シーン等に応じてきめ細かい制御を行うことも容易となる。

[0166] <第 7実施形態の説明 >

図 19は第 7実施形態の電子カメラにおける「顔認識撮影モード」の動作を示す流れ図である。この第 7実施形態は第 1実施形態の変形例であって、電子カメラの構成は第 1実施形態のものと共通するので重複説明を省略する。また、図 19の S4101から S4104は、図 7の S201から S204にそれぞれ対応するので重複説明を省略する。

[0167] ステップ 4105 : CPU26は S4104で撮影画面力も顔検出されたか否かを判定する。顔検出された場合 (YES側）には S4106に移行する。一方、顔検出されていない場合 (NO側）〖こは S4114〖こ移行する。

ステップ 4106： CPU26は、検出した顔領域の位置を基準として AF演算を実行する。なお、顔領域を複数検出した場合には、 CPU26は、撮影画面の中央に位置する顔領域または最も至近側に位置する顔領域を優先して AF演算を実行する。

[0168] ステップ 4107 : CPU26は、顔認識対象の登録人物に関するすべての顔認識データ (顔認識データ群）の数をカウントする。具体的には、顔登録メモリ 27のうちで、顔認識対象の登録人物のグループフォルダに記録されている顔認識データがカウントの対象となる。

ステップ 4108 : CPU26は、撮影画面内で検出された顔領域の数 (S4104)と、顔認識データ群に含まれる顔認識データの数 (S4107)とを乗じて、今回の顔認識処理の最大演算量を示す評価値を求める。上記の評価値は、今回検出された全ての顔領域に、顔認識データ群に含まれる顔認識データをすベて適用して顔認識処理を行なう場合の演算量に対応する。

[0169] ステップ 4109 : CPU26は、所定の閾値力評価値（S4108)を減じた差の値を求める。上記の閾値は、顔認識部 32が所定の制限時間内に実行できる顔認識処理の演算量に基づいて設定される。そのため、閾値の具体的な数値は顔認識部 32の演算能力に応じて左右される。

ステップ 4110 : CPU26は、差の値（S4109)が負であるか否かを判定する。差の値が負である場合 (YES側）には S4111に移行する。一方、差の値が 0以上である場合 (NO側）〖こは S4112〖こ移行する。なお、 S4110で NO側の場合には、顔認識部 32は、顔認識データ群の顔認識データがすべて判定用顔認識データとなる。

[0170] ステップ 4111 :この場合には、評価値 (S4108)が閾値を上回っており、顔認識データ群の顔認識データをすベて適用すると制限時間内に顔認識処理が完了しない可能性が高い。そのため、 CPU26は、顔認識データ群のうちから今回の顔認識処理に適用する判定用顔認識データを絞り込む。

具体的には、まず、 CPU26は、上記の差の値（S4109)に基づいて判定用顔認識データの上限値を演算する。次に、 CPU26は、以下の（1)および（2)のアルゴリズムによって、顔認識データ群のうちから判定用顔認識データを上限値未満となるように選択する。

[0171] (1)顔認識対象の登録人物が複数人の場合には、 CPU26は、各登録人物ごとの判定用顔認識データの分配数を上記の上限値に基づいて設定する。基本的には、 CPU26は顔認識対象の登録人物にっ、て分配数を!、ずれも同じに設定する。もっとも、 CPU26は各登録人物に設定された優先順位に基づいて分配数の重み付けを行、、優先順位の高さに比例して判定用顔認識データの数が多くなるようにしてもよい。この場合には、優先順位の高い登録人物ほど多くの顔認識データに基づ V、て顔認識処理が行われるので、優先順位の高、登録人物につ!、ては高!、精度で顔認識を行うことができる。例えば、 CPU26は、顔登録メモリ 27の撮影回数データに基づいて、撮影回数がより多い登録人物の優先順位を高く設定することもできる。

[0172] また、 CPU26は各グループフォルダの顔認識データの数をそれぞれ比較し、顔認識データの数が所定値以上の登録人物は分配数が高くなるように設定してもよい。顔認識データの登録数が多い登録人物ほど、ユーザーにとって優先的に撮影した Vヽ登録人物である可能性が高、からである。

(2) CPU26は、上記（1)で設定した分配数の範囲内で、顔認識対象の登録人物ごとにグループフォルダの顔認識データカゝら判定用顔認識データを選択する。ここで、グループフォルダの顔認識データが分配数以下の場合には、 CPU26はグループフォルダ内のすべての顔認識データを判定用顔認識データとして選択する。なお、この場合において CPU26は余剰分の分配数を他の登録人物に再配分してもよい。

[0173] 一方、グループフォルダの顔認識データが分配数を超える場合には、 CPU26は以下の、ずれかの基準 (またはこれらの組み合わせ)で判定用顔認識データを選択する。

第 1に、 CPU26は、グループフォルダの「顔認識データの登録時期」のデータを参照し、登録時期が新しい順に判定用顔認識データを選択する。登録時期が古い顔認識データほど、今回の撮影における信頼性は低くなると考えられるからである。

[0174] 第 2に、 CPU26は、グループフォルダの「顔認識データの取得時の撮影条件」のデータを参照する。そして、 CPU26は、複数の顔認識データのうちから、上記した取得時の撮影条件が現在の撮影条件に近似する顔認識データを優先して判定用顔認識データを選択する。今回の撮影条件と近!ヽ条件で取得された顔認識データの方力より顔認識の精度向上に寄与するからである。

[0175] 例えば、撮影条件の各パラメータの変化量を点数ィ匕するテーブルを予め作成しておき、 CPU26が顔認識データの撮影条件の点数を今回の撮影条件を基準として求める。そして、 CPU26は上記の点数を比較して判定用顔認識データを選択する。これにより、撮影時に閃光発光を行う場合、 CPU26はフラッシュ発光有りの顔認識データを優先して判定用顔認識データを選択する。一方、撮影時に閃光発光を行わな Vヽ場合、 CPU26はフラッシュ発光無しの顔認識データを優先して判定用顔認識データを選択する。同様に、 CPU26は、露出条件やホワイトバランスの設定がより近い顔認識データを優先して判定用顔認識データを選択する。

[0176] 第 3に、 CPU26は、グループフォルダの顔認識データのうちで顔正面に対応する顔認識データを優先して判定用顔認識データを選択する。通常は、顔を正面から撮影することが多いからである。ここで、顔認識データの顔向きの検出は以下のようにして行われる。例えば、顔認識データに予め顔の向きに関する識別情報を記録し、 CP U26が上記識別情報を参照して顔の向きを判断してもよい。また、 CPU26は顔認識データでの目、鼻、口等の特徴点の抽出状態力顔の向きを類推するようにしてもよい。

[0177] ステップ 4112 : CPU26の顔認識部 32は、検出した顔領域（S4104)に対して判定用顔認識データによる顔認識処理を実行する。そして、顔認識部 32は、認識対象の顔（S4102)が含まれるか否かを判定する。認識対象の顔が含まれる場合 (YES側）には S4113〖こ移行する。一方、認識対象の顔が含まれない場合 (NO側）〖こは S411 5に移行する。

[0178] ステップ 4113 : CPU26は、検出された登録人物に対応する「顔認識時の処理設定」のデータに基づ、て、電子カメラの撮影条件の設定や画像処理の設定などを変更する。その後、 S4115に移行する

ここで、認識対象の顔が撮影画面内に複数検出されている場合には、 CPU26は所定のアルゴリズムで登録人物の優先順位を決定する。そして、 CPU26は、優先順位が最も高い登録人物に対応する「顔認識時の処理設定」に基づいて電子カメラの各種設定を変更する。なお、「顔認識時の処理設定」で登録人物の自動撮影が設定されている場合には、 CPU26は S4116に移行して登録人物を自動的に撮影する。

[0179] ステップ 4114 :一方、この場合には、 CPU26はユーザーによるレリーズ釦の半押し操作に応じて、通常撮影時のアルゴリズムで AFエリアを選択して AF演算を実行する。

ステップ 4115 : CPU26はレリーズ釦が全押しされたか否かを判定する。レリーズ釦が全押しされた場合 (YES側）〖こは S4116〖こ移行する。一方、レリーズ釦に入力がな V、場合 (NO側）には CPU26はレリーズ釦の全押し操作を待機する。

[0180] ステップ 4116： CPU26は撮像素子 16を駆動させて被写体像を撮影する。その後、画像処理部 20はレリーズ時の画像信号に基づ、て撮影画像データを生成する。なお、顔認識対象の登録人物が撮影されている場合には、画像処理部 20は S4113 で設定された画像処理を撮影画像データに施す。

ステップ 4117 : CPU26は撮影画像データを記録媒体 29に記録する。また、顔認識対象の登録人物が撮影されている場合、 CPU26は顔登録メモリ 27で指定されて V、るディレクトリパスに基づ、て、所定の記録フォルダに撮影画像データを分類して記録することちでさる。

[0181] さらに、 CPU26は、 S4112の顔認識の結果に基づいて顔登録メモリ 27の撮影回数データの撮影回数をインクリメントする。このとき、 CPU26は認識された全ての登録人物の撮影回数をインクリメントしてもよぐ優先順位に応じて選択された登録人物のみ撮影回数をインクリメントするようにしてもよい。以上で、「顔認識撮影モード」での一連の動作が終了する。

[0182] 以下、本実施形態の「顔認識撮影モード」の効果を説明する。上記の顔認識撮影モードでは、顔認識データに基づいて撮影人物の顔認識が行われる（S4112)。そして、認識対象の顔が検出された場合には、撮影時の各種処理がその登録人物に対応する設定で行われる（S4113、 S4116、 S4117)。そのため、登録人物の撮影時にユーザーの意図を反映させた処理を自動的に行うことができ、電子カメラを操作するユーザーの利便性が著しく向上する。 [0183] また、上記の顔認識撮影モードでは、制限時間内に顔認識処理が完了しない可能性が高い場合には、所定のアルゴリズムで判定用顔認識データを絞り込む（S4107 〜S4111)。そのため、顔認識処理の演算時間を制限時間内に収めることができ、ユーザーが快適に撮影を行うことができる。

(実施形態の補足事項）

(1)第 1実施形態から第 3実施形態までの「顔登録モード」でも、第 4実施形態のようにプレビュー画像に構図補助表示や撮影見本表示を合成表示するようにしてもよヽ。また、第 4実施形態の「顔登録モード」でも、レリーズ前にスルー画像データで顔検出処理を行うようにしてもょ、。

[0184] (2)上記実施形態において、 CPU26はレリーズ釦の半押しをトリガとして顔検出による AF演算を行うようにしてもょ、。

(3)上記実施形態において、「顔登録モード」および「顔検出撮影モード」を、「通常撮影モード」、「ポートレート撮影モード」、「再生モード」などと同様にモードダイヤル等で直接指定して立ち上げられるようにしてもょ、。

[0185] (4)第 3実施形態の「顔登録モード」において、 CPU26は優先順位の高い順に二以上の顔認識データを生成するようにしてもょヽ。

(5)第 4実施形態の「顔登録モード」において、 CPU26は顔登録画像データを記録媒体 29などに撮りだめし、複数の顔登録画像データをバッチ処理して顔認識データを一括生成するようにしてもよい。このとき、第 3実施形態のように、顔登録画像データに優先順位を設定して、優先順位の高い順に顔認識データを生成するようにしてもよい。

[0186] (6)顔登録メモリの「顔認識データの登録時期」のデータは、元となる顔登録画像データが概ねいつ頃撮影されたかを示すものでも足りる。したがって、「顔認識データの登録時期」については撮影年、撮影月、撮影日のいずれかで記録を打ち切って、詳細な時刻などの記録を省略するようにしてもょ、。

(7)「顔認識撮影モード」の顔認識処理 (S207)では、顔認識部 32はグループ化された顔認識データのうちから判定に使用する顔認識データを所定条件で絞り込むようにしてもよい。例えば、顔認識部 32は、「顔認識データの登録時期」に基づいて撮影日時よりも一定期間以上古い顔認識データを除外してもよい。同様に、顔認識部 3 2は「顔認識データの取得時の撮影条件」に基づ!、て今回の撮影条件と大きく異なる撮影条件で生成された顔認識データを除外してもよヽ。

[0187] (8)「顔認識撮影モード」の顔認識処理 (S207)では、顔認識部 32は撮影光学系 1 1の焦点距離のデータ力も演算したディストーションの度合いに応じて、顔認識データを補正するようにしてもょヽ。

(9)「顔登録モード」において、 CPU26は顔認識データの顔の向きに関する識別情報を生成し、顔登録メモリ 27に上記識別情報も記録するようにしてもよい。顔の向きに関する識別情報は、第 1実施形態の S110に示す処理の結果に基づいて CPU2 6が生成してもよい。あるいは、撮影時または編集時におけるユーザーの入力に基づ V、て CPU26が上記識別情報を生成してもよ、。

[0188] (10)本発明の電子カメラは実施形態の電子カメラの構成と必ずしも一致する必要はない。例えば、内蔵メモリ 19と顔登録メモリ 27とが共通のメモリで構成されていてもよい。顔登録メモリ 27がデータバス 28を介して CPU26に接続されていてもよい。また、揺動センサ部 13、像ぶれ補正レンズ 14および第 2レンズ駆動部 15からなる光学的なぶれ補正機構が省略されていてもよい。さらに、電子カメラ内に通信ユニット 30 が内蔵されていてもよい。

[0189] (11) CPU26は顔登録メモリ 27内のデータを記録媒体 29に記録して、顔登録メモリ 27のバックアップを可能としてもよい。また、 CPU26は、予め他の電子カメラで生成された顔認識データ等を記録媒体 29から取得し、電子カメラ間で顔登録メモリ 27のデータを共用できるようにしてもょ、。

(12)本発明の画像処理装置は第 5実施形態の電子カメラの構成に限定されることはない。例えば、本発明の画像処理装置を、画像データを外部から読み込む手段と、顔認識データを記録する記録部と、上記の「顔登録モード」のプログラムを実行する制御部と、を備えたパーソナルコンピュータ等で構成してもよ、（図示を省略する)。

[0190] (13)第 6実施形態での編集画面の立ち上げ操作時において、 CPU26は顔認証による個人認証とともにパスワード入力による個人認証を行うようにしてもょヽ。この場合には、 CPU26は、顔認証またはパスワードによる認証の一方の認証成功で編集画面にアクセスできるようにしてもよい。また、 CPU26は、顔認証およびパスワードによる認証の両方の認証成功の場合のみ編集画面にアクセスできるようにしてもよい。

[0191] (14)第 6実施形態の編集画面の構成はあくまで一例にすぎない。例えば、「登録人物の選択画面」を設けることなぐ編集画面の初期表示画面で顔認識データ用表示項目が顔登録画像とともに一覧表示される構成であってもよい。

( 15)第 6実施形態にお、て、「登録人物の選択画面」で表示されるインデックス画像には登録人物の任意の撮影画像を用いることもできる。例えば、 CPU26はインデックス画像用に特別に撮影した画像を「登録人物の選択画面」で表示してもよ!ヽ。また、 CPU26は、既に削除した顔認識データに対応する顔登録画像を「登録人物の選択画面」で表示できるようにしてもょ、。

[0192] (16)第 7実施形態での「顔認識撮影モード」の顔認識処理 (S4112)では、顔認識部 32は撮影光学系 11の焦点距離のデータ力も演算したディストーションの度合いに応じて、顔認識データを補正するようにしてもよい。

(17)第 7実施形態では、顔認識データの数と顔領域の数とに基づいて顔認識データ群から判定用顔認識データを選択する。しかし、本発明では、検出された顔領域の数を考慮することなぐ選択された登録人物に関する顔認識データの数のみに基づヽて顔認識データ群から判定用顔認識データを取捨選択するようにしてもょヽ

[0193] なお、本発明は、その精神またはその主要な特徴力も逸脱することなく他の様々な形で実施することができる。そのため、上述した実施形態は、あらゆる点で単なる例示に過ぎず、限定的に解釈してはならない。本発明は、特許請求の範囲によって示されるものであって、本発明は明細書本文にはなんら拘束されない。さらに、特許請求の範囲の均等範囲に属する変形や変更は、全て本発明の範囲内である。

Claims

請求の範囲

[1] 撮影光学系による被写体像を光電変換して画像信号を生成する撮像素子と、前記撮像素子力の前記画像信号に基づいて顔登録画像データを生成するとともに、前記画像信号に基づヽてスルー画像データを生成する画像処理部と、前記スルー画像データに基づいて撮影画面内の顔領域を検出する顔検出部と、前記撮影光学系の撮影パラメータを前記顔領域の検出位置に応じて調整する制御部と、

前記顔領域の画像を切り出して顔画像データを生成する顔画像生成部または前記顔登録画像データの顔領域の部分から撮影人物の顔の特徴点を抽出し、前記特徴点に基づいて顔認識データを生成する顔認識データ生成部と、

前記前記顔画像データまたは顔認識データを記録する記録部と、

を備えることを特徴とする電子カメラ。

[2] 撮影光学系による被写体像を光電変換して画像信号を生成する撮像素子と、前記撮像素子力の前記画像信号に基づいて顔登録画像データを生成するとともに、前記画像信号に基づヽてスルー画像データを生成する画像処理部と、前記撮影光学系の撮影パラメータを撮影画面の中央部分を基準として調整する制御部と、

前記スルー画像データまたは前記顔登録画像データに基づ、て、撮影画面の中央部分に位置する顔領域を検出する顔検出部と、

前記顔画像データまたは前記顔認識データを記録する記録部と、

を備えることを特徴とする電子カメラ。

[3] 前記制御部は、前記スルー画像データに基づく顔検出時に前記撮像素子のレリーズ動作を実行することを特徴とする請求項 1または請求項 2に記載の電子カメラ。

[4] 前記スルー画像データの画像を表示する表示部をさらに備え、

前記制御部は、前記顔登録画像データを生成する撮影モードにお!、て前記表示部の電源をオンにすることを特徴とする請求項 1から請求項 3のいずれか 1項に記載の電子カメラ。

[5] 前記スルー画像データの画像を表示する表示部をさらに備え、

前記画像処理部は、撮影画面中における顔の位置決めを補助するための構図補助表示を前記スルー画像データの中央部分に合成して出力することを特徴とする請求項 1から請求項 3のいずれか 1項に記載の電子カメラ。

[6] 前記画像処理部は、被写体の撮影状態の見本表示を前記スルー画像データにさらに合成して出力することを特徴とする請求項 5に記載の電子カメラ。

[7] 前記制御部は、前記顔登録画像データの生成時に前記顔登録画像データに対する電子ズーム処理を制限することを特徴とする請求項 1から請求項 6のいずれか 1項に記載の電子カメラ。

[8] 前記撮影光学系はズームレンズをさらに備え、

前記制御部は、前記撮影パラメータの調整時およびレリーズ時に前記ズームレンズの倍率調整範囲を通常撮影時よりも制限することを特徴とする請求項 1から請求項 7 の!ヽずれか 1項に記載の電子カメラ。

[9] 前記制御部は、レリーズ時に前記ズームレンズのズーム位置を広角端に設定することを特徴とする請求項 8に記載の電子カメラ。

[10] 撮影画面上での像ぶれを補正する像ぶれ補正レンズと、

前記電子カメラの光軸の角度変動を検出する角変位検出部と、

レリーズ時にお、て、前記角度変動に基づ!、て前記像ぶれ補正レンズを駆動させる補正レンズ駆動部と、

をさらに備えることを特徴とする請求項 1から請求項 9のいずれか 1項に記載の電子カメラ。

[11] 前記画像信号のゲインを調整する撮像感度変更部をさらに備え、

前記制御部は、レリーズ時に前記画像信号のゲインを通常撮影時の設定よりも高めることを特徴とする請求項 1から請求項 10のいずれか 1項に記載の電子カメラ。

[12] 被写界に閃光発光を行う閃光発光部をさらに備え、

前記制御部は、レリーズ時に前記閃光発光部の閃光発光を不能化することを特徴とする請求項 1から請求項 11のいずれか 1項に記載の電子カメラ。

[13] 前記制御部はレリーズ時の撮影条件を示す撮影条件データを生成するとともに、該撮影条件データを前記顔画像データまたは前記顔認識データに対応付けて前記記録部に記録することを特徴とする請求項 1から請求項 12のいずれか 1項に記載の電子カメラ。

[14] 前記制御部は前記顔画像データまたは前記顔認識データの取得時期を示す取得時期データを生成するとともに、該取得時期データを前記顔画像データまたは前記顔認識データに対応付けて前記記録部に記録することを特徴とする請求項 1から請求項 13のいずれ力 1項に記載の電子カメラ。

[15] 前記画像処理部は前記顔登録画像データに基づ！ヽてインデックス画像データを生成し、

前記制御部は前記インデックス画像データを前記顔画像データまたは前記顔認識データに対応付けて前記記録部に記録することを特徴とする請求項 1から請求項 14 の!ヽずれか 1項に記載の電子カメラ。

[16] 前記制御部は、同一の撮影人物から生成した複数の前記顔画像データまたは前記顔認識データをグループ化して前記記録部に記録することを特徴とする請求項 1 力請求項 15のいずれか 1項に記載の電子カメラ。

[17] 前記制御部は、前記撮影人物の顔の向き、前記撮影人物の眼鏡の有無および前記顔登録画像データの撮影条件のいずれかが異なる 2以上の前記顔画像データまたは前記顔認識データをグループ化することを特徴とする請求項 16に記載の電子力メラ。

[18] 前記制御部は、同一の撮影人物を撮影した前記顔登録画像データが複数生成されているときに、前記顔領域の検出状態に基づいて前記顔登録画像データの優先順位を決定し、

前記顔画像生成部または前記顔認識データ生成部は、前記優先順位が高!、前記顔登録画像データから前記顔画像データまたは前記顔認識データを生成することを特徴とする請求項 1から請求項 17のいずれか 1項に記載の電子カメラ。

[19] 前記制御部は、前記顔領域の検出状態に基づいて撮影人物の顔の向きを推定し、該顔の向きが所定方向と一致しないときには、前記撮像素子のレリーズ動作を不能化することを特徴とする請求項 1から請求項 18のいずれ力 1項に記載の電子カメラ。

[20] 前記制御部は、前記顔領域の検出状態に基づ!、て撮影人物の表情を推定し、該表情の種類に応じて前記撮像素子のレリーズ動作を不能化することを特徴とする請求項 1から請求項 18のいずれか 1項に記載の電子カメラ。

[21] 撮影光学系による被写体像を光電変換して画像信号を生成する撮像素子と、前記撮像素子力の前記画像信号に基づいて撮影画面内の顔領域を検出する顔検出部と、

前記顔領域の部分力撮影人物の顔の特徴点を抽出し、前記特徴点に基づいて顔認識データを生成する顔認識データ生成部と、

前記顔認識データを生成するための撮影時の撮影条件を、通常撮影時の撮影条件よりも制限する制御部と、

を備えることを特徴とする電子カメラ。

[22] 内蔵メモリ、記録媒体との接続部および外部通信手段の少なくとも 1つを有するとともに、電子カメラで予め生成された撮影画像データを前記内蔵メモリ、前記記録媒体、前記外部通信手段を介して接続されたコンピュータの、ずれかから取得する制御部と、

前記撮影画像データに基づいて、撮影画面内の顔領域を検出する顔検出部と、前記顔領域の画像を切り出して顔画像データを生成する顔画像生成部または前記撮影画像データの顔領域の部分から撮影人物の顔の特徴点を抽出し、前記特徴点に基づいて顔認識データを生成する顔認識データ生成部と、

を備えることを特徴とする画像処理装置。

[23] 前記撮影画像データの再生画像に前記顔領域を識別する表示を合成する画像処理部と、

前記画像処理部の出力画像を表示する表示部と、

をさらに備えることを特徴とする請求項 22に記載の画像処理装置。

[24] ユーザーの入力を受け付ける入力部をさらに備え、前記顔検出部は、前記入力部からの入力に基づいて前記顔領域の検出精度を規定する閾値を変更することを特徴とする請求項 23に記載の画像処理装置。

[25] ユーザーの入力を受け付ける入力部をさらに備え、

前記顔画像生成部または前記顔認識データ生成部は、前記撮影画像データから複数の顔領域が検出された場合、前記入力部からの入力で選択された顔領域について前記顔画像データまたは前記顔認識データを生成することを特徴とする請求項 23に記載の画像処理装置。

[26] 前記制御部は、同一の撮影人物から生成した複数の前記顔画像データまたは前記顔認識データをグループ化して前記記録部に記録することを特徴とする請求項 22 から請求項 25のいずれか 1項に記載の画像処理装置。

[27] 前記制御部は、前記撮影画像データの顔領域の部分を所定のサイズに切り出してインデックス画像データを生成するとともに、該インデックス画像データを前記顔画像データまたは前記顔認識データに対応付けて前記記録部に記録することを特徴とする請求項 22から請求項 26のいずれか 1項に記載の画像処理装置。

[28] 前記撮影画像データは撮影時の撮影条件を記録した付属データ領域を有し、前記制御部は、前記付属データ領域の撮影条件に基づ!、て撮影条件データを生成するとともに、該撮影条件データを前記顔画像データまたは前記顔認識データに対応付けて前記記録部に記録することを特徴とする請求項 22から請求項 27のいずれか 1項に記載の画像処理装置。

[29] 前記撮影画像データは撮影日時を記録した付属データ領域を有し、

前記制御部は、前記付属データ領域の撮影日時に基づいて前記顔画像データまたは前記顔認識データの取得時期データを生成するとともに、該取得時期データを前記顔画像データまたは前記顔認識データに対応付けて前記記録部に記録することを特徴とする請求項 22から請求項 28のいずれか 1項に記載の画像処理装置。

[30] 撮影光学系による被写体像を光電変換して画像信号を生成する撮像素子と、前記画像信号に基づ!ヽて撮影画面の顔領域を検出し、該顔領域の部分から撮影人物の顔の特徴点を抽出する顔検出部と、

人物の顔の特徴点に基づいて予め生成された顔認識データと該顔認識データに対応する登録人物を示すためのインデックス画像データとを対応付けして記録する記録部と、

前記顔検出部の抽出した特徴点および前記顔認識データに基づいて前記撮影人物が前記登録人物であるか否かを判定する顔認識部と、

前記顔認識データの指定に使用される表示項目と前記インデックス画像データの画像とを関連付けて提示する編集画面を生成する制御部と、

を備えることを特徴とする電子カメラ。

[31] 前記インデックス画像データは前記登録人物の撮影画像データであることを特徴とする請求項 30に記載の電子カメラ。

[32] 前記インデックス画像データは、前記顔認識データの生成に使用された撮影画像データであることを特徴とする請求項 31に記載の電子カメラ。

[33] 前記記録部には、前記顔認識データの生成に使用された画像データの撮影条件力前記顔認識データに対応付けされた状態で記録されてヽることを特徴とする請求項 30から請求項 32のいずれ力 1項に記載の電子カメラ。

[34] 前記記録部には、前記顔認識データの生成に使用された画像データの撮影時期力前記顔認識データに対応付けされた状態で記録されてヽることを特徴とする請求項 30から請求項 33のいずれ力 1項に記載の電子カメラ。

[35] 前記記録部には、前記登録人物の撮影時に適用される処理の設定が、前記顔認識データに対応付けされた状態で記録されていることを特徴とする請求項 30から請求項 34の!、ずれ力 1項に記載の電子カメラ。

[36] 撮影画像の画像データを外部に送信する通信部をさらに備え、

前記記録部には、前記登録人物の撮影時における前記画像データの送信の可否と、前記画像データの送信先のアドレス情報とが、前記顔認識データに対応付けされた状態で記録されて、ることを特徴とする請求項 30から請求項 35の、ずれか 1項に記載の電子カメラ。

[37] 前記制御部は、前記編集画面の表示出力の可否を管理する個人認証手段を備えることを特徴とする請求項 30から請求項 36のいずれ力 1項に記載の電子カメラ。

[38] 前記個人認証手段が前記顔認識部による顔認証を含むことを特徴とする請求項 3 7に記載の電子カメラ。

[39] 前記記録部には同一の登録人物に関する複数の前記インデックス画像データを記録可能であって、

前記制御部は、前記インデックス画像データのうちから任意の撮影画像データの画像を選択するとともに、該選択画像を前記表示項目に関連付けて前記編集画面で提示することを特徴とする請求項 31から請求項 38のいずれ力 1項に記載の電子カメ

[40] 前記制御部は、前記インデックス画像データのうちで最新の撮影画像データの画像を選択することを特徴とする請求項 39に記載の電子カメラ。

[41] 前記制御部は、前記インデックス画像データのうちで前記登録人物の顔正面を撮影した撮影画像データの画像を選択することを特徴とする請求項 39に記載の電子力メラ。

[42] 前記制御部は、前記インデックス画像データの画像を所定間隔ごとに順次切り替えて前記編集画面で提示することを特徴とする請求項 39に記載の電子カメラ。

[43] 撮影光学系による被写体像を光電変換して画像信号を生成する撮像素子と、前記画像信号に基づ!ヽて撮影画面の顔領域を検出し、該顔領域の部分から撮影人物の顔の特徴点を抽出する顔検出部と、

登録人物の顔の特徴点に基づいて予め生成された顔認識データと、前記登録人物の撮影時に適用される撮影設定とを対応付けて記録する記録部と、

前記顔検出部の抽出した特徴点および前記顔認識データに基づ、て、前記撮影人物が前記登録人物であるか否かを判定する顔認識部と、

前記登録人物の優先順位を設定するとともに、前記登録人物の撮影時には前記撮影設定に基づ!ヽて撮影画像データを生成し、前記登録人物が複数検出された場合には前記登録人物のうちで最も優先順位の高い人物に対応する前記撮影設定を適用する制御部と、

を備えることを特徴とする電子カメラ。

[44] ユーザーの入力を受け付ける入力部をさらに備え、

前記制御部は、前記入力部からの入力に基づ!/、て前記登録人物を指定して前記優先順位を個別的に設定することを特徴とする請求項 43に記載の電子カメラ。

[45] 前記登録人物の指定を行うための編集画面を表示する表示部をさらに備え、前記制御部は、前記編集画面上における前記登録人物の表示項目の表示位置または表示順を前記優先順位に応じて変化させることを特徴とする請求項 44に記載の電子カメラ。

[46] 前記制御部は、前記登録人物の登録順に前記優先順位を設定することを特徴とする請求項 43から請求項 45のいずれか 1項に記載の電子カメラ。

[47] 前記制御部は、前記登録人物を名称で整列して前記優先順位を設定することを特徴とする請求項 43から請求項 45のいずれか 1項に記載の電子カメラ。

[48] 前記記録部は、同一の登録人物に関する複数の前記顔認識データをグループィ匕して記録可能であって、

前記制御部は、前記グループ化された顔認識データ群について、該顔認識データ群に含まれる前記顔認識データの数によって前記優先順位を設定することを特徴とする請求項 43から請求項 45のいずれか 1項に記載の電子カメラ。

[49] 前記記録部は、前記登録人物ごとの撮影回数を示す撮影回数データをさらに記録し、

前記制御部は、前記撮影回数データに基づいて、前記撮影回数が多い登録人物の前記優先順位を高く設定することを特徴とする請求項 43に記載の電子カメラ。

[50] 撮影光学系による被写体像を光電変換して画像信号を生成する撮像素子と、前記画像信号に基づ!ヽて撮影画面の顔領域を検出し、該顔領域の部分から撮影人物の顔の特徴点を抽出する顔検出部と、

登録人物の顔の特徴点に基づいて予め生成された顔認識データを記録する記録部と、

顔認識対象の登録人物に関する顔認識データ群に含まれる前記顔認識データの数に基づ 1ヽて、前記顔認識データ群から判定用顔認識データを選択する制御部と、前記顔検出部の抽出した特徴点および前記判定用顔認識データに基づいて、前記撮影人物が顔認識対象の登録人物か否かを判定する顔認識部と、

を備えることを特徴とする電子カメラ。

[51] 前記制御部は、前記顔認識データの数および前記顔領域の数の積に対応する評価値が前記顔認識部の処理能力で規定される閾値を下回るように前記判定用顔認識データを選択することを特徴とする請求項 50に記載の電子カメラ。

[52] 前記制御部は、顔認識対象の登録人物が複数の場合に、各登録人物に設定された優先順位に基づいて前記判定用顔認識データを重み付けして選択することを特徴とする請求項 50または請求項 51に記載の電子カメラ。

[53] 前記制御部は、顔認識対象の登録人物が複数の場合に、前記顔認識データの記録数が多い登録人物を優先して前記判定用顔認識データを選択することを特徴とする請求項 50から請求項 52のいずれか 1項に記載の電子カメラ。

[54] 前記制御部は、同一の登録人物に関して複数の前記顔認識データが記録されて Vヽる場合に、取得時期が新ヽ顔認識データを優先して前記判定用顔認識データを選択することを特徴とする請求項 50から請求項 53のいずれか 1項に記載の電子力メラ。

[55] 前記制御部は、同一の登録人物に関して取得時の撮影条件が異なる複数の前記顔認識データが記録されて!ヽる場合に、前記取得時の撮影条件が現在の撮影条件に近似する顔認識データを優先して前記判定用顔認識データを選択することを特徴とする請求項 50から請求項 54のいずれか 1項に記載の電子カメラ。

[56] 前記制御部は、同一の登録人物に関して顔の向きが異なる複数の前記顔認識データが記録されて！ヽる場合に、顔正面に対応する顔認識データを優先して前記判定用顔認識データを選択することを特徴とする請求項 50から請求項 55のいずれか 1項に記載の電子カメラ。

[57] 前記記録部は、前記登録人物ごとの撮影回数を示す撮影回数データをさらに記録し、

前記制御部は、前記撮影回数データに基づいて、前記撮影回数が多い登録人物を優先して前記判定用顔認識データを選択することを特徴とする請求項 50から請求項 56の!、ずれ力 1項に記載の電子カメラ。