JP5040964B2 - デジタルカメラ - Google Patents

Description

本発明は、人物の特徴点を識別し、その識別結果に対応したフォルダに撮影画像データを記録することの出来るデジタルカメラに関する。

従来から、指紋あるいは虹彩の特徴点を予め登録しておいてこれと照合することで本人を認証するシステムを初めとして画像データから人物を識別する技術はこれまで多く知られている。特開平９−２５１５３４号公報には目、鼻、口等を抽出して特徴点として登録しこれと入力した画像から抽出した特徴点とを比較して当人として識別する方法が詳細に記述されており、特開平１０−２３２９３４号公報にはこの様にして抽出した特徴点を登録する場合の辞書画像の精度を上げる方法が開示されている。これらの技術をカメラに応用した例を以下に挙げる。

特開２００１−３０９２２５号公報には顔認識アルゴリズムにより認識された顔の座標、寸法、目の位置、頭のポーズ等のデータが画像メモリに画像データとともに記録されるカメラが開示されている。特開２００２−２３２７６１号公報には撮影した画像に予め読み込んでおいた被写体の識別情報を関連付けて記録する画像記録装置が開示されている。特開２００２−３３３６５２号公報には予め記憶された容貌情報と撮影顔情報を比較し記録信号を発生する撮影装置が開示されている。この容貌情報は優先度とともに記録される。

一方、記録時に撮影画像を所定のグループにグループ分けして記録することで再生時の
検索を容易にすることのできるデジタルカメラの技術も従来から開示されている。特開２００２−２１１０４９号公報には関連性ある撮影画像データを撮影時刻によりグループ化して一元的に管理する画像処理装置が開示されている。特開２００３−１６２７０９号公報には撮影装置のユーザ操作に伴う状態変更に応じて新規フォルダを作成する画像処理装置が開示されている。特開２００３−１８９２１５号公報には撮影記録モードと撮影画像を管理するフォルダとを関連づけることの出来る記録装置が開示されている。特開２００３−３３８９９９号公報には画像データにリンク情報を付加してグループ化する画像ファイリング装置が開示されている。

上述した被写体を識別するという技術をカメラに応用するという発明は、従来から大規模なコンピュータシステムで行われていた技術を単にカメラ単独でも行えるようにしたというものである。実際にカメラで被写体の識別技術を使用して撮影を行おうとすると従来にないカメラとしての動作シーケンスが必要となってくる。更に、被写体識別技術を上述したフォルダ作成方法と関連づけて開示した技術はこれまでない。

本発明においては上述した新たな動作シーケンスを取り入れることにより主要被写体に
対応したフォルダに画像データを格納することで再生時の検索を容易することの出来るデジタルカメラを提供することを目的とする。

上記問題点の解決のために、請求項１の発明は、画像データから被写体の特徴点情報を抽出する抽出手段と、前記抽出手段によって抽出された特徴点情報に予め付与されている優先順位を判別する判別手段と、前記抽出手段が抽出した特徴点情報に応じて前記画像データを所定のグループに分類する分類手段と、前記分類手段が分類した分類結果に応じて前記画像データを記録媒体に記録する記録手段とを備え、前記抽出手段が同一の画像データから複数の異なる特徴点情報を抽出した場合には、前記分類手段は前記判別手段によってより優先順位が高いと判別された特徴点情報に対応したグループに前記画像データを分類することを特徴としている。すなわち、特徴点情報が複数検出された場合には優先順位のより高い被写体のグループに分類する。

請求項２の発明は、前記記録手段は、同一のグループに属する複数の画像データをまと
めて格納するためのエリアを備えた記録媒体上の前記分類手段が分類したグループに対応したエリアに前記画像データを記録することを特徴としている。すなわち、メモリカードに予め作成されているフォルダに画像データを記録する。

請求項３の発明は、更に、前記分類手段が分類した画像データをまとめて格納するエリ
アを前記記録媒体に作成するための作成手段を備えたことを特徴としている。すなわち、抽出し、分類された特徴点に対応したフォルダをメモリカードに自動的に作成することができる。請求項４の発明は、更に、前記分類手段が分類したグループの画像データを格納するエリアが前記記録媒体にあるかどうかを検出する検出手段を備え、前記分類手段が分類したグループの画像データを格納するエリアが前記記録媒体に無いことが前記検出手段によって検出されたならば、前記作成手段は前記分類手段が分類したグループの画像データを格納するエリアを前記記録媒体に作成することを特徴としている。

請求項５の発明は、更に、前記分類手段が分類したグループの画像データを格納するエリアが前記記録媒体にあるかどうかを検出する検出手段と、前記検出手段によって前記分類手段が分類したグループの画像データを格納するエリアが前記記録媒体に無いことが検出された場合に、前記分類手段が分類した画像データをまとめて格納するためのエリアを前記記録媒体に作成する作成手段とを備えたことを特徴としている。すなわち、より優先順位の高い被写体に対応したフォルダがメモリカードになかったなら新たにフォルダを作成する。

請求項６の発明は、前記記録手段は複数の記録媒体のなかから前記分類手段が分類した分類結果に応じた記録媒体に記録することを特徴としている。

請求項７の発明は、画像データから被写体の特徴点情報を抽出する抽出手段と、前記抽出手段によって抽出された特徴点情報に予め付与されている優先順位を判別する判別手段と、前記抽出手段が抽出した特徴点情報に応じて前記画像データを所定のグループに分類する分類手段と、前記分類手段が分類した画像データをまとめて格納するためのエリアを記録媒体上に作成する作成手段とを備え、前記抽出手段が同一の画像データから複数の異なる特徴点情報を抽出した場合には、前記分類手段は前記判別手段によってより優先順位が高いと判別された特徴点情報に対応したグループに前記画像データを分類することを特徴としている。すなわち、抽出し、分類した特徴点情報に対応したフォルダをメモリーカードに作成することが出来る。請求項８の発明は、更に、前記分類手段が分類した画像データを前記記録媒体上の前記作成手段が作成したエリアに記録する記録手段を備えたことを特徴としている。

以下、図面を参照して本発明の実施の形態を説明する。図１は、本発明のデジタルカメラについてその主要な機能を説明したブロック図である。撮影レンズ１０１はその焦点距離を連続的に変えるためのズームレンズ、及びピントを調整するフォーカスレンズから構成されている。これらのレンズはドライバ１１３により駆動される。ここでドライバ１１３はズームレンズのズーム駆動機構及びその駆動回路と、フォーカスレンズのフォーカス駆動機構及びその駆動回路とを備えていて、それぞれＣＰＵ１１２により制御される。撮影レンズ１０１は撮像素子１０３の撮像面上に被写体像を結像する。撮像素子１０３は撮像面上に結像された被写体像の光強度に応じた電気信号を出力する光電変換撮像素子であり、ＣＣＤ型やＭＯＳ型の固体撮像素子が用いられる。撮像素子１０３は信号取り出しのタイミングをコントロールするドライバ１１５により駆動される。

撮影レンズ１０１と撮像素子１０３との間には絞り１０２が設けられている。絞り１０
２は、絞り機構とその駆動回路を備えたドライバ１１４により駆動される。固体撮像素子１０３からの撮像信号はアナログ信号処理回路１０４に入力され、アナログ信号処理回路１０４において相関二重サンプリング処理（ＣＤＳ）等の処理が行われる。アナログ信号処理回路１０４で処理された撮像信号は、Ａ／Ｄ変換器１３５によりアナログ信号からデジタル信号に変換される。

Ａ／Ｄ変換された信号はデジタル信号処理回路１０６において輪郭強調、ガンマ補正、ホワイトバランス補正などの種々の画像処理が施される。バッファメモリ１０５は撮像素子１０３で撮像された複数フレーム分のデータを記憶することが出来るフレームメモリであり、Ａ／Ｄ変換された信号は一旦このバッファメモリ１０５に記憶される。デジタル信号処理回路１０６ではバッファメモリ１０５に記憶されたデータを読み込んで上述した各処理を行い、処理後のデータは再びバッファメモリ１０５に記憶される。

ＣＰＵ１１２はデジタル信号処理回路１０６およびドライバ１１３〜１１５等と接続さ
れ、カメラが動作する際のシーケンス制御を行う。ＣＰＵ１１２のＡＥ演算部１１２１では撮像素子からの画像信号に基づいて露出演算を行い、ＡＷＢ演算部１１２２ではホワイトバランス用パラメータを設定するための演算が行われる。特徴点抽出演算部１１２３では所定のアルゴリズムに則って画像データの中から被写体の形状、位置、サイズ等の特徴点を抽出する。記憶部１１２５ではこれら各種演算部で演算された結果を必要に記憶するとともに、特徴点抽出演算部１１２３によって抽出された特徴点に関する各種情報も記憶する。この情報については後述する。また、抽出された特徴点及びそれの情報についてはユーザが記憶部１１２５から任意に追加、変更或いは削除することが出来る。

本実施例におけるデジタルカメラのＡＦ方式はコントラスト法を採用している。このコントラスト方式ＡＦについてここで説明する。この方式において、撮像素子１０３上の像のボケの程度とコントラストの間には相関があり、焦点があったときに像のコントラストが最大になることを利用して焦点あわせを行う。コントラストの大小は撮像信号の高周波成分の大小により評価することが出来る。すなわち、ＡＦ演算部１１２４は不図示のＢＰ
Ｆ（バンドパスフィルタ）により撮像信号の高周波成分を抽出し、この絶対値を積分した値を焦点評価値としてこの焦点評価値に基づいてＡＦ演算を行う。ＣＰＵ１１２はＡＦ演算部１１２４の演算結果を用いて撮影レンズ１０１のフォーカスレンズ位置を調整し、合焦動作を行わせる。

ＣＰＵ１１２に接続された操作部材１１６には、カメラの電源をオンオフする電源スイッチ１１６１、レリーズ釦に連動してオンオフする半押しスイッチ１１６２及び全押しスイッチ１１６３、モニタ１０９に表示されるカメラを撮影する際の各種メニュー内容を選択するための設定釦１１６４、再生画像等を更新するアップダウン（Ｕ／Ｄ）釦１１６５等が設けられている。設定釦１１６４では抽出した特徴点に対して名称を付けるためにＵ／Ｄ釦１１６５を併用してアルファベットやひらがな、カタカナ、簡単な漢字等を選択して設定することもできる。Ｕ／Ｄ釦１１６５はそれ以外に、複数抽出された人物から所望の人物を選択したり、撮影時には手動でズームレンズをテレあるいはワイド側に駆動したりするためにも使用される。

被写体輝度が低い場合にはストロボ１１７を発光させる。このストロボにはストロボ使用時に撮影した人物の瞳が赤く撮影されるのを防止あるいは軽減する赤目防止のためや低輝度時に被写体輝度を予め測定するために撮影前に予め補助光を発光するプリ発光機能も備わっている。記憶部１１２５には前述した特徴点情報以外にＡＦ演算の結果から検出される評価値のピーク値や対応するレンズ位置等も記憶される。デジタル信号処理回路１０６で各種処理が施された画像データは、一旦バッファメモリ１０５に記憶された後に、記録・再生信号処理回路１１０を介してメモリカード等の外部記憶媒体１１１に記録される。画像データを記憶媒体１１１に記録する際には、一般的に所定の圧縮形式、例えば、ＪＰＥＧ方式でデータ圧縮が行われる。記録・再生信号処理回路１１０では、画像データを外部記憶媒体１１１に記録する際のデータ圧縮及び外部記憶媒体１１１から再生した圧縮された画像データの伸長処理を行う。

モニタ１０９は撮像された被写体画像を表示したり撮影や再生させる際の各種の設定メニューを表示したりするための液晶（ＬＣＤ）表示装置である。ここでは記憶媒体１１１に記録されている画像データを再生表示する際にも用いられる。モニタ１０９に画像を表示する場合には、バッファメモリ１０５の一部であるＶＲＡＭ１０７に記憶された画像データを読み出し、Ｄ／Ａ変換器１０８によりデジタル画像データをアナログ映像信号に変換する。そして、そのアナログ映像信号を用いてモニタ１０９に画像を表示する。

ここで、特徴点を抽出する際のバッファメモリ１０５とＶＲＡＭ１０７との関係について説明する。モニタ１０９で表示用の画像データを再生する場合には撮像素子からは静止画用の画像データから表示用の画像データに間引いたデータが一定の周期（例えば３０フレーム/秒）で連続して出力される。この画像データに所定の処理を施し、モニタ１０９
の縦横画素数に対応した画素数となるように更にデータを間引いてＶＲＡＭ１０７に連続して記録する。このＶＲＡＭ１０７のデータはＤ／Ａ変換器１０８を通してモニタ１０９に表示画像として再生される。このＶＲＡＭ１０７の画像データは特徴点を抽出するためのデータとしても使用する。特徴点を抽出する場合には、まずＶＲＡＭ１０７の画像データをバッファメモリ１０５に所定のタイミングで再度記録する。ここでバッファメモリ１０５にはＶＲＡＭ１０７に記録されているデータのうち中心部の所定の範囲（たとえば縦、横ともに８０％）のみ記録する。

また、このようにＶＲＡＭ１０７から再度バッファメモリ１０５に画像データを記録す
るのは次の理由による。ＣＰＵ１１２の演算処理能力が十分高かったならば前述した３０フレーム/秒のレートで特徴点を抽出することができるがデジタルカメラに採用されてい
るＣＰＵ１１２の演算能力はそこまで高くないことが多い。それ故、ＣＰＵ１１２の演算
能力に応じて特徴点抽出演算にあったレートでＶＲＡＭ１０７からバッファメモリ１０５に画像データを再度記録することで特徴点を抽出する事が可能となる。なお、その場合であってももちろんＶＲＡＭ１０５からは通常のレートでモニタ１０９の表示用画像データが出力されているので表示更新のレートが遅くなることはない。なお、ＡＥ演算、ＡＦ演算するための画像データは上述した撮像素子１０３から出力されＶＲＡＭ１０７に間引く前のデータを使用する。

この様に特徴点抽出機能を備えた本デジタルカメラにおいて、その特徴点抽出機能を利
用することで撮影前後で効果的に被写体のピントを確認することが可能となる。図２〜図７のフローを使用してこれについて説明する。

まず図２、図３は撮影動作に関連してピントを確認することを説明したフローである。
ステップＳ１０１でデジタルカメラの電源がオンされたことを検出したならばステップＳ１０２で特徴点を抽出するための抽出モードに設定されているかどうか判別する。この抽出モードの設定方法の一例としては、設定釦１１６４を操作してＬＣＤモニタ１０９に表示させた各種撮影モードの中から抽出モードを選択して設定する（不図示）。ステップＳ１０２で抽出モードに設定されていなかったならばステップＳ１０８に進む。

ステップＳ１０２でもし抽出モードに設定されていると判別されたならばステップＳ１
０３に進んで所定のタイミングで撮像素子１３の出力から被写体の特徴点を抽出し、ＬＣＤモニタ１０９に撮像素子からのスルー画とともに特徴点が抽出された被写体を識別して表示する。識別表示例を図１１に示す。図１１において画面中央の人物の顔部分を囲っている実線の四角表示がこの人物の顔が抽出されたことを示している。図１１の破線内はこの抽出された人物の顔周辺の拡大表示であるが、この詳細については後述する。

ステップＳ１０４では抽出した特徴点或いはその特徴点を含む所定エリアをＡＦエリア
に設定する。被写体が顔のアップなどの場合には更に瞳部分をＡＦエリアに設定する。また、画面内で複数の特徴点が抽出された場合には、一番面積の大きな特徴点をＡＦエリアに設定する。或いは前述した記憶部１１２５に、抽出した特徴点と同一の特徴点が予め記憶されていた場合には、その特徴点に関する情報（例えば優先順位情報等）に応じてＡＦエリアを設定する。この特徴点情報の詳細については後述する。

ステップＳ１０５ではＡＦエリア内の被写体に対してピント確認をするモードの設定に
なっているかどうか判別する。この場合の設定方法も前述した抽出モードの設定の場合と同様、設定釦１１６４を操作して表示させた撮影モードの設定メニューの中から、抽出被写体のピントを確認する、という項目を選択する（不図示）。このピント確認及び前述した抽出モードの設定や解除は任意のタイミングで行うことが出来る。もしピント確認しない場合にはステップＳ１０７に進み、ピント確認する場合にはステップＳ１０６に進む。

ピント確認のステップＳ１０６においては、図１１に示すごとく、抽出した特徴点に基
づいて設定されているＡＦエリアを含んだ所定範囲をＬＣＤモニタ１０９上の一部エリアに拡大して全画面データに重畳して表示する。このステップＳ１０６の詳細フローについては図４で後述する。ステップＳ１０７ではＡＦエリアとして他の特徴点を選択したかどうか判別する。この選択はＵ／Ｄ釦１１６５を使って行う。もし他の特徴点を選択しない場合にはステップＳ１０８に進み、他の特徴点が選択された場合にはステップＳ１０４に戻って選択された特徴点を新たにＡＦエリアとして設定する。ここまでは半押しＳＷ１１６２は押されていなくとも良い。

ステップＳ１０８では半押しＳＷ１１６２及び全押しＳＷ１１６３が押されたかどうか
判別する。もし全押しＳＷ１１６３が押されていなかったならばステップＳ１０２に戻り
、全押しＳＷ１１６３が押されたと判別されたならば図３ステップＳ１０９に進む。

ステップＳ１０９ではＡＥ演算回路１１２１の演算結果に応じた所定のシャッタスピー
ドと絞り値とで撮像素子１０３で被写体の露光を行い、この撮像素子１０３から出力された画像データをバッファメモリ１０５に記録する。ステップＳ１１０では撮影画像のピント確認をする設定になっているかどうか判別する。この撮影後にピント確認をするかどうかという設定は、前述した抽出モードの設定をするのと同様に撮影前に予め設定釦１１６４を使用して、撮影後のピント確認を行う、という項目を選択しておく。

ステップＳ１１０でピント確認はしないと判別された場合にはステップＳ１１５に進み
、ピント確認をするように設定されていると判別されたならばステップＳ１１１に進む。ステップＳ１１１のピント確認の詳細は前述したステップＳ１０６のピント確認動作と同様、図４で説明する。この時の表示も撮影前のピント確認表示と同様に、図１１に示すごとく破線の四角内に拡大表示される。この拡大表示される範囲は、全押しＳＷ１１６３が押される直前にその位置と大きさを記憶部１１２５に記憶されていたＡＦエリアを含んだ所定範囲である。

もちろん、全押しＳＷ１１６３が押され、撮影した画像データから特徴点を再度抽出し
た後に、抽出した特徴点に対応した被写体を拡大表示するようにしても良い。その場合には、撮影した全画面から新たに特徴点を抽出するのでなく、撮影前に設定されているＡＦエリアを含んだ所定範囲のみを抽出する。これにより、抽出に要する時間が短縮される。このように撮影後の画像データから被写体を抽出することで主要被写体が移動したような場合であっても確実に主要被写体部分を拡大表示することが出来る。

ステップＳ１１２では記録指示がされたかどうか確認する。このピント確認の画面に対
する記録指示方法の一例を図１２を使って説明する。図１２はピント確認を説明している画面を示す図１１に、記録指示メニューを重畳表示させた場合を示している図である。全押しＳＷ１１６３が押されると、図１２のようにＬＣＤモニタ１０９にはＡＦエリア周辺の拡大画面が撮影全画面に重畳表示されている画面に更に記録指示の選択メニューが重畳表示される。撮影者はここからＵ／Ｄ釦１１６５を使用してＹＥＳあるいはＮＯのいずれかを選択する。もしＹＥＳを選択した場合はステップＳ１１５に進みＹＥＳあるいはＮＯのいずれも選択しなかったならばステップＳ１１３に進む。ステップＳ１１３ではＮＯが選択されたかどうか判別する。もしＮＯが選択されたならばステップＳ１１６に進んでバッファメモリ１０５に記録されている画像データを消去する。この消去方法の一例として、メモリカード１１１にはバッファメモリ１０５上の画像データを記録せず、次の撮影による画像データをバッファメモリ１０５に上書き可能にすることで達成される。

ステップＳ１１３でＮＯが選択されなかった場合にはステップＳ１１４に進んで撮影が
終了してから一定時間が経過したかどうか判別する。もし一定時間経過していなかったならばステップＳ１１２に戻って記録指示を待つ。一定時間経過したならばステップＳ１１５に進んでメモリカードへの記録を行う。この様にデフォルトでは図１２に示すように二重の四角で囲ったＹＥＳが選択されるようになっていて、一旦撮影した画像データは撮影者からの削除指示がない限りはメモリカード１１１に記録するようにしている。ここで一定時間とは１秒程度であればよいが撮影者の好みに応じてこの時間を変更できるようにしても良い。

画像データにホワイトバランス処理、ガンマ処理、或いは圧縮処理等の記録処理を行っ
た後にステップＳ１１５においてメモリカード１１１の所定のフォルダに画像データを記録する。この記録する際のフォルダに関しては図５あるいは図６を使って詳細に後述する。この様にして記録或いは削除が終了したならば一連の撮影動作を終了する。

次に図４のフローを使ってこれまで述べてきたピント確認について詳細に説明する。ス
テップＳ２０１では撮像素子１０３で撮影されバッファメモリ１０５に記録されている画像データの全画角分の画面にＡＦエリア周辺の所定エリアを拡大した画面をＬＣＤモニタ１０９に重畳表示する。この表示の一例を図１１に示す。図１１において画面中央の四角で囲まれた人物の顔部分が抽出された被写体であることを示している。ここではこの抽出された人物の顔部分がＡＦエリアに設定され、画面右下の破線で囲まれた小画面内にそのＡＦアリアを含む所定部分が拡大されて表示されている。この重畳表示する位置としてはこの様に右下に限らず、設定釦１１６４やＵ／Ｄ釦１１６５を使用して画面内の右上、左下、左上或いは画面中央のいずれかを選択することが出来る。

拡大表示は電子的に行い、当初表示する際のズーム倍率はデフォルトでは４〜５倍程度
に設定されている。このズーム操作についても、設定釦１１６４やＵ／Ｄ釦１１６４を使用する。ＬＣＤモニタ１０９で表示する際には撮像素子１０３の画像データを間引いて表示しているがこれを間引かない状態すなわち、ＬＣＤの解像度と撮像素子１０３の解像度が等しくなるまで拡大することが出来る。例えば、ＬＣＤモニタ１０９の画素数が１０万画素、撮像素子１０３の画素数が１００万画素とすると通常は１／１０の解像度でＬＣＤモニタ１０９に表示しているが、これを最大で１０倍までズームアップすることが出来る。

ステップＳ２０２では前述したように、画面内での小画面の重畳表示位置を選択したか
どうか判別する。もし選択されていなかったならばステップＳ２０４に進み、選択されたならばステップＳ２０３に進んでここで選択された位置に拡大小画面を移動させる。ステップＳ２０４ではズーム指示がされたかどうか判別する。もしズーム指示されていなかったならばステップＳ２０６に進み、指示されたならばステップＳ２０５でズーム指示されている限り前述したごとく最大ズーム倍率までズームアップする。

ステップＳ２０６では重畳表示をやめるように設定したかどうか判別する。これは図２
ステップＳ１０５のピント確認設定とは逆の解除設定をすることでなされる。もし重畳表示をやめるよう設定されていなかったならばそのままの表示状態で本ルーチンを終了し、やめるよう設定されたならばステップＳ２０７で重畳表示をやめて本ルーチンを終了する。

次に、図５、図６を使用して図３ステップＳ１１５において記録する際のフォルダの選
択方法について詳細に説明する。従来、撮影した画像データは撮影画像の内容に関係なくデジタルカメラによって自動的に作成された撮影日時に基づいた名称を持ったフォルダに格納されていた。しかしながら、後から画像データを再生する際に沢山の再生画像があった場合などには、この様に単に日時のみで分類され、保存されているとあとから所望の画像を検索するのが煩わしくなってしまう。特に同時期に人物撮影をした画像データがたくさんあった場合には見たい人物の画像データを探し出すことが難しい。これを解決するために本実施例では、撮影した画像データの中の主要被写体に対応したフォルダにそれぞれ自動的に撮影した画像データを格納するようにしている。

図５は主要被写体毎に対応しているそれぞれのフォルダに画像データを格納する場合に
ついて説明しているフローである。図５ステップＳ３０１においてまず、デジタルカメラに挿入されているメモリカード１１１内にあるフォルダ名称を読み込む。ステップＳ３０２では選択された特徴点に対応したフォルダがメモリカード１１１内にあるかどうか判別する。もし対応したフォルダが既にメモリカード１１１内に存在していたならばステップＳ３０４に進み、無かったならばステップＳ３０３に進む。ステップＳ３０３では選択した特徴点に対応したフォルダを新たにメモリカード１１１に作成しステップＳ３０４に進
む。ステップＳ３０４では対応したフォルダにそれぞれの画像データを格納して本ステップを終了する。

もし画像データから複数の特徴点が抽出された場合であってもここで説明したように選
択された特徴点にのみ着目し、もしその選択した特徴点に対応したフォルダがなかった場合には新たにフォルダ作成するようにすればよい。

図６は画像データ内に特徴点が複数抽出された場合の他の実施例について説明したフロ
ーである。ここでは特徴点に付与されている優先順位に基づいて所定のフォルダに画像データを格納する方法について説明する。この場合はまず、記憶部１１２５にデジタルカメラの使用者が予め被写体に対応した特徴点情報を記録しておく。図８に記憶部１１２５に記録されている特徴点とそれに対応した特徴点情報の記録状態の一例を示す。

図８において特徴点としてＴＡＲＯ、ＨＡＮＡＫＯ、ＪＩＲＯ、ＳＡＢＵＲＯというよ
うにそれぞれ名前が付けられた特徴点が設定された優先順位と共に登録されている。ＴＡＲＯに対する特徴点情報としてはまず、前述したＡＦエリアを選択する際の優先順位があり、これは第１順位に設定されている。これにより例えばＴＡＲＯとＪＩＲＯが同時に撮影画面内に抽出されたとしたらＴＡＲＯを含むエリアが優先してＡＦエリアに設定される。この優先順位の設定も設定釦１１６４及びＵ／Ｄ釦１１６５を使用して予め行う。この優先順位は任意の時点で変更することが出来る。ＳＡＢＵＲＯのように当初は設定しておかなくとも良い。

ＴＡＲＯの特徴点情報としては、ＴＡＲＯの特徴点を登録した日にちが登録日として次
に記録されている。ここで（１）で示される登録日は最初にＴＡＲＯを登録した日にちで（２）、（３）は（１）と異なった状態たとえば横向き、後ろ向き、眼鏡着用等の状態で撮影されたＴＡＲＯの他の特徴点を追加して登録した日にちを示している。このように、眼鏡や髭の有無等によって同一人物としての特徴点を複数登録することで抽出した特徴点に対して人物を識別する確度が向上する。この特徴点についてもその登録内容をＬＣＤモニタ１０９に表示するとともに任意に追加あるいは削除することが出来る。優先度、登録日以外に簡単なコメントやこの特徴点が検出された場合に有効な記録時あるいは再生時の処理方法（ホワイトバランス設定や輪郭補償処理設定等）、特徴点までの距離等についても記録するようにしても良い。

このようにして登録するよう設定された特徴点の実際のデータは下の特徴点データエリ
アにＴＡＲＯ（１）、ＨＡＮＡＫＯ（１）のように順に記録される。ここで実際のデータとは抽出された特徴点の内両眼の眼幅、目と鼻との相対位置関係、顔の形状等を所定の大きさに規格化したデータである。

記録部１１２５にはこれまで述べた特徴点情報、特徴点データ以外に抽出した実際の被
写体の登録時の縮小画像も記録しておいても良い。これによりＬＣＤモニタ１０９で被写体を確認しながら被写体情報を確実に追加したり削除したりすることが出来る。

図６ステップＳ４０１においては記憶部１１２５に記録されている前述した特徴点情報
の中から抽出した特徴点に対応した優先順位情報を判別する。ステップＳ４０２ではメモリカード１１１内に作成されているフォルダを読み込む。ステップＳ４０３ではステップＳ４０１で判別した優先順位の中から最優先順位を判別し、その特徴点に対応したフォルダがメモリカード１１１にあるかどうかを判別する。もし対応したフォルダがあった場合にはステップＳ４０７に進む。対応したフォルダがなかった場合にはステップＳ４０４に進んでここで次の優先順位の特徴点に対応したフォルダがあるかどうか判別する。もしあった場合にはステップＳ４０７に進み、無かったならばステップＳ４０５に進む。

ステップＳ４０５では抽出した全ての特徴点についてフォルダの有無の判別が終了した
かどうか判別する。もし終了していなかったならばステップＳ４０４に戻り、終了していたならばステップＳ４０６に進む。ステップＳ４０６では抽出した全ての特徴点に対応したフォルダがメモリカード１１１になかったことから抽出した特徴点の中から最優先順位に相当する特徴点に対応したフォルダを作成してステップＳ４０７に進む。ステップＳ４０７では抽出した特徴点に対応したフォルダに画像データを書き込んで記録ステップを終了する。

図６の説明においては、最優先特徴点に対応したフォルダがなかった場合には次の優先
順位の特徴点に対応するフォルダを探していたが、図５で説明したように直ちに最優先特徴点に対応したフォルダを作成しても良い。更に、マニュアルでＡＦエリアを設定するような場合には、撮影者が複数の被写体の中からＡＦエリアの被写体として選択した被写体が常に最優先特徴点であるとは限らないのでＡＦエリアの被写体に対応する特徴点を最優先特徴点としても良い。

また、複数の特徴点が抽出された場合に、全ての抽出した特徴点に対応したフォルダに
それぞれ同一の画像データを格納するようにしても良い。この場合、メモリカード１１１に対応するフォルダがなかったならばもちろん新たにフォルダを作成する。但し、集合写真等の場合には、フォルダ数が非常に多くなるので最大フォルダ数を決めておくようにする方が好ましい。

一方、この様に同一画像データを対応したフォルダにそれぞれ格納する方法は、記録容
量が限られているメモリカード１１１などでは好ましくない。これを回避する記録方法を次に述べる。まず、画像データは特定の一つのフォルダにのみ格納すると共にその画像データを格納したい他のフォルダ名情報も記録する。一方、その他のフォルダにはその画像データが格納されているフォルダ名情報を格納するようにする。この様に画像データが記録されているフォルダ名のみ記録することで不必要に記録容量を減らすことを防止することが出来る。この様にメモリカード１１１に画像データを記録した場合、メモリカード１１１から他の大容量メモリ等に画像データを移動してしまうとそれぞれのフォルダに格納されているフォルダ名情報が無意味になる恐れがある。これを回避するには、メモリカード１１１から他の大容量メモリに画像データを移動する際に、記録されているフォルダ名情報に基づいて各フォルダ毎に同一の画像データを格納するようにすればよい。

図９にはメモリカード１１１に書き込まれているフォルダ名とそこに格納される画像デ
ータファイル名をツリー構造にして示す。図９において０１ＮＩＫＯＮという名称のフォルダは抽出モードに設定されずに撮影されたり、抽出モードに設定されて撮影された画像であっても特徴点がなにも抽出されなかった画像データを格納するためのフォルダである。また、画像データから単に特徴点が抽出されただけで名称が付与されていない被写体のみが撮影されている画像データもここに格納する。もちろん、別途、被写体の名称なしの画像データのみ格納するためのフォルダを作成してそこに格納しても良い。この時、このフォルダ名は０４ＮＡＮＡＳＨＩ、画像データのファイル名はＤＳＣ０４００１等、他のフォルダ及び画像データファイルと区別できるような名称が付与される。

図９における０２ＴＡＲＯ或いは０３ＨＡＮＡＫＯというフォルダはそれぞれＴＡＲＯ
或いはＨＡＮＡＫＯという人物を最優先して撮影した画像データを格納するフォルダである。

図１０はＤＳＣ０２００２という名称の画像データのファイル構造を示している。画像
データファイルは実際の撮像素子から出力される画像データを記録する画像データエリア
とその画像データ内から抽出された特徴点に関する情報とを記録する特徴点情報エリアとから構成される。特徴点情報エリアにはこの場合画像データから抽出されたＴＡＲＯ及びＨＡＮＡＫＯに関する優先度、抽出位置座標、特徴点の大きさとこの画像データを撮影した時のＡＦエリアに関する情報が記録されている。このうち特徴点の大きさ情報としては検出された特徴点を含む長方形の左上及び右下の座標が記録されている。ＡＦエリア情報としても左上及び右下の座標が記録されていて、今の場合、優先度が第１順位のＴＡＲＯの位置情報及び大きさ情報と同一の情報が記録されている。

図１０においては抽出した全ての特徴点情報とＡＦエリア情報を画像データと共に記録
している。この記録されている特徴点情報を判別することにより、複数のフォルダの中に格納されているそれぞれの画像データの中から特定の人物が撮影されている画像データを検索する場合に便利である。これに対してもちろん単に、最優先特徴点（今の場合、ＴＡＲＯ）情報のみを画像データと共に記録するようにしていても良い。同様にＡＦエリア情報のみを画像データと共に記録しても良い。もちろん最優先特徴点情報及びＡＦエリア情報を両方とも記録しても良い。

ここまではデジタルカメラにメモリカード１１１が１枚のみ装着される場合について説
明してきた。これに対して、その記憶容量が異なるだけでなく外観形状や駆動方法が異なるものなど市場には各種のメモリカード１１１が存在している。それ故、複数の種類のメモリカード１１１が使用可能なようにデジタルカメラに複数のメモリカード１１１の装着口を備える場合がある。そのような場合には上述した画像データの分類に従って記録するメモリカード１１１を変えるようにしても良い。もちろん、それぞれのメモリカード１１１に記録する際には分類に応じたフォルダを作成する。

次に図７を使用して再生画像のピント確認について説明する。ステップＳ５０１でデジ
タルカメラの動作モードが再生モードに設定されているかどうか判別する。この設定はこれまでと同様設定釦１１６４を使用する。ここで再生モードに設定されていると判別されたならば、ステップＳ５０２でメモリカード１１１から記録されている画像データを読み出す。ステップＳ５０３ではピント確認をする設定になっているかどうか判別する。ピント確認の設定になっていなかったならばステップＳ５０５に進み、ピント確認設定になっていたならばステップＳ５０４に進む。ここでのピント確認動作の内容は図２ステップＳ１０６と同様である。但し、再生時には画像データからわざわざ特徴点を抽出する必要はなく、図１０で説明した、画像データと共に記録されている最優先特徴点情報或いはＡＦエリア情報を判別して直ちにピント確認用の小画面を重畳して表示させることが出来る。電子ズームによるズームアップももちろん可能である。

ピント確認が終了したらステップＳ５０５に進み再生モードが終了したかどうか判別す
る。もし再生モードが終了したと判別されたならば本シーケンスを終了し、まだ再生モードを継続中であると判別されたならばステップＳ５０２に戻って撮影者の指示に応じて画像の再生を継続する。

本発明によるデジタルカメラの構成を示すブロック図である。 本発明によるデジタルカメラの動作シーケンスを説明するフローチャートである。 本発明によるデジタルカメラの動作シーケンスを説明するフローチャートである。 本発明によるデジタルカメラのピント確認の動作を説明するフローチャートである。 本発明によるデジタルカメラの記録動作を説明するフローチャートである。 本発明によるデジタルカメラの他の記録動作を説明するフローチャートである。 本発明によるデジタルカメラの再生時の動作シーケンスを説明するフローチャートである。 本発明によるデジタルカメラの記憶部に記憶される特徴点情報について説明する図である。 本発明によるデジタルカメラに装着されるメモリカード内のフォルダとデータファイルの格納状態を説明する図である。 本発明によるデジタルカメラに装着されるメモリカード内のデータファイルの構造を説明する図である。 本発明によるデジタルカメラの表示部における拡大画面表示例を説明する図である。 本発明によるデジタルカメラの表示部における記録確認メッセージを重畳表示した図である。

１０１ 撮影レンズ
１０２ 絞り
１０３ 撮像素子
１０４ アナログ信号処理部
１０５ バッファメモリ
１０６ デジタル信号処理部
１０８ Ｄ／Ａコンバータ
１０９ ＬＣＤモニタ
１１０ 記録・再生信号処理部
１１１ 外部記憶媒体
１１２ ＣＰＵ
１１３ レンズ駆動部
１１４ 絞り駆動部
１１５ 撮像素子駆動部
１０７ ＶＲＡＭ
１１６ 操作部材
１１７ ストロボ
１２１ レンズ位置検出部
１３５ Ａ／Ｄコンバータ
１１２１ ＡＥ演算部
１１２２ ＡＷＢ演算部
１１２３ 特徴点抽出演算部
１１２４ ＡＦ演算部
１１２５ 記憶部
１１６１ 電源スイッチ
１１６２ 半押しスイッチ
１１６３ 全押しスイッチ
１１６４ 設定釦
１１６５ アップ／ダウン釦

Claims (8)

1. 画像データから被写体の特徴点情報を抽出する抽出手段と、
   前記抽出手段によって抽出された特徴点情報に予め付与されている優先順位を判別する判別手段と、
   前記抽出手段が抽出した特徴点情報に応じて前記画像データを所定のグループに分類する分類手段と、
   前記分類手段が分類した分類結果に応じて前記画像データを記録媒体に記録する記録手段とを備え、
   前記抽出手段が同一の画像データから複数の異なる特徴点情報を抽出した場合には、前記分類手段は前記判別手段によってより優先順位が高いと判別された特徴点情報に対応したグループに前記画像データを分類することを特徴とするデジタルカメラ。
2. 前記記録手段は、同一のグループに属する複数の画像データをまとめて格納するためのエリアを備えた記録媒体上の前記分類手段が分類したグループに対応したエリアに前記画像データを記録することを特徴とする請求項１に記載のデジタルカメラ。
3. 更に、前記分類手段が分類した画像データをまとめて格納するエリアを前記記録媒体に作成するための作成手段を備えたことを特徴とする請求項１に記載のデジタルカメラ。
4. 更に、前記分類手段が分類したグループの画像データを格納するエリアが前記記録媒体にあるかどうかを検出する検出手段を備え、
   前記分類手段が分類したグループの画像データを格納するエリアが前記記録媒体に無いことが前記検出手段によって検出されたならば、前記作成手段は前記分類手段が分類したグループの画像データを格納するエリアを前記記録媒体に作成することを特徴とする請求項３に記載のデジタルカメラ。
5. 更に、前記分類手段が分類したグループの画像データを格納するエリアが前記記録媒体にあるかどうかを検出する検出手段と、
   前記検出手段によって前記分類手段が分類したグループの画像データを格納するエリアが前記記録媒体に無いことが検出された場合に、前記分類手段が分類した画像データをまとめて格納するためのエリアを前記記録媒体に作成する作成手段とを備えたことを特徴とする請求項４に記載のデジタルカメラ。
6. 前記記録手段は複数の記録媒体のなかから前記分類手段が分類した分類結果に応じた記録媒体に記録することを特徴とする請求項１に記載のデジタルカメラ。
7. 画像データから被写体の特徴点情報を抽出する抽出手段と、
   前記抽出手段によって抽出された特徴点情報に予め付与されている優先順位を判別する判別手段と、
   前記抽出手段が抽出した特徴点情報に応じて前記画像データを所定のグループに分類する分類手段と、
   前記分類手段が分類した画像データをまとめて格納するためのエリアを記録媒体上に作成する作成手段とを備え、
   前記抽出手段が同一の画像データから複数の異なる特徴点情報を抽出した場合には、前記分類手段は前記判別手段によってより優先順位が高いと判別された特徴点情報に対応したグループに前記画像データを分類することを特徴とするデジタルカメラ。
8. 更に、前記分類手段が分類した画像データを前記記録媒体上の前記作成手段が作成したエリアに記録する記録手段を備えたことを特徴とする請求項７に記載のデジタルカメラ。