JP4746295B2

JP4746295B2 - デジタルカメラおよび撮影方法

Info

Publication number: JP4746295B2
Application number: JP2004242175A
Authority: JP
Inventors: 元中李
Original assignee: Fujifilm Corp
Current assignee: Fujifilm Corp
Priority date: 2003-08-25
Filing date: 2004-08-23
Publication date: 2011-08-10
Anticipated expiration: 2024-08-23
Also published as: JP2005102175A

Description

本発明は、人物および動物等を含む被写体を撮影した場合に、撮影者が望む画像を得るためのデジタルカメラおよび撮影方法に関するものである。

従来、デジタルカメラには、撮影被写体の画像を表示する表示部が設けられている。この表示部は、液晶表示パネル等が用いられている。表示部は、表示領域が小さく、かつ解像度も低い。このため、人物、または動物等を景色を含めて撮影する場合、人物または動物等の表示が小さく、その顔の表情が判別しにくい。

このため、従来より、最終的な撮影画像とする前に、表示部に表示されるプレビュー画像について、顔検出を行う等の処理をするものが提案されている（特許文献１〜特許文献３等参照）。

特許文献１に開示されたカメラにおいては、捕捉部により得られたフレーミング画像に対して、顔検出アルゴリズムを実行して、フレーミング画像中の全ての顔を検出する。さらにフレーミング画像について、種々のアルゴリズムが実行され、最終捕捉画像が得られる。この最終補足画像に対して赤目検出アルゴリズムが実行される。この最終補足画像に赤目が存在する場合には、赤目検出アルゴリズムによって、表示装置上に警告が表示される。この赤目通知を受けた後、撮影者は、従来のカメラが、デジタルカメラである場合には、目の中に不快な赤いハイライトを除去するために、自動赤目補正アルゴリズムを実行することができる。これにより、赤目が補正された画像を得ることができる。

また、特許文献２には、人物を撮影する場合、画像データの中から、人物の顔を検出し、検出された人物の少なくとも一部を測距エリアとして、自動合焦制御を行うカメラ（撮像装置）が開示されている。この特許文献２のカメラによれば、画面内の人物の位置に拘らず、人物の顔にピントを合わせ、自動合焦動作時と撮影時とで構図を変更することなく人物の撮影ができる。

さらに、特許文献３には、画面内の人物の位置および範囲に拘らず、人物を適正露光とすることが可能な自動露光機能を備えたカメラ（撮像装置）が開示されている。この特許文献３のカメラによれば、画像データの中から人物の顔を検出し、この検出された人物の顔を測光し、この測光結果に基づいて露光量を算出し、この露光量に基づいて露出制御を行う。

特開２００１−３０９２２５号公報特開２００３−１０７３３５号公報特開２００３−１０７５５５号公報

しかしながら、上述の特許文献１〜特許文献３のカメラにおいては、赤目、焦点および露光量などについては、適正にできるものの、背景を含めたシーンを撮影する場合、被写体の特定部分、例えば撮影される人物や動物の顔の表情を判別することは困難であり、必ずしも人物または動物等の顔について、撮影者が希望する画像を得ることができないという問題点がある。

本発明の目的は、前記従来技術に基づく問題点を解消し、人物および動物等の顔或いは被写体の特定部分について撮影者が希望する画像を容易に得ることができるデジタルカメラおよび撮影方法を提供することにある。

上記目的を達成するために、本発明は、被写体の顔を含む被写体の像を光電的に撮影し、前記被写体の最終的な撮影画像となる前のプレビュー画像データを得る撮影部と、
前記撮影部で得られたプレビュー画像データに基づいて前記被写体のプレビュー画像を表示する表示部と、
前記撮影部で得られたプレビュー画像データから前記被写体の顔を検出する顔検出部と、
前記顔検出部により検出された顔を少なくとも１つ選択する顔選択手段と、
前記顔選択手段により選択された顔を拡大表示する指示を受け付ける拡大表示指示受付手段と、
前記顔選択手段により選択された顔を含む顔領域を前記表示部内で追跡処理する追跡処理部と、
前記拡大表示指示受付手段により拡大表示の指示を受け付けたときに、前記顔選択手段により選択され前記追跡処理部により追跡処理された被写体の顔を含む顔領域の顔画像を前記表示部に拡大表示させる制御部と
を有することを特徴とするデジタルカメラを提供するものである。

本発明において、前記制御部は、前記顔検出部により前記プレビュー画像データから顔が複数検出され、前記顔選択手段により複数の顔が選択され、前記拡大表示指示受付手段により顔画像の拡大表示の指示を受けた場合、前記表示部を複数の領域に分割し、前記複数の顔画像を前記表示部に拡大表示させることが好ましい。

また、本発明において、さらに、撮影指示を受け付けるシャッター指示受付手段を設けるとともに、前記表示部にプレビュー画像若しくは前記顔画像を拡大表示した後に、シャッター指示受付手段により撮影指示を受け付けたときは、前記被写体の撮影画像を撮影画像データとして記録する記録部を備えることが好ましい。
また、前記記録部は、前記顔選択手段により選択された顔の画像サイズ、または選択された顔の前記被写体の像における位置情報のいずれかの内、少なくとも一つを、前記撮影画像データとともに情報として記録することが好ましい。

さらに、本発明は、撮影部、表示部、顔検出部、顔選択手段、拡大表示指示受付手段、追跡処理部、および制御部を有するデジタルカメラで被写体の画像を撮影する撮影方法であって、
前記撮影部が、前記被写体の顔を含む被写体の像を光電的に撮影し、前記被写体の最終的な撮影画像となる前のプレビュー画像データを得、
前記表示部が、前記撮影部で得られたプレビュー画像データに基づいて前記被写体のプレビュー画像を表示し、
前記顔検出部が、前記撮影部で得られたプレビュー画像データから前記被写体の顔を検出し、
前記顔選択手段が、前記顔検出部により検出された顔を少なくとも１つ選択し、
前記拡大表示指示受付手段が、前記顔選択手段により選択された顔を拡大表示する指示を受け付け、
前記追跡処理部が、前記顔選択手段により選択された顔を含む顔領域を前記表示部内で追跡処理し、
前記制御部が、前記拡大表示指示受付手段により拡大表示の指示を受け付けたときに、前記顔選択手段により選択され前記追跡処理部により追跡処理された被写体の顔を含む顔領域の顔画像を前記表示部に拡大表示させる
ことを特徴とする撮影方法を提供する。
本発明において、前記制御部は、前記顔検出部により前記プレビュー画像データから顔が複数検出され、前記顔選択手段により複数の顔が選択され、前記拡大表示指示受付手段により顔画像の拡大表示の指示を受けた場合、前記表示部を複数の領域に分割し、前記複数の顔画像を前記表示部に拡大表示させることが好ましい。
また、本発明において、さらに、前記デジタルカメラは、シャッター指示受付手段および記録部を有し、
前記表示部にプレビュー画像若しくは前記顔画像を拡大表示した後に、前記シャッター指示受付手段により撮影指示を受け付けたときは、前記記録部が、前記被写体の撮影画像を撮影画像データとして記録することが好ましい。
また、前記記録部は、前記顔選択手段により選択された顔の画像サイズ、または選択された顔の前記被写体の像における位置情報のいずれかの内、少なくとも一つを、前記撮影画像データとともに情報として記録することが好ましい。

本発明のカメラは、撮影部により撮影された画像データから、顔検出部により顔を検出する顔検出部と、この顔検出部により検出された顔を少なくとも１つ選択する顔選択手段と、この顔選択手段により選択された顔を含む顔領域の顔画像を表示部に拡大表示する制御部とを備えることにより、人物および動物等の顔を拡大表示して確認して、撮影することができるので、撮影者が希望する画像を容易に得ることができる。
撮影しようとする被写体の顔以外の特定部分であっても、予め既知の特定部分の形状又は色情報に基づいて特定部分を抽出し、画像を拡大表示することができるので、撮影者にとって好ましい形態で撮影することができる。

以下に、添付の図面に示す好適実施形態に基づいて、本発明のデジタルカメラおよび撮影方法を詳細に説明する。

図１は、本発明の実施形態に係るデジタルカメラの構成を模式的に示すブロック図である。
図１に示すデジタルカメラ１０は、基本的に、撮影部１２、ストロボ１４、信号処理部１６、シャッタボタン１８、モード切換ボタン１９、表示部２０、スイッチ群２２、圧縮部２３、記録部２４、顔検出部２５、顔拡大表示ボタン２７、顔選択ボタン２８、追跡処理部３０、ＤＲＡＭ等を有する記憶部３２、シャッタ３４および制御部５０を有して構成される。なお、図中参照符号ｂはシステムバスである。本実施形態のデジタルカメラ１０は、後述するように、例えば、顔検出モードという少なくとも１つの特殊な撮影モードを有する。
デジタルカメラ１０は、人物を撮影被写体とするとき、この人物の顔を、被写体の特定部分として表示部２０に拡大表示するものである。

本実施形態のデジタルカメラ１０の構成は、顔検出部２５、顔拡大表示ボタン２７、顔選択ボタン２８および追跡処理部３０を有する以外は、基本的に、公知のデジタルカメラと同様である。従って、デジタルカメラ１０には、図示した以外にも、露出決定用の測光手段、録音用のマイク、パーソナルコンピュータ（ＰＣ）等の外部機器と接続するためのコネクタ等のインターフェース（Ｉ／Ｆ）、撮影部１２のズーム機構、ファインダ、各種機械要素の駆動手段、動作状態および警告等を知らせるためのランプ、操作選択／指示のための液晶表示パネル等、通常のデジタルカメラが有する各種の構成要素、ならびにこれらを動作および制御する手段を有するのはもちろんである。

撮影部１２は、通常のデジタルカメラの撮影光学系と同様であり、結像レンズ４０、絞り４２および（エリア）ＣＣＤセンサ４４、および信号処理部１６を有して構成される。

結像レンズ４０は、ＣＣＤセンサ４４に被写体（図示せず）の像を結像させるものである。この結像レンズ４０は、特に限定されるものではなく、ズーム機能を有するものであってもよい。

絞り４２は、ＣＣＤセンサ４４に入射する光の量を調整するものであり、結像レンズ４０とＣＣＤセンサ４４との間に設けられている。絞り４２は、制御部５０に接続されており、その絞り値は制御部５０により調整される。
ＣＣＤセンサ４４は、結像レンズ４０により結像された被写体の像をＲ（赤）、Ｇ（緑）およびＢ（青）の３原色の各色毎に画像信号を得、これらの３原色の画像信号を信号処理部１６に出力するものである。

信号処理部１６は、ＣＣＤセンサ４４から出力された画像信号を処理して、被写体の撮影画像の画像データとするものである。この信号処理部１６は、ＣＣＤセンサ４４からの画像信号に、例えば、Ａ／Ｄ変換、シェーディング補正、暗電流補正、ノイズ除去、およびｌｏｇ変換等を施して、このＣＣＤセンサ４４から出力された画像信号を撮影画像の画像データとする。
また、信号処理部１６は、記憶部３２および制御部５０に接続されている。
なお、この撮影部１２には、ストロボ１４およびシャッタ３４も含まれる。ストロボ１４は通常のデジタルカメラに搭載されるストロボと同様のものである。このストロボ１４も制御部５０によりその発光量を調整することができる。

モード切換ボタン１９は、デジタルカメラ１０の後述する顔検出モードおよび風景を撮影する風景モード等の各種の撮影モードを切り換えるものであり、制御部５０に接続されている。これにより、後述する制御部５０によるデジタルカメラ１０の制御モードを変更させる。このモード切換ボタン１９により切り換えられたデジタルカメラ１０の撮影モードは、表示部２０に表示させることが好ましい。

シャッタ３４は、シャッタボタン１８が押下されると、信号処理部１６から１フレーム分の画像データを記憶部３２に出力させるものである。なお、シャッタ３４は、電気的なものに限定されるものではなく、機械的なものであってもよく、後述する制御部５０によりそのシャッタスピードが調整される。

表示部２０は、撮影被写体の最終的な撮影画像となる前の画像であるプレビュー画像の表示、撮影画像の表示、またはＧＵＩ(Graphical User Interface)による各種の操作のための表示を行うものであり、例えば、通常のデジタルカメラに搭載される液晶ディスプレイにより構成される。
また、この表示部２０は、後述するように、顔領域が拡大表示されるものである。また、後述するように、顔領域が複数選択された場合には、その選択数に応じて画面が分割された顔領域が拡大表示される。
スイッチ群２２は、ユーザがデジタルカメラ１０を操作するための各種のスイッチである。例えば、ストロボスイッチ、ズームスイッチ、表示切替ボタン、または各種の選択を行うための十字ボタンもしくは矢印ボタン等を含むものである。

本実施形態のデジタルカメラ１０においては、これらのモード切換ボタン１９、顔拡大表示ボタン２７、顔選択ボタン２８および表示部２０による表示を用いたＧＵＩによって、後述する撮影画像の拡大の指示等の操作も含めた各種の操作を行う。

圧縮部２３は、メディア等に画像データを記録するために、撮影した画像の画像データを圧縮して、例えば、ＪＰＥＧ(Joint Photographic Expert Group）形式の圧縮画像データにするものであり、記憶部３２から画像データが出力されて、この画像データを圧縮する。圧縮部２３は、記録部２４に接続されており、圧縮された画像データが記録部２４に出力される。

記録部２４は、撮影し、最終的に得られた撮影画像の画像データをメディア（記録媒体）に記録するものであり、メディアを装填するスロット４６と、スロット４６を接続するためのカードＩ／Ｆ４８とを有して構成される。図示例のデジタルカメラ１０は、例えば、スロット４６に装填されたメディアに、Ｅｘｉｆ形式の画像ファイル形式（画像ファイルフォーマット）で画像データ等を記録する。本発明において、利用可能なメディアは、特に限定されるものではなく、ｘＤ−ピクチャーカード^TM、スマートメディア^TM、ＰＣカード、およびコンパクト^TMフラッシュ等、デジタルカメラで利用されているメディアが各種利用可能である。

顔検出部２５は、デジタルカメラ１０により撮影された被写体のプレビュー画像に画像解析による顔の検出を行って、顔検出位置情報を生成するものである。例えば、顔検出部２５は、その顔位置情報に基づいて、後述するように、表示部２０に顔を含む領域を囲む枠を表示する。この枠で囲まれる領域を顔領域という。なお、本実施形態のデジタルカメラ１０においては、顔検出部２５は、前述の制御部５０とは独立した専用の演算手段（Processing Unit)を有することが好ましい。

以下、顔検出部２５の顔検出方法について説明する。
この顔検出部２５における顔検出は、公知の方法で行えばよく、特に限定されるものではない。この顔検出は、例えば、エッジ検出または形状パターン検出による顔検出方法、色相抽出または肌色抽出による顔検出方法、候補領域を抽出して、この候補領域を小領域に分割して、各領域毎の特徴量を予め設定した顔領域パターンと照合して、その確度から顔領域を抽出する方法（特開２０００−１３７７８８号公報参照）、顔候補領域を抽出して、各候補領域の重複度から確度を評価して顔領域を抽出する方法（特開２０００−１４９０１８号公報参照）、および顔候補領域を抽出して、各候補領域の濃度が所定の閾値に対応する値である場合に、胴体候補領域を抽出し、顔および胴体候補領域の濃度または彩度コントラストを用いて確度を評価して、顔領域を抽出する方法（特開２０００−１４８９８０号公報参照）等が例示される。

追跡処理部３０は、顔検出部２５により検出され、顔選択ボタン２８で選択された顔の顔領域について、同じ被写体で、同じシーンについて得られた別の画像において顔領域を追跡処理するものである。前のフレームで得られた顔の位置情報などを利用すること（特開平１１−１５９７９号公報参照）により、１フレームにおける顔追跡の処理負荷は顔検出処理よりも軽い。

顔拡大表示ボタン２７は、プレビュー画像中の検出された顔を表示部２０の画面に拡大表示させる指示を出すものである。この顔拡大表示ボタン２７を押下することにより、制御部５０により、検出された顔が表示部２０の画面に拡大表示される。顔拡大表示ボタン２７の押下が終わると、プレビュー画像に戻る。

顔選択ボタン２８は、顔検出部２５により検出された顔のうち、拡大したい顔を選択するために用いられるものである。顔選択ボタン２８を押下することにより、例えば、複数の顔が検出されている場合、顔領域を示す枠の色等が順々に変化し、選択しようとする顔を撮影者にわかるようにし、さらにボタンを押下することにより、顔が選択される。なお、本実施形態においては、顔を選択することができれば、そのインターフェースは、特に顔選択ボタン２８に限定されるものではなく、十字キー等の公知のものが種々利用可能である。この顔選択ボタン２８により顔領域を複数選択するようにしてもよい。

顔検出部２５は、さらにＤＲＡＭ等の記憶手段を有することが好ましく、顔位置情報に応じて、対応する画像中における顔が存在する領域を囲む枠を表示部２０に拡大表示させる。

記憶部３２は、デジタルカメラ１０により撮影された画像の画像データが保存されるものである。この記憶部３２は、例えば、ＤＲＡＭ等の記憶素子を有するものであり、撮影部１２、信号処理部１６、顔検出部２５、および追跡処理部３０に接続されており、これらから画像データが出力されて保存され、さらに、記憶部３２から圧縮部２３を経て記録部２４に保存される。

制御部５０は、デジタルカメラ１０全体を制御するものであり、ＣＰＵ等を用いて構成される。
後述するように、制御部５０は、顔検出部２５により、撮影された画像データに顔が検出された場合、顔が検出された画像データに顔位置情報を付加する。そして、この顔位置情報に基づいて顔を含む顔領域を囲む枠を表示部２０に表示させる。
また、追跡処理部３０による顔領域の追跡結果も表示部２０に表示させる。
さらに、制御部５０は、モード切換ボタン１９により、顔検出モード、および風景撮影モード等に切り換えられる。各モードにおいては、撮影シーンに適した撮影条件が予め設定されており、撮影モードとして撮影者が選択できるようになっている。
顔検出モードとは、被写体中に人物または動物等が含まれるもので、それらの顔について、検出し拡大表示して確認をする撮影モードである。
風景撮影モードとは、風景を撮影する風景モードである。この風景撮影モードでは、ストロボ発光を禁止している。

また、制御部５０は、顔選択ボタン２８により選択された顔領域の顔画像を、顔拡大表示ボタン２７が押下されると、表示部２０の画面に拡大表示させる。この場合、顔画像の拡大画像の生成は、撮影画素数等に応じて、公知の方法で行えばよい。
表示部２０の画面における拡大画像の拡大表示のサイズは、特に限定されるものではなく、表示部２０のサイズに応じて、適宜、決定すればよく、さらに、固定サイズであっても、顔領域（顔画像）の顔の大きさ等に応じて、拡大表示のサイズを、適宜、変更するようにしてもよい。また、拡大表示のサイズをユーザが選択できるようにしてもよい。
さらに、顔領域が複数選択されている場合には、その選択数に応じて画面を分割して分割された各領域毎に顔領域を拡大表示するようにしてもよい。
なお、デジタルカメラ１０では、顔選択ボタン２８により選択された顔の顔領域の画像サイズ及び選択された顔の、撮影した画像における顔位置情報の少なくとも一つを画像データに付加し、記録部２４は、この画像データを記録することが好ましい。これにより、後日画像を呼び出して編集作業を行うとき、撮影した人物に基づいて効果的に編集することができる。

以下、本実施形態のデジタルカメラにおける撮影方法について説明する。なお、本実施形態のデジタルカメラ１０における撮影方法では、後述するように被写体の特定部分を撮影する人物の顔として顔検出及び顔の拡大表示を行う。この顔検出、および顔の拡大表示以外は、公知のデジタルカメラと同様であるので、その詳細な説明は省略する。
図２および図３は、本実施形態のデジタルカメラの撮影方法を示すフローチャートである。また、図４（ａ）〜（ｃ）は、本実施形態のデジタルカメラにおける顔検出モードを工程順に示す模式図である。

撮影者により、被写体にデジタルカメラ１０が向けられて撮影が開始される。本実施形態においては、図４（ａ）に示すように、山Ｍおよび４人の女性Ｗ_１〜Ｗ_４を被写体として、山Ｍを背景にして４人の女性Ｗ_１〜Ｗ_４が並んでるシーンを撮影する場合を例に説明する。
先ず、デジタルカメラ１０を被写体に向けると、山Ｍを背景にした４人の女性Ｗ_１〜Ｗ_４のシーンのプレビュー画像６０（図４（ａ）参照）が表示部２０の画面に表示される。このとき、撮影者によりモード切換ボタン１９によって顔検出モードが選択されているか否かが判定される（ステップＳ１）。
このステップＳ１において、顔検出モードが選択されていない場合には、そのまま撮影する（ステップＳ１４）。

一方、ステップＳ１において、顔検出モードが選択されている場合には、撮影部１２により得られた画像データについて顔検出部２５により顔検出処理をする（ステップＳ２）。
次に、ステップＳ２において、顔検出部２５により顔が検出されたか否かが判断される（ステップＳ３）。
ステップＳ３において、顔が検出されない場合、そのまま撮影する（ステップＳ１４）。

一方、ステップＳ３において、顔が検出された場合には、図４（ｂ）に示すように、検出された顔について、各女性Ｗ_１〜Ｗ_４の顔を含む領域に枠（マスク）ｆ_１〜ｆ_４を表示する（ステップＳ４）。この枠表示されたプレビュー画像６０が、撮影者の顔選択に用いられる。
次に、顔選択ボタン２８により拡大表示する顔が撮影者により選択されているか否かが判定される（ステップＳ５）。
なお、ステップＳ５において、顔が選択されない場合には、そのまま撮影（ステップＳ１４）が行われ、そのままの画像で撮影されて最終的な撮影画像となり、撮影が終了する（ステップＳ１５）。

一方、ステップＳ５において、拡大表示する顔が選択されている場合には、顔拡大表示ボタン２７の押下により選択された顔の顔領域を切出し、切出された顔領域を拡大表示する（ステップＳ６）。
この場合、女性Ｗ_４が選択されているので図４（ｃ）に示すように、制御部５０により女性Ｗ_４の顔の拡大画像６２が拡大表示される。このステップＳ６においては、顔拡大表示ボタン２７を押下しなくても顔が選択されていれば、自動的に拡大表示されるようにしてもよい。顔拡大表示ボタン２７の押下の終了により、表示部２０の表示は、拡大画像６２からプレビュー画像６０に戻る。
なお、ステップＳ６において、拡大表示された顔が撮影者からみて適切であると判断された場合には、シャッタボタン１８が押下されて撮影を終了してもよい。

次に、選択された女性Ｗ_４の顔領域について、プレビュー画像６０において追跡処理を行う（ステップＳ７）。このとき、ステップＳ７においては、女性Ｗ_４の顔領域は拡大表示されておらず、図４（ａ）に示すようなプレビュー画像６０が表示されている。
本実施形態においては、シャッタボタン１８が押下されて、最終的な撮影画像が決定するまでは、所定の時間間隔（短時間の間隔）で、プレビュー画像６０が逐次更新されている。このため、選択された被写体の顔が、顔拡大表示ボタン２７の押下に応じて常に適切に拡大表示されるように、追跡処理により顔領域を追跡しておく必要がある。なお、顔検出部２５の処理負荷が実施上で問題にならないのであれば、顔検出部２５による処理により選択された被写体の顔領域を検出すればよく、追跡処理部３０は必ずしも必要はない。

ステップＳ７においては、プレビュー画像６０の中で選択された顔画像は、再度追跡処理部３０により追跡され、上述のステップＳ４と同様に枠が表示される。そして、このように追跡された顔領域の画像データが切出される（ステップＳ８）。
次に、ステップＳ８により切出された画像について、撮影者により顔拡大表示ボタン２７が押下されたか否かが検出される（ステップＳ９）。

ステップＳ９において、顔拡大表示ボタン２７が押下されていない場合には、ステップＳ８の状態のままで、図４（ａ）に示すシーンのプレビュー画像６０が表示される（ステップＳ１０）。
一方、ステップＳ９において、顔拡大表示ボタン２７が押下された場合には、切出された顔領域（顔画像）を拡大表示する（ステップＳ１１）。

ステップＳ１０およびステップＳ１１のいずれにおいても、シャッタボタン１８が押下されたか否かが検出される（ステップＳ１２）。
この場合、シャッタボタン１８が押下されていれば、表示部２０に表示された画像が最終的な撮影画像となる（ステップＳ１３）。これにより、撮影は終了する（ステップＳ１５）。

一方、ステップＳ１２において、シャッタボタン１８が押下されていない場合には、再度ステップＳ７に戻り、画像について追跡処理を行い、ステップＳ７〜ステップＳ１２の工程を繰り返し行う。上述のステップＳ７〜ステップＳ１２は、上記女性Ｗ_４が撮影者にとって望ましい表情をするまで、繰り返し行われる。

このように、本実施形態においては、表示部が小さく、風景とともに、人物などを撮影する場合、人物が小さく表示され、顔の表情が判別しにくい場合でも、顔を検出して、顔を拡大表示することにより、顔の表情を確認して最終的な撮影画像を得ることができるので、目瞑り等を判断することができ、撮影者が希望する最終的な撮影画像を得ることができる。
また、本実施形態においては、追跡処理部３０を設けることにより、顔検出部２５による顔検出は、１回の撮影について１回だけなので、画像解析の処理負荷を軽減することができる。
なお、本実施形態においては、被写体の特定部分を、撮影する人物の顔として顔検出及び顔の拡大表示を行うが、拡大表示する特定部分は顔に限られない。例えば、特定部分の形状や色に関する既知の画像情報（画像特徴量）を定めておき、この画像情報に適合する被写体の特定部分を検出し、この特定部分を少なくとも１つ選択し、選択された特定部分の領域を表示部２０内で追跡処理し、追跡処理により追跡された特定部分の領域の画像を表示部２０に拡大表示させるように構成することもできる。特定部分の形状や色に関する既知の画像情報を用いて特定部分を検出する方法の一例として、“Real-Time Tracking of Non-Rigid Objects Using Mean Shift”, Dorin Comaniciu, Visvanthan Ramesh, Peter Meer, CVPR2000 が挙げられる。
本発明においては、被写体の特定部分は予め既知となっている画像情報によって特定されるものに限られない。例えば、表示部２０の画面が上下、左右にそれぞれ３分割して合計９分割された分割画面のうち中央の分割画面に、追跡処理したい被写体の部分が入るようにデジタルカメラ１０を向けておき、シャッタボタンを半分押下することにより、この中央の分割画面に表示された画像に対して、上述した各種顔検出方法（特開２０００−１３７７８８号公報、特開２０００−１４９０１８号公報、特開２０００−１４８９８０号公報等）や上記文献“Real-Time Tracking of Non-Rigid Objects Using Mean Shift”による検出方法を適用して被写体の特定部分として画像情報を算出し取得する。この算出した画像情報を基に表示部２０内で、被写体の特定部分を常時検出、追跡処理し、画像を表示部２０に拡大表示させるように構成することもできる。
また、図５に示すように、表示部２０の画面６４を、例えば、顔の数と同数の４つの表示領域７０〜７６に分割して、個々の表示領域７０〜７６に各女性Ｗ_１〜Ｗ_４の顔を表示させるようにしてもよい。

さらに、本実施形態においては、画像全体と、顔の局所的な領域の拡大画像とを得ることができるので、質が高い最終的な撮影画像を得ることができる。
さらにまた、本実施形態においては、顔選択ボタンを設けることにより、撮影者による顔検出の適否の判断が可能となり、顔検出部２５による誤検出の悪影響を抑制できる。
この誤検出の悪影響とは、例えば、誤検出された顔以外の画像領域が切出され、拡大表示されてしまうことである。

また、本実施形態のデジタルカメラにおいては、顔拡大表示ボタンを設けたが、本発明は、これに限定されるものではない。例えば、顔選択ボタンにより顔が選択されている場合、シャッタボタンを半分押下すると、顔領域を拡大表示させるようにしてもよい。
さらに、表示部２０の画面を、例えば、２つに分割し、被写体の全体画像と、拡大画像とを同時に表示するようにしてもよい。この場合、検出された顔が１つであれば、顔拡大表示ボタンを押下することなく、拡大された顔が表示される。
なお、本実施形態のデジタルカメラに、顔検出部に加えて、表情認識部および視線検出部の少なくとも一方を設けることにより、検出された顔の表情、または目線の向きに基づいて自動的に撮影者が希望する被写体の画像を得ることができるようにしてもよい。

本発明は、基本的に以上のようなものである。以上、本発明のデジタルカメラおよび撮影方法について詳細に説明したが、本発明は上記実施形態に限定されず、本発明の主旨を逸脱しない範囲において、種々の改良または変更をしてもよいのはもちろんである。

本発明の実施形態に係るデジタルカメラの構成を模式的に示すブロック図である。本実施形態のデジタルカメラの撮影方法を示すフローチャートである。図２の次工程を示すフローチャートである。（ａ）〜（ｃ）は、本実施形態のデジタルカメラにおける顔検出モードを工程順に示す模式図である。本実施形態の拡大画像の他の表示形態を示す模式図である。

符号の説明

１０デジタルカメラ
１２撮影部
１４ストロボ
１６信号処理部
１８シャッタボタン
１９モード切換ボタン
２０表示部
２２スイッチ群
２３圧縮部
２４記録部
２５顔検出部
２７顔拡大表示ボタン
２８顔選択ボタン
３０追跡処理部
３２記憶部
３４シャッタ
４０結像レンズ
４２絞り
４４エリアＣＣＤセンサ
５０制御部
６０プレビュー画像
６２拡大画像
ｆ_１〜ｆ_４枠
Ｗ_１〜Ｗ_４女性

Claims

被写体の顔を含む被写体の像を光電的に撮影し、前記被写体の最終的な撮影画像となる前のプレビュー画像データを得る撮影部と、
前記撮影部で得られたプレビュー画像データに基づいて前記被写体のプレビュー画像を表示する表示部と、
前記撮影部で得られたプレビュー画像データから前記被写体の顔を検出する顔検出部と、
前記顔検出部により検出された顔を少なくとも１つ選択する顔選択手段と、
前記顔選択手段により選択された顔を拡大表示する指示を受け付ける拡大表示指示受付手段と、
前記顔選択手段により選択された顔を含む顔領域を前記表示部内で追跡処理する追跡処理部と、
前記拡大表示指示受付手段により拡大表示の指示を受け付けたときに、前記顔選択手段により選択され前記追跡処理部により追跡処理された被写体の顔を含む顔領域の顔画像を前記表示部に拡大表示させる制御部と
を有することを特徴とするデジタルカメラ。
前記制御部は、前記顔検出部により前記プレビュー画像データから顔が複数検出され、前記顔選択手段により複数の顔が選択され、前記拡大表示指示受付手段により顔画像の拡大表示の指示を受けた場合、前記表示部を複数の領域に分割し、前記複数の顔画像を前記表示部に拡大表示させる請求項１に記載のデジタルカメラ。
さらに、撮影指示を受け付けるシャッター指示受付手段を設けるとともに、前記表示部にプレビュー画像若しくは前記顔画像を拡大表示した後に、シャッター指示受付手段により撮影指示を受け付けたときは、前記被写体の撮影画像を撮影画像データとして記録する記録部を備えた、請求項１および２のいずれか１項に記載のデジタルカメラ。
前記記録部は、前記顔選択手段により選択された顔の画像サイズ、または選択された顔の前記被写体の像における位置情報のいずれかの内、少なくとも一つを、前記撮影画像データとともに情報として記録する請求項３に記載のデジタルカメラ。
撮影部、表示部、顔検出部、顔選択手段、拡大表示指示受付手段、追跡処理部、および制御部を有するデジタルカメラで被写体の画像を撮影する撮影方法であって、
前記撮影部が、前記被写体の顔を含む被写体の像を光電的に撮影し、前記被写体の最終的な撮影画像となる前のプレビュー画像データを得、
前記表示部が、前記撮影部で得られたプレビュー画像データに基づいて前記被写体のプレビュー画像を表示し、
前記顔検出部が、前記撮影部で得られたプレビュー画像データから前記被写体の顔を検出し、
前記顔選択手段が、前記顔検出部により検出された顔を少なくとも１つ選択し、
前記拡大表示指示受付手段が、前記顔選択手段により選択された顔を拡大表示する指示を受け付け、
前記追跡処理部が、前記顔選択手段により選択された顔を含む顔領域を前記表示部内で追跡処理し、
前記制御部が、前記拡大表示指示受付手段により拡大表示の指示を受け付けたときに、前記顔選択手段により選択され前記追跡処理部により追跡処理された被写体の顔を含む顔領域の顔画像を前記表示部に拡大表示させる
ことを特徴とする撮影方法。
前記制御部は、前記顔検出部により前記プレビュー画像データから顔が複数検出され、前記顔選択手段により複数の顔が選択され、前記拡大表示指示受付手段により顔画像の拡大表示の指示を受けた場合、前記表示部を複数の領域に分割し、前記複数の顔画像を前記表示部に拡大表示させる請求項５に記載の撮影方法。
さらに、前記デジタルカメラは、シャッター指示受付手段および記録部を有し、
前記表示部にプレビュー画像若しくは前記顔画像を拡大表示した後に、前記シャッター指示受付手段により撮影指示を受け付けたときは、前記記録部が、前記被写体の撮影画像を撮影画像データとして記録する請求項５および６のいずれか１項に記載の撮影方法。
前記記録部は、前記顔選択手段により選択された顔の画像サイズ、または選択された顔の前記被写体の像における位置情報のいずれかの内、少なくとも一つを、前記撮影画像データとともに情報として記録する請求項７に記載の撮影方法。