JP4717840B2 - 撮像装置およびその制御方法 - Google Patents

Description

本発明は、顔の検出処理を行い、その結果を利用して撮影その他の処理を行う撮像装置と、そのような撮像装置の制御方法に関する。

顔検出機能を備えたデジタルカメラとして、事前の撮影により取得された被写体の画像データから人物の顔を検出し、顔にピントが合うように自動で焦点調節をし、顔が適切な明るさとなるように自動で露出調整をしてから撮影を行うカメラが知られている（特許文献１参照）。また、エリアセンサにより測距を行うときに、人物形状とのパターンマッチングにより人物を検出し、人物が検出された領域を優先的に測距することで、人物へのピント合わせを行うデジタルカメラも提案されている（特許文献２参照）。このほか、人物が発する声を検出し、声が検出された方向を撮影して得た画像データから人物の顔を検出する方法も提案されている（特許文献３参照）。
特開２００６−１４５６２９号公報 特開２００１−３０４８５５号公報 特開２００１−０６７０９８号公報

画像処理による顔検出の精度は年々向上してはいるものの、画像に占める顔の割合が小さかったり、顔が横を向いていたりしたときの検出精度は、未だ十分とはいえない。画像処理による顔検出の精度を高めるためには、より高度で且つ複雑な画像処理を行う必要があるが、撮像装置の制御を目的とした顔検出は、撮像装置の消費電力を抑えつつ短時間で行う必要があるため、処理時間が長く消費電力も大きい複雑な画像処理を採用することは難しい。また、画像処理のみによる顔検出では、生身の人間と等身大の人物写真とを区別できないといった問題もある。

特許文献２が提案する方法は、画像処理のみによる顔検出の問題を解決しようとするものであるが、形状のみに基づいて判定を行うため、人物以外の物体を誤検出する可能性がある。特許文献３が提案する方法によれば、人物以外の物体や人物写真にカメラが向けられることはないが、この方法では、壁に隠れてカメラに移らない人物の声に反応して撮影制御が行われてしまう可能性がある。また、この方法は、人物が声を発することが前提であるため、無言の人物の撮影には利用できない。

顔の検出結果を利用して撮影制御を行う装置は、顔を正確に検出できて初めて有用といえるのであり、誤検出が生じると撮影者の期待通りの画像が得られないばかりか、顔検出機能を備えない装置にも劣る画像しか得られないときもある。本発明は、被写体に含まれる人物を確実に検出し、顔の検出結果を利用した制御機能を常に有効に働かせることを目的とする。

本発明の第１および第２の撮像装置は、被写体を表す画像データを生成する撮像手段と、顔検出処理の実行要否を示す設定値を記憶する設定手段と、撮像手段により生成された画像データを対象として顔検出処理を実行する顔検出手段と、顔検出手段が出力する検出結果に基づいて撮像装置の動作、例えば焦点、露出、フラッシュ発光動作などを制御する制御手段とを備え、さらに、被写体に含まれる真の人物を、その人物の状態に拘わらず且つ画像データを利用することなく検知する人検知手段を備えることを特徴とするものである。本発明の第１および第２の制御方法は、そのような構成の装置の制御方法である。

「被写体に含まれる真の人物を〜検知する人検知手段」は、被写体に含まれる人物であって、写真でも人形でもなく真の人間のみを検知する手段である。検知する対象は被写体に含まれる人物に限られ、撮影範囲外にいる人物や、撮影範囲内にいるが間に何らかの遮蔽物があり撮影できない人物は、検知の対象とならない。撮像装置の操作者も、自らを撮影する場合を除き、一般には検知の対象とならない。また、「人物の状態に拘わらず」とは、人物を検知するにあたり人物側からの働きかけを必要としないことを意味する。例えば人物との接触を必要とする接触センサや、人物が音声を発しないと検知できない音声センサは、除外される。人検知手段は、具体的には、赤外線センサを用いるものとすることが好ましい。但し、マイクロ波センサや超音波センサにより構成することも可能である。

第１の撮像装置および制御方法では、顔検出手段は、設定手段が記憶する設定値と人検知手段の出力を参照し、設定値が実行不要を示す値であるときは顔検出処理を実行せず、設定値が実行要を示す値であるときは、人検知手段の出力値が人物を検出したことを示す値であるときのみ顔検出処理を実行する。この装置及び制御方法によれば、顔検出機能がオンの状態になっていても、人検知手段により真の人間の存在が確認されなければ、顔検出処理は行われない。よって、例えば街の風景を撮影しようとしたところ等身大ポスターの顔が顔として検出されてしまい、自動焦点調節機能によりポスターにピントが合ってしまったといったことがなくなる。さらには、顔検出処理は真に検出が必要なときにしか実行されないため、顔検出処理による消費電力を低く抑えることができる。

一方、第２の撮像装置および制御方法では、顔検出手段が、設定手段が記憶する設定値と人検知手段の出力値を参照し、設定値が実行要を示す値であるときは顔検出処理を実行し、設定値が実行不要を示す値であるときは人検知手段の出力値が人物を検知したことを示す値であるときのみ顔検出処理を実行する。すなわち、顔検出機能がオフの状態でも、人検知手段により生身の人間の存在が確認されれば、顔検出処理が実行されるので、普段から顔検出機能をオフに設定しておくことで、撮像装置の消費電力を抑えることができる。

本発明の第３の撮像装置は、被写体を表す画像データを生成する撮像手段と、前記撮像手段により生成された画像データを対象として顔検出処理を実行する顔検出手段と、前記顔検出手段が出力する検出結果に基づいてフラッシュの発光動作を制御するフラッシュ制御手段とを備えた撮像装置であって、被写体に含まれる真の人物を、その人物の状態に拘わらず且つ画像データを利用することなく検知する人検知手段を備えることを特徴とするものである。本発明の第３の制御方法は、そのような構成の装置の制御方法である。

第３の撮像装置および制御方法では、フラッシュ制御手段は、顔検出手段が出力する検出結果と人検知手段の出力値を参照し、検出結果に顔の情報が含まれており且つ人検知手段の出力値が人物を検知したことを示す値であるときに、赤目軽減発光を伴うフラッシュ発光を行う。この装置及び制御方法によれば、フラッシュ機能がオンになっている場合、人検知手段により生身の人間の存在が確認されれば、自動的に赤目軽減発光を伴うフラッシュ発光が行われる。このため、人物の有無によって赤目軽減発光機能をオンまたはオフに切り替える必要はなく、撮影者は設定を切り替える煩わしさから解放される。

本発明の第４の撮像装置は、被写体を表す画像データを生成する撮像手段と、撮像手段により生成された画像データを対象として顔検出処理を実行する顔検出手段と、撮像手段により生成された画像データに顔検出手段により検出された顔を示す目印画像が合成された合成画像を生成する画像処理手段と、画像処理手段により生成された合成画像をモニタに出力する表示制御手段とを備えた撮像装置であって、さらに、被写体に含まれる真の人物を、その人物の状態に拘わらず且つ画像データを利用することなく検知する人検知手段を備えることを特徴とする。本発明の第４の制御方法は、そのような構成の装置の制御方法である。

第４の撮像装置および制御方法では、画像処理手段は、人検知手段の出力値を参照し、その出力値が人物を検知したことを示す値であるときと人物を検知できなかったことを示す値であるときとで、異なる目印画像が合成された合成画像を生成する。目印画像とは、例えば顔が検出された範囲を示す枠や、顔付近に配置される文字、図形などである。また、目印画像を異ならせるとは、例えば、目印画像の表示色や形状を異ならせることを意味する。

この装置および制御方法によれば、顔検出機能により等身大ポスターの人物の顔が検出されたときと、生身の人間の顔が検出されたときとで、表示される目印が異なるので、撮影者はモニタで顔の検出状況を確認しながら、撮影を行うことができる。顔検出状況を確認できれば、必要に応じて顔検出機能の設定を変更することもできる。よって、例えば風景の撮影を行うときに顔検出機能がオンに設定されていることに気づかず撮影を行ってしまい、意図せずしてポスターの顔にピントがあってしまったといったことがなくなる。撮像装置の操作者は、顔の検出状況をモニタで確認しながら思い通りの設定を行うことで、常に期待どおりの画像を得ることができる。

本発明の第５の撮像装置は、被写体を表す画像データを生成する撮像手段と、撮像手段により生成された画像データを対象として顔検出処理を実行する顔検出手段と、顔検出手段が出力する検出結果に基づいて撮像装置の動作を制御する制御手段と、撮影操作が行われたときに撮像手段により生成された画像データをメモリに記録する記録手段とを備え、さらに被写体が真の人物を含むものであるときに、その被写体を表す画像データを利用することなく、被写体に含まれる人物のみを人として検知する人検知手段を備えることを特徴とする。本発明の第５の制御方法は、そのような構成の装置の制御方法である。

第５の撮像装置および制御方法では、記録手段が、撮影操作が行われたときの人検知手段の出力値を、画像データに付随させてメモリに記録する。あるいは出力値に代えて出力値相当の情報（例えば人が「いる」「いない」という文字など）を記録する。この装置および制御方法によれば、撮影後にメモリに記録された画像を再生するときに、人検知手段による検出結果を利用した再生表示を行うことができる。

なお、本発明の第３、第４および第５の発明は、第１または第２の発明と組み合わせて実施することができる。

以下、本発明の実施形態として、顔検出機能を備えた一眼レフのデジタルカメラと、そのデジタルカメラの制御方法を示す。実施形態１は第１の装置と第３の装置の構成を兼ね備えた形態、実施形態２は第２の装置と第３の装置の構成を兼ね備えた形態、実施形態３は第４の装置と第５の装置の構成を兼ね備えた形態である。但し、本発明が提案する各装置は、それぞれ独立して実施可能であり、以下に説明する実施形態に限定されるものではない。

はじめに実施形態１、２および３に共通の構成および動作について説明する。図１Ａおよび図１Ｂは、デジタルカメラ１の外観を示す図である。図１Ａに示すように、デジタルカメラ１の前面には、撮像レンズのほかに、赤外線センサ２、外部エリアセンサ８その他ＡＦ補助光ランプなどが備えられている。赤外線センサ２は、人物が動く際に発生する赤外線を検出する。本実施形態では、赤外線センサ２として焦電センサを採用する。焦電センサは、図２に例示するように、マルチレンズ４１、光学フィルタ４２、焦電素子４３、電源および増幅回路により構成される。デジタルカメラ１の前方で発生した赤外線はマルチレンズにより集光され、光学フィルタを介して焦電素子に照射される。焦電素子は赤外線が照射されたことによる温度変化を検出し、電圧値として出力する。

また、デジタルカメラ１の上面には、シャッタレリーズボタン３、内蔵フラッシュ４、各種設定操作を行うためのモードダイヤル５、コマンドダイヤル６、フラッシュボタン７などの操作ボタンが備えられている。

シャッタレリーズボタン３は、２段階の押下により２種類の動作を指示できる構造を有する。例えば、自動露出調整機能（ＡＥ：Auto Exposure）、自動焦点調節機能（ＡＦ：Auto Focus）を利用した撮影では、デジタルカメラ１は、シャッタレリーズボタン３が軽く押下（半押しともいう）されたときに、露出調整、焦点合わせなどの撮影準備を行う。その状態で、シャッタレリーズボタン３が強く押下（全押しともいう）されると、デジタルカメラ１は露光を開始し、露光により得られた１画面分の画像データをメモリカードに記録する。

内蔵フラッシュ４は、脇にあるフラッシュポップアップボタン６を押すことにより、カメラ上部方向に開き、シャッタレリーズボタン３の２段階目の押下操作と連動して発光動作を行う。フラッシュの発光動作は、設定された撮影モードおよびフラッシュモードによって決まる。撮影モードとしては、撮影に係る全設定をカメラが自動で行うＡＵＴＯモード、撮影に係る全設定をユーザが手動で行うマニュアルモードのほか、プログラムオートモード、シャッタ優先オートモード、絞り優先オートモード、ブレ軽減モード、ナチュラルフォトモード、その他人物、風景、夜景など撮影シーンごとのモードが用意されている。撮影モードは、モードダイヤル５の操作により設定することができる。また、フラッシュモードとしては、周囲の明るさから発光の要否を判断して自動的に発光するオートフラッシュモード、周囲の明るさに拘わらず発光する強制発光モードなどが用意されている。フラッシュモードは、フラッシュボタン７を押下し、設定画面において設定する。

また、図１Ｂに示すように、デジタルカメラ１の背面には、液晶モニタ（ＬＣＤ：Liquid Crystal Display）９と、設定を行うときの選択操作に用いられる十字キー１１が備えられている。またデジタルカメラ１の右側面に備えられたスロットカバー１０は開閉可能であり、中にはメモリカード用スロットが備えられている。

続いて、図３を参照して、デジタルカメラ１の内部構成について、概要を説明する。この図に示すように、デジタルカメラ１は、レンズ１２、レンズ駆動部１６、絞り１３、絞り駆動部１７、ＣＣＤ１４およびタイミングジェネレータ（ＴＧ）１８からなる撮像系を備える。レンズ１２は、被写体にピントを合わせるためのフォーカスレンズ、ズーム機能を実現するためのズームレンズなど複数の機能別レンズにより構成される。レンズ駆動部１６はステッピングモータなど小型のモータで、ＣＣＤ１４から各機能別レンズのまでの距離が目的に適った距離となるように各機能別レンズの位置を調整する。絞り１３は複数の絞り羽根からなる。絞り駆動部１７は、ステッピングモータなど小型のモータで、絞りの開口サイズが目的に適ったサイズになるように絞り羽根の位置を調整する。ＣＣＤ１４は原色カラーフィルタを伴う５００〜１２００万画素のＣＣＤで、タイミングジェネレータ１８からの指示信号に応じて蓄積された電荷を放出する。タイミングジェネレータ１８は、ＣＣＤ１４に所望の時間のみ電荷が蓄積されるようにＣＣＤ１４に対して信号を送り、これによりシャッタ速度を調整する。

また、デジタルカメラ１は、ＣＣＤ１４の出力信号をデジタル信号に変換するＡ／Ｄ変換部１５と、Ａ／Ｄ変換部１５が出力した画像データをシステムバス３４を介して他の処理部に転送する画像入力制御部２３と、画像入力制御部２３から転送された画像データを一時記憶するＳＤＲＡＭ２２を備える。ＳＤＲＡＭ２２に記憶される画像データはＲＡＷデータである。

また、デジタルカメラ１は、フラッシュ４と、フラッシュ４の発光タイミングや発光量を制御するフラッシュ制御部１９と、レンズ駆動部１６にレンズの移動を指示して焦点合わせを行う焦点調節部２０と、絞り値とシャッタ速度を決定し、絞り駆動部１７とタイミングジェネレータ１８に指示信号を送出する露出調整部２１と、ＳＤＲＡＭ２２に記憶されている画像データを対象として顔の検出処理を実行し、顔の有無を示す値、さらに顔が有る場合には検出された顔に相当する領域を示す情報（以下、領域情報）を出力する顔検出処理部２４を備える。顔検出の方法としては公知のあらゆる方法を採用することができるが、撮影動作を遅延させない程度の時間で顔を検出できる手法を採用することが好ましい。

フラッシュ制御部１９、焦点調節部２０および露出調整部２１は、ＳＤＲＡＭ２２に記憶されている画像データのほか、顔検出処理部２４が実行した検出処理の結果を参照して処理を行うこともある。顔の検出結果を参照して露出調整を行う方法としては、例えば特開２００１−２１５４０４号公報、特開２００３−１０７５５５号公報などに開示されている方法を用いることができる。また、顔の検出結果を参照して焦点調節を行う方法としては、例えば特開２００６−１４５６２９号公報に開示されている方法を用いることができる。フラッシュ制御部１９、焦点調節部２０および露出調整部２１が、顔検出処理部２４から出力される検出結果を参照するか否かは、撮影モードその他の設定値によって決まる。

また、デジタルカメラ１は、レンズ１２が捉える情景（すなわち被写体）の中に存在する真の人物を検知する人検知部３５を備える。人検知部３５は、赤外線センサ２の出力をデジタル信号に変換し、人物の有無を示す情報として供給する。

また、デジタルカメラ１は、ＳＤＲＡＭ２２に記憶されている画像データに対して画像処理を施す画像処理部２５を備える。画像処理部２５は、画像を自然な色合い、明るさにするための色階調補正や明るさ補正、また画像データが赤目を含むものであるときに赤目を黒目に修正する処理など、画像の見栄えを良くするための各種仕上げ処理を行う。また画像処理部２５は、撮影により取得された画像に顔枠を合成する処理も行う。画像処理部２５により処理された処理済画像データは、再度ＳＤＲＡＭ２２に格納される。

また、デジタルカメラ１は、ＳＤＲＡＭ２２に記憶されている画像データの液晶モニタ９への出力を制御する表示制御部２６を備える。表示制御部２６は、ＳＤＲＡＭ２２に記憶されている画像データの画素数を、表示に適した大きさとなるように間引きしてから液晶モニタ９に出力する。

また、デジタルカメラ１は、ＳＤＲＡＭ２２に記憶されている画像データのメモリカード２９への書込み、およびメモリカード２９に記録されている画像データのＳＤＲＡＭ２２へのロードを制御する記録読出制御部２８を備える。記録読出制御部２８は、ユーザの設定に応じてＲＡＷデータをそのまま、もしくは圧縮符号化によりＪＰＥＧデータに変換してからメモリカード２９に記録する。ＪＰＥＧデータをロードするときは、その逆の変換を行ってからデータをＳＤＲＡＭ２２にロードする。

デジタルカメラ１は、この他、ＣＰＵ（Central Processor Unit）３１、操作／制御プログラムが格納されたＲＡＭ（Random Access Memory）３２、各種設定値が記憶されているＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory）３３からなる全体制御部３０を備える。ＥＥＰＲＯＭに設定される設定値としては、前述した撮影モードやフラッシュモードの設定値のほか、顔検出処理の実行要否を示す顔検出モードの設定値がある。顔検出モードは、ＯＮまたはＯＦＦのいずれかの値に設定される。撮影モードなどの値は、全体制御部３０がユーザが行う各種設定操作を検出し、設定された内容をＥＥＰＲＯＭ３３に記憶せしめることにより設定される。そして、ＣＰＵ３１は、ＲＡＭ３２に記憶されているプログラムに従い、ＥＥＰＲＯＭに記憶された設定値を参照し、その値に基づいて、前述したフラッシュ制御部１９、焦点調節部２０、露出調整部２１、画像入力制御部２３、顔検出処理部２４、画像処理部２５、表示制御部２６、記録読出制御部２９に対し、指示信号を送出する。

続いて、デジタルカメラ１の撮影動作について、実施形態ごとに説明する。

［実施形態１］
図４は、実施形態１におけるデジタルカメラ１の撮影動作を示すフローチャートである。以下、このフローチャートに示される動作を、図３に示したデジタルカメラ１の構成と関連付けて説明する。

電源が投入されデジタルカメラ１が撮影可能な状態になると、撮像部による撮像が開始され、取得された像がスルー画像として液晶モニタ９に表示される（Ｓ１０１）。詳細には、レンズ１２、ＣＣＤ１４、Ａ／Ｄ変換部１５、画像入力制御部２３を経てＳＤＲＡＭ２２に記憶された画像が、表示制御部２６により読み出され、液晶モニタ９に出力される。この状態は、全体制御部３０が何らかの操作を検出するまで続く。

全体制御部３０は、シャッタレリーズボタン２の半押し操作を検出すると（Ｓ１０２）、ＥＥＰＲＯＭ３３に記憶されている顔検出モードの設定値を参照する（Ｓ１０３）。参照した設定値が、顔検出モードがＯＮに設定されていることを示しているときは、全体制御部３０は、人検知部３５の出力を参照する（Ｓ１０４）。そして、人検知部３５の出力値が、人の存在を示しているときは、全体制御部３０は顔検出処理部２４に対し、顔検出処理を実行するよう指示する信号を送出する。この指示信号を受けて、顔検出処理部２４は、ＳＤＲＡＭ２２に記憶されている画像を対象として、顔検出処理を実行する（Ｓ１０５）。

顔の検出結果は、焦点調節部２０、露出調整部２１および画像処理部２５に供給される。焦点調節部２０は、顔の検出結果を利用して測距および焦点調節を行い、検出された顔にピントを合わせる（Ｓ１０６）。露出調整部２１も、顔の検出結果を利用して、顔周辺の明るさが最適な明るさになるように露出を調整する。焦点調節および露出の調整は、複数の顔が検出された場合には、画像中央に最も近い位置にある顔を対象として実行される。

画像処理部２５は、ＳＤＲＡＭ２２に記憶されている画像に対して色および階調の補正処理を施した後、顔の検出結果を利用して、顔枠が合成された画像を生成する（Ｓ１０７）。前述したとおり、顔検出処理部２４が出力する情報の中には顔の領域情報が含まれている。画像処理部２５は、この領域情報を参照して、顔の大きさと同等の大きさの矩形あるいは楕円からなる枠画像を生成し、生成した枠画像を、領域情報が示す領域に配置（合成）する。なお、複数の顔がある場合には、顔検出処理部２４から顔ごとの領域情報が出力される。この場合、画像処理部２５は、各顔用の枠画像を生成し、１つの画像の中に複数の顔枠を配置する。

この際、画像処理部２５は、焦点調節や露出調整において重視された顔に、他の顔と異なる色あるいは異なる形の顔枠を合成する。画像処理部２５により生成された合成画像は、一端ＳＤＲＡＭ２２に記憶され、表示制御部２６により読み出され、液晶モニタ９に出力される。これにより、液晶モニタ９には、顔枠付きの画像が表示されることとなる（Ｓ１０８）。焦点調節や露出調整において重視された顔については、他の顔と異なる色あるいは異なる形の顔枠が表示されるため、ユーザはどの顔にピントが合わせられたか、どの顔に合わせて露出調整が行われたか、モニタの表示を見て知ることができる。

ここで、ユーザは、十字キー１１の操作により、焦点を合わせたい顔を指定することもできる。図５Ａおよび図５Ｂは、ステップＳ１０８における液晶モニタ９の表示例と、十字キー１１が操作されたときの表示の変化を例示した図である。図５Ａに例示するように、３つの顔が検知された場合には、それぞれの顔に対し顔枠が合成され、中央に位置する顔には他の顔と異なる顔枠が付与される。この状態で、ユーザが十字キー１１の右端を押下すると、その操作を検出した全体制御部３０は（Ｓ１０９）、焦点調節部２０、露出調整部２１および画像処理部２５に、再処理を指示する。焦点調節部２０、露出調整部２１および画像処理部２５は、この指示を受け、十字キー操作により指定された右側の顔を対象として、再度ステップＳ１０６〜Ｓ１０８までの処理を実行する。この場合、液晶モニタ９には、図５Ｂに例示するように、右側の顔に他の顔と異なる顔枠が付与された合成画像が表示される。

全体制御部３０は、十字キーの操作の検出に続き、シャッタレリーズボタンの全押し操作の検出を行う（Ｓ１１０）。所定時間を過ぎてもシャッタレリーズボタンの全押し操作が検出されなかった場合には、ステップＳ１０１の状態に戻る。

全体制御部３０は、シャッタレリーズボタン２の全押し操作を検出すると（Ｓ１１０）、ＥＥＰＲＯＭ３３に記憶されているフラッシュモードの設定値を参照する（Ｓ１１１）。フラッシュモードがオートフラッシュ、強制発光など、フラッシュ発光を行うこと（フラッシュＯＮ）を示す値に設定されているときは、全体制御部３０は、フラッシュ制御部１９に対し赤目軽減発光を伴うフラッシュ発光を行うよう指示する。この指示を受けて、フラッシュ制御部１９は赤目軽減発光と、本発光時の発光量の制御を行う（Ｓ１１２）。

続いて、全体制御部３０は、フラッシュの発光（本発光）と撮影（画像の取得）とが同期して行われるように各部を制御する（Ｓ１１３、Ｓ１１４）。フラッシュ制御部１９は、全体制御部３０から指示されたタイミングで、ステップＳ１１２において決定された発光量でフラッシュを発光させる。また、画像入力制御部２３は、Ａ／Ｄ変換部１５から供給される画像データを、記録読出制御部２８に転送する。記録読出制御部２８はその画像データをメモリカード２９に記録する（Ｓ１１５）。以上により、撮影が完了する。

なお、ステップＳ１１１において参照したフラッシュモードの設定値が、フラッシュの発光を行わないことを示しているときは、ステップＳ１１２、Ｓ１１３の処理は行われず、ステップＳ１１４の撮影およびステップＳ１１５の画像記録処理のみが行われる。

また、ステップＳ１０３において参照した設定値が、顔検出モードがＯＦＦに設定されていることを示していれば、顔の検出処理は実行されない。顔検出モードがＯＮに設定されていても、ステップＳ１０４において参照した人検知部３５の出力値が、人がいないことを示しているときは、顔の検出処理は実行されない。この場合、焦点調節部２０は顔の検出結果を利用せずに、例えば、中央に位置するものを対象として、測距および焦点調節を行う（Ｓ１２１）。その後、全体制御部３０は、シャッタレリーズボタンの全押し操作の検出を行う（Ｓ１２２）。所定時間を過ぎてもシャッタレリーズボタンの全押し操作が検出されなかった場合には、ステップＳ１０１の状態に戻る。

なお、シャッタレリーズボタンが一気に押下された場合、すなわちステップＳ１０２において半押し操作が検出されることなく、ステップＳ１２２において全押し操作が検出された場合も、顔の検出処理は行われない。

顔の検出処理が行われなかった場合には、全体制御部３０は、ＥＥＰＲＯＭ３３に記憶されているフラッシュモードの設定値を参照し（Ｓ１２３）、フラッシュ制御部１９に対しフラッシュの発光量制御（Ｓ１２４）および本発光（Ｓ１２５）を行うよう指示する。顔の検出処理が行われなかった場合には、赤目軽減発光は行われない。

以上に説明したように、本実施形態では、顔検出モードがＯＮに設定されていても、赤外線センサ２により生身の人間の存在が確認されなければ、顔検出処理は実行されないので、生身の人間以外を対象とした顔検出処理が行われてしまうことがない。これにより、例えば、顔写真が掲載されたポスターを含む情景を１つの風景として撮影しようとしたところ、露出および焦点がポスターの顔に自動的に合わせられてしまい、意図したとりの仕上がりが得られない、といった問題の発生を防ぐことができる。また、生身の人間の存在が確認されない限り、顔検出処理部２４は処理を実行しないので、消費電力を低く抑えることができる。

また、本実施形態では、赤外線センサ２により生身の人間の存在が確認され、且つフラッシュの発光が必要と判断されたときには、自動的に赤目軽減発光が行われる。よって、ユーザは、赤目軽減発光を行うか否かの設定を手動で行う必要がなく、常に赤目の発生を予防することができる。

［実施形態２］
図６は、実施形態２におけるデジタルカメラ１の撮影動作を示すフローチャートである。以下、このフローチャートに示される動作を、図３に示したデジタルカメラ１の構成と関連付けて説明する。

電源が投入されデジタルカメラ１が撮影可能な状態になると、撮像部による撮像が開始され、取得された像がスルー画像として液晶モニタ９に表示される（Ｓ２０１）。全体制御部３０は、シャッタレリーズボタン２の半押し操作を検出すると（Ｓ２０２）、ＥＥＰＲＯＭ３３に記憶されている顔検出モードの設定値を参照する（Ｓ２０３）。

参照した設定値が、顔検出モードがＯＦＦに設定されていることを示しているときは、全体制御部３０は、人検知部３５の出力を参照する（Ｓ２０４）。そして、人検知部３５の出力値が、人の存在を示しているときのみ、顔検出処理部２４に対し、顔検出処理を実行するよう指示する信号を送出する。一方、参照した設定値が、顔検出モードがＯＮに設定されていることを示しているときは、全体制御部３０は、直ちに顔検出処理部２４に対し、顔検出処理を実行するよう指示する信号を送出する。この指示信号を受けて、顔検出処理部２４は、ＳＤＲＡＭ２２に記憶されている画像を対象として、顔検出処理を実行する（Ｓ２０５）。

図６に示される以降のステップＳ２０６〜Ｓ２１５およびステップＳ２２１〜Ｓ２２５は、実施形態１のステップＳ１０６〜Ｓ１１５およびステップＳ１２１〜Ｓ１２５と同じであるため、説明を省略する。

本実施形態では、顔検出モードがＯＦＦに設定されていても、赤外線センサ２により生身の人間の存在が確認されれば、顔検出処理が実行される。このため、設定し忘れを防止するために常時顔検出モードをＯＮにしておく必要はなく、普段顔検出モードをＯＦＦに設定しておくことで、消費電力を低く抑えることができる。また赤目軽減発光について、実施形態１と同様の利点を有する。

［実施形態３］
図７は、実施形態３におけるデジタルカメラ１の撮影動作を示すフローチャートである。以下、このフローチャートに示される動作を、図３に示したデジタルカメラ１の構成と関連付けて説明する。

電源が投入されデジタルカメラ１が撮影可能な状態になると、撮像部による撮像が開始され、取得された像がスルー画像として液晶モニタ９に表示される（Ｓ３０１）。全体制御部３０は、シャッタレリーズボタン２の半押し操作を検出すると（Ｓ３０２）、ＥＥＰＲＯＭ３３に記憶されている顔検出モードの設定値を参照する（Ｓ３０３）。参照した設定値が、顔検出モードがＯＮに設定されていることを示しているときは、全体制御部３０は、顔検出処理部２４に対し、顔検出処理を実行するよう指示する信号を送出する。顔検出処理部２４は、この指示信号を受けて、ＳＤＲＡＭ２２に記憶されている画像を対象として、顔検出処理を実行する（Ｓ３０４）。

顔の検出結果は、焦点調節部２０、露出調整部２１および画像処理部２５に供給される。焦点調節部２０は、顔の検出結果を利用して測距および焦点調節を行い、検出された顔にピントを合わせる（Ｓ３０５）。露出調整部２１も、顔の検出結果を利用して、顔周辺の明るさが最適な明るさになるように露出を調整する。焦点調節および露出の調整は、複数の顔が検出された場合には、画像中央に最も近い位置にある顔を対象として実行される。

続いて全体制御部３０は、人検知部３５の出力を参照する（Ｓ３０６）。そして、人検知部３５の出力値が人の存在を示しているときと示していないときとで、顔枠の色を異なる色に設定する（Ｓ３０７、Ｓ３０８）。図７の例は、人検知部３５が真の人間を検知したときは枠色を緑に、検知しなかったときには赤に設定しているが、他の色により区別してもよい。また色のみならず形状あるいは所定のマークにより区別できるようにしてもよい。例えば人検知部３５が真の人間を検知したときは顔枠を矩形に、検知しなかったときには楕円形にするといった形態も考えられる。また、人検知部３５が真の人間を検知したときは検出された顔の周辺に○印をつけ、検知しなかったときには検出された顔の周辺に×印をつける形態も考えられる。

画像処理部２５は、ＳＤＲＡＭ２２に記憶されている画像に対して色および階調の補正処理を施した後、顔の検出結果を利用して、ステップＳ３０７またはＳ３０８で設定された色の顔枠を配置した合成画像を生成する（Ｓ３０９）。ステップＳ３１０〜Ｓ３１６およびステップＳ３２１〜Ｓ３２５は、実施形態１のステップＳ１０８〜Ｓ１１４およびステップＳ１２１〜Ｓ１２５と同じである。但し、本実施形態では、ステップＳ３１７において画像をメモリに記録するときに、画像のみならず、人の検知結果を合わせて記録する。人の検知結果は、例えば画像ファイルのファイルヘッダに記録され、以降画像に付随する情報として取り扱われる。

本実施形態によれば、顔検出処理においてポスターに掲載された顔など生身の人物の顔以外の顔が検出されてしまった場合、ユーザは、液晶モニタに表示される目印画像（枠、マークなど）により誤検出を知ることができる。これにより、ユーザは、撮影前に設定を変更するなど、適切な処置をすることができ、意図に反する焦点調節あるいは露出調整が行われることを未然に防止することができる。

また、本実施形態では、画像とともに人検知結果がメモリに記録されるため、撮影後メモリに記録された画像を再生するときに、人検知手段による検出結果を利用した再生表示を行うことができる。例えば、撮影時に液晶モニタ９に表示した画像と同様の顔枠付き画像を、パソコンの画面に表示することができる。

［他の実施形態］
上記各実施形態は、赤外線センサにより人の存在を確認するものであるが、生身の人間とポスター画像などとを区別して検知できるセンサであれば異なるタイプのセンサを用いてもよい。また、上記各実施形態では赤外線センサ２はデジタルカメラ１の本体部分に備えられているが、デジタルカメラ１本体に対し外付けできるものとしてもよい。

本発明の撮像装置の一実施形態における外観を示す図（正面・上部） 本発明の撮像装置の一実施形態における外観を示す図（背面） 赤外線センサの一例を示す図 本発明の撮像装置の一実施形態における内部構成を示す図 本発明の撮像装置の一実施形態における動作フローを示す図 液晶モニタの表示例を示す図 液晶モニタの表示例を示す図 本発明の撮像装置の他の実施形態における動作フローを示す図 本発明の撮像装置のさらに他の実施形態における動作フローを示す図

符号の説明

１ デジタルカメラ、 ２ 赤外線センサ、 ３ シャッタレリーズボタン、
４ フラッシュ、 ５ モードダイヤル、 ６ コマンドダイヤル、
７ フラッシュボタン、 ８ 外部エリアセンサ、 ９ 液晶モニタ（ＬＣＤ）、
１０ スロットカバー、 １１ 十字キー、
４１ マルチレンズ、 ４２ 光学フィルタ、 ４３ 焦電素子。

Claims (10)

1. 被写体を表す画像データを生成する撮像手段と、顔検出処理の実行要否を示す設定値を記憶する設定手段と、前記撮像手段により生成された画像データを対象として顔検出処理を実行する顔検出手段と、前記顔検出手段が出力する検出結果に基づいて撮像装置の動作を制御する制御手段とを備えた撮像装置であって、
   前記被写体に含まれる真の人物を、該人物の状態に拘わらず且つ前記画像データを利用することなく検知する人検知手段を備え、
   前記顔検出手段が、前記設定手段が記憶する設定値および前記人検知手段の出力値を参照し、前記設定値が実行要を示す値であるときは顔検出処理を実行し、該設定値が実行不要を示す値であるときは前記人検知手段の出力値が人物を検知したことを示す値であるときのみ顔検出処理を実行することを特徴とする撮像装置。
2. 前記顔検出手段が出力する検出結果に基づいてフラッシュの発光動作を制御するフラッシュ制御手段を、さらに備え、
   前記フラッシュ制御手段が、前記顔検出手段が出力する検出結果および前記人検知手段の出力値を参照し、前記検出結果に顔の情報が含まれており且つ前記人検知手段の出力値が人物を検知したことを示す値であるときに、前記フラッシュに赤目軽減発光を伴う発光動作を行わせることを特徴とする請求項１記載の撮像装置。
3. 前記撮像手段により生成された画像データに前記顔検出手段により検出された顔を示す目印画像が付与された合成画像を生成する画像処理手段と、該画像処理手段により生成された合成画像をモニタに出力する表示制御手段とを、さらに備え、
   前記画像処理手段が、前記人検知手段の出力値を参照し、該出力値が人物を検知したことを示す値であるときと人物を検知できなかったことを示す値であるときとで、異なる目印画像が付与された合成画像を生成することを特徴とする請求項１または２記載の撮像装置。
4. 撮影操作が行われたときに前記撮像手段により生成された画像データをメモリに記録する記録手段を、さらに備え、
   前記記録手段が、前記撮影操作が行われたときの前記人検知手段の出力値を、前記画像データに付随させてメモリに記録することを特徴とする請求項１から３のいずれか１項記載の撮像装置。
5. 前記人検知手段が、赤外線センサを用いるものであることを特徴とする請求項１から４のいずれか１項記載の撮像装置。
6. 被写体を表す画像データを生成し、生成された画像データを対象として顔検出処理を実行し、前記顔検出処理の結果に基づいて撮像装置の動作を制御する撮像装置の制御方法であって、
   顔検出処理の実行要否を示す設定値をメモリに記憶せしめ、
   前記被写体に含まれる真の人物を、該人物の状態に拘わらず且つ前記画像データを利用することなく検知し得るセンサを用いて、前記被写体に含まれる人物を検知し、
   前記メモリに記憶された設定値が実行要を示す値であるときは前記顔検出処理を実行し、該設定値が実行不要を示す値であるときは、前記センサにより被写体に含まれる人物を検知したときのみ顔検出処理を実行することを特徴とする撮像装置の制御方法。
7. 前記顔検出処理の検出結果に顔の情報が含まれており且つ前記センサにより被写体に含まれる人物を検知したときに、前記フラッシュに赤目軽減発光を伴う発光動作を行わせることを特徴とする請求項６記載の撮像装置の制御方法。
8. 前記画像データに検出された顔を示す目印画像が付与された合成画像であって、人物を検知できたときと人物を検知できなかったときとで異なる目印画像が付与された合成画像を生成し、
   該合成画像をモニタに出力することを特徴とする請求項６または７記載の撮像装置の制御方法。
9. 検知した内容を、前記画像データに付随させてメモリに記録することを特徴とする請求項６から８のいずれか１項記載の撮像装置の制御方法。
10. 赤外線センサを用いて、前記被写体に含まれる人物を検知することを特徴とする請求項６から９のいずれか１項記載の撮像装置の制御方法。

Images