JP2008053855A - 撮像装置 - Google Patents

Abstract

【課題】面倒な位置合わせを必要としなくても簡単に撮影が行えるフォトデコレーション機能を搭載した撮像装置を提供する。
【解決手段】撮像装置であるカメラは、被写体を撮像する撮像手段と、撮像手段の出力に係る画像データを記録する画像記録手段と、撮像手段の出力から、人物の顔に相当する顔画像を検出する顔画像検出手段と、撮像手段により撮像された画像にフォトデコレーション画像を重ね合わせて表示するフォトデコレーション表示手段とを有し、フォトデコレーション表示手段は、撮像手段により撮像された画像における顔画像検出手段により検出された顔画像上にフォトデコレーション画像が重なるように、その撮像された画像にそのフォトデコレーション画像を重ね合わせて表示する。
【選択図】図１

Description

本発明は、撮像装置に関する。

カメラ市場においては、フォトデコレーション機能を搭載したカメラが、種々販売されている。フォトデコレーション機能とは、静止画再生時に、予めカメラ内のメモリに記憶されているフォトフレームやタイトルを合成編集することができる機能である。また、スルー画表示（被写体をリアルタイムに撮像してリアルタイムに表示する手法）と合わせて、予めカメラ内のメモリに記憶されているフォトフレームやタイトルを同時に表示し、撮影できるようにしたカメラもある。例えば、特許文献１には、撮影時に自由にデザインした文字、図形等のフレーム等の画面にファインダー画像を重ね合わせて表示し、この表示画面を見ながら撮影を行うことのできるデジタルカメラ装置が提案されている。

一方、特許文献２には、撮影被写体である人物及び動物の顔のように撮影者が希望する表情等をした画像を容易に得、あるいは撮影者が希望するような被写体の特定部分を画像として容易に撮影することができるデジタルカメラが提案されている。
特開２０００−１１５６３８号公報 特開２００５−１０２１７５号公報

ところで、フォトデコレーション機能として、上述のように、静止画再生時に、予めカメラ内のメモリに記憶されているフォトフレームやタイトルを合成編集することができる機能を搭載したカメラにおいては、フォトフレームやタイトルと主被写体との位置関係を調整する必要があり、非常に面倒な編集作業を伴う。

また、フォトデコレーション機能として、上述のように、スルー画表示と合わせて、予めカメラ内のメモリに記憶されているフォトフレームやタイトルを同時に表示し、撮影できるようにした機能を搭載したカメラにおいては、フォトフレームやタイトルが常に固定されているため、前述と同様に、フォトフレームやタイトルと主被写体との位置関係を撮影時に調整しなければならず、面倒な撮影になってしまう。

本発明は、上記実情に鑑み、面倒な位置合わせを必要としなくても簡単に撮影が行えるフォトデコレーション機能を搭載した撮像装置を提供することを目的とする。

上記目的を達成するため、本発明の第１の態様に係る撮像装置は、被写体を撮像する撮像手段と、前記撮像手段の出力に係る画像データを記録する画像記録手段と、前記撮像手段の出力から、人物の顔に相当する顔画像を検出する顔画像検出手段と、前記撮像手段により撮像された画像にフォトデコレーション画像を重ね合わせて表示するフォトデコレーション表示手段と、を有し、前記フォトデコレーション表示手段は、前記撮像手段により撮像された画像における前記顔画像検出手段により検出された顔画像上に前記フォトデコレーション画像が重なるように、前記撮像手段により撮像された画像に前記フォトデコレーション画像を重ね合わせて表示する、ことを特徴とする。

本発明の第２の態様に係る撮像装置は、被写体を撮像する撮像手段と、前記撮像手段の出力に係る画像データを記録する画像記録手段と、前記撮像手段の出力から、人物の顔に相当する顔画像を検出する顔画像検出手段と、前記撮像手段により撮像された画像にフォトデコレーション画像を重ね合わせて表示するフォトデコレーション表示手段と、を有し、前記フォトデコレーション表示手段は、前記撮像手段により撮像された画像における前記顔画像検出手段により検出された顔画像上に前記フォトデコレーション画像が重ならないように、前記撮像手段により撮像された画像に前記フォトデコレーション画像を重ね合わせて表示する、ことを特徴とする。

本発明の第３の態様に係る撮像装置は、上記第１又は２の態様において、前記フォトデコレーション表示手段は、前記顔画像検出手段により検出された顔画像の位置を基に、前記フォトデコレーション画像の重ね合わせ位置を決定する、ことを特徴とする。

本発明の第４の態様に係る撮像装置は、上記第１又は２の態様において、前記フォトデコレーション表示手段は、前記顔画像検出手段により検出された顔画像の大きさを基に、重ね合わせて表示する前記フォトデコレーション画像の大きさを決定する、ことを特徴とする。

本発明の第５の態様に係る撮像装置は、上記第１又は２の態様において、前記フォトデコレーション表示手段による表示は、撮影待機中に行われる、ことを特徴とする。
本発明の第６の態様に係る撮像装置は、上記第１又は２の態様において、前記フォトデコレーション表示手段による表示は、撮影準備中に行われる、ことを特徴とする。

本発明の第７の態様に係る撮像装置は、上記第１又は２の態様において、前記フォトデコレーション画像が重ね合わされる、前記撮像手段により撮像された画像は、動画のフレーム画像である、ことを特徴とする。

本発明の第８の態様に係る撮像装置は、上記第１又は２の態様において、前記フォトデコレーション表示手段は、前記撮像手段により撮像された画像における前記顔画像検出手段により検出された顔画像の位置の移動に応じて、前記フォトデコレーション画像の重ね合わせ位置を移動させる、ことを特徴とする。

また、本発明は、上記の各態様に係る撮像装置のほか、撮像装置の表示方法やプログラムとして構成することもできる。

本発明によれば、被写体に含まれる顔を検出して、顔の位置、大きさを導き出すことによって、面倒な位置合わせを必要としなくても簡単に撮影が行えるフォトデコレーション機能を搭載した撮像装置を提供することができる。

以下、図面を参照しながら本発明の実施の形態を説明する。
図１は、本発明の一実施の形態に係る撮像装置であるカメラの全体ブロック図である。
同図に示したように、本実施の形態に係るカメラには、レンズ部１、挿脱式のＮＤフィルター２、シャッター３、撮像素子４、アナログフロントエンド（以下「ＡＦＥ」と略す）部５、画像処理部６、表示制御部７によって画像表示を行う表示部８、及び、記録再生制御部９とメディア１０が設けられている。

レンズ部１は、入射した被写体１９の像を撮像素子４に結像する。シャッター３は、レンズ部１（及び、必要に応じてＮＤフィルター２）を通過した光が撮像素子４へ入射するのを選択的に遮り、露出量を調整する。

撮像素子４は、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）やＣＣＤ（Charge Coupled Devices）からなり、結像された被写体像を画像信号に変換する。ＡＦＥ部５は、撮像素子４から出力されるアナログの電気信号をデジタルの画像データに変換して出力する。

画像処理部６は、ＡＦＥ部５から出力された画像データについて、ガンマ（階調補正）や色や階調やシャープネスを補正処理する。また、画像処理部６は、画像処理部内のＪＰＥＧ（Joint Photographic Coding Experts Group）コア部（図示せず）などの静止画像用の圧縮伸長部を有し、撮影時にはこの圧縮伸長部で画像データを圧縮する。

記録再生制御部９は、撮影時には画像処理部６により圧縮処理された画像データを記録媒体である記録メディア１０に記録する。記録メディア１０は、画像を保存記録する記録媒体である。また、記録再生制御部９は再生時には記録メディア１０から画像データを読み出す。

表示部８は、例えば液晶や有機ＥＬ等から構成され、撮影時にはモニタ画像を表示し、再生時には伸張処理された記録画像を表示する。前述のように、撮影時には、ユーザーは表示部８に表示された画像を見ながら、構図やタイミングを決めて撮影操作を行う。撮像素子４からの画像信号をほぼリアルタイムで表示（いわゆるスルー画表示）できるように、ＡＦＥ部５によって、表示サイズに制限された画像データを、画像処理部６で高速に処理して、表示制御部７を介して表示部８に表示される。再生時には、記録メディア１０に記録された圧縮データが記録再生制御部９により読み出され、画像処理部６によって再生され、表示部８に表示される。

また、このカメラには、ＭＰＵ（マイクロコントローラ）１１、ＲＯＭ１２、操作スイッチ群１３が設けられる。ＭＰＵ１１は、プログラムに従って撮影や再生等カメラ全体の制御を司る制御部である。ＲＯＭ１２は、不揮発性でかつ記録可能なメモリで例えばフラッシュＲＯＭからなり、カメラの制御処理を行う制御用のプログラム、後述のフォトデコレーション画像（写真装飾用画像）、及び、後述の顔データベース等が格納される。操作スイッチ群１３は、撮影者の指示をＭＰＵ１１に通知する。具体的には、後述する図２の外観背面図のダイヤルや釦操作に応じてオン、オフするスイッチである。

画像処理部６は、ＲＯＭ１２に記憶されたフォトデコレーション画像を読み出して、ＡＦＥ部５から出力された画像データと合成する（重ね合わせる）機能も有する。合成された画像は、表示制御部７を介して表示部８に表示される。さらに、撮影時には合成された画像が、画像処理部６により圧縮処理され、記録メディア１０に記録される。

また、このカメラには、ＡＦ制御部１４、ＮＤフィルター制御部１５、シャッター制御部１６、ストロボ部１７、および顔検出部１８が設けられる。
ＡＦ制御部１４は、レンズ部１のピント位置を制御する。ピント位置の制御は、画像処理部６が撮像素子４から出力される画像データのコントラストを検出してＭＰＵ１１に出力し、これに従ってＭＰＵ１１がＡＦ制御部１４に制御信号を出力することにより実行される。ＭＰＵ１１は画像データのコントラスト信号が最大になるようにＡＦ制御部１４に制御信号を出力する。

露出制御時には、シャッター３の開放時間の切り替え以外にも、レンズ部１と撮像素子４との間にＮＤフィルター２を介在させるようＮＤフィルター制御部１５が制御する場合もある。

シャッター制御部１６は、前述のように、シャッター３の開閉を制御する。シャッター制御部１６は、明るいときには短い時間でシャッター３を閉じ、暗いところでは、長い時間でシャッター３を閉じるような制御をして、撮像素子４への入射光量を所定量に保つ露出制御を行う。

ストロボ部１７は、露出を補助する補助光照射手段である。被写体が相対的、または絶対的に暗い場合には、強い光を投射するストロボ部１７が補助光として利用される。これは、白色ＬＥＤやＸｅ放電発光管のような光源を想定しており、流す電流量で光量が制御できるようになっている。

顔検出部１８は、被写界の中に人間の顔が存在するかどうかを検出する。顔検出部１８は、画像処理部６から出力される画像データに基づいて、顔特有の特徴点を抽出することによって顔を検出する。そして、顔検出部１８はその画面内での顔の大きさや位置をＭＰＵ１１に出力する。

図２は、本実施の形態に係るカメラの外観背面図である。
同図において、２０は、ＴＦＴカラー液晶であって図１に示した表示部８に含まれる。
２１は、レリーズボタンであって、半押しすると撮影準備指示を行うことが可能になり、全押しすると撮影記録指示を行うことが可能になっている。２２は、ズームボタンであって、ズーム又はテレの指示が可能になっている。

２３は、回転式のモード設定ダイアルであって、静止画撮影モード、再生モード、手ぶれ軽減撮影モード、動画撮影モード等の各種モードの選択が可能になっている。
２４は、十字タイプのキースイッチ（以下「十字キー」という）であって、露出補正の設定、フラッシュの設定、セルフ撮影モードの設定、マクロ撮影モードの設定が可能になっている。また、メニュー画面表示時に、カーソルの移動や、メニュー階層の切り換えに使用される。

２５は、露出補正設定ポジションを示す指標であって、この指標方向にある十字キー２４の三角マークを押圧すると露出補正が可能となる。２６は、フラッシュ設定ポジションを示す指標であって、この指標方向にある十字キー２４の三角マークを押圧するとフラッシュ発光モードを変更することが可能となる。２７は、セルフ撮影モードの設定ポジションを示す指標であって、この指標方向にある十字キー２４の三角マークを押圧するとセルフ撮影モードに変更することが可能となる。２８は、マクロ撮影モードの設定ポジションを示す指標であって、この指標方向にある十字キー２４の三角マークを押圧するとマクロ撮影モードに変更することが可能となる。

２９は、ＭＥＮＵキースイッチであって、これを押圧するとＴＦＴ２０にメニュー画面が表示される。３０は、メニュー画面表示時に、メニュー項目を決定する場合のＯＫキー（確定キーともいう）や、ファンクション設定モードに遷移するための遷移キーとして使用されるキースイッチである。

次に、本実施の形態に係るカメラにおいて、フォトデコレーション機能を用いて撮影を行う際の操作、及び、画面表示例を説明する。
図３は、モード設定ダイヤル２３が撮影モードに設定されている状態でＭＥＮＵキースイッチ２９が押下された時に、ＴＦＴカラー液晶２０に表示される撮影メニュー画面の一例である。

同図に示したように、撮影メニュー画面には、選択可能な項目として、「測光」、「ドライブ」、「ＡＦ方式」、「フォトデコ撮影」の４項目が表示され、選択、確定した項目に係る設定が可能になっている。また、撮影メニュー画面では、同図に示したように、「測光」の項目位置が、デフォルトのカーソル３１の位置となっている。

この撮影メニュー画面において、「測光」を選択、確定すると、撮影する画像の明るさを決めるための設定が可能である。また、「ドライブ」を選択、確定すると、１枚撮影か、連続撮影かの設定が可能である。また、「ＡＦ方式」を選択、確定すると、被写体にピントを合わせる方式の設定が可能である。また、「フォトデコ撮影」を選択、確定すると、フォトデコレーション機能を用いて撮影を行う際の設定が可能である。

図４は、図３に示した撮影メニュー画面において「フォトデコ撮影」が選択、確定された時に、ＴＦＴカラー液晶２０に表示されるフォトデコ撮影メニュー画面の一例である。
図４に示したように、フォトデコ撮影メニュー画面には、選択可能な項目として、「フォトデコ１」、「フォトデコ２」の２項目が表示され、フォトデコレーションの表示タイプを選択、確定することが可能になっている。また、フォトデコ撮影メニュー画面では、同図に示したように、「フォトデコ１」の項目位置が、デフォルトのカーソル３２の位置となっている。

このフォトデコ撮影メニュー画面において、「フォトデコ１」を選択、確定すると、ＴＦＴカラー液晶２０に表示されるスルー画中に存在する人物の顔部分にフォトデコレーション画像が重なるように、そのスルー画にそのフォトデコレーション画像を重ね合わせて表示すること、或いは、撮影した画像中に存在する人物の顔部分にフォトデコレーション画像が重なるように、その撮影した画像にそのフォトデコレーション画像を重ね合わせて記録することが可能である。

また、「フォトデコ２」を選択、確定すると、ＴＦＴカラー液晶２０に表示されるスルー画中に存在する人物の顔部分にフォトデコレーション画像が重ならないように、且つ、その顔部分の周りにそのフォトデコレーション画像が重なるように、そのスルー画にそのフォトデコレーション画像を重ね合わせて表示すること、或いは、撮影した画像中に存在する人物の顔部分にフォトデコレーション画像が重ならないように、且つ、その顔部分の周りにそのフォトデコレーション画像が重なるように、その撮影した画像にそのフォトデコレーション画像を重ね合わせて記録することが可能である。

図５は、図４に示したフォトデコ撮影メニュー画面において「フォトデコ１」が選択、確定されている時に、ＴＦＴカラー液晶２０に表示されるスルー画の一例である。
この場合には、同図に示したように、スルー画中に存在する人物の顔部分にフォトデコレーション画像３３が重なるように、スルー画にフォトデコレーション画像３３が重ね合わされて表示される。

なお、同図において、３４は、カメラのバッテリーマークであり、ここでは、バッテリー満タン状態を示している。３５は、「フォトデコ１」が選択、確定されていることを示すモード表示である。３６は、画質モード表示である。３７は、コマ表示である。

図６は、図５に示したスルー画中に存在する人物の顔部分が移動したときに、その移動に応じてフォトデコレーション画像も移動したときのスルー画の一例を示す図である。
図６に示したように、「フォトデコ１」が選択、確定されているときのスルー画表示では、スルー画中に存在する人物の顔部分の移動に応じて、その顔部分にフォトデコレーション画像３３が重なるように、フォトデコレーション画像３３も移動することとなる。

図７は、図４に示したフォトデコ撮影メニュー画面において「フォトデコ２」が選択、確定されている時に、ＴＦＴカラー液晶２０に表示されるスルー画の一例である。
この場合には、同図に示したように、スルー画中に存在する人物の顔部分にフォトデコレーション画像３８が重ならないように、且つ、その顔部分の周りにフォトデコレーション画像３８が重なるように、スルー画にフォトデコレーション画像３８が重ね合わされて表示される。

なお、同図の例は、スルー画に４つのフォトデコレーション画像３８を重ね合わせて表示した例である。また、同図において、３９は、「フォトデコ２」が選択、確定されていることを示すモード表示である。

図８は、図７に示したスルー画中に存在する人物の顔部分が移動したときに、その移動に応じてフォトデコレーション画像も移動したときのスルー画の一例を示す図である。
図８に示したように、「フォトデコ２」が選択、確定されているときのスルー画表示では、スルー画中に存在する人物の顔部分の移動に応じて、その顔部分にフォトデコレーション画像３８が重ならないように、且つ、その顔部分の周りにフォトデコレーション画像３８が重なるように、フォトデコレーション画像３８も移動することとなる。

次に、上述の図３乃至８を用いて説明した動作を含む、本実施の形態に係るカメラの動作を、フローチャートを用いて詳細に説明する。
図９は、本実施の形態に係るカメラの動作を示すフローチャートである。

同図に示したように、カメラの電源がオンされると、カメラのＭＰＵ１１がＲＯＭ１２に記録されているプログラムの処理を開始し、本フローがスタートする。
まず、Ｓ１では、カメラのモード設定ダイアル２３が、撮影モードに設定されているのか、再生モードに設定されているのかを判定する。ここで、再生モードに設定されている場合にはＳ２へ進み、撮影モードに設定されている場合にはＳ３へ進む。

Ｓ２では、不図示の再生処理ルーチンへジャンプし、所定の再生処理が行われる。
Ｓ３では、レンズ部２を所定の初期位置に繰り出した後、ピント調節用のレンズを初期位置に繰り出す、等といった鏡枠イニシャル動作を行う。

Ｓ４では、ＴＦＴカラー液晶２０を表示オンにする。
Ｓ５では、撮像素子４等を含む撮像系が作動を開始し、ＴＦＴカラー液晶２０にはスルー画が表示される。

Ｓ６では、操作入力が発生したか否かを判定する。なお、操作入力が発生したか否かの判定は、操作スイッチ群１３による通知を基に行われる。ここで、その判定結果がＹＥＳの場合にはＳ９へ進み、ＮＯの場合にはＳ７へ進む。

Ｓ７では、操作入力が無い状態で所定時間経過したか否かを判定する。ここで、その判定結果がＹＥＳの場合にはＳ８へ進み、ＮＯの場合にはＳ６へ戻る。
Ｓ８では、スリープモード（省エネルギーモード）へ移行する。

Ｓ９では、操作入力は、ＭＥＮＵキースイッチ２９による操作入力か否かを判定する。ここで、その判定結果がＹＥＳの場合にはＳ１１へ進み、ＮＯの場合にはＳ１０へ進む。
Ｓ１０では、不図示の他の操作入力処理（ＭＥＮＵキースイッチ２９による操作入力以外の操作入力に応じた処理）へ移行し、所定の処理が行われる。

Ｓ１１では、撮影メニュー画面（図３参照）をＴＦＴカラー液晶２０に表示する。カーソル位置の初期状態は、上述のとおり「測光」とする。
Ｓ１２では、撮影メニュー画面中の何れの項目が選択、確定されたかを判定するために、後述のＯＫキー判断処理のサブルーチンをコールする。この処理で撮影メニュー画面中の何れかの項目が選択、確定されると、Ｓ１３へ進む。

Ｓ１３では、「フォトデコ撮影」が選択、確定されたか否かを判定する。ここで、その判定結果がＹＥＳの場合にはＳ１５へ進み、ＮＯの場合にはＳ１４へ進む。
Ｓ１４では、不図示の他の撮影モード処理（「測光」、「ドライブ」、又は「ＡＦ方式」に応じた処理）へ移行し、所定の処理が行われる。

Ｓ１５では、フォトデコ撮影メニュー（図４参照）をＴＦＴカラー液晶２０に表示する。カーソル位置の初期状態は、上述のとおり「フォトデコ１」とする。
Ｓ１６では、フォトデコ撮影メニュー画面中の何れの項目が選択、確定されたかを判定するために、後述のＯＫキー判断処理のサブルーチンをコールする。この処理でフォトデコ撮影メニュー画面中の何れかの項目が選択、確定されると、Ｓ１７へ進む。

Ｓ１７では、後述の顔検出サブルーチンをコールする。
Ｓ１８では、Ｓ１７で検出された顔の位置を基に、Ｓ１６で選択、確定された項目（「フォトデコ１」又は「フォトデコ２」）に応じて、所定のフォトデコレーション画像をスルー画に重ね合わせて表示する（図５乃至図８参照）、といった処理を行う後述のフォトデコ画像移動処理のサブルーチンをコールする。

Ｓ１９では、レリーズボタン２１が全押しされたか否かに応じて、撮影シーケンスに移行するか否かを判定する。ここで、その判定結果がＹＥＳの場合にはＳ２０へ進み、ＮＯの場合にはＳ１８へ戻る。

なお、Ｓ１９がＮＯの場合（レリーズボタン２１が押下されていない状態である撮影待機中、或いは、レリーズボタンが半押しされた状態である撮影準備中）には、続くＳ１７で検出される顔の位置の移動に応じて、続くＳ１８で重ね合わされて表示されるフォトデコレーション画像の位置も移動することとなる。

また、Ｓ１７乃至Ｓ１９がＮＯの処理が繰り返されている間、ＴＦＴカラー液晶２０にはフォトデコレーション画像が重ね合わされたスルー画が表示されることとなるので、フォトデコレーション画像が重ね合わされる画像は、動画のフレーム画像ともいうことができる。

Ｓ２０では、不図示の撮影シーケンスに移行する。この撮影シーケンスでは、ホワイトバランス調整、ピント調整、露出制御等が行われ、メディア９に撮影された画像が記録される。この時、重ね合わされて表示されていたフォトデコレーション画像も同時に記録される。

なお、記録される画像は、設定されている撮影モードが静止画の撮影モード（静止画撮影モード）である場合には、フォトデコレーション画像が重ね合わされた静止画像となり、動画の撮影モード（動画撮影モード）である場合には、フォトデコレーション画像が重ね合わされた動画像となる。

図１０は、上述のＳ１２又はＳ１６のＯＫキー判断の処理内容を示すフローチャートである。
同図に示したように、このサブルーチン処理がスタートすると、まず、Ｓ３１では、ＯＫキー３０が押下されたか否かを判定する。ここで、その判定結果がＹＥＳの場合にはＳ３２へ進み、ＮＯの場合にはＳ３３へ進む。

Ｓ３２では、リターンし、処理が戻る。
Ｓ３３では、十字キー２４が押下されたか否かを判定する。ここで、その判定結果がＹＥＳの場合にはＳ３４へ進み、ＮＯの場合にはＳ３５へ進む。

Ｓ３４では、十字キー２４が押下された方向によって、撮影メニュー画面上のカーソルを上下方向に移動する。
Ｓ３５では、ＭＥＮＵキースイッチ２９が押下されたか否かを判定する。ここで、その判定結果がＹＥＳの場合にはカーソル移動をキャンセルしてＳ３６へ進み、ＮＯの場合にはＳ３７へ進む。

Ｓ３６では、撮影待機状態へ移行する。すなわち、処理がＳ６（図９参照）へ戻る。
Ｓ３７では、操作入力が無い状態で所定時間経過したか否かを判定する。ここで、その判定結果がＹＥＳの場合にはＳ３８へ進み、ＮＯの場合にはＳ３１へ戻る。

Ｓ３８では、スリープモード（省エネルギーモード）へ移行する。
図１１は、上述のＳ１７の顔検出の処理内容を示すフローチャートである。
同図に示したように、このサブルーチン処理がスタートすると、まず、Ｓ４１乃至４３では、撮像された画像から、人物の顔を構成するパーツである目、鼻、口を検出する。

Ｓ４４では、Ｓ４１乃至４３で検出された目、鼻、口と、ＲＯＭ１２に記憶された顔データベースとを照合して、相関度合いを計算し、相関度が高い場合は撮像された画像に顔が含まれるとし、相関度が低い場合は撮像された画像に顔が含まれないとする。なお、顔データベースは、一般的な目、鼻、口の形状及び、互いの位置関係をデータベースとして記憶したものである。

Ｓ４５では、Ｓ４４でのデータ照合の結果、顔を検出したか否か（撮像された画像に顔が含まれるとしたか否か）を判定する。ここで、その判定結果がＹＥＳの場合にはＳ４６へ、ＮＯの場合にはＳ４８へ進む。

Ｓ４６では、検出された顔の中心座標を検出する。
Ｓ４７では、Ｓ４６で検出された顔の中心座標を基に顔の大きさを検出する。なお、顔の大きさは、Ｓ４１乃至４３で検出された目、鼻、口を基に検出することもできるし、その他の手法により検出することもできる。

Ｓ４８では、リターンし、処理が戻る。
ここで、顔検出の具体的な手法の一例を説明しておく。
図１２は、人物が被写体である画像データに係る画像の一例を示す図である。この画像において、まず、被写体人物の顔部を判定する為には、図１３に示すように、眉部や眼部による横長の影と、鼻部による縦長の影とによって構成されるＴ字型の影を、図１２に示した画像の画像データから抽出する。ここで、顔部の画像データは、図１２に示した画像の画像データから、例えば輝度情報のみを抽出して処理することで得られる。このようにして被写体人物の顔部を検出し、更に色情報より肌色に近い色を有する部分のみを抽出することで、被写体人物の顔部の詳細な範囲（図１３に示す斜線部参照）を検出することができる。また、検出した顔部において、その中央付近を上下方向に走るコントラストの強い部分を鼻部であると判定して検出することができる。さらに、その鼻部の左右両脇部分における上部付近に存在する白色の部分は、白目部であると判定することができる。また、この白目部であると判定した白色の部分に囲まれた黒色の部分を黒目部であると判定することができる。そして、この白目部と黒目部とから構成される部分を眼部であると判定して検出することができる。口部についても、同様にして検出することができる。

図１４は、上述のＳ１８のフォトデコ画像移動の処理内容を示すフローチャートである。
同図に示したように、このサブルーチン処理がスタートすると、まず、Ｓ５１では、「フォトデコ１」又は「フォトデコ２」の何れが選択、確定されているかを判定する。ここで、その判定結果が「フォトデコ１」である場合にはＳ５２へ進み、「フォトデコ２」である場合にはＳ５３へ進む。

Ｓ５２では、Ｓ４７（図１１参照）で検出された顔の大きさを基に、「フォトデコ１」用のフォトデコレーション画像（フォトデコ画像）をリサイズする。
Ｓ５３では、撮像された画像における、Ｓ４６（図１１参照）で検出された顔の中心座標に、「フォトデコ１」用のフォトデコレーション画像（フォトデコ画像）を配置する。これにより、ＴＦＴカラー液晶２０には、スルー画として、撮像された画像における顔画像にフォトデコレーション画像が重なるように、撮像された画像にフォトデコレーション画像が重ね合わされて表示される（図５及び図６参照）。

Ｓ５４では、Ｓ４７（図１１参照）で検出された顔の大きさを基に、「フォトデコ２」用のフォトデコレーション画像（フォトデコ画像）をリサイズする。
Ｓ５５では、撮像された画像における、Ｓ４６（図１１参照）及びＳ４７（図１１参照）で検出された顔のエリアを含まないように、且つ、その顔のエリアの周囲に、「フォトデコ２」用のフォトデコレーション画像（フォトデコ画像）を配置する。これにより、ＴＦＴカラー液晶２０には、スルー画として、撮像された画像における顔画像にフォトデコレーション画像が重ならないように、且つ、顔画像の周囲にフォトデコレーション画像が重なるように、撮像された画像にフォトデコレーション画像が重ね合わされて表示される（図７及び図８参照）。

Ｓ５６では、リターンし、処理が戻る。
以上、本実施の形態に係るカメラによれば、被写体を撮像して得た画像に含まれる人物の顔を検出して、顔の位置と大きさを導きだすことによって、面倒な位置合わせを必要としないフォトデコレーション機能を実現することができる。

なお、本実施の形態に係るカメラにおいては、次のような変形が可能である。
まず、図４に示したフォトデコ撮影メニューにおいて、ユーザが「フォトデコ１」又は「フォトデコ２」を選択、確定した後に、更に、複数のフォトデコレーション画像の中から所望のフォトデコレーション画像を選択、確定できるようにすることもできる。この場合は、例えば、「フォトデコ１」又は「フォトデコ２」が選択、確定された後に、図１５又は図１６に示すような、対応するフォトデコ選択メニューを表示し、所望のフォトデコレーション画像をユーザに選択、確定させるようにする。

図１５は、「フォトデコ１」が選択、確定された時に、ＴＦＴカラー液晶２０に表示されるフォトデコ１選択メニュー画面の一例である。同図に示したように、フォトデコ１選択メニュー画面には、「かつら」、「ひげ」の２項目が表示され、この中から所望の項目に応じたフォトデコレーション画像を選択、確定することが可能になる。また、フォトデコ１選択メニュー画面では、同図に示したように、「かつら」の項目位置が、デフォルトのカーソル４０の位置となっている。

図１６は、「フォトデコ２」が選択、確定された時に、ＴＦＴカラー液晶２０に表示されるフォトデコ２選択メニュー画面の一例である。同図に示したように、フォトデコ２選択メニュー画面には、「音符」、「星」の２項目が表示され、この中から所望の項目に応じたフォトデコレーション画像を選択、確定することが可能になる。また、フォトデコ２選択メニュー画面では、同図に示したように、「音符」の項目位置が、デフォルトのカーソル４１の位置となっている。

そして、ユーザが、フォトデコ１選択メニュー画面、又は、フォトデコ２選択メニュー画面にて、所望の項目を選択、確定すると、その項目に応じたフォトデコレーション画像が重ね合わされるようになる。なお、選択、確定された項目が「かつら」や「ひげ」の場合には、検出された顔上の所定の座標にそのフォトデコレーション画像が配置される。

また、本実施の形態において、モード設定ダイヤル２３が再生モードに設定されているときには、同様にして、再生画像に含まれる人物の顔を検出して、フォトデコレーション画像を重ね合わせてＴＦＴカラー液晶２０に表示させるようにすることもできる。

また、本実施の形態では、図１４のＳ５２又はＳ５４で行われているように検出された顔の大きさに基づいてフォトデコレーション画像をリサイズしているが、例えば、１種類のフォトデコレーション画像について予め複数の異なるサイズ（大、中、小など）のフォトデコレーション画像を用意しておき、検出された顔の大きさに応じて、対応するサイズのフォトデコレーション画像を選択するようにすることもできる。

また、本実施の形態において、Ｓ２０で行われる撮影シーケンスが終了した後の一定時間の間、フォトデコレーション画像が重ね合わされて撮影された画像を、ＴＦＴカラー液晶２０に表示するようにすることもできる。

また、本実施の形態において、フォトデコレーション画像として、表示形態が時間変化するような動画像を適用することもできる。この場合には、フォトデコレーション画像が重ね合わされる画像の背景（例えば背景色など）に応じて、その表示形態が変化するものであってもよいし、或いは、フォトデコレーション画像が重ね合わされる部分の近傍の背景（例えば背景色）に応じて、その表示形態が変化するものであってもよい。

また、本実施の形態において、フォトデコレーション画像として、音声データ付きフォトデコレーション画像を適用することもできる。この場合には、撮影された画像にフォトデコレーション画像が重ね合わされて表示されているときに、その音声データが再生され、音声の発音が併せて行われる。

以上、本発明について詳細に説明したが、本発明は上記実施形態に限定されず、本発明の要旨を逸脱しない範囲において、各種の改良及び変更を行っても良いのはもちろんである。

本発明の一実施の形態に係る撮像装置であるカメラの全体ブロック図である。 本発明の一実施の形態に係るカメラの外観背面図である。 モード設定ダイヤルが撮影モードに設定されている状態でＭＥＮＵキースイッチが押下された時に、ＴＦＴカラー液晶に表示される撮影メニュー画面の一例である。 撮影メニュー画面において「フォトデコ撮影」が選択、確定された時に、ＴＦＴカラー液晶に表示されるフォトデコ撮影メニュー画面の一例である。 フォトデコ撮影メニュー画面において「フォトデコ１」が選択、確定されている時に、ＴＦＴカラー液晶に表示されるスルー画の一例である。 図５に示したスルー画中に存在する人物の顔部分が移動したときに、その移動に応じてフォトデコレーション画像も移動したときのスルー画の一例を示す図である。 フォトデコ撮影メニュー画面において「フォトデコ２」が選択、確定されている時に、ＴＦＴカラー液晶に表示されるスルー画の一例である。 図７に示したスルー画中に存在する人物の顔部分が移動したときに、その移動に応じてフォトデコレーション画像も移動したときのスルー画の一例を示す図である。 本発明の一実施の形態に係るカメラの動作を示すフローチャートである。 Ｓ１２又はＳ１６のＯＫキー判断の処理内容を示すフローチャートである。 Ｓ１７の顔検出の処理内容を示すフローチャートである。 人物が被写体である画像データに係る画像の一例を示す図である。 検出された被写体人物の顔部の詳細な範囲を示す図である。 Ｓ１８のフォトデコ画像移動の処理内容を示すフローチャートである。 「フォトデコ１」が選択、確定された時に、ＴＦＴカラー液晶に表示されるフォトデコ１選択メニュー画面の一例である。 「フォトデコ２」が選択、確定された時に、ＴＦＴカラー液晶に表示されるフォトデコ２選択メニュー画面の一例である。

符号の説明

１ レンズ部
２ ＮＤフィルター
３ シャッター
４ 撮像素子
５ ＡＦＥ部
６ 画像処理部
７ 表示制御部
８ 表示部
９ 記録再生制御部
１０ 記録メディア
１１ ＭＰＵ
１２ ＲＯＭ
１３ 操作スイッチ群
１４ ＡＦ制御部
１５ ＮＤフィルター制御部
１６ シャッター制御部
１７ ＭＰＵ
１８ 顔検出部
１９ 被写体
２０ ＴＦＴカラー液晶
２１ レリーズボタン
２２ ズームボタン
２３ モード設定ダイヤル
２４ 十字キー
２５、２６、２７、２８ 指標
２９ ＭＥＮＵキースイッチ
３０ キースイッチ
３１、３２ カーソル
３３、３８ フォトデコレーション画像
３４ バッテリーマーク
３５、３９ モード表示
３６ 画質モード表示
３７ コマ表示
４０、４１ カーソル

Claims (12)

1. 被写体を撮像する撮像手段と、
   前記撮像手段の出力に係る画像データを記録する画像記録手段と、
   前記撮像手段の出力から、人物の顔に相当する顔画像を検出する顔画像検出手段と、
   前記撮像手段により撮像された画像にフォトデコレーション画像を重ね合わせて表示するフォトデコレーション表示手段と、
   を有し、
   前記フォトデコレーション表示手段は、前記撮像手段により撮像された画像における前記顔画像検出手段により検出された顔画像上に前記フォトデコレーション画像が重なるように、前記撮像手段により撮像された画像に前記フォトデコレーション画像を重ね合わせて表示する、
   ことを特徴とする撮像装置。
2. 被写体を撮像する撮像手段と、
   前記撮像手段の出力に係る画像データを記録する画像記録手段と、
   前記撮像手段の出力から、人物の顔に相当する顔画像を検出する顔画像検出手段と、
   前記撮像手段により撮像された画像にフォトデコレーション画像を重ね合わせて表示するフォトデコレーション表示手段と、
   を有し、
   前記フォトデコレーション表示手段は、前記撮像手段により撮像された画像における前記顔画像検出手段により検出された顔画像上に前記フォトデコレーション画像が重ならないように、前記撮像手段により撮像された画像に前記フォトデコレーション画像を重ね合わせて表示する、
   ことを特徴とする撮像装置。
3. 前記フォトデコレーション表示手段は、前記顔画像検出手段により検出された顔画像の位置を基に、前記フォトデコレーション画像の重ね合わせ位置を決定する、
   ことを特徴とする請求項１又は２記載の撮像装置。
4. 前記フォトデコレーション表示手段は、前記顔画像検出手段により検出された顔画像の大きさを基に、重ね合わせて表示する前記フォトデコレーション画像の大きさを決定する、
   ことを特徴とする請求項１又は２記載の撮像装置。
5. 前記フォトデコレーション表示手段による表示は、撮影待機中に行われる、
   ことを特徴とする請求項１又は２記載の撮像装置。
6. 前記フォトデコレーション表示手段による表示は、撮影準備中に行われる、
   ことを特徴とする請求項１又は２記載の撮像装置。
7. 前記フォトデコレーション画像が重ね合わされる、前記撮像手段により撮像された画像は、動画のフレーム画像である、
   ことを特徴とする請求項１又は２記載の撮像装置。
8. 前記フォトデコレーション表示手段は、前記撮像手段により撮像された画像における前記顔画像検出手段により検出された顔画像の位置の移動に応じて、前記フォトデコレーション画像の重ね合わせ位置を移動させる、
   ことを特徴とする請求項１又は２記載の撮像装置。
9. 被写体を撮像し、
   撮像して得た撮像画像における、人物の顔に相当する顔画像を検出し、
   前記撮像画像における前記顔画像上にフォトデコレーション画像が重なるように、前記撮像画像に前記フォトデコレーション画像を重ね合わせて表示する、
   ことを特徴とする撮像装置の表示方法。
10. 被写体を撮像し、
    撮像して得た撮像画像における、人物の顔に相当する顔画像を検出し、
    前記撮像画像における前記顔画像上にフォトデコレーション画像が重ならないように、前記撮像画像に前記フォトデコレーション画像を重ね合わせて表示する、
    ことを特徴とする撮像装置の表示方法。
11. 被写体を撮像するための撮像機能と、
    前記撮像機能の出力を記録するための画像記録機能と、
    前記撮像機能の出力から、人物の顔に相当する顔画像を検出するための顔画像検出機能と、
    前記撮像機能により撮像された画像における前記顔画像検出機能により検出された顔画像上にフォトデコレーション画像が重なるように、前記撮像機能により撮像された画像に前記フォトデコレーション画像を重ね合わせて表示するフォトデコレーション表示機能と、
    を撮像装置のコンピュータに実現させるためのプログラム。
12. 被写体を撮像するための撮像機能と、
    前記撮像機能の出力を記録するための画像記録機能と、
    前記撮像機能の出力から、人物の顔に相当する顔画像を検出するための顔画像検出機能と、
    前記撮像機能により撮像された画像における前記顔画像検出機能により検出された顔画像上にフォトデコレーション画像が重ならないように、前記撮像機能により撮像された画像に前記フォトデコレーション画像を重ね合わせて表示するフォトデコレーション表示機能と、
    を撮像装置のコンピュータに実現させるためのプログラム。