JP2012231200A5

JP2012231200A5 -

Info

Publication number: JP2012231200A5
Application number: JP2011096648A
Authority: JP
Filing date: 2011-04-23
Publication date: 2013-01-10
Anticipated expiration: 2031-04-23

Description

上記目的を達成するため第１の発明に係わる撮像装置は、撮像部を有するデジタル画像の撮影が可能な撮像装置であって、上記撮像部によって撮像されたデジタル画像から目を検出する顔器官検出部と、上記検出した目にＡＦ領域を設定して目にピントを合わせる目ＡＦ部と、上記デジタル画像について、上記目ＡＦ部がピント合わせを行った目の周辺をぼかす画像処理を行う画像処理部と、を有し、上記顔器官検出部は、上記撮像部によって撮像されたデジタル画像から顔器官を検出し、検出した顔器官に基づいて顔の向きを判別し、上記目ＡＦ部は、顔の向きに基づいて一方の目を選択して、選択した目にピントを合わせる動作を行い、上記画像処理部は、選択しなかった目をぼかす処理を行うとともに、顔の向きに応じてぼかし強度を変更する。

第２の発明に係わる撮像装置は、第１の発明において、上記画像処理部は、顔の向きの正面からのずれが大きいほど、ぼかし強度を大きくする。
第３の発明に係わる撮像装置は、第１の発明において、上記画像処理部は、上記撮像されたデジタル画像をぼかした画像を生成し、上記撮像されたデジタル画像のαチャンネルマスクを生成してピントを合わせた目を透過状態に設定し、上記撮像されたデジタル画像に上記αチャンネルマスクを適用させた画像と、上記ぼかした画像に上記αチャンネルマスクの反転パターンのマスクを適用させた画像とを合成して選択しなかった目をぼかす画像を行う。

第４の発明に係わる撮像装置は、上記第１の発明において、上記顔器官検出部は、上記撮像部によって撮像されたデジタル画像から左右の目と口角を検出し、上記目ＡＦ部は、選択した目にピントを合わせる動作を行い、上記画像処理部は、上記ピント合わせを行った目と、ピント合わせを行った目の位置に対応する左右の口角のうちの一方の口角とを含む領域の周辺をぼかす画像処理を行う。
第５の発明に係わる撮像装置は、上記第４の発明において、上記画像処理部は、上記目ＡＦ部がピント合わせを行った目と、ピント合わせを行った目の位置に対応する左右の口角のうちの一方の口角とを含む領域からの画像上の距離に応じてぼかし強度を大きくしてぼかす画像処理を行う。

第６の発明に係わる撮像装置は、上記第４の発明において、上記画像処理部は、上記撮像されたデジタル画像をぼかした画像を生成し、上記撮像されたデジタル画像のαチャンネルマスクを生成してピントを合わせた目とピント合わせを行った目の位置に対応する左右の口角のうちの一方の口角を含む領域を透過状態に設定し、上記撮像されたデジタル画像に上記αチャンネルマスクを適用させた画像と、上記ぼかした画像に上記αチャンネルマスクの反転パターンのマスクを適用させた画像とを合成して選択しなかった目をぼかす画像処理を行う
第７の発明に係わる撮像装置は、上記第１の発明において、上記画像処理部は、上記目ＡＦ部がピント合わせを行った目からの画像上の距離に応じてぼかし強度を大きくしてぼかす画像処理を行う。

第８の発明に係わる撮像装置は、上記第７の発明において、上記画像処理部は、上記撮像されたデジタル画像をぼかした画像を生成し、上記撮像されたデジタル画像のαチャンネルマスクを生成してピントを合わせた目を透過状態に、かつ目からの距離に応じて透過率を下げる設定をし、上記撮像されたデジタル画像に上記αチャンネルマスクを適用させた画像と、上記ぼかした画像に上記αチャンネルマスクの反転パターンのマスクを適用させた画像とを合成して選択しなかった目をぼかす処理を行う。
第９の発明に係わる撮像装置は、上記第１の発明において、上記画像処理部は、上記撮像されたデジタル画像をぼかした画像を生成し、上記撮像されたデジタル画像のαチャンネルマスクを生成してピントを合わせた目を透過状態に設定し、上記撮像されたデジタル画像に上記αチャンネルマスクを適用させた画像と、上記ぼかした画像に上記αチャンネルマスクの反転パターンのマスクを適用させた画像とを合成してピント合わせを行った目の周辺をぼかす画像処理を行う。
第１０の発明に係わる撮像装置は、上記第１の発明において、上記目ＡＦ部により目にピント合わせが行われた場合に、露出時の絞り値を開放Ｆ値近傍の所定値に設定する絞り値設定部と、を有する。

第１１の発明に係わる撮像方法は、撮像したデジタル画像から目を検出し、上記検出した目にピント合わせを行い、上記デジタル画像について、上記ピント合わせを行った目の周辺をぼかす画像処理を行う、デジタル画像の撮影が可能な撮像装置の撮像方法であって、上記デジタル画像から顔器官を検出し、検出した顔器官に基づいて顔の向きを判別し、顔の向きに基づいて一方の目を選択して、選択した目にピント合わせる動作を行い、選択しなかった目をぼかす処理を行うとともに、顔の向きに応じてぼかし強度を変更する。

第１２の発明に係わる撮像方法は、上記第１１の発明において、顔の向きの正面からのずれが大きいほど、ぼかし強度を大きくする。
第１３の発明に係わる撮像方法は、上記第１１の発明において、撮像したデジタル画像から左右の目と口角を検出し、選択した目にピントを合わせる動作を行い、上記ピント合わせを行った目と、ピント合わせを行った目の位置に対応する左右の口角のうちの一方の口角とを含む領域の周辺をぼかす画像処理を行う。
第１４の発明に係わる撮像方法は、上記第１３の発明において、上記ピント合わせを行った目と、ピント合わせを行った目の位置に対応する左右の口角のうちの一方の口角とを含む領域からの画像上の距離に応じてぼかし強度を大きくしてぼかす処理を行う。
第１５の発明に係わる撮像方法は、上記１１の発明において、上記ピント合わせを行った目からの画像上の距離に応じてぼかし強度を大きくしてぼかす画像処理を行う。
第１６の発明に係わる撮像方法は、上記第１１の発明において、上記撮像されたデジタル画像をぼかした画像を生成し、上記撮像されたデジタル画像のαチャンネルマスクを生成してピントを合わせた目を透過状態に設定し、上記撮像されたデジタル画像に上記αチャンネルマスクを適用させた画像と、上記ぼかした画像に上記αチャンネルマスクの反転パターンのマスクを適用させた画像とを合成してピント合わせを行った目の周辺をぼかす画像処理を行う。

システム制御部１１６には、撮像制御部１０８、シャッタ制御部１０６、絞り制御部１０４、レンズ制御部１０２、露出制御部１１２、ＡＦ処理部１１３、フラッシュ制御部１２１、不揮発性メモリ１１８、外部メモリ１１４、表示部１１５、操作部１１７、電源制御部１２０がそれぞれ接続されている。上述の撮像制御部１０８は撮像素子１０７に接続されており、シャッタ制御部１０６はシャッタ１０５に接続されており、絞り制御部１０４は絞り機構１０３に接続されており、レンズ制御部１０２は撮影レンズ１０１に接続されている。また、電源制御部１２０は電源部１１９に接続されており、フラッシュ制御部１２１はフラッシュ充電部１２２とフラッシュ発光部１２３にそれぞれ接続されている。

撮影レンズ１０１は、被写体光束を撮像素子１０７に集光させ、被写体像を結像させるための光学系である。この撮影レンズ１０１は、システム制御部１１６からの指示に応じて動作するレンズ制御部１０２により光軸方向に移動され、焦点状態が変化する。絞り機構１０３は、撮影レンズ１０１を介して撮像素子１０７に入射する被写体光束の入射量を調節する。絞り機構１０３は、システム制御部１１６からの指示に応じて動作する絞り制御部１０４により開口量が制御される。絞り制御部１０４およびシステム制御部１１６は、後述する目ＡＦ部により目にピント合わせが行われた場合に、露出時の絞り値を開放Ｆ値近傍の所定値に設定する絞り値設定部として機能する。

また、画像処理部１１１は、顔検出部として機能し、画像データに基づいて被写体の中から顔を検出する。顔を検出した場合には、顔の位置、大きさについても検出する。また、画像処理部１１１は、顔器官検出部としての機能も果たし、目、鼻、口元、口角、瞳等の顔の中の器官の検出を行う。ここで目や瞳等の器官を検出した場合には、左右の目をそれぞれ検出すると共に、その位置、大きさ等も検出し、これらの器官の位置等に基づいて顔の向きも検出する。

また、画像処理部１１１は、元画像にぼかし処理を行い、ぼかし画像を生成する。また、画像処理部１１１は、後述するαチャンネルマスクパターン（図１１、図１２参照）を作成し、このαチャンネルマスクパターンとぼかし画像の合成処理を行う。また、画像処理部１１１は、後述する目ＡＦ部によってピントを合わせた目の周辺や、ピントを合わせなかった目をぼかす画像処理を行う。ぼかす処理としては、この他にも、ピント合わせを行った目と、ピント合わせを行った目の位置に対応する左右の口角のうちの一方の口角とを含む領域の周辺をぼかす画像処理を行う。

さらに、画像処理部１１１は、目ＡＦ部がピント合わせを行った目からの画像上の距離に応じてぼかし強度を大きくしてぼかす画像処理を行う。また、画像処理部１１１は、目ＡＦ部がピント合わせを行った目と、ピント合わせを行った目の位置に対応する左右の口角のうちの一方の口角とを含む領域からの画像上の距離に応じてぼかし強度を大きくしてぼかす画像処理を行う。また、画像処理部１１１は、キャッチライト効果が設定された場合には、人物の目の中に十字形、星型、三日月型等のキャッチライトパターンを重畳する画像処理を行う。

ＡＦ（Auto Focus）処理部１１３は、メモリ１１０に一時記憶された画像データより高周波成分を抽出し、積算処理によりコントラスト値を取得する。システム制御部１１６は、コントラスト値に基づいてレンズ制御部１０２を通じて、撮影レンズ１０１が合焦位置となるように駆動制御を行う。コントラスト値を求めるにあたっては、画面全体について求めることもできるが、設定されたＡＦ枠に対応する画像データに基づいてコントラスト値を求めることもできる。また、ＡＦ処理部１１３およびシステム制御部１１６は、顔器官検出部によって検出された目にＡＦ領域を設定して目にピントを合わせる目ＡＦ部として機能する。また、目ＡＦ部は、顔器官検出部によって検出された左右の目のうち近い方、すなわち大きい方を選択して、選択した目にピントを合わせる。

また、カメラ本体１０の背面には、液晶モニタ１１５ａが配置されており、これによって被写体像のライブビュー表示やメニュー画面表示、記録画像の再生表示等の各種表示を行う。カメラ本体１０の背面の右上側には、動画釦１１７ｄ、ファンクション釦１１７ｅが配置されており、また、これらの釦の下側には、十字釦１１７ｆ、ＯＫ釦１１７ｇ、メニュー釦１１７ｈが配置されている。十字釦１１７ｆは、液晶モニタ１１５ａに表示されるメニュー画面等において、カーソルを画面上で移動させ、ＯＫ釦１１７ｇを押下げるとカーソルによって選択された項目を確定させることができる。メニュー釦１１７ｈを操作するとメニュー画面が表示される。

ステップＳ２９において、目ＡＦ枠を選択すると、次に、絞り値を目ＡＦ枠用の所定値に設定する（Ｓ３１）。目ＡＦ枠が設定され、目にピントを合わせる時は、絞り機構１０３を開放絞り値に設定する。なお、開放絞り値でなくても、開放絞り値近傍の絞り値でもよい。

ステップＳ４１における判定の結果、２ｎｄレリーズ操作がなされた場合には、次に、静止画撮影を行う（Ｓ４３）。ここでは、撮像素子１０７からの静止画の画像データを取得する。なお、ＡＦ処理部１１３およびシステム制御部１１６よりなる目ＡＦ部により目にピント合わせが行われた場合には、絞り制御部１０４およびシステム制御部１１６によりなる絞り値設定部によって露出時の絞り値は、開放Ｆ値近傍に設定されている。

また、一実施形態における図３に示したメインフローでは、ステップＳ４１において２ｎｄレリーズがオンになった後、静止画を１回撮影していたが、本変形例においては、第1の静止画撮影を行った後、絞り機構１０３を３段絞り込み、絞り込み後に第２の静止画撮影を行うようにしている。そして、第１及び第２静止画のボケ量の比較からαチャンネルマスクパターンを生成する。

ステップＳ４１における判定の結果、オンであった場合には、次に、第1の静止画撮影を行う（Ｓ４５）。ここでは、撮像素子１０７からの第１回目の静止画の画像データを取得する。続いて、絞り機構１０３の３段絞り込みを行い（Ｓ４７）、第２の静止画撮影を行う（Ｓ４９）。ここでは、撮像素子１０７からの第２回目の静止画の画像データを取得する。第２の静止画撮影を行うと、第１及び第２の静止画撮影の画像データからαチャンネルマスクパターンを生成する。なお、絞り機構１０３の絞り込み量は３段に限られない。ボケ量が相違する程度の絞り込み量であればよい。

Claims

撮像部を有するデジタル画像の撮影が可能な撮像装置であって、
上記撮像部によって撮像されたデジタル画像から目を検出する顔器官検出部と、
上記検出した目にＡＦ領域を設定して目にピントを合わせる目ＡＦ部と、
上記デジタル画像について、上記目ＡＦ部がピント合わせを行った目の周辺をぼかす画像処理を行う画像処理部と、
を有し、
上記顔器官検出部は、上記撮像部によって撮像されたデジタル画像から顔器官を検出し、検出した顔器官に基づいて顔の向きを判別し、
上記目ＡＦ部は、顔の向きに基づいて一方の目を選択して、選択した目にピントを合わせる動作を行い、
上記画像処理部は、選択しなかった目をぼかす処理を行うとともに、顔の向きに応じてぼかし強度を変更する、
ことを特徴とする撮像装置。
上記画像処理部は、顔の向きの正面からのずれが大きいほど、ぼかし強度を大きくすることを特徴とする請求項１に記載の撮像装置。
上記画像処理部は、上記撮像されたデジタル画像をぼかした画像を生成し、上記撮像されたデジタル画像のαチャンネルマスクを生成してピントを合わせた目を透過状態に設定し、上記撮像されたデジタル画像に上記αチャンネルマスクを適用させた画像と、上記ぼかした画像に上記αチャンネルマスクの反転パターンのマスクを適用させた画像とを合成して選択しなかった目をぼかす画像を行うことを特徴とする請求項１に記載の撮像装置。
上記顔器官検出部は、上記撮像部によって撮像されたデジタル画像から左右の目と口角を検出し、
上記目ＡＦ部は、選択した目にピントを合わせる動作を行い、
上記画像処理部は、上記ピント合わせを行った目と、ピント合わせを行った目の位置に対応する左右の口角のうちの一方の口角とを含む領域の周辺をぼかす画像処理を行う、
ことを特徴とする請求項１に記載の撮像装置。
上記画像処理部は、上記目ＡＦ部がピント合わせを行った目と、ピント合わせを行った目の位置に対応する左右の口角のうちの一方の口角とを含む領域からの画像上の距離に応じてぼかし強度を大きくしてぼかす画像処理を行うことを特徴とする請求項４に記載の撮像装置
。
上記画像処理部は、上記撮像されたデジタル画像をぼかした画像を生成し、上記撮像されたデジタル画像のαチャンネルマスクを生成してピントを合わせた目とピント合わせを行った目の位置に対応する左右の口角のうちの一方の口角を含む領域を透過状態に設定し、上記撮像されたデジタル画像に上記αチャンネルマスクを適用させた画像と、上記ぼかした画像に上記αチャンネルマスクの反転パターンのマスクを適用させた画像とを合成して選択しなかった目をぼかす画像処理を行うことを特徴とする請求項４に記載の撮像装置。
上記画像処理部は、上記目ＡＦ部がピント合わせを行った目からの画像上の距離に応じてぼかし強度を大きくしてぼかす画像処理を行うことを特徴とする請求項１に記載の撮像装置。
上記画像処理部は、上記撮像されたデジタル画像をぼかした画像を生成し、上記撮像されたデジタル画像のαチャンネルマスクを生成してピントを合わせた目を透過状態に、かつ目からの距離に応じて透過率を下げる設定をし、上記撮像されたデジタル画像に上記αチャンネルマスクを適用させた画像と、上記ぼかした画像に上記αチャンネルマスクの反転パターンのマスクを適用させた画像とを合成して選択しなかった目をぼかす処理を行うことを特徴とする請求項７に記載の撮像装置。
上記画像処理部は、上記撮像されたデジタル画像をぼかした画像を生成し、上記撮像されたデジタル画像のαチャンネルマスクを生成してピントを合わせた目を透過状態に設定し、上記撮像されたデジタル画像に上記αチャンネルマスクを適用させた画像と、上記ぼかした画像に上記αチャンネルマスクの反転パターンのマスクを適用させた画像とを合成してピント合わせを行った目の周辺をぼかす画像処理を行うことを特徴とする請求項１に記載の撮像装置。
上記目ＡＦ部により目にピント合わせが行われた場合に、露出時の絞り値を開放Ｆ値近傍の所定値に設定する絞り値設定部と、
を有することを特徴とする請求項１に記載の撮像装置。
撮像したデジタル画像から目を検出し、上記検出した目にピント合わせを行い、上記デジタル画像について、上記ピント合わせを行った目の周辺をぼかす画像処理を行う、デジタル画像の撮影が可能な撮像装置の撮像方法であって、
上記デジタル画像から顔器官を検出し、検出した顔器官に基づいて顔の向きを判別し、
顔の向きに基づいて一方の目を選択して、選択した目にピント合わせる動作を行い、
選択しなかった目をぼかす処理を行うとともに、顔の向きに応じてぼかし強度を変更する、
ことを特徴とする撮像方法。
顔の向きの正面からのずれが大きいほど、ぼかし強度を大きくすることを特徴とする請求項１１に記載の撮像方法。
撮像したデジタル画像から左右の目と口角を検出し、
選択した目にピントを合わせる動作を行い、
上記ピント合わせを行った目と、ピント合わせを行った目の位置に対応する左右の口角のうちの一方の口角とを含む領域の周辺をぼかす画像処理を行う、
ことを特徴とする請求項１１に記載の撮像方法。
上記ピント合わせを行った目と、ピント合わせを行った目の位置に対応する左右の口角のうちの一方の口角とを含む領域からの画像上の距離に応じてぼかし強度を大きくしてぼかす処理を行うことを特徴とする請求項１３に記載の撮像方法。
上記ピント合わせを行った目からの画像上の距離に応じてぼかし強度を大きくしてぼかす画像処理を行うことを特徴とする請求項１１に記載の撮像方法。
上記撮像されたデジタル画像をぼかした画像を生成し、上記撮像されたデジタル画像のαチャンネルマスクを生成してピントを合わせた目を透過状態に設定し、上記撮像されたデジタル画像に上記αチャンネルマスクを適用させた画像と、上記ぼかした画像に上記αチャンネルマスクの反転パターンのマスクを適用させた画像とを合成してピント合わせを行った目の周辺をぼかす画像処理を行うことを特徴とする請求項１１に記載の撮像方法。