JP2009157242A - 撮像装置 - Google Patents
撮像装置 Download PDFInfo
- Publication number
- JP2009157242A JP2009157242A JP2007337563A JP2007337563A JP2009157242A JP 2009157242 A JP2009157242 A JP 2009157242A JP 2007337563 A JP2007337563 A JP 2007337563A JP 2007337563 A JP2007337563 A JP 2007337563A JP 2009157242 A JP2009157242 A JP 2009157242A
- Authority
- JP
- Japan
- Prior art keywords
- subject
- age
- face
- gender
- face area
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Focusing (AREA)
- Automatic Focus Adjustment (AREA)
- Studio Devices (AREA)
- Exposure Control For Cameras (AREA)
Abstract
【課題】被写体の性別、年齢など推定結果を用いて、自動的に、所望の被写体を鮮明に撮影することができる。
【解決手段】まず、撮影者が撮影したい被写体の性別を入力し、入力された性別を撮影者が希望する被写体の性別と設定する。撮像されたスルー画像の画像データから被写体の顔領域を検出し、検出された顔領域のうち、設定された性別、かつ最年少の顔を撮影者好みの被写体の顔と選定する。S1がONされると、当該選定された撮影者好みの被写体の顔に対して合焦制御及び露出制御を行い、撮影を行う。
【選択図】 図6
【解決手段】まず、撮影者が撮影したい被写体の性別を入力し、入力された性別を撮影者が希望する被写体の性別と設定する。撮像されたスルー画像の画像データから被写体の顔領域を検出し、検出された顔領域のうち、設定された性別、かつ最年少の顔を撮影者好みの被写体の顔と選定する。S1がONされると、当該選定された撮影者好みの被写体の顔に対して合焦制御及び露出制御を行い、撮影を行う。
【選択図】 図6
Description
本発明は撮像装置に係り、特に自動的に合焦を行う撮像装置に関する。
特許文献1には、画像に含まれる複数の顔領域を位置情報と共に検出し、顔領域のそれぞれに対して属性情報を取得し、属性情報に基づいて拡大表示させる顔領域の順位付けを行う発明が記載されている。
特許文献2には、顔画像の特徴から年齢又は年齢区分、性別などの属性を高い精度で推定する発明が記載されている。
特許文献3には、任意の顔の向きの顔画像の特徴点から、その対象人物の性別、年齢などの属性を自動的に推定する発明が記載されている。
特開2007―41866号公報
特開2003―99779号公報
特開2003―242486号公報
特許文献1に記載の発明は、撮影された画像に対して属性情報を取得するものであり、撮影時に属性情報を取得し、取得した属性情報を用いて撮影できるものではない。
特許文献2、3に記載の発明は、性別、年齢等の推定結果を撮影に応用することについては何ら記載されていない。
本発明はこのような事情に鑑みてなされたもので、被写体の性別、年齢など推定結果を用いて、自動的に、所望の被写体を鮮明に撮影することができる撮像装置を提供することを目的とする。
請求項1に記載の撮像装置は、前記目的を達成するために、被写体像を撮像する撮像手段と、前記撮像手段により撮像された画像データから被写体の顔領域を検出する顔検出手段と、前記顔検出手段により検出された顔領域のデータに基づいて、被写体の年齢を推定する年齢推定手段と、前記顔検出手段により複数の顔領域が検出されると、前記年齢推定手段で推定された年齢に基づいて、前記複数の顔領域の中から所定の年齢の被写体の顔領域を選択する顔領域選択手段と、前記顔領域選択手段により選択された顔領域に対して、合焦制御及び露出制御の少なくとも一方を行う制御手段と、を備えたことを特徴とする。
請求項1に記載の撮像装置によれば、被写体像を撮像し、被写体像から被写体の顔領域を検出し、顔領域のデータに基づいて、被写体の年齢を推定する。複数の顔領域が検出されると、推定された被写体の年齢に基づいて所望の年齢の顔領域を選択し、選択された顔領域に対して合焦制御や露出制御を行う。これにより、撮影者の手間をかけず、撮影者が望む被写体に対して確実にかつ自動的に合焦制御や露出制御を行うことができる。なお、被写体の年齢が含まれる所定の範囲の年齢を推定し、所望の所定の範囲の年齢の被写体に合焦制御や露出制御を行うようにしてもよい。
請求項2に記載の撮像装置は、請求項1に記載の撮像装置において、前記顔領域選択手段は、前記年齢推定手段において推定された年齢がもっとも小さい被写体の顔領域を選択することを特徴とする。一般的に、もっとも年少の被写体が主要被写体とされることが多いが、年齢がもっとも小さい被写体の顔領域に自動的に合焦制御や露出制御を行うことにより、撮影者が望む人物を鮮明に撮影することができる。
請求項3に記載の撮像装置は、請求項1に記載の撮像装置において、年齢を設定する年齢設定手段を備え、前記顔領域選択手段は、前記年齢設定手段により設定された年齢の被写体の顔領域を選択することを特徴とする。
請求項3に記載の撮像装置によれば、被写体像から被写体の顔領域を検出し、顔領域のデータに基づいて被写体の性別を推定する。撮影者が所望する被写体の性別を設定し、設定された性別の被写体が選択される。これにより、撮影者の手間をかけず、撮影者が望む被写体に対して確実にかつ自動的に合焦制御や露出制御を行うことができる。
請求項4に記載の撮像装置は、請求項1、2又は3に記載の撮像装置において、前記顔検出手段により検出された顔のデータに基づいて、被写体の性別を推定する性別推定手段と、性別を設定する性別設定手段と、を備え、前記顔領域選択手段は、前記性別設定手段により設定された性別の被写体の顔領域を選択することを特徴とする。
請求項4に記載の撮像装置によれば、顔領域のデータに基づいて被写体の性別を推定し、推定された被写体の性別の情報を記録する。記録された被写体の性別から撮影頻度の高い性別を検出し、判断された性別の被写体を選択する。このように、過去に撮影された被写体のうちの撮影頻度の高い性別の被写体を撮影者の所望の被写体とすることで、撮影者の手間をかけず、撮影者が望む被写体に対して自動的に確実にかつ自動的に合焦制御や露出制御を行うことができる。
請求項5に記載の撮像装置は、請求項1又は4に記載の撮像装置において、前記年齢推定手段において推定された被写体の年齢の情報を記録する記録手段と、前記記録手段に記録された被写体の年齢のうち、最も撮影頻度の高い年齢を判断する年齢検出手段と、を備え、前記顔領域選択手段は、前記年齢検出手段において最も撮影頻度の高い年齢と判断された年齢の被写体の顔領域を選択することを特徴とする。
請求項5に記載の撮像装置によれば、推定された被写体の年齢の情報を記録し、最も撮影頻度の高い年齢を判断し、判断された年齢の被写体の顔領域を選択する。過去に撮影された被写体のうちの最も撮影頻度の高い年齢の被写体の顔領域に自動的に合焦制御や露出制御を行うことにより、撮影者が望む人物を鮮明に撮影することができる。
請求項6に記載の撮像装置は、被写体像を撮像する撮像手段と、前記撮像手段により撮像された画像データから被写体の顔領域を検出する顔検出手段と、前記顔検出手段により検出された顔領域のデータに基づいて、被写体の性別を推定する性別推定手段と、前記性別推定手段により推定された被写体の性別の情報を記録する記録手段と、前記記録手段に記録された被写体の性別のうち、撮影頻度の高い性別を検出する性別検出手段と、前記顔検出手段により複数の顔領域が検出されると、前記複数の顔領域の中から前記性別検出手段において撮影頻度の高い性別と判断された性別の被写体の顔領域を選択する顔領域選択手段と、前記顔領域選択手段により選択された顔領域に対して合焦制御及び露出制御の少なくとも一方を行う制御手段と、を備えたことを特徴とする。
請求項6に記載の撮像装置によれば、被写体像を撮像し、被写体像から顔領域を検出し、検出された顔領域のデータに基づいて被写体の性別を推定し、推定された被写体の性別の情報を記録する。複数の顔領域が検出されると、記録された被写体の性別から撮影頻度の高い性別を検出し、判断された性別の被写体に焦点を合わせる。このように、過去に撮影された被写体のうちの撮影頻度の高い性別の被写体を撮影者の所望の被写体とすることで、撮影者の手間をかけず、撮影者が望む被写体に対して自動的に焦点を合わせて撮影を行うことができる。
請求項7に記載の撮像装置は、請求項6に記載の撮像装置において、前記顔検出手段により検出された顔領域のデータに基づいて、被写体の年齢を推定する年齢推定手段と、前記記録手段に記録された被写体の年齢のうち、最も撮影頻度の高い年齢を検出する年齢検出手段と、を備え、前記記録手段は、前記年齢推定手段により推定された被写体の年齢の情報を記録し、前記顔領域選択手段は、前記年齢検出手段において最も撮影頻度の高い年齢と判断された年齢の被写体の顔領域を選択することを特徴とする。
請求項7に記載の撮像装置によれば、検出された顔領域のデータに基づいて被写体の年齢を推定し、推定された被写体の年齢の情報を記録する。最も撮影頻度の高い年齢を検出し、最も撮影頻度の高い年齢と判断された年齢の被写体を選択する。過去に撮影された被写体のうちの最も撮影頻度の高い年齢の被写体の顔領域に自動的に合焦制御や露出制御を行うことにより、撮影者が望む人物を鮮明に撮影することができる。また、最も撮影頻度の高い年齢のみでなく、最も撮影頻度の高い年齢かつ撮影頻度の高い性別の被写体の顔領域に自動的に合焦制御や露出制御を行うことにより、より撮影者の希望に沿った被写体を鮮明に撮影することができる。
請求項8に記載の撮像装置は、請求項5又は7に記載の撮像装置において、前記顔領域選択手段は、前記顔検出手段において検出された顔領域の中から、前記最も撮影頻度の高い年齢と判断された被写体が選択できない場合には、前記撮影頻度の高い年齢に最も近い年齢の被写体を選択することを特徴とする。これにより、撮影者が望む被写体が検出されない場合においても、撮影者が望む被写体にもっとも近い被写体に対して確実にかつ自動的に合焦制御や露出制御を行うことができる。
請求項9に記載の撮像装置は、請求項4から8のいずれかに記載の撮像装置において、前記顔領域選択手段は、前記年齢推定手段、前記年齢設定手段又は前記年齢検出手段により合焦制御及び露出制御の対象とされた被写体と、前記性別設定手段又は前記性別検出手段により合焦制御及び露出制御の対象とされた被写体とが異なる場合には、前記性別設定手段又は前記性別検出手段により選択された被写体の顔領域を選択することを特徴とする。これにより、年齢に基づいて合焦対象とされた被写体と性別に基づいて合焦対象とされた被写体とが異なる場合においても、適切な被写体に確実にかつ自動的に合焦制御や露出制御を行うことができる。
請求項10に記載の撮像装置は、請求項1から9のいずれかに記載の撮像装置において、前記顔領域選択手段は、合焦制御及び露出制御の対象とされた被写体が複数ある場合には、前記顔検出手段により検出された被写体の顔領域がもっとも大きい被写体を選択することを特徴とする。これにより、合焦対象が複数となった場合においても、適切な被写体に確実にかつ自動的に合焦制御や露出制御を行うことができる。
本発明によれば、被写体の性別、年齢など推定結果を用いて、自動的に、所望の被写体を鮮明に撮影することができる。
以下、添付図面に従って本発明に係る撮像装置を実施するための最良の形態について詳細に説明する。この撮像装置は、レンズを通った光を撮像素子で受け、デジタル信号に変換して記録メディアに記録するデジタルカメラである。
<第1の実施の形態>
図1は本発明に係る電子機器の一実施形態を示す正面斜視図であり、図2はその背面斜視図である。
図1は本発明に係る電子機器の一実施形態を示す正面斜視図であり、図2はその背面斜視図である。
デジタルカメラ1のカメラボディ10は、横長の四角い箱状に形成されており、その正面には、図1に示すように、レンズユニット12、フラッシュ16、AF補助光ランプ18等が設けられており、上面には、シャッターボタン22、モードレバー24、電源ボタン26等が設けられている。また、側面には、開閉自在なスロットカバー11が設けられている。スロットカバー11の内側には、記録媒体13を装着するためのカードスロット14が設けられている。
一方、カメラボディ10の背面には、図2に示すように、モニタ28、ズームボタン30、再生ボタン32、ファンクションボタン34、十字ボタン36、MENU/OKボタン38、DISP/BACKボタン40等が設けられている。
なお、図示しない底面には、三脚ネジ穴と内側にバッテリを収納するための開閉自在なバッテリカバーとが設けられている。
レンズユニット12は、沈胴式のズームレンズで構成されており、電源ボタン26によってデジタルカメラ1の電源をONすることにより、カメラボディ10から繰り出される。なお、レンズユニット12のズーム機構や沈胴機構については、公知の技術なので、ここでは、その具体的な構成についての説明は省略する。
記録媒体13スロット14は、撮影した被写体の画像データ、音声データ等の各種データ、ファームウェアが記録されている記録媒体13を装着するための接続部である。
フラッシュ16は、たとえばキセノン管を光源として構成されており、その発光量を調整可能に形成されている。なお、キセノン管の他、高輝度のLEDを光源としたフラッシュを用いることもできる。
AF補助光ランプ18は、たとえば高輝度LEDと受光部とで構成されており、高輝度LEDは、AF時に必要に応じて発光され、発光された光は受光部で受光されて、被写体距離が検出される。
シャッターボタン22は、いわゆる「半押し」と「全押し」とからなる二段ストローク式のスイッチで構成されている。デジタルカメラ1は、このシャッターボタン22を半押しすると撮影準備処理、すなわち、AE(Automatic Exposure:自動露出)、AF(Auto Focus:自動焦点合わせ)、AWB(Automatic White Balance:自動ホワイトバランス)の各処理を行い、全押しすると、画像の撮影・記録処理を行う。
モードレバー24は、デジタルカメラ1の撮影モードを設定する撮影モード設定手段として機能し、このモードダイヤルの設定位置により、デジタルカメラ1の撮影モードが様々なモードに設定される。例えば、絞り、シャッタースピード等がデジタルカメラ1によって自動的に設定される「オート撮影モード」、動画撮影を行う「動画撮影モード」、人物撮影に適した「人物撮影モード」、動体撮影に適した「スポーツ撮影モード」、風景の撮影に適した「風景撮影モード」、夕景及び夜景の撮影に適した「夜景撮影モード」、絞りの目盛りを撮影者が設定し、シャッタースピードをデジタルカメラ1が自動的に設定する「絞り優先撮影モード」、シャッタースピードを撮影者が設定し、絞りの目盛りをデジタルカメラ1が自動的に設定する「シャッタースピード優先撮影モード」、絞り、シャッタースピード等を撮影者が設定する「マニュアル撮影モード」等である。
電源ボタン26は、デジタルカメラ1の電源をON/OFFするのに用いられ、所定時間(たとえば、2秒)押下されることにより、デジタルカメラ1の電源がON/OFFされる。
モニタ28は、カラー表示が可能な液晶ディスプレイで構成されている。このモニタ28は、再生モード時に撮影済み画像を表示するための画像表示パネルとして利用されるとともに、各種設定操作を行なう際の撮影者インターフェース表示パネルとして利用される。また、撮影モード時には、必要に応じてスルー画像が表示されて、画角確認用の電子ファインダとして利用される。
ズームボタン30は、レンズユニット12のズーム操作に用いられ、望遠側へのズームを指示するズームテレボタンと、広角側へのズームを指示するズームワイドボタンとで構成されている。
再生ボタン32は、再生モードへの切り替え指示に用いられる。すなわち、デジタルカメラ1は、撮影中、この再生ボタン32が押されると、再生モードに切り替えられる。また、電源OFFの状態でこの再生ボタン32が押されると、再生モードの状態でデジタルカメラ1が起動する。
ファンクションボタン34は、撮影及び再生機能の各種設定画面の呼び出しに用いられる。すなわち、撮影時にこのファンクションボタン34が押されると、モニタ28に画像サイズ(記録画素数)、感度等の設定画面が表示され、再生時にこのファンクションボタン34が押されると、モニタ28に画像の消去、プリント予約(DPOF)の設定画面等が表示される。
十字ボタン36は、上下左右4方向の指示を入力する方向指示手段として機能し、たとえば、メニュー画面でメニュー項目の選択などに使用される。
MENU/OKボタン38は、各モードの通常画面からメニュー画面への遷移を指示するボタン(MENUボタン)として機能するととともに、選択内容の確定、処理の実行等を指示するボタン(OKボタン)として機能する。
DISP/BACKボタン40は、モニタ28の表示内容の切り替え指示(DISP機能)に用いられるとともに、入力操作のキャンセル等の指示(BACK機能)に用いられ、デジタルカメラ1の設定状態に応じて割り当てられる機能が切り替えられる。
図3は、第1の実施の形態のデジタルカメラ1の電気的構成を示すブロック図である。同図に示すように、デジタルカメラ1は、CPU110、操作部(シャッターボタン22、モードレバー24、電源ボタン26、ズームボタン30、再生ボタン32、ファンクションボタン34、十字ボタン36、MENU/OKボタン38、DISP/BACKボタン40等)112、アドレスバス114、データバス116、レンズユニット12(固定レンズ群121、絞り122ズームレンズ123、フォーカスレンズ124、撮像素子125)、レンズ駆動部126、絞り駆動部127、タイミングジェネレータ(TG)130、アナログ信号処理部132、A/Dコンバータ134、メモリ制御部136、画像信号処理部138、圧縮伸張処理部140、顔検出部142、積算部144、外部メモリ制御部146、表示制御部148、メインメモリ150、撮影者好みの被写体検出回路部152等で構成されている。
CPU110は、デジタルカメラ1の全体の動作を統括制御する制御手段として機能するとともに、各種の演算処理を行う演算手段として機能し、操作部112からの入力に基づき所定の制御プログラムに従ってデジタルカメラ1の各部を制御する。CPU110にはROMが含まれており、ROMにはCPU110が実行する制御プログラムであるファームウェア、制御に必要な各種データ、カメラ設定値、撮影された画像データ等が記録されている。なお、撮影された画像データは、通常記録媒体13に記録されるが、撮影者が選択した場合、記録媒体13が装填されていない場合、記録媒体13の容量が不足した場合等にはROMに記録される。
また、CPU110は、積算部144(後述)から得た積算値に基づいて被写体の明るさ(被写体輝度)を検出し、撮影に適した露出値(撮影EV値)を算出する。そして、算出した撮影EV値と所定のプログラム線図から絞り値とシャッタ速度を決定する(AE制御)。同時に、検出された被写体輝度より、フラッシュの発光が必要かどうかを判断する。フラッシュ16の発光が必要と判断された場合には、フラッシュ16をプリ発光させ、その反射光に基づいて本撮影時のフラッシュ16の発光量を決定する。
また、CPU110は、得られたRの積算値、Bの積算値、Gの積算値から分割エリアごとにR/G及びB/Gの比を求め、求めたR/G、B/Gの値のR/G、B/Gの色空間における分布等に基づいて光源種判別を行う。そして、判別された光源種に適したホワイトバランス調整値に従って、たとえば各比の値がおよそ1(つまり、1画面においてRGBの積算比率がR:G:B≒1:1:1)になるように、ホワイトバランス調整回路のR、G、B信号に対するゲイン値(ホワイトバランス補正値)を決定する(AWB制御)。
また、CPU110は、積算部144(後述)で算出される焦点評価値が極大となる位置を検出し、その位置にフォーカスレンズ群を移動させる(いわゆるコントラストAF)。すなわち、フォーカスレンズ群を至近から無限遠まで所定のステップで移動させ、各位置で焦点評価値を取得し、得られた焦点評価値が最大の位置を合焦位置として、その位置にフォーカスレンズ群を移動させる。また、CPU110は、AF時に被写体が暗いと判断すると、あるいは、被写体のコントラストが低いと判断すると、AF補助光ランプ制御部158を介してAF補助光ランプ18を発光させ、被写体にAF補助光を照射させてAF制御を実行する。
レンズ群121は、ズームレンズ及びフォーカスレンズを含み、レンズ駆動部126によって駆動される。フォーカスレンズ群は、フォーカスモータに駆動されて前後方向に移動し、ズームレンズ群は、ズームモータに駆動されて前後方向に移動する。
絞り122は、撮像素子125の前方に配設されており、絞り駆動部128によってF値(絞り値)が切り換えられる。
撮像素子125は、たとえば、所定のカラーフィルタ配列のカラーCCDで構成されており、撮影光学系124によって結像された被写体の画像を電子的に撮像する。
タイミングジェネレータ(TG)130は、CPU110からの指令に応じて、この撮像素子125を駆動するためのタイミング信号を出力する。
アナログ信号処理部132は、撮像素子125から出力された画像信号に対して相関二重サンプリング処理(撮像素子の出力信号に含まれるノイズ(特に熱雑音)等を軽減することを目的として、撮像素子の1画素毎の出力信号に含まれるフィードスルー成分レベルと画素信号成分レベルとの差をとることにより正確な画素データを得る処理)を行い、増幅して出力する。
A/Dコンバータ134は、アナログ信号処理部132から出力されたR、G、Bのアナログの画像信号をデジタルの画像信号に変換する。
画像信号処理部138は、同時化回路(単板CCDのカラーフィルタ配列に伴う色信号の空間的なズレを補間して色信号を同時式に変換する処理回路)、ホワイトバランス補正回路、ガンマ補正回路、輪郭補正回路、輝度・色差信号生成回路等を含み、CPU110からの指令に従い、入力された画像信号に所要の信号処理を施して、輝度データ(Yデータ)と色差データ(Cr,Cbデータ)とからなる画像データ(YUVデータ)を生成する。
圧縮伸張処理部140は、CPU110からの指令に従い、入力された画像データに所定形式の圧縮処理を施し、圧縮画像データを生成する。また、CPU110からの指令に従い、入力された圧縮画像データに所定形式の伸張処理を施し、非圧縮の画像データを生成する。
顔検出部142は、CPU110からの指令に従い、入力された画像データから画像内の顔領域を抽出し、その位置(たとえば、顔領域の重心)を検出する。この顔領域の抽出は、たとえば、原画像から肌色データを抽出し、肌色範囲と判断された測光点のクラスタを顔として抽出する。この他、画像から顔領域を抽出する方法としては、測光データを色相と彩度に変換し、変換した色相・彩度の二次元ヒストグラムを作成し、解析することで、顔領域を判断する方法や、人の顔の形状に相当する顔候補領域を抽出し、その領域内の特徴量から顔領域を決定する方法、画像から人の顔の輪郭を抽出し、顔領域を決定する方法、複数の顔の形状をしたテンプレートを用意し、そのテンプレートと画像との相関を計算し、この相関値により顔候補領域とすることで人の顔を抽出する方法等が知られており、これらの方法を用いて抽出することができる。
積算部144は、CPU110からの指令に従い、入力された画像信号からAE制御、AWB制御及びAF制御に必要な物理量を算出する。たとえば、AE制御に必要な物理量として、1画面を複数のエリア(たとえば16×16)に分割し、分割したエリアごとにR、G、Bの画像信号の積算値を算出する。また、積算部144は、AWB制御に必要な物理量として、1画面を複数のエリア(例えば、16×16)に分割し、分割したエリアごとにR、G、Bの画像信号の色別の平均積算値を算出する。また、積算部144は、AF制御に必要な物理量として、画像の鮮鋭度を示す焦点評価値を算出する。
外部メモリ制御部146は、CPU110からの指令に従い、記録媒体13スロット14に装填された記録媒体13に対してデータの読み/書きを制御する。
表示制御部148は、CPU110からの指令に従い、モニタ28への表示を制御する。すなわち、CPU110からの指令に従い、入力された画像信号をモニタ28に表示するための映像信号(たとえば、NTSC信号やPAL信号、SCAM信号)に変換してモニタ28に出力するとともに、所定の文字、図形情報をモニタ28に出力する。
メインメモリ150は、メモリ制御部136によって制御され、CPU110の作業用領域として利用されるとともに、画像データの一時記憶領域として利用される。
撮影者好みの被写体検出回路部152は、顔検出部142において検出された顔領域の画像データに基づいて、検出された顔の年齢及び性別の推定を行い、撮影者が希望する性別及び年齢の顔を選択して検出する。
図4に撮影者好みの被写体検出回路部152の概念図を示す。撮影者好みの被写体検出回路部152は、主として、年齢/性別毎の平均顔データ格納部、被写体年齢推定部、被写体性別推定部、撮影者の希望する被写体の性別設定部、撮影者の希望する性別かつ最年少の被写体判定部とで構成され、顔検出部142において検出された顔領域の画像データ、撮影者が希望する被写体の性別などの情報が入力されると、最年少かつ撮影者が希望する性別の被写体の顔の情報が出力される。
撮影者好みの被写体検出回路部152の動作について説明する。年齢/性別毎の平均顔データ格納部には、図5に示すような年齢(例えば、15歳〜19歳、20歳〜24歳、25歳〜29歳・・・などの所定の範囲の年齢)、性別毎の平均顔データが格納されている(特許文献2参照)。被写体年齢推定部及び被写体性別推定部は、入力された顔領域の画像データの目、鼻などの部位の位置、部位間の距離、輪郭等の特徴点の情報を解析することによって検出した顔情報と、年齢、性別毎の平均顔データとをマッチングさせて、入力された顔の所定の範囲の年齢と性別とを推定する。
撮影者の希望する被写体の性別設定部は、入力された性別を撮影者が希望する被写体の性別と設定し、撮影者の希望する性別かつ最年少の被写体判定部は、入力された顔のうち、設定された性別、かつ最年少の顔を撮影者好みの被写体の顔と選定し、その情報を出力する。なお、撮影者好みの被写体検出回路部152から出力された情報はCPU110に入力され、撮影者好みの被写体の顔に対して合焦制御、露出制御が行われる。
次に、以上のように構成された本実施の形態のデジタルカメラ1の作用について説明する。図6は、デジタルカメラ1の撮影、記録処理の流れを示すフローチャートである。電源ボタン26を押下し、デジタルカメラ1の電源を投入すると、デジタルカメラ1は、撮影モードの下で起動する。
撮影者が操作部112を介して性別の入力を行ったかどうか、すなわち撮影者が鮮明に撮影したいと希望する被写体の性別を設定するかどうかが判断される(ステップS1)。性別の設定を行う場合(ステップS1でYES)には、撮影者好みの被写体検出回路部152の性別設定部は、入力された性別を撮影者が希望する被写体の性別と設定する(ステップS2)。性別の設定を行わない場合(ステップS1でNO)には、そのまま次のステップへ進む。
撮像処理が開始される(ステップS3)。まず、レンズユニット12が所定位置まで繰り出される。そして、レンズユニット12が所定位置まで繰り出されると、撮像素子125によってスルー画像用の撮影が行われ、モニタ28にスルー画像が表示される。すなわち、撮像素子125で連続的に画像が撮像され、その画像信号が連続的に処理されて、スルー画像用の画像データが生成される。生成された画像データは、順次表示制御部148に加えられ、表示用の信号形式に変換されて、モニタ28に出力される。
顔検出部142において、入力された画像信号から被写体の顔領域が検出され(ステップS4)、撮影者好みの被写体検出回路部152の被写体年齢推定部及び被写体性別推定部において、ステップS4で検出された顔の年齢及び性別の推定が行われる(ステップS5)。ステップS4で複数の顔領域が検出された場合には、各顔毎に年齢及び性別の推定が行われる。
シャッターボタン22が半押しされたか、すなわちS1がONされたかどうかが判断される(ステップS6)。S1がONされていない場合(ステップS6でNO)には、ステップS3に戻り、再度スルー画撮像処理が行われる。
S1がONされた場合(ステップS6でYES)には、ステップS5の年齢、性別推定処理の結果に基づいて、撮影者好みの被写体の顔が検出されたかどうかが判断される(ステップS7)。すなわち、撮影者好みの被写体検出回路部152の撮影者の希望する性別かつ最年少の被写体判定部において、ステップS2で性別が設定されている場合には、設定された性別かつ最年少の顔がステップS4で検出された顔の中から判定できたかどうかが判断される。同様に、ステップS2で性別が判定されていない場合には、最年少の顔がステップS4で検出された顔の中から判定できたかどうかが判断される。
設定された性別かつ最年少の顔又は最年少の顔が検出された場合(ステップS7でYES)には、設定された性別かつ最年少の顔又は最年少の顔に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS8)。
設定された性別かつ最年少の顔又は最年少の顔が検出されなかったり、複数の顔が検出されたりした場合(ステップS7でNO)には、ステップS4において顔検出がされたかどうかが判断される(ステップS9)。ステップS4において顔検出がされた場合(ステップS9でYES)には、検出された顔領域のうちの最大の顔領域に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS10)。ステップS4において顔検出がされなかった場合(ステップS9でNO)には、通常の撮影準備処理、例えば画像データの中央付近の所定の領域に対してAE、AF、AWBの各処理を実行する(ステップS11)。
撮影者は、AE、AF、AWBの各処理後にモニタ28に表示されるスルー画像を見てレンズユニット12のピント状態等を確認し、撮影を実行する。すなわち、シャッターボタン22を全押しする。
シャッターボタン22が全押しされたか、すなわちS2がONされたかどうかかどうかが判断される(ステップS12)。S2がONされなかった場合(ステップS12でNO)には、再度ステップS7が行われる。
S2がONされた場合(ステップS12でYES)には、CPU110にS2ON信号が入力される。CPU110は、このS2ON信号に応動して、以下に示すような撮影処理(ステップS13)、記録処理(ステップS14)を実行する。
まず、上記のAE処理で求めた絞り値、シャッタースピードで撮像素子125を露光し、記録用の画像を撮像する。この際、フラッシュ16を発光させる場合は、フラッシュ発光制御部156を介して、プリ発光の結果から求めたフラッシュ16の発光量に基づいてフラッシュ16を発光させる。
撮像素子125から出力された記録用の画像信号は、アナログ信号処理部132、A/Dコンバータ134を介して画像信号処理部138に加えられる。画像信号処理部138において生成された、輝度データと色差データとからなる画像データ(YUVデータ)は、一旦メインメモリ150に格納されたのち、圧縮伸張処理部140に加えられる。
圧縮伸張処理部140で生成された圧縮画像データは、メインメモリ150に格納され、所定フォーマットの静止画像ファイル(たとえば、Exif)として、外部メモリ制御部146を介して記録媒体13に記録される。
本実施の形態によれば、一般的に主要被写体とされる最年少の被写体に対して、自動的に合焦処理、露出補正が行われることにより、撮影者が特別な操作を行うことなく、最年少の被写体を鮮明に撮影することができる。
なお、本実施の形態では、5歳毎の所定の範囲の年齢の平均顔データとマッチングを行うことにより、被写体がどの所定の範囲の年齢に属しているかを推定したが、所定の範囲の年齢は5歳の範囲に限らない。また、各年齢毎の平均顔データを格納し、被写体の年齢を推定するようにしてもよい。
また、本実施の形態では、ステップS7において、設定された性別かつ最年少の顔又は最年少の顔が検出されなかったり、複数の顔が検出されたりした場合には、最も大きい顔領域に対して合焦制御や露出制御を行った(ステップS10)が、設定された性別かつ最年少の顔又は最年少の顔が検出されなかった場合と、複数の顔が検出された場合とで場合分けし、複数の顔が検出された場合には、検出された顔のうちの最大の顔に合焦制御や露出制御を行うようにしてもよい。
<第2の実施の形態>
本発明に係る第1の実施の形態は、性別を設定し、設定された性別の最年少の被写体を撮影者が所望する被写体として合焦制御及び露出制御を行ったものであるが、撮影者が所望する被写体は最年少の被写体に限らない。
本発明に係る第1の実施の形態は、性別を設定し、設定された性別の最年少の被写体を撮影者が所望する被写体として合焦制御及び露出制御を行ったものであるが、撮影者が所望する被写体は最年少の被写体に限らない。
本発明に係る第2の実施の形態は、撮影者が所望する被写体の性別及び年齢を入力することで、撮影者が所望する被写体に対して合焦制御及び露出制御を行うものである。図7は、第2の実施の形態のデジタルカメラ2の電気的構成を示すブロック図である。なお、第1の実施の形態と同一の部分については、同一の符号を付し、説明を省略する。
撮影者好みの被写体検出回路部154(図7参照)は、顔検出部142において検出された顔領域の画像データに基づいて、検出された顔の年齢及び性別の推定を行い、撮影者が希望する性別及び年齢の顔を選択して検出する。
図8に撮影者好みの被写体検出回路部154の概念図を示す。撮影者好みの被写体検出回路部154は、主として、年齢/性別毎の平均顔データ格納部、被写体年齢推定部、被写体性別推定部、撮影者の希望する被写体の性別設定部、撮影者の希望する被写体の年齢設定部、設定された性別かつ年齢の被写体判定部とで構成され、顔検出部142において検出された顔領域の画像データ、撮影者が希望する被写体の性別及び年齢などの情報が入力されると、入力された性別及び年齢の被写体の顔の情報が出力される。
撮影者好みの被写体検出回路部154の動作について説明する。被写体年齢推定部及び被写体性別推定部は、入力された顔領域の画像データと、年齢/性別毎の平均顔データ格納部に格納された年齢、性別毎の平均顔データとをマッチングさせて、入力された顔の年齢(年齢でも、所定の範囲の年齢でもよい)と性別とを推定する。
撮影者の希望する被写体の性別設定部は、入力された性別を撮影者が希望する被写体の性別と設定する。撮影者の希望する被写体の年齢設定部は、入力された年齢を含む所定の範囲の年齢(例えば、22歳と入力された場合には20歳〜24歳)を撮影者が希望する被写体の年齢と設定する。
設定された性別かつ年齢の被写体判定部は、入力された顔のうち、設定された性別及び所定の範囲の年齢の顔を撮影者好みの被写体の顔と選択し、その情報を出力する。なお、撮影者好みの被写体検出回路部154から出力された情報はCPU110に入力され、撮影者好みの被写体の顔に対して合焦制御、露出制御が行われる。
次に、以上のように構成された本実施の形態のデジタルカメラ2の作用について説明する。図9は、デジタルカメラ2の撮影、記録処理の流れを示すフローチャートである。
撮影者が操作部112を介して性別及び年齢の入力を行う(ステップS21)。すなわち、撮影者好みの被写体検出回路部154の性別設定部は、入力された性別を撮影者が希望する被写体の性別と設定し、年齢設定部は、入力された年齢を含む範囲の年齢を撮影者が希望する被写体の年齢と設定する。
撮像処理が開始され(ステップS3)、顔検出部142において撮像された画像信号から被写体の顔領域が検出され(ステップS4)、撮影者好みの被写体検出回路部154の被写体年齢推定部及び被写体性別推定部において、ステップS4で検出された顔の年齢及び性別の推定が行われる(ステップS5)。ステップS4で複数の顔領域が検出された場合には、各顔毎に年齢及び性別の推定が行われる。
S1がONされたかどうかが判断される(ステップS6)。S1がONされていない場合(ステップS6でNO)には、ステップS3に戻り、再度スルー画撮像処理が行われる。S1がONされた場合(ステップS6でYES)には、ステップS5の年齢、性別推定処理の結果に基づいて、撮影者好みの被写体の顔が検出されたかどうかが判断される(ステップS22)。すなわち、撮影者好みの被写体検出回路部154の設定された性別かつ年齢の被写体判定部において、ステップS21で設定された性別及び年齢の顔が、ステップS4で検出された顔の中から判定できたかどうかが判断される。
設定された性別かつ年齢の顔が検出された場合(ステップS22でYES)には、設定された性別かつ年齢の顔に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS23)。
設定された性別かつ年齢の顔が検出されなかったり、設定された性別かつ年齢の顔が複数検出されたりした場合(ステップS22でNO)には、ステップS4において顔検出がされたかどうかが判断される(ステップS9)。ステップS4において顔検出がされた場合(ステップS9でYES)には、検出された顔領域のうちの最大の顔領域に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS10)。ステップS4において顔検出がされなかった場合(ステップS9でNO)には、通常の撮影準備処理、例えば画像データの中央付近の所定の領域に対してAE、AF、AWBの各処理を実行する(ステップS11)。
撮影者は、AE、AF、AWBの各処理後にモニタ28に表示されるスルー画像を見てレンズユニット12のピント状態等を確認し、撮影を実行する。すなわち、シャッターボタン22を全押しする。
S2がONされたかどうかかどうかが判断される(ステップS12)。S2がONされなかった場合(ステップS12でNO)には、再度ステップS22が行われる。
S2がONされた場合(ステップS12でYES)には、CPU110にS2ON信号が入力される。CPU110は、このS2ON信号に応動して、撮影処理(ステップS13)、記録処理(ステップS14)を実行する。
本実施の形態によれば、予め撮影者が望む性別及び年齢を設定することにより、自動的に合焦処理、露出補正が行われるため、撮影者が特別な操作を行うことなく、撮影者が望む被写体を鮮明に撮影することができる。
なお、本実施の形態では、ステップS22において、設定された性別かつ年齢の顔が検出されなかったり、設定された性別かつ年齢の顔が複数検出されたりした場合には、最も大きい顔領域に対して合焦制御や露出制御を行った(ステップS10)が、設定された性別かつ年齢の顔が検出されなかった場合と、設定された性別かつ年齢の顔が複数検出された場合とで場合分けし、設定された性別かつ年齢の顔が複数検出された場合には、検出された顔のうちの最大の顔に合焦制御や露出制御を行うようにしてもよい。
<第3の実施の形態>
本発明に係る第1の実施の形態は、性別を設定し、設定された性別の最年少の被写体を撮影者が所望する被写体として合焦制御及び露出制御を行ったものであるが、撮影者が所望する被写体は最年少の被写体に限らない。
本発明に係る第1の実施の形態は、性別を設定し、設定された性別の最年少の被写体を撮影者が所望する被写体として合焦制御及び露出制御を行ったものであるが、撮影者が所望する被写体は最年少の被写体に限らない。
本発明に係る第3の実施の形態は、過去に撮影された画像の被写体の年齢分布をとり、最も撮影頻度の高い年齢を撮影者が所望する被写体と推定して、合焦制御及び露出制御を行うものである。図10は、第3の実施の形態のデジタルカメラ3の電気的構成を示すブロック図であり、なお、第1の実施の形態と同一の部分については、同一の符号を付し、説明を省略する。
撮影者好みの被写体検出回路部156(図10参照)は、顔検出部142において検出された顔領域の画像データに基づいて、検出された顔の年齢及び性別の推定を行い、撮影者が希望する年齢の顔を選択して検出する。
図8に撮影者好みの被写体検出回路部156の概念図を示す。撮影者好みの被写体検出回路部156は、主として、年齢/性別毎の平均顔データ格納部、被写体年齢推定部、過去に撮影した人物の年齢分布取得部、年齢分布の最大頻度に一致又は最も近い被写体判定部とで構成され、顔検出部142において検出された顔領域の画像データ、過去に撮影した画像データのタグに記録されている被写体の年齢(年齢でも、所定の範囲の年齢でもよい)・性別の情報が入力されると、過去に撮影した年齢分布の最大頻度に一致又は最も近い被写体の顔の情報が出力される。
撮影者好みの被写体検出回路部156の動作について説明する。被写体年齢推定部は、入力された顔領域の画像データと、年齢/性別毎の平均顔データ格納部に格納された年齢、性別毎の平均顔データとをマッチングさせて、入力された顔の所定の範囲の年齢を推定する。
過去に撮影した人物の年齢分布取得部は、過去に撮影された被写体の年齢の年齢分布をとり、最大頻度で撮影された年齢を検出する。なお、撮影された被写体の年齢、性別は、画像データのタグに記録されている。
年齢分布の最大頻度に一致又は最も近い被写体判定部は、入力された顔のうち、年齢分布の最大頻度に一致する被写体の顔を撮影者好みの被写体の顔と選択し、その情報を出力する。また、年齢分布の最大頻度に一致する被写体が無い場合には、入力された顔のうち、年齢分布の最大頻度に最も近い被写体を被写体の顔と判定する。なお、撮影者好みの被写体検出回路部156から出力された情報はCPU110に入力され、撮影者好みの被写体の顔に対して合焦制御、露出制御が行われる。
次に、以上のように構成された本実施の形態のデジタルカメラ3の作用について説明する。図12は、デジタルカメラ3の撮影、記録処理の流れを示すフローチャートである。
撮像処理が開始され(ステップS3)、顔検出部142において撮像された画像信号から被写体の顔領域が検出され(ステップS4)、撮影者好みの被写体検出回路部156の被写体年齢推定部において、ステップS4で検出された顔の年齢の推定が行われる(ステップS5’)。ステップS4で複数の顔領域が検出された場合には、各顔毎に年齢の推定が行われる。
過去に撮影された画像データが記録媒体13に記録されているかどうかが判断される(ステップS24)。記録媒体13に画像が記録されている場合(ステップS24でYES)には、記録媒体13に記録された画像データのタグに記録されている被写体の年齢の情報を取得し、その年齢の年齢分布をとり、最大頻度の年齢分布を判断する(ステップS25)。記録媒体13に画像が記録されていない場合(ステップS24でNO)には、ステップS4において顔検出がされたかどうかが判断される(ステップS9)。ステップS4において顔検出がされた場合(ステップS9でYES)には、検出された顔領域のうちの最大の顔領域に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS10)。ステップS4において顔検出がされなかった場合(ステップS9でNO)には、通常の撮影準備処理、例えば画像データの中央付近の所定の領域に対してAE、AF、AWBの各処理を実行する(ステップS11)。
S1がONされたかどうかが判断される(ステップS6)。S1がONされていない場合(ステップS6でNO)には、ステップS3に戻り、再度スルー画撮像処理が行われる。S1がONされた場合(ステップS6でYES)には、ステップS5’の年齢推定処理の結果に基づいて、撮影者好みの被写体の顔が検出されたかどうかが判断される(ステップS26)。すなわち、撮影者好みの被写体検出回路部156の年齢分布の最大頻度に一致又は最も近い被写体判定部において、年齢分布の最大頻度に一致する年齢の被写体の顔が、ステップS4で検出された顔の中から判定できたかどうかが判断される。
年齢分布の最大頻度に一致する年齢の顔が検出された場合(ステップS26でYES)には、設定された性別かつ年齢の顔に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS27)。
年齢分布の最大頻度に一致する年齢の顔が検出されなかったり、年齢分布の最大頻度に一致する年齢の顔が複数検出されたりした場合(ステップS26でNO)には、ステップS4において顔検出がされたかどうかが判断される(ステップS9)。ステップS4において顔検出がされなかった場合(ステップS9でNO)には、通常の撮影準備処理を実行する(ステップS11)。
ステップS4において顔検出がされた場合(ステップS9でYES)には、年齢分布の最大頻度に一致する年齢の被写体の顔が複数検出されたかどうかが判断される(ステップS28)。年齢分布の最大頻度に一致する年齢の被写体の顔が複数検出された場合(ステップS28でYES)には、年齢分布の最大頻度に一致する年齢の被写体の顔がのうちの最も大きい顔領域に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS29)。
年齢分布の最大頻度に一致する年齢の被写体の顔が複数検出されていない場合(ステップS28でNO)には、別の年齢の被写体の顔が検出されているということを意味するため、最も撮影頻度の高い年齢に最も近い年齢の被写体のうちの、最も大きい顔領域に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS30)。
撮影者は、AE、AF、AWBの各処理後にモニタ28に表示されるスルー画像を見てレンズユニット12のピント状態等を確認し、撮影を実行する。すなわち、シャッターボタン22を全押しする。
S2がONされたかどうかかどうかが判断される(ステップS12)。S2がONされなかった場合(ステップS12でNO)には、再度ステップS22が行われる。
S2がONされた場合(ステップS12でYES)には、CPU110にS2ON信号が入力される。CPU110は、このS2ON信号に応動して、撮影処理(ステップS13)、記録処理(ステップS14)を実行する。
本実施の形態によれば、過去の撮影の情報を用いることで、撮影者が何ら設定を行うことなく、自動的に、撮影者の望む被写体を鮮明に撮影することができる。これにより、カメラの操作に不慣れな撮影者であっても、容易な操作で所望の画像を撮影することができる。
なお、本実施の形態では、年齢のみを考慮して合焦制御や露出制御を行う被写体を決定したが、性別の設定を行ない、該当する性別のみを対象にして上記処理を行うようにしてもよい。
また、本実施の形態では、撮影された被写体の年齢、性別を画像データのタグに記録したが、被写体の年齢、性別の情報のみを別のデータとして記録してもよい。また、記録する場所は、記録媒体13でもよいし、メインメモリ150でもよい。
<第4の実施の形態>
本発明に係る第3の実施の形態は、過去に撮影された画像の被写体の年齢分布をとり、最も撮影頻度の高い年齢を撮影者が所望する被写体と推定することで、設定を行うことなく所望の被写体に対して合焦制御及び露出制御を行うものであるが、設定を行うことなく所望の被写体に対して合焦制御及び露出制御を行う方法はこれに限らない。
本発明に係る第3の実施の形態は、過去に撮影された画像の被写体の年齢分布をとり、最も撮影頻度の高い年齢を撮影者が所望する被写体と推定することで、設定を行うことなく所望の被写体に対して合焦制御及び露出制御を行うものであるが、設定を行うことなく所望の被写体に対して合焦制御及び露出制御を行う方法はこれに限らない。
本発明に係る第4の実施の形態は、過去に撮影された画像の被写体の性別分布をとり、撮影頻度の高い性別を撮影者が所望する被写体と推定して、合焦制御及び露出制御を行うものである。図13は、第4の実施の形態のデジタルカメラ4の電気的構成を示すブロック図であり、なお、第1及び第3の実施の形態と同一の部分については、同一の符号を付し、説明を省略する。
撮影者好みの被写体検出回路部158(図13参照)は、顔検出部142において検出された顔領域の画像データに基づいて、検出された顔の年齢及び性別の推定を行い、撮影者が希望する性別の顔を選択して検出する。
図9に撮影者好みの被写体検出回路部158の概念図を示す。撮影者好みの被写体検出回路部156は、主として、年齢/性別毎の平均顔データ格納部、被写体性別推定部、過去に撮影した人物の性別分布取得部、撮影頻度の高い性別の被写体判定部とで構成され、顔検出部142において検出された顔領域の画像データ、過去に撮影した画像データのタグに記録されている被写体の年齢(年齢でも、所定の範囲の年齢でもよい)・性別の情報が入力されると、過去に撮影した撮影頻度の高い性別の被写体の顔の情報が出力される。
撮影者好みの被写体検出回路部158の動作について説明する。被写体年齢推定部は、入力された顔領域の画像データと、年齢/性別毎の平均顔データ格納部に格納された年齢、性別毎の平均顔データとをマッチングさせて、入力された顔の所定の範囲の年齢を推定する。
過去に撮影した人物の性別分布取得部は、過去に撮影された被写体の性別分布をとり、撮影頻度の高い性別を検出する。
撮影頻度の高い性別の被写体判定部は、入力された顔のうち、撮影頻度の高い被写体の顔を撮影者好みの被写体の顔と選択し、その情報を出力する。なお、撮影者好みの被写体検出回路部158から出力された情報はCPU110に入力され、撮影者好みの被写体の顔に対して合焦制御、露出制御が行われる。
次に、以上のように構成された本実施の形態のデジタルカメラ4の作用について説明する。図14は、デジタルカメラ4の撮影、記録処理の流れを示すフローチャートである。
撮像処理が開始され(ステップS3)、顔検出部142において撮像された画像信号から被写体の顔領域が検出され(ステップS4)、撮影者好みの被写体検出回路部158の被写体性別推定部において、ステップS4で検出された顔の性別の推定が行われる(ステップS5’’)。ステップS4で複数の顔領域が検出された場合には、各顔毎に性別の推定が行われる。
過去に撮影された画像データが記録媒体13に記録されているかどうかが判断される(ステップS24)。記録媒体13に画像が記録されている場合(ステップS24でYES)には、記録媒体13に記録された画像データのタグに記録されている被写体の性別の情報を取得し、撮影頻度の高い性別を検出する(ステップS26)。記録媒体13に画像が記録されていない場合(ステップS24でNO)には、ステップS4において顔検出がされたかどうかが判断される(ステップS9)。ステップS4において顔検出がされた場合(ステップS9でYES)には、検出された顔領域のうちの最大の顔領域に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS10)。ステップS4において顔検出がされなかった場合(ステップS9でNO)には、通常の撮影準備処理、例えば画像データの中央付近の所定の領域に対してAE、AF、AWBの各処理を実行する(ステップS11)。
S1がONされたかどうかが判断される(ステップS6)。S1がONされていない場合(ステップS6でNO)には、ステップS3に戻り、再度スルー画撮像処理が行われる。S1がONされた場合(ステップS6でYES)には、ステップS5’’の性別推定処理の結果に基づいて、撮影者好みの被写体の顔が検出されたかどうかが判断される(ステップS32)。すなわち、撮影者好みの被写体検出回路部158の撮影頻度の高い性別の被写体判定部において、撮影頻度の高い性別の被写体の顔が、ステップS4で検出された顔の中から判定できたかどうかが判断される。
撮影頻度の高い性別の顔が検出された場合(ステップS32でYES)には、設定された性別かつ年齢の顔に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS33)。
撮影頻度の高い性別の顔が検出されなかったり、撮影頻度の高い性別の顔が複数検出されたりした場合(ステップS32でNO)には、ステップS4において顔検出がされたかどうかが判断される(ステップS9)。ステップS4において顔検出がされなかった場合(ステップS9でNO)には、通常の撮影準備処理を実行する(ステップS11)。
ステップS4において顔検出がされた場合(ステップS9でYES)には、撮影頻度の高い性別の被写体の顔が複数検出されたかどうかが判断される(ステップS34)。撮影頻度の高い性別の被写体の顔が複数検出された場合(ステップS34でYES)には、撮影頻度の高い性別の被写体の顔がのうちの最も大きい顔領域に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS35)。
撮影頻度の高い性別の被写体の顔が複数検出されていない場合(ステップS34でNO)には、別の性別の被写体の顔のみが検出されているというであり、検出された顔領域のうちの最大の顔領域に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS10)。
撮影者は、AE、AF、AWBの各処理後にモニタ28に表示されるスルー画像を見てレンズユニット12のピント状態等を確認し、撮影を実行する。すなわち、シャッターボタン22を全押しする。
S2がONされたかどうかかどうかが判断される(ステップS12)。S2がONされなかった場合(ステップS12でNO)には、再度ステップS22が行われる。
S2がONされた場合(ステップS12でYES)には、CPU110にS2ON信号が入力される。CPU110は、このS2ON信号に応動して、撮影処理(ステップS13)、記録処理(ステップS14)を実行する。
本実施の形態によれば、過去の撮影の情報を用いることで、撮影者が何ら設定を行うことなく、自動的に、撮影者の望む被写体を鮮明に撮影することができる。これにより、カメラの操作に不慣れな撮影者であっても、容易な操作で所望の画像を撮影することができる。
<第5の実施の形態>
本発明に係る第3の実施の形態は、過去に撮影された画像の被写体の年齢分布をとり、最も撮影頻度の高い年齢を撮影者が所望する被写体と推定することで、設定を行うことなく所望の被写体に対して合焦制御及び露出制御を行うものであるが、設定を行うことなく所望の被写体に対して合焦制御及び露出制御を行う方法はこれに限らない。
本発明に係る第3の実施の形態は、過去に撮影された画像の被写体の年齢分布をとり、最も撮影頻度の高い年齢を撮影者が所望する被写体と推定することで、設定を行うことなく所望の被写体に対して合焦制御及び露出制御を行うものであるが、設定を行うことなく所望の被写体に対して合焦制御及び露出制御を行う方法はこれに限らない。
本発明に係る第5の実施の形態は、過去に撮影された画像の被写体の年齢分布及び性別分布をとり、撮影頻度の高い性別かつ最も撮影頻度の高い年齢を撮影者が所望する被写体と推定して、合焦制御及び露出制御を行うものである。図16は、第5の実施の形態のデジタルカメラ5の電気的構成を示すブロック図であり、なお、第1、第3及び第4の実施の形態と同一の部分については、同一の符号を付し、説明を省略する。
撮影者好みの被写体検出回路部160(図16参照)は、顔検出部142において検出された顔領域の画像データに基づいて、検出された顔の年齢及び性別の推定を行い、撮影者が希望する性別及び年齢の顔を選択して検出する。
図17に撮影者好みの被写体検出回路部160の概念図を示す。撮影者好みの被写体検出回路部156は、主として、年齢/性別毎の平均顔データ格納部、被写体年齢別推定部、被写体性別推定部、過去に撮影した人物の性別分布取得部、過去に撮影した人物の年齢分布取得部、撮影頻度の高い性別かつ年齢分布の最大頻度に最も近い被写体判定部とで構成され、顔検出部142において検出された顔領域の画像データ、過去に撮影した画像データのタグに記録されている被写体の年齢(年齢でも、所定の範囲の年齢でもよい)・性別の情報が入力されると、過去に撮影した撮影頻度の高い性別かつ撮影頻度の最も高い年齢の被写体の顔の情報が出力される。
撮影者好みの被写体検出回路部160の動作について説明する。被写体年齢推定部は、入力された顔領域の画像データと、年齢/性別毎の平均顔データ格納部に格納された年齢、性別毎の平均顔データとをマッチングさせて、入力された顔の年齢を推定する。
過去に撮影した人物の性別分布取得部は、過去に撮影された被写体の性別分布をとり、撮影頻度の高い性別を検出し、過去に撮影した人物の年齢分布取得部は、過去に撮影された被写体の年齢の年齢分布をとり、最大頻度で撮影された年齢を検出する。
撮影頻度の高い性別かつ年齢分布の最大頻度に最も近い被写体判定部は、入力された顔のうち、撮影頻度の高い被写体の性別かつ撮影頻度の年齢分布に最も近い年齢の被写体の顔を撮影者好みの被写体の顔と選択し、その情報を出力する。なお、撮影者好みの被写体検出回路部160から出力された情報はCPU110に入力され、撮影者好みの被写体の顔に対して合焦制御、露出制御が行われる。
次に、以上のように構成された本実施の形態のデジタルカメラ5の作用について説明する。図18は、デジタルカメラ5の撮影、記録処理の流れを示すフローチャートである。
撮像処理が開始され(ステップS3)、顔検出部142において撮像された画像信号から被写体の顔領域が検出され(ステップS4)、撮影者好みの被写体検出回路部158の被写体性別推定部において、ステップS4で検出された顔の性別及び年齢の推定が行われる(ステップS5)。ステップS4で複数の顔領域が検出された場合には、各顔毎に性別の推定が行われる。
過去に撮影された画像データが記録媒体13に記録されているかどうかが判断される(ステップS24)。記録媒体13に画像が記録されている場合(ステップS24でYES)には、記録媒体13に記録された画像データのタグに記録されている被写体の性別及び年齢の情報を取得し、撮影頻度の高い性別を検出し(ステップS31)、撮影頻度の最も高い年齢を判定する(ステップS25)。記録媒体13に画像が記録されていない場合(ステップS24でNO)には、ステップS4において顔検出がされたかどうかが判断される(ステップS9)。ステップS4において顔検出がされた場合(ステップS9でYES)には、検出された顔領域のうちの最大の顔領域に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS10)。ステップS4において顔検出がされなかった場合(ステップS9でNO)には、通常の撮影準備処理、例えば画像データの中央付近の所定の領域に対してAE、AF、AWBの各処理を実行する(ステップS11)。
S1がONされたかどうかが判断される(ステップS6)。S1がONされていない場合(ステップS6でNO)には、ステップS3に戻り、再度スルー画撮像処理が行われる。S1がONされた場合(ステップS6でYES)には、ステップS5の性別推定処理及び年齢推定処理の結果に基づいて、撮影者好みの被写体の顔が検出されたかどうかが判断される(ステップS36)。すなわち、撮影者好みの被写体検出回路部160の撮影頻度の高い性別かつ年齢分布の最大頻度に最も近い被写体判定部において、撮影頻度の高い性別かつ年齢分布の最大頻度の年齢の被写体の顔が、ステップS4で検出された顔の中から判定できたかどうかが判断される。
撮影頻度の高い性別かつ年齢分布の最大頻度の年齢の被写体の顔が検出された場合(ステップS36でYES)には、撮影頻度の高い性別かつ年齢分布の最大頻度の年齢の被写体の顔に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS37)。
撮影頻度の高い性別かつ年齢分布の最大頻度の年齢の顔が検出されなかったり、撮撮影頻度の高い性別かつ年齢分布の最大頻度の年齢の顔が複数検出されたりした場合(ステップS36でNO)には、ステップS4において顔検出がされたかどうかが判断される(ステップS9)。ステップS4において顔検出がされなかった場合(ステップS9でNO)には、通常の撮影準備処理を実行する(ステップS11)。
ステップS4において顔検出がされた場合(ステップS9でYES)には、撮影頻度の高い性別の被写体の顔が検出されたかどうかが判断される(ステップS38)。撮影頻度の高い性別の被写体の顔が検出されていない場合(ステップS38でNO)には、別の性別かつ年齢分布の最大頻度の被写体の顔のみが検出されているというであり、検出された顔領域のうちの最大の顔領域に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS10)。
撮影頻度の高い性別の被写体の顔が検出された場合(ステップS38でYES)には、撮影頻度の高い性別の被写体の顔が複数検出されたかどうかが判断される(ステップS39)。撮影頻度の高い性別の被写体の顔が複数検出された場合(ステップS30でYES)には、撮影頻度の高い性別かつ年齢分布の最大頻度の年齢の顔が複数あるということであるため、撮影頻度の高い性別かつ年齢分布の最大頻度の年齢の顔のうちの最大の顔領域に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS40)。
撮影頻度の高い性別の被写体の顔が複数検出されなかった場合(ステップS30でNO)には、撮影頻度の高い性別の顔は検出されているが、年齢分布の最大頻度の年齢の顔が検出されていないということであるため、撮影頻度の高い性別かつ年齢分布の最大頻度に最も近い年齢の被写体の顔領域に対して撮影準備処理、すなわち、AE、AF、AWBの各処理を実行する(ステップS41)。
一般的に、撮影者は、同じ年齢の被写体を撮影するよりも、同じ性別の被写体を撮影することが多い。撮影頻度の高い性別の被写体に対して優先的に合焦制御及び露出制御を行う(ステップS38〜S41)ことにより、撮影者の希望に沿った被写体に対して合焦制御及び露出制御をすることができる。
撮影者は、AE、AF、AWBの各処理後にモニタ28に表示されるスルー画像を見てレンズユニット12のピント状態等を確認し、撮影を実行する。すなわち、シャッターボタン22を全押しする。
S2がONされたかどうかかどうかが判断される(ステップS12)。S2がONされなかった場合(ステップS12でNO)には、再度ステップS22が行われる。
S2がONされた場合(ステップS12でYES)には、CPU110にS2ON信号が入力される。CPU110は、このS2ON信号に応動して、撮影処理(ステップS13)、記録処理(ステップS14)を実行する。
本実施の形態によれば、過去の撮影の情報を用いることで、撮影者が何ら設定を行うことなく、自動的に、撮影者の望む被写体を鮮明に撮影することができる。これにより、カメラの操作に不慣れな撮影者であっても、容易な操作で所望の画像を撮影することができる。
なお、本実施の形態では、撮影頻度の高い性別の被写体に対して優先的に合焦制御及び露出制御を行った(ステップS38〜S41)が、年齢分布の最大頻度の年齢の被写体に対して優先的に合焦制御及び露出制御を行なうようにしてもよい。
なお、本発明の適用は、デジタルカメラに限定されるものではなく、カメラつき携帯電話機やビデオカメラ等の撮像装置、携帯音楽プレーヤー、PDA等のファームウェアがアップデート可能な電子機器にも同様に適用することができる。
1、2、3、4、5…デジタルカメラ、10…カメラボディ、12…レンズユニット、13…記録媒体、26…電源ボタン、28…モニタ、110…CPU、112…操作部、125…撮像素子、130…撮像素子駆動部、132…アナログ信号処理部、134…A/Dコンバータ、136…メモリ制御部、138…画像信号処理部、140…圧縮伸張処理部、142…顔検出部、144…積算部、146…外部メモリ制御部、148…表示制御部、150…メインメモリ、152、154、156、158、160…撮影者好みの被写体検出回路部
Claims (10)
- 被写体像を撮像する撮像手段と、
前記撮像手段により撮像された画像データから被写体の顔領域を検出する顔検出手段と、
前記顔検出手段により検出された顔領域のデータに基づいて、被写体の年齢を推定する年齢推定手段と、
前記顔検出手段により複数の顔領域が検出されると、前記年齢推定手段で推定された年齢に基づいて、前記複数の顔領域の中から所定の年齢の被写体の顔領域を選択する顔領域選択手段と、
前記顔領域選択手段により選択された顔領域に対して、合焦制御及び露出制御の少なくとも一方を行う制御手段と、
を備えたことを特徴とする撮像装置。 - 前記顔領域選択手段は、前記年齢推定手段において推定された年齢がもっとも小さい被写体の顔領域を選択することを特徴とする請求項1に記載の撮像装置。
- 年齢を設定する年齢設定手段を備え、
前記顔領域選択手段は、前記年齢設定手段により設定された年齢の被写体の顔領域を選択することを特徴とする請求項1に記載の撮像装置。 - 前記顔検出手段により検出された顔のデータに基づいて、被写体の性別を推定する性別推定手段と、
性別を設定する性別設定手段と、を備え、
前記顔領域選択手段は、前記性別設定手段により設定された性別の被写体の顔領域を選択することを特徴とする請求項1、2又は3に記載の撮像装置。 - 前記年齢推定手段において推定された被写体の年齢の情報を記録する記録手段と、
前記記録手段に記録された被写体の年齢のうち、最も撮影頻度の高い年齢を判断する年齢検出手段と、を備え、
前記顔領域選択手段は、前記年齢検出手段において最も撮影頻度の高い年齢と判断された年齢の被写体の顔領域を選択することを特徴とする請求項1又は4に記載の撮像装置。 - 被写体像を撮像する撮像手段と、
前記撮像手段により撮像された画像データから被写体の顔領域を検出する顔検出手段と、
前記顔検出手段により検出された顔領域のデータに基づいて、被写体の性別を推定する性別推定手段と、
前記性別推定手段により推定された被写体の性別の情報を記録する記録手段と、
前記記録手段に記録された被写体の性別のうち、撮影頻度の高い性別を検出する性別検出手段と、
前記顔検出手段により複数の顔領域が検出されると、前記複数の顔領域の中から前記性別検出手段において撮影頻度の高い性別と判断された性別の被写体の顔領域を選択する顔領域選択手段と、
前記顔領域選択手段により選択された顔領域に対して合焦制御及び露出制御の少なくとも一方を行う制御手段と、
を備えたことを特徴とする撮像装置。 - 前記顔検出手段により検出された顔領域のデータに基づいて、被写体の年齢を推定する年齢推定手段と、
前記記録手段に記録された被写体の年齢のうち、最も撮影頻度の高い年齢を検出する年齢検出手段と、を備え、
前記記録手段は、前記年齢推定手段により推定された被写体の年齢の情報を記録し、
前記顔領域選択手段は、前記年齢検出手段において最も撮影頻度の高い年齢と判断された年齢の被写体の顔領域を選択することを特徴とする請求項6に記載の撮像装置。 - 前記顔領域選択手段は、前記顔検出手段において検出された顔領域の中から、前記最も撮影頻度の高い年齢と判断された被写体が選択できない場合には、前記撮影頻度の高い年齢に最も近い年齢の被写体を選択することを特徴とする請求項5又は7に記載の撮像装置。
- 前記顔領域選択手段は、前記年齢推定手段、前記年齢設定手段又は前記年齢検出手段により合焦制御及び露出制御の対象とされた被写体と、前記性別設定手段又は前記性別検出手段により合焦制御及び露出制御の対象とされた被写体とが異なる場合には、前記性別設定手段又は前記性別検出手段により選択された被写体の顔領域を選択することを特徴とする請求項4から8のいずれかに記載の撮像装置。
- 前記顔領域選択手段は、合焦制御及び露出制御の対象とされた被写体が複数ある場合には、前記顔検出手段により検出された被写体の顔領域がもっとも大きい被写体を選択することを特徴とする請求項1から9のいずれかに記載の撮像装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007337563A JP2009157242A (ja) | 2007-12-27 | 2007-12-27 | 撮像装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007337563A JP2009157242A (ja) | 2007-12-27 | 2007-12-27 | 撮像装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2009157242A true JP2009157242A (ja) | 2009-07-16 |
Family
ID=40961306
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007337563A Pending JP2009157242A (ja) | 2007-12-27 | 2007-12-27 | 撮像装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2009157242A (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011114769A (ja) * | 2009-11-30 | 2011-06-09 | Nikon Corp | 撮像装置 |
JP2011155605A (ja) * | 2010-01-28 | 2011-08-11 | Nikon Corp | 画像処理装置、撮像装置、および画像処理プログラム |
JP2015109626A (ja) * | 2013-10-23 | 2015-06-11 | 株式会社ニコン | 情報交換用携帯端末装置 |
JP2017098746A (ja) * | 2015-11-24 | 2017-06-01 | 株式会社ブイシンク | 画像処理装置 |
WO2020170670A1 (ja) * | 2019-02-19 | 2020-08-27 | ソニーセミコンダクタソリューションズ株式会社 | 撮像装置、電子機器、および撮像方法 |
-
2007
- 2007-12-27 JP JP2007337563A patent/JP2009157242A/ja active Pending
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2011114769A (ja) * | 2009-11-30 | 2011-06-09 | Nikon Corp | 撮像装置 |
JP2011155605A (ja) * | 2010-01-28 | 2011-08-11 | Nikon Corp | 画像処理装置、撮像装置、および画像処理プログラム |
JP2015109626A (ja) * | 2013-10-23 | 2015-06-11 | 株式会社ニコン | 情報交換用携帯端末装置 |
JP2017098746A (ja) * | 2015-11-24 | 2017-06-01 | 株式会社ブイシンク | 画像処理装置 |
WO2020170670A1 (ja) * | 2019-02-19 | 2020-08-27 | ソニーセミコンダクタソリューションズ株式会社 | 撮像装置、電子機器、および撮像方法 |
CN113424519A (zh) * | 2019-02-19 | 2021-09-21 | 索尼半导体解决方案公司 | 成像装置、电子装置和成像方法 |
US20220108457A1 (en) * | 2019-02-19 | 2022-04-07 | Sony Semiconductor Solutions Corporation | Imaging device, electronic device, and imaging method |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8346073B2 (en) | Image taking apparatus | |
US8462228B2 (en) | Image processing method, apparatus and computer program product, and imaging apparatus, method and computer program product | |
JP4799511B2 (ja) | 撮像装置および方法並びにプログラム | |
JP4644883B2 (ja) | 撮像装置 | |
JP4432054B2 (ja) | 撮像装置及び方法 | |
JP2013013050A (ja) | 撮像装置及びこの撮像装置を用いた表示方法 | |
US20090002518A1 (en) | Image processing apparatus, method, and computer program product | |
JP2011146957A (ja) | 撮像装置、その制御方法およびプログラム | |
JP4697549B2 (ja) | 撮影装置及びその顔検出方法 | |
JP2010093679A (ja) | 撮像装置及び撮像制御方法 | |
JP2009157242A (ja) | 撮像装置 | |
JP4842919B2 (ja) | 表示装置、撮影装置、および表示方法 | |
CN111434104A (zh) | 图像处理装置、摄像装置、图像处理方法及程序 | |
JP2010141609A (ja) | 撮像装置 | |
JP5635450B2 (ja) | 撮像装置、ファインダ及びその表示方法 | |
JP2008298847A (ja) | 撮影方法及びデジタルカメラ | |
JP2009033223A (ja) | 撮像装置 | |
JP5044472B2 (ja) | 画像処理装置、撮像装置、画像処理方法及びプログラム | |
JP2008054031A (ja) | デジタルカメラ及び表示制御方法 | |
JP4964992B2 (ja) | 撮影装置及びその画像記録方法 | |
JP2009139423A (ja) | 撮像装置及び被写体距離算出方法 | |
JP2008005248A (ja) | 撮像装置 | |
JP4761039B2 (ja) | 撮像装置 | |
JP4769693B2 (ja) | 撮像装置、方法、およびプログラム | |
JP4897577B2 (ja) | 撮像装置 |