JP4870887B2 - Imaging apparatus, strobe control method, and program for computer to execute the method - Google Patents

Imaging apparatus, strobe control method, and program for computer to execute the method Download PDF

Info

Publication number
JP4870887B2
JP4870887B2 JP2001304343A JP2001304343A JP4870887B2 JP 4870887 B2 JP4870887 B2 JP 4870887B2 JP 2001304343 A JP2001304343 A JP 2001304343A JP 2001304343 A JP2001304343 A JP 2001304343A JP 4870887 B2 JP4870887 B2 JP 4870887B2
Authority
JP
Japan
Prior art keywords
strobe
face
light
red
light emission
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2001304343A
Other languages
Japanese (ja)
Other versions
JP2003107567A (en
Inventor
憲昭 尾島
賢二 白石
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2001304343A priority Critical patent/JP4870887B2/en
Priority to US10/244,670 priority patent/US7298412B2/en
Publication of JP2003107567A publication Critical patent/JP2003107567A/en
Priority to US11/745,775 priority patent/US7787025B2/en
Priority to US11/745,789 priority patent/US7920187B2/en
Priority to US11/745,753 priority patent/US7973853B2/en
Priority to US11/745,686 priority patent/US7978261B2/en
Priority to US11/745,703 priority patent/US7903163B2/en
Priority to US13/012,558 priority patent/US8421899B2/en
Application granted granted Critical
Publication of JP4870887B2 publication Critical patent/JP4870887B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Stroboscope Apparatuses (AREA)
  • Indication In Cameras, And Counting Of Exposures (AREA)
  • Studio Devices (AREA)
  • Exposure Control For Cameras (AREA)

Description

【0001】
【発明の属する技術分野】
この発明は、撮像装置、ストロボ制御方法、およびその方法をコンピュータが実行するためのプログラムに関し、詳細には、ストロボ機能および顔検出機能をを備えた撮像装置、ストロボ制御方法、およびその方法をコンピュータが実行するためのプログラムに関する。
【0002】
【従来の技術】
ストロボ装置を用いてカラー写真撮影を行う場合に、人間の眼が赤色または金色に光って写るいわゆる赤目現象が生じることがある。かかる赤目現象は、眼の瞳孔を通過した電子閃光装置の発光部の閃光が網膜部分で反射され、その反射光がフィルムに写って発生するものである。より具体的には、眼の網膜部分には網細血管が多数存在し、その血液中のヘモグロビンが赤色であるため、その反射光が赤みを帯びて写ってしまうことによるものである。従来より、赤目を防止するために、人間の瞳孔を縮小させるための赤目防止発光を行った後、本発光を行う技術が知られている。
【0003】
【発明が解決しようとする課題】
しかしながら、従来のストロボ装置を備えたカメラでは、下記の如き種々の問題がある。第1には、顔のアップを撮影する場合に、額等のストロボ光が強く当たった箇所がストロボ光を反射して、白飛びしてしまうという問題がある。第2に、画面中央部と周囲の明るさの差で逆光判定を行っていたため、逆光で人物が画面中央に居ない場合には逆光補正のためのストロボ自動発光を行わず、ストロボを発光するには、強制発光モードに切り替える必要があるという問題がある。第3に、ストロボ光による赤目や白飛びを防ぐために、使用者が赤目モード切替やストロボ弱発光操作を行わなければならないという問題がある。
【0004】
本発明は、上記に鑑みてなされたものであり、使用者の手を煩わせることなく、人物撮影か否かを自動的に判定し、自動的に人物撮影に適した発光を行うことが可能な撮像装置、ストロボ制御方法、およびその方法をコンピュータが実行するためのプログラムを提供することを第1の目的とする。
【0005】
また、本発明は、上記に鑑みてなされたものであり、人物撮影時に自動的に赤目や白飛びを防止することが可能な撮像装置、ストロボ制御方法、およびその方法をコンピュータが実行するためのプログラムを提供することを第2の目的とする。
【0006】
また、本発明は、上記に鑑みてなされたものであり、画面における人物の位置に拘わらず、逆光補正ストロボ発光を行うことが可能な撮像装置、ストロボ制御方法、およびその方法をコンピュータが実行するためのプログラムを提供することを第3の目的とする。
【0007】
【課題を解決するための手段】
上記課題を解決するために、請求項1にかかる発明は、ストロボ機能を備えた撮像装置において、被写体に応じた画像データを入力するための撮像手段と、前記撮像手段から入力される画像データの中から人物の顔を検出するための顔検出手段と、ストロボ光を発するためのストロボ発光手段と、前記顔検出手段による人物の顔の検出結果に基づき、前記ストロボ発光手段を制御するストロボ制御手段と、を備え、前記ストロボ制御手段は、前記顔検出手段により人物の顔が検出された場合に、撮影画面内における顔と判定した部分の面積が所定値以上の場合は、前記撮影画面内における顔と判定した部分の面積が前記所定値未満の場合よりも、前記ストロボ発光手段のストロボ光量を弱めに設定し、ストロボ撮影を行うものである。
【0008】
上記発明によれば、撮像手段は被写体に応じた画像データを入力し、顔検出手段は撮像手段から入力される画像データの中から人物の顔を検出し、ストロボ制御手段は、顔検出手段による人物の顔の検出結果に基づき、ストロボ発光手段を制御することにより、人物撮影かどうかを自動的に判定し、自動的に人物撮影に適した発光を行う。このとき、ストロボ制御手段は、顔検出手段により人物の顔が検出された場合に、撮影画面内における顔と判定した部分の面積が所定値以上の場合は、撮影画面内における顔と判定した部分の面積が所定値未満の場合よりも、ストロボ発光手段のストロボ光量を弱めに設定し、ストロボ撮影を行うことにより、撮影画面内における顔と判定した部分の面積が所定の値以上の場合、顔のアップの撮影であると判断し、ストロボ光量を弱めに発光して、ストロボ撮影を行う。これにより、顔にストロボ光が強く当たることにより生じる白飛びを防止する。
【0009】
また、請求項2にかかる発明は、請求項1にかかる発明において、前記ストロボ制御手段は、前記顔検出手段により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせるものである。
【0010】
上記発明によれば、ストロボ制御手段は、前記顔検出手段により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせることにより、人物撮影かどうかを自動的に判定し、自動的に赤目防止発光を行い、使用者が赤目発光モードに切り替える作業を不要とする。
【0011】
また、請求項3にかかる発明は、請求項2にかかる発明において、赤目防止発光を行う赤目防止発光モードを使用者が設定するための赤目防止発光モード設定手段を備え、前記ストロボ制御手段は、前記赤目防止発光モード設定手段で赤目防止発光モードが設定されている場合、前記顔検出手段により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせる一方、前記赤目防止発光モード設定手段で赤目防止発光モードが設定されていない場合、前記顔検出手段により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせないで、本発光のみを行わせるものである。
【0012】
上記発明によれば、使用者は赤目防止発光モード設定手段により赤目防止発光を行う赤目防止発光モードを設定し、ストロボ制御手段は、赤目防止発光モード設定手段で赤目防止発光モードが設定されている場合、顔検出手段により人物の顔が検出された場合に、ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせる一方、赤目防止発光モード設定手段で赤目防止発光モードが設定されていない場合、顔検出手段により人物の顔が検出された場合に、ストロボ発光手段に、赤目防止発光を行わせないで、本発光のみを行わせる。人物撮影を行う場合でも、シャッターチャンスを優先するために赤目発光を行わないで撮影したい場合がある。使用者が赤目撮影を行うかどうかを選択できるようにすることにより、赤目発光を行いたくない場合は、禁止することで、シャッターチャンスに強い撮影を可能とする。
【0015】
また、請求項にかかる発明は、請求項1〜請求項3のいずれか1つにかかる発明において、前記ストロボ光量を弱める量を使用者が設定するための弱発光量設定手段を備えたものである。
【0016】
上記発明によれば、使用者は弱発光量設定手段によりストロボ光量を弱める量を設定する。例えば、女性を撮影する場合、化粧のせいで、男性を撮影する場合と比べて、ストロボ光が反射しやすい。ユーザがストロボ光を弱める量を設定可能とすることで、状況に応じた撮影を行うことを可能とする。
【0017】
また、請求項にかかる発明は、請求項1〜請求項4のいずれか1つにかかる発明において、前記顔検出手段で検出された顔の部分の明るさと周囲の明るさとを比較し、顔の部分の明るさが周囲の明るさに比して所定値以上暗い場合に、逆光と判断する逆光判断手段を備え、前記ストロボ制御手段は、前記逆光判断手段で逆光と判断された場合に、前記ストロボ発光手段にストロボ発光させるものである。
【0018】
上記発明によれば、逆光判断手段は、顔検出手段で検出された顔の部分の明るさと周囲の明るさとを比較し、顔の部分の明るさが周囲の明るさに比して所定値以上暗い場合に逆光と判断し、ストロボ制御手段は、逆光判断手段で逆光と判断された場合に、ストロボ発光手段にストロボ発光させることにより、人物が画面中央に無くても、逆光と判断でき、逆光補正のためのストロボ発光を行うことが可能となる。
【0019】
また、請求項にかかる発明は、請求項にかかる発明において、前記逆光判断手段で逆光と判断された場合に、前記ストロボ発光手段にストロボ発光させるか否かを使用者が設定するための逆光ストロボ設定手段を備えたものである。
【0020】
上記発明によれば、使用者は逆光ストロボ設定手段により、逆光判断手段で逆光と判断された場合に、前記ストロボ発光手段にストロボ発光させるか否かを使用者が設定する。周囲の明るさよりも顔の明るさが暗い場合でも、撮影意図や状況によっては、ストロボを発光したくない場合がある。使用者がストロボ光による逆光補正をするかどうかを選択可能として、撮影意図や状況に対応する。
【0021】
また、請求項にかかる発明は、請求項1〜請求項のいずれか1つにかかる発明において、前記顔検出手段による人物の顔の検出結果に基づき、ストロボ発光手段を制御するか否かを使用者が設定するための顔検出動作設定手段を備えたものである。
【0022】
上記発明によれば、使用者が顔検出動作設定手段により、記顔検出手段による人物の顔の検出結果に基づき、ストロボ発光手段を制御するか否かを設定する。例えば、風景を撮影するような場合、人物撮影は不要である。かかる風景撮影の場合など、ユーザが顔検出動作を禁止することで、状況に応じた撮影を行う。
【0023】
また、請求項にかかる発明は、請求項1〜請求項のいずれか1つにかかる発明において、前記顔検出手段の人物の顔の検出結果を使用者に報知するための報知手段を備えたものである。
【0024】
上記発明によれば、報知手段は、顔検出手段の人物の顔の検出結果を使用者に報知することにより、顔認識処理が正常に動作したか使用者が判断でき、誤動作している場合は撮影を中止するなどして、撮影が失敗することを防止することを可能とする。
【0025】
また、請求項9にかかる発明は、被写体に応じた画像データを入力する画像入力工程と、前記撮像手段で入力した画像データの中から人物の顔を検出する顔検出工程と、前記顔検工程による人物の顔の検出結果に基づき、ストロボ光を発するためのストロボ発光手段を制御するストロボ制御工程と、を含み、前記ストロボ制御工程では、前記顔検出工程で人物の顔が検出された場合に、撮影画面内における顔と判定した部分の面積が所定値以上の場合は、前記撮影画面内における顔と判定した部分の面積が前記所定値未満の場合よりも、前記ストロボ発光手段のストロボ光量を弱めに設定し、ストロボ撮影を行うものである。
【0026】
上記発明によれば、被写体に応じた画像データを入力し、撮像手段で入力した画像データの中から人物の顔を検出し、人物の顔の検出結果に基づき、ストロボ光を発するためのストロボ発光手段を制御することにより、人物撮影かどうかを自動的に判定し、自動的に人物撮影に適した発光を行う。このとき、人物の顔が検出された場合に、撮影画面内における顔と判定した部分の面積が所定値以上の場合は、撮影画面内における顔と判定した部分の面積が所定値未満の場合よりも、ストロボ発光手段のストロボ光量を弱めに設定することにより、撮影画面内における顔と判定した部分の面積が所定の値以上の場合、顔のアップの撮影であると判断し、ストロボ光量を弱めに発光して、ストロボ撮影を行う。これにより、顔にストロボ光が強く当たることにより生じる白飛びを防止する。
【0027】
また、請求項10にかかる発明は、請求項にかかる発明において、前記ストロボ制御工程は、前記顔検出工程で人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせるものである。
【0028】
上記発明によれば、顔検出工程で人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせることにより、人物撮影かどうかを自動的に判定し、自動的に赤目防止発光を行い、使用者が赤目発光モードに切り替える作業を不要とする。
【0029】
また、請求項11にかかる発明は、請求項10にかかる発明において、赤目防止発光を行う赤目防止発光モードを使用者が設定する赤目防止発光モード設定工程を含み、前記ストロボ制御工程では、前記赤目防止発光モード設定工程で赤目防止発光モードが設定されている場合、前記顔検出工程により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせる一方、前記赤目防止発光モード設定工程で赤目防止発光モードが設定されていない場合、前記顔検出工程により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせないで、本発光のみを行わせるものである。
【0030】
上記発明によれば、使用者が赤目防止発光を行う赤目防止発光モードを設定し、赤目防止発光モードが設定されている場合、人物の顔が検出された場合に、ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせる一方、赤目防止発光モードが設定されていない場合、人物の顔が検出された場合に、ストロボ発光手段に、赤目防止発光を行わせないで、本発光のみを行わせる。人物撮影を行う場合でも、シャッターチャンスを優先するために赤目発光を行わないで撮影したい場合がある。使用者が赤目撮影を行うかどうかを選択できるようにすることにより、赤目発光を行いたくない場合は、禁止することで、シャッターチャンスに強い撮影を可能とする。
【0033】
また、請求項12にかかる発明は、請求項9〜請求項11のいずれか1つにかかる発明において、前記ストロボ光量を弱める量を使用者が設定する弱発光量工程を含むものである。上記発明によれば、使用者がストロボ光量を弱める量を設定する。例えば、女性を撮影する場合、化粧のせいで、男性を撮影する場合と比べて、ストロボ光が反射しやすい。ユーザがストロボ光を弱める量を設定可能とすることで、状況に応じた撮影を行うことを可能とする。
【0034】
また、請求項13にかかる発明は、請求項9〜請求項12のいずれか1つにかかる発明において、前記顔検出工程で検出された顔の部分の明るさと周囲の明るさとを比較し、顔の部分の明るさが周囲の明るさに比して所定値以上暗い場合に、逆光と判断する逆光判断工程を含み、前記ストロボ制御工程では、前記逆光判断工程で逆光と判断された場合に、前記ストロボ発光手段にストロボ発光させるものである。
【0035】
上記発明によれば、検出された顔の部分の明るさと周囲の明るさとを比較し、顔の部分の明るさが周囲の明るさに比して所定値以上暗い場合に、逆光と判断し、逆光と判断された場合に、ストロボ発光手段にストロボ発光させることにより、人物が画面中央に無くても、逆光と判断でき、逆光補正のためのストロボ発光を行うことが可能となる。
【0036】
また、請求項14にかかる発明は、請求項13にかかる発明において、前記逆光判断工程で逆光と判断された場合に、前記ストロボ発光手段にストロボ発光させるか否かを使用者が設定する逆光ストロボ設定工程を含むものである。
【0037】
上記発明によれば、使用者は、逆光と判断された場合にストロボ発光手段にストロボ発光させるか否かを設定する。周囲の明るさよりも顔の明るさが暗い場合でも、撮影意図や状況によっては、ストロボを発光したくない場合がある。使用者がストロボ光による逆光補正をするかどうかを選択可能として、撮影意図や状況に対応する。
【0038】
また、請求項15にかかる発明は、請求項〜請求項14のいずれか1つにかかる発明において、前記顔検出工程による人物の顔の検出結果に基づき、ストロボ発光手段を制御するか否かを使用者が設定する顔検出動作設定工程を含むものである。
【0039】
上記発明によれば、使用者は、人物の顔の検出結果に基づきストロボ発光手段を制御するか否かを設定する。例えば、風景を撮影するような場合、人物撮影は不要である。かかる風景撮影の場合など、ユーザが顔検出動作を禁止することで、状況に応じた撮影を可能とする。
【0040】
また、請求項16にかかる発明は、請求項〜請求項15のいずれか1つにかかる発明において、前記顔検出工程の人物の顔の検出結果を使用者に報知する報知工程を含むものである。上記発明によれば、人物の顔の検出結果を使用者に報知することにより、顔認識処理が正常に動作したか使用者が判断でき、誤動作している場合は撮影を中止するなどして、撮影が失敗することを防止することを可能とする。
【0041】
また、請求項17にかかる発明は、請求項〜請求項16のいずれか1つに記載のストロボ制御方法をコンピュータ実行させるためのプログラムである。上記発明によれば、コンピュータでプログラムを実行することにより、請求項〜請求項16のいずれか1つにかかる発明のストロボ制御方法を実現する。
【0042】
【発明の実施の形態】
以下、図面を参照して、本発明にかかる撮像装置、ストロボ制御方法、およびその方法をコンピュータで実行するためのプログラムを適用したデジタルカメラの好適な実施の形態を詳細に説明する。
【0043】
図1は、本実施の形態にかかるデジタルカメラの外観構成図であり、同図(A)は正面図、同図(B)は側面図、同図(C)は上面図を示している。図1は、上蓋が開成された状態を示している。同図において、1はカメラ本体、2は撮影レンズ、3はストロボユニット、4はファインダ、5は開閉可能に設けられた上蓋、6は上蓋5を開閉可能に支持するヒンジ、7は上蓋5の内側に設けられた液晶モニタ、8は上蓋5の外側に設けられたサブLCD、9は上蓋5の開閉を検出するための上蓋開閉検知スイッチ、10はバリア開閉つまみ、11は撮影等の動作指示を行うためのレリーズスイッチ、12は各モードを選択するためのモード切換えスイッチ、13はストロボ発光を行うためのストロボスイッチ、14は撮影画質を設定するための画質モードスイッチ、15はカーソルキー、16は日付を入力するためのDATEスイッチ、17はENTERキー、18はSELECTキーを示している。
【0044】
モード切換えスイッチ12は、▲1▼カメラの設定を変更したり、確認するためのSETUPモード、▲2▼静止画を記録するための静止画モード、▲3▼動画を記録するための動画モード、▲4▼記録したファイルを再生するための再生モード、▲5▼パソコンと接続して、パソコンにファイルを送ったり、パソコンからカメラ操作するためのPCモード、および▲6▼ネットワークを介して通信を行うための通信モード等を選択するためのものである。
【0045】
図2は、本実施の形態にかかるデジタルカメラの構成を示すブロック図である。同図に示すデジタルカメラは、撮影レンズ2(ズームレンズ2a、フォーカスレンズ2b)、メカ機構(メカニカルシャッタ、絞り、フィルタ等)101、CCD102、F/E(CDS回路、AGC回路、A/D変換回路)103、IPP104、圧縮/伸張回路105、メモリカード106、DRAM107、液晶モニタ7、サブLCD10、操作部108、モータ(ズームレンズモータ109a、フォーカスモータ109b、絞り・シャッターモータ109c)109、ドライバ(ズームドライバ110a、フォーカスドライバ110b、絞り・シャッタードライバ110c)110、SG111、電池112、DC/DCコンバータ113、ACアダプタ114、コントローラ(CPU115a、FLASH_ROM115b、SD_RAM115c)115、通信ドライバ部116、ネットワーク通信部117、およびストロボユニット3を備えている。
【0046】
撮影レンズ2は、被写体を結像するためのものであり、ズーム機能を実現するためのズームレンズ2aと、被写体に合焦させるためのフォーカスレンズ2bとからなる。メカ機構101は、メカニカルシャッタ、被写体の明るさを調整するための絞りや、フィルタ等からなる。CCD102は、撮影レンズ2により結像された被写体像を電気信号に変換して、アナログの画像データとしてF/E103に出力する。
【0047】
F/E103は、CCD102から入力されるアナログの画像データに対して前処理を施すものであり、CCD102から入力されるアナログの画像データを相関二重サンプリングするCDS回路と、CDS回路から出力されるアナログの画像データのゲインを調整するAGC回路と、AGC回路から出力されるアナログの画像データに対してA/D変換を行って、デジタルの画像データをIPP104に出力するA/D変換回路とからなる。
【0048】
IPP104は、入力される画像データに対して各種画像処理を施すものであり、例えば、F/E103から入力されるカラー画像データに対して補間処理を行った後、YUVデータ(輝度Yデータ、色差U、Vデータ)に変換する。
【0049】
圧縮/伸張回路105は、YUVデータを、JPEG方式に準拠した圧縮方式で圧縮処理したり、また、メモリカード106に格納されている圧縮画像データをJPEG方式に準拠した伸張方式で伸張処理する。
【0050】
DRAM107は、撮像した画像データやメモリカード106から読み出した画像データ等を一時的に格納するためのフレームメモリである。メモリカード106は、デジタルカメラ本体に対して着脱可能に設けられ、圧縮画像データを画像ファイルとして格納する。
【0051】
液晶モニタ7は、画像データ等を表示するためのものである。サブLCD8は、デジタルカメラの設定されているモードや動作内容を表示するためのものである。
【0052】
ズームドライバ110aは、コントローラ115から入力される制御信号に応じて、ズームモータ109aを駆動して、ズームレンズ2aを光軸方向に移動させる。フォーカスドライバ110bは、コントローラ115から入力される制御信号に応じて、フォーカスモータ109bを駆動して、フォーカスレンズ2bを光軸方向に移動させる。絞り・シャッタードライバ110cは、コントローラ115から入力される制御信号に応じて、絞り・シャッターモータ119cを駆動して、メカ機構101の絞りの絞り値の設定やメカ機構101のメカニカルシャッタの開閉駆動を行う。
【0053】
SG111は、コントローラ115から入力される制御信号に基づいて、CCD102やF/E103を駆動する。電池112は、例えば、NiCd、ニッケル水素、リチウム等の電池からなり、DC/DCコンバータ113にDC電圧を供給する。ACアダプタ114は、AC電圧をDC電圧に変換してDC/DCコンバータ113に供給する。DC/DCコンバータ113は、電池112やACアダプタ114から入力されるDC電圧のレベルを変換して、デジタルカメラの各部に電力を供給する。
【0054】
通信ドライバ部116は、外部装置(例えば、パーソナルコンピュータ等)と接続して、データ通信を行うためのものである。ネットワーク通信部117は、ネットワークとデータ通信するためのものである。
【0055】
ストロボユニット3は、ストロボ光を発するためのユニットであり、コントローラ115に制御されて、赤目防止発光や本発光を行う。
【0056】
操作部108は、使用者がデジタルカメラに各種指示を与えるための上記図1に示す各種キーやスイッチ(レリーズスイッチ11、モード切換えスイッチ12、ストロボスイッチ13、画質モードスイッチ14、カーソルキー15、DATEスイッチ16、ENTERキー17、SELECTキー18)を備えており、各種キーやスイッチの操作を検出してコントローラ115に出力する。上述のレリーズスイッチ11は、2段階のSWとなっており、その半押しで第1SWオン、その全押しで第2SWオンとなる。デジタルカメラでは、第1SWがオンされるとAE動作およびAF動作が実行され、さらに、第2SWがオンされると撮影動作が実行される。
【0057】
図3は、操作部108のモード切換えスイッチ12でSETUPモードが選択された場合に、液晶モニタ7に表示される記録条件のユーザ設定画面を示している。同図に示す記録条件のユーザ設定画面は、各項目の設定条件(”フォーカス”の[AF/マニュアル]、”顔検出(顔検出動作モード)”の[ON/OFF]、”顔検出自動弱発光(弱設定量の設定)”の「オート/マニュアル(ユーザ弱設定量の大、中、小)]、”赤目防止発光(赤目発光モード)”の「ON/OFF]、”顔検出逆光補正(逆光判定時のストロボ発光の許可)”の「ON/OFF]、”測光点”の「オート/マニュアル]、”長時間露光”の「ON/OFF]、”日付入り”の[ON/OFF])を使用者が設定するための画面である。同図に示す画面で、カーソルキー15により、所望の項目を選択し、選択した項目でSELECTキー18で所望の設定条件を選択し、ENTERキー17で選択した設定条件が設定される。
【0058】
後述するように、使用者が、”顔検出自動弱発光(弱設定量の設定)”の[オート]を選択すると、CPU115aが弱設定量を設定する。他方、使用者が、”顔検出自動弱発光(弱設定量の設定)”の[マニュアル]を選択した場合は、さらに、使用者が、弱設定量(ユーザ弱設定量)の[大、中、小]のいずれかを設定する。
【0059】
同図に示す例では、”フォーカス”は[AF]、”顔検出(顔検出動作モード)”は「ON]、”顔検出自動弱発光(弱設定量の設定)”は[オート]、”赤目防止発光(赤目発光モード)”は[ON]、”顔検出逆光補正(逆光判定時のストロボ発光の許可)”は[ON]、”、”測光点”は[オート]、”長時間露光”は[OFF]、”日付入り”は[OFF])が設定されている。
【0060】
コントローラ115は、デジタルカメラの全体の動作を制御するユニットであり、操作部108からの指示に基づいて、FLASH_ROM115bに格納された制御プログラムに従って、SD_RAM115cをワークエリアとして使用して、デジタルカメラの各部の動作を制御するCPU115aと、CPU115aが実行するための各種制御プログラムや制御に必要なパラメータやデータ等を格納するFLASH_ROM115bと、CPU115aのワークエリアとして使用されるSD_RAM115cとから構成されている。FLASH_ROM115bに格納される制御プログラム、パラメータ、およびデータは、ネットワークを介して配信可能となっており、また、ネットワークを介してダウンロードして格納可能となっている。また、FLASH_ROM115bには、通信ドライバ部116を介して接続される外部装置からプログラム、パラメータ、およびデータが書込可能となっている。
【0061】
また、CPU115aは、▲1▼モニタリング動作、▲2▼AF動作、▲3▼AE動作、▲4▼撮影動作を制御する。また、CPU115aは、静止画を記録するための静止画モード、動画像および音声を記録するための動画モード等を備えており、各モードの実行を制御する。
【0062】
図4は、図2のストロボユニット3の詳細な構成を示すブロック図である。ストロボユニット3は、キセノン管を備え、ストロボ光を発する発光部201、発光部201のキセノン管を発光させるための電荷を蓄積するメインコンデンサ202、メインコンデンサ202を充電させる充電回路(昇圧回路)203、発光部201のキセノン管の発光を開始させる発光開始(トリガ)回路204、発光部201のキセノン管の発光を停止させる発光停止回路205、被写体からの反射光を受光して発光停止回路205に出力する反射光受光部206を備えている。
【0063】
つぎに、上記ストロボユニット3の動作を説明する。CPU115aは、充電時には、充電回路203に充電開始信号を出力する。充電回路203は、CPU115aから充電開始信号が入力されると、DC/DCコンバータ113から入力される出力電圧を昇圧して、メインコンデンサ202の充電を開始する。充電が開始されると、CPU115aは、充電回路203を介して、定期的にメインコンデンサ202の充電電圧を監視する。CPU115aは、メインコンデンサ203が予め設定されているストロボ発光可能電圧まで充電されると、充電停止信号を充電回路203に出力する。充電回路203は、CPU115aから充電停止信号が入力されると、メインコンデンサ202の充電を停止する。
【0064】
CPU115aは、発光部201のキセノン管を発光させる際には、発光開始回路204に発光信号を出力する。発光開始回路204は、CPU115aから発光信号が入力されると、発光開始回路204は、発光部201のキセノン管の発光を開始させる。反射光受光部206は、被写体からの反射光を受光して発光停止回路205に出力する。発信停止回路205は、反射光受光部206から入力される反射光を積分する。発信停止回路205は、反射光の積分量が所定の値になった場合に、発光部201のキセノン管の発光を停止させる(通常のストロボ発光(本発光))。また、反射光の積分量が一定時間を経過しても所定の値に達しない場合や、赤目防止発光のように極小時間だけキセノン管を発光させる場合は、CPU115aは、発光停止信号を発光停止回路205に出力し、これに応じて、発光停止回路205は、キセノン管の発光を停止させる。
【0065】
つぎに、上記CPU115aの制御により実行される▲1▼ストロボ発光動作、▲2▼モニタリング動作、▲3▼静止画撮影動作の基本動作を説明する。
【0066】
▲1▼ストロボ発光動作
操作部108のモード切換えスイッチ12で静止画モードや動画モードが選択され、ストロボスイッチ13がONされている状態で、レリーズスイッチ11が全押しされてSW2がオンされると、CPU115aは、ストロボ発光動作を実行する。具体的には、ストロボ発光動作では、顔検出動作モードが設定されている場合には(上記図3参照)、まず、顔検出処理を実行して人物の顔の検出を行う。具体的には、CCD102より入力された画像データは、F/E(CDS、AGC、A/D)103で処理された後、IPP104に入力する。IPP104で信号処理された後、DRAM107に書き込まれる。CPU115aは、DRAM107に格納された画像データから公知の顔認識技術(ガボール・ウェーブレット変換+グラフマッチング)を使用して、人物の顔を検出する。人物の顔を検出した場合には、人物撮影であると判断することができる。CPU115aは、顔検出の検出結果に基づいて、ストロボユニット3を制御する。付言すると、本実施の形態のデジタルカメラは、人物の顔を検出して人物撮影であると自動的に判断し、使用者の手を煩わすことなく、自動的にストロボユニット3を制御して、人物を適正な明るさで撮影する。なお、ここでは、CPU18aが制御プログラムを実行して顔検出を行うこととしたが、顔検出のための専用のハードウエアを設けることにしても良い。
【0067】
▲2▼モニタリング動作
操作部108のモード切換えスイッチ12で静止画モードや動画モードが選択されると、液晶モニタ7にはモニタリング画像が表示される。具体的には、CCD3より入力される被写体の画像データは、F/E(CDS、AGC、A/D)で処理された後、IPP104に入力する。そして、IPP104で信号処理された後、DRAM107に書き込まれ、DRAM107に格納された画像データに応じたモニタリング画像が液晶モニタ7に表示される。使用者は、この液晶モニタ7に表示される被写体のモニタリング画像を見て撮影の構図を決定することができる。
【0068】
▲3▼静止画撮影動作
CPU115aは、操作部108のモード切換えスイッチ12で静止画モードが選択され後、操作部108のレリーズスイッチ11が全押しされてSW2がオンされると、静止画撮影動作を実行する。CCD102から取り込まれた撮像データは、IPP104で画像処理/圧縮処理が行われた後、DRAM107に書き込まれる。CPU115aは、DRAM107に書き込まれた圧縮画像データを静止画ファイルとしてメモリカード106に書き込む。
【0069】
図7は、本実施の形態にかかるデジタルカメラのストロボ発光動作を説明するためのフローチャートである。図7のフローチャートを参照して、図1のデジタルカメラのストロボ発光動作を説明する。以下の説明では、顔検出動作モードが設定されている場合について説明する。
【0070】
[発光要求初期化処理]
図7において、まず、CPU115aは、ストロボ発光要求をクリアした後(ステップS1)、赤目発光要求をクリアする(ステップS2)。この後、CPU115aは、顔検出処理を実行する(ステップS3)。
【0071】
ここで、顔検出処理を説明する。被写体像の中から正面を向いている人物像を検出する方法は、以下に示す▲1▼〜▲3▼の手法が公知となっており、本実施の形態では、そのうちのいずれかの方法を用いるものとする。
【0072】
▲1▼テレビジョン学会誌Vol.49、No.6、pp.787−797(1995)の「顔領域抽出に有効な修正HSV表色系の提案」に示されるように、カラー画像をモザイク画像化し、肌色領域に着目して顔領域を抽出する方法。
▲2▼電子情報通信学会誌Vol.74−D−II、No.11、pp.1625−1627(1991)の「静止濃淡情景画像からの顔領域を抽出する手法」に示されているように、髪や目や口など正面人物像の頭部を構成する各部分に関する幾何学的な形状特徴を利用して正面人物の頭部領域を抽出する方法。
▲3▼画像ラボ1991−11(1991)の「テレビ電話用顔領域検出とその効果」に示されるように、動画像の場合、フレーム間の人物の微妙な動きによって発生する人物像の輪郭エッジを利用して正面人物像を抽出する方法。
【0073】
つぎに、CPU115aは、露光用AE演算処理を行い、CCD102より取り込んだ画像データからAE演算処理を行う(ステップS4)。ここで、AE演算処理を具体的に説明する。図5は、CCD102の画面(画像フレーム)を複数のエリアY1〜Y35に分割した場合の分割例を示している。図6は、図5において被写体の画像データの一例を示す図である。
【0074】
IPP104は、CCD102から入力された画像データ(各画素データ(R、G、B))に基づいて、測光の対象となるエリアY1〜Y35毎に輝度データY1〜Y35を算出する。以下に輝度データの計算式を示す。下記計算式において、Rn、Gn、Bnは、各エリア内の各画素データ(R、G、B)の平均値を示している。
【0075】

Figure 0004870887
【0076】
IPP104は、▲1▼中央重点測光方式(中央部の明るさに、重点を置き、周囲の明るさを加味して輝度データを決定する方式)、▲2▼部分測光方式(画面内のエリア内のみの輝度データの平均値だけで、輝度データを決定する方式)、▲3▼スポーット測光方式(部分測光と同じ考え方であるが、測光エリアが小さく、1〜2%程度である。)、▲4▼分割測光方式(画面を複数のエリアに分割し、エリア毎に輝度の平均値を求め、それら輝度の分布パターンから輝度データを決定する方式)のうちのいずれかの方式を使用して輝度データYy(測光値)を算出する。
【0077】
また、IPP104は、顔検出動作モードである場合には、顔を含むエリアの輝度データを各々算出し、算出したエリアの輝度データの平均値を輝度データYFace(顔の部分の明るさ)として算出する。図6に示す例では、Y14、Y20、Y21、Y26、Y27のエリアの輝度データの平均値を輝度データYface(顔の部分の明るさ)とする。
【0078】
また、顔検出動作モードである場合には、顔を含むエリアを除いた他のエリア(顔の周りのエリア)の輝度データを各々算出し、算出した他のエリアの輝度データの平均値を輝度データYA(周囲の明るさ)として算出する。図6に示す例では、Y1〜Y13、Y15〜Y19、Y22〜Y25、およびY28〜Y35のエリアの輝度データの平均値を輝度データYA(周囲の明るさ)とする。
【0079】
[ストロボモード確認処理]
そして、CPU115aは、ストロボ禁止モードが設定されているか否かを判断する(ステップS5)。かかるストロボ禁止モードは、ストロボスイッチがOFFされている場合に設定される。この判断の結果、ストロボ禁止モードが設定されている場合は、当該フローを終了する一方、ストロボ禁止モードが設定されていない場合には、ステップS6に移行する。
【0080】
ステップS6では、CPU115aは、強制発光モードが設定されているか否かを判断する。かかる強制発光モードは、上述の記録条件のユーザ設定画面で設定される(上記図3参照)。この判断の結果、強制発光モードが設定されている場合には、ステップS8に移行する一方、強制発光モードが設定されていない場合には、ステップS7に移行する。
【0081】
また、ステップS7では、CPU115aは、上記ステップS4のAE演算の測光結果を参照して、測光値が所定の閾値(所定の明るさ)未満であるか否かを判断する。この判断の結果、測光値が所定の閾値(所定の明るさ)未満でない場合には、ステップS9に移行する一方、測光値が所定の閾値(所定の明るさ)未満である場合には、CPU115aは、ストロボ発光要求をセットする(ステップS8)。
【0082】
[逆光判定処理]
つづいて、CPU115aは、逆光判定時のストロボ発光が許可されている否かを判断する(ステップS9)。この逆光判定時のストロボ発光の許可/不許可は、上述の記録条件のユーザ設定画面で設定される(上記図3参照)。この判断の結果、逆光判定時のストロボ発光が許可されていない場合には、ステップS13に移行する。他方、逆光判定時のストロボ発光が許可されている場合には、CPU115aは、上記顔検出処理で画面内で顔を検出したか否かを判断する(ステップS10)。
【0083】
この判断の結果、顔を検出しなかった場合には、ステップS13に移行する。他方、ステップS10において、顔を検出した場合には、CPU115aは、上記ステップS4のAE演算の測光結果を参照して、顔の部分が周囲の部分よりも、所定値以上暗いか否かを判断する(ステップS11)。この判断の結果、顔の部分が周囲の部分よりも、所定値以上暗くない場合には、ステップS13に移行する一方、顔の部分が周囲の部分よりも、所定値以上暗い場合には、ストロボ発光要求をセットして(ステップS12)、ステップS13に移行する。
【0084】
次に、ここまでの処理で、CPU115aは、ストロボ発光要求がセットされているか判断する(ステップS13)。この判断の結果、ストロボ発光要求がセットされていない場合には、当該フローを終了する一方、ストロボ発光要求がセットされている場合には、ステップS14に移行する。
【0085】
[赤目発光処理]
ステップS14において、CPU115aは、赤目発光モードが設定されているか否かを判断する。この赤目発光モードは、上述の記録条件のユーザ設定画面で設定される(上記図3参照)。この判断の結果、赤目発光モードが設定されている場合には、CPU115aは、赤目発光要求をセットした後(ステップS17)、ステップS18に移行する。他方、赤目発光モードが設定されていない場合には、CPU115aは、画面内で顔を検出したか否か判断する(ステップS15)。この判断の結果、画面内で顔を検出しなかった場合には、ステップS18に移行する。他方、画面内で顔を検出した場合には、CPU115aは、自動赤目発光の許可が設定されているか否かを判断する(ステップS16)。この自動赤目発光の許可/不許可は、上述の記録条件のユーザ設定画面で設定される(上記図3参照)。この判断の結果、自動赤目発光の許可が設定されていない場合には、ステップS18に移行する一方、自動赤目発光の許可が設定されている場合には、赤目発光要求をセットした後(ステップS17)、ステップS18に移行する。ステップS18では、CPU115aは、ストロボ発光量を算出する。
【0086】
[弱発光判定処理]
ステップS19では、CPU115aは、画面内で顔を検出したか否かを判断する。この判断の結果、画面内で顔を検出しなかった場合には、ステップS24に移行する一方、画面内で顔を検出した場合には、顔と判定した部分の面積が、所定値よりも大きい否かを判断する(ステップS20)。この判断の結果、顔と判定した部分の面積が、所定値よりも大きくない場合には、ステップS24に移行する一方、顔と判定した部分の面積が、所定値よりも大きい場合には、CPU115aは、弱設定量が設定されているか否かを判断する(ステップS21)。この弱設定量は、上述の記録条件のユーザ設定画面で設定される(上記図3参照)。この判断の結果、CPU115aは、弱設定量が設定されている場合には、算出したストロボ発光量から使用者が設定したユーザ弱設定量を減算する一方(ステップS22)、弱設定量が設定されていない場合には、算出したストロボ発光量から所定弱設定量を減算する(ステップS23)。
【0087】
続いて、ステップS24において、CPU115aは、赤目発光要求がセットされているか否かを判断する。この判断の結果、赤目発光要求がセットされている場合には、赤目発光処理を行った後(ステップS25)、本発光処理を行う(ステップS26)。他方、赤目発光要求がセットされていない場合には、赤目発光処理を行うことなく、本発光処理を行う(ステップS26)。
【0088】
以上説明したように、本実施の形態によれば、CPU115aは、人の顔を検出することにより人物撮影か否かを判定し、人物撮影で且つストロボを発光する場合には、赤目防止発光を行った後、本発光を行うこととしたので、自動的に人物撮影と判断し、自動的に赤目発光を行うことができ、使用者が赤目発光モードに切り替える手間を省くことが可能となる。
【0089】
また、本実施の形態によれば、顔検出を行って人物撮影か否かを判定し、人物撮影で且つストロボを発光する場合において、自動的に赤目防止発光を行うか否かを使用者が設定可能としたので、赤目発光を行いたくない場合は、禁止することで、シャッターチャンスに強い撮影を行うことが可能となる。
【0090】
また、本実施の形態によれば、CPU115aは、画面内で顔の占める割合が所定の値以上の場合、顔のアップの撮影であると判断し、ストロボ光量を弱めに発光することとしたので、ストロボ光が強く当たった部分の白飛びを防ぐことが可能となる。この場合、ストロボ光量を弱める量(ユーザ設定量)を使用者が設定できることとしたので、状況に応じたストロボ撮影を行うことが可能となる。
【0091】
また、本実施の形態によれば、CPU115aは、顔と判定した位置の明るさと周囲の明るさを比較し、顔と判定した位置の明るさが周囲の明るさよりも所定値以上暗い場合に逆光と判断し、自動的にストロボ発光することとしたので、人物が画面中央に無くても逆光補正のためのストロボ発光を行うことが可能となる。
【0092】
また、本実施の形態によれば、逆光と判断した場合にストロボ発光するか否かを使用者が設定可能としたので、使用者がストロボ光による逆光補正をするかどうかを選択でき、撮影意図や状況に対応した撮影を行うことが可能となる。
【0093】
また、本実施の形態によれば、顔検出動作を行うか否かを使用者が設定できることとしたので、使用者は、人物を撮影するか否かに応じて顔検出動作を行うか否かを選択でき、使用者の使い勝手が良くなる。
【0094】
なお、本実施の形態では、顔検出処理で顔の検出結果を使用者に知らせることにしても良い。例えば、CPU115aは、顔を検出した場合には、液晶モニタ7に表示されている画像データにおいて、人物の顔部分に矩形の枠を表示して、顔が検出された旨を使用者に報知する。図8は、液晶モニタ7に表示される画像データ(モニタリング画像)の表示例、図9は図8の画像データの人物の顔部分に矩形の枠Aを表示した場合の表示例を示している。
【0095】
なお、本発明は、上記した実施の形態に限定されるものではなく、発明の要旨を変更しない範囲で適宜変形可能である。
【0096】
【発明の効果】
以上説明したように、請求項1にかかる発明によれば、ストロボ機能を備えた撮像装置において、被写体に応じた画像データを入力するための撮像手段と、前記撮像手段から入力される画像データの中から人物の顔を検出するための顔検出手段と、ストロボ光を発するためのストロボ発光手段と、前記顔検出手段による人物の顔の検出結果に基づき、前記ストロボ発光手段を制御するストロボ制御手段と、を備え、前記ストロボ制御手段は、前記顔検出手段により人物の顔が検出された場合に、撮影画面内における顔と判定した部分の面積が所定値以上の場合は、撮影画面内における顔と判定した部分の面積が前記所定値未満の場合よりも、前記ストロボ発光手段のストロボ光量を弱めに設定し、ストロボ撮影を行うことにより、人物撮影かどうかを自動的に判定し、自動的に人物撮影に適した発光を行うことが可能となるという効果に加えて、撮影画面内における顔と判定した部分の面積が所定の値以上の場合、顔のアップの撮影であると判断してストロボ光量を弱めに発光して、ストロボ撮影を行うことができ、顔にストロボ光が強く当たることにより生じる白飛びを防止することが可能となるという効果を奏する。
【0097】
また、請求項2にかかる発明によれば、請求項1にかかる発明において、前記ストロボ制御手段は、前記顔検出手段により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせることとしたので、請求項1にかかる発明の効果に加えて、人物撮影かどうかを自動的に判定し、自動的に赤目防止発光を行い、使用者が赤目発光モードに切り替える必要が無くなるという効果を奏する。
【0098】
また、請求項3にかかる発明によれば、請求項2にかかる発明において、赤目防止発光を行う赤目防止発光モードを使用者が設定するための赤目防止発光モード設定手段を備え、前記ストロボ制御手段は、前記赤目防止発光モード設定手段で赤目防止発光モードが設定されている場合、前記顔検出手段により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせる一方、前記赤目防止発光モード設定手段で赤目防止発光モードが設定されていない場合、前記顔検出手段により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせないで、本発光のみを行わせることとしたので、請求項1にかかる発明の効果に加えて、使用者が赤目撮影を行うかどうかを選択でき、赤目発光を行いたくない場合は、赤目防止発光を禁止して、シャッターチャンスに強い撮影が可能となるという効果を奏する。
【0100】
また、請求項にかかる発明によれば、請求項1〜請求項3のいずれか1つにかかる発明において、前記ストロボ光量を弱める量を使用者が設定するための弱発光量設定手段を備えているので、使用者がストロボ光を弱める量を設定でき、状況に応じた撮影を行うことが可能となるという効果を奏する。
【0101】
また、請求項にかかる発明によれば、請求項1〜請求項4のいずれか1つにかかる発明において、前記顔検出手段で検出された顔の部分の明るさと周囲の明るさとを比較し、顔の部分の明るさが周囲の明るさに比して所定値以上暗い場合に、逆光と判断する逆光判断手段を備え、前記ストロボ制御手段は、前記逆光判断手段で逆光と判断された場合に、前記ストロボ発光手段にストロボ発光させることとしたので、請求項1〜請求項4のいずれか1つにかかる発明の効果に加えて、人物が画面中央に無くても、逆光と判断でき、逆光補正のためのストロボ発光を行うことが可能となるという効果を奏する。
【0102】
また、請求項にかかる発明は、請求項にかかる発明において、前記逆光判断手段で逆光と判断された場合に、前記ストロボ発光手段にストロボ発光させるか否かを使用者が設定するための逆光ストロボ設定手段を備えているので、請求項にかかる発明の効果に加えて、使用者がストロボ光による逆光補正をするか否かを選択でき、使用者の撮影意図や状況に対応することが可能となるという効果を奏する。
【0103】
また、請求項にかかる発明によれば、請求項1〜請求項のいずれか1つにかかる発明において、前記顔検出手段による人物の顔の検出結果に基づき、ストロボ発光手段を制御するか否かを使用者が設定するための顔検出動作設定手段を備えているので、請求項1〜請求項のいずれか1つにかかる発明の効果に加えて、ユーザが顔検出動作を禁止することで、状況に応じた撮影を行うことが可能となるという効果を奏する。
【0104】
また、請求項にかかる発明によれば、請求項1〜請求項のいずれか1つにかかる発明において、前記顔検出手段の人物の顔の検出結果を使用者に報知するための報知手段を備えているので、顔認識処理が正常に動作したか使用者が判断でき、誤動作している場合は撮影を中止するなどして、撮影が失敗することを防止することが可能となるという効果を奏する。
【0105】
また、請求項9にかかる発明によれば、被写体に応じた画像データを入力する画像入力工程と、前記撮像手段で入力した画像データの中から人物の顔を検出する顔検出工程と、前記顔検工程による人物の顔の検出結果に基づき、ストロボ光を発するためのストロボ発光手段を制御するストロボ制御工程と、を含み、前記ストロボ制御工程では、前記顔検出工程で人物の顔が検出された場合に、撮影画面内における顔と判定した部分の面積が所定値以上の場合は、撮影画面内における顔と判定した部分の面積が前記所定値未満の場合よりも、前記ストロボ発光手段のストロボ光量を弱めに設定し、ストロボ撮影を行うこととしたので、人物撮影かどうかを自動的に判定し、自動的に人物撮影に適した発光を行うことが可能となるという効果に加えて、撮影画面内における顔と判定した部分の面積が所定の値以上の場合に顔のアップの撮影であると判断してストロボ光量を弱めに発光して、ストロボ撮影を行うことができ、顔にストロボ光が強く当たることにより生じる白飛びを防止することが可能となるという効果を奏する。
【0106】
また、請求項10にかかる発明によれば、請求項にかかる発明において、前記ストロボ制御工程は、前記顔検出工程で人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせることとしたので、請求項にかかる発明の効果に加えて、人物撮影かどうかを自動的に判定し、自動的に赤目防止発光を行い、使用者が赤目発光モードに切り替える必要が無くなるという効果を奏する。
【0107】
また、請求項11にかかる発明によれば、請求項10にかかる発明において、赤目防止発光を行う赤目防止発光モードを使用者が設定する赤目防止発光モード設定工程を含み、前記ストロボ制御工程では、前記赤目防止発光モード設定工程で赤目防止発光モードが設定されている場合、前記顔検出工程により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせる一方、前記赤目防止発光モード設定工程で赤目防止発光モードが設定されていない場合、前記顔検出工程により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせないで、本発光のみを行わせることとしたので、請求項10にかかる発明において、使用者が赤目防止発光を行う赤目防止発光モードを設定し、赤目発光を行いたくない場合は禁止することができ、シャッターチャンスに強い撮影が可能となるという効果を奏する。
【0109】
また、請求項12にかかる発明によれば、請求項9〜請求項11のいずれか1つにかかる発明において、前記ストロボ光量を弱める量を使用者が設定する弱発光量工程を含むものである。上記発明によれば、使用者がストロボ光量を弱める量を設定することとしたので、使用者がストロボ光を弱める量を設定可能としたので、請求項9〜請求項11のいずれか1つにかかる発明の効果に加えて、状況に応じた撮影を行うことを可能とする。
【0110】
また、請求項13にかかる発明によれば、請求項9〜請求項12のいずれか1つにかかる発明において、前記顔検出工程で検出された顔の部分の明るさと周囲の明るさとを比較し、顔の部分の明るさが周囲の明るさに比して所定値以上暗い場合に、逆光と判断する逆光判断工程を含み、前記ストロボ制御工程では、前記逆光判断工程で逆光と判断された場合に、前記ストロボ発光手段にストロボ発光させることとしたので、請求項9〜請求項12のいずれか1つにかかる発明の効果に加えて、人物が画面中央に無くても、逆光と判断でき、逆光補正のためのストロボ発光を行うことが可能となるという効果を奏する。
【0111】
また、請求項14にかかる発明によれば、請求項13にかかる発明において、前記逆光判断工程で逆光と判断された場合に、前記ストロボ発光手段にストロボ発光させるか否かを使用者が設定する逆光ストロボ設定工程を含むこととしたので、請求項13にかかる発明の効果に加えて、使用者がストロボ光による逆光補正をするかどうかを選択可能として、撮影意図や状況に対応することが可能となるという効果を奏する。
【0112】
また、請求項15にかかる発明によれば、請求項〜請求項14のいずれか1つにかかる発明において、前記顔検出工程による人物の顔の検出結果に基づき、ストロボ発光手段を制御するか否かを使用者が設定する顔検出動作設定工程を含むこととしたので、請求項〜請求項14のいずれか1つにかかる発明の効果に加えて、風景撮影の場合など、ユーザが顔検出動作を禁止することで、状況に応じた撮影を行うことが可能となるという効果を奏する。
【0113】
また、請求項16にかかる発明によれば、請求項〜請求項15のいずれか1つにかかる発明において、前記顔検出工程の人物の顔の検出結果を使用者に報知する報知工程を含むこととしたので、請求項〜請求項15のいずれか1つにかかる発明の効果に加えて、人物の顔の検出結果を使用者に報知することにより、顔認識処理が正常に動作したか使用者が判断でき、誤動作している場合は撮影を中止するなどして、撮影が失敗することを防止することが可能となるという効果を奏する。
【0114】
また、請求項17にかかる発明によれば、コンピュータでプログラムを実行することにより、請求項〜請求項16のいずれか1つにかかる発明のストロボ制御方法を実現することとしたので、コンピュータでプログラムを実行することにより、物撮影かどうかを自動的に判定し、自動的に人物撮影に適した発光を行うことが可能となり、画面内で顔の占める割合が所定の値以上の場合、顔のアップの撮影であると判断してストロボ光量を弱めに発光でき、顔にストロボ光が強く当たることにより生じる白飛びを防止することが可能となるという効果を奏する。
【図面の簡単な説明】
【図1】本実施の形態にかかるデジタルカメラの外観構成図である。
【図2】本実施の形態にかかるデジタルカメラの構成を示すブロック図である。
【図3】操作部のモード切換えスイッチでSETUPモードが選択された場合に、液晶モニタに表示される記録条件のユーザ設定画面を示す図である。
【図4】図2のストロボ回路の詳細な構成を示すブロック図である。
【図5】AE演算処理を説明するための説明図である。
【図6】AE演算処理を説明するための説明図である。
【図7】本実施の形態にかかるデジタルカメラのストロボ発光動作を説明するためのフローチャートである。
【図8】本実施の形態のデジタルカメラの液晶モニタの表示例を示す図である。
【図9】本実施の形態のデジタルカメラの液晶モニタの表示例を示す図である。
【符号の説明】
1 カメラ本体
2 撮影レンズ
3 ストロボ
4 ファインダ
5 上蓋
6 ヒンジ
7 液晶モニタ
8 サブLCD
9 上蓋開閉検知スイッチ
10 バリア開閉つまみ
11 レリーズスイッチ
12 モード切換えスイッチ
13 ストロボスイッチ
14 画質モードスイッチ
15 カーソルキー
16 DATEスイッチ
17 ENTERキー
18 SELECTキー
2a ズームレンズ
2b フォーカスレンズ
101 メカ機構
102 CCD
103 F/E
104 IPP
105 圧縮/伸張回路
106 メモリカード
107 DRAM
108 操作部
109a ズームレンズモータ
109b フォーカスモータ
109c 絞り・シャッターモータ
110a ズームドライバ
110b フォーカスドライバ
110c 絞り・シャッタードライバ
111 SG
112 電池
113 DC/DCコンバータ
114 ACアダプタ
115 コントローラ
115a CPU
115b FLASH_ROM
115c SD_RAM
116 通信ドライバ部
117 ネットワーク通信部
201 発光部
202 メインコンデンサ
203 充電回路(昇圧回路)
204 発光開始(トリガ)回路
205 発光停止回路
205 反射光受光部[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image pickup apparatus, a strobe control method, and a program for causing a computer to execute the method, and more particularly, to an image pickup apparatus having a strobe function and a face detection function, a strobe control method, and a method thereof. Relates to a program to be executed.
[0002]
[Prior art]
When color photography is performed using a strobe device, a so-called red-eye phenomenon may occur in which the human eye shines red or gold. Such a red-eye phenomenon occurs when the flash of the light emitting part of the electronic flash device that has passed through the pupil of the eye is reflected by the retina and the reflected light is reflected on the film. More specifically, there are many reticulated blood vessels in the retina part of the eye, and the hemoglobin in the blood is red, so that the reflected light appears reddish. Conventionally, in order to prevent red eyes, a technique of performing main light emission after performing red-eye prevention light emission for reducing a human pupil is known.
[0003]
[Problems to be solved by the invention]
However, a camera equipped with a conventional strobe device has the following various problems. First, when photographing a close-up of a face, there is a problem in that a portion where a strobe light such as a forehead is strongly hit reflects the strobe light and blows out white. Second, because the backlight is determined based on the difference in brightness between the center of the screen and the surroundings, if the person is not in the center of the screen due to backlighting, the flash is not emitted automatically and the flash is emitted. However, there is a problem that it is necessary to switch to the forced light emission mode. Thirdly, in order to prevent red-eye and white-out due to strobe light, there is a problem that the user has to perform red-eye mode switching and strobe light emission operation.
[0004]
The present invention has been made in view of the above, and it is possible to automatically determine whether or not a person is photographed without bothering the user and automatically emit light suitable for person photography. A first object of the present invention is to provide a simple imaging apparatus, a strobe control method, and a program for causing a computer to execute the method.
[0005]
In addition, the present invention has been made in view of the above, and an imaging apparatus capable of automatically preventing red-eye and white-out when photographing a person, a strobe control method, and a computer for executing the method The second object is to provide a program.
[0006]
In addition, the present invention has been made in view of the above, and an imaging apparatus capable of performing backlight-corrected strobe light emission regardless of the position of a person on the screen, a strobe control method, and a computer executing the method. A third object is to provide a program for the above.
[0007]
[Means for Solving the Problems]
In order to solve the above problems, an invention according to claim 1 is an image pickup apparatus having a strobe function, an image pickup unit for inputting image data corresponding to a subject, and an image data input from the image pickup unit. Face detecting means for detecting a person's face from the inside, strobe light emitting means for emitting strobe light, and strobe control means for controlling the strobe light emitting means based on the detection result of the person's face by the face detecting means And the strobe control means, when a face of a person is detected by the face detection means, photograph In the screen Area of face determined as face in If is greater than or equal to the specified value, Shooting In the screen Area of face determined as face in Set the strobe light intensity of the strobe lighting means to be weaker than when the value is less than the predetermined value. And then use the flash. Is.
[0008]
According to the above invention, the image pickup means inputs image data corresponding to the subject, the face detection means detects a human face from the image data input from the image pickup means, and the strobe control means uses the face detection means. Based on the detection result of the person's face, the flash light emission means is controlled to automatically determine whether or not the person is photographed and automatically emit light suitable for the person photographing. At this time, the strobe control means, when the face of the person is detected by the face detection means, photograph In the screen Area of face determined as face in If is greater than or equal to the specified value, photograph In the screen Area of face determined as face in Sets the strobe light intensity of the strobe light source to be weaker than when the value is less than the specified value. And then use the flash. By photograph In the screen Area of face determined as face in If is greater than or equal to the specified value, it is determined that the face is shot up and the flash is emitted with a weak flash And then use the flash. . This prevents overexposure caused by strong stroboscopic light on the face.
[0009]
The invention according to claim 2 is the invention according to claim 1, wherein the strobe control means performs red-eye prevention light emission to the strobe light emitting means when a face of a person is detected by the face detecting means. Then, the main light emission is performed.
[0010]
According to the above invention, the strobe control means causes the strobe light emitting means to perform red-eye prevention light emission and then to perform main light emission when the face detection means detects a human face. Whether or not to shoot is automatically determined, red-eye prevention light emission is automatically performed, and the user does not need to switch to the red-eye light emission mode.
[0011]
Further, the invention according to claim 3 is the invention according to claim 2, further comprising a red-eye prevention light emission mode setting means for a user to set a red-eye prevention light emission mode for performing red-eye prevention light emission, and the strobe control means comprises: When the red-eye prevention flash mode is set by the red-eye prevention flash mode setting means, when the human face is detected by the face detection means, On the other hand, when the red-eye prevention flash mode is not set by the red-eye prevention flash mode setting means, and when a human face is detected by the face detection means, the flash emission means emits red-eye prevention flash. Only the main light emission is performed without performing it.
[0012]
According to the above invention, the user sets the red-eye prevention emission mode for performing the red-eye prevention emission by the red-eye prevention emission mode setting means, and the strobe control means has the red-eye prevention emission mode set by the red-eye prevention emission mode setting means. In this case, when a human face is detected by the face detection means, the flash light emission means causes the red-eye prevention light emission and then the main light emission, while the red-eye prevention light emission mode setting means sets the red-eye prevention light emission mode. Otherwise, when the face of the person is detected by the face detection means, the flash light emission means does not perform red-eye prevention light emission but only main light emission. Even when a person is photographed, there is a case where it is desired to shoot without red-eye light emission in order to give priority to a photo opportunity. By allowing the user to select whether or not to perform red-eye shooting, if the user does not want to emit red-eye light, prohibiting the shooting is possible by prohibiting the shooting.
[0015]
Claims 4 The invention according to claim Any one of claims 1 to 3 According to the invention, there is provided a weak light emission amount setting means for a user to set an amount of weakening the strobe light amount.
[0016]
According to the above invention, the user sets the amount by which the strobe light amount is weakened by the weak light emission amount setting means. For example, when shooting a woman, strobe light is more easily reflected because of makeup than when shooting a man. By enabling the user to set the amount of weakening the strobe light, it is possible to perform shooting according to the situation.
[0017]
Claims 5 The invention according to claim 1 is directed to claim 1. Any one of Claim 4 In the present invention, the brightness of the face portion detected by the face detecting means is compared with the surrounding brightness, and the backlight is backlit when the brightness of the face portion is darker than a predetermined value compared to the surrounding brightness. The strobe control means causes the strobe light emission means to emit strobe light when the back light determination means determines that the light is back light.
[0018]
According to the above invention, the backlight determination unit compares the brightness of the face portion detected by the face detection unit with the ambient brightness, and the brightness of the face portion is equal to or greater than a predetermined value compared to the ambient brightness. When it is dark, it is determined to be backlit, and when the backlight control means determines that the backlight is backlit, the strobe flashing means causes the strobe flashing means to emit light even if the person is not in the center of the screen. It is possible to perform strobe light emission for correction.
[0019]
Claims 6 The invention according to claim 5 The invention further includes a backlight strobe setting means for the user to set whether or not the strobe light emitting means causes the strobe to emit light when the backlight determining means determines that the light is backlit.
[0020]
According to the above invention, the user sets whether or not to make the strobe light emitting device emit strobe light when the back light strobe setting device determines that the back light is determined to be back light. Even if the brightness of the face is darker than the surrounding brightness, there is a case where it is not desired to emit the flash depending on the shooting intention and the situation. The user can select whether or not to perform backlight correction with strobe light, and responds to the shooting intention and situation.
[0021]
Claims 7 The invention according to claim 1 to claim 1 6 The invention according to any one of the above, further comprising a face detection operation setting means for the user to set whether or not to control the strobe light emission means based on the detection result of the human face by the face detection means It is.
[0022]
According to the above invention, the user sets whether or not to control the strobe light emitting means based on the detection result of the human face by the face detection detecting means by the face detection operation setting means. For example, in the case of shooting a landscape, no person shooting is required. In the case of such landscape photography, the user prohibits the face detection operation, thereby performing photography according to the situation.
[0023]
Claims 8 The invention according to claim 1 to claim 1 7 In the invention according to any one of the above, a notification means for notifying a user of the detection result of the person's face by the face detection means is provided.
[0024]
According to the above invention, the notifying means notifies the user of the detection result of the person's face by the face detecting means, so that the user can determine whether the face recognition processing has been normally operated, It is possible to prevent the shooting from failing by stopping the shooting.
[0025]
The invention according to claim 9 is an image input step of inputting image data corresponding to a subject, a face detection step of detecting a human face from the image data input by the imaging means, and the face detection step And a strobe control step for controlling strobe light emission means for emitting strobe light based on the result of detection of the person's face by the step, in the strobe control step, when the face of the person is detected in the face detection step , photograph In the screen Area of face determined as face in Is greater than or equal to a predetermined value, Shooting In the screen Area of face determined as face in Set the strobe light intensity of the strobe lighting means to be weaker than when the value is less than the predetermined value. And then use the flash. Is.
[0026]
According to the above invention, the strobe emission for inputting the image data corresponding to the subject, detecting the face of the person from the image data input by the imaging means, and emitting the strobe light based on the detection result of the face of the person By controlling the means, it is automatically determined whether or not the person is photographed, and light emission suitable for the person photographing is automatically performed. At this time, if a human face is detected, photograph In the screen Area of face determined as face in Is greater than or equal to a predetermined value, photograph In the screen Area of face determined as face in By setting the strobe light intensity of the strobe light emission means weaker than when photograph In the screen Area of face determined as face in If is greater than or equal to the specified value, it is determined that the face is shot up and the flash is emitted with a weak flash And then use the flash. . This prevents overexposure caused by strong stroboscopic light on the face.
[0027]
Claims 10 The invention according to claim 9 In the invention according to the first aspect, the strobe control step causes the strobe light emitting means to perform red-eye prevention light emission and then to perform main light emission when a human face is detected in the face detection step.
[0028]
According to the above invention, when a person's face is detected in the face detection step, whether or not the person is photographed is automatically determined by causing the strobe light emission means to perform red-eye prevention light emission and then performing main light emission. Thus, red-eye prevention light emission is automatically performed, and the user is not required to switch to the red-eye light emission mode.
[0029]
Claims 11 The invention according to claim 10 The invention includes a red-eye prevention emission mode setting step in which a user sets a red-eye prevention emission mode for performing red-eye prevention emission. In the strobe control step, the red-eye prevention emission mode is set in the red-eye prevention emission mode setting step. If the person's face is detected by the face detection step, the strobe light emitting unit causes the red-eye prevention light emission and then the main light emission, while the red-eye prevention light emission mode setting step When the prevention light emission mode is not set, when the face of the person is detected by the face detection step, the strobe light emission means does not perform the red eye prevention light emission but only the main light emission.
[0030]
According to the above invention, when the user sets the red-eye prevention flash mode for performing the red-eye prevention flash and the red-eye prevention flash mode is set, the red light prevention means is provided to the strobe flashing means when a person's face is detected. If the red-eye prevention flash mode is not set, or if a person's face is detected, the flash unit does not perform the red-eye prevention Only emit light. Even when a person is photographed, there is a case where it is desired to shoot without red-eye light emission in order to give priority to a photo opportunity. By allowing the user to select whether or not to perform red-eye shooting, if the user does not want to emit red-eye light, prohibiting the shooting is possible by prohibiting the shooting.
[0033]
Claims 12 The invention according to claim Any one of claims 9 to 11 In the invention, the method includes a weak light emission amount step in which a user sets an amount of weakening the strobe light amount. According to the above invention, the user sets the amount by which the amount of strobe light is reduced. For example, when shooting a woman, strobe light is more easily reflected because of makeup than when shooting a man. By enabling the user to set the amount of weakening the strobe light, it is possible to perform shooting according to the situation.
[0034]
Claims 13 The invention according to claim Any one of claims 9 to 12 In the present invention, the brightness of the face portion detected in the face detection step is compared with the surrounding brightness, and the backlight is backlit when the brightness of the face portion is darker than a predetermined value compared to the surrounding brightness. In the strobe control step, the strobe light emission means causes the strobe light emission means to emit strobe light when the back light determination step determines that the light is back light.
[0035]
According to the above invention, the brightness of the detected face portion and the surrounding brightness are compared, and when the brightness of the face portion is darker than the surrounding brightness by a predetermined value or more, it is determined as backlighting, If it is determined that the light is backlit, the strobe light emitting means causes the strobe light to emit light, so that even if the person is not in the center of the screen, it can be determined that the light is backlit, and strobe light emission for back light correction can be performed.
[0036]
Claims 14 The invention according to claim 13 The invention includes a backlight strobe setting step in which a user sets whether or not the strobe light emitting unit causes the strobe to emit light when the backlight is determined to be backlit.
[0037]
According to the above invention, the user sets whether or not to make the strobe light emitting device emit strobe light when it is determined that the light is backlit. Even if the brightness of the face is darker than the surrounding brightness, there is a case where it is not desired to emit the flash depending on the shooting intention and the situation. The user can select whether or not to perform backlight correction with strobe light, and responds to the shooting intention and situation.
[0038]
Claims 15 The invention according to claim 9 ~ Claim 14 In the invention according to any one of the above, the method includes a face detection operation setting step in which the user sets whether to control the strobe light emission means based on the detection result of the human face in the face detection step.
[0039]
According to the above invention, the user sets whether to control the strobe light emission means based on the detection result of the person's face. For example, in the case of shooting a landscape, no person shooting is required. In the case of such landscape photography, the user prohibits the face detection operation, thereby enabling photography according to the situation.
[0040]
Claims 16 The invention according to claim 9 ~ Claim 15 In the invention according to any one of the above, the method includes a notification step of notifying a user of a result of detection of a human face in the face detection step. According to the above-described invention, by notifying the user of the detection result of the person's face, the user can determine whether the face recognition process has been normally operated, and when malfunctioning, the shooting is stopped, etc. It is possible to prevent the shooting from failing.
[0041]
Claims 17 The invention according to claim 9 ~ Claim 16 Any one of The strobe control method described The computer In Execution Let It is a program for. According to the above invention, the program is executed by a computer, 9 ~ Claim 16 Of the invention according to any one of Strobe control method To realize.
[0042]
DETAILED DESCRIPTION OF THE INVENTION
DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, exemplary embodiments of a digital camera to which an imaging apparatus, a strobe control method, and a program for executing the method according to the invention are applied will be described in detail with reference to the drawings.
[0043]
FIG. 1 is an external configuration diagram of a digital camera according to the present embodiment. FIG. 1A is a front view, FIG. 1B is a side view, and FIG. 1C is a top view. FIG. 1 shows a state in which the upper lid is opened. In the figure, 1 is a camera body, 2 is a photographic lens, 3 is a strobe unit, 4 is a viewfinder, 5 is an upper lid that can be opened and closed, 6 is a hinge that supports the upper lid 5 so that it can be opened and closed, and 7 is an upper lid 5. A liquid crystal monitor provided on the inside, 8 is a sub LCD provided on the outside of the upper lid 5, 9 is an upper lid open / close detection switch for detecting the opening / closing of the upper lid 5, 10 is a barrier opening / closing knob, and 11 is an operation instruction for photographing or the like. A switch for selecting each mode, 13 a strobe switch for performing strobe light emission, 14 an image quality mode switch for setting a shooting image quality, 15 a cursor key, 16 Indicates a DATE switch for inputting a date, 17 indicates an ENTER key, and 18 indicates a SELECT key.
[0044]
The mode changeover switch 12 includes (1) a SETUP mode for changing or confirming camera settings, (2) a still image mode for recording a still image, (3) a moving image mode for recording a moving image, (4) Playback mode for playing back recorded files, (5) PC mode for sending files to a personal computer and operating the camera from a personal computer, and (6) Communication via a network This is for selecting a communication mode to be performed.
[0045]
FIG. 2 is a block diagram showing the configuration of the digital camera according to the present embodiment. The digital camera shown in the figure includes a photographing lens 2 (zoom lens 2a, focus lens 2b), mechanical mechanism (mechanical shutter, diaphragm, filter, etc.) 101, CCD 102, F / E (CDS circuit, AGC circuit, A / D conversion). Circuit) 103, IPP 104, compression / expansion circuit 105, memory card 106, DRAM 107, liquid crystal monitor 7, sub LCD 10, operation unit 108, motor (zoom lens motor 109a, focus motor 109b, aperture / shutter motor 109c) 109, driver ( Zoom driver 110a, focus driver 110b, aperture / shutter driver 110c) 110, SG111, battery 112, DC / DC converter 113, AC adapter 114, controller (CPU 115a, FLASH_ROM 115b, SD) RAM 115c) 115, a communication driver unit 116, a network communication unit 117, and a strobe unit 3.
[0046]
The photographing lens 2 is for imaging a subject, and includes a zoom lens 2a for realizing a zoom function and a focus lens 2b for focusing on the subject. The mechanical mechanism 101 includes a mechanical shutter, a diaphragm for adjusting the brightness of the subject, a filter, and the like. The CCD 102 converts the subject image formed by the photographing lens 2 into an electric signal and outputs it as analog image data to the F / E 103.
[0047]
The F / E 103 performs preprocessing on analog image data input from the CCD 102, and is output from a CDS circuit that performs correlated double sampling of the analog image data input from the CCD 102 and the CDS circuit. An AGC circuit that adjusts the gain of analog image data, and an A / D conversion circuit that performs A / D conversion on analog image data output from the AGC circuit and outputs digital image data to the IPP 104 Become.
[0048]
The IPP 104 performs various types of image processing on input image data. For example, after performing interpolation processing on color image data input from the F / E 103, YUV data (luminance Y data, color difference) (U, V data).
[0049]
The compression / decompression circuit 105 compresses YUV data by a compression method conforming to the JPEG method, and decompresses compressed image data stored in the memory card 106 by an expansion method conforming to the JPEG method.
[0050]
The DRAM 107 is a frame memory for temporarily storing captured image data, image data read from the memory card 106, and the like. The memory card 106 is detachably attached to the digital camera body, and stores compressed image data as an image file.
[0051]
The liquid crystal monitor 7 is for displaying image data and the like. The sub LCD 8 is for displaying the set mode and operation contents of the digital camera.
[0052]
The zoom driver 110a drives the zoom motor 109a in accordance with the control signal input from the controller 115, and moves the zoom lens 2a in the optical axis direction. The focus driver 110b drives the focus motor 109b in accordance with a control signal input from the controller 115, and moves the focus lens 2b in the optical axis direction. The aperture / shutter driver 110c drives the aperture / shutter motor 119c in accordance with a control signal input from the controller 115 to set the aperture value of the aperture of the mechanical mechanism 101 and drive the mechanical shutter of the mechanical mechanism 101 to open / close. Do.
[0053]
SG 111 drives CCD 102 and F / E 103 based on a control signal input from controller 115. The battery 112 is made of a battery such as NiCd, nickel metal hydride, or lithium, and supplies a DC voltage to the DC / DC converter 113. The AC adapter 114 converts the AC voltage into a DC voltage and supplies it to the DC / DC converter 113. The DC / DC converter 113 converts the level of the DC voltage input from the battery 112 or the AC adapter 114 and supplies power to each part of the digital camera.
[0054]
The communication driver unit 116 is connected to an external device (for example, a personal computer) to perform data communication. The network communication unit 117 is for data communication with the network.
[0055]
The strobe unit 3 is a unit for emitting strobe light, and is controlled by the controller 115 to perform red-eye prevention light emission and main light emission.
[0056]
The operation unit 108 includes various keys and switches (release switch 11, mode change switch 12, strobe switch 13, image quality mode switch 14, cursor key 15, DATE, and the like shown in FIG. 1 for the user to give various instructions to the digital camera. The switch 16, the ENTER key 17, and the SELECT key 18) are provided, and operations of various keys and switches are detected and output to the controller 115. The above-described release switch 11 is a two-stage SW. When the switch is half-pressed, the first SW is turned on, and when the switch is fully pressed, the second SW is turned on. In the digital camera, the AE operation and the AF operation are executed when the first SW is turned on, and the photographing operation is executed when the second SW is turned on.
[0057]
FIG. 3 shows a user setting screen for recording conditions displayed on the liquid crystal monitor 7 when the SETUP mode is selected by the mode changeover switch 12 of the operation unit 108. The user setting screen for the recording conditions shown in the figure shows the setting conditions for each item ("AF / Manual" for "Focus", [ON / OFF] for "Face detection (face detection operation mode)", "Auto / Manual (Large user setting amount large, medium, small)" in "Luminescence (weak setting amount setting)", "ON / OFF" in "Red-eye prevention emission (red-eye emission mode)", "Face detection backlight compensation (ON / OFF) “ON / OFF” for “(Strobe emission at backlight judgment)”, “AUTO / MANUAL” for “METERING POINT”, “ON / OFF” for “LONG EXPOSURE”, “ON / OFF” for “DATE” ] On the screen shown in the figure, a desired item is selected by the cursor key 15, a desired setting condition is selected by the SELECT key 18 in the selected item, and ENTER is entered. Setting conditions selected with key 17 are set It is.
[0058]
As will be described later, when the user selects [Auto] of “Face detection automatic weak light emission (weak setting amount setting)”, the CPU 115a sets the weak setting amount. On the other hand, when the user selects “Manual” for “Face detection automatic weak light emission (weak setting amount setting)”, the user further sets the weak setting amount (user weak setting amount) to “Large, medium”. , Small].
[0059]
In the example shown in the figure, “Focus” is “AF”, “Face detection (face detection operation mode)” is “ON”, “Face detection automatic weak emission (weak setting amount setting)” is “Auto”, “ “Red-eye prevention flash (red-eye flash mode)” is [ON], “Face detection backlight compensation (allows strobe flash when determining backlight)” is “ON”, “Metering point” is “Auto”, “Long exposure” “OFF” and “OFF” are set for “Date”.
[0060]
The controller 115 is a unit that controls the overall operation of the digital camera. Based on an instruction from the operation unit 108, the controller 115 uses the SD_RAM 115c as a work area in accordance with a control program stored in the FLASH_ROM 115b. The CPU 115a controls operations, the FLASH_ROM 115b that stores various control programs to be executed by the CPU 115a, parameters and data necessary for control, and the SD_RAM 115c used as a work area of the CPU 115a. The control program, parameters, and data stored in the FLASH_ROM 115b can be distributed via the network, and can be downloaded and stored via the network. In addition, programs, parameters, and data can be written to the FLASH_ROM 115b from an external device connected via the communication driver unit 116.
[0061]
The CPU 115a controls (1) monitoring operation, (2) AF operation, (3) AE operation, and (4) photographing operation. Further, the CPU 115a has a still image mode for recording a still image, a moving image mode for recording a moving image and sound, and the like, and controls the execution of each mode.
[0062]
FIG. 4 is a block diagram showing a detailed configuration of the strobe unit 3 of FIG. The strobe unit 3 includes a xenon tube, a light emitting unit 201 that emits strobe light, a main capacitor 202 that accumulates charges for causing the xenon tube of the light emitting unit 201 to emit light, and a charging circuit (boost circuit) 203 that charges the main capacitor 202. , A light emission start (trigger) circuit 204 for starting light emission of the xenon tube of the light emitting unit 201, a light emission stop circuit 205 for stopping light emission of the xenon tube of the light emitting unit 201, and receiving light reflected from the subject to the light emission stop circuit 205 A reflected light receiving unit 206 for output is provided.
[0063]
Next, the operation of the strobe unit 3 will be described. The CPU 115a outputs a charging start signal to the charging circuit 203 during charging. When the charging start signal is input from the CPU 115a, the charging circuit 203 boosts the output voltage input from the DC / DC converter 113 and starts charging the main capacitor 202. When charging is started, the CPU 115 a periodically monitors the charging voltage of the main capacitor 202 via the charging circuit 203. When the main capacitor 203 is charged to a preset strobe light emission voltage, the CPU 115a outputs a charge stop signal to the charging circuit 203. The charging circuit 203 stops the charging of the main capacitor 202 when a charging stop signal is input from the CPU 115a.
[0064]
The CPU 115 a outputs a light emission signal to the light emission start circuit 204 when the xenon tube of the light emitting unit 201 emits light. When a light emission signal is input from the CPU 115a, the light emission start circuit 204 starts light emission of the xenon tube of the light emitting unit 201. The reflected light receiving unit 206 receives reflected light from the subject and outputs it to the light emission stop circuit 205. The transmission stop circuit 205 integrates the reflected light input from the reflected light receiving unit 206. The transmission stop circuit 205 stops the light emission of the xenon tube of the light emitting unit 201 when the integrated amount of the reflected light reaches a predetermined value (normal strobe light emission (main light emission)). In addition, when the integrated amount of reflected light does not reach a predetermined value even after a predetermined time has elapsed, or when the xenon tube is caused to emit light for a minimum time such as red-eye prevention light emission, the CPU 115a stops the light emission stop signal. In response to this, the light emission stop circuit 205 stops the light emission of the xenon tube.
[0065]
Next, basic operations of (1) strobe light emission operation, (2) monitoring operation, and (3) still image shooting operation executed under the control of the CPU 115a will be described.
[0066]
(1) Strobe flash operation
When the still image mode or the moving image mode is selected with the mode change switch 12 of the operation unit 108 and the flash switch 13 is turned on, when the release switch 11 is fully pressed and SW2 is turned on, the CPU 115a emits the strobe light. Perform the action. Specifically, in the strobe light emission operation, when the face detection operation mode is set (see FIG. 3 above), first, face detection processing is executed to detect a human face. Specifically, the image data input from the CCD 102 is processed by the F / E (CDS, AGC, A / D) 103 and then input to the IPP 104. The signal is processed by the IPP 104 and then written in the DRAM 107. The CPU 115a detects the face of a person from the image data stored in the DRAM 107 using a known face recognition technique (Gabor wavelet transform + graph matching). If a person's face is detected, it can be determined that the person is photographed. The CPU 115a controls the flash unit 3 based on the detection result of face detection. In other words, the digital camera according to the present embodiment automatically detects that a person is photographed by detecting a person's face, and automatically controls the flash unit 3 without bothering the user. Shoot people at the appropriate brightness. Here, the CPU 18a executes the control program to perform face detection. However, dedicated hardware for face detection may be provided.
[0067]
(2) Monitoring operation
When the still image mode or the moving image mode is selected with the mode change switch 12 of the operation unit 108, a monitoring image is displayed on the liquid crystal monitor 7. Specifically, the subject image data input from the CCD 3 is processed by F / E (CDS, AGC, A / D) and then input to the IPP 104. After the signal processing by the IPP 104, the monitoring image corresponding to the image data written in the DRAM 107 and stored in the DRAM 107 is displayed on the liquid crystal monitor 7. The user can determine the composition of the shooting by looking at the monitoring image of the subject displayed on the liquid crystal monitor 7.
[0068]
(3) Still image shooting operation
The CPU 115a uses the mode selector switch 12 of the operation unit 108 to switch the still image mode. Do Selected The Thereafter, when the release switch 11 of the operation unit 108 is fully pressed and the SW 2 is turned on, a still image shooting operation is executed. The imaging data captured from the CCD 102 is subjected to image processing / compression processing by the IPP 104 and then written to the DRAM 107. The CPU 115a writes the compressed image data written in the DRAM 107 to the memory card 106 as a still image file.
[0069]
FIG. 7 is a flowchart for explaining the strobe light emission operation of the digital camera according to the present embodiment. The strobe light emission operation of the digital camera of FIG. 1 will be described with reference to the flowchart of FIG. In the following description, a case where the face detection operation mode is set will be described.
[0070]
[Light emission request initialization processing]
In FIG. 7, the CPU 115a first clears the strobe light emission request (step S1) and then clears the red-eye light emission request (step S2). Thereafter, the CPU 115a executes face detection processing (step S3).
[0071]
Here, the face detection process will be described. The following methods (1) to (3) are known as methods for detecting a person image facing the front from the subject image. In the present embodiment, any one of the methods is used. Shall be used.
[0072]
(1) Television Society Journal Vol. 49, no. 6, pp. No. 787-797 (1995) “Proposal of a modified HSV color system effective for face area extraction” is a method of extracting a face area by converting a color image into a mosaic image and paying attention to a skin color area.
(2) The Institute of Electronics, Information and Communication Engineers, Vol. 74-D-II, no. 11, pp. 1625-1627 (1991) “A method for extracting a face region from a still gray scene image”, the geometrical structure of each part constituting the head of a front human figure such as hair, eyes and mouth. Of extracting the head region of a frontal person using various shape features.
(3) As shown in “Video phone face area detection and its effect” in Image Lab 1991-11 (1991), in the case of a moving image, the contour edge of a human image generated by a subtle movement of a person between frames To extract a frontal portrait using GIS.
[0073]
Next, the CPU 115a performs AE calculation processing for exposure, and performs AE calculation processing from the image data captured from the CCD 102 (step S4). Here, the AE calculation process will be specifically described. FIG. 5 shows an example of division when the screen (image frame) of the CCD 102 is divided into a plurality of areas Y1 to Y35. FIG. 6 is a diagram showing an example of the image data of the subject in FIG.
[0074]
The IPP 104 calculates luminance data Y1 to Y35 for each of the areas Y1 to Y35 to be measured based on the image data (respective pixel data (R, G, B)) input from the CCD 102. The formula for calculating luminance data is shown below. In the following calculation formula, Rn, Gn, and Bn indicate the average value of each pixel data (R, G, B) in each area.
[0075]
Figure 0004870887
[0076]
IPP104 uses (1) center-weighted metering method (a method to determine brightness data by placing emphasis on the brightness in the center and taking ambient brightness into account), and (2) partial metering method (inside the area in the screen) (3) Sport metering method (same concept as partial metering, but the metering area is small, about 1 to 2%), ▲ 4 ▼ Brightness using one of the divided photometry methods (a method in which the screen is divided into a plurality of areas, an average value of luminance is obtained for each area, and luminance data is determined from the luminance distribution pattern). Data Yy (photometric value) is calculated.
[0077]
In the face detection operation mode, the IPP 104 calculates the luminance data of the area including the face, and calculates the average value of the calculated luminance data of the area as the luminance data YFace (facial part brightness). To do. In the example shown in FIG. 6, the average value of the luminance data in the areas Y14, Y20, Y21, Y26, and Y27 is defined as luminance data Yface (the brightness of the face portion).
[0078]
In the face detection operation mode, luminance data of other areas (areas around the face) excluding the area including the face is calculated, and the average value of the calculated luminance data of the other areas is calculated as the luminance. Calculated as data YA (ambient brightness). In the example shown in FIG. 6, the average value of the luminance data in the areas Y1 to Y13, Y15 to Y19, Y22 to Y25, and Y28 to Y35 is defined as luminance data YA (ambient brightness).
[0079]
[Flash mode confirmation processing]
Then, the CPU 115a determines whether or not the strobe prohibition mode is set (step S5). Such strobe prohibition mode is set when the strobe switch is OFF. If the strobe prohibition mode is set as a result of this determination, the flow is terminated. If the strobe prohibition mode is not set, the process proceeds to step S6.
[0080]
In step S6, the CPU 115a determines whether the forced light emission mode is set. Such a forced light emission mode is set on the user setting screen for the recording conditions described above (see FIG. 3 above). As a result of the determination, if the forced light emission mode is set, the process proceeds to step S8, whereas if the forced light emission mode is not set, the process proceeds to step S7.
[0081]
In step S7, the CPU 115a refers to the photometric result of the AE calculation in step S4 to determine whether the photometric value is less than a predetermined threshold (predetermined brightness). As a result of this determination, if the photometric value is not less than the predetermined threshold (predetermined brightness), the process proceeds to step S9. On the other hand, if the photometric value is less than the predetermined threshold (predetermined brightness), the CPU 115a. Sets a strobe light emission request (step S8).
[0082]
[Backlight judgment processing]
Subsequently, the CPU 115a determines whether or not strobe light emission at the time of backlight determination is permitted (step S9). The permission / non-permission of strobe light emission at the time of the backlight determination is set on the user setting screen for the recording conditions described above (see FIG. 3 above). If the result of this determination is that strobe emission at the time of backlight determination is not permitted, the routine proceeds to step S13. On the other hand, when the flash emission at the time of backlight determination is permitted, the CPU 115a determines whether or not a face is detected in the screen by the face detection process (step S10).
[0083]
If the result of this determination is that a face has not been detected, the process proceeds to step S13. On the other hand, when the face is detected in step S10, the CPU 115a refers to the photometric result of the AE calculation in step S4 to determine whether the face portion is darker than the surrounding portion by a predetermined value or more. (Step S11). As a result of the determination, if the face portion is not darker than the surrounding portion by a predetermined value or more, the process proceeds to step S13. On the other hand, if the face portion is darker than the surrounding portion by a predetermined value or more, A light emission request is set (step S12), and the process proceeds to step S13.
[0084]
Next, in the processing so far, the CPU 115a determines whether or not a strobe light emission request is set (step S13). As a result of this determination, if the strobe light emission request is not set, the flow is terminated. If the strobe light emission request is set, the process proceeds to step S14.
[0085]
[Red-eye emission processing]
In step S14, the CPU 115a determines whether or not the red-eye light emission mode is set. This red-eye emission mode is set on the user setting screen for the recording conditions described above (see FIG. 3 above). As a result of this determination, if the red-eye emission mode is set, the CPU 115a sets a red-eye emission request (step S17), and then proceeds to step S18. On the other hand, if the red-eye emission mode is not set, the CPU 115a determines whether or not a face has been detected in the screen (step S15). As a result of this determination, if no face is detected on the screen, the process proceeds to step S18. On the other hand, when a face is detected in the screen, the CPU 115a determines whether or not automatic red-eye light emission permission is set (step S16). This automatic red-eye light emission permission / non-permission is set on the user setting screen for the recording conditions described above (see FIG. 3 above). If it is determined that automatic red-eye emission permission is not set, the process proceeds to step S18. If automatic red-eye emission permission is set, a red-eye emission request is set (step S17). ), The process proceeds to step S18. In step S18, the CPU 115a calculates the flash emission amount.
[0086]
[Weak emission determination processing]
In step S19, the CPU 115a determines whether a face is detected on the screen. If no face is detected on the screen as a result of this determination, the process proceeds to step S24. On the other hand, if a face is detected on the screen, the area of the portion determined to be a face is larger than a predetermined value. It is determined whether or not (step S20). As a result of the determination, if the area of the portion determined to be a face is not larger than the predetermined value, the process proceeds to step S24. On the other hand, if the area of the portion determined to be a face is larger than the predetermined value, the CPU 115a. Determines whether or not a weak set amount is set (step S21). This weak setting amount is set on the user setting screen for the recording condition described above (see FIG. 3 above). As a result of this determination, when the weak setting amount is set, the CPU 115a subtracts the user weak setting amount set by the user from the calculated flash emission amount (step S22), while the weak setting amount is set. If not, the predetermined weak set amount is subtracted from the calculated flash emission amount (step S23).
[0087]
Subsequently, in step S24, the CPU 115a determines whether or not a red-eye light emission request is set. If the result of this determination is that a red-eye light emission request is set, after performing the red-eye light emission process (step S25), the main light emission process is performed (step S26). On the other hand, when the red-eye light emission request is not set, the main light emission process is performed without performing the red-eye light emission process (step S26).
[0088]
As described above, according to the present embodiment, the CPU 115a determines whether or not a person is photographed by detecting a person's face, and emits red-eye prevention light when the person is photographed and the strobe is emitted. Since the main light emission is performed after the determination, it is automatically determined that a person is photographed, the red-eye light emission can be automatically performed, and the user can save the trouble of switching to the red-eye light emission mode.
[0089]
Further, according to the present embodiment, it is determined whether or not a person is photographed by performing face detection, and the user determines whether or not to automatically perform red-eye prevention light emission when photographing a person and emitting a strobe light. Since it is possible to set, if it is not desired to emit red-eye light, prohibiting it makes it possible to shoot with a strong photo opportunity.
[0090]
Further, according to the present embodiment, when the proportion of the face in the screen is equal to or greater than a predetermined value, the CPU 115a determines that the face is being shot up and emits light with a low strobe light amount. This makes it possible to prevent over-exposure in a portion that is strongly struck by strobe light. In this case, since the user can set an amount for reducing the amount of strobe light (a user set amount), it is possible to perform strobe shooting according to the situation.
[0091]
Further, according to the present embodiment, the CPU 115a compares the brightness of the position determined as the face with the ambient brightness, and the backlight is backlit when the brightness of the position determined as the face is darker than the ambient brightness by a predetermined value or more. Therefore, even if a person is not at the center of the screen, it is possible to perform strobe emission for backlight correction.
[0092]
In addition, according to the present embodiment, since the user can set whether or not to emit the strobe light when it is determined that the backlight is determined, the user can select whether or not to correct the backlight using the strobe light. It is possible to perform shooting corresponding to the situation.
[0093]
Further, according to the present embodiment, since the user can set whether or not to perform the face detection operation, the user determines whether or not to perform the face detection operation depending on whether or not a person is photographed. The user-friendliness is improved.
[0094]
In this embodiment, the user may be notified of the face detection result by the face detection process. For example, when detecting the face, the CPU 115a displays a rectangular frame on the face portion of the person in the image data displayed on the liquid crystal monitor 7 to notify the user that the face has been detected. . FIG. 8 shows a display example of image data (monitoring image) displayed on the liquid crystal monitor 7, and FIG. 9 shows a display example when a rectangular frame A is displayed on the face portion of a person in the image data of FIG. .
[0095]
The present invention is not limited to the above-described embodiment, and can be appropriately modified without changing the gist of the invention.
[0096]
【Effect of the invention】
As described above, according to the first aspect of the present invention, in the imaging apparatus having the strobe function, the imaging unit for inputting image data corresponding to the subject, and the image data input from the imaging unit Face detecting means for detecting a person's face from the inside, strobe light emitting means for emitting strobe light, and strobe control means for controlling the strobe light emitting means based on the detection result of the person's face by the face detecting means And the strobe control means, when a face of a person is detected by the face detection means, photograph In the screen Area of face determined as face in Is greater than or equal to a predetermined value, photograph In the screen Area of face determined as face in Set the strobe light intensity of the strobe lighting means to be weaker than when the value is less than the predetermined value. And then use the flash. In addition to the effect that it is possible to automatically determine whether or not to shoot a person and automatically emit light suitable for shooting a person, photograph In the screen Area of face determined as face in If is greater than or equal to a predetermined value, it is determined that the face is shot up and the flash is emitted with a weaker flash. You can use flash photography This produces an effect that it is possible to prevent overexposure that occurs when the strobe light is strongly applied to the face.
[0097]
According to a second aspect of the present invention, in the first aspect of the invention, the strobe control means causes the strobe light emitting means to emit red-eye prevention light emission when a human face is detected by the face detecting means. In addition to the effect of the invention according to claim 1, it is automatically determined whether or not a person is photographed, and the red-eye prevention light emission is automatically performed. Has the effect of eliminating the need to switch to the red-eye emission mode.
[0098]
According to a third aspect of the invention, in the second aspect of the invention, the strobe control unit includes a red-eye prevention light emission mode setting unit for a user to set a red-eye prevention light emission mode for performing red-eye prevention light emission. When the red-eye prevention light-emitting mode is set by the red-eye prevention light-emitting mode setting means, and when the person's face is detected by the face detection means, the strobe light-emitting means performs red-eye prevention light emission. When the red-eye prevention flash mode is not set by the red-eye prevention flash mode setting means, and the face detection means detects a person's face, the strobe flash means has a red-eye prevention function. Since the main light emission is performed without performing the light emission, in addition to the effect of the invention according to claim 1, the user can select whether or not to perform red-eye photography, If you do not want to make the emission, it prohibits the red-eye preventing emission, an effect that it is possible to strong shooting in shutter chance.
[0100]
Claims 4 According to the invention according to claim Any one of claims 1 to 3 In the invention according to the present invention, since the user is provided with a weak light emission amount setting means for setting the amount by which the strobe light amount is weakened, the user can set the amount by which the strobe light is weakened, and perform shooting according to the situation. There is an effect that becomes possible.
[0101]
Claims 5 According to the invention according to claim 1, Any one of Claim 4 In the present invention, the brightness of the face portion detected by the face detecting means is compared with the surrounding brightness, and the backlight is backlit when the brightness of the face portion is darker than a predetermined value compared to the surrounding brightness. And the strobe control means causes the strobe light emitting means to emit strobe light when the back light judging means determines that the light is backlit. Any one of Claim 4 In addition to the effects of the present invention, it is possible to determine that the person is backlit even if the person is not in the center of the screen, and that it is possible to perform strobe light emission for backlight correction.
[0102]
Claims 6 The invention according to claim 5 According to another aspect of the invention, there is provided a backlight strobe setting means for the user to set whether or not the strobe light emitting means causes the strobe to emit light when the backlight determining means determines that the light is backlit. 5 In addition to the effects of the present invention, the user can select whether or not to perform backlight correction with strobe light, and it is possible to cope with the user's shooting intention and situation.
[0103]
Claims 7 According to the invention according to claim 1 to claim 1 6 In the invention according to any one of the above, a face detection operation setting means for the user to set whether or not to control the strobe light emission means based on the detection result of the human face by the face detection means. Therefore, claims 1 to claim 6 In addition to the effect of the invention according to any one of the above, there is an effect that the user can perform photographing according to the situation by prohibiting the face detection operation.
[0104]
Claims 8 According to the invention according to claim 1 to claim 1 7 In the invention according to any one of the above, since there is provided a notifying means for notifying the user of the detection result of the person's face by the face detecting means, the user can determine whether the face recognition processing has been normally operated. If there is a malfunction, it is possible to prevent the shooting from failing by stopping the shooting.
[0105]
According to the invention of claim 9, an image input step of inputting image data corresponding to a subject, a face detection step of detecting a human face from the image data input by the imaging means, and the face And a strobe control step for controlling a strobe light emitting means for emitting strobe light based on the detection result of the person's face by the detection step. In the strobe control step, the human face is detected in the face detection step. In case, photograph In the screen Area of face determined as face in Is greater than or equal to a predetermined value, photograph In the screen Area of face determined as face in Set the strobe light intensity of the strobe lighting means to be weaker than when the value is less than the predetermined value. And then use the flash. In addition to the effect that it is possible to automatically determine whether to shoot a person and automatically emit light suitable for shooting a person, photograph In the screen Area of face determined as face in If is greater than or equal to a predetermined value, it is determined that the face is shot up and the flash is emitted with a weaker flash. And then use the flash. This is advantageous in that it is possible to prevent overexposure that occurs when the strobe light strikes the face strongly.
[0106]
Claims 10 According to the invention according to claim 9 In the invention according to the present invention, the strobe control step causes the strobe light emission means to perform red-eye prevention light emission and then to perform main light emission when a human face is detected in the face detection step. , Claims 9 In addition to the effects of the present invention, it is possible to automatically determine whether a person is photographed, automatically perform red-eye prevention light emission, and there is an effect that the user does not need to switch to the red-eye light emission mode.
[0107]
Claims 11 According to the invention according to claim 10 The invention includes a red-eye prevention emission mode setting step in which a user sets a red-eye prevention emission mode for performing red-eye prevention emission. In the strobe control step, the red-eye prevention emission mode is set in the red-eye prevention emission mode setting step. If the person's face is detected by the face detection step, the strobe light emitting unit causes the red-eye prevention light emission and then the main light emission, while the red-eye prevention light emission mode setting step When the prevention flash mode is not set, when the person's face is detected by the face detection process, the strobe flash means does not perform the red-eye prevention flash, but only the main flash. , Claims 10 In the invention according to the present invention, the user can set the red-eye prevention light emission mode for performing the red-eye prevention light emission, and can be prohibited when the user does not wish to perform the red-eye light emission.
[0109]
Claims 12 According to the invention according to claim Any one of claims 9 to 11 In the invention, the method includes a weak light emission amount step in which a user sets an amount of weakening the strobe light amount. According to the above invention, since the user sets the amount to reduce the amount of strobe light, the user can set the amount to reduce the strobe light. Any one of claims 9 to 11 In addition to the effects of the present invention, it is possible to perform shooting according to the situation.
[0110]
Claims 13 According to the invention according to claim Any one of claims 9 to 12 In the present invention, the brightness of the face portion detected in the face detection step is compared with the surrounding brightness, and the backlight is backlit when the brightness of the face portion is darker than a predetermined value compared to the surrounding brightness. A step of determining a backlight, and in the strobe control step, when the backlight is determined to be backlit in the step of determining the backlight, the strobe light emission means causes the strobe to emit light. Any one of claims 9 to 12 In addition to the effects of the present invention, it is possible to determine that the person is backlit even if the person is not in the center of the screen, and that it is possible to perform strobe light emission for backlight correction.
[0111]
Claims 14 According to the invention according to claim 13 In the invention according to the present invention, the method includes a backlight strobe setting step in which a user sets whether or not to cause the strobe light emission means to emit strobe light when the backlight determining step determines that the light is backlit. 13 In addition to the effects of the invention, it is possible to select whether or not the user performs backlight correction by strobe light, and it is possible to cope with the photographing intention and situation.
[0112]
Claims 15 According to the invention according to claim 9 ~ Claim 14 In the invention according to any one of the above, the method includes a face detection operation setting step in which the user sets whether to control the strobe light emission means based on the detection result of the human face in the face detection step. , Claims 9 ~ Claim 14 In addition to the effect of the invention according to any one of the above, there is an effect that the user can perform shooting according to the situation by prohibiting the face detection operation in the case of landscape shooting.
[0113]
Claims 16 According to the invention according to claim 9 ~ Claim 15 In the invention according to any one of the above, the method includes a notification step of notifying a user of the detection result of the person's face in the face detection step. 9 ~ Claim 15 In addition to the effect of the invention according to any one of the above, by notifying the user of the detection result of the person's face, the user can determine whether the face recognition processing has worked normally, There is an effect that it is possible to prevent the shooting from failing by stopping the shooting.
[0114]
Claims 17 According to the invention, a program is executed by a computer, 9 ~ Claim 16 Of the invention according to any one of Strobe control method Therefore, by executing a program on a computer, it is possible to automatically determine whether or not to shoot an object and automatically emit light suitable for shooting a person. If the face occupies more than the specified value on the screen, it can be judged that the face is shot up and the flash light can be emitted weakly, preventing whiteout caused by strong stroboscopic light on the face. Will be able to There is an effect.
[Brief description of the drawings]
FIG. 1 is an external configuration diagram of a digital camera according to an embodiment.
FIG. 2 is a block diagram showing a configuration of a digital camera according to the present embodiment.
FIG. 3 is a diagram showing a user setting screen for recording conditions displayed on the liquid crystal monitor when the SETUP mode is selected with the mode change switch of the operation unit.
4 is a block diagram showing a detailed configuration of the strobe circuit of FIG. 2. FIG.
FIG. 5 is an explanatory diagram for explaining an AE calculation process;
FIG. 6 is an explanatory diagram for explaining AE calculation processing;
FIG. 7 is a flowchart for explaining strobe light emission operation of the digital camera according to the embodiment.
FIG. 8 is a diagram showing a display example of a liquid crystal monitor of the digital camera of the present embodiment.
FIG. 9 is a diagram showing a display example of a liquid crystal monitor of the digital camera of the present embodiment.
[Explanation of symbols]
1 Camera body
2 Photo lens
3 Strobe
4 Finder
5 Top cover
6 Hinge
7 LCD monitor
8 Sub LCD
9 Upper lid open / close detection switch
10 Barrier opening / closing knob
11 Release switch
12 Mode selector switch
13 Strobe switch
14 Image quality mode switch
15 Cursor keys
16 DATE switch
17 ENTER key
18 SELECT key
2a Zoom lens
2b Focus lens
101 Mechanical mechanism
102 CCD
103 F / E
104 IPP
105 Compression / decompression circuit
106 Memory card
107 DRAM
108 Operation unit
109a Zoom lens motor
109b Focus motor
109c Aperture / Shutter Motor
110a Zoom driver
110b Focus driver
110c Aperture / Shutter Driver
111 SG
112 battery
113 DC / DC converter
114 AC adapter
115 controller
115a CPU
115b FLASH_ROM
115c SD_RAM
116 Communication driver part
117 Network Communication Department
201 Light emitting part
202 Main capacitor
203 Charging circuit (boost circuit)
204 Light emission start (trigger) circuit
205 Light emission stop circuit
205 Reflected light detector

Claims (17)

ストロボ機能を備えた撮像装置において、
被写体に応じた画像データを入力するための撮像手段と、
前記撮像手段から入力される画像データの中から人物の顔を検出するための顔検出手段と、
ストロボ光を発するためのストロボ発光手段と、
前記顔検出手段による人物の顔の検出結果に基づき、前記ストロボ発光手段を制御するストロボ制御手段と、を備え、
前記ストロボ制御手段は、前記顔検出手段により人物の顔が検出された場合に、撮影画面内における顔と判定した部分の面積が所定値以上の場合は、前記撮影画面内における顔と判定した部分の面積が前記所定値未満の場合よりも、前記ストロボ発光手段のストロボ光量を弱めに設定し、ストロボ撮影を行うことを特徴とする撮像装置。
In an imaging device with a strobe function,
Imaging means for inputting image data according to the subject;
Face detection means for detecting a human face from the image data input from the imaging means;
Strobe light emitting means for emitting strobe light;
Strobe control means for controlling the strobe light emission means based on the detection result of the human face by the face detection means,
Portion wherein flash control unit, when the face of a person is detected by the face detecting unit, the face area and determining portion in the photographing screen is equal to or larger than the predetermined value, it is determined that the face in the shooting screen An image pickup apparatus that performs strobe shooting by setting a strobe light amount of the strobe light emitting unit to be weaker than a case where the area of the strobe is less than the predetermined value.
前記ストロボ制御手段は、前記顔検出手段により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせることを特徴とする請求項1に記載の撮像装置。  2. The flash control unit according to claim 1, wherein when the face detection unit detects a human face, the flash control unit causes the flash unit to perform red-eye prevention light emission and then to perform main light emission. The imaging device described. 赤目防止発光を行う赤目防止発光モードを使用者が設定するための赤目防止発光モード設定手段を備え、
前記ストロボ制御手段は、前記赤目防止発光モード設定手段で赤目防止発光モードが設定されている場合、前記顔検出手段により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせる一方、前記赤目防止発光モード設定手段で赤目防止発光モードが設定されていない場合、前記顔検出手段により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせないで、本発光のみを行わせることを特徴とする請求項2に記載の撮像装置。
A red-eye prevention flash mode setting means for a user to set a red-eye prevention flash mode for performing red-eye prevention flash;
When the red-eye prevention light-emitting mode is set by the red-eye prevention light-emitting mode setting means, the strobe control means performs red-eye prevention light emission to the strobe light-emitting means when a face of the person is detected by the face detection means. The flash emission means when the red light prevention light emission mode setting means is not set in the red eye prevention light emission mode setting means and the face detection means detects a human face. The imaging apparatus according to claim 2, wherein only the main light emission is performed without performing the red-eye prevention light emission.
前記ストロボ光量を弱める量を使用者が設定するための弱発光量設定手段を備えたことを特徴とする請求項1〜請求項3のいずれか1つに記載の撮像装置。  The imaging apparatus according to any one of claims 1 to 3, further comprising a weak light emission amount setting means for a user to set an amount for reducing the amount of strobe light. 前記顔検出手段で検出された顔の部分の明るさと周囲の明るさとを比較し、顔の部分の明るさが周囲の明るさに比して所定値以上暗い場合に、逆光と判断する逆光判断手段を備え、
前記ストロボ制御手段は、前記逆光判断手段で逆光と判断された場合に、前記ストロボ発光手段にストロボ発光させることを特徴とする請求項1〜請求項4のいずれか1つに記載の撮像装置。
Backlight determination that compares the brightness of the face portion detected by the face detection means with the surrounding brightness and determines that it is backlit when the brightness of the face portion is darker than the surrounding brightness by a predetermined value or more. With means,
5. The image pickup apparatus according to claim 1, wherein the strobe control unit causes the strobe light emitting unit to emit strobe light when the back light determining unit determines that the light is back light. 6.
前記逆光判断手段で逆光と判断された場合に、前記ストロボ発光手段にストロボ発光させるか否かを使用者が設定するための逆光ストロボ設定手段を備えたことを特徴とする請求項5に記載の撮像装置。  6. The apparatus according to claim 5, further comprising a backlight strobe setting unit for a user to set whether or not the strobe light emitting unit causes the strobe to emit light when the backlight determining unit determines that the light is backlit. Imaging device. 前記顔検出手段による人物の顔の検出結果に基づき、ストロボ発光手段を制御するか否かを使用者が設定するための顔検出動作設定手段を備えたことを特徴とする請求項1〜請求項6のいずれか1つに記載の撮像装置。  The face detection operation setting means for the user to set whether or not to control the strobe light emission means based on the detection result of the person's face by the face detection means. 6. The imaging device according to any one of 6. 前記顔検出手段の人物の顔の検出結果を使用者に報知するための報知手段を備えたことを特徴とする請求項1〜請求項7のいずれか1つに記載の撮像装置。  The imaging apparatus according to claim 1, further comprising a notification unit configured to notify a user of a detection result of the person's face by the face detection unit. 被写体に応じた画像データを入力する画像入力工程と、
前記撮像手段で入力した画像データの中から人物の顔を検出する顔検出工程と、
前記顔検出工程による人物の顔の検出結果に基づき、ストロボ光を発するためのストロボ発光手段を制御するストロボ制御工程と、を含み、
前記ストロボ制御工程では、前記顔検出工程で人物の顔が検出された場合に、撮影画面内における顔と判定した部分の面積が所定値以上の場合は、前記撮影画面内における顔と判定した部分の面積が前記所定値未満の場合よりも、前記ストロボ発光手段のストロボ光量を弱めに設定し、ストロボ撮影を行うことを特徴とするストロボ制御方法。
An image input process for inputting image data according to the subject;
A face detection step for detecting a human face from the image data input by the imaging means;
A strobe control step of controlling a strobe light emitting means for emitting strobe light based on the detection result of the person's face by the face detection step,
In the strobe control step, when a face of a person is detected in the face detection step and the area of the portion determined to be a face in the shooting screen is greater than or equal to a predetermined value, the portion determined to be a face in the shooting screen A strobe control method , wherein strobe shooting is performed by setting a strobe light amount of the strobe light emitting unit to be weaker than that when the area of the strobe is less than the predetermined value.
前記ストロボ制御工程は、前記顔検出工程で人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせることを特徴とする請求項9に記載のストロボ制御方法。  10. The flash control process according to claim 9, wherein when the face of the person is detected in the face detection process, the flash light emitting unit performs red light prevention light emission and then performs main light emission. The strobe control method described. 赤目防止発光を行う赤目防止発光モードを使用者が設定する赤目防止発光モード設定工程を含み、
前記ストロボ制御工程では、前記赤目防止発光モード設定工程で赤目防止発光モードが設定されている場合、前記顔検出工程により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせた後、本発光を行わせる一方、前記赤目防止発光モード設定工程で赤目防止発光モードが設定されていない場合、前記顔検出工程により人物の顔が検出された場合に、前記ストロボ発光手段に、赤目防止発光を行わせないで、本発光のみを行わせることを特徴とする請求項10に記載のストロボ制御方法。
Including a red-eye prevention light emission mode setting step in which a user sets a red-eye prevention light emission mode for performing red-eye prevention light emission,
In the strobe control step, when the red-eye prevention light-emitting mode is set in the red-eye prevention light-emission mode setting step, and when a person's face is detected in the face detection step, the strobe light-emitting means performs red-eye prevention light-emission. The flash emission means when the main light emission is performed and the red eye prevention light emission mode is not set in the red eye prevention light emission mode setting step, or when the face of the person is detected by the face detection step. The strobe control method according to claim 10, further comprising performing only main light emission without performing red-eye prevention light emission.
前記ストロボ光量を弱める量を使用者が設定する弱発光量工程を含むことを特徴とする請求項9〜請求項11のいずれか1つに記載のストロボ制御方法。  The strobe control method according to any one of claims 9 to 11, further comprising a weak light emission amount step in which a user sets an amount to weaken the strobe light amount. 前記顔検出工程で検出された顔の部分の明るさと周囲の明るさとを比較し、顔の部分の明るさが周囲の明るさに比して所定値以上暗い場合に、逆光と判断する逆光判断工程を含み、
前記ストロボ制御工程では、前記逆光判断工程で逆光と判断された場合に、前記ストロボ発光手段にストロボ発光させることを特徴とする請求項9〜請求項12のいずれか1つに記載のストロボ制御方法。
Backlight determination in which the brightness of the face portion detected in the face detection step is compared with the surrounding brightness, and the brightness is determined to be backlit when the brightness of the face portion is darker than the surrounding brightness by a predetermined value or more. Including steps,
The strobe control method according to any one of claims 9 to 12, wherein, in the strobe control step, the strobe light emitting unit causes the strobe to emit light when it is determined that the back light is determined in the back light determination step. .
前記逆光判断工程で逆光と判断された場合に、前記ストロボ発光手段にストロボ発光させるか否かを使用者が設定する逆光ストロボ設定工程を含むことを特徴とする請求項13に記載のストロボ制御方法。  14. The strobe control method according to claim 13, further comprising a back light strobe setting step in which a user sets whether or not the strobe light emitting means causes the strobe light to be emitted when the back light determination step determines that the light is back light. . 前記顔検出工程による人物の顔の検出結果に基づき、ストロボ発光手段を制御するか否かを使用者が設定する顔検出動作設定工程を含むことを特徴とする請求項9〜請求項14のいずれか1つに記載のストロボ制御方法。  15. The method according to claim 9, further comprising a face detection operation setting step in which a user sets whether or not to control the strobe light emission means based on a result of detection of a human face by the face detection step. The strobe control method according to any one of the above. 前記顔検出工程の人物の顔の検出結果を使用者に報知する報知工程を含むことを特徴とする請求項9〜請求項15のいずれか1つに記載のストロボ制御方法。  The strobe control method according to any one of claims 9 to 15, further comprising a notification step of notifying a user of a detection result of a person's face in the face detection step. 請求項9〜請求項16のいずれか1つに記載のストロボ制御方法をコンピュータに実行させるためのプログラム。  A program for causing a computer to execute the strobe control method according to any one of claims 9 to 16.
JP2001304343A 2001-09-18 2001-09-28 Imaging apparatus, strobe control method, and program for computer to execute the method Expired - Fee Related JP4870887B2 (en)

Priority Applications (8)

Application Number Priority Date Filing Date Title
JP2001304343A JP4870887B2 (en) 2001-09-28 2001-09-28 Imaging apparatus, strobe control method, and program for computer to execute the method
US10/244,670 US7298412B2 (en) 2001-09-18 2002-09-17 Image pickup device, automatic focusing method, automatic exposure method, electronic flash control method and computer program
US11/745,753 US7973853B2 (en) 2001-09-18 2007-05-08 Image pickup device, automatic focusing method, automatic exposure method calculating an exposure based on a detected face
US11/745,789 US7920187B2 (en) 2001-09-18 2007-05-08 Image pickup device that identifies portions of a face
US11/745,775 US7787025B2 (en) 2001-09-18 2007-05-08 Image pickup device that cuts out a face image from subject image data
US11/745,686 US7978261B2 (en) 2001-09-18 2007-05-08 Image pickup device, automatic focusing method, automatic exposure method, electronic flash control method and computer program
US11/745,703 US7903163B2 (en) 2001-09-18 2007-05-08 Image pickup device, automatic focusing method, automatic exposure method, electronic flash control method and computer program
US13/012,558 US8421899B2 (en) 2001-09-18 2011-01-24 Image pickup device, automatic focusing method, automatic exposure method, electronic flash control method and computer program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2001304343A JP4870887B2 (en) 2001-09-28 2001-09-28 Imaging apparatus, strobe control method, and program for computer to execute the method

Publications (2)

Publication Number Publication Date
JP2003107567A JP2003107567A (en) 2003-04-09
JP4870887B2 true JP4870887B2 (en) 2012-02-08

Family

ID=19124283

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2001304343A Expired - Fee Related JP4870887B2 (en) 2001-09-18 2001-09-28 Imaging apparatus, strobe control method, and program for computer to execute the method

Country Status (1)

Country Link
JP (1) JP4870887B2 (en)

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040207743A1 (en) 2003-04-15 2004-10-21 Nikon Corporation Digital camera system
JP4130641B2 (en) 2004-03-31 2008-08-06 富士フイルム株式会社 Digital still camera and control method thereof
JP4572583B2 (en) * 2004-05-31 2010-11-04 パナソニック電工株式会社 Imaging device
JP4586548B2 (en) * 2005-01-26 2010-11-24 ソニー株式会社 Object detection apparatus and object detection method
JP4284448B2 (en) 2005-01-28 2009-06-24 富士フイルム株式会社 Image processing apparatus and method
CN101010943B (en) 2005-04-26 2010-04-21 佳能株式会社 Image taking device and its controlling method
JP2007065290A (en) 2005-08-31 2007-03-15 Nikon Corp Automatic focusing device
JP4761039B2 (en) * 2005-10-19 2011-08-31 富士フイルム株式会社 Imaging device
JP2007178542A (en) * 2005-12-27 2007-07-12 Samsung Techwin Co Ltd Imaging apparatus
JP4639271B2 (en) 2005-12-27 2011-02-23 三星電子株式会社 camera
JP4554529B2 (en) * 2006-02-06 2010-09-29 富士フイルム株式会社 Imaging device
JP4510768B2 (en) 2006-02-15 2010-07-28 富士フイルム株式会社 Imaging apparatus and method, and program
JP4567618B2 (en) * 2006-02-23 2010-10-20 富士フイルム株式会社 Imaging apparatus and control method thereof
JP2007243250A (en) * 2006-03-03 2007-09-20 Olympus Imaging Corp Imaging apparatus and imaging method
JP2007264196A (en) 2006-03-28 2007-10-11 Fujifilm Corp Strobe control unit and method
JP4874750B2 (en) * 2006-09-22 2012-02-15 富士フイルム株式会社 Digital camera and control method thereof
JP5004544B2 (en) 2006-09-29 2012-08-22 富士フイルム株式会社 Imaging apparatus and exposure control method
JP4658015B2 (en) 2006-10-13 2011-03-23 富士フイルム株式会社 Digital camera and control method thereof
JP4311435B2 (en) 2006-10-25 2009-08-12 ソニー株式会社 IMAGING DEVICE, IMAGING DEVICE CONTROL METHOD, AND COMPUTER PROGRAM
JP2008187317A (en) 2007-01-29 2008-08-14 Fujifilm Corp Photographing device and control method thereof, and program
JP2008312057A (en) * 2007-06-15 2008-12-25 Fujifilm Corp Photographing method and apparatus
JP2009157004A (en) * 2007-12-26 2009-07-16 Sanyo Electric Co Ltd Imaging apparatus
JP5065060B2 (en) 2008-01-16 2012-10-31 キヤノン株式会社 Imaging apparatus and control method thereof
JP4957580B2 (en) * 2008-02-19 2012-06-20 カシオ計算機株式会社 Imaging apparatus and program
KR101457417B1 (en) 2008-08-22 2014-11-03 삼성전자주식회사 Photographing control method and apparatus using stroboscope
JP5361592B2 (en) 2009-07-24 2013-12-04 オリンパス株式会社 Endoscope apparatus, measurement method, and program
JP5473582B2 (en) * 2009-12-15 2014-04-16 キヤノン株式会社 Image processing apparatus, method, and program
JP5583465B2 (en) * 2010-04-28 2014-09-03 オリンパスイメージング株式会社 Imaging device
JP5546381B2 (en) * 2010-07-30 2014-07-09 キヤノン株式会社 Imaging apparatus and control method thereof
JP6205684B2 (en) * 2012-08-01 2017-10-04 株式会社ニコン Imaging device
JP2018013793A (en) * 2017-09-07 2018-01-25 株式会社ニコン Imaging device
WO2020179898A1 (en) 2019-03-07 2020-09-10 日本電気株式会社 Photographing apparatus, photographing method, and storage medium having program stored therein

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000194028A (en) * 1998-12-25 2000-07-14 Canon Inc Photometric device
JP2000347246A (en) * 1999-06-04 2000-12-15 Fuji Photo Film Co Ltd Finder and camera
JP4064031B2 (en) * 2000-01-31 2008-03-19 富士フイルム株式会社 Image processing method
JP4504492B2 (en) * 2000-02-04 2010-07-14 オリンパス株式会社 Camera with main subject detection function

Also Published As

Publication number Publication date
JP2003107567A (en) 2003-04-09

Similar Documents

Publication Publication Date Title
JP4870887B2 (en) Imaging apparatus, strobe control method, and program for computer to execute the method
JP4794786B2 (en) Imaging apparatus, automatic exposure method, and program for computer to execute the method
JP4626425B2 (en) Imaging apparatus, imaging method, and imaging program
US7430369B2 (en) Image capture apparatus and control method therefor
US7920187B2 (en) Image pickup device that identifies portions of a face
JP2003107335A (en) Image pickup device, automatic focusing method, and program for making computer execute the method
US7577354B2 (en) Digital camera with face detection function for red eye reduction
JP2008054297A (en) System for and method of photographing image, and computer program
JP4623299B2 (en) Imaging apparatus and imaging method
JP2009223328A (en) Camera with strobe light
JP2007104108A (en) Imaging apparatus, emission luminance control method and program
JP4998122B2 (en) Imaging apparatus and program thereof
JP2011013683A (en) Imaging apparatus, auto focus method, and program for allowing computer to perform the method
JP2006163496A (en) Apparatus, method and program for image recording
JP5316923B2 (en) Imaging apparatus and program thereof
JP4219201B2 (en) Imaging system
JP2004236287A (en) Electronic camera
JPH11266381A (en) Electronic camera
JP2008129082A (en) Image taking device and light emission control method
JP2008160701A (en) Camera and photographic control program for the camera
JP4359074B2 (en) Camera with strobe
JP5387645B2 (en) Imaging apparatus and program thereof
JP5447286B2 (en) Imaging apparatus, automatic focusing method, and program for computer to execute the method
JP2010092066A (en) Imaging apparatus, automatic focusing method, and program for allowing computer to perform the method
JP4915272B2 (en) Imaging apparatus and program thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080825

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101116

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110117

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110315

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110512

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20110712

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20111011

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20111019

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20111115

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20111118

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20141125

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees