JP2009231966A - 撮像装置及びそのプログラム - Google Patents
撮像装置及びそのプログラム Download PDFInfo
- Publication number
- JP2009231966A JP2009231966A JP2008072301A JP2008072301A JP2009231966A JP 2009231966 A JP2009231966 A JP 2009231966A JP 2008072301 A JP2008072301 A JP 2008072301A JP 2008072301 A JP2008072301 A JP 2008072301A JP 2009231966 A JP2009231966 A JP 2009231966A
- Authority
- JP
- Japan
- Prior art keywords
- face
- related information
- face detection
- detection frame
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Studio Devices (AREA)
Abstract
【解決手段】デジタルカメラは、顔検出機能を有する。つまり、モニタリング動作中、顔の個数、位置、および大きさを、顔関連情報として抽出する顔検出処理を繰り返し実行し、5つ顔関連情報を記憶可能なFIFOバッファに、顔検出処理で抽出される顔関連情報を順次入力し、FIFOバッファに記憶した顔関連情報のうち顔の個数が最大または最小であるものに基づいて、モニタリング画面に顔検出枠を表示させるとともに、所定のタイミングで、顔関連情報を更新する。
【選択図】図4
Description
この撮像装置としては、スルー画像の表示中や動画像の撮影記録中に被写体である人物の顔を自動的に検出する顔検出機能を有するものがある。具体的には、この撮像装置は、画像から人物の顔の特徴を有する領域を抽出し、この抽出した領域の顔としての確からしさを顔評価値として評価する。そして、顔評価値が所定の閾値以上である領域を、顔部分の領域(以下、顔領域と呼ぶ)として顔検出枠で囲んで表示するとともに、この顔領域の画像情報に基づいて、自動合焦(AF)制御や自動露出調整(AE)制御を行う。
この問題を解決するため、顔評価値の大小に応じて、枠線の濃淡、枠線の色相、枠線を構成する線分方向表示率、および枠線の幅などを変化させる手法が提案されている(特許文献1参照)。
〔第1実施形態〕
図1は、本発明の第1実施形態に係る撮像装置としてのデジタルカメラ1の概略構成を示すブロック図である。
このデジタルカメラ1は、自動露出制御、自動焦点制御、自動顔検出の各機能を備えたものであり、主として以下の各部を備える。
レンズ駆動回路8は、制御部7の指令に従い、レンズモータを駆動し、これにより、フォーカスレンズの光軸上の位置が制御される。
CCD2は、CCD駆動回路4から出力されるタイミング信号に基づいて、被写体の光学像を光電変換し撮像信号として出力する。
A/D変換器5は、CCD2から出力された撮像信号をデジタル信号に変換し、画像処理部6に出力する。
画像処理部6は、生成したYUVデータを順次SDRAM9に格納する。
シャッターキーは、ユーザが撮影予告を行うための半押し位置と、実際の撮影動作を指示するための全押し位置との2段階の操作が可能な所謂ハーフシャッター機能を有する。
以上のキー入力ブロック14の各キーの操作状態は、制御部7により随時スキャンされる。
そして、記録モードで撮影すると、SDRAM9に一時記憶された画像データがJPEG変換部11においてJPEG方式により圧縮符号化された後、外部メモリI/F12を介して、例えば各種のメモリカードにより構成される外部メモリ13に静止画ファイルとして記録される。
なお、フラッシュメモリ16は、ユーザにより設定されたデジタルカメラ1の各種の機能に関する設定情報も記憶する。
このFIFOバッファ17は、先入れ先出し式のエンドレス記憶するバッファであり、顔関連情報を5つ記憶した状態で新たな顔関連情報が入力されると、記憶していた5つの顔関連情報のうち最も古いものを、新たな顔関連情報に更新する。
例えば、第1〜第3メモリ領域に3つの顔関連情報A〜Cが既に格納された状態で、新たに顔関連情報Dが入力されると、この顔関連情報Dは、空き領域である第4メモリ領域に格納される。
まず、ユーザにより記録モードに設定され、かつ、顔検出機能がオンされると、ステップS1でモニタリング動作を開始する。つまり、毎秒30フレームの撮影が行われ、モニタリング画面としての表示部10の表示領域には、スルー画像が表示される。
なお、顔検出処理により顔が検出されない場合、顔関連情報を顔未検出とする。
すなわち、画像P、Q、Rでは、後列に大人である人物21〜24、前列に乳児である人物25の計5人が被写体である。これらの人物21〜25は、よそ見をしたり、視線をデジタルカメラ1から外したりしており、被写体の顔の位置や大きさは、画像中で変動している。
すなわち、画像Pについての顔関連情報では、顔の個数は「5」となり、顔の位置および大きさは、顔領域21P、22P、23P、24P、25Pとなる。
また、画像Qについての顔関連情報では、顔の個数は「5」となり、顔の位置および大きさは、顔領域21Q、22Q、23Q、24Q、25Qとなる。
また、画像Rについての顔関連情報では、顔の個数は「2」となり、顔の位置および大きさは、顔領域21R、23Rとなる。画像Rでは、人物22、24、25が横を向いているため、顔領域を検出できていない。
ステップS4では、FIFOバッファ17に新たに5つ顔関連情報が記憶されたか否かを判定する。この判定がYESの場合には、ステップS5に移り、NOの場合には、ステップS8に移る。
具体的には、上述の画像P〜Rについての顔関連情報の中では、画像Qについての顔関連情報が抽出される。
なお、記憶した全ての顔関連情報が顔未検出である場合には、画角中央に顔検出枠を表示する。
すなわち、顔検出枠を最新のものにロックし、この顔検出枠に囲まれた最新の顔領域内の画像に基づいて、ステップS7でのAF処理およびAE処理よりも高精度のAF処理およびAE処理を行う。
(1)顔検出処理を繰り返し実行し、FIFOバッファ17に顔検出処理で抽出される顔関連情報を順次入力し、FIFOバッファ17に記憶した5つの顔関連情報のうち顔の個数が最大であるもの、ここでは、画像Qの顔関連情報に基づいて、スルー画像Sに対して顔領域21SA〜25SAを表示した。
特に、スルー画像Sのように被写体の人物22、25の顔がデジタルカメラ1側に向いていない場合、従来では、顔領域を検出できず、顔検出枠が明滅するおそれがあるが、本発明によれば、スルー画像Sについても、顔検出処理の結果に基づいて、顔領域22SA、25SAを示す顔検出枠を表示できるから、顔検出枠が明滅するのを防止できる。
本実施形態では、デジタルカメラ1の動作が、第1実施形態と異なる。
本実施形態のデジタルカメラ1の動作について、図9のフローチャートを参照しながら説明する。
本実施形態では、第1実施形態のステップS4が省略されているため、ステップS24では、FIFOバッファ17に新たな顔関連情報が1つ記憶されるたびに、FIFOバッファ17に記憶した顔関連情報の中から顔の個数が最大のものを抽出することになる。
なお、画像Rについては、人物22、24、25の顔について顔領域が検出されていないため、顔領域22SB、24SB、25SBの算出に際して、画像Rについての顔関連情報は算入されない。
例えば、図10に示すスルー画像S上には、顔領域21SB〜25SBを示す顔検出枠が表示される。
(2)顔検出処理を繰り返し実行し、FIFOバッファ17に顔検出処理で抽出される顔関連情報を順次入力し、FIFOバッファ17に記憶した5つの顔関連情報のうち最大数の顔について、顔の位置および大きさを平均化した。具体的には、画像P、Q、Rの顔関連情報に基づいて、スルー画像Sに対して顔領域21SB〜25SBを表示した。よって、顔領域を検出できないスルー画像Sについても、顔検出処理の結果に基づいて、顔領域22SB、25SBを示す顔検出枠を表示できるから、顔検出枠が明滅するのを防止できる。
また、顔の位置および大きさを平均化したので、1つの顔関連情報に誤検出があっても、この誤検出の影響を緩和して、より正確に顔検出枠を表示できる。
例えば、上述の第1実施形態では、FIFOバッファ17に記憶した顔関連情報の中から顔の個数が最大のものを抽出したが、これに限らず、記憶した顔関連情報の中から顔の個数が最小のものを抽出してもよい。
このようにすれば、1つの顔関連情報で顔以外の部分を顔領域として検出した場合でも、その他の顔関連情報に基づいて、この誤検出の影響を除去して、顔以外の部分に顔検出枠が表示されるのを防止できる。
7 制御部(記憶制御手段、表示制御手段、撮影制御手段)
17 FIFOバッファ(バッファメモリ)
15 顔認識処理部(顔検出処理手段)
Claims (7)
- 顔検出機能を有する撮像装置であって、
モニタリング動作中、顔の個数、顔の位置、および顔の大きさを、顔関連情報として抽出する顔検出処理を繰り返し実行する顔検出処理手段と、
複数の顔関連情報を記憶可能なバッファメモリに、前記顔検出処理で抽出される顔関連情報を順次入力する記憶制御手段と、
前記バッファメモリに記憶した複数の顔関連情報のうち顔の個数が最大または最小であるものに基づいてモニタリング画面に顔検出枠を表示させる顔検出枠表示処理を繰り返し実行する表示制御手段と、を備えることを特徴とする撮像装置。 - 顔検出機能を有する撮像装置であって、
モニタリング動作中、顔の個数、顔の位置、および顔の大きさを、顔関連情報として抽出する顔検出処理を繰り返し実行する顔検出処理手段と、
複数の顔関連情報を記憶可能なバッファメモリに、前記顔検出処理で抽出される顔関連情報を順次入力する記憶制御手段と、
前記バッファメモリに記憶した複数の顔関連情報を平均化し、当該平均化した顔関連情報に基づいて、モニタリング画面に顔検出枠を表示させる顔検出枠表示処理を繰り返し実行する表示制御手段と、を備えることを特徴とする撮像装置。 - 前記顔検出枠で囲まれた領域内の画像に基づく自動合焦および自動露出調整を行う撮影制御手段をさらに備えることを特徴とする請求項1または2に記載の撮像装置。
- 前記表示制御手段は、前記記憶制御手段により前記バッファメモリに記憶された複数の顔関連情報の全てが新たな顔関連情報に入れ替わる毎に、前記顔検出枠表示処理を実行することを特徴とする請求項1から3のいずれかに記載の撮像装置。
- 前記表示制御手段は、前記記憶制御手段により前記バッファメモリに記憶された複数の顔関連情報のうちの1つが新たな顔関連情報に入れ替わる毎に、前記顔検出枠表示処理を実行することを特徴とする請求項1から3のいずれかに記載の撮像装置。
- 顔検出機能を有する撮像装置が有するコンピュータに、
モニタリング動作中、顔の個数、顔の位置、および顔の大きさを、顔関連情報として抽出する顔検出処理を繰り返し実行する処理と、
複数の顔関連情報を記憶可能なバッファメモリに、前記顔検出処理で抽出される顔関連情報を順次入力する処理と、
前記バッファメモリに記憶した複数の顔関連情報のうち顔の個数が最大または最小であるものに基づいてモニタリング画面に顔検出枠を表示させる顔検出枠表示処理を繰り返し実行する処理と、を実行させることを特徴とするプログラム。 - 顔検出機能を有する撮像装置が有するコンピュータに、
モニタリング動作中、顔の個数、顔の位置、および顔の大きさを、顔関連情報として抽出する顔検出処理を繰り返し実行する処理と、
複数の顔関連情報を記憶可能なバッファメモリに、前記顔検出処理で抽出される顔関連情報を順次入力する処理と、
前記バッファメモリに記憶した複数の顔関連情報を平均化し、当該平均化した顔関連情報に基づいて、モニタリング画面に顔検出枠を表示させる顔検出枠表示処理を繰り返し実行する処理と、を実行させることを特徴とするプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008072301A JP4983672B2 (ja) | 2008-03-19 | 2008-03-19 | 撮像装置及びそのプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008072301A JP4983672B2 (ja) | 2008-03-19 | 2008-03-19 | 撮像装置及びそのプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009231966A true JP2009231966A (ja) | 2009-10-08 |
JP4983672B2 JP4983672B2 (ja) | 2012-07-25 |
Family
ID=41246918
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008072301A Expired - Fee Related JP4983672B2 (ja) | 2008-03-19 | 2008-03-19 | 撮像装置及びそのプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4983672B2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014207618A (ja) * | 2013-04-15 | 2014-10-30 | リコーイメージング株式会社 | 撮像装置、撮像方法および記録媒体 |
JP2015119205A (ja) * | 2013-12-16 | 2015-06-25 | キヤノン株式会社 | 撮像装置、制御方法及びプログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005286940A (ja) * | 2004-03-31 | 2005-10-13 | Fuji Photo Film Co Ltd | ディジタル・スチル・カメラおよびその制御方法 |
JP2006254358A (ja) * | 2005-03-14 | 2006-09-21 | Omron Corp | 撮像装置およびタイマー撮影方法 |
JP2007068147A (ja) * | 2005-08-05 | 2007-03-15 | Canon Inc | 画像処理方法、撮像装置、及び、画像処理方法をコンピュータに実行させるための制御プログラム |
-
2008
- 2008-03-19 JP JP2008072301A patent/JP4983672B2/ja not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2005286940A (ja) * | 2004-03-31 | 2005-10-13 | Fuji Photo Film Co Ltd | ディジタル・スチル・カメラおよびその制御方法 |
JP2006254358A (ja) * | 2005-03-14 | 2006-09-21 | Omron Corp | 撮像装置およびタイマー撮影方法 |
JP2007068147A (ja) * | 2005-08-05 | 2007-03-15 | Canon Inc | 画像処理方法、撮像装置、及び、画像処理方法をコンピュータに実行させるための制御プログラム |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014207618A (ja) * | 2013-04-15 | 2014-10-30 | リコーイメージング株式会社 | 撮像装置、撮像方法および記録媒体 |
JP2015119205A (ja) * | 2013-12-16 | 2015-06-25 | キヤノン株式会社 | 撮像装置、制御方法及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
JP4983672B2 (ja) | 2012-07-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8780200B2 (en) | Imaging apparatus and image capturing method which combine a first image with a second image having a wider view | |
JP4761146B2 (ja) | 撮像装置及びそのプログラム | |
JP4760742B2 (ja) | デジタルカメラ、及び情報表示方法、情報表示制御プログラム | |
US8989504B2 (en) | Image processing device that renews identification information of specific subject | |
US8384798B2 (en) | Imaging apparatus and image capturing method | |
JP2009290817A (ja) | カメラ、カメラ制御プログラム及びカメラ制御方法 | |
JP2009207119A (ja) | 撮像装置及びプログラム | |
KR20110074718A (ko) | 화상의 확대 표시 기능을 구비한 카메라 | |
JP5765590B2 (ja) | 撮像装置、表示方法及びプログラム | |
JP2009159559A (ja) | 撮影装置及びそのプログラム | |
JP2009213114A (ja) | 撮像装置及びプログラム | |
JP2008301355A (ja) | 撮像装置及びそのプログラム | |
JP2007311962A (ja) | 電子カメラおよび画像表示プログラム | |
JP6758950B2 (ja) | 撮像装置、その制御方法とプログラム | |
JP6693071B2 (ja) | 撮像装置、撮像制御方法及びプログラム | |
JP4983672B2 (ja) | 撮像装置及びそのプログラム | |
JP2008263478A (ja) | 撮像装置 | |
JP6024135B2 (ja) | 被写体追尾表示制御装置、被写体追尾表示制御方法およびプログラム | |
JP6225463B2 (ja) | 撮像装置、撮像方法および記録媒体 | |
JP2020115679A (ja) | 物体検出装置、検出制御方法及びプログラム | |
JP2009049639A (ja) | 撮影装置 | |
JP2010016469A (ja) | 電子カメラ | |
JP2018106763A (ja) | 撮像装置 | |
JP2019075653A (ja) | 撮像装置 | |
JP2009194469A (ja) | 撮像装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100915 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20111202 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120124 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120305 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20120327 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20120409 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 Ref document number: 4983672 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20150511 Year of fee payment: 3 |
|
LAPS | Cancellation because of no payment of annual fees |