JP2003216935A

JP2003216935A - 顔抽出装置及び方法及びそれを記憶した記録媒体

Info

Publication number: JP2003216935A
Application number: JP2002016550A
Authority: JP
Inventors: Yuji Takada; 雄二高田; Hideaki Matsuo; 英明松尾; Tetsuya Yoshimura; 哲也吉村
Original assignee: Matsushita Electric Industrial Co Ltd
Current assignee: Panasonic Holdings Corp
Priority date: 2002-01-25
Filing date: 2002-01-25
Publication date: 2003-07-31

Abstract

(57)【要約】【課題】ハフ変換による顔抽出装置は、太陽光などの
撮影条件の変動に強いという特徴を有する。しかし、胴
体などが近距離用の大きなテンプレートに一致すること
による誤検出や、背景の部分が小さなテンプレートと一
致してしまうことによる誤検出などの問題があった。【解決手段】対象画像から得られた第１の特徴に基づ
いて顔抽出を行った第１の顔領域候補と、対象画像から
得られた第２の特徴に基づいて顔抽出を行った第２の顔
領域候補とを統合し、統合顔領域候補を生成する。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、画像処理により顔
抽出を行う顔抽出装置及びその方法に関するものであ
る。

【０００２】

【従来の技術】人物を撮影した画像から顔領域を抽出す
る技術として、出願人は文献１（特開平１３−２２２７
１９号公報）において、テンプレートハフ変換による技
術を提案している。本技術では、人物の顔が円状である
ことを利用して、円形のテンプレートを用いて投票を行
い、円形の領域を探索することで顔領域を抽出する。こ
の技術では、顔の輪郭形状のみを特徴として利用してい
るため、顔の向きによらず安定して顔を抽出することが
出来る。また、逆光状態などにおいて顔の内部の目、
鼻、口を含む情報が得られない場合でも顔を抽出するこ
とが可能である。

【０００３】

【発明が解決しようとする課題】上述のハフ変換による
顔抽出装置では、人物とカメラとの距離が遠い場合に
は、顔のサイズが小さくなり、胴体などが近距離用の大
きなテンプレートに一致することにより誤検出する場合
がある。また、複雑な背景を含む画像から検出を行う際
に、背景の部分が小さなテンプレートと一致してしまう
ことにより誤検出を起こしてしまう場合がある。

【０００４】更に、以上の誤検出により、実際の顔領域
が抽出できた場合でも、背景などにより抽出された結果
の方が検出における信頼度が高く評価され、検出精度が
低くなるという問題点がある。例えば、上述の顔抽出装
置の撮影領域を、最短距離で胸位置から上の部分が画面
に入る程度の距離から、最長距離で全身が画面に入る程
度の距離までとする場合、全身が画面に入る距離にある
カメラから撮影された画像から顔を抽出する際に、近距
離用に設定された大きなサイズのテンプレートに対し、
胴体部分と一致することにより誤検出が発生する場合が
ある。この場合、輪郭情報のみを使用しているため、顔
かどうかの判定して誤検出を回避することは難しい。

【０００５】そこで、本発明は、撮影時の太陽光などの
撮影条件に強いというハフ変換の特徴を生かしつつ、カ
メラからの距離によらず、安定した顔抽出ができる顔抽
出装置及びその関連技術を提供することを目的とする。

【０００６】

【課題を解決するための手段】本発明の顔抽出装置は、
顔抽出の対象となる画像を入力する画像入力手段と、入
力画像に対し第１の画像処理を行う第１の画像処理手段
と、第１の画像処理により得られた特徴によって、入力
画像から、顔を含むと思われる領域を抽出する第１の顔
抽出手段と、入力画像に対し第２の画像処理を行う第２
の画像処理手段と、第２の画像処理により得られた特徴
によって顔を含むと思われる領域を抽出する第２の顔抽
出手段と、第１顔領域候補と第２顔領域候補とを統合
し、統合顔領域候補を生成する統合手段とを備える。こ
の構成により、第１の顔抽出手段による顔抽出結果と第
２の顔抽出手段による顔抽出結果を統合することで、カ
メラからの距離や撮影条件によらず安定した顔抽出が可
能となる。

【０００７】また、本発明の顔抽出装置では、第１顔領
域候補と第２顔領域候補とが同一の検出対象に対する候
補であるか否かを判定する同一候補判定手段を備え、統
合手段は、同一候補判定手段の判定結果に基づいて統合
顔領域候補を生成する。この構成により、第１の顔抽出
手段のみでは検出失敗していた状況においても第１の顔
抽出手段による第１顔領域候補と第２の顔抽出手段によ
る第２顔領域候補を統合することで安定した顔抽出が可
能となる。

【０００８】また、本発明の顔抽出装置では、同一候補
判定手段は、第１顔領域候補の領域内に第２顔領域候補
の重心が存在する場合に同一候補と判定する。この構成
により、領域のサイズに応じた同一候補判定が可能とな
り、不要に統合されることを防ぐことが可能となる。

【０００９】また、本発明の顔抽出装置では、同一候補
判定手段は、第１顔領域候補の内部に同一判定領域を設
定し、第２顔領域候補の重心が同一判定領域に含まれる
場合に同一候補と判定する。この構成により、同一候補
と判定する距離を調整することが可能となり、正確に顔
領域を抽出した候補が削除されることを防ぐことが可能
となる。

【００１０】また、本発明の顔抽出装置では、同一候補
判定手段は、第１顔領域候補にサイズ比較係数を乗算し
た比較サイズと第２顔領域候補の領域サイズとの差分が
所定の閾値以内である場合に同一候補と判定する。この
構成により、サイズが異なる候補同士で統合されること
を防ぐことが可能となる。

【００１１】また、本発明の顔抽出装置では、信頼度計
算手段は、同一候補判定手段において同一候補と判定さ
れた場合には、第１顔領域候補の信頼度と第２顔領域候
補の信頼度とを予め設定された比率で加算して得られる
値を、統合顔領域候補に対する統合結果信頼度とする。
この構成により、第１の顔抽出手段と第２の顔抽出手段
において重複して抽出された顔領域候補の信頼度を高く
することにより、顔抽出精度を向上することが可能とな
る。

【００１２】また、本発明の顔抽出装置では、統合手段
は、第１顔領域候補と第２顔領域候補の信頼度の比率に
より統合顔領域候補の位置、大きさを計算する。この構
成により、抽出される顔領域候補の位置とサイズの精度
を向上することが可能となる。

【００１３】また、本発明の顔抽出装置では、同一候補
判定手段によって同一候補と判定された第１顔領域候補
と第２顔領域候補のうち、信頼度が最大となる候補によ
って統合顔領域候補を決定し、信頼度が最大とならない
候補を削除する。この構成により、同一の検出対象に対
する顔領域候補を１つにすることで、不要な候補を削除
することが可能となる。

【００１４】

【発明の実施の形態】以下図面を参照しながら、本発明
の、実施の形態の概略を説明する。図１は、本発明の一
実施の形態における顔抽出装置のブロック図である。

【００１５】画像入力手段１０１には、顔抽出の対象画
像として、カメラ、もしくは記憶装置からの画像が入力
される。記憶装置は、読み書きされるメモリ、ハードデ
ィスクなどからなり、画像が記憶されている。画像入力
手段１０１は、入力された顔抽出対象画像を制御手段１
０３が取り扱い可能な形式の入力画像に変換する。

【００１６】画像処理手段１０２は、第１の顔抽出手段
１０４及び第２の顔抽出手段１０５において顔抽出する
際に必要な、画像フォーマット変換、サブサンプリン
グ、エッジ検出等の画像処理を行う。

【００１７】制御手段１０３は、図１に示す各要素を制
御し、画像入力手段１０１で入力、変換された入力画像
は、制御手段１０３に入力される。

【００１８】第１の顔抽出手段１０４は、予め用意し
た、顔の輪郭を近似した複数サイズの楕円テンプレート
を用いて顔抽出を行い、１つ以上の顔領域候補からなる
第１顔領域候補情報を生成する。

【００１９】第２の顔抽出手段１０５は、顔画像に対し
て画像処理を行った結果得られる特徴を顔抽出テンプレ
ートとして記憶しておき、この顔抽出テンプレートを用
いて顔抽出を行い、１つ以上の顔領域候補からなる第２
顔領域候補情報を生成する。

【００２０】同一候補判定手段１０６は、第１顔領域候
補情報の各候補と、第２顔領域候補情報の各候補とが、
同一の被検出対象に対する候補であるかどうかを判定し
判定結果を生成する。

【００２１】信頼度計算手段１０７は、同一候補判定手
段１０６での判定結果に応じて、顔候補信頼度を計算す
る。

【００２２】統合手段１０８は、判定結果に応じて、第
１顔領域候補情報と、第２顔領域候補情報とを統合し
て、１つ以上の統合顔領域候補からなる統合顔領域候補
情報を生成し、顔候補信頼度の降順にソートを行う。

【００２３】このようにして得られた顔抽出結果は、例
えば信頼度の高い順番に表示、あるいは所定の信頼度以
上の候補のみを表示して、最適な抽出結果をユーザに選
択させるようにすることができる。

【００２４】次に、図２を参照しながら、本実施の形態
における顔抽出処理の流れを説明する。まず、ステップ
１において、画像入力手段１０１は、顔検出対象画像１
を入力して入力画像２に変換し、制御手段１０３に入力
画像２を送る。次に、ステップ２において、制御手段１
０３は、画像処理手段１０２に、画像処理を実施させ、
第１の顔抽出手段１０４に送る第１顔抽出前処理画像を
作成する。

【００２５】本実施の形態では、第１顔抽出前処理画像
として、エッジ画像３を作成する。エッジ画像３の具体
的な作成について以下説明する。まず、入力画像２を
（数１）により、グレー画像４に変換する。

【００２６】

【数１】

【００２７】但し、I(x,y)は、点(x,y)におけるグレー
画像４の輝度値である。R(x,y)は、入力画像２の点(x,
y)におけるR成分の値である。G(x,y)は、入力画像２の
点(x,y)におけるG成分の値である。B(x,y)は、入力画像
２の点(x,y)におけるB成分の値である。

【００２８】作成されたグレー画像４に対してエッジ抽
出用フィルタを適用し、エッジ画像３を作成する。エッ
ジ抽出用フィルタとしては、例えば、一般的に用いられ
ているＳｏｂｅｌフィルタを用いることができる。本実
施の形態では、具体的には、（数２）、（数３）のＳｏ
ｂｅｌＸ、ＳｏｂｅｌＹを定義する。

【００２９】

【数２】

【００３０】

【数３】

【００３１】ＳｏｂｅｌＸを用いてＸエッジ画像５を作
成し、ＳｏｂｅｌＹを用いてＹエッジ画像６を作成す
る。Ｘエッジ画像５とＹエッジ画像６のＡＮＤをとるこ
とにより、エッジ画像３が作成される。

【００３２】次に、ステップ３では、第１の顔抽出手段
１０４は、作成されたエッジ画像３を用いて顔抽出を行
う。本実施の形態では、顔の輪郭を特徴として顔抽出を
行う手法として、文献１（特開平１３−２２２７１９号
公報）に記載の手法を用いる。具体的には、まず、複数
サイズの円テンプレートを用意する。用意した複数サイ
ズの円テンプレートを重ね合わせ１枚の投票用テンプレ
ートを作成する。この投票用テンプレートを使って、エ
ッジ画像３のエッジ点の位置を中心に投票用テンプレー
トを投票空間７に加算することで投票を行う。

【００３３】次に、投票空間７から投票値が山状のピー
ク点の全てを第１顔領域候補８として抽出する。そし
て、抽出された第１顔領域候補８それぞれに対して信頼
度を計算する。例えば、投票値をベースに、投票値が０
の点を信頼度０とし、投票値が最大となる点を１．０と
なるように信頼度を定義する。また、テンプレートの半
径を候補のサイズとし、ピーク点の中心となる座標を候
補の位置とする。以上の計算された信頼度と位置とサイ
ズを、第１顔領域候補情報９に信頼度が高い順に並べ替
えを行いセットする。抽出された全ての候補について設
定せずに、適宜設定した閾値以上の信頼度の点のみをセ
ットしてもよい。また、適宜設定した数の候補を信頼度
の上位から順にセットしてもよい。

【００３４】ステップ４では、制御手段１０３は、画像
処理手段１０２に、画像処理を実施させ、第２の顔抽出
手段１０５に送る第２顔抽出前処理画像を作成する。本
実施の形態では、第２顔抽出前処理画像として、第２エ
ッジ画像１０を作成する。第２エッジ画像１０は、ステ
ップ２と同じ手順で作成するが、第２の顔抽出手段１０
５に応じて、エッジ検出に使用するフィルタを変更して
もよいし、別の手段で検出しても構わない。

【００３５】ステップ５では、第２の顔抽出手段１０５
は、作成された第２エッジ画像１０を用いて顔抽出を行
う。具体的には、第２エッジ画像１０に対して、複数サ
イズの標準顔テンプレート１１との相関を求めることで
顔抽出を行う。ここで、標準顔テンプレート１１は、予
め複数人の顔画像から作成しておく。また、相関を求め
る際には、常法のテンプレートマッチングを用いること
ができる。求めた相関値を信頼度とし、使用した標準顔
テンプレート１１のサイズを顔サイズとして抽出する。

【００３６】抽出した顔サイズ、位置、信頼度を第２顔
領域候補１２として抽出する。抽出された第２顔領域候
補１２を、信頼度が高い順に並べ替えを行い第２顔領域
候補情報１３にセットする。全ての候補について設定せ
ずに、適宜設定した閾値以上の信頼度の点のみをセット
してもよい。また、適宜設定した数の候補を信頼度の上
位から順にセットしてもよい。

【００３７】次に、ステップ６では、ステップ５終了後
最初の処理では、第１候補番号ｉに初期値として０を設
定し、統合候補番号ｊに初期値として０をする。ステッ
プ７から戻ってきた場合には、第１候補番号ｉに１を加
算する。第１候補番号ｉが第１顔領域候補情報９のデー
タ数に等しくなった場合（全データを取り出し終了した
場合）、統合データ数にｊを設定し、ステップ１１に進
む。

【００３８】それ以外の場合では、第１顔領域候補情報
９のｉ番目の第１顔領域候補［ｉ］を１データ取り出
し、統合顔領域情報１４のｊ番目の統合顔領域候補
［ｊ］にセットし、統合候補番号ｊに１を加算する。そ
の後、ステップ７に進む。ステップ７では、ステップ６
終了後最初の処理では、第２候補番号ｋに初期値として
０を設定する。ステップ１０から戻ってきた場合には、
第２候補番号ｋに１を加算する。第２候補番号ｋが第２
候補情報１３のデータ数に等しくなった場合（全データ
を取り出し終了した場合）、ステップ６に戻る。

【００３９】それ以外の場合では、第２顔領域情報１３
のｋ番目の第２顔領域候補［ｋ］に対し、ステップ８か
らステップ１０の処理を実施する。ステップ８では、同
一候補判定手段１０６は、ｊ番目の統合顔領域候補
［ｊ］とｋ番目の第２顔領域候補［ｋ］について同一候
補判定を行う。

【００４０】同一候補判定の方法の一つとして距離によ
る判定方法がある。ｊ番目の統合顔領域候補［ｊ］の位
置とｋ番目の第２顔領域候補［ｋ］の位置から距離を計
算し、適宜設定した閾値以内の場合に同一候補と判定
し、そうでない場合に同一候補でないと判定する。

【００４１】また、別の同一候補判定の方法として、第
１顔領域候補の領域内に第２顔領域候補の位置が存在す
るかどうかにより、判定する方法がある。更に、第１顔
領域候補の領域内に、同一候補判定領域を設定し、第２
顔領域候補の位置が同一候補判定領域内に存在するかど
うかにより判定することも可能である。

【００４２】図３は、第２顔領域候補の位置による同一
候補判定条件を説明する図である。３０１は、第１顔領
域候補の領域である。第１顔領域候補の領域３０１は、
ｊ番目の統合顔領域候補［ｊ］のサイズを半径とする円
領域である。また、ｊ番目の統合顔領域候補［ｊ］と一
致する第１の顔領域抽出手法で使用したテンプレートで
も構わない。３０２は、第１顔領域候補の位置である。
３０３は、同一候補判定領域である。３０４は、第２顔
領域候補Ａである。３０５は、第２顔領域候補Ｂであ
る。３０６は、第２顔領域候補Ｃである。

【００４３】同一候補判定領域を設定しない場合は、ｋ
番目の第２顔領域候補［ｋ］の位置が、第２顔領域候補
Ａ３０４、第２顔領域候補Ｂ３０５に示すように、第１
顔領域候補の領域３０１の内部である場合、同一候補と
判定する。第２顔領域候補Ｃ３０６に示すように、第１
顔領域候補の領域３０１の外部であった場合、同一候補
でないと判定する。

【００４４】同一候補判定領域を設定する場合は、同一
候補判定領域を（数４）、（数５）で定義する。第１顔
領域候補の半径をＲ１、同一候補判定領域の高さをＨ＿
ｒｇｎ、幅をＷ＿ｒｇｎとする。

【００４５】

【数４】

【００４６】

【数５】

【００４７】ｋ番目の第２顔領域候補［ｋ］の位置が第
２顔領域候補Ａ３０４に示すように、同一候補判定領域
３０３の内部にある場合、同一候補と判定する。第２顔
領域候補Ｂ３０５、第２顔領域候補Ｃ３０６に示すよう
に、同一候補判定領域３０３の外部にある場合、同一候
補でないと判定する。

【００４８】また、同一候補判定方法に、更にサイズを
判定条件に加えることにより、サイズも含めて正しく同
一候補と判定することが可能となる。ｊ番目の統合顔領
域候補［ｊ］のサイズとｋ番目の第２顔領域候補［ｋ］
のサイズの差分を計算し、適宜設定した閾値以内の場合
に同一候補と判定し、そうでない場合に同一候補でない
と判定する。

【００４９】ｊ番目の統合顔領域候補［ｊ］のサイズと
ｋ番目の第２顔領域候補［ｋ］のサイズの定義が異なる
基準で定義されている場合には、ｊ番目の統合顔領域候
補［ｊ］のサイズとｋ番目の第２顔領域候補［ｋ］のサ
イズの一方もしくは両方に適宜設定した係数をかけて調
整した後、差分を計算することで、サイズをより正確に
比較することが可能となる。

【００５０】ステップ９では、統合手段１０８は、ステ
ップ８で同一候補でないと判定された場合は、統合候補
番号ｊに１を加算し、ｊ番目の統合顔領域候補［ｊ］に
ｋ番目の第２顔領域候補［ｋ］をセットし、ステップ１
０に進む。ステップ１０では、ｊ番目の統合顔領域候補
［ｊ］の信頼度を計算する。

【００５１】ステップ８で同一候補でないと判定され、
ステップ９で、ｋ番目の第２顔領域候補［ｋ］がｊ番目
の統合顔領域候補［ｊ］に設定された場合は、信頼度は
そのままでよい。また、ｋ番目の第２顔領域候補［ｋ］
の信頼度に、適宜設定した第２顔領域信頼度係数βを乗
算した値を、ｊ番目の統合顔領域候補［ｊ］にｋ番目の
第２顔領域候補［ｋ］をセットしてもよい。それによ
り、第２の顔領域抽出方法の有効性を調整することが可
能となる。

【００５２】ステップ８で同一候補であると判定された
場合は、ｊ番目の統合顔領域候補［ｊ］の信頼度とｋ番
目の第２顔領域候補［ｋ］の信頼度から信頼度を計算す
る。第１の信頼度の設定方法として、ｊ番目の統合顔領
域候補［ｊ］の信頼度に、ｊ番目の統合顔領域候補
［ｊ］の信頼度とｋ番目の第２顔領域候補［ｋ］の大き
い方の値を設定する。

【００５３】また、第２の信頼度の設定方法として、適
宜設定した第１顔領域信頼度係数αと、適宜設定した第
２顔領域信頼度係数βとを用いて（数６）によって計算
された値Rel#t[j]をｊ番目の統合顔領域候補［ｊ］の信
頼度に設定してもよい。

【００５４】

【数６】

【００５５】ここで、Rel#t[j]は、ｊ番目の統合顔領域
候補［ｊ］の信頼度である。また、Rel#2[k]は、k番目
の第２顔領域候補［ｋ］の信頼度である。

【００５６】これにより、第１の顔領域抽出方法と、第
２の顔領域抽出方法の影響の比率を調整することが可能
となる。ｊ番目の統合顔領域候補［ｊ］の位置と、サイ
ズは修正しなくてもよい。また、第１顔領域信頼度係数
αと、適宜設定した第２顔領域信頼度係数βとを用いて
（数７）、（数８）により計算した、位置Post(x,y)
と、サイズSizetをｊ番目の統合顔領域候補［ｊ］の位
置とサイズに設定してもよい。

【００５７】

【数７】

【００５８】

【数８】

【００５９】（数７）、（数８）において、Ｒｅｌ１
は、第１顔領域候補の信頼度である。Ｒｅｌ２は、第２
顔領域候補の信頼度である。ｘ１は、第１顔領域候補の
位置のｘ座標である。ｙ１は、第１顔領域候補の位置の
ｙ座標である。ｘ２は、第２顔領域候補の位置のｘ座標
である。ｙ２は、第２顔領域候補の位置のｙ座標であ
る。Ｓｉｚｅ１は、第１顔領域候補のサイズである。Ｓ
ｉｚｅ２は、第２顔領域候補のサイズである。それによ
り、信頼度が高く抽出された位置に比率を高くしながら
検出位置、サイズを調整することが可能となる。

【００６０】ステップ１０が終了するとステップ７に戻
る。

【００６１】ステップ１１では、ステップ６終了後、第
１顔領域候補および、第２顔領域候補の全データに対す
る処理が終了後、全ての統合顔領域候補［ｊ］を信頼度
が高い順に並べ替えを行う。ステップ１２では、全ての
統合顔領域候補から、適宜設定した個数を抽出結果とし
て出力する。

【００６２】以上のステップにより、本発明における顔
抽出手段を実現することが可能となる。

【００６３】

【発明の効果】本発明によれば、異なる手法による抽出
結果を統合することで、安定した顔抽出を行うことが出
来る。

【００６４】また、一方の手法で抽出できない状況で
も、他方の手法と統合することで顔抽出が可能となり、
ロバスト性が向上する。

【００６５】また、顔領域のサイズに応じて抽出結果を
統合することで、顔でない領域の誤検出を低減すること
が可能となる。

【００６６】また、同一候補と判定する距離を調整し、
より近い候補のみを統合することが可能となる。

【００６７】また、サイズも同時に一致する候補のみを
統合することで、不要に統合することを防ぐことが可能
となる。

【００６８】また、異なる方法で重複して抽出された顔
領域候補を、より信頼度の高い候補として抽出すること
で精度を向上できる。

【００６９】また、サイズと位置を信頼度に応じて修正
することで、抽出精度を向上できる。

【００７０】また、同一の検出対象に対する候補を１つ
に絞り込み、不要な候補を削除することが可能とにな
り、処理速度も向上する。

【図面の簡単な説明】

【図１】本発明の一実施の形態における顔抽出装置のブ
ロック図

【図２】顔抽出処理の流れを示すフローチャート

【図３】第２顔領域候補の位置による同一候補判定条件
を示す図

【符号の説明】

１顔検出対象画像２入力画像３エッジ画像４グレー画像５Ｘエッジ画像６Ｙエッジ画像７投票空間８第１顔領域候補９第１顔領域候補情報１０第２エッジ画像１１標準顔テンプレート１２第２顔領域候補１３第２顔領域候補情報１４統合顔領域候補１０１画像入力手段１０２画像処理手段１０３制御手段１０４第１の顔抽出手段１０５第２の顔抽出手段１０６同一候補判定手段１０７信頼度計算手段１０８統合手段３０１第１顔領域候補の領域３０２第１顔領域候補の位置３０３同一候補判定領域３０４第２顔領域候補Ａ３０５第２顔領域候補Ｂ３０６第２顔領域候補Ｃ

───────────────────────────────────────────────────── フロントページの続き (72)発明者吉村哲也大阪府門真市大字門真1006番地松下電器産業株式会社内Ｆターム(参考） 5B057 AA20 BA02 DA08 DB02 DB06 DB09 DC16 DC33 5L096 BA18 FA06 FA59 FA69 JA03 JA09

Claims

【特許請求の範囲】

【請求項１】顔抽出の対象となる画像を入力する画像入
力手段と、入力画像に対し第１の画像処理を行う第１の画像処理手
段と、前記第１の画像処理により得られた特徴によって、入力
画像から、顔を含むと思われる領域（以下、第１顔領域
候補）を抽出する第１の顔抽出手段と、入力画像に対し第２の画像処理を行う第２の画像処理手
段と、前記第２の画像処理により得られた特徴によって顔を含
むと思われる領域（以下、第２顔領域候補）を抽出する
第２の顔抽出手段と、前記第１顔領域候補と前記第２顔領域候補とを統合し、
統合顔領域候補を生成する統合手段とを備えたことを特
徴とする顔抽出装置。
【請求項２】第１の画像処理は、顔の輪郭を抽出する処
理であることを特徴とする請求項１記載の顔抽出装置。
【請求項３】第１顔領域候補と第２顔領域候補とが同一
の検出対象に対する候補であるか否かを判定する同一候
補判定手段を備え、統合手段は、前記同一候補判定手段の判定結果に基づい
て統合顔領域候補を生成することを特徴とする請求項１
または２記載の顔抽出装置。
【請求項４】同一候補判定手段は、第１顔領域候補の領
域内に第２顔領域候補の重心が存在する場合に同一候補
と判定することを特徴とする請求項３記載の顔抽出装
置。
【請求項５】同一候補判定手段は、第１顔領域候補の内
部に設定された同一判定領域に第２顔領域候補の重心が
含まれる場合に同一候補と判定することを特徴とする請
求項３記載の顔抽出装置。
【請求項６】同一候補判定手段は、第１顔領域候補にサ
イズ比較係数を乗算した比較サイズと第２顔領域候補の
領域サイズとの差分が所定の閾値以内である場合に同一
候補と判定することを特徴とする請求項３〜５の何れか
に記載の顔抽出装置。
【請求項７】同一候補判定手段の判定結果に基づいて、
第１顔領域候補に対する信頼度と第２顔領域候補に対す
る信頼度とから、統合顔領域候補に対する統合結果信頼
度を計算する信頼度計算手段を備えたことを特徴とする
請求項３〜６の何れかに記載の顔抽出装置。
【請求項８】信頼度計算手段は、同一候補判定手段にお
いて同一候補と判定された場合には、第１顔領域候補の
信頼度と第２顔領域候補の信頼度とを予め設定された比
率で加算して得られる値を、統合顔領域候補に対する統
合結果信頼度とすることを特徴とする請求項７記載の顔
抽出装置。
【請求項９】統合手段は、第１顔領域候補と第２顔領域
候補の信頼度の比率により統合顔領域候補の位置、大き
さを計算することを特徴とする請求項７または８記載の
顔抽出装置。
【請求項１０】同一候補判定手段によって同一候補と判
定された第１顔領域候補と第２顔領域候補のうち、信頼
度が最大となる候補によって統合顔領域候補を決定し、
信頼度が最大とならない候補を削除することを特徴とす
る請求項７〜９の何れかに記載の顔抽出装置。
【請求項１１】入力された画像に対して画像処理を行っ
て顔を抽出する顔抽出方法であって、顔抽出の対象となる画像を入力するステップと、入力画像に対し第１の画像処理を行うステップと、前記第１の画像処理により得られた特徴によって、入力
画像から、顔を含むと思われる領域（以下、第１顔領域
候補）を抽出するステップと、入力画像に対し第２の画像処理を行うステップと、前記第２の画像処理により得られた特徴によって顔を含
むと思われる領域（以下、第２顔領域候補）を抽出する
ステップと、前記第１顔領域候補と前記第２顔領域候補とを統合し、
統合顔領域候補を生成するステップとを備えたことを特
徴とする顔抽出方法。
【請求項１２】第１の画像処理は、顔の輪郭を抽出する
処理であることを特徴とする請求項１１記載の顔抽出方
法。
【請求項１３】所定の同一候補判定条件に従って、第１
顔領域候補と第２顔領域候補とが同一の検出対象に対す
る候補であるか否かを判定するステップを備え、同一候
補判定を行った結果に基づいて第１顔領域候補と第２顔
領域候補とを統合することを特徴とする請求項１１また
は１２記載の顔抽出方法。
【請求項１４】同一候補判定条件として、第１顔領域情
報の領域内に第２顔領域情報の重心が存在するか否かを
含むことを特徴とする請求項１３記載の顔抽出方法。
【請求項１５】同一候補判定条件として、第１顔領域候
補の内部に設定された同一判定領域内に、第２顔領域候
補の重心が存在するか否かを含むことを特徴とする請求
項１３記載の顔抽出方法。
【請求項１６】同一候補判定条件として、第１顔領域候
補にサイズ比較係数を乗算した比較サイズと第２顔領域
候補の領域サイズとの差分が閾値以内であるか否かを含
むことを特徴とする請求項１３〜１５の何れかに記載の
顔抽出方法。
【請求項１７】同一候補か否かの判定結果に基づいて、
第１顔領域候補に対する信頼度と第２顔領域候補に対す
る信頼度とから、統合顔領域候補に対する統合結果信頼
度を計算するステップを備えたことを特徴とする請求項
１３〜１６の何れかに記載の顔抽出方法。
【請求項１８】統合結果信頼度を計算するステップで
は、同一候補と判定された場合には、第１顔領域候補の
信頼度と第２顔領域候補の信頼度とを、予め設定された
比率で加算して得られる値を、統合顔領域候補に対する
統合結果信頼度とすることを特徴とする請求項１７記載
の顔抽出方法。
【請求項１９】統合顔領域候補を生成するステップで
は、第１顔領域候補と第２顔領域候補の信頼度の比率に
より統合顔領域候補の位置、大きさを計算することを特
徴とする請求項１７または１８記載の顔抽出方法。
【請求項２０】統合顔領域候補を生成するステップで
は、同一候補と判定された第１顔領域候補と第２顔領域
候補のうち、信頼度が最大となる候補によって前記統合
顔領域候補を求め、信頼度が最大とならない候補を削除
することを特徴とする請求項１７〜１９の何れかに記載
の顔抽出方法。
【請求項２１】入力された画像に対して画像処理を行っ
て顔を抽出する顔抽出プログラムであって、入力画像に対し第１の画像処理を行うステップと、前記第１の画像処理により得られた特徴によって、入力
画像から、顔を含むと思われる領域（以下、第１顔領域
候補）を抽出するステップと、入力画像に対し第２の画像処理を行うステップと、前記第２の画像処理により得られた特徴によって顔を含
むと思われる領域（以下、第２顔領域候補）を抽出する
ステップと、前記第１顔領域候補と前記第２顔領域候補とを統合し、
統合顔領域候補を生成するステップとを備えたことを特
徴とする顔抽出プログラムを記録した記録媒体。
【請求項２２】第１の画像処理は、顔の輪郭を抽出する
処理であることを特徴とする顔抽出プログラムを記録し
た請求項２１記載の記録媒体。
【請求項２３】所定の同一候補判定条件に従って、第１
顔領域候補と第２顔領域候補とが同一の検出対象に対す
る候補であるか否かを判定するステップと、同一候補判定を行った結果に基づいて第１顔領域候補と
第２顔領域候補とを統合するステップとを備えることを
特徴とする顔抽出プログラムを記録した請求項２１また
は２２記載の記録媒体。
【請求項２４】同一候補判定条件として、第１顔領域候
補の領域内に第２顔領域候補の重心が存在するか否かを
含むことを特徴とする顔抽出プログラムを記録した請求
項２３記載の記録媒体。
【請求項２５】同一候補判定条件として、第１顔領域候
補の内部に設定された同一判定領域内に、第２顔抽出候
補の重心が存在するか否かを含むことを特徴とする顔抽
出プログラムを記録した請求項２３記載の記録媒体。
【請求項２６】同一候補判定条件として、第１顔領域候
補と第２顔領域候補の領域サイズの差分による条件を含
むことを特徴とする顔抽出プログラムを記録した請求項
２３〜２５の何れかに記載の記録媒体。
【請求項２７】同一候補か否かの判定結果に基づいて、
第１顔領域候補に対する信頼度と第２顔領域候補に対す
る信頼度とから、統合顔領域候補に対する統合結果信頼
度を計算するステップを備えたことを特徴とする顔抽出
プログラムを記録した請求項２３〜２６の何れかに記載
の記録媒体。
【請求項２８】統合結果信頼度を計算するステップで
は、同一候補と判定された場合には、第１顔抽出候補の
信頼度と第２顔領域候補の信頼度とを予め設定された比
率で加算して得られる値を統合顔領域候補に対する統合
結果信頼度とすることを特徴とする顔抽出プログラムを
記録した請求項２７記載の記録媒体。
【請求項２９】統合顔領域候補を生成するステップで
は、第１顔領域候補と第２顔領域候補の信頼度の比率に
より統合顔領域候補の位置、大きさを計算することを特
徴とする顔抽出プログラムを記録した請求項２７または
２８記載の記録媒体。
【請求項３０】統合顔領域候補を生成するステップで
は、同一候補と判定された第１顔領域候補と第２顔領域
候補のうち、信頼度が最大となる候補によって前記統合
顔領域候補を求め、信頼度が最大とならない候補を削除
することを特徴とする顔抽出プログラムを記録した請求
項２７〜２９の何れかに記載の記録媒体。