JP2916057B2 - 動画像の顔領域抽出装置 - Google Patents
動画像の顔領域抽出装置Info
- Publication number
- JP2916057B2 JP2916057B2 JP4334246A JP33424692A JP2916057B2 JP 2916057 B2 JP2916057 B2 JP 2916057B2 JP 4334246 A JP4334246 A JP 4334246A JP 33424692 A JP33424692 A JP 33424692A JP 2916057 B2 JP2916057 B2 JP 2916057B2
- Authority
- JP
- Japan
- Prior art keywords
- face
- area
- unit
- extracted
- extracting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Image Analysis (AREA)
Description
【０００１】
【産業上の利用分野】本発明は動画像の顔領域抽出装置
に係り、詳細にはテレビ会議やテレビ電話、顔による個
人識別など顔を扱う画像処理方式であって、動画像から
顔領域を抽出するための動画像の顔領域抽出装置に係
る。
に係り、詳細にはテレビ会議やテレビ電話、顔による個
人識別など顔を扱う画像処理方式であって、動画像から
顔領域を抽出するための動画像の顔領域抽出装置に係
る。
【０００２】
【従来の技術】近年、ISDN(Integrated Services Digit
al Network) を有効に活用するサ−ビスとしてテレビ会
議やテレビ電話などの画像通信サ−ビスが有望視され、
このような静止画像、動画像の効率的な伝送を目的とし
た高能率符号化の研究が盛んに行われている。これらの
研究は、画像信号の統計的な性質を利用して、その信号
に含まれる冗長性を取り除くことにより、情報量の削減
を行う波形符号化がよく知られている。また、符号化対
象が限定されている場合、対象に関する先験的な知識を
利用して３次元構造モデルを取り入れた分析合成符号化
の検討も進められている。
al Network) を有効に活用するサ−ビスとしてテレビ会
議やテレビ電話などの画像通信サ−ビスが有望視され、
このような静止画像、動画像の効率的な伝送を目的とし
た高能率符号化の研究が盛んに行われている。これらの
研究は、画像信号の統計的な性質を利用して、その信号
に含まれる冗長性を取り除くことにより、情報量の削減
を行う波形符号化がよく知られている。また、符号化対
象が限定されている場合、対象に関する先験的な知識を
利用して３次元構造モデルを取り入れた分析合成符号化
の検討も進められている。
【０００３】テレビ会議等では顔画像が重要であるた
め、顔領域を抽出して顔に適した符号化を行うことによ
り、画質の改善や低ビットレ−トでの符号化が可能とな
る。波形符号化では抽出した顔に対して背景より多くの
情報量を割り当てるなどして顔領域をより美しく伝送す
ることが行われている。また、分析合成符号化では顔の
３次元構造モデルを送信側と受信側とで共有し、送信側
では入力画像の分析認識を行い、受信側では認識結果と
３次元構造モデルから画像合成を行い再生画像を得て超
低ビットレ−トでの顔画像伝送を実現している。図17は
従来の顔領域抽出装置を説明する図である。
め、顔領域を抽出して顔に適した符号化を行うことによ
り、画質の改善や低ビットレ−トでの符号化が可能とな
る。波形符号化では抽出した顔に対して背景より多くの
情報量を割り当てるなどして顔領域をより美しく伝送す
ることが行われている。また、分析合成符号化では顔の
３次元構造モデルを送信側と受信側とで共有し、送信側
では入力画像の分析認識を行い、受信側では認識結果と
３次元構造モデルから画像合成を行い再生画像を得て超
低ビットレ−トでの顔画像伝送を実現している。図17は
従来の顔領域抽出装置を説明する図である。
【０００４】図17において、フレ−ムメモリ部33に画像
の輝度信号（Ｙ信号) が入力される。入力されたＹ信号
はテレビカメラ等からの画像信号をディジタル化したも
のであり、フレ−ムメモリ部33において１画面分蓄積さ
れる。次にＹ信号は２値化部34において適当なしきい値
で２値化され、２値画像を得る。
の輝度信号（Ｙ信号) が入力される。入力されたＹ信号
はテレビカメラ等からの画像信号をディジタル化したも
のであり、フレ−ムメモリ部33において１画面分蓄積さ
れる。次にＹ信号は２値化部34において適当なしきい値
で２値化され、２値画像を得る。
【０００５】目の候補領域抽出部35では、２値化部34で
得られた２値画像をラスタ走査し、孤立領域を抽出す
る。ある孤立領域が目の領域判定のしきい値を満足した
場合、その領域を目の候補領域とする。頭髪の候補領域
抽出部36は、２値化部34での２値画像の孤立領域が頭髪
の領域判定のしきい値を満足した場合にその領域を頭髪
の候補領域として抽出する。
得られた２値画像をラスタ走査し、孤立領域を抽出す
る。ある孤立領域が目の領域判定のしきい値を満足した
場合、その領域を目の候補領域とする。頭髪の候補領域
抽出部36は、２値化部34での２値画像の孤立領域が頭髪
の領域判定のしきい値を満足した場合にその領域を頭髪
の候補領域として抽出する。
【０００６】最後に顔領域抽出部37では、目の候補領域
抽出部35で抽出した目の候補領域と頭髪の候補領域抽出
部36で抽出した頭髪の候補領域の幾何学的関係を用い
て、それらを囲む矩形を顔領域として抽出する。
抽出部35で抽出した目の候補領域と頭髪の候補領域抽出
部36で抽出した頭髪の候補領域の幾何学的関係を用い
て、それらを囲む矩形を顔領域として抽出する。
【０００７】
【発明が解決しようとする課題】従来の顔領域抽出装置
では、２値画像の領域の形状と分布とを用いて目と頭髪
の候補領域を抽出しこれらの幾何学的関係から顔領域の
位置を決定している。したがって、顔が正面を向いてい
ないなどにより、左右両方の目が写っていない場合や、
目および頭髪の色が黒色でない場合などが顔領域を誤抽
出する原因となっていた。
では、２値画像の領域の形状と分布とを用いて目と頭髪
の候補領域を抽出しこれらの幾何学的関係から顔領域の
位置を決定している。したがって、顔が正面を向いてい
ないなどにより、左右両方の目が写っていない場合や、
目および頭髪の色が黒色でない場合などが顔領域を誤抽
出する原因となっていた。
【０００８】また、顔領域は目と頭髪との幾何学的関係
から求めた顔を囲む矩形として抽出されるので正確な顔
の輪郭は得られなかった。
から求めた顔を囲む矩形として抽出されるので正確な顔
の輪郭は得られなかった。
【０００９】本発明の目的は、目や頭髪の存在や色に依
存せず、正確な顔の輪郭抽出が可能な動画像の顔領域抽
出装置を提供することにある。
存せず、正確な顔の輪郭抽出が可能な動画像の顔領域抽
出装置を提供することにある。
【００１０】
【課題を解決するための手段】本発明は、画像に関して
１つの輝度信号と２つの色差信号とを蓄積するメモリ部
と、メモリ部に蓄積された輝度信号及び色差信号を夫々
２値化する２値化手段と、２値化手段により２値化され
た輝度信号及び色差信号に規定される各画像の共通領域
を抽出する共通領域抽出部と、共通領域から顔部分を含
む矩形の領域を抽出する第１顔矩形領域抽出部と、メモ
リ部に蓄積されており第１顔矩形領域抽出部により抽出
された矩形の領域内に対応する輝度信号の輝度値を数レ
ベルに量子化する第１量子化部と、第１量子化部により
数レベルに量子化された輝度値に対応する領域の中から
第１の条件により顔領域を抽出する第１顔領域抽出部
と、第１顔領域抽出部で抽出された顔領域が属する量子
化レベルの近傍に関してメモリ部に蓄積されており第１
顔矩形領域抽出部で抽出された矩形の領域内に対応する
輝度信号の輝度値を数レベルに量子化する第２量子化部
と、第２量子化部により数レベルに量子化された輝度値
に対応する領域の中から第２の条件により顔領域を抽出
する第２顔領域抽出部と、第２顔領域抽出部で抽出され
た顔領域が属する量子化レベルの近傍に関してメモリ部
に蓄積されており第１顔矩形領域抽出部で抽出された矩
形の領域内に対応する輝度信号の輝度値を数レベルに量
子化する第３量子化部と、第３量子化部において数レベ
ルに量子化された輝度値に対応する領域の中から第３の
条件により顔領域を抽出する第３顔領域抽出部と、抽出
された顔領域を含む矩形の領域を抽出する第２顔矩形領
域抽出部と、第２顔矩形領域抽出部により抽出された矩
形の領域内において抽出された顔領域が属する量子化レ
ベルの近傍に関してメモリ部に蓄積されており第２顔矩
形領域抽出部で抽出された矩形の領域内に対応する輝度
信号の輝度値を数レベルに量子化する第４量子化部と、
第４量子化部により数レベルに量子化された輝度値に対
応する領域の中から第４の条件により顔領域を抽出する
第４顔領域抽出部と、メモリ部に蓄積された輝度信号を
前記２値化手段ならびに第１、第２及び第３量子化部と
第４量子化部とに選択的に出力する手段とを含み、第２
顔矩形領域抽出部は第３顔領域抽出部が抽出した顔領域
と第４顔領域抽出部が抽出した顔領域とのいずれか一方
を含む矩形の領域を抽出するように構成されており、第
４量子化部は第３顔領域抽出部が抽出した顔領域と第４
顔領域抽出部が抽出した顔領域とのいずれか一方が属す
る量子化レベルの近傍に関してメモリ部に蓄積された輝
度信号の輝度値を数レベルに量子化するように構成され
ていることを特徴とする。
１つの輝度信号と２つの色差信号とを蓄積するメモリ部
と、メモリ部に蓄積された輝度信号及び色差信号を夫々
２値化する２値化手段と、２値化手段により２値化され
た輝度信号及び色差信号に規定される各画像の共通領域
を抽出する共通領域抽出部と、共通領域から顔部分を含
む矩形の領域を抽出する第１顔矩形領域抽出部と、メモ
リ部に蓄積されており第１顔矩形領域抽出部により抽出
された矩形の領域内に対応する輝度信号の輝度値を数レ
ベルに量子化する第１量子化部と、第１量子化部により
数レベルに量子化された輝度値に対応する領域の中から
第１の条件により顔領域を抽出する第１顔領域抽出部
と、第１顔領域抽出部で抽出された顔領域が属する量子
化レベルの近傍に関してメモリ部に蓄積されており第１
顔矩形領域抽出部で抽出された矩形の領域内に対応する
輝度信号の輝度値を数レベルに量子化する第２量子化部
と、第２量子化部により数レベルに量子化された輝度値
に対応する領域の中から第２の条件により顔領域を抽出
する第２顔領域抽出部と、第２顔領域抽出部で抽出され
た顔領域が属する量子化レベルの近傍に関してメモリ部
に蓄積されており第１顔矩形領域抽出部で抽出された矩
形の領域内に対応する輝度信号の輝度値を数レベルに量
子化する第３量子化部と、第３量子化部において数レベ
ルに量子化された輝度値に対応する領域の中から第３の
条件により顔領域を抽出する第３顔領域抽出部と、抽出
された顔領域を含む矩形の領域を抽出する第２顔矩形領
域抽出部と、第２顔矩形領域抽出部により抽出された矩
形の領域内において抽出された顔領域が属する量子化レ
ベルの近傍に関してメモリ部に蓄積されており第２顔矩
形領域抽出部で抽出された矩形の領域内に対応する輝度
信号の輝度値を数レベルに量子化する第４量子化部と、
第４量子化部により数レベルに量子化された輝度値に対
応する領域の中から第４の条件により顔領域を抽出する
第４顔領域抽出部と、メモリ部に蓄積された輝度信号を
前記２値化手段ならびに第１、第２及び第３量子化部と
第４量子化部とに選択的に出力する手段とを含み、第２
顔矩形領域抽出部は第３顔領域抽出部が抽出した顔領域
と第４顔領域抽出部が抽出した顔領域とのいずれか一方
を含む矩形の領域を抽出するように構成されており、第
４量子化部は第３顔領域抽出部が抽出した顔領域と第４
顔領域抽出部が抽出した顔領域とのいずれか一方が属す
る量子化レベルの近傍に関してメモリ部に蓄積された輝
度信号の輝度値を数レベルに量子化するように構成され
ていることを特徴とする。
【００１１】
【作用】輝度信号と色差信号とがメモリ部で蓄積され、
２値化手段により夫々２値化される。共通領域抽出部は
２値化された輝度信号及び色差信号に規定される各画像
の共通領域を抽出する。第１顔矩形領域抽出部は共通領
域から顔部分を含む矩形の領域を抽出する。第１量子化
部は第１顔矩形領域抽出部により抽出された矩形の領域
内に対応する輝度信号の輝度値を数レベルに量子化す
る。第１顔領域抽出部は第１量子化部により数レベルに
量子化された輝度値に対応する領域の中から第１の条件
により顔領域を抽出する。第２量子化部は第１顔領域抽
出部で抽出された顔領域が属する量子化レベルの近傍に
関して第１顔矩形領域抽出部で抽出された矩形の領域内
に対応する輝度信号の輝度値を数レベルに量子化する。
第２顔領域抽出部は第２量子化部により数レベルに量子
化された輝度値に対応する領域の中から第２の条件によ
り顔領域を抽出する。第３量子化部は第２顔領域抽出部
で抽出された顔領域が属する量子化レベルの近傍に関し
てメモリ部に蓄積されており第１顔矩形領域抽出部で抽
出された矩形の領域内に対応する輝度信号の輝度値を数
レベルに量子化する。第３顔領域抽出部は第３量子化部
において数レベルに量子化された輝度値に対応する領域
の中から第３の条件により顔領域を抽出する。第２顔矩
形領域抽出部は第３顔領域抽出部が抽出した顔領域と第
４顔領域抽出部が抽出した顔領域とのいずれか一方を含
む矩形の領域を抽出するように構成されており、第４量
子化部は第２顔矩形領域抽出部により抽出された矩形の
領域内において、第３顔領域抽出部が抽出した顔領域と
第４顔領域抽出部が抽出した顔領域とのいずれか一方が
属する量子化レベルの近傍に関してメモリ部に蓄積され
た輝度信号の輝度値を数レベルに量子化するように構成
されている。第４顔領域抽出部は第４量子化部により数
レベルに量子化された輝度値に対応する領域の中から第
４の条件により顔領域を抽出する。出力する手段はメモ
リ部に蓄積された輝度信号及び色差信号を２値化手段な
らびに第１、第２及び第３量子化部と第４量子化部とに
選択的に出力する。
２値化手段により夫々２値化される。共通領域抽出部は
２値化された輝度信号及び色差信号に規定される各画像
の共通領域を抽出する。第１顔矩形領域抽出部は共通領
域から顔部分を含む矩形の領域を抽出する。第１量子化
部は第１顔矩形領域抽出部により抽出された矩形の領域
内に対応する輝度信号の輝度値を数レベルに量子化す
る。第１顔領域抽出部は第１量子化部により数レベルに
量子化された輝度値に対応する領域の中から第１の条件
により顔領域を抽出する。第２量子化部は第１顔領域抽
出部で抽出された顔領域が属する量子化レベルの近傍に
関して第１顔矩形領域抽出部で抽出された矩形の領域内
に対応する輝度信号の輝度値を数レベルに量子化する。
第２顔領域抽出部は第２量子化部により数レベルに量子
化された輝度値に対応する領域の中から第２の条件によ
り顔領域を抽出する。第３量子化部は第２顔領域抽出部
で抽出された顔領域が属する量子化レベルの近傍に関し
てメモリ部に蓄積されており第１顔矩形領域抽出部で抽
出された矩形の領域内に対応する輝度信号の輝度値を数
レベルに量子化する。第３顔領域抽出部は第３量子化部
において数レベルに量子化された輝度値に対応する領域
の中から第３の条件により顔領域を抽出する。第２顔矩
形領域抽出部は第３顔領域抽出部が抽出した顔領域と第
４顔領域抽出部が抽出した顔領域とのいずれか一方を含
む矩形の領域を抽出するように構成されており、第４量
子化部は第２顔矩形領域抽出部により抽出された矩形の
領域内において、第３顔領域抽出部が抽出した顔領域と
第４顔領域抽出部が抽出した顔領域とのいずれか一方が
属する量子化レベルの近傍に関してメモリ部に蓄積され
た輝度信号の輝度値を数レベルに量子化するように構成
されている。第４顔領域抽出部は第４量子化部により数
レベルに量子化された輝度値に対応する領域の中から第
４の条件により顔領域を抽出する。出力する手段はメモ
リ部に蓄積された輝度信号及び色差信号を２値化手段な
らびに第１、第２及び第３量子化部と第４量子化部とに
選択的に出力する。
【００１２】したがって、本発明によれば動画像から顔
が存在すると考えらる大局的な位置を抽出することがで
き、その部分に対して輝度値の階層的な量子化を行うこ
とで処理時間を短縮しつつ、正確な顔の輪郭を表す顔領
域を抽出できる。
が存在すると考えらる大局的な位置を抽出することがで
き、その部分に対して輝度値の階層的な量子化を行うこ
とで処理時間を短縮しつつ、正確な顔の輪郭を表す顔領
域を抽出できる。
【００１３】さらに、次フレ−ムに対する顔領域の抽出
の際には前フレ−ムで抽出した顔領域の位置・レベルを
用いるので大幅な処理時間の短縮が可能である。また、
静止画像に対しても第１フレ−ムの処理が適用できるの
で本発明により正確な顔の輪郭を表す顔領域を抽出する
ことができる。
の際には前フレ−ムで抽出した顔領域の位置・レベルを
用いるので大幅な処理時間の短縮が可能である。また、
静止画像に対しても第１フレ−ムの処理が適用できるの
で本発明により正確な顔の輪郭を表す顔領域を抽出する
ことができる。
【００１４】
【実施例】図１は本発明の動画像の顔領域抽出装置の１
実施例を示すブロック図である。図１の顔領域抽出装置
の実施例は、画像信号の輝度(Y) を示すＹ信号を蓄積す
るＹ信号フレ−ムメモリ部１と、色差信号（Cr信号) を
蓄積するCr信号フレ−ムメモリ部２と、他の色差信号
（Cb信号) を蓄積するCb信号フレ−ムメモリ部３と、Ｙ
信号フレ−ムメモリ部１に接続し第１のスイッチ切換信
号S1により出力を切換える第１スイッチ４と、第１スイ
ッチ４の端子７に接続しＹ信号フレ−ムメモリ部１の信
号を２値化するＹ信号２値化部13と、Cr信号フレ−ムメ
モリ部２に接続し第１のスイッチ切換信号S1により出力
を切換える第２スイッチ５と、第２スイッチ５の端子９
に接続しCr信号フレ−ムメモリ部２の信号を２値化する
Cr信号２値化部14と、Cb信号フレ−ムメモリ部３に接続
し第１のスイッチ切換信号S1により出力を切換える第３
スイッチ６と、第３スイッチ６の端子11に接続しCb信号
フレ−ムメモリ部３の信号を２値化するCb信号２値化部
15と、Ｙ信号２値化部13、Cr信号２値化部14及びCb信号
２値化部15に接続し２値化された各画像の共通領域を抽
出する共通領域抽出部16と、共通領域抽出部16に接続し
共通領域から顔部分を含む矩形領域を抽出する第１顔矩
形領域抽出部17と、第１顔矩形領域抽出部17及び端子７
に接続し第１顔矩形領域抽出部17で抽出された矩形領域
内においてＹ信号フレ−ムメモリ部１に記憶された信号
の輝度値を数レベルに量子化する第１量子化部18と、第
１量子化部18に接続し数レベルに量子化された領域の中
から第１の条件により顔領域を抽出する第１顔領域抽出
部19と、第１顔領域抽出部19及び端子７に接続し抽出さ
れた顔領域が属する量子化レベルの近傍に関して第１顔
矩形領域抽出部17で抽出された矩形領域内においてＹ信
号フレ−ムメモリ部１に記憶された信号の輝度値を数レ
ベルに量子化する第２量子化部20と、第２量子化部20に
接続し数レベルに量子化された領域の中から第２の条件
により顔領域を抽出する第２顔領域抽出部21と、第２顔
領域抽出部21及び端子７に接続し抽出された顔領域が属
する量子化レベルの近傍に関して第１顔矩形領域抽出部
17で抽出された矩形領域内においてＹ信号フレ−ムメモ
リ部１に記憶された信号の輝度値を数レベルに量子化す
る第３量子化部22と、第３量子化部22に接続し数レベル
に量子化された領域の中から第３の条件により顔領域を
抽出する第３顔領域抽出部23と、第３顔領域抽出部23及
び後述する第４顔領域抽出部32に接続し第２のスイッチ
切換信号S2により入力を切換える第４スイッチ24と、第
４スイッチ24に接続し、第３顔領域抽出部23が抽出した
顔領域及び第４顔領域抽出部32が抽出した顔領域のいず
れか一方を含む矩形領域を抽出する第２顔矩形領域抽出
部27と、第２顔矩形領域抽出部27、第５スイッチ29及び
端子８に接続し第２顔矩形領域抽出部27で抽出された矩
形領域内において第３顔領域抽出部23が抽出した顔領域
及び第４顔領域抽出部32が抽出した顔領域のいずれか一
方が属する量子化レベルの近傍に関してＹ信号フレ−ム
メモリ部１に記憶された信号の輝度値を数レベルに量子
化する第４量子化部28と、第４量子化部28に接続し数レ
ベルに量子化された領域の中から第４の条件により顔領
域を抽出する第４顔領域抽出部32と、第３顔領域抽出部
23及び第４顔領域抽出部32に接続し第２のスイッチ切換
S2により入力を切換える第５スイッチ29とを備えてい
る。
実施例を示すブロック図である。図１の顔領域抽出装置
の実施例は、画像信号の輝度(Y) を示すＹ信号を蓄積す
るＹ信号フレ−ムメモリ部１と、色差信号（Cr信号) を
蓄積するCr信号フレ−ムメモリ部２と、他の色差信号
（Cb信号) を蓄積するCb信号フレ−ムメモリ部３と、Ｙ
信号フレ−ムメモリ部１に接続し第１のスイッチ切換信
号S1により出力を切換える第１スイッチ４と、第１スイ
ッチ４の端子７に接続しＹ信号フレ−ムメモリ部１の信
号を２値化するＹ信号２値化部13と、Cr信号フレ−ムメ
モリ部２に接続し第１のスイッチ切換信号S1により出力
を切換える第２スイッチ５と、第２スイッチ５の端子９
に接続しCr信号フレ−ムメモリ部２の信号を２値化する
Cr信号２値化部14と、Cb信号フレ−ムメモリ部３に接続
し第１のスイッチ切換信号S1により出力を切換える第３
スイッチ６と、第３スイッチ６の端子11に接続しCb信号
フレ−ムメモリ部３の信号を２値化するCb信号２値化部
15と、Ｙ信号２値化部13、Cr信号２値化部14及びCb信号
２値化部15に接続し２値化された各画像の共通領域を抽
出する共通領域抽出部16と、共通領域抽出部16に接続し
共通領域から顔部分を含む矩形領域を抽出する第１顔矩
形領域抽出部17と、第１顔矩形領域抽出部17及び端子７
に接続し第１顔矩形領域抽出部17で抽出された矩形領域
内においてＹ信号フレ−ムメモリ部１に記憶された信号
の輝度値を数レベルに量子化する第１量子化部18と、第
１量子化部18に接続し数レベルに量子化された領域の中
から第１の条件により顔領域を抽出する第１顔領域抽出
部19と、第１顔領域抽出部19及び端子７に接続し抽出さ
れた顔領域が属する量子化レベルの近傍に関して第１顔
矩形領域抽出部17で抽出された矩形領域内においてＹ信
号フレ−ムメモリ部１に記憶された信号の輝度値を数レ
ベルに量子化する第２量子化部20と、第２量子化部20に
接続し数レベルに量子化された領域の中から第２の条件
により顔領域を抽出する第２顔領域抽出部21と、第２顔
領域抽出部21及び端子７に接続し抽出された顔領域が属
する量子化レベルの近傍に関して第１顔矩形領域抽出部
17で抽出された矩形領域内においてＹ信号フレ−ムメモ
リ部１に記憶された信号の輝度値を数レベルに量子化す
る第３量子化部22と、第３量子化部22に接続し数レベル
に量子化された領域の中から第３の条件により顔領域を
抽出する第３顔領域抽出部23と、第３顔領域抽出部23及
び後述する第４顔領域抽出部32に接続し第２のスイッチ
切換信号S2により入力を切換える第４スイッチ24と、第
４スイッチ24に接続し、第３顔領域抽出部23が抽出した
顔領域及び第４顔領域抽出部32が抽出した顔領域のいず
れか一方を含む矩形領域を抽出する第２顔矩形領域抽出
部27と、第２顔矩形領域抽出部27、第５スイッチ29及び
端子８に接続し第２顔矩形領域抽出部27で抽出された矩
形領域内において第３顔領域抽出部23が抽出した顔領域
及び第４顔領域抽出部32が抽出した顔領域のいずれか一
方が属する量子化レベルの近傍に関してＹ信号フレ−ム
メモリ部１に記憶された信号の輝度値を数レベルに量子
化する第４量子化部28と、第４量子化部28に接続し数レ
ベルに量子化された領域の中から第４の条件により顔領
域を抽出する第４顔領域抽出部32と、第３顔領域抽出部
23及び第４顔領域抽出部32に接続し第２のスイッチ切換
S2により入力を切換える第５スイッチ29とを備えてい
る。
【００１５】次に各部の動作を説明する。まず、256 階
調の入力画像信号のＹ信号、Cr信号、Cb信号は、それぞ
れＹ信号フレ−ムメモリ部１、Cr信号フレ−ムメモリ部
２、Cb信号フレ−ムメモリ部３に１画面分蓄積される。
調の入力画像信号のＹ信号、Cr信号、Cb信号は、それぞ
れＹ信号フレ−ムメモリ部１、Cr信号フレ−ムメモリ部
２、Cb信号フレ−ムメモリ部３に１画面分蓄積される。
【００１６】第１スイッチ４では外部からの第１のスイ
ッチ切換信号S1により端子７側あるいは端子８側を選択
してＹ信号フレ−ムメモリ部１の出力を切換える。第２
スイッチ５では外部からの第１のスイッチ切換信号S1に
より端子９側あるいは端子10側を選択してCr信号フレ−
ムメモリ部２の出力を切換える。第３スイッチ６では外
部からの第１のスイッチ切換信号S1により端子11側ある
いは端子12側を選択してCb信号フレ−ムメモリ部３の出
力を切換える。Ｙ信号２値化部13、Cr信号２値化部14、
Cb信号２値化部15は顔の存在位置が未知の場合、例えば
第１フレ−ムやシ−ンチェンジのときに第１のスイッチ
切換信号S1により第１スイッチ４の端子７、第２スイッ
チ５の端子９、第３スイッチ６の端子11を選択し、Ｙ信
号フレ−ムメモリ部１、Cr信号フレ−ムメモリ部２、Cb
信号フレ−ムメモリ部３に接続される。ここで、肌色領
域を抽出するしきい値でＹ信号、Cr信号、Cb信号を２値
化して顔部分を含む領域を抽出した２値画像を得る。
ッチ切換信号S1により端子７側あるいは端子８側を選択
してＹ信号フレ−ムメモリ部１の出力を切換える。第２
スイッチ５では外部からの第１のスイッチ切換信号S1に
より端子９側あるいは端子10側を選択してCr信号フレ−
ムメモリ部２の出力を切換える。第３スイッチ６では外
部からの第１のスイッチ切換信号S1により端子11側ある
いは端子12側を選択してCb信号フレ−ムメモリ部３の出
力を切換える。Ｙ信号２値化部13、Cr信号２値化部14、
Cb信号２値化部15は顔の存在位置が未知の場合、例えば
第１フレ−ムやシ−ンチェンジのときに第１のスイッチ
切換信号S1により第１スイッチ４の端子７、第２スイッ
チ５の端子９、第３スイッチ６の端子11を選択し、Ｙ信
号フレ−ムメモリ部１、Cr信号フレ−ムメモリ部２、Cb
信号フレ−ムメモリ部３に接続される。ここで、肌色領
域を抽出するしきい値でＹ信号、Cr信号、Cb信号を２値
化して顔部分を含む領域を抽出した２値画像を得る。
【００１７】図２はＹ信号を２値化して得られた肌色領
域、図３はCr信号を２値化して得られた肌色領域、図４
はCb信号を２値化して得られた肌色領域を示している。
域、図３はCr信号を２値化して得られた肌色領域、図４
はCb信号を２値化して得られた肌色領域を示している。
【００１８】図５は共通部分を抽出して得られた領域を
示す図である。共通領域抽出部16ではＹ信号２値化部1
3、Cr信号２値化部14、Cb信号２値化部15で抽出された
領域の共通部分を抽出して図５に示される領域が得られ
る。
示す図である。共通領域抽出部16ではＹ信号２値化部1
3、Cr信号２値化部14、Cb信号２値化部15で抽出された
領域の共通部分を抽出して図５に示される領域が得られ
る。
【００１９】図６は顔矩形領域の抽出を説明する図であ
る。第１顔矩形領域抽出部17は、共通領域抽出部16で抽
出された共通領域の中から顔に相当する領域を矩形で囲
む。これは、画面における共通領域が図６(a) の40で示
されるとすると、まず、画面の縦方向及び横方向に共通
領域を投影したときの画素の頻度を求める（図６（b)は
縦方向に共通領域を投影したときの画素の頻度を示し、
図６(c) は横方向に共通領域を投影したときの画素の頻
度を示す）。
る。第１顔矩形領域抽出部17は、共通領域抽出部16で抽
出された共通領域の中から顔に相当する領域を矩形で囲
む。これは、画面における共通領域が図６(a) の40で示
されるとすると、まず、画面の縦方向及び横方向に共通
領域を投影したときの画素の頻度を求める（図６（b)は
縦方向に共通領域を投影したときの画素の頻度を示し、
図６(c) は横方向に共通領域を投影したときの画素の頻
度を示す）。
【００２０】次に縦方向に投影したときの画素の頻度を
画面の左右方向から探索して、最初にしきい値Th1 以上
となる位置、V1、V2を求める。同様に横方向に投影した
ときの画素の頻度を画面の上方向から探索して、最初に
しきい値Th2 以上となる位置ｈを求める。さらに、V1と
V2との距離をｄとしたとき、ｈの位置から定数k1を乗じ
た距離k1 xｄを求め、横ｄ、縦k1 xｄの大きさ矩形を決
定する。横ｄ、縦k1 xｄの大きさの矩形では顔領域より
小さい可能性があるので、左右、上下にだけある値k2だ
け拡張した領域、すなわち、図６の実線で示す矩形を顔
矩形領域41として抽出する。
画面の左右方向から探索して、最初にしきい値Th1 以上
となる位置、V1、V2を求める。同様に横方向に投影した
ときの画素の頻度を画面の上方向から探索して、最初に
しきい値Th2 以上となる位置ｈを求める。さらに、V1と
V2との距離をｄとしたとき、ｈの位置から定数k1を乗じ
た距離k1 xｄを求め、横ｄ、縦k1 xｄの大きさ矩形を決
定する。横ｄ、縦k1 xｄの大きさの矩形では顔領域より
小さい可能性があるので、左右、上下にだけある値k2だ
け拡張した領域、すなわち、図６の実線で示す矩形を顔
矩形領域41として抽出する。
【００２１】図７は輝度値の階層的量子化（(a) は第１
の量子化、(b) は第２の量子化、(c) は第３の量子化）
を説明する図である。
の量子化、(b) は第２の量子化、(c) は第３の量子化）
を説明する図である。
【００２２】第１量子化部18では第１顔矩形領域抽出部
17で得られた顔矩形領域41内の輝度のヒストグラムのダ
イナミックレンジを８等分するようなしきい値を用いて
線形量子化し、図７における(a) の第１の量子化で示す
ように８つの領域に分割する。ここで、最も輝度値が高
いレベルを反映する量子化レベルを第１レベルとしたと
き、第１レベルの領域は量子化値“１”を有する画素の
集合（第１レベル領域）であると定義する。次に第２レ
ベルの領域は量子化値“１”と“２”とを有する画素の
集合（第２レベル領域）であると定義する。すなわち、
第２レベル領域は第１レベル領域を完全に包含する関係
にある。同様に第ｎレベル領域に量子化値“１”、
“２”…“ｎ”をもつレベル領域と定義することができ
る。 図８は第１顔矩形領域抽出部17で得られた顔矩形
領域内の第８レベル領域、図９は第１顔矩形領域抽出部
17で得られた顔矩形領域内の第７レベル領域、図10は第
１顔矩形領域抽出部17で得られた顔矩形領域内の第６レ
ベル領域、図11は第１顔矩形領域抽出部17で得られた顔
矩形領域内の第５レベル領域、図12は第１顔矩形領域抽
出部17で得られた顔矩形領域内の第４レベル領域、図13
は第１顔矩形領域抽出部17で得られた顔矩形領域内の第
３レベル領域、図14は第１顔矩形領域抽出部17で得られ
た顔矩形領域内の第２レベル領域、図15は第１顔矩形領
域抽出部17で得られた顔矩形領域内の第１レベル領域を
示す図である。
17で得られた顔矩形領域41内の輝度のヒストグラムのダ
イナミックレンジを８等分するようなしきい値を用いて
線形量子化し、図７における(a) の第１の量子化で示す
ように８つの領域に分割する。ここで、最も輝度値が高
いレベルを反映する量子化レベルを第１レベルとしたと
き、第１レベルの領域は量子化値“１”を有する画素の
集合（第１レベル領域）であると定義する。次に第２レ
ベルの領域は量子化値“１”と“２”とを有する画素の
集合（第２レベル領域）であると定義する。すなわち、
第２レベル領域は第１レベル領域を完全に包含する関係
にある。同様に第ｎレベル領域に量子化値“１”、
“２”…“ｎ”をもつレベル領域と定義することができ
る。 図８は第１顔矩形領域抽出部17で得られた顔矩形
領域内の第８レベル領域、図９は第１顔矩形領域抽出部
17で得られた顔矩形領域内の第７レベル領域、図10は第
１顔矩形領域抽出部17で得られた顔矩形領域内の第６レ
ベル領域、図11は第１顔矩形領域抽出部17で得られた顔
矩形領域内の第５レベル領域、図12は第１顔矩形領域抽
出部17で得られた顔矩形領域内の第４レベル領域、図13
は第１顔矩形領域抽出部17で得られた顔矩形領域内の第
３レベル領域、図14は第１顔矩形領域抽出部17で得られ
た顔矩形領域内の第２レベル領域、図15は第１顔矩形領
域抽出部17で得られた顔矩形領域内の第１レベル領域を
示す図である。
【００２３】第１顔領域抽出部19は第１量子化部18で得
られた８つのレベル領域から顔領域と考えられる領域を
抽出する。まず、各レベルにおいてレベル領域は複数存
在することもあるので、領域のラベル付けを行なう。次
に第８レベル領域（一番暗い領域）から順に各領域の中
から顔領域と考えられる領域を以下の条件を用いて抽出
する。
られた８つのレベル領域から顔領域と考えられる領域を
抽出する。まず、各レベルにおいてレベル領域は複数存
在することもあるので、領域のラベル付けを行なう。次
に第８レベル領域（一番暗い領域）から順に各領域の中
から顔領域と考えられる領域を以下の条件を用いて抽出
する。
【００２４】(1) 領域の面積を求め、これがしきい値(1
フレ−ムの全画素数のA1% 以上、A2% 未満、ただしA1<A
2)を満足しているかを判定する。この条件を満たしてい
なければ次の領域の判定へ、満たしていれば(2) の判定
へ進む。また、全ての領域がこれを満たしていない場合
には、１レベル明るいレベル領域に対してこの判定を行
なう。
フレ−ムの全画素数のA1% 以上、A2% 未満、ただしA1<A
2)を満足しているかを判定する。この条件を満たしてい
なければ次の領域の判定へ、満たしていれば(2) の判定
へ進む。また、全ての領域がこれを満たしていない場合
には、１レベル明るいレベル領域に対してこの判定を行
なう。
【００２５】(2) 上記(1) の条件を満たした領域に対し
て共通領域抽出部16で得られた共通領域との一致度を求
める。注目領域の一致度ＳをＳ＝Ａagr/Ａdif と定義す
る。ここで、Ａagr は注目領域と共通領域との一致面
積、Ａdif は不一致面積である。
て共通領域抽出部16で得られた共通領域との一致度を求
める。注目領域の一致度ＳをＳ＝Ａagr/Ａdif と定義す
る。ここで、Ａagr は注目領域と共通領域との一致面
積、Ａdif は不一致面積である。
【００２６】図16は領域の一致度を説明する図である。
図16において(a) はレベル領域、(b) は共通領域、(c)
は両領域の重ね合わせを示す。
図16において(a) はレベル領域、(b) は共通領域、(c)
は両領域の重ね合わせを示す。
【００２７】図16において、Ａagr 、Ａdif は夫々の斜
線の部分と黒塗りの部分を示す。この一致度がしきい値
A3以上を満足しているかを判定し、もししきい値を満た
していればこの領域を顔領域として抽出し、このレベル
領域のレベルをｋとする。図７(a) においては、斜線で
示す部分、すなわち、第４レベル領域が抽出されたこと
を示す。また、しきい値を満たしていないときは上記
(1) へ戻り次の領域の判定を行なう。
線の部分と黒塗りの部分を示す。この一致度がしきい値
A3以上を満足しているかを判定し、もししきい値を満た
していればこの領域を顔領域として抽出し、このレベル
領域のレベルをｋとする。図７(a) においては、斜線で
示す部分、すなわち、第４レベル領域が抽出されたこと
を示す。また、しきい値を満たしていないときは上記
(1) へ戻り次の領域の判定を行なう。
【００２８】第２量子化部20では、第１顔領域抽出部19
で抽出されたレベルｋとｋ＋１( ｋより１レベル暗いレ
ベル）の間の顔矩形領域内の輝度値を更に細かく線形量
子化を行なう。図７(b) では、第１の量子化での第４レ
ベルと第５レベルとの間の輝度値を６つのレベル領域に
量子化した場合を第２の量子化に示している。
で抽出されたレベルｋとｋ＋１( ｋより１レベル暗いレ
ベル）の間の顔矩形領域内の輝度値を更に細かく線形量
子化を行なう。図７(b) では、第１の量子化での第４レ
ベルと第５レベルとの間の輝度値を６つのレベル領域に
量子化した場合を第２の量子化に示している。
【００２９】第２顔領域抽出部21は、第２量子化部20で
得られた各レベル領域に対して第１顔領域抽出部19と同
様の処理を行なう。ここで抽出した顔領域のレベルをｋ
´とする。図７(b) の第２の量子化において斜線で示す
第３レベル領域が抽出されたことを示す。第３量子化部
22は、第２顔領域抽出部21で抽出されたレベルｋ´とｋ
´＋１(ｋ´より１レベル低い暗いレベル）の間の顔矩
形領域内の輝度値を更に細かく線形量子化を行なう。図
７(c) では、第２の量子化での第３レベルと第４レベル
との間の輝度値を５つのレベル領域に量子化した場合を
第３の量子化に示している。
得られた各レベル領域に対して第１顔領域抽出部19と同
様の処理を行なう。ここで抽出した顔領域のレベルをｋ
´とする。図７(b) の第２の量子化において斜線で示す
第３レベル領域が抽出されたことを示す。第３量子化部
22は、第２顔領域抽出部21で抽出されたレベルｋ´とｋ
´＋１(ｋ´より１レベル低い暗いレベル）の間の顔矩
形領域内の輝度値を更に細かく線形量子化を行なう。図
７(c) では、第２の量子化での第３レベルと第４レベル
との間の輝度値を５つのレベル領域に量子化した場合を
第３の量子化に示している。
【００３０】第３顔領域抽出部23は、第３量子化部22で
得られた各レベル領域に対して第１顔領域抽出部19と同
様の処理を行なう。ここで抽出した顔領域のレベルを
ｋ”とする。図７(c) の第３の量子化において斜線で示
す第４レベル領域が抽出されたことを示す。
得られた各レベル領域に対して第１顔領域抽出部19と同
様の処理を行なう。ここで抽出した顔領域のレベルを
ｋ”とする。図７(c) の第３の量子化において斜線で示
す第４レベル領域が抽出されたことを示す。
【００３１】以上いままでの処理で顔領域を抽出できる
が、対象がテレビ会議やテレビ電話等の動画像であるの
でフレ−ム間での顔の動きはあまり大きくない。したが
って、前フレ−ムで抽出した顔の位置・レベル領域のレ
ベルを利用して次フレ−ムの顔領域抽出が可能である。
次に第２フレ−ム以降の処理について述べる。
が、対象がテレビ会議やテレビ電話等の動画像であるの
でフレ−ム間での顔の動きはあまり大きくない。したが
って、前フレ−ムで抽出した顔の位置・レベル領域のレ
ベルを利用して次フレ−ムの顔領域抽出が可能である。
次に第２フレ−ム以降の処理について述べる。
【００３２】まず、第１のスイッチ切換信号S1により第
１スイッチ４を端子８側に、第２スイッチ５を端子10側
に、第３スイッチ６を端子11側に夫々接続する。これに
よりＹ信号フレ−ムメモリ部１のＹ信号のみが第２フレ
−ム以降の処理に使用される。また、第４スイッチ24、
第５スイッチ29は第２のスイッチ切換信号S2により夫々
端子25、端子30側に接続する。第２顔矩形領域抽出部27
は、第３顔領域抽出部23、あるいは第４顔領域抽出部32
で抽出した顔領域を含む領域を顔矩形領域として抽出す
る。第４量子化部28では、第３顔領域抽出部23、あるい
は第４顔領域抽出部32で抽出された顔領域のレベルｋ”
を基準にレベルｋ”−ｒとｋ”＋ｒ（ｒは定数）の間の
第２顔矩形領域抽出部27の顔矩形領域の輝度値を線形量
子化する。
１スイッチ４を端子８側に、第２スイッチ５を端子10側
に、第３スイッチ６を端子11側に夫々接続する。これに
よりＹ信号フレ−ムメモリ部１のＹ信号のみが第２フレ
−ム以降の処理に使用される。また、第４スイッチ24、
第５スイッチ29は第２のスイッチ切換信号S2により夫々
端子25、端子30側に接続する。第２顔矩形領域抽出部27
は、第３顔領域抽出部23、あるいは第４顔領域抽出部32
で抽出した顔領域を含む領域を顔矩形領域として抽出す
る。第４量子化部28では、第３顔領域抽出部23、あるい
は第４顔領域抽出部32で抽出された顔領域のレベルｋ”
を基準にレベルｋ”−ｒとｋ”＋ｒ（ｒは定数）の間の
第２顔矩形領域抽出部27の顔矩形領域の輝度値を線形量
子化する。
【００３３】第４顔領域抽出部32は量子化部27で得られ
た各レベル領域に対して第１顔領域抽出部19と同様の処
理を行い、ここで抽出した顔領域を出力してこのレベル
を新たにｋ”とする。
た各レベル領域に対して第１顔領域抽出部19と同様の処
理を行い、ここで抽出した顔領域を出力してこのレベル
を新たにｋ”とする。
【００３４】１フレ−ム分の処理が終了したならば、次
のフレ−ムに対しても第２フレ−ム以降の処理を行う。
ただし、第２顔矩形領域抽出部27で用いる顔領域の位
置、第４量子化部28で用いる顔領域のレベルは前のフレ
−ムで得られたものを使用する。したがって、第２のス
イッチ切換信号S2により第４スイッチ24を端子26側に、
第５スイッチ29を端子31側に夫々接続する。
のフレ−ムに対しても第２フレ−ム以降の処理を行う。
ただし、第２顔矩形領域抽出部27で用いる顔領域の位
置、第４量子化部28で用いる顔領域のレベルは前のフレ
−ムで得られたものを使用する。したがって、第２のス
イッチ切換信号S2により第４スイッチ24を端子26側に、
第５スイッチ29を端子31側に夫々接続する。
【００３５】また、シ−ンチェンジのときは顔の位置等
が変化するため、第１のスイッチ切換信号S1により第１
スイッチ４を端子７側に，第２スイッチ５を端子９側
に、第３スイッチ６を端子11側に接続し、再び第１フレ
−ムの処理を行う。
が変化するため、第１のスイッチ切換信号S1により第１
スイッチ４を端子７側に，第２スイッチ５を端子９側
に、第３スイッチ６を端子11側に接続し、再び第１フレ
−ムの処理を行う。
【００３６】以上、本実施例によれば動画像のＹ、Cr、
Cb信号から顔を含む領域を抽出し、この結果に基づき顔
を囲む矩形領域が抽出できる。さらに、顔の矩形領域に
おいて、輝度値の階層的な量子化により正確に顔の輪郭
を表す顔領域の抽出を行うことができる。また、前フレ
−ムで抽出した顔領域の位置・レベルを用いることで、
次フレ−ムに対しては１回の量子化のみで正確な顔の輪
郭を表す顔領域を抽出することができる。
Cb信号から顔を含む領域を抽出し、この結果に基づき顔
を囲む矩形領域が抽出できる。さらに、顔の矩形領域に
おいて、輝度値の階層的な量子化により正確に顔の輪郭
を表す顔領域の抽出を行うことができる。また、前フレ
−ムで抽出した顔領域の位置・レベルを用いることで、
次フレ−ムに対しては１回の量子化のみで正確な顔の輪
郭を表す顔領域を抽出することができる。
【００３７】なお、上述の実施例においては、動画像を
例にとって説明したものであるが、静止画像に対しては
第１フレ−ムの処理を行なうことで正確な顔の輪郭を表
す顔領域の抽出ができる。
例にとって説明したものであるが、静止画像に対しては
第１フレ−ムの処理を行なうことで正確な顔の輪郭を表
す顔領域の抽出ができる。
【００３８】
【発明の効果】本発明によれば、動画像から顔が存在す
ると考えらる大局的な位置を抽出することができ、その
部分に対して輝度値の階層的な量子化を行うことで処理
時間を短縮しつつ、正確な顔の輪郭を表す顔領域を抽出
できる。
ると考えらる大局的な位置を抽出することができ、その
部分に対して輝度値の階層的な量子化を行うことで処理
時間を短縮しつつ、正確な顔の輪郭を表す顔領域を抽出
できる。
【００３９】さらに、次フレ−ムに対する顔領域の抽出
の際には前フレ−ムで抽出した顔領域の位置・レベルを
用いるので大幅な処理時間の短縮が可能である。また、
静止画像に対しても第１フレ−ムの処理が適用できるの
で本発明により正確な顔の輪郭を表す顔領域を抽出する
ことができる。
の際には前フレ−ムで抽出した顔領域の位置・レベルを
用いるので大幅な処理時間の短縮が可能である。また、
静止画像に対しても第１フレ−ムの処理が適用できるの
で本発明により正確な顔の輪郭を表す顔領域を抽出する
ことができる。
【図１】本発明の動画像の顔領域抽出装置の１実施例を
示すブロック図である。
示すブロック図である。
【図２】Ｙ信号を２値化して得られた肌色領域を示す図
である。
である。
【図３】Cr信号を２値化して得られた肌色領域を示す図
である。
である。
【図４】Cb信号を２値化して得られた肌色領域を示す図
である。
である。
【図５】共通部分を抽出して得られた領域を示す図であ
る。
る。
【図６】顔矩形領域の抽出を説明する図である。
【図７】輝度値の階層的量子化を説明する図である。
【図８】第１顔矩形領域抽出部17で得られた顔矩形領域
内の第８レベル領域を示す図である。
内の第８レベル領域を示す図である。
【図９】第１顔矩形領域抽出部17で得られた顔矩形領域
内の第７レベル領域を示す図である。
内の第７レベル領域を示す図である。
【図１０】第１顔矩形領域抽出部17で得られた顔矩形領
域内の第６レベル領域を示す図である。
域内の第６レベル領域を示す図である。
【図１１】第１顔矩形領域抽出部17で得られた顔矩形領
域内の第５レベル領域を示す図である。
域内の第５レベル領域を示す図である。
【図１２】第１顔矩形領域抽出部17で得られた顔矩形領
域内の第４レベル領域を示す図である。
域内の第４レベル領域を示す図である。
【図１３】第１顔矩形領域抽出部17で得られた顔矩形領
域内の第３レベル領域を示す図である。
域内の第３レベル領域を示す図である。
【図１４】第１顔矩形領域抽出部17で得られた顔矩形領
域内の第２レベル領域を示す図である。
域内の第２レベル領域を示す図である。
【図１５】第１顔矩形領域抽出部17で得られた顔矩形領
域内の第１レベル領域を示す図である。
域内の第１レベル領域を示す図である。
【図１６】領域の一致度を説明する図である。
【図１７】従来の顔領域抽出装置を説明する図である。
１ Ｙ信号フレ−ムメモリ部 ２ Cr信号フレ−ムメモリ部 ３ Cb信号フレ−ムメモリ部 ４ 第１スイッチ ５ 第２スイッチ ６ 第３スイッチ ７〜１２ 端子 １３ Ｙ信号２値化部 １４ Cr信号２値化部 １５ Cb信号２値化部 １６ 共通領域抽出部 １７ 第１顔矩形領域抽出部 １８ 第１量子化部 １９ 第１顔領域抽出部 ２０ 第２量子化部 ２１ 第２顔領域抽出部 ２２ 第３量子化部 ２３ 第３顔領域抽出部 ２４ 第４スイッチ ２７ 第２顔矩形領域抽出部 ２８ 第４量子化部 ２９ 第５スイッチ ３２ 第４顔領域抽出部
フロントページの続き (56)参考文献 特開 平２−311962（ＪＰ，Ａ) 特開 平２−81590（ＪＰ，Ａ) 特開 昭63−223974（ＪＰ，Ａ) 特開 昭63−157593（ＪＰ，Ａ) (58)調査した分野(Int.Cl.6，ＤＢ名) G06T 7/00 - 7/20
Claims (1)
- 【請求項１】 画像に関して１つの輝度信号と２つの色
差信号とを蓄積するメモリ部と、前記メモリ部に蓄積さ
れた輝度信号及び色差信号を夫々２値化する２値化手段
と、前記２値化手段により２値化された輝度信号及び色
差信号に規定される各画像の共通領域を抽出する共通領
域抽出部と、前記共通領域から顔部分を含む矩形の領域
を抽出する第１顔矩形領域抽出部と、前記メモリ部に蓄
積されており前記第１顔矩形領域抽出部により抽出され
た矩形の領域内に対応する輝度信号の輝度値を数レベル
に量子化する第１量子化部と、前記第１量子化部により
数レベルに量子化された輝度値に対応する領域の中から
第１の条件により顔領域を抽出する第１顔領域抽出部
と、前記第１顔領域抽出部で抽出された顔領域が属する
量子化レベルの近傍に関して前記メモリ部に蓄積されて
おり第１顔矩形領域抽出部で抽出された矩形の領域内に
対応する輝度信号の輝度値を数レベルに量子化する第２
量子化部と、前記第２量子化部により数レベルに量子化
された輝度値に対応する領域の中から第２の条件により
顔領域を抽出する第２顔領域抽出部と、前記第２顔領域
抽出部で抽出された顔領域が属する量子化レベルの近傍
に関して前記メモリ部に蓄積されており第１顔矩形領域
抽出部で抽出された矩形の領域内に対応する輝度信号の
輝度値を数レベルに量子化する第３量子化部と、前記第
３量子化部において数レベルに量子化された輝度値に対
応する領域の中から第３の条件により顔領域を抽出する
第３顔領域抽出部と、抽出された顔領域を含む矩形の領
域を抽出する第２顔矩形領域抽出部と、前記第２顔矩形
領域抽出部により抽出された矩形の領域内において抽出
された顔領域が属する量子化レベルの近傍に関して前記
メモリ部に蓄積されており第２顔矩形領域抽出部で抽出
された矩形の領域内に対応する輝度信号の輝度値を数レ
ベルに量子化する第４量子化部と、前記第４量子化部に
より数レベルに量子化された輝度値に対応する領域の中
から第４の条件により顔領域を抽出する第４顔領域抽出
部と、前記メモリ部に蓄積された輝度信号を前記２値化
手段ならびに前記第１、第２及び第３量子化部と前記第
４量子化部とに選択的に出力する手段とを含み、前記第
２顔矩形領域抽出部は前記第３顔領域抽出部が抽出した
顔領域と前記第４顔領域抽出部が抽出した顔領域とのい
ずれか一方を含む矩形の領域を抽出するように構成され
ており、前記第４量子化部は前記第３顔領域抽出部が抽
出した顔領域と前記第４顔領域抽出部が抽出した顔領域
とのいずれか一方が属する量子化レベルの近傍に関して
前記メモリ部に蓄積された輝度信号の輝度値を数レベル
に量子化するように構成されていることを特徴とする動
画像の顔領域抽出装置。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP4334246A JP2916057B2 (ja) | 1992-12-15 | 1992-12-15 | 動画像の顔領域抽出装置 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP4334246A JP2916057B2 (ja) | 1992-12-15 | 1992-12-15 | 動画像の顔領域抽出装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH06187455A JPH06187455A (ja) | 1994-07-08 |
| JP2916057B2 true JP2916057B2 (ja) | 1999-07-05 |
Family
ID=18275185
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP4334246A Expired - Fee Related JP2916057B2 (ja) | 1992-12-15 | 1992-12-15 | 動画像の顔領域抽出装置 |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2916057B2 (ja) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100248955B1 (ko) * | 1994-07-18 | 2000-03-15 | 유무성 | 자동감시장치 |
| WO2006057131A1 (ja) * | 2004-11-26 | 2006-06-01 | Pioneer Corporation | 音響再生装置、音響再生システム |
| JP4670635B2 (ja) * | 2005-12-27 | 2011-04-13 | 株式会社ニコン | 撮影装置 |
| JP5012477B2 (ja) * | 2007-12-12 | 2012-08-29 | 株式会社ニコン | 部分画像抽出方法および部分画像抽出装置 |
| JP2011135339A (ja) * | 2009-12-24 | 2011-07-07 | Aiphone Co Ltd | テレビドアホンシステム |
-
1992
- 1992-12-15 JP JP4334246A patent/JP2916057B2/ja not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JPH06187455A (ja) | 1994-07-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2809659B2 (ja) | ビデオ画像処理 | |
| Lei et al. | Fast intra prediction based on content property analysis for low complexity HEVC-based screen content coding | |
| US6546142B2 (en) | Motion image coding apparatus for performing hierarchical coding | |
| Chai et al. | Face segmentation using skin-color map in videophone applications | |
| JP3256474B2 (ja) | 色映像信号における皮膚のトーンを定める装置およびその方法、ならびに、皮膚領域を符号化する装置およびその方法 | |
| CN111355956B (zh) | 一种hevc帧内编码中基于深度学习的率失真优化快速决策系统及其方法 | |
| US20100208813A1 (en) | Image coding apparatus with segment classification and segmentation-type motion prediction circuit | |
| EP1589766A2 (en) | Object-based video decompression process employing arbitrarily shaped features | |
| KR20000049031A (ko) | 3차원 깊이 정보를 이용한 디지털 이미지와 비디오 세그먼테이션과 압축을 수행하기 위한 방법 및 장치 | |
| Schumeyer et al. | Color-based classifier for region identification in video | |
| EP0581594B1 (en) | Display controlling apparatus | |
| Stoffels et al. | Object‐oriented image analysis for very‐low‐bitrate video‐coding systems using the CNN universal machine | |
| JP3794749B2 (ja) | 映像信号符号化装置 | |
| US20040240543A1 (en) | Low bandwidth video compression | |
| JP2916057B2 (ja) | 動画像の顔領域抽出装置 | |
| US5710602A (en) | Gain correction for encoding video images | |
| JPH07203436A (ja) | 画像符号化装置 | |
| Herodotou et al. | Temporal prediction of video sequences using an image warping technique based on color segmentation | |
| KR100367409B1 (ko) | 대칭 특성을 이용한 ｍｐｅｇ-4의 객체 분할장치 및 그방법 | |
| Hanafy et al. | A Novel Region-Based Color Video Compression Technique | |
| Plompen et al. | An Image Knowledge Based Video Codec For Low Bitrates. | |
| Goswami et al. | Low complexity in-loop skin tone detection for ROI coding in the HEVC encoder | |
| JPS6268384A (ja) | 画像通信方式 | |
| JPS6269741A (ja) | 情報通信方式 | |
| FRÝZA et al. | Concept of Variation Detector Used in Video Signal Compression Domain |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| LAPS | Cancellation because of no payment of annual fees |