JP2009075926A - 動画像顔検出装置および動画像顔検出方法 - Google Patents

Abstract

【課題】 動画像データに対して、少ない演算量で顔検出を行う。
【解決手段】 連続するフレームから構成される動画像データに対して、あらかじめ設定したキーフレームにおいて顔の特徴点を検出し、その位置を出力する顔特徴点検出手段３と、キーフレーム以外のフレームにおいて前記顔特徴点検出手段から出力される顔の特徴点の位置を追跡する顔特徴点追跡手段６と、顔特徴点検出手段６から出力される顔の特徴点の位置に基づいて顔の位置情報を出力する顔位置検出手段５と、を備える。
【選択図】 図１

Description

本発明は、動画像から顔を検出する動画像顔検出装置に関するものである。

従来の動画像の顔検出においては、静止画像における顔検出の方法である「フレームから肌色領域を検出し顔の領域を特定する」あるいは「フレームから顔の構成要素を検出し顔の領域を特定する」等の処理を動画像データの全てのフレームで行っていた。

例えば、フレームから肌色領域を抽出して、肌色領域内に一定の面積比で暗い領域を抽出することで顔検出を行い、さらに、複数のフレームで連続的に顔検出を行うことにより、顔の移動を追跡している（例えば、特許文献１参照）。また、目や口といった顔の構成要素の形状特徴と輝度特徴と位置関係から顔を検出しているものもある（例えば、特許文献２参照）。
特開平１１−１５９７９号公報（第２頁） 特開平７−３１１８３３号公報（第３頁）

従来の動画像の顔検出では、動画像の全てのフレームで顔を検出するように構成されているため、演算量が膨大になり、処理時間がかかるという問題があった。そのため、リアルタイム処理が困難であった。本発明は、この課題を解決すべく、少ない演算量で動画像における顔検出を提供するものである。

本発明の動画像顔検出装置は、連続するフレームから構成される動画像データにおいて、キーフレームを設定するキーフレーム設定手段と、
前記キーフレーム設定手段によって設定されたキーフレームにおいて顔の特徴点を検出しその位置を出力する顔特徴点検出手段と、
キーフレーム以外のフレームにおいて前記顔特徴点検出手段から出力される顔の特徴点の位置を追跡する顔特徴点追跡手段と、
前記顔特徴点検出手段から出力される顔の特徴点の位置に基づき、顔の位置情報を出力する顔位置検出手段を備えるものである。

本発明の効果として、顔特徴点の検出をキーフレームで行い、キーフレームではないフレームにおいては顔の特徴点の位置を追跡する処理のみでその位置を特定するので、少ない演算量で顔の位置を検出できるという効果がある。また、前記の追跡において、追跡する対象を顔の特徴点としているので、追跡対象の位置の誤検出が少ないという効果がある。

実施の形態１．
図１はこの発明装置の実施の形態１を用いた動画像顔検出装置を示すブロック図であって、１はキーフレームを設定するキーフレーム設定手段、２はキーフレーム設定手段１から出力されるキーフレームか否かの情報に基づき、入力された映像信号の出力先を切り替える第１の切替器、３は第１の切替器２が出力した映像信号から顔の特徴点の位置を検出する顔特徴点検出手段、４はキーフレーム設定手段１から出力されるキーフレームか否かの情報に基づき、顔特徴点検出手段３から出力される顔の特徴点の位置もしくは顔特徴点追跡手段６から出力される顔の特徴点の位置を顔位置検出手段５に入力する第２の切替器、
５は第２の切替器４から出力される顔の特徴点の位置に基づき、顔の位置情報を出力する顔位置検出手段、６は顔特徴点検出手段３から出力される顔の特徴点の位置を追跡する顔特徴点追跡手段である。

次に、図１に基づいて実施の形態１の動画像顔検出装置の動作について説明する。まず、映像信号が第１の切替器２に入力される。キーフレーム設定手段１にはあらかじめキーフレームか否かの情報を設定しておく。キーフレームは等間隔に設定してもいいし、等間隔でなくてもいい。シーンチェンジなど映像が大きく変化するフレームをキーフレームとしてもいい。第１の切替器２に入力された映像信号は、キーフレーム設定手段１から出力されるキーフレームか否かの情報に基づき、映像信号の出力先を切り替える。映像信号がキーフレームの信号である場合と、キーフレームの信号ではない場合のそれぞれについて説明する。

映像信号がキーフレームの信号である場合、第１の切替器２は映像信号を顔特徴検出手段３に入力する。顔特徴点検出手段３は映像信号から顔の特徴点を検出し、その位置を第２の切替器４と顔特徴点追跡手段６へ出力する。また、第２の切替器４は顔特徴点検出手段３が出力された顔の特徴点の位置を顔位置検出手段５に出力する。顔位置検出手段５は第２の切替器４から出力される顔の特徴点の位置に基づき、顔の位置情報を出力する。また、顔の特徴点が複数ある場合は同様の処理を繰り返す。

以下に、顔位置検出手段５の具体的な動作について説明する。顔位置検出手段５は、例えば、図２のように顔の特徴点として両目の位置が入力された場合、両目を結ぶ線２１を特定する。ここで、両目を結ぶ線２１の位置から顔の領域２２の位置を特定し、両目を結ぶ線２１の長さから、顔の領域２２の大きさを特定する。このようにして決定された顔の領域２２の情報を、顔位置検出手段５の出力情報として出力する。

また、図３のように両目を結ぶ線２３が画面の左上に短い状態で検出された場合、それは、顔の領域２４が画面の左上に位置し、さらに顔の領域そのものが小さいことを示している。

また、図４の様に左目の位置２５と右目の位置２６が斜めになっている場合、まず、上記と同様に両目を結ぶ線２８を特定する。両目を結ぶ線２８の位置と長さより顔の領域２９の位置と大きさを特定するところまでは同じであるが、図４に示した事例においては、さらに、両目を結ぶ線と水平軸がなす角度２７を特定し、これを顔の領域２９の傾きとする。このように、両目を結ぶ線２８の位置と長さと傾きから、顔の領域２９の位置と大きさと傾きを求める。

映像信号がキーフレームの信号ではない場合、第１の切替器２は映像信号を顔特徴点追跡手段６に入力する。顔特徴点追跡手段６は、第１の切替器２から出力される映像信号より、顔の特徴点検出手段３から出力される顔の特徴点の位置を追跡し、顔の特徴点の位置を更新する。更新した顔の特徴点の位置を第２の切替器４へ出力する。第２の切替器４は顔特徴点追跡手段６から出力される顔の特徴点の位置に基づき、顔の特徴点の配置、間隔を求め、これらより顔の位置、傾き、大きさなどを特定して顔の位置情報として出力する。

また、図５は実施の形態１における動画像顔検出の説明図であって、キーフレームにおいて顔の特徴点の検出を行い、キーフレーム以外のフレームではキーフレームで検出された顔の特徴点の位置を追跡し、顔の特徴点の位置を検出していることを示す。

顔検出は、顔の位置を特定するために、フレームにおいて肌色領域などの顔の特徴となる部分を検出し、顔と顔以外のものを判別する処理が必要である。一方、顔追跡は、顔の特徴点の位置を入力すると、その位置を追跡する処理のみで顔の位置を特定できるので、顔検出に比べて演算量が少ない。

以上のように、実施の形態１の動画像顔検出装置によると、顔の特徴点の検出はキーフレームで行い、キーフレーム以外のフレームでは顔の特徴点を追跡するよう構成したので、全画面において顔検出を行う従来法に比べて、少ない演算量で顔検出ができる。また、前記の追跡において、追跡対象が顔の特徴点であるので、顔以外の画像部分と比較して形状や色・輝度の特徴が顕著で識別しやすく、追跡対象の位置の誤検出が少ないという効果がある。人の両目など、追跡対象となる顔の特徴点が複数ある場合は検出条件が増えるので、誤検出がさらに少なくなる。

実施の形態２．
図６はこの発明装置の実施の形態２を用いた動画像顔検出装置を示すブロック図であって、１はキーフレームを設定するキーフレーム設定手段、２はキーフレーム設定手段１から出力されるキーフレームか否かの情報に基づき、入力された映像信号の出力先を切り替える第１の切替器、３は第１の切替器２が出力した映像信号から顔の特徴点を検出しその位置を出力する顔特徴点検出手段、４はキーフレーム設定手段１から出力されるキーフレームか否かの情報に基づき、顔特徴点検出手段３から出力される顔の特徴点の位置もしくは顔特徴点更新手段９から出力される顔の特徴点の位置を顔位置検出手段５に入力する第２の切替器、５は第２の切替器４から出力される顔の特徴点の位置に基づき、顔の位置情報を特定し出力する顔位置検出手段である。６は顔特徴点追跡手段であり、以下の動きベクトル検出領域設定手段７、動きベクトル検出手段８、顔特徴点更新手段９で構成される。７は顔特徴点検出手段３から出力される顔の特徴点の位置に基づき、その位置を中心とする一定の大きさの領域を動きベクトル検出領域として設定する動きベクトル検出領域設定手段、８は第１の切替器２が出力した映像信号と、動きベクトル検出領域設定手段７から出力された領域の画像データを用いて動きベクトルを検出する動きベクトル検出手段、９は顔の特徴点の位置を動きベクトル検出手段８から出力された動きベクトルの分だけ移動させた位置を新しいフレームの顔特徴点の位置として保存するとともに、第２の切替器４に出力する顔特徴点更新手段である。

実施の形態２は、顔特徴点追跡手段６が動きベクトル検出領域設定手段７、動きベクトル検出手段８、顔特徴点更新手段９から構成されている点が実施の形態１と異なる。図６に基づいて実施の形態２の動画像顔検出装置の動作について説明する。

まず、映像信号が第１の切替器２に入力される。あらかじめフレーム設定手段１にキーフレームか否かの情報を設定しておく。キーフレームは等間隔に設定してもいいし、等間隔でなくてもいい。シーンチェンジなど映像が大きく変化するフレームをキーフレームとしてもいい。第１の切替器２に入力された映像信号は、キーフレーム設定手段１から出力されるキーフレームか否かの情報に基づき、映像信号の出力先を切り替える。映像信号がキーフレームの信号である場合と、キーフレームの信号ではない場合のそれぞれについて説明する。

映像信号がキーフレームの信号である場合、第１の切替器２は映像信号を顔特徴点検出手段３に入力する。顔特徴点検出手段３は映像信号から顔の特徴点を検出しその位置を動きベクトル検出領域設定手段７と顔特徴点更新手段９と第２の切替器４に出力する。動きベクトル検出領域設定手段７は、顔特徴点検出手段３から出力された顔の特徴点の位置を中心とする一定の大きさの領域を動きベクトル検出領域に設定し、動きベクトル検出領域を動きベクトル検出手段８に入力する。顔特徴点更新手段９は、顔特徴点検出手段３から出力された顔の特徴点の位置を顔の特徴点の位置として保存する。第２の切替器４は顔特徴点検出手段３から出力された顔の特徴点の位置を顔位置検出手段５に出力する。顔位置検出手段５は、第２の切替器４から出力された顔の特徴点の位置に基づき、顔の特徴点の配置、間隔を求め、これらより顔の位置、傾き、大きさなどを特定して顔の位置情報として出力する。

映像信号がキーフレームの信号ではない場合、第１の切替器２は映像信号を動きベクトル検出手段８に入力する。動きベクトル検出手段８は、第１の切替器２から出力される映像信号と、動きベクトル検出領域設定手段７から出力された動きベクトル検出領域の画像データから、動きベクトルを検出する。前記画像データは、前記映像信号より前のフレームにおける顔の特徴点の位置を中心とする一定の大きさの領域のデータである。

動きベクトルの検出方法には、例えば、連続する２つのフレームのうち後のフレームと、連続する２つのフレームのうち前のフレームの動きベクトル検出領域との映像信号の差分絶対値和が最小となる位置を探索して求める方法がある。この場合、差分絶対値和が最小となる位置と顔の特徴点の位置とのベクトルが求める動きベクトルである。なお、動きベクトルの探索を高速化するため、探索する範囲は動きベクトル検出領域の周囲の一定の大きさの領域に限定してもよい。

動きベクトル検出手段８は動きベクトルを顔特徴点更新手段９に出力する。顔特徴点更新手段９は、顔特徴点更新手段９が保存している顔の特徴点の位置を、動きベクトル検出手段８が出力した動きベクトルの分だけ移動させた位置を、新しいフレームの顔特徴点の位置として保存するとともに、更新した顔の特徴点の位置を動きベクトル検出領域設定手段７と第２の切替器４へ出力する。第２の切替器４は顔特徴点更新手段９から出力された顔の特徴点の位置を顔位置検出手段５に出力する。顔位置検出手段５は顔特徴点更新手段９が出力する顔の特徴点の位置に基づき、顔の特徴点の配置、間隔を求め、これらより顔の位置、傾き、大きさなどを特定して顔の位置情報として出力する。動きベクトル検出領域設定手段７は、顔特徴点更新手段９が出力した顔の特徴点の位置を中心とする一定の大きさの領域を動きベクトル検出領域と設定して、動きベクトル検出手段８に出力する。

また、図７は、実施の形態２における動きベクトル検出領域設定手段７の動作を説明する説明図であって、ｎ番目のフレームにおいて顔の特徴点１２を検出したとき、顔の特徴点１２を中心とする一定の大きさの領域を動きベクトル検出領域１３とする。

また、図８は、実施の形態２における顔特徴点更新手段８の動作を説明する説明図であって、まず（ｎ＋１）番目のフレームにおいて、図７に示したｎ番目のフレームの動きベクトル検出領域１３と映像信号が似通った領域を探し動きベクトル１４を求める。つづいてｎ番目のフレームの特徴点１２を動きベクトル１４の分だけ移動させて、（ｎ＋１）番目のフレームの顔の特徴点１５とする。

以上のように、実施の形態２の動画像顔検出装置によると、顔の特徴点の検出をキーフレームで行い、キーフレーム以外のフレームでは顔の特徴点の位置を中心とする一定の大きさの領域に対して顔特徴点を追跡するよう構成したので、少ない演算量で精度良く顔の位置を検出することができるという効果がある。

実施の形態３．
図９はこの発明装置の実施の形態３を用いた動画像顔検出装置を示すブロック図であって、
１はキーフレームを設定するキーフレーム設定手段、
２はキーフレーム設定手段１から出力されるキーフレームか否かの情報に基づき、入力された映像信号の出力先を切り替える第１の切替器、
３は第１の切替器２が出力した映像信号から顔の特徴点を検出しその位置を出力する顔特徴点検出手段、
４はキーフレーム設定手段１から出力されるキーフレームか否かの情報に基づき、顔特徴点検出手段３から出力される顔の特徴点の位置もしくは顔特徴点更新手段９から出力される顔の特徴点の位置を顔位置検出手段５に入力する第２の切替器、
５は第２の切替器４から出力される顔の特徴点の位置に基づき、顔の位置情報を特定し出力する顔位置検出手段である。６は顔特徴点追跡手段６であり、以下の動きベクトル検出手段８、顔特徴点更新手段９、動きベクトル検出ブロック検出手段１０で構成される。８は第１の切替器２が出力した映像信号と、動きベクトル検出ブロック検出手段１０から出力されたブロックの画像データを用いて動きベクトルを検出する動きベクトル検出手段、９は顔の特徴点の位置を動きベクトル検出手段８から出力された動きベクトルの分だけ移動させた位置を新しいフレームの顔特徴点の位置として保存するとともに、第２の切替器４に出力する顔特徴点更新手段、１０は顔特徴点検出手段３から出力される顔の特徴点の位置に基づき、その位置がフレーム分割手段１１によって設定された複数の領域のうちどの領域に含まれるのかを検出する動きベクトル検出ブロック検出手段、１１は入力された映像信号を複数の領域に分割するフレーム分割手段である。

実施の形態３は、フレーム分割手段１１を備え、動きベクトル検出領域設定手段７の代わりに動きベクトル検出ブロック検出手段１０を持つ点が実施の形態２と異なる。図９に基づいて実施の形態３の動画像顔検出装置の動作を説明する。

まず、映像信号がフレーム分割手段１１に入力される。フレーム分割手段１１は映像信号をあらかじめ設定された複数の領域であるブロックに分割し、分割された全ブロックの映像信号を第１の切替器２に出力する。第１の切替器２に入力された映像信号は、キーフレーム設定手段１から出力されるキーフレームか否かの情報に基づき、映像信号の出力先を切り替える。映像信号がキーフレームの信号である場合と、キーフレームの信号ではない場合のそれぞれについて説明する。

映像信号がキーフレームの信号である場合、第１の切替器２は映像信号を顔特徴点検出手段３に入力する。顔特徴点検出手段３は映像信号から顔の特徴点を検出しその位置を第２の切替器４と顔特徴点更新手段９と動きベクトル検出ブロック検出手段１０とに出力する。動きベクトル検出ブロック検出手段１０は、顔特徴点検出手段３から出力された顔の特徴点の位置がフレーム分割手段１１で分割されたどのブロックに含まれるのかを検出して動きベクトル検出ブロックと設定し、動きベクトル検出ブロックを動きベクトル検出手段８へ出力する。顔特徴点更新手段９は、顔特徴点検出手段３から出力された顔の特徴点の位置を顔の特徴点の位置として保存する。第２の切替器４は顔特徴点検出手段３から出力された顔の特徴点の位置を顔位置検出手段５に出力する。顔位置検出手段５は、第２の切替器４から出力された顔の特徴点の位置に基づき、顔の特徴点の配置、間隔を求め、これらより顔の位置、傾き、大きさなどを特定して顔の位置情報として出力する。

映像信号がキーフレームの信号ではない場合、第１の切替器２は映像信号を動きベクトル検出手段８に入力する。動きベクトル検出手段８は、第１の切替器２から出力される映像信号と、動きベクトル検出ブロック検出手段１０から出力された動きベクトル検出ブロックの画像データから、動きベクトルを検出する。前記画像データは、前記映像信号より前のフレームにおける顔の特徴点の位置を含むブロックの画像データである。

動きベクトル検出手段８は動きベクトルを顔特徴点更新手段９に出力する。顔特徴点更新手段９は、顔特徴点更新手段９が保存している顔の特徴点の位置を、動きベクトル検出手段８が出力した動きベクトルの分だけ移動させた位置を、新しいフレームの顔特徴点の位置として保存するとともに、更新した顔の特徴点の位置を動きベクトル検出ブロック検出手段１０と第２の切替器４へ出力する。第２の切替器４は顔特徴点更新手段９から出力された顔の特徴点の位置を顔位置検出手段５に出力する。顔位置検出手段５は第２の切替器４が出力する顔の特徴点の位置に基づき、顔の特徴点の配置、間隔を求め、これらより顔の位置、傾き、大きさなどを特定して顔の位置情報として出力する。動きベクトル検出ブロック検出手段１０は、顔特徴点更新手段９が出力した顔の特徴点の位置が、フレーム分割手段１１によって分割されたどのブロックに含まれるのかを検出して動きベクトル検出ブロックと設定し、動きベクトル検出ブロックを動きベクトル検出手段８へ出力する。

また、図１０は、実施の形態３における動きベクトル検出ブロック検出手段１０の動作を説明する説明図であって、ｎ番目のフレームにおいて顔の特徴点１２を検出したとき、あらかじめ分割された複数のブロックから顔の特徴点１２を含むブロックを検出し動きベクトル検出ブロック１６とする。

また、図１１は、実施の形態３における顔特徴点更新手段９の動作を説明する説明図であって、まず（ｎ＋１）番目のフレームにおいて、図１０に示したｎ番目のフレームの動きベクトル検出ブロック１６と映像信号が似通った領域を探し動きベクトルを求める。つづいてｎ番目のフレームの特徴点１２を動きベクトル１４の分だけ移動させて、（ｎ＋１）番目のフレームの顔の特徴点１５とする。

以上のように、実施の形態３の動画像顔検出装置によると、顔の特徴点の検出をキーフレームで行い、キーフレーム以外のフレームではあらかじめ設定された複数の領域のうち、顔の特徴点の位置を含む領域の動きベクトルを検出して顔の特徴点を追跡するので、動きベクトル検出部の作成が容易であり、動画像において少ない演算量で顔の位置を検出できる。

この発明の実施の形態１を示すブロック図である。 この発明の実施の形態１における顔の大きさを特定する動作の説明図である。 この発明の実施の形態１における顔の位置を特定する動作の説明図である。 この発明の実施の形態１における顔の傾きを特定する動作の説明図である。 この発明の実施の形態１における動画像顔検出の説明図である。 この発明の実施の形態２を示すブロック図である。 この発明の実施の形態２における動きベクトル検出領域設定手段７の動作の説明図である。 この発明の実施の形態２における顔特徴点更新手段９の動作の説明図である。 この発明の実施の形態３を示すブロック図である。 この発明の実施の形態３における動きベクトル検出ブロック検出手段１０の動作の説明図である。 この発明の実施の形態３における顔特徴点更新手段９の動作の説明図である。

符号の説明

１ キーフレーム設定手段
２ 第１の切替器
３ 顔特徴点検出手段
４ 第２の切替器
５ 顔位置検出手段
６ 顔特徴点追跡手段
７ 動きベクトル検出領域設定手段
８ 動きベクトル検出手段
９ 顔特徴点更新手段
１０ 動きベクトル検出ブロック検出手段
１１ フレーム分割手段
１２ ｎ番目のフレームの顔の特徴点
１３ 動きベクトル検出領域
１４ 動きベクトル
１５ （ｎ＋１）番目のフレームの特徴点
１６ 動きベクトル検出ブロック

Claims (6)

1. 動画像データを構成する連続したフレームの中からキーフレームを設定するキーフレーム設定手段と、
   前記キーフレーム設定手段によって設定されたキーフレームにおいて顔の特徴点を検出しその位置を出力する顔特徴点検出手段と、
   キーフレーム以外のフレームにおいて前記顔特徴点検出手段から出力される顔の特徴点の位置を追跡する顔特徴点追跡手段と、
   前記顔特徴点検出手段から出力される顔の特徴点の位置に基づき、顔の位置情報を出力する顔位置検出手段
   を備えたことを特徴とする動画像顔検出装置。
2. 前記顔特徴点追跡手段は、
   前記顔特徴点検出手段から出力される顔の特徴点の位置を中心とする一定の大きさの領域を動きベクトル検出領域として設定する動きベクトル検出領域設定手段と、
   前記動きベクトル検出領域設定手段によって指定された領域の画像データを用いて２つのフレームの画像データより動きベクトルを検出する動きベクトル検出手段と、
   前記顔特徴点検出手段の出力である顔特徴点の位置を前記動きベクトル検出手段から出力された動きベクトルの分だけ移動させた位置を新しいフレームの顔特徴点の位置として出力する顔特徴点更新手段
   から構成されることを特徴とする請求項１に記載の動画像顔検出装置。
3. 前記顔特徴点追跡手段は、
   前記顔特徴点検出手段から出力される顔の特徴点の位置があらかじめ設定された複数の動きベクトル検出領域のうちのどの領域に含まれるのかを検出する動きベクトル検出ブロック検出手段と、
   前記動きベクトル検出ブロック検出手段によって指定された領域の画像データを用いて２つのフレームの画像データより動きベクトルを検出する動きベクトル検出手段と、
   前記顔特徴点検出手段の出力である顔特徴点の位置を前記動きベクトル検出手段から出力された動きベクトルの分だけ移動させた位置を新しいフレームの顔特徴点の位置として出力する顔特徴点更新手段
   から構成されることを特徴とする請求項１に記載の動画像顔検出装置。
4. 動画像データを構成する連続したフレームの中からキーフレームを設定するキーフレーム設定ステップと、
   前記キーフレーム設定ステップによって設定されたキーフレームにおいて顔の特徴点を検出しその位置を出力する顔特徴点検出ステップと、
   キーフレーム以外のフレームにおいて前記顔特徴点検出ステップから出力される顔の特徴点の位置を追跡する顔特徴点追跡ステップと、
   前記顔特徴点検出ステップから出力される顔の特徴点の位置に基づき、顔の位置情報を出力する顔位置検出ステップ
   を備えたことを特徴とする動画像顔検出方法。
5. 前記顔特徴点追跡ステップは、
   前記顔特徴点検出ステップから出力される顔の特徴点の位置を中心とする一定の大きさの領域を動きベクトル検出領域として設定する動きベクトル検出領域設定ステップと、
   前記動きベクトル検出領域設定ステップによって指定された領域の画像データを用いて２つのフレームの画像データより動きベクトルを検出する動きベクトル検出ステップと、
   前記顔特徴点検出ステップの出力である顔特徴点の位置を前記動きベクトル検出ステップから出力された動きベクトルの分だけ移動させた位置を新しいフレームの顔特徴点の位置として出力する顔特徴点更新ステップ
   から構成されることを特徴とする請求項４に記載の動画像顔検出方法。
6. 前記顔特徴点追跡ステップは、
   前記顔特徴点検出ステップから出力される顔の特徴点の位置があらかじめ設定された複数の動きベクトル検出領域のうちのどの領域に含まれるのかを検出する動きベクトル検出ブロック検出ステップと、
   前記動きベクトル検出ブロック検出ステップによって指定された領域の画像データを用いて２つのフレームの画像データより動きベクトルを検出する動きベクトル検出ステップと、
   前記顔特徴点検出ステップの出力である顔特徴点の位置を前記動きベクトル検出ステップから出力された動きベクトルの分だけ移動させた位置を新しいフレームの顔特徴点の位置として出力する顔特徴点更新ステップ
   から構成されることを特徴とする請求項４に記載の動画像顔検出方法。

Images