JP2003323615A - Face image detecting device and method and its program - Google Patents
Face image detecting device and method and its programInfo
- Publication number
- JP2003323615A JP2003323615A JP2002128939A JP2002128939A JP2003323615A JP 2003323615 A JP2003323615 A JP 2003323615A JP 2002128939 A JP2002128939 A JP 2002128939A JP 2002128939 A JP2002128939 A JP 2002128939A JP 2003323615 A JP2003323615 A JP 2003323615A
- Authority
- JP
- Japan
- Prior art keywords
- face
- image
- input
- area
- narrowing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Landscapes
- Image Processing (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Image Analysis (AREA)
Abstract
Description
【０００１】[0001]
【発明の属する技術分野】本発明は顔画像検出装置およ
び顔画像検出方法ならびに顔画像検出プログラムに係
り、特に、各ユーザーが重要視する人物の顔画像を精度
良く検出する顔画像検出装置および顔画像検出方法なら
びに顔画像検出プログラムに関する。BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a face image detecting device, a face image detecting method, and a face image detecting program, and more particularly, to a face image detecting device and face for accurately detecting a face image of a person who is important to each user. The present invention relates to an image detection method and a face image detection program.
【０００２】[0002]
【従来の技術】近時、デジタルカメラやパーソナルコン
ピュータ等の急速な普及に伴って、一般ユーザーがデジ
タルカメラ等を用いて撮影したデジタル画像は、パーソ
ナルコンピュータに取り込まれて、次々と蓄積されて、
その整理が面倒な状況になりつつある。2. Description of the Related Art Recently, with the rapid spread of digital cameras and personal computers, digital images taken by general users using digital cameras and the like are taken into a personal computer and accumulated one after another.
The arrangement is becoming a troublesome situation.
【０００３】その一方で、一般ユーザーにとっては、そ
れらの画像の中から人物画像をピックアップし、年賀状
に貼り付けたり、テーマごとにアルバムを作ったりした
いというニーズがある。On the other hand, a general user needs to pick up a person image from those images and paste it in a New Year's card or make an album for each theme.
【０００４】市販されているソフトウェアを用いて、最
終的な作品を作り上げることは可能であるが、その中で
も大量の画像から人物画像を検索したり、分類、整理す
る作業が特に大変である。Although it is possible to create a final work by using commercially available software, it is particularly difficult to search, classify, and organize human images from a large number of images.
【０００５】そこで、そのような作業の負担を軽減する
ために、顔検出技術や顔認証技術の応用が考えられる。Therefore, in order to reduce the burden of such work, application of face detection technology and face authentication technology can be considered.
【０００６】現在、証明写真のように単純な背景に正面
顔が大きく写っているような人物画像については、画像
から顔を検出し、その顔が登録したどの顔であるかを特
定するまでの顔認証技術がかなり進展している。[0006] At present, for a person image in which a frontal face is largely reflected in a simple background such as an ID photograph, it is necessary to detect a face from the image and specify which face is registered. Face recognition technology has advanced considerably.
【０００７】しかしながら、背景が単純でない場合で
も、また、正面顔ばかりでなく上下左右斜め等を向いて
いる顔であっても、あるいは、少し離れて全身像を撮影
した時の顔のサイズぐらいの小さな顔であっても、誤検
出を抑えて、顔領域を検出できるような顔検出技術は、
まだ、実用域に達していない。However, even when the background is not simple, or when the face is not only the front face but also faces diagonally up, down, left, right, or the like, or the size of the face when the whole body image is taken at a distance. Face detection technology that can detect the face area by suppressing false detection even for small faces is
It has not reached the practical range yet.
【０００８】本発明では、このようなスナップ写真レベ
ルの被写体から顔を検出する技術を対象とする。The present invention is directed to a technique for detecting a face from a subject of such a snapshot level.
【０００９】このような顔検出技術に関しては、例え
ば、特開平７−３１１８３３号公報や特開２０００−９
７６７６号公報に開示されている。Regarding such a face detecting technique, for example, Japanese Patent Laid-Open Nos. 7-311833 and 2000-9.
It is disclosed in Japanese Patent No. 7676.
【００１０】前者は、画像中のＶ型輝度グラフを検出し
て、これを目や口の候補領域とするものであり、顔の大
きさの変化や平行・回転移動、さらに照明条件の変動に
強い優れた方法である。The former is to detect a V-type luminance graph in an image and use it as a candidate region for eyes and mouth, and to detect changes in the size of the face, parallel / rotary movement, and changes in illumination conditions. It is a strong and excellent method.
【００１１】また、後者は、顔の肌色領域の重心点と顔
の特徴点の情報から、傾きを含む顔を検出する方法であ
る。The latter is a method for detecting a face including a tilt from the information on the center of gravity of the skin color area of the face and the feature points of the face.
【００１２】しかしながら、この方法では、目や口の候
補領域を検出後、目候補領域を２つと口候補領域を１
つ、全ての領域が互いに重複しないように選択し、各領
域の重心位置を調べて顔らしい配置をしている候補の組
を全ての組合わせについて調べて、顔候補領域とする処
理を行っても、顔でない領域が、顔候補領域としてかな
り残ってしまうことがある。However, in this method, after detecting the eye and mouth candidate areas, two eye candidate areas and one mouth candidate area are detected.
Then, select all areas so that they do not overlap each other, check the barycentric position of each area, check all candidate combinations with face-like arrangements, and perform processing to make them face candidate areas. However, a non-face area may remain as a face candidate area.
【００１３】[0013]
【発明が解決しようとする課題】そこで、例えば、両目
を一辺とする正方形中の肌色領域の占有面積率を算出
し、これが、ある一定値以下のものを顔でない領域とし
て削減するという顔候補領域の絞込み処理等を追加して
適用することが考えられる。Therefore, for example, a face candidate area in which a occupying area ratio of a skin-colored area in a square having both eyes as one side is calculated, and the occupying area ratio below a certain fixed value is reduced as a non-face area It is conceivable to additionally apply the narrowing-down processing, etc.
【００１４】あるいは、目や口の候補領域の近傍が、ほ
ぼ同一の色相からなるものを顔の候補領域として残し、
そうでない目や口のペアを顔の部品候補でないとして削
減するような顔候補領域の絞込み処理を適用することも
考えられる。Alternatively, in the vicinity of the eye and mouth candidate areas, those having substantially the same hue are left as face candidate areas,
It is also conceivable to apply a face candidate area narrowing process that reduces other pairs of eyes and mouth as non-face part candidates.
【００１５】このように複数個の顔候補領域の絞込み処
理を設定して、人種や眼鏡の有無、髭の量、目つぶり等
に関係なく、人物の検出率が向上するように、絞込み処
理のパラメータをチューニングしていくのも１つのアプ
ローチである。In this way, the narrowing-down processing of a plurality of face candidate areas is set, and the narrowing-down processing is performed so that the detection rate of a person is improved regardless of race, presence / absence of glasses, amount of whiskers, blinking, etc. Tuning the parameters of is one approach.
【００１６】このとき、髭が濃い人や眼鏡をかけた人等
を見落とさないようにパラメータををチューニングする
と、それに伴って、顔でない領域を顔候補としてしまう
という拾い過ぎも増加してきてしまう。At this time, if the parameters are tuned so as not to overlook a person with a strong beard, a person wearing glasses, etc., the number of over-pickups in which a non-face area is set as a face candidate increases accordingly.
【００１７】一方で、髭が濃い人や眼鏡をかけた人が一
人もいないような家庭で扱う家族写真の分類・検索・整
理に、髭が濃い人や眼鏡をかけた人を見落とさないよう
に設定された顔候補領域の絞込みを適用する必要はな
い。On the other hand, in classifying, searching, and organizing family photos that are handled at home where no one has a dark beard or who wears glasses, do not overlook a bearded man or a man who wears glasses. It is not necessary to apply the narrowing down of the set face candidate area.
【００１８】これらの人には、例えば、両目を結ぶ区間
や領域の色相がほぼ一定しているものを両目の候補領域
として、そうでないものを両目の候補としない等の強い
条件で、顔候補領域を絞込みを行うようにすることによ
り、前述のような拾いすぎを大幅に削減することができ
る。For these persons, for example, face candidates may be selected under a strong condition such that a segment or a region connecting both eyes has a substantially constant hue as a candidate region for both eyes and a subject other than that is not a candidate for both eyes. By narrowing down the area, it is possible to significantly reduce the above-mentioned overpicking.
【００１９】ただし、この強い条件では、眼鏡をかけた
人を検出することができないという状況も発生し得る。However, under this strong condition, a situation in which the person wearing the glasses cannot be detected may occur.
【００２０】この発明はこれらの事情に対処すべくなさ
れたもので、その目的は、ユーザーが重要視する人物の
顔画像を精度良く検出するための顔画像検出装置および
顔画像検出方法ならびに顔画像検出プログラム手段を提
供することにあるThe present invention has been made to cope with these circumstances, and an object thereof is to provide a face image detecting apparatus, a face image detecting method, and a face image for accurately detecting a face image of a person whom a user attaches importance to. To provide detection program means
【００２１】[0021]
【課題を解決するための手段】本発明によると、上記課
題を解決するために、（１） 検出対象の画像から人の
顔の近傍領域を検出する顔画像検出装置であって、見本
となる特徴をもつ人物の顔画像をサンプル画像として受
け付けるサンプル画像入力部と、検索対象となる画像を
入力する画像入力部と、前記サンプル画像入力部から入
力されたサンプル画像の特徴を用いて、前記画像入力部
から入力された画像の顔の近傍領域を検出する処理を適
用する顔検出処理適用部と、前記顔検出処理適用部によ
り検出された画像の顔の近傍領域の候補を表示する顔候
補領域表示部と、この顔候補領域表示部に表示された顔
の近傍領域の候補に、表示された画像が顔の画像である
か、顔以外の画像であるかを入力する検出結果入力部
と、前記顔候補領域表示部に表示された顔の近傍領域の
候補に対し、複数の条件から選択して顔の近傍領域の候
補を絞込む条件を入力する絞込み条件選択部と、この絞
込み条件選択部により選択された絞込み条件のみを用い
た顔検出処理を行う顔検出処理部とを有することを特徴
とする顔画像検出装置が提供される。According to the present invention, in order to solve the above problems, (1) a face image detecting apparatus for detecting a region near a human face from an image to be detected, which is a sample A sample image input unit that accepts a face image of a person having characteristics as a sample image, an image input unit that inputs an image to be searched, and a feature of the sample image input from the sample image input unit A face detection processing application unit that applies processing for detecting a face neighborhood area of an image input from the input unit, and a face candidate area that displays candidates for the face neighborhood area of the image detected by the face detection processing application unit A display unit and a detection result input unit for inputting whether the displayed image is a face image or a non-face image in the candidate of the face vicinity region displayed on the face candidate region display unit, Face candidate area table With respect to the candidates for the face vicinity area displayed in the display unit, a narrowing-down condition selection unit for selecting a plurality of conditions and inputting conditions for narrowing down the candidates for the face vicinity region, and a selection condition by the narrowing-down condition selection unit There is provided a face image detection device including a face detection processing unit that performs a face detection process using only a narrowing condition.
【００２２】また、本発明によると、上記課題を解決す
るために、（２） 前記検出結果入力部は、表示された
画像の顔領域を入力する顔領域入力部と、この顔領域入
力部によって入力された顔領域の存在位置情報を基に、
顔検出結果の正誤を判定する顔検出結果正誤判定部とを
有することを特徴とする（１）に記載の顔画像検出装置
が提供される。Further, according to the present invention, in order to solve the above problems, (2) the detection result input section includes a face area input section for inputting a face area of a displayed image, and the face area input section. Based on the input location information of the face area,
The face image detection apparatus according to (1) is provided, including a face detection result correctness determination unit that determines whether the face detection result is correct.
【００２３】また、本発明によると、上記課題を解決す
るために、（３） 前記顔候補領域表示部は、前記サン
プル画像入力部から入力されたサンプル画像が、表示さ
れた画像のどの部分に該当するかを入力する顔領域入力
部を有することを特徴とする（１）に記載の顔画像検出
装置が提供される。Further, according to the present invention, in order to solve the above-mentioned problems, (3) the face candidate area display section displays a sample image input from the sample image input section in which part of the displayed image. The face image detecting apparatus according to (1) is provided, which has a face area input unit for inputting whether or not it corresponds.
【００２４】また、本発明によると、上記課題を解決す
るために、（４） 検出対象の画像から人の顔の近傍領
域を検出する顔画像検出装置であって、検出すべき特徴
を有する人物の顔画像の特徴を複数の条件から選択的に
入力する選択条件入力部と、検索対象となる画像を入力
する画像入力部と、前記選択条件入力部から選択的に入
力された顔画像の特徴を用いて、前記画像入力部から入
力された画像の顔の近傍領域を検出する処理を適用する
顔検出処理適用部と、前記顔検出処理適用部により検出
された画像の顔の近傍領域の候補を表示する顔候補領域
表示部と、前記顔候補領域表示部に表示された顔の近傍
領域の候補に対し、複数の条件から選択して顔の近傍領
域の候補を絞込む条件を入力する絞込み条件選択部と、
この絞込み条件選択部により選択された絞込み条件のみ
を用いた顔検出処理を行う顔検出処理部とを有すること
を特徴とする顔画像検出装置が提供される。Further, according to the present invention, in order to solve the above-mentioned problems, (4) a face image detecting apparatus for detecting a region near a human face from an image to be detected, the person having a characteristic to be detected Selection condition input unit for selectively inputting the features of the face image from a plurality of conditions, an image input unit for inputting an image to be searched, and the features of the face image selectively input from the selection condition input unit By using a face detection processing applying unit that applies a process of detecting a face neighboring area of the image input from the image input unit, and a candidate of a face neighboring area of the image detected by the face detection processing applying unit. For the face candidate area display unit that displays, and for the candidates for the face vicinity area displayed on the face candidate area display unit, select from a plurality of conditions and enter the condition to narrow down the candidates for the face vicinity area. Condition selection section,
There is provided a face image detection apparatus including: a face detection processing unit that performs a face detection process using only the narrowing-down condition selected by the narrowing-down condition selecting unit.
【００２５】また、本発明によると、上記課題を解決す
るために、（５） 検出対象の画像から人の顔の近傍領
域を検出する顔画像検出方法であって、見本となる特徴
をもつ人物の顔画像をサンプル画像として受け付けるサ
ンプル画像入力ステップと、検索対象となる画像を入力
する画像入力ステップと、前記サンプル画像入力ステッ
プによって入力されたサンプル画像の特徴を用いて、前
記画像入力ステップによって入力された画像の顔の近傍
領域を検出する処理を適用する顔検出処理適用ステップ
と、前記顔検出処理適用ステップによって検出された画
像の顔の近傍領域の候補を表示する顔候補領域表示ステ
ップと、この顔候補領域表示ステップによって表示され
た顔の近傍領域の候補に、表示された画像が顔の画像で
あるか、顔以外の画像であるかを入力する検出結果入力
ステップと、前記顔候補領域表示ステップによって表示
された画像の顔の近傍領域の候補に対し、複数の条件か
ら選択して顔の近傍領域の候補を絞込む条件を入力する
絞込み条件選択ステップと、この絞込み条件選択ステッ
プにより選択された絞込み条件のみを用いた顔検出処理
を行う顔検出処理ステップとを有することを特徴とする
顔画像検出方法が提供される。Further, according to the present invention, in order to solve the above-mentioned problems, (5) a face image detecting method for detecting a region near a human face from an image to be detected, the person having a characteristic as a sample Sample image input step of accepting the face image as a sample image, an image input step of inputting an image to be searched, and a feature of the sample image input by the sample image input step, input by the image input step A face detection process applying step of applying a process of detecting a face neighborhood area of the image, and a face candidate area displaying step of displaying candidates of a face neighborhood area of the image detected by the face detection processing applying step; Whether the displayed image is a face image or an image other than a face is selected as a candidate for the region near the face displayed in this face candidate region display step. The detection result input step of inputting whether the image is an image and the candidate of the face neighborhood area of the image displayed by the face candidate area display step are selected from a plurality of conditions to narrow down the candidates of the face neighborhood area. There is provided a face image detecting method characterized by comprising a narrowing-down condition selecting step of inputting a condition and a face detecting processing step of performing a face detecting process using only the narrowing-down condition selected by the narrowing-down condition selecting step. .
【００２６】また、本発明によると、上記課題を解決す
るために、（６） 前記検出結果入力ステップは、表示
された画像の顔領域を入力する顔領域入力ステップと、
この顔領域入力ステップによって入力された顔領域の存
在位置情報を基に、顔検出結果の正誤を判定する顔検出
結果正誤判定ステップと、を有することを特徴とする
（５）に記載の顔画像検出方法が提供される。According to the present invention, in order to solve the above problems, (6) the detection result input step includes a face area input step of inputting a face area of a displayed image,
The face image according to (5), further comprising: a face detection result correctness determination step for determining whether the face detection result is correct or incorrect based on the existence position information of the face area input in the face area input step. A detection method is provided.
【００２７】また、本発明によると、上記課題を解決す
るために、（７） 前記顔候補領域表示ステップは、前
記サンプル画像入力ステップによって入力されたサンプ
ル画像が、表示された画像のどの部分に該当するかを入
力する顔領域入力ステップを有することを特徴とする
（５）に記載の顔画像検出方法が提供される。Further, according to the present invention, in order to solve the above-mentioned problems, (7) in the face candidate region displaying step, the sample image input in the sample image inputting step is displayed in which part of the displayed image. The face image detecting method according to (5) is provided, which further comprises a face area input step of inputting whether or not it corresponds.
【００２８】また、本発明によると、上記課題を解決す
るために、（８） 検出対象の画像から人の顔の近傍領
域を検出する顔画像検出方法であって、検出すべき特徴
を有する人物の顔画像の特徴を複数の条件から選択的に
入力する選択条件入力ステップと、検索対象となる画像
を入力する画像入力ステップと、前記選択条件入力ステ
ップによって選択的に入力された顔画像の特徴を用い
て、前記画像入力ステップによって入力された画像の顔
の近傍領域を検出する処理を適用する顔検出処理適用ス
テップと、前記顔検出処理適用ステップにより検出され
た画像の顔の近傍領域の候補を表示する顔候補領域表示
ステップと、前記顔候補領域表示ステップによって表示
された顔の近傍領域の候補に対し、複数の条件から選択
して顔の近傍領域の候補を絞込む条件を入力する絞込み
条件選択ステップと、この絞込み条件選択ステップによ
り選択された絞込み条件のみを用いた顔検出処理を行う
顔検出処理ステップとを有することを特徴とする顔画像
検出方法が提供される。According to the present invention, in order to solve the above-mentioned problems, (8) a face image detecting method for detecting a region near a human face from an image to be detected, wherein a person having a characteristic to be detected Selection condition input step of selectively inputting the features of the face image from a plurality of conditions, an image input step of inputting an image to be searched, and a feature of the face image selectively input by the selection condition input step Using a face detection processing applying step of applying a process of detecting a face neighboring area of the image input by the image input step, and a candidate of a face neighboring area of the image detected by the face detection processing applying step. A face candidate area display step for displaying, and a candidate for the face vicinity area displayed by the face candidate area display step is selected from a plurality of conditions to indicate the face vicinity area. A face image detecting method comprising: a narrowing-down condition selecting step for inputting a narrowing-down condition and a face detecting processing step for performing a face detecting process using only the narrowing-down condition selected by the narrowing-down condition selecting step. Will be provided.
【００２９】また、本発明によると、上記課題を解決す
るために、（９） コンピュータによって検出対象の画
像から人の顔の近傍領域を検出する顔画像検出するため
のプログラムであって、見本となる特徴をもつ人物の顔
画像をサンプル画像として受け付けるサンプル画像入力
ステップを前記コンピュータに実行させる第１のプログ
ラム要素と、検索対象となる画像を入力する画像入力ス
テップを前記コンピュータに実行させる第２のプログラ
ム要素と、前記サンプル画像入力ステップによって入力
されたサンプル画像の特徴を用いて、前記画像入力ステ
ップによって入力された画像の顔の近傍領域を検出する
処理を適用する顔検出処理適用ステップを前記コンピュ
ータに実行させる第３のプログラム要素と、前記顔検出
処理適用ステップによって検出された画像の顔の近傍領
域の候補を表示する顔候補領域表示ステップを前記コン
ピュータに実行させる第４のプログラム要素と、この顔
候補領域表示ステップによって表示された顔の近傍領域
の候補に、表示された画像が顔の画像であるか、顔以外
の画像であるかを入力する検出結果入力ステップを前記
コンピュータに実行させる第５のプログラム要素と、前
記顔候補領域表示ステップによって表示された顔の近傍
領域の候補に対し、複数の条件から選択して顔の近傍領
域の候補を絞込む条件を入力する絞込み条件選択ステッ
プを前記コンピュータに実行させる第６のプログラム要
素と、この絞込み条件選択ステップにより選択された絞
込み条件のみを用いた顔検出処理を行う顔検出処理ステ
ップを前記コンピュータに実行させる第７のプログラム
要素とを有することを特徴とする顔画像検出プログラム
が提供される。Further, according to the present invention, in order to solve the above problems, (9) a program for detecting a face image for detecting a region near a human face from an image to be detected by a computer, A first program element for causing the computer to execute a sample image input step of accepting a face image of a person having the following characteristics as a sample image; and a second program element for causing the computer to execute an image input step of inputting an image to be searched. Using the program element and the characteristics of the sample image input by the sample image input step, a face detection processing applying step for applying a process of detecting a region near a face of the image input by the image input step is applied to the computer. And a third program element to be executed by the Therefore, a fourth program element that causes the computer to execute a face candidate area display step that displays candidates for a face vicinity area of the detected image, and a face vicinity area candidate that is displayed by the face candidate area display step A fifth program element for causing the computer to execute a detection result input step of inputting whether the displayed image is a face image or an image other than a face, and the face candidate area display step. A sixth program element for causing the computer to execute a narrowing-down condition selecting step of inputting a condition for narrowing down the candidates for the face near-field region to a candidate for the face-nearby region, and the narrowing-down condition selection Cause the computer to execute a face detection processing step for performing face detection processing using only the narrowing-down condition selected in step Face image detecting program characterized by having a 7 program element is provided.
【００３０】また、本発明によると、上記課題を解決す
るために、（１０） 前記検出結果入力ステップを前記
コンピュータに実行させる第５のプログラム要素は、表
示された画像の顔領域を入力する顔領域入力ステップを
前記コンピュータに実行させる第８のプログラム要素
と、この顔領域入力ステップによって入力された顔領域
の存在位置情報を基に、顔検出結果の正誤を判定する顔
検出結果正誤判定ステップを前記コンピュータに実行さ
せる第９のプログラム要素と、を有することを特徴とす
る（９）に記載の顔画像検出プログラムが提供される。Further, according to the present invention, in order to solve the above problems, (10) a fifth program element for causing the computer to execute the detection result input step is a face inputting a face area of a displayed image. An eighth program element that causes the computer to execute the area input step, and a face detection result correct / incorrect determination step that determines whether the face detection result is correct or incorrect based on the existence position information of the face area input in the face area input step. A face image detection program according to (9) is provided, comprising: a ninth program element executed by the computer.
【００３１】また、本発明によると、上記課題を解決す
るために、（１１） 前記顔候補領域表示ステップを前
記コンピュータに実行させる第４のプログラム要素は、
前記サンプル画像入力ステップによって入力されたサン
プル画像が、表示された画像のどの部分に該当するかを
入力する顔領域入力ステップを前記コンピュータに実行
させる第１０のプログラム要素を有することを特徴とす
る（９）に記載の顔画像検出プログラムが提供される。Further, according to the present invention, in order to solve the above problems, (11) a fourth program element for causing the computer to execute the face candidate area display step,
It has a tenth program element for causing the computer to execute a face area input step of inputting which part of the displayed image the sample image input by the sample image input step corresponds to. The face image detection program described in 9) is provided.
【００３２】また、本発明によると、上記課題を解決す
るために、（１２） コンピュータによって検出対象の
画像から人の顔の近傍領域を検出する顔画像検出ための
プログラムであって、検出すべき特徴を有する人物の顔
画像の特徴を複数の条件から選択的に入力する選択条件
入力ステップを前記コンピュータに実行させる第１のプ
ログラム要素と、検索対象となる画像を入力する画像入
力ステップを前記コンピュータに実行させる第２のプロ
グラム要素と、前記選択条件入力ステップによって選択
的に入力された顔画像の特徴を用いて、前記画像入力ス
テップによって入力された画像の顔の近傍領域を検出す
る処理を適用する顔検出処理適用ステップを前記コンピ
ュータに実行させる第３のプログラム要素と、前記顔検
出処理適用ステップにより検出された画像の顔の近傍領
域の候補を表示する顔候補領域表示ステップを前記コン
ピュータに実行させる第４のプログラム要素と、前記顔
候補領域表示ステップによって表示された顔の近傍領域
の候補に対し、複数の条件から選択して顔の近傍領域の
候補を絞込む条件を入力する絞込み条件選択ステップを
前記コンピュータに実行させる第５のプログラム要素
と、この絞込み条件選択ステップにより選択された絞込
み条件のみを用いた顔検出処理を行う顔検出処理ステッ
プを前記コンピュータに実行させる第６のプログラム要
素とを有することを特徴とする顔画像検出プログラムが
提供される。Further, according to the present invention, in order to solve the above-mentioned problems, (12) a program for detecting a face image for detecting a region near a human face from an image to be detected by a computer, which should be detected The computer includes a first program element for causing the computer to execute a selection condition input step of selectively inputting a feature of a face image of a person having a feature from a plurality of conditions, and an image input step of inputting an image to be searched. A second program element to be executed by the computer and the feature of the face image selectively input in the selection condition input step, and a process of detecting a neighborhood area of the face of the image input in the image input step is applied. Third program element for causing the computer to execute the face detection processing applying step, and the face detection processing applying step A fourth program element for causing the computer to execute a face candidate area display step for displaying candidates of a face vicinity area of the image detected by the image, and a face vicinity area candidate displayed by the face candidate area display step. On the other hand, a fifth program element for causing the computer to execute a narrowing-down condition selecting step of inputting a condition for narrowing down the candidates for the face vicinity region by selecting from a plurality of conditions, and the narrowing-down condition selected by this narrowing-down condition selecting step. And a sixth program element for causing the computer to execute a face detection processing step of performing face detection processing using only the face image detection program.
【００３３】[0033]
【発明の実施の形態】以下図面を参照して本発明の実施
の形態について説明する。BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of the present invention will be described below with reference to the drawings.
【００３４】（第１の実施の形態）図１は、本発明の第
１の実施の形態による顔画像検出装置および顔画像検出
方法ならびに顔画像検出プログラムの構成について説明
するために概略的に示す機能ブロック図である。(First Embodiment) FIG. 1 is a schematic diagram for explaining the configuration of a face image detecting apparatus, a face image detecting method, and a face image detecting program according to a first embodiment of the present invention. It is a functional block diagram.
【００３５】すなわち、図１において、参照符号１０１
は、デジタル画像の整理・分類・検索処理においてユー
ザーが重要視する人物群の顔画像をサンプル画像として
受け付けるサンプル画像受付部である。That is, in FIG. 1, reference numeral 101
Is a sample image reception unit that receives, as a sample image, face images of a group of people that the user attaches importance to in organizing, classifying, and searching digital images.
【００３６】また、参照符号１０２は、ユーザーがデジ
タルカメラ等で撮影した画像を当該顔画像検出装置に取
り込むための画像入力部である。Further, reference numeral 102 is an image input unit for taking in an image photographed by a user with a digital camera or the like to the face image detecting apparatus.
【００３７】また、参照符号１０３は、画像入力部１０
２によって取り込まれた画像に顔領域を検出する処理を
適用する顔検出処理適用部である。Reference numeral 103 indicates the image input unit 10.
2 is a face detection processing application unit that applies processing for detecting a face area to the image captured by 2.
【００３８】また、参照符号１０４は、顔検出処理適用
部１０３による顔検出処理の適用結果を表示する結果表
示部である。Further, reference numeral 104 is a result display section for displaying the application result of the face detection processing by the face detection processing application section 103.
【００３９】また、参照符号１０５は、顔検出処理適用
部１０３による顔検出処理結果をユーザーが目で見て顔
を検出することができているか否かをチェックするユー
ザーによる結果チェック部である。Further, reference numeral 105 is a result check unit by the user for checking whether or not the user can visually detect the face by the face detection processing result by the face detection processing application unit 103.
【００４０】また、参照符号１０６は、結果チェック部
１０５におけるユーザーによる結果のチェックに基づい
て、顔候補領域の絞込み手段を採用するか否かを決定す
る顔候補領域の絞込み手段の採否決定部である。Further, reference numeral 106 is an adoption / non-adoption determination unit of the face candidate area narrowing-down means for deciding whether or not to adopt the face candidate area narrowing-down means based on the result check by the user in the result check unit 105. is there.
【００４１】また、参照符号１０７は、採用する顔候補
領域の絞込み手段を顔検出処理に組み込むユーザー向け
顔検出処理確定部である。Further, reference numeral 107 is a user face detection processing decision unit which incorporates the means for narrowing down the face candidate area to be used in the face detection processing.
【００４２】次に、以上のように構成される本発明の第
１の実施の形態による顔画像検出装置および顔画像検出
方法ならびに顔画像検出プログラムの動作形態について
説明する。Next, an operation mode of the face image detecting apparatus, the face image detecting method, and the face image detecting program according to the first embodiment of the present invention configured as above will be described.
【００４３】図２は、本発明の第１の実施の形態による
顔画像検出装置および顔画像検出方法ならびに顔画像検
出プログラムの動作形態を説明するために示すフローチ
ャートである。FIG. 2 is a flow chart shown for explaining the operation modes of the face image detecting apparatus, the face image detecting method and the face image detecting program according to the first embodiment of the present invention.
【００４４】まず、顔検出処理をユーザー向けに最適化
するか否かをユーザーが選択する（ステップＳＴ１０
１）。First, the user selects whether or not the face detection processing is optimized for the user (step ST10).
1).
【００４５】もし、ユーザーが、ユーザー向けの最適化
を選択しなければ、用意してある顔検出処理をそのまま
ユーザーが所有する全ての画像に適用する（ステップＳ
Ｔ１１０）。If the user does not select the optimization for the user, the prepared face detection process is directly applied to all the images owned by the user (step S).
T110).
【００４６】また、もし、ユーザーが、ユーザー向けの
顔検出処理最適化を選択すれば、以下のステップＳＴ１
０２乃至ＳＴ１０９の処理を行う。If the user selects the face detection processing optimization for the user, the following step ST1
The processing from 02 to ST109 is performed.
【００４７】まず、画像入力部１０２において、ユーザ
ーが重要視する人物の顔画像データをサンプル画像とし
て入力する（ステップＳＴ１０２）。First, in the image input section 102, the face image data of a person who is considered important by the user is input as a sample image (step ST102).
【００４８】次に、顔検出処理適用部１０３において、
用意してある顔検出処理のうち、顔候補領域の絞込み手
段を全て外してサンプル画像に適用する（ステップＳＴ
１０３）。Next, in the face detection processing application section 103,
Of the face detection processing prepared, all the means for narrowing down the face candidate area are removed and applied to the sample image (step ST
103).
【００４９】続いて、顔検出処理適用部１０３におい
て、上記の環境に顔候補領域の絞込み手段を１つ加え
て、サンプル画像に適用する（ステップＳＴ１０４）。Subsequently, the face detection processing application unit 103 adds one face candidate area narrowing means to the above environment and applies it to the sample image (step ST104).
【００５０】さらに、顔検出処理適用部１０３におい
て、上記の顔候補領域の絞込み手段を１つづつ入れ替え
て、サンプル画像に適用する（ステップＳＴ１０５）。Further, in the face detection processing application section 103, the above-mentioned face candidate area narrowing-down means are replaced one by one and applied to the sample image (step ST105).
【００５１】そして、結果表示部１０４において、各々
の適用結果（顔検出結果）を画面に表示する（ステップ
ＳＴ１０６）。Then, the result display section 104 displays the respective application results (face detection results) on the screen (step ST106).
【００５２】その後、ユーザーによる結果チェック部１
０５において、これらの顔検出結果をユーザーによって
確認してもらう。After that, the result check unit 1 by the user
At 05, the user confirms these face detection results.
【００５３】例えば、サンプル画像中の人物がきちんと
表示されている結果に対しては○印、そうでない場台に
は×印等の記号でユーザーによって選択してもらう（ス
テップＳＴ１０７）。For example, when the person in the sample image is properly displayed, the user selects the result by using a symbol such as a circle, and a symbol such as an X when it is not (step ST107).
【００５４】図７は、このような状況を説明するために
示す第１の実施の形態による画面表示を例示する図であ
る。FIG. 7 is a diagram exemplifying a screen display according to the first embodiment shown for explaining such a situation.
【００５５】次に、顔候補領域の絞込み手段の採否決定
部１０６において、ユーザーのチェックに基づき、顔候
補領域の絞込み手段のそれぞれをこのユーザー向けに採
用するか否かを判定する（ステップＳＴ１０８）。Next, in the adoption / non-adoption determining unit 106 of the face candidate area narrowing means, it is determined based on the user's check whether or not each of the face candidate area narrowing means is adopted for this user (step ST108). .
【００５６】続いて、ユーザー向け顔検出処理確定部１
０７において、このユーザー向けに採用することに決ま
った顔候補領域の絞込み手段を含み、採用しない絞込み
手段を含まない顔検出処理を確定する（ステップＳＴ１
０９）。Next, the face detection processing confirmation unit 1 for the user
At 07, the face detection processing including the narrowing-down means of the face candidate area decided to be adopted for this user and not including the narrowing-down means not adopted is determined (step ST1).
09).
【００５７】こうして確定した顔検出処理を顔検出処理
適用部１０３において、ユーザーの所有する全ての画像
に適用する（ステップＳＴ１１０）。The face detection processing thus determined is applied to all the images owned by the user in the face detection processing application section 103 (step ST110).
【００５８】そして、顔画像の検出結果を利用した種々
のサービスを実行する（ステップＳＴ１１１）すること
により、一連の処理が完了する。Then, by executing various services utilizing the detection result of the face image (step ST111), a series of processing is completed.
【００５９】そして、以上のような、この発明の第１の
実施の形態の顔画像検出装置および顔画像検出方法なら
びに顔画像検出プログラムを含む顔検出システムによれ
ば、用意した顔候補領域の絞込み手段をユーザー向けに
最適化する際、ユーザーがサンプル画像を顔検出システ
ムに入力することによって、髭や髪の毛の量、あるいは
色等、言葉では表現しにくい特徴を持つ人物に対して、
顔候補領域の絞込み手段の有効度を明確に見極めること
かできるので、ユーザー向けの最適化をより確実にでき
るという効果がある。According to the face image detecting apparatus, the face image detecting method, and the face detecting system including the face image detecting program according to the first embodiment of the present invention, the prepared face candidate area is narrowed down. When the method is optimized for the user, the user inputs a sample image to the face detection system, so that the person who has features that are difficult to describe in words, such as the amount of beard or hair, or the color,
Since it is possible to clearly determine the effectiveness of the face candidate area narrowing means, there is an effect that the optimization for the user can be more surely performed.
【００６０】（第２の実施の形態）前述した第１の実施
の形態による顔検出システムは、ユーザーが重要視する
人物群のサンプル画像を入力し、顔候補領域の絞込み手
段を適用した場合の処理結果に基づいて、顔候補領域の
絞込み手段の取捨選択を行うものであった。(Second Embodiment) In the face detection system according to the first embodiment described above, a sample image of a group of persons that a user attaches importance to is input and a face candidate area narrowing means is applied. The means for narrowing down the face candidate area is selected based on the processing result.
【００６１】この第２の実施形態による顔検出システム
では、サンプル画像を用意せずに、ユーザーが重要視す
る人物群に見受けられる顔の特徴を選択肢の中から選択
してもらうことに基づいて、顔候補領域の絞込み手段の
取捨選択をするところが前述した第１の実施の形態と異
なる。In the face detection system according to the second embodiment, the sample image is not prepared, but the user is asked to select the facial features found in the group of people who are important, from the options. This is different from the first embodiment described above in that the face candidate areas are narrowed down or narrowed down.
【００６２】図３は、本発明の第２の実施の形態による
顔画像検出装置および顔画像検出方法ならびに顔画像検
出プログラムの構成について説明するために概略的に示
す機能ブロック図である。FIG. 3 is a functional block diagram schematically showing the structure of a face image detecting apparatus, a face image detecting method and a face image detecting program according to the second embodiment of the present invention.
【００６３】すなわち、図３において、参照符号２０１
は、デジタル画像の整理・分類・検索処理においてユー
ザーが重要視する人物群の顔画像をサンプル画像として
受け付けるサンプル画像受付部である。That is, reference numeral 201 in FIG.
Is a sample image reception unit that receives, as a sample image, face images of a group of people that the user attaches importance to in organizing, classifying, and searching digital images.
【００６４】また、参照符号２０２は、ユーザーによる
顔領域教示部であり、参照符号２０３は、ユーザーがデ
ジタルカメラ等で撮影した画像を当該顔画像検出装置に
取り込むための画像入力部である。Further, reference numeral 202 is a face area teaching section by the user, and reference numeral 203 is an image input section for taking in an image taken by the user with a digital camera or the like into the face image detecting apparatus.
【００６５】また、参照符号２０４は、画像入力部２０
３によって取り込まれた画像に顔領域を検出する処理を
適用する顔検出処理適用部である。Further, reference numeral 204 designates the image input section 20.
3 is a face detection processing application unit that applies processing for detecting a face area to the image captured by the process 3.
【００６６】また、参照符号２０５は、顔検出処理適用
部２０４による顔検出処理の適用結果に基づいて顔検出
結果の正誤を判定する顔検出結果正誤判定部である。Reference numeral 205 is a face detection result correctness determination unit which determines whether the face detection result is correct based on the application result of the face detection processing by the face detection processing application unit 204.
【００６７】また、参照符号２０６は、顔検出結果正誤
判定部２０５における正誤判定に基づいて、顔候補領域
の絞込み手段を採用するか否かを決定する顔候補領域の
絞込み手段の採否決定部である。Reference numeral 206 denotes a face candidate area narrowing means adoption / non-use determining portion which determines whether or not to adopt the face candidate area narrowing means based on the correctness / incorrectness determination in the face detection result correctness / incorrectness determination section 205. is there.
【００６８】また、参照符号２０７は、採用する顔候補
領域の絞込み手段を顔検出処理に組み込むユーザー向け
顔検出処理確定部である。Further, reference numeral 207 is a user face detection processing determination unit that incorporates the face candidate area narrowing means to be used in the face detection processing.
【００６９】すなわち、このような第２の実施の形態に
おいて、サンプル画像受付部２０１、画像入力部２０
３、顔検出処理適用部２０４、顔候補領域の絞込み手段
の採否決定部２０６、ユーザー向け顔検出処理確定部２
０７が存在する構成については、第１の実施の形態の場
合と同様であるが、ユーザーによる顔領域教示部２０２
が存在すること、ならびに顔検出結果正誤判定部２０５
が存在することが、第１の実施の形態と異なる。That is, in the second embodiment as described above, the sample image receiving unit 201 and the image input unit 20 are included.
3, face detection processing application unit 204, adoption determination unit 206 of face candidate area narrowing means, user face detection processing determination unit 2
The configuration in which 07 is present is similar to that in the first embodiment, but the face area teaching unit 202 by the user is
Is present, and the face detection result correctness determination unit 205
Is different from the first embodiment.
【００７０】図８は、ユーザーによる顔領域教示部２０
２の一例を説明するために示す、この第２の実施の形態
による画面表示を例示する図である。FIG. 8 shows the face area teaching unit 20 operated by the user.
FIG. 9 is a diagram illustrating a screen display according to the second embodiment, which is shown for explaining an example of No. 2;
【００７１】すなわち、図８に示すように、ユーザー
が、顔検出システムに与えたサンプル画像に対し、その
中の顔領域を枠で囲って、顔の位置情報を顔検出システ
ムとしての顔画像検出装置に教示する。That is, as shown in FIG. 8, with respect to the sample image given to the face detection system by the user, the face area in the sample image is surrounded by a frame, and the face position information is detected by the face image detection system. Teach the device.
【００７２】これにより、顔検出システムとしての顔画
像検出装置は、ユーザーから教示された顔の位置情報と
顔候補領域の絞込み手段を利用して検出した顔の位置情
報を照合し、顔の検出に成功したか、失敗したかを判定
することができる。As a result, the face image detecting apparatus as the face detecting system collates the position information of the face instructed by the user with the position information of the face detected by using the face candidate area narrowing means, and detects the face. It is possible to determine whether or not the above has succeeded or failed.
【００７３】次に、以上のように構成される本発明の第
２の実施の形態による顔画像検出装置および顔画像検出
方法ならびに顔画像検出プログラムの動作形態について
説明する。Next, an operation mode of the face image detecting apparatus, the face image detecting method and the face image detecting program according to the second embodiment of the present invention configured as above will be described.
【００７４】図４は、本発明の第２の実施の形態による
顔画像検出装置および顔画像検出方法ならびに顔画像検
出プログラムの動作形態を説明するために示すフローチ
ャートである。FIG. 4 is a flow chart shown for explaining the operation modes of the face image detecting apparatus, the face image detecting method and the face image detecting program according to the second embodiment of the present invention.
【００７５】まず、サンプル画像受付部２０１におい
て、顔検出処理をユーザー向けに最適化するか否かをユ
ーザーが選択する（ステップＳＴ２０１）。First, in the sample image receiving unit 201, the user selects whether or not the face detection processing is optimized for the user (step ST201).
【００７６】もし、ユーザーが、ユーザー向けの最適化
を選択しなければ、用意してある顔検出処理をそのまま
ユーザーが所有する全ての画像に適用する（ステップＳ
Ｔ２１０）。If the user does not select the optimization for the user, the prepared face detection process is directly applied to all the images owned by the user (step S).
T210).
【００７７】また、もし、ユーザーが、ユーザー向けの
顔検出処理最適化を選択すれば、以下のステップＳＴ２
０２乃至ＳＴ２０９の処理を行う。If the user selects face detection processing optimization for the user, the following step ST2
02 to ST209 are performed.
【００７８】まず、画像入力部２０３において、ユーザ
ーが重要視する人物の顔画像データをサンプル画像とし
て入力する（ステップＳＴ２０２）。First, in the image input section 203, the face image data of the person whom the user attaches importance is input as a sample image (step ST202).
【００７９】まず、顔領域教示部２０２において、ユー
ザーがサンプル画像中の顔領域を枠で囲んで教示する
（ステップＳＴ２０３）。First, in the face area teaching unit 202, the user teaches the face area in the sample image by enclosing it in a frame (step ST203).
【００８０】次に、顔検出処理適用部２０４において、
用意してある顔検出処理のうち、顔候補領域の絞込み手
段を全て外してサンプル画像に適用する（ステップＳＴ
２０４）。Next, in the face detection processing application section 204,
Of the face detection processing prepared, all the means for narrowing down the face candidate area are removed and applied to the sample image (step ST
204).
【００８１】続いて、顔検出処理適用部２０４におい
て、上記の環境に顔候補領域の絞込み手段を１つ加え
て、サンプル画像に適用する（ステップＳＴ２０５）。Then, the face detection processing application section 204 adds one face candidate area narrowing means to the above environment and applies it to the sample image (step ST205).
【００８２】さらに、顔検出処理適用部２０４におい
て、上記の顔候補領域の絞込み手段を１つづつ入れ替え
て、サンプル画像に適用する（ステップＳＴ２０６）。Further, the face detection processing application section 204 replaces the face candidate area narrowing-down means one by one and applies it to the sample image (step ST206).
【００８３】そして、顔検出結果正誤判定部２０５にお
いて、ステップＳＴ２０３でユーザーから教示された顔
領域の位置情報を用いて各々の顔検出結果を正誤判定す
る（ステップＳＴ２０７）。Then, the face detection result correctness determination section 205 determines the correctness of each face detection result using the position information of the face area taught by the user in step ST203 (step ST207).
【００８４】次に、顔候補領域の絞込み手段の採否決定
部２０６において、顔検出結果を正誤判定に基づき、顔
候補領域の絞込み手段のそれぞれをこのユーザー向けに
採用するか否かを判定する（ステップＳＴ２０８）。Next, in the adoption / non-adoption determining unit 206 of the face candidate area narrowing-down means, it is determined whether or not each of the face candidate area narrowing-down means is adopted for this user based on the correctness / wrongness of the face detection result ( Step ST208).
【００８５】続いて、ユーザー向け顔検出処理確定部２
０７において、このユーザー向けに採用することに決ま
った顔候補領域の絞込み手段を含み、採用しない絞込み
手段を含まない顔検出処理を確定する（ステップＳＴ２
０９）。Subsequently, the face detection processing confirmation unit 2 for the user
In 07, the face detection processing including the narrowing-down means of the face candidate area decided to be adopted for this user and not including the narrowing-down means not adopted is determined (step ST2).
09).
【００８６】こうして確定した顔検出処理を顔検出処理
適用部２０４において、ユーザーの所有する全ての画像
に適用する（ステップＳＴ２１０）。The face detection processing thus determined is applied to all images owned by the user in the face detection processing application section 204 (step ST210).
【００８７】そして、顔画像の検出結果を利用した種々
のサービスを実行する（ステップＳＴ２１１）すること
により、一連の処理が完了する。Then, a series of processes are completed by executing various services using the detection result of the face image (step ST211).
【００８８】すなわち、本発明の第２の実施の形態によ
る顔画像検出装置および顔画像検出方法ならびに顔画像
検出プログラムの動作形態は、ユーザーがサンプル画像
中の顔領域を枠で囲んで教示するステップＳＴ２０３
と、ユーザーから教示された顔領域の位置情報を用いて
各々の顔検出結果の正誤を判定するステップＳＴ２０７
とが、前述した第１の実施の形態のそれとは異なってい
る。That is, the operation mode of the face image detecting apparatus, the face image detecting method and the face image detecting program according to the second embodiment of the present invention is such that the user teaches the face area in the sample image by enclosing it in a frame. ST203
And step ST207 of determining the correctness of each face detection result using the position information of the face area taught by the user.
Is different from that of the above-described first embodiment.
【００８９】そして、以上のような、この発明の第２の
実施の形態の顔画像検出装置および顔画像検出方法なら
びに顔画像検出プログラムを含む顔検出システムによれ
ば、前述した第１の実施の形態のように、顔候補領域の
絞込み手段の検出結果をユーザーが全てチェックするの
ではなく、最初に、サンプル画像中の顔領域の位置情報
を顔検出システムに教示するだけで、顔検出システムが
顔候補領域の絞込み手段の有効度を判定することができ
るので、ユーザーの負担が少なくて済むという効果があ
る。According to the face image detecting apparatus, the face image detecting method and the face detecting system including the face image detecting program according to the second embodiment of the present invention as described above, As in the form, the user does not check all the detection results of the face candidate area narrowing means, but at first, the position detection information of the face area in the sample image is taught to the face detection system. Since the effectiveness of the means for narrowing down the face candidate area can be determined, there is an effect that the burden on the user can be reduced.
【００９０】（第３の実施の形態）前述した第１の実施
の形態による顔検出システムは、ユーザーが重要視する
人物群のサンプル画像を入力し、顔候補領域の絞込み手
段を適用した場合の処理結果に基づいて、顔候補領域の
絞込み手段の取捨選択を行うものであった。(Third Embodiment) In the face detection system according to the first embodiment described above, a sample image of a group of persons that the user attaches importance to is input and a face candidate area narrowing means is applied. The means for narrowing down the face candidate area is selected based on the processing result.
【００９１】この第３の実施の形態による顔検出システ
ムでは、サンプル画像を用意せずに、ユーザーが重要視
する人物群に見受けられる顔の特徴を選択肢の中から選
択してもらうことに基づいて、顔候補領域の絞込み手段
の取捨選択をするところが前述した第１の実施の形態と
異なる。The face detection system according to the third embodiment is based on the fact that the user is asked to select a facial feature found in a group of people who he or she considers important from among options, without preparing a sample image. The difference from the first embodiment is that the face candidate area narrowing means is selected.
【００９２】図５は、本発明の第３の実施の形態による
顔画像検出装置および顔画像検出方法ならびに顔画像検
出プログラムの構成について説明するために概略的に示
す機能ブロック図である。FIG. 5 is a functional block diagram schematically showing the structure of a face image detecting apparatus, a face image detecting method, and a face image detecting program according to the third embodiment of the present invention.
【００９３】すなわち、図３において、参照符号３０１
は、顔特徴に関するユーザーの重要度受付部である。That is, in FIG. 3, reference numeral 301
Is a user degree of importance reception unit for facial features.
【００９４】また、参照符号３０２は、顔候補領域の絞
込み手段の採否決定部であり、参照符号３０３は、ユー
ザー向け顔検出処理確定部である。Further, reference numeral 302 is an adoption / non-use determining section of the face candidate area narrowing means, and reference numeral 303 is a user face detection processing determining section.
【００９５】また、参照符号３０４は、画像入力部であ
り、参照符号３０５は、顔検出処理適用部であり、参照
符号３０６は、結果表示部である。Further, reference numeral 304 is an image input section, reference numeral 305 is a face detection processing application section, and reference numeral 306 is a result display section.
【００９６】すなわち、この第３の実施の形態では、顔
候補領域の絞込み手段の採否決定部３０２、ユーザー向
け顔検出処理確定部３０３、画像入力部３０４、顔検出
処理適用部３０５、結果表示部３０６が存在している構
成については、前述した第１の実施の形態の場合と同様
であるが、顔特徴に関するユーザーの重要度受付部３０
１が存在する点が、第１の実施の形態とは異なってい
る。That is, in the third embodiment, the adoption / non-adoption determining unit 302 of the face candidate area narrowing-down unit, the user face detection processing determining unit 303, the image input unit 304, the face detection processing applying unit 305, and the result display unit. The configuration in which 306 is present is the same as that in the case of the above-described first embodiment, but the degree of importance reception unit 30 of the user regarding the facial features.
1 is different from the first embodiment.
【００９７】図９は、ユーザーの重要度受付部３０１の
一例を説明するために示す、この第３の実施の形態によ
る画面表示を例示する図である。FIG. 9 is a diagram showing an example of the screen display according to the third embodiment, which is shown for explaining an example of the importance degree reception unit 301 of the user.
【００９８】すなわち、ユーザーが自分の家族のだけを
顔検出できれば十分な場合、その家族構成の顔の特徴を
思い浮かべながら、図９に示されている顔特徴の中で、
該当するもの全てを選択する。That is, when it is sufficient for the user to detect only the face of his / her family, the facial features shown in FIG.
Select all that apply.
【００９９】例えば、ユーザーが日本人の家族なら、黄
色人種を選ぶし、家族に眼鏡をかけている人とかけてい
ない人の両方がいるなら、眼鏡ありと眼鏡なしを選ぶ
し、髭の濃さや髪の毛の色も該当するものを全て選択す
る。For example, if the user is a Japanese family, select the yellow race, and if there are both people who wear glasses and those who do not wear glasses, select with or without glasses, and with a beard. Select all that also correspond to the thickness and hair color.
【０１００】もし、眼鏡ありを選ばずに、眼鏡なしだけ
を選んだ場合、次のような顔候補領域の絞込み手段が一
例として選択される。[0100] If only glasses are selected without selecting glasses, the following face candidate area narrowing means is selected as an example.
【０１０１】すなわち、両目の候補領域として、２つの
目の候補領域を結ぶ区間または領域において、色相がほ
ぼ肌色で一定しているという条件を満たすペアだけ、両
目の候補領域として残し、この条件を満たさないものを
両目の候補としないという顔候補領域の絞込み手段を採
用する。That is, as a candidate region for both eyes, only a pair that satisfies the condition that the hue is almost constant in the skin color in the section or region connecting the candidate regions for two eyes is left as the candidate region for both eyes, and this condition is set. A face candidate area narrowing-down means is adopted in which those that do not satisfy are not considered as candidates for both eyes.
【０１０２】こうすることによって、眼鏡をかけた顔の
検出に失敗する可能性が生じるが、家族全員が眼鏡をか
けていないようなユーザーに対しては、あまり大きな問
題にはならない。By doing so, there is a possibility that the detection of the face with glasses may fail, but this is not a big problem for users who do not wear glasses for the whole family.
【０１０３】むしろ、このようにして、やや強い絞込み
の条件を採用することによって、顔でない領域を顔候補
として拾いすぎてしまう割合を抑えることができるとい
う効果の方が大きい。On the contrary, by adopting a slightly strong narrowing-down condition in this manner, the effect that the ratio of picking up too much non-face area as a face candidate can be suppressed is more significant.
【０１０４】また、この第３の実施の形態では、明示的
な問いかけが可能な例として、目つぶり写真をどう扱う
ようにしたいかを問いかけるている。Further, in the third embodiment, as an example in which an explicit inquiry can be made, an inquiry is made as to how to handle a blinking photograph.
【０１０５】すなわち、寝ているときの写真や、瞬きで
目を閉じてしまった写真まで、洩れなく検出したいと思
うユーザーは、目つぶり写真も必要とするを選択する。In other words, the user who wants to detect even a photograph when he is sleeping or a photograph whose eyes are closed by blinking, selects that a blinking photograph is also required.
【０１０６】この場合は、目つぶり写真も検出できるよ
うに、緩い条件の顔候補領域の絞込み手段を採用するこ
とになり、顔でない領域を顔候補領域として拾いすぎる
割合か増加することになる。In this case, the face candidate area narrowing-down means under a mild condition is adopted so that the eye-closed photograph can be detected, and the ratio of excessively picking up a non-face area as a face candidate area increases.
【０１０７】一方、目を閉じた写真は不必要を選択する
と、目の候補領域の絞込みにおいて、開いた目の特徴の
方が閉じた目の特徴よりも顕著な特徴となるので、顔で
ない領域を顔候補として拾いすぎる割合を抑えることが
できる。On the other hand, if a photograph with closed eyes is selected as unnecessary, the features of the open eyes are more prominent than the features of the closed eyes in narrowing down the candidate regions of the eyes, so that the non-face region is selected. It is possible to suppress the ratio of picking up too many face candidates.
【０１０８】次に、以上のように構成される本発明の第
３の実施の形態による顔画像検出装置および顔画像検出
方法ならびに顔画像検出プログラムの動作形態について
説明する。Next, an operation mode of the face image detecting apparatus, the face image detecting method, and the face image detecting program according to the third embodiment of the present invention configured as above will be described.
【０１０９】図６は、この発明の第３の実施の形態によ
る顔画像検出装置および顔画像検出方法ならびに顔画像
検出プログラムの動作形態を示すフローチャートであ
る。FIG. 6 is a flow chart showing the operation mode of the face image detecting apparatus, the face image detecting method and the face image detecting program according to the third embodiment of the present invention.
【０１１０】まず、顔特徴に関するユーザーの重要度受
付部３０１において、ユーザー向けに顔検出処理を最適
化するか否かをユーザーに問いかけ（ステップＳＴ３０
１）、最適化しない場合には、用意した顔検出処理をユ
ーザーの所有する全ての画像に適用する（ステップＳＴ
３０６）。First, in the user importance degree reception unit 301 regarding face characteristics, the user is asked whether or not the face detection processing is optimized for the user (step ST30).
1) If not optimized, the prepared face detection process is applied to all images owned by the user (step ST
306).
【０１１１】ユーザー向けに最適化する場合、顔特徴に
関するユーザーの重要度受付部３０１において、種々の
顔特徴に関してユーザーにその重要度を問い合わせる
（ステップＳＴ３０２）。In the case of optimizing for a user, the importance degree receiving section 301 of the user concerning the facial feature inquires of the user about the importance degree of various facial features (step ST302).
【０１１２】続いて、顔特徴に関するユーザーの重要度
受付部３０１において、ユーザーが、各顔特徴に関し、
その重要度を選択する（ステップＳＴ３０３）。Next, in the user importance degree receiving unit 301 regarding facial features, the user
The degree of importance is selected (step ST303).
【０１１３】そして、選択された重要度に基づき、顔候
補領域の絞込み手段の採否決定部３０２において、用意
した複数個の顔候補領域の絞込み手段の中から、このユ
ーザー向けに採用する絞込み手段を自動的に選定する
（ステップＳＴ３０４）。Then, based on the selected degree of importance, the adoption determination unit 302 of the face candidate area narrowing-down means selects the narrowing-down means to be adopted for this user from the prepared plurality of face candidate area narrowing-down means. It is automatically selected (step ST304).
【０１１４】これで、ユーザー向けの顔検出処理部３０
３において、ユーザー向けの顔検出処理が確定し、それ
以降の処理は、前述した第１の実施の形態の場合と同様
である。Now, the face detection processing unit 30 for the user
In 3, the face detection processing for the user is determined, and the subsequent processing is the same as in the case of the first embodiment described above.
【０１１５】すなわち、確定した顔検出処理を顔検出処
理適用部３０５において、ユーザーの所有する全ての画
像に適用する（ステップＳＴ３０５）。That is, the determined face detection processing is applied to all the images owned by the user in the face detection processing application section 305 (step ST305).
【０１１６】そして、顔画像の検出結果を利用した種々
のサービスを実行する（ステップＳＴ１１１）すること
により、一連の処理が完了する。Then, a series of processes are completed by executing various services using the detection result of the face image (step ST111).
【０１１７】この間、画像入力部３０４においては、ユ
ーザーが重要視する人物の顔画像データを画像として入
力する。During this period, the image input section 304 inputs the face image data of the person who the user considers important as an image.
【０１１８】また、結果表示部３０６においては、各々
の適用結果（顔検出結果）を画面に表示する。Further, the result display section 306 displays each application result (face detection result) on the screen.
【０１１９】そして、以上のような、この発明の第３の
実施の形態の顔画像検出装置および顔画像検出方法なら
びに顔画像検出プログラムを含む顔検出システムによれ
ば、顔候補領域の絞込み手段をユーザー向けに最適化す
る際、前述した第１の実施の形態のようにサンプル画像
を用意しなくとも、ユーザーの重要視する人物群に備わ
った顔の特徴をいくつかの選択肢の中から選ぶことによ
って、手軽にかつ短い処理時間でユーザー向けの最適化
を行うことができるという効果がある。According to the face image detecting apparatus, the face image detecting method, and the face detecting system including the face image detecting program according to the third embodiment of the present invention as described above, the face candidate area narrowing means is provided. When optimizing for a user, even if a sample image is not prepared as in the above-described first embodiment, the facial features included in the user's important group of people can be selected from among several options. With this, there is an effect that optimization for users can be performed easily and in a short processing time.
【０１２０】以上説明したように、本発明による顔画像
検出装置および顔画像検出方法ならびに顔画像検出プロ
グラムを含む顔検出システムは、顔候補領域の絞込み手
段をユーザーの重要視する人物をなるべく見落とさない
ように、かつ、重要視しない人物を見落としても構わな
いように設定できるので、顔でない領域を誤って検出し
てしまうという拾い過ぎ率を抑え、ユーザーが重要視す
る人物を誤って検出することができなくなるような見落
とし率を低くすることができる結果、ユーザーが重要視
する顔の検出率を向上することができるという効果があ
る。As described above, the face image detecting apparatus, the face image detecting method, and the face detecting system including the face image detecting program according to the present invention do not overlook the person who places importance on the face candidate region narrowing-down means as much as possible. In this way, it is possible to set that people who do not consider important people can be overlooked, so it is possible to suppress the excessive pick-up rate that falsely detects non-face areas and to mistakenly detect people who are important to users. As a result, it is possible to reduce the oversight rate that makes it impossible for the user to detect, and as a result, it is possible to improve the detection rate of the face that the user values.
【０１２１】[0121]
【発明の効果】従って、以上説明したように、本発明に
よれば、ユーザーが重要視する人物の顔画像を精度良く
検出するための顔画像検出装置および顔画像検出方法な
らびに顔画像検出プログラムを提供することができる。As described above, according to the present invention, a face image detecting apparatus, a face image detecting method, and a face image detecting program for accurately detecting a face image of a person whom a user considers important are provided. Can be provided.
【図１】図１は、本発明の第１の実施の形態による顔画
像検出装置および顔画像検出方法ならびに顔画像検出プ
ログラムの構成について説明するために概略的に示す機
能ブロック図である。FIG. 1 is a functional block diagram schematically illustrating a configuration of a face image detecting device, a face image detecting method, and a face image detecting program according to a first embodiment of the present invention.
【図２】図２は、本発明の第１の実施の形態による顔画
像検出装置および顔画像検出方法ならびに顔画像検出プ
ログラムの動作形態を説明するために示すフローチャー
トである。FIG. 2 is a flowchart shown to explain an operation mode of a face image detecting device, a face image detecting method, and a face image detecting program according to the first embodiment of the present invention.
【図３】図３は、本発明の第２の実施の形態による顔画
像検出装置および顔画像検出方法ならびに顔画像検出プ
ログラムの構成について説明するために概略的に示す機
能ブロック図である。FIG. 3 is a functional block diagram schematically showing a face image detecting apparatus, a face image detecting method, and a configuration of a face image detecting program according to a second embodiment of the present invention.
【図４】図４は、本発明の第２の実施の形態による顔画
像検出装置および顔画像検出方法ならびに顔画像検出プ
ログラムの動作形態を説明するために示すフローチャー
トである。FIG. 4 is a flowchart showing an operation mode of a face image detecting device, a face image detecting method, and a face image detecting program according to a second embodiment of the present invention.
【図５】図５は、本発明の第３の実施の形態による顔画
像検出装置および顔画像検出方法ならびに顔画像検出プ
ログラムの構成について説明するために概略的に示す機
能ブロック図である。FIG. 5 is a functional block diagram schematically illustrating a configuration of a face image detecting device, a face image detecting method, and a face image detecting program according to a third embodiment of the present invention.
【図６】図６は、本発明の第３の実施の形態による顔画
像検出装置および顔画像検出方法ならびに顔画像検出プ
ログラムの動作形態を説明するために示すフローチャー
トである。FIG. 6 is a flow chart shown for explaining an operation mode of a face image detecting device, a face image detecting method, and a face image detecting program according to a third embodiment of the present invention.
【図７】図７は、本発明の第１の実施の形態において、
顔検出結果をユーザーによって確認してもらうための状
況を説明するための画面表示を例示する図である。FIG. 7 shows the first embodiment of the present invention,
It is a figure which illustrates the screen display for demonstrating the situation for having a user confirm the face detection result.
【図８】図８は、本発明の第２の実施の形態において、
ユーザーによる顔領域教示部２０２を説明するための画
面表示を例示する図である。FIG. 8 shows a second embodiment of the present invention,
It is a figure which illustrates the screen display for demonstrating the face area | region teaching part 202 by a user.
【図９】図９は、本発明の第３の実施の形態において、
ユーザーの重要度受付部３０１を説明するための画面表
示を例示する図である。FIG. 9 shows the third embodiment of the present invention,
It is a figure which illustrates the screen display for demonstrating the importance reception part 301 of a user.
１０１…サンプル画像受付部、 １０２…画像入力部、 １０３…顔検出処理適用部、 １０４…結果表示部、 １０５…結果チェック部、 １０６…顔候補領域の絞込み手段の採否決定部、 １０７…ユーザー向け顔検出処理確定部、 ２０１…サンプル画像受付部、 ２０２…ユーザーによる顔領域教示部、 ２０３…画像入力部、 ２０４…顔検出処理適用部、 ２０５…顔検出結果正誤判定部、 ２０６…顔候補領域の絞込み手段の採否決定部、 ２０７…ユーザー向け顔検出処理確定部、 ３０１…顔特徴に関するユーザーの重要度受付部、 ３０２…顔候補領域の絞込み手段の採否決定部、 ３０３…ユーザー向け顔検出処理確定部、 ３０４…画像入力部、 ３０５…顔検出処理適用部、 ３０６…結果表示部。 101 ... Sample image reception unit, 102 ... image input section, 103 ... Face detection processing application unit, 104 ... Result display section, 105 ... Result check section, 106 ... Adoption decision unit of the means for narrowing down the face candidate area, 107 ... Face detection processing confirmation unit for user, 201 ... a sample image reception unit, 202 ... Face area teaching section by user, 203 ... Image input section, 204 ... Face detection processing application unit, 205 ... Face detection result correctness determination unit, 206 ... Adoption decision unit for narrowing down the face candidate area, 207 ... Face detection processing confirmation unit for users, 301 ... A user importance degree reception section regarding facial features, 302 ... Adoption decision unit of the means for narrowing down the face candidate area, 303 ... Face detection processing confirmation unit for users, 304 ... Image input section, 305 ... Face detection processing application unit, 306 ... Result display section.
Claims (12)
検出する顔画像検出装置であって、 見本となる特徴をもつ人物の顔画像をサンプル画像とし
て受け付けるサンプル画像入力部と、 検索対象となる画像を入力する画像入力部と、 前記サンプル画像入力部から入力されたサンプル画像の
特徴を用いて、前記画像入力部から入力された画像の顔
の近傍領域を検出する処理を適用する顔検出処理適用部
と、 前記顔検出処理適用部により検出された画像の顔の近傍
領域の候補を表示する顔候補領域表示部と、 この顔候補領域表示部に表示された顔の近傍領域の候補
に、表示された画像が顔の画像であるか、顔以外の画像
であるかを入力する検出結果入力部と、 前記顔候補領域表示部に表示された顔の近傍領域の候補
に対し、複数の条件から選択して顔の近傍領域の候補を
絞込む条件を入力する絞込み条件選択部と、 この絞込み条件選択部により選択された絞込み条件のみ
を用いた顔検出処理を行う顔検出処理部と、 を有することを特徴とする顔画像検出装置。1. A face image detection apparatus for detecting a region near a human face from an image to be detected, the sample image input unit receiving a face image of a person having a sample feature as a sample image, and a search target. An image input unit for inputting an image to be an image, and a face to which a process for detecting a neighborhood region of the face of the image input from the image input unit is applied using the features of the sample image input from the sample image input unit A detection processing application unit, a face candidate area display unit that displays candidates for a face neighborhood area of the image detected by the face detection processing application unit, and a face neighborhood area candidate displayed in the face candidate area display unit , A detection result input unit for inputting whether the displayed image is an image of a face or an image other than a face, and a plurality of candidates for a region near the face displayed on the face candidate region display unit, Select from the conditions A narrowing-down condition selecting unit for inputting conditions for narrowing down the candidates for the neighborhood area of the face, and a face detection processing unit for performing face detection processing using only the narrowing-down condition selected by this narrowing-down condition selecting unit. A face image detecting device characterized by:
情報を基に、顔検出結果の正誤を判定する顔検出結果正
誤判定部と、 を有することを特徴とする請求項１に記載の顔画像検出
装置。2. The face detection result input section inputs a face area of a displayed image, and a face detection result based on the presence position information of the face area input by the face area input section. The face image detection apparatus according to claim 1, further comprising: a face detection result correctness determination unit that determines whether the face image is correct.
が、表示された画像のどの部分に該当するかを入力する
顔領域入力部を有することを特徴とする請求項１に記載
の顔画像検出装置。3. The face candidate area display unit has a face area input unit for inputting which part of the displayed image the sample image input from the sample image input unit corresponds to. The face image detecting apparatus according to claim 1.
検出する顔画像検出装置であって、 検出すべき特徴を有する人物の顔画像の特徴を複数の条
件から選択的に入力する選択条件入力部と、 検索対象となる画像を入力する画像入力部と、 前記選択条件入力部から選択的に入力された顔画像の特
徴を用いて、前記画像入力部から入力された画像の顔の
近傍領域を検出する処理を適用する顔検出処理適用部
と、 前記顔検出処理適用部により検出された画像の顔の近傍
領域の候補を表示する顔候補領域表示部と、 前記顔候補領域表示部に表示された顔の近傍領域の候補
に対し、複数の条件から選択して顔の近傍領域の候補を
絞込む条件を入力する絞込み条件選択部と、 この絞込み条件選択部により選択された絞込み条件のみ
を用いた顔検出処理を行う顔検出処理部と、 を有することを特徴とする顔画像検出装置。4. A face image detecting apparatus for detecting a region near a human face from an image to be detected, wherein selection is made by selectively inputting a feature of a human face image having a feature to be detected from a plurality of conditions. A condition input unit, an image input unit for inputting an image to be searched, and a feature of the face image selectively input from the selection condition input unit are used to determine the face of the image input from the image input unit. A face detection processing application unit that applies a process of detecting a near area, a face candidate area display unit that displays candidates for a near area of the face of the image detected by the face detection processing application unit, and the face candidate area display unit The narrowing-down condition selection unit that selects conditions from the plurality of conditions to input the conditions for narrowing down the candidates for the near-face region of the face displayed on the screen, and the narrowing-down condition selected by this narrowing-down condition selecting unit. Face Detection Processing Using Only And a face detection processing unit for performing the following.
検出する顔画像検出方法であって、 見本となる特徴をもつ人物の顔画像をサンプル画像とし
て受け付けるサンプル画像入力ステップと、 検索対象となる画像を入力する画像入力ステップと、 前記サンプル画像入力ステップによって入力されたサン
プル画像の特徴を用いて、前記画像入力ステップによっ
て入力された画像の顔の近傍領域を検出する処理を適用
する顔検出処理適用ステップと、 前記顔検出処理適用ステップによって検出された画像の
顔の近傍領域の候補を表示する顔候補領域表示ステップ
と、 この顔候補領域表示ステップによって表示された顔の近
傍領域の候補に、表示された画像が顔の画像であるか、
顔以外の画像であるかを入力する検出結果入力ステップ
と、 前記顔候補領域表示ステップによって表示された顔の近
傍領域の候補に対し、複数の条件から選択して顔の近傍
領域の候補を絞込む条件を入力する絞込み条件選択ステ
ップと、 この絞込み条件選択ステップにより選択された絞込み条
件のみを用いた顔検出処理を行う顔検出処理ステップ
と、 を有することを特徴とする顔画像検出方法。5. A face image detecting method for detecting a region near a human face from an image to be detected, which comprises a sample image input step of receiving a face image of a person having a sample feature as a sample image, and a search target. An image input step of inputting an image to be an image, and a face to which a process of detecting a neighboring region of the face of the image input by the image input step is applied using the features of the sample image input by the sample image input step A detection process applying step, a face candidate region displaying step for displaying candidates of a face neighborhood region of the image detected by the face detecting process applying step, and a face neighborhood region candidate displayed by the face candidate region displaying step , Whether the displayed image is a face image,
A detection result input step of inputting whether or not the image is other than a face, and with respect to the candidate area of the face vicinity displayed in the face candidate area display step, a plurality of conditions are selected to narrow down the candidate areas of the face vicinity area. A face image detecting method comprising: a narrowing-down condition selecting step of inputting a narrowing-down condition; and a face detecting processing step of performing a face detecting process using only the narrowing-down condition selected by the narrowing-down condition selecting step.
と、 この顔領域入力ステップによって入力された顔領域の存
在位置情報を基に、顔検出結果の正誤を判定する顔検出
結果正誤判定ステップと、 を有することを特徴とする請求項５に記載の顔画像検出
方法。6. The detection result input step includes a face area input step of inputting a face area of a displayed image, and a face detection result based on the presence position information of the face area input by the face area input step. 6. The face image detection method according to claim 5, further comprising a face detection result correctness determination step of determining whether the face image is correct.
プル画像が、表示された画像のどの部分に該当するかを
入力する顔領域入力ステップを有することを特徴とする
請求項５に記載の顔画像検出方法。7. The face candidate area display step includes a face area input step of inputting which part of the displayed image the sample image input by the sample image input step corresponds to. The face image detecting method according to claim 5.
検出する顔画像検出方法であって、 検出すべき特徴を有する人物の顔画像の特徴を複数の条
件から選択的に入力する選択条件入力ステップと、 検索対象となる画像を入力する画像入力ステップと、 前記選択条件入力ステップによって選択的に入力された
顔画像の特徴を用いて、前記画像入力ステップによって
入力された画像の顔の近傍領域を検出する処理を適用す
る顔検出処理適用ステップと、 前記顔検出処理適用ステップにより検出された画像の顔
の近傍領域の候補を表示する顔候補領域表示ステップ
と、 前記顔候補領域表示ステップによって表示された顔の近
傍領域の候補に対し、複数の条件から選択して顔の近傍
領域の候補を絞込む条件を入力する絞込み条件選択ステ
ップと、 この絞込み条件選択ステップにより選択された絞込み条
件のみを用いた顔検出処理を行う顔検出処理ステップ
と、 を有することを特徴とする顔画像検出方法。8. A face image detecting method for detecting a region near a human face from an image to be detected, wherein selection is performed by selectively inputting a feature of a human face image having a feature to be detected from a plurality of conditions. A condition input step, an image input step of inputting an image to be searched, and a face image of the image input by the image input step, using the features of the face image selectively input by the selection condition input step. A face detection processing applying step for applying a processing for detecting a neighboring area; a face candidate area displaying step for displaying candidates for a neighboring area of the face of the image detected by the face detecting processing applying step; and a face candidate area displaying step A narrowing condition selecting step of inputting a condition for narrowing down the candidates for the face near region by selecting from a plurality of conditions for the candidates for the face near region displayed by And a face detection processing step for performing face detection processing using only the narrowing-down condition selected by the narrowing-down condition selecting step.
ら人の顔の近傍領域を検出する顔画像検出するためのプ
ログラムであって、 見本となる特徴をもつ人物の顔画像をサンプル画像とし
て受け付けるサンプル画像入力ステップを前記コンピュ
ータに実行させる第１のプログラム要素と、 検索対象となる画像を入力する画像入力ステップを前記
コンピュータに実行させる第２のプログラム要素と、 前記サンプル画像入力ステップによって入力されたサン
プル画像の特徴を用いて、前記画像入力ステップによっ
て入力された画像の顔の近傍領域を検出する処理を適用
する顔検出処理適用ステップを前記コンピュータに実行
させる第３のプログラム要素と、 前記顔検出処理適用ステップによって検出された画像の
顔の近傍領域の候補を表示する顔候補領域表示ステップ
を前記コンピュータに実行させる第４のプログラム要素
と、 この顔候補領域表示ステップによって表示された顔の近
傍領域の候補に、表示された画像が顔の画像であるか、
顔以外の画像であるかを入力する検出結果入力ステップ
を前記コンピュータに実行させる第５のプログラム要素
と、 前記顔候補領域表示ステップによって表示された顔の近
傍領域の候補に対し、複数の条件から選択して顔の近傍
領域の候補を絞込む条件を入力する絞込み条件選択ステ
ップを前記コンピュータに実行させる第６のプログラム
要素と、 この絞込み条件選択ステップにより選択された絞込み条
件のみを用いた顔検出処理を行う顔検出処理ステップを
前記コンピュータに実行させる第７のプログラム要素
と、 を有することを特徴とする顔画像検出プログラム。9. A program for detecting a face image for detecting a region near a human face from an image to be detected by a computer, the sample image input receiving a face image of a person having a sample feature as a sample image. A first program element for causing the computer to execute a step, a second program element for causing the computer to perform an image input step for inputting an image to be searched, and a sample image input by the sample image input step. A third program element for causing the computer to execute a face detection processing applying step of applying a process of detecting a neighborhood region of a face of the image input by the image input step using a feature; and the face detection processing applying step The candidates of the neighborhood area of the face of the image detected by A fourth program element for executing a candidate region display step to the computer, the candidate of the neighboring region of the face displayed by the face candidate region display step, whether the displayed image is an image of a face,
A fifth program element for causing the computer to execute a detection result input step of inputting whether or not the image is other than a face, and a plurality of conditions for the candidates of the neighborhood area of the face displayed by the face candidate area display step. A sixth program element for causing the computer to execute a narrowing-down condition selecting step of inputting a condition for narrowing down candidates for a face near region, and face detection using only the narrowing-down condition selected by the narrowing-down condition selecting step. A face image detection program, comprising: a seventh program element that causes the computer to execute a face detection processing step for performing processing.
ピュータに実行させる第５のプログラム要素は、 表示された画像の顔領域を入力する顔領域入力ステップ
を前記コンピュータに実行させる第８のプログラム要素
と、 この顔領域入力ステップによって入力された顔領域の存
在位置情報を基に、顔検出結果の正誤を判定する顔検出
結果正誤判定ステップを前記コンピュータに実行させる
第９のプログラム要素と、 を有することを特徴とする請求項９に記載の顔画像検出
プログラム。10. A fifth program element for causing the computer to execute the detection result input step, and an eighth program element for causing the computer to execute a face area input step of inputting a face area of a displayed image, A ninth program element for causing the computer to execute a face detection result correctness / incorrectness determination step for determining correctness / incorrectness of the face detection result based on the presence position information of the face area input in the face area input step. The face image detecting program according to claim 9.
ンピュータに実行させる第４のプログラム要素は、 前記サンプル画像入力ステップによって入力されたサン
プル画像が、表示された画像のどの部分に該当するかを
入力する顔領域入力ステップを前記コンピュータに実行
させる第１０のプログラム要素を有することを特徴とす
る請求項９に記載の顔画像検出プログラム。11. The fourth program element for causing the computer to execute the face candidate area display step inputs which part of the displayed image the sample image input in the sample image input step corresponds to. 10. The face image detecting program according to claim 9, further comprising a tenth program element for causing the computer to execute a face area inputting step.
から人の顔の近傍領域を検出する顔画像検出ためのプロ
グラムであって、 検出すべき特徴を有する人物の顔画像の特徴を複数の条
件から選択的に入力する選択条件入力ステップを前記コ
ンピュータに実行させる第１のプログラム要素と、 検索対象となる画像を入力する画像入力ステップを前記
コンピュータに実行させる第２のプログラム要素と、 前記選択条件入力ステップによって選択的に入力された
顔画像の特徴を用いて、前記画像入力ステップによって
入力された画像の顔の近傍領域を検出する処理を適用す
る顔検出処理適用ステップを前記コンピュータに実行さ
せる第３のプログラム要素と、 前記顔検出処理適用ステップにより検出された画像の顔
の近傍領域の候補を表示する顔候補領域表示ステップを
前記コンピュータに実行させる第４のプログラム要素
と、 前記顔候補領域表示ステップによって表示された顔の近
傍領域の候補に対し、複数の条件から選択して顔の近傍
領域の候補を絞込む条件を入力する絞込み条件選択ステ
ップを前記コンピュータに実行させる第５のプログラム
要素と、 この絞込み条件選択ステップにより選択された絞込み条
件のみを用いた顔検出処理を行う顔検出処理ステップを
前記コンピュータに実行させる第６のプログラム要素
と、 を有することを特徴とする顔画像検出プログラム。12. A program for detecting a face image for detecting a region near a human face from an image to be detected by a computer, wherein a feature of a human face image having a feature to be detected is selectively selected from a plurality of conditions. A first program element that causes the computer to execute a selection condition input step to be input to the computer; a second program element that causes the computer to perform an image input step to input an image to be searched; and the selection condition input step. A third program for causing the computer to execute a face detection process applying step of applying a process of detecting a neighborhood region of a face of the image input by the image input step by using the feature of the selectively input face image The elements and candidates for the neighborhood area of the face of the image detected by the face detection processing applying step are displayed. A fourth program element for causing the computer to execute a candidate area display step, and a candidate for the face vicinity area selected from a plurality of conditions with respect to the candidate for the face vicinity area displayed by the face candidate area display step. A fifth program element for causing the computer to execute a narrowing-down condition selecting step for inputting a narrowing-down condition, and a face detecting processing step for performing face detection processing using only the narrowing-down condition selected by the narrowing-down condition selecting step. And a sixth program element to be executed by a face image detecting program.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002128939A JP2003323615A (en) | 2002-04-30 | 2002-04-30 | Face image detecting device and method and its program |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002128939A JP2003323615A (en) | 2002-04-30 | 2002-04-30 | Face image detecting device and method and its program |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2003323615A true JP2003323615A (en) | 2003-11-14 |
Family
ID=29542530
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002128939A Pending JP2003323615A (en) | 2002-04-30 | 2002-04-30 | Face image detecting device and method and its program |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2003323615A (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7643742B2 (en) | 2005-11-02 | 2010-01-05 | Olympus Corporation | Electronic camera, image processing apparatus, image processing method and image processing computer program |
| US8264327B2 (en) | 2008-06-16 | 2012-09-11 | Canon Kabushiki Kaisha | Authentication apparatus, image sensing apparatus, authentication method and program therefor |
| US8643738B2 (en) | 2007-06-29 | 2014-02-04 | Olympus Corporation | Face detection device, digital camera, and computer readable storage medium which stores a face detection program |
| JP2018159976A (en) * | 2017-03-22 | 2018-10-11 | 株式会社東芝 | Information processing apparatus, method, and program |
-
2002
- 2002-04-30 JP JP2002128939A patent/JP2003323615A/en active Pending
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7643742B2 (en) | 2005-11-02 | 2010-01-05 | Olympus Corporation | Electronic camera, image processing apparatus, image processing method and image processing computer program |
| US7865075B2 (en) | 2005-11-02 | 2011-01-04 | Olympus Corporation | Electronic camera, image processing apparatus, image processing method and image processing computer program |
| US8643738B2 (en) | 2007-06-29 | 2014-02-04 | Olympus Corporation | Face detection device, digital camera, and computer readable storage medium which stores a face detection program |
| US8264327B2 (en) | 2008-06-16 | 2012-09-11 | Canon Kabushiki Kaisha | Authentication apparatus, image sensing apparatus, authentication method and program therefor |
| JP2018159976A (en) * | 2017-03-22 | 2018-10-11 | 株式会社東芝 | Information processing apparatus, method, and program |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP4552632B2 (en) | Portable device | |
| EP2192548A1 (en) | Registration device, registration method, authentication device and authentication method | |
| US8363951B2 (en) | Face recognition training method and apparatus | |
| US8189927B2 (en) | Face categorization and annotation of a mobile phone contact list | |
| JP4720167B2 (en) | Electronic camera and program | |
| JP2002358522A (en) | Device, method and program for supporting image selection | |
| JP5674465B2 (en) | Image processing apparatus, camera, image processing method and program | |
| TWI586160B (en) | Real time object scanning using a mobile phone and cloud-based visual search engine | |
| CN1328309A (en) | Apparatus, system card and method for identify evaluation based on biological testing | |
| JP4229111B2 (en) | Inquiry system | |
| JP7238902B2 (en) | Information processing device, information processing method, and program | |
| JP2014016968A (en) | Person retrieval device and data collection device | |
| KR20070105074A (en) | Method of managing image in a mobile communication terminal | |
| JP2003196017A (en) | Data input method and device | |
| JP2003323615A (en) | Face image detecting device and method and its program | |
| JP2018025966A (en) | Image processing apparatus and image processing method | |
| JP7020567B2 (en) | Information processing systems, information processing equipment, information processing methods, and programs | |
| JP5044664B2 (en) | Human image search device | |
| JP2022058833A (en) | Information processing system, information processing apparatus, information processing method, and program | |
| JP2005352727A (en) | Portrait retrieving device | |
| JP4972013B2 (en) | Information presenting apparatus, information presenting method, information presenting program, and recording medium recording the program | |
| JP7207431B2 (en) | Information processing system, information processing device, information processing method, and program | |
| JP2002251614A (en) | Device, system, method, and program for collating organism | |
| JPWO2020152917A1 (en) | Face recognition devices, face recognition methods, programs, and recording media | |
| JP4895201B2 (en) | Image sorting apparatus, method, and program |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050420 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20080215 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080226 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080428 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20080527 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20080723 |
|
| A911 | Transfer of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20080804 |
|
| A912 | Removal of reconsideration by examiner before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20080822 |