JP3861421B2 - 個人識別装置 - Google Patents

個人識別装置 Download PDF

Info

Publication number
JP3861421B2
JP3861421B2 JP34445197A JP34445197A JP3861421B2 JP 3861421 B2 JP3861421 B2 JP 3861421B2 JP 34445197 A JP34445197 A JP 34445197A JP 34445197 A JP34445197 A JP 34445197A JP 3861421 B2 JP3861421 B2 JP 3861421B2
Authority
JP
Japan
Prior art keywords
unit
face image
feature point
image
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Lifetime
Application number
JP34445197A
Other languages
English (en)
Other versions
JPH11161791A (ja
Inventor
太郎 渡辺
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Victor Company of Japan Ltd
Original Assignee
Victor Company of Japan Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Victor Company of Japan Ltd filed Critical Victor Company of Japan Ltd
Priority to JP34445197A priority Critical patent/JP3861421B2/ja
Publication of JPH11161791A publication Critical patent/JPH11161791A/ja
Application granted granted Critical
Publication of JP3861421B2 publication Critical patent/JP3861421B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Landscapes

  • Collating Specific Patterns (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、顔の画像により個人の識別を行う個人識別装置に関する。
【0002】
【従来の技術】
従来の顔画像による個人識別として、例えば、特開平5−46743号公報に記載のものがあった。図4はこの個人識別装置の概略構成を示すブロック図である。同図において、顔画像を入力するための画像入力部1は、例えば、テレビカメラであり、識別対象者のカラー顔画像を取り込んで特徴点抽出部2に与える。特徴点抽出部2は入力された画像をA/D変換してデジタル画像に変換した後、回転、拡大、縮小等の補正を行った後、輝度情報、色相情報などを基に輪郭抽出、2値化処理等を行うことにより眉、目、鼻、口などの各特徴点の位置情報を抽出する。この特徴点の位置情報は表情変化の影響を受けない点の一つである鼻の頂点を原点として二次元座標に変換される。
【0003】
一方、個人データベース部3には識別対象者の無表情顔画像の特徴点が記録されている。そこで、差分検出部4が特徴点抽出部2によって抽出された特徴点の各座標値と個人データベース部に記録されている顔画像の特徴点の各座標値との差分を検出し差分ベクトルを求める。また、表情筋データベース5には表情筋の動きベクトルが格納されている。そして、処理部6が差分検出部4の差分情報と、個人データベース部3、表情筋データベース部5の情報とに基づき本人かどうかの検出を行う構成になっている。
【0004】
【発明が解決しようとする課題】
上述した従来の個人識別装置にあっては、顔の幾何学的特徴量のみに基づいて顔の識別を行っていた。この識別に際して、表情の変化による特徴点位置の変位に対する補正を行っているが、顔の向きの変化などによる特徴点位置の変化に対する補正は行っておらず、顔の向きの変化に対して個人認識率が低下するという問題があった。
【0005】
本発明は上記の問題点を解決するためになされたもので、本発明は顔の表情や向きが変化したとしても高精度にて個人認識が可能な個人識別装置を提供することを目的とする。
【0006】
【課題を解決するための手段】
上記目的を達成するために、本発明では入力された顔画像に所定の変形処理を施すようにして高い個人認識率を得るようにしている。すなわち本発明によれば、識別すべき人物の顔画像を入力するための画像入力部と、
前記画像入力部により入力された顔画像の特徴点を抽出する特徴点抽出部と、
標準的な顔画像の特徴点を記録させた第1のデータベース部と、
特徴点が前記標準的な顔画像の特徴点と一致するように変形させられた基準顔画像を人物毎に記録させた第2のデータベース部と、
前記特徴点抽出部で抽出された特徴点が前記第1のデータベース部の標準的な顔画像の特徴点と一致するように、前記画像入力部によって入力された顔画像を変形させる顔正規化部と、
前記顔正規化部によって正規化された顔画像と前記第2のデータベース部に記録された人物毎の顔画像との相関を逐次求める画像相関演算部と、
人物毎の顔画像の特徴点と前記標準的な顔画像の特徴点との変位量を記憶させた第3のデータベース部と、
前記第1のデータベース部に記録させた標準的な顔画像の特徴点と前記特徴点抽出部で抽出された顔画像の特徴点との変位量を求める変位量演算部と、
前記第3のデータベース部の変位量と前記変位量演算部で求めた人物毎の変位量との相関を逐次求める変位量相関演算部と、
前記画像相関演算部で求められた第1の相関値と前記変位量相関演算部で求められた第2の相関値とにそれぞれ重み係数を乗算し、得られた値の両方が所定の閾値を超えた場合に、前記画像入力部により入力された顔画像が、前記第2データベース部に前記基準顔画像が記録され、かつ、前記第3のデータベース部に前記変位量が記録された人物の顔画像であると判定する判断部とを、
する個人識別装置が提供される。
【0011】
【発明の実施の形態】
以下、本発明を好適な実施形態に基づいて詳細に説明する。
図1は本発明の一実施形態の構成を示すブロック図である。同図において、画像入力部11としては、例えば、テレビカメラを用いることができる。画像入力部11は識別対象者の顔画像を取り込んで一次顔正規化部12に与える。一次顔正規化部12は、眼と口の位置があらかじめ指定した位置にくるように正規化し、その顔画像を特徴点抽出部13と二次顔正規化部15とに与える。このうち、特徴点抽出部13は顔の特徴点の位置情報を抽出して二次顔正規化部15に与える。
【0012】
一方、標準顔画像特徴点データベース部14は人間の標準的な顔の特徴点座標を記録させたものであり、基準顔画像データベース部16には標準的な顔画像の特徴点と一致するように変形させられた人物毎の基準顔画像が記録されている。二次顔正規化部15は特徴点抽出部13で検出された特徴点が、標準顔画像特徴点データベース部14に記録された対応する特徴点位置にくるように顔画像を変形させるものである。画像相関演算部17は、基準顔画像データベース部16の基準顔画像と二次顔正規化部15で変形された顔画像との相関を求めるものである。
【0013】
また、特徴点変位量データベース部22には標準顔画像特徴点データベース部14に記録された標準顔画像の特徴点に対する人物毎の顔画像の特徴点の変位量が記録されている。変位量演算部21は、特徴点抽出部13で抽出された位置情報と標準顔画像特徴点データベース部14に記録された特徴点座標との変位量を演算するものである。変位量相関演算部23は特徴点変位量データベース部22に記録された個人の顔画像の特徴点の変位量と変位量演算部で演算された特徴点の変位量との相関を求めるものである。判断部18は画像相関演算部17と変位量相関演算部23でそれぞれ演算された相関値に基づき、画像入力部11から画像が入力された顔の人物を特定するものである。
【0014】
上記のように構成された本実施形態の動作について、図2及び図3をも参照して以下に説明する。
画像入力部11で取り込んで得られた顔画像F10が一次顔正規化部12に入力される。この場合、顔画像F10は図2(a)に示したように傾斜したり、その輪郭が狭くなったりしていることが多い。そこで、一次顔正規化部12は図2(b)に示したように両眼と口の位置があらかじめ指定した位置にくるようにアフィン変換を実行し、眼と口を基準として傾斜分と大きさを補正した顔画像F20を出力する。特徴点抽出部13は顔画像F20に基づいて、図3に示すような特徴点、例えば、顎の下端a、唇の上下b,c、左右端d,e、口の横方向に延長した頬の端f,g、鼻孔の位置h,i、鼻孔の横方向に延長した頬の端j,kなどを含む多数の特徴点の座標を求め、その座標データD10を出力する。
【0015】
二次顔正規化部15は特徴点抽出部13で求めた各特徴点が標準顔画像特徴点データベース部14に記録されている特徴点位置にくるようにモルフィング(MORPHING)により画像を変形させ、顔画像F30を出力する。画像相関演算部17は二次顔正規化部15で求められた顔画像F30と基準顔画像データベース部16に記憶させてある各個人の顔画像との相関R10を求める。また、変位量演算部21は特徴点抽出部13で求めた各特徴点の座標データD10と標準顔画像特徴点データベース部14に記憶されている標準顔画像の対応する各特徴点座標との変位量E10を求める。そこで、変位量相関演算部23は変位量演算で求められた変位量E10と特徴点変位量データベース部22に記録されている各個人の変位量との相関R20を求める。
【0016】
最後に、判断部18は画像相関演算部17で求められた相関R10と、変位量相関演算部23で求められた相関R20に対して、それぞれ適当な重み係数を乗算した値から最も相関の高いものを選択する。そして、相関R10に重み係数を乗算した値と、相関R20に重み係数を乗算した値のうち、少なくとも相関R10に重み係数を乗算した値があらかじめ定めた閾値を超えたとき、顔画像が入力された人物が基準顔画像データベース部16及び特徴点変位量データベース部22に登録した人物であると判定するとともに、その人物を特定する。
【0017】
したがって、この実施形態によれば、特徴点が標準的な顔画像の特徴点と一致するように変形させられた基準顔画像と、新たに入力された顔画像を標準的な顔画像の特徴点と一致するように変形させられた顔画像との相関を演算するので、顔の表情や向きが変化したとしても高精度にて個人認識することが可能になる。この場合、相関R10に重み係数を乗算した値が閾値を超え、かつ、相関R20に重み係数を乗算した値が閾値を超えたことを条件にすることにより、認識精度をより一層高めることができる。
【0018】
なお、上記実施形態では一次顔正規化部12によって両眼と口の位置があらかじめ指定した位置にくるようにアフィン変換を実行し、眼と口の合計3点を基準として傾斜分と大きさを補正したが、画像入力部11に対する識別すべき人物の顔画像の傾斜や大きさが無視できる程度であれば、一次顔正規化部12を除去することによって簡易構成の個人識別装置が得られる。
【0019】
また、識別精度が若干低下しても支障の無い場合には、相関R10に重み係数を乗算した値と相関R20に重み係数を乗算した値のいずれか一方が閾値を超えたことを条件として個人識別を行うようにすることもできる。
【0020】
【発明の効果】
以上の説明によって明らかなように、発明によれば、特徴点が標準的な顔画像の特徴点と一致するように変形させられた基準顔画像と、新たに入力された顔画像を標準的な顔画像の特徴点と一致するように変形させられた顔画像との相関値に基づいて個人識別を行うので、顔の表情や向きが変化したとしても高精度にて個人認識をすることが可能になる。
【0022】
また、本発明によれば、顔画像の相関と併せて、特徴点に対する変位量の相関をも条件とするので、認識精度を一層高めることができる。
【0023】
また、本発明によれば、顔画像の相関値及び特徴点の変位量の相関値にそれぞれ適当な重み係数を乗じて個人識別を行うので、得られた値の両方が所定の閾値を超えるか否かにより個人識別を行うので、認識精度をさらに高める効果もある。
【図面の簡単な説明】
【図1】本発明の一実施形態の構成を示すブロック図である。
【図2】図1に示した実施形態の動作のうち、特に、アフィン変換を説明するための説明図である。
【図3】図1に示した実施形態の動作を説明するために、あらかじめ設定する特徴点位置を示した図である。
【図4】従来の個人識別装置の構成を示すブロック図である。
【符号の説明】
11 画像入力部
12 一次顔正規化部
13 特徴点抽出部
14 標準顔画像特徴点データベース部(第1のデータベース部)
15 二次顔正規化部
16 基準顔画像データベース部(第2のデータベース部)
17 画像相関演算部
18 判断部
21 変位量演算部
22 特徴点変位量データベース部(第3のデータベース部)
23 変位量相関演算部

Claims (1)

  1. 識別すべき人物の顔画像を入力するための画像入力部と、
    前記画像入力部により入力された顔画像の特徴点を抽出する特徴点抽出部と、
    標準的な顔画像の特徴点を記録させた第1のデータベース部と、
    特徴点が前記標準的な顔画像の特徴点と一致するように変形させられた基準顔画像を人物毎に記録させた第2のデータベース部と、
    前記特徴点抽出部で抽出された特徴点が前記第1のデータベース部の標準的な顔画像の特徴点と一致するように、前記画像入力部によって入力された顔画像を変形させる顔正規化部と、
    前記顔正規化部によって正規化された顔画像と前記第2のデータベース部に記録された人物毎の顔画像との相関を逐次求める画像相関演算部と、
    人物毎の顔画像の特徴点と前記標準的な顔画像の特徴点との変位量を記憶させた第3のデータベース部と、
    前記第1のデータベース部に記録させた標準的な顔画像の特徴点と前記特徴点抽出部で抽出された顔画像の特徴点との変位量を求める変位量演算部と、
    前記第3のデータベース部の変位量と前記変位量演算部で求めた人物毎の変位量との相関を逐次求める変位量相関演算部と、
    前記画像相関演算部で求められた第1の相関値と前記変位量相関演算部で求められた第2の相関値とにそれぞれ重み係数を乗算し、得られた値の両方が所定の閾値を超えた場合に、前記画像入力部により入力された顔画像が、前記第2データベース部に前記基準顔画像が記録され、かつ、前記第3のデータベース部に前記変位量が記録された人物の顔画像であると判定する判断部とを、
    する個人識別装置。
JP34445197A 1997-11-28 1997-11-28 個人識別装置 Expired - Lifetime JP3861421B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP34445197A JP3861421B2 (ja) 1997-11-28 1997-11-28 個人識別装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP34445197A JP3861421B2 (ja) 1997-11-28 1997-11-28 個人識別装置

Publications (2)

Publication Number Publication Date
JPH11161791A JPH11161791A (ja) 1999-06-18
JP3861421B2 true JP3861421B2 (ja) 2006-12-20

Family

ID=18369373

Family Applications (1)

Application Number Title Priority Date Filing Date
JP34445197A Expired - Lifetime JP3861421B2 (ja) 1997-11-28 1997-11-28 個人識別装置

Country Status (1)

Country Link
JP (1) JP3861421B2 (ja)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20010044393A (ko) * 2001-02-16 2001-06-05 김영익 인간의 얼굴정보를 이용한 출입통제 및 보안 방법
JP4553526B2 (ja) * 2001-08-15 2010-09-29 セコム株式会社 個人照合装置
JP5008269B2 (ja) 2005-04-08 2012-08-22 キヤノン株式会社 情報処理装置、情報処理方法
KR20060129821A (ko) * 2005-06-13 2006-12-18 삼성전자주식회사 조명 정규화장치 및 방법과 이를 이용한 얼굴인식장치 및방법
JP2008191816A (ja) 2007-02-02 2008-08-21 Sony Corp 画像処理装置、および画像処理方法、並びにコンピュータ・プログラム
US8174555B2 (en) * 2007-05-30 2012-05-08 Eastman Kodak Company Portable video communication system
JP5213778B2 (ja) * 2009-03-26 2013-06-19 Kddi株式会社 顔認識装置及び顔器官の特徴点特定方法
WO2011065130A1 (ja) * 2009-11-25 2011-06-03 日本電気株式会社 顔画像を照合する装置および方法
JP2012003539A (ja) * 2010-06-17 2012-01-05 Sanyo Electric Co Ltd 画像処理装置
JP5778522B2 (ja) * 2011-08-23 2015-09-16 国立大学法人名古屋大学 画像処理装置、および画像処理プログラム
JP5912570B2 (ja) * 2012-01-24 2016-04-27 潔也 福江 筆跡鑑定方法,筆跡鑑定装置及び筆跡鑑定プログラム
JP6248178B2 (ja) * 2014-02-26 2017-12-13 株式会社日立製作所 顔認証システム
CN104063842A (zh) * 2014-05-30 2014-09-24 小米科技有限责任公司 处理图像的方法、装置及终端

Also Published As

Publication number Publication date
JPH11161791A (ja) 1999-06-18

Similar Documents

Publication Publication Date Title
JP4946730B2 (ja) 顔画像処理装置及び顔画像処理方法、並びにコンピュータ・プログラム
JP3861421B2 (ja) 個人識別装置
Lu et al. Automatic feature extraction for multiview 3D face recognition
US6404900B1 (en) Method for robust human face tracking in presence of multiple persons
KR101901591B1 (ko) 얼굴 인식 장치 및 그 제어방법
US7734062B2 (en) Action recognition apparatus and apparatus for recognizing attitude of object
WO1994023390A1 (en) Apparatus for identifying person
US20060147093A1 (en) ID card generating apparatus, ID card, facial recognition terminal apparatus, facial recognition apparatus and system
US8315441B2 (en) Masquerade detection system, masquerade detection method and masquerade detection program
JP4860289B2 (ja) ロボット装置
JP2004265267A (ja) 顔認証方法、および顔認証装置。
CN106682591B (zh) 人脸识别方法及装置
JPH08287216A (ja) 顔面内部位認識方法
JP3823760B2 (ja) ロボット装置
KR101399785B1 (ko) 얼굴 검출 및 인식을 위한 얼굴 영상 획득 방법 및 장치
JPH07302327A (ja) 物体画像検出方法及び検出装置
CN111652018B (zh) 一种人脸注册方法和认证方法
JP3970573B2 (ja) 顔画像認識装置および方法
JP3577908B2 (ja) 顔画像認識システム
Horprasert et al. An anthropometric shape model for estimating head orientation,”
JP4063556B2 (ja) 顔画像認識装置および方法
US20230004632A1 (en) Face authentication system
KR100951315B1 (ko) Aam을 이용한 얼굴검출 방법 및 장치
JP4219151B2 (ja) 画像照合装置、画像照合方法および画像照合プログラム
JP2021043914A (ja) 画像処理装置、画像処理方法、及び画像処理プログラム

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20051212

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20051216

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060209

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060602

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060731

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20060905

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20060918

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101006

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111006

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111006

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121006

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121006

Year of fee payment: 6

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121006

Year of fee payment: 6

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131006

Year of fee payment: 7

EXPY Cancellation because of completion of term