JP6722878B2 - 顔認証装置 - Google Patents
顔認証装置 Download PDFInfo
- Publication number
- JP6722878B2 JP6722878B2 JP2015150416A JP2015150416A JP6722878B2 JP 6722878 B2 JP6722878 B2 JP 6722878B2 JP 2015150416 A JP2015150416 A JP 2015150416A JP 2015150416 A JP2015150416 A JP 2015150416A JP 6722878 B2 JP6722878 B2 JP 6722878B2
- Authority
- JP
- Japan
- Prior art keywords
- face
- image
- unit
- feature amount
- image data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/165—Detection; Localisation; Normalisation using facial parts and geometric relationships
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/24—Aligning, centring, orientation detection or correction of the image
- G06V10/243—Aligning, centring, orientation detection or correction of the image by compensating for image skew or non-uniform image deformations
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
- G06V10/751—Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching
- G06V10/7515—Shifting the patterns to accommodate for positional errors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Human Computer Interaction (AREA)
- Geometry (AREA)
- Artificial Intelligence (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Evolutionary Computation (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Collating Specific Patterns (AREA)
- Image Processing (AREA)
- Image Input (AREA)
Description
<顔認証装置の構成>
本発明の実施の形態1に係る顔認証装置100の構成について、図1乃至図3を参照しながら、以下に詳細に説明する。
本発明の実施の形態1に係る顔画像歪み補正処理について、図4乃至図10を参照しながら、以下に詳細に説明する。図5は、画像座標を示している。図6は、カメラ座標を示している。図9は、世界座標を示している。図10は光軸ズレ有無での顔画像を示している。
heightは画像の上下方向の長さ(画像サイズの高さ)
zzは、撮像部101と被写体の顔との距離
heightは画像の上下方向の長さ(画像サイズの高さ)
pixelSizeはイメージセンサの1画素の大きさ
heightは画像の上下方向の長さ(画像サイズの高さ)
pixelSizeはイメージセンサの1画素の大きさ
fixedPointsは、平面H2の角のx、y座標
‘Projective’は、変換方式で射影変換を表す。
Aは、入力画像
本実施の形態によれば、顔の中心位置と撮像部101の位置に基づいて顔の向きを推定し、顔の向きが撮像部101の光軸方向に一致するように、光軸ズレを含む可視光画像データの画像歪を補正すると共に、補正画像データから顔の特徴量を算出して顔認証する。これにより、簡易な構成の装置を用いて簡単な手法で顔認証をすることができるので、コストを増大させることなく顔認証における顔画像の歪みを最小限にして、顔認証の認証率を向上させることができる。
<顔認証装置の構成>
本発明の実施の形態2に係る顔認証装置200の構成について、図11を参照しながら、以下に詳細に説明する。
本発明の実施の形態2に係る顔画像歪み補正処理について、図12乃至図14を参照しながら、以下に詳細に説明する。
本実施の形態によれば、顔の傾きを検出し、顔の傾きを用いて可視光画像データの画像歪を補正することにより、上記実施の形態1の効果に加えて、上記実施の形態1に比べて、顔画像の歪みを更に抑制することができ、顔認証の認証率を更に向上させることができる。
<顔認証装置の構成>
本発明の実施の形態3に係る顔認証装置300の構成について、図15を参照しながら、以下に詳細に説明する。
本発明の実施の形態3に係る顔認証装置300の動作について、図16乃至図19を参照しながら、以下に詳細に説明する。
本実施の形態によれば、顔画像の上下方向の長さが最長である場合に顔画像歪み補正処理を実行することにより、上記実施の形態1の効果に加えて、上記実施の形態1に比べて、顔画像の歪みを更に抑制することができ、顔認証の認証率を更に向上させることができる。
<顔認証装置の構成>
本発明の実施の形態4に係る顔認証装置400の構成について、図20及び図21を参照しながら、以下に詳細に説明する。
本実施の形態によれば、顔画像が表示画面の所定のエリアに収まる可視光画像データに対して顔の向き及び顔の傾きを補正することにより、上記実施の形態2の効果に加えて、上記実施の形態2に比べて、顔画像の歪みを更に抑制することができ、顔認証の認証率を更に向上させることができる。
101 撮像部
102、201 カメラ信号処理部
103、302、401 UI制御部
104 表示部
105、301、402 特徴量算出部
106 顔位置検出部
107、204 画像補正部
109 顔照合部
110 照明部
202 顔傾き検出部
203 IR照明部
Claims (1)
- 被写体である人物の顔画像を用いて顔認証を行う顔認証装置であって、
カメラにより撮像された撮像データから可視光画像データを取得するカメラ信号処理部と、
前記可視光画像データの画像から被写体の顔の部分を切り出し、前記顔の第1の特徴量を算出し、前記被写体の顔向き変化の動作に応じて前記画像の顔の長さかつ/または幅を前記第1の特徴量に基づいて繰り返し算出し、前記顔の長さかつ/または幅が最長となる画像をベストショット画像として取得する特徴量算出部と、
前記ベストショット画像に対応する前記第1の特徴量に基づいて、前記顔の中心位置を検出する顔位置検出部と、
前記顔の中心位置と前記カメラの位置に基づいて前記顔の向きを推定し、前記顔の向きが前記カメラの光軸方向に一致するように、光軸ズレを含む前記ベストショット画像の画像歪を補正して補正画像データを取得する画像補正部と、
前記特徴量算出部が前記補正画像データから算出した前記顔の第2の特徴量と、予め登録された顔画像の第3の特徴量とを照合することにより顔認証を行い、顔認証の結果を出力する顔照合部と、
前記可視光画像データの画像、および、前記ベストショット画像が取得されたか否かの情報を表示部に表示させる表示制御処理を実行するUI制御部と、を具備する、
顔認証装置。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015150416A JP6722878B2 (ja) | 2015-07-30 | 2015-07-30 | 顔認証装置 |
US15/744,472 US20180211098A1 (en) | 2015-07-30 | 2016-07-05 | Facial authentication device |
PCT/JP2016/003204 WO2017017906A1 (ja) | 2015-07-30 | 2016-07-05 | 顔認証装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015150416A JP6722878B2 (ja) | 2015-07-30 | 2015-07-30 | 顔認証装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017033132A JP2017033132A (ja) | 2017-02-09 |
JP6722878B2 true JP6722878B2 (ja) | 2020-07-15 |
Family
ID=57884170
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015150416A Active JP6722878B2 (ja) | 2015-07-30 | 2015-07-30 | 顔認証装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20180211098A1 (ja) |
JP (1) | JP6722878B2 (ja) |
WO (1) | WO2017017906A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10212778B1 (en) * | 2012-08-17 | 2019-02-19 | Kuna Systems Corporation | Face recognition systems with external stimulus |
US10555393B1 (en) * | 2012-08-17 | 2020-02-04 | Kuna Systems Corporation | Face recognition systems with external stimulus |
CN107992728B (zh) * | 2016-10-27 | 2022-05-20 | 腾讯科技(深圳)有限公司 | 人脸验证方法及装置 |
CN109191412B (zh) * | 2018-08-17 | 2019-12-20 | 河南工程学院 | 基于核稀疏典型相关分析热红外人脸图像可见光重建方法 |
JP7390634B2 (ja) * | 2019-04-19 | 2023-12-04 | パナソニックIpマネジメント株式会社 | ロビーインターホン、インターホンシステム、画像情報出力方法及びプログラム |
KR102345825B1 (ko) * | 2019-07-04 | 2022-01-03 | (주)드림시큐리티 | 안면 인식을 사용하여 인증을 수행하는 방법, 장치 및 시스템 |
JP7318793B2 (ja) | 2020-02-21 | 2023-08-01 | 日本電気株式会社 | 生体認証装置、生体認証方法、及び、そのプログラム |
EP4002303A1 (en) * | 2020-11-09 | 2022-05-25 | Tata Consultancy Services Limited | Real time region of interest (roi) detection in thermal face images based on heuristic approach |
Family Cites Families (29)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6772057B2 (en) * | 1995-06-07 | 2004-08-03 | Automotive Technologies International, Inc. | Vehicular monitoring systems using image processing |
US7203346B2 (en) * | 2002-04-27 | 2007-04-10 | Samsung Electronics Co., Ltd. | Face recognition method and apparatus using component-based face descriptor |
JP2004038531A (ja) * | 2002-07-03 | 2004-02-05 | Matsushita Electric Ind Co Ltd | 物体の位置検出方法および物体の位置検出装置 |
US7643671B2 (en) * | 2003-03-24 | 2010-01-05 | Animetrics Inc. | Facial recognition system and method |
JP2007148872A (ja) * | 2005-11-29 | 2007-06-14 | Mitsubishi Electric Corp | 画像認証装置 |
JP4427515B2 (ja) * | 2006-01-27 | 2010-03-10 | 富士フイルム株式会社 | 対象画像検出表示制御装置およびその制御方法 |
JP2008009849A (ja) * | 2006-06-30 | 2008-01-17 | Matsushita Electric Ind Co Ltd | 人物追跡装置 |
JPWO2008012905A1 (ja) * | 2006-07-27 | 2009-12-17 | パナソニック株式会社 | 認証装置および認証用画像表示方法 |
US8174555B2 (en) * | 2007-05-30 | 2012-05-08 | Eastman Kodak Company | Portable video communication system |
JP4994311B2 (ja) * | 2007-06-18 | 2012-08-08 | 富士フイルム株式会社 | 顔検出方法、顔検出装置及びデジタルカメラ |
JP2009205283A (ja) * | 2008-02-26 | 2009-09-10 | Olympus Corp | 画像処理装置、画像処理方法及び画像処理プログラム |
JP5390943B2 (ja) * | 2008-07-16 | 2014-01-15 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
JP2010056720A (ja) * | 2008-08-27 | 2010-03-11 | Panasonic Corp | ネットワークカメラおよびネットワークカメラシステム |
US20100135580A1 (en) * | 2008-11-28 | 2010-06-03 | Inventec Appliances Corp. | Method for adjusting video frame |
JP2010140425A (ja) * | 2008-12-15 | 2010-06-24 | Hitachi Kokusai Electric Inc | 画像処理システム |
JP5272819B2 (ja) * | 2009-03-13 | 2013-08-28 | オムロン株式会社 | 情報処理装置及び方法、並びにプログラム |
US8194938B2 (en) * | 2009-06-02 | 2012-06-05 | George Mason Intellectual Properties, Inc. | Face authentication using recognition-by-parts, boosting, and transduction |
WO2011043060A1 (ja) * | 2009-10-07 | 2011-04-14 | パナソニック株式会社 | 追尾対象選択装置、方法、プログラム及び回路 |
JP5396298B2 (ja) * | 2010-02-04 | 2014-01-22 | 本田技研工業株式会社 | 顔向き検知装置 |
JP5642410B2 (ja) * | 2010-03-30 | 2014-12-17 | パナソニック株式会社 | 顔認識装置及び顔認識方法 |
KR20120057783A (ko) * | 2010-11-29 | 2012-06-07 | 삼성메디슨 주식회사 | 사용자의 자세에 따라 최적의 초음파 영상을 제공하는 초음파 시스템 |
JP5291735B2 (ja) * | 2011-02-24 | 2013-09-18 | ソネットエンタテインメント株式会社 | 似顔絵作成装置、配置情報生成装置、配置情報生成方法、及びプログラム |
US20130069980A1 (en) * | 2011-09-15 | 2013-03-21 | Beau R. Hartshorne | Dynamically Cropping Images |
JP2013134570A (ja) * | 2011-12-26 | 2013-07-08 | Canon Inc | 撮像装置及びその制御方法、並びにプログラム |
JP5958079B2 (ja) * | 2012-05-22 | 2016-07-27 | 株式会社Jvcケンウッド | 投射装置、画像補正方法およびプログラム |
TW201445454A (zh) * | 2013-05-22 | 2014-12-01 | Asustek Comp Inc | 提升人臉辨識率的影像處理系統及影像處理方法 |
US20160148381A1 (en) * | 2013-07-03 | 2016-05-26 | Panasonic Intellectual Property Management Co., Ltd. | Object recognition device and object recognition method |
WO2017064838A1 (ja) * | 2015-10-14 | 2017-04-20 | パナソニックIpマネジメント株式会社 | 顔検出装置およびこれを備えた顔検出システムならびに顔検出方法 |
US10440307B2 (en) * | 2015-12-22 | 2019-10-08 | Casio Computer Co., Ltd. | Image processing device, image processing method and medium |
-
2015
- 2015-07-30 JP JP2015150416A patent/JP6722878B2/ja active Active
-
2016
- 2016-07-05 US US15/744,472 patent/US20180211098A1/en not_active Abandoned
- 2016-07-05 WO PCT/JP2016/003204 patent/WO2017017906A1/ja active Application Filing
Also Published As
Publication number | Publication date |
---|---|
JP2017033132A (ja) | 2017-02-09 |
US20180211098A1 (en) | 2018-07-26 |
WO2017017906A1 (ja) | 2017-02-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6722878B2 (ja) | 顔認証装置 | |
JP4649319B2 (ja) | 視線検出装置、視線検出方法、および視線検出プログラム | |
JP6394005B2 (ja) | 投影画像補正装置、投影する原画像を補正する方法およびプログラム | |
JP3064928B2 (ja) | 被写体抽出方式 | |
WO2010035472A1 (ja) | 視線方向判定装置及び視線方向判定方法 | |
JP6840697B2 (ja) | 視線方向推定装置、視線方向推定方法、及び視線方向推定プログラム | |
JP2010086336A (ja) | 画像制御装置、画像制御プログラムおよび画像制御方法 | |
WO2016131217A1 (zh) | 一种图像校正的方法和装置 | |
US10671173B2 (en) | Gesture position correctiing method and augmented reality display device | |
WO2019150807A1 (ja) | 認証装置 | |
JP2015106252A (ja) | 顔向き検出装置及び3次元計測装置 | |
JP2017194301A (ja) | 顔形状測定装置及び方法 | |
JP2018163481A (ja) | 顔認識装置 | |
WO2018154634A1 (ja) | 投写型表示装置、投写型表示装置の制御方法、及びプログラム | |
KR101674099B1 (ko) | 얼굴 인증을 위한 영상 생성 장치 및 그 방법 | |
JP6552266B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP2009064395A (ja) | ポインティングデバイス、操作者の注視位置とカーソルの位置との誤差の補正をコンピュータに実行させるためのプログラムおよびそのプログラムを記録したコンピュータ読み取り可能な記録媒体 | |
JP6406044B2 (ja) | カメラ校正ユニット、カメラ校正方法、およびカメラ校正プログラム | |
KR102341839B1 (ko) | 증강현실을 위한 데이터 수집 장치 | |
TWI545936B (zh) | 電子裝置及其校正方法 | |
KR100808536B1 (ko) | 패턴 영상을 이용한 캘리브레이션 방법 | |
CN115244360A (zh) | 计算方法 | |
JP5004099B2 (ja) | カーソル移動制御方法及びカーソル移動制御装置 | |
JP2019144154A (ja) | 三次元計測装置 | |
JP2009205570A (ja) | 生体認証システム、生体認証方法及び生体認証プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180214 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190423 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190619 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20190625 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20191018 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20191119 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200117 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200519 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200605 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6722878 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |