JP7230939B2 - 情報処理装置、情報処理方法および情報処理プログラム - Google Patents
情報処理装置、情報処理方法および情報処理プログラム Download PDFInfo
- Publication number
- JP7230939B2 JP7230939B2 JP2021014435A JP2021014435A JP7230939B2 JP 7230939 B2 JP7230939 B2 JP 7230939B2 JP 2021014435 A JP2021014435 A JP 2021014435A JP 2021014435 A JP2021014435 A JP 2021014435A JP 7230939 B2 JP7230939 B2 JP 7230939B2
- Authority
- JP
- Japan
- Prior art keywords
- feature point
- face
- facial feature
- information processing
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/171—Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
- G06V10/758—Involving statistics of pixels or of feature values, e.g. histogram matching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/169—Holistic features and representations, i.e. based on the facial image taken as a whole
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Artificial Intelligence (AREA)
- Computing Systems (AREA)
- Databases & Information Systems (AREA)
- Evolutionary Computation (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Collating Specific Patterns (AREA)
- Image Analysis (AREA)
Description
特許文献1には、対象となるユーザの顔の向きを検出し、その顔の向きに応じた顔認識を実行して個人認証を行う個人認証装置が開示されている。
図1は、本発明の第1の実施形態に係る顔認証装置100の構成を示すブロック図である。図1に示すように、顔認証装置100は、検出部110、信頼度算出部120および選択部130を備える。
図2は、本発明の第2の実施形態に係る顔認証装置200の構成を示すブロック図である。図2に示すように、顔認証装置200は、入力部210、選択部230、認証部250および出力部270を備える。
顔特徴点は、顔の器官や骨格などの情報に基づいて定義される。例えば、口角や瞳中心などが、検出対象の顔特徴点として利用される。顔特徴点候補検出部231は、検出対象の顔特徴点のそれぞれについて、異なる複数の顔特徴点検出手法を用いて、複数の顔特徴点候補を検出する。
以上の手順で、顔認証に適した顔画像が選択される。
ここで、
m=(1/3)*(x1+x2+x3)
n=(1/3)*(y1+y2+y3)
である。なお、式(1)および以降の式において、「/」は除算、「*」は乗算、「^」は累乗を、それぞれ示す。
u=(1/5)*(v1+v2+v3+v4+v5)・・・(2)
続いて、信頼度算出部232は、以下の式(3)により、平均分散uの負の指数関数を求めることで、信頼度sを算出する。
s=exp(-u)・・・(3)
信頼度sは、0以上1以下の値をとる。
図8を参照して、認証部250による処理について説明する。
m=(1/3)*(x1+x2+x3)
n=(1/3)*(y1+y2+y3)
を、それぞれ、統合顔特徴点のx座標値およびy座標値として算出する。
f=<t1・t2>/(<t1・t1>×<t2・t2>)^(1/2)・・・(4)
ただし、<t1・t2>はt1とt2の内積を表す。
入出力インタフェース510は、データの入出力を行う。バス511は、各構成要素を接続する。
110 検出部
120 信頼度算出部
130 選択部
200 顔認証装置
210 入力部
230 選択部
231 顔特徴点候補検出部
232 信頼度算出部
233 顔画像選択部
250 認証部
251 統合顔特徴点算出部
252 正規化部
253 照合部
254 テンプレート記憶部
270 出力部
500 コンピュータ装置
501 プロセッサ
502 ROM
503 RAM
504 プログラム
505 記憶装置
506 記録媒体
507 ドライブ装置
508 通信インタフェース
509 ネットワーク
510 入出力インタフェース
511 バス
Claims (10)
- 複数の対象が含まれる画像から、複数の異なる手法を用いて、前記対象毎に、前記複数の異なる手法それぞれに対応した特徴点候補を検出する検出手段と、
前記複数の特徴点候補を統合することにより、統合特徴点を算出する算出手段と、
を備えた情報処理装置。 - 前記算出手段は、前記複数の特徴点候補の座標値の平均値又は加重平均値を用いて、前記統合特徴点を算出する
ことを特徴とする請求項1に記載の情報処理装置。 - 前記検出手段は、複数の画像のそれぞれから、前記複数の特徴点候補を検出し、
前記複数の画像のうち、前記複数の特徴点候補に基づいて認証に用いる画像を選択する選択手段を更に備える
ことを特徴とする請求項1または2に記載の情報処理装置。 - 前記算出手段は、前記複数の特徴点候補に基づいて得られる統計情報から、前記複数の画像の信頼度をそれぞれ算出し、
前記選択手段は、前記信頼度に基づいて、前記複数の画像のうち、対象の認証に用いる画像を選択する
ことを特徴とする請求項3に記載の情報処理装置。 - 前記統合特徴点を用いて、前記画像の補正を行う補正手段をさらに備える
ことを特徴とする請求項1から4のいずれか1項に記載の情報処理装置。 - 前記算出手段は、前記複数の特徴点候補の座標値の平均分散または標準偏差から、前記信頼度を算出する
ことを特徴とする請求項4に記載の情報処理装置。 - 映像データを取得する入力手段をさらに備え、
前記検出手段は、前記映像データを構成する連続した複数のフレームから、前記画像を取得する
ことを特徴とする請求項1から6のいずれか1項に記載の情報処理装置。 - 前記補正手段は、前記統合特徴点を用いて、前記画像を正規化する
ことを特徴とする請求項5に記載の情報処理装置。 - 複数の対象が含まれる画像から、複数の異なる手法を用いて、前記対象毎に、前記複数の異なる手法それぞれに対応した特徴点候補を検出し、
前記複数の特徴点候補を統合することにより、統合特徴点を算出する、
情報処理方法。 - 複数の対象が含まれる画像から、複数の異なる手法を用いて、前記対象毎に、前記複数の異なる手法それぞれに対応した特徴点候補を検出する処理と、
前記複数の特徴点候補を統合することにより、統合特徴点を算出する処理と、
をコンピュータに実行させるための情報処理プログラム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017124335 | 2017-06-26 | ||
JP2017124335 | 2017-06-26 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019526808A Division JP6835223B2 (ja) | 2017-06-26 | 2018-06-18 | 顔認証装置、顔認証方法およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021064424A JP2021064424A (ja) | 2021-04-22 |
JP7230939B2 true JP7230939B2 (ja) | 2023-03-01 |
Family
ID=64741539
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019526808A Active JP6835223B2 (ja) | 2017-06-26 | 2018-06-18 | 顔認証装置、顔認証方法およびプログラム |
JP2021014435A Active JP7230939B2 (ja) | 2017-06-26 | 2021-02-01 | 情報処理装置、情報処理方法および情報処理プログラム |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019526808A Active JP6835223B2 (ja) | 2017-06-26 | 2018-06-18 | 顔認証装置、顔認証方法およびプログラム |
Country Status (3)
Country | Link |
---|---|
US (5) | US11210498B2 (ja) |
JP (2) | JP6835223B2 (ja) |
WO (1) | WO2019003973A1 (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018033137A1 (zh) * | 2016-08-19 | 2018-02-22 | 北京市商汤科技开发有限公司 | 在视频图像中展示业务对象的方法、装置和电子设备 |
CN111353434A (zh) * | 2020-02-28 | 2020-06-30 | 北京市商汤科技开发有限公司 | 信息识别方法及装置、系统、电子设备和存储介质 |
JP6817527B1 (ja) * | 2020-04-06 | 2021-01-20 | 富士通クライアントコンピューティング株式会社 | 情報処理装置、プログラムおよび情報処理システム |
CN111709288B (zh) * | 2020-05-15 | 2022-03-01 | 北京百度网讯科技有限公司 | 人脸关键点检测方法、装置以及电子设备 |
WO2022064565A1 (ja) * | 2020-09-23 | 2022-03-31 | 日本電気株式会社 | 照合装置、照合方法、プログラム |
JPWO2022130616A1 (ja) | 2020-12-18 | 2022-06-23 | ||
US11967138B2 (en) * | 2021-03-03 | 2024-04-23 | Nec Corporation | Processing apparatus, information processing method and recording medium |
CN113705455B (zh) * | 2021-08-30 | 2024-03-19 | 平安银行股份有限公司 | 身份核查方法、装置、电子设备及可读存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008003749A (ja) | 2006-06-21 | 2008-01-10 | Fujifilm Corp | 特徴点検出装置および方法並びにプログラム |
JP2011022994A (ja) | 2009-06-16 | 2011-02-03 | Canon Inc | パターン処理装置及びその方法、プログラム |
JP2014530424A (ja) | 2011-09-27 | 2014-11-17 | インテル・コーポレーション | Adaboost学習アルゴリズムを使用して顔特徴点の位置を検出するための方法、装置、およびコンピュータ可読記録媒体 |
JP2015195460A (ja) | 2014-03-31 | 2015-11-05 | オムロン株式会社 | 障害物判定装置、およびプログラム |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4675492B2 (ja) | 2001-03-22 | 2011-04-20 | 本田技研工業株式会社 | 顔画像を使用した個人認証装置 |
JP4539494B2 (ja) * | 2005-08-23 | 2010-09-08 | コニカミノルタホールディングス株式会社 | 認証装置、認証方法及びプログラム |
TW200710018A (en) | 2005-08-30 | 2007-03-16 | Hitachi Maxell | Microlens array substrate and method of manufacturing microlens array substrate |
CN102150180A (zh) | 2008-10-14 | 2011-08-10 | 松下电器产业株式会社 | 人脸识别装置及人脸识别方法 |
JP5424819B2 (ja) * | 2009-11-04 | 2014-02-26 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
WO2011148596A1 (ja) | 2010-05-26 | 2011-12-01 | 日本電気株式会社 | 顔特徴点位置補正装置、顔特徴点位置補正方法および顔特徴点位置補正プログラム |
JP5560976B2 (ja) | 2010-07-09 | 2014-07-30 | オムロン株式会社 | 情報処理装置および方法、並びにプログラム |
KR101381439B1 (ko) * | 2011-09-15 | 2014-04-04 | 가부시끼가이샤 도시바 | 얼굴 인식 장치 및 얼굴 인식 방법 |
US9858501B2 (en) | 2012-02-16 | 2018-01-02 | Nec Corporation | Reliability acquiring apparatus, reliability acquiring method, and reliability acquiring program |
JP6026119B2 (ja) | 2012-03-19 | 2016-11-16 | 株式会社東芝 | 生体情報処理装置 |
JP6287047B2 (ja) * | 2013-10-22 | 2018-03-07 | 富士通株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
JP6431346B2 (ja) | 2014-11-26 | 2018-11-28 | アルパイン株式会社 | 顔認識装置 |
JP6526527B2 (ja) * | 2015-09-09 | 2019-06-05 | 株式会社東芝 | 識別装置及び認証システム |
WO2017064838A1 (ja) * | 2015-10-14 | 2017-04-20 | パナソニックIpマネジメント株式会社 | 顔検出装置およびこれを備えた顔検出システムならびに顔検出方法 |
-
2018
- 2018-06-18 US US16/623,478 patent/US11210498B2/en active Active
- 2018-06-18 WO PCT/JP2018/023066 patent/WO2019003973A1/ja active Application Filing
- 2018-06-18 JP JP2019526808A patent/JP6835223B2/ja active Active
-
2021
- 2021-02-01 JP JP2021014435A patent/JP7230939B2/ja active Active
- 2021-11-18 US US17/529,479 patent/US11915518B2/en active Active
-
2023
- 2023-07-17 US US18/222,715 patent/US20230360432A1/en active Pending
- 2023-07-18 US US18/223,357 patent/US20230360434A1/en active Pending
- 2023-07-18 US US18/223,450 patent/US20230360435A1/en active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2008003749A (ja) | 2006-06-21 | 2008-01-10 | Fujifilm Corp | 特徴点検出装置および方法並びにプログラム |
JP2011022994A (ja) | 2009-06-16 | 2011-02-03 | Canon Inc | パターン処理装置及びその方法、プログラム |
JP2014530424A (ja) | 2011-09-27 | 2014-11-17 | インテル・コーポレーション | Adaboost学習アルゴリズムを使用して顔特徴点の位置を検出するための方法、装置、およびコンピュータ可読記録媒体 |
JP2015195460A (ja) | 2014-03-31 | 2015-11-05 | オムロン株式会社 | 障害物判定装置、およびプログラム |
Non-Patent Citations (1)
Title |
---|
大森匡彦 外1名,動画像中のベストショット抽出のための顔認識手法について,電子情報通信学会技術研究報告,社団法人電子情報通信学会,2001年11月08日,Vol.101,No.425,pp.27-32 |
Also Published As
Publication number | Publication date |
---|---|
US11915518B2 (en) | 2024-02-27 |
US20230360432A1 (en) | 2023-11-09 |
WO2019003973A1 (ja) | 2019-01-03 |
US20230360434A1 (en) | 2023-11-09 |
JP2021064424A (ja) | 2021-04-22 |
JP6835223B2 (ja) | 2021-02-24 |
US20230360435A1 (en) | 2023-11-09 |
JPWO2019003973A1 (ja) | 2020-03-26 |
US20200184198A1 (en) | 2020-06-11 |
US11210498B2 (en) | 2021-12-28 |
US20220075993A1 (en) | 2022-03-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7230939B2 (ja) | 情報処理装置、情報処理方法および情報処理プログラム | |
Sukno et al. | 3-D facial landmark localization with asymmetry patterns and shape regression from incomplete local features | |
US20180075291A1 (en) | Biometrics authentication based on a normalized image of an object | |
WO2016089529A1 (en) | Technologies for learning body part geometry for use in biometric authentication | |
US10496874B2 (en) | Facial detection device, facial detection system provided with same, and facial detection method | |
JP6822482B2 (ja) | 視線推定装置、視線推定方法及びプログラム記録媒体 | |
US20200364444A1 (en) | Information processing apparatus and method of authentication | |
JPWO2010137157A1 (ja) | 画像処理装置、方法、プログラム | |
JP6784261B2 (ja) | 情報処理装置、画像処理システム、画像処理方法及びプログラム | |
US20160063345A1 (en) | Pattern recognition apparatus, pattern recognition method, and storage medium | |
US11462052B2 (en) | Image processing device, image processing method, and recording medium | |
US20240104769A1 (en) | Information processing apparatus, control method, and non-transitory storage medium | |
CN110826495A (zh) | 基于面部朝向的身体左右肢体一致性跟踪判别方法及系统 | |
WO2020065790A1 (ja) | 推定装置、推定方法、および記憶媒体 | |
US11380132B2 (en) | Face image processing apparatus and face image processing method | |
JP7270304B2 (ja) | ユーザのバイオメトリック特性を有する画像中の物体を識別することにより当該ユーザのidを検証するための方法、及び当該方法を実施するためのモバイル装置 | |
KR20180108361A (ko) | 얼굴 인증 방법 및 장치 | |
JP5688514B2 (ja) | 視線計測システム、方法およびプログラム | |
US20210383098A1 (en) | Feature point extraction device, feature point extraction method, and program storage medium | |
JP7103443B2 (ja) | 情報処理装置、情報処理方法、およびプログラム | |
WO2023152983A1 (ja) | 人物相関判定装置、人物相関判定方法および人物相関判定プログラム | |
WO2020090111A1 (ja) | 動線補正装置、動線補正方法、および記録媒体 | |
Murshed et al. | Deep Learning-Based Approaches for Contactless Fingerprints Segmentation and Extraction | |
KR20210050649A (ko) | 모바일 기기의 페이스 인증 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210201 |
|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20211020 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220114 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220201 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220331 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220816 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20221013 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230117 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230130 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 7230939 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |