JP6941966B2 - 人物認証装置 - Google Patents
人物認証装置 Download PDFInfo
- Publication number
- JP6941966B2 JP6941966B2 JP2017083059A JP2017083059A JP6941966B2 JP 6941966 B2 JP6941966 B2 JP 6941966B2 JP 2017083059 A JP2017083059 A JP 2017083059A JP 2017083059 A JP2017083059 A JP 2017083059A JP 6941966 B2 JP6941966 B2 JP 6941966B2
- Authority
- JP
- Japan
- Prior art keywords
- face
- person
- additional learning
- authentication
- face image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- Data Mining & Analysis (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Bioinformatics & Computational Biology (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Collating Specific Patterns (AREA)
- Image Analysis (AREA)
Description
人追跡部22は、映像入力部21に入力した映像に対して、ブロックマッチング法や勾配法などによりオプティカルフロー(物体の動きベクトル)を計算し、映像の中に人物領域を算出し、人物ごとに、最新の存在場所を算出しながら追跡を行う。
顔特徴量算出部24は、本人の顔を他人の顔と区別するための属性、例えば、目、鼻、口などの各パーツのサイズや相対位置などのように、人物ごとに異なる属性を顔特徴量として算出する。
追加学習実施部27は、初期学習用顔DB14と追加学習用顔DB15に蓄積された顔データを用いて、顔認証モデルの追加学習を実施する。顔認証モデルの追加学習の結果は顔認証モデルDB13に格納される。
入力受付部29は、キーボードやマウスなどのデバイスであり、ユーザの操作を認識して操作命令に変換する。
出力部30は、顔認証部25の認証結果や追加学習実施部27の学習結果などを、運用者が確認可能な形式に変換して、出力装置19にて表示する。
映像入力装置2から映像が入力すると、映像入力部21は映像の復号化と前処理を行う(ステップS1)。前処理の内容は、例えば、ホワイトバランス調整や明るさ調整などである。フレームごとの画像は人追跡部22に送られる。人追跡部22は、画像中の人物(追跡対象)の追跡を行い、追跡結果を追跡結果保存部33に格納する(ステップS2)。ステップS2の詳細は図8〜10にて後述する。
入力受付部29は運用者から再学習指示を受けると、追加学習実施部27に追加学習要求を送る。追加学習実施部27は、初期学習用顔DB14と追加学習用顔DB15から顔画像を読み出す(ステップS9)。顔特徴量算出部24は、読み出された顔画像に対して顔特徴量の算出を行い(ステップS10)、追加学習実施部27へ返す。追加学習実施部27は、SVM識別器を学習することで複数の個体を識別可能とする顔認証モデル36を追加学習する(ステップS11)。
図8は、人追跡部22による人追跡の処理フロー(ステップS2)を示す図である。
入力画像に対して、画像の中にエッジ部などの追跡しやすい特徴点を抽出する(ステップS101)。抽出した特徴点を用いて、前のフレームの特徴点とのマッチングをとることで各特徴点の動きの軌道を算出する(ステップS102)。追跡中の人物の情報を用いて、特徴点の軌道情報を更新する(ステップS103)。なお、初期状態では追跡中の人物は存在しないため、このステップS103では何も行わない。全ての特徴点の情報及び追跡中の人物の情報を用いて、人領域を更新する(ステップS104)。人領域の情報を用いて、追跡中の人物の追跡結果を更新する(ステップS105)。
図13は、追加学習顔画像選定処理にて用いる追加学習設定情報39のデータ構造を示す図である。追加学習設定情報39は、顔画像選定の条件であるパラメータ名とパラメータ値からなる。パラメータとしては、本人信頼度上限T11、本人信頼度下限T12、顔完全度下限T2、追加済本人顔差異度下限T3、実施待ちフレーム数Fなどを含んでいる。
本人信頼度下限T12は、追加学習の顔データとして選定するための登録済み人物に属する信頼度の下限値である。
追加学習顔保存部26は、顔認証結果保存部35と顔画像保存部34から、一件の認証結果と関連する顔画像データを読み込む(ステップS201)。すなわち、顔認証結果保存部35に保存される追跡対象ID、認証結果詳細、人物IDと、これに関連する顔画像保存部34の顔画像データを準備する。
(1)本人信頼度の閾値として下限T12だけでなく上限T11を設ける、
(2)顔画像完全度の閾値として下限T2を設ける、
(3)本人顔差異度の閾値として下限T3を設ける、
ようにしたので、追加学習時の偏りを防ぐとともに認証判定時の誤検知を防止する効果がある。
図18は、追加学習設定情報39と顔認証成功閾値の関係を示す図である。横軸は画像フレーム数、縦軸は各フレームにおける信頼度(認証結果の確率)を示し、ある追跡対象(人物)に対する信頼度は曲線60のように変化している。顔認証処理において、当該追跡対象に対し認証成功と判定するための信頼度の閾値(顔認証成功閾値)をT0とすると、信頼度が閾値T0を越えている期間P0が認証成功の期間となる。
2:映像入力装置、
4:人物認証管理装置、
5:人物認証装置、
21:映像入力部、
22:人追跡部、
23:顔抽出部、
24:顔特徴量算出部、
25:顔認証部、
26:追加学習顔保存部、
27:追加学習実施部、
36:顔認証モデル、
38:追加学習用顔画像、
39:追加学習設定情報。
Claims (3)
- 人物の顔画像から人物の認証を行う人物認証装置において、
人物を含む映像を入力する映像入力部と、
前記入力した映像から人物の移動軌跡を追跡する人追跡部と、
前記追跡した人物を対象に顔画像を抽出する顔抽出部と、
前記抽出した顔画像から顔特徴量を算出する顔特徴量算出部と、
登録済みの人物の顔認証モデルを用いて、前記算出した顔特徴量から前記追跡した人物を認証する顔認証部と、
前記顔認証部にて認証済みの人物の顔画像から追加学習用顔画像を選定して保存する追加学習顔保存部と、
前記選定した追加学習用顔画像を用いて、前記顔認証モデルの追加学習を実施する追加学習実施部と、を備え、
前記追加学習顔保存部は、前記顔認証部にて認証済みの人物の認証信頼度が上限と下限の2つの閾値T11,T12の間にある顔画像を前記追加学習用顔画像として選定し、
前記顔認証部が人物を認証する際に認証成功と判定するための認証信頼度の閾値を認証成功閾値T 0 としたとき、
前記追加学習顔保存部が前記追加学習用顔画像として選定する際に用いる前記認証信頼度の上限T 11 は前記認証成功閾値T 0 よりも大きく、前記認証信頼度の下限T 12 は前記認証成功閾値T 0 よりも小さいことを特徴とする人物認証装置。 - 請求項1に記載の人物認証装置において、
前記追加学習顔保存部は、前記顔認証モデルとして追加済の顔画像とどれだけ異なるかを示す差異度が所定の閾値T3より大きい顔画像を前記追加学習用顔画像として選定することを特徴とする人物認証装置。 - 請求項1に記載の人物認証装置において、
前記追加学習顔保存部は、さらに、顔画像内に本来備えるべき顔のパーツをどれだけ含んでいるかを示す顔画像完全度が所定の閾値T2より大きい顔画像を前記追加学習用顔画像として選定することを特徴とする人物認証装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017083059A JP6941966B2 (ja) | 2017-04-19 | 2017-04-19 | 人物認証装置 |
CN201810296063.4A CN108734092B (zh) | 2017-04-19 | 2018-03-30 | 人物认证装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017083059A JP6941966B2 (ja) | 2017-04-19 | 2017-04-19 | 人物認証装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2018181157A JP2018181157A (ja) | 2018-11-15 |
JP6941966B2 true JP6941966B2 (ja) | 2021-09-29 |
Family
ID=63941215
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017083059A Active JP6941966B2 (ja) | 2017-04-19 | 2017-04-19 | 人物認証装置 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP6941966B2 (ja) |
CN (1) | CN108734092B (ja) |
Families Citing this family (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7220062B2 (ja) * | 2018-11-29 | 2023-02-09 | 富士通株式会社 | 学習データ生成プログラム、学習データ生成装置、及び学習データ生成方法 |
JP7074723B2 (ja) * | 2019-07-04 | 2022-05-24 | Kddi株式会社 | 学習装置及びプログラム |
JP2021015362A (ja) * | 2019-07-10 | 2021-02-12 | 富士通コネクテッドテクノロジーズ株式会社 | 対話装置、情報処理方法および情報処理プログラム |
JP7255694B2 (ja) * | 2019-08-29 | 2023-04-11 | 日本電気株式会社 | ロバスト性評価装置、ロバスト性評価方法およびプログラム |
KR102301785B1 (ko) * | 2019-12-18 | 2021-09-15 | 주식회사 노타 | 얼굴 연속 인증을 위한 방법 및 장치 |
WO2021125432A1 (ko) * | 2019-12-18 | 2021-06-24 | 주식회사 노타 | 얼굴 연속 인증을 위한 방법 및 장치 |
WO2023047624A1 (ja) * | 2021-09-21 | 2023-03-30 | ソニーセミコンダクタソリューションズ株式会社 | 情報処理装置、情報処理方法および情報処理プログラム |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3425092B2 (ja) * | 1998-11-04 | 2003-07-07 | 株式会社エヌ・ティ・ティ・データ | パターン認識方式 |
JP2008257750A (ja) * | 2001-07-27 | 2008-10-23 | Toshiba Corp | 顔画像認識装置、通行制御装置、顔画像認識方法、及び通行制御方法 |
JP3906197B2 (ja) * | 2003-10-21 | 2007-04-18 | 株式会社東芝 | パターン識別方法及びパターン識別装置及びプログラム |
JP5024067B2 (ja) * | 2007-01-19 | 2012-09-12 | コニカミノルタホールディングス株式会社 | 顔認証システム、方法及びプログラム |
CN101216884B (zh) * | 2007-12-29 | 2012-04-18 | 北京中星微电子有限公司 | 一种人脸认证的方法及系统 |
JP2010146502A (ja) * | 2008-12-22 | 2010-07-01 | Toshiba Corp | 認証処理装置および認証処理方法 |
US20120020518A1 (en) * | 2009-02-24 | 2012-01-26 | Shinya Taguchi | Person tracking device and person tracking program |
JP5507334B2 (ja) * | 2010-05-14 | 2014-05-28 | 本田技研工業株式会社 | 登録装置、登録方法及びコンピュータプログラム |
CN102004905B (zh) * | 2010-11-18 | 2012-11-21 | 无锡中星微电子有限公司 | 人脸认证方法及装置 |
JP6132490B2 (ja) * | 2012-08-20 | 2017-05-24 | キヤノン株式会社 | 認証装置、認証方法、およびプログラム |
JP6482195B2 (ja) * | 2014-07-02 | 2019-03-13 | キヤノン株式会社 | 画像認識装置、画像認識方法及びプログラム |
JP2017033358A (ja) * | 2015-08-03 | 2017-02-09 | 富士ゼロックス株式会社 | 認証装置 |
-
2017
- 2017-04-19 JP JP2017083059A patent/JP6941966B2/ja active Active
-
2018
- 2018-03-30 CN CN201810296063.4A patent/CN108734092B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN108734092B (zh) | 2021-09-17 |
CN108734092A (zh) | 2018-11-02 |
JP2018181157A (ja) | 2018-11-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6941966B2 (ja) | 人物認証装置 | |
JP4725377B2 (ja) | 顔画像登録装置、顔画像登録方法、顔画像登録プログラム、および記録媒体 | |
JP6385419B2 (ja) | 物体検出装置 | |
CN112364827B (zh) | 人脸识别方法、装置、计算机设备和存储介质 | |
CN111914775B (zh) | 活体检测方法、装置、电子设备及存储介质 | |
US20150205995A1 (en) | Personal recognition apparatus that performs personal recognition using face detecting function, personal recognition method, and storage medium | |
US11989975B2 (en) | Iris authentication device, iris authentication method, and recording medium | |
EP3528158A2 (en) | Method and apparatus for selective combined authentication | |
JP5787686B2 (ja) | 顔認識装置、及び顔認識方法 | |
JP5783759B2 (ja) | 認証装置、認証方法、および認証プログラム、並びに記録媒体 | |
CN111553234A (zh) | 融合人脸特征与Re-ID特征排序的行人跟踪方法及装置 | |
CN112560683A (zh) | 一种翻拍图像识别方法、装置、计算机设备及存储介质 | |
JP5648452B2 (ja) | 画像処理プログラムおよび画像処理装置 | |
US20200104577A1 (en) | Information processing apparatus, authentication system, method of controlling same, and medium | |
CN113837006B (zh) | 一种人脸识别方法、装置、存储介质及电子设备 | |
JP5748421B2 (ja) | 認証装置、認証方法、及び認証プログラム、並びに記録媒体 | |
CN114333038B (zh) | 对象识别模型的训练方法和对象识别方法、装置、设备 | |
WO2019163699A1 (ja) | 特徴抽出装置、特徴抽出方法、照合システム、および記憶媒体 | |
CN116030513A (zh) | 面部认证系统、包括面部认证系统的车辆及面部认证方法 | |
KR102301785B1 (ko) | 얼굴 연속 인증을 위한 방법 및 장치 | |
CN111986230A (zh) | 一种视频中目标物的姿态跟踪方法及装置 | |
JP2000137818A (ja) | パターン認識方式 | |
JP4415702B2 (ja) | 画像照合装置、および画像照合処理プログラム、画像照合方法 | |
JP2001331804A (ja) | 画像領域検出装置及び方法 | |
CN114202806A (zh) | 活体检测方法、装置、电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200123 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210201 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210209 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210405 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210817 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210907 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6941966 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |