JP2022106869A - 生体認証装置、生体認証方法および生体認証プログラム - Google Patents

生体認証装置、生体認証方法および生体認証プログラム Download PDF

Info

Publication number
JP2022106869A
JP2022106869A JP2022073945A JP2022073945A JP2022106869A JP 2022106869 A JP2022106869 A JP 2022106869A JP 2022073945 A JP2022073945 A JP 2022073945A JP 2022073945 A JP2022073945 A JP 2022073945A JP 2022106869 A JP2022106869 A JP 2022106869A
Authority
JP
Japan
Prior art keywords
face image
biometric authentication
display device
subject
display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2022073945A
Other languages
English (en)
Other versions
JP7452571B2 (ja
Inventor
郁子 坂井
Ikuko Sakai
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of JP2022106869A publication Critical patent/JP2022106869A/ja
Application granted granted Critical
Publication of JP7452571B2 publication Critical patent/JP7452571B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
    • H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/40—Spoof detection, e.g. liveness detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/50—Maintenance of biometric data or enrolment thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/32—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
    • H04L9/3226—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using a predetermined code, e.g. password, passphrase or PIN
    • H04L9/3231—Biological data, e.g. fingerprint, voice or retina
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/60—Context-dependent security
    • H04W12/68—Gesture-dependent or behaviour-dependent

Abstract

【課題】処理負荷がより低い方法で生体認証の信頼度を向上することを可能にする生体認証装置、方法及びプログラムを提供する。【解決手段】生体認証装置１０は、移動するシンボルの表示情報を表示情報出力部１１へ出力し、表示情報出力部１１にタッチ入力が行われた場合に、タッチ位置を示すタッチ位置情報を受信し、シンボルを表示している間の撮像タイミングで顔画像取得部１３に被写体の顔画像を取得し、顔画像から、被写体の視線の先にある表示情報出力部１１上の位置である視線位置を検出し、視線位置と前記撮像タイミングにおけるシンボルの表示位置との関係及びタッチ位置情報が示すタッチ位置と表示位置との関係とに基づいて、顔画像の被写体が生体であると判定し、顔画像に基づいて生体認証を行い、被写体が生体であると判定したか或いは生体認証が成功した場合に、認証成功を示す認証結果を出力する。【選択図】図１

Description

本発明は、生体認証を行う、生体認証装置等に関する。
顔認証をはじめとする生体認証を行う際、なりすまし等の不正利用を防止するために、生体認証装置では、入力された情報が本当に生体情報であるかどうかを判定する必要がある。
生体判定方法には、たとえば、まばたき検知、指示した順番に顔を傾かせる（特許文献１）、表情を変えさせる、などの方法がある。しかし、これらの方法では、まばたきをしているユーザの動画を準備する、指示されるパターンに基づいた向きの顔や表情の写真を複数枚準備するなどにより、不正利用が可能である。
また、３Ｄ（three dimensions）スキャンで顔の凹凸を検知することにより写真や動画での不正利用を防止する方法もあるが、スキャンするための特殊な機材が必要である。
また、顔認証に加えてＩＣ（integrated circuit）カードやパスワードを併用した二要素認証でセキュリティを担保する方法もあるが、パスワードを記憶したりＩＣカードを持ち歩いたりする必要があるため、利用者の利便性が低下する。
これに対し、特許文献２や特許文献３に記載の方法では、利用者の視線を検知して生体判定を行う。これらの方法では、スキャンのための特殊な機材を不要とすることができる。また、記憶や持ち歩きが不要なため、利用者の利便性を向上することができる。
たとえば、特許文献２に記載の方法では、利用者の視線方向を検出し、また、表示部に視線方向の種別を示す画像を表示する。そして、検出した視線方向が認証許可視線方向であるか否かにより、ユーザが生体かどうかを判定する。
また、特許文献３に記載の方法では、提示情報表示部に利用者に提示される提示情報を表示し、また、顔画像列から視線の時間変化の情報を検出する。そして、提示情報に対する視線の時間変化の情報に基づいて、顔画像列の表す顔がなりすましである可能性を判定する。
特開２００８－３０５４００号公報 特開２０１４－２０６９３２号公報 国際公開第２０１６／０５９７８６号
しかし、特許文献２に記載の方法では、生体判定と顔認証が別のプロセスである。そのため、生体判定クリア後に顔写真を用いて顔認証を行えば、不正利用が可能になってしまう。
また、特許文献３に記載の方法では、視線の時間変化を検出するために画像処理を連続して行うため、精度の高い画像処理を行うにはシステムへ高い負荷がかかる。
本発明の目的は、処理負荷がより低い方法で生体認証の信頼度を向上することを可能にする、生体認証装置等を提供することにある。
上述の問題を解決するために、本発明の生体認証装置は、移動するシンボルの表示情報を表示装置へ出力する表示情報出力手段と、前記表示装置にタッチ入力が行われた場合に、前記タッチ入力の前記表示装置上の位置であるタッチ位置を示すタッチ位置情報を前記表示装置から受信するタッチ位置受信手段と、前記タッチ位置情報の受信により、前記表示装置が前記シンボルを表示している間の撮像タイミングで撮像装置に撮像させた、被写体の顔画像を取得する顔画像取得手段と、前記顔画像から、前記被写体の視線の先にある前記表示装置上の位置である視線位置を検出する視線検出手段と、前記視線位置と前記撮像タイミングにおける前記シンボルの表示位置との関係及び、前記タッチ位置情報が示す前記タッチ位置と前記表示位置との関係とに基づいて、前記顔画像の前記被写体が生体であると判定する生体判定手段と、前記顔画像に基づいて生体認証を行う認証手段と、前記被写体が生体であるか否か、または前記生体認証されたか否かに応じて、異なる認証結果を出力する証結果出力手段とを備えることを特徴とする。
また、本発明の生体認証方法は、移動するシンボルの表示情報を表示装置へ出力し、前記表示装置にタッチ入力が行われた場合に、前記タッチ入力の前記表示装置上の位置であるタッチ位置を示すタッチ位置情報を前記表示装置から受信し、前記タッチ位置情報の受信により、前記表示装置が前記シンボルを表示している間の撮像タイミングで撮像装置に撮像させた、被写体の顔画像を取得し、前記顔画像から、前記被写体の視線の先にある前記表示装置上の位置である視線位置を検出し、前記視線位置と前記撮像タイミングにおける前記シンボルの表示位置との関係及び、前記タッチ位置情報が示す前記タッチ位置と前記表示位置との関係とに基づいて、前記顔画像の前記被写体が生体であると判定し、前記顔画像に基づいて生体認証を行い、前記被写体が生体であるか否か、または前記生体認証されたか否かに応じて、異なる認証結果を出力することを特徴とする。
また、本発明の生体認証プログラムは、コンピュータに、移動するシンボルの表示情報を表示装置へ出力する表示情報出力機能と、前記表示装置にタッチ入力が行われた場合に、前記タッチ入力の前記表示装置上の位置であるタッチ位置を示すタッチ位置情報を前記表示装置から受信するタッチ位置受信機能と、前記タッチ位置情報の受信により、前記表示装置が前記シンボルを表示している間の撮像タイミングで撮像装置に撮像させた、被写体の顔画像を取得する顔画像取得機能と、前記顔画像から、前記被写体の視線の先にある前記表示装置上の位置である視線位置を検出する視線検出機能と、前記視線位置と前記撮像タイミングにおける前記シンボルの表示位置との関係及び、前記タッチ位置情報が示す前記タッチ位置と前記表示位置との関係とに基づいて、前記顔画像の前記被写体が生体であると判定する生体判定機能と、前記顔画像に基づいて生体認証を行う認証機能と、前記被写体が生体である前記被写体が生体であるか否か、または前記生体認証されたか否かに応じて、異なる認証結果を出力する認証結果出力機能とを実現させることを特徴とする。
本発明の生体認証装置等により、処理負荷がより低い方法で生体認証の信頼度を向上することが可能になる。
本発明の第一の実施形態の生体認証装置の構成例を示す図である。 本発明の第一の実施形態の生体認証装置の動作例を示す図である。 本発明の第二の実施形態の生体認証システムの構成例を示す図である。 本発明の第二の実施形態の生体認証装置の構成例を示す図である。 本発明の第二の実施形態の表示装置の表示例を示す図である。 本発明の第三の実施形態の生体認証装置の構成例を示す図である。 本発明の第三の実施形態の表示装置の表示例を示す図である。 本発明の第三の実施形態の生体認証装置の動作例を示す図である。 本発明の各実施形態のハードウェア構成例を示す図である。
［第一の実施形態］
本発明の第一の実施の形態について説明する。
図１に本実施形態の生体認証装置１０の構成例を示す。本実施形態の生体認証装置１０は、表示情報出力部１１、顔画像取得部１３、視線検出部１４、生体判定部１５、認証部１６および認証結果出力部１７により構成される。
表示情報出力部１１は、表示装置に表示させる、表示装置上を移動するシンボルの表示情報を表示装置へ出力する部分である。顔画像取得部１３は、表示装置がシンボルを表示している間の撮像タイミングで撮像装置に撮像させた、被写体の顔画像を取得する部分である。
視線検出部１４は、顔画像から、被写体の視線の先にある表示装置上の位置である視線位置を検出する部分である。生体判定部１５は、視線位置と撮像タイミングにおけるシンボルの表示位置とが一致していることを含む一つ以上の所定の条件がいずれも満たされるとき、顔画像の被写体が生体であると判定する部分である。認証部１６は、顔画像に基づいて生体認証を行う部分である。
認証結果出力部１７は、被写体が生体であるとの判定を行い、かつ、生体認証が成功したとき、認証成功を示す認証結果を出力し、被写体が生体でないとの判定を行ったとき、あるいは、生体認証が失敗したとき、認証失敗を示す認証結果を出力する部分である。
このように生体認証装置１０を構成することによって、生体認証装置１０は、表示装置が表示装置上を移動するシンボルを表示している間の撮像タイミングで、撮像装置に被写体の顔画像を撮像させる。次に、顔画像から被写体の視線位置を検出して、視線位置と撮像タイミングにおけるシンボルの表示位置とが一致しているとき、被写体が生体であると判定し、また、顔画像に基づいて生体認証を行う。そして、被写体が生体であるとの判定を行い、かつ、生体認証が成功したとき、認証成功を示す認証結果を出力し、被写体が生体でないとの判定を行ったとき、あるいは、生体認証が失敗したとき、認証失敗を示す認証結果を出力する。
これにより、生体認証装置１０は、同じ顔画像に基づいて生体判定と生体認証とを行うため、生体判定クリア後の顔写真等の利用による不正利用を防止し、生体認証の信頼度を向上することが可能になる。また、生体認証装置１０は、視線の時間変化を検出するのではなく、撮像タイミングでのシンボルの表示位置と視線位置との一致を確認するため、処理負荷を低減することが可能になる。そのため、処理負荷がより低い方法で生体認証の信頼度を向上することが可能になる。
次に、図２に本実施形態の生体認証装置１０の動作の例を示す。
表示情報出力部１１は、表示装置に表示させる、表示装置上を移動するシンボルの表示情報を表示装置へ出力する（ステップＳ１０１）。
次に、顔画像取得部１３は、表示装置がシンボルを表示している間の撮像タイミングで撮像装置に撮像させた、被写体の顔画像を取得する（ステップＳ１０２）。
次に、視線検出部１４は、顔画像から、被写体の視線の先にある表示装置上の位置である視線位置を検出する（ステップＳ１０３）。生体判定部１５は、視線位置と撮像タイミングにおけるシンボルの表示位置とが一致していることを含む一つ以上の所定の条件がいずれも満たされるとき、顔画像の被写体が生体であると判定する（ステップＳ１０４）。また、認証部１６は、顔画像に基づいて生体認証を行う（ステップＳ１０５）。
そして、認証結果出力部１７は、被写体が生体であるとの判定を行い、かつ、生体認証が成功したとき、認証成功を示す認証結果を出力する。また、認証結果出力部１７は、被写体が生体でないとの判定を行ったとき、あるいは、生体認証が失敗したとき、認証失敗を示す認証結果を出力する（ステップＳ１０６）。
このように動作することによって、生体認証装置１０は、表示装置が表示装置上を移動するシンボルを表示している間の撮像タイミングで、撮像装置に被写体の顔画像を撮像させる。次に、顔画像から被写体の視線位置を検出して、視線位置と撮像タイミングにおけるシンボルの表示位置とが一致しているとき、被写体が生体であると判定し、また、顔画像に基づいて生体認証を行う。そして、被写体が生体であるとの判定を行い、かつ、生体認証が成功したとき、認証成功を示す認証結果を出力し、被写体が生体でないとの判定を行ったとき、あるいは、生体認証が失敗したとき、認証失敗を示す認証結果を出力する。そのため、処理負荷がより低い方法で生体認証の信頼度を向上することが可能になる。
以上で説明したように、本発明の第一の実施形態では、生体認証装置１０は、表示装置が表示装置上を移動するシンボルを表示している間の撮像タイミングで、撮像装置に被写体の顔画像を撮像させる。次に、顔画像から被写体の視線位置を検出して、視線位置と撮像タイミングにおけるシンボルの表示位置とが一致しているとき、被写体が生体であると判定し、また、顔画像に基づいて生体認証を行う。そして、被写体が生体であるとの判定を行い、かつ、生体認証が成功したとき、認証成功を示す認証結果を出力し、被写体が生体でないとの判定を行ったとき、あるいは、生体認証が失敗したとき、認証失敗を示す認証結果を出力する。そのため、処理負荷がより低い方法で生体認証の信頼度を向上することが可能になる。
［第二の実施形態］
次に、本発明の第二の実施の形態について説明する。本実施形態では、生体認証装置２０について、より具体的に説明する。
まず、図３に本実施形態の生体認証システムの構成例を示す。本実施形態の認証システムは、生体認証装置２０、表示装置５０および撮像装置４０により構成される。
生体認証装置２０は、表示装置５０の表示を見ている人物の認証を行う装置である。生体認証装置２０は、パーソナルコンピュータやその他の情報処理装置で構成することが可能である。
表示装置５０は、生体認証装置２０から受信した表示情報に従って情報を表示する装置である。本実施形態の生体認証装置２０は、撮像装置４０が撮像した顔画像から、表示装置５０の表示を見ている利用者の視線を検出する。そのため、表示装置５０は利用者の視線を検出しやすい程度に大きなサイズであることが望ましい。表示装置５０の表示が大きいと、表示を見る利用者の視線の移動距離が大きくなるため、視線を検出しやすい。
撮像装置４０は、表示装置５０の表示を見ている利用者を撮像する装置、たとえばカメラなどである。撮像装置４０は、表示装置５０の表示を見ている利用者の顔画像を撮像して生体認証装置２０へ送る。なお、撮像装置４０は、表示装置５０に搭載されていても良い。また、表示装置５０あるいは撮像装置４０と生体認証装置２０の間の接続は、有線接続であっても無線接続であっても良い。
次に、図４に、本実施形態の生体認証装置２０の構成例を示す。生体認証装置２０は、第一の実施形態の生体認証装置１０（図１）に参照画像記憶部２８を追加した構成である。
表示情報出力部１１は、表示装置５０に表示させる、表示装置５０上を移動するシンボルの表示情報を表示装置５０へ出力する部分である。シンボルは、たとえば、数字や記号、文字、絵などである。表示情報は、たとえば、表示するシンボルの色や形状、シンボルの表示タイミング、および、シンボルの表示装置５０上の表示位置の情報を含む。また、表示情報は、映像信号であっても良い。
表示情報出力部１１は、表示装置５０上を移動するシンボルの表示情報を生成する。そして、表示装置５０では、生体認証装置２０からの表示情報に従って、移動するシンボルを表示（アニメーション表示）する。
なお、シンボルは、認証の都度、異なる移動パターンで移動することが望ましい。さらには、シンボルは、ランダムな向きに移動することが望ましい。このようにすると、顔写真等による不正利用の難易度を向上することが可能になる。
また、シンボルは連続的に移動することが望ましい。連続的に移動するシンボルを目で追わせると、利用者の視線がシンボルから外れにくくなる。そのため、生体判定の信頼度をより向上することが可能になる。
また、表示情報は、表示装置５０に表示されているシンボルを目で追うよう利用者へ指示するメッセージの情報を含んでいても良い。この場合、利用者は、表示装置５０に表示されたメッセージに従って表示装置５０に表示されているシンボルを目で追う。なお、この利用者への指示は、表示装置５０への表示以外に、利用者が指示内容を把握できる他の方法（紙媒体や電子媒体の操作マニュアルなど）を使用しても良い。
図５に、表示装置５０の表示の例を示す。この例では、表示装置５０は、ランダムな向き、かつ連続的に移動するシンボルを表示し、また、シンボルを目で追うよう利用者へ指示するメッセージを表示する。
顔画像取得部１３は、表示装置５０を見ている被写体（利用者）の顔画像を取得する部分である。顔画像取得部１３は、表示装置５０がシンボルを表示している間の撮像タイミングで、撮像装置４０に被写体の顔画像を撮像させる。そして、撮像装置４０が被写体の顔画像を撮像し、顔画像取得部１３がその顔画像を取得する。なお、顔画像取得部１３は、複数の撮像タイミングで撮像装置４０に顔画像を撮像させて、複数の顔画像を取得しても良い。
視線検出部１４は、顔画像取得部１３が取得した顔画像から、被写体の視線の先にある表示装置５０上の位置である視線位置を検出する部分である。視線検出部１４は、たとえば、顔画像から目頭や虹彩などを検出し、それらの位置関係によって視線を検出することができるが、視線検出には任意の方法を使用することができる。
生体判定部１５は、視線位置と、撮像装置４０が顔画像を撮像した撮像タイミングにおけるシンボルの表示位置とが一致しているとき、顔画像の被写体が生体であると判定する部分である。顔画像取得部１３が複数の顔画像を取得した場合には、生体判定部１５は、複数の顔画像の各々について視線位置および表示位置の一致を確認し、すべての顔画像で視線位置と表示位置とが一致したとき、被写体が生体であると判定する。あるいは、生体判定部１５は、一つ以上の顔画像の各々について視線位置および表示位置の一致を確認し、一致を確認した顔画像のすべてで視線位置と表示位置とが一致したときに、被写体が生体であると判定しても良い。
なお、生体判定部１５は、表示情報出力部１１が把握している表示情報に基づいて、撮像装置４０が顔画像を撮像した撮像タイミングのシンボルの表示位置を知ることができる。
参照画像記憶部２８は、顔認証のための参照画像を記憶する部分である。参照画像は、あらかじめ、参照画像に対応する個人を特定する個人情報と対応付けられて参照画像記憶部２８に記憶されているものとする。
認証部１６は、顔画像取得部１３が取得した顔画像に基づいて生体認証を行う部分である。たとえば、認証部１６は、顔画像取得部１３が取得した顔画像の被写体と同一人物の参照画像が参照画像記憶部２８に記憶されているか確認する。そして、顔画像取得部１３が取得した顔画像の被写体と同一人物の参照画像が参照画像記憶部２８に記憶されているとき、顔画像の被写体は、被写体と同一人物の参照画像に対応する個人情報を持つ人物であるとする。
なお、顔画像取得部１３が複数の顔画像を取得している場合には、一つ以上の顔画像について生体認証を行う。
また、認証部１６は、生体判定部１５での生体判定と並行して生体認証を実施しても良い。また、認証方法は顔認証に限らず、顔画像に基づく認証方法であればどのような認証方法であっても良い。また、認証については、被写体の人物の利用資格の確認、および、認証対象の人物の個人情報と被写体の個人情報の一致の確認、のどちらも可能である。
認証結果出力部１７は、認証結果を出力する部分である。認証結果出力部１７は、顔画像の被写体が生体であるとの判定を行い、かつ、認証部１６での生体認証が成功したとき、認証成功を示す認証結果を出力する。また、認証結果出力部１７は、顔画像の被写体が生体でないとの判定を行ったとき、あるいは、認証部１６での生体認証が失敗したとき、認証失敗を示す認証結果を出力する。
このように生体認証装置２０を構成することによって、生体認証装置２０は、表示装置５０が表示装置５０上を移動するシンボルを表示している間の撮像タイミングで、撮像装置４０に被写体の顔画像を撮像させる。次に、顔画像から被写体の視線位置を検出して、視線位置と撮像タイミングにおけるシンボルの表示位置とが一致しているとき、被写体が生体であると判定し、また、顔画像に基づいて生体認証を行う。そして、被写体が生体であるとの判定を行い、かつ、生体認証が成功したとき、認証成功を示す認証結果を出力し、被写体が生体でないとの判定を行ったとき、あるいは、生体認証が失敗したとき、認証失敗を示す認証結果を出力する。
これにより、生体認証装置２０は、同じ顔画像に基づいて生体判定と生体認証とを行うため、生体判定クリア後の顔写真等の利用による不正利用を防止し、生体認証の信頼度を向上することが可能になる。また、生体認証装置２０は、視線の時間変化を検出するのではなく、撮像タイミングでのシンボルの表示位置と視線位置との一致を確認するため、処理負荷を低減することが可能になる。そのため、処理負荷がより低い方法で生体認証の信頼度を向上することが可能になる。
また、本実施形態の認証システムは、特別な装置を必要とせず、コンピュータ、ディスプレイ、カメラ等の一般的な装置で構成することが可能である。
また、本実施形態の生体認証装置２０は、生体認証の信頼度を向上できることにより、パスワードやＩＣカードの必要性を低減することができるため、利用者の利便性を向上することができる。
また、本実施形態の生体認証装置２０は、シンボルをランダムな向きに移動させることにより、生体判定に必要な視線の遷移パターンを大量作成することができる。このシンボルの表示位置や遷移パターンを事前に予測し、視線位置を調整した動画や写真を準備することは困難である。そのため、不正利用の難易度を向上し、生体認証の信頼度をより向上することが可能になる。
また、本実施形態の生体認証装置２０は、表示装置５０に移動するシンボルを表示させるため、利用者の視線がシンボルから外れにくい。そのため、生体認証の信頼度をより向上することが可能になる。
次に、図２を用いて本実施形態の生体認証装置２０の動作例について説明する。
表示情報出力部１１は、表示装置５０に表示させる、表示装置５０上を移動するシンボルの表示情報を表示装置５０へ出力する（ステップＳ１０１）。これにより、表示装置５０は、表示情報に従って、移動するシンボルを表示する。そして、表示装置５０を見ている利用者は、表示装置５０に表示されているメッセージや生体認証装置２０の操作マニュアル等に従って、表示装置５０上に表示されている移動するシンボルを目で追う。
次に、顔画像取得部１３は、表示装置５０がシンボルを表示している間の撮像タイミングで、撮像装置４０に、表示装置５０を見ている被写体（利用者）の顔画像を撮像させる。そして、撮像装置４０が被写体の顔画像を撮像し、顔画像取得部１３がその顔画像を取得する（ステップＳ１０２）。
次に、視線検出部１４は、顔画像取得部１３が取得した顔画像から、被写体の視線の先にある表示装置５０上の位置である視線位置を検出する（ステップＳ１０３）。
そして、生体判定部１５は、視線位置と、撮像装置４０が顔画像を撮像した撮像タイミングにおけるシンボルの表示位置とが一致しているとき、顔画像の被写体が生体であると判定する（ステップＳ１０４）。
また、認証部１６は、顔画像取得部１３が取得した顔画像に基づいて生体認証を行う（ステップＳ１０５）。そして、認証結果出力部１７は、顔画像の被写体が生体であるとの判定を行い、かつ、認証部１６での生体認証が成功したとき、認証成功を示す認証結果を出力する。また、認証結果出力部１７は、顔画像の被写体が生体でないとの判定を行ったとき、あるいは、認証部１６での生体認証が失敗したとき、認証失敗を示す認証結果を出力する（ステップＳ１０６）。
このように動作することによって、生体認証装置２０は、表示装置５０が表示装置５０上を移動するシンボルを表示している間の撮像タイミングで、撮像装置４０に被写体の顔画像を撮像させる。次に、顔画像から被写体の視線位置を検出して、視線位置と撮像タイミングにおけるシンボルの表示位置とが一致しているとき、被写体が生体であると判定し、また、顔画像に基づいて生体認証を行う。そして、被写体が生体であるとの判定を行い、かつ、生体認証が成功したとき、認証成功を示す認証結果を出力し、被写体が生体でないとの判定を行ったとき、あるいは、生体認証が失敗したとき、認証失敗を示す認証結果を出力する。そのため、処理負荷がより低い方法で生体認証の信頼度を向上することが可能になる。
以上で説明したように、本発明の第二の実施形態では、生体認証装置２０は、表示装置５０が表示装置５０上を移動するシンボルを表示している間の撮像タイミングで、撮像装置４０に被写体の顔画像を撮像させる。次に、顔画像から被写体の視線位置を検出して、視線位置と撮像タイミングにおけるシンボルの表示位置とが一致しているとき、被写体が生体であると判定し、また、顔画像に基づいて生体認証を行う。そして、被写体が生体であるとの判定を行い、かつ、生体認証が成功したとき、認証成功を示す認証結果を出力し、被写体が生体でないとの判定を行ったとき、あるいは、生体認証が失敗したとき、認証失敗を示す認証結果を出力する。そのため、処理負荷がより低い方法で生体認証の信頼度を向上することが可能になる。
［第三の実施形態］
次に、本発明の第三の実施の形態について説明する。本実施形態では、さらに利用者に表示装置５０に対するタッチ入力をさせることによって生体認証の信頼度をより向上する生体認証装置３０について説明する。
まず、図３を用いて本実施形態の認証システムの構成例について説明する。本実施形態の認証システムと第二の実施形態の認証システムとの違いは、本実施形態の表示装置５０が、表示機能に加えて、表示装置５０に対する利用者のタッチ入力を検出する機能を備える点である。つまり、本実施形態の表示装置５０は、タッチパネルディスプレイなどである。本実施形態の表示装置５０は、表示装置５０にタッチ入力が行われたときのタッチ入力の表示装置５０上の位置を検出し、その位置（タッチ位置）の情報（タッチ位置情報）を表示装置５０へ出力する。
なお、タッチ入力およびタッチ位置の検出方法には、静電容量方式に限らず、任意の方式を使用可能である。たとえば、表示装置５０は、タッチパネルディスプレイに限らず、複数の物理ボタンを並べたパネルであっても良い。
次に、図６に、本実施形態の生体認証装置３０の構成例を示す。生体認証装置３０は、第二の実施形態の生体認証装置２０（図４）にタッチ位置受信部３２を追加した構成である。
表示情報出力部１１は、表示装置５０に表示させる、表示装置５０上を移動するシンボルの表示情報を表示装置５０へ出力する部分である。表示情報やシンボルについては第二の実施形態と同様である。
また、本実施形態の表示情報は、表示装置５０に表示されているシンボルをタッチするよう利用者へ指示するメッセージの情報を含んでいても良い。この場合、利用者は、表示装置５０に表示されたメッセージに従って表示装置５０に表示されているシンボルをタッチする。なお、この利用者への指示は、表示装置５０への表示以外に、利用者が指示内容を把握できる他の方法（紙媒体や電子媒体の操作マニュアルなど）を使用しても良い。
図７に、表示装置５０の表示の例を示す。この例では、表示装置５０は、ランダムな向き、かつ連続的に移動するシンボルを表示し、また、シンボルをタッチするよう利用者へ指示するメッセージを表示する。この例のように、メッセージは、タッチのタイミング（シンボルの色や形が変化した時など）を含んでいても良い。
タッチ位置受信部３２は、表示装置５０にタッチ入力が行われたときのタッチ入力の表示装置５０上の位置であるタッチ位置を示すタッチ位置情報を表示装置５０から受信する部分である。利用者が表示装置５０をタッチしたとき、表示装置５０は、タッチ入力がされた表示装置５０上のタッチ位置を検出し、タッチ位置情報をタッチ位置受信部３２へ出力する。そして、タッチ位置受信部３２は、タッチ位置情報を表示装置５０から受信する。
顔画像取得部１３は、表示装置５０を見ている被写体（利用者）の顔画像を取得する部分である。本実施形態では、顔画像取得部１３は、表示装置５０からタッチ位置情報を受信したとき、顔画像を取得する。
たとえば、顔画像取得部１３は、表示装置５０からタッチ位置情報を受信したとき、撮像装置４０に被写体の顔画像を撮像させる。そして、顔画像取得部１３は、撮像装置４０が撮像した顔画像を取得する。なお、この場合、利用者によるタッチ入力から撮像装置４０による顔画像の撮像が瞬時に行われた場合、撮像装置４０は、利用者がタッチ入力を行っている瞬間の利用者の顔画像を撮像することになる。
情報の処理や送受信に遅延があってもタッチ入力の時刻になるべく近い時刻の顔画像を顔画像取得部１３が取得できるよう、タッチ入力が行われるより前から撮像装置４０が利用者を撮像していても良い。この場合、撮像装置４０が撮像した撮像画像（静止画あるいは動画）を撮像装置４０あるいは顔画像取得部１３が一時的に記憶し、顔画像取得部１３が、記憶された撮像画像の中からタッチ位置情報を受信した時刻の画像を顔画像として取得しても良い。あるいは、顔画像取得部１３が、タッチ入力が行われた時刻を示すタッチ時刻情報を表示装置５０から受信し、撮像画像の中からタッチ時刻情報が示すタッチ時刻の撮像画像を顔画像として取得しても良い。あるいは、情報の処理や送受信の時間が固定的な場合には、その時間を考慮して、タッチ位置情報を受信した時刻から所定時間前の撮像画像を顔画像として取得しても良い。
視線検出部１４は、顔画像取得部１３が取得した顔画像から視線位置を検出する部分である。
生体判定部１５は、視線位置と、撮像装置４０が顔画像を撮像した撮像タイミングにおけるシンボルの表示位置とが一致していることを含む一つ以上の所定の条件がいずれも満たされるとき、顔画像の被写体が生体であると判定する部分である。本実施形態では、条件は、さらに、タッチ位置情報が示すタッチ位置と表示位置とが一致していることを含む。タッチ入力のタイミング（シンボルの色や形が変わった時など）が利用者へ指示されている場合には、条件は、さらに、タッチ入力のタイミングが指示されたタイミングに一致していることを含む。
利用者に複数回タッチ入力をさせて、顔画像取得部１３が複数の顔画像を取得している場合には、生体判定部１５は、タッチ入力の各々について、視線位置、タッチ位置および表示位置が一致するとき、生体であると判定する。あるいは、生体判定部１５は、一回以上のタッチ入力について、視線位置、タッチ位置および表示位置の一致を確認し、他のタッチ入力については、視線位置を含まない、タッチ位置と表示位置の一致を確認しても良い。
なお、生体判定部１５は、表示情報出力部１１が把握している表示情報に基づいて、撮像装置４０が顔画像を撮像した撮像タイミングのシンボルの表示位置を知ることができる。
認証部１６は、顔画像取得部１３が取得した顔画像に基づいて生体認証を行う部分である。認証については第二の実施形態と同様のため、説明を省略する。
認証結果出力部１７は、認証結果を出力する部分である。認証結果出力部１７は、顔画像の被写体が生体であるとの判定を行い、かつ、認証部１６での生体認証が成功したとき、認証成功を示す認証結果を出力する。また、認証結果出力部１７は、顔画像の被写体が生体でないとの判定を行ったとき、あるいは、認証部１６での生体認証が失敗したとき、認証失敗を示す認証結果を出力する。
このように生体認証装置３０を構成することによって、生体認証装置３０は、表示装置５０が表示装置５０上を移動するシンボルを表示している間の撮像タイミングで、撮像装置４０に被写体の顔画像を撮像させる。次に、顔画像から被写体の視線位置を検出して、視線位置と撮像タイミングにおけるシンボルの表示位置とが一致しているとき、被写体が生体であると判定し、また、顔画像に基づいて生体認証を行う。そして、被写体が生体であるとの判定を行い、かつ、生体認証が成功したとき、認証成功を示す認証結果を出力し、被写体が生体でないとの判定を行ったとき、あるいは、生体認証が失敗したとき、認証失敗を示す認証結果を出力する。
これにより、生体認証装置３０は、同じ顔画像に基づいて生体判定と生体認証とを行うため、生体判定クリア後の顔写真等の利用による不正利用を防止し、生体認証の信頼度を向上することが可能になる。また、生体認証装置３０は、視線の時間変化を検出するのではなく、撮像タイミングでのシンボルの表示位置と視線位置との一致を確認するため、処理負荷を低減することが可能になる。そのため、処理負荷がより低い方法で生体認証の信頼度を向上することが可能になる。
また、本実施形態の生体認証装置３０は、タッチ位置情報を表示装置５０から受信したとき、顔画像の取得を行い、タッチ位置と表示位置とが一致しているとき、顔画像の被写体が生体であるとの判定を行う。これにより、生体認証装置３０は、タッチの瞬間あるいは直後の顔画像から視線位置を検出するため、他のタイミングで利用者が視線をシンボルから外していても判定に影響がない。そのため、利用者への負担を軽減することが可能になる。
また、利用者がシンボルにタッチする瞬間は、シンボルの位置に視線が来ることが期待できる。そのため、利用者にシンボルにタッチさせることによって、視線位置が表示位置により近くなる可能性が高くなり、生体認証の信頼度をより向上することが可能になる。また、タッチ入力には人間による操作が必要なため、タッチ入力を必要とすることによって、不正利用の難易度を向上することができる。また、シンボルへのタッチ回数を増やすことにより、不正利用の難易度をより向上することも可能である。
また、本実施形態の認証システムは、表示装置５０へのタッチ入力を必要とするため、利用者は表示装置５０の正面の、表示装置５０へ腕が届く範囲へ誘導される。これにより、撮像装置４０と被写体の顔の位置関係がある程度決まった範囲に収まる可能性が高くなるため、誤認識の可能性を低減することが可能になる。そのため、顔認証や視線検出の精度をより向上することができる。
また、本実施形態の認証システムは、特別な装置を必要とせず、コンピュータ、タッチパネルディスプレイ、カメラ等の一般的な装置で構成することが可能である。
次に、図８に本実施形態の生体認証装置３０の動作例を示す。
表示情報出力部１１は、表示装置５０に表示させる、表示装置５０上を移動するシンボルの表示情報を表示装置５０へ出力する（ステップＳ２０１）。これにより、表示装置５０は、表示情報に従って、移動するシンボルを表示する。そして、表示装置５０を見ている利用者は、表示装置５０に表示されているメッセージや生体認証装置３０の操作マニュアル等に従って、表示装置５０に表示されている移動するシンボルをタッチする。
利用者が表示装置５０をタッチしたとき、表示装置５０は、タッチ入力がされた表示装置５０上のタッチ位置を検出し、タッチ位置情報をタッチ位置受信部３２へ出力する。そして、タッチ位置受信部３２は、タッチ位置情報を表示装置５０から受信する（ステップＳ２０２）。
顔画像取得部１３は、表示装置５０からタッチ位置情報を受信したとき、顔画像を取得する（ステップＳ２０３）。たとえば、顔画像取得部１３は、タッチ入力の時刻情報を表示装置５０から受信し、タッチ入力の時刻情報に対応する顔画像を、撮像装置４０が撮像して一時記憶されている顔画像の中から取得する。
次に、視線検出部１４は、顔画像取得部１３が取得した顔画像から、被写体の視線の先にある表示装置５０上の位置である視線位置を検出する（ステップＳ２０４）。
そして、生体判定部１５は、視線位置と、撮像装置４０が顔画像を撮像した撮像タイミングにおけるシンボルの表示位置と、タッチ位置情報が示すタッチ位置とが一致しているとき、顔画像の被写体が生体であると判定する（ステップＳ２０５）。
また、認証部１６は、顔画像取得部１３が取得した顔画像に基づいて生体認証を行う（ステップＳ２０６）。そして、認証結果出力部１７は、顔画像の被写体が生体であるとの判定を行い、かつ、認証部１６での生体認証が成功したとき、認証成功を示す認証結果を出力する。また、認証結果出力部１７は、顔画像の被写体が生体でないとの判定を行ったとき、あるいは、認証部１６での生体認証が失敗したとき、認証失敗を示す認証結果を出力する（ステップＳ２０７）。
このように動作することによって、生体認証装置３０は、表示装置５０が表示装置５０上を移動するシンボルを表示している間の撮像タイミングで、撮像装置４０に被写体の顔画像を撮像させる。次に、顔画像から被写体の視線位置を検出して、視線位置と撮像タイミングにおけるシンボルの表示位置とが一致しているとき、被写体が生体であると判定し、また、顔画像に基づいて生体認証を行う。そして、被写体が生体であるとの判定を行い、かつ、生体認証が成功したとき、認証成功を示す認証結果を出力し、被写体が生体でないとの判定を行ったとき、あるいは、生体認証が失敗したとき、認証失敗を示す認証結果を出力する。そのため、処理負荷がより低い方法で生体認証の信頼度を向上することが可能になる。
以上で説明したように、本発明の第三の実施形態では、生体認証装置３０は、表示装置５０が表示装置５０上を移動するシンボルを表示している間の撮像タイミングで、撮像装置４０に被写体の顔画像を撮像させる。次に、顔画像から被写体の視線位置を検出して、視線位置と撮像タイミングにおけるシンボルの表示位置とが一致しているとき、被写体が生体であると判定し、また、顔画像に基づいて生体認証を行う。そして、被写体が生体であるとの判定を行い、かつ、生体認証が成功したとき、認証成功を示す認証結果を出力し、被写体が生体でないとの判定を行ったとき、あるいは、生体認証が失敗したとき、認証失敗を示す認証結果を出力する。そのため、処理負荷がより低い方法で生体認証の信頼度を向上することが可能になる。
［ハードウェア構成例］
上述した本発明の各実施形態における生体認証装置（１０、２０、３０）を、一つの情報処理装置（コンピュータ）を用いて実現するハードウェア資源の構成例について説明する。なお、生体認証装置は、物理的または機能的に少なくとも二つの情報処理装置を用いて実現してもよい。また、生体認証装置は、専用の装置として実現してもよい。また、生体認証装置の一部の機能のみを情報処理装置を用いて実現しても良い。
図９は、本発明の各実施形態の生体認証装置を実現可能な情報処理装置のハードウェア構成例を概略的に示す図である。情報処理装置９０は、通信インタフェース９１、入出力インタフェース９２、演算装置９３、記憶装置９４、不揮発性記憶装置９５およびドライブ装置９６を備える。
通信インタフェース９１は、各実施形態の生体認証装置が、有線あるいは／および無線で外部装置と通信するための通信手段である。なお、生体認証装置を、少なくとも二つの情報処理装置を用いて実現する場合、それらの装置の間を通信インタフェース９１経由で相互に通信可能なように接続しても良い。
入出力インタフェース９２は、入力デバイスの一例であるキーボードや、出力デバイスとしてのディスプレイ等のマンマシンインタフェースである。
演算装置９３は、汎用のＣＰＵ（Central Processing Unit）やマイクロプロセッサ等の演算処理装置である。演算装置９３は、たとえば、不揮発性記憶装置９５に記憶された各種プログラムを記憶装置９４に読み出し、読み出したプログラムに従って処理を実行することが可能である。
記憶装置９４は、演算装置９３から参照可能な、ＲＡＭ（Random Access Memory）等のメモリ装置であり、プログラムや各種データ等を記憶する。記憶装置９４は、揮発性のメモリ装置であっても良い。
不揮発性記憶装置９５は、たとえば、ＲＯＭ（Read Only Memory）、フラッシュメモリ、等の、不揮発性の記憶装置であり、各種プログラムやデータ等を記憶することが可能である。
ドライブ装置９６は、たとえば、後述する記録媒体９７に対するデータの読み込みや書き込みを処理する装置である。
記録媒体９７は、たとえば、光ディスク、光磁気ディスク、半導体フラッシュメモリ等、データを記録可能な任意の記録媒体である。
本発明の各実施形態は、たとえば、図９に例示した情報処理装置９０により生体認証装置を構成し、この生体認証装置に対して、上記各実施形態において説明した機能を実現可能なプログラムを供給することにより実現してもよい。
この場合、生体認証装置に対して供給したプログラムを、演算装置９３が実行することによって、実施形態を実現することが可能である。また、生体認証装置のすべてではなく、一部の機能を情報処理装置９０で構成することも可能である。
さらに、上記プログラムを記録媒体９７に記録しておき、生体認証装置の出荷段階、あるいは運用段階等において、適宜上記プログラムが不揮発性記憶装置９５に格納されるよう構成してもよい。なお、この場合、上記プログラムの供給方法は、出荷前の製造段階、あるいは運用段階等において、適当な治具を利用して生体認証装置内にインストールする方法を採用してもよい。また、上記プログラムの供給方法は、インターネット等の通信回線を介して外部からダウンロードする方法等の一般的な手順を採用してもよい。
上記の実施形態の一部または全部は、以下の付記のようにも記載されうるが、以下には限られない。
（付記１）
表示装置に表示させる、前記表示装置上を移動するシンボルの表示情報を前記表示装置へ出力する表示情報出力手段と、
前記表示装置が前記シンボルを表示している間の撮像タイミングで撮像装置に撮像させた、被写体の顔画像を取得する顔画像取得手段と、
前記顔画像から、前記被写体の視線の先にある前記表示装置上の位置である視線位置を検出する視線検出手段と、
前記視線位置と前記撮像タイミングにおける前記シンボルの表示位置とが一致していることを含む一つ以上の所定の条件がいずれも満たされるとき、前記顔画像の前記被写体が生体であると判定する生体判定手段と、
前記顔画像に基づいて生体認証を行う認証手段と、
前記被写体が生体であるとの前記判定を行い、かつ、前記生体認証が成功したとき、認証成功を示す認証結果を出力し、前記被写体が生体でないとの前記判定を行ったとき、あるいは、前記生体認証が失敗したとき、認証失敗を示す認証結果を出力する認証結果出力手段と
を備えることを特徴とする生体認証装置。
（付記２）
前記シンボルは、前記表示装置上をランダムな向きに移動する
ことを特徴とする付記１に記載の生体認証装置。
（付記３）
前記シンボルは、前記表示装置上を連続的に移動する
ことを特徴とする付記１あるいは付記２に記載の生体認証装置。
（付記４）
前記表示装置にタッチ入力が行われたときの前記タッチ入力の前記表示装置上の位置であるタッチ位置を示すタッチ位置情報を前記表示装置から受信するタッチ位置受信手段
をさらに備え、
前記顔画像取得手段は、前記タッチ位置情報を受信したとき、前記顔画像の前記取得を行い、
前記条件は、さらに、前記タッチ位置情報が示す前記タッチ位置と前記表示位置とが一致していることを含む
ことを特徴とする付記１から付記３のいずれかに記載の生体認証装置。
（付記５）
前記顔画像取得手段は、前記タッチ位置情報を受信したとき、前記撮像装置に前記顔画像を撮像させる
ことを特徴とする付記４に記載の生体認証装置。
（付記６）
前記顔画像取得手段は、前記タッチ入力が行われるより前から前記被写体の撮像画像を前記撮像装置に撮像させ、前記撮像画像の中から、前記タッチ位置情報を受信した時刻から所定時間前の前記撮像画像を前記顔画像として前記取得する
ことを特徴とする付記４に記載の生体認証装置。
（付記７）
前記タッチ位置受信手段は、さらに、前記タッチ入力が行われた時刻を示すタッチ時刻情報を受信し、
前記顔画像取得手段は、前記タッチ入力が行われるより前から前記被写体の撮像画像を前記撮像装置に撮像させ、前記撮像画像の中から、前記タッチ時刻情報が示すタッチ時刻の前記撮像画像を前記顔画像として前記取得する
ことを特徴とする付記４に記載の生体認証装置。
（付記８）
前記認証手段は、前記顔画像の前記被写体と同一人物の参照画像が、個人を特定する個人情報と前記参照画像とを対応付けて記憶した参照画像記憶手段に記憶されているとき、前記顔画像の前記被写体は、前記被写体と同一人物の前記参照画像に対応する前記個人情報を持つ人物であるとする
ことを特徴とする付記１から付記７のいずれかに記載の生体認証装置。
（付記９）
前記生体認証は、前記個人情報を持つ人物の利用資格の確認、認証対象の人物の前記個人情報と前記被写体の前記個人情報との一致の確認のいずれかである
ことを特徴とする付記８に記載の生体認証装置。
（付記１０）
付記１から付記９のいずれかに記載の生体認証装置と、
前記表示装置と、
前記撮像装置と
を備えることを特徴とする認証システム。
（付記１１）
表示装置に表示させる、前記表示装置上を移動するシンボルの表示情報を前記表示装置へ出力し、
前記表示装置が前記シンボルを表示している間の撮像タイミングで撮像装置に撮像させた、被写体の顔画像を取得し、
前記顔画像から、前記被写体の視線の先にある前記表示装置上の位置である視線位置を検出し、
前記視線位置と前記撮像タイミングにおける前記シンボルの表示位置とが一致していることを含む一つ以上の所定の条件がいずれも満たされるとき、前記顔画像の前記被写体が生体であると判定し、
前記顔画像に基づいて生体認証を行い、
前記被写体が生体であるとの前記判定を行い、かつ、前記生体認証が成功したとき、認証成功を示す認証結果を出力し、前記被写体が生体でないとの前記判定を行ったとき、あるいは、前記生体認証が失敗したとき、認証失敗を示す認証結果を出力する
ことを特徴とする生体認証方法。
（付記１２）
前記シンボルは、前記表示装置上をランダムな向きに移動する
ことを特徴とする付記１１に記載の生体認証方法。
（付記１３）
前記シンボルは、前記表示装置上を連続的に移動する
ことを特徴とする付記１１あるいは付記１２に記載の生体認証方法。
（付記１４）
前記表示装置にタッチ入力が行われたときの前記タッチ入力の前記表示装置上の位置であるタッチ位置を示すタッチ位置情報を前記表示装置から受信し、
前記タッチ位置情報を受信したとき、前記顔画像の前記取得を行い、
前記条件は、さらに、前記タッチ位置情報が示す前記タッチ位置と前記表示位置とが一致していることを含む
ことを特徴とする付記１１から付記１３のいずれかに記載の生体認証方法。
（付記１５）
前記タッチ位置情報を受信したとき、前記撮像装置に前記顔画像を撮像させる
ことを特徴とする付記１４に記載の生体認証方法。
（付記１６）
前記タッチ入力が行われるより前から前記被写体の撮像画像を前記撮像装置に撮像させ、前記撮像画像の中から、前記タッチ位置情報を受信した時刻から所定時間前の前記撮像画像を前記顔画像として前記取得する
ことを特徴とする付記１４に記載の生体認証方法。
（付記１７）
前記タッチ入力が行われた時刻を示すタッチ時刻情報を受信し、
前記タッチ入力が行われるより前から前記被写体の撮像画像を前記撮像装置に撮像させ、前記撮像画像の中から、前記タッチ時刻情報が示すタッチ時刻の前記撮像画像を前記顔画像として前記取得する
ことを特徴とする付記１４に記載の生体認証方法。
（付記１８）
前記顔画像の前記被写体と同一人物の参照画像が、個人を特定する個人情報と前記参照画像とを対応付けて記憶した参照画像記憶部に記憶されているとき、前記顔画像の前記被写体は、前記被写体と同一人物の前記参照画像に対応する前記個人情報を持つ人物であるとする
ことを特徴とする付記１１から付記１７のいずれかに記載の生体認証方法。
（付記１９）
前記生体認証は、前記個人情報を持つ人物の利用資格の確認、認証対象の人物の前記個人情報と前記被写体の前記個人情報との一致の確認のいずれかである
ことを特徴とする付記１８に記載の生体認証方法。
（付記２０）
コンピュータに、
表示装置に表示させる、前記表示装置上を移動するシンボルの表示情報を前記表示装置へ出力する表示情報出力機能と、
前記表示装置が前記シンボルを表示している間の撮像タイミングで撮像装置に撮像させた、被写体の顔画像を取得する顔画像取得機能と、
前記顔画像から、前記被写体の視線の先にある前記表示装置上の位置である視線位置を検出する視線検出機能と、
前記視線位置と前記撮像タイミングにおける前記シンボルの表示位置とが一致していることを含む一つ以上の所定の条件がいずれも満たされるとき、前記顔画像の前記被写体が生体であると判定する生体判定機能と、
前記顔画像に基づいて生体認証を行う認証機能と、
前記被写体が生体であるとの前記判定を行い、かつ、前記生体認証が成功したとき、認証成功を示す認証結果を出力し、前記被写体が生体でないとの前記判定を行ったとき、あるいは、前記生体認証が失敗したとき、認証失敗を示す認証結果を出力する認証結果出力機能と
を実現させることを特徴とする生体認証プログラムを記録したコンピュータ読み取り可能な記録媒体。
（付記２１）
前記シンボルは、前記表示装置上をランダムな向きに移動する
ことを特徴とする付記２０に記載の生体認証プログラムを記録したコンピュータ読み取り可能な記録媒体。
（付記２２）
前記シンボルは、前記表示装置上を連続的に移動する
ことを特徴とする付記２０あるいは付記２１に記載の生体認証プログラムを記録したコンピュータ読み取り可能な記録媒体。
（付記２３）
前記表示装置にタッチ入力が行われたときの前記タッチ入力の前記表示装置上の位置であるタッチ位置を示すタッチ位置情報を前記表示装置から受信するタッチ位置受信機能
をさらにコンピュータに実現させ、
前記顔画像取得機能は、前記タッチ位置情報を受信したとき、前記顔画像の前記取得を行い、
前記条件は、さらに、前記タッチ位置情報が示す前記タッチ位置と前記表示位置とが一致していることを含む
ことを特徴とする付記２０から付記２２のいずれかに記載の生体認証プログラムを記録したコンピュータ読み取り可能な記録媒体。
（付記２４）
前記顔画像取得機能は、前記タッチ位置情報を受信したとき、前記撮像装置に前記顔画像を撮像させる
ことを特徴とする付記２３に記載の生体認証プログラムを記録したコンピュータ読み取り可能な記録媒体。
（付記２５）
前記顔画像取得機能は、前記タッチ入力が行われるより前から前記被写体の撮像画像を前記撮像装置に撮像させ、前記撮像画像の中から、前記タッチ位置情報を受信した時刻から所定時間前の前記撮像画像を前記顔画像として前記取得する
ことを特徴とする付記２３に記載の生体認証プログラムを記録したコンピュータ読み取り可能な記録媒体。
（付記２６）
前記タッチ位置受信機能は、さらに、前記タッチ入力が行われた時刻を示すタッチ時刻情報を受信し、
前記顔画像取得機能は、前記タッチ入力が行われるより前から前記被写体の撮像画像を前記撮像装置に撮像させ、前記撮像画像の中から、前記タッチ時刻情報が示すタッチ時刻の前記撮像画像を前記顔画像として前記取得する
ことを特徴とする付記２３に記載の生体認証プログラムを記録したコンピュータ読み取り可能な記録媒体。
（付記２７）
前記認証機能は、前記顔画像の前記被写体と同一人物の参照画像が、個人を特定する個人情報と前記参照画像とを対応付けて記憶した参照画像記憶部に記憶されているとき、前記顔画像の前記被写体は、前記被写体と同一人物の前記参照画像に対応する前記個人情報を持つ人物であるとする
ことを特徴とする付記２０から付記２６のいずれかに記載の生体認証プログラムを記録したコンピュータ読み取り可能な記録媒体。
（付記２８）
前記生体認証は、前記個人情報を持つ人物の利用資格の確認、認証対象の人物の前記個人情報と前記被写体の前記個人情報との一致の確認のいずれかである
ことを特徴とする付記２７に記載の生体認証プログラムを記録したコンピュータ読み取り可能な記録媒体。
以上、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
この出願は、２０１８年２月１日に出願された日本出願特願２０１８－０１６０４６を基礎とする優先権を主張し、その開示の全てをここに取り込む。
１０、２０、３０ 生体認証装置
１１ 表示情報出力部
１３ 顔画像取得部
１４ 視線検出部
１５ 生体判定部
１６ 認証部
１７ 認証結果出力部
２８ 参照画像記憶部
３２ タッチ位置受信部
４０ 撮像装置
５０ 表示装置
９０ 情報処理装置
９１ 通信インタフェース
９２ 入出力インタフェース
９３ 演算装置
９４ 記憶装置
９５ 不揮発性記憶装置
９６ ドライブ装置
９７ 記録媒体

Claims (6)

  1. 移動するシンボルの表示情報を表示装置へ出力する表示情報出力手段と、
    前記表示装置にタッチ入力が行われた場合に、前記タッチ入力の前記表示装置上の位置であるタッチ位置を示すタッチ位置情報を前記表示装置から受信するタッチ位置受信手段と、
    前記タッチ位置情報の受信により、前記表示装置が前記シンボルを表示している間の撮像タイミングで撮像装置に撮像させた、被写体の顔画像を取得する顔画像取得手段と、
    前記顔画像から、前記被写体の視線の先にある前記表示装置上の位置である視線位置を検出する視線検出手段と、
    前記視線位置と前記撮像タイミングにおける前記シンボルの表示位置との関係及び、前記タッチ位置情報が示す前記タッチ位置と前記表示位置との関係とに基づいて、前記顔画像の前記被写体が生体であると判定する生体判定手段と、
    前記顔画像に基づいて生体認証を行う認証手段と、
    前記被写体が生体であるか否か、または前記生体認証されたか否かに応じて、異なる認証結果を出力する認証結果出力手段と
    を備えることを特徴とする生体認証装置。
  2. 前記シンボルは、前記表示装置上をランダムな向きに移動する
    ことを特徴とする請求項１に記載の生体認証装置。
  3. 前記顔画像取得手段は、前記タッチ位置情報を受信した場合に、前記撮像装置に前記顔画像を撮像させる
    ことを特徴とする請求項１または２に記載の生体認証装置。
  4. 前記顔画像取得手段は、前記タッチ入力が行われるより前から前記被写体の撮像画像を前記撮像装置に撮像させ、前記撮像画像の中から、前記タッチ位置情報を受信した時刻から所定時間前の前記撮像画像を前記顔画像として前記取得する
    ことを特徴とする請求項１または２に記載の生体認証装置。
  5. 移動するシンボルの表示情報を表示装置へ出力し、
    前記表示装置にタッチ入力が行われた場合に、前記タッチ入力の前記表示装置上の位置であるタッチ位置を示すタッチ位置情報を前記表示装置から受信し、
    前記タッチ位置情報の受信により、前記表示装置が前記シンボルを表示している間の撮像タイミングで撮像装置に撮像させた、被写体の顔画像を取得し、
    前記顔画像から、前記被写体の視線の先にある前記表示装置上の位置である視線位置を検出し、
    前記視線位置と前記撮像タイミングにおける前記シンボルの表示位置との関係及び、前記タッチ位置情報が示す前記タッチ位置と前記表示位置との関係とに基づいて、前記顔画像の前記被写体が生体であると判定し、
    前記顔画像に基づいて生体認証を行い、
    前記被写体が生体であるか否か、または前記生体認証されたか否かに応じて、異なる認証結果を出力する
    ことを特徴とする生体認証方法。
  6. コンピュータに、
    移動するシンボルの表示情報を表示装置へ出力する表示情報出力機能と、
    前記表示装置にタッチ入力が行われた場合に、前記タッチ入力の前記表示装置上の位置であるタッチ位置を示すタッチ位置情報を前記表示装置から受信するタッチ位置受信機能と、
    前記タッチ位置情報の受信により、前記表示装置が前記シンボルを表示している間の撮像タイミングで撮像装置に撮像させた、被写体の顔画像を取得する顔画像取得機能と、
    前記顔画像から、前記被写体の視線の先にある前記表示装置上の位置である視線位置を検出する視線検出機能と、
    前記視線位置と前記撮像タイミングにおける前記シンボルの表示位置との関係及び、前記タッチ位置情報が示す前記タッチ位置と前記表示位置との関係とに基づいて、前記顔画像の前記被写体が生体であると判定する生体判定機能と、
    前記顔画像に基づいて生体認証を行う認証機能と、
    前記被写体が生体であるか否か、または前記生体認証されたか否かに応じて、異なる認証結果を出力する認証結果出力機能と
    を実現させることを特徴とする生体認証プログラム。
JP2022073945A 2018-02-01 2022-04-28 生体認証装置、生体認証方法および生体認証プログラム Active JP7452571B2 (ja)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2018016046 2018-02-01
JP2018016046 2018-02-01
PCT/JP2019/003282 WO2019151368A1 (ja) 2018-02-01 2019-01-31 生体認証装置、システム、方法および記録媒体
JP2019569205A JP7070588B2 (ja) 2018-02-01 2019-01-31 生体認証装置、システム、方法およびプログラム

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2019569205A Division JP7070588B2 (ja) 2018-02-01 2019-01-31 生体認証装置、システム、方法およびプログラム

Publications (2)

Publication Number Publication Date
JP2022106869A true JP2022106869A (ja) 2022-07-20
JP7452571B2 JP7452571B2 (ja) 2024-03-19

Family

ID=67478829

Family Applications (2)

Application Number Title Priority Date Filing Date
JP2019569205A Active JP7070588B2 (ja) 2018-02-01 2019-01-31 生体認証装置、システム、方法およびプログラム
JP2022073945A Active JP7452571B2 (ja) 2018-02-01 2022-04-28 生体認証装置、生体認証方法および生体認証プログラム

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2019569205A Active JP7070588B2 (ja) 2018-02-01 2019-01-31 生体認証装置、システム、方法およびプログラム

Country Status (4)

Country Link
US (2) US11550890B2 (ja)
EP (1) EP3748520A4 (ja)
JP (2) JP7070588B2 (ja)
WO (1) WO2019151368A1 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10735959B2 (en) 2017-09-18 2020-08-04 Element Inc. Methods, systems, and media for detecting spoofing in mobile authentication
EP3938953A4 (en) 2019-03-12 2022-12-28 Element, Inc. FACIAL RECOGNITION SPOOFING DETECTION WITH MOBILE DEVICES
JP6906023B2 (ja) * 2019-08-13 2021-07-21 本田技研工業株式会社 車両用認証装置
JPWO2021075198A1 (ja) * 2019-10-17 2021-04-22
JP7381014B2 (ja) * 2019-12-04 2023-11-15 株式会社デジタル・ナレッジ 試験システム
US11507248B2 (en) 2019-12-16 2022-11-22 Element Inc. Methods, systems, and media for anti-spoofing using eye-tracking
JP2021141573A (ja) * 2020-03-06 2021-09-16 キヤノン株式会社 電子機器
US11881056B2 (en) 2020-03-27 2024-01-23 Nec Corporation Image processing device, image processing method, and storage medium
WO2022172430A1 (ja) 2021-02-15 2022-08-18 富士通株式会社 判定方法、判定プログラム、及び情報処理装置
WO2023166603A1 (ja) * 2022-03-02 2023-09-07 日本電気株式会社 情報処理装置、情報処理方法及び記録媒体

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006085226A (ja) * 2004-09-14 2006-03-30 Oki Electric Ind Co Ltd 虹彩認証における不正検出システム
JP2006330936A (ja) * 2005-05-24 2006-12-07 Matsushita Electric Works Ltd 顔認証装置
WO2013094065A1 (ja) * 2011-12-22 2013-06-27 パイオニア株式会社 判定装置、判定方法及び判定プログラム
US8856541B1 (en) * 2013-01-10 2014-10-07 Google Inc. Liveness detection
JP2015176555A (ja) * 2014-03-18 2015-10-05 株式会社Ｎｔｔドコモ 通信端末及び通信端末の認証方法
US20160062456A1 (en) * 2013-05-17 2016-03-03 Nokia Technologies Oy Method and apparatus for live user recognition
WO2016059786A1 (ja) * 2014-10-15 2016-04-21 日本電気株式会社 なりすまし検知装置、なりすまし検知方法、および、記憶媒体

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008305400A (ja) 2001-05-25 2008-12-18 Toshiba Corp 顔画像記録装置、及び顔画像記録方法
JP5277365B2 (ja) 2008-04-06 2013-08-28 国立大学法人九州工業大学 個人認証方法及びそれに使用する個人認証装置
US9082235B2 (en) * 2011-07-12 2015-07-14 Microsoft Technology Licensing, Llc Using facial data for device authentication or subject identification
JP2014092941A (ja) 2012-11-02 2014-05-19 Sony Corp 情報処理装置及び情報処理方法、並びにコンピューター・プログラム
JP2014206932A (ja) 2013-04-15 2014-10-30 オムロン株式会社 認証装置、認証方法、制御プログラムおよび記録媒体
US10102358B2 (en) * 2015-12-29 2018-10-16 Sensory, Incorporated Face-controlled liveness verification
US10698998B1 (en) * 2016-03-04 2020-06-30 Jpmorgan Chase Bank, N.A. Systems and methods for biometric authentication with liveness detection
WO2017205543A1 (en) * 2016-05-24 2017-11-30 Brown Timothy J Liveness detection for face capture
JP6643205B2 (ja) 2016-07-29 2020-02-12 キヤノン株式会社 記録ヘッドおよびインクジェット記録装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006085226A (ja) * 2004-09-14 2006-03-30 Oki Electric Ind Co Ltd 虹彩認証における不正検出システム
JP2006330936A (ja) * 2005-05-24 2006-12-07 Matsushita Electric Works Ltd 顔認証装置
WO2013094065A1 (ja) * 2011-12-22 2013-06-27 パイオニア株式会社 判定装置、判定方法及び判定プログラム
US8856541B1 (en) * 2013-01-10 2014-10-07 Google Inc. Liveness detection
US20160062456A1 (en) * 2013-05-17 2016-03-03 Nokia Technologies Oy Method and apparatus for live user recognition
JP2015176555A (ja) * 2014-03-18 2015-10-05 株式会社Ｎｔｔドコモ 通信端末及び通信端末の認証方法
WO2016059786A1 (ja) * 2014-10-15 2016-04-21 日本電気株式会社 なりすまし検知装置、なりすまし検知方法、および、記憶媒体

Also Published As

Publication number Publication date
US11775627B2 (en) 2023-10-03
EP3748520A4 (en) 2021-03-24
EP3748520A1 (en) 2020-12-09
JP7070588B2 (ja) 2022-05-18
WO2019151368A1 (ja) 2019-08-08
US11550890B2 (en) 2023-01-10
US20230118331A1 (en) 2023-04-20
US20210073364A1 (en) 2021-03-11
JPWO2019151368A1 (ja) 2021-01-14
JP7452571B2 (ja) 2024-03-19

Similar Documents

Publication Publication Date Title
JP7070588B2 (ja) 生体認証装置、システム、方法およびプログラム
US10586031B2 (en) Biometric authentication of a user
US9880634B2 (en) Gesture input apparatus, gesture input method, and program for wearable terminal
JP5851209B2 (ja) 生体認証装置およびそれを備えた自動取引装置
JP2014206932A (ja) 認証装置、認証方法、制御プログラムおよび記録媒体
WO2014174674A1 (ja) 画像処理プログラム、画像処理方法及び情報端末
CN110678871A (zh) 面部认证装置和面部认证方法
JP6376246B2 (ja) 認証装置、認証方法、制御プログラムおよび記録媒体
US11068690B2 (en) Detection device, information processing device, and information processing method
KR20150055342A (ko) 지문 인증 방법과 이를 수행하는 지문 인증 장치 및 이동 단말기
JP6267025B2 (ja) 通信端末及び通信端末の認証方法
KR102532746B1 (ko) 전자 장치 및 그 제어 방법
CN107408208B (zh) 用于对用户的生物测量进行分析的方法和指纹感测系统
JP2019133287A (ja) 生体認証装置、生体認証プログラム、及び生体認証方法
JP6683833B2 (ja) 生体認証装置、および生体認証プログラム
CN110574031B (zh) 用于电子设备的登记方案
JP2018116192A (ja) 端末装置及び表示制御プログラム
US20200285724A1 (en) Biometric authentication device, biometric authentication system, and computer program product
JP2009205570A (ja) 生体認証システム、生体認証方法及び生体認証プログラム
JP2008000464A (ja) 認証装置および認証方法
JP6631737B1 (ja) 生体認証装置およびプログラム
JP5299632B2 (ja) 個人認証装置、プログラム及び記録媒体
CN117237682A (zh) 一种证件验证方法、装置、存储介质及电子设备
JP2010231573A (ja) 静脈認証装置における登録情報作成方法及び装置
JP2016057850A (ja) 生体認証装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220428

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230404

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230602

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230912

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20231109

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20240206

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20240219

R151 Written notification of patent or utility model registration

Ref document number: 7452571

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151