JP2004126813A - Personal identification system, personal identification method, entry/exit management system and entry/exit management method - Google Patents

Personal identification system, personal identification method, entry/exit management system and entry/exit management method Download PDF

Info

Publication number
JP2004126813A
JP2004126813A JP2002287863A JP2002287863A JP2004126813A JP 2004126813 A JP2004126813 A JP 2004126813A JP 2002287863 A JP2002287863 A JP 2002287863A JP 2002287863 A JP2002287863 A JP 2002287863A JP 2004126813 A JP2004126813 A JP 2004126813A
Authority
JP
Japan
Prior art keywords
person
face
personal identification
identification information
collation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002287863A
Other languages
Japanese (ja)
Other versions
JP4177629B2 (en
Inventor
Takashi Suzuki
鈴木 貴志
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP2002287863A priority Critical patent/JP4177629B2/en
Publication of JP2004126813A publication Critical patent/JP2004126813A/en
Application granted granted Critical
Publication of JP4177629B2 publication Critical patent/JP4177629B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To improve operability by enabling a user to update a dictionary only by inputting personal identification information once, and stabilize the performance and accuracy of face matching processing. <P>SOLUTION: If 1:N face matching fails to match the face, an input of personal identification information is required. If the degree of matching between face data corresponding to input personal identification information and a shot face image is a given value or greater, the face data are updated. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】
【発明の属する技術分野】
この発明は、例えば、人物の顔画像を撮影し、撮影した顔画像と予め辞書に登録されている顔画像とを照合することにより個人認証を行う個人認証装置及び個人認証方法に関し、さらに、上記個人認証装置あるいは上記個人認証方法を用いた入退出管理システム及び入退出管理方法に関する。
【0002】
【従来の技術】
従来、認証対象者(被認証者、通行者)の少なくとも顔を含む画像(以降、顔画像という)を撮影し、撮影した顔画像と予め辞書に登録されている顔データとを照合することにより個人認証を行う個人認証装置がある。このような個人認証装置では、辞書に登録されている顔データ(辞書データ)を更新する場合、更新を行う人物は、最初に、本人を特定するための個人識別情報(ID情報)を入力する。これにより、個人認証装置は、入力された個人識別情報に基づいて個人を特定し、特定した個人の辞書データと撮影した人物の顔画像との顔照合することにより本人認証を行う。
【0003】
このような本人認証が成功した際に、個人認証装置では、個人識別情報で特定される人物の辞書データを撮影した顔画像により更新するようになっている。また、上記顔照合で本人認証ができなかった場合、個人認証装置は、さらに、当該人物に対して本人を認証するための個人認証情報(パスワードなど)の入力を要求する。この要求に対して当該人物が入力した個人認証情報が正しい場合、個人認証装置は、顔照合の閾値を下げ、再度、顔照合処理を行う。この顔照合処理で本人と特定できた場合、当該人物の顔データを更新している。
【0004】
しかしながら、上記のような個人認証装置では、辞書の更新を行う人物を特定するために、対象者に対して個人識別情報や個人認証情報などを数回入力する必要がある。このため操作性が悪く、ユーザとしては辞書データの更新作業が面倒である。
また、最初に、個人識別情報を入力して顔照合を行う場合、個人識別情報で照合対象とする人物が一意に特定されるため、似たような顔の人物が誤って認証されてしまう可能性が高くなることがある。この場合、似たような顔の人物に個人識別情報が使われると、辞書データが意図的に更新される可能性が高くなり、セキュリティ性能が低くなってしまう。
また、辞書データの更新を本人の意思とは関係なく更新しているため、利用者とっては辞書データが更新されたか否かが不明確である。
【0005】
【特許文献1】
特開平10−312462号公報
【0006】
【発明が解決しようとする課題】
上記したように、顔データを更新する際の操作性が悪かったり、セキュリティ性能が低くなったりするという問題点を解決するもので、予め登録されている顔データを更新する際の利用者の操作を簡略化し、操作性が良く、かつ、セキュリティの向上及び個人認証の精度向上が可能な個人認証装置、入退出管理装置、個人認証方法及び入退出管理方法を提供することを目的とする。
【0007】
【課題を解決するための手段】
この発明の個人認証装置は、少なくとも顔を含む画像を用いて個人認証を行うものにおいて、人物の顔データと前記顔データの人物を特定する個人特定情報とが登録されている登録手段と、被認証者の少なくとも顔を含む画像を撮影する撮影手段と、この撮影手段により撮影された被認証者の少なくとも顔を含む画像と前記登録手段に登録されている顔データとの照合度を判定する照合手段と、この照合手段により判定された照合度のうち最大照合度が所定の第1の閾値以上である場合、前記被認証者を前記最大照合度となった人物であることを認証する第1の認証手段と、前記照合手段により判定された照合度のうち最大照合度が前記第1の閾値よりも小さい場合、前記被認証者に個人特定情報の入力を案内する案内手段と、この案内手段による案内に応じて前記被認証者が入力した個人特定情報に対応する人物の顔データとの照合度が前記第1の閾値よりも小さい所定の第2の閾値以上である場合、前記被認証者を前記個人特定情報により特定される人物であることを認証する第2の認証手段と、この第2の認証手段により前記被認証者を前記個人特定情報で特定される人物であることを認証した場合、前記撮影手段で撮影した少なくとも顔を含む画像を用いて前記登録手段に登録されている前記個人特定情報に対応する顔データを更新する更新手段とを有する。
【0008】
この発明の入退出管理装置は、少なくとも顔を含む画像を用いて人物の入退出を管理するものにおいて、予め通行が許可されている人物の顔データと前記顔データの人物を特定する個人特定情報とが登録されている登録手段と、通行者の少なくとも顔を含む画像を撮影する撮影手段と、この撮影手段により撮影された通行者の少なくとも顔を含む画像と前記登録手段に登録されている顔データとの照合度を判定する照合手段と、この照合手段により判定された照合度のうち最大照合度が所定の第1の閾値以上である場合、前記通行者の通行を許可する第1の通行許可手段と、前記照合手段により判定された照合度のうち最大照合度が前記第1の閾値よりも小さい場合、前記通行者に個人特定情報の入力を案内する案内手段と、この案内手段による案内に応じて前記通行者が入力した個人特定情報に対応する人物の顔データとの照合度が前記第1の閾値よりも小さい所定の第2の閾値以上である場合、前記通行者の通行を許可する第2の通行許可手段と、この第2の通行許可手段により前記通行者の通行を許可した場合、前記撮影手段で撮影した少なくとも顔を含む画像を用いて前記登録手段に登録されている前記個人特定情報に対応する顔データを更新する更新手段とを有する。
【0009】
この発明の個人認証方法は、少なくとも顔を含む画像を用いて個人認証を行う個人認証装置に用いられる方法であって、被認証者の少なくとも顔を含む画像を撮影する撮影工程と、この撮影工程により撮影された被認証者の少なくとも顔を含む画像と、予め登録手段に人物を特定する個人特定情報に対応して登録されている人物の顔データとの照合度を判定する照合工程と、この照合工程により判定された照合度のうち最大照合度が所定の第1の閾値以上である場合、前記被認証者を前記最大照合度となった人物であることを認証する第1の認証工程と、前記照合工程により判定された照合度のうち最大照合度が前記第1の閾値よりも小さい場合、前記被認証者に個人特定情報の入力を案内する案内工程と、この案内工程による案内に応じて前記被認証者が入力した個人特定情報に対応する人物の顔データとの照合度が前記第1の閾値よりも小さい所定の第2の閾値以上である場合、前記被認証者を前記個人特定情報により特定される人物であることを認証する第2の認証工程と、この第2の認証工程により前記被認証者を前記個人特定情報で特定される人物であることを認証した場合、前記撮影工程で撮影した少なくとも顔を含む画像を用いて前記登録手段に登録されている前記個人特定情報に対応する顔データを更新する更新工程とを有する。
【0010】
この発明の入退出管理方法は、少なくとも顔を含む画像を用いて人物の入退出を管理する入退出管理装置に用いられる方法であって、通行者の少なくとも顔を含む画像を撮影する撮影工程と、この撮影工程により撮影された通行者の少なくとも顔を含む画像と、予め登録手段に人物を特定する個人特定情報に対応して登録されている通行が許可されている人物の顔データとの照合度を判定する照合工程と、この照合工程により判定された照合度のうち最大照合度が所定の第1の閾値以上である場合、前記通行者の通行を許可する第1の通行許可工程と、前記照合工程により判定された照合度のうち最大照合度が前記第1の閾値よりも小さい場合、前記通行者に個人特定情報の入力を案内する案内工程と、この案内工程による案内に応じて前記通行者が入力した個人特定情報に対応する人物の顔データとの照合度が前記第1の閾値よりも小さい所定の第2の閾値以上である場合、前記通行者の通行を許可する第2の通行許可工程と、この第2の通行許可工程により前記通行者の通行を許可した場合、前記撮影工程で撮影した少なくとも顔を含む画像を用いて前記登録手段に登録されている前記個人特定情報に対応する顔データを更新する更新工程とを有する。
【0011】
【発明の実施の形態】
以下、この発明の実施の形態について図面を参照して説明する。
図1は、この発明の実施の形態に係る入退出管理装置(個人認証装置)の例を示す図である。
図1に示すように、入退出管理装置は、ユーザインターフェース(I/F)ユニット1、認証機本体2、及びドア開閉機構3により構成されている。上記ユーザインターフェースユニット1と上記認証機本体2とは一体的に構成されていても良い。
上記ユーザインターフェースユニット1は、入退出管理する部屋などのセキュリティエリアへのドア(図示しない)の近傍に設置される。このユーザインターフェースユニット1は、図1に示すように、カメラ(撮影手段)11、表示部(報知手段)12、操作部13、照明14などを有している。
【0012】
上記カメラ11は、認証対象とする人物(被認証者、通行者)の顔画像を撮影するものである。上記カメラ11には、例えば、産業用カラーカメラ(CCDまたはCMOSイメージセンサを用いたビデオカメラ)が用いられる。なお、上記カメラ11はモノクロ画像を撮影するカメラであっても良い。上記表示部12は、撮影中の画像やユーザに対する案内などを表示するものである。上記操作部13は、テンキーなどにより構成される。この操作部13は、認証対象者が暗証番号などの個人特定情報を入力するものである。上記照明14は、上記カメラ11により撮影される人物の顔などを照らすものである。この照明14は、上記カメラ11が認証対象者の顔画像を撮影する際の補助照明として機能する。
【0013】
また、上記認証機本体2は、個人認証処理などを行うものであり、上記ユーザインターフェースユニット1の各部やドア開閉機構3と接続されている。上記認証機本体2は、図1に示すように、処理部21、画像入力部22、画像メモリ23、表示制御部24、操作部インターフェース(I/F)25、照明制御部26、ドア制御部(通行許可手段)27、及び辞書(登録手段)28などを有している。
【0014】
上記処理部21は、入退出管理装置全体の制御を行う。この処理部21は、図示しないプログラムメモリに記憶されているプログラムに基づいて顔画像の検出処理、顔画像からの顔の特徴量の抽出処理、顔画像の照合処理(照合手段)、認証処理(認証手段)或は辞書28内のデータに対する更新処理(更新手段)などの処理を行う機能を有している。上記画像入力部22は、上記カメラ11で撮影された画像を認証機本体2内に取り込むインターフェースである。この画像入力部22は、上記カメラ11から取り込んだ画像を画像メモリ23に記憶するようになっている。上記画像メモリ23は、上記カメラ11で撮影され、上記画像入力部22を介して認証機本体2内に取り込まれた画像などが記憶される。
【0015】
上記表示制御部24は、上記表示部12の表示制御を行うものである。上記操作部インターフェース25は、上記操作部13にて入力された情報を取り込むものである。上記照明制御部26は、上記照明14の点灯及び消灯を制御するものである。上記ドア制御部27は、上記ドア開閉機構3によるドアの開閉を制御するものである。上記辞書28は、上記顔照合用辞書として用いられ、登録者(セキュリティエリアへの入退出(ドアの通行)が許可されている人物)の顔画像などの顔データ、及び各顔データに対応する人物の個人特定情報などが記憶される。ここでは、上記ドア制御部27にて制御されるドア内のセキュリティエリアへの入場が許可されている人物の顔画像及び個人特定情報などが記憶されているものとする。また、上記辞書28には、上記カメラ11で撮影した画像から抽出される顔の特徴量と照合する登録者の顔画像に対する顔の特徴量を顔データとして記憶するようにしても良い。なお、辞書28は、認証機本体2の外に設けられるようにしても良いし、ネットワークインターフェースなどを介して通信可能な外部機器に設けられるようにしても良い。
【0016】
また、上記ドア開閉機構3は、上記認証機本体2のドア制御部27により制御され、図示しないセキュリティエリアのドアの開閉を行う機構である。このドア開閉機構3は、ドア自体を開閉するものであっても良いし、ドアに設置された鍵の開錠施錠を行う電気錠などであっても良い。
【0017】
次に、上記のように構成される入退出管理装置の動作について説明する。
図2及び図3は、入退出管理装置の動作を説明するためのフローチャートである。
すなわち、まず、上記カメラ11は、被認証者を撮影する(ステップS11)。すると、上記画像入力部22は、上記カメラ11にて撮影した画像を入力し、画像メモリ23に記憶する。上記カメラ11にて撮影した画像を上記画像メモリ23に取り込むと、上記処理部21は、上記画像メモリ23に記憶した画像から顔の画像を検出する処理を行う(ステップS12)。顔の画像は、目、鼻孔、唇の端点などの顔の特徴点を画像から抽出することにより検出される。顔画像を検出すると、上記処理部21は、撮影した画像から検出した顔画像と辞書28に登録されている顔データとの照合処理を行う(ステップS13)。
【0018】
この照合処理では、辞書28に複数の人物の顔データ(N人の顔データ)が登録されている場合、撮影した画像から検出した顔画像と辞書28に登録されている全ての顔データとの照合を行う(1:N照合)。この1:N照合の場合、照合結果としては、最大の照合度(最大照合度)が所定の第1閾値以上か否かにより最大照合度となった人物の顔データと照合したか否かが判断される。上記第1閾値は、1:N照合において被認証者の顔画像と辞書に登録されている顔データとが照合したか否かを判断するための閾値である。
【0019】
すなわち、処理部21は、撮影した画像から検出される顔画像と辞書28に登録されている全ての顔データとの照合度を算出し、算出した照合度のうち最大照合度が所定の第1閾値以上か否かを判断する(ステップS14)。この判断により最大照合度が第1閾値以上であると判断した場合(ステップS14、YES)、上記処理部21は、顔照合による個人認証が成功した旨を上記表示部12での案内表示などにより被認証者に報知する(ステップS15)。このような被認証者への個人認証が成功した旨の案内とともに、上記処理部21は、上記ドア制御部27によりドア開閉機構3を用いてドアを開放する(ステップS16)。これにより、被認証者は、ドア内のセキュリティエリアへの入退出が可能となる。
【0020】
また、上記照合処理の最大照合度が上記第1閾値よりも小さいと判断した場合(ステップS14、NO)、上記処理部21は、顔照合による個人認証が失敗した旨を上記表示部12により案内表示する(ステップS17)。この際、上記処理部21は、上記照合処理にて算出された照合度を図示しないメモリ等に保持しているものとする。さらに、上記処理部21は、1:Nの照合が失敗した場合、個人特定情報の入力ガイダンスを上記表示部12にて案内表示したり、図示しないスピーカ等を用いて音声案内したりする(ステップS18)。
【0021】
個人特定情報の入力ガイダンスを案内すると、処理部21は、上記操作部13により被認証者が個人特定情報を入力したか否かを判断する(ステップS19)。この判断では、例えば、所定時間内に個人特定情報が入力されたか否かにより個人特定情報が入力されたか否かを判断する。従って、所定時間内に個人特定情報が入力されない場合(ステップS19、NO)、処理部21は、当該被認証者に対する個人認証が失敗したものとし、処理を終了する。
【0022】
また、当該被認証者により個人特定情報が入力されたと判断した場合(ステップS19、YES)、上記処理部21は、入力された個人特定情報に対応する人物の顔データを辞書28から検索する検索処理を行う(ステップS20)。この検索結果に基づいて、上記処理部21は、上記被認証者により入力された個人特定情報に対応する顔データが辞書28に登録されているか否かを判断する。この判断により入力された個人特定情報に対応する顔データが存在しないと判断した場合、上記処理部21は、表示部12等により個人認証が失敗した旨と当該人物に対応する顔データの更新が不可である旨とを被認証者に報知し、処理を終了する。
【0023】
また、上記判断により入力された個人特定情報に対応する顔データが存在すると判断した場合(ステップS21、YES)、上記処理部21は、当該個人特定情報に対する顔データの更新処理を行う。この顔データの更新処理は、当該個人特定情報に対応する顔データとの照合度が所定の第2の閾値以上である場合に、上記カメラ11にて撮影した顔画像を用いて辞書28に登録されている顔データを更新するものである。
【0024】
すなわち、上記処理部21は、上記被認証者の顔画像と入力された個人特定情報に対応する顔データとの照合度を判定する(ステップS22)。この照合度の判定は、上記ステップS13の照合処理において算出された各顔データに対する照合度を図示しないメモリに保持しておき、上記個人特定情報に対応する顔データの照合度を読み出すようにしても良いし、新たに、被認証者の顔画像と個人特定情報に対応する顔データとの照合処理を行って照合度を算出するようにしても良い。
【0025】
上記判定により被認証者の顔画像と個人特定情報に対応する顔データとの照合度を判定すると、上記処理部21は、当該照合度が所定の第2閾値以上であるか否かを判断する(ステップS23)。上記第2閾値は、顔データの更新を許可するか否かを判断するための閾値である。つまり、上記照合度が第2閾値以上であれば、顔照合が成功(本人であることを認証)したものとして顔データの更新処理を行い、上記照合度が第2閾値以下であれば、顔照合が失敗したものとして顔データの更新を不可とするものである。
【0026】
また、上記ステップS13の照合処理で得られた最大照合度のみを図示しないメモリに保持しておき、その最大照合度となった人物の顔データのみを更新対象とするようにしても良い。この場合、個人特定情報に対応する顔データが最大類似度となった顔データか否かを判断し、この判断結果に基づいて顔データの更新を行うか否かを判定するようにすれば良い。これにより、この場合には1:Nの顔照合で最大照合度となった人物のみを対象とするため更新時のセキュリティ性能を更に高めることができる。
また、上記ステップS13の照合処理で上記第2閾値以上となった照合度のみを保持しておき、それらの照合度が第2閾値以上となった顔データを更新対象とするようにしても良い。この場合、被認証者が入力した個人特定情報に対応する顔データが第2閾値以上となった照合度の顔データであるか否かを判断し、この判断結果に基づいて顔データを更新するか否かを判定するようにすれば良い。これにより、この場合には個人特定情報に対応する顔データが第2閾値以上か否かを判定する処理が簡単に行えるため処理速度が向上できる。
【0027】
上記判断により照合度が上記第2閾値よりも小さいと判断した場合(ステップS23、NO)、上記処理部21は、当該人物に対する顔照合が失敗したことを上記表示部12等により上記被認証者に報知するとともに(ステップS24)、さらに、顔データの更新が不可能であることを報知する(ステップS25)。なお、この場合、被認証者は、上記操作部13を操作して、再度、上記のような処理を行わせるか、入退出管理装置の管理者に申し出て辞書28への顔データの再登録を行うようになる。
【0028】
また、上記判断により照合度が上記第2閾値以上であると判断した場合(ステップS23、YES)、上記処理部21は、顔照合による個人認証が成功した旨を上記表示部12等により被認証者に報知し(ステップS26)、上記カメラ11にて撮影した顔画像を用いた上記辞書28に登録されている当該人物の顔データの更新処理を行う(ステップS27)。この顔データの更新処理は、撮影した顔画像から抽出される特徴点などにより顔の特徴量を算出し、上記辞書28に登録されている顔データに反映させる処理である。
【0029】
この顔データの更新処理が完了すると、上記処理部21は、顔データを更新した旨を上記表示部12等により被認証者に報知する(ステップS28)。このような顔データの更新した旨の案内とともに、上記処理部21は、上記ドア制御部27によりドア開閉機構3を用いてドアを開放する(ステップS29)。これにより、上記被認証者は、ドア内のセキュリティエリアへの入退出が可能となるとともに、辞書28内の顔データが更新されたことを認識できる。
【0030】
すなわち、本実施の形態では、撮影した顔画像と辞書に登録されている顔データとの1:Nの顔照合を実施する。ここで、1:Nの顔照合が失敗した場合、顔照合が失敗した被認証者の顔画像を辞書の顔データに反映させる処理(更新処理)を行う。この更新処理において、顔データが本人のものであるかどうかを判定するために、本人しかしらない暗証番号などの個人特定情報を入力させる。顔照合装置側では、入力された個人特定情報の顔データが存在し、かつ、撮影した顔画像と辞書内の個人特定情報に対応する顔データとの照合結果が所定の照合度以上である場合に、その人物の顔データを更新するようにしたものである。すなわち、暗証番号など個人特定情報が外部に漏れた場合、個人特定情報が一致するだけで顔データを更新すると、その後の顔画像による個人認証処理に支障が発生する。このため、顔データを更新する場合、個人特定情報を入力した人物の顔画像と入力された個人特定情報に対応する顔データとの照合度がある一定以上でなければ、顔データを更新しないようにしたものである。
【0031】
このように、本実施の形態では、1:Nの顔照合を行って、その顔照合が失敗した場合に、個人特定情報を入力させるだけの操作で顔データを更新するようにしたものである。このため、利用者は個人特定情報を1回入力するだけで辞書更新を行うことができ、操作性が向上する。さらには、操作性が向上することにより、利用者による顔データの更新が頻繁に行われるようにすれば、顔照合処理の性能や精度も安定させることができる。また、最初は1:Nの顔照合を行うため、照合対象が一意に特定されることがなく、似た顔の人物であっても意図的に他人と誤認識される可能性が少ない。
【0032】
さらに、他人が顔照合に失敗した後に、他人の個人特定情報を盗用しても、撮影される顔画像と個人特定情報に対応する顔データとの照合において、ある一定値(第2閾値)以上の照合度が得られなければ、顔データが更新されないため、登録済の人物の顔データが他人に更新される危険性が低くなり、セキュリティを向上させることができる。
【0033】
また、本実施の形態においては、顔照合が失敗した後の本人情報入力時、画面上に表示や音声などで、利用者に顔データを更新する旨を報知し、さらに、顔データの更新結果なども画面上に表示や音声などで利用者に通知する。これにより、たとえば、髪型、照合中の表情、照合中の立ち位置などの日々変化する顔画像に対応でき、さらには、利用者に顔データの更新を行ったか否かなどを明確に報知することができるため、利用者の顔照合処理に対する理解が増し、顔照合処理の性能及び精度の向上が期待できる。
【0034】
【発明の効果】
以上詳述したように、この発明によれば、予め登録されている顔データを更新する際の利用者の操作を簡略化し、利便性が良く、かつ、セキュリティの向上及び個人認証の精度向上が可能な個人認証装置、入退出管理装置、個人認証方法及び入退出管理方法を提供できる。
【図面の簡単な説明】
【図1】この発明の実施の形態に係る入退出管理装置の概略構成を示す図。
【図2】入退出管理装置の動作例を説明するためのフローチャート。
【図3】入退出管理装置の動作例を説明するためのフローチャート。
【符号の説明】
1…ユーザインターフェース(I/F)ユニット、2…認証機本体、3…ドア開閉機構、11…カメラ、12…表示部、13…操作部、14…照明、21…処理部(照合手段)、22…画像入力部、23…画像メモリ、24…表示制御部、25…操作部インターフェース(I/F)、26…照明制御部、27…ドア制御部、28…辞書
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to, for example, a personal authentication device and a personal authentication method for performing personal authentication by photographing a face image of a person and comparing the photographed face image with a face image registered in a dictionary in advance. The present invention relates to an entry / exit management system and an entry / exit management method using the personal authentication device or the personal authentication method.
[0002]
[Prior art]
Conventionally, an image (hereinafter, referred to as a face image) including at least a face of a person to be authenticated (a person to be authenticated, a passerby) is photographed, and the photographed face image is compared with face data registered in a dictionary in advance. There is a personal authentication device for performing personal authentication. In such a personal authentication device, when updating face data (dictionary data) registered in a dictionary, a person to be updated first inputs personal identification information (ID information) for identifying the person. . As a result, the personal authentication device specifies an individual based on the input personal identification information, and performs personal authentication by comparing the dictionary data of the specified individual with the face image of the photographed person.
[0003]
When such personal authentication is successful, the personal authentication device updates the dictionary data of the person specified by the personal identification information with the captured face image. Further, when the personal identification is not successful in the face matching, the personal authentication device further requests the individual to input personal authentication information (such as a password) for authenticating the individual. If the personal authentication information input by the person in response to this request is correct, the personal authentication device lowers the threshold for face matching and performs the face matching process again. If the person can be identified by the face matching process, the face data of the person is updated.
[0004]
However, in the personal authentication device as described above, it is necessary to input personal identification information, personal authentication information, and the like to the target person several times in order to specify the person who updates the dictionary. For this reason, the operability is poor, and it is troublesome for the user to update the dictionary data.
Also, when performing face matching by inputting personal identification information first, the person to be compared is uniquely identified by the personal identification information, so a person with a similar face may be incorrectly authenticated. May increase. In this case, if the personal identification information is used for a person with a similar face, the possibility that the dictionary data is intentionally updated increases, and the security performance decreases.
In addition, since the update of the dictionary data is updated irrespective of the intention of the user, it is unclear for the user whether or not the dictionary data has been updated.
[0005]
[Patent Document 1]
Japanese Patent Application Laid-Open No. H10-31462
[Problems to be solved by the invention]
As described above, it solves the problem that the operability when updating face data is poor and the security performance is reduced, and the operation of the user when updating the previously registered face data is solved. It is an object of the present invention to provide a personal authentication device, an entry / exit management device, a personal authentication method, and an entry / exit management method, which simplify simplification, improve operability, and improve security and accuracy of personal authentication.
[0007]
[Means for Solving the Problems]
The personal authentication apparatus of the present invention performs personal authentication using at least an image including a face, and includes a registration unit in which face data of a person and personal identification information for specifying the person of the face data are registered; A photographing means for photographing an image including at least the face of the authenticator, and a collation for determining the degree of collation between the image containing at least the face of the person to be authenticated photographed by the photographing means and the face data registered in the registration means. Means for authenticating the subject to be authenticated as a person having the maximum collation degree when the maximum collation degree among the collation degrees determined by the collation means is equal to or greater than a predetermined first threshold value. Authentication means, and guidance means for guiding input of personal identification information to the person to be authenticated when the maximum collation degree among the collation degrees determined by the collation means is smaller than the first threshold value, and the guidance means If the degree of matching with the face data of the person corresponding to the personal identification information input by the person to be authenticated in response to the guidance is equal to or greater than a predetermined second threshold value smaller than the first threshold value, A second authentication unit that authenticates the person identified by the personal identification information, and authenticates the subject to be identified by the personal identification information by the second authentication unit. In the case, there is provided updating means for updating face data corresponding to the personal identification information registered in the registration means using an image including at least a face taken by the photographing means.
[0008]
An entry / exit management device according to the present invention manages entry / exit of a person using at least an image including a face, and includes face data of a person who is allowed to pass in advance and personal identification information for identifying the person of the face data. Registration means in which is registered, a photographing means for photographing an image including at least a face of a passerby, an image including at least a face of a passerby photographed by the photographing means, and a face registered in the registration means. A matching means for determining the degree of matching with the data, and a first traffic permitting the passerby when the maximum matching degree among the matching degrees determined by the matching means is equal to or greater than a predetermined first threshold. Permission means; guidance means for guiding the passer-by to input the personal identification information when the maximum collation degree among the collation degrees determined by the collation means is smaller than the first threshold value; When the degree of matching with the face data of the person corresponding to the personal identification information input by the passer-by in response to the guidance is equal to or greater than a predetermined second threshold smaller than the first threshold, A second traffic permitting means for permitting the traffic, and when the traffic of the passer is permitted by the second traffic permitting means, the second traffic permitting means is registered in the registering means by using an image including at least a face photographed by the photographing means. Updating means for updating face data corresponding to the personal identification information.
[0009]
The personal authentication method according to the present invention is a method used in a personal authentication device that performs personal authentication using an image including at least a face, and includes a photographing step of photographing an image including at least a face of a person to be authenticated, A collation step of judging the degree of collation between an image including at least the face of the person to be authenticated photographed by the user and face data of a person registered in advance in correspondence with personal identification information for identifying the person in the registration means; A first authentication step of authenticating that the person to be authenticated is a person having the maximum collation degree when the maximum collation degree among the collation degrees determined in the collation step is equal to or more than a predetermined first threshold value; In the case where the maximum collation degree among the collation degrees determined in the collation step is smaller than the first threshold, a guidance step of guiding the person to be authenticated to input personal identification information, hand When the degree of collation with the face data of the person corresponding to the personal identification information input by the person to be authenticated is equal to or greater than a predetermined second threshold smaller than the first threshold, the person to be authenticated is identified by the personal identification information. A second authentication step of authenticating that the person to be identified is a person identified by the personal identification information, and a second authentication step of authenticating the subject by the second authentication step. Updating the face data corresponding to the personal identification information registered in the registration means using an image including at least a face photographed in the step (a).
[0010]
The entry / exit management method of the present invention is a method used for an entry / exit management device that manages the entry / exit of a person using an image including at least a face, and a photographing step of capturing an image including at least a face of a passerby. And comparing the image including at least the face of the passerby photographed in this photographing process with the face data of a person who is permitted to pass and registered in advance in the registration means corresponding to the personal identification information for specifying the person. A collation step of judging a degree, a first traffic permitting step of permitting the passerby to pass when the maximum collation degree among the collation degrees determined in the collation step is equal to or greater than a predetermined first threshold value, In the case where the maximum collation degree among the collation degrees determined in the collation step is smaller than the first threshold value, a guidance step of guiding the passer-by to input the personal identification information, and When the degree of matching with the face data of the person corresponding to the personal identification information input by the passer is equal to or greater than a predetermined second threshold smaller than the first threshold, a second pass permitting the passer When the passer is allowed to pass by the permitting step and the second pass permitting step, the passerby responds to the personal identification information registered in the registration means using an image including at least a face taken in the photographing step. And updating the face data to be updated.
[0011]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a diagram illustrating an example of an entry / exit management device (personal authentication device) according to an embodiment of the present invention.
As shown in FIG. 1, the entry / exit management device includes a user interface (I / F) unit 1, an authentication device main body 2, and a door opening / closing mechanism 3. The user interface unit 1 and the authentication device main body 2 may be integrally formed.
The user interface unit 1 is installed near a door (not shown) to a security area such as a room for entry / exit management. As shown in FIG. 1, the user interface unit 1 includes a camera (photographing unit) 11, a display unit (notifying unit) 12, an operation unit 13, an illumination 14, and the like.
[0012]
The camera 11 captures a face image of a person to be authenticated (authenticatee, passerby). As the camera 11, for example, an industrial color camera (a video camera using a CCD or CMOS image sensor) is used. The camera 11 may be a camera that captures a monochrome image. The display unit 12 displays an image being photographed, guidance for a user, and the like. The operation unit 13 includes a numeric keypad and the like. The operation unit 13 is used by the person to be authenticated to input personal identification information such as a personal identification number. The illumination 14 illuminates a person's face or the like captured by the camera 11. The illumination 14 functions as an auxiliary illumination when the camera 11 captures a face image of the person to be authenticated.
[0013]
The authenticator main body 2 performs personal authentication processing and the like, and is connected to each unit of the user interface unit 1 and the door opening / closing mechanism 3. As shown in FIG. 1, the authenticator body 2 includes a processing unit 21, an image input unit 22, an image memory 23, a display control unit 24, an operation unit interface (I / F) 25, a lighting control unit 26, and a door control unit. (Traffic permitting means) 27, dictionary (registering means) 28, and the like.
[0014]
The processing unit 21 controls the entire entry / exit management device. The processing unit 21 performs face image detection processing, face feature amount extraction processing from face images, face image matching processing (matching means), and authentication processing (based on a program stored in a program memory (not shown)). It has a function of performing processing such as authentication processing) or update processing (update means) for data in the dictionary 28. The image input section 22 is an interface that takes in an image taken by the camera 11 into the authentication device main body 2. The image input unit 22 stores an image captured from the camera 11 in an image memory 23. The image memory 23 stores, for example, images captured by the camera 11 and captured into the authentication device main body 2 via the image input unit 22.
[0015]
The display control unit 24 controls display of the display unit 12. The operation section interface 25 captures information input by the operation section 13. The lighting control unit 26 controls turning on and off of the lighting 14. The door control unit 27 controls opening and closing of the door by the door opening and closing mechanism 3. The dictionary 28 is used as the face collation dictionary, and corresponds to face data such as a face image of a registrant (a person who is allowed to enter and exit the security area (pass through a door)), and to each face data. The personal identification information of the person is stored. Here, it is assumed that a face image and personal identification information of a person who is permitted to enter the security area in the door controlled by the door control unit 27 are stored. Further, the dictionary 28 may store, as face data, a face feature amount of a registrant's face image to be matched with a face feature amount extracted from an image captured by the camera 11. Note that the dictionary 28 may be provided outside the authentication device main body 2 or may be provided on an external device that can communicate via a network interface or the like.
[0016]
The door opening / closing mechanism 3 is a mechanism that is controlled by a door control unit 27 of the authentication device main body 2 and opens and closes a door in a security area (not shown). The door opening / closing mechanism 3 may open and close the door itself, or may be an electric lock that unlocks and locks a key installed on the door.
[0017]
Next, the operation of the entry / exit management device configured as described above will be described.
2 and 3 are flowcharts for explaining the operation of the entry / exit management device.
That is, first, the camera 11 takes an image of the person to be authenticated (step S11). Then, the image input unit 22 inputs an image captured by the camera 11 and stores the image in the image memory 23. When the image captured by the camera 11 is loaded into the image memory 23, the processing unit 21 performs a process of detecting a face image from the image stored in the image memory 23 (Step S12). The face image is detected by extracting feature points of the face such as eyes, nostrils, and lip end points from the image. Upon detecting the face image, the processing unit 21 performs a matching process between the face image detected from the captured image and the face data registered in the dictionary 28 (step S13).
[0018]
In this matching process, when face data of a plurality of persons (face data of N persons) is registered in the dictionary 28, the face image detected from the photographed image and all face data registered in the dictionary 28 are compared. Collation is performed (1: N collation). In the case of the 1: N collation, the collation result indicates whether or not the collation with the face data of the person having the maximum collation degree is determined based on whether or not the maximum collation degree (maximum collation degree) is equal to or greater than a predetermined first threshold value. Is determined. The first threshold is a threshold for determining whether or not a face image of a person to be authenticated and face data registered in a dictionary have been compared in 1: N matching.
[0019]
That is, the processing unit 21 calculates the matching degree between the face image detected from the captured image and all the face data registered in the dictionary 28, and the maximum matching degree among the calculated matching degrees is a predetermined first matching degree. It is determined whether it is equal to or more than the threshold (step S14). When it is determined that the maximum collation degree is equal to or greater than the first threshold value (step S14, YES), the processing unit 21 informs the user that the personal authentication by the face collation has succeeded by displaying the guidance on the display unit 12 or the like. A notification is sent to the person to be authenticated (step S15). The processing unit 21 opens the door using the door opening / closing mechanism 3 by the door control unit 27 together with the guidance to the effect that the personal authentication has been successful to the person to be authenticated (step S16). Thus, the person to be authenticated can enter and exit the security area inside the door.
[0020]
If it is determined that the maximum matching degree of the matching processing is smaller than the first threshold value (step S14, NO), the processing unit 21 informs the display unit 12 that personal authentication by face matching has failed. It is displayed (step S17). At this time, it is assumed that the processing unit 21 stores the collation degree calculated in the collation processing in a memory (not shown) or the like. Further, when the 1: N collation fails, the processing unit 21 guides and displays the input guidance of the personal identification information on the display unit 12 or provides voice guidance using a speaker or the like (not shown) (step). S18).
[0021]
When guiding the input guidance of the personal identification information, the processing unit 21 determines whether or not the person to be authenticated has input the personal identification information by the operation unit 13 (step S19). In this determination, for example, it is determined whether or not the personal identification information has been input, based on whether or not the personal identification information has been input within a predetermined time. Therefore, when the personal identification information is not input within the predetermined time (step S19, NO), the processing unit 21 determines that the personal authentication for the subject has failed, and ends the processing.
[0022]
If it is determined that the personal identification information has been input by the person to be authenticated (step S19, YES), the processing unit 21 searches the dictionary 28 for the face data of the person corresponding to the input personal identification information. Processing is performed (step S20). Based on the search result, the processing unit 21 determines whether or not the face data corresponding to the personal identification information input by the person to be authenticated is registered in the dictionary 28. When it is determined that the face data corresponding to the input personal identification information does not exist, the processing unit 21 determines that the personal authentication has failed by the display unit 12 or the like and updates the face data corresponding to the person. The fact that it is impossible is notified to the person to be authenticated, and the process is terminated.
[0023]
When it is determined that there is face data corresponding to the input personal identification information (step S21, YES), the processing unit 21 performs a face data update process on the personal identification information. In the face data update process, when the degree of matching with the face data corresponding to the personal identification information is equal to or greater than a predetermined second threshold, the face data is registered in the dictionary 28 using the face image captured by the camera 11. The updated face data is updated.
[0024]
That is, the processing unit 21 determines the degree of collation between the face image of the person to be authenticated and the face data corresponding to the input personal identification information (step S22). The determination of the matching degree is performed by storing the matching degree for each face data calculated in the matching processing in step S13 in a memory (not shown), and reading out the matching degree of the face data corresponding to the personal identification information. Alternatively, a new matching process may be performed between the face image of the person to be authenticated and face data corresponding to the personal identification information to calculate the matching degree.
[0025]
When the degree of matching between the face image of the person to be authenticated and the face data corresponding to the personal identification information is determined by the above determination, the processing unit 21 determines whether the degree of matching is equal to or greater than a second predetermined threshold. (Step S23). The second threshold is a threshold for determining whether to permit updating of face data. That is, if the matching degree is equal to or greater than the second threshold, the face data is updated assuming that the face matching is successful (authentication that the user is authenticated). If the matching degree is equal to or less than the second threshold, the face The face data cannot be updated because the verification has failed.
[0026]
Alternatively, only the maximum collation obtained in the collation processing in step S13 may be stored in a memory (not shown), and only the face data of the person having the maximum collation may be updated. In this case, it is determined whether or not the face data corresponding to the personal identification information is the face data having the maximum similarity, and whether to update the face data may be determined based on the determination result. . Accordingly, in this case, since only the person having the maximum matching degree in the 1: N face matching is targeted, the security performance at the time of updating can be further improved.
Alternatively, only the matching degrees that have become equal to or greater than the second threshold value in the matching processing in step S13 may be held, and face data whose matching degrees have become equal to or greater than the second threshold value may be set as an update target. . In this case, it is determined whether or not the face data corresponding to the personal identification information input by the person to be authenticated is the face data having the matching degree equal to or larger than the second threshold, and the face data is updated based on the determination result. It is sufficient to determine whether or not this is the case. Thus, in this case, the processing speed can be improved because the processing for determining whether the face data corresponding to the personal identification information is equal to or larger than the second threshold value can be easily performed.
[0027]
When it is determined that the collation degree is smaller than the second threshold value (step S23, NO), the processing unit 21 determines from the display unit 12 or the like that the face authentication has failed for the person. (Step S24), and further notifies that face data cannot be updated (step S25). In this case, the person to be authenticated operates the operation unit 13 to perform the above-described processing again, or requests the administrator of the entry / exit management apparatus to re-register the face data in the dictionary 28. Will do.
[0028]
When it is determined that the collation degree is equal to or greater than the second threshold value (step S23, YES), the processing unit 21 confirms by the display unit 12 or the like that the personal authentication by the face collation is successful. The user is notified (step S26), and the face data of the person registered in the dictionary 28 using the face image captured by the camera 11 is updated (step S27). The face data updating process is a process of calculating a feature amount of the face based on feature points extracted from the captured face image and reflecting the calculated feature amount on the face data registered in the dictionary 28.
[0029]
When the face data updating process is completed, the processing unit 21 notifies the authenticated person to the effect that the face data has been updated on the display unit 12 and the like (step S28). The processing unit 21 opens the door using the door opening / closing mechanism 3 by the door control unit 27 together with the guidance to the effect that the face data has been updated (step S29). As a result, the person to be authenticated can enter and exit the security area in the door, and can recognize that the face data in the dictionary 28 has been updated.
[0030]
That is, in the present embodiment, 1: N face matching between a captured face image and face data registered in a dictionary is performed. Here, if the 1: N face matching fails, a process (update process) of reflecting the face image of the subject who failed in the face matching on the face data in the dictionary is performed. In this update process, personal identification information such as a personal identification number, which is unique to the person, is input in order to determine whether the face data belongs to the person. On the face matching device side, when face data of the input personal identification information exists, and the matching result between the captured face image and the face data corresponding to the personal identification information in the dictionary is equal to or greater than a predetermined matching degree Then, the face data of the person is updated. That is, when personal identification information such as a personal identification number is leaked to the outside, if face data is updated only by matching the personal identification information, a problem occurs in subsequent personal authentication processing using a face image. For this reason, when updating the face data, the face data is not updated unless the degree of matching between the face image of the person who has input the personal identification information and the face data corresponding to the input personal identification information is not less than a certain level. It was made.
[0031]
As described above, in the present embodiment, the face data is updated by performing an operation of only inputting the personal identification information when the face verification of 1: N is performed and the face verification fails. . Therefore, the user can update the dictionary by inputting the personal identification information only once, and the operability is improved. Furthermore, if the operability is improved so that the face data is frequently updated by the user, the performance and accuracy of the face matching process can be stabilized. In addition, since the face matching of 1: N is performed at first, the matching target is not uniquely specified, and even a person with a similar face is less likely to be intentionally mistakenly recognized as another person.
[0032]
Furthermore, even if the individual identification information of another person is stolen after the failure of face identification by another person, the collation between the captured face image and the face data corresponding to the individual identification information is equal to or more than a certain value (second threshold). If the degree of collation is not obtained, the face data is not updated, so that the risk that face data of a registered person is updated by another person is reduced, and security can be improved.
[0033]
Also, in the present embodiment, when the personal information is input after the face verification has failed, the user is notified on the screen that the face data is to be updated by display or sound, and further, the face data update result is displayed. Is also displayed to the user on the screen or by sound. This makes it possible to deal with daily changing face images such as hairstyles, facial expressions during collation, standing positions during collation, etc., and to clearly inform the user whether or not face data has been updated. Therefore, the user's understanding of the face matching process is increased, and the performance and accuracy of the face matching process can be expected to be improved.
[0034]
【The invention's effect】
As described in detail above, according to the present invention, it is possible to simplify the operation of the user when updating face data registered in advance, improve convenience, and improve security and accuracy of personal authentication. It is possible to provide a possible personal authentication device, an entry / exit management device, a personal authentication method, and an entry / exit management method.
[Brief description of the drawings]
FIG. 1 is a diagram showing a schematic configuration of an entry / exit management device according to an embodiment of the present invention.
FIG. 2 is a flowchart for explaining an operation example of the entry / exit management device.
FIG. 3 is a flowchart for explaining an operation example of the entry / exit management device.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 ... User interface (I / F) unit, 2 ... Authentication machine main body, 3 ... Door opening / closing mechanism, 11 ... Camera, 12 ... Display part, 13 ... Operation part, 14 ... Lighting, 21 ... Processing part (collation means), 22 image input unit, 23 image memory, 24 display control unit, 25 operation unit interface (I / F), 26 illumination control unit, 27 door control unit, 28 dictionary

Claims (6)

少なくとも顔を含む画像を用いて個人認証を行う個人認証装置において、
人物の顔データと前記顔データの人物を特定する個人特定情報とが登録されている登録手段と、
被認証者の少なくとも顔を含む画像を撮影する撮影手段と、
この撮影手段により撮影された被認証者の少なくとも顔を含む画像と前記登録手段に登録されている顔データとの照合度を判定する照合手段と、
この照合手段により判定された照合度のうち最大照合度が所定の第1の閾値以上である場合、前記被認証者を前記最大照合度となった人物であることを認証する第1の認証手段と、
前記照合手段により判定された照合度のうち最大照合度が前記第1の閾値よりも小さい場合、前記被認証者に個人特定情報の入力を案内する案内手段と、
この案内手段による案内に応じて前記被認証者が入力した個人特定情報に対応する人物の顔データとの照合度が前記第1の閾値よりも小さい所定の第2の閾値以上である場合、前記被認証者を前記個人特定情報により特定される人物であることを認証する第2の認証手段と、
この第2の認証手段により前記被認証者を前記個人特定情報で特定される人物であることを認証した場合、前記撮影手段で撮影した少なくとも顔を含む画像を用いて前記登録手段に登録されている前記個人特定情報に対応する顔データを更新する更新手段と、
を具備することを特徴とする個人認証装置。
In a personal authentication device that performs personal authentication using an image including at least a face,
Registration means in which face data of a person and personal identification information for identifying the person of the face data are registered,
Photographing means for photographing an image including at least the face of the subject;
Collating means for determining the degree of collation between an image including at least the face of the person to be authenticated photographed by the photographing means and face data registered in the registration means;
A first authentication unit that authenticates the person to be authenticated as a person having the maximum collation degree when the maximum collation degree among the collation degrees determined by the collation means is equal to or greater than a predetermined first threshold value; When,
Guiding means for guiding the input of personal identification information to the person to be authenticated, when a maximum matching degree among the matching degrees determined by the matching means is smaller than the first threshold value,
When the degree of matching with the face data of the person corresponding to the personal identification information input by the person to be authenticated in response to the guidance by the guidance means is equal to or greater than a predetermined second threshold smaller than the first threshold, Second authentication means for authenticating a person to be authenticated as a person specified by the personal identification information;
When the second authentication unit authenticates the person to be authenticated as a person specified by the personal identification information, the second person is registered in the registration unit using an image including at least a face photographed by the photographing unit. Updating means for updating face data corresponding to the personal identification information,
A personal authentication device comprising:
さらに、前記更新手段により前記登録手段に登録されている顔データを更新した際、前記被認証者に対して前記登録手段に登録されている顔データを更新した旨を報知する報知手段を有することを特徴とする前記請求項1に記載の個人認証装置。Further, when the updating unit updates the face data registered in the registration unit, the notifying unit notifies the authenticated person that the face data registered in the registration unit has been updated. The personal authentication device according to claim 1, wherein: 少なくとも顔を含む画像を用いて人物の入退出を管理する入退出管理装置において、
予め通行が許可されている人物の顔データと前記顔データの人物を特定する個人特定情報とが登録されている登録手段と、
通行者の少なくとも顔を含む画像を撮影する撮影手段と、
この撮影手段により撮影された通行者の少なくとも顔を含む画像と前記登録手段に登録されている顔データとの照合度を判定する照合手段と、
この照合手段により判定された照合度のうち最大照合度が所定の第1の閾値以上である場合、前記通行者の通行を許可する第1の通行許可手段と、
前記照合手段により判定された照合度のうち最大照合度が前記第1の閾値よりも小さい場合、前記通行者に個人特定情報の入力を案内する案内手段と、
この案内手段による案内に応じて前記通行者が入力した個人特定情報に対応する人物の顔データとの照合度が前記第1の閾値よりも小さい所定の第2の閾値以上である場合、前記通行者の通行を許可する第2の通行許可手段と、
この第2の通行許可手段により前記通行者の通行を許可した場合、前記撮影手段で撮影した少なくとも顔を含む画像を用いて前記登録手段に登録されている前記個人特定情報に対応する顔データを更新する更新手段と、
を有することを特徴とする入退出管理装置。
In an entry / exit management device that manages entry / exit of a person using an image including at least a face,
Registration means in which face data of a person who is permitted to pass in advance and personal identification information for identifying the person of the face data are registered,
Photographing means for photographing an image including at least a face of a passerby;
A matching unit that determines a matching degree between an image including at least a face of a passerby photographed by the photographing unit and face data registered in the registration unit;
A first traffic permitting means for permitting the passerby to pass when the maximum collation degree among the collation degrees determined by the collating means is equal to or more than a predetermined first threshold value;
A guidance unit that guides the passer-by to input the personal identification information, when the maximum collation degree among the collation degrees determined by the collation unit is smaller than the first threshold value,
If the degree of matching with the face data of the person corresponding to the personal identification information entered by the passer-by in response to the guidance by the guide means is equal to or greater than a predetermined second threshold smaller than the first threshold, Second traffic permitting means for permitting traffic of persons,
When the second traffic permitting means permits the traffic of the passer, the face data corresponding to the personal identification information registered in the registering means is registered using an image including at least a face photographed by the photographing means. Updating means for updating;
An entry / exit management device comprising:
さらに、前記更新手段により前記登録手段に登録されている顔データを更新した際、前記通行者に対して前記登録手段に登録されている顔データを更新した旨を報知する報知手段を有することを特徴とする前記請求項3に記載の入退出管理装置。Further, when the updating means updates the face data registered in the registration means, the information processing apparatus has a notifying means for notifying the passerby that the face data registered in the registration means has been updated. The entry / exit management device according to claim 3, characterized in that: 少なくとも顔を含む画像を用いて個人認証を行う個人認証装置に用いられる個人認証方法であって、
被認証者の少なくとも顔を含む画像を撮影する撮影工程と、
この撮影工程により撮影された被認証者の少なくとも顔を含む画像と、予め登録手段に人物を特定する個人特定情報に対応して登録されている人物の顔データとの照合度を判定する照合工程と、
この照合工程により判定された照合度のうち最大照合度が所定の第1の閾値以上である場合、前記被認証者を前記最大照合度となった人物であることを認証する第1の認証工程と、
前記照合工程により判定された照合度のうち最大照合度が前記第1の閾値よりも小さい場合、前記被認証者に個人特定情報の入力を案内する案内工程と、
この案内工程による案内に応じて前記被認証者が入力した個人特定情報に対応する人物の顔データとの照合度が前記第1の閾値よりも小さい所定の第2の閾値以上である場合、前記被認証者を前記個人特定情報により特定される人物であることを認証する第2の認証工程と、
この第2の認証工程により前記被認証者を前記個人特定情報で特定される人物であることを認証した場合、前記撮影工程で撮影した少なくとも顔を含む画像を用いて前記登録手段に登録されている前記個人特定情報に対応する顔データを更新する更新工程と、
を有することを特徴とする個人認証方法。
A personal authentication method used for a personal authentication device that performs personal authentication using an image including at least a face,
A photographing step of photographing an image including at least the face of the subject,
A collation step of judging the degree of collation between an image including at least the face of the person to be authenticated photographed in the photographing step and face data of a person registered in advance in correspondence with personal identification information for identifying the person in the registration means When,
A first authentication step of authenticating the person to be authenticated as a person having the maximum collation degree when the maximum collation degree among the collation degrees determined in the collation step is equal to or greater than a predetermined first threshold value; When,
A guiding step of guiding the authenticated person to input personal identification information, when the maximum matching degree among the matching degrees determined in the matching step is smaller than the first threshold value,
When the degree of matching with the face data of the person corresponding to the personal identification information input by the person to be authenticated in accordance with the guidance in the guidance step is equal to or greater than a predetermined second threshold smaller than the first threshold, A second authentication step of authenticating a person to be authenticated as a person specified by the personal identification information;
In a case where the second authentication step authenticates the person to be authenticated as a person specified by the personal identification information, the second person is registered in the registration unit using an image including at least a face photographed in the photographing step. An updating step of updating face data corresponding to the personal identification information,
A personal authentication method comprising:
少なくとも顔を含む画像を用いて人物の入退出を管理する入退出管理装置に用いられる入退出管理方法であって、
通行者の少なくとも顔を含む画像を撮影する撮影工程と、
この撮影工程により撮影された通行者の少なくとも顔を含む画像と、予め登録手段に人物を特定する個人特定情報に対応して登録されている通行が許可されている人物の顔データとの照合度を判定する照合工程と、
この照合工程により判定された照合度のうち最大照合度が所定の第1の閾値以上である場合、前記通行者の通行を許可する第1の通行許可工程と、
前記照合工程により判定された照合度のうち最大照合度が前記第1の閾値よりも小さい場合、前記通行者に個人特定情報の入力を案内する案内工程と、
この案内工程による案内に応じて前記通行者が入力した個人特定情報に対応する人物の顔データとの照合度が前記第1の閾値よりも小さい所定の第2の閾値以上である場合、前記通行者の通行を許可する第2の通行許可工程と、
この第2の通行許可工程により前記通行者の通行を許可した場合、前記撮影工程で撮影した少なくとも顔を含む画像を用いて前記登録手段に登録されている前記個人特定情報に対応する顔データを更新する更新工程と、
を有することを特徴とする入退出管理方法。
An entry / exit management method used in an entry / exit management device that manages entry / exit of a person using at least an image including a face,
A photographing step of photographing an image including at least a face of a passerby;
Degree of collation between the image including at least the face of the passerby photographed in this photographing process and the face data of a person who is permitted to pass and is registered in advance in the registration means corresponding to the personal identification information for specifying the person A matching step of determining
A first traffic permitting step of permitting the passerby to pass when the maximum collation degree among the collation degrees determined in the collating step is equal to or greater than a predetermined first threshold value;
A guiding step of guiding the passer-by to input the personal identification information, when the maximum matching degree among the matching degrees determined in the matching step is smaller than the first threshold value,
If the degree of matching with the face data of the person corresponding to the personal identification information input by the passer-by in accordance with the guidance in the guide step is equal to or greater than a predetermined second threshold smaller than the first threshold, A second traffic permitting step of permitting traffic of a person;
When the passerby is allowed to pass by the second pass permitting step, face data corresponding to the personal identification information registered in the registering means is registered using an image including at least a face photographed in the photographing step. An update process to update,
An entry / exit management method comprising:
JP2002287863A 2002-09-30 2002-09-30 Personal authentication device, personal authentication method, entrance / exit management device, and entrance / exit management method Expired - Fee Related JP4177629B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002287863A JP4177629B2 (en) 2002-09-30 2002-09-30 Personal authentication device, personal authentication method, entrance / exit management device, and entrance / exit management method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002287863A JP4177629B2 (en) 2002-09-30 2002-09-30 Personal authentication device, personal authentication method, entrance / exit management device, and entrance / exit management method

Publications (2)

Publication Number Publication Date
JP2004126813A true JP2004126813A (en) 2004-04-22
JP4177629B2 JP4177629B2 (en) 2008-11-05

Family

ID=32280526

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002287863A Expired - Fee Related JP4177629B2 (en) 2002-09-30 2002-09-30 Personal authentication device, personal authentication method, entrance / exit management device, and entrance / exit management method

Country Status (1)

Country Link
JP (1) JP4177629B2 (en)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006202208A (en) * 2005-01-24 2006-08-03 Toshiba Corp Biometric authentication system, biometric authentication method and access control system
JP2007206941A (en) * 2006-02-01 2007-08-16 Konica Minolta Business Technologies Inc Biometric authentication device, biomeric authentication system and biometric data mangement method
JP2007219731A (en) * 2006-02-15 2007-08-30 Toshiba Tec Corp Method and apparatus for personal authentication
JP2007226519A (en) * 2006-02-23 2007-09-06 Hitachi Ltd System, method, and program for updating and managing biological information
JP2007241383A (en) * 2006-03-06 2007-09-20 Omron Corp Information processor and method, and program
JP2009042802A (en) * 2007-08-06 2009-02-26 Hitachi Software Eng Co Ltd Authentication system
JP2010141764A (en) * 2008-12-15 2010-06-24 Victor Co Of Japan Ltd Imaging apparatus, imaging method, image signal reproducing device, and image signal reproducing method
WO2012140830A1 (en) * 2011-04-11 2012-10-18 日立オムロンターミナルソリューションズ株式会社 Automatic transaction device, biometric authentication unit, and biometric authentication method
KR101443960B1 (en) * 2012-02-22 2014-11-03 주식회사 팬택 Electronic device and method for user identification
US9245172B2 (en) 2013-02-22 2016-01-26 Fuji Xerox Co., Ltd. Authentication apparatus, authentication method, and non-transitory computer readable medium
JP2016018398A (en) * 2014-07-08 2016-02-01 株式会社 日立産業制御ソリューションズ Biometric authentication device, authentication control method and entering/leaving management system
JP6159897B1 (en) * 2017-01-12 2017-07-05 株式会社アビスト Reception device, reception system, and reception program
CN107704809A (en) * 2017-09-11 2018-02-16 安徽慧视金瞳科技有限公司 Based on interference characteristic vector data collection 1 than N face feature vector comparison methods
JP2018147475A (en) * 2017-03-08 2018-09-20 グローリー株式会社 Face authentication system and registration method of input face data
WO2018168369A1 (en) * 2017-03-14 2018-09-20 株式会社Seltech Machine learning device and machine learning program
JP2019144695A (en) * 2018-02-16 2019-08-29 グローリー株式会社 Face authentication system, face authentication server and face authentication method
JP2021046121A (en) * 2019-09-19 2021-03-25 フォルシアクラリオン・エレクトロニクス株式会社 Control device, on-vehicle device and control method
WO2021214970A1 (en) * 2020-04-24 2021-10-28 日本電気株式会社 Information processing device, system, facial image updating method, and storage medium

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5900052B2 (en) 2012-03-15 2016-04-06 オムロン株式会社 Registration determination apparatus, control method and control program thereof, and electronic device
US20210200845A1 (en) * 2019-12-31 2021-07-01 Atlassian Pty Ltd. Illumination-based user authentication

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000057343A (en) * 1998-08-14 2000-02-25 Fujitsu Denso Ltd Fingerprint collating method and fingerprint collation system
JP2000259278A (en) * 1999-03-12 2000-09-22 Fujitsu Ltd Device and method for performing indivisual authentication by using living body information
JP2002140708A (en) * 2000-11-01 2002-05-17 Nec Soft Ltd System and method for personal identification by fingerprint
JP2003141542A (en) * 2001-11-06 2003-05-16 Toshiba Corp Face image collating device, system and method

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000057343A (en) * 1998-08-14 2000-02-25 Fujitsu Denso Ltd Fingerprint collating method and fingerprint collation system
JP2000259278A (en) * 1999-03-12 2000-09-22 Fujitsu Ltd Device and method for performing indivisual authentication by using living body information
JP2002140708A (en) * 2000-11-01 2002-05-17 Nec Soft Ltd System and method for personal identification by fingerprint
JP2003141542A (en) * 2001-11-06 2003-05-16 Toshiba Corp Face image collating device, system and method

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006202208A (en) * 2005-01-24 2006-08-03 Toshiba Corp Biometric authentication system, biometric authentication method and access control system
JP2007206941A (en) * 2006-02-01 2007-08-16 Konica Minolta Business Technologies Inc Biometric authentication device, biomeric authentication system and biometric data mangement method
JP2007219731A (en) * 2006-02-15 2007-08-30 Toshiba Tec Corp Method and apparatus for personal authentication
JP2007226519A (en) * 2006-02-23 2007-09-06 Hitachi Ltd System, method, and program for updating and managing biological information
JP2007241383A (en) * 2006-03-06 2007-09-20 Omron Corp Information processor and method, and program
JP2009042802A (en) * 2007-08-06 2009-02-26 Hitachi Software Eng Co Ltd Authentication system
JP2010141764A (en) * 2008-12-15 2010-06-24 Victor Co Of Japan Ltd Imaging apparatus, imaging method, image signal reproducing device, and image signal reproducing method
WO2012140830A1 (en) * 2011-04-11 2012-10-18 日立オムロンターミナルソリューションズ株式会社 Automatic transaction device, biometric authentication unit, and biometric authentication method
JP2012221266A (en) * 2011-04-11 2012-11-12 Hitachi Omron Terminal Solutions Corp Automatic transaction device, biometrics unit and biometrics method
KR101443960B1 (en) * 2012-02-22 2014-11-03 주식회사 팬택 Electronic device and method for user identification
US9245172B2 (en) 2013-02-22 2016-01-26 Fuji Xerox Co., Ltd. Authentication apparatus, authentication method, and non-transitory computer readable medium
JP2016018398A (en) * 2014-07-08 2016-02-01 株式会社 日立産業制御ソリューションズ Biometric authentication device, authentication control method and entering/leaving management system
JP6159897B1 (en) * 2017-01-12 2017-07-05 株式会社アビスト Reception device, reception system, and reception program
JP2018112945A (en) * 2017-01-12 2018-07-19 株式会社アビスト Reception device, reception system and reception program
JP2018147475A (en) * 2017-03-08 2018-09-20 グローリー株式会社 Face authentication system and registration method of input face data
JP7166060B2 (en) 2017-03-08 2022-11-07 グローリー株式会社 Face authentication system and registration method of input face data
WO2018168369A1 (en) * 2017-03-14 2018-09-20 株式会社Seltech Machine learning device and machine learning program
JPWO2018168369A1 (en) * 2017-03-14 2020-01-30 積水ハウス株式会社 Machine learning device and machine learning program
JP7082444B2 (en) 2017-03-14 2022-06-08 積水ハウス株式会社 Machine learning equipment and machine learning programs
CN107704809A (en) * 2017-09-11 2018-02-16 安徽慧视金瞳科技有限公司 Based on interference characteristic vector data collection 1 than N face feature vector comparison methods
JP2019144695A (en) * 2018-02-16 2019-08-29 グローリー株式会社 Face authentication system, face authentication server and face authentication method
JP7166061B2 (en) 2018-02-16 2022-11-07 グローリー株式会社 Face authentication system, face authentication server and face authentication method
JP2021046121A (en) * 2019-09-19 2021-03-25 フォルシアクラリオン・エレクトロニクス株式会社 Control device, on-vehicle device and control method
WO2021214970A1 (en) * 2020-04-24 2021-10-28 日本電気株式会社 Information processing device, system, facial image updating method, and storage medium
JP7364057B2 (en) 2020-04-24 2023-10-18 日本電気株式会社 Information processing device, system, face image update method and program

Also Published As

Publication number Publication date
JP4177629B2 (en) 2008-11-05

Similar Documents

Publication Publication Date Title
JP4177629B2 (en) Personal authentication device, personal authentication method, entrance / exit management device, and entrance / exit management method
KR100495516B1 (en) Person recognition apparatus
KR101242390B1 (en) Method, apparatus and computer-readable recording medium for identifying user
JP2009104599A (en) Face authenticating apparatus, face authenticating method and face authenticating system
JP5932317B2 (en) Face authentication database management method, face authentication database management apparatus, and face authentication database management program
JP2008075424A (en) Fingerprint lock system
JP2009211488A (en) Authentication device
JP4850609B2 (en) Face image matching device
KR100707747B1 (en) Personal authentication apparatus
JP2009265769A (en) Biometrics device and access control system
JP2010009389A (en) Dictionary information registration device, dictionary information registration method, face authentication device, and access control system
JP4705511B2 (en) Face image matching device
JP2017004398A (en) Authentication device and authentication method
JP2003233816A (en) Access control system
KR20100010465A (en) Apparatus and method for managing entrance using pin and biometrics
JP2007233916A (en) Security system and security method
JP2003281099A (en) System and method for authenticating biological information image
JP4705512B2 (en) Face image matching device
KR101926709B1 (en) Control apparatus for biometric and method thereof
JP2003036442A (en) Device for authenticating individual
JP2004355088A (en) Personal identification system, method, and program
JP2005292994A (en) Personal recognition system and passage control system
KR102376038B1 (en) Face Perception Improving System by Using UWB Sensor and Method thereof
JP2006132195A (en) Entry control system
JP4767751B2 (en) Face image matching device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20050812

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080725

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20080819

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20080822

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110829

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110829

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120829

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120829

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130829

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees