JP2014219704A - 顔認証システム - Google Patents

Abstract

【課題】顔写真等の不正行為と誤判定された人物に対し、誤判定を解消するための動きを効果的に意識付けることが可能な顔認証システムを提供する。
【解決手段】所定の認証領域を通行する人物の顔認証を行う顔認証システムにおいて、認証領域を撮影して人物の顔を含む顔画像を順次取得し、予め登録された利用者の登録顔画像と照合する。この照合処理と並行して、顔画像が写真等による成りすましによるものか否か判定し、登録顔画像と照合一致し、且つ、成りすましと判定されていない人物を登録利用者として認証する。また、成りすましと判定した旨を示す画策情報を不正判定人物に対して報知する報知手段を有し、この報知手段は、成りすましと判定したとき直ちに画策情報の報知を行わず、不正判定人物が所定の報知条件を満たすまでは報知を一時的に保留する。
【選択図】図２

Description

本発明は、歩行する人物が予め登録された利用者であるか顔画像を用いて認証する顔認証システムに関する。

近年、オフィスビルの出入管理システム等において、人物の顔の特徴を用いて本人認証する顔認証装置が利用されている。この顔認証装置は、人物を撮影して得た画像から人物の顔領域を含む顔画像を抽出し、予め登録された利用者の顔画像と照合することでその人物が利用者本人であるか否か判定する。
顔認証装置はカメラに顔を向けるだけで簡単に認証が行える利点がある一方で、顔画像から抽出された顔の特徴情報の類似度に基づき認証するため、正規の利用者の顔写真をカメラに向けて本人に成りすます不正行為が懸念される。

このような不正行為に対し、顔写真が平面的であり表情が変化しないという特性に着目し、陰影の変化や眼・口等の動きを検出して顔画像の真贋判定を行う技術が提案されている。例えば、特許文献１に開示されている個人識別装置は、適当な時間間隔で撮影した画像についてフレーム間差分処理を施し、その差分画像に目や口等の顔部品があるかどうかを判定する。実物の人間であれば完全に静止した状態を保つことはできないため、差分画像に顔部品があれば人間、なければ顔写真と判定する。また、「瞬きしてください」、「口を開けてください」等、動きを指示し、指示した動きを検出したときに撮影対象が人間であると判定する。

特開平１１−３３９０４８号公報

上記の個人識別装置は、真贋判定に際して人間らしい動きを指示することで、意図的に顔を動かすことを誘導し、これによって実物の人間を顔写真と誤判定されることが抑制される。しかしながら、撮影した顔画像を登録された顔画像と照合する処理では、動きの大きい顔画像より動きが小さく正面を向いた顔画像の方が迅速かつ高精度に照合判定を行うことができる。すなわち、照合判定処理と真贋判定処理とを並行して実行する場合、意図的に顔を動かす行為は顔照合処理の遅延や精度低下を招くおそれがある。

また、歩行中の人物を撮影して顔認証を行うウォークスルー型の顔認証システムでは、撮影領域にいる人物すべてが認証を求めているとは限らず、撮影領域内で立ち止まっている人物や進行方向を変えて立ち去る人物もいる。したがって、動きのない人物のうち認証が不要な人物に対してまで動きの指示を行ってしまうと、指示の報知が煩雑になり他の人物の照合判定に悪影響を与えるほか、他の人物が不審者の存在を意識することにつながるためいたずらに不安を与えかねない。

そこで、本発明は、顔写真等の不正行為と誤判定された人物に対し、誤判定を解消するための動きを効果的に意識付けることが可能な顔認証システムの提供を目的とする。

上記目的を達成するために本発明は、所定の認証領域を通行する人物の顔認証を行う顔認証システムにおいて、前記認証領域を撮影して前記人物の顔を含む顔画像を順次取得する画像取得手段と、予め登録された利用者の登録顔画像を記憶する記憶手段と、前記取得した顔画像と前記登録顔画像とを照合する顔照合手段と、前記顔画像が成りすましによるものか否か判定する画策判定手段と、前記成りすましと判定した旨を示す画策情報を前記人物に報知する報知手段と、前記登録顔画像と照合一致し、且つ、前記成りすましと判定されていない人物を前記利用者として認証する認証手段と、前記報知手段は、前記成りすましと判定された不正判定人物が所定の報知条件を満たすまで前記画策情報の報知を保留することを特徴とする。

この顔認証システムは、成りすましと判定した人物に対し、直ちに画策情報を報知するか報知を一時的に保留するかをその人物の状況に応じて決定する。例えば、人物が通行先の領域に対して接近していないなど、人物の通行意思が確認されてない状況のとき報知を保留する。画策情報の報知を保留した場合、その人物が通行意思を持つことが確認された段階で報知を行う。画策情報の報知は、例えば、撮影画像上に成りすまし判定した不正判定人物を教示する情報を重畳させてモニタに表示することで実現される。報知保留の条件としては、上記のほか、顔照合で利用者との一致確認がとれていない状況、他の利用者が認証領域にいる状況、複数種類の真贋判定処理で成りすましと判定されているなどその人物が不正行為者である可能性が高い状況なども採用され得る。
このように、成りすましと判定しても直ちにその旨を報知せず、通行意思を持つ人物など画策情報の報知が必要な人物に対して報知するため、報知内容を確認した人物が画策判定手段による誤判定を解消しようと意図的に動くことによる、顔照合処理の精度や速度の低下を抑制することができる。また、他の利用者に与える影響を最小限に抑えることができる。

また、上記構成において、前記画像取得手段は、前記認証領域と隣接する管理区域側から当該認証領域を撮影して得た顔画像を取得し、前記報知手段は、前記不正判定人物が前記認証領域のうち前記管理区域側から所定範囲の報知領域外にいるときは当該不正判定人物への前記画策情報の報知を保留する。
さらに、前記報知手段は、画像上の人物の位置または人物の大きさを用いて前記不正判定人物が前記報知領域にいる報知対象の人物か否か判定する。
このように、管理区域に接近する通行意思を持った人物に限定して画策情報を報知するため、顔照合処理や他の利用者への影響を抑えつつ、成りすまし誤判定を解消するための動きを効果的に意識付けることができる。

また、上記構成において、前記画策判定手段は、前記報知領域にいる前記不正判定人物について、前記顔画像の変化に基づき前記成りすましと判定した結果をキャンセルする。
このように、画策情報の報知領域を、不正判定人物を救済判定する救済領域と略一致または救済領域に包含されるように設定することで、顔照合処理や他の利用者への影響を抑えつつ、救済可能な人物に対して効果的に報知することができる。

また、上記構成において、前記画策判定手段は、判定ロジックが異なる複数種類の真贋判定処理を用いて前記成りすましの有無を判定するとともに、特定の前記真贋判定処理により前記成りすましと判定された前記不正判定人物について、前記顔画像の変化に基づき前記成りすましと判定した結果をキャンセルする救済判定処理を行い、前記報知手段は、前記特定の真贋判定処理にて前記成りすましと判定されたとき前記画策情報を報知する。
このように、複数種類の真贋判定処理のうち救済判定の対象である特定の真贋判定処理により成りすましと判定された人物に限って画策情報を報知することで、顔照合処理や他の利用者への影響を抑えつつ、救済可能な人物に対して効果的に報知することができる。

本発明の顔認証システムによれば、顔照合処理や他の利用者への影響を抑えながら、顔写真等の不正行為と判定した旨を人物に報知することができ、誤判定を解消するための動きを効果的に意識付けることができる。

本実施形態の顔認証システムの運用イメージを示す模式図である。 本実施形態の顔認証システムの概略構成を示す図である。 モニタに表示される教示画像を示す模式図である。 処理部における認証処理を示すフローチャートである。 処理部における画策判定処理を示すフローチャートである。

以下、本発明を出入管理システムに適用した場合の一実施形態である顔認証システムとして、図を参照しながら説明する。
本発明を適用した顔認証システムは、例えばオフィスビルの通用口における出入管理に利用され、管理区域内へ進入しようとする人物を撮影して顔認証を行い、予め登録された利用者であると認証された場合に管理区域への通行を許可する。

図１は、本実施形態の顔認証システムの運用イメージを示す模式図である。図１のように、通用エリアと管理区域との間には管理区域への通行を物理的に規制する手段であるゲート２０が設けられ、カメラ１０により管理区域側から通用エリアを撮影する。カメラ１０は、通用エリアを撮影領域とするように、ゲート２０付近の壁面または天井に撮影方向をやや下向きにした状態で取り付けられ、通用エリアを斜め上方から俯瞰する。また、カメラ１０近傍にはカメラ１０の撮影画像を表示するモニタ４０が設置され、通行者はモニタ４０に表示された認証状態を確認することで自身の認証状態を把握できる。

人物がカメラ１０の撮影領域に入ってくると、顔認証システムは、撮影画像において人間の顔らしい領域を探索し、顔が抽出された場合、予め登録されている利用者の顔と照合する。撮影画像が得られるごとに顔抽出および照合を繰り返し実行し、一定期間の照合結果に基づいて登録利用者であることが確認されるとゲート２０を開放して通行を許可する。このとき、モニタ４０上には当該人物を認証した旨を教示する情報が表示される。
なお、顔照合処理は顔が抽出された場合に実行されるため、認証領域は撮影領域のうち顔が認識可能な範囲（距離）に限定される。この認証領域は、カメラ１０の解像度等の性能や照明など撮影環境に依存するが、例えば顔を示す楕円領域が所定の大きさ以上であることを顔抽出の条件とすることができる。認証領域は、複数の人物が同時に通行することを考慮し、例えばゲート２０から５〜１０ｍ程度までの距離になるようにする。なお、図１では模式的に認証領域を示しているが、実際はゲート２０から一定の範囲はカメラ１０の画角には顔が写らないため、この範囲は非認証領域となる。

照合処理と並行して、抽出された顔が実物の人間の顔であるか写真やタブレット端末等の電子表示器を用いた偽物の顔であるかを真贋判定する。顔認証システムは、表情や顔向き、陰影など顔の全体的な特徴変化を観察し、顔特徴の時間的な変化が小さいと偽物の顔、すなわち不正行為の可能性があると認識する。不正行為と認識された人物（以下、不正判定人物という）は、照合にて何れかの登録利用者と合致した場合でも認証ＮＧとなり通行が拒否される。なお、真贋判定処理が実行される範囲は、顔照合処理と同様に顔が抽出されていることが条件となるため、認証領域にいる人物が判定対象となる。

図１を例に説明すると、予め登録された利用者Ａの顔写真を顔の前に掲げている人物１００がａ点に到達した時点で不正行為ありと認識された場合、その後、ｂ点に到達した時点で利用者Ａとの照合一致が確認されても認証ＯＫにはならずゲート２０は開放されない。

しかしながら、撮影環境や人物の動き方によっては、実物の人間であっても顔の全体的な特徴変化が顕著に検出できず、不正行為と誤認識される可能性があり、この場合、登録利用者が不当に通行を制限されるおそれがある。
そこで本実施形態の顔認証システムは、一旦は不正行為と判定した人物であっても、真に不正行為であるかを再確認する救済判定処理を行う。救済判定処理は、一旦は偽物の顔であると認識された利用者が不当に通行を制限されることを防止することが目的のため、管理区域への通行意思を持った人物だけを判定対象とすればよい。よって、救済判定処理が実行される救済領域は、認証領域より狭く、カメラ１０やゲート２０から近距離の範囲（例えば、ゲート２０から１〜３ｍの距離まで）に限定される。例えば、顔を示す楕円領域の大きさが顔抽出の基準値より大きな基準値以上であるとき救済判定処理を実行する。これにより、ゲート２０に接近しない遠距離の人物に対して不必要に救済判定を行うことで、顔写真の動きを真性の顔と誤認識してしまうことが防止される。なお、認証領域と同様、実際はゲート２０から一定の範囲は非救済領域となる。

また、真贋判定処理が顔全体の特徴変化に基づき不正行為を判定するのに対し、救済判定処理は、不正判定人物について、顔の局所領域、すなわち顔を構成する特定の部位に注目して実物の人間らしい顔であるか判定する。眼の動き（瞬きなど）や口の動き（口の開閉など）が検出された場合には真性の顔であるとみなして不正行為と誤認識された人物を救済する。カメラ１０から遠い場所では顔の局所領域を観察するのは困難だが、ゲート２０へ向かう人物がカメラ１０に近づいてくることで人物の顔を大きく撮影でき、局所領域の観察が容易になる。よって、真贋判定処理よりも真性の顔である人物を高い確度で判別することができる。

さらに、本実施形態の顔認証システムは、不正行為と誤認識された利用者を確実に救済するため、不正行為と認識したとき、モニタ４０上にその人物を不正行為者と認識した旨を教示する情報（以下、画策情報という）を表示し、不正判定人物に対して瞬きや口の開閉などの救済行為をとることを動機付ける。但し、不正行為と認識した時点で直ちに画策情報を表示するのではなく、不正判定人物が所定の報知条件を満たすまでは画策情報の表示を保留する。本実施形態では、不正判定人物が報知領域内にいることを報知条件として画策情報を表示し、報知領域外にいる不正判定人物に対しては報知領域内に移動するまで画策情報の表示を一時的に保留する。管理区域への通行意思を持つ人物に対して画策情報を報知すればよいため、この報知領域は、救済領域と略一致する範囲に限定し、例えば画策情報の報知条件は救済判定処理の発動条件と同一とする。なお、報知領域は救済領域よりもゲート２０から近距離の狭い範囲に限定してもよく、この場合、救済領域にいるにもかかわらず救済されない人物に限定して意図的な動作を促すことができる。

図１を例に説明すると、予め登録された利用者Ｂである人物１００がａ点に到達した時点で不正行為ありと認識された場合、この時点ではモニタ２０には画策情報の報知は保留し、救済判定も行わない。そして人物１００がゲート２０に向かって進行し、報知領域内であるｃ点に到達すると、この段階で報知保留が解除されてモニタ４０に人物１００に関する画策情報を表示する。ｃ点は救済領域内でもあるため、同時に救済判定を開始する。モニタ４０を見て人物１００は自身が不正行為者と誤認識されていることを知り、瞬きや口の開閉を意図的に行う契機が得られる。さらにｄ点で瞬きが検出されると真贋判定結果をキャンセルし、人物１００は不正行為者ではないと認識する。そして、それ以前または以後に登録者Ｂとの照合一致が確認されたならば、認証ＯＫとしてゲート２０が開放される。
一方、報知領域に人物１００が進入せず滞留していたり、そのまま進行方向とは別の方向へ立ち去った場合には、画策情報はモニタ４０に表示されない。

このように、登録利用者であれば、モニタ４０に表示された画策情報により自身が不正行為者と誤認識されていることを把握し、意図的に救済行為をとりながら歩行することで、誤判定による通行制限を受けることなく管理区域に進入することができる。このとき、報知領域に入るまでは画策情報の表示が一時的に保留され、不正行為者を検出した旨を必要以上に報知しないため、人物がむやみに動くことに起因する照合処理の精度低下を抑制でき、また、他の利用者に与える影響を低減することができる。

以下、図２乃至５を参照し、顔認証システムの構成および動作について詳細に説明する。
図２は、本実施形態の顔認証システムの概略構成を示す図である。本実施形態の顔認証システムは、カメラ１０、ゲート制御装置３０、モニタ４０、認証装置５０を主たる構成とする。

カメラ１０は、ＣＣＤイメージセンサ、ＣＭＯＳイメージセンサ等から構成される撮影手段であり、所定の撮影領域を撮影する。カメラ１０は、通用エリアからゲート２０に向かう方向（以下、通行方向という）に歩行する人物の顔を順次撮影できるように、ゲート２０近傍の通行方向の略正面に、撮影方向を通用エリアへ向けて設置する。複数の人物が前後に重なっていても後方の人物が撮影可能なように、カメラ１０はゲート２０側の壁または天井など人物よりやや高い位置に、上方から斜め下方に向けて設置する。
またカメラ１０は、所定の時間間隔（例えば、200ms）ごとに撮影領域を撮影し、グレースケールまたはカラーの多階調の画像を取得する。取得した撮影画像は、有線または無線で接続された認証装置５０に送信する。

ゲート制御装置３０は、管理区域への通行を物理的に規制するゲート２０に接続され、ゲート２０の開閉動作や電気錠の施解錠を制御する。ゲート制御装置３０は、常時はゲート２０を閉状態（或いは電気錠を施錠状態）に維持して通行を規制させ、認証装置５０から通行許可信号を受信すると、一時的にゲート２０を開状態（或いは電気錠を解錠状態）にして通行を許容させる。

モニタ４０は、薄型液晶ディスプレイ等から構成される表示手段であり、認証装置５０による制御に基づき、認証装置５０から受信した画像や各種の情報を表示する。モニタ４０にはカメラ１０で撮影された画像がリアルタイムで表示され、さらに、認証された人物を教示する情報、不正行為と判定された人物を教示する情報（画策情報）が表示される。また、モニタ４０にはスピーカー等の音声出力手段が併設され、認証装置５０の制御に基づき所定の音声ガイダンスやブザー音を出力する。

認証装置５０は、カメラ１０、ゲート制御装置３０、モニタ４０と優先または無線で接続され、カメラ１０から出力された撮影画像を入力し、画像上に写る人物が予め登録された利用者であるか否か判定する認証処理を実行する。そして、認証結果に応じてゲート制御装置３０およびモニタ４０を制御する。
認証装置５０は、ＣＰＵ、ＭＰＵ等のプロセッサやメモリ等の記録媒体からなるいわゆるコンピュータにより構成され、主として、記憶部６０、出力部７０、処理部８０を備える。

記憶部６０は、ＲＯＭ、ＲＡＭ等の半導体メモリやハードディスク等の磁気記録媒体であり、人間の標準的な顔の形状や特徴をモデル化した顔形状モデルが記憶されるほか、認証装置５０の動作に必要なプログラム及び各種パラメータなどが記憶される。また記憶部６０には、登録者データ６２、追跡データ６４、認証履歴データ６６が更新可能に記憶される。
登録者データ６２は、予め登録された、管理区域への入場が許可されている人物（利用者）に関する情報であり、人物の氏名、利用者ＩＤ、利用者の顔を撮影して得られた顔画像（以下、登録顔画像という）を含む。なお、顔画像に代えて、顔画像から抽出された特徴点からなる顔特徴情報を記憶させてもよい。

追跡データ６４は、入力画像から抽出された人物に関する情報であり、順次取得した入力画像について同一とみなした人物ごとに、人物の位置や認証処理の状況を表す各種情報からなる。本実施形態では、追跡データ６４は、追跡対象の人物について振られた追跡番号、画像の撮影時刻、画像上の人物の位置、人物領域画像、人物の顔画像、認証候補者の利用者ＩＤおよび類似度、顔照合の結果を示す照合状態、真贋判定の結果を示す画策状態、救済判定の結果を示す救済フラグ、認証処理の結果を示す認証結果を含む。
認証履歴データ６６は、追跡対象の人物についての最終的な認証結果に関する情報であり、追跡対象の人物ごとに、認証結果、認証候補者の利用者ＩＤ、人物の顔画像、認証時刻、認証時刻の前後一定期間における入力画像を含む。

出力部７０は、外部接続機器であるゲート制御装置３０、モニタ４０等と接続するインタフェース及びその制御回路であり、処理部８０から受け取った信号に応じてゲート制御装置３０およびモニタ４０に制御信号や画像情報等を出力する。出力部７０は、処理部８０から認証成功を示す信号を受け取ると、ゲート制御装置３０に通行許可信号を出力する。また、カメラ１０から入力される撮影画像、或いはこの撮影画像に認証成功や不正行為を教示する情報を合成した画像をモニタ４０に出力する。

処理部８０は、カメラ１０からの入力画像に対して記憶部６０を参照しながら認証処理を実行し、出力部７０からその結果を外部へ出力させる。処理部８０は、記憶部６０の制御プログラムおよびプロセッサにより実現される機能モジュールとして、人物追跡手段８１、顔抽出手段８２、顔照合手段８３、画策判定手段８４、認証手段８５、表示制御手段８６を有する。
以下、処理部８０の各手段について詳細に説明する。

人物追跡手段８１は、カメラ１０から順次入力される入力画像について、人物の領域を示す人物領域画像を抽出する。人物追跡手段８１は、所定フレーム数だけ過去の入力画像と処理対象の入力画像との差分を抽出し、変化領域の大きさや縦横比等が人間らしい形状であるかに基づいて人物が写っている領域が存在するか否か判定する。このフレーム差分法による人物抽出方法に代えて、移動物体が存在しない状態で撮影された背景画像との差分抽出を行う背景差分法、人物モデルを学習した識別器を利用した方法など、種々の方法を選択できる。

また人物追跡手段８１は、抽出した人物を公知のトラッキング技術を利用して追跡処理する。そして、順次処理する入力画像にて同一人物として追跡された人物ごとに追跡データ６４を作成・更新して記憶部６０に記憶させる。
人物追跡手段８１は、現フレームの入力画像で抽出した人物が追跡中の人物であるかを、前フレームの入力画像との間での人物領域の位置（例えば、重心位置や足元位置）の距離に基づき判定する。現フレームの注目人物に対し、距離が所定の閾値未満となる人物が存在しない場合、その人物は新たに撮影領域内に入ってきた人物とみなし、追跡中の人物を識別するための追跡番号を付与する。そして、その追跡対象の人物に関する新たな追跡データ６４を作成し、追跡番号、入力画像の撮影時刻（取得時刻）、画像上の人物領域の位置、人物領域画像を記録する。一方、距離が閾値未満の人物が存在する場合には追跡中の人物であるとみなし、その追跡対象の人物に関する追跡データ６４に現フレームの入力画像から得た撮影時刻、人物領域の位置、人物領域画像を追記し、追跡データ６４を更新する。

顔抽出手段８２は、人物領域画像から人物の顔を示す顔領域を検出し、顔領域を含む矩形状の領域を切り出し、顔画像として抽出する。そして、抽出した顔画像を追跡対象の人物に関する追跡データ６４に記録する。本発明における画像取得手段の機能は、カメラ１０、人物追跡手段８１及び顔抽出手段８２により実現される。
顔抽出手段８２は、記憶部６０に記憶された顔形状モデルを用いて人物領域画像上で顔領域を探索する。具体的には、人物領域画像においてエッジ画素を抽出する処理を施し、抽出したエッジ画素からなる画像から頭部の輪郭形状と近似した楕円形状のエッジ分布を検出し、そのエッジ分布に囲まれた領域を顔領域として抽出する。ここで、認証に用いる顔画像は顔の特徴が把握可能な程度の解像度が要求されるため、所定の抽出基準以上の大きさ（面積）である楕円領域を抽出対象とする。楕円領域の大きさは、長軸の長さと短軸の長さを用いて算出される。

なお、楕円領域に含まれる眼、鼻、口といった顔を構成する部位の形状と近似するエッジ分布を検出し、楕円領域における眼、鼻、口の大まかな位置関係が顔形状モデルと類似することを条件に顔領域と判定してもよい。この場合、両眼間の距離、眼と鼻との距離、鼻と口との距離など部位間の距離（ピクセル数）を顔領域の抽出基準に用い、一定以上の大きさを持つ顔を抽出する。顔領域の抽出方法は、画像マッチング処理など他の公知の技術を採用してもよい。

顔照合手段８３は、抽出された顔画像と記憶部６０の登録顔画像とを照合する。顔照合手段８３は、登録者データ６２を参照し、処理対象の顔画像をすべての登録顔画像と照合してそれぞれ類似度を算出し、最大の類似度を得た登録顔画像の利用者ＩＤおよびその類似度を、追跡対象の人物に関する追跡データ６４に記録する。類似度の算出方法には、例えば、入力顔画像と登録顔画像とをマッチング処理し、両画像の顔領域の一致度合いを求める方法、或いは、顔画像の顔領域から特徴点を抽出して両画像間で対応する特徴点同士の位置関係の一致度合いを求める方法などがある。

また顔照合手段８３は、一定期間分の照合履歴に基づいて追跡対象の人物の顔が特定の利用者の顔と同一であるか否か判定する。顔照合手段８３は、追跡対象の人物に関する追跡データ６４を参照し、過去一定期間分の入力画像において、認証候補者として同一の利用者ＩＤが所定割合以上あり、且つ、その利用者ＩＤと照合したときの類似度が所定の照合基準値以上である場合、追跡対象の人物の顔がその利用者ＩＤで特定される人物の顔と一致すると判定する。例えば、過去１０フレームにおける照合のうち、同一の利用者ＩＤが７回以上あり、その利用者ＩＤとの類似度の平均値が照合基準値以上であることを一致条件とする。

顔照合手段８３は、照合結果を、追跡対象の人物の追跡データ６４に記録する。何れかの登録利用者と一致判定した場合、追跡データ６４の照合状態を「候補あり」に更新し、その人物に対する以降の顔照合処理は行わない。一方、何れの登録利用者とも一致しないと判定した場合には、照合状態を「候補なし」に維持または更新し、次フレーム以降もその人物に対する顔照合処理は継続する。追跡データ６４における照合状態は、初期値は「未」が設定されており、一致判定に必要な一定期間分のデータが蓄積された時点で、照合結果に応じて「候補あり」または「候補なし」に書き換えられる。なお、顔照合手段８３は、同一の追跡対象の人物について一定時間継続して「候補なし」と判定し続けた場合、その人物に対する顔照合処理を終了させる。

画策判定手段８４は、顔抽出手段８２が抽出した顔画像が実際の人間の顔であるか、或いは顔写真等を用いた偽物の顔であるかを判定し、利用者に成りすました不正行為を検出する。画策判定手段８４は、画策判定処理として、顔領域の全体的な特徴や顔の周辺領域の特徴が写真等の偽物の特性を有するとき不正行為の可能性ありと判定する真贋判定処理と、顔の局所的な部位を詳しく観察して人間の顔（真性の顔）の特性を有するとき不正行為ではないと判定する救済判定処理とを実行する。
以下、真贋判定処理および救済判定処理について説明する。

本実施形態において、画策判定手段８４は２種類の真贋判定処理（真贋判定処理１および真贋判定処理２）を実行し、何れかの処理にて偽物と認識すると不正行為ありと判定する。
真贋判定処理１では、顔領域全体における特徴の時間的変化の有無に基づき真贋判定を行う。例えば、顔画像から抽出された顔の特徴点情報を観察し、一定期間の顔画像において、各特徴点のデータや特徴点同士の位置関係に変化が有るか判定する。変化が生じている場合、顔の向きや表情が時間的に変化しているため真性の顔とみなし、他方、一定期間において変化がほとんど生じていない場合には写真等による偽物の顔とみなす。また、顔の向き変化や移動により照明のあたり方が変われば顔領域の陰影も変化するはずであるから、顔領域の輝度分散や明暗領域の分布の変化を観察し、変化が生じている場合真性の顔とみなす方法を用いてもよい。同様に、顔領域における輝度分布や陰影から光源方向を推定し、推定された光源方向が時間的に変化している場合真性の顔とみなすこともできる。

真贋判定処理２では、顔の周辺領域における特徴が写真等の偽物特有の特徴を有するか否かに基づき真贋判定を行う。例えば、撮影時刻が異なる画像を用いて差分処理し、顔領域の周囲一定範囲において矩形枠の有無を判定する。一定期間にわたり継続して矩形枠が検出された場合、その矩形枠は写真や液晶表示器などの縁部分であると考えられるため、偽物の顔とみなす。矩形枠の検出方法には、顔領域の周囲一定範囲において直線的なエッジ成分を検出し、複数の直線エッジからなる形状を判定する方法を用いてもよい。この他、実際の人物であれば顔の周囲の背景は連続性があるのに対し、写真等の場合は縁の内外では非連続になることを利用し、顔領域の周囲一定範囲における画像特徴の連続性に基づき判定してもよい。また、写真等の場合は顔周囲の背景が変化しないことを利用し、顔領域の周囲一定範囲における画像の変化率に基づき判定することもできる。

画策判定手段８４は、真贋判定の結果を、追跡対象の人物に関する追跡データ６４に記録する。追跡データ６４には、真贋判定処理１および真贋判定処理２のそれぞれに対応して画策状態１、画策状態２が用意されており、偽物の顔と判定した場合、対応する画策状態に「有」を書き込み、真性の顔と判定した場合、対応する画策状態に「無」を書き込む。なお、追跡データ６４における画策状態１および画策状態２は初期値として「未」が設定されており、真贋判定に必要な一定期間分のデータが蓄積された時点で判定結果に応じて「有」または「無」に更新される。
なお、追跡データ６４上では２種類の真贋判定処理の結果を統合し、いずれかの真贋判定処理で偽物の顔と判定された場合は「有」とし、いずれの真贋判定処理でも真性の顔と判定された場合に「無」とする構成にしてもよい。或いは、真贋判定処理１及び２のうち１種類のみを用いる構成としてもよい。

次に、救済判定処理について説明する。救済判定処理は、真贋判定処理で実物の人間であるにもかかわらず誤って偽物の顔と判定されてしまった利用者を救済することを目的とし、ゲート２０から近距離の範囲にある救済領域にいる人物を処理対象とする。
画策判定手段８４は、人物領域の垂直方向（カメラ１０の仰俯角方向）の座標を逆透視変換して、ゲート２０付近に設けられたカメラ１０からの距離を推定し、救済領域内にいる人物か否か判定する。なお、実際に距離を推定するのではなく、人物領域の足元（下端）の垂直方向座標が画像の下端から所定範囲にある、または、画像上に写っていないと、救済判定対象の人物とすることもできる。また、顔領域の大きさに基づいて救済判定対象の人物か否か推定する構成としてもよい。例えば、顔抽出処理における抽出基準より大きい救済基準値を用い、顔の大きさが救済基準値以上の場合に救済判定対象であると判定する。或いは、両眼間の距離など、顔を構成する複数の部位間の距離（ピクセル数）を所定の基準値と比較する構成としてもよい。

真贋判定処理が顔全体の特徴や顔周囲の簡易な特徴を観察するのに対し、救済判定処理では、顔の局所領域における特徴を詳細に観察し、より高解像度の画像を用いて高精度に真性の顔であることを判別する。
本実施例の救済判定処理では、顔の一部である眼の動きに着目し、瞬きを検出することで救済判定を行う。例えば、顔画像から目頭および目尻の特徴点を抽出し、目頭と目尻とを結ぶエッジを検出する。上瞼および下瞼を表す２本のエッジ曲線が一定距離以上離れていれば開眼状態と認識し、一定距離未満あるいは１本のエッジ曲線しか検出されない場合は閉眼状態と認識する。そして、一定期間内の顔画像において開眼、閉眼、開眼の遷移を検出すると瞬きありと認識し、真性の顔である、すなわち不正行為ではないと判定する。

なお、瞬き検出は他の方法で判定してもよい。例えば、目頭、目尻、上瞼、下瞼で囲まれた眼領域の面積を求め、眼面積が所定の基準値以上であれば開眼状態、基準値未満であれば閉眼状態と認識し、瞬きの有無を判定することができる。また、目頭、目尻の間の眼領域における濃淡の分布から瞳（黒目）を検出し、瞳を検出していれば開眼状態、非検出ならば閉眼状態と認識する方法も採り得る。
また、口の動きに着目し、口の開閉を検出することで救済判定を行ってもよい。例えば、口の両端の特徴点を抽出し、口両端を表すエッジを検出する。上唇および下唇を表す２本のエッジ曲線が一定距離以上はなれていれば開口状態、一定距離未満であれば閉口状態と認識し、一定期間内の顔画像において開口、閉口、開口の遷移を検出すると口の開閉ありと認識し、真性の顔であると判定する。

また、画策判定手段８４は、真贋判定処理１にて不正行為と判定された人物のみを救済判定処理の対象とする。真贋判定処理１は顔の大まかな特徴による真贋判定であり、救済判定処理は顔の局所領域にフォーカスして行う精密な真贋判定であり、いずれも顔の特徴を評価している。これに対して真贋判定処理２では顔の周囲の画像特徴を評価しており、評価対象が異なる。眼や口に動きが検出された場合でも、写真等の縁と思われる矩形枠が検出されているのであれば不正行為ではないとも限らない。したがって、画策判定手段８４は、真贋判定処理１の結果に対する救済判定を行い、画策状態１が「有」の場合に救済判定処理を実行する。或いは、画策状態１が「有」、且つ画策状態２が「無」の場合に限って救済判定処理を実行してもよい。
なお、本実施形態では、不正行為に対する高いセキュリティレベルを想定して真贋判定処理１の判定結果のみ救済する構成としたが、求められるセキュリティレベルによっては、真贋判定処理２の判定結果も救済対象に含めてもよい。

画策判定手段８４は、救済判定の結果を、追跡対象の人物に関する追跡データ６４に記録する。追跡データ６４における救済フラグは、初期値は「ＯＦＦ」であり、瞬きを検出して救済が必要と判定した場合は救済フラグを「ＯＮ」にし、以降更新される追跡データ６４においても「ＯＮ」状態を保持する。

認証手段８５は、追跡対象の人物について、追跡データ６４の照合状態、画策状態、救済フラグを参照し、予め登録された利用者であるか否か最終的な判定を行う。認証手段８５は、顔照合手段８３の顔照合処理にて認証候補者がいると判定され、且つ、画策判定手段８４の真贋判定処理および救済判定処理にて不正行為ではないと判定されている場合、その人物を認証候補とした利用者（認証ＯＫ）であると判定する。具体的には、追跡データ６４における照合状態が「候補あり」であって画策状態１および画策状態２が何れも「無」である場合、認証ＯＫと判定する。或いは、照合状態が「候補あり」、画策状態２が「無」であって、画策状態１が「有」且つ救済フラグが「ＯＮ」の場合、認証ＯＫと判定する。なお、画策状態１および画策状態２が「無」ではなく「未」の場合でも認証ＯＫと判定してもよい。一方、照合状態が「候補なし」、または「候補あり」であっても不正行為と判定されている場合、認証ＮＧと判定する。

認証手段８５は、認証の結果を、追跡対象の人物に関する追跡データ６４に記録する。追跡データ６４の認証結果は初期値が「未」であり、認証ＯＫと判定すると「登録者」に更新する。認証ＮＧと判定したときには、照合状態が「候補なし」であれば「未登録者」に更新し、照合状態が「候補あり」であるが不正行為と判定されているのであれば「不正行為」に更新する。認証ＯＫと判定した場合、以降更新される追跡データ６４においても「登録者」を保持し、その人物に対する認証処理を終了する。

認証手段８５は、「登録者」と判定したタイミングで、出力部７０へ認証成功を示す信号を出力する。また、認証手段８５は、認証結果に応じて追跡対象の人物に関する認証履歴データ６６を作成し、記憶部６０に記憶する。認証ＯＫと判定した場合、認証結果、認証された利用者ＩＤ、顔照合にて用いた一定期間分の顔画像のうち最大の類似度を獲得した顔画像、認証ＯＫとなった時刻、認証時刻の前後一定期間の入力画像、をそれぞれ対応付けて記録する。認証ＮＧと判定した場合には、認証結果、顔照合に用いた一定期間分の顔画像のうち代表する１つの顔画像、認証ＮＧとした時刻、その人物を追跡開始してから追跡終了するまでの入力画像、をそれぞれ対応付けて記録する。認証ＮＧの人物の認証履歴データ６６は、その人物の追跡を終了したタイミングで作成する。

表示制御手段８６は、出力部７０を介して、カメラ１０で撮影された入力画像を順次モニタ４０へ出力する。また表示制御手段８６は、認証結果や不正行為の判定結果に基づき入力 画像を加工し、認証結果等を示す教示画像を生成してモニタ４０へ出力する。
図３は、モニタ４０に表示される教示画像を示す模式図である。表示制御手段８６は、追跡中の人物１１０、１２０について認証手段で認証ＯＫと判定されると（認証結果「登録者」）、入力画像上の人物１１０，１２０の顔領域に対し、認証ＯＫを示す教示情報として実線の矩形枠２１０、２２０を重畳した教示画像を生成し、出力部７０を介してモニタ４０へ出力する。また、人物１１０について画策判定手段８４の真贋判定処理１で不正行為と判定された場合（画策状態１「有」）、入力画像上の対象人物１１０の顔領域に対し、不正行為と判定した旨を示す教示情報として点線の矩形枠３１０を重畳した教示画像を生成し、モニタ４０へ出力する。このとき表示制御手段８６は、人物１１０が所定の報知条件を満たすまでの間、すなわち人物１１０が報知領域外に存在する間は画策情報の表示を保留し、人物１１０が報知領域に移動した段階で矩形枠３１０を合成して教示情報を生成する。報知領域内か外かの判定は、救済判定処理の動作条件と同一の基準とする。また、表示制御手段８６は、人物１１０に対する不正行為との判定結果がキャンセルされると（救済フラグ「ＯＮ」）、人物１１０に対して付した矩形枠３１０を消去する。人物１１０について真贋判定処理２で不正行為と判定されている場合は（画策状態２「有」）、救済判定処理の対象とならないため、表示制御手段８６は人物１１０に対して矩形枠３１０は付さない。

続いて図３の例を用いて、人物に対する認証処理と表示制御との関係を説明する。図３の（Ａ）〜（Ｃ）は、登録利用者である人物１１０及び人物１２０が順にゲート２０に向かって認証領域を進行してきている様子を示している。図３（Ａ）の段階では、人物１１０は報知領域外に位置し、まだ登録利用者として認証されていない。この時点で人物１１０が不正行為者と判定されたとしても、人物１１０には画策情報を示す矩形枠３１０は付されない。図３（Ｂ）の段階では、真贋判定処理１で不正行為者と判定された人物１１０が報知領域に進入し、また、その後方に登録利用者として認証された人物１２０が存在する。この時点では人物１１０に対して画策情報を示す矩形枠３１０が、人物１２０に対して認証ＯＫを示す矩形枠２２０が付される。そして図３（Ｃ）の段階では、不正行為者と判定された人物１１０が救済判定処理によって救済され、かつ登録利用者として認証されている。この時点では人物１１０からは画策情報を示す矩形枠３１０が消去され、新たに認証ＯＫを示す矩形枠２１０が付される。

なお、認証ＯＫを示す教示情報および不正行為を示す教示情報の態様は上記に限らず、例えば、形状や色を異ならせてもよい。さらに、認証中の人物、あるいは未登録者と判定された人物に対しても、その旨を示す教示情報を撮影画像に付加してもよい。
また、画策状態１または画策状態２のいずれかが「有」のとき画策情報を表示させる構成としてもよい。特に、救済判定の対象が真贋判定処理２による判定結果（画策状態２）を含む場合は画策状態１または画策状態２のいずれかが「有」のとき画策情報を表示させるのが望ましい。

次に、図４及び図５のフローチャートを参照し、認証処理および画策判定処理の動作について説明する。
図４は、処理部８０による認証処理の流れを示すフローチャートである。処理部８０は、入力画像から抽出された顔画像ごとに以下の認証処理を実行する。１フレームの入力画像から複数の顔画像が抽出された場合は、それぞれの顔画像について認証処理を行う。

認証処理を開始すると、まず、追跡データ６４を参照して照合結果が「候補あり」であるか判定し（Ｓ４００）、「候補あり」の場合は顔照合処理を省略してステップＳ４１２へ進む。照合結果が「未」または「候補なし」の場合、登録者データ６２の各顔画像と照合して類似度を算出し（Ｓ４０２）、所定の一致基準を満たすか否か判定する（Ｓ４０４）。照合基準を満たさない場合、追跡データ６４の照合状態を「候補なし」とし（Ｓ４０６）、さらに認証結果を「未登録者」として認証処理を終了する（Ｓ４０８）。照合基準を満たす場合は、照合状態を「候補あり」に設定する（Ｓ４１０）。

ステップＳ４１２では、追跡データ６４を参照して画策状態１および画策状態２がいずれも「無」であるか判定する。いずれも画策状態「無」であれば、追跡対象の人物を登録利用者であるとみなし、追跡データ６４の認証結果を「登録者」に設定するとともに出力部７０へ認証成功を示す信号を出力する（Ｓ４１８）。このとき、その人物について認証成功した旨を示す教示画像を生成してモニタ４０へ出力する（Ｓ４２０）。

一方、いずれかの画策状態が「有」の場合、画策状態２が「有」に設定されているか否か判定する（Ｓ４１４）。画策状態２が「有」であれば、写真等を用いた不正行為を行う人物であるとみなし、認証結果を「不正行為」に設定する（Ｓ４２２）。画策状態１だけが「有」であれば、続いて追跡データ６４を参照して救済フラグを確認し（Ｓ４１６）、救済フラグが「ＯＦＦ」であれば同じく不正行為を行う人物であるとみなす。そして認証結果を「不正行為」に設定するとともに、不正行為を示す教示画像を生成してモニタ４０へ出力する（Ｓ４２２）。これに対し救済フラグが「ＯＮ」の場合には、真贋判定処理１にて不正行為とした判定結果が誤判定であり追跡対象の人物は登録利用者であるとみなし、認証結果を「登録者」に設定するとともに、認証成功を示す信号および認証成功を示す教示画像を出力する（Ｓ４１８）。

図５は、処理部８０による画策判定処理の流れを示すフローチャートである。処理部８０の画策判定手段８４は、認証処理と同様、入力画像から抽出された顔画像ごとに以下の画策判定処理を実行する。１フレームの入力画像から複数の顔画像が抽出された場合は、それぞれの顔画像について画策判定処理を行う。
画策判定処理は上記の認証処理と並行して実行され、さらに画策判定処理の中でも、ステップＳ５００〜Ｓ５１２にかかる真贋判定処理１および救済判定処理と、ステップＳ６００〜Ｓ６０４にかかる真贋判定処理２とが並行して実行される。

先に、真贋判定処理１および救済判定処理の動作について説明する。画策判定処理を開始すると、追跡データ６４を参照して救済フラグが既に「ＯＮ」に設定されているか否か判定する（Ｓ５００）。救済フラグ「ＯＦＦ」の場合、画策状態１が既に「有」に設定されているか否か判定する（Ｓ５０２）。画策状態１が「未」または「無」の場合、顔特徴の時間的な変化が検出されているか否かを判定する（Ｓ５０４）。特徴変化がない場合、その顔画像は不正行為による可能性があるとみなし、追跡データ６４の画策状態１を「有」に設定して処理を終了する（Ｓ５０６）。一方、ステップＳ５００で既に救済フラグが「ＯＮ」の場合、およびステップＳ５０４で顔の特徴変化がある場合には、不正行為ではないとみなし、画策状態１は「無」のまま処理を終了する。このとき画策状態が「未」であれば「無」に更新する。

救済フラグは「ＯＦＦ」で、画策状態１が「有」に設定されている場合（Ｓ５０２のＹｅｓ）、救済判定処理を実行する。まず、対象の人物が報知領域にいるか否かを判定し（Ｓ５０８）、報知領域にいれば、その人物について不正行為と判定した旨を示す教示画像を生成してモニタ４０へ出力する（Ｓ５１０）。救済領域は報知領域と略等しいため、画策情報の報知に続いて、その人物について瞬きの有無を判定する（Ｓ５１２）。瞬きが検出された場合、その顔画像は不正行為によるものではないとみなし、追跡データ６４の救済フラグを「ＯＮ」に設定して処理を終了する（Ｓ５１４）。救済領域にいない場合、または瞬きが検出されない場合は、依然として不正行為の可能性があるとみなしてそのまま処理を終了する。
なお、ステップＳ５０６で画策状態１を「有」とした時点で、その不正判定人物が報知領域内にいるか否か判定し、報知領域内にいれば画策情報を報知させてもよい。

次に、真贋判定処理２の動作について説明する。画策判定処理を開始すると、追跡データ６４を参照して画策状態２が既に「有」に設定されているか否か判定する（Ｓ６００）。画策状態２が「未」または「無」の場合、顔周囲の領域で写真枠の特徴が検出されているか否かを判定する（Ｓ６０２）。写真枠が検出されている場合、その顔画像は不正行為によるものとみなし、画策状態２を「有」に設定して処理を終了する（Ｓ６０４）。一方、ステップＳ６００で画策状態２が既に「有」の場合、およびステップＳ６０２で写真枠を検出していない場合はそのまま処理を終了する。

以上に説明したように、本実施形態の顔認証システムは、顔照合処理と並行して写真等による不正行為を検出するための画策判定処理を実行し、不正行為（偽物の顔）の可能性があると判定された不正判定人物に対して、報知領域内にいることを条件に、不正行為と判定した旨を示す画策情報を報知するとともに、救済判定処理を実行して不正行為と誤認識された人物を救済する。報知領域外にいる間は画策情報の報知が一時的に保留されるため、真に救済が必要な人物に限って画策情報を報知することができる。

なお、上記実施形態の顔認証システムでは、画策情報の報知是非を不正判定人物が報知領域内にいるか否かで判定する構成としたが、他の条件を採用することもできる。例えば、顔照合で利用者との一致確認がとれていない状況では画策情報の報知を保留する構成としてもよい。この場合、追跡データの画策状態１が「有」となった人物について、照合状態が「候補なし」または「未」の間は画策情報の報知を保留し、「候補あり」となった時点で画策情報を報知する。これにより、不正行為の判定がキャンセルされれば登録利用者として認証される人物に対してだけ瞬き等の救済行為を促すことができる。また、他の利用者が認証領域にいる状況では画策情報の報知を保留する構成としてもよい。この場合、画策状態１が「有」となった人物について、他に追跡中の人物がいる間は画策情報の報知を保留する。これにより、報知された画策情報によって他の利用者へ不安を与える等の影響を排除できる。また、複数種類の真贋判定処理で成りすましと判定されている状況では画策情報の報知を保留する構成としてもよい。この場合、複数種類の真贋判定処理１〜Ｎを用いて真贋判定を行うとともに、それぞれの判定結果に基づき、対応する画策状態１〜Ｎを随時更新する。そして、所定数以上の画策状態が「有」を示しているときは画策情報の報知を保留し、幾つかの判定結果が反転して所定数未満となった時点で画策情報を報知する。これにより、不正行為者である可能性が高い人物に対して不正行為と認識している旨が報知されることを防止できる。

また、上記実施形態の顔認証システムでは、救済判定処理と真贋判定処理１とは異なる指標を用いて不正行為を判定する構成としたが、同一の指標を用いる構成としてもよい。この場合、救済判定処理で不正行為と判定する基準を真贋判定処理１での基準より厳しくするのが望ましい。

なお、上記実施形態の顔認証システムでは、カメラ１０による撮影画像から人物が救済領域にいるか否か判定する構成としたが、別途、ゲート２０近傍を検知範囲とする空間センサを設け、空間センサが検知したことを救済判定の動作条件とする構成としてもよい。空間センサとしては、人体が発する熱線を検出する受動型赤外線センサ、赤外線ビームの遮断を検出する対向式赤外線センサなど、各種のセンシング装置を適用できる。

また、上記実施形態の顔認証システムにおいて、不正行為と判定した場合、その旨を管理用コンピュータにも通知する構成としてもよい。さらに、ゲート２０を規制解除している間に他の人物の不正行為を検出した場合、ゲート２０を強制的に再び規制状態に制御する構成、或いは、不正行為を検出した場合、管理者の操作により異常復旧されるまではゲート２０の規制解除を行わない構成としてもよい。
また、本発明の顔認証システムは、ゲートによる通行規制を行わず、通行者の履歴を記録するだけの出入管理システムにも適用できる。

さらに、上記実施形態の顔認証システムにおいて、複数種類の真贋判定処理を用いて不正行為の判定をする場合、２種類以上の真贋判定処理にて不正行為の可能性ありと判定されたときには救済判定を行わず、画策情報も報知しない構成としてもよい。複数の判定方法で同時に不正行為と誤判定される可能性は高くないため、救済判定による失報を防止できる。
また、上記実施形態の顔認証システムにおいて、追跡中の複数の人物について不正行為の可能性ありと判定している場合、救済判定を行わず、画策情報も報知しない構成としてもよい。同時に複数人物が不正行為と誤判定される可能性は高くはないため、救済判定による失報を防止できる。

１０ カメラ、２０ ゲート、３０ ゲート制御装置、４０ モニタ、５０ 認証装置

Claims (5)

1. 所定の認証領域を通行する人物の顔認証を行う顔認証システムにおいて、
   前記認証領域を撮影して前記人物の顔を含む顔画像を順次取得する画像取得手段と、
   予め登録された利用者の登録顔画像を記憶する記憶手段と、
   前記取得した顔画像と前記登録顔画像とを照合する顔照合手段と、
   前記顔画像が成りすましによるものか否か判定する画策判定手段と、
   前記成りすましと判定した旨を示す画策情報を前記人物に報知する報知手段と、
   前記登録顔画像と照合一致し、且つ、前記成りすましと判定されていない人物を前記利用者として認証する認証手段と、
   前記報知手段は、前記成りすましと判定された不正判定人物が所定の報知条件を満たすまで前記画策情報の報知を保留する、ことを特徴とした顔認証システム。
2. 前記画像取得手段は、前記認証領域と隣接する管理区域側から当該認証領域を撮影して得た顔画像を取得し、
   前記報知手段は、前記不正判定人物が前記認証領域のうち前記管理区域側から所定範囲の報知領域外にいるときは当該不正判定人物への前記画策情報の報知を保留する、請求項１に記載の顔認証システム。
3. 前記報知手段は、画像上の人物の位置または人物の大きさを用いて前記不正判定人物が前記報知領域にいる報知対象の人物か否か判定する、請求項２に記載の顔認証システム。
4. 前記画策判定手段は、前記報知領域にいる前記不正判定人物について、前記顔画像の変化に基づき前記成りすましと判定した結果をキャンセルする、請求項２または３に記載の顔認証システム。
5. 前記画策判定手段は、判定ロジックが異なる複数種類の真贋判定処理を用いて前記成りすましの有無を判定するとともに、特定の前記真贋判定処理により前記成りすましと判定された前記不正判定人物について、前記顔画像の変化に基づき前記成りすましと判定した結果をキャンセルする救済判定処理を行い、
   前記報知手段は、前記特定の真贋判定処理にて前記成りすましと判定されたとき前記画策情報を報知する、請求項１に記載の顔認証システム。