JP2016224751A

JP2016224751A - 顔認証システム及び顔認証プログラム

Info

Publication number: JP2016224751A
Application number: JP2015111197A
Authority: JP
Inventors: 雄一稲葉; Yuichi Inaba
Original assignee: KNOWLEDGESUITE Inc
Current assignee: KNOWLEDGESUITE Inc
Priority date: 2015-06-01
Filing date: 2015-06-01
Publication date: 2016-12-28
Anticipated expiration: 2035-06-01
Also published as: JP5901824B1

Abstract

【課題】簡単な方法で、データベースに格納された顔データを更新することができるシステムを提供する。【解決手段】通信端末１１０の制御部２７０は、操作者を撮像部２３０で撮像して顔データを取得し、この顔データと認証データ保存部２４０に予め保存された顔データと顔認証部２６０で比較することによって操作者の正規／不正を判断する。そして、通信端末１１０の制御部２７０は、顔認証部２６０が正規と判断した場合に、撮像部２３０が取得した顔データを、登録者の顔データとして認証データ保存部２４０に新たに保存する処理と、その顔認証部２６０で正規と判断された顔データを登録者の顔データとして管理装置に送信する処理とを、所定のタイミングで繰り返し行う。管理装置に送られた顔データは、その管理装置の登録者データベースに格納された登録者顔データの更新に使用される。【選択図】図２

Description

この発明は、例えばスマートフォン、携帯電話機、パーソナルコンピュータ等の通信端末に対する不正使用を、顔認証技術を用いて防止する顔認証システム及び顔認証プログラムに関する。

従来より、個人認証技術の一つとして、顔認証が知られている。一般的な顔認証システムでは、人間の瞳、鼻孔、目頭、目尻、口端等の特徴部位の形状や配置位置等が、特徴データとして予め測定されて、保存される。そして、認証処理時に、対象者の顔をカメラで撮像してこれらの特徴データを測定し、予め保存されている特徴データと比較することで、認証対象者の正規／不正が判定される。

また、顔認証を用いて通信端末の不正使用を防止する技術として、例えば下記特許文献１に記載されたものが知られている。

下記特許文献１の技術では、ユーザが携帯端末を操作する際に、その携帯端末に内蔵されたカメラを用いてそのユーザの顔を撮像する。そして、撮像で得られた顔画像の特徴データを画像処理等によって抽出し、予め保存された特徴データと比較することによって、そのユーザの正規／不正を判断する（特許文献１の例えば段落［００２３］参照）。

加えて、特許文献１の携帯端末は、この顔認証処理で不正と判断した場合に、撮像した顔画像をその表示画面に表示する。このように、不正使用の可能性が高い場合に、その使用者の顔画像を画面に表示することで、不正使用を抑止できる（特許文献１の例えば段落［００２４］参照）。

特開２０１０−２７７５０４号公報

企業等では、各従業員の顔写真や、顔認証用の特徴データ等をデータベース化し、一括して管理したい場合がある。しかしながら、人間の顔は、年齢等の要因に従って、年月の経過と共に変化し、これに伴って、顔認証用の特徴データが変化する可能性がある。このため、従業員の顔写真や特徴データを正確に管理するためには、これら顔写真や特徴データを時々更新する必要がある。このような更新作業は、特に従業員数が多い場合には、非常な負担である。

また、上述の特許文献１では、不正使用を抑止するために、不正使用者の顔画像を表示することにしている。しかしながら、このような方法では、不正使用者が、その携帯端末を廃棄・隠匿等したような場合に、その携帯端末の所有者等は、不正使用者の顔画像を確認して、その不正使用者を特定することができない。

そこで、この発明の第１の課題は、簡単な方法で、利用者の顔写真或いは顔認証用特徴データのデータベースを更新することができる技術を提供する点にある。また、この発明の第２の課題は、不正操作者を容易に特定できる技術を提供する点にある。

かかる課題を解決するために、請求項１の発明に係る顔認証システムは、１又は複数台の通信端末と、該通信端末に通信接続される管理装置とを備える顔認証システムであって、前記通信端末は、操作者を撮像して顔データを取得する撮像部と、登録者の顔データを保存する認証データ保存部と、前記撮像部が新たに取得した顔データと前記認証データ保存部に保存された前記登録者の顔データとを用いた顔認証処理によって、前記操作者の正規／不正を判断する顔認証部と、該顔認証部が正規と判断した場合に、前記撮像部が取得した顔データを、前記登録者の顔データとして前記認証データ保存部に新たに保存する処理と、前記撮像部が取得した顔データを、該登録者の顔データとして前記管理装置に送信する処理とを、所定のタイミングで繰り返し行う制御部と、を備え、前記管理装置は、前記登録者の顔データを保存する登録者データベースと、該登録者データベースに保存された顔データを、前記通信端末から新たに受け取った該登録者の顔データに更新する管理処理部と、を備えることを特徴とする。

また、請求項２の発明は、請求項１に記載の構成に加え、前記制御部は、前記顔認証部が不正と判断した場合に、その認証処理に使用された前記操作者の顔データを、不正操作者の顔データとして前記管理装置に送信する処理を行うことを特徴とする。

請求項３の発明は、請求項１又は２に記載の構成に加え、前記通信端末は、顔認証以外の認証処理によって前記操作者の正規／不正を判断する非顔認証部を更に備え、前記制御部は、該非顔認証部が正規と判断した場合には、前記撮像部が前記操作者の顔データを取得すると共に、該顔データを用いて前記顔認証部が前記顔認証処理を行い、且つ、該非顔認証部が所定回数連続して前記操作者を不正と判断した場合には、前記撮像部が前記操作者の顔データを取得すると共に、該顔データを前記管理装置に不正操作者の顔データとして送信する、ことを特徴とする。

請求項４の発明は、請求項２又は３に記載の構成に加え、前記管理装置は、該通信端末から受信した前記不正操作者の顔データを、前記登録者データベースに保存された前記顔データと照合することによって、該不正操作者を特定する登録者照合部を更に備えることを特徴とする。

請求項５の発明は、請求項２乃至４の何れかに記載の構成に加え、前記管理装置は、前記通信端末から受信した前記不正操作者の顔データを、ウェブページから取得した顔データと照合することによって、該不正操作者を特定するウェブ照合部を更に備える。

請求項６の発明に係る顔認証プログラムは、コンピュータを、請求項１乃至５の何れかに記載の顔認証システムの通信端末として機能させる。

請求項１の発明によれば、顔認証部に正規であると判断された顔データを、所定のタイミングで、その操作者の顔データとして管理装置に送信するので、管理装置は、登録者データベースに格納された登録者の顔データを、容易に更新することができる。

請求項２の発明によれば、顔認証部に不正であると判断された顔データを管理装置に送信するので、不正操作者の顔データを取得することができる。

請求項３の発明によれば、顔認証処理に先立って、顔認証以外の認証処理である非顔認証処理を行い、その非顔認証処理で所定回数連続して認証が拒否された場合に、操作者の顔データを取得して管理装置に送信するので、不正操作者に顔認証操作を行わせること無しに、その不正操作者の顔データを取得することができる。

請求項４の発明によれば、何れかの通信端末機の操作者が他の通信端末を不正操作した場合に、登録者照合処理によって、その不正操作者を容易に特定できる。

請求項５の発明によれば、何れかの通信端末機の操作者が他の通信端末を不正操作した場合に、ウェブ照合処理によって、その不正操作者を容易に特定できる。

請求項６の発明によれば、請求項１乃至５の何れかに記載の顔認証システムの通信端末を、コンピュータを用いて実現できる。

この発明の実施の形態１に係る顔認証システムの全体構成を示す概念図である。同実施の形態１に係る通信端末の機能的構成を概略的に示すブロック図である。同実施の形態１に係る管理装置の機能的構成を概略的に示すブロック図である。同実施の形態１に係る通信端末の動作を示す概略フローチャートである。同実施の形態１に係る通信端末の動作を説明するための概念図である。同実施の形態１に係る管理装置の動作を示す概略フローチャートである。

［発明の実施の形態１］
この発明の実施の形態１について、企業等の団体が従業員に配布して使用させる通信端末を用いて、この発明の顔認証システムを構築する場合を例に採って説明する。

図１は、この実施の形態１に係る顔認証システムの全体構成を示す概念図である。

図１に示したように、この実施の形態１に係る顔認証システム１００は、１台以上の通信端末１１０と、管理装置１２０とを備えている。通信端末１１０と管理装置１２０とは、例えばインターネット等の通信網１３０を介して通信接続される。

通信端末１１０は、企業等によって、従業員（以下、「操作者」と記す）に配布されて、使用される。通信端末１１０としては、例えば、スマートフォン、タブレット端末、携帯電話機、ノート型パーソナルコンピュータ等の移動型通信端末であってもよいし、デスクトップコンピュータ等の据え置き型通信端末であってもよい。後述するように、この実施の形態１では、操作者が通信端末１１０を使用するためには、パスワード認証及び顔認証を受ける必要がある。この通信端末１１０は、顔認証処理で認証された操作者の顔データや、認証が拒否された操作者の顔データを、通信網１３０を介して、管理装置１２０へ送る。通信端末１１０の構成については、図２を用いて後述する。

管理装置１２０は、各通信端末１１０から顔データを受け取る。そして、顔認証処理で認証された操作者の顔データを、登録者データベース（図１には示さず）に保存する。また、顔認証で「不正」とされた顔データを用いて、その操作者を特定するための処理を行う（後述）。管理装置１２０としては、例えばサーバコンピュータを使用することができる。また、この管理装置１２０の登録者データベースとしては、内蔵のもの、外付けのもの、或いは通信網１３０を介して通信接続されたものを使用できる。管理装置１２０の構成については、図３を用いて後述する。この管理装置１２０は、例えば、顔認証システム１００のサービス提供業者によって運営される。この実施の形態１では、このサービス提供業者が複数の企業等にサービスを提供している場合を例に採って説明する。但し、この発明は、企業等が、管理コンピュータや従業員の通信端末を用いて構築した社内システムにも適用できることは、もちろんである。

図２は、通信端末１１０の機能的構成を概略的に示すブロック図である。図２に示したように、この通信端末１１０は、表示部２１０と、操作部２２０と、撮像部２３０と、認証データ保存部２４０と、パスワード認証部２５０と、顔認証部２６０と、制御部２７０と、通信部２８０とを備えている。なお、これらの各部２１０〜２８０は、その一部（例えば、認証データ保存部２４０、パスワード認証部２５０、顔認証部２６０及び制御部２７０）をソフトウエア的に構築することもできるが、全てをハードウエア的に構築してもよい。

表示部２１０は、通信端末１１０の操作画面やウェブページ等を表示するために使用される。表示部２１０としては、液晶ディスプレイデバイス等が使用される。

操作部２２０は、操作者が通信端末１１０を操作するために使用される。操作部２２０としては、例えば、タッチディスプレイのタッチ画面や、携帯電話機の操作キーや、パーソナルコンピュータのキーボード等が使用される。

撮像部２３０は、例えばその通信端末１１０に内蔵された、デジタルカメラ（図示せず）を有する。この撮像部２３０は、このデジタルカメラを用いて操作者を撮像することで、顔データを取得する。この発明において、「顔データ」は、操作者の顔画像（すなわち顔写真）そのものであってもよいし、この顔画像から取得された、顔認証用の特徴データ（瞳、鼻孔、目頭、目尻、口端等の特徴部位の形状や配置位置等を示すデータ）であってもよいし、更には、顔画像及び特徴データの両方であってもよい。この実施の形態１では、顔データが顔画像である場合を例に採って説明する。

認証データ保存部２４０は、撮像部２３０が取得した顔データと比較するための、１又は複数（例えば５つ）の、登録者の顔データを保存する。認証データ保存部２４０としては、例えば、半導体メモリやハードディスク等を使用することができる。顔認証処理（後述）の信頼性を高めるためには、この認証データ保存部２４０に、なるべく多くの顔データを保存しておくことが望ましい。また、認証データ保存部２４０に保存された顔データは、制御部２７０によって、新しいものと入れ替えられる（後述）。

パスワード認証部２５０は、この発明の「非顔認証部」に対応し、予め登録されたパスワードと、操作者が操作開始時に入力したパスワードとの一致／不一致によって、その操作者の認証を行う。このパスワード認証部２５０の認証方式は、通常の文字・数字列を入力する方式であってもよいし、マトリクス認証方式であってもよいし、他の方式であってもよい。また、パスワード認証部２５０に代えて、他の認証方式（例えば、指紋認証方式等）を採用してもよい。

顔認証部２６０は、撮像部２３０が顔認証時に新たに取得した操作者の顔データと、認証データ保存部２４０に予め保存された登録者の１又は複数の顔データとを用いて、顔認証処理を行う。すなわち、顔認証部２６０は、操作者の顔データ（ここでは、顔画像）から特徴データを取得すると共に、登録者の顔データからもそれぞれ特徴データを取得する。そして、これら特徴データを順に比較して、操作者の特徴データと一致するものが、登録者の特徴データ内に存在する場合には、該操作者を「正規」と判断し、また、存在しない場合には該操作者を「不正」と判断する。

制御部２７０は、該顔認証部２６０が操作者を「正規」と判断した場合に、撮像部２３０が取得した顔データを、登録者の顔データとして、認証データ保存部２４０に新たに保存する処理を行う。加えて、該顔認証部２６０が操作者を「正規」と判断した場合には、制御部２７０は、撮像部２３０が取得した顔データを、登録者の顔データとして、管理装置１２０に送信する処理を行う。認証データ保存部２４０への保存処理と管理装置１２０への送信処理とは、顔認証処理で操作者が正規と判断される度に行ってもよいが、所定期間毎（例えば１ヶ月毎）に行ってもよいし、所定頻度毎（例えば、認証処理１０回毎）に行ってもよいし、他のタイミングで行ってもよい。また、認証データ保存部２４０への保存処理を行うタイミングと管理装置１２０への送信処理を行うタイミングとは、同じであっても良いし、異なっていてもよい。

加えて、制御部２７０は、パスワード認証部２５０が所定回数（例えば３回）連続して操作者を「不正」と判断した場合や、顔認証部２６０が操作者を「不正」と判断した場合に、操作者の顔データを、不正操作者の顔データとして、管理装置１２０に送信する処理を行う（後述）。

通信部２８０は、制御部２７０の制御に基づいて、顔データを管理装置１２０へ送信する。

図３は、管理装置１２０の機能的構成を概略的に示すブロック図である。図３に示したように、この管理装置１２０は、管理処理部３１０と、登録者照合部３２０と、ウェブ照合部３３０と、登録者データベース３４０と、通信部３５０とを備えている。なお、これらの各部３１０〜３５０は、その一部（例えば、管理処理部３１０、登録者照合部３２０及びウェブ照合部３３０）をソフトウエア的に構築することもできるが、全てをハードウエア的に構築してもよい。

管理処理部３１０は、通信部３５０を介して、通信端末１１０から、登録者の顔データ及び不正操作者の顔データを受け取る。登録者の顔データを受け取った場合、管理処理部３１０は、登録者データベース３４０に格納された、その登録者の顔データを、通信端末１１０から受け取った顔データに更新する。このとき、古い顔データは、削除してもよいし、旧データとしてそのまま保存してもよい。一方、不正操作者の顔データを受け取った場合、管理処理部３１０は、その顔データを登録者照合部３２０やウェブ照合部３３０に送る（後述）。

登録者照合部３２０は、管理処理部３１０から不正操作者の顔データを受け取ると、その顔データの特徴データを、登録者データベース３４０に保存された各顔データの特徴データと、順に比較する処理（以下、「登録者照合処理」と記す）を行う。そして、特徴データが一致した場合、その登録者を、不正操作者であると判断する。

ウェブ照合部３３０は、不正操作者に係る顔データの特徴データを、ウェブ上で公開されている顔画像の特徴データと比較する処理（以下、ウェブ照合処理」と記す）を行う。このウェブ照合処理は、例えば、ウェブクロールと称される技術を用いて、インターネット上で公開された顔画像を適時収集しておき、その収集された顔画像の特徴データを不正操作者の顔データに係る特徴データと比較することで、行うことができる。

登録者データベース３４０は、例えばハードディスク等のストレージ装置を備え、上述のように、管理処理部３１０から登録者の顔データを受け取って保存する。顔データは、団体（企業等）毎に、その登録者の氏名や所属部署等の情報と関連付けて保存されることが望ましい。図３の例は、６つの会社Ａ、Ｂ、・・・、Ｆの従業員の顔データが、登録者データベース３４０に格納されている場合を示している。

通信部３５０は、通信端末１１０から顔データを受信する処理や、ウェブ上で公開された顔画像を取得する処理等を行う。

続いて、顔認証システム１００の動作について説明する。

まず、通信端末１１０の動作について、図４のフローチャート及び図５の概念図を用いて説明する。

通信端末１１０の制御部２７０（図２参照）は、待機状態の時、操作部２２０を監視する。

そして、操作者が、操作部２２０を操作してパスワードを入力すると（ステップＳ４０１参照）、制御部２７０が、パスワード認証部２５０に、その入力パスワードを用いたパスワード認証処理を行わせる（ステップＳ４０２参照）。パスワード認証部２５０は、予め登録されているパスワードと、操作者が入力したパスワードとの一致／不一致を判定する。

登録されたパスワードと入力されたパスワードとが一致しなかった場合（すなわち、ステップＳ４０３で‘ＮＧ’だった場合）、制御部２７０は、この不一致の回数ｎをカウントする（ステップＳ４０４参照）。そして、制御部２７０は、この不一致回数ｎと、予め定めた不一致許容回数Ｎ（ここでは、‘２’とする）とを比較する（ステップＳ４０５参照）。そして、不一致回数ｎが不一致許容回数Ｎを超えていなかった場合（すなわち、ステップＳ４０５で‘Ｎｏ’だった場合）は、パスワード入力待ちの状態（ステップＳ４０１参照）に戻る。このとき、制御部２７０は、表示部２１０の表示やエラー音等によって、パスワードが不正である旨を操作者に告知することが望ましい。

一方、ステップＳ４０５で、不一致回数ｎが不一致許容回数Ｎを超えていた場合（すなわち、ステップＳ４０５で‘Ｙｅｓ’だった場合）、制御部２７０は、撮像部２３０に、操作者を撮影させる（ステップＳ４０６参照）。この撮像は、後述の顔認証用の撮影処理（ステップＳ４０９参照）とは異なり、撮影することを予め操作者に告知すること無しに実行される。但し、撮影時に撮影音を再生することで、操作者に撮影されたことを知らせることにしてもよい。操作者に撮影したことを知らせることで、それ以上の不正操作を抑止する効果が期待できるからである。

撮像部２３０は、この撮像によって取得した顔データを、制御部２７０に送る。そして、制御部２７０は、この顔データを、通信部２８０に送る。通信部２８０は、この顔データを、不正操作者の顔データとして、管理装置１２０へ送信する（ステップＳ４０７参照）。この実施の形態では、不一致許容回数Ｎが‘２’に設定されているため、登録されたパスワードと入力されたパスワードとが連続して３回不一致となった場合に、不正操作者の顔データが管理装置１２０に送信される。

その後、制御部２７０は、エラー処理として、不一致回数ｎをリセットする処理や、写真を送信した旨を表示部２１０へ表示する処理等を行って（ステップＳ４０８参照）、パスワード入力待ちの状態（ステップＳ４０１参照）に戻る。なお、顔写真を撮影して送信した旨を表示することで、操作者のそれ以上の不正操作を抑止する効果が期待できる。

一方、ステップＳ４０３において、登録されたパスワードと入力されたパスワードとが一致した場合（すなわち、ステップＳ４０３で‘ＯＫ’だった場合）、制御部２７０は、認証用の顔撮影処理を行う（ステップＳ４０９参照）。

この撮影では、まず、撮像部２３０が、画像を随時撮像しつつ、表示部２１０の画面５１０に表示させる（図５参照）。そして、通信端末１１０の位置を調整して点線５２０内に顔を収めるように、操作者に促す。その後、操作者が操作部２２０を操作して撮影を行うことにより、この顔撮影処理が終了する。

顔撮影処理が終了すると、制御部２７０は、顔認証部２６０に、顔認証処理を行わせる（ステップＳ４１０参照）。

この顔認証処理で、顔認証部２６０は、まず、撮像部２３０がステップＳ４０９で取得した顔データ（ここでは顔画像）から、顔認証用の特徴データ（瞳、鼻孔、目頭、目尻、口端等の特徴部位の形状や配置位置等を示すデータ）を抽出する。更に、顔認証部２６０は、認証データ保存部２４０から、最初の登録者顔データ（この実施の形態では、登録者の顔画像）を読み出し、この登録者顔データの特徴データを抽出する。そして、これら２つの特徴データを比較し、一致する場合にはその操作者を「正規」と判断する。

一方、これらの特徴データが一致しない場合には、認証データ保存部２４０から次の登録者顔データを読み出して特徴データを抽出し、ステップＳ４０９で取得した顔データの特徴データと比較する。このような比較処理は、ステップＳ４０９で取得した顔データと特徴データが一致するものを、認証データ保存部２４０に保存された顔データから見つけ出すまで繰り返される。一致するものが見つけ出された場合、顔認証部２６０は、その操作者を「正規」と判断する。一方、認証データ保存部２４０に、ステップＳ４０９で取得した顔データと特徴データが一致するものが１つも保存されていなかった場合、顔認証部２６０は、その操作者を「不正」と判断する。

制御部２７０は、顔認証部２６０から、認証結果を受け取る。そして、顔認証の結果が「正規」だった場合（ステップＳ４１１で‘ＯＫ’だった場合）、制御部２７０は、ステップＳ４０９で取得した顔データの保存・送信処理を行う（ステップＳ４１２参照）。

この顔データ保存・送信処理では、認証データ保存部２４０に保存された顔データを、所定のタイミングで繰り返し更新する。このために、制御部２７０は、前回、認証データ保存部２４０に新しい顔データが追加された日付をチェックする。そして、その日付から所定期間（例えば１ヶ月）以上経過している場合には、認証データ保存部２４０に保存されている顔データの中で最も古いものを削除すると共に、ステップＳ４０９で取得した顔データを新たに保存する。更に、制御部２７０は、この新たな顔データを、通信部２８０に送って、登録者（すなわち、正規操作者）の顔データとして、管理装置１２０へ送信させる。

このとき、ステップＳ４０９で取得した新たな顔データではなく、認証データ保存部２４０から削除した顔データを管理装置１２０へ送信することにしてもよい。このような顔データを管理装置１２０に送信して登録者データベース３４０の更新用顔データに使用する場合も、顔認証処理時に撮像部２３０が撮像して顔認証部２６０で「正規」と判断された顔データを使用するため、この発明の効果を得ることができる。

また、ここでは、登録者の顔データの保存・送信を定期的（１ヶ月毎）に行うこととしたが、他のタイミング（例えば、操作回数が所定回数に達する度）に行ってもよい。

更には、認証データ保存部２４０へ新たな顔データを保存するタイミングと、管理装置１２０に顔データを送信するタイミングとは、個別に設定してもよい。例えば、認証データ保存部２４０への新規顔データ保存は１ヶ月毎に実行し、管理装置１２０に顔データを送信する処理は３ヶ月毎に実行することにしてもよい。

その後、制御部２７０は、この実施の形態１の認証処理を終了して、通信端末１１０への操作者の通常操作を受け付ける状態になる。

一方、ステップＳ４１１で、顔認証の結果が「不正」だった場合（ステップＳ４１１で‘ＮＧ’だった場合）、制御部２７０は、ステップＳ４０９で撮影した顔データを、管理装置１２０に送る。通信部２８０は、この顔データを、不正操作者の顔データとして、管理装置１２０へ送信する（ステップＳ４１３参照）。

その後、制御部２７０は、エラー処理として、顔認証のやり直しの告知や写真を送信したことの告知を表示部２１０へ表示する処理等を行って（ステップＳ４１４参照）、ステップＳ４０９の撮影処理に戻る。顔写真を撮影して送信した旨を表示することで、操作者のそれ以上の不正操作を抑止する効果が期待できる。なお、ここでは顔認証の結果が「不正」だった場合に、ステップＳ４０９以降の処理をやり直すこととしたが、パスワード入力（ステップＳ４０１参照）からやり直すこととしてもよい。更には、顔認証処理で「不正」と判断された回数が所定回数に達した場合や、エラー処理（ステップＳ４１４参照）の後で操作部２２０が所定時間操作されなかった場合に、パスワード入力（ステップＳ４０１参照）に戻ることとしてもよい。

次に、管理装置１２０の動作について、図６のフローチャートを用いて説明する。

管理装置１２０の管理処理部３１０は、待機状態の時、通信部３５０が顔データを受信した否かを監視する（ステップＳ６０１参照）。

通信部３５０が顔データを受信すると、管理処理部３１０は、その顔データが、登録者（正規操作者）のものか或いは不正操作者のものかの判断を行う（ステップＳ６０２参照）。上述のように、登録者の顔データとは、図４のステップＳ４１２で送信された顔データである。また、不正操作者の顔データとは、図４のステップＳ４０７，Ｓ４１３で送信された顔データである。

ステップＳ６０２で、登録者の顔データであると判断された場合、管理処理部３１０は、その顔データを用いて、登録者データベース３４０の該登録者の顔データを更新する。上述のように、顔データは、その登録者の他の個人情報（氏名や会社名等）と関連付けて格納されていることが望ましい（ステップＳ６０３参照）。

一方、ステップＳ６０２で不正操作者の顔データであると判断された場合、管理処理部３１０は、受信した顔データを登録者照合部３２０へ送る。登録者照合部３２０は、この顔データを用いて、登録者照合処理を行う（ステップＳ６０４参照）。

この登録者照合処理で、登録者照合部３２０は、まず、受信した顔データ（ここでは顔画像）から、特徴データ（瞳、鼻孔、目頭、目尻、口端等の特徴部位の形状や配置位置等を示すデータ）を抽出する。更に、登録者照合部３２０は、登録者データベース３４０から、最初の登録者の顔データ（この実施の形態では、登録者の顔画像）を読み出し、この登録者顔データの特徴データを抽出する。そして、これら２つの特徴データを比較する。これらの特徴データが一致する場合、登録者照合部３２０は、その登録者を不正操作者に特定する。

一方、受信した顔データが最初の登録者顔データとで特徴データが一致しなかった場合、登録者照合部３２０は、登録者データベース３４０から次の登録者の顔データを読み出して特徴データを抽出し、受信した不正操作者の顔データの特徴データと比較する。このような処理は、受信した顔データと特徴データが一致するものを、登録者データベース３４０に保存された顔データから見つけ出すまで繰り返される。なお、途中で一致する顔データが発見されたか否かに拘わらず、登録者データベース３４０に保存された顔データの全てについて、登録者照合処理を行うことにしてもよい。

なお、この登録者照合処理では、登録者データベース３４０に格納された登録者顔データのうち、不正操作された通信端末１１０の正規使用者と同じ企業等に属するものだけを照合対象としてもよいし、その所属企業等に拘わらず、全ての登録者顔データを照合対象としてもよい。但し、全ての登録者顔データを照合対象とする場合には、予め、その企業等の許可を受けておくことが望ましい。

一致するものが発見されている場合、登録者照合部３２０は、特定された登録者を不正操作者に特定し、その登録者の顔データ及び他の個人情報を、管理処理部３１０に送る。一方、登録者データベース３４０に、受信した顔データと特徴データが一致するものが１つも保存されていなかった場合、顔認証部２６０は、特定不可能と判断して、その旨を管理処理部３１０に送る。

管理処理部３１０は、不正使用者が特定された場合（ステップＳ６０５で‘Ｙｅｓ’の場合）には、後述の通知処理を行う（ステップＳ６０７参照）。

一方、不正使用者が特定されなかった場合（ステップＳ６０５で‘Ｎｏ’の場合）、管理処理部３１０は、受信した顔データをウェブ照合部３３０へ送る。ウェブ照合部３３０は、この顔データを用いて、ウェブ照合処理を行う（ステップＳ６０６参照）。

このウェブ照合処理で、ウェブ照合部３３０は、まず、受信した顔データ（ここでは顔画像）から、特徴データを抽出する。更に、ウェブ照合部３３０は、ウェブから収集した顔画像から、特徴データを抽出する。顔写真を収集するウェブサイトとしては、全てのサイトであっても良いし、例えば、ＳＮＳ（ソーシャルネットワーキングサービス）サイトから重点的に顔写真を収集することにしてもよい。ＳＮＳサイトでは、会員の顔写真と共にプロフィールが開示されていることも多いので、不正操作者を特定する上で有益である。なお、ウェブ照合部３３０は、ウェブクロールと称される技術を用いて、インターネット上で公開された顔画像を適宜収集しておくことが望ましい。

そして、ウェブ照合部３３０は、ウェブ上の顔画像から取得した特徴データを、順に、不正操作者の特徴データ（すなわち、通信端末１１０から取得した顔データの特徴データ）と比較する。不正操作者のものと一致する特徴データが発見された場合、ウェブ照合部３３０は、そのウェブ上の顔画像を、不正操作者の顔画像に特定する。そして、ウェブ照合部３３０は、特定されたウェブ上の顔画像を、付随する情報（例えばその顔画像を公開しているウェブページのＵＲＬ等）と共に、管理処理部３１０に送る。一方、不正操作者のものと一致する特徴データが発見されなかった場合、顔認証部２６０は、特定不可能と判断して、その旨を管理処理部３１０に送る。

その後、管理処理部３１０は、通信端末１１０に不正操作があった旨を、その通信端末１１０の正規使用者が属する企業等の管理者に通知する（ステップＳ６０７参照）。

このとき、その不正使用者が登録者照合処理で特定された場合には、その顔データ及び他の個人情報を、併せて通知する。また、その不正使用者がウェブ照合処理で特定された場合には、その不正使用者のウェブ上の顔画像や付随する情報（上述）を、併せて通知する。

以上説明したように、この実施の形態１によれば、顔認証部２６０に認証された顔データの一部又は全部を、所定のタイミングで、その正規操作者の顔データとして管理装置１２０に送信するので、企業等の管理者は、登録者データベース３４０に保存された従業員等の顔データを、容易に更新することができる。これにより、登録者（正規の操作者）の容姿が、年齢等に伴って変化したような場合でも、実際の容姿に近い顔データを常に保存しておくことができる。

また、この実施の形態１によれば、顔認証部２６０に「不正」と判断された顔データを管理装置１２０に送信するので、不正操作者の顔データを取得することができる。

更に、この実施の形態１によれば、顔認証処理に先立って、パスワード認証処理を行い、そのパスワード認証処理で所定回数（例えば３回）連続して「不正」と判断された場合に、操作者の顔データを取得して管理装置１２０に送信するので、不正操作者に顔認証操作を行わせること無しに、その不正操作者の顔データを取得することもできる。

加えて、この実施の形態１によれば、登録者照合処理（すなわち、不正操作者の顔データを、登録者データベース３４０に保存された他の登録者顔データと照合する処理）を行うことで、何れかの通信端末１１０の操作者が他の通信端末１１０を不正操作した場合に、その不正操作者を容易に特定できる。

また、この実施の形態１によれば、ウェブ照合処理（不正操作者の顔データを、ウェブ上で公開されている顔画像と照合する処理）を行うことによって、その不正操作者を特定できる。

１００顔認証システム
１１０通信端末
１２０管理装置
１３０通信網
２１０表示部
２２０操作部
２３０撮像部
２４０認証データ保存部
２５０パスワード認証部
２６０顔認証部
２７０制御部
２８０通信部
３１０管理処理部
３２０登録者照合部
３３０ウェブ照合部
３４０登録者データベース
３５０通信部

かかる課題を解決するために、請求項１の発明に係る顔認証システムは、１又は複数台の通信端末と、該通信端末に通信接続される管理装置とを備える顔認証システムであって、前記通信端末は、操作者を撮像して顔データを取得する撮像部と、登録者の顔データを保存する認証データ保存部と、前記撮像部が新たに取得した顔データと前記認証データ保存部に保存された前記登録者の顔データとを用いた顔認証処理によって、前記操作者の正規／不正を判断する顔認証部と、顔認証以外の認証処理によって前記操作者の正規／不正を判断する非顔認証部と、該非顔認証部が正規と判断した場合には、前記撮像部に前記操作者の顔データを取得させると共に、該顔データを用いて前記顔認証部に前記顔認証処理を行わせ、且つ、該非顔認証部が所定回数連続して前記操作者を不正と判断した場合には、前記撮像部に前記操作者の顔データを取得させると共に、該顔データを前記管理装置に不正操作者の顔データとして送信する処理を行う制御部と、を備えることを特徴とする。

また、請求項２の発明は、請求項１に記載の構成に加え、前記通信端末の前記制御部は、前記顔認証部が正規と判断した場合に、前記撮像部が取得した顔データを、前記登録者の顔データとして前記認証データ保存部に新たに保存する処理と、前記撮像部が取得した顔データを、該登録者の顔データとして前記管理装置に送信する処理とを、所定のタイミングで繰り返し行い、前記管理装置は、前記登録者の顔データを保存する登録者データベースと、該登録者データベースに保存された顔データを、前記通信端末から新たに受け取った該登録者の顔データに更新する管理処理部と、を備えることを特徴とする。

請求項３の発明に係る顔認証システムは、１又は複数台の通信端末と、該通信端末に通信接続される管理装置とを備える顔認証システムであって、前記通信端末は、操作者を撮像して顔データを取得する撮像部と、登録者の顔データを保存する認証データ保存部と、前記撮像部が新たに取得した顔データと前記認証データ保存部に保存された前記登録者の顔データとを用いた顔認証処理によって、前記操作者の正規／不正を判断する顔認証部と、前記顔認証部が不正と判断した場合に、その認証処理に使用された前記操作者の顔データを、不正操作者の顔データとして前記管理装置に送信する処理を行う制御部と、を備え、且つ、前記管理装置は、前記登録者の顔データを保存する登録者データベースと、該通信端末から受信した前記不正操作者の顔データを、前記登録者データベースに保存された前記顔データと照合することによって、該不正操作者を特定する登録者照合部と、を備えることを特徴とする。

請求項４の発明は、請求項３に記載の構成に加え、前記通信端末の前記制御部は、該顔認証部が正規と判断した場合に、前記撮像部が取得した顔データを、前記登録者の顔データとして前記認証データ保存部に新たに保存する処理と、前記撮像部が取得した顔データを、該登録者の顔データとして前記管理装置に送信する処理とを、所定のタイミングで繰り返し行い、前記管理装置は、前記登録者データベースに保存された顔データを、前記通信端末から新たに受け取った該登録者の顔データに更新する管理処理部を備える、ことを特徴とする。

請求項５の発明に係る顔認証システムは、１又は複数台の通信端末と、該通信端末に通信接続される管理装置とを備える顔認証システムであって、前記通信端末は、操作者を撮像して顔データを取得する撮像部と、登録者の顔データを保存する認証データ保存部と、前記撮像部が新たに取得した顔データと前記認証データ保存部に保存された前記登録者の顔データとを用いた顔認証処理によって、前記操作者の正規／不正を判断する顔認証部と、前記顔認証部が不正と判断した場合に、その認証処理に使用された前記操作者の顔データを、不正操作者の顔データとして前記管理装置に送信する処理を行う制御部と、を備え、且つ、前記管理装置は、前記通信端末から受信した前記不正操作者の顔データを、ウェブページから取得した顔データと照合することによって、該不正操作者を特定するウェブ照合部を備える、ことを特徴とする。
請求項６の発明は、請求項５の構成に加え、前記通信端末の前記制御部は、該顔認証部が正規と判断した場合に、前記撮像部が取得した顔データを、前記登録者の顔データとして前記認証データ保存部に新たに保存する処理と、前記撮像部が取得した顔データを、該登録者の顔データとして前記管理装置に送信する処理とを、所定のタイミングで繰り返し行い、前記管理装置は、前記登録者の顔データを保存する登録者データベースと、該登録者データベースに保存された顔データを、前記通信端末から新たに受け取った該登録者の顔データに更新する管理処理部とを備える、ことを特徴とする。

請求項７の発明に係る顔認証プログラムは、コンピュータを、請求項１乃至６の何れかに記載の顔認証システムの通信端末として機能させる。

請求項１の発明によれば、顔認証処理に先立って、顔認証以外の認証処理である非顔認証処理を行い、その非顔認証処理で所定回数連続して認証が拒否された場合に、操作者の顔データを取得して管理装置に送信するので、不正操作者に顔認証操作を行わせること無しに、その不正操作者の顔データを取得することができる。

請求項２の発明によれば、顔認証部に正規であると判断された顔データを、所定のタイミングで、その操作者の顔データとして管理装置に送信するので、管理装置は、登録者データベースに格納された登録者の顔データを、容易に更新することができる。

請求項３の発明によれば、何れかの通信端末機の操作者が他の通信端末を不正操作した場合に、登録者照合処理によって、その不正操作者を容易に特定できる。

請求項４の発明によれば、顔認証部に正規であると判断された顔データを、所定のタイミングで、その操作者の顔データとして管理装置に送信するので、管理装置は、登録者データベースに格納された登録者の顔データを、容易に更新することができる。

請求項５の発明によれば、何れかの通信端末機の操作者が他の通信端末を不正操作した場合に、ウェブ照合処理によって、その不正操作者を容易に特定できる。
請求項６の発明によれば、顔認証部に正規であると判断された顔データを、所定のタイミングで、その操作者の顔データとして管理装置に送信するので、管理装置は、登録者データベースに格納された登録者の顔データを、容易に更新することができる。

請求項７の発明によれば、請求項１乃至６の何れかに記載の顔認証システムの通信端末を、コンピュータを用いて実現できる。

かかる課題を解決するために、請求項１の発明に係る顔認証システムは、１又は複数台の通信端末と、該通信端末に通信接続される管理装置とを備える顔認証システムであって、前記通信端末は、操作者を撮像して顔データを取得する撮像部と、登録者の顔データを保存する認証データ保存部と、前記撮像部が新たに取得した顔データと前記認証データ保存部に保存された前記登録者の顔データとを用いた顔認証処理によって、前記操作者の正規／不正を判断する顔認証部と、顔認証以外の認証処理によって前記操作者の正規／不正を判断する非顔認証部と、該非顔認証部が正規と判断した場合には、前記撮像部に前記操作者の顔データを取得させると共に、該顔データを用いて前記顔認証部に前記顔認証処理を行わせ、且つ、該非顔認証部が所定回数連続して前記操作者を不正と判断した場合には、前記撮像部に前記操作者の顔データを取得させると共に、該顔データを前記管理装置に不正操作者の顔データとして送信する処理を行う制御部と、を備え、前記管理装置は、該通信端末から受信した前記不正操作者の顔データを、前記登録者の顔データを保存する前記登録者データベースに保存された前記顔データ及び／又はウェブページから取得した顔データと照合することによって、該不正操作者を特定する、ことを特徴とする。

請求項１の発明によれば、顔認証処理に先立って、顔認証以外の認証処理である非顔認証処理を行い、その非顔認証処理で所定回数連続して認証が拒否された場合に、操作者の顔データを取得して管理装置に送信するので、不正操作者に顔認証操作を行わせること無しに、その不正操作者の顔データを取得することができる。
更に、請求項１の発明によれば、何れかの通信端末機の操作者が他の通信端末を不正操作した場合に、登録者照合処理及び／又はウェブ照合処理によって、その不正操作者を容易に特定できる。

かかる課題を解決するために、請求項１の発明に係る顔認証システムは、１又は複数台の通信端末と、該通信端末に通信接続される管理装置とを備える顔認証システムであって、前記通信端末は、操作者を撮像して顔データを取得する撮像部と、登録者の顔データを保存する認証データ保存部と、前記撮像部が新たに取得した顔データと前記認証データ保存部に保存された前記登録者の顔データとを用いた顔認証処理によって、前記操作者の正規／不正を判断する顔認証部と、顔認証以外の認証処理によって前記操作者の正規／不正を判断する非顔認証部と、該非顔認証部が正規と判断した場合には、前記撮像部に前記操作者の顔データを取得させると共に、該顔データを用いて前記顔認証部に前記顔認証処理を行わせ、且つ、該非顔認証部が所定回数連続して前記操作者を不正と判断した場合には、前記撮像部に前記操作者の顔データを取得させると共に、該顔データを前記管理装置に不正操作者の顔データとして送信する処理を行う制御部と、を備え、前記管理装置は、該通信端末から受信した前記不正操作者の顔データを、前記登録者の顔データを保存する登録者データベースに保存された前記顔データ及び／又はウェブページから取得した顔データと照合することによって、該不正操作者を特定する、ことを特徴とする。

また、請求項２の発明は、請求項１に記載の構成に加え、前記制御部は、前記顔認証部が不正と判断した場合に、その認証処理に使用された前記操作者の顔データを、前記不正操作者の顔データとして前記管理装置に送信する処理を行うことを特徴とする。

Claims

１又は複数台の通信端末と、該通信端末に通信接続される管理装置とを備える顔認証システムであって、
前記通信端末は、
操作者を撮像して顔データを取得する撮像部と、
登録者の顔データを保存する認証データ保存部と、
前記撮像部が新たに取得した顔データと前記認証データ保存部に保存された前記登録者の顔データとを用いた顔認証処理によって、前記操作者の正規／不正を判断する顔認証部と、
該顔認証部が正規と判断した場合に、前記撮像部が取得した顔データを、前記登録者の顔データとして前記認証データ保存部に新たに保存する処理と、前記撮像部が取得した顔データを、該登録者の顔データとして前記管理装置に送信する処理とを、所定のタイミングで繰り返し行う制御部と、
を備え、
前記管理装置は、前記登録者の顔データを保存する登録者データベースと、
該登録者データベースに保存された顔データを、前記通信端末から新たに受け取った該登録者の顔データに更新する管理処理部と、
を備えることを特徴とする顔認証システム。
前記制御部は、前記顔認証部が不正と判断した場合に、その認証処理に使用された前記操作者の顔データを、不正操作者の顔データとして前記管理装置に送信する処理を行うことを特徴とする請求項１に記載の顔認証システム。
前記通信端末は、顔認証以外の認証処理によって前記操作者の正規／不正を判断する非顔認証部を更に備え、
前記制御部は、該非顔認証部が正規と判断した場合には、前記撮像部が前記操作者の顔データを取得すると共に、該顔データを用いて前記顔認証部が前記顔認証処理を行い、且つ、該非顔認証部が所定回数連続して前記操作者を不正と判断した場合には、前記撮像部が前記操作者の顔データを取得すると共に、該顔データを前記管理装置に不正操作者の顔データとして送信する、
ことを特徴とする請求項１又は２に記載の顔認証システム。
前記管理装置は、該通信端末から受信した前記不正操作者の顔データを、前記登録者データベースに保存された前記顔データと照合することによって、該不正操作者を特定する登録者照合部を更に備えることを特徴とする請求項２又は３に記載の顔認証システム。
前記管理装置は、前記通信端末から受信した前記不正操作者の顔データを、ウェブページから取得した顔データと照合することによって、該不正操作者を特定するウェブ照合部を更に備えることを特徴とする請求項２乃至４の何れかに記載の顔認証システム。
コンピュータを、請求項１乃至５の何れかに記載の顔認証システムの通信端末として機能させるための顔認証プログラム。