JP7355790B2 - プログラム、システムおよび情報処理方法 - Google Patents

Description

本発明は、プログラム、システムおよび情報処理方法に関する。

従来、顔データに基づいて認証を行う顔認証システムとして、入力された入力顔データと、予め登録された登録顔データとを照合して本人認証を行う顔認証システムが知られている（例えば、特許文献１、２参照）。

特許文献１に記載された顔認証システムでは、カメラにより撮像された撮像画像中の顔部分の画像を用いて対象人物を認証する。また、特許文献２に記載された顔認証システムでは、例えば登録される顔画像が４つの場合、２つを精度保証用の顔パターンとし、１つを外乱成分吸収用の顔パターンとし、１つを更新対象用の顔パターンとしている。そして、新たに顔パターンを登録するときには、事前に登録されている４つの顔パターンのうち、新たに登録される顔パターンとの類似度が２番目に低い更新対象用の顔パターンを削除する。すなわち、新たに登録される顔パターンとの類似度が一番低い外乱成分吸収用の顔パターンを残すことにより、環境のばらつきに順応して顔認証を行う。

特開２０１９－１９７４２６号公報 特開２００６－７２５４０号公報

顔認証で用いたユーザの顔画像を他の用途で使用したりサービスの利用履歴と紐付けて記憶させたりすると顔画像の情報が外部に流出したときに大きな問題となる。

本発明は、このような点を考慮してなされたものであり、ユーザの顔画像から抽出された属性を用いることによりセキュリティ性を向上させることができるプログラム、システムおよび情報処理方法を提供することを目的とする。

本発明のプログラムは、
コンピュータを、属性検出手段と、演算手段と、出力手段として機能させるプログラムであって、
前記属性検出手段は、認証端末により撮像された顔画像から性別および年代のうち少なくとも何れかを含む属性を検出し、
前記演算手段は、前記属性検出手段により検出された属性、ユーザ毎の利用中サービス情報および利用履歴データに基づいてユーザ有用情報を演算し、
前記出力手段は、前記演算手段により演算されたユーザ有用情報を出力することを特徴とする。

本発明のプログラムは、
コンピュータを、属性検出手段と、履歴データ保存手段として機能させるプログラムであって、
前記属性検出手段は、認証端末により撮像された顔画像から性別および年代のうち少なくとも何れかを含む属性を検出し、
前記履歴データ保存手段は、前記認証端末による顔画像の撮像に関する認証関連情報および前記属性検出手段により検出された属性を紐付けて顔認証利用履歴データストアに記憶させることを特徴とする。

本発明のシステムは、
認証端末により撮像された顔画像から性別および年代のうち少なくとも何れかを含む属性を検出する属性検出手段と、
前記属性検出手段により検出された属性、ユーザ毎の利用中サービス情報および利用履歴データに基づいてユーザ有用情報を演算する演算手段と、
前記演算手段により演算されたユーザ有用情報を出力する出力手段と、
を備えたことを特徴とする。

本発明のシステムは、
認証端末により撮像された顔画像から性別および年代のうち少なくとも何れかを含む属性を検出する属性検出手段と、
前記認証端末による顔画像の撮像に関する認証関連情報および前記属性検出手段により検出された属性を紐付けて顔認証利用履歴データストアに記憶させる履歴データ保存手段と、
を備えたことを特徴とする。

本発明の情報処理方法は、
コンピュータにより行われる情報処理方法であって、
認証端末により撮像された顔画像から性別および年代のうち少なくとも何れかを含む属性を検出する工程と、
検出された属性、ユーザ毎の利用中サービス情報および利用履歴データに基づいてユーザ有用情報を演算する工程と、
演算されたユーザ有用情報を出力する工程と、
を備えたことを特徴とする。

本発明の情報処理方法は、
コンピュータにより行われる情報処理方法であって、
認証端末により撮像された顔画像から性別および年代のうち少なくとも何れかを含む属性を検出する工程と、
前記認証端末による顔画像の撮像に関する認証関連情報および検出された属性を紐付けて顔認証利用履歴データストアに記憶させる工程と、
を備えたことを特徴とする。

本発明のプログラム、システムおよび情報処理方法によれば、ユーザの顔画像から抽出された属性を用いることによりセキュリティ性を向上させることができる。

本発明の実施の形態による顔認証システムを概略的に示す図である。 図１に示す顔認証システムの各構成要素間での情報のやりとりを示す図である。 図１に示す顔認証システムにより行われる動作を示すフローチャートである。 図１に示す顔認証システムにより行われる学習済モデルの生成およびユーザ有用情報の演算の動作を示すブロック図である。

以下、図面を参照して本発明の実施の形態について説明する。図１乃至図４は、本実施の形態に係る顔認証システムを示す図である。

本実施の形態による顔認証システム１は、顔認証プラットフォーム１０と、個人データストア３０と、属性検出サーバ３２と、顔認証利用履歴データストア３４と、複数の認証端末４０とを備えている。個人データストア３０、属性検出サーバ３２、顔認証利用履歴データストア３４および複数の認証端末４０は、それぞれ、インターネット回線等のネットワークを介して顔認証プラットフォーム１０と通信可能なように接続されている。また、顔認証プラットフォーム１０は、インターネット回線等のネットワークを介して、ユーザが所持するユーザ端末８０と通信可能に接続されている。このような顔認証システム１の各構成要素について以下に説明する。

顔認証プラットフォーム１０は、システム会社に設置されているコンピュータ等である。具体的には、顔認証プラットフォーム１０は、制御部１２と、記憶部２６と、通信インターフェース２８とを有している。記憶部２６および通信インターフェース２８はそれぞれバスにより制御部１２に接続されている。制御部１２は、ＣＰＵ（中央演算処理装置）等であり、記憶部２６に記憶されているプログラムを実行することにより受付手段１４、送信手段１６、学習済モデル生成手段１８、演算手段２０、出力手段２２、認証手段２４および履歴データ保存手段２５として機能する。記憶部２６は、ユーザの登録情報およびユーザの顔画像に関する情報をユーザの識別情報に紐付けて記憶するようになっている。ユーザの登録情報は、ユーザの氏名、生年月日、ユーザ名、メールアドレス、ユーザ端末８０の電話番号、クレジットカードの情報、パスワード等を含む。ユーザの顔画像に関する情報は、ユーザの顔画像データまたはユーザの顔画像データから所定のハッシュ関数により抽出されるハッシュ値である。通信インターフェース２８は、インターネット回線等のネットワークを介して、無線または有線により他の装置に対して信号の送受信を行う。

また、記憶部２６には、認証端末４０の識別情報と、認証端末４０が設置されるサービス機関の情報（例えば、店舗コード、サービスカテゴリー等）や認証端末４０の位置情報とが紐付けられて記憶されている。

なお、制御部１２により実行されるプログラムは記憶部２６に記憶されているものに限定されない。顔認証プラットフォーム１０に取り付けられた記録媒体に記憶されているプログラムや、外部装置から顔認証プラットフォーム１０に送信されたプログラム等を制御部１２が実行することによって受付手段１４、送信手段１６、学習済モデル生成手段１８、演算手段２０、出力手段２２、認証手段２４および履歴データ保存手段２５として機能するようになっていてもよい。

受付手段１４は、個人データストア３０、属性検出サーバ３２、顔認証利用履歴データストア３４、各認証端末４０、ユーザ端末８０等の様々な外部装置から情報を受け付ける。送信手段１６は、通信インターフェース２８を介して、個人データストア３０、属性検出サーバ３２、顔認証利用履歴データストア３４、ユーザ端末８０等の様々な外部装置に情報を送信する。学習済モデル生成手段１８は、複数の教師データ５０を用い、後述する属性検出サーバ３２の属性検出手段３３により検出された属性および認証端末４０による顔画像の撮像に関する認証関連情報（具体的には、認証端末４０が設置されるサービス機関の情報や認証端末４０の位置、ユーザの顔画像の撮像日時等）を入力、ユーザ有用情報５６を出力とする学習済モデル５２を深層学習により生成する。このような学習済モデル５２の生成方法の詳細については後述する。演算手段２０は、学習済モデル生成手段１８により生成された学習済モデル５２を参照して、入力データ５４（具体的には、認証端末４０により撮像された顔画像から属性検出手段３３により検出された属性およびこの認証端末４０による顔画像の撮像に関する認証関連情報）に基づいてユーザ有用情報５６を演算する。このようなユーザ有用情報５６の演算方法の詳細については後述する。出力手段２２は、演算手段２０により演算されたユーザ有用情報５６を出力する。認証手段２４は、認証端末４０により撮像された顔画像と、記憶部２６に記憶されているユーザの顔画像に関する情報とを比較することによりユーザの認証を行う。履歴データ保存手段２５は、認証端末４０による顔画像の撮像に関する認証関連情報および属性検出手段３３により検出された属性を紐付けて顔認証利用履歴データストア３４の記憶部３５に記憶させる。

個人データストア３０は、ユーザ毎の利用中サービス情報を個人データとして記憶する記憶部３１を有するコンピュータ等である。具体的には、ユーザはユーザ端末８０により複数のサービスのうちどのサービスを利用するかを選択することができるようになっているが、ユーザがユーザ端末８０により利用することを登録したサービスが利用中サービス情報として記憶部３１に記憶されるようになっている。また、利用サービス毎にカテゴリ化し、そのカテゴリコードおよびサービスコードを後述する顔認証利用履歴データストア３４に記憶させる。このことにより、利用サービス種別単位での利用頻度の集約を行うことができる。

属性検出サーバ３２は、各認証端末４０により撮像された顔画像から性別および年代のうち少なくとも何れかを含む属性を検出する属性検出手段３３を有するコンピュータ等である。ここで、属性検出サーバ３２の制御部（図示せず）がプログラムを実行することにより当該制御部が属性検出手段３３として機能する。具体的には、属性検出サーバ３２において、顔認証プラットフォーム１０から顔画像が送信されると、この受け付けた顔画像からユーザの性別および年代（例えば、２０代、３０代、等）のうち少なくとも何れかを含む属性を属性検出手段３３が検出する。このような属性の検出方法として、公知の様々なプログラムを用いることができる。

顔認証利用履歴データストア３４は、認証関連情報および属性検出手段３３により検出された属性を紐付けて記憶する記憶部３５を有するコンピュータ等である。具体的には、記憶部３５に記憶される顔認証利用履歴データは、ユーザの性別情報、年代情報、サービスカテゴリー、認証端末４０の識別情報から導き出される店舗コード、認証端末４０の識別情報から導き出される認証端末４０の位置情報のうち少なくとも一部または全部を含むものであり、記憶部３５は、この顔認証利用履歴データをユーザの識別情報および利用日時（すなわち、認証端末４０によるユーザの顔画像の撮像日時）に紐付けて記憶する。顔認証利用履歴データは、具体的には暗号化された文字列である。顔認証利用履歴データストア３４の記憶部３５には、ユーザの登録情報やユーザの顔画像に関する情報は記憶されない。

認証端末４０は、様々なサービス機関に設けられたものであり、ユーザの顔画像の撮像を行うカメラ等の撮像部を有している。撮像部により撮像されたユーザの顔画像の情報は認証端末４０から顔認証プラットフォーム１０に送信されるようになっている。また、顔認証プラットフォーム１０でユーザの認証がおこなわれると、認証端末４０が設けられているサービス機関において、認証が行われたユーザに対して様々な処理が行われるようになっている。例えば、認証端末４０がオフィスビルや集合住宅施設等の出入り口に配置されている場合には、顔認証プラットフォーム１０によりユーザの認証が行われたときに、これらのオフィスビルや集合住宅施設の出入り口等に配置される扉の施錠が解除されるようになる。また、認証端末４０がタクシーの車内、飲食店、ホテル、交通機関、コンビニエンスストア等に配置されている場合には、これらのサービス機関で料金の支払いを行う際に、顔認証プラットフォーム１０によりユーザの認証が行われたときにキャッシュレスによる決済を可能とする。この場合には、顔認証プラットフォーム１０から金融機関やクレジットカード会社のサーバに支払い情報が送信されることにより、ユーザの銀行口座から支払い金額が自動的に引き落とされたりクレジットカードの利用明細に追加されたりするようになる。また、顔認証プラットフォーム１０により決済が行われるのではなく、認証端末４０が設けられているサービス機関によりキャッシュレスによる決済が行われてもよい。具体的には、顔認証プラットフォーム１０の認証手段２４によりユーザの認証が行われると、認証端末４０が設けられているサービス機関に対して顔認証プラットフォーム１０からユーザの認証が行われたという情報が送信され、このことにより当該サービス機関においてキャッシュレスによる決済が行われる。例えば、タクシーの車内に認証端末４０が設けられており、顔認証プラットフォーム１０にユーザの顔画像が登録されている場合は、認証端末４０の撮像部によりユーザの顔画像が撮像されて顔認証プラットフォーム１０の認証手段２４によりユーザの認証が行われると、タクシーアプリで登録しているクレジットカード等による決済が可能になる。なお、上記の説明では顔認証プラットフォーム１０にユーザの顔画像が登録されているサービス運用が前提となっているが、本実施の形態はこの限りではない。

ユーザ端末８０はユーザが所持するものである。ユーザ端末８０は例えばパーソナルコンピュータ、ＰＣタブレット端末、スマートフォン等を含む。ユーザ端末８０は、インターネット回線等のネットワークを介して、無線または有線により他の装置（具体的には、例えば顔認証プラットフォーム１０）に対して信号の送受信を行う。また、ユーザ端末８０ではオンラインストアや顔認証プラットフォーム１０の管理会社のウエブサイト等から顔認証アプリをインストールすることができるようになっている。このような顔認証アプリをインストールすると、ユーザはユーザ端末８０により顔画像データの登録や様々な登録情報（例えば、氏名、生年月日、ユーザ名、メールアドレス、ユーザ端末８０の電話番号、クレジットカードの情報、パスワード等）の入力等を行うことができるようになる。

次に、本実施の形態の顔認証システム１による処理の流れについて説明する。図２は、図１に示す顔認証システム１の各構成要素間での情報のやりとりを示す図であり、図３は、図１に示す顔認証システム１により行われる動作を示すフローチャートである。また、図４は、図１に示す顔認証システム１により行われる学習済モデル５２の生成およびユーザ有用情報５６の演算の動作を示すブロック図である。

まず、顔認証システム１のサービスを利用しようとするユーザは、ユーザ端末８０により顔画像を登録する。具体的には、ユーザは最初に顔認証アプリをユーザ端末８０にインストールする。そして、ユーザがユーザ端末８０において顔認証アプリを起動すると、ユーザ登録画面がタッチパネルに表示される。このようなユーザ登録画面においてユーザが氏名（漢字）、氏名（カナ）、生年月日、ユーザ名、ユーザ端末８０の電話番号、ユーザ端末８０のメールアドレス、パスワード等の登録情報を入力し、利用規約に同意する欄にチェックを入れた後に登録ボタンを押下すると、タッチパネルには顔画像の撮像画面が表示される。このような撮像画面でユーザがユーザ端末８０のカメラにより顔画像を撮像すると、ユーザ登録画面で入力された様々な登録情報およびユーザの顔画像の情報がユーザ端末８０から顔認証プラットフォーム１０に送信される。このようにして、顔認証プラットフォーム１０の受付手段１４はユーザ端末８０から登録情報および顔画像の情報を受け付ける。また、ユーザ端末８０の識別情報も、顔認証プラットフォーム１０の受付手段１４が受け付ける。顔認証プラットフォーム１０の制御部１２は、ユーザ端末８０から登録情報および顔画像の情報を受付手段１４が受け付けるとユーザの識別情報を発行する。また、記憶部２６には、ユーザの登録情報および顔画像の情報がユーザの識別情報に紐付けられて記憶される。また、ユーザはユーザ端末８０において顔認証アプリにより複数のサービスの中から利用するサービスを選択する。選択されたサービスに関する情報はユーザの識別情報に紐付けられて個人データストア３０の記憶部３１に記憶される。

次に、サービス機関に設けられる認証端末４０の撮像部によりユーザの顔画像が撮像されたときの動作について説明する。認証端末４０の撮像部によりユーザの顔画像が撮像されると（ＳＴＥＰ１の「ＹＥＳ」）、認証情報が認証端末４０から顔認証プラットフォーム１０に送信される（ＳＴＥＰ２）。認証情報は、ユーザの顔画像データ、撮像日時および認証端末４０の識別情報を含む。顔認証プラットフォーム１０の認証手段２４は、認証端末４０により撮像された顔画像と、記憶部２６に記憶されているユーザの顔画像に関する情報とを比較することによりユーザの認証を行う（ＳＴＥＰ３）。ユーザの認証が行われると、顔認証プラットフォーム１０から、認証されたユーザの識別情報が、認証端末４０が設けられているサービス機関に返信される。このことにより、認証端末４０が設けられているサービス機関では、認証されたユーザに対して様々な処理を行うことができる。

また、ユーザの顔画像データが顔認証プラットフォーム１０から属性検出サーバ３２に送信される（ＳＴＥＰ４）。そして、属性検出サーバ３２では、属性検出手段３３により顔画像データから属性情報が検出される（ＳＴＥＰ５）。上述したように、属性情報は性別情報および年代情報のうち少なくとも何れかを含む。そして、属性検出サーバ３２により検出された属性情報が属性検出サーバ３２から顔認証プラットフォーム１０に送信される（ＳＴＥＰ６）。その後、履歴データ保存手段２５は、通信インターフェース２８を介して顔認証利用履歴データを顔認証利用履歴データストア３４に送信し、記憶部３５に顔認証利用履歴データを記憶させる（ＳＴＥＰ７）。上述したように、顔認証利用履歴データは、属性検出サーバ３２により検出された属性情報に含まれるユーザの性別情報、年代情報、サービスカテゴリー、認証端末４０による顔画像の撮像に関する認証関連情報（具体的には、認証端末４０が設置されるサービス機関の情報や認証端末４０の位置、ユーザの顔画像の撮像日時等）のうち少なくとも一部または全部を含むものである。また、ユーザの識別情報および認証端末４０によるユーザの顔画像の撮像日時（すなわち、サービス機関の利用日時）も顔認証プラットフォーム１０から顔認証利用履歴データストア３４に送信される。そして、記憶部３５には、顔認証利用履歴データがユーザの識別情報およびサービス機関の利用日時に紐付けられた状態で記憶される。

また、属性検出サーバ３２の属性検出手段３３により検出された属性情報、個人データストア３０の記憶部３１に記憶されているユーザ毎の利用中サービス情報および顔認証利用履歴データストア３４の記憶部３５に記憶されている顔認証利用履歴データに基づいて、演算手段２０によりユーザ有用情報５６が演算され（ＳＴＥＰ８）、演算されたユーザ有用情報５６が出力手段２２により出力される。ユーザ有用情報５６は、サービスのキャンペーン情報（例えば、割引クーポンや無料クーポンの情報）、サービスの利用可能日時情報、特別なサービスの提供情報等の、ユーザにとって有用な情報を含む。出力手段２２により出力されたユーザ有用情報５６は送信手段１６により顔認証プラットフォーム１０からユーザ端末８０に送信される（ＳＴＥＰ９）。ユーザ端末８０のタッチパネルには、顔認証プラットフォーム１０から送信されたユーザ有用情報５６が表示される。このことにより、ユーザはユーザ有用情報５６を活用することができる。このような動作の詳細について図４を用いて説明する。

まず、顔認証プラットフォーム１０において、学習済モデル生成手段１８により学習済モデル５２を予め生成しておく。このような学習済モデル生成手段１８による学習済モデル５２の生成方法の詳細について以下に説明する。学習済モデル生成手段１８は、ニューラルネットワーク（ＮＮ）、好ましくは畳み込みニューラルネットワーク（ＣＮＮ）等から構成されている。教師データ５０は、属性検出手段３３により検出された属性情報、個人データストア３０の記憶部３１に記憶されているユーザ毎の利用中サービス情報（サービスコード）および顔認証利用履歴データストア３４の記憶部３５に記憶されている顔認証利用履歴データを含む。そして、このようなニューラルネットワークでは、属性検出手段３３により検出された属性および認証端末４０による顔画像の撮像に関する認証関連情報（具体的には、認証端末４０が設置されるサービス機関の情報や認証端末４０の位置、ユーザの顔画像の撮像日時等）を入力すると、ユーザ有用情報５６を出力するようになる。このようなニューラルネットワークとして既知のものを用いることができる。

次に、演算手段２０による演算方法の詳細について説明する。認証端末４０の撮像部により撮像されたユーザの顔画像から属性検出サーバ３２の属性検出手段３３によりユーザの属性が検出されると、演算手段２０は、学習済モデル生成手段１８により生成された学習済モデル５２に基づいて、属性検出手段３３により検出された属性および認証端末４０による顔画像の撮像に関する認証関連情報を入力したときのユーザ有用情報５６の演算を行う。例えば、属性検出手段３３により検出されたユーザの属性が４０代男性であり、個人データストア３０の記憶部３１に記憶されている利用中サービス情報においてカフェおよびコンビニエンスストアを登録している４０代男性のユーザが、カフェに行った後にコンビニエンスストアに行く場合が多いときには、カフェに設けられた認証端末４０により認証が行われることによりこのユーザの属性が４０代男性であることが属性検出手段３３により検出されたときには、このカフェに近い、撮像日時に営業しているコンビニエンスストアの店舗の情報や、この店舗で利用可能なキャンペーン情報（例えば、割引クーポンや無料クーポンの情報）等がユーザ有用情報５６として演算される。演算手段２０により演算されたユーザ有用情報５６は出力手段２２により出力される。出力手段２２により出力されたユーザ有用情報５６は、送信手段１６により、認証手段２４により認証されたユーザのユーザ端末８０に送信される。そして、認証手段２４により認証されたユーザのユーザ端末８０のタッチパネルには、顔認証プラットフォーム１０から送信されたユーザ有用情報５６が表示される。このことにより、認証が行われたユーザは、様々なサービスを享受することができるようになる。

以上のような構成からなる本実施の形態のプログラム、顔認証システム１および情報処理方法によれば、属性検出手段３３は、認証端末４０により撮像された顔画像から性別および年代のうち少なくとも何れかを含む属性を検出し、演算手段２０は、属性検出手段３３により検出された属性、ユーザ毎の利用中サービス情報およびユーザの利用履歴データに基づいてユーザ有用情報５６を演算し、出力手段２２は、演算手段２０により演算されたユーザ有用情報５６を出力する。このことにより、ユーザの顔画像を保存しなくてもユーザ有用情報５６を出力することができるため、セキュリティ性を保ちながらユーザの利便性を向上させることができる。

また、以上のような構成からなる本実施の形態のプログラム、顔認証システム１および情報処理方法によれば、属性検出手段３３は、認証端末４０により撮像された顔画像から性別および年代のうち少なくとも何れかを含む属性を検出し、履歴データ保存手段２５は、認証端末４０による顔画像の撮像に関する認証関連情報および属性検出手段３３により検出された属性を紐付けて顔認証利用履歴データストア３４に記憶させる。このことにより、ユーザの顔画像を保存しなくても認証端末４０による顔画像の撮像に関する認証関連情報および属性検出手段３３により検出された属性を紐付けて記憶することができるため、セキュリティ性を保ちながらユーザの利便性を向上させることができる。

なお、本実施の形態によるプログラム、顔認証システム１および情報処理方法は、上述したような態様に限定されることはなく、様々な変更を加えることができる。

例えば、上記の説明では顔認証プラットフォーム１０、個人データストア３０、属性検出サーバ３２および顔認証利用履歴データストア３４が別々に設けられている態様について述べたが、顔認証プラットフォーム１０、個人データストア３０、属性検出サーバ３２および顔認証利用履歴データストア３４のうち何れか２つ以上のものが一体化されていてもよい。この場合、どの手段をどの装置にて機能させるかも、適宜変更が可能である。また、顔認証プラットフォーム１０において、ユーザの認証を行う認証手段２４が顔認証プラットフォーム１０とは別個の装置として設けられていてもよい。例えば、認証手段２４が認証端末４０に設けられており、ユーザがユーザ端末８０により顔画像を登録したときにユーザの顔画像に関する情報が顔認証プラットフォーム１０から各認証端末４０に送信されてこれらの認証端末４０でユーザの顔画像に関する情報が記憶されることにより、認証端末４０において認証手段２４によりユーザの認証が行われてもよい。

また、上記の説明では、主に顔認証プラットフォーム１０および属性検出サーバ３２がプログラムを機能させる場合を例示したが、これに限定されない。顔認証プラットフォーム１０、個人データストア３０、属性検出サーバ３２および顔認証利用履歴データストア３４が一体となってプログラムの各手段（例えば、受付手段１４、送信手段１６、学習済モデル生成手段１８、演算手段２０、出力手段２２、認証手段２４、履歴データ保存手段２５、属性検出手段３３）の機能を実行してもよい。また、受付手段１４、送信手段１６、学習済モデル生成手段１８、演算手段２０、出力手段２２、認証手段２４、履歴データ保存手段２５、属性検出手段３３のうち何れかまたは全てが、顔認証プラットフォーム１０単体、あるいは顔認証プラットフォーム１０とは別の装置に備えられていてもよい。

１ 顔認証システム
１０ 顔認証プラットフォーム
１２ 制御部
１４ 受付手段
１６ 送信手段
１８ 学習済モデル生成手段
２０ 演算手段
２２ 出力手段
２４ 認証手段
２５ 履歴データ保存手段
２６ 記憶部
２８ 通信インターフェース
３０ 個人データストア
３１ 記憶部
３２ 属性検出サーバ
３３ 属性検出手段
３４ 顔認証利用履歴データストア
３５ 記憶部
４０ 認証端末
５０ 教師データ
５２ 学習済モデル
５４ 入力データ
５６ ユーザ有用情報
８０ ユーザ端末

Claims (6)

1. コンピュータを、属性検出手段と、演算手段と、出力手段と、送信手段と、認証手段と、履歴データ保存手段として機能させるプログラムであって、
   前記属性検出手段は、認証端末により撮像された顔画像から性別および年代のうち少なくとも何れかを含む属性を検出し、
   前記認証手段は、前記認証端末により撮像された顔画像に基づいてユーザの認証を行い、
   前記履歴データ保存手段は、前記認証手段によりユーザの認証が行われたときに当該ユーザの顔画像を撮像した前記認証端末が設置されるサービス機関の情報、前記認証端末の位置および前記認証端末によるユーザの顔画像の撮像日時のうち少なくとも何れかを含む認証関連情報、および前記属性検出手段により検出された属性を紐付けて利用履歴データとして顔認証利用履歴データストアに記憶させ、
   前記演算手段は、前記属性検出手段により検出された属性、ユーザ毎の利用中サービス情報および前記顔認証利用履歴データストアに保存されている利用履歴データに基づいて、ユーザが利用可能なサービスのキャンペーン情報、サービスの利用可能日時情報、および特別なサービスの提供情報のうち少なくとも何れかを含むユーザ有用情報を演算し、
   前記出力手段は、前記演算手段により演算されたユーザ有用情報を出力し、
   前記送信手段は、前記出力手段により出力されたユーザ有用情報を前記認証手段により認証されたユーザのユーザ端末に送信する、プログラム。
2. コンピュータを、更に学習済モデル生成手段として機能させ、
   前記学習済モデル生成手段は、前記属性検出手段により検出された属性、ユーザ毎の利用中サービス情報および利用履歴データを含む教師データを用い、前記属性検出手段により検出された属性および前記認証端末による顔画像の撮像に関する認証関連情報を入力、ユーザ有用情報を出力とする学習済モデルを深層学習により生成し、
   前記演算手段は、前記学習済モデル生成手段により生成された前記学習済モデルに基づいて、前記認証端末により撮像された顔画像から前記属性検出手段により検出された属性および当該認証端末による顔画像の撮像に関する認証関連情報を入力したときのユーザ有用情報に関する演算を行う、請求項１記載のプログラム。
3. 認証端末により撮像された顔画像から性別および年代のうち少なくとも何れかを含む属性を検出する属性検出手段と、
   前記認証端末により撮像された顔画像に基づいてユーザの認証を行う認証手段と、
   前記認証手段によりユーザの認証が行われたときに当該ユーザの顔画像を撮像した前記認証端末が設置されるサービス機関の情報、前記認証端末の位置および前記認証端末によるユーザの顔画像の撮像日時のうち少なくとも何れかを含む認証関連情報、および前記属性検出手段により検出された属性を紐付けて利用履歴データとして顔認証利用履歴データストアに記憶させる履歴データ保存手段と、
   前記属性検出手段により検出された属性、ユーザ毎の利用中サービス情報および前記顔認証利用履歴データストアに保存されている利用履歴データに基づいて、ユーザが利用可能なサービスのキャンペーン情報、サービスの利用可能日時情報、および特別なサービスの提供情報のうち少なくとも何れかを含むユーザ有用情報を演算する演算手段と、
   前記演算手段により演算されたユーザ有用情報を出力する出力手段と、
   前記出力手段により出力されたユーザ有用情報を前記認証手段により認証されたユーザのユーザ端末に送信する送信手段と、
   を備えた、システム。
4. 前記属性検出手段により検出された属性、ユーザ毎の利用中サービス情報および利用履歴データを含む教師データを用い、前記属性検出手段により検出された属性および前記認証端末による顔画像の撮像に関する認証関連情報を入力、ユーザ有用情報を出力とする学習済モデルを深層学習により生成する学習済モデル生成手段を更に備え、
   前記演算手段は、前記学習済モデル生成手段により生成された前記学習済モデルに基づいて、前記認証端末により撮像された顔画像から前記属性検出手段により検出された属性および当該認証端末による顔画像の撮像に関する認証関連情報を入力したときのユーザ有用情報に関する演算を行う、請求項３記載のシステム。
5. コンピュータにより行われる情報処理方法であって、
   認証端末により撮像された顔画像から性別および年代のうち少なくとも何れかを含む属性を検出する工程と、
   前記認証端末により撮像された顔画像に基づいてユーザの認証を行う工程と、
   ユーザの認証が行われたときに当該ユーザの顔画像を撮像した前記認証端末が設置されるサービス機関の情報、前記認証端末の位置および前記認証端末によるユーザの顔画像の撮像日時のうち少なくとも何れかを含む認証関連情報、および検出された属性を紐付けて利用履歴データとして顔認証利用履歴データストアに記憶させる工程と、
   検出された属性、ユーザ毎の利用中サービス情報および前記顔認証利用履歴データストアに保存されている利用履歴データに基づいて、ユーザが利用可能なサービスのキャンペーン情報、サービスの利用可能日時情報、および特別なサービスの提供情報のうち少なくとも何れかを含むユーザ有用情報を演算する工程と、
   演算されたユーザ有用情報を出力する工程と、
   出力されたユーザ有用情報を、認証されたユーザのユーザ端末に送信する工程と、
   を備えた、情報処理方法。
6. 検出された属性、ユーザ毎の利用中サービス情報および利用履歴データを含む教師データを用い、検出された属性および前記認証端末による顔画像の撮像に関する認証関連情報を入力、ユーザ有用情報を出力とする学習済モデルを深層学習により生成する工程を更に備え、
   ユーザ有用情報を演算する工程において、生成された前記学習済モデルに基づいて、前記認証端末により撮像された顔画像から検出された属性および当該認証端末による顔画像の撮像に関する認証関連情報を入力したときのユーザ有用情報に関する演算を行う、請求項５記載の情報処理方法。

Images