JP7367847B2 - 推薦制御装置、システム、方法及びプログラム - Google Patents

Description

本発明は、推薦制御装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体に関し、特に、ユーザに対して推薦情報を提供するための推薦制御装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体に関する。

特許文献１には、対象者の顔画像と登録者の認証用顔画像との照合を行い、前記対象者が前記登録者であると判定された場合、対象者に似ている人の購買履歴等から、対象者の好みを類推し、対象者へおすすめ商品を推薦する技術が開示されている。

特開２０１７－２２４０５０号公報

特許文献１に開示された技術のように、個人と嗜好が類似する他者の行動履歴に基づいて推薦情報を推薦する場合、個人の嗜好に近いものしか推薦されず、飽きがくる可能性があるという問題点がある。

本開示は、このような問題点を解決するためになされたものであり、個人の嗜好に変化を加えた推薦情報を提供するための推薦制御装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体を提供することを目的とする。

本開示に係る推薦制御装置は、所定の撮影装置により撮影された撮影画像を取得する取得部と、前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる認証制御部と、前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する判定部と、前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、当該第２のユーザの行動履歴のうち当該第１のユーザの行動履歴以外に基づいて推薦情報を特定する特定部と、所定の表示端末に前記特定部が特定した推薦情報を送信する出力部と、を備える。

本開示に係る推薦制御システムは、ユーザの顔領域を含めて撮影を行う撮影装置と、前記ユーザの顔特徴情報を記憶する認証装置と、前記撮影装置及び前記認証装置と接続された推薦制御装置と、を備え、前記撮影装置により撮影された撮影画像を取得する取得部と、前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる認証制御部と、前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する判定部と、前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、当該第２のユーザの行動履歴のうち当該第１のユーザの行動履歴以外に基づいて推薦情報を特定する特定部と、所定の表示端末に前記特定部が特定した推薦情報を送信する出力部と、を備える。

本開示に係る推薦制御方法は、所定の撮影装置により撮影された撮影画像を取得する工程と、前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる工程と、前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する工程と、前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、当該第２のユーザの行動履歴のうち当該第１のユーザの行動履歴以外に基づいて推薦情報を特定する工程と、所定の表示端末に前記特定された推薦情報を送信する工程と、を備える。

本開示に係る非一時的なコンピュータ可読媒体は、所定の撮影装置により撮影された撮影画像を取得する工程と、前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる工程と、前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する工程と、前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、当該第２のユーザの行動履歴のうち当該第１のユーザの行動履歴以外に基づいて推薦情報を特定する工程と、所定の表示端末に前記特定された推薦情報を送信する工程と、を実行させるプログラムが記録される。

本開示に係る推薦制御装置は、所定の撮影装置により撮影された撮影画像を取得する取得部と、前記撮影画像から顔領域又は顔特徴情報を抽出する抽出部と、前記顔領域又は前記顔特徴情報に基づいて顔認証を行う顔認証部と、前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する判定部と、前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、当該第２のユーザの行動履歴のうち当該第１のユーザの行動履歴以外に基づいて推薦情報を特定する特定部と、所定の表示端末に前記特定部が特定した推薦情報を送信する出力部とを備える。

本開示に係る推薦制御方法は、所定の撮影装置により撮影された撮影画像を取得する工程と、前記撮影画像から顔領域又は顔特徴情報を抽出する工程と、前記顔領域又は前記顔特徴情報に基づいて顔認証を行う工程と、前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する工程と、前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、当該第２のユーザの行動履歴のうち当該第１のユーザの行動履歴以外に基づいて推薦情報を特定する工程と、所定の表示端末に前記特定された推薦情報を送信する工程と、を備える。

本開示に係る非一時的なコンピュータ可読媒体は、所定の撮影装置により撮影された撮影画像を取得する工程と、前記撮影画像から顔領域又は顔特徴情報を抽出する工程と、前記顔領域又は前記顔特徴情報に基づいて顔認証を行う工程と、前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する工程と、前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、当該第２のユーザの行動履歴のうち当該第１のユーザの行動履歴以外に基づいて推薦情報を特定する工程と、所定の表示端末に前記特定された推薦情報を送信する工程と、を実行させるプログラムが記録される。

本開示により、個人の嗜好に変化を加えた推薦情報を提供するための推薦制御装置、システム、方法及びプログラムが格納された非一時的なコンピュータ可読媒体を提供することができる。

実施形態１に係る推薦制御装置の構成を示すブロック図である。 実施形態１に係る推薦制御方法の流れを示すフローチャートである。 実施形態２に係る推薦制御システムの構成を示すブロック図である。 認証装置の構成を示すブロック図である。 顔認証端末の構成を示すブロック図である。 ユーザ端末の構成を示すブロック図である。 顔特徴情報登録処理の流れを示すフローチャートである。 顔認証処理の流れを示すフローチャートである。 履歴登録処理の流れを示すフローチャートである。 推薦制御処理の流れを示すフローチャートである。 推薦情報特定処理の流れを示すフローチャートである。 推薦要求処理の流れを示すフローチャートである。 表示端末上に表示される推薦情報を例示する図である。 表示端末上に表示されるマップを例示する図である。 表示端末上に表示される行動履歴を例示する図である。 実施形態３に係る推薦制御装置の構成を示すブロック図である。 実施形態３に係る推薦制御システムの構成を示すブロック図である。

以下では、本開示の実施形態について、図面を参照しながら詳細に説明する。各図面において、同一又は対応する要素には同一の符号が付されており、説明の明確化のため、必要に応じて重複説明は省略される。

＜実施形態１＞
図１は、実施形態１に係る推薦制御装置１００の構成を示すブロック図である。推薦制御装置１００は、取得部１３０、認証制御部１４０、判定部１５０、特定部１６０及び出力部１７０を備える。推薦制御装置１００は、ネットワーク５００（不図示）に接続される。ネットワーク５００は、有線であっても無線であってもよい。ネットワーク５００には、図示しない認証装置２００及び顔認証端末３００が接続される。

取得部１３０は、所定の撮影装置により撮影された撮影画像を取得する。撮影画像は、ユーザが撮影された画像である。所定の撮影装置は、例えば、顔認証端末３００が備えるカメラ、及びユーザが所持するスマートフォン等のユーザ端末のカメラである。認証制御部１４０は、撮影画像から顔領域又は顔特徴情報を抽出して認証装置２００に顔認証を行わせる。認証装置２００は、ユーザＩＤと当該ユーザの顔特徴情報とを対応付けて予め記憶している。以下、顔認証に成功したユーザを第１のユーザと称することがある。

判定部１５０は、顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する。特定部１６０は、第１のユーザにおける行動履歴が所定の傾向を示すと判定された場合、第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、第２のユーザの行動履歴のうち第１のユーザの行動履歴以外に基づいて推薦情報を特定する。出力部１７０は、所定の表示端末に特定部１６０が特定した推薦情報を送信する。

所定の表示端末は、例えば、顔認証端末３００、ユーザ端末、店舗端末及び街頭のサイネージである。ユーザ端末は、ユーザが所持するスマートフォン等の通信端末である。店舗端末は、各店舗に設置される端末であり、例えば、ユーザが店舗を出る際に「次は〇〇へ行くのはいかがですか」と表示する。所定の表示端末は、上述の所定の撮影装置であってもよいし、異なる端末であってもよい。例えば、ユーザ端末で撮影画像を撮影した場合、出力部１７０は、当該ユーザ端末に推薦情報を送信してもよいし、顔認証端末３００等に推薦情報を送信してもよい。顔認証端末３００で撮影画像を撮影した場合、出力部１７０は、当該顔認証端末３００に推薦情報を送信してもよいし、ユーザ端末等に推薦情報を送信してもよい。

図２は、実施形態１に係る推薦制御方法の流れを示すフローチャートである。まず、取得部１３０は、所定の撮影装置により撮影された撮影画像を取得する（ステップＳ１０１）。次に、認証制御部１４０は、取得部１３０が取得した撮影画像から顔領域又は顔特徴情報を抽出して認証装置２００に顔認証を行わせる（ステップＳ１０２）。認証装置２００は、認証制御部１４０から受け取った顔領域又は顔特徴情報と、認証装置２００内に登録されている顔特徴情報と、を照合し、一致の有無により認証の成否を判定し、判定結果を返信する。尚、認証装置２００は、ユーザＩＤと顔特徴情報とを対応付けて記憶しているものとする。そして、認証装置２００は、顔認証に成功した場合、成功したユーザＩＤを判定結果に含めて返信する。

次に、判定部１５０は、顔認証に成功したユーザＩＤ又は変化推薦要求に含まれるユーザＩＤと対応付けられた行動履歴が所定の傾向を示すか否かを判定する（ステップＳ１０３）。変化推薦要求は、推薦情報の変化要求であり、ユーザＩＤを含む。行動履歴が所定の傾向を示すと判定された場合、第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、第２のユーザの行動履歴のうち第１のユーザの行動履歴以外に基づいて推薦情報を特定する（ステップＳ１０４）。次に、出力部１７０は、所定の表示端末に特定部１６０が特定した推薦情報を送信する（ステップＳ１０５）。このように、本実施形態に係る推薦制御方法は、個人の嗜好に変化を加えた推薦情報を提供することができる。

推薦制御装置１００は、図１に示した構成に加えて、履歴記憶部及び履歴登録部等の各構成を備えていてもよい。

履歴記憶部は、ユーザの行動履歴を記憶する。行動履歴は、ユーザが顔認証に成功時に行った行動内容の履歴であり、例えば、商品等の購入履歴、施設の入退記録、イベントの参加記録等である。行動履歴は、ユーザが行動した時刻の情報を含んでいてもよい。履歴登録部は、ユーザＩＤと行動履歴とを対応付けて履歴記憶部に登録する。履歴登録部は、図２に示すステップＳ１０１に先んじて、ユーザＩＤと行動履歴とを対応付けて履歴記憶部に登録する。判定部１５０は、顔認証に成功した第１のユーザにおけるユーザＩＤと対応付けられた行動履歴を履歴記憶手段から取得し、当該行動履歴が所定の傾向を示すか否かを判定する。

尚、推薦制御装置１００は、図示しない構成としてプロセッサ、メモリ及び記憶装置を備えるものである。また、当該記憶装置には、本実施形態に係る推薦制御方法の処理が実装されたコンピュータプログラムが記憶されている。そして、当該プロセッサは、記憶装置からコンピュータプログラムを前記メモリへ読み込ませ、当該コンピュータプログラムを実行する。これにより、前記プロセッサは、履歴登録部、取得部１３０、認証制御部１４０、判定部１５０、特定部１６０及び出力部１７０の機能を実現する。

または、履歴登録部、取得部１３０、認証制御部１４０、判定部、特定部１６０及び出力部１７０は、それぞれが専用のハードウェアで実現されていてもよい。また、各装置の各構成要素の一部又は全部は、汎用または専用の回路（circuitry）、プロセッサ等やこれらの組合せによって実現されもよい。これらは、単一のチップによって構成されてもよいし、バスを介して接続される複数のチップによって構成されてもよい。各装置の各構成要素の一部又は全部は、上述した回路等とプログラムとの組合せによって実現されてもよい。また、プロセッサとして、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）、ＦＰＧＡ（field-programmable gate array）等を用いることができる。

また、推薦制御装置１００の各構成要素の一部又は全部が複数の情報処理装置や回路等により実現される場合には、複数の情報処理装置や回路等は、集中配置されてもよいし、分散配置されてもよい。例えば、情報処理装置や回路等は、クライアントサーバシステム、クラウドコンピューティングシステム等、各々が通信ネットワークを介して接続される形態として実現されてもよい。また、推薦制御装置１００の機能がＳａａＳ（Software as a Service）形式で提供されてもよい。

＜実施形態２＞
実施形態２は、上述した実施形態１の具体例である。図３は、実施形態２に係る推薦制御システム６００の構成を示すブロック図である。推薦制御システム６００は、少なくとも、推薦制御装置１００ａ及び認証装置２００を備え、さらに顔認証端末３００及びユーザ端末４００のうち少なくとも一方を備える。推薦制御装置１００ａ、認証装置２００、顔認証端末３００（３００Ｘ、３００Ｙ、３００Ｚ及び３００Ｗ）及びユーザ端末４００のそれぞれは、ネットワーク５００を介して接続されている。なお、実施形態１と重複する説明については適宜省略する。

推薦制御装置１００ａは、履歴ＤＢ（DataBase）１１０ａ、履歴登録部１２０、取得部１３０、認証制御部１４０、判定部１５０、特定部１６０及び出力部１７０を備える。推薦制御装置１００ａは、行動履歴の蓄積、撮影画像からの推薦情報の特定及び出力を行う情報処理装置であり、例えば、コンピュータにより実現されるサーバ装置である。

履歴ＤＢ１１０ａは、ユーザの行動履歴を蓄積するためのデータベースである。履歴ＤＢ１１０ａは、ユーザＩＤと、当該ユーザの行動履歴と、を対応付けて記憶している。行動履歴は、例えば、ユーザの購入履歴を含む。履歴登録部１２０は、顔認証端末３００又はユーザ端末４００からネットワーク５００を介して履歴登録要求を受信し、当該履歴登録要求に含まれるユーザＩＤと、通過地点及び行動履歴と、を対応付けて履歴ＤＢ１１０ａに登録する。

取得部１３０は、顔認証端末３００又はユーザ端末４００からネットワーク５００を介して、顔認証要求、履歴登録要求、変化推薦要求を受信する。言い換えると、取得部１３０は、顔認証端末３００又はユーザ端末４００からカメラ３１０、４１０による撮影画像、カメラ３１０、４１０の設置位置情報（以下、単に「設置位置」と呼ぶ。）等を取得する。

認証制御部１４０は、顔認証要求に含まれる認証用画像から顔領域又は顔特徴情報を抽出し、当該顔領域又は当該顔特徴情報を認証装置２００へ送信して顔認証を行わせる。また、認証制御部１４０は、認証装置２００から顔認証の成否を受信し、顔認証結果を要求元の端末へ返信する。尚、顔認証に成功した場合、顔認証結果には、ユーザＩＤが含まれる。

判定部１５０は、顔認証に成功したユーザ（第１のユーザ）におけるユーザＩＤに対応付けられた行動履歴を履歴ＤＢ１１０ａから取得する。判定部１５０は、取得した行動履歴を分析して、所定の傾向を示すか否かを判定する。ここで、所定の傾向とは、例えば、同種の行動が規定回数以上行われていること、又は所定期間内に継続して行われていること等である。また、同種の行動は、例えば、場所や内容等が共通する文字列を含む行動内容であり、具体的には、特定の商品を購入すること等である。

特定部１６０は、判定部１５０により所定の傾向を示すと判定された場合、第２のユーザを特定する。第２のユーザは、第１のユーザの所定の傾向を示す行動履歴と類似する行動履歴を持つユーザである。具体的には、例えば、特定部１６０は、第１のユーザの行動履歴に含まれる所定の行動と同じ文字列を行動履歴に含むユーザＩＤを特定する。尚、第２のユーザは、第１のユーザと属性が類似するユーザであってもよい。次に、特定部１６０は、第２のユーザの行動履歴のうち所定の傾向以外の行動履歴を特定する。例えば、特定部１６０は、第２のユーザの行動履歴のうち、上述の文字列を含まない行動履歴を抽出する。そして、特定部１６０は、抽出した行動履歴のうち、規定回数以上行われている行動履歴や、所定期間内に継続して行われている行動履歴を特定する。

次に、特定部１６０は、特定した行動履歴に基づいて推薦情報を特定する。ここで、推薦情報は、変化推薦要求を行ったユーザに対して推薦する情報である。例えば、推薦情報は、特定した行動履歴そのもの、すなわち推薦する場所及び内容である。または、推薦情報は、推薦する場所及び内容のいずれか一方を含むものであってもよい。また、推薦情報は、特定された行動履歴に含まれる店舗等の割引クーポンであってもよい。出力部１７０は、特定部１６０が特定した推薦情報をネットワーク５００を介して顔認証に成功した端末又は変化推薦要求を行った端末に送信する。出力部１７０は、顔認証及び変化推薦要求を行った端末以外の端末に当該推薦情報を送信してもよい。例えば、店舗端末から顔認証を行った場合に、出力部１７０は、当該店舗端末に推薦情報を送信してもよいし、顔認証に成功したユーザが所有するユーザ端末に推薦情報を送信してもよい。

認証装置２００は、ユーザの顔認証を行う装置である。認証装置２００は、顔特徴ＤＢ２１０を備える。顔特徴ＤＢ２１０は、ユーザＩＤと当該ユーザの顔特徴情報とを対応付けて記憶する顔特徴データベースである。尚、顔特徴ＤＢ２１０は、顔特徴情報記憶部の一例である。顔認証端末３００は、顔認証に使用する画像を撮影する端末である。顔認証端末３００は、撮影画像を推薦制御装置１００ａに送信し、顔認証要求を行う端末である。顔認証端末３００は、各地点Ｘ、Ｙ、Ｚ及びＷ（以下、「地点Ｘ～Ｗ」と称す。）に設置されている。具体的には、地点Ｘには顔認証端末３００Ｘ、地点Ｙには顔認証端末３００Ｙ、地点Ｚには顔認証端末３００Ｚ、地点Ｗには顔認証端末３００Ｗが設置されている。ユーザは、各地点Ｘ～Ｗを訪問する際に、設置された顔認証端末３００Ｘ～３００Ｗのカメラに対して顔を向けて撮影を行い、当該地点における商品購入等を行う。

ユーザ端末４００は、ユーザが所持する端末である。ユーザ端末４００は、例えば、スマートフォン、タブレット、ＰＣ等の通信端末である。ユーザは、顔認証端末３００又はユーザ端末４００を利用してユーザの顔が含まれる画像を撮影する。顔認証端末３００又はユーザ端末４００は、撮影画像を推薦制御装置１００ａに送信する。

次に、図４を参照して、認証装置２００の構成について詳細に説明する。図４は、認証装置２００の構成を示すブロック図である。認証装置２００は、顔特徴ＤＢ２１０、顔検出部２２０、特徴点抽出部２３０、登録部２４０及び認証部２５０を備える。

顔特徴ＤＢ２１０は、ユーザＩＤと当該ユーザの顔特徴情報とを対応付けて記憶する顔特徴データベースである。顔検出部２２０は、撮影画像が含む顔領域を検出し、特徴点抽出部２３０に出力する。特徴点抽出部２３０は、顔検出部２２０が検出した顔領域から特徴点を抽出し、登録部２４０に顔特徴情報を出力する。顔特徴情報は、抽出した特徴点の集合である。

登録部２４０は、顔特徴情報の登録に際して、ユーザＩＤを新規に発行する。登録部２４０は、発行したユーザＩＤと、登録画像から抽出した顔特徴情報と、を対応付けて顔特徴ＤＢ２１０に登録する。認証部２５０は、顔画像から抽出された顔特徴情報と、顔特徴ＤＢ２１０内の顔特徴情報と、の照合を行う。認証部２５０は、顔特徴情報が一致している場合、顔認証が成功したと判断し、顔特徴情報が不一致の場合、顔認証が失敗したと判断する。認証部２５０は、顔認証の成否を推薦制御装置１００ａに返信する。顔特徴情報の一致の有無は、認証の成否に対応する。また、認証部２５０は、顔認証に成功した場合、当該成功した顔特徴情報に対応付けられたユーザＩＤを特定し、特定されたユーザＩＤと認証成功の旨とを含めた認証結果を推薦制御装置１００ａに返信する。

図７を参照して、顔特徴ＤＢ２１０にユーザＩＤ及び顔特徴情報を登録する際における認証装置２００の動作を説明する。図７は、顔特徴情報登録処理の流れを示すフローチャートである。図７では、顔認証端末３００が画像を撮影して顔特徴情報を登録する場合について説明を行うが、ユーザ端末４００が画像を撮影する場合も同様の手順で顔特徴情報を登録することができる。

顔特徴情報を登録する際には、顔認証端末３００は、ユーザの顔を含む画像を登録用画像として撮影し、認証装置２００に対してネットワーク５００を介して顔特徴情報登録要求を行う。顔特徴情報登録要求は、登録用画像を含む。まず、認証装置２００は、顔認証端末３００又はユーザ端末４００からネットワーク５００を介して登録用画像を取得する（ステップＳ２０１）。

次に、顔検出部２２０は、登録用画像が含む顔領域を検出し（ステップＳ２０２）、検出した顔領域を特徴点抽出部２３０に出力する。次に、特徴点抽出部２３０は、顔領域から特徴点を抽出し、登録部２４０に顔特徴情報を出力する（ステップＳ２０３）。次に、登録部２４０は、出力された顔特徴情報に対応するユーザＩＤを発行し、当該ユーザＩＤと顔特徴情報とを対応付けて顔特徴ＤＢ２１０に登録する（ステップＳ２０４）。

図８を参照して、顔認証を行う際における認証装置２００の動作を説明する。図８は、顔認証処理の流れを示すフローチャートである。図８では、顔認証端末３００が顔認証要求する場合について説明を行うが、ユーザ端末４００が顔認証要求する場合も同様の手順で顔認証を行うことができる。

顔認証を行う際には、顔認証端末３００は、ユーザの顔を含む画像を認証用画像として撮影し、推薦制御装置１００ａに対してネットワーク５００を介して顔認証要求を行う。顔認証要求は、認証用画像を含む。まず、推薦制御装置１００ａは、認証用画像から抽出した顔領域又は顔特徴情報を認証装置２００に送信する。特徴点抽出部２３０は、受信した顔領域から顔特徴情報抽出し、又は顔特徴情報を受信することによって、顔特徴情報を取得する（ステップＳ３０１）。

次に、認証部２５０は、取得部１３０が取得した顔特徴情報を顔特徴ＤＢ２１０と照合する（ステップＳ３０２）。顔特徴情報が一致した場合（ステップＳ３０３Ｙｅｓ）、認証部２５０は、顔特徴情報が一致したユーザのユーザＩＤを特定し（ステップＳ３０４）、顔認証に成功した旨と特定したユーザＩＤとを推薦制御装置１００ａに返信する（ステップＳ３０５）。一致する顔特徴情報がなかった場合（ステップＳ３０３Ｎｏ）、認証部２５０は、顔認証に失敗した旨を推薦制御装置１００ａに返信する（ステップＳ３０６）。

次に、図５を参照して、顔認証端末３００の構成について詳細に説明する。顔認証端末３００は、ハードウェア構成として、カメラ等の撮影装置と、表示装置と、コンピュータとを備える。顔認証端末３００は、顔特徴情報登録要求及び顔認証要求を行う装置である。顔認証端末３００は、例えば、顔認証による決済を行う端末、顔認証による入場制御を行う端末、顔認証に応じて情報を提示するデジタルサイネージ等が挙げられるが、これらに限定されない。

図５は、顔認証端末３００の構成を示すブロック図である。顔認証端末３００は、カメラ３１０、制御部３２０、記憶部３３０、通信部３４０及び表示部３５０を備える。カメラ３１０は、画像を撮影する撮影装置である。制御部３２０は、顔認証端末３００が備えるハードウェアの制御を行う。制御部３２０は、撮影要求部３２２、顔特徴情報登録要求部３２３、認証要求部３２４、決済処理部３２５、履歴登録要求部３２６及び変化推薦要求部３２７を備える。

撮影要求部３２２は、カメラ３１０に対して撮影要求を行う。カメラ３１０は、ユーザの顔を含む画像を撮影する。カメラ３１０が撮影した画像は、登録用画像及び認証用画像として使用される。顔特徴情報登録要求部３２３は、顔特徴情報登録要求を、ネットワーク５００を介して認証装置２００に送信する。顔特徴情報登録要求は、カメラ３１０が撮影した登録用画像を含む。認証要求部３２４は、顔認証要求を、ネットワーク５００を介して推薦制御装置１００ａに送信する。顔認証要求は、カメラ３１０が撮影した認証用画像を含む。認証要求部３２４は、推薦制御装置１００ａから顔認証の成否を受信し、その結果を表示部３５０に表示させる。

決済処理部３２５は、顔認証成功時に決済処理を実行する。なお、制御部３２０は、決済処理部３２５に代えて図示しない記録部を備えていてもよい。記録部は、顔認証成功時に顔認証端末３００が設置されている施設へのユーザの入退場を記録する。履歴登録要求部３２６は、履歴登録要求を、ネットワーク５００を介して認証装置２００に送信する。尚、履歴登録要求は、決済処理の結果である決済履歴を含む。決済履歴は、例えば、決済した日時、金額、物品、ユーザＩＤ等を含む情報である。変化推薦要求部３２７は、変化推薦要求を、ネットワーク５００を介して推薦制御装置１００ａに送信する。

記憶部３３０は、顔認証端末３００の各機能を実現するためのプログラムが格納される記憶装置である。通信部３４０は、ネットワーク５００との通信インタフェースである。表示部３５０は、ユーザに対して顔認証結果及び推薦情報等を表示する表示装置である。

次に、図６を参照して、ユーザ端末４００の構成について詳細に説明する。図６は、ユーザ端末４００の構成を示すブロック図である。ユーザ端末４００は、カメラ４１０、制御部４２０、記憶部４３０、通信部４４０及び表示部４５０を備える。制御部４２０は、撮影要求部４２２、顔特徴情報登録要求部４２３、認証要求部４２４、決済処理部４２５、履歴登録要求部４２６及び変化推薦要求部４２７を備える。ユーザ端末４００が備える各構成の機能は、顔認証端末３００が備える各構成と同様であるから、説明を省略する。

顔認証端末３００及びユーザ端末４００は、顔認証が成功した場合、決済処理等を行い、その履歴を推薦制御装置１００ａに登録させる履歴登録要求を行う。以下、図９を参照して、履歴登録要求する際における顔認証端末３００の動作を説明する。図９は、履歴登録処理の流れを示すフローチャートである。図９では、顔認証端末３００が履歴登録要求する場合について説明を行うが、ユーザ端末４００も同様の手順で履歴登録要求を行うことができる。

まず、撮影要求部３２２は、カメラ３１０に対して撮影要求を行い、カメラ３１０は、ユーザの顔を含む認証用画像を撮影する（ステップＳ４０１）。次に、認証要求部３２４は、顔認証要求をネットワーク５００を介して認証装置２００に送信し（ステップＳ４０２）、その成否を認証装置２００から受信する（ステップＳ４０３）。顔認証が成功であった場合（ステップＳ４０４Ｙｅｓ）、決済処理部３２５は、決済処理を実行し（ステップＳ４０５）、履歴登録要求部３２６は、認証装置２００に対してネットワーク５００を介して履歴登録要求を行う（ステップＳ４０６）。顔認証が失敗であった場合（ステップＳ４０５Ｎｏ）、履歴登録要求部３２６は、表示部３５０に顔認証が失敗した旨を表示させる。

推薦制御装置１００ａは、顔認証に成功した場合又は変化推薦要求を受信した場合に、推薦情報を提示する。以下、図１０～１２を参照して、推薦情報を提示する際における推薦制御装置１００ａ等の動作を説明する。図１０は、推薦制御処理の流れを示すフローチャートである。図１１は、推薦情報特定処理の流れを示すフローチャートである。図１２は、推薦要求処理の流れを示すフローチャートである。

まず、図１０を参照して、顔認証成功時に推薦情報を提示する場合について説明する。まず、取得部１３０は、顔認証端末３００及びユーザ端末４００等の所定の撮影装置が撮影した認証用画像を取得する（ステップＳ５０１）。尚、このとき認証用画像と共に、取得部１３０は、所定の撮影装置の設置位置を取得するものとする。次に、認証制御部１４０は、顔領域又は顔特徴情報を抽出し、当該顔領域又は当該顔特徴情報を認証装置２００へ送信して顔認証を要求する（ステップＳ５０２）。次に、認証制御部１４０は、認証装置２００から顔認証の成否を受信する（ステップＳ５０３）。

顔認証に成功した場合（ステップＳ５０４Ｙｅｓ）、判定部１５０は、ステップＳ５０３において受信した顔認証の成否に含まれるユーザＩＤ（第１のユーザにおけるユーザＩＤ）を抽出することによって顔認証に成功したユーザＩＤを特定する（ステップＳ５０５）。次に、判定部１５０は、ステップＳ６０５において特定したユーザＩＤと対応付けられた行動履歴を履歴ＤＢ１１０ａから取得することによって、第１のユーザの行動履歴を特定する（ステップＳ５０６）。

特定部１６０は、第１のユーザに提示する推薦情報を特定する（ステップＳ５０７）。次に、出力部１７０は、特定部１６０が特定した推薦情報をネットワーク５００を介して、顔認証端末３００及びユーザ端末４００等の所定の表示端末に送信する（ステップＳ５０９）。顔認証に失敗した場合（ステップＳ５０４Ｎｏ）、出力部１７０は、顔認証に失敗した旨をネットワーク５００を介して所定の表示端末に送信する（ステップＳ５１０）。

図１１を参照して、ステップＳ５０７における推薦制御装置１００ａの動作をより詳細に説明する。第１のユーザの行動履歴を特定すると（ステップＳ５０６）、まず、判定部１５０は、当該行動履歴が所定の傾向を示すか否かを判定する（ステップＳ６０１）。行動履歴が所定の傾向を示す場合（ステップＳ６０２Ｙｅｓ）、特定部１６０は、第１のユーザと行動履歴が類似する第２のユーザを特定する（ステップＳ６０３）。特定部１６０は、第１のユーザと同様に所定の傾向を示す行動履歴を有するユーザを第２のユーザとして特定してもよい。これにより、行動履歴の傾向がより類似するユーザを特定でき、推薦精度がさらに向上する。尚、ステップＳ６０３において、特定部１６０は、第１のユーザと属性が類似するユーザを第２のユーザとして特定してもよい。属性は、例えば、性別、年代、家族構成等であり、ＳＮＳ（Social Networking Service）上の友人等であってもよい。

次に、特定部１６０は、第２のユーザの行動履歴のうち所定の傾向以外の行動履歴を特定し、特定した行動履歴に基づいて推薦情報を特定する（ステップＳ６０４）。第１のユーザの行動履歴が所定の傾向を示さない場合（ステップＳ６０２Ｎｏ）、特定部１６０は、推薦情報を特定することは困難であると判断する（ステップＳ６０５）。

次に、図１２を参照して、変化推薦要求に応じて推薦情報を提示する場合について説明する。顔認証端末３００及びユーザ端末４００は、顔認証が成功した場合（ステップＳ４０４Ｙｅｓ）、推薦要求処理（ステップＳ７０１～７０３）を行うことができる。推薦要求処理（ステップＳ７０１～７０３）は、決済処理（ステップＳ４０５）及び履歴登録要求（ステップＳ４０６）と並行して行われてもよいし、履歴登録要求（ステップＳ４０６）の後に行われてもよい。図１２では、顔認証端末３００が提示処理する場合について説明を行うが、ユーザ端末４００も同様の手順で提示処理を行うことができる。

まず、変化推薦要求部３２７は、変化推薦要求をネットワーク５００を介して推薦制御装置１００ａに送信する（ステップＳ７０１）。推薦制御装置１００ａは、変化推薦要求を受信すると、ステップＳ５０５～５０８と同様の手順によって推薦情報を特定して返信する。変化推薦要求部３２７は、推薦制御装置１００ａから推薦情報を受信すると（ステップＳ７０２）、表示部３５０に当該推薦情報を表示する（ステップＳ７０３）。

図１３は、表示端末上に表示される推薦情報を例示する図である。図１３では、ユーザ端末４００に推薦情報を表示する場合を示している。図１３に示すように、ユーザ端末４００は、ステップＳ５０８において受信した推薦情報を画面上に表示する。なお、ステップＳ５０８において、出力部１７０は、推薦情報に加えて、第１のユーザの行動履歴をユーザ端末４００に送信してもよい。図１４は、行動履歴として表示端末上に表示されるマップを例示する図である。図１４に示すように、ユーザ端末４００は、ステップＳ５０８において受信した行動履歴をマップ上に表示してもよい。また、図１５は、表示端末上に表示される行動履歴を例示する図である。図１５に示すように、ユーザ端末４００は、ステップＳ５０８において受信した行動履歴を時系列で表示してもよい。

図１４、１５では、第１のユーザの行動履歴のみを表示端末上に表示する場合を示しているが、表示端末上には、当該行動履歴に加えて、推薦情報を表示してもよい。推薦情報は、店舗情報、店舗の住所、及びユーザの現在位置から店舗までのルート案内等を含んでいてもよい。ルート案内は、ユーザの現在位置から店舗までの距離及び所要時間等を含んでいてもよい。また、表示端末上には、複数の推薦情報を表示してもよい。複数の推薦情報を表示する場合、各推薦情報の詳細及びルート案内等を同時に表示してもよい。ユーザは、各推薦情報の詳細及びルート案内等を検討し、推薦情報同士を比較することができる。

以下、第１のユーザに提示する推薦情報の具体例を説明する。例えば、所定の傾向を「文字列「パスタ」を含む行動履歴が３以上存在、又は２か月以上継続している」とし、「文字列「パスタ」を含む行動履歴を有するユーザ」を行動履歴が類似する（第２の）ユーザとする。ユーザＵＡの行動履歴を以下の表１に示す。

表１に示すように、ユーザＵＡは、文字列「パスタ」を含む行動を３回行っており、かつ、２か月以上継続している。したがって、ユーザＵＡの行動履歴は、上述の所定の傾向を示す。ユーザＵＡと別のユーザＵＢの行動履歴を以下の表２に示す。

表２に示すように、ユーザＵＢは、文字列「パスタ」を含む行動を行っているため、ユーザＵＡと行動履歴が類似する。ユーザＵＢは、文字列「パスタ」を含まない行動履歴の内、文字列「餃子」を含む行動を２回行っている。そこで、「餃子」を推薦情報として特定し、ユーザＵＡに提示することによって、ユーザＵＡの嗜好に変化を加えた推薦情報を提示することができる。尚、第２のユーザを「所定の傾向を示す行動履歴を有するユーザ」とする場合、第２のユーザの行動履歴も「文字列「パスタ」を含む行動履歴が３以上存在、又は２か月以上継続している」ことを満たす必要がある。例えば、表２に日付「2019/6/5」、地点「Ｙ」、内容「パスタ購入」の履歴が含まれていた場合、第２のユーザの行動履歴も所定の傾向を示すといえる。

上述の具体例では、所定の傾向を、「所定期間以上特定の行動が継続する、又は、当該特定の行動を所定回数以上行うこと」とした。しかしながら、所定の傾向は、これに限られず、例えば「所定期間内に特定の行動を所定回数以上行うこと」、「所定期間内に特定地域における行動が所定回数以上であること」、「所定期間内に特定の購入金額の行動を所定回数以上行うこと」等であってもよい。

行動履歴が類似するユーザを特定する際には、第１のユーザの属性等を加味してもよい。例えば、年齢、性別、家族構成及び好物等の属性を加味することによって、より第１のユーザと類似する嗜好を有する第２のユーザを特定することができる。また、行動履歴が類似するユーザを特定する際には、第１のユーザのＳＮＳ上における友人から第２のユーザを特定してもよい。

＜実施形態３＞
実施形態３は、上述した実施形態１～２の変形例である。実施形態１～２に係る推薦制御装置１００及び１００ａは、外部の認証装置２００を用いて顔認証を行っていた。一方、本実施形態に係る推薦制御装置８００は、装置内部で顔認証を行う。

図１６は、実施形態３に係る推薦制御装置の構成を示すブロック図である。推薦制御装置８００は、図１に示した推薦制御装置１００の構成と比べて、認証制御部１４０が抽出部１４０ａ及び顔認証部１９０に置き換わり、顔特徴ＤＢ１９１（不図示）が追加されたものである。尚、顔特徴ＤＢ１９１は、顔特徴情報記憶部の一例である。推薦制御装置８００が備える各構成について、実施形態２と重複する説明は適宜省略する。図１７は、実施形態３に係る推薦制御システムの構成を示すブロック図である。推薦制御システム９００は、認証装置２００を備えていない点及び推薦制御装置８００ａを備える点で推薦制御システム６００と異なる。その他の構成については同様であるため、説明を適宜省略する。

抽出部１４０ａは、撮影画像から顔領域又は顔特徴情報を抽出する。顔認証部１９０は、抽出された顔領域又は顔特徴情報に基づいて顔認証を行う。顔特徴ＤＢ１９１は、ユーザＩＤと当該ユーザの顔特徴情報とを対応付けて記憶する顔特徴データベースである。推薦制御装置８００ａは、推薦制御装置１００と同様に図２に示す流れで推薦情報の提示を制御する。但し、ステップＳ１０３において、抽出部１４０ａは、取得部１３０が取得した撮影画像から顔領域又は顔特徴情報を抽出し、顔認証部１９０は、抽出された顔領域又は顔特徴情報に基づいて顔認証を行う。さらに、本実施形態に係る推薦制御装置は、実施形態１～２において説明した効果と同様の効果を奏することができる。

尚、上述の実施形態では、ハードウェアの構成として説明したが、これに限定されるものではない。本開示は、任意の処理を、ＣＰＵにコンピュータプログラムを実行させることにより実現することも可能である。

上述の例において、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ－ＲＯＭ（Read Only Memory）、ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗ、ＤＶＤ（Digital Versatile Disc）、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。

なお、本開示は上記実施形態に限られたものではなく、趣旨を逸脱しない範囲で適宜変更することが可能である。また、本開示は、それぞれの実施形態を適宜組み合わせて実施されてもよい。

上記の実施形態の一部又は全部は、以下の付記のようにも記載され得るが、以下には限られない。

（付記Ａ１）
所定の撮影装置により撮影された撮影画像を取得する取得部と、
前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる認証制御部と、
前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する判定部と、
前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、当該第２のユーザの行動履歴のうち当該第１のユーザの行動履歴以外に基づいて推薦情報を特定する特定部と、
所定の表示端末に前記特定部が特定した推薦情報を送信する出力部と、
を備える推薦制御装置。

（付記Ａ２）
前記行動履歴は、前記第１のユーザの購入履歴をさらに含み、
前記所定の傾向は、前記第１のユーザが特定の商品を複数回購入していることを含み、
前記特定部は、当該特定の商品を複数回購入している他のユーザを前記第２のユーザとして特定する、
付記Ａ１に記載の推薦制御装置。

（付記Ａ３）
前記特定部は、前記第１のユーザの行動履歴が所定の傾向を示すと前記判定部が判定した場合に、当該所定の傾向を示す行動履歴を有する第２のユーザを特定し、当該第２のユーザの行動履歴のうち前記所定の傾向を示さない行動履歴に基づいて前記推薦情報を特定する、
付記Ａ１又はＡ２に記載の推薦制御装置。

（付記Ａ４）
さらに、
複数のユーザの行動履歴を記憶する履歴記憶部と、
ユーザＩＤと行動履歴とを対応付けて前記履歴記憶部に登録する履歴登録部と、
を備え、
前記判定部は、前記顔認証に成功した第１のユーザにおけるユーザＩＤと対応付けられた行動履歴を前記履歴記憶部から取得し、当該行動履歴が所定の傾向を示すか否かを判定する、
付記Ａ１～Ａ３のいずれか一項に記載の推薦制御装置。

（付記Ａ５）
前記履歴登録部は、ユーザＩＤ及び行動履歴と当該ユーザの属性とを対応付けて前記履歴記憶部に登録し、
前記第１の傾向は、前記第１のユーザの属性を含み、
前記特定部は、当該属性に該当するユーザを前記第２のユーザとして特定する、
付記Ａ４に記載の推薦制御装置。

（付記Ａ６）
前記特定部は、ユーザの要求に応じて推薦情報を特定する、
付記Ａ１～Ａ５のいずれか一項に記載の推薦制御装置。

（付記Ｂ１）
ユーザの顔領域を含めて撮影を行う撮影装置と、
前記ユーザの顔特徴情報を記憶する認証装置と、
前記撮影装置及び前記認証装置と接続された推薦制御装置と、
を備え、
前記撮影装置により撮影された撮影画像を取得する取得部と、
前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる認証制御部と、
前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する判定部と、
前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、当該第２のユーザの行動履歴のうち当該第１のユーザの行動履歴以外に基づいて推薦情報を特定する特定部と、
所定の表示端末に前記特定部が特定した推薦情報を送信する出力部と、
を備える推薦制御システム。

（付記Ｂ２）
前記行動履歴は、前記第１のユーザの購入履歴をさらに含み、
前記所定の傾向は、前記第１のユーザが特定の商品を複数回購入していることを含み、
前記特定部は、当該特定の商品を複数回購入している他のユーザを前記第２のユーザとして特定する、
付記Ｂ１に記載の推薦制御システム。

（付記Ｃ１）
コンピュータが、
所定の撮影装置により撮影された撮影画像を取得する工程と、
前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる工程と、
前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する工程と、
前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、当該第２のユーザの行動履歴のうち当該第１のユーザの行動履歴以外に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
を備える推薦制御方法。

（付記Ｄ１）
所定の撮影装置により撮影された撮影画像を取得する工程と、
前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる工程と、
前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する工程と、
前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、当該第２のユーザの行動履歴のうち当該第１のユーザの行動履歴以外に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
をコンピュータに実行させる推薦制御プログラムが格納された非一時的なコンピュータ可読媒体。

（付記Ｅ１）
所定の撮影装置により撮影された撮影画像を取得する取得部と、
前記撮影画像から顔領域又は顔特徴情報を抽出する抽出部と、
前記顔領域又は前記顔特徴情報に基づいて顔認証を行う顔認証部と、
前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する判定部と、
前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、当該第２のユーザの行動履歴のうち当該第１のユーザの行動履歴以外に基づいて推薦情報を特定する特定部と、
所定の表示端末に前記特定部が特定した推薦情報を送信する出力部と
を備える推薦制御装置。

（付記Ｅ２）
前記行動履歴は、前記第１のユーザの購入履歴をさらに含み、
前記所定の傾向は、前記第１のユーザが特定の商品を複数回購入していることを含み、
前記特定部は、当該特定の商品を複数回購入している他のユーザを前記第２のユーザとして特定する、
付記Ｅ１に記載の推薦制御装置。

（付記Ｆ１）
コンピュータが、
所定の撮影装置により撮影された撮影画像を取得する工程と、
前記撮影画像から顔領域又は顔特徴情報を抽出する工程と、
前記顔領域又は前記顔特徴情報に基づいて顔認証を行う工程と、
前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する工程と、
前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、当該第２のユーザの行動履歴のうち当該第１のユーザの行動履歴以外に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
を備える推薦制御方法。

（付記Ｇ１）
所定の撮影装置により撮影された撮影画像を取得する工程と、
前記撮影画像から顔領域又は顔特徴情報を抽出する工程と、
前記顔領域又は前記顔特徴情報に基づいて顔認証を行う工程と、
前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する工程と、
前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似する第２のユーザを特定し、当該第２のユーザの行動履歴のうち当該第１のユーザの行動履歴以外に基づいて推薦情報を特定する工程と、
所定の表示端末に前記特定された推薦情報を送信する工程と、
をコンピュータに実行させる推薦制御プログラムが格納された非一時的なコンピュータ可読媒体。

以上、実施形態（及び実施例）を参照して本願発明を説明したが、本願発明は上記実施形態（及び実施例）に限定されものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。

１００、１００ａ、８００、８００ａ 推薦制御装置
６００、９００ 推薦制御システム
１１０ａ 履歴ＤＢ
１２０ 履歴登録部
１３０ 取得部
１４０ 認証制御部
１４０ａ 抽出部
１５０ 判定部
１６０ 特定部
１７０ 出力部
１９０ 顔認証部
１９１ 顔特徴ＤＢ
２００ 認証装置
２１０ 顔特徴ＤＢ
２２０ 顔検出部
２３０ 特徴点抽出部
２４０ 登録部
２５０ 認証部
３００（３００Ｘ～３００Ｗ） 顔認証端末
３１０ カメラ
３２０ 制御部
３２２ 撮影要求部
３２３ 顔特徴情報登録要求部
３２４ 認証要求部
３２５ 決済処理部
３２６ 履歴登録要求部
３２７ 変化推薦要求部
３３０ 記憶部
３４０ 通信部
３５０ 表示部
４００ ユーザ端末
４１０ カメラ
４２０ 制御部
４２２ 撮影要求部
４２３ 顔特徴情報登録要求部
４２４ 認証要求部
４２５ 決済処理部
４２６ 履歴登録要求部
４２７ 変化推薦要求部
４３０ 記憶部
４４０ 通信部
４５０ 表示部
５００ ネットワーク

Claims (13)

1. 所定の撮影装置により撮影された撮影画像を取得する取得手段と、
   前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる認証制御手段と、
   前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する判定手段と、
   前記第１のユーザの行動履歴が前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似し、かつ、当該所定の傾向を示す行動履歴を有する第２のユーザを特定し、当該第２のユーザの行動履歴のうち前記所定の傾向を示さない行動履歴に基づいて推薦情報を特定する特定手段と、
   所定の表示端末に前記特定手段が特定した推薦情報を送信する出力手段と、
   を備える推薦制御装置。
2. 前記行動履歴は、前記第１のユーザの購入履歴をさらに含み、
   前記所定の傾向は、前記第１のユーザが特定の商品を複数回購入していることを含み、
   前記特定手段は、当該特定の商品を複数回購入している他のユーザを前記第２のユーザとして特定する、
   請求項１に記載の推薦制御装置。
3. さらに、
   複数のユーザの行動履歴を記憶する履歴記憶手段と、
   ユーザＩＤと行動履歴とを対応付けて前記履歴記憶手段に登録する履歴登録手段と、
   を備え、
   前記判定手段は、前記顔認証に成功した第１のユーザにおけるユーザＩＤと対応付けられた行動履歴を前記履歴記憶手段から取得し、当該行動履歴が所定の傾向を示すか否かを判定する、
   請求項１又は２に記載の推薦制御装置。
4. 前記履歴登録手段は、ユーザＩＤ及び行動履歴と当該ユーザの属性とを対応付けて前記履歴記憶手段に登録し、
   前記所定の傾向は、前記第１のユーザの属性を含み、
   前記特定手段は、当該属性に該当するユーザを前記第２のユーザとして特定する、
   請求項３に記載の推薦制御装置。
5. 前記特定手段は、ユーザの要求に応じて推薦情報を特定する、
   請求項１～４のいずれか一項に記載の推薦制御装置。
6. ユーザの顔領域を含めて撮影を行う撮影装置と、
   前記ユーザの顔特徴情報を記憶する認証装置と、
   前記撮影装置及び前記認証装置と接続された推薦制御装置と、
   を備え、
   前記撮影装置により撮影された撮影画像を取得する取得手段と、
   前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる認証制御手段と、
   前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する判定手段と、
   前記第１のユーザの行動履歴が前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似し、かつ、当該所定の傾向を示す行動履歴を有する第２のユーザを特定し、当該第２のユーザの行動履歴のうち前記所定の傾向を示さない行動履歴に基づいて推薦情報を特定する特定手段と、
   所定の表示端末に前記特定手段が特定した推薦情報を送信する出力手段と、
   を備える推薦制御システム。
7. 前記行動履歴は、前記第１のユーザの購入履歴をさらに含み、
   前記所定の傾向は、前記第１のユーザが特定の商品を複数回購入していることを含み、
   前記特定手段は、当該特定の商品を複数回購入している他のユーザを前記第２のユーザとして特定する、
   請求項６に記載の推薦制御システム。
8. コンピュータが、
   所定の撮影装置により撮影された撮影画像を取得する工程と、
   前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる工程と、
   前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する工程と、
   前記第１のユーザの行動履歴が前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似し、かつ、当該所定の傾向を示す行動履歴を有する第２のユーザを特定し、当該第２のユーザの行動履歴のうち前記所定の傾向を示さない行動履歴に基づいて推薦情報を特定する工程と、
   所定の表示端末に前記特定された推薦情報を送信する工程と、
   を備える推薦制御方法。
9. 所定の撮影装置により撮影された撮影画像を取得する工程と、
   前記撮影画像から顔領域又は顔特徴情報を抽出して認証装置に顔認証を行わせる工程と、
   前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する工程と、
   前記第１のユーザの行動履歴が前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似し、かつ、当該所定の傾向を示す行動履歴を有する第２のユーザを特定し、当該第２のユーザの行動履歴のうち前記所定の傾向を示さない行動履歴に基づいて推薦情報を特定する工程と、
   所定の表示端末に前記特定された推薦情報を送信する工程と、
   をコンピュータに実行させる推薦制御プログラム。
10. 所定の撮影装置により撮影された撮影画像を取得する取得手段と、
    前記撮影画像から顔領域又は顔特徴情報を抽出する抽出手段と、
    前記顔領域又は前記顔特徴情報に基づいて顔認証を行う顔認証手段と、
    前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する判定手段と、
    前記第１のユーザの行動履歴が前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似し、かつ、当該所定の傾向を示す行動履歴を有する第２のユーザを特定し、当該第２のユーザの行動履歴のうち前記所定の傾向を示さない行動履歴に基づいて推薦情報を特定する特定手段と、
    所定の表示端末に前記特定手段が特定した推薦情報を送信する出力手段と
    を備える推薦制御装置。
11. 前記行動履歴は、前記第１のユーザの購入履歴をさらに含み、
    前記所定の傾向は、前記第１のユーザが特定の商品を複数回購入していることを含み、
    前記特定手段は、当該特定の商品を複数回購入している他のユーザを前記第２のユーザとして特定する、
    請求項１０に記載の推薦制御装置。
12. コンピュータが、
    所定の撮影装置により撮影された撮影画像を取得する工程と、
    前記撮影画像から顔領域又は顔特徴情報を抽出する工程と、
    前記顔領域又は前記顔特徴情報に基づいて顔認証を行う工程と、
    前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する工程と、
    前記第１のユーザの行動履歴が前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似し、かつ、当該所定の傾向を示す行動履歴を有する第２のユーザを特定し、当該第２のユーザの行動履歴のうち前記所定の傾向を示さない行動履歴に基づいて推薦情報を特定する工程と、
    所定の表示端末に前記特定された推薦情報を送信する工程と、
    を備える推薦制御方法。
13. 所定の撮影装置により撮影された撮影画像を取得する工程と、
    前記撮影画像から顔領域又は顔特徴情報を抽出する工程と、
    前記顔領域又は前記顔特徴情報に基づいて顔認証を行う工程と、
    前記顔認証に成功した第１のユーザにおける行動履歴が所定の傾向を示すか否かを判定する工程と、
    前記第１のユーザの行動履歴が前記所定の傾向を示すと判定された場合、前記第１のユーザと行動履歴及び属性のうち少なくとも一方が類似し、かつ、当該所定の傾向を示す行動履歴を有する第２のユーザを特定し、当該第２のユーザの行動履歴のうち前記所定の傾向を示さない行動履歴に基づいて推薦情報を特定する工程と、
    所定の表示端末に前記特定された推薦情報を送信する工程と、
    をコンピュータに実行させる推薦制御プログラム。

Images