JP2020129344A - 処理装置、処理方法及びプログラム - Google Patents

Abstract

【課題】ユーザが画像解析の結果を閲覧し、成否に関する情報を入力する作業をサポートする技術を提供する。【解決手段】本発明は、特定する人物の顔を含む処理対象顔画像を取得する画像取得部１１と、予め顧客識別情報と紐付けて登録された複数の参照用顔画像各々と、処理対象顔画像との識別スコアを算出する算出部１３と、識別スコアが所定条件を満たす複数の参照用顔画像を候補として表示手段に表示させ、識別スコアが最も高い参照用顔画像を識別可能に表示させる表示制御部１４と、候補として表示された参照用顔画像の中からユーザ入力で選択された１つを示す選択情報を取得する選択情報取得部１７と、選択された参照用顔画像に紐付けられた顧客識別情報に紐付けて、選択されたことを示す情報を登録する登録部１６と、を有する処理装置１０を提供する。【選択図】図３

Description

本発明は、処理装置、処理方法及びプログラムに関する。

特許文献１は、画像から顔を検出し、検出した顔の特徴データを抽出し、抽出した顔の特徴データとデータベースに記憶されている特徴データとを比較して類似度を判定し、検出した顔がどの個人の顔であるかを特定する技術を開示している。また、特許文献１は、特定された個人の顔をユーザが確認する場合、ユーザは表示されている個人の顔と、顔認識の結果を表示する照合用画像を見て成否を判断できる技術を開示している。さらに、特許文献１は、同じ人物について類似度が所定の閾値以上の顔認識レコードが複数ある場合、ユーザは類似度の高い順に順次表示させて成否を選択できる技術を開示している。

特開２００７−２７４２６４号公報

画像解析による個人特定の精度は１００％でない。一方で、利用場面によっては、１００％もしくは１００％に近い精度が要求される場合がある。特許文献１に開示の技術のように、ユーザが画像解析の結果を閲覧し、成否を入力できるようにすることで、上記問題を軽減できる。この場合、ユーザが成否を判断し、入力する作業をサポートする技術が望まれる。特許文献１は、単に、同じ人物について類似度が所定の閾値以上の顔認識レコードが複数ある場合、ユーザは類似度の高い順に順次表示させて成否を選択できることを開示しているだけであり、不十分である。

本発明は、ユーザが画像解析の結果を閲覧し、成否に関する情報を入力する作業をサポートする技術を提供することを課題とする。

本発明によれば、
特定する人物の顔を含む処理対象顔画像を取得する画像取得手段と、
予め顧客識別情報と紐付けて登録された複数の参照用顔画像各々と、前記処理対象顔画像との識別スコアを算出する算出手段と、
前記識別スコアが所定条件を満たす複数の前記参照用顔画像を候補として表示手段に表示させ、前記識別スコアが最も高い前記参照用顔画像を識別可能に表示させる表示制御手段と、
前記候補として表示された前記参照用顔画像の中からユーザ入力で選択された１つを示す選択情報を取得する選択情報取得手段と、
選択された前記参照用顔画像に紐付けられた前記顧客識別情報に紐付けて、選択されたことを示す情報を登録する登録手段と、
を有する処理装置が提供される。

また、本発明によれば、
コンピュータが、
特定する人物の顔を含む処理対象顔画像を取得する画像取得工程と、
予め顧客識別情報と紐付けて登録された複数の参照用顔画像各々と、前記処理対象顔画像との識別スコアを算出する算出工程と、
前記識別スコアが所定条件を満たす複数の前記参照用顔画像を候補として表示手段に表示させ、前記識別スコアが最も高い前記参照用顔画像を識別可能に表示させる表示制御工程と、
前記候補として表示された前記参照用顔画像の中からユーザ入力で選択された１つを示す選択情報を取得する選択情報取得工程と、
選択された前記参照用顔画像に紐付けられた前記顧客識別情報に紐付けて、選択されたことを示す情報を登録する登録工程と、
を実行する処理方法が提供される。

また、本発明によれば、
コンピュータを、
特定する人物の顔を含む処理対象顔画像を取得する画像取得手段、
予め顧客識別情報と紐付けて登録された複数の参照用顔画像各々と、前記処理対象顔画像との識別スコアを算出する算出手段、
前記識別スコアが所定条件を満たす複数の前記参照用顔画像を候補として表示手段に表示させ、前記識別スコアが最も高い前記参照用顔画像を識別可能に表示させる表示制御手段、
前記候補として表示された前記参照用顔画像の中からユーザ入力で選択された１つを示す選択情報を取得する選択情報取得手段、
選択された前記参照用顔画像に紐付けられた前記顧客識別情報に紐付けて、選択されたことを示す情報を登録する登録手段、
として機能させるプログラムが提供される。

本発明によれば、ユーザが画像解析の結果を閲覧し、成否に関する情報を入力する作業をサポートする技術が実現される。

本実施形態の人物特定システムの機能ブロック図の一例である。 本実施形態の処理装置、顧客用端末及び確認作業者用端末のハードウエア構成の一例を示す図である。 本実施形態の処理装置の機能ブロック図の一例である。 本実施形態の人物特定システムの処理の流れの一例を示すシーケンス図である。 本実施形態の処理装置が処理する情報の一例を模式的に示す図である。 本実施形態の人物特定システムが出力する画面の一例を示す図である。 本実施形態の人物特定システムが出力する画面の一例を示す図である。 本実施形態の人物特定システムの機能ブロック図の一例である。 本実施形態の人物特定システムの処理の流れの一例を示すシーケンス図である。 本実施形態の人物特定システムが出力する画面の一例を示す図である。

＜第１の実施形態＞
まず、本実施形態の人物特定システムの全体像及び概要を説明する。図１の機能ブロック図に示すように、人物特定システムは、処理装置１０と顧客用端末２０と確認作業者用端末３０とを有する。

顧客用端末２０は、顧客が操作する端末である。顧客用端末２０は、少なくとも、カメラと、ユーザ入力を受付ける入力装置と、有線及び／又は無線で外部装置（処理装置１０等）と通信する通信装置とを有する。顧客用端末２０は、例えば、タブレット端末、スマートフォン、携帯電話、ゲーム機、パーソナルコンピュータ、専用端末等が例示されるが、これらに限定されない。顧客用端末２０は、顧客自身の端末であってもよいし、施設等に設置され、不特定多数の顧客が使用することを前提とした端末であってもよい。

顧客用端末２０は、顧客の顔画像を生成し、処理装置１０に送信する。

確認作業者用端末３０は、画像解析の結果を閲覧し、成否に関する情報を入力する確認作業者が操作する端末である。確認作業者用端末３０は、少なくとも、情報を出力する出力装置と、ユーザ入力を受付ける入力装置と、有線及び／又は無線で外部装置（処理装置１０等）と通信する通信装置とを有する。確認作業者用端末３０は、例えば、タブレット端末、スマートフォン、携帯電話、ゲーム機、パーソナルコンピュータ、専用端末等が例示されるが、これらに限定されない。確認作業者用端末３０は、確認作業者自身の端末であってもよいし、施設等に設置され、不特定多数の確認作業者が使用することを前提とした端末であってもよい。

確認作業者用端末３０は、処理装置１０から情報を取得し、出力装置を介して当該情報を出力する。また、確認作業者用端末３０は、入力装置を介してユーザ入力を受付け、入力内容を示す情報を処理装置１０に送信する。

処理装置１０は、顧客用端末２０が生成した顧客の顔を含む処理対象顔画像を取得する。そして、処理装置１０は、処理対象顔画像と、予め顧客識別情報と紐付けて登録された複数の参照用顔画像各々との識別スコア（参照用顔画像に含まれる顔と、処理対象顔画像に含まれる顔とが類似する程度を示す値）を算出する。そして、処理装置１０は、確認作業者用端末３０の表示手段に、識別スコアが所定条件を満たす複数の参照用顔画像を候補として表示させる。また、処理装置１０は、候補として表示された参照用顔画像の中からユーザ入力で選択された１つを示す選択情報を確認作業者用端末３０から取得する。そして、処理装置１０は、選択された参照用顔画像に紐付けられた顧客識別情報に紐付けて、選択されたことを示す情報を登録する。

なお、処理装置１０は、上記候補を確認作業者用端末３０の表示手段に表示させる時に、識別スコアが最も高い参照用顔画像を識別可能に表示させる。このため、確認作業者は、表示された複数の参照用顔画像の中の正解である可能性が高い参照用顔画像を容易に把握することができる。結果、その参照用顔画像を先に確認する等の工夫により、作業効率が向上する等の効果が得られる。

次に、処理装置１０、顧客用端末２０及び確認作業者用端末３０のハードウエア構成の一例について説明する。本実施形態の処理装置１０、顧客用端末２０及び確認作業者用端末３０が備える各機能部は、任意のコンピュータのＣＰＵ（Central Processing Unit）、メモリ、メモリにロードされるプログラム、そのプログラムを格納するハードディスク等の記憶ユニット（あらかじめ装置を出荷する段階から格納されているプログラムのほか、ＣＤ（Compact Disc）等の記憶媒体やインターネット上のサーバ等からダウンロードされたプログラムをも格納できる）、ネットワーク接続用インターフェイスを中心にハードウエアとソフトウエアの任意の組合せによって実現される。そして、その実現方法、装置にはいろいろな変形例があることは、当業者には理解されるところである。

図２は、本実施形態の処理装置１０、顧客用端末２０及び確認作業者用端末３０のハードウエア構成を例示するブロック図である。図２に示すように、処理装置１０、顧客用端末２０及び確認作業者用端末３０各々は、プロセッサ１Ａ、メモリ２Ａ、入出力インターフェイス３Ａ、周辺回路４Ａ、バス５Ａを有する。周辺回路４Ａには、様々なモジュールが含まれる。処理装置１０、顧客用端末２０及び確認作業者用端末３０は周辺回路４Ａを有さなくてもよい。なお、処理装置１０、顧客用端末２０及び確認作業者用端末３０各々は、物理的及び／又は論理的に分かれた複数の装置で構成されてもよい。この場合、複数の装置各々が上記ハードウエア構成を備えることができる。

バス５Ａは、プロセッサ１Ａ、メモリ２Ａ、周辺回路４Ａ及び入出力インターフェイス３Ａが相互にデータを送受信するためのデータ伝送路である。プロセッサ１Ａは、例えばＣＰＵ、ＧＰＵ（Graphics Processing Unit）などの演算処理装置である。メモリ２Ａは、例えばＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）などのメモリである。入出力インターフェイス３Ａは、入力装置、外部装置、外部サーバ、外部センサ、カメラ等から情報を取得するためのインターフェイスや、出力装置、外部装置、外部サーバ等に情報を出力するためのインターフェイスなどを含む。入力装置は、例えばキーボード、マウス、マイク、物理ボタン、タッチパネル等である。出力装置は、例えばディスプレイ、スピーカ、プリンター、メーラ等である。プロセッサ１Ａは、各モジュールに指令を出し、それらの演算結果をもとに演算を行うことができる。

次に、図３の機能ブロック図、及び、図４のシーケンス図を用いて、人物特定システムの機能構成及び処理の流れの一例を説明する。図４の処理は、顧客用端末２０を操作している人物がどの顧客であるかを特定し、その結果を登録する処理である。

図３は、処理装置１０の機能ブロック図の一例である。図示するように、処理装置１０は、画像取得部１１と、記憶部１２と、算出部１３と、表示制御部１４と、登録部１６と、選択情報取得部１７とを有する。なお、処理装置１０は、記憶部１２を有さなくてもよい。この場合、処理装置１０と通信可能に構成された外部装置が記憶部１２を備える。

まず、図４の処理が実行される前に、任意の手段で、複数の顧客各々の顔を含む参照用顔画像が記憶部１２に登録される。記憶部１２は、顧客識別情報と、各顧客の顔を含む参照用顔画像とを紐付けて記憶する。記憶部１２は、さらに、参照用顔画像から抽出された特徴量を顧客識別情報に紐付けて記憶してもよい。特徴量は、様々であるが、例えば顔の各パーツ（目、鼻、口等）に関する情報（大きさ、位置、パーツ間の距離等）が例示される。

図５に、記憶部１２が記憶する情報の一例を模式的に示す。図示する例では、顧客識別情報と、参照用顔画像のファイル名と、参照用顔画像の特徴量と、選択情報とが互いに紐付けられている。選択情報については後述する。

図４のＳ１０では、顧客が顧客用端末２０を操作し、自身の顔を撮影する。当該操作に応じて、顧客用端末２０は、顧客の顔を含む処理対象顔画像を生成する。

Ｓ１１では、顧客用端末２０は、処理対象顔画像の生成に応じて、又は、その後のユーザ入力に応じて、生成した処理対象顔画像を処理装置１０に送信する。処理装置１０の画像取得部１１は、顧客用端末２０が送信した処理対象顔画像を取得する。

なお、本明細書において、「取得」とは、ユーザ入力に基づき、又は、プログラムの指示に基づき、「自装置が他の装置や記憶媒体に格納されているデータを取りに行くこと（能動的な取得）」、たとえば、他の装置にリクエストまたは問い合わせして受信すること、他の装置や記憶媒体にアクセスして読み出すこと等、および、ユーザ入力に基づき、又は、プログラムの指示に基づき、「自装置に他の装置から出力されるデータを入力すること（受動的な取得）」、たとえば、配信（または、送信、プッシュ通知等）されるデータを受信すること、また、受信したデータまたは情報の中から選択して取得すること、及び、「データを編集（テキスト化、データの並び替え、一部データの抽出、ファイル形式の変更等）などして新たなデータを生成し、当該新たなデータを取得すること」の少なくともいずれか一方を含む。

Ｓ１２では、処理装置１０の算出部１３は、顧客識別情報と紐付けて登録された複数の参照用顔画像（記憶部１２に記憶されている参照用顔画像）各々と、画像取得部１１が取得した処理対象顔画像との識別スコアを算出する。識別スコアは、参照用顔画像に含まれる顔と、処理対象顔画像に含まれる顔とが類似する程度を示す値である。識別スコアが高い程、参照用顔画像に含まれる顔と、処理対象顔画像に含まれる顔とが類似する。識別スコアは、類似度、確信度、信頼度等と呼ばれることがある。

例えば、算出部１３は、画像取得部１１が取得した処理対象顔画像から人物の顔を検出し、検出した顔の特徴量を抽出する。そして、抽出した特徴量と、記憶部１２に記憶されている参照用顔画像各々の特徴量とに基づき、上記識別スコアを算出することができる。当該処理は広く知られているので、ここでの詳細な説明は省略する。

識別スコアを算出した後、算出部１３は、識別スコアが所定条件を満たす参照用顔画像を特定する。所定条件は、識別スコアが高い方から一部を選択するための条件であり、「識別スコアが高い方から所定数以内」、「識別スコアが基準値以上」、「識別スコアが高い方から所定数以内、かつ、識別スコアが基準値以上」等が例示されるが、これらに限定されない。

Ｓ１３では、処理装置１０の表示制御部１４は、識別スコアが所定条件を満たす複数の参照用顔画像を確認作業者用端末３０に送信し、当該複数の参照用顔画像を候補として表示手段（ディスプレイ等）に表示させる。そして、表示制御部１４は、識別スコアが最も高い参照用顔画像を識別可能に表示させる。なお、表示制御部１４は、識別スコアが所定条件を満たす複数の参照用顔画像を、識別スコアが高い順に並べて表示させてもよい。

Ｓ１４では、確認作業者用端末３０は、識別スコアが所定条件を満たす複数の参照用顔画像を候補として表示手段（ディスプレイ等）に表示する。そして、確認作業者用端末３０は、識別スコアが最も高い参照用顔画像を識別可能に表示する。なお、確認作業者用端末３０は、識別スコアが所定条件を満たす複数の参照用顔画像を、識別スコアが高い順に並べて表示してもよい。

図６に、確認作業者用端末３０の表示手段が表示する情報の一例を示す。図示する例では、識別スコアが所定条件を満たす複数の参照用顔画像が、識別スコア（類似度）の高い順に並んで一覧表示されている。そして、各参照用画像に対応付けて、各顧客の氏名及び識別スコア（類似度）が表示されている。また、識別スコアが最も高い参照用顔画像を他の参照用顔画像より大きくすることで、識別スコアが最も高い参照用顔画像が識別可能に表示されている。なお、識別可能に表示する手段はこれに限定されず、色、ハイライト表示、文字情報等のあらゆる手段を用いることができる。

図４に戻り、Ｓ１５では、確認作業者用端末３０は、候補として表示された複数の参照用顔画像の中から１つを選択するユーザ入力を受付ける。例えば、確認作業者は、顧客用端末２０を操作している顧客の顔を視認するとともに、図６に示すような画面を閲覧し、当該画面において表示されている複数の参照用顔画像の中からその顧客を示す１つの参照用顔画像を選択する入力を行う。

確認作業者は、顧客用端末２０を操作している顧客の顔を直接視認できる位置で、確認作業者用端末３０の操作を行ってもよい。例えば、カウンターを挟んで一方側に顧客が位置し、反対側に確認作業者が位置する例などが考えられるが、これに限定されない。

その他、図７に示すように、確認作業者用端末３０は、識別スコアが所定条件を満たす複数の参照用顔画像を候補として表示手段に表示するとともに、処理対象顔画像を表示手段に表示してもよい。確認作業者用端末３０は、処理装置１０から処理対象顔画像を取得し、当該表示を実現できる。この例の場合、確認作業者は、処理対象顔画像を閲覧することで、顧客用端末２０を操作している顧客の顔を視認する。この場合、確認作業者が、確認作業者用端末３０を操作する位置の自由度が高まる。

図４に戻り、Ｓ１６では、確認作業者用端末３０は、Ｓ１４で選択された参照用顔画像を示す選択情報を処理装置１０に送信する。処理装置１０の選択情報取得部１７は、確認作業者用端末３０が送信した選択情報を取得する。

Ｓ１７では、処理装置１０の登録部１６は、選択された参照用顔画像に紐付けられた顧客識別情報に紐付けて、選択されたことを示す情報を登録する。例えば、図５に示す情報における選択情報の欄に、選択されたことを示す情報が登録される。

Ｓ１８では、登録部１６は、登録が完了したことを顧客用端末２０に通知する。Ｓ１９では、顧客用端末２０は、出力装置を介して、登録が完了したことを顧客に通知する。

Ｓ２０では、登録部１６は、登録が完了したことを確認作業者用端末３０に通知する。Ｓ２１では、確認作業者用端末３０は、出力装置を介して、登録が完了したことを確認作業者に通知する。

次に、人物特定システムの使用例を説明する。なお、ここでの使用例はあくまで一例であり、これに限定されない。

一例として、イベント等の会場に来場した顧客を特定し、来場したことを登録する使用例が挙げられる。会場には、顧客用端末２０及び確認作業者用端末３０が設置される。例えば、会場には、来場した顧客が受付けを行う受付カウンターが設けられる。受付カウンターには受付者が常駐し、受付業務を行う。そして、受付カウンターに、顧客用端末２０及び確認作業者用端末３０が設置される。

この例の場合、記憶部１２は、来場予定の顧客の顔画像である参照用顔画像を記憶する。

会場に来場した顧客は、会場に設置された顧客用端末２０を操作し、来場登録を行う。具体的には、顧客は、顧客用端末２０を操作し、自身の顔画像を撮影する。顧客用端末２０は、当該顧客の操作に応じて、来場した顧客の顔画像である処理対象画像を生成し、処理装置１０に送信する（図４のＳ１０、Ｓ１１）。

処理装置１０の画像取得部１１が上記処理対象画像を取得すると（図４のＳ１１）、算出部１３は、来場予定の顧客の顔画像である参照用顔画像各々と、来場した顧客の顔画像である処理対象顔画像との識別スコアを算出し、識別スコアが所定条件を満たす複数の参照用顔画像を特定する（図４のＳ１２）。

そして、処理装置１０の表示制御部１４は、識別スコアが所定条件を満たす複数の参照用顔画像を確認作業者用端末３０に送信し、受付者により閲覧される確認作業者用端末３０の表示手段に、当該複数の参照用顔画像を候補として表示させる（図４のＳ１３）。確認作業者用端末３０は、表示手段に、当該複数の参照用顔画像を候補として表示する（図４のＳ１４）。

受付者は、受付カウンターで顧客用端末２０を操作している顧客の顔を視認するとともに、確認作業者用端末３０の表示手段に表示された上記候補を閲覧し（図６参照）、当該画面において表示されている複数の参照用顔画像の中からその顧客を示す１つの参照用顔画像を選択する入力を行う。確認作業者用端末３０は、当該入力を受付ける（図４のＳ１５）。

そして、確認作業者用端末３０は、受付者により選択された１つの参照用顔画像を示す選択情報を処理装置１０に送信する（図４のＳ１６）。処理装置１０の選択情報取得部１７は、受付者によるユーザ入力で選択された１つの参照用顔画像を示す選択情報を取得する。

そして、処理装置１０の登録部１６は、選択された参照用顔画像に紐付けられた顧客識別情報に紐付けて、来場したことを示す情報を登録する（図４のＳ１７）。

その後、処理装置１０の登録部１６は、顧客用端末２０及び確認作業者用端末３０に対して、来場登録が完了したことを通知する（図４のＳ１８、Ｓ２０）。そして、顧客用端末２０は、来場登録が完了したことを顧客に通知する（図４のＳ１９）。また、確認作業者用端末３０は、来場登録が完了したことを受付者に通知する（図４のＳ２１）。

次に、人物特定システムの作用効果を説明する。

人物特定システムは、画像解析で処理対象画像に含まれる人物の候補を絞り込んだのち、ユーザ入力に基づきその候補の中から１つを選択して登録する。画像解析と人間による確認作業とを組み合わせることで、「画像解析による個人特定の精度は１００％でない」という不都合を軽減できる。また、画像解析で候補を絞り込んだのち、人間による確認作業を行うことで、人間による確認作業の労力を減らすことができる。

また、人物特定システムは、候補を表示させる時に、識別スコアが最も高い参照用顔画像を識別可能に表示させる。このため、確認作業者は、表示された複数の参照用顔画像の中の正解である可能性が高い参照用顔画像（特定する人物の顔を含む）を容易に把握することができる。結果、その参照用顔画像を先に確認する等の工夫により、作業効率が向上する等の効果が得られる。

また、人物特定システムは、識別スコアが高い順に並べて複数の参照用画像を表示させることができる。このため、確認作業者は、表示された複数の参照用顔画像において、正解である可能性が高い順番を容易に把握することができる。例えば、正解である可能性が高い順に参照用顔画像を確認する等の工夫により、作業効率が向上する等の効果が得られる。

また、処理装置１０は、顧客が操作することを前提とした顧客用端末２０が生成した処理対象顔画像を取得し、受付者が操作することを前提とした確認作業者用端末３０（顧客用端末２０とは異なる端末）に、複数の参照用顔画像を前記候補として表示させる。そして、確認作業者用端末３０は、受付者によるユーザ入力で選択された１つを示す選択情報を処理装置１０に送信し、処理装置１０は当該選択情報を取得する。

顧客が閲覧できる端末に候補を表示すると、その顧客が他の顧客の参照用顔画像等を閲覧できてしまう。このような状況を嫌に思う顧客もいる。本実施形態の場合、確認作業者用端末３０に候補を表示するで、このような不都合を回避できる。

ここで、変形例を説明する。ここまでは、処理装置１０と、顧客用端末２０と、確認作業者用端末３０とは、互いに、物理的及び論理的に分かれていることを前提とした。変形例として、処理装置１０と顧客用端末２０とは、物理的及び／又は論理的に一体となっていてもよい。また、処理装置１０と確認作業者用端末３０とは、物理的及び／又は論理的に一体となっていてもよい。さらに、処理装置１０と顧客用端末２０と確認作業者用端末３０とは、物理的及び／又は論理的に一体となっていてもよい。当該変形例においても、上記作用効果が実現される。なお、当該変形例は、以下のすべての実施形態において適用可能である。

＜第２の実施形態＞
図８に、本実施形態の人物特定システムの機能ブロック図の一例を示す。図示するように、人物特定システムは、処理装置１０と顧客用端末２０とを有する。

処理装置１０及び顧客用端末２０のハードウエア構成の一例は、第１の実施形態と同様である。

処理装置１０の機能ブロック図の一例は、第１の実施形態同様、図３で示される。

図９のシーケンス図は、本実施形態の人物特定システムの処理の流れの一例を示す。図示するＳ３０乃至Ｓ３９各々の処理は、図４に示すＳ１０乃至Ｓ１９各々の処理と同様である。このように、本実施形態の顧客用端末２０は、第１の実施形態で説明した顧客用端末２０が実行する処理のみならず（図４のＳ１０、Ｓ１１等）、確認作業者用端末３０が実行する処理（図４のＳ１３、Ｓ１４、Ｓ１５、Ｓ１６等）をも実行する。

すなわち、本実施形態では、処理装置１０は、識別スコアが所定条件を満たす複数の参照用顔画像を候補として顧客用端末２０の表示手段に表示させる。そして、顧客用端末２０は、候補として表示された参照用顔画像の中から顧客の顔を含む参照用顔画像を選択する入力を、顧客から受付ける。例えば、仲間内のイベント（社内コンペなど）で人物特定システムを利用する場合、各顧客の参照用顔画像を他の顧客に閲覧されても問題ない。このような状況の場合、本実施形態の人物特定システムを利用することができる。

本実施形態の人物特定システムの場合、第１の実施形態の人物特定システムと同様の作用効果を実現できる。また、顧客用端末２０及び確認作業者用端末３０の両方を用意する必要がないので、コストを抑えることができる。また、確認作業者を用意する必要がないので、コストを抑えることができる。

＜第３の実施形態＞
本実施形態の人物特定システムは、識別スコアが所定条件を満たす複数の参照用顔画像の中に、既に選択されたことを示す情報が紐付けて登録された参照用顔画像が存在する場合、その参照用顔画像が誤って再度選択されることを防止する機能を有する点で、第１の実施形態と異なる。その他の構成は、第１の実施形態と同様である。

本実施形態の人物特定システムの機能ブロック図の一例は、図１又は図８で示される。処理装置１０、顧客用端末２０及び確認作業者用端末３０のハードウエア構成の一例は、第１及び第２の実施形態と同様である。

処理装置１０の機能ブロック図の一例は、第１の実施形態同様、図３で示される。人物特定システムの処理の流れの一例は、図４又は図９で示される。

本実施形態の人物特定システムは、処理装置１０の表示制御部１４の構成が、第１及び第２の実施形態と異なる。その他構成は、第１又は第２の実施形態の人物特定システムと同様である。

処理装置１０の表示制御部１４は、候補として表示された複数の参照用顔画像の中の、顧客識別情報に紐付けて選択されたことを示す情報が登録されている参照用顔画像を、識別可能に表示させる。図１０に一例を示す。図示する例では、「選択済」という文言により、顧客識別情報に紐付けて選択されたことを示す情報が登録されている参照用顔画像が識別可能になっている。なお、識別可能に表示する手段はこれに限定されず、色、ハイライト表示、文字情報等のあらゆる手段を用いることができる。このような表示制御によれば、既に選択された参照用顔画像が誤って再度選択されることを防止できる。

その他の例として、表示制御部１４は、識別スコアが所定条件を満たす複数の参照用顔画像の中の、顧客識別情報に紐付けて選択されたことを示す情報が登録されている参照用顔画像を、前記候補として表示させないように制御してもよい。このような表示制御でも、既に選択された参照用顔画像が誤って再度選択されることを防止できる。

本実施形態の人物特定システムの場合、第１及び第２の実施形態の人物特定システムと同様の作用効果を実現できる。また、一度選択された参照用顔画像が誤って再度選択されることを防止できる。

以上、実施形態（及び実施例）を参照して本願発明を説明したが、本願発明は上記実施形態（及び実施例）に限定されるものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。

上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限定されない。
１． 特定する人物の顔を含む処理対象顔画像を取得する画像取得手段と、
予め顧客識別情報と紐付けて登録された複数の参照用顔画像各々と、前記処理対象顔画像との識別スコアを算出する算出手段と、
前記識別スコアが所定条件を満たす複数の前記参照用顔画像を候補として表示手段に表示させ、前記識別スコアが最も高い前記参照用顔画像を識別可能に表示させる表示制御手段と、
前記候補として表示された前記参照用顔画像の中からユーザ入力で選択された１つを示す選択情報を取得する選択情報取得手段と、
選択された前記参照用顔画像に紐付けられた前記顧客識別情報に紐付けて、選択されたことを示す情報を登録する登録手段と、
を有する処理装置。
２． １に記載の処理装置において、
前記表示制御手段は、前記識別スコアが前記所定条件を満たす複数の前記参照用顔画像を、前記識別スコアが高い順に並べて表示させる処理装置。
３． １又は２に記載の処理装置において、
前記表示制御手段は、前記候補として表示された複数の前記参照用顔画像の中の、前記顧客識別情報に紐付けて選択されたことを示す情報が登録されている前記参照用顔画像を、識別可能に表示させる処理装置。
４． １又は２に記載の処理装置において、
前記表示制御手段は、前記識別スコアが前記所定条件を満たす複数の前記参照用顔画像の中の、前記顧客識別情報に紐付けて選択されたことを示す情報が登録されている前記参照用顔画像を、前記候補として表示させない処理装置。
５． １から４のいずれかに記載の処理装置において、
前記画像取得手段は、来場した顧客の顔画像である前記処理対象顔画像を取得し、
前記算出手段は、来場予定の顧客の顔画像である前記参照用顔画像各々と、前記処理対象顔画像との識別スコアを算出し、
前記表示制御手段は、顧客又は受付者により閲覧される前記表示手段に、前記識別スコアが前記所定条件を満たす複数の前記参照用顔画像を前記候補として表示させ、
前記選択情報取得手段は、顧客又は受付者による前記ユーザ入力で選択された１つを示す前記選択情報を取得し、
前記登録手段は、選択された前記参照用顔画像に紐付けられた前記顧客識別情報に紐付けて、来場したことを示す情報を登録する処理装置。
６． １から５のいずれかに記載の処理装置において、
前記画像取得手段は、顧客が操作することを前提とした顧客用端末が生成した前記処理対象顔画像を取得し、
前記表示制御手段は、受付者が操作することを前提とした、前記顧客用端末と異なる端末に、前記識別スコアが前記所定条件を満たす複数の前記参照用顔画像を前記候補として表示させ、
前記選択情報取得手段は、受付者による前記ユーザ入力で選択された１つを示す前記選択情報を取得する処理装置。
７． コンピュータが、
特定する人物の顔を含む処理対象顔画像を取得する画像取得工程と、
予め顧客識別情報と紐付けて登録された複数の参照用顔画像各々と、前記処理対象顔画像との識別スコアを算出する算出工程と、
前記識別スコアが所定条件を満たす複数の前記参照用顔画像を候補として表示手段に表示させ、前記識別スコアが最も高い前記参照用顔画像を識別可能に表示させる表示制御工程と、
前記候補として表示された前記参照用顔画像の中からユーザ入力で選択された１つを示す選択情報を取得する選択情報取得工程と、
選択された前記参照用顔画像に紐付けられた前記顧客識別情報に紐付けて、選択されたことを示す情報を登録する登録工程と、
を実行する処理方法。
８． コンピュータを、
特定する人物の顔を含む処理対象顔画像を取得する画像取得手段、
予め顧客識別情報と紐付けて登録された複数の参照用顔画像各々と、前記処理対象顔画像との識別スコアを算出する算出手段、
前記識別スコアが所定条件を満たす複数の前記参照用顔画像を候補として表示手段に表示させ、前記識別スコアが最も高い前記参照用顔画像を識別可能に表示させる表示制御手段、
前記候補として表示された前記参照用顔画像の中からユーザ入力で選択された１つを示す選択情報を取得する選択情報取得手段、
選択された前記参照用顔画像に紐付けられた前記顧客識別情報に紐付けて、選択されたことを示す情報を登録する登録手段、
として機能させるプログラム。

１Ａ プロセッサ
２Ａ メモリ
３Ａ 入出力Ｉ／Ｆ
４Ａ 周辺回路
５Ａ バス
１０ 処理装置
１１ 画像取得部
１２ 記憶部
１３ 算出部
１４ 表示制御部
１６ 登録部
１７ 選択情報取得部
２０ 顧客用端末
３０ 確認作業者用端末

Claims (8)

1. 特定する人物の顔を含む処理対象顔画像を取得する画像取得手段と、
   予め顧客識別情報と紐付けて登録された複数の参照用顔画像各々と、前記処理対象顔画像との識別スコアを算出する算出手段と、
   前記識別スコアが所定条件を満たす複数の前記参照用顔画像を候補として表示手段に表示させ、前記識別スコアが最も高い前記参照用顔画像を識別可能に表示させる表示制御手段と、
   前記候補として表示された前記参照用顔画像の中からユーザ入力で選択された１つを示す選択情報を取得する選択情報取得手段と、
   選択された前記参照用顔画像に紐付けられた前記顧客識別情報に紐付けて、選択されたことを示す情報を登録する登録手段と、
   を有する処理装置。
2. 請求項１に記載の処理装置において、
   前記表示制御手段は、前記識別スコアが前記所定条件を満たす複数の前記参照用顔画像を、前記識別スコアが高い順に並べて表示させる処理装置。
3. 請求項１又は２に記載の処理装置において、
   前記表示制御手段は、前記候補として表示された複数の前記参照用顔画像の中の、前記顧客識別情報に紐付けて選択されたことを示す情報が登録されている前記参照用顔画像を、識別可能に表示させる処理装置。
4. 請求項１又は２に記載の処理装置において、
   前記表示制御手段は、前記識別スコアが前記所定条件を満たす複数の前記参照用顔画像の中の、前記顧客識別情報に紐付けて選択されたことを示す情報が登録されている前記参照用顔画像を、前記候補として表示させない処理装置。
5. 請求項１から４のいずれか１項に記載の処理装置において、
   前記画像取得手段は、来場した顧客の顔画像である前記処理対象顔画像を取得し、
   前記算出手段は、来場予定の顧客の顔画像である前記参照用顔画像各々と、前記処理対象顔画像との識別スコアを算出し、
   前記表示制御手段は、顧客又は受付者により閲覧される前記表示手段に、前記識別スコアが前記所定条件を満たす複数の前記参照用顔画像を前記候補として表示させ、
   前記選択情報取得手段は、顧客又は受付者による前記ユーザ入力で選択された１つを示す前記選択情報を取得し、
   前記登録手段は、選択された前記参照用顔画像に紐付けられた前記顧客識別情報に紐付けて、来場したことを示す情報を登録する処理装置。
6. 請求項１から５のいずれか１項に記載の処理装置において、
   前記画像取得手段は、顧客が操作することを前提とした顧客用端末が生成した前記処理対象顔画像を取得し、
   前記表示制御手段は、受付者が操作することを前提とした、前記顧客用端末と異なる端末に、前記識別スコアが前記所定条件を満たす複数の前記参照用顔画像を前記候補として表示させ、
   前記選択情報取得手段は、受付者による前記ユーザ入力で選択された１つを示す前記選択情報を取得する処理装置。
7. コンピュータが、
   特定する人物の顔を含む処理対象顔画像を取得する画像取得工程と、
   予め顧客識別情報と紐付けて登録された複数の参照用顔画像各々と、前記処理対象顔画像との識別スコアを算出する算出工程と、
   前記識別スコアが所定条件を満たす複数の前記参照用顔画像を候補として表示手段に表示させ、前記識別スコアが最も高い前記参照用顔画像を識別可能に表示させる表示制御工程と、
   前記候補として表示された前記参照用顔画像の中からユーザ入力で選択された１つを示す選択情報を取得する選択情報取得工程と、
   選択された前記参照用顔画像に紐付けられた前記顧客識別情報に紐付けて、選択されたことを示す情報を登録する登録工程と、
   を実行する処理方法。
8. コンピュータを、
   特定する人物の顔を含む処理対象顔画像を取得する画像取得手段、
   予め顧客識別情報と紐付けて登録された複数の参照用顔画像各々と、前記処理対象顔画像との識別スコアを算出する算出手段、
   前記識別スコアが所定条件を満たす複数の前記参照用顔画像を候補として表示手段に表示させ、前記識別スコアが最も高い前記参照用顔画像を識別可能に表示させる表示制御手段、
   前記候補として表示された前記参照用顔画像の中からユーザ入力で選択された１つを示す選択情報を取得する選択情報取得手段、
   選択された前記参照用顔画像に紐付けられた前記顧客識別情報に紐付けて、選択されたことを示す情報を登録する登録手段、
   として機能させるプログラム。

Images