JP6817596B2 - 顔認証ゲートおよび顔認証システム - Google Patents

Description

本発明は、入場者に対して顔認証を行い、その結果に応じて入場者に入場を許可する顔認証ゲートおよび顔認証システムに関するものである。

コンサートなどのイベントが開催される会場では、事前に購入したチケットを係員に提示することで、入場が許可されるが、近年、チケットの転売による不正入場が問題になっている。このため、チケットを販売する際に、チケット購入者の顔画像を登録し、イベント当日に会場の入場口で、入場者を撮影して入場者の顔画像を取得して、その入場者の顔画像と、予め登録されたチケット購入者の顔画像とを照合する顔認証を行うようにしている。これにより、不正入場を確実に防止することができる。

このような入場者に対する顔認証に関する技術として、従来、出入口から入退場する人物を、出入口に設置されたカメラで撮影して、その撮影画像から入退場する人物の顔画像を取得して、その入退場する人物の顔画像と、予め登録された顔画像とを照合する顔認証を行い、その顔認証の結果に基づいて人物の入退場を管理する技術が知られている（特許文献１参照）。また、係員がモバイル端末で人物を撮影して、その人物の顔画像と、予め登録されたチケット購入者の顔画像とを照合する顔認証を行い、その顔認証の結果に基づいて施設の利用を許可する技術が知られている（特許文献２参照）。

特開２０１７−２１５７３７号公報 特開２０１７−１８２３２６号公報

さて、会場の入場口には、イベントの開始時刻にあわせて入場者が集まるため、顔認証に時間がかかると、入場者の滞留が発生する。特に、ライブハウスのような小規模な会場では、入場者が滞留するエリアを十分に確保できないため、入場者の混乱を避けるために、入場者の滞留を生じにくくする必要があり、ウオークスルー、またはそれに近い状態で、手際よく入場者を処理することが望まれる。

また、スポーツ競技場のような大規模な会場では、常設の顔認証ゲートを設置すればよいが、ライブハウスのような小規模な会場では、仮設タイプの顔認証ゲートとして、必要な期間だけ臨時的に設置できるようにするとよい。この場合、特に、設置の自由度が高いことが望まれる。また、入場者の混乱を避けるため、ガイドポールや案内板などの誘導用品を用いて入場者を誘導することも可能であるが、このような誘導用品を用意するのは面倒であり、顔認証ゲート自体が、入場者に入場受付の位置を案内するシンボルとして機能するように構成することが望まれる。

しかしながら、従来の技術のように、係員がモバイル端末で入場者を１人ずつ撮影して顔認証を行う場合、顔認証に手間と時間がかかるため、入場者の滞留が生じやすく、また、係員の人数が増えるという問題があった。また、仮設タイプの顔認証ゲートに関しては、従来の技術では何ら考慮されておらず、仮設タイプとして望まれる機能を備えた顔認証ゲートを実現することができないという問題があった。

そこで、本発明は、係員を増やすことなく、高いスループットで入場者を処理して、入場者の滞留を生じにくくすることができ、さらに、仮設タイプの顔認証ゲートとして、設置の自由度が高く、かつ、入場者に入場受付の位置を案内するシンボルとして機能させることができる顔認証ゲートおよび顔認証システムを提供することを主な目的とする。

本発明の顔認証ゲートは、入場者に対して顔認証を行い、その結果に応じて入場者に入場を許可する顔認証ゲートであって、カメラと、プロセッサと、メモリと、ディスプレイと、タワー型の筐体とを備え、前記カメラは、前記筐体の上部に設けられて、入場者の顔を正面から撮影可能なように撮影範囲が設定され、前記プロセッサは、設定者の操作入力に基づいて、顔認証の成功回数に関する第１の判定基準値および前記顔認証の失敗回数に関する第２の判定基準値を設定し、前記カメラにより順次撮影された撮影画像から抽出した入場者の顔画像と、予め前記メモリに記憶された入場許可者の顔画像とを照合する顔認証を繰り返して、前記成功回数および前記失敗回数を取得し、前記成功回数が前記第１の判定基準値以上となる場合に、入場を許可する入場許可判定と、前記失敗回数が前記第２の判定基準値以上となる場合に、入場を許可しない入場不許可判定と、を行い、これらの判定結果に基づいて、入場許可画面あるいは入場不許可画面を前記ディスプレイに表示する構成とする。

また、本発明の顔認証システムは、入場者に対して顔認証を行い、その結果に応じて入場者に入場を許可する顔認証システムであって、顔認証ゲートと、この顔認証ゲートにネットワークを介して接続される顔認証サーバとを備え、前記顔認証ゲートは、カメラと、プロセッサと、ディスプレイと、通信部と、タワー型の筐体とを備え、前記カメラは、前記筐体の上部に設けられて、入場者の顔を正面から撮影可能なように撮影範囲が設定され、前記通信部は、前記カメラにより順次撮影された撮影画像、または前記プロセッサにより前記撮影画像から抽出した入場者の顔画像を、前記顔認証サーバへ送信し、前記顔認証サーバは、設定者の操作入力に基づいて、顔認証の成功回数に関する第１の判定基準値および前記顔認証の失敗回数に関する第２の判定基準値を設定し、前記顔認証ゲートから受信した前記撮影画像から抽出した入場者の顔画像、または前記顔認証ゲートから受信した前記入場者の顔画像と、予め登録された入場許可者の顔画像とを照合する顔認証を繰り返して、前記成功回数および前記失敗回数を取得し、前記成功回数が前記第１の判定基準値以上となる場合に、入場を許可する入場許可判定と、前記失敗回数が前記第２の判定基準値以上となる場合に、入場を許可しない入場不許可判定と、を行い、これらの判定結果を前記顔認証ゲートに送信し、前記顔認証ゲートの前記プロセッサは、前記顔認証サーバから受信した前記判定結果に基づいて、入場許可画面あるいは入場不許可画面を前記ディスプレイに表示する構成とする。

本発明によれば、顔認証ゲートが、入場者を撮影して顔認証を繰り返して、顔認証の成功回数および失敗回数に基づいて入場者の入場の可否を判定し、入場許可画面あるいは入場不許可画面をディスプレイに表示して入場者に通知する。このため、係員は、顔認証が失敗して顔認証ゲートが入場を許可しない場合にだけ対応すればよい。これにより、係員を増やすことなく、高いスループットで入場者を処理して、入場者の滞留を生じにくくすることができる。特に、顔認証の成功回数に関する第１の判定基準値および前記顔認証の失敗回数に関する第２の判定基準値の設定により、イベントの内容に応じて入場許可判定および入場不許可判定の厳しさを調整することができ、イベント主催者の判断で、スループットを優先したりセキュリティを優先したりすることができる。

第１実施形態に係る顔認証システムの全体構成図 顔認証ゲート１の外観を示す斜視図 顔認証ゲート１の概略構成を示すブロック図 本システムにおけるチケット購入時の動作手順を示すフロー図 ＤＢサーバ４のデータベースの登録内容を示す説明図 顔認証ゲート１におけるイベント会場入場時の動作手順を示すフロー図 第１のディスプレイ１３に表示される入場許可画面および入場不許可画面の一例を示す説明図 第３のディスプレイ１５に表示されるサイネージ画面の一例を示す説明図 第２のディスプレイ１７に表示される係員確認画面の一例を示す説明図 第２実施形態に係る顔認証システムの全体構成図

前記課題を解決するためになされた第１の発明は、入場者に対して顔認証を行い、その結果に応じて入場者に入場を許可する顔認証ゲートであって、カメラと、プロセッサと、メモリと、ディスプレイと、タワー型の筐体とを備え、前記カメラは、前記筐体の上部に設けられて、入場者の顔を正面から撮影可能なように撮影範囲が設定され、前記プロセッサは、設定者の操作入力に基づいて、顔認証の成功回数に関する第１の判定基準値および前記顔認証の失敗回数に関する第２の判定基準値を設定し、前記カメラにより順次撮影された撮影画像から抽出した入場者の顔画像と、予め前記メモリに記憶された入場許可者の顔画像とを照合する顔認証を繰り返して、前記成功回数および前記失敗回数を取得し、前記成功回数が前記第１の判定基準値以上となる場合に、入場を許可する入場許可判定と、前記失敗回数が前記第２の判定基準値以上となる場合に、入場を許可しない入場不許可判定と、を行い、これらの判定結果に基づいて、入場許可画面あるいは入場不許可画面を前記ディスプレイに表示する構成とする。

これによると、顔認証ゲートが、入場者を撮影して顔認証を繰り返して、顔認証の成功回数および失敗回数に基づいて入場者の入場の可否を判定し、入場許可画面あるいは入場不許可画面をディスプレイに表示して入場者に通知する。このため、係員は、顔認証が失敗して顔認証ゲートが入場を許可しない場合にだけ対応すればよい。これにより、係員を増やすことなく、高いスループットで入場者を処理して、入場者の滞留を生じにくくすることができる。特に、顔認証の成功回数に関する第１の判定基準値および前記顔認証の失敗回数に関する第２の判定基準値の設定により、イベントの内容に応じて入場許可判定および入場不許可判定の厳しさを調整することができ、イベント主催者の判断で、スループットを優先したりセキュリティを優先したりすることができる。

また、第２の発明は、さらに、複数のカメラを備え、これら複数のカメラは、想定される入場者の身長に対応して上下方向に離間して設けられた構成とする。

これによると、入場者の身長が大きく異なる場合でも、入場者の顔を概ね正面から撮影した顔画像を取得することができる。

また、第３の発明は、前記複数のカメラのうち少なくとも１つは、入場者の属性情報の取得に用いられる構成とする。

これによると、入場者の属性情報を取得することができる。

また、第４の発明は、さらに、複数のディスプレイを備え、これら複数のディスプレイのうち少なくとも１つは、前記入場許可画面あるいは前記入場不許可画面を表示する構成とする。

これによると、顔認証に基づく入場可否判定の判定結果を入場者が確認することができる。

また、第５の発明は、さらに、複数のディスプレイを備え、これら複数のディスプレイのうち少なくとも１つは、入場者の前記属性情報に基づくサイネージコンテンツを表示する構成とする。

これによると、入場者が自分に合ったサイネージコンテンツを閲覧することができる。

また、第６の発明は、さらに、複数のディスプレイを備え、これら複数のディスプレイのうち少なくとも１つは、前記筐体の背面に設けられ、少なくとも前記判定結果に関する確認画面を表示する構成とする。

これによると、顔認証に基づく入場可否判定の判定結果を係員が迅速に確認することができる。

また、第７の発明は、前記プロセッサは、設定者の操作入力に基づいて、前記第１の判定基準値を前記第２の判定基準値より小さく設定する構成とする。

これによると、入場許可判定の判定基準を緩くすることで、スループットを向上させて、入場者の滞留を抑制することができる。

また、第８の発明は、前記プロセッサは、設定者の操作入力に基づいて、前記第１の判定基準値を前記第２の判定基準値より大きく設定する構成とする。

これによると、入場許可判定の判定基準を厳しくすることで、セキュリティを向上させることができる。

また、第９の発明は、入場者に対して顔認証を行い、その結果に応じて入場者に入場を許可する顔認証システムであって、顔認証ゲートと、この顔認証ゲートにネットワークを介して接続される顔認証サーバとを備え、前記顔認証ゲートは、カメラと、プロセッサと、ディスプレイと、通信部と、タワー型の筐体とを備え、前記カメラは、前記筐体の上部に設けられて、入場者の顔を正面から撮影可能なように撮影範囲が設定され、前記通信部は、前記カメラにより順次撮影された撮影画像、または前記プロセッサにより前記撮影画像から抽出した入場者の顔画像を、前記顔認証サーバへ送信し、前記顔認証サーバは、設定者の操作入力に基づいて、顔認証の成功回数に関する第１の判定基準値および前記顔認証の失敗回数に関する第２の判定基準値を設定し、前記顔認証ゲートから受信した前記撮影画像から抽出した入場者の顔画像、または前記顔認証ゲートから受信した前記入場者の顔画像と、予め登録された入場許可者の顔画像とを照合する顔認証を繰り返して、前記成功回数および前記失敗回数を取得し、前記成功回数が前記第１の判定基準値以上となる場合に、入場を許可する入場許可判定と、前記失敗回数が前記第２の判定基準値以上となる場合に、入場を許可しない入場不許可判定と、を行い、これらの判定結果を前記顔認証ゲートに送信し、前記顔認証ゲートの前記プロセッサは、前記顔認証サーバから受信した前記判定結果に基づいて、入場許可画面あるいは入場不許可画面を前記ディスプレイに表示する構成とする。

これによると、第１の発明と同様に、係員を増やすことなく、高いスループットで入場者を処理して、入場者の滞留を生じにくくすることができる。特に、顔認証の成功回数に関する第１の判定基準値および前記顔認証の失敗回数に関する第２の判定基準値の設定により、イベントの内容に応じて入場許可判定および入場不許可判定の厳しさを調整することができ、イベント主催者の判断で、スループットを優先したりセキュリティを優先したりすることができる。

以下、本発明の実施の形態を、図面を参照しながら説明する。

（第１実施形態）
図１は、第１実施形態に係る顔認証システムの全体構成図である。

この顔認証システムは、顔認証ゲート１と、ユーザ端末２と、管理サーバ３と、ＤＢサーバ４と、を備えている。顔認証ゲート１、ユーザ端末２、管理サーバ３、およびＤＢサーバ４はネットワーク（インターネットなど）に接続されている。

顔認証ゲート１は、コンサートなどのイベントが開催される会場の入場口に設置され、入場者に対して顔認証を行い、その結果に応じて入場者の入場（通過）を許可するか否かを入場者に通知する案内画面を出力する。この顔認証ゲート１は、ネットワークを介してＤＢサーバ４からチケット購入者（入場許可者）の情報（顔画像、属性情報など）を受信し、チケット購入者の顔画像に基づいて顔認証を行う。

ユーザ端末２は、スマートフォン、タブレット端末、ＰＣなどであり、イベントのチケットを購入する人物（申込者）が操作する。このユーザ端末２では、申込者が、自分の属性情報（氏名、年齢、性別など）などを入力し、また、自分の顔を撮影して、その申込者の顔画像および属性情報などが、ネットワークを介して管理サーバ３にアップロードされる。

管理サーバ３は、会場の入場に必要なチケットを販売するサイトを公開して、申込者のチケット購入の申し込みを受け付けて、チケットを発行する。このとき、管理サーバ３は、申込者の情報（顔画像、属性情報など）を、ネットワークを介してユーザ端末２から受信し、チケットを発行した場合には、申込者の情報（顔画像、属性情報など）や、発行したチケットの情報などを、チケット購入者の情報として、ネットワークを介してＤＢサーバ４に送信する。

ＤＢサーバ４は、チケット購入者の情報（顔画像、属性情報など）を管理するデータベースを備えている。ＤＢサーバ４は、ネットワークを介して管理サーバ３からチケット購入者の情報を受信して、その情報をデータベースに登録する。

次に、顔認証ゲート１について説明する。図２は、顔認証ゲート１の外観を示す斜視図であり、図２（Ａ）に正面側を示し、図２（Ｂ）に背面側を示す。

図２（Ａ）に示すように、顔認証ゲート１は、タワー型の筐体１１を備えており、その正面側に、第１のカメラ１２と、第１のディスプレイ１３と、第２のカメラ１４と、第３のディスプレイ１５と、スピーカー１６と、が設けられている。また、筐体１１の正面側は全体的にハーフミラーパネル１８で覆われている。また、図２（Ｂ）に示すように、筐体１１の背面側に、第２のディスプレイ１７が設けられている。

この顔認証ゲート１は、仮設型（可搬型）であり、会場の入場口のフロアに必要な期間だけ臨時的に設置することができる。この顔認証ゲート１は、例えばライブハウスのような小規模な会場に適しており、筐体１１がタワー型であるため、設置に大きなスペースを必要とせず、また、入場者の顔を正面から撮影可能なように顔認証ゲートが人間の身長に近い高さとなるため、仮設タイプの顔認証ゲートとして、設置の自由度が高く、かつ、入場者に入場受付の位置を案内するシンボルとして機能させることができる。

第１，第２のカメラ１２，１４は、筐体１１の上部に設けられて、入場者の顔を正面から撮影可能なように撮影範囲が設定されている。この第１のカメラ１２と第２のカメラ１４とは、上下方向に所定の間隔をおいて配置されている。これにより、入場者の身長が大きく異なる場合でも、第１，第２のカメラ１２，１４のいずれかで入場者の顔を概ね正面から撮影することができる。なお、カメラを３台以上設けるようにしてもよい。これにより、入場者が子供である場合でも、入場者の顔を概ね正面から撮影することができる。

第１のディスプレイ１３は、顔認証に基づく入場可否判定の判定結果、すなわち、入場を許可するか否かを入場者に通知する案内画面（図７参照）を表示する。

第２のディスプレイ１７は、顔認証ゲート１の処理状況を係員が確認する画面（図９参照）を表示する。係員は顔認証ゲート１の後方で待機するため、背面側に設けられた第２のディスプレイ１７により、入場者に迅速に対応することができる。

スピーカー１６は、顔認証に基づく入場可否判定の判定結果、すなわち、入場を許可するか否かを入場者に通知する音声（効果音）を出力する。

第３のディスプレイ１５は、入場者に各種の情報を提供する画面（図８参照）を表示する。これにより、顔認証ゲート１を認証機能のほか、デジタルサイネージとしても機能させることができる。

次に、顔認証ゲート１の概略構成について説明する。図３は、顔認証ゲート１の概略構成を示すブロック図である。

顔認証ゲート１は、第１，第２のＰＣ２１，２２と、第１，第２の入力操作部２３，２４と、を備えている。

第１，第２のカメラ１２，１４は、第１，第２のＰＣ２１，２２に接続されている。第１，第２のディスプレイ１３，１７は、第１のＰＣ２１に接続されている。第１の入力操作部２３は、第１のＰＣ２１に接続されている。第２の入力操作部２４は、第２のＰＣ２２に接続されている。第３のディスプレイ１５は、第２のＰＣ２２に接続されている。

第１，第２の入力操作部２３，２４は、キーボードやマウスやタッチパネルなどの入力デバイスで構成される。

また、顔認証ゲート１は、第４のディスプレイ２６を備えている。この第４のディスプレイ２６は、第２のＰＣ２２に接続される。なお、第４のディスプレイ２６は、外付け、すなわち、顔認証ゲート１の筐体１１に収容されておらず、使用時（第２のＰＣ２２の設定時）に、第２のＰＣ２２の外部接続端子に接続して使用する。なお、第４のディスプレイ２６を設けずに、第１のＰＣ２１と第２のＰＣ２２との間で第２のディスプレイ１７を切り替えて所要の画面を表示するようにしてもよい。

第１のＰＣ２１は、プロセッサ３１と、メモリ３２と、通信部３３と、を備えている。この第１のＰＣ２１は、タブレット端末で構成するようにしてもよい。

通信部３３は、ネットワークを介してＤＢサーバ４と通信を行う。本実施形態では、ＤＢサーバ４から送信されるチケット購入者の登録情報（顔画像、属性情報など）を受信する。

メモリ３２は、ＤＢサーバ４から取得したチケット購入者の登録情報（顔画像、属性情報など）や、プロセッサ３１で実行されるプログラムなどを記憶する。

なお、チケット購入者の登録情報は、事前（例えばイベントの前日など）に、ＤＢサーバ４からダウンロードしてメモリ３２に格納される。このとき、顔認証ゲート１が設置される会場のイベントに関するチケット購入者の登録情報がＤＢサーバ４からダウンロードされるが、大規模な会場では、座席に応じて入場口が異なる場合があり、この場合、顔認証ゲート１が設置される入場口に対応する座席のチケット購入者の登録情報のみを、ＤＢサーバ４からダウンロードするようにしてもよい。

プロセッサ３１は、メモリ３２に記憶されたプログラムを実行することで所定の処理を行う。本実施形態では、顔検出、ベストショット選定、顔認証、入場可否判定、表示制御、および音声制御の各処理を行う。

顔検出の処理では、第１，第２のカメラ１２，１４から出力される撮影画像から入場者の顔を検出して、撮影画像から入場者の顔画像を切り出す。

ベストショット選定の処理では、顔検出により第１，第２のカメラ１２，１４の撮影画像からそれぞれ抽出した入場者の顔画像のうち、最適な顔画像（ベストショット）を選定する。具体的には、顔画像から顔の向きを検出して、入場者の顔が概ね正面から撮影されている場合に、最適な顔画像と判定する。なお、入場者の顔画像が２つとも不適切な場合は、顔認証を行わないようにしたり、顔認証の結果を採用しないようにしたりすればよい。

顔認証の処理では、ベストショット選定でベストショットと判定された入場者の顔画像に基づいて、入場者の顔認証を行う。具体的には、メモリ３２に格納されたチケット購入者の顔画像と、入場者の顔画像とを照合して、両者が一致する、すなわち、入場者がチケット購入者である場合に、顔認証が成功したものと判定する。なお、顔画像の照合は、顔画像から抽出した特徴情報に基づいて行えばよい。

入場可否判定の処理では、顔認証が成功した場合に、顔認証の成功回数（顔認証が連続して成功した回数）が所定のしきい値以上となるか否かに関する入場許可判定を行い、顔認証の成功回数がしきい値以上の場合に、入場を許可するものと判定する。また、顔認証が失敗した場合に、顔認証の失敗回数（顔認証が連続して失敗した回数）が所定のしきい値以上となるか否かに関する入場不許可判定を行い、顔認証の失敗回数がしきい値以上の場合に、入場を許可しないものと判定する。

表示制御の処理では、第１，第２のディスプレイ１３，１７に表示する画面を制御する。本実施形態では、第１のディスプレイ１３に、顔認証に基づく入場可否判定の判定結果を表示する。具体的には、入場許可画面（図７（Ａ）参照）または入場不許可画面（図７（Ｂ）参照）を表示する。また、第２のディスプレイ１７に、顔認証ゲート１の処理状況を係員が確認するための係員確認画面（図９参照）を表示する。

音声制御の処理では、スピーカー１６から出力する音声を制御する。本実施形態では、顔認証に基づく入場可否判定の判定結果に応じた効果音をスピーカー１６から出力する。なお、コンサートの場合に、出演するアーティストの音楽をバックグラウンドで再生するようにしてもよい。

なお、本実施形態では、顔認証の前にベストショット選定を行うようにしたが、ベストショット選定を行わずに、第１，第２のカメラ１２，１４の各撮影画像からそれぞれ抽出した２つの顔画像で顔認証を行い、スコアの高い方を認証結果として採用するようにしてもよい。

第２のＰＣ２２は、プロセッサ３５と、メモリ３６と、を備えている。この第２のＰＣ２２は、タブレット端末で構成するようにしてもよい。

メモリ３６は、サイネージ用のコンテンツのデータや、プロセッサ３５で実行されるプログラムなどを記憶する。なお、コンテンツは別のＰＣで作成され、適宜な記憶媒体を用いてコンテンツのデータを第２のＰＣ２２に転送すればよい。また、第２のＰＣ２２に通信部を設けて、コンテンツを管理するサーバからコンテンツのデータをダウンロードするようにしてもよい。

プロセッサ３５は、メモリ３６に記憶されたプログラムを実行することで所定の処理を行う。本実施形態では、属性推定、および表示制御の各処理を行う。

属性推定の処理では、第１，第２のカメラ１２，１４の撮影画像を取得して、その撮影画像に対する画像認識により、入場者の属性（年齢、性別など）を推定する。

表示制御の処理では、第３，第４のディスプレイ１５，２６に表示する画面を制御する。本実施形態では、第３のディスプレイ１５に、入場者に各種の情報を提供するサイネージ画面（図８参照）を表示する。このとき、属性推定で取得した入場者の属性に基づいてコンテンツを選択し、入場者の属性に対応した画面を表示する。また、第４のディスプレイ２６に、第２のＰＣ２２の設定に関する画面を表示する。

なお、本実施形態では、顔認証の処理を円滑に行うため、顔認証専用の第１のＰＣ２１を設けるようにしたが、第１のＰＣ２１の機能と第２のＰＣ２２の機能とを単一のＰＣで実現するようにしてもよい。また、第２のＰＣ２２、第３，第４のディスプレイ１５，２６、および第２の入力操作部２４を省略する、すなわち、顔認証ゲート１のデジタルサイネージとしての機能を省略するようにしてもよい。

また、本実施形態では、入場者が閲覧するディスプレイとして、顔認証用の第１のディスプレイ１３と、サイネージ用の第３のディスプレイ１５とを設けたが、顔認証用の画面とサイネージ用の画面とを画面分割により１つのディスプレイに表示するようにしてもよい。

また、本実施形態では、第２のＰＣ２２で属性推定を行うようにしており、これにより、顔認証ゲート１の前にいる人物が、正規の入場者、すなわち、チケット購入者であるか否かに関係なく、その人物の属性に対応したコンテンツを表示することができるが、第１のＰＣ２１で行われる顔認証と連動して、入場者の属性に対応したコンテンツを表示するようにしてもよい。すなわち、第１のＰＣ２１で顔認証が成功すると、入場者（チケット購入者）の属性情報を第１のＰＣ２１から取得して、入場者の属性に対応したコンテンツを表示するようにしてもよい。

次に、本システムにおけるチケット購入時の動作手順について説明する。図４は、チケット購入時の動作手順を示すフロー図である。

ユーザ端末２では、まず、チケット購入申込画面を表示する（ＳＴ１０１）。このチケット購入申込画面は、ユーザ端末２が管理サーバ３にアクセスすることで管理サーバ３からユーザ端末２に配信される。このチケット購入申込画面では、申込者がユーザ端末２を操作して、申込者の属性情報（氏名、生年月日（年齢）、性別など）などを入力する。

次に、ユーザ端末２では、申込者に自分の顔を撮影するように催促するメッセージを画面表示し、これに応じて申込者が撮影の操作を行うことで、申込者の顔を撮影する（ＳＴ１０２）。

次に、ユーザ端末２では、申込者が送信の操作を行うことで、申込者の顔画像および属性情報を管理サーバ３に送信する（ＳＴ１０３）。

次に、ユーザ端末２では、管理サーバ３からエラー通知を受信すると（ＳＴ１０４でＹｅｓ）、ＳＴ１０２に戻る。このとき、エラー通知の内容、すなわち、顔画像が適切に撮影されていないため、申込者に自分の顔を再度撮影するように催促するメッセージを画面表示し、これに応じて申込者が自分の顔を撮影しなおす。

次に、ユーザ端末２では、管理サーバ３からチケット発行通知を受信すると、チケット購入完了画面を表示する（ＳＴ１０５）。

管理サーバ３では、申込者の顔画像および属性情報をユーザ端末２から受信すると（ＳＴ２０１）、顔画像の画像解析を行い（ＳＴ２０２）、顔画像が適切に撮影されているか否かを判定する（ＳＴ２０３）。

ここで、顔画像が適切に撮影されていない場合には（ＳＴ２０３でＮｏ）、エラー通知をユーザ端末２に送信する（ＳＴ２０４）。

一方、顔画像が適切に撮影されている場合には（ＳＴ２０３でＹｅｓ）、チケット購入申込を受け付けてチケットを発行し、チケット発行通知をユーザ端末２に送信する（ＳＴ２０５）。また、チケット購入者の情報、すなわち、顔画像、属性情報、発行したチケットの情報などをＤＢサーバ４に送信する（ＳＴ２０６）。

ＤＢサーバ４では、チケット購入者の情報を管理サーバ３から受信すると（ＳＴ３０１）、そのチケット購入者の情報をデータベースに登録する（ＳＴ３０２）。

なお、顔画像が適切に撮影されているか否かを判定するための画像解析（ＳＴ２０２）において、顔画像が不適切である原因を特定して、その顔画像が不適切である原因をエラー通知に付加してユーザ端末２に送信して、顔画像が不適切である原因をユーザ端末２に表示するようにしてもよい。これにより、顔画像が不適切である原因を申込者が把握することができる。なお、顔画像が不適切である原因は、例えば、マスクや頭髪で顔が隠れている場合や、顔が正面から撮影されていない場合や、顔の表情が笑顔である場合などである。

また、本実施形態では、チケット購入時に顔画像を登録するようにしたが、この顔画像の登録は、会員登録時などのチケット購入時とは異なる時点で行うようにしてもよい。

次に、ＤＢサーバ４のデータベースについて説明する。図５は、ＤＢサーバ４のデータベースの登録内容を示す説明図である。

ＤＢサーバ４のデータベースには、チケット購入者の顔画像、属性情報、発行したチケットの情報などが登録される。具体的には、チケットＩＤ、氏名、座席番号、入場ゲート、購入日時、生年月日、性別、電話番号、顔情報（顔画像のファイル）の各情報が登録される。

次に、顔認証ゲート１におけるイベント会場入場時の動作手順について説明する。図６は、顔認証ゲート１におけるイベント会場入場時の動作手順を示すフロー図である。なお、顔認証ゲート１では、事前（例えばイベントの前日）にチケット購入者の情報（顔画像、属性情報など）をＤＢサーバ４からダウンロードされているものとする。

顔認証ゲート１では、第１のＰＣ２１のプロセッサ３１において、まず、第１，第２のカメラ１２，１４から出力される撮影画像を取得する（ＳＴ４０１）。なお、第１，第２のカメラ１２，１４では、稼働中は撮影エリアを常時撮影し、各時刻の撮影画像（フレーム）が順次出力される。

次に、カメラ１２，１４の撮影画像に対する顔検出を行い（ＳＴ４０２）、撮影画像から人物の顔を検出したか否かを判定する（ＳＴ４０３）。ここで、人物の顔を検出しない場合には（ＳＴ４０３でＮｏ）、ＳＴ４０１に戻り、次の時刻の撮影画像の処理に進む。

一方、人物の顔を検出した場合には（ＳＴ４０３でＹｅｓ）、次に、顔認証を行い（ＳＴ４０４）、顔認証が成功したか否かを判定する（ＳＴ４０５）。

ここで、顔認証が成功した場合には（ＳＴ４０５でＹｅｓ）、次に、顔認証の成功回数（顔認証が連続して成功した回数）が所定のしきい値以上となるか否かに関する入場許可判定を行う（ＳＴ４０６）。ここで、顔認証の成功回数がしきい値未満の場合には（ＳＴ４０６でＮｏ）、顔認証の成功回数を１回増やして（ＳＴ４０７）、ＳＴ４０１に戻り、次の時刻の撮影画像の処理に進む。

一方、顔認証の成功回数がしきい値以上の場合には（ＳＴ４０６でＹｅｓ）、入場を許可する旨を入場者に通知する入場許可画面（図７（Ａ）参照）を第１のディスプレイ１３に表示する（ＳＴ４０８）。

また、顔認証が失敗した場合には（ＳＴ４０５でＮｏ）、次に、顔認証の失敗回数（顔認証が連続して失敗した回数）が所定のしきい値以上となるか否かに関する入場不許可判定を行う（ＳＴ４０９）。ここで、顔認証の失敗回数がしきい値未満の場合には（ＳＴ４０９でＮｏ）、顔認証の失敗回数を１回増やして（ＳＴ４１０）、ＳＴ４０１に戻り、次の時刻の撮影画像の処理に進む。

一方、顔認証の失敗回数がしきい値以上の場合には（ＳＴ４０９でＹｅｓ）、入場を許可しない旨を入場者に通知する入場不許可画面（図７（Ｂ）参照）を第１のディスプレイ１３に表示する（ＳＴ４１１）。

ここで、本実施形態では、初期状態として、入場許可判定のしきい値が入場不許可判定のしきい値より小さく設定されている。すなわち、入場許可判定の判定基準を緩くして、入場不許可判定の判定基準を厳しくしている。これにより、スループット（時間あたりの処理人数）を向上させて、入場者の滞留を抑制することができる。

また、本実施形態では、メモリ３２に格納されたユーティリティプログラムの実行により、顔認証判定の設定画面を表示させ、入場許可判定のしきい値（回数）および入場不許可判定のしきい値（回数）が、設定者の操作入力に応じて変更することができる。これにより、イベントの内容に応じて入場許可判定および入場不許可判定の厳しさを調整することができ、イベント主催者の判断で、スループットを優先したりセキュリティを優先したりすることができる。

すなわち、スループットを優先する場合、入場許可判定のしきい値を小さく設定すればよく、これにより、入場許可の判定結果が出やすくなる。また、入場不許可判定のしきい値を大きく設定すればよく、これにより、入場不許可の判定結果が出にくくなる。このため、スループットを向上させることができる。

一方、セキュリティを優先する場合、入場許可判定のしきい値を大きく設定すればよく、これにより、入場許可の判定結果が出にくくなる。また、入場不許可判定のしきい値を小さく設定すればよく、これにより、入場不許可の判定結果が出やすくなる。このため、セキュリティを向上させることができ、ＶＩＰ向けのイベント等の設定として有効である。

次に、第１のディスプレイ１３に表示される画面について説明する。図７は、第１のディスプレイ１３に表示される入場許可画面および入場不許可画面の一例を示す説明図である。

第１のディスプレイ１３には、顔認証に基づく入場可否判定の判定結果に応じて、図７（Ａ）に示す入場許可画面、または図７（Ｂ）に示す入場不許可画面が表示される。

図７（Ａ）に示す入場許可画面では、入場を許可する旨のメッセージが表示される。また、図７（Ａ）に示す例では、入場者（チケット購入者）の氏名や座席の情報が表示される。

図７（Ｂ）に示す入場不許可画面では、入場を許可しない旨のメッセージ、具体的には、入場せずにその場に待機するように指示するメッセージが表示される。

なお、本実施形態では、第１のディスプレイ１３に表示される画面（入場許可画面および入場不許可画面）に、入場を許可するか否かを表す文字を表示するようにしたが、○、×、矢印などの記号を、文字の代わりに、あるいは文字とともに表示するようにしてもよい。

また、第１のディスプレイ１３に表示される画面（入場許可画面および入場不許可画面）は、イベントに応じて変更するようにするとよい。この場合、画面編集作業と、その画面編集作業に応じた画面生成処理が必要になるが、この画面編集作業および画面生成処理は、顔認証ゲート１、特に、第１のＰＣ２１のメモリ３２に格納されたユーティリティプログラムを実行し、第２のディスプレイ１７、第１の入力操作部２３を用いて行うことができる。また、その他のＰＣやタブレット端末などを用いて画面編集作業および画面生成処理を行うようにしてもよい。この場合、生成した画面情報を、管理サーバ３などのサーバ経由で、または適宜な記憶媒体で、顔認証ゲート１内部のメモリ３２などに転送すればよい。

また、第１のディスプレイ１３に表示される画面の他に、スピーカー１６から出力する音声もＰＣ２１のメモリ３２に格納されたユーティリティプログラムを実行して、イベントに応じて変更することができる。

次に、第３のディスプレイ１５に表示される画面について説明する。図８は、第３のディスプレイ１５に表示されるサイネージ画面の一例を示す説明図である。

第３のディスプレイ１５には、入場者に各種の情報を提供する画面（サイネージ画面）が表示される。このとき、入場者の属性に基づいてコンテンツが選択され、入場者の属性に対応したコンテンツが画面表示される。図８に示す例では、会場内での飲料を入場者に案内するコンテンツを表示するようしており、図８（Ａ），（Ｂ）に示すように、入場者の年齢に応じて飲料の種類が異なるコンテンツが表示される。なお、入場時にカメラで撮影した顔認証用の撮像画像から入場者の属性を取得し、その入場時に取得した属性で異なるコンテンツが表示されるようにしてもよい。

なお、サイネージ画面に、次回のイベントなどを入場者に案内するコンテンツを表示するようにしてもよい。

次に、第２のディスプレイ１７に表示される画面について説明する。図９は、第２のディスプレイ１７に表示される係員確認画面の一例を示す説明図である。

第２のディスプレイ１７には、顔認証ゲート１の処理状況を係員が確認する画面（係員確認画面）が表示される。この画面には、撮影画像表示部４１と、判定結果表示部４２と、認証画像表示部４３と、入場者情報表示部４４と、が設けられている。

撮影画像表示部４１には、第１のカメラ１２の撮影画像５１と、第２のカメラ１４の撮影画像５２とが表示される。これにより、第１，第２のカメラ１２，１４の撮影状況を係員が確認することができる。

判定結果表示部４２には、入場可否判定の判定結果（入場許可、入場不許可）が表示される。これにより、入場可否判定の判定状況を係員が確認することができる。

認証画像表示部４３には、顔認証で用いられた顔画像、すなわち、撮影画像から抽出された入場者の顔画像５５と、予め登録されたチケット購入者の顔画像５６とが表示される。これにより、顔認証の処理状況を係員が確認することができる。

入場者情報表示部４４には、顔認証が成功した場合に、入場者（チケット購入者）の情報が表示される。ここでは、チケットＩＤ、氏名、座席番号、入場ゲート、生年月日、性別の各情報が表示される。これにより、入場者の情報を係員が確認することができる。

（第２実施形態）
次に、第２実施形態について説明する。なお、ここで特に言及しない点は前記の実施形態と同様である。図１０は、第２実施形態に係る顔認証システムの全体構成図である。

第１実施形態では、顔認証ゲート１で顔認証の処理を行うようにしたが、本実施形態では、顔認証の処理を行う顔認証サーバ５が設けられており、この顔認証サーバ５がネットワークを介して顔認証ゲート１に接続されている。

顔認証サーバ５では、事前（例えばイベントの前日）にチケット購入者の顔画像をＤＢサーバ４から取得する。顔認証ゲート１では、イベント当日に入場者を撮影して、入場者の顔画像を顔認証サーバ５に送信する。顔認証サーバ５では、顔認証ゲート１から取得した入場者の顔画像とチケット購入者の顔画像とを照合する顔認証を行い、その認証結果に基づいて入場可否判定を行い、その判定結果を顔認証ゲート１に送信する。顔認証ゲート１では、顔認証サーバ５から取得した判定結果に応じて、入場を許可するか否かを入場者に通知する画面（図７参照）を表示する。

なお、顔認証ゲート１では、第１実施形態と同様に、第１，第２のカメラ１２，１４で入場者を撮影し、第１のＰＣ２１のプロセッサ３１で、顔検出により、撮影画像から入場者の顔画像を抽出して、その入場者の顔画像を顔認証サーバ５に送信すればよいが、顔認証ゲート１で顔検出を行わずに、撮影画像をそのまま顔認証サーバ５に送信して、顔認証サーバ５において、顔検出により、撮影画像から入場者の顔画像を抽出するようにしてもよい。

また、本実施形態では、顔認証とともに入場可否判定を顔認証サーバ５で行うようにしたが、入場可否判定を顔認証ゲート１で行うようにしてもよい。

また、本実施形態では、入場者の顔画像を顔認証ゲート１から顔認証サーバ５に送信するようにしており、この入場者の顔画像は、画像データそのものでもよいが、顔画像の画像データから抽出した特徴情報でもよい。この場合、顔認証サーバ５の処理負荷が増大するが、通信負荷を軽減することができる。

以上のように、本出願において開示する技術の例示として、実施形態を説明した。しかしながら、本開示における技術は、これに限定されず、変更、置き換え、付加、省略などを行った実施形態にも適用できる。また、上記の実施形態で説明した各構成要素を組み合わせて、新たな実施形態とすることも可能である。

本発明に係る顔認証ゲートおよび顔認証システムは、係員を増やすことなく、高いスループットで入場者を処理して、入場者の滞留を生じにくくすることができ、さらに、仮設タイプの顔認証ゲートとして、設置の自由度が高く、かつ、入場者に入場受付の位置を案内するシンボルとして機能させることができる効果を有し、入場者に対して顔認証を行い、その結果に応じて入場者に入場を許可する顔認証ゲートおよび顔認証システムなどとして有用である。

１ 顔認証ゲート
２ ユーザ端末
３ 管理サーバ
４ サーバ
５ 顔認証サーバ
１１ 筐体
１２ 第１のカメラ
１３ 第１のディスプレイ
１４ 第２のカメラ
１５ 第３のディスプレイ
１６ スピーカー
１７ 第２のディスプレイ
２３ 第１の入力操作部
２４ 第２の入力操作部
２６ 第４のディスプレイ
３１ プロセッサ
３２ メモリ
３３ 通信部
３５ プロセッサ
３６ メモリ

Claims (9)

1. 入場者に対して顔認証を行い、その結果に応じて入場者に入場を許可する顔認証ゲートであって、
   カメラと、プロセッサと、メモリと、ディスプレイと、タワー型の筐体とを備え、
   前記カメラは、
   前記筐体の上部に設けられて、入場者の顔を正面から撮影可能なように撮影範囲が設定され、
   前記プロセッサは、
   設定者の操作入力に基づいて、顔認証の成功回数に関する第１の判定基準値および前記顔認証の失敗回数に関する第２の判定基準値を設定し、
   前記カメラにより順次撮影された撮影画像から抽出した入場者の顔画像と、予め前記メモリに記憶された入場許可者の顔画像とを照合する顔認証を繰り返して、前記成功回数および前記失敗回数を取得し、
   前記成功回数が前記第１の判定基準値以上となる場合に、入場を許可する入場許可判定と、前記失敗回数が前記第２の判定基準値以上となる場合に、入場を許可しない入場不許可判定と、を行い、
   これらの判定結果に基づいて、入場許可画面あるいは入場不許可画面を前記ディスプレイに表示することを特徴とする顔認証ゲート。
2. さらに、複数のカメラを備え、
   これら複数のカメラは、想定される入場者の身長に対応して上下方向に離間して設けられたことを特徴とする請求項１に記載の顔認証ゲート。
3. 前記複数のカメラのうち少なくとも１つは、入場者の属性情報の取得に用いられることを特徴とする請求項２に記載の顔認証ゲート。
4. さらに、複数のディスプレイを備え、
   これら複数のディスプレイのうち少なくとも１つは、前記入場許可画面あるいは前記入場不許可画面を表示することを特徴とする請求項１に記載の顔認証ゲート。
5. さらに、複数のディスプレイを備え、
   これら複数のディスプレイのうち少なくとも１つは、入場者の前記属性情報に基づくサイネージコンテンツを表示することを特徴とする請求項３に記載の顔認証ゲート。
6. さらに、複数のディスプレイを備え、
   これら複数のディスプレイのうち少なくとも１つは、前記筐体の背面に設けられ、少なくとも前記判定結果に関する確認画面を表示することを特徴とする請求項１に記載の顔認証ゲート。
7. 前記プロセッサは、
   設定者の操作入力に基づいて、
   前記第１の判定基準値を前記第２の判定基準値より小さく設定することを特徴とする請求項１に記載の顔認証ゲート。
8. 前記プロセッサは、
   設定者の操作入力に基づいて、
   前記第１の判定基準値を前記第２の判定基準値より大きく設定することを特徴とする請求項１に記載の顔認証ゲート。
9. 入場者に対して顔認証を行い、その結果に応じて入場者に入場を許可する顔認証システムであって、
   顔認証ゲートと、この顔認証ゲートにネットワークを介して接続される顔認証サーバとを備え、
   前記顔認証ゲートは、
   カメラと、プロセッサと、ディスプレイと、通信部と、タワー型の筐体とを備え、
   前記カメラは、
   前記筐体の上部に設けられて、入場者の顔を正面から撮影可能なように撮影範囲が設定され、
   前記通信部は、
   前記カメラにより順次撮影された撮影画像、または前記プロセッサにより前記撮影画像から抽出した入場者の顔画像を、前記顔認証サーバへ送信し、
   前記顔認証サーバは、
   設定者の操作入力に基づいて、顔認証の成功回数に関する第１の判定基準値および前記顔認証の失敗回数に関する第２の判定基準値を設定し、
   前記顔認証ゲートから受信した前記撮影画像から抽出した入場者の顔画像、または前記顔認証ゲートから受信した前記入場者の顔画像と、予め登録された入場許可者の顔画像とを照合する顔認証を繰り返して、前記成功回数および前記失敗回数を取得し、
   前記成功回数が前記第１の判定基準値以上となる場合に、入場を許可する入場許可判定と、前記失敗回数が前記第２の判定基準値以上となる場合に、入場を許可しない入場不許可判定と、を行い、これらの判定結果を前記顔認証ゲートに送信し、
   前記顔認証ゲートの前記プロセッサは、
   前記顔認証サーバから受信した前記判定結果に基づいて、入場許可画面あるいは入場不許可画面を前記ディスプレイに表示することを特徴とする顔認証システム。

Images