JP7256082B2 - 監視システム、プログラム、およびリスト作成方法 - Google Patents

Description

本開示は、要注意人物を検出する監視システム、プログラム、およびリスト生成方法に関する。

施設に訪れる多くの人物のうち、ある特定の人物を監視したい、という要望がある。例えば、店舗（スーパーマーケット、コンビニエンスストア等の小売店舗等）の場合、過去に万引きを行った疑いのある人物が再来店したとき、その人物を監視したい、という要望がある。

万引き被害への対策としては、例えば、カメラで要注意人物の顔画像を撮影し、要注意人物が来店した場合に、各スタッフに対して報知を行うというものがある。例えば特許文献１には、要注意人物が来店した場合に、各店員に、要注意人物が来店したことをリアルタイムで知らせることができると共に、各店員に、要注意人物の画像（来店してきたときの画像）を提供する技術が開示されている。

特開２０１５－１３０１５５号公報

ある人物を監視対象にするか否かの判断は、一般的には、施設のスタッフが行う。例えば、スタッフは、万引きが疑われる行為を行った人物を発見した場合、その人物を監視対象と判断する。

このような事情に鑑み、施設のスタッフが、監視対象にすべきと判断した人物を、容易に監視対象のリストに登録できる技術が要望されている。なお、特許文献１には、要注意人物をデータベースへの登録する方法について開示されていない。

本開示の目的は、施設のスタッフが、施設に訪れる人の中から監視対象と判断した人物
を容易にリスト登録できる監視システム、プログラム、およびリスト生成方法を提供することである。

本開示の監視システムは、監視カメラから送信された顔画像データと、リストに登録された登録顔画像データとを照合し、照合結果に基づいて警告を出力する監視システムであって、施設ごとに設置される情報処理装置と、前記情報処理装置と通信可能に接続されるセンターサーバと、を備え、前記情報処理装置は、前記施設ごとに設置された前記監視カメラから、前記施設に訪れた人物の顔画像データを受信し、前記施設に関連付けられた端末装置に送信し、送信した顔画像データの画像を表示した前記端末装置において選択された画像に対応する顔画像データを前記登録顔画像データとして前記リストに登録した登録済みリストを生成し、前記センターサーバに前記登録済みリストを送信し、前記センターサーバは、複数の前記情報処理装置の中から前記施設に関する情報を用いた複数の条件のいずれかに基づき前記登録済みリストを送信する情報処理装置を決定し、前記条件は、前記複数の条件の中から任意に設定可能である。

本開示のプログラムは、監視カメラから送信された顔画像データと、リストに登録された登録顔画像データとを照合し、照合結果に基づいて警告を出力するプログラムであって、コンピュータに、施設ごとに設置された前記監視カメラから、前記施設に訪れた人物の顔画像データを受信し、前記顔画像データを前記施設に関連付けられた端末装置に送信し、前記顔画像データの画像を表示した前記端末装置において選択された画像に対応する顔画像データを前記登録顔画像データとして前記リストに登録した登録済みリストを生成し、前記施設ごとに設置される情報処理装置の中から前記施設に関する情報を用いた複数の条件のいずれかに基づき前記登録済みリストを送信する情報処理装置を決定し、前記条件は、前記複数の条件の中から任意に設定可能である、処理を実行させる。

本開示のリスト作成方法は、監視カメラから送信された顔画像データと、リストに登録された登録顔画像データとを照合し、照合結果に基づいて警告を出力する監視システムのリスト作成方法であって、施設ごとに設置される情報処理装置は、前記施設ごとに設置された前記監視カメラから、前記施設に訪れた人物の顔画像データを受信し、前記施設に関連付けられた端末装置に送信し、前記端末装置は、前記情報処理装置から送信された顔画像データの画像を表示装置に表示し、前記表示装置に表示された画像のうち、前記リストに登録する顔画像データの選択を受付け、前記情報処理装置は、前記顔画像データの画像を表示した前記端末装置において選択された画像に対応する顔画像データを前記登録顔画像データとして前記リストに登録した登録済みリストを生成し、前記情報処理装置と通信可能に接続されるセンターサーバに前記登録済みリストを送信し、前記センターサーバは、複数の前記情報処理装置の中から前記施設に関する情報を用いた複数の条件のいずれかに基づき前記登録済みリストを送信する情報処理装置を決定し、前記条件は、前記複数の条件の中から任意に設定可能である。

本開示によれば、施設のスタッフが、施設に訪れる人の中から監視対象と判断した人物を容易にリスト登録できる。

本開示の実施の形態に係る要注意人物検出システムの構成について説明するための図 カメラのハードウェア構成例を示す図 顔認識サーバのブロック構成例を示す図 端末装置のブロック構成例を示す図 要注意リスト登録動作について説明するためのシーケンス図 要注意人物登録操作における、端末装置の表示の例を示した図 要注意人物登録操作における、端末装置の表示の例を示した図 要注意人物登録操作における、端末装置の表示の例を示した図 要注意人物登録操作における、端末装置の表示の例を示した図 警告動作について説明するためのシーケンス図 端末装置の警告表示の例を示した図 端末装置の警告表示の例を示した図 端末装置の警告表示の例を示した図 端末装置の警告表示の例を示した図 複数店舗への要注意リスト展開動作について説明するためのシーケンス図

以下、本開示の各実施の形態について図面を参照して詳細に説明する。ただし、必要以上に詳細な説明、例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明等は省略する場合がある。

なお、以下の説明および参照される図面は、当業者が本開示を理解するために提供されるものであって、本開示の請求の範囲を限定するためのものではない。

（全体構成）
図１は、本開示の実施の形態に係る要注意人物検出システム１の構成について説明するための図である。要注意人物検出システム１は、複数の店舗に設置された複数のカメラ１０、顔認識サーバ２０、および端末装置３０と、ネットワーク４０と、センターサーバ５０と、を含む構成を有する。なお、店舗とは、本開示の施設の一例である。

図１に示す例では、複数の店舗の例として、店舗Ａ～Ｃの３つの店舗が示されているが、本開示の要注意人物検出システム１には、より多くの店舗が含まれていてもよいし、１店舗、または２店舗のみが含まれていてもよい。

以下の説明において、複数の店舗に設置された各構成（複数のカメラ１０、顔認識サーバ２０、および端末装置３０）を区別せず、同じものとして説明を行う。

複数のカメラ１０は、店舗の複数の箇所に設置されたカメラである。カメラ１０は、特に、来店客の行動を監視するための監視カメラである。従って、カメラ１０は、例えば店舗入口付近、陳列什器の間、階段、および通路等を写せる位置に設置されることが望ましい。カメラ１０は、本開示の監視カメラの一例である。なお、図１に示す例では１つの店舗に複数のカメラ１０が設置されるとしたが、本開示はこれに限定されず、カメラ１０の数は１店舗に１つであってもよいし、店舗によって異なってもよい。

また、複数のカメラ１０は、パン回転およびはチルト回転のうち少なくとも一方によって姿勢（言い換えると、内蔵されるレンズの光軸方向）を変更可能であり、かつズーム処理によってズーム倍率を変更可能なＰＴＺ（Pan Tilt Zoom）カメラである。

顔認識サーバ２０は、例えば店舗のバックヤードに設置されたサーバ装置である。顔認識サーバ２０は、本開示の情報処理装置の一例である。顔認識サーバ２０は、カメラ１０と有線または無線で接続され、カメラ１０で撮像された画像を取得し、当該画像に基づいて、来店客の顔を認識する。また、顔認識サーバ２０は、あらかじめ要注意人物の顔画像データのリストが登録されたデータベース（以下、店舗ＤＢと記載する）を参照して、要注意人物が来店したときには端末装置３０に対して報知を行う。

なお、本実施の形態において、要注意人物とは、万引きが疑われる行動が店舗のスタッフによって認められた人物である。このような要注意人物の顔画像データをリスト化したものを、以下の説明では要注意リストと記載する。要注意リストは、本開示のリストの一例である。また、要注意リストに登録された顔画像データは、本開示の登録顔画像データの一例である。

端末装置３０は、店舗のスタッフ、特に売り場での作業（商品補充等）を行う現場スタッフが携帯する携帯端末装置である。具体的には、端末装置３０は、タブレット端末、スマートフォン、スマートウォッチ等のスマートデバイスである。また、端末装置３０には、バックヤードで作業する店舗管理者や責任者等が扱うＰＣ（Personal Computer）が含まれてもよい。なお、店舗管理者や責任者も上記スタッフに含まれる。

端末装置３０は、顔認識サーバ２０と無線または有線で接続されており、顔認識サーバ２０から得た情報を表示することができる。また、端末装置３０に対してスタッフが入力した情報を顔認識サーバ２０に対して送信することもできる。

図１に示すように、複数の店舗に、このような複数のカメラ１０と、顔認識サーバ２０と、端末装置３０と、が設置されている。それぞれの店舗に設置された顔認識サーバ２０は、それぞれネットワーク４０を介して、センターサーバ５０と接続されている。

ネットワーク４０は、インターネット等の公衆ネットワークである。

センターサーバ５０は、例えば全国展開された複数の店舗を統括する本部施設や、ある地域の店舗を統括する地域統括施設等に設置されたサーバ装置である。センターサーバ５０の設置場所については特に限定されず、例えば顔認識サーバ２０が設置された複数店舗のうちの１店舗に設置されていてもよい。

センターサーバ５０は、複数店舗のサーバ装置から要注意リストを取得し、管理する。また、センターサーバ５０は、ある１店舗から取得した要注意リストを、他の店舗に向かって送信する。ここで、センターサーバ５０は、１店舗から取得した要注意リストを、他の全店舗に向かって一括送信してもよいし、他の全店舗のうち、特定の店舗に向かってのみ送信するようにしてもよい。

（各構成の説明）
＜カメラ１０＞
図２は、カメラ１０のハードウェア構成例を示すブロック図である。カメラ１０は、ＣＰＵ１１と、記憶部１２と、撮像部１３と、映像処理部１４と、通信部１５と、パンチルト駆動部１６と、加速度センサ１８と、を含む構成である。

パンチルト駆動部１６は、撮像部１３をパン方向およびチルト方向に駆動するものであり、チルト制御部１６１、パン制御部１６２、チルトモータ１６３、およびパンモータ１６４を含む。チルト制御部１６１は、チルトモータ１６３の回転角を制御する。パン制御部１６２は、パンモータ１６４の回転角を制御する。

加速度センサ１８は、カメラ１０の姿勢（例えば、レンズの光軸方向を定めるパン角およびチルト角）に対応する信号を出力する。ＣＰＵ１１は、加速度センサ１８から出力される信号を基に、カメラ１０の姿勢を制御する。加速度センサ１８には、例えば半導体ピエゾ抵抗効果を利用した半導体式、回転質量体により可動接点と固定接点を開閉する機械式のものが用いられる。

撮像部１３は、撮像素子として、ＣＣＤ（Charge Coupled Device）またはＣＭＯＳ（Complementary Metal Oxide Semiconductor）を有する。撮像部１３は、焦点距離を調節可能フォーカスレンズ、ズーム倍率を変更可能なズームレンズ、および撮像素子の感度を調整可能なゲイン調整部を有する。

映像処理部１４は、撮像部１３で撮像された撮像映像のデータ信号に対し、ＡＤ変換、色補正、雑音除去、輪郭強調等の各種の信号処理を行う。

記憶部１２は、カメラ１０のパラメータ（パン角、チルト角、ズーム倍率）をプリセット値として記憶している。本実施の形態では、カメラ１０毎にあらかじめ設定された店舗内の範囲を撮影可能とするためのパラメータが、プリセット値として記憶部１２に記憶されている。

記憶部１２は、例えばＲＡＭ（Random Access Memory）とＲＯＭ（Read Only Memory）を含み、カメラ１０の動作の実行に必要なプログラムやデータ、動作中に生成された情報またはデータ等を一時的に保存する。ＲＡＭは、例えばＣＰＵ１１の動作時に使用されるワークメモリである。ＲＯＭは、例えばＣＰＵ１１を制御するためのプログラムおよびデータを予め記憶する。

ＣＰＵ１１は、カメラ１０の各部の動作を制御する。ＣＰＵ１１は、カメラ１０の制御部として機能し、カメラ１０の各部の動作を全体的に統括するための制御処理、カメラ１０の各部との間のデータの入出力処理、データの演算（計算）処理およびデータの記憶処理を行う。ＣＰＵ１１は、記憶部１２内のＲＯＭに記憶されたプログラムの実行に従って動作する。ＣＰＵ１１は、記憶部１２に記憶されたプリセット値を読み出し、加速度センサ１８から出力される信号を基に、カメラ１０の姿勢をプリセット値に対応する位置に制御する。ＣＰＵ１１は、撮像部１３で撮像され、映像処理部１４で信号処理された撮像映像のデータを、通信部１５を介してＰＣ３０に送信する。

通信部１５は、有線または無線で顔認識サーバ２０と接続されている。

＜顔認識サーバ２０＞
図３は、顔認識サーバ２０のブロック構成例を示す図である。図３に示すように、顔認識サーバ２０は、制御部２１と、通信部２２と、記憶部２３と、を有している。

制御部２１は、顔認識サーバ２０全体を制御する。制御部２１は、例えば、ＣＰＵによって構成されてもよい。制御部２１は、本開示の制御部、または第１制御部の一例である。

通信部２２は、カメラ１０および端末装置３０と無線または有線で通信する。通信部２２は、例えば、イーサネット（登録商標）ケーブル等のネットワークケーブルを介して、カメラ１０および端末装置３０と通信してもよい。また、通信部２２は、例えば、Ｗｉ－Ｆｉ（登録商標）またはブルートゥース（登録商標）等の近距離無線通信を介して、カメラ１０および端末装置３０と通信してもよい。

記憶部２３は、制御部２１が動作するためのプログラムが記憶される。また、記憶部２３には、制御部２１が計算処理を行うためのデータ、または、制御部２１が各部を制御するためのデータ等が記憶される。記憶部２３は、ＲＡＭ、ＲＯＭ、フラッシュメモリ、およびＨＤＤ等の記憶装置によって構成されてもよい。上述した店舗ＤＢは、記憶部２３に格納される。

＜端末装置３０＞

図４は、端末装置３０のブロック構成例を示した図である。図４に示すように、端末装置３０は、制御部３１と、入力部３２と、表示部３３と、通信部３４と、記憶部３５と、を有している。

制御部３１は、端末装置３０全体を制御する。制御部３１は、例えば、ＣＰＵによって構成されてもよい。制御部３１は、本開示の第２制御部の一例である。

入力部３２は、例えば、キーボード、表示装置の画面上に重畳されたタッチパネル、またはマウス等の入力装置（図示せず）に接続されている。入力部３２は、入力装置から出力された、ユーザの操作に応じた信号を受信し、制御部３１に出力する。

表示部３３は、端末装置３０が備える表示装置（図示せず）に接続されている。表示部３３は、制御部３１から出力される画像データを表示装置に出力する。

以上、各構成について説明した。なお、センターサーバ５０については詳細な説明を省略するが、センターサーバ５０は、例えば上述した顔認識サーバ２０と同様の構成を有していればよい。

（動作の説明）
以下では、上記説明した要注意人物検出システム１の動作について具体的に説明する。

＜要注意リスト登録動作＞
まず、来店客のうち要注意人物を要注意リストに登録する要注意リスト登録動作について説明する。図５は、要注意リスト登録動作について説明するためのシーケンス図である。

ステップＳ１において、カメラ１０は、来店客の顔画像を撮影して顔画像データを生成する。カメラ１０は、新たに来店客が訪れる度に、その来店客の新たな顔画像データを生成する。カメラ１０は、例えば店舗の入口を含む動画像を常に撮影しておき、その動画像に基づいて来店客があったと判断したとき、その動画像の中から来店客の顔画像データを抽出してもよいし、来店客を別の手段で検出したときに逐次その来店客の顔を撮影して顔画像データを生成してもよい。

ステップＳ２において、カメラ１０は新たに撮影した顔画像を顔認識サーバ２０に対して送信する。

ステップＳ３において、顔認識サーバ２０は、ステップＳ２でカメラ１０から受信した顔画像データを、端末装置３０に対して自動的に配信する。店舗の複数のスタッフがそれぞれ端末装置３０を携帯している場合は、顔認識サーバ２０は、全ての端末装置３０に対して顔画像データを自動的に配信する。また、顔認識サーバ２０は、新たに来店客が訪れる度に、その来店客の新たな顔画像データを全端末装置３０に対して自動的に配信する。

ステップＳ４において、端末装置３０は、ステップＳ３で受信した顔画像データを表示する。これにより、店舗の全スタッフが携帯するそれぞれの端末装置３０に、新規来店客の顔画像が表示される。なお、端末装置３０には、表示スペースが許す限り、直近に来店した来店客の顔画像が時系列順に複数表示されていることが望ましい。

ここで、あるスタッフが、ある来店客が要注意人物であると判断したとする。要注意人物とは、万引きが疑われる行動がスタッフによって認められた人物である。そのような場合、そのスタッフは、ステップＳ５において、端末装置３０に表示された来店客の顔画像の中から、要注意人物の顔画像を選択する操作（以下、要注意人物登録操作と記載する）を実行する。

図６から図９は、要注意人物登録操作における、端末装置３０の表示の例を示した図である。図６には、端末装置３０が比較的広い画面を有するタブレット端末である場合の表示画面１００が例示されている。図７には、端末装置３０が比較的狭い画面を有するスマートフォンである場合の表示画面２００が例示されている。図８には、端末装置３０がスマートフォンよりも狭い画面を有するスマートウォッチである場合の表示画面３００が例示されている。図９には、端末装置３０がタブレット端末よりも広い画面を有するＰＣである場合の表示画面４００が例示されている。

図６、図７および図９に示すように、表示画面１００、２００、４００は、来店客リスト表示欄１０１、２０１、４０１、および要注意リスト表示欄１０２、２０２、４０２を有する。図８に例示した、画面が狭いスマートウォッチの表示画面３００は、表示スペースの都合上、来店客リスト表示欄および要注意リスト表示欄は有しておらず、代わりに来店客表示欄３０１およびリスト登録ボタン３０２を有する。

来店客リスト表示欄１０１、２０１、４０１は、来店客の顔画像が時系列順に表示される欄である。来店客リスト表示欄１０１における顔画像の表示は、図５のステップＳ４において実行される。来店客リスト表示欄１０１に表示される顔画像は、新たな来店客が訪れる度に更新される。図６、図７および図９に示すように、来店客リスト表示欄１０１、２０１、４０１には、顔画像とともに来店した時刻が表示されてもよい。また、図９に示すＰＣの表示画面４００では、複数のカメラ１０の画像をそれぞれ独立した表示欄に表示するようにしてもよい。

要注意リスト表示欄１０２、２０２、４０２は、要注意リストに登録されている顔画像データに対応する要注意人物の顔画像が表示される欄である。図６に示すタブレット端末の表示画面１００のように、表示スペースに余裕がある場合には、要注意リスト表示欄１０２に顔画像に加えて要注意人物に関する情報（スタッフが付けたニックネーム、来店履歴、身長や顔立ち等の特徴等）が追加で表示されていてもよい。

図５のステップＳ５における、要注意リスト登録操作は、図６、図７および図９に示す表示画面１００、２００、４００において、以下のようにして行われる。すなわち、スタッフは、来店客リスト表示欄１０１、２０１、４０１に表示された来店客の中から、要注意人物の顔画像を要注意リスト表示欄１０２、２０２、４０２にドラッグ＆ドロップ操作する。要注意リスト表示欄１０２、２０２、４０２にドラッグ＆ドロップ操作された顔画像が、本開示における、端末装置において選択された画像に対応する。これにより、端末装置３０は、当該操作がなされた顔画像に対応する人物の顔画像データを要注意リストに登録する操作を受け付けるとともに、当該顔画像を要注意リスト表示欄１０２に追加して表示する。

一方、図８に示す表示画面３００には、来店客の顔画像を表示する来店客表示欄３０１及びリスト登録ボタン３０２が設けられている。来店客表示欄３０１に表示される顔画像は、例えばスタッフの操作によって、時系列順に切り替わるようになっている。リスト登録ボタン３０２は、来店客表示欄３０１に表示されている来店客の顔画像データを要注意リストに登録する際に押下するボタンである。

要注意リスト登録操作は、図８に示す表示画面３００において、以下のようにして行われる。すなわち、スタッフは、要注意人物の顔画像を来店客表示欄３０１に表示させた状態で、リスト登録ボタン３０２を押下する。すると、端末装置３０は、当該操作がなされた顔画像を要注意リストに登録する操作を受け付け、当該顔画像を要注意リストに加えた旨の表示等を行う。スタッフがリスト登録ボタン３０２を押下したときに来店客表示欄３０１に表示していた顔画像が、本開示における、端末装置において選択された画像に対応する。

図５の説明に戻る。ステップＳ５で要注意リスト登録操作を受け付けた端末装置３０は、ステップＳ６において、要注意リスト登録操作で指定された顔画像を要注意リストに登録する要求（以下、登録要求と記載する）を顔認識サーバ２０に対して送信する。

ステップＳ７において、登録要求を受信した顔認識サーバ２０は、登録要求された顔画像を店舗ＤＢの要注意リストに登録する。

このような要注意リスト登録動作により、要注意人物を容易かつ速やかにリスト化することができる。なお、図５に例示した動作では、一度のスタッフの判断により、要注意人物と判断された来店客の顔画像データを要注意人物リストに登録していたが、本開示はこれに限定されない。例えば来店客それぞれの顔画像データに対して、スタッフが要注意と判断した回数に応じたポイントを付与しておき、当該ポイントが一定以上溜まった場合にのみその来店客の顔画像データが要注意リストに登録されるようにしてもよい。

＜警告動作＞
次に、要注意人物の再来店時に警告を出力する警告動作について説明する。図１０は、警告動作について説明するためのシーケンス図である。

ステップＳ１１において、カメラ１０は、新たに来店客が訪れる度に、その来店客の顔を撮影し、新たな顔画像データを生成する。

ステップＳ１２において、カメラ１０は新たに撮影した顔画像を顔認識サーバ２０に対して送信する。

新たな顔画像データを受信した顔認識サーバ２０は、ステップＳ１３において、店舗ＤＢを参照して、受信した顔画像データの人物と一致する人物の登録顔画像データが要注意リストに登録されているかの照合を行う。照合の結果、登録されていると判定された場合（ステップＳ１４：ＹＥＳ）、顔認識サーバ２０は、店舗内の全端末装置３０に対して警告を出力する。顔認識サーバ２０は、全端末装置３０にではなく、あらかじめ登録された一部の端末装置３０に対してのみ警告を出力するようにしてもよい。顔認識サーバ２０における、顔画像の照合処理については、既存の技術（例えば、顔認証技術）を利用することができる。

なお、照合の結果、登録されていないと判定された場合、顔認識サーバ２０は、特に動作を起こさず、次の顔画像データがカメラ１０から送信されてくるまで待機する。

ステップＳ１５で警告を受信した端末装置３０は、ステップＳ１６において、スタッフに要注意人物が来店したことを警告する表示（以下、警告表示と記載する）を行う。図１１から図１４は、端末装置３０の警告表示の例を示した図である。図１１には、タブレット端末の警告表示画面１１０が例示されている。図１２には、スマートフォンの警告表示画面２１０が例示されている。図１３には、スマートウォッチの警告表示画面３１０が例示されている。図１４には、ＰＣの警告表示画面４１０が例示されている。

図１１、図１２、および図１４に示すように、警告表示画面１１０、２１０、４１０には、図６、図７、および図９に例示した来店客リスト表示欄１０１、２０１、４０１および要注意リスト表示欄１０２、２０２、４０２に重畳して、警告表示欄１１３、２１３、４１３が表示されている。警告表示欄１１３、２１３、４１３には、スタッフの目を引く警告表示（例えば明滅するパトランプの表示やメッセージ等）、ステップＳ１１でカメラ１０が撮影した現在の要注意人物の顔画像、および、要注意リストに登録されている顔画像等が含まれる。

図１３に示すように、画面が狭いスマートウォッチの警告表示画面３１０には、要注意人物表示欄３１３と、警告欄３１４と、が表示されている。要注意人物表示欄３１３には、ステップＳ１１でカメラ１０が撮影した現在の要注意人物の顔画像が表示されている。警告欄３１４には、スタッフの目を引く警告表示（例えば明滅するパトランプの表示やメッセージ等）が表示されている。

このような警告表示画面１１０、２１０、３１０、４１０により、端末装置３０を有するスタッフに、要注意人物が来店したことが速やかに報知される。

ステップＳ１６で端末装置３０が警告表示を行う際に、端末装置３０は、同時にバイブレーション機能を用いて振動したり、スタッフの装着しているインターカムに対して警告音を発生させる指令を送信したりしてもよい。さらに、ステップＳ１５で警告が出力される対象は端末装置３０でなくてもよい。すなわち、例えば店舗内に設置された、ＢＧＭ用のスピーカの制御装置や、バックヤードに設置されたランプの制御装置等に対して警告を出力してもよい。警告を受信したスピーカの制御装置は、スピーカから流れる音楽を、要注意人物が来店したときにのみ流す特定の音楽に変更させたりしてもよい。また、警告を受信したランプの制御装置は、ランプを点灯または点滅等させてもよい。

以上説明した警告動作により、各スタッフは、要注意人物の来店に速やかに気づくことができる。警告動作では、端末装置３０には要注意人物の現在の顔画像が表示されるので、スタッフは、要注意人物を見誤る事態を防止できる。要注意人物の来店を認識したスタッフは、例えば要注意人物の近くで補充作業を行うことで万引きを防止したり、様子を見守って、もし万引きが行われた場合には犯人を取り押さえたりすることができるようになる。

＜複数店舗への要注意リスト展開動作＞
次に、１店舗で生成された要注意リストを、複数店舗に展開する動作について説明する。図１５は、複数店舗への要注意リスト展開動作について説明するためのシーケンス図である。図１５では、店舗Ａで生成された要注意リストが店舗ＢおよびＣに展開される場合について例示しているが、展開される店舗の数はより多くてもよく、また１店舗のみであってもよい。

ステップＳ２１において、店舗Ａの顔認識サーバ２０は、センターサーバ５０に対して、要注意リストを送信する。なお、ある店舗の顔認識サーバ２０がセンターサーバ５０に対して要注意リストを送信するタイミングについては、本開示では特に限定しない。例えば、顔認識サーバ２０は、センターサーバ５０から要求があった場合にその時点で最新の要注意リストを送信するようにしてもよいし、一定間隔で自動的に要注意リストを送信するようにしてもよい。

ステップＳ２２において、センターサーバ５０は、ステップＳ２１で受信した要注意リストを自らの有するデータベース（以下、全体ＤＢと記載する）に登録する。全体ＤＢでは、複数の店舗から受信された店舗毎の要注意リストに含まれる要注意人物が、１つのリスト（以下、全体リストと記載する）に登録される。全体ＤＢに含まれる全体リストには例えば、要注意人物の顔画像データと、その要注意人物がリスト登録された店舗の識別ＩＤとが対応付けられて登録されている。

ステップＳ２３において、センターサーバ５０は、複数の店舗（図１５の例では店舗ＢおよびＣの２店舗）の顔認識サーバ２０に対して、店舗Ａから取得した要注意リストを送信する。

なお、図１５に示す例では、センターサーバ５０は、店舗ＢおよびＣの両方に対して店舗Ａから取得した要注意リストを送信しているが、あらかじめ設定されている条件を満たす、いずれか一方の店舗にのみ送信するようにしてもよい。すなわち、例えば店舗Ｂが店舗Ａの近隣に存在する店舗であり、店舗Ｃが店舗Ａから遠く離れた位置に存在する店舗である場合、センターサーバ５０は、店舗Ａから取得した要注意リストを、店舗Ｃには送信せず店舗Ｂにのみ送信するようにしてもよい。

センターサーバ５０が店舗Ａから取得した要注意リストを送信する対象となる店舗がさらに多数の場合、あらかじめ店舗Ａと距離が所定距離以内である店舗、言い換えれば或るエリア（地域）内に存在する店舗にのみ、店舗Ａから取得した要注意リストを送信するようにしてもよい。

なお、センターサーバ５０がある店舗から取得した要注意リストを送信する対象となる店舗の条件としては、店舗間の距離の他、例えば責任者が同一人物である店舗であるか否か、来店客の多さ、売上高等、種々の条件が設定可能である。このような条件は、センターサーバ５０においてあらかじめ設定されていてもよいし、センターサーバ５０が設置された本部施設の統括責任者等が任意の条件を設定してもよい。

ステップＳ２４において、センターサーバ５０から店舗Ａの要注意リストを受信した店舗ＢおよびＣの顔認識サーバ２０は、受信した要注意リストに含まれる要注意人物に関する情報を、自店舗の要注意リストに加える。この際、どの店舗で要注意人物と判断されたかに関する情報を要注意リストに付加するようにしてもよい。

このような要注意リスト展開動作により、ある店舗で生成された要注意リストを、複数店舗で共有することができる。なお、以後の各店舗における警告動作における、新たな顔画像データと要注意リストとの照合（図１０のステップＳ１３参照）は、他店舗の情報が追加された要注意リストを用いて行われる。このような動作により、例えばある地域内の複数店舗で万引きを行う常習犯に対する警戒を、該当店舗の全スタッフが行うことができるようになる。

（作用、効果）
以上説明したように、本開示の実施の形態に係る要注意人物検出システム１において、顔認識サーバ２０は、カメラ１０から送信された顔画像データと、要注意リストに登録された登録顔画像データとを照合し、照合結果に基づいて警告を出力する情報処理装置であって、店舗等の施設に設置されたカメラ１０から、施設に訪れた人物の顔画像データを受信し、施設に関連付けられた端末装置３０に送信する通信部２２と、通信部２２が送信した顔画像データの画像を表示した端末装置３０において選択された画像に対応する顔画像データを登録顔画像データとして要注意リストに登録する制御部２１と、を有する。

このような構成により、店舗等の施設のスタッフが、施設に訪れる人の中から監視対象と判断した人物を、容易かつ速やかにリスト登録できる。

また、新たに来店した来店客の顔画像データと要注意リストとを照合し、要注意リストに登録されている要注意人物が来店した場合には、顔認識サーバ２０は端末装置３０に対して警告を出力するため、店舗の全スタッフは、要注意人物の来店に速やかに気づくことができる。要注意人物の来店を認識したスタッフは、例えば要注意人物の近くで補充作業を行うことで万引きを防止したり、様子を見守って、もし万引きが行われた場合には犯人を取り押さえたりすることができるようになる。

また、本開示の実施の形態に係る要注意人物検出システム１において、顔認識サーバ２０が警告を出力する端末装置３０は、自らの施設に関連づけられた端末装置３０（自店舗のスタッフが有する端末装置３０）には限定されない。すなわち、顔認識サーバ２０は、例えば、他の施設に関連づけられた端末装置３０（他の店舗のスタッフが有する端末装置３０）に対して警告を出力してもよいし、リスト登録が行われた端末装置３０にのみ警告を出力するようにしてもよい。

このような構成により、例えば同一地域内の複数の店舗で万引きを行うような常習犯に対して、スタッフが効果的に警戒を行うことができるようになる。

以上、本開示の実施の形態について説明したが、本開示は、上述の実施形態に限定されるものではなく、本開示の趣旨を逸脱しない範囲で、適宜変形して実施することが可能である。

本開示は、要注意人物の来店時にスタッフが有する端末装置に対して報知を行う情報処理装置に適用することができる。

１ 要注意人物検出システム
１０ カメラ
１１ ＣＰＵ
１２ 記憶部
１３ 撮像部
１４ 映像処理部
１５ 通信部
１６ パンチルト駆動部
１６１ チルト制御部
１６２ パン制御部
１６３ チルトモータ
１６４ パンモータ
１８ 加速度センサ
２０ 顔認識サーバ
２１ 制御部
２２ 通信部
２３ 記憶部
３０ 端末装置
３１ 制御部
３２ 入力部
３３ 表示部
３４ 通信部
３５ 記憶部
４０ ネットワーク
５０ センターサーバ
１００，２００，３００，４００ 表示画面
１０１，２０１，４０１ 来店客リスト表示欄
１０２，２０２，４０２ 要注意リスト表示欄
３０１ 来店客表示欄
３０２ リスト登録ボタン
１１０，２１０，３１０，４１０ 警告表示画面
１１３，２１３，４１３ 警告表示欄
３１３ 要注意人物表示欄
３１４ 警告欄

Claims (12)

1. 監視カメラから送信された顔画像データと、リストに登録された登録顔画像データとを照合し、照合結果に基づいて警告を出力する監視システムであって、
   施設ごとに設置される情報処理装置と、複数の前記情報処理装置と通信可能に接続されるセンターサーバと、を備え、
   前記情報処理装置は、
   前記施設ごとに設置された前記監視カメラから、前記施設に訪れた人物の顔画像データを受信し、前記施設に関連付けられた端末装置に送信し、
   送信した顔画像データの画像を表示した前記端末装置において選択された画像に対応する顔画像データを前記登録顔画像データとして前記リストに登録した登録済みリストを生成し、
   前記センターサーバに前記登録済みリストを送信し、
   前記センターサーバは、複数の前記情報処理装置の中から前記施設に関する情報を用いた複数の条件のいずれかに基づき前記登録済みリストを送信する情報処理装置を決定し、
   前記条件は、前記複数の条件の中から任意に設定可能である、
   監視システム。
2. 前記情報処理装置は、前記センターサーバから前記登録済みリストを受信する際、前記登録済みリストに含まれる情報を、自装置のリストに加える、
   請求項１に記載の監視システム。
3. 前記情報処理装置は、前記登録済みリストに含まれる情報を、どの施設の情報処理装置で前記リストに登録されたかに係る情報を付加して、自装置のリストに加える、
   請求項２に記載の監視システム。
4. 前記センターサーバは、前記登録済みリストに含まれる情報を前記センターサーバが有するデータベースに登録する、
   請求項１に記載の監視システム。
5. 前記センターサーバは、前記条件として、前記施設間の距離、前記施設の責任者が同一であるか否か、前記施設の来客数または前記施設の売上のうち少なくとも１つに基づき、前記登録済みリストを送信する情報処理装置を決定する、
   請求項１に記載の監視システム。
6. 前記情報処理装置は、前記顔画像データと前記登録顔画像データとの照合の結果、前記施設を訪れた人物が前記登録顔画像データの人物と一致する場合、前記施設に関連づけられた前記端末装置に前記警告を出力する、
   請求項１に記載の監視システム。
7. 前記情報処理装置は、前記施設とは異なる施設に関連付けられた端末装置に前記警告を出力する、
   請求項６に記載の監視システム。
8. 前記情報処理装置は、前記顔画像データと前記登録顔画像データとの照合の結果、前記施設を訪れた人物が前記登録顔画像データの人物と一致する場合、前記画像の選択を受け付けた前記端末装置に前記警告を出力する、
   請求項１に記載の監視システム。
9. 前記情報処理装置は、前記顔画像データと前記登録顔画像データとの照合の結果、前記施設を訪れた人物が前記登録顔画像データの人物と一致する場合、前記施設を含む或るエリア内に位置する複数の施設に関連付けられた端末装置に前記警告を出力する、
   請求項１に記載の監視システム。
10. 前記施設ごとに紐づけられる端末装置を、さらに備え、
    前記端末装置は、
    前記情報処理装置から送信された顔画像データの画像を表示装置に表示し、
    前記表示装置に表示された画像のうち、前記リストに登録する顔画像データの選択を受付ける、
    請求項１に記載の監視システム。
11. 監視カメラから送信された顔画像データと、リストに登録された登録顔画像データとを照合し、照合結果に基づいて警告を出力するプログラムであって、
    コンピュータに、
    施設ごとに設置された前記監視カメラから、前記施設に訪れた人物の顔画像データを受信し、
    前記顔画像データを前記施設に関連付けられた端末装置に送信し、
    前記顔画像データの画像を表示した前記端末装置において選択された画像に対応する顔
    画像データを前記登録顔画像データとして前記リストに登録した登録済みリストを生成し、
    前記施設ごとに設置される複数の情報処理装置の中から前記施設に関する情報を用いた複数の条件のいずれかに基づき前記登録済みリストを送信する情報処理装置を決定し、
    前記条件は、前記複数の条件の中から任意に設定可能である、
    処理を実行させるプログラム。
12. 監視カメラから送信された顔画像データと、リストに登録された登録顔画像データとを照合し、照合結果に基づいて警告を出力する監視システムのリスト作成方法であって、
    施設ごとに設置される情報処理装置は、
    前記施設ごとに設置された前記監視カメラから、前記施設に訪れた人物の顔画像データを受信し、
    前記施設に関連付けられた端末装置に送信し、
    前記端末装置は、
    前記情報処理装置から送信された顔画像データの画像を表示装置に表示し、
    前記表示装置に表示された画像のうち、前記リストに登録する顔画像データの選択を受付け、
    前記情報処理装置は、
    前記顔画像データの画像を表示した前記端末装置において選択された画像に対応する顔画像データを前記登録顔画像データとして前記リストに登録した登録済みリストを生成し、
    前記情報処理装置と通信可能に接続されるセンターサーバに前記登録済みリストを送信し、
    前記センターサーバは、
    複数の前記情報処理装置の中から前記施設に関する情報を用いた複数の条件のいずれかに基づき前記登録済みリストを送信する情報処理装置を決定し、
    前記条件は、前記複数の条件の中から任意に設定可能である、
    リスト作成方法。

Images