JP2006255027A - 監視システムおよび方法、不正遊技者認識サーバおよび方法、人追跡サーバおよび方法、監視サーバおよび方法、並びにプログラム - Google Patents

Abstract

【課題】誤認識を低減でき、不正遊技者の検出率を向上させることが可能となる。
【解決手段】 顔認識サーバ６は、不正遊技者の顔画像を蓄積し、カメラ３は、入店者の顔画像を撮像し、撮像された顔画像が蓄積された不正遊技者の顔画像と照合済みではない場合、顔認識サーバ６は、入店者の顔画像と、蓄積された不正遊技者の顔画像とを照合し、人追跡サーバ５は、入店者の位置情報を取得し、撮像された顔画像に、入店者の位置情報を対応付け、統合監視サーバ７は、顔画像に対応付けられた位置情報、顔画像、および照合結果をテーブルとして管理し、テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する。本発明は、遊技店の監視システムに適用することができる。
【選択図】図１

Description

本発明は、監視システムおよび監視方法、不正遊技者認識サーバおよび不正遊技者認識方法、人追跡サーバおよび人追跡方法、監視サーバおよび監視方法、並びにプログラムに関し、特に、不正遊技者の誤検出を低下させるとともに、検出率を向上させるようにした監視システムおよび方法、不正遊技者認識サーバおよび方法、人追跡サーバおよび人追跡方法、監視サーバおよび監視方法、並びにプログラムに関する。

パチンコ店、または、パチスロ店などに代表される遊技店が普及している。

遊技店においては、遊技者が複数に配置されている遊技機のうち、自らで好みの遊技機を遊技する。しかしながら、遊技機は、いわゆる大当たりの確立が均等に設定されているわけではないため、遊技者は、できるだけ大当たりが発生する可能性が高いと思われる遊技機を探して遊技する。

ところが、意図的に遊技機に何らかの仕掛けを施して、遊技機で遊技し不正に大当たりを発生させる不正遊技者による犯罪が後を絶たない。

不正遊技者の対策については、遊技店の出入口に監視カメラを配置し、監視カメラで撮像できた遊技者の顔画像と、予め登録された不正遊技者の顔画像とを顔認識技術を用いて検索し、不正遊技者が来店した際には、警告を発するものが提案されている（例えば、特許文献１参照）。

特開２００１−１７８９５８号公報

しかしながら、上述した手法では、予め監視カメラが設けられていることが不正遊技者に感付かれてしまうと、入店時に監視カメラの前を帽子を深く被って通過したり、監視カメラの前では下を向いて歩くなどして、顔が撮像できないことにより、顔認識処理ができず、結果として、不正遊技者の来店を検出できないという課題があった。

また、このような不正遊技者の監視カメラの前での行動の対策として、監視カメラの設置台数を増やすという対策方法が考えられるが、監視カメラの台数が増えれば増えるほど、誤認識に基づいた誤報が増大することになるため、結果として不正遊技者の来店を正確に検出できないという課題があった。

本発明はこのような状況に鑑みてなされたものであり、特に、遊技店における不正遊技者の顔認識処理による誤認識を低減させることで誤報を低減させるようにすると共に、不正遊技者の検出率を向上させるようにするものである。

本発明の監視システムは、不正遊技者の顔画像を蓄積する蓄積手段と、入店者の顔画像を撮像する撮像手段と、撮像手段により撮像された顔画像が蓄積手段に蓄積された不正遊技者の顔画像と照合済みではない場合、入店者の顔画像と、蓄積手段に蓄積された不正遊技者の顔画像とを照合する照合手段と、入店者の位置情報を取得する位置取得手段と、撮像手段により撮像された顔画像に、入店者の位置情報を対応付ける対応付手段と、顔画像に対応付けられた位置情報、顔画像、および照合結果をテーブルとして管理するテーブル管理手段と、テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知手段とを備えることを特徴とする。

前記不正遊技者を認識する第１の情報処理装置は不正遊技者認識サーバとするようにすることができ、入店者の位置を追跡する第２の情報処理装置は、人追跡サーバとするようにすることができ、人追跡サーバの追跡結果と不正遊技者認識サーバの顔認識結果とに基づき不正遊技者の入店を監視する第３の情報処理装置は、監視サーバとするようにすることができる。

前記不正遊技者認識サーバには、不正遊技者の顔画像を蓄積する蓄積手段と、入店者の顔画像を撮像する撮像手段と、撮像手段により撮像された顔画像が蓄積手段に蓄積された不正遊技者の顔画像と照合済みではない場合、入店者の顔画像と、蓄積手段に蓄積された不正遊技者の顔画像とを照合する照合手段とを設けるようにさせることができ、人追跡サーバには、入店者の位置情報を取得する位置取得手段と、撮像手段により撮像された顔画像に、入店者の位置情報を対応付ける対応付手段とを設けるようにさせることができ、監視サーバには、顔画像に対応付けられた位置情報、顔画像、および照合結果をテーブルとして管理するテーブル管理手段と、テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知手段とを設けるようにさせることができる。

前記不正遊技者認識サーバには、照合結果を監視サーバに供給する第１の供給手段をさらに設けるようにさせることができ、人追跡サーバには、対応付手段により対応付けられた顔画像と位置情報とを監視サーバに供給する第２の供給手段をさらに設けるようにさせることができ、テーブル管理手段には、第１の供給手段および第２の供給手段により供給された、顔画像と対応付けられた位置情報、顔画像、および照合結果をテーブルとして管理させるようにすることができる。

前記第１の供給手段には、さらに、撮像手段により撮像された入店者の顔画像を人追跡サーバに供給させるようにすることができ、人追跡サーバより供給される撮像手段により撮像された顔画像が蓄積手段に蓄積された不正遊技者の顔画像と照合済みであるか否かを示す情報に基づいて、照合手段には、撮像手段により撮像された顔画像が蓄積手段に蓄積された不正遊技者の顔画像と照合済みではない場合、入店者の顔画像と、蓄積手段に蓄積された不正遊技者の顔画像とを照合させるようにすることができる。

前記対応付手段は、顔認識サーバより供給された、撮像手段により撮像された入店者の顔画像に、入店者の位置情報を対応付けるようにさせることができ、第２の供給手段には、対応付手段により顔画像に対応付けられた位置情報を監視サーバに供給すると共に、供給した位置情報に対応付けられた顔画像が、蓄積手段に蓄積された不正遊技者の顔画像と照合済みであるか否かを示す情報を監視サーバより取得し、さらに、顔画像認識サーバに供給させるようにすることができる。

前記テーブル管理手段には、顔画像に対応付けられた位置情報、顔画像、および照合結果に加えて、さらに、各位置情報が取得された時刻をテーブルとして管理させるようにすることができ、テーブルの位置情報と時刻情報とに基づいて、遊技者の軌跡を再生する再生手段をさらに設けるようにさせることができる。

本発明の監視システムの監視方法は、不正遊技者の顔画像を蓄積する蓄積ステップと、入店者の顔画像を撮像する撮像ステップと、撮像ステップの処理により撮像された顔画像が蓄積ステップの処理により蓄積された不正遊技者の顔画像と照合済みではない場合、入店者の顔画像と、蓄積ステップの処理により蓄積された不正遊技者の顔画像とを照合する照合ステップと、入店者の位置情報を取得する位置取得ステップと、撮像ステップの処理により撮像された顔画像に、入店者の位置情報を対応付ける対応付ステップと、顔画像に対応付けられた位置情報、顔画像、および照合結果をテーブルとして管理するテーブル管理ステップと、テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知ステップとを含むことを特徴とする。

本発明の第１のプログラムは、不正遊技者の顔画像を蓄積する蓄積ステップと、入店者の顔画像を撮像する撮像ステップと、撮像ステップの処理により撮像された顔画像が蓄積ステップの処理により蓄積された不正遊技者の顔画像と照合済みではない場合、入店者の顔画像と、蓄積ステップの処理により蓄積された不正遊技者の顔画像とを照合する照合ステップと、入店者の位置情報を取得する位置取得ステップと、撮像ステップの処理により撮像された顔画像に、入店者の位置情報を対応付ける対応付ステップと、顔画像に対応付けられた位置情報、顔画像、および照合結果をテーブルとして管理するテーブル管理ステップと、テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知ステップとを含む処理をコンピュータに実行させることを特徴とする。

本発明の不正遊技者認識サーバは、不正遊技者の顔画像を蓄積する蓄積手段と、入店者の顔画像を撮像する撮像手段と、撮像手段により撮像された顔画像が蓄積手段に蓄積された不正遊技者の顔画像と照合済みではない場合、入店者の顔画像と、蓄積手段に蓄積された不正遊技者の顔画像とを照合する照合手段とを備えることを特徴とする。

本発明の不正遊技者認識方法は、不正遊技者の顔画像を蓄積する蓄積ステップと、入店者の顔画像を撮像する撮像ステップと、撮像ステップの処理により撮像された顔画像が蓄積ステップの処理により蓄積された不正遊技者の顔画像と照合済みではない場合、入店者の顔画像と、蓄積ステップの処理により蓄積された不正遊技者の顔画像とを照合する照合ステップとを含むことを特徴とする。

本発明の第２のプログラムは、不正遊技者の顔画像を蓄積する蓄積ステップと、入店者の顔画像を撮像する撮像ステップと、撮像ステップの処理により撮像された顔画像が蓄積ステップの処理により蓄積された不正遊技者の顔画像と照合済みではない場合、入店者の顔画像と、蓄積ステップの処理により蓄積された不正遊技者の顔画像とを照合する照合ステップとを含む処理をコンピュータに実行させることを特徴とする。

本発明の人追跡サーバは、入店者の位置情報を取得する位置取得手段と、撮像された顔画像に、入店者の位置情報を対応付ける対応付手段とを備えることを特徴とする。

本発明の人追跡方法は、入店者の位置情報を取得する位置取得ステップと、撮像された顔画像に、入店者の位置情報を対応付ける対応付ステップとを含むことを特徴とする。

本発明の第３のプログラムは、入店者の位置情報を取得する位置取得ステップと、撮像された顔画像に、入店者の位置情報を対応付ける対応付ステップとを含む処理をコンピュータに実行させることを特徴とする。

本発明の監視サーバは、顔画像に対応付けられた位置情報、顔画像、および、入店者の顔画像と蓄積された不正遊技者の顔画像との照合結果をテーブルとして管理するテーブル管理手段と、テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知手段とを備えることを特徴とする。

本発明の監視方法は、顔画像に対応付けられた位置情報、顔画像、および、入店者の顔画像と蓄積された不正遊技者の顔画像との照合結果をテーブルとして管理するテーブル管理ステップと、テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知ステップとを含むことを特徴とする。

本発明の第４のプログラムは、顔画像に対応付けられた位置情報、顔画像、および、入店者の顔画像と蓄積された不正遊技者の顔画像との照合結果をテーブルとして管理するテーブル管理ステップと、テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知ステップとを含む処理をコンピュータに実行させることを特徴とする。

本発明の監視システムおよび監視方法、並びに第１のプログラムにおいては、不正遊技者の顔画像が蓄積され、入店者の顔画像が撮像され、撮像された顔画像が蓄積された不正遊技者の顔画像と照合済みではない場合、入店者の顔画像と、蓄積された不正遊技者の顔画像とが照合され、入店者の位置情報が取得され、撮像された顔画像に、入店者の位置情報が対応付けられ、顔画像に対応付けられた位置情報、顔画像、および照合結果がテーブルとして管理され、テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店が報知される。

本発明の不正遊技者認識サーバおよび不正者認識方法、並びに第２のプログラムにおいては、不正遊技者の顔画像が蓄積され、入店者の顔画像が撮像され、撮像された顔画像が蓄積された不正遊技者の顔画像と照合済みではない場合、入店者の顔画像と、蓄積された不正遊技者の顔画像とが照合される。

本発明の人追跡サーバおよび人追跡方法、並びに第３のプログラムにおいては、入店者の位置情報が取得され、撮像された顔画像に、入店者の位置情報が対応付けられる。

本発明の監視サーバおよび監視方法、並びに第４のプログラムにおいては、顔画像に対応付けられた位置情報、顔画像、および、入店者の顔画像と蓄積された不正遊技者の顔画像との照合結果がテーブルとして管理され、テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店が報知される。

不正遊技者の顔画像を蓄積する蓄積手段は、例えば、顔認識サーバの不正遊技者登録データベースであり、入店者の顔画像を撮像する撮像手段は、例えば、カメラであり、撮像手段により撮像された顔画像が蓄積手段に蓄積された不正遊技者の顔画像と照合済みではない場合、入店者の顔画像と、蓄積手段に蓄積された不正遊技者の顔画像とを照合する照合手段は、例えば、顔認識サーバの類似度計算部であり、入店者の位置情報を取得する位置取得手段は、例えば、人追跡サーバの位置情報抽出部であり、撮像手段により撮像された顔画像に、入店者の位置情報を対応付ける対応付手段は、例えば、人追跡サーバの対応付部であり、顔画像に対応付けられた位置情報、顔画像、および照合結果をテーブルとして管理するテーブル管理手段は、例えば、統合監視サーバのテーブル管理部であり、テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知手段は、例えば、統合監視サーバの出力部である。

顔認識サーバの類似度計算部などからなる照合手段は、カメラなどからなる撮像手段により撮像された顔画像が、不正遊技者登録データベースなどの蓄積手段に蓄積された不正遊技者の顔画像と照合済みではない場合にのみ、入店者の顔画像と、蓄積手段に蓄積された不正遊技者の顔画像とを照合することになる。

結果として、類似度の計算による不正遊技者の検出処理回数を制限することができるので、誤認識を低減でき、不正遊技者の検出率を向上させることが可能となる。また、類似度の計算回数が低減されるので、処理負荷の大きな顔認識処理の計算コストを低減させることが可能となる。

本発明によれば、誤認識を低減でき、不正遊技者の検出率を向上させることが可能となる。また、処理負荷の大きな顔認識処理の計算コストを低減させることが可能となる。

図１は、本発明に係る遊技店の監視システムの一実施の形態の構成を示す図である。

入口ステレオ画像センサ１−１乃至１−３および島ステレオ画像センサ２−１乃至２−１７（図４）は、配置位置の異なる２個のカメラから構成されるセンサであり、２個の配置の異なるカメラにより同一の領域を撮像することにより得られる、アングルの異なる画像を視差を利用して演算処理し、撮像された被写体の空間的な位置を検出し、人追跡サーバ５に供給する。尚、入口ステレオ画像センサ１−１乃至１−３および島ステレオ画像センサ２−１乃至２―１７は、それぞれ特に区別する必要がない場合、単に、入口ステレオ画像センサ１および島ステレオ画像センサ２と称するものとし、その他の構成についても同様に称するものとする。

より具体的には、入口ステレオ画像センサ１は、図２で示されるように、カメラ１ａ，１ｂにより構成され、それぞれが同一の領域を撮像し、演算処理部１ｃに出力する。演算処理部１ｃは、カメラ１ａ，１ｂより供給されたアングルの異なる画像を、視差を利用して演算処理することにより（いわゆる、三角法を用いた演算処理により）、撮像された画像内の被写体の空間的な位置を三次元の座標として求め、人ID付加部１ｄが、出入口より入店してきた被写体となる遊技者一人一人に対して、人IDを付して、人追跡サーバ５に供給する。また、入口ステレオ画像センサ１は、自らの監視領域から遊技者が移動するような場合、遊技者が移動した方向に隣接する監視領域を監視する島ステレオ画像センサ２に対して人IDを供給する。尚、人ID付加部１ｄは、出入口より入店してきた遊技者に対してのみ、人IDを付加するが、それ以外の遊技者、すなわち、一度人IDを付加した遊技者に対しては新たに人IDを付加しない。

島ステレオ画像センサ２は、図３で示されるように、上述した入口ステレオ画像センサ１と同様の原理によりカメラ２ａ，２ｂより供給されたアングルの異なる画像を、視差を利用して演算処理することにより（いわゆる、三角法を用いた演算処理により）、撮像された画像内の被写体の空間的な位置を三次元の座標として求め、人追跡サーバ５に供給する。

尚、島ステレオ画像センサ２は、入口ステレオ画像センサ１、または、隣接する領域の遊技者の位置を検出する島ステレオ画像センサ２より供給されてくる人IDを引き継いで使用するため、人ID付加部を備えていない。

すなわち、１個の入口ステレオ画像センサ１または島ステレオ画像センサ２が、被写体の空間的な位置を検出できる範囲には、店内において制限があるため、それぞれは、例えば、図４で示されるように配置される。すなわち、カメラ１ａ−１，１ｂ−１からなる入口ステレオ画像センサ１−１は、領域Ｚ１内の被写体、すなわち、遊技店に来店する領域を含む遊技者の空間的な位置を検出し、同様にして、カメラ２ａ−１，２ｂ−１からなる島ステレオ画像センサ２−１は領域Ｚ２内、カメラ２ａ−３，２ｂ−３からなる島ステレオ画像センサ２−３は領域Ｚ３内、カメラ２ａ−５，２ｂ−５からなるステレオ画像センサ２−５は領域Ｚ４内の、それぞれの遊技者の空間的な位置情報を検出する。尚、図４においては、入口ステレオ画像センサ１−１、および、島ステレオ画像センサ２−１，２−３，２−５のそれぞれの監視領域として、領域Ｚ１乃至Ｚ４が示されているのみであり、入口ステレオ画像センサ１−１乃至１−３および島ステレオ画像センサ２−１乃至２−１７について、全監視領域が示されていないが、それぞれ同様に監視領域が設定される。また、図４で示されるように、各監視領域は、例えば、斜線部で示されるように、重なり合うように設定されている。尚、図４は、遊技店内の入口ステレオ画像カメラ１、島ステレオ画像カメラ２、およびカメラ３の配置例を示す遊技店の上面図である。

入口ステレオ画像センサ１および島ステレオ画像センサ２は、それぞれの監視領域内の遊技者の位置情報を人ID毎に管理しているが、遊技者が移動することによりそれぞれの監視領域から逸脱してしまい、人IDが付された状態で監視できなくなるといった事態が考えられる。このため、上述したように、監視領域は、いずれも重なり合うように設定されている。

すなわち、例えば、図４中の左上部の出入口において、遊技者が来店するとカメラ１ａ−１，１ｂ−１からなる入口ステレオ画像センサ１−１により（人ID付加部１ｄ−１により）人ID＝Ａが付されるものとする。この後、遊技者が移動し、例えば、領域Ｚ３方向に侵入するような場合、入口ステレオ画像センサ１−１は、移動した遊技者の位置情報と人IDを、遊技者が移動した隣接する監視領域を監視するカメラ２ａ−３，２ｂ−３からなる島ステレオ画像センサ２−３に供給する。この結果、島ステレオ画像センサ２−３においては、入口ステレオ画像センサ１−１により位置情報が検出されていた遊技者と同一の遊技者を同一の人IDで監視することが可能となる。

このように、入口ステレオ画像センサ１−１乃至１−３および島ステレオ画像センサ２−１乃至２−１７は、相互に位置情報と人IDについて連携しながら遊技者一人一人の位置情報を監視し続けることができる構成となっている。したがって、出入口付近の領域を監視している入口ステレオ画像センサ１−１乃至１−３は、新たに来店した遊技者について人IDを新たに付するが、その他の島ステレオ画像センサ２−１乃至２−１６については、遊技者の移動に伴って、いずれかの出入口付近の領域を監視する入口ステレオ画像センサ１よりリレー形式で人IDが供給されることになる。尚、本実施例においては、入口ステレオ画像センサ１または島ステレオ画像センサ２は、２個のアングルの異なるカメラにより撮像された画像を視差を考慮して処理する例について説明してきたが、視差を考慮して、被写体の空間的な位置を求められる構成であればよいので、例えば、アングルの異なるカメラをさらに多くして撮像し、それぞれの視差を考慮して処理することにより、空間的な座標を求めるようにしてもよい。尚、入口ステレオ画像センサ１および島ステレオ画像センサ２については、図４の例においては合計２０個が設けられている例について説明しているが、監視領域を変えて、その他の台数を設置するようにしてもよい。さらに、遊技客の位置を検出する機能としては、入口ステレオ画像センサ１や島ステレオ画像センサ２に限らず、遊技客の空間的な位置が求められるものであれば、どのようなものでもよい。

カメラ３−１乃至３−１５は、図４で示されるように、遊技店の出入口付近、または、遊技店内の遊技台などが設置される島設備の間に設けられた監視カメラであり、店内の夫々の位置で遊技者を撮像し、撮像した画像を画像処理ユニット４−１乃至４−１５に供給する。尚、図４の例においては、１５箇所に設置される場合の例が示されているが、設置個所の数はそれ以外の数であってもよい。また、カメラ３は、それぞれ望遠機能などを備えている。尚、遊技店内全体の範囲をいずれかのカメラ３で撮像できるように配置されていることが望ましい。

画像処理ユニット４は、カメラ３より供給されてくる撮像された画像に基づいて、画像内の来店する遊技者の顔画像を抽出し、顔認証サーバ６に供給する。この後、顔認証サーバ６は、供給された顔画像と予め登録された不正遊技者の顔画像とを比較して、供給された顔画像の遊技者が不正遊技者であるか否かを判定する不正遊技者判定処理を実行することになるが、入店した遊技者の顔画像と不正遊技者の顔画像との比較による不正遊技者判定処理は一度なされればよいものである。そこで、画像処理ユニット４は、抽出した顔画像を顔認証サーバ６に供給する前に人追跡サーバ５に不正遊技者判定処理が済んでいるのか否かを問い合わせる。

これに応じて、人追跡サーバ５は、（詳細は後述するが）供給された顔画像が顔認識サーバ６によって、既に不正遊技者判定処理が済んでいるか否かを統合監視サーバ７に問い合わせ、問い合わせ結果となる情報（不正遊技者判定が済んでいるか否かの情報）、およびその顔画像に対応する人IDを含む照合処理情報を画像処理ユニット４に供給する。そこで、画像処理ユニット４は、この供給されてきた照合処理情報に基づいて、照合処理が終了していない顔画像のみを、顔認識サーバ６に供給する。尚、照合処理情報には、顔画像に対応する遊技者の位置情報に対応付けられて設定されている人IDが付されて供給されるので、画像処理ユニット４は、その供給されてきた人IDを撮像した顔画像に付して顔認識サーバ６に供給する。一方、不正遊技者判定処理が済んでいると判定された場合、画像処理ユニット４は、抽出した顔画像を破棄する。

人追跡サーバ５は、入口ステレオ画像センサ１または島ステレオ画像センサ２より供給される人IDが付された位置情報を取得し、人IDと位置情報からなる位置管理テーブルを設定し、順次供給されてくる各遊技者毎の位置情報を人IDに対応付けて、取得した時刻情報と共に管理する。また、人追跡サーバ５は、画像処理ユニット４より供給されてくる顔画像と、入口ステレオ画像センサ１または島ステレオ画像センサ２より供給されてくる位置情報とに基づいて、顔画像ごとに位置情報を対応付け、対応付けられた人ID、顔画像、および位置情報を統合監視サーバ７に供給する。さらに、人追跡サーバ５は、統合監視サーバ７に対して供給した画像処理ユニット４からの人ID、顔画像、および位置情報に基づいて、統合監視サーバ７より供給されてくる照合処理情報を取得し、画像処理ユニット４に供給する。

顔認識サーバ６は、画像処理ユニット４より供給された人IDおよび顔画像を取得し、予め登録されている不正遊技者の顔画像と比較して照合することにより、供給された顔画像が不正遊技者のものであるか否かを判定する。また、顔認識サーバ６は、撮像されている顔画像の撮像状態、例えば、下を向いている、暗いなどの撮像状態を検出する。顔認識サーバ６は、人IDと共に判定結果、顔画像、および撮像状態の情報を統合監視サーバ７に供給する。

統合監視サーバ７は、人追跡サーバ５より供給される人ID、顔画像、および位置情報を取得すると共に、顔認識サーバ６より供給される人ID、顔画像、不正遊技者判定処理に基づいた判定結果の情報を取得し、それらを統合監視テーブルとして管理する。また、統合監視サーバ７は、人追跡サーバ５より供給された人ID、顔画像、および、位置情報に基づいて、不正遊技者判定処理による判定結果が出ているか否かを示す照合処理情報を生成し、人追跡サーバ５に供給する。尚、この例においては、人追跡サーバ５からも顔認識サーバ６からも同一の顔画像が供給される構成となっているが、いずれか一方から供給されるようにしてもよい。

また、統合監視サーバ７は、統合監視テーブルを監視し、判定結果の欄に不正遊技者が検出された場合、人IDに対応する不正遊技者を示す顔画像、および位置情報に基づいて、不正遊技者来店情報を発生し、遊技店の係員に対して報知する。また、カメラの前を所定回数以上通過して照合ができなかった遊技者が検出された場合（後述する不正遊技者判定処理の判定結果として再確認が報告された回数が所定回数以上の遊技者が検出された場合）、対応する人IDの遊技者の画像（ここでは、下を向いていたり、横を向いていたりして、不正遊技者判定処理ができない画像）と位置情報に基づいて、未確認遊技者来店情報を発生し、遊技店の係員に対して報知する。

次に、図５を参照して、画像処理ユニット４の一実施の形態の構成について説明する。

画像取得部２１は、カメラ２より供給されてくる撮像された画像を取得し、顔画像抽出部２２に供給する。顔画像抽出部２２は、画像取得部２１より供給された画像を解析し、遊技者の顔画像となる部分を抽出し、各顔画像と画像中の位置情報とを送信部２３に供給する。送信部２３は、顔画像と画像中の位置情報に加えて、撮像された画像を人追跡サーバ５に供給する。さらに、これに応じて、送信部２３は、人追跡サーバ５より供給されてきた不正遊技者判定処理がなされたか否かを示す照合処理情報を取得する。送信部２３は、照合処理情報に基づいて不正遊技者判定処理が済んでいない場合にのみ、人追跡サーバ５より供給される人IDを顔画像に付して、顔認識サーバ６に送信する。

次に、図６を参照して、人追跡サーバ５の一実施の形態の構成について説明する。

位置情報抽出部６１は、入口ステレオ画像センサ１または島ステレオ画像センサ２より供給されてくる遊技者の人IDと対応する遊技店内での位置情報を取得し、対応付部６３に供給する。また、位置情報抽出部６１は、入口ステレオ画像センサ１または島ステレオ画像センサ２より供給される遊技者の人IDと位置情報、並びにそれらの時刻情報を位置管理テーブル６４に記憶させる。

顔画像取得部６２は、画像処理ユニット４より供給される顔画像と撮像された画像内の位置情報を取得し、対応付部６３に供給する。

対応付部６３は、入口ステレオ画像センサ１または島ステレオ画像センサ２より供給されてくる人ID毎の位置情報と、画像処理ユニット４より供給される顔画像とを対応付けて、人ID、位置情報、および顔画像を位置情報連絡部６５に供給する。

位置情報連絡部６５は、対応付部６３より供給された人ID、位置情報、および顔画像を統合監視サーバ７に供給する。人ID、位置情報、および顔画像が統合監視サーバ７に供給されると、統合監視サーバ７は、送信されてきた人IDに基づいて、対応する顔画像が不正遊技者判定処理済みであるか否かを判定し、判定結果としての照合処理情報を返信する。これに応じて、位置情報連絡部６５は、この照合処理情報を取得し、この照合処理情報を画像処理ユニット４に供給する。また、照合処理情報が不正遊技者判定処理済みではない場合、位置情報連絡部６５は、照合処理情報と共に、人IDを画像処理ユニット４に供給する。

次に、図７を参照して、顔認識サーバ６の一実施の形態の構成について説明する。

顔画像取得部８１は、画像処理ユニット４より供給される顔画像と人IDを取得し、撮像状態判定部８２および類似度計算部８３に供給する。撮像状態判定部８２は、供給された顔画像に対応して、撮像状態（例えば、照合処理が確実にできる状態の場合には、「良」であるとか、顔の向きが悪く、照合処理に向いていない場合、「不良」であるといった撮像状態）を判定し、判定結果を供給された顔画像および人IDに付して類似度計算部８３および判定部８５に供給する。

類似度計算部８３は、撮像状態が「良」である場合（後述する不正遊技者判定処理が可能である場合）、顔画像取得部８１より供給された顔画像と不正遊技者登録データベース８４に登録されている顔画像とを一つ一つ比較して照合し、類似度を計算して、計算結果を判定部８５に供給する。より具体的には、類似度計算部８３は、例えば、目と目の間隔、あごから額までの長さと、あごから鼻までの長さの比率などの各種の顔の特徴量を求めて、それぞれの差分和または平均比率などを類似度として求めて、人ID、顔画像、および撮像状態と共に判定部８５に供給する。尚、類似度の計算方法は、その他の方法であってもよいことは言うまでもない。また、不正遊技者登録データベース８４に登録されている不正遊技者の顔画像については、新たな不正遊技者を随時更新できるようにしても良い。

判定部８５は、類似度計算部８３より供給された人IDが付された各顔画像毎の類似度を所定の閾値と比較し、比較結果に基づいて、供給された顔画像が不正遊技者の顔画像に似ているか否かを判定し、判定結果を統合監視サーバ７に供給する。例えば、上述したように、撮像された顔画像と不正遊技者として登録されている顔画像のそれぞれの特徴量における差分和などの場合、判定部８５は、閾値よりも小さければ同一人物であるとみなすことになり、または、平均比率などの場合、０乃至１の範囲で所定の値以上であって、１に近い値であれば、同一の人物であるとみなすことができる。さらに、判定部８５は、撮像状態が「不良」であると判定された場合、照合処理が不能であり、再確認が必要である旨を判定結果とする。

次に、図８を参照して、統合監視サーバ７の一実施の形態の構成について説明する。

位置情報取得部１０１は、人追跡サーバ５より供給される人ID、位置情報、および顔画像を取得し、テーブル管理部１０４に供給する。顔画像取得部１０２は、顔認識サーバ６より供給された顔画像、人ID、および撮像状態が付された判定結果のうち、顔画像、人ID、および撮像状態を抽出してテーブル管理部１０４に供給する。判定結果取得部１０３は、顔認識サーバ６より供給された顔画像、人ID、および撮像状態が付された判定結果のうち、判定結果のみを抽出し、テーブル管理部１０４に供給する。

テーブル管理部１０４は、位置情報取得部１０１より供給される人ID、位置情報、および顔画像、並びに、顔画像取得部１０２および判定結果取得部１０３より供給される顔画像、人ID、および撮像状態が付加された判定結果を、双方に共通する人IDにより対応付けて、統合監視テーブル１０５で管理する。統合監視テーブル１０５は、より詳細には、顔画像、および撮像状態が付加された判定結果が人IDに対応付けられた判定結果テーブル１０５ａと、位置情報、および時刻情報が人IDに対応付けられた位置管理テーブル１０５ｂ（人追跡サーバ５の位置管理テーブル６４と同様のもの）とからなるテーブルである。尚、顔画像については、位置情報取得部１０１からも、顔画像取得部１０２からも供給される構成となっているがいずれか一方の顔画像であればよい。すなわち、顔画像については、人追跡サーバ５からか、または、顔認識サーバ６のいずれか一方から送信されるようにしてもよい。また、テーブル管理部１０４は、位置情報取得部１０１より人ID、位置情報、および顔画像が供給された場合、統合監視テーブル１０５を参照して、その人IDの顔画像が照合済みであるか否か（不正遊技者判定処理済みか否か）を確認し、人IDを付して、照合処理情報として人追跡サーバ５に供給する。

監視部１０６は、統合監視テーブル１０５を監視して、判定結果の項目に不正遊技者であることを示す情報がある場合、報知情報を生成し、ディスプレイやスピーカなどからなる出力部１０７に供給して、遊技店の係員に対して不正遊技者が来店したことを報知する。また、カメラの前を通過した回数（後述する不正遊技者判定処理ができず、判定結果が再確認と報告された回数）が所定回数以上の遊技者は、意図的にカメラ３から照合できるような顔画像を撮像されないように振舞っている可能性があり、不正遊技者である可能性があるので、監視部１０６は、未確認者が来店していることを報知する。

また、キーボードやボタンからなる操作部１０９が操作されることにより、再生部１０８は、統合監視テーブル１０５の不正遊技者として報知された遊技者の人IDに基づいて、対応する位置情報と時刻情報を時間の変化に合わせて行動軌跡を出力部１０７に出力させる。

次に、図９のフローチャートを参照して、図１の監視システムにおける統合監視テーブル管理処理について説明する。

ステップＳ１において、カメラ３は、所定の時間が経過したか否かを判定し、所定の時間が経過するまで、その処理を繰り返す。所定の時間としては、監視のサンプリングレートにより任意の時間に設定できるようにしてもよく、例えば、250ｍ秒くらいでもよい。

ステップＳ１において、所定の時間が経過したと判定された場合、ステップＳ２において、カメラ３は、設置されている範囲の画像を撮像し、撮像した画像を画像処理ユニット４に供給する。画像処理ユニット４の画像取得部２１は、供給された画像を取得し、顔画像抽出部２２に供給する。

ステップＳ３において、顔画像抽出部２２は、供給された画像より遊技者の顔画像を抽出し、送信部２３に供給する。より具体的には、顔画像抽出部２２は、例えば、撮像された画像の色などから肌が露出した部分であって、目や鼻といった特徴的な部位の配置などから顔画像を抽出して、送信部２３に供給する。さらに、送信部２３は、顔画像を人追跡サーバ５に送信する。

ステップＳ２１において、人追跡サーバ５の位置情報抽出部６１は、入口ステレオ画像センサ１または島ステレオ画像センサ２より供給されてくる人IDが付された位置情報を取得し、対応付部６３に供給する。

ステップＳ２２において、顔画像取得部６２は、例えば、ステップＳ４の処理により送信されてくる顔画像を取得し、対応付部６３に供給する。

ステップＳ２３において、対応付部６３は、人IDが付された位置情報と、顔画像とを対応付けて、位置情報連絡部６５に供給する。

すなわち、入口ステレオ画像センサ１または島ステレオ画像センサ２により供給される位置情報は、図１０で示されるように、例えば、人ID＝１では、座標（Ｘ₁，Ｙ₁，Ｚ₁）であり、人ID＝２では、座標（Ｘ₂，Ｙ₂，Ｚ₂）、人ID＝３では、座標（Ｘ₃，Ｙ₃，Ｚ₃）である。これに対して、カメラ３で撮像される画像では、図１１で示されるように、２次元の画像内における遊技者の顔画像の位置関係（例えば、カメラ３からみて、顔画像Ｃの遊技者は、顔画像Ａの遊技者の後ろにいて、顔画像Ｂの遊技者は、顔画像Ａの遊技者の左側にいるといった位置関係）が求められることになる。従って、カメラ３のアングルから撮像される空間内における位置関係と、入口ステレオ画像センサ１または島ステレオ画像センサ２により検出される位置情報とが一致するように顔画像と、人IDが付された位置情報とを対応付けることにより、例えば、図１２で示されるように、人ID＝１の位置には、顔画像Ｂの遊技者が、人ID＝２の位置には、顔画像Ａの遊技者が、人ID＝３の位置には、顔画像Ｃの遊技者がそれぞれ対応付けられる。

ステップＳ２４において、位置情報連絡部６５は、対応付部６３より供給された、上述したように対応付けられた人ID、位置情報、および顔画像とを統合監視サーバ７に送信し、人IDの顔画像の不正遊技者判定処理が完了しているか否かを問い合わせる。

この処理に応じて、後述するステップＳ６１乃至Ｓ６４の処理において、統合監視サーバ７は、人追跡サーバ５より供給される人IDに対応付けられた位置情報、および顔画像と共に、顔画像の不正遊技者判定処理が完了しているか否かの問い合わせに応答する。

ステップＳ２５において、人追跡サーバ５の位置情報連絡部６５は、統合監視サーバ７より送信されてくる照合処理情報が、不正遊技者の判定処理が完了しているか否か、すなわち、判定済み（照合済み）であるか否かを判定する。

ステップＳ２５において、例えば、後述するステップＳ６３の処理により統合監視サーバ７から送信されてきた照合処理情報に基づいて、不正遊技者判定処理が未処理である、すなわち、未判定であると判定された場合、ステップＳ２６において、問い合わせてきた顔画像に対応する人IDと共に未処理であることを示す照合処理情報を画像処理ユニット４に送信する。

さらに、ステップＳ２７において、位置情報連絡部６５は、対応付部６３を制御して不正遊技者の判定処理が済んでいない遊技者の位置情報を、位置管理テーブル６４に蓄積させる。より詳細には、対応付部６３は、人IDが付された位置情報を位置管理テーブル６４として登録する。例えば、位置管理テーブル６４は、図１３で示されるように登録される。図１３においては、左側が人ID、中央が位置情報、右側が時刻情報を示しており、人ID＝１の、時刻１０：１０：１０：００における位置情報が、（ｘ_a，ｙ_a，ｚ_a）であることが示されており、人ID＝２の、時刻１１：１１：１１：００における位置情報が、（ｘ_b，ｙ_b，ｚ_b）であることが示されており、人ID＝３の、時刻１２：１２：１２：００における位置情報が、（ｘ_c，ｙ_c，ｚ_C）であることが示されている。尚、ここでは、ＸＹ平面が床面であり、Ｚ方向は高さであるものとする。尚、時刻情報におけるAA：BB：CC：DDは、AA時BB分CC秒DD/100秒を示している。

一方、ステップＳ２５において、例えば、後述するステップＳ６４の処理により統合監視サーバ７から送信されてきた照合処理情報に基づいて、不正遊技者判定処理が済んでいる、すなわち、判定済みであると判定された場合、ステップＳ２８において、画像処理ユニット４より問い合わせてきた顔画像が処理済みであることを示す照合処理情報を画像処理ユニット４に送信する。

すなわち、ステップＳ２５の処理により、不正遊技者の判定が済んでいないということは、その人IDに対応する遊技者は、不正遊技者である可能性が残されているとも言えるので、ステップＳ２７において、位置情報が蓄積され、ステップＳ２５において、不正遊技者判定が済んでいると判定された場合には、それ以上の不正遊技者判定が必要ないため、位置情報を蓄積しないものとする（ステップＳ２８により判定結果のみを送信して、位置情報を蓄積しない）。

ステップＳ６において、画像処理ユニット４の送信部２３は、人追跡サーバ５より供給されてきた通知が、不正遊技者判定処理が済んでいるか否か、すなわち、判定済み（照合済み）であったか否かを判定する。ステップＳ６において、例えば、ステップＳ２８の処理により判定済み（照合済み）であると判定された場合、その処理は、ステップＳ１に戻り、それ以降の処理が繰り返される。

一方、ステップＳ６において、例えば、ステップＳ２５の処理により未判定であると判定された場合、送信部２３は、併せて供給されてきた人IDを顔画像に付加して、その顔画像を顔認識サーバ６に送信する。

ステップＳ４１において、顔認識サーバ６の顔画像取得部８１は、人IDが付加された顔画像を取得する。ステップＳ４２において、顔画像抽出部８１は、供給された顔画像のうち、いずれか未処理の１つを抽出し、撮像状態判定部８２に供給する。

ステップＳ４３において、撮像状態判定部８２は、供給された人IDが付された顔画像に基づいて、撮像状態を判定する。より具体的には、撮像状態判定部８２は、例えば、目、鼻、口、耳などの配置を幾何学的な配置や、撮像されたときの明るさなどを認識する。

ステップＳ４４において、撮像状態判定部８２は、撮像状態に基づいて、顔が撮像された状態が不正遊技者の顔画像と照合する不正遊技者判定処理が可能であるか否かを判定し、「良」または「不良」などの判定結果を判定部８５に供給する。

ステップＳ４４において、不正遊技者の顔画像と照合する不正遊技者判定処理が可能であると判定された場合、ステップＳ４５において、不正遊技者判定処理が実行される。

ここで、図１４のフローチャートを参照して、不正遊技者判定処理について説明する。

ステップＳ８１において、類似度計算部８３は、不正遊技者登録データベース８４に予め登録されている各不正遊技者の顔画像と、抽出された顔画像との類似度を計算する。より具体的には、類似度計算部８３は、例えば、目と目の間隔、あごから額までの長さと、あごから鼻のまでの長さの比率などの各種の顔の特徴量を求めて、それぞれの差分和または平均比率などを類似度として判定部８５に供給する。

ステップＳ８２において、判定部８５は、類似度の最も高いものは所定値以上であるか否かを判定する。すなわち、ここでは、類似度が高ければ高いほど、不正遊技者の顔画像と、抽出された顔画像とが一致しているものとするが、もちろん、類似度の設定により不正遊技者の顔画像と一致しているか否かの判定は異なる場合がある。

ステップＳ８２において、類似度が最も高いものは所定値以上であると判定された場合、ステップＳ８３において、判定部８５は、抽出された顔画像が不正遊技者の顔画像であることを判定結果として設定する。

ステップＳ８２において、類似度が最も高いものは所定値以上ではないと判定された場合、ステップＳ８４において、判定部８５は、抽出された顔画像が不正遊技者の顔画像ではないことを判定結果として設定する。

以上の処理により、画像処理ユニット４より供給された画像に含まれる顔画像が不正遊技者の顔画像であるか否かが判定される。

ここで、図９のフローチャートの説明に戻る。

ステップＳ４４において、判定不能であると判定された場合、ステップＳ４６において、判定部８５は、要再確認を判定結果に設定し、その処理は、ステップＳ４７に進む。

ステップＳ４７において、顔画像取得部８１は、供給された顔画像のすべてが不正遊技者の顔画像と照合されたか否か、すなわち、不正遊技者判定処理されたか否かを判定し、全て判定処理されていない場合、その処理は、ステップＳ４２に戻り、それ以降の処理が繰り返される。ステップＳ４７において、全ての判定処理がなされたと判定された場合、その処理は、ステップＳ４８に進む。

ステップＳ４８において、判定部８５は、人ID、顔画像、撮像状態、および判定結果を統合監視サーバ７に送信する。尚、判定部８５は、判定結果が不正遊技者であった場合、最も類似度の高い登録された不正遊技者の顔画像および類似度の情報も併せて統合監視サーバ７に送信する。

一方、上述したステップＳ２４の処理に応じて、ステップＳ６１において、統合監視サーバ７の位置情報取得部１０１は、人追跡サーバ５より供給される人IDに対応付けられた顔画像と共に、顔画像の不正遊技者判定処理が完了しているか否かの問い合わせを取得し、テーブル管理部１０４に供給する。

ステップＳ６２において、テーブル管理部１０４は、統合監視テーブル１０５を参照して、問い合わせのあった人IDの判定結果を検索し、不正遊技者判定処理が済んでいるか否かを判定する。ステップＳ６２において、例えば、通常、最初の処理においては、統合監視テーブル１０５には、不正遊技者の判定処理が記録されていないことになるので、不正遊技者の判定処理が済んでいないと判定され、その処理は、ステップＳ６３に進む。

ステップＳ６３において、テーブル管理部１０４は、問い合わせのあった顔画像に対応する人IDと共に、未だに不正遊技者判定処理が処理済みではないことを示す照合処理情報を人追跡サーバ５に通知する。

ステップＳ６５において、統合監視サーバ７の顔画像取得部１０２は、顔認識サーバ６より供給される人ID、顔画像、撮像状態、および判定結果のうち、人IDが付加された顔画像、および撮像状態の情報を取得し、テーブル管理部１０４に供給する。また、判定結果取得部１０３は、顔認識サーバ６より供給される人ID、顔画像、撮像状態、および判定結果のうち、判定結果を取得し、テーブル管理部１０４に供給する。

すなわち、上述したように、不正遊技者判定処理が済んでいない場合、画像処理ユニット４が顔画像と人IDを顔認識サーバ６に供給し、この顔画像に基づいて、顔認識サーバ６が人ID、顔画像、撮像状態、および判定結果を供給することになるので、顔画像取得部１０２は、この顔認識サーバ６より供給される人ID、顔画像、撮像状態、および判定結果のうち、人IDが付加された顔画像、および撮像状態の情報を取得し、判定結果取得部１０３は、判定結果を取得することになる。

ステップＳ６６において、テーブル管理部１０４は、ステップＳ６１の処理で位置情報取得部１０１より供給された人IDが付加された位置情報、および時刻情報を位置管理テーブル１０５ｂとして、統合監視テーブル１０５に格納させる。また、テーブル管理部１０４は、顔画像取得部１０２より供給された人IDが付された顔画像、撮像状態の情報、並びに、判定結果取得部１０３より供給された不正遊技者判定処理の判定結果の情報に基づいて、人IDに対応付けて、顔画像、撮像状態、判定結果を判定結果テーブル１０５ａとして統合監視テーブル１０５に記録させる（判定結果テーブル１０５ａおよび位置管理テーブル１０５ｂのいずれにおいても、初回の場合は登録処理となり、それ以降の場合、蓄積されていくことになる）。

ここで、位置管理テーブル１０５ｂは、図６の位置管理テーブルと同様である。また、判定結果テーブル１０５ａは、例えば、図１５で示されるようなテーブルである。すなわち、図中の左から人ID、顔画像、撮像状態、および判定結果が示されており、最上段では、人ID＝１に対応する顔画像が示されている。また、撮像状態が「良」であり、判定結果が「済」として記され、不正遊技者ではなかったことが示されている。

上から２段目では、人ID＝２に対応する顔画像が示されている。また、撮像状態が「良」であり、判定結果が「済（不正遊技者）」として記され、不正遊技者であったことが示されている。

さらに、上から３段目では、人ID＝３に対応する顔画像が示されている。また、撮像状態が「不良（顔向き不良）」であり、判定結果が「再確認 ２」として記され、不正遊技者であるか否かが不明であり、判定結果として再確認が報告された回数（不正遊技者判定ができなかった回数）が２回であることが示されている。

また、上から４段目では、人ID＝４に対応する顔画像が存在せず、顔画像が撮像できていないことが示されている。また、撮像状態が「顔画像なし」であり、判定結果が「再確認 ３」として記され、不正遊技者であるか否かが不明であり、判定結果として再確認が報告された回数（不正遊技者判定ができなかった回数）が３回であることが示されている。

尚、判定結果が不正遊技者であった場合、類似度が最も高い不正遊技者の顔画像と類似度の情報も送信されてくることになるので、例えば、図１５の撮像状態の欄に、それらの情報を登録するようにしてもよいし、統合監視テーブル１０５に新たな別欄を設けて登録させるようにしても良い。

一方、ステップＳ６２において、不正遊技者判定が済んでいないと判定された場合、ステップＳ６４において、テーブル管理部１０４は、問い合わせのあった顔画像に対応する不正遊技者判定処理が処理済みであることを示す照合処理情報を人追跡サーバ５に通知する。

以上の処理により、カメラ３で撮像された画像内の顔画像の遊技者が、それぞれ人IDに対応付けられて位置情報、顔画像、および判定結果が統合監視テーブル１０５に集約されることにより、一括して遊技者の顔画像による不正遊技者の判定処理を管理することが可能となる。尚、統合監視テーブル１０５における判定結果テーブル１０５ａと位置管理テーブル１０５ｂの情報は、いずれも人ID毎に管理されているため、判定結果テーブル１０５ａで管理される顔画像、撮像状態、および判定結果と、位置管理テーブル１０５ｂで管理される位置情報、および時刻情報は、人IDにより１つのテーブル（統合監視テーブル１０５）として管理することが可能になる。

さらに、以上の処理により、カメラ３により撮像された顔画像のうち、既に不正遊技者判定処理が完了したものについては、顔認識サーバ６に送信されることがなくなるため、処理負荷の大きな類似度の計算を省略させることができ、監視システム全体として処理負荷を低減させることが可能になる。

また、ステップＳ６２の処理により、不正遊技者判定処理が済んでいない遊技者の位置情報は蓄積されていくが、それ以外の遊技者の位置情報は蓄積されないことになるため、位置管理テーブル６４および統合監視テーブル１０５の容量を不要に必要としないため、装置のコストを低減させると共に、各種の検索処理を高速化することが可能となる。

さらに、不正遊技者判定処理が済んだ顔画像については、不要な不正遊技者判定処理をする必要がなくなるので、判定処理に伴う誤判定を低減させることができ、結果として、不正遊技者の検出率を向上させることが可能となる。

尚、ステップＳ６６の処理については、不正遊技者判定処理ができない顔画像の撮像状態が、既存の状態よりも良好である場合にのみ、顔画像を更新するようにしてもよく、このようにすることで、統合監視テーブル１０５には、最も良好な状態の顔画像のみを記録させておくことが可能となり、後述する未確認遊技者来店情報を提示する際、不正遊技者判定処理が不可能であっても、最も良好な状態の顔画像を提示することができるので、係員による未確認遊技者の探索を容易にすることが可能となる。

次に、図１６のフローチャートを参照して、統合監視サーバ７による不正遊技者、または、不正遊技者判定処理ができない未確認遊技者の監視処理について説明する。

ステップＳ２０１において、監視部１０６は、統合監視テーブル１０５を参照して、判定結果の欄に注目し、判定結果が済であって、不正遊技者が存在するか否かを判定し、例えば、不正遊技者が存在する場合、すなわち、不正遊技者判定結果が不正遊技者であった場合、その処理は、ステップＳ２０２に進む。

ステップＳ２０２において、監視部１０６は、統合監視テーブル１０５より、不正遊技者として判定されている人IDに対応する一連の情報を出力部１０７に供給する。出力部１０７は、監視部１０６より供給された人IDに対応する一連の情報により、例えば、図１７で示されるような不正遊技者来店情報を表示して、不正遊技者の来店を報知する。

図１７においては、図中左上に人ID表示欄２０１が設けられており、今の場合、「人ID＝AA」と表示されており、不正遊技者が統合監視テーブル１０５の人ID＝「AA」として登録されている人物であることが示されている。人ID表示欄２０１の下には、顔画像表示欄２０２および登録画像表示欄２０３が設けられており、それぞれ顔画像が表示されている。顔画像表示欄２０２には、人ID＝AAに対応する顔画像が表示され、登録画像表示欄２０３には、顔画像表示欄２０２に表示された遊技者と最も類似度の高い、予め登録されている不正遊技者の顔画像が表示されている。

顔画像表示欄２０２の下には、条件表示欄２０４が設けられている。今の場合、条件表示欄２０４には、「顔検出条件：良」、および、「顔類似度：７０％」と表示されており、それぞれ撮像状態が「良」であって、類似度の計算結果が７０％であることが示されている。

図１７の右側の欄には、現在位置表示欄２０５が設けられており、人ID＝AAに対応する最新の位置情報に基づいて、今現在不正遊技者と判定された遊技者の遊技店内の位置が、例えば、ポイント２０５ａとして示されている。

条件表示欄２０４の下には、行動軌跡表示ボタン２０６が設けられており、不正遊技者として判定された遊技者の行動軌跡を再生させたい場合、操作部１０９などにより操作されると（押下されると）、後述する行動軌跡再生処理が実行される。

現在位置表示欄２０５の下には、確認ボタン２０７が設けられており、不正遊技者来店情報の表示を終了させたいとき、操作されることにより、不正遊技者来店情報の表示が終了する。

以上の処理により、統合監視テーブル１０５に不正遊技者が検出されたことを示す判定結果が登録された時点で、出力部１０７より不正遊技者来店情報が表示されることにより、遊技店の係員は、不正遊技者が来店したことを認識することが可能となり、さらに、顔画像や現在位置の情報に基づいて、不正遊技者を迅速に探し出すことが可能となる。

尚、出力部１０７にスピーカなどが設けられている場合、警告を示す音声を発生させるようにしても良く、このようにすることで、さらに、迅速に不正遊技者の来店を認識することが可能となる。

ここで、図１６のフローチャートの説明に戻る。

ステップＳ２０３において、監視部１０６は、統合監視テーブル１０５を参照して、判定結果の欄に注目し、判定結果が未確認（再確認）であって、判定結果として再確認が報告された回数、すなわち、カメラ３の前を通過した回数が所定回数以上の遊技者が存在するか否かを判定し、存在する場合、すなわち、所定時間以上不正遊技者判定処理が不能な遊技者がいる場合、その処理は、ステップＳ２０４に進む。

ステップＳ２０４において、監視部１０６は、統合監視テーブル１０５より、不正遊技者判定処理ができない遊技者の人IDに対応する一連の情報を出力部１０７に供給する。出力部１０７は、監視部１０６より供給された人IDに対応する一連の情報により、例えば、図１８で示されるような未確認遊技者来店情報を表示して、未確認遊技者の来店を報知する。

図１８においては、図中右上に人ID表示欄２２１が設けられており、今の場合、「人ID＝BB」と表示されており、未確認者が統合監視テーブル１０５の人ID＝「BB」として登録されている人物であることが示されている。人ID表示欄２２１の下には、顔画像表示欄２２２が設けられている。顔画像表示欄２２２には、人ID＝BBに対応する、不正遊技者判定処理ができない画像が表示されている。尚、図１８においては、顔としては認識できない、例えば、後ろを向いていたり、横を向いているなどしている画像が表示されている例を示している。このように表示することで、不正遊技者判定処理ができなくても、係員が背格好、服装、顔色、または髪型などの特徴を認識することができるので、目視により不正遊技者の可能性の高い遊技者を捜索することが可能となる。

図１８の右側の欄には、現在位置表示欄２２３が設けられており、人ID＝BBに対応する最新の位置情報に基づいて、今現在不正遊技者判定処理ができない遊技者の遊技店内の位置が、例えば、ポイント２２３ａとして示されている。

顔画像表示欄２２２の下には、行動軌跡表示ボタン２２４が設けられており、不正遊技者判定処理ができない遊技者の行動軌跡を再生させたい場合、操作部１０９などで操作されると（押下されると）、後述する行動軌跡再生処理が実行される。

現在位置表示欄２２３の下には、確認ボタン２２５が設けられており、未確認遊技者来店情報の表示を終了させたいとき、操作されることにより、未確認遊技者来店情報の表示が終了する。

以上の処理により、統合監視テーブル１０５にカメラ３の前を通過した回数が所定回数以上（判定結果として再確認が報告された回数が所定回数以上）不正遊技者判定処理ができない状態となった時点で、出力部１０７より未確認遊技者来店情報が表示されることにより、遊技店の係員は、監視システムの存在を意識して、顔画像が正確に撮像できないように振舞っている不正遊技者の可能性の高い遊技者が来店したことを認識することが可能となり、さらに、画像（不正遊技者判定はできないが、背格好、服装、顔色、または髪型などが認識できる程度の画像）や現在位置の情報に基づいて、不正遊技者判定処理をすることができない、不正遊技者の可能の高い遊技者を迅速に探し出すことが可能となる。

尚、出力部１０７にスピーカなどが設けられている場合、不正遊技者が検出された場合とは異なる警告を示す音声を発生させるようにしても良く、そのようにすることで、より迅速に不正遊技者判定処理をすることができない、不正遊技者の可能の高い遊技者を探し出すことが可能となる。

また、ステップＳ２０１において、不正遊技者が存在しない場合、ステップＳ２０２の処理は、スキップされ、ステップＳ２０３において、カメラの前を通過した回数が所定回数以上（判定結果として再確認が報告された回数が所定回数以上）の遊技者が存在しない場合、ステップＳ２０４の処理がスキップされ、その処理は、ステップＳ２０１に戻り、それ以降の処理が繰り返される。

次に、図１９のフローチャートを参照して、上述した行動軌跡ボタン２０６，２２４が操作された場合に実行される行動軌跡処理について説明する。

ステップＳ２２１において、再生部１０８は、統合監視テーブル１０５の位置管理テーブル１０５ｂを参照して、図１７または図１８の人ID表示欄２０１または２２１に表示されている人IDに基づいて、蓄積された位置情報および時刻情報を読み出す。

ステップＳ２２２において、再生部１０８は、時刻情報に合わせて位置情報を遊技店内の座標上にプロットし、結果を出力部１０７に供給して表示させる。

ステップＳ２２３において、再生部１０８は、次の位置情報が存在するか否かを判定し、例えば、次の位置情報が存在すると判定された場合、その処理は、ステップＳ２２１に戻り、それ以降の処理が繰り返され、全ての位置情報がプロットされると、ステップＳ２２３において、次の位置情報が存在しないと判定され、ステップＳ２２４において、「戻る」（例えば、図２０の戻るボタン２５４）が操作されたか否かを判定し、「戻る」が操作されたと判定された場合、その処理は終了する。

例えば、行動軌跡は、図２０で示されるように表示される。すなわち、図２０においては、遊技店内の平面図２５１が示され、遊技者の位置を示すポイント２５１ａが、順次プロットされ、通過した後には、図中の点線で示されるように軌跡２５２が表示される。さらに、図２０においては、軌跡２５２の経路上に立ち寄った遊技台を示す遊技台表示欄２５３もさらに示されており、このようにすることで、島設備に設けられた遊技台のうち、今の場合１５１番台に不正遊技者または未確認遊技者が立ち寄ったことが認識でき、１５１番台の遊技台に立ち寄ったことがわかる。

結果として、立ち寄った遊技台で不正が発覚した場合、別途連続撮影する監視カメラを設けておけば、不正のあった遊技台付近が撮像された画像を解析することにより、検出された不正遊技者が何らかの不正をした証拠とすることが可能となり、不正遊技者の検挙に貢献することが可能となる。また、未確認遊技者である場合、上述した行動軌跡により、不正遊技者であるか否かを判断する材料とすることが可能となる。

以上によれば、監視システムにおいて、不正遊技者の誤検出を低下させるとともに、検出率を向上させることが可能となる。

ところで、上述した一連の監視処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。

図２１は、汎用のパーソナルコンピュータの構成例を示している。このパーソナルコンピュータは、CPU(Central Processing Unit)３０１を内蔵している。CPU３０１にはバス３０４を介して、入出力インタフェース３０５が接続されている。バス３０４には、ROM(Read Only Memory)３０２およびRAM(Random Access Memory)３０３が接続されている。

入出力インタフェース３０５には、ユーザが操作コマンドを入力するキーボード、マウスなどの入力デバイスよりなる入力部３０６、処理操作画面や処理結果の画像を表示デバイスに出力する出力部３０７、プログラムや各種データを格納するハードディスクドライブなどよりなる記憶部３０８、LAN（Local Area Network）アダプタなどよりなり、インタネットに代表されるネットワークを介した通信処理を実行する通信部３０９が接続されている。また、磁気ディスク３２１（フレキシブルディスクを含む）、光ディスク３２２（CD-ROM(Compact Disc-Read Only Memory)、DVD(Digital Versatile Disc)を含む）、光磁気ディスク３２３（ＭＤ(Mini Disc)を含む）、もしくは半導体メモリ３２４などの記録媒体に対してデータを読み書きするドライブ３１０が接続されている。

CPU３０１は、ROM３０２に記憶されているプログラム、または磁気ディスク３２１乃至半導体メモリ３２４から読み出されて記憶部３０８にインストールされ、記憶部３０８からRAM３０３にロードされたプログラムに従って各種の処理を実行する。RAM３０３にはまた、CPU３０１が各種の処理を実行する上において必要なデータなども適宜記憶される。

尚、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理は、もちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理を含むものである。

また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。

本発明を適用した監視システムの一実施の形態の構成を示す図である。 図１の入口ステレオ画像センサの一実施の形態の構成を示す図である。 図１の島ステレオ画像センサの一実施の形態の構成を示す図である。 図１の入口ステレオ画像センサ、島ステレオ画像センサ、およびカメラの配置例を説明する図である。 図１の画像処理ユニットの一実施の形態の構成を示す図である。 図１の人追跡サーバの一実施の形態の構成を示す図である。 図１の顔認識サーバの一実施の形態の構成を示す図である。 図１の統合監視サーバの一実施の形態の構成を示す図である。 統合監視テーブルの管理処理を説明するフローチャートである。 ステレオ画像センサにより検出される位置情報を説明する図である。 入口カメラまたは島カメラにより撮像される画像を説明する図である。 位置情報と顔画像を対応付ける処理を説明する図である。 位置管理テーブルを説明する図である。 不正遊技者判定処理を説明するフローチャートである。 判定結果テーブルを説明する図である。 警告処理を説明するフローチャートである。 不正遊技者が来店したことを示す不正遊技者来店情報の表示例を示す図である。 未確認遊技者が来店したことを示す未確認遊技者来店情報の表示例を示す図である。 行動軌跡再生処理を説明するフローチャートである。 行動軌跡再生処理を説明する図である。 媒体を説明する図である。

符号の説明

１，１−１乃至１−３ 入口ステレオ画像センサ
２，２−１乃至２−１７ 島ステレオ画像センサ
３，３−１乃至３−１５ カメラ
４ 画像処理ユニット
５ 人追跡サーバ
６ 顔認識サーバ
７ 統合監視サーバ

Claims (18)

1. 不正遊技者を認識する第1の情報処理装置、入店者の位置を追跡する第２の情報処理装置、および、前記第２の情報処理装置の追跡結果と前記第１の情報処理装置の顔認識結果とに基づき前記不正遊技者の入店を監視する第３の情報処理装置からなる監視システムにおいて、
   前記不正遊技者の顔画像を蓄積する蓄積手段と、
   前記入店者の顔画像を撮像する撮像手段と、
   前記撮像手段により撮像された顔画像が前記蓄積手段に蓄積された不正遊技者の顔画像と照合済みではない場合、前記入店者の顔画像と、前記蓄積手段に蓄積された不正遊技者の顔画像とを照合する照合手段と、
   前記入店者の位置情報を取得する位置取得手段と、
   前記撮像手段により撮像された顔画像に、前記入店者の位置情報を対応付ける対応付手段と、
   前記顔画像に対応付けられた位置情報、前記顔画像、および前記照合結果をテーブルとして管理するテーブル管理手段と、
   前記テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知手段と
   を備えることを特徴とする監視システム。
2. 前記不正遊技者を認識する第１の情報処理装置は、不正遊技者認識サーバであり、入店者の位置を追跡する第２の情報処理装置は、人追跡サーバであり、前記人追跡サーバの追跡結果と前記不正遊技者認識サーバの顔認識結果とに基づき前記不正遊技者の入店を監視する第３の情報処理装置は、監視サーバである
   ことを特徴とする請求項１に記載の監視システム。
3. 前記不正遊技者認識サーバは、
   前記不正遊技者の顔画像を蓄積する蓄積手段と、
   前記入店者の顔画像を撮像する撮像手段と、
   前記撮像手段により撮像された顔画像が前記蓄積手段に蓄積された不正遊技者の顔画像と照合済みではない場合、前記入店者の顔画像と、前記蓄積手段に蓄積された不正遊技者の顔画像とを照合する照合手段と
   を備え、
   前記人追跡サーバは、
   前記入店者の位置情報を取得する位置取得手段と、
   前記撮像手段により撮像された顔画像に、前記入店者の位置情報を対応付ける対応付手段と
   を備え、
   前記監視サーバは、
   前記顔画像に対応付けられた位置情報、前記顔画像、および前記照合結果をテーブルとして管理するテーブル管理手段と、
   前記テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知手段と
   を備える
   ことを特徴とする請求項２に記載の監視システム。
4. 前記不正遊技者認識サーバは、照合結果を前記監視サーバに供給する第１の供給手段をさらに備え、
   前記人追跡サーバは、前記対応付手段により対応付けられた顔画像と位置情報とを前記監視サーバに供給する第２の供給手段をさらに備え、
   前記テーブル管理手段は、前記第１の供給手段および前記第２の供給手段により供給された、前記顔画像と対応付けられた位置情報、前記顔画像、および前記照合結果をテーブルとして管理する
   ことを特徴とする請求項３に記載の監視システム。
5. 前記第１の供給手段は、さらに、前記撮像手段により撮像された入店者の顔画像を人追跡サーバに供給し、
   前記撮像手段により撮像された入店者の顔画像により、前記人追跡サーバより供給される前記撮像手段により撮像された顔画像が前記蓄積手段に蓄積された不正遊技者の顔画像と照合済みであるか否かを示す情報に基づいて、前記照合手段は、前記撮像手段により撮像された顔画像が前記蓄積手段に蓄積された不正遊技者の顔画像と照合済みではない場合、前記入店者の顔画像と、前記蓄積手段に蓄積された不正遊技者の顔画像とを照合する
   ことを特徴とする請求項４に記載の監視システム。
6. 前記対応付手段は、顔認識サーバより供給された、前記撮像手段により撮像された入店者の顔画像に、前記入店者の位置情報を対応付け、
   前記第２の供給手段は、前記対応付手段により顔画像に対応付けられた位置情報を前記監視サーバに供給すると共に、供給した前記位置情報に対応付けられた顔画像が、前記蓄積手段に蓄積された不正遊技者の顔画像と照合済みであるか否かを示す情報を前記監視サーバより取得し、さらに、前記顔画像認識サーバに供給する。
   ことを特徴とする請求項５に記載の監視システム。
7. テーブル管理手段は、前記顔画像に対応付けられた位置情報、前記顔画像、および前記照合結果に加えて、さらに、各位置情報が取得された時刻をテーブルとして管理し、
   前記テーブルの前記位置情報と前記時刻情報とに基づいて、前記遊技者の軌跡を再生する再生手段をさらに備える
   ことを特徴とする請求項１に記載の監視システム。
8. 不正遊技者を認識する第1の情報処理装置、入店者の位置を追跡する第２の情報処理装置、および、前記第２の情報処理装置の追跡結果と前記第１の情報処理装置の顔認識結果とに基づき前記不正遊技者の入店を監視する第３の情報処理装置からなる監視システムの監視方法おいて、
   前記不正遊技者の顔画像を蓄積する蓄積ステップと、
   前記入店者の顔画像を撮像する撮像ステップと、
   前記撮像ステップの処理により撮像された顔画像が前記蓄積ステップの処理により蓄積された不正遊技者の顔画像と照合済みではない場合、前記入店者の顔画像と、前記蓄積ステップの処理により蓄積された不正遊技者の顔画像とを照合する照合ステップと、
   前記入店者の位置情報を取得する位置取得ステップと、
   前記撮像ステップの処理により撮像された顔画像に、前記入店者の位置情報を対応付ける対応付ステップと、
   前記顔画像に対応付けられた位置情報、前記顔画像、および前記照合結果をテーブルとして管理するテーブル管理ステップと、
   前記テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知ステップと
   を含むことを特徴とする監視方法。
9. 不正遊技者を認識する第１の情報処理装置、入店者の位置を追跡する第２の情報処理装置、および、前記第２の情報処理装置と前記第１の情報処理装置の顔認識結果とに基づき前記不正遊技者の入店を監視する第３の情報処理装置からなる監視システムのコンピュータを制御するプログラムであって、
   前記不正遊技者の顔画像を蓄積する蓄積ステップと、
   前記入店者の顔画像を撮像する撮像ステップと、
   前記撮像ステップの処理により撮像された顔画像が前記蓄積ステップの処理により蓄積された不正遊技者の顔画像と照合済みではない場合、前記入店者の顔画像と、前記蓄積ステップの処理により蓄積された不正遊技者の顔画像とを照合する照合ステップと、
   前記入店者の位置情報を取得する位置取得ステップと、
   前記撮像ステップの処理により撮像された顔画像に、前記入店者の位置情報を対応付ける対応付ステップと、
   前記顔画像に対応付けられた位置情報、前記顔画像、および前記照合結果をテーブルとして管理するテーブル管理ステップと、
   前記テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知ステップと
   を含む処理をコンピュータに実行させることを特徴とするプログラム。
10. 不正遊技者の顔画像を蓄積する蓄積手段と、
    入店者の顔画像を撮像する撮像手段と、
    前記撮像手段により撮像された顔画像が前記蓄積手段に蓄積された不正遊技者の顔画像と照合済みではない場合、前記入店者の顔画像と、前記蓄積手段に蓄積された不正遊技者の顔画像とを照合する照合手段と
    を備えることを特徴とする不正遊技者認識サーバ。
11. 不正遊技者の顔画像を蓄積する蓄積ステップと、
    入店者の顔画像を撮像する撮像ステップと、
    前記撮像ステップの処理により撮像された顔画像が前記蓄積ステップの処理により蓄積された不正遊技者の顔画像と照合済みではない場合、前記入店者の顔画像と、前記蓄積ステップの処理により蓄積された不正遊技者の顔画像とを照合する照合ステップと
    を含むことを特徴とする不正遊技者認識方法。
12. 不正遊技者の顔画像を蓄積する蓄積ステップと、
    入店者の顔画像を撮像する撮像ステップと、
    前記撮像ステップの処理により撮像された顔画像が前記蓄積ステップの処理により蓄積された不正遊技者の顔画像と照合済みではない場合、前記入店者の顔画像と、前記蓄積ステップの処理により蓄積された不正遊技者の顔画像とを照合する照合ステップと
    を含む処理をコンピュータに実行させることを特徴とするプログラム。
13. 入店者の位置情報を取得する位置取得手段と、
    撮像された顔画像に、前記入店者の位置情報を対応付ける対応付手段と
    を備えることを特徴とする人追跡サーバ。
14. 入店者の位置情報を取得する位置取得ステップと、
    撮像された顔画像に、前記入店者の位置情報を対応付ける対応付ステップと
    を含むことを特徴とする人追跡方法。
15. 入店者の位置情報を取得する位置取得ステップと、
    撮像された顔画像に、前記入店者の位置情報を対応付ける対応付ステップと
    を含む処理をコンピュータに実行させることを特徴とするプログラム。
16. 顔画像に対応付けられた位置情報、前記顔画像、および、入店者の顔画像と蓄積された不正遊技者の顔画像との照合結果をテーブルとして管理するテーブル管理手段と、
    前記テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知手段と
    を備えることを特徴とする監視サーバ。
17. 顔画像に対応付けられた位置情報、前記顔画像、および、入店者の顔画像と蓄積された不正遊技者の顔画像との照合結果をテーブルとして管理するテーブル管理ステップと、
    前記テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知ステップと
    を含むことを特徴とする監視方法。
18. 顔画像に対応付けられた位置情報、前記顔画像、および、入店者の顔画像と蓄積された不正遊技者の顔画像との照合結果をテーブルとして管理するテーブル管理ステップと、
    前記テーブルにおける照合結果が不正遊技者である場合、不正遊技者の入店を報知する報知ステップと
    を含む処理をコンピュータに実行させることを特徴とするプログラム。

Images