JP5168564B2 - 監視装置および方法、並びにプログラム - Google Patents

Description

本発明は、監視装置および方法、並びにプログラムに関し、特に、個別の顔画像を認識できるようにすると共に、広い範囲を監視できるようにした監視装置および方法、並びにプログラムに関する。

遊技店は遊技人口の減少や機器入れ替えなどの環境により競合店との競争が激化する中、熾烈な遊技客獲得競争を繰り広げている。遊技店は固定遊技客を取り込むために、近隣の遊技店と差別化を図り、独自の経営戦略を展開している。

具体的には、来店した遊技客の動向を把握し、遊技客のニーズにあったサービスの提供をしようと、会員カードを発行しているところもあるが、会員カードを持参しない、または、会員カードを持参しても専用の読取装置に挿入しないなどの実態により十分に把握できていないのが現状である。

そこで、この問題を解決するために顔認証装置が提案されている。近年、この顔認証装置の性能向上により、遊技客一人一人をある程度の精度で特定することが可能となっている。

しかしながら、顔認証により遊技客を特定するため、遊技客の顔を検出するためのカメラの設置位置が重要となる。

また、この顔認証装置では、遊技客一人一人の顔画像と遊技情報を組み合わせて管理することにより、どのような人がどのくらいの遊技をしているのかという情報を定量化することが求められている。また、一方で従来から不良客による不正行為を映像で監視し、記録するために遊技台および遊技台周辺を撮像領域とする監視カメラ装置が求められている。

そこで、遊技中の遊技客顔画像を遊技台毎に取得して、顔画像照合することで顧客管理を行う発明が提案されている（特許文献１参照）。

また、不良客による不正行為を画像にて監視し、記録するための監視カメラ装置が提案されている（特許文献２参照）。

特開２００７−１５９８８３号公報 特開２００６−２９６９７６号公報

ところで、上述の特許文献１，２に記載の技術においては、各々個別の画像取得カメラおよび画像処理装置を必要としており、個別の異なる画像処理装置を一体化しようとした場合、顔画像照合にて取得する画像の撮像領域は遊技客を特定するために狭い範囲の撮像画像を取得する必要がある一方で、監視カメラ装置にて取得する画像の撮像領域は、様々な不正行為を監視し、記録する必要があるため遊技台および遊技台周辺を撮像領域とする広い範囲の撮像画像を取得する必要がある。

従って、遊技客の特定と遊技情報の管理をする顧客管理機能と、不正行為を監視する監視機能を同時に満足するためには、１つのカメラでできるだけ広い画角の画像を取得する必要がある。

しかしながら、カメラの画角を広げると画像内に複数の遊技客の顔が入ってきてしまい、ターゲットとする遊技客を特定しにくい状態となる。

このように、上述した用途の異なる２つの画像処理機能を一体化することによりメリットだけでなく、デメリットが生じてしまうことがあった。

本発明はこのような状況に鑑みてなされたものであり、個別の顔画像を認識できるようにすると共に、広い範囲を監視できるようにするものである。

本発明の一側面の監視装置は、画像を撮像する撮像手段と、前記撮像手段により撮像された画像より顔画像と、前記顔画像が検出された顔画像の検出位置とを検出する顔画像検出手段と、前記撮像手段が設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とを対応付けてテーブルとして記憶する記憶手段と、前記撮像手段が設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報を、前記テーブルより読み出す読出手段と、前記読出手段により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出手段により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する出力手段とを含む。

前記顔画像検出手段には、前記顔画像のサイズを計算するサイズ計算手段と、前記顔画像における顔向きを示す顔向き情報を測定する顔向き情報測定手段とをさらに含ませるようにすることができる。

前記設置位置情報には、前記撮像手段が設置される設置位置を示す設置位置情報に加えて、前記撮像手段の撮像角度を示す撮像角度情報をさらに含ませるようにすることができる。
前記顔画像検出手段には、前記顔画像のサイズを計算するサイズ計算手段と、前記顔画像における顔向きを示す顔向き情報を測定する顔向き情報測定手段とを含ませるようにすることができ、前記設置位置情報には、前記撮像手段が設置される設置位置を示す情報に加えて、前記撮像手段の撮像角度を示す撮像角度情報をさらに含ませるようにすることができる。

前記記憶手段には、前記撮像手段が設置される位置を示す設置位置情報、および前記撮像角度情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報、前記サイズ、および前記顔向きとを対応付けてテーブルとして記憶させ、前記読出手段には、前記設置位置情報、および前記撮像角度情報に対応する、前記画像における前記顔画像が検出される適正位置情報を、前記テーブルより読み出させ、前記出力手段には、前記サイズが所定サイズよりも大きく、かつ、前記顔向きが所定の範囲である場合、前記読出手段により読み出された前記適正位置情報に基づいた適正位置と、前記顔検出手段により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力させるようにすることができる。

本発明の一側面の監視方法は、画像を撮像する撮像手段と、前記撮像手段により撮像された画像より顔画像を検出する顔画像検出手段と、前記撮像手段が設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とを対応付けてテーブルとして記憶する記憶手段と、前記撮像手段が設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報を、前記テーブルより読み出す読出手段と、前記読出手段により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出手段により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する出力手段とを含む監視装置の監視方法であって、前記撮像手段による、前記画像を撮像する撮像ステップと、前記顔画像検出手段による、前記撮像ステップの処理により撮像された画像より顔画像と、前記顔画像が検出された顔画像の検出位置とを検出する顔画像検出ステップと、前記読出手段による、前記撮像手段が設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とを対応付けてテーブルより、前記撮像手段が設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報を読み出す読出ステップと、前記読出手段による、前記読出ステップの処理により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出ステップの処理により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する出力ステップとを含む。

本発明の一側面のプログラムは、画像を撮像する撮像手段と、前記撮像手段により撮像された画像より顔画像を検出する顔画像検出手段と、前記撮像手段が設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とを対応付けてテーブルとして記憶する記憶手段と、前記撮像手段が設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報を、前記テーブルより読み出す読出手段と、前記読出手段により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出手段により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する出力手段とを含む監視装置を制御するコンピュータに、前記撮像手段による、前記画像を撮像する撮像ステップと、前記顔画像検出手段による、前記撮像ステップの処理により撮像された画像より顔画像と、前記顔画像が検出された顔画像の検出位置とを検出する顔画像検出ステップと、前記読出手段による、前記撮像手段が設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とを対応付けてテーブルより、前記撮像手段が設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報を読み出す読出ステップと、前記読出手段による、前記読出ステップの処理により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出ステップの処理により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する出力ステップとを制御させる。

本発明の一側面は、画像が撮像され、撮像された画像より顔画像と、前記顔画像が検出された顔画像の検出位置とが検出され、設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とが対応付けてテーブルとして記憶され、設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報が、前記テーブルより読み出され、読み出された前記適正位置情報に基づいた適正位置と、検出された顔画像の検出位置とが一致するとき、前記顔画像が出力される。

本発明の一側面の監視装置における、画像を撮像する撮像手段とは、例えば、カメラであり、前記撮像手段により撮像された画像より顔画像と、前記顔画像が検出された顔画像の検出位置とを検出する顔画像検出手段とは、例えば、顔画像検出処理部、前記撮像手段が設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とを対応付けてテーブルとして記憶する記憶手段とは、例えば、カメラ位置情報データベースであり、前記撮像手段が設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報を、前記テーブルより読み出す読出手段とは、例えば、パラメータ読出部であり、前記読出手段により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出手段により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する出力手段とは、例えば、顔画像切り出し部である。

すなわち、カメラで広い範囲を撮像するように設置されても、設置されたカメラに撮像された画像のうち、顔画像が抽出される際に、カメラにより撮像された画像内の顔画像の位置の情報と、顔画像が検出される適正位置の情報とを比較し、一致したときに、その顔画像を用いた顔認証処理を実行させる。

結果として、画像が撮像された後、顔認識に最良とされる画像位置に顔画像が存在するときにのみ、顔画像を抽出して顔認証処理に利用することができるので、監視用の広い画角を備えたカメラと、遊技客を識別するための顔画像認識に用いられる狭い画角のカメラとを区別して設置する必要がなくなり、顔認証処理の認証精度を低減させること無く、広い画角の監視カメラのみを利用することができるので、カメラの設置コストを低減させることが可能となる。

本発明によれば、顔認証処理の認証精度を低減させること無く、広い画角の監視カメラのみを利用することができるので、カメラの設置コストを低減させることが可能となる。

以下に本発明の実施の形態を説明するが、本発明の構成要件と、発明の詳細な説明に記載の実施の形態との対応関係を例示すると、次のようになる。この記載は、本発明をサポートする実施の形態が、発明の詳細な説明に記載されていることを確認するためのものである。従って、発明の詳細な説明中には記載されているが、本発明の構成要件に対応する実施の形態として、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その構成要件に対応するものではないことを意味するものではない。逆に、実施の形態が構成要件に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その構成要件以外の構成要件には対応しないものであることを意味するものでもない。

すなわち、本発明の一側面の監視装置は、画像を撮像する撮像手段（例えば、図８のカメラ３８）と、前記撮像手段により撮像された画像より顔画像と、前記顔画像が検出された顔画像の検出位置とを検出する顔画像検出手段（例えば、図８の顔画像検出処理部１１２）と、前記撮像手段が設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とを対応付けてテーブルとして記憶する記憶手段（例えば、図８のカメラ位置情報データベース２３）と、前記撮像手段が設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報を、前記テーブルより読み出す読出手段（例えば、図８のパラメータ読出部１５１）と、前記読出手段により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出手段により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する出力手段（例えば、図８の顔画像切り出し部１２２）とを含む。

前記顔画像検出手段には、前記顔画像のサイズを計算するサイズ計算手段（例えば、図８のサイズ計算部１３４）と、前記顔画像における顔向きを示す顔向き情報を測定する顔向き情報測定手段（例えば、図８の顔向き測定部１３５）とをさらに含ませるようにすることができる。

前記設置位置情報（例えば、図１１の設置位置）には、前記撮像手段が設置される設置位置を示す情報に加えて、前記撮像手段の撮像角度を示す撮像角度情報（例えば、図１１の撮像方向）をさらに含ませるようにすることができる。
前記顔画像検出手段には、前記顔画像のサイズを計算するサイズ計算手段（例えば、図８のサイズ計算部１３４）と、前記顔画像における顔向きを示す顔向き情報を測定する顔向き情報測定手段（例えば、図８の顔向き測定部１３５）とを含ませるようにすることができ、前記設置位置情報（例えば、図１１の設置位置）には、前記撮像手段が設置される設置位置を示す情報に加えて、前記撮像手段の撮像角度を示す撮像角度情報（例えば、図１１の撮像方向）をさらに含ませるようにすることができる。

前記記憶手段（例えば、図８のカメラ位置情報データベース２３）には、前記撮像手段が設置される位置を示す設置位置情報、および前記撮像角度情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報、前記サイズ、および前記顔向きとを対応付けてテーブルとして記憶させ、前記読出手段（例えば、図８のパラメータ読出部１５１）には、前記設置位置情報、および前記撮像角度情報に対応する、前記画像における前記顔画像が検出される適正位置情報を、前記テーブルより読み出させ、前記出力手段（例えば、図８の顔画像切り出し部１２２）には、前記サイズが所定サイズよりも大きく、かつ、前記顔向きが所定の範囲である場合、前記読出手段により読み出された前記適正位置情報に基づいた適正位置と、前記顔検出手段により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力させるようにすることができる。

本発明の一側面の監視方法は、画像を撮像する撮像手段と、前記撮像手段により撮像された画像より顔画像を検出する顔画像検出手段と、前記撮像手段が設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とを対応付けてテーブルとして記憶する記憶手段と、前記撮像手段が設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報を、前記テーブルより読み出す読出手段と、前記読出手段により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出手段により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する出力手段とを含む監視装置の監視方法であって、前記撮像手段による、前記画像を撮像する撮像ステップ（例えば、図１５のステップＳ１）と、前記顔画像検出手段による、前記撮像ステップの処理により撮像された画像より顔画像と、前記顔画像が検出された顔画像の検出位置とを検出する顔画像検出ステップ（例えば、図１５のステップＳ２）と、前記読出手段による、前記撮像手段が設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とを対応付けてテーブルより、前記撮像手段が設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報を読み出す読出ステップ（例えば、図１５のステップＳ６）と、前記読出手段による、前記読出ステップの処理により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出ステップの処理により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する出力ステップ（例えば、図１５のステップＳ８）とを含む。

図１は、本発明に係る遊技店の監視システムの一実施の形態の構成を示す図である。

遊技店１−１乃至１−ｎは、いわゆるパチンコ店、パチスロ店、または、カジノ店である。また、これらの遊技店１−１乃至１−ｎは、系列店舗または顔画像管理センタや第３者遊技店管理センタの加盟店であって、複数の店舗を統括的に管理する必要のある店舗である。各遊技店１−１乃至１−ｎは、顔画像管理バス６および第３者遊技店管理バス７により接続されており、それらのバスおよびインターネット等に代表される公衆通信回線網８，９を介して、相互にそれぞれ顔画像情報、および第３者遊技店管理情報を授受している。尚、以降において、遊技店１−１乃至１−ｎのそれぞれについて、特に区別する必要がない場合、単に、遊技店１と称するものとし、その他の構成についても同様に称するものとする。

顔画像管理バス６は、主に各遊技店１の顔画像認識装置２０により管理される顔画像情報を流通させるための伝送路として機能する。また、第３者遊技店管理バス７は、主に各遊技店１の媒体貸出管理装置２７により管理される媒体貸出管理情報を流通させるための伝送路として機能する。

顔画像管理センタ２は、顔画像管理センタを管理運営する事業者により使用されるサーバであり、顔画像管理データベース（以降、DBとも称するものとする）３で管理されている登録遊技者DBを各遊技店１により生成される未登録遊技者DBに基づいて更新すると供に、更新した最新の登録遊技者DBを各遊技店１の顔画像認識装置２０に対して配信する。

第３者遊技店管理センタ４は、第３者遊技店管理センタを管理運営する事業者により使用されるサーバであり、第３者遊技店管理データベース（DB）５で管理されている媒体貸出管理情報からなるDBを各遊技店１より供給されてくる情報に基づいて更新すると供に、更新した最新の媒体貸出管理情報を各遊技店１の媒体貸出管理装置２７に対して配信する。

顔画像認識装置２０は、カメラ３８−１乃至３８−ｍにより撮像された画像より画像処理ユニット３９−１乃至３９−ｍにより抽出されて、顔画像情報バス３１を介して供給されてくる顔画像の情報に基づいて、顔画像情報データベース２１に予め登録されている顔画像と照合し、一致する場合、登録遊技者の来店を携帯端末１９に通知したり、LCD（Liquid Crystal Display）または有機EL（Electronic Luminescence）などからなる表示部２２に表示する。また、顔画像情報データベース２１に予め登録されている顔画像と照合し、一致しない場合、顔画像認識装置２０は、顔画像管理データベース３にアクセスし、未登録者として未登録遊技者DBに登録する。

遊技店管理装置２４は、いわゆるホールコンピュータと呼ばれるものであり、遊技店管理情報バス３０を介して遊技台３６−１乃至３６−ｍの動作を監視している。遊技店管理装置２４は、遊技台３６の出玉もしくはメダルの払い出しの情報、各遊技台３６−１乃至３６−ｍの遊技者の呼び出し情報、またはエラーの発生などの監視状況に応じて、所定の処理を実行し、実行結果をLCDや有機ELなどからなる表示部２５に表示する。遊技店管理装置２４は、計数機３５、遊技台３６−１乃至３６−ｍ、および遊技台周辺端末３７−１乃至３７−ｍのそれぞれより供給されてくる情報を、それぞれを識別する識別情報（例えば、遊技台番号）とを対応付けて遊技台管理データベース２６により管理する。また、遊技店管理装置２４は、遊技台３６のそれぞれに設けられているカメラ３８を識別するカメラID毎に、遊技台３６本体のどのあたりに設置されたかを示す設置位置情報（カメラ３８の設置位置、および撮像方向）と、カメラ３８により画像が撮像されたとき、その画像内において、遊技者の顔画像を最も認識し易い画像内の適正位置（画像内位置、画サイズ、および顔向きの情報を含む）とを対応付けて適正パラメータとして記憶しており、適正パラメータからなるカメラ位置情報データベース２３として管理している。また、カメラ位置情報データベース２３は、顔画像情報バス３１を介して画像処理ユニット３９よりアクセス可能である。これにより、画像処理ユニット３９は、それぞれのカメラ３８の設置位置の情報に対応する画像内の適正パラメータを読み出し、その画像内の適正位置と略一致する位置の顔画像のみを顔画像認識装置２０に供給する。

媒体貸出管理装置２７は、精算販売機３３、および貸出機３４からの情報に基づいて、貸し出される遊技媒体の媒体貸出管理情報を媒体貸出管理データベース２９を用いて管理すると供に、媒体貸出管理データベース２９に登録されている媒体貸出管理情報を更新する際、その更新情報を、第３者遊技店管理バス７および公衆通信回線網９を介して第３者遊技店管理センタ４に送る。さらに、媒体貸出管理装置２７は、第３者遊技店管理バス７および公衆通信回線網９を介して第３者遊技店管理センタ４により供給されてくる媒体貸出管理情報を取得し、媒体貸出管理データベース２９に蓄積させる。

貸出機３４は、遊技者が遊技台３６で遊技する際、現金やプリペイドカードなどにより所定の金額を受け付けると、金額に応じた個数の遊技媒体を貸し出す。この際、貸出機３４は、受け付けた現金やプリペイドカードの残数などの情報と供に、貸し出した遊技媒体の個数の情報を媒体貸出管理装置２７に供給する。これにより、媒体貸出管理装置２７は、受け付けた現金やプリペイドカードの残数などの情報と供に、貸し出した遊技媒体の個数の情報を媒体貸出管理データベース２９に登録する。

精算販売機３３は、貸球を借りるための度数をつけてプリペイドカードを販売する。このとき、精算販売機３３は、販売したプリペイドカードの度数と払いうけた金額とを媒体貸出管理装置２７に供給する。また、精算販売機３３は、プリペイドカードなどの度数として貸し出した遊技媒体の残数に基づいて現金を精算して払い出す。このとき、精算販売機３３は、プリペイドカードの残数と払い戻した現金の金額を媒体貸出管理装置２７に供給する。

計数機３５は、遊技者が遊技台３６により遊技することにより獲得した遊技媒体の数を、計数し、計数結果を磁気カードやレシートなどとして出力する。

遊技台３６−１乃至３６−ｍは、遊技者により所定の操作がなされることにより、遊技を実行し、いわゆる小当たりや大当たりに応じて、遊技球、または、メダルを払い出す。

遊技台周辺端末３７−１乃至３７−ｍは、各遊技台３６−１乃至３６−ｍに対応して設けられている、いわゆる台間機であり、台間球貸機（原理的には、貸出機３４と同様のもの）などが設けられている。また、遊技台周辺端末３７は、遊技台３６を遊技する遊技者の顔画像情報を取得し、遊技台識別情報（遊技台番号）と共に顔画像認識装置２０に送信する。尚、図１においては、顔画像情報を取得する機能として、遊技者の顔画像を取得するカメラ３８−１乃至３８−ｍが設けられている例が示されている。

カメラ３８−１乃至３８−ｍは、例えば、図２で示されるように、各遊技台３６−１乃至３６−４のそれぞれの上部に設けられた台表示ランプ６１−１乃至６１−４の下部に図３で示されるように、読取範囲δ内に遊技者が撮像できるように設け、顔画像を撮像するようにしてもよく、このようにすることにより、各カメラIDは、同時に遊技台IDとして使用することが可能となる。

また、カメラ３８−１乃至３８−ｍは、例えば、図４で示されるように、遊技台周辺端末３７−１乃至３７−４に凸部７１−１乃至７１−４を設け、図５で示されるように読取範囲θ内に遊技者の顔画像が撮像できるように設けるようにしてもよい。

さらに、カメラ３８−１乃至３８−ｍは、例えば、図６で示されるように、遊技台３６の中央部（遊技台３６の盤面上）に設けるようにして、撮像するようにしてもよい。すなわち、図６の設置部８１にカメラ３８が設置されることにより、図７で示されるように、読取範囲φ内に遊技者を撮像する。

次に、図８を参照して、画像処理ユニット３９の構成例について説明する。

画像処理ユニット３９は、顔画像検出部１０１、ターゲット特定部１０２、および記録部１０３より構成されている。顔画像検出部１０１は、カメラ３８より供給されてくる画像より顔画像を検出して、ターゲット特定部１０２に供給する。ターゲット特定部１０２は、供給されてきた顔画像のうち顔画像の認識処理に適正な顔画像をターゲットとして特定し、ターゲットとして特定した顔画像を顔画像認識装置２０に供給する。記録部１０３は、カメラ３８より供給されてくる画像を順次、監視画像として記録する。尚、カメラ３８は、比較的広角度の画像を撮像しているため、遊技台正面に着座している遊技者のみならず、その背後の画像も記録することができる。したがって、各画像処理ユニット３９の記録部１０３で記録されている画像を用いることにより、遊技台３６の周辺の不正行為などを監視することもできる。

顔画像検出部１０１は、画像取得部１１１、顔画像検出処理部１１２、および顔画像取得部１１３を備えている。画像取得部１１１は、カメラ３８により撮像された画像を取得し、顔画像検出処理部１１２に供給する。顔画像検出処理部１１２は、画像取得部１１１より供給されてきた画像内に、顔を構成する部位の配置などのパターンにより顔画像からなる矩形画像を抽出して顔画像取得部１１３に供給する。

顔画像検出処理部１１２は、顔画像抽出部１３１、信頼度計算部１３２、位置計算部１３３、サイズ計算部１３４、および顔向き測定部１３５を備え、顔画像を抽出すると共に、信頼度、画像内における顔画像の位置、顔画像のサイズ、および顔画像における顔向きの情報を検出する。

顔画像抽出部１３１は、撮像された画像の色などから肌が露出した部分であって、目や鼻といった特徴的な部位（器官）の配置などから顔画像を抽出（検出）する。信頼度計算部１３２は、顔画像として検出された顔画像における、顔画像としての信頼度を計算する。具体的には、信頼度計算部１３２は、例えば、目、鼻、口、または、耳などの顔画像を構成する各器官の位置を認識し、各器官の配置や距離などに基づいて、標準的な配置、および距離との比率を求めて、これらを正規化するなどした値を信頼度として計算する。

位置計算部１３３は、例えば、図９で示されるように、矩形状の顔画像ＦＰの左上、右上、左下、および右下の座標を、例えば、ピクセル単位で求め、これらの座標を顔画像の位置として計算する。

サイズ計算部１３４は、位置計算部１３３により求められた顔画像の座標の情報に基づいて、縦および横方向のサイズを、例えば、ピクセル単位で計算する。位置計算部１３３は、顔画像として検出された矩形状の顔画像ＦＰの４箇所の角の座標位置を計算する。

顔向き測定部１３５は、器官として抽出された目、鼻、口、または耳などの配置から顔の向きを特定する情報を測定する。より具体的には、顔向き測定部１３５は、上下方向測定部１４１、左右方向測定部１４２、および回転方向測定部１４３を備えており、上下方向測定部１４１を制御することにより、図１０で示されるように、顔画像の上下方向の角度を測定させ、左右方向測定部１４２を制御して、図１０で示されるように、左右方向の角度を測定させ、さらに、回転方向測定部１４３を制御して、図１０で示されるように、顔画像の中心を軸として回転角度を測定させる。

顔画像取得部１１３は、顔画像検出処理部１１２より供給されてくる顔画像をのうち、信頼度の高いものをターゲット特定部１０２に送信する。この際、顔画像には、撮像された画像の撮像時刻、撮像したカメラ３８を識別するカメラIDと共に、顔画像のサイズ（ａ（pixel）×ｂ（pixel））、上下方向の角度、左右方向の角度、および回転角度を含む顔向き情報（ｓ，ｔ，ｕ）（＝ｓは上下方向の角度であり、ｔは左右方向の角度であり、ｕは回転角度である）、並びに、顔画像の画像内位置（ｅ，ｆ，ｇ，ｈ）（＝（左上の座標，右上の座標，左下の座標，右下の座標））が付加された状態でターゲット特定部１０２に供給される。

ターゲット特定部１０２は、ターゲット判定部１２１、および顔画像切り出し部１２２より構成されている。

ターゲット判定部１２１は、顔画像検出部１０１より供給されてきた顔画像に含まれているカメラIDに基づいて、カメラ位置情報データベース２３より適正パラメータを読み出して、顔画像のサイズ、上下方向の角度、左右方向の角度、および回転角度を含む顔向き情報、並びに、顔画像の位置情報に基づいて、顔画像認証処理に適した適正な顔画像であるか否かを判定し、判定結果と共に顔画像を顔画像切り出し部１２２に供給する。

カメラ位置情報データベース２３は、例えば、図１１で示されるように、カメラIDに対応付けて、設置位置、撮像方向、画像内位置、サイズ、および顔向きの情報からなる適正パラメータが記憶されたテーブルから構成されている。図１１においては、カメラID＝００１のカメラ３８は、遊技台３６の正面からみて（水平方向，垂直方向）＝（ｘ１，ｙ１）の設定位置に、撮像方向が（左右方向の角度，垂直方向の角度）＝（θ１，φ１）に向けられて設置されていることが示され、図１２で示されるように、撮像される画像Ｐ内における領域Ｚ５が適正位置であり、そのサイズが（Ａpixel×Ｂpixel）であり、さらに、顔向き情報が（ｓ１，ｔ１，ｕ１）であることが示されている。

また、カメラID＝００２のカメラ３８は、遊技台３６の正面からみて（水平方向，垂直方向）＝（ｘ２，ｙ２）の設定位置に、撮像方向が（左右方向の角度，垂直方向の角度）＝（θ２，φ２）に向けられて設置されていることが示され、図１３で示されるように、撮像される画像Ｐ内における領域Ｚ１１が適正位置であり、そのサイズが（Ｃpixel×Ｄpixel）であり、さらに、顔向きが（ｓ２，ｔ２，ｕ２）であることが示されている。

尚、図１２，図１３においては、左部が遊技台３６と、遊技台３６におけるカメラ３８の設置位置を示しており、右部がカメラ３８により撮像された画像Ｐを水平方向に３領域、垂直方向に４領域に分割し、領域Ｚ１乃至Ｚ１２からなる合計１２領域に分割した例を示している。尚、画像Ｐにおける領域分割は、１２領域以外の領域数に分割するようにしても良いものである。

さらに、ターゲット判定部１２１は、パラメータ読出部１５１、画像内位置判定部１５２、サイズ判定部１５３、および顔向き判定部１５４を備えている。パラメータ読出部１５１は、カメラIDに基づいて、予めカメラ位置情報データベース２３にカメラIDで識別される設置位置、および撮像角度の情報に対応付けて記憶されている、画像内位置、サイズ、および顔向き情報からなる適正パラメータを読み出す。

画像内位置判定部１５２は、適正パラメータのうち、画像内位置の情報と、供給されてきた顔画像に付されている顔画像位置とを比較し、一致するか否かを判定する。すなわち、例えば、顔画像がカメラID＝００１により撮像された画像によるものである場合、図１１で示されるように、適正パラメータとして領域Ｚ５が読み出されるので、顔画像の画像内位置（ｅ，ｆ，ｇ，ｈ）が領域Ｚ５内であるか、または、略領域Ｚ５内に含まれるか否かが判定される。

また、サイズ判定部１５３は、適正パラメータのうち、顔画像のサイズの情報と、供給されてきた顔画像のサイズとを比較し、一致するか否かを判定する。すなわち、例えば、カメラID＝００１により撮像された画像によるものである場合、図１１で示されるように、適正パラメータとしてＡ×Ｂが読み出されるので、顔画像のサイズ（ａ×ｂ）が略同一であるか否かにより一致するか否かが判定される。

さらに、顔向き判定部１５４は、適正パラメータのうち、顔向き情報と、供給されてきた顔画像に付されている顔向き情報とを比較し、一致するか否かを判定する。すなわち、例えば、カメラID＝００１により撮像された画像によるものである場合、図１１で示されるように、適正パラメータとして顔向き情報（ｓ１，ｔ１，ｕ１）が読み出されるので、顔画像の顔向き情報（ｓ，ｔ，ｕ）が略同一であるか否かにより一致するか否かが判定される。

ターゲット判定部１２１は、これらの判定結果と共に顔画像を顔画像切り出し部１２２に供給する。

顔画像切り出し部１２２は、ターゲット判定部１２１の判定結果がいずれも一致している場合、その顔画像を顔画像認証に適したものであるとして顔画像認識装置２０に供給する。

次に、図１４を参照して、顔画像認識装置２０の構成例について説明する。

顔画像取得部２２１は、画像処理ユニット３９より供給される顔画像を取得し、照合部２２２に供給する。照合部２２２は、顔画像取得部２２１により取得された顔画像と、顔画像情報DB２１に予め登録されている登録遊技者の顔画像とを照合し、類似度の高い候補となる顔画像があれば、第３候補までの顔画像を照合結果として表示部２２に表示させる。また、照合部２２２は、類似度の高い候補となる顔画像が存在しない場合、供給されてきた顔画像を未登録遊技者データベース登録部２２３に供給する。

より詳細には、照合部２２２の特徴量抽出部２３１は、顔画像を識別するための特徴量を抽出して、顔画像と共に類似度計算部２３２に供給する。類似度計算部２３２は、顔画像情報DB２１に登録されている登録遊技者の顔画像の特徴量を抽出すると供に、特徴量抽出部２３１より供給されてくる特徴量とを用いて、顔画像情報DB２１に登録されている全ての登録遊技者の顔画像との類似度を求め、顔画像取得部２２１より供給されてきた顔画像、および、類似度が上位３位までの顔画像を類似度判定部２３３に供給する。より具体的には、類似度計算部２３２は、例えば、目と目の間隔、あごから額までの長さと、あごから鼻までの長さの比率などの各種の顔の特徴量に基づいて、それぞれの差分和、平均比率、または比率和などを類似度として求める。

類似度判定部２３３は、類似度計算部２３２より供給されてくる類似度を順次バッファ２３３ａに蓄積し、上位３位となる顔画像のそれぞれの類似度のうち、１位となる顔画像との類似度と、所定の閾値とを比較し、比較結果に基づいて、１位となる登録顔画像が、顔画像取得部２２１より供給されてきた顔画像に対して類似している場合（類似度が高い程類似していることを示す類似度の場合、所定の閾値よりも高いとき、また、類似度が低い程類似していることを示す類似度の場合、所定の閾値よりも低いとき）、上位３位となる顔画像と類似度の情報を表示部２２に供給して、表示させると供に、通信部２２４に供給する。また、類似度判定部２３３は、１位となる顔画像との類似度と、所定の閾値とを比較し、比較結果に基づいて、１位となる登録顔画像が、顔画像取得部２２１より供給されてきた顔画像に対して類似していない場合、顔画像取得部２２１より供給されてきた顔画像を未登録遊技者データベース登録部２２３に供給する。

未登録遊技者データベース登録部２２３は、照合部２２２より未登録であるとみなされて供給されてきた、顔画像を顔画像管理データベース３に登録する。

操作部２２５は、ボタン、マウス、または、キーボードなどから構成され、上述した類似度が上位３位となる、表示部２２に表示された顔画像のいずれかが選択されるとき操作され、操作結果を通信部２２４に供給する。通信部２２４は、モデムなどから構成され、操作部２２５からの操作信号に基づいて、選択された顔画像を携帯端末１９に配信する。

尚、ここでは、類似度は、例えば、比率和で示されるような登録遊技者として登録されている顔画像に近いほど高い値を示すものであるとし、類似度が所定の閾値よりも高い値であるとき、その類似度に対応する登録遊技者の顔画像であるものとして判定する例について説明する。しかしながら、例えば、類似度が撮像された顔画像と登録遊技者として登録されている顔画像とのそれぞれの特徴量における差分和として表現されている場合、類似度判定部２３３は、類似度が閾値よりも小さければ、撮像された顔画像が登録遊技者の顔画像であるとみなすことになり、または、平均比率などの場合、０乃至１の範囲で所定の値以上であって、１に近い値であれば、同一の人物であるとみなすことができる。

データベース管理部２２６は、顔画像管理センタ２より新たな登録遊技者データベースが配信されてくると、新たな登録遊技者データベース２５２に基づいて、顔画像情報DB２１を更新する。

次に、図１５のフローチャートを参照して、登録遊技者来店監視処理について説明する。

ステップＳ１において、カメラ３８は、設置されている範囲の画像を撮像し、撮像した画像を画像処理ユニット３９に供給する。画像処理ユニット３９の画像取得部１１１は、供給された画像を取得し、顔画像検出処理部１１２に供給する。

ステップＳ２において、顔画像検出処理部１１２の顔画像抽出部１３１は、供給された画像より遊技者の顔画像を抽出（検出）する。より具体的には、顔画像抽出部１３１は、例えば、撮像された画像の色などから肌が露出した部分であって、目や鼻といった特徴的な部位の配置などから顔画像を抽出（検出）する。このとき、信頼度計算部１３２は、検出された顔画像の信頼度ｔｒを計算する。

ステップＳ３において、顔画像検出処理部１１２は、信頼度計算部１３２により計算された信頼度ｔｒが所定の閾値よりも高いか否かに基づいて、顔画像として抽出された画像が、顔画像であるか否か、すなわち、顔画像が抽出されたか否かを判定する。

ステップＳ３において、顔画像として抽出された画像が、顔画像ではない、または、顔画像として認識される画像が存在しない、すなわち、顔画像の信頼度ｔｒが所定の閾値よりも低く、顔画像が抽出されていないと判定された場合、処理は、ステップＳ１に戻る。一方、ステップＳ３において、顔画像が抽出されたと判定された場合、処理は、ステップＳ４に進む。

ステップＳ４において、顔画像検出処理部１１２の位置計算部１３３は、顔画像の画像内位置（ｅ，ｆ，ｇ，ｈ）を計算し、サイズ計算部１３４は、顔画像の画像内位置（ｅ，ｆ，ｇ，ｈ）より顔画像のサイズ（ａ×ｂ）を計算し、顔向き測定部１３５は、上下方向測定部１４１、左右方向測定部１４２、および回転方向測定部１４３を制御して、検出された顔画像の顔向き情報（ｓ，ｔ，ｕ）を計算する。そして、顔画像検出処理部１１２は、顔画像と共に、その顔画像を含む画像を撮像したカメラ３８を識別するカメラID、撮像時刻、信頼度ｔｒ、画像内位置（ｅ，ｆ，ｇ，ｈ）、サイズ（ａ×ｂ）、並びに、顔向き情報（ｓ，ｔ，ｕ）を顔画像取得部１１３に供給する。顔画像取得部１１３は、顔画像と共に、その顔画像を含む画像を撮像したカメラ３８を識別するカメラID、撮像時刻、信頼度ｔｒ、画像内位置（ｅ，ｆ，ｇ，ｈ）、サイズ（ａ×ｂ）、並びに、顔向き情報（ｓ，ｔ，ｕ）をターゲット特定部１０２に供給する。

ステップＳ５において、ターゲット特定部１０２のターゲット判定部１２１は、供給されてきた顔画像に付されているカメラIDを読み出す。

ステップＳ６において、ターゲット判定部１２１は、パラメータ読出部１５１を制御して、カメラ位置情報データベース２３よりカメラIDに対応する設置位置、撮像方向、画像内位置、サイズ、および顔向きの適正パラメータを読み出す。例えば、カメラIDが００１の場合、図１１で示されるようなカメラ位置情報データベース２３が登録されているようなとき、適正パラメータであるカメラ位置情報として、設置位置（水平方向，垂直方向）＝（ｘ１，ｙ１）、撮像方向（左右方向の角度，垂直方向の角度）＝（θ１，φ１）、図１２で示される画像Ｐ内における適正位置（＝領域Ｚ５）、顔画像の認証に適正な画像サイズ（Ａpixel×Ｂpixel）、および、適正な顔向き情報（ｓ１，ｔ１，ｕ１）が、それぞれ最適パラメータとして読み出される。

ステップＳ７において、ターゲット判定部１２１は、画像内位置判定部１５２、サイズ判定部１５３、および顔向き判定部１５４を制御して、適正判定処理を実行させ、供給されてきた顔画像に付されている画像内位置（ｅ，ｆ，ｇ，ｈ）、サイズ（ａ×ｂ）、並びに、顔向き情報（ｓ，ｔ，ｕ）と、適正パラメータとして読み出されたカメラ位置情報である、設置位置（水平方向，垂直方向）＝（ｘ１，ｙ１）、撮像方向（左右方向の角度，垂直方向の角度）＝（θ１，φ１）、図１２で示される画像Ｐ内における領適正位置（＝領域Ｚ５）、顔画像の認証に適正な画像サイズ（Ａpixel×Ｂpixel）、および、適正な顔向き情報（ｓ１，ｔ１，ｕ１）との比較により、供給されてきた顔画像が顔画像認証処理に対して適正であるか否かを判定する。

ここで、図１６のフローチャートを参照して、適正判定処理について説明する。

ステップＳ５１において、サイズ判定部１５３は、供給された顔画像のサイズが適正サイズであるか否かを判定する。より具体的には、例えば、カメラIDが００１のカメラ３８により撮像された画像より抽出された顔画像の場合、供給されてきた顔画像のサイズであるサイズ（ａ×ｂ）が、適正サイズである（Ａ×Ｂ）の近傍のサイズであるか否かが判定される。より詳細には、サイズ判定部１５３は、例えば、供給されてきた顔画像のサイズであるサイズ（ａ×ｂ）のうち、水平方向のサイズａが、水平方向の適正なサイズであるサイズＡの許容範囲内（Ａ−Ａｔ）＜ａ＜（Ａ＋Ａｔ）（Ａｔは許容範囲）であり、かつ、垂直方向のサイズｂが、垂直方向の適正なサイズであるサイズＢの許容範囲内（Ｂ−Ｂｔ）＜ｂ＜（Ｂ＋Ｂｔ）（Ｂｔは許容範囲）であり、適正サイズである（Ａ×Ｂ）の近傍のサイズであって、供給されてきた顔画像のサイズが適正サイズであるか否かを判定する。

すなわち、カメラ３８により撮像された顔画像のサイズが適正サイズであるか否かは、カメラ３８の設置位置と、顔画像の人物との距離が適切であるか否かが判定されていることに等しい。つまり、遊技台３６に向かって着座している遊技者の顔画像をターゲットとしたい場合、遊技台３６の着座位置に遊技者が着座したときに、カメラ３８で撮像可能な視野内、すなわち、画像内における遊技者の顔画像のサイズとしてとり得るサイズが、カメラ位置情報データベース２３に記憶されているので、この処理により、カメラ３８の設置位置から、抽出された顔画像の人物までの距離が、適正な距離であるか否かが判定される。

そこで、ステップＳ５１において、例えば、供給されてきた顔画像のサイズであるサイズ（ａ×ｂ）のうち、水平方向のサイズａが、水平方向のサイズＡの許容範囲内（Ａ−Ａｔ）＜ａ＜（Ａ＋Ａｔ）であり、かつ、垂直方向のサイズｂが、垂直方向のサイズＢの許容範囲内（Ｂ−Ｂｔ）＜ｂ＜（Ｂ＋Ｂｔ）であり、適正サイズである（Ａ×Ｂ）の近傍のサイズであって、供給されてきた顔画像のサイズが適正サイズであると判定された場合、処理は、ステップＳ５２に進む。

ステップＳ５２において、顔向き判定部１５４は、例えば、供給されてきた顔画像の顔向きが適正であるか否かを判定する。より具体的には、例えば、カメラIDが００１のカメラ３８により撮像された画像より抽出された顔画像の場合、供給されてきた顔画像の顔向きである顔向き情報（ｓ，ｔ，ｕ）が、適正な顔向き情報（ｓ１，ｔ１，ｕ１）の近傍の角度となっているか否かが判定される。より詳細には、顔向き判定部１５４は、供給されてきた顔画像の顔向きである顔向き情報（ｓ，ｔ，ｕ）のうち、水平方向の顔向きである角度ｓが、水平方向の適正な角度ｓ１の許容範囲内（ｓ１−ｓ１ｔ）＜ｓ＜（ｓ１＋ｓ１ｔ）（ｓ１ｔは許容範囲）であり、かつ、垂直方向の顔向きの角度ｔが、垂直方向の適正な角度ｔ１の許容範囲内（ｔ１−ｔ１ｔ）＜ｔ＜（ｔ１＋ｔ１ｔ）（ｔ１ｔは許容範囲）であり、かつ、回転方向の顔向きの角度ｕが、回転方向の適正な角度ｕ１の許容範囲内（ｕ１−ｕ１ｔ）＜ｕ＜（ｕ１＋ｕ１ｔ）（ｕ１ｔは許容範囲）であって、供給されてきた顔画像の顔向きが適正であるか否かを判定する。

すなわち、顔画像認証処理では、一般に、目、口、鼻、または、耳などの器官の配置などを利用して、登録された顔画像との比較がなされるが、登録されている顔画像は、一般に正面方向から撮像した顔画像であるので、顔向きが正面に近いものから離れるにつれて、正しく認識することができなくなり、認識精度が低下する。そこで、顔画像認証処理に必要とされる顔画像のうち、登録されている顔画像、すなわち、正面方向から撮像した顔向きであって、顔画像認証に適正な顔画像であるか否かが判定される。

ステップＳ５２において、顔向き判定部１５４は、例えば、供給されてきた顔画像の顔向きである顔向き情報（ｓ，ｔ，ｕ）のうち、水平方向の顔向きである角度ｓが、水平方向の適正な角度ｓの許容範囲内（ｓ１−ｓ１ｔ）＜ｓ＜（ｓ１＋ｓ１ｔ）（ｓ１ｔは許容範囲）であり、かつ、垂直方向の顔向きの角度ｔが、垂直方向の適正な角度ｔの許容範囲内（ｔ１−ｔ１ｔ）＜ｔ＜（ｔ１＋ｔ１ｔ）（ｔ１ｔは許容範囲）であり、かつ、回転方向の顔向きの角度ｕが、回転方向の適正な角度ｕ１の許容範囲内（ｕ１−ｕ１ｔ）＜ｕ＜（ｕ１＋ｕ１ｔ）（ｕ１ｔは許容範囲）であって、供給されてきた顔画像の顔向きが適正であると判定された場合、処理は、ステップＳ５３に進む。

ステップＳ５３において、画像内位置判定部１５２は、供給されてきた顔画像の画像内位置が適正であるか否かを判定する。より具体的には、例えば、カメラIDが００１のカメラ３８により撮像された画像より抽出された顔画像の場合、供給されてきた顔画像の画像内位置である画像内位置（ｅ，ｆ，ｇ，ｈ）より、適正な領域である領域Ｚ５の近傍であるか否かが判定される。より詳細には、顔向き判定部１５４は、供給されてきた顔画像の画像内位置である画像内位置（ｅ，ｆ，ｇ，ｈ）により、画像内位置の重心位置を求め、適正な領域であるＺ５の重心位置との距離が所定範囲内であるか否かにより、供給されてきた顔画像の画像内位置が適正であるか否かを判定する。

すなわち、カメラ３８は、固定されており、さらに、監視画像として記録する必要があるため、比較的広角度の広い視野の画像として撮像されている。このため、カメラ３８の設置位置と撮像角度により、撮像される画像内における、遊技台３６の着座位置に着座している人物の顔画像は様々な画像内位置をとることになる。

例えば、図１２の左部で示されるように、遊技台３６の正面中央部にカメラ３８が設置されるような場合、図１２の右部で示されるように、カメラ３８で撮像される画像の中央に近い領域Ｚ５に、遊技台３６に着座した遊技者の顔画像は配置されて撮像される。しかしながら、図１３の左部で示されるように、遊技台３６の左上部にカメラ３８が設置されるような場合、図１３の右部で示されるように、カメラ３８で撮像される画像の中央に近い領域Ｚ７に、遊技台３６に着座した遊技者の顔画像は配置される。尚、図１２，図１３においては、カメラ３８の撮像方向はいずれも同一の正面方向であるものとする。

そこで、遊技台３６に着座している遊技者の顔画像が撮像され得る領域、すなわち、図１２であれば、領域Ｚ５を、図１３であれば、領域Ｚ７を、それぞれ適正な領域として設定し、その領域に存在する顔画像を遊技台３６で遊技する遊技者の顔画像であるものとして特定する。

ステップＳ５３において、例えば、カメラIDが００１の場合、供給されてきた顔画像の画像内位置である画像内位置（ｅ，ｆ，ｇ，ｈ）の重心位置が、適正な領域であるＺ５の重心位置との距離が所定範囲内であって、供給されてきた顔画像の画像内位置が適正であると判定されたとき、ステップＳ５４において、ターゲット判定部１２１は、供給されてきた顔画像が、顔画像認識処理に適した顔画像である、すなわち、ターゲットの顔画像であるものとみなし、顔画像認証に適正な顔画像であることを示す判定結果と共に、その顔画像を顔画像切り出し部１２２に供給する。

一方、ステップＳ５１において、適正サイズではないと判定された場合、ステップＳ５２において、顔向きが適正範囲ではないと判定された場合、または、ステップＳ５３において、画像内位置が適正範囲ではないと判定された場合、ステップＳ５５において、供給されてきた顔画像が、顔画像認識処理に適した顔画像ではないと判定され、判定結果のみが顔画像切り出し部１２２に供給される。

すなわち、ターゲット判定部１２１は、供給されてきた顔画像のうち、顔画像のサイズが適正であり、かつ、顔向きが適正であり、かつ、画像内位置が適正である場合に、その顔画像が、顔画像認証処理に適正な顔画像であるものと判定する。

ここで、図１５のフローチャートの説明に戻る。

ステップＳ８において、顔画像切り出し部１２２は、適正判定処理の判定結果が適正であったか否かを判定する。例えば、上述したステップＳ５５の処理により、適正な顔画像ではないと判定された場合、処理は、ステップＳ１に戻る。

一方、ステップＳ８において、例えば、ステップＳ５４の処理により、適正な顔画像であると判定された場合、ステップＳ９において、顔画像切り出し部１２２は、供給されてきた顔画像を顔画像認識装置２０に送信する。この際、顔画像切り出し部１２２は、カメラ３８のそれぞれを識別するカメラIDや、撮像時刻の情報などの情報を顔画像に付加して顔画像認識装置２０に送信する。

以上の処理により、カメラ３８により撮像された画像より抽出された顔画像のうち、顔画像認識処理に適正であると判定された顔画像のみが、顔画像認識装置２０に供給されることになるので、顔画像認識に適さないと判定される顔画像については、顔画像認識装置２０に供給されないため、顔画像認証処理における認証精度を向上させることが可能になるとと共に認証精度が低い可能性の高い顔画像が、顔画像認識装置２０には供給されないことになるので、認識精度の低い顔画像を用いた顔画像認証処理が低減されるので、顔画像認識装置２０の処理負荷を低減させることが可能となる。また、遊技台３６の遊技者の顔画像を撮像するためのカメラを別途設ける必要がなく、遊技台３６に着座した遊技者の顔画像を撮像するためのカメラと、遊技台３６周辺の不正行為を監視するための画像を撮像するカメラとを共用することが可能となり、カメラの設置コストを低減することが可能となる。

ステップＳ２１において、顔画像認識装置２０の顔画像取得部２２１は、顔画像を取得する。ステップＳ２２において、顔画像取得部２２１は、供給された顔画像のうち、いずれか未処理の１つを抽出し、特徴量抽出部２３１に供給する。

ステップＳ２３において、照合部２２２の特徴量抽出部２３１は、供給されてきた顔画像より特徴量を抽出して、顔画像と供に類似度計算部２３２に供給する。

ステップＳ２４において、類似度計算部２３２は、類似度計算処理を実行する。

ここで、図１７のフローチャートを参照して、類似度計算処理について説明する。

ステップＳ６１において、類似度計算部２３２は、顔画像情報DB２１に登録されている顔画像のうち、未処理の１つの登録遊技者の顔画像を抽出し、処理対象に設定する。

ステップＳ６２において、類似度計算部２３２は、処理対象として設定した顔画像情報DB２１に登録されている顔画像より、前記特徴量抽出部２３１より供給されてきた特徴量と同様の特徴量を抽出する。尚、ここで、抽出される特徴量は、顔画像検出部１１２により抽出される顔画像位置、サイズ、および顔向き情報よりも、より詳細なものであって、認識精度の高いパラメータとなる。

ステップＳ６３において、類似度計算部２３２は、特徴量抽出部２３１より供給された顔画像についての、目と目の間隔、あごから額までの長さと、あごから鼻のまでの長さの比率などの各種の顔の特徴量と、顔画像情報DB２１に登録されている顔画像における同様の特徴量とを用いて、それぞれの差分和、平均比率、または比率和などを類似度として計算し、ステップＳ６４において、計算結果である顔画像情報DB２１に登録されている顔画像との類似度を類似度判定部２３３に供給し、バッファ２３３ａに登録させる。

ステップＳ６５において、類似度計算部２３２は、顔画像情報DB２１の登録遊技者DB２５２に未処理の登録遊技者の顔画像が存在するか否かを判定し、未処理の登録遊技者の顔画像が存在する場合、処理は、ステップＳ６１に戻る。すなわち、顔画像情報DB２１の全ての登録遊技者の顔画像との類似度が計算されるまで、ステップＳ６１乃至Ｓ６５の処理が繰り返される。そして、ステップＳ６５において、顔画像情報DB２１に未処理の登録遊技者の顔画像が存在しないと判定された場合、類似度計算処理は終了する。

ここで、図１６のフローチャートの説明に戻る。

ステップＳ２５において、類似度判定部２３３は、バッファ２３３ａに登録されている類似度の計算結果に基づいて順位を求め、顔画像情報DB２１に登録されている顔画像のうちの上位３位までの顔画像と類似度の情報を抽出する。そして、類似度判定部２３３は、上位３位までの顔画像と類似度の情報に基づいて、最上位の類似度が所定の閾値よりも大きいか否かを判定する。すなわち、類似度判定部２３３は、最も類似している登録遊技者（顔画像情報DB２１に登録されている顔画像のうち、顔画像取得部２２１により取得された顔画像と最も類似している登録遊技者：ここでは、類似度の最も高い登録遊技者）の類似度を所定の閾値と比較する。

尚、上述のように、類似度の定義により、撮像された顔画像と最も類似している登録遊技者の顔画像との類似度は、その値そのものが最も高いとは限らないため、類似度と閾値との大小関係はこの例の場合とは異なることがある。

ステップＳ２５において、最上位の類似度が所定の閾値よりも大きいと判定された場合、ステップＳ２６において、類似度判定部２３３は、類似度計算部２３２より供給されてきた上位３位の顔画像が登録遊技者の顔画像の候補であることを示す報知画面３０１を表示部２２を制御して表示させる。

このとき、例えば、図１８で示されるような報知画面３０１が、表示部２２に表示される。

図１８の報知画面３０１においては、カメラ画像表示欄３１１が、左中段に設けられており、画像処理ユニット３９より供給されてきた顔画像が表示される。また、その右側には、類似度の高い順に第１候補乃至第３候補までの類似度の上位３位の登録遊技者の顔画像表示欄３１２−１乃至３１２−３が設けられている。さらに、各登録遊技者の顔画像表示欄３１２−１乃至３１２−３の下には、類似度レベル表示欄３１３−１乃至３１３−３が設けられており、類似度のレベルが表示されている。図１８において、黒で示される領域の横方向の長さが類似度の大きさを示している。

また、類似度レベル表示欄３１３−１乃至３１３−３の下には、対応する位置に、ID表示欄３１４−１乃至３１４−３が設けられており、各顔画像の顔画像情報DB２１における顔画像を識別するIDが表示されており、図１８において、左から「０００５１」、「０００１８」および「０００２２」と表示されている。

さらに、ID表示欄３１４−１乃至３１４−３の下には、それぞれ対応する位置に、それぞれの候補を選択されるときに操作部２２５により操作される確定ボタン３１８−１乃至３１８−３が設けられている。

また、カメラ画像表示欄３１１の下には、その顔画像を撮像したカメラを識別するカメラID表示欄３１５が設けられており、図１８においては、カメラ３８を識別するためのカメラIDとして「カメラ０２」が表示されている。さらに、カメラID表示欄３１５の下には、時刻表示欄３１６が設けられており、カメラ３８により撮像された時刻が表示されており、図１８においては、「１８：２３：３２」と表示されており、カメラ画像表示欄３１１の顔画像が１８時２３分３２秒に撮像されていることが示されている。

さらに、時刻表示欄３１６の下には、別人ボタン３１７が設けられており、カメラ画像の顔画像が、第１候補乃至第３候補となる登録遊技者の顔画像表示欄３１２−１乃至３１２−３のいずれにも似ていないとみなされたとき、操作部２２５により操作される。

ステップＳ２７において、通信部２２４は、操作部２２５が操作されて、候補となる顔画像の何れかが選択されたか否か、すなわち、例えば、図１８で示される報知画面３０１が表示部２２に表示されていた場合、確定ボタン３１８−１乃至３１８−３のいずれかが操作部２２５により操作されたか否かを判定する。

ステップＳ２７において、例えば、確定ボタン３１８−１が操作された場合、第１候補となる顔画像が選択されたとみなされ、ステップＳ２８において、通信部２２４は、選択された第１候補となる顔画像およびカメラ３８により撮像されたカメラ画像を携帯端末１９に送信し、該当する登録遊技者が来店したことを通知する。

ステップＳ４１において、携帯端末１９は、登録遊技者の来店が通知されてきたか否かを判定し、通知されてくるまで、その処理を繰り返す。例えば、ステップＳ４１において、ステップＳ２８の処理により、登録遊技者の来店が通知されてきた場合、ステップＳ４２において、携帯端末１９は、顔画像認識装置２０より送信されてきた登録遊技者の来店の通知を受信すると供に、その通知に併せて送信されてくる登録遊技者の顔画像およびカメラ３８により撮像されたカメラ画像を表示する。

以上の処理により、遊技店１内の係員は、携帯端末１９を所持していると、登録遊技者の来店を認識することが可能となる。

また、ステップＳ２９において、顔画像取得部２２１は、供給された顔画像の全てについて処理を行なったか否かを判定し、未処理の顔画像がある場合、処理は、ステップＳ２２に戻る。すなわち、全ての顔画像について処理が行なわれるまで、ステップＳ２２乃至Ｓ３０の処理が繰り返される。そして、全ての顔画像について処理が終了したと判定された場合、処理は、ステップＳ２１に戻る。

一方、ステップＳ２７において、いずれの候補となる顔画像も選択されず、例えば、図１８の報知画面３０１における別人ボタン３１７が押下された場合、または、ステップＳ２５において、類似度計算部２３２より供給されてくる上位３位までの顔画像と類似度の情報に基づいて、最上位の類似度が所定の閾値よりも大きくない場合、すなわち、最も類似している登録遊技者の顔画像であっても類似度が、所定の閾値未満である場合、ステップＳ３０において、類似度判定部２３３は、画像処理ユニット３９より供給されてきた顔画像を未登録遊技者データベース登録部２２３に供給する。未登録遊技者データベース登録部２２３は、供給されてきた顔画像を生体管理情報バス６及び公衆通信回線網８を介して顔画像管理データベース３にアクセスし、登録する。

以上の処理により、顔画像認識装置２０により画像処理ユニット３９より供給されてきた顔画像が、顔画像情報DB２１に登録されていないとみなされると、顔画像管理センタ２により管理されている顔画像管理DB３内に未登録遊技者の顔画像として登録される。

以上によれば、顔画像による顔画像認証を実行するに当たり、カメラ３８の設置位置、および撮像方向に基づいて、顔画像認証処理に適正な顔画像のみを選択的に顔画像認識装置２０に供給し、顔画像認証処理を実行させるようにしたので、広角度の監視用のカメラを設けるのみで、監視画像の取得と、顔認証処理とを実現させることができ、顔認証処理に必要なカメラ、および監視用に必要とされるカメラとを、それぞれ設置する必要がないので、設置コストを低減することが可能となる。また、顔認証処理に適正な顔画像のみが顔画像認識装置２０に供給されるので、顔画像認証の認証精度を向上させることが可能となる。

ところで、上述した一連の監視処理は、ハードウェアにより実行させることもできるが、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、記録媒体からインストールされる。

図１９は、汎用のパーソナルコンピュータの構成例を示している。このパーソナルコンピュータは、CPU(Central Processing Unit)１００１を内蔵している。CPU１００１にはバス１００４を介して、入出力インタフェース１００５が接続されている。バス１００４には、ROM(Read Only Memory)１００２およびRAM(Random Access Memory)１００３が接続されている。

入出力インタフェース１００５には、ユーザが操作コマンドを入力するキーボード、マウスなどの入力デバイスよりなる入力部１００６、処理操作画面や処理結果の画像を表示デバイスに出力する出力部１００７、プログラムや各種データを格納するハードディスクドライブなどよりなる記憶部１００８、LAN（Local Area Network）アダプタなどよりなり、インターネットに代表されるネットワークを介した通信処理を実行する通信部１００９が接続されている。また、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory)、DVD(Digital Versatile Disc)を含む）、光磁気ディスク（ＭＤ(Mini Disc)を含む）、もしくは半導体メモリなどのリムーバブルメディア１０１１に対してデータを読み書きするドライブ１０１０が接続されている。

CPU１００１は、ROM１００２に記憶されているプログラム、または磁気ディスク、光ディスク、光磁気ディスク、もしくは半導体メモリ等のリムーバブルメディア１０１１から読み出されて記憶部１００８にインストールされ、記憶部１００８からRAM１００３にロードされたプログラムに従って各種の処理を実行する。RAM１００３にはまた、CPU１００１が各種の処理を実行する上において必要なデータなども適宜記憶される。

尚、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理は、もちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理を含むものである。

また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。

本発明を適用した監視システムの一実施の形態の構成を示す図である。 図１のカメラの設置例を示す図である。 図１のカメラの設置例を示す図である。 図１のカメラの設置例を示す図である。 図１のカメラの設置例を示す図である。 図１のカメラの設置例を示す図である。 図１のカメラの設置例を示す図である。 図１の画像処理ユニットの構成例を説明する図である。 画像内位置を説明する図である。 顔向きを説明する図である。 図１のカメラ位置情報DBの構成例を説明する図である。 画像内位置の適正領域を説明する図である。 画像内位置の適正領域を説明する図である。 顔画像認識装置を説明する図である。 登録遊技者来店監視処理を説明するフローチャートである。 適正判定処理を説明するフローチャートである。 類似度計算処理を説明するフローチャートである。 報知画像の表示例を説明する図である。 パーソナルコンピュータの構成例を説明する図である。

符号の説明

１，１−１乃至１−ｎ 遊技店
２ 顔画像管理センタ
３ 顔画像管理データベース
４ 第３者遊技店管理センタ
５ 第３者遊技店管理データベース
６ 顔画像管理バス
７ 第３者遊技店管理バス
８，９ 公衆通信回線網
２１ 顔画像認識装置
２２ 顔画像情報データベース
２４ 遊技店管理装置
２６ 遊技台管理データベース
２７ 媒体貸出管理装置
２９ 媒体貸出管理データベース
３０ 遊技店管理情報バス
３１ 顔画像情報バス
３３ 精算機
３４ 貸出機
３５ 計数機
３６，３６−１乃至３６−ｍ 遊技台
３７，３７−１乃至３７−ｍ 遊技台周辺端末
３８，３８−１乃至３８−ｍ カメラ
３９，３９−１乃至３９−ｍ 画像処理ユニット

Claims (7)

1. 画像を撮像する撮像手段と、
   前記撮像手段により撮像された画像より顔画像と、前記顔画像が検出された顔画像の検出位置とを検出する顔画像検出手段と、
   前記撮像手段が設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とを対応付けてテーブルとして記憶する記憶手段と、
   前記撮像手段が設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報を、前記テーブルより読み出す読出手段と、
   前記読出手段により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出手段により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する出力手段と
   を含む監視装置。
2. 前記顔画像検出手段は、
   前記顔画像のサイズを計算するサイズ計算手段と、
   前記顔画像における顔向きを示す顔向き情報を測定する顔向き情報測定手段とをさらに含む
   を含む請求項１に記載の監視装置。
3. 前記設置位置情報は、前記撮像手段が設置される設置位置を示す情報に加えて、前記撮像手段の撮像角度を示す撮像角度情報をさらに含む
   請求項１に記載の監視装置。
4. 前記顔画像検出手段は、
   前記顔画像のサイズを計算するサイズ計算手段と、
   前記顔画像における顔向きを示す顔向き情報を測定する顔向き情報測定手段とを含み、
   前記設置位置情報は、前記撮像手段が設置される設置位置を示す情報に加えて、前記撮像手段の撮像角度を示す撮像角度情報をさらに含む
   請求項１に記載の監視装置。
5. 前記記憶手段は、前記撮像手段が設置される位置を示す設置位置情報、および前記撮像角度情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報、前記サイズ、および前記顔向きとを対応付けてテーブルとして記憶し、
   前記読出手段は、前記設置位置情報、および前記撮像角度情報に対応する、前記画像における前記顔画像が検出される適正位置情報を、前記テーブルより読み出し、
   前記出力手段は、前記サイズが所定サイズよりも大きく、かつ、前記顔向きが所定の範囲である場合、前記読出手段により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出手段により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する
   請求項４に記載の監視装置。
6. 画像を撮像する撮像手段と、
   前記撮像手段により撮像された画像より顔画像を検出する顔画像検出手段と、
   前記撮像手段が設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とを対応付けてテーブルとして記憶する記憶手段と、
   前記撮像手段が設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報を、前記テーブルより読み出す読出手段と、
   前記読出手段により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出手段により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する出力手段と
   を含む監視装置の監視方法において、
   前記撮像手段による、前記画像を撮像する撮像ステップと、
   前記顔画像検出手段による、前記撮像ステップの処理により撮像された画像より顔画像と、前記顔画像が検出された顔画像の検出位置とを検出する顔画像検出ステップと、
   前記読出手段による、前記撮像手段が設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とを対応付けてテーブルより、前記撮像手段が設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報を読み出す読出ステップと、
   前記読出手段による、前記読出ステップの処理により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出ステップの処理により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する出力ステップと
   を含む監視方法。
7. 画像を撮像する撮像手段と、
   前記撮像手段により撮像された画像より顔画像を検出する顔画像検出手段と、
   前記撮像手段が設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とを対応付けてテーブルとして記憶する記憶手段と、
   前記撮像手段が設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報を、前記テーブルより読み出す読出手段と、
   前記読出手段により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出手段により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する出力手段と
   を含む監視装置を制御するコンピュータに、
   前記撮像手段による、前記画像を撮像する撮像ステップと、
   前記顔画像検出手段による、前記撮像ステップの処理により撮像された画像より顔画像と、前記顔画像が検出された顔画像の検出位置とを検出する顔画像検出ステップと、
   前記読出手段による、前記撮像手段が設置される位置を示す設置位置情報と、前記画像における前記顔画像が検出される適正位置を示す適正位置情報とを対応付けてテーブルより、前記撮像手段が設置される位置を示す設置位置情報に対応する、前記画像における前記顔画像が検出される適正位置情報を読み出す読出ステップと、
   前記読出手段による、前記読出ステップの処理により読み出された前記適正位置情報に基づいた適正位置と、前記顔画像検出ステップの処理により検出された顔画像の検出位置とが一致するとき、前記顔画像を出力する出力ステップと
   を制御させるプログラム。

Images