JP2008085874A - 人物監視システムおよび人物監視方法 - Google Patents

Abstract

【課題】 各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆで撮影されている画像から任意のタイミングで監視対象者の顔画像を指定することができ、任意のタイミングで指定された監視対象者を各カメラで撮影された画像に含まれる顔画像との顔照合によって追跡監視することができる。この結果として、監視員の利便性が向上し、効率的な人物追跡機能を実現できる。
【解決手段】 人物監視システムは、監視領域内の各所に設置された複数のカメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆで撮影された画像を監視装置２０の表示部に表示し、その表示部に表示されている画像から特定の人物の顔画像が監視装置２０の操作部で指定された場合、指定された人物の顔画像を監視対象者の顔画像として設定し、設定された監視対象者の顔画像と各カメラにより撮影された画像に含まれる顔画像とを照合処理装置１０で照合し、その照合結果を監視装置２０の表示部に表示する。
【選択図】 図１

Description

この発明は、例えば、施設内などの監視領域内において特定の人物を監視する人物監視システム及び人物監視方法に関する。

従来、人物監視システムでは、監視用のカメラで撮影した画像から特定の人物の顔画像を検出し、その検出結果を表示装置に表示するものが提案されている。従来の人物監視システムには、監視カメラによる人物検出と、特定人物の表示画面上におけるハイライト表示方法について提案されているものもある（たとえば、特許文献１）。
しかしながら、上述した人物監視システムでは、予め監視対象とする特定の人物の顔画像と登録しておておく必要がある。このため、従来の人物監視システムでは、運用中に、監視対象となる人物を、適宜、登録するのが難しいという問題がある。また、上述した人物監視システムでは、複数のカメラで撮影した全ての画像に対して予め登録した特定の人物の顔画像を検出する処理を実施する必要がある。このため、上述した従来の通行制御システムでは、監視カメラの数が多くなると、システムの負荷が大きくなり、効率的な処理ができないという問題点がある。
特開２００４−１２８６１５号公報

この発明の一形態では、所望の人物を効率的に監視できる人物監視システムおよび人物監視方法を提供することを目的とする。

この発明の一形態としての人物監視システムは、監視領域内の各所における画像を撮影する複数の撮影手段と、これらの撮影手段により撮影された画像を表示する表示手段と、この表示手段により表示された各撮影手段により撮影された画像から特定の人物の顔画像を指定するための指定手段と、この指定手段により指定された人物の顔画像を記憶する記憶手段と、前記各撮影手段により撮影された画像に含まれる顔画像と前記記憶手段に記憶されている顔画像とを照合する照合手段と、この照合手段による照合結果を報知する報知手段とを有する。

この発明の一形態としての人物監視システムは、監視領域内の各所における画像を撮影する複数の撮影手段と、これらの撮影手段により撮影された画像を表示する表示手段と、各撮影手段ごとに設定され、監視対象者の顔画像を記憶する複数の記憶手段と、前記撮影手段により撮影された画像に含まれる顔画像と当該画像を撮影した撮影手段に対応する記憶手段に記憶されている監視対象者の顔画像とを照合する照合手段と、この照合手段による照合結果を報知する報知手段と、前記照合手段による照合結果に基づいて監視対象者の顔画像を記憶すべき記憶手段を判断する判断手段と、この判断手段による判断結果に基づいて各記憶手段を更新する更新手段とを有する。

この発明の一形態によれば、所望の人物を効率的に監視できる人物監視システムおよび人物監視方法を提供できる。

以下、本発明の実施の形態について図面を参照して説明する。
図１は、この発明の実施の形態に係る人物監視システムの全体構成を模式的に示すものである。
図１に示すように、人物監視システムは、複数のカメラ、照合処理装置、および、監視装置などにより構成されている。なお、図１に示す例は、施設などの通路内を監視領域とし、通路内における人物を監視するシステムに当該人物監視システムを適用した例である。以下、図１に示すような通路において人物を監視するシステムを想定して説明するものとする。但し、本人物監視システムは、複数の箇所に複数のカメラを設置し、それらのカメラにより撮影した画像を監視するものであれば、種々の運用形態に適用可能なものである。

上記各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆは、通路内の各所に設置されている。各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆでは、通路内の所定の領域（撮影領域）における画像を撮影している。また、上記各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆは、照合処理装置１０に接続されている。上記各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆは、撮影した画像（撮影画像）を照合処理装置１０へ供給するようになっている。なお、上記各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆは、上記監視装置２０へも供給するようにしても良い。

図１に示す例では、カメラＡが撮影する領域はカメラＢが撮影する領域に隣接する。カメラＢが撮影する領域は、カメラＡ、Ｃ、Ｅが撮影する各領域に隣接する。カメラＣが撮影する領域はカメラＢ、Ｄ、Ｅが撮影する各領域に隣接する。カメラＤが撮影する領域はカメラＣが撮影する領域に隣接する。カメラＥが撮影する領域は、カメラＢ、Ｃ、Ｆが撮影する各領域に隣接する。カメラＦが撮影する領域はカメラＥが撮影する領域に隣接する。なお、カメラは、１つの領域を複数の角度から撮影可能なように、１つの領域に対して複数設置するようにしても良い。

上記照合処理装置１０は、各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆで撮影した画像を処理するための装置である。すなわち、上記照合処理装置１０は、各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆで撮影した画像から人物の顔画像を検出し、検出した顔画像と特定の人物の顔画像との照合を行い、その顔画像の検出結果および照合結果を上記監視装置２０へ送信するようになっている。また、上記照合処理装置１０では、各カメラごとに照合対象となる人物の顔画像を記憶する照合データベースを有している。

上記監視装置２０は、監視員が通路内の人物を監視するための装置である。すなわち、上記監視装置２０では、各カメラにより撮影した画像とともに、上記照合処理装置１０による特定の人物の検出結果などを表示装置に表示するようになっている。また、上記監視装置２０では、監視員（操作員）により操作される。たとえば、上記監視装置２０では、監視員による操作に応じて監視対象とする人物（監視対象者）を特定する。監視対象者を特定した場合、上記監視装置２０では、所定のルールに従って、監視対象者を撮影する可能性のあるカメラに応じて上記照合データベースの更新を照合処理装置１０に対して要求するようになっている。

図２、図３、図４は、当該人物監視システムの機器構成の例を示す図である。
図２、図３、図４では、複数のカメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆに対する照合処理装置の構成が異なっている。
たとえば、図２は、全てのカメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆに対して１つの照合処理装置が設置されているシステム構成例を示している。図２に示す構成例では、全てのカメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆにより撮影した各画像について１つの照合処理装置１０が人物の検出処理を実行する。このため、図２に示す照合処理装置１０は、各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆに対応する照合データベース１１ａ、１１ｂ、１１ｃ、１１ｄ、１１ｅ、１１ｆを有している。図２に示す構成では、各カメラを１つの照合処理装置１０に接続させれば良い。このため、図２に示す構成は、各カメラを設置する際の自由度が高く、たとえば、小型のカメラであっても容易に実現できる。なお、図２に示す構成では、照合処理装置１０と監視装置２０との機能を併せ持つ１つの装置で実現するようにしても良い。

図３は、各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆに対してそれぞれに照合処理装置が設置されているシステム構成例を示している。図３に示す構成例では、各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆにより撮影した各画像について各照合処理装置１０（１０ａ、１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆ）が人物の検出処理を実行する。このため、図３に示す各照合処理装置１０（１０ａ、１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆ）では、ぞれぞれが各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆに対応する照合データベース１１ａ、１１ｂ、１１ｃ、１１ｄ、１１ｅ、１１ｆを有している。図３に示す構成では、各カメラにより撮影された画像に対する処理（顔画像の検出処理、照合処理など）を各装置で実行できる。これにより、図３に示す構成では、各照合処理装置が実行する処理が単純で、処理速度を向上させたり、高度な処理（処理負荷の大きい処理）を容易に実施できる。

図４は、グループ分けされた複数のカメラ（ＡとＢ、ＣとＤ、ＥとＦ）ごとに照合処理装置が設置されているシステム構成例を示している。図４に示す構成例では、全てのカメラＡ及びＢにより撮影した各画像について照合処理装置１０ａｂが人物の検出処理を実行し、カメラＣ及びＤにより撮影した各画像について照合処理装置１０ｃｄが人物の検出処理を実行し、カメラＥ及びＦにより撮影した各画像について照合処理装置１０ｅｆが人物の検出処理を実行する。

このため、図４に示す照合処理装置１０ａｂは、カメラＡ及びＢに対応する照合データベース１１ａ及び１１ｂを有し、照合処理装置１０ｃｄは、カメラＣ及びＤに対応する照合データベース１１ｃ及び１１ｄを有し、照合処理装置１０ｅｆは、カメラＥ及びＦに対応する照合データベース１１ｅ及び１１ｆを有している。図４に示す構成では、照合処理装置に処理能力等に応じて、各照合処理装置が処理対象するカメラをグループ分けすることが可能である。これにより、図４に示す構成では、各機器の処理能力、処理量あるいは運用形態などに応じて最適なシステムを設計しやすい。たとえば、１つの領域を複数のカメラで撮影する場合などの各グループごとに照合データベースを共通とするような運用形態では、効率的なシステム設計が可能となる。

次に、上記照合処理装置１０の構成について説明する。
図５は、上記照合処理装置１０の構成例を示すブロック図である。
図５に示すように、上記照合処理装置１０は、主制御部１２、画像インターフェース（Ｉ／Ｆ）部１３、通信インターフェース（Ｉ／Ｆ）部１４、顔検出部１５、顔照合部１６、および、記憶部１７などを有している。また、上記記憶部１７には、照合データベース１１が設けられている。

上記主制御部１２は、当該照合処理装置１０全体の制御を司るものである。上記主制御部１２は、ＣＰＵ、プログラムメモリ、ワーキングメモリなどにより構成される。上記主制御部１２では、ＣＰＵがプログラムメモリあるいは記憶部１７に記憶されているプログラムを実行することにより種々の機能を実現している。

上記画像インターフェース部１３は、各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆにより撮影された画像を入力するためのインターフェースである。上記画像インターフェース部１３は、システム構成、および、各カメラの構成に応じた構成を有している。たとえば、図２あるいは図４に示すようなシステム構成である場合、上記画像インターフェース部１３は、各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆからの各画像を各カメラを識別するための情報とともに管理する。
上記通信インターフェース部１４は、上記監視装置２０との通信を行うためのインターフェースである。たとえば、上記照合処理装置１０では、上記通信インターフェース部１４を介して顔検出処理及び照合処理などの処理結果と各カメラが撮影した画像とを上記監視装置２０へ供給するようになっている。

上記顔検出部１５は、カメラにより撮影された画像から人物の顔画像を検出する処理を行うものである。上記顔検出部１５では、顔画像が検出された場合、たとえば、各カメラで撮影した画像全体における座標値などで顔画像の領域を示す。

上記顔照合部１６は、上記顔検出部１５によりカメラで撮影した画像から検出した顔画像と上記記憶部１７内の照合データベース１１に記憶されている特定の人物の顔画像との照合処理を行うものである。たとえば、上記顔照合部１６では、上記顔検出部１５により検出された顔画像と上記照合データベース１１に記憶されている顔画像とからそれぞれ顔の特徴量を抽出する。上記顔照合部１６では、上記顔検出部１５により検出された顔画像から抽出した顔の特徴量と上記照合データベース１１に記憶されている顔画像から抽出した顔の特徴量との類似度を判定する。上記顔照合部１６では、判定した類似度が所定の閾値以上であるか否かにより上記顔検出部１５により検出した顔画像と上記照合データベース１１に記憶されている顔画像とが一致するか否かを判定する。

上記記憶部１７内の照合データベース１１は、当該照合処理装置１０が照合対象とする特定の人物の顔画像（あるいは顔の特徴量）が記憶される。また、上述したように、照合データベース１１としては、当該照合処理装置１０が処理対象とする各カメラごとに照合データベースが設けられる。たとえば、当該照合処理装置１０が複数のカメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆにより撮影された画像を処理対象とする場合、上記記憶部１７には、照合データベース１１として、それらの各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆに対応した照合データベース１１ａ、１１ｂ、１１ｃ、１１ｄ、１１ｅ、１１ｆが設けられる。また、上記照合データベース１１に記憶される特定の人物の顔画像（あるいは顔の特徴量）は、上記主制御部１２の制御により顔画像（あるいは顔の特徴量）の追加及び削除が行われる。つまり、上記照合データベース１１は、上記主制御部１２の制御によって常時更新可能な状態となっている。

次に、上記監視装置２０の構成について説明する。
図６は、上記監視装置２０の構成例を示すブロック図である。
図６に示すように、上記監視装置２０は、主制御部２１、通信インターフェース部２２、表示部２３、操作部２４、および、記憶部２５などを有している。また、上記記憶部２５には、監視設定データテーブル２６および監視対象者データベース２７が設けられている。

上記主制御部２１は、当該監視装置２０全体の制御を司るものである。上記主制御部２１は、ＣＰＵ、プログラムメモリ、ワーキングメモリなどにより構成される。上記主制御部２１では、ＣＰＵがプログラムメモリあるいは記憶部２５に記憶されているプログラムを実行することにより種々の機能を実現している。また、上記主制御部２１は、時間を計時するためのタイマ２１ａを有している。上記主制御部２１では、上記タイマ２１ａにより所望のタイミングでリセットしてからの経過時間ｔを計時するようになっている。また、後述する処理において、複数の監視対象者が同時期に存在する場合、各監視対象者に対してそれぞれ経過時間を計時するため、上記主制御部２１は、複数の経過時間を計時することも可能となっている。

上記通信インターフェース部２２は、上記照合処理装置１０との通信を行うためのインターフェースである。上記監視装置２０では、上記通信インターフェース部２２を介して上記照合処理装置１０による処理結果および各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆが撮影した画像などを受信するようになっている。なお、上記通信インターフェース部２２では、各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆに直接的に接続し、各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆが撮影した画像を上記照合処理装置１０を介さずに直接受信するようにしても良い。この場合、後述する監視画面では、各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆからの画像と上記照合処理装置１０からの顔検出および顔照合の結果とを重ね合わせて上記表示部２３に表示するようにすれば良い。

上記表示部２３は、監視員による監視画面などが表示される表示装置である。上記表示部２３には、監視画面として、各カメラで撮影した画像とともに、上記照合処理装置１０による処理結果が表示される。なお、上記表示部２３による監視画面の表示例については、後で詳細に説明する。
上記操作部２４は、監視員により操作されるものである。上記操作部２４は、キーボードや上記監視画面上の特定の位置を指定するためのポインティングデバイスなどにより構成される。なお、上記表示部２３と上記操作部２４とは、タッチパネル内蔵の表示装置により構成するようにしても良い。

上記記憶部２５内の監視設定データテーブル２６には、監視対象者の顔画像を各照合データベース１１ａ、１１ｂ、１１ｃ、１１ｄ、１１ｅ、１１ｆに設定するための情報が記憶されている。上記監視装置２０では、上記監視設定データテーブル２６による設定内容に基づいて各照合データベース１１ａ、１１ｂ、１１ｃ、１１ｄ、１１ｅ、１１ｆに記憶する監視対象者の顔画像（あるいは顔の特徴量）を設定するようになっている。
上記記憶部２５内の監視対象者データベース２７には、当該人物監視システムにおける全ての監視対象者の顔画像（あるいは顔の特徴量）が記憶される。すなわち、各照合データベースに記憶される監視対象者の顔画像（あるいは顔の特徴量）は、全て監視対象者データベース２７に記憶されているようになっている。

次に、上記監視設定データテーブル２６について説明する。
ここでは、上述したように、各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆが図１に示すように配置されているものとする。すなわち、ここでは、図１に示すように、カメラＡに撮影された人物は、カメラＡの撮影領域に隣接するカメラＢの撮影領域のみに移動可能であるものとする。また、カメラＢに撮影された人物は、カメラＢの撮影領域に隣接するカメラＡ、Ｃ、Ｅの各撮影領域のみ移動可能であるものとする。また、カメラＣに撮影された人物は、カメラＣの撮影領域に隣接するカメラＢ、Ｄ、Ｅの各撮影領域にのみ移動可能であるものとする。また、カメラＤに撮影された人物は、カメラＤの撮影領域に隣接するカメラＣの撮影領域にのみ移動可能であるものとする。また、カメラＥに撮影された人物は、カメラＥの撮影領域に隣接するカメラＢ、Ｃ、Ｆの各撮影領域にのみ移動可能であるものとする。また、カメラＦに撮影された人物は、カメラＦの撮影領域に隣接するカメラＥの撮影領域にのみ移動可能であるものとする。

図７は、上記監視設定データテーブル２６の構成例を示す図である。
図７に示す監視設定データテーブルの例は、上述したような各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆの設置位置を考慮して設定されたものである。上述したように、各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆにより撮影された各画像には、それぞれ照合処理用の照合データベース１１ａ、１１ｂ、１１ｃ、１１ｄ、１１ｅ、１１ｆが設けられている。このため、各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆにより撮影された各画像に対して効率的に顔検出及び顔照合を実行するには、各照合データベース１１に必要な顔画像（もしくは顔の特徴量）のみを記憶しておくようにすれば良い。図１のような運用形態では、通路の形状と各カメラの設置とに基づいて人物が移動する領域を予測できる。このような予測に従って各照合データベースの更新（顔画像の追加あるいは削除）を行うようにすれば、効率的な顔検出および顔照合を実現できる。

ここでは、上述したように、人物の移動が、隣接する領域に限定されるものとしている。このため、監視設定データテーブル２６では、あるカメラで撮影されていた監視対象者が移動してから所定の第１の時間（Ｔ１）が経過すると、当該カメラの撮影領域に隣接する撮影領域の別のカメラに対応する照合データベースに当該監視対象者の顔画像（もしくは顔の特徴量）を追記し、さらに、所定の第２の時間（Ｔ２）が経過すると、当該カメラの撮影領域に隣接する撮影領域の別のカメラ以外のカメラに対応する各照合データベースから当該監視対象者の顔画像（もしくは顔の特徴量）を削除するように設定されている。

たとえば、図７に示す例では、カメラＡで撮影されていた監視対象者がカメラＡで撮影された画像から検出されなくなった場合（カメラＡで撮影されていた監視対象者がカメラＡの撮影領域から移動した場合）、当該監視対象者の顔画像（あるいは顔の特徴量）は、当該監視対象者がカメラＡの撮影領域から移動して時間Ｔ１が経過すると、カメラＡの撮影領域に隣接する撮影領域のカメラＢに対応する照合データベース１１ｂに追加される。さらに、当該監視対象者がカメラＡの撮影領域から移動して時間Ｔ２が経過すると、カメラＢ以外のカメラＡ、Ｃ、Ｄ、Ｅ、Ｆに対応する照合データベース１１ａ、１１ｃ、１１ｄ、１１ｅ、１１ｆから削除される。

また、図７に示す例では、カメラＢで撮影されていた監視対象者がカメラＢで撮影された画像から検出されなくなった場合（カメラＢで撮影されていた監視対象者がカメラＢの撮影領域から移動した場合）、当該監視対象者の顔画像は、当該監視対象者がカメラＢの撮影領域から移動して時間Ｔ１が経過すると、カメラＢの撮影領域に隣接する撮影領域のカメラＡ、Ｃ、Ｅに対応する各照合データベース１１ａ、１１ｃ、１１ｅに追加される。さらに、当該監視対象者がカメラＢの撮影領域から移動して時間Ｔ２が経過すると、当該監視対象者の顔画像は、カメラＡ、Ｃ、Ｅ以外のカメラＢ、Ｄ、Ｆに対応する照合データベース１１ｂ、１１ｄ、１１ｆから削除される。

また、図７に示す例では、カメラＣで撮影されていた監視対象者がカメラＣで撮影された画像から検出されなくなった場合（カメラＣで撮影されていた監視対象者がカメラＣの撮影領域から移動した場合）、当該監視対象者の顔画像は、当該監視対象者がカメラＣの撮影領域から移動して時間Ｔ１が経過すると、カメラＣの撮影領域に隣接する撮影領域のカメラＢ、Ｄ、Ｅに対応する各照合データベース１１ｂ、１１ｄ、１１ｅに追加される。さらに、当該監視対象者がカメラＣの撮影領域から移動して時間Ｔ２が経過すると、当該監視対象者の顔画像は、カメラＢ、Ｄ、Ｅ以外のカメラＡ、Ｃ、Ｆに対応する照合データベース１１ａ、１１ｃ、１１ｆから削除される。

また、図７に示す例では、カメラＤで撮影されていた監視対象者がカメラＤで撮影された画像から検出されなくなった場合（カメラＤで撮影されていた監視対象者がカメラＤの撮影領域から移動した場合）、当該監視対象者の顔画像（あるいは顔の特徴量）は、当該監視対象者がカメラＤの撮影領域から移動して時間Ｔ１が経過すると、カメラＤの撮影領域に隣接する撮影領域のカメラＣに対応する照合データベース１１ｃに追加される。さらに、当該監視対象者がカメラＤの撮影領域から移動して時間Ｔ２が経過すると、カメラＣ以外のカメラＡ、Ｂ、Ｄ、Ｅ、Ｆに対応する照合データベース１１ａ、１１ｂ、１１ｄ、１１ｅ、１１ｆから削除される。

また、図７に示す例では、カメラＥで撮影されていた監視対象者がカメラＥで撮影された画像から検出されなくなった場合（カメラＥで撮影されていた監視対象者がカメラＥの撮影領域から移動した場合）、当該監視対象者の顔画像は、当該監視対象者がカメラＥの撮影領域から移動して時間Ｔ１が経過すると、カメラＥの撮影領域に隣接する撮影領域のカメラＢ、Ｃ、Ｆに対応する各照合データベース１１ｂ、１１ｃ、１１ｆに追加される。さらに、当該監視対象者がカメラＥの撮影領域から移動して時間Ｔ２が経過すると、当該監視対象者の顔画像は、カメラＢ、Ｃ、Ｆ以外のカメラＡ、Ｄ、Ｅに対応する照合データベース１１ａ、１１ｄ、１１ｅから削除される。

また、図７に示す例では、カメラＦで撮影されていた監視対象者がカメラＦで撮影された画像から検出されなくなった場合（カメラＦで撮影されていた監視対象者がカメラＦの撮影領域から移動した場合）、当該監視対象者の顔画像（あるいは顔の特徴量）は、当該監視対象者がカメラＦの撮影領域から移動して時間Ｔ１が経過すると、カメラＦの撮影領域に隣接する撮影領域のカメラＥに対応する照合データベース１１ｅに追加される。さらに、当該監視対象者がカメラＦの撮影領域から移動して時間Ｔ２が経過すると、カメラＥ以外のカメラＡ、Ｂ、Ｃ、Ｄ、Ｆに対応する照合データベース１１ａ、１１ｂ、１１ｃ、１１ｄ、１１ｆから削除される。

また、上記監視設定データテーブル２６において設定される所定の第１の時間（Ｔ１）は、「０」以上の時間（Ｔ１≧０）であれば良い。このＴ１の値は、各カメラの設定状況や運用状況に応じて設定するのが好ましい。たとえば、Ｔ１＝０とすれば、当該監視対象者を検出していた画像を撮影していたカメラに隣接するカメラで撮影した画像から即座に当該監視対象者が検出可能となる。また、上記監視設定データテーブル２６において設定される所定の第２の時間（Ｔ２）は、Ｔ１以上の時間（Ｔ２≧Ｔ１）であれば良い。これは、あるカメラで撮影した画像から検出できなくなった監視対象者が再び同じカメラで撮影した画像から検出される可能性を考慮したものである。上記Ｔ２の値も、各カメラの設定状況や運用状況に応じて設定するのが好ましい。

また、監視装置２０では、あるカメラで撮影されていた監視対象者が当該カメラで撮影されている画像から検出されなくなってからの時間（カメラで撮影されていた監視対象者が当該カメラの撮影領域から移動してからの時間）ｔをタイマ２１ａに用いてカウントする。ただし、運用形態によっては、時間Ｔ２が経過する前に、監視対象者がさらに移動してしまうこともありうる。このような場合であっても、当該監視対象者を確実に追跡できるように、上記監視装置２０では、当該監視対象者が移動するごとに時間ｔをリセットするようになっている。
さらに、上記監視設定データテーブル２６は、各照合処理装置１０の記憶部１７に設けるようにしても良い。この場合、各照合処理装置１０が監視設定データテーブル２６の設定内容に基づいて監視対象者の顔画像の追加及び削除を実行することが可能となる。

次に、監視画面の表示例について説明する。
図８および図９は、上記監視装置２０の表示部２３による監視画面の表示例を示す図である。なお、図９は、図８に示すような監視画面を表示してからある時間が経過した後の監視画面の表示例を示している。
図８および図９に示す表示例において、上記監視装置２０の表示部２３により表示される監視画面では、各カメラで撮影された画像が並べて表示される。また、各カメラで撮影された各画像には、それぞれ上記照合処理装置１０で検出された顔画像の領域を示す点線Ｒｄあるいは実線Ｒｓが表示されている。これらの点線Ｒｄあるいは実線Ｒｓは、上記照合処理装置１０で検出された全ての顔画像の領域に対して表示されている。これにより、図８および図９に示す監視画面では、上記照合処理装置１０で検出された全ての顔画像を容易に視認できるようになっている。

図８あるいは図９に示す監視画面において実線Ｒｓで領域が示される顔画像は、監視対象者となっている人物の顔画像を示している。さらに、実線Ｒｓ（あるいは実線Ｒｓで囲まれる領域全体）は、ハイライト表示され、視覚的に強調されて表示されている。さらに、監視画面における下部の領域には、監視対象者がどのカメラで表示されているかを文字で表示している。
図８に示す表示例においてカメラＡで撮影されていた画像内に存在した監視対象者の顔画像は、図９に示す表示例ではカメラＢで撮影されている画像内に存在している。これは、当該監視対象者がカメラＡの撮影領域からカメラＢの撮影領域に移動したことを示している。このように、図８および図９に示すような監視画面では、監視対象者の現在位置が容易に視認できるようになっている。

また、図８あるいは図９に示すような監視画面を表示している監視装置２０では、監視員が監視対象者を指定できるようになっている。すなわち、監視画面において、監視対象者の顔画像（顔画像の領域を示す点線Ｒｄ）を操作部２４により指示すると、上記監視装置２０では、指定された領域の顔画像を監視対象者の顔画像として登録する処理を行うようになっている。監視対象者の指定方法は、たとえば、操作部２４としてのポインティングデバイスにより監視画面上に表示されている点線Ｒｄで囲まれた領域を指定するようにすれば良い。このような指定方法によれば、監視対象者の顔画像と当該監視対象者の現在位置とを直感的かつ直接的に指定できる。さらに、上記のような指定方法では、予め監視対象者の顔画像を登録する必要がなく、監視画面上に表示された任意の人物をリアルタイムで監視対象者として指定することが可能となる。

次に、当該人物監視システムにおける特定人物の監視処理の手順について説明する。
まず、照合処理装置１０における処理について説明する。
図１０は、上記照合処理装置１０における処理例を説明するためのフローチャートである。
上記各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆでは、それぞれの撮影領域の画像を常時撮影している。上記各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆで撮影された画像は、それぞれ対応する照合処理装置１０に供給される。なお、上記照合処理装置１０では、上記各カメラＡ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆで撮影された画像を所定の間隔で取得するようにしても良いし、任意のタイミングで各カメラから取得するようにしても良い。

上記照合処理装置１０では、各カメラで撮影された画像を画像インターフェース部１３により受信し、当該画像に対する顔検出処理、顔照合処理および画像転送処理などの画像処理を行う（ステップＳ１〜Ｓ４）。
すなわち、カメラＡ（Ｂ、Ｃ、Ｄ、ＥあるいはＦ）で撮影された画像を画像インターフェース部１３により受信すると（ステップＳ１）、上記照合処理装置１０の主制御部１２は、上記顔検出部１５により当該画像から顔画像を検出する顔検出処理を行う（ステップＳ２）。上記顔検出部１５では、カメラＡ（Ｂ、Ｃ、Ｄ、ＥあるいはＦ）から取得した画像に含まれる全ての顔画像を検出し、検出された各顔画像の領域を示す座標値（当該画像における座標値）を顔検出処理の処理結果とする。

上記顔検出処理によりカメラＡ（Ｂ、Ｃ、Ｄ、ＥあるいはＦ）で撮影した画像に含まれる顔画像を検出すると、上記主制御部１２は、検出された各顔画像について上記顔照合部１６により顔照合処理を行う（ステップＳ３）。なお、顔画像が検出されなかった場合には上記ステップＳ３は省略される。上記ステップＳ３の顔照合処理では、カメラＡ（Ｂ、Ｃ、Ｄ、ＥあるいはＦ）で撮影された画像から検出された各顔画像と当該画像を撮影したカメラＡ（Ｂ、Ｃ、Ｄ、ＥあるいはＦ）に対応する照合データベース１１ａ（１１ｂ、１１ｃ、１１ｄ、１１ｅあるいは１１ｆ）に記憶されている顔画像との照合処理を行う。

すなわち、上記顔照合部１６では、まず、上記顔検出部１５により検出した各顔画像について顔の特徴量を抽出する。上記顔検出部１５により検出した顔画像から顔の特徴量を抽出すると、上記顔照合部１６では、抽出した顔の特徴量と当該画像を撮影したカメラに対応する照合データベースに記憶されている顔画像から抽出された顔の特徴量との類似度を算出する。両者の類似度を算出すると、上記顔照合部１６は、類似度が所定の閾値以上である否かにより上記顔検出部１５により検出した顔画像が照合データベースに記憶されている顔画像と一致するか否かを判定する。

上記顔照合処理による照合結果が得られると、上記主制御部１２は、上記通信インターフェース部１４によりカメラＡ（Ｂ、Ｃ、Ｄ、ＥあるいはＦ）で撮影された画像とともに、当該画像に対する顔検出処理の結果と当該画像に対する顔照合処理の結果とを監視装置２０へ転送する処理を行う（ステップＳ４）。この場合、たとえば、顔検出処理の結果としては、検出された各顔画像の領域を示す座標値などが含まれる。また、顔照合処理の結果としては、照合データベース１１ａ（１１ｂ、１１ｃ、１１ｄ、１１ｅあるいは１１ｆ）に記憶されている顔画像（監視対象者の顔画像）と一致した顔画像を示す情報などである。なお、上記主制御部１２は、図８あるいは図９に示すような表示画面となるように、当該画像に、当該画像から検出された各顔画像の領域を示す点線、照合データベースに記憶されている顔画像と一致した顔画像の領域を示す実線などを合成した画像情報を監視装置２０へ転送するようにしても良い。

また、上記照合処理装置１０の主制御部１２では、上記監視装置２０からの更新要求に応じて、照合データベース１１ａ（１１ｂ、１１ｃ、１１ｄ、１１ｅあるいは１１ｆ）の更新処理を行うようになっている。すなわち、上記監視装置２０から照合データベースの更新要求を受けると（ステップＳ１１、ＹＥＳ）、上記主制御部１２は、当該要求に応じて照合データベースの更新処理を行う（ステップＳ１２）。

たとえば、照合データベースに顔画像を追加（追記）する旨の要求が供給された照合処理装置１０の主制御部１２は、上記監視装置２０からの追記要求に従って照合データベースに顔画像を追記する処理を行う。この場合、上記監視装置２０からは、顔画像の追記要求とともに、追記すべき顔画像と当該顔画像を追記すべき照合データベースを示す情報とが照合処理装置１０に与えられる。これにより、上記主制御部１２は、追記すべき顔画像と照合データベースとを判別し、当該照合データベースに当該顔画像を追記する。

また、照合データベースに記憶されている顔画像を削除する旨の要求が供給された照合処理装置１０の主制御部１２は、上記監視装置２０からの削除要求に従って照合データベースに記憶されている顔画像を削除する処理を行う。この場合、上記監視装置２０からは、顔画像の削除要求とともに、削除すべき顔画像を指定する情報と削除すべき顔画像が記憶されている照合データベースとが与えられる。これにより、上記主制御部１２は、削除すべき顔画像と照合データベーととを判別し、当該照合データベースから当該顔画像を削除する。

なお、１つの照合処理装置１０に複数のカメラが接続されている形態では、照合処理装置１０は、各カメラで撮影された各画像および各照合データベースについて、それぞれ上記ステップＳ１〜Ｓ１２の処理を実行するようにすれば良い。また、ステップＳ１〜Ｓ４の処理とステップＳ１１及びＳ１２の処理とは、並列的に実施するようにしても良い。つまり、上記照合処理装置１０では、できるだけリアルタイムで監視装置２０に顔検出結果、顔照合結果および各カメラで撮影された画像を供給するため、カメラで撮影された画像に対する画像処理を継続的に実行するとともに、照合データベースの更新要求を受けた場合には上記画像処理と並行して照合データベースの更新処理を行うことが可能である。

次に、上記監視装置２０における処理について説明する。
図１１は、上記監視装置２０における処理例を説明するためのフローチャートである。

まず、上記監視装置２０の主制御部２１では、照合処理装置１０から供給されるカメラＡ（Ｂ、Ｃ、Ｄ、ＥあるいはＦ）が撮影した画像、当該画像に対する顔検出処理の結果および当該画像に対する顔照合処理の結果などに基づいて監視画面の表示処理を行う（ステップＳ２１、Ｓ２２）。すなわち、上記照合処理装置１０から供給されるカメラＡ（Ｂ、Ｃ、Ｄ、ＥあるいはＦ）が撮影した画像と当該画像に対する処理結果（顔検出処理の結果および顔照合処理の結果など）とを受信すると（ステップＳ２１）、上記監視装置２０の主制御部２１は、図８あるいは図９に示すような監視画面を表示部２３に表示する監視画面の表示処理を行う（ステップＳ２２）。

図８あるいは図９に示すように、監視画面では、カメラＡ（Ｂ、Ｃ、Ｄ、ＥあるいはＦ）が撮影した画像に、当該画像から検出された顔画像の領域を示す点線Ｒｄと当該画像から検出された顔画像のうち照合データベース１１ａ（１１ｂ、１１ｃ、１１ｄ、１１ｅあるいは１１ｆ）に記憶されている顔画像（監視対象者の顔画像）と一致した顔画像の領域を示す実線Ｒｓとを重ね合わせたものが表示されている。従って、上記主制御部１２は、カメラが撮影した画像と上記点線Ｒｄと上記実線Ｒｓとを合成させた画像を表示データとして生成し、当該カメラＡ（Ｂ、Ｃ、Ｄ、ＥあるいはＦ）による監視映像として表示するようになっている。上記点線Ｒｄは、顔検出処理の結果に基づいて設定され、上記実線Ｒｓは、顔検出処理の結果と顔照合処理の結果とに基づいて設定される。

また、上述したように、上記監視装置２０では、上記監視画面を表示部２３に表示している状態において、監視員による監視対象者の指定を受け付けるようになっている。例えば、上記表示部２３に表示されている監視画面に監視対象とすべき人物が表示されていることを発見した場合、監視員は、上記操作部２４により当該人物を監視対象者として指定する。ここでは、監視対象者の顔画像の領域（点線Ｒｄで囲まれている領域）を操作部２４としてのポインティングデバイスにより指定するものとする。上記操作部２４により監視対象者とする人物の顔画像が指定された場合、上記主制御部２１は、指定された監視対象者の顔画像を登録する処理を行う（ステップＳ３１〜Ｓ３３）。

すなわち、上記表示部２３に監視画面を表示している状態において上記操作部２４により監視対象者とする人物の顔画像が指定された場合（ステップＳ３１、ＹＥＳ）、上記主制御部２１は、指定された顔画像を監視対象者の顔画像として記憶部２５内の監視対象者データベース２７に記憶（登録）する（ステップＳ３２）。この際、監視対象者データベース２７には、当該監視対象者の顔画像から抽出した顔の特徴量を記憶するようにしても良い。

さらに、上記主制御部２１では、指定された人物の顔画像を撮影しているカメラ、つまり、指定された顔画像が表示されているカメラに対応する照合処理装置１０の照合データベース１１に記憶（登録）する処理を行う（ステップＳ３３）。この場合、上記主制御部２１は、当該照合データベース１１を有している照合処理装置１０に対して顔画像（あるいは顔の特徴量）と当該顔画像を照合データベース１１に登録する旨の要求（更新要求）を行う。これにより、照合処理装置１０では、監視装置２０からの更新要求に応じて照合データベース１１に当該顔画像を監視対象者の顔画像として記憶する。

例えば、カメラＡの撮影画像を表示している画面内において監視対象者の顔画像が指定された場合、上記主制御部２１は、照合データベース１１ａを有している照合処理装置１０に対して当該顔画像を照合データベース１１ａへ登録する旨を要求する。これにより、照合処理装置１０では、監視装置２０からの更新要求に応じて照合データベース１１ａに当該顔画像を監視対象者の顔画像として記憶する。

上記ステップＳ３１〜Ｓ３３の処理により、監視員が指定した人物の顔画像が監視対象者の顔画像として、当該監視対象者を撮影しているカメラに対応する照合データベースに登録される。これにより、監視員は、各カメラが撮影している画像から監視対象者を適宜指定することができ、事前に顔画像を登録していない人物であっても、適宜監視対象者として当該人物監視システムで監視することができる。

また、監視対象者が存在する場合（ステップＳ４０、ＹＥＳ）、上記主制御部２１では、適宜、各監視対象者の移動に応じた照合データベース１１の更新要求処理を行う（ステップＳ４１〜Ｓ４６）。なお、監視対象者が存在しない場合（ステップＳ４０、ＮＯ）、上記主制御部２１は、上記ステップＳ４１〜Ｓ４６の処理は省略される。

すなわち、監視対象者が存在する場合（ステップＳ４０、ＹＥＳ）、上記主制御部２１は、各監視対象者に対してそれぞれ時間ｔを設定する。上記時間ｔは、監視対象者が各カメラの撮影領域から移動するごと、つまり、各カメラの撮影画像から検出されなくなるごとに（ステップＳ４１、ＹＥＳ）、リセットされる（ステップＳ４２）。言い換えると、上記主制御部２１は、照合処理装置１０から供給される照合結果に基づいて、各監視対象者が検出されている画像を撮影しているカメラを認識している。これにより、上記主制御部２１は、あるカメラの撮影画像から検出されていた監視対象者が当該カメラの撮影画像から検出されなくなった際（ステップＳ４１、ＮＯ）、当該監視対象者に対応する時間ｔをリセット（時間ｔの計時を開始）する（ステップＳ４２）。たとえば、カメラＡの撮影画像に対する照合結果に基づいてカメラＡの撮影画像から検出されていた監視対象者がカメラＡの撮影画像に対する照合処理で検出されなくなったことを判別した場合、上記主制御部２１は、当該監視対象者に対応する時間ｔをリセットする。

また、上記主制御部２１は、上記のような時間ｔが設定されている場合、つまり、監視対象者が存在する場合、時間ｔが所定の第１の時間Ｔ１あるいは所定の第２の時間Ｔ２となったか否かを監視している（ステップＳ４３、Ｓ４５）。なお、図１１において、上記ステップＳ４３では、ｔ＝Ｔ１であるか否かを判断するものとしたが、ｔがＴ１を経過したか否かを判断すれば良く、同様に、上記ステップＳ４５では、ｔ＝Ｔ２であるか否かを判断するものとしたが、ｔがＴ２を経過したか否かを判断すれば良い。

すなわち、上記時間ｔが所定の第１の時間Ｔ１となったと判断した場合（ステップＳ４３、ＹＥＳ）、上記主制御部２１は、上記監視設定データテーブル２６に記憶されている設定内容に基づいて、照合データベース１１を更新する旨を照合処理装置１０に要求する処理を行う（ステップＳ４４）。たとえば、図７に示すような監視設定データテーブル２６では、時間ｔが第１の時間Ｔ１となった場合、当該監視対象者を撮影していたカメラの撮影領域に隣接する撮影領域のカメラに対応する照合データベース１１に当該監視対象者の顔画像を追加（追記）するように設定されている。

上記監視設定データテーブル２６が図７に示すような設定内容であれば、上記時間ｔが所定の第１の時間Ｔ１となったと判断した場合、上記主制御部２１は、照合処理装置１０に対して、上記監視設定データテーブル２６で指定されている各照合データベース１１に当該監視対象者の顔画像を追記する旨を要求する。たとえば、図７に示す設定内容であれば、カメラＡで撮影されていた監視対象者が移動してから時間Ｔ１が経過すると、上記主制御部２１は、照合処理装置１０に対して、カメラＢに対応する照合データベース１１ｂに当該監視対象者の顔画像を追記する旨を要求する。このような監視装置２０からの要求に応じて、上記照合処理装置１０では、上述した処理手順によって照合データベース１１を更新（追記）する処理を行うようになっている。

また、上記時間ｔが所定の第２の時間Ｔ２となったと判断した場合（ステップＳ４５、ＹＥＳ）、上記主制御部２１は、上記監視設定データテーブル２６に記憶されている設定内容に基づいて、照合データベース１１を更新する旨を照合処理装置１０に要求する処理を行う（ステップＳ４６）。たとえば、図７に示すような監視設定データテーブル２６では、時間ｔが第２の時間Ｔ２となった場合、当該監視対象者を撮影していたカメラの撮影領域に隣接する撮影領域のカメラ以外のカメラに対応する照合データベース１１から当該監視対象者の顔画像を削除するように設定されている。

上記監視設定データテーブル２６が図７に示すような設定内容であれば、上記時間ｔが所定の第２の時間Ｔ２となったと判断した場合、上記主制御部２１は、照合処理装置１０に対して、上記監視設定データテーブル２６で指定されている各照合データベースに当該監視対象者の顔画像を削除する旨を要求する。たとえば、図７に示す設定内容であれば、カメラＡで撮影されていた監視対象者が移動してから時間Ｔ２が経過すると、上記主制御部２１は、照合処理装置１０に対して、カメラＢに対応する照合データベース１１ｂ以外の照合データベース１１ａ、１１ｃ、１１ｄ、１１ｅ、１１ｆから当該監視対象者の顔画像を削除する旨を要求する。このような監視装置２０からの要求に応じて、上記照合処理装置１０では、上述した処理手順によって照合データベース１１を更新（削除）する処理を行うようになっている。

なお、上述したように、第１の時間Ｔ１および第２の時間Ｔ２は、Ｔ１≧０かつＴ１≧Ｔ１であれば、それぞれシステム構成や運用状況などによって適宜設定可能である。たとえば、Ｔ１＝Ｔ２＝０と設定することも可能である。ただし、監視対象者を見失わないようにするため、第１の時間Ｔ１は、少なくとも監視対象者が隣接する撮影領域からさらに移動してしまう前に各照合データベースを更新できるような時間に設定する必要がある。なお、この場合であっても、時間Ｔ２は、監視対象者が移動するごとに時間ｔをリセットするようにすることにより、任意の時間に設定可能である。

また、ステップＳ２１及びＳ２２の監視画面の表示処理と、ステップＳ３１〜Ｓ３３の監視対象者の登録処理と、ステップＳ４１〜Ｓ４６の照合データベースの更新要求処理とは、並列的に実施しても良い。つまり、上記監視装置２０では、できるだけリアルタイムで監視画面を表示するため、監視画面の表示処理を継続的に実行するとともに、監視対象者の顔画像の指定があった場合には上記監視画面の表示処理と並行して監視対象者の登録処理を行ったり、監視対象者の移動が検出された場合には上記監視画面の表示処理と並行して照合データベースの更新要求処理を行ったりすることが可能である。

上記のように、本実施の形態の人物監視システムでは、監視領域内の各所に設置された複数のカメラで撮影された画像を監視装置の表示部に表示し、その表示部に表示されている画像から特定の人物の顔画像が監視装置の操作部で指定された場合、指定された人物の顔画像を監視対象者の顔画像として登録し、その登録された監視対象者の顔画像と各カメラにより撮影された画像に含まれる顔画像とを照合処理装置で照合し、その照合結果が上記監視装置の表示部に表示されるようになっている。

これにより、上記人物監視システムでは、各カメラで撮影されている画像から任意のタイミングで監視対象者の顔画像を指定することができ、任意のタイミングで指定された監視対象者を各カメラで撮影された画像に含まれる顔画像との顔照合によって追跡監視することができる。この結果として、監視員の利便性が向上し、効率的な人物追跡機能を実現できる。

また、上記人物監視システムでは、監視領域内の各所に設置された複数のカメラと各カメラに対応する照合データベースとを設定しておき、上記各カメラで撮影された画像に含まれる顔画像と上記各カメラに対応する照合データベースに記憶されている監視対象者の顔画像とを照合し、各カメラで撮影された画像と上記照合結果とを監視装置の表示部に表示するとともに、所定の設定内容と上記照合結果とに基づいて監視対象者の顔画像を記憶すべき記憶手段を判断し、その判断結果に基づいて各照合データベースを更新するようにしている。

これにより、上記人物監視システムでは、各カメラで撮影されている画像に含まれる顔画像と照合する顔画像を記憶するための各照合データベースを効率的に更新でき、さらに、照合データベースに必要性のある顔画像だけを記憶するようにできる。この結果、上記人物監視システムでは各カメラで撮影されている画像に含まれる顔画像と照合データベースに記憶されている顔画像との顔照合処理を効率的に実施でき、さらには、各カメラで撮影された画像に含まれる顔画像に対する顔照合処理の誤りを低減させたり、処理速度を向上させるたりすることができる。

この発明の実施の形態に係る人物監視システムの全体構成を模式的に示す図。 人物監視システムの第１の構成例を示すブロック図。 人物監視システムの第２の構成例を示すブロック図。 人物監視システムの第３の構成例を示すブロック図。 照合処理装置の構成例を示すブロック図。 監視装置の構成例を示すブロック図。 監視設定データテーブルの構成例を示す図。 監視装置の表示部による監視画面の表示例を示す図。 監視装置の表示部による監視画面の表示例を示す図。 照合処理装置における処理例を説明するためのフローチャート。 監視装置における処理例を説明するためのフローチャート。

符号の説明

Ａ、Ｂ、Ｃ、Ｄ、Ｅ、Ｆ…カメラ（撮影手段）、Ｒｄ…点線、Ｒｓ…実線、ｔ…時間、Ｔ１…第１の時間、Ｔ２…第２の時間、１０（１０ａ、１０ｂ、１０ｃ、１０ｄ、１０ｅ、１０ｆ、１０ａｂ、１０ｃｄ、１０ｅｆ）…照合処理装置、１１（１１ａ、１１ｂ、１１ｃ、１１ｄ、１１ｅ、１１ｆ）…照合データベース（記憶手段）、１２…主制御部、１３…画像インターフェース部、１４…通信インターフェース部、１５…顔検出部（顔検出手段）、１６…顔照合部（照合手段）、１７…記憶部、２０…監視装置、２１…主制御部（判断手段）、２１ａ…タイマ、２２…通信インターフェース部、２３…表示部（表示手段）、２４…操作部（指定手段）、２５…記憶部、２６…監視設定データテーブル（設定情報記憶手段）、２７…監視対象者データベース

Claims (10)

1. 監視領域内の各所における画像を撮影する複数の撮影手段と、
   これらの撮影手段により撮影された画像を表示する表示手段と、
   この表示手段により表示された各撮影手段により撮影された画像から特定の人物の顔画像を指定するための指定手段と、
   この指定手段により指定された人物の顔画像を記憶する記憶手段と、
   前記各撮影手段により撮影された画像に含まれる顔画像と前記記憶手段に記憶されている顔画像とを照合する照合手段と、
   この照合手段による照合結果を報知する報知手段と、
   を有することを特徴とする人物監視システム。
2. さらに、前記各撮影手段により撮影された画像から人物の顔画像を検出する顔検出手段を有し、
   前記照合手段は、前記顔検出手段により検出された顔画像と前記記憶手段により記憶されている顔画像との照合を行う、
   ことを特徴とする前記請求項１に記載の人物監視システム。
3. 前記報知手段は、前記表示手段により表示される各撮影手段で撮影された画像とともに、前記照合手段による照合結果を表示する、
   ことを特徴とする前記請求項２に記載の人物監視システム。
4. 前記報知手段は、前記表示手段により表示される各撮影手段で撮影された画像とともに、前記顔検出手段により顔画像として検出された領域を示す情報を表示し、さらに、前記顔検出手段により検出された顔画像のうち前記照合手段により前記記憶手段により記憶されている顔画像と一致した顔画像を強調表示する、
   ことを特徴とする前記請求項３に記載の人物監視システム。
5. 監視領域内の各所における画像を撮影する複数の撮影手段と、
   これらの撮影手段により撮影された画像を表示する表示手段と、
   各撮影手段ごとに設定され、監視対象者の顔画像を記憶する複数の記憶手段と、
   前記撮影手段により撮影された画像に含まれる顔画像と当該画像を撮影した撮影手段に対応する記憶手段に記憶されている監視対象者の顔画像とを照合する照合手段と、
   この照合手段による照合結果を報知する報知手段と、
   前記照合手段による照合結果に基づいて監視対象者の顔画像を記憶すべき記憶手段を判断する判断手段と、
   この判断手段による判断結果に基づいて各記憶手段を更新する更新手段と、
   を有することを特徴とする人物監視システム。
6. さらに、監視対象者の顔画像を記憶すべき記憶手段を判断するための設定情報を記憶する設定情報記憶手段を有し、
   前記判断手段は、前記設定情報記憶手段に記憶されている設定内容と前記照合手段による照合結果とに基づいて監視対象者の顔画像を記憶すべき記憶手段を判断する、
   ことを特徴とする前記請求項５に記載の人物監視システム。
7. 前記設定情報記憶手段は、特定の撮影手段により撮影された画像から監視対象者の顔画像が検出されなくなってからの時間に応じて監視対象者の顔画像を記憶すべき記憶手段を示す設定情報が記憶されている、
   ことを特徴とする前記請求項６に記載の人物監視システム。
8. 前記設定情報記憶手段は、特定の撮影手段により撮影された画像から監視対象者の顔画像が検出されなくなってからの第１の時間に応じて監視対象者の顔画像を追記すべき記憶手段を示す情報と、前記第１の時間以上の第２の時間に応じて監視対象者の顔画像を削除すべき記憶手段を示す情報とが設定情報として記憶されている、
   ことを特徴とする前記請求項６に記載の人物監視システム。
9. 監視領域内の各所における画像を複数の撮影手段により撮影し、
   前記各撮影手段により撮影された画像を表示手段に表示し、
   前記表示手段に表示されている各撮影手段で撮影された画像における特定の人物の顔画像が指定された場合、指定された顔画像を監視対象者の顔画像として記憶手段に記憶し、
   前記各撮影手段により撮影された画像に含まれる顔画像と前記記憶手段に記憶されている顔画像とを照合し、
   この照合結果を報知する、
   ことを特徴とする人物監視方法。
10. 監視領域内の各所における画像を複数の撮影手段により撮影し、
    これらの撮影手段により撮影された画像を表示手段に表示し、
    前記各撮影手段により撮影された画像に含まれる顔画像と各撮影手段ごとに設定されている複数の記憶手段のうち当該画像を撮影した撮影手段に対応する記憶手段に記憶されている監視対象者の顔画像とを照合し、
    この照合結果を報知し、
    前記照合結果に基づいて監視対象者の顔画像を記憶すべき記憶手段を判断し、
    この判断結果に基づいて各記憶手段を更新する、
    ことを特徴とする人物監視方法。

Images