JP6286394B2 - 画像監視システム - Google Patents

Description

本発明は、監視場所を撮像した画像から監視対象を検出する画像監視システムであって、特に、人物間で行われた物品の受け渡し行為を監視対象として検出する画像監視システムに関する。

空港や駅、イベント会場など、不特定多数の人物が集まる場所は、犯罪の標的になる可能性が高い。したがって、このような場所では、不審者や不審物に対する警戒を強める必要がある。

従来、不特定多数の人物が集まる場所の安全を確保するために、当該場所を監視場所としてビデオカメラで撮影し、映像を監視員が確認したり、画像解析したりすることによって、不審者や不審物を監視することが行われていた。例えば、特許文献１には、監視場所に置き去られて放置された物体を画像解析によって検出し、不審物として警報を出力する技術が開示されている。このような技術によれば、監視場所に爆弾などの危険物が放置されたことを検出することができ、危険を未然に防ぐことが可能となる。

特開平１−２４５３９５号公報

ところで、爆弾などの危険物は、現場に放置されるよりも前に、不審者間で受け渡されることがある。この受け渡し行為を契機として、危険物を監視することができれば、従来よりも早期に危険物に対処することができる。

しかし、空港や駅、イベント会場には、多数の人物および当該人物達の所持物品が存在している。そして、これらの人物達は、様々な場所、様々なタイミングで、所持物品の受け渡しを行う。このため、監視員が、監視場所を撮影した映像を目視して、全ての受け渡し行為を監視することは、極めて困難である。

さらに、このような場所で行われる受け渡し行為の中には、不審度の低い行為が多数混在している。このため、監視員は、不審度の高い受け渡し行為と不審度の低い受け渡し行為を区別しながら映像を目視する必要がある。

すなわち、不特定多数の人物が集まる場所において、受け渡し行為を監視するためには、監視員に大きな負担がかかってしまうという問題があった。

本発明は、これらの問題を鑑みてなされたものであり、不特定多数の人物が集まる場所であっても、効率的に受け渡し行為を監視することができる画像監視システムの実現を目的とする。

かかる目的を達成するために本発明は、監視領域を撮影した画像を用いて、当該監視領域に存在する人物の行動を監視する画像監視システムであって、前記画像から前記監視領域に存在する人物を検出する人物検出手段と、前記画像から前記人物が所持する物品の種類を識別する所持物検出手段と、複数の前記人物による前記物品の受け渡し行為を検出し、当該受け渡し行為について、前記監視領域内における当該受け渡し行為の発生位置を求めるとともに、前記所持物検出手段の識別結果を参照して当該受け渡し行為で受け渡された物品の種類を求める受け渡し検出手段と、前記監視領域内の位置と物品の種類との組合せ毎に、前記監視の対象として注目すべき度合いを表す監視重要度を対応付けた監視基準情報を記憶する記憶部と、前記監視基準情報を参照し、前記受け渡し行為毎に、前記発生位置と前記受け渡された物品の種類との組合せに対応する前記監視重要度を求める監視重要度算出手段と、前記受け渡し行為の監視重要度に応じて、当該受け渡し行為の検出結果を出力する出力制御手段と、を備えたことを特徴とする画像監視システムを提供する。

また、前記監視重要度算出手段は、前記受け渡し行為の発生位置の周囲における前記人物の混雑度を算出し、当該混雑度に応じて前記監視重要度を変更することが好適である。

また、前記記憶部は、更に、前記監視領域において過去所定時間内に検出された受け渡し行為の発生位置を当該受け渡し行為毎に記憶し、前記監視重要度算出手段は、前記受け渡し行為の発生位置の周囲で前記過去所定時間内に検出された受け渡し行為の総数に応じて前記監視重要度を変更することが好適である。

また、前記記憶部は、更に、前記監視領域内に設定した重要エリアの位置を記憶し、前記監視重要度算出手段は、前記受け渡し行為の発生位置から前記重要エリアの位置までの距離を算出し、当該距離に応じて前記監視重要度を変更することが好適である。

また、前記画像監視システムは、更に、予め定めた基準を満たす監視人物の前記監視領域における位置を求める監視人物位置算出手段を有し、前記監視重要度算出手段は、前記受け渡し行為の発生位置から前記監視人物の位置までの距離を算出し、当該距離に応じて前記監視重要度を変更することが好適である。

また、前記受け渡し検出手段は、更に、前記受け渡し行為の発生時刻を求め、前記監視重要度算出手段は、更に、前記受け渡し行為の発生時刻を用いて前記監視重要度を求めることが好適である。

また、前記画像監視システムは、前記受け渡し行為の検出結果を表示する表示部を備え、前記出力制御手段は、前記監視重要度が高い受け渡し行為ほど注目され易くなるように前記表示部に表示させることが好適である。

また、前記出力制御手段は、前記監視重要度が所定値以上である受け渡し行為について前記受け渡し行為の検出結果を出力し、前記監視重要度が前記所定値未満である受け渡し行為について前記受け渡し行為の検出結果を出力しないことが好適である。

また、本発明は、監視領域を撮影した画像を用いて、当該監視領域に存在する人物の行動を監視する画像監視システムであって、前記画像から前記監視領域に存在する物品の種類を識別する所持物検出手段と、前記画像から前記監視領域に存在する複数の人物と当該人物間で受け渡された物品からなるパターンを検出して当該人物間の受け渡し行為を検出し、当該受け渡し行為について、前記監視領域内における当該受け渡し行為の発生位置を求めるとともに、前記所持物検出手段の識別結果を参照して当該受け渡し行為で受け渡された物品の種類を求める受け渡し検出手段と、前記監視領域内の位置と物品の種類との組合せ毎に、前記監視の対象として注目すべき度合いを表す監視重要度を対応付けた監視基準情報を記憶する記憶部と、前記監視基準情報を参照し、前記受け渡し行為毎に、前記発生位置と前記受け渡された物品の種類との組合せに対応する前記監視重要度を求める監視重要度算出手段と、前記受け渡し行為の監視重要度に応じて、当該受け渡し行為の検出結果を出力する出力制御手段と、を備えたことを特徴とする画像監視システムを提供する。

本発明によれば、不特定多数の人物が集まる場所において、効率的に受け渡し行為を監視することができる。このため、受け渡し行為を契機として、監視場所に発生する異常事態に早期に対処することが可能となる。

本実施の形態における画像監視システムの全体構成を示した図である。 本実施の形態における画像監視装置の機能ブロック図である。 本実施の形態における物品情報を示した図である。 監視領域のブロックとエリアの設定例を示した図である。 監視領域のブロックとエリアの設定例を示した図である。 監視領域のブロックとエリアの設定例を示した図である。 監視領域のブロックとエリアの設定例を示した図である。 本実施の形態におけるエリア情報を示した図である。 本実施の形態における監視基準情報を示した図である。 本実施形態における受け渡し行為の検出例を模式的に示した図である。 本実施の形態における監視領域の様子を示した図である。 本実施形態における表示部の表示例を示した図である。 本実施形態における表示部の表示例を示した図である。 本実施形態における表示部の表示例を示した図である。 本実施の形態における画像監視処理のフローチャートである。 本実施の形態における受け渡し検出処理のフローチャートである。 監視領域のブロックと頻度算出領域の設定例を示した図である。 発生頻度領域と受け渡し行為の発生位置を模式的に示した図である。 追跡人物の位置と受け渡し行為の発生位置を模式的に示した図である。 受け渡し行為の発生位置と重要エリアまでの距離を模式的に示した図である。 受け渡し行為の発生位置と監視人物の位置を模式的に示した図である。

以下、本発明にかかる画像監視システムの実施の形態について説明する。本実施の形態では、不特定多数の人物が行き交うイベント会場およびイベント会場周辺を監視場所とし、当該監視場所内で行われた所持物品の受け渡し行為を検出する画像監視システムの例を説明する。なお、本実施の形態は、画像監視システムによって検出された受け渡し行為が不審なものであるか否かを、監視センタの監視員が映像などに基づいて詳細に確認し、監視場所に存在する警備員に対して対処指示を出すなどの適切な対応をとるものである。

図１は、本実施の形態における画像監視システムの全体構成を示した図である。図１に示すように、画像監視システム１は、監視場所の各所に設置された複数の撮像装置２、監視場所を撮影した画像を解析する画像監視装置３、監視センタに設置される監視センタ装置４で構成されている。これらの各装置は、有線通信や無線通信などで接続されており、各種の情報を入出力する。

具体的には、撮像装置２で順次撮影された監視場所の画像は、画像監視装置３の画像入力部３１にて順次取得され、画像監視装置３の記憶部３２および画像処理部３３に入力される。画像処理部３３では、入力した画像を処理し、当該画像中から受け渡し行為を検出する。画像監視装置３は、検出した受け渡し行為に関する情報（以下、受け渡し情報）を監視センタ装置４に出力する。監視センタ装置４は、画像監視装置３から入力した受け渡し情報を表示部４１に表示する。ここで、受け渡し情報は、受け渡しの様子が映っている画像、受け渡し行為の発生時刻、受け渡し行為の発生場所の種類、受け渡された物品の種類、受け渡された物品の画像などである。また、監視センタ装置４は、画像監視装置３から入力した受け渡し情報を記録部４２に記憶する。記録部４２に記録された受け渡し情報は、受け渡し行為が不審なものであるかを再検証する際に用いられたり、犯罪行為が発生した際の証拠情報として用いられたりする。

また、画像監視システム１は、検出された受け渡し行為ごとに、監視員が監視対象として注目すべき度合いを表す監視重要度を算出する。監視重要度は、上述した受け渡し情報の一つとして扱われる。そして、画像監視システム１は、監視センタの監視員が、監視重要度の高い受け渡し行為を優先的に確認することができるように、監視重要度に応じて、表示部４１への表示方法を変更したり、受け渡し情報の出力の有無を制御したりする。これにより、イベント会場などのように不特定多数の人物が存在し、多数の受け渡し行為が発生する場所を監視する場合であっても、監視センタの監視員は、不審度の高い受け渡し行為と、不審度の低い受け渡し行為を容易に区別しながら、効率的に受け渡し行為を監視することができる。

次に、本実施形態の画像監視システム１を構成する、撮像装置２、画像監視装置３および監視センタ装置４について詳細に説明する。

撮像装置２は、ＣＣＤ素子又はＣ−ＭＯＳ素子などの撮像素子、光学系部品、アナログ／デジタル変換器などを含んで構成される監視カメラである。撮像装置２は、監視場所の所定の監視領域を所定時間間隔で順次撮影し、撮影したデジタル画像を画像監視装置３に入力する。本実施の形態では、撮像装置２は、監視領域を５ｆｐｓで撮影し、可視のカラー画像を生成する。ここで、撮像装置２は、撮影時に現在時刻を取得し、撮影した画像に撮影時刻を示す情報を付加する。また、本実施の形態では、イベント会場およびイベント会場の周辺という広範囲の監視場所を撮影する必要があるため、撮像装置２は、監視場所の各所に複数台設置される。このため、撮像装置２は、それぞれを識別するためのカメラＩＤで管理され、撮像装置２で撮影された画像には、カメラＩＤも付加される。また、撮像装置２は、監視領域に存在する人物および当該人物の所持物品の画像特徴を撮影するのに適した設置位置、撮影方向、設置高、俯角で設置される。撮像装置２の設置高や俯角などの情報は、記憶部３２に記憶される。

なお、本実施の形態では、複数台の撮像装置２を使用するが、これに限らず、１台の撮像装置２で画像監視システム１を実現してもよい。また、撮像装置２は、監視場所内に固定設置されるものに限らず、撮影機能を有した飛行船やロボットなどの移動式の撮像装置を用いて、監視領域を撮影するようにしてもよい。

次に、図２を参照して、画像監視装置３について詳細に説明する。図２は、本実施の形態における画像監視装置３の機能ブロック図である。図２に示すとおり、画像監視装置３は、画像入力部３１、記憶部３２、画像処理部３３で構成されている。

画像入力部３１は、撮像装置２が撮影した画像を順次取得し、当該画像を記憶部３２および画像処理部３３に順次出力するインターフェースである。以下、画像入力部３１が取得した画像を入力画像と称する。なお、画像入力部３１は、撮影装置２から取得した入力画像を画像処理部３３に直接出力するのではなく、画像処理部３３の処理タイミングに合わせて記憶部３２から入力画像を読み出して、画像処理部３３に出力するようにしてもよい。

記憶部３２は、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などの半導体メモリ、ハードディスクなどのメモリ装置などで構成される。記憶部３２は、画像入力部３１、画像処理部３３などからアクセス可能である。記憶部３２が記憶する主な情報は、物品情報３２１、エリア情報３２２、監視基準情報３２３である。また、図示しないが、記憶部３２は、画像入力部３１から入力した入力画像を記憶する。これらの情報以外にも、記憶部３２は、画像監視装置３の各処理を実行するのに必要なプログラムや各種データを記憶する。

ここで、記憶部３２に記憶される物品情報３２１、エリア情報３２２、監視基準情報３２３について、詳細に説明する。

物品情報３２１は、入力画像中に存在する物品の種類を識別するために用いられる情報である。図３は、本実施の形態における物品情報３２１を示した図である。図３に示すとおり、本実施の形態では、検出対象とする物品の物品名、物品を識別する物品ＩＤ、物品の画像（以下、物品画像）を対応付けて、物品情報３２１として記憶する。ここで、「カバン」のように、様々な種類や形状が存在する物品については、一つの物品名に対して、複数枚の物品画像を対応付けるようにする。なお、本実施の形態では、物品情報３２１として物品画像を記憶するが、これに限るものではない。例えば、物品画像自体を記憶するのではなく、予め、物品画像から抽出した特徴量を記憶するようにしてもよい。また、その他にも、後述する所持物検出手段３３２の識別方法に合わせて、適宜、記憶する物品情報３２１を決めればよい。また、本実施の形態では、物品の種類を表す情報として、物品名と物品ＩＤを記憶しているが、物品名と物品ＩＤのどちらか一方を記憶するようにしてもよい。また、検出対象とする物品も、本実施の形態に限定されるものではなく、監視目的に合わせて、適宜、決めればよい。

エリア情報３２２は、受け渡し行為の発生場所の種類を識別するために用いられる情報である。本実施の形態では、予め、監視場所を複数のエリアに分割しておき、エリア情報３２２は、検出された受け渡し行為がどのエリアで発生したものであるかを判定するために用いられる。具体的には、本実施の形態では、各撮像装置２が撮影する監視領域を複数のブロックに分割した上で、当該ブロックごとにエリアを設定する。そして、エリア名、エリアを識別するエリアＩＤ、エリアに属するブロックの位置をカメラＩＤごとに対応付けて、エリア情報３２２として記憶する。また、本実施の形態では、発生場所の種類を表す情報として、エリア名とエリアＩＤを記憶しているが、エリア名とエリアＩＤのどちらか一方を記憶するようにしてもよい。

ここで、図４，図５，図６，図７，図８を参照して、本実施の形態におけるエリア情報３２２について、詳細に説明する。図４から図７は、本実施の形態における監視領域のブロックとエリアの設定例を示した図である。図４から図７に示すとおり、各撮像装置２が撮影する監視領域は、複数のブロックに分割されている。本実施の形態では、１つのブロックのサイズを実距離２．５ｍ×２．５ｍとして、図のように監視領域を複数のブロックに分割する。１つの監視領域のサイズを実距離３０ｍ×３０ｍとすると、監視領域は、Ｘ軸方向に１２個のブロック、Ｙ軸方向に１２個のブロック、計１４４個のブロックに分割される。ここで、エリア情報３２２における各ブロックの位置と、各撮像装置２で監視領域を撮影した画像から求めた実空間でのＸＹ座標と、を予め対応付けて、記憶部３２に記憶しておく。なお、本実施の形態では、実空間でのＸＹ座標は、画像上の床面をＸＹ平面としたときの２次元座標とする。このように、エリア情報３２２における各ブロック位置と、実空間でのＸＹ座標と、を対応付けて記憶しておくことにより、入力画像から検出した受け渡し行為の発生位置（実空間でのＸＹ座標）が、エリア情報３２２のどのブロックに対応するのかを判定することが可能となる。なお、エリア情報３２２は、本実施の形態に限るものではない。例えば、本実施の形態では、撮像装置２によらずブロックの分割数を同じにしているが、撮像装置２ごとにブロックの分割数を変えるようにしてもよい。また、本実施の形態では、監視領域におけるブロックやエリアを２次元情報で設定しているが、３次元情報で設定するようにしてもよい。

図４は、カメラＩＤ「１００」が付与された撮像装置２のエリア設定例を示した図である。図４に示すとおり、無地のブロックはエリアＩＤ「００１」、左斜線のブロックはエリアＩＤ「００２」、網掛けのブロックはエリアＩＤ「００３」に設定されている。また、図５は、カメラＩＤ「２００」が付与された撮像装置２のエリア設定例を示した図である。図５に示すとおり、カメラＩＤ「２００」が付与された撮像装置２の監視領域は、全てエリアＩＤ「００１」に設定されていることがわかる。また、図６は、カメラＩＤ「３００」が付与された撮像装置２のエリア設定例を示した図である。図６に示すとおり、右斜線のブロックはエリアＩＤ「００４」に設定されており、カメラＩＤ「３００」が付与された撮像装置２の監視領域は、全てエリアＩＤ「００４」に設定されていることがわかる。また、図７は、カメラＩＤ「４００」が付与された撮像装置２のエリア設定例を示した図である。図７に示すとおり、無地のブロックはエリアＩＤ「００１」、右斜線のブロックはエリアＩＤ「００４」に設定されている。

図８は、本実施の形態におけるエリア情報３２２を示した図である。図８に示すとおり、エリア情報３２２には、エリアＩＤ、エリア名、カメラＩＤごとのブロック位置が対応付けられている。本実施の形態では、受け渡し行為の発生場所として、イベント会場周辺の広場、来場者がイベント会場内に入場する際にセキュリティチェックを受けて通過する入場ゲート内、セキュリティチェックを受けていない来場者のイベント会場内への侵入を規制するためのフェンスなどで仕切られた広場と入場ゲートとの境界、イベント会場内、がそれぞれ異なるエリアに設定されている。すなわち、カメラＩＤ「１００」が付与された撮像装置２は広場と入場ゲート内を監視領域として撮像しており、カメラＩＤ「２００」が付与された撮像装置２は広場のみを監視領域として撮像しており、カメラＩＤ「３００」が付与された撮像装置２はイベント会場内のみを監視領域として撮像しており、カメラＩＤ「４００」が付与された撮像装置２はイベント会場内と広場を監視領域として撮像していることがわかる。なお、エリアとして設定する場所の種類は、本実施の形態に限定されるものではなく、監視目的に合わせて、適宜、決めればよい。

また、図８に示すとおり、エリア情報３２２には、エリアごとに当該エリアの重要性が設定されている。具体的には、本実施の形態では、警備をする際の重要性に応じて、通常エリアと重要エリアの２種類に区別されている。例えば、本実施の形態では、広場、入場ゲート内、入場ゲート境界が「通常エリア」として設定され、イベント会場内が重要エリアとして設定されている。

監視基準情報３２３は、受け渡し行為の監視重要度を算出するために用いられる情報である。監視重要度は、上述したとおり、監視員が監視対象として注目すべき度合いを表した指標である。本実施の形態では、受け渡された物品および受け渡し行為の発生場所に基づいて、受け渡し行為の監視重要度を求める。このため、本実施の形態では、予め、物品の種類とエリアの組合せに応じた監視重要度の値を設定し、監視基準情報３２３として記憶する。

図９は、本実施の形態における監視基準情報３２３を示した図である。図９に示すとおり、監視基準情報３２３には、監視基準ごとに、物品ＩＤ、物品名、エリアＩＤ、エリア名、監視重要度が対応付けられている。ここで、監視重要度は、値が高くなるほど、監視員が監視対象としての注目すべき度合いが高いことを表している。なお、物品の種類と発生場所の種類の組合せは、本実施の形態に限定されるものではなく、監視目的に合わせて、適宜、決めればよい。また、本実施の形態では、監視重要度を数値で表したが、「高」、「中」、「低」のようなカテゴリで表してもよい。

次に、図２に戻り、画像監視装置３の画像処理部３３について、詳細に説明する。

画像処理部３３は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＤＳＰ（Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ）、ＭＣＵ（Ｍｉｃｒｏ Ｃｏｎｔｒｏｌ Ｕｎｉｔ）などの演算装置により構成され、記憶部３２に記憶されている各種プログラムを読み出して実行する。また、画像処理部３３は、画像入力部３１から入力画像を受け取り、順次処理する。ここで、画像処理部３３は、入力画像に付加されているカメラＩＤおよび撮影時刻を参照し、撮像装置２ごとに撮影された順に画像を処理する。

本実施の形態における画像処理部３３は、人物検出手段３３１、所持物検出手段３３２、受け渡し検出手段３３３、監視重要度算出手段３３４、出力制御手段３３５から構成されている。以下、画像処理部３３を構成する各手段について、説明する。

人物検出手段３３１は、入力画像から監視領域内に存在する人物を検出し、当該人物の画像（以下、人物像）を抽出する。本実施の形態では、人物検出手段３３１は、入力画像に背景差分処理を施して、人物領域を検出し、入力画像から当該人物領域内の画像を切り出して人物像を抽出する。このため、図示はしないが、各撮像装置２ごとに人物が映っていない状態で監視領域を撮影した背景画像を用意し、記憶部３２に記憶しておく。監視領域に存在する人物が物品を所持している場合、入力画像上では人物と所持物品が一体化して映る。このため、人物検出手段３３１にて抽出される人物像は、所持物品の像を含んだ画像として抽出される。なお、本実施の形態では、背景差分処理によって人物像を抽出したが、人物像の抽出方法はこれに限るものではなく、種々な既存方法を採用してもよい。例えば、人物の画像を学習した学習識別器によって、入力画像から人物像を抽出してもよい。また、人物の形状や輝度の特徴を人物テンプレートとして予め記憶部３２に記憶しておき、当該人物テンプレートとのマッチング処理によって入力画像から人物像を抽出してもよい。

また、本実施の形態における人物検出手段３３１は、監視領域に存在する人物を追跡する。具体的には、人物検出手段３３１は、今回処理した入力画像中の人物像に対して、前回処理した入力画像中の人物像のうち同一人物によるものと判断できる人物像を対応付ける。すなわち、人物検出手段３３１は、異なる時刻に撮影された入力画像について、同一人物による人物像どうしを対応付けることで、人物の追跡を実現する。ここで、人物像の対応付けには、人物像の位置、色、大きさ、形状、テクスチャなどを用いればよい。なお、人物検出手段３３１は、同一の撮像装置２で撮影した画像間だけではなく、カメラＩＤが異なる撮像装置２で撮影された画像間についても人物像の対応付けを行うようにしてもよい。すなわち、人物検出手段３３１は、ある撮像装置２の監視領域から外れた人物が、当該撮像装置２の監視領域と隣り合う他の撮像装置２の監視領域に移動した場合にも人物の追跡を続けるようにする。このような追跡を実現するためには、予め、各撮像装置２が撮影する監視領域どうしの隣接関係をカメラＩＤと対応付けて記憶部３２に記憶しておき、人物検出手段３３１は、この情報を参照して、人物像の対応付けを行えばよい。

また、人物検出手段３３１は、前回処理した入力画像中の人物像と対応付けられない人物像が存在する場合に、当該人物像を新たに監視場所に出現した人物の人物像として追跡を開始する。また、人物検出手段３３１は、前回までに追跡されていた人物像について、今回の入力画像中に対応付けられる人物像が存在しない場合に、当該人物像の人物が監視場所から退出したと判断し、当該人物に対する追跡を終了する。

また、人物検出手段３３１は、監視領域における人物の位置を求める。本実施の形態では、人物検出手段３３１は、人物像の入力画像上の位置（画素位置）、人物像の大きさ、撮像装置２の設置高や俯角などの情報に基づいて、人物像の足元座標を求める。本実施の形態では、当該足元座標を監視領域における人物の位置とする。ここで、足元座標は、実空間でのＸＹ座標として求められる。

人物検出手段３３１は、追跡されている人物（以下、追跡人物）ごとに人物ＩＤを付与する。そして、人物検出手段３３１は、追跡人物毎に、人物ＩＤ、当該追跡人物の時系列の人物像、当該人物像の撮影時刻、当該人物の時系列の位置、をそれぞれ対応付けて記憶部３２に記憶する。以下、当該情報を、追跡人物情報と称する。

なお、人物検出手段３３１による人物の追跡方法および人物の位置の算出方法は、本実施の形態に限るものではなく、既存の追跡技術や位置算出技術を採用すればよい。また、本実施の形態では、人物の位置として足元座標を実空間でのＸＹ座標で求めたが、これに限るものではなく、監視場所における人物の位置を特定できるものを、適宜、採用すればよい。

次に、所持物検出手段３３２について、説明する。所持物検出手段３３２は、人物が所持する物品を検出し、当該物品の種類を識別する。本実施の形態では、所持物検出手段３３２は、人物検出手段３３１で抽出された人物像中に所持物品の像が含まれているか否かを判定する。そして、所持物品の像が含まれている場合には、当該所持物品の種類を識別する。具体的には、所持物検出手段３３２は、記憶部３２に記憶された物品情報３２１を参照し、当該物品情報３２１の物品画像と人物像を照合する。そして、当該物品画像と特徴が類似する領域が人物像中に検出された場合に、当該人物像の人物が物品を所持していると判定する。以下、物品画像と特徴が類似する領域を所持物領域と称する。所持物検出手段３３２は、物品情報３２１を参照し、所持物領域ごとに最も特徴が類似する物品画像の物品ＩＤと物品名を読み出すことで、当該人物が所持する物品の種類を識別する。

なお、所持物領域を検出するための特徴量としては、輝度、色ヒストグラム、ＨＯＧ（Ｈｉｓｔｏｇｒａｍｓ ｏｆ Ｏｒｉｅｎｔｅｄ Ｇｒａｄｉｅｎｔｓ）特徴量、ＬＢＰ（Ｌｏｃａｌ Ｂｉｎａｒｙ Ｐａｔｔｅｒｎｓ）特徴量などの既存の特徴量を採用すればよい。

所持物検出手段３３２は、物品を所持していると判定された人物の追跡人物情報に、当該人物が所持する物品の物品ＩＤと物品名を記憶する。なお、人物が複数の物品を所持している場合は、当該人物の人物像内に複数の所持物領域が検出される。この場合、所持物検出手段３３２は、所持物領域ごとに物品ＩＤと物品名を識別して追跡人物情報に記憶する。このとき、人物が同一種類の物品を複数所持していることも考えられるため、本実施の形態では、追跡人物の所持物品ごとに所持物ＩＤを付与する。例えば、人物がカバンを２つ所持している場合、当該人物の人物像からは、所持物領域が２つ検出され、それぞれの所持物領域に対して同一の物品ＩＤ「１」と物品名「カバン」が識別される。しかし、所持物品ごとに付与される所持物ＩＤによって、２つのカバンを区別することが可能となる。なお、所持物ＩＤは、人物から新たな所持物品の所持物領域が検出されたタイミングで、検出された順に「１」、「２」のように付与される。そして、以降は、所持物領域内の所持物品が同一である場合に、付与済みの所持物ＩＤを引き継ぐようにする。

また、所持物検出手段３３２は、人物に対して所持物品の出現と所持物品の消失を判定する。具体的には、所持物検出手段３３２は、追跡人物の人物像から新たな所持物品が検出されると、当該追跡人物の人物像に対して、出現フラグを立てる。また、前回までに検出されていた所持物品が今回の人物像から検出されなかった場合、当該人物像に対して、消失フラグを立てる。ここで、所持物検出手段３３２は、前回に出現フラグが立った人物像内の所持物品と同じ所持物品が今回の人物像からも検出された場合、当該人物像に対しては出現フラグを立てない。なお、前回の所持物品と今回の所持物品が同じ物品であるか否かを判定する際は、物品ＩＤが同一であるか否かを判定したり、それぞれの所持物領域内の画像特徴が類似するか否かを判定したりすればよい。

すなわち、所持物検出手段３３２は、記憶部３２に記憶された追跡人物情報に所持物品に関する情報を付加する。具体的には、所持物検出手段３３２は、追跡人物情報に記憶されている時系列の人物像に対して、所持物ＩＤごとの所持物領域、所持物ＩＤごとの出現フラグの有無および消失フラグの有無を対応付けて記憶する。また、所持物検出手段３３２は、追跡人物情報に記憶されている人物ＩＤに対して、所持物ＩＤごとの物品ＩＤと物品名を対応付けて記憶する。

なお、所持物検出手段３３２による所持物品の検出方法や物品の種類の識別方法は、本実施の形態に限るものではなく、様々な既存方法を採用してもよい。例えば、所持物検出手段３３２は、物品画像を学習した学習識別器によって物品の種類（物品名や物品ＩＤ）を識別してもよい。また、本実施の形態では、人物像全体から所持物領域を検出したが、これに限るものではない。例えば、所持物検出手段３３２は、過去の人物像と現在の人物像を比較し、人物像内において色やテクスチャに変化のある領域の中から、所持物領域を検出してもよい。また、本実施の形態のように人物像中から所持物領域を検出するのではなく、入力画像全体から所持物領域を検出するとともに、当該所持物領域の位置を求め、当該所持物領域と最も近い位置に存在する人物の人物像に対して、所持物領域を対応付けるようにしてもよい。

次に、受け渡し検出手段３３３について、説明する。受け渡し検出手段３３３は、監視領域内で行われた受け渡し行為を検出する。本実施の形態では、受け渡し検出手段３３３は、所定時間内において、ある追跡人物から新たな所持物品が出現し、当該人物の付近に存在する他の人物から所持物品が消失し、当該出現した所持物品と消失した所持物品が同一の物品である場合に、これらの人物間で所持物品の受け渡しが行われたと判定する。具体的には、受け渡し検出手段３３３は、追跡人物の追跡人物情報を参照し、人物ＩＤが異なる追跡人物どうしについて、出現フラグが立っている人物と消失フラグが立っている人物のペアを設定する。本実施の形態では、今回の処理で出現フラグが立った人物と、過去所定時間内に消失フラグが立った人物のペアを設定する。ここで、過去所定時間内に消失フラグが立った人物をペアの対象としているのは、直接手渡しで受け渡しを行った場合だけでなく、受け渡す側の人物が一度地面に置いた所持物品を受け渡される側の人物が拾うことで受け渡しを行った場合、受け渡す側の人物が受け渡される側の人物に所持物品を投げ渡した場合も、受け渡し行為として検出できるようにするためである。このため、所定時間は、これらの受け渡し方法を考慮して、受け渡す側の人物から受け渡される側の人物に所持物品が移動するまでの時間に設定されることが好ましい。なお、本実施の形態では、所持物品が出現した人物と過去所定時間内に所持物品が消失した人物をペアとして設定したが、これに限らない。例えば、所持物品が消失した人物と、当該人物が所持物品を消失した時点から所定時間が経過するまでの間に所持物品が出現した人物のペアを設定するようにしてもよい。

受け渡し検出手段３３３は、設定したそれぞれのペアごとに、出現した所持物品と消失した所持物品が同じ物品であるか否かを判定する。ここで、同じ物品であるか否かを判定する際は、出現フラグが立っている所持物ＩＤに対応付けられた物品名や物品ＩＤと、消失フラグが立っている所持物ＩＤに対応付けられた物品名や物品ＩＤが同一であるか否かを判定したり、出現フラグが立っている時点の所持物領域内の画像特徴と、消失フラグが立っている所持物ＩＤが付与されている、当該消失するよりも前の時点の所持物領域内の画像特徴が類似するか否かを判定したりすればよい。なお、設定したペアにおいて、１人の追跡人物に消失フラグが立っている所持物ＩＤが複数ある場合は、それぞれの所持物ＩＤの所持物領域について物品の同一性を判定すればよい。また、設定したペアにおいて、１人の追跡人物に出現フラグが立っている所持物ＩＤが複数ある場合も、それぞれの所持物ＩＤの所持物領域について物品の同一性を判定すればよい。

また、受け渡し検出手段３３３は、設定したそれぞれのペアごとに、追跡人物間の距離を求める。本実施の形態では、追跡人物間の距離は、追跡人物情報として記憶されている人物の時系列の位置を参照し、出現フラグが立っている時点の人物の位置と、消失フラグが立っている時点の人物の位置に基づいて求める。なお、設定したペアにおいて、１人の追跡人物に消失フラグが立っている所持物ＩＤが複数ある場合は、所持物品が同じであると判定された所持物ＩＤの消失フラグが立っている時点の人物の位置を用いて人物間の距離を求めるようにすればよい。また、設定したペアにおいて、１人の追跡人物に出現フラグが立っている所持物ＩＤが複数ある場合は、所持物品が同じであると判定された所持物ＩＤの出現フラグが立っている時点の人物の位置を用いて人物間の距離を求めるようにすればよい。

受け渡し検出手段３３３は、設定したペアの中から、所持物品が同一、かつ人物間の距離が所定距離以内のペアを抽出し、これらのペアを「受け渡しペア」とする。すなわち、受け渡し検出手段３３３は、今回の処理において、受け渡しペアが抽出された場合に、監視領域内に受け渡し行為が発生したと判定する。ここで、所定距離は、直接手渡しで受け渡しを行う場合の人物間の距離だけでなく、受け渡す側の人物が受け渡される側の人物に所持物品を投げ渡す場合の人物間の距離も考慮した値に設定されることが好ましい。

また、受け渡し検出手段３３３は、受け渡された物品の種類および受け渡し行為の発生位置を求める。本実施の形態では、受け渡し検出手段３３３は、受け渡しペアについて、出現した所持物品と消失した所持物品が同じ物品であると判定された所持物品領域に対応付けられている所持物ＩＤの物品名および物品ＩＤを受け渡された物品の種類として判定する。また、受け渡し検出手段３３３は、受け渡しペアについて、人物間の距離が所定距離以内であると判定された「出現フラグが立っている時点の人物の位置」と「消失フラグが立っている時点の人物の位置」について、中点を判定する。そして、受け渡し検出手段３３３は、当該中点の実空間でのＸＹ座標を求め、受け渡し行為の発生位置とする。なお、本実施の形態では、人物の位置間の中点を受け渡し行為の発生位置としたが、これに限るものではなく、監視目的に合わせて、適宜、最適なものを受け渡し行為の発生位置として採用すればよい。例えば、受け渡しペアのうちどちらか一方の人物の位置を受け渡し行為の発生位置としてもよい。また、所持物領域の位置を求めて、当該所持物領域の位置を受け渡し行為の発生位置としてもよい。この場合、人物の位置と同様に、所持物領域の位置を実空間でのＸＹ座標で求めるようにして、監視場所における所持物品の位置を特定できるようにすればよい。

ここで、図１０を参照して、本実施の形態における受け渡し行為の検出処理について説明する。図１０は、本実施形態における受け渡し行為の検出例を模式的に示した図である。図１０は、説明を簡略化するために入力画像の一部を拡大して示したものであり、（ａ），（ｂ），（ｃ）の順で時系列になっている。

まず、図１０（ａ）には、人物５、人物６の２名の人物が映っている。人物５はカバン７を所持しており、人物６は現時点では物品を所持していない。すなわち、人物５の人物像は、人物５とカバン７が一体化した像として検出される。なお、図に示した黒丸５１および黒丸６１は、それぞれ人物５と人物６の足元位置を示している。所持物検出手段３３２にて、人物５の人物像、人物６の人物像について、所持物領域の検出処理が行われると、人物６の人物像からは所持物領域は検出されないが、人物５の人物像からはカバン７が所持物領域として検出される。このとき、人物５の追跡人物情報には、人物５の人物ＩＤ、人物５の人物像、当該人物像の撮影時刻、黒丸５１で示した人物の位置、カバン７の所持物領域、当該カバン７の所持物領域に対して付与された所持物ＩＤ、当該所持物ＩＤに対応付けた物品ＩＤと物品名、そして、人物５の人物像に対応付けた出現フラグが記憶される。また、人物６の追跡人物情報には、人物６の人物ＩＤ、人物６の人物像、当該人物像の撮影時刻、黒丸６１で示した人物位置が記憶される。

図１０（ｂ）には、人物５が人物６にカバン７を手渡している様子が映っている。この時点においても、人物５の人物像は、人物５とカバン７が一体化した像として検出される。なお、黒丸５１および黒丸６１は、この時点における人物５と人物６の足元位置を示している。所持物検出手段３３２にて、人物５の人物像、人物６の人物像について、所持物領域の検出処理が行われると、人物６の人物像からは所持物領域は検出されないが、人物５の人物像からは、再びカバン７が所持物領域として検出される。ここで、所持物検出手段３３２にて、今回検出された所持物領域の物品ＩＤや所持物領域内の画像特徴が、図１０（ａ）の時点の人物５の所持物領域の物品ＩＤや画像特徴と比較され、同一の物品であることが判定される。これにより、人物５の追跡人物情報には、人物５の人物ＩＤに対応付けて、図１０（ｂ）の時点における、人物５の人物像、当該人物像の撮影時刻、黒丸５１で示した人物の位置、カバン７の所持物領域が図１０（ａ）の時点と同じ所持物ＩＤに対応付けられて記憶される。また、人物６の追跡人物情報には、人物６の人物ＩＤに対応付けて、図１０（ｂ）の時点における、人物６の人物像、当該人物像の撮影時刻、黒丸６１で示した人物の位置が対応付けられて記憶される。

図１０（ｃ）には、人物５から人物６にカバン７が受け渡された様子が映っている。すなわち、この時点においては、人物６の人物像は、人物６とカバン７が一体化した像として検出される。なお、黒丸５１および黒丸６１は、この時点における人物５と人物６の足元位置を示している。所持物検出手段３３２にて、人物５の人物像、人物６の人物像について、所持物領域の検出処理が行われると、人物５の人物像からは所持物領域は検出されないが、人物６の人物像からはカバン７が所持物領域として新たに検出される。これにより、人物５の追跡人物情報には、人物５の人物ＩＤに対応付けて、図１０（ｃ）の時点における、人物５の人物像、当該人物像の撮影時刻、黒丸５１で示した人物の位置が記憶される。さらに、人物５の人物像からは前回に検出されていた所持物品の所持物領域が検出されなくなったため、当該所持物品領域の所持物品ＩＤに対する消失フラグが図１０（ｃ）の時点の人物像に対応付けられて記憶される。また、人物６の追跡人物情報には、人物６の人物ＩＤに対応付けて、図１０（ｃ）の時点における、人物６の人物像と、当該人物像の撮影時刻、黒丸６１で示した人物の位置、カバン７の所持物領域、当該カバン７の所持物領域に対して付与された所持物ＩＤ、当該所持物ＩＤに対応付けた物品ＩＤと物品名、そして、人物５の人物像に対応付けた出現フラグが記憶される。

そして、受け渡し検出手段３３３は、図１０（ｃ）の時点において、出現フラグが立った人物６と過去所定時間内において消失フラグが立った人物５をペアとして設定する。なお、説明を簡略化するために、図１０（ａ）、図１０（ｂ）の時点のペア判定については説明を省略する。

受け渡し検出手段３３３にて、人物５と人物６の追跡人物情報などに基づいて、所持物品が同一のカバン７であること、１０（ｃ）の時点における人物５の位置（黒丸５１）と人物６の位置（黒丸６１）との距離が所定距離以内であることが判定されると、人物５と人物６が「受け渡しペア」として検出される。そして、所持物品の同一性を判定した所持物品領域に対応付けられている所持物ＩＤの物品名および物品ＩＤが受け渡された物品の種類となる。すなわち、人物５と人物６で受け渡された物体の種類は、「物品ＩＤ：１」、「カバン」となる。また、距離の算出に用いた図１０（ｃ）の時点における黒丸５１と黒丸６１の中点（二重丸８）が受け渡しの発生位置として判定される。

受け渡し検出手段３３３は、受け渡しペアごとに、受け渡された物品の種類と受け渡しの発生位置を対応付けて記憶部３２に記憶する。そして、受け渡し検出手段３３３は、後述する監視重要度算出手段３３４にこれらの情報を出力する。

なお、本実施の形態では、受け渡し検出手段３３３は、追跡処理による所持物品の出現と消失に基づいて受け渡し行為を検出したが、これに限るものではない。例えば、画像解析によって、入力画像から所持物品を受け渡している最中の人物の画像特徴を検出し、受け渡し行為を検出してもよい。具体的には、追跡処理を用いずに、人物検出手段３３１にて入力画像内の人物を検出し、所持物検出手段３３２にて入力画像内の物品を検出する。そして、受け渡し検出手段３３３は、図１０（ｂ）や図１０（ｃ）のように、二人の人物が物品を挟むように位置している場合に受け渡し行為と判定するようにしてもよい。また、図１０（ｂ）に示すような、所持物品と当該所持物品を受け渡す側の人物と当該所持物品を受け渡される側の人物からなる形状のパターンを予め、記憶しておき、受け渡し検出手段３３３は、入力画像中から当該パターンに一致する領域が検出された場合に、受け渡し行為と判定するようにしてもよい。以上の例において、受け渡し検出手段３３３は、複数の人物と物品の位置関係から受け渡し行為を検出したが別の方法によっても受け渡し行為を検出することができる。すなわち、受け渡し検出手段３３３は、予め、人物間の受け渡し行為が映っている画像を学習した学習識別器を用いて、受け渡し行為を検出するようにしてもよい。また、既存の姿勢推定技術を用いて、入力画像中の人物の姿勢を推定し、受け渡し検出手段３３３は、物体を渡している姿勢や物体を受け取っている姿勢の人物が検出された場合に受け渡し行為と判定するようにしてもよい。なお、これらの検出方法の場合、受け渡し行為を検出した後に、入力画像から所持物検出手段３２２にて物品の位置や物品の種類を判定すればよい。また、受け渡しの発生位置についても、適宜、適したものを採用すればよい。例えば、上述した方法によって、受け渡し行為の発生位置を求めてもよいし、形状等のパターンが一致した領域の重心位置や学習識別器による検出位置などを受け渡し行為の発生位置としてもよい。

次に、監視重要度算出手段３３４について、説明する。監視重要度算出手段３３４は、受け渡し行為の監視重要度を算出する。本実施の形態では、監視重要度算出手段３３４は、受け渡し検出手段３３３にて検出された「受け渡しペア」ごとに、当該受け渡し行為で受け渡された物品の種類と受け渡しの発生位置に基づいて、監視重要度を算出する。具体的には、監視重要度算出手段３３４は、まず、受け渡し行為の発生位置が監視領域のどのブロックに対応するかを判定する。ここで、ブロックの判定は、記憶部３２に記憶しておいた、撮像装置２ごとの監視領域の実空間でのＸＹ座標とブロック位置との対応関係に基づいて判定すればよい。そして、監視重要度算出手段３３４は、エリア情報３２２を参照し、受け渡し行為の発生位置のブロックがどのエリアに属するかを判定する。その後、監視重要度算出手段３３４は、記憶部３２に記憶された監視基準情報３２３を参照して、受け渡し行為検出手段３３３にて判定された物品の種類とエリア（発生場所の種類）の組合せに対応する監視重要度を読み出す。そして、読み出した監視重要度を当該受け渡し行為の監視重要度として算出する。なお、本実施の形態では、監視基準情報３２３に対応する物品の種類と発生場所の種類の組合せがない場合、監視重要度を０に設定する。

監視重要度算出手段３３４は、受け渡された物品の種類、受け渡し行為の発生位置、受け渡しの発生場所の種類、監視重要度を、受け渡しペアごとに対応付けて記憶部３２に記憶する。

図１１を参照して、本実施の形態における監視重要度の算出処理について説明する。図１１は、本実施の形態における、カメラＩＤ「１００」の撮像装置２が撮影する監視領域の様子を示したものである。当該撮像装置２は、イベント会場の周辺を撮影しており、監視領域は、図中の点線で示された領域となる。当該監視領域内には、イベント会場周辺の広場および当該広場に併設された入場ゲートが含まれており、イベント会場を訪れた来場者が多数存在している。イベント会場を訪れた来場者は、広場を通り、フェンス９で仕切られた入場ゲートに向かう。フェンス９には、入場ゲートの入口１０が２ヶ所設けられており、当該入口１０では、イベントの運営スタッフ１１によって来場者のセキュリティチェックが行われる。セキュリティチェックでは、来場者に対して入場チケットの確認や手荷物の検査などが行われる。セキュリティチェックに合格した来場者は、入場ゲート内を通過して、イベント会場内に向かう。

カメラＩＤ「１００」の撮像装置２が撮影する監視領域は、図４に示したブロックやエリアに対応しており、図１１では、監視領域に設定されているエリアが点線で区切られて示されている。なお、図１１に示すとおり、当該監視領域に設定されているエリアは、イベント会場周辺の広場であるエリアＩＤ「００１」のエリア、入場ゲート内であるエリアＩＤ「００２」のエリア、そして、フェンス９を囲うように設定された広場と入場ゲートの境界部分であるエリアＩＤ「００３」のエリアから構成されている。

図１１に示した監視領域内には、多数の来場者およびイベントの運営スタッフ１１が存在しているが、これらの人物達の中には、受け渡し行為を行っている人物が多数見うけられる。当該監視領域を撮影した入力画像に対して、受け渡し検出手段３３４による受け渡し検出処理が行われると、図１１に示すとおり、Ａ〜Ｊの１０通りの受け渡し行為が検出される。

監視重要度算出手段３３４にて、図９に示した監視基準情報３２３が参照され、Ａ〜Ｊの受け渡し行為について監視重要度が算出されると、結果は以下のようになる。まず、受け渡し行為Ａは、広場でカバンを受け渡しているため、監視重要度は７になる。また、受け渡し行為Ｂは、広場でチラシを受け渡している。これは、監視基準情報３２３に登録されていない組合せであるため監視重要度は０になる。また、受け渡し行為Ｃは、広場でカメラを受け渡している。これは、監視基準情報３２３に登録されていない組合せであるため監視重要度は０になる。また、受け渡し行為Ｄは、広場でペットボトルを受け渡している。これは、監視基準情報３２３に登録されていない組合せであるため監視重要度は０になる。また、受け渡し行為Ｅは、入場ゲートの境界でチラシを受け渡している。これは、監視基準情報３２３に登録されていない組合せであるため監視重要度は０になる。また、受け渡し行為Ｆは、入場ゲート内でチケットを受け渡している。これは、監視基準情報３２３に登録されていない組合せであるため監視重要度は０になる。また、受け渡し行為Ｇは、入場ゲートの境界でチケットを受け渡ししているため、監視重要度は９になる。また、受け渡し行為Ｈは、入場ゲート内でカメラを受け渡ししているため、監視重要度は５になる。また、受け渡し行為Ｉは、入場ゲート内でカバンを受け渡している。これは、監視基準情報３２３に登録されていない組合せであるため監視重要度は０になる。また、受け渡し行為Ｊは、入場ゲートの境界でペットボトルを受け渡ししているため、監視重要度は１０になる。すなわち、図１１に示した監視領域においては、受け渡し行為Ｊ、受け渡し行為Ｇ、受け渡し行為Ａ、受け渡し行為Ｈの順で監視重要度が高くなる。

受け渡し行為Ｊは、入場ゲートの外側にいる人物がフェンス９越しに入場ゲートの内側にいる人物にペットボトルを受け渡している。すなわち、これは、セキュリティチェックを通過せずに入場ゲート内にペットボトルを持ち込む行為である。したがって、受け渡し行為Ｊは、ペットボトル内の液体が危険物である可能性があるため、監視員が監視対象として注目すべき度合いが高い。一方、受け渡し行為Ｄもペットボトルの受け渡しである。しかし、広場では、来場客が店舗などで購入したペットボトルを同伴者に受け渡すことが通常に行われるものであり、仮にそれが危険物であったとしても、イベント会場内に持ち込むためには、入場ゲートの入口でセキュリティチェックに合格する必要がある。このため、受け渡し行為Ｄの注目すべき度合いは、現時点では低くなる。

受け渡し行為Ｇは、入場ゲートの内側にいる人物がフェンス９越しに入場ゲートの外側にいる人物に入場チケットを受け渡している。これは、セキュリティチェックにてチケットが確認されて入場ゲート内に入った人物が、自分の入場チケットを入場ゲートの外側にいる入場チケットを持っていない人物に渡す行為である。すなわち、入場チケットを持っていなかった人物が再入場という名目でセキュリティチェックを通りぬけてイベント会場内に侵入しようする可能性がある。したがって、このような不審行動は、監視員が監視対象として注目すべき度合いが高い。一方、受け渡し行為Ｆも入場チケットの受け渡しである。しかし、入場ゲート内では、セキュリティチェックのために来場者とイベントの運営スタッフ１１の間でチケットの受け渡しが通常に行われる。このため、受け渡し行為Ｆの注目すべき度合いは、低くなる。

受け渡し行為Ａは、広場でカバンを受け渡す行為である。もちろん、来場者が同伴者に一時的に預かってもらうためにカバンを受け渡すこともある。しかし、前述したように、不審者間でカバンに入れた爆発物などの危険物を受け渡している可能性についても警戒する必要がある。カバンの中身が危険物である場合、イベント会場内に持ち込むためには入場ゲートでセキュリティチェックに合格する必要があるが、カバンの中身が爆発物であった場合、広場などで犯行が行われても大きな被害が発生することになる。このため、受け渡し行為Ａについては、その受け渡し行為が不審なものであるかを注意深く確認する必要があるため、監視員が監視対象として注目すべき度合いを高くする。一方、受け渡し行為Ｉも、カバンを受け渡す行為であるが、セキュリティチェックを通過した後に入場ゲート内でカバンを受け渡しているため、カバンの中身に危険物が含まれている可能性は低い。このため、受け渡し行為Ｉの注目すべき度合いは、低くなる。

受け渡し行為Ｈは、入場ゲート内でカメラを受け渡す行為である。来場者がカメラを取り出し、第三者にカメラを受け渡す行為は、撮影をするための予備動作である可能性が高い。イベント会場内が撮影禁止とされている場合、セキュリティチェックにて、所持しているカメラを確認されることはあるが、カメラ自体は危険物ではなく、カメラをイベント会場内に持ち込んでも撮影をしなければ問題はない。このため、運営スタッフから撮影をしないよう注意を促されることはあっても、カメラ自体が没収されることは稀である。しかし、受け渡し行為Ｈは、入場ゲートを通過した後に、撮影をするための予備動作をとっている。したがって、その後、実際に撮影が行われる可能性が高い。このため、受け渡し行為Ｈについては、監視員が監視対象として注目すべき度合いを高くする。一方、受け渡しＣもカメラを受け渡しているが、広場での撮影は禁止されていないため、受け渡し行為Ｃの注目すべき度合いは、低くなる。

受け渡し行為Ｂおよび受け渡し行為Ｅは、チラシを受け渡している。チラシやパンフレットなどを受け渡す行為は、イベント会場の周辺では通常に行われる。このため、受け渡し行為Ｂの注目すべき度合いは、低くなる。また、受け渡し行為Ｅは、入場ゲートの内側にいる人物から入場ゲートの外側にいる人物への受け渡し行為であるが、受け渡されている物品が危険性のないチラシであるため、受け渡し行為Ｅの注目すべき度合いは、低くなる。なお、図１１には示していないが、チラシの受け渡し行為自体には危険性がなくても、チラシの配布を禁止している場所にて、チラシの受け渡しが行われた場合は、監視員が監視対象として注目すべき度合いを高くするようにしてもよい。

以上のように、監視員が監視対象として注目すべき度合いは、受け渡されている物品と受け渡し行為の発生場所の組合せに応じて変化するものであり、受け渡されている物品だけで決まるものではなく、受け渡し行為の発生場所だけで決まるものでもない。本実施の形態における画像監視システム１では、このように、受け渡されている物品と受け渡し行為の発生場所の組合せに応じて、監視重要度を求めることで、監視員が監視対象として注目すべき度合いを精度よく、かつ監視の目的に合わせて判断することが可能となる。

次に、出力制御手段３３５について説明する。出力制御手段３３５は、監視重要度算出手段３３４にて算出された監視重要度に応じて、外部への受け渡し情報の出力方法を制御する。本実施の形態では、出力制御手段３３５は、受け渡し検出手段３３３にて検出された受け渡し行為の受け渡し情報を、監視センタ装置４へ出力させ、受け渡し情報を監視センタ４の表示部４１に表示させるとともに、記録部４２に記憶させる。本実施の形態の出力制御手段３３５は、この表示部４１への受け渡し情報の表示方法を監視重要度に応じて変えるよう制御するものである。具体的には、出力制御手段３３５は、表示部４１に表示された映像を目視している監視員が、監視重要度の高い受け渡し行為を監視重要度の低い受け渡し行為よりも優先的に確認できるように表示の態様を変えるものである。なお、本実施の形態の受け渡し情報は、上述したとおり、受け渡しの様子が映っている画像、受け渡し行為の発生時刻、受け渡し行為の発生位置、受け渡し行為の発生場所の種類、受け渡された物品の種類、受け渡された物品の画像、監視重要度などである。また、本実施の形態では、受け渡し行為を行った人物達が映っている現在時刻の画像も受け渡し情報として扱う。なお、これらの受け渡し情報は、受け渡しペアについて記憶部３２に記憶されている追跡人物情報、受け渡された物品の種類、受け渡しの発生位置、受け渡しの発生場所の種類などを参照して、記憶部３２に記憶されている時系列の入力画像などの画像情報を用いて、適宜、生成される。

図１２を参照して、本実施の形態における表示部４１への表示態様について説明する。図１２は、本実施形態における表示部４１の表示例を示した図である。なお、図１２では、図１１に示した監視領域において検出された受け渡し行為の受け渡し情報を表示している。図１２に示すとおり、表示部４１には、受け渡し行為Ｊに関する様々な受け渡し情報が表示されている。まず、領域４１１には、受け渡しの様子が映っている画像が表示される。また、領域４１２には、受け渡し行為の発生時刻、受け渡し行為の発生場所の種類、受け渡された物品の種類、監視重要度が表示される。また、領域４１３には、受け渡された物品の画像が表示される。また、領域４１４と領域４１５には、受け渡し行為を行った人物達の現在時刻における画像が表示される。

また、図１２の領域４１６には、受け渡し検出手段３３３にて検出された受け渡し行為ごとにサムネイル画像が一覧表示されている。監視員が、このサムネイル画像の一覧から、詳細を確認したい受け渡し行為のサムネイル画像を選択すると、表示部４１には、当該選択された受け渡し行為に関する受け渡し情報が領域４１１、領域４１２、領域４１３、領域４１４、領域４１５に表示される。なお、図１２では、受け渡し行為Ｊのサムネイル画像が選択されている。

本実施形態の出力制御手段３３５は、このサムネイル画像の表示順が監視重要度の高い順になるように表示部４１に表示させるものである。例えば、図１２の領域４１６には、上から、受け渡し行為Ｊ、受け渡し行為Ｇ、受け渡し行為Ａ、受け渡し行為Ｈの順でサムネイル画像が表示されている。また、受け渡し行為Ｈのサムネイル画像の下には、監視重要度が０であった、受け渡し行為Ｂのサムネイル画像が表示されている。図１２には図示していないが、受け渡し行為Ｂのサムネイル画像に続いて、受け渡し行為Ｂと同様に監視重要度が０となった受け渡し行為のサムネイル画像が続いている。これらの受け渡し行為のサムネイル画像は、監視員が矢印ボタン４１７を操作してサムネイル画像を上下にスクロールさせることで表示される。

図１２に示すように、表示部４１に、受け渡し行為のサムネイル画像の一覧が監視重要度の高い順に表示されることによって、監視員は、検出された多数の受け渡し行為の中から、監視重要度が高い受け渡し行為と監視重要度が低い受け渡し行為を容易に把握することができる。また、監視重要度の高いものが常に一覧の上に表示されるため、監視重要度が高い受け渡し行為のサムネイル画像ほど監視員が選択しやすくなる。これにより、監視領域から多数の受け渡し行為が検出された場合であっても、監視員は、効率的に受け渡し行為を監視することができる。

なお、監視重要度に応じた表示態様は、これに限るものではない。以下、図１３，図１４を参照し、表示部４１への別の表示態様について、説明する。

図１３は、本実施形態における表示部４１の別の表示例を示した図である。なお、図１３も、図１２と同様に図１１に示した監視領域において検出された受け渡し行為の受け渡し情報を表示している。図１３では、図１１に示した監視領域の全体を映した画像が表示されており、検出された受け渡し行為がそれぞれ矩形枠で囲われて表示されている。このとき、出力制御手段３３５は、矩形枠の太さが監視重要度に応じて変わるように表示部４１に表示させる。具体的には、図１３に示すとおり、出力制御手段３３５は、受け渡し行為Ｊ、受け渡し行為Ｇ、受け渡し行為Ａ、受け渡し行為Ｈの順で矩形枠の太さが太くなるように表示させる。また、出力制御手段３３５は、監視重要度に応じて、矩形枠の種類を変えるようにしてもよい。例えば、図１３に示すとおり、出力制御手段３３５は、監視重要度が０であった、受け渡し行為Ｂ、受け渡し行為Ｃ、受け渡し行為Ｄ、受け渡し行為Ｅ、受け渡し行為Ｆ、受け渡し行為Ｉについて、実線ではなく点線で矩形枠を表示させている。また、出力制御手段３３５は、受け渡し行為Ｊの矩形枠のように監視重要度の値を表示させてもよい。また、出力制御手段３３５は、矩形枠の色や矩形枠の形状を変えるように表示させてもよい。

図１３に示すように、監視領域の全体を映した画像上において、受け渡し行為の発生位置を矩形枠で示すことにより、監視員は、監視領域内で行われた受け渡し行為を容易に確認することができる。また、監視重要度が高い受け渡し行為を監視重要度が低い受け渡し行為よりも目立つように表示にすることによって、監視員は、検出された多数の受け渡し行為の中から、監視重要度が高い受け渡し行為と監視重要度が低い受け渡し行為を容易に把握することができる。これにより、監視領域から多数の受け渡し行為が検出された場合であっても、監視員は、効率的に受け渡し行為を監視することができる。

また、図１４は、本実施の形態における表示部４１の別の表示例を示した図である。なお、図１４も、図１２，図１３と同様に図１１に示した監視領域において検出された受け渡し行為の受け渡し情報を表示している。図１４では、領域４１８に受け渡し行為Ｊの受け渡しの様子が映っている画像が表示される。また、領域４１９に受け渡し行為Ｇの受け渡しの様子が映っている画像が表示される。また、領域４２０に受け渡し行為Ａの受け渡しの様子が映っている画像が表示される。また、領域４２１に受け渡し行為Ｈの受け渡しの様子が映っている画像が表示される。図１２に示すとおり、本実施の形態の出力制御手段３３５は、監視重要度が高い受け渡し行為ほど受け渡し情報が最前面に表示されるようにする。図１２には、監視領域にて検出された受け渡し行為について、受け渡しの様子が映っている画像が表示されているが、受け渡し行為Ｊ、受け渡し行為Ｇ、受け渡し行為Ａ、受け渡し行為Ｈの順で重なって表示されている。すなわち、監視員は、検出された多数の受け渡し行為の中から、監視重要度が高い受け渡し行為を監視重要度が低い受け渡し行為よりも優先的に確認することができる。これにより、監視領域から多数の受け渡し行為が検出された場合であっても、監視員は、効率的に受け渡し行為を監視することができる。

以上、表示部４１への様々な表示態様について説明したが、これらに限るものではなく、監視重要度に応じて、監視員が効率的に受け渡し行為を監視することができるように表示態様を変えるものであればよい。例えば、図示はしないが、監視場所の地図画像上に、検出された受け渡し行為の発生位置をそれぞれマッピングし、監視重要度が高いものほど目立つように表示するようにしてもよい。このとき、監視員がマッピングされた発生位置を選択すると、図１２に示すように受け渡し情報を表示するようにしてもよい。また、地図画像上に、受け渡しを行った人物達の現時刻までの移動軌跡を表示するようにしてもよい。このとき、移動軌跡の表示態様を監視重要度に応じて変更するようにしてもよい。

また、出力制御手段３３５は、表示部４１への表示態様を変えるものに限らない。例えば、検出された受け渡し行為のうち、監視重要度が所定以上（例えば、５以上）となったものだけを表示部４１に表示するようにしてもよい。例えば、図１４には、図１１に示した監視領域において検出された受け渡し行為のうち、受け渡し行為Ｊ、受け渡し行為Ｇ、受け渡し行為Ａ、受け渡し行為Ｈの４つの受け渡し情報のみが表示されている。なお、このような表示を実現するために、監視重要度が所定以上となった受け渡し行為の受け渡し情報のみを監視センタ４に出力するようにしてもよいし、検出された全ての受け渡し行為の受け渡し情報を監視センタ４に出力した上で、監視重要度が所定以上となった受け渡し行為の受け渡し情報のみを表示部４１に出力するようにしてもよい。すなわち、本実施の形態における出力制御手段３３５は、監視重要度に応じて受け渡し情報の外部への出力の有無を制御するようにしてもよい。これにより、監視員は、検出された多数の受け渡し行為の中から、監視重要度が高い受け渡し行為を監視重要度が低い受け渡し行為よりも優先的に確認することができる。このため、監視領域から多数の受け渡し行為が検出された場合であっても、効率的に受け渡し行為を監視することができる。

また、出力制御手段３３５は、受け渡し情報として表示部４１への通知表示を出力するようにしてもよい。例えば、監視重要度が所定以上（例えば、５以上）の受け渡し行為が発生した場合に、監視センタ４の表示部４１に「監視重要度の高い受け渡し行為が発生した」旨の通知表示を出力するようにしてもよい。この場合、監視員は、表示部４１に表示された通知表示を確認後、監視重要度が高い受け渡し行為について前述したような画像情報を参照し、詳細を確認する。なお、通知表示は、表示部４１への画像表示に限らず、音声や警報音、警報用ランプの点灯などでもよい。すなわち、出力制御手段３３５は、監視重要度に応じて、外部への通知の有無を制御するようにしてもよい。また、通知表示の態様を監視重要度に応じて変更するようにしてもよい。これにより、監視員は、通知表示によって、監視場所に監視重要度が高い受け渡し行為が発生したことを容易に知ることができ、監視重要度が低い受け渡し行為よりも優先的に確認することができる。このため、監視領域から多数の受け渡し行為が検出された場合であっても、効率的に受け渡し行為を監視することができる。

また、本実施の形態では、出力制御手段３３５は、受け渡し情報を監視センタ装置４の記録部４２に記憶させる。このとき、出力制御手段３３５は、監視重要度に応じて、記録部４２へ出力の有無、すなわち、記録部４２への記録の有無を制御するようにしてもよい。例えば、出力制御手段３３５は、監視重要度が所定以上（例えば、３以上）の受け渡し行為の受け渡し情報のみを記録部４２に記録するようにしてもよい。また、出力制御手段３３５は、監視領域から検出された全ての受け渡し行為の受け渡し情報について記録部４２に記録し、その中から監視重要度が所定以上（例えば、５以上）の受け渡し行為の受け渡し情報を表示部４１に表示するようにしてもよいし、記録の有無を判定する監視重要度の閾値と、表示の有無を判定する監視重要度の閾値をそれぞれ異なる値に設定するようにしてもよい。例えば、監視重要度３以上の受け渡し情報を記録部４２に記録し、さらに監視重要度５以上の受け渡し情報については表示部４１への表示を行うようにしてもよい。これにより、監視員は、監視重要度が高い受け渡し行為を監視重要度が低い受け渡し行為よりも優先的に確認することができるとともに、監視重要度が低い受け渡し行為についても記録された受け渡し情報を後から確認することで不審なものであるか否かを再検証することができる。このため、監視領域から多数の受け渡し行為が検出された場合であっても、効率的に受け渡し行為を監視することができる。

このように、本実施の形態における出力制御手段３３５は、監視領域において検出された受け渡し行為について、監視重要度に応じた受け渡し情報の出力を行う。これにより、イベント会場などのように不特定多数の人物が存在し、多数の受け渡し行為が発生する場所を監視する場合であっても、監視センタの監視員は、不審度の高い受け渡し行為と、不審度の低い受け渡し行為を容易に区別しながら、効率的に受け渡し行為を監視することができる。

なお、本実施の形態では、出力制御手段３３５を画像監視装置３における画像処理部３３の機能として説明したが、これに限るものではない。例えば、出力制御手段３３５を監視センタ装置４の機能として画像監視システム１を実現してもよい。この場合、出力制御手段３３５は、画像監視装置３３から受け渡し情報を生成するために必要な情報を入力すればよい。また、表示部４１に表示する受け渡し情報の各種画像情報などは、出力制御手段３３５で生成してから外部に出力するようにしてもよいし、出力制御手段３３５からの指示に基づいて、外部で生成するようにしてもよい。

次に、図１に戻り、画像監視システム１を構成する監視センタ装置４について説明する。

監視センタ装置４は、監視員が駐在する監視センタに設置される装置である。本実施の形態では、監視センタ装置４は、表示部４１、記録部４２を備える。なお、本実施の形態では、監視センタは、監視場所であるイベント会場に設けられており、監視員は、画像監視装置３から入力した受け渡し情報に基づいて、監視場所内に発生した受け渡し行為が不審なものであるか否かを詳細に確認し、現場の警備員などに対処指示を出すなどの適切な対応を行う。このために、監視センタ装置４は有線通信や無線通信などで画像監視装置３と接続されており、各種の情報を入出力する。

表示部４１は、液晶ディスプレイなどの情報表示デバイスであり、前述した出力制御手段３３５からの信号に基づいて、受け渡し情報などを表示する。なお、表示部４１は、スピーカなどを備えてもよいし、警報ランプなどの照明装置を備えるようにしてもよい。

記録部４２は、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などの半導体メモリ、ハードディスクなどのメモリ装置で構成され、前述した出力制御手段３３５からの信号に基づいて、受け渡し情報を記録する。なお、本実施の形態では、記録部４２を監視センタ装置４に設けたが、画像監視装置３に設けるようにしてもよい。また、記録部４２は、表示部４１と離れた場所に設けるようにしてもよい。

なお、監視センタは、監視場所に設けるのではなく、監視場所から離れた遠隔地に設けるようにしてもよい。この場合、監視センタ装置４は、通信ネットワークなどを介して、現場の警備員などに必要な情報を送信し、受け渡し行為への対処指示を出力するようにすればよい。また、遠隔地に設けた監視センタと、監視場所内に設けた監視センタ、のように監視センタを複数箇所に設けるようにしてもよい。すなわち、複数個の表示部４１や記録部４２を用いて画像監視システム１を実現してもよい。

次に、図１５を参照して、本実施の形態における画像監視装置３の処理について説明する。図１５は、本実施の形態における画像監視処理のフローチャートである。

画像監視システム１を構成する各装置が起動され、その後、監視がスタートされると、画像監視装置３は、図１５のフローチャートに示したステップＳ１からステップＳ９の処理を繰り返す。なお、背景画像などの情報は、監視がスタートされる前に生成され、記憶部３２に記憶されるものとする。

まず、ステップＳ１では、画像入力部３１にて、入力画像が記憶部３２および画像処理部３３に入力される。

ステップＳ２では、画像処理部３３にて、受け渡し検出処理が行われる。本実施形態における受け渡し検出処理については、後述する。

ステップＳ３では、受け渡し検出手段３３３にて受け渡し行為が検出されたか否かによって処理が分岐する。なお、本実施の形態では、受け渡し検出手段３３３にて受け渡しペアが検出されたか否かで処理が分岐する。受け渡し検出手段３３３にて受け渡し行為が検出された場合、処理をステップＳ４に移行する。また、受け渡し検出手段３３３にて受け渡し行為が検出されなかった場合、処理をステップＳ１に戻して、次の入力画像が取得される。

ステップＳ４からステップＳ８は、受け渡し検出手段３３３にて検出された受け渡し行為ごとにステップＳ５からステップＳ７の処理が行われ、全ての受け渡し行為について処理が行われるまで、処理が繰り返される。すなわち、本実施の形態では、受け渡しペアごとに、ステップＳ５からステップＳ７の処理が行われ、全ての受け渡しペアについて処理が行われるまで、処理が繰り返される。

ステップＳ５では、受け渡し検出手段３３３にて検出された受け渡し行為について、受け渡された物品の種類を判定する処理が行われる。本実施の形態では、受け渡し検出手段３３３にて、処理対象になっている受け渡しペアの追跡人物情報が参照される。そして、受け渡し検出手段３３３にて、一方の人物から消失した後に他方の人物から出現した同一の所持物品の物品名および物品ＩＤが受け渡された物品の種類として判定される。

ステップＳ６では、受け渡し検出手段３３３にて検出された受け渡し行為について、受け渡し行為の発生位置を判定する処理が行われる。本実施の形態では、受け渡し検出手段３３３にて、処理対象になっている受け渡しペアの追跡人物情報が参照される。そして、受け渡し検出手段３３３にて、当該追跡人物情報に記憶されている人物の位置のうち、所持物品が消失した時点の一方の人物の位置と、当該所持物品が出現した時点の他方の人物の位置の中点が受け渡し行為の発生位置として判定される。

ステップＳ７では、監視重要度算出手段３３４にて、記憶部３２の監視基準情報３２３が参照され、受け渡された物品の種類と受け渡し行為の発生位置に基づいて、監視重要度が算出される。本実施の形態では、まず、監視重要度算出手段３３４にて、記憶部３２のエリア情報３２２が参照され、受け渡し行為の発生位置に基づいて、受け渡し行為の発生エリアが判定される。そして、監視重要度算出手段３３４にて、監視基準情報３２３が参照され、受け渡された物品の種類と受け渡し行為の発生エリアに対応する監視重要度が求められる。

全ての受け渡し行為について、ステップＳ５からステップＳ７が行われると、処理をステップＳ９に移行する。ステップＳ９では、出力制御手段３３５にて、監視重要度算出手段３３４で求められた監視重要度に応じて、受け渡し情報の出力制御が行われる。出力制御手段３３５による出力制御が終了すると、処理をステップＳ１に戻して、次の入力画像が取得される。

次に、図１６を参照して、本実施の形態における画像処理部３３の受け渡し検出処理（図１５のステップＳ２）について詳細に説明する。図１６は、本実施の形態における受け渡し検出処理のフローチャートである。

本実施の形態における受け渡し検出処理（ステップＳ２）は、画像入力部３１にて、入力画像が画像処理部３３に入力されることでスタートする。

まず、ステップＳ２０１では、人物検出手段３３１にて、人物の検出処理と人物の追跡処理が行われる。本実施の形態では、人物検出手段３３１にて、入力画像から人物像の抽出処理が行われ、抽出された人物像について追跡処理が行われる。ここで、人物検出手段３３１にて、新たに検出された人物については、新たな人物ＩＤが付与され、既に前回までに追跡が開始されている人物については、同じ人物ＩＤが引き継がれる。その後、人物検出手段３３１にて、追跡人物の位置が求められる。そして、人物検出手段３３１にて、人物ＩＤに対応付けて、今回抽出された人物像、当該人物像の撮影時刻、追跡人物の位置が追跡人物情報として記憶部３２に記憶される。ここで、既に前回までに追跡が開始されている人物については、前回付与された人物ＩＤに対応付けて、今回抽出された人物像、当該人物像の撮影時刻、追跡人物の位置が追跡人物情報に記憶部３２に記憶される。

ステップＳ２０２では、人物検出手段３３１によって追跡処理が行われた人物（追跡人物）が存在したか否かによって処理が分岐する。追跡人物が存在した場合、処理をステップＳ２０３に移行する。また、追跡人物が存在しなかった場合、すなわち、人物像が抽出されなかった場合、もしくは、前回までに追跡されていた全ての追跡人物に対する追跡が終了した場合は、処理をステップＳ２１４に移行する。

ステップＳ２０３からステップＳ２０６は、追跡人物ごとにステップＳ２０４からステップＳ２０５の処理が行われ、全ての追跡人物について処理が行われるまで、処理が繰り返される。

ステップＳ２０４では、所持物検出手段３３２にて、追跡人物に対して所持物品の消失判定処理が行われる。本実施の形態では、所持物検出手段３３２にて、前回までに検出されていた所持物品が今回の人物像から検出されなかった場合に、当該人物像に対して、当該所持物品の所持物ＩＤの消失フラグが立てられる。なお、所持物検出手段３３２による所持物品の検出や、前回と同一の所持物品であるか否かの判定は、記憶部３２の物品情報３２１および追跡人物情報を参照して行われる。

ステップＳ２０５では、所持物検出手段３３２にて、追跡人物に対して所持物品の出現判定処理が行われる。本実施の形態では、所持物検出手段３３２にて、追跡人物の人物像に新たな所持物品が検出されると、当該所持物品の所持物領域に対して、所持物ＩＤが付与されるとともに、人物像に対応付けて当該所持物領域が記憶部３２の追跡人物情報に記憶される。その後、記憶部３２の物品情報３２１が参照され、当該所持物ＩＤに対応付けて、物品ＩＤおよび物品名が追跡人物情報に記憶される。そして、所持物検出手段３３２は、当該人物像に対して当該所持物ＩＤの出現フラグを立てる。また、今回の人物像から検出された所持物品が前回の人物像中の所持物品と同一の所持物品である場合、所持物検出手段３３２は、今回の人物像から検出された所持物領域に対して、前回付与された所持物ＩＤを対応付けて追跡人物情報に記憶する。このとき、所持物検出手段３３２は、当該人物像に対して当該所持物ＩＤの出現フラグを立てない。なお、所持物検出手段３３２による所持物品の検出や、前回と同一の所持物品か否かの判定は、記憶部３２の物品情報３２１および追跡人物情報を参照して行われる。

全ての追跡人物について、ステップＳ２０４からステップＳ２０５が行われると、処理をステップＳ２０７に移行する。ステップＳ２０７では、今回の処理で所持物品が出現した人物と、過去所定時間以内に所持物品が消失した人物のペアが設定される。具体的には、追跡人物情報を参照され、今回の処理で出現フラグが立った追跡人物と、過去所定時間以内に消失フラグが立った追跡人物の組合せが作られる。

ステップＳ２０８からステップＳ２１５は、ステップＳ２０７で設定されたペアごとにステップＳ２０９からステップＳ２１３の処理が行われ、全てのペアについて処理が行われるまで、処理が繰り返される。

ステップＳ２０９では、受け渡し検出手段３３３にて、所持物品の同一性が判定される。具体的には、受け渡し検出手段３３３にて、それぞれの追跡人物情報が参照され、出現フラグが立っている所持物ＩＤの物品名および物品ＩＤと、消失フラグが立っている所持物ＩＤの物品名および物品ＩＤが同一であるか否かが判定される。また、このとき、所持物領域内の画像特徴が類似するか否かを判定してもよい。なお、設定されたペアにおいて、１人の追跡人物に消失フラグが立っている所持物ＩＤが複数ある場合は、それぞれの所持物ＩＤの所持物領域について物品の同一性が判定される。また、設定したペアにおいて、１人の追跡人物に出現フラグが立っている所持物ＩＤが複数ある場合も、それぞれの所持物ＩＤの所持物領域について物品の同一性が判定される。

ステップＳ２１０では、受け渡し検出手段３３３にて、人物間の距離が所定距離以内であるか否かが判定される。具体的には、受け渡し検出手段３３３にて、それぞれの追跡人物情報が参照され、出現フラグが立っている時点の人物の位置と、消失フラグが立っている時点の人物の位置との距離が算出される。そして、受け渡し検出手段３３３にて、算出した距離が所定距離以内であるか否かが判定される。このとき、設定されたペアにおいて、１人の追跡人物に消失フラグが立っている所持物ＩＤが複数ある場合は、ステップＳ２０９で所持物品が同じであると判定された所持物ＩＤの消失フラグが立っている時点の人物の位置を用いて人物間の距離を求める。また、設定されたペアにおいて、１人の追跡人物に出現フラグが立っている所持物ＩＤが複数ある場合も、ステップＳ２０９で所持物品が同じであると判定された所持物ＩＤの出現フラグが立っている時点の人物の位置を用いて人物間の距離を求める。

ステップＳ２１１では、ステップＳ２０９にて所持物品が同一であると判定され、かつ、ステップＳ２１０にて距離が所定距離以内であると判定された場合に、ステップＳ２１２にて処理対象であるペアが受け渡し行為を行った（受け渡しペア）と判定される。また、それ以外の場合は、ステップＳ２１３にて処理対象であるペアが受け渡し行為を行っていないと判定される。

全てのペアについて、ステップＳ２０９からステップＳ２１３が行われると、処理を図１５に示すステップＳ３に移行する。また、ステップＳ２０２にて、追跡人物がなかった場合もステップＳ２１４にて受け渡し行為がなかったと判定され、処理を図１５に示すステップＳ３に移行する。

本実施の形態によれば、監視場所で発生した受け渡し行為を自動的に検出するとともに、検出された受け渡し行為ごとに、受け渡された物品と受け渡し行為の発生場所に基づいて、監視員が監視対象として注目すべき度合いを表す監視重要度を求める。そして、求めた監視重要度に応じて、受け渡し行為の検出結果を出力する。これにより、イベント会場などのように不特定多数の人物が集まる場所において、監視員は、効率的に受け渡し行為を監視することができる。このため、受け渡し行為を契機として、監視場所に発生する様々な異常事態に早期に対処することが可能となる。

以下、本発明の画像監視システム１の別の実施形態について説明する。なお、上述した実施の形態と共通する処理については、説明を省略し、本実施の形態における特有の処理について説明する。

上述した実施形態の画像監視システム１では、受け渡された物品の種類と受け渡し行為の発生場所の種類に基づいて監視重要度を算出するものであったが、本実施の形態における画像監視システム１は、さらに別の情報を用いて、受け渡し行為の監視重要度を算出するものである。具体的には、本実施の形態では、受け渡し行為が発生した時刻、受け渡し行為の発生位置における受け渡し行為の発生頻度、受け渡し行為の発生位置周辺の混雑度、受け渡し行為の発生位置から重要エリアまでの距離、受け渡し行為の発生位置から所定の監視人物までの距離、これらの情報を用いて、受け渡し行為の監視重要度を算出する。

まず、受け渡し行為が発生した時刻に基づいて監視重要度を算出する実施形態について、説明する。本実施の形態では、監視基準情報３２３として、物品ＩＤ、物品名、エリアＩＤ、エリア名、時間帯情報、監視重要度が対応付けられて記憶部３２に記憶される。そして、本実施の形態では、受け渡し検出手段３３３は、受け渡された物品の種類および受け渡し行為の発生位置に加えて、受け渡し行為の発生時刻を求める。具体的には、受け渡し検出手段３３３は、追跡人物情報を参照し、受け渡し行為の発生位置を求めた人物像のうち所持物品が出現した人物像の撮影時刻を受け渡し行為の発生時刻として求める。そして、監視重要度算出手段３３４は、記憶部３２の監視基準情報３２３を参照して、受け渡された物品の種類、受け渡し行為の発生位置、受け渡し行為の発生時刻に対応する監視重要度を算出する。

ここで、監視基準情報３２３に記憶される時間帯情報は、例えば、イベント会場の開場時刻からイベントの開始時刻までの時間帯や、イベントの開始時刻からイベントの終了時刻までの時間帯、重要人物がイベント会場を訪れる時間帯などである。イベント会場の開場時刻からイベントの開始時刻までの時間帯は、入場ゲート付近が混雑する時間帯であり、混雑に紛れて入場ゲート境界で不審な受け渡し行為が行われる可能性がある。このため、入場ゲート境界において、ペットボトルを受け渡す行為、チケットを受け渡す行為、カバンを受け渡す行為などの監視重要度を、この時間帯外のときよりも高く設定する。また、イベントの開始時刻からイベントの終了時刻までの時間帯は、特に、イベント会場内の警戒を高める必要がある。このため、イベントの開始前やイベントの終了後の時間帯よりもイベント会場内で行われる受け渡し行為の監視重要度を高く設定する。例えば、イベント会場内でのカメラの受け渡し行為の監視重要度を高く設定したり、イベント会場内でのカバンの受け渡し行為の監視重要度を高く設定したりする。また、重要人物がイベント会場を訪れる時間帯においては、重要人物の移動経路に関連するエリアにおいて、警戒を高める必要がある。このため、予め、重要人物の移動経路に関連するエリアをエリア情報３２２に設定しておき、重要人物がイベント会場を訪れる時間帯において、当該エリアで行われた受け渡し行為の監視重要度を、それ以外の時間帯よりも高く設定しておく。

本実施の形態によれば、受け渡された物品の種類や受け渡し行為の発生場所の種類だけではなく、時間帯によって変化する監視領域の状況を考慮して監視重要度を求めることができる。

なお、時間帯情報は、時刻に限らず、日付や曜日などで設定してもよい。これによれば、イベントの開催日に行われた受け渡し行為の監視重要度を、イベントの開催日以外に行われた受け渡し行為の監視重要度よりも高く設定することができる。この場合、撮影時刻を示す情報として、撮影された時刻だけでなく、撮影された日付や撮影された曜日を入力画像に付加するようにし、追跡人物情報として人物像が撮影された時刻、撮影された日付や撮影された曜日を記憶すればよい。

また、本実施の形態では、時間帯情報を物品名やエリアと対応付けて監視基準情報３２３に記憶したが、これに限るものではない。例えば、受け渡し行為の発生時刻に応じて、所定の加算値を監視重要度に足すようにしてもよい。具体的には、予め、時間帯情報毎に所定の加算値を対応付けて記憶部３２に記憶しておく。そして、監視重要度算出手段３３４は、受け渡された物品の種類と受け渡し行為の発生位置から監視重要度を算出し、その後、受け渡し行為の発生時刻に対応する加算値を記憶部３２から読み出し、当該加算値を監視重要度に加算するようにすればよい。

なお、時間帯情報は、本実施の形態で例示したものに限らず、監視目的に応じて、適宜、決定すればよい。

次に、受け渡し行為の発生頻度に基づいて、監視重要度を算出する実施形態について、説明する。イベント会場などに設けられた手荷物預かり所や売店では、カバンなどの手荷物の受け渡しや、商品や金銭の受け渡しが通常に行われる。したがって、このような場所では、受け渡し行為の発生頻度が高くなる。また、チラシを配布している人物の周辺なども受け渡し行為の発生頻度が高くなる。すなわち、受け渡し行為の発生頻度が高い場所で、受け渡し行為が検出された場合、通常に行われる不審度の低い受け渡し行為である可能性が高い。一方、受け渡し行為の発生頻度が低い場所で、受け渡し行為が検出された場合、通常では受け渡しが行われない場所において受け渡し行為が行われたことを意味する。したがって、監視員は、当該受け渡し行為に対して警戒する必要がある。本実施の形態では、これを利用し、受け渡し行為の発生頻度に基づいて監視重要度を算出するものである。

本実施の形態では、画像監視装置３の画像処理部３３は、頻度算出手段３３６（図示しない）を更に備える。頻度算出手段３３６は、監視領域における受け渡し行為の頻度を所定の領域ごとに算出し、記憶部３２に頻度情報として記憶する。そして、監視重要度算出手段３３４は、記憶部３２に記憶された監視基準情報３２３を参照し、受け渡された物品の種類と受け渡し行為の発生位置に基づいて、監視重要度を算出する。その後、監視重要度算出手段３３４は、記憶部３２に記憶した頻度情報を参照して、受け渡し行為の発生位置における受け渡し行為の頻度を求める。監視重要度算出手段３３４は、頻度が第１の所定値以下である場合、受け渡された物品の種類と受け渡し行為の発生位置に基づいて算出された監視重要度に所定値（例えば、５）を加算する。また、監視重要度算出手段３３４は、頻度が第２の所定値以上である場合、受け渡された物品の種類と受け渡し行為の発生位置に基づいて算出された監視重要度に所定値（例えば、５）を減算する。

ここで、頻度算出手段３３６について、説明する。頻度算出手段３３６は、上述したとおり、監視領域における受け渡し行為の発生頻度を所定の領域毎に求めるものである。具体的には、予め、監視領域を所定の頻度算出領域に分割して、当該頻度算出領域の位置と監視領域のブロック位置を対応付けて記憶しておく。そして、頻度算出手段３３６は、受け渡し検出手段３３３にて検出された受け渡し行為の発生位置に基づいて、当該頻度算出領域内で発生した受け渡し行為の数をカウントする。本実施の形態では、頻度発生領域毎に、過去所定時間（例えば、１時間）内にカウントされた受け渡し行為の数を受け渡し行為の発生頻度とし、記憶部３２に頻度情報として記憶する。なお、手荷物預かり所や売店などのように受け渡し行為の発生頻度が高くなる場所が固定されているものであれば、頻度をカウントする所定時間を１時間よりも長い時間に設定してもよい。しかし、チラシを配布している人物の周辺のように時間的に受け渡し行為の発生頻度が変わるものもあるため、このような時間的な発生頻度の変化を考慮して、本実施の形態では、所定時間を１時間に設定している。

図１７を参照し、頻度算出領域について説明する。図１７は、本実施の形態における監視領域のブロックと頻度算出領域の設定例を示した図である。なお、図１７は、図５に示した監視領域に対応している。図１７に示すとおり、監視領域は予め、所定サイズのブロックに分割されており、図５と同様に全てのブロックがエリアＩＤ「００１」に設定されている。図１７において、太線の矩形枠Ｋで示したのが、本実施の形態における１つ分の頻度算出領域である。頻度算出領域のサイズは、実距離１０ｍ×１０ｍであり、Ｘ軸方向に４ブロック、Ｙ軸方向に４ブロックのサイズである。本実施の形態では、監視領域に対して、このサイズの頻度算出領域を５ｍ間隔で配置する。

図１５のフローチャートを参照して、頻度情報の算出処理を説明する。図示しないが、頻度算出手段３３６は、ステップＳ８とステップＳ９の間において、頻度情報の算出処理を行う。まず、頻度算出手段３３６は、ステップＳ２にて検出された受け渡し行為について、ステップＳ６で判定された受け渡し行為の発生位置を参照し、頻度算出領域毎に当該領域内で発生した受け渡し行為の数をカウントする。このカウント処理を、入力画像毎に繰り返すことで、記憶部３２の頻度情報を更新していく。ここで、頻度算出手段３３６は、頻度算出領域毎に、現時点から過去所定時間内に発生した受け渡し行為の総数を発生頻度とする。すなわち、所定時間が経過したものについては、総数から減算される。なお、監視をスタートした時点における頻度情報は、各頻度算出領域について「０」が初期値として設定されている。

次に、図１８を参照し、本実施の形態における、受け渡し行為の発生頻度に基づいた監視重要度の算出処理について、説明する。図１８は、本実施の形態における発生頻度領域と受け渡しの発生位置を模式的に示した図である。ここでは、図５に示した監視領域上において、２つの受け渡し行為が発生した例を説明する。図１８には、ブロックに分割された監視領域上に受け渡し行為の発生位置８１と８２が示され、それぞれの発生位置に対応する頻度算出領域が示されている。なお、当該２つの受け渡し行為は、ともに受け渡された物品が「カバン」であり、発生場所は「広場」とする。まず、監視重要度算出手段３３４は、記憶部３２の監視基準情報３２３を参照し、検出された受け渡し行為について、受け渡された物品の種類と発生場所の種類に基づいて、監視重要度を算出する。図９に示した監視基準情報３２３によれば、それぞれの受け渡し行為の監視重要度は、同じ値「７」と算出される。その後、監視重要度算出手段３３４は、それぞれの受け渡し行為の発生位置に対応する頻度算出領域を求める。図１８に示すとおり、発生位置８１には、頻度算出領域Ｋ、頻度算出領域Ｌ、頻度算出領域Ｍの３つが対応し、発生位置８２には、頻度算出領域Ｎのみが対応する。ここで、発生位置８１のように複数の頻度算出領域が対応する場合、監視重要度算出手段３３４は、発生位置が最も頻度算出領域の中心になるものを選択する。すなわち、発生位置８１については、頻度算出領域Ｍが選択される。監視重要度算出手段３３４は、記憶部３２の頻度情報を参照し、発生位置に対応する頻度算出領域の頻度を読み出す。ここで、頻度算出領域Ｍの頻度が「８」、頻度算出領域Ｎの頻度が「０」とする。監視重要度算出手段３３４は、それぞれの頻度が第１の所定値（例えば、５）以上であるかを判定し、所定値以上である場合に監視重要度から５を減算する。頻度算出領域Ｍの頻度は「８」であるため、発生位置８１の受け渡し行為の監視重要度は「２」になる。また、頻度算出領域Ｎの頻度は「０」であるため、発生位置８２の受け渡し行為の監視重要度は減算されない。また、監視重要度算出手段３３４は、それぞれの頻度が第２の所定値（例えば、１）以下であるかを判定し、所定値以下である場合には監視重要度に５を加算する。頻度算出領域Ｍの頻度は「８」であるため、発生位置８１の受け渡し行為の監視重要度は「２」のままになる。また、頻度算出領域Ｎの頻度は「０」であるため、発生位置８２の受け渡し行為の監視重要度は「１２」になる。

発生位置８１の受け渡し行為および発生位置８２の受け渡し行為は、ともに、広場でカバンを受け渡す行為である。しかし、発生位置における受け渡しの発生頻度に基づいて監視重要度を算出すると、それぞれの監視重要度は「２」と「１２」になり、監視員が注目すべき度合いが変わる。発生位置８１の受け渡し行為は、受け渡し行為の発生頻度が高い位置で行われたものであることから、広場に設けられた手荷物預かり所で行われたカバンの受け渡し行為である可能性が高い。一方、発生位置８２の受け渡し行為は、受け渡しがほとんど行われない場所で行われたカバンの受け渡しであるため、不審者間で危険物が受け渡された可能性がある。本実施の形態によれば、監視員は、不審者間で危険物が受け渡された可能性がある受け渡し行為を、手荷物預かり所で行われた可能性がある受け渡し行為よりも優先して確認することができる。

なお、頻度の算出方法は、本実施の形態に限るものではない。例えば、過去所定時間において検出された受け渡し行為の発生位置を記憶部３２に記憶しておき、監視重要度算出手段３３４は、監視重要度を算出する際に、当該記憶された発生位置を読み出して、処理対象となっている受け渡し行為の発生位置を中心とした所定範囲内に発生した数をカウントし、受け渡し行為の発生頻度として求めてもよい。また、頻度情報は、画像監視システム１による監視がスタートする前に、予め、監視領域の受け渡し行為の発生頻度を計数して記憶部３２に頻度情報として記憶するようにしてもよい。

また、本実施の形態では、発生頻度が高い場合に監視重要度を減算し、発生頻度が低い場合に加算するようにしたが、これに限らない。例えば、発生頻度が高い場所では、通常の受け渡し行為に紛れて不審な受け渡しを行う可能性があると判断し、発生頻度が高い場所で検出された受け渡し行為について監視重要度を加算するようにしてもよい。また、発生頻度による監視重要度の変更は、上述した加算と減算のどちらか一方を行うものでもよい。

また、本実施の形態では、１つの発生位置に複数の頻度算出領域が対応付けられた場合に、発生位置が頻度算出領域の中心に最も近くなるものを選択するようにしたが、これに限らない。例えば、最も頻度が高いものや、最も頻度が低いものを選択するようにしてもよい。また、本実施の形態では、選択した１つの頻度算出領域について、当該領域の頻度に対応する加算値を監視重要度に加えたが、これに限らない。例えば、１つの頻度算出領域を選択するのではなく、発生位置に対応付けられた全ての頻度算出領域について、それぞれの頻度に対応する加算値を監視重要度に加えるようにしてもよい。

また、本実施の形態では、受け渡し行為の発生頻度を受け渡された物品によらずに算出したが、これに限らず、受け渡された物品ごとに発生頻度を算出するようにしてもよい。この場合、頻度算出手段３３６は、頻度算出領域ごとに、受け渡された物品ごとに受け渡し行為の発生数をカウントし、頻度情報として記憶すればよい。そして、監視重要度算出手段３３４は、処理対象となっている受け渡し行為と同一の物品の種類の受け渡し行為の発生頻度に基づいて監視重要度を算出すればよい。

また、本実施の形態では、受け渡された物品の種類と受け渡しの発生場所の種類に基づいた監視重要度に対して、所定値を加算・減算するようにしたがこれに限らない。例えば、監視基準情報３２３に、受け渡された物品の種類、受け渡しの発生場所、受け渡しの発生頻度の情報、を対応付けて記憶しておき、監視重要度算出手段３３４は、監視基準情報３２３を参照して、受け渡された物品の種類と受け渡しの発生場所と受け渡しの発生頻度によって決定される監視重要度を算出してもよい。例えば、監視基準情報３２３として、カバン、広場、発生頻度「低」、監視重要度「７」を対応付けるようにすればよい。

また、本実施の形態では、受け渡された物品の種類と受け渡しの発生場所の種類に基づいて監視重要度を算出したが、これに限らない。例えば、検出された受け渡し行為の監視重要度を、発生頻度の情報のみを用いて算出するようにしてもよい。この場合、監視基準情報３２３として、発生頻度に対応付けて監視重要度を設定しておき、監視重要度算出手段３３４は、当該監視基準情報３２３を参照して、監視重要度を算出すればよい。また、受け渡された物品の種類、受け渡しの発生場所の種類のどちらか一方と発生頻度の情報に基づいて監視重要度を算出するようにしてもよい。

本実施の形態によれば、受け渡された物品の種類や受け渡し行為の発生場所の種類だけではなく、受け渡し行為の発生頻度に基づいた不審度を考慮して監視重要度を求めることができる。

次に、受け渡し行為の発生位置周辺の混雑度に基づいて、監視重要度を算出する実施形態について、説明する。不審者が危険物の受け渡し行為を行う場合など、人間がやましい受け渡し行為を行う場合は、受け渡し場所として人の目が少ない場所を選ぶ可能性が高い。また、逆に、混雑に紛れて受け渡し行為を行うことで人の視線を避ける可能性もある。すなわち、混雑度が低い場所で受け渡し行為が検出された場合、不審度が高い受け渡し行為である可能性が高い。また、混雑度が高い場所で受け渡し行為が検出された場合も、不審度が高い受け渡し行為である可能性が高い。一方、適度に人物が存在する場所においては、人の目がよく届く状況であるため、このような場所で受け渡し行為が検出された場合は、混雑度が高い場所や混雑度が低い場所に比べて、不審な受け渡し行為が行われる可能性が低くなる。本実施の形態では、これを利用し、受け渡し行為の発生位置周辺の混雑度に基づいて監視重要度を算出するものである。

本実施の形態では、監視重要度算出手段３３４は、まず、記憶部３２に記憶された監視基準情報３２３を参照し、受け渡された物品の種類と受け渡し行為の発生位置に基づいて、監視重要度を算出する。その後、監視重要度算出手段３３４は、追跡人物情報として記憶されている追跡人物の位置を参照して、受け渡し行為の発生位置の周辺における混雑度を求める。そして、監視重要度算出手段３３４は、混雑度が第１の所定値以下である場合、受け渡された物品の種類と受け渡し行為の発生位置に基づいて算出された監視重要度に所定値（例えば、５）を加算する。また、監視重要度算出手段３３４は混雑度が第２の所定値以上である場合、受け渡された物品の種類と受け渡し行為の発生位置に基づいて算出された監視重要度に所定値（例えば、５）を加算する。

ここで、混雑度の算出処理について、説明する。監視重要度算出手段３３４は、受け渡し検出手段３３３にて検出された受け渡し行為の発生位置を中心とした所定範囲内に存在する人物の数をカウントし、これを受け渡し行為の発生位置周辺の混雑度とする。具体的には、監視重要度算出手段３３４は、現時点において監視領域内に存在する追跡人物の追跡人物情報を参照し、当該追跡人物の現在位置を読み出す。そして、監視重要度算出手段３３４は、追跡人物の現在位置に基づいて、処理対象となっている受け渡し行為の発生位置を中心とした所定範囲内（例えば、半径５ｍ以内）に存在する追跡人物の数をカウントする。なお、混雑度の算出方法は、これに限るものではない。例えば、受け渡し行為の発生頻度を算出する方法と同様に、監視領域を所定サイズの領域に分割して、当該領域毎に追跡人物の数をカウントして混雑度を算出し、処理対象となっている受け渡し行為の発生位置に対応する領域の混雑度を受け渡し行為の発生位置周辺の混雑度としてもよい。また、追跡人物の数を用いて混雑度を算出するのではなく、画像処理によって混雑度を求めてもよい。例えば、受け渡し行為の発生位置を中心とした所定サイズの領域を入力画像上に設定し、当該領域の面積から、背景差分処理等で求めた当該領域内に存在する全ての人物像の領域の面積を減算した値を求める。監視重要度算出手段３３４は、当該減算した値を受け渡し行為の発生位置周辺の混雑度としてもよい。この場合、減算した値は、低い値になるほど混雑度が高いことを表す指標となる。

次に、図１９を参照し、本実施の形態における、混雑度に基づいた監視重要度の算出処理について、説明する。図１９は、本実施の形態における追跡人物の位置と受け渡しの発生位置を模式的に示した図である。なお、図１９は、図５に示した監視領域に対応している。図１９に示すとおり、監視領域は予め、所定サイズのブロックに分割されており、図５と同様に全てのブロックがエリアＩＤ「００１」に設定されている。ここでは、図５に示した監視領域上において、３つの受け渡し行為が発生した例を説明する。図１９には、ブロックに分割された監視領域上に受け渡し行為の発生位置８３，８４，８５がそれぞれ示されるとともに、監視領域内に存在する追跡人物の位置が黒丸で示されている。なお、３つの受け渡し行為は、全て受け渡された物品が「カバン」であり、発生場所は「広場」とする。まず、監視重要度算出手段３３４は、記憶部３２の監視基準情報３２３を参照し、検出された受け渡し行為について、受け渡された物品の種類と発生場所の種類に基づいて、監視重要度を算出する。図９に示した監視基準情報３２３によれば、それぞれの受け渡し行為の監視重要度は、同じ値「７」と算出される。その後、監視重要度算出手段３３４は、それぞれの受け渡し行為の発生位置に対応する混雑度を求める。ここで、発生位置を中心とする所定範囲は、太線の円で示されている。図１９に示すとおり、発生位置８３の周辺には、受け渡しを行っている人物を含めて９人の人物が存在している。また、発生位置８４の周辺には、受け渡しを行っている人物のみが存在している。また、発生位置８５の周辺には、受け渡しを行っている人物を含めて４人の人物が存在している。すなわち、発生位置８３の周辺の混雑度は「９」となり、発生位置８４の周辺の混雑度は「２」となり、発生位置８５の周辺の混雑度は「４」となる。監視重要度算出手段３３４は、それぞれの混雑度が第１の所定値（例えば、２）以下であるかを判定し、所定値以下である場合に監視重要度に５を加算する。発生位置８３の周辺の混雑度は「９」であるため、発生位置８３の受け渡し行為の監視重要度は、加算されずに「７」のままになる。また、発生位置８４の周辺の混雑度は「２」であるため、発生位置８４の受け渡し行為の監視重要度は加算されて「１２」となる。また、発生位置８５の周辺の混雑度は「４」であるため、発生位置８５の受け渡し行為の監視重要度は、加算されずに「７」のままになる。また、監視重要度算出手段３３４は、それぞれの混雑度が第２の所定値（例えば、９）以上であるかを判定し、所定値以上である場合に監視重要度に５を加算する。発生位置８３の周辺の混雑度は「９」であるため、発生位置８３の受け渡し行為の監視重要度は加算されて「１２」となる。また、発生位置８４の周辺の混雑度は「２」であるため、発生位置８４の受け渡し行為の監視重要度は、加算されずに「１２」のままになる。また、発生位置８５の周辺の混雑度は「４」であるため、発生位置８５の受け渡し行為の監視重要度は、加算されずに「７」のままになる。

発生位置８３の受け渡し行為、発生位置８４の受け渡し行為、発生位置８５の受け渡し行為は、全て、広場でカバンを受け渡す行為である。しかし、発生位置の周辺における混雑度に基づいて監視重要度を算出すると、それぞれの監視重要度は「１２」，「１２」，「７」となり、監視員が注目すべき度合いが変わる。発生位置８３の受け渡し行為は、混雑度が低い場所で行われたものであることから、不審者が人目をさけて受け渡し行為を行っている可能性が高い。また、発生位置８４の受け渡し行為は、混雑度が高い場所で行われたものであることから、不審者が混雑に紛れて受け渡し行為を行うことで人の視線を避けている可能性が高い。また、発生位置８５の受け渡し行為は、混雑度が高くもなく低くもない場所で行われたものであり、適度に人が存在する場所において行われた受け渡し行為である。すなわち、発生位置８５の受け渡し行為は、人の目がよく届く状況で行われたものあるため、混雑度が高い場所や混雑度が低い場所に比べて、不審な受け渡し行為が行われる可能性は低くなる。本実施の形態によれば、監視員は、不審者間で危険物が受け渡された可能性がある受け渡し行為を優先して確認することができる。

また、本実施の形態では、混雑度が高い場合や混雑度が低い場合に監視重要度を加算するようにしたが、これに限らない。例えば、混雑度が高くもなく低くもない場合に監視重要度を減算するようにしてもよい。また、混雑度による監視重要度の変更は、上述した混雑度が高い場合に加算するもの、混雑度が低い場合に加算するもののどちらか一方を行うものでもよい。

また、本実施の形態では、受け渡された物品の種類と受け渡しの発生場所の種類に基づいた監視重要度に対して、所定値を加算するようにしたがこれに限らない。例えば、監視基準情報３２３に、受け渡された物品の種類、受け渡しの発生場所、混雑度の情報、を対応付けて記憶しておき、監視重要度算出手段３３４は、監視基準情報３２３を参照して、受け渡された物品の種類と受け渡しの発生場所と混雑度によって決定される監視重要度を算出してもよい。例えば、監視基準情報３２３として、カバン、広場、混雑度「低」、監視重要度「７」を対応付けるようにすればよい。

また、本実施の形態では、受け渡された物品の種類と受け渡しの発生場所の種類に基づいて監視重要度を算出したが、これに限らない。例えば、検出された受け渡し行為の監視重要度を、混雑度の情報のみを用いて算出するようにしてもよい。この場合、監視基準情報３２３として、混雑度に対応付けた監視重要度を設定しておき、監視重要度算出手段３３４は、当該監視基準情報３２３を参照して、監視重要度を算出すればよい。また、受け渡された物品の種類、受け渡しの発生場所の種類のどちらか一方と混雑度の情報に基づいて監視重要度を算出するようにしてもよい。

本実施の形態によれば、受け渡された物品の種類や受け渡し行為の発生場所の種類だけではなく、受け渡し行為の発生位置周辺の混雑度によって変わる不審度に基づいて監視重要度を求めることができる。

次に、受け渡し行為の発生位置から重要エリアまでの距離に基づいて、監視重要度を算出する実施形態について、説明する。前述したように記憶部３２に記憶されているエリア情報３２２には、監視領域に設定されているエリアが、当該エリアに対する警備の重要性に応じて、通常エリアと重要エリアに分けられている。図８に示した本実施形態のエリア情報３２２によれば、イベント会場内が重要エリアに設定されており、それ以外のエリアが通常エリアに設定されている。不審者が危険物を受け渡した場合、重要エリアであるイベント会場内で危険物が使用される可能性が高い。このとき、危険物は、重要エリア内で受け渡されるとは限らず、広場などの通常エリアで受け渡された後に、イベント会場内に持ち込まれて使用される可能性がある。すなわち、監視領域内で不審な受け渡し行為が確認された場合、監視員は、現場の警備員に対して当該受け渡し行為についての対処指示を行うが、当該不審な受け渡し行為がイベント会場内に近いところで行われるほど、対処の緊急性が増す。したがって、監視員は、イベント会場内に近いところで行われた受け渡し行為ほど優先的に確認する必要がある。本実施の形態では、これを利用し、受け渡し行為の発生位置から重要エリアまでの距離に基づいて監視重要度を算出するものである。

本実施の形態では、監視重要度算出手段３３４は、記憶部３２に記憶された監視基準情報３２３を参照し、受け渡された物品の種類と受け渡し行為の発生位置に基づいて、監視重要度を算出する。その後、監視重要度算出手段３３４は、記憶部３２に記憶したエリア情報３２２を参照して、受け渡し行為の発生位置から重要エリアまでの距離を求める。監視重要度算出手段３３４は、重要エリアまでの距離が所定距離以下である場合、受け渡された物品の種類と受け渡し行為の発生位置に基づいて算出された監視重要度に所定値（例えば、５）を加算する。

ここで、重要エリアまでの距離の算出処理について、説明する。本実施の形態では、監視重要度算出手段３３４は、受け渡し検出手段３３３にて検出された受け渡し行為の発生位置から重要エリアまでの最短距離を求める。具体的には、監視重要度算出手段３３４は、エリア情報３２２を参照し、重要エリアに設定されているブロック位置を読み出す。また、監視重要度算出手段３３４は、エリア情報３２２を参照し、処理対象となっている受け渡し行為の発生位置に対応するブロックを求める。ここで、受け渡し行為の発生位置に対応するブロックを判定する際は、記憶部３２に記憶しておいた撮像装置２ごとの監視領域の実空間でのＸＹ座標とブロック位置との対応関係に基づいて判定する。監視重要度算出手段３３４は、読み出した重要エリアのブロック位置から処理対象となっている受け渡し行為の発生位置のブロックまでの距離を算出し、算出した距離のうち最短距離を重要エリアまでの距離とする。ここで、読み出す重要エリアのブロックは、受け渡し行為の発生位置と同じ監視領域に設定された重要エリアのブロックに限定してもよい。このとき、受け渡し行為の発生位置と同じ監視領域内に重要エリアのブロックが設定されていない場合は、他の監視領域に設定された重要ブロックと受け渡し行為の発生位置との距離を算出して、当該距離が最短となったものを重要エリアまでの距離とすればよい。また、受け渡し行為の発生位置が重要エリア内である場合、重要エリアまでの距離は「０」にすればよい。なお、重要エリアまでの距離の算出方法は、これに限るものではない。例えば、予め、ブロックごとに重要エリアまでの距離を算出して記憶しておいてもよいし、撮像装置２毎に重要エリアまでの距離を予め算出して記憶しておいてもよい。

次に、図２０を参照し、本実施の形態における、重要エリアまでの距離に基づいた監視重要度の算出処理について、説明する。図２０は、本実施の形態における受け渡しの発生位置と重要エリアまでの距離を模式的に示した図である。なお、図２０は、図７に示した監視領域に対応している。図２０に示すとおり、監視領域は予め、所定サイズのブロックに分割されており、図７と同様にブロックがエリアＩＤ「００１」とエリアＩＤ「００４」に設定されている。ここでは、図７に示した監視領域上において、２つの受け渡し行為が発生した例を説明する。図２０には、ブロックに分割された監視領域上に受け渡し行為の発生位置８６と８７がそれぞれ示されている。なお、当該２つの受け渡し行為は、ともに受け渡された物品が「カバン」であり、発生場所は「広場」とする。まず、監視重要度算出手段３３４は、記憶部３２の監視基準情報３２３を参照し、検出された受け渡し行為について、受け渡された物品の種類と発生場所の種類に基づいて、監視重要度を算出する。図９に示した監視基準情報３２３によれば、それぞれの受け渡し行為の監視重要度は、同じ値「７」と算出される。その後、監視重要度算出手段３３４は、エリア情報３２２を参照し、重要エリアのブロック位置を読み出す。図７に示す監視領域には、エリアＩＤ「００４」のエリア、すなわち重要エリアが設定されている。ここでは、説明を簡略化するために、図７に示す監視領域の重要エリアのブロック位置のみを読み出す例を説明する。監視重要度算出手段３３４は、まず、それぞれの受け渡し行為の発生位置について、対応するブロックを判定する。発生位置８６については、Ｘ軸方向に５、Ｙ軸方向に８のブロック（ブロック５―８）が対応する。また、発生位置８７については、Ｘ軸方向に１０、Ｙ軸方向に３のブロック（ブロック１０―３）が対応する。監視重要度算出手段３３４は、それぞれの発生位置のブロックと重要エリアのブロックまでの距離を求め、最短距離を選択する。発生位置８６については、Ｘ軸方向に５、Ｙ軸方向に１１のブロック（ブロック５―１１）が最短距離の重要エリアとなり、距離は２ブロック分の「５ｍ」となる。発生位置８７については、Ｘ軸方向に１０、Ｙ軸方向に１１のブロック（ブロック１０―１１）が最短距離の重要エリアとなり、距離は７ブロック分の「１７．５ｍ」となる。監視重要度算出手段３３４は、それぞれの距離が所定距離（例えば、１０ｍ）以下であるかを判定し、所定距離以下である場合に監視重要度に５を加算する。発生位置８６の受け渡し行為は、重要エリアまでの距離が「５ｍ」であるため、監視重要度は「１２」になる。また、発生位置８７の受け渡し行為は、重要エリアまでの距離が「１７．５ｍ」であるため、監視重要度は加算されず、「７」のままになる。

発生位置８６の受け渡し行為および発生位置８７の受け渡し行為は、ともに、広場でカバンを受け渡す行為である。しかし、発生位置から重要エリアまでの距離に基づいて監視重要度を算出すると、それぞれの監視重要度は「１２」と「７」になり、監視員が注目すべき度合いが変わる。発生位置８６の受け渡し行為は、発生位置８７の受け渡し行為よりも重要エリアに近い位置で行われているため、対処の緊急性が高い。本実施の形態によれば、監視員は、イベント会場内に近いところで行われた発生位置８６の受け渡し行為から優先的に確認することができる。

なお、本実施の形態では、重要エリアまでの距離が所定距離以下である場合に監視重要度を加算したが、これに限らない。例えば、重要エリアまでの距離が所定距離以上である場合に監視重要度を減算するようにしてもよい。

また、本実施の形態では、受け渡された物品の種類と受け渡しの発生場所の種類に基づいた監視重要度に対して、所定値を加算するようにしたがこれに限らない。例えば、監視基準情報３２３に、受け渡された物品の種類、受け渡しの発生場所、重要エリアまでの距離の情報、を対応付けて記憶しておき、監視重要度算出手段３３４は、監視基準情報３２３を参照して、受け渡された物品の種類と受け渡しの発生場所と重要エリアまでの距離によって決定される監視重要度を算出してもよい。例えば、監視基準情報３２３として、カバン、広場、重要エリアまでの距離「１０ｍ以下」、監視重要度「７」を対応付けるようにすればよい。

また、本実施の形態では、重要エリアまでの距離が所定距離以下か否かで監視重要度を求めたが、これに限らない。例えば、重要エリアまでの距離が近くなるほど高い値になるように加算値を変化させてもよい。また、「１０ｍ以下」、「５０ｍ以下」、「５００ｍ以下」のように、複数の所定距離を用意し、それぞれについて異なる加算値を設定してもよい。また、本実施の形態では、監視領域に設定したエリアを「通常エリア」と「重要エリア」の２種類に分ける例を示したが、これに限らない。例えば、警備の重要性に応じて、複数種類の重要エリアに分けるようにしてもよい。具体的には、警備の重要性に応じて、「重要エリア１」、「重要エリア２」、「重要エリア３」のように設定する。そして、それぞれの重要エリアで、所定距離の値や、監視重要度に加算する値を変えるようにしてもよい。この場合、全ての重要エリアに対して受け渡し行為の発生位置からの距離を算出し、最短距離となった重要エリアのブロックが「重要エリア１」、「重要エリア２」、「重要エリア３」のどれに該当するかを判定する。そして、判定された重要エリアの種類に応じて監視重要度の変更処理を行えばよい。

また、本実施の形態では、受け渡された物品の種類と受け渡しの発生場所の種類に基づいて監視重要度を算出したが、これに限らない。例えば、検出された受け渡し行為の監視重要度を、重要エリアまでの距離のみを用いて算出するようにしてもよい。この場合、監視基準情報３２３として、重要エリアまでの距離に対応付けた監視重要度を設定しておき、監視重要度算出手段３３４は、当該監視基準情報３２３を参照して、監視重要度を算出すればよい。なお、このとき、監視重要度は、重要エリアまでの距離が近くなるほど高い値になるように連続的に変化させてもよい。また、受け渡された物品の種類、受け渡しの発生場所の種類のどちらか一方と重要エリアまでの距離に基づいて監視重要度を算出するようにしてもよい。

本実施の形態によれば、受け渡された物品の種類や受け渡し行為の発生場所の種類だけではなく、受け渡し行為の発生位置から重要エリアまでの距離に基づく対処の緊急性を考慮して監視重要度を求めることができる。

次に、受け渡し行為の発生位置から所定の監視人物までの距離に基づいて、監視重要度を算出する実施形態について、説明する。イベント会場を警備する場合、画像による監視だけではなく、現場に複数人の警備員を配置し、当該警備員の目視によっても監視が行われる。現場に配置された警備員は、監視センタの監視員から指示を受けて異常事態に対処したり、監視場所を目視し、不審な行動をとっている人物や不審物を発見したりする。また、警備員を監視場所に配置することで、犯罪者を牽制し、犯罪行為を抑止する効果もある。このため、不審者が危険物の受け渡し行為を行う場合など、人間がやましい受け渡し行為を行う場合は、警備員の目が届かない場所を選ぶ可能性が高い。逆に、不審者がわざわざ警備員の目が届くところで不審な受け渡し行為を行うことは考えにくいため、このような警備員の目が届くところで行われた受け渡し行為は、不審度が低いといえる。本実施の形態では、これを利用し、受け渡し行為の発生位置から警備員などの監視人物までの距離に基づいて監視重要度を算出するものである。

本実施の形態では、画像監視装置３の画像処理部３３は、監視人物位置算出手段３３７（図示しない）を更に備える。監視人物位置算出手段３３７は、監視領域に存在する人物が所定の基準を満たす監視人物であるか否かを判定する。そして、監視人物と判定された人物の追跡人物情報を参照し、現在時刻における監視人物の位置を記憶部３２に監視人物位置情報として記憶する。その後、監視重要度算出手段３３４は、記憶部３２に記憶された監視基準情報３２３を参照し、受け渡された物品の種類と受け渡し行為の発生位置に基づいて、監視重要度を算出する。そして、監視重要度算出手段３３４は、記憶部３２に記憶した監視人物位置情報を参照して、受け渡し行為の発生位置から監視人物の位置までの距離を求める。監視重要度算出手段３３４は、距離が所定距離（例えば、１０ｍ）以上である場合、受け渡された物品の種類と受け渡し行為の発生位置に基づいて算出された監視重要度に所定値（例えば、５）を加算する。

ここで、監視人物位置算出手段３３７について、説明する。監視人物位置算出手段３３７は、監視領域に存在する監視人物の現在時刻における位置を求めるものである。なお、本実施の形態では、監視人物を警備員として説明する。具体的には、予め、警備員の画像特徴を記憶部３２に人物識別情報として記憶しておき、監視人物位置算出手段３３７は、人物検出手段３３１にて追跡人物が検出されると、当該追跡人物の人物像を人物識別情報と照合する。画像特徴が一致した場合、当該追跡人物を警備員と判定する。そして、監視人物位置算出手段３３７は、警備員と判定された追跡人物の追跡人物情報を参照し、現在時刻における位置を記憶部３２に監視人物位置情報として記憶する。このとき、位置情報は、警備員と判定された追跡人物ごとに記憶される。なお、監視人物の位置の算出方法は、本実施の形態に限るものではない。例えば、画像特徴によって、監視人物か否かを判定するのではなく、予め監視人物に所持させておいた端末の位置情報を取得し、現在時刻において取得した位置情報を監視人物位置情報として記憶するようにしてもよい。すなわち、当該端末を所持していることが監視人物の基準となる。また、本実施の形態では、監視人物を警備員などの予め決まった人物として説明したが、これに限らない。例えば、監視人物の基準を「受け渡しの発生位置に最も近い位置に存在する当該受け渡し行為を行っている人物以外の人物」としてもよい。すなわち、受け渡し行為の発生位置の近くに存在する人物は、当該受け渡し行為を目撃している可能性が高いため、警備員と同様に監視人物として扱う。この場合、監視人物位置算出手段３３７は、受け渡し行為の発生位置から監視領域内に存在する当該受け渡し行為の受け渡しペアになっていない追跡人物の位置までの距離を算出し、最短距離となった追跡人物を監視人物と判定すればよい。

次に、監視人物までの距離の算出処理について、説明する。本実施の形態では、監視重要度算出手段３３４は、受け渡し検出手段３３３にて検出された受け渡し行為の発生位置から監視人物までの距離を求める。具体的には、監視重要度算出手段３３４は、記憶部３２の監視人物位置情報を参照し、監視領域に存在する監視人物毎の位置を読み出す。そして、読み出した監視人物の位置から処理対象となっている受け渡し行為の発生位置までの距離を算出する。なお、距離の算出方法は、既存の方法で行えばよい。

次に、図２１を参照し、本実施の形態における、監視人物までの距離に基づいた監視重要度の算出処理について、説明する。図２１は、本実施の形態における受け渡しの発生位置と監視人物の位置を模式的に示した図である。なお、図２１は、図５に示した監視領域に対応している。図２１に示すとおり、監視領域は予め、所定サイズのブロックに分割されており、図５と同様に全てのブロックがエリアＩＤ「００１」に設定されている。ここでは、図５に示した監視領域上において、２つの受け渡し行為が発生した例を説明する。また、当該監視領域上には、２名の警備員が存在するものとする。図２１には、ブロックに分割された監視領域上に受け渡し行為の発生位置８８と８９がそれぞれ示されている。また、監視領域内に存在する警備員の位置を白丸で示し、それぞれ監視人物位置９０、監視人物位置９１とする。また、警備員以外の追跡人物の位置が黒丸で示されている。なお、２つの受け渡し行為は、ともに受け渡された物品が「カバン」であり、発生場所は「広場」とする。まず、監視重要度算出手段３３４は、記憶部３２の監視基準情報３２３を参照し、検出された受け渡し行為について、受け渡された物品の種類と発生場所の種類に基づいて、監視重要度を算出する。図９に示した監視基準情報３２３によれば、それぞれの受け渡し行為の監視重要度は、同じ値「７」と算出される。その後、監視重要度算出手段３３４は、監視人物位置情報を参照し、監視人物の位置を読み出す。監視重要度算出手段３３４は、それぞれの受け渡し行為の発生位置について、各監視人物位置との距離を求める。ここで、図２１のように、監視領域内に複数の監視人物が存在する場合は、距離が最短となる監視人物との距離を選択する。発生位置８８については、監視人物位置９１との距離が最短であり「２２．５ｍ」となる。また、発生位置８９については、監視人物位置９０と監視人物９１の距離が同じであるため「７．５ｍ」となる。監視重要度算出手段３３４は、それぞれの距離が所定距離（例えば、１０ｍ）以上であるかを判定し、所定距離以上である場合に監視重要度に５を加算する。発生位置８８の受け渡し行為は、監視人物までの距離が「７．５ｍ」であるため、監視重要度は「７」のままになる。また、発生位置８９の受け渡し行為は、監視人物までの距離が「２２．５ｍ」であるため、監視重要度は「１２」になる。

発生位置８８の受け渡し行為および発生位置８９の受け渡し行為は、ともに、広場でカバンを受け渡す行為である。しかし、発生位置から監視人物までの距離に基づいて監視重要度を算出すると、それぞれの監視重要度は「７」と「１２」になり、監視員が注目すべき度合いが変わる。発生位置８８の受け渡し行為は、警備員の目の届かない場所で行われているため、不審な受け渡し行為である可能性が高い。一方、発生位置８９の受け渡し行為は、警備員の目の届く場所で行われているため、不審な受け渡し行為である可能性は低い。本実施の形態によれば、監視員は、現場の警備員の目の届けないところで行われた発生位置８８の受け渡し行為から優先的に確認することができる。

なお、本実施の形態では、監視人物までの距離が所定距離以上である場合に監視重要度を加算したが、これに限らない。例えば、監視人物までの距離が所定距離以下である場合に監視重要度を減算するようにしてもよい。

また、本実施の形態では、受け渡された物品の種類と受け渡しの発生場所の種類に基づいた監視重要度に対して、所定値を加算するようにしたがこれに限らない。例えば、監視基準情報３２３に、受け渡された物品の種類、受け渡しの発生場所、監視人物までの距離の情報、を対応付けて記憶しておき、監視重要度算出手段３３４は、監視基準情報３２３を参照して、受け渡された物品の種類と受け渡しの発生場所と監視人物までの距離によって決定される監視重要度を算出してもよい。例えば、監視基準情報３２３として、カバン、広場、監視人物までの距離「１０ｍ以上」、監視重要度「７」を対応付けるようにすればよい。

また、本実施の形態では、監視人物までの距離が所定距離以上か否かで監視重要度を求めたが、これに限らない。例えば、監視人物までの距離が遠くなるほど高い値になるように加算値を変化させてもよい。また、「５ｍ以上」、「１０ｍ以上」、「１００ｍ以上」のように、複数の所定距離を用意し、それぞれについて異なる加算値を設定してもよい。

また、本実施の形態では、受け渡された物品の種類と受け渡しの発生場所の種類に基づいて監視重要度を算出したが、これに限らない。例えば、検出された受け渡し行為の監視重要度を、監視人物までの距離のみを用いて算出するようにしてもよい。この場合、監視基準情報３２３として、監視人物までの距離に対応付けた監視重要度を設定しておき、監視重要度算出手段３３４は、当該監視基準情報３２３を参照して、監視重要度を算出すればよい。なお、このとき、監視重要度は、監視人物までの距離が遠くなるほど高い値になるように連続的に変化させてもよい。また、受け渡された物品の種類、受け渡しの発生場所の種類のどちらか一方と監視人物までの距離に基づいて監視重要度を算出するようにしてもよい。

本実施の形態によれば、受け渡された物品の種類や受け渡し行為の発生場所の種類だけではなく、警備員などの所定の監視人物までの距離に基づいた不審度を考慮して監視重要度を求めることができる。

以上、受け渡された物品の種類や受け渡し行為の発生場所の種類に加えて、或いはこれらに代えて、発生時刻、発生頻度、混雑度、重要エリアからの距離、監視人物からの距離を用いて、受け渡し行為の監視重要度を算出する実施形態をそれぞれ説明した。本発明の画像監視システム１は、これらの実施形態を組み合わせて実現するようにしてもよいことはいうまでもない。例えば、受け渡し行為の発生頻度、受け渡し行為の発生位置周辺の混雑度の両方を用いて、監視重要度を算出するようにしてもよい。

以上に説明したように、本発明の画像監視システム１によれば、監視場所で発生した受け渡し行為に対して、受け渡された物品、受け渡し行為を行った場所や周囲の状況などを考慮して、監視員が監視対象として注目すべき度合いを決定することが可能である。また、本発明の画像監視システム１は、監視員が監視対象として注目すべき度合いに応じて、受け渡し行為の検出結果を出力する。これにより、イベント会場などのように不特定多数の人物が存在し、多数の受け渡し行為が発生する場所を監視する場合であっても、監視センタの監視員は、不審度の高い受け渡し行為と、不審度の低い受け渡し行為を容易に区別しながら、効率的に受け渡し行為を監視することができる。

１・・・画像監視システム、２・・・撮像装置、３・・・画像監視装置、４・・・監視センタ装置、３１・・・画像入力部、３２・・・記憶部、３３・・・画像処理部、４１・・・表示部、４２・・・記録部、３２１・・・物品情報、３２２・・・エリア情報、３２３・・・監視基準情報、３３１・・・人物検出手段、３３２・・・所持物検出手段、３３３・・・受け渡し検出手段、３３４・・・監視重要度算出手段、３３５・・・出力制御手段

Claims (9)

1. 監視領域を撮影した画像を用いて、当該監視領域に存在する人物の行動を監視する画像監視システムであって、
   前記画像から前記監視領域に存在する人物を検出する人物検出手段と、
   前記画像から前記人物が所持する物品の種類を識別する所持物検出手段と、
   複数の前記人物による前記物品の受け渡し行為を検出し、当該受け渡し行為について、前記監視領域内における当該受け渡し行為の発生位置を求めるとともに、前記所持物検出手段の識別結果を参照して当該受け渡し行為で受け渡された物品の種類を求める受け渡し検出手段と、
   前記監視領域内の位置と物品の種類との組合せ毎に、前記監視の対象として注目すべき度合いを表す監視重要度を対応付けた監視基準情報を記憶する記憶部と、
   前記監視基準情報を参照し、前記受け渡し行為毎に、前記発生位置と前記受け渡された物品の種類との組合せに対応する前記監視重要度を求める監視重要度算出手段と、
   前記受け渡し行為の監視重要度に応じて、当該受け渡し行為の検出結果を出力する出力制御手段と、を備えたことを特徴とする画像監視システム。
2. 前記監視重要度算出手段は、前記受け渡し行為の発生位置の周囲における前記人物の混雑度を算出し、当該混雑度に応じて前記監視重要度を変更することを特徴とする請求項１に記載の画像監視システム。
3. 前記記憶部は、更に、前記監視領域において過去所定時間内に検出された受け渡し行為の発生位置を当該受け渡し行為毎に記憶し、
   前記監視重要度算出手段は、前記受け渡し行為の発生位置の周囲で前記過去所定時間内に検出された受け渡し行為の総数に応じて前記監視重要度を変更することを特徴とする請求項１または請求項２に記載の画像監視システム。
4. 前記記憶部は、更に、前記監視領域内に設定した重要エリアの位置を記憶し、
   前記監視重要度算出手段は、前記受け渡し行為の発生位置から前記重要エリアの位置までの距離を算出し、当該距離に応じて前記監視重要度を変更することを特徴とする請求項１から３の何れか１項に記載の画像監視システム。
5. 前記画像監視システムは、更に、予め定めた基準を満たす監視人物の前記監視領域における位置を求める監視人物位置算出手段を有し、
   前記監視重要度算出手段は、前記受け渡し行為の発生位置から前記監視人物の位置までの距離を算出し、当該距離に応じて前記監視重要度を変更することを特徴とする請求項１から請求項４の何れか１項に記載の画像監視システム。
6. 前記受け渡し検出手段は、更に、前記受け渡し行為の発生時刻を求め、
   前記監視重要度算出手段は、更に、前記受け渡し行為の発生時刻を用いて前記監視重要度を求めることを特徴とする請求項１から請求項５の何れか１項に記載の画像監視システム。
7. 前記画像監視システムは、前記受け渡し行為の検出結果を表示する表示部を備え、
   前記出力制御手段は、前記監視重要度が高い受け渡し行為ほど注目され易くなるように前記表示部に表示させることを特徴とする請求項１から請求項６の何れか１項に記載の画像監視システム。
8. 前記出力制御手段は、前記監視重要度が所定値以上である受け渡し行為について前記受け渡し行為の検出結果を出力し、前記監視重要度が前記所定値未満である受け渡し行為について前記受け渡し行為の検出結果を出力しないことを特徴とする請求項１から請求項７の何れか１項に記載の画像監視システム。
9. 監視領域を撮影した画像を用いて、当該監視領域に存在する人物の行動を監視する画像監視システムであって、
   前記画像から前記監視領域に存在する物品の種類を識別する所持物検出手段と、
   前記画像から前記監視領域に存在する複数の人物と当該人物間で受け渡された物品からなるパターンを検出して当該人物間の受け渡し行為を検出し、当該受け渡し行為について、前記監視領域内における当該受け渡し行為の発生位置を求めるとともに、前記所持物検出手段の識別結果を参照して当該受け渡し行為で受け渡された物品の種類を求める受け渡し検出手段と、
   前記監視領域内の位置と物品の種類との組合せ毎に、前記監視の対象として注目すべき度合いを表す監視重要度を対応付けた監視基準情報を記憶する記憶部と、
   前記監視基準情報を参照し、前記受け渡し行為毎に、前記発生位置と前記受け渡された物品の種類との組合せに対応する前記監視重要度を求める監視重要度算出手段と、
   前記受け渡し行為の監視重要度に応じて、当該受け渡し行為の検出結果を出力する出力制御手段と、を備えたことを特徴とする画像監視システム。
   
   

Images