JP4457632B2 - 監視装置および方法、記録媒体、並びにプログラム - Google Patents

Description

本発明は、監視装置および方法、記録媒体、並びにプログラムに関し、特に、簡単かつ確実に必要なイベントを呈示できるようにすることができるようにした監視装置および方法、記録媒体、並びにプログラムに関する。

従来、カメラやマイクロホンといったセンサを備え、それらのセンサから出力されたデータの特徴量の時間的変動に基づき、監視領域で発生した異常事態を通知するシステムが提案されている。このシステムにより、不審者が玄関を破壊して侵入するといった異常な行動を検知し、通知することができる（例えば、特許文献１参照）。
特開２００３‐１９９０９２号公報

しかしながら、最近、不審者が破壊的な行為を行なわずに、ピッキングにより、短時間で玄関の鍵を開けて侵入するケースが増加している。このような場合、特許文献１に記載されている発明では、不審者の侵入と、居住者の帰宅といった日常的なイベントについて、センサから出力されるデータの特徴量の時間的変動の差がほとんどないため、監視領域で発生したイベントの中から不審者の侵入のみを抽出して通知することが困難である。

一方、不審者の侵入を確実に通知できるように、建物内への人物の進入を全て通知するようにしてしまうと、居住者の帰宅といった日常的なイベントも毎回通知されてしまうようになり、ユーザにとっては非常に鬱陶しく感じられるとともに、不必要なイベントの通知により、無駄な電力が消費されてしまうという課題があった。

本発明は、このような状況に鑑みてなされたものであり、簡単かつ確実に不審者の侵入を検出できるようにするようにするものである。

本発明の監視装置は、監視領域を監視するセンサと、センサの監視に基づいて、監視領域におけるイベントを検出するイベント検出手段と、イベント検出手段により検出されたイベントに基づいて、監視により保護される空間内に存在する人の数を推定する推定手段と、推定手段により推定された空間内に存在する人の数の推移に基づいて、しきい値を設定する設定手段と、推定手段により推定された空間内に存在する人の数と設定手段により設定されたしきい値との比較に基づいて、ユーザへのイベントの通知を制御する通知制御手段とを備える。

推定手段は、イベント検出手段により、空間内への人の進入が検出されたとき、空間内に存在すると推定される人の数を増加し、空間内からの人の退出が検出されたとき、空間内に存在すると推定される人の数を減少することにより空間内に存在する人の数を推定するようにすることができる。

センサは、複数のフォトセンサを含み、イベント検出手段は、複数のフォトセンサが反応した順序に基づいて、空間内への人の進入と、空間内からの人の退出を検出するようにすることができる。

センサは、イベントを検出するための第１のセンサと、監視領域の監視に基づく画像データを出力する第２のセンサとを含み、通知制御手段は、第２のセンサによる画像データの出力もさらに制御するようにすることができる。

本発明の情報処理方法は、センサによる監視処理を実行する監視装置が、センサの監視に基づいて、監視領域におけるイベントを検出するイベント検出ステップと、イベント検出ステップの処理により検出されたイベントに基づいて、監視により保護される空間内に存在する人の数を推定する推定ステップと、推定ステップの処理により推定された空間内に存在する人の数の推移に基づいて、しきい値を設定する設定ステップと、推定ステップの処理により推定された空間内に存在する人の数と設定ステップの処理により設定されたしきい値との比較に基づいて、ユーザへのイベントの通知を制御する通知制御ステップとを含む。

本発明の記録媒体に記録されているプログラムは、センサによる監視処理を実行するコンピュータに、センサの監視に基づいて、監視領域におけるイベントを検出するイベント検出ステップと、イベント検出ステップの処理により検出されたイベントに基づいて、監視により保護される空間内に存在する人の数を推定する推定ステップと、推定ステップの処理により推定された空間内に存在する人の数の推移に基づいて、しきい値を設定する設定ステップと、推定ステップの処理により推定された空間内に存在する人の数と設定ステップの処理により設定されたしきい値との比較に基づいて、ユーザへのイベントの通知を制御する通知制御ステップとを含む処理を実行させる。

本発明のプログラムは、センサによる監視処理を実行するコンピュータに、センサの監視に基づいて、監視領域におけるイベントを検出するイベント検出ステップと、イベント検出ステップの処理により検出されたイベントに基づいて、監視により保護される空間内に存在する人の数を推定する推定ステップと、推定ステップの処理により推定された空間内に存在する人の数の推移に基づいて、しきい値を設定する設定ステップと、推定ステップの処理により推定された空間内に存在する人の数と設定ステップの処理により設定されたしきい値との比較に基づいて、ユーザへのイベントの通知を制御する通知制御ステップとを含む処理を実行させる。

本発明の監視装置、監視方法、記録媒体に記録されているプログラム、およびプログラムにおいては、センサの監視に基づいて、監視領域におけるイベントが検出され、検出されたイベントに基づいて、監視により保護される空間内に存在する人の数が推定され、推定された空間内に存在する人の数の推移に基づいて、しきい値が設定され、推定された空間内に存在する人の数と設定されたしきい値との比較に基づいて、ユーザへのイベントの通知が制御される。

本発明によれば、不審者の侵入を検知することができる。特に、この発明によれば、不審者の侵入を、簡単かつ確実に、検知することができる。また、ユーザに不要な煩わしさを与えるのを抑制することができる。さらに、電力消費を抑制することが可能なシステムを実現することができる。

以下に本発明の実施の形態を説明するが、本明細書に記載の発明と、実施の形態との対応関係を例示すると、次のようになる。この記載は、本明細書には記載されているが、発明に対応するものとして、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その発明に対応するものではないことを意味するものではない。逆に、実施の形態が発明に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その発明以外の発明には対応しないものであることを意味するものでもない。

さらに、この記載は、本明細書に記載されている発明が、全て請求されていることを意味するものではない。換言すれば、この記載は、本明細書に記載されている発明であって、この出願では請求されていない発明の存在、すなわち、将来、分割出願されたり、補正により出現したり、追加される発明の存在を否定するものではない。

本発明によれば、監視装置が提供される。この監視装置（例えば、図１のマルチセンサカメラ１）は、監視領域を監視するセンサ（例えば、図６のフォトセンサ１０２−１乃至１０２−３）と、前記センサの監視に基づいて、前記監視領域におけるイベントを検出するイベント検出手段（例えば、図６のイベント検出部１５２）と、前記イベント検出手段により検出された前記イベントに基づいて、前記監視により保護される空間内（例えば、図４の室内１２３）に存在する人の数を推定する推定手段（例えば、図６の在宅人数推定部１５３）と、前記推定手段により推定された前記空間内に存在する人の数の推移に基づいて、しきい値（例えば、居住人数）を設定する設定手段（例えば、図６の居住人数推定部１５４）と、前記推定手段により推定された前記空間内に存在する人の数と前記設定手段により設定された前記しきい値との比較に基づいて、ユーザへの前記イベントの通知を制御する通知制御手段（例えば、図６のイベント通知制御部１５５）とを備える。

この監視装置（例えば、図１のマルチセンサカメラ１）においては、前記センサは、前記イベントを検出するための第１のセンサ（例えば、図６のフォトセンサ１０２−１乃至１０２−３）と、前記監視領域の監視に基づく画像データを出力する第２のセンサ（例えば、図６のＣＣＤカメラ１０１）とを含み、前記通知制御手段は、前記第２のセンサによる前記画像データの出力もさらに制御するようにすることができる。

本発明によれば、監視方法が提供される。この監視方法は、センサ（例えば、図６のフォトセンサ１０２−１乃至１０２−３）の監視に基づいて、監視領域におけるイベントを検出するイベント検出ステップ（例えば、図７のステップＳ２乃至Ｓ６、Ｓ８、図８のＳ１１乃至Ｓ１３、図１５のステップＳ５２乃至Ｓ５７、および図１６のステップＳ５８乃至Ｓ６０）と、前記イベント検出ステップの処理により検出された前記イベントに基づいて、前記監視により保護される空間内（例えば、図４の室内１２３）に存在する人の数を推定する推定ステップ（例えば、図８のステップＳ１４、Ｓ１５、Ｓ１８乃至Ｓ２１、図１６のステップＳ６１、Ｓ６２、およびＳ６５乃至Ｓ６８）と、前記推定ステップの処理により推定された前記空間内に存在する人の数の推移に基づいて、しきい値（例えば、居住人数）を設定する設定ステップ（例えば、図７のステップＳ７、Ｓ９、Ｓ１０、図８のステップＳ１６、およびＳ１７）と、前記推定ステップの処理により推定された前記空間内に存在する人の数と前記設定ステップの処理により設定された前記しきい値との比較に基づいて、ユーザへの前記イベントの通知を制御する通知制御ステップ（例えば、図１６のステップＳ６３、およびＳ６４とを含む。

本発明によれば、プログラムが提供される。このプログラムは、センサ（例えば、図６のフォトセンサ１０２−１乃至１０２−３）の監視に基づいて、監視領域におけるイベントを検出するイベント検出ステップ（例えば、図７のステップＳ２乃至Ｓ６、Ｓ８、図８のＳ１１乃至Ｓ１３、図１５のステップＳ５２乃至Ｓ５７、および図１６のステップＳ５８乃至Ｓ６０）と、前記イベント検出ステップの処理により検出された前記イベントに基づいて、前記監視により保護される空間内（例えば、図４の室内１２３）に存在する人の数を推定する推定ステップ（例えば、図８のステップＳ１４、Ｓ１５、Ｓ１８乃至Ｓ２１、図１６のステップＳ６１、Ｓ６２、およびＳ６５乃至Ｓ６８）と、前記推定ステップの処理により推定された前記空間内に存在する人の数の推移に基づいて、しきい値（例えば、居住人数）を設定する設定ステップ（例えば、図７のステップＳ７、Ｓ９、Ｓ１０、図８のステップＳ１６、およびＳ１７）と、前記推定ステップの処理により推定された前記空間内に存在する人の数と前記設定ステップの処理により設定された前記しきい値との比較に基づいて、ユーザへの前記イベントの通知を制御する通知制御ステップ（例えば、図１６のステップＳ６３、およびＳ６４とを含む処理をコンピュータに実行させる。

以下、図を参照して、本発明の実施の形態について説明する。

図１は、本発明を適用した監視システム１０の構成例を表している。この構成例においては、図中左側の監視領域側にマルチセンサカメラ１が備えられており、図中右側の通知・呈示側に、処理ボックス２および呈示部３が備えられている。マルチセンサカメラ１と処理ボックス２は、無線アンテナ１Ａと無線アンテナ２Ａを介して、相互に無線通信を行なう。処理ボックス２と呈示部３は、バスなどの有線あるいは無線により接続されている。なお、マルチセンサカメラ１と処理ボックス２は、無線通信に限られるものではなく、有線による通信であってもよい。

処理ボックス２は、マルチセンサカメラ１から送信されてきたイベントデータを、無線アンテナ２Ａを介して受信し、その受信データに基づいて呈示画像を構築し、呈示部３に供給または送信して、イベントを呈示させる。

呈示部３は、例えば、一般のテレビジョン受像機とされ、イベントが発生していない場合（通常の場合）、一般の視聴信号（放送信号に基づく映像）を表示し、イベントが発生した場合、一般の視聴信号の一部分にイベント画像が挿入されたピクチャインピクチャの画像を表示する。

なお、呈示部３は、テレビジョン受像機に限定されるものではなく、専用のモニタでもよい。また、呈示部３は、携帯電話機などの携帯情報端末でもよい。さらに、表示される画像は、ピクチャインピクチャの画像ではなく、画面全体の画像としてもよい。また、呈示部３は、イベント画像を表示せずに、例えばアラームを鳴動させるなどして、イベントの発生の通知のみするようにしてもよい。

図２は、マルチセンサカメラ１を正面から見た図である。マルチセンサカメラ１には、ＣＣＤ（Charge Coupled Device）カメラ１０１、およびフォトセンサ１０２−１乃至１０２−３が設けられている。

ＣＣＤカメラ１０１は、監視領域（視野角）内の状況を随時撮影する。その詳細は後述するが、マルチセンサカメラ１は、フォトセンサ１０２−１乃至１０２−３で検出されたイベントに基づいて、ユーザにイベントを通知するか否かを判定し、ユーザにイベントを通知すると判定した場合、無線アンテナ１Ａを介して、ＣＣＤカメラ１０１で撮影された画像データ（イベントデータ）を処理ボックス２に送信する。このとき、マルチセンサカメラ１に搭載されるＣＣＤカメラ１０１は、イベントを検出した場合にのみ動作するため、無駄な消費電力を抑えることができる。

マルチセンサカメラ１は、イベントを監視したい領域（必要な場所）に設置されている。図３は、マルチセンサカメラ１の内部の基本部分の構成例を示している。マルチセンサカメラ１には、ＣＣＤカメラ１０１、フォトセンサ１０２−１乃至１０２−３から出力されるデータを取得し、それらのセンサのデータに基づき、不審者の侵入など監視領域で発生したイベントを検出する信号処理部１０３が設けられている。

信号処理部１０３で検出されたイベントは、必要に応じて（イベントの内容に応じて）ユーザに通知される。例えば、各センサからのデータに基づき、不審者の侵入が検出された場合、ＣＣＤカメラ１０１で撮影した画像データが、送信部１０４を介して処理ボックス２に送信される。さらに、画像データから生成された通知用のデータが処理ボックス２から呈示部３へ供給され、ユーザにイベントの情報が呈示される。バッテリ１０５は、マルチセンサカメラ１の各部に対して必要な電力を供給している。

マルチセンサカメラ１は、例えば、住宅やビルなどの所定の空間（保護される対象としての空間）内への侵入者を監視する。図４に示されるように、その空間が、監視対象の建物の内部の室内１２３であるとき、建物の玄関１２２に対向する位置に設置される。フォトセンサ１０２−１乃至１０２−３は、自己が監視することが可能な監視領域１１１−１乃至１１１−３内の平均輝度をセンサデータとして出力しており、人物が監視領域１１１−１乃至１１１−３内に進入または退出したことに応じて、その出力が変化する。また、マルチセンサカメラ１は、フォトセンサ１０２−２の監視領域１１１−２内のほぼ中央にドア１２１が位置するように設置されており、ドア１２１を介しての室内１２３に対する人物の進入や退出に伴い、フォトセンサ１０２−２の出力が変化する（フォトセンサ１０２−２が反応する）。この例では、監視領域１１１−１乃至１１１−３が相互に重ならないように、フォトセンサ１０２−１乃至１０２−３が配置されている。

ここで、図５を参照して、フォトセンサ１０２−１が出力するセンサデータ１３１の出力レベルの変化と人物の行動との関係について説明する。同図において、縦軸はフォトセンサ１０２−１が出力するセンサデータの出力レベルを表わし、横軸は時間を表わしている。また、基準値Ｌは、人物が監視領域１１１−１内に侵入していない場合のセンサデータの出力値であり、背景の平均輝度に対応している。

反応区間Ｘは、フォトセンサ１０２−１が出力するセンサデータ１３１の出力レベルが基準値Ｌから変化している区間（時間）であり、人物が監視領域１１１−１内に存在していることを表わしている。この反応区間Ｘにおいて、センサデータ１３１の出力レベルが基準値Ｌから離れる方向（図５の例の場合、正の方向に離れているが、負の方向に離れる場合もある）に変化する区間Ａは、人物が監視領域１１１−１内に徐々に進入しているか、または監視領域１１１−１内でフォトセンサ１０２−１に徐々に接近していることを表わし、センサデータ１３１の出力レベルが変化しない区間Ｂは、人物が監視領域１１１−１内で行動していない（静止している）ことを表わし、センサデータ１３１の出力レベルが基準値Ｌに近づく方向（図５の例の場合、負の方向に近づいているが、正の方向に近づく場合もある）に変化する区間Ｃは、人物が監視領域１１１−１から徐々に退出しているか、または監視領域１１１−１内でフォトセンサ１０２−１から徐々に離反していることを表わしている。

このように、フォトセンサ１０２−１が出力するセンサデータ１３１の出力レベルの変化および変化する方向に応じて、監視領域１１１−１内における人物の行動をおおよそ推定することができる。

なお、図５に示すセンサデータ１３１は、人物に対する平均輝度の出力レベルが基準値（背景に対する平均輝度）Ｌより高い場合の特性を表わしており、人物に対する平均輝度の出力レベルが基準値Ｌより低い場合には、センサデータ１３１の出力変化は、負の方向に変化する。

また、フォトセンサ１０２−２と１０２−３が出力するセンサデータの出力レベルの変化と人物の行動との関係は、上述したフォトセンサ１０２−１の場合と同様であり、その説明は省略する。

マルチセンサカメラ１は、図９乃至図１４を参照して後述するように、フォトセンサ１０２−１乃至１０２−３から出力されたセンサデータに基づいて、玄関１２２内への人物の進入、および玄関１２２からの人物の退出を検出し、監視対象の建物内（室内１２３）にいる人数を推定する。そして、監視対象の建物の中にいる人数が所定のしきい値（例えば、監視対象の建物に住んでいる居住者の人数）を超えた場合、マルチセンサカメラ１は、ユーザに監視領域内で発生したイベントを通知するために、ＣＣＤカメラ１０１で撮影した画像データ（イベントデータ）を処理ボックス２に送信する。

図６は、信号処理部１０３と処理ボックス２の詳細な構成を含む監視システム１０の機能的構成例を示すブロック図である。

信号処理部１０３は、センサデータ処理部１５１、イベント検出部１５２、在宅人数推定部１５３、居住人数推定部１５４、イベント通知制御部１５５、およびデータ蓄積部１５６により構成される。

ＣＣＤカメラ１０１は、監視領域内の状況を随時撮影し、画像データをセンサデータ処理部１５１に供給する。センサデータ処理部１５１は、ＣＣＤカメラ１０１から供給された画像データから、イベントの通知に必要なデータ（以下、通知画像データと称する）を生成し、データ蓄積部１５６に供給し、蓄積させる。

フォトセンサ１０２−１乃至１０２−３は、監視領域１１１−１乃至１１１−３（図４）内の平均輝度をセンサデータとしてセンサデータ処理部１５１に供給する。センサデータ処理部１５１は、フォトセンサ１０２−１乃至１０２−３から出力されたセンサデータから、イベント検出に必要なデータを抽出して、イベント検出部１５２に供給する。

イベント検出部１５２は、センサデータ処理部１５１から供給されたフォトセンサ１０２−１乃至１０２−３のセンサデータに基づき、監視領域におけるイベントの発生を検出する。具体的には、イベント検出部１５２は、フォトセンサ１０２−１乃至１０２−３のうち少なくとも１つのフォトセンサの出力レベルが基準値Ｌ（図５）から離れている（反応している）場合、監視領域でイベントが発生していると判定する。そして、イベント検出部１５２は、監視領域でイベントが発生していると判定した場合、ＣＣＤカメラ１０１の電源をオンし、監視領域内の状況の撮影を開始させる。前述したように、センサデータ処理部１５１は、ＣＣＤカメラ１０１の撮影により出力された画像データから通知画像データを生成し、生成された通知画像データがデータ蓄積部１５６に蓄積される。また、イベント検出部１５２は、監視領域でのイベントの発生の有無を表わすイベント発生中フラグを管理し、監視領域でイベントが発生していると判定した場合、イベント発生中フラグをオンとする。

さらに、イベント検出部１５２は、イベント発生中にフォトセンサ１０２−１乃至１０２−３が反応した順序を記録し、イベント終了時に、図９乃至図１４を参照して後述するように、そのフォトセンサの反応順序に基づき、検出したイベントにおける人物の動きを推定する。イベント検出部１５２は推定したイベント推定結果を、在宅人数推定部１５３に通知する。

在宅人数推定部１５３は、イベント検出部１５２より通知されたイベント推定結果に基づき、監視対象となっている建物内に現在いる人数（在宅人数）を推定し、在宅人数推定カウンタに記録する。在宅人数推定部１５３は、推定した在宅人数を、居住人数推定部１５４とイベント通知制御部１５５に通知する。

居住人数推定部１５４は、人数推定部１５４から通知された在宅人数に基づき、図７と図８を参照して後述する居住人数推定処理を行ない、監視対象の建物に居住する人数（居住人数）を推定する。居住人数推定部１５４は、推定した居住人数をイベント通知制御部１５５に通知する。居住人数推定部１５４は、居住人数推定処理中の在宅人数の最大値を表わす在宅人数最大値を記録する。

イベント通知制御部１５５は、在宅人数推定部１５３から通知された在宅人数、および居住人数推定部１５４から通知された居住人数に基づき、イベントを通知するか否かを判定する。イベント通知制御部１５５は、在宅人数が居住人数を上回った場合、監視対象の建物内に不審者が侵入した可能性があると判定し、発生した（人物が監視対象の建物内に侵入し、在宅人数が居住人数を上回ることになった）イベントを通知するために、そのイベントの通知画像データをデータ蓄積部１５６から取得し、送信部１０４を介して、処理ボックス２に送信する。

また、イベント通知制御部１５５は、図示せぬ入力部を介して、ユーザに直接居住人数を設定させることも可能である。

処理ボックス２には、受信部１７１および呈示画像構築部１７２が設けられている。

受信部１７１は、マルチセンサカメラ１から送信されてきた通知画像データを受信すると、呈示画像構築部１７２に供給する。

呈示画像構築部１７２は、受信部１７１を介してマルチセンサカメラ１から通知画像データを受信した場合、一般視聴信号（テレビジョン放送信号）の一部に通知画像データを挿入した通知データを構築（作成）し、それを呈示部３に供給して呈示させる。呈示部３用の通知データは、一般の視聴信号の一部に通知画像データを挿入して構成されているため、呈示部３には、ピクチャインピクチャの表示が呈示される。

次に、図７乃至図１７を参照して、監視システム１０により実行される処理を説明する。監視システム１０では、まずマルチセンサカメラ１で居住人数推定処理が行なわれた後、通常の監視処理が行なわれる。

まず、図７と図８のフローチャートを参照して、マルチセンサカメラ１における居住人数推定処理について説明する。なお、この処理は、ユーザにより、監視領域における監視が指令されたとき、開始される。

ステップＳ１において、マルチセンサカメラ１の初期化処理が行なわれる。具体的には、イベント検出部１５２はイベント発生中フラグをオフし、在宅人数推定部１５３は在宅人数推定カウンタを０にリセットし、居住人数推定部１５４は在宅人数最大値を０にリセットする。

ステップＳ２において、イベント検出部１５２は、センサデータ処理部１５１を介して、フォトセンサ１０２−１乃至１０２−３から出力されたセンサデータを取得する。

ステップＳ３において、イベント検出部１５２は、イベント発生中フラグがオンか否かを判定する。いまの場合、ステップＳ１の初期化処理でイベント発生中フラグはオフとされているので、処理はステップＳ４に進む。

ステップＳ４において、イベント検出部１５２は、ステップＳ２の処理で取得したセンサデータに基づき、監視領域でイベントが発生しているか否かを判定する。イベント検出部１５２は、フォトセンサ１０２−１乃至１０２−３のうち少なくとも１つのフォトセンサが反応している場合、監視領域でイベントが発生していると判定し、処理はステップＳ５に進む。

ステップＳ５において、イベント検出部１５２は、フォトセンサ１０２−１乃至１０２−３の反応履歴の記録を開始する。すなわち、ステップＳ４において検出されたイベントの発生中に反応したフォトセンサの順序の記録が開始される。

ステップＳ６において、イベント検出部１５２は、イベント発生中フラグをオンする。その後、処理はステップＳ７に進む。

ステップＳ４において、フォトセンサ１０２−１乃至１０２−３のいずれのフォトセンサも反応しておらず、イベントが発生していないと判定された場合、ステップＳ５とＳ６の処理はスキップされ、処理はステップＳ７に進む。

ステップＳ７において、居住人数推定部１５４は、居住人数推定処理開始から所定の時間（例えば１週間）が経過したか否かを判定する。いまの場合、居住人数推定処理が開始されたばかりであり、居住人数推定処理開始から所定の時間が経過していないと判定され、処理はステップＳ２に戻る。

ステップＳ２において、１度目のステップＳ２の処理と同様、イベント検出部１５２は、フォトセンサ１０２−１乃至１０２−３から出力されたセンサデータを取得する。

ステップＳ３において、イベント発生中フラグがオフであると判定された場合、すなわち監視領域でイベントが発生していない場合、処理はステップＳ４に進み、上述したステップＳ４乃至Ｓ７の処理が行なわれる。

ステップＳ３において、イベント発生中フラグがオンであると判定された場合、すなわち監視領域でイベントが発生している場合、処理はステップＳ８に進む。

ステップＳ８において、イベント検出部１５２は、監視領域で発生中のイベントが終了したか否かを判定する。イベント検出部１５２は、ステップＳ２の処理で取得したセンサデータに基づき、フォトセンサ１０２−１乃至１０２−３のいずれもが反応していない状態が一定の期間継続したか否かを判定し、フォトセンサ１０２−１乃至１０２−３のいずれもが反応していない期間が一定期間継続していない場合、イベントは終了していないと判定し、処理はステップＳ２に戻る。その後、ステップＳ８において、イベントが終了したと判定されるまで、ステップＳ２、Ｓ３およびＳ８の処理が繰り返される。

ステップＳ８において、フォトセンサ１０２−１乃至１０２−３のいずれもが反応していない期間が一定期間継続し、イベントが終了したと判定された場合、処理はステップＳ１１に進む。

ステップＳ１１において、イベント検出部１５２は、フォトセンサ１０２−１乃至１０２−３の反応履歴の記録を停止する。

ステップＳ１２において、イベント検出部１５２は、イベント発生中フラグをオフする。

ステップＳ１３において、イベント検出部１５２は、イベント発生中に記録したフォトセンサ１０２−１乃至１０２−３の反応履歴に基づき、発生したイベントの内容を推定し、推定したイベント推定結果を在宅人数推定部１５３に通知する。

ここで、図９乃至図１４を参照して、ステップＳ１３のイベント内容推定処理の詳細について説明する。

図９は、図４に示される監視領域における人物２０１−１乃至２０１−４の行動を模式的に示しており、図１０乃至図１３は、人物２０１−１乃至２０１−４の行動に伴い、フォトセンサ１０２−１乃至１０２−３から出力されるセンサデータ１３１−１乃至１３１−３の波形を示している。

なお、図１０乃至図１３において、縦軸はフォトセンサ１０２−１乃至１０２−３が出力するセンサデータの出力レベルを表わし、横軸は時間を表わしている。また、フォトセンサ１０２−１から出力されるセンサデータがセンサデータ１３１−１、フォトセンサ１０２−２から出力されるセンサデータがセンサデータ１３１−２、フォトセンサ１０２−３から出力されるセンサデータがセンサデータ１３１−３とされる。

人物２０１−１が、図９において、矢印で示されるように、マルチセンサカメラ１の前を左から右方向にマルチセンサカメラ１に対してほぼ平行に通り過ぎた場合、フォトセンサ１０２−１乃至１０２−３から図１０に示されるセンサデータが出力される。

まず、人物２０１−１がフォトセンサ１０２−３の監視領域１１１−３に進入することに伴い、センサデータ１３１−３の出力レベルが変化する（フォトセンサ１０２−３が反応する）。次に、人物２０１−１が監視領域１１１−３から出て、フォトセンサ１０２−２の監視領域１１１−２に進入することに伴い、センサデータ１３１−３は通常の出力レベルに戻り、センサデータ１３１−２の出力レベルが変化する（フォトセンサ１０２−２が反応する）。つづいて、人物２０１−１が監視領域１１１−２から出て、フォトセンサ１０２−１の監視領域１１１−１に進入することに伴い、センサデータ１３１−２は通常の出力レベルに戻り、センサデータ１３１−１の出力レベルが変化する（フォトセンサ１０２−１が反応する）。最後に、人物２０１−１が監視領域１１１−１から出ることに伴い、センサデータ１３１−１は通常の出力レベルに戻る。すなわち、人物２０１−１の行動に伴い、フォトセンサは、フォトセンサ１０２−３、フォトセンサ１０２−２、フォトセンサ１０２−１の順に反応する。

人物２０１−２が、図９において、矢印で示されるように、マルチセンサカメラ１の前を左から右方向に監視領域１１１−２の中央付近までマルチセンサカメラ１に対してほぼ平行に進み、監視領域１１１−２の中央付近で向きを変え、それまでの進行方向と逆に、右から左方向にマルチセンサカメラ１に対してほぼ平行に引き返した場合、フォトセンサ１０２−１乃至１０２−３から図１１に示されるセンサデータが出力される。

まず、人物２０１−２が監視領域１１１−３に進入することに伴い、センサデータ１３１−３の出力レベルが変化する。次に、人物２０１−２が監視領域１１１−３から出て、監視領域１１１−２に進入することに伴い、センサデータ１３１−３は通常の出力レベルに戻り、センサデータ１３１−２の出力レベルが変化する。つづいて、人物２０１−２が監視領域１１１−２から出て、監視領域１１１−３に引き返すことに伴い、センサデータ１３１−２は通常の出力レベルに戻り、センサデータ１３１−３の出力レベルが変化する。最後に、人物２０１−２が監視領域１１１−３から出ることに伴い、センサデータ１３１−３は通常の出力レベルに戻る。すなわち、人物２０１−２の行動に伴い、フォトセンサは、フォトセンサ１０２−３、フォトセンサ１０２−２、フォトセンサ１０２−３の順に反応する。

人物２０１−３が、図９において、矢印で示されるように、マルチセンサカメラ１の前を左から右方向に監視領域１１１−２の中央付近までマルチセンサカメラ１に対してほぼ平行に進み、ドア１２１を開けて玄関１２２の室内１２３に入った場合、フォトセンサ１０２−１乃至１０２−３から図１２に示されるセンサデータが出力される。

まず、人物２０１−３が監視領域１１１−３に進入することに伴い、センサデータ１３１−３の出力レベルが変化する。次に、人物２０１−３が監視領域１１１−３から出て、監視領域１１１−２に進入することに伴い、センサデータ１３１−３は通常の出力レベルに戻り、センサデータ１３１−２の出力レベルが変化する。最後に、人物２０１−３が、ドア１２１を開けて玄関１２２の室内１２３に入り、監視領域１１１−２から出ることに伴い、センサデータ１３１−２は通常の出力レベルに戻る。すなわち、人物２０１−３の行動に伴い、フォトセンサは、フォトセンサ１０２−３、フォトセンサ１０２−２の順に反応する。

人物２０１−４が、図９において、矢印で示されるように、ドア１２１を開けて玄関１２２の室内１２３から出てきた後、マルチセンサカメラ１の前を右から左方向にマルチセンサカメラ１に対してほぼ平行に進み、監視領域１１１−３から出て行った場合、フォトセンサ１０２−１乃至１０２−３から図１３に示されるセンサデータが出力される。

まず、人物２０１−４が、ドア１２１を通り玄関１２２から出てきて、監視領域１１１−２に進入することに伴い、センサデータ１３１−２の出力レベルが変化する。次に、人物２０１−４が監視領域１１１−２から出て、監視領域１１１−３に進入することに伴い、センサデータ１３１−２は通常の出力レベルに戻り、センサデータ１３１−３の出力レベルが変化する。最後に、人物２０１−４が監視領域１１１−３から出ることに伴い、センサデータ１３１−３は通常の出力レベルに戻る。すなわち、人物２０１−４の行動に伴い、フォトセンサは、フォトセンサ１０２−２、フォトセンサ１０２−３の順に反応する。

以上のように、人物２０１−１乃至２０１−４の行動パターンの違いにより、フォトセンサ１０２−１乃至１０２−３の反応する（センサデータの出力レベルが変化する）順序が異なる。特に、最初に反応したフォトセンサおよび最後に反応したフォトセンサに基づき、監視領域内の人物２０１の行動は、図１４に示されるように推定される。

図１４の１行目と２行目は、イベント発生時に最初に反応したフォトセンサを示している。最初に反応したフォトセンサの「左」はフォトセンサ１０２−３を指しており、「中」はフォトセンサ１０２−２を指しており、「右」はフォトセンサ１０２−１を指している。

図１４の１列目と２列目は、イベント終了時に最後に反応したフォトセンサを示している。最初に反応したフォトセンサと同様に、最後に反応したフォトセンサの「左」はフォトセンサ１０２−３を指しており、「中」はフォトセンサ１０２−２を指しており、「右」はフォトセンサ１０２−１を指している。

図１４の３行目乃至５行目、および３列目乃至５列目は、最初に反応したフォトセンサおよび最後にフォトセンサに基づき推定される人物２０１の行動（イベント）の内容を示している。

「通過」と記述された欄は、図９の人物２０１−１のように、人物がマルチセンサカメラ１の監視領域内を左から右方向に、あるいは右から左方向に通過したと推定されることを示している。

「引き返し」と記述された欄は、図９の人物２０１−２のように、人物がマルチセンサカメラ１の監視領域内に左方向から進入した後、引き返して左方向から出ていったり、あるいはマルチセンサカメラ１の監視領域内に右方向から進入した後、引き返して右方向から出ていったりしたと推定されることを示している。

「玄関に入る」と記述された欄は、図９の人物２０１−３のように、人物がマルチセンサカメラ１の監視領域内に左方向から進入した後、あるいはマルチセンサカメラ１の監視領域内に右方向から進入した後、ドア１２１から玄関１２２の室内１２３に入ったと推定されることを示している。

「玄関から出る」と記述された欄は、図９の人物２０１−４のように、室内１２３にいた人物がドア１２１を通って玄関１２２の室内１２３から出た後、マルチセンサカメラ１の監視領域内の左方向から出て行ったり、あるいは右方向から出て行ったりしたと推定されることを示している。

「玄関から出て、玄関に入る」と記述された欄は、室内１２３にいた人物がドア１２１を通って玄関１２２の室内１２３から出た後、マルチセンサカメラ１の監視領域内から出ないまま、ドア１２１から玄関１２２の室内１２３に入った（戻った）と推定されることを示している。

図１４に示されるように、最初に反応したフォトセンサが「中」すなわちフォトセンサ１０２−２の場合、人物はドア１２１を通り玄関１２２から出てきたと推定され、最後に反応したフォトセンサが「中」すなわちフォトセンサ１０２−２の場合、人物はドア１２１から玄関１２２の中に入ったと推定される。従って、「玄関から出る」および「玄関に入る」イベントを検出して、監視対象の建物に進入したり、建物から退出したりした人数を把握することにより、監視対象の建物内にいる人数の推定が可能となる。

図８に戻り、ステップＳ１３において、イベント検出部１５２は、図１４を参照して上述した方法により、発生したイベントの内容（人物の動き）を推定し、推定したイベント推定結果を在宅人数推定部１５３に通知する。

ステップＳ１４において、在宅人数推定部１５３は、ステップＳ１３の処理でイベント検出部１５２から通知されたイベント推定結果が「玄関に入る」か否かを判定する。イベント推定結果が「玄関に入る」と判定された場合、処理はステップＳ１５に進み、在宅人数推定部１５３は、在宅人数推定カウンタの値を１つ増加する。すなわち、監視対象の建物内にいると推定される人数が１人増加される。そして、在宅人数推定部１５３は、在宅人数推定カウンタの値を居住人数推定部１５４に通知する。

ステップＳ１６において、居住人数推定部１５４は、ステップＳ１５の処理で通知された在宅人数推定カウンタの値と、居住人数推定部１５４が記録している在宅人数最大値を比較する。在宅人数推定カウンタの値が在宅人数最大値より大きいと判定された場合、居住人数推定部１５４は、ステップＳ１７において、在宅人数最大値を在宅人数推定カウンタの値に更新する。これにより、居住人数推定部１５４は、居住人数推定処理中に、監視対象の建物内に同時にいた人数の最大値を記録する。その後、処理はステップＳ２に戻り、それ以降の処理が繰り返される。

ステップＳ１６において、在宅人数推定カウンタの値が在宅人数最大値以下の場合、ステップＳ１７の処理はスキップされ、処理はステップＳ２に戻り、それ以降の処理が繰り返される。

ステップＳ１４において、イベント推定結果が「玄関に入る」ではないと判定された場合、処理はステップＳ１８に進み、在宅人数推定部１５３は、イベント推定結果が「玄関から出る」か否かを判定する。イベント推定結果が「玄関から出る」と判定された場合、処理はステップＳ１９に進み、在宅人数推定部１５３は、在宅人数推定カウンタの値を１つ減少する。すなわち、監視対象の建物内にいると推定される人数が１人減らされる。

ステップＳ２０において、在宅人数推定部１５３は、在宅人数推定カウンタの値が０未満か否かを判定する。在宅人数推定カウンタの値が０未満であると判定された場合、処理はステップＳ２１に進み、在宅人数推定部１５３は、在宅人数推定カウンタの値を０に補正する。その後、処理はステップＳ２に戻り、それ以降の処理が繰り返される。

ステップＳ２０において、在宅人数推定カウンタの値が０以上であると判定された場合、ステップＳ２１の処理はスキップされ、処理はステップＳ２に戻り、それ以降の処理が繰り返される。

ステップＳ１８において、イベント推定結果が「玄関から出る」ではないと判定された場合、ステップＳ１９乃至Ｓ２１の処理はスキップされ、処理はステップＳ２に戻り、それ以降の処理が繰り返される。すなわち、イベント推定結果が「玄関に入る」および「玄関から出る」のいずれでもない場合、在宅人数推定カウンタおよび在宅人数最大値の更新は行なわれない。このイベント推定結果が「玄関に入る」および「玄関から出る」のいずれでもない場合には、イベント推定結果が「玄関から出て、玄関に入る」の場合も含まれる。

その後、ステップＳ７において、居住人数推定処理開始から所定の時間が経過したと判定されるまで、上述したステップＳ２乃至Ｓ８およびステップＳ１１乃至Ｓ２１の処理が繰り返される。すなわち、フォトセンサ１０２−１乃至１０２−３から出力されたセンサデータに基づき検出されたイベントの内容の推定結果により、在宅人数推定カウンタおよび在宅人数最大値の更新が繰り返される。なお、居住人数推定処理中は、ユーザへのイベントの通知は行なわれない。

ステップＳ７において、居住人数推定処理開始から所定の時間が経過したと判定された場合、処理はステップＳ９に進み、居住人数推定部１５４は、監視対象の建物の居住人数を在宅人数最大値に設定する。すなわち、居住人数推定処理中の監視対象の建物内の在宅人数の推移に基づき、その在宅人数の最大値が監視対象の建物に居住する人数に設定される。

ステップＳ１０において、居住人数推定部１５４は、ステップＳ９の処理で設定した居住人数をイベント通知制御部１５５に通知する。その後、マルチセンサカメラ１における居住人数推定処理は終了し、引き続き、監視システム１０は、図１５乃至図１７のフローチャートで示される監視処理を開始する。

なお、監視システム１０において、以上に説明した居住人数推定処理を実施せずに、ユーザが直接居住人数を設定することも可能である。その場合、ユーザから設定された居住人数は、イベント通知制御部１５５に通知され、記録される。

次に、図１５乃至図１７のフローチャートを参照して、監視システム１０において居住人数推定処理後に行なわれる監視処理について説明する。

まず、図１５と図１６を参照して、マルチセンサカメラ１における監視処理について説明する。なお、この処理は、図７と図８のフローチャートを参照して上述した居住人数推定処理の終了に引き続いて、開始される。あるいは、ユーザから直接居住人数が設定され、監視領域における監視が指令されたとき、開始される。

ステップＳ５１において、マルチセンサカメラ１の初期化処理が行なわれる。具体的には、イベント検出部１５２はイベント発生中フラグをオフする。また、在宅人数推定部１５３は、居住人数推定処理に引き続き監視処理が行なわれる場合、在宅人数推定カウンタを居住人数推定処理終了時の値のままとし、居住人数推定処理が行なわれずに、ユーザから居住人数が設定された場合、在宅人数推定カウンタの値を０にリセットする。

ステップＳ５２において、イベント検出部１５２は、センサデータ処理部１５１を介して、フォトセンサ１０２−１乃至１０２−３から出力されたセンサデータを取得する。

ステップＳ５３において、イベント検出部１５２は、イベント発生中フラグがオンか否かを判定する。いまの場合、ステップＳ５１の初期化処理でイベント発生中フラグはオフとされているので、処理はステップＳ５４に進む。

ステップＳ５４において、イベント検出部１５２は、ステップＳ５２の処理で取得したセンサデータに基づき、監視領域でイベントが発生しているか否かを判定する。イベント検出部１５２は、フォトセンサ１０２−１乃至１０２−３のうち少なくとも１つのフォトセンサが反応している場合、監視領域でイベントが発生していると判定し、処理はステップＳ５５に進む。

ステップＳ５５において、イベントの記録が開始される。具体的には、イベント検出部１５２は、ＣＣＤカメラ１０１の電源をオンし、ＣＣＤカメラ１０１による監視領域の撮影が開始され、ＣＣＤカメラ１０１から出力された画像データがセンサデータ処理部１５１へ供給される。センサデータ処理部１５１は、ＣＣＤカメラ１０１から供給された画像データからイベントの通知に必要なデータ（通知画像データ）を生成し、データ蓄積部１５６に蓄積させる。イベント検出部１５２は、フォトセンサ１０２−１乃至１０２−３の反応履歴の記録を開始する。すなわち、ステップＳ５４において検出されたイベントについて、通知画像データの蓄積および反応したフォトセンサの順序の記録が開始される。

ステップＳ５６において、イベント検出部１５２は、イベント発生中フラグをオンし、処理はステップＳ５２に戻る。

ステップＳ５４において、フォトセンサ１０２−１乃至１０２−３のいずれのフォトセンサも反応しておらず、イベントが発生していないと判定された場合、ステップＳ５５とＳ５６の処理はスキップされ、処理はステップＳ５２に戻る。

ステップＳ５２において、１度目のステップＳ５２の処理と同様、イベント検出部１５２は、フォトセンサ１０２−１乃至１０２−３から出力されたセンサデータを取得する。

ステップＳ５３において、イベント発生中フラグがオフと判定された場合、すなわち監視領域でイベントが発生していない場合、処理はステップＳ５４に進み、上述したステップＳ５４乃至Ｓ５６の処理が行なわれる。

ステップＳ５３において、イベント発生中フラグがオンであると判定された場合、すなわち監視領域でイベントが発生している場合、処理はステップＳ５７に進む。

ステップＳ５７において、イベント検出部１５２は、監視領域で発生中のイベントが終了したか否かを判定する。イベント検出部１５２は、ステップＳ５２の処理で取得したセンサデータに基づき、フォトセンサ１０２−１乃至１０２−３のいずれもが反応していない状態が一定の期間継続したか否かを判定し、フォトセンサ１０２−１乃至１０２−３のいずれもが反応していない期間が一定期間継続していない場合、イベントは終了していないと判定し、処理はステップＳ５２に戻る。その後、ステップＳ５７において、イベントが終了したと判定されるまで、ステップＳ５２、Ｓ５３およびＳ５７の処理が繰り返される。

ステップＳ５７において、フォトセンサ１０２−１乃至１０２−３のいずれもが反応していない期間が一定期間継続し、イベントが終了したと判定された場合、処理はステップＳ５８に進む。

ステップＳ５８において、イベントの記録が停止される、具体的には、イベント検出部１５２は、ＣＣＤカメラ１０１の電源をオフし、データ蓄積部１５６への通知画像データの蓄積を停止させる。イベント検出部１５２は、フォトセンサ１０２−１乃至１０２−３の反応履歴の記録を停止する。

ステップＳ５９において、イベント検出部１５２は、イベント発生中フラグをオフする。

ステップＳ６０において、イベント検出部１５２は、居住人数推定処理中の図８のステップＳ１３と同様の処理により、発生したイベントの内容を推定し、推定したイベント推定結果を在宅人数推定部１５３に通知する。

ステップＳ６１において、在宅人数推定部１５３は、ステップＳ６０の処理でイベント検出部１５２から通知されたイベント推定結果が「玄関に入る」か否かを判定する。イベント推定結果が「玄関に入る」と判定された場合、処理はステップＳ６２に進み、在宅人数推定部１５３は、在宅人数推定カウンタの値を１つ増加する。すなわち、監視対象の建物内にいると推定される人数が１人増加される。そして、在宅人数推定部１５３は、在宅人数推定カウンタの値を居住人数推定部１５４に通知する。

ステップＳ６３において、居住人数推定部１５４は、ステップＳ６２の処理で通知された在宅人数推定カウンタの値と、居住人数を比較する。在宅人数推定カウンタの値が居住人数より大きいと判定された場合、すなわち監視対象の建物内の人数が居住人数より多く、不審者が侵入した可能性があると判定された場合、処理はステップＳ６４に進む。

ステップＳ６４において、イベント通知制御部１５５は、発生した（ステップＳ６３の処理で不審者が侵入した可能性があると判定された）イベントに関する通知画像データをデータ蓄積部１５６から取得して、送信部１０４を介して処理ボックス２に送信する。処理ボックス２は、後述する図１７のステップＳ１０１において、この通知画像データを受信し、呈示部３に呈示させる。その後、処理はステップＳ５２に戻り、それ以降の処理が繰り返される。

ステップＳ６３において、在宅人数推定カウンタの値が居住人数以下と判定された場合、ステップＳ６４の処理はスキップされ、発生したイベントの通知画像データは処理ボックス２に送信されずに、処理はステップＳ５２に戻り、それ以降の処理が繰り返される。

ステップＳ６１において、イベント推定結果が「玄関に入る」でないと判定された場合、処理はステップＳ６５に進み、在宅人数推定部１５３は、イベント推定結果が「玄関から出る」か否かを判定する。イベント推定結果が「玄関から出る」と判定された場合、処理はステップＳ６６に進み、在宅人数推定部１５３は、在宅人数推定カウンタの値を１つ減少する。すなわち、監視対象の建物内にいると推定される人数が１人減らされる。

ステップＳ６７において、在宅人数推定部１５３は、在宅人数推定カウンタの値が０未満か否かを判定する。在宅人数推定カウンタの値が０未満であると判定された場合、処理はステップＳ６８に進み、在宅人数推定部１５３は、在宅人数推定カウンタの値を０に補正する。その後、発生したイベントの通知画像データは処理ボックス２に送信されずに、処理はステップＳ５２に戻り、それ以降の処理が繰り返される。

ステップＳ６７において、在宅人数推定カウンタの値が０以上であると判定された場合、ステップＳ６８の処理はスキップされ、発生したイベントの通知画像データは処理ボックス２に送信されずに、処理はステップＳ５２に戻り、それ以降の処理が繰り返される。

ステップＳ６５において、イベント推定結果が「玄関から出る」でないと判定された場合、ステップＳ６６乃至Ｓ６８の処理はスキップされ、発生したイベントの通知画像データは処理ボックス２に送信されずに、処理はステップＳ５２に戻り、それ以降の処理が繰り返される。

以上のようにして、マルチセンサカメラ１により検出されたイベントに基づき推定された監視対象の建物内にいる在宅人数が居住人数を上回った場合、不審者が侵入した可能性があると判定され、不審者が侵入した可能性のあるイベントの通知画像データが、処理ボックス２に送信される。

次に、図１７のフローチャートを参照して、図１５と図１６のマルチセンサカメラ１の処理に対応して実行される処理ボックス２の処理について説明する。なお、この処理は、ユーザにより、監視領域における監視をするよう指令されたとき開始される。あるいはまた、ユーザにより、呈示部３に対して一般視聴信号（放送番組信号）に対応する画像の呈示を行うよう指令されたとき、自動的に実行させるようにしてもよい。

ステップＳ１０１において、受信部１７１は、マルチセンサカメラ１から、上述した図１６のステップＳ６４の処理により送信されてきた通知画像データを受信したか否かを判定する。通知画像データを受信したと判定された場合、処理はステップＳ１０２に進み、通知画像データを受信していないと判定された場合、ステップＳ１０１の処理が繰り返される。

ステップＳ１０２において、呈示画像構築部１７２は、受信部１７１から供給された通知画像データを、呈示部３に供給される一般視聴信号の一部に挿入し、通知データ（ピクチャインピクチャで呈示するための画像データ）を構築し、それを呈示部３に供給し、呈示させる。このようにして、呈示部３にイベント画像が表示される。その後、処理はステップＳ１０１に戻り、上述した処理が繰り返される。

以上のように、監視システム１０は、監視対象の建物に居住している人数と、在宅している人数を把握し、在宅人数が居住人数を上回った場合、不審者が侵入した可能性があると判定し、不審者が侵入した可能性のあるイベントをユーザに通知する。従って、不審者の侵入を容易に検出できるとともに、ユーザに不必要なイベントを通知する回数が減り、不必要なイベント通知による消費電力が抑えられる。

以上においては、マルチセンサカメラ１にＣＣＤカメラ１０１を利用する例について説明したが、ＣＣＤカメラ１０１に限らず、CMOS（Complementary Metal Oxide Semiconductor）カメラやその他のカメラを使用することも可能である。

また、マルチセンサカメラ１や呈示部３は、１台ではなく、複数台設けるようにしたり、処理ボックス２は、呈示部３と別の筐体とせず、一体型とするようにしたり、マルチセンサカメラ１に処理ボックス２の機能を搭載して、マルチセンサカメラ１から、呈示部３に直接イベントを通知するようにしてもよい。

さらに、不審者が侵入したか否かを判定するためのしきい値である居住人数を固定値とするのではなく、居住人数推定処理中の在宅人数の推移に基づき、曜日や時間帯などにより変動させるようにしてもよい。

上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。

図１８は、汎用のパーソナルコンピュータ３００の内部の構成例を示す図である。CPU（Central Processing Unit）３０１は、ROM（Read Only Memory）３０２に記憶されているプログラム、または記憶部３０８からRAM（Random Access Memory）３０３にロードされたプログラムに従って各種の処理を実行する。RAM３０３にはまた、CPU３０１が各種の処理を実行する上において必要なデータなども適宜記憶される。

CPU３０１、ROM３０２、およびRAM３０３は、バス３０４を介して相互に接続されている。このバス３０４にはまた、入出力インターフェース３０５も接続されている。

入出力インターフェース３０５には、ボタン、スイッチ、キーボードあるいはマウスなどで構成される入力部３０６、CRT（Cathode Ray Tube）やLCD（Liquid Crystal Display）などのディスプレイ、並びにスピーカなどで構成される出力部３０７、ハードディスクなどで構成される記憶部３０８、およびモデムやターミナルアダプタなどで構成される通信部３０９が接続されている。通信部３０９は、インターネットを含むネットワークを介して通信処理を行う。

入出力インターフェース３０５にはまた、必要に応じてドライブ３１０が接続され、磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリなどよりなるリムーバブルメディア３１１が適宜装着され、そこから読み出されたコンピュータプログラムが、記憶部３０８にインストールされる。

コンピュータにインストールされ、コンピュータによって実行可能な状態とされるプログラムを記録する記録媒体は、図１８に示されるように、装置本体とは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM（Compact Disc-Read Only Memory）、DVD(Digital Versatile Disc)を含む）、光磁気ディスク（MD(Mini-Disc)（登録商標）を含む）、もしくは半導体メモリなどよりなるリムーバブルメディア３１１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される、プログラムが記録されているROM３０３または記憶部３０８に含まれるハードディスクなどで構成される。

なお、本明細書において、プログラム格納媒体に格納されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。

また、本明細書において、システムとは、複数の装置により構成される装置全体を表わすものである。

本発明を適用した監視システムの構成例を示す図である。 マルチセンサカメラの外観の構成例を示す図である。 図１のマルチセンサカメラの機能的構成例を示すブロック図である。 フォトセンサの監視領域を示す平面図である。 フォトセンサが出力するセンサデータの例を説明する図である。 図１のマルチセンサカメラ、処理ボックス、および呈示部の機能的構成例を示すブロック図である。 マルチセンサカメラにおける居住人数推定処理を説明するフローチャートである。 マルチセンサカメラにおける居住人数推定処理を説明するフローチャートである。 フォトセンサの監視領域内の人物の動きを説明する図である。 フォトセンサが出力するセンサデータの例を示す図である。 フォトセンサが出力するセンサデータの例を示す図である。 フォトセンサが出力するセンサデータの例を示す図である。 フォトセンサが出力するセンサデータの例を示す図である。 フォトセンサの反応から推定される人物の動きを説明する図である。 マルチセンサカメラにおける監視処理を説明するフローチャートである。 マルチセンサカメラにおける監視処理を説明するフローチャートである。 処理ボックスにおける処理を説明するフローチャートである。 汎用のパーソナルコンピュータの構成例を示すブロック図である。

符号の説明

１ マルチセンサカメラ， ２ 処理ボックス， ３ 呈示部， １０ 監視システム， １０１ ＣＣＤカメラ， １０２ フォトセンサ， １０３ 信号処理部， １０４ 送信部， １５１ センサデータ処理部， １５２ イベント検出部， １５３ 在宅人数推定部， １５４ 居住人数推定部， １５５ イベント通知制御部， １５６ データ蓄積部， １７１ 受信部， １７２ 呈示画像構築部

Claims (7)

1. 監視領域を監視するセンサと、
   前記センサの監視に基づいて、前記監視領域におけるイベントを検出するイベント検出手段と、
   前記イベント検出手段により検出された前記イベントに基づいて、前記監視により保護される空間内に存在する人の数を推定する推定手段と、
   前記推定手段により推定された前記空間内に存在する人の数の推移に基づいて、しきい値を設定する設定手段と、
   前記推定手段により推定された前記空間内に存在する人の数と前記設定手段により設定された前記しきい値との比較に基づいて、ユーザへの前記イベントの通知を制御する通知制御手段と
   を備える監視装置。
2. 前記推定手段は、前記イベント検出手段により、前記空間内への人の進入が検出されたとき、前記空間内に存在すると推定される人の数を増加し、前記空間内からの人の退出が検出されたとき、前記空間内に存在すると推定される人の数を減少することにより前記空間内に存在する人の数を推定する
   請求項１に記載の監視装置。
3. 前記センサは、複数のフォトセンサを含み、
   前記イベント検出手段は、前記複数のフォトセンサが反応した順序に基づいて、前記空間内への人の進入と、前記空間内からの人の退出を検出する
   請求項２に記載の監視装置。
4. 前記センサは、前記イベントを検出するための第１のセンサと、前記監視領域の監視に基づく画像データを出力する第２のセンサとを含み、
   前記通知制御手段は、前記第２のセンサによる前記画像データの出力もさらに制御する
   請求項１に記載の監視装置。
5. センサによる監視処理を実行する監視装置が、
   前記センサの監視に基づいて、監視領域におけるイベントを検出するイベント検出ステップと、
   前記イベント検出ステップの処理により検出された前記イベントに基づいて、前記監視により保護される空間内に存在する人の数を推定する推定ステップと、
   前記推定ステップの処理により推定された前記空間内に存在する人の数の推移に基づいて、しきい値を設定する設定ステップと、
   前記推定ステップの処理により推定された前記空間内に存在する人の数と前記設定ステップの処理により設定された前記しきい値との比較に基づいて、ユーザへの前記イベントの通知を制御する通知制御ステップと
   を含む監視方法。
6. センサによる監視処理を実行するコンピュータに、
   前記センサの監視に基づいて、監視領域におけるイベントを検出するイベント検出ステップと、
   前記イベント検出ステップの処理により検出された前記イベントに基づいて、前記監視により保護される空間内に存在する人の数を推定する推定ステップと、
   前記推定ステップの処理により推定された前記空間内に存在する人の数の推移に基づいて、しきい値を設定する設定ステップと、
   前記推定ステップの処理により推定された前記空間内に存在する人の数と前記設定ステップの処理により設定された前記しきい値との比較に基づいて、ユーザへの前記イベントの通知を制御する通知制御ステップと
   を含む処理を実行させるためのプログラムが記録されている記録媒体。
7. センサによる監視処理を実行するコンピュータに、
   前記センサの監視に基づいて、監視領域におけるイベントを検出するイベント検出ステップと、
   前記イベント検出ステップの処理により検出された前記イベントに基づいて、前記監視により保護される空間内に存在する人の数を推定する推定ステップと、
   前記推定ステップの処理により推定された前記空間内に存在する人の数の推移に基づいて、しきい値を設定する設定ステップと、
   前記推定ステップの処理により推定された前記空間内に存在する人の数と前記設定ステップの処理により設定された前記しきい値との比較に基づいて、ユーザへの前記イベントの通知を制御する通知制御ステップと
   を含む処理を実行させるためのプログラム。

Images