JP4605429B2 - 監視システム、情報処理装置および方法、記録媒体、並びにプログラム - Google Patents

Description

本発明は、監視システム、情報処理装置および方法、記録媒体、並びにプログラムに関し、特に、簡単かつ確実に必要なイベントを呈示できるようにすると共に、消費電力を抑えることができるようにした監視システム、情報処理装置および方法、記録媒体、並びにプログラムに関する。

従来、超音波センサと焦電式赤外線センサを備え、両方のセンサの出力に基づき、監視領域内の挙動不審者を検知する人体検知装置が提案されている（例えば、特許文献１参照）。
特開平１０‐１８８１４９号公報

しかしながら、ドップラ効果を利用する超音波センサは、センサの特性上、条件によりその出力が不安定になる場合があるが、特許文献１に記載されている発明では、その対策が考慮されておらず、挙動不審者の検知精度が低下してしまうという課題があった。

また、特許文献１に記載されている発明では、あらかじめ挙動不審者を検出するための身長や挙動時間などの条件を想定して、登録しなければならず、柔軟性にかけるという課題があった。

本発明は、このような状況に鑑みてなされたものであり、簡単かつ確実にユーザが必要とするイベントを呈示できるようにすると共に、消費電力を抑えることができるようにするものである。

本発明の監視システムは、監視領域の監視に基づく第１のデータを出力する第１のセンサと、監視領域の監視に基づく第２のデータを出力する第２のセンサと、監視領域を撮影する撮影手段と、第１のデータと、第２のデータに基づき調整した検出条件とに基づいて、監視領域におけるイベントの第１の状態を検出する第１のイベント検出手段と、第２のデータに基づいて、イベントの第２の状態を検出する第２のイベント検出手段と、イベントの第１の状態とイベントの第２の状態との組み合わせにより表されるイベントの特徴、および、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報に基づいて、イベントの通知の有無を判定する通知制御手段と、イベントを通知するように判定された場合、撮影手段により撮影される画像を呈示するように制御する呈示制御手段と、画像が呈示されたイベントに対してユーザにより入力される通知の必要性の評価、およびイベントの特徴に基づいて、イベント判定情報を更新する判定情報更新手段とを備える。

第１のイベント検出手段は、第２のデータに基づいて、イベントの第１の状態を検出する感度を変化させるように検出条件を調整するようにすることができる。

通知制御手段は、イベントを通知する場合に撮影手段の電源をオンし、イベントを通知しない場合に撮影手段の電源をオフするようにすることができる。

第１のセンサは、マイクロ波センサを含み、第２のセンサは、フォトセンサを含むようにすることができる。

第２のセンサは、複数のフォトセンサを含むようにすることができる。

第１のセンサ、第２のセンサ、撮影手段、第１のイベント検出手段、第２のイベント検出手段、通知制御手段、呈示制御手段、および判定情報更新手段は、第１の情報処理装置および第２の情報処理装置のいずれかに分離して配置されるようにすることができる。

第１の情報処理装置と第２の情報処理装置の間における通信は、無線通信により行われるようにすることができる。

第１の情報処理装置は、バッテリにより駆動されるようにすることができる。

本発明の第１の情報処理方法は、監視領域の監視に基づく第１のデータを出力する第１のセンサと、監視領域の監視に基づく第２のデータを出力する第２のセンサと、監視領域を撮影する撮影手段とを備える情報処理システムが、第１のデータと、第２のデータに基づき調整した検出条件とに基づいて、監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップと、第２のデータに基づいて、イベントの第２の状態を検出する第２のイベント検出ステップと、イベントの第１の状態とイベントの第２の状態との組み合わせにより表されるイベントの特徴、および、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報に基づいて、イベントの通知の有無を判定する通知制御ステップと、イベントを通知するように判定された場合、撮影手段により撮影される画像を呈示するように制御する呈示制御ステップと、画像が呈示されたイベントに対してユーザにより入力される通知の必要性の評価、およびイベントの特徴に基づいて、イベント判定情報を更新する判定情報更新ステップとを含む処理を実行する。

本発明の記録媒体に記録されている第１のプログラムは、第１のセンサによる監視領域の監視に基づき出力される第１のデータと、第２のセンサによる監視領域の監視に基づき出力される第２のデータに基づき調整した検出条件とに基づいて、監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップと、第２のデータに基づいて、イベントの第２の状態を検出する第２のイベント検出ステップと、イベントの第１の状態とイベントの第２の状態との組み合わせにより表されるイベントの特徴、および、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報に基づいて、イベントの通知の有無を判定する通知制御ステップと、イベントを通知するように判定された場合、監視領域を撮影した画像を呈示するように制御する呈示制御ステップと、画像が呈示されたイベントに対してユーザにより入力される通知の必要性の評価、およびイベントの特徴に基づいて、イベント判定情報を更新する判定情報更新ステップとを含む処理をコンピュータに実行させる。

本発明の第１のプログラムは、第１のセンサによる監視領域の監視に基づき出力される第１のデータと、第２のセンサによる監視領域の監視に基づき出力される第２のデータに基づき調整した検出条件とに基づいて、監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップと、第２のデータに基づいて、イベントの第２の状態を検出する第２のイベント検出ステップと、イベントの第１の状態とイベントの第２の状態との組み合わせにより表されるイベントの特徴、および、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報に基づいて、イベントの通知の有無を判定する通知制御ステップと、イベントを通知するように判定された場合、監視領域を撮影した画像を呈示するように制御する呈示制御ステップと、画像が呈示されたイベントに対してユーザにより入力される通知の必要性の評価、およびイベントの特徴に基づいて、イベント判定情報を更新する判定情報更新ステップとを含む処理をコンピュータに実行させる。

本発明の第１の情報処理理装置は、監視領域の監視に基づく第１のデータを出力する第１のセンサと、監視領域の監視に基づく第２のデータを出力する第２のセンサと、監視領域を撮影する撮影手段と、第１のデータと、第２のデータに基づき調整した検出条件とに基づいて、監視領域におけるイベントの第１の状態を検出する第１のイベント検出手段と、第２のデータに基づいて、イベントの第２の状態を検出する第２のイベント検出手段と、イベントの第１の状態とイベントの第２の状態との組み合わせにより表されるイベントの特徴、および、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報に基づいて、イベントの通知の有無を判定する通知制御手段と、イベントを通知するように判定された場合、撮影手段により撮影される画像、およびイベントの特徴を表す特徴データを他の情報処理装置に送信する送信手段と、イベント判定情報を他の情報処理装置から受信する受信手段とを備える。

第１のイベント検出手段は、第２のデータに基づいて、イベントの第１の状態を検出する感度を変化させるように検出条件を調整するようにすることができる。

通知制御手段は、イベントを通知する場合に撮影手段の電源をオンし、イベントを通知しない場合に撮影手段の電源をオフすることができる。

送信手段および受信手段による通信は、無線通信により行なわれるようにすることができる。

第１のセンサは、マイクロ波センサを含み、第２のセンサは、フォトセンサを含むようにすることができる。

第２のセンサは、複数のフォトセンサを含むようにすることができる。

バッテリにより駆動されるようにすることができる。

本発明の第２の情報処理方法は、監視領域の監視に基づく第１のデータを出力する第１のセンサと、監視領域の監視に基づく第２のデータを出力する第２のセンサと、監視領域を撮影する撮影手段とを備える情報処理装置が、第１のデータと、第２のデータに基づき調整した検出条件とに基づいて、監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップと、第２のデータに基づいて、イベントの第２の状態を検出する第２のイベント検出ステップと、イベントの第１の状態とイベントの第２の状態との組み合わせにより表されるイベントの特徴、および、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報に基づいて、イベントの通知の有無を判定する通知制御ステップと、イベントを通知するように判定された場合、撮影手段により撮影される画像、およびイベントの特徴を表す特徴データを他の情報処理装置に送信する送信ステップと、イベント判定情報を他の情報処理装置から受信する受信ステップとを含む処理を実行する。

本発明の記録媒体に記録されている第２のプログラムは、第１のセンサによる監視領域の監視に基づき出力される第１のデータと、第２のセンサによる監視領域の監視に基づき出力される第２のデータに基づき調整した検出条件とに基づいて、監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップと、第２のデータに基づいて、イベントの第２の状態を検出する第２のイベント検出ステップと、イベントの第１の状態とイベントの第２の状態との組み合わせにより表されるイベントの特徴、および、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報に基づいて、イベントの通知の有無を判定する通知制御ステップと、イベントを通知するように判定された場合、監視領域を撮影した画像、およびイベントの特徴を表す特徴データを他の情報処理装置に送信する送信ステップと、イベント判定情報を他の情報処理装置から受信する受信ステップとを含む処理をコンピュータに実行させる。

本発明の第２のプログラムは、第１のセンサによる監視領域の監視に基づき出力される第１のデータと、第２のセンサによる監視領域の監視に基づき出力される第２のデータに基づき調整した検出条件とに基づいて、監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップと、第２のデータに基づいて、イベントの第２の状態を検出する第２のイベント検出ステップと、イベントの第１の状態とイベントの第２の状態との組み合わせにより表されるイベントの特徴、および、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報に基づいて、イベントの通知の有無を判定する通知制御ステップと、イベントを通知するように判定された場合、監視領域を撮影した画像、およびイベントの特徴を表す特徴データを他の情報処理装置に送信する送信ステップと、イベント判定情報を他の情報処理装置から受信する受信ステップとを含む処理をコンピュータに実行させる。

本発明の第２の情報処理装置は、第１のセンサによる監視領域の監視に基づき検出されたイベントの第１の状態と、第２のセンサによる監視領域の監視に基づき検出されたイベントの第２の状態との組み合わせにより表されるイベントの特徴を表わす特徴データ、および、監視領域を撮影した画像を他の情報処理装置から受信する受信手段と、画像の呈示を制御する呈示制御手段と、画像が呈示されたイベントに対してユーザにより入力された通知の必要性の評価、および、イベントの特徴に基づいて、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報を更新する判定情報更新手段と、更新されたイベント判定情報を他の情報処理装置に送信する送信手段とを備える。

更新されたイベント判定情報を蓄積するイベント判定情報蓄積手段をさらに備えるようにすることができる。

本発明の第３の情報処理方法は、情報処理装置が、第１のセンサによる監視領域の監視に基づき検出されたイベントの第１の状態と、第２のセンサによる監視領域の監視に基づき検出されたイベントの第２の状態との組み合わせにより表されるイベントの特徴を表わす特徴データ、および、監視領域を撮影した画像を他の情報処理装置から受信する受信ステップと、画像の呈示を制御する呈示制御ステップと、画像が呈示されたイベントに対してユーザにより入力された通知の必要性の評価、および、イベントの特徴に基づいて、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報を更新する判定情報更新ステップと、更新されたイベント判定情報を他の情報処理装置に送信する送信ステップとを含む処理を実行する。

本発明の記録媒体に記録されている第３のプログラムは、第１のセンサによる監視領域の監視に基づき検出されたイベントの第１の状態と、第２のセンサによる監視領域の監視に基づき検出されたイベントの第２の状態との組み合わせにより表されるイベントの特徴を表わす特徴データ、および、監視領域を撮影した画像を他の情報処理装置から受信する受信ステップと、画像の呈示を制御する呈示制御ステップと、画像が呈示されたイベントに対してユーザにより入力された通知の必要性の評価、および、イベントの特徴に基づいて、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報を更新する判定情報更新ステップと、更新されたイベント判定情報を他の情報処理装置に送信する送信ステップとを含む処理をコンピュータに実行させる。

本発明の第３のプログラムは、第１のセンサによる監視領域の監視に基づき検出されたイベントの第１の状態と、第２のセンサによる監視領域の監視に基づき検出されたイベントの第２の状態との組み合わせにより表されるイベントの特徴を表わす特徴データ、および、監視領域を撮影した画像を他の情報処理装置から受信する受信ステップと、画像の呈示を制御する呈示制御ステップと、画像が呈示されたイベントに対してユーザにより入力された通知の必要性の評価、および、イベントの特徴に基づいて、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報を更新する判定情報更新ステップと、更新されたイベント判定情報を他の情報処理装置に送信する送信ステップとを含む処理をコンピュータに実行させる。

本発明の監視システム、第１の情報処理方法、記録媒体に記録されている第１のプログラム、およびの第１のプログラムにおいては、第１のセンサによる監視領域の監視に基づき出力される第１のデータと、第２のセンサによる監視領域の監視に基づき出力される第２のデータに基づき調整した検出条件とに基づいて、監視領域におけるイベントの第１の状態が検出され、第２のデータに基づいて、イベントの第２の状態が検出され、イベントの第１の状態とイベントの第２の状態との組み合わせにより表されるイベントの特徴、および、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報に基づいて、イベントの通知の有無が判定され、イベントを通知するように判定された場合、監視領域を撮影した画像を呈示するように制御され、画像が呈示されたイベントに対してユーザにより入力される通知の必要性の評価、およびイベントの特徴に基づいて、イベント判定情報が更新される。

本発明の第１の情報処理装置、第２の情報処理方法、記録媒体に記録されている第２のプログラム、およびの第２のプログラムにおいては、第１のセンサによる監視領域の監視に基づき出力される第１のデータと、第２のセンサによる監視領域の監視に基づき出力される第２のデータに基づき調整した検出条件とに基づいて、監視領域におけるイベントの第１の状態が検出され、第２のデータに基づいて、イベントの第２の状態が検出され、イベントの第１の状態とイベントの第２の状態との組み合わせにより表されるイベントの特徴、および、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報に基づいて、イベントの通知の有無が判定され、イベントを通知するように判定された場合、監視領域を撮影した画像、およびイベントの特徴を表す特徴データが他の情報処理装置に送信され、イベント判定情報が他の情報処理装置から受信される。

本発明の第２の情報処理装置、第３の情報処理方法、記録媒体に記録されている第３のプログラム、およびの第３のプログラムにおいては、第１のセンサによる監視領域の監視に基づき検出されたイベントの第１の状態と、第２のセンサによる監視領域の監視に基づき検出されたイベントの第２の状態との組み合わせにより表されるイベントの特徴を表わす特徴データ、および、監視領域を撮影した画像が他の情報処理装置から受信され、画像の呈示が制御され、画像が呈示されたイベントに対してユーザにより入力された通知の必要性の評価、および、イベントの特徴に基づいて、イベントの特徴によりイベントの通知の必要性を判定するイベント判定情報が更新され、更新されたイベント判定情報が他の情報処理装置に送信される。

本発明によれば、イベントを通知することができる。特に、この発明によれば、ユーザが必要とするイベントの情報を、有効に活用することができる。その結果、ユーザに必要充分な量の情報を、簡単かつ確実に、少ない電力で提供することができる。

以下に本発明の実施の形態を説明するが、本明細書に記載の発明と、実施の形態との対応関係を例示すると、次のようになる。この記載は、本明細書には記載されているが、発明に対応するものとして、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その発明に対応するものではないことを意味するものではない。逆に、実施の形態が発明に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その発明以外の発明には対応しないものであることを意味するものでもない。

さらに、この記載は、本明細書に記載されている発明が、全て請求されていることを意味するものではない。換言すれば、この記載は、本明細書に記載されている発明であって、この出願では請求されていない発明の存在、すなわち、将来、分割出願されたり、補正により出現したり、追加される発明の存在を否定するものではない。

本発明によれば、監視システムが提供される。この監視システム（例えば、図１の監視システム１０）は、監視領域の監視に基づく第１のデータを出力する第１のセンサ（例えば、図４のマイクロ波センサ２３）と、前記監視領域の監視に基づく第２のデータを出力する第２のセンサ（例えば、図４のフォトセンサ２２−１乃至２２−３）と、前記監視領域を撮影する撮影手段（例えば、図４のCCDカメラ２１）と、前記第１のデータと、前記第２のデータに基づき調整した検出条件とに基づいて、前記監視領域におけるイベントの第１の状態を検出する第１のイベント検出手段（例えば、図４のマイクロ波センサ縮退処理部５４）と、前記第２のデータに基づいて、前記イベントの第２の状態を検出する第２のイベント検出手段（例えば、図４のフォトセンサ縮退処理部５２）と、前記イベントの第１の状態と前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴、および、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報に基づいて、前記イベントの通知の有無を判定する通知制御手段（例えば、図４のイベント通知判定部５６）と、前記イベントを通知するように判定された場合、前記撮影手段により撮影される画像を呈示するように制御する呈示制御手段（例えば、図５の呈示画像構築部７２）と、前記画像が呈示された前記イベントに対してユーザにより入力される通知の必要性の評価、および前記イベントの特徴に基づいて、前記イベント判定情報を更新する判定情報更新手段（例えば、図５の通知判定テーブル更新部７４）とを備える。

この監視システム（例えば、図１の監視システム１０）においては、前記第１のセンサ、前記第２のセンサ、前記撮影手段、前記第１のイベント検出手段、前記第２のイベント検出手段、前記通知制御手段、前記呈示制御手段、および前記判定情報更新手段は、第１の情報処理装置（例えば、図１のマルチセンサカメラ１）、および第２の情報処理装置（例えば、図１の処理ボックス２）のいずれかに分離して配置されるようにすることができる。

本発明によれば、情報処理方法が提供される。この情報処理方法は、監視領域の監視に基づく第１のデータを出力する第１のセンサ（例えば、図４のマイクロ波センサ２３）と、前記監視領域の監視に基づく第２のデータを出力する第２のセンサ（例えば、図４のフォトセンサ２２−１乃至２２−３）と、前記監視領域を撮影する撮影手段（例えば、図４のCCDカメラ２１）とを備える情報処理システム（例えば、図１の監視システム１０）が、前記第１のデータと、前記第２のデータに基づき調整した検出条件とに基づいて、前記監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップ（例えば、図２４のステップＳ２４）と、前記第２のデータに基づいて、前記イベントの第２の状態を検出する第２のイベント検出ステップ（例えば、図２４のステップＳ２３）と、前記イベントの第１の状態と前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴、および、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報に基づいて、前記イベントの通知の有無を判定する通知制御ステップ（例えば、図２２のステップＳ８およびＳ９）と、前記イベントを通知するように判定された場合、前記撮影手段により撮影される画像を呈示するように制御する呈示制御ステップ（例えば、図２７のステップＳ１０３）と、前記画像が呈示された前記イベントに対してユーザにより入力される通知の必要性の評価、および前記イベントの特徴に基づいて、前記イベント判定情報を更新する判定情報更新ステップ（例えば、図２７のステップＳ１１５）とを含む。

本発明によれば、プログラムが提供される。このプログラムは、第１のセンサ（例えば、図４のマイクロ波センサ２３）による監視領域の監視に基づき出力される第１のデータと、第２のセンサ（例えば、図４のフォトセンサ２２−１乃至２２−３）による前記監視領域の監視に基づき出力される第２のデータに基づき調整した検出条件とに基づいて、前記監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップ（例えば、図２４のステップＳ２４）と、前記第２のデータに基づいて、前記イベントの第２の状態を検出する第２のイベント検出ステップ（例えば、図２４のステップＳ２３）と、前記イベントの第１の状態と前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴、および、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報に基づいて、前記イベントの通知の有無を判定する通知制御ステップ（例えば、図２２のステップＳ８およびＳ９）と、前記イベントを通知するように判定された場合、前記監視領域を撮影した画像を呈示するように制御する呈示制御ステップ（例えば、図２７のステップＳ１０３）と、前記画像が呈示された前記イベントに対してユーザにより入力される通知の必要性の評価、および前記イベントの特徴に基づいて、前記イベント判定情報を更新する判定情報更新ステップ（例えば、図２７のステップＳ１１５）とを含む。

本発明によれば、情報処理装置が提供される。この情報処理装置（例えば、図１のマルチセンサカメラ１）は、監視領域の監視に基づく第１のデータを出力する第１のセンサ（例えば、図４のマイクロ波センサ２３）と、前記監視領域の監視に基づく第２のデータを出力する第２のセンサ（例えば、図４のフォトセンサ２２−１乃至２２−３）と、前記監視領域を撮影する撮影手段（例えば、図４のCCDカメラ２１）と、前記第１のデータと、前記第２のデータに基づき調整した検出条件とに基づいて、前記監視領域におけるイベントの第１の状態を検出する第１のイベント検出手段（例えば、図４のマイクロ波センサ縮退処理部５４）と、前記第２のデータに基づいて、前記イベントの第２の状態を検出する第２のイベント検出手段（例えば、図４のフォトセンサ縮退処理部５２）と、前記イベントの第１の状態と前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴、および、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報に基づいて、前記イベントの通知の有無を判定する通知制御手段（例えば、図４のイベント通知判定部５６）と、前記イベントを通知するように判定された場合、前記撮影手段により撮影される画像、および前記イベントの特徴を表す特徴データを他の情報処理装置（例えば、図１の処理ボックス２）に送信する送信手段（例えば、図４の送信部５９）と、前記イベント判定情報を前記他の情報処理装置から受信する受信手段（例えば、図４の受信部６０）とを備える。

本発明によれば、情報処理方法が提供される。この情報処理方法は、監視領域の監視に基づく第１のデータを出力する第１のセンサ（例えば、図４のマイクロ波センサ２３）と、前記監視領域の監視に基づく第２のデータを出力する第２のセンサ（例えば、図４のフォトセンサ２２−１乃至２２−３）と、前記監視領域を撮影する撮影手段（例えば、図４のCCDカメラ２１）とを備える情報処理装置（例えば、図１のマルチセンサカメラ１）が、前記第１のデータと、前記第２のデータに基づき調整した検出条件とに基づいて、前記監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップ（例えば、図２４のステップＳ２４）と、前記第２のデータに基づいて、前記イベントの第２の状態を検出する第２のイベント検出ステップ（例えば、図２４のステップＳ２３）と、前記イベントの第１の状態と前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴、および、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報に基づいて、前記イベントの通知の有無を判定する通知制御ステップ（例えば、図２２のステップＳ８およびＳ９）と、前記イベントを通知するように判定された場合、前記撮影手段により撮影される画像、および前記イベントの特徴を表す特徴データを他の情報処理装置（例えば、図１の処理ボックス２）に送信する送信ステップ（例えば、図２２のステップＳ１１）と、前記イベント判定情報を前記他の情報処理装置から受信する受信ステップ（例えば、図２２のステップＳ１２）とを含む。

本発明によれば、プログラムが提供される。このプログラムは、第１のセンサ（例えば、図４のマイクロ波センサ２３）による監視領域の監視に基づき出力される第１のデータと、第２のセンサ（例えば、図４のフォトセンサ２２−１乃至２２−３）による前記監視領域の監視に基づき出力される第２のデータに基づき調整した検出条件とに基づいて、前記監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップ（例えば、図２４のステップＳ２４）と、前記第２のデータに基づいて、前記イベントの第２の状態を検出する第２のイベント検出ステップ（例えば、図２４のステップＳ２３）と、前記イベントの第１の状態と前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴、および、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報に基づいて、前記イベントの通知の有無を判定する通知制御ステップ（例えば、図２２のステップＳ８およびＳ９）と、前記イベントを通知するように判定された場合、前記監視領域を撮影した画像、および前記イベントの特徴を表す特徴データを他の情報処理装置（例えば、図１の処理ボックス２）に送信する送信ステップ（例えば、図２２のステップＳ１１）と、前記イベント判定情報を前記他の情報処理装置から受信する受信ステップ（例えば、図２２のステップＳ１２）とを含む。

本発明によれば、情報処理装置が提供される。この情報処理装置（例えば、図１の処理ボックス２）は、第１のセンサ（例えば、図４のマイクロ波センサ２３）による監視領域の監視に基づき検出されたイベントの第１の状態と、第２のセンサ（例えば、図４のフォトセンサ２２−１乃至２２−３）による前記監視領域の監視に基づき検出された前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴を表わす特徴データ、および、前記監視領域を撮影した画像を他の情報処理装置（例えば、図１のマルチセンサカメラ１）から受信する受信手段（例えば、図５の受信部７１）と、前記画像の呈示を制御する呈示制御手段（例えば、図５の呈示画像構築部７２）と、前記画像が呈示された前記イベントに対してユーザにより入力された通知の必要性の評価、および、前記イベントの特徴に基づいて、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報を更新する判定情報更新手段（例えば、図５の通知判定テーブル更新部７４）と、更新された前記イベント判定情報を前記他の情報処理装置に送信する送信手段（例えば、図５の送信部７５）とを備える。

この情報処理装置（例えば、図１の処理ボックス２）は、更新された前記イベント判定情報を蓄積するイベント判定情報蓄積手段（例えば、図２１の過去通知判定テーブル蓄積部２１７）をさらに備えるようにすることができる。

本発明によれば、情報処理方法が提供される。この情報処理方法は、情報処理装置（例えば、図１の処理ボックス２）が、第１のセンサ（例えば、図４のマイクロ波センサ２３）による監視領域の監視に基づき検出されたイベントの第１の状態と、第２のセンサ（例えば、図４のフォトセンサ２２−１乃至２２−３）による前記監視領域の監視に基づき検出された前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴を表わす特徴データ、および、前記監視領域を撮影した画像を他の情報処理装置（例えば、図１のマルチセンサカメラ１）から受信する受信ステップ（例えば、図２７のステップＳ１０４、ステップＳ１０６）と、前記画像の呈示を制御する呈示制御ステップ（例えば、図２７のステップＳ１０３）と、前記画像が呈示された前記イベントに対してユーザにより入力された通知の必要性の評価、および、前記イベントの特徴に基づいて、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報を更新する判定情報更新ステップ（例えば、図２７のステップＳ１１５）と、更新された前記イベント判定情報を前記他の情報処理装置に送信する送信ステップ（例えば、図２７のステップＳ１１６）とを含む。

本発明によれば、プログラムが提供される。このプログラムは、情報処理装置（例えば、図１の処理ボックス２）が、第１のセンサ（例えば、図４のマイクロ波センサ２３）による監視領域の監視に基づき検出されたイベントの第１の状態と、第２のセンサ（例えば、図４のフォトセンサ２２−１乃至２２−３）による前記監視領域の監視に基づき検出された前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴を表わす特徴データ、および、前記監視領域を撮影した画像を他の情報処理装置（例えば、図１のマルチセンサカメラ１）から受信する受信ステップ（例えば、図２７のステップＳ１０４、ステップＳ１０６）と、前記画像の呈示を制御する呈示制御ステップ（例えば、図２７のステップＳ１０３）と、前記画像が呈示された前記イベントに対してユーザにより入力された通知の必要性の評価、および、前記イベントの特徴に基づいて、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報を更新する判定情報更新ステップ（例えば、図２７のステップＳ１１５）と、更新された前記イベント判定情報を前記他の情報処理装置に送信する送信ステップ（例えば、図２７のステップＳ１１６）とを含む処理をコンピュータに実行させる。

以下、図を参照して、本発明の実施の形態について説明する。

図１は、本発明を適用した監視システム１０の構成例を表している。この構成例においては、図中左側の監視領域側にマルチセンサカメラ１が備えられており、図中右側の通知・呈示側に、処理ボックス２、呈示部３、および、処理ボックス２を遠隔操作するためのリモートコントローラ４が備えられている。マルチセンサカメラ１と処理ボックス２は、無線アンテナ１Ａと無線アンテナ２Ａを介して、相互に無線通信を行なう。処理ボックス２とリモートコントローラ４は、相互に無線通信あるいは赤外線通信を行う。処理ボックス２と呈示部３は、バスなどの有線あるいは無線により接続されている。なお、マルチセンサカメラ１と処理ボックス２は、無線通信に限られるものではなく、有線による通信であってもよい。

マルチセンサカメラ１は、イベントを監視したい領域（必要な場所）に設置されている。マルチセンサカメラ１には、例えば、図２に示されるように、CCD（Charge Coupled Device）カメラ２１、フォトセンサ２２−１乃至２２−３、およびマイクロ波センサ２３の３種類のセンサが設けられており、各センサは、図示せぬバッテリにより駆動される。

CCDカメラ２１は、監視領域（視野角）内の状況を随時撮影する。その詳細は後述するが、マルチセンサカメラ１は、フォトセンサ２２−１乃至２２−３およびマイクロ波センサ２３で検出されたイベントに基づいて、イベントデータを通知するか否かを判定し、イベントデータを通知すると判定した場合、CCDカメラ２１で撮影された画像データ（イベントデータ）を処理ボックス２に送信する。

フォトセンサ２２−１乃至２２−３は、図３に示されるように、自己が監視することが可能な領域３１−１乃至３１−３内の平均輝度をセンサデータとして出力しており、人物が領域３１−１乃至３１−３内に進入または退出したことに応じて、その出力が変化する。

マイクロ波センサ２３は、マイクロ波を発生し、図３に示されるように、自己が監視することが可能な領域３２内に照射しており、そのマイクロ波が人物（監視対象）に当たって反射されたときの反射波を検知し、反射波が基準の位相より進んでいるか、または遅れているかを表わすセンサデータを生成する。この位相の進みと遅れは、ドップラ効果によるものであり、物体の接近または離反に対応している。

以下、フォトセンサ２２−１乃至２２−３およびマイクロ波センサ２３が監視することが可能な領域３１−１乃至３１−３および領域３２を、単に、監視領域３１−１乃至３１−３、および監視領域３２と記載する。なお、図３の例では、マイクロ波センサ２３の監視領域３２は、フォトセンサ２２−１乃至２２−３の監視領域３１−１乃至３１−３を合わせた監視領域に比べ、その領域（視野角）が狭くなっている。

図１の説明に戻る。マルチセンサカメラ１は、イベントを通知すると判定した場合、無線アンテナ１Ａを介して、イベント呈示に必要なデータを処理ボックス２に送信する。

処理ボックス２は、マルチセンサカメラ１から送信されてきたイベント呈示に必要なデータを、無線アンテナ２Ａを介して受信し、その受信データに基づいて呈示画像および音声を構築し、呈示部３およびリモートコントローラ４に供給または送信して、イベントを呈示させる。

呈示部３は、例えば、一般のテレビジョン受像機とされ、イベントが発生していない場合（通常の場合）、一般の視聴信号（放送信号に基づく映像）を表示し、イベントが発生した場合、一般の視聴信号の一部分にイベント画像が挿入されたピクチャインピクチャの画像を表示する。なお、呈示部３は、テレビジョン受像機に限定されるものではなく、専用のモニタでもよい。また、表示される画像は、ピクチャインピクチャの画像ではなく、画面全体の画像としてもよい。

ユーザは、呈示部３に呈示されたイベントに対して、判断を行ない、その判断の結果に基づいて、リモートコントローラ４から各種指令を入力することができる。例えば、いま発生したイベントを今後も知らせて欲しいときは、その旨を、OKボタン（図示せず）を操作し、いま発生したイベントを今後は知らせなくてもよいときは、その旨を、NGボタン（図示せず）を操作して指示入力することができる。このユーザからの判断の入力に基づいて、処理ボックス２で作成される、イベントを通知するか否かを判定する際に用いられる（図２０を参照して後述する）が時間とともに変化するため、ユーザが監視システム１０を使用する度にユーザが意図するイベントのみが検知され、通知されるようになる。

またマルチセンサカメラ１に搭載されるCCDカメラ２１は、イベントを通知すると判定された場合にのみ動作するため、無駄な消費電力を抑えることができる。

図４と図５は、図１の監視システム１０の機能的構成例を示すブロック図である。図４は、図１に示した監視システム１０のマルチセンサカメラ１の機能的構成例を示すブロック図であり、図５は、図１に示した監視システム１０の処理ボックス２、呈示部３およびリモートコントローラ４の機能的構成例を示すブロック図である。

まず、図４を参照して、監視システム１０のマルチセンサカメラ１の機能的構成例について説明する。

マルチセンサカメラ１のCCDカメラ２１は、監視領域内の状況を随時撮影し、画像信号を通知画像データとしてスイッチ５８を介して送信部５９に供給する。

フォトセンサ２２−１乃至２２−３は、監視領域３１−１乃至３１−３（図３）内の平均輝度をセンサデータとしてＡ／Ｄ変換部５１−１乃至５１−３に供給する。Ａ／Ｄ変換部５１−１乃至５１−３は、供給されたアナログのセンサデータを一定の間隔でデジタルデータにA／D変換して、フォトセンサ縮退処理部５２およびフォトセンサ出力選択部５３に供給する。

ここで、図６を参照して、フォトセンサ２２−１が出力するセンサデータ１０１の出力レベルの変化と人物の行動との関係について説明する。同図において、縦軸はフォトセンサ２２−１が出力するセンサデータの出力レベルを表わし、横軸は時間を表わしている。また、基準値Ｌは、人物が監視領域３１−１内に侵入していない場合のセンサ出力値であり、背景の平均輝度に対応している。

反応区間Ｘは、フォトセンサ２２−１が出力するセンサデータ１０１の出力レベルが基準値Ｌから変化している区間（時間）であり、人物が監視領域３１−１内に存在していることを表わしている。この反応区間Ｘにおいて、センサデータ１０１の出力レベルが基準値Ｌから離れる方向（図６の例の場合、正の方向に離れているが、負の方向に離れる場合もある）に変化する区間Ａは、人物が監視領域３１−１内に徐々に進入しているか、または監視領域３１−１内でフォトセンサ２２−１に徐々に接近していることを表わし、センサデータ１０１の出力レベルが変化しない区間Ｂは、人物が監視領域３１−１内で行動していない（静止している）ことを表わし、センサデータ１０１の出力レベルが基準値Ｌに近づく方向（図６の例の場合、負の方向に近づいているが、正の方向に近づく場合もある）に変化する区間Ｃは、人物が監視領域３１−１から徐々に退出しているか、または監視領域３１−１内でフォトセンサ２２−１から徐々に離反していることを表わしている。

このように、フォトセンサ２２−１が出力するセンサデータ１０１の出力レベルの変化および変化する方向に応じて、監視領域３１−１内における人物の行動をおおよそ推定することができる。

なお、図６に示すセンサデータ１０１は、人物に対する平均輝度の出力レベルが基準値（背景に対する平均輝度）Ｌより高い場合の特性を表わしており、人物に対する平均輝度の出力レベルが基準値Ｌより低い場合には、センサデータ１０１の出力変化は、負の方向に変化する。

また、フォトセンサ２２−２，２２−３が出力するセンサデータの出力レベルの変化と人物の行動との関係は、上述したフォトセンサ２２−１の場合と同様であり、その説明は省略する。

図４の説明に戻る。図６を参照して説明したように、フォトセンサ２２−１乃至２２−３からは、Ａ／Ｄ変換部５１−１乃至５１−３を介して、監視領域の平均輝度に基づいた出力値を持つセンサデータが時々刻々と出力される。同じようなイベントでもその出力値は少しずつ異なるため、その出力値に基づき、人物の行動（イベント）を解析し、パターン化する場合、解析処理が複雑になり、またイベントのパターンが不必要に細かく分類されてしまう。そのため、細かく分類されたイベントのパターンから、ユーザが通知を必要とするイベントを抽出するために、ユーザに対して、通知が必要か否かを判断する入力が過度に要求されることになる。さらに、センサデータをそのまま扱ったのでは、時間の経過とともに蓄積されるデータ量が大きくなってしまう。そこで、フォトセンサ縮退処理部５２は、フォトセンサ２２−１乃至２２−３が出力するセンサデータから、人物の行動パターンを簡単かつ正確に分類するために、フォトセンサ２２−１乃至２２−３の検出状態をパターン化（以下、縮退処理と称する）する。

具体的には、フォトセンサ縮退処理部５２は、フォトセンサ２２−１乃至２２−３からＡ／Ｄ変換部５１−１乃至５１−３を介して供給されたセンサデータに基づいて、出力レベルが基準値Ｌから離れている（反応している）フォトセンサのうち、最も直近に反応を開始したフォトセンサの番号をフォトセンサ２２−１乃至２２−３の検出状態を表わす番号（以下、フォトセンサ状態番号と称する）とする。監視システム１０では、フォトセンサ状態番号とその継続時間により、図７を参照して後述するように、フォトセンサ２２−１乃至２２−３により検出されたイベントのパターンが表わされる（記述される）。

フォトセンサ縮退処理部５２は、求めたフォトセンサの状態番号およびその状態の継続時間をフォトセンサ出力選択部５３および状態記述部５５に供給する。

以下、本実施の形態では、フォトセンサ２２−１の番号を“１”とし、フォトセンサ２２−２の番号を“２”とし、フォトセンサ２２−３の番号を“３”として説明する。従って、最も直近に反応したフォトセンサが、フォトセンサ２２−１の場合、フォトセンサ状態番号は状態番号１とされ、フォトセンサ２２−２の場合、フォトセンサ状態番号は状態番号２とされ、フォトセンサ２２−３の場合、フォトセンサ状態番号は状態番号３とされる。いずれのフォトセンサも反応していないと判定された場合、フォトセンサ状態番号は、状態番号０とされる。

ここで、図７を参照して、フォトセンサ縮退処理部５２により、人物の行動に応じて求められるフォトセンサ状態番号の例について説明する。

図７は、人物１１１が、フォトセンサ２２−１乃至２２−３の監視領域３１−１乃至３１−３において、図中矢印で示される方向に（図中、左から右方向にマルチセンサカメラ１の前を水平に横切るように）行動している様子を模式的に示している。フォトセンサ２２−１乃至２２−３は、それぞれ、常時、監視領域３１−１乃至３１−３内の平均輝度をセンサデータとして出力しており、図７Ａに示されるように人物１１１が行動した場合、それに対応して、センサデータ１０１の出力レベルが変化する（図６）。

フォトセンサ縮退処理部５２は、フォトセンサ２２−１乃至２２−３からそれぞれＡ／Ｄ変換部５１−１乃至５１−３を介して供給されたセンサデータに基づき、最も直近に出力レベルが基準値Ｌから離れた（反応した）フォトセンサの番号をフォトセンサ状態番号として求めるとともに、そのフォトセンサのセンサデータ１０１の出力レベルが基準値Ｌから離れている区間（図６に示す反応区間Ｘ）をその状態の継続時間として求め、出力する。例えば、図７Ａに示される例の場合、図７Ｂに示されるように、フォトセンサ縮退処理部５２から、状態番号３およびその継続時間ｔａが出力され、次に状態番号２およびその継続時間ｔｂが出力され、最後に状態番号１およびその継続時間ｔｃが出力される。

以上のフォトセンサ縮退処理部５２によるフォトセンサのセンサデータの縮退処理により、監視領域３１−１乃至３１−３で発生したイベントに対するフォトセンサ２２−１乃至２２−３の検出状態が、簡単かつ正確にパターン化される。また、監視領域内の人物１１１の横方向の動きが規定されるようになる。

図４の説明に戻る。フォトセンサ出力選択部５３は、フォトセンサ２２−１乃至２２−３からＡ／Ｄ変換部５１−１乃至５１−３を介して供給されたセンサデータ、およびフォトセンサ縮退処理部５２から供給されたフォトセンサ状態番号に基づいて、最も直近に反応が始まったフォトセンサの出力値をマイクロ波センサ縮退処理部５４に出力する。

例えば、フォトセンサ縮退処理部５２からフォトセンサ状態番号として状態番号１が入力された場合、フォトセンサ出力選択部５３は、フォトセンサ２２−１の出力値をマイクロ波センサ縮退処理部５４に出力する。同様に、フォトセンサ出力選択部５３は、状態番号２が入力された場合、フォトセンサ２２−２の出力値を、状態番号３が入力された場合、フォトセンサ２２−３の出力値を、マイクロ波センサ縮退処理部５４にそれぞれ出力する。

フォトセンサ出力選択部５３は、フォトセンサ縮退処理部５２から状態番号０が入力された（どのフォトセンサも反応していない）場合、出力値０を出力する。また、フォトセンサ出力選択部５３は、周囲が明るすぎるなどの要因により、フォトセンサの定常状態の出力値（図６のセンサデータ１０１の基準値Ｌ）が高すぎたり、あるいは低すぎたりして、フォトセンサが使用できない環境にあると判定した場合、フォトセンサ２２−１乃至２２−３が機能していないことを通知する信号（以下、フォトセンサ使用不可信号と称する）をマイクロ波センサ縮退処理部５４、およびイベント通知判定部５６に出力する。

マイクロ波センサ２３は、監視領域３２（図３）内にマイクロ波を照射しており、接近の反応を表わすセンサデータを接近ポート４１からＡ／Ｄ変換部５１−４に供給し、離反の反応を表わすセンサデータを離反ポート４２からＡ／Ｄ変換部５１−５に供給する。Ａ／Ｄ変換部５１−４，５１−５は、供給されたアナログのセンサデータを一定の間隔でデジタルデータにＡ／Ｄ変換して、マイクロ波センサ縮退処理部５４に供給する。

ここで、図８と図９を参照して、マイクロ波センサ２３の原理について説明する。

図８は、マイクロ波センサ２３の監視領域３２内において、人物１１１−１，１１１−２が、それぞれ、図中矢印で示されるように、マイクロ波センサ２３に接近または離反している様子を模式的に示している。マイクロ波センサ２３は、常時、監視領域３２内にマイクロ波を照射しており、図８に示されるように、センサを中心とした円周に対し人物１１１−１がほぼ垂直に接近するように行動した場合、それに対応して、例えば、図９Ａに示されるような接近の反応を表わすセンサデータ１２１を接近ポート４１から出力する。またマイクロ波センサ２３は、センサを中心とした円周に対し人物１１１−２がほぼ垂直に離反するように行動した場合、それに対応して、例えば、図９Ｂに示されるような離反の反応を表わすセンサデータ１２２を離反ポート４２から出力する。同図において、縦軸はマイクロ波センサ２３が出力するセンサデータの出力レベルを表わし、横軸は時間を表わしている。

なお、センサデータ１２１，１２２は、いずれも２値出力とされ、図９A，図９Ｂに示されるセンサデータは高レベルの出力であり、説明を簡単にするために、低レベルの出力の表示は省略している。以下、同様に、マイクロ波センサ２３から出力されるセンサデータの例を示す場合は、低レベルの出力は省略して表示する。

高レベルのセンサデータは、接近ポート４１あるいは離反ポート４２のいずれからのみ出力され、同時に両方のポートから出力されることはない。

図４の説明に戻る。マイクロ波センサ縮退処理部５４は、フォトセンサ縮退処理部５２と同様に、マイクロ波センサ２３が出力するセンサデータの縮退処理を行う。

マイクロ波センサ縮退処理部５４は、図示せぬバッファを持ち、マイクロ波センサ２３の接近ポート４１および離反ポート４２からＡ／Ｄ変換部５１−４，５１−５を介して供給されたマイクロ波センサ２３のセンサデータをバッファに蓄積する。そのバッファ内に蓄積されているマイクロ波センサデータのうち、直近の所定の期間（以下、バッファサイズと称する）に蓄積された接近ポート４１から出力された接近反応を示す高レベルのデータ（以下、接近反応データと称する）の個数および離反ポート４２から出力された離反反応を示す高レベルのデータ（以下、離反反応データと称する）の個数が、所定のしきい値（以下、他のしきい値と区別するために、反応しきい値と称する）以上か否かを判定することにより、マイクロ波センサ２３が接近反応しているか、あるいは離反反応しているかを判定する。なお、マイクロ波センサ２３のバッファには、バッファサイズより長い期間マイクロ波センサデータが蓄積される。

図１０は、マイクロ波センサ縮退処理部５４に入力されるマイクロ波センサ２３のセンサデータの例を示す図である。矢印１３１で示される期間をバッファサイズとし、マイクロ波センサ縮退処理部５４が、離反反応データ１２２が全て入力された時点でマイクロ波センサ２３の反応を判定する場合、マイクロ波センサ縮退処理部５４は、矢印１３１で示される期間にバッファに蓄積されたマイクロ波センサデータの個数に基づき、マイクロ波センサ２３の反応を判定する（以下、マイクロ波センサ反応判定処理と称する）。この場合、矢印１３１で示される期間にバッファに蓄積された接近反応データ１２１の個数は４であり、離反反応データ１２２の個数は２である。従って、例えば反応しきい値を３とした場合、接近反応データ１２１の個数４が反応しきい値３を超えており、マイクロ波センサ縮退処理部５４は、マイクロ波センサ２３が接近反応していると判定する。

図１１は、マイクロ波センサ縮退処理部５４により求められるマイクロ波センサ２３の検出状態を表わす番号（以下、マイクロ波センサ状態番号と称する）を示す図である。マイクロ波センサ状態番号は、図１０を参照して上述したマイクロ波センサ反応判定処理により、マイクロ波センサ２３が接近反応していると判定された場合、状態番号１とされ、マイクロ波センサ２３が離反反応していると判定された場合、状態番号２とされ、マイクロ波センサ２３が接近反応も離反反応もしていないと判定された場合、状態番号０とされる。

直近のバッファサイズの期間にマイクロ波センサ縮退処理部５４のバッファ内に蓄積された接近反応データ数および離反反応データ数がともに反応しきい値以上となり、マイクロ波センサ反応処理により、接近反応と離反反応の両方の反応をしていると判定された場合、直近の反応（直近にマイクロ波センサ２３から出力された高レベルのデータの種類）に従いマイクロ波センサ状態番号が決められる。マイクロ波センサ状態番号は、マイクロ波センサ２３が、直近に接近反応した（直近に接近ポート４１から接近反応データ１２１が出力された）場合、状態番号１とされ、直近に離反反応した（直近に接近ポート４２から離反反応データ１２２が出力された）場合、状態番号２とされる。

マイクロ波センサ状態番号の継続時間は、状態番号１の場合、マイクロ波センサ縮退処理部５４のマイクロ波センサ２３の反応判定処理により接近反応の判定が継続している時間とされ、状態番号２の場合、離反反応の判定が継続している時間とされる。

マイクロ波センサ縮退処理部５４は、求めたマイクロ波センサ状態番号およびその状態の継続時間を状態記述部５５に供給する。

以上のマイクロ波センサ縮退処理部５４によるマイクロ波センサ２３のセンサデータの縮退処理により、マイクロ波センサ２３の検出状態が、簡単にパターン化される。また、監視領域内の人物１１１の縦方向の動きが規定されるようになる。

しかし、マイクロ波センサ２３から出力されるセンサデータは、ドップラ効果を利用して監視対象の動き（イベント）を検出するというセンサの特性上、出力が不安定になる場合があり、イベントの状態が、正確にマイクロ波センサ状態番号に反映されない可能性がある。

図１２と図１３は、マイクロ波センサ２３が出力するセンサデータの他の例を説明する図である。

図１２において、人物１１１は、マイクロ波センサ２３の監視領域３２およびフォトセンサ２２−３の監視領域３１−３の外から、監視領域３２および監視領域３１−３内に侵入し、ゆっくりした速度で、図中矢印で示される方向に（図中、左上から右下方向）、監視領域３１−３から監視領域３１−２を斜めに横断するものとする。

この例の場合、マイクロ波センサ２３は、図１３に示されるようなセンサデータを出力する。人物１１１が監視領域３２に侵入して、ゆっくりした速度で斜めに進んでいる区間Aにおいて、接近反応データ１２１および離反反応データ１２２が不規則に出力されている（不安定な反応のセンサデータが出力されている）。

図１４と図１５は、マイクロ波センサ２３が出力するセンサデータの他の例を説明する図である。

図１４において、人物１１１は、マイクロ波センサ２３の監視領域３２およびフォトセンサ２２−３の監視領域３１−３の外から、扉１４１を開けて、監視領域３２および監視領域３１−３内に侵入し、扉１４１を閉めた後、監視領域３２および監視領域３１−３内の図中点Sにおいてしばらく立ち止まり、その後点Sから図中矢印で示されるように、監視領域３１−３から監視領域３１−２を斜め下方向に横断するものとする。

この例の場合、マイクロ波センサ２３は、図１５に示されるようなセンサデータを出力する。人物１１１が扉を開けて監視領域３２内に侵入する区間Aにおいて、接近反応データ１２１−１が安定して出力されている。扉１４１が閉められる区間Bにおいて、離反反応データ１２２−１が安定して出力されている。人物１１１が点Sで立ち止まっている区間Cにおいて、離反反応データ１２２−２および接近反応データ１２１−２が不規則に出力されている（不安定な反応のセンサデータが出力されている）。人物１１１が図中点Sから矢印の方向に斜めに進んでいる間、接近反応データ１２１−３が安定して出力されている。

このように、マイクロ波センサ２３から出力されるセンサデータは、図１２の例のように、人物１１１の移動速度が遅い時、あるいはマイクロ波センサ２３から人物１１１の距離が遠い時などに、図１３に示されるように不安定な出力となる場合がある。また、マイクロ波センサ２３から出力されるセンサデータは、図１４の例のように、人物１１１が停止していても、人物１１１の微妙な動きにより、図１５の区間Ｃにおける離反反応データ１２２−２および接近反応データ１２１−２に示されるように、ノイズ的な出力が混じった不安定な出力となる場合がある。

例えば、マイクロ波センサ縮退処理部５４が、図１３に示されるマイクロ波センサ２３から出力される不安定なセンサデータから、人物１１１が接近している（マイクロ波センサ２３が接近反応している）状態（状態番号１）を検出するためには、マイクロ波センサ縮退処理部５４のバッファサイズを大きくし、反応しきい値を小さくして、マイクロ波センサ２３の反応を検知する感度を高くする（マイクロ波センサ２３の反応を検知しやすくする）必要がある。しかし、そうした場合、マイクロ波センサ縮退処理部５４は、図１５の離反反応データ１２２−２のノイズ的な出力に対しても、マイクロ波センサ２３が離反反応していると誤検出し、検出信号１２２−１および１２２−２が出力されている間、人物１１１が扉を閉める状態（状態番号２）が継続していると判定してしまう可能性がある。

逆に、マイクロ波センサ縮退処理部５４が、図１５に示される離反反応データ１２２−２および接近反応データ１２１−２から、人物１１１が停止している（マイクロ波センサ２３が接近反応も離反反応もしていない）状態（状態番号０）を検出するためには、マイクロ波センサ縮退処理部５４のバッファサイズを小さくし、反応しきい値を小さくし、マイクロ波センサ２３の反応を検出する感度を低くする（マイクロ波センサ２３の反応を検知しにくくする）必要がある。しかし、そうした場合、マイクロ波センサ縮退処理部５４は、図１３に示されるマイクロ波センサ２３から出力されるセンサデータから、人物１１１が接近している（マイクロ波センサ２３が接近反応している）状態（状態番号１）を検出できない可能性がある。

そこで、本発明では、上述したマイクロ波センサ２３の不安定な出力から、人物１１１の動き（イベント）に正確に対応した状態番号を検出できるようにする。この点について、図１６乃至図１８を参照して説明する。

図１６は、フォトセンサ２２−１乃至２２−３ら出力されるセンサデータとマイクロ波センサ２３から出力されるセンサデータの特性の違いを示した図である。図１７は、図１３の出力例に、フォトセンサ２２−３から出力されるセンサデータ１０１−１およびフォトセンサ２２−２から出力されるセンサデータ１０１−２を加えた図である。図１８は、図１５の出力例に、フォトセンサ２２−３から出力されるセンサデータ１０１−１およびフォトセンサ２２−２から出力されるセンサデータ１０１−２を加えた図である。

例えば、人物１１１が、監視システム１０の監視領域内のマルチセンサカメラ１（マイクロ波センサ２３）から遠くない場所で、遅くない速度で大きな動きをした場合、図１６に示されるように、人物１１１の動きに反応して、マイクロ波センサ２３のセンサデータは安定した出力となり、フォトセンサ２２−１乃至２２−３のセンサデータは大きく変化する。例えば、この場合のフォトセンサ２２−２、２２−３、およびマイクロ波センサ２３のセンサデータは、図１８の区間Ａ、区間Ｂおよび区間Ｄに示されるようなデータになる。この場合、マイクロ波センサ縮退処理部５４は、バッファサイズや反応しきい値の値に関わらず、マイクロ波センサ２３のセンサデータから、正確にマイクロ波センサ２３の反応を検出し、状態番号を求めることができる。

例えば、人物１１１が、マルチセンサカメラ１（マイクロ波センサ２３）から遠い場所で大きな動きをしたり、ゆっくりした速度で大きな動きをした場合、図１６に示されるように、フォトセンサ２２−１乃至２２−３のセンサデータは、人物１１１の動きに反応して大きく変化するが、マイクロ波センサ２３のセンサデータは、人物１１１の動きに反応したり、反応しなかったりして、不安定な出力となる。例えば、この場合のフォトセンサ２２−２、２２−３、およびマイクロ波センサ２３のセンサデータは、図１７に示されるようなデータとなる。フォトセンサ２２−３のセンサデータ１０１−１およびフォトセンサ２２−２のセンサデータ１０１−２は、図１２の人物１１１の動きに反応して、大きく変化しているが、マイクロ波センサ２３のセンサデータ１２１，１２２は、人物１１１の動きに反応したり、反応しなかったりして、不安定になっている。

この場合、フォトセンサ２２−３，２２−２のセンサデータ１０１−１，１０１−２が大きく変化していることにより、人物１１１が大きな動きをしており、マイクロ波センサ２３のセンサデータ１２１，１２２は、その動きに対応していることが想定できる。従って、マイクロ波センサ縮退処理部５４のバッファサイズを大きくし、反応しきい値を小さくし、マイクロ波センサ２３の反応を検知する感度を高くすることにより、図１７のマイクロ波センサ２３の不安定なセンサデータ１２１，１２２から、マイクロ波センサ２３の反応が正確に検出され、人物１１１の動きに対応したマイクロ波センサ状態番号が求められる。

例えば、人物１１１が微小な動き（例えば、立ち止まった状態で、体を揺するなど）をした場合、図１６に示されるように、フォトセンサ２２−１乃至２２−３のセンサデータは、人物１１１の動きに反応せずに、ほとんど変化しないが、マイクロ波センサ２３のセンサデータは、人物１１１の動きに反応したり、反応しなかったりして、不安定な出力となる。例えば、この場合のフォトセンサ２２−２、２２−３、およびマイクロ波センサ２３のセンサデータは、図１８の区間Ｃにおけるデータとなる。図１８の区間Ｃにおいて、図１４の人物１１１は点Ｓで立ち止まっており、フォトセンサ２２−３のセンサデータ１０１−１およびフォトセンサ２２−２のセンサデータ１０１−２はほとんど変化していないが、マイクロ波センサ２３のセンサデータ１２２−１，１２１−２は、人物１１１の微小な動きに反応したり、反応しなかったりして、不安定になっている。

この場合、フォトセンサ２２−３，２２−２のセンサデータ１０１−１，１０１−２がほとんど変化していないことにより、人物１１１がほとんど動いておらず、マイクロ波センサ２３のセンサデータ１２２−１，１２１−２は、人物１１１の微小な動きに対応していることが想定できる。従って、マイクロ波センサ縮退処理部５４のバッファサイズを小さくし、反応しきい値を大きくし、マイクロ波センサ２３の反応を検知する感度を低くすることにより、図１８の区間Ｃにおけるマイクロ波センサ２３の不安定なセンサデータ１２２−２，１２１−２は、マイクロ波センサ２３のノイズ的な反応として無視され、人物１１１の動き（イベント）の誤検出が防止される。

このように、フォトセンサ２２−１乃至２２−３のセンサデータの変化に基づき、マイクロ波センサ縮退処理部５４のバッファサイズと反応しきい値を調整することにより、マイクロ波センサ２３のセンサデータから、高精度にイベントの状態（状態番号）が検出されるようになる。

図４の説明に戻る。マイクロ波センサ縮退処理部５４は、フォトセンサ出力選択部５３から供給されるフォトセンサ２２−１乃至２２−３の出力値を所定の期間保存しておき、その保存されている出力値の最大値と最小値の差（以下、DRと称する）を求める。マイクロ波センサ縮退処理部５４は、求めた差DRが所定のしきい値より小さい（人物１１１が停止しているか、微小な動きをしている）場合、バッファサイズを小さめの値B_small、反応しきい値を大きめの値th_largeに設定する。マイクロ波センサ縮退処理部５４は、求めた差DRが所定のしきい値以上（人物１１１が大きな動きをしている）の場合、バッファサイズを大きめの値B_large、反応しきい値を小さめの値th_small、にそれぞれ設定する。

マイクロ波センサ縮退処理部５４は、フォトセンサ出力選択部５３からフォトセンサ使用不可信号が入力された（フォトセンサ２２−１乃至２２−３が使用できない環境にある）場合、バッファサイズをB_largeとB_smallの中間の値B_defaultに設定し、反応しきい値をth_largeとth_smallの中間の値th_defaultに設定する。

状態記述部５５は、フォトセンサ縮退処理部５２から供給されたフォトセンサ状態番号とその継続時間、およびマイクロ波センサ縮退処理部５４から供給されたマイクロ波センサ状態番号とその継続時間に基づいて、監視領域内における人物１１１の一連の行動（センサ反応）の状態に関するデータ（以下、状態記述データと称する）を記述し、それをイベント通知判定部５６に供給するとともに、スイッチ５７を介して送信部５９に供給する。

ここで、図１９を参照して、状態記述データの例について説明する。

状態記述部５５は、フォトセンサ縮退処理部５２から供給されたフォトセンサ状態番号、およびマイクロ波センサ縮退処理部５４から供給されたマイクロ波センサ状態番号を記述する。また、状態記述部５５は、フォトセンサ状態番号の継続時時間とマイクロ波センサ状態番号の継続時間のうち短い方を、先に記述したフォトセンサ状態番号およびマイクロ波センサ状態番号を組み合せた状態の継続時間として記述する。

すなわち、状態記述部５５は、フォトセンサ状態番号、マイクロ波センサ状態番号、およびフォトセンサ状態番号とマイクロ波センサ状態番号を組み合わせた状態の継続時間を１単位とし、それを時間軸方向に連続的に並べたものを状態記述データ１５１−１乃至１５１−ｎ（以下、状態記述データ１５１−１乃至１５１−ｎを個々に区別する必要がない場合、単に状態記述データ１５１と称する）として記述する。このように、状態記述データは、監視領域において発生したイベントの特徴を表わすデータである。

図４の説明に戻る。イベント通知判定部５６は、状態記述部５５から供給された状態記述データ１５１（図１９）と、受信部６０を介して処理ボックス２から受信した通知判定テーブル（図２０を参照して後述する）を比較し、比較の結果、イベントを通知すると判定した場合、通知イベント発生信号を送信部５９に供給するとともに、CCDカメラ２１に電源制御信号を供給してその電源をオンさせ、スイッチ５７に状態記述データ送信制御信号を供給してオンさせ、スイッチ５８に通知画像送信制御信号を供給してオンさせる。これにより、CCDカメラ２１から出力された通知画像データが、スイッチ５８を介して送信部５９に供給され、状態記述部５５から出力された状態記述データ１５１がスイッチ５７を介して送信部５９に供給される。

ここで、図２０を参照して、通知判定テーブルの例について説明する。

通知判定テーブルは、ユーザに通知が不要なイベントのパターンが登録されているテーブルである。同図に示されるように、フォトセンサ状態番号、マイクロ波センサ状態番号、およびフォトセンサ状態番号とマイクロ波センサ状態番号を組み合わせた状態における継続時間の最小値および最大値が１つの状態記述データに規定される。この状態記述データ１７１−１乃至１７１−ｍからなる人物の行動が１つの通知判定テーブルに規定される。そして、通知判定テーブル１６１−１乃至１６１−ｎからなる通知判定テーブル群が、図５の処理ボックス２の通知判定テーブル更新部７４で作成および更新され、イベント通知判定部５６に供給される。

以下、状態記述データ１７１−１乃至１７１−ｍを個々に区別する必要がない場合、単に状態記述データ１７１と称し、通知判定テーブル１６１−１乃至１６１−ｎを個々に区別する必要がない場合、単に通知判定テーブル１６１と称する。また、後述する図２１の仮通知判定テーブル蓄積部２１５に蓄積される仮の通知判定テーブルは、以上で説明した通知判定テーブル１６１と同じ形式であり、以下の説明では、図２０は、仮の通知判定テーブルとしても引用する。

なお、マルチセンサカメラ１の初期状態においては、処理ボックス２から通知判定テーブル１６１が送信されておらず、イベント通知判定部５６は、この通知判定テーブル１６１を保持していないため、状態記述部５５から状態記述データ１５１が供給されると、直ちに通知イベントと判定する。すなわち、初期状態においては、全てのイベントが通知されることになる。これにより、必要なイベントがユーザに通知されないことが防止される。

送信部５９は、処理ボックス２に対し、イベント通知判定部５６から供給された通知イベント発生信号を送信するとともに、CCDカメラ２１から供給された通知画像データおよび状態記述部５５から供給された状態記述データ１５１を送信する。

受信部６０は、処理ボックス２から送信されてきた通知判定テーブル１６１を受信し、それをイベント通知判定部５６に供給する。

図５は、図１に示した監視システム１０の処理ボックス２、呈示部３およびリモートコントローラ４の機能的構成例を示すブロック図である。

処理ボックス２の受信部７１は、マルチセンサカメラ１から送信されてきた通知画像データおよび通知イベント発生信号を受信すると、これらを呈示画像構築部７２に供給する。また受信部７１は、マルチセンサカメラ１から送信されてきた状態記述データ１５１を受信すると、それを状態記述データ蓄積部７３に供給し、そこに蓄積させる。

呈示画像構築部７２は、受信部７１を介してマルチセンサカメラ１からイベントが通知された場合、一般視聴信号（テレビジョン放送信号）の一部に通知画像データを挿入した通知データを構築（作成）し、それを呈示部３に供給して呈示させる。また、呈示画像構築部７２は、通知画像データにより構成される（一般視聴信号を含まない）リモートコントローラ４用の通知データを構築し、送信部７６に供給する。なお、呈示画像構築部７２は、イベントが通知されていない場合（通常の場合）、一般の視聴信号（放送信号に基づく映像）を呈示部３に供給して呈示させる。

呈示部３用の通知データは、一般の視聴信号の一部に通知画像データを挿入して構成されているため、呈示部３には、ピクチャインピクチャの表示が呈示される。また、リモートコントローラ４用の通知データは、通知画像データから構成されているため、リモートコントローラ４の呈示部８２には、イベントを表わす表示（例えば、監視している場所の画像）のみが呈示される。

通知判定テーブル更新部７４は、受信部７７を介してリモートコントローラ４からユーザフィードバック（FB）に関する信号（以下、適宜、ユーザFB信号と称する）を受信した場合、そのユーザフィードバックを状態記述データ蓄積部７３に供給し、そこに蓄積させる。また通知判定テーブル更新部７４は、状態記述データ蓄積部７３に蓄積されている状態記述データ１５１とそれに対応するユーザフィードバックを読み込み、それらと通知判定テーブル１６１を比較し、比較の結果に基づいてテーブルを更新する。そして、通知判定テーブル更新部７４は、以前にマルチセンサカメラ１に送信した通知判定テーブル１６１と異なる場合、新しい通知判定テーブル１６１を送信部７５に供給する。

ここで、ユーザフィードバックとは、ユーザが、呈示されたイベントに対して、判断を行ない、リモートコントローラ４の入力部８３を用いて入力されたユーザの判断入力を意味する。例えば、ユーザは、イベントを今後も知らせて欲しい場合には、入力部８３のOKボタン（図示せず）を操作し、今後はイベントとして検出しなくてもよい場合には、NGボタン（図示せず）を操作することで、ユーザフィードバックとして入力することができる。あるいは、イベントとして検出しなくてもよい場合だけ、フィードバックさせるようにしてもよい。

状態記述データ蓄積部７３は、受信部７１から状態記述データ１５１が供給された場合に、通知判定テーブル更新部７４からユーザフィードバックが供給されたとき、状態記述データ１５１とユーザフィードバックを対応付けて蓄積し、状態記述データ１５１またはユーザフィードバックのいずれか一方のみが供給された場合、新規の状態記述データまたは新規のユーザフィードバックとして蓄積する。

送信部７５は、通知判定テーブル更新部７４から供給された通知判定テーブル１６１をマルチセンサカメラ１に送信する。送信部７６は、呈示画像構築部７２から供給された通知データをリモートコントローラ４に送信する。受信部７７は、リモートコントローラ４から送信されてきたユーザFB信号を受信し、それを通知判定テーブル更新部７４に供給する。

リモートコントローラ４の受信部８１は、処理ボックス２から送信されてきた通知データを受信し、それを呈示部８２に呈示させる。入力部８３は、呈示されたイベントに対するユーザからの判断に基づく入力を受け、その入力（ユーザフィードバック）に関する信号を送信部８４に供給する。送信部８４は、入力部８３から供給されたユーザFB信号を処理ボックス２に送信する。

ここで、ユーザフィードバックとは、上述したように、例えば、「今後も知らせて欲しいイベントである」、あるいは、「今後は知らせなくてよいイベントである」などのユーザによる判断（イベントに対する通知の必要性の評価）の入力を意味する。マルチセンサカメラ１と処理ボックス２は、このユーザフィードバックに基づいて、処理を変化させる。

図２１は、図５の処理ボックス２の通知判定テーブル更新部７４の詳細な構成例を示すブロック図である。

ユーザフィードバック（FB）判定部２１１は、状態記述データ蓄積部７３に蓄積されている状態記述データ１５１（図１９）とそれに対応するユーザフィードバックを読み込み、ユーザフィードバックが「OK」を示すデータであるか、または「NG」を示すデータであるかを判定し、判定結果を状態記述データ１５１とともに状態記述パターン比較部２１２に供給する。

状態記述パターン比較部２１２は、ユーザフィードバック判定部２１１から供給された状態記述データ１５１に含まれるフォトセンサ状態番号とマイクロ波センサ状態番号の組み合わせのパターンと、仮通知判定テーブル蓄積部２１５に蓄積されている全ての仮の通知判定テーブル１６１の状態記述データ１７１に含まれるフォトセンサ状態番号とマイクロ波センサ状態番号の組み合わせのパターンを比較する。状態記述パターン比較部２１２は、比較の結果、状態記述データ１５１とフォトセンサ状態番号とマイクロ波センサ状態番号の組み合わせのパターンが一致する仮の通知判定テーブル１６１があれば、その仮の通知判定テーブル１６１と状態記述データ１５１を既存パターン更新部２１４に供給し、一致するものがなければ、状態記述データ１５１を新規パターン作成部２１３に供給する。

新規パターン作成部２１３は、状態記述パターン比較部２１２から供給された状態記述データ１５１に基づき、新規の通知判定テーブル１６１を作成し、仮通知判定テーブル蓄積部２１５に追加し、そこに蓄積させる。

既存パターン更新部２１４は、状態記述パターン比較部２１２から供給された仮の通知判定テーブル１６１を、状態記述データ１５１に基づき更新し、仮通知判定テーブル蓄積部２１５に供給し、仮通知判定テーブル蓄積部２１５に蓄積されている仮の通知判定テーブル１６１を更新する。

仮通知判定テーブル蓄積部２１５は、新規パターン作成部２１３により追加された通知判定テーブル１６１、および既存パターン更新部２１４により更新された通知判定テーブル１６１を、仮の通知判定テーブル１６１として蓄積する。

テーブル比較部２１６は、仮通知判定テーブル蓄積部２１５に蓄積されている仮の通知判定テーブル１６１と、過去通知判定テーブル蓄積部２１７に蓄積されている過去の通知判定テーブル１６１を比較し、同じではないと判定した場合、仮通知判定テーブル蓄積部２１５に蓄積されている仮の通知判定テーブル１６１を、最新の通知判定テーブル１６１として送信部７５を介してマルチセンサカメラ１に送信する。また、テーブル比較部２１６は、仮の通知判定テーブル１６１を過去通知判定テーブル蓄積部２１７に供給し、過去通知判定テーブル蓄積部２１７に蓄積されている過去の通知判定テーブル１６１を更新する。

過去通知判定テーブル蓄積部２１７は、テーブル比較部２１６により更新された通知判定テーブル１６１を過去の通知判定テーブル１６１として蓄積する。

次に、図２２のフローチャートを参照して、マルチセンサカメラ１における処理について説明する。なお、この処理は、ユーザにより、監視領域における監視が指令されたとき、開始される。

ステップＳ１において、マルチセンサカメラ１の初期化処理が行なわれる。具体的には、イベント通知判定部５６は、CCDカメラ２１に電源制御信号を供給してその電源をオフさせ、イベント通知フラグをオフし、保持している通知判定テーブル１６１をクリアする。

ステップＳ２において、フォトセンサ縮退処理部５２およびフォトセンサ出力選択部５３は、フォトセンサ２２−１乃至２２−３から、Ａ／Ｄ変換部５１−１乃至５１−３によりアナログデータからデジタルデータにA／D変換されたセンサデータを取得する。また、マイクロ波センサ縮退処理部５４は、マイクロ波センサ２３の接近ポート４１および離反ポート４２から、Ａ／Ｄ変換部５１−４，５１−５によりアナログデータからデジタルデータにA／D変換されたセンサデータを取得する。

ステップＳ３において、フォトセンサ縮退処理部５２、フォトセンサ出力選択部５３、マイクロ波センサ縮退処理部５４、および状態記述部５５は、ステップＳ２の処理で取得したフォトセンサデータとマイクロ波センサデータに基づいて、監視領域内における人物１１１の一連の行動に関し、状態データ記述処理を行う。この状態データ記述処理の詳細については、図２４のフローチャートを参照して後述するが、この処理により、状態記述部５５から状態記述データ１５１（図１９）がイベント通知判定部５６に出力される。

ステップＳ４において、イベント通知判定部５６は、イベント通知フラグがオンである（通知イベント発生中である）か否かを判定し、イベント通知フラグがオンではなくオフである（通知イベント発生中ではない）と判定した場合、ステップＳ８に進む。最初は、ステップＳ１の処理でイベント通知フラグはオフされているので、処理はステップＳ８に進む。

ステップＳ８において、イベント通知判定部５６は、通知イベントが発生しているか否かのイベント通知判定処理を行う。具体的には、ステップＳ３の処理で、例えば、図２３に示されるように、フォトセンサ状態番号１、マイクロ波センサ状態番号１および継続時間Ｔ１からなる状態記述データ１５１−１と、フォトセンサ状態番号１、マイクロ波センサ状態番号２および継続時間Ｔ２からなる状態記述データ１５１−２が記述された場合、イベント通知判定部５６は、フォトセンサ状態番号１とマイクロ波センサ状態番号１の組み合わせ、フォトセンサ状態番号１とマイクロ波センサ状態番号２の組み合わせの順のパターンと、保持している通知判定テーブル１６１（図２０）の状態記述データ１７１（通知が不要なパターン）に含まれるフォトセンサ状態番号とマイクロ波センサ状態番号の組み合わせのパターンを比較し、一致するものがなければ通知イベントが発生していると判断する。

これに対し、フォトセンサ状態番号１とマイクロ波センサ状態番号１の組み合わせ、フォトセンサ状態番号１とマイクロ波センサ状態番号２の組み合わせの順のパターンに一致する通知判定テーブル１６１がある場合、イベント通知判定部５６は、図２３に示されるように、状態記述データ１５１−１の継続時間Ｔ１が、通知判定テーブル１６１の状態記述データ１７１−１の継続時間最小値Ｔmin１と継続時間最大値Ｔmax１の範囲内におさまっている（Ｔmin１≦Ｔ１≦Ｔmax１）か否か、また、状態記述データ１５１−２の継続時間Ｔ２が、通知判定テーブル１６１の状態記述データ１７１−２の継続時間最小値Ｔmin２と継続時間最大値Ｔmax２の範囲内におさまっている（Ｔmin２≦Ｔ２≦Ｔmax２）か否かの判定を行い、少なくともいずれか一方が、その範囲内におさまっていなければ、通知不要とはいえないので、通知イベントが発生していると判定する。

これに対して、イベント通知判定部５６は、状態記述データ１５１−１の継続時間Ｔ１が、通知判定テーブル１６１の状態記述データ１７１−１の継続時間最小値Ｔmin１と継続時間最大値Ｔmax１の範囲内におさまっており（Ｔmin１≦Ｔ１≦Ｔmax１）、かつ、状態記述データ１５１−２の継続時間Ｔ２が、通知判定テーブル１６１の状態記述データ１７１−２の継続時間最小値Ｔmin２と継続時間最大値Ｔmax２の範囲内におさまっていれば（Ｔmin２≦Ｔ２≦Ｔmax２）、非通知イベントが発生していると判定する（発生しているのは通知する必要がないイベントであると判定する）。

なお、イベント通知判定部５６は、後述する図２５のステップＳ４４において送信されるフォトセンサ使用不可信号を受信した場合、フォトセンサ状態番号とマイクロ波センサ状態番号の組み合わせのパターンではなく、マイクロ波センサ状態番号のパターンのみに基づいて、上述したイベント通知判定処理を行なう。

さらに、マルチセンサカメラ１の初期状態においては、まだ通知判定テーブル１６１が処理ボックス２から送信されてきておらず、イベント通知判定部５６は、この通知判定テーブル１６１を保持していないため、状態記述部５５から状態記述データ１５１が供給されると、直ちに通知イベントと判定する。

ステップＳ９において、イベント通知判定部５６は、ステップＳ８の処理結果に基づいて、発生したイベントが通知イベントであるか否かを判定し、通知イベントであると判定した場合、ステップＳ１０に進み、CCDカメラ２１に電源制御信号を供給してその電源をオンさせるとともに、イベント通知フラグをオンする。すなわち、発生したイベントが通知イベントであると判定された場合にのみCCDカメラ２１の電源がオンされ、通知イベントでない場合には、CCDカメラ２１の電源はオフのままとなっており、これにより、無駄なバッテリ消費を抑えることができる。

ステップＳ１１において、イベント通知判定部５６は、送信部５９を介して処理ボックス２に通知イベント発生信号を送信するとともに、通知画像送信制御信号をスイッチ５８に供給してオンさせる。これにより、CCDカメラ２１から処理ボックス２に対し、通知画像データ（CCDカメラ２１が監視領域３２を撮影して得たイベント画像）の送信が開始される。処理ボックス２は、この通知画像データを受信し、呈示部３に呈示させる（後述する図２７のステップＳ１０３）。

ステップＳ９において、発生したイベントが通知イベントではない、すなわち非通知イベントであると判定された場合、ステップＳ１０，Ｓ１１の処理はスキップされ、処理はステップＳ１２に進む。

ステップＳ４において（ステップＳ１０の処理でイベント通知フラグがオンとされ、後述するステップＳ１２またはステップＳ１３の処理を経て、ステップＳ２，Ｓ３の処理の後、再び行われるステップＳ４の処理において）、イベント通知フラグがオンである（通知イベント発生中である）と判定された場合、処理はステップＳ５に進み、イベント通知判定部５６は、イベント終了であるか否かを判定する。イベント終了であると判定した場合、ステップＳ６に進み、イベント通知判定部５６は、CCDカメラ２１に電源制御信号を供給してその電源をオフさせるとともに、ステップＳ１０の処理でオンされたイベント通知フラグをオフする。

ステップＳ７において、イベント通知判定部５６は、状態記述データ送信制御信号をスイッチ５７に供給してオンさせ、通知画像送信制御信号をスイッチ５８に供給してオフさせる。これにより、ステップＳ３の処理で状態記述部５５から出力された状態記述データ１５１がスイッチ５７および送信部５９を介して処理ボックス２に送信されるとともに、CCDカメラ２１からスイッチ５８および送信部５９を介して処理ボックス２に送信されていた通知画像データ（イベント画像）の送信が停止される。処理ボックス２は、この状態記述データ１５１を受信し、状態記述データ蓄積部７３に蓄積し（後述する図２７のステップＳ１０８）、この状態記述データ１５１に基づき通知判定テーブル１６１を必要に応じて更新し（後述する図２７のステップＳ１１５）、更新した通知判定テーブル１６１を送信してくる（後述する図２７のステップＳ１１６）。

ステップＳ５において、イベント終了ではないと判定された場合、ステップＳ６，Ｓ７の処理はスキップされ、処理はステップＳ１２に進む。

ステップＳ１２において、イベント通知判定部５６は、受信部６０を介して処理ボックス２より通知判定テーブル１６１を受信したか否かを判定し、通知判定テーブル１６１を受信したと判定した場合、ステップＳ１３に進み、保持している通知判定テーブル１６１を、受信した通知判定テーブル１６１により更新する。

ステップＳ１２において、処理ボックス２より通知判定テーブル１６１を受信していないと判定された場合、または、ステップＳ１３の処理の後、処理はステップＳ２に戻り、上述した処理が繰り返し実行される。

次に、図２４のフローチャートを参照して、図２２のステップＳ３における状態データ記述処理の詳細について説明する。

ステップＳ２１において、フォトセンサ縮退処理部５２は、図６と図７を参照して上述したフォトセンサ縮退処理により、フォトセンサ状態番号を求める。すなわち、フォトセンサ縮退処理部５２は、図２２のステップＳ２の処理で取得したフォトセンサデータに基づいて、出力レベルが基準値Ｌから離れている（反応している）フォトセンサのうち、最も直近に反応を開始したフォトセンサの番号をフォトセンサ状態番号とし、そのフォトセンサのセンサデータ１０１の出力レベルが基準値Ｌから離れている区間（図６に示す反応区間Ｘ）をその状態の継続時間として求める。

ステップＳ２２において、フォトセンサ縮退処理部５２は、ステップＳ２１で求めたフォトセンサ状態番号を、その継続時間とともに、フォトセンサ出力選択部５３および状態記述部５５に出力する。

ステップＳ２３において、フォトセンサ出力選択部５３は、フォトセンサデータ出力処理を行う。このフォトセンサデータ出力処理の詳細については、図２５のフローチャートを参照して後述するが、この処理により、最も直近に反応が始まったフォトセンサの出力値がマイクロ波センサ縮退処理部５４に出力される。

ステップＳ２４において、マイクロ波センサ縮退処理部５４は、マイクロ波センサデータ縮退処理を行う。このマイクロ波センサデータ縮退処理の詳細については、図２６のフローチャートを参照して後述するが、この処理により、マイクロ波センサ２３の状態番号とその継続時間が求められ、状態記述部５５に出力される。

ステップＳ２５において、状態記述部５５は、ステップＳ２２において取得したフォトセンサ状態番号とその継続時間、およびステップＳ２４において取得したマイクロ波センサ状態番号とその継続時間に基づき、図１９を参照して説明したように、すなわち、フォトセンサ状態番号の継続時間とマイクロ波センサ状態番号の継続時間の短い方、並びにフォトセンサ状態番号およびマイクロ波センサ状態番号により状態記述データ１５１が記述される。

ステップＳ２６において、状態記述部５５は、ステップＳ２５において記述した状態記述データ１５１をイベント通知判定部５６に出力するとともに、スイッチ５７を介して送信部５９に出力する。

以上の処理により、状態記述部５５から出力された状態記述データ１５１は、図２２のステップＳ８において、イベント通知判定処理に用いられるとともに、ステップＳ７において、処理ボックス２に送信される。

次に、図２５のフローチャートを参照して、図２４のステップＳ２３におけるフォトセンサデータ出力処理を説明する。

ステップＳ４１において、フォトセンサ出力選択部５３は、フォトセンサ２２−１乃至２２−３が使用できる環境か否かを判定する。フォトセンサ出力選択部５３は、周囲が明るすぎるなどの要因により、フォトセンサの定常状態の出力値が高すぎたり、あるいは低すぎたりして、フォトセンサ２２−１乃至２２−３が使用できない環境であると判定した場合、処理をステップＳ４４に進め、フォトセンサ使用不可信号をマイクロ波センサ縮退処理部５４、およびイベント通知判定部５６に出力する。マイクロ波センサ縮退処理部５４は、この信号に基づいて、後述する図２６のステップＳ６１の判定処理を行ない、イベント通知判定部５６は、上述した図２２のステップＳ８で、この信号に基づいてイベント判定処理を行なう。

ステップＳ４１において、フォトセンサ２２−１乃至２２−３が使用できる環境であると判定された場合、処理はステップＳ４２に進み、フォトセンサ出力選択部５３は、図２４のステップＳ２２でフォトセンサ縮退処理部５２より出力されたフォトセンサ状態番号を取得し、それに基づき、フォトセンサ２２−１乃至２２−３が反応しているか否かを判定する。フォトセンサ状態番号が状態番号０以外の場合、フォトセンサ２２−１乃至２２−３のいずれかが反応していると判定され、処理はステップＳ４３に進む。

ステップＳ４３において、フォトセンサ出力選択部５３は、最も直近に反応が始まったフォトセンサの出力値をマイクロ波センサ縮退処理部５４に出力する。すなわち、フォトセンサ出力選択部５３は、ステップＳ４２で取得したフォトセンサ状態番号が状態番号１の場合、図２２のステップＳ２において取得したフォトセンサデータのうち、フォトセンサ２２−１の出力値を出力し、フォトセンサ状態番号が状態番号２の場合、フォトセンサ２２−２の出力値を出力し、フォトセンサ状態番号が状態番号３の場合、フォトセンサ２２−３の出力値を出力する。

ステップＳ４２において、どのフォトセンサも反応していない（フォトセンサ状態番号が状態番号０）と判定された場合、処理はステップＳ４５に進み、フォトセンサ出力選択部５３は、出力値０をマイクロ波センサ縮退処理部５４に出力する。

以上の処理により、フォトセンサ２２−１乃至２２−３の検出状態に基づき、フォトセンサ出力選択部５３から、最も直近に反応したフォトセンサの出力値がマイクロ波センサ縮退処理部５４に出力される。

次に、図２６のフローチャートを参照して、図２４のステップＳ２４におけるマイクロ波センサデータ縮退処理を説明する。

ステップＳ６１において、マイクロ波センサ縮退処理部５４は、フォトセンサ出力選択部５３からフォトセンサ使用不可信号を受信したか否かを判定する。上述した図２５のステップＳ４４の処理によりフォトセンサ出力選択部５３からフォトセンサ使用不可信号が出力された場合、ステップＳ６１において、フォトセンサ使用不可信号が受信され、処理はステップＳ６６に進む。

ステップＳ６６において、マイクロ波センサ縮退処理部５４は、マイクロ波センサ縮退処理部５４のバッファサイズをB_defaultに、反応しきい値をth_defaultに設定する。すなわち、この場合には、バッファサイズと反応しきい値の値は、予め設定されている値に固定される。

ステップＳ６１において、フォトセンサ使用不可信号を受信していないと判定された場合、処理はステップＳ６２に進み、マイクロ波センサ縮退処理部５４は、フォトセンサ出力選択部５３から出力されたフォトセンサの出力値が０か否かを判定する。フォトセンサの出力値が０でないと判定された場合（フォトセンサ２２−１乃至２２−３の少なくともいずれか１つが反応している場合）、処理はステップＳ６３に進む。

ステップＳ６３において、マイクロ波センサ縮退処理部５４は、フォトセンサの出力値の差ＤＲを計算する。上述したように、マイクロ波センサ縮退処理部５４は、フォトセンサ出力選択部５３から出力されたフォトセンサの出力値を所定の期間（例えば約１秒間）保存しておき、保存されているフォトセンサの出力値の最大値と最小値の差をフォトセンサの出力値の差ＤＲとする。

ステップＳ６４において、マイクロ波センサ縮退処理部５４は、ステップＳ６３の処理により求められたフォトセンサの出力値の差ＤＲが十分小さい（予め設定されている所定のしきい値より小さい）か否かを判定する。フォトセンサの出力値の差ＤＲが十分小さくない（所定のしきい値以上である）（例えば、監視領域で人物１１１が大きな動きをしている）と判定された場合、処理はステップＳ６５に進み、マイクロ波センサ縮退処理部５４は、バッファサイズを大きな値であるB_larageに、反応しきい値を小さな値であるth_smallに、それぞれ設定する。バッファサイズの値を大きくすると、図１０の矢印１３１で示される期間が長くなり、反応判定処理対象とされるマイクロ波センサデータの個数が多くなり、マイクロ波センサ２３の反応を検知する感度が高くなる。また、反応しきい値を小さくすると、接近反応データ１２１または離反反応データ１２２の個数が少なくても反応があると判定されるので、やはり感度が高くなる。

ステップＳ６２においてフォトセンサの出力値が０（監視領域でイベントが発生していない）と判定された場合、およびステップＳ６４においてフォトセンサの出力値の差ＤＲが十分小さい（所定のしきい値より小さい）（例えば、監視領域で人物１１１が停止している）と判定された場合、処理はステップＳ６７に進み、マイクロ波センサ縮退処理部５４は、バッファサイズを小さい値であるB_small（B_small＜B_large）に、反応しきい値を大きい値であるth_large（th_large＞th_small）に、それぞれ設定し、マイクロ波センサ２３の反応を検知する感度を低くする。なお、バッファサイズB_defultと反応しきい値th_defaultの値は、それぞれ、バッファサイズB_smallとB_largeの中間の値（B_small＜B_default＜B_large）、または反応しきい値th_smallとth_largeの中間の値（th_small＜th_default＜th_large）とされている。

このように、バッファサイズと反応しきい値が、フォトセンサの出力に基づいて動的に変化されるので、すなわち、フォトセンサの出力でマイクロ波センサ２３の反応の検出条件を動的に調整するようにしたので、正確な検出が可能となる。

マイクロ波センサ縮退処理部５４は、ステップＳ６５、ステップＳ６６、またはステップＳ６７の処理の後、ステップＳ６８において、ステップＳ６５乃至Ｓ６７の処理で設定されたバッファサイズと反応しきい値に基づき、図１０および図１１を参照して上述したマイクロ波センサデータの縮退処理を行ない、マイクロ波センサ状態番号とその継続時間を求める。

例えば、ステップＳ６５の処理によりバッファサイズがB_large、反応しきい値がth_smallに設定されている場合、マイクロ波センサ縮退処理部５４は、直近のバッファサイズB_largeの期間にバッファ内に蓄積されたマイクロ波センサデータに基づき、蓄積されている接近反応データ１２１または離反反応データ１２２の個数が、反応しきい値th_small以上か否かを判定する。マイクロ波センサ縮退処理部５４は、接近反応データ１２１の個数が反応しきい値th_small以上であると判定した場合、マイクロ波センサ状態番号を状態番号１とし、離反反応データ１２２の個数が反応しきい値th_small以上であると判定した場合、マイクロ波センサ状態番号を状態番号２とする。

マイクロ波センサ縮退処理部５４は、接近反応データ１２１および離反反応データ１２２の個数がともに反応しきい値th_small以上であると判定した場合、最も直近に出力されたマイクロ波センサデータの種類によりマイクロ波センサ状態番号を求める。最も直近に出力されたマイクロ波センサデータが接近反応データ１２１の場合、マイクロ波センサ状態番号は状態番号１とされ、最も直近に出力されたマイクロ波センサデータが離反反応データ１２２の場合、マイクロ波センサ状態番号は状態番号２とされる。マイクロ波センサ縮退処理部５４は、接近反応データ１２１および離反反応データ１２２の個数がともに反応しきい値th_small未満であると判定した場合、マイクロ波センサ状態番号を状態番号０とする。

マイクロ波センサ縮退処理部５４は、マイクロ波センサ状態番号の継続時間を、状態番号１の場合、マイクロ波センサ反応判定処理によるマイクロ波センサ２３の接近反応の判定が継続している時間とし、状態番号２の場合、離反反応の判定が継続している時間とする。

ステップＳ６６の処理によりバッファサイズがB_default、反応しきい値がth_defaultに設定された場合、およびステップＳ６７の処理によりバッファサイズがB_small、反応しきい値がth_smallに設定された場合も、上述した処理と同様の処理が行われる。

ステップＳ６９において、マイクロ波センサ縮退処理部５４は、ステップＳ６８で求めたマイクロ波センサ状態番号を、その継続時間とともに、状態記述部５５に出力する。

以上のようにして、フォトセンサ２２−１乃至２２−３の出力値に基づいて調整されたバッファサイズと反応しきい値に基づき、マイクロ波センサ状態番号とその継続時間が検出され、状態記述部５５に出力される。

次に、図２７のフローチャートを参照して、図２２のマルチセンサカメラ１の処理に対応して実行される処理ボックス２における処理について説明する。なお、この処理は、ユーザにより、監視領域における監視をするよう指令されたとき開始される。あるいはまた、ユーザにより、呈示部３に対して一般視聴信号（放送番組信号）に対応する画像の呈示を行うよう指令されたとき、図２２の処理とともに自動的に実行させるようにしてもよい。

ステップＳ１０１において、処理ボックス２の初期化処理が行なわれる。具体的には、通知判定テーブル更新部７４は、状態記述データ蓄積部７３に蓄積されている状態記述データ１５１、および仮通知判定テーブル蓄積部２１５に蓄積されている仮の通知判定テーブル１６１をクリアするとともに、ユーザフィードバック受信フラグをオフする。受信部７１は、イベント受信フラグ、および状態記述データ受信フラグをオフする。

ステップＳ１０２において、受信部７１は、イベント受信フラグがオンである（通知イベント受信中である）か否かを判定し、イベント受信フラグがオフであると判定された場合（処理開始直後はこの判定結果となる）、ステップＳ１０４に進み、受信部７１は、マルチセンサカメラ１から通知イベント発生信号および通知画像データを受信したか否かを判定し、通知イベント発生信号および通知画像データを受信したと判定した場合、ステップＳ１０５に進み、イベント受信フラグをオンし、状態記述データ受信フラグをオフする（ただし、最初の場合すでにオフされている）。

ステップＳ１０２において、イベント受信フラグがオンであると判定した場合（ステップＳ１０５の処理が行われた後、後述するステップＳ１１４またはＳ１１７の処理を経て、再びステップＳ１０２の処理が行われた場合）、受信部７１はステップＳ１０３において、マルチセンサカメラ１から送信されてきた（上述した図２２のステップＳ１１の処理により送信されてきた）通知画像データおよび通知イベント発生信号を呈示画像構築部７２に供給する

また、ステップＳ１０３において、呈示画像構築部７２は、受信部７１から供給された通知画像データを、呈示部３に供給される一般視聴信号の一部に挿入し、通知データ（ピクチャインピクチャで呈示するための画像データ）を構築し、それを呈示部３に供給し、呈示させる。また呈示画像構築部７２は、リモートコントローラ４専用の通知データ（イベント画像を表示するための画像）を構築し、送信部７６を介してリモートコントローラ４に送信する。リモートコントローラ４は、この通知データを受信し、呈示部８２に呈示させる（後述する図２９のステップＳ１６２）。このようにして、呈示部３と呈示部８２にイベント画像が表示される。

ステップＳ１０３の処理の後、ステップＳ１０５の処理の後、またはステップＳ１０４において、通知イベント発生信号および通知画像データを受信していないと判定された場合、ステップＳ１０６に進み、受信部７１は、マルチセンサカメラ１から状態記述データ１５１を受信したか否かを判定する。

ステップＳ１０６において、状態記述データ１５１を受信したと判定した場合、ステップＳ１０７に進み、受信部７１は、状態記述データ受信フラグをオンし、イベント受信フラグをオフする。

ステップＳ１０８において、受信部７１は、マルチセンサカメラ１から送信されてきた（上述した図２２のステップＳ７の処理によりイベント終了時に送信されてきた）状態記述データ１５１を受信し、状態記述データ蓄積部７３に蓄積させる。ただし、このときに、既にユーザフィードバック受信フラグがオンである場合、すなわち、イベントの途中で、呈示されたイベントに対するユーザの判断（「OK（今後も通知して欲しい）」または「NG（今後は通知しなくても良い）」の判断）が入力され、後述するステップＳ１１０の処理でユーザＦＢ信号が受信され、ステップＳ１１１の処理により、そのユーザフィードバックが新規のユーザフィードバックとして状態記述データ蓄積部７３に蓄積されている場合、そのユーザフィードバックに対応付けて状態記述データ１５１が蓄積される。

ステップＳ１０８の処理の後、または、ステップＳ１０６において、状態記述データ１５１を受信していないと判定された場合、ステップＳ１０９に進み、通知判定テーブル更新部７４は、受信部７７を介してリモートコントローラ４から送信されてきた（後述する図２９のステップＳ１６４の処理により送信されてきた）ユーザFB信号を受信したか否かを判定し、ユーザFB信号を受信したと判定した場合、ステップＳ１１０に進む。

ステップＳ１１０において、通知判定テーブル更新部７４は、ユーザフィードバック受信フラグをオンする。

ステップＳ１１１において、通知判定テーブル更新部７４は、このとき、状態記述データ受信フラグがオンであれば、ユーザフィードバック（「OK（今後も通知して欲しい）」または「NG（今後は通知しなくても良い）」）を状態記述データ蓄積部７３に蓄積されている状態記述データ１５１に対応付けて蓄積させる。

ステップＳ１１１において、通知判定テーブル更新部７４は、イベント受信フラグがオンかつ状態記述データ受信フラグがオフであれば、ユーザフィードバックを新規のユーザフィードバックとして蓄積させる。これは、ユーザがイベントの途中で（上述したステップＳ１０６の処理で呈示されたイベントの状態記述データ１５１が受信される前に）、リモートコントローラ４の入力部８３を用いて呈示中のイベントに対するユーザの判断を入力し、ステップＳ１０９において、受信部７７を介してリモートコントローラ４から送信されてきた（後述する図２９のステップＳ１６４の処理により送信されてきた）ユーザFB信号が受信された場合である。蓄積された新規のユーザフィードバックは、上述したステップＳ１０８の処理により、イベント終了時にマルチセンサカメラ１から受信する（上述したステップＳ１０６の処理により受信する）状態記述データ１５１と対応付けられて、状態記述データ蓄積部７３に蓄積される。

また、ステップＳ１１１において、イベント受信フラグがオフかつ状態記述データ受信フラグがオフであれば、すなわち、イベントの呈示が行われておらず、かつ呈示されたイベントに関する状態記述データ１５１が受信されていなければ、そのユーザフィードバックは、イベントの呈示とは無関係に入力されたものとして、無視される。

ステップＳ１１２において、通知判定テーブル更新部７４により、ステップＳ１０９で受信したユーザＦＢ信号が「NG（今後は通知しなくても良い）」を示す信号か否かを判定し、「NG」を示す信号であると判定された場合、処理はステップＳ１１３に進み、受信部７１は、イベント受信フラグをオフする。これにより、ユーザから「NG」と判断されたイベントの呈示が、イベントの途中でも停止される。すなわち、その後、イベント終了時まで（上述した図２２のステップＳ５の処理でイベント終了と判定され、ステップＳ６とＳ７の処理でマルチセンサカメラ１からのイベントの通知が停止されるまで）マルチセンサカメラ１からのイベントの通知は継続されるが、処理がステップＳ１０２に戻ったとき、イベント受信フラグがオフと判定されるので、ステップＳ１０３の呈示処理が行われないようになる。

ステップＳ１１３においてオフされたイベント受信フラグは、ステップＳ１０４においてマルチセンサカメラ１から通知イベント発生信号および通知画像データを受信したと判定され、ステップＳ１０５においてオンされるまで、オフされたままとなる。通知イベント発生信号は、新たなイベントが検出され、上述した図２２のステップＳ１１の処理が行われるまで、マルチセンサカメラ１から送信されてこないため、マルチセンサカメラ１から新たなイベントが通知されるまで、イベント受信フラグはオフされたままである。

ステップ１１３の処理の後、ステップＳ１０９でユーザＦＢ信号が受信されていないと判定された場合、またはステップＳ１１２でユーザＦＢ信号が「OK（今後も通知して欲しい）」を示す信号であると判定された場合、ステップＳ１１４において、通知判定テーブル更新部７４は、状態記述データ受信フラグおよびユーザフィードバック受信フラグが共にオンであるか否かを判定し、少なくとも一方がオフである場合には、処理はステップＳ１０２に戻り、それ以降の処理が繰り返される。状態記述データ受信フラグおよびユーザフィードバック受信フラグが共にオンであると判定された場合（呈示されたイベントの状態記述データ１５１が受信され、かつ、そのイベントに対してユーザからフィードバックが入力された場合）、ステップＳ１１５に進み、通知判定テーブル更新処理を行う。この通知判定テーブル更新処理の詳細については、図２８のフローチャートを参照して後述するが、この処理により、過去通知判定テーブル蓄積部２１７に蓄積される通知判定テーブル１６１が更新される。

ステップＳ１１６において、通知判定テーブル更新部７４は、ステップＳ１１５の処理により、過去の通知判定テーブル１６１と異なる通知判定テーブル１６１が作成され、過去通知判定テーブル蓄積部２１７に蓄積された場合には、その新しい通知判定テーブル１６１を、送信部７５を介してマルチセンサカメラ１に送信する。マルチセンサカメラ１は、この新しい通知判定テーブル１６１を受信し、更新する（上述した図２２のステップＳ１３）。

ステップＳ１１７において、通知判定テーブル更新部７４は、状態記述データ受信フラグおよびユーザフィードバック受信フラグをオフする。

ステップＳ１１７の処理の後、処理はステップＳ１０２に戻り、上述した処理が繰り返し実行される。

以上のようにして、イベント画像がユーザに呈示され、それに対応するユーザのフィードバックが入力される。ユーザのフィードバックが入力されると、通知判定テーブル１６１が更新され、マルチセンサカメラ１に送信される。

次に、図２８のフローチャートを参照して、図２７のステップＳ１１５における通知判定テーブル更新処理の詳細について説明する。

ステップＳ１３１において、通知判定テーブル更新部７４の状態記述パターン比較部２１２は、仮通知判定テーブル蓄積部２１５に蓄積されている仮の通知判定テーブル１６１をクリアする。

ステップＳ１３２において、ユーザフィードバック判定部２１１は、状態記述データ蓄積部７３にステップＳ１１１の処理で蓄積されている最新の状態記述データ１５１とそれに対応するユーザフィードバックを読み込む。

ステップＳ１３３において、ユーザフィードバック判定部２１１は、ステップＳ１３２の処理で読み込んだユーザフィードバックが「NG（今後はイベントとして検出しなくてもよい）」を示すデータであるか否かを判定し、ユーザフィードバックが「NG」を示すデータであると判定した場合、その判定結果を状態記述データ１５１（図１９）とともに状態記述パターン比較部２１２に供給する。

次に、ステップＳ１３４において、状態記述パターン比較部２１２は、ユーザフィードバック判定部２１１から供給された状態記述データ１５１に含まれるフォトセンサ状態番号とマイクロ波センサ状態番号の組み合わせのパターンと、仮通知判定テーブル蓄積部２１５に蓄積されている全ての仮の通知判定テーブル１６１の状態記述データ１７１に含まれるフォトセンサ状態番号とマイクロ波センサ状態番号の組み合わせのパターンを比較する。

ステップＳ１３５において、状態記述パターン比較部２１２は、ステップＳ１３４の処理による比較の結果、パターンが一致するものがあるか否か、すなわち、状態記述データ１７１に含まれるフォトセンサ状態番号とマイクロ波センサ状態番号の組み合わせのパターンが状態記述データ１５１と一致する仮の通知判定テーブル１６１があるか否かを判定する。いまの場合、ステップＳ１３１の処理で、仮の通知判定テーブル１６１がクリアされている状態であるとすると、パターンが一致するものがないと判定され、状態記述パターン比較部２１２は、状態記述データ１５１を新規パターン作成部２１３に供給する。

ステップＳ１３７において、新規パターン作成部２１３は、状態記述パターン比較部２１２から供給された状態記述データ１５１に含まれるフォトセンサ状態番号、マイクロ波センサ状態番号、並びにそれに対応する継続時間を、新規の通知判定テーブル１６１として仮通知判定テーブル蓄積部２１５に追加・蓄積する。このとき、継続時間は、通知判定テーブル１６１上の最小値および最大値として設定される。いまの場合、仮の通知判定テーブル１６１がクリアされている状態なので、追加された通知判定テーブル１６１が、最初の仮の通知判定テーブル１６１となる。その後、処理はステップＳ１３８に進む。

ステップＳ１３３において、ユーザフィードバックが「ＮＧ」を示すデータでないと判定された場合、ステップＳ１３４乃至Ｓ１３７の処理はスキップされ、処理はステップＳ１３８に進む。すなわち、この場合仮の通知判定テーブル１６１を追加する処理は実行されない。

ステップＳ１３８において、ユーザフィードバック判定部２１１は、状態記述データ蓄積部７３に蓄積されている全ての状態記述データ１５１とそれに対応するユーザフィードバックを読み込んだか否かを判定し、未だ読み込んでいないデータがあると判定した場合、処理はステップＳ１３２に戻る。

ステップＳ１３２において、ユーザフィードバック判定部２１１は、再び状態記述データ蓄積部７３に蓄積されている次の状態記述データ１５１とそれに対応するユーザフィードバックを読み込む。

ステップＳ１３３の再度の処理において、ステップＳ１３２の処理で読み込んだユーザフィードバックが「NG」を示すデータでないと判定された場合、ステップＳ１３４乃至Ｓ１３７の処理はスキップされ、処理はステップＳ１３８に進む。ステップＳ１３３において、ユーザフィードバックが「NG」を示すデータであると判定された場合、その判定結果が状態記述データ１５１（図１９）とともに状態記述パターン比較部２１２に供給され、処理はステップＳ１３４に進む。

ステップＳ１３４において、状態記述パターン比較部２１２は、ユーザフィードバック判定部２１１から供給された状態記述データ１５１に含まれるフォトセンサ状態番号とマイクロ波センサ状態番号の組み合わせのパターンと、仮通知判定テーブル蓄積部２１５に蓄積されている全ての仮の通知判定テーブル１６１の状態記述データ１７１に含まれるフォトセンサ状態番号とマイクロ波センサ状態番号の組み合わせのパターンを比較する。いま、２回目以降の処理なので、少なくとも１回目のステップＳ１３７の処理で仮の通知判定テーブル１６１が蓄積されている。従って、パターンが一致する場合がある。

ステップＳ１３５において、状態記述パターン比較部２１２は、ステップＳ１３４の処理による比較の結果、パターンが一致するものがあると判定した場合、状態記述データ１５１と、状態記述データ１７１に含まれるフォトセンサ状態番号とマイクロ波センサ状態番号の組み合わせのパターンが状態記述データ１５１と一致する仮の通知判定テーブル１６１を既存パターン更新部２１４に供給し、処理はステップＳ１３６に進む。

ステップＳ１３６において、既存パターン更新部２１４は、状態記述パターン比較部２１２から供給された状態記述データ１５１とパターンが一致する仮の通知判定テーブル１６１を、状態記述パターン比較部２１２から供給された状態記述データ１５１に基づき更新する。

すなわち、既存パターン更新部２１４は、まず、マルチセンサカメラ１から受信された状態記述データ１５１に含まれる継続時間と、状態記述データ１５１とパターンが一致する仮の通知判定テーブル１６１の状態記述データ１７１に含まれる継続時間の最小値および最大値を比較する。

そして、既存パターン更新部２１４は、比較の結果、状態記述データ１７１の継続時間の最小値より状態記述データ１５１の継続時間の方が短いと判断した場合、状態記述データ１７１の継続時間の最小値を状態記述データ１５１の継続時間に置き換え（更新し）、また、状態記述データ１７１の継続時間の最大値より状態記述データ１５１の継続時間の方が長いと判断した場合、状態記述データ１７１の継続時間の最大値を状態記述データ１５１の継続時間に置き換える（更新する）。既存パターン更新部２１４は、更新した状態記述データ１５１とパターンが一致する仮の通知判定テーブル１６１を、仮通知判定テーブル蓄積部２１５に更新通知判定テーブル１６１として供給し、仮通知判定テーブル蓄積部２１５に蓄積されている仮の通知判定テーブル１６１を更新する。

ステップＳ１３５において、ステップＳ１３４の処理による比較の結果、パターンが一致するものがないと判定された場合、１回目の処理の場合と同様に、状態記述パターン比較部２１２は状態記述データ１５１を新規パターン作成部２１３に供給し、処理はステップＳ１３７に進む。

ステップＳ１３７において、１回目の処理の場合と同様に、新規パターン作成部２１３は、状態記述パターン比較部２１２から供給された状態記述データ１５１に含まれるフォトセンサ状態番号、マイクロ波センサ状態番号、並びにそれに対応する継続時間を継続時間の最小値および最大値とする新規の通知判定テーブル１６１として仮通知判定テーブル蓄積部２１５に追加・蓄積する。

ステップＳ１３８において、状態記述データ蓄積部７３に蓄積されている全ての状態記述データ１５１とそれに対応するユーザフィードバックが読み込まれたと判定されるまで、ステップＳ１３２乃至Ｓ１３８の処理が繰り返し実行され、状態記述データ蓄積部７３に蓄積されている全ての状態記述データ１５１とそれに対応するユーザフィードバックから仮の通知判定テーブル１６１が作成される。

ステップＳ１３８において、全ての状態記述データ１５１とそれに対応するユーザフィードバックを読み込んだと判定された場合、処理はステップＳ１３９に進み、テーブル比較部２１６は、過去通知判定テーブル蓄積部２１７に蓄積されている過去の通知判定テーブル１６１と、仮通知判定テーブル蓄積部２１５に蓄積されている仮の通知判定テーブル１６１を比較する。

ステップＳ１４０において、テーブル比較部２１６は、ステップＳ１３９の処理による比較の結果、過去の通知判定テーブル１６１と仮の通知判定テーブル１６１が同じであるか否かを判定し、同じではないと判定した場合、ステップＳ１４１に進み、仮通知判定テーブル蓄積部２１５に蓄積されている仮の通知判定テーブル１６１を、最新の通知判定テーブル１６１として送信部７５に供給する。上述したように、この最新の通知判定テーブル１６１が、図２７のステップＳ１１６において、マルチセンサカメラ１に送信される。

ステップＳ１４０において、過去の通知判定テーブル１６１と仮の通知判定テーブル１６１が同じであると判定された場合、そのテーブルは既にマルチセンサカメラ１に送信されているので、ステップＳ１４１の処理はスキップされ、処理はステップＳ１４２に進む。

ステップＳ１４２において、テーブル比較部２１６は、仮通知判定テーブル蓄積部２１５に蓄積されている仮の通知判定テーブル１６１を過去通知判定テーブル蓄積部２１７に供給し、既に蓄積されている過去の通知判定テーブル１６１を更新する。

以上の処理により、図２０に示されているような通知判定テーブル１６１−１乃至１６１−ｎからなる通知判定テーブル１６１群が過去通知判定テーブル蓄積部２１７に蓄積される。この通知判定テーブル１６１には、イベントとして通知しなくてよい場合のパターンが記憶されることになる。

次に、図２９のフローチャートを参照して、図２７の処理ボックス２の処理に対応して実行されるリモートコントローラ４における処理について説明する。なお、この処理は、リモートコントローラ４の電源をオンしたとき、開始される。

ステップＳ１６１において、受信部８１は、処理ボックス２より通知データを受信したか否かを判定し、通知データを受信するまで待機する。そして、通知データを受信したと判定した場合、ステップＳ１６２に進み、受信部８１は、処理ボックス２から送信されてきた（上述した図２７のステップＳ１０３の処理により送信されてきた）通知データに基づくイベント画像（通知画像データ）を呈示部８２に呈示させる。

ユーザは、呈示部８２に呈示されたイベント画像を見て、入力部８３を操作し、判断（例えば、いま呈示されているイベントは今後も知らせて欲しいイベントであるのか、あるいは、今後は知らせなくてよいイベントであるのか）を入力する。

ステップＳ１６３において、入力部８３は、呈示されたイベントに対するユーザからの判断（ユーザフィードバック）が入力されたか否かを判定し、ユーザフィードバックが入力されたと判定した場合、ユーザFB信号を、送信部８４に供給し、ステップＳ１６４に進む。

ステップＳ１６４において、送信部８４は、入力部８３から供給されたユーザFB信号を処理ボックス２に送信する。処理ボックス２は、これを受信し、状態記述データ蓄積部７３に蓄積されている状態記述データ１５１に対応付ける（図２７のステップＳ１１１）。

ステップＳ１６４の処理の後、または、ステップＳ１６３において、ユーザフィードバックが入力されていないと判定された場合、処理はステップＳ１６１に戻り、上述した処理が繰り返し実行される。

以上のように、フォトセンサ２２−１乃至２２−３の反応、およびマイクロ波センサ２３の反応を組み合わせることにより、単独のセンサでは区別することができなかったイベントを、短時間で、かつ、高精度に検出することができる。

特に、マイクロ波センサ２３のセンサデータに基づくイベントの検出条件を、フォトセンサ２２−１乃至２２−３の出力値により調整することにより、さらにイベントの検出精度が向上する。

さらに、マルチセンサカメラ１の状態記述部５５が、フォトセンサ２２−１乃至２２−３の反応、およびマイクロ波センサ２３の反応に基づいて状態記述データ１５１（図１９）を記述し、それを通知イベントに用いるようにしたので、より効果的なイベント通知システムを構築することが可能となる。

また、ユーザからのフィードバックに基づいて、イベント通知の判定に用いる通知判定テーブル１６１を変化（更新）させるようにしたので、ユーザが意図するイベントのみを検出することができ、かつ、イベントを通知する場合にのみ、CCDカメラ２１の電源をオンするようにしたので、無駄なバッテリ消費を抑えることができる。

以上においては、フォトセンサ２２−１乃至２２−３およびマイクロ波センサ２３を統合利用する場合の例について説明したが、フォトセンサ２２−１乃至２２−３に限らず、CCD（Charge Coupled Device）センサ、CMOS（Complementary Metal Oxide Semiconductor）センサを使用することも可能である。

さらに、CCDカメラに限らず、CMOS（Complementary Metal Oxide Semiconductor）カメラやその他のカメラを使用することも可能である。

また、マルチセンサカメラ１や呈示部３は、１台ではなく、複数台設けるようにしたり、処理ボックス２は、呈示部３と別の筐体とせず、一体型とするようにしたり、リモートコントローラ４に呈示部８２を設けずに、呈示部３のみの呈示とするようにしたり、あるいは、処理ボックス２にユーザフィードバックを入力するための入力部を設けるようにすることができる。

上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、ネットワークや記録媒体からインストールされる。

図３０は、汎用のパーソナルコンピュータ３００の内部の構成例を示す図である。CPU（Central Processing Unit）３０１は、ROM（Read Only Memory）３０２に記憶されているプログラム、または記憶部３０８からRAM（Random Access Memory）３０３にロードされたプログラムに従って各種の処理を実行する。RAM３０３にはまた、CPU３０１が各種の処理を実行する上において必要なデータなども適宜記憶される。

CPU３０１、ROM３０２、およびRAM３０３は、バス３０４を介して相互に接続されている。このバス３０４にはまた、入出力インターフェース３０５も接続されている。

入出力インターフェース３０５には、ボタン、スイッチ、キーボードあるいはマウスなどで構成される入力部３０６、CRT（Cathode Ray Tube）やLCD（Liquid Crystal Display）などのディスプレイ、並びにスピーカなどで構成される出力部３０７、ハードディスクなどで構成される記憶部３０８、およびモデムやターミナルアダプタなどで構成される通信部３０９が接続されている。通信部３０９は、インターネットを含むネットワークを介して通信処理を行う。

入出力インターフェース３０５にはまた、必要に応じてドライブ３１０が接続され、磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリなどよりなるリムーバブルメディア３１１が適宜装着され、そこから読み出されたコンピュータプログラムが、記憶部３０８にインストールされる。

コンピュータにインストールされ、コンピュータによって実行可能な状態とされるプログラムを記録する記録媒体は、図３０に示されるように、装置本体とは別に、ユーザにプログラムを提供するために配布される、プログラムが記録されている磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM（Compact Disc-Read Only Memory）、DVD(Digital Versatile Disc)を含む）、光磁気ディスク（MD(Mini-Disc)（登録商標）を含む）、もしくは半導体メモリなどよりなるリムーバブルメディア３１１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される、プログラムが記録されているROM３０３または記憶部３０８に含まれるハードディスクなどで構成される。

なお、本明細書において、プログラム格納媒体に格納されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。

また、本明細書において、システムとは、複数の装置により構成される装置全体を表わすものである。

本発明を適用した監視システムの構成例を示す図である。 マルチセンサカメラの外観の構成例を示す図である。 フォトセンサとマイクロ波センサの監視領域を示す平面図である。 図１のマルチセンサカメラの機能的構成例を示すブロック図である。 図１の処理ボックス、呈示部、およびリモートコントローラの機能的構成例を示すブロック図である。 フォトセンサが出力するセンサデータの例を説明する図である。 人物の行動に応じて記述されるフォトセンサの状態番号の例を示す図である。 マイクロ波センサの監視領域内の人物の動きを説明する図である。 マイクロ波センサが出力するセンサデータの例を示す図である。 マイクロ波センサが出力するセンサデータの他の例を示す図である。 人物の行動に応じて記述されるマイクロ波センサの状態番号の例を示す図である。 マイクロ波センサとフォトセンサの監視領域内の人物の動きを説明する図である。 マイクロ波センサが出力するセンサデータの例を示す図である。 マイクロ波センサとフォトセンサの監視領域内の人物の動きを説明する図である。 マイクロ波センサが出力するセンサデータの例を示す図である。 マイクロ波センサおよびフォトセンサが出力するセンサデータの特性の比較を説明する図である。 マイクロ波センサおよびフォトセンサが出力するセンサデータの例を示す図である。 マイクロ波センサおよびフォトセンサが出力するセンサデータの他の例を示す図である。 状態記述データの例を示す図である。 通知判定テーブルの例を示す図である。 図４の通知判定テーブル更新部の詳細な構成例を示すブロック図である。 マルチセンサカメラにおける処理を説明するフローチャートである。 図２２のステップＳ８の処理を説明する図である。 図２２のステップＳ３における状態データ記述処理の詳細を説明するフローチャートである。 図２４のステップＳ２３におけるフォトセンサデータ出力処理の詳細を説明するフローチャートである。 図２４のステップＳ２４におけるマイクロ波センサデータ縮退処理の詳細を説明するフローチャートである。 処理ボックスにおける処理を説明するフローチャートである。 図２７のステップＳ１１５における通知判定テーブル更新処理の詳細を説明するフローチャートである。 リモートコントローラにおける処理を説明するフローチャートである。 汎用のパーソナルコンピュータの構成例を示すブロック図である。

符号の説明

１ マルチセンサカメラ， ２ 処理ボックス， ３ 呈示部， ４ リモートコントローラ， １０ 監視システム， ２２ フォトセンサ， ２３ マイクロ波センサ， ５２ フォトセンサ縮退処理部， ５３ フォトセンサ出力選択部， ５４ マイクロ波センサ縮退処理部， ５５ 状態記述部， ５６ イベント通知判定部， ７２ 呈示画像構築部， ７３ 状態記述データ蓄積部， ７４ 通知判定テーブル更新部， ８２ 呈示部， ８３ 入力部， ２１１ ユーザフィードバック判定部， ２１２ 状態記述パターン比較部， ２１３ 新規パターン作成部， ２１４ 既存パターン更新部， ２１５ 仮通知判定テーブル蓄積部， ２１６ テーブル比較部， ２１７ 過去通知判定テーブル蓄積部

Claims (26)

1. 監視領域の監視に基づく第１のデータを出力する第１のセンサと、
   前記監視領域の監視に基づく第２のデータを出力する第２のセンサと、
   前記監視領域を撮影する撮影手段と、
   前記第１のデータと、前記第２のデータに基づき調整した検出条件とに基づいて、前記監視領域におけるイベントの第１の状態を検出する第１のイベント検出手段と、
   前記第２のデータに基づいて、前記イベントの第２の状態を検出する第２のイベント検出手段と、
   前記イベントの第１の状態と前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴、および、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報に基づいて、前記イベントの通知の有無を判定する通知制御手段と、
   前記イベントを通知するように判定された場合、前記撮影手段により撮影される画像を呈示するように制御する呈示制御手段と、
   前記画像が呈示された前記イベントに対してユーザにより入力される通知の必要性の評価、および前記イベントの特徴に基づいて、前記イベント判定情報を更新する判定情報更新手段と
   を備える監視システム。
2. 前記第１のイベント検出手段は、前記第２のデータに基づいて、前記イベントの第１の状態を検出する感度を変化させるように前記検出条件を調整する
   請求項１に記載の監視システム。
3. 前記通知制御手段は、前記イベントを通知する場合に前記撮影手段の電源をオンし、前記イベントを通知しない場合に前記撮影手段の電源をオフする
   請求項１に記載の監視システム。
4. 前記第１のセンサは、マイクロ波センサを含み、
   前記第２のセンサは、フォトセンサを含む
   請求項１に記載の監視システム。
5. 前記第２のセンサは、複数のフォトセンサを含む
   請求項４に記載の監視システム。
6. 前記第１のセンサ、前記第２のセンサ、前記撮影手段、前記第１のイベント検出手段、前記第２のイベント検出手段、前記通知制御手段、前記呈示制御手段、および前記判定情報更新手段は、第１の情報処理装置および第２の情報処理装置のいずれかに分離して配置される
   請求項１に記載の監視システム。
7. 前記第１の情報処理装置と前記第２の情報処理装置の間における通信は、無線通信により行われる
   請求項６に記載の監視システム。
8. 前記第１の情報処理装置は、バッテリにより駆動される
   請求項６に記載の監視システム。
9. 監視領域の監視に基づく第１のデータを出力する第１のセンサと、前記監視領域の監視に基づく第２のデータを出力する第２のセンサと、前記監視領域を撮影する撮影手段とを備える情報処理システムが、
   前記第１のデータと、前記第２のデータに基づき調整した検出条件とに基づいて、前記監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップと、
   前記第２のデータに基づいて、前記イベントの第２の状態を検出する第２のイベント検出ステップと、
   前記イベントの第１の状態と前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴、および、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報に基づいて、前記イベントの通知の有無を判定する通知制御ステップと、
   前記イベントを通知するように判定された場合、前記撮影手段により撮影される画像を呈示するように制御する呈示制御ステップと、
   前記画像が呈示された前記イベントに対してユーザにより入力される通知の必要性の評価、および前記イベントの特徴に基づいて、前記イベント判定情報を更新する判定情報更新ステップと
   を含む処理を実行する情報処理方法。
10. 第１のセンサによる監視領域の監視に基づき出力される第１のデータと、第２のセンサによる前記監視領域の監視に基づき出力される第２のデータに基づき調整した検出条件とに基づいて、前記監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップと、
    前記第２のデータに基づいて、前記イベントの第２の状態を検出する第２のイベント検出ステップと、
    前記イベントの第１の状態と前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴、および、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報に基づいて、前記イベントの通知の有無を判定する通知制御ステップと、
    前記イベントを通知するように判定された場合、前記監視領域を撮影した画像を呈示するように制御する呈示制御ステップと、
    前記画像が呈示された前記イベントに対してユーザにより入力される通知の必要性の評価、および前記イベントの特徴に基づいて、前記イベント判定情報を更新する判定情報更新ステップと
    を含む処理をコンピュータに実行させるためのプログラムが記録されている記録媒体。
11. 第１のセンサによる監視領域の監視に基づき出力される第１のデータと、第２のセンサによる前記監視領域の監視に基づき出力される第２のデータに基づき調整した検出条件とに基づいて、前記監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップと、
    前記第２のデータに基づいて、前記イベントの第２の状態を検出する第２のイベント検出ステップと、
    前記イベントの第１の状態と前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴、および、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報に基づいて、前記イベントの通知の有無を判定する通知制御ステップと、
    前記イベントを通知するように判定された場合、前記監視領域を撮影した画像を呈示するように制御する呈示制御ステップと、
    前記画像が呈示された前記イベントに対してユーザにより入力される通知の必要性の評価、および前記イベントの特徴に基づいて、前記イベント判定情報を更新する判定情報更新ステップと
    を含む処理をコンピュータに実行させるためのプログラム。
12. 監視領域の監視に基づく第１のデータを出力する第１のセンサと、
    前記監視領域の監視に基づく第２のデータを出力する第２のセンサと、
    前記監視領域を撮影する撮影手段と、
    前記第１のデータと、前記第２のデータに基づき調整した検出条件とに基づいて、前記監視領域におけるイベントの第１の状態を検出する第１のイベント検出手段と、
    前記第２のデータに基づいて、前記イベントの第２の状態を検出する第２のイベント検出手段と、
    前記イベントの第１の状態と前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴、および、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報に基づいて、前記イベントの通知の有無を判定する通知制御手段と、
    前記イベントを通知するように判定された場合、前記撮影手段により撮影される画像、および前記イベントの特徴を表す特徴データを他の情報処理装置に送信する送信手段と、
    前記イベント判定情報を前記他の情報処理装置から受信する受信手段と
    を備える情報処理装置。
13. 前記第１のイベント検出手段は、前記第２のデータに基づいて、前記イベントの第１の状態を検出する感度を変化させるように前記検出条件を調整する
    請求項１２に記載の情報処理装置。
14. 前記通知制御手段は、前記イベントを通知する場合に前記撮影手段の電源をオンし、前記イベントを通知しない場合に前記撮影手段の電源をオフする
    請求項１２に記載の情報処理装置。
15. 前記送信手段および前記受信手段による通信は、無線通信により行なわれる
    請求項１２に記載の情報処理装置。
16. 前記第１のセンサは、マイクロ波センサを含み、
    前記第２のセンサは、フォトセンサを含む
    請求項１２に記載の情報処理装置。
17. 前記第２のセンサは、複数のフォトセンサを含む
    請求項１６に記載の情報処理装置。
18. 前記情報処理装置は、バッテリにより駆動される
    請求項１２に記載の情報処理装置。
19. 監視領域の監視に基づく第１のデータを出力する第１のセンサと、前記監視領域の監視に基づく第２のデータを出力する第２のセンサと、前記監視領域を撮影する撮影手段とを備える情報処理装置が、
    前記第１のデータと、前記第２のデータに基づき調整した検出条件とに基づいて、前記監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップと、
    前記第２のデータに基づいて、前記イベントの第２の状態を検出する第２のイベント検出ステップと、
    前記イベントの第１の状態と前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴、および、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報に基づいて、前記イベントの通知の有無を判定する通知制御ステップと、
    前記イベントを通知するように判定された場合、前記撮影手段により撮影される画像、および前記イベントの特徴を表す特徴データを他の情報処理装置に送信する送信ステップと、
    前記イベント判定情報を前記他の情報処理装置から受信する受信ステップと
    を含む処理を実行する情報処理方法。
20. 第１のセンサによる監視領域の監視に基づき出力される第１のデータと、第２のセンサによる前記監視領域の監視に基づき出力される第２のデータに基づき調整した検出条件とに基づいて、前記監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップと、
    前記第２のデータに基づいて、前記イベントの第２の状態を検出する第２のイベント検出ステップと、
    前記イベントの第１の状態と前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴、および、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報に基づいて、前記イベントの通知の有無を判定する通知制御ステップと、
    前記イベントを通知するように判定された場合、前記監視領域を撮影した画像、および前記イベントの特徴を表す特徴データを他の情報処理装置に送信する送信ステップと、
    前記イベント判定情報を前記他の情報処理装置から受信する受信ステップと
    を含む処理をコンピュータに実行させるためのプログラムが記録されている記録媒体。
21. 第１のセンサによる監視領域の監視に基づき出力される第１のデータと、第２のセンサによる前記監視領域の監視に基づき出力される第２のデータに基づき調整した検出条件とに基づいて、前記監視領域におけるイベントの第１の状態を検出する第１のイベント検出ステップと、
    前記第２のデータに基づいて、前記イベントの第２の状態を検出する第２のイベント検出ステップと、
    前記イベントの第１の状態と前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴、および、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報に基づいて、前記イベントの通知の有無を判定する通知制御ステップと、
    前記イベントを通知するように判定された場合、前記監視領域を撮影した画像、および前記イベントの特徴を表す特徴データを他の情報処理装置に送信する送信ステップと、
    前記イベント判定情報を前記他の情報処理装置から受信する受信ステップと
    を含む処理をコンピュータに実行させるためのプログラム。
22. 第１のセンサによる監視領域の監視に基づき検出されたイベントの第１の状態と、第２のセンサによる前記監視領域の監視に基づき検出された前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴を表わす特徴データ、および、前記監視領域を撮影した画像を他の情報処理装置から受信する受信手段と、
    前記画像の呈示を制御する呈示制御手段と、
    前記画像が呈示された前記イベントに対してユーザにより入力された通知の必要性の評価、および、前記イベントの特徴に基づいて、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報を更新する判定情報更新手段と、
    更新された前記イベント判定情報を前記他の情報処理装置に送信する送信手段と
    を備える情報処理装置。
23. 更新された前記イベント判定情報を蓄積するイベント判定情報蓄積手段を
    さらに備える請求項２２に記載の情報処理装置。
24. 情報処理装置が、
    第１のセンサによる監視領域の監視に基づき検出されたイベントの第１の状態と、第２のセンサによる前記監視領域の監視に基づき検出された前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴を表わす特徴データ、および、前記監視領域を撮影した画像を他の情報処理装置から受信する受信ステップと、
    前記画像の呈示を制御する呈示制御ステップと、
    前記画像が呈示された前記イベントに対してユーザにより入力された通知の必要性の評価、および、前記イベントの特徴に基づいて、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報を更新する判定情報更新ステップと、
    更新された前記イベント判定情報を前記他の情報処理装置に送信する送信ステップと
    を含む処理を実行する情報処理方法。
25. 第１のセンサによる監視領域の監視に基づき検出されたイベントの第１の状態と、第２のセンサによる前記監視領域の監視に基づき検出された前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴を表わす特徴データ、および、前記監視領域を撮影した画像を他の情報処理装置から受信する受信ステップと、
    前記画像の呈示を制御する呈示制御ステップと、
    前記画像が呈示された前記イベントに対してユーザにより入力された通知の必要性の評価、および、前記イベントの特徴に基づいて、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報を更新する判定情報更新ステップと、
    更新された前記イベント判定情報を前記他の情報処理装置に送信する送信ステップと
    を含む処理をコンピュータに実行させるためのプログラムが記録されている記録媒体。
26. 第１のセンサによる監視領域の監視に基づき検出されたイベントの第１の状態と、第２のセンサによる前記監視領域の監視に基づき検出された前記イベントの第２の状態との組み合わせにより表される前記イベントの特徴を表わす特徴データ、および、前記監視領域を撮影した画像を他の情報処理装置から受信する受信ステップと、
    前記画像の呈示を制御する呈示制御ステップと、
    前記画像が呈示された前記イベントに対してユーザにより入力された通知の必要性の評価、および、前記イベントの特徴に基づいて、前記イベントの特徴により前記イベントの通知の必要性を判定するイベント判定情報を更新する判定情報更新ステップと、
    更新された前記イベント判定情報を前記他の情報処理装置に送信する送信ステップと
    を含む処理をコンピュータに実行させるためのプログラム。

Images