JP2005167382A - 遠隔カメラ監視システムおよび遠隔カメラ監視方法 - Google Patents

Abstract

【課題】 監視対象の事象（曖昧な事象を含む）や物体を自動的に検出しユーザに通知することを可能とし、監視者（ユーザ）の作業量の軽減を図る。
【解決手段】 映像自動監視装置１３０は、画像認識機能によって監視用カメラ１２０により撮影されたカメラ映像中に監視対象を検出した場合にその検出結果を監視対象の検知を示す電子メールである警告メールでユーザに通知するとともに、映像配信機能によって当該カメラ映像を配信する。各ユーザ側の監視情報受信装置１４０は、映像自動監視装置１３０からの警告メールを受信した場合に、当該警告メールに基づくユーザの判断に従って配信映像の要求を発行して映像自動監視装置１３０により配信されているカメラ映像を受信し表示する。
【選択図】 図１

Description

本発明は、人間が特定の事象や物体を常時監視することが困難な状況において、遠隔地に設置された監視カメラで撮影されたカメラ映像をユーザ（監視者）が見ることができるように映像配信を行うための遠隔カメラ監視システム（遠隔カメラ監視方法や遠隔カメラ監視システムを実現するためのプログラムを含む）に関する。

セキュリティ（ホームセキュリティ等）の保持や公共施設の管理（道路交通管理や河川管理や廃棄物不法投機防止管理等）などのために、遠隔地に設置されたカメラを使用して監視を行うシステムが存在する。

従前のこの種の遠隔カメラ監視システムは、監視用カメラで撮影されたライブ映像を、アナログ映像信号を受信することが可能な環境や、広帯域ネットワーク通信網（例えば、道路交通管理分野などで国が敷設した光ファイバ網）が整備された環境でのみ見ることができるものであった。

しかしながら、近年では、ブロードバンド通信網の整備が進んだため、より広範囲に多くの人々が多様な目的でカメラ映像を受信できるようになってきている。つまり、ネットワークに接続できる環境であれば、モバイル端末等を使用して、時や場所を選ばず、必要に応じてカメラ映像をモニタリングすることが可能になっている。したがって、遠隔カメラ監視システムの適用範囲は、広がっているといえる。

従来、この種の遠隔カメラ監視システムの多くは、通常、監視カメラにより撮影されたカメラ映像がユーザ（監視者）側に常に送られている態様で実現されていた。

なお、従来においても、異常の検出を契機としてカメラ映像がユーザ側に送られるシステム（技術）が提案されている（特許文献１，特許文献２，特許文献３，特許文献４，および特許文献５参照）。しかし、それらの技術は、カメラ映像を人間が見るための道具としてのみ用いており、「カメラ映像を、人間が見る道具として用いるとともに、システムが異常を検知する道具としても用いる」という特徴を有する本願発明とは明確に異なっている。

すなわち、本願発明に係る遠隔カメラ監視システムは、「画像認識技術」を利用している点で、上記の各特許文献に記載された技術と決定的に異なっている。このような本願発明の特徴の最大の利点は、カメラ(装置)１台で「異常の検知」と「映像配信」との２機能を実現できることにある。これにより、カメラ以外に別途物体等を検知するためのセンサが不要になる。また、画像認識技術による異常の検知をトリガ（契機）として、その異常の発生を示す電子メールを送信することによって、当該異常の検知をユーザに通知することができる。

以下のａ〜ｅに、上記の各特許文献記載の発明のそれぞれと本願発明との相違点を列挙する。

ａ．特許文献１記載の発明（リモート画像視認システム）は、映像を閲覧する機能（ユーザが、電子メールを受け取り、指示されたＵＲＬ（ＵｎｉｆｏｒｍＲｅｓｏｕｒｃｅＬｏｃａｔｏｒ）にアクセスし、ログインするための機能）が存在する点は本願発明と同じである。しかし、この特許文献１には、電子メールを送信するトリガに関しては記載されていない。

ｂ．特許文献２記載の発明（不在時外来者遠隔目視確認即時対応システム）は、インターホンを押す動作をトリガとして映像を撮影し送信している。したがって、本願発明のように画像認識技術により監視対象（この従来技術では不審者）を検知しているわけではない（画像認識技術を用いれば、インターホンを押さないでドアの前をうろつく不審者も検知することが可能である）。

ｃ．特許文献３記載の発明（遠隔監視方法及びそのシステム）では、「動体検知センサ」によって異常の検知が行われ、当該センサによる異常の検知をトリガとして通知が行われている。

ｄ．特許文献４記載の発明（インターネットセンサコントロールシステム）は、「防犯センサ装置」等のセンサ装置によって異常の検知を行っている。また、電子メールによる異常事態の報告を行ってはいるが、その報告のトリガは「センサによる検知」であり画像認識による異常の検出ではない。

ｅ．特許文献５記載の発明（監視用携帯電話と監視システム）では、「異常検出センサ」による異常の検知が行われている。また、当該センサによる異常の検知が、通知のトリガとなっている。
特開２００２−１９９３８６号公報 特開２００２−３５４１３６号公報 特開２００３−８５６７７号公報 特開２００３−１０１６５５号公報 特開２００３−１１５９４９号公報

上述した従来の技術のうちの「単に映像が流れてくるだけの映像配信が行われる技術」では、以下に示すような問題点があった。

第１の問題点は、モニタリング装置等のユーザ側の装置を常に広帯域ネットワークに接続（論理的な接続および物理的な接続）していなければならないことである。

第２の問題点は、ユーザ（監視者）としては、送られてくる映像を常に見ていなければならず、その間、その他の作業ができないということである。

本発明の第１の目的は、上述の点に鑑み、画像認識技術を用いて人間の代わりに自動的に事象や物体を検出し、検出結果を人間（ユーザ、すなわち監視者）に電子メールで通知するという遠隔カメラ監視システム（電子メール連動型遠隔カメラ監視システム）を提供することにある。これにより、監視者は必要なときにだけ映像を見ればよくなり、その作業量を軽減することができる。

また、上述した従来の技術のうちの「センサによる異常の検知に基づいて電子メール等による通知が行われるシステム」では、監視用カメラの他にセンサが必要になり、かつ、センサによる異常の検知には一定の限界がある（本願発明のような「画像認識技術を利用した曖昧な事象の検知」ができない）という問題点があった。

本発明の第２の目的は、上述の点に鑑み、監視用カメラによって写された映像に対する画像認識によって異常を検知することにより、監視用カメラの他にセンサを備える必要がなくなり、「画像認識技術を利用した曖昧な事象の検知」が可能となる遠隔カメラ監視システムを提供することにある。

本発明の遠隔カメラ監視システムは、画像認識機能によって監視用カメラにより撮影されたカメラ映像中に監視対象を検出した場合にその検出結果を監視対象の検知を示す電子メールである警告メールでユーザに通知するとともに、映像配信機能によって当該カメラ映像を配信する映像自動監視装置と、前記映像自動監視装置からの警告メールを受信した場合に、当該警告メールに基づくユーザの判断に従って配信映像の要求を発行して前記映像自動監視装置により配信されているカメラ映像を受信し表示する各ユーザ側の監視情報受信装置とを有する。

なお、本発明の遠隔カメラ監視システムは、より具体的には、監視用カメラが設置されている側の装置と各ユーザ側の装置とがネットワークを介して接続されているネットワークシステムにおいて、各ユーザに対する遠隔地に設置されており、監視対象を撮影する監視用カメラと、前記監視用カメラにより撮影されたカメラ映像を示す映像信号を受信し、当該カメラ映像に対する映像配信処理と画像認識処理との並列処理を行い、画像認識処理によってカメラ映像内に監視対象の事象や物体を検出すると、ユーザ側に監視対象の検知を示す電子メールである警告メールを送信する映像自動監視装置と、前記映像自動監視装置からの警告メールを受信した場合に、当該ユーザがその警告メールの内容に基づきカメラ映像を実際に見る必要があると判断したときに、映像受信機能を用いて前記映像自動監視装置の映像配信処理によって配信されているカメラ映像を受信し、そのカメラ映像の表示を制御する各ユーザ側の監視情報受信装置とを有すると表現することができる。

また、本発明の遠隔カメラ監視システムは、さらに具体的には、監視用カメラおよび映像自動監視装置と各ユーザ側の監視情報受信装置およびモニタリング装置とが広帯域ネットワークを介してつながっているネットワークシステムにおいて、監視対象の事象や物体を写すことができる場所に設置されており、監視対象を撮影する監視用カメラと、監視対象として予め登録されている内容とカメラ映像内の事象／物体との照合を行う画像認識処理により、前記監視用カメラのカメラ映像内に監視対象の事象や物体に該当すると考えられる事象／物体がないかどうかを判断する映像自動監視装置内の画像認識制御部と、前記画像認識制御部による処理と並行して、前記監視用カメラのカメラ映像の映像配信を行う映像自動監視装置内の映像配信制御部と、前記画像認識制御部によってカメラ映像内に監視対象の事象／物体が検知された場合に、送信データ格納部内の送信データに基づいて警告メールの内容を作成し、警告メールの送信先アドレスとして登録者データ格納部に登録されている登録者データ中のメールアドレスを使用し、当該警告メールを送信する映像自動監視装置内のメール送信制御部と、映像自動監視装置から送信されてくる警告メールを待ち受けており、警告メールを受信した場合に、当該警告メールの内容を監視者であるユーザに通知する監視情報受信装置内のメール受信制御部と、当該警告メールの内容に基づいてユーザにより実際のカメラ映像を見る必要があると判断された場合に、映像受信要求を発行して前記映像配信制御部により配信されているカメラ映像を示すディジタル映像信号を受信し、監視者が前記監視用カメラによって撮影されたカメラ映像を確認することができるように、受信したディジタル映像信号をアナログ映像信号に変換した上で、モニタリング装置に当該カメラ映像を表示する監視情報受信装置内の映像受信制御部とを有すると表現することができる。

加えて、本発明の遠隔カメラ監視システムは、監視用カメラおよび映像自動監視装置と各ユーザ側の監視情報受信装置およびモニタリング装置とが広帯域ネットワークを介してつながっているネットワークシステムにおいて、監視対象の事象や物体を写すことができる場所に設置されており、監視対象を撮影する監視用カメラと、監視対象として予め登録されている内容とカメラ映像内の事象／物体との照合を行う画像認識処理により、前記監視用カメラのカメラ映像内に監視対象の事象や物体に該当すると考えられる事象／物体がないかどうかを判断する映像自動監視装置内の画像認識制御部と、前記画像認識制御部による処理と並行して、前記監視用カメラのカメラ映像の映像配信を行う映像自動監視装置内の映像配信制御部と、前記画像認識制御部によってカメラ映像内に監視対象の事象／物体が検知された場合に、送信データ格納部内の送信データに基づいて警告メールの内容を作成し、警告メールの送信先アドレスとして登録者データ格納部に登録されている登録者データ中のメールアドレスを使用し、当該警告メールを送信する映像自動監視装置内のメール送信制御部と、前記画像認識制御部によってカメラ映像内に監視対象の事象／物体が検知された場合に、カメラ映像の録画を開始し実行して、監視情報受信装置側からの録画映像受信要求に応じてカメラ映像の録画映像を当該監視情報受信装置側に送信する映像自動監視装置内の映像録画制御部と、映像自動監視装置から送信されてくる警告メールを待ち受けており、警告メールを受信した場合に、当該警告メールの内容を監視者であるユーザに通知する監視情報受信装置内のメール受信制御部と、当該警告メールの内容に基づいてユーザによりカメラ映像の録画映像／ライブ映像を見る必要があると判断された場合に、当該判断内容に応じて録画映像受信要求／ライブ映像受信要求を発行して、録画映像受信要求発行時には前記映像録画制御部から送信されてくるカメラ映像の録画映像を示すディジタル映像信号を受信し、ライブ映像受信要求発行時には前記映像配信制御部により配信されているカメラ映像のライブ映像を示すディジタル映像信号を受信し、監視者が前記監視用カメラによって撮影されたカメラ映像を確認することができるように、受信したディジタル映像信号をアナログ映像信号に変換した上で、モニタリング装置に当該カメラ映像を表示する監視情報受信装置内の映像受信制御部とを有するように構成することも可能である。

ここで、本発明は、監視用カメラおよび映像自動監視装置と各ユーザ側の監視情報受信装置とがネットワークを介してつながっているネットワークシステムにおいて、映像自動監視装置において、監視用カメラにより写されたカメラ映像を示すアナログ映像信号を受信し、広帯域ネットワークを使用して、ディジタル映像信号の態様で当該カメラ映像の配信を開始し、以後、当該映像配信を継続的に行う第１のステップと、映像自動監視装置において、前記第１のステップの処理と並行し、画像認識処理によって、カメラ映像中の事象や物体の読み込みを行い、当該事象／物体と監視対象として予め登録されている事象／物体との照合を行い、両者がどの程度類似しているかの照合判定を行う第２のステップと、前記第２のステップの画像認識処理に基づいて、監視対象を検出したか否かの判定を行う第３のステップと、前記第３のステップで「カメラ映像内に監視対象の事象／物体を、ある検出レベルにおいて検出した」と判定した場合に、その検出レベルをも考慮して、警告メールで送信するメッセージを作成する第４のステップと、前記第４のステップで考慮した検出レベルに応じて警告メールのメール送信者を選定する第５のステップと、映像自動監視装置において、前記第５のステップで選定したメール送信者に該当するユーザに対し、前記第４のステップで作成したメッセージを有する警告メールを送信する処理を実行する第６のステップと、警告メールのメール送信者に該当するユーザ側の監視情報受信装置において、当該警告メールの受信処理を実行する第７のステップと、前記第７のステップのメール受信処理で警告メールを受信したユーザが、当該警告メール中のメッセージの内容から配信映像の受信が必要であるか否かを判定する第８のステップと、監視情報受信装置において、前記第８のステップで「配信映像の受信が必要」と判断された場合に、広帯域ネットワークへの接続を行った上で、映像自動監視装置に対する映像受信要求を発行する第９のステップと、監視情報受信装置において、前記第９のステップの映像受信要求に基づき、映像自動監視装置によって配信されているカメラ映像の映像受信処理を行う第１０のステップと、前記第１０のステップで受け取ったカメラ映像を表示する第１１のステップと、監視情報受信装置において、カメラ映像を確認した後、もうカメラ映像を見る必要がなくなったと判断した時点で、映像受信切断処理を行う第１２のステップとを有する遠隔カメラ監視方法として実現することも可能である。

また、本発明の遠隔カメラ監視方法は、監視用カメラおよび映像自動監視装置と各ユーザ側の監視情報受信装置とがネットワークを介してつながっているネットワークシステムにおいて、映像自動監視装置において、監視用カメラにより写されたカメラ映像を示すアナログ映像信号を受信し、広帯域ネットワークを使用して、ディジタル映像信号の態様で当該カメラ映像の配信を開始し、以後、当該映像配信を継続的に行う第１のステップと、映像自動監視装置において、前記第１のステップの処理と並行し、画像認識処理によって、カメラ映像中の事象や物体の読み込みを行い、当該事象／物体と監視対象として予め登録されている事象／物体との照合を行い、両者がどの程度類似しているかの照合判定を行う第２のステップと、前記第２のステップの画像認識処理に基づいて、監視対象を検出したか否かの判定を行う第３のステップと、前記第３のステップで「カメラ映像内に監視対象の事象／物体を、ある検出レベルにおいて検出した」と判定した場合に、その検出レベルをも考慮して、警告メールで送信するメッセージを作成する第４のステップと、前記第４のステップで考慮した検出レベルに応じて警告メールのメール送信者を選定する第５のステップと、映像自動監視装置において、前記第５のステップで選定したメール送信者に該当するユーザに対し、前記第４のステップで作成したメッセージを有する警告メールを送信する処理を実行する第６のステップと、映像自動監視装置において、前記第３のステップで監視対象が検出された場合に、カメラ映像の録画を開始し実行する第７のステップと、警告メールのメール送信者に該当するユーザ側の監視情報受信装置において、当該警告メールの受信処理を実行する第８のステップと、前記第８のステップのメール受信処理で警告メールを受信したユーザが、受信した警告メール中のメッセージの内容から配信映像の受信が必要であるか否か、必要である場合にはライブ映像を受信すべきか録画映像を受信すべきかを判定する第９のステップと、監視情報受信装置において、前記第９のステップで「録画映像の受信が必要」と判断された場合に録画映像受信要求を映像自動監視装置側に発行し、前記第９のステップで「ライブ映像の受信が必要」と判断された場合にライブ映像受信要求を映像自動監視装置側に発行する第１０のステップと、映像自動監視装置において、前記第１０のステップにおける録画映像受信要求を受け取った場合に、要求された録画映像を監視情報受信装置に送信する第１１のステップと、監視情報受信装置において、前記第１０のステップの要求が録画映像受信要求である場合には録画映像受信処理を行い、前記第１０のステップの要求がライブ映像受信要求である場合にはライブ映像受信処理を行う第１２のステップと、前記第１２のステップで受け取った録画映像／ライブ映像のカメラ映像を表示する第１３のステップと、監視情報受信装置において、カメラ映像を確認した後、もうカメラ映像を見る必要がなくなったと判断した時点で、映像受信切断処理を行う第１４のステップとを有するようにして実現することも可能である。

さらに、本発明は、監視用カメラおよび映像自動監視装置と各ユーザ側の監視情報受信装置とがネットワークを介してつながっているネットワークシステムにおいて、映像自動監視装置を、監視対象として予め登録されている内容とカメラ映像内の事象／物体との照合を行う画像認識処理により、前記監視用カメラのカメラ映像内に監視対象の事象や物体に該当すると考えられる事象／物体がないかどうかを判断する画像認識制御部，前記画像認識制御部による処理と並行して、前記監視用カメラのカメラ映像の映像配信を行う映像配信制御部，および前記画像認識制御部によってカメラ映像内に監視対象の事象／物体が検知された場合に、送信データ格納部内の送信データに基づいて警告メールの内容を作成し、警告メールの送信先アドレスとして登録者データ格納部に登録されている登録者データ中のメールアドレスを使用し、当該警告メールを送信するメール送信制御部として機能させるためのプログラムの態様で実現することも可能である。

加えて、本発明は、監視用カメラおよび映像自動監視装置と各ユーザ側の監視情報受信装置とがネットワークを介してつながっているネットワークシステムにおいて、映像自動監視装置を、監視対象として予め登録されている内容とカメラ映像内の事象／物体との照合を行う画像認識処理により、前記監視用カメラのカメラ映像内に監視対象の事象や物体に該当すると考えられる事象／物体がないかどうかを判断する画像認識制御部，前記画像認識制御部による処理と並行して、前記監視用カメラのカメラ映像の映像配信を行う映像配信制御部，前記画像認識制御部によってカメラ映像内に監視対象の事象／物体が検知された場合に、送信データ格納部内の送信データに基づいて警告メールの内容を作成し、警告メールの送信先アドレスとして登録者データ格納部に登録されている登録者データ中のメールアドレスを使用し、当該警告メールを送信するメール送信制御部，および前記画像認識制御部によってカメラ映像内に監視対象の事象／物体が検知された場合に、カメラ映像の録画を開始し実行して、監視情報受信装置側からの録画映像受信要求に応じてカメラ映像の録画映像を当該監視情報受信装置側に送信する映像録画制御部として機能させるためのプログラムの態様で実現することも可能である。

本発明の効果は以下の点にある。

第１の効果は、監視者（ユーザ）の作業量の軽減を図ることができる点である。このような効果が生じる理由は、カメラ映像に対する画像認識技術によってシステム（映像自動監視装置を中心とするコンピュータシステム）が監視対象の事象や物体を自動的に検出しユーザに通知することが可能になるからである。

第２の効果は、監視対象の検出方法として画像認識技術を採用することにより、監視対象が具体的な物体（例えば、不審者や駐車車両など）ではなく、ある特定の事象（不審者が入り口から侵入しようとしたことや、駐車車両が出発しようとしたことなど）でも検出可能となる点である。ちなみに、具体的な物体の検出は既存のセンサ技術によっても可能である場合が多いが、より曖昧な事象を検出することは画像認識技術によって人間の脳の認知処理プロセスをソフトウェアプログラムに組み込むことによってはじめて可能となる。なお、監視用カメラによって写されたカメラ映像に対する画像認識技術によって異常の検知が行われるので、監視用カメラの他にセンサが必要になるということがなくなるという効果も生じる。

次に、本発明について図面を参照して詳細に説明する。

図１は、本発明を実施するための最良の形態に係る遠隔カメラ監視システムの構成を示すブロック図である。

図１を参照すると、この遠隔カメラ監視システムは、広帯域ネットワーク１１０と、監視用カメラ１２０および映像自動監視装置１３０と、監視情報受信装置１４０およびモニタリング装置１５０とを含んで構成されている。ここで、監視情報受信装置１４０およびモニタリング装置１５０は、各ユーザ（監視者）によって使用される構成要素（ユーザ側構成要素）であり、ユーザの数だけ存在する。なお、モニタリング装置１５０の機能（カメラ映像を表示する機能）を監視情報受信装置１４０内に包含させることも可能である（例えば、図１０参照）。

以下に、図１に示す遠隔カメラ監視システムの動作について説明する。

監視対象を撮影するための監視用カメラ１２０とそのカメラ映像による監視を実現するための映像自動監視装置１３０とは、各ユーザに対する遠隔地に設置されており、広帯域ネットワーク１１０に接続されている。また、各ユーザ側の監視情報受信装置１４０は、広帯域ネットワーク１１０に接続されうる。

ここで、映像自動監視装置１３０は、監視用カメラ１２０により撮影されたカメラ映像を示す映像信号を受信し、常時、映像配信処理と画像認識処理とを行う。

映像自動監視装置１３０は、画像認識処理により、カメラ映像（監視用カメラ１２０により撮影された映像）内で監視対象の事象や物体を検出すると、ユーザ側に電子メール（監視対象の検知を示す電子メールである警告メール）を送信する。

ユーザ側では、監視情報受信装置１４０が警告メールを受信すると、当該ユーザはカメラ映像を実際に見る必要があるか否かを判断する。そして、ユーザが「必要」と判断した場合には、監視情報受信装置１４０は、映像受信機能を用いて、当該カメラ映像（映像自動監視装置１３０の映像配信処理によって配信されているカメラ映像）を受信し、モニタリング装置１５０上にそのカメラ映像を表示する。

上記のように、本発明の遠隔カメラ監視システムの特徴は、画像認識技術により監視対象の事象や物体をカメラ映像から自動検出し、検出結果を遠方のユーザに電子メールで通知し、通知を受けたユーザが自分からカメラ映像を受信する点にある。

以下に、上記のような遠隔カメラ監視システムの具体的な実施例（図１に示す形態とはカテゴリが異なる実施例をも含む）について説明する。

図２は、本発明の第１の実施例に係る遠隔カメラ監視システムの構成（図１の構成をより詳細に示す構成）を示すブロック図である。なお、図２では、簡便化のため、ユーザ側構成要素を１組しか表記していないが、図１に示すようにユーザは複数存在しうる。

図２を参照すると、この遠隔カメラ監視システムは、広帯域ネットワーク１１０と、監視用カメラ１２０と、映像自動監視装置１３０と、監視情報受信装置１４０と、モニタリング装置１５０とを含んで構成されている。

監視用カメラ１２０は、監視対象の事象や物体を写すことができる場所に設置されている。

映像自動監視装置１３０は、画像認識機能を実現する画像認識制御部１３１と、映像配信機能を実現する映像配信制御部１３２と、メール送信機能（電子メールを送信する機能）を実現するメール送信制御部１３３と、送信データを格納する送信データ格納部１３４と、登録者データを格納する登録者データ格納部１３５と、監視用カメラ１２０により写されたカメラ映像を画像認識制御部１３１および映像配信制御部１３２の両方に分配する映像分配器１３６とを含んで構成されている。

監視情報受信装置１４０は、メール受信機能（電子メールを受信する機能）を実現するメール受信制御部１４１と、カメラ映像を示す映像信号を受信する機能を実現してそのカメラ映像をモニタリング装置１５０上に表示する映像受信制御部１４２とを含んで構成されている。

映像自動監視装置１３０と監視情報受信装置１４０とは、広帯域ネットワーク１１０を介してつながっている（監視情報受信装置１４０内の映像受信制御部１４２は必要に応じて広帯域ネットワーク１１０に接続することが可能である）。

監視用カメラ１２０により写されたカメラ映像は、映像自動監視装置１３０に伝送される。映像自動監視装置１３０では、当該カメラ映像の映像信号が映像分配器１３６によって同一の２つの映像信号（アナログ映像信号）に分岐され、分岐された一方の映像信号は画像認識制御部１３１の入力信号となり、他方の映像信号は映像配信制御部１３２の入力信号となる。

また、映像自動監視装置１３０では、画像認識制御部１３１が、予め自己に組み込まれたプログラム（監視対象として予め登録されている内容とカメラ映像内の事象／物体との照合を行う画像認識処理を実現するためのプログラム）により、カメラ映像内に監視対象の事象や物体に該当すると考えられる事象／物体がないかどうかを判断する。それと並行して、映像配信制御部１３２が、同一のカメラ映像の映像配信（ディジタル映像信号による配信）を行う。

画像認識制御部１３１によってカメラ映像内に監視対象の事象または物体が検知された場合には、メール送信制御部１３３は、電子メール（警告メール）を送信する。

ここで、この警告メールの内容は、送信データ格納部１３４内の送信データに基づいて作成される。また、警告メールの送信先アドレスとしては、登録者データ格納部１３５に登録されている登録者データ中のメールアドレスが使用される。

監視情報受信装置１４０では、メール受信制御部１４１が、映像自動監視装置１３０から送信されてくる警告メールを常に待ち受けている。

メール受信制御部１４１が警告メールを受信すると、監視情報受信装置１４０を使用する監視者（ユーザ）は、その受信内容に応じて実際の映像を見るべきかどうかを判定する。そして、当該監視者が、実際の映像を見る必要があると判断した場合には、映像受信制御部１４２を広帯域ネットワーク１１０に接続（物理的接続（予め接続されている場合もある）および論理的接続）して、映像受信制御部１４２でカメラ映像を示すディジタル映像信号を受信する。

映像受信制御部１４２は、受信したディジタル映像信号をアナログ映像信号に変換した上で、モニタリング装置１５０に当該カメラ映像を表示する。これにより、監視者は、監視用カメラ１２０によって撮影されたカメラ映像を確認することができる。

図３は、図２に示す遠隔カメラ監視システムにおけるデータ（電子メール，映像，および要求等）の流れを説明するための図である。ここで、Ｓ１１〜Ｓ１３は映像自動監視装置１３０における処理（データの流れを作り出す契機となる処理）に該当し、Ｓ２１〜Ｓ２５は監視情報受信装置１４０における処理（データの流れを作り出す契機となる処理）に該当する。

図４は、図２に示す遠隔カメラ監視システムの処理を示す流れ図（フローチャート）である。この処理は、映像配信処理ステップＡ１と、画像認識処理ステップＡ２と、監視対象検出判定ステップＡ３と、送信メッセージ作成ステップＡ４と、メール送信者選定ステップＡ５と、メール送信処理ステップＡ６と、メール受信処理ステップＢ１と、メール確認ステップＢ２と、映像受信要求ステップＢ３と、映像受信処理ステップＢ４と、映像表示ステップＢ５と、映像受信切断処理ステップＢ６とからなる。ここで、ステップＡ１〜ステップＡ６が映像自動監視装置１３０における処理に該当し、ステップＢ１〜ステップＢ６が監視情報受信装置１４０における処理に該当する。

図５は、図２に示す遠隔カメラ監視システムで採用される検出データのフォーマットの具体例を示す図である。

図６は、図２に示す遠隔カメラ監視システムで採用される送信データのフォーマットの具体例を示す図である。

図７は、図２に示す遠隔カメラ監視システムで採用される登録者データのフォーマットの具体例を示す図である。

次に、上記のように構成された本実施例に係る遠隔カメラ監視システムの全体の動作について詳細に説明する。

初めに、図３を参照して、本実施例におけるデータ（電子メール，映像，および要求等）の流れについて概観する。

まず、映像自動監視装置１３０に、監視用カメラ１２０により写されたカメラ映像（アナログ映像）が入力される。

映像自動監視装置１３０では、画像認識Ｓ１１（予め登録されている監視対象の事象／物体の画像とカメラ映像中の各事象／物体の画像との照合を行う画像認識処理）により、監視対象の検出およびその検出の確信度を示す検出データが得られる。

検出データのフォーマット例を、図５に示す。図５の検出データは、検出ＩＤ（ＩＤｅｎｔｉｆｉｃａｔｉｏｎ）と、検出日時と、検出レベルとからなる。ここで、検出ＩＤは当該検出データの識別情報であり、検出日時は当該検出データの検出時期を示す情報である。また、検出レベルとは、検出した事象や物体が監視対象のものである可能性の高さ、すなわち確信度を表している（ここでは、高、中、低の３段階のレベルであるものとするが、このような３段階のレベルに限定されないことはいうまでもない）。

さらに、映像自動監視装置１３０では、上記の検出データと、送信データ格納部１３４内の送信データおよび登録者データ格納部１３５内の登録者データとに基づいて、メール送信Ｓ１２（送信すべきユーザに対して警告メールを送信する処理）が行われる。

送信データのフォーマット例を、図６に示す。図６の送信データは、メッセージＩＤと、検出レベル（レベルの種別は図５中の検出レベルと同様である）と、送信する警告メールによって通知される内容であるメッセージとからなる。

また、登録者データのフォーマット例を、図７に示す。図７中の（ａ）の登録者データは、登録者ＩＤ（送信予定者として予め登録されているユーザの識別情報）と、当該登録者（ユーザ）のメールアドレスと、検出レベルとからなる。図７中の検出レベルとは、「このレベル以上であればその登録者（ユーザ）に警告メールを送信する」という判定基準であり、予め各ユーザが個々の要求レベルに応じて設定しておくものである（レベルの種別は図５および図６中の検出レベルと同様である）。また、図７中の（ｂ）の登録者データは、登録者ＩＤと、メールアドレスと、登録ライセンスと、検出レベルとからなる。ここで、登録ライセンスとは、各ユーザ側からの映像受信要求の総数が回線容量に対し多すぎる場合に特定のユーザに対して優先的に接続を許可する際の判定基準であり、各ユーザの優先度を示す情報（ユーザレベル）を表している（この例では、ＵＳＥＲ−００３の登録者ＩＤを持つユーザがＳｕｐｅｒＵｓｅｒとして優先的に接続を許可される）。なお、この登録ライセンスは、本発明を実現する上で、任意的な情報である（図７中の（ａ）に示すように、この情報がなくても本発明を実現することが可能である）。

メール送信Ｓ１２で送信される警告メールの内容は、先述の検出データ中の検出レベルによって決定される。すなわち、当該検出レベルに対応するメッセージ（図６に示す送信データ中のメッセージ）が警告メール中のメッセージとして選択される。なお、警告メール中には、ユーザが配信映像にアクセスするための情報（ＵＲＬ等）が含まれている。

また、警告メールの送信先（メール送信者）としては、登録者データ格納部１３５内に登録者ＩＤが登録されているユーザ（登録者）の中でその登録者データ中の検出レベルが上記の検出データ中の検出レベル以上のユーザが選定される。そして、その登録者データ中のメールアドレス宛に、その警告メールが送信される。

監視情報受信装置１４０では、メール受信Ｓ２１によって、上記の警告メールが受信され、当該警告メールからメッセージ（配信映像にアクセスするためのＵＲＬを含む）が抽出される。

ユーザ（監視者）は、このメッセージの内容を参照して映像自動監視装置１３０側での監視対象の検出内容を確認し、実際にカメラ映像を見る必要があると判断した場合には、要求信号（映像受信要求）を映像自動監視装置１３０に発行する。具体的には、例えば、カメラ映像を提供している配信映像提供ＷｅｂページのＵＲＬへのアクセスを行う。

映像自動監視装置１３０側では、上記の要求信号に基づき、映像配信Ｓ１３によって、カメラ映像が配信される。なお、カメラ映像の配信処理は、要求信号の有無にかかわらず、すでに行われており、この要求信号によって映像自動監視装置１３０側であらためて映像配信処理が行われるというわけではない（すでに監視情報受信装置１４０から配信されている映像が、この時点で映像自動監視装置１３０側で取得される、という処理態様になる）。ただし、映像受信要求の総数が回線容量に対し多すぎる場合に、登録ライセンスに基づくユーザの選別が行われる場合には、この時点で映像自動監視装置１３０側での当該選別処理が行われる。

監視情報受信装置１４０では、映像受信・変換Ｓ２３によって、映像自動監視装置１３０から配信されてきたカメラ映像（ディジタル映像）が受信され、そのディジタル信号の映像データ（ディジタル映像）がアナログ信号の映像データ（アナログ映像）に変換される。さらに、映像表示Ｓ２４によって、そのアナログ映像がモニタリング装置１５０上に表示される。

続いて、図４を参照して、本実施例における処理の流れについて説明する。

第１に、本実施例に係る遠隔カメラ監視システムにおける遠隔カメラ側（監視用カメラ１２０および映像自動監視装置１３０が設置されている側）の動作について説明する。

映像自動監視装置１３０は、映像配信処理（ステップＡ１）および画像認識処理（ステップＡ２）の並列処理を行う。

すなわち、映像自動監視装置１３０内の映像配信制御部１３２は、映像分配器１３６を介して、監視用カメラ１２０により写されたカメラ映像を示すアナログ映像信号を受信し、広帯域ネットワーク１１０を使用して、ディジタル映像信号の態様で映像配信（当該カメラ映像の配信）を開始し、以後、当該映像配信を継続的に行う（ステップＡ１）。

また、映像自動監視装置１３０内の画像認識制御部１３１は、画像認識処理によって、カメラ映像中の事象や物体の読み込みを行い、当該事象／物体と監視対象として予め登録されている事象／物体との照合を行い、両者がどの程度類似しているかの照合判定を行う（ステップＡ２）。

そして、ステップＡ２の画像認識処理に基づいて、監視対象を検出したか否かの判定（検出した場合には、その検出の確信度を示す検出レベルの判定を含む）を行う（ステップＡ３）。

画像認識制御部１３１が、ステップＡ３で「カメラ映像内に監視対象事象または監視対象物体を、ある検出レベルにおいて検出した」と判定した場合には、メール送信制御部１３３は、その検出レベルをも考慮して送信メッセージ（警告メールで送信するメッセージ）を作成し（ステップＡ４）、その検出レベルに応じてメール送信者を選定する（予めその検出レベルでの警告メールの受信を要求している旨を登録しているユーザを抽出する）（ステップＡ５）。

さらに、メール送信制御部１３３は、ステップＡ５で選定したメール送信者（ユーザ）に対し、メール送信処理（ステップＡ４で作成した送信メッセージを有する警告メールを送信する処理）を実行する（ステップＡ６）。

第２に、ユーザ側（上記の「メール送信者」に該当するユーザ側における監視情報受信装置１４０およびモニタリング装置１５０）における動作について説明する。

警告メールのメール送信者に該当するユーザの監視情報受信装置１４０内のメール受信制御部１４１は、当該警告メールの受信処理を実行する（ステップＢ１）。

監視者（ユーザ）は、ステップＢ１のメール受信処理で警告メールを受信すると、手作業でメール確認を行う（ステップＢ２）。すなわち、監視者は、受信した警告メール中のメッセージの内容等から配信映像の受信が必要か否かを判定し、「配信映像の受信が必要」と判断した場合には、広帯域ネットワーク１１０への接続を行った上で、映像受信要求を発行する（ステップＢ３）。なお、上記の判定で「配信映像の受信が不要」と判断した場合には、今回の処理を終了する（図４中の破線の矢線を参照）。また、警告メールを受信すれば、ユーザの判断を要さずに無条件で映像受信要求を発行するように、設定することも可能である。

映像受信制御部１４２は、映像自動監視装置１３０によって配信されているカメラ映像の映像受信処理（ステップＢ３の映像受信要求に基づく受信処理）を行い（ステップＢ４）、そのカメラ映像をモニタリング装置１５０上に表示する（ステップＢ５）。

監視者は、カメラ映像を確認した後、もうカメラ映像を見る必要がなくなったと判断した時点で、映像受信切断処理（論理的な接続の切断（配信映像へのアクセスの終了）および必要な場合における広帯域ネットワーク１１０に対する物理的な接続の切断）を行う（ステップＢ６）。

なお、映像自動監視装置１３０側では、ステップＡ１の映像配信処理およびステップＡ２の画像認識処理の並列処理を契機とする一連の処理が繰り返される。

図８は、本発明の第２の実施例に係る遠隔カメラ監視システムの構成を示すブロック図である。なお、図８では、簡便化のため、ユーザ側構成要素を１組しか表記していないが、図１に示すようにユーザは複数存在しうる。

図８を参照すると、この遠隔カメラ監視システムは、広帯域ネットワーク８１０と、監視用カメラ８２０と、映像自動監視装置８３０と、監視情報受信装置８４０と、モニタリング装置８５０とを含んで構成されている。

映像自動監視装置８３０は、図２中の画像認識制御部１３１，映像配信制御部１３２，メール送信制御部１３３，送信データ格納部１３４，登録者データ格納部１３５，および映像分配器１３６と同様の構成要素である画像認識制御部８３１，映像配信制御部８３２，メール送信制御部８３３，送信データ格納部８３４，登録者データ格納部８３５，および映像分配器８３６と、映像録画制御部８３７とを含んで構成されている。

監視情報受信装置８４０は、図２中のメール受信制御部１４１および映像受信制御部１４２と同様の構成要素であるメール受信制御部８４１および映像受信制御部８４２を含んで構成されている。

本実施例では、映像自動監視装置８３０は、特有の構成要素として、画像認識制御部８３１によって監視対象がカメラ映像中に検出された場合にカメラ映像の録画の制御を行う映像録画制御部８３７を有している。

図９は、図８に示す遠隔カメラ監視システムの処理を示す流れ図（フローチャート）である。この処理は、映像配信処理ステップＡ１と、画像認識処理ステップＡ２と、監視対象検出判定ステップＡ３と、送信メッセージ作成ステップＡ４と、メール送信者選定ステップＡ５と、メール送信処理ステップＡ６と、映像録画処理ステップＣ１と、録画映像送信処理ステップＣ２と、メール受信処理ステップＢ１と、メール確認ステップＢ２と、ライブ映像受信要求／録画映像受信要求ステップＤ１と、ライブ映像受信処理／録画映像受信処理ステップＤ２と、映像表示ステップＢ５と、映像受信切断処理ステップＢ６とからなる。ここで、ステップＡ１〜ステップＡ６およびステップＣ１〜ステップＣ２が映像自動監視装置８３０における処理に該当し、ステップＢ１〜ステップＢ２およびステップＢ５〜ステップＢ６ならびにステップＤ１〜ステップＤ２が監視情報受信装置８４０における処理に該当する。

次に、上記のように構成された本実施例に係る遠隔カメラ監視システムの動作について、第１の実施例とは異なる特有の動作を中心にして説明する。

第１の実施例に係る遠隔カメラ監視システムでは、監視用カメラ１２０による監視対象の内容によっては、ユーザ（監視者）が監視情報受信装置１４０で警告メールを受信してから監視用カメラ１２０により撮影されたライブ映像を見るのでは遅い場合（警告メール受信時以前のカメラ映像を見る必要がある場合）がある。

本実施例（第２の実施例）に係る遠隔カメラ監視システムでは、そのような場合に対処することができる。

すなわち、本実施例においては、画像認識制御部８３１で監視対象が自動検出されると（図９のステップＡ３参照）、ステップＡ４〜ステップＡ６によってメール送信制御部８３３からユーザ（監視者）に警告メールが送信されると同時に、映像録画制御部８３７の制御によってカメラ映像の録画が開始され実行される（ステップＣ１）。

これにより、ステップＢ１で警告メールを受信したユーザ（監視者）は、ステップＢ２の当該警告メールの確認に基づく判断で「ライブ映像ではなく録画映像を見るべき」と判定した場合には、ステップＤ１で録画映像受信要求（どのような時点の録画映像を要求しているかを示す指定を含む）を映像自動監視装置８３０側に発行することができる。なお、このステップＤ１では、第１の実施例の場合と同様に、ステップＡ１の映像配信処理で配信されているライブ映像の受信要求を行うことも可能である。

映像自動監視装置８３０内の映像録画制御部８３７は、ステップＤ１における録画映像受信要求を受け取ると、指定された録画映像を監視情報受信装置８４０に送信する（ステップＣ２）。

監視情報受信装置８４０内の映像受信制御部８４２は、ステップＤ１の要求が録画映像受信要求である場合における録画映像信号またはステップＤ１の要求がライブ映像受信要求である場合におけるライブ映像信号（第１の実施例における配信映像の映像信号と同様の映像信号）を受信し（ステップＤ２）、その映像信号に基づくカメラ映像（録画映像またはライブ映像）をモニタリング装置８５０上に表示する（ステップＢ５）。

上記のようにして、本実施例におけるユーザは、映像自動監視装置８３０から録画映像信号を受信し、録画映像を見ることが可能になる。

なお、図９中の上記以外の各ステップの処理は、第１の実施例における処理（図４参照）と同様のものとなる。

図１０は、本発明の第３の実施例に係る遠隔カメラ監視システムの構成を示すブロック図である。なお、図１０では、簡便化のため、ユーザ側構成要素を１組しか表記していないが、図１に示すようにユーザは複数存在しうる。

図１０を参照すると、この遠隔カメラ監視システムは、広帯域ネットワーク１０１０と、監視用カメラ１０２０と、映像自動監視装置１０３０と、監視情報受信装置１０４０とを含んで構成されている。

映像自動監視装置１０３０は、図２中の画像認識制御部１３１，映像配信制御部１３２，メール送信制御部１３３，送信データ格納部１３４，登録者データ格納部１３５，および映像分配器１３６と同様の構成要素である画像認識制御部１０３１，映像配信制御部１０３２，メール送信制御部１０３３，送信データ格納部１０３４，登録者データ格納部１０３５，および映像分配器１０３６を含んで構成されている。

監視情報受信装置１０４０は、図２中のメール受信制御部１４１および映像受信制御部１４２と同様の構成要素であるメール受信制御部１０４１および映像受信制御部１０４２と、映像表示部１０４３とを含んで構成されている。

本実施例では、監視情報受信装置１０４０は、特有の構成要素として、映像表示部１０４３を有している。映像表示部１０４３は、第１の実施例におけるモニタリング装置１５０の役割を行う（したがって、本実施例では、モニタリング装置は存在しない）。ここで、この監視情報受信装置１０４０としては、携帯型ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）端末や携帯電話等のモバイル端末を想定することができる。

本実施例における動作としては、第１の実施例におけるモニタリング装置１５０の働きを監視情報受信装置１０４０内の映像表示部１０４３が行う点以外は、第１の実施例における動作と同様なものになる。

なお、第２の実施例（図８参照）の特徴と第３の実施例（図１０参照）の特徴とを併有する構成の実施例も実現可能である。すなわち、映像自動監視装置側の構成が図８に示すような構成であり、監視情報受信装置側の構成が図１０に示すような構成の実施例も考えられる。

図１１は、本発明の第４の実施例に係る遠隔カメラ監視システムの構成を示すブロック図である。なお、図１１では、簡便化のため、ユーザ側構成要素を１組しか表記していないが、図１に示すようにユーザは複数存在しうる。

図１１を参照すると、この遠隔カメラ監視システムは、広帯域ネットワーク１１１０と、狭帯域ネットワーク１１１１と、監視用カメラ１１２０と、映像自動監視装置１１３０と、監視情報受信装置１１４０と、モニタリング装置１１５０とを含んで構成されている。

映像自動監視装置１１３０は、図２中の画像認識制御部１３１，映像配信制御部１３２，メール送信制御部１３３，送信データ格納部１３４，登録者データ格納部１３５，および映像分配器１３６と同様の構成要素である画像認識制御部１１３１，映像配信制御部１１３２，メール送信制御部１１３３，送信データ格納部１１３４，登録者データ格納部１１３５，および映像分配器１１３６を含んで構成されている。

監視情報受信装置１１４０は、図２中のメール受信制御部１４１および映像受信制御部１４２と同様の構成要素であるメール受信制御部１１４１および映像受信制御部１１４２を含んで構成されている。ただし、本実施例におけるメール受信制御部１１４１は、広帯域ネットワーク１１１０から分岐している狭帯域ネットワーク１１１１と接続している。

本実施例の望ましい実現態様としては、監視情報受信装置１１４０が、メール受信制御部１１４１を備える携帯電話等のモバイル端末（少なくとも電子メールを表示できる表示部を有している）と、映像受信制御部１１４２を備えモニタリング装置１１５０を接続しているＰＣとから構成されている態様を考えることができる。

本実施例（第４の実施例）に係る遠隔カメラ監視システムの動作は、第１の実施例の動作に対して、ユーザ側における電子メール（警告メール等）の受信が狭帯域ネットワーク１１１１を使用して行われる点が異なっている（他の動作については、第１の実施例の動作と同様になる）。

本実施例によると、システムが自動的に狭帯域ネットワーク１１１１を介して監視対象検出通知を行うことで、ユーザ側の装置を必要なときにだけ広帯域ネットワーク１１１０に接続すればよくなるという効果が生じる。電子メールの受信は狭帯域ネットワークで可能なため、監視者はモバイル端末等によって電子メールを受信できる環境につながっていれば、監視対象の発見はいつでも認知できるようになる。すなわち、携帯電話等による警告メールの受信で監視対象の検出を認知したユーザが、別途ＰＣを広帯域ネットワーク１１１０に接続して、監視用カメラ１１２０により写されたカメラ映像を受信する、という処理が可能になる。

なお、実施例２や実施例３に対しても、上記と同様の変形（第１の実施例に対する本実施例のようなネットワーク構成に関する変形）が可能であることはいうまでもない。

次に、本発明の第５の実施例に係る遠隔カメラ監視方法について説明する。

本実施例に係る遠隔カメラ監視方法は、図２に示すような構成のシステムに適用されるものであり、映像自動監視装置１３０において、監視用カメラ１２０により写されたカメラ映像を示すアナログ映像信号を受信し、広帯域ネットワーク１１０を使用して、ディジタル映像信号の態様で当該カメラ映像の配信を開始し、以後、当該映像配信を継続的に行う第１のステップと、映像自動監視装置１３０において、第１のステップの処理と並行し、画像認識処理によって、カメラ映像中の事象や物体の読み込みを行い、当該事象／物体と監視対象として予め登録されている事象／物体との照合を行い、両者がどの程度類似しているかの照合判定を行う第２のステップと、第２のステップの画像認識処理に基づいて、監視対象を検出したか否かの判定（検出した場合における当該検出の確信度を示す検出レベルの判定を含む）を行う第３のステップと、第３のステップで「カメラ映像内に監視対象の事象／物体を、ある検出レベルにおいて検出した」と判定した場合に、その検出レベルをも考慮して、警告メールで送信するメッセージを作成する第４のステップと、第４のステップで考慮した検出レベルに応じて警告メールのメール送信者を選定する（予めその検出レベルでの警告メールの受信要求を登録しているユーザを抽出する）第５のステップと、映像自動監視装置１３０において、第５のステップで選定したメール送信者に該当するユーザに対し、第４のステップで作成したメッセージを有する警告メールを送信する処理を実行する第６のステップと、警告メールのメール送信者に該当するユーザ側の監視情報受信装置１４０において、当該警告メールの受信処理を実行する第７のステップと、第７のステップのメール受信処理で警告メールを受信したユーザが、当該警告メール中のメッセージの内容から配信映像の受信が必要であるか否かを判定する第８のステップと、監視情報受信装置１４０において、第８のステップで「配信映像の受信が必要」と判断された場合に、広帯域ネットワーク１１０への接続を行った上で、映像自動監視装置１３０に対する映像受信要求を発行する第９のステップと、監視情報受信装置１４０において、第９のステップの映像受信要求に基づき、映像自動監視装置１３０によって配信されているカメラ映像の映像受信処理を行う第１０のステップと、第１０のステップで受け取ったカメラ映像をモニタリング装置１５０上に表示する第１１のステップと、監視情報受信装置１４０において、カメラ映像を確認した後、もうカメラ映像を見る必要がなくなったと判断した時点で、映像受信切断処理（論理的な接続の切断（配信映像へのアクセスの終了）および必要な場合における広帯域ネットワーク１１０に対する物理的な接続の切断）を行う第１２のステップとからなる。

ここで、上記の図４は、本発明の第５の実施例に係る遠隔カメラ監視方法の処理手順を示す流れ図にも該当する。

この場合に、上記の第１のステップ〜第６のステップは図４中のステップＡ１〜ステップＡ６に該当し、第７のステップ〜第１２のステップは図４中のステップＢ１〜ステップＢ６に該当する。

なお、本実施例に係る遠隔カメラ監視方法の動作は、上記の第１の実施例に係る遠隔カメラ監視システムの説明で述べた図４に示す動作（処理）の内容と同様のものになる。

次に、本発明の第６の実施例に係る遠隔カメラ監視方法について説明する。

本実施例に係る遠隔カメラ監視方法は、図８に示すような構成のシステムに適用されるものであり、映像自動監視装置８３０において、監視用カメラ８２０により写されたカメラ映像を示すアナログ映像信号を受信し、広帯域ネットワーク８１０を使用して、ディジタル映像信号の態様で当該カメラ映像（ライブ映像）の配信を開始し、以後、当該映像配信を継続的に行う第１のステップと、映像自動監視装置８３０において、第１のステップの処理と並行し、画像認識処理によって、カメラ映像中の事象や物体の読み込みを行い、当該事象／物体と監視対象として予め登録されている事象／物体との照合を行い、両者がどの程度類似しているかの照合判定を行う第２のステップと、第２のステップの画像認識処理に基づいて、監視対象を検出したか否かの判定（検出した場合における当該検出の確信度を示す検出レベルの判定を含む）を行う第３のステップと、第３のステップで「カメラ映像内に監視対象の事象／物体を、ある検出レベルにおいて検出した」と判定した場合に、その検出レベルをも考慮して、警告メールで送信するメッセージを作成する第４のステップと、第４のステップで考慮した検出レベルに応じて警告メールのメール送信者を選定する（予めその検出レベルでの警告メールの受信要求を登録しているユーザを抽出する）第５のステップと、映像自動監視装置８３０において、第５のステップで選定したメール送信者に該当するユーザに対し、第４のステップで作成したメッセージを有する警告メールを送信する処理を実行する第６のステップと、映像自動監視装置８３０において、第３のステップで監視対象が検出された場合に、カメラ映像の録画を開始し実行する第７のステップと、警告メールのメール送信者に該当するユーザ側の監視情報受信装置８４０において、当該警告メールの受信処理を実行する第８のステップと、第８のステップのメール受信処理で警告メールを受信したユーザが、受信した警告メール中のメッセージの内容から配信映像の受信が必要であるか否か、必要である場合にはライブ映像を受信すべきか録画映像を受信すべきかを判定する第９のステップと、監視情報受信装置８４０において、第９のステップで「録画映像の受信が必要」と判断された場合に録画映像受信要求を映像自動監視装置８３０側に発行し、第９のステップで「ライブ映像の受信が必要」と判断された場合にライブ映像受信要求を映像自動監視装置８３０側に発行する第１０のステップと、映像自動監視装置８３０において、第１０のステップにおける録画映像受信要求を受け取った場合に、要求された録画映像を監視情報受信装置８４０に送信する第１１のステップと、監視情報受信装置８４０において、第１０のステップの要求が録画映像受信要求である場合には録画映像受信処理を行い、第１０のステップの要求がライブ映像受信要求である場合にはライブ映像受信処理を行う第１２のステップと、第１２のステップで受け取った録画映像／ライブ映像のカメラ映像をモニタリング装置８５０上に表示する第１３のステップと、監視情報受信装置８４０において、カメラ映像を確認した後、もうカメラ映像を見る必要がなくなったと判断した時点で、映像受信切断処理（論理的な接続の切断（配信映像へのアクセスの終了）および必要な場合における広帯域ネットワーク８１０に対する物理的な接続の切断）を行う第１４のステップとからなる。

ここで、上記の図９は、本発明の第６の実施例に係る遠隔カメラ監視方法の処理手順を示す流れ図にも該当する。

この場合に、上記の第１のステップ〜第６のステップは図９中のステップＡ１〜ステップＡ６に該当し、第７のステップは図９中のステップＣ１に該当し、第８のステップ〜第９のステップは図９中のステップＢ１〜ステップＢ２に該当し、第１０のステップは図９中のステップＤ１に該当し、第１１のステップは図９中のステップＣ２に該当し、第１２のステップは図９中のステップＤ２に該当し、第１３のステップ〜第１４のステップは図９中のステップＢ５〜ステップＢ６に該当する。

なお、本実施例に係る遠隔カメラ監視方法の動作は、上記の第２の実施例に係る遠隔カメラ監視システムの説明で述べた図９に示す動作（処理）の内容と同様のものになる。

図１２は、本発明の第７の実施例の構成を示すブロック図である。

図１２を参照すると、本発明の第７の実施例は、図２に示した遠隔カメラ監視システムに対して、映像自動監視制御プログラム１２００を備える点が異なっている。

映像自動監視制御プログラム１２００は、広帯域ネットワーク１１０および監視用カメラ１２０と接続し送信データ格納部１３４，登録者データ格納部１３５，および映像分配器１３６を備える映像自動監視装置１３０に読み込まれ、当該映像自動監視装置１３０の動作を、画像認識制御部１３１，映像配信制御部１３２，およびメール送信制御部１３３として制御する。

映像自動監視制御プログラム１２００の制御による画像認識制御部１３１，映像配信制御部１３２，およびメール送信制御部１３３の動作は、図２に示す遠隔カメラ監視システムにおける画像認識制御部１３１，映像配信制御部１３２，およびメール送信制御部１３３の動作と全く同様になるので、その詳しい説明を割愛する。

図１３は、本発明の第８の実施例の構成を示すブロック図である。

図１３を参照すると、本発明の第８の実施例は、図８に示した遠隔カメラ監視システムに対して、映像自動監視制御プログラム１３００を備える点が異なっている。

映像自動監視制御プログラム１３００は、広帯域ネットワーク８１０および監視用カメラ８２０と接続し送信データ格納部８３４，登録者データ格納部８３５，および映像分配器８３６を備える映像自動監視装置８３０に読み込まれ、当該映像自動監視装置８３０の動作を、画像認識制御部８３１，映像配信制御部８３２，メール送信制御部８３３，および映像録画制御部８３７として制御する。

映像自動監視制御プログラム１３００の制御による画像認識制御部８３１，映像配信制御部８３２，メール送信制御部８３３，および映像録画制御部８３７の動作は、図８に示す遠隔カメラ監視システムにおける画像認識制御部８３１，映像配信制御部８３２，メール送信制御部８３３，および映像録画制御部８３７の動作と全く同様になるので、その詳しい説明を割愛する。

本発明を実施するための最良の形態に係る遠隔カメラ監視システムの構成を示すブロック図である。 本発明の第１の実施例に係る遠隔カメラ監視システムの構成を示すブロック図である。 図２に示す遠隔カメラ監視システムにおけるデータの流れを説明するための図である。 図２に示す遠隔カメラ監視システムの処理を示す流れ図であり、本発明の第５の実施例に係る遠隔カメラ監視方法の処理手順を示す流れ図でもある。 図２に示す遠隔カメラ監視システムで採用される検出データのフォーマットの具体例を示す図である。 図２に示す遠隔カメラ監視システムで採用される送信データのフォーマットの具体例を示す図である。 図２に示す遠隔カメラ監視システムで採用される登録者データのフォーマットの具体例を示す図である。 本発明の第２の実施例に係る遠隔カメラ監視システムの構成を示すブロック図である。 図８に示す遠隔カメラ監視システムの処理を示す流れ図であり、本発明の第６の実施例に係る遠隔カメラ監視方法の処理手順を示す流れ図でもある。 本発明の第３の実施例に係る遠隔カメラ監視システムの構成を示すブロック図である。 本発明の第４の実施例に係る遠隔カメラ監視システムの構成を示すブロック図である。 本発明の第７の実施例の構成を示すブロック図である。 本発明の第８の実施例の構成を示すブロック図である。

符号の説明

１１０，８１０，１０１０，１１１０ 広帯域ネットワーク
１２０，８２０，１０２０，１１２０ 監視用カメラ
１３０，８３０，１０３０，１１３０ 映像自動監視装置
１３１，８３１，１０３１，１１３１ 画像認識制御部
１３２，８３２，１０３２，１１３２ 映像配信制御部
１３３，８３３，１０３３，１１３３ メール送信制御部
１３４，８３４，１０３４，１１３４ 送信データ格納部
１３５，８３５，１０３５，１１３５ 登録者データ格納部
１３６，８３６，１０３６，１１３６ 映像分配器
１４０，８４０，１０４０，１１４０ 監視情報受信装置
１４１，８４１，１０４１，１１４１ メール受信制御部
１４２，８４２，１０４２，１１４２ 映像受信制御部
１５０，８５０，１１５０ モニタリング装置
８３７ 映像録画制御部
１０４３ 映像表示部
１１１１ 狭帯域ネットワーク
１２００，１３００ 映像自動監視制御プログラム
Ａ１ 映像配信処理ステップ
Ａ２ 画像認識処理ステップ
Ａ３ 監視対象検出判定ステップ
Ａ４ 送信メッセージ作成ステップ
Ａ５ メール送信者選定ステップ
Ａ６ メール送信処理ステップ
Ｂ１ メール受信処理ステップ
Ｂ２ メール確認ステップ
Ｂ３ 映像受信要求ステップ
Ｂ４ 映像受信処理ステップ
Ｂ５ 映像表示ステップ
Ｂ６ 映像受信切断処理ステップ
Ｃ１ 映像録画処理ステップ
Ｃ２ 録画映像送信処理ステップ
Ｄ１ ライブ映像受信要求／録画映像受信要求ステップ
Ｄ２ ライブ映像受信処理／録画映像受信処理ステップ

Claims (10)

1. 画像認識機能によって監視用カメラにより撮影されたカメラ映像中に監視対象を検出した場合にその検出結果を監視対象の検知を示す電子メールである警告メールでユーザに通知するとともに、映像配信機能によって当該カメラ映像を配信する映像自動監視装置と、
   前記映像自動監視装置からの警告メールを受信した場合に、当該警告メールに基づくユーザの判断に従って配信映像の要求を発行して前記映像自動監視装置により配信されているカメラ映像を受信し表示する各ユーザ側の監視情報受信装置と
   を有することを特徴とする遠隔カメラ監視システム。
2. 監視用カメラが設置されている側の装置と各ユーザ側の装置とがネットワークを介して接続されているネットワークシステムにおいて、
   各ユーザに対する遠隔地に設置されており、監視対象を撮影する監視用カメラと、
   前記監視用カメラにより撮影されたカメラ映像を示す映像信号を受信し、当該カメラ映像に対する映像配信処理と画像認識処理との並列処理を行い、画像認識処理によってカメラ映像内に監視対象の事象や物体を検出すると、ユーザ側に監視対象の検知を示す電子メールである警告メールを送信する映像自動監視装置と、
   前記映像自動監視装置からの警告メールを受信した場合に、当該ユーザがその警告メールの内容に基づきカメラ映像を実際に見る必要があると判断したときに、映像受信機能を用いて前記映像自動監視装置の映像配信処理によって配信されているカメラ映像を受信し、そのカメラ映像の表示を制御する各ユーザ側の監視情報受信装置と
   を有することを特徴とする遠隔カメラ監視システム。
3. 監視用カメラおよび映像自動監視装置と各ユーザ側の監視情報受信装置およびモニタリング装置とが広帯域ネットワークを介してつながっているネットワークシステムにおいて、
   監視対象の事象や物体を写すことができる場所に設置されており、監視対象を撮影する監視用カメラと、
   監視対象として予め登録されている内容とカメラ映像内の事象／物体との照合を行う画像認識処理により、前記監視用カメラのカメラ映像内に監視対象の事象や物体に該当すると考えられる事象／物体がないかどうかを判断する映像自動監視装置内の画像認識制御部と、
   前記画像認識制御部による処理と並行して、前記監視用カメラのカメラ映像の映像配信を行う映像自動監視装置内の映像配信制御部と、
   前記画像認識制御部によってカメラ映像内に監視対象の事象／物体が検知された場合に、送信データ格納部内の送信データに基づいて警告メールの内容を作成し、警告メールの送信先アドレスとして登録者データ格納部に登録されている登録者データ中のメールアドレスを使用し、当該警告メールを送信する映像自動監視装置内のメール送信制御部と、
   映像自動監視装置から送信されてくる警告メールを待ち受けており、警告メールを受信した場合に、当該警告メールの内容を監視者であるユーザに通知する監視情報受信装置内のメール受信制御部と、
   当該警告メールの内容に基づいてユーザにより実際のカメラ映像を見る必要があると判断された場合に、映像受信要求を発行して前記映像配信制御部により配信されているカメラ映像を示すディジタル映像信号を受信し、監視者が前記監視用カメラによって撮影されたカメラ映像を確認することができるように、受信したディジタル映像信号をアナログ映像信号に変換した上で、モニタリング装置に当該カメラ映像を表示する監視情報受信装置内の映像受信制御部と
   を有することを特徴とする遠隔カメラ監視システム。
4. 監視用カメラおよび映像自動監視装置と各ユーザ側の監視情報受信装置およびモニタリング装置とが広帯域ネットワークを介してつながっているネットワークシステムにおいて、
   監視対象の事象や物体を写すことができる場所に設置されており、監視対象を撮影する監視用カメラと、
   監視対象として予め登録されている内容とカメラ映像内の事象／物体との照合を行う画像認識処理により、前記監視用カメラのカメラ映像内に監視対象の事象や物体に該当すると考えられる事象／物体がないかどうかを判断する映像自動監視装置内の画像認識制御部と、
   前記画像認識制御部による処理と並行して、前記監視用カメラのカメラ映像の映像配信を行う映像自動監視装置内の映像配信制御部と、
   前記画像認識制御部によってカメラ映像内に監視対象の事象／物体が検知された場合に、送信データ格納部内の送信データに基づいて警告メールの内容を作成し、警告メールの送信先アドレスとして登録者データ格納部に登録されている登録者データ中のメールアドレスを使用し、当該警告メールを送信する映像自動監視装置内のメール送信制御部と、
   前記画像認識制御部によってカメラ映像内に監視対象の事象／物体が検知された場合に、カメラ映像の録画を開始し実行して、監視情報受信装置側からの録画映像受信要求に応じてカメラ映像の録画映像を当該監視情報受信装置側に送信する映像自動監視装置内の映像録画制御部と、
   映像自動監視装置から送信されてくる警告メールを待ち受けており、警告メールを受信した場合に、当該警告メールの内容を監視者であるユーザに通知する監視情報受信装置内のメール受信制御部と、
   当該警告メールの内容に基づいてユーザによりカメラ映像の録画映像／ライブ映像を見る必要があると判断された場合に、当該判断内容に応じて録画映像受信要求／ライブ映像受信要求を発行して、録画映像受信要求発行時には前記映像録画制御部から送信されてくるカメラ映像の録画映像を示すディジタル映像信号を受信し、ライブ映像受信要求発行時には前記映像配信制御部により配信されているカメラ映像のライブ映像を示すディジタル映像信号を受信し、監視者が前記監視用カメラによって撮影されたカメラ映像を確認することができるように、受信したディジタル映像信号をアナログ映像信号に変換した上で、モニタリング装置に当該カメラ映像を表示する監視情報受信装置内の映像受信制御部と
   を有することを特徴とする遠隔カメラ監視システム。
5. モニタリング装置の役割を行う映像表示部が監視情報受信装置内に含まれており、モニタリング装置を必要としないことを特徴とする請求項３または請求項４記載の遠隔カメラ監視システム。
6. 映像自動監視装置と監視情報受信装置との間のネットワークとして、広帯域ネットワークとともに、広帯域ネットワークから分岐して監視情報受信装置と接続している狭帯域ネットワークを備えており、監視情報受信装置内のメール受信制御部が前記狭帯域ネットワークと接続しており、ユーザ側における電子メールの受信が前記狭帯域ネットワークを使用して行われることを特徴とする請求項３，請求項４または請求項５記載の遠隔カメラ監視システム。
7. 監視用カメラおよび映像自動監視装置と各ユーザ側の監視情報受信装置とがネットワークを介してつながっているネットワークシステムにおいて、
   映像自動監視装置において、監視用カメラにより写されたカメラ映像を示すアナログ映像信号を受信し、広帯域ネットワークを使用して、ディジタル映像信号の態様で当該カメラ映像の配信を開始し、以後、当該映像配信を継続的に行う第１のステップと、
   映像自動監視装置において、前記第１のステップの処理と並行し、画像認識処理によって、カメラ映像中の事象や物体の読み込みを行い、当該事象／物体と監視対象として予め登録されている事象／物体との照合を行い、両者がどの程度類似しているかの照合判定を行う第２のステップと、
   前記第２のステップの画像認識処理に基づいて、監視対象を検出したか否かの判定を行う第３のステップと、
   前記第３のステップで「カメラ映像内に監視対象の事象／物体を、ある検出レベルにおいて検出した」と判定した場合に、その検出レベルをも考慮して、警告メールで送信するメッセージを作成する第４のステップと、
   前記第４のステップで考慮した検出レベルに応じて警告メールのメール送信者を選定する第５のステップと、
   映像自動監視装置において、前記第５のステップで選定したメール送信者に該当するユーザに対し、前記第４のステップで作成したメッセージを有する警告メールを送信する処理を実行する第６のステップと、
   警告メールのメール送信者に該当するユーザ側の監視情報受信装置において、当該警告メールの受信処理を実行する第７のステップと、
   前記第７のステップのメール受信処理で警告メールを受信したユーザが、当該警告メール中のメッセージの内容から配信映像の受信が必要であるか否かを判定する第８のステップと、
   監視情報受信装置において、前記第８のステップで「配信映像の受信が必要」と判断された場合に、広帯域ネットワークへの接続を行った上で、映像自動監視装置に対する映像受信要求を発行する第９のステップと、
   監視情報受信装置において、前記第９のステップの映像受信要求に基づき、映像自動監視装置によって配信されているカメラ映像の映像受信処理を行う第１０のステップと、
   前記第１０のステップで受け取ったカメラ映像を表示する第１１のステップと、
   監視情報受信装置において、カメラ映像を確認した後、もうカメラ映像を見る必要がなくなったと判断した時点で、映像受信切断処理を行う第１２のステップと
   を有することを特徴とする遠隔カメラ監視方法。
8. 監視用カメラおよび映像自動監視装置と各ユーザ側の監視情報受信装置とがネットワークを介してつながっているネットワークシステムにおいて、
   映像自動監視装置において、監視用カメラにより写されたカメラ映像を示すアナログ映像信号を受信し、広帯域ネットワークを使用して、ディジタル映像信号の態様で当該カメラ映像の配信を開始し、以後、当該映像配信を継続的に行う第１のステップと、
   映像自動監視装置において、前記第１のステップの処理と並行し、画像認識処理によって、カメラ映像中の事象や物体の読み込みを行い、当該事象／物体と監視対象として予め登録されている事象／物体との照合を行い、両者がどの程度類似しているかの照合判定を行う第２のステップと、
   前記第２のステップの画像認識処理に基づいて、監視対象を検出したか否かの判定を行う第３のステップと、
   前記第３のステップで「カメラ映像内に監視対象の事象／物体を、ある検出レベルにおいて検出した」と判定した場合に、その検出レベルをも考慮して、警告メールで送信するメッセージを作成する第４のステップと、
   前記第４のステップで考慮した検出レベルに応じて警告メールのメール送信者を選定する第５のステップと、
   映像自動監視装置において、前記第５のステップで選定したメール送信者に該当するユーザに対し、前記第４のステップで作成したメッセージを有する警告メールを送信する処理を実行する第６のステップと、
   映像自動監視装置において、前記第３のステップで監視対象が検出された場合に、カメラ映像の録画を開始し実行する第７のステップと、
   警告メールのメール送信者に該当するユーザ側の監視情報受信装置において、当該警告メールの受信処理を実行する第８のステップと、
   前記第８のステップのメール受信処理で警告メールを受信したユーザが、受信した警告メール中のメッセージの内容から配信映像の受信が必要であるか否か、必要である場合にはライブ映像を受信すべきか録画映像を受信すべきかを判定する第９のステップと、
   監視情報受信装置において、前記第９のステップで「録画映像の受信が必要」と判断された場合に録画映像受信要求を映像自動監視装置側に発行し、前記第９のステップで「ライブ映像の受信が必要」と判断された場合にライブ映像受信要求を映像自動監視装置側に発行する第１０のステップと、
   映像自動監視装置において、前記第１０のステップにおける録画映像受信要求を受け取った場合に、要求された録画映像を監視情報受信装置に送信する第１１のステップと、
   監視情報受信装置において、前記第１０のステップの要求が録画映像受信要求である場合には録画映像受信処理を行い、前記第１０のステップの要求がライブ映像受信要求である場合にはライブ映像受信処理を行う第１２のステップと、
   前記第１２のステップで受け取った録画映像／ライブ映像のカメラ映像を表示する第１３のステップと、
   監視情報受信装置において、カメラ映像を確認した後、もうカメラ映像を見る必要がなくなったと判断した時点で、映像受信切断処理を行う第１４のステップと
   を有することを特徴とする遠隔カメラ監視方法。
9. 監視用カメラおよび映像自動監視装置と各ユーザ側の監視情報受信装置とがネットワークを介してつながっているネットワークシステムにおいて、
   映像自動監視装置を、監視対象として予め登録されている内容とカメラ映像内の事象／物体との照合を行う画像認識処理により、前記監視用カメラのカメラ映像内に監視対象の事象や物体に該当すると考えられる事象／物体がないかどうかを判断する画像認識制御部，前記画像認識制御部による処理と並行して、前記監視用カメラのカメラ映像の映像配信を行う映像配信制御部，および前記画像認識制御部によってカメラ映像内に監視対象の事象／物体が検知された場合に、送信データ格納部内の送信データに基づいて警告メールの内容を作成し、警告メールの送信先アドレスとして登録者データ格納部に登録されている登録者データ中のメールアドレスを使用し、当該警告メールを送信するメール送信制御部として機能させるためのプログラム。
10. 監視用カメラおよび映像自動監視装置と各ユーザ側の監視情報受信装置とがネットワークを介してつながっているネットワークシステムにおいて、
    映像自動監視装置を、監視対象として予め登録されている内容とカメラ映像内の事象／物体との照合を行う画像認識処理により、前記監視用カメラのカメラ映像内に監視対象の事象や物体に該当すると考えられる事象／物体がないかどうかを判断する画像認識制御部，前記画像認識制御部による処理と並行して、前記監視用カメラのカメラ映像の映像配信を行う映像配信制御部，前記画像認識制御部によってカメラ映像内に監視対象の事象／物体が検知された場合に、送信データ格納部内の送信データに基づいて警告メールの内容を作成し、警告メールの送信先アドレスとして登録者データ格納部に登録されている登録者データ中のメールアドレスを使用し、当該警告メールを送信するメール送信制御部，および前記画像認識制御部によってカメラ映像内に監視対象の事象／物体が検知された場合に、カメラ映像の録画を開始し実行して、監視情報受信装置側からの録画映像受信要求に応じてカメラ映像の録画映像を当該監視情報受信装置側に送信する映像録画制御部として機能させるためのプログラム。

Images