JP3922804B2

JP3922804B2 - Image surveillance system

Info

Publication number: JP3922804B2
Application number: JP17338398A
Authority: JP
Inventors: 重幸上原
Original assignee: Secom Co Ltd
Current assignee: Secom Co Ltd
Priority date: 1998-06-19
Filing date: 1998-06-19
Publication date: 2007-05-30
Anticipated expiration: 2018-06-19
Also published as: JP2000011267A

Description

【０００１】
【発明の属する技術分野】
本発明は、撮像手段により撮影された画像に重要監視領域である特定領域の位置を示すマークを重ねて表示する画像監視システムに関し、特に現画像の上記マークの近傍の画像が基準画像の上記マークの近傍の画像と実質的に同じであると視認できると、レイアウト変更により現画像が異常となっても、当該異常が検知された現画像を新たな基準画像に変更可能にした画像監視装置に関する。
【０００２】
【従来の技術】
従来の画像監視システムとしては、例えば、本出願人による特願平１０−１２８１３号がある。この先行出願に記載されているように、画像センサは、監視領域の設定時にその監視領域を撮影して得られた基準画像と、監視領域の監視時に同じ監視領域を撮影して得られた現画像とを比較し、異常の有無を判定している。この異常の有無はコントローラ及び通信回線を経由して警備センタ装置に通報される。警備センタ装置ではモニタに基準画像及び現画像を表示して、監視員がそれらの画像を比較しながら異常の原因を判定し、異常状態解消のために必要な処置をとる。
【０００３】
【発明が解決しようとする課題】
しかしながら、警備センタ装置においては監視員が複数のモニタを監視しているので、各モニタ上の画面のどの領域が監視のために特に重要であるかを迅速に判断することは困難であるという問題がある。
また、画像センサが配置されている監視領域内のテーブルや椅子等の物体のレイアウト変更があると、以下の問題がある。
【０００４】
即ち、監視領域内でレイアウト変更がなされると、現画像は基準画像と異なるものとなるので、異常状態となる。この異常状態は、基準画像を更新すれば解消する。しかし、基準画像は、異常判定を行う場合の基準となる画像であり、変更の可否判断は容易ではない。特に、警備センタ装置においては監視員が複数のモニタを監視しているので、その異常状態が真の異常か監視領域におけるレイアウト変更によるものかを識別することは困難であるという問題がある。
【０００５】
したがって、監視領域内のレイアウトが変更された場合は、変更したユーザがレイアウト変更をした旨を作業員に通知し、その通知を受けた作業員がその監視領域に赴き、基準画像の設定をやり直す、といった煩雑な手順を踏まなければならないという問題があった。
本発明の目的は上記従来技術における問題に鑑み、画像上の特定領域の位置を示すマークを画像に重ねて表示させることにより、画像中の重要監視領域を容易且つ迅速に識別可能にして監視効率を向上させることにある。
【０００６】
本発明の他の目的は、基準画像を変更することが可能か否かを、画像から直ちに判断できる画像監視システムを提供することにある。
【０００９】
【課題を解決するための手段】
上記目的を達成するために、本発明により提供されるものは、監視領域の設定時に監視領域を撮影して得られる基準画像と監視領域の監視時に監視領域を撮影して得られる現画像とを比較して異常検出する撮像手段と、撮像手段により撮影されて得られた画像の一部を示す特定領域の位置情報を記憶する記憶手段と、現画像と基準画像とで特定領域における画像が一致する場合、当該特定領域以外における画像が不一致であっても、当該現画像を新たな基準画像に更新可能にする判断手段と、を具備することを特徴とした画像監視システムである。
本発明の他の態様によれば、撮像手段は、現画像と基準画像とが不一致であるが特定領域の画像が一致しているとレイアウト異常を検出し、判断手段は、撮像手段がレイアウト異常を検出したときの現画像を新たな基準画像に更新可能にする。
【００１０】
【発明の実施の形態】
本発明の実施形態について図を用いて説明する。全図を通じて同一参照番号は同一又は類似物を示す。
図１は本発明の画像監視システムの全体構成を示すブロック図である。
図１において、複数の監視対象Ａ、Ｂ、…、Ｎの各々の建物内や室内にコントローラ１が設置されており、このコントローラ１に画像センサ２、非常ボタン３、侵入センサ４、モード設定器５が接続されている。コントローラ１は、通信回線としての電話回線６を介して、遠隔地の警備センタ装置７と接続される。
【００１１】
コントローラ１は画像センサ２、非常ボタン３、侵入センサ４、又はモード設定器５の状態に応じて警備センタ装置７に異常信号や異常画像を送信するものである。
画像センサ２は、建物内に複数設置され、窓、ドアなどを含む監視領域を撮影し、得られた画像から侵入、レイアウト変更などの異常の有無を判定する。この異常の有無の判定の手法としては、種々のものが提案されており、任意の手法を採用することができる。なお、画像センサ２の各々が監視領域を撮影して得られた画像には特定の位置を示す監視ポイントを設定する。
【００１２】
画像センサ２とコントローラ１との接続は、アナログ信号線８とディジタル信号線９とで行われる。アナログ信号線８は、同軸ケーブルで構成され、画像信号（ＮＴＳＣ方式）を伝達し、ディジタル信号線９は、ツイストペア線で構成され、ディジタル信号による制御信号を伝達する。
非常ボタン３は、強盗などが入ってきた時に押下するスイッチで、コントローラ１に緊急信号を送出する。侵入センサ４は、監視対象への侵入の恐れがある窓や扉等に適宜設置されるマグネットセンサ、赤外線センサなどである。
【００１３】
モード設定器５は、監視対象を警戒セットモード又は警戒解除モードに設定するために操作するもので、例えば監視対象の利用者のみが所有しているＩＤカードである磁気カードを読む磁気カードリーダである。そして、モード設定器５にて読み出したデータが予め記憶しているＩＤコードと一致していれば、警戒セットモード又は警戒解除モードへの移行信号をコントローラ１に送出するものである。
【００１４】
警備センタ装置７はモニタを有し、そのモニタには、本発明により、コントローラ１から送られてきた現画像に、監視ポイントに対応する特定領域を示すマークが重ねて表示される。マークとは例えば監視ポイントを中心とする円の画像である。
このように構成される画像監視システムの概略動作を説明する。画像センサ２が異常を検出すると、画像センサ２からコントローラ１に異常信号を送出する。この異常信号をコントローラ１が受信すると、電話回線６を介して警備センタ装置７へ異常通報を行う。このとき、コントローラ１は、異常を検出した画像センサ２から異常発生時の画像を受信し、画像を警備センタ装置７に伝送する。そして、警備センタ装置７にて、当該画像を表示し、常時このモニタを監視している監視員が異常信号及び画像を見て、適切な処置を取る。なお、これらの動作については、画像監視装置の分野において良く知られたものである。
【００１５】
図２は本発明の一実施の形態により現画像を新たな基準画像に変更する手法の一例の概略を説明する図である。
図２の（ａ）は１つの画像センサ２の監視領域である部屋を撮影して得られた基準画像２１ａを示している。この基準画像２１ａには、金庫２２と、ドア２３と、窓２４及び２５と、植木鉢２６の像が存在している。この基準画像のうち監視のために特に重要な領域として金庫２２の像の上の特定領域２７ａ、ドア２３の像の上の特定領域２７ｂ、及び窓２４の像を含む特定領域２７ｃを示すマークである円が重ねて表示されている。
【００１６】
図２の（ｂ）は同じ画像センサ２により撮影された上記と同じ部屋の現画像２１ｂを示している。この現画像２１ｂは、植木鉢２６が移動された結果、その位置が基準画像２１ａにおける位置と異なっていることを除き、基準画像２１ａと同一である。
従来はこのように室内のレイアウトを変更すると、基準画像２１ａと現画像２１ｂとが不一致となるので、画像センサ２はこの部屋に異常が発生したと判断して異常状況が発生した旨を警備センタ装置７に通報していた。そして、基準画像を図２の（ｂ）と同じものに変更しない限り、異常状態は解消しないが、警備センタ装置７にいる監視員はレイアウトの変更があったことを実際に現場を見て確認するか責任者から通報されないかぎり、基準画像の変更許可を与えることはできなかった。
【００１７】
本発明によれば、画像センサ２においては例えば、基準画像２１ａと現画像２１ｂとが不一致であり且つ不一致の部分が時間の経過とともに移動する又は所定の大きさ以上であるとき侵入と判断し、基準画像２１ａと現画像２１ｂとの不一致だけの場合は、レイアウト異常と判断する。または、基準画像２１ａと現画像２１ｂとが不一致であるが特定領域２７ａ、２７ｂ、２７ｃは一致している場合をレイアウト異常と判断する。画像センサ２がレイアウト異常と判断すると、これらの基準画像２１ａ及び現画像２１ｂは画像センサ２からコントローラ１及び電話回線６を経由して警備センタ装置７に送られてその中のモニタに表示され、警備センタ装置７にいる監視員は必ず現画像を視認できる。この現画像上にも、上記特定領域２７ａ、２７ｂ、及び２７ｃを示すマークである円が基準画像２１ａ上の円と同一位置に表示されている。ここで同一位置とは監視領域上の座標が同じという意味であって、例えば、金庫２２が移動されても、特定領域２７ａは金庫の移動前と移動後とで監視領域の画面上の同じ位置に表示されるという意味である。本発明により、これら特定領域２７ａ、２７ｂ及び２７ｃの内部やそれらの近傍の画像が現画像と基準画像とで一致すると警備センタ装置７にいる監視員が視覚により確認さえすれば、たとえレイアウト変更があっても現画像を新たな基準画像に変更することを許可することができ、これら特定領域２７ａ、２７ｂ及び２７ｃ内の少なくとも一つの画像が現画像と基準画像とで異なると監視員が視覚により確認すれば、真の異常が発生したと判断して、現画像を新たな基準画像とすることは禁止する。すなわち、監視員は、監視領域の詳細な状況を知らなくても、画面上のマーク位置に金庫２２、ドア２３及び窓２４が映っていれば、画像監視に支障のないレイアウト変更であると容易に判断できる。
【００１８】
次に画像センサ２、コントローラ１、及び警備センタ装置７の具体的な構成を説明する。
図３は図１に示した複数の画像センサ２の１つの構成を示すブロック図である。他の画像センサ２も図３に示したものと同じ構成を有する。
図３において、画像センサ２には、ＣＰＵ等により構成される制御手段２０１と電源２０２が設けられる。画像センサ２内の各部分は、制御手段２０１により制御され、電源２０２から電力の供給を受ける。電源２０２は、外部から供給されるＡＣ電圧をＤＣ電圧に変換する変換装置から構成されている。なお、電源２０２を画像センサ２内に設ける代わりに、コントローラ１から電力供給をさせてもよい。
【００１９】
制御手段２０１には記憶手段２２０が接続されている。この記憶手段２２０には、画像センサ２に所定の動作を実行させるためのプログラムを記憶したプログラム領域、パラメータを記憶したパラメータ領域、ワークエリア、監視領域の状態、即ち、異常が発生しているか又は正常であるかの区別を記憶する状態記憶領域、監視領域が警戒セットモード又は警戒解除モードのいずれにあるかを記憶するモード記憶領域、異常を検出するために基準画像を記憶する領域、および監視ポイントの座標を記憶する領域が設けられている。
【００２０】
監視領域を撮影する撮像手段２０３は、ＣＣＤカメラにより構成され、可視領域から赤外領域までの感度を有する。赤外線投光手段２０４が設けられ、夜間など暗くなった時に、監視領域に赤外線が投光される。
画像処理手段２０５は、記憶手段２２０に記憶された現画像と基準画像とを対比して、異常が発生したか否かを判定する。異常が発生したかどうかの判定のロジックには様々な方法が知られているが、本発明の主題ではないのでここでは説明を省略する。表示手段２０６は、ＬＥＤにより構成され、異常検出時に点灯し、非検出時には消灯して、異常検出の有無を画像センサ２の外部に表示する。
【００２１】
通信手段２０７は、コントローラ１と信号の送受信を行うインターフェースで、ディジタル信号線９によりコントローラ１と接続される。
画像出力手段２０８は、異常発生時の画像を出力するためのインターフェースで、切換手段２０９を介してアナログ信号線８と接続される。アナログ信号線８は、図１に示すように、コントローラ１と各画像センサ２とを直列に接続する。画像センサ２の切換手段２０９は、正常時はアナログ信号線８の入力側と出力側を接続し、異常時は入力側のアナログ信号線８を切り離して、画像出力手段２０８を出力側のアナログ信号線８に接続させる。なお、図３では、入力側を「他の画像センサから」、出力側を「コントローラへ」と表示してある。
【００２２】
アドレス設定部２１０は、ディップスイッチにより構成され、コントローラ１が画像センサ２を特定するためのアドレスが設定される。設定手段２１１は、電源をオンオフするための手段である。さらに、設定手段２１１をオフすると、切換手段２０９は、アナログ信号線８の入力側と出力側を接続させて、当該画像センサ２をアナログ信号線８からバイパスさせる。
【００２３】
図４はコントローラ１の構成を示すブロック図である。
図４において、コントローラ１には、ＭＰＵなどにより構成される制御部１０１と電源回路１０２が設けられている。コントローラ１内の各部分は、制御部１０１により制御され、電源回路１０２から電力の供給を受ける。電源回路１０２は、外部からのＡＣ電圧をＤＣ電圧に変換する変換回路とバッテリを有する。また、モード設定器５が制御部１０１に接続されている。
【００２４】
コントローラ１には、更に、以下の部分が設けられている。
センサ監視回路１０３は、非常ボタン３、侵入センサ４とのインターフェースである。モデム１０４が電話回線６との間に設けられている。画像センサ通信制御部１０５は、画像センサ２とディジタル信号線９で接続されている。映像入出力制御部１０６は、画像センサ２とアナログ信号線８で接続されている。この映像入出力制御部１０６は、画像センサ２から送られてきた画像信号を、モデム１０４と外部に接続されたモニタ装置１０に分配する。
【００２５】
表示部１０７は、通常は、監視領域の監視状態を画面上に表示し、異常が検出されたときは、画面上に異常の種類、異常発生箇所などを表示する液晶ディスプレイと、警報音を鳴動させるスピーカとを備えている。また、表示部１０７は、画像センサ２の設定作業時にも使用される。設定手段１０８は、画像センサ２の感度、画像センサ２の設置角度、設置高さ、及び撮影して得られた画像内の監視ポイント等の初期設定又は設定変更時に使用される。
【００２６】
本例では、電話回線として、アナログ電話回線が使用されているが、ＩＳＤＮのようなディジタル電話回線を使用することも可能である。
次にコントローラ１の動作の概略を説明する。
モード設定器５により、警戒セットモード又は警戒解除モードが設定され、モード移行が生じると、コントローラ１から、画像センサ通信制御部１０５、ディジタル信号線９を介して全画像センサ２に、モード移行信号が送信される。
【００２７】
次いでコントローラ１は、画像センサ通信制御部１０５とディジタル信号線９を介して、状態呼出信号、モード移行信号、異常画像送信要求信号、異常画像消去信号などを画像センサ２に送信し、画像センサ２から、正常信号、異常信号、などを受信する。また、アナログ信号線８と映像入出力制御部１０６を介して、画像センサ２からの画像信号を受信する。
【００２８】
なお、コントローラ１と画像センサ２及び、コントローラ１と警備センタ装置７との信号の送受信については、図１を用いて説明済みであるので、ここではこれ以上の説明は省略する。
図５は、警備センタ装置７における画像監視システムに関する部分の構成を示す。
【００２９】
図５において、警備センタ装置７には、ＭＰＵなどにより構成され、警備センタ装置７内の各部分を制御する制御部７０１と、電話回線６を通してコントローラ１と通信を行う通信インターフェース７０２と、コントローラ１から送られた画像信号及びその関連の信号を記憶する画像情報記憶部７０３と、異常発生時の画像を表示するモニタ７０４と、キーボード等の操作部７０５と、モニタ７０４を制御する表示制御部７０６とが設けられている。
【００３０】
制御部７０１は、異常信号を受信すると、モニタ７０４を制御して、異常が発生したこと、異常発生物件名、異常発生箇所などを表示させ、次いでモニタ７０４に異常発生時の画像を表示させる。なお、異常が発生したこと、異常発生物件名、異常発生箇所などはモニタ７０４とは別の表示手段に表示させてもよい。
画像情報記憶装置７０３は、画像センサ２が配置される建物等の物件のコードを記憶する物件コード領域と，警戒セットモードか警戒解除モードかを示すコードを記憶するモード領域と、画像センサ２毎の位置を記憶する画像センサアドレス領域と、その画像センサ２に設定されている監視ポイントの情報を記憶する監視ポイント情報領域とを有する。監視ポイント情報は、本実施の形態においてはコントローラ１から画像が送信される都度、警備センタ装置７内の画像情報記憶装置７０３に格納される。
【００３１】
次にコントローラ１による画像センサ２の監視ポイントの初期設定又は設定変更を説明する。
画像センサ２の初期設定時又は設定変更時には、作業員は、モニタ装置１０を映像入出力制御部１０６に接続し、表示部１０７及びモニタ装置１０に表示される指示に従い、モニタ装置１０に表示される監視領域を確認しながら、設定手段１０８から画像センサ２の、例えば、高さ、角度、及び本発明に係る監視ポイントの座標などの設定を行う。設定値は制御部１０１内のＲＡＭ（図示せず）に格納される。
【００３２】
すなわち、作業者は設定手段１０８を用いて作業者のＩＤを入力し、制御部１０１は入力されたＩＤがコントローラ１における各種の設定を許可された者のＩＤと一致するかを照合する。次に、設定手段１０８を用いて各画像センサ２の監視ポイントを含む各種の設定を開始する。そのために、１つの画像センサ２を選択し、その画像センサ２の監視対象を撮影して得られた画像の監視ポイントを設定する。設定した監視ポイントは画像センサ２内の記憶手段２２０に格納しておく。
【００３３】
次に、その画像センサ２により被撮像物を撮影して得られる、障害物や人物の存在しない基準画像を取得し、やはり画像センサ２内の記憶手段２２０内に格納しておく。こうして全ての画像センサ２の設定を行う。画像センサ２の設定が全て終了すると、画像センサ２毎に取得した基準画像をその画像センサ２の記憶手段２２０に格納する。
【００３４】
このように、コントローラ１において、各画像センサ２の設定が行えるようにすることにより、一箇所で全画像センサ２の設定を行うことができる。モニタ装置１０は、設定終了後、コントローラ１から取り外される。
図６の（ａ）〜（ｃ）は監視ポイントの設定時の画面の一例を示す図である。設定手段１０８により画像センサ２を選択すると、モニタ装置１０には図６（ａ）に示す監視ポイント設定画面が表示されている。この画面は例えば２５６画素×２４０画素の大きさである。画面には、選択された画像センサ２が撮影した画像とともに〔監視ポイント〕というタイトルが表示され、「設定」、「確認＆削除」、「終了」の文字が表示される。ここで、設定手段１０８にて、「設定」を選択すると図６（ｂ）の画面、即ち、モニタ装置１０に現在の画像と＋印のカーソルを表示させる。ここで、「終了」を選択すると、監視ポイントの当該画像センサにおける設定が終了したこととなる。そして、前述のように基準画像の取得に進む。また、「確認＆削除」を選択すると、図６（ｂ）へ進む。
【００３５】
図６（ｂ）の画面では図示のように、画面中央に＋印のカーソル６１が表示される。また、監視ポイントが設定されていれば、これらを中心とする円が表示される。図６（ｂ）に示す画面では、既設定の監視ポイントを中心とする円６２、６３及び６４が表示されている。
次いで設定手段１０８でカーソル６１をスクロールさせることにより、画面上の所望の位置に移動する。監視ポイントを設定したい位置にカーソル６１を移動させて、設定手段１０８の（図示しない）確認ボタンを押下することにより、図６（ｃ）の画面になる。図６（ｃ）において、カーソル６１の＋印の交点（監視ポイント）を中心とする円６５が表示されてカーソル６１の位置が確定されている。また、画面上には「直前削除」、「追加」、「終了」が表示されている。この監視ポイントを追加する場合は、画面上の「追加」を設定手段１０８により選択し、確認ボタンの押下により追加を決定する。直前に追加された監視ポイントを削除したい場合は、「直前削除」を設定手段１０８により選択する。これにより、コントローラ１から監視ポイント情報を画像センサ２へ送出する。これらを繰り返すことにより、画像センサ２に監視ポイントを全て設定することができる。監視ポイントの設定可能な最大数を定めておき、設定された監視ポイントの数が最大数に達すると、「追加」は表示されなくなる。図６（ｃ）の画面で「終了」を選択すると図６（ａ）の画面に戻る。
【００３６】
このようにして設定された画像センサの監視ポイント情報は、他のパラメータとともに、コントローラ１内の制御部の中のＲＡＭ（図示省略）に格納されるとともに、画像センサ２内の記憶手段２２０にも格納される。
図７はコントローラ１の処理を示すシーケンス図である。図７のシーケンス図を参照しながら、コントローラ１の動作を説明する。
【００３７】
コントローラ１内の画像センサ通信制御部１０５は１つの画像センサ２に対してポーリングにより状態呼出信号を送信する（図７の（１））。画像センサ通信制御部１０５はその画像センサ２から状態信号を受信する。受信した状態信号が異常信号かどうかを判定し、異常でなければ次の画像センサ２に対して同様な動作を繰り返す。異常信号を検出したと判定すると（図７の（２））、その画像センサ２のアドレスと異常状態を制御部１０１内のＲＡＭに記憶する。図示はしていないが、一定時間内にその画像センサ２から状態信号が来ない場合も、その画像センサ２に異常が発生したとして制御部１０１内のＲＡＭに記憶する。こうして、コントローラ１はすべての画像センサの状態を順次チェックする。画像センサ２における異常の判定方法自体は前述の如く一例を示したが、他にも様々な方法が知られている。ここでは本発明の主題ではないので説明を省略する。
【００３８】
図８は図３に示した画像センサ２が何らかの異常を検出した場合のコントローラ１の動作を説明するフロチャートである。
図８において、コントローラ１は画像センサ２に状態呼出信号を送出し、これに応答して画像センサ２が何らかの異常を検出すると、ステップＳ８１でコントローラ１はこの異常を検出し、ステップＳ８２でコントローラ１内の制御部１０１は警備センタ装置７との通信回線の接続処理をする。ここでは、異常には非常ボタン３の押下による異常、侵入センサ４の作動による異常等もあり得る。そこで、ステップＳ８３では画像センサ２により検出されたレイアウト異常かどうかを判定する。画像センサ２内の記憶手段２２０から読み出した基準画像と現画像との特定領域が同じで基準画像と現画像とが異なっていればレイアウト異常と判定される。この判定は画像センサ２内の制御手段２０１が行い、判定結果がコントローラ１に通知される。
【００３９】
ステップＳ８３で、画像センサ２により検出された異常がレイアウト異常ではない場合はステップＳ８９にて警備センタ装置７に異常信号を送出し、ステップＳ９０にて警備センタ装置７との通信回線切断処理を行い、ステップＳ９１にて表示部１０７に異常表示をして処理を終了する。警備センタ装置７では受信した異常信号に対処して適切な処置をとる。また、コントローラ１が設置されている場所を警備する警備員は表示部１０７に表示された異常情報を見て異常状態の原因を究明し、正常に戻すべく適切な処置をとることになる。
【００４０】
ステップＳ８３で画像センサにより検出された異常がレイアウト異常であると判定されると（図７の（２））、ステップＳ８４に進み、警備センタ装置７との間の回線を捕捉し（図７の（３））、レイアウト異常信号を警備センタ装置７に送出する。次いでステップＳ８５で異常を検出した画像センサ２に対して異常画像要求信号を送出する（図７の（５））。次いでステップＳ８６で基準画像と監視ポイント情報を画像センサ２の記憶手段から読み出して受信し（図７の（６））、それらを警備センタ装置７に送出する（図７の（７））。これにより、基準画像及び監視ポイント情報は、警備センタ装置７に予め格納しないので、警備センタ装置７における格納データ量が少なくて済むという効果がある。
【００４１】
次いでステップＳ８７で異常検出した画像センサ２へ異常画像要求信号を送出し（図７の（８））、ステップＳ８８でその画像センサから異常画像を受信して（図７の（９））、警備センタ装置７に送出する（図７の（１０））。次いで、ステップＳ９０にて警備センタ装置７との通信回線切断処理をする。この処理は、図７の（１１）から（１３）に示されるように、画像センサ２に対して画像送出終了信号を送り、その画像センサから確認信号ＡＣＫを受け取り、次いで警備センタ装置７との回線を開放することにより行われる。最後に表示部１０７に異常が発生した旨を表示する。以上で異常発生時のコントローラ１の処理を終了し、図７の（１４）以降に示される基準画像の更新処理に移行する。
【００４２】
次に基準画像の更新について説明する。
異常画像を受信した警備センタ装置７において、基準画像内の監視ポイントを中心とする円内の画像が異常画像内の監視ポイントを中心とする円内の画像と一致したと監視員が視認できた場合は、監視員が基準画像を現画像である異常画像に更新することを許可し、警備センタ装置７とコントローラ１との間の回線を捕捉し（図７の（１４））、基準画像更新コマンドをコントローラ１に送信する。なお、基準画像内の監視ポイントを中心とする円内の画像と異常画像内の監視ポイントを中心とする円内の画像との一致を画像処理により判断し、一致判定したときのみ基準画像更新コマンドを送信できるようにしてもよい。コントローラ１は警備センタ装置７から基準画像更新コマンドを受信し（図７の（１５））、それを画像センサ２へ送信する（図７の（１６））。これにより、画像センサ２においては異常を検知したときの画像を新たな基準画像とする。
【００４３】
次いで画像センサ２への基準画像更新コマンドの送信から例えば３秒以内で確認信号ＡＣＫを待機し、３秒経過してもＡＣＫを受信しなかった場合は、コントローラ１と画像センサ２との間で何らかの障害が発生していると判断されてＮＧ信号を警備センタ装置７に送信して基準画像更新処理を終了する。
画像センサ２への基準画像更新コマンドの送信から３秒以内に画像センサ２からＡＣＫを受信すると、コントローラ１から警備センタ装置７にそのＡＣＫを送信し（図７の（１７）及び（１８））、ＡＣＫの送信から例えば３秒以内に警備センタ装置７から異常復旧コマンドを受信すると、それを画像センサ２に送信する（図７の（１９）及び（２０））。これにより、画像センサ２では異常状態がクリアされて基準画像となる。３秒以内に異常復旧コマンドを受信しない場合は、なにもせずに処理を終了する。
【００４４】
次いで画像センサ２への異常復旧コマンドの送信から再び例えば３秒以内で確認信号ＡＣＫを待機し、３秒経過してもＡＣＫを受信しなかった場合はＮＧ信号を警備センタ装置７に送信して基準画像更新処理を終了する。３秒以内に画像センサ２からＡＣＫを受信すると、そのＡＣＫを警備センタ装置７に送信し（図７の（２１）及び（２２））、次いで異常記憶をクリアして処理を終了する。
【００４５】
以上により基準画像の更新動作は終了する。
次に警備センタ７における異常検知画像の表示の処理の流れを説明する。
最初にコントローラ１から送出された例えば物件Ｘの画像センサ２であるカメラＡからのレイアウト異常信号を警備センタ装置７が受けると、その中のモニタ７０４にそのレイアウト異常信号が文字や画像で表示される。このレイアウト異常信号は画像を表示するモニタ７０４とは別のモニタで表示してもよい。
【００４６】
監視員はこのレイアウト異常信号をモニタ７０４上で見た結果、レイアウト異常通報があったことを知ると、キーボード等の操作部７０５を操作して物件ＸのカメラＡの画像の表示を要求する。制御部７０１はこの要求を受けて画像情報記憶部７０３に対して物件ＸのカメラＡの検知画像を要求する。異常通報があった後は、画像情報記憶部７０３には物件ＸのカメラＡの検知画像が異常画像として格納されており、監視ポイントも格納されている。したがって、検知画像の要求に応じて、画像情報記憶部７０３内の検知画像が制御部７０１に送られる。次いで制御部７０１は画像情報記憶部７０３に対して物件ＸのカメラＡに設定されている監視ポイント情報を要求し、それに応じて画像情報記憶部７０３から制御部７０１に物件ＸのカメラＡの監視ポイント情報情報が送られる。次いで制御部７０１は表示制御部７０６を経由してモニタ７０４に、物件ＸのカメラＡの検知画像と監視ポイント情報を送る。こうして、モニタ７０４上に異常検知画像が表示されるとともに、その画像上に監視ポイントを示す円等のマークが表示される。
【００４７】
次に本発明の他の実施の形態を説明する。この実施の形態によれば、警備センタ装置７内のモニタ７０４上への画像上に監視ポイントを示すマークを表示したりマークの表示を禁止したり、選択されたマークのみを表示したりできる。
即ち、モニタ７０４上に監視ポイントを示すマークをオーバラップさせた異常検知画像が表示されている状態で、操作部７０５を監視員が操作してマークを表示させないように指示すると、制御部７０１はこれを受けて表示制御部７０６に対して、マークを表示させないように要求する。すると、表示制御部７０７はモニタ７０４に対して検知画像のみを送出し、それにより、モニタ７０４上にはマークのオーバラップが無い異常検知画像のみが表示される。
【００４８】
又、異常検知画像が表示されている状態で再び監視ポイントのマークをオーバラップ表示させたい場合は、操作部７０５を用いてその旨の要求をすると、制御部７０１はこれを受けて表示制御部７０６に対して、マークの表示を要求する。すると、表示制御部７０７はモニタ７０４に対して検知画像と監視ポイント情報とを送出し、それにより、モニタ７０４上にはマークをオーバラップさせた異常検知画像が表示される。
更に、監視ポイントのマークを選択し、操作部７０５を用いて表示又は非表示の要求操作をすると、制御部７０１はこれを受けて表示制御部７０６に対して、選択された監視ポイントのマークのみの表示を要求する。すると、表示制御部７０７はモニタ７０４に対して検知画像と選択された監視ポイント情報とを送出し、それにより、モニタ７０４上には選択されたマークのみをオーバラップさせた異常検知画像が表示される。
【００４９】
これにより、必要に応じて、特定領域のマークの一部又は全部の表示を禁止したり禁止を解除したりすることができるようにすることにより、監視者に便宜を図ることができる。
以上の説明において、監視ポイントを示すマークは基準画像及び現画像のいずれか一方に表示させても、基準画像と現画像との両方に表示させてもよい。基準画像のみ又は現画像のみに監視ポイントを示すマークを表示すると、基準画像上又は現画像上の重要監視領域を監視員が容易に他の領域と区別して注意深く観察することができる。また、基準画像と現画像との両方に監視ポイントを示すマークを表示すると、重要監視領域における基準画像と現画像との差異を監視員が視認し易くなる。
【００５０】
尚、監視ポイントを示すマークは円に限定されるものではなく、四角や三角の枠や×印等、重要監視領域の位置を視覚的に認識させるものであれば何でもよい。
以上の説明では、画像センサ２が撮影した画像をコントローラ１を経由して警備センタ装置７に送出する毎に、各画像センサ２により撮影されて得られた画像内の監視ポイント及び基準画像を警備センタ装置７内の画像情報記憶装置７０３に一時的に記憶させた。これにより、警備センタ装置７では予めすべての画像カメラの基準画像と監視ポイントを記憶しておく必要がないので、メモリ容量が少なくて済む。
【００５１】
これに代えて、本発明の他の実施の形態によれば、画像センサ２が撮影した画像をコントローラ１を経由して警備センタ装置７に送出する前に予め、すべての画像センサにより撮影されて得られた画像内の監視ポイント及び基準画像を警備センタ装置７内の画像情報記憶装置７０３に記憶させてもよい。この場合は、監視ポイントの初期設定時又は設定変更時に、基準画像と監視ポイント情報を警備センタ装置７内の画像情報記憶部７０３に格納すればよい。これにより、画像センサ２からは異常信号と画像データのみを送出すればよいので、画像センサの負荷が軽くなるという効果がある。
【００５２】
また、警備センタ装置７は電話回線６を経由してコントローラ１に接続された例を記載してきたが、本発明はこれに限定されず、コントローラ１と警備センタ装置７が電話回線を介さずに直接接続されていてもよい。
【図面の簡単な説明】
【図１】本発明の画像監視システムの全体構成を示す図である。
【図２】本発明の一実施の形態により現画像を新たな基準画像に変更する手法の一例の概略を説明する図である。
【図３】画像センサの構成を示すブロック図である。
【図４】コントローラの構成を示すブロック図である。
【図５】警備センタ装置の構成を示すブロック図である。
【図６】監視ポイントの設定方法の一例を示す図である。
【図７】本発明に係る動作を示すシーケンス図である。
【図８】異常発生時のコントローラの動作を説明するフローチャートである。
【符号の説明】
２…画像センサ
２７ａ、２７ｂ、２７ｃ…特定領域を示すマーク
１５１…カーソル
１５２、１５３、１５４…円
２２０…記憶手段
７…警備センタ装置
７０４…モニタ
７０５…操作部
７０６…表示制御部[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image monitoring system that displays a mark indicating the position of a specific area, which is an important monitoring area, on an image captured by an imaging unit, and particularly an image in the vicinity of the mark of a current image is the mark of a reference image. If the current image becomes abnormal due to a layout change when it can be visually recognized that it is substantially the same as an image in the vicinity of the image monitoring apparatus, the current image in which the abnormality is detected can be changed to a new reference image. .
[0002]
[Prior art]
As a conventional image monitoring system, there is, for example, Japanese Patent Application No. 10-12813 by the present applicant. As described in this prior application, the image sensor has a reference image obtained by photographing a monitoring area when the monitoring area is set, and a current image obtained by photographing the same monitoring area when the monitoring area is monitored. The image is compared to determine whether there is an abnormality. The presence or absence of this abnormality is reported to the security center apparatus via the controller and communication line. In the security center device, the reference image and the current image are displayed on the monitor, and the monitoring person determines the cause of the abnormality while comparing the images, and takes necessary measures for eliminating the abnormal state.
[0003]
[Problems to be solved by the invention]
However, in the security center device, since the monitor monitors a plurality of monitors, it is difficult to quickly determine which area of the screen on each monitor is particularly important for monitoring. There is.
In addition, if there is a change in the layout of an object such as a table or chair in the monitoring area where the image sensor is arranged, the following problems arise.
[0004]
In other words, if the layout is changed in the monitoring area, the current image becomes different from the reference image, so that an abnormal state occurs. This abnormal state is resolved by updating the reference image. However, the reference image is an image serving as a reference when performing abnormality determination, and it is not easy to determine whether or not the change can be made. In particular, in the security center apparatus, since a monitor monitors a plurality of monitors, there is a problem that it is difficult to identify whether the abnormal state is a true abnormality or a layout change in the monitoring area.
[0005]
Therefore, when the layout in the monitoring area is changed, the changed user notifies the worker that the layout has been changed, and the worker who has received the notification goes to the monitoring area and sets the reference image again. There is a problem that it is necessary to take a complicated procedure.
In view of the above-described problems in the prior art, the object of the present invention is to display a mark indicating the position of a specific area on an image so as to be superimposed on the image so that an important monitoring area in the image can be easily and quickly identified. Is to improve.
[0006]
Another object of the present invention is to provide an image monitoring system that can immediately determine from the image whether or not the reference image can be changed.
[0009]
[Means for Solving the Problems]
In order to achieve the above object, the present invention provides:An imaging means for detecting an abnormality by comparing a reference image obtained by photographing the monitoring area when setting the monitoring area and a current image obtained by photographing the monitoring area when monitoring the monitoring area, and obtained by photographing by the imaging means When the image in the specific area matches between the storage means for storing the position information of the specific area indicating a part of the obtained image and the current image and the reference image, even if the images in the other areas do not match, An image monitoring system comprising: a determination unit that can update the current image to a new reference image;It is.
According to another aspect of the present invention, the imaging means detects a layout abnormality when the current image and the reference image do not match but the image in the specific area matches, and the judging means detects the layout abnormality when the imaging means The current image when the image is detected can be updated to a new reference image.
[0010]
DETAILED DESCRIPTION OF THE INVENTION
Embodiments of the present invention will be described with reference to the drawings. Throughout the drawings, the same reference numerals indicate the same or similar.
FIG. 1 is a block diagram showing the overall configuration of the image monitoring system of the present invention.
In FIG. 1, a controller 1 is installed in each building or room of a plurality of monitoring objects A, B,..., N. The controller 1 includes an image sensor 2, an emergency button 3, an intrusion sensor 4, and a mode setting device. 5 is connected. The controller 1 is connected to a remote security center device 7 via a telephone line 6 as a communication line.
[0011]
The controller 1 transmits an abnormal signal or an abnormal image to the security center device 7 according to the state of the image sensor 2, the emergency button 3, the intrusion sensor 4, or the mode setting device 5.
A plurality of image sensors 2 are installed in the building, take an image of a monitoring area including windows, doors, and the like, and determine whether there is an abnormality such as intrusion or layout change from the obtained image. Various methods for determining the presence / absence of this abnormality have been proposed, and any method can be employed. Note that a monitoring point indicating a specific position is set in an image obtained by each of the image sensors 2 capturing a monitoring area.
[0012]
Connection between the image sensor 2 and the controller 1 is performed by an analog signal line 8 and a digital signal line 9. The analog signal line 8 is composed of a coaxial cable and transmits an image signal (NTSC system), and the digital signal line 9 is composed of a twisted pair line and transmits a control signal based on the digital signal.
The emergency button 3 is a switch that is pressed when a burglar or the like enters and sends an emergency signal to the controller 1. The intrusion sensor 4 is a magnet sensor, an infrared sensor, or the like that is appropriately installed in a window or door that may possibly enter the monitoring target.
[0013]
The mode setting unit 5 is operated to set the monitoring target to the warning set mode or the warning cancellation mode. For example, the mode setting unit 5 is a magnetic card reader that reads a magnetic card that is an ID card owned only by the user to be monitored. is there. If the data read by the mode setting device 5 matches the ID code stored in advance, a signal for shifting to the warning set mode or the warning release mode is sent to the controller 1.
[0014]
The security center device 7 has a monitor, and a mark indicating a specific area corresponding to the monitoring point is superimposed on the current image sent from the controller 1 according to the present invention. The mark is, for example, a circle image centered on the monitoring point.
A schematic operation of the image monitoring system configured as described above will be described. When the image sensor 2 detects an abnormality, the image sensor 2 sends an abnormality signal to the controller 1. When the controller 1 receives this abnormality signal, the abnormality is notified to the security center device 7 via the telephone line 6. At this time, the controller 1 receives an image at the time of occurrence of an abnormality from the image sensor 2 that has detected the abnormality, and transmits the image to the security center device 7. Then, the security center device 7 displays the image, and a monitor who constantly monitors the monitor looks at the abnormal signal and the image and takes appropriate measures. Note that these operations are well known in the field of image monitoring devices.
[0015]
FIG. 2 is a diagram for explaining an outline of an example of a technique for changing a current image to a new reference image according to an embodiment of the present invention.
FIG. 2A shows a reference image 21a obtained by photographing a room which is a monitoring area of one image sensor 2. FIG. The reference image 21a includes an image of the safe 22, the door 23, the windows 24 and 25, and the flower pot 26. Among the reference images, marks indicating a specific area 27a on the image of the safe 22, a specific area 27b on the image of the door 23, and a specific area 27c including the image of the window 24 are particularly important areas for monitoring. A circle is displayed overlaid.
[0016]
FIG. 2B shows a current image 21b of the same room as that taken by the same image sensor 2. This current image 21b is the same as the reference image 21a except that the position of the flowerpot 26 is different from the position in the reference image 21a as a result of the movement of the flower pot 26.
Conventionally, when the indoor layout is changed in this manner, the reference image 21a and the current image 21b do not coincide with each other, so that the image sensor 2 determines that an abnormality has occurred in this room and indicates that an abnormal situation has occurred. The device 7 was reported. Then, unless the reference image is changed to the same one as in FIG. 2B, the abnormal state is not resolved, but the monitor in the security center device 7 confirms that the layout has actually changed by checking the site. It was not possible to give permission to change the reference image unless it was reported by the responsible person.
[0017]
According to the present invention, in the image sensor 2, for example, when the reference image 21a and the current image 21b do not match and the mismatched portion moves over time or is greater than or equal to a predetermined size, it is determined as intrusion, If there is only a mismatch between the reference image 21a and the current image 21b, it is determined that the layout is abnormal. Alternatively, if the reference image 21a and the current image 21b do not match but the specific areas 27a, 27b, and 27c match, it is determined that the layout is abnormal. When the image sensor 2 determines that the layout is abnormal, the reference image 21a and the current image 21b are sent from the image sensor 2 to the security center device 7 via the controller 1 and the telephone line 6 and displayed on the monitor therein. The monitor in the security center device 7 can always visually recognize the current image. Also on this current image, a circle which is a mark indicating the specific areas 27a, 27b and 27c is displayed at the same position as the circle on the reference image 21a. Here, the same position means that the coordinates on the monitoring area are the same. For example, even if the safe 22 is moved, the specific area 27a is the same position on the screen of the monitoring area before and after the movement of the safe. It means that it is displayed. According to the present invention, if the monitor in the security center device 7 visually confirms that the images in the specific areas 27a, 27b, and 27c and the vicinity thereof match the current image and the reference image, the layout can be changed. Even if it exists, it is permitted to change the current image to a new reference image. When at least one image in the specific areas 27a, 27b and 27c is different between the current image and the reference image, If it is confirmed, it is determined that a true abnormality has occurred, and it is prohibited to use the current image as a new reference image. That is, even if the monitor does not know the detailed status of the monitoring area, if the safe 22, the door 23, and the window 24 are reflected at the mark position on the screen, it is easy to change the layout without hindering image monitoring. Can be judged.
[0018]
Next, specific configurations of the image sensor 2, the controller 1, and the security center device 7 will be described.
FIG. 3 is a block diagram showing one configuration of the plurality of image sensors 2 shown in FIG. Other image sensors 2 also have the same configuration as that shown in FIG.
In FIG. 3, the image sensor 2 is provided with a control unit 201 configured by a CPU or the like and a power source 202. Each part in the image sensor 2 is controlled by the control unit 201 and receives power supply from the power source 202. The power source 202 includes a conversion device that converts an AC voltage supplied from the outside into a DC voltage. Instead of providing the power source 202 in the image sensor 2, power may be supplied from the controller 1.
[0019]
A storage unit 220 is connected to the control unit 201. In this storage means 220, a program area for storing a program for causing the image sensor 2 to execute a predetermined operation, a parameter area for storing parameters, a work area, a state of a monitoring area, that is, whether an abnormality has occurred or A state storage area for storing a distinction as to whether it is normal, a mode storage area for storing whether the monitoring area is in a warning set mode or a warning release mode, an area for storing a reference image for detecting an abnormality, and monitoring An area for storing the coordinates of the point is provided.
[0020]
The imaging means 203 for photographing the monitoring area is constituted by a CCD camera and has sensitivity from the visible area to the infrared area. Infrared light projecting means 204 is provided, and infrared light is projected onto the monitoring area when it becomes dark, such as at night.
The image processing unit 205 compares the current image stored in the storage unit 220 with the reference image to determine whether an abnormality has occurred. Various methods are known for determining whether or not an abnormality has occurred. However, since it is not the subject of the present invention, description thereof is omitted here. The display unit 206 is configured by an LED, and is turned on when an abnormality is detected, and is turned off when an abnormality is not detected. The display unit 206 displays the presence / absence of abnormality detection outside the image sensor 2.
[0021]
The communication unit 207 is an interface that transmits and receives signals to and from the controller 1 and is connected to the controller 1 through the digital signal line 9.
The image output unit 208 is an interface for outputting an image when an abnormality occurs, and is connected to the analog signal line 8 via the switching unit 209. As shown in FIG. 1, the analog signal line 8 connects the controller 1 and each image sensor 2 in series. The switching means 209 of the image sensor 2 connects the input side and the output side of the analog signal line 8 when normal, and disconnects the analog signal line 8 on the input side when abnormal, so that the image output means 208 is connected to the analog signal on the output side. Connect to line 8. In FIG. 3, the input side is “from another image sensor”, and the output side is “to the controller”.
[0022]
The address setting unit 210 includes a dip switch, and an address for the controller 1 to specify the image sensor 2 is set. The setting unit 211 is a unit for turning on and off the power. Further, when the setting unit 211 is turned off, the switching unit 209 connects the input side and the output side of the analog signal line 8 to bypass the image sensor 2 from the analog signal line 8.
[0023]
FIG. 4 is a block diagram showing the configuration of the controller 1.
In FIG. 4, the controller 1 is provided with a control unit 101 and a power supply circuit 102 configured by an MPU or the like. Each part in the controller 1 is controlled by the control unit 101 and receives power supply from the power supply circuit 102. The power supply circuit 102 includes a conversion circuit that converts an external AC voltage into a DC voltage and a battery. Further, the mode setting device 5 is connected to the control unit 101.
[0024]
The controller 1 is further provided with the following parts.
The sensor monitoring circuit 103 is an interface with the emergency button 3 and the intrusion sensor 4. A modem 104 is provided between the telephone line 6 and the modem 104. The image sensor communication control unit 105 is connected to the image sensor 2 through a digital signal line 9. The video input / output control unit 106 is connected to the image sensor 2 through the analog signal line 8. The video input / output control unit 106 distributes the image signal sent from the image sensor 2 to the modem 104 and the monitor device 10 connected to the outside.
[0025]
The display unit 107 normally displays the monitoring state of the monitoring area on the screen, and when an abnormality is detected, a liquid crystal display that displays the type of abnormality and the location of the abnormality on the screen, and an alarm sound Speaker. The display unit 107 is also used when setting the image sensor 2. The setting means 108 is used at the time of initial setting or setting change of the sensitivity of the image sensor 2, the installation angle of the image sensor 2, the installation height, and the monitoring point in the image obtained by photographing.
[0026]
In this example, an analog telephone line is used as the telephone line, but a digital telephone line such as ISDN can also be used.
Next, an outline of the operation of the controller 1 will be described.
When the mode setter 5 sets the warning set mode or the warning release mode and the mode shift occurs, the mode shift signal is sent from the controller 1 to all the image sensors 2 via the image sensor communication control unit 105 and the digital signal line 9. Is sent.
[0027]
Next, the controller 1 transmits a status call signal, a mode transition signal, an abnormal image transmission request signal, an abnormal image deletion signal, and the like to the image sensor 2 via the image sensor communication control unit 105 and the digital signal line 9. Receive normal signals, abnormal signals, etc. The image signal from the image sensor 2 is received via the analog signal line 8 and the video input / output control unit 106.
[0028]
Note that transmission / reception of signals between the controller 1 and the image sensor 2 and between the controller 1 and the security center device 7 has been described with reference to FIG. 1, and thus further description thereof is omitted here.
FIG. 5 shows a configuration of a part related to the image monitoring system in the security center device 7.
[0029]
In FIG. 5, the security center device 7 is configured by an MPU or the like, and includes a control unit 701 that controls each part in the security center device 7, a communication interface 702 that communicates with the controller 1 through the telephone line 6, and the controller 1. An image information storage unit 703 that stores an image signal sent from the computer and related signals, a monitor 704 that displays an image when an abnormality occurs, an operation unit 705 such as a keyboard, and a display control unit 706 that controls the monitor 704 And are provided.
[0030]
When the control unit 701 receives the abnormality signal, the control unit 701 controls the monitor 704 to display that the abnormality has occurred, the name of the abnormality occurrence property, the abnormality occurrence location, and the like, and then display an image at the time of the abnormality occurrence on the monitor 704. It should be noted that the occurrence of an abnormality, the name of the abnormality occurrence property, the abnormality occurrence location, and the like may be displayed on a display means different from the monitor 704.
The image information storage device 703 includes a property code area for storing a code of a property such as a building in which the image sensor 2 is arranged, a mode area for storing a code indicating a warning set mode or a warning release mode, and each image sensor 2. The image sensor address area for storing the position of the image sensor and the monitoring point information area for storing the information of the monitoring point set in the image sensor 2. In this embodiment, the monitoring point information is stored in the image information storage device 703 in the security center device 7 every time an image is transmitted from the controller 1.
[0031]
Next, initial setting or setting change of the monitoring point of the image sensor 2 by the controller 1 will be described.
At the time of initial setting or setting change of the image sensor 2, the worker connects the monitor device 10 to the video input / output control unit 106 and is displayed on the monitor device 10 in accordance with instructions displayed on the display unit 107 and the monitor device 10. For example, the setting unit 108 sets the height, angle, coordinates of the monitoring point according to the present invention, and the like from the setting unit 108. The set value is stored in a RAM (not shown) in the control unit 101.
[0032]
That is, the worker inputs the worker's ID using the setting means 108, and the control unit 101 checks whether the input ID matches the ID of the person who is permitted various settings in the controller 1. Next, various settings including the monitoring point of each image sensor 2 are started using the setting unit 108. For this purpose, one image sensor 2 is selected, and a monitoring point of an image obtained by photographing the monitoring target of the image sensor 2 is set. The set monitoring point is stored in the storage means 220 in the image sensor 2.
[0033]
Next, a reference image that is obtained by photographing the object to be imaged by the image sensor 2 and does not have an obstacle or a person is acquired and stored in the storage unit 220 in the image sensor 2 again. In this way, all the image sensors 2 are set. When all the settings of the image sensor 2 are completed, the reference image acquired for each image sensor 2 is stored in the storage unit 220 of the image sensor 2.
[0034]
In this way, by setting the image sensors 2 in the controller 1, it is possible to set all the image sensors 2 at one place. The monitor device 10 is removed from the controller 1 after the setting is completed.
(A)-(c) of FIG. 6 is a figure which shows an example of the screen at the time of the setting of a monitoring point. When the image sensor 2 is selected by the setting means 108, the monitoring point setting screen shown in FIG. This screen has a size of, for example, 256 pixels × 240 pixels. On the screen, the title “monitoring point” is displayed together with the image taken by the selected image sensor 2, and the characters “setting”, “confirmation & deletion”, and “end” are displayed. Here, when “setting” is selected by the setting means 108, the current image and the + mark cursor are displayed on the screen of FIG. 6B, that is, the monitor device 10. Here, when “end” is selected, the setting of the monitoring point in the image sensor is completed. Then, the process proceeds to acquisition of the reference image as described above. When “Confirm & Delete” is selected, the process proceeds to FIG.
[0035]
On the screen of FIG. 6B, as shown in the figure, a + mark cursor 61 is displayed at the center of the screen. If monitoring points are set, a circle centered on these points is displayed. In the screen shown in FIG. 6B, circles 62, 63 and 64 centered on the preset monitoring points are displayed.
Next, the setting unit 108 scrolls the cursor 61 to move to a desired position on the screen. When the cursor 61 is moved to a position where the monitoring point is to be set and a confirmation button (not shown) of the setting means 108 is pressed, the screen shown in FIG. 6C is displayed. In FIG. 6C, a circle 65 centering on the intersection (monitoring point) of the + mark of the cursor 61 is displayed, and the position of the cursor 61 is fixed. In addition, “delete immediately before”, “add”, and “end” are displayed on the screen. When adding this monitoring point, “addition” on the screen is selected by the setting means 108, and the addition is determined by pressing the confirmation button. When it is desired to delete the monitoring point added immediately before, “delete immediately before” is selected by the setting means 108. As a result, the monitoring point information is sent from the controller 1 to the image sensor 2. By repeating these, all the monitoring points can be set in the image sensor 2. The maximum number of monitoring points that can be set is determined, and when the number of set monitoring points reaches the maximum number, “add” is not displayed. When “END” is selected on the screen of FIG. 6C, the screen returns to the screen of FIG.
[0036]
The monitoring point information of the image sensor set in this way is stored in a RAM (not shown) in the control unit in the controller 1 together with other parameters, and also in the storage means 220 in the image sensor 2. Stored.
FIG. 7 is a sequence diagram showing processing of the controller 1. The operation of the controller 1 will be described with reference to the sequence diagram of FIG.
[0037]
The image sensor communication control unit 105 in the controller 1 transmits a status call signal to one image sensor 2 by polling ((1) in FIG. 7). The image sensor communication control unit 105 receives a status signal from the image sensor 2. It is determined whether or not the received status signal is an abnormal signal. If not abnormal, the same operation is repeated for the next image sensor 2. If it is determined that an abnormal signal has been detected ((2) in FIG. 7), the address and abnormal state of the image sensor 2 are stored in the RAM in the control unit 101. Although not shown, even if no status signal is received from the image sensor 2 within a certain time, it is stored in the RAM in the control unit 101 as an abnormality has occurred in the image sensor 2. Thus, the controller 1 sequentially checks the states of all the image sensors. An example of the abnormality determination method itself in the image sensor 2 has been described above, but various other methods are known. Here, since it is not the subject of this invention, description is abbreviate | omitted.
[0038]
FIG. 8 is a flowchart for explaining the operation of the controller 1 when the image sensor 2 shown in FIG. 3 detects some abnormality.
In FIG. 8, the controller 1 sends a status call signal to the image sensor 2, and when the image sensor 2 detects any abnormality in response to this, the controller 1 detects this abnormality in step S81, and the controller 1 in step S82. The internal control unit 101 performs communication line connection processing with the security center device 7. Here, the abnormality may be an abnormality caused by pressing the emergency button 3, an abnormality caused by the operation of the intrusion sensor 4, or the like. Therefore, in step S83, it is determined whether or not there is a layout abnormality detected by the image sensor 2. If the specific area of the reference image read from the storage unit 220 in the image sensor 2 is the same and the reference image and the current image are different, it is determined that the layout is abnormal. This determination is performed by the control unit 201 in the image sensor 2 and the determination result is notified to the controller 1.
[0039]
If the abnormality detected by the image sensor 2 is not a layout abnormality in step S83, an abnormality signal is sent to the security center device 7 in step S89, and a communication line disconnection process with the security center device 7 is performed in step S90. In step S91, an abnormality is displayed on the display unit 107, and the process is terminated. The security center device 7 copes with the received abnormal signal and takes appropriate measures. Moreover, the guard who guards the place where the controller 1 is installed looks at the abnormality information displayed on the display unit 107, investigates the cause of the abnormal state, and takes appropriate measures to return it to normal.
[0040]
If it is determined in step S83 that the abnormality detected by the image sensor is a layout abnormality ((2) in FIG. 7), the process proceeds to step S84 to capture the line with the security center device 7 (in FIG. 7). (3)), a layout abnormality signal is sent to the security center device 7. In step S85, an abnormal image request signal is sent to the image sensor 2 that has detected the abnormality ((5) in FIG. 7). Next, in step S86, the reference image and the monitoring point information are read out from the storage means of the image sensor 2 and received ((6) in FIG. 7), and sent to the security center device 7 ((7) in FIG. 7). Thereby, since the reference image and the monitoring point information are not stored in the security center device 7 in advance, there is an effect that the stored data amount in the security center device 7 can be reduced.
[0041]
Next, an abnormal image request signal is sent to the image sensor 2 which has detected an abnormality in step S87 ((8) in FIG. 7), and an abnormal image is received from the image sensor in step S88 ((9) in FIG. 7). The data is sent to the center device 7 ((10) in FIG. 7). Next, a communication line disconnection process with the security center device 7 is performed in step S90. In this process, as shown in (11) to (13) of FIG. 7, an image transmission end signal is sent to the image sensor 2 and a confirmation signal ACK is received from the image sensor. This is done by opening the line. Finally, the display unit 107 displays that an abnormality has occurred. The processing of the controller 1 at the time of occurrence of abnormality is thus completed, and the process proceeds to the reference image update processing shown in (14) and thereafter in FIG.
[0042]
Next, the update of the reference image will be described.
In the security center device 7 that received the abnormal image, the observer could visually recognize that the image in the circle centered on the monitoring point in the reference image coincided with the image in the circle centered on the monitoring point in the abnormal image. In this case, the monitor is allowed to update the reference image to the abnormal image that is the current image, the line between the security center device 7 and the controller 1 is captured ((14) in FIG. 7), and the reference image is updated. A command is transmitted to the controller 1. It is to be noted that a match between the image in the circle centered on the monitoring point in the reference image and the image in the circle centered on the monitoring point in the abnormal image is determined by image processing, and only when the match is determined, the reference image update command May be transmitted. The controller 1 receives the reference image update command from the security center device 7 ((15) in FIG. 7) and transmits it to the image sensor 2 ((16) in FIG. 7). Thereby, in the image sensor 2, the image when abnormality is detected is set as a new reference image.
[0043]
Next, the confirmation signal ACK is waited for, for example, within 3 seconds from the transmission of the reference image update command to the image sensor 2, and if no ACK is received after 3 seconds, between the controller 1 and the image sensor 2. When it is determined that some kind of failure has occurred, an NG signal is transmitted to the security center device 7 and the reference image update process is terminated.
When ACK is received from the image sensor 2 within 3 seconds from transmission of the reference image update command to the image sensor 2, the ACK is transmitted from the controller 1 to the security center device 7 ((17) and (18) in FIG. 7). When an abnormality recovery command is received from the security center device 7 within 3 seconds from the transmission of ACK, for example, it is transmitted to the image sensor 2 ((19) and (20) in FIG. 7). Thereby, in the image sensor 2, the abnormal state is cleared and a reference image is obtained. If an error recovery command is not received within 3 seconds, the process ends without doing anything.
[0044]
Next, for example, the confirmation signal ACK is again waited within 3 seconds from the transmission of the abnormality recovery command to the image sensor 2, and if no ACK is received even after 3 seconds, an NG signal is transmitted to the security center device 7. The reference image update process ends. When an ACK is received from the image sensor 2 within 3 seconds, the ACK is transmitted to the security center device 7 ((21) and (22) in FIG. 7), then the abnormal memory is cleared and the process is terminated.
[0045]
The reference image update operation is thus completed.
Next, the flow of processing for displaying an abnormality detection image in the security center 7 will be described.
When the security center device 7 first receives a layout abnormality signal from the camera A, for example, the image sensor 2 of the property X sent from the controller 1, the layout abnormality signal is displayed as characters or images on the monitor 704 therein. The The layout abnormality signal may be displayed on a monitor different from the monitor 704 that displays an image.
[0046]
As a result of viewing the layout abnormality signal on the monitor 704, the monitoring person operates the operation unit 705 such as a keyboard to request the display of the image of the camera A of the property X when the layout abnormality signal is detected. In response to this request, the control unit 701 requests the image information storage unit 703 for a detection image of the camera A of the property X. After the abnormality report, the image information storage unit 703 stores the detected image of the camera A of the property X as an abnormal image, and also stores the monitoring points. Accordingly, the detected image in the image information storage unit 703 is sent to the control unit 701 in response to a request for the detected image. Next, the control unit 701 requests monitoring point information set for the camera A of the property X from the image information storage unit 703, and accordingly, the monitoring unit 701 monitors the camera A of the property X from the image information storage unit 703 to the control unit 701. Point information information is sent. Next, the control unit 701 sends the detection image of the camera A of the property X and the monitoring point information to the monitor 704 via the display control unit 706. Thus, an abnormality detection image is displayed on the monitor 704, and a mark such as a circle indicating a monitoring point is displayed on the image.
[0047]
Next, another embodiment of the present invention will be described. According to this embodiment, it is possible to display the mark indicating the monitoring point on the image on the monitor 704 in the security center device 7, prohibit the display of the mark, or display only the selected mark.
That is, when an abnormality detection image in which a mark indicating a monitoring point is overlapped is displayed on the monitor 704 and the operation unit 705 is instructed not to display the mark by operating the operation unit 705, the control unit 701 In response to this, the display control unit 706 is requested not to display the mark. Then, the display control unit 707 sends only the detected image to the monitor 704, whereby only the abnormality detected image without mark overlap is displayed on the monitor 704.
[0048]
In addition, when it is desired to display the monitoring point mark again in an overlapped state while the abnormality detection image is displayed, when the control unit 701 makes a request to that effect using the operation unit 705, the display control unit 701 receives the request. A display of a mark is requested to 706. Then, the display control unit 707 sends the detected image and the monitoring point information to the monitor 704, thereby displaying an abnormality detected image with overlapping marks on the monitor 704.
Further, when a monitoring point mark is selected and a display or non-display request operation is performed using the operation unit 705, the control unit 701 receives this and displays only the selected monitoring point mark to the display control unit 706. Request display of. Then, the display control unit 707 sends the detected image and the selected monitoring point information to the monitor 704, whereby the abnormality detected image in which only the selected mark is overlapped is displayed on the monitor 704. The
[0049]
Accordingly, it is possible to provide convenience to the monitor by allowing the display of a part or all of the marks in the specific area to be prohibited or the prohibition can be canceled as necessary.
In the above description, the mark indicating the monitoring point may be displayed on either the reference image or the current image, or may be displayed on both the reference image and the current image. When the mark indicating the monitoring point is displayed only on the reference image or only on the current image, an important monitoring region on the reference image or the current image can be easily distinguished from other regions and carefully observed. In addition, when a mark indicating a monitoring point is displayed on both the reference image and the current image, it becomes easier for the monitor to visually recognize the difference between the reference image and the current image in the important monitoring area.
[0050]
The mark indicating the monitoring point is not limited to a circle, and may be anything as long as it visually recognizes the position of the important monitoring area, such as a square or triangular frame or a cross.
In the above description, every time an image captured by the image sensor 2 is sent to the security center device 7 via the controller 1, the monitoring point and the reference image in the image captured by each image sensor 2 are guarded. The image information storage device 703 in the center device 7 was temporarily stored. As a result, the security center device 7 does not have to store the reference images and monitoring points of all the image cameras in advance, so that the memory capacity can be reduced.
[0051]
Instead, according to another embodiment of the present invention, before an image captured by the image sensor 2 is sent to the security center device 7 via the controller 1, it is captured by all the image sensors in advance. The monitoring point and the reference image in the obtained image may be stored in the image information storage device 703 in the security center device 7. In this case, the reference image and the monitoring point information may be stored in the image information storage unit 703 in the security center device 7 when the monitoring point is initially set or changed. As a result, only the abnormal signal and the image data need be sent from the image sensor 2, which has the effect of reducing the load on the image sensor.
[0052]
Further, although an example in which the security center device 7 is connected to the controller 1 via the telephone line 6 has been described, the present invention is not limited to this, and the controller 1 and the security center device 7 do not pass through the telephone line. It may be directly connected.
[Brief description of the drawings]
FIG. 1 is a diagram showing an overall configuration of an image monitoring system of the present invention.
FIG. 2 is a diagram illustrating an outline of an example of a technique for changing a current image to a new reference image according to an embodiment of the present invention.
FIG. 3 is a block diagram illustrating a configuration of an image sensor.
FIG. 4 is a block diagram illustrating a configuration of a controller.
FIG. 5 is a block diagram showing a configuration of a security center device.
FIG. 6 is a diagram illustrating an example of a monitoring point setting method.
FIG. 7 is a sequence diagram showing an operation according to the present invention.
FIG. 8 is a flowchart for explaining the operation of the controller when an abnormality occurs.
[Explanation of symbols]
2 ... Image sensor
27a, 27b, 27c ... marks indicating specific areas
151 ... Cursor
152, 153, 154 ... yen
220: Storage means
7 ... Security center equipment
704 ... Monitor
705 ... operation unit
706: Display control unit

Claims

An imaging means for detecting an abnormality by comparing a reference image obtained by photographing the monitoring area when setting the monitoring area and a current image obtained by photographing the monitoring area when monitoring the monitoring area;
  Storage means for storing position information of a specific area indicating a part of an image obtained by imaging by the imaging means;
  A determination unit that allows the current image to be updated to a new reference image even if the images in the specific region are not matched when the current image and the reference image match in the specific region;
  An image monitoring system comprising:

The imaging means detects a layout abnormality when the current image and the reference image are inconsistent but the image in the specific area is matched,
The determination means enables the current image when the imaging means detects the layout abnormality to be updated to a new reference image.
The image monitoring system according to claim 1.