JP3939013B2 - Image monitoring device - Google Patents
Image monitoring device Download PDFInfo
- Publication number
- JP3939013B2 JP3939013B2 JP09203398A JP9203398A JP3939013B2 JP 3939013 B2 JP3939013 B2 JP 3939013B2 JP 09203398 A JP09203398 A JP 09203398A JP 9203398 A JP9203398 A JP 9203398A JP 3939013 B2 JP3939013 B2 JP 3939013B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- mode
- image sensor
- final
- controller
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Burglar Alarm Systems (AREA)
- Alarm Systems (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は、画像監視装置に関し、特に、監視領域内に、該監視領域の状況を撮影する画像センサを配置し、モード設定器の操作状況を撮影した画面を記録する画像監視装置に関する。
【0002】
【従来の技術】
警備システムとして、監視領域を画像センサにより撮影し、警戒セットモード中に監視領域に人がいることを検知すると、それを侵入異常とみなして、異常が発生した領域を撮影した画像を記録し、必要に応じてその画像を警備センターへ送出する画像監視装置がある。このような警備システムでは、警備モードを警戒セットモード又は警戒解除モードに設定するモード設定器は監視領域内に配置される。
【0003】
ユーザが監視領域を警戒セットモードに設定するときは、監視領域である建屋から最終退出するユーザが、ユーザカードを用いてモード設定器をカード操作する。また、警戒解除モードに設定するときも同様に、建屋に最初に入るユーザが、モード設定器をカード操作する。警備システムでは、このカード操作により、操作するユーザが正規の利用者であることを照合確認した上で、警備モードを警戒セットモード又は警戒解除モードへ移行処理をする。
【0004】
このような画像監視装置においては、警備モードの移行設定の前後には、ユーザが警戒セットモード中の警備領域にいることとなる。つまり、警戒解除モードへ移行するときは、移行操作前にユーザが警戒セット中の領域におり、警戒セットモードへ移行するときは、移行操作の直後にユーザが警戒セット中の領域にいることとなる。
【0005】
このユーザの存在を侵入異常と誤って検知しないようにするため、画像監視装置では、警備モードの移行設定前後には、警戒セットモード中であっても、センサによる侵入異常の検知を無視することが行われている。このため、警戒セットモード中であっても、警備モードの移行操作の状況を含む画像の記録又は警備センターへの送信はされない。
【0006】
【発明が解決しようとする課題】
従来の画像監視装置では、上記のように操作に用いるユーザカードを確認することにより正規の利用者であることを確認している。一方、ユーザカードが正規の利用者でない者に使用されて警備モードの移行操作がされたり、正規の利用者が他者に強要されて警備モードの移行操作をしたりする場合がある。このように、警備モードの移行が不正になされたときでも、上述の理由で操作状況は記録されないため、不正使用がされたことを確認することができない。
【0007】
これに対して、モード設定器の操作状況が画像として記録されれば、警備モードの移行が不正に行われた場合、又は、誤操作がされた場合などに、その状況を記録された画像から確認することができる。
本発明は、モード設定器の操作状況を画像として記録することができる画像監視装置を提供することを目的とするものである。
【0008】
【課題を解決するための手段】
本発明は、上記目的を達成するためになされたものである。本発明における画像監視装置は、監視領域内に設置され、警備モードを設定するモード設定手段と、監視領域を撮影し、撮影画像内に移動体が存在するか否かを判定する手段を有する画像センサと、警備モードが警戒セットモードに設定された状態で監視領域に異常が発生した場合に、前記画像センサが撮影した画像を記録する記憶手段とを具備する。
【0009】
本発明は、このような画像監視装置において、モード設定手段が操作される状況を撮影する位置に配置され、かつ、撮影画面内に移動体が存在するか否かを判定する手段を有する最終画像センサと、モード設定手段が操作される状況において、最終画像センサが移動体を検出したとき、その移動体を含む画像を記憶手段に記録する記録制御手段とを設ける。
【0010】
本発明によれば、警備モードの操作が操作者によりされる状況を撮影した操作者画像が記録に残されるため、正規の利用者でない者が操作をした状況、正規の利用者が他者に強要されて操作をした状況、或いは、モード設定器が誤操作された状況などが確認できるので、画像監視装置の信頼性を更に向上させることができる。
【0011】
記録制御手段は、モード設定手段が警戒セットモードに設定操作されたことをトリガとして、所定時間内に最終画像センサにより撮影された画像を操作者画像として記録することができる。このときの操作者画像は、モード設定手段を操作した操作者及びその周囲の状況が記録される。
また、監視領域の出入口に最終センサを設け、警戒セットモード中に最終センサが検知したことをトリガとして、記録制御手段が、所定時間内に最終画像センサにより撮影された画像を操作者画像として記録することができる。このときの操作者画像は、最終出入口から入った操作者がモード設定手段に向かう状況が記録される。
【0012】
なお、記録制御手段は、上記の最終センサの検知をトリガとすることに代えて、モード設定手段が警戒解除モードに設定操作されたことをトリガとして、所定時間内に最終画像センサにより撮影された画像を操作者画像として記録することができる。このときの操作画像は、モード設定手段を操作した操作者及びその周囲の状況が記録される。
【0013】
【発明の実施の形態】
本発明の実施形態について図を用いて説明する。
図1は、本発明が適用される画像監視装置の全体構成を示す図で、図2は、監視領域内における画像監視装置の配置図である。
監視領域である建屋1内が複数の区画に仕切られている場合、各区画ごとに画像センサ2が配置される。この画像センサ2は、現在撮影した画像と、それ以前に撮影した基準画像とを比較して、撮影画面内に移動体が存在するか否かを判定し、監視領域に異常が発生したことを検知する手段を内蔵している。なお、このような機能を有する画像センサは、既に提案されているものである。
【0014】
複数の画像センサ2は、コントローラ3に接続される。コントローラ3は、建屋1内で最終出入口4の近傍に配置される。コントローラ3には、モード設定器5が接続される。監視領域の警備モードを、警戒解除モード又は警戒セットモードに設定するとき、ユーザは、このモード設定器5をユーザカードによりカード操作して、警備モードを切り換える。なお、モード設定器5は、コントローラ3内に組み込むこともできる。
【0015】
複数の画像センサ2の内、モード設定器5の操作状況を撮影する位置に配置された画像センサを最終画像センサ6と呼ぶ。この最終画像センサ6は、通常の画像センサ2と同様の機能を有する上に、後述の機能を有するものである。以下の説明においては、画像センサ2と最終画像センサ6の両方を総称して、画像センサ2,6ということがある。
【0016】
図2に示す最終画像センサ6は、モード設定器5の操作状況と同時に、最終出入口4を同一画面内に含める位置に設けてある。この最終画像センサをコントローラ3内に収納した場合は、他の画像センサ2により最終出入口4を撮影するようにしても良い。
最終出入口4にその開閉動作を検知する最終センサ7が設けられる。この最終センサ7は、最終出入口4の開閉動作に応じて接点を開又は閉とするマグネットスイッチが使用できる。
【0017】
コントローラ3は、電話回線8を介して警備センター9と接続される。
ここで、図1及び図2の画像監視装置全体の動作について、図3、図4、図5、図6のタイムチャートを用いて説明する。なお、画像センサ2、6については、最終画像センサ6についてのみ図示して説明する。
図3は、建屋1内の警備モードが夜間において警戒セットモードに設定された状態から、朝、最初に出勤したユーザがモード設定器5にカード操作することにより、警戒解除モードに移行するときの画像監視装置の全体動作を示す。
【0018】
警戒セットモード中には、コントローラ3は、各画像センサ2,6に対して、順次、現状態呼出信号を送信する(ポーリング)。この信号を受信した画像センサ2,6は、移動体を検知しなければ、現状態は正常にセットされたままであるので、正常信号をコントローラ3に対して送信する。
最初に出勤したユーザが建屋1に入るとき最終出入口4を開けると、最終センサ7が最終出入口4の動作を検知して検知信号をコントローラ3に送出する。コントローラ3では、警戒セットモード中に最終センサ4から検知信号を受信すると、入館ディレータイマをスタートさせ、最終画像センサ6に対して最終センサ検知信号を送出する。
【0019】
最終画像センサ6では、最終センサ検知信号を受信すると、操作者フラグをONとする。この状態で最終画像センサ6が移動体即ちユーザを検知するので、そのときの画像を操作者画像として記憶し、操作者画像を記憶したことを示す信号をコントローラ3に送出する。したがって、この操作者画像には、ユーザがモード設定器5を操作する前の状況が写される。
【0020】
また、最終画像センサ6は、移動体を検知すると、現状態として異常を記憶し、移動体を検知したときの画像を異常画像としても記憶する。
コントローラ3は、最終画像センサ6から、操作者画像記憶信号を受信すると、操作者画像要求信号を送り返す。最終画像センサ6は、この信号に従って、記憶した操作者画像をコントローラ3に送出し、操作者画像の記憶をクリアし、操作者フラグをOFFとする。コントローラ3は、受信した操作者画像を操作者画像記憶部に記録する。
【0021】
さらに、コントローラ3は、各画像センサ2,6に対して現状態呼出信号を順次送信する。各画像センサ2,6は、これに応答して、正常信号又は異常信号を返送するが、このとき、最終画像センサ6は異常信号を返送する。コントローラ3は、異常を検知した画像センサ6から異常信号を受信するが、入館ディレータイマがオンである場合には、この異常信号を無視する。
【0022】
ユーザがモード設定器5に到達してユーザカードを使用して警戒解除モードに設定操作すると、コントローラ3はモード移行処理を行い、各画像センサ2,6に対して解除モード移行信号を送信する。各画像センサ2,6は、この信号を受信すると、警備モードとして警戒解除モードを記憶し、異常画像をクリアする。この後、コントローラ3は、順次、各画像センサ2,6に対して現状態呼出信号を送信することを繰り返し、各画像センサ2,6は警戒解除モード中では、各画像センサ2,6は現状態として正常を記憶しているので、正常信号が返送される。
【0023】
警戒解除モードへの設定操作がされた後、入館ディレータイマがタイムアップすると、コントローラ3は各画像センサ2,6に対して入館ディレータイマタイムアップ信号を送信する。最終画像センサ6は、入館ディレータイマタイムアップ信号を受信すると、操作者フラグをクリアする。通常の場合、このとき既に操作者フラグはOFFとされているが、最終センサ7が検知をした後に、何らかの原因で最終画像センサ6が移動体を検知しないときには、このときにおいて操作者フラグはOFFされる。
【0024】
操作者フラグがOFFされると、以後は、最終画像センサ6が移動体を検知しても、操作者画像の記憶はされない。したがって、操作者画像の記憶は、警戒セットモードへの設定操作から所定時間内に移動体が検知されたときのみに行われることとなる。以後も、コントローラ3は各画像センサ2,6に対して現状態呼出信号を送信するが、正常信号が返送される。
【0025】
図4は、警備モードが警戒解除モードになっている状態から、建屋1から最後に退出するユーザがモード設定器5にカード操作することにより、警戒セットモードに設定操作するときの画像監視装置の動作を示す。
警戒解除モード中には、コントローラ3は、各画像センサ2,6に対して、順次、現状態呼出信号を送信する(ポーリング)。この信号を受信した画像センサ2,6は、警戒解除モード中であるので、正常信号をコントローラ3に対して送信する。
【0026】
最後に退出するユーザは、モード設定器5にユーザカードを操作して、警備モードを警戒解除モードから警戒セットモードに移行させる。コントローラ3は、警戒セットモードへの設定操作がされると、退館ディレータイマをスタートさせ、各画像センサ2,6に対して、警戒セット操作信号を送出する。
各画像センサ2,6は、警戒セット操作信号を受信すると、警備モードとして警戒セットモードを記憶する。最終画像センサ6では、警戒セット操作信号を受信すると、操作者フラグをONとする。この状態で最終画像センサ6が移動体を検知すると、そのときの画像を操作者画像として記憶し、操作者画像記憶信号をコントローラ3に送出する。したがって、この操作者画像には、ユーザがモード設定器5を操作後の状況及び周囲の状況が写される。また、各画像センサ2,6は、移動体を検知すると、現状態信号として異常を記憶し、移動体を検知したときの画像を異常画像としても記憶する。
【0027】
コントローラ3は、最終画像センサ6から、操作者画像記憶信号を受信すると、操作者画像要求信号を送出する。最終画像センサ6は、この要求に従って、記憶した操作者画像をコントローラ3に送出し、操作者画像の記憶をクリアし、操作者フラグをOFFとする。コントローラ3は、受信した操作者画像を操作者画像記憶部に記録する。
【0028】
さらに、コントローラ3は、各画像センサ2,6に対して現状態呼出信号を送信する。このとき、最終画像センサ6は、ユーザを移動体として検知しているので、異常信号を返送する。ただし、コントローラ3は、退館ディレータイマがオンであるので、この異常信号を無視し、異常信号に対する処理は行わない。
ユーザが警備モード設定操作を終了して最終出入口4から退出した後に、退館ディレータイマがタイムアップすると、コントローラ3は、各画像監視センサ2,6に対して退館ディレータイマタイムアップ信号を送信する。各画像センサ2,6はタイムアップ信号を受信すると、現状態の記憶をクリアして正常に設定し、異常画像をクリアする。最終画像センサ6は、更に、操作者フラグをOFFとする。
【0029】
以後、コントローラ3は、順次、各画像センサ2,6に対して現状態呼出信号を繰り返し送信する。各画像センサ2,6は、侵入者、即ち移動体を検知しなければ、現状態信号として正常信号を返送する。
図5、図6は、夜間などに建屋1内の警備モードが警戒セットモードに設定された状態において、侵入者が建屋1内に侵入した場合の画像監視装置の動作を示す。
【0030】
図5は、最終出入口4から侵入者が侵入した場合の動作を示す。なお、上述の図3の警戒解除操作のときに、ユーザが、入館ディレータイマがタイムアップしても解除操作をしていなかった場合も同様の動作となる。
警戒セットモード中に、コントローラ3は、各画像センサ2,6に対して、順次、現状態呼出信号を繰り返し送信(ポーリング)する。通常の、監視領域内に人がいない場合、現状態呼出信号を受信した画像センサ2,6は、移動体を検知しないので、正常信号をコントローラ3に対して送信する。
【0031】
侵入者が最終出入口4を開けて入館すると、最終センサ7が最終出入口4の動作を検知すると検知信号をコントローラ3に送出する。コントローラ3では、警戒セットモード中に最終センサ4から検知信号を受信すると、入館ディレータイマをスタートさせ、最終画像センサ6に対して最終センサ検知信号を送出する。
最終画像センサ6では、最終センサ検知信号を受信すると、操作者フラグをONとする。この状態で最終画像センサ6が移動体即ち侵入者を検知すると、そのときの画像を操作者画像として記憶し、操作者画像を記憶したことを示す信号をコントローラ3に送出する。したがって、この操作者画像には、侵入者が最終出入口4から侵入した状況が写される。また、最終画像センサ6は、移動体を検知すると、現状態が異常であることを記憶し、移動体を検知したときの画像を異常画像としても記憶する。
【0032】
コントローラ3は、最終画像センサ6から、操作者画像記憶信号を受信すると、操作者画像要求信号を送り返す。最終画像センサ6は、この信号に従って、記憶した操作者画像をコントローラ3に送出し、操作者画像の記憶をクリアし、操作者フラグをOFFとする。コントローラ3は、受信した操作者画像を操作者画像記憶部に記録する。その後、現状態呼出信号を送出し、異常信号を受信するが、異常信号の受信に対する処理は行わない。
【0033】
侵入者は、モード設定器5の設定操作を行わないので、この状態で入館ディレータイマがタイムアップする。入館ディレータイマがタイムアップすると、入館ディレータイマタイムアップ信号が最終画像センサ6に送信されて、最終画像センサ6では操作者フラグがOFFされる。なお、現状態、異常画像については記憶はクリアされない。
【0034】
入館ディレータイマのタイムアップ後にコントローラ3が現状態呼出信号を各画像センサ2,6に送出すると、このとき、現状態が異常となっている画像センサ2,6から異常信号が返送される。すると、コントローラ3は、入館ディレータイマがタイムアップしているので、警備センター9との電話回線8の接続を行い、異常画像要求信号を該当の最終画像センサ2,6に送出し、異常信号を送信した画像センサ2,6は、異常画像を送信する。なお、この異常画像としては、侵入者を検知したときの画像だけでなく、その前後の状況を撮影した複数の画像を含むようにすることもできる。
【0035】
画像センサ2,6から異常画像が送信されると、コントローラ3は異常画像を電話回線8を介して警備センター9へ転送をする。この転送が終了すると、コントローラ3は電話回線8の切断を行う。
以上説明したように、無人の建屋1に侵入者が最終出入口4から侵入すると、その侵入の状況を撮影した異常画像が警備センター9へ送られるので、警備センター9では、現地への警備員の派遣など、必要な措置を講ずる。
【0036】
図6は、最終出入口4以外から侵入者が建屋1へ侵入したときの動作を示す。なお、上述の図4の警戒解除モードから警戒セット操作をしたユーザが、退館ディレータイマがタイムアップしても建屋1内に残っていた場合も同様の動作となる。
警戒セット中に、コントローラ3は、各画像センサ2,6に対して、順次、現状態呼出信号を繰り返し送信(ポーリング)する。通常の、監視領域内に人がいない場合、現状態呼出信号を受信した画像センサ2,6は、移動体を検知しないので、正常信号をコントローラ3に対して送信する。
【0037】
各画像センサ2,6の内、いずれかのセンサの監視領域に侵入者が侵入すると、画像センサ2,6は侵入者(移動体)を検知するので、現状態を異常にセットし、侵入者を含む画像を異常画像として記憶する。
その後、コントローラ3が現状態呼出信号を各画像センサ2,6に送出すると、該当する画像センサ2,6は、異常信号を返送する。すると、コントローラ3は、警備センター9との電話回線8の接続を行い、異常信号を送出した画像センサ2,6に対して、異常画像要求信号を送出する。これに応じて画像センサ2,6から異常画像が返送されると、コントローラ3は電話回線8を介して異常画像を警備センター9へ転送をする。この転送が終了すると、コントローラ3は電話回線8の切断を行う。
【0038】
以上説明した侵入者が最終出入口4以外から侵入した場合には、警備センター9に異常画像が送信される。なお、本例では、警戒セットモード中であるが、最終センサの検知及びモード設定器の操作はないので、操作者フラグはOFFのままで、操作者画像の記憶はされない。
次に、画像監視装置の上記動作を実現するための、コントローラ3及び最終画像センサ6の構成及び動作について詳細に説明する。
【0039】
図7は、コントローラ3の構成を示す。
コントローラ3には、MPU等により構成される制御部301と電源回路302が設けられる。コントローラ3内の各部分は、制御部分301により制御され、電源回路302から電力の供給を受ける。また、コントローラ3には外部に設けたモード設定器5が接続される。
【0040】
コントローラ3には、更に、以下の部分が設けられる。
センサ監視回路303は、最終出入口4に設けられた最終センサ7とのインターフェースである。モデム304が電話回線8との間に設けられる。画像センサ通信制御部305及び映像入出力制御部306には、監視領域に配置された画像センサ2,6が接続される。映像入出力制御部306は、画像センサ2,6から送られてきた映像信号を、モデム304と制御部301に分配する。また、最終画像センサ6から送られてきた操作者画像を記録するための記録手段として、ハードディスク308が設けられる。
【0041】
表示部307は、通常は、監視領域の監視状態を画面上に表示し、異常が検出されたときは、ブザーを鳴動させ、画面上に異常の種類、異常発生箇所などを表示する。また、表示部307は、画像センサ2,6の設定作業時にも使用される。さらに、入館ディレータイマ309、退館ディレータイマ310が設けられる。
【0042】
図8は、最終画像センサ6の構成を示す。
最終画像センサ6には、CPU等により構成される制御手段601と電源602が設けられる。センサ内の各部分は、制御手段601により制御され、電源602から電力の供給を受ける。また、制御手段601には記憶手段620が接続される。
【0043】
監視領域を撮影する撮像手段604は、CCDカメラにより構成され、可視領域から赤外領域までの感度を有する。赤外線投光手段603が設けられ、夜間など暗くなった時に、監視領域に赤外線が投光される。撮像手段604が撮影した画像は、現画像として記憶手段620に記憶される。
画像処理手段605は、記憶手段620に記憶された現画像と基準画像とを対比して、移動体が存在するか否かを判定し、移動体を検知したときには、異常が発生したと判定する。この判定のロジックには、種々のものが提案されている。表示手段606は、LEDにより構成され、異常検出時に点灯し、非検出時には消灯して、異常検出の有無を最終画像センサ6の外部に表示する。
【0044】
通信手段607は、コントローラ3と信号の送受信を行うインターフェースである。画像出力手段608は、操作者画像及び異常画像を出力するためのインターフェースで、各画像センサ2,6を接続してコントローラ3に接続する。
アドレス設定部610は、ディップスイッチにより構成され、コントローラ3が画像センサ2,6を特定するためのアドレスが設定される。操作手段611は、電源をオンオフするための手段である。記憶手段620には、操作者画像、異常画像、操作者フラグ、現状態などが記憶される。なお、異常画像としては、既述のように、移動体を検知した画像と、その前後の複数枚の画像を記憶することができる。
【0045】
次に、上述の図3〜図6のタイムチャートを用いて説明した画像監視装置の動作を実現するためのコントローラ3及び最終画像センサ6の動作についてフローチャートを用いて説明する。
図9、図10は、コントローラ3の動作フローを示す。
ステップS101で、モード設定器5で、警備モードの設定操作がされたか否かが判定され、設定操作がされた場合は、ステップS102で、後述の警戒モード移行処理を行う。
【0046】
ステップS103で、各画像センサ2,6に対して順次、現状態呼出信号を送出する(ポーリング)。ステップS104で、呼び出した画像センサ2,6から異常信号を受信したか否かを判定し、受信した場合は、ステップS105で後述の異常通報処理を行う。
ステップS106で、最終画像センサ6から、操作者画像記憶信号を受信したか否かを判定し、操作者画像記憶信号を受信した場合には、ステップS107で、後述の操作者画像記録処理を行う。
【0047】
ステップS108で、最終センサ7から検知信号を受信したか否かを判定し、受信した場合には、ステップS109で、警備モードが警戒セットモードであるか否かを判定する。ここで、警戒セットモード中であれば、ステップS110で、入館ディレータイマ309をスタートさせ、ステップS111で最終センサ検知信号を最終画像センサ6へ送出する。
【0048】
ステップS112で、入館ディレータイマ309がタイムアップしたか否かを判定し、タイムアップした場合は、ステップS113で、最終画像センサ6に入館ディレータイマ309タイムアップ信号を送出する。
ステップS114で、退館ディレータイマ310がタイムアップしたか否かを判定し、タイムアップした場合は、ステップS115で、最終画像センサ6に退館ディレータイマタイムアップ信号を送出する。
【0049】
図11は、図9のステップS102の警戒モード設定処理のフローを示す。
モード設定器5で警備モードの設定操作がされると、図9のステップS101から図10のフローに進む。
ステップS201で、その操作が警戒セットへの操作であったか否かが判定される。ここで、設定操作が警戒セットへの操作であれば、ステップS202で警戒センサ操作信号を各画像センサ2,6へ送出し、ステップS203で、退館ディレータイマ310をスタートさせる。ステップS204で、コントローラ3において警戒セットモードを記憶して、ステップS205で各画像センサ2,6に警戒セットモード移行信号を送出する。
【0050】
一方、モード設定器5で警戒解除への操作がされたのであれば、ステップS201からステップS206へ進み、コントローラ3において警戒解除モードを記憶して、ステップS207で各画像センサ2,6に警戒解除モード移行信号を送出する。
図12は、図9のステップS105の異常通報処理のフローを示す。
【0051】
図9のステップS103で、コントローラ3が画像センサ2,6に対して現状態呼出信号を送出すると、異常を検知した画像センサ2,6は、コントローラ3に対して異常信号を返送する。コントローラ3では、この異常信号をステップS104で受信すると、ステップS301で、入館ディレータイマ309又は退館ディレータイマ310がカウント中であるか否かを判定する。ここで、各タイマがカウント中であれば、異常信号に対する処理をせずに図9のステップS106へ戻る。
【0052】
ステップS301で各タイマがカウント中でなければ、ステップS302で、異常信号を送信してきた画像センサ2,6に異常画像送信要求信号を出力し、ステップS303で、警備センターとの接続処理を行う。その後、ステップS304で異常画像の受信の有無をチェックし、受信しなければステップS307を通って所定時間待ち、所定時間内に受信すれば、ステップS305で警備センサ9へ送られてきた異常信号及び異常画像を転送する。そして、ステップS306で電話回線を切断して図9のステップS106へ戻る。
【0053】
ステップS307で、所定時間が経過しても異常画像を受信しなかったときは、ステップS308で、機器異常信号を警備センター9へ送出し、ステップS306で電話回線8を切断する。
図13は、図9のステップS107の操作者画像記録処理のフローを示す。
図9のステップS106でコントローラ3が最終画像センサ6から操作者画像記録信号を受信すると、コントローラ3は、ステップS401で、最終画像センサ6に対して操作者画像を要求する信号を送出する。その後、ステップS402で操作者画像の受信の有無をチェックし、受信しなければステップS404を通って所定時間待ち、所定時間内に受信すれば、ステップS403で操作者画像をハードディスク308に記憶する。
【0054】
ステップS404で、所定時間が経過しても操作者画像を受信しなかったときは、ステップS405で機器異常信号を警備センター9へ送出して、図9のステップS108へ戻る。
コントローラ3は、以上のステップS101〜405の動作を繰り返し実行する。
【0055】
図14、図15、図16は、最終画像センサ6の動作フローを示す。
ステップS501で、撮像手段604が撮影した画像を取り込み、ステップS502で、取り込んだ画像を記録手段620中の逐次画像記憶領域に記憶する。この逐次画像記憶領域は、複数(例えば10枚)の画像を記憶する領域を有し、撮像手段604が撮影した最新の画像を逐次記憶していき、記憶領域が一杯になると、最も古い画像を消去してそこに最新の画像を記憶していく。画像センサ6が異常を検知すると、逐次画像記憶領域には、異常検知時の画像とその前後の画像が記憶され、記憶された画像は、コントローラ3に送られる。なお、この手法については既に提案されている。
【0056】
ステップS503で、コントローラ3からセットモード信号を受信したか否かが判定される。ここでセット操作信号を受信すると、ステップS504で操作者フラグをONとする。
ステップS505で、コントローラ3から最終センサ検知信号を受信したか否かが判定される。ここで、受信していれば、ステップS506で操作者フラグがONとされる。
【0057】
ステップS507で、コントローラ3から警戒解除モードへの移行又は警戒セットモードへの移行のモード移行信号をしたか否かが判定される。ここで、受信していれば、ステップS508で、移行した警戒解除モード又は警戒セットモードを記憶する。
ステップS509で、画像センサ2,6自身が移動体を検知したか否かが判定される。ここで、検知しなければステップS515へ進み、検知すればステップS510へ進む。
【0058】
ステップS510で、操作者フラグがONであるか否かが判定される。ここで、ONであれば、ステップS511で操作者画像を記憶手段620へ記憶し、ステップS512で操作者フラグをOFFとし、ステップS513で異常画像を記憶手段620へ記憶して、ステップS515へ進む。
ステップS510で操作者フラグがOFFの場合は、ステップS514で警備モードがセットモードであるか否かが判定されて、警戒セットモードであればステップS513へ進んで異常画像を記憶し、警戒解除モードであれば異常画像の記憶は行わずにステップS515へ進む。
【0059】
ステップS515で、コントローラ3から、退館ディレータイマタイムアップ信号を受信したか否かが判定される。受信をしていれば、ステップS516で、現状態に正常を設定し、異常画像をクリアし、ステップS524で操作者フラグをOFFする。
ステップS517で、コントローラ3から、入館ディレータイマタイムアップ信号を受信したか否かが判定される。受信をしていれば、ステップS524で操作者フラグをOFFする。
【0060】
ステップS518で、コントローラ3から、現状態呼出信号を受信したか否かを判定する。受信をしていれば、ステップS519で現状態として正常信号又は異常信号を送出する。
ステップS520で、コントローラ3から、操作者画像要求信号を受信したか否かを判定する。受信をしていれば、ステップS521で操作者画像を送出し、ステップS523で異常画像を送出する。
【0061】
ステップS522で、コントローラ3から、異常画像要求信号を受信したか否かを判定する。受信をしていれば、ステップS523で異常画像を送出する。
最終画像センサ6は、以上のステップS510〜523の動作を繰り返し実行する。
なお、最終画像センサ6以外の画像センサ2については、操作者画像関係の動作を行わないことを除いて、その構成及び動作は、最終画像センサ6と同様である。また、画像センサ2としては、その他の形式のものを使用することもできる。
【0062】
以上本発明の実施形態について説明をしてきたが、本発明は、上記実施形態に限定されるものでなく、種々の変形が可能である。
例えば、警戒セットモードから警戒解除モードへ移行するとき、図4について説明した例では、最終センサ7の検知により操作者フラグのONなどを開始しているが、モード設定器5における警戒解除への設定操作により操作者フラグのONなどを開始することもできる。この場合は、操作者画像として記録されるのは、モード設定器5を操作しているユーザとその周囲の状況となる。
【図面の簡単な説明】
【図1】本発明を適用した画像監視装置の全体構成図。
【図2】監視領域内における図1の画像監視装置の配置図。
【図3】図1の画像監視装置の動作を示すタイムチャート(その1)。
【図4】図1の画像監視装置の動作を示すタイムチャート(その2)。
【図5】図1の画像監視装置の動作を示すタイムチャート(その3)。
【図6】図1の画像監視装置の動作を示すタイムチャート(その4)。
【図7】図1におけるコントローラの構成を示す図。
【図8】図1における最終画像センサの構成を示す図。
【図9】図7のコントローラの動作を説明するフローチャート(その1)。
【図10】図7のコントローラの動作を説明するフローチャート(その2)。
【図11】図7のコントローラの動作を説明するフローチャート(その3)。
【図12】図7のコントローラの動作を説明するフローチャート(その4)。
【図13】図7のコントローラの動作を説明するフローチャート(その5)。
【図14】図8の最終画像センサの動作を説明するフローチャート(その1)。
【図15】図8の最終画像センサの動作を説明するフローチャート(その2)。
【図16】図8の最終画像センサの動作を説明するフローチャート(その3)。
【符号の説明】
1…建屋
2…画像センサ
3…コントローラ
301…制御部
302…電源回路
303…センサ監視回路
304…モデム
305…画像センサ通信制御部
306…映像入出力制御部
307…表示部
308…ハードディスク
309…入館ディレータイマ
310…退館ディレータイマ
4…最終出入口
5…モード設定器
6…最終画像センサ
601…制御手段
602…電源
603…赤外線投光手段
604…撮像手段
605…画像処理手段
606…表示手段
607…通信手段
608…画像出力手段
610…アドレス設定部
611…操作手段
620…記憶手段
7…最終センサ
8…電話回線
9…警備センター[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an image monitoring apparatus, and more particularly to an image monitoring apparatus that arranges an image sensor that captures the status of a monitoring area in the monitoring area and records a screen that captures the operating status of a mode setting device.
[0002]
[Prior art]
As a security system, the surveillance area is imaged by an image sensor, and when it is detected that there is a person in the surveillance area during the security set mode, it is regarded as an intrusion abnormality, and an image of the area where the abnormality has occurred is recorded. There is an image monitoring device that sends the image to a security center as necessary. In such a security system, the mode setting device for setting the security mode to the warning set mode or the warning release mode is arranged in the monitoring area.
[0003]
When the user sets the monitoring area to the warning set mode, the user who finally leaves the building that is the monitoring area operates the mode setting device using a user card. Similarly, when setting to the alert release mode, the user who first enters the building operates the card of the mode setting device. In the security system, this card operation confirms that the operating user is a legitimate user, and then shifts the security mode to the warning set mode or the warning release mode.
[0004]
In such an image monitoring apparatus, the user is in the security area in the security set mode before and after the security mode transition setting. In other words, when transitioning to the alert release mode, the user is in the area in the alert set before the transition operation, and when transitioning to the alert set mode, the user is in the area in the alert set immediately after the transition operation. Become.
[0005]
In order to prevent the presence of this user from being mistakenly detected as an intrusion abnormality, the image monitoring device should ignore the detection of the intrusion abnormality by the sensor before and after the security mode transition setting even during the alarm set mode. Has been done. For this reason, even during the security set mode, the image including the status of the security mode transition operation is not recorded or transmitted to the security center.
[0006]
[Problems to be solved by the invention]
In the conventional image monitoring apparatus, it is confirmed that the user is a legitimate user by checking the user card used for the operation as described above. On the other hand, there is a case where the user card is used by a person who is not a regular user and a security mode transition operation is performed, or a regular user is forced by another person to perform a security mode transition operation. As described above, even when the shift to the security mode is made illegal, the operation status is not recorded for the above-described reason, and therefore it cannot be confirmed that the unauthorized use has been made.
[0007]
On the other hand, if the operation status of the mode setter is recorded as an image, the status can be confirmed from the recorded image when the security mode is improperly transferred or an incorrect operation is performed. can do.
An object of the present invention is to provide an image monitoring apparatus capable of recording an operation state of a mode setting device as an image.
[0008]
[Means for Solving the Problems]
The present invention has been made to achieve the above object. An image monitoring apparatus according to the present invention is an image that is installed in a monitoring area and has mode setting means for setting a security mode, and means for shooting the monitoring area and determining whether a moving object is present in the captured image. A sensor, and storage means for recording an image captured by the image sensor when an abnormality occurs in the monitoring area in a state where the security mode is set to the security set mode.
[0009]
In such an image monitoring apparatus, the present invention provides a final image that is disposed at a position for photographing a situation in which the mode setting means is operated and has means for determining whether or not a moving object is present in the photographing screen. In a situation where the sensor and the mode setting means are operated, when the final image sensor detects a moving body, a recording control means for recording an image including the moving body in the storage means is provided.
[0010]
According to the present invention, since an operator image that captures the situation in which the operation of the security mode is performed by the operator is recorded, the situation in which a person who is not a regular user has operated, the regular user to another person Since it is possible to confirm the situation where the forced operation was performed or the mode setting device was erroneously operated, the reliability of the image monitoring apparatus can be further improved.
[0011]
The recording control means can record an image captured by the final image sensor within a predetermined time as an operator image, triggered by the mode setting means being set to the alert set mode. The operator image at this time records the operator who operated the mode setting means and the surrounding situation.
Also, a final sensor is provided at the entrance / exit of the monitoring area, and when the final sensor is detected during the warning set mode as a trigger, the recording control means records an image captured by the final image sensor within a predetermined time as an operator image. can do. The operator image at this time records the situation where the operator who enters from the final entrance and exits to the mode setting means.
[0012]
Note that the recording control means was photographed by the final image sensor within a predetermined time with the mode setting means being set to the warning release mode as a trigger instead of using the detection of the final sensor as a trigger. An image can be recorded as an operator image. The operation image at this time records the operator who operated the mode setting means and the surrounding situation.
[0013]
DETAILED DESCRIPTION OF THE INVENTION
Embodiments of the present invention will be described with reference to the drawings.
FIG. 1 is a diagram showing an overall configuration of an image monitoring apparatus to which the present invention is applied, and FIG. 2 is a layout diagram of the image monitoring apparatus in a monitoring area.
When the inside of the
[0014]
The plurality of
[0015]
Among the plurality of
[0016]
The
A final sensor 7 for detecting the opening / closing operation is provided at the final entrance 4. The final sensor 7 can use a magnet switch that opens or closes a contact according to the opening / closing operation of the final entrance 4.
[0017]
The
Here, the overall operation of the image monitoring apparatus of FIGS. 1 and 2 will be described using the time charts of FIGS. 3, 4, 5, and 6. As for the
FIG. 3 shows a state in which the security mode in the
[0018]
During the warning set mode, the
When the user who first goes to work opens the final entrance 4 when entering the
[0019]
When receiving the final sensor detection signal, the
[0020]
Further, when detecting the moving body, the
When the
[0021]
Furthermore, the
[0022]
When the user reaches the
[0023]
When the admission delay timer expires after the setting operation to the warning release mode is performed, the
[0024]
When the operator flag is turned off, the operator image is not stored thereafter even if the
[0025]
FIG. 4 shows a state of the image monitoring apparatus when the user who finally leaves the
During the alert release mode, the
[0026]
The user who finally exits operates the user card on the
When the
[0027]
When the
[0028]
Further, the
After the user finishes the security mode setting operation and exits from the final entrance 4, when the exit delay timer expires, the
[0029]
Thereafter, the
5 and 6 show the operation of the image monitoring apparatus when an intruder enters the
[0030]
FIG. 5 shows an operation when an intruder enters from the final entrance 4. Note that the same operation is performed when the user does not perform the release operation even when the admission delay timer expires during the warning release operation of FIG. 3 described above.
During the warning set mode, the
[0031]
When an intruder opens the final entrance 4 and enters the building, the detection signal is sent to the
When receiving the final sensor detection signal, the
[0032]
When the
[0033]
Since the intruder does not perform the setting operation of the
[0034]
When the
[0035]
When an abnormal image is transmitted from the
As described above, when an intruder enters the
[0036]
FIG. 6 shows an operation when an intruder enters the
During the warning set, the
[0037]
When an intruder enters the monitoring area of one of the
Thereafter, when the
[0038]
When the intruder described above enters from other than the final entrance 4, an abnormal image is transmitted to the security center 9. In this example, although in the alert set mode, since the final sensor is not detected and the mode setting device is not operated, the operator flag remains OFF and the operator image is not stored.
Next, the configuration and operation of the
[0039]
FIG. 7 shows the configuration of the
The
[0040]
The
The
[0041]
The
[0042]
FIG. 8 shows the configuration of the
The
[0043]
The imaging means 604 that captures the monitoring area is constituted by a CCD camera and has sensitivity from the visible area to the infrared area. Infrared light projecting means 603 is provided, and when it becomes dark, such as at night, infrared light is projected onto the monitoring area. The image captured by the imaging unit 604 is stored in the
The
[0044]
The
The
[0045]
Next, operations of the
9 and 10 show an operation flow of the
In step S101, the
[0046]
In step S103, a current state calling signal is sequentially transmitted to each of the
In step S106, it is determined whether or not an operator image storage signal is received from the
[0047]
In step S108, it is determined whether or not a detection signal has been received from the final sensor 7. If received, it is determined in step S109 whether or not the security mode is a warning set mode. If the warning set mode is in effect, the
[0048]
In step S112, it is determined whether or not the
In step S114, it is determined whether or not the
[0049]
FIG. 11 shows a flow of the alert mode setting process in step S102 of FIG.
When the security mode setting operation is performed by the
In step S201, it is determined whether or not the operation is an operation on a vigilance set. Here, if the setting operation is an operation for a warning set, a warning sensor operation signal is sent to each of the
[0050]
On the other hand, if the
FIG. 12 shows a flow of the abnormality notification process in step S105 of FIG.
[0051]
When the
[0052]
If each timer is not counting in step S301, an abnormal image transmission request signal is output to the
[0053]
If an abnormal image is not received even after a predetermined time has passed in step S307, a device abnormality signal is sent to the security center 9 in step S308, and the telephone line 8 is disconnected in step S306.
FIG. 13 shows a flow of the operator image recording process in step S107 of FIG.
When the
[0054]
In step S404, if no operator image is received even after a predetermined time has elapsed, a device abnormality signal is sent to the security center 9 in step S405, and the process returns to step S108 in FIG.
The
[0055]
14, 15, and 16 show an operation flow of the
In step S501, an image captured by the imaging unit 604 is captured. In step S502, the captured image is stored in a sequential image storage area in the
[0056]
In step S503, it is determined whether a set mode signal has been received from the
In step S505, it is determined whether or not a final sensor detection signal has been received from the
[0057]
In step S507, it is determined whether or not a mode transition signal for shifting from the
In step S509, it is determined whether the
[0058]
In step S510, it is determined whether or not the operator flag is ON. If it is ON, the operator image is stored in the storage means 620 in step S511, the operator flag is turned OFF in step S512, the abnormal image is stored in the storage means 620 in step S513, and the process proceeds to step S515. .
If the operator flag is OFF in step S510, it is determined in step S514 whether or not the security mode is the set mode, and if it is the warning set mode, the process proceeds to step S513 to store the abnormal image and the warning release mode. If so, the process proceeds to step S515 without storing the abnormal image.
[0059]
In step S515, it is determined whether an exit delay timer time-up signal has been received from the
In step S517, it is determined whether or not an admission delay timer time-up signal has been received from the
[0060]
In step S518, it is determined whether a current state calling signal is received from the
In step S520, it is determined whether an operator image request signal has been received from the
[0061]
In step S522, it is determined whether an abnormal image request signal is received from the
The
The configuration and operation of the
[0062]
Although the embodiments of the present invention have been described above, the present invention is not limited to the above-described embodiments, and various modifications are possible.
For example, when shifting from the warning set mode to the warning release mode, in the example described with reference to FIG. 4, the operator flag is turned on by the detection of the final sensor 7. An operator flag can be turned on by a setting operation. In this case, what is recorded as the operator image is the user operating the
[Brief description of the drawings]
FIG. 1 is an overall configuration diagram of an image monitoring apparatus to which the present invention is applied.
FIG. 2 is a layout diagram of the image monitoring apparatus of FIG. 1 in a monitoring area.
FIG. 3 is a time chart (part 1) showing an operation of the image monitoring apparatus of FIG. 1;
4 is a time chart (part 2) illustrating the operation of the image monitoring apparatus in FIG. 1;
FIG. 5 is a time chart (part 3) illustrating the operation of the image monitoring apparatus in FIG. 1;
6 is a time chart (part 4) illustrating the operation of the image monitoring apparatus in FIG. 1;
7 is a diagram showing a configuration of a controller in FIG. 1. FIG.
8 is a diagram showing a configuration of a final image sensor in FIG. 1. FIG.
9 is a flowchart for explaining the operation of the controller in FIG. 7 (part 1);
10 is a flowchart for explaining the operation of the controller in FIG. 7 (part 2);
FIG. 11 is a flowchart (part 3) for explaining the operation of the controller in FIG. 7;
FIG. 12 is a flowchart (part 4) for explaining the operation of the controller in FIG. 7;
13 is a flowchart (No. 5) for explaining the operation of the controller in FIG. 7; FIG.
14 is a flowchart for explaining the operation of the final image sensor in FIG. 8 (part 1);
FIG. 15 is a flowchart for explaining the operation of the final image sensor in FIG. 8 (part 2);
FIG. 16 is a flowchart (part 3) for explaining the operation of the final image sensor in FIG. 8;
[Explanation of symbols]
1 ... Building
2 ... Image sensor
3 ... Controller
301 ... Control unit
302 ... Power supply circuit
303 ... Sensor monitoring circuit
304 Modem
305 ... Image sensor communication control unit
306 ... Video input / output control unit
307: Display unit
308: Hard disk
309 ... Admission delay timer
310 ... Exit delay timer
4 ... Final entrance
5 ... Mode setting device
6 ... Final image sensor
601 ... Control means
602 ... Power supply
603 ... Infrared light projection means
604 ... Imaging means
605 ... Image processing means
606 ... Display means
607 ... Communication means
608 ... Image output means
610 ... Address setting section
611 ... Operating means
620 ... Storage means
7 ... Final sensor
8 ... Telephone line
9 ... Security Center
Claims (2)
監視領域を撮影し、撮影画像内に移動体が存在するか否かを判定する手段を有する画像センサと、
前記モード設定手段が操作される状況を撮影する位置に配置され、かつ、撮影画面内に移動体が存在するか否かを判定する手段を有し、該判定手段が移動体が存在すると判定した場合に異常信号を出力する最終画像センサと、
前記画像センサが撮影した画像を記録する記憶手段とを具備し、
前記モード設定手段が警戒セットモードに設定操作されてから所定時間の間は前記最終画像センサが出力した異常信号を無視する画像監視装置であって、
前記モード設定手段が警戒セットモードに設定操作されてから前記所定時間内に前記最終画像センサが移動体を検出したとき、その移動体を含む画像を前記記憶手段に記録する記録制御手段を具備することを特徴とする画像監視装置。A mode setting means for setting the security mode installed in the monitoring area;
An image sensor having means for capturing a monitoring area and determining whether a moving object is present in the captured image ;
The mode is disposed at a position setting means for capturing a situation to be operated, and have a means for determining whether the moving object is present in the shooting screen, it is determined that the determination means are present mobile A final image sensor that outputs an abnormal signal in case
Storage means for recording an image taken by the image sensor ,
An image monitoring device for ignoring an abnormal signal output by the final image sensor for a predetermined time after the mode setting means is set and operated in a warning set mode,
It can and said mode setting means is the final image sensor within the predetermined time period since the setting operation precaution setting mode detects a moving object, the recording control means to record an image including the mobile in the storage means An image monitoring apparatus comprising:
前記モード設定手段が操作される状況を撮影する位置に配置され、かつ、撮影画面内に移動体が存在するか否かを判定する手段を有する最終画像センサと、
前記モード設定手段が警戒解除モードに設定操作されたときから所定時間内に、前記最終画像センサが移動体を検出したときに、その移動体を含む画像を前記記憶手段に記録する記録制御手段と、
を具備することを特徴とする画像監視装置。An image sensor installed in the monitoring area and configured to set a security mode, an image sensor having a means for shooting the monitoring area and determining whether a moving body is present in the captured image, and the image sensor shooting In an image monitoring apparatus comprising a storage means for recording a recorded image,
A final image sensor that is arranged at a position for photographing the situation in which the mode setting means is operated and has a means for determining whether or not a moving object is present in the photographing screen;
A recording control means for recording an image including the moving body in the storage means when the final image sensor detects the moving body within a predetermined time from when the mode setting means is set to the warning release mode; ,
An image monitoring apparatus comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP09203398A JP3939013B2 (en) | 1998-04-03 | 1998-04-03 | Image monitoring device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP09203398A JP3939013B2 (en) | 1998-04-03 | 1998-04-03 | Image monitoring device |
Publications (2)
Publication Number | Publication Date |
---|---|
JPH11288488A JPH11288488A (en) | 1999-10-19 |
JP3939013B2 true JP3939013B2 (en) | 2007-06-27 |
Family
ID=14043226
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP09203398A Expired - Lifetime JP3939013B2 (en) | 1998-04-03 | 1998-04-03 | Image monitoring device |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP3939013B2 (en) |
-
1998
- 1998-04-03 JP JP09203398A patent/JP3939013B2/en not_active Expired - Lifetime
Also Published As
Publication number | Publication date |
---|---|
JPH11288488A (en) | 1999-10-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CA2414629C (en) | Remote monitoring method and monitor control server | |
US20080101789A1 (en) | Method and apparatus for setting camera viewpoint based on alarm event or condition | |
US20060230434A1 (en) | Security information notification system and notification method, and control unit for security information notification system | |
JP2611092B2 (en) | Remote monitoring security system | |
JP3839982B2 (en) | Human body detection device and human body detection method | |
KR100857073B1 (en) | Realtime remote monitoring system | |
JP2009015536A (en) | Suspicious person report device, suspicious person monitoring device and remote monitoring system using the same | |
KR101721919B1 (en) | security system and method for security using camera | |
KR101510766B1 (en) | Monitoring dvr system using emergency sign and multi function sensor | |
US20050128072A1 (en) | Security system for a building | |
JP3939013B2 (en) | Image monitoring device | |
JP4564117B2 (en) | Security system | |
JP3878338B2 (en) | Image monitoring device | |
JP3143990U (en) | Surveillance camera system | |
JP4086139B2 (en) | Crime prevention system | |
KR20070061081A (en) | Security robot and method for security using robot | |
JP3886246B2 (en) | Image surveillance system | |
JP3969839B2 (en) | Image monitoring device | |
KR20110024370A (en) | Private security system using of auto controling of image control device and method of the same | |
JP2006077470A (en) | Security system, security device and security method | |
TWM582666U (en) | Smart home protection system | |
KR101741312B1 (en) | Real-time monitoring system for home | |
JP4070307B2 (en) | Image monitoring system and image monitoring apparatus | |
JP4262838B2 (en) | Security system and image monitoring device | |
JP3300921B2 (en) | Image monitoring system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20040609 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20040609 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060627 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20060823 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20061024 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061218 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070227 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070327 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110406 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120406 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20120406 Year of fee payment: 5 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130406 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130406 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140406 Year of fee payment: 7 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
EXPY | Cancellation because of completion of term |