JP4709566B2 - Remote monitoring device and remote monitoring system - Google Patents

Remote monitoring device and remote monitoring system Download PDF

Info

Publication number
JP4709566B2
JP4709566B2 JP2005102882A JP2005102882A JP4709566B2 JP 4709566 B2 JP4709566 B2 JP 4709566B2 JP 2005102882 A JP2005102882 A JP 2005102882A JP 2005102882 A JP2005102882 A JP 2005102882A JP 4709566 B2 JP4709566 B2 JP 4709566B2
Authority
JP
Japan
Prior art keywords
image
display
unit
threatening
activation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2005102882A
Other languages
Japanese (ja)
Other versions
JP2006285507A (en
Inventor
達男 吉田
一樹 長澤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Secom Co Ltd
Original Assignee
Secom Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Secom Co Ltd filed Critical Secom Co Ltd
Priority to JP2005102882A priority Critical patent/JP4709566B2/en
Publication of JP2006285507A publication Critical patent/JP2006285507A/en
Application granted granted Critical
Publication of JP4709566B2 publication Critical patent/JP4709566B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Burglar Alarm Systems (AREA)
  • Alarm Systems (AREA)
  • Telephonic Communication Services (AREA)

Description

本発明は、複数の撮像装置と威嚇装置を監視物件(ビル、倉庫、事務所等)に設置し、撮像装置で撮像された所定の監視領域の画像を監視物件と離れた場所に設けられた監視センタ装置に送信して、監視センタ装置に表示された監視領域の画像に基づき、監視員が侵入者を確認した上で威嚇装置を遠隔から手動により起動することができる遠隔監視装置に関する。   In the present invention, a plurality of imaging devices and threatening devices are installed in a monitoring property (building, warehouse, office, etc.), and an image of a predetermined monitoring area captured by the imaging device is provided at a location away from the monitoring property. The present invention relates to a remote monitoring device capable of manually starting a threatening device from a remote location after an inspector confirms an intruder based on an image of a monitoring area transmitted to the monitoring center device and displayed on the monitoring center device.

近年、監視物件で発生した異常を遠隔の監視センタ装置において監視員が監視し、異常が発生すると、監視センタ装置により対処行動を発令する遠隔監視システムが普及している。このような遠隔監視システムとして、特許文献1には、監視物件に扉開閉検知センサ、人体検知センサ、ガラス破壊センサ、壁破壊センサ等の各種センサ(以下、単に「センサ」と称する)、CCDカメラ(本発明の「撮像装置」に相当する)、及び煙を放射する発煙装置(本発明の「威嚇装置」に相当する)等が接続されており、これらセンサ及びカメラからの侵入情報を遠隔の監視装置に送信する警報装置、警報装置から受信した監視領域の画像を表示し、発煙装置を起動する発煙起動操作部(本発明の「起動操作手段」に相当する)を備える監視装置(本発明の「遠隔監視装置」に相当する)を備える遠隔監視システムが開示されている。   In recent years, remote monitoring systems in which a monitoring person monitors an abnormality occurring in a monitored property in a remote monitoring center apparatus and issues a coping action by the monitoring center apparatus when the abnormality occurs have become widespread. As such a remote monitoring system, Patent Literature 1 discloses various sensors (hereinafter simply referred to as “sensors”) such as a door opening / closing detection sensor, a human body detection sensor, a glass breakage sensor, and a wall breakage sensor, and a CCD camera. (Corresponding to the “imaging device” of the present invention), a smoke generating device that emits smoke (corresponding to the “intimidation device” of the present invention), etc. are connected. An alarm device to be transmitted to the monitor device, a monitor device (display device according to the present invention) provided with a smoke activation operation unit (corresponding to the “activation operation means” of the present invention) that displays an image of the monitoring area received from the alarm device and activates the smoke generator A remote monitoring system is disclosed.

このシステムでは、センサが検知すると、CCDカメラにより撮影された画像を遠隔の監視装置に送信する。監視装置は、受信した画像を表示する表示装置を備えており、監視員が表示装置の表示画面を監視している。表示装置の画像に基づいて人の侵入であると判断すると、監視員は発煙起動操作部を操作して、発煙装置を起動する。発煙起動操作部が操作されると、監視装置から起動信号が警報装置に送信される。警報装置は、起動信号を受信すると、発煙装置を起動させる。これにより、監視領域において煙が噴出されて、侵入者を威嚇して犯罪行為を阻止または牽制する。また、撮像装置として、異常を検知したときの画像(蓄積画像)と現在の監視領域の画像(最新画像)の種別の異なる画像を送信することができる画像センサが知られている(特許文献2)。
特開2004−171235号公報 特開2001−28089号公報
In this system, when a sensor detects, an image taken by a CCD camera is transmitted to a remote monitoring device. The monitoring device includes a display device that displays a received image, and a monitor monitors a display screen of the display device. If it is determined that a person has entered based on the image on the display device, the monitoring person operates the smoke generation activation operation unit to activate the smoke generation device. When the smoke generation activation operation unit is operated, an activation signal is transmitted from the monitoring device to the alarm device. When receiving the activation signal, the alarm device activates the smoke generating device. As a result, smoke is ejected in the surveillance area, threatening the intruder and preventing or checking criminal activity. Further, as an imaging device, an image sensor is known that can transmit images of different types, that is, an image when an abnormality is detected (accumulated image) and a current monitoring region image (latest image) (Patent Document 2). ).
JP 2004-171235 A JP 2001-28089 A

しかしながら、上述した特許文献1の遠隔監視システムでは、監視領域が複数ある場合、監視員が、発煙起動操作部の操作を誤ると、侵入者のいる監視領域とは無関係な発煙装置を起動してしまうことになる。そのため、監視員は、表示装置で表示されている画像に対応する発煙装置の有無をまず確認した上で、対応する発煙装置を起動する操作(例えば、表示画像に対応する発煙装置を選択する操作)を間違いなく行わなければならない。しかし、このような発煙装置の有無の確認を行っていたのでは、発煙装置を起動するタイミングを逃してしまうおそれがある。また、このような監視員の人的操作により対応する発煙装置を起動する操作では、操作ミスの発生を完全に除去することは困難である。さらに、特許文献2のような画像センサを撮像装置として使用した場合、最新画像が表示されていない状態で発煙装置を起動すると、侵入者が既に存在しないにもかかわらず、発煙装置を起動してしまう可能性がある。このようなタイミングのずれた発煙装置の起動、または誤った発煙装置の起動は、発煙ボンベを無駄に消費することになる。また、営業時間中に発煙装置を誤動作させると、業務が停止するだけでなく、顧客に多大な迷惑をかけることもあり得る。   However, in the above-described remote monitoring system disclosed in Patent Document 1, when there are a plurality of monitoring areas, if the monitoring person makes a mistake in operating the smoke generation operation unit, the smoke generation device unrelated to the monitoring area where the intruder exists is activated. Will end up. For this reason, the monitor first confirms the presence or absence of the smoke generating device corresponding to the image displayed on the display device, and then starts the corresponding smoke generating device (for example, the operation of selecting the smoke generating device corresponding to the display image). ) Must be done. However, if the presence / absence of the smoke generator is checked, there is a risk that the timing for starting the smoke generator may be missed. Moreover, it is difficult to completely eliminate the occurrence of an operation error in the operation of starting the corresponding smoke generation device by the human operation of the monitoring person. Further, when an image sensor such as that disclosed in Patent Document 2 is used as an imaging device, if the smoke generator is activated in a state where the latest image is not displayed, the smoke generator is activated even though no intruder already exists. There is a possibility. Such activation of the smoke generation device out of timing or erroneous activation of the smoke generation device wastes the smoke cylinder. In addition, if the smoke generating device malfunctions during business hours, not only will the business stop, but it may also cause great inconvenience to the customer.

本発明は上記問題点に鑑みてなされたもので、表示画像の送信源である撮像装置に対応する発煙装置等の威嚇装置の有無を監視員が迅速に判断することができ、かつ確実に威嚇装置を起動させることができる遠隔監視装置を提供することを目的とする。   The present invention has been made in view of the above-described problems, and the monitoring staff can quickly determine the presence or absence of a threatening device such as a smoke generating device corresponding to the imaging device that is the transmission source of the display image, and reliably threaten. An object of the present invention is to provide a remote monitoring device capable of starting up the device.

また、本発明の他の目的は、監視員に、監視領域の最新の画像を確認させた上で威嚇装置を起動させることができる遠隔監視装置を提供することを目的とする。   Another object of the present invention is to provide a remote monitoring device capable of starting a threatening device after allowing a monitoring person to check the latest image of the monitoring area.

本発明にかかる遠隔監視装置は、遠隔監視装置において表示されている表示画像を送信している撮像装置と対応する威嚇装置について起動操作手段の起動操作が可能になるよう構成する。さらには、表示画像が最新画像であるときに起動操作手段の起動操作が可能になるように構成する。また、監視員が意図した表示画像に対応する威嚇装置を確実に起動できない状態では、威嚇装置の起動ができないようにすることにより、上記課題を解決する。   The remote monitoring device according to the present invention is configured so that the activation operation means can be activated for the threatening device corresponding to the imaging device transmitting the display image displayed on the remote monitoring device. Further, the activation operation means can be activated when the display image is the latest image. Further, the above problem is solved by preventing the threatening device from being started in a state where the threatening device corresponding to the display image intended by the monitor cannot be reliably started.

本発明の第1の実施態様に係る遠隔監視装置は、監視物件に設置された威嚇装置及び撮像装置と接続される遠隔監視装置であって、前記威嚇装置へ起動信号を出力するときに操作する起動操作手段と、前記撮像装置からの画像を受信する通信制御手段と、前記画像を表示部に表示する表示手段と、前記表示部における表示画像に付加された画像種別を示す画像特定情報に基づいて、当該表示画像が最新画像かその他の画像種別の画像かを判定する画像判定手段と、前記威嚇装置及び前記撮像装置との対応を記憶する記憶手段と、前記表示画像の送信源である前記撮像装置に対応する前記威嚇装置があり、前記画像判定手段にて前記表示画像が前記最新画像であると判定されることを条件として、前記起動操作手段を操作可能状態とし、前記表示部における表示画像の送信源である前記撮像装置に対応する前記威嚇装置があっても、前記画像判定手段にて前記その他の画像種別の画像であると判定される場合は、前記起動操作手段を操作不能状態とする表示制御手段と、前記起動操作手段が操作されると、前記対応する威嚇装置を起動する起動信号を出力する威嚇起動手段と、を具備することを特徴とする。 The remote monitoring device according to the first embodiment of the present invention is a remote monitoring device connected to a threatening device and an imaging device installed in a monitored property, and operates when outputting a start signal to the threatening device. Based on start operation means, communication control means for receiving an image from the imaging device, display means for displaying the image on a display section, and image specifying information indicating an image type added to a display image in the display section An image determination unit that determines whether the display image is the latest image or an image of another image type, a storage unit that stores correspondence between the threatening device and the imaging device, and the transmission source of the display image Ri said threatening device have to correspond to the imaging device, wherein the Rukoto is determined that the displayed image is the most recent image as a condition by the image determining unit, and an operation state of said activation operation means, said table Even if there is the threatening device corresponding to the imaging device that is the transmission source of the display image in the unit, if the image determination unit determines that the image is of the other image type, the activation operation unit is It comprises display control means for disabling operation, and threatening activation means for outputting an activation signal for activating the corresponding threatening device when the activation operation means is operated.

この態様は、表示手段に表示中の表示画像を送信している撮像装置に対応する威嚇装置が存在する場合にのみ、起動操作手段を操作可能状態とし、操作可能となった起動操作手段を操作すると、表示中の表示画像を送信している撮像装置に対応する威嚇装置が起動されるように構成したものである。この態様により表示中の画像を送信している撮像装置と対応する威嚇装置を確認することが不要となるので、迅速な威嚇装置の起動が可能となり、操作の遅れにより威嚇のタイミングを外すことや、誤操作を防止可能となる。また、起動操作手段が操作可能状態となったか否かを監視員が確認すれば、対応する威嚇装置の有無を、起動操作手段を実際に操作しなくても、すぐに判断できるので、威嚇装置が無い場合には、すぐに他の対応をとることが可能となる。
また、監視員が最新画像状態を確認している状態でないと、威嚇装置を起動できないようにしたものである。これにより、最新画像を確認せずに、威嚇装置を起動することを防止し、タイミングのずれた起動を無くすことができる。
In this mode, only when there is a threatening device corresponding to the imaging device that is transmitting the display image being displayed on the display means, the activation operation means is made operable, and the activated operation operation means is operated. Then, the threatening device corresponding to the imaging device that is transmitting the display image being displayed is configured to be activated. According to this aspect, it is not necessary to confirm the threatening device corresponding to the imaging device that is transmitting the image being displayed. Therefore, the threatening device can be activated quickly, and the timing of threatening can be removed due to a delay in operation. It becomes possible to prevent erroneous operation. In addition, if the monitoring person confirms whether or not the activation operation means has become operable, the presence or absence of the corresponding threatening device can be determined immediately without actually operating the activation operation means. If there is no, it is possible to take other measures immediately.
Further, the threatening device cannot be activated unless the monitoring person confirms the latest image state. As a result, it is possible to prevent the threatening device from being activated without confirming the latest image, and to eliminate the activation with a shifted timing.

本発明の他の態様に係る遠隔監視装置は、更に、前記表示画像が切換え処理中か否かを判定する表示状態判定手段を具備し、前記表示制御手段は、前記表示画像が切換え処理中でないことを条件として、前記起動操作手段を操作可能状態とすることを特徴とする。 The remote monitoring apparatus according to another aspect of the present invention further includes a display state determination unit that determines whether or not the display image is in a switching process, and the display control unit has the display image not in a switching process. On the condition that the activation operation means is in an operable state.

この態様は、表示画像の切換え処理中は、表示中の画像と威嚇装置の関係が不安定であるので、切換え処理が完了するまで、起動操作手段を操作できないようにするものである。 In this aspect, since the relationship between the displayed image and the threatening device is unstable during the display image switching process, the activation operation means cannot be operated until the switching process is completed.

本発明の他の態様に係る遠隔監視装置は、更に、前記表示手段が、複数の前記記憶装置から受信した画像を前記表示部に分割表示する機能を有し、前記表示状態判定手段は、分割表示されているか否かを判定し、前記起動制御手段は、分割表示されていないことを条件として、前記起動操作手段を操作可能状態とすることを特徴とする。 In the remote monitoring device according to another aspect of the present invention, the display unit further has a function of dividing and displaying the images received from the plurality of storage devices on the display unit, and the display state determination unit includes the division It is determined whether or not it is displayed, and the activation control unit sets the activation operation unit to an operable state on the condition that the display is not divided and displayed .

この態様は、分割表示中は、画面と対応する威嚇装置が特定できないため、分割表示中は起動操作手段を操作不能とするものである。 This embodiment, in split view, in order to screen the corresponding intimidating device can not be identified, in split display is to inoperable activation operation means.

本発明の他の態様に係る遠隔監視装置は、更に、前記表示手段が、複数の前記撮像装置から受信した画像を前記表示部に自動切換表示する機能を有し、前記表示状態判定手段は、自動切換え表示されているか否かを判定し、前記起動制御手段は、自動切換表示されていないことを条件として、前記起動操作手段を操作可能状態とすることを特徴とするものである。 In the remote monitoring device according to another aspect of the present invention, the display unit further has a function of automatically switching and displaying the images received from the plurality of imaging devices on the display unit, and the display state determination unit includes: It is determined whether or not automatic switching is displayed, and the activation control means sets the activation operation means to an operable state on condition that automatic switching is not displayed .

この態様は、表示画像が、監視領域の各部の画像カメラに順次切り替えられる自動切換えモードのときには、威嚇起動手段を起動できないようにしたものである。自動切換え表示では、切換えタイミングの関係で、意図したものと異なる威嚇装置を起動させるおそれがあるので、このような誤操作を防止するものである。 In this aspect , in the automatic switching mode in which the display image is sequentially switched to the image camera of each part of the monitoring area, the threatening activation unit cannot be activated. In the automatic switching display, there is a possibility that a threatening device different from the intended one may be activated due to the switching timing, so that such an erroneous operation is prevented .

本発明の第1の実施態様に係る遠隔監視システムは、監視物件に設置された威嚇装置及び撮像装置と、当該威嚇装置及び撮像装置と接続される遠隔監視装置とを備えた遠隔監視システムであって、前記撮像装置は、撮像した画像に画像種別を示す画像特定情報を付加して前記遠隔監視装置へ送信し、前記遠隔監視装置は、前記威嚇装置へ起動信号を出力するときに操作する起動操作手段と、前記撮像装置からの画像を受信する通信制御手段と、前記画像を表示部に表示する表示手段と、前記表示部における表示画像に付加された前記画像特定情報に基づいて、当該表示画像が最新画像かその他の画像種別の画像かを判定する画像判定手段と、前記威嚇装置及び前記撮像装置との対応を記憶する記憶手段と、前記表示画像の送信源である前記撮像装置に対応する前記威嚇装置があり、前記画像判定手段にて前記表示画像が前記最新画像であると判定されることを条件として、前記起動操作手段を操作可能状態とし、前記表示部における表示画像の送信源である前記撮像装置に対応する前記威嚇装置があっても、前記画像判定手段にて前記その他の画像種別の画像であると判定される場合は、前記起動操作手段を操作不能状態とする表示制御手段と、前記起動操作手段が操作されると、前記対応する威嚇装置を起動する起動信号を出力する威嚇起動手段とを具備し、前記威嚇装置は、前記起動信号の受信により起動することを特徴とする。 A remote monitoring system according to a first embodiment of the present invention is a remote monitoring system including a threatening device and an imaging device installed in a monitored property, and a remote monitoring device connected to the threatening device and the imaging device. The imaging device adds image specifying information indicating an image type to the captured image and transmits the image to the remote monitoring device, and the remote monitoring device operates when outputting an activation signal to the threatening device. An operation unit, a communication control unit that receives an image from the imaging device, a display unit that displays the image on a display unit, and the display based on the image specifying information added to the display image in the display unit Image determination means for determining whether the image is the latest image or an image of another image type, storage means for storing correspondence between the threatening device and the imaging device, and the imaging that is a transmission source of the display image There is the threatening device corresponding to the device, and on the condition that the display determination unit determines that the display image is the latest image, the activation operation unit is set in an operable state, and the display image on the display unit Even if there is the threatening device corresponding to the imaging device that is the transmission source, if the image determination unit determines that the image is of the other image type, the activation operation unit is set to an inoperable state. Display control means, and when the activation operation means is operated, threatening activation means for outputting an activation signal for activating the corresponding threatening device is provided, and the threatening device is activated by receiving the activation signal. It is characterized by that.

この態様は、表示手段に表示中の表示画像を送信している撮像装置に対応する威嚇装置が存在する場合にのみ、起動操作手段を操作可能状態とし、操作可能となった起動操作手段を操作すると、表示中の表示画像を送信している撮像装置に対応する威嚇装置が起動されるように構成したものである。この態様により表示中の画像を送信している撮像装置と対応する威嚇装置を確認することが不要となるので、迅速な威嚇装置の起動が可能となり、操作の遅れにより威嚇のタイミングを外すことや、誤操作を防止可能となる。また、起動操作手段が操作可能状態となったか否かを監視員が確認すれば、対応する威嚇装置の有無を、起動操作手段を実際に操作しなくても、すぐに判断できるので、威嚇装置が無い場合には、すぐに他の対応をとることが可能となる。
また、監視員が最新画像状態を確認している状態でないと、威嚇装置を起動できないようにしたものである。これにより、最新画像を確認せずに、威嚇装置を起動することを防止し、タイミングのずれた起動を無くすことができる。
In this mode , only when there is a threatening device corresponding to the imaging device that is transmitting the display image being displayed on the display means, the activation operation means is made operable, and the activated operation operation means is operated. Then, the threatening device corresponding to the imaging device that is transmitting the display image being displayed is configured to be activated. According to this aspect, it is not necessary to confirm the threatening device corresponding to the imaging device that is transmitting the image being displayed. Therefore, the threatening device can be activated quickly, and the timing of threatening can be removed due to a delay in operation. It becomes possible to prevent erroneous operation. In addition, if the monitoring person confirms whether or not the activation operation means has become operable, the presence or absence of the corresponding threatening device can be determined immediately without actually operating the activation operation means. If there is no, it is possible to take other measures immediately.
Further, the threatening device cannot be activated unless the monitoring person confirms the latest image state. As a result, it is possible to prevent the threatening device from being activated without confirming the latest image, and to eliminate the activation with a shifted timing.

本発明の遠隔監視装置は、表示部に表示されている表示画像を送信している撮像装置に対応する威嚇装置を起動する起動操作手段を操作可能状態に表示制御手段が制御するので、いち早く威嚇装置の有無を確認でき、威嚇装置が有る場合はタイミングよく迅速に起動することができる。また、威嚇装置が無い場合でも、監視員が無駄な起動操作をすることがなくなり、他の対処行動を早くとることができる。さらに、起動操作手段が操作されれば、威嚇起動手段が対応する威嚇装置を起動する起動信号を出力するので、表示されている画像と無関係な威嚇装置を誤操作により起動させることを防止できる。また、起動操作手段を一つの押ボタン、またはスイッチ等にすることも可能になり、表示画像を見ながら起動操作手段を操作するだけで、対応する威嚇装置を正しく起動させることが可能となり、迅速かつ適切なタイミングでの威嚇装置の起動が可能となる。   In the remote monitoring device of the present invention, the display control unit controls the start operation unit that starts the threatening device corresponding to the imaging device that is transmitting the display image displayed on the display unit to the operable state. The presence or absence of the device can be confirmed, and if there is a threatening device, it can be started quickly with good timing. Further, even when there is no threatening device, the monitoring staff does not perform useless start-up operation, and other coping actions can be taken quickly. Further, when the activation operation means is operated, the activation signal that activates the threatening device corresponding to the threatening activation means is output, so that it is possible to prevent the threatening apparatus irrelevant to the displayed image from being erroneously activated. In addition, the activation operation means can be a single push button or a switch, and the corresponding threatening device can be activated correctly only by operating the activation operation means while viewing the display image. And the threatening device can be activated at an appropriate timing.

本発明に係る遠隔監視装置を、図面を用いて説明する。図1は本発明にかかる遠隔監視装置(監視センタ装置8)を用いた遠隔監視システム10の一例を示す機能ブロック図である。遠隔監視システム10では、監視物件内に監視装置2が設けられている。監視装置2には、監視物件内の複数の要所に設置されるマグネットセンサ、熱線センサ等の侵入センサ4、火災センサ5等の各種センサ、非常ボタン6が接続されている。さらに、監視装置2には、監視物件内の複数の監視領域に設置される画像センサ1a〜1e、及び発煙装置3a〜3dが接続されている。   A remote monitoring apparatus according to the present invention will be described with reference to the drawings. FIG. 1 is a functional block diagram showing an example of a remote monitoring system 10 using a remote monitoring device (monitoring center device 8) according to the present invention. In the remote monitoring system 10, the monitoring device 2 is provided in the monitored property. The monitoring device 2 is connected to a magnet sensor, an intrusion sensor 4 such as a heat ray sensor, various sensors such as a fire sensor 5 and an emergency button 6 installed at a plurality of important points in the monitored property. Furthermore, the monitoring device 2 is connected to image sensors 1a to 1e and smoke generating devices 3a to 3d installed in a plurality of monitoring areas in the monitored property.

監視装置2は電話回線等の通信回線7を介して監視物件から離れた場所に設けられた監視センタ装置8(本発明の遠隔監視装置に相当する)に接続されている。さらに監視装置2には、監視装置2を監視モードまたは解除モードに設定するモード設定器9が設けられている。モード設定器9による監視モードまたは解除モードの設定には、磁気カード等の所定のカード操作または所定のキーが用いられる。監視装置2は、監視モードに設定されたときに、監視物件内に異常が発生していないかを監視し、所定の異常が発生すると監視センタ装置8に侵入情報を通報する。なお、監視装置2は、監視モード又は解除モードに設定される度に、後述する画像センサ1にその旨を通知する。   The monitoring device 2 is connected to a monitoring center device 8 (corresponding to the remote monitoring device of the present invention) provided at a location away from the monitored property via a communication line 7 such as a telephone line. Furthermore, the monitoring device 2 is provided with a mode setting device 9 for setting the monitoring device 2 to the monitoring mode or the release mode. A predetermined card operation such as a magnetic card or a predetermined key is used for setting the monitoring mode or the release mode by the mode setting unit 9. When the monitoring device 2 is set to the monitoring mode, the monitoring device 2 monitors whether there is an abnormality in the monitored property, and notifies the monitoring center device 8 of intrusion information when a predetermined abnormality occurs. Each time the monitoring device 2 is set to the monitoring mode or the release mode, the monitoring device 2 notifies the image sensor 1 described later of that fact.

監視センタ装置8は、監視装置2から受信した侵入情報を表示する表示手段803(図2)を備えており、侵入情報を受信すると、通報のあった侵入情報を表示する。監視センタ装置8では、監視物件に異常がないかを監視員が常時監視しており、異常が発生したら、侵入情報に基づいて、監視員が必要な対処行動をとる。対処行動には、例えば、発煙装置3を起動させたり、監視物件付近に待機している警備員に点検を要請したりする行動などがある。   The monitoring center device 8 includes display means 803 (FIG. 2) for displaying the intrusion information received from the monitoring device 2. When receiving the intrusion information, the monitoring center device 8 displays the intrusion information that has been reported. In the monitoring center device 8, the monitoring staff constantly monitors whether there is an abnormality in the monitored property, and when an abnormality occurs, the monitoring staff takes necessary coping actions based on the intrusion information. The coping behavior includes, for example, a behavior of starting the smoke generating device 3 or requesting a security guard waiting near the monitored property for inspection.

尚、図1では、侵入者の犯罪行為を阻止または犯行意欲を減殺させる威嚇装置として発煙装置3を設置した例を示しているが、音声または光による威嚇装置、水、ペンキ、特殊塗料等を噴出する等のその他の物理的な威嚇装置を設置することも可能である。以下の実施形態においては、威嚇装置の典型的な例として、発煙装置3を使用した例を用いて説明するが、発煙装置3に代えて、または発煙装置3に加えて、その他の威嚇装置を設置することを排除する趣旨ではない。   FIG. 1 shows an example in which the smoke generating device 3 is installed as a threatening device that prevents an intruder's criminal activity or reduces the willingness to commit a crime. However, a threatening device by sound or light, water, paint, special paint, etc. It is also possible to install other physical threatening devices such as jets. In the following embodiments, as a typical example of a threatening device, a description will be given using an example in which the smoke generating device 3 is used. However, instead of the smoke generating device 3 or in addition to the smoke generating device 3, other threatening devices may be used. It is not intended to exclude installation.

画像センサ1は、例えばCCDやCMOS型(CIS)の撮像装置を備えており、監視領域を撮像した画像を監視装置2に送信する。また、撮像した画像を解析して、侵入者の存在を検出する。さらに、画像センサ1は、撮像した画像を解析して、人の存在可能性の確度のレベルを段階的に判定し、確度の段階に応じた侵入検出信号を監視装置2に出力する。   The image sensor 1 includes, for example, a CCD or CMOS (CIS) imaging device, and transmits an image obtained by imaging the monitoring area to the monitoring device 2. The captured image is analyzed to detect the presence of an intruder. Further, the image sensor 1 analyzes the captured image, determines the accuracy level of the possibility of human existence step by step, and outputs an intrusion detection signal corresponding to the accuracy level to the monitoring device 2.

発煙装置3は、起動信号に基づいて、煙状物質を大量に噴出させて、侵入者の視野を遮り威嚇して犯意を喪失させ、または行動不能にさせる威嚇装置である。犯人に対する威嚇作用が強力であるため、誤動作をすると、顧客等に多大な迷惑や被害を与える可能性があるので、起動させるに当たっては、侵入者であることの、確実な確認および起動操作が求められる。   The smoke generating device 3 is a threatening device that ejects a large amount of a smoky substance on the basis of an activation signal, obstructs the intruder's visual field, threatens to lose criminal activity, or disables an action. Because the threatening action against the criminal is strong, malfunctioning may cause great inconvenience and damage to customers, etc., so when starting up, it is necessary to confirm and start up assured that you are an intruder. It is done.

画像センサ1と発煙装置3とは対応させて監視物件内の監視領域に設置されている。図1においては、破線で囲まれたブロックの中にある画像センサ1と発煙装置3とが互いに対応関係があることを示している。図1に破線ブロックで示すように、「画像センサ1と発煙装置3」の関係は必ずしも1対1で対応づけられて設置される必要はなく、1対1(画像センサ1a:発煙装置3a)、複数対1(画像センサ1b、1c:発煙装置3b)、1対複数(画像センサ1d:発煙装置3c、3d))、1対0(画像センサ1e:発煙装置無し)の関係で対応付けて設置しても良い。   The image sensor 1 and the smoke generation device 3 are installed in the monitoring area in the monitoring property in association with each other. FIG. 1 shows that the image sensor 1 and the smoke generation device 3 in the block surrounded by a broken line have a corresponding relationship with each other. As indicated by a broken line block in FIG. 1, the relationship between the “image sensor 1 and the smoke generator 3” does not necessarily have to be installed in a one-to-one correspondence (image sensor 1a: smoke generator 3a). , Multiple to one (image sensor 1b, 1c: smoke generator 3b), one to multiple (image sensor 1d: smoke generator 3c, 3d), and 1 to 0 (image sensor 1e: no smoke generator). May be installed.

画像センサ1と発煙装置3の具体な設置例としては、例えば、同じ部屋に画像センサ1と発煙装置3を1対1で対応づけて設置する場合、重要な監視対象物(金庫等)を撮影範囲内に納める1台の画像センサ1と、監視対象物の上の天井と監視対象物の近くに1台ずつ合計2台の発煙装置3を設けて1対2の関係で設置する場合等がある。画像センサ1と発煙装置3を1対複数の関係で設置すると、重要な監視対象物に関しては、複数回発煙装置3を起動することが可能となり、犯罪抑止効果を高めることが可能となる。また、1台の画像センサ1で監視する範囲が広く、1台の発煙装置3の発煙量では不十分な場合には、1台の画像センサ1に対応付けて複数の発煙装置3を設けることも可能である。   As a specific installation example of the image sensor 1 and the smoke generation device 3, for example, when the image sensor 1 and the smoke generation device 3 are installed in a one-to-one correspondence in the same room, an important monitoring object (such as a safe) is photographed. There may be a case where one image sensor 1 that falls within the range and two smoke generators 3 are installed in a one-to-two relationship one by one near the ceiling above the monitoring object and the monitoring object. is there. If the image sensor 1 and the smoke generation device 3 are installed in a one-to-multiple relationship, the smoke generation device 3 can be activated a plurality of times for important monitoring objects, and the crime prevention effect can be enhanced. When the range monitored by one image sensor 1 is wide and the amount of smoke generated by one smoke device 3 is insufficient, a plurality of smoke devices 3 are provided in association with one image sensor 1. Is also possible.

監視装置2は、前述したように、監視モード時において各種センサ4、5、6、画像センサ1からの情報に基づいて異常状態の発生を監視しており、異常状態が発生すると、侵入検出信号及び画像情報(撮像した画像を含む)を監視センタ装置8に送信する。なお、本明細書では、侵入検出信号と画像情報とを特に区別する必要がない場合には、「侵入情報」と称している。   As described above, the monitoring device 2 monitors the occurrence of an abnormal state based on information from the various sensors 4, 5, 6 and the image sensor 1 in the monitoring mode. And the image information (including the captured image) are transmitted to the monitoring center device 8. In this specification, the intrusion detection signal and the image information are referred to as “intrusion information” when it is not necessary to distinguish between them.

(監視センタ装置)
監視センタ装置8は監視装置2から受信した侵入情報を、表示手段803(図2)に表示して監視員に対して異常発生を知らせる。監視員は、表示手段803(図2)に表示された監視領域の画像に基づいて監視領域の状態を確認し、発煙装置3を起動させる等の必要な対処行動を取る。本実施例においては、発煙装置3を起動するために操作する起動操作手段832(図3)を、表示画像と対応させて表示する。そして、表示画像と無関係な発煙装置3の起動ができないようにしている。
(Monitoring center device)
The monitoring center device 8 displays the intrusion information received from the monitoring device 2 on the display means 803 (FIG. 2) to notify the monitoring staff of the occurrence of an abnormality. The monitoring person confirms the state of the monitoring area based on the image of the monitoring area displayed on the display means 803 (FIG. 2), and takes necessary coping actions such as starting the smoke generating device 3. In the present embodiment, the activation operation means 832 (FIG. 3) operated to activate the smoke generating device 3 is displayed in correspondence with the display image. And the smoke generation device 3 unrelated to the display image cannot be started.

図2は、本発明の一実施形態にかかる監視センタ装置8の機能ブロック図を示す。監視センタ装置8は各種機能を備えているが、図2では本発明に関連する機能部分のみを表示している。監視センタ装置8は、監視装置2から受信した侵入情報を受信し、起動信号その他の制御信号を監視装置2に送信する通信制御手段801、監視センタ装置8全体を制御する主制御手段802、監視装置2から受信した侵入情報を画面上に表示する表示手段803、表示手段803に表示中の画像(「表示画像」と称する)が最新画像であるか蓄積画像であるかを判定する画像判定手段804、監視領域に設置された発煙装置3の起動に関連する処理を行う威嚇起動手段805、及び画像センサ1と発煙装置3の対応関係、表示部811における表示画像の表示状態を示すフラグ、起動操作手段832(図3)を操作可能状態としてよいかを示すフラグ(以下、起動操作手段表示フラグという)等を記憶している記憶手段807を備えている。   FIG. 2 is a functional block diagram of the monitoring center device 8 according to the embodiment of the present invention. Although the monitoring center device 8 has various functions, FIG. 2 shows only functional portions related to the present invention. The monitoring center device 8 receives the intrusion information received from the monitoring device 2 and transmits a start signal and other control signals to the monitoring device 2, a main control unit 802 that controls the entire monitoring center device 8, and monitoring Display means 803 for displaying the intrusion information received from the apparatus 2 on the screen, and image determination means for determining whether the image displayed on the display means 803 (referred to as “display image”) is the latest image or the accumulated image. 804, threatening activation means 805 for performing processing related to activation of the smoke generator 3 installed in the monitoring area, correspondence between the image sensor 1 and the smoke generator 3, a flag indicating the display state of the display image on the display unit 811, activation A storage unit 807 that stores a flag (hereinafter referred to as a start operation unit display flag) indicating whether or not the operation unit 832 (FIG. 3) may be operated is provided.

通信回線7を介して監視装置2から監視センタ装置8に侵入情報が送信されると、通信制御手段801を介して主制御手段802に入力される。主制御手段802は監視装置2から侵入情報を受信すると、該侵入情報を解析する。監視装置2から受信する侵入情報には、画像がどの画像センサ1により撮像したものであるかを示す識別記号、及び画像種別を示す画像特定情報も含まれる。画像種別には蓄積画像と最新画像がある。蓄積画像とは、侵入者の存在を検出した前後の画像であり画像センサ1に記憶されている画像である。最新画像とは、画像センサ1が撮像した最新の画像である。通常、侵入者の存在を検出すると、まず、蓄積画像が監視センタ装置8に送信され、監視センタ装置8からの制御信号に基づいて、最新画像が送信される。詳細は後述する。なお、最新画像以外の画像種別として侵入者の存在を検出した前後の画像である蓄積画像を挙げているが、その他の画像種別であってもよいし、その他の画像種別が加わってもよい。その他の画像種別としては、定期的に撮像した画像などがある。   When intrusion information is transmitted from the monitoring device 2 to the monitoring center device 8 via the communication line 7, it is input to the main control means 802 via the communication control means 801. When the main control means 802 receives the intrusion information from the monitoring device 2, it analyzes the intrusion information. The intrusion information received from the monitoring device 2 includes an identification symbol indicating which image sensor 1 the image is captured by, and image specifying information indicating the image type. Image types include accumulated images and latest images. The accumulated images are images before and after detecting the presence of an intruder and are images stored in the image sensor 1. The latest image is the latest image captured by the image sensor 1. Normally, when the presence of an intruder is detected, first, an accumulated image is transmitted to the monitoring center device 8, and the latest image is transmitted based on a control signal from the monitoring center device 8. Details will be described later. In addition, although the accumulated image which is the image before and after detecting the presence of the intruder is cited as the image type other than the latest image, other image types may be used, and other image types may be added. Other image types include images taken periodically.

主制御手段802により解析された侵入情報は、主制御手段802から表示制御部803に出力されて、表示制御部810の制御の下、表示部811により表示される。表示部811は、タッチパネル又はマウス等の入力機能を備えている。表示制御部810は、表示手段803における表示画像に付加されている画像特定情報を画像判定手段804に出力する。また、表示制御部810は、表示画像に付加されている識別記号を、起動操作手段832(図3)が操作されたときに、発煙装置3を起動する旨の信号とともに威嚇起動手段805に出力する。さらに表示制御部810は、表示部811における表示画像の表示状態を記憶手段807に記憶させ、また、記憶手段807を参照して、起動操作手段832(図3)を操作可能状態にしてよいかを判定し、表示部811に対し起動操作手段832(図3)の表示/非表示の制御をする。   The intrusion information analyzed by the main control unit 802 is output from the main control unit 802 to the display control unit 803 and displayed by the display unit 811 under the control of the display control unit 810. The display unit 811 has an input function such as a touch panel or a mouse. The display control unit 810 outputs the image specifying information added to the display image on the display unit 803 to the image determination unit 804. In addition, the display control unit 810 outputs the identification symbol added to the display image to the threatening activation unit 805 together with a signal to activate the smoke generating device 3 when the activation operation unit 832 (FIG. 3) is operated. To do. Further, the display control unit 810 may store the display state of the display image on the display unit 811 in the storage unit 807, and refer to the storage unit 807 to make the activation operation unit 832 (FIG. 3) operable. And the display unit 811 is controlled to display / hide the activation operation means 832 (FIG. 3).

画像判定手段804は、画像特定情報に基づいて、表示画像の画像種別を判定し、その結果を記憶手段807に記憶させる。威嚇起動手段805は、表示画像が最新画像であり、かつ、表示画像を撮像した画像センサ1に対応する発煙装置3が存在するとき、起動操作手段832(図3)の操作を可能状態にする起動操作手段表示フラグをON状態にする。なお、画像センサ1に対応する発煙装置3の有無の情報は、対応テーブルとして予め記憶手段807に記憶されている。   The image determination unit 804 determines the image type of the display image based on the image specifying information, and stores the result in the storage unit 807. The threatening activation means 805 enables the operation of the activation operation means 832 (FIG. 3) when the display image is the latest image and the smoke generating device 3 corresponding to the image sensor 1 that has captured the display image exists. The start operation means display flag is turned on. Information on the presence or absence of the smoke generation device 3 corresponding to the image sensor 1 is stored in advance in the storage unit 807 as a correspondence table.

表示制御手段810は、起動操作手段表示フラグがONであると、起動操作手段832(図3)を操作可能状態とする。監視員により、起動操作手段832(図3)が操作されると、威嚇起動手段805は、表示画像の送信源である画像センサ1に対応する発煙装置3が存在するか否かを記憶手段807の対応テーブルから確認し、対応する画像センサ1の識別記号を付加した起動信号を主制御手段802に出力する。主制御手段802は、通信制御手段801を介して威嚇起動手段805からの識別記号を付加した起動信号を監視装置2に送信する。   If the activation operation means display flag is ON, the display control means 810 brings the activation operation means 832 (FIG. 3) into an operable state. When the activation operation unit 832 (FIG. 3) is operated by the monitor, the threatening activation unit 805 stores whether or not the smoke generation device 3 corresponding to the image sensor 1 that is the transmission source of the display image exists. The activation signal added with the identification symbol of the corresponding image sensor 1 is output to the main control means 802. The main control unit 802 transmits an activation signal added with an identification symbol from the threatening activation unit 805 to the monitoring device 2 via the communication control unit 801.

図3に、起動操作手段832を表示部811上に表示した表示画面820を例示する。表示画面820の左側には、監視物件となる建物やテナントなどの名称、発生した異常状態の種別、侵入者を検出した画像センサ1が設置されている監視領域の名称、異常発生時刻等が表示される情報表示部821が設けられている。中央部上段には監視装置2から受信した蓄積画像を表示する蓄積画像表示枠822と、その上部に蓄積画像に関する情報を表示する蓄積画像情報表示枠823が設けられている。蓄積画像情報表示枠823には、表示された蓄積画像の監視領域の名称等の情報が表示される。中央部下段には、監視装置2から受信した最新画像表示枠824が設けられ、その上部には蓄積画像の場合と同様に、表示されている最新画像の最新画像情報表示枠825が設けられている。   FIG. 3 illustrates a display screen 820 in which the activation operation unit 832 is displayed on the display unit 811. On the left side of the display screen 820, the name of the building or tenant to be monitored, the type of the abnormal state that has occurred, the name of the monitoring area in which the image sensor 1 that has detected the intruder is installed, the time of occurrence of the abnormality, etc. are displayed. An information display unit 821 is provided. An accumulated image display frame 822 for displaying an accumulated image received from the monitoring device 2 and an accumulated image information display frame 823 for displaying information related to the accumulated image are provided in the upper part of the central portion. In the accumulated image information display frame 823, information such as the name of the monitoring area of the displayed accumulated image is displayed. The latest image display frame 824 received from the monitoring device 2 is provided in the lower part of the center, and the latest image information display frame 825 of the latest image being displayed is provided in the upper part as in the case of the stored image. Yes.

図3中のその他の表示は、すべて操作部である。右端の中央部には監視装置2に対して最新画像を要求する最新画像要求ボタン831が設けられている。このボタンを操作することにより、表示中の蓄積画像を送信した画像センサ1に対して最新画像の送出を要求する制御信号を監視装置2へ送信することができる。その下側には発煙装置3を起動するときに監視員が操作する起動操作手段832が設けられている。これを操作することにより、最新画像を送出している画像センサ1に対応する威嚇装置3が起動される。   The other displays in FIG. 3 are all operation units. A latest image request button 831 for requesting the latest image from the monitoring device 2 is provided at the center of the right end. By operating this button, it is possible to transmit to the monitoring device 2 a control signal that requests the image sensor 1 that has transmitted the stored image being displayed to send the latest image. Below that, there is provided an activation operation means 832 operated by a supervisor when the smoke generating device 3 is activated. By operating this, the threatening device 3 corresponding to the image sensor 1 sending the latest image is activated.

中央最下段の4つの操作部の内左右の2つは、監視員によって操作されるたびに、表示制御部810が、予め設定された順番で画像センサ1に最新画像の送出を要求し、最新画像表示枠824に表示する手動送りボタン833a、833bであり、それぞれ順送りと逆送りが選択できる。自動送りボタン834を操作すると、所定時間おきに各画像センサ1を自動的に順次切り替えながら、最新画像の送出を要求し、受信した最新画像を最新画像表示枠824に表示する。自動送り中に再度自動送りボタンを834を操作すると、自動送りは停止される。なお、自動送り中には、次に説明する分割ボタン835は、機能しない。   The left and right two of the four operation units at the lowermost center are each displayed by the display control unit 810 requesting the image sensor 1 to send the latest image in a preset order each time the monitor operates. Manual feed buttons 833a and 833b to be displayed in the image display frame 824, and forward feed and reverse feed can be selected, respectively. When the automatic feed button 834 is operated, the image sensor 1 is requested to send the latest image while automatically switching the image sensors 1 every predetermined time, and the received latest image is displayed in the latest image display frame 824. If the automatic feed button 834 is operated again during automatic feed, the automatic feed is stopped. Note that the split button 835 described below does not function during automatic feeding.

分割ボタン835を押下すると、最新画像表示枠824を4分割して、分割された領域に複数の画像センサの最新画像を表示する。監視センタ装置8から監視装置2に分割要求信号を送信することにより、監視装置2が分割された領域に割り当てられた画像センサ1に対して所定の時間おきに最新画像の送信を要求する。画像センサ1からの最新画像は、監視装置2を介して監視センタ装置8に送信されて、各分割領域に表示される。分割表示中に再度分割ボタン835を操作すると、分割表示は停止される。また、分割表示中には、自動送りボタン834は操作できないようになる。監視物件に画像センサ1が5個以上設置されている場合には、分割表示中に手動送りボタン833a、833bが操作されると、現在表示していない画像センサ1の最新画像が4分割表示される。また、分割表示画面も操作部となっており、分割表示中に分割された最新画像を選択すると、選択された最新画像が最新画像表示枠824に全面表示される。   When the division button 835 is pressed, the latest image display frame 824 is divided into four, and the latest images of a plurality of image sensors are displayed in the divided areas. By transmitting a division request signal from the monitoring center device 8 to the monitoring device 2, the monitoring device 2 requests the image sensor 1 assigned to the divided area to transmit the latest image every predetermined time. The latest image from the image sensor 1 is transmitted to the monitoring center device 8 via the monitoring device 2 and displayed in each divided area. When the split button 835 is operated again during the split display, the split display is stopped. Further, the automatic feed button 834 cannot be operated during the split display. When five or more image sensors 1 are installed in the monitored property, if the manual feed buttons 833a and 833b are operated during the divided display, the latest image of the image sensor 1 not currently displayed is displayed in four divided displays. The The split display screen is also an operation unit. When the latest image divided during the split display is selected, the selected latest image is displayed on the entire screen in the latest image display frame 824.

モニタ終了ボタン836は、最新画像表示枠824に表示されている最新画像を出力している画像センサ1に対して、最新画像の送出を停止させる信号を監視装置2に送信するための操作部である。これにより、最新画像の送信は停止される。   The monitor end button 836 is an operation unit for transmitting to the monitoring device 2 a signal for stopping the sending of the latest image to the image sensor 1 outputting the latest image displayed in the latest image display frame 824. is there. Thereby, the transmission of the latest image is stopped.

起動操作手段832を操作可能状態にするか否かを示す起動操作手段表示フラグは、(1)最新画像が表示されていること、(2)分割表示されていないこと、(3)自動送りモードでないこと、(4)画像の切換え処理中でないこと、(5)画像センサ1に対応する発煙装置3が存在することを条件に、威嚇起動手段805によって操作可能状態とするON状態に制御される。(1)の条件を満足することにより、監視員が最新画像を確認することが義務付けられることになり、(2)、(3)、(4)及び(5)の条件により表示画像の送信源である画像センサ1と発煙装置3との対応関係を確実なものとし、起動操作されたときに監視員が確認した最新画像を送信している画像センサ1に対応する発煙装置3を誤りなくかつ迅速に起動させることが可能となる。   The activation operation means display flag indicating whether or not to activate the activation operation means 832 is (1) that the latest image is displayed, (2) that it is not dividedly displayed, and (3) automatic feed mode. It is controlled by the threatening activation means 805 to be in an ON state on condition that (4) the image switching process is not being performed, and (5) the smoke generation device 3 corresponding to the image sensor 1 exists. . When the condition (1) is satisfied, the monitor is obliged to confirm the latest image, and the transmission source of the display image is satisfied according to the conditions (2), (3), (4), and (5). And the smoke generating device 3 corresponding to the image sensor 1 transmitting the latest image confirmed by the monitoring person when the activation operation is performed can be ensured. It is possible to start up quickly.

操作可能状態とは、監視員が起動操作手段832を操作すれば、対応する発煙装置3を起動できることを把握できる状態である。監視員に把握させる方法としては、表示、音声、振動等がある。起動操作手段832が操作可能状態となる本実施例の態様としては、起動操作手段832が非表示の状態から表示の状態に変わるように構成するか、または、非活性表示から活性化するように構成する。これにより、起動操作手段832が表示または活性化されない限り、起動操作ができなくなる。また、監視員は、実際に操作しなくても発煙装置3が操作可能かどうかが一目でわかり、無駄な操作をなくことができる。威嚇起動手段805の判定に応じて、起動操作手段表示フラグが制御され、表示制御手段810はこれを参照して、起動操作手段832の表示を制御している。以下に、威嚇起動手段805による起動操作手段表示フラグの制御動作を説明する。   The operable state is a state in which it can be grasped that the corresponding smoke generating device 3 can be activated if the monitoring person operates the activation operation means 832. There are display, sound, vibration, and the like as a method for the monitor to grasp. As an aspect of the present embodiment in which the activation operation unit 832 becomes operable, the activation operation unit 832 is configured to change from the non-display state to the display state, or activated from the inactive display. Constitute. As a result, the activation operation cannot be performed unless the activation operation means 832 is displayed or activated. In addition, the supervisor can know at a glance whether or not the smoke generating device 3 can be operated without actually operating it, and can eliminate unnecessary operations. In response to the determination by the threatening activation means 805, the activation operation means display flag is controlled, and the display control means 810 refers to this to control the display of the activation operation means 832. Hereinafter, the control operation of the start operation means display flag by the threatening start means 805 will be described.

まず、動作説明に必要となる5種類のフラグについて説明する。フラグは、記憶手段807に記憶されている。
5種類のフラグは、(1)最新画像表示フラグ、(2)自動送り表示フラグ、(3)分割表示フラグ、(4)切換え処理中フラグ、(5)全体表示フラグである。
(1)最新画像表示フラグの制御
表示制御部810は、最新画像表示枠824に表示している表示画像に付加された画像特定情報を画像判定手段804に出力する。画像判定手段804は、画像特定情報が最新画像であると判定すれば、最新画像表示フラグをON制御し、そうでないと判定すれば、OFF制御する。
(2)自動送り表示フラグの制御
表示制御部810は、自動送りボタン834が操作され、自動送り表示となると、自動送り表示フラグをON制御する。再度、自動送りボタン834が操作され、自動送り表示が終了すると、自動送り表示フラグをOFF制御する。
(3)分割表示フラグの制御
表示制御部810は、分割ボタン835が操作され、自動送り表示となると、自動送り表示フラグをON制御する。再度、分割ボタン835が操作され、自動送り表示が終了すると、分割表示フラグをOFF制御する。
(4)切換え処理中フラグの制御
表示制御部810は、最新画像表示枠824に表示している表示画像の切換え処理が開始されるとON制御し、切換え処理が終了するとOFF制御する。
(5)全体表示フラグの制御
表示制御部810は、上記(2)自動送り表示フラグ、(3)分割表示フラグ、(4)切換え処理中フラグがすべてOFFとなるとON制御し、どれか一つでもONとなると、OFF制御する。
First, five types of flags necessary for the operation description will be described. The flag is stored in the storage unit 807.
The five types of flags are (1) latest image display flag, (2) automatic feed display flag, (3) split display flag, (4) switching process flag, and (5) whole display flag.
(1) Control of Latest Image Display Flag The display control unit 810 outputs image specifying information added to the display image displayed in the latest image display frame 824 to the image determination unit 804. If it is determined that the image specifying information is the latest image, the image determination unit 804 performs an ON control on the latest image display flag, and if not, performs an OFF control.
(2) Control of automatic feed display flag When the automatic feed button 834 is operated and the automatic feed display is displayed, the display control unit 810 controls the automatic feed display flag to be ON. When the automatic feed button 834 is operated again and the automatic feed display ends, the automatic feed display flag is controlled to be OFF.
(3) Control of split display flag When the split button 835 is operated and the automatic feed display is displayed, the display control unit 810 controls the automatic feed display flag to be ON. When the division button 835 is operated again and the automatic feed display ends, the division display flag is controlled to be OFF.
(4) Control of switching process flag The display control unit 810 performs ON control when the switching process of the display image displayed in the latest image display frame 824 is started, and performs OFF control when the switching process is completed.
(5) Control of entire display flag The display control unit 810 controls ON when the above (2) automatic feed display flag, (3) split display flag, and (4) switching process flag are all OFF. However, when it is turned on, it is turned off.

図4に沿って動作手順を説明する。まず、最新画像表示フラグがONかどうか確認され(S101)、次に全体表示フラグがONであるかどうかが確認される(S102)。全体表示フラグは、前述の通り自動送りフラグ、分割表示フラグ、切換え処理中フラグがすべてOFFのときに、ONとなる。すなわち、自動送りでもなく、分割表示でもなく、切換え処理中でもないときにON(S102;Yes)となる。次に、画像センサ1に対応する発煙装置3が存在するかどうかが確認される(S103)。これらがすべてYesである場合には、起動操作手段表示フラグをONにする(S104)。なお、この起動操作手段表示フラグがONになると、表示制御部810により起動操作手段832が表示される。   The operation procedure will be described with reference to FIG. First, it is confirmed whether or not the latest image display flag is ON (S101), and then it is confirmed whether or not the entire display flag is ON (S102). As described above, the entire display flag is ON when the automatic feed flag, the split display flag, and the switching process flag are all OFF. That is, it is ON (S102; Yes) when it is not automatic feeding, divided display, or switching processing. Next, it is confirmed whether or not the smoke generation device 3 corresponding to the image sensor 1 exists (S103). If these are all Yes, the activation operation means display flag is turned ON (S104). When the activation operation means display flag is turned ON, the activation operation means 832 is displayed by the display control unit 810.

最新画像フラグがOFF(S101;No)、全体表示フラグがOFF(S102;No)、または対応する発煙装置3がない場合(S103;No)、起動操作手段表示フラグがONかどうかが確認され(S105)、ONのときには(S105;Yes)、起動操作手段表示フラグがOFFにされ(S106)、OFFのときには(S105;No),工程S101に戻り同様の確認を繰り返す。なお、工程S106にて、起動操作手段表示フラグがOFFになると、表示制御部810により、起動操作手段832が表示されなくなる。なお、本実施例の表示制御部810は、表示状態単位手手段を含んでいる。   When the latest image flag is OFF (S101; No), the entire display flag is OFF (S102; No), or there is no corresponding smoke generation device 3 (S103; No), it is confirmed whether the start operation means display flag is ON ( When it is ON (S105; Yes), the activation operation means display flag is turned OFF (S106). When it is OFF (S105; No), the process returns to Step S101 and the same confirmation is repeated. Note that when the activation operation means display flag is turned OFF in step S106, the activation operation means 832 is not displayed by the display control unit 810. Note that the display control unit 810 of this embodiment includes display state unit manual means.

以上の説明において、起動操作手段832は、タッチパネル機能を備えた表示部811内に設ける構成としたが、表示部811内に設けなくてもよく、単独のスイッチまたは押しボタン等であってもよい。単独のボタン等であれば、監視員は起動操作を誤ることがないからである。   In the above description, the activation operation unit 832 is provided in the display unit 811 having a touch panel function. However, the activation operation unit 832 may not be provided in the display unit 811 but may be a single switch or a push button. . This is because, with a single button or the like, the supervisor will not make a mistake in the starting operation.

(画像センサ)
次に、図5乃至図7を用いて、画像センサ1について説明する。図5は、本発明の遠隔監視装置(監視センタ装置)に使用することができる画像センサ1の一例を示す機能ブロック図である。図6は、侵入判定処理手順の一例を示すフローチャートである。図7は、監視装置2との通信動作処理手順の一例を示すフローチャートである。以下の説明において、最良の実施形態として、画像センサ1が人の存在可能性の確度を複数のレベルで検出する例を説明するが、本発明においては、複数段階のレベルで人の侵入を検出する必要はなく、画像センサ1が侵入者を検出可能であればよい。また、本実施例においては、画像センサ1を撮像装置として使用しているが、画像処理により侵入者を検出する画像センサでなくてもよい。例えば、監視カメラと赤外線センサを組み合わせたものでもよい。
(Image sensor)
Next, the image sensor 1 will be described with reference to FIGS. FIG. 5 is a functional block diagram showing an example of the image sensor 1 that can be used in the remote monitoring device (monitoring center device) of the present invention. FIG. 6 is a flowchart illustrating an example of an intrusion determination processing procedure. FIG. 7 is a flowchart illustrating an example of a communication operation processing procedure with the monitoring device 2. In the following description, an example will be described in which the image sensor 1 detects the probability of human existence at a plurality of levels as the best embodiment. In the present invention, human intrusion is detected at a plurality of levels. There is no need to do so, as long as the image sensor 1 can detect an intruder. In the present embodiment, the image sensor 1 is used as an imaging device. However, the image sensor 1 may not be an image sensor that detects an intruder by image processing. For example, a combination of a surveillance camera and an infrared sensor may be used.

画像センサ1は、画像センサ全体を制御する制御手段100、撮像制御手段101、監視対象を撮像するCCD、CMOS(CIS)等からなる撮像部103、撮像範囲を照明する照明部102、撮像した画像から侵入者を検出するための基礎データを抽出する画像解析部104、抽出された基礎データから侵入者の存在の確度を複数段階に判定する侵入判定手段109、撮像した画像を一時記憶する画像データ蓄積手段110、画像を出力する画像データ出力手段111、及び監視装置2とのデータ通信を行う接続I/F(インタフェース)112とを備えている。   The image sensor 1 includes a control unit 100 that controls the entire image sensor, an imaging control unit 101, an imaging unit 103 that includes a CCD, a CMOS (CIS), and the like that images a monitoring target, an illumination unit 102 that illuminates an imaging range, and a captured image. Image analysis unit 104 that extracts basic data for detecting an intruder from the image, intrusion determination means 109 that determines the accuracy of the presence of the intruder in multiple stages from the extracted basic data, and image data that temporarily stores the captured image The storage unit 110 includes an image data output unit 111 that outputs an image, and a connection I / F (interface) 112 that performs data communication with the monitoring device 2.

制御手段100は、画像センサ1の各部及び全体を制御する。撮像制御手段101は、制御手段100の制御の下、照明部102及び撮像部103を制御する。撮像部103は、撮像制御手段101の制御の下、定期的に監視領域を撮像し、撮像した画像を画像データ蓄積部110一時的に蓄積する。画像データ蓄積部110は、リング構造のバッファからなり、所定の枚数の画像(例えば10枚程度)を記憶し、古い画像を順次新しい画像に置き換えて循環記憶可能である。監視装置2が解除モードに設定されている場合、または監視モードに設定されていても侵入検出していない正常時には、このように循環記憶することにより、最新画像に更新しながら所定枚数を記憶している。また、撮像部103が撮像した画像は、最新画像の要求があれば画像データ出力手段111に並行出力されることもある。   The control unit 100 controls each part and the whole of the image sensor 1. The imaging control unit 101 controls the illumination unit 102 and the imaging unit 103 under the control of the control unit 100. The imaging unit 103 periodically images the monitoring area under the control of the imaging control unit 101, and temporarily accumulates the captured images in the image data storage unit 110. The image data storage unit 110 includes a ring-structured buffer, stores a predetermined number of images (for example, about 10 images), and can circularly store old images by sequentially replacing them with new images. When the monitoring device 2 is set to the release mode, or when the monitoring device 2 is set to the monitoring mode and the intrusion is not detected normally, the predetermined number of images is stored while being updated to the latest image by cyclically storing in this way. ing. Further, the image captured by the image capturing unit 103 may be output in parallel to the image data output unit 111 if there is a request for the latest image.

更に、撮像部103が撮像した画像は、画像解析部104にも入力される。画像解析部104は、背景画像記憶手段105、差分抽出手段106、トラッキング手段107、及び画像属性算出手段108を備えており、撮像した最新画像と背景画像とを比較することで移動物体の存在を検出し、さらに移動物体の検出領域における画像の持つ人属性、小動物属性、光属性、影属性等の属性を算出する。   Further, the image captured by the imaging unit 103 is also input to the image analysis unit 104. The image analysis unit 104 includes a background image storage unit 105, a difference extraction unit 106, a tracking unit 107, and an image attribute calculation unit 108, and the presence of a moving object is detected by comparing the latest captured image with the background image. Detection is performed, and attributes such as a human attribute, a small animal attribute, a light attribute, and a shadow attribute of the image in the detection area of the moving object are calculated.

画像解析部104の背景画像記憶手段105には、撮像領域の背景画像(侵入者等の移動物体が存在していないときの画像)が予め記憶されている。差分抽出手段106は、撮像部103で得られた入力画像と背景画像記憶手段105に記憶されている背景画像との差分処理を行い、変化のある差分領域を抽出する。トラッキング手段107は差分抽出手段106で得られた差分領域が前フレームでの差分領域と同じ物体によるものであると判定すれば、今回の差分領域に前回までの追跡情報を付与する。同じ物体であるとの判定は、例えば、重心の移動量と差分領域の大きさの変化が一定範囲内である等の条件を用いることにより行う。   The background image storage unit 105 of the image analysis unit 104 stores in advance a background image of the imaging region (an image when there is no moving object such as an intruder). The difference extraction unit 106 performs a difference process between the input image obtained by the imaging unit 103 and the background image stored in the background image storage unit 105, and extracts a difference area having a change. If the tracking means 107 determines that the difference area obtained by the difference extraction means 106 is due to the same object as the difference area in the previous frame, the tracking means 107 gives the previous tracking information to the current difference area. The determination that they are the same object is performed, for example, by using a condition that the amount of movement of the center of gravity and the change in the size of the difference area are within a certain range.

画像属性算出手段108は、例えば、人属性算出手段113、小動物属性算出手段114、光属性算出手段115、影属性算出手段116等を備えており、それぞれの属性を算出する。これ以外にも、人の侵入かどうかの判定精度を向上させることのできる他の種類の属性算出手段を用いることも可能である。人属性算出手段113は、差分抽出手段106で得られた差分領域が人である場合に高い値となる「人属性値」を算出する。人属性値は、人らしさを表す特徴量、例えば、差分領域の大きさ、背景画像との正規化関数(背景画像と入力画像との一致度)、背景画像と比較した場合のエッジの変化率等から算出される。   The image attribute calculation unit 108 includes, for example, a human attribute calculation unit 113, a small animal attribute calculation unit 114, a light attribute calculation unit 115, a shadow attribute calculation unit 116, and the like, and calculates each attribute. In addition to this, it is also possible to use other types of attribute calculation means that can improve the accuracy of determining whether or not a person has entered. The human attribute calculation unit 113 calculates a “human attribute value” that is a high value when the difference area obtained by the difference extraction unit 106 is a person. The human attribute value is a feature amount representing humanity, for example, the size of the difference area, a normalization function with the background image (the degree of coincidence between the background image and the input image), and the edge change rate when compared with the background image Etc.

小動物属性算出手段114は、差分領域が小動物である場合に高い値となる「小動物属性値」を算出する。小動物属性値は、小動物らしさを表す特徴量、例えば、差分領域の大きさ、移動方向と長軸の一致度、背景画像と比較した場合のエッジの変化率から算出される。   The small animal attribute calculation means 114 calculates a “small animal attribute value” that is high when the difference area is a small animal. The small animal attribute value is calculated from a feature amount representing the small animal character, for example, the size of the difference area, the degree of coincidence between the moving direction and the long axis, and the edge change rate when compared with the background image.

光属性算出手段115は、差分領域が光である場合に高い値となる「光属性値」を算出する。光属性値は、光らしさを表す特徴量、例えば、無照明画像での差分領域の平均輝度値、背景画像との正規化相関、背景画像と比較した場合にエッジの変化率、から算出される。   The light attribute calculation unit 115 calculates a “light attribute value” that is a high value when the difference region is light. The light attribute value is calculated from a feature amount representing the lightness, for example, an average luminance value of the difference area in the non-illuminated image, a normalized correlation with the background image, and a rate of change of the edge when compared with the background image. .

影属性算出手段116は、差分領域が影である場合に高い値となる「影属性値」を算出する。影属性値は、影らしさを表す特徴量、例えば、無照明画像での差分領域の平均輝度値、背景画像との正規化相関、背景画像と比較した場合のエッジの変化率から算出される。   The shadow attribute calculation unit 116 calculates a “shadow attribute value” that is high when the difference area is a shadow. The shadow attribute value is calculated from a feature amount representing the likelihood of shadow, for example, the average luminance value of the difference area in the non-illuminated image, the normalized correlation with the background image, and the edge change rate when compared with the background image.

侵入判定手段109は、差分領域で得られた変化のあった差分領域を、人属性値と光属性値、影属性値、小動物属性値を用いて、人であるかどうかの判定をする。人属性値が高く、光、影、小動物属性値が低いときに、「人」と判定する。閾値は3段階に設定されており、差分領域が侵入者に起因するものであるかどうかの確度を3段階のレベルで判定する。例えば、画像の解析により差分領域が侵入者に起因する可能性が十分にあるが確度が低い「人検出」レベルと判定したときに最下位の第1レベル侵入検出信号を出力し、「人検出」のレベルより確度が高い「侵入者検出」レベルと判定したときにその上位レベルの第2レベル侵入検出信号を出力し、「侵入者検出」レベルよりさらに高い確度であって侵入者であることがほぼ確実である「侵入者確定」レベルと判定したときにその上位レベルの第3レベル侵入検出信号を出力する。これらの侵入検出信号は、接続インタフェース112を介して、監視装置2に対してフラグ情報またはコード化されたデジタル情報として送信する。   The intrusion determination unit 109 determines whether the difference area obtained in the difference area is a person using the human attribute value, the light attribute value, the shadow attribute value, and the small animal attribute value. When the human attribute value is high and the light, shadow, and small animal attribute values are low, it is determined as “person”. The threshold value is set in three stages, and the accuracy of whether or not the difference area is caused by an intruder is determined at three levels. For example, the lowest level first person intrusion detection signal is output when it is determined by the analysis of the image that the difference area is sufficiently likely to be caused by an intruder but the accuracy is low. When the intruder detection level is determined to be higher than the “intruder detection” level, the second level intrusion detection signal of the higher level is output, and the intruder has higher accuracy than the “intruder detection” level. Is determined to be the “intruder confirmation” level, which is almost certain, the third level intrusion detection signal of the higher level is output. These intrusion detection signals are transmitted as flag information or coded digital information to the monitoring device 2 via the connection interface 112.

このような判定を行うための各属性値の算出方法及びの判定閾値は、監視領域の地形、背景、天然光及び人工光と影の関係などの監視対象の環境に応じて、自由に設定することができるが、環境に応じた実験データから最適値を確定することが望ましい。例えば、様々な環境(屋内、屋外、天気、昼、夜等の環境)において、人を移動させたり誤報要因を出現させたりする実験またはシミュレーションを繰り返し、実験データまたはシミュレーションデータを集積して解析することにより、より精度の高い属性値の特徴及び閾値情報を得ることが可能となる。   The calculation method of each attribute value and the determination threshold value for performing such determination are freely set according to the monitoring target environment such as the topography of the monitoring area, the background, the relationship between natural light, artificial light, and shadows. However, it is desirable to determine an optimum value from experimental data according to the environment. For example, in various environments (indoor, outdoor, weather, daytime, night, etc.), experiments or simulations that move people or cause false alarms are repeated, and experimental data or simulation data is accumulated and analyzed. This makes it possible to obtain more accurate attribute value features and threshold information.

判定結果である侵入検出信号は、制御手段100からの消去要求があるまで、侵入判定手段109内に保持される。最新の画像に基づいて、より高レベルの判定が出た場合には、旧判定結果は、高レベルの段階の判定結果に置き換えられるように構成している。制御部100は、撮像した画像データ中に侵入者を検出しなくなったとき、侵入判定手段109内に保持している判定結果である侵入検出信号を消去する。   The intrusion detection signal as the determination result is held in the intrusion determination unit 109 until an erasure request is received from the control unit 100. When a higher level determination is made based on the latest image, the old determination result is configured to be replaced with a determination result at a higher level. When the intruder is no longer detected in the captured image data, the control unit 100 erases the intrusion detection signal that is the determination result held in the intrusion determination unit 109.

侵入判定手段109により「人検出」、「侵入者検出」または「侵入者確定」と判定され、かつ、監視モードになっていれば、制御手段100の制御により、画像データ蓄積手段110に蓄積する画像を、判定直前の連続する数枚の画像と、直後の数枚の画像を記憶し保持する。例えば、画像データ蓄積手段110が10枚の画像を保持可能だとすると、判定時を含む直前3枚の画像と、直後の7枚の画像を記憶し、この画像を監視装置203から削除要求を受けるまで保持する。   If it is determined by the intrusion determination means 109 that “human detection”, “intruder detection” or “intruder confirmation” is in the monitoring mode, the image data storage means 110 stores the image data under the control of the control means 100. The image stores and holds several consecutive images immediately before the determination and several images immediately after the determination. For example, assuming that the image data storage unit 110 can hold 10 images, the immediately preceding 3 images including the determination time and the immediately following 7 images are stored, and this image is received until a deletion request is received from the monitoring device 203. Hold.

画像データ出力手段111は、監視装置2からの要求に基づいて、画像データ蓄積手段110に記憶している蓄積画像、または撮像部103により撮像した最新画像を、画像特定情報及び識別記号を付加して接続インタフェース112を介して送信する。これらの画像は監視装置2により監視センタ装置8に送信され、監視センタの監視員による侵入状況の確認に使用される。   The image data output unit 111 adds image specifying information and an identification symbol to the accumulated image stored in the image data accumulation unit 110 or the latest image captured by the imaging unit 103 based on a request from the monitoring device 2. And transmitted via the connection interface 112. These images are transmitted to the monitoring center device 8 by the monitoring device 2 and used for confirming the intrusion status by the monitoring center monitor.

次に、画像センサ1による判定処理手順を、図6のフローチャートを用いて説明する。画像センサ1では、人属性値と平行して、人以外の属性値(光、影、小動物)を算出し、人属性値が高く、かつ、人以外の属性値が低い場合には、人と判断する。そして、変化領域が人である確度を3段階(侵入者確定>侵入者検出>人検出)のレベルで判定する。なお、「人検出」よりも確度が低い場合は、「人以外」との判定となる。   Next, the determination processing procedure by the image sensor 1 will be described using the flowchart of FIG. The image sensor 1 calculates attribute values (light, shadow, small animal) other than a person in parallel with the person attribute value, and when the person attribute value is high and the attribute value other than the person is low, to decide. Then, the probability that the change area is a person is determined at three levels (intruder confirmation> intruder detection> person detection). If the accuracy is lower than “human detection”, the determination is “other than human”.

まず、撮像制御手段101は、照明部102及び撮像部103を制御し、照明を点灯させたときの照明画像と、照明を消灯したときの無照明画像を取得する(S201、S202)。   First, the imaging control unit 101 controls the illumination unit 102 and the imaging unit 103 to acquire an illumination image when the illumination is turned on and an unilluminated image when the illumination is turned off (S201, S202).

取得された入力画像と背景画像記憶手段105に記憶されている背景画像との差分処理を行い、その輝度差分値が所定の閾値以上である画素を結合した差分領域を抽出する(S203)。抽出された差分領域が、トラッキング手段107により、前フレームの差分領域と同じ移動物体によるものであると判定されれば、今回の差分領域に前回までの差分領域情報(追跡情報)を付与する(S204)。同じ移動物体によるものであるかどうかは、重心の移動量と差分領域の大きさの変化が一定の範囲内であるかどうか等の条件により判定する。   Difference processing between the acquired input image and the background image stored in the background image storage unit 105 is performed, and a difference region obtained by combining pixels whose luminance difference values are equal to or greater than a predetermined threshold is extracted (S203). If the tracking unit 107 determines that the extracted difference area is the same moving object as the difference area of the previous frame, the difference area information (tracking information) up to the previous time is added to the current difference area ( S204). Whether it is due to the same moving object is determined based on conditions such as whether the amount of movement of the center of gravity and the change in the size of the difference area are within a certain range.

これらの前処理が終わると、差分領域の属性算出処理が行われる(S205)。属性算出処理では、種々の属性が算出される。この実施形態では、人属性、小動物属性、光属性、影属性を算出する例を示す。各属性値が算出されると、それらの属性値に基づいて、人の侵入かどうかの判定が行われる(S206)。各属性値を算出する方法、及び人の侵入の判定方法の具体例について、以下に説明する。   When these pre-processes are completed, a difference area attribute calculation process is performed (S205). In the attribute calculation process, various attributes are calculated. In this embodiment, an example of calculating a human attribute, a small animal attribute, a light attribute, and a shadow attribute is shown. When each attribute value is calculated, it is determined whether or not a person has entered based on those attribute values (S206). A specific example of a method for calculating each attribute value and a method for determining a human intrusion will be described below.

(各属性値の算出方法の例示)
差分領域の人属性は、次の(1)〜(3)のような特徴量に重み付けをして、その総和を求めることにより算出する。
(1)差分領域の大きさ(T1)が、一定の範囲であると、人である可能性が高い
(2)差分領域における入力画像と背景画像の類似度が低いと、人の可能性が高い
(3)差分領域における背景画像と比較した入力画像のエッジの変化率が高いと、人の可能性が高い。
これらの特徴量は、人である可能性が高いほど1に近づき、低いほど0に近づくように正規化される。正規化後のこれらの特徴量をa1、a2、a3とし、それぞれの特徴量に対する重み付けをb1、b2、b3として、人属性値を次の式により求める。
・人属性値=a1×b1+a2×b2+a3×b3 但し、b1+b2+b3=1
(Example of how to calculate each attribute value)
The human attribute of the difference area is calculated by weighting the feature amounts as in the following (1) to (3) and obtaining the sum.
(1) If the difference area size (T1) is within a certain range, the possibility of being a person is high. (2) If the similarity between the input image and the background image in the difference area is low, the possibility of a person is high. High (3) If the rate of change of the edge of the input image compared to the background image in the difference area is high, the possibility of a person is high.
These feature values are normalized so as to approach 1 when the possibility of being a person is high and to approach 0 as it is low. The normalized feature values are a1, a2, and a3, the weights for the feature amounts are b1, b2, and b3, and the human attribute value is obtained by the following equation.
Human attribute value = a1 × b1 + a2 × b2 + a3 × b3 where b1 + b2 + b3 = 1

小動物属性は、例えば、以下の(4)〜(6)の特徴量に重み付けをして、その総和を求めることにより算出する。
(4)差分領域の面積が小さいと、小動物である可能性が高い
(5)差分領域の長軸の傾きと移動方向の一致度合いが高いと、小動物の可能性が高い
(6)差分領域における背景画像と比較した入力画像のエッジの変化率が高いと、小動物である可能性が高い
このような特徴量から小動物属性値を算出する方法は、人属性値を算出する方法と同様の方法を用いる。但し、これらの特徴量に対する重み付けその他の条件は、環境に応じて、実験等を通じて確定する。
The small animal attributes are calculated, for example, by weighting the following features (4) to (6) and calculating the sum.
(4) When the area of the difference area is small, the possibility of being a small animal is high (5) When the degree of coincidence between the inclination of the major axis of the difference area and the moving direction is high, the possibility of a small animal is high (6) In the difference area If the rate of change of the edge of the input image compared to the background image is high, the method of calculating the small animal attribute value from such a feature amount that is likely to be a small animal is the same method as the method of calculating the human attribute value. Use. However, weighting and other conditions for these feature quantities are determined through experiments or the like according to the environment.

光属性値は、例えば、以下の(7)〜(9)の特徴量に重み付けをして、その総和を求めることにより算出する。
(7)無照明画像での差分領域の平均輝度が高いと、光の可能性が高い
(8)差分領域の入力画像と背景画像の類似度が高いと、光の可能性が高い
(9)差分領域の背景画像と比較した入力画像のエッジの変化率が低いと、光の可能性が高い
このような特徴量から光属性値を算出する方法は、人属性値を算出する方法と同様の方法を用いる。但し、これらの特徴量に対する重み付けその他の条件は、環境に応じて、実験等を通じて確定する。
The light attribute value is calculated, for example, by weighting the following feature amounts (7) to (9) and obtaining the sum.
(7) If the average brightness of the difference area in the unilluminated image is high, the possibility of light is high. (8) If the input image of the difference area and the background image are high, the possibility of light is high (9). When the rate of change of the edge of the input image compared with the background image of the difference area is low, the method of calculating the light attribute value from such a feature amount having a high possibility of light is the same as the method of calculating the human attribute value. Use the method. However, weighting and other conditions for these feature quantities are determined through experiments or the like according to the environment.

影属性値は、例えば、(10)〜(12)の特徴量に重み付けをして、その総和を求めることにより算出する。
(10)無照明画像での差分領域の平均輝度値が低いと、影である可能性が高い
(11)差分領域での入力画像と背景画像の類似度が高いと、影である可能性が高い
(12)差分領域の背景画像と比較した入力画像のエッジの変化率が低いと、影の可能性が高い
このような特徴量から影属性値を算出する方法は、人属性値を算出する方法と同様の方法を用いる。但し、これらの特徴量に対する重み付けその他の条件は、環境に応じて、実験等を通じて確定する。
The shadow attribute value is calculated, for example, by weighting the feature quantities (10) to (12) and obtaining the sum.
(10) If the average luminance value of the difference area in the non-illuminated image is low, there is a high possibility of being a shadow. (11) If the similarity between the input image and the background image in the difference area is high, it may be a shadow. A method of calculating a shadow attribute value from such a feature amount having a high possibility of a shadow when the edge change rate of the input image compared with the background image of the high (12) difference area is low calculates a human attribute value. A method similar to the method is used. However, weighting and other conditions for these feature quantities are determined through experiments or the like according to the environment.

(「人の侵入」の判定方法の例示)
上述の方法により算出した各種属性値を用いて差分領域が「人の侵入」であるかどうか
の判定を行う。この判定は、「人の侵入」である場合を3段階のレベルに分けて判定する。人属性値を判定するための閾値X1、X2、X3と、他の属性値(例えば光、影、小動物属性値)を判定するための閾値Y1、Y2、Y3を用いて、「人の侵入」を判定する。これらの閾値は画像センサ1の侵入判定手段109に記憶されている。また、閾値相互はX1<X2<X3、Y1<Y2<Y3の関係を有する。
(Example of determination method for “intrusion of people”)
It is determined whether or not the difference area is “human intrusion” using the various attribute values calculated by the above-described method. This determination is made by dividing the case of “human intrusion” into three levels. Using the threshold values X1, X2, and X3 for determining human attribute values and the threshold values Y1, Y2, and Y3 for determining other attribute values (for example, light, shadow, and small animal attribute values), Determine. These threshold values are stored in the intrusion determination means 109 of the image sensor 1. The threshold values have a relationship of X1 <X2 <X3 and Y1 <Y2 <Y3.

尚、上述の閾値(X1〜X3、Y1〜Y3)は、監視対象として想定される様々な環境において人を移動させて収集した多数の画像解析データ、及び検出実験により得た誤報データ等に基づいて、人の侵人の確率を統計的に算出して求めることができる。また、トラッキングによって追跡した差分領域の過去の情報に基づき、人属性値、光属性値、影属性値、小動物属性値の過去分を累積して、累積した属性値を用いて人の侵入可能性の判定を行ってもよい。   Note that the above threshold values (X1 to X3, Y1 to Y3) are based on a large number of image analysis data collected by moving a person in various environments assumed as monitoring targets, misinformation data obtained by detection experiments, and the like. Thus, the probability of human invader can be calculated statistically. Also, based on the past information of the difference area tracked by tracking, the past values of human attribute value, light attribute value, shadow attribute value, small animal attribute value are accumulated, and the possibility of human intrusion using the accumulated attribute value The determination may be made.

図13を参照して「人の侵入」の確度を複数段階に判定する方法について説明する。図13は、人属性値と人以外の属性値との関係に基づく判定結果を示している。なお、人以外の属性値は、算出された「小動物属性値」「光属性値」「影属性値」の中で最大値を用いて判定する。
同図において、「A」は、人の侵入がないと判定するいわゆる「正常」の場合を示している。すなわち、人属性値がX1より小さい、又は、その他の属性値がY3より大きい場合に、侵入判定手段109が「正常」と判定する。
同図において、「B]は、人以外の要因の可能性も十分に残っており、人の侵入がないと断定できない場合であって、いわゆる「人検出」(第1レベルの侵入検出)の場合を示している。すなわち、人属性値がX1とX2の間、且つその他の属性値がY3より大きい場合または、人属性値がX1より大きく、且つその他の属性値がY2とY3の間である場合に、侵入判定手段109が「人検出」と判定する。
同図において、「C」は、人以外の要因の可能性が若干残っており、確実に人の侵入があると断定できない場合であって、いわゆる「侵入者検出」(第2レベルの侵入検出)の場合を示している。すなわち、人属性値がX2とX3の間、且つその他の属性値がY2より小さい場合または、人属性値がX3より大きく、且つその他の属性値がY1とY2の間である場合に侵入判定手段109が「侵入者検出」と判定する。
同図において、「D」は、確実に侵入者であると断定できる場合であって、いわゆる「侵入者確定」(第3レベルの侵入検出)の場合を示している。すなわち、人属性値がX3より大きく、且つその他の属性値がY1より小さい場合に侵入判定手段109が「侵入者確定」と判定する。
With reference to FIG. 13, a method for determining the accuracy of “person intrusion” in a plurality of stages will be described. FIG. 13 shows a determination result based on the relationship between the human attribute value and the non-human attribute value. The attribute values other than the person are determined using the maximum value among the calculated “small animal attribute value”, “light attribute value”, and “shadow attribute value”.
In the figure, “A” indicates a so-called “normal” case where it is determined that no person has entered. That is, when the human attribute value is smaller than X1 or other attribute values are larger than Y3, the intrusion determination unit 109 determines “normal”.
In the figure, “B” is a case where the possibility of factors other than humans still remains and cannot be determined without the intrusion of a person, so-called “human detection” (first level intrusion detection). Shows the case. That is, when the human attribute value is between X1 and X2 and the other attribute value is larger than Y3, or when the human attribute value is larger than X1 and the other attribute value is between Y2 and Y3, the intrusion determination The means 109 determines “person detection”.
In the figure, “C” is a case in which there is a slight possibility of a factor other than a person, and it cannot be determined that there is an intrusion of a person, and so-called “intruder detection” (second level intrusion detection). ). That is, intrusion determination means when the human attribute value is between X2 and X3 and the other attribute value is smaller than Y2, or when the human attribute value is larger than X3 and the other attribute value is between Y1 and Y2. 109 determines “intruder detection”.
In the figure, “D” indicates a case where it can be determined that the person is an intruder without fail, and so-called “intruder confirmation” (third level intrusion detection). That is, when the human attribute value is larger than X3 and the other attribute values are smaller than Y1, the intrusion determination unit 109 determines “intruder confirmation”.

図7を用いて、監視装置2からの要求に対する各画像センサ1の動作手順を説明する。画像センサ1は、監視装置2からの要求信号により、監視装置2へ要求に応じた情報を送信する。各画像センサ1は監視装置2の要求信号が自己宛の要求であるかどうかを確認して、自己宛の要求信号であると判断すると(S210;Yes)、受信した要求信号が蓄積画像(データ)の要求信号であるかを判定する(S211)。蓄積画像の要求信号であれば(S211;Yes)、画像データ出力手段111は、画像データ蓄積手段110に蓄積されている蓄積画像を監視装置2に送信する(S218)。そうでない場合(S211;No)は、工程S212に進む。工程S212では、受信した要求信号が最新画像(データ)の要求信号であるかを判定する。最新画像(データ)の要求信号である場合(S212;Yes)、画像データ出力手段111は、撮像部103により撮影した最新画像を、接続インタフェース112を介して監視装置2に送信する(S213)。   The operation procedure of each image sensor 1 in response to a request from the monitoring device 2 will be described with reference to FIG. The image sensor 1 transmits information corresponding to the request to the monitoring device 2 in response to a request signal from the monitoring device 2. When each image sensor 1 confirms whether the request signal of the monitoring device 2 is a request addressed to itself, and determines that the request signal is addressed to itself (S210; Yes), the received request signal is an accumulated image (data ) Is a request signal (S211). If it is a request signal for an accumulated image (S211; Yes), the image data output means 111 transmits the accumulated image accumulated in the image data accumulation means 110 to the monitoring device 2 (S218). Otherwise (S211; No), the process proceeds to step S212. In step S212, it is determined whether the received request signal is a request signal for the latest image (data). When the request signal is the latest image (data) (S212; Yes), the image data output unit 111 transmits the latest image captured by the imaging unit 103 to the monitoring device 2 via the connection interface 112 (S213).

最新画像の送信要求ではない場合(S212;No)、現状報告要求の信号であるかどうかが確認され(S214)、現状報告要求でない場合には(S214;No)、工程S219に進む。工程S219では、受信した要求信号に応じた処理を行う。例えば、蓄積画像の削除要求の場合は、画像データ蓄積手段110に保持された画像の保持を解除し、正常時の動作に戻す。あるいはモニタ終了信号又は送信停止コマンドを受信した場合は、最新画像の送信を停止する。現状報告要求の信号である場合には(S214;Yes)、侵入判定手段109が判定結果である侵入検出信号を保持しているかどうかを確認し(S215)、保持しているときには、保持している侵入検出信号を監視装置2に送信する(S216)。侵入検出信号を保持していない場合には(S215;No)、正常信号を監視装置2に送信する(S217)
なお、監視装置2からの現状報告の要求は、各画像センサ1を定期的にポーリングすることにより行われる。
If it is not the latest image transmission request (S212; No), it is confirmed whether it is a status report request signal (S214). If it is not the current report request (S214; No), the process proceeds to step S219. In step S219, processing according to the received request signal is performed. For example, in the case of a request for deleting the stored image, the holding of the image held in the image data storage unit 110 is released, and the normal operation is restored. Alternatively, when a monitor end signal or a transmission stop command is received, transmission of the latest image is stopped. If it is a status report request signal (S214; Yes), it is checked whether the intrusion determination means 109 holds an intrusion detection signal as a determination result (S215). The intrusion detection signal is transmitted to the monitoring device 2 (S216). When the intrusion detection signal is not held (S215; No), a normal signal is transmitted to the monitoring device 2 (S217).
Note that a request for a status report from the monitoring device 2 is made by periodically polling each image sensor 1.

(監視装置)
図8は、本発明の遠隔監視装置(監視センタ装置)に接続可能な監視装置2の機能ブロック図である。監視装置2全体を制御する主制御手段201、画像センサ1との接続インタフェースである画像センサインタフェース202(以下「画像センサI/F202」と称する)、画像センサ1からの侵入検出信号に基づいて、対応処理を選択する対応処理選択手段203、発煙装置3の起動を制御する設備制御手段204、各種センサ4〜6の状態を監視するセンサ監視手段205、モード設定器9により設定された警備モード、画像センサ1から受信した侵入検出信号や画像情報、監視センタ装置8への画像の送信状況を示すフラグ及び各種プログラム等を記憶する記憶手段206、監視状態を画面上に表示し異常を検出したときにはブザーを鳴動させたり、画面上に異常発生箇所を表示する表示手段207、及び監視センタ装置8とのデータの送受信を行う通信制御手段208とを備えている。なお、記憶手段206に記憶された侵入検出信号は、画像センサ1ごとに記憶している。
(Monitoring device)
FIG. 8 is a functional block diagram of the monitoring device 2 that can be connected to the remote monitoring device (monitoring center device) of the present invention. Based on main control means 201 for controlling the entire monitoring device 2, image sensor interface 202 (hereinafter referred to as “image sensor I / F 202”) that is a connection interface with the image sensor 1, and an intrusion detection signal from the image sensor 1, Response processing selection means 203 for selecting response processing, equipment control means 204 for controlling the activation of the smoke generating device 3, sensor monitoring means 205 for monitoring the states of the various sensors 4 to 6, security mode set by the mode setting device 9, Storage means 206 for storing an intrusion detection signal and image information received from the image sensor 1, a flag indicating the transmission status of an image to the monitoring center device 8, various programs, and the like, and when the monitoring status is displayed on the screen and an abnormality is detected Data with the display means 207 for sounding the buzzer and displaying the location of the abnormality on the screen and the monitoring center device 8 And a communication control unit 208 for transmitting and receiving. Note that the intrusion detection signal stored in the storage unit 206 is stored for each image sensor 1.

監視装置2は、記憶手段206に画像センサ1に対応する発煙装置3の対応テーブルを記憶している。図10に、記憶手段206に記憶する画像センサ1と発煙装置3の対応テーブルを例示する。設備制御手段204はこのようなテーブルを用いて、侵入検出した画像センサ1に対応する発煙装置3を起動する。尚、画像センサ1と発煙装置3が複数:1の関係で設置されている場合には、テーブル中に発煙装置3と対応する1つの画像センサ1を特定しておき、特定された画像センサ1が侵入検知したときのみ発煙装置3を起動するようにしても、複数の画像センサ1のすべてと発煙装置3とを対応づけておくことにより、対応付けられた画像センサ1のいずれか一つが侵入検出したときでも発煙装置3を起動するようにしてもよい。また、画像センサ1と発煙装置3とが1:複数の関係で設置されているときには、対応する画像センサ1が「侵入検出」状態となったときに、複数の発煙装置3を一定の時間間隔をおいて順次自動的に起動させるようにしても、複数の発煙装置3の1台のみを監視装置2により自動的に起動させ、残りの発煙装置3は、監視センタ装置からの制御信号により起動させるようにしてもよい。   The monitoring device 2 stores a correspondence table of the smoke generation device 3 corresponding to the image sensor 1 in the storage unit 206. FIG. 10 illustrates a correspondence table between the image sensor 1 and the smoke generation device 3 stored in the storage unit 206. The equipment control means 204 uses such a table to activate the smoke generator 3 corresponding to the image sensor 1 that has detected intrusion. In addition, when the image sensor 1 and the smoke generating device 3 are installed in a relationship of plural: 1, one image sensor 1 corresponding to the smoke generating device 3 is specified in the table, and the specified image sensor 1 is specified. Even if the smoke generating device 3 is activated only when an intrusion is detected, by associating all of the plurality of image sensors 1 with the smoke generating device 3, any one of the associated image sensors 1 intrudes. Even when it is detected, the smoke generating device 3 may be activated. Further, when the image sensor 1 and the smoke device 3 are installed in a plurality of relationships 1: when the corresponding image sensor 1 is in the “intrusion detection” state, the plurality of smoke devices 3 are separated at a certain time interval. Even if it is made to start automatically one after another, only one of the plurality of smoke generating devices 3 is automatically started by the monitoring device 2, and the remaining smoke generating devices 3 are started by a control signal from the monitoring center device You may make it make it.

モード設定器9により監視モードに設定されると、主制御手段201は画像センサ1及び各種センサ4〜6からの信号に基づき、センサ監視手段205、対応処理選択手段203は、各種センサ4〜6及び画像センサ1の状態を監視し、異常が発生すると侵入情報を監視センタ装置8に送信して知らせる。本発明は画像センサ1による「侵入検出」に関するものであるので、画像センサ1から侵入検出信号を受信した場合の対応処理選択手段203について、詳細に説明する。   When the mode setting unit 9 sets the monitoring mode, the main control unit 201 is based on signals from the image sensor 1 and the various sensors 4 to 6, and the sensor monitoring unit 205 and the corresponding processing selection unit 203 are the various sensors 4 to 6. In addition, the state of the image sensor 1 is monitored, and when an abnormality occurs, intrusion information is transmitted to the monitoring center device 8 to be notified. Since the present invention relates to “intrusion detection” by the image sensor 1, the response processing selection unit 203 when an intrusion detection signal is received from the image sensor 1 will be described in detail.

図9は、対応処理選択手段203の動作手順の一例を示すフローチャートである。対応処理選択手段203は、侵入検出信号及び蓄積画像を受信すると(S301)、画像センサ1の侵入検出レベルを確認する。画像センサ1による侵入検出が第1レベル侵入検出又は第2レベル侵入検出の場合には(S302;Yes)、対応処理選択手段203は、監視センタ装置8に対して、侵入検出信号及び蓄積画像を送信する(S303)。これにより、監視センタでは、監視員が画像等に基づいて、人の侵入かどうかを確認し、必要な対応処理を行う。   FIG. 9 is a flowchart illustrating an example of an operation procedure of the response processing selection unit 203. When the response processing selection unit 203 receives the intrusion detection signal and the accumulated image (S301), it checks the intrusion detection level of the image sensor 1. When the intrusion detection by the image sensor 1 is the first level intrusion detection or the second level intrusion detection (S302; Yes), the response processing selection unit 203 sends the intrusion detection signal and the accumulated image to the monitoring center device 8. Transmit (S303). As a result, in the monitoring center, the monitoring person confirms whether or not a person has entered based on the image or the like, and performs necessary response processing.

画像センサ1から、第3レベル侵入検出信号を受信した場合には、対応処理選択手段203は、設備制御手段204に起動信号を出力して発煙装置3を起動させる(S304)。これは、第3レベル侵入検出と判定された場合には、侵入者の存在がほぼ確定的であるため、即座に発煙装置3を起動させるものである。これにより、侵入者を検知したタイミングで即座に発煙装置を起動することが可能となるので、起動タイミングを逸することなく、効果的に発煙装置3を起動することが可能となる。従って、発煙装置3の効果的な使用が可能となり、より犯罪抑止力の高い遠隔監視装置を提供可能となる。その後工程S303の処理を実行する。なお、工程S303とS304の順序を逆にしても良い。   When the third level intrusion detection signal is received from the image sensor 1, the response processing selection unit 203 outputs an activation signal to the facility control unit 204 to activate the smoke generating device 3 (S304). If the third level intrusion detection is determined, the presence of the intruder is almost deterministic, and the smoke generating device 3 is immediately activated. Thereby, since it becomes possible to start a smoke generator immediately at the timing which detected the intruder, it becomes possible to start the smoke generator 3 effectively, without losing start timing. Therefore, the smoke generator 3 can be used effectively, and a remote monitoring device with higher crime deterrence can be provided. Thereafter, the process of step S303 is executed. Note that the order of steps S303 and S304 may be reversed.

図11は、対応処理選択手段203における動作処理手順の他の例を示すフローチャートである。この動作処理手順では、画像センサ1が第2レベルの侵入検出のときには、最新画像を監視センタ装置8に送信することを特徴としている。すなわち、画像センサ1から第1レベル侵入検出信号を受信した場合に(S311、S312共にYes)、監視センタ装置8には蓄積画像を送信し、第2レベルまたは第3レベルの侵入検出信号を受信したときには(S312;No)、工程S314へ進む。   FIG. 11 is a flowchart showing another example of the operation processing procedure in the response processing selection unit 203. This operation processing procedure is characterized in that the latest image is transmitted to the monitoring center device 8 when the image sensor 1 detects the second level intrusion. That is, when the first level intrusion detection signal is received from the image sensor 1 (Yes in both S311 and S312), the stored image is transmitted to the monitoring center device 8 and the second level or third level intrusion detection signal is received. If it is done (S312; No), the process proceeds to step S314.

次に、第2レベル侵入検出信号であるかどうかをチェックし(S314)、第2レベル侵入検出信号でない場合、すなわち第3レベルの侵入検出の場合には(S314;No)、設備制御手段204に発煙装置3を起動する起動信号を出力する(S316)。また、第2レベル又は第3レベルの侵入検出信号のいずれの場合も画像センサ1へ最新画像の送信を要求し、画像センサ1から最新画像を受信すると、監視センタ装置8への最新画像の送信を行う最新画像データの通信処理を実行する(S315)。かかる最新画像の送信は、監視センタ装置8から最新画像の送信停止コマンドを受信するまで続けられる。監視センタ装置8から現状画像データの送信停止コマンドを受信するまで続けられる。なお、本フローチャートでは省略したが、侵入検出信号のレベルを判定したとき(S312、S314)に、当該画像センサ1からすでに同一レベルの侵入検出信号を記憶手段206に記憶していれば、以降の処理をせずに、工程S311へ戻る。   Next, it is checked whether it is a second level intrusion detection signal (S314). If it is not the second level intrusion detection signal, that is, in the case of the third level intrusion detection (S314; No), the equipment control means 204 An activation signal for activating the smoke generating device 3 is output (S316). Further, in either case of the second level or the third level intrusion detection signal, the image sensor 1 is requested to transmit the latest image, and when the latest image is received from the image sensor 1, the latest image is transmitted to the monitoring center device 8. The communication processing of the latest image data is performed (S315). The transmission of the latest image is continued until the latest image transmission stop command is received from the monitoring center device 8. The process is continued until a current image data transmission stop command is received from the monitoring center device 8. Although omitted in this flowchart, when the level of the intrusion detection signal is determined (S312 and S314), if the intrusion detection signal of the same level is already stored in the storage unit 206 from the image sensor 1, Without processing, the process returns to step S311.

本実施の形態では、第3レベル侵入検出信号を受信すると、必ず威嚇装置である発煙装置3を駆動するようにしているが、第3レベル侵入検出信号を受信したとき、既に監視装置2から監視センタ装置8へ現状画像を送信していれば発煙装置3を起動しないようにしても良い。例えば、監視装置2が画像センサ1から第2レベル侵入検出信号を受信し、工程S315にて現状画像を監視センタ装置8へ送信している最中に、当該画像センサ1から第3レベル侵入検出信号を受信した場合である。かかる場合は、監視センタの監視員が画像センサ1からの画像を見ているので、監視員の判断を優先するのが好ましい。そこで、監視員が監視センタ装置8から監視装置2に発煙装置3の起動信号を送信し、発煙装置3を起動させる。これにより、画像センサ1による判断より確かな判断で発煙装置3の起動ができる。   In the present embodiment, when the third level intrusion detection signal is received, the smoke generating device 3 that is a threatening device is always driven. However, when the third level intrusion detection signal is received, the monitoring device 2 has already been monitored. If the current image is transmitted to the center device 8, the smoke generating device 3 may not be activated. For example, while the monitoring device 2 receives the second level intrusion detection signal from the image sensor 1 and transmits the current image to the monitoring center device 8 in step S315, the third level intrusion detection is detected from the image sensor 1. This is the case when a signal is received. In such a case, it is preferable to give priority to the judgment of the supervisor because the supervisor of the monitoring center sees the image from the image sensor 1. Therefore, the monitoring person transmits a start signal of the smoke generating device 3 from the monitoring center device 8 to the monitoring device 2 to start the smoke generating device 3. As a result, the smoke generating device 3 can be started with a more reliable determination than the determination by the image sensor 1.

図12は、図5に示す画像センサ1、監視装置2及び遠隔監視装置(監視センタ装置8)を用いた遠隔監視システムの各装置間のデータの送受信の例を示す図である。図12では、すでに監視装置2は、監視モードに設定されているものとして説明する。監視装置2は、画像センサ1に対して定期的に現状報告要求信号を送信する。これに対して画像センサ1は、特に問題がなければ、監視装置2への応答として正常信号を送信する。   FIG. 12 is a diagram illustrating an example of data transmission / reception between devices of a remote monitoring system using the image sensor 1, the monitoring device 2, and the remote monitoring device (monitoring center device 8) illustrated in FIG. In FIG. 12, the monitoring apparatus 2 will be described as being set to the monitoring mode. The monitoring device 2 periodically transmits a status report request signal to the image sensor 1. On the other hand, the image sensor 1 transmits a normal signal as a response to the monitoring device 2 if there is no particular problem.

今、画像センサ1が第1レベル侵入検出信号を受信したとすると、第1レベル侵入検出信号を監視装置2に送信する。第1レベル侵入検出信号を受信した監視装置2は、第1レベル侵入検出信号を含む異常信号を、監視センタ装置8に送信する。画像センサ1は第1レベル侵入検出信号と同時に蓄積画像を送信するように構成しても良いが、本実施の形態では図12に示すように、監視装置2から画像センサ1に対して蓄積画像の要求をするように構成している。画像センサ1は、監視装置2から蓄積画像要求信号を受信すると、蓄積画像を監視装置2に送信する。監視装置2は、受信した蓄積画像を監視センタ装置8に送信する。監視センタ装置8を監視する監視員が、侵入確認のために最新画像が必要であると判断すると、監視センタ装置8から最新画像を要求する。監視装置2はこれを受けて最新画像の送信を画像センサ1に要求する。これに基づき、画像センサ1から最新画像が監視装置2を経由して監視センタ装置8に送信される。監視センタの監視員は、受信した最新画像等に基づいて発煙装置3の起動が適切と判断すれば、監視センタ装置8から識別記号を含む発煙装置3の起動信号を送信させる。かかる発煙装置3の起動信号を受信すると、監視装置2は設備制御手段204の制御の下、記憶手段206の対応テーブル(図10)を参照して対応する発煙装置3を起動させる。   Now, assuming that the image sensor 1 has received the first level intrusion detection signal, the first level intrusion detection signal is transmitted to the monitoring device 2. The monitoring device 2 that has received the first level intrusion detection signal transmits an abnormal signal including the first level intrusion detection signal to the monitoring center device 8. The image sensor 1 may be configured to transmit the accumulated image simultaneously with the first level intrusion detection signal, but in the present embodiment, the accumulated image is sent from the monitoring device 2 to the image sensor 1 as shown in FIG. It is configured to make a request. When the image sensor 1 receives the accumulated image request signal from the monitoring device 2, the image sensor 1 transmits the accumulated image to the monitoring device 2. The monitoring device 2 transmits the received accumulated image to the monitoring center device 8. If the monitoring person who monitors the monitoring center device 8 determines that the latest image is necessary for intrusion confirmation, the monitoring center device 8 requests the latest image. In response to this, the monitoring device 2 requests the image sensor 1 to transmit the latest image. Based on this, the latest image is transmitted from the image sensor 1 to the monitoring center device 8 via the monitoring device 2. If the monitoring staff of the monitoring center determines that the activation of the smoke generating device 3 is appropriate based on the received latest image or the like, the monitoring center device 8 transmits an activation signal of the smoke generating device 3 including the identification symbol. When receiving the activation signal of the smoke generating device 3, the monitoring device 2 activates the corresponding smoke generating device 3 with reference to the correspondence table (FIG. 10) of the storage unit 206 under the control of the facility control unit 204.

監視センタでは、侵入検出に対する対応処理が終了すると、モニタ終了信号を監視装置2に送信する。これに基づき、監視装置2は、記憶手段206に記憶保持している侵入検出信号の削除、最新画像の送信停止をするとともに、画像センサ1にモニタ終了信号を送信する。これにより最新画像の送信が停止される。なお、監視装置2は、モニタ終了信号を受信しなくとも、最新画像の送信停止コマンドを受信すると停止される。モニタ終了信号を受信した画像センサ1は、最新画像の送信を停止する。この処理は、送信停止コマンドを受信したときも同様である。   The monitoring center transmits a monitor end signal to the monitoring device 2 when the corresponding processing for intrusion detection is completed. Based on this, the monitoring device 2 deletes the intrusion detection signal stored in the storage unit 206 and stops transmitting the latest image, and transmits a monitor end signal to the image sensor 1. Thereby, transmission of the latest image is stopped. The monitoring device 2 is stopped when it receives the latest image transmission stop command without receiving the monitor end signal. The image sensor 1 that has received the monitor end signal stops transmitting the latest image. This process is the same when a transmission stop command is received.

図12の破線の下の欄は、画像センサ1が第3レベル侵入検出と判定したときの対応処理を示している。現状報告信号を受信すると、画像センサ1は第3レベル侵入検出信号を監視装置2に送信する。監視装置2は、第3レベル侵入検出信号を含む異常信号を監視センタ装置8に送信するとともに、発煙装置3の起動信号を発煙装置3に送信する。発煙装置3は起動信号を受けると、発煙して侵入者の視野を遮る。さらに、監視装置2から最新画像要求信号が画像センサ1に送信され、最新画像が監視装置2を介して監視センタ装置8に送信される。所定の対応処理が終了すると、監視センタ装置8から監視装置2及び画像センサ1にモニタ終了信号が送信される。これにより最新画像の送信が停止される。   The column below the broken line in FIG. 12 shows the corresponding processing when the image sensor 1 determines that the third level intrusion detection has occurred. When receiving the current status report signal, the image sensor 1 transmits a third level intrusion detection signal to the monitoring device 2. The monitoring device 2 transmits an abnormal signal including the third level intrusion detection signal to the monitoring center device 8 and transmits an activation signal for the smoke generating device 3 to the smoke generating device 3. When the smoke generating device 3 receives the activation signal, it smokes and blocks the intruder's field of view. Further, the latest image request signal is transmitted from the monitoring device 2 to the image sensor 1, and the latest image is transmitted to the monitoring center device 8 via the monitoring device 2. When the predetermined response process ends, a monitoring end signal is transmitted from the monitoring center device 8 to the monitoring device 2 and the image sensor 1. Thereby, transmission of the latest image is stopped.

なお、監視センタ装置8から発煙装置3を起動させるときに、監視センタ装置8から監視装置2へ識別記号を含む起動信号を送信し、監視装置2は、図10の対応テーブルを参照して、発煙装置3を特定して当該発煙装置3を起動する構成としたが、監視センタ装置8で監視装置2の対応テーブルを記憶しておき、発煙装置3を特定する起動信号を監視装置2に送信する構成としてもよい。   When the smoke generation device 3 is activated from the monitoring center device 8, an activation signal including an identification symbol is transmitted from the monitoring center device 8 to the monitoring device 2, and the monitoring device 2 refers to the correspondence table in FIG. Although the smoke generator 3 is specified and the smoke generator 3 is activated, the monitoring center device 8 stores a correspondence table of the monitor device 2 and transmits an activation signal for identifying the smoke generator 3 to the monitor device 2. It is good also as composition to do.

本発明の遠隔監視装置(監視センタ装置)を用いた遠隔監視システムの構成例を示す構成ブロック図である。It is a configuration block diagram showing a configuration example of a remote monitoring system using a remote monitoring device (monitoring center device) of the present invention. 本発明の一実施形態にかかる遠隔監視装置(監視センタ装置)の機能ブロック図である。It is a functional block diagram of the remote monitoring apparatus (monitoring center apparatus) concerning one Embodiment of this invention. 威嚇ボタンをタッチパネルとして表示部上に表示する画面表示例を示す図である。It is a figure which shows the example of a screen display which displays a threatening button on a display part as a touchscreen. 遠隔監視装置の起動操作手段(威嚇操作ボタン)の表示制御手順の一例を示すフローチャートである。It is a flowchart which shows an example of the display control procedure of the starting operation means (intimidation operation button) of a remote monitoring apparatus. 画像センサの一例を示す機能ブロック図である。It is a functional block diagram which shows an example of an image sensor. 侵入判定処理手順の一例を示すフローチャートである。It is a flowchart which shows an example of an intrusion determination processing procedure. 図5の画像センサの通信動作処理手順の一例を示すフローチャートである。It is a flowchart which shows an example of the communication operation processing procedure of the image sensor of FIG. 監視装置の一例を示す機能ブロック図である。It is a functional block diagram which shows an example of a monitoring apparatus. 対応処理選択手段の動作手順の一例を示すフローチャートである。It is a flowchart which shows an example of the operation | movement procedure of a corresponding | compatible process selection means. 遠隔監視装置(監視センタ装置)及び監視装置の記憶手段に記憶されている画像センサと発煙装置の対応テーブルの一例を示す図である。It is a figure which shows an example of the correspondence table of the image sensor memorize | stored in the memory | storage means of a remote monitoring apparatus (monitoring center apparatus) and a monitoring apparatus. 対応処理選択手段における動作処理手順の他の例を示すフローチャートである。It is a flowchart which shows the other example of the operation | movement process procedure in a corresponding | compatible process selection means. 画像センサ、監視装置及び遠隔監視装置(監視センタ装置)を用いた遠隔監視システムの各装置間のデータの送受信の例を示す図である。It is a figure which shows the example of transmission / reception of the data between each apparatus of the remote monitoring system using an image sensor, a monitoring apparatus, and a remote monitoring apparatus (monitoring center apparatus). 人属性値と人以外の属性値との関係に基づき、人の存在を判定する方法を示す図である。It is a figure which shows the method of determining presence of a person based on the relationship between a human attribute value and attribute values other than a person.

符号の説明Explanation of symbols

1(1a〜1e) 画像センサ 2 監視装置
3(3a〜3d) 発煙装置(威嚇装置) 4 侵入センサ
5 火災センサ 6 非常ボタン
7 通信回線(ネットワーク) 8 監視センタ装置(遠隔監視装置)
9 モード設定器 10 遠隔監視システム
100 画像センサの制御手段 101 撮像制御手段
102 照明部 103 撮像部
104 画像解析部 105 背景画像記憶手段
106 差分抽出手段 107 トラッキング手段
108 画像属性算出手段 109 侵入判定手段
110 画像データ蓄積手段 111 画像データ出力手段
112 接続I/F 201 監視装置の主制御手段
202 画像センサI/F 203 対応処理選択手段
204 設備制御手段 205 センサ監視手段
206 監視装置の記憶手段 207 表示手段
208 通信制御手段 801 通信制御手段
802 監視センタ装置の主制御手段 803 表示手段
804 画像判定手段 805 威嚇起動手段
807 監視センタ装置の記憶手段 810 表示制御部
811 表示部 820 表示画面
821 情報表示部 822 蓄積画像情報表示枠
823 蓄積画像情報表示枠 824 最新画像表示枠
825 最新画像情報表示枠 831 最新画像要求ボタン
832 起動操作手段 833a、b 手動送りボタン
834 自動送りボタン 835 分割ボタン
836 モニタ終了ボタン

DESCRIPTION OF SYMBOLS 1 (1a-1e) Image sensor 2 Monitoring apparatus 3 (3a-3d) Smoke generation apparatus (intimidation apparatus) 4 Intrusion sensor 5 Fire sensor 6 Emergency button 7 Communication line (network) 8 Monitoring center apparatus (remote monitoring apparatus)
9 Mode Setter 10 Remote Monitoring System 100 Image Sensor Control Unit 101 Imaging Control Unit 102 Illumination Unit 103 Imaging Unit 104 Image Analysis Unit 105 Background Image Storage Unit 106 Difference Extraction Unit 107 Tracking Unit 108 Image Attribute Calculation Unit 109 Intrusion Determination Unit 110 Image data storage means 111 Image data output means 112 Connection I / F 201 Monitoring device main control means 202 Image sensor I / F 203 Corresponding processing selection means 204 Equipment control means 205 Sensor monitoring means 206 Monitoring device storage means 207 Display means 208 Communication control means 801 Communication control means 802 Monitoring center apparatus main control means 803 Display means 804 Image determination means 805 Threatening activation means 807 Monitoring center apparatus storage means 810 Display control part 811 Display part 820 Display screen 821 Information display 822 Accumulated image information display frame 823 Accumulated image information display frame 824 Latest image display frame 825 Latest image information display frame 831 Latest image request button 832 Start operation means 833a, b Manual feed button 834 Automatic feed button 835 Divide button 836 Monitor end button

Claims (5)

監視物件に設置された威嚇装置及び撮像装置と接続される遠隔監視装置であって、
前記威嚇装置へ起動信号を出力するときに操作する起動操作手段と、
前記撮像装置からの画像を受信する通信制御手段と、
前記画像を表示部に表示する表示手段と、
前記表示部における表示画像に付加された画像種別を示す画像特定情報に基づいて、当該表示画像が最新画像かその他の画像種別の画像かを判定する画像判定手段と、
前記威嚇装置及び前記撮像装置との対応を記憶する記憶手段と、
前記表示画像の送信源である前記撮像装置に対応する前記威嚇装置があり、前記画像判定手段にて前記表示画像が前記最新画像であると判定されることを条件として、前記起動操作手段を操作可能状態とし、前記表示部における表示画像の送信源である前記撮像装置に対応する前記威嚇装置があっても、前記画像判定手段にて前記その他の画像種別の画像であると判定される場合は、前記起動操作手段を操作不能状態とする表示制御手段と、
前記起動操作手段が操作されると、前記対応する威嚇装置を起動する起動信号を出力する威嚇起動手段と、
を具備することを特徴とする遠隔監視装置。
A remote monitoring device connected to a threatening device and an imaging device installed in a monitored property,
An activation operation means operated when outputting an activation signal to the threatening device;
Communication control means for receiving an image from the imaging device;
Display means for displaying the image on a display unit;
Image determining means for determining whether the display image is the latest image or an image of another image type based on image specifying information indicating the image type added to the display image in the display unit;
Storage means for storing correspondence between the threatening device and the imaging device;
The intimidating device there Ri corresponding to the imaging apparatus which is a transmission source of the displayed image, the condition Rukoto is determined that the displayed image is the most recent image by the image determining unit, said activation operation means Even if there is the threatening device corresponding to the imaging device that is the transmission source of the display image in the display unit in the operable state , the image determination unit determines that the image is the image of the other image type. In this case, display control means for disabling the activation operation means ,
When the activation operation means is operated, threatening activation means for outputting an activation signal for activating the corresponding threatening device;
A remote monitoring device comprising:
更に、
前記表示画像が切換え処理中か否かを判定する表示状態判定手段を具備し、
前記表示制御手段は、前記表示画像が切換え処理中でないことを条件として、前記起動操作手段を操作可能状態とする請求項1に記載の遠隔監視装置。
Furthermore,
Comprising a display state determining means for determining whether or not the display image is being switched;
The remote monitoring apparatus according to claim 1, wherein the display control unit sets the start operation unit in an operable state on condition that the display image is not being switched .
更に、
前記表示手段は、複数の前記記憶装置から受信した画像を前記表示部に分割表示する機能を有し、
前記表示状態判定手段は、分割表示されているか否かを判定し、
前記起動制御手段は、分割表示されていないことを条件として、前記起動操作手段を操作可能状態とする請求項2に記載の遠隔監視装置。
Furthermore,
The display means has a function of dividing and displaying images received from a plurality of the storage devices on the display unit,
The display state determining means determines whether or not the display is divided;
The remote monitoring device according to claim 2, wherein the activation control unit sets the activation operation unit in an operable state on condition that the activation control unit is not divided and displayed .
更に、
前記表示手段は、複数の前記撮像装置から受信した画像を前記表示部に自動切換表示する機能を有し、
前記表示状態判定手段は、自動切換え表示されているか否かを判定し、
前記起動制御手段は、自動切換表示されていないことを条件として、前記起動操作手段を操作可能状態とする請求項2または請求項3に記載の遠隔監視装置。
Furthermore,
The display means has a function of automatically switching and displaying images received from a plurality of the imaging devices on the display unit,
The display state determination means determines whether or not automatic switching display is performed,
The remote monitoring device according to claim 2 or 3 , wherein the activation control unit sets the activation operation unit in an operable state on condition that automatic switching display is not performed .
監視物件に設置された威嚇装置及び撮像装置と、当該威嚇装置及び撮像装置と接続される遠隔監視装置とを備えた遠隔監視システムであって、A remote monitoring system comprising a threatening device and an imaging device installed in a monitored property, and a remote monitoring device connected to the threatening device and the imaging device,
前記撮像装置は、撮像した画像に画像種別を示す画像特定情報を付加して前記遠隔監視装置へ送信し、  The imaging device adds image specifying information indicating an image type to the captured image and transmits the image to the remote monitoring device,
前記遠隔監視装置は、The remote monitoring device is
前記威嚇装置へ起動信号を出力するときに操作する起動操作手段と、An activation operation means operated when outputting an activation signal to the threatening device;
前記撮像装置からの画像を受信する通信制御手段と、Communication control means for receiving an image from the imaging device;
前記画像を表示部に表示する表示手段と、Display means for displaying the image on a display unit;
前記表示部における表示画像に付加された前記画像特定情報に基づいて、当該表示画像が最新画像かその他の画像種別の画像かを判定する画像判定手段と、Image determining means for determining whether the display image is the latest image or an image of another image type based on the image specifying information added to the display image in the display unit;
前記威嚇装置及び前記撮像装置との対応を記憶する記憶手段と、Storage means for storing correspondence between the threatening device and the imaging device;
前記表示画像の送信源である前記撮像装置に対応する前記威嚇装置があり、前記画像判定手段にて前記表示画像が前記最新画像であると判定されることを条件として、前記起動操作手段を操作可能状態とし、前記表示部における表示画像の送信源である前記撮像装置に対応する前記威嚇装置があっても、前記画像判定手段にて前記その他の画像種別の画像であると判定される場合は、前記起動操作手段を操作不能状態とする表示制御手段と、There is a threatening device corresponding to the imaging device that is a transmission source of the display image, and the start operation unit is operated on condition that the display determination unit determines that the display image is the latest image. Even if there is the threatening device corresponding to the imaging device that is the transmission source of the display image in the display unit in the possible state, the image determination unit determines that the image is the image of the other image type Display control means for making the activation operation means inoperable; and
前記起動操作手段が操作されると、前記対応する威嚇装置を起動する起動信号を出力する威嚇起動手段とを具備し、Threatening activation means for outputting an activation signal for activating the corresponding threatening device when the activation manipulation means is operated,
前記威嚇装置は、前記起動信号の受信により起動することを特徴とする遠隔監視システム。The threatening device is activated by receiving the activation signal.
JP2005102882A 2005-03-31 2005-03-31 Remote monitoring device and remote monitoring system Active JP4709566B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005102882A JP4709566B2 (en) 2005-03-31 2005-03-31 Remote monitoring device and remote monitoring system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005102882A JP4709566B2 (en) 2005-03-31 2005-03-31 Remote monitoring device and remote monitoring system

Publications (2)

Publication Number Publication Date
JP2006285507A JP2006285507A (en) 2006-10-19
JP4709566B2 true JP4709566B2 (en) 2011-06-22

Family

ID=37407389

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005102882A Active JP4709566B2 (en) 2005-03-31 2005-03-31 Remote monitoring device and remote monitoring system

Country Status (1)

Country Link
JP (1) JP4709566B2 (en)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5117063B2 (en) * 2007-02-08 2013-01-09 株式会社東芝 Access control system and access control method
JP5158471B2 (en) * 2007-05-02 2013-03-06 株式会社メガチップス Monitoring system
JP2009086729A (en) * 2007-09-27 2009-04-23 Sogo Keibi Hosho Co Ltd Monitoring system, security device, sensor and monitoring method
JP5376221B2 (en) * 2009-03-31 2013-12-25 富士通株式会社 Status notification system, status notification device, status monitoring device, status detection device, status notification program, and status notification method
CN106797431A (en) 2015-06-30 2017-05-31 K&M企业株式会社 Image processing method and program in display picture
CN107610397A (en) * 2017-10-10 2018-01-19 中核第四研究设计工程有限公司 Intelligent smog occurrence of equipment and its control system

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000251178A (en) * 1999-02-26 2000-09-14 Toshiba Corp Station job equipment management system
JP2003085662A (en) * 2001-07-06 2003-03-20 Rando Business:Kk Crime prevention system, crime prevention management device, crime prevention method, crime prevention management method and computer program
JP2005011088A (en) * 2003-06-19 2005-01-13 Matsushita Electric Ind Co Ltd Tunnel monitoring device

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000251178A (en) * 1999-02-26 2000-09-14 Toshiba Corp Station job equipment management system
JP2003085662A (en) * 2001-07-06 2003-03-20 Rando Business:Kk Crime prevention system, crime prevention management device, crime prevention method, crime prevention management method and computer program
JP2005011088A (en) * 2003-06-19 2005-01-13 Matsushita Electric Ind Co Ltd Tunnel monitoring device

Also Published As

Publication number Publication date
JP2006285507A (en) 2006-10-19

Similar Documents

Publication Publication Date Title
US10388146B2 (en) Contextual fire detection and alarm verification method and system
JP4709566B2 (en) Remote monitoring device and remote monitoring system
US20070139192A1 (en) Sensor unit having a network video camera
US20060230434A1 (en) Security information notification system and notification method, and control unit for security information notification system
KR101391302B1 (en) Addressable automatic fire alarm system
JP2018072881A (en) Fire disaster monitoring system
JP4875313B2 (en) Monitoring device
JP4713950B2 (en) Monitoring device
CN115050156A (en) Intelligent fire alarm rescue and relief system
JP2009015536A (en) Suspicious person report device, suspicious person monitoring device and remote monitoring system using the same
JPH11259775A (en) Monitoring system
JP2017215694A (en) Control system, monitoring device, monitoring program, monitoring method and image sensor
CN113936293A (en) Video information-based off-duty personnel detection method, control device and storage medium
JP6779814B2 (en) Fire alarm system
JP4516715B2 (en) Emergency notification system
JP2000020857A (en) Monitoring device
CN113076791A (en) Proximity object detection for surveillance cameras
CN106683328A (en) Household security system
CN115065812B (en) Real-time monitoring method based on user behavior and related equipment
JP2009223708A (en) Guard device
JP2008148138A (en) Monitoring system
KR20070018485A (en) A fire and trespasser alert system by using infrared rays camera
JP7252107B2 (en) Monitoring system and monitoring method
CN114495394A (en) Multi-stage anti-intrusion method and device and storage medium
JP3886246B2 (en) Image surveillance system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080222

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20101129

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20101203

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110131

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110311

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110318

R150 Certificate of patent or registration of utility model

Ref document number: 4709566

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250