JP2003233882A - Equipment monitoring system - Google Patents

Equipment monitoring system

Info

Publication number
JP2003233882A
JP2003233882A JP2002033711A JP2002033711A JP2003233882A JP 2003233882 A JP2003233882 A JP 2003233882A JP 2002033711 A JP2002033711 A JP 2002033711A JP 2002033711 A JP2002033711 A JP 2002033711A JP 2003233882 A JP2003233882 A JP 2003233882A
Authority
JP
Japan
Prior art keywords
equipment
image
monitoring system
monitoring
state
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002033711A
Other languages
Japanese (ja)
Other versions
JP3922534B2 (en
Inventor
Akira Arai
昭 新井
Kosuke Kawakado
浩亮 川角
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Takaoka Toko Co Ltd
Tokyo Electric Power Co Holdings Inc
Original Assignee
Tokyo Electric Power Co Inc
Toko Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tokyo Electric Power Co Inc, Toko Electric Corp filed Critical Tokyo Electric Power Co Inc
Priority to JP2002033711A priority Critical patent/JP3922534B2/en
Publication of JP2003233882A publication Critical patent/JP2003233882A/en
Application granted granted Critical
Publication of JP3922534B2 publication Critical patent/JP3922534B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Alarm Systems (AREA)
  • Telephonic Communication Services (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an equipment monitoring system for detecting a state of equipment installed in a dark room without installing light fixture in the dark room and for informing a monitoring center at a remote place of the state. <P>SOLUTION: The equipment monitoring system is constituted so that a display unit 20 emits light by detecting an abnormality of the equipment, an imaging means 5 of a monitoring device 20 acquires an image signal including light emission, an image processing apparatus 6 discriminates the state of the equipment, transmits information data to the monitoring center at the remote place via a communication line 30 and the state of the equipment is detected on the side of the monitoring center 40 at the remote place where the information data are received. <P>COPYRIGHT: (C)2003,JPO

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【発明の属する技術分野】本発明は、平時は光が入らな
い倉庫、機械室または電気室などの暗室(以下、単に暗
室という)の内部に設置されている各種設備の故障や異
常という状態を検知し、遠隔地にある監視センタへ状態
を通知する設備監視システムに関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a failure or abnormality of various facilities installed inside a dark room (hereinafter, simply referred to as a dark room) such as a warehouse, a machine room or an electric room where light does not enter during normal times. The present invention relates to a facility monitoring system for detecting and notifying a status to a monitoring center in a remote place.

【0002】[0002]

【従来の技術】電気室などの暗室内に設置されている設
備または暗室自体の状態を監視する監視装置に関する従
来技術としては、例えば、特許第3107754号(発
明の名称「借室設備遠方監視システム」,特許権者は本
出願人と同一である。)の特許発明がある。
2. Description of the Related Art As a conventional technique relating to a monitoring device for monitoring the condition of equipment installed in a dark room such as an electric room or the condition of the dark room itself, for example, Japanese Patent No. 3107754 (the title of the invention is "distance room distant monitoring system"). , The patentee is the same as the applicant.)

【0003】この特許発明に係る監視システムは、集合
住宅の一室に設置されている変圧器などの電気設備の状
態や借室内の状態を監視する。なお、この部屋は、供給
用変圧器室または借室と呼ばれるが平時は照明されてお
らず暗室であることが多い。以下の説明では、単に借室
と称する。
The monitoring system according to the invention of this patent monitors the condition of electric equipment such as a transformer installed in one room of an apartment house and the condition of a rental room. Although this room is called a supply transformer room or a rental room, it is often a dark room because it is not illuminated during normal times. In the following description, it is simply called a rental room.

【0004】状態監視のため、電気設備や借室の状態を
監視するセンサを複数配設し、これら複数センサの検知
信号を収集する発光モジュールで赤外線信号に変換した
上で監視装置に送信し、監視端末で再び電気信号に変換
して遠隔のセンタ側へ公衆回線を介して伝送し、遠隔地
で警報を受けることができるというものである。
In order to monitor the condition, a plurality of sensors for monitoring the condition of the electric equipment or the rented room are provided, and the light emitting module for collecting the detection signals of the plurality of sensors converts the infrared signals into the infrared signals, which are then transmitted to the monitoring device. It is possible to receive an alarm at a remote place by converting it into an electric signal again at the monitoring terminal and transmitting it to the remote center side via the public line.

【0005】[0005]

【発明が解決しようとする課題】上述したような「借室
設備遠方監視システム」では、センサが接続された発光
モジュールと監視端末との間を赤外線光線による無線伝
送が行われるため、偏狭な借室内でのケーブル敷設を無
用として監視システムが構築しやすいという利点があ
る。
In the above-mentioned "loan room facility remote monitoring system" as described above, since the wireless transmission by the infrared ray is performed between the light emitting module to which the sensor is connected and the monitoring terminal, a narrow rental space is provided. There is an advantage that it is easy to build a monitoring system without the need to lay cables indoors.

【0006】しかしながら、監視システムが対象とする
監視項目は、例えば、変圧器加熱、二次ケーブル加熱、
借室内温度、借室内湿度などというように、多数種類存
在する。監視項目が異なると各発光モジュールから異な
るパターン信号の赤外線光線を発光する必要があり、こ
れらパターン数も複数種類にわたる。このため、監視端
末では異なるパターンの赤外線光線を受光し、どの異常
状態であるかを判別して認識しなければならなかった。
判別のためにO/E変換器や論理部などを備えなければ
ならず、技術的には優れているものの、回路の簡単化等
の改善点も有するものでもあった。
However, the monitoring items targeted by the monitoring system are, for example, transformer heating, secondary cable heating,
There are many types such as the temperature in the rental room and the humidity in the rental room. If the monitoring items are different, it is necessary to emit an infrared ray having a different pattern signal from each light emitting module, and the number of these patterns also varies. For this reason, the monitoring terminal has to receive infrared rays of different patterns and determine and recognize which abnormal state.
An O / E converter, a logic unit, and the like must be provided for discrimination, which is technically excellent, but also has improvements such as simplification of the circuit.

【0007】そこで、電気設備の状態や借室内の状態を
カメラを用いて撮像し、この画像を処理する監視システ
ムが考えられる。近年ではカメラも安価になり、利用し
やすい環境が整っている。なお、本出願人は、特願20
00−238534(発明の名称「状態表示器の認識処
理装置および認識処理方法」)および特願2000−2
76019(発明の名称「自動巡視システムおよび自動
巡視方法」)について共同出願をしており、これら先願
に係る発明は、特にメータ等の状態表示器を撮像して画
像処理によりメータの指針位置を特定し、メータの指針
値を遠隔地にいる監視センタへ通知するというものであ
る。
Therefore, a monitoring system is conceivable in which the state of the electric equipment and the state of the rented room are imaged using a camera and the image is processed. In recent years, cameras have become cheaper and the environment is easier to use. In addition, the applicant of the present invention is Japanese Patent Application 20
00-238534 (Invention title “recognition processing device and recognition processing method for status indicator”) and Japanese Patent Application No. 2000-2
76019 (Invention title "Automatic patrol system and automatic patrol method") is jointly filed, and the inventions according to these prior applications particularly use a state indicator such as a meter to image the pointer position of the meter by image processing. It specifies and notifies the monitoring value in a remote place of the meter's guideline value.

【0008】そこで、これら先願に係る装置を用いて暗
室内の設備を認識するならば、暗室内に照明設備を施
し、撮像手段が設備を撮像して監視する手法が考えられ
る。しかしながら、監視エリアで充分且つ均一な照度を
確保する都合上、照明灯、照度センサ、スイッチ、制御
装置、配線など照明設備を施す必要や、照明灯の寿命に
伴う交換作業、スイッチや配線の敷設、更に消費電力の
増加など、監視装置の構築や保守・点検に際し、費用が
嵩む要因となってしまう。
Therefore, in order to recognize the equipment in the dark room by using the apparatus according to these prior applications, a method of providing lighting equipment in the dark room and imaging the equipment by the imaging means can be considered. However, in order to ensure sufficient and uniform illuminance in the monitoring area, it is necessary to provide lighting equipment such as lighting, illuminance sensor, switch, control device, wiring, replacement work due to the life of the lighting, laying of switches and wiring. In addition, the increase in power consumption causes an increase in cost when constructing, maintaining and inspecting the monitoring device.

【0009】このため、先願に係る発明で想定している
環境のように常時照明装置が利用されている環境下と異
なり、本願で想定する暗室内のような暗闇環境下にある
設備状態を監視する場合には、従来と異なる手法を採用
して、安価かつ簡易な設備を用いて監視できるような工
夫が求められている。
Therefore, unlike the environment in which the lighting device is always used, such as the environment assumed in the invention of the prior application, the equipment state in a dark environment such as a dark room assumed in the present application is In the case of monitoring, it is required to adopt a method different from the conventional one so that it can be monitored using inexpensive and simple equipment.

【0010】本発明は上記のような課題を解決するため
になされたものであり、その目的は、倉庫、機械室、電
気室などの暗室でランプ・電灯・蛍光灯のような照明設
備を施すことなく、暗室内の暗闇に設置されている設備
の状態を検知し、その状態を遠隔地にある監視センタへ
通知する設備監視システムを提供することにある。
The present invention has been made to solve the above problems, and an object thereof is to provide lighting equipment such as a lamp, an electric lamp, and a fluorescent lamp in a dark room such as a warehouse, a machine room, or an electric room. It is an object of the present invention to provide a facility monitoring system that detects the state of a facility installed in the darkness of a dark room and notifies the state to a monitoring center in a remote place.

【0011】[0011]

【課題を解決するための手段】上記課題を解決するため
に、本発明の請求項1に記載した設備監視システムによ
れば、設備の状態について表示する一又は複数の表示器
を監視装置が監視し、遠隔地の監視センタへ設備の状態
を通知する設備監視システムにおいて、前記表示器は、
設備の異常を検知して検知信号を出力する異常検知手段
と、前記異常検知手段からの検知信号により開閉される
接点と、前記接点に接続される電源と、前記接点が異常
検知により閉じられた場合に前記電源と接続されて発光
する発光手段と、を備え、前記監視装置は、前記表示器
を撮像する撮像手段と、前記撮像手段から出力される画
像信号を用いて発光の有無を検出し、設備の状態を通知
する通知データを生成し、遠隔地の監視センタへこの通
知データを伝送する画像処理装置と、を備えることを特
徴とする。
In order to solve the above problems, according to the equipment monitoring system of the first aspect of the present invention, the monitoring device monitors one or a plurality of indicators for displaying the status of the equipment. In the equipment monitoring system for notifying the remote monitoring center of the status of the equipment, the display is
An abnormality detecting means for detecting an abnormality of the equipment and outputting a detection signal, a contact opened / closed by the detection signal from the abnormality detecting means, a power source connected to the contact, and the contact closed by the abnormality detection. In this case, the monitoring device is connected to the power source and emits light, and the monitoring device detects the presence or absence of light emission by using image capturing means for capturing an image of the display and image signals output from the image capturing means. An image processing device for generating notification data for notifying the state of the equipment and transmitting the notification data to a remote monitoring center.

【0012】また、請求項2に記載した設備監視システ
ムによれば、請求項1記載の設備監視システムにおい
て、前記画像処理装置は、画像における発光の位置を検
出し、位置により設備の種類および状態を特定すること
を特徴とする。
Further, according to the facility monitoring system of claim 2, in the facility monitoring system of claim 1, the image processing device detects the position of light emission in the image, and the type and state of the facility are detected according to the position. Is specified.

【0013】また、請求項3に記載した設備監視システ
ムによれば、請求項1記載の設備監視システムにおい
て、前記画像処理装置は、画像における発光色を検出
し、色により設備の種類および状態を特定することを特
徴とする。
According to the facility monitoring system of the third aspect, in the facility monitoring system of the first aspect, the image processing device detects the luminescent color in the image and indicates the type and state of the facility by the color. It is characterized by specifying.

【0014】また、請求項4に記載した設備監視システ
ムによれば、請求項1〜請求項3の何れか一項に記載の
設備監視システムにおいて、前記表示器の前記電源は、
バッテリー又は電池であることを特徴とする。
According to the equipment monitoring system described in claim 4, in the equipment monitoring system according to any one of claims 1 to 3, the power source of the display is:
It is a battery or a battery.

【0015】また、請求項5に記載した設備監視システ
ムによれば、請求項1〜請求項4の何れか一項に記載の
設備監視システムにおいて、前記監視センタは、前記画
像処理装置に有線又は無線により接続される1又は複数
のパーソナルコンピュータであることを特徴とする。
According to the equipment monitoring system described in claim 5, in the equipment monitoring system according to any one of claims 1 to 4, the monitoring center is wired to the image processing device or It is characterized by being one or a plurality of personal computers connected wirelessly.

【0016】また、請求項6に記載した設備監視システ
ムによれば、請求項1〜請求項4の何れか一項に記載の
設備監視システムにおいて、前記監視センタと前記画像
処理装置との間にネットワークが介在することを特徴と
する。
Further, according to the equipment monitoring system described in claim 6, in the equipment monitoring system according to any one of claims 1 to 4, between the monitoring center and the image processing device. It is characterized by intervening network.

【0017】また、請求項7に記載した設備監視システ
ムによれば、請求項1〜請求項6の何れか一項に記載の
設備監視システムにおいて、前記監視装置は、前記表示
器を撮像する撮像手段と、前記撮像手段から出力される
画像信号を遠隔地の監視センタへ伝送する画像伝送装置
と、を備え、遠隔地の監視センタは、伝送された画像信
号を用いて発光の有無を検出し、設備の状態を認識する
画像処理装置と、を備えることを特徴とする。
Further, according to the equipment monitoring system described in claim 7, in the equipment monitoring system according to any one of claims 1 to 6, the monitoring device captures an image of the display. Means and an image transmission device for transmitting the image signal output from the image pickup means to a remote monitoring center, and the remote monitoring center detects the presence or absence of light emission using the transmitted image signal. And an image processing device for recognizing the state of the equipment.

【0018】[0018]

【発明の実施の形態】以下、本発明による設備監視シス
テムの実施形態について図を用いて説明する。図1は本
発明の実施形態の設備監視システムに含まれる表示器を
説明するブロック図である。この表示器10は、検知器
1aおよび制御器1bからなる異常検知手段1と、接点
2と、電源3と、発光手段4とを備えている。通常は暗
闇である倉庫、機械室、電気室などの暗室内にはトラン
ス等の設備が設置されており、これら設備には表示器1
0が取り付けらる。
BEST MODE FOR CARRYING OUT THE INVENTION Embodiments of an equipment monitoring system according to the present invention will be described below with reference to the drawings. FIG. 1 is a block diagram illustrating a display unit included in an equipment monitoring system according to an embodiment of the present invention. The display 10 includes an abnormality detecting unit 1 including a detector 1a and a controller 1b, a contact 2, a power source 3, and a light emitting unit 4. Equipment such as transformers are installed in dark rooms such as warehouses, machine rooms, and electric rooms that are normally dark.
0 is attached.

【0019】図示しない設備に接続される検知器1a
は、具体的にはセンサあるいは計測器である。センサの
例として、例えば、トランス本体やトランスの分岐端子
台ケーブル口元部などの温度が規定値に達したか否かを
判別するセンサ、暗室内における浸水の水位が規定値に
達したか否かを検知するセンサ、暗室内への侵入を判別
するため暗室のドア開閉状態の有無を検知するセンサな
どである。また、計測器の例として、トランス等の設備
の各所の電圧・電流や、暗室内の温度・湿度を計測して
計測値を出力する計測器などである。
Detector 1a connected to equipment not shown
Is specifically a sensor or a measuring instrument. Examples of the sensor include, for example, a sensor that determines whether or not the temperature of the transformer body or the mouth of the branch terminal block cable of the transformer has reached a specified value, or whether the water level of the flooded water in the dark room has reached a specified value. And a sensor for detecting whether or not the door of the dark room is open / closed in order to determine the intrusion into the dark room. Moreover, examples of the measuring device include a measuring device that measures voltage and current at various places of equipment such as a transformer and temperature and humidity in a dark room and outputs a measured value.

【0020】これら、センサまたは計測器である検知器
1aから制御器1bへ検知信号が送られると、制御器1
bは設備状態を判定する。例えば、設備の温度が所定温
度以上であるならば設備が過熱状態であると判定し、暗
室内の浸水水位が所定値以上であるならば暗室内が浸水
状態であると判定し、暗室のドアが開いた後に閉じられ
たなら何者かが侵入したと判定する。
When a detection signal is sent from the detector 1a, which is a sensor or a measuring instrument, to the controller 1b, the controller 1
b determines the equipment state. For example, if the temperature of the equipment is equal to or higher than a predetermined temperature, it is determined that the equipment is in an overheated state, and if the water level in the dark room is equal to or higher than a predetermined value, it is determined that the dark room is in the flooded state. If is closed after being opened, it is determined that someone has entered.

【0021】そして、上記のように判定した場合、制御
器1bは、制御信号を発して接点2の閉動作を行う。こ
の接点2は、具体的には、常時開(Normal Open)で制御
信号により閉じるようになされたA接点である。接点2
が閉じると電源3と発光手段4とが導通し、発光手段4
が発光する。電源3は、具体的にはバッテリーまたは電
池とすることが構造の簡素化のため好ましいが、電源設
備の状況などに応じて、AC商用電源を変圧、整流した
直流電源を採用してもよい。発光手段4は、具体的には
LED(Light Emitting Diode)である。
When the above determination is made, the controller 1b issues a control signal to close the contact 2. Specifically, the contact 2 is an A contact which is normally open and is closed by a control signal. Contact 2
When is closed, the power source 3 and the light emitting means 4 are electrically connected, and the light emitting means 4
Emits light. The power supply 3 is preferably a battery or a battery in order to simplify the structure, but a DC power supply obtained by transforming and rectifying an AC commercial power supply may be adopted depending on the situation of the power supply equipment. The light emitting means 4 is specifically an LED (Light Emitting Diode).

【0022】このように本発明の表示器10は、制御器
1bから発せられる制御信号により接点2で電源3と導
通させて発光手段4を点灯させる構造であるため、簡素
な構成である。また、発光手段4を長時間発光させる必
要がなく、後述する撮像手段(ITVカメラ)が撮像で
きる期間のみ発光すればよいので、図示しないタイマ等
を接続してワンタイム発光させれば、バッテリーまたは
電池などの電源3は寿命を延命させることができ、電源
3の保守点検作業回数を減少させることができる。
As described above, the display device 10 of the present invention has a simple structure because it has a structure in which the contact 2 makes the power source 3 conductive by the control signal emitted from the controller 1b to turn on the light emitting means 4. Further, it is not necessary to make the light emitting means 4 emit light for a long time, and it is sufficient to emit light only during a period in which an image pickup means (ITV camera) described later can pick up an image. The power source 3 such as a battery can prolong the service life and can reduce the number of maintenance and inspection work of the power source 3.

【0023】続いてこのような表示器10を監視する監
視装置およびその監視装置から送信される信号により監
視動作を行う監視センタについて図を用いて説明する。
図2は、本発明の実施形態の設備監視システムの構成ブ
ロック図である。
Next, a monitoring device that monitors the display 10 and a monitoring center that performs a monitoring operation by a signal transmitted from the monitoring device will be described with reference to the drawings.
FIG. 2 is a configuration block diagram of the equipment monitoring system of the embodiment of the present invention.

【0024】倉庫、機械室、電気室などの暗室内に配置
された設備(図示せず)に表示器10が配設されてい
る。一方、表示器10の発光手段4と対向した位置に部
屋全体あるいはその一部を撮像する撮像手段5が設置さ
れている。撮像手段5は、例えば、常時撮影するITV
カメラ、または、静止画像あるいは動画像を取得するデ
ジタルカメラなどである。撮像手段5は、常時または間
歇的に発光手段4を視野に含む画像を取得し、画像信号
を出力している。この画像信号は、アナログ信号または
デジタル信号の何れかである。この画像信号が画像処理
装置6へ送信される。なお、設備本体が屋外など暗所で
ない場所に存在する場合であっても、発光手段4と撮像
手段5とが、光の入らない箱など暗所に収められていれ
ばよい。
The display 10 is installed in equipment (not shown) arranged in a dark room such as a warehouse, a machine room, and an electric room. On the other hand, an image pickup means 5 for picking up an image of the entire room or a part thereof is installed at a position facing the light emitting means 4 of the display device 10. The image pickup means 5 is, for example, an ITV that constantly photographs.
It is a camera or a digital camera that acquires a still image or a moving image. The imaging unit 5 constantly or intermittently acquires an image including the light emitting unit 4 in its field of view and outputs an image signal. This image signal is either an analog signal or a digital signal. This image signal is transmitted to the image processing device 6. Even if the equipment body is located in a non-dark place such as outdoors, the light emitting means 4 and the imaging means 5 may be housed in a dark place such as a light-tight box.

【0025】画像処理装置6では、入力される画像信号
がアナログ信号であるならばA/D変換器によりディジ
タル信号に変換された上で装置内へ取り込まれ、また、
入力される信号がディジタル信号であるならばそのまま
装置内へ取り込まれ、画像処理に利用されることとな
る。
In the image processing device 6, if the input image signal is an analog signal, it is converted into a digital signal by an A / D converter and then taken into the device.
If the input signal is a digital signal, it is taken into the device as it is and used for image processing.

【0026】この画像処理について概略説明する。図3
は、画像処理例を説明する説明図である。例えば、暗室
内に表示器10が一台しかないような場合があるが、そ
の場合は発光の有無を検出することとなる。具体的には
図3(a)で示すように暗闇(図3(a)では斜線領
域)における発光(図3(a)では白丸)を検出すれ
ば、設備または暗室に異常が発生したことが検出でき
る。この検出は色の相違や輝度の相違する領域を検出す
るというものであり、画像処理における基本的な処理で
ある。このように発光の有無を検出することで設備の異
常の有無を検出できるようになる。
The image processing will be briefly described. Figure 3
[Fig. 6] is an explanatory diagram illustrating an example of image processing. For example, there is a case where there is only one display device 10 in the dark room. In that case, the presence or absence of light emission is detected. Specifically, as shown in FIG. 3A, when light emission (white circle in FIG. 3A) in darkness (hatched area in FIG. 3A) is detected, it is determined that an abnormality occurs in the facility or the dark room. Can be detected. This detection is to detect areas having different colors and different brightness, and is a basic process in image processing. By detecting the presence / absence of light emission in this manner, it becomes possible to detect the presence / absence of an abnormality in the equipment.

【0027】また、暗室内に表示器10が複数台あるよ
うな場合があるが、その場合は発光の有無を検出しただ
けでは、どの設備に異常が生じたか判別できない。そこ
で、発光手段の相対的位置関係およびその相対的位置に
ある発光手段はどの設備の何の異常の種別に該当するか
についての項目を予め登録しておく。このようにすれ
ば、表示器10が複数ある場合であっても、どの設備に
異常が起こっているかを判別できる。
In some cases, there may be a plurality of display devices 10 in the dark room. In that case, it is not possible to determine which equipment has an abnormality simply by detecting the presence or absence of light emission. Therefore, items regarding the relative positional relationship of the light emitting means and the type of abnormality of which equipment the light emitting means at the relative position correspond to are registered in advance. By doing so, even when there are a plurality of display devices 10, it is possible to determine which equipment has an abnormality.

【0028】具体的には、図3(b)で示すように暗闇
(図3(b)では斜線領域)における発光(図3(b)
では白丸)を検出し、さらに相対位置を検出する。例え
ば、図3(b)で示す最も左側の発光の位置を(0,
0)を基準とし、中央の発光の相対位置が(a1,b
1)、最も右側の発光の相対位置が(a2,b2)と特
定できる。このように位置(0,0)の発光は基準を確
定させるため、どの発光手段が発光する場合でも必ず発
光する基準用の発光手段とする。基準座標(0,0)か
らの相対位置に関連づけて設備の種類および設備の状態
を登録しておけば、暗室内における複数設備のうち何れ
の設備に如何なる異常が発生したかを判別できるように
なる。
Specifically, as shown in FIG. 3B, light emission in the dark (hatched area in FIG. 3B) (FIG. 3B)
Then, the white circle) is detected, and further the relative position is detected. For example, the leftmost light emission position shown in FIG.
0) as a reference, and the relative position of the central light emission is (a1, b
1), the relative position of the rightmost light emission can be specified as (a2, b2). As described above, the light emission at the position (0, 0) determines the reference, and therefore, the reference light emitting means is always emitted regardless of which light emitting means emits light. By registering the type of equipment and the state of the equipment in association with the relative position from the reference coordinates (0, 0), it is possible to determine what kind of abnormality has occurred in which of the plurality of equipment in the dark room. Become.

【0029】さらに、撮像手段5が動かないように強固
に固定し、画像のある絶対位置にある発光手段はどの設
備の何の異常に該当するかについての項目を予め登録し
ておく。このようにすれば、表示器10が複数ある場合
であっても、どの設備に異常が起こっているかを判別で
きる。この場合、相対位置では必要となる基準用の発光
手段が不要となり、さらに構成を簡素にすることができ
る。
Further, the image pickup means 5 is firmly fixed so as not to move, and an item regarding what kind of abnormality of which equipment the light emitting means at an absolute position in the image corresponds to is registered in advance. By doing so, even when there are a plurality of display devices 10, it is possible to determine which equipment has an abnormality. In this case, the reference light emitting means required at the relative position is unnecessary, and the configuration can be further simplified.

【0030】具体的には、図3(b)で示すように暗闇
(図3(b)では斜線領域)における発光(図3(b)
では白丸)を検出する。例えば、図3(b)で示す最も
左側の発光の位置が(0,0)であり、中央の発光の絶
対位置が(a1,b1)、最も右側の発光の絶対位置が
(a2,b2)と特定されたならば、それら絶対位置に
関連づけてどの設備がどのような状態になったかを登録
しておけば、設備または暗室に異常が発生したことを判
別できるようになる。
Specifically, as shown in FIG. 3B, light emission in the dark (hatched area in FIG. 3B) (FIG. 3B)
Then, the white circle) is detected. For example, the leftmost light emission position shown in FIG. 3B is (0, 0), the central light emission absolute position is (a1, b1), and the rightmost light emission absolute position is (a2, b2). If it is specified, by registering which equipment is in what kind of state in association with the absolute position, it is possible to determine that an abnormality has occurred in the equipment or the dark room.

【0031】さらには、表示器の発光手段の点灯表示色
を変えて表示するようにし、画像処理により色を判別し
て、この色を発光する発光手段はどの設備の何の異常の
種別に該当するかについての項目を予め登録しておく。
このようにすれば、表示器10が複数ある場合であって
も、何れの設備に如何なる異常が起こっているかを判別
できる。また、相対位置および絶対位置を登録する必要
はなくなる。
Further, the display color of the light emitting means of the display is changed and displayed, the color is discriminated by image processing, and the light emitting means emitting this color corresponds to what kind of abnormality of what equipment. The item about whether to do it is registered in advance.
By doing so, even when there are a plurality of display devices 10, it is possible to determine what kind of abnormality has occurred in which equipment. Also, it is not necessary to register the relative position and the absolute position.

【0032】画像処理装置6は、このようにして暗室内
の設備の状態を判定し、通知データを生成する。この通
知データは、例えば、テキストデータであって、どの設
備にどのような状態変化が発生したかを通知するデータ
である。また、テキストデータに代えてHTMLデータ
等適宜使用することができる。要するに設備状態の異常
を通知するデータであればよい。データの具体的構成に
ついては、実状に応じて適宜選択される。
The image processing device 6 determines the state of the equipment in the dark room in this manner and generates notification data. This notification data is, for example, text data, and is data that notifies what kind of state change has occurred in which equipment. Also, instead of the text data, HTML data or the like can be appropriately used. In short, any data can be used as long as it is a notification of an abnormality in the equipment state. The specific structure of the data is appropriately selected according to the actual situation.

【0033】このように画像処理装置6から出力される
通知データは、図2で示す通信線30を介して暗室外の
遠隔地である監視センタ40へ送信される。なお、通信
線30は特に有線に限定される趣旨ではなく、無線を含
めることができる。有線または無線のいずれを使用する
かは適宜選択される。監視センタ40にあるコンピュー
タ7は受信した通知データに基づいて、図示しないディ
スプレイ装置に通知内容を表示して監視員に設備異常を
通知する。さらには音声等を用いて監視員に注意を喚起
するようにしてもよい。
The notification data thus output from the image processing device 6 is transmitted to the monitoring center 40, which is a remote place outside the dark room, via the communication line 30 shown in FIG. Note that the communication line 30 is not limited to being wired, and may include wireless. Whether to use wired or wireless is appropriately selected. Based on the received notification data, the computer 7 in the monitoring center 40 displays the content of the notification on a display device (not shown) to notify the monitoring staff of the facility abnormality. Furthermore, a voice may be used to call attention to the surveillance staff.

【0034】以上説明したように、通常は暗闇状態であ
る暗室に設置された設備の故障や異常の発生は、表示器
10の発光を撮像手段5が捉えて画像を取得し、発光位
置を解析して、設備の種類および状態を認識し、監視セ
ンタ40側に警報である通知データを送信することによ
り、監視員が現場に駆けつけて対処できる。
As described above, when a failure or abnormality of equipment installed in a dark room which is normally in a dark state occurs, the image pickup means 5 captures the light emission of the display 10 to obtain an image, and the light emission position is analyzed. Then, by recognizing the type and state of the equipment and transmitting the notification data that is an alarm to the monitoring center 40 side, the monitoring staff can rush to the site and take action.

【0035】なお、上述の接点2を利用して、設備の故
障や異常を暗室が設置されている施設内へサイレンやベ
ル等警報を発して知らしめるようにすれば、施設内にい
る者が直ちに駆けつけて設備異常に対処することができ
る。さらに、図2で示すように、例えば、パーソナルコ
ンピュータ7をLAN(Local Area Network)で接続
して複数個所から監視可能とし、異常事態発生の際に最
も近い場所にいる監視員に直ちに現場へ駆けつけて対処
するようにも出来る。これら構成も適宜選択される。
By using the above-mentioned contact 2 to notify a facility failure or abnormality to a facility equipped with a darkroom by issuing an alarm such as a siren or a bell, the person in the facility can be notified. You can immediately rush to deal with equipment abnormalities. Furthermore, as shown in FIG. 2, for example, a personal computer 7 can be connected by a LAN (Local Area Network) so that monitoring can be performed from a plurality of locations, and when an abnormal situation occurs, an observer at the nearest location immediately rushes to the site. You can also deal with it. These configurations are also selected appropriately.

【0036】続いて本発明の他の実施形態について説明
する。図4は、本発明の他の実施形態の設備監視システ
ムの構成ブロック図である。図2で示した全体システム
では、暗室から監視センタ40までは通信線30を介し
て接続されるというものであり、例えば、暗室および監
視センタ40が同じ施設内に設置される場合を特に想定
していた。本実施形態では、暗室と監視センタ40が同
じ施設内にない場合であって、遠隔地にいる監視員に設
備状態を通知する場合を想定している。
Next, another embodiment of the present invention will be described. FIG. 4 is a configuration block diagram of an equipment monitoring system according to another embodiment of the present invention. In the entire system shown in FIG. 2, the dark room and the monitoring center 40 are connected via the communication line 30. For example, it is particularly assumed that the dark room and the monitoring center 40 are installed in the same facility. Was there. In the present embodiment, it is assumed that the dark room and the monitoring center 40 are not in the same facility, and that a monitoring person at a remote place is notified of the equipment state.

【0037】具体的には、図4で示すように、監視装置
20および監視センタ40の監視用サーバ8との間を、
アナログモデム50又はPHSモデム60を介してネッ
トワーク70に接続し、通知データが送信されるものと
する。この監視用サーバ8は、ネットワーク80を介し
て電子メール交換が可能な携帯電話やPDA(Personal
Digital Assistant)・パームトップパソコンなどの携
帯情報端末90やパーソナルコンピュータ100へ電子
メールを送信する。ネットワーク80は、特にインター
ネットが利用可能なネットワークであり、ISDN(In
tegrated Service Digital Network)回線、アナログ公
衆回線、各種専用線等を含むものである。
Specifically, as shown in FIG. 4, between the monitoring device 20 and the monitoring server 8 of the monitoring center 40,
It is assumed that the notification data is transmitted by connecting to the network 70 via the analog modem 50 or the PHS modem 60. The monitoring server 8 is a mobile phone or PDA (Personal Personal) that can exchange e-mails via the network 80.
Digital Assistant) -Sends an e-mail to the personal digital assistant 100 such as a palmtop personal computer or the personal computer 100. The network 80 is a network in which the Internet can be used, and ISDN (In
It includes integrated service digital network) lines, analog public lines, and various leased lines.

【0038】このような全体構成とすることで、監視装
置20で画像処理した信号を遠隔の監視センタ40側に
通知データが伝送され、携帯情報端末90やパーソナル
コンピュータ100に電子メールとして送られるので、
例えば、携帯情報端末90へ送信された電子メールを見
た巡回中の監視員が巡回を途中で止めて直ちに暗室へ向
かうことができるようになり、また、パーソナルコンピ
ュータ100へ送信された電子メールを見た遠隔地の監
視員が車などを利用して駆けつけることができるように
なる。このように本実施形態では遠隔地にいる監視員も
設備異常を検知できるよになり、より利便性が高いシス
テムとすることができる。
With such an overall configuration, the signal processed by the monitoring device 20 is transmitted to the remote monitoring center 40 as notification data, and is sent to the portable information terminal 90 or the personal computer 100 as an electronic mail. ,
For example, a patrol observer who is watching the e-mail sent to the portable information terminal 90 can stop the patrol midway and immediately go to the dark room. Further, the e-mail sent to the personal computer 100 Observers in remote areas will be able to rush by using a car. As described above, according to the present embodiment, it becomes possible for a surveillance staff member at a remote place to detect the equipment abnormality, and the system can be made more convenient.

【0039】さらに、図4に示す設備監視システムにお
いて、各監視装置20に設置している画像処理装置6に
代えて、単に撮像手段5から出力される画像信号をアナ
ログモデム50又はPHSモデム60を介してネットワ
ーク70に接続し伝送する画像伝送装置を備え、画像認
識を行う高い処理能力を持つ画像処理装置を遠隔地の監
視センタ40にのみ配置しても良い。このようなシステ
ムを採用して、例えば、有人の監視センタ40から、定
期的に分散配置した設備の監視装置を呼び出し、巡視対
象の画像を収集し、各画像から設備状態を認識する巡視
機能をサポートする、或は、遠隔地に出向くことなく現
場の設備に対する巡視業務の省力化が行えるなど、適宜
目的に応じてシステム構築できる。
Further, in the equipment monitoring system shown in FIG. 4, instead of the image processing device 6 installed in each monitoring device 20, the analog modem 50 or the PHS modem 60 is simply used as the image signal output from the image pickup means 5. It is also possible to provide an image transmission device that is connected to the network 70 via the network and transmits the image, and an image processing device having a high processing capability for image recognition may be arranged only in the remote monitoring center 40. By adopting such a system, for example, a manned monitoring center 40 calls a monitoring device for equipment that is regularly arranged in a distributed manner, collects images of inspection targets, and has a patrol function that recognizes the equipment state from each image. It is possible to construct a system according to the purpose, such as supporting or labor saving of on-site facilities without going to a remote place.

【0040】[0040]

【発明の効果】以上、本発明によれば、倉庫、機械室、
電気室などの暗室でランプ・電灯・蛍光灯のような照明
設備を施すことなく、設備の状態を検知し、その状態を
遠隔地にある監視センタへ通知する設備監視システムを
提供することができる。
As described above, according to the present invention, a warehouse, a machine room,
It is possible to provide an equipment monitoring system that detects the status of equipment and notifies the status to a remote monitoring center without providing lighting equipment such as lamps, electric lights, and fluorescent lights in a dark room such as an electric room. .

【図面の簡単な説明】[Brief description of drawings]

【図1】本発明の実施形態の設備監視システムに含まれ
る表示器を説明するブロック図である。
FIG. 1 is a block diagram illustrating a display unit included in an equipment monitoring system according to an embodiment of the present invention.

【図2】本発明の実施形態の設備監視システムの構成ブ
ロック図である。
FIG. 2 is a configuration block diagram of an equipment monitoring system according to an embodiment of the present invention.

【図3】画像処理例を説明する説明図である。FIG. 3 is an explanatory diagram illustrating an example of image processing.

【図4】本発明の他の実施形態の設備監視システムの構
成ブロック図である。
FIG. 4 is a configuration block diagram of an equipment monitoring system according to another embodiment of the present invention.

【符号の説明】[Explanation of symbols]

10 表示器 1 異常検知手段 1a 検知器(センサ又は計測器) 1b 制御器 2 接点 3 電源(バッテリー又は電池) 4 発光手段(LED) 20 監視装置 5 撮像手段 6 画像処理装置 30 通信線 40 監得センタ 7 パーソナルコンピュータ 8 監視用サーバ 50 アナログモデム 60 PHSモデム 70 ネットワーク 80 ネットワーク 90 携帯情報端末 100 パーソナルコンピュータ 10 Display 1 Abnormality detection means 1a Detector (sensor or measuring instrument) 1b controller 2 contacts 3 power supply (battery or battery) 4 Light emitting means (LED) 20 Monitoring device 5 Imaging means 6 Image processing device 30 communication lines 40 supervision center 7 personal computer 8 monitoring server 50 analog modem 60 PHS modem 70 network 80 network 90 Mobile information terminal 100 personal computer

───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) H04N 7/18 H04N 7/18 D (72)発明者 川角 浩亮 東京都千代田区内幸町一丁目1番3号 東 京電力株式会社内 Fターム(参考) 5C054 AA05 CB03 CE16 CH04 DA08 EA01 EB05 FA09 FC12 FF06 HA19 5C087 AA03 AA09 AA16 AA24 AA25 AA42 BB12 BB20 BB32 BB65 BB74 DD08 DD21 DD39 EE05 EE19 FF01 FF04 FF17 FF19 FF20 GG02 GG07 GG11 GG18 GG19 5K101 KK14 MM07 NN06 NN18 ─────────────────────────────────────────────────── ─── Continuation of the front page (51) Int.Cl. 7 identification code FI theme code (reference) H04N 7/18 H04N 7/18 D (72) Inventor Hirosuke Kawasaku 1-3-1 Uchisaiwaicho, Chiyoda-ku, Tokyo No.F-term in Tokyo Electric Power Co., Inc. GG19 5K101 KK14 MM07 NN06 NN18

Claims (7)

【特許請求の範囲】[Claims] 【請求項1】設備の状態について表示する一又は複数の
表示器を監視装置が監視し、遠隔地の監視センタへ設備
の状態を通知する設備監視システムにおいて、 前記表示器は、設備の異常を検知して検知信号を出力す
る異常検知手段と、前記異常検知手段からの検知信号に
より開閉される接点と、前記接点に接続される電源と、
前記接点が異常検知により閉じられた場合に前記電源と
接続されて発光する発光手段と、を備え、 前記監視装置は、前記表示器を撮像する撮像手段と、前
記撮像手段から出力される画像信号を用いて発光の有無
を検出し、設備の状態を通知する通知データを生成し、
遠隔地の監視センタへこの通知データを伝送する画像処
理装置と、を備えることを特徴とする設備監視システ
ム。
1. A facility monitoring system in which a monitoring device monitors one or a plurality of indicators for displaying the status of the facility and notifies the monitoring center at a remote place of the status of the facility, wherein the indicator indicates an abnormality of the facility. An abnormality detection unit that detects and outputs a detection signal, a contact that is opened and closed by the detection signal from the abnormality detection unit, and a power supply connected to the contact,
A light emitting unit that is connected to the power source and emits light when the contact is closed due to abnormality detection; and the monitoring device includes an image capturing unit that captures an image of the display unit, and an image signal output from the image capturing unit. The presence or absence of light emission is detected using to generate notification data for notifying the state of equipment,
An equipment monitoring system, comprising: an image processing device that transmits this notification data to a remote monitoring center.
【請求項2】請求項1記載の設備監視システムにおい
て、 前記画像処理装置は、画像における発光の位置を検出
し、位置により設備の種類および状態を特定することを
特徴とする設備監視システム。
2. The equipment monitoring system according to claim 1, wherein the image processing device detects a position of light emission in an image and specifies a type and a state of the equipment based on the position.
【請求項3】請求項1記載の設備監視システムにおい
て、 前記画像処理装置は、画像における発光色を検出し、色
により設備の種類および状態を特定することを特徴とす
る設備監視システム。
3. The equipment monitoring system according to claim 1, wherein the image processing device detects a light emission color in an image and specifies the type and state of the equipment by the color.
【請求項4】請求項1〜請求項3の何れか一項に記載の
設備監視システムにおいて、 前記表示器の前記電源は、バッテリー又は電池であるこ
とを特徴とする設備監視システム。
4. The equipment monitoring system according to any one of claims 1 to 3, wherein the power source of the display unit is a battery or a battery.
【請求項5】請求項1〜請求項4の何れか一項に記載の
設備監視システムにおいて、 前記監視センタは、前記画像処理装置に有線又は無線に
より接続される1又は複数のパーソナルコンピュータで
あることを特徴とする設備監視システム。
5. The equipment monitoring system according to any one of claims 1 to 4, wherein the monitoring center is one or a plurality of personal computers connected to the image processing apparatus by wire or wirelessly. An equipment monitoring system characterized by the above.
【請求項6】請求項1〜請求項4の何れか一項に記載の
設備監視システムにおいて、 前記監視センタと前記画像処理装置との間にネットワー
クが介在することを特徴とする設備監視システム。
6. The equipment monitoring system according to claim 1, wherein a network is interposed between the monitoring center and the image processing apparatus.
【請求項7】請求項1〜請求項6の何れか一項に記載の
設備監視システムにおいて、 前記監視装置は、前記表示器を撮像する撮像手段と、前
記撮像手段から出力される画像信号を遠隔地の監視セン
タへ伝送する画像伝送装置と、 を備え、 遠隔地の監視センタは、伝送された画像信号を用いて発
光の有無を検出し、設備の状態を認識する画像処理装置
と、 を備えることを特徴とする設備監視システム。
7. The equipment monitoring system according to any one of claims 1 to 6, wherein the monitoring device includes an image pickup unit for picking up an image of the display, and an image signal output from the image pickup unit. An image transmission device for transmitting to a remote monitoring center, and an image processing device for recognizing the state of equipment by detecting the presence or absence of light emission using the transmitted image signal. An equipment monitoring system characterized by comprising.
JP2002033711A 2002-02-12 2002-02-12 Equipment monitoring system Expired - Fee Related JP3922534B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002033711A JP3922534B2 (en) 2002-02-12 2002-02-12 Equipment monitoring system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002033711A JP3922534B2 (en) 2002-02-12 2002-02-12 Equipment monitoring system

Publications (2)

Publication Number Publication Date
JP2003233882A true JP2003233882A (en) 2003-08-22
JP3922534B2 JP3922534B2 (en) 2007-05-30

Family

ID=27776423

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002033711A Expired - Fee Related JP3922534B2 (en) 2002-02-12 2002-02-12 Equipment monitoring system

Country Status (1)

Country Link
JP (1) JP3922534B2 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006072821A (en) * 2004-09-03 2006-03-16 Mitsubishi Electric Building Techno Service Co Ltd Warning notification system
JP2006332733A (en) * 2005-05-23 2006-12-07 Hitachi Electronics Service Co Ltd Monitoring service support system utilizing camera image
JP2009246688A (en) * 2008-03-31 2009-10-22 Jfe Steel Corp Apparatus and method of monitoring inside of control panel
JP2014052917A (en) * 2012-09-07 2014-03-20 Sogo Keibi Hosho Co Ltd Security system, and security method
JP2016006595A (en) * 2014-06-20 2016-01-14 日本電気通信システム株式会社 State monitoring system and state monitoring method
JP2018190042A (en) * 2017-04-28 2018-11-29 Kyb株式会社 Monitoring system

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006072821A (en) * 2004-09-03 2006-03-16 Mitsubishi Electric Building Techno Service Co Ltd Warning notification system
JP2006332733A (en) * 2005-05-23 2006-12-07 Hitachi Electronics Service Co Ltd Monitoring service support system utilizing camera image
JP2009246688A (en) * 2008-03-31 2009-10-22 Jfe Steel Corp Apparatus and method of monitoring inside of control panel
JP2014052917A (en) * 2012-09-07 2014-03-20 Sogo Keibi Hosho Co Ltd Security system, and security method
JP2016006595A (en) * 2014-06-20 2016-01-14 日本電気通信システム株式会社 State monitoring system and state monitoring method
JP2018190042A (en) * 2017-04-28 2018-11-29 Kyb株式会社 Monitoring system

Also Published As

Publication number Publication date
JP3922534B2 (en) 2007-05-30

Similar Documents

Publication Publication Date Title
US5382943A (en) Remote monitoring unit
US7650144B2 (en) Monitoring control apparatus, monitoring system, monitoring method, wireless communication apparatus and wireless communication system
KR100780601B1 (en) Apparatus and method for intellectual integration auto controlling
KR100754898B1 (en) Emergency call system for voice communication and video transmission through wire and wireless communication
JP2002342861A (en) Remote monitoring system, method and program, and recording medium recording the same and readable by computer
KR100793390B1 (en) System for monitoring environments of unmanned station
JP2003233882A (en) Equipment monitoring system
JP4625121B2 (en) Control device
JP4335485B2 (en) Control device
JP3994558B2 (en) Monitoring and warning device
KR101074470B1 (en) System for finding the location using the call alarm
KR20110103690A (en) Led light having cctv system
JP2008148138A (en) Monitoring system
JP4918687B2 (en) Alarm indicator monitoring system
JP2016197823A (en) Camera module, illumination unit, and detection system
CN211180641U (en) Factory monitoring system
JP6399572B1 (en) Wireless communication device for fire and fire alarm system
JP6564486B1 (en) Video surveillance device
JP2001148844A (en) Abnormality monitoring system
JPH06111149A (en) Monitoring sensor
JP3107754B2 (en) Rental equipment remote monitoring system
JP2020109583A (en) Led illumination system
KR200377874Y1 (en) The cctv camera combine to intensity of illumination measurement and that of using lighting control system
JPH1188518A (en) Monitor control system
JP2004180169A (en) Lighting device and monitoring system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040720

A977 Report on retrieval

Effective date: 20060915

Free format text: JAPANESE INTERMEDIATE CODE: A971007

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060927

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061115

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070215

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070215

R150 Certificate of patent (=grant) or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100302

Year of fee payment: 3

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313117

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100302

Year of fee payment: 3

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (prs date is renewal date of database)

Year of fee payment: 6

Free format text: PAYMENT UNTIL: 20130302

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140302

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees