JP4637615B2 - Alarm device, alarm system, and alarm computer program - Google Patents

Alarm device, alarm system, and alarm computer program Download PDF

Info

Publication number
JP4637615B2
JP4637615B2 JP2005074242A JP2005074242A JP4637615B2 JP 4637615 B2 JP4637615 B2 JP 4637615B2 JP 2005074242 A JP2005074242 A JP 2005074242A JP 2005074242 A JP2005074242 A JP 2005074242A JP 4637615 B2 JP4637615 B2 JP 4637615B2
Authority
JP
Japan
Prior art keywords
alarm
area
signal
captured image
stop
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2005074242A
Other languages
Japanese (ja)
Other versions
JP2006259951A (en
Inventor
弘司 山田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chugoku Electric Power Co Inc
Original Assignee
Chugoku Electric Power Co Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chugoku Electric Power Co Inc filed Critical Chugoku Electric Power Co Inc
Priority to JP2005074242A priority Critical patent/JP4637615B2/en
Publication of JP2006259951A publication Critical patent/JP2006259951A/en
Application granted granted Critical
Publication of JP4637615B2 publication Critical patent/JP4637615B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Emergency Alarm Devices (AREA)
  • Alarm Systems (AREA)
  • Image Analysis (AREA)

Description

本発明は、対象設備に人や重機等の移動体がある程度以上近付いた場合に警報を発する技術に係り、特に、変電所等の設備に用いることに適した警報装置、警報システム及び警報用コンピュータプログラムに関する。   The present invention relates to a technique for issuing an alarm when a moving body such as a person or heavy equipment approaches a target facility more than a certain degree, and in particular, an alarm device, an alarm system, and an alarm computer suitable for use in facilities such as a substation Regarding the program.

変電所では、監視制御業務の他に、巡視や保守に伴う作業が必要になり、場合によっては設備工事も必要になる。これに対して、変電所の設備、例えば変圧器等は、通常通電されて充電状態となっているために、感電の危険性から巡視、保守、工事を行なう作業者の安全を確保する必要がある。   In substations, in addition to monitoring and control work, work associated with inspection and maintenance is required, and in some cases, equipment work is also required. In contrast, substation equipment, such as transformers, is normally energized and charged, so it is necessary to ensure the safety of workers performing inspection, maintenance, and construction due to the risk of electric shock. is there.

このようなことから、変電所では、通電されて充電状態となっている充電部に近接した作業を行なう場合、
・図面上で危険箇所を図示する
・作業現場で危険範囲を標示する
・作業現場に監視員を配備して監視する
というような安全確保のための方策が採られている。ところが、これらの方策は、いずれも人間の判断に基づく安全確保策であるため、ヒューマンエラーが皆無とは言えない。
For this reason, in the substation, when working near the charging unit that is energized and charged,
・ Dangerous points are illustrated on the drawings ・ Danger range is indicated at the work site ・ Measures for ensuring safety such as deploying and monitoring a supervisor at the work site are adopted. However, since all of these measures are safety measures based on human judgment, it cannot be said that there is no human error.

そこで、人体等の移動体を人間の判断に基づくことなく自動的に検出する技術を利用し、変電所の危険設備に対する移動体の近接検知を実現することが考えられる。移動体を検出する技術としては、例えば、特許文献1〜4に記載されたような技術が従来から考えられている。   Therefore, it is conceivable to realize proximity detection of a moving body with respect to a dangerous facility at a substation by using a technology that automatically detects a moving body such as a human body without being based on human judgment. As a technique for detecting a moving body, for example, techniques described in Patent Documents 1 to 4 have been conventionally considered.

特許文献1には、光学的、静電容量的、電磁誘導的な原理に基づく近接スイッチで人体検知することが記載されている(段落0025。
特許文献2には、ノンプリズムレーザスキャナによって人体検知することが記載されている(段落0005〜0006)。
特許文献3には、超音波センサによる人体検知と焦電型赤外線センサによる人体検知が記載されている(段落0002〜0005)。
特許文献4には、反射型赤外線センサによる人体検知が記載されている(段落0008)。
その他、カメラの撮像画像に基づいて移動体を検出する技術も既に知られている。
特開平05−211708号公報 特許第3125969号公報(特開平08−160127号公報) 特開平08−218310号公報 特開2004−264210公報
Patent Document 1 describes that a human body is detected by a proximity switch based on optical, capacitive, and electromagnetic induction principles (paragraph 0025).
Patent Document 2 describes that a human body is detected by a non-prism laser scanner (paragraphs 0005 to 0006).
Patent Document 3 describes human body detection using an ultrasonic sensor and human body detection using a pyroelectric infrared sensor (paragraphs 0002 to 0005).
Patent Document 4 describes human body detection using a reflective infrared sensor (paragraph 0008).
In addition, a technique for detecting a moving body based on a captured image of a camera is already known.
Japanese Patent Laid-Open No. 05-211708 Japanese Patent No. 3125969 (Japanese Patent Laid-Open No. 08-160127) JP 08-218310 A JP 2004-264210 A

変電所では、設備の種類に応じて近接許容距離が相違する。例えば、送電線を例に挙げると、ある送電線の近接許容距離は0.6mであるのに対して、別の送電線の近接許容距離は1.5mであるようなことが生じ得る。このような近接許容距離が異なる各種の設備
は、同一変電所内で混在しているのが一般的である。
In a substation, the allowable proximity distance differs depending on the type of equipment. For example, taking a power transmission line as an example, it may occur that a proximity allowable distance of one power transmission line is 0.6 m, whereas a proximity allowable distance of another power transmission line is 1.5 m. In general, various types of equipment having different proximity permissible distances are mixed in the same substation.

ところが、このような設備の種類に応じた近接許容距離の相違ということを考慮した場合、それぞれの設備に対して人体等の移動体を検知するためのセンサ類をそれぞれの近接許容距離に合わせて設置しなければならないとなると、大変な労力が要求されるという問題がある。しかも、設備工事によって設備の変更等が生ずると、その都度、センサ類を設置し直さなければならず、極めて煩わしい。   However, when considering the difference in proximity permissible distance according to the type of equipment, the sensors for detecting a moving body such as a human body for each equipment are matched to the permissible proximity distance. When it must be installed, there is a problem that a great deal of labor is required. In addition, whenever a facility change occurs due to facility construction, the sensors must be re-installed each time, which is extremely troublesome.

前述した特許文献2には、その詳細は不明であるが、テレビモニタの画面上で警戒区域を設定することが記載されている(段落0011)。しかしながら、近接許容距離が数値として予め決められている場合、テレビモニタの画面上でその数値として予め決められた近接許容距離を設備毎に設定するとなると、その作業は容易ではない。   Although the details are unknown in Patent Document 2 described above, it is described that a warning area is set on the screen of a television monitor (paragraph 0011). However, when the permissible proximity distance is predetermined as a numerical value, the operation is not easy if the predetermined allowable proximity distance is set for each facility on the screen of the television monitor.

以上、従来技術及びその課題を、変電所を例に挙げて説明したが、このような課題は変電所に限った課題ではなく、類似の施設に対して普遍的な課題である。   As mentioned above, although the prior art and its subject were demonstrated taking the substation as an example, such a subject is not a subject limited to a substation but a universal subject with respect to a similar facility.

本発明は、対象設備に対する人体等の移動体の近接検知を自動化するに際して、その検知範囲の設定作業を容易にすることを目的とする。   An object of the present invention is to facilitate the setting operation of the detection range when automating the proximity detection of a moving body such as a human body with respect to a target facility.

上記目的を達成するために本発明の警報装置は、表示装置(605)と、入力装置(607)と、対象設備の温度を検知する赤外線温度センサ(501)と、カメラ(301)によって撮影された対象設備の撮像画像を画像信号として受信する手段(603)と、前記画像信号に基づいて前記撮像画像を前記表示装置に表示出力する手段(604)と、前記表示装置に表示出力された前記撮像画像について前記入力装置による所望位置の指定を、該所望位置に対応する対象設備の指定を伴い、許容する手段(606)と、前記赤外線温度センサの出力信号を受信する手段(611)と、前記指定された所望位置と重なり合う前記受信した赤外線温度センサの出力信号に基づいて判別される高温位置から、前記指定された対象設備毎に予め設定された距離だけ離反した位置までの範囲である警報領域(C)を設定し記憶領域(609)に記憶する手段(608)と、前記撮像画像を解析して前記警報領域に移動体(D)が侵入したことを判定する手段(612)と、前記警報領域への前記移動体の侵入を判定した場合には警報器(401)に警報信号を出力する手段(612)と、を備える。 In order to achieve the above object, the alarm device of the present invention is photographed by a display device (605), an input device (607), an infrared temperature sensor (501) for detecting the temperature of the target equipment, and a camera (301). Means (603) for receiving a captured image of the target facility as an image signal, means (604) for displaying and outputting the captured image on the display device based on the image signal, and the display output on the display device Means (606) for permitting designation of a desired position by the input device for a captured image with designation of target equipment corresponding to the desired position ; means for receiving an output signal of the infrared temperature sensor (611); Preset for each designated target facility from a high temperature position determined based on the received output signal of the infrared temperature sensor that overlaps the designated desired position. The distance range up away position set the warning area (C) means for storing in the storage area (609) and (608), mobile in the warning area by analyzing the captured image (D) Means (612) for determining that the vehicle has entered, and means (612) for outputting an alarm signal to the alarm device (401) when it is determined that the moving body has entered the alarm area.

本発明の警報システムは、対象設備を撮像する位置に設置され、撮像画像を画像信号として出力するカメラ(301)と、警報信号を受信することによって警報を発する警報器(401)と、前記カメラ及び前記警報器とネットワーク(701)を介して接続されるシステム制御部(601)と、を備え、前記システム制御部は、表示装置(605)と、入力装置(607)と、前記画像信号を受信する手段(603)と、前記画像信号に基づいて前記撮像画像を前記表示装置に表示出力する手段(604)と、前記表示装置に表示出力された前記撮像画像について前記入力装置による所望位置の指定を、該所望位置に対応する対象設備の指定を伴い、許容する手段(606)と、対象設備の温度を検知する赤外線温度センサ(501)の出力信号を受信する手段(611)と、前記指定された所望位置と重なり合う前記受信した赤外線温度センサの出力信号に基づいて判別される高温位置から、前記指定された対象設備毎に予め設定された距離だけ離反した位置までの範囲である警報領域(C)を設定し記憶領域(609)に記憶する手段(608)と、前記撮像画像を解析して前記警報領域に移動体(D)が侵入したことを判定する手段(612)と、前記警報領域への前記移動体の侵入を判定した場合には前記警報器に警報信号を出力する手段(612)と、を備える。 An alarm system of the present invention is installed at a position where an object facility is imaged, and outputs a captured image as an image signal (301), an alarm device (401) that issues an alarm by receiving an alarm signal, and the camera And a system control unit (601) connected to the alarm device via a network (701), the system control unit including a display device (605), an input device (607), and the image signal. A means for receiving (603), a means for displaying and outputting the captured image on the display device based on the image signal, and a position of a desired position by the input device for the captured image displayed and output on the display device. specified, with the designation of the target facility corresponding to the desired position, and means for allowing (606), out of the infrared temperature sensor for detecting the temperature of the target equipment (501) And means (611) for receiving the signal, the distance from the hot position is determined based on the output signal of the infrared temperature sensor the received overlapping with the designated desired position, which is set in advance for each target facility the specified Means (608) for setting an alarm area (C) that is a range up to a position separated by distance and storing it in the storage area (609), and the moving body (D) has entered the alarm area by analyzing the captured image Means (612) for determining this, and means (612) for outputting an alarm signal to the alarm device when it is determined that the moving body has entered the alarm area.

本発明の警報用コンピュータプログラムは、警報装置(601)が備えるコンピュータにインストールされ、このコンピュータに、カメラ(301)によって撮影された対象設備の撮像画像を画像信号として受信する機能(603)と、前記画像信号に基づいて前記撮像画像を表示装置(605)に表示出力する機能(604)と、前記表示装置に表示出力された前記撮像画像について入力装置(607)による所望位置の指定を、該所望位置に対応する対象設備の指定を伴い、許容する機能(606)と、対象設備の温度を検知する赤外線温度センサ(501)の出力信号を受信する機能(611)と、前記指定された所望位置と重なり合う前記受信した赤外線温度センサの出力信号に基づいて判別される高温位置から、前記指定された対象設備毎に予め設定された距離だけ離反した位置までの範囲である警報領域(C)を設定し記憶領域(609)に記憶する機能(608)と、前記撮像画像を解析して前記警報領域に移動体(D)が侵入したことを判定する機能(612)と、前記警報領域への前記移動体の侵入を判定した場合には警報器(401)に警報信号を出力する機能(612)と、を実行させる。 The alarm computer program of the present invention is installed in a computer included in the alarm device (601), and the computer receives a captured image of the target facility captured by the camera (301) as an image signal (603). A function (604) for displaying and outputting the captured image on a display device (605) based on the image signal , and a designation of a desired position by the input device (607) for the captured image displayed and output on the display device, A function (606) that allows and specifies the target equipment corresponding to the desired position, a function (611) that receives the output signal of the infrared temperature sensor (501) that detects the temperature of the target equipment, and the designated desired From the high temperature position determined based on the received output signal of the infrared temperature sensor that overlaps the position, the specified pair Function of storing only a preset distance for each facility range up away position set the warning area (C) storage area (609) and (608), the warning area by analyzing the captured image A function (612) for determining that the mobile body (D) has entered, and a function (612) for outputting an alarm signal to the alarm device (401) when it is determined that the mobile body has entered the alarm area. , Execute.

本発明によれば、対象設備に対する人体等の移動体の近接検知を自動化するに際して、その検知範囲の設定作業を容易にすることができる。   ADVANTAGE OF THE INVENTION According to this invention, when automating proximity | contact detection of moving bodies, such as a human body, with respect to object equipment, the setting operation | work of the detection range can be made easy.

本発明の実施の一形態を図1ないし図17に基づいて説明する。   An embodiment of the present invention will be described with reference to FIGS.

図1は、本発明の実施の一形態である警報システムが用いられる変電所を介した電力供給の流れを概略的に示す模式図である。電気は発電所101、102、103で作り出される。発電所101、102、103としては、水力発電所101、火力発電所102、原子力発電所103がある。これらの発電所101、102、103で作られた電気は、送電線111で繋がれた複数の変電所121、122を経由して大規模又は中規模な送り先に送られ、あるいは、変電所121、122から配電線112で繋がれた配電設備131を経由して引込線113により小規模な送り先に送られる。大規模な送り先は、例えば大工場141、鉄道142等である。中規模な送り先は、例えば中小工場143、ビル144等である。小規模な送り先は、例えば商店145、街路灯146、一般家庭147等である。   FIG. 1 is a schematic diagram schematically showing a flow of power supply through a substation in which an alarm system according to an embodiment of the present invention is used. Electricity is produced at the power plants 101, 102, 103. As the power plants 101, 102, and 103, there are a hydro power plant 101, a thermal power plant 102, and a nuclear power plant 103. The electricity generated by these power plants 101, 102, 103 is sent to a large or medium-scale destination via a plurality of substations 121, 122 connected by a transmission line 111, or the substation 121 , 122 through a power distribution facility 131 connected by a power distribution line 112 and sent to a small destination by a lead-in wire 113. Large-scale destinations are, for example, the large factory 141, the railway 142, and the like. Medium-scale destinations are, for example, small and medium factories 143, buildings 144, and the like. The small destinations are, for example, a store 145, a street light 146, a general household 147, and the like.

発電所101、102、103で作られた電気は、22万〜11万ボルトで一次変電所121に送られる。一次変電所121では、送られてきた電気を11万〜6万6,000ボルトに降圧し、配電用変電所122、大工場141、鉄道142等に送電する。配電用変電所122は、更に2万2,000〜6,000ボルトに降圧し、送電線111で中小工場143、ビル144に送電し、配電線112で配電設備131に送電する。このように、変電所121、122は、送り先141〜147に合わせて電圧を上げ(昇圧)下げ(降圧)したりするのが主要な役割である。その他、変電所121、122は、送電電圧を一定に保つための調整をしたり、故障が生じた送電線111や配電線112への送電を遮断したり、水力発電所101、火力発電所102、原子力発電所103の運転停止などに合せた電力の流れの調整等を行なっている。   Electricity generated by the power plants 101, 102, 103 is sent to the primary substation 121 at 220,000 to 110,000 volts. In the primary substation 121, the transmitted electricity is stepped down to 110,000-66,000 volts and transmitted to the distribution substation 122, the large factory 141, the railway 142, and the like. The distribution substation 122 further reduces the voltage to 22,000 to 6,000 volts, transmits power to the small and medium factories 143 and the building 144 via the transmission line 111, and transmits power to the distribution facility 131 via the distribution line 112. Thus, the main roles of the substations 121 and 122 are to increase (boost) or lower (decrease) the voltage in accordance with the destinations 141 to 147. In addition, the substations 121 and 122 make adjustments to keep the transmission voltage constant, cut off the transmission to the transmission line 111 and the distribution line 112 in which a failure has occurred, the hydropower station 101 and the thermal power station 102. The power flow is adjusted in accordance with the shutdown of the nuclear power plant 103.

本実施の形態の警報システムは、一次変電所121での使用に適した警報システムとして構築されている。もっとも、このことは、本発明の警報システムが一次変電所121でのみ使用されることを意図しているわけではない。本発明の警報システムは、発電所101、102、103、配電用変電所212、配電設備131、送電線111、配電線112、引込線113等、あるいは、図1に例示しない他の設備等、数多くの設備等で使用可能である。   The alarm system of the present embodiment is constructed as an alarm system suitable for use in the primary substation 121. However, this does not mean that the alarm system of the present invention is used only in the primary substation 121. The alarm system of the present invention includes a large number of power plants 101, 102, 103, distribution substation 212, power distribution equipment 131, power transmission line 111, power distribution line 112, service line 113, or other equipment not illustrated in FIG. It can be used with other facilities.

図2は、一次変電所121の概略配置を示す模式図である。一次変電所121は、変電設備201とオフィス202とから構成されている。変電設備201は、変電に直接的又は間接的に必要な各種の設備を含む。変電設備201とオフィス202とは、各種の信号線203を介して接続されている。   FIG. 2 is a schematic diagram showing a schematic arrangement of the primary substation 121. The primary substation 121 includes a substation facility 201 and an office 202. The substation equipment 201 includes various kinds of equipment required directly or indirectly for substation. The substation equipment 201 and the office 202 are connected via various signal lines 203.

図3は、変電設備201の一例を示す模式図である。変電設備201の一例として、設備A、設備B、設備C及び熱源Xが設けられている。これらの設備A、設備B、設備Cは、例えば、変圧器、遮断器、断路器、避雷器、計器用変成器、電線・ケーブル、配電盤201a(図4、図10参照)、調相設備、中継点機器であったり、それらを一部に含んでいたりする。設備A、設備B、設備Cは、ガス絶縁開閉装置(GIS)、キュービクルであったり、それらの一部に含んでいたりしても良い。熱源Xは、例えばボイラ、蒸気配管等である。   FIG. 3 is a schematic diagram illustrating an example of the substation equipment 201. As an example of the substation equipment 201, equipment A, equipment B, equipment C, and a heat source X are provided. These equipment A, equipment B, and equipment C are, for example, transformers, circuit breakers, disconnectors, lightning arresters, instrument transformers, electric wires / cables, switchboard 201a (see FIGS. 4 and 10), phase adjusting equipment, relays. It is a point device or includes them in part. The equipment A, equipment B, and equipment C may be gas insulated switchgear (GIS), cubicles, or may be included in a part thereof. The heat source X is, for example, a boiler or a steam pipe.

図3に示す変電設備201の例では、設備Aで作業をすることを想定している。このため、設備Aを停止状態としている。これに対して、設備B及び設備Cは、電流が通っているという面で、感電の危険性が生じている。図3中、一点鎖線によって設備Bと設備Cとのそれぞれの危険領域211、211を示している。図3から明らかなように、設備Bの危険領域211bは設備Cの危険領域211cよりも広くなっている。このように、危険領域(例えば危険領域211b、211c)の範囲は、各設備(例えば設備A、B、C)の種類に応じて異なっている。また、熱源Xは、高温であるという面で、火傷の危険性を生じている。 In the example of the substation equipment 201 shown in FIG. 3, it is assumed that work is performed at the equipment A. For this reason, the facility A is in a stopped state. On the other hand, the equipment B and the equipment C have a risk of electric shock in terms of current passing therethrough. In FIG. 3, the respective dangerous areas 211 b and 211 c of the equipment B and the equipment C are indicated by a one-dot chain line. As is clear from FIG. 3, the dangerous area 211 b of the facility B is wider than the dangerous area 211 c of the facility C. As described above, the range of the dangerous area (for example, the dangerous areas 211b and 211c) differs depending on the type of each facility (for example, the facilities A, B, and C). Moreover, the heat source X has a risk of burns in terms of high temperature.

図4は、警報システムの機能ブロック図である。警報システムは、ハードウェア要素として、カメラ301、警報器401、赤外線温度センサ501、警報装置としてのシステム制御部601を有している。図4に示す機能ブロック図は、主として、システム制御部601が有するマイクロコンピュータ602(図11参照)が実行する機能を模式的に示している。以下、図5〜図9に示す模式図も用いながら、マイクロコンピュータ602(図11参照)が実行する機能を説明する。   FIG. 4 is a functional block diagram of the alarm system. The alarm system includes a camera 301, an alarm device 401, an infrared temperature sensor 501, and a system control unit 601 as an alarm device as hardware elements. The functional block diagram shown in FIG. 4 schematically shows functions mainly executed by the microcomputer 602 (see FIG. 11) included in the system control unit 601. Hereinafter, functions executed by the microcomputer 602 (see FIG. 11) will be described with reference to the schematic diagrams shown in FIGS.

ここで、図5は、カメラ301による撮像画像の一例を示す模式図である。図6は、カメラ301による撮像画像に所望位置を指定した画像の一例を示す模式図である。図7は、対象設備の選択画面の一例を示す模式図である。図8は、警報領域に人が侵入した場合の画面例を示す模式図である。図9は、停止領域に人が侵入した場合の画面例を示す模式図である。これらの図5〜図9に示す画像は、システム制御部601の表示装置605(図11参照)に表示される表示画面例である。   Here, FIG. 5 is a schematic diagram illustrating an example of an image captured by the camera 301. FIG. 6 is a schematic diagram illustrating an example of an image in which a desired position is specified in an image captured by the camera 301. FIG. 7 is a schematic diagram illustrating an example of a target facility selection screen. FIG. 8 is a schematic diagram illustrating an example of a screen when a person enters the alarm area. FIG. 9 is a schematic diagram illustrating an example of a screen when a person enters the stop area. These images shown in FIGS. 5 to 9 are display screen examples displayed on the display device 605 (see FIG. 11) of the system control unit 601.

カメラ301によって撮影された対象設備の撮像画像は、画像信号出力部302によって画像信号としてシステム制御部601に送信される。システム制御部601では、画像信号出力部302から送信されたカメラ301の撮像画像である画像信号を画像信号受信部603によって受信する。表示出力部604は、受信した画像信号に基づいて撮像画像を表示装置605に表示出力する。表示装置605に表示出力された撮像画像は、例えば図5に例示するような画像である。   A captured image of the target facility photographed by the camera 301 is transmitted to the system control unit 601 as an image signal by the image signal output unit 302. In the system control unit 601, the image signal receiving unit 603 receives an image signal that is a captured image of the camera 301 transmitted from the image signal output unit 302. The display output unit 604 displays and outputs the captured image on the display device 605 based on the received image signal. The captured image displayed and output on the display device 605 is, for example, an image illustrated in FIG.

位置指定部606は、表示装置605に表示出力された撮像画像について入力装置607(図11参照)による所望位置及びこの所望位置に位置する対象設備の指定を許容する。入力装置607は、一例としてタッチパネル607a(図11参照)を備える。そこで、所望位置の指定は、一例として、タッチパネル607aによって図6にドットパターンで示す位置Aをタッチ指定することによってなされる。こうしてタッチ指定された所望位置に位置する対象設備の指定は、一例として、図7にプルダウン表示されるプルダウンメニューBによって指定することができる。プルダウンメニューBは、設備名称Baをタッ
チパネル607aによるタッチ指定可能に表示し、プルダウンメニューBの表示領域に収まりきらない設備名称Baを表示移動ツールBbによって移動表示させることができる。
The position designation unit 606 allows designation of a desired position and target equipment located at the desired position by the input device 607 (see FIG. 11) for the captured image displayed and output on the display device 605. The input device 607 includes a touch panel 607a (see FIG. 11) as an example. Therefore, the designation of the desired position is performed by, for example, touch designation of the position A indicated by the dot pattern in FIG. 6 using the touch panel 607a. The specification of the target equipment located at the desired position that is touch-designated in this way can be specified by a pull-down menu B displayed as a pull-down in FIG. The pull-down menu B displays the equipment name Ba so that the touch designation by the touch panel 607a is possible, and the equipment name Ba that does not fit in the display area of the pull-down menu B can be moved and displayed by the display movement tool Bb.

以上、位置指定部606が、表示装置605に表示出力された撮像画像について入力装置607による所望位置及びこの所望位置に位置する対象設備の指定を許容する例を示したが、別の一例として、位置指定部606は、表示装置605に表示出力された撮像画像について入力装置607による所望位置の指定のみを許容する構成であっても良い。この場合、システム制御部601は、指定された所望位置に位置する対象設備がどの設備であるのかを予め知っていなければならない。そのために、システム制御部601は、画像信号出力部302から送信されたカメラ301の撮像画像である画像信号と設備(例えば設備A、B、C、熱源X)とを対応付けるデータ構造を持っている必要がある。   As described above, the position specifying unit 606 has shown an example that allows the input device 607 to specify the desired position and the target equipment located at the desired position for the captured image displayed and output on the display device 605. As another example, The position designation unit 606 may be configured to allow only designation of a desired position by the input device 607 for the captured image displayed and output on the display device 605. In this case, the system control unit 601 must know in advance which equipment is the target equipment located at the designated desired position. Therefore, the system control unit 601 has a data structure that associates an image signal, which is a captured image of the camera 301 transmitted from the image signal output unit 302, and equipment (for example, equipment A, B, C, heat source X). There is a need.

領域設定部608は、位置指定部606によって指定された位置に基づいて警報領域C(図8、図9参照)及び停止領域を設定し、記憶領域としての領域設定ファイル609に記憶する。警報領域Cは、対象設備に対して人間等の移動体Dが進入した場合に警報器401によって警報を鳴らすように設定される領域である。このような警報領域Cは、図3に示した危険領域211b、211cに対応している。停止領域は、対象設備に対して人間等の移動体Dが進入した場合に当該対象設備を停止させるように設定される領域である。停止領域は、警報領域Cの一部をなすが、警報領域Cよりも対象設備により近接した領域として設定されている。このような警報領域C及び停止領域の設定に際して、領域設定部608は、対象設備(例えば設備A、B、C、熱源X)毎に警報距離と停止距離とを定義する距離定義ファイル610(図12参照)を参照し、位置指定部606によって指定された位置に位置する対象設備の警報距離及び停止距離の情報を獲得し、警報領域C及び停止領域を設定する。この際、システム制御部601が有するマイクロコンピュータ602は、一例として、位置指定部606によって指定された位置から距離定義ファイル610に定義された警報距離610b及び停止距離610dだけ離反した位置までの領域を、それぞれ警報領域C及び停止領域として設定する。システム制御部601が有するマイクロコンピュータ602は、別の一例として、温度信号出力部502によってシステム制御部601に送信された赤外線温度センサ501の出力信号を温度信号受信部611により受信し、位置指定部606によって指定された位置と重なり合う部分のうち高温になっている部分から距離定義ファイル610に定義された警報距離610b及び停止距離610dだけ離反した位置までの領域を、それぞれ警報領域C及び停止領域として設定しても良い。   The area setting unit 608 sets the warning area C (see FIGS. 8 and 9) and the stop area based on the position specified by the position specifying unit 606, and stores them in the area setting file 609 as a storage area. The alarm area C is an area set so that an alarm is sounded by the alarm device 401 when a moving body D such as a human enters the target facility. Such an alarm area C corresponds to the dangerous areas 211b and 211c shown in FIG. A stop area | region is an area | region set so that the said target equipment may be stopped when the mobile bodies D, such as a person, approached with respect to the target equipment. The stop area forms part of the alarm area C, but is set as an area closer to the target facility than the alarm area C. When setting the warning area C and the stop area, the area setting unit 608 defines a distance definition file 610 that defines a warning distance and a stop distance for each target equipment (for example, equipment A, B, C, heat source X) (see FIG. 12), information on the alarm distance and stop distance of the target equipment located at the position specified by the position specifying unit 606 is acquired, and the alarm area C and stop area are set. At this time, the microcomputer 602 included in the system control unit 601 includes, as an example, an area from the position specified by the position specifying unit 606 to a position separated from the alarm distance 610b and the stop distance 610d defined in the distance definition file 610. These are set as an alarm area C and a stop area, respectively. As another example, the microcomputer 602 included in the system control unit 601 receives the output signal of the infrared temperature sensor 501 transmitted to the system control unit 601 by the temperature signal output unit 502 by the temperature signal reception unit 611, and receives the position designation unit. Areas from the part that overlaps the position specified by 606 to the position separated by the alarm distance 610b and the stop distance 610d defined in the distance definition file 610 from the part that is hot are designated as the alarm area C and the stop area, respectively. May be set.

いずれにしても、距離定義ファイル610は、対象設備(例えば設備A、B、C、熱源X)毎に警報距離610bと停止距離610dとを定義していることから、対象設備毎にそれぞれ求められる警報距離や停止距離が相違したとしても、容易に警報領域C及び停止領域を設定することが可能となる。   In any case, since the distance definition file 610 defines the alarm distance 610b and the stop distance 610d for each target facility (for example, the facilities A, B, C, and the heat source X), it is obtained for each target facility. Even if the alarm distance or the stop distance is different, the alarm area C and the stop area can be easily set.

ここまでの処理は、警報システムを用いた警報動作を実行するための準備処理となる。警報動作は、解析判定部612によって実行される。解析判定部612は、画像信号受信部603が受信したカメラ301の撮像画像である画像信号に基づいて解析処理を実行し、警報領域C又は停止領域に移動体Dが侵入したことを判定する。そして、解析判定部612は、警報領域Cへの移動体Dの侵入を判定した場合には、対象設備の近傍に配置されている警報器401の警報信号受信部402に警報信号を出力する。この際、解析判定部612は、表示装置605に警報表示を行なう。警報表示としては、例えば、図8に例示するように、検出した移動体Dの周囲に注意を喚起するような個別表示Daをすると共に、「警報」という文字によって示される警報表示Eを表示する。また、解析判定部612は、停止領域への移動体の侵入を判定した場合には、一次変電所121の配電盤201aに対して、対象設備の稼動を停止させるための停止信号を出力する。この際、解析判定部
612は、表示装置605に停止表示を行なう。停止表示としては、例えば、図9に例示するように、検出した移動体Dの周囲に注意を喚起するような個別表示Daをすると共に、「停止」という文字によって示される停止表示Fを表示する。
The process so far is a preparation process for executing an alarm operation using the alarm system. The alarm operation is executed by the analysis determination unit 612. The analysis determination unit 612 performs an analysis process based on an image signal that is a captured image of the camera 301 received by the image signal reception unit 603, and determines that the moving body D has entered the alarm region C or the stop region. If the analysis determination unit 612 determines that the moving object D has entered the alarm region C, the analysis determination unit 612 outputs an alarm signal to the alarm signal reception unit 402 of the alarm device 401 disposed in the vicinity of the target facility. At this time, the analysis determination unit 612 displays a warning on the display device 605. As the alarm display, for example, as illustrated in FIG. 8, an individual display Da for calling attention around the detected moving body D and an alarm display E indicated by the characters “alarm” are displayed. . In addition, when the analysis determination unit 612 determines that the moving body has entered the stop area, the analysis determination unit 612 outputs a stop signal for stopping the operation of the target facility to the switchboard 201a of the primary substation 121. At this time, the analysis determination unit 612 performs a stop display on the display device 605. As the stop display, for example, as illustrated in FIG. 9, an individual display Da that draws attention around the detected moving body D and a stop display F indicated by the characters “stop” are displayed. .

このように、本実施の形態の警報システムでは、設定された警報領域Cに人間等の移動体Dが進入した場合、その近傍に位置する警報器401に警報信号を出力し、これに応じて警報器401から警報音を出力させ、注意を喚起することができる。この際、表示装置605を見ているオペレータに対しては、警報表示Eの表示によって警報領域Cに移動体Dが侵入したことを一見して示すことができる。同様に、表示装置605を見ているオペレータに対しては、停止表示Fの表示によって停止領域に移動体Dが侵入したことを一見して示すことができる。しかも、移動体Dの周囲に個別表示Daをするため、一つの表示画面中に人間等の移動体Dが複数存在したとしても、どの移動体Dが警報領域Cや停止領域に侵入したのかを一見して示すことができる。   Thus, in the alarm system of the present embodiment, when a moving body D such as a human enters the set alarm area C, an alarm signal is output to the alarm device 401 located in the vicinity thereof, and accordingly An alarm sound can be output from the alarm device 401 to call attention. At this time, the operator who is viewing the display device 605 can show at a glance that the moving body D has entered the alarm area C by displaying the alarm display E. Similarly, the operator who is viewing the display device 605 can show at a glance that the moving body D has entered the stop area by displaying the stop display F. In addition, since the individual display Da is displayed around the moving body D, even if there are a plurality of moving bodies D such as humans in one display screen, it can be determined which moving body D has entered the alarm area C or the stop area. It can be shown at a glance.

以上、図4に示す機能ブロック図等に基づいて、システム制御部601が有するマイクロコンピュータ602が実行する機能について説明した。そこで、以下、システム制御部601の構成及びそのマイクロコンピュータ602の処理内容について説明する。   The function executed by the microcomputer 602 included in the system control unit 601 has been described above based on the functional block diagram shown in FIG. Therefore, the configuration of the system control unit 601 and the processing contents of the microcomputer 602 will be described below.

図10は、警報システム全体のシステム構成を示すブロック図である。前述した、カメラ301、警報器401、赤外線温度センサ501、システム制御部601、一次変電所121の配電盤201aは、ネットワーク701によって接続されている。ネットワーク701は、一例としてLANが用いられ、別の一例としてWANが用いられていても良い。特に、カメラ301とシステム制御部601との間に介在するネットワーク701は、情報通信機器の間でのデータ送受信が可能なネットワーク配線である必要がある。警報器401、赤外線温度センサ501及び配電盤201aとシステム制御部601との間に介在するネットワーク701は、警報器401、赤外線温度センサ501又は配電盤201aの構成によっては、必ずしも情報通信機器の間でのデータ送受信が可能なネットワーク配線である必要はなく、信号線等であっても良い。   FIG. 10 is a block diagram showing a system configuration of the entire alarm system. The camera 301, the alarm device 401, the infrared temperature sensor 501, the system control unit 601, and the switchboard 201 a of the primary substation 121 described above are connected by a network 701. The network 701 may use a LAN as an example, and may use a WAN as another example. In particular, the network 701 interposed between the camera 301 and the system control unit 601 needs to be a network wiring that can transmit and receive data between information communication devices. The network 701 interposed between the alarm device 401, the infrared temperature sensor 501, and the switchboard 201a and the system control unit 601 is not necessarily between information communication devices depending on the configuration of the alarm device 401, the infrared temperature sensor 501, or the switchboard 201a. The network wiring need not be capable of data transmission / reception, and may be a signal line or the like.

図11は、システム制御部601のハードウェア構成を示すブロック図である。システム制御部601の中核をなすマイクロコンピュータ602は、各種演算処理を実行して各部を集中的に制御するCPU651に固定データを固定的に記憶するROM652と可変データを書き換え自在に記憶するRAM653とがバスライン654を介して接続されて構成されている。このようなマイクロコンピュータ602には、一例としてハードディスクドライブ(HDD)655及びCD−ROMドライブ656もバスライン654を介して接続されている。一例として、CD−ROMドライブ656には、CD−ROM657がセットされてこのCD−ROM657に記述された警報用コンピュータプログラムが読み取られ、読み取られた警報用コンピュータプログラムはHDD655に書き込まれる。HDD655に書き込まれた警報用コンピュータプログラムの全部又は一部は、マイクロコンピュータ602の起動時にRAM653に移され、アクセス速度の高速化が図られている。   FIG. 11 is a block diagram illustrating a hardware configuration of the system control unit 601. The microcomputer 602 that forms the core of the system control unit 601 includes a CPU 651 that executes various arithmetic processes and controls each unit centrally, a ROM 652 that stores fixed data in a fixed manner, and a RAM 653 that stores variable data in a rewritable manner. They are connected via a bus line 654. For example, a hard disk drive (HDD) 655 and a CD-ROM drive 656 are also connected to the microcomputer 602 via the bus line 654. As an example, a CD-ROM 657 is set in the CD-ROM drive 656, the alarm computer program described in the CD-ROM 657 is read, and the read alarm computer program is written in the HDD 655. All or part of the alarm computer program written in the HDD 655 is transferred to the RAM 653 when the microcomputer 602 is started, so that the access speed is increased.

前述した表示装置605及び入力装置607もバスライン654を介してマイクロコンピュータ602に接続されている。表示装置605は、一例として、液晶ディスプレイによって構成され、この液晶ディスプレイの表示面にタッチパネル607aが設置されている。入力装置607は、タッチパネル607aの他に、例えば、図示しないキーボード、マウス等のポインティングディバイスを含んでいる。   The display device 605 and the input device 607 described above are also connected to the microcomputer 602 via the bus line 654. The display device 605 is configured by a liquid crystal display as an example, and a touch panel 607a is installed on the display surface of the liquid crystal display. The input device 607 includes, for example, a pointing device such as a keyboard and a mouse (not shown) in addition to the touch panel 607a.

システム制御部601と他の機器とをネットワーク701を介して通信可能あるいは信号出力可能にするために、マイクロコンピュータ602には、バスライン654を介して
インターフェース658も接続されている。
An interface 658 is also connected to the microcomputer 602 via the bus line 654 so that the system controller 601 and other devices can communicate with each other via the network 701 or can output signals.

警報用コンピュータプログラムは、距離定義ファイル610(図12参照)及び領域設定ファイル609(図13参照)の生成を支援し、一例として、図14〜図17にフローチャートとして例示する処理をマイクロコンピュータ602に実行させる。距離定義ファイル610及び領域設定ファイル609は、一例としてRAM653上に生成され、HDD655にバックアップされる。   The alarm computer program supports the generation of the distance definition file 610 (see FIG. 12) and the region setting file 609 (see FIG. 13). As an example, the microcomputer 602 performs the processing illustrated as flowcharts in FIGS. Let it run. The distance definition file 610 and the area setting file 609 are generated on the RAM 653 as an example and backed up to the HDD 655.

図12は、距離定義ファイル610のデータ構造を示す模式図である。距離定義ファイル610は、警報を行なう対象設備に対応させた設備610a毎に警報距離610bと警報の要否610cと停止距離610dと停止の要否610eとを記憶するデータ構造を有している。これらのデータは、警報用コンピュータプログラムに従ったマイクロコンピュータ602の処理によって、入力装置607を用いて自由に設定可能である。   FIG. 12 is a schematic diagram showing the data structure of the distance definition file 610. The distance definition file 610 has a data structure that stores an alarm distance 610b, an alarm necessity 610c, a stop distance 610d, and a stop necessity 610e for each equipment 610a corresponding to the target equipment to be alarmed. These data can be freely set using the input device 607 by the processing of the microcomputer 602 according to the alarm computer program.

図13は、領域設定ファイル609のデータ構造を示す模式図である。領域設定ファイル609には、個々のカメラ301に対応させたカメラ609a毎に警報領域609bと停止領域609cとを記憶するデータ構造を有している。図4に基づいて既に説明したように、領域設定部608は、位置指定部606によって指定された位置に基づいて警報領域C及び停止領域を設定し、領域設定ファイル609に記憶する。この場合に設定される警報領域C及び停止領域は、図13に示す警報領域609b及び停止領域609cとして記憶される。つまり、領域設定部608による警報領域C及び停止領域の設定に際して、オペレータは、表示装置605に表示されている例えば図5ないし図7に例示する表示画面を見ている。この表示画面は、ある特定のカメラ301によって撮影された撮像画像に基づく表示画面である。そこで、そのような表示画面上でのタッチパネル607aによる警報領域及び停止領域の設定操作がなされた場合、そのような表示画面を映し出しているカメラ301を特定するカメラ609aのデータに対応させて、操作入力に基づくデータが警報領域609bと停止領域609cとに記憶される。   FIG. 13 is a schematic diagram showing the data structure of the area setting file 609. The area setting file 609 has a data structure for storing an alarm area 609b and a stop area 609c for each camera 609a associated with each camera 301. As already described with reference to FIG. 4, the region setting unit 608 sets the warning region C and the stop region based on the position specified by the position specifying unit 606 and stores them in the region setting file 609. The alarm area C and the stop area set in this case are stored as an alarm area 609b and a stop area 609c shown in FIG. That is, when setting the warning area C and the stop area by the area setting unit 608, the operator looks at the display screens illustrated in FIGS. 5 to 7 displayed on the display device 605, for example. This display screen is a display screen based on a captured image taken by a specific camera 301. Therefore, when an operation for setting an alarm area and a stop area is performed on the display screen using the touch panel 607a, the operation is performed in accordance with the data of the camera 609a that identifies the camera 301 that displays the display screen. Data based on the input is stored in the alarm area 609b and the stop area 609c.

より具体的に説明すると、位置指定部606によってある施設中のある領域、例えば、図6に例示するような位置Aが指定され、図7に例示するプルダウンメニューBからある設備名称Baが指定された場合を想定する。この場合、警報用コンピュータプログラムに従ったマイクロコンピュータ602の処理として、指定された設備名称Baに対応する設備を距離定義ファイル610の設備610aから検索し、対応する警報距離610bに設定されている距離に基づいて警報領域Cを演算により求め、対応する停止距離610dに設定されている距離に基づいて停止領域を演算により求め、算出した警報領域C及び停止領域のデータをそれぞれ設備のデータと共に領域設定ファイル609の警報領域609bと停止領域609cとに記憶させる、という処理が実行される。マイクロコンピュータ602による警報領域Cの演算は、一例として、タッチパネル607aによって指定された位置Aから距離定義ファイル610中の警報距離10bに設定されている距離分だけ離れた空間を警報領域として算出する。同様に、マイクロコンピュータ602による停止領域の演算は、一例として、タッチパネル607aによって指定された位置Aから距離定義ファイル610中の停止距離10dに設定されている距離分だけ離れた空間を停止領域として算出する。これらの演算処理に際して、図5〜図7に例示する表示画面のように三次元画像に基づく位置Aの指定である場合、一例として、位置Aが枠状に指定されることを条件として、その枠状に指定された位置Aの三次元位置を求め、求めた三次元位置から距離定義ファイル610中の警報距離10b、停止距離10dに設定されている距離を水平に延ばして得られた領域を警報領域C、停止領域のデータとして求める。したがって、この場合の警報領域C及び停止領域は、三次元軸(縦横高さ)の全てが特定された領域となる。これに対して、表示装置605の表示画面が上からカメラ301で撮像した二次元画面である場合には、一例として、位置Aは二次元的に指定されていれば良い。つま
り、この場合には、線として指定された位置Aの位置から距離定義ファイル610中の警報距離10b、停止距離10dに設定されている距離を水平に延ばして高さ無限大として得られた領域を警報領域C、停止領域のデータとして求めれば良い。したがって、この場合の警報領域C及び停止領域は、二次元軸のみ(縦横のみ)が特定された領域となる。
More specifically, the location designation unit 606 designates a certain area in a facility, for example, a location A as illustrated in FIG. 6, and a facility name Ba from the pull-down menu B illustrated in FIG. Assuming that In this case, as the processing of the microcomputer 602 according to the alarm computer program, the equipment corresponding to the designated equipment name Ba is searched from the equipment 610a of the distance definition file 610, and the distance set in the corresponding alarm distance 610b. Based on the above, the warning area C is obtained by calculation, the stop area is obtained by calculation based on the distance set to the corresponding stop distance 610d, and the calculated alarm area C and stop area data are set together with the equipment data, respectively. The process of storing the alarm area 609b and the stop area 609c of the file 609 is executed. Operation of the alarm region C by the microcomputer 602, as an example, and calculates the distance component apart space that has been set in the alarm distance 6 10b in the distance definition file 610 from the specified position A by the touch panel 607a as warning area . Similarly, the calculation of stopping area by the microcomputer 602, as an example, the distance component apart space that has been set in the stopping distance 6 10d in the distance definition file 610 from the specified position A by the touch panel 607a as a stop region calculate. In these calculation processes, when the position A is specified based on a three-dimensional image as in the display screens illustrated in FIGS. 5 to 7, as an example, on the condition that the position A is specified in a frame shape, It determined the three-dimensional position of the specified position a in a frame shape, alarm distance 6 10b in the distance definition file 610 from the three-dimensional position obtained, obtained horizontally extending a distance that is set in the stopping distance 6 10d The area is obtained as alarm area C and stop area data. Therefore, the warning area C and the stop area in this case are areas in which all of the three-dimensional axes (vertical and horizontal heights) are specified. On the other hand, when the display screen of the display device 605 is a two-dimensional screen imaged by the camera 301 from the top, the position A may be specified two-dimensionally as an example. That is, in this case, the warning distance 6 10b of the distance in the definition file 610 from the position of the specified position A as a line, get the distance set in the stopping distance 6 10d as horizontally extend in height infinity This area may be obtained as data for the warning area C and the stop area. Therefore, the warning area C and the stop area in this case are areas in which only the two-dimensional axis (vertical and horizontal only) is specified.

なお、距離定義ファイル610の設備610aから設備を検索させる処理に関する別の実施の形態としては、プルダウンメニューBによる設備指定をすることなく、カメラ301による撮像画像のデータと設備に関するデータとを関連付けさせておいても良い。この場合には、プルダウンメニューBによる設備指定の操作を省略することができる。   As another embodiment relating to the process of searching for equipment from the equipment 610a of the distance definition file 610, the image data captured by the camera 301 and the data related to the equipment are associated with each other without specifying the equipment using the pull-down menu B. You can keep it. In this case, the operation of equipment designation by the pull-down menu B can be omitted.

図14は、領域設定ファイル609に警報領域609b及び停止領域609cを設定する処理(領域設定ファイル609の作成処理)の流れを示すフローチャートである。この処理では、まず、図6の位置Aの指定に例示されるような位置指定の有無の判定に待機している(ステップS101)。位置指定があったと判定された場合には(ステップS101のY)、例えば図7のプルダウンメニューBによる設備指定の有無の判定に待機し(ステップS102)、設備指定があったと判定された場合には(ステップS102のY)、距離定義ファイル610の検索処理が実行される(ステップS103)。そして、警報領域C及び停止領域をCPU651の演算処理によって算出し、算出した警報領域C及び停止領域のデータを該当するカメラ609aのデータに対応させて領域設定ファイル609に警報領域609b及び停止領域609cとして設定記憶する処理が実行される。これにより、領域設定ファイル609が作成される。   FIG. 14 is a flowchart showing a flow of processing for setting the alarm region 609b and the stop region 609c in the region setting file 609 (processing for creating the region setting file 609). In this process, first, it waits for the determination of the presence / absence of position designation as exemplified by designation of position A in FIG. 6 (step S101). If it is determined that the position has been specified (Y in step S101), for example, it waits for determination of whether or not equipment is specified by the pull-down menu B in FIG. 7 (step S102), and if it is determined that the equipment has been specified. (Y in step S102), the search process of the distance definition file 610 is executed (step S103). Then, the alarm area C and the stop area are calculated by the arithmetic processing of the CPU 651, and the alarm area C and the stop area 609c are stored in the area setting file 609 corresponding to the data of the corresponding camera 609a. Is stored. Thereby, an area setting file 609 is created.

図15は、移動体の位置情報を判定する処理の流れを示すフローチャートである。画像信号の取込みが実行されると(ステップS201、画像信号受信部603)、画像解析がなされ(ステップS202)、人間等の移動体Dの位置情報の判定がなされる(ステップS203、解析判定部612)。ステップS203での判定処理は、取込んだ画像信号に基づく画像処理技術に基づいて実行される。その一例としては、カメラ301で撮影した撮像画像に基づく画像信号に含まれている時間的なフレームを経時的に比較する手法を採用することができる。つまり、ある時間における画像フレームのデータと時間的にその後の画像フレームのデータとを比較して差が生じていれば、移動体Dが移動したことが判明する。この場合、画像中のどの領域のデータに差が生じたかを判定することで、移動体Dの移動がどこで発生したかを認識することが可能となる。別の一例としては、同一の領域を複数台のカメラ301で撮影し、三次元撮影領域を生成するようにしても良い。この手法では、各カメラ301が撮影した撮像画像を比較することで、移動体Dが移動したことを判定することができる。同様に、画像中のどの領域のデータに差が生じたかを判定することで、移動体Dの移動がどこで発生したかを認識することが可能となる。いずれにしても、ステップS203での判定処理は、公知のいかなる画像処理技術を用いても良い。   FIG. 15 is a flowchart showing a flow of processing for determining the position information of the moving object. When the capture of the image signal is executed (step S201, the image signal receiving unit 603), the image analysis is performed (step S202), and the position information of the moving body D such as a human is determined (step S203, the analysis determining unit). 612). The determination process in step S203 is executed based on an image processing technique based on the captured image signal. As an example, a method of comparing temporal frames included in an image signal based on a captured image captured by the camera 301 with time can be employed. In other words, if there is a difference between the data of the image frame at a certain time and the data of the subsequent image frame in time, it is found that the moving body D has moved. In this case, it is possible to recognize where the movement of the moving object D has occurred by determining which region of the data has a difference in the image. As another example, the same area may be imaged with a plurality of cameras 301 to generate a 3D imaging area. In this method, it is possible to determine that the moving body D has moved by comparing captured images taken by the respective cameras 301. Similarly, it is possible to recognize where the movement of the moving object D has occurred by determining which region of the data has a difference in the image. In any case, any known image processing technique may be used for the determination process in step S203.

図16は、警報信号出力処理の流れを示すフローチャートである。ステップS301では、警報領域への侵入の有無が判定される。この判定は、領域設定ファイル609にカメラ609a毎に対応付けられて設定された各警報領域609bのデータにより特定される警報領域Cに、人間等の移動体Dが侵入したかどうかをもって実行される。警報領域Cへの移動体Dの侵入の有無は、図15の処理によって求められる移動体Dの位置情報に基づいて判定される。警報領域Cへの移動体Dの進入があったと判定された場合には(ステップS301のY)、該当する警報領域609bのデータに伴われている設備のデータに基づいて図12に例示する距離定義ファイル610の設備610aを検索し、該当する設備に対応する警報の要否610cのステータスデータを参照する(ステップS302)。その結果、警報が不要である場合には(ステップS302のN)、ステップS301の判定処理にリターンする。これに対して、警報が必要であると判定された場合には(ステップ
S302のY)、警報器401に向けてネットワーク701を介して警報信号を出力する処理が実行される(ステップS303)。その結果、移動体Dが進入した警報領域Cの近傍に設置されている警報器401が駆動され、警報が発せられて注意が喚起される。その後、警報領域Cから移動体Dが外れたと判定されれば(ステップS304のY)、警報器401に向けてネットワーク701を介して警報停止信号を出力する処理が実行される(ステップS305)。これにより、警報器401の駆動が停止される。
FIG. 16 is a flowchart showing the flow of alarm signal output processing. In step S301, it is determined whether or not an alarm area has been entered. This determination is executed based on whether or not a moving body D such as a human has entered the alarm area C specified by the data of each alarm area 609b set in association with each camera 609a in the area setting file 609. . Whether or not the moving body D has entered the alarm area C is determined based on the position information of the moving body D obtained by the processing of FIG. When it is determined that the moving body D has entered the warning area C (Y in step S301), the distance illustrated in FIG. 12 based on the facility data accompanying the data of the corresponding warning area 609b. The facility 610a of the definition file 610 is searched, and the status data of the necessity / unnecessity of alarm 610c corresponding to the corresponding facility is referred to (step S302). As a result, when the alarm is unnecessary (N in Step S302), the process returns to the determination process in Step S301. On the other hand, when it is determined that an alarm is necessary (Y in step S302), a process of outputting an alarm signal to the alarm device 401 via the network 701 is executed (step S303). As a result, the alarm device 401 installed in the vicinity of the alarm area C into which the moving body D has entered is driven, an alarm is issued, and attention is drawn. Thereafter, if it is determined that the moving body D has deviated from the alarm area C (Y in step S304), a process of outputting an alarm stop signal to the alarm device 401 via the network 701 is executed (step S305). Thereby, the drive of the alarm device 401 is stopped.

図17は、停止信号出力処理の流れを示すフローチャートである。ステップS01では、停止領域への侵入の有無が判定される。この判定は、領域設定ファイル609にカメラ609a毎に対応付けられて設定された各停止領域609cのデータにより特定される停止領域に、人間等の移動体Dが侵入したかどうかをもって実行される。停止領域への移動体Dの侵入の有無は、図15の処理によって求められる移動体Dの位置情報に基づいて判定される。停止領域への移動体Dの進入があったと判定された場合には(ステップS401のY)、該当する停止領域609cのデータに伴われている設備のデータに基づいて図12に例示する距離定義ファイル610の設備610aを検索し、該当する設備に対応する停止の要否610eのステータスデータを参照する(ステップS402)。その結果、停止が不要である場合には(ステップS402のN)、ステップS401の判定処理にリターンする。これに対して、停止が必要であると判定された場合には(ステップS402のY)、配電盤201aに向けてネットワーク701を介して停止信号を出力する処理が実行される(ステップS03)。その結果、対応する設備の停止処理が実行される。その後、停止した設備の稼動再開は、配電盤201aの操作によってなされる。 FIG. 17 is a flowchart showing the flow of the stop signal output process. In step S 4 01, it is determined whether the entry of the stop region. This determination is performed based on whether or not a moving body D such as a human has entered a stop area specified by the data of each stop area 609c set in the area setting file 609 in association with each camera 609a. Whether or not the moving body D has entered the stop area is determined based on the position information of the moving body D obtained by the processing of FIG. When it is determined that the moving body D has entered the stop area (Y in step S401), the distance definition illustrated in FIG. 12 based on the facility data accompanying the data of the corresponding stop area 609c. The facility 610a in the file 610 is searched, and the status data of the necessity / unnecessity of stop 610e corresponding to the corresponding facility is referred to (step S402). As a result, when the stop is unnecessary (N in step S402), the process returns to the determination process in step S401. The other hand, if it is determined that it is necessary to stop (Y in step S402), the processing of outputting a stop signal via the network 701 is performed toward the switchboard 201a (Step S 4 03) . As a result, the corresponding facility stop process is executed. Thereafter, the operation of the stopped facility is resumed by operating the switchboard 201a.

本実施の形態では、CD−ROM657に記憶された警報用コンピュータプログラムをHDD655にインストールし、システム制御部601で実行すべき処理をマイクロコンピュータ602によって実行するような一例を示した。これに対して、別の実施の形態として、マイクロコンピュータ602をシーケンサとして構成し、警報用コンピュータプログラムを例えばROM652に記録するファームウェア構成としたり、あるいはASIC構成としたりしても良い。   In the present embodiment, an example in which the alarm computer program stored in the CD-ROM 657 is installed in the HDD 655 and the processing to be executed by the system control unit 601 is executed by the microcomputer 602 is shown. On the other hand, as another embodiment, the microcomputer 602 may be configured as a sequencer and may have a firmware configuration in which an alarm computer program is recorded in, for example, the ROM 652, or an ASIC configuration.

本発明の実施の一形態である警報システムが用いられる変電所を介した電力供給の流れを概略的に示す模式図である。It is a schematic diagram which shows roughly the flow of the electric power supply through the substation where the alarm system which is one Embodiment of this invention is used. 変電所の概略配置を示す模式図である。It is a schematic diagram which shows schematic arrangement | positioning of a substation. 変電設備の一例を示す模式図である。It is a mimetic diagram showing an example of substation equipment. 警報システムの機能ブロック図である。It is a functional block diagram of an alarm system. カメラによる撮像画像の一例を示す模式図である。It is a schematic diagram which shows an example of the captured image by a camera. カメラによる撮像画像に所望位置を指定した画像の一例を示す模式図である。It is a schematic diagram which shows an example of the image which designated the desired position to the picked-up image by a camera. 対象設備の選択画面の一例を示す模式図である。It is a schematic diagram which shows an example of the selection screen of object equipment. 警報領域に人が侵入した場合の画面例を示す模式図である。It is a schematic diagram which shows the example of a screen when a person invades an alarm area | region. 停止領域に人が侵入した場合の画面例を示す模式図である。It is a schematic diagram which shows the example of a screen when a person invades into a stop area | region. 警報システム全体のシステム構成を示すブロック図である。It is a block diagram which shows the system configuration | structure of the whole alarm system. システム制御部(警報装置)のハードウェア構成を示すブロック図である。It is a block diagram which shows the hardware constitutions of a system control part (alarm apparatus). 距離定義ファイルのデータ構造を示す模式図である。It is a schematic diagram which shows the data structure of a distance definition file. 領域設定ファイルのデータ構造を示す模式図である。It is a schematic diagram which shows the data structure of an area | region setting file. 警報領域及び停止領域を設定する処理(領域設定ファイル作成処理)の流れを示すフローチャートである。It is a flowchart which shows the flow of the process (area setting file creation process) which sets an alarm area | region and a stop area | region. 移動体の位置情報を判定する処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the process which determines the positional information on a moving body. 警報信号出力処理の流れを示すフローチャートである。It is a flowchart which shows the flow of an alarm signal output process. 停止信号出力処理の流れを示すフローチャートである。It is a flowchart which shows the flow of a stop signal output process.

301 カメラ
401 警報器
501 赤外線温度センサ
605 表示装置
607 入力装置
609 記憶領域(領域設定ファイル)
C 警報領域
D 移動体
301 Camera 401 Alarm 501 Infrared temperature sensor 605 Display device 607 Input device 609 Storage area (area setting file)
C Alarm area D Mobile

Claims (8)

表示装置(605)と、
入力装置(607)と、
対象設備の温度を検知する赤外線温度センサ(501)と、
カメラ(301)によって撮影された対象設備の撮像画像を画像信号として受信する手段(603)と、
前記画像信号に基づいて前記撮像画像を前記表示装置に表示出力する手段(604)と、
前記表示装置に表示出力された前記撮像画像について前記入力装置による所望位置の指定を、該所望位置に対応する対象設備の指定を伴い、許容する手段(606)と、
前記赤外線温度センサの出力信号を受信する手段(611)と、
前記指定された所望位置と重なり合う前記受信した赤外線温度センサの出力信号に基づいて判別される高温位置から、前記指定された対象設備毎に予め設定された距離だけ離反した位置までの範囲である警報領域(C)を設定し記憶領域(609)に記憶する手段(608)と、
前記撮像画像を解析して前記警報領域に移動体(D)が侵入したことを判定する手段(612)と、
前記警報領域への前記移動体の侵入を判定した場合には警報器(401)に警報信号を出力する手段(612)と、
を備える、ことを特徴とする警報装置。
A display device (605);
An input device (607);
An infrared temperature sensor (501) for detecting the temperature of the target facility;
Means (603) for receiving, as an image signal, a captured image of the target equipment photographed by the camera (301);
Means (604) for displaying and outputting the captured image on the display device based on the image signal;
Means (606) for permitting designation of a desired position by the input device for the captured image displayed and output on the display device, with designation of a target facility corresponding to the desired position ;
Means (611) for receiving an output signal of the infrared temperature sensor;
An alarm ranging from a high temperature position determined based on the output signal of the received infrared temperature sensor that overlaps the designated desired position to a position separated by a distance set in advance for each designated target facility Means (608) for setting the area (C) and storing it in the storage area (609);
Means (612) for analyzing the captured image and determining that a moving body (D) has entered the alarm area;
Means (612) for outputting an alarm signal to an alarm device (401) when it is determined that the moving body has entered the alarm area;
An alarm device comprising:
前記対象設備毎に、前記警報信号を出力するかどうかを選択自在とする手段(S302)を備える、ことを特徴とする請求項に記載の警報装置。 Wherein for each target equipment, said comprising means for freely selecting whether to output an alarm signal (S302), it alarm device according to claim 1, wherein the. 前記指定された位置に基づいて停止領域を設定し記憶領域(609)に記憶する手段(608)と、
前記撮像画像を解析して前記停止領域に移動体(D)が侵入したことを判定する手段(612)と、
前記停止領域への前記移動体の侵入を判定した場合には前記対象設備の稼動を停止させる停止信号を出力する手段(612)と、
を備える、ことを特徴とする請求項1又は2に記載の警報装置。
Means (608) for setting a stop area based on the designated position and storing it in a storage area (609);
Means (612) for analyzing the captured image and determining that the moving body (D) has entered the stop area;
Means (612) for outputting a stop signal for stopping the operation of the target equipment when it is determined that the moving body has entered the stop area;
The alarm device according to claim 1, further comprising:
前記停止領域は、前記指定された所望位置から前記指定された対象設備毎に予め設定された距離までの範囲に設定される、ことを特徴とする請求項に記載の警報装置。 The alarm device according to claim 3 , wherein the stop area is set in a range from the designated desired position to a distance set in advance for each designated target facility. 前記停止領域は、前記指定された所望位置と重なり合う前記受信した赤外線温度センサの出力信号に基づいて判別される高温位置から前記指定された対象設備毎に予め設定された距離だけ離反した位置までの範囲に設定されるように構成された、ことを特徴とする請求項に記載の警報装置。 The stop area extends from a high temperature position determined based on the received output signal of the infrared temperature sensor that overlaps the designated desired position to a position separated by a distance set in advance for each designated target facility. range is configured to be set to the alarm device according to claim 3, characterized in that. 前記対象設備毎に、前記停止信号を出力するかどうかを選択自在とする手段(S402)を備える、ことを特徴とする請求項又はに記載の警報装置。 For each of the target equipment, the alarm device according to claim 4 or 5 wherein comprising means for freely selecting whether to output the stop signal (S402), it is characterized. 対象設備を撮像する位置に設置され、撮像画像を画像信号として出力するカメラ(301)と、警報信号を受信することによって警報を発する警報器(401)と、前記カメラ及び前記警報器とネットワーク(701)を介して接続されるシステム制御部(601)と、を備え、
前記システム制御部は、表示装置(605)と、入力装置(607)と、
前記画像信号を受信する手段(603)と、前記画像信号に基づいて前記撮像画像を前記表示装置に表示出力する手段(604)と、前記表示装置に表示出力された前記撮像画像について前記入力装置による所望位置の指定を、該所望位置に対応する対象設備の指定を伴い、許容する手段(606)と、対象設備の温度を検知する赤外線温度センサ(501)の出力信号を受信する手段(611)と、前記指定された所望位置と重なり合う前記受信した赤外線温度センサの出力信号に基づいて判別される高温位置から、前記指定された対象設備毎に予め設定された距離だけ離反した位置までの範囲である警報領域(C)を設定し記憶領域(609)に記憶する手段(608)と、前記撮像画像を解析して前記警報領域に移動体(D)が侵入したことを判定する手段(612)と、前記警報領域への前記移動体の侵入を判定した場合には前記警報器に警報信号を出力する手段(612)と、を備える、ことを特徴とする警報システム。
A camera (301) that is installed at a position where the target equipment is imaged and outputs a captured image as an image signal, an alarm device (401) that issues an alarm by receiving an alarm signal, the camera and the alarm device, and a network ( 701) and a system control unit (601) connected via
The system control unit includes a display device (605), an input device (607),
Means (603) for receiving the image signal, means (604) for displaying and outputting the captured image on the display device based on the image signal, and the input device for the captured image displayed and output on the display device Means for accepting the designation of the desired position by means of designation of the target equipment corresponding to the desired position (606) and means for receiving the output signal of the infrared temperature sensor (501) for detecting the temperature of the target equipment (611) ), And a range from a high temperature position determined based on the output signal of the received infrared temperature sensor that overlaps the designated desired position to a position separated by a distance set in advance for each designated target facility set the warning area (C) is a means (608) for storing in the storage area (609), by analyzing the captured image mobile (D) enters the said alarm area A warning means comprising: means (612) for determining that, and means (612) for outputting a warning signal to the alarm device when it is determined that the mobile object has entered the warning area. system.
警報装置(601)が備えるコンピュータにインストールされ、このコンピュータに、
カメラ(301)によって撮影された対象設備の撮像画像を画像信号として受信する機能(603)と、
前記画像信号に基づいて前記撮像画像を表示装置(605)に表示出力する機能(604)と、
前記表示装置に表示出力された前記撮像画像について入力装置(607)による所望位置の指定を、該所望位置に対応する対象設備の指定を伴い、許容する機能(606)と、
対象設備の温度を検知する赤外線温度センサ(501)の出力信号を受信する機能(611)と、
前記指定された所望位置と重なり合う前記受信した赤外線温度センサの出力信号に基づいて判別される高温位置から、前記指定された対象設備毎に予め設定された距離だけ離反した位置までの範囲である警報領域(C)を設定し記憶領域(609)に記憶する機能(608)と、
前記撮像画像を解析して前記警報領域に移動体(D)が侵入したことを判定する機能(612)と、
前記警報領域への前記移動体の侵入を判定した場合には警報器(401)に警報信号を出力する機能(612)と、
を実行させることを特徴とする警報用コンピュータプログラム。
Installed in a computer provided in the alarm device (601),
A function (603) for receiving a captured image of the target facility imaged by the camera (301) as an image signal;
A function (604) for displaying and outputting the captured image on a display device (605) based on the image signal;
A function (606) for permitting designation of a desired position by the input device (607) for the captured image displayed and output on the display device, with designation of target equipment corresponding to the desired position ;
A function (611) for receiving an output signal of an infrared temperature sensor (501) for detecting the temperature of the target facility ;
An alarm ranging from a high temperature position determined based on the output signal of the received infrared temperature sensor that overlaps the designated desired position to a position separated by a distance set in advance for each designated target facility A function (608) for setting the area (C) and storing it in the storage area (609);
A function (612) for analyzing the captured image and determining that a moving body (D) has entered the alarm area;
A function (612) for outputting an alarm signal to an alarm device (401) when it is determined that the moving body has entered the alarm area;
A computer program for alarm, characterized in that
JP2005074242A 2005-03-16 2005-03-16 Alarm device, alarm system, and alarm computer program Expired - Fee Related JP4637615B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005074242A JP4637615B2 (en) 2005-03-16 2005-03-16 Alarm device, alarm system, and alarm computer program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005074242A JP4637615B2 (en) 2005-03-16 2005-03-16 Alarm device, alarm system, and alarm computer program

Publications (2)

Publication Number Publication Date
JP2006259951A JP2006259951A (en) 2006-09-28
JP4637615B2 true JP4637615B2 (en) 2011-02-23

Family

ID=37099161

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005074242A Expired - Fee Related JP4637615B2 (en) 2005-03-16 2005-03-16 Alarm device, alarm system, and alarm computer program

Country Status (1)

Country Link
JP (1) JP4637615B2 (en)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4866801B2 (en) * 2007-06-29 2012-02-01 アイホン株式会社 Apartment house intercom system
JP5167791B2 (en) * 2007-12-05 2013-03-21 日本電気株式会社 Monitoring device, monitoring method, and monitoring program
JP5357668B2 (en) * 2009-08-26 2013-12-04 パナソニック株式会社 Intruder detection device
JP7090600B2 (en) * 2017-05-10 2022-06-24 コニカミノルタ株式会社 Mobile risk assessment device, mobile monitoring system and mobile risk assessment processing program
JP2019075706A (en) * 2017-10-17 2019-05-16 中国電力株式会社 Monitoring system
JP7230510B2 (en) * 2019-01-07 2023-03-01 中国電力株式会社 proximity monitoring system
JP7126095B2 (en) * 2019-09-24 2022-08-26 Jfeスチール株式会社 Intrusion detection device and intrusion detection method
CN113068000B (en) * 2019-12-16 2023-07-18 杭州海康威视数字技术股份有限公司 Video target monitoring method, device, equipment, system and storage medium
JP7482656B2 (en) 2020-03-13 2024-05-14 株式会社フジタ Workplace alarm devices

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003196754A (en) * 2001-12-28 2003-07-11 Taisei Corp Device for warning intrusion and method thereof
JP2003269915A (en) * 2002-03-13 2003-09-25 Omron Corp Monitor for three-dimensional space
JP2004007246A (en) * 2002-05-31 2004-01-08 Toshiba Corp Image processing system, image processing method, and image processing program
WO2004029502A1 (en) * 2002-09-24 2004-04-08 Pilz Gmbh & Co. Kg Method and device for making a hazardous area safe

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07319536A (en) * 1994-05-20 1995-12-08 Fuji Electric Co Ltd Supervisory and controlling equipment for plant with video

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003196754A (en) * 2001-12-28 2003-07-11 Taisei Corp Device for warning intrusion and method thereof
JP2003269915A (en) * 2002-03-13 2003-09-25 Omron Corp Monitor for three-dimensional space
JP2004007246A (en) * 2002-05-31 2004-01-08 Toshiba Corp Image processing system, image processing method, and image processing program
WO2004029502A1 (en) * 2002-09-24 2004-04-08 Pilz Gmbh & Co. Kg Method and device for making a hazardous area safe

Also Published As

Publication number Publication date
JP2006259951A (en) 2006-09-28

Similar Documents

Publication Publication Date Title
JP4637615B2 (en) Alarm device, alarm system, and alarm computer program
CN110707823B (en) Multi-dimensional intelligent remote inspection system for transformer substation
KR101949525B1 (en) Safety management system using unmanned detector
KR101570640B1 (en) Remote monitoring system for high voltage package switchgear, low voltage package switchgear, distribute board, motor control center using the thermal imaging camera
US9549155B2 (en) Configuration module for a video surveillance system, surveillance system comprising the configuration module, method for configuring a video surveillance system, and computer program
JP4498150B2 (en) Laser light approach detection system
JP5488882B2 (en) Fixed video display system
CN109405895A (en) Cable tunnel monitoring management system
JP2019004690A (en) Circuit for power device and graphical user interface
JP2017152804A (en) Safety scanner, optical safety system and setting support device for safety scanner
CN103492966B (en) For controlling the method and system of industrial system
CN103400622A (en) Monitoring mode switching method and system for nuclear power plant master control room
CN114267093A (en) AR-based power equipment inspection method and device
CN107612503A (en) Solar panel Fault detection method and system and robot
CN111431284B (en) BIM technology-based intelligent transformer substation management and control system
CN110487417A (en) A kind of generator excitation carbon brush safety detection method and early warning system
JP6653033B1 (en) Cargo handling system and control method
WO2017149893A1 (en) Plant-monitoring system and monitoring method
JP2002312011A (en) Information communication system for machine tool
CN101146216B (en) Video positioning and parameter computation method based on picture sectioning
JP2015186114A (en) Video monitoring system
KR20220142865A (en) System and method for monitoring unmanned-office using mobile robot
JPH06175626A (en) Controller and method for monitoring plant
JP2009110047A (en) Disaster prevention display device
CN112356035B (en) Robot control system and industrial robot operating system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080107

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100914

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100916

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20101102

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20101119

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20101124

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131203

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4637615

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131203

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees