JP2021196788A

JP2021196788A - Monitoring device, monitoring method, and program

Info

Publication number: JP2021196788A
Application number: JP2020102043A
Authority: JP
Inventors: 亨村山; Toru Murayama
Original assignee: Nippon Steel Texeng Co Ltd
Current assignee: Nippon Steel Texeng Co Ltd
Priority date: 2020-06-12
Filing date: 2020-06-12
Publication date: 2021-12-27
Anticipated expiration: 2040-06-12

Abstract

To provide a monitoring device capable of easily setting an off-limits area in an image in a monitoring device for monitoring a monitoring object area, a monitoring method, and program.SOLUTION: A monitoring device is composed of a computer, a camera, a touch panel, and an alarm. The computer 101 has a detection unit (a touch panel 103) for detecting touch operation or a sight line of a user relative to display of an image acquired from an imaging unit 102, and a monitoring unit for issuing an alarm signal when a person enters an off-limits area in an image acquired from an off-limits area setting unit for setting the off-limits area in the image and the imaging unit in response to touch operation or the sight line of a user.SELECTED DRAWING: Figure 1

Description

本発明は、監視装置、監視方法及びプログラムに関する。 The present invention relates to a monitoring device, a monitoring method and a program.

特許文献１には、監視対象エリアを撮像するカメラを有する侵入者監視システムが記載されている。画像解析手段は、カメラが撮像した映像から同時に複数の人物の認識が可能であって、その人物を追尾するアルゴリズムを備える。顔情報記憶部は、人物の顔情報を予め記憶する。顔認証手段は、画像解析手段が認識した人物から顔を認識し、認識した顔情報と顔情報記憶部に登録した顔情報とを比較して一致／不一致を判断する。行動パターン記憶部は、エリア内に設定された不審者侵入禁止区域に進む特定の行動パターンを含む人物の行動パターンを記憶する。行動パターン比較手段は、画像解析手段が追尾した人物の行動軌跡と行動パターン記憶部に記憶された人物の行動パターンとの一致／不一致を判断する。不審者判定手段は、顔認証手段が不一致と判断した人物が、特定の行動パターンと一致する行動軌跡を採ったら不審者侵入と判断する。 Patent Document 1 describes an intruder monitoring system having a camera that captures a monitored area. The image analysis means can recognize a plurality of people at the same time from the image captured by the camera, and includes an algorithm for tracking the people. The face information storage unit stores the face information of a person in advance. The face recognition means recognizes a face from a person recognized by the image analysis means, compares the recognized face information with the face information registered in the face information storage unit, and determines match / mismatch. The behavior pattern storage unit stores the behavior pattern of a person including a specific behavior pattern that advances to the suspicious person intrusion prohibited area set in the area. The behavior pattern comparison means determines a match / mismatch between the behavior trajectory of the person tracked by the image analysis means and the behavior pattern of the person stored in the behavior pattern storage unit. The suspicious person determination means determines that a suspicious person has invaded when a person who is determined by the face recognition means to be inconsistent takes an action trajectory that matches a specific action pattern.

特許文献２には、画像を使用して監視領域を通行する物体の数を判別して監視する通行監視部を有する通行監視システムが記載されている。マスク領域は、監視領域内の一部であって、荷物を物体とは別の位置に置くための荷物置場に相当する領域をマスクする。静止状態検知センサは、マスク領域内で荷物置場に置かれた静止状態の荷物が、人体を含むか否かを検知する。通行監視部は、マスク領域内の検知結果を含めて監視領域を通行する物体を監視する。 Patent Document 2 describes a traffic monitoring system having a traffic monitoring unit that determines and monitors the number of objects passing through the monitoring area using an image. The masked area is a part of the monitoring area and masks an area corresponding to a luggage storage area for placing the cargo at a position different from the object. The stationary state detection sensor detects whether or not the stationary luggage placed in the luggage storage area in the mask area includes the human body. The traffic monitoring unit monitors objects passing through the monitoring area, including the detection result in the mask area.

特許文献３には、撮像部から取得された画像に監視ラインを設定する監視ライン設定部を有する監視装置が記載されている。重なり検出部は、画像中の物体と監視ラインとの重なりを検出する。監視ライン設定部は、重なり検出部によって重なりが検出された場合に、物体に応じて新たな監視ラインを設定する。 Patent Document 3 describes a monitoring device having a monitoring line setting unit that sets a monitoring line for an image acquired from an imaging unit. The overlap detection unit detects the overlap between the object in the image and the monitoring line. The monitoring line setting unit sets a new monitoring line according to the object when the overlap detection unit detects the overlap.

特開２０１０−２１１５１４号公報Japanese Unexamined Patent Publication No. 2010-21514 特開２０１５−３２０７９号公報Japanese Unexamined Patent Publication No. 2015-32079 国際公開第２０１６／１５２１９６号International Publication No. 2016/152196

カメラの撮像位置が固定である場合、監視対象エリアが固定であり、不審者侵入禁止区域も固定である。建設現場では、建設作業員が立入禁止エリアに侵入することを防止する必要がある。しかし、建設現場では、建設工事の進捗に応じて、立入禁止エリアが頻繁に変わる。そのため、立入禁止エリアを容易に設定可能であることが望まれている。 When the image pickup position of the camera is fixed, the monitored area is fixed, and the suspicious person intrusion prohibited area is also fixed. At construction sites, it is necessary to prevent construction workers from entering the exclusion zone. However, at construction sites, the exclusion zone frequently changes as the construction work progresses. Therefore, it is desired that the exclusion zone can be easily set.

本発明の目的は、画像内において人物の立入禁止エリアを容易に設定することができるようにすることである。 An object of the present invention is to make it possible to easily set an exclusion zone for a person in an image.

本発明の監視装置は、撮像部から取得された画像の表示に対して、タッチ操作又はユーザの視線を検出する検出部と、前記タッチ操作又は前記ユーザの視線に応じて、前記画像内に立入禁止エリアを設定する立入禁止エリア設定部と、前記撮像部から取得された画像において前記立入禁止エリア内に人物が侵入した場合に警報信号を発する監視部とを有する。 The monitoring device of the present invention has a detection unit that detects a touch operation or a user's line of sight with respect to the display of an image acquired from the image pickup unit, and enters the image according to the touch operation or the user's line of sight. It has an off-limits area setting unit that sets an off-limits area, and a monitoring unit that issues an alarm signal when a person intrudes into the off-limits area in the image acquired from the image pickup unit.

また、本発明の監視装置は、撮像部から取得された画像内に立入禁止エリアを設定する立入禁止エリア設定部と、前記撮像部から取得された画像において前記立入禁止エリア内に人物が侵入した場合に警報信号を発する監視部とを有し、前記立入禁止エリア設定部は、前記画像に応じて前記立入禁止エリアを設定する。 Further, in the monitoring device of the present invention, an exclusion zone setting unit that sets an exclusion zone in the image acquired from the imaging unit and a person intrudes into the exclusion zone in the image acquired from the imaging unit. In some cases, it has a monitoring unit that emits an alarm signal, and the exclusion zone setting unit sets the exclusion zone according to the image.

本発明によれば、画像内において人物の立入禁止エリアを容易に設定することができる。 According to the present invention, it is possible to easily set an exclusion zone for a person in an image.

図１（Ａ）及び（Ｂ）は、第１の実施形態による監視装置の構成例を示す図である。1A and 1B are diagrams showing a configuration example of a monitoring device according to the first embodiment. 図２は、タッチパネルの表示例を示す図である。FIG. 2 is a diagram showing a display example of the touch panel. 図３（Ａ）及び（Ｂ）は、第２の実施形態による監視装置の構成例を示す図である。3A and 3B are diagrams showing a configuration example of the monitoring device according to the second embodiment. 図４（Ａ）及び（Ｂ）は、第３の実施形態による監視装置の構成例を示す図である。4 (A) and 4 (B) are diagrams showing a configuration example of a monitoring device according to a third embodiment. 図５は、第４の実施形態によるタッチパネルの表示例を示す図である。FIG. 5 is a diagram showing a display example of the touch panel according to the fourth embodiment. 図６（Ａ）〜（Ｃ）は、監視装置の構成例を示す図である。6 (A) to 6 (C) are diagrams showing a configuration example of a monitoring device. 図７は、監視装置の監視方法を示すフローチャートである。FIG. 7 is a flowchart showing a monitoring method of the monitoring device.

（第１の実施形態）
図１（Ａ）は、第１の実施形態による監視装置の構成例を示す図である。建設現場１０６には、例えば、開口部１０７が設けられている。開口部１０７は、人物が侵入すると危険であるため、人物の立ち入りを禁止する必要がある。 (First Embodiment)
FIG. 1A is a diagram showing a configuration example of a monitoring device according to the first embodiment. The construction site 106 is provided with, for example, an opening 107. Since the opening 107 is dangerous if a person invades, it is necessary to prohibit the person from entering.

監視装置は、コンピュータ１０１と、カメラ１０２と、タッチパネル１０３と、警報器１０４とを有し、開口部１０７付近に人物が侵入しないように監視する。コンピュータ１０１は、モバイルバッテリにより電源電圧の供給を受けて動作するが、ＡＣ電源により電源電圧の供給を受けてもよい。 The monitoring device includes a computer 101, a camera 102, a touch panel 103, and an alarm device 104, and monitors the vicinity of the opening 107 so that a person does not enter. The computer 101 operates by being supplied with a power supply voltage by a mobile battery, but may be supplied with a power supply voltage by an AC power supply.

カメラ１０２は、有線によりコンピュータ１０１に接続され、コンピュータ１０１から電源電圧の供給を受けて動作するが、モバイルバッテリ又はＡＣ電源により電源電圧の供給を受けてもよい。カメラ１０２は、例えば、三脚に固定され、開口部１０７付近を撮像し、開口部１０７付近の画像を生成する撮像部である。この画像は、動画像である。また、カメラ１０２は、明るさを検出し、明るさに応じて、赤外線画像の生成と可視光画像の生成を切り替えてもよい。すなわち、カメラ１０２は、昼間では、可視光画像を生成し、夜間では、赤外線画像を生成することができる。カメラ１０２は、有線又は無線によりコンピュータ１０１に接続される。コンピュータ１０１は、カメラ１０２により生成された画像を取得する。 The camera 102 is connected to the computer 101 by wire and operates by receiving a power supply voltage from the computer 101, but the camera 102 may be supplied with a power supply voltage by a mobile battery or an AC power supply. The camera 102 is, for example, an imaging unit fixed to a tripod, taking an image in the vicinity of the opening 107, and generating an image in the vicinity of the opening 107. This image is a moving image. Further, the camera 102 may detect the brightness and switch between the generation of the infrared image and the generation of the visible light image according to the brightness. That is, the camera 102 can generate a visible light image in the daytime and an infrared image in the nighttime. The camera 102 is connected to the computer 101 by wire or wirelessly. The computer 101 acquires an image generated by the camera 102.

図２は、タッチパネル１０３の表示例を示す図である。タッチパネル１０３は、例えば、タブレットであり、モバイルバッテリにより電源電圧の供給を受けて動作するが、ＡＣ電源により電源電圧の供給を受けてもよい。タッチパネル１０３は、無線によりコンピュータ１０１に接続されるが、有線によりコンピュータ１０１に接続されてもよい。タッチパネル１０３は、タッチパネル領域に表示を行うと共に、タッチパネル領域のタッチを検出することができる。コンピュータ１０１は、カメラ１０２により生成された画像を取得し、その取得した画像をタッチパネル１０３に送信する。タッチパネル１０３は、コンピュータ１０１から画像を受信し、その受信した開口部１０７付近の画像を表示する。作業員１０５は、作業員１０５の指２０１を用いて、開口部１０７付近の画像が表示されているタッチパネル１０３のタッチ操作により、その画像内の開口部１０７を含む領域を立入禁止エリア１０８として設定指示することができる。例えば、作業員１０５は、立入禁止エリア１０８の頂点を指２０１で指定することにより、立入禁止エリア１０８を設定指示することができる。コンピュータ１０１は、画像が表示されているタッチパネル１０３のタッチ操作を検出し、そのタッチ操作に応じて、その画像内の開口部１０７を含む領域を立入禁止エリア１０８として設定する。そして、コンピュータ１０１は、タッチパネル１０３に対して、画像に重畳して立入禁止エリア１０８を表示するように制御する。タッチパネル１０３は、開口部１０７付近の画像と、開口部１０７を含む立入禁止エリア１０８を赤枠として表示する。 FIG. 2 is a diagram showing a display example of the touch panel 103. The touch panel 103 is, for example, a tablet and operates by being supplied with a power supply voltage by a mobile battery, but may be supplied with a power supply voltage by an AC power supply. The touch panel 103 is wirelessly connected to the computer 101, but may be connected to the computer 101 by wire. The touch panel 103 can display in the touch panel area and detect a touch in the touch panel area. The computer 101 acquires an image generated by the camera 102 and transmits the acquired image to the touch panel 103. The touch panel 103 receives an image from the computer 101 and displays an image in the vicinity of the received opening 107. The worker 105 uses the finger 201 of the worker 105 to set the area including the opening 107 in the image as the exclusion zone 108 by the touch operation of the touch panel 103 on which the image near the opening 107 is displayed. Can be instructed. For example, the worker 105 can specify the exclusion zone 108 by designating the apex of the exclusion zone 108 with the finger 201. The computer 101 detects the touch operation of the touch panel 103 on which the image is displayed, and sets the area including the opening 107 in the image as the exclusion zone 108 according to the touch operation. Then, the computer 101 controls the touch panel 103 so as to superimpose the image on the image and display the exclusion zone 108. The touch panel 103 displays an image near the opening 107 and an exclusion zone 108 including the opening 107 as a red frame.

なお、コンピュータ１０１は、タッチパネル１０３に表示される画像と同じ画像を、コンピュータ１０１の表示部に表示することができる。作業員１０５は、コンピュータ１０１上で、コンピュータ１０１の表示部の画像の開口部１０７を見ながら、マウスを用いて、立入禁止エリア１０８を設定指示することもできる。 The computer 101 can display the same image as the image displayed on the touch panel 103 on the display unit of the computer 101. The worker 105 can also use the mouse to set and instruct the exclusion zone 108 while looking at the opening 107 of the image of the display unit of the computer 101 on the computer 101.

建設現場１０６では、人物が立入禁止エリア１０８に侵入することを防止する必要がある。しかし、建設現場１０６では、建設工事の進捗に応じて、立入禁止エリア１０８が頻繁に変わる。その場合、作業員１０５は、コンピュータ１０１のマウスを用いるよりも、タッチパネル１０３のタッチ操作を用いた方が、立入禁止エリア１０８を容易に設定及び変更が可能であり、望ましい。また、作業員１０５は、タッチパネル１０３に表示される開口部１０７の画像を見ながら、開口部１０７を含むように立入禁止エリア１０８を容易に設定指示することができる。 At the construction site 106, it is necessary to prevent a person from entering the exclusion zone 108. However, at the construction site 106, the exclusion zone 108 frequently changes according to the progress of the construction work. In that case, it is preferable that the worker 105 uses the touch operation of the touch panel 103 rather than using the mouse of the computer 101 because the exclusion zone 108 can be easily set and changed. Further, the worker 105 can easily set and instruct the exclusion zone 108 so as to include the opening 107 while looking at the image of the opening 107 displayed on the touch panel 103.

コンピュータ１０１は、カメラ１０２により生成された画像を取得し、その取得した画像において、立入禁止エリア１０８内に人物が侵入した場合に警報信号を発し、警報信号を警報器１０４に送信する。 The computer 101 acquires an image generated by the camera 102, issues an alarm signal when a person intrudes into the exclusion zone 108 in the acquired image, and transmits the alarm signal to the alarm device 104.

ここで、カメラ１０２より取得した画像は、２次元動画像である。３次元上では、人物が立入禁止エリア１０８より奥を通過した場合には、人物は、立入禁止エリア１０８に侵入していないことになる。その場合、２次元動画像上では、人物の領域が立入禁止エリア１０８と重複しないので、コンピュータ１０１は、人物が立入禁止エリア１０８に侵入していないとして、正しい判定することができる。 Here, the image acquired from the camera 102 is a two-dimensional moving image. On the third dimension, when a person passes behind the restricted area 108, the person has not invaded the restricted area 108. In that case, since the area of the person does not overlap with the exclusion zone 108 on the two-dimensional moving image, the computer 101 can correctly determine that the person has not invaded the exclusion zone 108.

また、３次元上で、人物が立入禁止エリア１０８より手前を通過した場合には、人物は、立入禁止エリア１０８に侵入していないことになる。その場合、２次元動画像上では、人物の足は立入禁止エリア１０８と重複していないが、人物の頭が立入禁止エリア１０８と重複しているので、コンピュータ１０１は、人物が立入禁止エリア１０８に侵入しているものとして、誤判定し易い。 Further, when the person passes in front of the restricted area 108 in three dimensions, the person has not invaded the restricted area 108. In that case, on the two-dimensional moving image, the foot of the person does not overlap with the exclusion zone 108, but the head of the person overlaps with the exclusion zone 108, so that the computer 101 has the person in the exclusion zone 108. It is easy to make a false judgment as if it has invaded the computer.

そこで、コンピュータ１０１は、カメラ１０２から取得した画像において、人物を検出し、さらに人物の足を検出する。そして、コンピュータ１０１は、カメラ１０２から取得した画像において、上記の検出した人物の足が立入禁止エリア１０８内に存在する場合に、警報信号を発する。また、コンピュータ１０１は、カメラ１０２から取得した画像において、上記の検出した人物の足が立入禁止エリア１０８内に存在しない場合には、警報信号を発しない。なお、コンピュータ１０１は、カメラ１０２から取得した画像において、複数の人物を検出し、その検出した人物のうちの１人でも立入禁止エリア１０８に侵入した場合には、警報信号を発する。 Therefore, the computer 101 detects a person in the image acquired from the camera 102, and further detects the foot of the person. Then, the computer 101 issues an alarm signal when the foot of the detected person is present in the exclusion zone 108 in the image acquired from the camera 102. Further, the computer 101 does not issue an alarm signal when the foot of the detected person is not present in the exclusion zone 108 in the image acquired from the camera 102. The computer 101 detects a plurality of persons in the image acquired from the camera 102, and issues an alarm signal when even one of the detected persons invades the exclusion zone 108.

また、コンピュータ１０１は、立入禁止エリア１０８に侵入していない人物を検出した場合には、その人物の領域を例えば青色で表示し、立入禁止エリア１０８に侵入している人物を検出した場合には、その人物の領域を例えばオレンジ色で表示してもよい。 Further, when the computer 101 detects a person who has not invaded the exclusion zone 108, the area of the person is displayed in blue, for example, and when the computer 101 detects a person who has invaded the exclusion zone 108, the computer 101 displays the area of the person in blue. , The area of the person may be displayed, for example, in orange.

警報器１０４は、例えば、ブザー又はパトランプであり、モバイルバッテリ又はＡＣ電源により電源電圧の供給を受けて動作するが、コンピュータ１０１から電源電圧の供給を受けてもよい。また、警報器１０４は、有線又は無線により、コンピュータ１０１に接続される。警報器１０４は、コンピュータ１０１から警報信号を受信すると、警報を発する。警報器１０４は、ブザーである場合には警報音を発し、パトランプである場合には警報ランプを発光させることにより、人物が立入禁止エリア１０８に侵入したことを警告する。これにより、人物は、立入禁止エリア１０８に侵入したことを認識し、危険を察知し、立入禁止エリア１０８から退去することができる。 The alarm device 104 is, for example, a buzzer or a patrol lamp, and operates by being supplied with a power supply voltage by a mobile battery or an AC power source, but may be supplied with a power supply voltage from a computer 101. Further, the alarm device 104 is connected to the computer 101 by wire or wirelessly. When the alarm device 104 receives the alarm signal from the computer 101, the alarm device 104 issues an alarm. The alarm device 104 emits an alarm sound when it is a buzzer and emits an alarm lamp when it is a patrol lamp to warn that a person has entered the exclusion zone 108. As a result, the person can recognize that he / she has invaded the exclusion zone 108, detect the danger, and move out of the exclusion zone 108.

図１（Ｂ）は、図１（Ａ）のコンピュータ１０１とカメラ１０２と警報器１０４の設置例を示す図である。建設現場１０６には、仮設材又は足場１１１が設けられる。カメラ１０２は、留め具を用いて、仮設材又は足場１１１に設置される。これにより、カメラ１０２は、簡単に設置でき、稼働中は容易に取り外せず、使用後は簡単に取り外し可能である。コンピュータ１０１と警報器１０４は、仮設材又は足場１１１に固縛される。カメラ１０２と警報器１０４は、コンピュータ１０１に対して、例えば有線で接続される。タッチパネル１０３は、コンピュータ１０１に対して、例えば無線で接続される。 FIG. 1B is a diagram showing an installation example of the computer 101, the camera 102, and the alarm device 104 of FIG. 1A. Temporary lumber or scaffolding 111 is provided at the construction site 106. The camera 102 is installed on the temporary lumber or scaffold 111 using fasteners. As a result, the camera 102 can be easily installed, cannot be easily removed during operation, and can be easily removed after use. The computer 101 and the alarm 104 are tied to a temporary lumber or scaffold 111. The camera 102 and the alarm 104 are connected to the computer 101, for example, by wire. The touch panel 103 is connected to the computer 101, for example, wirelessly.

（第２の実施形態）
図３（Ａ）は、第２の実施形態による監視装置の構成例を示す図である。工場３０１は、例えば、コイル加工場である。工場３０１には、例えば、工場のラインの稼働エリア３０２が設けられている。工場のラインの稼働エリア３０２は、人物が侵入すると危険であるため、人物の立ち入りを禁止する必要がある。以下、第２の実施形態が第１の実施形態と異なる点を説明する。 (Second embodiment)
FIG. 3A is a diagram showing a configuration example of the monitoring device according to the second embodiment. Factory 301 is, for example, a coil processing plant. The factory 301 is provided with, for example, an operating area 302 of the factory line. Since it is dangerous for a person to enter the operating area 302 of the factory line, it is necessary to prohibit the entry of the person. Hereinafter, the difference between the second embodiment and the first embodiment will be described.

監視装置は、コンピュータ１０１と、カメラ１０２と、タッチパネル１０３と、警報器１０４とを有し、工場のラインの稼働エリア３０２付近に人物が侵入しないように監視する。 The monitoring device includes a computer 101, a camera 102, a touch panel 103, and an alarm device 104, and monitors the vicinity of the operating area 302 of the factory line so that a person does not invade.

カメラ１０２は、例えば、三脚に固定され、工場のラインの稼働エリア３０２付近を撮像し、工場のラインの稼働エリア３０２付近の画像を生成する撮像部である。この画像は、動画像である。 The camera 102 is, for example, an imaging unit fixed to a tripod, taking an image of the vicinity of the operating area 302 of the factory line, and generating an image of the vicinity of the operating area 302 of the factory line. This image is a moving image.

コンピュータ１０１は、カメラ１０２により生成された画像を取得し、その取得した画像をタッチパネル１０３に送信する。タッチパネル１０３は、コンピュータ１０１から画像を受信し、その受信した工場のラインの稼働エリア３０２付近の画像を表示する。作業員１０５は、工場のラインの稼働エリア３０２付近の画像が表示されているタッチパネル１０３のタッチ操作により、その画像内の工場のラインの稼働エリア３０２を含む領域を立入禁止エリア１０８として設定指示することができる。コンピュータ１０１は、画像が表示されているタッチパネル１０３のタッチ操作を検出し、そのタッチ操作に応じて、その画像内の工場のラインの稼働エリア３０２を含む領域を立入禁止エリア１０８として設定する。そして、コンピュータ１０１は、タッチパネル１０３に対して、画像に重畳して立入禁止エリア１０８を表示するように制御する。タッチパネル１０３は、工場のラインの稼働エリア３０２付近の画像と、工場のラインの稼働エリア３０２を含む立入禁止エリア１０８を赤枠として表示する。 The computer 101 acquires an image generated by the camera 102 and transmits the acquired image to the touch panel 103. The touch panel 103 receives an image from the computer 101 and displays an image in the vicinity of the operating area 302 of the factory line that has received the image. The worker 105 gives an instruction to set the area including the operating area 302 of the factory line in the image as the exclusion zone 108 by the touch operation of the touch panel 103 on which the image near the operating area 302 of the factory line is displayed. be able to. The computer 101 detects the touch operation of the touch panel 103 on which the image is displayed, and sets the area including the operating area 302 of the factory line in the image as the exclusion zone 108 in response to the touch operation. Then, the computer 101 controls the touch panel 103 so as to superimpose the image on the image and display the exclusion zone 108. The touch panel 103 displays an image near the operating area 302 of the factory line and an exclusion zone 108 including the operating area 302 of the factory line as a red frame.

コンピュータ１０１は、カメラ１０２により生成された画像を取得し、その取得した画像において、立入禁止エリア１０８内に人物が侵入した場合に警報信号を発し、警報信号を警報器１０４に送信する。具体的には、コンピュータ１０１は、カメラ１０２から取得した画像において、人物を検出し、さらに人物の足を検出する。そして、コンピュータ１０１は、カメラ１０２から取得した画像において、上記の検出した人物の足が立入禁止エリア１０８内に存在する場合に、警報信号を発する。 The computer 101 acquires an image generated by the camera 102, issues an alarm signal when a person intrudes into the exclusion zone 108 in the acquired image, and transmits the alarm signal to the alarm device 104. Specifically, the computer 101 detects a person in the image acquired from the camera 102, and further detects the foot of the person. Then, the computer 101 issues an alarm signal when the foot of the detected person is present in the exclusion zone 108 in the image acquired from the camera 102.

警報器１０４は、コンピュータ１０１から警報信号を受信すると、警報を発する。警報器１０４は、ブザーである場合には警報音を発し、パトランプである場合には警報ランプを発光させることにより、人物が立入禁止エリア１０８に侵入したことを警告する。これにより、人物は、立入禁止エリア１０８に侵入したことを認識し、危険を察知し、立入禁止エリア１０８から退去することができる。 When the alarm device 104 receives the alarm signal from the computer 101, the alarm device 104 issues an alarm. The alarm device 104 emits an alarm sound when it is a buzzer and emits an alarm lamp when it is a patrol lamp to warn that a person has entered the exclusion zone 108. As a result, the person can recognize that he / she has invaded the exclusion zone 108, detect the danger, and move out of the exclusion zone 108.

図３（Ｂ）は、図３（Ａ）のコンピュータ１０１とカメラ１０２と警報器１０４の設置例を示す図である。工場３０１には、安全手すり３１１と、仮設材又は足場３１２と、安全通路３１３が設けられる。安全手すりは、工場のラインの稼働エリア３０２を囲むように設置される。安全通路３１３は、工場のラインの稼働エリア３０２の外に設けられる。 FIG. 3B is a diagram showing an installation example of the computer 101, the camera 102, and the alarm device 104 of FIG. 3A. The factory 301 is provided with a safety handrail 311, a temporary lumber or scaffolding 312, and a safety passage 313. The safety handrail is installed so as to surround the operating area 302 of the factory line. The safety aisle 313 is provided outside the operating area 302 of the factory line.

カメラ１０２は、留め具を用いて、仮設材又は足場３１２に設置される。コンピュータ１０１と警報器１０４は、仮設材又は足場３１２に固縛される。カメラ１０２と警報器１０４は、コンピュータ１０１に対して、例えば有線で接続される。 The camera 102 is installed on the temporary lumber or scaffold 312 using fasteners. The computer 101 and the alarm 104 are tied to a temporary lumber or scaffold 312. The camera 102 and the alarm 104 are connected to the computer 101, for example, by wire.

（第３の実施形態）
図４（Ａ）は、第３の実施形態による監視装置の構成例を示す図である。建設現場４０１には、例えば、重機４０２が存在する。重機４０２は、例えば、ショベルカーである。重機４０２の可動範囲（旋回範囲）は、人物が侵入すると危険であるため、人物の立ち入りを禁止する必要がある。以下、第３の実施形態が第１の実施形態と異なる点を説明する。 (Third embodiment)
FIG. 4A is a diagram showing a configuration example of the monitoring device according to the third embodiment. At the construction site 401, for example, a heavy machine 402 exists. The heavy machine 402 is, for example, a shovel car. Since the movable range (turning range) of the heavy machine 402 is dangerous if a person invades, it is necessary to prohibit the entry of the person. Hereinafter, the difference between the third embodiment and the first embodiment will be described.

監視装置は、コンピュータ１０１と、カメラ１０２と、タッチパネル１０３と、警報器１０４とを有し、重機４０２の可動範囲付近に人物が侵入しないように監視する。 The monitoring device includes a computer 101, a camera 102, a touch panel 103, and an alarm device 104, and monitors the heavy equipment 402 so that a person does not enter the vicinity of the movable range.

カメラ１０２は、例えば、三脚に固定され、重機４０２の可動範囲付近を撮像し、重機４０２の可動範囲付近の画像を生成する撮像部である。この画像は、動画像である。 The camera 102 is, for example, an imaging unit fixed to a tripod, taking an image in the vicinity of the movable range of the heavy machine 402, and generating an image in the vicinity of the movable range of the heavy machine 402. This image is a moving image.

コンピュータ１０１は、カメラ１０２により生成された画像を取得し、その取得した画像をタッチパネル１０３に送信する。タッチパネル１０３は、コンピュータ１０１から画像を受信し、その受信した重機４０２の可動範囲付近の画像を表示する。作業員１０５は、重機４０２の可動範囲付近の画像が表示されているタッチパネル１０３のタッチ操作により、その画像内の重機４０２の可動範囲を含む領域を立入禁止エリア１０８として設定指示することができる。コンピュータ１０１は、画像が表示されているタッチパネル１０３のタッチ操作を検出し、そのタッチ操作に応じて、その画像内の重機４０２の可動範囲を含む領域を立入禁止エリア１０８として設定する。そして、コンピュータ１０１は、タッチパネル１０３に対して、画像に重畳して立入禁止エリア１０８を表示するように制御する。タッチパネル１０３は、重機４０２の可動範囲付近の画像と、重機４０２の可動範囲を含む立入禁止エリア１０８を赤枠として表示する。 The computer 101 acquires an image generated by the camera 102 and transmits the acquired image to the touch panel 103. The touch panel 103 receives an image from the computer 101 and displays an image in the vicinity of the movable range of the received heavy machine 402. The worker 105 can instruct the setting of the area including the movable range of the heavy machine 402 in the image as the exclusion zone 108 by the touch operation of the touch panel 103 on which the image near the movable range of the heavy machine 402 is displayed. The computer 101 detects the touch operation of the touch panel 103 on which the image is displayed, and sets the area including the movable range of the heavy machine 402 in the image as the exclusion zone 108 according to the touch operation. Then, the computer 101 controls the touch panel 103 so as to superimpose the image on the image and display the exclusion zone 108. The touch panel 103 displays an image near the movable range of the heavy machine 402 and an exclusion zone 108 including the movable range of the heavy machine 402 as a red frame.

図４（Ｂ）は、図４（Ａ）のコンピュータ１０１とカメラ１０２と警報器１０４の設置例を示す図である。建設現場４０１には、例えば、重機４１１が存在する。重機４１１は、例えば、クレーン車である。重機４１１の可動範囲（旋回範囲）は、人物が侵入すると危険であるため、人物の立ち入りを禁止する必要がある。コンピュータ１０１は、画像が表示されているタッチパネル１０３のタッチ操作を検出し、そのタッチ操作に応じて、その画像内の重機４１１の可動範囲を含む領域を立入禁止エリア１０８として設定する。 FIG. 4B is a diagram showing an installation example of the computer 101, the camera 102, and the alarm device 104 of FIG. 4A. At the construction site 401, for example, a heavy machine 411 exists. The heavy machine 411 is, for example, a crane vehicle. Since the movable range (turning range) of the heavy machine 411 is dangerous if a person invades, it is necessary to prohibit the entry of the person. The computer 101 detects the touch operation of the touch panel 103 on which the image is displayed, and sets the area including the movable range of the heavy machine 411 in the image as the exclusion zone 108 according to the touch operation.

建設現場４０１には、仮設材又は足場４１２が設けられる。カメラ１０２は、留め具を用いて、仮設材又は足場４１２に設置される。コンピュータ１０１と警報器１０４は、仮設材又は足場４１２に固縛される。カメラ１０２と警報器１０４は、コンピュータ１０１に対して、例えば有線で接続される。 Temporary lumber or scaffolding 412 is provided at the construction site 401. The camera 102 is installed on the temporary lumber or scaffolding 412 using fasteners. The computer 101 and the alarm 104 are tied to a temporary lumber or scaffold 412. The camera 102 and the alarm 104 are connected to the computer 101, for example, by wire.

（第４の実施形態）
図５は、第４の実施形態によるタッチパネル１０３の表示例を示す図である。以下、第４の実施形態が第１の実施形態と異なる点を説明する。カメラ１０２は、人物５０２を含む建設現場又は工場等の監視対象の被写体を撮像し、人物５０２を含む画像を生成する。タッチパネル１０３は、カメラ１０２により生成された人物５０２を含む画像を受信し、人物５０２を含む画像を表示する。また、タッチパネル１０３は、コンピュータ１０１の制御により、立入禁止エリア設定ボタン５１１と、立入禁止エリア解除ボタン５１２と、安全エリア設定ボタン５１３と、安全エリア解除ボタン５１４を表示する。 (Fourth Embodiment)
FIG. 5 is a diagram showing a display example of the touch panel 103 according to the fourth embodiment. Hereinafter, the difference between the fourth embodiment and the first embodiment will be described. The camera 102 captures a subject to be monitored, such as a construction site or a factory, including the person 502, and generates an image including the person 502. The touch panel 103 receives the image including the person 502 generated by the camera 102 and displays the image including the person 502. Further, the touch panel 103 displays the exclusion zone setting button 511, the exclusion zone release button 512, the safety area setting button 513, and the safety area release button 514 under the control of the computer 101.

作業員は、立入禁止エリア１０８を設定指示したり、立入禁止エリア１０８と安全エリア５０１を設定指示することができる。立入禁止エリア１０８は、人物５０２の侵入を禁止するエリアである。安全エリア５０１は、立入禁止エリア１０８内において、人物５０２の侵入を許可するエリアである。 The worker can instruct the setting of the exclusion zone 108, or can instruct the setting of the exclusion zone 108 and the safety area 501. The exclusion zone 108 is an area that prohibits the invasion of the person 502. The safety area 501 is an area within the exclusion zone 108 that allows the intrusion of the person 502.

立入禁止エリア設定ボタン５１１は、立入禁止エリア１０８を設定するためのボタンである。まず、作業員は、タッチパネル１０３上の立入禁止エリア設定ボタン５１１をタッチする。次に、作業員は、タッチパネル１０３上の選択ボタンにより、立入禁止エリア１０８の形状として、多角形、円又は楕円等を選択する。次に、作業員は、タッチパネル１０３のタッチ操作により、タッチパネル１０３上の立入禁止エリア１０８の多角形の頂点、円の半径、又は、楕円の長径と短径等を指定することにより、立入禁止エリア１０８を設定指示する。コンピュータ１０１は、上記のタッチパネル１０３のタッチ操作を検出し、そのタッチ操作に応じて、立入禁止エリア１０８を設定する。タッチパネル１０３は、コンピュータ１０１の制御により、立入禁止エリア１０８を例えば赤枠として表示する。 The restricted area setting button 511 is a button for setting the restricted area 108. First, the worker touches the exclusion zone setting button 511 on the touch panel 103. Next, the worker selects a polygon, a circle, an ellipse, or the like as the shape of the exclusion zone 108 by using the selection button on the touch panel 103. Next, the worker can specify the apex of the polygon, the radius of the circle, the major axis and the minor axis of the ellipse, etc. of the restricted area 108 on the touch panel 103 by touch operation of the touch panel 103, so that the restricted area is restricted. 108 is instructed to set. The computer 101 detects the touch operation of the touch panel 103, and sets the exclusion zone 108 according to the touch operation. The touch panel 103 displays the exclusion zone 108 as, for example, a red frame under the control of the computer 101.

立入禁止エリア解除ボタン５１２は、立入禁止エリア１０８を解除するためのボタンである。まず、作業員は、タッチパネル１０３のタッチ操作により、解除したい立入禁止エリア１０８を選択する。次に、作業員は、タッチパネル１０３上の立入禁止エリア解除ボタン５１２をタッチする。コンピュータ１０１は、上記のタッチパネル１０３のタッチ操作を検出し、そのタッチ操作に応じて、立入禁止エリア１０８を解除する。タッチパネル１０３は、コンピュータ１０１の制御により、解除された立入禁止エリア１０８の表示を消す。 The restricted area release button 512 is a button for releasing the restricted area 108. First, the worker selects the exclusion zone 108 to be released by touch operation of the touch panel 103. Next, the worker touches the exclusion zone release button 512 on the touch panel 103. The computer 101 detects the touch operation of the touch panel 103, and releases the exclusion zone 108 in response to the touch operation. The touch panel 103 erases the display of the released exclusion zone 108 under the control of the computer 101.

安全エリア設定ボタン５１３は、安全エリア５０１を設定するためのボタンである。まず、作業員は、タッチパネル１０３上の安全エリア設定ボタン５１３をタッチする。次に、作業員は、タッチパネル１０３上の選択ボタンにより、安全エリア５０１の形状として、多角形、円又は楕円等を選択する。次に、作業員は、タッチパネル１０３のタッチ操作により、タッチパネル１０３上の安全エリア５０１の多角形の頂点、円の半径、又は、楕円の長径と短径等を指定することにより、安全エリア５０１を設定指示する。コンピュータ１０１は、上記のタッチパネル１０３のタッチ操作を検出し、そのタッチ操作に応じて、安全エリア５０１を設定する。タッチパネル１０３は、コンピュータ１０１の制御により、安全エリア５０１を例えば青枠として表示する。 The safety area setting button 513 is a button for setting the safety area 501. First, the worker touches the safety area setting button 513 on the touch panel 103. Next, the worker selects a polygon, a circle, an ellipse, or the like as the shape of the safety area 501 by the selection button on the touch panel 103. Next, the worker specifies the safety area 501 by designating the apex of the polygon, the radius of the circle, the major axis and the minor axis of the ellipse, etc. of the safety area 501 on the touch panel 103 by touch operation of the touch panel 103. Instruct the setting. The computer 101 detects the touch operation of the touch panel 103, and sets the safety area 501 according to the touch operation. The touch panel 103 displays the safety area 501 as, for example, a blue frame under the control of the computer 101.

安全エリア解除ボタン５１４は、安全エリア５０１を解除するためのボタンである。まず、作業員は、タッチパネル１０３のタッチ操作により、解除したい安全エリア５０１を選択する。次に、作業員は、タッチパネル１０３上の安全エリア解除ボタン５１４をタッチする。コンピュータ１０１は、上記のタッチパネル１０３のタッチ操作を検出し、そのタッチ操作に応じて、安全エリア５０１を解除する。タッチパネル１０３は、コンピュータ１０１の制御により、解除された安全エリア５０１の表示を消す。 The safety area release button 514 is a button for releasing the safety area 501. First, the worker selects the safety area 501 to be released by touch operation of the touch panel 103. Next, the worker touches the safety area release button 514 on the touch panel 103. The computer 101 detects the touch operation of the touch panel 103, and releases the safety area 501 in response to the touch operation. The touch panel 103 erases the display of the released safety area 501 under the control of the computer 101.

コンピュータ１０１は、カメラ１０２から取得された画像において、立入禁止エリア１０８に侵入していない人物５０２を検出した場合には、タッチパネル１０３上の人物５０２の領域を例えば青色で表示し、警報信号を発しない。 When the computer 101 detects a person 502 who has not entered the exclusion zone 108 in the image acquired from the camera 102, the computer 101 displays the area of the person 502 on the touch panel 103 in blue, for example, and issues an alarm signal. do not do.

また、コンピュータ１０１は、カメラ１０２から取得された画像において、立入禁止エリア１０８内であり、かつ安全エリア５０１内でない領域に人物５０２が侵入した場合に、タッチパネル１０３上の人物５０２の領域を例えばオレンジ色で表示し、警報信号を発し、警報信号を警報器１０４に送信する。 Further, when the person 502 intrudes into an area within the restricted area 108 and not within the safety area 501 in the image acquired from the camera 102, the computer 101 makes the area of the person 502 on the touch panel 103, for example, orange. It is displayed in color, an alarm signal is issued, and the alarm signal is transmitted to the alarm device 104.

また、コンピュータ１０１は、カメラ１０２から取得された画像において、立入禁止エリア１０８内であり、かつ安全エリア５０１内である領域に人物５０２が侵入した場合に、タッチパネル１０３上の人物５０２の領域を例えば青色で表示し、警報信号を発しない。 Further, when the person 502 invades the area in the exclusion zone 108 and the safety area 501 in the image acquired from the camera 102, the computer 101 uses, for example, the area of the person 502 on the touch panel 103. It is displayed in blue and does not emit an alarm signal.

図６（Ａ）は、監視装置１００の構成例を示す図である。監視装置１００は、コンピュータ１０１と、カメラ１０２と、タッチパネル１０３と、警報器１０４とを有する。カメラ１０２は、有線又は無線で、コンピュータ１０１に接続される。タッチパネル１０３は、無線又は有線で、コンピュータ１０１に接続される。警報器１０４は、有線又は無線で、コンピュータ１０１に接続される。 FIG. 6A is a diagram showing a configuration example of the monitoring device 100. The monitoring device 100 includes a computer 101, a camera 102, a touch panel 103, and an alarm device 104. The camera 102 is connected to the computer 101 by wire or wirelessly. The touch panel 103 is connected to the computer 101 wirelessly or by wire. The alarm 104 is connected to the computer 101 by wire or wirelessly.

カメラ１０２は、建設現場又は工場等の監視対象の被写体を撮像し、監視対象の画像を生成する撮像部である。また、カメラ１０２は、明るさを検出し、明るさに応じて、赤外線画像の生成と可視光画像の生成を切り替えてもよい。すなわち、カメラ１０２は、昼間では、可視光画像を生成し、夜間では、赤外線画像を生成することができる。 The camera 102 is an imaging unit that captures a subject to be monitored, such as a construction site or a factory, and generates an image to be monitored. Further, the camera 102 may detect the brightness and switch between the generation of the infrared image and the generation of the visible light image according to the brightness. That is, the camera 102 can generate a visible light image in the daytime and an infrared image in the nighttime.

コンピュータ１０１は、カメラ１０２から監視対象の画像を取得し、その取得した画像を含む表示画像を生成し、表示画像をタッチパネル１０３に送信する。その表示画像は、図５に示すように、立入禁止エリア設定ボタン５１１と、立入禁止エリア解除ボタン５１２と、安全エリア設定ボタン５１３と、安全エリア解除ボタン５１４を含む。タッチパネル１０３は、その表示画像を表示する。 The computer 101 acquires an image to be monitored from the camera 102, generates a display image including the acquired image, and transmits the display image to the touch panel 103. As shown in FIG. 5, the display image includes an exclusion zone setting button 511, an exclusion zone release button 512, a safety area setting button 513, and a safety area release button 514. The touch panel 103 displays the displayed image.

コンピュータ１０１は、タッチパネル１０３のタッチ操作に応じて、立入禁止エリア１０８及び／又は安全エリア５０１を設定し、立入禁止エリア１０８及び／又は安全エリア５０１をタッチパネル１０３に表示する。 The computer 101 sets the exclusion zone 108 and / or the safety area 501 in response to the touch operation of the touch panel 103, and displays the exclusion zone 108 and / or the safety area 501 on the touch panel 103.

また、コンピュータ１０１は、カメラ１０２から取得された画像において、立入禁止エリア１０８内であり、かつ安全エリア５０１内でない領域に人物５０２が侵入した場合に、警報信号を発し、警報信号を警報器１０４に送信する。警報器１０４は、警報信号を受信すると、警報を発する。 Further, the computer 101 issues an alarm signal when the person 502 intrudes into an area within the exclusion zone 108 and not within the safety area 501 in the image acquired from the camera 102, and emits an alarm signal to the alarm device 104. Send to. Upon receiving the alarm signal, the alarm device 104 issues an alarm.

図６（Ｂ）は、図６（Ａ）のコンピュータ１０１のハードウェア構成例を示す図である。コンピュータ１０１は、ＣＰＵ６０１と、ＲＯＭ６０２と、ＲＡＭ６０３と、補助記憶装置６０４と、操作入力部６０５と、通信部６０６と、表示部６０７と、バス６０８とを有する。 FIG. 6B is a diagram showing a hardware configuration example of the computer 101 of FIG. 6A. The computer 101 includes a CPU 601, a ROM 602, a RAM 603, an auxiliary storage device 604, an operation input unit 605, a communication unit 606, a display unit 607, and a bus 608.

ＣＰＵ６０１は、ＲＯＭ６０２やＲＡＭ６０３や補助記憶装置６０４に記憶されているプログラムを実行することにより、各構成要素を制御し、処理を行う。ＲＯＭ６０２は、ＣＰＵ６０１が実行するためのプログラム等を記憶する不揮発性メモリである。ＲＡＭ６０３は、ＣＰＵ６０１の主メモリ及びワークエリア等として機能する揮発性メモリである。ＣＰＵ６０１は、ＲＯＭ６０２からプログラムをＲＡＭ６０３にロードし、そのプログラムを実行することにより、機能動作を実現する。 The CPU 601 controls each component and performs processing by executing a program stored in the ROM 602, the RAM 603, or the auxiliary storage device 604. The ROM 602 is a non-volatile memory for storing a program or the like for execution by the CPU 601. The RAM 603 is a volatile memory that functions as a main memory of the CPU 601 and a work area or the like. The CPU 601 loads a program from the ROM 602 into the RAM 603 and executes the program to realize a functional operation.

補助記憶装置６０４は、例えば、ハードディスクドライブ装置であり、ＣＰＵ６０１が実行するプログラムと各種データ等を記憶している。また、補助記憶装置６０４は、ＣＰＵ６０１の処理により得られた各種データ等を記憶する。 The auxiliary storage device 604 is, for example, a hard disk drive device, and stores a program executed by the CPU 601 and various data and the like. Further, the auxiliary storage device 604 stores various data and the like obtained by the processing of the CPU 601.

操作入力部６０５は、電源ボタンとキーボードとマウス等の入力部であり、ユーザ操作に応じて、操作情報をＣＰＵ６０１に出力する。通信部６０６は、外部に対して通信を行うための通信インターフェースである。通信部６０６は、図１のカメラ１０２とタッチパネル１０３と警報器１０４に対して、通信を行うことができる。表示部６０７は、例えば、液晶ディスプレイであり、図１のタッチパネル１０３の表示内容と同じものを表示することができる。 The operation input unit 605 is an input unit such as a power button, a keyboard, and a mouse, and outputs operation information to the CPU 601 according to a user operation. The communication unit 606 is a communication interface for communicating with the outside. The communication unit 606 can communicate with the camera 102, the touch panel 103, and the alarm device 104 of FIG. The display unit 607 is, for example, a liquid crystal display, and can display the same display content as that of the touch panel 103 of FIG.

図６（Ｃ）は、図６（Ａ）のコンピュータ１０１の機能構成例を示す図である。コンピュータ１０１は、画像取得部６１１と、表示制御部６１２と、立入禁止エリア設定部６１３と、安全エリア設定部６１４と、人物検出部６１５と、監視部６１６とを有する。図６（Ｂ）のＣＰＵ６０１がプログラムを実行することにより、画像取得部６１１と、表示制御部６１２と、立入禁止エリア設定部６１３と、安全エリア設定部６１４と、人物検出部６１５と、監視部６１６の機能が実現される。なお、人物検出部６１５は、リアルタイム処理の高速化のため、コンピュータ１０１の外部に接続されるハードウェアであることが好ましい。以下、図７を参照しながら、これらの機能構成部を説明する。 FIG. 6C is a diagram showing a functional configuration example of the computer 101 of FIG. 6A. The computer 101 has an image acquisition unit 611, a display control unit 612, an exclusion zone setting unit 613, a safety area setting unit 614, a person detection unit 615, and a monitoring unit 616. When the CPU 601 of FIG. 6B executes the program, the image acquisition unit 611, the display control unit 612, the exclusion zone setting unit 613, the safety area setting unit 614, the person detection unit 615, and the monitoring unit 616 functions are realized. The person detection unit 615 is preferably hardware connected to the outside of the computer 101 in order to speed up real-time processing. Hereinafter, these functional components will be described with reference to FIG. 7.

図７は、図６（Ａ）の監視装置１００の監視方法を示すフローチャートである。ステップＳ７０１では、カメラ１０２は、建設現場又は工場等の監視対象の被写体を撮像し、監視対象の画像を生成する。この画像は、動画像である。画像取得部６１１は、カメラ１０２から監視対象の画像を取得する。 FIG. 7 is a flowchart showing a monitoring method of the monitoring device 100 of FIG. 6A. In step S701, the camera 102 captures a subject to be monitored, such as a construction site or a factory, and generates an image to be monitored. This image is a moving image. The image acquisition unit 611 acquires an image to be monitored from the camera 102.

ステップＳ７０２では、表示制御部６１２は、画像取得部６１１により取得された画像を含む表示画像を生成し、その表示画像をタッチパネル１０３に表示するように制御する。その表示画像は、図５に示すように、立入禁止エリア設定ボタン５１１と、立入禁止エリア解除ボタン５１２と、安全エリア設定ボタン５１３と、安全エリア解除ボタン５１４を含む。タッチパネル１０３は、その表示画像を表示する。 In step S702, the display control unit 612 generates a display image including the image acquired by the image acquisition unit 611, and controls the display image to be displayed on the touch panel 103. As shown in FIG. 5, the display image includes an exclusion zone setting button 511, an exclusion zone release button 512, a safety area setting button 513, and a safety area release button 514. The touch panel 103 displays the displayed image.

ステップＳ７０３では、立入禁止エリア設定部６１３は、図５の立入禁止エリア設定ボタン５１１がタッチ操作された場合には、立入禁止エリア設定処理を行う。作業員は、タッチパネル１０３のタッチ操作により、例えば、図１（Ａ）の開口部１０７を含む領域、図３（Ａ）の工場のラインの稼働エリア３０２を含む領域、又は、図４（Ａ）の重機４０２の可動範囲を含む領域を、立入禁止エリア１０８として設定指示することができる。立入禁止エリア設定部６１３は、表示画像が表示されているタッチパネル１０３のタッチ操作に応じて、表示画像内に立入禁止エリア１０８を設定する。表示制御部６１２は、カメラ１０２から取得された画像と共に、立入禁止エリア１０８を例えば赤枠としてタッチパネル１０３に表示するように制御する。 In step S703, the exclusion zone setting unit 613 performs the exclusion zone setting process when the exclusion zone setting button 511 of FIG. 5 is touch-operated. By touch operation of the touch panel 103, the worker can use, for example, the area including the opening 107 in FIG. 1A, the area including the operating area 302 of the factory line in FIG. 3A, or the area shown in FIG. 4A. The area including the movable range of the heavy machine 402 can be set and instructed as the exclusion zone 108. The exclusion zone setting unit 613 sets the exclusion zone 108 in the display image in response to the touch operation of the touch panel 103 on which the display image is displayed. The display control unit 612 controls the touch panel 103 to display the exclusion zone 108 as, for example, a red frame together with the image acquired from the camera 102.

また、立入禁止エリア設定部６１３は、図５の立入禁止エリア解除ボタン５１２がタッチ操作された場合には、立入禁止エリア解除処理を行う。作業員は、タッチパネル１０３のタッチ操作により、設定済みの立入禁止エリア１０８を解除指示することができる。立入禁止エリア設定部６１３は、タッチパネル１０３のタッチ操作に応じて、表示画像内に設定されている立入禁止エリア１０８を解除する。表示制御部６１２は、タッチパネル１０３上の解除された立入禁止エリア１０８の表示を消すように制御する。 Further, when the restricted area release button 512 in FIG. 5 is touch-operated, the restricted area setting unit 613 performs an restricted area release process. The worker can give an instruction to release the set restricted area 108 by touch operation of the touch panel 103. The restricted area setting unit 613 releases the restricted area 108 set in the displayed image in response to the touch operation of the touch panel 103. The display control unit 612 controls so as to turn off the display of the released exclusion zone 108 on the touch panel 103.

立入禁止エリア設定部６１３は、タッチパネル１０３の立入禁止エリア解除ボタン５１２及び／又は立入禁止エリア設定ボタン５１１のタッチ操作に応じて、立入禁止エリア１０８を解除又は変更することができる。 The restricted area setting unit 613 can release or change the restricted area 108 according to the touch operation of the restricted area release button 512 and / or the restricted area setting button 511 of the touch panel 103.

ステップＳ７０４では、安全エリア設定部６１４は、図５の安全エリア設定ボタン５１３がタッチ操作された場合には、安全エリア設定処理を行う。作業員は、タッチパネル１０３のタッチ操作により、立入禁止エリア１０８内において、安全エリア５０１を設定指示することができる。安全エリア設定部６１４は、表示画像が表示されているタッチパネル１０３のタッチ操作に応じて、表示画像の立入禁止エリア１０８内に安全エリア５０１を設定する。表示制御部６１２は、カメラ１０２から取得された画像と立入禁止エリア１０８と共に、安全エリア５０１を例えば青枠としてタッチパネル１０３に表示するように制御する。 In step S704, the safety area setting unit 614 performs a safety area setting process when the safety area setting button 513 of FIG. 5 is touch-operated. The worker can instruct the setting of the safety area 501 in the exclusion zone 108 by the touch operation of the touch panel 103. The safety area setting unit 614 sets the safety area 501 in the restricted area 108 of the displayed image in response to the touch operation of the touch panel 103 on which the displayed image is displayed. The display control unit 612 controls the touch panel 103 to display the safety area 501 as, for example, a blue frame, together with the image acquired from the camera 102 and the exclusion zone 108.

以上のように、表示制御部６１２は、タッチパネル１０３に対して、立入禁止エリア１０８を赤枠として表示し、安全エリア５０１を青枠として表示するように制御する。なお、立入禁止エリア１０８と安全エリア５０１は、色以外の態様で、表示を区別してもよい。表示制御部６１２は、カメラ１０２から取得された画像と共に、立入禁止エリア１０８と安全エリア５０１を異なる態様でタッチパネル１０３に表示するように制御する。 As described above, the display control unit 612 controls the touch panel 103 to display the exclusion zone 108 as a red frame and the safety area 501 as a blue frame. The exclusion zone 108 and the safety area 501 may be displayed differently in an manner other than the color. The display control unit 612 controls the touch panel 103 to display the exclusion zone 108 and the safety area 501 in different modes together with the image acquired from the camera 102.

また、安全エリア設定部６１４は、図５の安全エリア解除ボタン５１４がタッチ操作された場合には、安全エリア解除処理を行う。作業員は、タッチパネル１０３のタッチ操作により、設定済みの安全エリア５０１を解除指示することができる。安全エリア設定部６１４は、タッチパネル１０３のタッチ操作に応じて、表示画像内に設定されている安全エリア５０１を解除する。表示制御部６１２は、タッチパネル１０３上の解除された安全エリア５０１の表示を消すように制御する。 Further, when the safety area release button 514 of FIG. 5 is touch-operated, the safety area setting unit 614 performs a safety area release process. The worker can give an instruction to release the set safety area 501 by touch operation of the touch panel 103. The safety area setting unit 614 releases the safety area 501 set in the display image in response to the touch operation of the touch panel 103. The display control unit 612 controls so as to turn off the display of the released safety area 501 on the touch panel 103.

安全エリア設定部６１４は、タッチパネル１０３の安全エリア解除ボタン５１４及び／又は安全エリア設定ボタン５１３のタッチ操作に応じて、安全エリア５０１を解除又は変更することができる。 The safety area setting unit 614 can release or change the safety area 501 in response to a touch operation of the safety area release button 514 and / or the safety area setting button 513 of the touch panel 103.

ステップＳ７０５では、人物検出部６１５は、カメラ１０２から取得された画像において、人物５０２を検出し、さらに人物５０２の足を検出する。人物検出部６１５は、例えば、画像内の輪郭検出を行った後に、人物５０２の検出を行うので、可視光画像と赤外線画像の両方において、人物５０２の検出が可能である。例えば、人物検出部６１５は、人口知能（ＡＩ）であり、学習フェーズでは、人物を教師データとして、学習モデルの機械学習を行い、推定フェーズでは、学習済みモデルを用いて、カメラ１０２から取得された画像の中の人物５０２の領域を検出する。また、人物検出部６１５は、学習フェーズでは、人物の足を教師データとして、学習モデルの機械学習を行い、推定フェーズでは、学習済みモデルを用いて、カメラ１０２から取得された画像の中の人物５０２の足の領域を検出する。 In step S705, the person detection unit 615 detects the person 502 in the image acquired from the camera 102, and further detects the foot of the person 502. Since the person detection unit 615 detects the person 502 after detecting the contour in the image, for example, the person 502 can be detected in both the visible light image and the infrared image. For example, the person detection unit 615 is artificial intelligence (AI), and in the learning phase, machine learning of the learning model is performed using the person as teacher data, and in the estimation phase, the trained model is used and acquired from the camera 102. The area of the person 502 in the image is detected. Further, in the learning phase, the person detection unit 615 performs machine learning of the learning model using the foot of the person as teacher data, and in the estimation phase, the person in the image acquired from the camera 102 using the trained model. Detects the foot area of 502.

ステップＳ７０６では、監視部６１６は、カメラ１０２から取得された画像において、立入禁止エリア１０８内に人物５０２が侵入したか否かを判定する。監視部６１６は、立入禁止エリア１０８内に人物５０２が侵入した場合には、ステップＳ７０７に進み、立入禁止エリア１０８内に人物５０２が侵入していない場合には、ステップＳ７１１に進む。 In step S706, the monitoring unit 616 determines whether or not the person 502 has invaded the exclusion zone 108 in the image acquired from the camera 102. The monitoring unit 616 proceeds to step S707 when the person 502 has invaded the restricted area 108, and proceeds to step S711 when the person 502 has not entered the restricted area 108.

具体的には、監視部６１６は、カメラ１０２から取得された画像において、人物検出部６１５により検出された人物５０２の足が立入禁止エリア１０８内に存在する場合には、ステップＳ７０７に進む。また、監視部６１６は、人物検出部６１５により検出された人物５０２の足が立入禁止エリア１０８内に存在しない場合には、ステップＳ７１１に進む。 Specifically, the monitoring unit 616 proceeds to step S707 when the foot of the person 502 detected by the person detection unit 615 is present in the exclusion zone 108 in the image acquired from the camera 102. If the foot of the person 502 detected by the person detection unit 615 does not exist in the exclusion zone 108, the monitoring unit 616 proceeds to step S711.

ステップＳ７０７では、監視部６１６は、安全エリア設定部６１４により安全エリア５０１が設定されているか否かを判定する。監視部６１６は、安全エリア５０１が設定されている場合には、ステップＳ７０８に進み、安全エリア５０１が設定されていない場合には、ステップＳ７０９に進む。 In step S707, the monitoring unit 616 determines whether or not the safety area 501 is set by the safety area setting unit 614. The monitoring unit 616 proceeds to step S708 when the safety area 501 is set, and proceeds to step S709 when the safety area 501 is not set.

ステップＳ７０８では、監視部６１６は、カメラ１０２から取得された画像において、安全エリア５０１内に人物５０２が侵入したか否かを判定する。監視部６１６は、安全エリア５０１内に人物５０２が侵入した場合には、ステップＳ７１１に進み、安全エリア５０１内に人物５０２が侵入していない場合には、ステップＳ７０９に進む。 In step S708, the monitoring unit 616 determines whether or not the person 502 has invaded the safety area 501 in the image acquired from the camera 102. The monitoring unit 616 proceeds to step S711 when the person 502 has invaded the safety area 501, and proceeds to step S709 when the person 502 has not entered the safety area 501.

具体的には、監視部６１６は、カメラ１０２から取得された画像において、人物検出部６１５により検出された人物５０２の足が安全エリア５０１内に存在する場合には、ステップＳ７１１に進む。また、監視部６１６は、人物検出部６１５により検出された人物５０２の足が安全エリア５０１内に存在しない場合には、ステップＳ７０９に進む。 Specifically, the monitoring unit 616 proceeds to step S711 when the foot of the person 502 detected by the person detection unit 615 is present in the safety area 501 in the image acquired from the camera 102. If the foot of the person 502 detected by the person detection unit 615 does not exist in the safety area 501, the monitoring unit 616 proceeds to step S709.

ステップＳ７０９では、表示制御部６１２は、カメラ１０２から取得された画像において、人物検出部６１５により検出された人物５０２の領域を例えばオレンジ色でタッチパネル１０３に表示するように制御し、ステップＳ７１０に進む。 In step S709, the display control unit 612 controls the image acquired from the camera 102 to display the area of the person 502 detected by the person detection unit 615 on the touch panel 103, for example, in orange, and proceeds to step S710. ..

ステップＳ７１０では、監視部６１６は、警報信号を発し、警報信号を警報器１０４に送信し、警報器１０４を作動させる。警報器１０４は、警報信号を受信すると、ブザー又はパトランプにより、警報を発する。その後、監視装置１００は、ステップＳ７０１に戻る。 In step S710, the monitoring unit 616 issues an alarm signal, transmits the alarm signal to the alarm device 104, and activates the alarm device 104. Upon receiving the alarm signal, the alarm device 104 issues an alarm by a buzzer or a patrol lamp. After that, the monitoring device 100 returns to step S701.

ステップＳ７１１では、表示制御部６１２は、カメラ１０２から取得された画像において、人物検出部６１５により検出された人物５０２の領域を例えば青色でタッチパネル１０３に表示するように制御する。監視部６１６は、警報信号を発しない。その後、監視装置１００は、ステップＳ７０１に戻る。 In step S711, the display control unit 612 controls the image acquired from the camera 102 so that the area of the person 502 detected by the person detection unit 615 is displayed on the touch panel 103, for example, in blue. The monitoring unit 616 does not issue an alarm signal. After that, the monitoring device 100 returns to step S701.

作業者が誤って危険の伴う立入禁止エリア１０８に侵入すると、警報が鳴るので、作業者は、立入禁止エリア１０８に侵入したことがわかり、速やかに立入禁止エリア１０８から退去することができる。これにより、危険区域内での災害のリスクが大幅に低減することが期待できる。 If the worker accidentally enters the dangerous restricted area 108, an alarm sounds, so that the worker knows that he / she has entered the restricted area 108 and can quickly move out of the restricted area 108. This can be expected to significantly reduce the risk of disasters in dangerous areas.

本実施形態は、コンピュータ１０１がプログラムを実行することによって実現することができる。また、上記のプログラムを記録したコンピュータ読み取り可能な記録媒体及び上記のプログラム等のコンピュータプログラムプロダクトも本発明の実施形態として適用することができる。記録媒体としては、例えばフレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等を用いることができる。 This embodiment can be realized by the computer 101 executing the program. Further, a computer-readable recording medium on which the above program is recorded and a computer program product such as the above program can also be applied as an embodiment of the present invention. As the recording medium, for example, a flexible disk, a hard disk, an optical disk, a magneto-optical disk, a CD-ROM, a magnetic tape, a non-volatile memory card, a ROM, or the like can be used.

図１（Ａ）では、立入禁止エリア設定部６１３は、タッチパネル１０３のタッチ操作に応じて、タッチパネル１０３に表示される画像内の開口部１０７を立入禁止エリア１０８として設定することができる。また、立入禁止エリア設定部６１３は、カメラ１０２から取得された画像内の開口部１０７を検出し、その検出した開口部１０７を立入禁止エリア１０８として設定することができる。例えば、立入禁止エリア設定部６１３は、パターンマッチングや明度検出により、開口部１０７を検出する。また、立入禁止エリア設定部６１３は、開口部１０７の形状を記憶しておき、工事の進行によって開口部１０７の形状が変化すると、その旨を報知することができる。また、立入禁止エリア設定部６１３は、開口部１０７の形状を記憶しておき、工事の進行によって開口部１０７の形状が変化したにもかかわらず、立入禁止エリア１０８の設定が変更されない場合には、アラームを出すことができる。また、立入禁止エリア設定部６１３は、開口部１０７の形状の変化の履歴を記憶しておき、履歴をタッチパネル１０３に表示することができる。また、立入禁止エリア設定部６１３は、開口部１０７の形状を記憶しておき、タッチパネル１０３上の開口部１０７の形状が変化した箇所を色で表示することができる。 In FIG. 1A, the exclusion zone setting unit 613 can set the opening 107 in the image displayed on the touch panel 103 as the exclusion zone 108 in response to the touch operation of the touch panel 103. Further, the exclusion zone setting unit 613 can detect the opening 107 in the image acquired from the camera 102 and set the detected opening 107 as the exclusion zone 108. For example, the exclusion zone setting unit 613 detects the opening 107 by pattern matching and brightness detection. Further, the exclusion zone setting unit 613 can store the shape of the opening 107, and when the shape of the opening 107 changes as the construction progresses, it can notify that fact. Further, the restricted area setting unit 613 stores the shape of the opening 107, and when the setting of the restricted area 108 is not changed even though the shape of the opening 107 changes as the construction progresses. , Can issue an alarm. Further, the exclusion zone setting unit 613 can store the history of changes in the shape of the opening 107 and display the history on the touch panel 103. Further, the exclusion zone setting unit 613 can store the shape of the opening 107 and display the portion where the shape of the opening 107 on the touch panel 103 has changed in color.

図３（Ａ）では、立入禁止エリア設定部６１３は、タッチパネル１０３のタッチ操作に応じて、タッチパネル１０３に表示される画像内の工場のラインの稼働エリア３０２を立入禁止エリア１０８として設定することができる。また、立入禁止エリア設定部６１３は、工場のラインの稼働エリア３０２をタッチパネル１０３上で表示することができる。 In FIG. 3A, the exclusion zone setting unit 613 may set the operation area 302 of the factory line in the image displayed on the touch panel 103 as the exclusion zone 108 in response to the touch operation of the touch panel 103. can. Further, the exclusion zone setting unit 613 can display the operating area 302 of the factory line on the touch panel 103.

図４（Ａ）では、立入禁止エリア設定部６１３は、タッチパネル１０３のタッチ操作に応じて、タッチパネル１０３に表示される画像内の重機４０２の可動範囲を立入禁止エリア１０８として設定することができる。また、立入禁止エリア設定部６１３は、タッチパネル１０３のタッチ操作に応じて、使用される重機４０２の種類（パワーショベル又はブルドーザー等）を選択し、選択した重機４０２の種類に応じた可動範囲（旋回範囲又は直進範囲）をタッチパネル１０３上に表示することができる。立入禁止エリア設定部６１３は、カメラ１０２から取得された画像内の重機４０２の可動範囲を検出し、その検出した重機４０２の可動範囲を立入禁止エリア１０８として設定することができる。 In FIG. 4A, the exclusion zone setting unit 613 can set the movable range of the heavy equipment 402 in the image displayed on the touch panel 103 as the exclusion zone 108 in response to the touch operation of the touch panel 103. Further, the exclusion zone setting unit 613 selects the type of heavy equipment 402 (power shovel, bulldozer, etc.) to be used according to the touch operation of the touch panel 103, and the movable range (turning) according to the type of the selected heavy equipment 402. The range or the straight range) can be displayed on the touch panel 103. The exclusion zone setting unit 613 can detect the movable range of the heavy equipment 402 in the image acquired from the camera 102, and set the movable range of the detected heavy equipment 402 as the exclusion zone 108.

なお、立入禁止エリア設定部６１３は、高所作業を考慮して、立入禁止エリア１０８を設定することができる。立入禁止エリア設定部６１３は、タッチパネル１０３に表示される画像に応じて、タッチパネル１０３のタッチ操作により、立入禁止エリア１０８を設定することができる。 The exclusion zone setting unit 613 can set the exclusion zone 108 in consideration of aerial work. The exclusion zone setting unit 613 can set the exclusion zone 108 by touch operation of the touch panel 103 according to the image displayed on the touch panel 103.

また、ユーザは、複数の管理者権限が設定され、管理者権限の強さに応じて、立入禁止エリア１０８を変更できる度合いを異ならせることができるようにしてもよい。例えば、権限弱いユーザは、少しだけしか立入禁止エリア１０８を変更できない。 Further, the user may be able to set a plurality of administrator privileges and change the degree to which the exclusion zone 108 can be changed according to the strength of the administrator privileges. For example, a weakly authorized user can change the exclusion zone 108 only slightly.

上記では、立入禁止エリア設定部６１３及び安全エリア設定部６１４は、それぞれ、タッチパネル１０３のタッチ操作に応じて、立入禁止エリア１０８及び安全エリア５０１を設定する場合を例に説明したが、これに限定されない。タッチパネル１０３は、タッチ操作を検出する検出部に限定されず、ユーザの視線を検出する検出部でもよい。タッチ操作の検出部は、例えば、タッチパネル１０３である。視線の検出部は、例えば、仮想現実（ＶＲ）のヘッドセット等のように、ユーザの眼球の動きを例えば赤外線センサにより追跡することにより、ユーザの視線を検出し、ユーザの視線の動きをマウスカーソルの動きとして検出し、ユーザの視線の停留を左クリックとして検出することができる。上記の検出部は、カメラ１０２から取得された画像の表示に対して、タッチ操作又はユーザの視線を検出することができる。立入禁止エリア設定部６１３は、タッチ操作又はユーザの視線に応じて、画像内に立入禁止エリア１０８を設定することができる。安全エリア設定部６１４は、タッチ操作又はユーザの視線に応じて、立入禁止エリア１０８内に安全エリア５０１を設定することができる。 In the above, the exclusion zone setting unit 613 and the safety area setting unit 614 have described the case where the exclusion zone 108 and the safety area 501 are set according to the touch operation of the touch panel 103, respectively, as an example. Not done. The touch panel 103 is not limited to the detection unit that detects the touch operation, and may be a detection unit that detects the line of sight of the user. The touch operation detection unit is, for example, a touch panel 103. The line-of-sight detection unit detects the user's line of sight by tracking the movement of the user's eyeball, for example, with an infrared sensor, such as a virtual reality (VR) headset, and detects the movement of the user's line of sight with a mouse. It can be detected as the movement of the cursor, and the stagnation of the user's line of sight can be detected as a left click. The above-mentioned detection unit can detect a touch operation or a user's line of sight with respect to the display of the image acquired from the camera 102. The exclusion zone setting unit 613 can set the exclusion zone 108 in the image according to the touch operation or the line of sight of the user. The safety area setting unit 614 can set the safety area 501 in the exclusion zone 108 according to the touch operation or the line of sight of the user.

なお、上記実施形態は、何れも本発明を実施するにあたっての具体例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。 It should be noted that the above embodiments are merely specific examples for carrying out the present invention, and the technical scope of the present invention should not be construed in a limited manner by these. That is, the present invention can be implemented in various forms without departing from the technical idea or its main features.

１００監視装置
１０１コンピュータ
１０２カメラ
１０３タッチパネル
１０４警報器
１０８立入禁止エリア
５０１安全エリア
６１１画像取得部
６１２表示制御部
６１３立入禁止エリア設定部
６１４安全エリア設定部
６１５人物検出部
６１６監視部 100 Monitoring device 101 Computer 102 Camera 103 Touch panel 104 Alarm 108 No-entry area 501 Safety area 611 Image acquisition unit 612 Display control unit 613 No-entry area setting unit 614 Safety area setting unit 615 Person detection unit 616 Monitoring unit

Claims

A detection unit that detects a touch operation or the user's line of sight with respect to the display of the image acquired from the image pickup unit.
An exclusion zone setting unit that sets an exclusion zone in the image according to the touch operation or the line of sight of the user.
A monitoring device including a monitoring unit that emits an alarm signal when a person intrudes into the exclusion zone in an image acquired from the image pickup unit.

The monitoring device according to claim 1, wherein the restricted area setting unit can cancel or change the restricted area according to the touch operation or the line of sight of the user.

Further having a safety area setting unit for setting a safety area in the exclusion zone according to the touch operation or the line of sight of the user.
The monitoring unit
In the image acquired from the image pickup unit, when a person intrudes into an area within the exclusion zone and not within the safety area, an alarm signal is issued.
2. The monitoring device described.

The monitoring device according to claim 3, further comprising a display control unit that controls the exclusion zone and the safety area to be displayed in different modes together with the image acquired from the image pickup unit.

An off-limits area setting unit that sets an off-limits area in the image acquired from the image pickup unit, and an off-limits area setting unit.
It has a monitoring unit that emits an alarm signal when a person intrudes into the exclusion zone in the image acquired from the imaging unit.
The restricted area setting unit is a monitoring device characterized in that the restricted area is set according to the image.

It also has a safety area setting unit that sets a safety area within the restricted area.
The monitoring unit
In the image acquired from the image pickup unit, when a person intrudes into an area within the exclusion zone and not within the safety area, an alarm signal is issued.
The fifth aspect of claim 5, wherein the image acquired from the image pickup unit does not issue an alarm signal when a person intrudes into an area within the exclusion zone and within the safety area. Monitoring device.

The monitoring device according to claim 3 or 6, further comprising a display control unit that controls the exclusion zone and the safety area to be displayed in different modes together with the image acquired from the image pickup unit.

The monitoring device according to any one of claims 1 to 7, wherein the restricted area setting unit sets an opening in the image as the restricted area.

The monitoring device according to claim 8, wherein the restricted area setting unit detects an opening in the image and sets the detected opening as the restricted area.

The monitoring device according to any one of claims 1 to 7, wherein the restricted area setting unit sets an operating area of a factory line in the image as the restricted area.

The monitoring device according to any one of claims 1 to 7, wherein the restricted area setting unit sets a movable range of heavy machinery in the image as the restricted area.

The monitoring device according to claim 11, wherein the restricted area setting unit detects the movable range of the heavy machine in the image, and sets the movable range of the detected heavy machine as the restricted area.

The monitoring device according to any one of claims 1 to 12, wherein the imaging unit is installed on a temporary lumber or a scaffold.

The monitoring device according to any one of claims 1 to 13, wherein the imaging unit switches between generation of an infrared image and generation of a visible light image according to the brightness.

The monitoring device according to any one of claims 1 to 14, further comprising a person detection unit that detects a person in an image acquired from the image pickup unit.

The person detection unit detects the foot of a person in the image acquired from the image pickup unit, and the person detection unit detects the foot of the person.
The monitoring according to claim 15, wherein the monitoring unit issues an alarm signal when the foot of the detected person is present in the exclusion zone in the image acquired from the image pickup unit. Device.

The monitoring device according to any one of claims 1 to 16, wherein the monitoring unit operates a buzzer or a patrol lamp by issuing the alarm signal.

A detection step for detecting a touch operation or a user's line of sight with respect to the display of an image acquired from the image pickup unit, and
An exclusion zone setting step for setting an exclusion zone in the image according to the touch operation or the line of sight of the user.
A monitoring method comprising a monitoring step for issuing an alarm signal when a person intrudes into the exclusion zone in an image acquired from the image pickup unit.

An exclusion zone setting step to set an exclusion zone in the image acquired from the image pickup unit, and
It has a monitoring step of issuing an alarm signal when a person intrudes into the exclusion zone in the image acquired from the image pickup unit.
In the restricted area setting step, a monitoring method comprising setting the restricted area according to the image.

A program for causing a computer to perform each step of the monitoring method according to claim 18 or 19.