JP5387595B2 - Person monitoring device, person monitoring method, and computer program - Google Patents

Person monitoring device, person monitoring method, and computer program Download PDF

Info

Publication number
JP5387595B2
JP5387595B2 JP2011038816A JP2011038816A JP5387595B2 JP 5387595 B2 JP5387595 B2 JP 5387595B2 JP 2011038816 A JP2011038816 A JP 2011038816A JP 2011038816 A JP2011038816 A JP 2011038816A JP 5387595 B2 JP5387595 B2 JP 5387595B2
Authority
JP
Japan
Prior art keywords
person
area
information
setting
notification message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2011038816A
Other languages
Japanese (ja)
Other versions
JP2012174223A (en
Inventor
稔 原田
辰一郎 下井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Steel Corp
Original Assignee
Nippon Steel Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nippon Steel Corp filed Critical Nippon Steel Corp
Priority to JP2011038816A priority Critical patent/JP5387595B2/en
Publication of JP2012174223A publication Critical patent/JP2012174223A/en
Application granted granted Critical
Publication of JP5387595B2 publication Critical patent/JP5387595B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Alarm Systems (AREA)
  • Image Analysis (AREA)

Description

本発明は、人物監視装置、人物監視方法、及びコンピュータプログラムに関し、特に、エリアを入退出する人物を監視するために用いて好適なものである。   The present invention relates to a person monitoring apparatus, a person monitoring method, and a computer program, and is particularly suitable for monitoring a person entering / exiting an area.

従来から、安全上の問題や、防犯上の問題から、エリア（すなわち特定の空間領域）の画像を撮像し、撮像したエリアの画像を処理して当該エリア内にいる人物を監視するための技術が提案されている。このような技術として特許文献１、２に記載の技術がある。   Conventionally, a technique for capturing an image of an area (that is, a specific spatial region) and monitoring a person in the area by processing an image of the captured area due to a safety problem or a security problem. Has been proposed. As such a technique, there are techniques described in Patent Documents 1 and 2.

特許文献１では、まず、撮像画像内における移動体の領域である対象画像と、カメラから当該移動体までの距離である対象距離とを移動体情報として検出し、当該対象画像に対して、当該移動体を人物と仮定したときの所定の大きさの頭部領域を、当該対象距離に応じた大きさで設定する。そして、当該頭部領域の大きさをサンプル画像の大きさに変換して当該頭部領域とサンプル画像とを比較することで移動体が人物であるか否かを判定する。   In Patent Document 1, first, a target image that is a region of a moving body in a captured image and a target distance that is a distance from the camera to the moving body are detected as moving body information. A head region having a predetermined size when the moving body is assumed to be a person is set with a size corresponding to the target distance. Then, by converting the size of the head region into the size of the sample image and comparing the head region with the sample image, it is determined whether or not the moving body is a person.

また、特許文献２では、撮像画像と背景画像との差分画像の分散を算出して人物を検出する。このとき、背景画像を定期的に更新するが、人物を検出すると背景画像の更新を中断する。また、人物を検出しなくなったときに物体の検出を行う。物体の検出は、現在の画像と背景画像の輝度差分画像に基づいて行う。   In Patent Document 2, a person is detected by calculating a variance of a difference image between a captured image and a background image. At this time, the background image is periodically updated, but when the person is detected, the background image update is interrupted. Also, an object is detected when no person is detected. The detection of the object is performed based on the luminance difference image between the current image and the background image.

特開２００７−１５６９３９号公報JP 2007-156939 A 特開２００７−３００５３１号公報JP 2007-300531 A

ところで、工場等では作業者がある監視対象のエリア内で作業を行う場合がある。この場合、作業者が当該エリア内に滞在し（作業者がエリア内で動きを止め）、その後エリア外に出ていくことがある。
しかしながら、前述した従来の技術では、撮像画像に変化がないと人物がエリアからいなくなったと判定してしまう。このため、エリア内で人物がある期間動かなかった場合、当該人物の検出ができなくなる。その後、当該人物が動き出すと、当該人物を検出することになるが、当該人物を、エリア内に居続けている人物とは別の新たな人物として検出してしまう。 By the way, in a factory or the like, there are cases where an operator performs work in an area to be monitored. In this case, the worker may stay in the area (the worker stops moving in the area) and then go out of the area.
However, in the conventional technique described above, it is determined that the person has left the area if there is no change in the captured image. For this reason, when a person does not move within a certain period, the person cannot be detected. Thereafter, when the person starts to move, the person is detected, but the person is detected as a new person different from the person who remains in the area.

本発明は以上の問題点に鑑みてなされたものであり、監視対象のエリア内で動きのなくなった人物が当該エリア内に滞在していることと、当該エリアから退出したこととを検出できるようにすることを目的とする。   The present invention has been made in view of the above problems, and can detect that a person who has stopped moving in an area to be monitored stays in the area and has left the area. The purpose is to.

本発明の人物監視装置は、人物の在、不在を検出する対象となる領域である検出エリアの動画または連続する静止画である撮像画像の差分画像に基づいて、当該検出エリアにおける人物を検出した結果として、当該人物を識別する第１の人物識別情報と、当該人物の位置を示す第１の人物位置情報とを含む通知伝文を映像判定装置から取得する通知伝文取得手段と、前記検出エリアの撮像画像の差分画像に基づいて、当該検出エリアにおける人物を検出した結果として、当該検出エリアから人物がいなくなったことを示す解除伝文を映像判定装置から取得する解除伝文取得手段と、前記検出エリアの中の領域であって、人物が滞在する可能性がある領域である溶け込みエリアの情報を設定する溶け込みエリア設定手段と、前記溶け込みエリアの中にいる人物を識別する第２の人物識別情報と、当該人物の位置を示す第２の人物位置情報と、当該人物の前記溶け込みエリアにおける滞在の状態を識別するための人物滞在情報とを含む在席管理情報を記憶する在席管理情報記憶手段と、前記通知伝文及び前記解除伝文に基づいて、前記在席管理情報を設定する在席管理情報設定手段と、を有し、前記在席管理情報設定手段は、前記通知伝文に含まれる第１の人物識別情報を前記第２の人物識別情報として設定すると共に、前記通知伝文に含まれる第１の人物位置情報を前記第２の人物位置情報として設定する第１の設定手段と、前記第１の設定手段による設定がなされた後に取得された前記通知伝文に含まれる第１の人物識別情報と異なる第２の人物識別情報が前記在席管理情報にあり、且つ、当該第２の人物識別情報に対応する第２の人物位置情報が前記溶け込みエリア内の位置を示すものである場合に、当該第２の人物識別情報と当該第２の人物位置情報とに対応する人物滞在情報として、前記溶け込みエリアに滞在していることを示す情報を設定する第２の設定手段と、前記第１の設定手段による設定がなされた後に前記解除伝文が取得され、且つ、前記第２の人物位置情報が前記溶け込みエリア内の位置を示すものである在席管理情報がある場合に、当該第２の人物位置情報に対応する人物滞在情報として、前記溶け込みエリアに滞在していることを示す情報を設定する第３の設定手段と、前記第２の設定手段又は前記第３の設定手段による設定がなされた後に取得された前記通知伝文に、前記在席管理情報に含まれる第２の人物識別情報と異なる第１の人物識別情報があり、且つ、当該第２の人物識別情報に対応する人物滞在情報が、前記溶け込みエリアに滞在していることを示す情報である場合に、当該第２の人物識別情報を当該通知伝文に含まれる第１の人物識別情報に変更すると共に、当該人物滞在情報として、前記溶け込みエリアで滞在していないことを示す情報を設定する第４の設定手段と、を有することを特徴とする。   The person monitoring device of the present invention detects a person in the detection area based on a moving image of a detection area that is a region for detecting the presence or absence of a person or a difference image of a captured image that is a continuous still image. As a result, a notification message acquisition means for acquiring a notification message including first person identification information for identifying the person and first person position information indicating the position of the person from the video determination device, and the detection As a result of detecting the person in the detection area based on the difference image of the captured image of the area, a cancellation message acquisition means for acquiring from the video determination device a cancellation message indicating that there is no person from the detection area; A blending area setting means for setting information of a blending area, which is a region within the detection area and in which a person may stay, and the blending area 2nd person identification information which identifies the person in the inside, 2nd person position information which shows the position of the said person, and person stay information for identifying the state of the person's stay in the said fusion area Presence management information storage means for storing presence management information; presence management information setting means for setting the presence management information based on the notification message and the release message; and The seat management information setting means sets the first person identification information included in the notification message as the second person identification information, and sets the first person position information included in the notification message as the second person identification information. First setting means that is set as the person position information, and second person identification information that is different from the first person identification information included in the notification message acquired after the setting by the first setting means Is in the presence management information In addition, when the second person position information corresponding to the second person identification information indicates a position in the merge area, the second person identification information and the second person position information Second release means for setting information indicating that the person stays in the merged area as corresponding person stay information, and the release message is acquired after setting by the first setting means, and When there is presence management information in which the second person position information indicates a position in the merge area, the person stays in the merge area as person stay information corresponding to the second person position information. In the presence management information in the notification message acquired after the setting by the third setting means for setting information indicating that the information is present, and the second setting means or the third setting means. included When there is first person identification information different from the second person identification information, and the person stay information corresponding to the second person identification information is information indicating that the person stays in the merge area. The second person identification information is changed to the first person identification information included in the notification message, and information indicating that the person does not stay in the merge area is set as the person stay information. And setting means.

本発明の人物監視方法は、人物の在、不在を検出する対象となる領域である検出エリアの動画または連続する静止画である撮像画像の差分画像に基づいて、当該検出エリアにおける人物を検出した結果として、当該人物を識別する第１の人物識別情報と、当該人物の位置を示す第１の人物位置情報とを含む通知伝文を映像判定装置から取得する通知伝文取得工程と、前記検出エリアの撮像画像の差分画像に基づいて、当該検出エリアにおける人物を検出した結果として、当該検出エリアから人物がいなくなったことを示す解除伝文を映像判定装置から取得する解除伝文取得工程と、前記検出エリアの中の領域であって、人物が滞在する可能性がある領域である溶け込みエリアの情報を設定する溶け込みエリア設定工程と、前記溶け込みエリアの中にいる人物を識別する第２の人物識別情報と、当該人物の位置を示す第２の人物位置情報と、当該人物の前記検出エリアにおける滞在の状態を識別するための人物滞在情報とを含む在席管理情報を記憶する在席管理情報記憶工程と、前記通知伝文及び前記解除伝文に基づいて、前記在席管理情報を設定する在席管理情報設定工程と、を有し、前記在席管理情報設定工程は、前記通知伝文に含まれる第１の人物識別情報を前記第２の人物識別情報として設定すると共に、前記通知伝文に含まれる第１の人物位置情報を前記第２の人物位置情報として設定する第１の設定工程と、前記第１の設定工程による設定がなされた後に取得された前記通知伝文に含まれる第１の人物識別情報と異なる第２の人物識別情報が前記在席管理情報にあり、且つ、当該第２の人物識別情報に対応する第２の人物位置情報が前記溶け込みエリア内の位置を示すものである場合に、当該第２の人物識別情報と当該第２の人物位置情報とに対応する人物滞在情報として、前記溶け込みエリアに滞在していることを示す情報を設定する第２の設定工程と、前記第１の設定工程による設定がなされた後に前記解除伝文が取得され、且つ、前記第２の人物位置情報が前記溶け込みエリア内の位置を示すものである在席管理情報がある場合に、当該第２の人物位置情報に対応する人物滞在情報として、前記溶け込みエリアに滞在していることを示す情報を設定する第３の設定工程と、前記第２の設定工程又は前記第３の設定工程による設定がなされた後に取得された前記通知伝文に、前記在席管理情報に含まれる第２の人物識別情報と異なる第１の人物識別情報があり、且つ、当該第２の人物識別情報に対応する人物滞在情報が、前記溶け込みエリアに滞在していることを示す情報である場合に、当該第２の人物識別情報を当該通知伝文に含まれる第１の人物識別情報に変更すると共に、当該人物滞在情報として、前記溶け込みエリアで滞在していないことを示す情報を設定する第４の設定工程と、を有することを特徴とする。   The person monitoring method of the present invention detects a person in the detection area based on a moving image of a detection area, which is a region for detecting the presence or absence of a person, or a difference image of captured images that are continuous still images. As a result, a notification message acquisition step of acquiring a notification message including first person identification information for identifying the person and first person position information indicating the position of the person from the video determination device, and the detection As a result of detecting a person in the detection area based on the difference image of the captured image of the area, a cancellation message acquisition step of acquiring a cancellation message indicating that there is no person from the detection area from the video determination device; A blending area setting step for setting information of a blending area that is a region within the detection area and in which a person may stay, and the blending area 2nd person identification information which identifies the person who exists in the inside, 2nd person position information which shows the position of the said person, and person stay information for identifying the state of the person's stay in the said detection area A presence management information storage step for storing presence management information, and a presence management information setting step for setting the presence management information based on the notification message and the release message, and The seat management information setting step sets the first person identification information included in the notification message as the second person identification information, and sets the first person position information included in the notification message as the second person identification information. A first setting step that is set as person position information, and second person identification information that is different from the first person identification information included in the notification message acquired after the setting by the first setting step Is in the presence management information, and When the second person position information corresponding to the second person identification information indicates the position in the merge area, the second person identification information and the second person position information are associated with each other. The release message is acquired after the second setting step for setting information indicating that the person stays in the fusion area as the person staying information, and the setting by the first setting step, and When there is presence management information in which the second person position information indicates the position in the merge area, the person stay information corresponding to the second person position information is stayed in the merge area. Included in the presence management information in the notification message acquired after the third setting step for setting information indicating that the user is present and the setting in the second setting step or the third setting step. Second If there is first person identification information different from the person identification information and the person stay information corresponding to the second person identification information is information indicating that the person stay information is staying in the merge area, 4th setting which changes the 2nd person identification information into the 1st person identification information contained in the notice message, and sets information which shows not staying in the penetration area as the person stay information concerned And a process.

本発明のコンピュータプログラムは、前記人物監視装置の各手段としてコンピュータを機能させることを特徴とする。   The computer program according to the present invention causes a computer to function as each means of the person monitoring apparatus.

本発明によれば、人物監視装置において人物滞在情報により溶け込みエリアにいる人物が滞在しているか否かを管理するようにした。したがって、人物が溶け込みエリア内で動かなくなり、映像判定装置で当該人物を検出できなくなった場合でも、人物監視装置において、当該人物が溶け込みエリア内に滞在していることと溶け込みエリアから退出したこととを検出することができる。   According to the present invention, the person monitoring device manages whether or not a person in the merged area is staying based on the person stay information. Therefore, even when a person stops moving in the blending area and the person cannot be detected by the video determination device, the person monitoring device has stayed in the blending area and has left the blending area. Can be detected.

安全監視システムの構成の一例を示す図である。It is a figure which shows an example of a structure of a safety monitoring system. アラーム通知伝文と、アラーム解除伝文の一例を示す図である。It is a figure which shows an example of an alarm notification message and an alarm cancellation message. アラーム通知伝文及びアラーム解除伝文を送信するタイミングの一例を示すタイムチャートである。It is a time chart which shows an example of the timing which transmits an alarm notification message and an alarm cancellation message. 安全監視サーバの機能的な構成の一例を示す図である。It is a figure which shows an example of a functional structure of a safety monitoring server. 撮像エリアに検出エリアと溶け込みエリアの一例を重ねて示した図である。It is the figure which overlapped and showed an example of the detection area and the fusion area in the imaging area. 滞在エリア座標テーブルの一例を示す図である。It is a figure which shows an example of a stay area coordinate table. 溶け込みエリアと、検出エリアと、撮像画像の撮像エリアの一例を示す図である。It is a figure which shows an example of a fusion | melting area, a detection area, and the imaging area of a captured image. 在席管理テーブルの一例を示す図である。It is a figure which shows an example of an attendance management table. 伝文受信処理の主要な動作の一例を説明するフローチャートである。It is a flowchart explaining an example of main operation | movement of a message reception process. 溶け込み判定処理の一例を説明するフローチャートである。It is a flowchart explaining an example of a melt | dissolution determination process. 溶け込み解除処理の一例を説明するフローチャートである。It is a flowchart explaining an example of a melt | dissolution cancellation | release process.

以下、図面を参照しながら、本発明の一実施形態を説明する。
図１は、安全監視システムの構成の一例を示す図である。本実施形態では、製鉄所等の工場で作業を行う作業者を監視する場合を例に挙げて説明する。
図１において、安全監視システムは、監視カメラ１０と、映像判定装置２０と、安全監視サーバ３０と、ＶＡスピーカ４０と、ネットワーク５０と、を有する。 Hereinafter, an embodiment of the present invention will be described with reference to the drawings.
FIG. 1 is a diagram illustrating an example of a configuration of a safety monitoring system. In the present embodiment, a case where an operator who performs work in a factory such as a steel mill is monitored will be described as an example.
In FIG. 1, the safety monitoring system includes a monitoring camera 10, a video determination device 20, a safety monitoring server 30, a VA speaker 40, and a network 50.

（監視カメラ１０）
監視カメラ１０は、作業者（人物）の在、不在を検出する検出エリア１００として工場内のある作業エリア（の全部又は一部）の動画像（デジタル画像）である撮像画像を撮像する。ここでは一例として、検出エリア１００には、作業者が操作する操作盤６０が設置されているものとする。尚、図１では、検出エリア１００を１つしか示していないが、複数の検出エリア１００を定め、それぞれの検出エリア１００を１台の監視カメラ１０で纏めて又は複数の監視カメラ１０で個別に撮像するようにしてもよい。また、検出エリア１００に設置される設備は、操作盤６０に限定されるものではなく、また１つの検出エリア１００に複数の設備が設置されるようにしてもよい。 (Monitoring camera 10)
The surveillance camera 10 captures a captured image that is a moving image (digital image) of a certain work area (all or a part) in the factory as a detection area 100 for detecting the presence or absence of a worker (person). Here, as an example, it is assumed that an operation panel 60 operated by an operator is installed in the detection area 100. Although only one detection area 100 is shown in FIG. 1, a plurality of detection areas 100 are defined, and each detection area 100 is collected by one monitoring camera 10 or individually by a plurality of monitoring cameras 10. You may make it image. The equipment installed in the detection area 100 is not limited to the operation panel 60, and a plurality of equipment may be installed in one detection area 100.

監視カメラ１０は、検出エリア１００の画像を時系列に得ることができる撮像手段を有していれば、どのような構成であってもよい。例えば、監視カメラ１０は、静止画像を時間的に連続的に撮像してもよいし、カラー画像及びモノクロ画像の何れを撮像してもよい。また、監視カメラ１０は、検出エリア１００をその撮像範囲に含むように固定されて設置されていることが望ましい。監視カメラ１０の検出エリア１００に対する撮像方向が変わると、作業者を検出する際に、撮像方向の変更を考慮した処理を行わなければならないため、映像判定装置２０による処理の負荷が増大するからである。   The monitoring camera 10 may have any configuration as long as it has an imaging unit that can obtain an image of the detection area 100 in time series. For example, the monitoring camera 10 may capture still images continuously in time, or may capture either color images or monochrome images. Moreover, it is desirable that the monitoring camera 10 is fixed and installed so as to include the detection area 100 in the imaging range. When the imaging direction of the monitoring camera 10 with respect to the detection area 100 changes, processing for changing the imaging direction must be performed when an operator is detected, which increases the processing load of the video determination device 20. is there.

（映像判定装置２０）
映像判定装置２０は、監視カメラ１０で撮像された撮像画像を入力し、当該撮像画像を画像解析し、当該画像解析の結果に基づいて、作業者の検出エリア１００に対する入退出を判定する。映像判定装置２０は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ、ＨＤＤ、及び各種のインターフェースを備えたコンピュータと、コンピュータディスプレイとを用いることにより実現できる。
映像判定装置２０が作業者を検出する方法は、公知の方法で実現できる。例えば、映像判定装置２０は、撮像画像と別途得た背景画像との差分画像と、予めパラメータとして設定された作業者の大きさ・形を示す人物サイズ情報と、検出エリア１００の位置・大きさを示す検出エリアサイズ情報と、に基づいて、作業者が検出エリア１００に進入したか否かを判定する。すなわち、映像判定装置２０は、撮像画像と背景画像との差分画像と、人物サイズ情報とを照合し、当該差分画像が人物であるか否かを判定する。また、映像判定装置２０は、撮像画像と背景画像との差分画像と、検出エリアサイズ情報とを照合し、当該差分画像が検出エリア１００の中に位置するものであるか否かを判定する。また、映像判定装置２０は、差分画像（人物）の追跡処理を行って、検出エリア１００の中に位置する差分画像（人物）を追跡する。映像判定装置２０は、差分画像（人物）が検出エリア１００の中に位置しなくなったら、当該差分画像（人物）についての追跡処理を終了する。 (Video determination device 20)
The video determination device 20 inputs a captured image captured by the monitoring camera 10, analyzes the captured image, and determines entry / exit of the worker in the detection area 100 based on the result of the image analysis. The video determination device 20 can be realized by using, for example, a computer having a CPU, a ROM, a RAM, an HDD, various interfaces, and a computer display.
The method by which the image determination device 20 detects the worker can be realized by a known method. For example, the video determination device 20 includes a difference image between a captured image and a separately obtained background image, person size information indicating the size and shape of a worker set in advance as parameters, and the position and size of the detection area 100. It is determined whether or not the worker has entered the detection area 100 based on the detected area size information. That is, the video determination device 20 collates the difference image between the captured image and the background image and the person size information, and determines whether or not the difference image is a person. In addition, the video determination device 20 collates the difference image between the captured image and the background image and the detection area size information, and determines whether the difference image is located in the detection area 100. In addition, the video determination device 20 performs a tracking process of the difference image (person) to track the difference image (person) located in the detection area 100. When the difference image (person) is no longer located in the detection area 100, the video determination device 20 ends the tracking process for the difference image (person).

映像判定装置２０は、以上のようにして検出エリア１００に作業者が進入したと判定すると、アラーム通知伝文ＡＮを作成して安全監視サーバ３０に送信する。映像判定装置２０は、その後、検出エリア１００から全員が退出したと判定すると（検出エリア１００に作業者が１人もいなくなったと判定すると）、アラーム解除伝文ＡＣを作成して安全監視サーバ３０に送信する。   When determining that the worker has entered the detection area 100 as described above, the video determination device 20 creates an alarm notification message AN and transmits it to the safety monitoring server 30. If the video determination device 20 subsequently determines that all members have left the detection area 100 (when it is determined that there is no worker in the detection area 100), the video determination device 20 creates an alarm release message AC and sends it to the safety monitoring server 30. Send.

図２は、アラーム通知伝文ＡＮと、アラーム解除伝文ＡＣの一例を示す図である。具体的に、図２（ａ）は、アラーム通知伝文ＡＮの一例を示す図であり、図２（ｂ）は、アラーム解除伝文ＡＣの一例を示す図である。図２に示す各記号の意味を以下の表１に示す。   FIG. 2 is a diagram illustrating an example of the alarm notification message AN and the alarm release message AC. Specifically, FIG. 2A is a diagram illustrating an example of an alarm notification message AN, and FIG. 2B is a diagram illustrating an example of an alarm release message AC. The meaning of each symbol shown in FIG. 2 is shown in Table 1 below.

Figure 0005387595
Figure 0005387595

図２（ａ）において、アラーム通知伝文ＡＮには、アラーム通知伝文ＡＮの通知日時を示す日付時刻２０１と、検出エリア１００にいる作業者の数（進入物体数Ｎ）２０２と、各作業者を識別する検出進入物体ＩＤ２０３と、各作業者の位置２０４とが記述される。検出進入物体ＩＤ２０３の値として、検出順に００１、００２、・・・、９９９が付与され、９９９まで一巡すると検出進入物体ＩＤ２０３の値は００１に戻る。また、各作業者の位置２０４には、撮像画像上での作業者の足元中心位置のｘ−ｙ座標Ｆｘ、Ｆｙと、平均化後の作業者の足元中心位置のｘ−ｙ座標Ｆｘａ、Ｆｙａと、作業者の重心位置のｘ−ｙ座標Ｇｘ、Ｇｙとが含まれる。
本実施形態では、映像判定装置２０は、作業者の足元中心位置Ｆｘ、Ｆｙが検出エリア１００内にある場合に、当該作業者は検出エリア１００にいると判定するようにしている。ただし、必ずしも作業者の足元中心位置Ｆｘ、Ｆｙで作業者の位置を特定する必要はない、例えば、作業者の重心位置Ｇｘ、Ｇｙで作業者の位置を特定するようにしてもよい。
尚、以下の説明では、「検出進入物体ＩＤ」を必要に応じて「オブジェクトＩＤ（OBJ＿ID）」と称し、「作業者の重心位置」を必要に応じて「作業者の座標位置」と称する。 In FIG. 2A, the alarm notification message AN includes a date and time 201 indicating the notification date and time of the alarm notification message AN, the number of workers in the detection area 100 (number of entering objects N) 202, and each work. A detection approaching object ID 203 for identifying a worker and a position 204 of each worker are described. , 999,... 999 are given as the value of the detected approaching object ID 203 in the order of detection, and the value of the detected approaching object ID 203 returns to 001 after one round to 999. Further, at each worker position 204, the xy coordinates Fx and Fy of the worker's foot center position on the captured image, and the xy coordinates Fxa and Fya of the worker's foot center position after averaging. And xy coordinates Gx and Gy of the center of gravity position of the worker.
In the present embodiment, the image determination device 20 determines that the worker is in the detection area 100 when the worker's foot center positions Fx and Fy are in the detection area 100. However, it is not always necessary to specify the worker's position based on the operator's foot center positions Fx and Fy. For example, the worker's position may be specified based on the operator's center-of-gravity positions Gx and Gy.
In the following description, “detected approaching object ID” is referred to as “object ID (OBJ_ID)” as necessary, and “worker's center of gravity position” is referred to as “worker's coordinate position” as necessary.

図２（ｂ）において、アラーム解除伝文ＡＣには、アラーム解除伝文ＡＣの通知日時を示す日付時刻２０５が記述される。尚、前述したように、アラーム解除伝文ＡＣは、検出エリア１００から全員が退出したと判定されると作成されるものであるので、作業者の情報（進入物体数Ｎ、オブジェクトＩＤ、各作業者の位置）を含まない。
図３は、映像判定装置２０がアラーム通知伝文ＡＮ及びアラーム解除伝文ＡＣを安全監視サーバ３０に送信するタイミングの一例を示すタイムチャートである。
図３において、映像判定装置２０は、無人だった検出エリア１００に作業者１が進入したと判定すると、アラーム通知コマンドＡＮを定周期（例えば１秒間隔程度）で安全監視サーバ３０に送信する。映像判定装置２０は、作業者の数（進入物体数Ｎ）２０２として「Ｎ＝１」を、検出進入物体ＩＤ（オブジェクトＩＤ（OBJ＿ID））２０３として例えば「００１」を、作業者の位置２０４の情報として作業者１の位置２０４の情報をそれぞれ設定したアラーム通知伝文ＡＮを作成して安全監視サーバ３０に送信する。 In FIG. 2B, the alarm release message AC describes a date and time 205 indicating the notification date and time of the alarm release message AC. Note that, as described above, the alarm release message AC is created when it is determined that all the members have left the detection area 100, so that the operator information (number of entering objects N, object ID, each work) Does not include the position of the person.
FIG. 3 is a time chart illustrating an example of timing at which the video determination device 20 transmits the alarm notification message AN and the alarm release message AC to the safety monitoring server 30.
In FIG. 3, when the video determination device 20 determines that the worker 1 has entered the detection area 100 that has been unattended, the video determination device 20 transmits an alarm notification command AN to the safety monitoring server 30 at regular intervals (for example, about every 1 second). The video determination apparatus 20 sets “N = 1” as the number of workers (number of entering objects N) 202, “001” as the detected approaching object ID (object ID (OBJ_ID)) 203, for example, at the position 204 of the worker. An alarm notification message AN in which information of the position 204 of the worker 1 is set as information is created and transmitted to the safety monitoring server 30.

その後、検出エリア１００に更に作業者２が進入したと判定すると、映像判定装置２０は、作業者の数（進入物体数Ｎ）２０２として「Ｎ＝２」を（進入物体数Ｎを「１」から「２」に変更し）、検出進入物体ＩＤ（オブジェクトＩＤ（OBJ＿ID））２０３として例えば「００２」を、作業者の位置２０４の情報として作業者２の位置２０４の情報をそれぞれ設定（追加）したアラーム通知伝文ＡＮを作成して安全監視サーバ３０に送信する。
その後、検出エリア１００から作業者１が退出したと判定すると、映像判定装置２０は、作業者の数（進入物体数Ｎ）２０２として「Ｎ＝１」を設定（進入物体数Ｎを「２」から「１」に変更）すると共に、検出進入物体ＩＤ（オブジェクトＩＤ（OBJ＿ID））２０３として作業者１の検出進入物体ＩＤ（「００１」）と、作業者の位置２０４の情報として作業者１の位置２０４の情報とを削除したアラーム通知伝文ＡＮを生成して安全監視サーバ３０に送信する。
このように検出エリア１００への進入者の増減に応じて、アラーム通知伝文ＡＮに含まれる「作業者の数（進入物体数Ｎ）２０２の値と、検出進入物体ＩＤ（オブジェクトＩＤ（OBJ＿ID））の数と、作業者の位置２０４の数」が増減する。 Thereafter, when it is determined that the worker 2 has further entered the detection area 100, the video determination device 20 sets “N = 2” (the number of entering objects N to “1”) as the number of workers (number of entering objects N) 202. For example, “002” is set as the detected approaching object ID (object ID (OBJ_ID)) 203, and information on the position 204 of the worker 2 is set (added) as information on the position 204 of the worker. The generated alarm notification message AN is transmitted to the safety monitoring server 30.
Thereafter, when it is determined that the worker 1 has left the detection area 100, the video determination device 20 sets “N = 1” as the number of workers (number N of entering objects) 202 (the number N of entering objects is “2”). To “1”) and the detected approaching object ID (“001”) of the worker 1 as the detected approaching object ID (object ID (OBJ_ID)) 203 and the information of the worker 1 as the information of the position 204 of the worker An alarm notification message AN in which the information of the position 204 is deleted is generated and transmitted to the safety monitoring server 30.
Thus, according to the increase / decrease in the number of persons entering the detection area 100, the value of the “number of workers (number of entering objects N) 202” and the detected entering object ID (object ID (OBJ_ID)) included in the alarm notification message AN. ) And the number of worker positions 204 "increase or decrease.

そして、検出エリア１００から作業者２が退出したと判定すると、すなわち検出エリア１００から全員が退出したと判定すると、映像判定装置２０は、アラーム通知伝文ＡＮの送信を停止し、当該送信が停止してから所定の時間（警報確保時間）が経過した後にアラーム解除伝文ＡＣを安全監視サーバ３０に送信する。   When it is determined that the worker 2 has left the detection area 100, that is, when it is determined that all of the workers have left the detection area 100, the video determination device 20 stops the transmission of the alarm notification message AN, and the transmission stops. Then, after a predetermined time (alarm securing time) has elapsed, an alarm release message AC is transmitted to the safety monitoring server 30.

（安全監視サーバ３０、ＶＡスピーカ４０）
安全監視サーバ３０は、ＥｔｈｅｒＮｅｔ（登録商標）等のネットワーク５０を介して、映像判定装置２０から、アラーム通知伝文ＡＮ及びアラーム解除伝文ＡＣを受信し、それらに含まれている情報に基づいて、検出エリア１００内にいる作業者を監視する。安全監視サーバ３０は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ、ＨＤＤ、及び各種のインターフェースを備えたコンピュータと、コンピュータディスプレイとを用いることにより実現できる。 (Safety monitoring server 30, VA speaker 40)
The safety monitoring server 30 receives the alarm notification message AN and the alarm release message AC from the video determination device 20 via the network 50 such as EtherNet (registered trademark), and based on the information included in them. The worker in the detection area 100 is monitored. The safety monitoring server 30 can be realized by using, for example, a computer having a CPU, ROM, RAM, HDD, and various interfaces and a computer display.

上記したように、映像判定装置２０は、差分画像（人物）の追跡処理を行って、検出エリア１００の中に位置する差分画像（人物）を追跡する。検出エリア１００内で作業者の動きが止まった場合、映像判定装置２０は、検出エリア１００内に当該作業者がいるのにも関わらず、当該作業者を検出することができない。したがって、このとき映像判定装置２０は、当該作業者の情報が削除されたアラーム通知伝文ＡＮ又はアラーム解除伝文ＡＣを安全監視サーバ３０に送信する。安全監視サーバ３０は、このような場合であっても、検出エリア１００内に当該作業者がいる（滞在している）ことを検出（認識）できるようにしている。以下の説明では、このような安全監視サーバ３０による作業者の検出処理を必要に応じて「溶け込み判定処理」と称する。
また、映像判定装置２０は、検出エリア１００内にいるはずの作業者の検出ができなくなった後、当該作業者が動き出すことにより、当該作業者を検出した場合には、当該作業者の情報として新たな作業者の情報が追加されたアラーム通知伝文ＡＮを安全監視サーバ３０に送信する。安全監視サーバ３０は、このような場合であっても、当該新たな作業者が検出エリア１００内に既にいた作業者であることを検出（認識）できるようにしている。以下の説明では、このような安全監視サーバ３０による作業者の検出処理を必要に応じて「溶け込み復帰処理」と称する。 As described above, the video determination device 20 performs the tracking process of the difference image (person) and tracks the difference image (person) located in the detection area 100. When the movement of the worker stops in the detection area 100, the video determination device 20 cannot detect the worker even though the worker is in the detection area 100. Accordingly, at this time, the video determination device 20 transmits the alarm notification message AN or the alarm release message AC from which the information of the worker has been deleted to the safety monitoring server 30. Even in such a case, the safety monitoring server 30 can detect (recognize) that the worker is present (stays) in the detection area 100. In the following description, such worker detection processing by the safety monitoring server 30 is referred to as “penetration determination processing” as necessary.
In addition, the video determination device 20 can detect the worker as the information of the worker when the worker starts moving after the worker who should be in the detection area 100 cannot be detected. An alarm notification message AN to which new worker information is added is transmitted to the safety monitoring server 30. Even in such a case, the safety monitoring server 30 can detect (recognize) that the new worker is already in the detection area 100. In the following description, such a worker detection process by the safety monitoring server 30 is referred to as a “melting return process” as necessary.

安全監視サーバ３０は、検出エリア１００内にいる作業者の監視の結果に応じた通報処理を行う。本実施形態では、工場内に適宜設置されたＶＡスピーカ４０や、安全監視サーバ３０が備えるコンピュータディスプレイから通報を行う。ＶＡスピーカ４０は、検出エリア１００内にいる作業者本人に直接通報すべく検出エリア１００の傍に設置されてもよいし、検出エリア１００外（例えば検出エリア１００外の運転室や管理室）に設置されてもよい。ただし、必ずしもＶＡスピーカ４０やコンピュータディスプレイを用いて通報を行う必要はない。例えば、ネットワーク５０に接続された通話電話から公衆網を介して携帯端末に通報したり、作業者本人等が装着しているイヤホンマイクに通報したりすることができる。   The safety monitoring server 30 performs notification processing according to the result of monitoring the workers in the detection area 100. In the present embodiment, a notification is sent from the VA speaker 40 appropriately installed in the factory or the computer display included in the safety monitoring server 30. The VA speaker 40 may be installed beside the detection area 100 so as to directly notify the worker himself / herself in the detection area 100, or outside the detection area 100 (for example, a cab or management room outside the detection area 100). It may be installed. However, it is not always necessary to report using the VA speaker 40 or the computer display. For example, a call telephone connected to the network 50 can be notified to a portable terminal via a public network, or can be notified to an earphone microphone worn by the worker himself / herself.

((安全監視サーバ３０の機能的な構成))
図４は、安全監視サーバ３０の機能的な構成の一例を示す図である。
図４において、安全監視サーバ３０は、滞在エリア座標テーブル記憶部４０１と、在席管理テーブル記憶部４０２と、伝文処理部４０３と、溶け込み判定処理部４０４と、溶け込み復帰処理部４０５と、エラー処理部４０６と、を有する。 ((Functional configuration of the safety monitoring server 30))
FIG. 4 is a diagram illustrating an example of a functional configuration of the safety monitoring server 30.
In FIG. 4, the safety monitoring server 30 includes a stay area coordinate table storage unit 401, an attendance management table storage unit 402, a message processing unit 403, a melt determination processing unit 404, a melt recovery processing unit 405, an error And a processing unit 406.

＜滞在エリア座標テーブル記憶部４０１＞
滞在エリア座標テーブル記憶部４０１は、滞在エリア座標テーブルを記憶する。滞在エリア座標テーブルは、検出エリア１００の内部に設定される溶け込みエリアの位置と大きさを規定する情報と、溶け込みエリアの縁のうち作業者が通過できる箇所を示す入出管理ラインの位置と大きさ（長さ）を規定する情報と、を記憶するテーブルである。溶け込みエリアとは、例えば、検出エリア１００内で作業者が滞在する（作業者の動きが止まる）可能性があり、映像判定装置２０により当該滞在している作業者を検出することができなくなる可能性がある領域である。
図５は、監視カメラ１０により撮像された撮像画像の撮像エリア５１０に、検出エリア１００と溶け込みエリア５００の一例を重ねて示した図である。尚、検出エリア１００と溶け込みエリア５００は、撮像画像（の撮像エリア５１０）に重ねて表示されなくてもよいが、安全監視サーバ３０が備えるコンピュータディスプレイにより撮像画像を表示する場合には、図５に示すように、当該表示する撮像画像（の撮像エリア５１０）に、検出エリア１００と溶け込みエリア５００を重ねて表示するようにしてもよい。
本実施形態では、検出エリア１００と溶け込みエリア５００は、撮像画像上の物理的な座標エリアとして設定される。また、本実施形態では、安全監視サーバ３０のオペレータにより、検出エリア１００と溶け込みエリア５００の位置と大きさの情報が予め設定されるものとする。
尚、本実施形態では、検出エリア１００が作業エリアの床の領域である場合を例に挙げて説明する。ただし、検出エリア１００は、必ずしもこのように作業エリアの床の領域とする必要はない。また、検出エリア１００を２次元の領域ではなく、高さ方向も考慮した３次元の領域としてもよい。この場合、撮像画像は同一領域の画像を異なる角度から撮像した２枚の画像を用いても良い。 <Stay area coordinate table storage unit 401>
The stay area coordinate table storage unit 401 stores a stay area coordinate table. The stay area coordinate table includes information that defines the position and size of the penetration area set inside the detection area 100, and the position and size of the entry / exit management line that indicates where the operator can pass through the edge of the penetration area. It is a table which memorize | stores the information which prescribes | regulates (length). The melted area is, for example, that an operator may stay in the detection area 100 (the worker's movement stops), and the staying worker may not be detected by the video determination device 20. This is an area that has sex.
FIG. 5 is a diagram showing an example of the detection area 100 and the fusion area 500 superimposed on the imaging area 510 of the captured image captured by the monitoring camera 10. The detection area 100 and the fusion area 500 do not have to be displayed superimposed on the captured image (the captured area 510). However, when the captured image is displayed on the computer display included in the safety monitoring server 30, FIG. As shown in FIG. 4, the detection area 100 and the fusion area 500 may be displayed so as to overlap with the displayed captured image (the captured area 510).
In the present embodiment, the detection area 100 and the fusion area 500 are set as physical coordinate areas on the captured image. In the present embodiment, it is assumed that information on the positions and sizes of the detection area 100 and the fusion area 500 is set in advance by the operator of the safety monitoring server 30.
In the present embodiment, a case where the detection area 100 is a floor area of a work area will be described as an example. However, the detection area 100 does not necessarily have to be a floor area of the work area as described above. In addition, the detection area 100 may be a three-dimensional region that considers the height direction instead of a two-dimensional region. In this case, two images obtained by capturing images of the same region from different angles may be used as the captured images.

図５に示す例では、作業者Ｗは、操作盤５０３に向かって操作盤５０３を操作する作業を行っている。検出エリア１００及び溶け込みエリア５００の縁のうち、作業者Ｗが向いている方の縁を基準として、奥の縁１００ａ、５００ａと右の縁１００ｂ、５００ｂの付近には、壁５０１、５０２がある。このため、作業者Ｗは、これらの縁１００ａ、１００ｂ、５００ａ、５００ｂの領域を通過することができない。そこで、図５に示す例では、溶け込みエリア５００の縁５００ａ、５００ｂを除く縁５００ｃ、５００ｄを入出管理ラインとする。そして、本実施形態では、溶け込みエリア５００のうち、この入出管理ラインを跨いで移動しなければ、溶け込みエリア５００に対する作業者Ｗの入退出はないものとする。   In the example illustrated in FIG. 5, the worker W is performing an operation of operating the operation panel 503 toward the operation panel 503. Among the edges of the detection area 100 and the melting area 500, there are walls 501 and 502 in the vicinity of the back edges 100a and 500a and the right edges 100b and 500b with reference to the edge facing the worker W. . For this reason, the worker W cannot pass through the regions of these edges 100a, 100b, 500a, and 500b. Therefore, in the example shown in FIG. 5, the edges 500 c and 500 d excluding the edges 500 a and 500 b of the penetration area 500 are set as the entry / exit management lines. And in this embodiment, if it does not move across this entrance / exit management line among the penetration areas 500, the operator W shall not enter / exit the penetration area 500. FIG.

図６は、滞在エリア座標テーブル６００の一例を示す図である。また、図７は、図６に示す滞在エリア座標テーブル６００に基づく溶け込みエリア５００と、検出エリア１００と、撮像画像の撮像エリア５１０の一例を示す図である。尚、説明の都合上、図５に示すものと、図６及び図７に示すものとでは、検出エリア１００、溶け込みエリア５００、及び撮像エリア５１０の位置関係を異ならせている。
図６及び図７に示す座標の値は、撮像画像上の座標に対応している。また、図６及び図７に示す例では、座標（540,100）及び座標（540,380）を相互に結ぶ直線と、座標（100,380）及び座標（540,380）を相互に結ぶ直線とが入出管理ライン７００ａ、７００ｂとして設定される。本実施形態では、安全監視サーバ３０のオペレータが、滞在エリア座標テーブル６００に対して値を入力することによって、溶け込みエリア５００と入出管理ライン７００の情報が予め設定される。尚、本実施形態では、安全監視サーバ３０は、溶け込みエリア５００と入出管理ライン７００の情報とは別に、検出エリア１００や撮像エリア５１０の位置と大きさとを規定する情報を記憶しているが、これらを滞在エリア座標テーブル６００で管理するようにしてもよい。
滞在エリア座標テーブル記憶部４０１は、例えば、安全監視サーバ３０が備えるＨＤＤを用いることにより実現される。 FIG. 6 is a diagram illustrating an example of the stay area coordinate table 600. FIG. 7 is a diagram illustrating an example of a penetration area 500, a detection area 100, and an imaging area 510 of a captured image based on the stay area coordinate table 600 illustrated in FIG. For convenience of explanation, the positional relationship among the detection area 100, the fusion area 500, and the imaging area 510 is different between the one shown in FIG. 5 and the one shown in FIG. 6 and FIG.
The coordinate values shown in FIGS. 6 and 7 correspond to the coordinates on the captured image. In the example shown in FIGS. 6 and 7, the straight line connecting the coordinates (540,100) and the coordinates (540,380) and the straight line connecting the coordinates (100,380) and the coordinates (540,380) are input / output management lines 700a and 700b. Set as In the present embodiment, when the operator of the safety monitoring server 30 inputs a value to the stay area coordinate table 600, information on the fusion area 500 and the entry / exit management line 700 is set in advance. In the present embodiment, the safety monitoring server 30 stores information defining the position and size of the detection area 100 and the imaging area 510 separately from the information of the fusion area 500 and the entry / exit management line 700. These may be managed by the stay area coordinate table 600.
The stay area coordinate table storage unit 401 is realized by using, for example, an HDD provided in the safety monitoring server 30.

＜在席管理テーブル記憶部４０２＞
在席管理テーブル記憶部４０２は、在席管理テーブルを記憶する。
図８は、在席管理テーブル８００の一例を示す図である。
図８において、在席管理テーブル８００は、ＩＤと、発生時刻と、在席位置と、溶け込み中フラグとを相互に関連付けて、１組のレコード（ＲＥＣ１，２，・・・）として記憶するテーブルである。 <Attendance management table storage unit 402>
The attendance management table storage unit 402 stores an attendance management table.
FIG. 8 is a diagram illustrating an example of the presence management table 800.
8, the attendance management table 800 stores an ID, an occurrence time, an attendance position, and a blending flag as a set of records (REC1, 2,...) In association with each other. It is.

ＩＤは、検出エリア１００内にいる作業者Ｗを識別するものであり、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）と同じＩＤが、このＩＤの欄に登録される。
発生時刻の欄には、ＩＤの欄に登録されたＩＤ（作業者Ｗ）の情報（アラーム通知伝文ＡＮ）を受信した最新の時刻が登録される。
在席位置の欄には、ＩＤの欄に登録されたＩＤ（作業者Ｗ）の最新の位置（ｘ座標とｙ座標）が登録される。本実施形態では、アラーム通知伝文ＡＮに含まれる作業者の座標位置Ｆｘ、Ｆｙが、この在席位置の欄に登録される。 The ID identifies the worker W in the detection area 100, and the same ID as the object ID (OBJ_ID) included in the alarm notification message AN is registered in this ID column.
In the occurrence time field, the latest time when the information (alarm notification message AN) of the ID (worker W) registered in the ID field is received is registered.
The latest position (x coordinate and y coordinate) of the ID (worker W) registered in the ID column is registered in the presence position column. In the present embodiment, the coordinate positions Fx and Fy of the worker included in the alarm notification message AN are registered in the seated position column.

溶け込み中フラグの欄には、「−（何も設定されない）」、「０」、及び「１」の何れかが設定される。
映像判定装置２０により送信されたアラーム通知伝文ＡＮに含まれる作業者の座標位置Ｆｘ、Ｆｙに基づき、作業者Ｗが初めて検出エリア１００に入ったことが確認され、且つ当該作業者Ｗが溶け込みエリア５００には入っていない場合、当該作業者Ｗに対する在席管理テーブル８００のレコードの溶け込み中フラグには、何も設定されない（すなわち「−」）。
その後、作業者Ｗが溶け込みエリア５００に入ったことが確認されると、当該作業者Ｗに対する在席管理テーブル８００のレコードの溶け込み中フラグには、作業者Ｗが溶け込みエリア５００内にいるが、溶け込みエリア５００内で滞在していないこと（すなわち、溶け込みエリア５００内で静止していないこと）を示す「０」が設定される。 In the melting flag field, any one of “− (nothing is set)”, “0”, and “1” is set.
Based on the worker's coordinate positions Fx and Fy included in the alarm notification message AN transmitted by the video determination device 20, it is confirmed that the worker W has entered the detection area 100 for the first time, and the worker W has melted. If it is not in the area 500, nothing is set in the melting flag of the record of the attendance management table 800 for the worker W (that is, “−”).
Thereafter, when it is confirmed that the worker W has entered the melting area 500, the worker W is in the melting area 500 in the melting flag of the record of the presence management table 800 for the worker W. “0” indicating that the user is not staying in the melting area 500 (that is, not being stationary in the melting area 500) is set.

その後、映像判定装置２０により送信された伝文からでは溶け込みエリア５００にいないはずの作業者Ｗに対する在席管理テーブル８００のレコードの在席位置が溶け込みエリア５００内である場合、当該レコードの溶け込み中フラグの値は、「０」から「１」に変更される。溶け込み中フラグの値が「１」であることは、作業者Ｗが溶け込みエリア５００内に滞在（すなわち静止して滞在）していることを表す。
その後、映像判定装置２０により送信された伝文において、溶け込みエリア５００にいるはずの作業者Ｗが別途の新たな作業者Ｗとして追加されている場合、当該作業者Ｗに対する在席管理テーブル８００のレコードの溶け込み中フラグの値は、「１」から「０」に変更される。また、当該レコードのＩＤが、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）に変更される。
尚、在席管理テーブル８００を更新する際の具体的な処理については、以下の伝文処理部４０３、溶け込み判定処理部４０４、及び溶け込み復帰処理部４０５の処理として説明する。
在席管理テーブル記憶部４０２は、例えば、安全監視サーバ３０が備えるＨＤＤを用いることにより実現される。 Thereafter, when the presence position of the record in the presence management table 800 for the worker W who should not be in the merge area 500 from the message transmitted by the video determination device 20 is within the merge area 500, the record is being merged. The value of the flag is changed from “0” to “1”. The value of the melting flag being “1” indicates that the worker W is staying in the melting area 500 (that is, staying still).
Thereafter, in the message transmitted by the video determination device 20, when the worker W who should be in the fusion area 500 is added as a separate new worker W, the presence management table 800 for the worker W is added. The value of the record melting flag is changed from “1” to “0”. Further, the ID of the record is changed to the object ID (OBJ_ID) included in the alarm notification message AN.
Note that specific processing when updating the presence management table 800 will be described as processing of the following message processing unit 403, fusion determination processing unit 404, and fusion return processing unit 405.
The presence management table storage unit 402 is realized by using, for example, an HDD provided in the safety monitoring server 30.

＜伝文処理部４０３＞
伝文処理部４０３は、まず、映像判定装置２０から送信された「アラーム通知伝文ＡＮ」又は「アラーム解除伝文ＡＣ」を受信すると、在席管理テーブル記憶部４０２に記憶された在席管理テーブル８００の情報を読み出す。
次に、伝文処理部４０３は、受信した伝文が、アラーム解除伝文ＡＣであるか否かを判定する。この判定の結果、受信した伝文がアラーム解除伝文ＡＣである場合には、後述する溶け込み判定処理部４０４による溶け込み判定処理が行われる。溶け込み判定処理部４０４の処理の詳細については後述する。
一方、受信した伝文がアラーム解除伝文ＡＣでない場合、伝文処理部４０３は、受信した伝文がアラーム通知伝文ＡＮであるか否かを判定する。この判定の結果、受信した伝文がアラーム通知伝文ＡＮでない場合、伝文処理部４０３は、その旨をエラー処理部４０６に送信する。 <Message processing unit 403>
First, when the message processing unit 403 receives the “alarm notification message AN” or “alarm release message AC” transmitted from the video determination device 20, the presence management stored in the presence management table storage unit 402. The information in the table 800 is read.
Next, the message processing unit 403 determines whether or not the received message is an alarm release message AC. As a result of this determination, if the received message is an alarm release message AC, a penetration determination process by a penetration determination processing unit 404 described later is performed. Details of the processing of the penetration determination processing unit 404 will be described later.
On the other hand, when the received message is not the alarm release message AC, the message processing unit 403 determines whether or not the received message is the alarm notification message AN. As a result of this determination, if the received message is not the alarm notification message AN, the message processing unit 403 transmits a message to that effect to the error processing unit 406.

一方、受信した伝文がアラーム通知伝文ＡＮである場合、伝文処理部４０３は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数（図８のＲＥＣＮｏの数）を超えているか否かを判定する。
この判定の結果、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数を超えている場合、伝文処理部４０３は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）と同じＩＤのレコードの情報を在席管理テーブル８００から抽出する。そして、伝文処理部４０３は、抽出したレコードの在席位置を、アラーム通知伝文ＡＮに含まれる作業者Ｗの座標位置Ｆｘ、Ｆｙに書き換えて更新する。アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の作業者Ｗは、検出エリア１００内にいることが映像判定装置２０により検出されているから、当該オブジェクトＩＤ（OBJ＿ID）と同じＩＤのレコードについては、在席位置（すなわち、作業者Ｗの検出エリア１００内における位置）を更新するだけでよい。ただし、抽出したレコードの在席位置と、アラーム通知伝文ＡＮに含まれる作業者Ｗの座標位置Ｆｘ、Ｆｙとを比較して、入出管理ライン７００ａ、７００ｂを跨がずに溶け込みエリア５００を通過したと判定した場合、伝文処理部４０３は、抽出したレコードの在席位置を書き換えないようにする。アラーム通知伝文ＡＮに含まれる作業者Ｗの座標位置Ｆｘ、Ｆｙが、ノイズ等によって変更された可能性があるからである。このとき、伝文処理部４０３は、その旨をエラー処理部４０６に送信してもよい。また、在席位置を更新したレコードにおいて、溶け込み中フラグが設定されておらず、且つ、更新後の在席位置が溶け込みエリア５００内にある場合、伝文処理部４０３は、当該レコードの溶け込み中フラグを「０」に設定する。これとは逆に、在席位置を更新したレコードにおいて、溶け込み中フラグが「０」に設定されており、且つ、更新後の在席位置が（溶け込みエリア５００外ではあるが）検出エリア１００内にある場合、伝文処理部４０３は、当該レコードの溶け込み中フラグを「−」に設定する。
尚、このような在席管理テーブル８００の在席位置の更新は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）と同じＩＤのレコード毎に個別に行われる。 On the other hand, when the received message is the alarm notification message AN, the message processing unit 403 indicates that the number of object IDs (OBJ_ID) included in the alarm notification message AN is the number of records in the presence management table 800 (see FIG. It is determined whether or not the number of RECNos of 8 is exceeded.
As a result of this determination, when the number of object IDs (OBJ_ID) included in the alarm notification message AN exceeds the number of records in the presence management table 800, the message processing unit 403 includes the alarm notification message AN. Information of the record having the same ID as the object ID (OBJ_ID) to be extracted is extracted from the presence management table 800. Then, the message processing unit 403 rewrites and updates the presence position of the extracted record to the coordinate positions Fx and Fy of the worker W included in the alarm notification message AN. Since the video determination device 20 detects that the worker W of the object ID (OBJ_ID) included in the alarm notification message AN is in the detection area 100, the record having the same ID as the object ID (OBJ_ID) is detected. Only needs to update the presence position (that is, the position of the worker W in the detection area 100). However, the presence position of the extracted record is compared with the coordinate positions Fx and Fy of the worker W included in the alarm notification message AN, and passes through the blending area 500 without straddling the entry / exit management lines 700a and 700b. If it is determined that the message is recorded, the message processing unit 403 does not rewrite the presence position of the extracted record. This is because the coordinate positions Fx and Fy of the worker W included in the alarm notification message AN may be changed due to noise or the like. At this time, the message processing unit 403 may transmit a message to that effect to the error processing unit 406. Also, in the record in which the seating position is updated, if the blending flag is not set and the updated seating position is in the blending area 500, the message processing unit 403 Set the flag to “0”. On the contrary, in the record in which the seating position is updated, the melting flag is set to “0” and the updated seating position is within the detection area 100 (although it is outside the melting area 500). If it is, the message processing unit 403 sets the melting flag of the record to “−”.
Note that such an update of the presence position of the presence management table 800 is performed individually for each record having the same ID as the object ID (OBJ_ID) included in the alarm notification message AN.

次に、伝文処理部４０３は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）のうち、在席管理テーブル８００のＩＤとは異なるオブジェクトＩＤ（OBJ＿ID）を抽出する。伝文処理部４０３は、抽出したオブジェクトＩＤ（OBJ＿ID）を溶け込み復帰処理部４０５に送信する。そして、溶け込み復帰処理部４０５による溶け込み復帰処理が行われる。溶け込み復帰処理部４０５の処理の詳細については後述する。
前述したアラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数の判定で、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数を超えていないと判定された場合、伝文処理部４０３は、次の判定を行う。すなわち、伝文処理部４０３は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数未満であるか否かを判定する。 Next, the message processing unit 403 extracts an object ID (OBJ_ID) different from the ID of the presence management table 800 from the object ID (OBJ_ID) included in the alarm notification message AN. The message processing unit 403 transmits the extracted object ID (OBJ_ID) to the fusion return processing unit 405. Then, a melt recovery process by the melt recovery process unit 405 is performed. Details of the processing of the melt recovery processing unit 405 will be described later.
In the above-described determination of the number of object IDs (OBJ_ID) included in the alarm notification message AN, the number of object IDs (OBJ_ID) included in the alarm notification message AN does not exceed the number of records in the presence management table 800. Is determined, the message processing unit 403 performs the following determination. That is, the message processing unit 403 determines whether or not the number of object IDs (OBJ_ID) included in the alarm notification message AN is less than the number of records in the presence management table 800.

この判定の結果、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数未満である場合、伝文処理部４０３は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）と同じＩＤのレコードの情報を在席管理テーブル８００から抽出し、抽出したレコードの在席位置を、アラーム通知伝文ＡＮに含まれる作業者Ｗの座標位置Ｆｘ、Ｆｙに書き換えて更新する。ただし、抽出したレコードの在席位置と、アラーム通知伝文ＡＮに含まれる作業者Ｗの座標位置Ｆｘ、Ｆｙとを比較して、入出管理ライン７００ａ、７００ｂを跨がずに溶け込みエリア５００を通過したと判定した場合、伝文処理部４０３は、抽出したレコードの在席位置を書き換えないようにする。このとき、伝文処理部４０３は、その旨をエラー処理部４０６に送信してもよい。また、在席位置を更新したレコードにおいて、溶け込み中フラグが設定されておらず、且つ、更新後の在席位置が溶け込みエリア５００内にある場合、伝文処理部４０３は、当該レコードの溶け込み中フラグを「０」に設定する。これとは逆に、在席位置を更新したレコードにおいて、溶け込み中フラグが「０」に設定されており、且つ、更新後の在席位置が（溶け込みエリア５００外ではあるが）検出エリア１００内にある場合、伝文処理部４０３は、当該レコードの溶け込み中フラグを「−」に設定する（何も設定しない）。尚、このような在席管理テーブル８００の在席位置の更新は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）と同じＩＤのレコード毎に個別に行われる。
次に、伝文処理部４０３は、在席管理テーブル８００のＩＤのうち、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）とは異なるＩＤを抽出する。伝文処理部４０３は、抽出したＩＤを溶け込み判定処理部４０４に送信する。そして、溶け込み判定処理部４０４による溶け込み判定処理が行われる。溶け込み判定処理部４０４の処理の詳細については後述する。 As a result of the determination, if the number of object IDs (OBJ_ID) included in the alarm notification message AN is less than the number of records in the presence management table 800, the message processing unit 403 is included in the alarm notification message AN. The information of the record having the same ID as the object ID (OBJ_ID) is extracted from the presence management table 800, and the presence position of the extracted record is rewritten to the coordinate positions Fx and Fy of the worker W included in the alarm notification message AN. Update. However, the presence position of the extracted record is compared with the coordinate positions Fx and Fy of the worker W included in the alarm notification message AN, and passes through the blending area 500 without straddling the entry / exit management lines 700a and 700b. If it is determined that the message is recorded, the message processing unit 403 does not rewrite the presence position of the extracted record. At this time, the message processing unit 403 may transmit a message to that effect to the error processing unit 406. Also, in the record in which the seating position is updated, if the blending flag is not set and the updated seating position is in the blending area 500, the message processing unit 403 Set the flag to “0”. On the contrary, in the record in which the seating position is updated, the melting flag is set to “0” and the updated seating position is within the detection area 100 (although it is outside the melting area 500). If there is, the message processing unit 403 sets the melting flag of the record to “−” (sets nothing). Note that such an update of the presence position of the presence management table 800 is performed individually for each record having the same ID as the object ID (OBJ_ID) included in the alarm notification message AN.
Next, the message processing unit 403 extracts an ID different from the object ID (OBJ_ID) included in the alarm notification message AN from the IDs of the presence management table 800. The message processing unit 403 transmits the extracted ID to the fusion determination processing unit 404. Then, the penetration determination processing by the penetration determination processing unit 404 is performed. Details of the processing of the penetration determination processing unit 404 will be described later.

前述したアラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数の判定で、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数未満でないと判定された場合、伝文処理部４０３は、次の処理を行う。すなわち、伝文処理部４０３は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数と、在席管理テーブル８００のレコード数とが同じであるか否かを判定する。この判定の結果、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数と、在席管理テーブル８００のレコード数とが同じである場合、伝文処理部４０３は、在席管理テーブル８００の各レコードの在席位置を更新することになる。そのために、まず、伝文処理部４０３は、未抽出のオブジェクトＩＤ（OBJ＿ID）を、アラーム通知伝文ＡＮから１つ抽出する。次に、伝文処理部４０３は、抽出したオブジェクトＩＤ（OBJ＿ID）と同じＩＤが、在席管理テーブル８００のレコードにあるか否かを判定する。この判定の結果、抽出したオブジェクトＩＤ（OBJ＿ID）と同じＩＤが、在席管理テーブル８００のレコードにない場合、伝文処理部４０３は、その旨をエラー処理部４０６に送信する。   In the determination of the number of object IDs (OBJ_ID) included in the alarm notification message AN described above, it is determined that the number of object IDs (OBJ_ID) included in the alarm notification message AN is not less than the number of records in the presence management table 800. When the message is received, the message processing unit 403 performs the following processing. That is, the message processing unit 403 determines whether the number of object IDs (OBJ_ID) included in the alarm notification message AN is the same as the number of records in the presence management table 800. As a result of this determination, when the number of object IDs (OBJ_ID) included in the alarm notification message AN is the same as the number of records in the presence management table 800, the message processing unit 403 The attendance position of each record is updated. For this purpose, the message processing unit 403 first extracts one unextracted object ID (OBJ_ID) from the alarm notification message AN. Next, the message processing unit 403 determines whether or not the same ID as the extracted object ID (OBJ_ID) is present in the record of the presence management table 800. As a result of this determination, when the same ID as the extracted object ID (OBJ_ID) is not in the record of the presence management table 800, the message processing unit 403 transmits that fact to the error processing unit 406.

一方、抽出したオブジェクトＩＤ（OBJ＿ID）と同じＩＤが、在席管理テーブル８００のレコードにある場合、伝文処理部４０３は、当該レコードの在席位置を、アラーム通知伝文ＡＮに含まれる作業者Ｗの座標位置Ｆｘ、Ｆｙに書き換えて更新する。ただし、抽出したレコードの在席位置と、アラーム通知伝文ＡＮに含まれる作業者Ｗの座標位置Ｆｘ、Ｆｙとを比較して、入出管理ライン７００ａ、７００ｂを跨がずに溶け込みエリア５００を通過したと判定した場合、伝文処理部４０３は、抽出したレコードの在席位置を書き換えないようにする。このとき、伝文処理部４０３は、その旨をエラー処理部４０６に送信してもよい。また、在席位置を更新したレコードにおいて、溶け込み中フラグが設定されておらず、且つ、更新後の在席位置が溶け込みエリア５００内にある場合、伝文処理部４０３は、当該レコードの溶け込み中フラグを「０」に設定する。これとは逆に、在席位置を更新したレコードにおいて、溶け込み中フラグが「０」に設定されており、且つ、更新後の在席位置が（溶け込みエリア５００外ではあるが）検出エリア１００内にある場合、伝文処理部４０３は、当該レコードの溶け込み中フラグを「−」に設定する（何も設定しない）。
伝文処理部４０３は、以上のＩＤの処理を、アラーム通知伝文ＡＮに含まれる全てのオブジェクトＩＤ（OBJ＿ID）について個別に行う。 On the other hand, when the same ID as the extracted object ID (OBJ_ID) exists in the record of the presence management table 800, the message processing unit 403 indicates the presence position of the record in the alarm notification message AN. Rewrite and update the coordinate positions Fx and Fy of W. However, the presence position of the extracted record is compared with the coordinate positions Fx and Fy of the worker W included in the alarm notification message AN, and passes through the blending area 500 without straddling the entry / exit management lines 700a and 700b. If it is determined that the message is recorded, the message processing unit 403 does not rewrite the presence position of the extracted record. At this time, the message processing unit 403 may transmit a message to that effect to the error processing unit 406. Also, in the record in which the seating position is updated, if the blending flag is not set and the updated seating position is in the blending area 500, the message processing unit 403 Set the flag to “0”. On the contrary, in the record in which the seating position is updated, the melting flag is set to “0” and the updated seating position is within the detection area 100 (although it is outside the melting area 500). If there is, the message processing unit 403 sets the melting flag of the record to “−” (sets nothing).
The message processing unit 403 performs the above ID processing individually for all object IDs (OBJ_ID) included in the alarm notification message AN.

前述したアラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数の判定で、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数と同じでないと判定された場合（すなわち、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数と、在席管理テーブル８００のレコード数との比較ができない場合）、伝文処理部４０３は、その旨をエラー処理部４０６に送信する。
伝文処理部４０３は、例えば、安全監視サーバ３０が備える通信インターフェースにより伝文を受信し、安全監視サーバ３０が備えるＣＰＵが、ＲＯＭに記憶されたコンピュータプログラムを実行することにより実現される。 In the determination of the number of object IDs (OBJ_ID) included in the alarm notification message AN described above, the number of object IDs (OBJ_ID) included in the alarm notification message AN is not the same as the number of records in the presence management table 800. When it is determined (that is, when the number of object IDs (OBJ_ID) included in the alarm notification message AN cannot be compared with the number of records in the presence management table 800), the message processing unit 403 indicates that fact. It transmits to the error processing unit 406.
The message processing unit 403 is realized by, for example, receiving a message through a communication interface provided in the safety monitoring server 30 and executing a computer program stored in the ROM by a CPU provided in the safety monitoring server 30.

＜溶け込み判定処理部４０４＞
溶け込み判定処理部４０４は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数未満である場合、又は、アラーム解除伝文ＡＣを受信した場合に起動する。
溶け込み判定処理部４０４は、まず、滞在エリア座標テーブル６００の情報を読み出す。
次に、溶け込み判定処理部４０４は、伝文処理部４０３によりアラーム解除伝文ＡＣが受信されたか否かを判定する。この判定の結果、伝文処理部４０３によりアラーム解除伝文ＡＣが受信された場合、溶け込み判定処理部４０４は、在席管理テーブル８００の全てのレコードの情報を抽出する。
一方、伝文処理部４０３によりアラーム解除伝文ＡＣが受信されなかった場合、溶け込み判定処理部４０４は、伝文処理部４０３により受信された伝文に含まれるオブジェクトＩＤ（OBJ＿ID）と異なるＩＤが在席管理テーブル８００のレコードにあるか否かを判定する。この判定の結果、伝文処理部４０３により受信された伝文に含まれるオブジェクトＩＤ（OBJ＿ID）と異なるＩＤが在席管理テーブル８００のレコードにない場合には、溶け込み判定処理を終了する。 <Penetration determination processing unit 404>
The merge determination processing unit 404 is activated when the number of object IDs (OBJ_ID) included in the alarm notification message AN is less than the number of records in the presence management table 800 or when the alarm release message AC is received. To do.
First, the melting determination processing unit 404 reads information in the stay area coordinate table 600.
Next, the melting determination processing unit 404 determines whether or not the alarm release message AC is received by the message processing unit 403. As a result of the determination, when the alarm processing message AC is received by the message processing unit 403, the fusion determination processing unit 404 extracts information of all the records in the presence management table 800.
On the other hand, when the alarm processing message AC is not received by the message processing unit 403, the fusion determination processing unit 404 has an ID different from the object ID (OBJ_ID) included in the message received by the message processing unit 403. It is determined whether or not the record is in the presence management table 800. As a result of this determination, if there is no ID in the record of the attendance management table 800 that is different from the object ID (OBJ_ID) included in the message received by the message processing unit 403, the merge determination processing is terminated.

一方、伝文処理部４０３により受信された伝文に含まれるオブジェクトＩＤ（OBJ＿ID）と異なるＩＤが在席管理テーブル８００のレコードにある場合には、在席管理テーブル８００のＩＤのうち、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）とは異なるＩＤが伝文処理部４０３から送信されているので、溶け込み判定処理部４０４は、当該ＩＤのレコードの情報を在席管理テーブル８００から抽出する。
以上のようにして抽出されるレコードの情報（ＩＤ）により特定される作業者Ｗは、映像判定装置２０では検出エリア１００内にいないと判定された作業者Ｗである可能性がある。そこで、溶け込み判定処理部４０４は、抽出したレコードの情報のうち、未選択のレコードの情報を１つ選択し、選択したレコードの在席位置が、溶け込みエリア５００のうち、入出管理ライン７００よりも所定の距離だけ内側の領域以外の領域内にあるか否かを判定する。以下の説明では、入出管理ライン７００よりも所定の距離だけ内側の領域以外の領域を、必要に応じて「退出不可エリア」と称する。退出不可エリアは、アラーム通知伝文ＡＮの送信間隔（本実施形態では約１秒）の間に、作業者Ｗが、物理的に溶け込みエリア５００から退出することができないエリアと、作業者Ｗが滞在すると想定されるエリア（本実施形態では、例えば、操作盤６０の前の領域）とにより構成されるものとする。このような退出不可エリアは、安全監視サーバ３０のオペレータにより予め設定される。 On the other hand, when an ID different from the object ID (OBJ_ID) included in the message received by the message processing unit 403 is in the record of the presence management table 800, an alarm notification is included in the ID of the presence management table 800. Since an ID different from the object ID (OBJ_ID) included in the message AN is transmitted from the message processing unit 403, the merge determination processing unit 404 extracts information on the record of the ID from the presence management table 800. .
There is a possibility that the worker W specified by the record information (ID) extracted as described above is the worker W determined not to be in the detection area 100 by the video determination device 20. Therefore, the melting determination processing unit 404 selects one piece of unselected record information from the extracted record information, and the seating position of the selected record is higher than that of the entry / exit management line 700 in the fusion area 500. It is determined whether or not it is within a region other than the inner region by a predetermined distance. In the following description, an area other than an area that is a predetermined distance from the entrance / exit management line 700 will be referred to as an “exit non-exitable area” as necessary. The non-leaving area is an area where the worker W cannot physically leave the blending area 500 and the worker W during the transmission interval of the alarm notification message AN (about 1 second in the present embodiment). The area assumed to stay (in this embodiment, for example, the area in front of the operation panel 60) is assumed to be configured. Such an area that cannot be withdrawn is set in advance by the operator of the safety monitoring server 30.

よって、選択したレコードの在席位置が、退出不可エリア内にある場合、当該退出不可エリアにいる作業者Ｗは、溶け込みエリア５００内で作業を行っているか、又は、物理的に溶け込みエリア５００から退出することができない位置にいると見なせる。そこで、溶け込み判定処理部４０４は、選択したレコードの溶け込み中フラグを「１」に設定し、当該レコードの作業者Ｗは溶け込みエリア内にいることを在席管理テーブル８００に設定する。
一方、選択したレコードの在席位置が、退出不可エリア内にない場合、当該レコードの作業者Ｗは、溶け込みエリア５００にいないと確定することができる。そこで、溶け込み判定処理部４０４は、選択したレコードを削除する。
溶け込み判定処理部４０４は、以上の処理を、在席管理テーブル８００から抽出したレコードの情報毎に個別に行う。
溶け込み判定処理部４０４は、例えば、ＣＰＵが、ＲＯＭに記憶されているコンピュータプログラムを実行することにより実現される。 Therefore, when the seating position of the selected record is in the non-leaving area, the worker W in the non-leaving area is working in the melting area 500 or physically from the melting area 500. You can assume that you are in a position where you cannot leave. Therefore, the melting determination processing unit 404 sets the melting flag of the selected record to “1”, and sets the worker W of the record in the presence management table 800 to be in the melting area.
On the other hand, when the seating position of the selected record is not within the area where leaving is not possible, it can be determined that the worker W of the record is not in the fusion area 500. Therefore, the penetration determination processing unit 404 deletes the selected record.
The penetration determination processing unit 404 individually performs the above processing for each record information extracted from the presence management table 800.
The penetration determination processing unit 404 is realized, for example, when the CPU executes a computer program stored in the ROM.

＜溶け込み復帰処理部４０５＞
溶け込み復帰処理部４０５は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数を超えている場合に実行を開始する。
溶け込み復帰処理部４０５は、まず、滞在エリア座標テーブル６００の情報を読み出す。
次に、溶け込み復帰処理部４０５は、伝文処理部４０３で抽出された「アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）」のうち、未選択のオブジェクトＩＤ（OBJ＿ID）のデータをアラーム通知伝文ＡＮから１つ選択する。 <Melting return processing unit 405>
The fusion recovery processing unit 405 starts execution when the number of object IDs (OBJ_ID) included in the alarm notification message AN exceeds the number of records in the presence management table 800.
The melt recovery processing unit 405 first reads information in the stay area coordinate table 600.
Next, the fusion recovery processing unit 405 issues an alarm notification of data of an unselected object ID (OBJ_ID) among the “object ID (OBJ_ID) included in the alarm notification message AN” extracted by the message processing unit 403. Select one from the message AN.

次に、溶け込み復帰処理部４０５は、選択したオブジェクトＩＤ（OBJ＿ID）のデータに含まれている「作業者の座標位置Ｆｘ、Ｆｙ」が溶け込みエリア５００内にあるか否かを判定する。この判定の結果、作業者の座標位置Ｆｘ、Ｆｙが溶け込みエリア５００内にない場合、抽出したオブジェクトＩＤ（OBJ＿ID）のデータにより識別される作業者Ｗは、新たに検出エリア１００（の溶け込みエリア５００外の領域）内に入った作業者であると考えられる。そこで、溶け込み復帰処理部４０５は、選択したオブジェクトＩＤ（OBJ＿ID）のデータに基づいて、在席管理テーブル８００に新しいレコードを追加する。このとき、当該レコードの溶け込み中フラグには何も設定されない。   Next, the melt recovery processing unit 405 determines whether or not the “worker coordinate position Fx, Fy” included in the data of the selected object ID (OBJ_ID) is within the melt area 500. As a result of the determination, when the coordinate positions Fx and Fy of the worker are not in the fusion area 500, the worker W identified by the data of the extracted object ID (OBJ_ID) is newly added to the detection area 100 (the fusion area 500). It is considered that the worker entered the outside area. Therefore, the melt recovery processing unit 405 adds a new record to the presence management table 800 based on the data of the selected object ID (OBJ_ID). At this time, nothing is set in the melting flag of the record.

一方、作業者の座標位置Ｆｘ、Ｆｙが溶け込みエリア５００内にある場合、溶け込み復帰処理部４０５は、溶け込み中フラグの値が「１」であるレコードが在席管理テーブル８００にあるか否かを判定する。この判定の結果、溶け込み中フラグの値が「１」であるレコードが在席管理テーブル８００にない場合、抽出したオブジェクトＩＤ（OBJ＿ID）のデータにより識別される作業者Ｗは、新たに検出エリア１００（の溶け込みエリア５００内の領域）内に入った作業者であると考えられる。そこで、溶け込み復帰処理部４０５は、抽出したオブジェクトＩＤ（OBJ＿ID）のデータに基づいて、在席管理テーブル８００に新しいレコードを追加する。このとき、当該レコードの溶け込み中フラグには「０」が設定される。   On the other hand, when the operator's coordinate positions Fx and Fy are in the fusion area 500, the fusion return processing unit 405 determines whether or not there is a record in the attendance management table 800 with the value of the fusion flag being “1”. judge. As a result of this determination, if there is no record in the presence management table 800 where the value of the blending flag is “1”, the worker W identified by the extracted object ID (OBJ_ID) data is newly detected in the detection area 100. It is considered that the worker has entered (in the melting area 500). Therefore, the melt recovery processing unit 405 adds a new record to the presence management table 800 based on the extracted object ID (OBJ_ID) data. At this time, “0” is set in the melting flag of the record.

一方、溶け込み中フラグの値が「１」であるレコードが在席管理テーブル８００にある場合、溶け込み復帰処理部４０５は、溶け込み中フラグの値が「１」であるレコードのうち、未選択のレコードを在席管理テーブル８００から１つ選択する。
そして、溶け込み復帰処理部４０５は、このようにして在席管理テーブル８００から選択したレコードのＩＤと、前述したようにしてアラーム通知伝文ＡＮから選択したオブジェクトＩＤ（OBJ＿ID）とが一致するか否かを判定する。この判定の結果、在席管理テーブル８００から選択したレコードのＩＤと、アラーム通知伝文ＡＮから選択したオブジェクトＩＤ（OBJ＿ID）とが一致しない場合、溶け込み復帰処理部４０５は、当該レコードのＩＤの値を、当該オブジェクトＩＤ（OBJ＿ID）の値に書き換える。そして、溶け込み復帰処理部４０５は、当該レコードの溶け込み中フラグの値を「０」に設定する。ただし、当該レコードの在席位置と、当該オブジェクトＩＤ（OBJ＿ID）のデータに含まれる「作業者Ｗの座標位置」とが所定の範囲内にある場合に限り、当該レコードのＩＤの値を、当該オブジェクトＩＤ（OBJ＿ID）の値に書き換えることと、当該レコードの溶け込み中フラグの値を「０」に設定することとを行う。レコードの在席位置と、作業者Ｗの座標位置とが、アラーム通知伝文ＡＮの送信間隔（本実施形態では約１秒）の間に作業者Ｗが移動できない距離だけ離れている場合には、ノイズ等の原因により、レコードの在席位置と、作業者Ｗの座標位置とが離れていると考えられるからである。前記所定の範囲は、このような指標の下でオペレータにより予め設定される。 On the other hand, when there is a record with the merged flag value “1” in the presence management table 800, the fusion return processing unit 405 selects an unselected record among the records with the merged flag value “1”. Is selected from the attendance management table 800.
Then, the fusion return processing unit 405 determines whether or not the ID of the record selected from the presence management table 800 in this way matches the object ID (OBJ_ID) selected from the alarm notification message AN as described above. Determine whether. As a result of the determination, if the ID of the record selected from the attendance management table 800 and the object ID (OBJ_ID) selected from the alarm notification message AN do not match, the merge return processing unit 405 determines the ID value of the record To the value of the object ID (OBJ_ID). Then, the melt recovery processing unit 405 sets the value of the melting flag of the record to “0”. However, only when the presence position of the record and the “coordinate position of the worker W” included in the data of the object ID (OBJ_ID) are within a predetermined range, the ID value of the record The value of the object ID (OBJ_ID) is rewritten, and the value of the melting flag of the record is set to “0”. When the record presence position and the coordinate position of the worker W are separated by a distance that the worker W cannot move during the transmission interval of the alarm notification message AN (about 1 second in this embodiment). This is because the seated position of the record and the coordinate position of the worker W are considered to be separated due to noise or the like. The predetermined range is preset by the operator under such an index.

一方、在席管理テーブル８００から選択したレコードのＩＤと、アラーム通知伝文ＡＮから選択したオブジェクトＩＤ（OBJ＿ID）とが一致する場合、溶け込み復帰処理部４０５は、当該レコードを変更しない。このとき、溶け込み復帰処理部４０５は、その旨をエラー処理部４０６に送信してもよい。溶け込みエリア５００内に滞在していた作業者Ｗが動き出し、当該作業者Ｗが映像判定装置２０により検出された場合には、映像判定装置２０は、当該作業者Ｗに対して新たなオブジェクトＩＤ（OBJ＿ID）を付与する。よって、何らかのエラーがなければ、このような場合に、在席管理テーブル８００から選択したレコードのＩＤと、アラーム通知伝文ＡＮから選択したオブジェクトＩＤ（OBJ＿ID）とが一致することはないからである。
溶け込み復帰処理部４０５は、以上の処理を、溶け込み中フラグの値が「１」であるレコード毎に個別に行い、更に、これらの処理を、伝文処理部４０３で抽出された「アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）」毎に個別に行う。
溶け込み復帰処理部４０５は、例えば、ＣＰＵが、ＲＯＭに記憶されているコンピュータプログラムを実行することにより実現される。 On the other hand, if the ID of the record selected from the attendance management table 800 matches the object ID (OBJ_ID) selected from the alarm notification message AN, the fusion return processing unit 405 does not change the record. At this time, the melt recovery processing unit 405 may transmit a message to that effect to the error processing unit 406. When the worker W staying in the melting area 500 starts to move and the worker W is detected by the video determination device 20, the video determination device 20 gives the worker W a new object ID ( OBJ_ID). Therefore, if there is no error, the ID of the record selected from the presence management table 800 and the object ID (OBJ_ID) selected from the alarm notification message AN will not match in such a case. .
The melt recovery processing unit 405 individually performs the above processing for each record having a melt flag value of “1”, and further performs these processes on the “alarm notification transmission” extracted by the message processing unit 403. This is performed for each object ID (OBJ_ID) included in the sentence AN.
The melt recovery processing unit 405 is realized, for example, when the CPU executes a computer program stored in the ROM.

＜エラー処理部４０６＞
エラー処理部４０６は、他の処理部から送信された情報に対応する通報情報を作成する。そして、エラー処理部４０６は、当該通知情報の内容に基づいて、当該通報情報を出力する装置（例えば、ＶＡスピーカ４０、安全監視サーバ３０が備えるコンピュータディスプレイ）を選択し、選択した装置に当該通報情報を出力する。
エラー処理部４０６は、例えば、安全監視サーバ３０が備えるＣＰＵが、ＲＯＭに記憶されたコンピュータプログラムを実行し、通信インターフェースを介して通報情報を送信したり、コンピュータディスプレイに通報情報を表示したりすることにより実現される。尚、通報情報の内容や出力先は、前述したものに限定されない。 <Error processing unit 406>
The error processing unit 406 creates report information corresponding to information transmitted from other processing units. Then, the error processing unit 406 selects a device (for example, a computer display included in the VA speaker 40 or the safety monitoring server 30) that outputs the notification information based on the content of the notification information, and notifies the selected device of the notification. Output information.
In the error processing unit 406, for example, the CPU provided in the safety monitoring server 30 executes a computer program stored in the ROM, and transmits report information via a communication interface, or displays report information on a computer display. Is realized. Note that the content and output destination of the report information are not limited to those described above.

（動作フローチャート）
次に、図９のフローチャートを参照しながら、安全監視サーバ３０による伝文受信処理の主要な動作の一例を説明する。映像判定装置２０から送信された「アラーム通知伝文ＡＮ又はアラーム解除伝文ＡＣ」を受信すると、伝文受信処理の実行が開始される。
まず、ステップＳ１０１において、伝文処理部４０３は、在席管理テーブル記憶部４０２に記憶された在席管理テーブル８００の情報を読み出す。
次に、ステップＳ１０２において、伝文処理部４０３は、受信した伝文が、アラーム解除伝文ＡＣであるか否かを判定する。この判定の結果、受信した伝文がアラーム解除伝文ＡＣである場合には、ステップＳ１０３に進んで、溶け込み判定処理が実行された後、図９のフローチャートによる処理を終了する。溶け込み判定処理の詳細については、図１０を参照しながら後述する。 (Operation flowchart)
Next, an example of the main operation of the message reception process by the safety monitoring server 30 will be described with reference to the flowchart of FIG. When the “alarm notification message AN or alarm release message AC” transmitted from the video determination device 20 is received, execution of the message reception process is started.
First, in step S <b> 101, the message processing unit 403 reads information on the presence management table 800 stored in the presence management table storage unit 402.
Next, in step S102, the message processing unit 403 determines whether or not the received message is an alarm release message AC. As a result of the determination, if the received message is the alarm release message AC, the process proceeds to step S103, and after the melting determination process is executed, the process according to the flowchart of FIG. Details of the penetration determination process will be described later with reference to FIG.

一方、受信した伝文がアラーム解除伝文ＡＣでない場合には、ステップＳ１０４に進む。ステップＳ１０４に進むと、伝文処理部４０３は、受信した伝文がアラーム通知伝文ＡＮであるか否かを判定する。この判定の結果、受信した伝文がアラーム通知伝文ＡＮでない場合には、ステップＳ１０５に進む。ステップＳ１０５に進むと、エラー処理部４０６は、意図しない伝文が受信されたものとしてエラー処理を行う。そして、図９のフローチャートによる処理を終了する。
一方、受信した伝文がアラーム通知伝文ＡＮである場合には、ステップＳ１０６に進む。ステップＳ１０６に進むと、伝文処理部４０３は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数（図８のＲＥＣＮｏの数）を超えているか否かを判定する。
この判定の結果、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数を超えていない場合には、後述するステップＳ１１１に進む。一方、この判定の結果、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数を超えている場合には、ステップＳ１０７に進む。 On the other hand, if the received message is not the alarm release message AC, the process proceeds to step S104. In step S104, the message processing unit 403 determines whether or not the received message is an alarm notification message AN. As a result of this determination, if the received message is not the alarm notification message AN, the process proceeds to step S105. In step S105, the error processing unit 406 performs error processing on the assumption that an unintended message has been received. And the process by the flowchart of FIG. 9 is complete | finished.
On the other hand, if the received message is the alarm notification message AN, the process proceeds to step S106. In step S106, the message processing unit 403 determines whether the number of object IDs (OBJ_ID) included in the alarm notification message AN exceeds the number of records in the presence management table 800 (the number of RECNos in FIG. 8). Determine whether or not.
As a result of the determination, if the number of object IDs (OBJ_ID) included in the alarm notification message AN does not exceed the number of records in the presence management table 800, the process proceeds to step S111 described later. On the other hand, as a result of the determination, if the number of object IDs (OBJ_ID) included in the alarm notification message AN exceeds the number of records in the presence management table 800, the process proceeds to step S107.

ステップＳ１０７に進むと、伝文処理部４０３は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）と同じＩＤのレコードの情報を在席管理テーブル８００から抽出する。
次に、ステップＳ１０８において、伝文処理部４０３は、ステップＳ１０７で抽出したレコードの在席位置を、アラーム通知伝文ＡＮに含まれる作業者Ｗの座標位置Ｆｘ、Ｆｙに書き換えて更新する。ただし、抽出したレコードの在席位置と、アラーム通知伝文ＡＮに含まれる作業者Ｗの座標位置Ｆｘ、Ｆｙとを比較して、入出管理ライン７００ａ、７００ｂを跨がずに溶け込みエリア５００を通過したと判定した場合、伝文処理部４０３は、抽出したレコードの在席位置を書き換えないようにする。また、在席位置を更新したレコードにおいて、溶け込み中フラグが設定されておらず、且つ、更新後の在席位置が溶け込みエリア５００内にある場合、伝文処理部４０３は、当該レコードの溶け込み中フラグを「０」に設定する。これとは逆に、在席位置を更新したレコードにおいて、溶け込み中フラグが「０」に設定されており、且つ、更新後の在席位置が（溶け込みエリア５００外ではあるが）検出エリア１００内にある場合、伝文処理部４０３は、当該レコードの溶け込み中フラグを「−」に設定する（何も設定しない）。 In step S107, the message processing unit 403 extracts, from the presence management table 800, information on a record having the same ID as the object ID (OBJ_ID) included in the alarm notification message AN.
Next, in step S108, the message processing unit 403 rewrites and updates the presence position of the record extracted in step S107 to the coordinate positions Fx and Fy of the worker W included in the alarm notification message AN. However, the presence position of the extracted record is compared with the coordinate positions Fx and Fy of the worker W included in the alarm notification message AN, and passes through the blending area 500 without straddling the entry / exit management lines 700a and 700b. If it is determined that the message is recorded, the message processing unit 403 does not rewrite the presence position of the extracted record. Also, in the record in which the seating position is updated, if the blending flag is not set and the updated seating position is in the blending area 500, the message processing unit 403 Set the flag to “0”. On the contrary, in the record in which the seating position is updated, the melting flag is set to “0” and the updated seating position is within the detection area 100 (although it is outside the melting area 500). If there is, the message processing unit 403 sets the melting flag of the record to “−” (sets nothing).

次に、ステップＳ１０９において、伝文処理部４０３は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）のうち、在席管理テーブル８００のＩＤとは異なるオブジェクトＩＤ（OBJ＿ID）を抽出する。そして、ステップＳ１１０に進んで溶け込み復帰処理が実行された後、図９のフローチャートによる処理を終了する。溶け込み復帰処理の詳細については、図１１を参照しながら後述する。
前述したように、ステップＳ１０６において、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数を超えていないと判定された場合には、ステップＳ１１１に進む。ステップＳ１１１に進むと、伝文処理部４０３は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数未満であるか否かを判定する。 Next, in step S109, the message processing unit 403 extracts an object ID (OBJ_ID) different from the ID of the presence management table 800 from the object ID (OBJ_ID) included in the alarm notification message AN. And after progressing to step S110 and performing a melt | dissolution return process, the process by the flowchart of FIG. 9 is complete | finished. Details of the melt recovery process will be described later with reference to FIG.
As described above, if it is determined in step S106 that the number of object IDs (OBJ_ID) included in the alarm notification message AN does not exceed the number of records in the presence management table 800, the process proceeds to step S111. . In step S111, the message processing unit 403 determines whether the number of object IDs (OBJ_ID) included in the alarm notification message AN is less than the number of records in the presence management table 800.

この判定の結果、伝文処理部４０３は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数未満でない場合には、後述するステップＳ１１６に進む。一方、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数未満である場合には、ステップＳ１１２に進む。
ステップＳ１１２に進むと、伝文処理部４０３は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）と同じＩＤのレコードの情報を在席管理テーブル８００から抽出する。
次に、ステップＳ１１３において、伝文処理部４０３は、ステップＳ１１２で抽出したレコードの在席位置を、アラーム通知伝文ＡＮに含まれる作業者Ｗの座標位置Ｆｘ、Ｆｙに書き換えて更新する。ただし、抽出したレコードの在席位置と、アラーム通知伝文ＡＮに含まれる作業者Ｗの座標位置Ｆｘ、Ｆｙとを比較して、入出管理ライン７００ａ、７００ｂを跨がずに溶け込みエリア５００を通過したと判定した場合、伝文処理部４０３は、抽出したレコードの在席位置を書き換えないようにする。また、在席位置を更新したレコードにおいて、溶け込み中フラグが設定されておらず、且つ、更新後の在席位置が溶け込みエリア５００内にある場合、伝文処理部４０３は、当該レコードの溶け込み中フラグを「０」に設定する。これとは逆に、在席位置を更新したレコードにおいて、溶け込み中フラグが「０」に設定されており、且つ、更新後の在席位置が（溶け込みエリア５００外ではあるが）検出エリア１００内にある場合、伝文処理部４０３は、当該レコードの溶け込み中フラグを「−」に設定する（何も設定しない）。 As a result of this determination, if the number of object IDs (OBJ_ID) included in the alarm notification message AN is not less than the number of records in the presence management table 800, the message processing unit 403 proceeds to step S116 described later. On the other hand, if the number of object IDs (OBJ_ID) included in the alarm notification message AN is less than the number of records in the presence management table 800, the process proceeds to step S112.
In step S112, the message processing unit 403 extracts, from the presence management table 800, information on a record having the same ID as the object ID (OBJ_ID) included in the alarm notification message AN.
Next, in step S113, the message processing unit 403 rewrites and updates the presence position of the record extracted in step S112 to the coordinate positions Fx and Fy of the worker W included in the alarm notification message AN. However, the presence position of the extracted record is compared with the coordinate positions Fx and Fy of the worker W included in the alarm notification message AN, and passes through the blending area 500 without straddling the entry / exit management lines 700a and 700b. If it is determined that the message is recorded, the message processing unit 403 does not rewrite the presence position of the extracted record. Also, in the record in which the seating position is updated, if the blending flag is not set and the updated seating position is in the blending area 500, the message processing unit 403 Set the flag to “0”. On the contrary, in the record in which the seating position is updated, the melting flag is set to “0” and the updated seating position is within the detection area 100 (although it is outside the melting area 500). If there is, the message processing unit 403 sets the melting flag of the record to “−” (sets nothing).

次に、ステップＳ１１４において、伝文処理部４０３は、在席管理テーブル８００のＩＤのうち、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）とは異なるＩＤを抽出する。
そして、ステップＳ１１０に進んで溶け込み判定処理が実行された後、図９のフローチャートによる処理を終了する。溶け込み判定処理の詳細については、図１０を参照しながら後述する。 Next, in step S114, the message processing unit 403 extracts an ID different from the object ID (OBJ_ID) included in the alarm notification message AN from the IDs in the presence management table 800.
And after progressing to step S110 and a melt | dissolution determination process being performed, the process by the flowchart of FIG. 9 is complete | finished. Details of the penetration determination process will be described later with reference to FIG.

前述したように、ステップＳ１１１において、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数が、在席管理テーブル８００のレコード数未満でないと判定された場合には、ステップＳ１１６に進む。ステップＳ１１６に進むと、伝文処理部４０３は、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数と、在席管理テーブル８００のレコード数とが同じであるか否かを判定する。この判定の結果、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数と、在席管理テーブル８００のレコード数とが同じでない場合には、ステップＳ１１７に進む。ステップＳ１１７に進むと、エラー処理部４０６は、エラー処理を実行する。そして、図９のフローチャートによる処理を終了する。   As described above, if it is determined in step S111 that the number of object IDs (OBJ_ID) included in the alarm notification message AN is not less than the number of records in the presence management table 800, the process proceeds to step S116. In step S116, the message processing unit 403 determines whether the number of object IDs (OBJ_ID) included in the alarm notification message AN is the same as the number of records in the presence management table 800. As a result of the determination, if the number of object IDs (OBJ_ID) included in the alarm notification message AN is not the same as the number of records in the presence management table 800, the process proceeds to step S117. In step S117, the error processing unit 406 executes error processing. And the process by the flowchart of FIG. 9 is complete | finished.

一方、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数と、在席管理テーブル８００のレコード数とが同じである場合には、ステップＳ１１８に進む。
ステップＳ１１８に進むと、伝文処理部４０３は、未抽出のオブジェクトＩＤ（OBJ＿ID）を、アラーム通知伝文ＡＮから１つ抽出する。
次に、ステップＳ１１９において、伝文処理部４０３は、ステップＳ１１８で抽出したオブジェクトＩＤ（OBJ＿ID）と同じＩＤが、在席管理テーブル８００のレコードにあるか否かを判定する。この判定の結果、抽出したオブジェクトＩＤ（OBJ＿ID）と同じＩＤが、在席管理テーブル８００のレコードにない場合にはステップＳ１２０に進み、エラー処理部４０６は、エラー処理を実行する。そして、後述するステップＳ１２２に進む。 On the other hand, if the number of object IDs (OBJ_ID) included in the alarm notification message AN is the same as the number of records in the presence management table 800, the process proceeds to step S118.
In step S118, the message processing unit 403 extracts one unextracted object ID (OBJ_ID) from the alarm notification message AN.
Next, in step S119, the message processing unit 403 determines whether or not the same ID as the object ID (OBJ_ID) extracted in step S118 is in the record of the presence management table 800. As a result of the determination, if the same ID as the extracted object ID (OBJ_ID) is not in the record of the presence management table 800, the process proceeds to step S120, and the error processing unit 406 executes error processing. And it progresses to step S122 mentioned later.

一方、抽出したオブジェクトＩＤ（OBJ＿ID）と同じＩＤが、在席管理テーブル８００のレコードにある場合には、ステップＳ１２１に進む。ステップＳ１２１に進むと、伝文処理部４０３は、抽出したオブジェクトＩＤ（OBJ＿ID）と同じＩＤのレコードの在席位置を、アラーム通知伝文ＡＮに含まれる作業者Ｗの座標位置Ｆｘ、Ｆｙに書き換えて更新する。ただし、抽出したレコードの在席位置と、アラーム通知伝文ＡＮに含まれる作業者Ｗの座標位置Ｆｘ、Ｆｙとを比較して、入出管理ライン７００ａ、７００ｂを跨がずに溶け込みエリア５００を通過したと判定した場合、伝文処理部４０３は、抽出したレコードの在席位置を書き換えないようにする。また、在席位置を更新したレコードにおいて、溶け込み中フラグが設定されておらず、且つ、更新後の在席位置が溶け込みエリア５００内にある場合、伝文処理部４０３は、当該レコードの溶け込み中フラグを「０」に設定する。これとは逆に、在席位置を更新したレコードにおいて、溶け込み中フラグが「０」に設定されており、且つ、更新後の在席位置が（溶け込みエリア５００外ではあるが）検出エリア１００内にある場合、伝文処理部４０３は、当該レコードの溶け込み中フラグを「−」に設定する（何も設定しない）。そして、ステップＳ１２２に進む。   On the other hand, when the same ID as the extracted object ID (OBJ_ID) is in the record of the presence management table 800, the process proceeds to step S121. In step S121, the message processing unit 403 rewrites the presence position of the record having the same ID as the extracted object ID (OBJ_ID) to the coordinate positions Fx and Fy of the worker W included in the alarm notification message AN. Update. However, the presence position of the extracted record is compared with the coordinate positions Fx and Fy of the worker W included in the alarm notification message AN, and passes through the blending area 500 without straddling the entry / exit management lines 700a and 700b. If it is determined that the message is recorded, the message processing unit 403 does not rewrite the presence position of the extracted record. Also, in the record in which the seating position is updated, if the blending flag is not set and the updated seating position is in the blending area 500, the message processing unit 403 Set the flag to “0”. On the contrary, in the record in which the seating position is updated, the melting flag is set to “0” and the updated seating position is within the detection area 100 (although it is outside the melting area 500). If there is, the message processing unit 403 sets the melting flag of the record to “−” (sets nothing). Then, the process proceeds to step S122.

ステップＳ１２２に進むと、伝文処理部４０３は、アラーム通知伝文ＡＮに含まれる全てのオブジェクトＩＤ（OBJ＿ID）を抽出したか否かを判定する。この判定の結果、アラーム通知伝文ＡＮに含まれる全てのオブジェクトＩＤ（OBJ＿ID）を抽出していない場合には、ステップＳ１１８の処理に戻り、アラーム通知伝文ＡＮに含まれる全てのオブジェクトＩＤ（OBJ＿ID）を抽出するまで、ステップＳ１１８〜Ｓ１２２の処理を繰り返し行う。そして、アラーム通知伝文ＡＮに含まれる全てのオブジェクトＩＤ（OBJ＿ID）を抽出すると、図９のフローチャートによる処理を終了する。   In step S122, the message processing unit 403 determines whether all object IDs (OBJ_ID) included in the alarm notification message AN have been extracted. If all the object IDs (OBJ_ID) included in the alarm notification message AN are not extracted as a result of this determination, the process returns to step S118, and all the object IDs (OBJ_ID) included in the alarm notification message AN are returned. Steps S118 to S122 are repeated until () is extracted. Then, when all object IDs (OBJ_ID) included in the alarm notification message AN are extracted, the processing according to the flowchart of FIG. 9 ends.

次に、図１０のフローチャートを参照しながら、図９のステップＳ１０３、Ｓ１１５の溶け込み判定処理の一例を説明する。
まず、ステップＳ２０１において、溶け込み判定処理部４０４は、滞在エリア座標テーブル６００の情報を読み出す。
次に、ステップＳ２０２において、溶け込み判定処理部４０４は、伝文処理部４０３によりアラーム解除伝文ＡＣが受信されたか否かを判定する。この判定の結果、アラーム解除伝文ＡＣが受信された場合には、ステップＳ２０３に進む。ステップＳ２０３に進むと、溶け込み判定処理部４０４は、在席管理テーブル８００の全てのレコードの情報を抽出する。そして、後述するステップＳ２０６に進む。 Next, an example of the penetration determination process in steps S103 and S115 in FIG. 9 will be described with reference to the flowchart in FIG.
First, in step S <b> 201, the penetration determination processing unit 404 reads information in the stay area coordinate table 600.
Next, in step S <b> 202, the penetration determination processing unit 404 determines whether the alarm processing message AC is received by the message processing unit 403. As a result of this determination, if the alarm release message AC is received, the process proceeds to step S203. In step S <b> 203, the penetration determination processing unit 404 extracts information on all records in the presence management table 800. And it progresses to step S206 mentioned later.

一方、アラーム解除伝文ＡＣが受信されていない場合には、ステップＳ２０４に進む。ステップＳ２０４に進むと、溶け込み判定処理部４０４は、伝文処理部４０３により受信されたアラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）と異なるＩＤが在席管理テーブル８００のレコードにあるか否かを判定する。この判定の結果、伝文処理部４０３により受信されたアラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）と異なるＩＤが在席管理テーブル８００のレコードにない場合には、溶け込み判定処理を終了する。
一方、伝文処理部４０３により受信されたアラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）と異なるＩＤが在席管理テーブル８００のレコードにある場合には、ステップＳ２０５に進む。ステップＳ２０５に進むと、溶け込み判定処理部４０４は、図９のステップＳ１１４で伝文処理部４０３により抽出されたＩＤ（アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）と異なるＩＤ）のレコードの情報を在席管理テーブル８００から抽出する。そして、ステップＳ２０６に進む。 On the other hand, if the alarm release message AC has not been received, the process proceeds to step S204. In step S204, the penetration determination processing unit 404 determines whether an ID different from the object ID (OBJ_ID) included in the alarm notification message AN received by the message processing unit 403 is in the record of the attendance management table 800. Determine whether. As a result of this determination, if there is no ID different from the object ID (OBJ_ID) included in the alarm notification message AN received by the message processing unit 403 in the record of the attendance management table 800, the merge determination process ends. .
On the other hand, if an ID different from the object ID (OBJ_ID) included in the alarm notification message AN received by the message processing unit 403 is in the record of the attendance management table 800, the process proceeds to step S205. In step S205, the penetration determination processing unit 404 records the record of the ID (an ID different from the object ID (OBJ_ID) included in the alarm notification message AN) extracted by the message processing unit 403 in step S114 of FIG. Information is extracted from the presence management table 800. Then, the process proceeds to step S206.

ステップＳ２０６に進むと、溶け込み判定処理部４０４は、ステップＳ２０３又はＳ２０５で抽出したレコードの情報のうち、未選択のレコードの情報を１つ選択する。
次に、ステップＳ２０７において、溶け込み判定処理部４０４は、ステップＳ２０６で選択したレコードの在席位置が、退出不可エリア内にあるか否かを判定する。この判定の結果、レコードの在席位置が、退出不可エリア内にある場合には、ステップＳ２０８に進む。
ステップＳ２０８に進むと、溶け込み判定処理部４０４は、ステップＳ２０６で選択したレコードの溶け込み中フラグを「１」に設定する。そして、後述するステップＳ２０９に進む。 In step S206, the penetration determination processing unit 404 selects one piece of unselected record information from the record information extracted in step S203 or S205.
Next, in step S207, the penetration determination processing unit 404 determines whether or not the attendance position of the record selected in step S206 is within an area where it cannot be withdrawn. As a result of this determination, if the attendance position of the record is within the non-leaving area, the process proceeds to step S208.
In step S208, the penetration determination processing unit 404 sets the melting flag of the record selected in step S206 to “1”. And it progresses to step S209 mentioned later.

一方、レコードの在席位置が、退出不可エリア内にない場合には、ステップＳ２０９に進む。ステップＳ２０９に進むと、溶け込み判定処理部４０４は、ステップＳ２０６で選択したレコードを削除する。そして、ステップＳ２１０に進む。
ステップＳ２１０に進むと、溶け込み判定処理部４０４は、ステップＳ２０３又はＳ２０５で抽出した全てのレコードを選択したか否かを判定する。この判定の結果、全てのレコードを選択していない場合には、ステップＳ２０６に戻り、全てのレコードを選択するまで、ステップＳ２０６〜Ｓ２０９の処理を繰り返し実行する。そして、全てのレコードを選択すると、溶け込み判定処理を終了する。 On the other hand, if the attendance position of the record is not within the non-leaving area, the process proceeds to step S209. In step S209, the penetration determination processing unit 404 deletes the record selected in step S206. Then, the process proceeds to step S210.
In step S210, the penetration determination processing unit 404 determines whether all the records extracted in step S203 or S205 have been selected. If all the records are not selected as a result of this determination, the process returns to step S206, and the processes of steps S206 to S209 are repeatedly executed until all the records are selected. When all the records are selected, the penetration determination process is terminated.

次に、図１１のフローチャートを参照しながら、図９のステップＳ１１０の溶け込み復帰処理の一例を説明する。
まず、ステップＳ３０１において、溶け込み復帰処理部４０５は、滞在エリア座標テーブル６００の情報を読み出す。
次に、ステップＳ３０２において、溶け込み復帰処理部４０５は、図９のステップＳ１０９で伝文処理部４０３により抽出されたオブジェクトＩＤ（OBJ＿ID）（在席管理テーブル８００のＩＤと異なるオブジェクトＩＤ（OBJ＿ID））のデータを１つ選択する。 Next, an example of the melt recovery process in step S110 of FIG. 9 will be described with reference to the flowchart of FIG.
First, in step S <b> 301, the melt recovery processing unit 405 reads information in the stay area coordinate table 600.
Next, in step S302, the melt recovery processing unit 405, the object ID (OBJ_ID) extracted by the message processing unit 403 in step S109 of FIG. 9 (object ID (OBJ_ID) different from the ID of the presence management table 800). Select one of the data.

次に、ステップＳ３０３において、溶け込み復帰処理部４０５は、ステップＳ３０２で選択したオブジェクトＩＤ（OBJ＿ID）のデータに含まれている「作業者の座標位置Ｆｘ、Ｆｙ」が溶け込みエリア５００内にあるか否かを判定する。この判定の結果、作業者の座標位置Ｆｘ、Ｆｙが溶け込みエリア５００内にない場合には、ステップＳ３０４に進む。ステップＳ３０４に進むと、溶け込み復帰処理部４０５は、ステップＳ３０２で選択したオブジェクトＩＤ（OBJ＿ID）のデータに基づいて、在席管理テーブル８００に新しいレコードを追加する。このとき、当該レコードの溶け込み中フラグには何も設定されない。そして、後述するステップＳ３１１に進む。   Next, in step S <b> 303, the melt recovery processing unit 405 determines whether or not “the operator's coordinate position Fx, Fy” included in the data of the object ID (OBJ_ID) selected in step S <b> 302 is in the melt area 500. Determine whether. As a result of the determination, if the operator's coordinate positions Fx and Fy are not in the melting area 500, the process proceeds to step S304. In step S304, the melt recovery processing unit 405 adds a new record to the presence management table 800 based on the object ID (OBJ_ID) data selected in step S302. At this time, nothing is set in the melting flag of the record. And it progresses to step S311 mentioned later.

一方、作業者の座標位置Ｆｘ、Ｆｙが溶け込みエリア５００内にある場合には、ステップＳ３０５に進む。ステップＳ３０５に進むと、溶け込み復帰処理部４０５は、溶け込み中フラグの値が「１」であるレコードが在席管理テーブル８００にあるか否かを判定する。この判定の結果、溶け込み中フラグの値が「１」であるレコードが在席管理テーブル８００にない場合には、前述したステップＳ３０４に進み、溶け込み復帰処理部４０５は、ステップＳ３０２で選択したオブジェクトＩＤ（OBJ＿ID）のデータに基づいて、在席管理テーブル８００に新しいレコードを追加する。このとき、当該レコードの溶け込み中フラグには「０」が設定される。   On the other hand, if the operator's coordinate positions Fx and Fy are within the fusion area 500, the process proceeds to step S305. In step S305, the melt recovery processing unit 405 determines whether there is a record in the attendance management table 800 in which the value of the melting flag is “1”. If the result of this determination is that there is no record in the presence management table 800 where the value of the blending flag is “1”, the process proceeds to step S304 described above, and the melt recovery processing unit 405 selects the object ID selected in step S302. A new record is added to the presence management table 800 based on the data of (OBJ_ID). At this time, “0” is set in the melting flag of the record.

一方、溶け込み中フラグの値が「１」であるレコードが在席管理テーブル８００ある場合には、ステップＳ３０６に進む。ステップＳ３０６に進むと、溶け込み復帰処理部４０５は、溶け込み中フラグの値が「１」であるレコードのうち、未選択のレコードを在席管理テーブル８００から１つ選択する。
次に、ステップＳ３０７において、溶け込み復帰処理部４０５は、ステップＳ３０６で選択したレコードのＩＤと、ステップＳ３０２で選択したオブジェクトＩＤ（OBJ＿ID））とが一致するか否かが判定する。この判定の結果、レコードのＩＤと、オブジェクトＩＤ（OBJ＿ID））とが一致する場合には、後述するステップＳ３１０に進む。 On the other hand, if there is a record in which the value of the blending flag is “1” in the presence management table 800, the process proceeds to step S306. In step S306, the melt recovery processing unit 405 selects one unselected record from the presence management table 800 among the records having the melt flag value “1”.
Next, in step S307, the melt recovery processing unit 405 determines whether the ID of the record selected in step S306 matches the object ID (OBJ_ID) selected in step S302. As a result of the determination, if the record ID matches the object ID (OBJ_ID), the process proceeds to step S310 to be described later.

一方、レコードのＩＤと、オブジェクトＩＤ（OBJ＿ID））とが一致しない場合には、ステップＳ３０８に進む。ステップＳ３０８に進むと、溶け込み復帰処理部４０５は、ステップＳ３０６で選択したレコードのＩＤの値を、ステップＳ３０２で選択したオブジェクトＩＤ（OBJ＿ID）の値に書き換える。ただし、ステップＳ３０６で選択したレコードの在席位置と、ステップＳ３０２で選択したオブジェクトＩＤ（OBJ＿ID）のデータに含まれる「作業者Ｗの座標位置」とが所定の範囲内にある場合に限り、ステップＳ３０６で選択したレコードのＩＤの値を、ステップＳ３０２で選択したオブジェクトＩＤ（OBJ＿ID）の値に書き換える。
次に、ステップＳ３０９において、溶け込み復帰処理部４０５は、ステップＳ３０６で選択したレコードの溶け込み中フラグの値を「０」に設定する。そして、溶け込み復帰処理を終了する。ただし、ステップＳ３０６で選択したレコードの在席位置と、ステップＳ３０２で選択したオブジェクトＩＤ（OBJ＿ID）のデータに含まれる「作業者Ｗの座標位置」とが所定の範囲内にある場合に限り、レコードの溶け込み中フラグの値を「０」に設定する。 On the other hand, if the record ID does not match the object ID (OBJ_ID), the process proceeds to step S308. In step S308, the melt recovery processing unit 405 rewrites the ID value of the record selected in step S306 with the object ID (OBJ_ID) value selected in step S302. However, only when the attendance position of the record selected in step S306 and the “coordinate position of worker W” included in the data of the object ID (OBJ_ID) selected in step S302 are within a predetermined range. The ID value of the record selected in S306 is rewritten to the object ID (OBJ_ID) value selected in Step S302.
Next, in step S309, the melt recovery processing unit 405 sets the value of the melting flag of the record selected in step S306 to “0”. And a melt | dissolution return process is complete | finished. However, only when the attendance position of the record selected in step S306 and the “coordinate position of worker W” included in the data of the object ID (OBJ_ID) selected in step S302 are within a predetermined range. Set the value of the melting flag of “0” to “0”.

前述したように、ステップＳ３０７において、ステップＳ３０６で選択したレコードのＩＤと、ステップＳ３０２で選択したオブジェクトＩＤ（OBJ＿ID））とが一致する場合には、ステップＳ３１０に進む。ステップＳ３１０に進むと、溶け込み復帰処理部４０５は、溶け込み中フラグの値が「１」であるレコードを全て選択したか否かを判定する。この判定の結果、溶け込み中フラグの値が「１」であるレコードを全て選択していない場合には、ステップＳ３０６に戻り、未選択のレコードを選択してステップＳ３０７以降の処理を行う。
一方、溶け込み中フラグの値が「１」であるレコードを全てすると、ステップＳ３１１に進む。ステップＳ３１１に進むと、図９のステップＳ１０９で伝文処理部４０３により抽出された全てのオブジェクトＩＤ（OBJ＿ID）のデータを選択したか否かを判定する。この判定の結果、全てのオブジェクトＩＤ（OBJ＿ID）のデータを選択していない場合には、ステップＳ３０２に戻り、全てのオブジェクトＩＤ（OBJ＿ID）のデータを選択するまで、ステップＳ３０２〜Ｓ３１１の処理を繰り返し行う。そして、全てのオブジェクトＩＤ（OBJ＿ID）のデータを選択すると、溶け込み復帰処理を終了する。 As described above, if the ID of the record selected in step S306 matches the object ID (OBJ_ID) selected in step S302 in step S307, the process proceeds to step S310. In step S310, the melt recovery processing unit 405 determines whether or not all records having a melt flag value of “1” have been selected. As a result of this determination, if not all the records having the melted flag value “1” have been selected, the process returns to step S306 to select an unselected record and perform the processing from step S307.
On the other hand, when all the records having the melted flag value “1” are found, the process proceeds to step S311. If it progresses to step S311, it will be determined whether the data of all the object ID (OBJ_ID) extracted by the message process part 403 by step S109 of FIG. 9 were selected. As a result of this determination, if all the object ID (OBJ_ID) data has not been selected, the process returns to step S302, and the processes of steps S302 to S311 are repeated until all the object ID (OBJ_ID) data is selected. Do. When the data of all object IDs (OBJ_ID) are selected, the melt recovery process is terminated.

（まとめ）
以上のように本実施形態では、検出エリア１００の中に、作業者Ｗが滞在する可能性がある領域として溶け込みエリア５００を予め設定する。安全監視サーバ３０は、アラーム通知伝文ＡＮに基づいて、在席管理テーブル８００に、作業者Ｗを識別するＩＤと在席位置と溶け込み中フラグとを登録する。アラーム通知伝文ＡＮに含まれる作業者の数２０２を超える数のレコードが在席管理テーブル８００にある場合、又は、アラーム解除伝文ＡＣが送信されたときに在席管理テーブル８００のレコードがある場合、当該レコードの在席位置が溶け込みエリア５００の退出不可エリア内にあるか否かを判定する。当該レコードの在席位置が溶け込みエリア５００の退出不可エリア内にある場合、当該レコードの溶け込み中フラグの値を「１」に設定して、当該レコードにより特定される作業者Ｗが検出エリア１００内に滞在しているものとして管理する。その後、在席管理テーブル８００のレコード数を超える数のオブジェクトＩＤ（OBJ＿ID）を含むアラーム通知伝文ＡＮを受信すると、在席管理テーブル８００のレコードに含まれるＩＤと一致しないオブジェクトＩＤ（OBJ＿ID）を抽出し、溶け込み中フラグの値が「１」のレコードのＩＤの値を、抽出したオブジェクトＩＤ（OBJ＿ID）の値に変更すると共に、当該溶け込み中フラグの値を「１」から「０」に変更する。 (Summary)
As described above, in the present embodiment, the fusion area 500 is set in advance as an area where the worker W may stay in the detection area 100. Based on the alarm notification message AN, the safety monitoring server 30 registers an ID for identifying the worker W, a seating position, and a blending flag in the seating management table 800. When there are more records in the presence management table 800 than the number 202 of workers included in the alarm notification message AN, or when the alarm release message AC is transmitted, there are records in the presence management table 800. In this case, it is determined whether or not the seating position of the record is within the non-leaving area of the blending area 500. When the attendance position of the record is within the non-removable area of the blending area 500, the value of the blending flag of the record is set to “1” and the worker W specified by the record is within the detection area 100 Manage as you are staying in. Thereafter, when an alarm notification message AN including an object ID (OBJ_ID) exceeding the number of records in the presence management table 800 is received, an object ID (OBJ_ID) that does not match the ID included in the records in the presence management table 800 is received. Extract and change the ID value of the record with the melting flag value “1” to the extracted object ID (OBJ_ID) value, and change the value of the melting flag from “1” to “0” To do.

したがって、例えば、溶け込みエリア５００内で作業者Ｗが滞在し、映像判定装置２０により作業者Ｗが検出されなくなった場合でも、安全監視サーバ３０は、当該作業者Ｗを管理することができる。そして、映像判定装置２０により当該作業者Ｗが新たな別の作業者Ｗとして検出された場合でも、安全監視サーバ３０は、当該新たな別の作業者を、溶け込みエリア５００に滞在し続けている作業者であると認識することができる。これにより、作業者Ｗが溶け込みエリア５００内にいるにも関わらず、溶け込みエリア５００から退出してしまうと判定してしまうことと、当該作業者Ｗを溶け込みエリア５００に新たに進入した作業者Ｗであると判定してしまうこととを防止することができる。よって、溶け込みエリア５００内で動きのなくなった作業者Ｗが溶け込みエリア５００内に滞在していることと、溶け込みエリア５００から退出したこととを正確に検出することができる。これにより、例えば、監視する対象の作業者Ｗが所定の数になっていない場合にＶＡスピーカ４０等による通報を行う場合に、余分な通報を行わないようにすることができる。   Therefore, for example, even when the worker W stays in the melting area 500 and the worker W is no longer detected by the video determination device 20, the safety monitoring server 30 can manage the worker W. Even when the worker W is detected as another new worker W by the video determination device 20, the safety monitoring server 30 continues to stay in the melted area 500. It can be recognized as an operator. As a result, it is determined that the worker W has left the melting area 500 even though the worker W is in the melting area 500, and the worker W who newly enters the melting area 500. It can be prevented that it is determined that. Therefore, it is possible to accurately detect that the worker W who has stopped moving in the melting area 500 stays in the melting area 500 and has left the melting area 500. Thereby, for example, when reporting by the VA speaker 40 or the like is performed when the number of workers W to be monitored is not a predetermined number, it is possible to prevent unnecessary reporting.

また、本実施形態では、溶け込みエリア５００内に退出不可エリアを設定し、この退出不可エリア内で作業者Ｗが滞在している場合に当該作業者Ｗに対する溶け込み中フラグを「１」にする。したがって、アラーム通知伝文ＡＮの送信間隔（本実施形態では約１秒）の間に作業者Ｗが物理的に溶け込みエリア５００から退出することができない位置にいるとみなせる場合、又は作業者Ｗが溶け込みエリア５００内で作業を行っていると見なせる場合に、映像判定装置２０により当該作業者Ｗが検出されなくなると、当該作業者Ｗが溶け込みエリア５００内に滞在していることを在席管理テーブル８００で管理することができる。すなわち、溶け込みエリア５００内であっても退出不可エリア以外のエリアでは、作業者Ｗが滞在することはないと想定することで、在席管理テーブル８００の更新頻度を小さくすることができる。   Further, in this embodiment, a non-leaving area is set in the melting area 500, and when the worker W is staying in the non-leaving area, the melting flag for the worker W is set to “1”. Therefore, when the worker W can be considered to be in a position where he / she cannot physically leave the melting area 500 during the transmission interval of the alarm notification message AN (about 1 second in the present embodiment), or the worker W When it can be assumed that the work is performed in the melting area 500 and the worker W is no longer detected by the video determination device 20, the presence management table indicates that the worker W is staying in the melting area 500. 800 can be managed. That is, it is possible to reduce the update frequency of the attendance management table 800 by assuming that the worker W does not stay in an area other than the non-leaving area even within the fusion area 500.

（変形例）
安全監視サーバ３０のオペレータは、安全監視サーバ３０のコンピュータディスプレイに表示されている撮像画像を見ながら、検出エリア１００と、溶け込みエリア５００と、入出管理ライン７００を、当該撮像エリア５１０に対して直接的に設定することができる。例えば、コンピュータディスプレイの画面をタッチパネルとし、タッチパネルで指示された位置の情報を滞在エリア座標テーブル６００に設定したり、撮像画像に対してマウスで指示された内の位置の情報を滞在エリア座標テーブル６００に設定したりすることができる。 (Modification)
While viewing the captured image displayed on the computer display of the safety monitoring server 30, the operator of the safety monitoring server 30 directly sets the detection area 100, the fusion area 500, and the entrance / exit management line 700 to the imaging area 510. Can be set automatically. For example, the screen of the computer display is used as a touch panel, and the information on the position designated by the touch panel is set in the stay area coordinate table 600, or the information on the position designated by the mouse for the captured image is set in the stay area coordinate table 600. Can be set.

また、安全監視サーバ３０は、溶け込みエリア５００内に同一の作業者Ｗが一定時間以上継続しているか否かを判定し、溶け込みエリア５００内に同一の作業者Ｗが一定時間以上継続している場合に、ＶＡスピーカ４０にその旨を示す通報情報を出力するようにしてもよい。このようにする場合には、在席管理テーブル８００に、最初の発生時刻（最初に作業者Ｗが溶け込みエリア５００に進入した時刻）と現在の発生時刻とを記憶し、これらの時刻の差が一定時間以上であるかどうかを判定するようにすればよい。また、溶け込みエリア５００内に同一の作業者Ｗが一定時間以上継続して滞在しているか否かを判定し、溶け込みエリア５００内に同一の作業者Ｗが一定時間以上継続して滞在している場合に、ＶＡスピーカ４０にその旨を示す通報情報を出力するようにしてもよい。このようにする場合には、在席管理テーブル８００に、溶け込み中フラグを「０」から「１」に変更した時刻（作業者Ｗが溶け込みエリア５００で止まった時刻）と現在の発生時刻とを記憶し、これらの時刻の差が一定時間以上であるかどうかを判定するようにすればよい。   In addition, the safety monitoring server 30 determines whether or not the same worker W continues in the melting area 500 for a certain time or more, and the same worker W continues in the melting area 500 for a certain time or more. In this case, notification information indicating that may be output to the VA speaker 40. In this case, the first occurrence time (the time when the worker W first entered the melting area 500) and the current occurrence time are stored in the presence management table 800, and the difference between these times is stored. What is necessary is just to determine whether it is more than fixed time. In addition, it is determined whether or not the same worker W stays in the fusion area 500 for a predetermined time or longer, and the same worker W stays in the fusion area 500 for a predetermined time or longer. In this case, notification information indicating that may be output to the VA speaker 40. In this case, in the presence management table 800, the time when the melting flag is changed from “0” to “1” (time when the worker W stops in the melting area 500) and the current occurrence time are displayed. It may be stored, and it may be determined whether or not the difference between these times is a certain time or more.

また、本実施形態では、アラーム通知伝文ＡＮを受信した際の溶け込み復帰処理と溶け込み判定処理の特徴を分かりやすく説明するために、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）の数と、在席管理テーブル８００のレコード数（図８のＲＥＣＮｏの数）との比較の結果に応じて、溶け込み復帰処理又は溶け込み判定処理を行うようにした。しかしながら、例えば、溶け込みエリア５００内に作業者Ｗが滞在し映像判定装置２０で当該作業者Ｗを検出できなくなったときに複数の作業者Ｗが検出エリア１００に進入した場合には、図９のステップＳ１０６でＹＥＳになった場合でも溶け込み判定処理を行う必要がある。同様に、溶け込みエリア５００内に滞在していた作業者Ｗが動き出し映像判定装置２０で当該作業者Ｗを検出できるようになったときに複数の作業者Ｗが検出エリア１００から退出した場合には、図９のステップＳ１１１でＹＥＳになった場合でも溶け込み復帰処理を行う必要がある。さらに、溶け込みエリア５００内に作業者Ｗが滞在し映像判定装置２０で当該作業者Ｗを検出できなくなったときに１人の作業者Ｗが検出エリア１００に進入した場合には、図９のステップＳ１１６でＹＥＳになった場合でも溶け込み判定処理を行う必要がある。この他、溶け込みエリア５００内に滞在していた作業者Ｗが動き出し映像判定装置２０で当該作業者Ｗを検出できるようになったときに１人の作業者Ｗが検出エリア１００から退出した場合には、図９のステップＳ１１６でＹＥＳになった場合でも溶け込み復帰処理を行う必要がある。   In the present embodiment, in order to easily understand the characteristics of the melt recovery process and the melt determination process when the alarm notification message AN is received, the number of object IDs (OBJ_ID) included in the alarm notification message AN Then, in accordance with the comparison result with the number of records in the presence management table 800 (the number of RECNos in FIG. 8), the melt recovery process or the melt determination process is performed. However, for example, when a plurality of workers W enter the detection area 100 when the worker W stays in the melting area 500 and the image determination device 20 can no longer detect the worker W, FIG. Even in the case of YES in step S106, it is necessary to perform a melting determination process. Similarly, when a plurality of workers W has left the detection area 100 when the worker W staying in the melting area 500 starts moving and the worker can detect the worker W with the video determination device 20. Even if the answer is YES in step S111 of FIG. 9, it is necessary to perform the melt recovery process. Further, when one worker W enters the detection area 100 when the worker W stays in the fusion area 500 and the image determination device 20 can no longer detect the worker W, the steps in FIG. 9 are performed. Even if YES in S116, it is necessary to perform a melting determination process. In addition, when one worker W leaves the detection area 100 when the worker W staying in the melting area 500 starts moving and the worker can detect the worker W with the video determination device 20. Is necessary to perform the melt-recovery processing even when YES is obtained in step S116 of FIG.

したがって、このような場合にも溶け込み判定処理と溶け込み復帰処理を行うようにすることができる。このようにする場合には、例えば、以下のようにすればよい。
まず、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）と同じＩＤのレコードの情報については、図９のステップＳ１０８（ステップＳ１１３、Ｓ１２１でもよい）の処理を行う。
次に、在席管理テーブル８００のＩＤのうち、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）とは異なるＩＤのレコードを１つずつ選択して、図１０のステップＳ２０６〜Ｓ２１０の処理を行うようにする。
次に、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）のうち、在席管理テーブル８００のＩＤとは異なるオブジェクトＩＤ（OBJ＿ID）のデータを１つずつ選択して図１１のステップＳ３０２〜Ｓ３１１の処理を行うようにする。 Accordingly, even in such a case, the melt determination process and the melt recovery process can be performed. In this case, for example, the following may be performed.
First, for the information of the record having the same ID as the object ID (OBJ_ID) included in the alarm notification message AN, the process of step S108 in FIG. 9 (may be steps S113 and S121) is performed.
Next, records having IDs different from the object ID (OBJ_ID) included in the alarm notification message AN are selected one by one from the IDs in the attendance management table 800, and the processes of steps S206 to S210 in FIG. 10 are performed. To do.
Next, among the object IDs (OBJ_ID) included in the alarm notification message AN, data of object IDs (OBJ_ID) different from the IDs of the presence management table 800 are selected one by one, and steps S302 to S311 in FIG. To process.

また、本実施形態では、溶け込み判定処理において、在席管理テーブル８００のレコードのうち、アラーム通知伝文ＡＮに含まれるオブジェクトＩＤ（OBJ＿ID）とは異なるＩＤのレコードの在席位置が、退出不可エリア内にあるか否かを判定した。しかしながら、必ずしもこのようにする必要はなく、退出不可エリア内ではなく、溶け込みエリア５００内にあるか否かを判定するようにしてもよい。このようにした場合には、入出管理ライン７００の設定は必ずしも必要なく、溶け込みエリアを退出不可エリアと同じ意味を有する領域として設定することになる。   Further, in the present embodiment, the presence position of a record having an ID different from the object ID (OBJ_ID) included in the alarm notification message AN among the records of the presence management table 800 in the merge determination process is the non-leaving area. It was judged whether it was in. However, it is not always necessary to do this, and it may be determined whether it is in the melted area 500, not in the non-retreatable area. In such a case, the setting of the entry / exit management line 700 is not necessarily required, and the fusion area is set as an area having the same meaning as the non-leaving area.

また、本実施形態では、溶け込みエリア５００の縁のうち、作業者が通過することができる縁に入出管理ライン７００を設定するようにしたが、これとは反対に、作業者が通過することができない縁に入出管理ラインを設定するようにしてもよい。このようにした場合には、入出管理ラインを跨いで溶け込みエリア５００に対して入退出することはできなくなり、また、入出管理ラインから所定の距離だけ内側のエリアが退出不可エリアとなる。   Moreover, in this embodiment, although the entrance / exit management line 700 was set to the edge which an operator can pass among the edges of the melting area 500, contrary to this, an operator may pass. You may make it set an entrance / exit management line to the edge which cannot be performed. In such a case, it is impossible to enter / exit the fusion area 500 across the entrance / exit management line, and an area inside the entrance / exit management line by a predetermined distance becomes a non-exitable area.

（請求項との関係）
＜請求項１＞
人物監視装置は、例えば、安全監視サーバ３０により実現される。第１の人物識別情報は、例えば、検出進入物体ＩＤ２０３により実現される。第１の人物位置情報は、例えば、作業者の位置２０４（作業者の足元中心位置のｘ−ｙ座標Ｆｘ、Ｆｙ）により実現される。通知伝文は、例えば、アラーム通知伝文ＡＮにより実現される。解除伝文は、例えば、アラーム解除伝文ＡＣにより実現される。第２の人物識別情報は、例えば、在席管理テーブル８００のＩＤにより実現される。第２の人物位置情報は、例えば、在席管理テーブル８００の在席位置により実現される。人物滞在情報は、例えば、溶け込み中フラグにより実現される。在席管理情報は、例えば、在席管理テーブル８００の各レコードの情報により実現される。第１の設定手段は、例えば、溶け込み復帰処理部４０５（図１１のステップＳ３０４）により実現される。第２の設定手段は、例えば、溶け込み判定処理部４０４（図１０のステップＳ２０２→Ｓ２０５〜Ｓ２０７→Ｓ２０８）により実現される。ここで、溶け込みエリアに滞在していることを示す情報（人物滞在情報）は、例えば、値が「１」である溶け込み中フラグにより実現される。第３の設定手段は、例えば、溶け込み判定処理部４０４（図１０のステップＳ２０２→Ｓ２０３、Ｓ２０６、Ｓ２０７→Ｓ２０８）により実現される。第４の設定手段は、例えば、溶け込み復帰処理部４０５（図１１のステップＳ３０２、Ｓ３０３→Ｓ３０６、Ｓ３０７→Ｓ３０８、Ｓ３０９）により実現される。ここで、溶け込みエリアに滞在していないことを示す情報（人物滞在情報）は、例えば、値が「０」である溶け込み中フラグにより実現される。
＜請求項２＞
入出管理ラインは、例えば、入出管理ライン７００により実現される。
＜請求項３＞
第５の設定手段は、例えば、伝文処理部４０３（図９のステップＳ１０７・Ｓ１０８、Ｓ１１２・Ｓ１１３、又はＳ１１８・Ｓ１１９→Ｓ１２１）により実現される。 (Relationship with claims)
<Claim 1>
The person monitoring apparatus is realized by the safety monitoring server 30, for example. The first person identification information is realized by the detected approaching object ID 203, for example. The first person position information is realized by, for example, the worker position 204 (the xy coordinates Fx, Fy of the worker's foot center position). The notification message is realized by, for example, an alarm notification message AN. The release message is realized by an alarm release message AC, for example. The second person identification information is realized by the ID of the presence management table 800, for example. The second person position information is realized, for example, by the presence position of the presence management table 800. The person stay information is realized by, for example, a blending flag. The presence management information is realized by information of each record of the presence management table 800, for example. The first setting means is realized by, for example, the melt recovery processing unit 405 (step S304 in FIG. 11). The second setting means is realized by, for example, the penetration determination processing unit 404 (steps S202 → S205 to S207 → S208 in FIG. 10). Here, the information (person staying information) indicating that the user is staying in the melting area is realized by, for example, a melting flag whose value is “1”. The third setting means is realized by, for example, the penetration determination processing unit 404 (steps S202 → S203, S206, S207 → S208 in FIG. 10). The fourth setting means is realized by, for example, the melt recovery processing unit 405 (steps S302, S303 → S306, S307 → S308, S309 in FIG. 11). Here, the information indicating that the user is not staying in the melting area (person staying information) is realized by, for example, a melting flag whose value is “0”.
<Claim 2>
The entry / exit management line is realized by the entry / exit management line 700, for example.
<Claim 3>
The fifth setting means is realized by, for example, the message processing unit 403 (steps S107 and S108, S112 and S113, or S118 and S119 → S121 in FIG. 9).

尚、以上説明した本発明の実施形態は、コンピュータがプログラムを実行することによって実現することができる。また、プログラムをコンピュータに供給するための手段、例えばかかるプログラムを記録したＣＤ−ＲＯＭ等のコンピュータ読み取り可能な記録媒体、又はかかるプログラムを伝送する伝送媒体も本発明の実施の形態として適用することができる。また、前記プログラムを記録したコンピュータ読み取り可能な記録媒体などのプログラムプロダクトも本発明の実施の形態として適用することができる。前記のプログラム、コンピュータ読み取り可能な記録媒体、伝送媒体及びプログラムプロダクトは、本発明の範疇に含まれる。
また、以上説明した本発明の実施形態は、何れも本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその技術思想、またはその主要な特徴から逸脱することなく、様々な形で実施することができる。 The embodiment of the present invention described above can be realized by a computer executing a program. Further, a means for supplying the program to the computer, for example, a computer-readable recording medium such as a CD-ROM recording such a program, or a transmission medium for transmitting such a program may be applied as an embodiment of the present invention. it can. A program product such as a computer-readable recording medium that records the program can also be applied as an embodiment of the present invention. The programs, computer-readable recording media, transmission media, and program products are included in the scope of the present invention.
In addition, the embodiments of the present invention described above are merely examples of implementation in carrying out the present invention, and the technical scope of the present invention should not be construed as being limited thereto. Is. That is, the present invention can be implemented in various forms without departing from the technical idea or the main features thereof.

１０ 監視カメラ
２０ 映像判定装置
３０ 安全監視サーバ
４０ ＶＡスピーカ
５０ ネットワーク
１００ 検出エリア
４０１ 滞在エリア座標テーブル記憶部
４０２ 在席管理テーブル記憶部
４０３ 伝文処理部
４０４ 溶け込み判定処理部
４０５ 溶け込み復帰処理部
４０６ エラー処理部
５００ 溶け込みエリア
６００ 滞在エリア座標テーブル
７００ 入出管理ライン
８００ 在席管理テーブル
ＡＮ アラーム通知伝文
ＡＣ アラーム解除伝文 DESCRIPTION OF SYMBOLS 10 Surveillance camera 20 Image | video determination apparatus 30 Safety monitoring server 40 VA speaker 50 Network 100 Detection area 401 Stay area coordinate table memory | storage part 402 Attendance management table memory | storage part 403 Message processing part 404 Melting | disassembly determination processing part 405 Processing unit 500 Penetration area 600 Stay area coordinate table 700 Entrance / exit management line 800 Attendance management table AN Alarm notification message AC Alarm release message

Claims (11)

人物の在、不在を検出する対象となる領域である検出エリアの動画または連続する静止画である撮像画像の差分画像に基づいて、当該検出エリアにおける人物を検出した結果として、当該人物を識別する第１の人物識別情報と、当該人物の位置を示す第１の人物位置情報とを含む通知伝文を映像判定装置から取得する通知伝文取得手段と、
前記検出エリアの撮像画像の差分画像に基づいて、当該検出エリアにおける人物を検出した結果として、当該検出エリアから人物がいなくなったことを示す解除伝文を映像判定装置から取得する解除伝文取得手段と、
前記検出エリアの中の領域であって、人物が滞在する可能性がある領域である溶け込みエリアの情報を設定する溶け込みエリア設定手段と、
前記溶け込みエリアの中にいる人物を識別する第２の人物識別情報と、当該人物の位置を示す第２の人物位置情報と、当該人物の前記溶け込みエリアにおける滞在の状態を識別するための人物滞在情報とを含む在席管理情報を記憶する在席管理情報記憶手段と、
前記通知伝文及び前記解除伝文に基づいて、前記在席管理情報を設定する在席管理情報設定手段と、を有し、
前記在席管理情報設定手段は、前記通知伝文に含まれる第１の人物識別情報を前記第２の人物識別情報として設定すると共に、前記通知伝文に含まれる第１の人物位置情報を前記第２の人物位置情報として設定する第１の設定手段と、
前記第１の設定手段による設定がなされた後に取得された前記通知伝文に含まれる第１の人物識別情報と異なる第２の人物識別情報が前記在席管理情報にあり、且つ、当該第２の人物識別情報に対応する第２の人物位置情報が前記溶け込みエリア内の位置を示すものである場合に、当該第２の人物識別情報と当該第２の人物位置情報とに対応する人物滞在情報として、前記溶け込みエリアに滞在していることを示す情報を設定する第２の設定手段と、
前記第１の設定手段による設定がなされた後に前記解除伝文が取得され、且つ、前記第２の人物位置情報が前記溶け込みエリア内の位置を示すものである在席管理情報がある場合に、当該第２の人物位置情報に対応する人物滞在情報として、前記溶け込みエリアに滞在していることを示す情報を設定する第３の設定手段と、
前記第２の設定手段又は前記第３の設定手段による設定がなされた後に取得された前記通知伝文に、前記在席管理情報に含まれる第２の人物識別情報と異なる第１の人物識別情報があり、且つ、当該第２の人物識別情報に対応する人物滞在情報が、前記溶け込みエリアに滞在していることを示す情報である場合に、当該第２の人物識別情報を当該通知伝文に含まれる第１の人物識別情報に変更すると共に、当該人物滞在情報として、前記溶け込みエリアで滞在していないことを示す情報を設定する第４の設定手段と、を有することを特徴とする人物監視装置。 The person is identified as a result of detecting a person in the detection area based on a moving image of a detection area that is a target area for detecting the presence or absence of the person or a difference image of a captured image that is a continuous still image. Notification message acquisition means for acquiring a notification message including first person identification information and first person position information indicating the position of the person from the video determination device;
As a result of detecting the person in the detection area based on the difference image of the picked-up image in the detection area, the release message acquisition means for acquiring the release message indicating that there is no person from the detection area from the video determination device When,
A blending area setting means for setting information of a blending area that is a region within the detection area and in which a person may stay,
Second person identification information for identifying a person in the merge area, second person position information indicating the position of the person, and a person stay for identifying a stay state of the person in the merge area Presence management information storage means for storing presence management information including information;
Presence management information setting means for setting the presence management information based on the notification message and the release message,
The presence management information setting means sets the first person identification information included in the notification message as the second person identification information, and sets the first person position information included in the notification message as the second person identification information. First setting means for setting as second person position information;
The presence management information includes second person identification information different from the first person identification information included in the notification message acquired after the setting by the first setting means, and the second If the second person position information corresponding to the person identification information indicates the position in the merge area, the person stay information corresponding to the second person identification information and the second person position information As a second setting means for setting information indicating that it is staying in the melting area,
When the release message is acquired after the setting by the first setting means and the second person position information is the presence management information indicating the position in the merge area, Third setting means for setting information indicating staying in the merge area as person stay information corresponding to the second person position information;
The first person identification information different from the second person identification information included in the presence management information in the notification message acquired after the setting by the second setting means or the third setting means is made. When the person stay information corresponding to the second person identification information is information indicating that the person stays in the merge area, the second person identification information is included in the notification message. 4th setting means which changes to the 1st person identification information contained, and sets the information which shows not staying in the said fusion area as the said person stay information, The person monitoring characterized by the above-mentioned apparatus. 前記溶け込みエリアの縁に設定されるラインであって、人物が通過することができる領域又は人物が通過することができない領域である入出管理ラインを設定する入出ライン領域設定手段を有し、
前記第２の設定手段と、前記第３の設定手段は、前記溶け込みエリア内の位置であって、前記入出管理ラインに基づいて設定される退出不可エリア内の位置を、前記溶け込みエリア内の位置の代わりに用いて、前記溶け込みエリアに滞在していることを示す情報を設定することを特徴とする請求項１に記載の人物監視装置。 A line set at an edge of the melting area, and has an entry / exit line area setting means for setting an entry / exit management line that is an area through which a person can pass or an area through which a person cannot pass,
The second setting means and the third setting means are positions in the penetration area, and positions in the non-removable area set based on the entry / exit management line are set in the fusion area. The person monitoring apparatus according to claim 1, wherein information indicating that the user is staying in the fusion area is set instead of a position. 前記在席管理情報設定手段は、前記第１の設定手段による設定がなされた後に取得された前記通知伝文に含まれる第１の人物識別情報と同じ第２の人物識別情報があり、且つ、当該第２の人物識別情報に対応する第２の人物位置情報が前記溶け込みエリア内の位置を示すものである場合に、当該第２の人物識別情報と当該第２の人物位置情報とに対応する人物滞在情報として、前記溶け込みエリアで滞在していないことを示す情報を設定する第５の設定手段を有することを特徴とする請求項１又は２に記載の人物監視装置。   The presence management information setting means has second person identification information that is the same as the first person identification information included in the notification message acquired after the setting by the first setting means, and When the second person position information corresponding to the second person identification information indicates a position in the merge area, the second person position information corresponds to the second person position information and the second person position information. The person monitoring apparatus according to claim 1, further comprising fifth setting means for setting information indicating that the person is not staying in the merge area as person staying information. 前記検出エリアと前記溶け込みエリアは、前記撮像画像上の領域であることを特徴とする請求項１〜３の何れか１項に記載の人物監視装置。   The person monitoring apparatus according to claim 1, wherein the detection area and the fusion area are areas on the captured image. 前記通知伝文取得手段は、前記通知伝文を、一定の周期で繰り返し取得することを特徴とする請求項１〜４の何れか１項に記載の人物監視装置。   The person monitoring apparatus according to claim 1, wherein the notification message acquisition unit acquires the notification message repeatedly at a constant cycle. 人物の在、不在を検出する対象となる領域である検出エリアの動画または連続する静止画である撮像画像の差分画像に基づいて、当該検出エリアにおける人物を検出した結果として、当該人物を識別する第１の人物識別情報と、当該人物の位置を示す第１の人物位置情報とを含む通知伝文を映像判定装置から取得する通知伝文取得工程と、
前記検出エリアの撮像画像の差分画像に基づいて、当該検出エリアにおける人物を検出した結果として、当該検出エリアから人物がいなくなったことを示す解除伝文を映像判定装置から取得する解除伝文取得工程と、
前記検出エリアの中の領域であって、人物が滞在する可能性がある領域である溶け込みエリアの情報を設定する溶け込みエリア設定工程と、
前記溶け込みエリアの中にいる人物を識別する第２の人物識別情報と、当該人物の位置を示す第２の人物位置情報と、当該人物の前記検出エリアにおける滞在の状態を識別するための人物滞在情報とを含む在席管理情報を記憶する在席管理情報記憶工程と、
前記通知伝文及び前記解除伝文に基づいて、前記在席管理情報を設定する在席管理情報設定工程と、を有し、
前記在席管理情報設定工程は、前記通知伝文に含まれる第１の人物識別情報を前記第２の人物識別情報として設定すると共に、前記通知伝文に含まれる第１の人物位置情報を前記第２の人物位置情報として設定する第１の設定工程と、
前記第１の設定工程による設定がなされた後に取得された前記通知伝文に含まれる第１の人物識別情報と異なる第２の人物識別情報が前記在席管理情報にあり、且つ、当該第２の人物識別情報に対応する第２の人物位置情報が前記溶け込みエリア内の位置を示すものである場合に、当該第２の人物識別情報と当該第２の人物位置情報とに対応する人物滞在情報として、前記溶け込みエリアに滞在していることを示す情報を設定する第２の設定工程と、
前記第１の設定工程による設定がなされた後に前記解除伝文が取得され、且つ、前記第２の人物位置情報が前記溶け込みエリア内の位置を示すものである在席管理情報がある場合に、当該第２の人物位置情報に対応する人物滞在情報として、前記溶け込みエリアに滞在していることを示す情報を設定する第３の設定工程と、
前記第２の設定工程又は前記第３の設定工程による設定がなされた後に取得された前記通知伝文に、前記在席管理情報に含まれる第２の人物識別情報と異なる第１の人物識別情報があり、且つ、当該第２の人物識別情報に対応する人物滞在情報が、前記溶け込みエリアに滞在していることを示す情報である場合に、当該第２の人物識別情報を当該通知伝文に含まれる第１の人物識別情報に変更すると共に、当該人物滞在情報として、前記溶け込みエリアで滞在していないことを示す情報を設定する第４の設定工程と、を有することを特徴とする人物監視方法。 The person is identified as a result of detecting a person in the detection area based on a moving image of a detection area that is a target area for detecting the presence or absence of the person or a difference image of a captured image that is a continuous still image. A notification message acquisition step of acquiring a notification message including first person identification information and first person position information indicating the position of the person from the video determination device;
As a result of detecting a person in the detection area based on the difference image of the captured image of the detection area, a cancellation message acquisition step of acquiring from the video determination device a cancellation message indicating that there is no person in the detection area When,
A blending area setting step for setting information of a blending area that is a region in the detection area and in which a person may stay,
Second person identification information for identifying a person in the merge area, second person position information indicating the position of the person, and a person stay for identifying a stay state of the person in the detection area An attendance management information storing step for storing attendance management information including information;
A presence management information setting step for setting the presence management information based on the notification message and the release message;
In the presence management information setting step, the first person identification information included in the notification message is set as the second person identification information, and the first person position information included in the notification message is set as the second person identification information. A first setting step of setting as second person position information;
The presence management information includes second person identification information different from the first person identification information included in the notification message acquired after the setting by the first setting step, and the second If the second person position information corresponding to the person identification information indicates the position in the merge area, the person stay information corresponding to the second person identification information and the second person position information As a second setting step for setting information indicating that the user is staying in the melting area,
When the release message is acquired after the setting by the first setting step is made, and the second person position information is the presence management information indicating the position in the merge area, As a person stay information corresponding to the second person position information, a third setting step of setting information indicating that the person stays in the fusion area;
The first person identification information different from the second person identification information included in the presence management information in the notification message acquired after the setting in the second setting step or the third setting step is performed. When the person stay information corresponding to the second person identification information is information indicating that the person stays in the merge area, the second person identification information is included in the notification message. And changing the first person identification information to be included, and a fourth setting step for setting information indicating that the person stays in the fusion area as the person stay information. Method. 前記溶け込みエリアの縁に設定されるラインであって、人物が通過することができる領域又は人物が通過することができない領域である入出管理ラインを設定する入出管理ライン設定工程を有し、
前記第２の設定工程と、前記第３の設定工程は、前記溶け込みエリア内の位置であって、前記入出管理ラインに基づいて設定される退出不可エリア内の位置を、前記溶け込みエリア内の位置の代わりに用いて、前記溶け込みエリアに滞在していることを示す情報を設定することを特徴とする請求項６に記載の人物監視方法。 An entry / exit management line setting step for setting an entry / exit management line which is a line set at an edge of the melting area and is an area where a person can pass or an area where a person cannot pass;
The second setting step and the third setting step are positions in the melting area, and positions in the non-removable area set based on the entering / exiting management line are set in the melting area. The person monitoring method according to claim 6, wherein information indicating that the user is staying in the fusion area is set instead of a position. 前記在席管理情報設定工程は、前記第１の設定工程による設定がなされた後に取得された前記通知伝文に含まれる第１の人物識別情報と同じ第２の人物識別情報があり、且つ、当該第２の人物識別情報に対応する第２の人物位置情報が前記溶け込みエリア内の位置を示すものである場合に、当該第２の人物識別情報と当該第２の人物位置情報とに対応する人物滞在情報として、前記溶け込みエリアで滞在していないことを示す情報を設定する第５の設定工程を有することを特徴とする請求項６又は７に記載の人物監視方法。   The presence management information setting step includes second person identification information that is the same as the first person identification information included in the notification message acquired after the setting by the first setting step is performed, and When the second person position information corresponding to the second person identification information indicates a position in the merge area, the second person position information corresponds to the second person position information and the second person position information. 8. The person monitoring method according to claim 6, further comprising a fifth setting step of setting information indicating that the person is not staying in the fusion area as the person staying information. 前記検出エリアと前記溶け込みエリアは、前記撮像画像上の領域であることを特徴とする請求項６〜８の何れか１項に記載の人物監視方法。   The person monitoring method according to claim 6, wherein the detection area and the fusion area are areas on the captured image. 前記通知伝文取得工程は、前記通知伝文を、一定の周期で繰り返し取得することを特徴とする請求項６〜９の何れか１項に記載の人物監視方法。   The person monitoring method according to any one of claims 6 to 9, wherein the notification message acquisition step repeatedly acquires the notification message at a constant period. 請求項１〜５の何れか１項に記載の人物監視装置の各手段としてコンピュータを機能させることを特徴とするコンピュータプログラム。   A computer program for causing a computer to function as each means of the person monitoring device according to any one of claims 1 to 5.
JP2011038816A 2011-02-24 2011-02-24 Person monitoring device, person monitoring method, and computer program Active JP5387595B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2011038816A JP5387595B2 (en) 2011-02-24 2011-02-24 Person monitoring device, person monitoring method, and computer program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2011038816A JP5387595B2 (en) 2011-02-24 2011-02-24 Person monitoring device, person monitoring method, and computer program

Publications (2)

Publication Number Publication Date
JP2012174223A JP2012174223A (en) 2012-09-10
JP5387595B2 true JP5387595B2 (en) 2014-01-15

Family

ID=46977034

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011038816A Active JP5387595B2 (en) 2011-02-24 2011-02-24 Person monitoring device, person monitoring method, and computer program

Country Status (1)

Country Link
JP (1) JP5387595B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107493459A (en) * 2017-09-15 2017-12-19 赵立峰 A kind of engineer operation plateform system

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6337377B2 (en) * 2014-08-21 2018-06-06 パナソニックＩｐマネジメント株式会社 Detection device, detection system, and program
JP6987902B2 (en) * 2015-10-30 2022-01-05 キヤノン株式会社 Controls, control methods and programs
JP7247310B2 (en) * 2015-10-30 2023-03-28 キヤノン株式会社 CONTROL DEVICE, CONTROL METHOD, PROGRAM AND SYSTEM
JP6555617B2 (en) * 2015-12-16 2019-08-07 パナソニックＩｐマネジメント株式会社 Human detection system
JP7345604B1 (en) 2022-06-17 2023-09-15 三菱電機Ｉｔソリューションズ株式会社 Presence management device, presence management method, and presence management program

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11296653A (en) * 1998-04-06 1999-10-29 Sanyo Electric Co Ltd Image processor and human body detector using the same
JP4228657B2 (en) * 2002-11-07 2009-02-25 パナソニック電工株式会社 Object detection method
JP4218368B2 (en) * 2003-02-25 2009-02-04 パナソニック電工株式会社 Human detection method and human detection device
JP4337727B2 (en) * 2004-12-14 2009-09-30 パナソニック電工株式会社 Human body detection device
JP4760655B2 (en) * 2006-10-12 2011-08-31 パナソニック電工株式会社 Human body detection device

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107493459A (en) * 2017-09-15 2017-12-19 赵立峰 A kind of engineer operation plateform system

Also Published As

Publication number Publication date
JP2012174223A (en) 2012-09-10

Similar Documents

Publication Publication Date Title
JP5387595B2 (en) Person monitoring device, person monitoring method, and computer program
JP6555547B2 (en) Video monitoring system, video processing apparatus, video processing method, and video processing program
US10740906B2 (en) Unattended object monitoring device, unattended object monitoring system equipped with same, and unattended object monitoring method
JP6075180B2 (en) Work management system and work management method
KR101723283B1 (en) Worker Behavior Based Safety Management System and Method
JP5927691B2 (en) Area monitoring system
JP6156441B2 (en) Work management system and work management method
JPWO2015133195A1 (en) Information processing apparatus, information processing method, and program
JP2017028364A (en) Monitoring system and monitoring device
CN113347387A (en) Image monitoring system and image monitoring method
JP6268497B2 (en) Security system and person image display method
JP4296212B2 (en) Condominium information management system
JP2009159448A (en) Object detecting apparatus, and object detecting method
JP2011145839A (en) Monitoring system, device, method and program
KR101207197B1 (en) Digital image monitoring apparatus through setting virtual tripzone and the method thereof
CN113615166B (en) Accident detection device and accident detection method
JP6095722B2 (en) Action management device, information terminal, action management method, information processing method, computer program
JP6648923B2 (en) Control device, control method, and program
JP2017027246A (en) Monitoring system and monitoring method
JP6987902B2 (en) Controls, control methods and programs
WO2022059223A1 (en) Video analyzing system and video analyzing method
JP5909709B1 (en) Flow line analysis system, camera device, and flow line analysis method
JP6937666B2 (en) Facility management equipment, facility management system and programs
JP7247310B2 (en) CONTROL DEVICE, CONTROL METHOD, PROGRAM AND SYSTEM
JPWO2018235279A1 (en) Information processing apparatus, control method, and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20130212

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130904

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130910

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130923

R151 Written notification of patent or utility model registration

Ref document number: 5387595

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350