JP2019012871A - Camera control program, camera control method and camera control device - Google Patents

Camera control program, camera control method and camera control device Download PDF

Info

Publication number
JP2019012871A
JP2019012871A JP2017126872A JP2017126872A JP2019012871A JP 2019012871 A JP2019012871 A JP 2019012871A JP 2017126872 A JP2017126872 A JP 2017126872A JP 2017126872 A JP2017126872 A JP 2017126872A JP 2019012871 A JP2019012871 A JP 2019012871A
Authority
JP
Japan
Prior art keywords
camera
preset information
camera control
abnormality occurrence
abnormality
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2017126872A
Other languages
Japanese (ja)
Other versions
JP6834811B2 (en
Inventor
康仁 藤田
Yasuhito Fujita
康仁 藤田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sumitomo Electric Industries Ltd
Original Assignee
Sumitomo Electric Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sumitomo Electric Industries Ltd filed Critical Sumitomo Electric Industries Ltd
Priority to JP2017126872A priority Critical patent/JP6834811B2/en
Publication of JP2019012871A publication Critical patent/JP2019012871A/en
Application granted granted Critical
Publication of JP6834811B2 publication Critical patent/JP6834811B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Alarm Systems (AREA)

Abstract

To provide a camera control program capable of capturing images before and after the occurrence of abnormalities of multiple objects at low cost.SOLUTION: A camera control program for controlling a camera for photographing a plurality of objects causes a computer to function as: a measurement value acquisition unit for acquiring, from one or more sensors each associated with one or more objects, measurement values measured by the sensors; an abnormality occurrence degree calculation unit for calculating an abnormality occurrence degree showing the degree of possibility of abnormality occurrence in each object on the basis of the measurement values acquired by the measurement value acquisition unit; a preset information selection unit for selecting preset information from a preset information table showing preset information for the camera for photographing the objects on the basis of the degree of possibility of abnormality occurrence calculated by the abnormality occurrence degree calculation unit; and a camera control unit for controlling the camera on the basis of the preset information selected by the preset information selection unit.SELECTED DRAWING: Figure 2

Description

本発明は、複数の対象を撮影するカメラを制御するカメラ制御プログラム、カメラ制御方法およびカメラ制御装置に関する。   The present invention relates to a camera control program, a camera control method, and a camera control apparatus that control a camera that captures a plurality of objects.

従来、工場等に設置された設備の異常を監視するために監視カメラが用いられている。例えば、監視カメラで撮影された設備の画像を録画することにより、当該画像を、ユーザによる異常発生原因の究明に役立てることができる。   Conventionally, a monitoring camera has been used to monitor an abnormality of equipment installed in a factory or the like. For example, by recording an image of a facility photographed by a surveillance camera, the image can be used for investigating the cause of an abnormality by a user.

例えば、特許文献1には、監視カメラで設備を撮影した画像と、予め撮影された設備の正常状態の画像との差分画像に基づいて、両画像に差があるか否かを判定し、両画像に差がある場合に異常を検知する設備監視方法が開示されている。   For example, Patent Document 1 determines whether or not there is a difference between the two images based on a difference image between an image obtained by photographing the equipment with a monitoring camera and an image of the normal state of the equipment photographed in advance. A facility monitoring method for detecting an abnormality when there is a difference between images is disclosed.

また、特許文献2には、設備を監視するためにセンサを設け、センサが所定条件を満たした場合(例えば、温度センサの検出温度が所定の設定温度を超えた場合)に、設備の異常を検知し、異常を検知した設備を撮影するようにカメラの撮影方向を制御する監視システムが開示されている。   Further, in Patent Document 2, a sensor is provided to monitor the facility, and when the sensor satisfies a predetermined condition (for example, when the temperature detected by the temperature sensor exceeds a predetermined set temperature), the abnormality of the facility is detected. There has been disclosed a monitoring system that controls the shooting direction of a camera so as to photograph a facility that has detected and detected an abnormality.

特開平11−284985号公報JP-A-11-284985 特開2005−130033号公報JP 2005-130033 A

吉澤 亜耶,橋本 洋一,“異常検知技術の概要と応用動向について”,ITJ(INTEC TECHNICAL JOURNAL) 2016.9 第17号Akiyoshizawa, Yoichi Hashimoto, “Overview of anomaly detection technology and application trends”, ITJ (INTEC TECHNICAL JOURNAL) 2016.9 No.17 切通 恵介,泉谷 知範,“機械学習を用いた工場機器の故障予測”,DEIM Forum 2017,H2-1Keisuke Kiritsu, Tomonori Izumiya, “Predicting machine equipment failure using machine learning”, DEIM Forum 2017, H2-1

しかし、特許文献1の設備監視方法では、設備の異常を検知するためには、監視カメラで設備を撮影し続けなければならない。このため、工場のように複数の設備が存在する施設において複数の設備を監視するためには、複数の監視カメラを設置しなければならず、設備を監視するためのコストが掛かる。   However, in the facility monitoring method of Patent Document 1, in order to detect an abnormality in the facility, it is necessary to continue photographing the facility with a surveillance camera. For this reason, in order to monitor a plurality of facilities in a facility having a plurality of facilities such as a factory, it is necessary to install a plurality of surveillance cameras, which incurs costs for monitoring the facilities.

また、特許文献2の監視システムでは、センサが設備の異常を検知した後に、監視カメラによる設備の撮影が開始される。異常の発生原因究明のためには、異常発生後の画像のみならず、異常発生前の画像も重要である。しかし、当該監視システムでは、異常検知前の設備の画像を撮影することが困難である。   Further, in the monitoring system of Patent Document 2, after the sensor detects an abnormality in the facility, the facility camera starts to be photographed. In order to investigate the cause of the occurrence of an abnormality, not only the image after the occurrence of the abnormality but also the image before the occurrence of the abnormality is important. However, in the monitoring system, it is difficult to take an image of the facility before detecting an abnormality.

本発明は、このような事情に鑑みてなされたものであり、低コストで、複数の対象の異常発生前後の画像を撮影することのできるカメラ制御プログラム、カメラ制御方法およびカメラ制御装置を提供することを目的とする。   The present invention has been made in view of such circumstances, and provides a camera control program, a camera control method, and a camera control device that can capture images of a plurality of objects before and after the occurrence of an abnormality at low cost. For the purpose.

(1)上記目的を達成するために、本発明の一実施態様に係るカメラ制御プログラムは、複数の対象を撮影するカメラを制御するためのカメラ制御プログラムであって、コンピュータを、各々が1以上の対象に関連付けられた1以上のセンサから、当該センサで計測された計測値を取得する計測値取得部と、前記計測値取得部が取得した前記計測値に基づいて、各対象における異常発生の可能性の度合いを示す異常発生度を算出する異常発生度算出部と、各対象を撮影するための前記カメラのプリセット情報を示したプリセット情報テーブルの中から、前記異常発生度算出部が算出した前記異常発生度に基づいて、前記プリセット情報を選択するプリセット情報選択部と、前記プリセット情報選択部が選択した前記プリセット情報に基づいて、前記カメラを制御するカメラ制御部として機能させる。   (1) In order to achieve the above object, a camera control program according to an embodiment of the present invention is a camera control program for controlling a camera that captures a plurality of objects, each including one or more computers. A measurement value acquisition unit that acquires measurement values measured by the sensor from one or more sensors associated with the target, and an abnormality occurrence in each target based on the measurement values acquired by the measurement value acquisition unit The abnormality occurrence degree calculation unit calculates an abnormality occurrence degree calculation unit that calculates an abnormality occurrence degree indicating a degree of possibility, and a preset information table that indicates preset information of the camera for photographing each target. Based on the preset information selection unit that selects the preset information based on the degree of abnormality occurrence, and the preset information selected by the preset information selection unit To function as a camera control section for controlling the camera.

(9)本発明の他の実施態様に係るカメラ制御装置は、複数の対象を撮影するカメラを制御するためのカメラ制御装置であって、各々が1以上の対象に関連付けられた1以上のセンサから、当該センサで計測された計測値を取得する計測値取得部と、前記計測値取得部が取得した前記計測値に基づいて、各対象における異常発生の可能性の度合いを示す異常発生度を算出する異常発生度算出部と、各対象を撮影するための前記カメラのプリセット情報を示したプリセット情報テーブルの中から、前記異常発生度算出部が算出した前記異常発生度に基づいて、前記プリセット情報を選択するプリセット情報選択部と、前記プリセット情報選択部が選択した前記プリセット情報に基づいて、前記カメラを制御するカメラ制御部とを備える。   (9) A camera control device according to another embodiment of the present invention is a camera control device for controlling a camera that captures a plurality of objects, each of which is associated with one or more objects. From the measurement value acquisition unit that acquires the measurement value measured by the sensor, and the abnormality occurrence degree that indicates the degree of possibility of abnormality occurrence in each target based on the measurement value acquired by the measurement value acquisition unit Based on the abnormality occurrence degree calculated by the abnormality occurrence degree calculation unit from the preset information table showing the abnormality occurrence degree calculation part to be calculated and the preset information of the camera for photographing each target, the preset A preset information selection unit that selects information; and a camera control unit that controls the camera based on the preset information selected by the preset information selection unit.

(10)本発明の他の実施態様に係るカメラ制御方法は、複数の対象を撮影するカメラを制御するためのカメラ制御方法であって、各々が1以上の対象に関連付けられた1以上のセンサから、当該センサで計測された計測値を取得するステップと、取得された前記計測値に基づいて、各対象における異常発生の可能性の度合いを示す異常発生度を算出するステップと、各対象を撮影するための前記カメラのプリセット情報を示したプリセット情報テーブルの中から、算出された前記異常発生度に基づいて、前記プリセット情報を選択するステップと、選択された前記プリセット情報に基づいて、前記カメラを制御するステップとを含む。   (10) A camera control method according to another embodiment of the present invention is a camera control method for controlling a camera that captures a plurality of objects, each of which is associated with one or more objects. A step of acquiring a measurement value measured by the sensor, a step of calculating an abnormality occurrence level indicating a degree of possibility of occurrence of an abnormality in each target based on the acquired measurement value, and From the preset information table indicating preset information of the camera for photographing, the step of selecting the preset information based on the calculated degree of abnormality occurrence, and based on the selected preset information, Controlling the camera.

なお、カメラ制御プログラムを、CD−ROM(Compact Disc-Read Only Memory)等のコンピュータ読取可能な非一時的な記録媒体やインターネット等の通信ネットワークを介して流通させることができる。また、本発明は、カメラ制御装置の一部又は全部を実現する半導体集積回路として実現したり、カメラ制御装置を含む設備監視システムとして実現したりすることもできる。   The camera control program can be distributed via a computer-readable non-transitory recording medium such as a CD-ROM (Compact Disc-Read Only Memory) or a communication network such as the Internet. The present invention can also be realized as a semiconductor integrated circuit that realizes part or all of the camera control device, or as an equipment monitoring system including the camera control device.

本発明によると、低コストで、複数の対象の異常発生前後の画像を撮影することができる。   According to the present invention, it is possible to take images before and after the occurrence of an abnormality of a plurality of objects at low cost.

本発明の実施の形態1に係る設備監視システムの全体構成を示す図である。It is a figure which shows the whole structure of the equipment monitoring system which concerns on Embodiment 1 of this invention. 本発明の実施の形態1に係る設備監視装置の構成を示すブロック図である。It is a block diagram which shows the structure of the equipment monitoring apparatus which concerns on Embodiment 1 of this invention. 記憶装置に記憶されているプリセット情報テーブルの一例を示す図である。It is a figure which shows an example of the preset information table memorize | stored in the memory | storage device. 設備監視装置が実行する処理の手順の一例を示すフローチャートである。It is a flowchart which shows an example of the procedure of the process which an equipment monitoring apparatus performs. 撮影対象設備の撮影条件決定処理(図4のS5)の詳細を示すフローチャートである。It is a flowchart which shows the detail of the imaging condition determination process (S5 of FIG. 4) of imaging object equipment. 撮影対象設備に割り当てられる撮影時間の一例を示す図である。It is a figure which shows an example of the imaging time allocated to imaging | photography object installation. 撮影対象設備に割り当てられる撮影時間の一例を示す図である。It is a figure which shows an example of the imaging time allocated to imaging | photography object installation. 記憶装置に記憶されているプリセット情報テーブルの一例を示す図である。It is a figure which shows an example of the preset information table memorize | stored in the memory | storage device. 撮影対象設備の撮影条件決定処理(図4のS5)の詳細を示すフローチャートである。It is a flowchart which shows the detail of the imaging condition determination process (S5 of FIG. 4) of imaging object equipment. 撮影対象設備に割り当てられる撮影時間の一例を示す図である。It is a figure which shows an example of the imaging time allocated to imaging | photography object installation. 撮影対象設備に割り当てられる撮影時間の一例を示す図である。It is a figure which shows an example of the imaging time allocated to imaging | photography object installation. 撮影対象設備の撮影条件決定処理(図4のS5)の詳細を示すフローチャートである。It is a flowchart which shows the detail of the imaging condition determination process (S5 of FIG. 4) of imaging object equipment. 撮影対象設備に割り当てられる撮影回数の一例を示す図である。It is a figure which shows an example of the frequency | count of imaging | photography allocated to imaging | photography object installation. カメラによる撮影対象設備の撮像時間の一例を示す図である。It is a figure which shows an example of the imaging time of the imaging target equipment by a camera. 撮影対象設備に割り当てられる撮影回数の一例を示す図である。It is a figure which shows an example of the frequency | count of imaging | photography allocated to imaging | photography object installation. カメラによる撮影対象設備の撮像時間の一例を示す図である。It is a figure which shows an example of the imaging time of the imaging target equipment by a camera. 撮影対象設備の撮影条件決定処理(図4のS5)の詳細を示すフローチャートである。It is a flowchart which shows the detail of the imaging condition determination process (S5 of FIG. 4) of imaging object equipment. 撮影対象設備に割り当てられる撮影時間およびズーム倍率の一例を示す図である。It is a figure which shows an example of the imaging time allocated to imaging | photography object equipment, and zoom magnification. 撮影対象設備に割り当てられる撮影時間およびズーム倍率の一例を示す図である。It is a figure which shows an example of the imaging time allocated to imaging | photography object equipment, and zoom magnification. 撮影対象設備の撮影条件決定処理(図4のS5)の詳細を示すフローチャートである。It is a flowchart which shows the detail of the imaging condition determination process (S5 of FIG. 4) of imaging object equipment. 撮影対象設備に割り当てられる撮影時間およびカメラの一例を示す図である。It is a figure which shows an example of the imaging time allocated to imaging | photography object equipment, and a camera. カメラによる、撮影対象設備の撮影時間の一例を示す図である。It is a figure which shows an example of the imaging time of the imaging target equipment by a camera. カメラによる、撮影対象設備の撮影時間の他の一例を示す図である。It is a figure which shows another example of the imaging | photography time of the imaging target equipment by a camera.

[本願発明の実施形態の概要]
最初に本発明の実施形態の概要を列記して説明する。
(1)本発明の一実施形態に係るカメラ制御プログラムは、複数の対象を撮影するカメラを制御するためのカメラ制御プログラムであって、コンピュータを、各々が1以上の対象に関連付けられた1以上のセンサから、当該センサで計測された計測値を取得する計測値取得部と、前記計測値取得部が取得した前記計測値に基づいて、各対象における異常発生の可能性の度合いを示す異常発生度を算出する異常発生度算出部と、各対象を撮影するための前記カメラのプリセット情報を示したプリセット情報テーブルの中から、前記異常発生度算出部が算出した前記異常発生度に基づいて、前記プリセット情報を選択するプリセット情報選択部と、前記プリセット情報選択部が選択した前記プリセット情報に基づいて、前記カメラを制御するカメラ制御部として機能させる。
[Outline of Embodiment of the Present Invention]
First, the outline of the embodiment of the present invention will be listed and described.
(1) A camera control program according to an embodiment of the present invention is a camera control program for controlling a camera that captures a plurality of objects, and each computer is associated with one or more objects. A measurement value acquisition unit that acquires a measurement value measured by the sensor, and an abnormality occurrence that indicates a degree of possibility of occurrence of an abnormality in each target based on the measurement value acquired by the measurement value acquisition unit Based on the abnormality occurrence degree calculated by the abnormality occurrence degree calculation unit from the preset information table indicating the preset information of the camera for photographing each target and the abnormality occurrence degree calculation unit for calculating the degree, A preset information selection unit that selects the preset information, and a camera that controls the camera based on the preset information selected by the preset information selection unit. To function as a control unit.

この構成によると、対象の異常発生度に基づいて、対象を撮影するためのプリセット情報が選択され、選択されたプリセット情報に基づいて、カメラが制御される。異常の発生前には、異常発生度が高くなる。このため、異常発生度がある程度高くなった時点から対象の撮影を開始することで、異常の発生前後の画像を撮影することができる。また、異常発生度が低い対象は撮影する必要がないため、1台のカメラで複数の対象を監視することができる。これにより、低コストで複数の対象を撮影することもできる。   According to this configuration, preset information for photographing the target is selected based on the degree of abnormality of the target, and the camera is controlled based on the selected preset information. Before the occurrence of an abnormality, the degree of abnormality occurrence becomes high. For this reason, it is possible to capture images before and after the occurrence of an abnormality by starting the imaging of the object from the point in time when the degree of abnormality has increased to some extent. In addition, since it is not necessary to photograph an object with a low degree of abnormality occurrence, a plurality of objects can be monitored with one camera. Thereby, a plurality of objects can be photographed at low cost.

(2)好ましくは、前記カメラ制御部は、前記異常発生度が高い対象ほど長時間および高頻度の少なくとも一方の条件で撮影するように、前記カメラの撮影タイミングを制御する。   (2) Preferably, the said camera control part controls the imaging | photography timing of the said camera so that it may image | photograph on the condition of at least one of long time and high frequency, so that the said abnormality occurrence degree is high.

この構成によると、異常発生度が高い対象ほど、単位時間当たりの撮影時間を長くしたり、単位時間当たりの撮影回数を多くしたりできる。このため、異常の発生の可能性が高まった対象を、長時間もしくは高頻度、またはその両方の撮影条件の下で監視することができる。また、複数の対象が監視対象とされる場合に、異常発生度に応じて、撮影時間または撮影回数を変えることができる。   According to this configuration, the higher the degree of abnormality occurrence, the longer the shooting time per unit time or the more the number of shootings per unit time. For this reason, it is possible to monitor an object whose possibility of occurrence of an abnormality is increased under imaging conditions of a long time, high frequency, or both. Further, when a plurality of targets are monitored, the shooting time or the number of shootings can be changed according to the degree of abnormality.

(3)また、前記カメラ制御部は、前記異常発生度が高い対象ほど高精細で撮影するように、前記カメラを制御してもよい。   (3) Moreover, the camera control unit may control the camera so that an object having a higher degree of abnormality occurrence is photographed with higher definition.

この構成によると、異常発生度が高い対象ほど、高精細で撮影される。このため、異常の発生の可能性が高まった対象を、詳細に監視することができる。   According to this configuration, a subject with a higher degree of abnormality is photographed with higher definition. For this reason, it is possible to monitor in detail the object whose possibility of occurrence of abnormality has increased.

(4)また、前記プリセット情報選択部は、前記異常発生度が第1閾値以上の対象を撮影するための前記プリセット情報を選択してもよい。   (4) The preset information selection unit may select the preset information for photographing an object having the abnormality occurrence level equal to or higher than a first threshold.

この構成によると、異常発生度が第1閾値未満のプリセット情報は選択されない。よって、カメラは、異常発生度が第1閾値未満の対象を撮影しない。これにより、異常の発生の可能性が低い対象は監視対象から外され、異常の発生の可能性が高い対象の監視に、より多くの時間を割くことができる。   According to this configuration, preset information having an abnormality occurrence degree less than the first threshold is not selected. Therefore, the camera does not capture an object whose abnormality occurrence degree is less than the first threshold. As a result, a target with a low possibility of occurrence of an abnormality is excluded from monitoring targets, and more time can be spent on monitoring a target with a high possibility of occurrence of abnormality.

(5)また、前記カメラ制御部は、前記異常発生度が前記第1閾値以上の対象の数が所定数を超える場合には、前記異常発生度が前記第1閾値以上の対象を、前記カメラおよび他のカメラで撮影するように、前記カメラおよび前記他のカメラを制御してもよい。   (5) In addition, when the number of objects having the abnormality occurrence level equal to or greater than the first threshold exceeds a predetermined number, the camera control unit determines that the abnormality occurrence degree is equal to or greater than the first threshold value. The camera and the other camera may be controlled so as to be photographed by the other camera.

この構成によると、異常発生度が第1閾値以上の対象が所定数よりも多く存在する場合には、これらの対象を複数台のカメラで撮影することができる。これにより、異常発生度が第1閾値以上の対象の数が多く、1台のカメラでこれらすべての対象を撮影するのが困難な場合に、複数台のカメラで分担してこれらの対象を撮影することができる。   According to this configuration, when there are more than a predetermined number of objects having an abnormality occurrence level equal to or greater than the first threshold, these objects can be photographed by a plurality of cameras. As a result, when there are many subjects whose abnormality occurrence level is the first threshold value or more and it is difficult to photograph all of these subjects with one camera, these subjects are shared and photographed by a plurality of cameras. can do.

(6)また、前記カメラ制御部は、前記異常発生度が第2閾値以上の対象を、前記カメラおよび他のカメラで撮影するように、前記カメラおよび前記他のカメラを制御してもよい。   (6) In addition, the camera control unit may control the camera and the other camera so that an object having the abnormality occurrence level equal to or higher than a second threshold is photographed by the camera and the other camera.

この構成によると、異常発生度が第2閾値以上の対象を複数台のカメラで撮影することができる。これにより、多方向から対象を撮影することができ、異常が発生した場合に、詳細に異常発生原因を究明することができる。   According to this configuration, it is possible to photograph an object having an abnormality occurrence level equal to or higher than the second threshold with a plurality of cameras. Thereby, the object can be photographed from multiple directions, and when an abnormality occurs, the cause of the abnormality can be investigated in detail.

(7)また、前記カメラ制御部は、各対象に事前に設定された重要度が高い対象ほど長時間および高頻度の少なくとも一方の条件で撮影するように、前記カメラの撮影タイミングを制御してもよい。   (7) In addition, the camera control unit controls the shooting timing of the camera so that an object with higher importance set in advance for each object is photographed under at least one of a long time period and a high frequency condition. Also good.

この構成によると、重要度が高い対象ほど、単位時間当たりの撮影時間を長くしたり、単位時間当たりの撮影回数を多くしたりできる。このため、重要性の高い対象に事前に高い重要度を設定しておくことにより、該対象を、長時間もしくは高頻度、またはその両方の撮影条件の下で監視することができる。また、複数の対象が監視対象とされる場合に、重要度に応じて、撮影時間または撮影回数を変えることができる。   According to this configuration, the higher the degree of importance, the longer the shooting time per unit time or the more the number of shootings per unit time. For this reason, by setting a high importance level in advance for a highly important object, it is possible to monitor the object for a long time, a high frequency, or both. Further, when a plurality of targets are monitored, the shooting time or the number of shootings can be changed according to the importance.

(8)また、前記カメラ制御部は、各対象に事前に設定された重要度が高い対象ほど高精細で撮影するように、前記カメラを制御してもよい。   (8) In addition, the camera control unit may control the camera so that an object having a higher importance set in advance for each object is photographed with higher definition.

この構成によると、重要度が高い対象ほど、高精細で撮影される。このため、重要性の高い対象に事前に高い重要度を設定しておくことにより、該対象を、詳細に監視することができる。   According to this configuration, a subject with higher importance is photographed with higher definition. For this reason, by setting a high importance level in advance for a highly important target, the target can be monitored in detail.

(9)本発明の他の実施形態に係るカメラ制御装置は、複数の対象を撮影するカメラを制御するためのカメラ制御装置であって、各々が1以上の対象に関連付けられた1以上のセンサから、当該センサで計測された計測値を取得する計測値取得部と、前記計測値取得部が取得した前記計測値に基づいて、各対象における異常発生の可能性の度合いを示す異常発生度を算出する異常発生度算出部と、各対象を撮影するための前記カメラのプリセット情報を示したプリセット情報テーブルの中から、前記異常発生度算出部が算出した前記異常発生度に基づいて、前記プリセット情報を選択するプリセット情報選択部と、前記プリセット情報選択部が選択した前記プリセット情報に基づいて、前記カメラを制御するカメラ制御部とを備える。   (9) A camera control device according to another embodiment of the present invention is a camera control device for controlling a camera that captures a plurality of objects, each of which is associated with one or more objects. From the measurement value acquisition unit that acquires the measurement value measured by the sensor, and the abnormality occurrence degree that indicates the degree of possibility of abnormality occurrence in each target based on the measurement value acquired by the measurement value acquisition unit Based on the abnormality occurrence degree calculated by the abnormality occurrence degree calculation unit from the preset information table showing the abnormality occurrence degree calculation part to be calculated and the preset information of the camera for photographing each target, the preset A preset information selection unit that selects information; and a camera control unit that controls the camera based on the preset information selected by the preset information selection unit.

このカメラ制御装置は、上述のカメラ制御プログラムによってコンピュータが機能する処理部を構成として備える。このため、上述のカメラ制御プログラムと同様の作用および効果を奏することができる。   This camera control apparatus includes a processing unit that functions as a computer according to the above-described camera control program. For this reason, the same operation and effect as the above-mentioned camera control program can be produced.

(10)本発明の他の実施形態に係るカメラ制御方法は、複数の対象を撮影するカメラを制御するためのカメラ制御方法であって、各々が1以上の対象に関連付けられた1以上のセンサから、当該センサで計測された計測値を取得するステップと、取得された前記計測値に基づいて、各対象における異常発生の可能性の度合いを示す異常発生度を算出するステップと、各対象を撮影するための前記カメラのプリセット情報を示したプリセット情報テーブルの中から、算出された前記異常発生度に基づいて、前記プリセット情報を選択するステップと、選択された前記プリセット情報に基づいて、前記カメラを制御するステップとを含む。   (10) A camera control method according to another embodiment of the present invention is a camera control method for controlling a camera that captures a plurality of objects, each of which is associated with one or more objects. A step of acquiring a measurement value measured by the sensor, a step of calculating an abnormality occurrence level indicating a degree of possibility of occurrence of an abnormality in each target based on the acquired measurement value, and From the preset information table indicating preset information of the camera for photographing, the step of selecting the preset information based on the calculated degree of abnormality occurrence, and based on the selected preset information, Controlling the camera.

このカメラ制御方法は、上述のカメラ制御プログラムによってコンピュータが機能する処理部に対応するステップを含む。このため、上述のカメラ制御プログラムと同様の作用および効果を奏することができる。   This camera control method includes steps corresponding to a processing unit in which a computer functions according to the above-described camera control program. For this reason, the same operation and effect as the above-mentioned camera control program can be produced.

[本願発明の実施形態の詳細]
以下、本発明の実施の形態について、図面を用いて詳細に説明する。なお、以下で説明する実施の形態は、いずれも本発明の好ましい一具体例を示すものである。以下の実施の形態で示される数値、形状、構成要素、構成要素の配置位置および接続形態、ステップ、ステップの順序などは、一例であり、本発明を限定する主旨ではない。本発明は、特許請求の範囲によって特定される。よって、以下の実施の形態における構成要素のうち、本発明の最上位概念を示す独立請求項に記載されていない構成要素については、本発明の課題を達成するのに必ずしも必要ではないが、より好ましい形態を構成するものとして説明される。
[Details of the embodiment of the present invention]
Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings. Each of the embodiments described below shows a preferred specific example of the present invention. Numerical values, shapes, components, arrangement positions and connection forms of components, steps, order of steps, and the like shown in the following embodiments are merely examples, and are not intended to limit the present invention. The invention is specified by the claims. Therefore, among the constituent elements in the following embodiments, constituent elements that are not described in the independent claims indicating the highest concept of the present invention are not necessarily required to achieve the object of the present invention. It will be described as constituting a preferred form.

また、同一の構成要素には同一の符号を付す。それらの機能および名称も同様であるため、それらの説明は適宜省略する。   Moreover, the same code | symbol is attached | subjected to the same component. Since their functions and names are also the same, their description will be omitted as appropriate.

(実施の形態1)
[設備監視システムの全体構成]
図1は、本発明の実施の形態1に係る設備監視システムの全体構成を示す図である。
(Embodiment 1)
[Overall configuration of equipment monitoring system]
FIG. 1 is a diagram showing an overall configuration of an equipment monitoring system according to Embodiment 1 of the present invention.

設備監視システム1は、工場30に設置された設備31の画像を撮影することにより、設備31を監視するためのシステムである。例えば、設備監視システム1は、設備31で故障や火災等の異常が発生した場合に、異常発生時点の前後の時間における設備31の画像を撮影して、記憶装置に記憶するためのシステムである。ただし、監視対象は工場30内の設備31には限定されない。   The equipment monitoring system 1 is a system for monitoring the equipment 31 by taking an image of the equipment 31 installed in the factory 30. For example, the equipment monitoring system 1 is a system for taking an image of the equipment 31 at a time before and after the abnormality occurs and storing it in a storage device when an abnormality such as a failure or a fire occurs in the equipment 31. . However, the monitoring target is not limited to the equipment 31 in the factory 30.

設備監視システム1は、工場30の天井等に設置されたカメラ20Aおよび20Bと、カメラ20Aおよび20Bとネットワーク35を介して接続された設備監視装置10とを備える。なお、カメラ20Aおよび20B(これらを区別しない場合はカメラ20という)と設備監視装置10とは有線により接続されていてもよいし、無線により接続されていてもよい。つまり、ネットワーク35は、例えば、有線LAN(Local Area Network)または無線LAN等により構成することができる。   The equipment monitoring system 1 includes cameras 20A and 20B installed on the ceiling of a factory 30 and the equipment monitoring apparatus 10 connected to the cameras 20A and 20B via a network 35. Note that the cameras 20A and 20B (referred to as the camera 20 if they are not distinguished from each other) and the equipment monitoring apparatus 10 may be connected by wire or may be connected wirelessly. That is, the network 35 can be configured by, for example, a wired LAN (Local Area Network) or a wireless LAN.

カメラ20は、パン機能、チルト機能およびズーム機能を備えるPTZ(Pan-Tilt-Zoom)カメラである。   The camera 20 is a PTZ (Pan-Tilt-Zoom) camera having a pan function, a tilt function, and a zoom function.

ただし、カメラ20として、ズーム機能を備えないPT(Pan-Tilt)カメラを用いることもできる。   However, a PT (Pan-Tilt) camera that does not have a zoom function can also be used as the camera 20.

また、カメラ20として、工場の天井等に敷設されたレールを走行することができる移動式カメラや、ドローン等に搭載されたカメラを用いることもできる。   Further, as the camera 20, a mobile camera that can run on a rail laid on the ceiling or the like of a factory, or a camera mounted on a drone or the like can be used.

つまり、撮影方向を変化させることができるカメラであれば、それ以外のカメラであっても、カメラ20として用いることができる。   That is, any camera other than the camera can be used as the camera 20 as long as the camera can change the shooting direction.

図1では、工場30内の設備31およびカメラ20の配置を模式的に示している。   FIG. 1 schematically shows the arrangement of the equipment 31 and the camera 20 in the factory 30.

カメラ20は、工場30内の設備31を監視するために、例えば、工場30の天井に設置され、設備31を上方から撮影することができる。ただし、カメラ20の設置位置は、工場30の天井に限定されるものではなく、工場30の壁面等のように設備31を監視可能な位置であれば他の位置に設置されていてもよい。   In order to monitor the equipment 31 in the factory 30, the camera 20 is installed, for example, on the ceiling of the factory 30 and can photograph the equipment 31 from above. However, the installation position of the camera 20 is not limited to the ceiling of the factory 30, and may be installed at other positions as long as the facility 31 can be monitored such as a wall surface of the factory 30.

カメラ20は、ズームレンズの向きを第1方向(例えば、図1の左右方向)に動かすパン機能、ズームレンズの向きを第1方向に直交する第2方向(例えば、図1の上下方向)に動かすチルト機能、およびズームレンズにより撮影範囲像を拡大または縮小するズーム機能の3つの機能を備えている。なお、パン角は、例えば、真北を0°として、時計回りの方向を正の角度と定義し、反時計回りの方向を負の角度と定義することができる。また、チルト角は、水平方向を0°として、上向きを正の角度と定義し、下向きを負の角度と定義することができる。   The camera 20 has a pan function for moving the zoom lens in a first direction (for example, the horizontal direction in FIG. 1), and a zoom lens in a second direction (for example, the vertical direction in FIG. 1) orthogonal to the first direction. Three functions are provided: a tilt function for moving, and a zoom function for enlarging or reducing a shooting range image using a zoom lens. For example, the pan angle can be defined as a positive angle in a clockwise direction with true north being 0 °, and a negative angle in a counterclockwise direction. Further, with respect to the tilt angle, the horizontal direction can be defined as 0 °, the upward direction being defined as a positive angle, and the downward direction being defined as a negative angle.

カメラ20Aは、ズームレンズを、パン、チルトおよびズームさせることにより工場30内に存在する設備31を撮影する。同様に、カメラ20Bは、ズームレンズを、パン、チルトおよびズームさせることにより工場30内に存在する設備31を撮影する。   The camera 20A takes an image of the equipment 31 existing in the factory 30 by panning, tilting, and zooming the zoom lens. Similarly, the camera 20B takes an image of the equipment 31 existing in the factory 30 by panning, tilting, and zooming the zoom lens.

通常は、カメラ20Aを利用して工場30内の設備31を撮影するものとする。ただし、工場30内に異常発生の可能性の高い設備31または異常が発生した設備31が所定数よりも多く存在する場合には、カメラ20Bが工場30内に存在する設備31を撮影することもできる。これにより、カメラ20Aおよび20Bが協同して、工場30内に存在する設備31を撮影することができる。   Normally, the equipment 31 in the factory 30 is photographed using the camera 20A. However, when there are more than a predetermined number of facilities 31 in the factory 30 that are likely to cause an abnormality or where an abnormality has occurred, the camera 20B may photograph the facilities 31 that exist in the factory 30. it can. Thereby, the cameras 20 </ b> A and 20 </ b> B can cooperate to photograph the facility 31 existing in the factory 30.

工場30内の異常検知の対象とされる設備31には、センサ40が設けられており、設備31とセンサ40とは関連付けられている。ただし、1つのセンサ40が複数の設備31に対応付けられていてもよい。また、1つの設備31に複数のセンサ40が対応付けられていてもよい。   A sensor 40 is provided in the facility 31 that is a target of abnormality detection in the factory 30, and the facility 31 and the sensor 40 are associated with each other. However, one sensor 40 may be associated with a plurality of facilities 31. A plurality of sensors 40 may be associated with one facility 31.

センサ40は、例えば、設備31に関連する物理量を計測することのできる温度センサ、振動センサまたは圧力センサや、設備31の稼働時間を計測するためのタイマーなどを含む。ただし、センサ40の種類はこれらに限定されるものではなく、設備31の異常を検知するために有効な物理量を計測可能なセンサであれば、それ以外のセンサであってもよい。   The sensor 40 includes, for example, a temperature sensor, a vibration sensor, or a pressure sensor that can measure a physical quantity related to the facility 31, a timer for measuring the operating time of the facility 31, and the like. However, the type of the sensor 40 is not limited to these, and any other sensor may be used as long as it is a sensor capable of measuring a physical quantity effective for detecting an abnormality in the facility 31.

また、各センサ40は、少なくともいずれか1つの設備31に関連付けられる。例えば、設備31の振動を計測するための振動センサが、設備31ごとに設置されていてもよい。また、設備31の稼働時間を計測するためのタイマーは、複数の設備31につき1つ設置されていてもよい。   Each sensor 40 is associated with at least one of the facilities 31. For example, a vibration sensor for measuring the vibration of the equipment 31 may be installed for each equipment 31. One timer for measuring the operation time of the facility 31 may be installed for each of the plurality of facilities 31.

ただし、複数の設備31から構成される生産ラインを、1つの設備31と見なして監視対象とすることもできる。このような場合には、各センサ40が生産ラインに関連付けられていてもよい。   However, a production line composed of a plurality of facilities 31 can be regarded as one facility 31 and can be monitored. In such a case, each sensor 40 may be associated with the production line.

設備監視装置10は、各センサ40で計測された計測値に基づいて、各設備31における異常発生の可能性の度合いを示す異常発生度を算出し、異常発生度が高い設備31を撮像するように、カメラ20Aおよび20Bを制御する。   The facility monitoring apparatus 10 calculates an abnormality occurrence level indicating the degree of possibility of occurrence of an abnormality in each facility 31 based on the measurement values measured by the sensors 40, and images the facility 31 having a high abnormality occurrence level. Then, the cameras 20A and 20B are controlled.

[設備監視装置の構成]
図2は、本発明の実施の形態1に係る設備監視装置10の構成を示すブロック図である。
[Configuration of equipment monitoring equipment]
FIG. 2 is a block diagram showing a configuration of the equipment monitoring apparatus 10 according to Embodiment 1 of the present invention.

設備監視装置10は、CPU(Central Processing Unit)、ROM(Read Only Memory)およびRAM(Random Access Memory)等を備える一般的なコンピュータにより構成され、カメラ20を制御するカメラ制御装置として機能する。   The facility monitoring device 10 is configured by a general computer including a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), and the like, and functions as a camera control device that controls the camera 20.

設備監視装置10は、通信I/F(Interface)部11と、記憶装置12と、画像取得部13と、計測値取得部14と、異常発生度算出部15と、プリセット情報選択部16と、カメラ制御部17とを備える。   The facility monitoring apparatus 10 includes a communication I / F (Interface) unit 11, a storage device 12, an image acquisition unit 13, a measurement value acquisition unit 14, an abnormality occurrence degree calculation unit 15, a preset information selection unit 16, And a camera control unit 17.

このうち、処理部13〜17は、記憶装置12等に記憶されたコンピュータプログラムをCPU上で実行することにより実現される機能的な処理部である。   Among these, the processing units 13 to 17 are functional processing units realized by executing a computer program stored in the storage device 12 or the like on the CPU.

通信I/F部11は、ネットワーク35を介して、設備監視装置10とカメラ20およびセンサ40とを接続するための通信インタフェースであり、例えば、有線LANモジュールや無線LANモジュールなどを含む。   The communication I / F unit 11 is a communication interface for connecting the equipment monitoring apparatus 10 to the camera 20 and the sensor 40 via the network 35, and includes, for example, a wired LAN module and a wireless LAN module.

記憶装置12は、カメラ20が撮影した画像、カメラ20の撮影箇所に係るプリセット情報などの各種情報を記憶するための記憶装置であり、例えば、HDD(Hard Disk Drive)やRAMなどから構成される。   The storage device 12 is a storage device for storing various types of information such as images taken by the camera 20 and preset information related to the shooting location of the camera 20, and includes, for example, an HDD (Hard Disk Drive), a RAM, and the like. .

画像取得部13は、通信I/F部11を介して、カメラ20から、カメラ20が撮影した画像を取得する。   The image acquisition unit 13 acquires an image captured by the camera 20 from the camera 20 via the communication I / F unit 11.

計測値取得部14は、通信I/F部11を介して、センサ40から、センサ40が計測した計測値を取得する。なお、計測値取得部14は、センサ40を接続したPLC(Programmable Logic Controller)および通信I/F部11を介して、センサ40が計測した計測値を取得してもよい。また、計測値取得部14は、PLCから各設備31の生産条件等の各種条件を取得してもよい。   The measurement value acquisition unit 14 acquires the measurement value measured by the sensor 40 from the sensor 40 via the communication I / F unit 11. The measurement value acquisition unit 14 may acquire a measurement value measured by the sensor 40 via a PLC (Programmable Logic Controller) connected to the sensor 40 and the communication I / F unit 11. Moreover, the measured value acquisition part 14 may acquire various conditions, such as the production conditions of each equipment 31, from PLC.

異常発生度算出部15は、計測値取得部14が取得した計測値等に基づいて、各設備31における異常発生の可能性の度合いを示す異常発生度を算出する。例えば、異常発生度算出部15は、将来の所定時間内に設備31が故障する確率を異常発生度として算出してもよい。また、異常発生度算出部15は、製品を製造する設備31については、製品の不良発生確率を異常発生度としてもよい。以下では、異常発生度として、異常発生確率(設備31が故障する確率または製品の不良発生確率)を用いて説明を行う。ただし、異常発生度は異常発生確率に限定されるものではなく、設備31における異常発生の可能性の度合いを示すその他の値を、異常発生度として用いることができる。例えば、異常発生確率を大きさに応じてレベル分けした異常発生レベルを、異常発生度として用いることもできる。
なお、異常発生度算出部15による異常発生確率の算出方法については、後述する。
The abnormality occurrence degree calculation unit 15 calculates an abnormality occurrence degree indicating the degree of possibility of abnormality occurrence in each facility 31 based on the measurement value acquired by the measurement value acquisition unit 14. For example, the abnormality occurrence degree calculation unit 15 may calculate the probability that the equipment 31 will fail within a predetermined time in the future as the abnormality occurrence degree. Further, the abnormality occurrence degree calculation unit 15 may use the defect occurrence probability of the product as the abnormality occurrence degree for the equipment 31 that manufactures the product. Below, it demonstrates using abnormality occurrence probability (probability that the installation 31 fails or product defect occurrence probability) as the abnormality occurrence degree. However, the abnormality occurrence degree is not limited to the abnormality occurrence probability, and other values indicating the degree of possibility of abnormality occurrence in the facility 31 can be used as the abnormality occurrence degree. For example, an abnormality occurrence level obtained by dividing the abnormality occurrence probability according to the size can be used as the abnormality occurrence degree.
A method of calculating the abnormality occurrence probability by the abnormality occurrence degree calculation unit 15 will be described later.

プリセット情報選択部16は、各設備31を撮影するためのカメラ20のプリセット情報を示したプリセット情報テーブルの中から、異常発生度算出部15が算出した異常発生確率に基づいて、プリセット情報を選択する。   The preset information selection unit 16 selects preset information based on the abnormality occurrence probability calculated by the abnormality occurrence degree calculation unit 15 from the preset information table indicating the preset information of the camera 20 for photographing each facility 31. To do.

図3は、記憶装置12に記憶されているプリセット情報テーブルの一例を示す図である。   FIG. 3 is a diagram illustrating an example of the preset information table stored in the storage device 12.

プリセット情報テーブル50は、複数のプリセット情報を含む。各プリセット情報は、プリセット情報を識別するための番号(No.)と、監視対象の設備31の設備番号と、パン角、チルト角およびズーム倍率とを含む。例えば、No.1のプリセット情報により監視対象とされる設備31の設備番号は「AN5541」であり、当該設備31を撮影するためのプリセット情報であるパン角、チルト角およびズーム倍率は、それぞれ、「−20°」、「+30°」および「1.5倍」である。なお、プリセット情報テーブル50は、カメラ20ごとに設けられていてもよい。   The preset information table 50 includes a plurality of preset information. Each preset information includes a number (No.) for identifying the preset information, the equipment number of the equipment 31 to be monitored, the pan angle, the tilt angle, and the zoom magnification. For example, no. The equipment number of the equipment 31 to be monitored by the preset information 1 is “AN5541”, and the pan angle, the tilt angle, and the zoom magnification, which are preset information for photographing the equipment 31, are “−20 °”, respectively. ”,“ + 30 ° ”and“ 1.5 times ”. Note that the preset information table 50 may be provided for each camera 20.

図2を参照して、プリセット情報選択部16は、異常発生確率が予め定められた閾値TH1以上の設備31に対応するプリセット情報を、プリセット情報テーブル50の中から選択する。例えば、設備番号「BG3314」の設備31の異常発生確率が閾値TH1以上の場合には、プリセット情報選択部16は、プリセット情報テーブル50の中から、No.2のプリセット情報であるパン角「+5°」、チルト角「+20°」およびズーム倍率「2.0倍」を選択する。   Referring to FIG. 2, preset information selection unit 16 selects preset information corresponding to equipment 31 having an abnormality occurrence probability equal to or higher than a predetermined threshold value TH <b> 1 from preset information table 50. For example, when the abnormality occurrence probability of the equipment 31 with the equipment number “BG3314” is equal to or higher than the threshold TH1, the preset information selection unit 16 selects No. 1 from the preset information table 50. No. 2 preset information, pan angle “+ 5 °”, tilt angle “+ 20 °”, and zoom magnification “2.0 ×” are selected.

カメラ制御部17は、プリセット情報選択部16が選択したプリセット情報に基づいて、カメラ20の撮影方向を制御する。   The camera control unit 17 controls the shooting direction of the camera 20 based on the preset information selected by the preset information selection unit 16.

また、カメラ制御部17は、カメラ20の撮影タイミングを制御する。例えば、後述するように、カメラ制御部17は、カメラ20に、異常発生確率が閾値TH1以上の設備31を交互に撮影させたり、当該設備31と工場30の全体とを交互に撮影させたりする。   The camera control unit 17 controls the shooting timing of the camera 20. For example, as will be described later, the camera control unit 17 causes the camera 20 to alternately photograph the facilities 31 having the abnormality occurrence probability equal to or higher than the threshold value TH1, or alternately photograph the facilities 31 and the entire factory 30. .

これにより、カメラ20Aまたは20Bは、異常発生確率が閾値TH1以上の設備31を撮影し、画像取得部13は、当該設備31の画像を記憶装置12に録画することができる。   Thereby, the camera 20A or 20B can photograph the equipment 31 having the abnormality occurrence probability equal to or higher than the threshold TH1, and the image acquisition unit 13 can record the image of the equipment 31 in the storage device 12.

[設備監視装置の処理の流れ]
図4は、設備監視装置10が実行する処理の手順の一例を示すフローチャートである。
[Processing flow of equipment monitoring device]
FIG. 4 is a flowchart illustrating an example of a procedure of processing executed by the facility monitoring apparatus 10.

計測値取得部14は、各センサ40から、センサ40で計測された計測値を取得する(S1)。計測値取得部14が取得する計測値には、例えば、設備31の温度、振動、圧力、設備31周辺の湿度、設備31の稼働時間などが含まれる。なお、計測値取得部14が取得する計測値に、カメラ20が撮影する画像が含まれていてもよい。また、計測値取得部14が取得する計測値に、PLCから取得可能な各設備31の生産条件等の各種条件が含まれていてもよい。   The measurement value acquisition unit 14 acquires the measurement value measured by the sensor 40 from each sensor 40 (S1). The measurement values acquired by the measurement value acquisition unit 14 include, for example, the temperature, vibration, pressure, humidity around the equipment 31, operating time of the equipment 31, and the like. Note that the measurement value acquired by the measurement value acquisition unit 14 may include an image captured by the camera 20. The measurement value acquired by the measurement value acquisition unit 14 may include various conditions such as the production conditions of each facility 31 that can be acquired from the PLC.

異常発生度算出部15は、計測値取得部14が取得した計測値に基づいて、設備31ごとに異常発生確率を算出する(S2)。   The abnormality occurrence degree calculation unit 15 calculates the abnormality occurrence probability for each facility 31 based on the measurement value acquired by the measurement value acquisition unit 14 (S2).

例えば、異常発生度算出部15は、1時間後の故障を予測するモデルに、計測値取得部14が取得した計測値を入力することにより、各設備31の1時間後の故障確率を算出する(例えば、非特許文献1参照)。異常発生度算出部15は、算出した故障確率を異常発生確率とすることができる。上記モデルは、設備31の故障時に取得されたセンサ40の計測値と、設備31の正常動作時に取得されたセンサ40の計測値とに基づいて事前に作成されているものとする。なお、上記のモデルとして、ニューラルネットワーク、SVM(Support Vector Machine)、ロジスティック回帰等を用いることができる。   For example, the abnormality occurrence degree calculation unit 15 calculates the failure probability after one hour of each facility 31 by inputting the measurement value acquired by the measurement value acquisition unit 14 into a model that predicts a failure after one hour. (For example, refer nonpatent literature 1). The abnormality occurrence degree calculation unit 15 can set the calculated failure probability as the abnormality occurrence probability. It is assumed that the model is created in advance based on the measured value of the sensor 40 acquired when the facility 31 is out of order and the measured value of the sensor 40 acquired when the facility 31 is operating normally. As the above model, a neural network, SVM (Support Vector Machine), logistic regression or the like can be used.

また、異常発生度算出部15は、統計的分布に基づいて異常発生確率を算出することもできる。例えば、設備31の正常動作時に取得されたセンサ40の計測値を学習データとして、学習データの統計的分布の特徴を計算しておく。異常発生度算出部15は、学習データが正規分布に従うことを仮定して、学習データの中心点と計測値取得部14が取得した計測値とのマハラノビス距離に基づいて異常発生確率を算出する(例えば、非特許文献2参照)。
ただし、異常発生確率の算出方法は、これらの方法に限定されるものではない。
Further, the abnormality occurrence degree calculation unit 15 can also calculate the abnormality occurrence probability based on the statistical distribution. For example, the characteristics of the statistical distribution of the learning data are calculated using the measurement value of the sensor 40 acquired during normal operation of the facility 31 as the learning data. The abnormality occurrence degree calculation unit 15 calculates the abnormality occurrence probability based on the Mahalanobis distance between the center point of the learning data and the measurement value acquired by the measurement value acquisition unit 14 assuming that the learning data follows a normal distribution ( For example, refer nonpatent literature 2).
However, the method for calculating the abnormality occurrence probability is not limited to these methods.

カメラ制御部17は、算出した異常発生確率が所定の閾値TH1以上の設備31(以下、「撮影対象設備」という)を、カメラ20の撮影対象となる設備31として抽出する(S3)。例えば、閾値TH1が20%の場合には、カメラ制御部17は、異常発生確率が20%以上の設備31を撮影対象設備として抽出する。   The camera control unit 17 extracts a facility 31 having a calculated abnormality occurrence probability equal to or higher than a predetermined threshold TH1 (hereinafter referred to as “capturing target facility”) as a facility 31 to be captured by the camera 20 (S3). For example, when the threshold value TH1 is 20%, the camera control unit 17 extracts equipment 31 having an abnormality occurrence probability of 20% or more as equipment to be photographed.

撮影対象設備が存在しなければ(S4でNO)、設備監視装置10は、処理を終了する。   If there is no equipment to be imaged (NO in S4), the equipment monitoring apparatus 10 ends the process.

撮影対象設備が存在する場合には(S4でYES)、カメラ制御部17は、撮影対象設備の撮影条件を決定する(S5)。   If there is a shooting target facility (YES in S4), the camera control unit 17 determines the shooting condition of the shooting target facility (S5).

図5は、撮影対象設備の撮影条件決定処理(図4のS5)の詳細を示すフローチャートである。   FIG. 5 is a flowchart showing details of the shooting condition determination process (S5 in FIG. 4) of the shooting target equipment.

図5を参照して、カメラ制御部17は、撮影対象設備の台数が所定数(例えば、2)よりも大きいか否かを判断する(S11)。   Referring to FIG. 5, the camera control unit 17 determines whether or not the number of photographing target facilities is larger than a predetermined number (for example, 2) (S11).

撮影対象設備の台数が所定数よりも大きい場合には(S11でYES)、カメラ制御部17は、当該撮影対象設備を撮影するカメラ20の台数を2台と決定する(S12)。   If the number of facilities to be photographed is larger than the predetermined number (YES in S11), the camera control unit 17 determines the number of cameras 20 that photograph the facility to be photographed as two (S12).

撮影対象設備の台数が所定数以下であれば(S11でNO)、カメラ制御部17は、当該撮影対象設備を撮影するカメラ20の台数を1台と決定する(S13)。   If the number of photographing target facilities is equal to or less than the predetermined number (NO in S11), the camera control unit 17 determines the number of cameras 20 that photograph the photographing target facility as one (S13).

ステップS12またはS13の処理の後、カメラ制御部17は、撮影対象設備に撮影時間を均等に割り当てる(S14)。   After the process of step S12 or S13, the camera control unit 17 assigns the photographing time evenly to the equipment to be photographed (S14).

図6は、撮影対象設備に割り当てられる撮影時間の一例を示す図である。図6は、撮影対象設備の台数が所定数(例えば、2)以下であり、1台のカメラ20Aにより撮影対象設備を撮影する場合を示している。   FIG. 6 is a diagram illustrating an example of the imaging time allocated to the imaging target facility. FIG. 6 illustrates a case where the number of facilities to be photographed is a predetermined number (for example, 2) or less and the facilities to be photographed are photographed by one camera 20A.

図6に示すように、カメラ20Aが撮影対象設備31Aおよび31Bを撮影する場合には、カメラ制御部17は、撮影対象設備31Aおよび31Bに、それぞれ、30秒間という撮影時間を割り当てる。つまり、カメラ20Aの撮影周期を60秒間とした場合に、60秒間を2分割した30秒間が、撮影対象設備31Aおよび31Bに撮影時間として割り当てられる。   As shown in FIG. 6, when the camera 20A captures the imaging target facilities 31A and 31B, the camera control unit 17 assigns an imaging time of 30 seconds to the imaging target facilities 31A and 31B, respectively. That is, when the shooting period of the camera 20A is 60 seconds, 30 seconds obtained by dividing 60 seconds into two are allocated to the shooting target facilities 31A and 31B as shooting times.

図7は、撮影対象設備に割り当てられる撮影時間の一例を示す図である。図7は、撮影対象設備の台数が所定数(例えば、2)よりも大きく、2台のカメラ20Aおよび20Bにより撮影対象設備を撮影する場合を示している。   FIG. 7 is a diagram illustrating an example of the imaging time allocated to the imaging target facility. FIG. 7 shows a case where the number of facilities to be photographed is larger than a predetermined number (for example, 2) and the facilities to be photographed are photographed by two cameras 20A and 20B.

図7に示すように、カメラ20Aおよび20Bが撮影対象設備31A〜31Cを撮影する場合には、カメラ制御部17は、撮影対象設備31Aおよび31Bに、図6に示した例と同様に、撮影時間として30秒間を割り当てる。また、カメラ制御部17は、撮影対象設備31Cに、撮影対象設備31Aおよび31Bに割り当てたのと同じ30秒間を撮影時間として割り当てる。   As shown in FIG. 7, when the cameras 20A and 20B capture the capturing target facilities 31A to 31C, the camera control unit 17 captures the capturing target facilities 31A and 31B in the same manner as the example illustrated in FIG. 6. Allocate 30 seconds as time. In addition, the camera control unit 17 assigns the same 30 seconds as the shooting time to the shooting target facility 31C, which is assigned to the shooting target facilities 31A and 31B.

また、カメラ制御部17は、カメラ20Aが撮影対象設備31Aおよび31Bを撮影し、カメラ20Bが撮影対象設備31Cを撮影することを決定する。これは、カメラ20Aに所定数の撮影対象設備を撮影させ、カメラ20Bに所定数を超える撮影対象設備を撮影させるためである。なお、カメラ20Aおよび20Bが撮影を担当する撮影対象設備は、ランダムに決定してもよい。また、カメラ20Aおよび20Bからの距離の近い順に、各カメラ20が撮影を担当する撮影対象設備を決定してもよい。これにより、できるだけ近い位置から撮影対象設備を撮影することが可能となる。   Further, the camera control unit 17 determines that the camera 20A captures the capturing target facilities 31A and 31B and the camera 20B captures the capturing target facility 31C. This is to cause the camera 20A to photograph a predetermined number of photographing target facilities and cause the camera 20B to photograph a photographing target facility exceeding the predetermined number. In addition, you may determine the imaging | photography object equipment which camera 20A and 20B takes charge of image | photographing at random. Moreover, you may determine the imaging | photography object equipment which each camera 20 takes charge of imaging | photography in order with the near distance from camera 20A and 20B. Thereby, it becomes possible to image | photograph the imaging | photography object equipment from the position as close as possible.

図5に示した撮影対象設備の撮影条件決定処理(図4のS5)により、カメラ20Aおよび20Bによる撮影対象設備の分担と、各撮影対象設備の撮影時間とが決定される。   By the shooting condition determination process (S5 in FIG. 4) of the shooting target facility shown in FIG. 5, the sharing of the shooting target facility by the cameras 20A and 20B and the shooting time of each shooting target facility are determined.

再度図4を参照して、プリセット情報選択部16は、記憶装置12に記憶されているプリセット情報テーブル(図3)の中から、撮影対象設備のプリセット情報を選択する(S6)。例えば、撮影対象設備31Aおよび31Bの設備番号が、それぞれ「AN5541」および「BG3314」であるとする。この場合、プリセット情報選択部16は、撮影対象設備31Aのプリセット情報として、No.1のプリセット情報(パン角「−20°」、チルト角「+30°」およびズーム倍率「1.5倍」)を選択する。また、プリセット情報選択部16は、撮影対象設備31Bのプリセット情報として、No.2のプリセット情報(パン角「+5°」、チルト角「+20°」およびズーム倍率「2.0倍」)を選択する。   Referring to FIG. 4 again, the preset information selection unit 16 selects preset information of the imaging target equipment from the preset information table (FIG. 3) stored in the storage device 12 (S6). For example, it is assumed that the equipment numbers of the imaging target equipments 31A and 31B are “AN5541” and “BG3314”, respectively. In this case, the preset information selection unit 16 sets No. 1 as preset information of the imaging target equipment 31A. 1 preset information (pan angle “−20 °”, tilt angle “+ 30 °” and zoom magnification “1.5 times”) is selected. In addition, the preset information selection unit 16 sets No. 1 as preset information of the imaging target equipment 31B. 2 preset information (pan angle “+ 5 °”, tilt angle “+ 20 °”, and zoom magnification “2.0 times”) are selected.

カメラ制御部17は、ステップS6で選択されたプリセット情報と、ステップS5で決定された撮影条件に基づいて、撮影対象設備を撮影するようにカメラ20を制御する(S7)。例えば、図6に示すように、カメラ20Aに30秒ずつ撮影対象設備31Aおよび31Bを撮影させる場合には、カメラ制御部17は、撮影対象設備31Aのプリセット情報(例えば、上述したNo.1のプリセット情報)と、撮影対象設備31Bのプリセット情報(例えば、上述したNo.2のプリセット情報)とを、30秒間隔で交互にカメラ20Aに送信する。これにより、カメラ制御部17は、カメラ20Aの撮影タイミングを制御し、カメラ20Aは、撮影対象設備31Aおよび31Bを、30秒間隔で交互に撮影することができる。   Based on the preset information selected in step S6 and the shooting conditions determined in step S5, the camera control unit 17 controls the camera 20 to shoot the shooting target equipment (S7). For example, as illustrated in FIG. 6, when the camera 20A is to photograph the photographing target facilities 31A and 31B every 30 seconds, the camera control unit 17 sets the preset information of the photographing target facility 31A (for example, No. 1 described above). Preset information) and preset information of the imaging target facility 31B (for example, preset information No. 2 described above) are alternately transmitted to the camera 20A at intervals of 30 seconds. Thereby, the camera control unit 17 controls the photographing timing of the camera 20A, and the camera 20A can photograph the photographing target facilities 31A and 31B alternately at intervals of 30 seconds.

また、図7に示すように、さらに、カメラ20Bに60秒間のうち30秒間、撮影対象設備31Cを撮影させる場合には、カメラ20Bに撮影対象設備31Cのプリセット情報と、工場30の全体を撮影するためのプリセット情報とを、30秒間隔で交互にカメラ20Bに送信する。これにより、カメラ制御部17は、カメラ20Bの撮影タイミングを制御し、カメラ20Bは、撮影対象設備31Cと工場30の全体とを、30秒間隔で交互に撮影することができる。   In addition, as shown in FIG. 7, when the camera 20B is to photograph the imaging target facility 31C for 30 seconds out of 60 seconds, the camera 20B captures the preset information of the imaging target facility 31C and the entire factory 30. To the camera 20B alternately at 30-second intervals. Thereby, the camera control part 17 controls the imaging | photography timing of the camera 20B, and the camera 20B can image | photograph the imaging | photography object installation 31C and the whole factory 30 by turns at 30 second intervals.

画像取得部13は、カメラ20Aおよび20Bから、カメラ20Aおよび20Bが撮影した画像を取得し、記憶装置12に録画する(S8)。   The image acquisition unit 13 acquires images captured by the cameras 20A and 20B from the cameras 20A and 20B and records them in the storage device 12 (S8).

図4に示したカメラ20の制御処理は、繰り返し実行される。例えば、設備監視装置10は、当該制御処理を、所定間隔(例えば、60秒間隔)で繰り返し実行する。制御処理を繰り返し実行することにより、最新の異常発生確率に基づいた撮影条件で、カメラを制御することができる。   The control process of the camera 20 shown in FIG. 4 is repeatedly executed. For example, the facility monitoring apparatus 10 repeatedly executes the control process at a predetermined interval (for example, every 60 seconds). By repeatedly executing the control process, the camera can be controlled under imaging conditions based on the latest abnormality occurrence probability.

[実施の形態1の効果]
以上説明したように、実施の形態1によると、設備31の異常発生確率に基づいて、設備31を撮影するためのプリセット情報が選択され、設備31を撮影するための撮影条件が決定される。また、選択されたプリセット情報に基づいて、カメラ20が制御される。異常の発生前には、異常発生確率が高くなる。このため、異常発生確率が閾値TH1以上となった時点から設備31の撮影を開始することで、異常の発生前後の画像を撮影することができる。これにより、異常の原因究明を行うことができる。
[Effect of Embodiment 1]
As described above, according to the first embodiment, the preset information for photographing the equipment 31 is selected based on the abnormality occurrence probability of the equipment 31, and the photographing conditions for photographing the equipment 31 are determined. Further, the camera 20 is controlled based on the selected preset information. Before the occurrence of an abnormality, the probability of occurrence of the abnormality is high. For this reason, it is possible to capture images before and after the occurrence of an abnormality by starting the imaging of the facility 31 from the time when the abnormality occurrence probability becomes equal to or higher than the threshold value TH1. Thereby, the cause of the abnormality can be investigated.

また、異常発生確率が閾値TH1未満の設備31は撮影する必要がないため、1台のカメラで複数の設備31を監視することができる。これにより、低コストで複数の設備31を撮影することもできる。このように、異常の発生の可能性が低い設備31を監視対象から外すことにより、異常の発生の可能性が高い設備31の監視に、より多くの時間を割くことができる。   Moreover, since it is not necessary to photograph the equipment 31 having the abnormality occurrence probability less than the threshold TH1, it is possible to monitor a plurality of equipments 31 with one camera. Thereby, the some installation 31 can also be image | photographed at low cost. As described above, by removing the equipment 31 having a low possibility of occurrence of abnormality from the monitoring target, it is possible to devote more time to monitoring the equipment 31 having a high possibility of occurrence of abnormality.

また、異常発生確率が閾値TH1以上の撮影対象設備の台数が所定数を超えた場合には、2台のカメラ20Aおよび20Bで分担して撮影対象設備を撮影することができる。撮影対象設備の数が多く、仮に、カメラ20Aのみですべての撮影対象設備を撮影した場合には、撮影対象設備1台あたりの撮影時間が短くなる。しかし、実施の形態1によると、各撮影対象設備を、一定の時間(例えば、60秒間当たり30秒)をかけて撮影することができるため、撮影対象設備1台あたりの撮影時間が短くなりすぎることを防止することができる。   In addition, when the number of imaging target facilities whose abnormality occurrence probability is equal to or greater than the threshold TH1 exceeds a predetermined number, the imaging target facilities can be imaged by sharing the two cameras 20A and 20B. If the number of facilities to be photographed is large and all the facilities to be photographed are photographed only by the camera 20A, the photographing time per one facility to be photographed is shortened. However, according to the first embodiment, each photographing object facility can be photographed over a certain time (for example, 30 seconds per 60 seconds), so the photographing time per photographing object facility becomes too short. This can be prevented.

(実施の形態1の変形例)
図3に示したプリセット情報テーブル50は固定式のカメラ20用であるが、移動式のカメラにも本実施の形態は適用可能である。
(Modification of Embodiment 1)
The preset information table 50 shown in FIG. 3 is for the fixed camera 20, but the present embodiment can also be applied to a mobile camera.

図8は、記憶装置12に記憶されているプリセット情報テーブルの一例を示す図である。
プリセット情報50テーブルAは、図2に示したプリセット情報テーブル50に加えて、カメラ位置の情報を含む。
FIG. 8 is a diagram illustrating an example of the preset information table stored in the storage device 12.
The preset information 50 table A includes camera position information in addition to the preset information table 50 shown in FIG.

例えば、設備番号「AN5541」のカメラ位置の情報は、「(300,600,300)」であり、設備番号「BG3314」のカメラ位置の情報は、「(500,1000,500)」である。   For example, the camera position information of the equipment number “AN5541” is “(300, 600, 300)”, and the camera position information of the equipment number “BG3314” is “(500, 1000, 500)”.

設備監視装置10は、プリセット情報テーブル50Aに基づいて、監視対象とする設備31の設備番号に対応するカメラ位置に、移動式のカメラを移動させ、画像を撮影して録画することができる。例えば、ドローン等に搭載されたカメラによって設備31を監視する際に、設備監視装置10は、プリセット情報テーブル50Aに従って、監視対象の設備31の近傍までドローンを移動させ、設備31を撮影させることができる。これにより、設備31の高精細画像を撮影することができる。なお、カメラ位置の情報は、2次元座標であってもよい。これにより、レールを走行するカメラを、プリセット情報テーブル50Aに従って移動させ、移動させた位置で設備31を撮影させることができる。   Based on the preset information table 50A, the equipment monitoring apparatus 10 can move a mobile camera to the camera position corresponding to the equipment number of the equipment 31 to be monitored, and can capture and record an image. For example, when the equipment 31 is monitored by a camera mounted on a drone or the like, the equipment monitoring apparatus 10 can move the drone to the vicinity of the equipment 31 to be monitored and photograph the equipment 31 according to the preset information table 50A. it can. Thereby, a high-definition image of the facility 31 can be taken. The camera position information may be two-dimensional coordinates. Thereby, the camera which runs on a rail can be moved according to preset information table 50A, and equipment 31 can be photoed in the moved position.

(実施の形態2)
実施の形態1では、撮影対象設備が複数存在する場合に、各撮影対象設備の撮影時間は同一である。実施の形態2では、撮影対象設備ごとに撮影時間が異なる例について説明する。
(Embodiment 2)
In the first embodiment, when there are a plurality of photographing target facilities, the photographing time of each photographing target facility is the same. In the second embodiment, an example in which the shooting time is different for each shooting target facility will be described.

設備監視システム1および設備監視装置10の構成は実施の形態1と同様である。また、設備監視装置10が実行する処理の手順は、図4のフローチャートに示した通りである。このため、その詳細な説明はここでは繰り返さない。   The configurations of the facility monitoring system 1 and the facility monitoring device 10 are the same as those in the first embodiment. Moreover, the procedure of the process which the equipment monitoring apparatus 10 performs is as having shown to the flowchart of FIG. Therefore, detailed description thereof will not be repeated here.

実施の形態2では、撮影対象設備の撮影条件決定処理(図4のS5)が実施の形態1と異なる。   In the second embodiment, the photographing condition determination process (S5 in FIG. 4) of the photographing target facility is different from the first embodiment.

図9は、撮影対象設備の撮影条件決定処理(図4のS5)の詳細を示すフローチャートである。   FIG. 9 is a flowchart showing details of the photographing condition determination process (S5 in FIG. 4) of the equipment to be photographed.

設備監視装置10は、ステップS11〜S13に示す処理を実行する。これらの処理は、図5に示したステップS11〜S13と同様である。   The equipment monitoring apparatus 10 executes the processes shown in steps S11 to S13. These processes are the same as steps S11 to S13 shown in FIG.

ステップS12またはS13の処理の後、カメラ制御部17は、撮影対象設備に異常発生確率に応じた撮影時間を割り当てる(S21)。   After the process of step S12 or S13, the camera control unit 17 assigns a shooting time corresponding to the abnormality occurrence probability to the shooting target equipment (S21).

図10は、撮影対象設備に割り当てられる撮影時間の一例を示す図である。図10は、撮影対象設備の台数が所定数(例えば、2)以下であり、1台のカメラ20Aにより撮影対象設備を撮影する場合を示している。   FIG. 10 is a diagram illustrating an example of the imaging time allocated to the imaging target facility. FIG. 10 shows a case where the number of imaging target facilities is a predetermined number (for example, 2) or less and the imaging target facility is imaged by one camera 20A.

ここで、撮影対象設備31Aおよび31Bの異常発生確率は、それぞれ、20%および80%であるとする。カメラ20Aの撮影周期を60秒間とした場合、カメラ制御部17は、撮影周期60秒間を異常発生確率の比率で分割することにより、撮影対象設備31Aおよび31Bに、それぞれ、撮影時間として12秒間(=60秒間×20%/100%)および48秒間(=60秒間×80%/100%)を割り当てる。   Here, it is assumed that the abnormality occurrence probabilities of the imaging target facilities 31A and 31B are 20% and 80%, respectively. When the shooting period of the camera 20A is set to 60 seconds, the camera control unit 17 divides the shooting period of 60 seconds by the ratio of the probability of occurrence of abnormalities, so that the shooting target facilities 31A and 31B each have a shooting time of 12 seconds ( = 60 seconds x 20% / 100%) and 48 seconds (= 60 seconds x 80% / 100%).

図11は、撮影対象設備に割り当てられる撮影時間の一例を示す図である。図11は、撮影対象設備の台数が所定数(例えば、2)よりも大きく、2台のカメラ20Aおよび20Bにより撮影対象設備を撮影する場合を示している。   FIG. 11 is a diagram illustrating an example of the imaging time allocated to the imaging target facility. FIG. 11 shows a case where the number of facilities to be photographed is larger than a predetermined number (for example, 2) and the facilities to be photographed are photographed by two cameras 20A and 20B.

ここで、撮影対象設備31A、31Bおよび31Cの異常発生確率は、それぞれ、20%、80%および40%であるとする。カメラ制御部17は、撮影対象設備31Aおよび31Bに、図10に示した例と同様に、撮影時間として、それぞれ、12秒間および48秒間を割り当てる。また、カメラ制御部17は、撮影対象設備31Cに、撮影時間として24秒間を割り当てる。撮影対象設備31Cの撮影時間は、撮影対象設備31Cの異常発生確率と、撮影対象設備31Aまたは31Bの撮影時間および異常発生確率とに基づいて計算される。つまり、撮影対象設備31Cの異常発生確率40%は、撮影対象設備31Aの異常発生確率20%の2倍であることより、撮影対象設備31Cの撮影時間として、撮影対象設備31Aの撮影時間12秒間の2倍の時間である24秒間が割り当てられる。   Here, it is assumed that the occurrence probabilities of the imaging target facilities 31A, 31B, and 31C are 20%, 80%, and 40%, respectively. The camera control unit 17 allocates 12 seconds and 48 seconds to the photographing target facilities 31A and 31B as the photographing time, as in the example shown in FIG. In addition, the camera control unit 17 assigns 24 seconds to the imaging target facility 31C as the imaging time. The photographing time of the photographing target facility 31C is calculated based on the abnormality occurrence probability of the photographing target facility 31C, the photographing time of the photographing target facility 31A or 31B, and the abnormality occurrence probability. That is, the abnormality occurrence probability 40% of the photographing target facility 31C is twice the abnormality occurrence probability 20% of the photographing target facility 31A, so that the photographing time of the photographing target facility 31A is 12 seconds as the photographing time of the photographing target facility 31C. 24 seconds, which is twice as long, is allocated.

また、実施の形態1と同様に、カメラ制御部17は、カメラ20Aが撮影対象設備31Aおよび31Bを撮影し、カメラ20Bが撮影対象設備31Cを撮影することを決定する。   Similarly to the first embodiment, the camera control unit 17 determines that the camera 20A captures the capturing target facilities 31A and 31B and the camera 20B captures the capturing target facility 31C.

図9に示した撮影対象設備の撮影条件決定処理(図4のS5)により、カメラ20Aおよび20Bによる撮影対象設備の分担と、各撮影対象設備の撮影時間とが決定される。   By the shooting condition determination process (S5 in FIG. 4) of the shooting target equipment shown in FIG. 9, the sharing of the shooting target equipment by the cameras 20A and 20B and the shooting time of each shooting target equipment are determined.

カメラ制御処理(図4のS7)において、カメラ制御部17は、これらの撮影条件を用いて、図10または図11に示したようなタイミングで撮影対象設備を撮影するように、カメラ20Aまたは20Bを制御する。   In the camera control process (S7 in FIG. 4), the camera control unit 17 uses these shooting conditions to shoot the shooting target equipment at the timing shown in FIG. 10 or FIG. To control.

以上説明したように、実施の形態2によると、異常発生確率が高い設備31ほど、単位時間(撮影周期)当たりの撮影時間を長くすることができる。このため、異常の発生の可能性が高まった設備31を、長時間監視することができる。また、複数の設備31が監視対象とされる場合に、異常発生確率に応じて、撮影時間を変えることができる。   As described above, according to the second embodiment, the facility 31 having a higher probability of abnormality can increase the imaging time per unit time (imaging cycle). For this reason, it is possible to monitor for a long time the facility 31 in which the possibility of occurrence of abnormality has increased. In addition, when a plurality of facilities 31 are to be monitored, the imaging time can be changed according to the abnormality occurrence probability.

ただし、異常発生確率に基づいた撮影時間の決定方法は、実施の形態2に示したものには限定されない。たとえば、異常発生確率と撮影時間との対応関係を示したテーブル情報を参照することにより、カメラ制御部17が、異常発生確率から撮影時間を決定してもよい。   However, the method for determining the imaging time based on the abnormality occurrence probability is not limited to that shown in the second embodiment. For example, the camera control unit 17 may determine the imaging time from the abnormality occurrence probability by referring to the table information indicating the correspondence relationship between the abnormality occurrence probability and the imaging time.

また、実施の形態2では、異常発生確率が閾値TH1以上の設備31を撮影対象設備としたが、異常発生確率の高低に関係なく、工場30に設置された全ての設備31、または事前に指定された設備31を、撮影対象設備とすることもできる。   In the second embodiment, the equipment 31 having the abnormality occurrence probability equal to or higher than the threshold TH1 is set as the imaging target equipment. However, all the equipment 31 installed in the factory 30 or designated in advance regardless of the abnormality occurrence probability. The equipment 31 that has been made can also be the equipment to be photographed.

また、設備31に実際に異常が発生した場合には、カメラ20は、異常が発生した設備31を常時撮影するようにしてもよい。   Further, when an abnormality actually occurs in the facility 31, the camera 20 may always shoot the facility 31 in which the abnormality has occurred.

(実施の形態3)
実施の形態1では、撮影対象設備が複数存在する場合の各撮影対象設備の撮影時間は同一である。また、撮影周期あたりの各撮影対象設備の撮影回数は同一である。実施の形態3では、撮影対象設備ごとに撮影周期あたりの撮影回数が異なる例について説明する。
(Embodiment 3)
In the first embodiment, the shooting time of each shooting target facility is the same when there are a plurality of shooting target facilities. Further, the number of times of photographing of each facility to be photographed per photographing cycle is the same. In the third embodiment, an example will be described in which the number of times of photographing per photographing cycle differs for each equipment to be photographed.

設備監視システム1および設備監視装置10の構成は実施の形態1と同様である。また、設備監視装置10が実行する処理の手順は、図4のフローチャートに示した通りである。このため、その詳細な説明はここでは繰り返さない。   The configurations of the facility monitoring system 1 and the facility monitoring device 10 are the same as those in the first embodiment. Moreover, the procedure of the process which the equipment monitoring apparatus 10 performs is as having shown to the flowchart of FIG. Therefore, detailed description thereof will not be repeated here.

実施の形態3では、撮影対象設備の撮影条件決定処理(図4のS5)が実施の形態1と異なる。   In the third embodiment, the shooting condition determination process (S5 in FIG. 4) of the shooting target facility is different from the first embodiment.

図12は、撮影対象設備の撮影条件決定処理(図4のS5)の詳細を示すフローチャートである。   FIG. 12 is a flowchart showing details of the shooting condition determination process (S5 in FIG. 4) of the shooting target equipment.

設備監視装置10は、ステップS11〜S13に示す処理を実行する。これらの処理は、図5に示したステップS11〜S13と同様である。   The equipment monitoring apparatus 10 executes the processes shown in steps S11 to S13. These processes are the same as steps S11 to S13 shown in FIG.

ステップS12またはS13の処理の後、カメラ制御部17は、撮影対象設備に異常発生確率に応じた撮影回数を割り当てる(S31)。   After the process of step S12 or S13, the camera control unit 17 assigns the number of times of photographing according to the abnormality occurrence probability to the equipment to be photographed (S31).

図13は、撮影対象設備に割り当てられる撮影回数の一例を示す図である。図13は、撮影対象設備の台数が所定数(例えば、2)以下であり、1台のカメラ20Aにより撮影対象設備を撮影する場合を示している。   FIG. 13 is a diagram illustrating an example of the number of times of photographing assigned to the photographing target facility. FIG. 13 shows a case in which the number of facilities to be photographed is a predetermined number (for example, 2) or less and the facilities to be photographed are photographed by one camera 20A.

ここで、撮影対象設備31Aおよび31Bの異常発生確率は、それぞれ、20%および80%であるとする。また、発生確率が20%増えるごとに撮影回数が1回増えるとした場合、カメラ制御部17は、撮影対象設備31Aおよび31Bに、それぞれ、撮影回数として1回および4回を割り当てる。この撮影回数は1撮影周期中の撮影回数を示す。例えば、1回当たりの撮影回数を5秒間とした場合には、撮影周期60秒間中に、撮影対象設備31Aが5秒間(=5秒間×1回)撮影され、撮影対象設備31Bが20秒間(=5秒間×4回)撮影されることになる。   Here, it is assumed that the abnormality occurrence probabilities of the imaging target facilities 31A and 31B are 20% and 80%, respectively. Further, when the number of shootings is increased by 1 every time the occurrence probability is increased by 20%, the camera control unit 17 assigns 1 and 4 shooting times to the shooting target facilities 31A and 31B, respectively. This number of times of photographing indicates the number of times of photographing in one photographing cycle. For example, when the number of times of shooting is set to 5 seconds, the shooting target facility 31A is shot for 5 seconds (= 5 seconds × 1 time) and the shooting target facility 31B is set to 20 seconds (60 seconds). = 5 seconds x 4 times)

図14は、カメラ20Aによる撮影対象設備31Aおよび31Bの撮像時間の一例を示す図である。   FIG. 14 is a diagram illustrating an example of the imaging time of the imaging target facilities 31A and 31B by the camera 20A.

1つのブロック(四角形)が5秒間の撮影時間を示すとした場合、カメラ20Aは、1撮影周期60秒間の間に、撮影対象設備31A、全体、撮影対象設備31B、全体、撮影対象設備31B、全体、撮影対象設備31B、全体、撮影対象設備31B、全体、全体、全体の順で撮影を行う。ここで、「全体」は、工場30の全体を撮影対象とする場合を示す。   Assuming that one block (rectangle) indicates a shooting time of 5 seconds, the camera 20A takes the shooting target equipment 31A, the whole, the shooting target equipment 31B, the whole, the shooting target equipment 31B, during one shooting cycle of 60 seconds. Photographing is performed in the order of the whole, the photographing target facility 31B, the whole, the photographing target facility 31B, the whole, the whole, and the whole. Here, “entire” indicates a case where the entire factory 30 is a subject of photographing.

図15は、撮影対象設備に割り当てられる撮影回数の一例を示す図である。図15は、撮影対象設備の台数が所定数(例えば、2)よりも大きく、2台のカメラ20Aおよび20Bにより撮影対象設備を撮影する場合を示している。   FIG. 15 is a diagram illustrating an example of the number of times of photographing allocated to the photographing target facility. FIG. 15 shows a case where the number of facilities to be photographed is larger than a predetermined number (for example, 2) and the facilities to be photographed are photographed by two cameras 20A and 20B.

ここで、撮影対象設備31A、31Bおよび31Cの異常発生確率は、それぞれ、20%、80%および40%であるとする。図14の場合と同様に発生確率が20%増えるごとに撮影回数が1回増えるとした場合、カメラ制御部17は、撮影対象設備31A、31Bおよび31Cに、1撮影周期中の撮影回数として、それぞれ、1回、4回および2回を割り当てる。例えば、1回当たりの撮影回数を5秒間とした場合には、撮影周期60秒間中に、撮影対象設備31A、31Bおよび31Cが、それぞれ、5秒間(=5秒間×1回)、20秒間(=5秒間×4回)および10秒間(=5秒間×2回)撮影されることになる。   Here, it is assumed that the occurrence probabilities of the imaging target facilities 31A, 31B, and 31C are 20%, 80%, and 40%, respectively. As in the case of FIG. 14, when the number of shootings is increased by 1 every time the occurrence probability increases by 20%, the camera control unit 17 causes the shooting target facilities 31 </ b> A, 31 </ b> B, and 31 </ b> C as the number of shootings in one shooting cycle. Assign one, four and two times, respectively. For example, when the number of times of shooting per shot is 5 seconds, the shooting target facilities 31A, 31B, and 31C have 5 seconds (= 5 seconds × 1 time) and 20 seconds ( = 5 seconds × 4 times) and 10 seconds (= 5 seconds × 2 times).

また、実施の形態1と同様に、カメラ制御部17は、カメラ20Aが撮影対象設備31Aおよび31Bを撮影し、カメラ20Bが撮影対象設備31Cを撮影することを決定する。   Similarly to the first embodiment, the camera control unit 17 determines that the camera 20A captures the capturing target facilities 31A and 31B and the camera 20B captures the capturing target facility 31C.

図16は、カメラ20Aおよび20Bによる撮影対象設備31A、31Bおよび31Cの撮像時間の一例を示す図である。   FIG. 16 is a diagram illustrating an example of imaging times of the imaging target facilities 31A, 31B, and 31C by the cameras 20A and 20B.

1つのブロック(四角形)が5秒間の撮影時間を示すものとする。カメラ20Aの撮影時間は、図14に示したものと同じである。カメラ20Bは、1撮影周期中に、撮影対象設備31Cを5秒間撮影した後に、工場30の全体を25秒間撮影する。その後、カメラ20Bは、撮影対象設備31Cおよび工場30の全体の撮影を同様に繰り返す。   It is assumed that one block (square) indicates a shooting time of 5 seconds. The shooting time of the camera 20A is the same as that shown in FIG. The camera 20B shoots the entire facility 30 for 25 seconds after shooting the shooting target facility 31C for 5 seconds during one shooting cycle. Thereafter, the camera 20B repeats the imaging of the entire imaging target facility 31C and the factory 30 in the same manner.

図12に示した撮影対象設備の撮影条件決定処理(図4のS5)により、カメラ20Aおよび20Bによる撮影対象設備の分担と、各撮影対象設備の1撮影周期あたりの撮影回数とが決定される。   The shooting condition determination process (S5 in FIG. 4) of the shooting target equipment shown in FIG. 12 determines the sharing of the shooting target equipment by the cameras 20A and 20B and the number of shootings per shooting cycle of each shooting target equipment. .

カメラ制御処理(図4のS7)において、カメラ制御部17は、これらの撮影条件を用いて、図14または図16に示したようなタイミングで撮影対象設備を撮影するように、カメラ20Aまたは20Bを制御する。   In the camera control process (S7 in FIG. 4), the camera control unit 17 uses these shooting conditions to shoot the shooting target equipment at the timing shown in FIG. 14 or FIG. To control.

以上説明したように、実施の形態3によると、異常発生確率が高い設備31ほど、単位時間(撮影周期)当たりの撮影回数を多くすることができる。このため、異常の発生の可能性が高まった設備31を、高頻度で監視することができる。また、複数の設備31が監視対象とされる場合に、異常発生確率に応じて、撮影回数を変えることができる。   As described above, according to the third embodiment, the facility 31 having a higher abnormality occurrence probability can increase the number of times of photographing per unit time (imaging cycle). For this reason, the equipment 31 in which the possibility of occurrence of abnormality has increased can be monitored with high frequency. Further, when a plurality of facilities 31 are to be monitored, the number of imaging can be changed according to the abnormality occurrence probability.

ただし、異常発生確率に基づいた撮影回数の決定方法は、実施の形態3に示したものには限定されない。たとえば、異常発生確率と撮影回数との対応関係を示したテーブル情報を参照することにより、カメラ制御部17が、異常発生確率から撮影回数を決定してもよい。   However, the method of determining the number of imaging based on the abnormality occurrence probability is not limited to that shown in the third embodiment. For example, the camera control unit 17 may determine the number of photographing from the abnormality occurrence probability by referring to table information indicating the correspondence between the abnormality occurrence probability and the number of photographing.

(実施の形態4)
実施の形態4では、撮影対象設備ごとにズーム倍率が異なる例について説明する。
設備監視システム1および設備監視装置10の構成は実施の形態1と同様である。また、設備監視装置10が実行する処理の手順は、図4のフローチャートに示した通りである。このため、その詳細な説明はここでは繰り返さない。
(Embodiment 4)
In the fourth embodiment, an example in which the zoom magnification is different for each facility to be photographed will be described.
The configurations of the facility monitoring system 1 and the facility monitoring device 10 are the same as those in the first embodiment. Moreover, the procedure of the process which the equipment monitoring apparatus 10 performs is as having shown to the flowchart of FIG. Therefore, detailed description thereof will not be repeated here.

実施の形態4では、撮影対象設備の撮影条件決定処理(図4のS5)が実施の形態1と異なる。   In the fourth embodiment, the shooting condition determination process (S5 in FIG. 4) of the shooting target facility is different from the first embodiment.

図17は、撮影対象設備の撮影条件決定処理(図4のS5)の詳細を示すフローチャートである。   FIG. 17 is a flowchart showing details of the shooting condition determination process (S5 in FIG. 4) of the shooting target equipment.

設備監視装置10は、ステップS11〜S14に示す処理を実行する。これらの処理は、図5に示したステップS11〜S14と同様である。   The equipment monitoring apparatus 10 executes the processes shown in steps S11 to S14. These processes are the same as steps S11 to S14 shown in FIG.

ステップS14の処理の後、カメラ制御部17は、撮影対象設備に異常倍率に応じたズーム倍率を決定する(S41)。   After the process of step S14, the camera control unit 17 determines a zoom magnification corresponding to the abnormal magnification for the equipment to be imaged (S41).

図18は、撮影対象設備に割り当てられる撮影時間およびズーム倍率の一例を示す図である。図18は、撮影対象設備の台数が所定数(例えば、2)以下であり、1台のカメラ20Aにより撮影対象設備を撮影する場合を示している。   FIG. 18 is a diagram illustrating an example of shooting time and zoom magnification allocated to a shooting target facility. FIG. 18 shows a case where the number of facilities to be photographed is a predetermined number (for example, 2) or less and the facilities to be photographed are photographed by one camera 20A.

ここで、撮影対象設備31Aおよび31Bの異常発生確率は、それぞれ、20%および80%であるとする。撮影対象設備31Aおよび31Bの撮影時間は、図6に示した例と同様に決定される。   Here, it is assumed that the abnormality occurrence probabilities of the imaging target facilities 31A and 31B are 20% and 80%, respectively. The shooting times of the shooting target facilities 31A and 31B are determined in the same manner as in the example shown in FIG.

通常時のズーム倍率を1.0倍とし、異常発生確率が20%増えるごとにズーム倍率が0.3倍ずつ増えるとした場合、カメラ制御部17は、撮影対象設備31Aおよび31Bのズーム倍率として、それぞれ、1.3倍(=1.0倍+0.3倍×20%/20%)および2.2倍(=1.0倍+0.3倍×80%/20%)を割り当てる。   If the normal zoom magnification is 1.0 and the zoom magnification is increased by 0.3 each time the abnormality occurrence probability is increased by 20%, the camera control unit 17 sets the zoom magnifications of the photographing target facilities 31A and 31B. And 1.3 times (= 1.0 times + 0.3 times × 20% / 20%) and 2.2 times (= 1.0 times + 0.3 times × 80% / 20%), respectively.

これにより、カメラ制御部17は、カメラ制御処理(図4のS7)において、カメラ20Aが撮影対象設備31Aを撮影する場合には、ズーム倍率が1.3倍になるようにズームレンズを制御する。つまり、カメラ制御部17は、図3に示すプリセット情報テーブル50から選択された撮影対象設備31Aのプリセット情報に加えて、ズーム倍率1.3倍を示す情報を、カメラ20Aに送信する。   Thereby, in the camera control process (S7 in FIG. 4), the camera control unit 17 controls the zoom lens so that the zoom magnification is 1.3 when the camera 20A captures the imaging target facility 31A. . That is, the camera control unit 17 transmits information indicating the zoom magnification of 1.3 times to the camera 20A in addition to the preset information of the photographing target facility 31A selected from the preset information table 50 illustrated in FIG.

また、カメラ制御部17は、カメラ20Aが撮影対象設備31Bを撮影する場合には、ズーム倍率が2.2倍になるようにズームレンズを制御する。つまり、カメラ制御部17は、図3に示すプリセット情報テーブル50から選択された撮影対象設備31Bのプリセット情報に加えて、ズーム倍率2.2倍を示す情報を、カメラ20Aに送信する。   The camera control unit 17 controls the zoom lens so that the zoom magnification is 2.2 when the camera 20A captures the capturing target facility 31B. That is, the camera control unit 17 transmits information indicating the zoom magnification of 2.2 times to the camera 20A in addition to the preset information of the photographing target facility 31B selected from the preset information table 50 illustrated in FIG.

図19は、撮影対象設備に割り当てられる撮影時間およびズーム倍率の一例を示す図である。図19は、撮影対象設備の台数が所定数(例えば、2)よりも大きく、2台のカメラ20Aおよび20Bにより撮影対象設備を撮影する場合を示している。   FIG. 19 is a diagram illustrating an example of shooting time and zoom magnification allocated to a shooting target facility. FIG. 19 shows a case where the number of facilities to be photographed is larger than a predetermined number (for example, 2) and the facilities to be photographed are photographed by two cameras 20A and 20B.

ここで、撮影対象設備31A、31Bおよび31Cの異常発生確率は、それぞれ、20%、80%および40%であるとする。撮影対象設備31A、31Bおよび31Cの撮影時間は、図7に示した例と同様に決定される。   Here, it is assumed that the occurrence probabilities of the imaging target facilities 31A, 31B, and 31C are 20%, 80%, and 40%, respectively. The shooting times of the shooting target facilities 31A, 31B and 31C are determined in the same manner as in the example shown in FIG.

図19の場合と同様に通常時のズーム倍率を1.0倍とし、異常発生確率が20%増えるごとにズーム倍率が0.3倍増えるとした場合、カメラ制御部17は、撮影対象設備31A、31Bおよび31Cのズーム倍率として、それぞれ、1.3倍(=1.0倍+0.3倍×20%/20%)、2.2倍(=1.0倍+0.3倍×80%/20%)および1.6倍(=1.0倍+0.3倍×40%/20%)を割り当てる。   As in the case of FIG. 19, when the zoom magnification at normal time is set to 1.0 and the zoom magnification is increased by 0.3 times every time the probability of occurrence of abnormality is increased by 20%, the camera control unit 17 performs the photographing target equipment 31A. , 31B and 31C zoom magnifications are 1.3 times (= 1.0 times + 0.3 times × 20% / 20%) and 2.2 times (= 1.0 times + 0.3 times × 80%, respectively) / 20%) and 1.6 times (= 1.0 times + 0.3 times × 40% / 20%).

また、実施の形態1と同様に、カメラ制御部17は、カメラ20Aが撮影対象設備31Aおよび31Bを撮影し、カメラ20Bが撮影対象設備31Cを撮影することを決定する。   Similarly to the first embodiment, the camera control unit 17 determines that the camera 20A captures the capturing target facilities 31A and 31B and the camera 20B captures the capturing target facility 31C.

これにより、カメラ制御部17は、図18を参照して説明したように、カメラ制御処理(図4のS7)において、カメラ20Aが撮影対象設備31Aを撮影する場合には、ズーム倍率が1.3倍になるようにズームレンズを制御し、カメラ20Aが撮影対象設備31Bを撮影する場合には、ズーム倍率が2.2倍になるようにズームレンズを制御する。   Thereby, as described with reference to FIG. 18, the camera control unit 17 has a zoom magnification of 1. when the camera 20 </ b> A captures the imaging target facility 31 </ b> A in the camera control process (S <b> 7 in FIG. 4). When the zoom lens is controlled so as to be tripled and the camera 20A photographs the photographing target equipment 31B, the zoom lens is controlled so that the zoom magnification is 2.2 times.

同様に、カメラ制御部17は、カメラ制御処理(図4のS7)において、カメラ20Bが撮影対象設備31Cを撮影する場合には、ズーム倍率が1.6倍になるようにズームレンズを制御する。つまり、カメラ制御部17は、図3に示すプリセット情報テーブル50から選択された撮影対象設備31Cのプリセット情報に加えて、ズーム倍率1.6倍を示す情報を、カメラ20Bに送信する。   Similarly, in the camera control process (S7 in FIG. 4), the camera control unit 17 controls the zoom lens so that the zoom magnification is 1.6 when the camera 20B captures the imaging target facility 31C. . That is, the camera control unit 17 transmits information indicating the zoom magnification of 1.6 times to the camera 20B in addition to the preset information of the photographing target facility 31C selected from the preset information table 50 illustrated in FIG.

図17に示した撮影対象設備の撮影条件決定処理(図4のS5)により、カメラ20Aおよび20Bによる撮影対象設備の分担と、各撮影対象設備の撮影時間およびズーム倍率とが決定される。   The shooting condition determination process (S5 in FIG. 4) of the shooting target equipment shown in FIG. 17 determines the sharing of the shooting target equipment by the cameras 20A and 20B, the shooting time and the zoom magnification of each shooting target equipment.

以上説明したように、実施の形態4によると、異常発生確率が高い設備31ほど、ズーム倍率を大きくして撮影することができる。つまり、異常発生確率が高い設備31ほど、高精細で撮影することができる。これにより、異常の発生の可能性が高まった設備31を、詳細に監視することができる。   As described above, according to the fourth embodiment, the facility 31 having a higher abnormality occurrence probability can be photographed with a larger zoom magnification. That is, the equipment 31 having a higher probability of abnormality can be photographed with higher definition. Thereby, the equipment 31 in which the possibility of occurrence of abnormality has increased can be monitored in detail.

なお、カメラが、移動式カメラや、ドローン等に搭載されたカメラの場合には、異常発生確率に応じてズーム倍率を変更する代わりに、異常発生確率に応じて撮影対象設備とカメラとの間の距離を制御するようにしてもよい。つまり、設備監視装置10は、異常発生確率が高い設備31ほど近距離で撮影できるように、カメラを移動させる。これにより、カメラは、異常の発生の可能性が高まった設備31の高精細画像を撮影することができ、これにより、ユーザは、設備31を詳細に監視することができる。   If the camera is a mobile camera or a camera mounted on a drone, etc., instead of changing the zoom magnification in accordance with the probability of occurrence of an abnormality, the distance between the equipment to be imaged and the camera is determined in accordance with the probability of occurrence of the abnormality. The distance may be controlled. That is, the facility monitoring apparatus 10 moves the camera so that the facility 31 having a higher probability of abnormality can be photographed at a shorter distance. Thereby, the camera can take a high-definition image of the facility 31 in which the possibility of occurrence of abnormality is increased, and thus the user can monitor the facility 31 in detail.

(実施の形態5)
実施の形態1では、撮影対象設備を撮影するカメラ20の台数は、1つの撮影対象設備につき1台である。実施の形態5では、1つの撮影対象設備を複数台のカメラ20で撮影する例について説明する。
(Embodiment 5)
In the first embodiment, the number of cameras 20 that shoot the object to be imaged is one for each object to be imaged. Embodiment 5 demonstrates the example which image | photographs one imaging | photography object equipment with the several camera 20. FIG.

設備監視システム1および設備監視装置10の構成は実施の形態1と同様である。また、設備監視装置10が実行する処理の手順は、図4のフローチャートに示した通りである。このため、その詳細な説明はここでは繰り返さない。   The configurations of the facility monitoring system 1 and the facility monitoring device 10 are the same as those in the first embodiment. Moreover, the procedure of the process which the equipment monitoring apparatus 10 performs is as having shown to the flowchart of FIG. Therefore, detailed description thereof will not be repeated here.

実施の形態5では、撮影対象設備の撮影条件決定処理(図4のS5)が実施の形態1と異なる。   In the fifth embodiment, the photographing condition determination process (S5 in FIG. 4) of the photographing target facility is different from the first embodiment.

図20は、撮影対象設備の撮影条件決定処理(図4のS5)の詳細を示すフローチャートである。   FIG. 20 is a flowchart showing details of the shooting condition determination process (S5 in FIG. 4) of the shooting target equipment.

設備監視装置10は、ステップS11〜S14に示す処理を実行する。これらの処理は、図5に示したステップS11〜S14と同様である。   The equipment monitoring apparatus 10 executes the processes shown in steps S11 to S14. These processes are the same as steps S11 to S14 shown in FIG.

ステップS14の後、カメラ制御部17は、異常発生確率が閾値TH2以上の設備31(以下、「集中撮影対象設備」という)が存在するか否かを判定する(S51)。閾値TH2は、閾値TH1よりも大きな値であることが望ましい。   After step S14, the camera control unit 17 determines whether or not there is a facility 31 (hereinafter referred to as “centralized imaging target facility”) having an abnormality occurrence probability equal to or higher than a threshold TH2 (S51). The threshold value TH2 is preferably larger than the threshold value TH1.

カメラ制御部17は、集中撮影対象設備が存在する場合には(S51でYES)、集中撮影対象設備を撮影するためのカメラとして、カメラ20Aおよび20Bを割り当てる。   If there is a central shooting target facility (YES in S51), the camera control unit 17 assigns cameras 20A and 20B as cameras for shooting the central shooting target facility.

図21は、撮影対象設備に割り当てられる撮影時間およびカメラ20の一例を示す図である。図21は、撮影対象設備の台数が所定数(例えば、2)よりも大きく、2台のカメラ20Aおよび20Bにより撮影対象設備を撮影する場合を示している。   FIG. 21 is a diagram illustrating an example of the shooting time allocated to the shooting target facility and the camera 20. FIG. 21 shows a case where the number of facilities to be photographed is larger than a predetermined number (for example, 2) and the facilities to be photographed are photographed by two cameras 20A and 20B.

ここで、撮影対象設備31A、31Bおよび31Cの異常発生確率は、それぞれ、20%、80%および40%であるとする。図7に示した例と同様に、カメラ制御部17は、撮影対象設備31A、31Bおよび31Cの1撮影周期(60秒間)あたりの撮影時間を、30秒間と決定する。また、閾値TH2を75%とした場合に、カメラ制御部17は、撮影対象設備31Bの異常発生確率80%が75%以上であることより、撮影対象設備31Bが集中撮影対象設備であると判定し、撮影対象設備31Bを、2台のカメラ20Aおよび20Bで撮影することを決定する。   Here, it is assumed that the occurrence probabilities of the imaging target facilities 31A, 31B, and 31C are 20%, 80%, and 40%, respectively. Similarly to the example illustrated in FIG. 7, the camera control unit 17 determines the shooting time per shooting cycle (60 seconds) of the shooting target facilities 31A, 31B, and 31C as 30 seconds. Further, when the threshold value TH2 is set to 75%, the camera control unit 17 determines that the photographing target facility 31B is a centralized photographing target facility because the abnormality occurrence probability 80% of the photographing target facility 31B is 75% or more. Then, it is determined that the photographing target facility 31B is photographed by the two cameras 20A and 20B.

図22は、カメラ20Aおよび20Bによる、撮影対象設備31A〜31Cの撮影時間の一例を示す図である。   FIG. 22 is a diagram illustrating an example of the shooting time of the shooting target facilities 31A to 31C by the cameras 20A and 20B.

1つのブロック(四角形)が30秒間の撮影時間を示すとした場合、1撮影周期(60秒間)の最初の30秒間では、カメラ20Aが撮影対象設備31Aを撮影し、カメラ20Bが撮影対象設備31Cを撮影する。また、次の30秒間で、カメラ20Aおよび20Bが、撮影対象設備31Bを撮影する。これにより、同時刻に、多方向から撮影対象設備31Bを撮影することができる。   If one block (square) indicates a shooting time of 30 seconds, in the first 30 seconds of one shooting cycle (60 seconds), the camera 20A takes a picture of the shooting target equipment 31A, and the camera 20B sets the shooting target equipment 31C. Shoot. Further, in the next 30 seconds, the cameras 20A and 20B photograph the facility 31B to be photographed. Thereby, the imaging target facility 31B can be imaged from multiple directions at the same time.

図23は、カメラ20Aおよび20Bによる、撮影対象設備31A〜31Cの撮影時間の他の一例を示す図である。   FIG. 23 is a diagram illustrating another example of the shooting time of the shooting target facilities 31A to 31C by the cameras 20A and 20B.

1つのブロック(四角形)が30秒間の撮影時間を示すとした場合、1撮影周期(60秒間)の最初の30秒間では、カメラ20Aが撮影対象設備31Aを撮影し、カメラ20Bが撮影対象設備31Bを撮影する。また、次の30秒間で、カメラ20Aが撮影対象設備31Bを撮影し、カメラ20Bが撮影対象設備31Cを撮影する。これにより、多方向から撮影対象設備31Bを撮影することができる。また、カメラ20Aおよび20Bの撮影時間の重なりを少なくすることにより、撮影対象設備31Bが撮影されていない時間を少なくすることができる。   If one block (square) indicates a shooting time of 30 seconds, in the first 30 seconds of one shooting cycle (60 seconds), the camera 20A takes a picture of the shooting target equipment 31A, and the camera 20B sets the shooting target equipment 31B. Shoot. Further, in the next 30 seconds, the camera 20A captures the imaging target facility 31B, and the camera 20B captures the imaging target facility 31C. Thereby, the imaging target facility 31B can be imaged from multiple directions. Further, by reducing the overlap of the shooting times of the cameras 20A and 20B, it is possible to reduce the time during which the shooting target equipment 31B is not shot.

図20に示した撮影対象設備の撮影条件決定処理(図4のS5)により、カメラ20Aおよび20Bによる撮影対象設備の分担と、各撮影対象設備の撮影時間とが決定される。   By the shooting condition determination processing (S5 in FIG. 4) of the shooting target equipment shown in FIG. 20, the sharing of the shooting target equipment by the cameras 20A and 20B and the shooting time of each shooting target equipment are determined.

カメラ制御処理(図4のS7)において、カメラ制御部17は、これらの撮影条件を用いて、図22または図23に示したようなタイミングで撮影対象設備を撮影するように、カメラ20Aまたは20Bを制御する。   In the camera control process (S7 in FIG. 4), the camera control unit 17 uses these photographing conditions to shoot the equipment to be photographed at the timing shown in FIG. 22 or FIG. To control.

以上説明したように、実施の形態5によると、異常発生確率が閾値TH2以上の対象である集中撮影対象設備をカメラ20Aおよび20Bで撮影することができる。これにより、多方向から集中撮影対象設備を撮影することができ、異常が発生した場合に、詳細に異常発生原因を究明することができる。   As described above, according to the fifth embodiment, it is possible to shoot with the cameras 20 </ b> A and 20 </ b> B the intensive shooting target equipment that is a target whose abnormality occurrence probability is equal to or higher than the threshold TH <b> 2. As a result, it is possible to shoot the facility for centralized imaging from multiple directions, and when an abnormality occurs, the cause of the abnormality can be investigated in detail.

[付記]
実施の形態2では、異常発生確率に応じて撮影対象設備の撮影時間を決定し、実施の形態3では、異常発生確率に応じて撮影対象設備の撮影回数を決定し、実施の形態4では、異常発生確率に応じて撮影対象設備の撮影時のズーム倍率を決定した。これに対し、異常発生確率に加え、事前に設定された設備の重要度を考慮して、撮影時間、撮影回数またはズーム倍率を決定してもよい。例えば、重要度の値が大きい設備ほど重要性が高いとした場合には、異常発生確率と重要度の積が大きいほど、撮影時間を長くしたり、撮影回数を多くしたり、ズーム倍率を大きくしたりする。これにより、撮影対象設備Aと撮影対象設備Bとで異常発生確率が同じであったとしても、撮影対象設備Aの重要性が撮影対象設備Bの重要性よりも高い場合には、撮影対象設備Aの撮影時間を長くしたり、撮影対象設備Aの撮影回数を多くしたり、撮影対象設備Aの撮影時のカメラのズーム倍率を大きくしたりすることができる。なお、撮影時間を長くすることと、撮影回数を多くすることと、ズーム倍率を大きくすることとは、同時に2つ以上を実施してもよい。
[Appendix]
In the second embodiment, the photographing time of the photographing target facility is determined according to the abnormality occurrence probability. In the third embodiment, the number of photographing of the photographing target facility is determined according to the abnormality occurrence probability. In the fourth embodiment, The zoom magnification at the time of photographing of the equipment to be photographed was determined according to the probability of occurrence of abnormality. On the other hand, in addition to the abnormality occurrence probability, the photographing time, the number of photographing times, or the zoom magnification may be determined in consideration of the importance of the equipment set in advance. For example, if equipment with a higher importance value is more important, the greater the product of the probability of occurrence and the importance, the longer the shooting time, the number of shootings, or the greater the zoom magnification. To do. Thus, even if the imaging target equipment A and the imaging target equipment B have the same probability of occurrence, if the importance of the imaging target equipment A is higher than the importance of the imaging target equipment B, the imaging target equipment The shooting time of A can be lengthened, the number of shootings of the shooting target facility A can be increased, or the zoom magnification of the camera when shooting the shooting target facility A can be increased. It should be noted that increasing the shooting time, increasing the number of times of shooting, and increasing the zoom magnification may be performed simultaneously in two or more.

上述の設備監視装置10を構成する構成要素の一部または全部は、1以上のシステムLSI(Large Scale Integration)等の半導体集積回路から構成されているとしてもよい。システムLSIは、複数の構成部を1個のチップ上に集積して製造された超多機能LSIであり、具体的には、マイクロプロセッサ、ROM、RAMなどを含んで構成されるコンピュータシステムである。RAMには、コンピュータプログラムが記憶されている。マイクロプロセッサが、コンピュータプログラムに従って動作することにより、システムLSIは、その機能を達成する。   Part or all of the components constituting the facility monitoring apparatus 10 may be configured by one or more semiconductor integrated circuits such as a system LSI (Large Scale Integration). The system LSI is an ultra-multifunctional LSI manufactured by integrating a plurality of components on a single chip, and specifically, a computer system including a microprocessor, ROM, RAM, and the like. . A computer program is stored in the RAM. The system LSI achieves its functions by the microprocessor operating according to the computer program.

また、本発明は、コンピュータを、設備監視装置10として機能させるためのコンピュータプログラムであってもよい。   Further, the present invention may be a computer program for causing a computer to function as the facility monitoring apparatus 10.

上記コンピュータプログラムは、HDD、CD−ROM、半導体メモリなどのコンピュータ読取可能な非一時的な記録媒体に記録して流通させることもできるし、電気通信回線、無線または有線通信回線、インターネットを代表とするネットワーク、データ放送等を経由して流通させることもできる。
また、設備監視装置10は、複数のコンピュータにより実現されてもよい。
The computer program can be recorded and distributed on a computer-readable non-transitory recording medium such as an HDD, CD-ROM, semiconductor memory, etc., and represented by an electric communication line, a wireless or wired communication line, and the Internet. Distribution via a network, data broadcasting, etc.
Further, the facility monitoring apparatus 10 may be realized by a plurality of computers.

また、設備監視装置10の一部または全部の機能がクラウドコンピューティングによって提供されてもよい。つまり、設備監視装置10の一部または全部の機能がクラウドサーバにより実現されていてもよい。例えば、設備監視装置10において、異常発生度算出部15の機能がクラウドサーバにより実現されていてもよい。設備監視装置10は、センサ40から取得した計測値をクラウドサーバに送信し、クラウドサーバから設備31の異常発生確率を取得する構成であってもよい。
さらに、上記実施の形態をそれぞれ組み合わせるとしてもよい。例えば、実施の形態2と3とを組み合わせ、カメラ制御部17は、異常発生確率が高い撮影対象設備ほど、多くの撮影時間を割当て、かつ、多くの撮影回数を割り当てるように、カメラを制御してもよい。
In addition, some or all of the functions of the facility monitoring apparatus 10 may be provided by cloud computing. That is, a part or all of the functions of the facility monitoring apparatus 10 may be realized by the cloud server. For example, in the facility monitoring apparatus 10, the function of the abnormality occurrence degree calculation unit 15 may be realized by a cloud server. The facility monitoring apparatus 10 may be configured to transmit the measurement value acquired from the sensor 40 to the cloud server and acquire the abnormality occurrence probability of the facility 31 from the cloud server.
Further, the above embodiments may be combined. For example, in combination with Embodiments 2 and 3, the camera control unit 17 controls the camera so as to allocate more shooting time and more shooting times to a shooting target facility with a higher probability of abnormality. May be.

以上の説明により、本発明は以下に示す付記1として実現することもできる。
[付記1]
複数の対象を撮影するカメラを制御するためのカメラ制御プログラムであって、
コンピュータを、
各々が1以上の対象に関連付けられた1以上のセンサから、当該センサで計測された計測値を取得する計測値取得部と、
上記計測値取得部が取得した上記計測値に基づいて、各対象における異常発生の可能性の度合いを示す異常発生度を算出する異常発生度算出部と、
上記異常発生度算出部が算出した上記異常発生度に基づいて、上記複数の対象の中から撮影対象を選択する撮影対象選択部と、
上記撮影対象選択部が選択した上記撮影対象を撮影するように、上記カメラを制御するカメラ制御部と
して機能させるためのカメラ制御プログラム。
From the above description, the present invention can also be realized as Supplementary Note 1 shown below.
[Appendix 1]
A camera control program for controlling a camera for photographing a plurality of objects,
Computer
A measurement value acquisition unit that acquires measurement values measured by the sensors from one or more sensors each associated with one or more objects;
Based on the measurement value acquired by the measurement value acquisition unit, an abnormality occurrence degree calculation unit that calculates an abnormality occurrence degree indicating the degree of possibility of occurrence of abnormality in each target;
Based on the abnormality occurrence degree calculated by the abnormality occurrence degree calculation unit, an imaging object selection unit that selects an imaging object from the plurality of objects,
The camera control program for functioning as a camera control part which controls the said camera so that the said imaging | photography object selected by the said imaging | photography target selection part may be image | photographed.

今回開示された実施の形態はすべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した意味ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味および範囲内でのすべての変更が含まれることが意図される。   The embodiment disclosed this time should be considered as illustrative in all points and not restrictive. The scope of the present invention is defined by the terms of the claims, rather than the meanings described above, and is intended to include any modifications within the scope and meaning equivalent to the terms of the claims.

1 設備監視システム
10 設備監視装置
11 通信I/F部
12 記憶装置
13 画像取得部
14 計測値取得部
15 異常発生度算出部
16 プリセット情報選択部
17 カメラ制御部
20 カメラ
20A カメラ
20B カメラ
30 工場
31 設備
31A 撮影対象設備
31B 撮影対象設備
31C 撮影対象設備
35 ネットワーク
40 センサ
50 プリセット情報テーブル
DESCRIPTION OF SYMBOLS 1 Equipment monitoring system 10 Equipment monitoring apparatus 11 Communication I / F part 12 Storage device 13 Image acquisition part 14 Measurement value acquisition part 15 Abnormality degree calculation part 16 Preset information selection part 17 Camera control part 20 Camera 20A Camera 20B Camera 30 Factory 31 Equipment 31A Equipment to be photographed 31B Equipment to be photographed 31C Equipment to be photographed 35 Network 40 Sensor 50 Preset information table

Claims (10)

複数の対象を撮影するカメラを制御するためのカメラ制御プログラムであって、
コンピュータを、
各々が1以上の対象に関連付けられた1以上のセンサから、当該センサで計測された計測値を取得する計測値取得部と、
前記計測値取得部が取得した前記計測値に基づいて、各対象における異常発生の可能性の度合いを示す異常発生度を算出する異常発生度算出部と、
各対象を撮影するための前記カメラのプリセット情報を示したプリセット情報テーブルの中から、前記異常発生度算出部が算出した前記異常発生度に基づいて、前記プリセット情報を選択するプリセット情報選択部と、
前記プリセット情報選択部が選択した前記プリセット情報に基づいて、前記カメラを制御するカメラ制御部と
して機能させるためのカメラ制御プログラム。
A camera control program for controlling a camera for photographing a plurality of objects,
Computer
A measurement value acquisition unit that acquires measurement values measured by the sensors from one or more sensors each associated with one or more objects;
Based on the measurement value acquired by the measurement value acquisition unit, an abnormality occurrence degree calculation unit that calculates an abnormality occurrence degree indicating a degree of possibility of occurrence of abnormality in each target;
A preset information selection unit that selects the preset information based on the abnormality occurrence degree calculated by the abnormality occurrence degree calculation unit from a preset information table indicating preset information of the camera for photographing each target; ,
A camera control program for causing a camera control unit to control the camera based on the preset information selected by the preset information selection unit.
前記カメラ制御部は、前記異常発生度が高い対象ほど長時間および高頻度の少なくとも一方の条件で撮影するように、前記カメラの撮影タイミングを制御する
請求項1に記載のカメラ制御プログラム。
The camera control program according to claim 1, wherein the camera control unit controls the shooting timing of the camera so that an object with a higher degree of abnormality occurrence is imaged under at least one of a long time and a high frequency.
前記カメラ制御部は、前記異常発生度が高い対象ほど高精細で撮影するように、前記カメラを制御する
請求項1または請求項2に記載のカメラ制御プログラム。
The camera control program according to claim 1, wherein the camera control unit controls the camera so that an object with a higher degree of abnormality occurrence is photographed with higher definition.
前記プリセット情報選択部は、前記異常発生度が第1閾値以上の対象を撮影するための前記プリセット情報を選択する
請求項1〜請求項3のいずれか1項に記載のカメラ制御プログラム。
The camera control program according to any one of claims 1 to 3, wherein the preset information selection unit selects the preset information for photographing an object whose abnormality occurrence degree is a first threshold or more.
前記カメラ制御部は、前記異常発生度が前記第1閾値以上の対象の数が所定数を超える場合には、前記異常発生度が前記第1閾値以上の対象を、前記カメラおよび他のカメラで撮影するように、前記カメラおよび前記他のカメラを制御する
請求項4に記載のカメラ制御プログラム。
When the number of objects having the abnormality occurrence level equal to or greater than the first threshold exceeds a predetermined number, the camera control unit selects the object having the abnormality occurrence degree equal to or greater than the first threshold between the camera and another camera. The camera control program according to claim 4, wherein the camera and the other camera are controlled to take a picture.
前記カメラ制御部は、前記異常発生度が第2閾値以上の対象を、前記カメラおよび他のカメラで撮影するように、前記カメラおよび前記他のカメラを制御する
請求項1〜請求項5のいずれか1項に記載のカメラ制御プログラム。
The said camera control part controls the said camera and the said other camera so that the said abnormality occurrence degree may image | photograph the object more than a 2nd threshold value with the said camera and another camera. The camera control program according to claim 1.
前記カメラ制御部は、各対象に事前に設定された重要度が高い対象ほど長時間および高頻度の少なくとも一方の条件で撮影するように、前記カメラの撮影タイミングを制御する
請求項1〜請求項6のいずれか1項に記載のカメラ制御プログラム。
The camera control unit controls the shooting timing of the camera so that an object with higher importance set in advance for each object is imaged under at least one of a long time period and a high frequency condition. The camera control program according to any one of claims 6 to 6.
前記カメラ制御部は、各対象に事前に設定された重要度が高い対象ほど高精細で撮影するように、前記カメラを制御する
請求項1〜請求項7のいずれか1項に記載のカメラ制御プログラム。
The camera control according to any one of claims 1 to 7, wherein the camera control unit controls the camera so that an object having a higher importance set in advance for each object is photographed with higher definition. program.
複数の対象を撮影するカメラを制御するためのカメラ制御装置であって、
各々が1以上の対象に関連付けられた1以上のセンサから、当該センサで計測された計測値を取得する計測値取得部と、
前記計測値取得部が取得した前記計測値に基づいて、各対象における異常発生の可能性の度合いを示す異常発生度を算出する異常発生度算出部と、
各対象を撮影するための前記カメラのプリセット情報を示したプリセット情報テーブルの中から、前記異常発生度算出部が算出した前記異常発生度に基づいて、前記プリセット情報を選択するプリセット情報選択部と、
前記プリセット情報選択部が選択した前記プリセット情報に基づいて、前記カメラを制御するカメラ制御部と
を備えるカメラ制御装置。
A camera control device for controlling a camera for photographing a plurality of objects,
A measurement value acquisition unit that acquires measurement values measured by the sensors from one or more sensors each associated with one or more objects;
Based on the measurement value acquired by the measurement value acquisition unit, an abnormality occurrence degree calculation unit that calculates an abnormality occurrence degree indicating a degree of possibility of occurrence of abnormality in each target;
A preset information selection unit that selects the preset information based on the abnormality occurrence degree calculated by the abnormality occurrence degree calculation unit from a preset information table indicating preset information of the camera for photographing each target; ,
A camera control device comprising: a camera control unit that controls the camera based on the preset information selected by the preset information selection unit.
複数の対象を撮影するカメラを制御するためのカメラ制御方法であって、
各々が1以上の対象に関連付けられた1以上のセンサから、当該センサで計測された計測値を取得するステップと、
取得された前記計測値に基づいて、各対象における異常発生の可能性の度合いを示す異常発生度を算出するステップと、
各対象を撮影するための前記カメラのプリセット情報を示したプリセット情報テーブルの中から、算出された前記異常発生度に基づいて、前記プリセット情報を選択するステップと、
選択された前記プリセット情報に基づいて、前記カメラを制御するステップと
を含むカメラ制御方法。
A camera control method for controlling a camera that captures a plurality of objects,
Obtaining measured values measured by the sensors from one or more sensors each associated with one or more objects;
Based on the acquired measurement value, calculating an abnormality occurrence level indicating a degree of possibility of abnormality occurrence in each target;
Selecting the preset information based on the calculated degree of occurrence of abnormality from a preset information table indicating preset information of the camera for photographing each target;
Controlling the camera based on the selected preset information.
JP2017126872A 2017-06-29 2017-06-29 Camera control program, camera control method and camera control device Active JP6834811B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2017126872A JP6834811B2 (en) 2017-06-29 2017-06-29 Camera control program, camera control method and camera control device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2017126872A JP6834811B2 (en) 2017-06-29 2017-06-29 Camera control program, camera control method and camera control device

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2021016246A Division JP7088330B2 (en) 2021-02-04 2021-02-04 Camera control program, camera control method and camera control device

Publications (2)

Publication Number Publication Date
JP2019012871A true JP2019012871A (en) 2019-01-24
JP6834811B2 JP6834811B2 (en) 2021-02-24

Family

ID=65228143

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017126872A Active JP6834811B2 (en) 2017-06-29 2017-06-29 Camera control program, camera control method and camera control device

Country Status (1)

Country Link
JP (1) JP6834811B2 (en)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02168393A (en) * 1988-12-22 1990-06-28 Mitsubishi Electric Corp Plant monitoring device
JP2003006775A (en) * 2001-04-19 2003-01-10 Shinko Electric Co Ltd Earth/sand disaster previously sensing and warning system and debris flow detector
WO2006132029A1 (en) * 2005-06-07 2006-12-14 Matsushita Electric Industrial Co., Ltd. Monitoring system, monitoring method, and camera terminal

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02168393A (en) * 1988-12-22 1990-06-28 Mitsubishi Electric Corp Plant monitoring device
JP2003006775A (en) * 2001-04-19 2003-01-10 Shinko Electric Co Ltd Earth/sand disaster previously sensing and warning system and debris flow detector
WO2006132029A1 (en) * 2005-06-07 2006-12-14 Matsushita Electric Industrial Co., Ltd. Monitoring system, monitoring method, and camera terminal

Also Published As

Publication number Publication date
JP6834811B2 (en) 2021-02-24

Similar Documents

Publication Publication Date Title
JP6092934B2 (en) Automatic configuration of replacement camera
EP3024227B1 (en) Image processing apparatus and image processing method
US9477891B2 (en) Surveillance system and method based on accumulated feature of object
KR101187908B1 (en) Integrated surveillance system diplaying a plural of event images and method using the same
CN108391147B (en) Display control device and display control method
JP2014241505A (en) Photographing apparatus, photographing method, template generation apparatus, template generation method, and program
TW201835856A (en) Object tracking system and method
KR101685950B1 (en) CCTV recording system having self-diagnosis function
JP2017097702A (en) Monitor system and monitor control device of the same
CN114245071A (en) Intelligent monitoring early warning method and device and monitoring system
JP7088330B2 (en) Camera control program, camera control method and camera control device
JP6834811B2 (en) Camera control program, camera control method and camera control device
JP6015756B2 (en) Position management device, position management system, position management method, and position management program
JP2019169021A (en) Equipment monitoring system
JP2018201146A (en) Image correction apparatus, image correction method, attention point recognition apparatus, attention point recognition method, and abnormality detection system
JP7146416B2 (en) Information processing device, information processing system, information processing method, and program
JP2008085832A (en) Monitoring camera, control method of monitoring camera, and monitoring camera system
KR101567026B1 (en) Apparatus and method for determining abnormal situation
WO2020044779A1 (en) Installation environment estimation device and program
KR101196408B1 (en) Collaboration monitoring system and method for collaboration monitoring
JPWO2021210213A5 (en)
US20190279477A1 (en) Monitoring system and information processing apparatus
CN110503028B (en) Sensor, system, method and medium for determining distribution of objects in an area
JP6705486B2 (en) Object detection apparatus, system, method and program
JP6091079B2 (en) Control device, control method and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20200221

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20201105

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210105

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210118

R150 Certificate of patent or registration of utility model

Ref document number: 6834811

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250