JP2017156928A - Video monitoring device, video monitoring method, and video monitoring system - Google Patents

Video monitoring device, video monitoring method, and video monitoring system Download PDF

Info

Publication number
JP2017156928A
JP2017156928A JP2016038767A JP2016038767A JP2017156928A JP 2017156928 A JP2017156928 A JP 2017156928A JP 2016038767 A JP2016038767 A JP 2016038767A JP 2016038767 A JP2016038767 A JP 2016038767A JP 2017156928 A JP2017156928 A JP 2017156928A
Authority
JP
Japan
Prior art keywords
image
control information
production line
information
control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2016038767A
Other languages
Japanese (ja)
Inventor
若林　正男
Masao Wakabayashi
正男 若林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Priority to JP2016038767A priority Critical patent/JP2017156928A/en
Publication of JP2017156928A publication Critical patent/JP2017156928A/en
Pending legal-status Critical Current

Links

Images

Classifications

    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30—Computing systems specially adapted for manufacturing

Landscapes

  • General Factory Administration (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

PROBLEM TO BE SOLVED: To solve the problem that it is possible to confirm a manufactured individual piece and position by image recognition from a series of images if an image of a manufactured individual piece that is manufactured in a production line is extracted and if discrimination of the manufactured individual piece is possible, however, in a case where there is no difference between features of individuals such as a food, otherwise in the case of a manufactured individual piece to which it is possible to attach a discriminator or the like, identification of a work step in which the manufactured individual piece is present is not possible, and it is difficult to automatically extract an image in a work step of the manufactured individual piece.SOLUTION: An image of a manufactured individual piece in a manufacture step is automatically extracted and displayed from an image of a monitoring camera that images a production line based on a control information acquired from a control apparatus that controls an apparatus of a production line of the manufactured individual piece. Therefore, if, for example, a problem is found on a specific manufactured individual piece, even in the case of a manufactured individual piece which cannot be discriminated by image recognition, a confirmation work can be saved in labor than the case in which a user extracts an image manually.SELECTED DRAWING: Figure 2

Description

本発明は、映像により製造工程を監視する映像監視装置、映像監視方法、および映像監視システムに関するものである。   The present invention relates to a video monitoring apparatus, a video monitoring method, and a video monitoring system that monitor a manufacturing process using video.

工場内で使用される生産ラインの映像監視システムでは、特定の生産ラインや工程における生産ラインの制御機器の制御データと監視カメラ画像を紐付けて管理することで、トラブル発生時の原因解析を容易にしているものがある。しかし、例えば特定の製造個体で問題が見つかった場合など、その製造個体における前工程の作業内容を確認するためには、時刻以外に検索の手掛かりとなる有効な情報がなく、確認作業の負荷が高いことが課題である。そこで、特許文献１では、画像認識によって製造個体を識別することにより、複数にまたがる作業工程の作業内容を一連の画像で確認する手法が開示されている。   The production line video monitoring system used in the factory makes it easy to analyze the cause of troubles by linking and managing the control data of the control equipment of the production line in a specific production line or process and the monitoring camera image. There is something to do. However, for example, when a problem is found in a specific manufacturing individual, in order to confirm the work contents of the previous process in that manufacturing individual, there is no effective information that is a clue to search other than the time, and the burden of confirmation work is High is the challenge. Therefore, Patent Document 1 discloses a technique for confirming work contents of a plurality of work processes with a series of images by identifying a manufactured individual by image recognition.

特開２００３−１５０２３０号公報JP 2003-150230 A

特許文献１のように、製造個体の識別が可能な場合であれば、生産ラインで製造される製造個体の画像を抽出する場合、一連の画像から画像認識によりその製造個体と位置を確認することが可能である。しかし、例えば食品など個体別の特徴に差が無い、またはバーコードなど識別子となるものを付与することが困難な製造個体の場合には、製造個体がどの作業工程であるかを特定することができず、製造個体の作業中の工程の画像を自動的に抽出することが困難である。   If a manufacturing individual can be identified as in Patent Document 1, when an image of a manufacturing individual manufactured on a production line is extracted, the manufacturing individual and position are confirmed by image recognition from a series of images. Is possible. However, in the case of a manufacturing individual that has no difference in individual characteristics such as food or it is difficult to provide an identifier such as a barcode, it is possible to specify which work process the manufacturing individual is. Therefore, it is difficult to automatically extract an image of a process in which a manufacturing individual is working.

この発明に係る映像監視装置は、製造個体を生産する生産ラインの機器を制御する制御機器から制御情報を取得する制御情報取得手段、前記生産ラインを撮影する監視カメラから画像を取得する画像取得手段、前記制御情報手段で取得した制御情報と前記監視カメラが撮影する撮影範囲の情報を含むカメラ情報とに基づいて、前記画像から前記製造個体を含む画像を抽出する画像抽出手段、前記画像抽出手段で抽出された画像を表示する表示手段、を備えたことを特徴とする。   The video monitoring apparatus according to the present invention includes a control information acquisition unit that acquires control information from a control device that controls a device of a production line that produces a manufacturing individual, and an image acquisition unit that acquires an image from a monitoring camera that captures the production line Image extracting means for extracting an image including the manufactured individual from the image based on control information acquired by the control information means and camera information including information on a photographing range photographed by the monitoring camera, and the image extracting means And a display means for displaying the image extracted in (1).

この発明は、製造個体の生産ラインの機器を制御する制御機器から取得した制御情報に基づいて、生産ラインを撮影する監視カメラの画像から、製造個体の製造工程の画像を自動的に抽出して表示することができる。そのため、例えば特定の製造個体で問題が見つかった場合に、画像認識では識別不可な製造個体であっても、ユーザがそれぞれの工程の画像を手作業で表示して確認するよりも確認作業を省力化することができる。   The present invention automatically extracts an image of a manufacturing process of a manufacturing individual from an image of a monitoring camera that captures the production line based on control information acquired from a control device that controls the device of the manufacturing line of the manufacturing individual. Can be displayed. Therefore, for example, when a problem is found in a specific manufacturing individual, even if it is a manufacturing individual that cannot be identified by image recognition, the user can save confirmation work rather than manually displaying and checking the image of each process. Can be

この発明の実施の形態１における映像監視システム１のシステム構成図である。1 is a system configuration diagram of a video monitoring system 1 according to Embodiment 1 of the present invention. この発明の実施の形態１における映像監視装置２の構成図である。It is a block diagram of the video monitoring apparatus 2 in Embodiment 1 of this invention. この発明の実施の形態１における映像監視装置２のハードウェア構成図である。It is a hardware block diagram of the video monitoring apparatus 2 in Embodiment 1 of this invention. この発明の実施の形態１における映像監視装置２の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the video monitoring apparatus 2 in Embodiment 1 of this invention. この発明の実施の形態１における画像抽出手段９の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the image extraction means 9 in Embodiment 1 of this invention. この発明の実施の形態２における映像監視装置２の構成図である。It is a block diagram of the video monitoring apparatus 2 in Embodiment 2 of this invention. この発明の実施の形態２における映像監視装置２の動作を示すフローチャートである。It is a flowchart which shows operation | movement of the video monitoring apparatus 2 in Embodiment 2 of this invention.

実施の形態１．
図１は、この発明の実施の形態１における映像監視システム１のシステム構成図である。
生産ラインを監視する映像監視システム１は、製造個体を生産する生産ラインの映像を監視する映像監視装置２と、生産ラインにおける工作機器またはベルトコンベアを含む機器の動作を制御する制御機器４と、生産ラインを撮影するために設置された複数台の監視カメラ３と、映像監視装置２の画像を表示するディスプレイ５から構成される。 Embodiment 1 FIG.
FIG. 1 is a system configuration diagram of a video surveillance system 1 according to Embodiment 1 of the present invention.
A video monitoring system 1 that monitors a production line includes a video monitoring device 2 that monitors a video of a production line that produces a manufacturing individual, a control device 4 that controls the operation of a machine tool or a device including a belt conveyor in the production line, A plurality of surveillance cameras 3 installed for photographing the production line and a display 5 for displaying an image of the video surveillance apparatus 2 are configured.

映像監視システム１は、例えば、個体識別が付与されていない製造個体の製造工程で制御機器４が機器を制御する制御情報を用いて、製造個体を含む機器を撮影する監視カメラ３を特定し、特定した監視カメラ３が撮影する画像を自動で切り替えて、ディスプレイ５に表示する。
監視カメラ３、または制御機器４、またはディスプレイ５は、映像監視装置２と一体でもよい。また、映像監視システム１は、制御機器４を除く映像監視装置２と監視カメラ３とディスプレイ５から構成されてもよい。 The video monitoring system 1 specifies, for example, a monitoring camera 3 that captures a device including a manufacturing individual using control information in which the control device 4 controls the device in a manufacturing process of a manufacturing individual to which individual identification is not given, The images captured by the identified surveillance camera 3 are automatically switched and displayed on the display 5.
The monitoring camera 3, the control device 4, or the display 5 may be integrated with the video monitoring device 2. Further, the video monitoring system 1 may include a video monitoring device 2 excluding the control device 4, a monitoring camera 3, and a display 5.

尚、実施の形態１では、生産ラインが工作機器とベルトコンベアで構成されているとして説明する。また、１工程には１つの機器が設置されていると想定して説明するが、１工程に複数の機器が設置されている場合であっても、制御機器４が制御する機器の識別情報と機器の位置、および機器に対する制御情報が対応づけられた機器情報を用いて、製造個体を含む機器を撮影する監視カメラ３を特定することができ、特定した監視カメラ３が撮影する画像を自動的に抽出することができる。機器情報は、映像監視装置２に予め記憶されているものとして説明するが、外部に記憶された情報を参照してもよい。   In the first embodiment, it is assumed that the production line is composed of machine tools and a belt conveyor. In addition, the description will be made assuming that one device is installed in one process, but even when a plurality of devices are installed in one process, the identification information of the device controlled by the control device 4 and Using the device information in which the position of the device and the control information for the device are associated, the monitoring camera 3 that captures the device including the manufactured individual can be identified, and the image captured by the identified surveillance camera 3 is automatically selected. Can be extracted. The device information will be described as being stored in advance in the video monitoring device 2, but information stored outside may be referred to.

図２は、この発明の実施の形態１における映像監視装置２の構成図である。
映像監視装置２は、監視カメラ３の撮影情報を取得し、取得した撮影情報を記憶手段７に記憶する撮影情報取得手段６と、制御機器４から制御情報を取得する制御情報取得手段８と、取得した制御情報から製造個体の生産ラインの位置を検出し、検出した位置を撮影する監視カメラ３を特定し、取得した撮影情報の画像から特定した監視カメラ３の画像を抽出する画像抽出手段９と、抽出した画像をディスプレイ５に表示する表示手段１０から構成される。 FIG. 2 is a configuration diagram of the video monitoring apparatus 2 according to Embodiment 1 of the present invention.
The video monitoring apparatus 2 acquires shooting information of the monitoring camera 3 and stores the acquired shooting information in the storage unit 7. The control information acquisition unit 8 acquires control information from the control device 4. Image extraction means 9 for detecting the position of the production line of the manufactured individual from the acquired control information, specifying the monitoring camera 3 that images the detected position, and extracting the specified image of the monitoring camera 3 from the image of the acquired imaging information. And display means 10 for displaying the extracted image on the display 5.

図３は、この発明の実施の形態１における映像監視装置２のハードウェア構成図である。
映像監視装置２はコンピュータであり、演算装置１１と、補助記憶装置１２と、主記憶装置１３と、通信装置１４と、入出力インターフェース１５から構成される。映像監視装置２は、スマートフォン、タブレット等の携帯端末でもよい。
演算装置１１は、プログラムを実行するＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）である。 FIG. 3 is a hardware configuration diagram of the video monitoring apparatus 2 according to Embodiment 1 of the present invention.
The video monitoring device 2 is a computer, and includes an arithmetic device 11, an auxiliary storage device 12, a main storage device 13, a communication device 14, and an input / output interface 15. The video monitoring device 2 may be a mobile terminal such as a smartphone or a tablet.
The arithmetic device 11 is a CPU (Central Processing Unit) that executes a program.

補助記憶装置１２は、例えばＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）やフラッシュメモリ、ＳＳＤ（Ｓｏｌｉｄ Ｓｔａｔｅ Ｄｒｉｖｅ）、ハードディスク装置である。補助記憶装置１２は、ＳＤ（Ｓｅｃｕｒｅ Ｄｉｄｉｔａｌ）カードなどの外部記録メディアでもよいし、一次記憶メモリＲＡＭでもよいし、また、映像監視装置２とは別の映像レコーダ等の記録装置であってもよい。   The auxiliary storage device 12 is, for example, a ROM (Read Only Memory), a flash memory, an SSD (Solid State Drive), or a hard disk device. The auxiliary storage device 12 may be an external recording medium such as an SD (Secure Digital) card, a primary storage memory RAM, or a recording device such as a video recorder different from the video monitoring device 2. .

主記憶装置１３は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）である。
通信装置１４は、例えばＮＩＣ（Ｎｅｔｗｏｒｋ Ｉｎｔｅｒｆａｃｅ Ｃａｒｄ）である。
入出力インターフェース１５は、たとえば接続されディスプレイに画像を出力するインターフェースである。 The main storage device 13 is a RAM (Random Access Memory).
The communication device 14 is, for example, a NIC (Network Interface Card).
The input / output interface 15 is an interface that is connected and outputs an image to a display, for example.

図２の撮影情報取得手段６、制御情報取得手段８、および画像抽出手段９は、図３の主記憶装置１３にロードされたプログラムが、順次、演算装置１１に読み込まれ、実行される。プログラムは、通常は補助記憶装置１２に記憶されており、主記憶装置１３にロードされる。また、撮影情報取得手段６は、通信装置１４を介して監視カメラ３から撮影情報を取得し、制御情報取得手段８は、通信装置１４を介して制御機器４から制御情報を取得する。記憶手段７は、補助記憶装置１２に相当し、表示手段１０は入出力インターフェース１５に相当する。   2, the program loaded in the main storage device 13 in FIG. 3 is sequentially read into the arithmetic device 11 and executed. The program is normally stored in the auxiliary storage device 12 and loaded into the main storage device 13. Further, the shooting information acquisition unit 6 acquires shooting information from the monitoring camera 3 via the communication device 14, and the control information acquisition unit 8 acquires control information from the control device 4 via the communication device 14. The storage unit 7 corresponds to the auxiliary storage device 12, and the display unit 10 corresponds to the input / output interface 15.

以下、映像監視装置２の各構成について説明する。
撮影情報取得手段６は、監視カメラ３が撮影した画像、撮影した時刻、および監視カメラを識別する識別情報を取得し、取得した撮影情報を記憶手段７に記憶する。
記憶手段７は、撮影情報取得手段６が取得した撮影情報を記憶し、記憶した撮影情報は画像抽出手段９から参照される。
制御情報取得手段８は、制御機器４から制御情報を取得し、取得した制御情報を画像抽出手段９に出力する。 Hereinafter, each configuration of the video monitoring apparatus 2 will be described.
The shooting information acquisition unit 6 acquires an image shot by the monitoring camera 3, a shooting time, and identification information for identifying the monitoring camera, and stores the acquired shooting information in the storage unit 7.
The storage unit 7 stores the shooting information acquired by the shooting information acquisition unit 6, and the stored shooting information is referred to by the image extraction unit 9.
The control information acquisition unit 8 acquires control information from the control device 4 and outputs the acquired control information to the image extraction unit 9.

画像抽出手段９は、制御情報取得手段８から入力された制御情報と、制御機器４が制御する機器の識別情報と機器の位置および機器に対する制御情報が対応づけられた機器情報から、制御機器４が制御している機器で加工または移動中の製造個体の位置を検出する。そして、検出した位置と、監視カメラ３の識別情報と監視カメラ３が撮影する撮影範囲の情報を含むカメラ情報から、検出した位置を撮影する監視カメラ３を特定する。カメラ情報は、映像監視装置２に予め記憶されている、または外部に記憶されている情報を参照できるとする。そして、特定した監視カメラ３で撮影された画像を記憶手段７から抽出して、抽出した画像と検出した位置を表示手段１０に出力する。画像抽出手段９は、特定した監視カメラ３の画像を撮影情報取得手段６から取得して表示手段１０に出力してもよい。 表示手段１０は、画像抽出手段９から入力された画像と検出した位置をディスプレイ５に表示する。   The image extraction unit 9 is configured to control the control device 4 based on the control information input from the control information acquisition unit 8, the device information associated with the device identification information controlled by the control device 4, the device position, and the control information for the device. Detects the position of the manufacturing object being processed or moved by the equipment controlled by. And the monitoring camera 3 which image | photographs the detected position is specified from the detected position, the camera information containing the identification information of the monitoring camera 3, and the information of the imaging | photography range which the monitoring camera 3 image | photographs. Assume that the camera information can refer to information stored in advance in the video monitoring device 2 or stored externally. Then, the image captured by the specified monitoring camera 3 is extracted from the storage unit 7, and the extracted image and the detected position are output to the display unit 10. The image extraction unit 9 may acquire the specified image of the monitoring camera 3 from the photographing information acquisition unit 6 and output it to the display unit 10. The display unit 10 displays the image input from the image extraction unit 9 and the detected position on the display 5.

次に、実施の形態１における映像監視装置２の動作について説明する。
図４は、この発明の実施の形態１における映像監視装置２の動作を示すフローチャートである。
撮影情報取得手段６は、監視カメラ３から常時送信される撮影情報を取得し（ステップ（以下Ｓ）１）、記憶手段７に記憶する。撮影情報は、例えば監視カメラ３が撮影した画像、撮影した時刻、および監視カメラを識別する識別情報を含む。 Next, the operation of the video monitoring apparatus 2 in the first embodiment will be described.
FIG. 4 is a flowchart showing the operation of the video monitoring apparatus 2 according to Embodiment 1 of the present invention.
The shooting information acquisition unit 6 acquires shooting information that is constantly transmitted from the monitoring camera 3 (step (hereinafter S) 1) and stores it in the storage unit 7. The shooting information includes, for example, an image shot by the monitoring camera 3, a shooting time, and identification information for identifying the monitoring camera.

また、制御情報取得手段８は、制御機器４から制御情報を取得し（Ｓ２）、取得した制御情報を画像抽出手段９に出力する。制御情報には、例えば生産ラインの所定の箇所に設置されたセンサのセンサ値、ベルトコンベアのモータの回転数を含む動作値、工作機器の動作値、および時刻情報を含む。センサ値には、製造個体の監視開始の位置を検出するセンサ値を含む。   Further, the control information acquisition unit 8 acquires control information from the control device 4 (S2), and outputs the acquired control information to the image extraction unit 9. The control information includes, for example, a sensor value of a sensor installed at a predetermined location on the production line, an operation value including the rotation speed of the motor of the belt conveyor, an operation value of the machine tool, and time information. The sensor value includes a sensor value for detecting a monitoring start position of the manufactured individual.

そして、画像抽出手段９は、入力された制御情報に基づいて、制御機器４が制御している機器で加工または移動中の製造個体の位置を検出し（Ｓ３）、検出した位置を撮影する監視カメラ３を特定する（Ｓ４）。位置を検出し、監視カメラ３を特定する処理の詳細な説明は後述する。そして、特定した監視カメラ３の画像から入力された制御情報の時刻情報と一致する画像を記憶手段７から抽出する（Ｓ５）。そして、抽出した画像と検出した位置を表示手段１０に出力する。抽出した画像に、入力された制御情報と機器情報から判定できる製造工程を付加して表示してもよい。
そして、表示手段１０は、入力された画像と検出した位置をディスプレイ５に表示する（Ｓ６）。
尚、撮影情報取得手段６は、Ｓ１で監視カメラ３から撮影情報を取得した時に、記憶手段７に記憶してもよいし、Ｓ５で特定された監視カメラ３の撮影情報のみを記憶手段７に記憶してもよい。 Then, the image extraction means 9 detects the position of the manufacturing object being processed or moved by the device controlled by the control device 4 based on the input control information (S3), and monitors the detected position for photographing. The camera 3 is specified (S4). A detailed description of the process of detecting the position and identifying the monitoring camera 3 will be described later. Then, an image that matches the time information of the control information input from the identified image of the monitoring camera 3 is extracted from the storage means 7 (S5). The extracted image and the detected position are output to the display means 10. The extracted image may be displayed with a manufacturing process that can be determined from the input control information and device information.
Then, the display means 10 displays the input image and the detected position on the display 5 (S6).
The photographing information acquisition means 6 may store the photographing information from the monitoring camera 3 in S1 in the storage means 7 or store only the photographing information of the monitoring camera 3 specified in S5 in the storage means 7. You may remember.

次に、画像抽出手段９が監視カメラ３を特定して、特定した監視カメラ３の画像を抽出する処理（Ｓ３とＳ４の処理）について説明する。
図５は、この発明の実施の形態１における画像抽出手段９の動作を示すフローチャートである。
画像抽出手段９は、制御情報取得手段８から取得した制御情報が入力されると（Ｓ１１）、制御情報の制御値がベルトコンベアを動作させる制御値であるか否かを判定する（Ｓ１２）。 Next, processing (S3 and S4) in which the image extraction unit 9 specifies the monitoring camera 3 and extracts an image of the specified monitoring camera 3 will be described.
FIG. 5 is a flowchart showing the operation of the image extraction means 9 according to Embodiment 1 of the present invention.
When the control information acquired from the control information acquisition unit 8 is input (S11), the image extraction unit 9 determines whether or not the control value of the control information is a control value for operating the belt conveyor (S12).

画像抽出手段９は、入力された制御情報と予め記憶された機器情報から、制御情報の制御値がベルトコンベアの動作であると判定した場合、例えば、制御情報からモータの総回転数の情報を抽出し、総回転数からベルトコンベアの動作により移動する距離を算出する（Ｓ１３）。   When the image extraction means 9 determines from the input control information and previously stored device information that the control value of the control information is the operation of the belt conveyor, for example, information on the total number of rotations of the motor is obtained from the control information. The extracted distance is calculated from the total number of rotations by the operation of the belt conveyor (S13).

また、入力された制御情報と予め記憶された機器情報から、制御情報の制御値がベルトコンベアの動作ではないと判定した場合、例えば制御情報の制御値は工作機器を動作させる制御値であるため、予め記憶された機器情報と入力された制御情報から、作業中の工程を判定する（Ｓ１４）。
尚、ここでは１工程に１つの機器が設置されていると想定して説明するが、１工程に複数の機器が設置されている場合であっても、１工程に含まれる複数の機器と各機器の制御情報が対応づけられた機器情報を用いることで、同様に作業中の工程を判定することができる。 In addition, when it is determined from the input control information and previously stored device information that the control value of the control information is not the operation of the belt conveyor, for example, the control value of the control information is a control value for operating the machine tool. Then, a process in operation is determined from the device information stored in advance and the input control information (S14).
In addition, although it demonstrates supposing that one apparatus is installed in 1 process here, even if it is a case where a plurality of apparatuses are installed in 1 process, a plurality of apparatuses included in 1 process and each By using the device information associated with the control information of the device, it is possible to determine the process in operation in the same manner.

そして、制御情報から得られるセンサ値であって、監視する製造個体の監視開始の位置を検出したセンサ値と、Ｓ１３で算出した距離またはＳ１４で判定した作業中の工程から製造個体の生産ラインの位置を検出する（Ｓ１５）。   Then, the sensor value obtained from the control information, the sensor value at which the monitoring start position of the manufacturing individual to be monitored is detected, and the production line of the manufacturing individual from the distance calculated in S13 or the process in operation determined in S14. The position is detected (S15).

そして、画像抽出手段９は、検出した製造個体の位置が、カメラ情報の撮影範囲内である監視カメラ３を特定する（Ｓ１６）。そして、特定した監視カメラ３の識別情報を用いて、記憶手段７から特定した監視カメラ３の画像を抽出する。尚、特定した監視カメラの画像は、撮影情報取得手段６から取得してもよい。   Then, the image extracting means 9 identifies the monitoring camera 3 whose detected manufacturing position is within the shooting range of the camera information (S16). And the image of the specified monitoring camera 3 is extracted from the storage means 7 using the identification information of the specified monitoring camera 3. The specified surveillance camera image may be acquired from the photographing information acquisition means 6.

制御情報は、複数の機器の複数種類の制御値であることが想定されるため、必要に応じてＳ１１〜Ｓ１６の処理を繰り返すことで監視カメラ３を特定する。例えば、ベルトコンベアによって移動しながら工作機器が製造個体を加工する場合には、Ｓ１３で算出した距離とＳ１４で判定した作業中の工程から製造個体の生産ラインの位置を検出する。   Since the control information is assumed to be a plurality of types of control values of a plurality of devices, the monitoring camera 3 is specified by repeating the processes of S11 to S16 as necessary. For example, when the machine tool processes a manufacturing object while moving by a belt conveyor, the position of the manufacturing line of the manufacturing object is detected from the distance calculated in S13 and the process in operation determined in S14.

以上のように、本実施の形態１では、制御機器４から取得した制御情報を用いて製造個体の生産ラインの位置を検出し、検出した位置を撮影する監視カメラを特定するので、識別子が付与できないような製造個体であっても、制御機器４が制御している機器で加工または移動中の製造個体を撮影した画像を自動的に切り替えて表示することができる。そのため、監視対象の製造個体に問題が発生した場合、監視開始の位置から製造工程のすべての画像を自動的、連続的に確認することができ、ユーザがそれぞれの工程の画像を手作業で表示して確認するよりも、問題が発生した工程の画像を確認する作業を省力化することができる。   As described above, in the first embodiment, the position of the production line of the manufacturing individual is detected using the control information acquired from the control device 4, and the surveillance camera that captures the detected position is specified, so an identifier is assigned. Even if it is a manufacturing individual that cannot be performed, an image obtained by photographing the manufacturing individual being processed or moved by the device controlled by the control device 4 can be automatically switched and displayed. For this reason, if a problem occurs in the manufacturing object to be monitored, all images of the manufacturing process can be automatically and continuously confirmed from the monitoring start position, and the user can manually display the image of each process. Thus, it is possible to save labor for confirming an image of a process in which a problem has occurred, rather than confirming it.

また、工作機器を制御する制御情報から、工作機器の動作がわかるため、製造個体にどのような工程が行われたか、工作機器がどのような加工を行ったかがわかる。そのため、製造個体に対して工作機器によってどのような加工を行うかという製造情報があれば、製造個体の特徴を判定することができるので、制御情報を用いて判定した特徴の製造個体の位置を検出し、検出した位置を撮影する監視カメラ３を特定するので、判定した特徴の製造個体を含む画像を自動的に切り替えて表示することができる
なお、特定した監視カメラ３の画像のみを記憶手段７に記憶させる場合、記憶する画像を限定することで、すべての監視カメラ３の稼働中の画像を記録するよりも記憶容量を削減または長時間の記録を可能にすることができる。 In addition, since the operation of the machine tool is known from the control information for controlling the machine tool, it is possible to know what process has been performed on the manufactured individual and what process has been performed by the machine tool. Therefore, if there is manufacturing information on what kind of processing is performed on the manufacturing individual by the machine tool, the characteristics of the manufacturing individual can be determined, so the position of the manufacturing individual of the characteristics determined using the control information can be determined. Since the monitoring camera 3 that detects and captures the detected position is specified, it is possible to automatically switch and display an image including the manufactured individual of the determined feature. Note that only the image of the specified monitoring camera 3 is stored. 7, by limiting the images to be stored, it is possible to reduce the storage capacity or to record for a longer time than to record the images during operation of all the monitoring cameras 3.

実施の形態２．
次に、ユーザが指定する時間に製造された複数の製造個体について、ユーザが指定した同一工程で、複数の製造個体を撮影した画像を並べて表示する例について説明する。
図６は、この発明の実施の形態２における映像監視装置２の構成図である。
図２と同一符号は同一又は相当部分を示し説明を省略する。
実施の形態２における映像監視装置２は、実施の形態１を示す図１の全体構成に対して新たに制御情報記憶手段１６を備える。 Embodiment 2. FIG.
Next, an example will be described in which images of a plurality of manufactured individuals are displayed side by side in the same process specified by the user for a plurality of manufactured individuals manufactured at a time specified by the user.
FIG. 6 is a configuration diagram of the video monitoring apparatus 2 according to Embodiment 2 of the present invention.
The same reference numerals as those in FIG.
The video monitoring apparatus 2 according to the second embodiment is newly provided with a control information storage unit 16 in addition to the overall configuration of FIG. 1 showing the first embodiment.

以下、実施の形態１の構成と異なる制御情報記憶手段１６と、制御情報記憶手段１６に関連する構成について説明する。
制御情報取得手段８は、制御機器４から取得した制御情報を制御情報記憶手段１６に出力する。
制御情報記憶手段１６は、入力された制御情報を記憶手段７に記憶する。 Hereinafter, the control information storage unit 16 different from the configuration of the first embodiment and the configuration related to the control information storage unit 16 will be described.
The control information acquisition unit 8 outputs the control information acquired from the control device 4 to the control information storage unit 16.
The control information storage unit 16 stores the input control information in the storage unit 7.

画像抽出手段９は、ユーザが指定する時間に製造された異なる複数の製造個体について、ユーザが指定する同一工程の開始時刻を特定する。そして、ユーザが指定した工程を撮影する監視カメラ３が撮影した画像のうち、特定された開始時刻以降の画像を記憶手段７から抽出して、制御情報と共に抽出した画像を表示手段１０に出力する。
表示手段１０は、制御情報が付加された異なる複数の製造個体を含む複数の画像を並べてディスプレイ５に表示する。 The image extraction means 9 specifies the start time of the same process specified by the user for a plurality of different manufactured individuals manufactured at the time specified by the user. And the image after the specified start time is extracted from the memory | storage means 7 among the images which the monitoring camera 3 which image | photographs the process designated by the user, and the image extracted with control information is output to the display means 10. .
The display means 10 displays on the display 5 a plurality of images including a plurality of different manufactured bodies to which control information is added.

制御情報記憶手段１６は、図３に示した主記憶装置１３にロードされたプログラムが、順次、演算装置１１に読み込まれ、実行される。プログラムは、通常は補助記憶装置１２に記憶されており、主記憶装置１３にロードされる。 In the control information storage means 16, the programs loaded in the main storage device 13 shown in FIG. 3 are sequentially read into the arithmetic device 11 and executed. The program is normally stored in the auxiliary storage device 12 and loaded into the main storage device 13.

次に、実施の形態２における映像監視装置２の動作について説明する。
図７は、この発明の実施の形態２における映像監視装置２の動作を示すフローチャートである。
撮影情報取得手段６は、監視カメラ３から撮影情報を取得し（Ｓ２１）、記憶手段７に記憶する。また、制御情報取得手段８は、制御機器４から制御情報を取得し（Ｓ２２）、取得した制御情報を記憶手段７に記憶する（Ｓ２３）。 Next, the operation of the video monitoring apparatus 2 in the second embodiment will be described.
FIG. 7 is a flowchart showing the operation of the video monitoring apparatus 2 according to Embodiment 2 of the present invention.
The shooting information acquisition unit 6 acquires shooting information from the monitoring camera 3 (S21) and stores it in the storage unit 7. Further, the control information acquisition means 8 acquires control information from the control device 4 (S22), and stores the acquired control information in the storage means 7 (S23).

そして、製造個体が製造された時間と所定の生産ラインの工程がユーザから指定されると、画像抽出手段９は、予め記憶された機器情報を用いて、ユーザが指定した時間に最終工程であった時刻情報を含む制御情報を記憶手段７から抽出する。そして、抽出された制御情報と、最終工程の位置から、ユーザが指定した時間に最終工程であった複数の製造個体それぞれについて、指定された工程の開始時刻を特定する（Ｓ２４）。   When the time when the manufactured individual is manufactured and the process of a predetermined production line are designated by the user, the image extracting means 9 uses the device information stored in advance to perform the final process at the time designated by the user. The control information including the time information is extracted from the storage means 7. Then, from the extracted control information and the position of the final process, the start time of the designated process is specified for each of a plurality of manufactured individuals that were the final process at the time designated by the user (S24).

まず、開始時刻の特定は、最終工程から指定された工程までの距離と、実施の形態１に示した制御情報から判別したベルトコンベアの動作により算出した移動の距離から、その移動に必要な時間を算出する。
次に、最終工程からユーザが指定した工程までの制御情報と予め記憶された機器情報により、最終工程から指定された工程までの工作機器を特定し、特定した工作機器が製造個体を加工するために必要な時間を算出する。 First, the start time is identified from the distance from the final process to the designated process and the time required for the movement based on the distance of movement calculated by the operation of the belt conveyor determined from the control information shown in the first embodiment. Is calculated.
Next, the machine tool from the final process to the designated process is specified by the control information from the final process to the process designated by the user and the device information stored in advance, and the identified machine tool processes the manufactured individual. Calculate the time required for.

そして、移動に必要な時間と、特定された工作機器の加工に必要な時間から指定された工程の開始時刻を算出することができる。即ち、最終の工程の制御情報と、ユーザが指定した工程までの制御情報と機器情報から指定された工程の開始時刻を算出する。
そして、画像抽出手段９は、指定された工程を撮影範囲に含む監視カメラ３をカメラ情報から特定し、指定された工程を撮影した画像から複数の製造個体それぞれについて特定した開始時刻以降の画像を記憶手段７から抽出する（Ｓ２５）。
そして、画像抽出手段９は、抽出した画像の時刻情報と制御情報の時刻情報から画像と制御情報を対応させて表示手段１０に出力する。 And the start time of the designated process can be calculated from the time required for the movement and the time required for the machining of the specified machine tool. That is, the start time of the designated process is calculated from the control information of the final process, the control information up to the process designated by the user, and the device information.
And the image extraction means 9 specifies the monitoring camera 3 which includes the designated process in the imaging range from the camera information, and images after the start time specified for each of the plurality of manufactured individuals from the image obtained by imaging the designated process. Extracted from the storage means 7 (S25).
Then, the image extraction unit 9 outputs the image and the control information in association with each other from the time information of the extracted image and the time information of the control information, and outputs them to the display unit 10.

そして、表示手段１０は、画像抽出手段９から入力された画像に制御情報を付加して、制御情報毎に対応する画像に分割してディスプレイ５に表示する（Ｓ２６）。制御情報毎に表示される画像は、制御情報に対応した製造個体を含む工程の画像となる。そのため、分割された画像には、ユーザが指定した時間に製造された複数の製造個体毎に、指定された同一工程以降の工程の画像が順次表示される。
尚、複数の製造個体の数が多く、分割した１画面に表示されない場合は、例えば次の画面をユーザが指示することで表示可能になる。 Then, the display means 10 adds control information to the image input from the image extraction means 9, divides it into images corresponding to each control information, and displays them on the display 5 (S26). The image displayed for each control information is an image of a process including a manufacturing object corresponding to the control information. Therefore, in the divided images, the images of the processes after the specified same process are sequentially displayed for each of a plurality of manufactured objects manufactured at the time specified by the user.
In addition, when there are many manufacture individual | organism | solids and it does not display on one divided screen, it becomes possible to display, for example, when the user instructs the next screen.

以上のように、本実施の形態２では、製造個体が製造された時間と所定の工程をユーザが指定すると、最終工程の制御情報と、ユーザが指定した工程までの制御情報と機器情報から、指定された工程の開始時刻を特定するので、複数の製造個体それぞれについて特定した開始時刻以降の画像を記憶手段７から抽出して並べて表示することができる。そのため、識別子が付与できないような製造個体であっても、製造後に製造個体に不具合があった場合に、不具合があった製造時間と所定の工程を指定すると、その時間に製造された複数の製造個体を含む所定の工程の画像を自動的に抽出して、製造個体毎に並べて順次表示することができるので、ユーザがそれぞれの工程の画像を手作業で表示して確認するよりも、問題が発生した工程の確認作業を省力化することができる。 As described above, in the second embodiment, when the user specifies the manufacturing time and the predetermined process, from the control information of the final process, the control information up to the process specified by the user, and the device information, Since the start time of the designated process is specified, images after the start time specified for each of a plurality of manufactured individuals can be extracted from the storage means 7 and displayed side by side. Therefore, even if it is a manufacturing individual that cannot be assigned an identifier, if there is a defect in the manufacturing individual after manufacturing, if a manufacturing time and a predetermined process with a defect are specified, a plurality of manufactured items manufactured at that time It is possible to automatically extract an image of a predetermined process including an individual and display it side by side for each manufactured individual, which is more problematic than a user manually displaying and confirming an image of each process. It is possible to save labor for checking the generated process.

１ 映像監視システム、２ 映像監視装置、３ 監視カメラ、４ 制御機器、５ ディスプレイ、６ 撮影情報取得手段、７ 記憶手段、８ 制御情報取得手段、9 画像抽出手段、１０ 表示手段、１１ 演算装置、１２ 補助記憶装置、１３ 主記憶装置、１４ 通信装置、１５ 入出力インターフェース、１６ 制御情報記憶手段。 DESCRIPTION OF SYMBOLS 1 Video monitoring system, 2 Video monitoring apparatus, 3 Surveillance camera, 4 Control apparatus, 5 Display, 6 Shooting information acquisition means, 7 Storage means, 8 Control information acquisition means, 9 Image extraction means, 10 Display means, 11 Arithmetic unit, 12 auxiliary storage device, 13 main storage device, 14 communication device, 15 input / output interface, 16 control information storage means.

Claims (7)

製造個体を生産する生産ラインの機器を制御する制御機器から前記機器を制御する制御情報を取得する制御情報取得手段、
前記生産ラインを撮影する監視カメラから画像を取得する画像取得手段、
前記制御情報取得手段で取得した制御情報と前記監視カメラが撮影する撮影範囲の情報を含むカメラ情報とに基づいて、前記画像から前記製造個体を含む画像を抽出する画像抽出手段、
前記画像抽出手段で抽出された画像を表示する表示手段、
を備えたことを特徴とする映像監視装置。 Control information acquisition means for acquiring control information for controlling the device from a control device for controlling the device of the production line that produces the manufactured individual,
Image acquisition means for acquiring an image from a monitoring camera for photographing the production line;
Image extracting means for extracting an image including the manufactured individual from the image based on the control information acquired by the control information acquiring means and camera information including information on a photographing range captured by the monitoring camera;
Display means for displaying the image extracted by the image extraction means;
A video surveillance device comprising: 前記画像抽出手段は、前記制御情報と、前記機器毎の位置と制御情報とが対応づけられた機器情報と、を用いて前記製造個体の生産ラインの位置を検出し、検出した位置と前記カメラ情報から前記監視カメラを特定し、当該特定した監視カメラから取得した画像から前記製造個体を含む画像を抽出することを特徴とする請求項１に記載の映像監視装置。   The image extracting means detects the position of the production line of the manufactured individual using the control information and device information in which the position and control information for each device are associated with each other, and the detected position and the camera The video monitoring apparatus according to claim 1, wherein the monitoring camera is specified from information, and an image including the manufacturing individual is extracted from an image acquired from the specified monitoring camera. 前記画像抽出手段は、前記制御情報の制御値が前記生産ラインを構成するベルトコンベアを動作させる制御値であるか否かを判定し、ベルトコンベアを動作させる制御値である場合は、当該制御値から前記ベルトコンベアの動作により移動する距離を算出し、当該距離と前記制御情報に含まれる前記製造個体の監視開始の位置を検出するセンサ値とに基づいて前記製造個体の位置を検出することを特徴とする請求項２に記載の映像監視装置。   The image extracting means determines whether or not the control value of the control information is a control value for operating the belt conveyor constituting the production line. If the control value is a control value for operating the belt conveyor, the control value Calculating the distance traveled by the operation of the belt conveyor, and detecting the position of the manufacturing object based on the distance and a sensor value for detecting the monitoring start position of the manufacturing object included in the control information. The video surveillance apparatus according to claim 2, wherein the video surveillance apparatus is a video surveillance apparatus. 前記画像抽出手段は、前記制御情報の制御値が前記生産ラインを構成するベルトコンベアを動作させる制御値であるか否かを判定し、ベルトコンベアを動作させる制御値ではない場合、前記機器情報を用いて前記制御情報に対応した機器の位置を特定し、特定した位置を前記製造個体の生産ラインの位置として検出することを特徴とする請求項２に記載の映像監視装置。   The image extraction means determines whether or not the control value of the control information is a control value for operating the belt conveyor constituting the production line. If the control value is not the control value for operating the belt conveyor, The video monitoring apparatus according to claim 2, wherein a position of a device corresponding to the control information is specified, and the specified position is detected as a position of a production line of the manufacturing individual. 前記制御情報取得手段で取得された制御情報と、前記画像取得手段で取得された画像と、を記憶する記憶手段を更に備え、
前記画像抽出手段は、ユーザから時間と前記生産ラインの工程が指定されると、前記機器毎の位置と制御情報とが対応づけられた機器情報を用いて、指定された時間に製造された複数の前記製造個体それぞれの最終工程の制御情報を前記記憶手段に記憶された制御情報から抽出し、当該制御情報に基づいて、前記指定された工程以降の前記製造個体を含む画像を前記記憶手段から抽出することを特徴とする請求項１に記載の映像監視装置。 A storage unit for storing the control information acquired by the control information acquisition unit and the image acquired by the image acquisition unit;
When the time and the production line process are designated by the user, the image extraction means is a plurality of pieces manufactured at the designated time using the equipment information in which the position and control information for each equipment are associated with each other. The control information of the final process of each manufactured individual is extracted from the control information stored in the storage means, and based on the control information, an image including the manufactured individual after the designated process is extracted from the storage means. The video surveillance device according to claim 1, wherein the video surveillance device is extracted. 製造個体を生産する生産ラインを撮影する監視カメラから取得した映像を監視する映像監視装置の映像監視方法において、
前記生産ラインの機器を制御する制御機器から前記機器を制御する制御情報を取得する制御情報取得ステップ、
前記生産ラインを撮影する監視カメラから画像を取得する画像取得ステップ、
前記制御情報取得ステップで取得した制御情報と前記監視カメラが撮影する撮影範囲の情報を含むカメラ情報とに基づいて、前記画像から前記製造個体を含む画像を抽出する画像抽出ステップ、
前記画像抽出ステップで抽出された画像を表示する表示ステップ、
を備えたことを特徴とする映像監視方法。 In the video monitoring method of the video monitoring device that monitors the video acquired from the monitoring camera that shoots the production line that produces the manufacturing individual,
A control information acquisition step of acquiring control information for controlling the device from a control device for controlling the device of the production line;
An image acquisition step of acquiring an image from a monitoring camera that images the production line;
An image extraction step of extracting an image including the manufactured individual from the image based on the control information acquired in the control information acquisition step and camera information including information of a shooting range captured by the monitoring camera;
A display step for displaying the image extracted in the image extraction step;
A video surveillance method comprising: 製造個体を生産する生産ラインの機器を制御する制御機器と、
前記生産ラインを撮影する監視カメラと、
前記制御機器から前記機器を制御する制御情報を取得する制御情報取得手段、
前記生産ラインを撮影する監視カメラから画像を取得する画像取得手段、
前記制御情報取得手段で取得した制御情報と前記監視カメラが撮影する撮影範囲の情報を含むカメラ情報とに基づいて、前記画像から前記製造個体を含む画像を抽出する画像抽出手段、
前記画像抽出手段で抽出された画像を出力する表示手段、を備えた映像監視装置と、
前記映像監視装置から出力された画像を表示するディスプレイと、
を備えたことを特徴とする映像監視システム。 Control equipment that controls the equipment of the production line that produces the manufacturing individual;
A surveillance camera for photographing the production line;
Control information acquisition means for acquiring control information for controlling the device from the control device;
Image acquisition means for acquiring an image from a monitoring camera for photographing the production line;
Image extracting means for extracting an image including the manufactured individual from the image based on the control information acquired by the control information acquiring means and camera information including information on a photographing range captured by the monitoring camera;
A video monitoring device comprising display means for outputting the image extracted by the image extraction means;
A display for displaying an image output from the video monitoring device;
A video surveillance system comprising:
JP2016038767A 2016-03-01 2016-03-01 Video monitoring device, video monitoring method, and video monitoring system Pending JP2017156928A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016038767A JP2017156928A (en) 2016-03-01 2016-03-01 Video monitoring device, video monitoring method, and video monitoring system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016038767A JP2017156928A (en) 2016-03-01 2016-03-01 Video monitoring device, video monitoring method, and video monitoring system

Publications (1)

Publication Number Publication Date
JP2017156928A true JP2017156928A (en) 2017-09-07

Family

ID=59810321

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016038767A Pending JP2017156928A (en) 2016-03-01 2016-03-01 Video monitoring device, video monitoring method, and video monitoring system

Country Status (1)

Country Link
JP (1) JP2017156928A (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019109731A (en) * 2017-12-19 2019-07-04 オムロン株式会社 Authentication system and data processing method
JP2020163141A (en) * 2019-03-29 2020-10-08 能美防災株式会社 Tunnel emergency facility
WO2023061840A1 (en) * 2021-10-11 2023-04-20 Weber Maschinenbau Gmbh Breidenbach Food processing line and method for operating a food processing line

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006018459A (en) * 2004-06-30 2006-01-19 Shibuya Kogyo Co Ltd Production history management system
JP2011003000A (en) * 2009-06-18 2011-01-06 Mitsubishi Electric Corp Line monitoring device
JP2012221460A (en) * 2011-04-14 2012-11-12 Nippon Steel Corp Monitoring operation system, tracking support device and tracking support method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006018459A (en) * 2004-06-30 2006-01-19 Shibuya Kogyo Co Ltd Production history management system
JP2011003000A (en) * 2009-06-18 2011-01-06 Mitsubishi Electric Corp Line monitoring device
JP2012221460A (en) * 2011-04-14 2012-11-12 Nippon Steel Corp Monitoring operation system, tracking support device and tracking support method

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019109731A (en) * 2017-12-19 2019-07-04 オムロン株式会社 Authentication system and data processing method
JP2020163141A (en) * 2019-03-29 2020-10-08 能美防災株式会社 Tunnel emergency facility
JP7450430B2 (en) 2019-03-29 2024-03-15 能美防災株式会社 Tunnel emergency equipment
WO2023061840A1 (en) * 2021-10-11 2023-04-20 Weber Maschinenbau Gmbh Breidenbach Food processing line and method for operating a food processing line

Similar Documents

Publication Publication Date Title
JP4670455B2 (en) Process abnormality detection system
JP6451133B2 (en) Anomaly detection device, anomaly detection method, anomaly detection system, and program
JP6459256B2 (en) Image storage / playback control apparatus, image storage / playback control method, image storage / playback control system, and program
KR20110053820A (en) Method and apparatus for processing image
KR20180022568A (en) Information processing apparatus, method thereof, and computer readable storage medium
CN108391147B (en) Display control device and display control method
JP2015115839A5 (en)
KR101821692B1 (en) Image collecting method and apparatus
JP2008011056A (en) Stored moving picture selection apparatus, method, and system, program thereof, and computer-readable recording medium with program recorded therein
JP2017156928A (en) Video monitoring device, video monitoring method, and video monitoring system
US9979898B2 (en) Imaging apparatus equipped with a flicker detection function, flicker detection method, and non-transitory computer-readable storage medium
US20200296332A1 (en) System and method of video capture and search optimization
JP5293270B2 (en) Imaging object selection device, imaging object selection device control method, imaging object selection device control program, and computer-readable recording medium recording the program
JP2018128729A (en) Process monitoring apparatus, and control method and program for process monitoring apparatus
US9734483B2 (en) Product management device and product management method
JP5755387B1 (en) Display, display method, display program
JP6679847B2 (en) Shelving allocation information generating device, shelving allocation information generating system, shelving allocation information generating method, imaging device, and program
US20160140423A1 (en) Image classification method and apparatus for preset tour camera
JP2017118319A (en) Video retrieval system
JP2017028585A5 (en) Imaging system, control method therefor, control device, and computer program
CN105744165A (en) Photographing method and device, and terminal
JP2006228029A (en) Monitor control device and method
JP2008228119A (en) Monitoring camera system, animation retrieval apparatus, face image database updating apparatus and operation control method therefor
JP2016099633A (en) Maintenance inspection system using a portable terminal
JP6948294B2 (en) Work abnormality detection support device, work abnormality detection support method, and work abnormality detection support program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20170921

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20180919

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20181002

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20190402