WO2020250498A1 - 情報処理装置、情報処理方法、情報処理プログラム、および記録媒体 - Google Patents

情報処理装置、情報処理方法、情報処理プログラム、および記録媒体 Download PDF

Info

Publication number
WO2020250498A1
WO2020250498A1 PCT/JP2020/007816 JP2020007816W WO2020250498A1 WO 2020250498 A1 WO2020250498 A1 WO 2020250498A1 JP 2020007816 W JP2020007816 W JP 2020007816W WO 2020250498 A1 WO2020250498 A1 WO 2020250498A1
Authority
WO
WIPO (PCT)
Prior art keywords
work
worker
information processing
work process
unit
Prior art date
Application number
PCT/JP2020/007816
Other languages
English (en)
French (fr)
Inventor
慎也 藤本
Original Assignee
オムロン株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オムロン株式会社 filed Critical オムロン株式会社
Priority to EP20822361.0A priority Critical patent/EP3985583A4/en
Priority to US17/609,789 priority patent/US20220230440A1/en
Priority to KR1020217037872A priority patent/KR20220004823A/ko
Priority to CN202080033138.5A priority patent/CN113767407A/zh
Publication of WO2020250498A1 publication Critical patent/WO2020250498A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0633—Workflow analysis
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G06Q10/063—Operations research, analysis or management
    • G06Q10/0631—Resource planning, allocation, distributing or scheduling for enterprises or organisations
    • G06Q10/06311—Scheduling, planning or task assignment for a person or group
    • G06Q10/063114—Status monitoring or status determination for a person or group
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G06Q10/103—Workflow collaboration or project management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/31—From computer integrated manufacturing till monitoring
    • G05B2219/31449—Monitor workflow, to optimize business, industrial processes
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/31—From computer integrated manufacturing till monitoring
    • G05B2219/31467—Display of operating conditions of machines, workcells, selected programs
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B2219/00—Program-control systems
    • G05B2219/30—Nc systems
    • G05B2219/32—Operator till task planning
    • G05B2219/32015—Optimize, process management, optimize production line
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/06—Resources, workflows, human or project management; Enterprise or organisation planning; Enterprise or organisation modelling
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30232—Surveillance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/07—Target detection

Definitions

  • the present invention relates to an information processing device or the like that generates data that can be used for improving a work process or the like from imaging data obtained by photographing the implementation status of a plurality of work processes.
  • Japanese Patent Publication Japanese Patent Laid-Open No. 2019-23803
  • One aspect of the present invention has been made in view of the above-mentioned problems, and the correspondence between the actual operation of the equipment used for carrying out the work process and the work performed by the operator while suppressing the realization cost.
  • the purpose is to grasp.
  • the information processing apparatus covers the entire work site including a plurality of monitoring areas, each of which is associated with each of the plurality of work processes. Whether there is an operator for each of the plurality of monitoring areas by the first acquisition unit that acquires the imaging data captured by the wide area imaging camera and the image analysis of the imaging data acquired by the first acquisition unit.
  • a worker determination unit for determining the above, a second acquisition unit for acquiring process information generated from an operation result indicating the content and result of the operation executed by the device used for each execution of the plurality of work processes, and the above.
  • the device determination unit that determines whether the device is operating and each of the plurality of work processes are described by (A) the device determination unit.
  • the worker exists in the monitoring area associated with the work process by the time zone when it is determined that the device used for carrying out the process is operating and (B) the worker determination unit. It is provided with a generation unit that generates data associated with a time zone determined to be the case.
  • the control method of the information processing apparatus covers the entire work site including a plurality of monitoring areas, each of which is associated with each of the plurality of work processes.
  • the first acquisition step of acquiring the imaging data captured by one wide area imaging camera and the image analysis of the imaging data acquired in the first acquisition step the operator can perform each of the plurality of monitoring areas.
  • the second acquisition to acquire the process information generated from the worker determination step for determining the existence and the operation result indicating the content and result of the operation executed by the device used for each execution of the plurality of work processes.
  • the device determination for each of the device determination step for determining whether the device is operating and the plurality of work processes using the step and the process information acquired in the second acquisition step.
  • the time zone when it is determined that the device used for carrying out the work process is operating and (B) the monitoring associated with the work process in the worker determination step. It includes a generation step of generating data associated with a time zone in which it is determined that the worker exists in the area.
  • FIG. 1 It is a block diagram which shows the main part structure of the information processing apparatus and the like which concerns on Embodiment 1 of this invention. It is a figure which shows the whole outline of the control system including the information processing apparatus of FIG. It is a figure which shows the image of the basic imaging data acquired by the information processing apparatus of FIG. It is a flow diagram explaining the outline of the process executed by the information processing apparatus of FIG. It is a figure which shows the method which the information processing apparatus of FIG. 1 identifies a worker and a monitoring area using the basic imaging data (image). It is a figure which shows an example of the information which shows the correspondence relation between the operation period of an apparatus and the stay period of a worker for each work process.
  • FIGS. 1 to 9 embodiments according to one aspect of the present invention (hereinafter, also referred to as “the present embodiment”) will be described with reference to FIGS. 1 to 9.
  • the information processing device 10 will be described as a typical example of the information processing device.
  • an outline of the control system 1 and the like including the information processing device 10 will be described with reference to FIG.
  • "n” indicates “an integer of 1 or more”
  • “m” indicates “an integer of 1 or more and n or less”.
  • FIG. 2 is a diagram showing an overall outline of the control system 1 and the like including the information processing device 10.
  • the ceiling camera 30 shown in FIG. 2 is installed on the ceiling of the work site WS and generates basic imaging data BI which is imaging data of the entire work site WS.
  • the work site WS is a production site such as a factory, and in the work site WS, for example, various products have a plurality of work processes Pr (1), Pr (2), Pr (3), ... Pr (n). ) To be produced.
  • Each of the plurality of work processes Pr (1), Pr (2), Pr (3), ... Pr (n) carried out at the work site WS is, for example, a "painting" process and a "main work assembly". The process, the process of "incorporating the main work into the main body", and the process of "inspection”.
  • the work site WS includes a plurality of monitoring areas Ar (1), Ar (2), Ar (3), ... Ar (n).
  • Each of the plurality of monitoring areas Ar (1), Ar (2), Ar (3), ... Ar (n) has a plurality of work steps Pr (1), Pr (2), Pr (3), ... .. It is associated with each of Pr (n).
  • the monitoring area Ar (m) is an area in which the worker Pe performs the work Op (m) related to the execution of the work process Pr (m), for example, in the area where the device 40 (m) is arranged. is there.
  • the worker Pe performs the work Op (m) related to the work process Pr (m) in the monitoring area Ar (m) using the device 40 (m).
  • a ceiling camera 30, which is a wide area imaging camera, is installed on the ceiling of the WS at the work site. However, it is not essential that the ceiling camera 30 is installed on the ceiling of the work site WS, and the ceiling camera 30 may be installed at a position where the entire work site WS can be overlooked.
  • the ceiling camera 30 gives a bird's-eye view of the entire work site WS and generates basic imaging data BI which is imaging data of the entire work site WS.
  • the basic imaging data BI includes a plurality of analysis target regions Aa (1), Aa (1), each of which corresponds to a plurality of monitoring regions Ar (1), Ar (2), Ar (3), ... Ar (n). 2), Aa (3), ... Aa (n) are preset.
  • the analysis target area Aa is the target area for image analysis of the basic imaging data BI by the information processing device 10.
  • the analysis target area Aa may be set for the basic imaging data BI by the information processing apparatus 10 according to the user operation.
  • the worker Pe who executes the work Op (m) related to the execution of the work process Pr (m), and the worker Pe is covered by, for example, the worker Pe. It is identified by the worker ID attached to the crown of the hat. Specifically, the worker Pe (1) and the worker Pe (2) existing in the work site WS are the worker ID: Pe (1) attached to the hat worn by the worker Pe (1). Each is identified by the worker ID: Pe (2) attached to the hat worn by the worker Pe (2). When it is necessary to distinguish each of a plurality of worker Pes, subscripts such as "(1)”, “(2)", “(3)”, ..., "(n)" are added to the code. When it is not necessary to distinguish them, they are simply referred to as "worker Pe".
  • FIG. 3 is a diagram showing an image of basic imaging data BI acquired by the information processing device 10 from the ceiling camera 30.
  • the information processing apparatus 10 executes image analysis on the basic imaging data BI, determines whether or not the worker Pe exists in the work site WS, and the worker Pe is in the work site WS. If it is determined that it exists, the worker ID of the worker Pe existing in the work site WS is specified.
  • each of the plurality of devices 40 is used for each execution of the plurality of work process Pr, that is, the work process Pr and the device 40 are associated in advance.
  • one or more devices 40 (m) are used to carry out the work process Pr (m). That is, one or more devices 40 (1) are used to carry out the work process Pr (1), and specifically, the devices 40 (1-1), 40 (1-2), and 40 (1).
  • the three devices 40 (1) of -3) may be used.
  • one or more devices 40 (2) are used to carry out the work process Pr (2)
  • one or more devices 40 (3) are used to carry out the work process Pr (3).
  • one device 40 may be used to carry out a plurality of work steps Pr.
  • the variables "p", “q”, “x”, and “y” each indicate an "integer of 1 or more", “q” is different from “p", and "y” is "x”. It can be paraphrased as follows. That is, even if the device 40 (px) used to carry out the work process Pr (p) and the device 40 (qy) used to carry out the work process Pr (q) are the same device 40. Good.
  • the plurality of devices 40 used to carry out the plurality of work process Prs at the work site WS are controlled by the PLC (Programmable Logic Controller) 20 as a line controller. That is, a control system 1 is constructed as a master-slave control system in which the PLC 20 is used as a master and each of the plurality of devices 40 is a slave, and each of the plurality of devices 40 can communicate with the PLC 20 via a network (control network 50). It is connected to the.
  • the PLC 20 is called a "master” in the sense that it manages data transmission via the control network 50.
  • the “master” and “slave” are defined by paying attention to the control function of data transmission on the control network 50, and what kind of information is transmitted and received between the devices is not particularly limited.
  • the PLC 20 is a control device (controller) that controls the entire control system 1, and is communicably connected to each of a plurality of devices 40.
  • the PLC 20 acquires information from each of the plurality of devices 40 as input devices (measurement devices) as input data.
  • the PLC 20 executes arithmetic processing using the acquired input data according to a user program incorporated in advance.
  • the PLC 20 executes the arithmetic processing to determine the control content for the control system 1, for example, determines the control content for each of the plurality of devices 40 as output devices such as actuators, and corresponds to the control content.
  • the control data is output to each of the plurality of devices 40.
  • the PLC 20 repeatedly executes the acquisition of input data from each of the plurality of devices 40 and the acquisition of control data to each of the plurality of devices 40 in a predetermined cycle (control cycle).
  • a display unit and an operation unit may be connected to the PLC 20.
  • the display unit is composed of a liquid crystal panel or the like capable of displaying an image
  • the operation unit is typically composed of a touch panel, a keyboard, a mouse or the like.
  • the device 40 is a slave in the control system 1 as a master-slave control system with the PLC 20 as the master.
  • the device 40 is an input device that repeatedly transmits input data to the PLC 20 at predetermined control cycles, or receives repeated control data from the PLC 20 at predetermined control cycles and operates according to the received control data. It is a device.
  • the device 40 may be, for example, a sensor (for example, a photoelectric sensor) as an input device for transmitting a detection result or the like to the PLC 20 as input data, or a bar code reader for transmitting a reading result, and is inspected. It may be an inspection machine (tester) that transmits the results.
  • the device 40 may be a PT (Programmable Terminal) to which a plurality of input devices are connected.
  • the device 40 may be a robot or the like as an output device that executes screw tightening, picking, and the like.
  • the control network 50 transmits various data received by or transmitted by the PLC 20 and can typically use various Industrial Ethernet®, sometimes referred to as a field network. ..
  • Industrial Ethernet registered trademark
  • EtherCAT registered trademark
  • Profile IRT Profile IRT
  • MECHATROLINK registered trademark
  • MECHATROLINK registered trademark
  • CIP Motion CIP Motion
  • a field network other than Industrial Ethernet may be used. For example, if motion control is not performed, DeviceNet, CompoNet / IP (registered trademark), or the like may be used.
  • control system 1 in which data is transmitted and received between the PLC 20 (master) and the device 40 (slave) by sequentially transferring data frames on the control network 50 will be described. That is, by sequentially transferring data frames on the control network 50 in a predetermined control cycle, data is repeatedly transmitted and received between the PLC 20 and the device 40 in each control cycle. By sequentially transferring data frames on the control network 50, data may be transmitted and received between a plurality of devices 40, that is, between a plurality of slaves.
  • the master PLC 20 is repeated, for example, at predetermined control cycles, and the content and result of the operation Ac executed by the device 40 from the slave device 40.
  • the operation result La indicating the above is received. That is, the device 40 repeats the operation result La indicating the content and result of the operation Ac actually executed when the work process Pr is executed at a predetermined cycle, and transmits the operation result La to the PLC 20.
  • the device 40 (m) repeats the operation result La (m) indicating the content and result of the operation Ac (m) executed when the work process Pr (m) is executed in the control cycle, and transmits the operation result La (m) to the PLC 20. To do.
  • the PLC 20 acquires, for example, a measurement result that is the result of a measurement operation executed by the device 40 as an input device (measurement device) as an operation result La of the device 40. Further, when the device 40 is an inspection machine, the PLC 20 sets the result of the inspection operation executed by the device 40 as, for example, the inspection result such as "satisfied or did not meet the inspection standard" as the operation result of the device 40. Obtained as La. Further, the PLC 20 acquires, for example, the result of the output operation executed by the device 40 as the output device as the operation result La of the device 40. When the device 40 is a robot that executes screw tightening, picking, etc., the PLC 20 acquires an operation result La such as a screw tightening number and a picking result (picking success or picking error) as an operation result La of the device 40.
  • an operation result La such as a screw tightening number and a picking result (picking success or picking error) as an operation result La of the device 40.
  • the PLC 20 repeatedly receives an operation result La indicating the content and result of the operation Ac actually executed by the device 40 from the device 40 at a predetermined cycle, and uses the received operation result La as process information. It transmits (that is, transfers) to the information processing device 10. Further, the PLC 20 transmits information generated by using the operation result La repeatedly received from the device 40 at a predetermined cycle to the information processing apparatus 10 as process information.
  • the PLC 20 may transmit the operation result La repeatedly received from the device 40 at a predetermined cycle to the outside of the control system 1 as process information.
  • the PLC 20 connects the operation result La repeatedly received from the device 40 in a predetermined cycle to a MES (Manufacturin g Execution System) or the like as process information, and is an in-house LAN (Local Area Network) shown in FIG. ) May be sent.
  • MES Manufacturing g Execution System
  • LAN Local Area Network
  • the information processing apparatus 10 that has received the process information from the PLC 20 calculates the operation period Da of the operation Ac executed by the device 40 using the operation result La included in the process information, and the operation Ac is "automated.”
  • An example of determining whether or not it is an operation will be described. Details will be described later, but in the example described below, the information processing apparatus 10 operates from the process information, in particular, from the operation result La, the operation start time Tms of the operation Ac executed by the device 40 when the work process Pr is executed, and the operation.
  • the completion time Tme and the operation period Da are calculated.
  • the information processing apparatus 10 determines whether or not the operation Ac executed by the device 40 at the time of executing the work process Pr is an "automated operation” from the process information, particularly from the operation result La. Using the process information (particularly, the operation result La), the operation period Da of the operation Ac executed by the device 40 at the time of executing the work process Pr is calculated, and whether or not the operation Ac is an "automated operation". Is also referred to as "equipment determination process" below. In the following description, an example in which the information processing device 10 that has received the process information from the PLC 20 executes the "device determination process" will be described.
  • the "device determination process” may be executed by the PLC 20, and the PLC 20 includes the result of the "equipment determination process” in the process information or transmits it to the information processing apparatus 10 instead of the process information. You may.
  • the operation start time Tms is the time when the device 40 used for the work process Pr starts the execution of the operation Ac when the work process Pr is executed
  • the operation completion time Tme is the operation completion time Tmes of the operation Ac. It is the time when the execution is completed.
  • the operation period Da is a period from the operation start time Tms to the operation completion time Tme.
  • an in-house LAN system may be connected to the control system 1 as the master-slave control system.
  • the in-house LAN is connected to a process information DB (Database), which is also called MES.
  • the process information DB stores information indicating "a standard operation to be executed by the device 40 used to carry out the work process Pr".
  • the information processing device 10 may be connected to the process information DB via, for example, an in-house LAN, and the information processing device 10 may be connected to the process information DB from the process information DB, for example, from the process information DB.
  • Information indicating "a standard operation to be performed by the device 40 used for carrying out the above" may be acquired.
  • the information processing device 10 may use the information acquired from the process information DB to execute the "device determination process".
  • an event management device 60 that monitors and manages various events that occur at the work site WS is connected to the process information DB as the MES via the in-house LAN.
  • the event management device 60 is connected to the process information DB via the in-house LAN, and the event management device 60 may not be provided.
  • the PLC 20 is connected to the process information DB via the in-house LAN.
  • the PLC 20 may transmit the operation result La or the like acquired from the device 40 to the process information DB via the in-house LAN.
  • an ERP Enterprise Resources Planning
  • WMS Warehouse Management System
  • the like may be connected to the in-house LAN.
  • a video storage server or the like is connected to the process information DB via an "other network" that is different from the control network 50 and the in-house LAN.
  • the information processing device 10 is connected to the moving image storage server or the like via another network, and the partial imaging data OD and the association information Mi transmitted from the information processing device 10 are stored in the moving image storage server or the like.
  • the partial imaging data OD is imaging data obtained by the information processing apparatus 10 extracting the basic imaging data BI generated by imaging the entire work site WS by the ceiling camera 30 according to a predetermined standard.
  • the correspondence information Mi sets the stay period Do of the worker Pe existing in the monitoring area Ar corresponding to the work process Pr and the operation Ac corresponding to the work process Pr for each work process Pr. This is information indicating the correspondence relationship with the operation period Da, which is the period during which the device 40 has been executed.
  • An external device 70 realized by a PC (Personal Computer) or the like is further connected to the video storage server or the like, and the external device 70 displays, for example, partial imaging data OD and association information Mi, and process information. And so on. That is, the external device 70 displays a list of information necessary for improving the work process Pr, and performs partial imaging of information indicating the bottleneck work process Pr, the date and time of the error that occurred in the work process Pr, and the like. Displayed in association with data OD. The details of the correspondence information Mi displayed by the external device 70 will be described with reference to FIGS. 6, 7, and 9.
  • the ceiling camera 30 captures the entire work site WS to generate basic imaging data BI, and the generated basic imaging data BI is, for example, via a communication cable such as a USB (Universal Serial Bus) cable. , Is transmitted to the information processing device 10.
  • a communication cable such as a USB (Universal Serial Bus) cable.
  • the information processing device 10 is realized by, for example, a PC or the like, and combines the process information acquired from the PLC 20 and the basic imaging data BI acquired from the ceiling camera 30 to enable efficient use of both. Is.
  • the information processing device 10 can be said to be a device that visualizes process information including "operation result La indicating the contents and results of actual operation Acs of a plurality of devices 40 at the work site WS" by combining with the basic imaging data BI.
  • the information processing apparatus 10 acquires process information including the operation result La indicating the content and result of the operation Ac of the device 40 used for carrying out the work process Pr from the PLC 20, and obtains the acquired process information as 1. It is combined with the basic imaging data BI acquired from the ceiling camera 30 of the table.
  • the information processing device 10 combines the process information including the operation result La showing the contents and results of each operation Ac of the plurality of devices 40 with the basic imaging data BI that images the entire work site WS to perform a plurality of operations.
  • the analysis related to each of the steps Pr can be performed efficiently and precisely.
  • the information processing apparatus 10 extracts, for example, a bottleneck work process Pr, and captures an image of the implementation status of the extracted work process Pr (partial imaging data OD). And the process information of the extracted work process Pr are combined. Therefore, for example, the user can easily identify the cause of the bottleneck and the cause of the defect in the work process Pr that is the bottleneck, and can efficiently perform the improvement work of the work process Pr. become able to.
  • the information processing device 10 can also be used for traceability when a defect occurs.
  • the information processing apparatus 10 improves the analysis system for both the analysis for the basic imaging data BI and the analysis for the process information by combining the basic imaging data BI and the process information of each of the plurality of devices 40. Can be done.
  • the information processing apparatus 10 uses the PLC 20 that has been used in the work site WS for a long time and the ceiling camera 30 that is installed on the ceiling of the work site WS, so that the realization cost is low. Further, the information processing device 10 may use the ceiling camera 30 that captures only the desired work process Pr (that is, the desired monitoring area Ar), or the ceiling camera 30 used by the information processing device 10 may be relocated. Is also easy.
  • the technique of Patent Document 1 calculates the incapacity time, which is the time when the worker could not perform the work, by analyzing the work video data taken by a plurality of cameras.
  • the technique of Patent Document 1 is to subtract the incapacity time calculated by analyzing the work video data from the apparent work time measured based on the operator's operation on the work instruction terminal that indicates the work procedure to the worker. Then, the actual work time that was actually possible to work is calculated. That is, the technique of Patent Document 1 relates to the device 40 used to carry out the work process Pr in order to grasp the correspondence between the actual operation Ac of the device 40 used to carry out the work process Pr and the worker Pe. Specifically, an operation instruction of the worker Pe is required for the work instruction terminal.
  • the information processing apparatus 10 uses the process information, specifically, the operation result La of the device 40 to set the operation start time Tms at which the device 40 starts the operation Ac and the operation Ac. Specify the completed operation completion time Tme. That is, the information processing device 10 specifies the operation start time Tms and the operation completion time Tme of the device 40 without requiring the operation work of the worker Pe to the work instruction terminal that indicates the work procedure to the worker Pe.
  • the information processing device 10 is communicably connected to the PLC 20 via a control network 50 that connects the master PLC 20 and the slave device 40.
  • the information processing apparatus 10 receives process information from the PLC 20 including the content and the operation result La indicating the content and result of the “actual operation Ac executed by the device 40 used to carry out the work process Pr”.
  • the information processing device 10 needs to be communicably connected to the PLC 20 via the control network 50, but the information processing device 10 is "a master-slave whose master is the PLC 20 and whose slave is the device 40.” It does not have to be a slave in the "control system".
  • the information processing device 10 is communicably connected to the ceiling camera 30 via, for example, a USB (Universal Serial Bus) cable.
  • the information processing device 10 acquires the basic imaging data BI in which the entire work site WS is imaged from the ceiling camera 30.
  • the information processing apparatus 10 may acquire an operation standard Sa indicating "a standard operation to be executed by the device 40 used for executing the work process Pr" from the process information DB. Then, the information processing apparatus 10 may use the acquired operation reference Sa to execute the "device determination process". Further, the information processing apparatus 10 may extract a desired partial imaging data OD from the basic imaging data BI by using the acquired operation reference Sa.
  • the information processing device 10 since the information processing device 10 does not transmit the basic imaging data BI to the in-house LAN connected to the MES or the like, the communication in the in-house LAN is not overwhelmed by the transmission of the basic imaging data BI having a huge amount of data. .. Further, the information processing apparatus 10 uses the basic imaging data BI acquired from one ceiling camera 30 for efficient and precise analysis of process information. Therefore, the information processing apparatus 10 allows the user to grasp the correspondence between the actual operation Ac of the device 40 used for executing the work process Pr and the work Op performed by the worker Pe while suppressing the realization cost. Make it possible.
  • the information processing device 10 captures the entire work site WS including the plurality of monitoring areas Ar, each of which is associated with each of the plurality of work process Prs, by one ceiling camera 30 ( By image analysis of the first acquisition unit 110 that acquires the basic imaging data BI (imaging data) captured by the wide area imaging camera) and the basic imaging data BI acquired by the first acquisition unit 110, each of the plurality of monitoring areas Ar. Is generated from the operation result La indicating the contents and results of the operation Ac executed by the worker determination unit 120 for determining whether or not the worker Pe exists and the device 40 used for each execution of the plurality of work steps Pr.
  • the operation result La indicating the contents and results of the operation Ac executed by the worker determination unit 120 for determining whether or not the worker Pe exists and the device 40 used for each execution of the plurality of work steps Pr.
  • a second acquisition unit 140 that acquires the obtained process information, an equipment determination unit 150 that determines whether the equipment 40 is operating using the process information acquired by the second acquisition unit, and a plurality of work process Prs. For each, (A) the time zone (operating period Da) determined by the device determination unit 150 that the device 40 used for carrying out the work process Pr is operating, and (B) the worker determination unit 120 A generator that generates data (association information Mi) that associates the time zone (stay period Do) determined that the worker Pe exists in the monitoring area Ar associated with the work process Pr with the data (association information Mi). It is equipped with 160.
  • the information processing apparatus 10 determines from the basic imaging data BI imaged by one ceiling camera 30 whether the worker Pe exists in the monitoring area Ar associated with the work process Pr. To do. Further, the information processing apparatus 10 determines from the process information whether or not the device 40 used for carrying out the work process Pr is operating. Then, in the information processing device 10, the worker Pe is assigned to the operation period Da, which is the time zone in which the device 40 is determined to be operating, and the monitoring area Ar associated with the work process Pr for each work process Pr. The association information Mi that associates the stay period Do, which is the time zone determined to exist, with the stay period Do is generated.
  • the information processing apparatus 10 uses one ceiling camera 30 to perform image analysis on the basic imaging data BI in which the entire work site WS is imaged, so that the "operation period Da during which the device 40 is operating" and the work are performed for each work process Pr.
  • the correspondence information Mi indicating "correspondence relationship with the stay period Do in which the person Pe exists in the monitoring area Ar" is generated.
  • the information processing device 10 uses one ceiling camera 30 capable of capturing the entire work site WS, thereby suppressing the realization cost, and the actual operation of the device 40 used in the work process Pr and the worker Pe. It has the effect of being able to grasp the correspondence with.
  • the work Op performed by the worker Pe during the stay period Do determined by the worker determination unit 120 that the worker Pe exists in the monitoring area Ar associated with the work process Pr. It is further provided with an estimation unit 180 that estimates the contents of the above using the operation result La of the device 40 used for carrying out the work process Pr.
  • the information processing apparatus 10 performs the work Op performed by the worker Pe during the stay period Do determined that the worker Pe exists in the monitoring area Ar associated with the work process Pr.
  • the content of the above is estimated using the operation result La of the device 40 used for carrying out the work process Pr.
  • the information processing apparatus 10 uses the operation result La of the device 40 for each work process Pr to display the contents of the work Op performed by the worker Pe existing in the monitoring area Ar associated with the work process Pr. , It has the effect of being able to be estimated.
  • the information processing device 10 corresponds to the work process Pr by the Gantt chart showing the operation period Da in which the device 40 used for executing the work process Pr is determined by the device determination unit 150 and the worker determination unit 120. It further includes a display control unit 170 that generates data that can be displayed by arranging a Gantt chart indicating a stay period Do for which it is determined that a worker Pe exists in the attached monitoring area Ar.
  • a Gantt chart showing the period of stay Do determined to be determined is displayed in parallel to generate data that can be displayed.
  • the information processing apparatus 10 can at a glance grasp the correspondence between the operation period Da of the device 40 and the stay period Do in which the worker Pe exists in the monitoring area Ar for each work process Pr. It has the effect of being able to be displayed to users such as the administrator.
  • the information processing device 10 further includes an area setting unit 190 that sets an analysis target area Aa to be image-analyzed as an imaged area of the monitoring area Ar with respect to the basic imaging data BI according to a user operation. ..
  • the information processing device 10 sets the analysis target area Aa for the basic imaging data BI according to the user operation. Therefore, the information processing device 10 has an effect that the analysis target region Aa can be set for the basic imaging data BI according to the user operation.
  • the information processing apparatus 10 whose outline has been described so far will be described next with reference to FIG. 1 for details of its configuration, and then the processing executed by the information processing apparatus 10 will be described with reference to FIG. To go.
  • FIG. 1 is a block diagram showing a main configuration of an information processing device 10 and the like included in the control system 1.
  • the information processing apparatus 10 generates the first acquisition unit 110, the worker determination unit 120, the storage unit 130, the second acquisition unit 140, and the device determination unit 150 as functional blocks.
  • a unit 160, a display control unit 170, an estimation unit 180, and an area setting unit 190 are provided.
  • the information processing device 10 transmits the partial imaging data OD extracted from the basic imaging data BI to the outside of the control system 1 (for example, the moving image storage server shown in FIG. 2). Etc. may be provided.
  • the configuration not directly related to the present embodiment is omitted from the description and the block diagram.
  • the information processing apparatus 10 may have the omitted configuration in accordance with the actual situation of implementation.
  • the first acquisition unit 110, the worker determination unit 120, the second acquisition unit 140, the device determination unit 150, the generation unit 160, the display control unit 170, the estimation unit 180, and the area setting unit 190 may be, for example, a CPU (central processing unit).
  • the 190 will be described.
  • the first acquisition unit 110 acquires the basic imaging data BI, which is the imaging data obtained by the ceiling camera 30 capturing the entire work site WS, from the ceiling camera 30, and transfers the acquired basic imaging data BI to the worker determination unit 120. Is output.
  • the basic imaging data BI which is the imaging data obtained by the ceiling camera 30 capturing the entire work site WS, from the ceiling camera 30, and transfers the acquired basic imaging data BI to the worker determination unit 120. Is output.
  • the worker determination unit 120 determines whether or not the worker Pe exists in the work site WS by image analysis of the basic imaging data BI, and if it determines that the worker Pe exists in the work site WS, the worker further determines that the worker Pe exists.
  • the monitoring area Ar where Pe exists is specified. That is, the worker determination unit 120 refers to the analysis target area table 131 of the storage unit 130 and grasps the correspondence relationship between the monitoring area Ar and the analysis target area Aa. Then, when the worker determination unit 120 confirms that the analysis target area Aa (m) includes the imaging data of the worker Pe, the worker Pe exists from the correspondence relationship between the monitoring area Ar and the analysis target area Aa. Is specified to be the monitoring area Ar (m).
  • the worker determination unit 120 may specify how many workers Pe exist for each monitoring area Ar.
  • the worker determination unit 120 identifies the worker ID of the worker Pe existing in the monitoring area Ar. For example, the worker determination unit 120 identifies that the worker ID of the worker Pe (x) existing in the monitoring area Ar (m) is the “worker Pe (x)”.
  • the worker determination unit 120 determines the work process Pr (m), that is, the monitoring area Ar (m) in the period from the stay start time Tos (m) (x) to the stay end time Toe (m) (x).
  • the stay period Do (m) (x) of a certain worker Pe (x) is calculated.
  • the worker determination unit 120 determines the specified (calculated) worker Pe (x) for each work process Pr, that is, for each monitoring area Ar, the stay start time Tos (x), and the stay end time Toe (x). , And the period of stay Do (x) is notified to the generation unit 160.
  • the worker determination unit 120 executes a flow line analysis capable of precisely grasping the existence and movement of the worker Pe, and performs the center coordinates of the worker Pe and the worker. ID and the like may be detected.
  • the second acquisition unit 140 acquires the process information from the PLC 20 and outputs the acquired process information to the device determination unit 150.
  • the process information is "the" operation result La of the device 40 "acquired by the PLC 20 from the device 40" and "the information generated by the PLC 20 using the acquired” operation result La of the device 40 "”. That is, the process information includes the operation result La, and the operation result La is information indicating the content and result of the operation Ac actually executed by the device 40 when the work process Pr is executed.
  • the PLC 20 uses the operation result La of the device 40 to calculate the operation period Da of the operation Ac executed by the device 40 and determine whether or not the operation Ac is an "automated operation".
  • the process information may include information indicating the operation period Da and the determination result.
  • the device determination unit 150 uses the process information acquired from the second acquisition unit 140, and in particular, using the operation result La of the device 40, "the device 40 used to carry out the work process Pr executes the operation Ac.
  • the operation start time Tms which is the "start time” is specified.
  • the device determination unit 150 uses the process information acquired from the second acquisition unit 140, and in particular, using the operation result La of the device 40, "the device 40 used to carry out the work process Pr is the operation Ac.
  • the operation completion time Tme which is the time when the execution is completed, is specified.
  • the device determination unit 150 calculates, for example, the time (period) from the operation start time Tms (m) specified for the operation Ac (m) to the operation completion time Tme (m) as the operation period Da (m). ..
  • the operation period Da (m) is "a period during which the operation Ac (m) is executed by the device 40 (m) used to carry out the work process Pr (m)".
  • the device determination unit 150 notifies the generation unit 160 of the operation period Da (m) calculated for the operation Ac (m) corresponding to the work process Pr (m).
  • the device determination unit 150 determines the operation period Da of the operation Ac corresponding to the work process Pr for each work process Pr (that is, the operation period Da of the operation Ac actually executed by the device 40 when the work process Pr is executed). Is notified to the generation unit 160.
  • the device determination unit 150 uses the process information acquired from the second acquisition unit 140, and in particular, using the operation result La of the device 40, "the operation Ac executed by the device 40 used to carry out the work process Pr". Is an "automated operation". For example, the device determination unit 150 uses the operation result La (m) of the device 40 (m) used to carry out the work process Pr (m) to "use the device 40 (m) when carrying out the work process Pr (m). Determines whether the "operation Ac (m)" executed by is an "automated operation”. The device determination unit 150 notifies the estimation unit 180 of the determination result of whether or not the operation Ac (m) is an "automated operation” as information indicating the operation content of the operation Ac (m).
  • the generation unit 160 includes "a stay period Do (x) of the worker Pe (x) for each work process Pr" acquired from the worker determination unit 120 and "for each work process Pr” acquired from the device determination unit 150. Information associated with the operation period Da of the operation Ac corresponding to the work process Pr is generated. Information in which "the stay period Do (x) of the worker Pe (x) for each work process Pr” and “the operation period Da of the operation Ac corresponding to the work process Pr for each work process Pr" are associated with each other. Is also referred to as "correspondence information Mi”.
  • the generation unit 160 has "the stay period Do (m) (x) of the worker Pe (x) for the work process Pr (m) (that is, the monitoring area Ar (m))” and “the work process Pr.
  • the association information Mi (m) associated with the operation period Da (m) of the operation Ac (m) for (m) is generated.
  • the “correspondence information Mi” for example, "the stay period Do (x) of the worker Pe (x) for each work process Pr (that is, the monitoring area Ar)” and "work process” with the time axis common.
  • the operation period Da of the operation Ac corresponding to the work process Pr is associated with the operation period Da.
  • the generation unit 160 notifies the display control unit 170 of the association information Mi for each generated work process Pr, and for example, notifies the display control unit 170 of the association information Mi (m) of the work process Pr (m). Further, the generation unit 160 notifies the display control unit 170 of the association information Mi for each generated work process Pr, and for example, notifies the estimation unit 180 of the association information Mi (m) of the work process Pr (m). ..
  • the generation unit 160 outputs the "work content of the work Op performed by the worker Pe during the stay period Do and the determination result of whether or not the work Op is standard work" notified from the estimation unit 180. It may be added to the correspondence information Mi generated for each Pr. The generation unit 160 adds "work content of the work Op performed by the worker Pe during the stay period Do and a determination result of whether or not the work Op is a standard work", and associating information for each work process Pr. Mi may be notified to the display control unit 170.
  • the display control unit 170 arranges the correspondence information Mi and the like generated by the generation unit 160 into a data format that can be displayed to the user.
  • the display control unit 170 transmits, for example, the correspondence information Mi or the like arranged in a data format that can be displayed to the user to the moving image storage server or the like shown in FIG.
  • the display control unit 170 provides the correspondence information Mi for each work process Pr including "the work content of the work Op and the determination result of whether or not the work Op is a standard work" notified from the generation unit 160.
  • the data format may be arranged so that it can be displayed to the user.
  • the estimation unit 180 estimates the work content of the "work Op performed by the worker Pe during the stay period Do" using the correspondence information Mi for each work process Pr notified from the generation unit 160, and "standard". Work (standard work) ”.
  • the estimation unit 180 uses the determination result of "whether or not the operation Ac (m) is an" automated operation "" notified from the device determination unit 150 to "worker Pe during the stay period Do”.
  • the work content of the work Op is estimated, and it is determined whether the work Op is a "standard work (standard work)".
  • the estimation unit 180 notifies the generation unit 160 of the work content estimated for the work Op and the determination result of whether or not the work Op is a standard work.
  • the area setting unit 190 accepts user operations and updates the information stored in the analysis target area table 131 according to the received user operations.
  • the storage unit 130 is a storage device that stores various data used by the information processing device 10.
  • the storage unit 130 includes (1) a control program, (2) an OS program, (3) an application program for executing various functions of the information processing device 10, and (4).
  • Various data to be read when the application program is executed may be stored non-temporarily.
  • the data (1) to (4) above may be, for example, ROM (read only memory), flash memory, EPROM (Erasable Programmable ROM), EEPROM (registered trademark) (Electrically EPROM), HDD (Hard Disc Drive), or the like. It is stored in a non-volatile storage device.
  • the information processing device 10 may include a temporary storage unit (not shown).
  • the temporary storage unit is a so-called working memory that temporarily stores data used for calculation and calculation results in the process of various processes executed by the information processing device 10, and is volatile storage such as RAM (Random Access Memory). It consists of devices. Which data is stored in which storage device is appropriately determined from the purpose of use, convenience, cost, physical restrictions, and the like of the information processing device 10.
  • the storage unit 130 further stores the analysis target area table 131.
  • the analysis target area table 131 stores a plurality of analysis target areas Aa, each of which corresponds to each of the plurality of monitoring areas Ar. For example, an analysis target area Aa for confirming the status of the monitoring area Ar (m) corresponding to the work process Pr (m) is set for the basic imaging data BI, and the analysis target area table 131 includes the work process Pr. The monitoring area Ar (m) associated with (m) is stored. Each of the plurality of analysis target areas Aa stored in the analysis target area table 131 is updated by the area setting unit 190 according to the user operation.
  • FIG. 4 is a flow chart showing an outline of processing executed by the information processing apparatus 10.
  • the second acquisition unit 140 acquires the process information from the PLC 20, including the operation result La that “indicates the content and result of the operation Ac actually executed by the device 40 when the work process Pr is executed” (S110).
  • the device determination unit 150 analyzes the process information acquired from the second acquisition unit 140 (S120), and identifies the operation Ac actually executed by the device 40 when the work process Pr is executed for each work process Pr (S120). S130). The device determination unit 150 calculates the operation period Da for the specified operation Ac, and determines whether or not it is an “automated operation”. The device determination unit 150 notifies the generation unit 160 of the calculated operation period Da of the operation Ac, and determines whether or not the operation Ac (m) is an "automated operation”, and determines whether or not the operation Ac (m) is an "automated operation”. ) Is notified to the estimation unit 180 as information indicating the operation content.
  • the first acquisition unit 110 acquires the basic imaging data BI in which the entire work site WS is imaged from one ceiling camera 30 installed on the ceiling of the work site WS (S140).
  • the worker determination unit 120 executes an image analysis on the basic imaging data BI, for example, a flow line analysis (S150).
  • the worker determination unit 120 identifies the work process Pr (m) corresponding to the monitoring area Ar (m) determined by the image analysis that the worker Pe exists (S160), and exists in the monitoring area Ar (m).
  • the worker ID of the worker Pe is specified (S170).
  • the worker determination unit 120 further specifies the number of workers Pe existing in the work site WS, and in particular, specifies the number of workers Pe existing for each analysis target area Aa, that is, for each monitoring area Ar. You may.
  • the worker determination unit 120 notifies the generation unit 160 of the stay period Do (x) of the specified (calculated) worker Pe (x) for each work process Pr, that is, for each monitoring area Ar.
  • the generation unit 160 generates the association information Mi in which the work process Pr, the operation Ac, and the worker Pe are associated with each other (S180). Specifically, the generation unit 160 has a period of stay Do (m) of the worker Pe (x) for the “work process Pr (m) (that is, the monitoring area Ar (m)) acquired from the worker determination unit 120. ) (X) ”and the correspondence information Mi (m) in which the“ operation period Da (m) of the operation Ac (m) for the work process Pr (m) ”obtained from the device determination unit 150 is associated. Generate.
  • the generation unit 160 includes the "stay period Do (m) (x) of the worker Pe (x) and the operation period Da (m) of the operation Ac (m) for the work process Pr (m) generated in S180.
  • the correspondence information Mi (m) of the above is notified to the estimation unit 180.
  • the estimation unit 180 is based on the correspondence information Mi (m) generated by the generation unit 160 and the determination result of "whether or not the operation Ac (m) is an" automated operation "" by the device determination unit 150.
  • the work content of the work Op (m) performed during the stay period Do (m) is estimated (S190).
  • the estimation unit 180 determines whether or not the work Op (m) for which the work content is estimated is a standard work, identifies, for example, the work process Pr that is a bottleneck (S200), and also performs basic imaging.
  • the abnormal flow line in the data BI is specified (S210). That is, the estimation unit 180 notifies the user that the work process Pr (m) corresponding to the work Op (m) determined to be not the standard work may be a bottleneck.
  • the movement (traffic line) of the worker Pe who has performed the work Op (m) determined by the estimation unit 180 to be non-standard work is a normal movement (traffic line) seen when performing the work Op (m). ) Is different (that is, abnormal) is notified to the user.
  • the processing executed by the information processing apparatus 10 (in other words, the control method executed by the information processing apparatus 10) described so far with reference to FIG. 4 can be organized as follows. That is, the process (control method) executed by the information processing apparatus 10 is a single ceiling camera for the entire work site WS including the plurality of monitoring areas Ar, each of which is associated with each of the plurality of work process Prs.
  • the process (control method) executed by the information processing apparatus 10 is a single ceiling camera for the entire work site WS including the plurality of monitoring areas Ar, each of which is associated with each of the plurality of work process Prs.
  • image analysis of the first acquisition step (S140) for acquiring the basic imaging data BI imaged by the 30 (wide area imaging camera) and the basic imaging data BI acquired in the first acquisition step each of the plurality of monitoring areas Ar.
  • the operation result La showing the contents and results of the operation Ac executed by the device 40 used for each execution of the worker determination step (S170) for determining whether or not the operator Pe exists and the plurality of work steps Pr.
  • the time zone (operation period Da) in which the device 40 used for carrying out the work process Pr is determined to be operating in the device determination step (A), and (B).
  • Data correspondence information
  • the information processing method determines from the basic imaging data BI imaged by one ceiling camera 30 whether the worker Pe exists in the monitoring area Ar associated with the work process Pr. To do. Further, the information processing method determines from the process information whether or not the device 40 used for carrying out the work process Pr is operating. Then, in the information processing method, the worker Pe exists in the operation period Da determined that the device 40 is operating and the monitoring area Ar associated with the work process Pr for each work process Pr. The association information Mi that associates the stay period Do determined to be is generated.
  • the "operation period Da in which the device 40 is operating and the work" for each work process Pr are performed by image analysis of the basic imaging data BI in which the entire work site WS is imaged by one ceiling camera 30.
  • the correspondence information Mi indicating "correspondence relationship with the stay period Do in which the person Pe exists in the monitoring area Ar" is generated.
  • the actual operation of the device 40 used in the work process Pr and the worker Pe are performed while suppressing the realization cost. It has the effect of being able to grasp the correspondence with.
  • the worker determination unit 120 determines that the worker Pe exists in the monitoring area Ar which has been determined that the worker Pe did not exist before by the image analysis for the analysis target area Aa. The time when this happens is specified as Tos at the start of stay. Further, the worker determination unit 120 determines that the worker Pe does not exist in the monitoring area Ar which has previously determined that the worker Pe exists by the image analysis for the analysis target area Aa. The time when the person comes to do so is specified as the Toe at the end of the stay.
  • the worker determination unit 120 sets the time from the stay start time Tos (m) to the stay end time Toe (m) for the monitoring area Ar (m) associated with the work process Pr (m). Identifies as the time that was present.
  • the worker determination unit 120 specifies (measures) the stay period Do for each work process Pr (that is, for each monitoring area Ar), and further for each work process Pr (that is, for each monitoring area Ar).
  • the frequency of stay period Do may be calculated.
  • the worker determination unit 120 determines the frequency of the stay period Do (m) (1) of 0 to 4 minutes for the “n” stay period Do (m) (1) of the worker Pe (1), 5 Calculate the frequency of stay period Do (m) (1) from minutes to 9 minutes, ..., frequency of stay period Do (m) (1) for "5 (p-1)" minutes to "5p-1" You may.
  • the worker determination unit 120 extracts the stay period Do (m) having a frequency lower than the predetermined standard as the “non-standard” stay period Do (m) for the stay period Do (m) of “n” times. Alternatively, the extracted “non-standard” length of stay Do (m) may be notified to the estimation unit 180.
  • the estimation unit 180 describes the "non-standard” stay period Do extracted by the worker determination unit 120, and "the work Op performed by the worker Pe in the" non-standard "stay period Do is" standard work ". It may be determined that it is not (non-standard work).
  • the estimation unit 180 estimates the work content of the "work Op performed by the worker Pe during the stay period Do" using the correspondence information Mi for each work process Pr generated by the generation unit 160. Determine if it is “standard work (standard work)". In particular, the estimation unit 180 uses the determination result of "whether or not the operation Ac (m) is an” automated operation "" generated by the device determination unit 150 to "work in the stay period Do (m)". The work content of "work Op (m)" performed by the person Pe is estimated, and it is determined whether or not the work is "standard work (standard work)”.
  • the following is an estimation process of the work content of the "work Op (m) performed by the worker Pe during the stay period Do (m)" executed by the estimation unit 180, and a determination process of whether or not the work is a standard work. The details of.
  • the estimation unit 180 from the correspondence information Mi (m) of the work process Pr (m) generated by the generation unit 160, the worker Pe performs the monitoring area Ar (m) at the “operation start time Tms (m)”. ) Was present, and the following estimation and judgment are performed. That is, the estimation unit 180 estimates that "at the operation start time Tms (m), the worker Pe has executed the start instruction work of the operation Ac (m) to the device 40 (m)".
  • the work Op (m) executed by the worker Pe existing in the monitoring area Ar (m) at the operation start time Tms (m) includes, for example, preparatory work for carrying out the work process Pr (m), pressing the start button, and the like.
  • the work of putting the work into the device 40 (m), such as setting the work, is an example of the preparatory work for carrying out the work process Pr (m).
  • These operations are "normal operations performed by the worker Pe before and after the time when the device 40 (m) used for carrying out the work process Pr (m) starts executing the operation Ac (m)". , Also called "standard work”.
  • the estimation unit 180 determines that "the start instruction work or the like performed by the worker Pe during the stay period Do (m) overlapping the operation start time Tms (m) is a standard work".
  • the estimation unit 180 from the correspondence information Mi (m) of the work process Pr (m) generated by the generation unit 160, the worker Pe performs the monitoring area Ar (m) at the “operation completion time Tme (m)”. ) was present, and the following estimation and judgment are performed. That is, the estimation unit 180 estimates that "at the operation completion time Tme (m), the worker Pe has executed the completion instruction work of the operation Ac (m) to the device 40 (m)".
  • the work Op (m) executed by the worker Pe existing in the monitoring area Ar (m) at the operation completion time Tme (m) is, for example, after the completion instruction work such as pressing the end button and the completion of the work process Pr (m).
  • the work for which the work process Pr (m) has been completed that is, the work for collecting the work for which the operation Ac (m) by the device 40 (m) used for carrying out the work process Pr (m) has been completed is the work process Pr (m).
  • These operations are "normal operations performed by the worker Pe before and after the time when the device 40 (m) used for carrying out the work process Pr (m) completes the execution of the operation Ac (m)". , Also called "standard work".
  • the estimation unit 180 determines that "the completion instruction work or the like performed by the worker Pe during the stay period Do (m) overlapping the operation completion time Tme (m) is a standard work".
  • the estimation unit 180 uses the correspondence information Mi (m) of the work process Pr (m) generated by the generation unit 160 to indicate the operation completion time Tme (m) (p) of the “p” th operation Ac (m). ) To the operation start time Tms (m) (p + 1) of the "p + 1" th operation Ac (m), when it is confirmed that the stay period Do (m) exists, the following estimation and determination are executed. .. That is, in the estimation unit 180, the worker Pe executes the setup work and the like during the stay period Do (m) between the operation completion time Tme (m) (p) and the operation start time Tms (m) (p + 1). I presume. Since the setup work and the like are "normal work performed by the worker Pe between the operation completion time Tme (m) (p) and the operation start time Tms (m) (p + 1)", the estimation unit 180 Determines that "setup work, etc. is standard work".
  • the estimation unit 180 has a stay period Do (m) that does not overlap with the operation period Da (m) of the device 40 (m), and operates within a predetermined time after the end of the stay period Do (m).
  • the following estimation is performed for the period of stay Do (m) in which the period Da (m) appears. That is, the estimation unit 180 presumes that "the worker Pe was executing the setup work or the like during such a stay period Do (m)", and “the worker during such a stay period Do (m)".
  • the work Op (m) performed by Pe is a standard work.
  • the estimation unit 180 is the work performed by the worker Pe who was present in the monitoring area Ar (m) while the "equipment 40 (m) used for carrying out the work process Pr (m)" was executing the operation Ac (m).
  • the work content is estimated and it is determined whether or not it is a standard work.
  • the estimation unit 180 uses the determination result of "whether or not the operation Ac (m) is an" automated operation "" notified from the device determination unit 150 to "operate the operation Ac (m)".
  • the work content of the work Op (m) of the worker Pe who "exists in the monitoring area Ar (m)” is estimated, and it is determined whether or not it is a standard work.
  • the estimation unit 180 determines the determination result of "whether or not the operation Ac (m) executed by the device 40 (m) in carrying out the work process Pr (m) is an" automated operation "". Obtained from the determination unit 150.
  • automated operation is an operation Ac (m) executed by the device 40 (m) when the work process Pr (m) is performed, and is an operation Ac (m) having the following properties. ). That is, “automated operation” means “additional work Op (m) by the worker Pe during the execution of the operation (m) by the device 40 (m), that is, during the operation period Da (m). Is not normally required. ”Operation Ac (m).
  • the "automated inspection operation” is a work from the start of the "automated inspection operation” by the device 40 (m), which is an automatic inspection machine, to the completion of the "automated inspection operation".
  • No additional work Op (m) by the person Pe is usually required. That is, the "automated inspection operation” usually does not require an additional work Op (m) by the worker Pe from the start of the execution to the completion of the execution, that is, the operation of the "automated inspection operation”. No additional work Op (m) by the worker Pe during the period Da (m) is usually required. Therefore, the "automated inspection operation” is an "automated operation”.
  • the operation Ac (m) that is the “operation Ac (m) executed by the device 40 (m) when the work process Pr (m) is performed” and is not the “automated operation” is ".
  • non-automated operation or “manual operation”, that is, “non-automated operation”.
  • the “non-automated operation” is an operation Ac (m) executed by the device 40 (m) when the work process Pr (m) is performed, and is an operation Ac (m) having the following properties. is there. That is, “non-automated operation” means "additional work Op (m) by the worker Pe during the execution of the operation (m) by the device 40 (m), that is, during the operation period Da (m). ) Is usually required. ”Operation Ac (m).
  • the "assembly assisting operation” is an operation Ac (m) that assists the assembly work Op (m) by the worker Pe, and after the device 40 (m) starts the “assembly assisting operation", the “assembly assisting operation” is performed.
  • the assembly work Op (m) by the worker Pe is required until the "operation” is completed. That is, the “assembly auxiliary operation” usually requires an additional work Op (m) by the worker Pe from the start of execution to the completion of execution, that is, the operation period Da (m) of the "assembly auxiliary operation”. Additional work Op (m) by the worker Pe in the middle is usually required. Therefore, the "assembly auxiliary operation” is a "non-automated operation”.
  • the estimation unit 180 determines that the operation period Da (m) and the stay period Do ( Check that m) does not overlap for a predetermined time or longer.
  • the operation Ac (m) which is an “automated operation", "usually does not require an additional work Op (m) by the worker Pe during the operation period Da (m)".
  • the operating period Da (m) and the stay period Do (m) usually do not overlap for a predetermined time or longer.
  • the estimation unit 180 confirms that the operation period Da (m) and the stay period Do (m) overlap for a predetermined time or more in the correspondence information Mi (m) of the work process Pr (m). , "An unusual situation has occurred during the implementation of the work process Pr (m)". That is, when the estimation unit 180 confirms that the stay period Do (m) overlaps the operation period Da (m) of the operation Ac (m), which is an "automated operation", for a predetermined time or more, " The work Op (m) performed by the worker Pe during the stay period Do (m) is a non-standard work. "
  • the estimation unit 180 makes the following determinations regarding the work Op (m) performed by the worker Pe on the Do (m). That is, the estimation unit 180 estimates that "the worker Pe is performing maintenance work or repair work on the device 40 (m)", and "the worker Pe during the stay period Do (m)".
  • the work Op (m) performed by is a non-standard work.
  • the stay period The estimation unit 180 makes the following determinations regarding the work Op (m) performed by the worker Pe on the Do (m). That is, the estimation unit 180 estimates that "the worker Pe may be wasting time until the completion of the operation Ac (m), which is an" automated operation "", and "the period of stay".
  • the work Op (m) performed by the worker Pe during Do (m) is a non-standard work.
  • the estimation unit 180 determines that the operation period Da of the operation Ac (m) is Make sure that m) always overlaps with the length of stay Do (m).
  • the operation Ac (m) which is an "unautomated operation" is "usually requires an additional work Op (m) by the worker Pe during the operation period Da (m)".
  • the operation period Da (m) always overlaps with the stay period Do (m).
  • the estimation unit 180 confirms that the operation period Da (m) that does not overlap with the stay period Do (m) exists in the association information Mi (m) of the work process Pr (m), it is confirmed. It is determined that "an unusual situation has occurred in the operation period Da (m) that does not overlap with the stay period Do (m)". That is, when the estimation unit 180 confirms that the operation period Da (m) that does not overlap with the stay period Do (m) exists, "the stay period Do (m) before and after the operation period Da (m)” )
  • the work Op (m) performed by the worker Pe is a non-standard work.
  • the operation Ac (m) which is an “unautomated operation”, which does not overlap with the stay period Do (m)
  • the operation Ac (m) that should have been executed originally may be interrupted for some reason.
  • the estimation unit 180 uses the correspondence information Mi (m) of the work process Pr (m) to "what kind of work Op (what kind of work Op is performed by the worker Pe during the stay period Do (m)). "Did you execute m)?" Is estimated. Then, the estimation unit 180 determines whether or not the estimated work Op (m) is a standard work (standard work) to be performed when the work process Pr (m) is performed.
  • the estimation unit 180 uses the correspondence information Mi (m) of the work process Pr (m) to perform the operation start time Tms (m), the operation completion time Tme (m), and the operation of the device 40 (m). Specify the period Da (m). Then, the estimation unit 180 confirms whether or not each of the specified operation start time Tms, operation completion time Tme, and operation period Da and the stay period Do overlap, and based on the confirmation result, the stay period The estimation and determination of the work Op performed by the worker Pe in Do is executed.
  • the estimation unit 180 describes the contents of the operation Ac (m) of the device 40 (m) during the operation period Da (m), specifically, the operation executed by the device 40 (m) during the operation period Da (m).
  • the determination result of whether or not the Ac (m) is the "automated operation” is acquired from the device determination unit 150.
  • the estimation unit 180 confirms that the operation period Da has a stay period Do that overlaps for a predetermined time or more, the estimation unit 180 uses the content of the operation Ac of the device 40 in the operation period Da to obtain the stay period Do. In, the estimation and determination of the work Op performed by the worker Pe is executed.
  • the estimation unit 180 uses the content of the operation Ac (the result of determining whether or not the operation Ac is an "automated operation") and uses the "stay period Do that overlaps the operation period Da for a predetermined time or more".
  • the work content of the work Op in "" is estimated, and it is determined whether the work Op is a standard work.
  • the content of the work Op is estimated depending on the estimation method and the determination method described above, and whether it is “standard work” or “non-standard work”. It is also conceivable that the work Op cannot determine whether or not.
  • the estimation unit 180 may determine the work Op, for which the determination method described above cannot determine whether the work is "standard work” or "non-standard work”, as "non-standard work”.
  • FIG. 5 is a diagram showing a method in which the worker determination unit 120 identifies the worker Pe and the monitoring area Ar by using the basic imaging data BI.
  • the worker determination unit 120 the worker Pe exists for each of the plurality of monitoring areas Ar corresponding to each of the plurality of work process Prs by image analysis on the basic imaging data BI. Is determined. Then, with respect to the monitoring area Ar determined that the worker Pe exists, the worker ID of the worker Pe existing in the monitoring area Ar is specified.
  • the worker determination unit 120 executes the following determination by image analysis on the basic imaging data BI, particularly by image analysis on a plurality of analysis target areas Aa. That is, the worker determination unit 120 determines that the worker Pe exists in the monitoring area Ar (2) and the monitoring area Ar (4) from the monitoring area Ar (1) to the monitoring area Ar (5). ..
  • the worker ID of the worker Pe existing in the monitoring area Ar (2) is "worker Pe (2)"
  • the worker Pe existing in the monitoring area Ar (4) It is specified that the worker ID is "worker Pe (1)”.
  • FIG. 6 is a diagram showing an example of the association information Mi generated by the generation unit 160, in which “the operation period Da and the stay period Do are associated with each work process Pr”.
  • the generation unit 160 has obtained the "stay period Do (m) (x) of the worker Pe (x) for the work process Pr (m)" acquired from the worker determination unit 120 and the "equipment determination unit 150".
  • the correspondence information Mi (m) is generated by using the operation period Da (m) of the operation Ac (m) for the work process Pr (m).
  • the correspondence information Mi (m) illustrated in FIG. 6 "the stay period Do (m) of the worker Pe for the work process Pr (m)” and “the operation Ac (for the work process Pr (m)”
  • the operation period Da (m) of m) is associated with the common time axis.
  • the estimation unit 180 distinguishes whether or not the operation Ac (m) executed during the operation period Da (m) is an "automated operation", and sets the stay period Do (m) and the operation period Da (m). You may generate the information associated with. As described above, by distinguishing whether or not the operation Ac (m) is an "automated operation", the estimation unit 180 performs the work Op (m) performed by the worker Pe during the stay period Do (m). It is possible to more precisely determine whether or not is "standard work”.
  • FIG. 6A shows an estimation unit 180 for “work Op (m) performed by worker Pe during the stay period Do (m)” when the movement Ac (m) is “automated operation”. Shows an example of the results of the estimation performed by.
  • the estimation unit 180 indicates that the work Op (m) performed by the worker Pe during the stay period Do (m) overlapping the operation start time Tms (m) is a “standard” such as a start instruction work. Judged as "work”. The estimation unit 180 determines that the work Op (m) performed by the worker Pe during the stay period Do (m) overlapping the operation completion time Tme (m) is a "standard work” such as a completion instruction work. The estimation unit 180 has a stay period Do (m) that does not overlap with the operation period Da (m), and the stay period Do in which the operation period Da (m) appears within a predetermined time after the end of the stay period Do (m). It is determined that the work Op performed by the worker Pe in (m) is a "standard work” such as a setup work.
  • the estimation unit 180 determines. , "Work Op (m) is a non-standard work such as waiting for inspection”.
  • FIG. 6B shows the work Op (m) performed by the worker Pe during the “stay period Do (m)” when the movement Ac (m) is a “non-automated movement (that is, a manual movement)”. ) ”,
  • An example of the result of estimation executed by the estimation unit 180 is shown.
  • the work Op (m) performed by the worker Pe during the stay period Do (m) overlapping at least one of the operation start time Tms (m) and the operation completion time Tme (m) is a start instruction work or the like.
  • it is determined that the work is "standard work" such as completion instruction work.
  • the estimation unit 180 has a stay period Do (m) that does not overlap with the operation period Da (m), and the stay period Do in which the operation period Da (m) appears within a predetermined time after the end of the stay period Do (m). It is determined that the work Op performed by the worker Pe in (m) is a "standard work" such as a setup work.
  • the estimation unit 180 determines the “stay period Do”.
  • the work Op performed by the worker Pe in (m) is a non-standard work.
  • FIG. 7 shows a screen example showing the correspondence between the operation period Da and the stay period Do in a list format for a plurality of work process Prs.
  • the information processing device 10 displays the correspondence between the operation period Da and the stay period Do, for example, on an external display device (external device 70, etc. in FIG. 2) for a plurality of work process Prs. It may be displayed in a list format.
  • the information processing apparatus 10 allows the user to discover the work process Pr that is a bottleneck and improve it. Can be facilitated to consider.
  • FIG. 8 is a diagram showing an example of a work site WS in which a plurality of monitoring areas Ar are arranged in correspondence with the execution order of a plurality of work process Prs.
  • the generation unit 160 or the estimation unit 180 of the worker Pe at the work site WS by image analysis on the basic imaging data BI, in particular, by image analysis on each of the plurality of analysis target areas Aa corresponding to the plurality of work process Prs.
  • Information indicating the progress of movement may be generated.
  • Such information indicating the movement progress of the worker Pe is a bottleneck especially for the work site WS in which a plurality of monitoring areas Ar are arranged in correspondence with the execution order of the plurality of work processes Pr. It is useful for discovering work process Pr and considering improvement.
  • FIG. 9 is a diagram showing an example of information indicating the movement progress of the worker Pe at the work site WS generated by the generation unit 160 by image analysis on the basic imaging data BI.
  • the user can perform the following examination, for example.
  • the user can use the worker Pe from the monitoring area Ar (6) to the monitoring area Ar (7), from the monitoring area Ar (7) to the monitoring area Ar (8), and from the monitoring area Ar (8) to the monitoring area Ar (7). ), Confirm that the movement from the monitoring area Ar (7) to the monitoring area Ar (6) is repeated.
  • the monitoring area Ar (6) corresponds to the work process Pr (6): inspection process
  • the user can use the following, for example, from the “information indicating the movement progress of the worker Pe at the work site WS” illustrated in FIG. The situation can be estimated.
  • the worker Pe performs the work Op (6) in the inspection process: the work Op in the work process Pr (7) and the work process Pr (8) in parallel with the inspection work. It can be estimated that (7) and work Op (8) are being performed.
  • the user configures "1 cycle” from "information indicating the movement progress of the worker Pe at the work site WS" when, for example, the same movement progress occurs repeatedly. It is possible to specify a plurality of work process Prs. Similarly, the user can identify the "(cycle) switching step" from the movement progress of the worker Pe between cycles.
  • the information processing device 10 and the PLC 20 may be connected to each other so as to be able to communicate with each other via an internal bus, or the information processing device 10 and the PLC 20 may be integrated. That is, the information processing device 10 may be configured as an IPC (Industrial PC) in which the information processing device 10 and the PLC 20 are integrated.
  • IPC Intelligent PC
  • the information processing apparatus 10 that has received the process information from the PLC 20 has performed the device determination process for the operation result La (particularly, the operation Ac) included in the process information. That is, in the examples described so far, the device determination unit 150 included in the information processing device 10 calculates the operation start time Tms, the operation completion time Tme, and the operation period Da of the operation Ac from the operation result La, and operates. A determination was made as to whether or not the Ac was an "automated operation".
  • the PLC 20 may execute the device determination process for the operation result La (particularly, the operation Ac) included in the process information, and the PLC 20 includes the result of the device determination process in the process information or the process information.
  • the information may be transmitted to the information processing apparatus 10.
  • the device determination unit 150 may be provided in the PLC 20, and the information processing device 10 may acquire the result of the device determination process for the operation result La (particularly, the operation Ac) included in the process information from the PLC 20.
  • the information processing device 10 only needs to be able to generate the association information Mi for each work process Pr by using the result of the device determination process for the operation result La (particularly, the operation Ac) included in the process information, and the device determination for the operation result La. It is not essential that the information processing apparatus 10 executes the process.
  • the functional blocks of the information processing device 10 (specifically, the first acquisition unit 110, the worker determination unit 120, the second acquisition unit 140, the device determination unit 150, the generation unit 160, the display control unit 170, the estimation unit 180, and the like.
  • the area setting unit 190 may be realized by a logic circuit (hardware) formed in an integrated circuit (IC chip) or the like, or may be realized by software using a CPU (Central Processing Unit).
  • the information processing device 10 is a CPU that executes instructions of a program that is software that realizes each function, and a ROM (Read Only Memory) in which the above program and various data are readablely recorded by a computer (or CPU).
  • a computer or CPU
  • it is equipped with a storage device (referred to as a "recording medium"), a RAM (Random Access Memory) for developing the above program, and the like.
  • the object of the present invention is achieved by the computer (or CPU) reading the program from the recording medium and executing the program.
  • the recording medium a "non-temporary tangible medium", for example, a tape, a disk, a card, a semiconductor memory, a programmable logic circuit, or the like can be used.
  • the program may be supplied to the computer via an arbitrary transmission medium (communication network, broadcast wave, etc.) capable of transmitting the program.
  • the present invention can also be realized in the form of a data signal embedded in a carrier wave, in which the above program is embodied by electronic transmission.
  • the information processing apparatus captures imaging data obtained by capturing an entire work site including a plurality of monitoring areas, each of which is associated with each of a plurality of work processes, with a single wide area imaging camera.
  • a first acquisition unit to be acquired an operator determination unit that determines whether or not an operator exists for each of the plurality of monitoring areas by image analysis of the imaging data acquired by the first acquisition unit, and an operator determination unit.
  • a second acquisition unit that acquires process information generated from operation results indicating the contents and results of operations performed by the equipment used for each execution of the plurality of work processes, and the second acquisition unit acquired by the second acquisition unit.
  • the device determination unit determines whether the device is operating and the plurality of work processes using the process information. For each of the device determination unit that determines whether the device is operating and the plurality of work processes using the process information, (A) the device that was used to carry out the work process by the device determination unit. The time zone when it is determined that the worker is operating and (B) the time zone when the worker determination unit determines that the worker exists in the monitoring area associated with the work process. It is provided with a generation unit that generates data associated with and.
  • the information processing apparatus determines from the imaging data captured by the one wide area imaging camera whether or not an operator exists in the monitoring area associated with the work process, and also From the process information, it is determined whether or not the equipment used for carrying out the work process is operating. Then, the information processing apparatus determines that the worker exists in the time zone in which the device is determined to be operating and the monitoring area associated with the work process for each work process. Generate data associated with the time zone.
  • the information processing device by image analysis of the imaged data obtained by capturing the entire work site with one wide area imaging camera, "the time zone in which the device is operating and the operator are present in the monitoring area” for each work process. Generate data showing "correspondence with the time zone".
  • the information processing apparatus uses one wide-area imaging camera capable of capturing the entire work site, thereby suppressing the realization cost, and the correspondence between the actual operation of the equipment used in the work process and the operator. It has the effect of being able to grasp.
  • the worker is determined to be present in the monitoring area associated with the work process by the worker determination unit.
  • the information processing apparatus determines that the worker is present in the monitoring area associated with the work process, and the content of the work performed by the worker during the time period. Is estimated using the operation result of the device used for carrying out the work process.
  • the information processing apparatus estimates the content of the work performed by the worker existing in the monitoring area associated with the work process by using the operation result of the device for each work process. It has the effect of being able to.
  • the information processing apparatus includes a Gantt chart showing a time zone in which the device used for carrying out the work process is determined to be operating by the device determination unit, and the worker determination unit. Further, a display control unit that generates data that can be displayed in parallel with a Gantt chart indicating a time zone in which the worker is determined to exist in the monitoring area associated with the work process is further provided. You may have it.
  • the information processing apparatus has a Gantt chart showing a time zone in which the device is determined to be operating for each work process, and the worker is present in the monitoring area.
  • a Gantt chart showing the determined time zone and a displayable data are generated in parallel.
  • the information processing apparatus manages the correspondence between the operating time of the device and the time when the worker is present in the monitoring area for each work process in a form that can be grasped at a glance. It has the effect of being able to be displayed to people.
  • the information processing apparatus further includes an area setting unit that sets an analysis target area to be image-analyzed as an imaged area of the monitoring area with respect to the imaged data according to a user operation. You may have it.
  • the information processing apparatus sets the analysis target area for the imaged data according to the user operation. Therefore, the information processing device has an effect that the analysis target area can be set for the imaged data according to the user operation.
  • the entire work site including a plurality of monitoring areas, each of which is associated with each of the plurality of work processes, is imaged by one wide area imaging camera.
  • An operator who determines whether or not an operator exists for each of the plurality of monitoring areas by the first acquisition step of acquiring the imaging data and the image analysis of the imaging data acquired in the first acquisition step.
  • the work process is executed in the device determination step.
  • the worker is present in the monitoring area associated with the work process in the time zone in which the device used in the above is determined to be operating and (B) the worker determination step. It includes a generation step for generating data in which the time zone determined to be present is associated with the time zone.
  • the information processing method determines from the imaging data captured by the one wide-area imaging camera whether or not an operator exists in the monitoring area associated with the work process, and also From the process information, it is determined whether or not the equipment used for carrying out the work process is operating. Then, the information processing method determines that a worker exists in the time zone in which the device is determined to be operating and the monitoring area associated with the work process for each work process. Generate data associated with the time zone.
  • the time zone in which the equipment is operating and the worker exists in the monitoring area for each work process by image analysis of the image data obtained by capturing the entire work site with one wide area image camera. Generate data showing "correspondence with the time zone”.
  • the information processing method by using one wide area imaging camera capable of capturing the entire work site, the actual operation of the equipment used in the work process and the correspondence relationship with the worker are suppressed while suppressing the realization cost. It has the effect of being able to grasp.
  • Information processing device information processing device
  • Ceiling camera wide area imaging camera
  • equipment equipment, slave
  • Equipment judgment unit 110
  • 1st acquisition unit 120
  • Worker judgment unit 140
  • Equipment judgment unit 160
  • Generation unit 170
  • Display control unit 180 Estimation unit 190
  • Area setting unit Aa Analysis target area Ac Operation Ar Monitoring area BI Basic imaging data (basic data) Da operating period (time zone when it is determined that the device is operating) Do stay period (time zone when it is determined that a worker exists)

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Human Resources & Organizations (AREA)
  • Strategic Management (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Economics (AREA)
  • Theoretical Computer Science (AREA)
  • Quality & Reliability (AREA)
  • Multimedia (AREA)
  • Tourism & Hospitality (AREA)
  • Marketing (AREA)
  • Operations Research (AREA)
  • General Business, Economics & Management (AREA)
  • Development Economics (AREA)
  • Game Theory and Decision Science (AREA)
  • Educational Administration (AREA)
  • Signal Processing (AREA)
  • Automation & Control Theory (AREA)
  • Manufacturing & Machinery (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Factory Administration (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

実現コストを抑えつつ、作業工程の実施に用いられる機器の実際の動作と作業者の行った作業との対応関係を把握する。情報処理装置（１０）は、１台の天井カメラ（３０）が作業現場ＷＳの全体を撮像した基礎撮像データ（ＢＩ）と、ＰＬＣ（２０）から取得した工程情報とを対応付ける。

Description

情報処理装置、情報処理方法、情報処理プログラム、および記録媒体
　本発明は、複数の作業工程の実施状況を撮影した撮像データから、作業工程の改善等に利用可能なデータを生成する情報処理装置等に関する。
　従来、工場等の生産現場における作業工程の実施状況を撮像した撮像データを、当該作業工程の改善等に利用する試みが知られている。例えば、下掲の特許文献１には、作業現場に配置された複数のカメラで撮影した作業映像データを解析して、作業者が実際に作業を行うことのできた時間である実作業時間を検出し、検出した実作業時間を用いてボトルネックとなっている作業工程を特定する技術が開示されている。
日本国公開特許公報「特開２０１９－２３８０３号公報」
　しかしながら、上述のような従来技術には、作業者による作業の状況を監視するための複数のカメラを必要としているため、既存の生産現場等に実際に適用する際の導入コストが大きくなるという問題がある。
　本発明の一態様は、前記の問題点に鑑みてなされたものであり、実現コストを抑えつつ、作業工程の実施に用いられる機器の実際の動作と作業者の行った作業との対応関係を把握することを目的としている。
　上記の課題を解決するために、本発明の一態様に係る情報処理装置は、各々が複数の作業工程の各々に対応付けられている、複数の監視領域を含む作業現場全体を、１台の広域撮像カメラで撮像した撮像データを取得する第１取得部と、前記第１取得部により取得された前記撮像データに対する画像解析により、前記複数の監視領域の各々について、作業者が存在しているかを判定する作業者判定部と、前記複数の作業工程の各々の実施に用いられる機器が実行した動作の内容および結果を示す動作結果から生成された工程情報を取得する第２取得部と、前記第２取得部により取得された前記工程情報を用いて、前記機器が動作しているかを判定する機器判定部と、前記複数の作業工程の各々について、（Ａ）前記機器判定部により、前記作業工程の実施に用いられた前記機器が動作していると判定された時間帯と、（Ｂ）前記作業者判定部により、前記作業工程に対応付けられている前記監視領域に前記作業者が存在していると判定された時間帯と、を対応付けたデータを生成する生成部と、を備えている。
　上記の課題を解決するために、本発明の一態様に係る情報処理装置の制御方法は、各々が複数の作業工程の各々に対応付けられている、複数の監視領域を含む作業現場全体を、１台の広域撮像カメラで撮像した撮像データを取得する第１取得ステップと、前記第１取得ステップにて取得された前記撮像データに対する画像解析により、前記複数の監視領域の各々について、作業者が存在しているかを判定する作業者判定ステップと、前記複数の作業工程の各々の実施に用いられる機器が実行した動作の内容および結果を示す動作結果から生成された工程情報を取得する第２取得ステップと、前記第２取得ステップにて取得された前記工程情報を用いて、前記機器が動作しているかを判定する機器判定ステップと、前記複数の作業工程の各々について、（Ａ）前記機器判定ステップにて、前記作業工程の実施に用いられた前記機器が動作していると判定された時間帯と、（Ｂ）前記作業者判定ステップにて、前記作業工程に対応付けられている前記監視領域に前記作業者が存在していると判定された時間帯と、を対応付けたデータを生成する生成ステップと、含んでいる。
　本発明の一態様によれば、実現コストを抑えつつ、作業工程の実施に用いられる機器の実際の動作と作業者の行った作業との対応関係を把握することができるという効果を奏する。
本発明の実施形態１に係る情報処理装置等の要部構成を示すブロック図である。 図１の情報処理装置を含む制御システム等の全体概要を示す図である。 図１の情報処理装置が取得する基礎撮像データのイメージを示す図である。 図１の情報処理装置が実行する処理の概要を説明するフロー図である。 図１の情報処理装置が基礎撮像データ（画像）を用いて、作業者と監視領域とを特定する方法を示す図である。 作業工程ごとの、機器の動作期間と作業者の滞在期間との対応関係を示す情報の一例を示す図である。 複数の作業工程について、機器の動作期間と作業者の滞在期間との対応関係を一覧形式で示す画面例である。 複数の作業工程の実施順序に対応させて、複数の監視領域が配置されている作業現場の一例を示す図である。 作業現場における作業者の移動経過を示す情報の一例を示す図である。
　〔実施形態１〕
　以下、本発明の一側面に係る実施の形態（以下、「本実施形態」とも表記する）を、図１から図９に基づいて説明する。なお、図中同一または相当部分には同一符号を付してその説明は繰返さない。本実施の形態においては、例えば情報処理装置１０を情報処理装置の典型例として説明を行う。本発明の一態様に係る情報処理装置１０についての理解を容易にするため、先ず、情報処理装置１０を含む制御システム１等の概要を、図２を用いて説明する。以下の説明において、「ｎ」は「１以上の整数」を示し、「ｍ」は「１以上、ｎ以下の整数」を示すものとする。
　§１．適用例
　（作業現場および作業工程について）
　図２は、情報処理装置１０を含む制御システム１等の全体概要を示す図である。図２に示す天井カメラ３０は、作業現場ＷＳの天井に設置され、作業現場ＷＳの全体を撮像した撮像データである基礎撮像データＢＩを生成する。
　作業現場ＷＳは工場等の生産現場であり、作業現場ＷＳにおいては、例えば、各種の製品が、複数の作業工程Ｐｒ（１）、Ｐｒ（２）、Ｐｒ（３）、・・・Ｐｒ（ｎ）を経て生産される。作業現場ＷＳにおいて実施される複数の作業工程Ｐｒ（１）、Ｐｒ（２）、Ｐｒ（３）、・・・Ｐｒ（ｎ）の各々は、例えば、「塗装」工程、「主要ワークの組み立て」工程、「主要ワークの本体への組み込み」工程、「検査」工程である。
　作業工程Ｐｒについて、複数の作業工程Ｐｒの各々を区別する必要がある場合には、符号に「（１）」、「（２）」、「（３）」、・・・、「（ｎ）」等の添え字を付して区別する。例えば、「作業工程Ｐｒ（１）」、「作業工程Ｐｒ（２）」、「作業工程Ｐｒ（３）」、・・・、「作業工程Ｐｒ（ｎ）」と記載して区別する。複数の作業工程Ｐｒの各々を特に区別する必要がない場合は単に「作業工程Ｐｒ」と称する。
　（監視領域について）
　作業現場ＷＳは、複数の監視領域Ａｒ（１）、Ａｒ（２）、Ａｒ（３）、・・・Ａｒ（ｎ）を含む。複数の監視領域Ａｒ（１）、Ａｒ（２）、Ａｒ（３）、・・・Ａｒ（ｎ）の各々は、複数の作業工程Ｐｒ（１）、Ｐｒ（２）、Ｐｒ（３）、・・・Ｐｒ（ｎ）の各々に対応付けられている。すなわち、監視領域Ａｒ（ｍ）は、作業工程Ｐｒ（ｍ）の実施に係る作業Ｏｐ（ｍ）を、作業者Ｐｅが行う領域であり、例えば、機器４０（ｍ）が配置されている領域である。例えば、作業者Ｐｅは、監視領域Ａｒ（ｍ）において、作業工程Ｐｒ（ｍ）に係る作業Ｏｐ（ｍ）を、機器４０（ｍ）を用いて行う。
　作業工程Ｐｒと同様に、複数の監視領域Ａｒの各々を区別する必要がある場合には、符号に「（１）」、「（２）」、「（３）」、・・・、「（ｎ）」等の添え字を付して区別し、特に区別する必要がない場合は単に「監視領域Ａｒ」と称する。
　（基礎撮像データについて）
　作業現場ＷＳの天井には、広域撮像カメラである天井カメラ３０が１台、設置される。ただし、天井カメラ３０が作業現場ＷＳの天井に設置されることは必須ではなく、天井カメラ３０は、作業現場ＷＳの全体を俯瞰できる位置に設置されればよい。天井カメラ３０は、作業現場ＷＳの全体を俯瞰し、作業現場ＷＳの全体を撮像した撮像データである基礎撮像データＢＩを生成する。基礎撮像データＢＩには、各々が複数の監視領域Ａｒ（１）、Ａｒ（２）、Ａｒ（３）、・・・Ａｒ（ｎ）に対応する複数の解析対象領域Ａａ（１）、Ａａ（２）、Ａａ（３）、・・・Ａａ（ｎ）が予め設定されている。
　監視領域Ａｒと同様に、複数の解析対象領域Ａａの各々を区別する必要がある場合には、符号に「（１）」、「（２）」、「（３）」、・・・、「（ｎ）」等の添え字を付して区別し、特に区別する必要がない場合は単に「解析対象領域Ａａ」と称する。
　解析対象領域Ａａは、情報処理装置１０による基礎撮像データＢＩに対する画像解析の対象領域である。基礎撮像データＢＩに解析対象領域Ａａを設定することにより、監視領域Ａｒの状況を認識するための、基礎撮像データＢＩに対する画像解析を効率的に実行することができる。ただし、基礎撮像データＢＩに解析対象領域Ａａを設定することは、必須ではない。解析対象領域Ａａは、ユーザ操作に応じて、情報処理装置１０によって基礎撮像データＢＩに対して設定されてもよい。
　（作業および作業者について）
　複数の作業工程Ｐｒ（１）、Ｐｒ（２）、Ｐｒ（３）、・・・Ｐｒ（ｎ）の各々の実施に際しては、作業者Ｐｅによって、複数の作業Ｏｐ（１）、Ｏｐ（２）、Ｏｐ（３）、・・・Ｏｐ（ｎ）の各々が行われる。複数の作業工程Ｐｒ（１）、Ｐｒ（２）、Ｐｒ（３）、・・・Ｐｒ（ｎ）の各々には、複数の標準的な作業Ｏｐ（１）、Ｏｐ（２）、Ｏｐ（３）、・・・Ｏｐ（ｎ）の各々が、予め対応付けられている。ただし、作業者Ｐｅによって行われる作業Ｏｐの中には、「作業工程Ｐｒに予め対応付けられた標準的な作業Ｏｐ」以外の作業Ｏｐもあり得、つまり、作業工程Ｐｒに予め対応付けることのできない、非標準的な作業Ｏｐもあり得る。複数の作業Ｏｐの各々を区別する必要がある場合には、符号に「（１）」、「（２）」、「（３）」、・・・、「（ｎ）」等の添え字を付して区別し、特に区別する必要がない場合は単に「作業Ｏｐ」と称する。
　また、作業現場ＷＳには、例えば作業工程Ｐｒ（ｍ）の実施に係る作業Ｏｐ（ｍ）を実行する作業者Ｐｅが１人以上存在し、作業者Ｐｅは、例えば、作業者Ｐｅが被っている帽子の頭頂部などに付された作業者ＩＤによって識別される。具体的には、作業現場ＷＳに存在する作業者Ｐｅ（１）と作業者Ｐｅ（２）とは、作業者Ｐｅ（１）が被る帽子に付された作業者ＩＤ：Ｐｅ（１）と、作業者Ｐｅ（２）が被る帽子に付された作業者ＩＤ：Ｐｅ（２）とにより、各々が識別される。複数の作業者Ｐｅの各々を区別する必要がある場合には、符号に「（１）」、「（２）」、「（３）」、・・・、「（ｎ）」等の添え字を付して区別し、特に区別する必要がない場合は単に「作業者Ｐｅ」と称する。
　図３は、情報処理装置１０が天井カメラ３０から取得する基礎撮像データＢＩのイメージを示す図である。図３に示すように、情報処理装置１０は基礎撮像データＢＩに対して画像解析を実行し、作業現場ＷＳに作業者Ｐｅが存在するか否かを判定し、作業現場ＷＳに作業者Ｐｅが存在すると判定すると、作業現場ＷＳに存在する作業者Ｐｅの作業者ＩＤを特定する。
　（動作および機器について）
　複数の作業工程Ｐｒ（１）、Ｐｒ（２）、Ｐｒ（３）、・・・Ｐｒ（ｎ）の各々の実施に際しては、機器４０によって、複数の動作Ａｃ（１）、Ａｃ（２）、Ａｃ（３）、・・・Ａｃ（ｎ）の各々が実行される。つまり、複数の作業工程Ｐｒ（１）、Ｐｒ（２）、Ｐｒ（３）、・・・Ｐｒ（ｎ）の各々には、複数の動作Ａｃ（１）、Ａｃ（２）、Ａｃ（３）、・・・Ａｃ（ｎ）の各々が対応付けられている。複数の動作Ａｃの各々を区別する必要がある場合には、符号に「（１）」、「（２）」、「（３）」、・・・、「（ｎ）」等の添え字を付して区別し、特に区別する必要がない場合は単に「動作Ａｃ」と称する。
　また、複数の作業工程Ｐｒの各々の実施には複数の機器４０の各々が用いられ、つまり、作業工程Ｐｒと機器４０とは予め対応付けられている。例えば、作業工程Ｐｒ（ｍ）の実施には１台以上の機器４０（ｍ）が用いられる。すなわち、作業工程Ｐｒ（１）の実施には１台以上の機器４０（１）が用いられ、具体的には、機器４０（１－１）、４０（１－２）、および、４０（１－３）の３台の機器４０（１）が用いられてもよい。同様に、作業工程Ｐｒ（２）の実施には１台以上の機器４０（２）が用いられ、作業工程Ｐｒ（３）の実施には１台以上の機器４０（３）が用いられる。各々が複数の作業工程Ｐｒの各々に対応付けられる、複数の機器４０を相互に区別する必要がある場合には、符号に「（１）」、「（２）」、「（３）」、・・・、「（ｎ）」等の添え字を付して区別し、特に区別する必要がない場合は単に「機器４０」と称する。
　ここで、１台の機器４０が、複数の作業工程Ｐｒの実施に用いられてもよい。このことは、変数「ｐ」、「ｑ」、「ｘ」、「ｙ」が各々「１以上の整数」を示し、「ｑ」は「ｐ」と異なり、また、「ｙ」は「ｘ」と異なるとして、以下のように言い換えることができる。すなわち、作業工程Ｐｒ（ｐ）の実施に用いられる機器４０（ｐ－ｘ）と、作業工程Ｐｒ（ｑ）の実施に用いられる機器４０（ｑ－ｙ）とは、同じ機器４０であってもよい。
　（マスタスレーブ制御システムについて）
　作業現場ＷＳにおいて複数の作業工程Ｐｒを実施するのに用いられる複数の機器４０は、ラインコントローラとしてのＰＬＣ（Programmable Logic Controller）２０により制御される。すなわち、ＰＬＣ２０をマスタとし、複数の機器４０の各々をスレーブとするマスタスレーブ制御システムとしての制御システム１が構築され、複数の機器４０の各々はネットワーク（制御ネットワーク５０）を介してＰＬＣ２０に通信可能に接続されている。ＰＬＣ２０は、制御ネットワーク５０を介したデータ伝送を管理しているという意味で「マスタ」と呼ばれる。「マスタ」および「スレーブ」は、制御ネットワーク５０上のデータ伝送の制御機能に着目して定義されるものであり、各装置間でどのような情報が送受信されるかについては、特に限定されない。
　ＰＬＣ２０は、制御システム１全体を制御する制御装置（コントローラ）であり、複数の機器４０の各々と通信可能に接続されている。ＰＬＣ２０は、入力デバイス（計測デバイス）としての複数の機器４０の各々からの情報を入力データとして取得する。ＰＬＣ２０は、予め組み込まれたユーザプログラムに従って、取得した入力データを用いた演算処理を実行する。ＰＬＣ２０は、前記演算処理を実行して、制御システム１に対する制御内容を決定し、例えば、アクチュエータなどの出力デバイスとしての複数の機器４０の各々への制御内容を決定し、その制御内容に対応する制御データを、複数の機器４０の各々へと出力する。ＰＬＣ２０は、複数の機器４０の各々からの入力データの取得と、複数の機器４０の各々への制御データの取得とを、所定の周期（制御周期）で繰り返し実行する。ＰＬＣ２０には、例えば、不図示の表示部および操作部が接続されてもよい。表示部は、画像を表示可能な液晶パネル等で構成され、また、操作部は、典型的には、タッチパネル、キーボード、マウス等で構成される。
　機器４０は、ＰＬＣ２０をマスタとするマスタスレーブ制御システムとしての制御システム１におけるスレーブである。機器４０は、所定の制御周期ごとに繰り返し入力データをＰＬＣ２０へと送信する入力デバイスであり、または、所定の制御周期ごとに繰り返し制御データをＰＬＣ２０から受信し、受信した制御データにしたがって動作する出力デバイスである。機器４０は、例えば、入力データとして、ＰＬＣ２０に検知結果等を送信する入力デバイスとしてのセンサ（例えば、光電センサ）であってもよく、読み取り結果を送信するバーコードリーダであってもよく、検査結果を送信する検査機（テスター）であってもよい。また、機器４０は、複数の入力デバイスが接続されたＰＴ（Programmable Terminal）であってもよい。さらに、機器４０は、ネジ締め、ピッキング等を実行する出力デバイスとしてのロボット等であってもよい。
　制御ネットワーク５０は、ＰＬＣ２０が受信し、またはＰＬＣ２０が送信する各種データを伝送し、典型的には、各種の産業用イーサネット（登録商標）を用いることができ、フィールドネットワークと称されることもある。産業用イーサネット（登録商標）としては、たとえば、ＥｔｈｅｒＣＡＴ（登録商標）、Ｐｒｏｆｉｎｅｔ ＩＲＴ、ＭＥＣＨＡＴＲＯＬＩＮＫ（登録商標）－ＩＩＩ、Ｐｏｗｅｒｌｉｎｋ、ＳＥＲＣＯＳ（登録商標）－ＩＩＩ、ＣＩＰ Ｍｏｔｉｏｎなどが知られており、これらのうちのいずれを採用してもよい。さらに、産業用イーサネット（登録商標）以外のフィールドネットワークを用いてもよい。たとえば、モーション制御を行わない場合であれば、ＤｅｖｉｃｅＮｅｔ、ＣｏｍｐｏＮｅｔ／ＩＰ（登録商標）などを用いてもよい。
　以下では、制御ネットワーク５０上をデータフレームが順次転送されることで、ＰＬＣ２０（マスタ）と機器４０（スレーブ）との間でデータが送受信される制御システム１について説明を行う。すなわち、制御ネットワーク５０上をデータフレームが所定の制御周期で順次転送されることで、ＰＬＣ２０と機器４０との間でデータが制御周期ごとに繰り返し送受信される。制御ネットワーク５０上をデータフレームが順次転送されることで、複数の機器４０の間で、つまり、複数のスレーブ間で、データが送受信されてもよい。
　（工程情報について）
　機器４０をスレーブとするマスタスレーブ制御システムである制御システム１において、マスタであるＰＬＣ２０は、例えば所定の制御周期ごとに繰り返し、スレーブである機器４０から、機器４０の実行した動作Ａｃの内容および結果を示す動作結果Ｌａを受信する。すなわち、機器４０は、作業工程Ｐｒの実施に際して実際に実行した動作Ａｃの内容および結果を示す動作結果Ｌａを、所定の周期で繰り返し、ＰＬＣ２０へと送信する。例えば、機器４０（ｍ）は、作業工程Ｐｒ（ｍ）の実施の際に実行した動作Ａｃ（ｍ）の内容および結果を示す動作結果Ｌａ（ｍ）を、制御周期で繰り返し、ＰＬＣ２０へと送信する。
　ＰＬＣ２０は、例えば、入力デバイス（計測デバイス）としての機器４０が実行した計測動作の結果である計測結果を、機器４０の動作結果Ｌａとして取得する。また、機器４０が検査機である場合、ＰＬＣ２０は、機器４０が実行した検査動作の結果を、例えば、「検査基準を満たした、または、満たさなかった」といった検査結果を、機器４０の動作結果Ｌａとして取得する。さらに、ＰＬＣ２０は、例えば、出力デバイスとしての機器４０が実行した出力動作の結果を、機器４０の動作結果Ｌａとして取得する。機器４０がネジ締め、ピッキング等を実行するロボットである場合、ＰＬＣ２０は、ネジ締め回数、ピッキング結果（ピッキングの成功またはピッキングエラー）等の動作結果Ｌａを、機器４０の動作結果Ｌａとして取得する。
　ＰＬＣ２０は、作業工程Ｐｒの実施に際して機器４０が実際に実行した動作Ａｃの内容および結果を示す動作結果Ｌａを、機器４０から所定の周期で繰り返し受信し、受信した動作結果Ｌａを、工程情報として情報処理装置１０へと送信する（つまり、転送する）。また、ＰＬＣ２０は、機器４０から所定の周期で繰り返し受信した動作結果Ｌａを用いて生成した情報を、工程情報として情報処理装置１０へ送信する。
　さらに、ＰＬＣ２０は、機器４０から所定の周期で繰り返し受信した動作結果Ｌａを、工程情報として、制御システム１の外部に送信してもよい。例えば、ＰＬＣ２０は、機器４０から所定の周期で繰り返し受信した動作結果Ｌａを、工程情報として、ＭＥＳ（Manufacturin g Execution System、製造実行システム）などに接続した、図２に示す社内ＬＡＮ（Local Area Network）に送信してもよい。
　以下では、ＰＬＣ２０から工程情報を受信した情報処理装置１０が、工程情報に含まれる動作結果Ｌａを用いて、機器４０の実行した動作Ａｃの動作期間Ｄａを算出し、動作Ａｃが「自動化された動作」であるかを判定する例を説明する。詳細は後述するが、以下に説明する例では、情報処理装置１０は、工程情報から、特に、動作結果Ｌａから、作業工程Ｐｒの実施に際し機器４０が実行した動作Ａｃの動作開始時刻Ｔｍｓ、動作完了時刻Ｔｍｅ、動作期間Ｄａを算出する。また、情報処理装置１０は、工程情報から、特に、動作結果Ｌａから、作業工程Ｐｒの実施に際し機器４０が実行した動作Ａｃが「自動化された動作」であるか否かを判定する。工程情報（特に、動作結果Ｌａ）を用いて、作業工程Ｐｒの実施に際し機器４０が実行した動作Ａｃの動作期間Ｄａを算出し、また、動作Ａｃが「自動化された動作」であるか否かを判定することを、以下では「機器判定処理」とも称する。以下の説明においては、ＰＬＣ２０から工程情報を受信した情報処理装置１０が、「機器判定処理」を実行する例を説明する。
　しかしながら、「機器判定処理」は、ＰＬＣ２０が実行してもよく、ＰＬＣ２０は、「機器判定処理」の結果を、工程情報に含めて、または、工程情報に代えて、情報処理装置１０へと送信してもよい。
　上述の説明において、動作開始時刻Ｔｍｓとは、作業工程Ｐｒに用いられる機器４０が、作業工程Ｐｒの実施に際して、動作Ａｃの実行を開始した時点であり、動作完了時刻Ｔｍｅとは、動作Ａｃの実行を完了した時点である。動作期間Ｄａは、動作開始時刻Ｔｍｓから動作完了時刻Ｔｍｅまでの期間である。
　（マスタスレーブ制御システム以外のシステムおよび装置について）
　図２に示すように、マスタスレーブ制御システムとしての制御システム１には、社内ＬＡＮシステムが接続されていてもよい。社内ＬＡＮは、ＭＥＳとも称される工程情報ＤＢ（Database）等に接続している。工程情報ＤＢには、「作業工程Ｐｒの実施に用いられる機器４０が実行すべき標準的な動作」を示す情報が格納されている。
　図２には示されていないが、情報処理装置１０は、例えば、社内ＬＡＮ等を介して、工程情報ＤＢに接続されてもよく、情報処理装置１０は、工程情報ＤＢから、「作業工程Ｐｒの実施に用いられる機器４０が実行すべき標準的な動作」を示す情報を取得してもよい。情報処理装置１０は、工程情報ＤＢから取得した情報を「機器判定処理」の実行に利用してもよい。しかしながら、情報処理装置１０にとって、社内ＬＡＮに接続していることも、工程情報ＤＢに接続していることも、必須ではない。
　また、図２に示す例では、ＭＥＳとしての工程情報ＤＢに、作業現場ＷＳにおいて発生した各種のイベントを監視し、管理するイベント管理装置６０が、社内ＬＡＮを介して接続している。ただし、イベント管理装置６０が社内ＬＡＮを介して工程情報ＤＢに接続していることは必須ではなく、イベント管理装置６０は設けなくてもよい。さらに、工程情報ＤＢには、社内ＬＡＮを介して、ＰＬＣ２０が接続している。ＰＬＣ２０は、社内ＬＡＮを介して、機器４０から取得した動作結果Ｌａ等を、工程情報ＤＢに送信してもよい。社内ＬＡＮには、ＭＥＳに加えて、不図示のＥＲＰ（Enterprise Resources Planning）、ＷＭＳ（Warehouse Management System）等が接続されていてもよい。
　図２において、工程情報ＤＢには、制御ネットワーク５０とも社内ＬＡＮとも異なる「他ネットワーク」を介して、動画保存サーバ等が接続されている。動画保存サーバ等には、他ネットワークを介して情報処理装置１０が接続されており、情報処理装置１０から送信された部分撮像データＯＤおよび対応付け情報Ｍｉなどが動画保存サーバ等に格納される。部分撮像データＯＤは、天井カメラ３０が作業現場ＷＳの全体を撮像して生成した基礎撮像データＢＩを、情報処理装置１０が所定の基準にしたがって抽出した撮像データである。また、詳細は後述するが、対応付け情報Ｍｉは、作業工程Ｐｒごとに、作業工程Ｐｒに対応する監視領域Ａｒに存在した作業者Ｐｅの滞在期間Ｄｏと、作業工程Ｐｒに対応する動作Ａｃを機器４０が実行していた期間である動作期間Ｄａとの対応関係を示す情報である。
　動画保存サーバ等にはさらに、ＰＣ（Personal Computer）等によって実現される外部装置７０が接続されており、外部装置７０は、例えば、部分撮像データＯＤおよび対応付け情報Ｍｉなどを表示し、工程情報等の可視化を実行する。すなわち、外部装置７０は、作業工程Ｐｒの改善に必要な情報を一覧表示し、ボトルネックとなっている作業工程Ｐｒ、作業工程Ｐｒに発生したエラーの日時等を示す情報を、対応する部分撮像データＯＤと対応付けて表示する。外部装置７０が表示する対応付け情報Ｍｉについて、詳細は、図６、図７、および、図９を用いて説明する。
　天井カメラ３０は、前述の通り、作業現場ＷＳの全体を撮像して基礎撮像データＢＩを生成し、生成した基礎撮像データＢＩを、例えば例えばＵＳＢ（Universal Serial Bus）ケーブルである通信ケーブルを介して、情報処理装置１０へと送信する。
　情報処理装置１０は、例えば、ＰＣ等によって実現され、ＰＬＣ２０から取得する工程情報と、天井カメラ３０から取得する基礎撮像データＢＩとを組み合わせて、両者の効率的な利用を可能とする情報処理装置である。情報処理装置１０は、「作業現場ＷＳにおける複数の機器４０の実際の動作Ａｃの内容および結果を示す動作結果Ｌａ」を含む工程情報を、基礎撮像データＢＩと組み合わせることによって可視化する装置ともいえる。
　従来の技術は、「作業現場ＷＳにおける作業者Ｐｅの行った作業Ｏｐ」を撮像した撮像データに対して画像解析を行うことはあっても、作業現場ＷＳにおける複数の機器４０の工程情報と対応付けることがなく、画像解析による作業Ｏｐに関する推定の精度が低い。また、複数の作業工程Ｐｒの各々にセンサを配置して機器４０の工程情報を可視化する従来技術は、作業工程Ｐｒのボトルネックは可視化できるが、作業者Ｐｅの行った作業Ｏｐと関連付けてボトルネックの原因を把握することが困難である。さらに、「作業現場ＷＳにおける作業者Ｐｅの行った作業Ｏｐ」を撮像した撮像データと、機器４０の工程情報とを、マスタスレーブ制御システムよりも上位のシステムで対応付ける場合、そのような上位システムは非常に大掛かりになり、実現が容易ではない。
　これに対して、情報処理装置１０は、作業工程Ｐｒの実施に用いられる機器４０の動作Ａｃの内容および結果を示す動作結果Ｌａを含む工程情報をＰＬＣ２０から取得し、取得した工程情報を、１台の天井カメラ３０から取得する基礎撮像データＢＩと組み合わせる。情報処理装置１０は、複数の機器４０の各々の動作Ａｃの内容および結果を示す動作結果Ｌａを含む工程情報と、作業現場ＷＳの全体を撮像した基礎撮像データＢＩと組み合わせることで、複数の作業工程Ｐｒの各々に係る分析を、効率的かつ精緻に実行できる。
　すなわち、情報処理装置１０は、工程情報の可視化に加え、例えば、ボトルネックとなっている作業工程Ｐｒを抽出し、抽出した作業工程Ｐｒの実施状況を撮像した撮像データＩＤ（部分撮像データＯＤ）と、抽出した作業工程Ｐｒの工程情報とを組み合わせる。したがって、ユーザは、例えば、ボトルネックとなっている作業工程Ｐｒについて、ボトルネックとなっている原因、不具合要因を特定するのが容易になり、作業工程Ｐｒの改善作業を効率的に行うことができるようになる。加えて、情報処理装置１０は、不良発生時のトレイサビリティにも用いることができる。
　また、情報処理装置１０は、基礎撮像データＢＩと、複数の機器４０の各々の工程情報とを組み合わせることにより、基礎撮像データＢＩに対する解析と工程情報に対する解析との両方の解析制度を向上させることができる。
　ここで、情報処理装置１０についての背景技術として挙げた特許文献１に記載されているような従来技術は、その実現に際しては、作業現場ＷＳの全体に非常に高価な機器を導入する必要があった。これに対して、情報処理装置１０は、作業現場ＷＳで以前から用いられているＰＬＣ２０と、作業現場ＷＳの天井に１台設置する天井カメラ３０とを利用するので、実現コストが少ない。また、情報処理装置１０は、所望の作業工程Ｐｒ（つまり、所望の監視領域Ａｒ）のみを撮像する天井カメラ３０を利用してもよいし、情報処理装置１０の利用する天井カメラ３０を移設するのも容易である。
　また、特許文献１の技術は、複数のカメラで撮影した作業映像データを解析することにより、作業者が作業を行うことのできなかった時間である作業不能時間を算出する。そして、特許文献１の技術は、作業者に作業手順を示す作業指示端末に対する作業者の操作に基づいて計測した見かけ上の作業時間から、作業映像データの解析により算出した作業不能時間を差し引くことで、実際に作業が可能であった実作業時間を算出する。つまり、特許文献１の技術は、作業工程Ｐｒの実施に用いられる機器４０の実際の動作Ａｃと作業者Ｐｅとの対応関係を把握するのに、作業工程Ｐｒの実施に用いられる機器４０に対する、具体的には作業指示端末に対する、作業者Ｐｅの操作指示を必要とする。
　これに対して、情報処理装置１０は、工程情報を用いて、具体的には、機器４０の動作結果Ｌａを用いて、機器４０が動作Ａｃを開始した動作開始時刻Ｔｍｓ、および、動作Ａｃを完了した動作完了時刻Ｔｍｅを特定する。つまり、情報処理装置１０は、作業者Ｐｅに作業手順を示す作業指示端末に対する、作業者Ｐｅの操作作業を必要とせずに、機器４０の動作開始時刻Ｔｍｓおよび動作完了時刻Ｔｍｅを特定する。
　具体的には、情報処理装置１０は、マスタであるＰＬＣ２０とスレーブである機器４０とを接続する制御ネットワーク５０を介して、ＰＬＣ２０と通信可能に接続されている。情報処理装置１０は、ＰＬＣ２０から、「作業工程Ｐｒの実施に用いられる機器４０が実行した実際の動作Ａｃ」の内容および結果を示す動作結果Ｌａを含む工程情報を受信する。ここで、情報処理装置１０は、ＰＬＣ２０と、制御ネットワーク５０を介して通信可能に接続されている必要があるが、情報処理装置１０は、「ＰＬＣ２０をマスタとし、機器４０をスレーブとするマスタスレーブ制御システム」におけるスレーブでなくともよい。
　また、情報処理装置１０は、例えばＵＳＢ（Universal Serial Bus）ケーブルを介して、天井カメラ３０と通信可能に接続されている。情報処理装置１０は、天井カメラ３０から、作業現場ＷＳの全体が撮像された基礎撮像データＢＩを取得する。
　さらに、情報処理装置１０は、工程情報ＤＢから、「作業工程Ｐｒの実施に用いられる機器４０が実行すべき標準的な動作」を示す動作基準Ｓａを取得してもよい。そして、情報処理装置１０は、取得した動作基準Ｓａを用いて、「機器判定処理」の実行に利用してもよい。また、情報処理装置１０は、取得した動作基準Ｓａを用いて、基礎撮像データＢＩから、所望の部分撮像データＯＤを抽出してもよい。
　したがって、情報処理装置１０は、ＭＥＳなどに接続する社内ＬＡＮには基礎撮像データＢＩを送信しないため、社内ＬＡＮにおける通信を、巨大なデータ量を有する基礎撮像データＢＩの送信によって圧迫することがない。また、情報処理装置１０は、１台の天井カメラ３０から取得する基礎撮像データＢＩを、工程情報の効率的かつ精緻な解析に利用する。したがって、情報処理装置１０は、実現コストを抑えつつ、ユーザが、作業工程Ｐｒの実施に用いられる機器４０の実際の動作Ａｃと作業者Ｐｅの行った作業Ｏｐとの対応関係を把握するのを可能とする。
　§２．構成例
　これまで、図２および図３を用いて、制御システム１等の概要を説明してきた。図１等を用いて情報処理装置１０の詳細を説明していく前に、情報処理装置１０についての理解を容易にするため、情報処理装置１０の概要を以下のように整理しておく。
　すなわち、情報処理装置１０（情報処理装置）は、各々が複数の作業工程Ｐｒの各々に対応付けられている、複数の監視領域Ａｒを含む作業現場ＷＳの全体を、１台の天井カメラ３０（広域撮像カメラ）で撮像した基礎撮像データＢＩ（撮像データ）を取得する第１取得部１１０と、第１取得部１１０により取得された基礎撮像データＢＩに対する画像解析により、複数の監視領域Ａｒの各々について、作業者Ｐｅが存在しているかを判定する作業者判定部１２０と、複数の作業工程Ｐｒの各々の実施に用いられる機器４０が実行した動作Ａｃの内容および結果を示す動作結果Ｌａから生成された工程情報を取得する第２取得部１４０と、第２取得部により取得された工程情報を用いて、機器４０が動作しているかを判定する機器判定部１５０と、複数の作業工程Ｐｒの各々について、（Ａ）機器判定部１５０により、作業工程Ｐｒの実施に用いられる機器４０が動作していると判定された時間帯（動作期間Ｄａ）と、（Ｂ）作業者判定部１２０により、作業工程Ｐｒに対応付けられている監視領域Ａｒに作業者Ｐｅが存在していると判定された時間帯（滞在期間Ｄｏ）と、を対応付けたデータ（対応付け情報Ｍｉ）を生成する生成部１６０と、を備えている。
　前記の構成によれば、情報処理装置１０は、１台の天井カメラ３０で撮像した基礎撮像データＢＩから、作業工程Ｐｒに対応付けられた監視領域Ａｒに作業者Ｐｅが存在しているかを判定する。また、情報処理装置１０は、前記工程情報から、作業工程Ｐｒの実施に用いられる機器４０が動作しているかを判定する。そして、情報処理装置１０は、作業工程Ｐｒごとに、機器４０が動作していると判定した時間帯である動作期間Ｄａと、作業工程Ｐｒに対応付けられている監視領域Ａｒに作業者Ｐｅが存在していると判定した時間帯である滞在期間Ｄｏと、を対応付けた対応付け情報Ｍｉを生成する。
　つまり、情報処理装置１０は、１台の天井カメラ３０で作業現場ＷＳ全体を撮像した基礎撮像データＢＩに対する画像解析により、作業工程Ｐｒごとの「機器４０が動作している動作期間Ｄａと、作業者Ｐｅが監視領域Ａｒに存在している滞在期間Ｄｏとの対応関係」を示す対応付け情報Ｍｉを生成する。
　したがって、情報処理装置１０は、作業現場ＷＳ全体を撮像可能な１台の天井カメラ３０を利用することにより、実現コストを抑えつつ、作業工程Ｐｒに用いられる機器４０の実際の動作と作業者Ｐｅとの対応関係を把握することができるとの効果を奏する。
　情報処理装置１０は、作業者判定部１２０により作業工程Ｐｒに対応付けられている監視領域Ａｒに作業者Ｐｅが存在していると判定された滞在期間Ｄｏにおいて、作業者Ｐｅが行った作業Ｏｐの内容を、作業工程Ｐｒの実施に用いられる機器４０の動作結果Ｌａを用いて、推定する推定部１８０をさらに備えている。
　前記の構成によれば、情報処理装置１０は、作業工程Ｐｒに対応付けられている監視領域Ａｒに作業者Ｐｅが存在していると判定した滞在期間Ｄｏにおいて、作業者Ｐｅが行った作業Ｏｐの内容を、作業工程Ｐｒの実施に用いられる機器４０の動作結果Ｌａを用いて推定する。
　したがって、情報処理装置１０は、作業工程Ｐｒごとに、機器４０の動作結果Ｌａを用いて、作業工程Ｐｒに対応付けられている監視領域Ａｒに存在する作業者Ｐｅが行った作業Ｏｐの内容を、推定することができるとの効果を奏する。
　情報処理装置１０は、機器判定部１５０により作業工程Ｐｒの実施に用いられる機器４０が動作していると判定された動作期間Ｄａを示すガントチャートと、作業者判定部１２０により作業工程Ｐｒに対応付けられている監視領域Ａｒに作業者Ｐｅが存在していると判定された滞在期間Ｄｏを示すガントチャートと、を並列させて表示可能なデータを生成する表示制御部１７０をさらに備えている。
　前記の構成によれば、情報処理装置１０は、作業工程Ｐｒごとに、機器４０が動作していると判定した動作期間Ｄａを示すガントチャートと、監視領域Ａｒに作業者Ｐｅが存在していると判定した滞在期間Ｄｏを示すガントチャートと、を並列させて表示可能なデータを生成する。
　したがって、情報処理装置１０は、作業工程Ｐｒごとに、機器４０の動作期間Ｄａと、作業者Ｐｅが監視領域Ａｒに存在している滞在期間Ｄｏとの対応関係を、一見して把握可能な形式で管理者等のユーザに表示することができるとの効果を奏する。
　情報処理装置１０は、基礎撮像データＢＩに対して、監視領域Ａｒを撮像した領域として画像解析の対象とする解析対象領域Ａａを、ユーザ操作に応じて設定する領域設定部１９０をさらに備えている。
　前記の構成によれば、情報処理装置１０は、基礎撮像データＢＩに対して、解析対象領域Ａａを、ユーザ操作に応じて設定する。したがって、情報処理装置１０は、ユーザ操作に応じて、基礎撮像データＢＩに対して解析対象領域Ａａを設定することができるとの効果を奏する。
　これまでに概要を説明した情報処理装置１０について、次に、その構成の詳細について図１を参照しながら説明し、その後、情報処理装置１０が実行する処理について、図４を参照しながら説明していく。
　（情報処理装置の詳細）
　図１は、制御システム１に含まれる、情報処理装置１０等の要部構成を示すブロック図である。図１に示すように、情報処理装置１０は、機能ブロックとして、第１取得部１１０と、作業者判定部１２０と、記憶部１３０と、第２取得部１４０と、機器判定部１５０と、生成部１６０と、表示制御部１７０と、推定部１８０と、領域設定部１９０とを備えている。情報処理装置１０は、上述の各機能ブロックに加えて、基礎撮像データＢＩから抽出した部分撮像データＯＤを、制御システム１の外部（例えば、図２に示す動画保存サーバ等）に送信する送信部などを備えていてもよい。しかしながら、記載の簡潔性を担保するため、本実施の形態に直接関係のない構成は、説明およびブロック図から省略している。ただし、実施の実情に則して、情報処理装置１０は、当該省略された構成を備えてもよい。
　第１取得部１１０、作業者判定部１２０、第２取得部１４０、機器判定部１５０、生成部１６０、表示制御部１７０、推定部１８０、および、領域設定部１９０は、例えば、ＣＰＵ（central processing unit）等が、ＲＯＭ（read only memory）、ＮＶＲＡＭ（non-Volatile random access memory）等で実現された記憶装置（記憶部１３０）に記憶されているプログラムを不図示のＲＡＭ（random access memory）等に読み出して実行することで実現できる。以下に先ず、情報処理装置１０における第１取得部１１０、作業者判定部１２０、第２取得部１４０、機器判定部１５０、生成部１６０、表示制御部１７０、推定部１８０、および、領域設定部１９０について説明する。
　第１取得部１１０は、天井カメラ３０から、天井カメラ３０が作業現場ＷＳの全体を撮像した撮像データである基礎撮像データＢＩを取得し、取得した基礎撮像データＢＩを、作業者判定部１２０へと出力する。
　作業者判定部１２０は、基礎撮像データＢＩに対する画像解析によって、作業現場ＷＳに作業者Ｐｅが存在するか否かを判定し、作業現場ＷＳに作業者Ｐｅが存在すると判定すると、さらに、作業者Ｐｅが存在する監視領域Ａｒを特定する。すなわち、作業者判定部１２０は、記憶部１３０の解析対象領域テーブル１３１を参照して、監視領域Ａｒと解析対象領域Ａａとの対応関係を把握する。そして、作業者判定部１２０は、解析対象領域Ａａ（ｍ）が作業者Ｐｅの撮像データを含むことを確認すると、監視領域Ａｒと解析対象領域Ａａとの対応関係から、作業者Ｐｅが存在するのが監視領域Ａｒ（ｍ）であることを特定する。作業者判定部１２０は、監視領域Ａｒごとに、何人の作業者Ｐｅが存在するかを特定してもよい。
　また、作業者判定部１２０は、監視領域Ａｒに存在する作業者Ｐｅの作業者ＩＤを特定する。例えば、作業者判定部１２０は、監視領域Ａｒ（ｍ）に存在する作業者Ｐｅ（ｘ）の作業者ＩＤが、「作業者Ｐｅ（ｘ）」であることを特定する。
　作業者判定部１２０は、作業工程Ｐｒごとに、つまり、監視領域Ａｒごとに、作業者Ｐｅ（ｘ）の滞在期間Ｄｏを算出する。具体的には、作業者判定部１２０は、監視領域Ａｒ（ｍ）にそれまで存在していなかった作業者Ｐｅ（ｘ）が、監視領域Ａｒ（ｍ）に存在するようになったのを確認した時点（＝滞在開始時点Ｔｏｓ（ｍ）（ｘ））を特定する。作業者判定部１２０は、監視領域Ａｒ（ｍ）にそれまで存在していた作業者Ｐｅ（ｘ）が、監視領域Ａｒ（ｍ）に存在しなくなったのを確認した時点（＝滞在終了時点Ｔｏｅ（ｍ）（ｘ））を特定する。作業者判定部１２０は、作業工程Ｐｒ（ｍ）について、つまり、監視領域Ａｒ（ｍ）について、滞在開始時点Ｔｏｓ（ｍ）（ｘ）から滞在終了時点Ｔｏｅ（ｍ）（ｘ）までの期間である、作業者Ｐｅ（ｘ）の滞在期間Ｄｏ（ｍ）（ｘ）を算出する。
　作業者判定部１２０は、作業工程Ｐｒごとに、つまり、監視領域Ａｒごとに、特定した（算出した）作業者Ｐｅ（ｘ）の、滞在開始時点Ｔｏｓ（ｘ）、滞在終了時点Ｔｏｅ（ｘ）、および、滞在期間Ｄｏ（ｘ）を、生成部１６０に通知する。
　作業者判定部１２０は、基礎撮像データＢＩに対する画像解析として、作業者Ｐｅの存在および動き等を精緻に把握することの可能な、動線解析を実行し、作業者Ｐｅの中心座標、作業者ＩＤ等を検出してもよい。
　第２取得部１４０は、ＰＬＣ２０から工程情報を取得し、取得した工程情報を、機器判定部１５０へと出力する。工程情報は、「ＰＬＣ２０が機器４０から取得した『機器４０の動作結果Ｌａ』」、および、「取得した『機器４０の動作結果Ｌａ』を用いてＰＬＣ２０が生成した情報」である。すなわち、工程情報は動作結果Ｌａを含み、動作結果Ｌａは、作業工程Ｐｒの実施に際して機器４０が実際に実行した動作Ａｃの内容および結果を示す情報である。ＰＬＣ２０が、機器４０の動作結果Ｌａを用いて、機器４０の実行した動作Ａｃの動作期間Ｄａの算出、および、動作Ａｃが「自動化された動作」であるか否かの判定を実行する場合、工程情報は、動作期間Ｄａおよび判定結果を示す情報を含んでいてもよい。
　機器判定部１５０は、第２取得部１４０から取得した工程情報を用いて、特に、機器４０の動作結果Ｌａを用いて、「作業工程Ｐｒの実施に用いられる機器４０が、動作Ａｃの実行を開始した時刻」である動作開始時刻Ｔｍｓを特定する。また、機器判定部１５０は、第２取得部１４０から取得した工程情報を用いて、特に、機器４０の動作結果Ｌａを用いて、「作業工程Ｐｒの実施に用いられる機器４０が、動作Ａｃの実行を完了した時刻」である動作完了時刻Ｔｍｅを特定する。そして、機器判定部１５０は、例えば、動作Ａｃ（ｍ）について特定した動作開始時刻Ｔｍｓ（ｍ）から動作完了時刻Ｔｍｅ（ｍ）までの時間（期間）を、動作期間Ｄａ（ｍ）として算出する。動作期間Ｄａ（ｍ）は、「作業工程Ｐｒ（ｍ）の実施に用いられる機器４０（ｍ）によって、動作Ａｃ（ｍ）が実行されている期間」である。機器判定部１５０は、作業工程Ｐｒ（ｍ）に対応する動作Ａｃ（ｍ）について算出した動作期間Ｄａ（ｍ）を、生成部１６０に通知する。つまり、機器判定部１５０は、作業工程Ｐｒごとに、作業工程Ｐｒに対応する動作Ａｃの動作期間Ｄａ（つまり、作業工程Ｐｒの実施に際して機器４０によって実際に実行された動作Ａｃの動作期間Ｄａ）を、生成部１６０に通知する。
　また、機器判定部１５０は、第２取得部１４０から取得した工程情報を用いて、特に、機器４０の動作結果Ｌａを用いて、「作業工程Ｐｒの実施に用いられる機器４０が実行した動作Ａｃ」が「自動化された動作」であるかを判定する。例えば、機器判定部１５０は、作業工程Ｐｒ（ｍ）の実施に用いられる機器４０（ｍ）の動作結果Ｌａ（ｍ）を用いて、「作業工程Ｐｒ（ｍ）の実施に際して機器４０（ｍ）が実行した動作Ａｃ（ｍ）」が「自動化された動作」であるかを判定する。機器判定部１５０は、動作Ａｃ（ｍ）が「自動化された動作」であるか否かの判定結果を、動作Ａｃ（ｍ）の動作内容を示す情報として、推定部１８０に通知する。
　生成部１６０は、作業者判定部１２０から取得した「作業工程Ｐｒごとの、作業者Ｐｅ（ｘ）の滞在期間Ｄｏ（ｘ）」と、機器判定部１５０から取得した「作業工程Ｐｒごとの、作業工程Ｐｒに対応する動作Ａｃの動作期間Ｄａ」とを対応付けた情報を生成する。「作業工程Ｐｒごとの、作業者Ｐｅ（ｘ）の滞在期間Ｄｏ（ｘ）」と、「作業工程Ｐｒごとの、作業工程Ｐｒに対応する動作Ａｃの動作期間Ｄａ」とが対応付けられた情報は、「対応付け情報Ｍｉ」とも称する。
　例えば、生成部１６０は、「作業工程Ｐｒ（ｍ）（つまり、監視領域Ａｒ（ｍ））についての、作業者Ｐｅ（ｘ）の滞在期間Ｄｏ（ｍ）（ｘ）」と、「作業工程Ｐｒ（ｍ）についての、動作Ａｃ（ｍ）の動作期間Ｄａ（ｍ）」とを対応付けた対応付け情報Ｍｉ（ｍ）を生成する。「対応付け情報Ｍｉ」においては、例えば、時間軸を共通として、「作業工程Ｐｒ（つまり、監視領域Ａｒ）ごとの、作業者Ｐｅ（ｘ）の滞在期間Ｄｏ（ｘ）」と、「作業工程Ｐｒごとの、作業工程Ｐｒに対応する動作Ａｃの動作期間Ｄａ」とが対応付けられている。
　生成部１６０は、生成した作業工程Ｐｒごとの対応付け情報Ｍｉを表示制御部１７０に通知し、例えば、作業工程Ｐｒ（ｍ）の対応付け情報Ｍｉ（ｍ）を表示制御部１７０に通知する。また、生成部１６０は、生成した作業工程Ｐｒごとの対応付け情報Ｍｉを表示制御部１７０に通知し、例えば、作業工程Ｐｒ（ｍ）の対応付け情報Ｍｉ（ｍ）を推定部１８０に通知する。
　生成部１６０は、推定部１８０から通知された、「滞在期間Ｄｏにおいて作業者Ｐｅが行った作業Ｏｐの作業内容、および、作業Ｏｐが標準作業であるか否かの判定結果」を、作業工程Ｐｒごとに生成した対応付け情報Ｍｉに加えてもよい。生成部１６０は、「滞在期間Ｄｏにおいて作業者Ｐｅが行った作業Ｏｐの作業内容、および、作業Ｏｐが標準作業であるか否かの判定結果」を加えた、作業工程Ｐｒごとの対応付け情報Ｍｉを表示制御部１７０に通知してもよい。
　表示制御部１７０は、生成部１６０によって生成された対応付け情報Ｍｉ等を、ユーザに対して表示可能なデータ形式に整える。表示制御部１７０は、ユーザに対して表示可能なデータ形式に整えた対応付け情報Ｍｉ等を、例えば、図２に示す動画保存サーバ等に送信する。表示制御部１７０は、生成部１６０から通知された、「作業Ｏｐの作業内容、および、作業Ｏｐが標準作業であるか否かの判定結果」を含む作業工程Ｐｒごとの対応付け情報Ｍｉを、ユーザに対して表示可能なデータ形式に整えてもよい。
　推定部１８０は、生成部１６０から通知された、作業工程Ｐｒごとの対応付け情報Ｍｉを用いて、「滞在期間Ｄｏにおいて作業者Ｐｅが行った作業Ｏｐ」の作業内容を推定し、「標準的な作業（標準作業）」であるかを判定する。特に、推定部１８０は、機器判定部１５０から通知された、「動作Ａｃ（ｍ）が『自動化された動作』であるか否か」の判定結果を用いて、「滞在期間Ｄｏにおいて作業者Ｐｅが行った作業Ｏｐ」の作業内容を推定し、「標準的な作業（標準作業）」であるかを判定する。つまり、推定部１８０は、生成部１６０によって生成された対応付け情報Ｍｉ（ｍ）と、「動作Ａｃ（ｍ）が『自動化された動作』であるか否か」の判定結果とを用いて、作業Ｏｐの作業内容を推定し、作業Ｏｐが「標準的な作業（標準作業）」であるかを判定する。推定部１８０は、作業Ｏｐについて推定した作業内容、および、作業Ｏｐが標準作業であるか否かの判定結果を、生成部１６０へと通知する。
　領域設定部１９０は、ユーザ操作を受け付け、受け付けたユーザ操作に応じて、解析対象領域テーブル１３１に格納されている情報を更新する。
　記憶部１３０は、情報処理装置１０が使用する各種データを格納する記憶装置である。なお、記憶部１３０は、情報処理装置１０が実行する（１）制御プログラム、（２）ＯＳプログラム、（３）情報処理装置１０が有する各種機能を実行するためのアプリケーションプログラム、および、（４）該アプリケーションプログラムを実行するときに読み出す各種データを非一時的に記憶してもよい。上記の（１）～（４）のデータは、例えば、ＲＯＭ（read only memory）、フラッシュメモリ、ＥＰＲＯＭ（Erasable Programmable ROM）、ＥＥＰＲＯＭ（登録商標）（Electrically EPROM）、ＨＤＤ（Hard Disc Drive）等の不揮発性記憶装置に記憶される。情報処理装置１０は、図示しない一時記憶部を備えていてもよい。一時記憶部は、情報処理装置１０が実行する各種処理の過程で、演算に使用するデータおよび演算結果等を一時的に記憶するいわゆるワーキングメモリであり、ＲＡＭ（Random Access Memory）等の揮発性記憶装置で構成される。どのデータをどの記憶装置に記憶するのかについては、情報処理装置１０の使用目的、利便性、コスト、または、物理的な制約等から適宜決定される。記憶部１３０はさらに、解析対象領域テーブル１３１を格納している。
　解析対象領域テーブル１３１には、各々が複数の監視領域Ａｒの各々に対応する、複数の解析対象領域Ａａが格納されている。例えば、作業工程Ｐｒ（ｍ）に対応する監視領域Ａｒ（ｍ）の状況を確認するための解析対象領域Ａａが基礎撮像データＢＩについて設定されており、解析対象領域テーブル１３１には、作業工程Ｐｒ（ｍ）に対応付けられた監視領域Ａｒ（ｍ）が格納されている。解析対象領域テーブル１３１に格納されている複数の解析対象領域Ａａの各々は、領域設定部１９０によって、ユーザ操作に応じて更新される。
　§３．動作例
　図４は、情報処理装置１０が実行する処理の概要を示すフロー図である。第２取得部１４０は、ＰＬＣ２０から、「作業工程Ｐｒの実施に際して機器４０が実際に実行した動作Ａｃの内容および結果を示す」動作結果Ｌａを含む、工程情報を取得する（Ｓ１１０）。
　機器判定部１５０は、第２取得部１４０から取得した工程情報を解析して（Ｓ１２０）、作業工程Ｐｒごとに、作業工程Ｐｒの実施に際して機器４０によって実際に実行された動作Ａｃを特定する（Ｓ１３０）。機器判定部１５０は、特定した動作Ａｃについて、動作期間Ｄａを算出し、また、「自動化された動作」であるか否かを判定する。機器判定部１５０は、算出した動作Ａｃの動作期間Ｄａを生成部１６０に通知し、また、動作Ａｃ（ｍ）が「自動化された動作」であるか否かの判定結果を、動作Ａｃ（ｍ）の動作内容を示す情報として、推定部１８０に通知する。
　また、第１取得部１１０は、作業現場ＷＳの天井に設置された１台の天井カメラ３０から、作業現場ＷＳの全体が撮像された基礎撮像データＢＩを取得する（Ｓ１４０）。作業者判定部１２０は、基礎撮像データＢＩに対する画像解析を実行し、例えば、動線解析を実行する（Ｓ１５０）。
　作業者判定部１２０は、画像解析によって作業者Ｐｅが存在すると判定した監視領域Ａｒ（ｍ）に対応する作業工程Ｐｒ（ｍ）を特定し（Ｓ１６０）、また、監視領域Ａｒ（ｍ）に存在する作業者Ｐｅの作業者ＩＤを特定する（Ｓ１７０）。作業者判定部１２０は、さらに、作業現場ＷＳに存在する作業者Ｐｅの人数を特定し、特に、解析対象領域Ａａごとに、つまり、監視領域Ａｒごとに、存在する作業者Ｐｅの人数を特定してもよい。作業者判定部１２０は、作業工程Ｐｒごとに、つまり、監視領域Ａｒごとに、特定した（算出した）作業者Ｐｅ（ｘ）の滞在期間Ｄｏ（ｘ）を、生成部１６０に通知する。
　生成部１６０は、作業工程Ｐｒと動作Ａｃと作業者Ｐｅとを対応付けた、対応付け情報Ｍｉを生成する（Ｓ１８０）。具体的には、生成部１６０は、作業者判定部１２０から取得した「作業工程Ｐｒ（ｍ）（つまり、監視領域Ａｒ（ｍ））についての、作業者Ｐｅ（ｘ）の滞在期間Ｄｏ（ｍ）（ｘ）」と、機器判定部１５０から取得した「作業工程Ｐｒ（ｍ）についての、動作Ａｃ（ｍ）の動作期間Ｄａ（ｍ）」とを対応付けた対応付け情報Ｍｉ（ｍ）を生成する。
　生成部１６０は、Ｓ１８０で生成した「作業工程Ｐｒ（ｍ）についての、作業者Ｐｅ（ｘ）の滞在期間Ｄｏ（ｍ）（ｘ）と、動作Ａｃ（ｍ）の動作期間Ｄａ（ｍ）との対応付け情報Ｍｉ（ｍ）」を、推定部１８０に通知する。
　推定部１８０は、生成部１６０が生成した対応付け情報Ｍｉ（ｍ）と、機器判定部１５０による「動作Ａｃ（ｍ）が『自動化された動作』であるか否か」の判定結果とから、滞在期間Ｄｏ（ｍ）において行われた作業Ｏｐ（ｍ）の作業内容を推定する（Ｓ１９０）。推定部１８０は、作業内容を推定した作業Ｏｐ（ｍ）について、標準作業であるか否かを判定し、例えば、ボトルネックとなっている作業工程Ｐｒを特定し（Ｓ２００）、また、基礎撮像データＢＩにおける異常動線を特定する（Ｓ２１０）。すなわち、推定部１８０は、標準作業ではないと判定した作業Ｏｐ（ｍ）に対応する作業工程Ｐｒ（ｍ）について、ボトルネックとなっている可能性があることをユーザに通知する。また、推定部１８０は、標準作業ではないと判定した作業Ｏｐ（ｍ）を行った作業者Ｐｅの動き（動線）は、作業Ｏｐ（ｍ）を行う際に見られる通常の動き（動線）とは異なっている（つまり、異常となっている）可能性があることをユーザに通知する。
　（情報処理装置の実行する処理についての整理）
　これまでに図４を参照しながら説明してきた情報処理装置１０が実行する処理（言い換えれば、情報処理装置１０が実行する制御方法）は、以下のように整理することができる。すなわち、情報処理装置１０が実行する処理（制御方法）は、各々が複数の作業工程Ｐｒの各々に対応付けられている、複数の監視領域Ａｒを含む作業現場ＷＳ全体を、１台の天井カメラ３０（広域撮像カメラ）で撮像した基礎撮像データＢＩを取得する第１取得ステップ（Ｓ１４０）と、第１取得ステップにて取得された基礎撮像データＢＩに対する画像解析により、複数の監視領域Ａｒの各々について、作業者Ｐｅが存在しているかを判定する作業者判定ステップ（Ｓ１７０）と、複数の作業工程Ｐｒの各々の実施に用いられる機器４０が実行した動作Ａｃの内容および結果を示す動作結果Ｌａから生成された工程情報を取得する第２取得ステップ（Ｓ１１０）と、第２取得ステップにて取得された工程情報を用いて、機器４０が動作しているかを判定する機器判定ステップ（Ｓ１３０）と、複数の作業工程Ｐｒの各々について、（Ａ）機器判定ステップにて、作業工程Ｐｒの実施に用いられる機器４０が動作していると判定された時間帯（動作期間Ｄａ）と、（Ｂ）作業者判定ステップにて、作業工程Ｐｒに対応付けられている監視領域Ａｒに作業者Ｐｅが存在していると判定された時間帯（滞在期間Ｄｏ）と、を対応付けたデータ（対応付け情報Ｍｉ）を生成する生成ステップ（Ｓ１８０）と、含んでいる。
　前記の構成によれば、前記情報処理方法は、１台の天井カメラ３０で撮像した基礎撮像データＢＩから、作業工程Ｐｒに対応付けられた監視領域Ａｒに作業者Ｐｅが存在しているかを判定する。また、前記情報処理方法は、工程情報から、作業工程Ｐｒの実施に用いられる機器４０が動作しているかを判定する。そして、前記情報処理方法は、作業工程Ｐｒごとに、機器４０が動作していると判定した動作期間Ｄａと、作業工程Ｐｒに対応付けられている監視領域Ａｒに作業者Ｐｅが存在していると判定した滞在期間Ｄｏと、を対応付けた対応付け情報Ｍｉを生成する。
　つまり、前記情報処理方法は、１台の天井カメラ３０で作業現場ＷＳ全体を撮像した基礎撮像データＢＩに対する画像解析により、作業工程Ｐｒごとの「機器４０が動作している動作期間Ｄａと、作業者Ｐｅが監視領域Ａｒに存在している滞在期間Ｄｏとの対応関係」を示す対応付け情報Ｍｉを生成する。
　したがって、前記情報処理方法は、作業現場ＷＳ全体を撮像可能な１台の天井カメラ３０を利用することにより、実現コストを抑えつつ、作業工程Ｐｒに用いられる機器４０の実際の動作と作業者Ｐｅとの対応関係を把握することができるとの効果を奏する。
　（滞在期間の頻度の算出）
　前述の通り、作業者判定部１２０は、解析対象領域Ａａに対する画像解析によって、それ以前には作業者Ｐｅが存在していないと判定していた監視領域Ａｒについて、作業者Ｐｅが存在すると判定するようになった時点を、滞在開始時点Ｔｏｓとして特定する。また、作業者判定部１２０は、解析対象領域Ａａに対する画像解析によって、それ以前には作業者Ｐｅが存在していると判定していた監視領域Ａｒについて、作業者Ｐｅが存在していないと判定するようになった時点を、滞在終了時点Ｔｏｅとして特定する。
　作業者判定部１２０は、作業工程Ｐｒ（ｍ）に対応付けられている監視領域Ａｒ（ｍ）について、滞在開始時点Ｔｏｓ（ｍ）から滞在終了時点Ｔｏｅ（ｍ）までの時間を、作業者Ｐｅが存在していた時間として特定する。
　ここで、作業者判定部１２０は、作業工程Ｐｒごと（つまり、監視領域Ａｒごと）の滞在期間Ｄｏの特定（計測）に加えて、さらに、作業工程Ｐｒごと（つまり、監視領域Ａｒごと）の滞在期間Ｄｏの頻度を算出してもよい。
　作業者判定部１２０は、監視領域Ａｒ（ｍ）について、滞在開始時点Ｔｏｓ（ｍ）から滞在終了時点Ｔｏｅ（ｍ）までの時間を、「１回の滞在期間Ｄｏ（ｍ）」として把握する。「監視領域Ａｒ（ｍ）にそれまで存在していなかった作業者Ｐｅ（１）が、監視領域Ａｒ（ｍ）に存在するのを確認した時点（＝滞在開始時点Ｔｏｓ（ｍ）（１））」から、「監視領域Ａｒ（ｍ）にそれまで存在していた作業者Ｐｅ（１）が、監視領域Ａｒ（ｍ）に存在しなくなったのを確認した時点（＝滞在終了時点Ｔｏｅ（ｍ）（１））」までの時間が、「１回の滞在期間Ｄｏ（ｍ）（１）」である。
　作業者判定部１２０は、「ｘ＋ｙ＋・・・＋ｚ＝ｎ」として、作業者Ｐｅ（１）の「ｎ」回の滞在期間Ｄｏ（ｍ）（１）について、所定の時間間隔ごとに、或る時間間隔の滞在期間Ｄｏ（ｍ）（１）が、「ｎ」回のうち何回あったのかを算出してもよい。例えば、作業者判定部１２０は、「ｎ」回の滞在期間Ｄｏ（ｍ）（１）のうち、０分から４分の滞在期間Ｄｏ（ｍ）（１）が「ｘ」回あったのを確認する。また、作業者判定部１２０は、５分から９分の滞在期間Ｄｏ（ｍ）（１）が「ｙ」回あったのを確認する。同様に、「ｐ」を「１」以上の整数として、作業者判定部１２０は、「５（ｐ－１）」分から「５ｐ－１」分の滞在期間Ｄｏ（ｍ）（１）が「ｚ」回であったのを確認する。
　そして、作業者判定部１２０は、作業者Ｐｅ（１）の「ｎ」回の滞在期間Ｄｏ（ｍ）（１）について、０分から４分の滞在期間Ｄｏ（ｍ）（１）の頻度、５分から９分の滞在期間Ｄｏ（ｍ）（１）の頻度、・・・、「５（ｐ－１）」分から「５ｐ－１」分の滞在期間Ｄｏ（ｍ）（１）の頻度を算出してもよい。
　作業者判定部１２０は、「ｎ」回の滞在期間Ｄｏ（ｍ）について、所定の基準よりも低い頻度の滞在期間Ｄｏ（ｍ）を「非標準的」な滞在期間Ｄｏ（ｍ）として抽出してもよく、抽出した「非標準的」な滞在期間Ｄｏ（ｍ）を、推定部１８０に通知してもよい。推定部１８０は、作業者判定部１２０によって抽出された「非標準的」な滞在期間Ｄｏについて、「『非標準的』な滞在期間Ｄｏにおいて作業者Ｐｅが行った作業Ｏｐは、『標準作業』ではない（非標準作業である）」と判定してもよい。
　（作業の推定および判定についての詳細）
　前述の通り、推定部１８０は、生成部１６０の生成した、作業工程Ｐｒごとの対応付け情報Ｍｉを用いて、「滞在期間Ｄｏにおいて作業者Ｐｅが行った作業Ｏｐ」の作業内容を推定し、「標準的な作業（標準作業）」であるかを判定する。特に、推定部１８０は、機器判定部１５０の生成した、「動作Ａｃ（ｍ）が『自動化された動作』であるか否か」の判定結果を用いて、「滞在期間Ｄｏ（ｍ）において作業者Ｐｅが行った作業Ｏｐ（ｍ）」の作業内容を推定し、「標準的な作業（標準作業）」であるかを判定する。
　以下に、推定部１８０が実行する、「滞在期間Ｄｏ（ｍ）において作業者Ｐｅが行った作業Ｏｐ（ｍ）」についての作業内容の推定処理、および、標準作業であるか否かの判定処理の詳細を説明する。
　　（１．動作開始時点で行われる作業について）
　「作業工程Ｐｒ（ｍ）の実施に用いられる機器４０（ｍ）」が動作Ａｃ（ｍ）の実行を開始する前には、機器４０（ｍ）に動作Ａｃ（ｍ）を開始させるための、作業者Ｐｅによる機器４０（ｍ）への開始指示作業等が必要となるのが一般的である。つまり、機器４０（ｍ）が動作Ａｃ（ｍ）の実行を開始する動作開始時刻Ｔｍｓ（ｍ）において、一般的には、作業工程Ｐｒ（ｍ）に対応付けられている監視領域Ａｒ（ｍ）に作業者Ｐｅが存在している必要がある。
　そこで、推定部１８０は、生成部１６０の生成した、作業工程Ｐｒ（ｍ）の対応付け情報Ｍｉ（ｍ）から、「動作開始時刻Ｔｍｓ（ｍ）に、作業者Ｐｅが、監視領域Ａｒ（ｍ）に存在していた」のを確認すると、以下の推定および判定を実行する。すなわち、推定部１８０は、「動作開始時刻Ｔｍｓ（ｍ）において作業者Ｐｅは、機器４０（ｍ）への、動作Ａｃ（ｍ）の開始指示作業等を実行した」と推定する。動作開始時刻Ｔｍｓ（ｍ）に監視領域Ａｒ（ｍ）に存在した作業者Ｐｅが実行する作業Ｏｐ（ｍ）は、例えば、作業工程Ｐｒ（ｍ）の実施のための準備作業、開始ボタン押下等の開始指示作業、機器４０（ｍ）がスムーズに動作Ａｃ（ｍ）を開始したかの確認作業などである。機器４０（ｍ）へのワークのセット等の投入作業は、作業工程Ｐｒ（ｍ）の実施のための準備作業の一例である。これらの作業は、「作業工程Ｐｒ（ｍ）の実施に用いられる機器４０（ｍ）が動作Ａｃ（ｍ）の実行を開始する時点の前後で、作業者Ｐｅによって行われる通常の作業」であり、「標準作業」とも称される。
　つまり、推定部１８０は、作業者Ｐｅが監視領域Ａｒ（ｍ）に存在していた滞在期間Ｄｏ（ｍ）が動作開始時刻Ｔｍｓ（ｍ）に重複するのを確認すると、「その滞在期間Ｄｏ（ｍ）中に作業者Ｐｅが行った作業Ｏｐ（ｍ）は、開始指示作業等である」と推定する。そして、推定部１８０は、「動作開始時刻Ｔｍｓ（ｍ）に重複する滞在期間Ｄｏ（ｍ）中に作業者Ｐｅが行った開始指示作業等は、標準作業である」と判定する。
　　（２．動作完了時点で行われる作業について）
　「作業工程Ｐｒ（ｍ）の実施に用いられる機器４０（ｍ）」が動作Ａｃ（ｍ）の実行を完了した後には、機器４０（ｍ）に動作Ａｃ（ｍ）を完了させるための、作業者Ｐｅによる機器４０（ｍ）への完了指示作業等が必要となるのが一般的である。つまり、機器４０（ｍ）が動作Ａｃ（ｍ）の実行を完了する動作完了時刻Ｔｍｅ（ｍ）において、一般的には、作業工程Ｐｒ（ｍ）に対応付けられている監視領域Ａｒ（ｍ）に作業者Ｐｅが存在している必要がある。
　そこで、推定部１８０は、生成部１６０の生成した、作業工程Ｐｒ（ｍ）の対応付け情報Ｍｉ（ｍ）から、「動作完了時刻Ｔｍｅ（ｍ）に、作業者Ｐｅが、監視領域Ａｒ（ｍ）に存在していた」のを確認すると、以下の推定および判定を実行する。すなわち、推定部１８０は、「動作完了時刻Ｔｍｅ（ｍ）において作業者Ｐｅは、機器４０（ｍ）への、動作Ａｃ（ｍ）の完了指示作業等を実行した」と推定する。動作完了時刻Ｔｍｅ（ｍ）に監視領域Ａｒ（ｍ）に存在した作業者Ｐｅが実行する作業Ｏｐ（ｍ）は、例えば、終了ボタン押下等の完了指示作業、作業工程Ｐｒ（ｍ）の完了後の事後作業、機器４０（ｍ）がスムーズに動作Ａｃ（ｍ）を完了したかの確認作業などである。作業工程Ｐｒ（ｍ）が完了したワーク、つまり、作業工程Ｐｒ（ｍ）の実施に用いられる機器４０（ｍ）による動作Ａｃ（ｍ）が完了したワークの回収作業は、作業工程Ｐｒ（ｍ）の完了後の事後作業の一例である。これらの作業は、「作業工程Ｐｒ（ｍ）の実施に用いられる機器４０（ｍ）が動作Ａｃ（ｍ）の実行を完了する時点の前後で、作業者Ｐｅによって行われる通常の作業」であり、「標準作業」とも称される。
　つまり、推定部１８０は、作業者Ｐｅが監視領域Ａｒ（ｍ）に存在していた滞在期間Ｄｏ（ｍ）が動作完了時刻Ｔｍｅ（ｍ）に重複するのを確認すると、「その滞在期間Ｄｏ（ｍ）中に作業者Ｐｅが行った作業Ｏｐ（ｍ）は、完了指示作業等である」と推定する。そして、推定部１８０は、「動作完了時刻Ｔｍｅ（ｍ）に重複する滞在期間Ｄｏ（ｍ）中に作業者Ｐｅが行った完了指示作業等は、標準作業である」と判定する。
　　（３．動作が実行されていない時点で行われる作業について）
　「作業工程Ｐｒ（ｍ）の実施に用いられる機器４０（ｍ）」が動作Ａｃ（ｍ）の「ｐ」回目の実行を完了した後、「ｐ＋１」回目の実行を開始する前までの間に、作業者Ｐｅが以下のように行動することが考えられる。すなわち、作業者Ｐｅが、監視領域Ａｒ（ｍ）に立ち寄り、「ｐ＋１」回目の実行開始のための段取り作業等を行い、その作業後に監視領域Ａｒ（ｍ）から一旦離れた後、暫くして監視領域Ａｒ（ｍ）に戻って、「ｐ＋１」回目の実行を開始させることが考えられる。
　そこで、推定部１８０は、生成部１６０の生成した、作業工程Ｐｒ（ｍ）の対応付け情報Ｍｉ（ｍ）から、「ｐ」回目の動作Ａｃ（ｍ）の動作完了時刻Ｔｍｅ（ｍ）（ｐ）から、「ｐ＋１」回目の動作Ａｃ（ｍ）の動作開始時刻Ｔｍｓ（ｍ）（ｐ＋１）までの間に滞在期間Ｄｏ（ｍ）が存在するのを確認すると、以下の推定および判定を実行する。すなわち、推定部１８０は、「動作完了時刻Ｔｍｅ（ｍ）（ｐ）から動作開始時刻Ｔｍｓ（ｍ）（ｐ＋１）までの間の滞在期間Ｄｏ（ｍ）において、作業者Ｐｅは段取り作業等を実行していた」と推定する。そして、段取り作業等は、「動作完了時刻Ｔｍｅ（ｍ）（ｐ）から動作開始時刻Ｔｍｓ（ｍ）（ｐ＋１）までの間に作業者Ｐｅによって行われる通常の作業」であるから、推定部１８０は、「段取り作業等は、標準作業である」と判定する。
　言い換えれば、推定部１８０は、機器４０（ｍ）の動作期間Ｄａ（ｍ）に重複していない滞在期間Ｄｏ（ｍ）であって、滞在期間Ｄｏ（ｍ）の終了後、所定時間内に動作期間Ｄａ（ｍ）が出現する滞在期間Ｄｏ（ｍ）について、以下の推定を実行する。すなわち、推定部１８０は、「そのような滞在期間Ｄｏ（ｍ）において作業者Ｐｅは段取り作業等を実行していた」と推定し、また、「そのような滞在期間Ｄｏ（ｍ）において作業者Ｐｅが行った作業Ｏｐ（ｍ）は標準作業である」と判定する。
　　（４．動作が実行されている間に行われる作業について）
　推定部１８０は、「作業工程Ｐｒ（ｍ）の実施に用いられる機器４０（ｍ）」が動作Ａｃ（ｍ）の実行中に、監視領域Ａｒ（ｍ）に存在した作業者Ｐｅの行った作業Ｏｐ（ｍ）について、その作業内容を推定し、標準作業であるか否かを判定する。特に、推定部１８０は、機器判定部１５０から通知された、「動作Ａｃ（ｍ）が『自動化された動作』であるか否か」の判定結果を用いて、「動作Ａｃ（ｍ）の動作期間Ｄａ（ｍ）中に、監視領域Ａｒ（ｍ）に存在した」作業者Ｐｅの作業Ｏｐ（ｍ）の作業内容を推定し、標準作業であるか否かを判定する。
　　（４－１．自動化された動作か否かの判定結果の取得）
　先ず、推定部１８０は、「作業工程Ｐｒ（ｍ）の実施に際して機器４０（ｍ）が実行した動作Ａｃ（ｍ）が、『自動化された動作』であるか否か」の判定結果を、機器判定部１５０から取得する。
　ここで、「自動化された動作」とは、作業工程Ｐｒ（ｍ）の実施に際して機器４０（ｍ）によって実行される動作Ａｃ（ｍ）であって、以下のような性質を備える動作Ａｃ（ｍ）である。すなわち、「自動化された動作」とは、「機器４０（ｍ）による動作（ｍ）の実行中に、つまり、動作期間Ｄａ（ｍ）中に、作業者Ｐｅによる追加的な作業Ｏｐ（ｍ）を通常は必要としない」動作Ａｃ（ｍ）である。
　例えば、「自動化された検査動作」は、自動検査機である機器４０（ｍ）が「自動化された検査動作」を開始してから、「自動化された検査動作」を完了させるまでの間、作業者Ｐｅによる追加的な作業Ｏｐ（ｍ）を通常は必要としない。つまり、「自動化された検査動作」は、実行開始から実行完了までの間に作業者Ｐｅによる追加的な作業Ｏｐ（ｍ）を通常は必要とせず、つまり、「自動化された検査動作」の動作期間Ｄａ（ｍ）中の作業者Ｐｅによる追加的な作業Ｏｐ（ｍ）を通常は必要としない。したがって、「自動化された検査動作」は、「自動化された動作」である。
　これに対して、「作業工程Ｐｒ（ｍ）の実施に際して機器４０（ｍ）によって実行される動作Ａｃ（ｍ）」であって、「自動化された動作」ではない動作Ａｃ（ｍ）は、「非自動動作」または「手動動作」とも称され、つまり、「自動化されていない動作」である。「自動化されていない動作」とは、作業工程Ｐｒ（ｍ）の実施に際して機器４０（ｍ）によって実行される動作Ａｃ（ｍ）であって、以下のような性質を備える動作Ａｃ（ｍ）である。すなわち、「自動化されていない動作」とは、「機器４０（ｍ）による動作（ｍ）の実行中に、つまり、動作期間Ｄａ（ｍ）中に、作業者Ｐｅによる追加的な作業Ｏｐ（ｍ）を必要とするのが通常である」動作Ａｃ（ｍ）である。
　例えば、「組み立て補助動作」は、作業者Ｐｅによる組み立て作業Ｏｐ（ｍ）を補助する動作Ａｃ（ｍ）であり、機器４０（ｍ）が「組み立て補助動作」を開始してから、「組み立て補助動作」を完了させるまでの間、作業者Ｐｅによる組み立て作業Ｏｐ（ｍ）を必要とする。つまり、「組み立て補助動作」は、実行開始から実行完了までの間に作業者Ｐｅによる追加的な作業Ｏｐ（ｍ）を通常は必要とし、つまり、「組み立て補助動作」の動作期間Ｄａ（ｍ）中の作業者Ｐｅによる追加的な作業Ｏｐ（ｍ）を通常は必要とする。したがって、「組み立て補助動作」は、「自動化されていない動作」である。
　　（４－２．自動化された動作の実行中に行われる作業について）
　推定部１８０は、作業工程Ｐｒ（ｍ）の実施に際して機器４０（ｍ）が実行した動作Ａｃ（ｍ）が、「自動化された動作」であると、動作期間Ｄａ（ｍ）と滞在期間Ｄｏ（ｍ）とが所定の時間以上重複していないかを確認する。
　前述の通り、「自動化された動作」である動作Ａｃ（ｍ）は、「動作期間Ｄａ（ｍ）中に、作業者Ｐｅによる追加的な作業Ｏｐ（ｍ）を通常は必要としない」から、動作期間Ｄａ（ｍ）と滞在期間Ｄｏ（ｍ）とは所定の時間以上重複しないのが通常である。
　したがって、推定部１８０は、作業工程Ｐｒ（ｍ）の対応付け情報Ｍｉ（ｍ）において、動作期間Ｄａ（ｍ）と滞在期間Ｄｏ（ｍ）とが所定の時間以上重複しているのを確認すると、「作業工程Ｐｒ（ｍ）の実施に際して、通常ではない状況が発生した」と判定する。つまり、推定部１８０は、滞在期間Ｄｏ（ｍ）が、「自動化された動作」である動作Ａｃ（ｍ）の動作期間Ｄａ（ｍ）に所定の時間以上重複しているのを確認すると、「その滞在期間Ｄｏ（ｍ）中に作業者Ｐｅが行った作業Ｏｐ（ｍ）は、非標準作業である」と判定する。
　例えば、「自動化された動作」である動作Ａｃ（ｍ）の動作期間Ｄａ（ｍ）に、所定の時間以上で、かつ、短時間の滞在期間Ｄｏ（ｍ）が重複していると、滞在期間Ｄｏ（ｍ）に作業者Ｐｅが行った作業Ｏｐ（ｍ）について、推定部１８０は以下の判定を行う。すなわち、推定部１８０は、「作業者Ｐｅは、機器４０（ｍ）のメンテナンス作業を行ったり、修理作業を行なったりしている」と推定し、「滞在期間Ｄｏ（ｍ）中に作業者Ｐｅが行った作業Ｏｐ（ｍ）は、非標準作業である」と判定する。
　例えば、「自動化された動作」である動作Ａｃ（ｍ）の動作期間Ｄａ（ｍ）に、所定の時間以上で、かつ、長時間の滞在期間Ｄｏ（ｍ）が重複していると、滞在期間Ｄｏ（ｍ）に作業者Ｐｅが行った作業Ｏｐ（ｍ）について、推定部１８０は以下の判定を行う。すなわち、推定部１８０は、「作業者Ｐｅは、『自動化された動作』である動作Ａｃ（ｍ）の完了まで、時間を無駄に消費している可能性がある」と推定し、「滞在期間Ｄｏ（ｍ）中に作業者Ｐｅが行った作業Ｏｐ（ｍ）は、非標準作業である」と判定する。
　　（４－３．自動化されていない動作の実行中に行われる作業について）
　推定部１８０は、作業工程Ｐｒ（ｍ）の実施に際して機器４０（ｍ）が実行した動作Ａｃ（ｍ）が、「自動化されていない動作」であると、動作Ａｃ（ｍ）の動作期間Ｄａ（ｍ）が常に滞在期間Ｄｏ（ｍ）と重複しているかを確認する。
　前述の通り、「自動化されていない動作」である動作Ａｃ（ｍ）は、「動作期間Ｄａ（ｍ）中に、作業者Ｐｅによる追加的な作業Ｏｐ（ｍ）を通常は必要とする」から、動作期間Ｄａ（ｍ）は常に滞在期間Ｄｏ（ｍ）と重複しているのが通常である。
　したがって、推定部１８０は、作業工程Ｐｒ（ｍ）の対応付け情報Ｍｉ（ｍ）において、滞在期間Ｄｏ（ｍ）に重複していない動作期間Ｄａ（ｍ）が存在しているのを確認すると、「滞在期間Ｄｏ（ｍ）に重複していない動作期間Ｄａ（ｍ）において、通常ではない状況が発生した」と判定する。つまり、推定部１８０は、滞在期間Ｄｏ（ｍ）に重複していない動作期間Ｄａ（ｍ）が存在しているのを確認すると、「その動作期間Ｄａ（ｍ）の前後の滞在期間Ｄｏ（ｍ）中に作業者Ｐｅが行った作業Ｏｐ（ｍ）は、非標準作業である」と判定する。
　例えば、「自動化されていない動作」である動作Ａｃ（ｍ）の、滞在期間Ｄｏ（ｍ）に重複していない動作期間Ｄａ（ｍ）においては、本来は実行中のはずの動作Ａｃ（ｍ）が、何らかの原因で中断している可能性がある。
　　（５．作業の推定と判定についての整理）
　これまでに説明してきたように、推定部１８０は、作業工程Ｐｒ（ｍ）の対応付け情報Ｍｉ（ｍ）を用いて、「滞在期間Ｄｏ（ｍ）において作業者Ｐｅがどのような作業Ｏｐ（ｍ）を実行したか」を推定する。そして、推定部１８０は、推定した作業Ｏｐ（ｍ）が、作業工程Ｐｒ（ｍ）の実施に際して行う標準的な作業（標準作業）であるか否かを判定する。
　すなわち、推定部１８０は、作業工程Ｐｒ（ｍ）の対応付け情報Ｍｉ（ｍ）を用いて、機器４０（ｍ）の動作開始時刻Ｔｍｓ（ｍ）、動作完了時刻Ｔｍｅ（ｍ）、および、動作期間Ｄａ（ｍ）を特定する。そして、推定部１８０は、特定した動作開始時刻Ｔｍｓ、動作完了時刻Ｔｍｅ、および、動作期間Ｄａの各々と滞在期間Ｄｏとが重複しているか否かを確認し、確認結果に基づいて、滞在期間Ｄｏにおいて作業者Ｐｅが行った作業Ｏｐの推定および判定を実行する。
　また、推定部１８０は、動作期間Ｄａ（ｍ）における機器４０（ｍ）の動作Ａｃ（ｍ）の内容を、具体的には、動作期間Ｄａ（ｍ）において機器４０（ｍ）が実行した動作Ａｃ（ｍ）が「自動化された動作」であるのか否かの判定結果を、機器判定部１５０から取得する。そして、推定部１８０は、動作期間Ｄａに所定の時間以上重複している滞在期間Ｄｏが存在したのを確認すると、その動作期間Ｄａにおける機器４０の動作Ａｃの内容を用いて、その滞在期間Ｄｏにおいて作業者Ｐｅが行った作業Ｏｐの推定および判定を実行する。すなわち、推定部１８０は、動作Ａｃの内容（動作Ａｃが「自動化された動作」であるのか否かの判定結果）を用いて、「動作期間Ｄａに所定の時間以上重複している滞在期間Ｄｏ」における作業Ｏｐの作業内容を推定し、作業Ｏｐが標準作業であるかを判定する。
　ここで、「滞在期間Ｄｏにおいて作業者Ｐｅが行った作業Ｏｐ」について、上述までの推定方法、判定方法によっては、作業Ｏｐの内容を推定し、「標準作業」であるのか「非標準作業」であるのかを判定することができない作業Ｏｐも考えられる。推定部１８０は、上述までの判定方法では「標準作業」であるのか「非標準作業」であるのかを判定することができなかった作業Ｏｐを、「非標準作業」と判定してもよい。
　（作業内容の推定および判定の具体例）
　図５は、作業者判定部１２０が、基礎撮像データＢＩを用いて、作業者Ｐｅと監視領域Ａｒとを特定する方法を示す図である。図５に示すように、作業者判定部１２０は、基礎撮像データＢＩに対する画像解析によって、複数の作業工程Ｐｒの各々に対応する、複数の監視領域Ａｒの各々について、作業者Ｐｅが存在しているかを判定する。そして、作業者Ｐｅが存在していると判定した監視領域Ａｒについて、その監視領域Ａｒに存在する作業者Ｐｅの作業者ＩＤを特定する。
　図５に示す例において、作業者判定部１２０は、基礎撮像データＢＩに対する画像解析によって、特に、複数の解析対象領域Ａａに対する画像解析によって、以下の判定を実行する。すなわち、作業者判定部１２０は、監視領域Ａｒ（１）から監視領域Ａｒ（５）のうち、監視領域Ａｒ（２）および監視領域Ａｒ（４）に作業者Ｐｅが存在していると判定する。作業者判定部１２０は、さらに、監視領域Ａｒ（２）に存在する作業者Ｐｅの作業者ＩＤが「作業者Ｐｅ（２）」であり、監視領域Ａｒ（４）に存在する作業者Ｐｅの作業者ＩＤが「作業者Ｐｅ（１）」であることを特定する。
　図６は、生成部１６０が生成する、「作業工程Ｐｒごとに、動作期間Ｄａと滞在期間Ｄｏとを対応付けた」対応付け情報Ｍｉの一例を示す図である。生成部１６０は、作業者判定部１２０から取得した「作業工程Ｐｒ（ｍ）についての、作業者Ｐｅ（ｘ）の滞在期間Ｄｏ（ｍ）（ｘ）」と、機器判定部１５０から取得した「作業工程Ｐｒ（ｍ）についての、動作Ａｃ（ｍ）の動作期間Ｄａ（ｍ）」とを用いて、対応付け情報Ｍｉ（ｍ）を生成する。図６に例示する対応付け情報Ｍｉ（ｍ）において、「作業工程Ｐｒ（ｍ）についての、作業者Ｐｅの滞在期間Ｄｏ（ｍ）」と、「作業工程Ｐｒ（ｍ）についての、動作Ａｃ（ｍ）の動作期間Ｄａ（ｍ）」とは、時間軸を共通として対応付けられている。
　推定部１８０は、動作期間Ｄａ（ｍ）に実行された動作Ａｃ（ｍ）が「自動化された動作」であるか否かを区別して、滞在期間Ｄｏ（ｍ）と動作期間Ｄａ（ｍ）とを対応付けた情報を生成してもよい。前述の通り、動作Ａｃ（ｍ）が「自動化された動作」であるか否かを区別することにより、推定部１８０は、滞在期間Ｄｏ（ｍ）に作業者Ｐｅが行った作業Ｏｐ（ｍ）が「標準作業」であるのか否かを、より精緻に判定することができる。
　図６の（Ａ）は、動作Ａｃ（ｍ）が「自動化された動作」である場合に、「滞在期間Ｄｏ（ｍ）に作業者Ｐｅが行った作業Ｏｐ（ｍ）」について、推定部１８０が実行した推定の結果の一例を示している。
　図６の（Ａ）について、推定部１８０は、動作開始時刻Ｔｍｓ（ｍ）に重複する滞在期間Ｄｏ（ｍ）において作業者Ｐｅが行った作業Ｏｐ（ｍ）は、開始指示作業等の「標準作業」であると判定する。推定部１８０は、動作完了時刻Ｔｍｅ（ｍ）に重複する滞在期間Ｄｏ（ｍ）において作業者Ｐｅが行った作業Ｏｐ（ｍ）は、完了指示作業等の「標準作業」であると判定する。推定部１８０は、動作期間Ｄａ（ｍ）に重複しない滞在期間Ｄｏ（ｍ）であって、滞在期間Ｄｏ（ｍ）の終了後、所定時間内に動作期間Ｄａ（ｍ）が出現する滞在期間Ｄｏ（ｍ）に作業者Ｐｅが行った作業Ｏｐは、段取り作業等の「標準作業」であると判定する。
　「自動化された動作」である動作Ａｃ（ｍ）の動作期間Ｄａ（ｍ）に、所定の時間以上で、かつ、短時間の滞在期間Ｄｏ（ｍ）が重複していると、推定部１８０は、「作業Ｏｐ（ｍ）は、修理作業等の非標準作業である」と判定する。
　「自動化された動作」である動作Ａｃ（ｍ）の動作期間Ｄａ（ｍ）に、所定の時間以上で、かつ、長時間の滞在期間Ｄｏ（ｍ）が重複していると、推定部１８０は、「作業Ｏｐ（ｍ）は、検査待ち等の非標準作業である」と判定する。
　図６の（Ｂ）は、動作Ａｃ（ｍ）が「自動化されていない動作（つまり、手動動作）」である場合に、「滞在期間Ｄｏ（ｍ）に作業者Ｐｅが行った作業Ｏｐ（ｍ）」について、推定部１８０が実行した推定の結果の一例を示している。推定部１８０は、動作開始時刻Ｔｍｓ（ｍ）および動作完了時刻Ｔｍｅ（ｍ）の少なくとも一方に重複する滞在期間Ｄｏ（ｍ）において作業者Ｐｅが行った作業Ｏｐ（ｍ）は、開始指示作業等または完了指示作業等の「標準作業」であると判定する。推定部１８０は、動作期間Ｄａ（ｍ）に重複しない滞在期間Ｄｏ（ｍ）であって、滞在期間Ｄｏ（ｍ）の終了後、所定時間内に動作期間Ｄａ（ｍ）が出現する滞在期間Ｄｏ（ｍ）に作業者Ｐｅが行った作業Ｏｐは、段取り作業等の「標準作業」であると判定する。
　滞在期間Ｄｏ（ｍ）中に「自動化されていない動作」である動作Ａｃ（ｍ）の動作期間Ｄａ（ｍ）の中断が発生しているのを確認すると、推定部１８０は、「滞在期間Ｄｏ（ｍ）に作業者Ｐｅが行った作業Ｏｐは、非標準作業である」と判定する。
　図７は、複数の作業工程Ｐｒについて、動作期間Ｄａと滞在期間Ｄｏとの対応関係を一覧形式で示した画面例を示している。情報処理装置１０は、図７に例示するように、複数の作業工程Ｐｒについて、動作期間Ｄａと滞在期間Ｄｏとの対応関係を、例えば外部の表示装置（図２の外部装置７０等）に、一覧形式で表示させてもよい。複数の作業工程Ｐｒについて、動作期間Ｄａと滞在期間Ｄｏとの対応関係を一覧形式で表示させることにより、情報処理装置１０は、ユーザが、ボトルネックとなっている作業工程Ｐｒを発見し、改善を検討するのを容易にすることができる。
　図８は、複数の作業工程Ｐｒの実施順序に対応させて、複数の監視領域Ａｒが配置されている作業現場ＷＳの一例を示す図である。生成部１６０または推定部１８０は、基礎撮像データＢＩに対する画像解析によって、特に、複数の作業工程Ｐｒに対応する、複数の解析対象領域Ａａの各々に対する画像解析によって、作業現場ＷＳにおける作業者Ｐｅの移動経過を示す情報を生成してもよい。このような作業者Ｐｅの移動経過を示す情報は、特に、複数の作業工程Ｐｒの実施順序に対応させて、複数の監視領域Ａｒが配置されている作業現場ＷＳについて、ボトルネックとなっている作業工程Ｐｒを発見し、改善を検討するのに有用である。
　図９は、生成部１６０が基礎撮像データＢＩに対する画像解析によって生成した、作業現場ＷＳにおける作業者Ｐｅの移動経過を示す情報の一例を示す図である。図９に例示するような、「作業現場ＷＳにおける作業者Ｐｅの移動経過を示す情報」によって、ユーザは、例えば、以下に示すような検討を行うことができる。
　すなわち、ユーザは、作業者Ｐｅが、監視領域Ａｒ（６）から監視領域Ａｒ（７）、監視領域Ａｒ（７）から監視領域Ａｒ（８）、監視領域Ａｒ（８）から監視領域Ａｒ（７）、監視領域Ａｒ（７）から監視領域Ａｒ（６）への移動を繰り返しているのを確認する。監視領域Ａｒ（６）が作業工程Ｐｒ（６）：検査工程に対応する場合、ユーザは、図９に例示する「作業現場ＷＳにおける作業者Ｐｅの移動経過を示す情報」から、例えば、以下の事態を推定することができる。すなわち、検査工程等で発生した待ち時間等において、作業者Ｐｅが、検査工程における作業Ｏｐ（６）：検査作業と並行して、作業工程Ｐｒ（７）および作業工程Ｐｒ（８）における作業Ｏｐ（７）および作業Ｏｐ（８）を行っているとの事態を推定することができる。
　また、ユーザは、「作業現場ＷＳにおける作業者Ｐｅの移動経過を示す情報」から、図９に例示するように、例えば、同様の移動経過が繰り返し発生している場合、「１サイクル」を構成する、複数の作業工程Ｐｒを特定することができる。同様に、ユーザは、サイクル間における作業者Ｐｅの移動経過から、「（サイクルの）切り替え工程」を特定することができる。
　§４．変形例
　（情報処理装置とＰＬＣとを一体とする）
　これまで、図２に示すように、情報処理装置１０とＰＬＣ２０とが、制御ネットワーク５０を介して、相互に通信可能に接続されている例を説明してきた。しかしながら、情報処理装置１０とＰＬＣ２０とを制御ネットワーク５０を介して接続することは必須ではない。
　例えば、情報処理装置１０とＰＬＣ２０とは、内部バスを介して、相互に通信可能に接続されていてもよく、情報処理装置１０とＰＬＣ２０とを一体としてもよい。すなわち、情報処理装置１０とＰＬＣ２０とを一体としたＩＰＣ（Industrial PC）として、情報処理装置１０を構成してもよい。
　（ＰＬＣによる工程情報の分析）
　これまでの説明においては、工程情報に含まれる動作結果Ｌａ（特に、動作Ａｃ）に対する機器判定処理は、ＰＬＣ２０から工程情報を受信した情報処理装置１０が実施していた。すなわち、これまでに説明してきた例では、情報処理装置１０の備える機器判定部１５０が、動作結果Ｌａから、動作Ａｃの動作開始時刻Ｔｍｓ、動作完了時刻Ｔｍｅ、動作期間Ｄａの算出、および、動作Ａｃが「自動化された動作」であるか否かの判定を実行した。
　しかしながら、工程情報に含まれる動作結果Ｌａ（特に、動作Ａｃ）に対する機器判定処理は、ＰＬＣ２０が実行してもよく、ＰＬＣ２０は、機器判定処理の結果を、工程情報に含めて、または、工程情報に代えて、情報処理装置１０へと送信してもよい。例えば、機器判定部１５０はＰＬＣ２０が備え、情報処理装置１０は、ＰＬＣ２０から、工程情報に含まれる動作結果Ｌａ（特に、動作Ａｃ）に対する機器判定処理の結果を取得してもよい。情報処理装置１０は、工程情報に含まれる動作結果Ｌａ（特に、動作Ａｃ）に対する機器判定処理の結果を用いて、作業工程Ｐｒごとの対応付け情報Ｍｉを生成できればよく、動作結果Ｌａに対する機器判定処理を情報処理装置１０が実行することは必須ではない。
　〔ソフトウェアによる実現例〕
　情報処理装置１０の機能ブロック（具体的には、第１取得部１１０、作業者判定部１２０、第２取得部１４０、機器判定部１５０、生成部１６０、表示制御部１７０、推定部１８０、および、領域設定部１９０）は、集積回路（ＩＣチップ）等に形成された論理回路（ハードウェア）によって実現してもよいし、ＣＰＵ（CenＴｒal Processing Unit）を用いてソフトウェアによって実現してもよい。
　後者の場合、情報処理装置１０は、各機能を実現するソフトウェアであるプログラムの命令を実行するＣＰＵ、上記プログラムおよび各種データがコンピュータ（またはＣＰＵ）で読み取り可能に記録されたＲＯＭ（Read Only Memory）または記憶装置（これらを「記録媒体」と称する）、上記プログラムを展開するＲＡＭ（Random Access Memory）等を備えている。そして、コンピュータ（またはＣＰＵ）が上記プログラムを上記記録媒体から読み取って実行することにより、本発明の目的が達成される。上記記録媒体としては、「一時的でない有形の媒体」、例えば、テープ、ディスク、カード、半導体メモリ、プログラマブルな論理回路等を用いることができる。また、上記プログラムは、該プログラムを伝送可能な任意の伝送媒体（通信ネットワークや放送波等）を介して上記コンピュータに供給されてもよい。なお、本発明は、上記プログラムが電子的な伝送によって具現化された、搬送波に埋め込まれたデータ信号の形態でも実現され得る。
　（付記事項）
　本発明の一態様に係る情報処理装置は、各々が複数の作業工程の各々に対応付けられている、複数の監視領域を含む作業現場全体を、１台の広域撮像カメラで撮像した撮像データを取得する第１取得部と、前記第１取得部により取得された前記撮像データに対する画像解析により、前記複数の監視領域の各々について、作業者が存在しているかを判定する作業者判定部と、前記複数の作業工程の各々の実施に用いられる機器が実行した動作の内容および結果を示す動作結果から生成された工程情報を取得する第２取得部と、前記第２取得部により取得された前記工程情報を用いて、前記機器が動作しているかを判定する機器判定部と、前記複数の作業工程の各々について、（Ａ）前記機器判定部により、前記作業工程の実施に用いられた前記機器が動作していると判定された時間帯と、（Ｂ）前記作業者判定部により、前記作業工程に対応付けられている前記監視領域に前記作業者が存在していると判定された時間帯と、を対応付けたデータを生成する生成部と、を備えている。
　前記の構成によれば、前記情報処理装置は、前記１台の広域撮像カメラで撮像した撮像データから、作業工程に対応付けられた監視領域に作業者が存在しているかを判定し、また、前記工程情報から、前記作業工程の実施に用いられる機器が動作しているかを判定する。そして、前記情報処理装置は、作業工程ごとに、前記機器が動作していると判定した時間帯と、前記作業工程に対応付けられている前記監視領域に作業者が存在していると判定した時間帯と、を対応付けたデータを生成する。
　つまり、前記情報処理装置は、１台の広域撮像カメラで作業現場全体を撮像した撮像データに対する画像解析により、作業工程ごとの「機器が動作している時間帯と、作業者が監視領域に存在している時間帯との対応関係」を示すデータを生成する。
　したがって、前記情報処理装置は、作業現場全体を撮像可能な１台の広域撮像カメラを利用することにより、実現コストを抑えつつ、作業工程に用いられる機器の実際の動作と作業者との対応関係を把握することができるとの効果を奏する。
　本発明の一態様に係る情報処理装置は、前記作業者判定部により前記作業工程に対応付けられている前記監視領域に前記作業者が存在していると判定された時間帯において、前記作業者が行った作業の内容を、前記作業工程の実施に用いられた前記機器の動作結果を用いて、推定する推定部をさらに備えていてもよい。
　前記の構成によれば、前記情報処理装置は、前記作業工程に対応付けられている前記監視領域に前記作業者が存在していると判定した時間帯において、前記作業者が行った作業の内容を、前記作業工程の実施に用いられた前記機器の動作結果を用いて推定する。
　したがって、前記情報処理装置は、前記作業工程ごとに、前記機器の動作結果を用いて、前記作業工程に対応付けられている前記監視領域に存在する前記作業者が行った作業の内容を、推定することができるとの効果を奏する。
　本発明の一態様に係る情報処理装置は、前記機器判定部により前記作業工程の実施に用いられた前記機器が動作していると判定された時間帯を示すガントチャートと、前記作業者判定部により前記作業工程に対応付けられている前記監視領域に前記作業者が存在していると判定された時間帯を示すガントチャートと、を並列させて表示可能なデータを生成する表示制御部をさらに備えていてもよい。
　前記の構成によれば、前記情報処理装置は、前記作業工程ごとに、前記機器が動作していると判定した時間帯を示すガントチャートと、前記監視領域に前記作業者が存在していると判定した時間帯を示すガントチャートと、を並列させて表示可能なデータを生成する。
　したがって、前記情報処理装置は、前記作業工程ごとに、前記機器の動作時間と、前記作業者が前記監視領域に存在している時間と、の対応関係を、一見して把握可能な形式で管理者等に表示することができるとの効果を奏する。
　本発明の一態様に係る情報処理装置は、前記撮像データに対して、前記監視領域を撮像した領域として画像解析の対象とする解析対象領域を、ユーザ操作に応じて設定する領域設定部をさらに備えていてもよい。
　前記の構成によれば、前記情報処理装置は、前記撮像データに対して、前記解析対象領域を、ユーザ操作に応じて設定する。したがって、前記情報処理装置は、ユーザ操作に応じて、前記撮像データに対して前記解析対象領域を設定することができるとの効果を奏する。
　本発明の一態様に係る情報処理装置の制御方法は、各々が複数の作業工程の各々に対応付けられている、複数の監視領域を含む作業現場全体を、１台の広域撮像カメラで撮像した撮像データを取得する第１取得ステップと、前記第１取得ステップにて取得された前記撮像データに対する画像解析により、前記複数の監視領域の各々について、作業者が存在しているかを判定する作業者判定ステップと、前記複数の作業工程の各々の実施に用いられる機器が実行した動作の内容および結果を示す動作結果から生成された工程情報を取得する第２取得ステップと、前記第２取得ステップにて取得された前記工程情報を用いて、前記機器が動作しているかを判定する機器判定ステップと、前記複数の作業工程の各々について、（Ａ）前記機器判定ステップにて、前記作業工程の実施に用いられた前記機器が動作していると判定された時間帯と、（Ｂ）前記作業者判定ステップにて、前記作業工程に対応付けられている前記監視領域に前記作業者が存在していると判定された時間帯と、を対応付けたデータを生成する生成ステップと、含んでいる。
　前記の構成によれば、前記情報処理方法は、前記１台の広域撮像カメラで撮像した撮像データから、作業工程に対応付けられた監視領域に作業者が存在しているかを判定し、また、前記工程情報から、前記作業工程の実施に用いられる機器が動作しているかを判定する。そして、前記情報処理方法は、作業工程ごとに、前記機器が動作していると判定した時間帯と、前記作業工程に対応付けられている前記監視領域に作業者が存在していると判定した時間帯と、を対応付けたデータを生成する。
　つまり、前記情報処理方法は、１台の広域撮像カメラで作業現場全体を撮像した撮像データに対する画像解析により、作業工程ごとの「機器が動作している時間帯と、作業者が監視領域に存在している時間帯との対応関係」を示すデータを生成する。
　したがって、前記情報処理方法は、作業現場全体を撮像可能な１台の広域撮像カメラを利用することにより、実現コストを抑えつつ、作業工程に用いられる機器の実際の動作と作業者との対応関係を把握することができるとの効果を奏する。
　本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても本発明の技術的範囲に含まれる。
　　　１０　情報処理装置（情報処理装置）
　　　３０　天井カメラ（広域撮像カメラ）
　　　４０　機器（機器、スレーブ）
　　１１０　第１取得部
　　１２０　作業者判定部
　　１４０　第２取得部
　　１５０　機器判定部
　　１６０　生成部
　　１７０　表示制御部
　　１８０　推定部
　　１９０　領域設定部
　　　Ａａ　解析対象領域
　　　Ａｃ　動作
　　　Ａｒ　監視領域
　　　ＢＩ　基礎撮像データ（基礎データ）
　　　Ｄａ　動作期間（機器が動作していると判定された時間帯）
　　　Ｄｏ　滞在期間（作業者が存在していると判定された時間帯）
　　　Ｌａ　動作結果
　　　Ｍｉ　対応付け情報
　　　Ｐｒ　作業工程
　Ｓ１４０　第１取得ステップ
　Ｓ１７０　作業者判定ステップ
　Ｓ１１０　第２取得ステップ
　Ｓ１３０　機器判定ステップ
　Ｓ１８０　生成ステップ

Claims (7)

  1. 　各々が複数の作業工程の各々に対応付けられている、複数の監視領域を含む作業現場全体を、１台の広域撮像カメラで撮像した撮像データを取得する第１取得部と、
    　前記第１取得部により取得された前記撮像データに対する画像解析により、前記複数の監視領域の各々について、作業者が存在しているかを判定する作業者判定部と、
    　前記複数の作業工程の各々の実施に用いられる機器が実行した動作の内容および結果を示す動作結果から生成された工程情報を取得する第２取得部と、
    　前記第２取得部により取得された前記工程情報を用いて、前記機器が動作しているかを判定する機器判定部と、
    　前記複数の作業工程の各々について、（Ａ）前記機器判定部により、前記作業工程の実施に用いられた前記機器が動作していると判定された時間帯と、（Ｂ）前記作業者判定部により、前記作業工程に対応付けられている前記監視領域に前記作業者が存在していると判定された時間帯と、を対応付けたデータを生成する生成部と、
    を備える情報処理装置。
  2. 　前記作業者判定部により前記作業工程に対応付けられている前記監視領域に前記作業者が存在していると判定された時間帯において、前記作業者が行った作業の内容を、前記作業工程の実施に用いられた前記機器の動作結果を用いて、推定する推定部をさらに備える請求項１に記載の情報処理装置。
  3. 　前記機器判定部により前記作業工程の実施に用いられた前記機器が動作していると判定された時間帯を示すガントチャートと、前記作業者判定部により前記作業工程に対応付けられている前記監視領域に前記作業者が存在していると判定された時間帯を示すガントチャートと、を並列させて表示可能なデータを生成する表示制御部をさらに備える
    請求項１または２に記載の情報処理装置。
  4. 　前記撮像データに対して、前記監視領域を撮像した領域として画像解析の対象とする解析対象領域を、ユーザ操作に応じて設定する領域設定部をさらに備える
    請求項１から３のいずれか１項に記載の情報処理装置。
  5. 　各々が複数の作業工程の各々に対応付けられている、複数の監視領域を含む作業現場全体を、１台の広域撮像カメラで撮像した撮像データを取得する第１取得ステップと、
    　前記第１取得ステップにて取得された前記撮像データに対する画像解析により、前記複数の監視領域の各々について、作業者が存在しているかを判定する作業者判定ステップと、
    　前記複数の作業工程の各々の実施に用いられる機器が実行した動作の内容および結果を示す動作結果から生成された工程情報を取得する第２取得ステップと、
    　前記第２取得ステップにて取得された前記工程情報を用いて、前記機器が動作しているかを判定する機器判定ステップと、
    　前記複数の作業工程の各々について、（Ａ）前記機器判定ステップにて、前記作業工程の実施に用いられた前記機器が動作していると判定された時間帯と、（Ｂ）前記作業者判定ステップにて、前記作業工程に対応付けられている前記監視領域に前記作業者が存在していると判定された時間帯と、を対応付けたデータを生成する生成ステップと、
    含む情報処理方法。
  6. 　請求項１から４のいずれか１項に記載の情報処理装置としてコンピュータを機能させるための情報処理プログラムであって、前記各部としてコンピュータを機能させるための情報処理プログラム。
  7. 　請求項６に記載の情報処理プログラムを記録したコンピュータ読み取り可能な記録媒体。
PCT/JP2020/007816 2019-06-14 2020-02-26 情報処理装置、情報処理方法、情報処理プログラム、および記録媒体 WO2020250498A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
EP20822361.0A EP3985583A4 (en) 2019-06-14 2020-02-26 INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING METHOD, INFORMATION PROCESSING PROGRAM AND RECORDING MEDIA
US17/609,789 US20220230440A1 (en) 2019-06-14 2020-02-26 Information processing device, information processing method, and recording medium
KR1020217037872A KR20220004823A (ko) 2019-06-14 2020-02-26 정보 처리 장치, 정보 처리 방법, 정보 처리 프로그램, 및 기록매체
CN202080033138.5A CN113767407A (zh) 2019-06-14 2020-02-26 信息处理装置、信息处理方法、信息处理程序以及记录介质

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019111038A JP7272128B2 (ja) 2019-06-14 2019-06-14 情報処理装置、情報処理方法、情報処理プログラム、および記録媒体
JP2019-111038 2019-06-14

Publications (1)

Publication Number Publication Date
WO2020250498A1 true WO2020250498A1 (ja) 2020-12-17

Family

ID=73781746

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/007816 WO2020250498A1 (ja) 2019-06-14 2020-02-26 情報処理装置、情報処理方法、情報処理プログラム、および記録媒体

Country Status (6)

Country Link
US (1) US20220230440A1 (ja)
EP (1) EP3985583A4 (ja)
JP (1) JP7272128B2 (ja)
KR (1) KR20220004823A (ja)
CN (1) CN113767407A (ja)
WO (1) WO2020250498A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI823327B (zh) * 2021-09-28 2023-11-21 日商歐姆龍股份有限公司 監測區域的設定裝置、監測區域的設定方法以及監測區域的設定程式

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2022113042A (ja) * 2021-01-22 2022-08-03 オムロン株式会社 作業推定装置、作業推定装置の制御方法、情報処理プログラム、および記録媒体
JP2023106888A (ja) 2022-01-21 2023-08-02 オムロン株式会社 情報処理装置および情報処理方法
JP2024034024A (ja) 2022-08-31 2024-03-13 オムロン株式会社 検出システム、方法およびプログラム

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008225704A (ja) * 2007-03-09 2008-09-25 Omron Corp 作業評価装置、作業評価方法、および、制御プログラム
JP2014044619A (ja) * 2012-08-28 2014-03-13 Seiko Epson Corp 生産システム、ロボット、制御装置、生産方法及び制御プログラム
JP2017005383A (ja) * 2015-06-05 2017-01-05 株式会社東芝 監視制御システム
JP2017010277A (ja) * 2015-06-22 2017-01-12 株式会社ブロードリーフ 作業分析システム及び作業分析方法
JP2019016226A (ja) * 2017-07-07 2019-01-31 株式会社日立製作所 作業データ管理システム及び作業データ管理方法
JP2019023803A (ja) 2017-07-24 2019-02-14 株式会社日立製作所 作業改善支援システムおよび方法
JP2019101516A (ja) * 2017-11-29 2019-06-24 ファナック株式会社 作業者管理装置
JP2019191748A (ja) * 2018-04-20 2019-10-31 コニカミノルタ株式会社 生産性向上支援システムおよび生産性向上支援プログラム

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5974391A (en) * 1994-07-12 1999-10-26 Fujitsu Limited Device and method for project management
JP2006221410A (ja) * 2005-02-10 2006-08-24 Seiko Epson Corp 生産効率解析システムと生産効率解析プログラムと記録媒体と生産効率解析方法
JP4735172B2 (ja) * 2005-10-06 2011-07-27 オムロン株式会社 生産管理装置、生産管理方法、生産管理プログラム、生産管理プログラムを記録した記録媒体、および生産システム
JP2007323199A (ja) * 2006-05-30 2007-12-13 Omron Corp 生産管理装置、生産管理方法、生産管理プログラム、およびこれを記録した記録媒体、ならびに生産システム
JP5346513B2 (ja) * 2008-07-22 2013-11-20 京楽産業．株式会社 ポーリング通信システム
JP2012150613A (ja) * 2011-01-18 2012-08-09 Ricoh Co Ltd 作業内容測定装置及び作業管理装置
JP6075180B2 (ja) * 2013-04-18 2017-02-08 オムロン株式会社 作業管理システムおよび作業管理方法
JP6855801B2 (ja) 2017-01-16 2021-04-07 沖電気工業株式会社 異常検知システム、異常検知装置、異常検知方法およびプログラム
JP2018142058A (ja) * 2017-02-27 2018-09-13 株式会社Ｓｕｂａｒｕ 作業品質評価装置、作業品質評価方法
JP2018142259A (ja) * 2017-02-28 2018-09-13 オムロン株式会社 作業管理装置、方法およびプログラム
JP6365906B1 (ja) * 2017-03-01 2018-08-01 パナソニックＩｐマネジメント株式会社 ３次元侵入検知システムおよび３次元侵入検知方法
EP3619642A1 (en) * 2017-05-01 2020-03-11 Sensormatic Electronics, LLC Space management monitoring and reporting using video analytics
KR102281998B1 (ko) 2017-08-30 2021-07-27 삼성전자 주식회사 이종재질 통신장치 함체
US20210166180A1 (en) * 2018-08-23 2021-06-03 Sony Corporation Information processing apparatus, information processing method, and work evaluation system

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008225704A (ja) * 2007-03-09 2008-09-25 Omron Corp 作業評価装置、作業評価方法、および、制御プログラム
JP2014044619A (ja) * 2012-08-28 2014-03-13 Seiko Epson Corp 生産システム、ロボット、制御装置、生産方法及び制御プログラム
JP2017005383A (ja) * 2015-06-05 2017-01-05 株式会社東芝 監視制御システム
JP2017010277A (ja) * 2015-06-22 2017-01-12 株式会社ブロードリーフ 作業分析システム及び作業分析方法
JP2019016226A (ja) * 2017-07-07 2019-01-31 株式会社日立製作所 作業データ管理システム及び作業データ管理方法
JP2019023803A (ja) 2017-07-24 2019-02-14 株式会社日立製作所 作業改善支援システムおよび方法
JP2019101516A (ja) * 2017-11-29 2019-06-24 ファナック株式会社 作業者管理装置
JP2019191748A (ja) * 2018-04-20 2019-10-31 コニカミノルタ株式会社 生産性向上支援システムおよび生産性向上支援プログラム

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3985583A4

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI823327B (zh) * 2021-09-28 2023-11-21 日商歐姆龍股份有限公司 監測區域的設定裝置、監測區域的設定方法以及監測區域的設定程式

Also Published As

Publication number Publication date
JP7272128B2 (ja) 2023-05-12
EP3985583A4 (en) 2023-06-21
JP2020204819A (ja) 2020-12-24
KR20220004823A (ko) 2022-01-11
US20220230440A1 (en) 2022-07-21
CN113767407A (zh) 2021-12-07
EP3985583A1 (en) 2022-04-20

Similar Documents

Publication Publication Date Title
WO2020250498A1 (ja) 情報処理装置、情報処理方法、情報処理プログラム、および記録媒体
US10788401B2 (en) Remote sharing of measurement data
US20080058993A1 (en) System, Methods, Apparatuses and Computer Program Products for Use on a Machine Tool Controller
JP7119532B2 (ja) 生産性向上支援システムおよび生産性向上支援プログラム
CN104808902A (zh) 图像数据生成设备、便携式终端设备和便携式控制设备
CN105051781A (zh) 机器视觉系统以及用于产品的远程质量检验的方法
US11138805B2 (en) Quantitative quality assurance for mixed reality
US11755007B2 (en) System and method for determining a health condition and an anomaly of an equipment using one or more sensors
JP2020205027A (ja) データ抽出装置、データ抽出装置の制御方法、情報処理プログラム、および記録媒体
WO2020250501A1 (ja) データ抽出装置、データ抽出装置の制御方法、情報処理プログラム、および記録媒体
JP6378282B2 (ja) 修理システム、サーバ、端末装置、修理方法及びプログラム
JP2019175407A (ja) 画像検査プログラムのプログラム作成装置及びプログラム作成方法、並びに作成プログラム
JP7178303B2 (ja) 作業管理システム及び作業管理方法
JP2008217608A (ja) 産業機械の遠隔監視システム及び方法
WO2021024528A1 (ja) 表示制御装置、制御方法、情報処理プログラム、および記録媒体
JP2023018016A (ja) 管理システムおよび原因分析システム
JP2008097285A (ja) プラント監視制御システム
WO2022157988A1 (ja) 作業推定装置、作業推定装置の制御方法、情報処理プログラム、および記録媒体
WO2022097310A1 (ja) 作業推定装置、作業推定装置の制御方法、情報処理プログラム、および記録媒体
JP2023105970A (ja) 分析装置、分析方法およびプログラム
CN110335229A (zh) 用于图像检查程序的程序创建装置、程序创建方法以及创建程序
JP2005078283A (ja) プラント機器遠隔監視システムおよびプラント機器遠隔監視方法
JP2023127239A (ja) 作業管理装置、作業管理方法、および作業管理プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20822361

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 20217037872

Country of ref document: KR

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2020822361

Country of ref document: EP