JP6856236B2 - Systems, terminals, server devices, programs and methods - Google Patents

Systems, terminals, server devices, programs and methods Download PDF

Info

Publication number
JP6856236B2
JP6856236B2 JP2016213417A JP2016213417A JP6856236B2 JP 6856236 B2 JP6856236 B2 JP 6856236B2 JP 2016213417 A JP2016213417 A JP 2016213417A JP 2016213417 A JP2016213417 A JP 2016213417A JP 6856236 B2 JP6856236 B2 JP 6856236B2
Authority
JP
Japan
Prior art keywords
image data
manufacturing
image
data
control
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016213417A
Other languages
Japanese (ja)
Other versions
JP2018073185A (en
Inventor
靖典 小林
靖典 小林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kobayashi Engineering Works Ltd
Original Assignee
Kobayashi Engineering Works Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kobayashi Engineering Works Ltd filed Critical Kobayashi Engineering Works Ltd
Priority to JP2016213417A priority Critical patent/JP6856236B2/en
Publication of JP2018073185A publication Critical patent/JP2018073185A/en
Application granted granted Critical
Publication of JP6856236B2 publication Critical patent/JP6856236B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30Computing systems specially adapted for manufacturing

Landscapes

  • General Factory Administration (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Description

本発明は、製品の製造に関する情報を記録する技術に関する。 The present invention relates to a technique for recording information regarding the manufacture of a product.

製品の製造の様子を撮影した画像を記憶しておき、必要に応じて画像を読み出して表示させることにより、過去に行われた製造の様子を確認できるようにした仕組みが提案されている。例えば、本願の出願人による出願に係る特許文献1に記載の仕組みにおいては、作業場毎に設けられた撮影装置が撮影した画像が蓄積され、表示装置に表示される複数の進捗表示欄のなかからユーザによりいずれかの進捗表示欄が特定されると、当該特定された進捗表示欄に応じた画像が表示装置に表示される。 A mechanism has been proposed in which an image of the manufacturing state of a product is stored, and the image is read out and displayed as needed so that the state of manufacturing performed in the past can be confirmed. For example, in the mechanism described in Patent Document 1 relating to the application by the applicant of the present application, images taken by a photographing device provided for each workplace are accumulated, and among a plurality of progress display columns displayed on the display device. When any of the progress display fields is specified by the user, an image corresponding to the specified progress display field is displayed on the display device.

特許第5416322号明細書Japanese Patent No. 5416322

本発明の目的は、過去に行われた製造に関する情報を確認し易くすることである。 An object of the present invention is to facilitate confirmation of information regarding past manufacturing.

本発明は、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第1の画像データと、前記製造に関係する物理量を計測装置により計測した結果を第1の表示装置が表示した画像を表す第2の画像データを取得するデータ取得手段と、前記データ取得手段が取得同時期に生成された前記第1の画像データと前記第2の画像データを対応付けて記憶装置に記憶させる記憶制御手段と、前記記憶装置に対応付けて記憶されている前記第1の画像データと前記第2の画像データの各々が表す画像を第2の表示装置に同時に表示させる表示指示手段とを備えるシステムを提供する。 The present invention includes a first image data representing an image photographed by the photographing device manufacturing apparatus which manufactures the product, the related to producing physical quantity results measured by the meter measuring device the first display device is displayed a data acquisition means for acquiring second image data representing an image, the data acquisition means acquired generated first image data and in association with the second image data at the same time in the storage device A storage control means for storing, and a display instruction means for simultaneously displaying an image represented by each of the first image data and the second image data stored in association with the storage device on the second display device. to provide Cie system equipped with.

上記のシステムにおいて、前記データ取得手段は、前記製造の管理情報を示す製造管理データを取得し、前記記憶制御手段は、前記データ取得手段が取得した前記製造管理データに対応付けて、前記データ取得手段が取得した前記第1の画像データと前記第2の画像データを前記記憶装置に記憶させ、前記表示指示手段は、前記記憶装置に対応付けて記憶されている前記第1の画像データと前記第2の画像データの各々が表す画像と共に、前記第1の画像データと前記第2の画像データに対応付けて前記記憶装置に記憶されている前記製造管理データが示す管理情報を前記第2の表示装置に表示させる、という構成が採用されてもよい。 In the above system, the data acquisition unit, the acquired manufacturing management data indicating the management information of the production, the storage control unit, in association with the production management data which the data acquisition means has acquired, the data The first image data and the second image data acquired by the acquisition means are stored in the storage device, and the display instruction means is stored in association with the storage device with the first image data. Along with the images represented by each of the second image data, the second image data and the management information indicated by the manufacturing control data stored in the storage device in association with the second image data are obtained. A configuration may be adopted in which the data is displayed on the display device of.

上記のシステムにおいて、前記データ取得手段は、前記製造装置を操作するオペレータを撮影装置により撮影した画像を表す第3の画像データを取得し、前記記憶制御手段は、前記データ取得手段が取得した同時期に生成された前記第1の画像データと前記第2の画像データと前記第3の画像データを対応付けて前記記憶装置に記憶させ、前記表示指示手段は、前記記憶装置に対応付けて記憶されている前記第1の画像データと前記第2の画像データと前記第3の画像データの各々が表す画像を前記第2の表示装置に同時に表示させる、という構成が採用されてもよい。 In the above system, the data acquisition means acquires a third image data representing the image photographed by the photographing apparatus an operator for operating the production apparatus, the storage control unit, said data acquisition means acquires The first image data, the second image data, and the third image data generated at the same time are associated with each other and stored in the storage device, and the display instruction means is associated with the storage device. A configuration may be adopted in which the stored images represented by the first image data, the second image data, and the third image data are simultaneously displayed on the second display device.

また、本発明は、第1の端末装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第1の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第2の画像データを受信する受信手段と、前記受信手段が受信した同時期に生成された前記第1の画像データと前記第2の画像データを対応付けて記憶装置に記憶させる記憶制御手段と、前記記憶装置に対応付けて記憶されている前記第1の画像データと前記第2の画像データを第2の端末装置に送信する送信手段とを備えるサーバ装置を提供する。Further, in the present invention, from the first terminal device, the first image data representing an image taken by the manufacturing device for manufacturing the product by the photographing device and the result of measuring the physical quantity related to the manufacturing by the measuring device are obtained. The receiving means for receiving the second image data representing the image displayed by the display device, the first image data generated at the same time received by the receiving means, and the second image data are stored in association with each other. A server device including a storage control means for storing in the device and a transmission means for transmitting the first image data and the second image data stored in association with the storage device to the second terminal device. provide.

また、本発明は、サーバ装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第1の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第2の画像データを受信する受信手段と、前記受信手段が受信した前記第1の画像データと前記第2の画像データの各々が表す画像を表示装置に同時に表示させる表示指示手段とを備える端末装置を提供する。 Further, in the present invention, the display device displays the first image data representing an image taken by the photographing device of the manufacturing device that manufactures the product from the server device and the result of measuring the physical quantity related to the manufacturing by the measuring device. A display instruction for simultaneously displaying on the display device a receiving means for receiving the second image data representing the displayed image and an image represented by each of the first image data and the second image data received by the receiving means. Provided is a terminal device including means.

また、本発明は、コンピュータに、第1の端末装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第1の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第2の画像データを受信する処理と、受信した同時期に生成された前記第1の画像データと前記第2の画像データを対応付けて記憶装置に記憶させる処理と、前記記憶装置に対応付けて記憶されている前記第1の画像データと前記第2の画像データを第2の端末装置に送信する処理とを実行させるためのプログラムを提供する。 Further, in the present invention, the computer measures the first image data representing an image taken by the photographing apparatus of the manufacturing apparatus for manufacturing the product from the first terminal apparatus and the physical quantity related to the manufacturing by the measuring apparatus. The process of receiving the second image data representing the image displayed by the display device and the storage device in association with the first image data generated at the same time as the reception and the second image data. Provided is a program for executing a process of storing and a process of transmitting the first image data and the second image data stored in association with the storage device to a second terminal device.

また、本発明は、コンピュータに、サーバ装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第1の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第2の画像データを受信する処理と、受信した前記第1の画像データと前記第2の画像データの各々が表す画像を表示装置に同時に表示させる処理とを実行させるためのプログラムを提供する。 Further, the present invention provides a computer with first image data representing an image taken by a manufacturing device for manufacturing a product from a server device and a result of measuring a physical quantity related to the manufacturing by the measuring device. a process of receiving the second image data representing an image display device displaying, and a process of displaying simultaneously on the display device an image, each representing the received first image data and the second image data Provide a program to execute.

また、本発明は、システムが、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第1の画像データと、前記製造に関係する物理量を計測装置により計測した結果を第1の表示装置が表示した画像を表す第2の画像データを取得するステップと、前記システムが、取得した同時期に生成された前記第1の画像データと前記第2の画像データ対応付けて記憶装置に記憶させるステップと、前記システムが、前記記憶装置に対応付けて記憶されている前記第1の画像データと前記第2の画像データの各々が表す画像を第2の表示装置に同時に表示させるステップとを備える方法を提供する。 Further, the present invention, the system includes a first image data representing an image photographed by the photographing device manufacturing apparatus which manufactures the product, said the results measured by the meter measuring device a physical quantity related to the production first The step of acquiring the second image data representing the image displayed by the display device of the above, and the system stores the first image data generated at the same time as the acquisition and the second image data in association with each other. The step of storing in the device and the system simultaneously display the image represented by each of the first image data and the second image data stored in association with the storage device on the second display device. Provide a method of providing steps and.

本発明によれば、過去に行われた製造に関する情報が確認し易くなる。 According to the present invention, it becomes easy to confirm information on the manufacturing performed in the past.

実施形態にかかるシステムの全体構成を示した図。The figure which showed the whole structure of the system which concerns on embodiment. 制御コンピュータの表示装置に表示される画面の一例を示す図。The figure which shows an example of the screen displayed on the display device of a control computer. 制御コンピュータの表示装置に表示される画面の一例を示す図。The figure which shows an example of the screen displayed on the display device of a control computer. 制御コンピュータの表示装置に表示される画面の一例を示す図。The figure which shows an example of the screen displayed on the display device of a control computer. 制御コンピュータの表示装置に表示される画面の一例を示す図。The figure which shows an example of the screen displayed on the display device of a control computer. 実施形態にかかる制御コンピュータのハードウェアとして利用可能なコンピュータの基本構成を示した図。The figure which showed the basic structure of the computer which can be used as the hardware of the control computer which concerns on embodiment. 実施形態にかかる制御コンピュータの機能構成を示した図。The figure which showed the functional structure of the control computer which concerns on embodiment. 実施形態にかかるサーバ装置のハードウェアとして利用可能なコンピュータの基本構成を示した図。The figure which showed the basic structure of the computer which can be used as the hardware of the server apparatus which concerns on embodiment. 実施形態にかかるサーバ装置の機能構成を示した図。The figure which showed the functional structure of the server apparatus which concerns on embodiment. 実施形態にかかるサーバ装置のハードウェアとして利用可能なコンピュータの基本構成を示した図。The figure which showed the basic structure of the computer which can be used as the hardware of the server apparatus which concerns on embodiment. 実施形態にかかるサーバ装置の機能構成を示した図。The figure which showed the functional structure of the server apparatus which concerns on embodiment. 実施形態にかかるサーバ装置に記憶されている製造管理テーブルの構成を例示した図。The figure which illustrated the structure of the manufacturing control table stored in the server apparatus which concerns on embodiment. 実施形態にかかるサーバ装置に記憶されている対応関係テーブルの構成を例示した図。The figure which illustrated the structure of the correspondence table stored in the server apparatus which concerns on embodiment. 実施形態にかかる端末のハードウェアとして利用可能なコンピュータの基本構成を示した図。The figure which showed the basic structure of the computer which can be used as the hardware of the terminal which concerns on embodiment. 実施形態にかかる端末の機能構成を示した図。The figure which showed the functional structure of the terminal which concerns on embodiment. 実施形態にかかる記録動作の一例を示すシーケンスチャートSequence chart showing an example of recording operation according to the embodiment 実施形態にかかる閲覧動作の一例を示すシーケンスチャートSequence chart showing an example of browsing operation according to the embodiment 表示装置に表示される画面の一例を示す図。The figure which shows an example of the screen displayed on the display device. 表示装置に表示される画面の一例を示す図。The figure which shows an example of the screen displayed on the display device. 変形例にかかるシステムの全体構成を示した図。The figure which showed the whole structure of the system which concerns on the modification. 変形例にかかる撮影装置の概略を示す図。The figure which shows the outline of the photographing apparatus which concerns on the modification.

[実施形態]
図1は本発明の一実施形態に係る記録システム1の全体構成を示す図である。記録システム1は製品の製造等に関する情報を記録するシステムである。記録システム1は製造装置11a、11bの動作環境の属性値(温度、湿度等)や製造に用いられた材料の量等の情報を記録する。記録システム1は、撮影装置12a、12b、制御コンピュータ(端末装置の一例)13a、13b、端末14、サーバ装置15、およびサーバ装置16を備える。制御コンピュータ13a、13bは本発明に係る端末装置の一例である。サーバ装置15およびサーバ装置16は本発明に係るサーバ装置の一例である。
[Embodiment]
FIG. 1 is a diagram showing an overall configuration of a recording system 1 according to an embodiment of the present invention. The recording system 1 is a system for recording information related to the manufacture of products and the like. The recording system 1 records information such as attribute values (temperature, humidity, etc.) of the operating environment of the manufacturing devices 11a and 11b and the amount of material used for manufacturing. The recording system 1 includes photographing devices 12a and 12b, a control computer (an example of a terminal device) 13a and 13b, a terminal 14, a server device 15, and a server device 16. The control computers 13a and 13b are examples of the terminal device according to the present invention. The server device 15 and the server device 16 are examples of the server device according to the present invention.

製造装置11a、11bは製品の組立等の製造を行う装置である。製造装置11a、11bは例えば板金加工を行う装置や、製品の塗装を行う装置であってもよい。以下の説明では、説明の便宜上、製造装置11a、11bに共通する構成や動作を説明する場合には、これらを「製造装置11」と称する。この実施形態では、1または複数の工程を経て製品が製造され、各工程の作業が1または複数の製造装置11により行われる。 The manufacturing devices 11a and 11b are devices for manufacturing such as assembling products. The manufacturing devices 11a and 11b may be, for example, a device for sheet metal processing or a device for painting a product. In the following description, for convenience of explanation, when the configurations and operations common to the manufacturing devices 11a and 11b are described, these are referred to as "manufacturing device 11". In this embodiment, the product is manufactured through one or more steps, and the work of each step is performed by one or more manufacturing devices 11.

製造装置11のそれぞれには、各装置の動作に関連する各種物理量を計測する1または複数のセンサSが設けられている(または接続されている)。センサS(計測装置の一例)が計測する物理量の種別は、例えば温度、湿度、照度、材料の流量、機器の電力値、モータの回転数、塗装に係る水槽の洗浄度、pH値であるがこれらに限られない。センサSによって計測される物理量の種別は記録対象の製造装置11の種類や製品の種類によって異なる。この実施形態ではそれぞれの製造装置11に応じた種別のセンサSが予め設けられている。センサSは計測結果を示す計測結果データを制御コンピュータ13に出力する。センサSは、例えば「1分間隔」や「5分間隔」など、予め定められたサンプリング周期で物理量を計測してもよい。 Each of the manufacturing apparatus 11 is provided with (or is connected to) one or a plurality of sensors S for measuring various physical quantities related to the operation of each apparatus. The types of physical quantities measured by the sensor S (an example of a measuring device) are, for example, temperature, humidity, illuminance, material flow rate, equipment power value, motor rotation speed, water tank cleanliness related to painting, and pH value. Not limited to these. The type of physical quantity measured by the sensor S differs depending on the type of the manufacturing apparatus 11 to be recorded and the type of the product. In this embodiment, a type of sensor S corresponding to each manufacturing apparatus 11 is provided in advance. The sensor S outputs measurement result data indicating the measurement result to the control computer 13. The sensor S may measure a physical quantity at a predetermined sampling cycle such as "1 minute interval" or "5 minute interval".

製造装置11に設けられた(または接続された)センサSおよび製造装置11の種類や製造元メーカーは様々であり、製造装置11のそれぞれで、センサSなどの外部装置との間で入出力されるデータのフォーマットやインタフェース規格は異なる。製造装置11およびセンサSは独自のインタフェース規格でデータを入出力してもよい。 There are various types and manufacturers of the sensor S provided (or connected) to the manufacturing apparatus 11 and the manufacturing apparatus 11, and each of the manufacturing apparatus 11 inputs / outputs to / from an external device such as the sensor S. Data formats and interface standards are different. The manufacturing apparatus 11 and the sensor S may input / output data according to their own interface standard.

撮影装置12a、12bは撮影し、撮影した画像(静止画像または動画像)を表す画像データを出力する。この実施形態では、撮影装置12aは製造装置11aを撮影し、撮影装置12bは製造装置11bを撮影する。以下の説明では、撮影装置12a、12bに共通する構成や動作を説明する場合には、これらを「撮影装置12」と称する。この実施形態では、撮影装置12は、製造装置11の動作状態や製造装置11に対する操作者の操作を、予め定められたタイミング(例えば、1秒毎)で撮影し、撮影した静止画像を表す画像データ(以下「撮影データ」という)を生成する。撮影装置12は、撮影データ、その撮影データの撮影時刻を示す時刻情報(タイムスタンプ)および撮影装置12を識別する撮影識別子(以下「撮影ID」という)を対応付けてサーバ装置15に送信する。なお、撮影データが動画像である場合、撮影装置12は動画のデータフォーマットのなかに予め定められた単位時間毎の撮影時刻を付与する。なお、図1の例では、ひとつの製造装置11に対してひとつの撮影装置12が設けられているが、ひとつの製造装置11を複数の撮影装置12が撮影してもよい。 The photographing devices 12a and 12b photograph and output image data representing the photographed image (still image or moving image). In this embodiment, the photographing device 12a photographs the manufacturing device 11a, and the photographing device 12b photographs the manufacturing device 11b. In the following description, when the configurations and operations common to the photographing devices 12a and 12b are described, these are referred to as "photographing devices 12". In this embodiment, the photographing device 12 captures the operating state of the manufacturing apparatus 11 and the operation of the operator with respect to the manufacturing apparatus 11 at predetermined timings (for example, every second), and an image representing the captured still image. Generate data (hereinafter referred to as "shooting data"). The photographing device 12 transmits the shooting data, the time information (time stamp) indicating the shooting time of the shooting data, and the shooting identifier (hereinafter referred to as “shooting ID”) that identifies the shooting device 12 to the server device 15. When the shooting data is a moving image, the shooting device 12 assigns a shooting time for each unit time predetermined in the moving image data format. In the example of FIG. 1, one photographing device 12 is provided for one manufacturing device 11, but one manufacturing device 11 may be photographed by a plurality of photographing devices 12.

制御コンピュータ13aは製造装置11aを制御するコンピュータであり、制御コンピュータ13bは製造装置11bを制御するコンピュータである。制御コンピュータ13aは製造装置11aと有線ケーブルにより接続されている。制御コンピュータ13bは製造装置11aと一体として構成されている。以下の説明では、説明の便宜上、制御コンピュータ13aと制御コンピュータ13bに共通する構成や動作を説明する場合には、これらを「制御コンピュータ13」と称する。制御コンピュータ13は、製造装置11とは別体として構成されていてもよく、また、製造装置11に内蔵されていてもよい。制御コンピュータ13は例えばパーソナルコンピュータであってもよい。図1の例では、ひとつの製造装置11に対しひとつの制御コンピュータ13が設けられているが、各装置の台数はこれに限られない。例えば、複数の製造装置11についてひとつの制御コンピュータ13が設けられていてもよい。また、ひとつの製造装置11について複数の制御コンピュータ13が設けられていてもよい。 The control computer 13a is a computer that controls the manufacturing apparatus 11a, and the control computer 13b is a computer that controls the manufacturing apparatus 11b. The control computer 13a is connected to the manufacturing apparatus 11a by a wired cable. The control computer 13b is configured integrally with the manufacturing apparatus 11a. In the following description, for convenience of explanation, when the configurations and operations common to the control computer 13a and the control computer 13b are described, these are referred to as "control computer 13". The control computer 13 may be configured as a separate body from the manufacturing apparatus 11, or may be built in the manufacturing apparatus 11. The control computer 13 may be, for example, a personal computer. In the example of FIG. 1, one control computer 13 is provided for one manufacturing apparatus 11, but the number of each apparatus is not limited to this. For example, one control computer 13 may be provided for a plurality of manufacturing devices 11. Further, a plurality of control computers 13 may be provided for one manufacturing apparatus 11.

制御コンピュータ13は製造装置11の制御に関する各種情報を表示する表示装置130を有する。表示装置130は、制御コンピュータ13に内蔵されていてもよく、また、制御コンピュータ13と別体として構成され有線または無線により制御コンピュータ13と接続されてもよい。また、例えば、表示装置130は製造装置11に設けられた操作パネルであってもよい。表示装置130には、制御コンピュータ13が取得した各種センサSの計測値や、制御コンピュータ13により製造装置11の制御に係る情報が表示される。製造装置11の制御に係る情報は、例えば、製造装置11の制御プログラムを識別するプログラム番号や、製造装置11の運転状態を示す情報を含んでもよい。制御コンピュータ13はオペレータOPにより操作される。表示装置130に表示される画面は、オペレータOPの操作を受け付ける操作画面や、オペレータOPにより編集可能な画面であってもよい。 The control computer 13 has a display device 130 that displays various information related to the control of the manufacturing device 11. The display device 130 may be built in the control computer 13, or may be configured separately from the control computer 13 and connected to the control computer 13 by wire or wirelessly. Further, for example, the display device 130 may be an operation panel provided in the manufacturing device 11. The display device 130 displays the measured values of the various sensors S acquired by the control computer 13 and the information related to the control of the manufacturing device 11 by the control computer 13. The information related to the control of the manufacturing apparatus 11 may include, for example, a program number for identifying the control program of the manufacturing apparatus 11 and information indicating an operating state of the manufacturing apparatus 11. The control computer 13 is operated by the operator OP. The screen displayed on the display device 130 may be an operation screen that accepts the operation of the operator OP or a screen that can be edited by the operator OP.

図2乃至図5は表示装置130に表示される画面の一例を示す図である。図2に例示される画面は、FEMS(Factory Energy Management System)などの工場エネルギー管理システムにおいて、受配電設備のエネルギー管理や生産設備のエネルギー使用・稼働状況が表示された画面である。図2の例では、設置された各種機器の電力値、蒸気の量、バルブの状態などが模式的に表示されている。 2 to 5 are diagrams showing an example of a screen displayed on the display device 130. The screen illustrated in FIG. 2 is a screen displaying the energy management of power receiving and distribution equipment and the energy usage / operation status of production equipment in a factory energy management system such as FEMS (Factory Energy Management System). In the example of FIG. 2, the electric power value, the amount of steam, the state of the valve, and the like of various installed devices are schematically displayed.

図3に例示される画面は、複数のウィンドウW1、W2、W3を含む。ウィンドウW1には、予め定められた測定対象についての設定値と、実際の測定値とが表示されている。ウィンドウW2およびウィンドウW3には、製造装置11に対する制御コマンドなどの情報が表示されている。図4に例示される画面は、測定対象である製造装置11に備えられているエンジンの回転数や温度などを表すメーターの画像を含む。図5に例示される画面は、測定対象である機材についての電気使用量を表す情報などを含む。 The screen illustrated in FIG. 3 includes a plurality of windows W1, W2, W3. The window W1 displays a predetermined set value for the measurement target and an actual measured value. Information such as control commands for the manufacturing apparatus 11 is displayed in the window W2 and the window W3. The screen illustrated in FIG. 4 includes an image of a meter showing the rotation speed, temperature, and the like of the engine provided in the manufacturing apparatus 11 to be measured. The screen illustrated in FIG. 5 includes information indicating the amount of electricity used for the equipment to be measured.

表示装置130には、センサSによる測定結果以外にも、エラーが発生した旨を示すメッセージや、エラーの種別や内容を表すメッセージまたはエラーコードが表示されてもよい。製造装置11の管理者は、制御コンピュータ13の表示装置130に表示される画面を確認しつつ、製造ラインの管理・保守を行う。 In addition to the measurement result by the sensor S, the display device 130 may display a message indicating that an error has occurred, a message indicating the type and content of the error, or an error code. The manager of the manufacturing device 11 manages and maintains the manufacturing line while checking the screen displayed on the display device 130 of the control computer 13.

制御コンピュータ13のハードウェアは、記録システム1のために設計された専用装置であってもよく、また、汎用的なコンピュータであってもよい。制御コンピュータ13のハードウェアとして利用可能なコンピュータの形態は限定されない。制御コンピュータ13のハードウェアは、例えば、ノート型PC(Personal Computer)、タブレット型PCであってもよい。また、制御コンピュータ13が通話機能を備えたタブレット型PC(いわゆるスマートフォン)であってもよい。 The hardware of the control computer 13 may be a dedicated device designed for the recording system 1 or a general-purpose computer. The form of the computer that can be used as the hardware of the control computer 13 is not limited. The hardware of the control computer 13 may be, for example, a notebook PC (Personal Computer) or a tablet PC. Further, the control computer 13 may be a tablet PC (so-called smartphone) having a call function.

図6は制御コンピュータ13のハードウェアとして利用可能なコンピュータの一例であるコンピュータ10の基本構成を示す図である。コンピュータ10は、各種データを記憶するメモリ101と、メモリ101に記憶されているプログラムに従ったデータ処理を行うプロセッサ102と、計時を行うクロック103と、データ通信を行うインタフェースである通信IF104と、タッチパネルなどの操作装置105とを備える。なお、コンピュータ10は、表示装置(例えば液晶ディスプレイ)と操作装置(例えばタッチパネル)が一体として構成されたタッチディスプレイを備えていてもよい。 FIG. 6 is a diagram showing a basic configuration of a computer 10 which is an example of a computer that can be used as hardware of the control computer 13. The computer 10 includes a memory 101 that stores various data, a processor 102 that performs data processing according to a program stored in the memory 101, a clock 103 that performs timing, and a communication IF 104 that is an interface for data communication. It is provided with an operation device 105 such as a touch panel. The computer 10 may include a touch display in which a display device (for example, a liquid crystal display) and an operation device (for example, a touch panel) are integrally configured.

図7は制御コンピュータ13の機能構成を示す図である。すなわち、コンピュータ10がプログラムに従ったデータ処理を行うことにより、図7に示す構成部を備える制御コンピュータ13が実現される。以下に制御コンピュータ13が備える機能構成部を説明する。 FIG. 7 is a diagram showing a functional configuration of the control computer 13. That is, when the computer 10 performs data processing according to the program, the control computer 13 having the components shown in FIG. 7 is realized. The functional components included in the control computer 13 will be described below.

計測結果取得手段131は、製品の製造に関係する物理量を計測する計測装置(センサS)により生成された測定結果データを取得する。測定装置により計測される物理量は、例えば、製造装置11の運転に関係する計測値(機器の電力値、モータの回転数、材料の流量)や、製造装置11が設けられている環境の温度、湿度、照度、製造装置11に含まれる部品の温度であってもよい。 The measurement result acquisition unit 131 acquires the measurement result data generated by the measurement device (sensor S) that measures the physical quantity related to the manufacture of the product. The physical quantities measured by the measuring device include, for example, measured values related to the operation of the manufacturing device 11 (equipment power value, motor rotation speed, material flow rate), temperature of the environment in which the manufacturing device 11 is provided, and so on. It may be the humidity, the illuminance, and the temperature of the parts included in the manufacturing apparatus 11.

計測結果表示指示手段132は、計測結果取得手段131により取得された計測結果データの表す計測結果を表示装置(タッチディスプレイなど)に表示させる。 The measurement result display instruction means 132 causes a display device (touch display or the like) to display the measurement result represented by the measurement result data acquired by the measurement result acquisition means 131.

画像データ取得手段133は、製品の製造に関係する物理量を計測する計測装置(センサS)により計測された計測結果を表す画像データを取得する。この実施形態では、画像データ取得手段133は表示装置130に表示された画面がキャプチャされて生成された画像データ(以下「キャプチャデータ」という)を取得する。取得されるキャプチャデータには、キャプチャされた時刻を示す時刻情報(タイムスタンプ)や制御コンピュータ13を識別する制御IDが付される。 The image data acquisition means 133 acquires image data representing the measurement result measured by the measuring device (sensor S) for measuring the physical quantity related to the manufacture of the product. In this embodiment, the image data acquisition means 133 acquires image data (hereinafter referred to as “capture data”) generated by capturing the screen displayed on the display device 130. The acquired capture data is attached with time information (time stamp) indicating the time of capture and a control ID for identifying the control computer 13.

送信手段134は、製品の製造に関係する製造管理データを、画像データ取得手段133により取得された画像データまたは画像データに関する情報に対応付けて記憶装置に記憶させるサーバ装置(サーバ装置16)に送信する。 The transmission means 134 transmits the manufacturing control data related to the manufacture of the product to the server device (server device 16) that stores the image data acquired by the image data acquisition unit 133 or the information related to the image data in the storage device. To do.

指示取得手段135は、記録の開始指示を示す開始指示データと、記録の終了指示を示す終了指示データとを取得する。条件データ取得手段136は、画面を取得するタイミングに関する条件を示す条件データを取得する。 The instruction acquisition means 135 acquires start instruction data indicating a recording start instruction and end instruction data indicating a recording end instruction. The condition data acquisition means 136 acquires condition data indicating a condition relating to the timing of acquiring the screen.

制御コンピュータ13には製造装置11の制御用の第1のプログラムと、表示される画面をキャプチャしてサーバ装置15にアップロードする第2のプログラムとが記憶されている。制御コンピュータ13が第1のプログラムを実行することにより、計測結果取得手段131と計測結果表示指示手段132が実現される。制御コンピュータ13が第2のプログラムを実行することにより、画像データ取得手段133および送信手段134が実現される。より具体的には、制御コンピュータ13は、第1のプログラムを実行することにより、各種センサSから測定結果データを取得し、取得した測定結果データの示す測定結果を表示装置130に表示させる。また、制御コンピュータ13は、第2のプログラムを実行することにより、表示装置130に表示された測定結果を表す画面をキャプチャし、キャプチャデータをサーバ装置15にアップロードするとともに、製造管理データをサーバ装置16に送信する。 The control computer 13 stores a first program for controlling the manufacturing apparatus 11 and a second program that captures the displayed screen and uploads it to the server apparatus 15. When the control computer 13 executes the first program, the measurement result acquisition means 131 and the measurement result display instruction means 132 are realized. When the control computer 13 executes the second program, the image data acquisition means 133 and the transmission means 134 are realized. More specifically, the control computer 13 acquires measurement result data from various sensors S by executing the first program, and causes the display device 130 to display the measurement result indicated by the acquired measurement result data. Further, the control computer 13 captures the screen showing the measurement result displayed on the display device 130 by executing the second program, uploads the captured data to the server device 15, and transfers the manufacturing control data to the server device. Send to 16.

この実施形態では、上記第1のプログラムと第2のプログラムはマルチタスクOSにより並行して実行される。すなわち、この実施形態では、製造装置11の制御処理とキャプチャ画像のアップロード処理とが制御コンピュータ13により並行して実行される。 In this embodiment, the first program and the second program are executed in parallel by the multitasking OS. That is, in this embodiment, the control process of the manufacturing apparatus 11 and the upload process of the captured image are executed in parallel by the control computer 13.

図1の説明に戻る。サーバ装置15は、例えば汎用のサーバコンピュータであり、撮影装置12から出力される撮影データや、制御コンピュータ13によりキャプチャされたキャプチャデータなどの画像データを蓄積する。サーバ装置15のハードウェアは、記録システム1のために設計された専用装置であってもよいが、汎用的なコンピュータが用いられてもよい。サーバ装置15のハードウェアとして利用可能なコンピュータの形態は限定されない。例えば、デスクトップ型PC、ノート型PCであってもよい。 Returning to the description of FIG. The server device 15 is, for example, a general-purpose server computer, and stores image data such as shooting data output from the shooting device 12 and captured data captured by the control computer 13. The hardware of the server device 15 may be a dedicated device designed for the recording system 1, but a general-purpose computer may be used. The form of the computer that can be used as the hardware of the server device 15 is not limited. For example, it may be a desktop PC or a notebook PC.

図8は、サーバ装置15のハードウェアとして利用可能なコンピュータの一例であるコンピュータ20の基本構成を示した図である。コンピュータ20は、各種データを記憶するメモリ201と、メモリ201に記憶されているプログラムに従ったデータ処理を行うプロセッサ202と、データ通信を行うインタフェースである通信IF203を備える。 FIG. 8 is a diagram showing a basic configuration of a computer 20 which is an example of a computer that can be used as hardware of the server device 15. The computer 20 includes a memory 201 that stores various data, a processor 202 that performs data processing according to a program stored in the memory 201, and a communication IF 203 that is an interface for data communication.

図9はサーバ装置15の機能構成を示した図である。すなわち、コンピュータ20がプログラムに従ったデータ処理を行うことにより、図9に示す構成部を備えるサーバ装置15が実現される。以下にサーバ装置15が備える機能構成部を説明する。 FIG. 9 is a diagram showing a functional configuration of the server device 15. That is, when the computer 20 performs data processing according to the program, the server device 15 having the components shown in FIG. 9 is realized. The functional configuration unit included in the server device 15 will be described below.

画像データ取得手段151は、撮影装置12から撮影データを受信する。受信される撮影データには、タイムスタンプや撮影IDが付されている。また、画像データ取得手段151は制御コンピュータ13からキャプチャデータを受信する。受信されるキャプチャデータには、タイムスタンプや制御IDが付されている。 The image data acquisition means 151 receives the shooting data from the shooting device 12. A time stamp and a shooting ID are attached to the received shooting data. Further, the image data acquisition means 151 receives the captured data from the control computer 13. A time stamp and a control ID are attached to the received capture data.

記憶制御手段152は受信された画像データ(撮影データやキャプチャデータ)を、製造管理データまたは製造管理データに関する情報に対応付けて画像データベース153に記憶する。この実施形態では、製造管理データに関する情報として制御IDまたは撮影IDが用いられる。画像データベース153には、撮影データが時刻情報および撮影IDに対応付けて記憶されるとともに、キャプチャデータが時刻情報および制御IDに対応付けて記憶される。この実施形態では、製造管理データに装置IDが含まれているとともに、画像データベース153に記憶される画像データに撮影IDや制御IDが付されている。装置IDと撮影IDおよび制御IDとの対応関係は後述する対応関係テーブルに記憶されているため、装置ID、制御IDおよび撮影IDにより製造管理データと画像データとが紐づいている。なお、画像データに付される、製造管理データに関する情報は制御IDや撮影IDに限られない。製造管理データに関する情報は他の情報であってもよい。 The storage control means 152 stores the received image data (photographed data or captured data) in the image database 153 in association with the manufacturing control data or the information related to the manufacturing control data. In this embodiment, the control ID or the photographing ID is used as the information regarding the manufacturing control data. In the image database 153, the shooting data is stored in association with the time information and the shooting ID, and the capture data is stored in association with the time information and the control ID. In this embodiment, the device ID is included in the manufacturing management data, and the shooting ID and the control ID are attached to the image data stored in the image database 153. Since the correspondence between the device ID, the shooting ID, and the control ID is stored in the correspondence table described later, the manufacturing control data and the image data are linked by the device ID, the control ID, and the shooting ID. The information related to the manufacturing control data attached to the image data is not limited to the control ID and the shooting ID. The information regarding the manufacturing control data may be other information.

送信手段154は、端末14からの要求に応じて画像データベース153から画像データ群を読み出し、読み出した画像データ群を要求元の端末14に送信する。端末14から受信される要求には、画像データの種別を示す情報(撮影データかキャプチャデータかを示す情報)、時刻情報、撮影IDまたは制御IDが含まれてもよい。 The transmission means 154 reads an image data group from the image database 153 in response to a request from the terminal 14, and transmits the read image data group to the request source terminal 14. The request received from the terminal 14 may include information indicating the type of image data (information indicating whether it is shooting data or captured data), time information, shooting ID, or control ID.

サーバ装置15には画像データベース153が記憶されている。画像データベース153には、上述したように、撮影装置12で撮影された撮影データや、制御コンピュータ13でキャプチャされたキャプチャデータが記憶される。画像データベース153に記憶される各データには、撮影された時刻やキャプチャされた時刻を示す時刻情報(タイムスタンプ)が付されている。 The image database 153 is stored in the server device 15. As described above, the image database 153 stores the photographed data photographed by the photographing apparatus 12 and the captured data captured by the control computer 13. Each data stored in the image database 153 is accompanied by time information (time stamp) indicating the time when the image was taken and the time when the image was captured.

図1の説明に戻る。サーバ装置16は、例えば汎用のサーバコンピュータであり、製造装置11の製造工程を管理するための各種の処理を行う。サーバ装置16は、センサSの計測結果を示す計測結果データを受信する。図1において、撮影装置12、制御コンピュータ13、端末14、サーバ装置15およびサーバ装置16は、LAN(Local Area Network)やインターネット等の通信網200に接続されている。 Returning to the description of FIG. The server device 16 is, for example, a general-purpose server computer, and performs various processes for managing the manufacturing process of the manufacturing device 11. The server device 16 receives the measurement result data indicating the measurement result of the sensor S. In FIG. 1, the photographing device 12, the control computer 13, the terminal 14, the server device 15, and the server device 16 are connected to a communication network 200 such as a LAN (Local Area Network) or the Internet.

サーバ装置16のハードウェアは、記録システム1のために設計された専用装置であってもよいが、汎用的なコンピュータが用いられてもよい。サーバ装置16のハードウェアとして利用可能なコンピュータの形態は限定されない。例えば、デスクトップ型PC、ノート型PCであってもよい。 The hardware of the server device 16 may be a dedicated device designed for the recording system 1, but a general-purpose computer may be used. The form of the computer that can be used as the hardware of the server device 16 is not limited. For example, it may be a desktop PC or a notebook PC.

図10は、サーバ装置16のハードウェアとして利用可能なコンピュータの一例であるコンピュータ30の基本構成を示した図である。コンピュータ30は、各種データを記憶するメモリ301と、メモリ301に記憶されているプログラムに従ったデータ処理を行うプロセッサ302と、データ通信を行うインタフェースである通信IF303を備える。 FIG. 10 is a diagram showing a basic configuration of a computer 30 which is an example of a computer that can be used as hardware of the server device 16. The computer 30 includes a memory 301 that stores various data, a processor 302 that performs data processing according to a program stored in the memory 301, and a communication IF 303 that is an interface for data communication.

図11はサーバ装置16の機能構成を示した図である。すなわち、コンピュータ30がプログラムに従ったデータ処理を行うことにより、図11に示す構成部を備えるサーバ装置16が実現される。以下にサーバ装置16が備える機能構成部を説明する。 FIG. 11 is a diagram showing a functional configuration of the server device 16. That is, when the computer 30 performs data processing according to the program, the server device 16 having the component shown in FIG. 11 is realized. The functional configuration unit included in the server device 16 will be described below.

製造管理データ取得手段162は、製品の製造に関係する製造管理データを取得する。この実施形態では、製造管理データ取得手段162は、制御コンピュータ13から製造管理データを受信することによって該データを受信する。 The manufacturing control data acquisition means 162 acquires manufacturing control data related to the manufacture of the product. In this embodiment, the manufacturing control data acquisition unit 162 receives the manufacturing control data by receiving the manufacturing control data from the control computer 13.

記憶制御手段163は、製造管理データ取得手段162により取得された製造管理データを、画像データ(撮影データやキャプチャデータ)または画像データに関連する情報に対応付けて記憶装置に記憶させる。この実施形態では、画像データに関連する情報として撮影IDと制御IDとが用いられる。この実施形態では、製造管理データに装置IDが含まれているとともに、画像データベース153に記憶される画像データに撮影IDや制御IDが付されている。装置IDと撮影IDおよび制御IDとの対応関係は後述する対応関係テーブルに記憶されているため、装置ID、制御IDおよび撮影IDにより製造管理データと画像データとが紐づいている。なお、製造管理データに付される、画像データに関する情報は撮影IDや制御IDに限られない。画像データに関する情報は他の情報であってもよい。 The storage control means 163 stores the manufacturing control data acquired by the manufacturing control data acquisition means 162 in the storage device in association with the image data (photographed data or captured data) or the information related to the image data. In this embodiment, a shooting ID and a control ID are used as information related to the image data. In this embodiment, the device ID is included in the manufacturing management data, and the shooting ID and the control ID are attached to the image data stored in the image database 153. Since the correspondence between the device ID, the shooting ID, and the control ID is stored in the correspondence table described later, the manufacturing control data and the image data are linked by the device ID, the control ID, and the shooting ID. The information related to the image data attached to the manufacturing control data is not limited to the shooting ID and the control ID. The information regarding the image data may be other information.

表示指示手段164は、製造管理データの表す内容を表示装置に表示させる際に、その製造管理データに対応する画像データの表す画像を表示させる。この実施形態では、表示指示手段164は、製造管理データと画像データとを端末14に送信し、端末14に表示を指示する。撮影データ取得手段165は、製造に関係する撮影対象物(製造装置11など)を撮影する撮影装置12により生成された撮影データを取得する。条件データ送信手段166は、製造管理データに応じた画像データの取得タイミングに関する条件を示す条件データを記憶装置から読み出し、画像データの送信元である端末に送信する。 When the display instruction means 164 displays the content represented by the manufacturing control data on the display device, the display instruction means 164 displays an image represented by the image data corresponding to the manufacturing control data. In this embodiment, the display instruction means 164 transmits the manufacturing control data and the image data to the terminal 14 and instructs the terminal 14 to display the data. The shooting data acquisition means 165 acquires shooting data generated by the shooting device 12 that shoots a shooting object (manufacturing device 11 or the like) related to manufacturing. The condition data transmission means 166 reads the condition data indicating the condition regarding the acquisition timing of the image data according to the manufacturing control data from the storage device and transmits the condition data to the terminal which is the transmission source of the image data.

図12はサーバ装置16に記憶されている製造管理テーブルの構成を例示した図である。製造管理テーブルには、記録システム1における製造を管理するためのデータ(製造管理データの一例)が記録される。 FIG. 12 is a diagram illustrating the configuration of the manufacturing control table stored in the server device 16. Data for controlling manufacturing in the recording system 1 (an example of manufacturing control data) is recorded in the manufacturing control table.

製造管理テーブルは、フィールドとして、[製品種別]、「工程種別」、[装置ID]、[時刻情報]、[撮影タイミング条件]、および[キャプチャタイミング条件]を備える。[製品種別]は、「製品01」等の製造対象の種別を示すデータを格納する。[工程種別]は、「工程01」等の工程の種別を示すデータを格納する。1つの製品(対象物)に対し複数の製造工程が行われることが多い。[装置ID]は、「装置01」等の製造装置11を識別するデータを格納する。[時刻情報]は、製造動作の開始時刻や終了時刻を示す時刻情報が格納される。[時刻情報]に続く[撮影タイミング条件]以降のフィールドは、[時刻情報]に格納されるデータの各々に応じたデータを格納する。 The manufacturing control table includes [product type], “process type”, [device ID], [time information], [shooting timing condition], and [capture timing condition] as fields. [Product type] stores data indicating the type of the manufacturing target such as "Product 01". [Process type] stores data indicating the type of process such as "process 01". In many cases, a plurality of manufacturing processes are performed for one product (object). The [device ID] stores data that identifies the manufacturing device 11 such as the “device 01”. [Time information] stores time information indicating the start time and end time of the manufacturing operation. The fields after [Shooting timing condition] following [Time information] store data corresponding to each of the data stored in [Time information].

[撮影タイミング条件]は、対象物の製造に応じた撮影タイミングに関する条件を示す撮影タイミング条件データを格納する。撮影タイミングに関する条件として典型的なものは、「60秒間隔」等の所定時間の経過という条件である。この条件に従う場合、対象物の製造に応じた所定の時間間隔で撮影装置12により撮影が行われる。また、撮影タイミングに関する条件として、例えば、「温度変化=1℃」といったものの考えられる。この条件に従う場合、センサSにより計測される温度が1℃変化する毎に撮影装置12により撮影が行われる。 [Shooting timing condition] stores shooting timing condition data indicating conditions related to shooting timing according to the manufacture of the object. A typical condition regarding the shooting timing is the elapse of a predetermined time such as "60 second interval". When this condition is followed, imaging is performed by the imaging device 12 at predetermined time intervals according to the production of the object. Further, as a condition regarding the imaging timing, for example, "temperature change = 1 ° C." can be considered. When this condition is followed, imaging is performed by the imaging device 12 every time the temperature measured by the sensor S changes by 1 ° C.

[キャプチャタイミング条件]は、制御コンピュータ13が表示装置130の画面をキャプチャするタイミングに関する条件を示すキャプチャタイミング条件データを格納する。キャプチャタイミングに関する条件として典型的なものは、「5分間隔」といった条件である。この場合、表示装置130の画面が5分の経過毎にキャプチャされる。また、キャプチャタイミングに関する条件として、例えば「撮影タイミングと同期」といったものも考えられる。この条件に従う場合、撮影装置12により撮影が行われるタイミングに同期したタイミングで表示装置130の画面がキャプチャされる。 [Capture timing condition] stores capture timing condition data indicating a condition relating to the timing at which the control computer 13 captures the screen of the display device 130. A typical condition regarding the capture timing is a condition such as "every 5 minutes". In this case, the screen of the display device 130 is captured every 5 minutes. Further, as a condition regarding the capture timing, for example, "synchronization with the shooting timing" can be considered. When this condition is followed, the screen of the display device 130 is captured at a timing synchronized with the timing at which the imaging device 12 performs imaging.

なお、製造管理テーブルには、上述した以外のフィールドが含まれていてもよい。例えば、製造管理テーブルは、センサSの計測タイミングに関する条件を示す継続タイミング条件データを格納する[計測タイミング条件]のフィールドを含んでもよい。製造される対象物によって計測対象の物理量は異なり、また、1つの製造装置11に応じて複数の物理量が計測対象となる場合もある。計測タイミングに関する条件は、例えば、「温度:5分間隔」であってもよい。この条件が用いられる場合、センサSにより温度が5分の経過毎に計測される。計測タイミングに関する条件は、「湿度:撮影タイミングと同期」であってもよい。この条件が用いられる場合、撮影装置12により撮影が行われるタイミングでセンサSによる湿度の計測が行われる。また、例えば、製造管理テーブルは、製品の納期を示す情報を格納するフィールドや、オペレータを示す情報を格納するフィールド、進捗状況を示すフィールドを含んでいてもよい。 The manufacturing control table may include fields other than those described above. For example, the manufacturing control table may include a field of [Measurement timing condition] that stores continuous timing condition data indicating a condition regarding the measurement timing of the sensor S. The physical quantity of the measurement target differs depending on the object to be manufactured, and a plurality of physical quantities may be the measurement target according to one manufacturing apparatus 11. The condition regarding the measurement timing may be, for example, "temperature: every 5 minutes". When this condition is used, the temperature is measured by the sensor S every 5 minutes. The condition regarding the measurement timing may be "humidity: synchronized with the shooting timing". When this condition is used, the humidity is measured by the sensor S at the timing when the imaging device 12 performs imaging. Further, for example, the manufacturing control table may include a field for storing information indicating the delivery date of the product, a field for storing information indicating the operator, and a field for indicating the progress status.

なお、上述した撮影タイミング、キャプチャタイミングおよび計測タイミングに関する条件はあくまでも例示であり、他に様々な種類の条件が採用可能である。 The above-mentioned conditions relating to the shooting timing, the capture timing, and the measurement timing are merely examples, and various other types of conditions can be adopted.

図13はサーバ装置16に記憶されている対応関係テーブルの構成を例示した図である。対応関係テーブルは製造装置11、撮影装置12、および制御コンピュータ13の対応関係を記憶するテーブルである。記録管理テーブルは、フィールドとして[装置ID]、[撮影ID]、および[制御ID]を備える。[装置ID]は製造装置11を識別する識別IDを格納する。[撮影ID]は、製造装置11を撮影する撮影装置12を識別する撮影IDを格納する。[制御ID]は製造装置11を制御する制御コンピュータ13を識別する制御IDを格納する。 FIG. 13 is a diagram illustrating the configuration of the correspondence table stored in the server device 16. The correspondence table is a table that stores the correspondence between the manufacturing apparatus 11, the photographing apparatus 12, and the control computer 13. The record management table includes [device ID], [shooting ID], and [control ID] as fields. [Device ID] stores an identification ID that identifies the manufacturing device 11. The [shooting ID] stores a shooting ID that identifies the shooting device 12 that shoots the manufacturing device 11. [Control ID] stores a control ID that identifies the control computer 13 that controls the manufacturing apparatus 11.

図1の説明に戻る。端末14は、ユーザの操作に応じて各種の処理を行う。端末14は例えばパーソナルコンピュータである。端末14は記録システム1の管理者により用いられる。管理者は、端末14を用いて製品の製造に関する進捗状況等の種々の情報を把握する。端末14は、制御コンピュータ13や製造装置11が設けられている場所以外の場所に設けられてもよい。なお、制御コンピュータ13が記録のために用いられていない間は、制御コンピュータ13が情報の閲覧に用いられてもよい。この場合、制御コンピュータ13が一時的に端末14として用いられる。 Returning to the description of FIG. The terminal 14 performs various processes according to the operation of the user. The terminal 14 is, for example, a personal computer. The terminal 14 is used by the administrator of the recording system 1. The manager uses the terminal 14 to grasp various information such as the progress status regarding the manufacturing of the product. The terminal 14 may be provided in a place other than the place where the control computer 13 and the manufacturing apparatus 11 are provided. While the control computer 13 is not used for recording, the control computer 13 may be used for viewing information. In this case, the control computer 13 is temporarily used as the terminal 14.

端末14のハードウェアは、記録システム1のために設計された専用装置であってもよく、また、汎用的なコンピュータであってもよい。端末14のハードウェアとして利用可能なコンピュータの形態は限定されない。端末14のハードウェアは、例えば、ノート型PC、タブレット型PCであってもよい。また、端末14が通話機能を備えたタブレット型PCであってもよい。 The hardware of the terminal 14 may be a dedicated device designed for the recording system 1 or a general-purpose computer. The form of the computer that can be used as the hardware of the terminal 14 is not limited. The hardware of the terminal 14 may be, for example, a notebook PC or a tablet PC. Further, the terminal 14 may be a tablet-type PC having a call function.

図14は端末14のハードウェアとして利用可能なコンピュータの一例であるコンピュータ40の基本構成を示す図である。コンピュータ40は、各種データを記憶するメモリ401と、メモリ401に記憶されているプログラムに従ったデータ処理を行うプロセッサ402と、計時を行うクロック403と、データ通信を行うインタフェースである通信IF404と、表示装置(例えば液晶ディスプレイ)と操作装置(例えばタッチパネル)が一体として構成されたタッチディスプレイ405とを備える。 FIG. 14 is a diagram showing a basic configuration of a computer 40, which is an example of a computer that can be used as the hardware of the terminal 14. The computer 40 includes a memory 401 that stores various data, a processor 402 that performs data processing according to a program stored in the memory 401, a clock 403 that performs timing, and a communication IF 404 that is an interface for data communication. It includes a touch display 405 in which a display device (for example, a liquid crystal display) and an operation device (for example, a touch panel) are integrally configured.

図15は端末14の機能構成を示した図である。すなわち、コンピュータ40がプログラムに従ったデータ処理を行うことにより、図15に示す構成部を備える端末14が実現される。図において、表示指示手段141は、サーバ装置16の送信手段134から送信されてくる画像データを受信し、受信した画像データの表す画像を表示装置142に表示させる。表示装置142は表示指示手段141からの指示に従って画像を表示する。 FIG. 15 is a diagram showing a functional configuration of the terminal 14. That is, when the computer 40 performs data processing according to the program, the terminal 14 having the component shown in FIG. 15 is realized. In the figure, the display instruction means 141 receives the image data transmitted from the transmission means 134 of the server device 16, and causes the display device 142 to display the image represented by the received image data. The display device 142 displays an image according to an instruction from the display instruction means 141.

図16は記録システム1の記録動作の一例を示すシーケンスチャートである。製造装置11は制御コンピュータ13の制御の下、製品の製造等の動作を行う。ステップS101において、制御コンピュータ13は管理者の操作に応じたタイミング等の予め定められたタイミングで、自装置が制御する製造装置11の装置IDを含むデータ(製造管理データの一例)をサーバ装置16に送信する。ステップS102において、サーバ装置16は制御コンピュータ13からデータを受信すると、受信されたデータに従って製造管理テーブルを更新する。 FIG. 16 is a sequence chart showing an example of the recording operation of the recording system 1. The manufacturing apparatus 11 performs operations such as manufacturing a product under the control of the control computer 13. In step S101, the control computer 13 obtains data (an example of manufacturing management data) including the device ID of the manufacturing device 11 controlled by the own device at a predetermined timing such as a timing according to the operation of the administrator. Send to. In step S102, when the server device 16 receives data from the control computer 13, the server device 16 updates the manufacturing control table according to the received data.

製造装置11が動作している期間またはその前後の期間にわたって、製造装置11の付近に設けられた各種のセンサSがそれぞれ物理量を計測し、計測結果を示す計測結果データを制御コンピュータ13に出力する。 Various sensors S provided in the vicinity of the manufacturing apparatus 11 measure physical quantities for a period during or before and after the manufacturing apparatus 11 is operating, and output measurement result data indicating the measurement results to the control computer 13. ..

ステップS103において、制御コンピュータ13はセンサSから出力された計測結果データを取得する。ステップS104において、制御コンピュータ13は取得した計測結果データの表す計測結果を含む制御画面をリアルタイムで表示装置130に表示させる。このとき、制御コンピュータ13は取得された計測結果データの示す内容を視覚的に把握し易い形態で表示装置130に表示させる。具体的には、例えば、制御コンピュータ13は、図4に例示されるような、温度メーターの画像や湿度メーターの画像を含む画面を表示装置130に表示させてもよく、また、例えば、工場に設置された装置の配置を概略的に示す配置図を表示装置130に表示させてもよい。製造装置11に対応する表示装置130には、図2乃至図5に例示される、製造装置11に関連する計測内容を表す画面が表示される。また、製造装置11やセンサSにおいてエラーが検知された場合にその旨やエラーの内容を制御コンピュータ13が表示装置130に表示させてもよい。製造装置11の管理者は、表示装置130に表示される画面を視認することにより、製造装置11の環境、動作状況、エラーの発生の有無などを把握する。 In step S103, the control computer 13 acquires the measurement result data output from the sensor S. In step S104, the control computer 13 causes the display device 130 to display the control screen including the measurement result represented by the acquired measurement result data on the display device 130 in real time. At this time, the control computer 13 causes the display device 130 to display the content indicated by the acquired measurement result data in a form that is easy to visually grasp. Specifically, for example, the control computer 13 may display a screen including an image of a temperature meter and an image of a humidity meter on the display device 130 as illustrated in FIG. 4, or, for example, in a factory. The display device 130 may display a layout diagram schematically showing the layout of the installed devices. The display device 130 corresponding to the manufacturing device 11 displays a screen showing the measurement contents related to the manufacturing device 11 as exemplified in FIGS. 2 to 5. Further, when an error is detected in the manufacturing apparatus 11 or the sensor S, the control computer 13 may display the fact and the content of the error on the display device 130. By visually recognizing the screen displayed on the display device 130, the manager of the manufacturing apparatus 11 grasps the environment, the operating status, the presence or absence of an error, and the like of the manufacturing apparatus 11.

ステップS105において、制御コンピュータ13は、サーバ装置16にキャプチャ条件データや撮影条件データの取得要求を送信する。この取得要求には、製造装置11を識別する装置IDが含まれる。なお、図16の例では、ステップS101乃至S104の後にステップS105の処理が行われるが、処理の順序は図示されたものに限られない。 In step S105, the control computer 13 transmits a capture condition data and a shooting condition data acquisition request to the server device 16. The acquisition request includes a device ID that identifies the manufacturing device 11. In the example of FIG. 16, the processing of step S105 is performed after steps S101 to S104, but the order of processing is not limited to that shown in the drawing.

ステップS106において、サーバ装置16は、取得要求を受信すると、受信された取得要求に含まれる装置IDに対応するキャプチャ条件データや撮影条件データを製造管理テーブルから読み出し、読み出したデータを制御コンピュータ13へ送信する。 In step S106, when the server device 16 receives the acquisition request, the server device 16 reads the capture condition data and the shooting condition data corresponding to the device ID included in the received acquisition request from the manufacturing control table, and reads the read data to the control computer 13. Send.

制御コンピュータ13はサーバ装置16からキャプチャ条件データや撮影条件データを受信する。ステップS107において、制御コンピュータ13はサーバ装置16から受信されたキャプチャ条件データの示すタイミングで、表示装置130に表示された画面をキャプチャしてキャプチャデータを生成する(画像データを取得する)。ステップS108において、制御コンピュータ13は、キャプチャした画面を表すキャプチャデータに時刻情報と制御IDとを付与して、サーバ装置15へ逐次送信する。 The control computer 13 receives the capture condition data and the shooting condition data from the server device 16. In step S107, the control computer 13 captures the screen displayed on the display device 130 at the timing indicated by the capture condition data received from the server device 16 and generates the capture data (acquires the image data). In step S108, the control computer 13 adds time information and a control ID to the captured data representing the captured screen, and sequentially transmits the captured data to the server device 15.

ステップS109において、サーバ装置15は、制御コンピュータ13から送信されてくるキャプチャデータを受信し、受信したキャプチャデータを画像データベース153に蓄積していく。これにより、画像データベース153には、予め定められたタイミングでキャプチャされたキャプチャデータが順次蓄積されていく。具体的には、図2乃至図5に例示される画面のキャプチャ画像を表すデータが画像データベース153に記憶される。 In step S109, the server device 15 receives the capture data transmitted from the control computer 13 and accumulates the received capture data in the image database 153. As a result, the captured data captured at a predetermined timing is sequentially accumulated in the image database 153. Specifically, the data representing the captured image of the screen illustrated in FIGS. 2 to 5 is stored in the image database 153.

一方、ステップS110において、撮影装置12の各々は、予め定められたタイミング(例えば1秒毎)で、製造装置11を撮影し、撮影した画像を表す撮影データに撮影時刻情報と撮影IDとを付与して、サーバ装置15へ逐次送信する。撮影装置12により、例えば製造装置11における製品への加工状況の変化が静止画像の群として記録される。サーバ装置15は、撮影装置12から送信されてくる撮影データを受信する。ステップS111において、サーバ装置15は受信した撮影データを画像データベース153に蓄積していく。これにより、画像データベース153には、予め定められたタイミングで撮影された撮影データが順次蓄積されていく。 On the other hand, in step S110, each of the photographing devices 12 photographs the manufacturing apparatus 11 at a predetermined timing (for example, every 1 second), and assigns the photographing time information and the photographing ID to the photographing data representing the photographed image. Then, it is sequentially transmitted to the server device 15. The photographing device 12 records, for example, a change in the processing status of the product in the manufacturing device 11 as a group of still images. The server device 15 receives the shooting data transmitted from the shooting device 12. In step S111, the server device 15 accumulates the received shooting data in the image database 153. As a result, the image database 153 sequentially accumulates the photographed data taken at the predetermined timing.

また、ステップS112において、制御コンピュータ13は製造装置11の動作の対象物である製品の製品ID、工程ID、その製品についての製造動作を開始した時刻や終了した時刻を示すデータ等、製品の製造に関係する製造管理データを取得し、取得した製造管理データをサーバ装置16へ送信する。製造管理データは、管理者が制御コンピュータ13を操作することによって入力してもよく、また、製造装置11から出力される情報に応じて制御コンピュータ13が生成してもよい。製造管理データがサーバ装置16へ送信されるタイミングは、例えば予め定められた単位時間毎の定期的なタイミングであってもよく、また、例えば、管理者によって送信するための操作が行われたタイミングであってもよい。 Further, in step S112, the control computer 13 manufactures a product, such as a product ID and a process ID of a product that is an object of operation of the manufacturing apparatus 11, and data indicating a time when the manufacturing operation of the product is started or finished. The manufacturing control data related to the above is acquired, and the acquired manufacturing control data is transmitted to the server device 16. The manufacturing control data may be input by the manager operating the control computer 13, or may be generated by the control computer 13 according to the information output from the manufacturing apparatus 11. The timing at which the manufacturing control data is transmitted to the server device 16 may be, for example, a periodic timing for each predetermined unit time, or, for example, the timing at which an operation for transmission is performed by the administrator. It may be.

制御コンピュータ13から送信された製造管理データは、サーバ装置16により受信される。ステップS113において、サーバ装置16は受信した製造管理データを製造管理テーブルに登録し、製造管理テーブルを更新する。これにより、製造管理テーブルには、製造装置11による製品の製造に係る製造管理データが順次蓄積されていく。 The manufacturing control data transmitted from the control computer 13 is received by the server device 16. In step S113, the server device 16 registers the received manufacturing control data in the manufacturing control table and updates the manufacturing control table. As a result, the manufacturing control data related to the manufacturing of the product by the manufacturing apparatus 11 is sequentially accumulated in the manufacturing control table.

図17は製造管理データの閲覧動作の一例を示すシーケンスチャートである。サーバ装置16に蓄積された製造管理データやサーバ装置15に蓄積された画像データは、管理者等が過去に行われた製品の製造の様子を確認したい場合に利用される。例えば端末14のユーザが端末14を操作してサーバ装置16が提供する管理者用のWebサイトにログインすると、ステップS120において、端末14からサーバ装置16に画像閲覧画面のWebページ要求データが送信される。ステップS121において、サーバ装置16はWebページ要求データに応じてWebページデータを生成し、端末14に送信する。ステップS122において、端末14はサーバ装置16から受信したWebページデータに従い、検索条件を指定するための画面(以下「条件指定画面」という)を表示する。 FIG. 17 is a sequence chart showing an example of a manufacturing control data browsing operation. The manufacturing management data stored in the server device 16 and the image data stored in the server device 15 are used when the administrator or the like wants to confirm the state of manufacturing of the product performed in the past. For example, when the user of the terminal 14 operates the terminal 14 to log in to the administrator website provided by the server device 16, the Web page request data of the image viewing screen is transmitted from the terminal 14 to the server device 16 in step S120. To. In step S121, the server device 16 generates Web page data according to the Web page request data and transmits the Web page data to the terminal 14. In step S122, the terminal 14 displays a screen for designating search conditions (hereinafter referred to as “condition designation screen”) according to the Web page data received from the server device 16.

条件指定画面において、ユーザは、「製品ID」や「期間」などの検索条件を入力した後、「検索」ボタンを操作する。この操作に応じて、端末14はステップS123において、操作された内容に応じた検索条件データをサーバ装置16に送信する。ステップS124において、サーバ装置16は検索条件データを受信し、受信された検索条件に対応する製造管理データ群を製造管理テーブルから読み出し、読み出した製造管理データ群を端末14に送信する。ステップS125において、端末14は製造管理データ群を受信し、受信したデータ群の表す内容を自装置に接続された表示装置に表示する。これにより、ユーザに指定された検索条件に対応する製造管理データのリストが端末14の表示装置に表示される。 On the condition specification screen, the user operates the "search" button after inputting search conditions such as "product ID" and "period". In response to this operation, the terminal 14 transmits the search condition data according to the operated content to the server device 16 in step S123. In step S124, the server device 16 receives the search condition data, reads the manufacturing control data group corresponding to the received search condition from the manufacturing control table, and transmits the read manufacturing control data group to the terminal 14. In step S125, the terminal 14 receives the manufacturing control data group and displays the content represented by the received data group on the display device connected to the own device. As a result, a list of manufacturing control data corresponding to the search condition specified by the user is displayed on the display device of the terminal 14.

図18は表示装置に表示される画面の一例を示す図である。この画面には、製品の製造に関係する製造管理データの表す情報の一覧が表示される。なお、表示される製造管理データは図18に例示するものに限られない。表示される製造管理データに他の情報が含まれていてもよい。また、例えば、表示される製造管理データに[製品納期]のフィールドが含まれていなくてもよい。また、表示されるリストは、例えば製品種別や装置IDでソートされて表示されてもよく、他のレイアウトで表示されてもよい。 FIG. 18 is a diagram showing an example of a screen displayed on the display device. This screen displays a list of information represented by manufacturing control data related to the manufacture of the product. The displayed manufacturing control data is not limited to that illustrated in FIG. Other information may be included in the displayed manufacturing control data. Further, for example, the displayed manufacturing control data may not include the [Product delivery date] field. Further, the displayed list may be displayed sorted by product type or device ID, or may be displayed in another layout.

ユーザが表示されたリストからいずれかの製造管理データを選択すると、図17のステップS126において、端末14は選択された製造管理データに含まれる装置IDと時刻情報とを含む画像取得要求を、サーバ装置16に送信する。ステップS127において、サーバ装置16は、端末14から画像取得要求を受信すると、受信した画像取得要求に含まれる装置IDに対応する制御IDと撮影IDとを対応関係テーブルから読み出し、読み出した制御ID、撮影ID、端末14から受信した時刻情報および端末14を示す情報を含む画像取得要求をサーバ装置15に送信する。ステップS128において、サーバ装置15は、サーバ装置16から画像取得要求を受信すると、受信した画像取得要求に含まれる装置IDと時刻情報に対応するキャプチャデータの群を画像データベース153から読み出すとともに、受信した画像取得要求に含まれる撮影IDと時刻情報に対応する撮影データの群を画像データベース153から読み出す。ステップS129において、サーバ装置15は、読み出したキャプチャデータ群と撮影データ群とを端末14に応答として送信する。なお、ステップS129においてサーバ装置15は画像データ群をサーバ装置16に送信し、サーバ装置16が端末14への画像データの送信を中継してもよい。 When the user selects any manufacturing control data from the displayed list, in step S126 of FIG. 17, the terminal 14 sends an image acquisition request including the device ID and time information included in the selected manufacturing control data to the server. It is transmitted to the device 16. In step S127, when the server device 16 receives the image acquisition request from the terminal 14, the control ID and the shooting ID corresponding to the device ID included in the received image acquisition request are read from the correspondence table, and the read control ID, An image acquisition request including a shooting ID, time information received from the terminal 14, and information indicating the terminal 14 is transmitted to the server device 15. In step S128, when the server device 15 receives the image acquisition request from the server device 16, the server device 15 reads and receives the group of captured data corresponding to the device ID and the time information included in the received image acquisition request from the image database 153. A group of shooting data corresponding to the shooting ID and time information included in the image acquisition request is read from the image database 153. In step S129, the server device 15 transmits the read capture data group and the shooting data group to the terminal 14 as a response. In step S129, the server device 15 may transmit the image data group to the server device 16, and the server device 16 may relay the transmission of the image data to the terminal 14.

ステップS130において、端末14はサーバ装置15からキャプチャデータ群と撮影データ群とを受信すると、受信したキャプチャデータ群の表す画像や受信した撮影データ群の表す画像を、製造管理データの表す内容とともに表示装置に順次表示させる。これにより、ユーザに選択された製造管理データに対応する撮影データやキャプチャデータの表す画像が表示装置に時系列に順番に表示される。これにより、撮影された製造装置11による加工状況の変化や製造に係る各種計測値の変化を管理者が時系列に確認することができる。 In step S130, when the terminal 14 receives the capture data group and the shooting data group from the server device 15, the image represented by the received capture data group and the image represented by the received shooting data group are displayed together with the contents represented by the manufacturing management data. Display on the device in sequence. As a result, the images represented by the shooting data and the captured data corresponding to the manufacturing control data selected by the user are displayed on the display device in chronological order. As a result, the administrator can confirm the change in the processing status by the photographed manufacturing apparatus 11 and the change in various measured values related to manufacturing in chronological order.

図19は表示装置に表示される画面の一例を示す図である。この画面は、リスト表示エリアA31と、撮影画像表示エリアA32と、キャプチャ画像表示エリアA33とを含む。端末14は図18のリストをリスト表示エリアA31に表示するとともに、サーバ装置15から取得された撮影データ群の表す画像を撮影画像表示エリアA32に表示する。また、端末14は、サーバ装置15から取得されたキャプチャデータ群の表す画像をキャプチャ画像表示エリアA33に表示する。このとき、端末14は、キャプチャデータの表す画像と撮影データの表す画像とを時間的に同期させて表示再生する。 FIG. 19 is a diagram showing an example of a screen displayed on the display device. This screen includes a list display area A31, a captured image display area A32, and a captured image display area A33. The terminal 14 displays the list of FIG. 18 in the list display area A31, and displays the image represented by the shooting data group acquired from the server device 15 in the shooting image display area A32. Further, the terminal 14 displays the image represented by the captured data group acquired from the server device 15 in the captured image display area A33. At this time, the terminal 14 displays and reproduces the image represented by the captured data and the image represented by the captured data in time synchronization.

この実施形態では、端末14は、受信した画像データ(撮影データやキャプチャデータ)の表す画像を、タッチディスプレイ405等の操作子から出力される情報に応じた切替速度で、画像データに付与された時刻情報に従って時系列に表示する。より具体的には、例えば、端末14は、複数の静止画像を、例えば0.5秒毎に切り替えて表示してもよい。また、図19に例示する画面において、ユーザは、タッチディスプレイ405を用いて静止画像の切替速度を変更することができる。具体的には、例えば、端末14が、図19に示すようなタブA34,A35を表示し、ユーザがタッチディスプレイ405を用いてタブA34,A35の位置を移動させることによって切替速度を変更してもよい。ユーザによって操作が行われると、タッチディスプレイ405は操作された内容に応じた情報を出力し、端末14は、タッチディスプレイ405から出力される情報に応じて、表示する画像の切替速度を変更する。このとき、端末14は、一方の画像データ(撮影データまたはキャプチャデータ)の切替速度がユーザにより変更された場合に、他方の画像データの切替速度もあわせて変更してもよい。 In this embodiment, the terminal 14 adds the image represented by the received image data (shooting data or captured data) to the image data at a switching speed according to the information output from the operator such as the touch display 405. Display in chronological order according to time information. More specifically, for example, the terminal 14 may switch and display a plurality of still images every 0.5 seconds, for example. Further, in the screen illustrated in FIG. 19, the user can change the switching speed of the still image by using the touch display 405. Specifically, for example, the terminal 14 displays the tabs A34 and A35 as shown in FIG. 19, and the user changes the switching speed by moving the positions of the tabs A34 and A35 using the touch display 405. May be good. When the operation is performed by the user, the touch display 405 outputs information according to the operated content, and the terminal 14 changes the switching speed of the displayed image according to the information output from the touch display 405. At this time, when the switching speed of one image data (captured data or captured data) is changed by the user, the terminal 14 may also change the switching speed of the other image data.

管理者は、端末14の表示装置に表示される画面により、製造装置11による加工状況の変化とそれに伴う測定結果の変化をひとつの画面で確認することができる。 From the screen displayed on the display device of the terminal 14, the administrator can confirm the change in the processing state by the manufacturing device 11 and the change in the measurement result accompanying the change on one screen.

ところで、製品の製造等に関する情報を記録する方法としては、人が監視して記録する方法や、センサなどによる計測値が記録される方法がある。しかし、記録された数値の羅列をみてもユーザが当時の状況を判断することは難しい場合がある。また、計測値の保存形式はセンサの種類などによって異なり、データの再現をまとめて行うことが困難な場合がある。 By the way, as a method of recording information related to the manufacture of a product or the like, there are a method of monitoring and recording by a person and a method of recording a measured value by a sensor or the like. However, it may be difficult for the user to judge the situation at that time even by looking at the list of recorded numerical values. In addition, the storage format of the measured values differs depending on the type of sensor and the like, and it may be difficult to reproduce the data collectively.

装置のセンサやコントロールデータは多種多様であり、それぞれのセンサやデータが種々のメーカーによって作られ様々な種類のデータとして記録されている。センサのメーカーなどによってデータのフォーマットはそれぞれ異なるため、それぞれのデータを記録しようとすれば、それぞれに対応するインタフェースを準備する必要があり、その作業は煩雑である。更に、複数の種類の計測結果データをまとめて表示しようとすると、データのフォーマットを統一させたりするなどの煩雑な作業が必要になってしまう。そのため、記録された各種データを統括的に確認するには多大な時間と費用、手間が必要である。 There are a wide variety of sensor and control data for devices, and each sensor and data is created by various manufacturers and recorded as various types of data. Since the data format differs depending on the sensor manufacturer and the like, if it is intended to record each data, it is necessary to prepare an interface corresponding to each, and the work is complicated. Further, when trying to display a plurality of types of measurement result data at once, complicated work such as unifying the data format becomes necessary. Therefore, it takes a lot of time, money, and labor to comprehensively check the various recorded data.

それに対しこの実施形態では、製品の製造過程において制御コンピュータ13により表示される制御画面をキャプチャして画像として逐次記録し、製造に関係する製造管理データに紐付けて管理する。画面をキャプチャするため、製造に係る各種のデータのそれぞれのデータ形式に依存することなく、全てを統括して単一のデータ形式にまとめることができる。そのため、データの記録に係る手間や費用を抑えることができ、また、ユーザは製造に係る各種データを統括的に確認し易い。特に、この実施形態では制御画面を画像として汎用性の高いデータ形式で保存するため、過去の製造状況を確認するために、専用の装置だけでなく種々のコンピュータが利用され得る。このように、この実施形態では、複数の異なるデータフォーマットの計測結果データがまとめて表示された画面をキャプチャすることにより、それらの計測結果データのデータフォーマットの違いがある場合であっても、それらの計測結果をまとめて記録することができる。また、記録システム1は、製造ラインに含まれる複数の製造装置11について撮影画像やキャプチャ画像を蓄積することにより、一連の製造工程を経て生産される製品の製造ラインで適用可能である。 On the other hand, in this embodiment, the control screen displayed by the control computer 13 in the manufacturing process of the product is captured and sequentially recorded as an image, and managed in association with the manufacturing management data related to manufacturing. Since the screen is captured, all of the various data related to manufacturing can be integrated into a single data format without depending on the respective data formats. Therefore, it is possible to reduce the labor and cost involved in recording the data, and it is easy for the user to comprehensively check various data related to manufacturing. In particular, in this embodiment, since the control screen is saved as an image in a highly versatile data format, not only a dedicated device but also various computers can be used to confirm the past manufacturing status. As described above, in this embodiment, by capturing the screen in which the measurement result data of a plurality of different data formats are displayed together, even if there is a difference in the data formats of the measurement result data, they are used. It is possible to record all the measurement results of. Further, the recording system 1 can be applied to a production line of a product produced through a series of production steps by accumulating captured images and captured images of a plurality of production devices 11 included in the production line.

また、この実施形態に係る記録システム1は、撮影装置12を現場に設置するとともに、画面をキャプチャするプログラムを制御コンピュータ13にインストールすることで導入されるため、特殊なデータインタフェースを準備する必要がなく、既存の製造ラインなどに容易に導入可能である。 Further, since the recording system 1 according to this embodiment is introduced by installing the photographing device 12 at the site and installing a program for capturing the screen on the control computer 13, it is necessary to prepare a special data interface. It can be easily introduced into existing production lines.

また、この実施形態では、撮影装置12により製造装置11の動作状態や管理者による操作が撮影され、画像として記録される。この撮影画像がキャプチャ画像と時間的に同期再生されるため、ユーザは当時の状況を把握し易い。また、例えばエラーが発生した場合にはその旨やエラーの内容が表示された画面のキャプチャ画像が記録されるため、その画像が表示再生されることで、ユーザは当時の状況を視覚的に把握し易い。 Further, in this embodiment, the operating state of the manufacturing apparatus 11 and the operation by the administrator are photographed by the photographing device 12 and recorded as an image. Since this captured image is reproduced in synchronization with the captured image in time, the user can easily grasp the situation at that time. In addition, for example, when an error occurs, a captured image of the screen displaying the error and the content of the error is recorded, so that the image is displayed and played back so that the user can visually grasp the situation at that time. Easy to do.

また、この実施形態によれば、例えば、センサが異なる種類のものに交換された場合であっても、新たに設置されたセンサに対応するインタフェースを準備する必要がなく、記録システム1に変更を加えることなく、キャプチャ画像や撮影画像をそれまでと同様に記録することができる。 Further, according to this embodiment, for example, even when the sensor is replaced with a different type, it is not necessary to prepare an interface corresponding to the newly installed sensor, and the recording system 1 is changed. Captured images and captured images can be recorded as before without adding.

[変形例]
上述した実施形態は一具体例であって、本発明の技術的思想の範囲内で様々に変形可能である。以下にそれらの変形の例を示す。なお、上述した実施形態と以下に例示する変形例はそれらの2以上が組み合わされてもよい。
[Modification example]
The above-described embodiment is a specific example, and can be variously modified within the scope of the technical idea of the present invention. Examples of these modifications are shown below. In addition, two or more of the above-described embodiment and the modified examples illustrated below may be combined.

(1)記録システム1において、オペレータOPを撮影し、撮影データをサーバ装置15にアップロードする撮影装置が設けられてもよい。 (1) The recording system 1 may be provided with a photographing device that photographs the operator OP and uploads the captured data to the server device 15.

図20は変形例にかかる記録システム1Bの全体構成を示した図である。記録システム1Bの構成が上述した実施形態に係る記録システム1の構成と異なる点は、オペレータOPを撮影する撮影装置17が設けられている点である。撮影装置17は、オペレータOPが撮影される位置に設けられており、予め定められたタイミングで撮影を行い、撮影データを出力する。撮影装置17が撮影データを出力するタイミングは、撮影装置12が撮影データを出力するタイミングおよび/または制御コンピュータがキャプチャデータを出力するタイミングと同期されたタイミングであってもよい。 FIG. 20 is a diagram showing the overall configuration of the recording system 1B according to the modified example. The configuration of the recording system 1B differs from the configuration of the recording system 1 according to the above-described embodiment in that a photographing device 17 for photographing the operator OP is provided. The photographing device 17 is provided at a position where the operator OP is photographed, performs photographing at a predetermined timing, and outputs the photographing data. The timing at which the photographing device 17 outputs the photographing data may be the timing at which the photographing device 12 outputs the photographing data and / or the timing synchronized with the timing at which the control computer outputs the captured data.

撮影データはサーバ装置15にアップロードされ、画像データベース153に蓄積される。この変形例においては、管理者が端末14を用いて製造管理データを閲覧する際に、製造管理データや撮影データ、キャプチャ画像とあわせて、撮影装置17によって撮影された撮影データの表す画像が表示装置に表示される。管理者は、表示装置に表示された画面により、製造装置11による製造状況の変化とそれに伴う測定結果の変化とともに、オペレータOPによる作業状況の変化をあわせて確認することができる。 The shooting data is uploaded to the server device 15 and stored in the image database 153. In this modification, when the administrator browses the manufacturing control data using the terminal 14, the image represented by the shooting data taken by the shooting device 17 is displayed together with the manufacturing management data, the shooting data, and the captured image. Displayed on the device. On the screen displayed on the display device, the administrator can confirm the change in the manufacturing status by the manufacturing apparatus 11 and the change in the measurement result accompanying the change, as well as the change in the work status by the operator OP.

(2)上述の記録システム1において、管理者が端末14を用いて製造管理データを閲覧する際に、閲覧したい画像データを検索するための機能が設けられてもよい。例えば、端末14が上述の図17のステップS122において、センサSの計測値の範囲(例えば温度の範囲、湿度の範囲)を指定するための画面を表示してもよい。この場合、管理者は、表示された画面を用いてセンサSの計測値の範囲を指定する。端末14は、管理者により指定された範囲を示すデータを検索条件として含む画像取得要求を、サーバ装置16に送信する。サーバ装置16は、端末14から受信された画像取得要求に対応する画像取得要求をサーバ装置15へ送信する。サーバ装置15は画像取得要求を受信すると、受信された画像取得要求に含まれる検索条件に従って画像データの検索を行う。 (2) In the above-mentioned recording system 1, when the administrator browses the manufacturing control data using the terminal 14, a function for searching the image data to be browsed may be provided. For example, the terminal 14 may display a screen for designating a range of measured values of the sensor S (for example, a temperature range and a humidity range) in step S122 of FIG. 17 described above. In this case, the administrator specifies the range of the measured values of the sensor S using the displayed screen. The terminal 14 transmits an image acquisition request including data indicating a range specified by the administrator as a search condition to the server device 16. The server device 16 transmits an image acquisition request corresponding to the image acquisition request received from the terminal 14 to the server device 15. When the server device 15 receives the image acquisition request, the server device 15 searches the image data according to the search conditions included in the received image acquisition request.

サーバ装置15が行う検索処理においては、画像認識が用いられてもよい。具体的には、例えば、キャプチャ画像としてセンサSの計測結果を表すメーター画像がキャプチャされたデータが用いられる場合、センサSの計測値の範囲に対応するメーター画像(またはメータ画像の特徴)を表す照合用データを予め所定の記憶領域に記憶させておき、サーバ装置15が、照合用データを用いて画像データのパターンマッチング処理を行うことにより、画像データベース153に蓄積された画像データの中から、照合された画像データを読み出して端末14に送信してもよい。この態様によれば、管理者が閲覧したい条件に対応する画像データが検索されて端末14の表示装置に表示される。この態様においても、上述の実施形態と同様に、各種センサからの出力データに対応するインタフェースのつくりこみは不要である。 Image recognition may be used in the search process performed by the server device 15. Specifically, for example, when the captured data of the meter image representing the measurement result of the sensor S is used as the captured image, the meter image (or the feature of the meter image) corresponding to the range of the measured value of the sensor S is represented. The collation data is stored in a predetermined storage area in advance, and the server device 15 performs pattern matching processing of the image data using the collation data, so that the image data stored in the image database 153 can be selected from the image data. The collated image data may be read out and transmitted to the terminal 14. According to this aspect, the image data corresponding to the condition that the administrator wants to view is searched and displayed on the display device of the terminal 14. Also in this embodiment, as in the above-described embodiment, it is not necessary to create an interface corresponding to the output data from various sensors.

(3)上述の実施形態では、撮影装置12と制御コンピュータ13とは別体の装置であったが、撮影装置12の機能と制御コンピュータ13の機能とを備える装置が用いられてもよい。また、上述の実施形態では、サーバ装置15とサーバ装置16の2つのサーバ装置が用いられたが、サーバ装置の台数は2に限られない。例えば、サーバ装置15の機能とサーバ装置16の機能を有する単体のサーバ装置が用いられてもよい。また、サーバ装置15の機能とサーバ装置16の機能とが3以上のサーバ装置により分担されて提供されてもよい。 (3) In the above-described embodiment, the photographing device 12 and the control computer 13 are separate devices, but a device having the functions of the photographing device 12 and the functions of the control computer 13 may be used. Further, in the above-described embodiment, two server devices, a server device 15 and a server device 16, are used, but the number of server devices is not limited to two. For example, a single server device having the functions of the server device 15 and the functions of the server device 16 may be used. Further, the function of the server device 15 and the function of the server device 16 may be shared and provided by three or more server devices.

(4)本発明に係る記録システムは、種々の形態で利用可能である。例えば、本発明に係るシステムは、板金加工を行う工場において板金加工を行う装置の動作に関する情報を記録するシステムや、食品の梱包を行う工場において各種情報を記録するシステムとして用いられてもよい。また、例えば、集積回路等の各種の製品についての製造ラインに関する情報を記録するために用いられてもよい。また、建造物の建設装置の建設工程に関する情報を記録するために用いられてもよい。また、本発明に係る製品は、製造業に係る製品に限定されるものではなく、サービス業に係る商品や、部品等の中間製品も含む。 (4) The recording system according to the present invention can be used in various forms. For example, the system according to the present invention may be used as a system for recording information regarding the operation of an apparatus for sheet metal processing in a factory for sheet metal processing, or as a system for recording various information in a factory for packing food. It may also be used, for example, to record information about production lines for various products such as integrated circuits. It may also be used to record information about the construction process of the building's construction equipment. Further, the product according to the present invention is not limited to the product related to the manufacturing industry, but also includes the product related to the service industry and the intermediate product such as parts.

(5)上述の実施形態では、画像データ取得手段133は、表示装置130に表示された画面がキャプチャされた画像データを取得したが、画像データはキャプチャされたデータに限られない。画像データ取得手段133によって取得される画像データは、例えば、表示装置130に表示された画面を撮影した撮影装置により生成された画像データであってもよい。 (5) In the above-described embodiment, the image data acquisition means 133 acquires the image data in which the screen displayed on the display device 130 is captured, but the image data is not limited to the captured data. The image data acquired by the image data acquisition means 133 may be, for example, image data generated by an imaging device that captures a screen displayed on the display device 130.

また、画像データ取得手段133が取得する画像データは、表示された画面を表す画像データに限られない。例えば、製造装置11の製造に関する物理量の計測結果を示すメーターが製造装置11に設けられている場合に、そのメーターを撮影する撮影装置を設け、撮影した画像を表す画像データがサーバ装置15にアップロードされてもよい。 Further, the image data acquired by the image data acquisition means 133 is not limited to the image data representing the displayed screen. For example, when the manufacturing device 11 is provided with a meter showing the measurement result of the physical quantity related to the manufacturing of the manufacturing device 11, a photographing device for photographing the meter is provided, and image data representing the photographed image is uploaded to the server device 15. May be done.

図21はこの変形例に係る撮影装置18の概略を示す図である。図において、メーター19は、製造装置11に設けられ、製造装置11の製造に関する物理量(温度、湿度など)の計測結果を示すメーターである。撮影装置18は、メーター19を撮影し、撮影結果を示す画像データを、サーバ装置15にアップロードする。この場合、管理者が端末14を用いて製造管理データを閲覧する際、製造管理データとあわせて、撮影装置18によって生成された画像データの表す画像が表示装置に表示される。管理者は、表示装置に表示された画面により、製造装置11による製造状況の変化とそれに伴う測定結果の変化をひとつの画面上で容易に確認することができる。 FIG. 21 is a diagram showing an outline of the photographing apparatus 18 according to this modified example. In the figure, the meter 19 is provided in the manufacturing apparatus 11 and is a meter showing the measurement result of physical quantities (temperature, humidity, etc.) related to the manufacturing of the manufacturing apparatus 11. The photographing device 18 photographs the meter 19, and uploads image data indicating the photographing result to the server device 15. In this case, when the manager browses the manufacturing control data using the terminal 14, the image represented by the image data generated by the photographing device 18 is displayed on the display device together with the manufacturing control data. On the screen displayed on the display device, the administrator can easily confirm the change in the manufacturing status by the manufacturing device 11 and the change in the measurement result accompanying the change on one screen.

(6)上述の実施形態では、サーバ装置15にアップロードされる画像データと、サーバ装置16にアップロードされる製造管理データとは、装置ID、撮影ID、制御IDおよび対応関係テーブルにより対応付けられていた。画像データと製造管理データとを対応付ける方法は上述したものに限られない。画像データと製造管理データとは他の種類の情報により紐付けられてもよい。また、画像データと製造管理データとを直接対応付けるデータベースが用いられてもよい。 (6) In the above-described embodiment, the image data uploaded to the server device 15 and the manufacturing management data uploaded to the server device 16 are associated with each other by the device ID, the photographing ID, the control ID, and the correspondence table. It was. The method of associating the image data with the manufacturing control data is not limited to the above. The image data and the manufacturing control data may be linked by other types of information. Further, a database that directly associates image data with manufacturing control data may be used.

(7)上述の実施形態では、画像データベース153には、撮影装置12によって撮影された撮影データと、制御コンピュータ13によりキャプチャされたキャプチャデータとが記憶された。画像データベース153に撮影データが記憶されなくてもよい。この場合、制御コンピュータ13から送信されてくるキャプチャデータが画像データベース153に蓄積される。 (7) In the above-described embodiment, the image database 153 stores the captured data captured by the photographing device 12 and the captured data captured by the control computer 13. The shooting data does not have to be stored in the image database 153. In this case, the captured data transmitted from the control computer 13 is stored in the image database 153.

(8)上述の実施形態では、撮影装置12、制御コンピュータ13、端末14、サーバ装置15、サーバ装置16が通信網200に接続されていたが、記録システム1の構成はこれに限られない。例えば、記録システム1に係る装置の一部または全部が一体となって構成され、スタンドアロンで動作する装置が用いられてもよい。 (8) In the above-described embodiment, the photographing device 12, the control computer 13, the terminal 14, the server device 15, and the server device 16 are connected to the communication network 200, but the configuration of the recording system 1 is not limited to this. For example, a device in which a part or all of the devices related to the recording system 1 are integrally configured and operates standalone may be used.

(9)上述の実施形態では、キャプチャデータは制御IDと時刻情報とが付与されて画像データベース153に記憶されたが、他のデータが付与されてもよい。また、撮影データは撮影IDと時刻情報とが付与されて画像データベース153に記憶されたが、他のデータが付与されてもよい。また、製造管理データに含まれるデータは上述した実施形態で示したものに限られない。他のデータが製造管理データに含まれてもよい。 (9) In the above-described embodiment, the capture data is assigned the control ID and the time information and stored in the image database 153, but other data may be added. Further, although the shooting data is added with the shooting ID and the time information and stored in the image database 153, other data may be added. Further, the data included in the manufacturing control data is not limited to that shown in the above-described embodiment. Other data may be included in the manufacturing control data.

(10)上述の実施形態において、記録の開始および終了は制御コンピュータ13を操作するオペレータOPによって指示されてもよい。この場合、制御コンピュータ13の指示取得手段135は、オペレータOPの操作に応じた開始指示データおよび終了指示データを取得することになる。また、他の例として、予め定められたイベントの発生等をトリガに、ユーザの操作を要することなく制御コンピュータ13に対する記録の開始および終了の少なくとも一方が指示されてもよい。例えば、製造管理テーブルに、製造内容の各々に応じた開始タイミングおよび終了タイミングを示すデータを記憶する[予定動作時間]のフィールドを設けておき、制御コンピュータ13がサーバ装置16から当該データを受信し、当該データが示す開始タイミングにキャプチャ画像の記録を開始し、当該データが示す終了タイミングにキャプチャを終了する構成が採用されてもよい。この場合、制御コンピュータ13の指示取得手段135は、サーバ装置16から受信したデータが示すタイミングの到来時に開始指示データおよび終了指示データを取得することになる。また、記録の開始タイミングおよび終了タイミングはオペレータOPやサーバ装置16から直接指定される必要はない。例えば、オペレータOPが制御コンピュータ13に対し記録の開始操作を行ったタイミングから所定時間の経過後に自動的に記録の終了が行われる構成が採用されてもよい。 (10) In the above-described embodiment, the start and end of recording may be instructed by the operator OP who operates the control computer 13. In this case, the instruction acquisition means 135 of the control computer 13 acquires the start instruction data and the end instruction data according to the operation of the operator OP. Further, as another example, at least one of the start and end of recording to the control computer 13 may be instructed without requiring a user operation, triggered by the occurrence of a predetermined event or the like. For example, the manufacturing control table is provided with a [scheduled operation time] field for storing data indicating start timing and end timing according to each of the manufacturing contents, and the control computer 13 receives the data from the server device 16. , A configuration may be adopted in which the recording of the captured image is started at the start timing indicated by the data and the capture is terminated at the end timing indicated by the data. In this case, the instruction acquisition means 135 of the control computer 13 acquires the start instruction data and the end instruction data when the timing indicated by the data received from the server device 16 arrives. Further, the start timing and end timing of recording do not need to be directly specified by the operator OP or the server device 16. For example, a configuration may be adopted in which the recording is automatically ended after a predetermined time has elapsed from the timing when the operator OP performs the recording start operation on the control computer 13.

(11)上述した実施形態においては、撮影装置12および制御コンピュータ13は画像データを生成後速やかにサーバ装置15に送信する。これに代えて、撮影装置12および/または制御コンピュータ13が生成した画像データを記憶しておき、例えば所定時間の経過毎、作業の終了時、撮影装置12および/または制御コンピュータ13が通信速度の速いネットワークに接続したとき、等に記憶しておいた画像データをサーバ装置15に送信してもよい。 (11) In the above-described embodiment, the photographing device 12 and the control computer 13 immediately transmit the image data to the server device 15 after generating the image data. Instead of this, the image data generated by the photographing device 12 and / or the control computer 13 is stored, and for example, every predetermined time elapses, at the end of work, the photographing device 12 and / or the control computer 13 determines the communication speed. When connected to a fast network, the image data stored in the server device 15 may be transmitted.

(12)上述した実施形態において、制御コンピュータ13、端末14、サーバ装置15およびサーバ装置16はコンピュータがプログラムに従った処理を実行することにより実現されるものとした。これに代えて、制御コンピュータ13、端末14、サーバ装置15およびサーバ装置16の少なくともいずれかひとつが、例えばASIC(Application Specific Integrated Circuit)等を備える専用装置として構成されてもよい。 (12) In the above-described embodiment, the control computer 13, the terminal 14, the server device 15, and the server device 16 are realized by the computer executing the processing according to the program. Instead, at least one of the control computer 13, the terminal 14, the server device 15, and the server device 16 may be configured as a dedicated device including, for example, an ASIC (Application Specific Integrated Circuit).

(13)上述した実施形態において、PC10に例示されるコンピュータに制御コンピュータ13の処理を実行させるためのプログラム、コンピュータ20に例示されるコンピュータにサーバ装置15の処理を実行させるためのプログラム、コンピュータ30に例示されるコンピュータにサーバ装置16の処理を実行させるためのプログラム、およびコンピュータ40に例示されるコンピュータに端末14の処理を実行させるためのプログラムは、持続的にデータを記録する記録媒体に記録されて配布されてもよいし、インターネット等のデータ通信ネットワークを介してコンピュータへダウンロードされる形態で配布されてもよい。 (13) In the above-described embodiment, a program for causing the computer exemplified by the PC 10 to execute the processing of the control computer 13, a program for causing the computer exemplified by the computer 20 to execute the processing of the server device 15, and the computer 30. The program for causing the computer exemplified in the above example to execute the processing of the server device 16 and the program for causing the computer exemplified in the computer 40 to execute the processing of the terminal 14 are recorded on a recording medium for continuously recording data. It may be distributed by being downloaded to a computer via a data communication network such as the Internet.

(14)上述した実施形態において例示した各種データの構成は様々に変更されてよい。例えば、サーバ装置16に記憶されている製造管理テーブルがオペレータのフィールドを備える構成であってもよい。また、例えば、製造管理テーブルが工程種別のフィールドを備えない構成であってもよい。 (14) The structure of the various data illustrated in the above-described embodiment may be changed in various ways. For example, the manufacturing control table stored in the server device 16 may be configured to include an operator field. Further, for example, the manufacturing control table may be configured not to have a process type field.

1…記録システム、10,20…コンピュータ、11…製造装置、12…撮影装置、13…制御コンピュータ、14…端末,16…サーバ装置、101,201…メモリ、102,202…プロセッサ、103…クロック、104,203…通信IF、105…操作装置、131…計測結果取得手段、132…計測結果表示指示手段、133…画像データ取得手段、134…送信手段、135…指示取得手段、136…条件データ取得手段、141…表示指示手段、151…画像データ取得手段、152…記憶制御手段、153…画像データベース、154…送信手段、162…製造管理データ取得手段、163…記憶制御手段、164…表示指示手段、165…撮影データ取得手段、166…条件データ送信手段、200…通信網。 1 ... Recording system, 10, 20 ... Computer, 11 ... Manufacturing equipment, 12 ... Imaging equipment, 13 ... Control computer, 14 ... Terminal, 16 ... Server equipment, 101, 201 ... Memory, 102, 202 ... Processor, 103 ... Clock , 104, 203 ... Communication IF, 105 ... Operating device, 131 ... Measurement result acquisition means, 132 ... Measurement result display instruction means, 133 ... Image data acquisition means, 134 ... Transmission means, 135 ... Instruction acquisition means, 136 ... Condition data Acquisition means, 141 ... Display instruction means, 151 ... Image data acquisition means, 152 ... Memory control means, 153 ... Image database, 154 ... Transmission means, 162 ... Manufacturing management data acquisition means, 163 ... Memory control means, 164 ... Display instruction Means, 165 ... Shooting data acquisition means, 166 ... Conditional data transmission means, 200 ... Communication network.

Claims (8)

製品の製造を行う製造装置を撮影装置により撮影した画像を表す第1の画像データと、
前記製造に関係する物理量を計測装置により計測した結果を第1の表示装置が表示した画像を表す第2の画像データを取得するデータ取得手段と、
前記データ取得手段が取得した同時期に生成された前記第1の画像データと前記第2の画像データを対応付けて記憶装置に記憶させる記憶制御手段と、
前記記憶装置に対応付けて記憶されている前記第1の画像データと前記第2の画像データの各々が表す画像を第2の表示装置に同時に表示させる表示指示手段と
を備えるシステム。
The first image data representing an image taken by the photographing apparatus of the manufacturing apparatus for manufacturing the product, and
A data acquisition means for acquiring a second image data representing an image displayed by the first display device as a result of measuring the physical quantity related to the manufacturing by the measuring device, and a data acquisition means.
A storage control means for associating the first image data and the second image data generated at the same time acquired by the data acquisition means and storing them in a storage device.
A system including a display instruction means for simultaneously displaying an image represented by each of the first image data and the second image data stored in association with the storage device on the second display device.
前記データ取得手段は、前記製造の管理情報を示す製造管理データを取得し、
前記記憶制御手段は、前記データ取得手段が取得した前記製造管理データに対応付けて、前記データ取得手段が取得した前記第1の画像データと前記第2の画像データを前記記憶装置に記憶させ、
前記表示指示手段は、前記記憶装置に対応付けて記憶されている前記第1の画像データと前記第2の画像データの各々が表す画像と共に、前記第1の画像データと前記第2の画像データに対応付けて前記記憶装置に記憶されている前記製造管理データが示す管理情報を前記第2の表示装置に表示させる
請求項1に記載のシステム。
The data acquisition means acquires manufacturing control data indicating the manufacturing control information, and obtains manufacturing control data.
The storage control means stores the first image data and the second image data acquired by the data acquisition means in the storage device in association with the manufacturing control data acquired by the data acquisition means.
The display instruction means includes the first image data and the second image data together with an image represented by each of the first image data and the second image data stored in association with the storage device. The system according to claim 1, wherein the management information indicated by the manufacturing control data stored in the storage device is displayed on the second display device in association with the above.
前記データ取得手段は、前記製造装置を操作するオペレータを撮影装置により撮影した画像を表す第3の画像データを取得し、
前記記憶制御手段は、前記データ取得手段が取得した同時期に生成された前記第1の画像データと前記第2の画像データと前記第3の画像データを対応付けて前記記憶装置に記憶させ、
前記表示指示手段は、前記記憶装置に対応付けて記憶されている前記第1の画像データと前記第2の画像データと前記第3の画像データの各々が表す画像を前記第2の表示装置に同時に表示させる
請求項1又は2に記載のシステム。
The data acquisition means acquires a third image data representing an image taken by the photographing device of an operator who operates the manufacturing apparatus, and obtains a third image data.
The storage control means stores the first image data, the second image data, and the third image data generated at the same time acquired by the data acquisition means in the storage device in association with each other.
The display instruction means transmits an image represented by each of the first image data, the second image data, and the third image data stored in association with the storage device to the second display device. The system according to claim 1 or 2, which is displayed at the same time.
第1の端末装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第1の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第2の画像データを受信する受信手段と、
前記受信手段が受信した同時期に生成された前記第1の画像データと前記第2の画像データを対応付けて記憶装置に記憶させる記憶制御手段と、
前記記憶装置に対応付けて記憶されている前記第1の画像データと前記第2の画像データを第2の端末装置に送信する送信手段と
を備えるサーバ装置。
An image displayed by the display device as the first image data representing an image taken by the photographing device of the manufacturing device for manufacturing the product from the first terminal device and the result of measuring the physical quantity related to the manufacturing by the measuring device. A receiving means for receiving the second image data representing
A storage control means for storing the first image data and the second image data generated at the same time received by the receiving means in a storage device in association with each other.
A server device including a first image data stored in association with the storage device and a transmission means for transmitting the second image data to a second terminal device.
サーバ装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第1の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第2の画像データを受信する受信手段と、
前記受信手段が受信した前記第1の画像データと前記第2の画像データの各々が表す画像を表示装置に同時に表示させる表示指示手段と
を備える端末装置。
The first image data representing an image taken by the photographing device of the manufacturing device that manufactures the product from the server device, and the image displayed by the display device as the result of measuring the physical quantity related to the manufacturing by the measuring device. A receiving means for receiving the image data of 2 and
A terminal device including a display instruction means for simultaneously displaying an image represented by each of the first image data and the second image data received by the receiving means on a display device.
コンピュータに、
第1の端末装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第1の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第2の画像データを受信する処理と、
受信した同時期に生成された前記第1の画像データと前記第2の画像データを対応付けて記憶装置に記憶させる処理と、
前記記憶装置に対応付けて記憶されている前記第1の画像データと前記第2の画像データを第2の端末装置に送信する処理と
を実行させるためのプログラム。
On the computer
An image displayed by the display device as the first image data representing an image taken by the photographing device of the manufacturing device for manufacturing the product from the first terminal device and the result of measuring the physical quantity related to the manufacturing by the measuring device. The process of receiving the second image data representing
A process of associating the first image data and the second image data generated at the same time as being received and storing them in a storage device.
A program for executing a process of transmitting the first image data and the second image data stored in association with the storage device to a second terminal device.
コンピュータに、
サーバ装置から、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第1の画像データと、前記製造に関係する物理量を計測装置により計測した結果を表示装置が表示した画像を表す第2の画像データを受信する処理と、
受信した前記第1の画像データと前記第2の画像データの各々が表す画像を表示装置に同時に表示させる処理と
を実行させるためのプログラム。
On the computer
The first image data representing an image taken by the photographing device of the manufacturing device that manufactures the product from the server device, and the image displayed by the display device as the result of measuring the physical quantity related to the manufacturing by the measuring device. The process of receiving the image data of 2 and
A program for executing a process of simultaneously displaying an image represented by each of the received first image data and the second image data on a display device.
システムが、製品の製造を行う製造装置を撮影装置により撮影した画像を表す第1の画像データと、前記製造に関係する物理量を計測装置により計測した結果を第1の表示装置が表示した画像を表す第2の画像データを取得するステップと、
前記システムが、取得した同時期に生成された前記第1の画像データと前記第2の画像データを対応付けて記憶装置に記憶させるステップと、
前記システムが、前記記憶装置に対応付けて記憶されている前記第1の画像データと前記第2の画像データの各々が表す画像を第2の表示装置に同時に表示させるステップと
を備える方法。
The system displays the first image data representing an image taken by the photographing device of the manufacturing device that manufactures the product, and the image displayed by the first display device as the result of measuring the physical quantity related to the manufacturing by the measuring device. The step of acquiring the second image data to be represented, and
A step of associating the first image data and the second image data generated at the same time acquired by the system and storing them in a storage device.
A method in which the system includes a step of simultaneously displaying an image represented by each of the first image data and the second image data stored in association with the storage device on a second display device.
JP2016213417A 2016-10-31 2016-10-31 Systems, terminals, server devices, programs and methods Active JP6856236B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2016213417A JP6856236B2 (en) 2016-10-31 2016-10-31 Systems, terminals, server devices, programs and methods

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2016213417A JP6856236B2 (en) 2016-10-31 2016-10-31 Systems, terminals, server devices, programs and methods

Publications (2)

Publication Number Publication Date
JP2018073185A JP2018073185A (en) 2018-05-10
JP6856236B2 true JP6856236B2 (en) 2021-04-07

Family

ID=62114394

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016213417A Active JP6856236B2 (en) 2016-10-31 2016-10-31 Systems, terminals, server devices, programs and methods

Country Status (1)

Country Link
JP (1) JP6856236B2 (en)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6943830B2 (en) 2018-10-19 2021-10-06 ファナック株式会社 Control devices, communication terminals, and control systems
JP7103967B2 (en) 2019-02-06 2022-07-20 ファナック株式会社 Information processing equipment and programs
JP2020190956A (en) * 2019-05-22 2020-11-26 株式会社東芝 Manufacturing condition output device, quality management system and program
JP2021033681A (en) * 2019-08-26 2021-03-01 株式会社イシダ Production system
US20240053737A1 (en) * 2020-12-18 2024-02-15 Fanuc Corporation Central management device, and method for controlling central management device
WO2022259379A1 (en) * 2021-06-08 2022-12-15 三菱電機株式会社 Programmable logic controller, moving image management device, moving image management system, moving image management method, and program
JP7440955B2 (en) * 2021-08-04 2024-02-29 田中電機工業株式会社 Production line management system
WO2023070460A1 (en) * 2021-10-28 2023-05-04 西门子(中国)有限公司 Industrial data obtaining method and apparatus

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001125612A (en) * 1999-10-25 2001-05-11 Omron Corp Facility logging device
JP2002373018A (en) * 2001-06-14 2002-12-26 Ntn Corp Virtual plant system and virtual plant and remote monitering linking system
JP2013161395A (en) * 2012-02-08 2013-08-19 Asahi Glass Co Ltd Data management system, management data extraction method and management data extraction program
JP2015099432A (en) * 2013-11-18 2015-05-28 株式会社東芝 Plant monitoring system and plant monitoring method

Also Published As

Publication number Publication date
JP2018073185A (en) 2018-05-10

Similar Documents

Publication Publication Date Title
JP6856236B2 (en) Systems, terminals, server devices, programs and methods
US11843904B2 (en) Automated combined display of measurement data
US11089458B2 (en) Smart communication device or apparatus for collecting and evaluating information about equipment distributed over a large area, e.g., over a large industrial plant or oil field
CN110837448B (en) Method and computing device for remotely monitoring a test performed in a test device
US10120030B2 (en) Trace data recording system, trace data recording server, trace data recording method, and information storage medium
EP3223216A1 (en) Maintenance information sharing device, maintenance information sharing method, and non-transitory computer readable storage medium
JP6717572B2 (en) Work analysis system and work analysis method
WO2020250498A1 (en) Information processing device, information processing method, information processing program, and recording medium
JP7166846B2 (en) Information management system, information management method, terminal device, server, and information management program
JP2017108248A (en) Cooker related information providing system and cooker related information providing program
JP6468828B2 (en) Equipment management support apparatus and program
JP2005056272A (en) System for grasping working hour and system for creating working instruction
JP7104835B1 (en) Work management system
US9508323B2 (en) Appliance control system and method for controlling an appliance based on processing done by another appliance
JP5984704B2 (en) Tablet monitoring terminal
JP2019215812A (en) Monitoring device and control method for monitoring device
US20140317233A1 (en) Communication method, communication device, appliance control method, and appliance control device
JP2018077783A (en) Traceability system
TWI552096B (en) System for managing a real-time-work-information of a motor fitting
CN115396507B (en) Material processing method and device, electronic equipment and readable storage medium
WO2021054073A1 (en) Maintenance system, server, maintenance method, and program
JP6112145B2 (en) Terminal control apparatus and program
JP5960950B2 (en) Image monitoring apparatus and program
JP2019159788A (en) Portable terminal, program, image forming device, and operation confirmation method
WO2017068779A1 (en) Information registration method, management system, information terminal, and control program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190701

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20200610

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20200623

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20200821

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20201117

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20210107

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20210302

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20210311

R150 Certificate of patent or registration of utility model

Ref document number: 6856236

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150