WO2020174626A1 - 製造管理方法 - Google Patents

製造管理方法 Download PDF

Info

Publication number
WO2020174626A1
WO2020174626A1 PCT/JP2019/007668 JP2019007668W WO2020174626A1 WO 2020174626 A1 WO2020174626 A1 WO 2020174626A1 JP 2019007668 W JP2019007668 W JP 2019007668W WO 2020174626 A1 WO2020174626 A1 WO 2020174626A1
Authority
WO
WIPO (PCT)
Prior art keywords
product
manufacturing
manufacturing process
evaluation
information
Prior art date
Application number
PCT/JP2019/007668
Other languages
English (en)
French (fr)
Inventor
剛志 柴田
高橋　徹
石山　塁
恵子 井上
岩元　浩太
博義 宮野
恵美 北川
吉田　康彦
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to PCT/JP2019/007668 priority Critical patent/WO2020174626A1/ja
Priority to US17/432,976 priority patent/US20220164936A1/en
Priority to JP2021501469A priority patent/JP7218791B2/ja
Publication of WO2020174626A1 publication Critical patent/WO2020174626A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G06T7/001—Industrial image inspection using an image reference approach
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/04—Manufacturing
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05K—PRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
    • H05K13/00—Apparatus or processes specially adapted for manufacturing or adjusting assemblages of electric components
    • H05K13/08—Monitoring manufacture of assemblages
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G06T2207/30148—Semiconductor; IC; Wafer
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02P—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00—Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/30—Computing systems specially adapted for manufacturing

Definitions

  • the present invention relates to a manufacturing control method, a manufacturing control device, and a program.
  • a product serial number, barcode, etc. may be added to the product, or a tag such as RFID (Radio Frequency IDentifier) may be attached.
  • RFID Radio Frequency IDentifier
  • the object fingerprint authentication technology uses a photographing device such as a camera to generate an image of a naturally occurring fine pattern that occurs during the manufacturing process of a product, such as fine unevenness or a pattern on the product surface or a random pattern on the material surface.
  • the product is individually identified by acquiring and recognizing the fine pattern.
  • Patent Document 1 an example of a method for managing the quality of a product using the above-described object fingerprint authentication technology is disclosed in Patent Document 1.
  • a surface of a product is photographed to acquire surface pattern information, and the surface pattern information is used for manufacturing such as manufacturing date and time, manufacturing conditions such as temperature and humidity at the time of manufacturing, and ID of manufacturing factory or manufacturing line.
  • the relevant information is linked and stored in the database.
  • the surface pattern information of the actual product is collated with the surface pattern information stored in the database to identify the related information related to the manufacturing of the product. ing.
  • Patent Document 1 Japanese Patent Application Laid-Open No. 2005-232853
  • Patent Document 1 it is possible to specify only the rough manufacturing information such as the manufacturing date and time, the manufacturing conditions, and the manufacturing location of the product from the surface pattern information of the product. Therefore, when there are a plurality of product manufacturing processes, it is not possible to specify which process is a factor of the product quality. As a result, there arises a problem that the factor of product quality cannot be specified in detail.
  • an object of the present invention is to provide a manufacturing control method capable of solving the above-mentioned problem that a factor of product quality cannot be specified in detail.
  • the manufacturing control method which is an aspect of the present invention, For each manufacturing process included in the manufacturing process of the product, while acquiring the unique information of the product from the captured image of the product, and also acquires the manufacturing status information indicating the manufacturing status in the manufacturing process, The unique information of the product acquired in the same manufacturing process is stored in association with the manufacturing status information, When evaluating a product, the unique information of the product is acquired from a captured image of the product, and the manufacturing status information for each manufacturing process stored in association with the same unique information as the acquired unique information is read. , Based on the read manufacturing status information for each manufacturing process, specify the manufacturing status corresponding to the evaluation of the product, It has the configuration.
  • the manufacturing control method is For each manufacturing process included in the manufacturing process of the product, while acquiring the unique information of the product from the photographed image of the product, acquiring the manufacturing status information indicating the manufacturing status in the manufacturing process, The unique information of the product acquired in the same manufacturing process and the manufacturing status information are stored in association with each other, It has the configuration.
  • the manufacturing control apparatus is For each manufacturing process included in the manufacturing process of the product, an acquisition unit that acquires the unique information of the product from the captured image of the product and acquires the manufacturing status information indicating the manufacturing status in the manufacturing process, An associating unit that associates and stores the unique information of the product acquired in the same manufacturing process and the manufacturing status information, Equipped with.
  • the program which is one mode of the present invention, In the information processing device, For each manufacturing process included in the manufacturing process of the product, an acquisition unit that acquires the unique information of the product from the captured image of the product and acquires the manufacturing status information indicating the manufacturing status in the manufacturing process, An associating unit that associates and stores the unique information of the product acquired in the same manufacturing process and the manufacturing status information, To realize It has the configuration.
  • the present invention is configured as described above, so that the factor of product quality can be specified in detail.
  • FIG. 3 is a diagram showing an example of information stored in a process data storage unit disclosed in FIG. 2.
  • FIG. 3 is a diagram showing an example of information stored in a manufacturing parameter storage unit disclosed in FIG. 2.
  • FIG. shows an example of the information memorize
  • FIG. 3 is a flowchart showing the operation of the management device disclosed in FIG. 1.
  • 3 is a flowchart showing the operation of the management device disclosed in FIG. 1.
  • FIG. 13 is a diagram illustrating an example of information stored in a manufacturing parameter storage unit of the management device disclosed in FIG. 12. It is a figure which shows an example of the process in the management apparatus disclosed by FIG.
  • FIG. 4 It is a figure which shows an example of the process in the management apparatus disclosed by FIG. It is a figure which shows the structure and operation
  • FIGS. 1 to 8 are diagrams for explaining the configuration of the manufacturing system
  • FIGS. 9 to 11 are diagrams for explaining the processing operation of the management apparatus.
  • the manufacturing system according to the present invention is built at a manufacturing site of a manufacturing industry, and manufactures a predetermined product G through a set manufacturing process.
  • the product G manufactured by the manufacturing system in this embodiment is assumed to be a semiconductor substrate as shown in FIG.
  • the product G manufactured by the manufacturing system of the present invention is not limited to the semiconductor substrate, and may be any product.
  • Examples of the product G include electronic devices such as laptop computers and smartphones, home appliances such as refrigerators and vacuum cleaners, automobiles, batteries, tablets and packaged drugs, steel materials, and plastic materials.
  • the manufacturing process for manufacturing the product G in the manufacturing system includes a plurality of manufacturing processes.
  • the manufacturing line L set in the manufacturing system includes a plurality of manufacturing processes A, B, and C, and further includes an evaluation process for evaluating the quality of the finished product G. ..
  • manufacturing work for manufacturing the product G is performed.
  • the manufacturing process A the preparatory work for the product G by the worker Pa
  • the manufacturing process B the heat treatment work for the product G by the heat treatment apparatus Db
  • the manufacturing process C the worker Pc joins the parts to the product G, respectively.
  • the evaluation step quality evaluation is performed by image processing of photographing the product G.
  • the manufacturing line L is not limited to the above-described number of manufacturing steps, and may be one step, or more manufacturing steps may be performed.
  • the manufacturing system stores the manufacturing status of each product G in each manufacturing process by identifying each product G conveyed on the manufacturing line L, particularly for quality control of the product G. It has a function to keep. Therefore, it is indispensable to use the technology for identifying each product G, and in the present embodiment, the object fingerprint authentication technology for individually identifying the fine pattern (object fingerprint) on the surface of the product G is used. And
  • the surface of the product is photographed under a specific lighting condition, and the location where the position is stably determined from the photographed image where the change in brightness is steep. Determined as a feature point. Then, the local luminance pattern around the feature point is converted into data as a feature amount, and is extracted as an object fingerprint of the product. Then, when the object fingerprints are compared with each other in order to check whether they are the same product, the consistency of the geometrical arrangement of the feature points is verified. For example, from the fingerprints of the objects to be collated, the feature points with the smallest feature amount difference are obtained as a pair, and only the pair group having a relative positional relationship with other feature points is extracted from the obtained pair group.
  • the manufacturing system includes cameras Cta, Ctb, Ctc, and Ctz that are image capturing devices for acquiring the object fingerprint that is the unique information of the product G in each of the manufacturing processes A, B, and C and the evaluation process.
  • Each of the cameras Cta, Ctb, Ctc, and Ctz is installed so as to capture a part of the surface of the product G from which the object fingerprint is extracted under specific lighting conditions, and sends the captured tracking image to the management device 10. To do.
  • each of the cameras Cta, Ctb, Ctc, and Ctz captures at least an image near the corner of the position where the specific mark M is located among the four corners of the semiconductor substrate that is the product G shown in FIG. 7. is set up.
  • the manufacturing system also includes a manufacturing status acquisition device for each of the manufacturing steps A, B, and C that acquires information that is the basis for acquiring the parameters that represent the manufacturing status in each manufacturing step. Then, when each manufacturing status acquisition device acquires information that is the basis of the parameter indicating the manufacturing status in each manufacturing process, the manufacturing status acquisition device transmits the information to the management device 10. For example, in the manufacturing process A, a camera Cpa that photographs the worker Pa itself is provided as a manufacturing status meter acquisition unit in order to acquire the “worker name” that is a parameter indicating the manufacturing status.
  • a temperature sensor Sb that measures the temperature in the heat treatment apparatus Db is provided as a manufacturing status acquisition apparatus in order to acquire the “temperature” during the heat treatment in the heat treatment apparatus Db as a parameter indicating the manufacturing status.
  • a camera Cpc for photographing the work of the worker Pc is provided as a manufacturing status acquisition device in order to acquire the “working time” by the worker Pc as a parameter indicating the manufacturing status.
  • the manufacturing system is equipped with a camera Csz for photographing the entire product G in order to evaluate the quality of the manufactured product G in the evaluation process.
  • the camera Csz is installed so as to photograph the entire product G so that information for evaluating quality such as whether the product G is cracked can be detected, and the photographed evaluation image is used by the management device 10. Send to.
  • the parameters representing the manufacturing status acquired in each manufacturing process A, B, C are not limited to those described above, and may be parameters representing any manufacturing status.
  • the parameter indicating the manufacturing status may be a manufacturing process name, humidity at the time of manufacturing, a state of a tool used in the manufacturing process, or the like.
  • the information that is the basis for obtaining the parameters in each of the manufacturing steps A, B, and C is not limited to the image of the worker or the temperature during the heat treatment described above, and represents a preset manufacturing situation. Any information may be used as long as the information can acquire the parameter.
  • the quality evaluation of the product G is not limited to the evaluation image based on the evaluation image. For example, quality evaluation using heat distribution by thermography or visual evaluation by an operator may be performed, and the evaluation result may be input to the management device 10.
  • the manufacturing system further includes a management device 10.
  • the management device 10 is configured by one or a plurality of information processing devices including an arithmetic device and a storage device.
  • the management device 10 includes an acquisition unit 11, a storage unit 12, an evaluation unit 13, an identification unit 14, and an output unit 15, which are constructed by the arithmetic device executing a program.
  • the management device 10 also includes a process data storage unit 16, a manufacturing parameter storage unit 17, and an evaluation data storage unit 18 formed in the storage device.
  • the acquisition unit 11 acquires each tracking image captured by the cameras Cta, Ctb, and Ctc installed in each manufacturing process A, B, and C, and the object fingerprint that is the unique information of the product G from each tracking image. Extract and get.
  • the acquisition unit 11 first determines from the tracking image obtained by photographing the surface of at least a part of the product G in the vicinity of the corner of the position where the specific mark M is located among the four corners of the semiconductor substrate that is the product G.
  • the area is specified as the object fingerprint area F.
  • the acquisition unit 11 detects the specific mark M in the tracking image in which the product G as shown in FIG. 7 is present, and separates it by a specific distance from the edge forming the corner where the mark M is located.
  • the area of the position is specified as the object fingerprint area F.
  • the acquisition unit 11 converts the identified pattern of the fingerprint of the object fingerprint area F into data as a feature amount and extracts it as an object fingerprint of the product G.
  • the object fingerprint can be extracted from the same position on the surface of the product G photographed in each manufacturing process A, B, and C.
  • the acquisition unit 11 acquires images representing the manufacturing status and information on measured values from the cameras Cpa, Cpc and the sensors Sb installed as manufacturing status acquisition devices in the manufacturing processes A, B, and C, and based on such information, A parameter indicating the manufacturing status in the manufacturing processes A, B, and C is acquired.
  • the acquisition unit 11 acquires parameters in each manufacturing process based on a correspondence table of manufacturing processes and parameters stored in the process data storage unit 16 in advance.
  • the acquisition unit 11 is set so as to acquire the “worker name” as a parameter, and therefore, from the manufacturing status image acquired from the camera Cpa installed in the manufacturing process A.
  • the name of the worker who is performing the manufacturing work in the manufacturing process A is specified.
  • the face information of the worker and the worker name are registered in advance in the management device 10 in association with each other, and the registered face information and the face image shown in the image acquired from the camera Cpa are registered. By collating, the operator name can be specified.
  • the acquisition unit 11 is not necessarily limited to acquiring the worker name by the method described above, and may acquire the worker name by any method.
  • the information specifying the worker may be input from the input device installed in the manufacturing process A, and the acquiring unit 11 may specify and acquire the worker name.
  • the worker name of the worker may be registered in the management device 10, and the worker name may be specified and acquired from the registration information.
  • the acquisition unit 11 is set to acquire “temperature” as a parameter. Therefore, the temperature acquired from the sensor Sb installed in the manufacturing process B is set to the heat treatment in the manufacturing process B. It is acquired as the "temperature” during the heat treatment by the device Db. Note that the acquisition unit 11 is not necessarily limited to acquiring the temperature by the method described above, and may acquire the temperature by any method.
  • the acquisition unit 11 is set to acquire “working time” as a parameter in the case of the manufacturing process C, the manufacturing process is performed based on the manufacturing status image acquired from the camera Cpc installed in the manufacturing process C.
  • the working time by the worker Pc who is manufacturing in C is acquired.
  • the acquisition unit 11 analyzes the motion of the worker Pc in the manufacturing status image, detects a preset motion as a work motion, and acquires the time during which the work motion is performed as the work time.
  • the acquisition unit 11 is not necessarily limited to acquiring the work time by the method described above, and may acquire the work time by any method. For example, when the work implement installed in the manufacturing process C is connected to the management device 10 and the operation time of the work implement can be measured by the management device 10, the work time is acquired as the work time of the worker. May be.
  • the parameters acquired by the acquisition unit 11 in each of the manufacturing processes A, B, and C are not limited to those described above, and may be parameters representing any manufacturing situation.
  • the parameter acquired by the acquisition unit 11 may be the manufacturing process name, the humidity at the time of manufacturing, the state of the tool used in the manufacturing process, or the like, and may be acquired by any method.
  • the storage unit 12 associates the object fingerprint of the product G acquired by the acquisition unit 11 described above with the parameter indicating the manufacturing status of the product G, and stores them in the manufacturing parameter storage unit 17. At this time, the storage unit 12 stores the object fingerprint acquired in the same manufacturing process and the parameter in association with each other. That is, the storage unit 12 associates the object fingerprint acquired by the acquisition unit 11 described above with the parameter at substantially the same timing. Further, when the object fingerprints of the product G acquired in different manufacturing processes match, the storage unit 12 collectively stores the parameters acquired in each manufacturing process in one object fingerprint. .. As a result, the parameters representing the manufacturing status of each manufacturing process of the same product G can be stored together in association with one object fingerprint.
  • the storage unit 12 acquires the object fingerprint and the parameter from the acquisition unit 11, and if the same object fingerprint as the object fingerprint is not stored in the manufacturing parameter storage unit 17, newly adds the individual number. Then, the object fingerprint and the parameter are stored in association with the individual number. If the same object fingerprint as the acquired object fingerprint is stored in the manufacturing parameter storage unit 17, the storage unit 12 adds a parameter to the individual number associated with the stored object fingerprint. And associate and store. As a result, as shown in FIG. 4, one individual number is assigned to one object fingerprint, and the parameters of each work process are associated and stored.
  • the evaluation unit 13 acquires the tracking image captured by the camera Ctz installed in the evaluation process, and extracts and acquires the object fingerprint that is the unique information of the product G from the tracking image.
  • the method of extracting the object fingerprint is the same as the method of extracting by the acquisition unit 11 described above.
  • the evaluation unit 13 checks whether or not the same object fingerprint as the object fingerprint acquired from the product G in the evaluation process is stored in the manufacturing parameter storage unit 17. If the same object fingerprint as the object fingerprint acquired from the product G in the evaluation step is stored in the manufacturing parameter storage unit 17, the evaluation unit 13 reads the individual number assigned to the same object fingerprint, It is specified as the individual number of the product G in the evaluation process.
  • the evaluation unit 13 acquires an evaluation image showing the entire product G captured by the evaluation camera Csz installed in the evaluation process, analyzes the evaluation image, and evaluates the quality of the product G. ..
  • the evaluation unit 13 detects a crack H occurring in the product G, or detects the length, width, position, etc. of the crack H from the evaluation image, as shown in FIG.
  • the quality of the product G is evaluated in multiple stages.
  • the evaluation unit 13 stores the evaluation result in the evaluation data storage unit 18 by associating the evaluation result with the individual number specified from the object fingerprint acquired at substantially the same timing as the evaluation image that is the target of the quality evaluation. .. For example, as shown in FIG.
  • the evaluation unit 13 ranks the evaluation of the product G in a plurality of stages such as R1, R2, and R3, and stores it in the evaluation data storage unit 18 in association with the individual number.
  • the rank value the higher the evaluation, and the larger the rank value, the lower the evaluation.
  • the ranks R1 and R2 are assumed to have the normal quality
  • the rank R3 is assumed to be the abnormal quality.
  • the evaluation unit 13 does not necessarily have to evaluate the product G in a plurality of stages, and detects the product G in a specific state such as only detecting that the product G is in an abnormal state. The quality of G may be evaluated.
  • the evaluation unit 13 associates the evaluation of the product G with the individual number as described above, and then, from the individual number, a parameter indicating the manufacturing status in the manufacturing process of the product G is stored in the manufacturing parameter storage unit 17 from the manufacturing parameter storage unit 17.
  • the evaluation unit 13 has registered the same object fingerprint as the object fingerprint of the product G evaluated to be in the abnormal state at the rank R3 as the individual number “4” as shown in FIG.
  • the information of the individual number “4” is read from the manufacturing parameter storage unit 17 as shown in the lower part of FIG. 6A.
  • the evaluation unit 13 evaluates the quality of the product G from the evaluation image obtained by photographing the product G, but any method such as performing quality evaluation using heat distribution by thermography may be used. You may evaluate. Further, the evaluation unit 13 is not limited to automatically evaluating the quality of the product G by image processing or the like, and may accept an input of an evaluation result manually performed by a worker's visual observation in the evaluation process. ..
  • the evaluation unit 13 reads out a parameter indicating the manufacturing status of each product G in each manufacturing process for each evaluation of the product G. For example, as shown in FIG. 6A, a parameter of an individual number corresponding to a product G of rank R1 and R2 evaluated to be in a normal state and an individual number corresponding to a product G of rank R3 evaluated to be in an abnormal state are identified.
  • the parameters and the parameters are read separately and stored in the evaluation data storage unit 18. This makes it possible to compare the parameters in each manufacturing process of the product G evaluated as a normal state and the parameters in each manufacturing process of the product G evaluated as an abnormal state, and recognize the difference between them. ..
  • the specifying unit 14 is based on the evaluation of the product G performed by the evaluation unit 13 described above and the parameters indicating the manufacturing status of the product G at each manufacturing process. The manufacturing situation is specified.
  • the specifying unit 14 reads out by the evaluation unit 13 and stores in the evaluation data storage unit 18 based on the parameters for each evaluation of the product G shown in FIG. Specify the correlation with the parameter of.
  • the parameters of the products G of ranks R1 and R2 evaluated to be in the normal state shown in the upper part of FIG. 6A and the individual numbers corresponding to the products G of rank R3 evaluated to be in the abnormal condition shown in the lower part of FIG. 6A Compare with the parameter of. At this time, as shown by the symbols Y1 and Y2 in FIG.
  • the specifying unit 14 may specify the range of the value of the “temperature” that can be in the abnormal state, from the “temperature” of the product G of the rank R3 that is identified as the parameter having the correlation with the evaluation of the abnormal state. Further, the specifying unit 14 may specify the range of the value of the "temperature” that can be the highest quality from the "temperature” of the product G of rank R1 that is evaluated as the highest quality in the normal state. Then, the specifying unit 14 stores the parameters having correlation with the evaluation of the product G specified as described above and the values of the parameters corresponding to the evaluation in the evaluation data storage unit 18.
  • the identification unit 14 exemplifies the case where the parameter having a correlation with the evaluation of the product G is the “temperature” of the manufacturing process B, but of course, the parameters of other manufacturing processes are It may be specified.
  • the parameter having a correlation with the evaluation of the abnormal state of the product G may be specified as the “worker name” of the manufacturing process A or the “working time” of the manufacturing process C.
  • the specifying unit 14 may specify two or more parameters as the parameters having a correlation with a certain evaluation of the product G.
  • the output unit 15 displays the parameters at each manufacturing process of the product G read by the evaluation unit 13 as described above and the parameters correlated with the evaluation of the product G specified by the specifying unit 14 with the display device. Output from an output device such as.
  • the management device 10 acquires a tracking image taken by the camera Cta installed in the manufacturing process A, which is the first manufacturing process. Then, the management device 10 extracts and acquires the object fingerprint which is the unique information of the product G from the tracking image acquired in the manufacturing process A (step S1). Further, the management device 10 acquires the manufacturing status image from the camera Cpa installed as the manufacturing status acquisition device in the manufacturing process A at almost the same timing. Then, the management device 10 analyzes the face information of the worker from the manufacturing status image acquired in the manufacturing process A to identify the worker name, and is a parameter “worker name” that represents the working status in the manufacturing process A. Is acquired (step S2).
  • the management device 10 checks whether or not the same object fingerprint as the object fingerprint of the product G acquired in the manufacturing process A is already stored in the manufacturing parameter storage unit 17 (step S3). At this point, since the manufacturing process A is the first manufacturing process for the product G, the object fingerprint of the product G is not stored in the manufacturing parameter storage unit 17 (No in step S3). Therefore, the management device 10 newly registers the object fingerprint of the product G acquired in the manufacturing process A, and gives a new individual number to the object fingerprint. In addition, the management device 10 associates the newly assigned individual number with the object fingerprint acquired in the manufacturing process A and the “worker name” that is a parameter, and stores them in the manufacturing parameter storage unit 17 (step S4).
  • the management device 10 acquires the tracking image captured by the camera Ctb installed in the manufacturing process B. Then, the management device 10 extracts and acquires the object fingerprint which is the unique information of the product G from the tracking image acquired in the manufacturing process B (step S1). Further, the management apparatus 10 acquires the “temperature” at the time of heat treatment by the heat treatment apparatus Db in the manufacturing process B from the sensor Sb installed as the manufacturing state acquisition apparatus in the manufacturing process B at almost the same timing (step S2). ).
  • the management device 10 checks whether or not the same object fingerprint as the object fingerprint of the product G acquired in the manufacturing process B is already stored in the manufacturing parameter storage unit 17 (step S3). At this time, since the product G has already undergone the manufacturing process A, the object fingerprint of this product G is already stored in the manufacturing parameter storage unit 17 (Yes in step S3). For this reason, the management device 10 associates the parameter “temperature” acquired in the manufacturing process B with the individual number assigned to the same object fingerprint as the object fingerprint of the product G acquired in the manufacturing process B. , Are stored in the manufacturing parameter storage unit 17 (step S5). As a result, the object fingerprint of the product G is associated with the parameters respectively acquired in the manufacturing process A and the manufacturing process B.
  • the management device 10 acquires the tracking image captured by the camera Ctc installed in the manufacturing process C. Then, the management device 10 extracts and acquires the object fingerprint which is the unique information of the product G from the tracking image acquired in the manufacturing process C (step S1). Further, the management device 10 acquires the manufacturing status image from the camera Cpc installed as the manufacturing status acquisition device in the manufacturing process C at almost the same timing. Then, the management device 10 analyzes the operation of the worker Pc who is performing the manufacturing work in the manufacturing process C from the manufacturing status image acquired in the manufacturing process C, detects the preset motion as the working motion, and performs the work. The time during which the operation is performed is acquired as "working time” which is a parameter representing the working status in the manufacturing process C (step S2).
  • the management device 10 checks whether or not the same object fingerprint as the object fingerprint of the product G acquired in the manufacturing process C is already stored in the manufacturing parameter storage unit 17 (step S3). At this time, since the product G has already undergone the manufacturing processes A and B, the object fingerprint of this product G is already stored in the manufacturing parameter storage unit 17 (Yes in step S3). Therefore, the management device 10 associates the “working time”, which is the parameter acquired in the manufacturing process C, with the individual number assigned to the same object fingerprint as the object fingerprint of the product G acquired in the manufacturing process C. And stored in the manufacturing parameter storage unit 17 (step S5). As a result, the object fingerprint of the product G is associated with the parameters acquired in the manufacturing processes A, B, and C, respectively.
  • the management device 10 stores the individual number of the same object fingerprint as the object fingerprint acquired in each manufacturing process in association with the parameter acquired in each manufacturing process, as described above. ..
  • the individual number of each product G specified by the object fingerprint is associated with the parameters of each manufacturing process and accumulated in the manufacturing parameter storage unit 17.
  • the management device 10 acquires the tracking image captured by the camera Ctz installed in the evaluation process. Then, the management device 10 extracts and acquires the object fingerprint which is the unique information of the product G from the tracking image acquired in the evaluation step (step S11).
  • the management apparatus 10 acquires an evaluation image showing the entire product G captured by the evaluation camera Csz installed in the evaluation process at almost the same timing, analyzes the evaluation image, and analyzes the evaluation image.
  • the quality of is evaluated (step S12).
  • the evaluation unit 13 detects a crack H occurring in the product G, a length, a width, a position, etc. of the crack H from the evaluation image, and in a plurality of stages.
  • the quality of product G is evaluated and ranked as shown in FIG.
  • the management device 10 checks whether or not the same object fingerprint as the object fingerprint of the product G acquired in the evaluation process is already stored in the manufacturing parameter storage unit 17 (step S13). At this time, since the product G has already undergone each manufacturing process, the object fingerprint of this product G is already stored in the manufacturing parameter storage unit 17 (Yes in step S13). Then, the management device 10 stores a parameter representing the manufacturing status in each manufacturing process associated with the individual number assigned to the same object fingerprint as the object fingerprint of the product G acquired in the evaluation process in the manufacturing parameter storage unit. It is read from 17 (step S14). The management device 10 may read only the parameters of the product G whose quality is currently evaluated in the evaluation process from the manufacturing parameter storage unit 17 and output the parameters. Accordingly, it is possible to confirm the parameters in each manufacturing process of the product G that is evaluated to have an abnormal state in the evaluation process.
  • the management device 10 reads out a parameter representing the manufacturing status in each manufacturing process of the product G from the manufacturing parameter storage unit 17 for each evaluation of the product G (step S14). Then, the management device 10 uses the read parameters for each evaluation of the product G to identify the manufacturing conditions such as the parameters and the manufacturing process that are factors of the evaluation of the product G (step S15). For example, the management device 10 compares the parameters of the product G group of the evaluation in the normal state with the parameters of the product G group of the evaluation different from that, that is, the evaluation of the product G group in the abnormal state, and the reference numeral Y1, in FIG. 6B. As indicated by Y2, the correlation between the evaluation content of the product G and the parameter for each manufacturing process is specified. Then, the management device 10 stores the parameter identified as having a correlation with the evaluation in the evaluation data storage unit 18 and outputs it.
  • the object fingerprint that is the unique information of the product G and the parameter that represents the manufacturing status in the manufacturing process are acquired for each manufacturing process of the product G, and the same manufacturing process is performed.
  • the acquired object fingerprint and the parameter are stored in association with each other. Therefore, the parameters of each manufacturing process of the same product G can be collectively stored in association with each other.
  • the object fingerprint of the product G is also acquired in the evaluation process of the product G.
  • the parameters at each manufacturing process of the product G stored in association with the same object fingerprint are read out to trace back the parameters at each manufacturing process corresponding to the evaluation of the product. Can be confirmed.
  • the correlation between the evaluation content of the product G and the parameter is specified by comparing the parameters at the time of each manufacturing process for each product G having different evaluations.
  • the object fingerprint is used as the unique information of the product G, but the object fingerprint is not necessarily limited to the unique information.
  • the identification information such as a barcode
  • the identification information can be extracted from the image of the product G and used as the unique information.
  • the manufacturing system in this embodiment has the following configuration in addition to the manufacturing system described in the first embodiment. In the following, a configuration different from that of the first embodiment will be mainly described.
  • the manufacturing system further includes, in each manufacturing process A, B, and C, product photographing cameras Csa, Csb, and Csc for photographing the product G.
  • These cameras Csa, Csb, Csc are installed so as to capture the entire product G in the installed manufacturing process, and transmit the captured product image to the management device 10.
  • the acquisition unit 11 in the present embodiment acquires the object fingerprint and the parameter as described above, and at the same time, the product transmitted from the camera Csa, Csb, Csc for photographing the product. Get an image.
  • the storage unit 12 (association unit) in the present embodiment stores the object fingerprint of the product G acquired by the acquisition unit 11 described above, the parameter indicating the manufacturing status of the product G, and the product image of the product G.
  • the manufacturing parameter storage unit 17 stores the data in association with each other.
  • the storage unit 12 stores the object fingerprint acquired in the same manufacturing process, the parameter, and the product image in association with each other. That is, the storage unit 12 associates the object fingerprint, the parameter, and the product image acquired by the acquisition unit 11 described above at substantially the same timing in the same manufacturing process.
  • the storage unit 12 collects the parameters and product images respectively acquired in each manufacturing process into one object fingerprint. Store in association. This makes it possible to store the parameters and the product images that represent the manufacturing status of the same product G in each manufacturing process, in a single association with each other.
  • the storage unit 12 acquires the object fingerprint, the parameter, and the product image from the acquisition unit 11, and if the same object fingerprint as the object fingerprint is not stored in the manufacturing parameter storage unit 17, newly creates it. An individual number is given, and an object fingerprint, a parameter, and a product image are associated with the individual number and stored. Further, when the same object fingerprint as the acquired object fingerprint is stored in the manufacturing parameter storage unit 17, the storage unit 12 further adds the parameter number and the product number to the individual number associated with the stored object fingerprint. Images are added and stored in association with each other. As a result, as shown in FIG. 13, one individual number is given to one object fingerprint, and the parameters of each work process and the product image are stored in association with each other.
  • the evaluation unit 13 in the present embodiment evaluates the product G in the same manner as described above, and checks whether or not the same object fingerprint as the object fingerprint acquired from the evaluated product G is stored in the manufacturing parameter storage unit 17. .. Then, when the same object fingerprint is stored in the manufacturing parameter storage unit 17, the evaluation unit 13 determines parameters and parameters in each manufacturing process that are associated with the individual number assigned to the same object fingerprint. Read the product image. Note that the evaluation unit 13 may read the parameters representing the manufacturing status of each product G in each manufacturing process and the product image from the manufacturing parameter storage unit 17 for each evaluation of the product G. For example, the parameters and product images of the product group G evaluated as being in an abnormal state and the parameters and product images of the product group G evaluated as being in a normal state may be read out separately for each evaluation.
  • the specifying unit 14 in the present embodiment specifies the manufacturing status such as parameters and manufacturing processes that are factors of evaluation of the product G based on the product image of the manufacturing process of the product G read by the evaluation unit 13. .. For example, in the situation in which the product image at the right end of FIG. 14 at the time of the evaluation process is evaluated to be in an abnormal state due to the presence of the crack H in the product G, each of the same products G as shown in FIG. It is assumed that the product images of the manufacturing processes A, B, and C are read.
  • the specifying unit 14 may specify the manufacturing status such as parameters and manufacturing processes that are factors of the evaluation of the product G from the product image of the product G group for each evaluation. For example, the identifying unit 14 compares the product image of the product G group of a certain evaluation with the product image of the product G group of a different evaluation, and evaluates the product G and the product image of each manufacturing process. Identify the correlation with. Then, the manufacturing process and parameters that are factors of the evaluation are specified from the product image that is specified to have a correlation with the evaluation.
  • the output unit 15 in the present embodiment has a correlation with the parameters and the product image in the manufacturing process of the product G read by the evaluation unit 13 as described above, and the evaluation of the product G specified by the specifying unit 14.
  • a certain product image or parameter is output from an output device such as a display device.
  • the output unit 15 may output so as to display the product image in each manufacturing process including the information representing the parameter representing the manufacturing status. For example, when a thermography that measures the heat distribution of the product G is installed as a manufacturing status acquisition device in a specific manufacturing process, the heat distribution of the product G is set as a parameter indicating the manufacturing status in the specific manufacturing process. Can be obtained. In this case, the heat distribution of the product G is superimposed and displayed on the product image of the product G acquired in the specific manufacturing process. As an example, FIG. 15 shows a product image of the product G in a specific manufacturing process, but it is set in advance as indicated by a symbol R based on the heat distribution which is a parameter acquired in the specific manufacturing process. A region R having a temperature higher than the threshold value is superimposed and displayed on the product image. Note that the output unit 15 may output such that any parameter is included in the product image for display.
  • the object fingerprint that is the unique information of the product G, the parameter indicating the manufacturing status in the manufacturing process, and the product image in the manufacturing process are acquired for each manufacturing process of the product G.
  • the object fingerprint acquired in the same manufacturing process, the parameter, and the product image are stored in association with each other. Therefore, the parameters and the product images of the same product G in each manufacturing process can be collectively stored in association with each other.
  • the object fingerprint of the product G is also acquired in the evaluation process of the product G.
  • the parameter and the product image of the product G stored in association with the same object fingerprint at each manufacturing process can be read using the object fingerprint, and at each manufacturing process corresponding to the evaluation of the product.
  • the product image can be checked retrospectively, and the factor of product evaluation can be identified from the product image.
  • the manufacturing system in the present embodiment has the following configuration in addition to the manufacturing system described in the first or second embodiment. In the following, configurations different from those of the first or second embodiment will be mainly described.
  • FIG. 16 shows a part of the configuration of the management device 10 that constitutes the manufacturing system in this embodiment.
  • the manufacturing parameter storage unit 17 in the present embodiment stores finished product data 17a, which is information such as parameters for each manufacturing process of the finished product, which is the product G described above, and parts of the product G.
  • the component data 17b which is information such as parameters for each manufacturing process, is stored separately.
  • the finished product data 17a is parameter information for each manufacturing process of the semiconductor substrate which is the product G described above as shown in FIG. 4, and the component data 17a constitutes the semiconductor substrate which is the product G described above.
  • This is parameter information for each manufacturing process of the base body, IC chip, and the like.
  • the component data 17a is stored as parameter information as shown in FIG. 4 by the acquisition unit 11 and the storage unit 12 of the management device 10 described above when the base body and the IC chip are manufactured in advance.
  • the evaluation unit 13 in the present embodiment evaluates the product G in the same manner as described above, and acquires the object fingerprint from the components forming the product G.
  • the product G is a semiconductor substrate
  • the object fingerprint of the base itself is acquired from an image of the base itself, which is the component.
  • the evaluation unit 13 uses the object fingerprint of the semiconductor substrate, which is the product G acquired in the evaluation step, as the object fingerprint of the substrate itself which is the component.
  • the evaluation unit 13 may newly acquire the object fingerprint of the component such as the base body or the IC chip from another image area of the image of the semiconductor substrate that is the product G.
  • the evaluation unit 13 checks whether or not the same object fingerprint as the object fingerprint acquired from the component of the product G is stored in the manufacturing parameter storage unit 17. At this time, the evaluation unit 13 checks whether or not the same object fingerprint is stored in the component data 17b in the manufacturing parameter storage unit 17. Then, the evaluation unit 13 reads the parameters in each manufacturing process associated with the same object fingerprint in the component data 17b. As a result, the evaluation unit 13 can read out the parameters indicating the manufacturing status of each manufacturing process at the time of manufacturing the base itself, which is a component of the semiconductor substrate that is the product G.
  • the identifying unit 14 in the present embodiment analyzes the parameters for each manufacturing process of the product G and the parameters for each manufacturing process of the components read by the evaluation unit 13 in the same manner as described above, and determines the factors of the evaluation of the product G. Manufacturing conditions such as different parameters and manufacturing processes are specified. Accordingly, even when the factor of the evaluation of the product G is the manufacturing process of the parts of the product G, the factor can be specified in detail.
  • the finished product data 17a and the part data 17b are separately stored in the manufacturing parameter storage unit 17.
  • the finished product data is 17a and the component data 17b may not be stored separately.
  • the finished product is a semiconductor substrate and the component is an IC chip, and the image area for extracting the object fingerprint of the semiconductor substrate is different from the image area for extracting the object fingerprint of the IC chip, these object fingerprints are always used. It will be different.
  • the evaluation process is performed. It is possible to appropriately read out the parameters of each manufacturing process of the finished product or the part from which the object fingerprint is extracted.
  • FIGS. 17 to 18 are block diagrams showing the configuration of the manufacturing control apparatus according to the fourth embodiment
  • FIGS. 19 to 20 are flowcharts showing the operation of the manufacturing control apparatus. Note that the present embodiment shows an outline of the configuration of the management device 10 and the processing method by the management device 10 described in the first, second, and third embodiments.
  • the manufacturing control apparatus 100 is configured by a general information processing apparatus, and as an example, is equipped with the following hardware configuration.
  • CPU Central Processing Unit
  • ROM Read Only Memory
  • RAM Random Access Memory
  • 103 storage device
  • PROM Random Access Memory
  • Program Group 104 loaded in RAM 103 -Storage device 105 for storing the program group 104 -Drive device 106 that reads and writes the storage medium 110 outside the information processing device -Communication interface 107 connected to communication network 111 outside the information processing apparatus .
  • Input/output interface 108 for inputting/outputting data .Bus 109 that connects each component
  • the manufacturing control apparatus 100 can build and equip the acquisition unit 121 and the association unit 122 shown in FIG. 18 by the CPU 101 acquiring the program group 104 and executing the program by the CPU 101.
  • the program group 104 is stored in the storage device 105 or the ROM 102 in advance, for example, and is loaded into the RAM 103 and executed by the CPU 101 as needed.
  • the program group 104 may be supplied to the CPU 101 via the communication network 111, or may be stored in the storage medium 110 in advance and the drive device 106 may read the program and supply the program to the CPU 101.
  • the acquisition unit 121 and the association unit 122 described above may be constructed by an electronic circuit.
  • FIG. 17 shows an example of the hardware configuration of the information processing apparatus which is the manufacturing control apparatus 100, and the hardware configuration of the information processing apparatus is not exemplified in the above case.
  • the information processing device may be configured by a part of the above-described configuration such as not having the drive device 106.
  • the manufacturing control apparatus 100 executes the manufacturing control method shown in the flowchart of FIG. 19 or 20 by the functions of the acquisition unit 121 and the association unit 122 constructed by the program as described above.
  • the manufacturing control device 100 is For each manufacturing process included in the manufacturing process of the product, the unique information of the product is acquired from the captured image of the product, and the manufacturing status information indicating the manufacturing status in the manufacturing process is acquired (step S101). The unique information of the product acquired in the same manufacturing process and the manufacturing status information are stored in association with each other (step S102).
  • the manufacturing control device 100 is For each manufacturing process included in the manufacturing process of the product, the unique information of the product is acquired from the captured image of the product, and the manufacturing status information indicating the manufacturing status in the manufacturing process is acquired (step S101). The unique information of the product acquired in the same manufacturing process and the manufacturing status information are stored in association with each other (step S102), When evaluating a product, the unique information of the product is acquired from a captured image of the product, and the manufacturing status information for each manufacturing process stored in association with the same unique information as the acquired unique information is read. (Step S103), The manufacturing status corresponding to the evaluation of the product is specified based on the read manufacturing status information for each manufacturing process (step S104).
  • the present invention acquires, for each manufacturing process of a product, unique information of the product and manufacturing status information indicating a manufacturing status in the manufacturing process, and stores the acquired information in association with each other. There is. Therefore, the manufacturing status information of each manufacturing process of the same product can be collectively stored in association with each other.
  • the present invention acquires the unique information of the product at the time of evaluation of the product, and uses the unique information to obtain the manufacturing status information at each manufacturing process of the product stored in association with the same unique information. read out. As a result, it is possible to retrospectively check the manufacturing status at each manufacturing process corresponding to the evaluation of the product.
  • the manufacturing status corresponding to the product evaluation is specified based on the read manufacturing status information for each manufacturing process. As a result, it is possible to specify in detail the factor of the product quality in the manufacturing process.
  • Appendix 6 The manufacturing control method according to any one of appendices 2 to 5, For each manufacturing process, obtain a product image of the product, The unique information of the product acquired in the same manufacturing process, the manufacturing status information, and the product image are stored in association with each other. Manufacturing control method.
  • Appendix 10 The manufacturing control method according to any one of appendices 1 to 9, Based on the evaluation result of the product, other products included in the product are specified, and the unique information of the other product is acquired from the captured image of the other product, and the other product is acquired.
  • the manufacturing status information for each manufacturing process stored in association with the same unique information as the unique information of Manufacturing control method.
  • an acquisition unit that acquires the unique information of the product from the captured image of the product and acquires the manufacturing status information indicating the manufacturing status in the manufacturing process
  • An associating unit that associates and stores the unique information of the product acquired in the same manufacturing process and the manufacturing status information, Manufacturing control device equipped with.
  • the manufacturing control apparatus according to any one of appendices 11 to 14,
  • the acquisition unit acquires a product image obtained by photographing a product for each manufacturing process,
  • the associating unit associates and stores the unique information of the product acquired in the same manufacturing process, the manufacturing status information, and the product image. Manufacturing control equipment.
  • the manufacturing control apparatus according to attachment 15, The evaluation unit reads the manufacturing status information and the product image for each manufacturing process stored in association with the same unique information as the unique information of the product acquired at the time of evaluating the product, Manufacturing control equipment.
  • the manufacturing control apparatus specifies the manufacturing status corresponding to the evaluation of the product, based on the product image for each manufacturing process read at the time of evaluation of the product, Manufacturing control equipment.
  • the manufacturing control apparatus according to any one of appendices 11 to 18,
  • the evaluation unit identifies another product included in the product based on the result of the evaluation of the product, acquires the unique information of the other product from a captured image of the other product, and acquires the acquired information. Read the manufacturing status information for each manufacturing process stored in association with the same unique information as the unique information of the other product. Manufacturing control equipment.
  • an acquisition unit that acquires the unique information of the product from the captured image of the product and acquires the manufacturing status information indicating the manufacturing status in the manufacturing process
  • An associating unit that associates and stores the unique information of the product acquired in the same manufacturing process and the manufacturing status information, A program to realize.
  • Appendix 21 The program according to Appendix 20, In the information processing device, when evaluating a product, the unique information of the product is acquired from a photographed image of the product, and the manufacturing process is stored in association with the acquired unique information in association with the same unique information. A program for further realizing an evaluation unit for reading the manufacturing status information.
  • Appendix 22 The program according to Appendix 21, A program for causing the information processing apparatus to further realize a specifying unit that specifies a manufacturing status corresponding to a product evaluation based on the manufacturing status information for each manufacturing process read during product evaluation.
  • Non-transitory computer-readable media include various types of tangible storage media. Examples of non-transitory computer-readable media are magnetic recording media (eg flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (eg magneto-optical disks), CD-ROMs (Read Only Memory), CD-Rs, It includes a CD-R/W and a semiconductor memory (for example, mask ROM, PROM (Programmable ROM), EPROM (Erasable PROM), flash ROM, RAM (Random Access Memory)).
  • the program may be supplied to the computer by various types of transitory computer readable media. Examples of transitory computer-readable media include electrical signals, optical signals, and electromagnetic waves.
  • the transitory computer-readable medium can supply the program to the computer via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.
  • management device 11 acquisition unit 12 storage unit 13 evaluation unit 14 specification unit 15 output unit 16 process data storage unit 17 manufacturing parameter storage unit 18 evaluation data storage unit 100 manufacturing management device 101 CPU 102 ROM 103 RAM 104 program group 105 storage device 106 drive device 107 communication interface 108 input/output interface 109 bus 110 storage medium 111 communication network 121 acquisition unit 122 association unit

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Quality & Reliability (AREA)
  • Theoretical Computer Science (AREA)
  • Manufacturing & Machinery (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Business, Economics & Management (AREA)
  • Automation & Control Theory (AREA)
  • Human Resources & Organizations (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Operations Research (AREA)
  • Health & Medical Sciences (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • Marketing (AREA)
  • Primary Health Care (AREA)
  • Strategic Management (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • General Factory Administration (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

本発明の製造管理装置１００は、製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得する取得部１２１と、同一の製造工程で取得した製品の固有情報と製造状況情報とを関連付けて記憶する関連付け部１２２と、を備える。

Description

製造管理方法
　本発明は、製造管理方法、製造管理装置、プログラムに関する。
　近年、製造業の製造現場において、製造される製品一つひとつの加工や検査などの製造履歴をビッグデータとして蓄積・解析し、品質管理や生産効率の向上、更には設計や加工精度の向上に生かすことが行われている。特に、製品の品質管理は重要であり、製品個々の製造履歴をさかのぼり、製品個々に評価された品質の要因を特定することが必要となる。
　そして、製品個々の製造履歴を蓄積するためには、製品自体である固体を識別する必要がある。つまり、製造ラインを流れる製品の個体識別情報を取得し、かかる個体識別情報に製造状況情報を関連付けて記憶することで、製造履歴を蓄積することができる。
　ここで、製品を個体識別するために、製品に製造番号やバーコードなどを付与したり、ＲＦＩＤ（Radio Frequency IDentifier）などのタグを取り付けることがある。しかしながら、上記製造番号やバーコード、タグなどを用いて個体識別する場合には、これらを製品個々に対して付与する必要があり、コストが膨大になるという問題が生じる。また、ネジやボルト、錠剤などの小さな製品には、その大きさの制約や製品の特性から、製造番号やバーコード、タグなどを付与することができないこともある。さらに、バーコードやタグ等を物理的に付与することが可能な製品であっても、これらを付与することで、製品の外観や意匠といったデザインを損ねてしまう、という問題も生じる。
　そこで、近年では、製品の表面の微細な紋様（物体指紋）を用いて個体識別する物体指紋認証技術が提案されている。具体的に、物体指紋認証技術は、製品表面の微細凹凸や紋様、素材表面のランダムパターン等の製品の製造過程で生じる自然発生的な微細なパターンを、カメラ等の撮影装置を用いて画像として取得し、その微細なパターンを認識することで製品の個体識別を行う。
　ここで、上述した物体指紋認証技術を用いて製品の品質を管理する方法の一例が、特許文献１に開示されている。特許文献１では、製品の表面を撮影して表面パターン情報を取得し、かかる表面パターン情報に、製造日時や製造時の気温や湿度などの製造条件、製造工場や製造ラインのＩＤ、といった製造にかかる関連情報を紐付けてデータベースに記憶する。そして、その後、使用者や流通業者からの要求に応じて、実際の製品の表面パターン情報とデータベースに記憶されている表面パターン情報とを照合することによって、製品の製造にかかる関連情報を特定している。
特開２０１５－２３２８５３号公報
　しかしながら、上述した特許文献１に記載の技術では、製品の表面パターン情報から、かかる製品の製造日時や製造条件、製造場所といった大まかな製造にかかる情報しか特定することができない。このため、製品の製造工程が複数ある場合には、いずれの工程が製品の品質の要因となっているかを特定することができない。その結果、製品の品質の要因を詳細に特定することができない、という問題が生じる。
　このため、本発明の目的は、上述した課題である、製品の品質の要因を詳細に特定することができない、ことを解決することができる製造管理方法を提供することにある。
　本発明の一形態である製造管理方法は、
　製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得し、
　同一の製造工程で取得した製品の固有情報と前記製造状況情報とを関連付けて記憶し、
　製品の評価の際に、製品を撮影した撮影画像から当該製品の固有情報を取得して、取得した固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報を読み出し、
　読み出した製造工程毎の前記製造状況情報に基づいて、製品の評価に対応する製造状況を特定する、
という構成を有する。
　また、本発明の一形態である製造管理方法は、
　製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得し、
　同一の製造工程で取得した製品の固有情報と前記製造状況情報とを関連付けて記憶する、
という構成を有する。
　また、本発明の一形態である製造管理装置は、
　製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得する取得部と、
　同一の製造工程で取得した製品の固有情報と前記製造状況情報とを関連付けて記憶する関連付け部と、
を備える。
　また、本発明の一形態であるプログラムは、
　情報処理装置に、
　製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得する取得部と、
　同一の製造工程で取得した製品の固有情報と前記製造状況情報とを関連付けて記憶する関連付け部と、
を実現させる、
という構成を有する。
　本発明は、以上のように構成されることにより、製品の品質の要因を詳細に特定することができる。
本発明の実施形態１における製造システムの構成を示すブロック図である。 図１に開示した管理装置の構成を示すブロック図である。 図２に開示した工程データ記憶部に記憶される情報の一例を示す図である。 図２に開示した製造パラメータ記憶部に記憶される情報の一例を示す図である。 図２に開示した評価データ記憶部に記憶される情報の一例を示す図である。 図２に開示した評価データ記憶部に記憶される情報の一例を示す図である。 図２に開示した評価データ記憶部に記憶される情報の一例を示す図である。 図１に開示した製造システムで製造される製品の一例を示す図である。 図１に開示した製造システムで製造される製品の一例を示す図である。 図１に開示した管理装置の動作を説明するための図である。 図１に開示した管理装置の動作を示すフローチャートである。 図１に開示した管理装置の動作を示すフローチャートである。 本発明の実施形態２における製造システムの構成を示すブロック図である。 図１２に開示した管理装置の製造パラメータ記憶部に記憶される情報の一例を示す図である。 図１２に開示した管理装置における処理の一例を示す図である。 図１２に開示した管理装置における処理の一例を示す図である。 本発明の実施形態３における管理装置の構成及び動作を示す図である。 本発明の実施形態４における製造管理装置のハードウェア構成を示すブロック図である。 本発明の実施形態４における製造管理装置の構成を示すブロック図である。 本発明の実施形態４における製造管理装置の動作を示すフローチャートである。 本発明の実施形態４における製造管理装置の動作を示すフローチャートである。
　＜実施形態１＞
　本発明の第１の実施形態を、図１乃至図１１を参照して説明する。図１乃至図８は、製造システムの構成を説明するための図であり、図９乃至図１１は、管理装置の処理動作を説明するための図である。
　［構成］
　本発明における製造システムは、製造業の製造現場に構築されており、設定された製造過程を経て、所定の製品Ｇを製造するものである。例えば、本実施形態における製造システムで製造する製品Ｇは、図７に示すような半導体基盤であることとする。但し、本発明の製造システムで製造する製品Ｇは、半導体基板であることに限定されず、いかなる製品であってもよい。一例として、製品Ｇは、ノートパソコンやスマートフォンなどの電子機器、冷蔵庫や掃除機などの家電、自動車、電池、錠剤や包装された薬、鉄鋼材、プラスチック素材、などが挙げられる。
　製造システムにて製品Ｇを製造する製造過程には、複数の製造工程が含まれる。例えば、図１に示すように、製造システム内に設定された製造ラインＬには、複数の製造工程Ａ，Ｂ，Ｃが含まれ、さらに完成した製品Ｇの品質を評価する評価工程も含まれる。各製造工程Ａ，Ｂ，Ｃでは、製品Ｇを製造するための製造作業が行われる。例えば、製造工程Ａでは作業者Ｐａによる製品Ｇに対する下処理作業、製造工程Ｂでは熱処理装置Ｄｂによる製品Ｇに対する熱処理作業、製造工程Ｃでは作業者Ｐｃによる製品Ｇに対する部品の接合作業、がそれぞれ行われる。さらに、評価工程では、製品Ｇを撮影した画像処理による品質評価が行われる。なお、製造ラインＬで行われる上述した各工程の内容は一例であり、例えば、医薬品などの化学製品を製造する場合における薬剤の注入作業や撹拌作業など、いかなる作業が行われてもよい。また、製造ラインＬでは、上述した製造工程数に限らず、１工程であってもよく、あるいは、さらに多くの製造工程が行われてもよい。
　そして、本発明における製造システムは、特に、製品Ｇの品質管理のために、製造ラインＬを搬送される個々の製品Ｇを識別して、各製造工程における製品Ｇ毎の製造状況を記憶しておく機能を有する。このため、個々の製品Ｇを識別する技術を利用することが不可欠で有り、本実施形態では、製品Ｇの表面の微細な紋様（物体指紋）を用いて個体識別する物体指紋認証技術を用いることとする。
　ここで、物体指紋認証技術について簡単に説明する。まず、一般的に、同一仕様の工業製品は、同じ仕様の製造装置を使い、ばらつきのないように製造されるものであるが、高精度に切削加工される機械部品や、同一の金型から製造した部品であっても、特定の照明条件下で製品の表面を顕微鏡で拡大すると、個々に表面の凹凸が微妙に違い、異なる紋様パターンとして観測することができる。このような微細な紋様は、製品や部品の性能・品質には無関係なレベルのものであり、個々に異なる唯一な特徴を持っているため、個体の違いは画像で認識することができる。つまり、生物と同様に、工業製品にも個体固有の指紋があり、かかる物体指紋を用いて個体識別を行うことが可能である。
　具体的に、製品から物体指紋を抽出する際には、例えば、特定の照明条件下で製品の表面を撮影し、撮影した画像から、輝度の変化が急峻で、位置が安定して求まる場所を特徴点として決定する。続いて、特徴点周辺の局所的な輝度パターンを特徴量としてデータ化することで、製品の物体指紋として抽出する。そして、同一の製品であるかを調べるために物体指紋同士を照合する際には、特徴点の幾何的な配置の整合性を検証することで行う。例えば、照合する物体指紋同士から、特徴量の差が最少となる特徴点をペアとして求め、求められたペア群から、他の特徴点との相対的な位置関係が矛盾しないペア群のみを抽出する。そして、抽出された特徴点の数の合計をNtotoal、幾何的な配置が正しい特徴点ペアの数をninlierとし、両画像の照合スコアS = ninlier / Ntotoal を計算する。この照合スコアが所定のしきい値より高ければ、照合する物体指紋が抽出された製品は、同一の個体であると決定できる。なお、上述した物体指紋の抽出方法や照合方法は一例であって、いかなる方法で行ってもよい。
　続いて、製造システムの構成についてさらに説明する。製造システムは、各製造工程Ａ，Ｂ，Ｃと評価工程に、製品Ｇの固有情報である物体指紋を取得するための撮影装置であるカメラＣｔａ，Ｃｔｂ，Ｃｔｃ，Ｃｔｚを備えている。各カメラＣｔａ，Ｃｔｂ，Ｃｔｃ，Ｃｔｚは、特定の照明条件下で、製品Ｇの物体指紋を抽出する一部の表面を撮影するよう設置されており、撮影した追跡用画像を管理装置１０に送信する。例えば、本実施形態では、各カメラＣｔａ，Ｃｔｂ，Ｃｔｃ，Ｃｔｚは、図７に示す製品Ｇである半導体基板の四隅のうち、特定のマークＭが位置する箇所の角付近の画像を少なくとも撮影する設置されている。
　また、製造システムは、各製造工程Ａ，Ｂ，Ｃに、当該各製造工程における製造状況を表すパラメータを取得するための基となる情報を取得する製造状況取得装置を備えている。そして、各製造状況取得装置は、各製造工程における製造状況を表すパラメータの基となる情報を取得すると、かかる情報を管理装置１０に送信する。例えば、製造工程Ａでは、製造状況を表すパラメータである「作業者名」を取得するために、作業者Ｐａ自体を撮影するカメラＣｐａが製造状況計取得置として設けられている。また、製造工程Ｂでは、製造状況を表すパラメータとして熱処理装置Ｄｂにおける熱処理時の「温度」を取得するために、熱処理装置Ｄｂ内の温度を計測する温度センサＳｂが製造状況取得装置として設けられている。また、製造工程Ｃでは、製造状況を表すパラメータとして作業者Ｐｃによる「作業時間」を取得するために、作業者Ｐｃの作業を撮影するカメラＣｐｃが製造状況取得装置として設けられている。
　また、製造システムは、評価工程に、製造した製品Ｇの品質を評価すべく、製品Ｇ全体を撮影するカメラＣｓｚを備えている。このカメラＣｓｚは、製品Ｇにひび割れが生じていないかといった品質を評価するための情報を検出可能なように、製品Ｇ全体を撮影するよう設置されており、撮影した評価用画像を管理装置１０に送信する。
　なお、各製造工程Ａ，Ｂ，Ｃで取得する製造状況を表すパラメータは上述したものに限定されず、いかなる製造状況を表すパラメータであってもよい。例えば、製造状況を表すパラメータは、製造工程名、製造時の湿度、製造工程において使用する工具の状態、などであってもよい。これに応じて、各製造工程Ａ，Ｂ，Ｃでパラメータを取得するための基となる情報は、上述した作業者の画像や熱処理時の温度に限定されず、予め設定された製造状況を表すパラメータを取得できる情報であればいかなる情報であってもよい。また、評価工程では、製品Ｇの品質評価を評価用画像に基づいて行うことに限定されない。例えば、サーモグラフィによる熱分布を利用した品質評価や、作業者の目視による品質評価が行われてもよく、その評価結果が管理装置１０に入力されてもよい。
　そして、製造システムは、図１に示すように、さらに管理装置１０を備えている。管理装置１０は、演算装置と記憶装置とを備えた１台又は複数台の情報処理装置にて構成される。そして、管理装置１０は、図２に示すように、演算装置がプログラムを実行することで構築された、取得部１１、蓄積部１２、評価部１３、特定部１４、出力部１５、を備える。また、管理装置１０は、記憶装置に形成された、工程データ記憶部１６、製造パラメータ記憶部１７、評価データ記憶部１８、を備える。以下、各構成について詳述する。
　上記取得部１１は、各製造工程Ａ，Ｂ，Ｃに設置されたカメラＣｔａ，Ｃｔｂ，Ｃｔｃから撮影された各追跡用画像を取得し、各追跡用画像から製品Ｇの固有情報である物体指紋を抽出して取得する。本実施形態では、取得部１１は、まず、製品Ｇの少なくとも一部の表面を撮影した追跡用画像から、製品Ｇである半導体基板の四隅のうち特定のマークＭが位置する箇所の角付近の領域を物体指紋領域Ｆとして特定する。具体的に、取得部１１は、図７に示すような製品Ｇが映る追跡用画像内から特定のマークＭを検出し、かかるマークＭが位置する角を形成する縁から特定の距離だけ離れた位置の領域を、物体指紋領域Ｆとして特定する。そして、取得部１１は、特定した物体指紋領域Ｆの紋様のパターン等を特徴量としてデータ化して、製品Ｇの物体指紋として抽出する。これにより、各製造工程Ａ，Ｂ，Ｃで撮影された製品Ｇの表面の同一箇所から、物体指紋を抽出することができる。
　また、取得部１１は、各製造工程Ａ，Ｂ，Ｃに製造状況取得装置として設置されたカメラＣｐａ，ＣｐｃやセンサＳｂから製造状況を表す画像や計測値の情報を取得し、かかる情報から各製造工程Ａ，Ｂ，Ｃにおける製造状況を表すパラメータを取得する。このとき、取得部１１は、図３に示すように、工程データ記憶部１６に予め記憶された製造工程とパラメータとの対応表に基づいて、各製造工程でパラメータを取得する。
　具体的に、取得部１１は、製造工程Ａの場合には、パラメータとして「作業者名」を取得するよう設定されているため、製造工程Ａに設置されたカメラＣｐａから取得した製造状況画像から、製造工程Ａで製造作業している作業者名を特定する。このとき、管理装置１０には、予め作業者の顔情報と作業者名とが関連付けられて登録されており、かかる登録された顔情報と、カメラＣｐａから取得した画像に映る顔画像と、を照合することで、作業者名を特定することができる。なお、取得部１１は、必ずしも上述した方法で作業者名を取得することに限定されず、いかなる方法で作業者名を取得してもよい。例えば、製造工程Ａに設置された入力装置から作業者を特定する情報が入力されることで、取得部１１は作業者名を特定して取得してもよく、予め製造工程Ａで作業する作業者の作業者名が管理装置１０に登録されていて、かかる登録情報から作業者名を特定して取得してもよい。
　また、取得部１１は、製造工程Ｂの場合には、パラメータとして「温度」を取得するよう設定されているため、製造工程Ｂに設置されたセンサＳｂから取得した温度を、製造工程Ｂにおける熱処理装置Ｄｂによる熱処理時の「温度」として取得する。なお、取得部１１は、必ずしも上述した方法で温度を取得することに限定されず、いかなる方法で温度を取得してもよい。
　また、取得部１１は、製造工程Ｃの場合には、パラメータとして「作業時間」を取得するよう設定されているため、製造工程Ｃに設置されたカメラＣｐｃから取得した製造状況画像から、製造工程Ｃで製造作業している作業者Ｐｃによる作業時間を取得する。このとき、取得部１１は、製造状況画像内の作業者Ｐｃの動作を解析し、予め設定された動作を作業動作として検出し、かかる作業動作を行っている時間を作業時間として取得する。なお、取得部１１は、必ずしも上述した方法で作業時間を取得することに限定されず、いかなる方法で作業時間を取得してもよい。例えば、製造工程Ｃに設置された作業器具が管理装置１０に接続されており、かかる作業器具の作動時間を管理装置１０が計測できる場合には、かかる作業時間を作業者の作業時間として取得してもよい。
　なお、取得部１１が各製造工程Ａ，Ｂ，Ｃで取得するパラメータは、上述したものに限定されず、いかなる製造状況を表すパラメータであってもよい。例えば、取得部１１が取得するパラメータは、上述したように、製造工程名、製造時の湿度、製造工程において使用する工具の状態、などであってもよく、いかなる方法で取得してもよい。
　上記蓄積部１２（関連付け部）は、上述した取得部１１で取得した製品Ｇの物体指紋と、かかる製品Ｇに対する製造状況を表すパラメータと、を関連付けて、製造パラメータ記憶部１７に記憶する。このとき、蓄積部１２は、同一の製造工程で取得した物体指紋とパラメータとを関連付けて記憶する。つまり、蓄積部１２は、ほぼ同一のタイミングで上述した取得部１１にて取得された物体指紋とパラメータとを関連付ける。さらに、蓄積部１２は異なる製造工程で取得された製品Ｇの物体指紋同士が一致している場合には、各製造工程でそれぞれ取得されたパラメータを、１つの物体指紋にまとめて関連付けて記憶する。これにより、同一製品Ｇの各製造工程における製造状況を表すパラメータは、１つの物体指紋に関連付けてまとめて記憶することができる。
　具体的に、蓄積部１２は、取得部１１から物体指紋とパラメータを取得し、かかる物体指紋と同一の物体指紋が製造パラメータ記憶部１７に記憶されていない場合には、新たに個体番号を付与し、かかる個体番号に物体指紋とパラメータとを関連付けて記憶する。また、蓄積部１２は、取得した物体指紋と同一の物体指紋が製造パラメータ記憶部１７に記憶されている場合には、記憶されている物体指紋に関連付けられている個体番号に、さらにパラメータを追加して関連付けて記憶する。これにより、図４に示すように、１つの物体指紋に対して１つの個体番号が付与され、さらに各作業工程のパラメータが関連付けられて記憶される。
　上記評価部１３は、評価工程に設置されたカメラＣｔｚから撮影された追跡用画像を取得し、追跡用画像から製品Ｇの固有情報である物体指紋を抽出して取得する。なお、物体指紋の抽出方法は、上述した取得部１１にて抽出する方法と同様である。そして、評価部１３は、評価工程の製品Ｇから取得した物体指紋と同一の物体指紋が製造パラメータ記憶部１７に記憶されているか否かを調べる。評価部１３は、評価工程の製品Ｇから取得した物体指紋と同一の物体指紋が製造パラメータ記憶部１７に記憶されている場合には、かかる同一の物体指紋に付与されている個体番号を読み出し、評価工程の製品Ｇの個体番号として特定する。
　また、評価部１３は、評価工程に設置された評価用のカメラＣｓｚから撮影された製品Ｇ全体が映る評価用画像を取得し、かかる評価用画像を解析して製品Ｇの品質の評価を行う。例えば、評価部１３は、評価用画像から、図８に示すように、製品Ｇに生じているひび割れＨを検出したり、ひび割れＨの長さ、幅、位置、などを検出するなどして、製品Ｇの品質を複数段階で評価する。そして、評価部１３は、品質の評価の対象となった評価用画像とほぼ同一のタイミングで取得した物体指紋から特定された個体番号に、評価結果を関連付けて、評価データ記憶部１８に記憶する。例えば、評価部１３は、図５に示すように、製品Ｇの評価をＲ１，Ｒ２，Ｒ３というように複数段階でランク付けし、個体番号に対応付けて、評価データ記憶部１８に記憶する。なお、この場合、ランクの数値が小さいほど評価が高く、ランクの数値が大きいほど評価が低いこととする。例えば、本実施形態では、ランクＲ１，Ｒ２は正常状態の品質であることとし、ランクＲ３は異常状態の品質であることとする。なお、評価部１３は、製品Ｇの評価を必ずしも複数段階で行う必要はなく、製品Ｇが異常状態であることのみを検出するなど、特定の状態である製品Ｇを検出することにより、当該製品Ｇの品質を評価してもよい。
　そして、評価部１３は、上述したように製品Ｇの評価に個体番号を対応付けてことで、かかる個体番号から、その製品Ｇの製造工程における製造状況を表すパラメータを、製造パラメータ記憶部１７から読み出すことができる。例えば、評価部１３は、図５に示すように、ランクＲ３で異常状態であると評価された製品Ｇの物体指紋と同一の物体指紋が、個体番号「４」として登録されていたとする。この場合には、かかる個体番号「４」の情報を、図６Ａの下段に示すように製造パラメータ記憶部１７から読み出す。このように製造パラメータ記憶部１７から製品Ｇの情報を読み出すことで、図９の矢印に示すように、評価工程で異常状態と評価した製品Ｇの各製造工程Ａ，Ｂ，Ｃ時の製造状況を表すパラメータを、遡って特定することができる。
　なお、本実施形態では、評価部１３は、製品Ｇを撮影した評価用画像から製品Ｇの品質を評価しているが、サーモグラフィによる熱分布を利用して品質評価を行うなど、いかなる方法でいかなる評価を行ってもよい。また、評価部１３は、画像処理などにより自動的に製品Ｇの品質を評価することに限定されず、評価工程において作業者の目視などによる手動で行われた評価結果の入力を受け付けてもよい。
　また、評価部１３は、製品Ｇの評価毎に、製品Ｇの各製造工程における製造状況を表すパラメータを読み出す。例えば、図６Ａに示すように、正常状態であると評価されたランクＲ１，Ｒ２の製品Ｇに相当する個体番号のパラメータと、異常状態と評価されたランクＲ３の製品Ｇに相当する個体番号のパラメータと、を区別して読み出し、評価データ記憶部１８に記憶する。これにより、正常状態と評価された製品Ｇの各製造工程時のパラメータと、異常状態と評価された製品Ｇの各製造工程時のパラメータと、を比較でき、それらの差異を認識することができる。
　上記特定部１４は、上述した評価部１３による製品Ｇの評価と、かかる製品Ｇの各製造工程時の製造状況を表すパラメータと、に基づいて、製品Ｇの評価の要因となるパラメータや製造工程といった製造状況を特定する。本実施形態では、特定部１４は、評価部１３によって読み出して評価データ記憶部１８に記憶した、図６Ａに示す製品Ｇの評価毎のパラメータに基づいて、製品Ｇの評価の内容と製造工程毎のパラメータとの相関関係を特定する。一例として、図６Ａの上段に示す正常状態であると評価されたランクＲ１，Ｒ２の製品Ｇのパラメータと、図６Ａの下段に示す異常状態と評価されたランクＲ３の製品Ｇに相当する個体番号のパラメータと、を比較する。このとき、図６Ｂの符号Ｙ１，Ｙ２に示すように、製造工程Ｂのパラメータである「温度」に差異があった場合に、かかる「温度」のパラメータが製品Ｇの評価に相関関係があると特定する。つまり、製品Ｇが異常状態となる要因は、製造工程Ｂにおける熱処理時の「温度」であると特定する。
　さらに、特定部１４は、異常状態の評価と相関関係があるパラメータと特定されたランクＲ３の製品Ｇの「温度」から、異常状態となり得る「温度」の値の範囲を特定してもよい。さらに、特定部１４は、正常状態のうち最高品質と評価されているランクＲ１の製品Ｇの「温度」から、最高品質となり得る「温度」の値の範囲を特定してもよい。そして、特定部１４は、上述したように特定した製品Ｇの評価と相関関係のあるパラメータや、評価に対応するパラメータの値を、評価データ記憶部１８に記憶しておく。
　なお、上記では、特定部１４が、一例として、製品Ｇの評価と相関関係があるパラメータが製造工程Ｂの「温度」であるとして特定する場合を例示したが、もちろん他の製造工程のパラメータが特定される場合もありうる。例えば、製品Ｇの異常状態との評価と相関関係があるパラメータが、製造工程Ａの「作業者名」と特定されたり、製造工程Ｃの「作業時間」と特定される場合もある。また、特定部１４は、製品Ｇのある評価と相関関係があるパラメータとして、２つ以上のパラメータを特定してもよい。
　上記出力部１５は、上述したように評価部１３によって読み出された製品Ｇの各製造工程時におけるパラメータや、特定部１４によって特定された製品Ｇの評価と相関関係があるパラメータを、表示装置などの出力装置から出力する。
　［動作］
　次に、上述した管理装置１０の動作を、主に図１０乃至図１１のフローチャートを参照して説明する。まず、図１０のフローチャートを参照して、製造ラインＬ上で製造されている製品Ｇの各製造工程における製造状況を表すパラメータを蓄積するときの動作を説明する。
　管理装置１０は、まず、最初の製造工程である製造工程Ａに設置されたカメラＣｔａから撮影された追跡用画像を取得する。そして、管理装置１０は、製造工程Ａで取得した追跡用画像から製品Ｇの固有情報である物体指紋を抽出して取得する（ステップＳ１）。また、管理装置１０は、ほぼ同一のタイミングで、製造工程Ａに製造状況取得装置として設置されたカメラＣｐａから製造状況画像を取得する。そして、管理装置１０は、製造工程Ａで取得した製造状況画像から、作業者の顔情報を解析して作業者名を特定し、製造工程Ａにおける作業状況を表すパラメータである「作業者名」を取得する（ステップＳ２）。
　続いて、管理装置１０は、製造工程Ａで取得した製品Ｇの物体指紋と同一の物体指紋が、既に製造パラメータ記憶部１７に記憶されているか否かを調べる（ステップＳ３）。この時点では、製造工程Ａは、製品Ｇについて最初の製造工程であるため、この製品Ｇの物体指紋は製造パラメータ記憶部１７に記憶されていない（ステップＳ３でＮｏ）。このため、管理装置１０は、製造工程Ａで取得した製品Ｇの物体指紋を新規に登録し、かかる物体指紋に新たな個体番号を付与する。また、管理装置１０は、新たに付与した個体番号に、製造工程Ａで取得した物体指紋とパラメータである「作業者名」とを関連付けて、製造パラメータ記憶部１７に記憶する（ステップＳ４）。
　続いて、上述したように製造工程Ａで製造作業を終えた製品Ｇが、次の製造工程である製造工程Ｂに進むとする。すると、管理装置１０は、製造工程Ｂに設置されたカメラＣｔｂから撮影された追跡用画像を取得する。そして、管理装置１０は、製造工程Ｂで取得した追跡用画像から製品Ｇの固有情報である物体指紋を抽出して取得する（ステップＳ１）。また、管理装置１０は、ほぼ同一のタイミングで、製造工程Ｂに製造状況取得装置として設置されたセンサＳｂから、当該製造工程Ｂにおける熱処理装置Ｄｂによる熱処理時の「温度」を取得する（ステップＳ２）。
　続いて、管理装置１０は、製造工程Ｂで取得した製品Ｇの物体指紋と同一の物体指紋が、既に製造パラメータ記憶部１７に記憶されているか否かを調べる（ステップＳ３）。このとき、製品Ｇは既に製造工程Ａを経ているため、この製品Ｇの物体指紋は製造パラメータ記憶部１７に既に記憶されている（ステップＳ３でＹｅｓ）。このため、管理装置１０は、製造工程Ｂで取得した製品Ｇの物体指紋と同一の物体指紋に付与されている個体番号に対して、製造工程Ｂで取得したパラメータである「温度」を関連付けて、製造パラメータ記憶部１７に記憶する（ステップＳ５）。これにより、製品Ｇの物体指紋に対して、製造工程Ａ及び製造工程Ｂでそれぞれ取得したパラメータが関連付けられることとなる。
　続いて、製造工程Ｂで製造作業を終えた製品Ｇが、次の製造工程である製造工程Ｃに進むとする。すると、管理装置１０は、製造工程Ｃに設置されたカメラＣｔｃから撮影された追跡用画像を取得する。そして、管理装置１０は、製造工程Ｃで取得した追跡用画像から製品Ｇの固有情報である物体指紋を抽出して取得する（ステップＳ１）。また、管理装置１０は、ほぼ同一のタイミングで、製造工程Ｃに製造状況取得装置として設置されたカメラＣｐｃから製造状況画像を取得する。そして、管理装置１０は、製造工程Ｃで取得した製造状況画像から、製造工程Ｃで製造作業している作業者Ｐｃの動作を解析し、予め設定された動作を作業動作として検出し、かかる作業動作を行っている時間を、製造工程Ｃにおける作業状況を表すパラメータである「作業時間」として取得する（ステップＳ２）。
　続いて、管理装置１０は、製造工程Ｃで取得した製品Ｇの物体指紋と同一の物体指紋が、既に製造パラメータ記憶部１７に記憶されているか否かを調べる（ステップＳ３）。このとき、製品Ｇは既に製造工程Ａ，Ｂを経ているため、この製品Ｇの物体指紋は製造パラメータ記憶部１７に既に記憶されている（ステップＳ３でＹｅｓ）。このため、管理装置１０は、製造工程Ｃで取得した製品Ｇの物体指紋と同一の物体指紋に付与されている個体番号に対して、製造工程Ｃで取得したパラメータである「作業時間」を関連付けて、製造パラメータ記憶部１７に記憶する（ステップＳ５）。これにより、製品Ｇの物体指紋に対して、製造工程Ａ，Ｂ，Ｃでそれぞれ取得したパラメータが関連付けられることとなる。
　その後も製造工程が存在する場合には、管理装置１０は、上述同様に、各製造工程で取得した物体指紋と同一の物体指紋の個体番号に、各製造工程で取得したパラメータを関連付けて記憶する。これにより、例えば図４に示すように、物体指紋で特定される製品Ｇ毎の個体番号に、各製造工程のパラメータが関連付けられて、製造パラメータ記憶部１７に蓄積されることとなる。
　次に、図１１のフローチャートを参照して、製品Ｇが評価工程に進んだときの動作を説明する。管理装置１０は、評価工程に設置されたカメラＣｔｚから撮影された追跡用画像を取得する。そして、管理装置１０は、評価工程で取得した追跡用画像から製品Ｇの固有情報である物体指紋を抽出して取得する（ステップＳ１１）。
　また、管理装置１０は、ほぼ同一のタイミングで、評価工程に設置された評価用のカメラＣｓｚから撮影された製品Ｇ全体が映る評価用画像を取得し、かかる評価用画像を解析して製品Ｇの品質の評価を行う（ステップＳ１２）。例えば、評価部１３は、評価用画像から、図８に示すように、製品Ｇに生じているひび割れＨを検出したり、ひび割れＨの長さ、幅、位置、などを検出し、複数段階で製品Ｇの品質を評価し、図５に示すようにランク付けする。
　続いて、管理装置１０は、評価工程で取得した製品Ｇの物体指紋と同一の物体指紋が、既に製造パラメータ記憶部１７に記憶されているか否かを調べる（ステップＳ１３）。このとき、製品Ｇは既に各製造工程を経ているため、この製品Ｇの物体指紋は製造パラメータ記憶部１７に既に記憶されている（ステップＳ１３でＹｅｓ）。そして、管理装置１０は、評価工程で取得した製品Ｇの物体指紋と同一の物体指紋に付与されている個体番号に関連付けられている各製造工程での製造状況を表すパラメータを、製造パラメータ記憶部１７から読み出す（ステップＳ１４）。なお、管理装置１０は、現在、評価工程で品質を評価している製品Ｇのパラメータのみを製造パラメータ記憶部１７から読み出して、出力してもよい。これにより、評価工程において異常状態が発生したと評価した製品Ｇの各製造工程におけるパラメータを確認できる。
　また、管理装置１０は、図６Ａに示すように、製品Ｇの評価毎に、製品Ｇの各製造工程における製造状況を表すパラメータを、製造パラメータ記憶部１７から読み出す（ステップＳ１４）。そして、管理装置１０は、読み出した製品Ｇの評価毎のパラメータを用いて、製品Ｇの評価の要因となるパラメータや製造工程といった製造状況を特定する（ステップＳ１５）。例えば、管理装置１０は、正常状態である評価の製品Ｇ群のパラメータと、これとは異なる評価つまり異常状態である評価の製品Ｇ群のパラメータと、を比較して、図６Ｂの符号Ｙ１，Ｙ２に示すように、製品Ｇの評価の内容と製造工程毎のパラメータとの相関関係を特定する。そして、管理装置１０は、評価と相関関係があると特定したパラメータを評価データ記憶部１８に記憶すると共に出力する。
　以上のように、本実施形態では、製品Ｇの製造工程毎に、当該製品Ｇの固有情報である物体指紋と、製造工程における製造状況を表すパラメータと、を取得して、同一の製造工程で取得した物体指紋とパラメータとを関連付けて記憶している。このため、同一の製品Ｇの各製造工程におけるパラメータをまとめて関連付けて記憶しておくことができる。
　そして、本実施形態では、製品Ｇの評価工程においても、製品Ｇの物体指紋を取得している。これにより、かかる物体指紋を用いて、同一の物体指紋に関連付けられて記憶されている製品Ｇの各製造工程時におけるパラメータを読み出すことで、製品の評価に対応する各製造工程時のパラメータを遡って確認することができる。
　さらに、本実施形態では、評価が異なる製品Ｇ毎の各製造工程時のパラメータを比較することで、製品Ｇの評価の内容とパラメータとの相関関係を特定している。これにより、製品Ｇの品質の製造工程上における要因を詳細に特定することができる。そして、特定した要因を後の製造工程に反映することで、製品の品質の向上を図ることができる。
　なお、上記では、製品Ｇの固有情報として物体指紋を用いているが、必ずしも固有情報に物体指紋を用いることに限定されない。例えば、製品Ｇにバーコードなどの識別情報を付与することが容易である場合には、製品Ｇを撮影した画像からバーコードなどの識別情報を抽出して固有情報として用いることもできる。
　＜実施形態２＞
　次に、本発明の第２の実施形態を、図１２乃至図１５を参照して説明する。本実施形態における製造システムは、実施形態１で説明した製造システムに加え、さらに以下の構成を備えている。なお、以下では、実施形態１と異なる構成について主に説明する。
　図１２に示すように、本実施形態における製造システムは、各製造工程Ａ，Ｂ，Ｃに、さらに、製品Ｇを撮影する製品撮影用のカメラＣｓａ，Ｃｓｂ，Ｃｓｃを備えている。これらカメラＣｓａ，Ｃｓｂ，Ｃｓｃは、設置されている製造工程における製品Ｇ全体を撮影するよう設置されており、撮影した製品画像を管理装置１０に送信する。
　そして、本実施形態における取得部１１は、各製造工程Ａ，Ｂ，Ｃにおいて、上述したように物体指紋及びパラメータを取得すると共に、上記製品撮影用のカメラＣｓａ，Ｃｓｂ，Ｃｓｃから送信された製品画像を取得する。
　また、本実施形態における蓄積部１２（関連付け部）は、上述した取得部１１で取得した製品Ｇの物体指紋と、かかる製品Ｇに対する製造状況を表すパラメータと、かかる製品Ｇの製品画像と、を関連付けて、製造パラメータ記憶部１７に記憶する。このとき、蓄積部１２は、同一の製造工程で取得した物体指紋とパラメータと製品画像とを関連付けて記憶する。つまり、蓄積部１２は、同一の製造工程において、ほぼ同一のタイミングで上述した取得部１１にて取得された物体指紋とパラメータと製品画像とを関連付ける。さらに、蓄積部１２は、異なる製造工程で取得された製品Ｇの物体指紋同士が一致している場合には、各製造工程でそれぞれ取得されたパラメータ及び製品画像を、１つの物体指紋にまとめて関連付けて記憶する。これにより、同一製品Ｇの各製造工程における製造状況を表すパラメータと製品画像とを、１つにまとめて関連付けて記憶することができる。
　具体的に、蓄積部１２は、取得部１１から物体指紋とパラメータと製品画像とを取得し、かかる物体指紋と同一の物体指紋が製造パラメータ記憶部１７に記憶されていない場合には、新たに個体番号を付与し、かかる個体番号に物体指紋とパラメータと製品画像とを関連付けて記憶する。また、蓄積部１２は、取得した物体指紋と同一の物体指紋が製造パラメータ記憶部１７に記憶されている場合には、記憶されている物体指紋に関連付けられている個体番号に、さらにパラメータ及び製品画像を追加して関連付けて記憶する。これにより、図１３に示すように、１つの物体指紋に対して１つの個体番号が付与され、さらに各作業工程のパラメータ及び製品画像が関連付けられて記憶される。
　そして、本実施形態における評価部１３は、上述同様に製品Ｇの評価を行い、評価した製品Ｇから取得した物体指紋と同一の物体指紋が製造パラメータ記憶部１７に記憶されているか否かを調べる。そして、評価部１３は、製造パラメータ記憶部１７に同一の物体指紋が記憶されている場合には、かかる同一の物体指紋に付与されている個体番号に関連付けられている、各製造工程におけるパラメータ及び製品画像を読み出す。なお、評価部１３は、製品Ｇの評価毎に、製品Ｇの各製造工程における製造状況を表すパラメータ及び製品画像を、製造パラメータ記憶部１７から読み出してもよい。例えば、異常状態であると評価された商品Ｇ群のパラメータ及び製品画像や、正常状態であると評価された商品Ｇ群のパラメータ及び製品画像を、評価毎に区別して読み出してもよい。
　また、本実施形態における特定部１４は、上記評価部１３にて読み出した製品Ｇの製造工程毎の製品画像に基づいて、製品Ｇの評価の要因となるパラメータや製造工程といった製造状況を特定する。例えば、図１４の右端に表示した評価工程時における製品画像から、製品Ｇにひび割れＨが存在することで異常状態であると評価を受けた状況において、図１４に示すように同一製品Ｇの各製造工程Ａ，Ｂ，Ｃ時の製品画像が読み出されたとする。この場合、評価工程時の製品画像と、各製造工程Ａ，Ｂ，Ｃ時の製品画像とを比較する画像処理を行うことで、ひび割れＨが生じ始めた製造工程Ｂの工程名やそのときの製造状況を表すパラメータである「温度」を、異常状態の評価の要因と特定することができる。
　なお、特定部１４は、評価毎の製品Ｇ群の製品画像から、製品Ｇの評価の要因となるパラメータや製造工程といった製造状況を特定してもよい。例えば、特定部１４は、ある評価の製品Ｇ群の製品画像と、これとは異なる評価の製品Ｇ群の製品画像と、を比較して、製品Ｇの評価の内容と製造工程毎の製品画像との相関関係を特定する。そして、評価と相関関係があると特定した製品画像から、評価の要因となる製造工程やパラメータを特定する。
　そして、本実施形態における出力部１５は、上述したように評価部１３によって読み出された製品Ｇの製造工程時におけるパラメータ及び製品画像や、特定部１４によって特定された製品Ｇの評価と相関関係がある製品画像やパラメータを、表示装置などの出力装置から出力する。
　また、出力部１５は、各製造工程における製品画像に、製造状況を表すパラメータを表す情報を含めて表示するよう出力してもよい。例えば、特定の製造工程において、製造状況取得装置として製品Ｇの熱分布を計測するサーモグラフィが設置されている場合には、かかる特定の製造工程における製造状況を表すパラメータとして、製品Ｇの熱分布を取得することができる。この場合、特定の製造工程で取得した製品Ｇの製品画像上に、製品Ｇの熱分布を重畳して表示する。一例として、図１５では、特定の製造工程における製品Ｇの製品画像を示しているが、特定の製造工程において取得したパラメータである熱分布に基づいて、符号Ｒに示すように、予め設定された閾値よりも高い温度の領域Ｒを製品画像に重畳して表示する。なお、出力部１５は、いかなるパラメータを製品画像に含めて表示するよう出力してもよい。
　以上のように、本実施形態では、製品Ｇの製造工程毎に、当該製品Ｇの固有情報である物体指紋と、製造工程における製造状況を表すパラメータと、製造工程における製品画像とを取得して、同一の製造工程で取得した物体指紋とパラメータと製品画像とを関連付けて記憶している。このため、同一の製品Ｇの各製造工程におけるパラメータ及び製品画像をまとめて関連付けて記憶しておくことができる。
　そして、本実施形態では、製品Ｇの評価工程においても、製品Ｇの物体指紋を取得している。これにより、かかる物体指紋を用いて、同一の物体指紋に関連付けられて記憶されている製品Ｇの各製造工程時におけるパラメータ及び製品画像を読み出すことができ、製品の評価に対応する各製造工程時の製品画像を遡って確認することができ、製品の評価の要因を製品画像から特定することができる。
　＜実施形態３＞
　次に、本発明の第３の実施形態を、図１６を参照して説明する。本実施形態における製造システムは、実施形態１又は実施形態２で説明した製造システムに加え、さらに以下の構成を備えている。なお、以下では、実施形態１又は実施形態２と異なる構成について主に説明する。
　図１６は、本実施形態における製造システムを構成する管理装置１０の構成の一部を示している。図１６に示すように、本実施形態における製造パラメータ記憶部１７は、上述した製品Ｇである完成品の製造工程毎のパラメータなどの情報である完成品データ１７ａと、製品Ｇを構成する部品の製造工程毎のパラメータなどの情報である部品データ１７ｂと、を区別して記憶している。例えば、完成品データ１７ａは、図４に示すような上述してきた製品Ｇである半導体基盤の製造工程毎のパラメータの情報であり、部品データ１７ａは、上述してきた製品Ｇである半導体基盤を構成する基盤本体やＩＣチップなどの製造工程毎のパラメータの情報である。なお、部品データ１７ａは、予め基盤本体やＩＣチップが製造される際に、上述した管理装置１０の取得部１１や蓄積部１２により、図４に示すようなパラメータの情報として蓄積されている。
　そして、本実施形態における評価部１３は、上述同様に製品Ｇの評価を行うと共に、製品Ｇを構成する部品から物体指紋を取得する。例えば、製品Ｇが半導体基板である場合には、その部品である基盤自体を撮影した画像から当該基盤自体の物体指紋を取得する。このとき、評価部１３は、部品である基盤自体の物体指紋として、評価工程で取得した製品Ｇである半導体基板の物体指紋を用いることとする。但し、評価部１３は、製品Ｇである半導体基板を撮影した画像の他の画像領域から、新たに基盤本体やＩＣチップなどの部品の物体指紋を取得してもよい。
　続いて、評価部１３は、製品Ｇの部品から取得した物体指紋と同一の物体指紋が製造パラメータ記憶部１７に記憶されているか否かを調べる。このとき、評価部１３は、製造パラメータ記憶部１７内の部品データ１７ｂ内に同一の物体指紋が記憶されているか否かを調べる。そして、評価部１３は、部品データ１７ｂ内に同一の物体指紋に関連付けられている各製造工程におけるパラメータを読み出す。これにより、評価部１３は、製品Ｇである半導体基板の部品である基盤自体の製造時における各製造工程の製造状況を表すパラメータを読み出すことができる。
　そして、本実施形態における特定部１４は、上記評価部１３にて読み出した製品Ｇの製造工程毎のパラメータや部品の製造工程毎のパラメータを上述同様に分析して、製品Ｇの評価の要因となるパラメータや製造工程といった製造状況を特定する。これにより、製品Ｇの評価の要因が、かかる製品Ｇの部品の製造工程にある場合であっても、かかる要因を詳細に特定することができる。
　なお、上記では、完成品データ１７ａと部品データ１７ｂとを区別して製造パラメータ記憶部１７に記憶しているが、製品Ｇと部品との物体指紋を読み取る画像領域が異なる場合には、完成品データ１７ａと部品データ１７ｂとを区別して記憶しなくてもよい。例えば、完成品が半導体基板、部品がＩＣチップであり、半導体基板の物体指紋を抽出する画像領域と、ＩＣチップの物体指紋を抽出する画像領域と、が異なる場合には、これら物体指紋は必ず異なることとなる。このため、完成品である半導体基板の各製造工程のパラメータと、部品であるＩＣチップの各製造工程のパラメータと、が混在して製造パラメータ記憶部１７に蓄積されていたとしても、評価工程で物体指紋を抽出した完成品や部品の各製造工程のパラメータを適切に読み出すことができる。
　＜実施形態４＞
　次に、本発明の第４の実施形態を、図１７乃至図２０を参照して説明する。図１７乃至図１８は、実施形態４における製造管理装置の構成を示すブロック図であり、図１９乃至図２０は、製造管理装置の動作を示すフローチャートである。なお、本実施形態では、実施形態１，２，３で説明した管理装置１０及び管理装置１０による処理方法の構成の概略を示している。
　まず、図１７を参照して、本実施形態における製造管理装置１００のハードウェア構成を説明する。製造管理装置１００は、一般的な情報処理装置にて構成されており、一例として、以下のようなハードウェア構成を装備している。
　・ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）１０１（演算装置）
　・ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）１０２（記憶装置）
　・ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）１０３（記憶装置）
　・ＲＡＭ１０３にロードされるプログラム群１０４
　・プログラム群１０４を格納する記憶装置１０５
　・情報処理装置外部の記憶媒体１１０の読み書きを行うドライブ装置１０６
　・情報処理装置外部の通信ネットワーク１１１と接続する通信インタフェース１０７
　・データの入出力を行う入出力インタフェース１０８
　・各構成要素を接続するバス１０９
　そして、製造管理装置１００は、プログラム群１０４をＣＰＵ１０１が取得して当該ＣＰＵ１０１が実行することで、図１８に示す取得部１２１と関連付け部１２２を構築して装備することができる。なお、プログラム群１０４は、例えば、予め記憶装置１０５やＲＯＭ１０２に格納されており、必要に応じてＣＰＵ１０１がＲＡＭ１０３にロードして実行する。また、プログラム群１０４は、通信ネットワーク１１１を介してＣＰＵ１０１に供給されてもよいし、予め記憶媒体１１０に格納されており、ドライブ装置１０６が該プログラムを読み出してＣＰＵ１０１に供給してもよい。但し、上述した取得部１２１と関連付け部１２２とは、電子回路で構築されるものであってもよい。
　なお、図１７は、製造管理装置１００である情報処理装置のハードウェア構成の一例を示しており、情報処理装置のハードウェア構成は上述した場合に例示されない。例えば、情報処理装置は、ドライブ装置１０６を有さないなど、上述した構成の一部から構成されてもよい。
　そして、製造管理装置１００は、上述したようにプログラムによって構築された取得部１２１と関連付け部１２２との機能により、図１９あるいは図２０のフローチャートに示す製造管理方法を実行する。
　図１９に示すように、製造管理装置１００は、
　製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得し（ステップＳ１０１）、
　同一の製造工程で取得した製品の固有情報と前記製造状況情報とを関連付けて記憶する（ステップＳ１０２）。
　また、図２０に示すように、製造管理装置１００は、
　製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得し（ステップＳ１０１）、
　同一の製造工程で取得した製品の固有情報と前記製造状況情報とを関連付けて記憶し（ステップＳ１０２）、
　製品の評価の際に、製品を撮影した撮影画像から当該製品の固有情報を取得して、取得した固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報を読み出し（ステップＳ１０３）、
　読み出した製造工程毎の前記製造状況情報に基づいて、製品の評価に対応する製造状況を特定する（ステップＳ１０４）。
　本発明は、以上のように構成されることにより、製品の製造工程毎に、当該製品の固有情報と、製造工程における製造状況を表す製造状況情報と、を取得して、関連付けて記憶している。このため、同一の製品の各製造工程における製造状況情報をまとめて関連付けて記憶しておくことができる。
　そして、本発明は、製品の評価時に、製品の固有情報を取得して、かかる固有情報を用いて、同一の固有情報に関連付けられて記憶されている製品の各製造工程時における製造状況情報を読み出す。これにより、製品の評価に対応する各製造工程時の製造状況を遡って確認することができる。
　さらに、本発明では、読み出した製造工程毎の製造状況情報に基づいて、製品の評価に対応する製造状況を特定する。これにより、製品の品質の製造工程上における要因を詳細に特定することができる。
　＜付記＞
　上記実施形態の一部又は全部は、以下の付記のようにも記載されうる。以下、本発明における製造管理方法、製造管理装置、プログラムの構成の概略を説明する。但し、本発明は、以下の構成に限定されない。
（付記１）
　製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得し、
　同一の製造工程で取得した製品の固有情報と前記製造状況情報とを関連付けて記憶し、
　製品の評価の際に、製品を撮影した撮影画像から当該製品の固有情報を取得して、取得した固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報を読み出し、
　読み出した製造工程毎の前記製造状況情報に基づいて、製品の評価に対応する製造状況を特定する、
製造管理方法。
（付記２）
　製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得し、
　同一の製造工程で取得した製品の固有情報と前記製造状況情報とを関連付けて記憶する、
製造管理方法。
（付記３）
　付記２に記載の製造管理方法であって、
　製品の評価の際に、製品を撮影した撮影画像から当該製品の固有情報を取得して、取得した固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報を読み出す、
製造管理方法。
（付記４）
　付記３に記載の製造管理方法であって、
　製品の評価の際に読み出した製造工程毎の前記製造状況情報に基づいて、製品の評価に対応する製造状況を特定する、
製造管理方法。
（付記５）
　付記４に記載の製造管理方法であって、
　評価の内容が異なる製品毎に当該製品の評価の際に読み出した製造工程毎の前記製造状況情報に基づいて、製品の評価の内容と製造工程毎の前記製造状況情報との相関関係を特定する、
製造管理方法。
（付記６）
　付記２乃至５のいずれかに記載の製造管理方法であって、
　製造工程毎に、製品を撮影した製品画像を取得し、
　同一の製造工程で取得した製品の固有情報と前記製造状況情報と前記製品画像とを関連付けて記憶する、
製造管理方法。
（付記７）
　付記６に記載の製造管理方法であって、
　製品の評価の際に取得した当該製品の固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報及び前記製品画像を読み出す、
製造管理方法。
（付記８）
　付記７に記載の製造管理方法であって、
　製品の評価の際に読み出した製造工程毎の前記製品画像に基づいて、製品の評価に対応する製造状況を特定する、
製造管理方法。
（付記９）
　付記７又は８に記載の製造管理方法であって、
　製品の評価の際に読み出した製造工程毎の前記製造状況情報及び前記製品画像に基づいて、前記製造状況情報に対応する製造状況を表す情報を前記製品画像に含めて表示する、
製造管理方法。
（付記１０）
　付記１乃至９のいずれかに記載の製造管理方法であって、
　製品の評価の結果に基づいて、当該製品に含まれる他の製品を特定すると共に、当該他の製品を撮影した撮影画像から当該他の製品の固有情報を取得して、取得した当該他の製品の固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報を読み出す、
製造管理方法。
（付記１１）
　製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得する取得部と、
　同一の製造工程で取得した製品の固有情報と前記製造状況情報とを関連付けて記憶する関連付け部と、
を備えた製造管理装置。
（付記１２）
　付記１１に記載の製造管理装置であって、
　製品の評価の際に、製品を撮影した撮影画像から当該製品の固有情報を取得して、取得した固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報を読み出す評価部を備えた、
製造管理装置。
（付記１３）
　付記１２に記載の製造管理装置であって、
　製品の評価の際に読み出した製造工程毎の前記製造状況情報に基づいて、製品の評価に対応する製造状況を特定する特定部を備えた、
製造管理装置。
（付記１４）
　付記１３に記載の製造管理装置であって、
　前記特定部は、評価の内容が異なる製品毎に当該製品の評価の際に読み出した製造工程毎の前記製造状況情報に基づいて、製品の評価の内容と製造工程毎の前記製造状況情報との相関関係を特定する、
製造管理装置。
（付記１５）
　付記１１乃至１４のいずれかに記載の製造管理装置であって、
　前記取得部は、製造工程毎に、製品を撮影した製品画像を取得し、
　前記関連付け部は、同一の製造工程で取得した製品の固有情報と前記製造状況情報と前記製品画像とを関連付けて記憶する、
製造管理装置。
（付記１６）
　付記１５に記載の製造管理装置であって、
　前記評価部は、製品の評価の際に取得した当該製品の固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報及び前記製品画像を読み出す、
製造管理装置。
（付記１７）
　付記１６に記載の製造管理装置であって、
　前記特定部は、製品の評価の際に読み出した製造工程毎の前記製品画像に基づいて、製品の評価に対応する製造状況を特定する、
製造管理装置。
（付記１８）
　付記１６又は１７に記載の製造管理装置であって、
　製品の評価の際に読み出した製造工程毎の前記製造状況情報及び前記製品画像に基づいて、前記製造状況情報に対応する製造状況を表す情報を前記製品画像に含めて表示する、出力部を備えた、
製造管理装置。
（付記１９）
　付記１１乃至１８のいずれかに記載の製造管理装置であって、
　前記評価部は、製品の評価の結果に基づいて、当該製品に含まれる他の製品を特定すると共に、当該他の製品を撮影した撮影画像から当該他の製品の固有情報を取得して、取得した当該他の製品の固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報を読み出す、
製造管理装置。
（付記２０）
　情報処理装置に、
　製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得する取得部と、
　同一の製造工程で取得した製品の固有情報と前記製造状況情報とを関連付けて記憶する関連付け部と、
を実現させるためのプログラム。
（付記２１）
　付記２０に記載のプログラムであって、
　前記情報処理装置に、製品の評価の際に、製品を撮影した撮影画像から当該製品の固有情報を取得して、取得した固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報を読み出す評価部をさらに実現させるためのプログラム。
（付記２２）
　付記２１に記載のプログラムであって、
　前記情報処理装置に、製品の評価の際に読み出した製造工程毎の前記製造状況情報に基づいて、製品の評価に対応する製造状況を特定する特定部をさらに実現させるためのプログラム。
　なお、上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ－ＲＯＭ（Read Only Memory）、ＣＤ－Ｒ、ＣＤ－Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory））を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
　以上、上記実施形態等を参照して本願発明を説明したが、本願発明は、上述した実施形態に限定されるものではない。本願発明の構成や詳細には、本願発明の範囲内で当業者が理解しうる様々な変更をすることができる。
１０　管理装置
１１　取得部
１２　蓄積部
１３　評価部
１４　特定部
１５　出力部
１６　工程データ記憶部
１７　製造パラメータ記憶部
１８　評価データ記憶部
１００　製造管理装置
１０１　ＣＰＵ
１０２　ＲＯＭ
１０３　ＲＡＭ
１０４　プログラム群
１０５　記憶装置
１０６　ドライブ装置
１０７　通信インタフェース
１０８　入出力インタフェース
１０９　バス
１１０　記憶媒体
１１１　通信ネットワーク
１２１　取得部
１２２　関連付け部
 

Claims (20)

  1. 　製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得し、
    　同一の製造工程で取得した製品の固有情報と前記製造状況情報とを関連付けて記憶し、
    　製品の評価の際に、製品を撮影した撮影画像から当該製品の固有情報を取得して、取得した固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報を読み出し、
    　読み出した製造工程毎の前記製造状況情報に基づいて、製品の評価に対応する製造状況を特定する、
    製造管理方法。
  2. 　製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得し、
    　同一の製造工程で取得した製品の固有情報と前記製造状況情報とを関連付けて記憶する、
    製造管理方法。
  3. 　請求項２に記載の製造管理方法であって、
    　製品の評価の際に、製品を撮影した撮影画像から当該製品の固有情報を取得して、取得した固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報を読み出す、
    製造管理方法。
  4. 　請求項３に記載の製造管理方法であって、
    　製品の評価の際に読み出した製造工程毎の前記製造状況情報に基づいて、製品の評価に対応する製造状況を特定する、
    製造管理方法。
  5. 　請求項４に記載の製造管理方法であって、
    　評価の内容が異なる製品毎に当該製品の評価の際に読み出した製造工程毎の前記製造状況情報に基づいて、製品の評価の内容と製造工程毎の前記製造状況情報との相関関係を特定する、
    製造管理方法。
  6. 　請求項２乃至５のいずれかに記載の製造管理方法であって、
    　製造工程毎に、製品を撮影した製品画像を取得し、
    　同一の製造工程で取得した製品の固有情報と前記製造状況情報と前記製品画像とを関連付けて記憶する、
    製造管理方法。
  7. 　請求項６に記載の製造管理方法であって、
    　製品の評価の際に取得した当該製品の固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報及び前記製品画像を読み出す、
    製造管理方法。
  8. 　請求項７に記載の製造管理方法であって、
    　製品の評価の際に読み出した製造工程毎の前記製品画像に基づいて、製品の評価に対応する製造状況を特定する、
    製造管理方法。
  9. 　請求項７又は８に記載の製造管理方法であって、
    　製品の評価の際に読み出した製造工程毎の前記製造状況情報及び前記製品画像に基づいて、前記製造状況情報に対応する製造状況を表す情報を前記製品画像に含めて表示する、
    製造管理方法。
  10. 　請求項１乃至９のいずれかに記載の製造管理方法であって、
    　製品の評価の結果に基づいて、当該製品に含まれる他の製品を特定すると共に、当該他の製品を撮影した撮影画像から当該他の製品の固有情報を取得して、取得した当該他の製品の固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報を読み出す、
    製造管理方法。
  11. 　製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得する取得部と、
    　同一の製造工程で取得した製品の固有情報と前記製造状況情報とを関連付けて記憶する関連付け部と、
    を備えた製造管理装置。
  12. 　請求項１１に記載の製造管理装置であって、
    　製品の評価の際に、製品を撮影した撮影画像から当該製品の固有情報を取得して、取得した固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報を読み出す評価部を備えた、
    製造管理装置。
  13. 　請求項１２に記載の製造管理装置であって、
    　製品の評価の際に読み出した製造工程毎の前記製造状況情報に基づいて、製品の評価に対応する製造状況を特定する特定部を備えた、
    製造管理装置。
  14. 　請求項１３に記載の製造管理装置であって、
    　前記特定部は、評価の内容が異なる製品毎に当該製品の評価の際に読み出した製造工程毎の前記製造状況情報に基づいて、製品の評価の内容と製造工程毎の前記製造状況情報との相関関係を特定する、
    製造管理装置。
  15. 　請求項１１乃至１４のいずれかに記載の製造管理装置であって、
    　前記取得部は、製造工程毎に、製品を撮影した製品画像を取得し、
    　前記関連付け部は、同一の製造工程で取得した製品の固有情報と前記製造状況情報と前記製品画像とを関連付けて記憶する、
    製造管理装置。
  16. 　請求項１５に記載の製造管理装置であって、
    　前記評価部は、製品の評価の際に取得した当該製品の固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報及び前記製品画像を読み出す、
    製造管理装置。
  17. 　請求項１６に記載の製造管理装置であって、
    　前記特定部は、製品の評価の際に読み出した製造工程毎の前記製品画像に基づいて、製品の評価に対応する製造状況を特定する、
    製造管理装置。
  18. 　請求項１６又は１７に記載の製造管理装置であって、
    　製品の評価の際に読み出した製造工程毎の前記製造状況情報及び前記製品画像に基づいて、前記製造状況情報に対応する製造状況を表す情報を前記製品画像に含めて表示する、出力部を備えた、
    製造管理装置。
  19. 　請求項１１乃至１８のいずれかに記載の製造管理装置であって、
    　前記評価部は、製品の評価の結果に基づいて、当該製品に含まれる他の製品を特定すると共に、当該他の製品を撮影した撮影画像から当該他の製品の固有情報を取得して、取得した当該他の製品の固有情報と同一の固有情報に関連付けて記憶されている製造工程毎の前記製造状況情報を読み出す、
    製造管理装置。
  20. 　情報処理装置に、
    　製品の製造過程に含まれる製造工程毎に、製品を撮影した撮影画像から当該製品の固有情報を取得すると共に、当該製造工程における製造状況を表す製造状況情報を取得する取得部と、
    　同一の製造工程で取得した製品の固有情報と前記製造状況情報とを関連付けて記憶する関連付け部と、
    を実現させるためのプログラム。
PCT/JP2019/007668 2019-02-27 2019-02-27 製造管理方法 WO2020174626A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
PCT/JP2019/007668 WO2020174626A1 (ja) 2019-02-27 2019-02-27 製造管理方法
US17/432,976 US20220164936A1 (en) 2019-02-27 2019-02-27 Manufacturing management method
JP2021501469A JP7218791B2 (ja) 2019-02-27 2019-02-27 製造管理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2019/007668 WO2020174626A1 (ja) 2019-02-27 2019-02-27 製造管理方法

Publications (1)

Publication Number Publication Date
WO2020174626A1 true WO2020174626A1 (ja) 2020-09-03

Family

ID=72238481

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2019/007668 WO2020174626A1 (ja) 2019-02-27 2019-02-27 製造管理方法

Country Status (3)

Country Link
US (1) US20220164936A1 (ja)
JP (1) JP7218791B2 (ja)
WO (1) WO2020174626A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011077095A (ja) * 2009-09-29 2011-04-14 Nec Corp 設備監視システム、設備監視方法および設備監視プログラム
JP2015142084A (ja) * 2014-01-30 2015-08-03 オムロン株式会社 品質管理装置、品質管理方法
JP2015232853A (ja) * 2014-06-10 2015-12-24 富士ゼロックス株式会社 物体画像情報管理サーバ、物体関連情報管理サーバ及びプログラム
JP2016100527A (ja) * 2014-11-25 2016-05-30 日本電気株式会社 基板の識別装置、基板の識別方法、及び基板のトレーサビリティシステム

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9208394B2 (en) * 2005-09-05 2015-12-08 Alpvision S.A. Authentication of an article of manufacture using an image of the microstructure of it surface
US10346852B2 (en) * 2016-02-19 2019-07-09 Alitheon, Inc. Preserving authentication under item change
US10839528B2 (en) * 2016-08-19 2020-11-17 Alitheon, Inc. Authentication-based tracking

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011077095A (ja) * 2009-09-29 2011-04-14 Nec Corp 設備監視システム、設備監視方法および設備監視プログラム
JP2015142084A (ja) * 2014-01-30 2015-08-03 オムロン株式会社 品質管理装置、品質管理方法
JP2015232853A (ja) * 2014-06-10 2015-12-24 富士ゼロックス株式会社 物体画像情報管理サーバ、物体関連情報管理サーバ及びプログラム
JP2016100527A (ja) * 2014-11-25 2016-05-30 日本電気株式会社 基板の識別装置、基板の識別方法、及び基板のトレーサビリティシステム

Also Published As

Publication number Publication date
JPWO2020174626A1 (ja) 2021-12-16
JP7218791B2 (ja) 2023-02-07
US20220164936A1 (en) 2022-05-26

Similar Documents

Publication Publication Date Title
US11164304B2 (en) Methods for automatically generating a common measurement across multiple assembly units
CN110709688B (zh) 用于预测在装配单元中的缺陷的方法
US11763443B2 (en) Method for monitoring manufacture of assembly units
US11641536B2 (en) Capture and association of measurement data
CN105182935B (zh) 一种生产管理系统及其控制方法
CN109690570B (zh) 一种机房管理方法及动环系统
US20160012362A1 (en) Work management system and work management method
WO2020174625A1 (ja) 製造管理方法
CN113767407A (zh) 信息处理装置、信息处理方法、信息处理程序以及记录介质
CN106062819B (zh) 图像处理装置、图像传感器、图像处理方法
WO2020174626A1 (ja) 製造管理方法
CN111860217A (zh) 故障检测的方法、装置、电子设备及存储介质
TW201738812A (zh) 維護系統 、維護裝置、維護方法及電腦可讀取記錄媒體
JP5096787B2 (ja) 作業支援システム、作業管理システム、および作業管理方法
CN104596578A (zh) 一种基于移动终端的外接件巡检方法、系统及移动终端
JP7238966B2 (ja) 個体識別情報生成方法、個体識別情報生成装置、プログラム
TWM528432U (zh) 熱源檢測裝置及其系統
TWI579581B (zh) 熱源檢測裝置、系統及其方法
JP2021056671A (ja) 作業状態判別装置、作業状態判別方法およびプログラム
CN104198833B (zh) 特殊图样自动化辨识之检测系统及其方法
US20220368850A1 (en) Production system
US20240003673A1 (en) Method and system for providing individual information about a coordinate measuring device
JP2013182428A (ja) 画像識別方法、画像識別装置および画像識別プログラム
CN101881595A (zh) 板件检测方法
Lo et al. The design of a quality control system of PCB with SMT based on RFID and AOI

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 19916855

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021501469

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 19916855

Country of ref document: EP

Kind code of ref document: A1