WO2024071617A1 - 도포 상태 분석 시스템 및 그 방법 - Google Patents

도포 상태 분석 시스템 및 그 방법 Download PDF

Info

Publication number
WO2024071617A1
WO2024071617A1 PCT/KR2023/010641 KR2023010641W WO2024071617A1 WO 2024071617 A1 WO2024071617 A1 WO 2024071617A1 KR 2023010641 W KR2023010641 W KR 2023010641W WO 2024071617 A1 WO2024071617 A1 WO 2024071617A1
Authority
WO
WIPO (PCT)
Prior art keywords
application
module
state
workpiece
image data
Prior art date
Application number
PCT/KR2023/010641
Other languages
English (en)
French (fr)
Inventor
이찬수
Original Assignee
캠아이 주식회사
영남대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 캠아이 주식회사, 영남대학교 산학협력단 filed Critical 캠아이 주식회사
Publication of WO2024071617A1 publication Critical patent/WO2024071617A1/ko

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/17Systems in which incident light is modified in accordance with the properties of the material investigated
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/90Determination of colour characteristics

Definitions

  • the present invention relates to a system and method for analyzing the application state, and more specifically, to a method in which a coating solvent (coating liquid) is applied to the surface of a workpiece (coated object) in a standard amount or more, and after application, the minimum required function is achieved. It relates to an application state analysis system and method for analyzing the application state to determine whether there are any problems.
  • it relates to a coating state analysis system and method that can improve the accuracy and reliability of the analysis results of the surface coating state of the workpiece by controlling the color of the light illuminated on the workpiece in response to the color of the coating solvent.
  • the application state can be analyzed by inspecting/determining the uniformity of application of the coating solvent applied to the surface of the workpiece. To this end, a planar image of the workpiece or a tomographic image is obtained to check the uniformity of the application state. is carrying out.
  • the coating solvent applied to the surface of the work is in the form of a spray
  • the accuracy of the uniformity test is lowered because an accurate image cannot be obtained.
  • a difference in brightness occurs when light is irradiated for image acquisition, which also makes it impossible to obtain an accurate image, which reduces the accuracy of uniformity inspection.
  • the present invention was devised to solve the problems of the prior art as described above.
  • the purpose of the present invention is to control the color of the light irradiated to the workpiece in response to the color of the coating solvent, thereby providing comparative stability of the surface coating state of the workpiece.
  • the goal is to provide an application condition analysis system and method that can be accurately analyzed.
  • the application state analysis system is a system for analyzing the surface application state of a workpiece to which a coating solvent is applied through an application means, through at least two light source means, a first light emission state and a second light emission state.
  • a lighting module that integrates control so that each light having different spectral components is irradiated in a light-emitting state, and each workpiece to which light is irradiated according to each light-emitting state by the lighting module is photographed, thereby obtaining at least two image data.
  • a vision module that uses preset weights for the RGB channels to calculate color values for each pixel that makes up each image data, calculates the color value difference between matching pixels by two image data, and calculates the applied density value of the pixel.
  • an application concentration analysis module that sets the application concentration analysis module, and an application concentration determination module that determines a defective application state when the set application concentration value is outside the preset threshold standard value, and the lighting module, vision module, application concentration analysis module, and application concentration determination module. It is desirable to include an integrated control module that controls each operating state by generating control signals for the device.
  • the integrated control module controls the lighting module in a preset basic light emission state and controls the vision module to provide basic image data for the entire area of the workpiece to which light is irradiated according to the basic light emission state. It is desirable to obtain.
  • the integrated control module analyzes the basic image data to generate a control signal for a first luminous state having a spectrum in which the coating solvent applied to the workpiece is reflected for controlling the illumination module, and It is desirable that the coating solvent applied to the water generates a control signal for the second luminescence state having a non-reflective spectrum.
  • the integrated control module analyzes the basic image data and generates a control signal for the illumination state for each preset inspection area of the workpiece to further control the first and second light emission states of the lighting module. It is desirable to perform.
  • the integrated control module sequentially generates control signals for the lighting module, vision module, application concentration analysis module, and application concentration determination module for each preset inspection area of the workpiece to distinguish and control the operating states. It is desirable.
  • the vision module includes at least two lenses of different types and, depending on the control signal from the integrated control module, inspects the entire area of the workpiece, a preset wide range inspection area, or a preset narrow range inspection area. It is desirable to selectively acquire image data of a region.
  • the application density analysis module detects feature points of each image data using a pre-stored image processing technique and matches pixels through feature point matching.
  • the coating concentration analysis module preferably uses a pre-stored image processing technique to create a mask based on a preset inspection area of the workpiece and perform masking processing on each image data.
  • the coating density determination module determines the normal coating state or , it is desirable to determine poor application conditions.
  • the application concentration determination module determines a defective application state in one area among the entire inspection areas of the workpiece, it is preferable to finally determine the corresponding workpiece as a defective product.
  • the coating density determination module uses the ratio of the number of pixels determined to be in a defective coating state to the total number of pixels corresponding to each area for each preset inspection area of the workpiece to determine the coating density score for the corresponding area. It is desirable to calculate and use the sum or average of the application concentration scores for the entire inspection area of the work, and if the sum or average value is outside the preset range, it is desirable to finally determine the work in question as a defective product. do.
  • the application concentration inspection system preferably further includes a result processing module that generates an external alarm when the final determination result of the workpiece by the application concentration determination module is a defective product.
  • the application state analysis method is a method of analyzing the surface application state of a workpiece to which a coating solvent is applied through an application means, in which at least two light source means are used in a lighting module by a control signal.
  • a control signal RGB Using the preset weight for the channel, the color value is calculated for each pixel constituting each image data acquired in the vision control step (S200), and the color value difference between the matching pixels by the two image data is calculated,
  • a control signal is used to determine if the application concentration value set by the application concentration analysis step (S300) exceeds the preset threshold reference value.
  • a coating concentration determination step (S400) for determining a defective coating state, and sequentially, by a control signal, for each preset inspection area of the workpiece, the lighting control step (S100), the vision control step (S200), It is desirable to repeat the operations of the application concentration analysis step (S300) and the application concentration determination step (S400).
  • the application state analysis method integrates control of the light source means to a preset basic light emission state by a control signal when performing the first operation, and controls the light source means to a basic light emission state by a control signal from the vision module. Accordingly, it is preferable to further include an overall image acquisition step (S10) of acquiring basic image data for the entire area of the workpiece to which light is irradiated.
  • the application state analysis method analyzes the basic image data by the overall image acquisition step (S10) to control the lighting module by analyzing the first method having a spectrum in which the coating solvent applied to the workpiece is reflected. It is preferable to further include a lighting control step (S20) of generating a control signal for the light emitting state and generating a control signal for a second light emitting state having a spectrum in which the coating solvent applied to the workpiece is not reflected.
  • the application state analysis method analyzes the basic image data by the overall image acquisition step (S10), and adds the first light emission state and the second light emission state of the lighting module for each preset inspection area of the workpiece.
  • the vision control step (S200) controls a vision module including at least two lenses of different types to inspect the entire workpiece area, a preset wide range inspection area, or a preset narrow range inspection area. It is desirable to selectively acquire image data.
  • the application density analysis step (S300) it is preferable to detect feature points of each image data using a pre-stored image processing technique and match pixels through feature point matching.
  • the coating concentration analysis module preferably uses a pre-stored image processing technique to create a mask based on a preset inspection area of the workpiece and perform masking processing on each image data.
  • the application density determination step (S400) uses the ratio of the number of pixels determined to be in a defective application state to the total number of pixels corresponding to each region for each preset inspection region of the work to determine the normal state of the corresponding region. It is desirable to determine the application state or poor application state.
  • the application concentration determination step (S400) when a defective application state is determined in one area among the entire inspection areas of the workpiece, it is preferable to finally determine the corresponding workpiece as a defective product.
  • the application density determination step (S400) uses the ratio of the number of pixels determined to be in a poor application state to the total number of pixels corresponding to each region for each preset inspection area of the work to determine the application of the corresponding region. Calculate the concentration score and use the sum or average of the applied concentration scores for the entire inspection area of the work. If the sum or average value is outside the preset range, the work is finally judged as defective. It is desirable to do so.
  • the coating state analysis system and method of the present invention having the above configuration control the color of the light irradiated to the workpiece in response to the color of the coating solvent, thereby determining the surface coating state of the workpiece to which the coating solvent has been applied through the coating means. It has the advantage of being able to analyze relatively accurately.
  • Figure 1 is an exemplary configuration diagram of an application state analysis system according to an embodiment of the present invention.
  • Figure 2 is an application state analysis image for one selected inspection area of a workpiece in the application state analysis system and method according to an embodiment of the present invention, and is an example image showing normal application and abnormal application.
  • Figures 3 and 4 are example images showing overall inspection result information according to the application state analysis results for each inspection area of the workpiece in the application state analysis system and method according to an embodiment of the present invention.
  • Figure 5 is a flow diagram illustrating a method for analyzing an application state according to an embodiment of the present invention.
  • a system refers to a set of components including devices, mechanisms, and means that are organized and interact regularly to perform necessary functions.
  • the application state analysis system and method controls the color of the light irradiated to the workpiece in response to the color of the application solvent, thereby determining the surface application state of the workpiece to which the application solvent has been applied through the application means. It is about a technology that can analyze relatively accurately.
  • the coating solvent described generally refers to a substance that is applied to the surface of the work to achieve a certain purpose (function) on the work, and the application concentration is applied to the surface of the work by spraying or similar methods to apply adhesives, paints, etc.
  • the ratio of the area to which the coating solvent is applied to the total area to be applied is expressed as a percentage.
  • the normal application state to be determined refers to the amount (application concentration) applied to the surface of the workpiece to the extent that there is no problem in achieving the minimum function (purpose) that the coating solvent is intended to perform.
  • the application state analysis system includes a lighting module 100, a vision module 200, an application concentration analysis module 300, an application concentration determination module 400, and an integrated It includes a control module 500, and each component is preferably included in an operation processing means including a computer, CPU, etc. to perform the operation. It is desirable for each component to be connected using PLC communication (Power Line Communication), but this is not necessarily limited to PLC communication.
  • PLC communication Power Line Communication
  • Each operation state of the lighting module 100, vision module 200, application concentration analysis module 300, and application concentration determination module 400 is controlled according to a control signal from the integrated control module 500. .
  • the integrated control module 500 generates control signals for the lighting module 100, vision module 200, application concentration analysis module 300, and application concentration determination module 400, and controls each operating state. do. That is, it is preferable that the operation of each module is controlled through the integrated control module 500, and as described above, it is preferable that each module is connected using PLC communication, etc.
  • the integrated control module 500 sequentially determines the lighting module 100, vision module 200, application concentration analysis module 300, and application concentration for each preset inspection area of the workpiece. It is desirable to generate control signals for each module 400 and control and manage the operation status of each inspection area separately.
  • the lighting module 100 preferably radiates light having different spectral components through at least two light sources capable of RGB color control. This is controlled into the first light emission state and the second light emission state according to the control signal of the integrated control module 500.
  • the lighting module 100 controls each light source means so that light is uniformly irradiated to the entire area of the workpiece.
  • a light source capable of RGB color control can control the color irradiated to the work in response to the color of the coating solvent.
  • the color can be controlled to a spectrum that well reflects the color of the coating solvent (first emission state) and a spectrum that does not reflect the color of the coating solvent (second emission state), and through this, the applied work It has the advantage of being able to easily and accurately determine the surface condition of the water.
  • the vision module 200 acquires at least two image data by photographing a workpiece irradiated with light according to each light emission state (first light emission state and second light emission state) by the lighting module 100. .
  • image data in the first light emission state and image data in the second light emission state are obtained.
  • the vision module 200 preferably includes at least two lens means of different types, one lens means consisting of a wide-angle lens or a standard lens, and a telephoto lens. It includes another lens means consisting of (zoom lens), an image sensor means connected to each lens means, and a data line.
  • the vision module 200 selects lens means for acquiring image data one by one or simultaneously according to a control signal from the integrated control module 500, and acquires image data sequentially or simultaneously.
  • the vision module 200 can acquire image data for the entire area of the workpiece, a preset wide range inspection area, or a preset narrow range inspection area, depending on the control signal from the integrated control module 500. do.
  • the application state analysis system uses a lighting module ( 100), it is desirable to control the light source means to a preset basic light emitting state.
  • the preset basic lighting state literally means basic lighting, and is not limited thereto.
  • the vision module 200 is controlled to obtain basic image data for the entire area of the workpiece to which light is irradiated according to the basic light emission state of the lighting module 100. do.
  • the integrated control module 500 analyzes the acquired basic image data to control the lighting module 100, that is, a control signal for controlling the lighting module 100 to the first lighting state, and a control signal for controlling the lighting module 100 to the second lighting state. generates a signal.
  • the integrated control module 500 analyzes the acquired basic image data, sets the light emission state having a spectrum in which the coating solvent applied to the workpiece is reflected as the first light emission state, and sets the light emission state having a spectrum in which the coating solvent applied to the workpiece is reflected.
  • the light emission state having a non-reflective spectrum is set as the second light emission state.
  • the spectrum is not limited.
  • the light that illuminates the work in response to the coating solvent is a spectrum that well reflects the color of the coating solvent. It is limited to controlling the light emission state to have a spectrum or controlling the light emission state so that the light illuminating the workpiece corresponding to the coating solvent has a spectrum that does not reflect the color of the coating solvent.
  • the lighting module 100 includes a light source means capable of color temperature control, as shown in FIG. 1, and through color temperature control, the first light emission state and the second light emission state. Additional control of the state can also be performed.
  • the light source means capable of color temperature control is composed of a combination of low color temperature lighting (Warm White) and high color temperature lighting (Cool White), so that the color temperature can be adjusted/controlled.
  • the integrated control module 500 analyzes the acquired basic image data and generates a control signal for the illumination state for each preset inspection area of the workpiece to determine the first light emission state of the lighting module 100. It is desirable to perform additional control of the second light emission state.
  • the illuminance control it is possible to control the amount of light from the light source means that irradiates light to the workpiece. As described above, the illuminance can be controlled differently for each inspection area of the workpiece, and this has the effect of accurately measuring the application concentration in each inspection area.
  • the light source means is controlled to a first light emitting state having a spectrum that well reflects the color of the coating solvent, so that the vision module 200 , the workpiece irradiated with light is photographed according to the first light emission state.
  • the light source means in accordance with the control signal of the integrated control module 500, is controlled to a second light emitting state having a spectrum in which the color of the coating solvent is not reflected, so that in the vision module 200, The work irradiated with light is photographed according to the second light emission state.
  • the application concentration analysis module 300 uses preset weights for the RGB channels to analyze each image data acquired by the vision module 200 (image data in the first emission state and image data in the second emission state). It is desirable to calculate the color value for each pixel constituting .
  • the color is analyzed based on the RGB channel for each pixel, and a preset weight is applied to the RGB channel to calculate the color value of each pixel.
  • Setting the calculated difference value for each pixel as the application density value is an analysis due to the difference in light emission state by the lighting module 100, and determines how sufficiently the coating solvent is applied through the color value difference between the two image data. It is possible to set the application concentration value to know whether it has been achieved.
  • a low application concentration value means that the application is thin. Accordingly, as shown in FIG. 2, a difference in application concentration value occurs depending on the normal application state and the defective application state.
  • the application concentration analysis module 300 performs the application area designation function, application area conversion function, inspection area masking function, and application concentration threshold setting function.
  • the application area designation function refers to the designation of an area for which the application concentration is to be inspected. This involves selecting the area to be inspected among the inspection areas preset for each workpiece and specifying the coordinate range.
  • the coordinate range can be designated as a polygon or curve. If it is designated as a curve, it is desirable to designate the coordinate range by approximating the curve to a polygon that inscribes or circumscribes the curve. .
  • the application area conversion function detects feature points of each image data using a pre-stored image processing technique and matches pixels through feature point matching.
  • the image acquired by the first light emission state The data and the image data obtained by the second light emission state have different position coordinates.
  • the image data acquired by the first light-emitting state and the image data acquired by the second light-emitting state may have different position coordinates depending on the mounting position of the image sensor. , It is desirable to detect feature points of each image data and match pixels through feature point matching.
  • HOG Heistogram of Oriented Gradients
  • a mask is created based on the inspection area to find and match feature points located on the periphery of the corresponding inspection area. It is desirable to do so. Afterwards, the accuracy of feature point matching can be improved by final setting the mask to match only feature points around the inspection area through mask dilation and erosion operations.
  • the inspection area masking function calculates the color value difference between matching pixels based on image data according to different lighting conditions (first light emission state, second light emission state), and is used in advance to enable image processing only for the inspection area. It is desirable to perform the mask function using a stored image processing technique. Through this, through masking processing of each image data, it is possible to prevent the difference value of an inspection area other than the corresponding inspection area from affecting the setting of the application density value.
  • the pre-stored image processing technique is a normal image processing technique and is not limited to its type.
  • the application concentration threshold setting function sets a standard for determining a defective application state in the application concentration determination module 400.
  • a standard sample is used to set the application concentration to around 50%.
  • the application density determination module 400 determines that the pixel is in a defective application state.
  • the preset threshold reference value is set at 50% according to the technical characteristics described above, but is not limited to this.
  • the range of application concentration is the range that can increase or decrease from the standard application concentration. For example, when 50% is set as the standard application concentration, the application concentration range (critical reference value, critical reference value) is 40 to 60% based on this. range) can be set.
  • the standard application concentration or the application concentration range using it can be set differently for each workpiece and each inspection area of the workpiece.
  • the application concentration determination module 400 determines that the application is in a defective application state when the application concentration value by the application concentration analysis module 300 for each inspection area and each pixel exceeds a preset threshold reference value.
  • the coating density determination module 400 uses the ratio of the number of pixels determined to be in a defective coating state to the total number of pixels corresponding to each inspection area for each preset inspection area of the work to determine the corresponding inspection area. It is desirable to calculate the application concentration score and determine whether the corresponding inspection area corresponds to a normal application state or a defective application state through the application concentration score using a preset judgment standard ratio.
  • the coating density score of the corresponding inspection area is the ratio of the poor coating condition. It is 70%.
  • the normal application state or defective application state of the corresponding inspection area is determined according to a preset judgment standard ratio.
  • the preset judgment standard ratio can also be set differently depending on the purpose/function of the work and the predetermined purpose/function of the coating solvent, and is not limited thereto. That is, according to the preset judgment standard ratio, the normal application state may be determined even if the ratio of the normal application state of all pixels to the corresponding inspection area is only 30%.
  • the application concentration determination module 400 determines a defective application state in one area among the entire inspection areas of the workpiece, it is preferable to finally determine the corresponding workpiece as a defective product.
  • areas 1 to 3 were analyzed as normal application conditions, but area 4 was analyzed as a defective application state, and as a result of the overall inspection of the corresponding work, it was finally determined to be a defective product.
  • the application density determination module 400 for each preset inspection area of the work, the ratio of the number of pixels determined to be in a poor application state to the total number of pixels corresponding to each inspection area is used to determine the corresponding Calculate the application concentration score of the inspection area, use the sum or average of the application concentration scores for the entire inspection area of the work, and if the sum or average value is outside the preset range, the corresponding work is inspected. The final judgment is that it is a defective product.
  • the ratio of defective coating conditions in each inspection area is summed or averaged, and if it falls outside a preset range, the corresponding work is finally determined to be defective.
  • the preset value range can also be set differently depending on the purpose/function of the workpiece and the purpose/function of the coating solvent, and is not limited thereto.
  • the application state analysis system further includes a result processing module 600.
  • the result processing module 600 may externally generate an alarm when the final determination result of the workpiece by the application concentration determination module 400 is a defective product.
  • the application state analysis system may further include a history storage module (not shown) that collects, stores, and manages all image data generated or transmitted and received in each module.
  • a history storage module (not shown) that collects, stores, and manages all image data generated or transmitted and received in each module.
  • the history storage module may collect, store, and manage time series image data recording the process of performing the operation of the application state analysis system according to an embodiment of the present invention.
  • the application state analysis system may include a robot control module, as shown in FIG. 1.
  • the robot control module is linked to the automatic application robot system and controls the robot, which is the application means, in connection with the lighting module 100 and the vision module 200 for the operation of the application state analysis system according to an embodiment of the present invention. It is desirable to perform a function.
  • the integrated control module 500 receives information about the posture, reports that the application operation is completed, and performs the task.
  • a control signal is generated for analysis of the surface application state of water.
  • the integrated control module 500 may transmit a control signal to the robot control module so that the next linked task can be performed when the analysis of the application state of one workpiece to which application has been completed is completed.
  • the application state analysis system generates result information as shown in FIG. 4 by matching the image data generated or transmitted or received in each module to a preset format, and It can be transmitted to an external monitoring module (not shown).
  • the external monitoring module may be composed of various terminals, but is not limited thereto.
  • Figure 5 is a flow diagram illustrating a method for analyzing an application state according to an embodiment of the present invention.
  • the application state analysis method includes a lighting control step (S100), a vision control step (S200), an application concentration analysis step (S300), and an application concentration determination step (S400).
  • S100 lighting control step
  • S200 vision control step
  • S300 application concentration analysis step
  • S400 application concentration determination step
  • Each step is performed through an application state analysis system operated by computational processing means, and sequentially, for each preset inspection area of the workpiece, by a control signal from the integrated control module 500, the lighting control step (S100) ), the vision control step (S200), the application concentration analysis step (S300), and the application concentration determination step (S400) are preferably performed repeatedly.
  • the lighting control step (S100) includes at least two light source means of different types in the lighting module 100, and switches the light source into a first light emission state and a second light emission state by a control signal from the integrated control module 500. Integrated control of means.
  • the first light emission state and the second light emission state are set through separate operations when performing the first operation of the application state analysis method.
  • the application state analysis method includes an overall image acquisition step (S10) and a lighting control step (S20) in order to perform the best application state analysis for each workpiece. ), further includes a lighting additional control step (S30).
  • the lighting module 100 integrates and controls the light source means to a preset basic light emission state by a control signal from the integrated control module 500, and the vision module 200 performs integrated control.
  • the control signal of the module 500 basic image data for the entire area of the workpiece to which light is irradiated is obtained according to the basic light emission state.
  • the lighting control step (S20) analyzes the basic image data from the overall image acquisition step (S10) to control the lighting module 100, and determines a first light emission state having a spectrum in which the coating solvent applied to the workpiece is reflected. A control signal is generated for and a control signal for a second light emission state having a spectrum in which the coating solvent applied to the workpiece is not reflected is generated.
  • the light emission state having a spectrum in which the coating solvent applied to the workpiece is reflected is set as the first light emission state, and the spectrum in which the coating solvent applied to the workpiece is not reflected is set as the first light emission state.
  • the light emission state is set as the second light emission state.
  • the spectrum is not limited.
  • the light that illuminates the work in response to the coating solvent is a spectrum that well reflects the color of the coating solvent. It is limited to controlling the light emission state to have a spectrum or controlling the light emission state so that the light illuminating the workpiece corresponding to the coating solvent has a spectrum that does not reflect the color of the coating solvent.
  • the lighting addition control step (S30) the basic image data from the overall image acquisition step (S10) is analyzed to determine the first light emission state of the lighting module 100 for each preset inspection area of the workpiece. and generate a control signal for the illuminance state or a control signal for the color temperature for additional control of the second light emission state.
  • the light source means capable of color temperature control is composed of a combination of low color temperature lighting (Warm White) and high color temperature lighting (Cool White), so that the color temperature can be adjusted/controlled.
  • the illuminance control it is possible to control the amount of light from the light source means that irradiates light to the workpiece. As described above, the illuminance can be controlled differently for each inspection area of the workpiece, and this has the effect of accurately measuring the application concentration in each inspection area.
  • the lighting control step (S100) controls the light source means in a first light-emitting state having a spectrum that well reflects the color of the coating solvent, or controls the light source means in a second light-emitting state having a spectrum that does not reflect the color of the coating solvent. You control the means.
  • the vision control step (S200) is performed in the vision module 200, based on a control signal from the integrated control module 500, according to each light emission state (first light emission state/second light emission state) by the lighting control step (S100). By photographing each workpiece irradiated with light, at least two image data are obtained.
  • image data in the first light emission state and image data in the second light emission state are obtained.
  • the vision control step (S200) controls a vision module including at least two lenses of different types, selects them one by one or simultaneously, and sequentially displays image data of the entire area of the workpiece or a preset inspection area. Or acquired at the same time.
  • the vision control step (S200) can acquire image data for the entire area of the workpiece, a preset large range inspection area, or a preset narrow range inspection area.
  • the application concentration analysis step (S300) is performed in the application concentration analysis module 300 by using preset weights for the RGB channels by a control signal from the integrated control module 500, and obtained by the vision control step (S200).
  • the color value is calculated for each pixel constituting each image data (image data in the first emission state and image data in the second emission state), the color value difference between the matching pixels by the two image data is calculated, and the corresponding pixel is calculated. It is set to the application concentration value of .
  • the color is analyzed based on the RGB channel for each pixel, and a preset weight is applied to the RGB channel to calculate the color value of each pixel.
  • Setting the calculated difference value for each pixel as the application density value is an analysis due to the difference in luminous state due to the lighting control step (S100), and determines how sufficiently the coating solvent is applied through the color value difference between the two image data. It is possible to set the application concentration value to know whether the application has been achieved.
  • a low application concentration value means that the application is thin. Accordingly, as shown in FIG. 2, a difference in application concentration value occurs depending on the normal application state and the defective application state.
  • the application concentration analysis step (S300) performs the application area designation function, application area conversion function, inspection area masking function, and application concentration threshold setting function.
  • the application area designation function refers to the designation of an area for which the application concentration is to be inspected. This involves selecting the area to be inspected among the inspection areas preset for each workpiece and specifying the coordinate range.
  • the coordinate range can be designated as a polygon or curve. If it is designated as a curve, it is desirable to designate the coordinate range by approximating the curve to a polygon that inscribes or circumscribes the curve. .
  • the application area conversion function detects feature points of each image data using a pre-stored image processing technique and matches pixels through feature point matching.
  • the image acquired by the first light emission state The data and the image data obtained by the second light emission state have different position coordinates.
  • the image data acquired by the first light-emitting state and the image data acquired by the second light-emitting state may have different position coordinates depending on the mounting position of the image sensor. , It is desirable to detect feature points of each image data and match pixels through feature point matching.
  • HOG Heistogram of Oriented Gradients
  • a mask is created based on the inspection area to find and match feature points located on the periphery of the corresponding inspection area. It is desirable to do so. Afterwards, the accuracy of feature point matching can be improved by final setting the mask to match only feature points around the inspection area through mask dilation and erosion operations.
  • the inspection area masking function calculates the color value difference between matching pixels based on image data according to different lighting conditions (first light emission state, second light emission state), and is used in advance to enable image processing only for the inspection area. It is desirable to perform the mask function using a stored image processing technique. Through this, through masking processing of each image data, it is possible to prevent the difference value of an inspection area other than the corresponding inspection area from affecting the setting of the application density value.
  • the pre-stored image processing technique is a normal image processing technique and is not limited to its type.
  • the application concentration threshold setting function sets a standard for determining a defective application state in the application concentration determination step (S400).
  • a standard sample is used to set the application concentration to around 50%.
  • the application concentration determination step (S400) is performed in the application concentration determination module 400 when the application concentration value set by the application concentration analysis step (S300) deviates from the preset threshold reference value by a control signal from the integrated control module 500. In this case, it is determined that it is in a defective application state.
  • the application density determination step (S400) if the application density value set for each pixel exceeds a preset threshold reference value, the corresponding pixel is determined to be in a defective application state.
  • the preset threshold reference value is set at 50% according to the technical characteristics described above, but is not limited to this.
  • the range of application concentration is the range that can increase or decrease from the standard application concentration. For example, when 50% is set as the standard application concentration, the application concentration range (critical reference value, critical reference value) is 40 to 60% based on this. range) can be set.
  • the standard application concentration or the application concentration range using it can be set differently for each workpiece and each inspection area of the workpiece.
  • the application density determination step (S400) determines the application of the corresponding inspection area by using the ratio of the number of pixels determined to be in a defective application state to the total number of pixels corresponding to each inspection area for each preset inspection area of the workpiece. It is desirable to calculate the concentration score and determine whether the corresponding inspection area corresponds to a normal application state or a defective application state through the application concentration score using a preset judgment standard ratio.
  • the coating density score of the corresponding inspection area is the ratio of the poor coating condition. It is 70%.
  • the normal application state or defective application state of the corresponding inspection area is determined according to a preset judgment standard ratio.
  • the preset judgment standard ratio can also be set differently depending on the purpose/function of the work and the predetermined purpose/function of the coating solvent, and is not limited thereto. That is, according to the preset judgment standard ratio, the normal application state may be determined even if the ratio of the normal application state of all pixels to the corresponding inspection area is only 30%.
  • areas 1 to 3 were analyzed as normal application conditions, but area 4 was analyzed as a defective application state, and as a result of the overall inspection of the corresponding work, it was finally determined to be a defective product.
  • the coating density score for the corresponding inspection area is calculated using the ratio of the number of pixels determined to be in a defective coating state to the total number of pixels corresponding to each inspection area. And, using the sum or average of the application concentration scores for the entire inspection area of the work, if the sum or average is outside the preset range, the work in question is finally determined as a defective product.
  • the ratio of defective coating conditions in each inspection area is summed or averaged, and if it falls outside a preset range, the corresponding work is finally determined to be defective.
  • the preset value range can also be set differently depending on the purpose/function of the workpiece and the purpose/function of the coating solvent, and is not limited thereto.
  • the application state analysis method can generate an external alarm when the final determination result of the workpiece in the application concentration determination step (S400) is a defective product.

Landscapes

  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Immunology (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)

Abstract

본 발명은 도포 상태 분석 시스템 및 그 방법에 관한 것으로서, 더욱 상세하게는, 도포 수단을 통해 도포용제가 도포된 작업물의 표면 도포 상태를 분석할 수 있는 기술에 관한 것이다. 특히, 도포용제의 색상에 대응하여 작업물에 조사되는 조명의 색상을 제어함으로써, 작업물의 표면 도포 상태의 분석 결과에 대한 정확도 및 신뢰도를 향상시킬 수 있는 도포 상태 분석 시스템 및 그 방법에 관한 것이다.

Description

도포 상태 분석 시스템 및 그 방법
본 발명은 도포 상태 분석 시스템 및 그 방법에 관한 것으로, 더욱 상세하게는 작업물(피도포체)의 표면에 도포용제(도포액)가 기준량 이상 도포되어, 도포 후, 최소한의 요구 기능을 발휘하는데 문제가 없는지 도포 상태를 분석하는 도포 상태 분석 시스템 및 그 방법에 관한 것이다.
특히, 도포용제의 색상에 대응하여 작업물에 조사되는 조명의 색상을 제어함으로써, 작업물의 표면 도포 상태의 분석 결과에 대한 정확도 및 신뢰도를 향상시킬 수 있는 도포 상태 분석 시스템 및 그 방법에 관한 것이다.
일반적으로 작업물의 표면에 도포되는 도포용제의 도포 균일성을 검사/판단하여, 도포 상태를 분석할 수 있으며, 이를 위해 작업물의 평면 이미지를 획득하거나, 단층 이미지를 획득하여, 도포 상태의 균일성 검사를 수행하고 있다.
그렇지만, 작업물의 표면에 도포되는 도포용제가 스프레이 형태인 경우에 미세한 입자로 인하여 도포 여부의 판별이 어려우며, 조명 및 주변 빛에 따라 영향을 받으며, 일반적으로 도포한 면 뿐 아니라 작업물이 위치한 배경(주변 환경)을 통해서 빛이 반사되므로 도포 여부에 따른 차이를 구하기가 쉽지 않다. 결국은 정확한 이미지를 획득할 수 없어 균일성 검사의 정확도가 낮아지는 문제점이 있다. 또한, 작업물의 고유의 특징(형태 등)으로 인해 이미지 획득을 위한 광 조사시, 밝기 차이가 발생하여, 이 역시도 정확한 이미지를 획득할 수 없어 균일성 검사의 정확도가 낮아지는 문제점이 있다.
또한, 선행기술(대한민국 등록특허공보 제10-1640425호)에서는 실러 도포 상태를 촬영한 다수의 이미지를 기반으로 실러 상태를 검사할 때, 각 이미지마다 매번 검사 영역을 설정하지 않고, 단 1회의 검사영역 설정만 하더라도, 모든 이미지에 대한 검사영역 설정이 자동으로 이루어질 수 있도록 하는 기술을 개시하고 있다.
이 역시도, 획득한 이미지를 획득하는 과정에서 나타날 수 있는 문제점에 대해서는 전혀 고려하지 않고 있다.
본 발명은 상기한 바와 같은 종래 기술의 문제점을 해결하기 위하여 안출된 것으로, 본 발명의 목적은 도포용제의 색상에 대응하여 작업물에 조사되는 조명의 색상을 제어함으로써, 작업물의 표면 도포 상태의 비교적 정확하게 분석할 수 있는 도포 상태 분석 시스템 및 그 방법을 제공하는 것이다.
본 발명의 일 실시예에 따른 도포 상태 분석 시스템은, 도포 수단을 통해 도포용제가 도포된 작업물의 표면 도포 상태를 분석하는 시스템에 있어서, 적어도 두 개의 광원 수단을 통해서, 제1 발광 상태 및 제2 발광 상태로, 서로 상이한 스펙트럼 성분을 갖는 각각의 광이 조사되도록 통합 제어하는 조명 모듈, 상기 조명 모듈에 의한 각 발광 상태에 따라 광이 조사되는 작업물을 각각 촬영하여, 적어도 두 개의 이미지 데이터를 획득하는 비전 모듈, RGB 채널에 대해 기설정된 가중치를 이용하여, 각 이미지 데이터를 구성하는 픽셀마다 색상값을 계산하고, 두 이미지 데이터에 의한 매칭 픽셀 간의 색상값 차이를 연산하여, 해당 픽셀의 도포 농도값으로 설정하는 도포 농도 분석 모듈, 설정한 도포 농도값이 기설정된 임계 기준값을 벗어날 경우, 불량 도포 상태로 판정하는 도포 농도 판별 모듈 및 상기 조명 모듈, 비전 모듈, 도포 농도 분석 모듈 및 도포 농도 판별 모듈에 대한 제어 신호를 생성하여, 각 동작 상태를 제어하는 통합 제어 모듈을 포함하는 것이 바람직하다.
더 나아가, 상기 통합 제어 모듈은 최초 동작 수행 시, 기설정된 기본 발광 상태로 상기 조명 모듈을 제어하고, 상기 비전 모듈을 제어하여 기본 발광 상태에 따라 광이 조사되는 작업물의 전체 영역에 대한 기본 이미지 데이터를 획득하는 것이 바람직하다.
더 나아가, 상기 통합 제어 모듈은 상기 기본 이미지 데이터를 분석하여, 상기 조명 모듈의 제어를 위한, 작업물에 도포된 도포용제가 반사되는 스펙트럼을 갖는 제1 발광 상태에 대한 제어 신호를 생성하고, 작업물에 도포된 도포용제가 반사되지 않는 스펙트럼을 갖는 제2 발광 상태에 대한 제어 신호를 생성하는 것이 바람직하다.
더 나아가, 상기 통합 제어 모듈은 상기 기본 이미지 데이터를 분석하여, 작업물의 기설정된 검사 영역 별로, 조도 상태에 대한 제어 신호를 생성하여, 상기 조명 모듈의 제1 발광 상태와 제2 발광 상태의 추가 제어를 수행하는 것이 바람직하다.
더 나아가, 상기 통합 제어 모듈은 작업물의 기설정된 검사 영역 별로, 순차적으로, 상기 조명 모듈, 비전 모듈, 도포 농도 분석 모듈 및 도포 농도 판별 모듈에 대한 제어 신호를 생성하여, 동작 상태를 구분하여 제어하는 것이 바람직하다.
더 나아가, 상기 비전 모듈은 서로 다른 종류의 적어도 두 개의 렌즈를 포함하며, 상기 통합 제어 모듈의 제어 신호에 따라, 작업물의 전체 영역이나, 기설정된 넓은 범위의 검사 영역 또는, 기설정된 좁은 범위의 검사 영역의 이미지 데이터를 선택적으로 획득하는 것이 바람직하다.
더 나아가, 상기 도포 농도 분석 모듈은 기저장된 영상 처리 기법을 이용하여, 각 이미지 데이터의 특징점을 검출하여, 특징점 매칭을 통해 픽셀을 매칭시키는 것이 바람직하다.
더 나아가, 상기 도포 농도 분석 모듈은 기저장된 영상 처리 기법을 이용하여, 작업물의 기설정된 검사 영역을 기준으로 마스크를 생성하여, 각 이미지 데이터의 마스킹 처리를 수행하는 것이 바람직하다.
더 나아가, 상기 도포 농도 판별 모듈은 작업물의 기설정된 검사 영역 별로, 각 영역에 해당하는 전체 픽셀의 수 대비 불량 도포 상태로 판정된 픽셀의 수의 비율을 이용하여, 해당하는 영역의 정상 도포 상태 또는, 불량 도포 상태를 판단하는 것이 바람직하다.
더 나아가, 상기 도포 농도 판별 모듈은 작업물의 전체 검사 영역 중 어느 한 영역에 의한 불량 도포 상태 판단이 이루어질 경우, 해당하는 작업물을 불량품으로 최종 판정하는 것이 바람직하다.
더 나아가, 상기 도포 농도 판별 모듈은 작업물의 기설정된 검사 영역 별로, 각 영역에 해당하는 전체 픽셀의 수 대비 불량 도포 상태로 판정된 픽셀의 수의 비율을 이용하여, 해당하는 영역의 도포 농도 점수를 연산하고, 작업물의 전체 검사 영역에 대한 도포 농도 점수의 합산값 또는, 평균값을 이용하여, 합산값 또는, 평균값이 기설정된 소정값 범위를 벗어날 경우, 해당하는 작업물을 불량품으로 최종 판정하는 것이 바람직하다.
더 나아가, 상기 도포 농도 검사 시스템은 상기 도포 농도 판별 모듈에 의한 작업물의 최종 판정 결과가 불량품일 경우, 외부로 알람을 발생시키는 결과 처리 모듈을 더 포함하는 것이 바람직하다.
본 발명의 일 실시예에 따른 도포 상태 분석 방법은, 도포 수단을 통해 도포용제가 도포된 작업물의 표면 도포 상태를 분석하는 방법에 있어서, 조명 모듈에서, 제어 신호에 의해, 적어도 두 개의 광원 수단을 통해서, 제1 발광 상태 및 제2 발광 상태로, 서로 상이한 스펙트럼 성분을 갖는 각각의 광이 조사되도록 상기 광원 수단을 통합 제어하는 조명 제어 단계(S100), 비전 모듈에서, 제어 신호에 의해, 상기 조명 제어 단계(S100)에 의한 각 발광 상태에 따라 광이 조사되는 작업물을 각각 촬영하여, 적어도 두 개의 이미지 데이터를 획득하는 비전 제어 단계(S200), 도포 농도 분석 모듈에서, 제어 신호에 의해, RGB 채널에 대해 기설정된 가중치를 이용하여, 상기 비전 제어 단계(S200)에 의해 획득한 각 이미지 데이터를 구성하는 픽셀마다 색상값을 계산하고, 두 이미지 데이터에 의한 매칭 픽셀 간의 색상값 차이를 연산하여, 해당 픽셀의 도포 농도값으로 설정하는 도포 농도 분석 단계(S300) 및 도포 농도 판별 모듈에서, 제어 신호에 의해, 상기 도포 농도 분석 단계(S300)에 의해 설정한 도포 농도값이 기설정된 임계 기준값을 벗어날 경우, 불량 도포 상태로 판정하는 도포 농도 판별 단계(S400)를 포함하며, 제어 신호에 의해, 작업물의 기설정된 검사 영역 별로, 순차적으로, 상기 조명 제어 단계(S100), 비전 제어 단계(S200), 도포 농도 분석 단계(S300) 및 도포 농도 판별 단계(S400)의 동작을 반복 수행하는 것이 바람직하다.
더 나아가, 상기 도포 상태 분석 방법은 최초 동작 수행 시, 조명 모듈에서, 제어 신호에 의해, 기설정된 기본 발광 상태로 상기 광원 수단을 통합 제어하고, 비전 모듈에서, 제어 신호에 의해, 기본 발광 상태에 따라 광이 조사되는 작업물의 전체 영역에 대한 기본 이미지 데이터를 획득하는 전체 이미지 획득 단계(S10)를 더 포함하는 것이 바람직하다.
더 나아가, 상기 도포 상태 분석 방법은 상기 전체 이미지 획득 단계(S10)에 의한 상기 기본 이미지 데이터를 분석하여, 상기 조명 모듈의 제어를 위한, 작업물에 도포된 도포용제가 반사되는 스펙트럼을 갖는 제1 발광 상태에 대한 제어 신호를 생성하고, 작업물에 도포된 도포용제가 반사되지 않는 스펙트럼을 갖는 제2 발광 상태에 대한 제어 신호를 생성하는 조명 제어 단계(S20)를 더 포함하는 것이 바람직하다.
더 나아가, 상기 도포 상태 분석 방법은 상기 전체 이미지 획득 단계(S10)에 의한 상기 기본 이미지 데이터를 분석하여, 작업물의 기설정된 검사 영역 별로, 상기 조명 모듈의 제1 발광 상태와 제2 발광 상태의 추가 제어를 위한, 조도 상태에 대한 제어 신호를 생성하는 조명 추가 제어 단계(S30)를 더 포함하는 것이 바람직하다.
더 나아가, 상기 비전 제어 단계(S200)는 서로 다른 종류의 적어도 두 개의 렌즈를 포함하는 비전 모듈을 제어하여, 작업물 전체 영역이나 기설정된 넓은 범위의 검사 영역 또는, 기설정된 좁은 범위의 검사 영역에 대한 이미지 데이터를 선택적으로 획득하는 것이 바람직하다.
더 나아가, 상기 도포 농도 분석 단계(S300)는 기저장된 영상 처리 기법을 이용하여, 각 이미지 데이터의 특징점을 검출하여, 특징점 매칭을 통해 픽셀을 매칭시키는 것이 바람직하다.
더 나아가, 상기 도포 농도 분석 모듈은 기저장된 영상 처리 기법을 이용하여, 작업물의 기설정된 검사 영역을 기준으로 마스크를 생성하여, 각 이미지 데이터의 마스킹 처리를 수행하는 것이 바람직하다.
더 나아가, 상기 도포 농도 판별 단계(S400)는 작업물의 기설정된 검사 영역 별로, 각 영역에 해당하는 전체 픽셀의 수 대비 불량 도포 상태로 판정된 픽셀의 수의 비율을 이용하여, 해당하는 영역의 정상 도포 상태 또는, 불량 도포 상태를 판단하는 것이 바람직하다.
더 나아가, 상기 도포 농도 판별 단계(S400)는 작업물의 전체 검사 영역 중 어느 한 영역에 의한 불량 도포 상태 판단이 이루어질 경우, 해당하는 작업물을 불량품으로 최종 판정하는 것이 바람직하다.
더 나아가, 상기 도포 농도 판별 단계(S400)는 작업물의 기설정된 검사 영역 별로, 각 영역에 해당하는 전체 픽셀의 수 대비 불량 도포 상태로 판정된 픽셀의 수의 비율을 이용하여, 해당하는 영역의 도포 농도 점수를 연산하고, 작업물의 전체 검사 영역에 대한 도포 농도 점수의 합산값 또는, 평균값을 이용하여, 합산값 또는, 평균값이 기설정된 소정값 범위를 벗어날 경우, 해당하는 작업물을 불량품으로 최종 판정하는 것이 바람직하다.
상기와 같은 구성에 의한 본 발명의 도포 상태 분석 시스템 및 그 방법은 도포용제의 색상에 대응하여 작업물에 조사되는 조명의 색상을 제어함으로써, 도포 수단을 통해 도포용제가 도포된 작업물의 표면 도포 상태의 비교적 정확하게 분석할 수 있는 장점이 있다.
도 1은 본 발명의 일 실시예에 따른 도포 상태 분석 시스템의 구성 예시도이다.
도 2는 본 발명의 일 실시예에 따른 도포 상태 분석 시스템 및 그 방법에서 작업물의 선택되는 어느 하나의 검사 영역에 대한 도포 상태 분석 이미지로서, 정상 도포와 비정상 도포를 나타낸 예시 이미지이다.
도 3 및 도 4는 본 발명의 일 실시예에 따른 도포 상태 분석 시스템 및 그 방법에서 작업물의 각 검사 영역 별 도포 상태 분석 결과에 따른 전체 검사 결과 정보를 나타낸 예시 이미지이다.
도 5는 본 발명의 일 실시예에 따른 도포 상태 분석 방법을 나타낸 순서 예시도이다.
이하 첨부한 도면들을 참조하여 본 발명의 도포 상태 분석 시스템 및 그 방법을 상세히 설명한다. 다음에 소개되는 도면들은 당업자에게 본 발명의 사상이 충분히 전달될 수 있도록 하기 위해 예로서 제공되는 것이다. 따라서, 본 발명은 이하 제시되는 도면들에 한정되지 않고 다른 형태로 구체화될 수도 있다. 또한, 명세서 전반에 걸쳐서 동일한 참조번호들은 동일한 구성요소들을 나타낸다.
이 때, 사용되는 기술 용어 및 과학 용어에 있어서 다른 정의가 없다면, 이 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 통상적으로 이해하고 있는 의미를 가지며, 하기의 설명 및 첨부 도면에서 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 설명은 생략한다.
더불어, 시스템은 필요한 기능을 수행하기 위하여 조직화되고 규칙적으로 상호 작용하는 장치, 기구 및 수단 등을 포함하는 구성 요소들의 집합을 의미한다.
본 발명의 일 실시예에 따른 도포 상태 분석 시스템 및 그 방법은, 도포용제의 색상에 대응하여 작업물에 조사되는 조명의 색상을 제어함으로써, 도포 수단을 통해 도포용제가 도포된 작업물의 표면 도포 상태의 비교적 정확하게 분석할 수 있는 기술에 관한 것이다.
전반적으로 기재되어 있는 도포용제는 작업물의 표면에 도포되어, 작업물에 소정의 목적(기능)을 달성하기 위한 물질을 의미하고, 도포 농도는 스프레이나 이와 유사한 방식으로 작업물의 표면에 접착제나 페인트 등의 도포용제가 도포됨에 따라, 전체 도포되어야 하는 면적에서 도포용제가 도포된 면적이 차지하는 비율을 백분율로 나타낸 것이다. 또한, 판별하고자 하는 정상 도포 상태는 도포용제가 수행하고자 하는 최소한의 기능(목적)을 달성하는데 문제가 없을 정도로 작업물의 표면에 도포된 양(도포 농도)을 의미한다.
이러한 점을 고려하여, 본 발명의 일 실시예에 따른 도포 상태 분석 시스템에 대해서 설명하고자 한다.
본 발명의 일 실시예에 따른 도포 상태 분석 시스템은 도 1에 도시된 바와 같이, 조명 모듈(100), 비전 모듈(200), 도포 농도 분석 모듈(300), 도포 농도 판별 모듈(400) 및 통합 제어 모듈(500)을 포함하게 되며, 각 구성들은 컴퓨터, CPU 등을 포함하는 연산 처리 수단에 포함되어 동작을 수행하는 것이 바람직하다. 각 구성들은 PLC 통신(Power Line Communication)을 이용하여 연결되는 것이 바람직하나, 반드시 PLC 통신으로 한정하는 것은 아니다.
각 구성에 대해서 자세히 알아보자면,
조명 모듈(100), 비전 모듈(200), 도포 농도 분석 모듈(300) 및 도포 농도 판별 모듈(400)은 통합 제어 모듈(500)에 의한 제어 신호에 따라, 각 동작 상태의 제어가 이루어지게 된다.
즉, 통합 제어 모듈(500)은 조명 모듈(100), 비전 모듈(200), 도포 농도 분석 모듈(300) 및 도포 농도 판별 모듈(400)에 대한 제어 신호를 생성하며, 각 동작 상태를 제어하게 된다. 즉, 각 모듈들의 동작을 통합 제어 모듈(500)을 통해서 제어되는 것이 바람직하며, 상술한 바와 같이, PLC 통신 등을 이용하여 각 모듈과 연결되는 것이 바람직하다.
더불어, 통합 제어 모듈(500)은 각 동작 상태를 제어함에 있어서, 작업물의 미리 설정된 검사 영역 별로, 순차적으로 조명 모듈(100), 비전 모듈(200), 도포 농도 분석 모듈(300) 및 도포 농도 판별 모듈(400)에 대한 각각의 제어 신호를 생성하여, 각 검사 영역 별 동작 상태를 구분하여 제어 및 관리하는 것이 바람직하다.
조명 모듈(100)은 RGB 컬러 제어가 가능한 적어도 두 개의 광원 수단을 통해서, 서로 상이한 스펙트럼 성분을 갖는 각각의 광을 조사하는 것이 바람직하다. 이는 통합 제어 모듈(500)의 제어 신호에 따라 제1 발광 상태 및 제2 발광 상태로 제어되게 된다.
조명 모듈(100)은 각 광원 수단을 제어하여, 작업물의 전 영역에 대하여 균일하게 광이 조사될 수 있도록 제어하는 것이 바람직하다.
RGB 컬러 제어가 가능한 광원 수단은 도포용제의 색상에 대응하여 작업물에 조사되는 색상을 제어할 수 있다. 상세하게는, 도포용제의 색상을 잘 반사하는 스펙트럼(제1 발광 상태)으로, 도포용제의 색상을 반사하지 않는 스펙트럼(제2 발광 상태)으로 색상을 제어할 수 있으며, 이를 통해서, 도포된 작업물의 표면 상태를 용이하고 정확하게 판별할 수 있는 장점이 있다.
비전 모듈(200)은 조명 모듈(100)에 의한 각 발광 상태(제1 발광 상태 및 제2 발광 상태)에 따라 광이 조사되는 작업물을 촬영하여, 적어도 두 개의 이미지 데이터를 획득하는 것이 바람직하다.
즉, 제1 발광 상태에서의 이미지 데이터와 제2 발광 상태에서의 이미지 데이터를 획득하게 된다.
이 때, 비전 모듈(200)는 도 1에 도시된 바와 같이, 서로 다른 종류의 적어도 두 개의 렌즈 수단을 포함하는 것이 바람직하며, 광각 렌즈 또는, 표준 렌즈로 구성되는 하나의 렌즈 수단과, 망원 렌즈(줌 렌즈)로 구성되는 또다른 하나의 렌즈 수단, 각 렌즈 수단에 연결된 이미지 센서 수단 및 데이터 라인을 포함하게 된다. 비전 모듈(200)은 통합 제어 모듈(500)의 제어 신호에 따라, 이미지 데이터를 획득하기 위한 렌즈 수단을 하나씩 또는 동시에 선택하여, 이미지 데이터를 순차적으로 또는 동시에 획득하게 된다.
이를 통해서, 광각 렌즈 또는, 표준 렌즈로 구성되는 하나의 렌즈 수단이 선택될 경우, 작업물의 전체 영역에 대한 이미지 데이터의 획득이 가능하며, 망원 렌즈로 구성되는 또다른 하나의 렌즈 수단이 선택될 경우, 작업물의 전체 영역을 나눈 미리 설정된 검사 영역 별 이미지 데이터의 획득이 가능하다. 즉, 비전 모듈(200)은 통합 제어 모듈(500)의 제어 신호에 따라, 작업물의 전체 영역이나, 미리 설정된 넓은 범위의 검사 영역 또는, 미리 설정된 좁은 범위의 검사 영역에 대한 이미지 데이터의 획득이 가능하다.
이 때, 본 발명의 일 실시예에 따른 도포 상태 분석 시스템은, 각 작업물 별로 최상의 도포 상태 분석을 수행하기 위하여, 최초 동작 수행 시, 통합 제어 모듈(500)의 제어 신호에 따라, 조명 모듈(100)을 제어하여, 미리 설정된 기본 발광 상태로 광원 수단을 제어하는 것이 바람직하다.
이 때, 미리 설정된 기본 발광 상태란, 말 그대로 기본 조명을 의미하며, 이에 대해서 한정하는 것은 아니다.
이어서, 통합 제어 모듈(500)의 제어 신호에 따라, 비전 모듈(200)을 제어하여, 조명 모듈(100)의 기본 발광 상태에 따라 광이 조사되는 작업물의 전체 영역에 대한 기본 이미지 데이터를 획득하게 된다.
통합 제어 모듈(500)은 획득한 기본 이미지 데이터를 분석하여, 조명 모듈(100)의 제어를 위한, 다시 말하자면, 제1 발광 상태로 제어하기 위한 제어 신호와, 제2 발광 상태로 제어하기 위한 제어 신호를 생성하게 된다.
이를 위해, 통합 제어 모듈(500)은 획득한 기본 이미지 데이터를 분석하여, 작업물에 도포된 도포용제가 반사되는 스펙트럼을 갖는 발광 상태를 제1 발광 상태로 설정하고, 작업물에 도포된 도포용제가 반사되지 않는 스펙트럼을 갖는 발광 상태를 제2 발광 상태로 설정하게 된다.
각 발광 상태의 설정 스펙트럼은 작업물에 도포된 도포용제에 따라 상이하기 때문에, 스펙트럼에 대해서 한정하는 것은 아니며, 다만, 도포용제에 대응되어 작업물을 비추는 조명이 도포용제의 색상을 잘 반사하는 스펙트럼을 갖도록 발광 상태를 제어하거나 또는, 도포용제에 대응되어 작업물을 비추는 조명이 도포용제의 색상을 반사하지 않는 스펙트럼을 갖도록 발광 상태를 제어하는 것에 대해서 한정하는 것이다.
이를 위해, 조명 모듈(100)은 상술한 RGB 컬러 제어가 가능한 광원 수단 외에, 도 1에 도시된 바와 같이, 색온도 제어가 가능한 광원 수단을 포함하여 색온도 제어를 통해서, 제1 발광 상태와 제2 발광 상태의 추가 제어를 수행할 수도 있다.
색온도 제어가 가능한 광원 수단은 낮은 색온도 조명(Warm White)과 높은 색온도 조명(Cool White)의 조합을 활용하여 구성되어, 색온도를 조절/제어할 수 있다. 이를 통해서, 연속적인 스펙트럼에서 조명 스펙트럼의 분포의 변화를 유도할 수 있는 장점이 있다.
또한, 작업물의 윤곽 형태, 작업물의 표면 재질 등에 따라, 동일한 광이 조사되더라도 검사 영역 별 채도 차이가 발생할 수밖에 없다. 이러한 점을 고려하여, 통합 제어 모듈(500)은 획득한 기본 이미지 데이터를 분석하여, 작업물의 미리 설정된 검사 영역 별로, 조도 상태에 대한 제어 신호를 생성하여, 조명 모듈(100)의 제1 발광 상태와 제2 발광 상태의 추가 제어를 수행하는 것이 바람직하다.
이러한 조도 제어를 통해서 작업물에 광을 조사하는 광원 수단의 광량을 제어할 수 있다. 상술한 바와 같이, 작업물의 검사 영역 별로, 조도를 상이하게 제어할 수 있으며, 이를 통해서 각 검사 영역에 도포 농도를 정확하게 측정할 수 있는 효과가 있다.
상세하게는, 광원 수단에서 조사된 광이 작업물에 반사되어 이미지 센서(카메라 등)로 들어가는 광이 많을수록 동일한 도포 농도를 가진 표면이라고 할지라도 높은 채도를 갖게 된다. 이러한 점을 해소하기 위하여, 조도 제어를 통해서, 각 검사 영역 별로 상이한 채도를 균일하게 보정하는 것이 바람직하다.
이를 통해서, 조명 모듈(100)에서, 통합 제어 모듈(500)의 제어 신호에 따라, 도포용제의 색상을 잘 반사하는 스펙트럼을 갖는 제1 발광 상태로 광원 수단을 제어함으로써, 비전 모듈(200)에서, 제1 발광 상태에 따라 광이 조사되는 작업물을 촬영하게 된다. 더불어, 조명 모듈(100)에서, 통합 제어 모듈(500)의 제어 신호에 따라, 도포용제의 색상이 반사되지 않는 스펙트럼을 갖는 제2 발광 상태로 광원 수단을 제어함으로써, 비전 모듈(200)에서, 제2 발광 상태에 따라 광이 조사되는 작업물을 촬영하게 된다.
도포 농도 분석 모듈(300)은 RGB 채널에 대해 미리 설정된 가중치를 이용하여, 비전 모듈(200)에 의해 획득한 각 이미지 데이터(제1 발광 상태에서의 이미지 데이터와 제2 발광 상태에서의 이미지 데이터)를 구성하는 픽셀마다 색상값을 계산하는 것이 바람직하다.
즉, 각 픽셀마다 RGB 채널을 기준으로 색상을 분석하여, RGB 채널에 대해 미리 설정된 가중치를 적용하여, 각 픽셀의 색상값을 계산하게 된다.
이 때, 각 이미지 데이터 별 픽셀의 색상값이 계산되기 때문에, 두 개의 이미지 데이터에 의한 매칭되는 픽셀 간의 색상값 차이를 연산할 수 있다.
연산한 차이값을 해당하는 픽셀의 도포 농도값으로 설정하는 것이 바람직하다.
각 픽셀 별 연산한 차이값을 도포 농도값으로 설정하는 것은, 조명 모듈(100)에 의한 발광 상태 차이로 인한 분석으로, 두 개의 이미지 데이터에 의한 색상값 차이를 통해서, 얼마나 충분히 도포용제의 도포가 이루어졌는지 알 수 있는 도포 농도값의 설정이 가능하다.
일 예를 들자면, 도포용제가 충분히 도포되지 않을 경우, 제1 발광 상태에 의한 이미지 데이터의 색상값과 제2 발광 상태에 의한 이미지 데이터의 색상값 차이가 거의 발생하지 않기 때문에, 도포 농도값이 낮게 설정된다. 즉, 도포 농도값이 낮다는 것은, 얇은 도포 상태임을 의미한다. 이에 따라, 도 2에 도시된 바와 같이, 정상 도포 상태와 불량 도포 상태에 따른 도포 농도값 차이가 발생하게 된다.
상세하게는, 도포 농도 분석 모듈(300)은 도 1에 도시된 바와 같이, 도포 영역 지정 기능, 도포 영역 변환 기능, 검사 영역 마스킹 기능 및 도포농도 임계값 설정 기능을 수행하게 된다.
도포 영역 지정 기능은, 도포 농도를 검사하고자 하는 영역 지정을 의미하며, 이는, 사전에 각 작업물 별로 미리 설정된 검사 영역 중 검사하고자 하는 영역을 선택하고, 좌표범위를 지정하게 된다.
이 때, 각 작업물 별로 미리 설정된 검사 영역에 따라, 다각형 또는 곡선으로 좌표범위의 지정이 가능하며, 곡선으로 지정한 경우에는, 곡선을 내접하거나 외접하는 다각형으로 근사화하여 좌표범위를 지정하는 것이 바람직하다.
도포 영역 변환 기능은, 미리 저장된 영상 처리 기법을 이용하여, 각 이미지 데이터의 특징점을 검출하여, 특징점 매칭을 통해 픽셀을 매칭시키는 것이 바람직하다.
특히, 작업물의 작업 과정에 따라, 작업물이 고정되어 있지 않고, 도포 수단을 통해 도포용제가 도포되는 과정에 작업물 자체가 컨베이어 벨트 등을 통해서 이동될 경우, 제1 발광 상태에 의해 획득된 이미지 데이터와 제2 발광 상태에 의해 획득된 이미지 데이터가 상이한 위치 좌표를 갖게 된다.
이 때, 각 이미지 데이터의 특징점을 검출하여, 특징점 매칭을 통해 픽셀을 매칭시키는 것이 바람직하다.
물론, 작업물이 고정된 상태에서 제1 발광 상태에 의해 획득된 이미지 데이터와 제2 발광 상태에 의해 획득된 이미지 데이터가 획득되더라도, 이미지 센서의 장착 위치에 따라, 상이한 위치 좌표를 갖을 수 있기 때문에, 각 이미지 데이터의 특징점을 검출하여, 특징점 매칭을 통해 픽셀을 매칭시키는 것이 바람직하다.
미리 저장된 영상 처리 기법으로는, 코너점과 같은 기본 특징을 검출하거나, HOG(Histogram of Oriented Gradients)와 같은 복잡한 특징을 검출하는 기법을 적용하는 것이 바람직하며, 통상의 영상 처리 기법으로 그 종류에 대해서 한정하는 것은 아니다.
다만, 특징점을 검출한 후, 특징점 매칭을 통해 픽셀을 매칭시키는 과정에서, 특징점 매칭의 오류를 줄이기 위하여, 해당하는 검사 영역의 주변부에 위치한 특징점들을 찾아서 매칭할 수 있도록 검사 영역을 바탕으로 마스크를 생성하는 것이 바람직하다. 이 후, 마스크의 팽창(dilation)과 침식(erosion) 연산을 통하여 검사 영역 주변의 특징점 만을 매칭시키도록 마스크를 최종 설정함으로써, 특징점 매칭의 정확도를 향상시킬 수 있다.
검사 영역 마스킹 기능은, 상이한 조명 발광 상태(제1 발광 상태, 제2 발광 상태)에 따른 이미지 데이터에 의한 매칭 픽셀 간의 색상값 차이를 연산함에 있어서, 검사 영역만을 대상으로 영상 처리가 이루어질 수 있도록 미리 저장된 영상 처리 기법을 이용하여, 마스크 기능을 수행하는 것이 바람직하다. 이를 통해서, 각 이미지 데이터의 마스킹 처리를 통해, 해당하는 검사 영역이 아닌 다른 검사 영역의 차이값이 도포 농도값 설정에 영향을 미치지 않도록 할 수 있다.
이 때, 미리 저장된 영상 처리 기법은 통상의 영상 처리 기법으로 그 종류에 대해서 한정하는 것은 아니다.
도포 농도 임계값 설정 기능은, 도포 농도 판별 모듈(400)에서, 불량 도포 상태의 판정을 위한 기준을 설정하는 것으로, 본 발명에서는 표준 샘플을 이용하여, 50% 내외의 도포 농도가 되도록 설정하고 있으나, 이는 본 발명의 일 실시예에 불과하며, 작업물의 목적/기능, 도포용제의 소정의 목적/기능에 따라 상이하게 설정할 수 있으며, 이에 대해서 한정하는 것은 아니다.
도포 농도 판별 모듈(400)은 각 픽셀 별 설정한 도포 농도값이 미리 설정된 임계 기준값을 벗어날 경우, 해당 픽셀에 대해서 불량 도포 상태로 판정하게 된다. 여기서, 미리 설정된 임계 기준값으로는 상술한 기술적 특징에 따라 50%로 설정하고 있으나, 이로 한정하는 것은 아니다. 또한 도포 농도의 범위는 기준 도포 농도에서 증가할 수 있는 범위 또는 감소할 수 있는 범위, 가령 50%를 기준 도포 농도로 설정할 경우, 이를 기준으로 40 ~ 60%를 도포 농도 범위(임계 기준값, 임계 기준값 범위)로 설정할 수 있다. 물론, 기준 도포 농도나, 이를 이용한 도포 농도 범위는 작업물 별, 작업물의 검사 영역마다 상이하게 설정할 수 있다.
이에 따라, 도포 농도 판별 모듈(400)은 각 검사 영역 별, 각 픽셀 별 도포 농도 분석 모듈(300)에 의한 도포 농도값이 미리 설정된 임계 기준값을 벗어날 경우, 불량 도포 상태로 판정하게 된다.
상세하게는, 도포 농도 판별 모듈(400)은 작업물의 미리 설정된 검사 영역 별로, 각 검사 영역에 해당하는 전체 픽셀의 수 대비 불량 도포 상태로 판정된 픽셀의 수의 비율을 이용하여, 해당하는 검사 영역의 도포 농도 점수를 연산하고, 미리 설정된 판단 기준 비율을 이용하여 도포 농도 점수를 통해 해당하는 검사 영역이 정상 도포 상태 또는, 불량 도포 상태에 해당하는지 판단하는 것이 바람직하다.
일 예를 들자면, 선택되는 검사 영역에 10개의 픽셀이 포함되고 있으며, 이 중 7개의 픽셀이 50% 미만의 도포 농도값을 가질 경우, 해당하는 검사 영역의 도포 농도 점수는 불량 도포 상태의 비율인 70%이다. 미리 설정된 판단 기준 비율에 따라 해당하는 검사 영역의 정상 도포 상태 또는, 불량 도포 상태가 판단된다.
이 때, 미리 설정된 판단 기준 비율 역시, 작업물의 목적/기능, 도포용제의 소정의 목적/기능에 따라 상이하게 설정할 수 있으며, 이에 대해서 한정하는 것은 아니다. 즉, 미리 설정된 판단 기준 비율에 따라, 해당하는 검사 영역에 대한 전체 픽셀의 정상 도포 상태의 비율이 30%에 불과하더라도 정상 도포 상태로 판단될 수 있다.
다만, 도포 농도 판별 모듈(400)은 작업물의 전체 검사 영역 중 어느 한 영역에 의한 불량 도포 상태 판단이 이루어질 경우, 해당하는 작업물을 불량품으로 최종 판정하는 것이 바람직하다.
즉, 도 3를 참고로, 영역 1 내지 3은 정상 도포 상태로 분석되었지만, 영역 4는 불량 도포 상태로 분석됨으로써, 해당하는 작업물의 전체 검사 결과, 불량품으로 최종 판정하게 된다.
도포 농도 판별 모듈(400)의 또다른 예를 들자면, 작업물의 미리 설정된 검사 영역 별로, 각 검사 영역에 해당하는 전체 픽셀의 수 대비 불량 도포 상태로 판정된 픽셀의 수의 비율을 이용하여, 해당하는 검사 영역의 도포 농도 점수를 연산하고, 작업물의 전체 검사 영역에 대한 도포 농도 점수의 합산값 또는, 평균값을 이용하여, 합산값 또는, 평균값이 미리 설정된 소정값 범위를 벗어날 경우, 해당하는 작업물을 불량품으로 최종 판정하게 된다.
다시 말하자면, 각 검사 영역의 불량 도포 상태의 비율을 합산하거나 평균내어, 미리 설정된 소정값 범위를 벗어날 경우, 해당하는 작업물을 불량품으로 최종 판정하게 된다.
이를 통해서, 개별 검사 영역에 대해서는 불량 도포 상태로 판단되지 않았지만, 전체 점수(합산값 또는 평균값)가 소정값 범위를 벗어날 경우, 다수의 검사 영역에서 불량 도포에 가까운 판정이 이루어진 것으로 분석할 수 있다.
이 때, 미리 설정된 소정값 범위 역시, 작업물의 목적/기능, 도포용제의 소정의 목적/기능에 따라 상이하게 설정할 수 있으며, 이에 대해서 한정하는 것은 아니다.
본 발명의 일 실시예에 따른 도포 상태 분석 시스템은 도 1에 도시된 바와 같이, 결과 처리 모듈(600)을 더 포함하게 된다.
결과 처리 모듈(600)은 도포 농도 판별 모듈(400)에 의한 작업물의 최종 판정 결과가 불량품일 경우, 외부로 알람을 발생시킬 수 있다.
뿐만 아니라, 이더넷으로 연결되어 있는 통합 제어 모듈(500)을 통하여, 불량 발생을 통보하여 이에 따른 사후 조치가 이루어질 수 있도록 하는 것이 바람직하다.
본 발명의 일 실시예에 따른 도포 상태 분석 시스템은, 각 모듈에서 생성되거나, 송수신되는 이미지 데이터들을 모두 수집하여 저장 및 관리하는 이력 저장 모듈(미도시)를 더 포함할 수 있다.
이력 저장 모듈은 각 모듈에서 생성되거나, 송수신되는 이미지 데이터 외에도, 본 발명의 일 실시예에 따른 도포 상태 분석 시스템의 동작이 수행되는 과정을 녹화한 시계열 영상 데이터를 수집하여 저장 및 관리할 수도 있다.
이를 통해서, 도포 상태 분석 결과에 대한 신뢰성을 향상시킬 수 있으며, 불량 도포 상태로 판정된 작업물의 이력 관리를 용이하게 수행할 수 있는 장점이 있다.
더불어, 본 발명의 일 실시예에 따른 도포 상태 분석 시스템은 도 1에 도시된 바와 같이, 로봇 제어 모듈을 포함할 수 있다.
로봇 제어 모듈은 자동 도포 로봇 시스템과 연동하여, 본 발명의 일 실시예에 따른 도포 상태 분석 시스템의 동작을 위하여, 조명 모듈(100), 비전 모듈(200)과 연동하여 도포 수단인 로봇을 제어하는 기능을 수행하는 것이 바람직하다.
일 예를 들자면, 도포 수단인 로봇이 도포 동작을 수행한 후, 일정한 위치에 자세를 취할 경우, 통합 제어 모듈(500)에서 해당 자세에 대한 정보를 전송받아, 도포 동작이 완료될 것으로 보고, 작업물의 표면 도포 상태의 분석을 위한 제어 신호를 생성하게 된다.
뿐만 아니라, 통합 제어 모듈(500)은 도포가 완료된 어느 하나의 작업물의 도포 상태 분석이 완료될 경우, 연계되어 있는 다음 작업을 수행할 수 있도록 로봇 제어 모듈로 제어 신호를 전송할 수 있다.
뿐만 아니라, 본 발명의 일 실시예에 따른 도포 상태 분석 시스템은, 각 모듈에서 생성되거나, 송수신되는 이미지 데이터들을 미리 설정된 양식에 맞추어 도 4에 도시된 바와 같은 결과 정보로 생성하고, 이를 연계되어 있는 외부 모니터링 모듈(미도시)로 전송할 수 있다.
이 때, 외부 모니터링 모듈은 다양한 단말기로 구성될 수 있으며, 이에 대해서 한정하는 것은 아니다.
도 5는 본 발명의 일 실시예에 따른 도포 상태 분석 방법을 나타낸 순서 예시도이다.
도 5에 도시된 바와 같이, 본 발명의 일 실시예에 따른 도포 상태 분석 방법은 조명 제어 단계(S100), 비전 제어 단계(S200), 도포 농도 분석 단계(S300) 및 도포 농도 판별 단계(S400)를 포함하게 된다.
각 단계는 연산 처리 수단에 의해 동작이 수행되는 도포 상태 분석 시스템을 통해서 수행되게 되며, 통합 제어 모듈(500)의 제어 신호에 의해, 작업물의 미리 설정된 검사 영역 별로, 순차적으로, 조명 제어 단계(S100), 비전 제어 단계(S200), 도포 농도 분석 단계(S300) 및 도포 농도 판별 단계(S400)의 동작을 반복 수행하는 것이 바람직하다.
각 단계에 대해서 자세히 알아보자면,
조명 제어 단계(S100)는 조명 모듈(100)에서, 서로 다른 종류의 적어도 두 개의 광원 수단을 포함하며, 통합 제어 모듈(500)의 제어 신호에 의해, 제1 발광 상태 및 제2 발광 상태로 광원 수단을 통합 제어하게 된다.
여기서, 제1 발광 상태 및 제2 발광 상태는, 도포 상태 분석 방법의 최초 동작 수행 시, 별도의 동작을 통해 설정되게 된다.
이를 위해, 도 5에 도시된 바와 같이, 본 발명의 일 실시예에 따른 도포 상태 분석 방법은 각 작업물 별로 최상의 도포 상태 분석을 수행하기 위하여, 전체 이미지 획득 단계(S10), 조명 제어 단계(S20), 조명 추가 제어 단계(S30)를 더 포함하게 된다.
전체 이미지 획득 단계(S10)는 조명 모듈(100)에서, 통합 제어 모듈(500)의 제어 신호에 의해, 미리 설정된 기본 발광 상태로 상기 광원 수단을 통합 제어하고, 비전 모듈(200)에서, 통합 제어 모듈(500)의 제어 신호에 의해, 기본 발광 상태에 따라 광이 조사되는 작업물의 전체 영역에 대한 기본 이미지 데이터를 획득하게 된다.
조명 제어 단계(S20)는 전체 이미지 획득 단계(S10)에 의한 기본 이미지 데이터를 분석하여, 조명 모듈(100)의 제어를 위한, 작업물에 도포된 도포용제가 반사되는 스펙트럼을 갖는 제1 발광 상태에 대한 제어 신호를 생성하고, 작업물에 도포된 도포용제가 반사되지 않는 스펙트럼을 갖는 제2 발광 상태에 대한 제어 신호를 생성하게 된다.
상세하게는, 획득한 기본 이미지 데이터를 분석하여, 작업물에 도포된 도포용제가 반사되는 스펙트럼을 갖는 발광 상태를 제1 발광 상태로 설정하고, 작업물에 도포된 도포용제가 반사되지 않는 스펙트럼을 갖는 발광 상태를 제2 발광 상태로 설정하게 된다.
각 발광 상태의 설정 스펙트럼은 작업물에 도포된 도포용제에 따라 상이하기 때문에, 스펙트럼에 대해서 한정하는 것은 아니며, 다만, 도포용제에 대응되어 작업물을 비추는 조명이 도포용제의 색상을 잘 반사하는 스펙트럼을 갖도록 발광 상태를 제어하거나 또는, 도포용제에 대응되어 작업물을 비추는 조명이 도포용제의 색상을 반사하지 않는 스펙트럼을 갖도록 발광 상태를 제어하는 것에 대해서 한정하는 것이다.
또한, 작업물의 윤곽 형태, 작업물의 표면 재질 등에 따라, 동일한 광이 조사되더라도 검사 영역 별 채도 차이가 발생할 수 밖에 없다. 이러한 점을 고려하여, 조명 추가 제어 단계(S30)를 통해서, 전체 이미지 획득 단계(S10)에 의한 기본 이미지 데이터를 분석하여, 작업물의 미리 설정된 검사 영역 별로, 조명 모듈(100)의 제1 발광 상태와 제2 발광 상태의 추가 제어를 위한, 조도 상태에 대한 제어 신호 또는, 색온도에 대한 제어 신호를 생성하게 된다.
색온도 제어가 가능한 광원 수단은 낮은 색온도 조명(Warm White)과 높은 색온도 조명(Cool White)의 조합을 활용하여 구성되어, 색온도를 조절/제어할 수 있다. 이를 통해서, 연속적인 스펙트럼에서 조명 스펙트럼의 분포의 변화를 유도할 수 있는 장점이 있다.
이러한 조도 제어를 통해서 작업물에 광을 조사하는 광원 수단의 광량을 제어할 수 있다. 상술한 바와 같이, 작업물의 검사 영역 별로, 조도를 상이하게 제어할 수 있으며, 이를 통해서 각 검사 영역에 도포 농도를 정확하게 측정할 수 있는 효과가 있다.
상세하게는, 광원 수단에서 조사된 광이 작업물에 반사되어 이미지 센서(카메라 등)로 들어가는 광이 많을수록 동일한 도포 농도를 가진 표면이라고 할지라도 높은 채도를 갖게 된다. 이러한 점을 해소하기 위하여, 조도 제어를 통해서, 각 검사 영역 별로 상이한 채도를 균일하게 보정하는 것이 바람직하다.
이를 통해서, 조명 제어 단계(S100)는 도포용제의 색상을 잘 반사하는 스펙트럼을 갖는 제1 발광 상태로 광원 수단을 제어하거나 또는, 도포용제의 색상이 반사되지 않는 스펙트럼을 갖는 제2 발광 상태로 광원 수단을 제어하게 된다.
비전 제어 단계(S200)는 비전 모듈(200)에서, 통합 제어 모듈(500)의 제어 신호에 의해, 조명 제어 단계(S100)에 의한 각 발광 상태(제1 발광 상태/제2 발광 상태)에 따라 광이 조사되는 작업물을 각각 촬영하여, 적어도 두 개의 이미지 데이터를 획득하게 된다.
즉, 제1 발광 상태에서의 이미지 데이터와 제2 발광 상태에서의 이미지 데이터를 획득하게 된다.
이 때, 비전 제어 단계(S200)는 서로 다른 종류의 적어도 두 개의 렌즈를 포함하는 비전 모듈을 제어하여, 이를 하나씩 또는 동시에 선택하여, 작업물 전체 영역 또는, 미리 설정된 검사 영역의 이미지 데이터를 순차적으로 또는 동시에 획득하게 된다.
이를 통해서, 광각 렌즈 또는, 표준 렌즈로 구성되는 하나의 렌즈 수단이 선택될 경우, 작업물의 전체 영역에 대한 이미지 데이터의 획득이 가능하며, 망원 렌즈로 구성되는 또다른 하나의 렌즈 수단이 선택될 경우, 작업물의 전체 영역을 나눈 미리 설정된 검사 영역 별 이미지 데이터의 획득이 가능하다. 즉, 비전 제어 단계(S200)는 작업물의 전체 영역이나, 미리 설정된 넓은 범위의 검사 영역 또는, 미리 설정된 좁은 범위의 검사 영역에 대한 이미지 데이터의 획득이 가능하다.
도포 농도 분석 단계(S300)는 도포 농도 분석 모듈(300)에서, 통합 제어 모듈(500)의 제어 신호에 의해, RGB 채널에 대해 미리 설정된 가중치를 이용하여, 비전 제어 단계(S200)에 의해 획득한 각 이미지 데이터(제1 발광 상태에서의 이미지 데이터와 제2 발광 상태에서의 이미지 데이터)를 구성하는 픽셀마다 색상값을 계산하고, 두 이미지 데이터에 의한 매칭 픽셀 간의 색상값 차이를 연산하여, 해당 픽셀의 도포 농도값으로 설정하게 된다.
즉, 각 픽셀마다 RGB 채널을 기준으로 색상을 분석하여, RGB 채널에 대해 미리 설정된 가중치를 적용하여, 각 픽셀의 색상값을 계산하게 된다.
이 때, 각 이미지 데이터 별 픽셀의 색상값이 계산되기 때문에, 두 개의 이미지 데이터에 의한 매칭되는 픽셀 간의 색상값 차이를 연산할 수 있다.
연산한 차이값을 해당하는 픽셀의 도포 농도값으로 설정하는 것이 바람직하다.
각 픽셀 별 연산한 차이값을 도포 농도값으로 설정하는 것은, 조명 제어 단계(S100)에 의한 발광 상태 차이로 인한 분석으로, 두 개의 이미지 데이터에 의한 색상값 차이를 통해서, 얼마나 충분히 도포용제의 도포가 이루어졌는지 알 수 있는 도포 농도값의 설정이 가능하다.
일 예를 들자면, 도포용제가 충분히 도포되지 않을 경우, 제1 발광 상태에 의한 이미지 데이터의 색상값과 제2 발광 상태에 의한 이미지 데이터의 색상값 차이가 거의 발생하지 않기 때문에, 도포 농도값이 낮게 설정된다. 즉, 도포 농도값이 낮다는 것은, 얇은 도포 상태임을 의미한다. 이에 따라, 도 2에 도시된 바와 같이, 정상 도포 상태와 불량 도포 상태에 따른 도포 농도값 차이가 발생하게 된다.
상세하게는, 도포 농도 분석 단계(S300)는 도포 영역 지정 기능, 도포 영역 변환 기능, 검사 영역 마스킹 기능 및 도포 농도 임계값 설정 기능을 수행하게 된다.
도포 영역 지정 기능은, 도포 농도를 검사하고자 하는 영역 지정을 의미하며, 이는, 사전에 각 작업물 별로 미리 설정된 검사 영역 중 검사하고자 하는 영역을 선택하고, 좌표범위를 지정하게 된다.
이 때, 각 작업물 별로 미리 설정된 검사 영역에 따라, 다각형 또는 곡선으로 좌표범위의 지정이 가능하며, 곡선으로 지정한 경우에는, 곡선을 내접하거나 외접하는 다각형으로 근사화하여 좌표범위를 지정하는 것이 바람직하다.
도포 영역 변환 기능은, 미리 저장된 영상 처리 기법을 이용하여, 각 이미지 데이터의 특징점을 검출하여, 특징점 매칭을 통해 픽셀을 매칭시키는 것이 바람직하다.
특히, 작업물의 작업 과정에 따라, 작업물이 고정되어 있지 않고, 도포 수단을 통해 도포용제가 도포되는 과정에 작업물 자체가 컨베이어 벨트 등을 통해서 이동될 경우, 제1 발광 상태에 의해 획득된 이미지 데이터와 제2 발광 상태에 의해 획득된 이미지 데이터가 상이한 위치 좌표를 갖게 된다.
이 때, 각 이미지 데이터의 특징점을 검출하여, 특징점 매칭을 통해 픽셀을 매칭시키는 것이 바람직하다.
물론, 작업물이 고정된 상태에서 제1 발광 상태에 의해 획득된 이미지 데이터와 제2 발광 상태에 의해 획득된 이미지 데이터가 획득되더라도, 이미지 센서의 장착 위치에 따라, 상이한 위치 좌표를 갖을 수 있기 때문에, 각 이미지 데이터의 특징점을 검출하여, 특징점 매칭을 통해 픽셀을 매칭시키는 것이 바람직하다.
미리 저장된 영상 처리 기법으로는, 코너점과 같은 기본 특징을 검출하거나, HOG(Histogram of Oriented Gradients)와 같은 복잡한 특징을 검출하는 기법을 적용하는 것이 바람직하며, 통상의 영상 처리 기법으로 그 종류에 대해서 한정하는 것은 아니다.
다만, 특징점을 검출한 후, 특징점 매칭을 통해 픽셀을 매칭시키는 과정에서, 특징점 매칭의 오류를 줄이기 위하여, 해당하는 검사 영역의 주변부에 위치한 특징점들을 찾아서 매칭할 수 있도록 검사 영역을 바탕으로 마스크를 생성하는 것이 바람직하다. 이 후, 마스크의 팽창(dilation)과 침식(erosion) 연산을 통하여 검사 영역 주변의 특징점 만을 매칭시키도록 마스크를 최종 설정함으로써, 특징점 매칭의 정확도를 향상시킬 수 있다.
검사 영역 마스킹 기능은, 상이한 조명 발광 상태(제1 발광 상태, 제2 발광 상태)에 따른 이미지 데이터에 의한 매칭 픽셀 간의 색상값 차이를 연산함에 있어서, 검사 영역만을 대상으로 영상 처리가 이루어질 수 있도록 미리 저장된 영상 처리 기법을 이용하여, 마스크 기능을 수행하는 것이 바람직하다. 이를 통해서, 각 이미지 데이터의 마스킹 처리를 통해, 해당하는 검사 영역이 아닌 다른 검사 영역의 차이값이 도포 농도값 설정에 영향을 미치지 않도록 할 수 있다.
이 때, 미리 저장된 영상 처리 기법은 통상의 영상 처리 기법으로 그 종류에 대해서 한정하는 것은 아니다.
도포 농도 임계값 설정 기능은, 도포 농도 판별 단계(S400)에서, 불량 도포 상태의 판정을 위한 기준을 설정하는 것으로, 본 발명에서는 표준 샘플을 이용하여, 50% 내외의 도포 농도가 되도록 설정하고 있으나, 이는 본 발명의 일 실시예에 불과하며, 작업물의 목적/기능, 도포용제의 소정의 목적/기능에 따라 상이하게 설정할 수 있으며, 이에 대해서 한정하는 것은 아니다.
도포 농도 판별 단계(S400)는 도포 농도 판별 모듈(400)에서, 통합 제어 모듈(500)의 제어 신호에 의해, 도포 농도 분석 단계(S300)에 의해 설정한 도포 농도값이 기설정된 임계 기준값을 벗어날 경우, 불량 도포 상태로 판정하게 된다.
상세하게는, 도포 농도 판별 단계(S400)는 각 픽셀 별 설정한 도포 농도값이 미리 설정된 임계 기준값을 벗어날 경우, 해당 픽셀에 대해서 불량 도포 상태로 판정하게 된다. 여기서, 미리 설정된 임계 기준값으로는 상술한 기술적 특징에 따라 50%로 설정하고 있으나, 이로 한정하는 것은 아니다. 또한 도포 농도의 범위는 기준 도포 농도에서 증가할 수 있는 범위 또는 감소할 수 있는 범위, 가령 50%를 기준 도포 농도로 설정할 경우, 이를 기준으로 40 ~ 60%를 도포 농도 범위(임계 기준값, 임계 기준값 범위)로 설정할 수 있다. 물론, 기준 도포 농도나, 이를 이용한 도포 농도 범위는 작업물 별, 작업물의 검사 영역마다 상이하게 설정할 수 있다.
즉, 도포 농도 판별 단계(S400)는 작업물의 미리 설정된 검사 영역 별로, 각 검사 영역에 해당하는 전체 픽셀의 수 대비 불량 도포 상태로 판정된 픽셀의 수의 비율을 이용하여, 해당하는 검사 영역의 도포 농도 점수를 연산하고, 미리 설정된 판단 기준 비율을 이용하여 도포 농도 점수를 통해 해당하는 검사 영역이 정상 도포 상태 또는, 불량 도포 상태에 해당하는지 판단하는 것이 바람직하다.
일 예를 들자면, 선택되는 검사 영역에 10개의 픽셀이 포함되고 있으며, 이 중 7개의 픽셀이 50% 미만의 도포 농도값을 가질 경우, 해당하는 검사 영역의 도포 농도 점수는 불량 도포 상태의 비율인 70%이다. 미리 설정된 판단 기준 비율에 따라 해당하는 검사 영역의 정상 도포 상태 또는, 불량 도포 상태가 판단된다.
이 때, 미리 설정된 판단 기준 비율 역시, 작업물의 목적/기능, 도포용제의 소정의 목적/기능에 따라 상이하게 설정할 수 있으며, 이에 대해서 한정하는 것은 아니다. 즉, 미리 설정된 판단 기준 비율에 따라, 해당하는 검사 영역에 대한 전체 픽셀의 정상 도포 상태의 비율이 30%에 불과하더라도 정상 도포 상태로 판단될 수 있다.
다만, 작업물의 전체 검사 영역 중 어느 한 영역에 의한 불량 도포 상태 판단이 이루어질 경우, 해당하는 작업물을 불량품으로 최종 판정하는 것이 바람직하다.
즉, 도 3를 참고로, 영역 1 내지 3은 정상 도포 상태로 분석되었지만, 영역 4는 불량 도포 상태로 분석됨으로써, 해당하는 작업물의 전체 검사 결과, 불량품으로 최종 판정하게 된다.
또다른 예를 들자면, 작업물의 미리 설정된 검사 영역 별로, 각 검사 영역에 해당하는 전체 픽셀의 수 대비 불량 도포 상태로 판정된 픽셀의 수의 비율을 이용하여, 해당하는 검사 영역의 도포 농도 점수를 연산하고, 작업물의 전체 검사 영역에 대한 도포 농도 점수의 합산값 또는, 평균값을 이용하여, 합산값 또는, 평균값이 미리 설정된 소정값 범위를 벗어날 경우, 해당하는 작업물을 불량품으로 최종 판정하게 된다.
다시 말하자면, 각 검사 영역의 불량 도포 상태의 비율을 합산하거나 평균내어, 미리 설정된 소정값 범위를 벗어날 경우, 해당하는 작업물을 불량품으로 최종 판정하게 된다.
이를 통해서, 개별 검사 영역에 대해서는 불량 도포 상태로 판단되지 않았지만, 전체 점수(합산값 또는 평균값)가 소정값 범위를 벗어날 경우, 다수의 검사 영역에서 불량 도포에 가까운 판정이 이루어진 것으로 분석할 수 있다.
이 때, 미리 설정된 소정값 범위 역시, 작업물의 목적/기능, 도포용제의 소정의 목적/기능에 따라 상이하게 설정할 수 있으며, 이에 대해서 한정하는 것은 아니다.
더불어, 본 발명의 일 실시예에 따른 도포 상태 분석 방법은 도포 농도 판별 단계(S400)에 의한 작업물의 최종 판정 결과가 불량품일 경우, 외부로 알람을 발생시킬 수 있다.
뿐만 아니라, 이더넷으로 연결되어 있는 통합 제어 모듈(500)을 통하여, 불량 발생을 통보하여 이에 따른 사후 조치가 이루어질 수 있도록 하는 것이 바람직하다.
이상과 같이 본 발명에서는 비록 한정된 실시예와 도면에 의해 설명되었으나 이는 본 발명의 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명은 상기의 실시예들에 한정되는 것이 아니며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의하여 본 발명의 기술적 사상으로부터 다양한 수정 및 변형이 가능하다.
따라서, 본 발명의 사상은 설명된 실시예에 국한되어 정해지는 것이 아니며, 후술하는 청구범위와 균등하거나 등가적 변형이 있는 모든 것들은 본 발명 사상의 범주에 속한다고 할 것이다.
[부호의 설명]
100 : 조명 모듈
200 : 비전 모듈
300 : 도포 농도 분석 모듈
400 : 도포 농도 판별 모듈
500 : 통합 제어 모듈
600 : 결과 처리 모듈

Claims (22)

  1. 도포 수단을 통해 도포용제가 도포된 작업물의 표면 도포 상태를 분석하는 시스템에 있어서,
    적어도 두 개의 광원 수단을 통해서, 제1 발광 상태 및 제2 발광 상태로, 서로 상이한 스펙트럼 성분을 갖는 각각의 광이 조사되도록 통합 제어하는 조명 모듈;
    상기 조명 모듈에 의한 각 발광 상태에 따라 광이 조사되는 작업물을 각각 촬영하여, 적어도 두 개의 이미지 데이터를 획득하는 비전 모듈;
    RGB 채널에 대해 기설정된 가중치를 이용하여, 각 이미지 데이터를 구성하는 픽셀마다 색상값을 계산하고, 두 이미지 데이터에 의한 매칭 픽셀 간의 색상값 차이를 연산하여, 해당 픽셀의 도포 농도값으로 설정하는 도포 농도 분석 모듈;
    설정한 도포 농도값이 기설정된 임계 기준값을 벗어날 경우, 불량 도포 상태로 판정하는 도포 농도 판별 모듈; 및
    상기 조명 모듈, 비전 모듈, 도포 농도 분석 모듈 및 도포 농도 판별 모듈에 대한 제어 신호를 생성하여, 각 동작 상태를 제어하는 통합 제어 모듈;
    을 포함하는, 도포 상태 분석 시스템.
  2. 제1항에 있어서,
    상기 통합 제어 모듈은
    최초 동작 수행 시, 기설정된 기본 발광 상태로 상기 조명 모듈을 제어하고, 상기 비전 모듈을 제어하여 기본 발광 상태에 따라 광이 조사되는 작업물의 전체 영역에 대한 기본 이미지 데이터를 획득하는, 도포 상태 분석 시스템.
  3. 제2항에 있어서,
    상기 통합 제어 모듈은
    상기 기본 이미지 데이터를 분석하여, 상기 조명 모듈의 제어를 위한, 작업물에 도포된 도포용제가 반사되는 스펙트럼을 갖는 제1 발광 상태에 대한 제어 신호를 생성하고, 작업물에 도포된 도포용제가 반사되지 않는 스펙트럼을 갖는 제2 발광 상태에 대한 제어 신호를 생성하는, 도포 상태 분석 시스템.
  4. 제3항에 있어서,
    상기 통합 제어 모듈은
    상기 기본 이미지 데이터를 분석하여, 작업물의 기설정된 검사 영역 별로, 조도 상태에 대한 제어 신호를 생성하여, 상기 조명 모듈의 제1 발광 상태와 제2 발광 상태의 추가 제어를 수행하는, 도포 상태 분석 시스템.
  5. 제4항에 있어서,
    상기 통합 제어 모듈은
    작업물의 기설정된 검사 영역 별로, 순차적으로, 상기 조명 모듈, 비전 모듈, 도포 농도 분석 모듈 및 도포 농도 판별 모듈에 대한 제어 신호를 생성하여, 동작 상태를 구분하여 제어하는, 도포 상태 분석 시스템.
  6. 제5항에 있어서,
    상기 비전 모듈은
    서로 다른 종류의 적어도 두 개의 렌즈를 포함하며, 상기 통합 제어 모듈의 제어 신호에 따라, 작업물 전체 영역이나 기설정된 넓은 범위의 검사 영역 또는, 기설정된 좁은 범위의 검사 영역의 이미지 데이터를 선택적으로 획득하는, 도포 상태 분석 시스템.
  7. 제1항에 있어서,
    상기 도포 농도 분석 모듈은
    기저장된 영상 처리 기법을 이용하여, 각 이미지 데이터의 특징점을 검출하여, 특징점 매칭을 통해 픽셀을 매칭시키는, 도포 상태 분석 시스템.
  8. 제7항에 있어서,
    상기 도포 농도 분석 모듈은
    기저장된 영상 처리 기법을 이용하여, 작업물의 기설정된 검사 영역을 기준으로 마스크를 생성하여, 각 이미지 데이터의 마스킹 처리를 수행하는, 도포 상태 분석 시스템.
  9. 제5항에 있어서,
    상기 도포 농도 판별 모듈은
    작업물의 기설정된 검사 영역 별로, 각 영역에 해당하는 전체 픽셀의 수 대비 불량 도포 상태로 판정된 픽셀의 수의 비율을 이용하여, 해당하는 영역의 정상 도포 상태 또는, 불량 도포 상태를 판단하는, 도포 상태 분석 시스템.
  10. 제9항에 있어서,
    상기 도포 농도 판별 모듈은
    작업물의 전체 검사 영역 중 어느 한 영역에 의한 불량 도포 상태 판단이 이루어질 경우, 해당하는 작업물을 불량품으로 최종 판정하는, 도포 상태 분석 시스템.
  11. 제5항에 있어서,
    상기 도포 농도 판별 모듈은
    작업물의 기설정된 검사 영역 별로, 각 영역에 해당하는 전체 픽셀의 수 대비 불량 도포 상태로 판정된 픽셀의 수의 비율을 이용하여, 해당하는 영역의 도포 농도 점수를 연산하고,
    작업물의 전체 검사 영역에 대한 도포 농도 점수의 합산값 또는, 평균값을 이용하여, 합산값 또는, 평균값이 기설정된 소정값 범위를 벗어날 경우, 해당하는 작업물을 불량품으로 최종 판정하는, 도포 상태 분석 시스템.
  12. 제10항 또는, 제11항에 있어서,
    상기 도포 농도 검사 시스템은
    상기 도포 농도 판별 모듈에 의한 작업물의 최종 판정 결과가 불량품일 경우, 외부로 알람을 발생시키는 결과 처리 모듈;
    을 더 포함하는, 도포 상태 분석 시스템.
  13. 도포 수단을 통해 도포용제가 도포된 작업물의 표면 도포 상태를 분석하는 방법에 있어서,
    조명 모듈에서, 제어 신호에 의해, 적어도 두 개의 광원 수단을 통해서, 제1 발광 상태 및 제2 발광 상태로, 서로 상이한 스펙트럼 성분을 갖는 각각의 광이 조사되도록 상기 광원 수단을 통합 제어하는 조명 제어 단계(S100);
    비전 모듈에서, 제어 신호에 의해, 상기 조명 제어 단계(S100)에 의한 각 발광 상태에 따라 광이 조사되는 작업물을 각각 촬영하여, 적어도 두 개의 이미지 데이터를 획득하는 비전 제어 단계(S200);
    도포 농도 분석 모듈에서, 제어 신호에 의해, RGB 채널에 대해 기설정된 가중치를 이용하여, 상기 비전 제어 단계(S200)에 의해 획득한 각 이미지 데이터를 구성하는 픽셀마다 색상값을 계산하고, 두 이미지 데이터에 의한 매칭 픽셀 간의 색상값 차이를 연산하여, 해당 픽셀의 도포 농도값으로 설정하는 도포 농도 분석 단계(S300); 및
    도포 농도 판별 모듈에서, 제어 신호에 의해, 상기 도포 농도 분석 단계(S300)에 의해 설정한 도포 농도값이 기설정된 임계 기준값을 벗어날 경우, 불량 도포 상태로 판정하는 도포 농도 판별 단계(S400);
    를 포함하며,
    제어 신호에 의해, 작업물의 기설정된 검사 영역 별로, 순차적으로, 상기 조명 제어 단계(S100), 비전 제어 단계(S200), 도포 농도 분석 단계(S300) 및 도포 농도 판별 단계(S400)의 동작을 반복 수행하는, 도포 상태 분석 방법.
  14. 제13항에 있어서,
    상기 도포 상태 분석 방법은
    최초 동작 수행 시, 조명 모듈에서, 제어 신호에 의해, 기설정된 기본 발광 상태로 상기 광원 수단을 통합 제어하고, 비전 모듈에서, 제어 신호에 의해, 기본 발광 상태에 따라 광이 조사되는 작업물의 전체 영역에 대한 기본 이미지 데이터를 획득하는 전체 이미지 획득 단계(S10);
    를 더 포함하는, 도포 상태 분석 방법.
  15. 제14항에 있어서,
    상기 도포 상태 분석 방법은
    상기 전체 이미지 획득 단계(S10)에 의한 상기 기본 이미지 데이터를 분석하여, 상기 조명 모듈의 제어를 위한, 작업물에 도포된 도포용제가 반사되는 스펙트럼을 갖는 제1 발광 상태에 대한 제어 신호를 생성하고, 작업물에 도포된 도포용제가 반사되지 않는 스펙트럼을 갖는 제2 발광 상태에 대한 제어 신호를 생성하는 조명 제어 단계(S20);
    를 더 포함하는, 도포 상태 분석 방법.
  16. 제15항에 있어서,
    상기 도포 상태 분석 방법은
    상기 전체 이미지 획득 단계(S10)에 의한 상기 기본 이미지 데이터를 분석하여, 작업물의 기설정된 검사 영역 별로, 상기 조명 모듈의 제1 발광 상태와 제2 발광 상태의 추가 제어를 위한, 조도 상태에 대한 제어 신호를 생성하는 조명 추가 제어 단계(S30);
    를 더 포함하는, 도포 상태 분석 방법.
  17. 제13항에 있어서,
    상기 비전 제어 단계(S200)는
    서로 다른 종류의 적어도 두 개의 렌즈를 포함하는 비전 모듈을 제어하여, 작업물 전체 영역이나 기설정된 넓은 범위의 검사 영역 또는, 기설정된 좁은 범위의 검사 영역의 이미지 데이터를 선택적으로 획득하는, 도포 상태 분석 방법.
  18. 제13항에 있어서,
    상기 도포 농도 분석 단계(S300)는
    기저장된 영상 처리 기법을 이용하여, 각 이미지 데이터의 특징점을 검출하여, 특징점 매칭을 통해 픽셀을 매칭시키는, 도포 상태 분석 방법.
  19. 제18항에 있어서,
    상기 도포 농도 분석 모듈은
    기저장된 영상 처리 기법을 이용하여, 작업물의 기설정된 검사 영역을 기준으로 마스크를 생성하여, 각 이미지 데이터의 마스킹 처리를 수행하는, 도포 상태 분석 방법.
  20. 제13항에 있어서,
    상기 도포 농도 판별 단계(S400)는
    작업물의 기설정된 검사 영역 별로, 각 영역에 해당하는 전체 픽셀의 수 대비 불량 도포 상태로 판정된 픽셀의 수의 비율을 이용하여, 해당하는 영역의 정상 도포 상태 또는, 불량 도포 상태를 판단하는, 도포 상태 분석 방법.
  21. 제20항에 있어서,
    상기 도포 농도 판별 단계(S400)는
    작업물의 전체 검사 영역 중 어느 한 영역에 의한 불량 도포 상태 판단이 이루어질 경우, 해당하는 작업물을 불량품으로 최종 판정하는, 도포 상태 분석 방법.
  22. 제13항에 있어서,
    상기 도포 농도 판별 단계(S400)는
    작업물의 기설정된 검사 영역 별로, 각 영역에 해당하는 전체 픽셀의 수 대비 불량 도포 상태로 판정된 픽셀의 수의 비율을 이용하여, 해당하는 영역의 도포 농도 점수를 연산하고,
    작업물의 전체 검사 영역에 대한 도포 농도 점수의 합산값 또는, 평균값을 이용하여, 합산값 또는, 평균값이 기설정된 소정값 범위를 벗어날 경우, 해당하는 작업물을 불량품으로 최종 판정하는, 도포 상태 분석 방법.
PCT/KR2023/010641 2022-09-26 2023-07-24 도포 상태 분석 시스템 및 그 방법 WO2024071617A1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020220121706A KR20240042886A (ko) 2022-09-26 2022-09-26 도포 상태 분석 시스템 및 그 방법
KR10-2022-0121706 2022-09-26

Publications (1)

Publication Number Publication Date
WO2024071617A1 true WO2024071617A1 (ko) 2024-04-04

Family

ID=90478268

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2023/010641 WO2024071617A1 (ko) 2022-09-26 2023-07-24 도포 상태 분석 시스템 및 그 방법

Country Status (2)

Country Link
KR (1) KR20240042886A (ko)
WO (1) WO2024071617A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007240431A (ja) * 2006-03-10 2007-09-20 Omron Corp 欠陥検査装置および欠陥検査方法
KR20150137474A (ko) * 2014-05-29 2015-12-09 제이엘씨(주) 컬러 이미지 분리를 이용한 비전검사 방법
JP2016206691A (ja) * 2014-07-24 2016-12-08 株式会社プロスパークリエイティブ 画像検査装置及び画像検査プログラム
JP2016206760A (ja) * 2015-04-17 2016-12-08 有限会社修榮シール 色判別方法及び色判別装置、並びに印刷機色調制御方法
KR20170126847A (ko) * 2016-04-08 2017-11-20 신닛테츠스미킨 카부시키카이샤 금속체의 표면 상태 감시 장치 및 금속체의 표면 상태 감시 방법

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101640425B1 (ko) 2016-04-11 2016-07-18 (주)디엠소프트 실러 도포 상태 검사 시스템 및 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007240431A (ja) * 2006-03-10 2007-09-20 Omron Corp 欠陥検査装置および欠陥検査方法
KR20150137474A (ko) * 2014-05-29 2015-12-09 제이엘씨(주) 컬러 이미지 분리를 이용한 비전검사 방법
JP2016206691A (ja) * 2014-07-24 2016-12-08 株式会社プロスパークリエイティブ 画像検査装置及び画像検査プログラム
JP2016206760A (ja) * 2015-04-17 2016-12-08 有限会社修榮シール 色判別方法及び色判別装置、並びに印刷機色調制御方法
KR20170126847A (ko) * 2016-04-08 2017-11-20 신닛테츠스미킨 카부시키카이샤 금속체의 표면 상태 감시 장치 및 금속체의 표면 상태 감시 방법

Also Published As

Publication number Publication date
KR20240042886A (ko) 2024-04-02

Similar Documents

Publication Publication Date Title
WO2016021896A1 (en) Gamma setting system of display device and gamma setting method thereof
CN107110754A (zh) 喷洒质量检测装置、系统、方法以及采样辅助装置
WO2019135475A1 (en) Electronic apparatus and control method thereof
WO2017217673A1 (en) Apparatus and method for measuring dust
WO2022114452A1 (ko) 레이저 파워 스캐닝을 이용한 고정확 광학식 입자 측정 장치 및 입자 측정 방법
WO2021101069A1 (ko) 기계 학습 모델을 이용한 반도체 소자 테스트 장치 및 방법
WO2017039171A1 (ko) 레이저 가공장치 및 레이저 가공방법
WO2019009664A1 (en) APPARATUS FOR OPTIMIZING THE INSPECTION OF THE OUTSIDE OF A TARGET OBJECT AND ASSOCIATED METHOD
WO2009119983A2 (ko) 중복 영상을 이용한 에프피디 기판 및 반도체 웨이퍼 검사시스템
WO2020111756A1 (ko) 기판에 대한 검사 결과를 표시하는 전자 장치 및 방법
WO2019000726A1 (zh) 一种显示面板检测方法及装置
WO2024071617A1 (ko) 도포 상태 분석 시스템 및 그 방법
WO2024101858A1 (ko) 로봇 연동 도포 농도 비전 검사 시스템 및 그 방법
WO2020231113A1 (ko) 치수 측정용 지그 및 그를 포함하는 치수 측정 장치
WO2024101857A1 (ko) 컬러 조명과 카메라를 이용한 도포 농도 검사 장치 및 그 방법
WO2017171153A1 (ko) 편광판 검사 방법 및 편광판 검사 장치
WO2020085758A1 (ko) 검사 영역 결정 방법 및 이를 이용하는 외관 검사 장치
WO2020013441A1 (en) Electronic apparatus, method for manufacturing led module and computer-readable recording medium
WO2011019241A2 (ko) 터널등의 색온도 제어장치 및 색온도 조절용 터널등기구
WO2012070910A2 (ko) 대표값 산출 장치 및 방법.
WO2022039575A1 (ko) 딥 러닝 기반 실시간 공정 감시 시스템 및 그 방법
WO2024039160A1 (ko) Itof 센서에 기반한 라이다 센서 및 그 제어 방법
WO2020101273A1 (en) Led transfer device comprising mask and micro led transferring method using the same
WO2021045475A1 (ko) 비색법 진단 패드, 이를 이용한 검출 대상물질 정량화 시스템 및 방법
WO2022119206A1 (ko) 디스플레이를 위한 백라이트 장치의 전류 제어 집적회로

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 23872742

Country of ref document: EP

Kind code of ref document: A1