WO2019111331A1 - 撮像ユニット及び部品実装機 - Google Patents

撮像ユニット及び部品実装機 Download PDF

Info

Publication number
WO2019111331A1
WO2019111331A1 PCT/JP2017/043701 JP2017043701W WO2019111331A1 WO 2019111331 A1 WO2019111331 A1 WO 2019111331A1 JP 2017043701 W JP2017043701 W JP 2017043701W WO 2019111331 A1 WO2019111331 A1 WO 2019111331A1
Authority
WO
WIPO (PCT)
Prior art keywords
light
light sources
imaging
distance
camera
Prior art date
Application number
PCT/JP2017/043701
Other languages
English (en)
French (fr)
Inventor
一也 小谷
秀徳 後藤
Original Assignee
株式会社Ｆｕｊｉ
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社Ｆｕｊｉ filed Critical 株式会社Ｆｕｊｉ
Priority to US16/766,941 priority Critical patent/US11095800B2/en
Priority to CN201780097332.8A priority patent/CN111434103B/zh
Priority to EP17933939.5A priority patent/EP3723357A4/en
Priority to JP2019557905A priority patent/JP6837161B2/ja
Priority to PCT/JP2017/043701 priority patent/WO2019111331A1/ja
Publication of WO2019111331A1 publication Critical patent/WO2019111331A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56—Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B7/00—Mountings, adjusting means, or light-tight connections, for optical elements
    • G02B7/28—Systems for automatic generation of focusing signals
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
    • G03B13/32—Means for focusing
    • G03B13/34—Power focusing
    • G03B13/36—Autofocus systems
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • G03B15/02—Illuminating scene
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B15/00—Special procedures for taking photographs; Apparatus therefor
    • G03B15/02—Illuminating scene
    • G03B15/03—Combinations of cameras with lighting apparatus; Flash units
    • G03B15/05—Combinations of cameras with electronic flash apparatus; Electronic flash units
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05K—PRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
    • H05K13/00—Apparatus or processes specially adapted for manufacturing or adjusting assemblages of electric components
    • H05K13/08—Monitoring manufacture of assemblages
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2215/00—Special procedures for taking photographs; Apparatus therefor
    • G03B2215/05—Combinations of cameras with electronic flash units
    • G03B2215/0514—Separate unit
    • G03B2215/0517—Housing
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B2215/00—Special procedures for taking photographs; Apparatus therefor
    • G03B2215/05—Combinations of cameras with electronic flash units
    • G03B2215/0514—Separate unit
    • G03B2215/056—Connection with camera, e.g. adapter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths

Definitions

  • An imaging unit and a component mounter are disclosed herein.
  • two types of illumination devices having different wavelengths and a camera for imaging an object illuminated by the illumination devices are provided on a base, and contrast values are calculated and determined in advance for each wavelength. It is known to find the in-focus position at the visible light wavelength corresponding to the calculated contrast value according to the contrast curve characteristics at each wavelength.
  • Patent Document 1 has not considered the influence of such magnification chromatic aberration.
  • the present disclosure has been made in view of such problems, and has as its main object to obtain highly accurate information from an image obtained by capturing an object while suppressing the influence of chromatic aberration.
  • the imaging unit of the present disclosure is With the camera, A holding member for holding an object imaged by the camera; A light emitting device capable of emitting light of a plurality of light sources of different wavelengths toward the subject held by the holding member; An appropriate value of resolution for light of one or more light sources selected from the plurality of light sources used for imaging is determined, and light of the one or more light sources selected is emitted to the subject held by the holding member to perform the camera A control device that uses the appropriate value of the resolution when taking an image and processing an image obtained from the camera; Is provided.
  • this imaging unit one or more light sources selected from a plurality of light sources having different wavelengths are used for imaging, and an appropriate value of resolution for light of the selected one or more light sources is determined. Then, the subject held by the holding member is irradiated with light of the selected one or more light sources and imaged by a camera, and when processing an image obtained from the camera, the appropriate value of the resolution obtained above is used .
  • the appropriate value of resolution differs for each of the light of one or more light sources selected from a plurality of light sources with different wavelengths (that is, for each wavelength of illumination color) due to the influence of magnification chromatic aberration.
  • the imaging unit when processing the image obtained from the camera, the image is processed using the appropriate value of the resolution according to the wavelength of the illumination color that has illuminated the subject. Therefore, it is possible to suppress the influence of lateral chromatic aberration when processing an image obtained by imaging a subject.
  • Another imaging unit of the present disclosure is With the camera, A holding member for holding an object, A distance adjusting device for adjusting the distance between the camera and the holding member; A light emitting device capable of emitting light of a plurality of light sources of different wavelengths toward the subject held by the holding member; An appropriate value of the distance to light of one or more light sources selected from the plurality of light sources used for imaging is determined based on an imaging point on the optical axis which fluctuates due to axial chromatic aberration, and the actual distance is the distance A control device for controlling the distance adjustment device to be an appropriate value; Is provided.
  • this imaging unit one or more light sources selected from a plurality of light sources with different wavelengths are used for imaging.
  • an appropriate value of the distance between the camera and the holding member with respect to the light of one or more selected light sources is determined based on the imaging point on the optical axis which fluctuates due to the axial chromatic aberration.
  • the distance between the actual camera and the holding member is controlled to be an appropriate value.
  • the subject is then imaged by the camera. That is, the distance between the camera and the holding member at the time of imaging is set to an appropriate value in consideration of the influence of axial chromatic aberration. Therefore, it is possible to suppress the influence of axial chromatic aberration when processing an image obtained by capturing an object.
  • FIG. 2 is a perspective view of the component mounting machine 10; FIG. 2 is a schematic explanatory view of a configuration of a part camera 40.
  • FIG. 2 is a block diagram showing a configuration related to control of the component mounter 10.
  • the flowchart of a component mounting process routine. 6 is a flowchart of a part imaging processing routine.
  • FIG. 10 is a schematic explanatory view of the configuration of the offline imaging device 90. Explanatory drawing of the image when irradiating and imaging component Pa with red light. Explanatory drawing of the image when irradiating and imaging component Pa with blue light.
  • FIG. 1 is a perspective view of the component mounter 10
  • FIG. 2 is a schematic explanatory view of a configuration of the part camera 40
  • FIG. 3 is a block diagram showing a configuration related to control of the component mounter 10.
  • the left-right direction (X axis), the front-rear direction (Y axis), and the up-down direction (Z axis) are as shown in FIG.
  • the component mounter 10 includes a base 12, a mounter main body 14 installed on the base 12, and a reel unit 70 as a component supply device mounted on the mounter main body 14.
  • the mounting machine main body 14 is exchangeably installed on the base 12.
  • the mounter body 14 includes a substrate transfer device 18, a head 24, a nozzle 37, a part camera 40, and a control device 60.
  • the substrate transfer device 18 is a device for transferring and holding the substrate 16.
  • the substrate transfer device 18 includes support plates 20 and 20, and conveyor belts 22 and 22 (only one is shown in FIG. 1).
  • the support plates 20, 20 are members extending in the left-right direction, and are provided at intervals in the front and back of FIG.
  • the conveyor belts 22, 22 are endlessly wound around drive wheels and driven wheels provided on the left and right of the support plates 20, 20.
  • the substrates 16 are carried on the upper surfaces of the pair of conveyor belts 22, 22 and conveyed from left to right.
  • the substrate 16 can be supported from the back side by a large number of support pins 23 set up. Therefore, the substrate transfer device 18 also plays a role as a substrate support device.
  • the head 24 is attached to the front of the X-axis slider 26.
  • the X-axis slider 26 is attached to the front of the Y-axis slider 30.
  • the Y-axis slider 30 is slidably attached to a pair of left and right guide rails 32, 32 extending in the front-rear direction.
  • a pair of upper and lower guide rails 28, 28 extending in the left-right direction is provided on the front surface of the Y-axis slider 30.
  • the X-axis slider 26 is slidably attached to the guide rails 28, 28.
  • the head 24 moves in the left-right direction as the X-axis slider 26 moves in the left-right direction, and moves in the front-rear direction as the Y-axis slider 30 moves in the front-rear direction.
  • the sliders 26 and 30 are respectively driven by drive motors 26a and 30a (see FIG. 3). Further, the head 24 incorporates a Z-axis motor 34, and the height of the nozzle 37 attached to a ball screw 35 extending along the Z-axis is adjusted by the Z-axis motor 34. Further, the head 24 incorporates a Q-axis motor 36 (see FIG. 3) for axially rotating the nozzle 37.
  • the nozzle 37 is a member that sucks and holds components at the tip of the nozzle and releases suction of components that are sucked at the tip of the nozzle.
  • the nozzle 37 can supply pressure from a pressure supply source (not shown), for example, suctions parts when negative pressure is supplied, and suctions parts when negative pressure supply is stopped or positive pressure is supplied. To release.
  • the nozzle 37 protrudes downward from the bottom of the main body of the head 24. Further, the nozzle 37 is moved up and down along the Z-axis direction by the Z-axis motor 34, whereby the height of the component attracted to the nozzle 37 is adjusted.
  • the rotation of the nozzle 37 by the Q-axis motor 36 adjusts the orientation of the component attracted to the nozzle 37.
  • the parts camera 40 is disposed in front of the support plate 20 on the front side of the substrate transfer device 18.
  • the parts camera 40 has an imaging range above the parts camera 40, and images the parts held by the nozzles 37 from below to generate a captured image.
  • the parts camera 40 includes an illumination unit 41 and an imaging unit 49.
  • the illumination unit 41 emits light to a component to be imaged.
  • the illumination unit 41 includes a housing 42, a connection unit 43, an incident light source 44, a half mirror 46, and a multistage light source 47.
  • the housing 42 is a bowl-shaped member whose upper and lower surfaces (bottom surfaces) are opened in an octagonal shape.
  • the housing 42 has a shape in which the opening on the upper surface is larger than the opening on the lower surface, and the internal space tends to increase from the lower surface to the upper surface.
  • the connection part 43 is a cylindrical member which connects the housing 42 and the imaging part 49.
  • the incident light source 44 has a plurality of LEDs 45.
  • the half mirror 46 reflects upward light from the LED 45 of the incident light source 44 in the horizontal direction.
  • the half mirror 46 transmits light from above toward the imaging unit 49.
  • the multistage light source 47 includes an upper stage light source 47a, a middle stage light source 47b, and a lower stage light source 47c.
  • the upper stage light source 47a has a plurality of LEDs 48a
  • the middle stage light source 47b has a plurality of LEDs 48b
  • the lower stage light source 47c has a plurality of LEDs 48c.
  • the LEDs 48a to 48c all emit light in a direction inclined from the optical axis 49a.
  • the inclination angle from the optical axis 49a in the irradiation direction of the LEDs 48a to 48c is largest for the LED 48a, and the LED 48a emits light in a substantially horizontal direction.
  • the inclination angle of the LED 48c is the smallest.
  • the upper-stage light source 47a emits light in a substantially horizontal direction, so it is called a side-emitting light source, and the middle-stage light source 47b emits light obliquely upward, so it is called an inclined light source.
  • the LED 48a of the upper light source 47a is a blue LED
  • the LED 48b of the middle light source 47b, the LED 48c of the lower light source 47c, and the LED 45 of the epi-illumination light 44 are red LEDs.
  • the imaging unit 49 generates a captured image based on the received light.
  • the imaging unit 49 includes an optical system such as a lens (not shown) and an imaging device (for example, a CCD).
  • an imaging device for example, a CCD.
  • the reel unit 70 includes a plurality of reels 72 and is detachably attached to the front side of the mounting machine main body 14.
  • a tape is wound around each reel 72.
  • the surface of the tape is provided with a plurality of receiving recesses along the longitudinal direction of the tape.
  • a component is accommodated in each accommodation recess. These parts are protected by a film covering the surface of the tape.
  • Such a tape is unwound from the reel toward the rear, and the film is peeled off at the feeder section 74 to expose the parts.
  • the component in the exposed state is suctioned by the nozzle 37.
  • the operation of the reel unit 70 is controlled by a feeder controller 76 (see FIG. 3).
  • the control device 60 includes a CPU 61, a storage unit 63 (ROM, RAM, HDD, etc.), an input / output interface 65, and the like, which are connected via a bus 66.
  • the control device 60 includes a substrate transfer device 18, a drive motor 26a for the X-axis slider 26, a drive motor 30a for the Y-axis slider 30, a Z-axis motor 34, a Q-axis motor 36, and pressure for the parts camera 40 and the nozzle 37. Output a drive signal to the supply source.
  • the control device 60 inputs a captured image from the part camera 40.
  • the controller 60 is communicably connected to the feeder controller 76 of the reel unit 70.
  • each slider 26, 30 is equipped with a position sensor (not shown), and the control device 60 inputs the position information from the position sensor while the drive motor 26a of each slider 26, 30 is, Control 30a.
  • the CPU 61 of the control device 60 controls each part of the component mounter 10 based on a production job received from a management computer (not shown) to produce a substrate 16 on which a plurality of components are mounted.
  • the production job is information that defines which component is mounted on which substrate 16 and in what order in the component mounting machine 10, and how many substrates 16 the component mounting is performed.
  • FIG. 4 is a flowchart of the component mounting process routine. First, the CPU 61 causes the nozzle 37 to suction the component (S100).
  • the CPU 61 controls the respective parts so that the nozzle 37 faces the part fed to the predetermined part supply position by the reel unit 70, and the part at the predetermined part supply position is attracted to the nozzle 37. Supplies negative pressure to the nozzle 37.
  • the CPU 61 executes component imaging processing (S200). Specifically, the CPU 61 moves the component sucked by the nozzle 37 to the imaging range above the part camera 40 and causes the part camera 40 to image the component. Details of the component imaging process will be described later. Subsequently, the CPU 61 recognizes the position of the component with respect to the center of the nozzle 37 from the obtained image of the component (S300).
  • the CPU 61 mounts the component sucked by the nozzle 37 on the substrate 16 (S400). Specifically, the CPU 61 controls each part so that the component is disposed immediately above the designated position of the substrate 16 in consideration of the position of the component with respect to the center of the nozzle 37, and the nozzle 37 releases the component at that position. Supply a positive pressure to the nozzle 37. The CPU 61 mounts a predetermined number and types of components on the substrate 16 by repeatedly executing such component mounting processing.
  • FIG. 5 is a flowchart of component imaging processing.
  • chromatic aberration There are two types of chromatic aberration: axial chromatic aberration and lateral chromatic aberration.
  • On-axis chromatic aberration refers to a phenomenon in which light parallel to the optical axis on the optical axis does not form an image at one point due to the difference in refractive index depending on the wavelength. Specifically, as shown in FIG. 6, in the case of blue light, an image is formed on the near side, and in the case of red light, an image is formed on the back side.
  • lateral chromatic aberration refers to a phenomenon in which color shift occurs toward the periphery of an image when light incident obliquely to the optical axis ties an image at a different position on the image plane. Specifically, as shown in FIG. 7, even if the focal distance is the same, the distance from the center line of the lens is different between blue light and red light.
  • the influence of such chromatic aberration can be eliminated by lens design, but in the present embodiment, the image height is not adjusted by lens design, but the image height is adjusted or calibration measurement is performed for each lighting light as described later. The problem is solved by switching the resolution at the time of processing.
  • a table (Table 1) indicating the correspondence between the lighting light and the appropriate value of the imaging height is stored in advance in the storage unit 63.
  • the imaging point on the optical axis can be calculated at the lens design stage based on the lens used for the imaging unit 49 and the wavelength of the lighting light of the illumination unit 41. Therefore, the appropriate value of the imaging height corresponding to the lighting light can be obtained in advance.
  • the lighting light is red light, blue light, red light and blue light.
  • the imaging height is the height from the upper end surface of the part camera 40 to the tip surface of the nozzle 37
  • the appropriate value of the imaging height of blue light is H1
  • the appropriate value of the imaging height of red light is H2, red
  • the appropriate values for the imaging heights of the light and the blue light are set to H3 (H2> H3> H1).
  • the lighting condition for making lighting light blue light is to light only blue LED48a
  • the lighting condition for making lighting light red light is lighting only red LEDs 45, 48b and 48c.
  • the lighting condition for turning the lighting light into blue light and red light is to light all the LEDs 45, 48a to 48c.
  • the lighting light corresponding to the component sucked by the nozzle is a table showing the correspondence between the component stored in the storage unit 63 and the lighting light ( It reads from Table 2) and acquires (S210).
  • This table is a table in which the results of setting the lighting light corresponding to each component in advance using the off-line imaging device 90 shown in FIG.
  • the off-line imaging device 90 mounts the test camera 140 which is the same camera as the part camera 40 on the stand 92 so that the imaging range is on the lower side, and relative to the test camera 140 the component mounting table 94 below the test camera 140. Provided to be movable up and down.
  • the lighting light is set using the off-line imaging device 90 for each part used for the production job. Specifically, first, one component is placed on the component mounting table 94, and the component is sequentially imaged with three types of red light, blue light, red light and blue light.
  • the distance between the upper surface of the component mounting table 94 and the lower end surface of the test camera 140 is matched with the appropriate value (see Table 1) of the imaging height corresponding to the lighting light.
  • a predetermined image processing program by a computer is performed on the obtained image, it is determined whether or not an image processing error occurs, and the lighting light that did not become an image processing error is stored in the storage unit 63 in association with the component. . If an image processing error occurs with any of the lighting lights, the setting values of the image processing program are changed to finally find a lighting light that does not cause an image processing error. Note that instead of the presence or absence of the image processing error by the computer, the suitability by visual observation of the operator may be adopted.
  • the component Pa is a BGA package in which a plurality of ball terminals are formed in a lattice shape and a copper wiring pattern is formed on the lower surface of the main body.
  • a wiring pattern is reflected in addition to the ball terminal, resulting in an image processing error (see FIG. 9).
  • FIG. 10 when imaging with blue light, it is possible to avoid reflection of the wiring pattern and no image processing error occurs (FIG. 10). Therefore, blue light is set for the part Pa.
  • the ring-like bright circle in FIG.9 and FIG.10 is a ball terminal.
  • the component Pb is an LGA package (without a copper wiring pattern) in which a flat electrode is embedded in the bottom surface of the main body, and the lighting light corresponding to the component Pb is set to red light.
  • the component Pc is a small outline package (SOP) in which a plurality of leads are formed on both sides of the main body, and lighting light corresponding to the component Pc is set to blue light and red light.
  • SOP small outline package
  • the CPU 61 acquires an appropriate value of the imaging height corresponding to the lighting light acquired this time (S220). Specifically, the CPU 61 determines the imaging height corresponding to the lighting light acquired this time from the table (see Table 1) representing the correspondence between the lighting light stored in the storage unit 63 and the appropriate value of the imaging height. Read and acquire the appropriate value.
  • the CPU 61 controls the Z-axis motor so that the imaging height is an appropriate value of the imaging height acquired this time (S230), and controls the illumination unit to irradiate the component with the current lighting light,
  • the part camera 40 picks up the part (S240).
  • the image captured by the parts camera 40 is stored in the storage unit 63. Since the image is picked up at an appropriate value of the imaging height corresponding to the lighting light, the influence of axial chromatic aberration is suppressed and the image becomes clear. Therefore, by processing such a clear image, the position of the component with respect to the center of the nozzle 37 can be determined with high accuracy.
  • an appropriate resolution value for the illuminated lighting light can be obtained.
  • the distance between the upper surface of the component mounting table 94 and the lower end surface of the test camera 140 is matched with the appropriate value (see Table 1) of the imaging height corresponding to the lighting light.
  • Table 3 An example of the resolution appropriate value corresponding to the lighting light obtained by executing such calibration is shown in Table 3.
  • Table 3 is stored in the storage unit 63 as a table representing the correspondence between the lighting light and the resolution appropriate value.
  • the CPU 61 of the control device 60 uses the resolution appropriate value corresponding to the lighting light when the image of the component captured by the part camera 40 of the component mounter 10 is subjected to image processing.
  • the CPU 61 recognizes the position of the component with respect to the center of the nozzle 37 from the image of the captured component in S300.
  • the position of the center of the nozzle 37 in the image is known. In theory, the center of the nozzle 37 should coincide with the predetermined suction position of the part (usually the center of the part).
  • the center of the nozzle 37 deviates from the predetermined suction position of the parts and is sucked.
  • the CPU 61 recognizes the amount of deviation between the predetermined suction position of the component and the center of the nozzle 37 in S300. Then, the CPU 61 controls the drive motors 26 a and 30 a so that the component is disposed immediately above the designated position of the substrate 16 in consideration of the recognized displacement amount.
  • the resolution of the image captured by the part camera 40 differs depending on the lighting light. Specifically, the actual distance corresponding to one pixel differs depending on the lighting light.
  • the CPU 61 converts the displacement amount of the component with respect to the center of the nozzle 37 recognized in S300 into an actual distance, and drives the drive motors 26a and 30a. Control. Therefore, in S400, the CPU 61 can mount the component on the substrate using the highly accurate correction value of the deviation amount in which the influence of the magnification chromatic aberration is suppressed.
  • the imaging unit 49 of the present embodiment corresponds to the camera of the imaging unit of the present disclosure
  • the nozzle 37 corresponds to the holding member
  • the illumination unit 41 corresponds to the light irradiation device
  • the control device 60 corresponds to the control device.
  • the Z-axis motor 34 and the ball screw 35 correspond to a distance adjustment device
  • the imaging height corresponds to the distance between the camera and the holding member.
  • one or more light sources selected from a plurality of light sources having different wavelengths are used for imaging.
  • the appropriate value of the resolution for the light of is appropriate Use the value.
  • the appropriate value of resolution differs for each of the light of one or more light sources selected from a plurality of light sources with different wavelengths (that is, for each wavelength of lighting light) due to the influence of magnification chromatic aberration.
  • the image when processing the image obtained from the imaging unit 49, the image is processed using the appropriate value of the resolution according to the wavelength of the lighting light irradiated to the component. Therefore, it is possible to suppress the influence of lateral chromatic aberration when processing an image obtained by capturing a part.
  • the CPU 61 reads out from the storage unit 63 the resolution appropriate value for the lighting light used when capturing the image and uses it. Therefore, it is not necessary to obtain an appropriate resolution value every time by calibration measurement or the like.
  • the imaging height is determined based on the imaging point on the optical axis that fluctuates due to axial chromatic aberration. Make it a proper value. Therefore, it is possible to suppress the influence of axial chromatic aberration when processing an image obtained by capturing a part.
  • lighting light in the above-mentioned embodiment, although three types of blue light, red light, blue light and red light were illustrated as lighting light, it is not particularly limited to this, and instead of or in addition to these lighting lights Other lighting lights (for example, green light, UV light, IR light, etc.) may be used.
  • the resolution is measured using the resolution measurement sheet, but the invention is not particularly limited thereto.
  • the invention is not particularly limited thereto.
  • using a sheet or part in which dots are arranged at a constant pitch, on an image of that pitch The length may be measured to determine the resolution.
  • the parts camera 40 is illustrated as a component of the imaging unit of the present disclosure in the embodiment described above, the present invention is not particularly limited thereto, and has a multicolor illumination device in which measures for chromatic aberration are not taken on the lens side. Any camera may be used as long as it is a camera.
  • the nozzle 37 is illustrated as a holding member of the imaging unit of the present disclosure in the embodiment described above, the present invention is not particularly limited thereto, and may be, for example, a mechanical chuck or an electromagnet.
  • the reel unit 70 has been exemplified as the component supply device, but the invention is not particularly limited thereto.
  • a tray unit may be adopted in which components are placed on a tray and supplied.
  • the imaging height is the height from the upper end surface of the part camera 40 to the tip surface of the nozzle 37
  • the present invention is not particularly limited thereto.
  • the upper end face 49 may be used, or the lower end face of the nozzle 37 may be replaced with the lower face of the component attracted to the nozzle 37.
  • the imaging unit of the present disclosure and another imaging unit of the present disclosure may be configured as follows.
  • the imaging unit of the present disclosure includes a storage device that stores a relationship between one or more light sources selected from the plurality of light sources and the appropriate value of the resolution, and the control device uses the appropriate value of the resolution.
  • the appropriate value of the resolution for the light of one or more light sources selected from the plurality of light sources used for imaging may be read out from the storage device and used. In this way, it is not necessary to determine the resolution appropriate value for the lighting light used for imaging every time by calibration measurement or the like.
  • the imaging unit of the present disclosure includes a distance adjustment device that adjusts the distance between the camera and the holding member, and the control device is the distance to the light of one or more light sources selected from the plurality of light sources used for imaging. And the distance adjustment device is controlled so that the actual distance becomes an appropriate value of the distance, and thereafter the one or more selected
  • the light of the light source may be emitted to the subject held by the holding member and imaged by the camera, and an appropriate value of the resolution may be used when processing an image obtained from the camera.
  • the distance between the camera and the holding member is made to be an appropriate value of the distance obtained based on the imaging point on the optical axis which fluctuates due to axial chromatic aberration. Therefore, it is possible to suppress the influence of axial chromatic aberration when processing an image obtained by capturing an object.
  • Another imaging unit of the present disclosure includes a storage device that stores a relationship between one or more light sources selected from the plurality of light sources and the appropriate value of the distance, and the control device is configured to use the plurality of light sources used for imaging.
  • the appropriate value of the distance for the light of one or more light sources selected from the above may be read out from the storage device, and the distance adjusting device may be controlled so that the actual distance becomes the appropriate value of the distance. In this case, it is not necessary to obtain an appropriate value of the distance between the camera and the holding member with respect to the light of one or more light sources used for imaging each time by calibration measurement or the like.
  • the plurality of light sources may include at least a blue light source and a red light source.
  • the wiring pattern of the ball terminal component is formed of copper foil, reflection of the wiring pattern occurs when imaging the ball terminal with a red light source, but suppressing imaging of the wiring pattern when imaging with a blue light source can do.
  • the component mounter of the present disclosure includes any of the imaging units described above.
  • the component supplied to the component supply position is held by the holding member, the component is carried to the component mounting position, and the component is mounted on the component mounting position by releasing the holding of the holding member.
  • the part is the subject.
  • the component mounter of the present disclosure since any one of the imaging units described above is provided, the same effect as any of the imaging units described above can be obtained.
  • the present invention is applicable to the industry involving an operation of imaging a part held by a holding member.

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Operations Research (AREA)
  • Manufacturing & Machinery (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Supply And Installment Of Electrical Components (AREA)
  • Studio Devices (AREA)

Abstract

本開示の撮像ユニットは、カメラと、そのカメラに撮像される被写体を保持する保持部材と、その保持部材に保持された被写体に向かって波長の異なる複数の光源の光を照射可能な光照射装置と、撮像に使用する複数の光源から選んだ１以上の光源の光に対する分解能の適正値を求め、選んだ１以上の光源の光を保持部材に保持された被写体に照射してカメラで撮像し、カメラから得られた画像を処理する際に分解能の適正値を利用する制御装置と、を備える。

Description

撮像ユニット及び部品実装機
　本明細書では、撮像ユニット及び部品実装機を開示する。
　従来、部品実装機としては、波長が互いに異なる２種類の照明装置及びその照明装置で照らされる被写体を撮像するカメラを基台上に設け、それぞれの波長でコントラスト値を演算し、予め求めてあるそれぞれの波長でのコントラストカーブ特性により、演算されたコントラスト値に対応する可視光波長での合焦位置を求めるものが知られている。
特開２０１０－２３２５４８号公報
　ところで、部品実装機では、波長が互いに異なる２種類の照明装置で照らされる被写体を撮像するにあたり、倍率色収差の影響により焦点の距離が同じであっても光軸からの距離が異なることがある。このような倍率色収差の影響については、特許文献１では考慮されていなかった。
　本開示は、このような課題に鑑みなされたものであり、色収差の影響を抑制して、被写体を撮像した画像から高精度な情報を得ることを主目的とする。
　本開示の撮像ユニットは、
　カメラと、
　前記カメラに撮像される被写体を保持する保持部材と、
　前記保持部材に保持された前記被写体に向かって波長の異なる複数の光源の光を照射可能な光照射装置と、
　撮像に使用する前記複数の光源から選んだ１以上の光源の光に対する分解能の適正値を求め、前記選んだ１以上の光源の光を前記保持部材に保持された前記被写体に照射して前記カメラで撮像し、前記カメラから得られた画像を処理する際に前記分解能の適正値を利用する制御装置と、
　を備えたものである。
　この撮像ユニットでは、波長の異なる複数の光源から選んだ１以上の光源を撮像に使用するものとし、選んだ１以上の光源の光に対する分解能の適正値を求める。そして、選んだ１以上の光源の光を保持部材に保持された被写体に照射してカメラで撮像し、そのカメラから得られた画像を処理する際に、先ほど求めた分解能の適正値を利用する。分解能の適正値は、倍率色収差の影響により、波長の異なる複数の光源から選んだ１以上の光源の光ごとに（つまり照明色の波長ごとに）異なる。この撮像ユニットでは、カメラから得られた画像を処理する際に、被写体を照射した照明色の波長に応じた分解能の適正値を利用してその画像を処理する。したがって、被写体を撮像した画像を処理する際の倍率色収差の影響を抑制することができる。
　本開示の別の撮像ユニットは、
　カメラと、
　被写体を保持する保持部材と、
　前記カメラと前記保持部材との距離を調節する距離調節装置と、
　前記保持部材に保持された前記被写体に向かって波長の異なる複数の光源の光を照射可能な光照射装置と、
　撮像に使用する前記複数の光源から選んだ１以上の光源の光に対する前記距離の適正値を軸上色収差によって変動する光軸上の結像点に基づいて求め、実際の前記距離が前記距離の適正値になるよう前記距離調節装置を制御する制御装置と、
　を備えたものである。
　この撮像ユニットでは、波長の異なる複数の光源から選んだ１以上の光源を撮像に使用するものとする。また、選んだ１以上の光源の光に対するカメラと保持部材との距離の適正値が、軸上色収差によって変動する光軸上の結像点に基づいて求められる。そして、実際のカメラと保持部材との距離が適正値になるように制御される。その後、被写体はカメラによって撮像される。つまり、撮像時のカメラと保持部材との距離は軸上色収差の影響を考慮した適正値に設定される。したがって、被写体を撮像した画像を処理する際の軸上色収差の影響を抑制することができる。
部品実装機１０の斜視図。 パーツカメラ４０の構成の概略説明図。 部品実装機１０の制御に関わる構成を示すブロック図。 部品実装処理ルーチンのフローチャート。 部品撮像処理ルーチンのフローチャート。 軸上色収差の説明図。 倍率色収差の説明図。 オフライン撮像機９０の構成の概略説明図。 部品Ｐａを赤色光で照射して撮像したときの画像の説明図。 部品Ｐａを青色光で照射して撮像したときの画像の説明図。
　本開示の画像処理方法及び画像処理装置の好適な実施形態を、図面を参照しながら以下に説明する。図１は部品実装機１０の斜視図、図２はパーツカメラ４０の構成の概略説明図、図３は部品実装機１０の制御に関わる構成を示すブロック図である。なお、本実施形態において、左右方向（Ｘ軸）、前後方向（Ｙ軸）及び上下方向（Ｚ軸）は、図１に示した通りとする。
　部品実装機１０は、基台１２と、基台１２の上に設置された実装機本体１４と、実装機本体１４に装着された部品供給装置としてのリールユニット７０とを備えている。
　実装機本体１４は、基台１２に対して交換可能に設置されている。この実装機本体１４は、基板搬送装置１８と、ヘッド２４と、ノズル３７と、パーツカメラ４０と、制御装置６０とを備えている。
　基板搬送装置１８は、基板１６を搬送したり保持したりする装置である。この基板搬送装置１８は、支持板２０，２０と、コンベアベルト２２，２２（図１では片方のみ図示）とを備えている。支持板２０，２０は、左右方向に延びる部材であり、図１の前後に間隔を開けて設けられている。コンベアベルト２２，２２は、支持板２０，２０の左右に設けられた駆動輪及び従動輪に無端状となるように架け渡されている。基板１６は、一対のコンベアベルト２２，２２の上面に乗せられて左から右へと搬送される。この基板１６は、多数立設された支持ピン２３によって裏面側から支持可能となっている。そのため、基板搬送装置１８は基板支持装置としての役割も果たす
　ヘッド２４は、Ｘ軸スライダ２６の前面に取り付けられている。Ｘ軸スライダ２６は、Ｙ軸スライダ３０の前面に取り付けられている。Ｙ軸スライダ３０は、前後方向に延びる左右一対のガイドレール３２，３２にスライド可能に取り付けられている。Ｙ軸スライダ３０の前面には、左右方向に延びる上下一対のガイドレール２８，２８が設けられている。Ｘ軸スライダ２６は、このガイドレール２８，２８にスライド可能に取り付けられている。ヘッド２４は、Ｘ軸スライダ２６が左右方向に移動するのに伴って左右方向に移動し、Ｙ軸スライダ３０が前後方向に移動するのに伴って前後方向に移動する。なお、各スライダ２６，３０は、それぞれ駆動モータ２６ａ，３０ａ（図３参照）により駆動される。また、ヘッド２４は、Ｚ軸モータ３４を内蔵し、Ｚ軸に沿って延びるボールネジ３５に取り付けられたノズル３７の高さをＺ軸モータ３４によって調整する。さらに、ヘッド２４は、ノズル３７を軸回転させるＱ軸モータ３６（図３参照）を内蔵している。
　ノズル３７は、ノズル先端に部品を吸着して保持したり、ノズル先端に吸着している部品を吸着解除したりする部材である。ノズル３７は、図示しない圧力供給源から圧力を供給可能であり、例えば負圧が供給されると部品を吸着し、負圧の供給が停止されるか又は正圧が供給されると部品を吸着解除する。ノズル３７は、ヘッド２４の本体底面から下方に突出している。また、Ｚ軸モータ３４によってノズル３７がＺ軸方向に沿って昇降することで、ノズル３７に吸着された部品の高さが調整される。Ｑ軸モータ３６によってノズル３７が回転することで、ノズル３７に吸着された部品の向きが調整される。
　パーツカメラ４０は、基板搬送装置１８の前側の支持板２０の前方に配置されている。パーツカメラ４０は、パーツカメラ４０の上方が撮像範囲であり、ノズル３７に保持された部品を下方から撮像して撮像画像を生成する。パーツカメラ４０は、図２に示すように、照明部４１と、撮像部４９とを備えている。
　照明部４１は、撮像対象の部品に対して光を照射する。この照明部４１は、ハウジング４２と、連結部４３と、落射光源４４と、ハーフミラー４６と、多段光源４７と、を備えている。ハウジング４２は、上面及び下面（底面）が八角形状に開口した椀状の部材である。ハウジング４２は、下面の開口よりも上面の開口の方が大きく、下面から上面に向かって内部空間が大きくなる傾向の形状をしている。連結部４３は、ハウジング４２と撮像部４９とを連結する筒状の部材である。落射光源４４は、ＬＥＤ４５を複数有している。ハーフミラー４６は、落射光源４４のＬＥＤ４５からの水平方向の光を上方に反射する。また、ハーフミラー４６は上方からの光については撮像部４９に向けて透過する。多段光源４７は、上段光源４７ａと、中段光源４７ｂと、下段光源４７ｃとを備えている。上段光源４７ａは、複数のＬＥＤ４８ａを有し、中段光源４７ｂは、複数のＬＥＤ４８ｂを有し、下段光源４７ｃは、複数のＬＥＤ４８ｃを有している。ＬＥＤ４８ａ～４８ｃは、いずれも光軸４９ａから傾斜した方向に光を照射する。ＬＥＤ４８ａ～４８ｃの照射方向の光軸４９ａからの傾斜角は、ＬＥＤ４８ａが最も大きく、ＬＥＤ４８ａはほぼ水平方向に光を照射する。また、この傾斜角は、ＬＥＤ４８ｃが最も小さくなっている。上段光源４７ａはほぼ水平方向に光を照射することから側射光源と称し、中段光源４７ｂは斜め上向きに光を照射することから傾斜光源と称する。本実施形態では、上段光源４７ａのＬＥＤ４８ａは青色ＬＥＤであり、中段光源４７ｂのＬＥＤ４８ｂ、下段光源４７ｃのＬＥＤ４８ｃ及び落射光源４４のＬＥＤ４５が赤色ＬＥＤである。
　撮像部４９は、受光した光に基づいて撮像画像を生成する。この撮像部４９は、図示しないレンズなどの光学系及び撮像素子（例えばＣＣＤ）を備えている。落射光源４４及び多段光源４７から発せられ撮像対象の部品で反射した後の光がハーフミラー４６を透過して撮像部４９に到達すると、撮像部４９はこの光を受光して撮像画像を生成する。
　リールユニット７０は、複数のリール７２を備え、実装機本体１４の前側に着脱可能に取り付けられている。各リール７２には、テープが巻き付けられている。テープの表面には、テープの長手方向に沿って複数の収容凹部が設けられている。各収容凹部には、部品が収容されている。これらの部品は、テープの表面を覆うフィルムによって保護されている。こうしたテープは、リールから後方に向かって巻きほどかれ、フィーダ部７４においてフィルムが剥がされて部品が露出した状態となる。この露出した状態の部品は、ノズル３７によって吸着される。リールユニット７０の動作はフィーダコントローラ７６（図３参照）によって制御される。
　制御装置６０は、図３に示すように、ＣＰＵ６１、記憶部６３（ＲＯＭ、ＲＡＭ、ＨＤＤなど）、入出力インターフェース６５などを備えており、これらはバス６６を介して接続されている。この制御装置６０は、基板搬送装置１８、Ｘ軸スライダ２６の駆動モータ２６ａ、Ｙ軸スライダ３０の駆動モータ３０ａ、Ｚ軸モータ３４、Ｑ軸モータ３６、パーツカメラ４０及びノズル３７用の図示しない圧力供給源へ駆動信号を出力する。また、制御装置６０は、パーツカメラ４０からの撮像画像を入力する。制御装置６０は、リールユニット７０のフィーダコントローラ７６と通信可能に接続されている。なお、図示しないが、各スライダ２６，３０には図示しない位置センサが装備されており、制御装置６０はそれらの位置センサからの位置情報を入力しつつ、各スライダ２６，３０の駆動モータ２６ａ，３０ａを制御する。
　次に、部品実装機１０が部品実装処理を行うときの動作について説明する。制御装置６０のＣＰＵ６１は、図示しない管理コンピュータから受信した生産ジョブに基づいて部品実装機１０の各部を制御して複数の部品が実装された基板１６を生産する。生産ジョブは、部品実装機１０においてどの部品をどういう順番でどの基板１６に装着するか、また、何枚の基板１６に部品の実装を行うかなどを定めた情報である。図４は部品実装処理ルーチンのフローチャートである。ＣＰＵ６１は、まず、部品をノズル３７に吸着させる（Ｓ１００）。具体的には、ＣＰＵ６１は、リールユニット７０によって所定の部品供給位置に送り出された部品にノズル３７が対向するように各部を制御し、所定の部品供給位置の部品がノズル３７に吸着されるようにノズル３７に負圧を供給する。続いて、ＣＰＵ６１は、部品撮像処理を実行する（Ｓ２００）。具体的には、ＣＰＵ６１は、ノズル３７に吸着された部品をパーツカメラ４０の上方の撮像範囲に移動させ、その部品をパーツカメラ４０で撮像させる。この部品撮像処理の詳細については後述する。続いて、ＣＰＵ６１は、得られた部品の画像から、ノズル３７の中心に対する部品の位置を認識する（Ｓ３００）。続いて、ＣＰＵ６１は、ノズル３７に吸着された部品を基板１６に実装する（Ｓ４００）。具体的には、ＣＰＵ６１は、ノズル３７の中心に対する部品の位置を考慮して部品が基板１６の指定位置の直上に配置されるように各部を制御し、ノズル３７がその位置で部品を放すようにノズル３７に正圧を供給する。ＣＰＵ６１は、こうした部品実装処理を繰り返し実行することにより、基板１６上に予め定められた数及び種類の部品を実装する。
　次に、上述したＳ２００の部品撮像処理のサブルーチンについて説明する。図５は部品撮像処理のフローチャートである。その説明に先立ち、まず、色収差について説明する。色収差には、軸上色収差と倍率色収差の２つがある。軸上色収差とは、光軸上では光軸に対して平行な光が波長による屈折率の違いにより像が一点に結ばれない現象をいう。具体的には、図６に示すように、青色光であれば手前側、赤色光であれば奥手側に結像する。一方、倍率色収差とは、光軸に対して斜めに入射した光が像面の異なる位置に像を結んでしまうことにより画像周辺ほど色ずれが発生する現象をいう。具体的には、図７に示すように、焦点の距離が同じであってもレンズの中心線からの距離が青色光と赤色光とで異なる。こうした色収差の影響は、レンズ設計で解消することができるが、本実施形態では、レンズ設計で解消するのではなく、後述するように点灯光毎に撮像高さを調整したりキャリブレーション測定により画像処理時の分解能を切り替えたりすることにより解消する。
　点灯光と撮像高さの適正値との対応関係を表すテーブル（表１）は、予め記憶部６３に記憶されている。光軸上の結像点は、撮像部４９に使用しているレンズと照明部４１の点灯光の波長によりレンズ設計段階で計算できる。そのため、点灯光に対応する撮像高さの適正値を予め求めることができる。本実施形態では、点灯光は、赤色光か、青色光か、赤色光及び青色光である。また、撮像高さはパーツカメラ４０の上端面からノズル３７の先端面までの高さであり、青色光の撮像高さの適正値はＨ１、赤色光の撮像高さの適正値はＨ２、赤色光及び青色光の撮像高さの適正値はＨ３に設定されている（Ｈ２＞Ｈ３＞Ｈ１）。なお、点灯光を青色光にするための点灯条件は青色のＬＥＤ４８ａのみを点灯することであり、点灯光を赤色光にするための点灯条件は赤色のＬＥＤ４５，４８ｂ，４８ｃのみを点灯することであり、点灯光を青色光及び赤色光にするための点灯条件はすべてのＬＥＤ４５，４８ａ～４８ｃを点灯することである。
Figure JPOXMLDOC01-appb-T000001
　さて、ＣＰＵ６１は、図５の部品撮像処理を開始すると、まず、ノズルに吸着された部品に対応する点灯光を、記憶部６３に記憶されている部品と点灯光との対応関係を表すテーブル（表２参照）から読み出して取得する（Ｓ２１０）。
Figure JPOXMLDOC01-appb-T000002
　このテーブルは、図８に示すオフライン撮像機９０を用いて予め各部品に対応する点灯光を設定した結果をまとめたものである。オフライン撮像機９０は、スタンド９２にパーツカメラ４０と同じカメラであるテストカメラ１４０を撮像範囲が下方になるように取り付け、テストカメラ１４０の下方に部品載置台９４をテストカメラ１４０に対して相対的に上下動可能に設けたものである。点灯光は、生産ジョブに用いられる部品ごとにオフライン撮像機９０を用いて設定される。具体的には、まず、一つの部品を部品載置台９４に載置し、その部品を赤色光、青色光、赤色光及び青色光の３種類で順次撮像する。このとき、部品載置台９４の上面とテストカメラ１４０の下端面との距離を点灯光に対応する撮像高さの適正値（表１参照）と一致させる。得られた画像について、コンピュータによる所定の画像処理プログラムを行い、画像処理エラーになるか否かを判定し、画像処理エラーにならなかった点灯光をその部品に対応づけて記憶部６３に記憶する。いずれの点灯光でも画像処理エラーになった場合には、画像処理プログラムの設定値などを変更して最終的に画像処理エラーにならない点灯光を見つけ出す。なお、コンピュータによる画像処理エラーの有無の代わりに、オペレータの目視による適否を採用してもよい。
　例えば、部品Ｐａは、本体の下面に複数のボール端子が格子状に形成されると共に銅の配線パターンが形成されたＢＧＡパッケージである。この部品Ｐａのボール端子を撮像する場合、赤色光で撮像するとボール端子の他に配線パターンが映り込んで画像処理エラーになる（図９参照）。しかし、青色光で撮像すると配線パターンの映り込みを回避できるため画像処理エラーにならない（図１０）。そのため、部品Ｐａに対して青色光が設定される。部品ＰａのようなＢＧＡパッケージのボール端子を撮像する場合、青色光は側射光源のみから照射されるのが望ましい。なお、図９及び図１０における環状の明るい円がボール端子である。部品Ｐｂは、本体の底面に平面電極が埋め込まれたＬＧＡパッケージ（銅の配線パターンを有さない）であり、この部品Ｐｂに対応する点灯光は赤色光に設定されている。部品Ｐｃは、本体の両側面に複数のリードが形成されたスモールアウトラインパッケージ（ＳＯＰ）であり、この部品Ｐｃに対応する点灯光は青色光及び赤色光に設定されている。
　続いて、ＣＰＵ６１は、今回取得した点灯光に対応する撮像高さの適正値を取得する（Ｓ２２０）。具体的には、ＣＰＵ６１は、記憶部６３に記憶された点灯光と撮像高さの適正値との対応関係を表すテーブル（表１参照）から、今回取得した点灯光に対応する撮像高さの適正値を読み出して取得する。
　続いて、ＣＰＵ６１は、撮像高さが今回取得した撮像高さの適正値となるようにＺ軸モータを制御し（Ｓ２３０）、照明部を制御して部品を今回の点灯光で照射しながら、パーツカメラ４０でその部品を撮像する（Ｓ２４０）。パーツカメラ４０によって撮像された画像は記憶部６３に記憶される。その画像は、撮像高さが点灯光に対応した撮像高さの適正値で撮像されたものであるため、軸上色収差の影響が抑制され明瞭な画像となる。したがって、このような明瞭な画像を処理することにより、ノズル３７の中心に対する部品の位置を高精度に求めることができる。
　次に、ＣＰＵ６１が上述したＳ３００においてノズル３７の中心に対する部品の位置を認識する際の画像処理時の分解能適正値を設定する方法について説明する。まず、倍率色収差を補正するためのキャリブレーションを実行する。このキャリブレーションは、上述したオフライン撮像機９０を用いて行われる。例えば、オペレータが部品載置台９４に分解能測定用シートを載置する。分解能測定用シートには、計測点が２つ設けられており、２点間距離は既知である。３つの点灯光のいずれかで照射した分解能測定用シートをテストカメラ１４０で撮像し、得られた画像上での２つの計測点の２点間距離を算出する。２点間のピクセル総数は予めわかっている。そのため、算出した２点間距離をそのピクセル総数で除すことにより照射した点灯光に対する分解能適正値が得られる。なお、キャリブレーションを実行する際、部品載置台９４の上面とテストカメラ１４０の下端面との距離は、点灯光に対応する撮像高さの適正値（表１参照）と一致させる。
　このようなキャリブレーションを実行して得られた点灯光に対応する分解能適正値の一例を表３に示す。表３は、点灯光と分解能適正値との対応関係を表すテーブルとして記憶部６３に記憶される。制御装置６０のＣＰＵ６１は、部品実装機１０のパーツカメラ４０によって撮像された部品の画像を画像処理する際、その画像を撮像したときの点灯光に対応する分解能適正値を用いる。ＣＰＵ６１は、Ｓ３００において、撮像された部品の画像から、ノズル３７の中心に対する部品の位置を認識する。なお、画像内におけるノズル３７の中心の位置は既知である。理論上、ノズル３７の中心は部品の所定の吸着位置（通常は部品の中心）と一致するはずである。しかし、部品の供給位置のずれ等により、ノズル３７の中心と部品の所定の吸着位置はずれて吸着される。ＣＰＵ６１は、Ｓ３００で、部品の所定の吸着位置とノズル３７の中心とのずれ量を認識する。そしてＣＰＵ６１は、認識されたずれ量を考慮して、部品が基板１６の指定位置の直上に配置されるように、駆動モータ２６ａ，３０ａを制御する。ここで、パーツカメラ４０によって撮像された画像の分解能は、点灯光により異なる。具体的には、１ピクセルに相当する実際の距離が、点灯光によって異なる。このため、ＣＰＵ６１は、表３のテーブルの対応する分解能適正値を用いて、Ｓ３００で認識されたノズル３７の中心に対する部品のずれ量を、実際の距離に変換して、駆動モータ２６ａ，３０ａを制御する。したがって、ＣＰＵ６１は、Ｓ４００において、倍率色収差の影響が抑制された高精度なずれ量の補正値を用いて、部品を基板上に実装することができる。
Figure JPOXMLDOC01-appb-T000003
　ここで、本実施形態の構成要素と本開示の撮像ユニットの構成要素との対応関係について説明する。本実施形態の撮像部４９が本開示の撮像ユニットのカメラに相当し、ノズル３７が保持部材に相当し、照明部４１が光照射装置に相当し、制御装置６０が制御装置に相当する。また、Ｚ軸モータ３４及びボールネジ３５が距離調節装置に相当し、撮像高さがカメラと保持部材との距離に相当する。
　以上説明した本実施形態では、波長の異なる複数の光源（上段光源４７ａ、中段光源４７ｂ、下段光源４７ｃ及び落射光源４４）から選んだ１以上の光源を撮像に使用し、選んだ１以上の光源の光に対する分解能の適正値を求める。そして、選んだ１以上の光源の光をノズル３７に保持された部品に照射して撮像部４９で撮像し、その撮像部４９から得られた画像を処理する際に、先ほど求めた分解能の適正値を利用する。分解能の適正値は、倍率色収差の影響により、波長の異なる複数の光源から選んだ１以上の光源の光ごとに（つまり点灯光の波長ごとに）異なる。本実施形態では、撮像部４９から得られた画像を処理する際に、部品を照射した点灯光の波長に応じた分解能の適正値を利用してその画像を処理する。したがって、部品を撮像した画像を処理する際の倍率色収差の影響を抑制することができる。
　また、ＣＰＵ６１は、画像を処理する際に、その画像を撮像するときに使用した点灯光に対する分解能適正値を記憶部６３から読み出して利用する。そのため、分解能適正値をキャリブレーション測定等で毎回求める必要がない。
　更に、ノズル３７に吸着された部品をパーツカメラ４０の撮像部４９で撮像する前に、撮像高さを、軸上色収差によって変動する光軸上の結像点に基づいて求めた撮像高さの適正値になるようにする。そのため、部品を撮像した画像を処理する際の軸上色収差の影響も抑制することができる。
　更にまた、撮像高さの適正値を記憶部６３から読み出し、実際の撮像高さが撮像高さの適正値になるよう制御するため、撮像高さの適正値をキャリブレーション測定等で毎回求める必要がない。
　なお、本発明は上述した実施形態に何ら限定されることはなく、本発明の技術的範囲に属する限り種々の態様で実施し得ることはいうまでもない。
　例えば、上述した実施形態では、点灯光として、青色光、赤色光、青色光及び赤色光の３種類を例示したが、特にこれに限定されるものではなく、これらの点灯光に代えて又は加えて他の点灯光（例えば緑色光やＵＶ光、ＩＲ光など）を用いてもよい。
　上述した実施形態では、分解能測定用シートを用いて分解能を測定したが、特にこれに限定されるものではなく、例えば定ピッチでドットが並んでいるシート又は部品を用いてそのピッチの画像上での長さを測定して分解能を求めるようにしてもよい。
　上述した実施形態では、本開示の撮像ユニットの構成要素としてパーツカメラ４０を例示したが、特にこれに限定されるものではなく、レンズ側で色収差の対策がなされていない多色照明装置を有したカメラであれば、どのようなカメラであってもよい。
　上述した実施形態では、本開示の撮像ユニットの保持部材としてノズル３７を例示したが、特にこれに限定されるものではなく、例えばメカニカルチャックや電磁石としてもよい。
　上述した実施形態では、部品供給装置としてリールユニット７０を例示したが、特にこれに限定されるものではなく、例えば、トレイに部品を載せて供給するトレイユニットを採用してもよい。
　上述した実施形態では、撮像高さをパーツカメラ４０の上端面からノズル３７の先端面までの高さとしたが、特にこれに限定されるものではなく、パーツカメラ４０の上端面の代わりに撮像部４９の上端面としてもよいし、ノズル３７の先端面の代わりにノズル３７に吸着された部品の下面としてもよい。
　本開示の撮像ユニットや本開示の別の撮像ユニットは、以下のように構成してもよい。
　本開示の撮像ユニットは、前記複数の光源から選んだ１以上の光源と前記分解能の適正値との関係を記憶する記憶装置を備え、前記制御装置は、前記分解能の適正値を利用するにあたり、撮像に使用する前記複数の光源から選んだ１以上の光源の光に対する前記分解能の適正値を前記記憶装置から読み出して利用してもよい。こうすれば、撮像に使用する点灯光に対する分解能適正値をキャリブレーション測定等で毎回求める必要がなくなる。
　本開示の撮像ユニットは、前記カメラと前記保持部材との距離を調節する距離調節装置を備え、前記制御装置は、撮像に使用する前記複数の光源から選んだ１以上の光源の光に対する前記距離の適正値を軸上色収差によって変動する光軸上の結像点に基づいて求め、実際の前記距離が前記距離の適正値になるよう前記距離調節装置を制御し、その後、前記選んだ１以上の光源の光を前記保持部材に保持された前記被写体に照射して前記カメラで撮像し、前記カメラから得られた画像を処理する際に前記分解能の適正値を利用してもよい。こうすれば、被写体をカメラで撮像する前に、カメラと前記保持部材との距離を、軸上色収差によって変動する光軸上の結像点に基づいて求めた距離の適正値になるようにするため、被写体を撮像した画像を処理する際の軸上色収差の影響も抑制することができる。
　本開示の別の撮像ユニットは、前記複数の光源から選んだ１以上の光源と前記距離の適正値との関係を記憶する記憶装置を備え、前記制御装置は、撮像に使用する前記複数の光源から選んだ１以上の光源の光に対する前記距離の適正値を前記記憶装置から読み出し、実際の前記距離が前記距離の適正値になるよう前記距離調節装置を制御してもよい。こうすれば、撮像に使用する１以上の光源の光に対するカメラと保持部材との距離の適正値をキャリブレーション測定等で毎回求める必要がなくなる。
　上述したいずれかの撮像ユニットにおいて、前記複数の光源は、少なくとも青色の光源と赤色の光源とを含むようにしてもよい。例えば、ボール端子部品の配線パターンが銅箔で形成されている場合、ボール端子を赤色の光源で撮像すると配線パターンの映り込みが発生するが、青色の光源で撮像すると配線パターンの映り込みを抑制することができる。一方、平面に端子が埋め込まれ配線パターンを有さない部品の場合、埋め込まれた端子を赤色の光源で撮像するのが好ましい。
　本開示の部品実装機は、上述したいずれかの撮像ユニットを備えたものである。部品実装機は、例えば、部品供給位置に供給された部品を保持部材で保持し、その部品を部品実装位置まで運んで保持部材の保持を解除することにより、部品実装位置に部品を実装する。この場合、部品が被写体になる。本開示の部品実装機によれば、上述したいずれかの撮像ユニットを備えているため、上述したいずれかの撮像ユニットと同様の効果が得られる。
　本発明は、保持部材に保持された部品を撮像する作業を伴う産業に利用可能である。
１０　部品実装機、１２　基台、１４　実装機本体、１６　基板、１８　基板搬送装置、２０　支持板、２２　コンベアベルト、２３　支持ピン、２４　ヘッド、２６　Ｘ軸スライダ、２６ａ　駆動モータ、２８　ガイドレール、３０　Ｙ軸スライダ、３０ａ　駆動モータ、３２　ガイドレール、３４　Ｚ軸モータ、３５　ボールネジ、３６　Ｑ軸モータ、３７　ノズル、４０　パーツカメラ、４１　照明部、４２　ハウジング、４３　連結部、４４　落射光源、４５　ＬＥＤ、４６　ハーフミラー、４７　多段光源、４７ａ　上段光源、４７ｂ　中段光源、４７ｃ　下段光源、４８ａ～４８ｃ　ＬＥＤ、４９　撮像部、４９ａ　光軸、６０　制御装置、６１　ＣＰＵ、６３　記憶部、６５　入出力インターフェース、６６　バス、７０　リールユニット、７２　リール、７４　フィーダ部、７６　フィーダコントローラ、９０　オフライン撮像機、９２　スタンド、９４　部品載置台、１４０　テストカメラ。

Claims (7)

  1. 　カメラと、
    　前記カメラに撮像される被写体を保持する保持部材と、
    　前記保持部材に保持された前記被写体に向かって波長の異なる複数の光源の光を照射可能な光照射装置と、
    　撮像に使用する前記複数の光源から選んだ１以上の光源の光に対する分解能の適正値を求め、前記選んだ１以上の光源の光を前記保持部材に保持された前記被写体に照射して前記カメラで撮像し、前記カメラから得られた画像を処理する際に前記分解能の適正値を利用する制御装置と、
    　を備えた撮像ユニット。
  2. 　請求項１に記載の撮像ユニットであって、
    　前記複数の光源から選んだ１以上の光源と前記分解能の適正値との関係を記憶する記憶装置
    　を備え、
    　前記制御装置は、前記分解能の適正値を利用するにあたり、撮像に使用する前記複数の光源から選んだ１以上の光源の光に対する前記分解能の適正値を前記記憶装置から読み出して利用する、
    　撮像ユニット。
  3. 　請求項１又は２に記載の撮像ユニットであって、
    　前記カメラと前記保持部材との距離を調節する距離調節装置
    　を備え、
    　前記制御装置は、撮像に使用する前記複数の光源から選んだ１以上の光源の光に対する前記距離の適正値を軸上色収差によって変動する光軸上の結像点に基づいて求め、実際の前記距離が前記距離の適正値になるよう前記距離調節装置を制御し、その後、前記選んだ１以上の光源の光を前記保持部材に保持された前記被写体に照射して前記カメラで撮像し、前記カメラから得られた画像を処理する際に前記分解能の適正値を利用する、
    　撮像ユニット。
  4. 　カメラと、
    　被写体を保持する保持部材と、
    　前記カメラと前記保持部材との距離を調節する距離調節装置と、
    　前記保持部材に保持された前記被写体に向かって波長の異なる複数の光源の光を照射可能な光照射装置と、
    　撮像に使用する前記複数の光源から選んだ１以上の光源の光に対する前記距離の適正値を軸上色収差によって変動する光軸上の結像点に基づいて求め、実際の前記距離が前記距離の適正値になるよう前記距離調節装置を制御する制御装置と、
    　を備えた撮像ユニット。
  5. 　請求項４に記載の撮像ユニットであって、
    　前記複数の光源から選んだ１以上の光源と前記距離の適正値との関係を記憶する記憶装置
    　を備え、
    　前記制御装置は、撮像に使用する前記複数の光源から選んだ１以上の光源の光に対する前記距離の適正値を前記記憶装置から読み出し、実際の前記距離が前記距離の適正値になるよう前記距離調節装置を制御する、
    　撮像ユニット。
  6. 　前記複数の光源は、少なくとも青色の光源と赤色の光源とを含む、
    　請求項１～５のいずれか１項に記載の撮像ユニット。
  7. 　請求項１～６のいずれか１項に記載の撮像ユニットを備えた部品実装機。
PCT/JP2017/043701 2017-12-05 2017-12-05 撮像ユニット及び部品実装機 WO2019111331A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
US16/766,941 US11095800B2 (en) 2017-12-05 2017-12-05 Imaging unit and component mounting machine
CN201780097332.8A CN111434103B (zh) 2017-12-05 2017-12-05 拍摄单元及元件安装机
EP17933939.5A EP3723357A4 (en) 2017-12-05 2017-12-05 IMAGING UNIT AND ELEMENT MOUNTING MACHINE
JP2019557905A JP6837161B2 (ja) 2017-12-05 2017-12-05 撮像ユニット及び部品実装機
PCT/JP2017/043701 WO2019111331A1 (ja) 2017-12-05 2017-12-05 撮像ユニット及び部品実装機

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2017/043701 WO2019111331A1 (ja) 2017-12-05 2017-12-05 撮像ユニット及び部品実装機

Publications (1)

Publication Number Publication Date
WO2019111331A1 true WO2019111331A1 (ja) 2019-06-13

Family

ID=66751388

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2017/043701 WO2019111331A1 (ja) 2017-12-05 2017-12-05 撮像ユニット及び部品実装機

Country Status (5)

Country Link
US (1) US11095800B2 (ja)
EP (1) EP3723357A4 (ja)
JP (1) JP6837161B2 (ja)
CN (1) CN111434103B (ja)
WO (1) WO2019111331A1 (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021124447A1 (ja) 2019-12-17 2021-06-24 株式会社Ｆｕｊｉ 作業機
WO2021145383A1 (ja) * 2020-01-14 2021-07-22 日東電工株式会社 通気部品
WO2021171487A1 (ja) 2020-02-27 2021-09-02 株式会社Ｆｕｊｉ 画像補正方法、撮像装置および検査装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004349279A (ja) * 2003-05-13 2004-12-09 Matsushita Electric Ind Co Ltd 部品実装機
JP2007003323A (ja) * 2005-06-23 2007-01-11 Fujifilm Holdings Corp 撮影システム
JP2010232548A (ja) 2009-03-27 2010-10-14 Juki Corp 電子部品実装装置

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
FR2826461B1 (fr) * 2001-06-25 2003-09-05 Sciences Tech Ind De La Lumier Syteme autofocus, procede et dispositif de controle optique de pieces incorporant ce systeme
JP4021183B2 (ja) * 2001-11-29 2007-12-12 オリンパス株式会社 合焦状態信号出力装置
JP3551188B2 (ja) * 2002-01-10 2004-08-04 オムロン株式会社 表面状態検査方法および基板検査装置
JP4000872B2 (ja) * 2002-03-05 2007-10-31 ソニー株式会社 画像撮影装置及び色収差補正方法
JP4010254B2 (ja) * 2003-02-06 2007-11-21 ソニー株式会社 画像記録再生装置、画像撮影装置及び色収差補正方法
CN100349456C (zh) * 2003-10-30 2007-11-14 光宝科技股份有限公司 影像色差补偿方法
JP5034429B2 (ja) * 2006-10-16 2012-09-26 ソニー株式会社 レンズ装置、撮像装置及び収差補正方法
JP5287385B2 (ja) * 2009-03-13 2013-09-11 オムロン株式会社 計測装置
JP2011215395A (ja) * 2010-03-31 2011-10-27 Canon Inc 収差補正機能を有する撮像装置及び撮像装置における収差補正方法
WO2012011186A1 (ja) * 2010-07-23 2012-01-26 トヨタ自動車 株式会社 距離測定装置および距離測定方法
US8988590B2 (en) * 2011-03-28 2015-03-24 Intermec Ip Corp. Two-dimensional imager with solid-state auto-focus
JP2013243168A (ja) * 2012-05-17 2013-12-05 Panasonic Corp 部品実装装置及び部品認識方法
US10420269B2 (en) * 2013-09-17 2019-09-17 Fuji Corporation Mounting inspection device
CN103868854A (zh) * 2014-04-02 2014-06-18 上海仪电物理光学仪器有限公司 一种多波长阿贝折射仪的光学系统
JP6525718B2 (ja) * 2015-05-11 2019-06-05 キヤノン株式会社 画像処理装置、その制御方法、および制御プログラム
CN106231203A (zh) * 2016-09-29 2016-12-14 深圳聚融科技股份有限公司 在可见光和非可见光下拍摄时都能精确对焦的方法和装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004349279A (ja) * 2003-05-13 2004-12-09 Matsushita Electric Ind Co Ltd 部品実装機
JP2007003323A (ja) * 2005-06-23 2007-01-11 Fujifilm Holdings Corp 撮影システム
JP2010232548A (ja) 2009-03-27 2010-10-14 Juki Corp 電子部品実装装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3723357A4

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021124447A1 (ja) 2019-12-17 2021-06-24 株式会社Ｆｕｊｉ 作業機
JPWO2021124447A1 (ja) * 2019-12-17 2021-06-24
EP4080868A4 (en) * 2019-12-17 2023-01-04 Fuji Corporation WORK MACHINE
JP7225433B2 (ja) 2019-12-17 2023-02-20 株式会社Fuji 作業機
WO2021145383A1 (ja) * 2020-01-14 2021-07-22 日東電工株式会社 通気部品
WO2021171487A1 (ja) 2020-02-27 2021-09-02 株式会社Ｆｕｊｉ 画像補正方法、撮像装置および検査装置
US11997375B2 (en) 2020-02-27 2024-05-28 Fuji Corporation Image correction method, imaging device, and inspection device

Also Published As

Publication number Publication date
US20200348582A1 (en) 2020-11-05
JP6837161B2 (ja) 2021-03-03
CN111434103B (zh) 2021-09-03
CN111434103A (zh) 2020-07-17
EP3723357A4 (en) 2020-11-25
US11095800B2 (en) 2021-08-17
JPWO2019111331A1 (ja) 2020-12-03
EP3723357A1 (en) 2020-10-14

Similar Documents

Publication Publication Date Title
WO2019111331A1 (ja) 撮像ユニット及び部品実装機
EP3322275B1 (en) Mounting device, photographic processing method, and photographic unit
JP2023118927A (ja) 対基板作業システム
JP2002176300A (ja) リードのコプラナリティ検出装置，電子部品状況検出装置および電子部品装着システム
EP2925112A1 (en) Component mounting machine
JP6261985B2 (ja) 実装装置
JP6475165B2 (ja) 実装装置
CN112840752B (zh) 元件拍摄用相机及元件安装机
JP7301973B2 (ja) 検査装置
JP7271738B2 (ja) 撮像ユニット
US11557109B2 (en) Image-capturing unit and component-mounting device
CN113966650B (zh) 照明单元
JP6670949B2 (ja) 電子部品の画像処理方法及び画像処理装置
JP6918611B2 (ja) 電子部品実装装置及び電子部品実装方法
CN117769894A (zh) 元件安装机
JP2021144979A (ja) 照明装置及び部品実装装置
JPWO2020065698A1 (ja) 部品データ、部品データ作成システム、部品実装機及び部品実装ラインの生産最適化システム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17933939

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019557905

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2017933939

Country of ref document: EP

Effective date: 20200706