WO2024053067A1 - 画像処理装置および画像処理方法 - Google Patents

画像処理装置および画像処理方法 Download PDF

Info

Publication number
WO2024053067A1
WO2024053067A1 PCT/JP2022/033781 JP2022033781W WO2024053067A1 WO 2024053067 A1 WO2024053067 A1 WO 2024053067A1 JP 2022033781 W JP2022033781 W JP 2022033781W WO 2024053067 A1 WO2024053067 A1 WO 2024053067A1
Authority
WO
WIPO (PCT)
Prior art keywords
pitch
cpu
actual
center position
image
Prior art date
Application number
PCT/JP2022/033781
Other languages
English (en)
French (fr)
Inventor
雄哉 稲浦
勇太 横井
幹也 鈴木
賢志郎 西田
Original Assignee
株式会社Fuji
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社Fuji filed Critical 株式会社Fuji
Priority to PCT/JP2022/033781 priority Critical patent/WO2024053067A1/ja
Publication of WO2024053067A1 publication Critical patent/WO2024053067A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures

Definitions

  • This specification discloses an image processing device and an image processing method.
  • a lead bending detection device that can detect lead bending in electronic components having a plurality of leads.
  • a reference lead reference lead
  • the relative distance of each other lead (target lead) to the reference lead is determined, and the relative distance is determined in advance.
  • a lead bending detection device is disclosed that determines whether or not a target lead is bent by determining whether or not the lead is within a permissible range.
  • the main purpose of the present disclosure is to enable appropriate detection of abnormalities in each feature in an image captured of an electronic component having three or more features.
  • the image processing device of the present disclosure includes: an image acquisition unit that acquires an image of an electronic component having three or more characteristic parts; a calculation unit that calculates, based on the image, an actual pitch that is an actual pitch between the two feature parts for all combinations of two selected from the plurality of feature parts; a pitch acquisition unit that acquires an ideal pitch that is an ideal pitch between the two feature parts for all combinations of two selected from the plurality of feature parts; a determination unit that compares the actual pitch with the corresponding ideal pitch for all combinations of the two, and determines whether the actual pitch is an appropriate pitch;
  • the main point is to have the following.
  • this image processing device it is determined whether the actual pitch is an appropriate pitch or not based on all combinations of the two. As a result, even if any two of three or more features are uniformly deformed, the combination with other features will not be determined to have an appropriate pitch, so the feature where the abnormality has occurred You can find the part.
  • the image processing method of the present disclosure includes: Obtaining an image of an electronic component having three or more characteristic parts, For all combinations of two selected from the plurality of feature parts, an actual pitch that is an actual pitch between the two feature parts is calculated based on the image, For all combinations of two selected from the plurality of feature parts, obtain an ideal pitch that is an ideal pitch between the two feature parts, For all combinations of the two, comparing the actual pitch with the corresponding ideal pitch to determine whether the actual pitch is an appropriate pitch; The gist is that.
  • This image processing method provides the same effects as the image processing device of the present disclosure.
  • FIG. 1 is a perspective view showing a schematic configuration of a component mounting machine 10.
  • FIG. FIG. 3 is a vertical cross-sectional view of the electronic component C and the substrate S before mounting.
  • FIG. 3 is a vertical cross-sectional view of the electronic component C and the board S after mounting.
  • 3 is a perspective view of a light source 26.
  • FIG. 1 is a block diagram showing electrical connection relationships of the component mounting system 1.
  • FIG. 3 is a flowchart showing an example of a component mounting processing routine.
  • FIG. 2 is an explanatory diagram showing an example of a binarized image Im2.
  • FIG. 2 is an explanatory diagram showing an example of a binarized image Im2.
  • FIG. 2 is an explanatory diagram showing an example of a binarized image Im2.
  • FIG. 12 is a flowchart illustrating an example of the first half of an appropriate pitch element group setting processing subroutine. 12 is a flowchart illustrating an example of the second half of the appropriate pitch element group setting processing subroutine. It is an explanatory view showing an example of actual pitch RP. It is an explanatory view showing an example of ideal pitch IP. It is an explanatory diagram showing an example of ideal pitch data 73b.
  • FIG. 6 is an explanatory diagram showing an example of an initial value of abnormality occurrence number data 63a.
  • FIG. 6 is an explanatory diagram showing an example of pitch suitability determination based on all combinations of abnormality occurrence number data 63a. It is an explanatory diagram showing an example of abnormality occurrence count data 63a after excluding abnormalities.
  • FIG. 3 is an explanatory diagram showing an example of a method for counting the number of abnormalities.
  • FIG. 3 is an explanatory diagram showing an example of a method for counting the number of abnormalities.
  • FIG. 1 is a perspective view showing a schematic configuration of a component mounter 10. As shown in FIG. 2A and 2B are longitudinal cross-sectional views of the electronic component C and the substrate S.
  • FIG. 3 is a perspective view of the light source 26.
  • FIG. 4 is a block diagram showing the electrical connections of the component mounting system 1.
  • the left-right direction is the X-axis direction
  • the front-rear direction is the Y-axis direction
  • the up-down direction is the Z-axis direction.
  • the component mounting system 1 includes a component mounting machine 10 and a management device 70, as shown in FIG.
  • the component mounting machine 10 takes out the electronic components C supplied from the component supply device 21 and mounts them on the board S.
  • this component mounting machine 10 includes a component supply device 21, a transport device 22, a head moving device 30, a head 40, a parts camera 24, a mark camera 25, a light source 26 (see FIG. 3), and a waste box 28. and a control device 60 (see FIG. 4).
  • the electronic component C includes a body B that is rectangular in plan view, and a plurality of (two in this embodiment) terminals T1 and T2 provided at the back end of the body B.
  • the terminals T1 and T2 are sometimes referred to as elements E1 and E5
  • the pins P1 to P3 are sometimes referred to as elements E2 to E4.
  • the elements E1 to E5 are not particularly distinguished, they may be simply referred to as element E (corresponding to a characteristic part of the present disclosure).
  • Examples of the component supply device 21 include a tray supply device 21a that supplies a tray having a large number of storage pockets for accommodating electronic components C, a tape feeder 21b that feeds a tape having a large number of cavities for accommodating electronic components C, and the like. Can be done.
  • the conveyance device 22 conveys the substrate S as an object to be inserted from left to right by driving a pair of conveyor belts.
  • the conveyance device 22 includes, for example, a pair of conveyor belts that are installed at a predetermined interval in the front and back (in the Y-axis direction) and spanned from side to side (in the X-axis direction).
  • the head moving device 30 moves the head 40 back and forth and left and right (XY-axis directions), and includes an X-axis slider 32 and a Y-axis slider 34, as shown in FIG.
  • the X-axis slider 32 is supported by a pair of upper and lower X-axis guide rails 33 installed in front of the Y-axis slider 34 so as to extend in the left-right direction (X-axis direction).
  • the X-axis slider 32 moves in the X-axis direction along the X-axis guide rail 33 by driving the X-axis actuator 36 (see FIG. 4).
  • the Y-axis slider 34 is supported by a pair of left and right Y-axis guide rails 35 installed in the upper part of the housing 12 so as to extend in the front-rear direction (Y-axis direction).
  • the Y-axis slider 34 moves in the Y-axis direction along the Y-axis guide rail 35 by driving a Y-axis actuator 38 (see FIG. 4).
  • the position of the X-axis slider 32 in the X-axis direction is detected by an X-axis position sensor 37 (see FIG. 4).
  • the position of the Y-axis slider 34 in the Y-axis direction is detected by a Y-axis position sensor 39 (see FIG. 4).
  • a head 40 is attached to the X-axis slider 32. Therefore, the head 40 moves along the XY plane (horizontal plane) by driving and controlling the head moving device 30 (X-axis actuator 36 and Y-axis actuator 38).
  • the head 40 includes a suction nozzle 41 that picks up (suctions) and holds the electronic component C.
  • a negative pressure source is connected to the suction nozzle 41 via an electromagnetic valve (on-off valve), and the suction nozzle 41 receives negative pressure from the negative pressure source and suctions the electronic component C.
  • the suction nozzle 41 moves in the vertical direction (Z-axis direction) by driving the Z-axis actuator 42 (see FIG. 4).
  • the position in the Z-axis direction is detected by the Z-axis position sensor 43 (see FIG. 4).
  • the parts camera 24 picks up the electronic component C supplied by the component supply device 21 and attaches (inserts) it to the board S transported by the transport device 22 when the electronic component C passes above the parts camera 24.
  • the electronic component C is imaged from below.
  • the parts camera 24 is installed between the parts supply device 21 and the transport device 22, as shown in FIG. The image captured by the parts camera 24 is output to the control device 60.
  • the mark camera 25 images the substrate S carried in by the transport device 22 and the electronic components C supplied by the component supply device 21 from above. As shown in FIG. 1, the mark camera 25 is attached to the X-axis slider 32, and is moved in the XY-axis directions together with the head 40 by the head moving device 30. The image captured by the mark camera 25 is output to the control device 60.
  • the light source 26 irradiates light from the side to the electronic component C (the tip of the element E) when the parts camera 24 captures an image of the electronic component C.
  • the light source 26 emits laser light in a direction perpendicular to the optical axis of the parts camera 24.
  • the disposal box 28 is a box for discarding electronic components C in which an abnormality has occurred.
  • the waste box 28 is installed between the parts supply device 21 and the transport device 22 and adjacent to the parts camera 24 .
  • the control device 60 is configured with a microprocessor centered on a CPU 61, and in addition to the CPU 61, it also includes a ROM 62, a storage (for example, an HDD or SSD) 63, a RAM 64, and an input/output An interface 65 is provided. These are electrically connected via a bus 66. Position signals from the X-axis position sensor 37, the Y-axis position sensor 39, and the Z-axis position sensor 43 are input to the control device 60. In addition, image signals from the parts camera 24 and the mark camera 25 are also input to the control device 60 .
  • control device 60 uses images input from the parts camera 24 to calculate the amount of suction displacement of the electronic component C suctioned by the suction nozzle 41, and calculates the positional displacement of each element E with respect to the body B of the electronic component C. Calculate the amount (amount of bending).
  • the control device 60 outputs drive signals to the component supply device 21, the transport device 22, the X-axis actuator 36, the Y-axis actuator 38, and the Z-axis actuator 42.
  • the control device 60 also outputs control signals to the parts camera 24, mark camera 25, and light source 26.
  • the storage 63 stores abnormality occurrence number data 63a. The abnormality occurrence number data 63a will be described later.
  • the management device 70 is configured with a microprocessor centered around a CPU 71, and includes a ROM 72, a storage 73, and a RAM 74 in addition to the CPU 71.
  • the management device 70 is communicably connected to the control device 60.
  • the storage 73 stores shape data 73a, production schedule, ideal pitch data 73b, etc. for each electronic component C to be mounted on the board S.
  • the shape data 73a includes the external shape of the electronic component C, the type of the electronic component C mounted on the board S, and the relative center position of each element E with respect to the center position of the electronic component C (hereinafter referred to as relative element position). , the number of elements E, etc. are stored.
  • the production schedule stores information such as which electronic components C are to be mounted on the board S in which order in the component mounting machine 10, and how many boards S (products) to be manufactured in this way.
  • the ideal pitch data 73b is data in which, for all combinations of two elements E selected from elements E1 to E5, the combinations of the elements E and the ideal pitch IPs of the elements E are stored in association with each other (FIG. 9 , 10).
  • the ideal pitch IP is the original (designed) pitch between two elements E selected from elements E1 to E5.
  • FIG. 5 is a flowchart showing an example of a component mounting processing routine.
  • This routine is stored in the storage 63 of the control device 60 and executed by the CPU 61.
  • the CPU 61 inputs the instruction to start production as well as the shape data 73a and the ideal pitch data 73b from the management device 70, stores the shape data 73a and the ideal pitch data 73b in the storage 63, and then starts a component mounting processing routine.
  • the CPU 61 causes the suction nozzle 41 to suction the electronic component C supplied from the component supply device 21 (S100). Specifically, the CPU 61 controls the head moving device 30 (X-axis actuator 36 and Y-axis actuator 38) so that the suction nozzle 41 moves above the supply position of the electronic component C by the component supply device 21, and then The Z-axis actuator 42 is controlled so that the nozzle 41 descends, and the electromagnetic valve is controlled so that negative pressure is supplied to the suction nozzle 41.
  • the appropriate pitch element group G is a set of multiple (three or more) elements E used in the component position recognition process executed in S110 of this routine.
  • the actual pitch RP between the elements E is appropriate for the ideal pitch IP between the elements E. It is within the range.
  • the actual pitch RP is the actual pitch between the centers of the two elements E, as shown in FIG.
  • the pin P1 (element E2) is in a position far away from its original position due to bending. Further, in FIG. 8, the original position of the pin P1 (element E2) is shown by a chain line.
  • the CPU 61 When the appropriate pitch element group setting processing subroutine is started, the CPU 61 temporarily sets a group including all the elements E as the appropriate pitch element group G (S200). Next, the CPU 61 sets an initial value to the abnormality occurrence number data 63a (S205). Specifically, the CPU 61 sets all values of the abnormality occurrence number data 63a to 0, as shown in FIG. 11A.
  • the abnormality occurrence count data 63a stores a combination CM of three elements E and the number of abnormalities occurring in the elements E constituting the combination CM in association with each other.
  • the combination CM of elements E is determined in S265 of this subroutine, which will be described later.
  • the CPU 61 turns on the light source 26 (S210), and images the bottom surface of the electronic component C sucked by the suction nozzle 41 with the parts camera 24 (S215). Specifically, the CPU 61 first controls the head moving device 30 so that the suction nozzle 41 that has suctioned the electronic component C moves above the parts camera 24 . Next, the CPU 61 controls the Z-axis actuator 42 so that the tip of the element E of the electronic component C descends to a position where the light emitted from the light source 26 hits. Then, the CPU 61 controls the parts camera 24 so that the electronic component C is imaged from the bottom side.
  • the image of the electronic component C captured in S215 will be referred to as a component image Im1 (not shown).
  • the CPU 61 binarizes the component image Im1 (S220). Specifically, the CPU 61 colors pixels whose brightness values are less than a predetermined value black, and colors pixels whose brightness values are equal to or greater than a predetermined value white. As a result, the tip of the element E becomes white, and the other part becomes black.
  • the image obtained in this manner is referred to as a binarized image Im2.
  • An example of the binarized image Im2 obtained in this way is shown in FIG. 6A.
  • the pin P1 (element E2) is in a position largely deviated from its original position due to bending. Further, in FIG. 6A, the original position of the pin P1 (element E2) is shown by a chain line.
  • the CPU 61 detects an area where white pixels are gathered in the binarized image Im2 as a candidate for element E (S225). Then, the CPU 61 sets the value 1 to the variable i (S230). Next, the CPU 61 determines the actual element center position Mi (xi1, yi1) which is the actual center position of the i-th element E (hereinafter referred to as the i-th element Ei) ) is calculated (S235). Specifically, as shown in FIG. 6B, the CPU 61 converts the binarized image Im2 into an XY plane with a predetermined point in the binarized image Im2 (for example, the front left corner of the binarized image Im2) as the origin O.
  • a predetermined point in the binarized image Im2 for example, the front left corner of the binarized image Im2
  • the CPU 61 increments the value of the variable i by 1 (S240). Then, the CPU 61 determines whether the value of the variable i is larger than the number of elements E (5 in this embodiment) (S245). If the value of the variable i is less than or equal to the number of elements E, the CPU 61 recognizes that there is an element E for which the actual element center position M has not yet been calculated, and makes a negative determination. On the other hand, if the value of the variable i is larger than the number of elements E, the CPU 61 recognizes that the actual element center positions M of all the elements E have been calculated, and makes an affirmative determination. If a negative determination is made in S245, the CPU 61 returns to S235 and calculates the actual element center position M of the next element E.
  • the CPU 61 determines the combination CM (i, j, k) (S265). This determines the combination when three elements E are selected from elements E1 to E5. In addition, in this embodiment, when there is no particular distinction as to which combination CM (i, j, k) it is, it is simply referred to as a combination CM.
  • the CPU 61 calculates the actual pitch RPij, which is the actual pitch RP between the i-th element Ei and the j-th element Ej (S270). Specifically, the CPU 61 calculates the distance between the actual element center position Mi of the i-th element Ei and the actual element center position Mj of the j-th element Ej as the actual pitch RPij. Subsequently, the CPU 61 calculates the actual pitch RPjk between the j-th element Ej and the k-th element Ek and the actual pitch RPik between the k-th element Ek and the i-th element Ei, similarly to S270 (S275, S280). Thereby, the CPU 61 calculates the actual pitch RP between elements E for all combinations of two elements E selected from the combination CM (i, j, k) determined in S265.
  • the CPU 61 calculates the ideal pitch IPij, which is the ideal pitch IP between the i-th element Ei and the j-th element Ej (S285). Specifically, the CPU 61 refers to the ideal pitch data 73b and obtains the ideal pitch IPij between the i-th element Ei and the j-th element Ej. Next, similarly to S285, the CPU 61 acquires the ideal pitch IPjk between the j-th element Ej and the k-th element Ek and the ideal pitch IPik between the i-th element Ei and the k-th element Ek from the ideal pitch data 73b ( S290, S295). As a result, the ideal pitch IP between elements E is obtained for all combinations of two elements E selected from the combination CM (i, j, k) determined in S265.
  • the CPU 61 determines whether the actual pitch RPij satisfies the following determination formula (1) (S300).
  • is a predetermined value, for example, a value of about 0.1 to 0.2. If the actual pitch RPij satisfies determination formula (1), the CPU 61 determines that the actual pitch RPij is within an appropriate range with respect to the ideal pitch IPij, and makes an affirmative determination. On the other hand, if the actual pitch RPij does not satisfy the determination formula (1), the CPU 61 determines that the actual pitch RPij is outside the appropriate range with respect to the ideal pitch IPij, and makes a negative determination. If an affirmative determination is made in S300, the CPU 61 proceeds to S315 of this subroutine.
  • the CPU 61 adds 1 to the value of the number of abnormalities of the i-th element Ei corresponding to the combination CM (i, j, k) (S305), and ) is added to the value of the number of abnormalities of the j-th element Ej corresponding to (S310).
  • the CPU 61 determines whether the actual pitch RPjk satisfies the following determination formula (2) (S315).
  • the CPU 61 determines that the actual pitch RPjk is within an appropriate range with respect to the ideal pitch IPjk, and makes an affirmative determination. On the other hand, if the actual pitch RPjk does not satisfy the determination formula (2), the CPU 61 determines that the actual pitch RPjk is outside the appropriate range with respect to the ideal pitch IPjk, and makes a negative determination. If an affirmative determination is made in S315, the CPU 61 proceeds to S330 of this subroutine.
  • the CPU 61 adds 1 to the value of the number of abnormalities of the j-th element Ej corresponding to the combination CM (i, j, k) (S320), and ) is added to the value of the number of abnormalities of the k-th element Ek corresponding to (S325).
  • the CPU 61 determines whether the actual pitch RPjk satisfies the following determination formula (3) (S330).
  • the CPU 61 determines that the actual pitch RPik is within an appropriate range with respect to the ideal pitch IPik, and makes an affirmative determination. On the other hand, if the actual pitch RPik does not satisfy the determination formula (3), the CPU 61 determines that the actual pitch RPik is outside the appropriate range with respect to the ideal pitch IPik, and makes a negative determination. If an affirmative determination is made in S330, the CPU 61 proceeds to S345 of this subroutine.
  • the CPU 61 adds 1 to the value of the number of abnormalities of the i-th element Ei corresponding to the combination CM (i, j, k) (S335), and ) is added to the value of the number of abnormalities of the k-th element Ek corresponding to (S340).
  • pitch suitability determination the process of determining whether or not the actual pitch RP is within an appropriate range with respect to the ideal pitch IP will be referred to as pitch suitability determination.
  • FIGS. 12A and 12B are explanatory diagrams showing an example of a method for counting the number of abnormalities.
  • FIGS. 12A and 12B only the portion corresponding to the combination CM (1, 2, 3) of the abnormality occurrence number data 63a is shown.
  • the combination CM (1, 2, 3) is determined by executing the processes of S250 to S265.
  • FIG. 12A shows that the combination CM (1, 2, 3) is determined by executing the processes of S250 to S265.
  • the electronic component C is in a state where the pin P1 (element E2) is in a position largely deviated from its original position due to bending, and the terminal T1 (element E1) and The pin P2 (element E3) is in its original position.
  • the CPU 61 and the actual pitch RP12 determine whether or not the above-mentioned determination formula (1) is satisfied (S300).
  • the CPU 61 makes a negative determination.
  • the CPU 61 adds 1 to the value of the number of abnormalities of the element E1 corresponding to the combination CM (1, 2, 3) (S305).
  • the CPU 61 adds 1 to the value of the number of abnormalities of the element E2 corresponding to the combination CM (1, 2, 3) (S310).
  • the CPU 61 determines whether the actual pitch RP23 satisfies the above-mentioned determination formula (2) (S315).
  • the CPU 61 makes a negative determination.
  • the CPU 61 adds 1 to the value of the number of abnormalities of the element E2 corresponding to the combination CM (1, 2, 3) (S320). Subsequently, the CPU 61 adds 1 to the value of the number of abnormalities of the element E3 corresponding to the combination CM (1, 2, 3) (S325). As a result, the value of the number of abnormalities of the element E2 corresponding to the combination CM (1, 2, 3) becomes 2, and the value of the number of abnormalities of the element E3 corresponding to the combination CM (1, 2, 3) becomes 1. Then, the CPU 61 determines whether or not the actual pitch RP13 satisfies the above-mentioned determination formula (3) (S330). Since the element E1 and the element E3 are in their original positions, the actual pitch R13 satisfies the above determination formula (3). Therefore, the CPU 61 makes an affirmative determination and proceeds to S345 of this subroutine.
  • the CPU 61 increments the value of the variable k by 1 (S345).
  • the CPU 61 determines whether the value of the variable k is greater than the number of elements E (5 in this embodiment) (S350). If the value of the variable k is less than or equal to the number of elements E, the CPU 61 leaves the i-th element Ei and the j-th element Ej as they are, and replaces the next k-th element Ek with the element E that is one next to the previous k-th element Ek. It is determined that the pitch suitability determination is to be made for the combination of CMs shifted to , and a negative determination is made. On the other hand, if the value of the variable k is greater than the number of elements E, the CPU 61 makes an affirmative determination. If a negative determination is made in S350, the CPU 61 returns to S265 of this subroutine again.
  • the CPU 61 increments the value of the variable j by 1 (S355).
  • the CPU 61 determines whether the value of the variable j is greater than (the number of elements E minus 1) (S360). If the value of variable j is less than (the number of elements E - 1), the CPU 61 leaves the i-th element Ei as it is and shifts the next j-th element Ej to the element E next to the previous j-th element Ej, It is determined that a pitch suitability determination is to be made for the combination CM in which the next k-th element Ek is changed to the element E next to the shifted j-th element Ej, and a negative determination is made. On the other hand, if the value of the variable j is greater than (the number of elements E - 1), the CPU 61 makes an affirmative determination. If a negative determination is made in S360, the CPU 61 returns to S260 of this subroutine again.
  • the CPU 61 increments the value of the variable i by 1 (S365). Then, the CPU 61 determines whether the value of the variable i is greater than (the number of elements E - 2) (S370). If the value of variable i is less than (the number of elements E - 2), the CPU 61 shifts the next i-th element Ei to the element E next to the previous i-th element Ei, and shifts the j-th element Ej after shifting.
  • the CPU 61 determines whether an abnormality has occurred in the element E constituting a certain combination of CMs by executing the processes of S265 to S340. Further, by executing the processes of S345 to S370, the CPU 61 performs pitch suitability determination in the order of the combination CMs (from the top) shown in the abnormality occurrence number data 63a shown in FIG. 11A.
  • FIG. 11B shows an example of the abnormality occurrence count data 63a obtained by performing pitch suitability determination on all combined CMs and executing the process of S375.
  • the CPU 61 determines whether the number of abnormalities in all elements E is 0 in the abnormality occurrence number data 63a (S380). If the number of abnormalities occurring in any element E is not 0 in the abnormality occurrence number data 63a, the CPU 61 determines that the element E in which the abnormality has occurred is included in the appropriate pitch element group G, and Make a negative judgment. On the other hand, if the number of abnormalities occurring in all elements E is 0 in the abnormality occurrence number data 63a, the CPU 61 determines that the element E in which the abnormality has occurred is not included in the appropriate pitch element group G. Then, an affirmative determination is made.
  • the CPU 61 excludes the combination CM including the element E with the maximum number of abnormalities from the abnormality occurrence number data 63a, and excludes the element E with the maximum number of abnormalities (S385).
  • An example of the abnormality occurrence count data 63a obtained in this way is shown in FIG. 11C.
  • the CPU 61 determines whether the number of combination CMs remaining in the appropriate pitch element group G is 0 (S390).
  • the combination CM includes three elements E. Therefore, if there are less than two elements E in which no abnormality has occurred among all the elements E, at least one element E in which an abnormality has occurred will be included in all combinations CM, and in S385 All combination CMs are excluded. Therefore, the CPU 61 makes such a determination.
  • the CPU 61 If a negative determination is made in S390, the CPU 61 returns to S380 again. On the other hand, if an affirmative determination is made in S390, the CPU 61 outputs an error (S395). Specifically, the CPU 61 causes an unillustrated display device provided in the component mounting machine 10 to display an error message. Subsequently, the CPU 61 discards the electronic component C (S400). Specifically, the CPU 61 controls the head moving device 30 so that the suction nozzle 41 moves above the waste box 28, and then controls the electromagnetic valve so that the electronic component C is released from suction. After S400, the CPU 61 returns to S100 of the component mounting routine.
  • the CPU 61 determines the remaining elements E (elements E1, E3 to E5 in FIG. 11C) as the appropriate pitch element group G (S405), and ends this subroutine. .
  • the element E included in the appropriate pitch element group G shall be referred to as an appropriate pitch element EP.
  • the CPU 61 proceeds to S110 of the component mounting routine shown in FIG.
  • the CPU 61 performs part position recognition processing based on the actual element center position M specified in S235 of the appropriate pitch element group setting processing subroutine and the relative element position of the appropriate pitch element EP defined in the shape data 73a.
  • a component center position N (x2, y2) which is the center position of the electronic component C in the binarized image Im2, is calculated by the least squares method (S110). This process is executed, for example, as follows. In this embodiment, it is assumed that the appropriate pitch element EP is specified by the hatched element E (element E other than pin P1 (element E2)) in FIG. 6B.
  • the element E1 is located at a position separated by the relative element position specified in the shape data 73a with respect to the temporary component center position, which is the temporary center position of the electronic component C in the binarized image Im2.
  • the virtual center position of the element E1 in this case is referred to as a temporary element center position H1 (not shown).
  • the virtual center position of element E3 is referred to as temporary element center position H3 (not shown).
  • the virtual center position of element E4 in the case where element E4 is located at a position separated by the relative element position with respect to the temporary component center position is referred to as temporary element center position H4 (not shown).
  • the virtual center position of element E5 in the case where element E5 is located at a position separated by the relative element position from the temporary component center position is referred to as temporary element center position H5 (not shown).
  • the CPU 61 calculates the square value of the distance between the actual element center position M1 calculated in S235 of the appropriate pitch element group setting processing subroutine and the temporary element center position H1, and the actual element center position M3 and the temporary element center position H3 calculated in S235. , the square value of the distance between the actual element center position M4 calculated in S235 and the temporary element center position H4, and the square value of the distance between the actual element center position M5 and the temporary element center position H5 calculated in S235. Calculate.
  • the CPU 61 calculates the square value of the distance between the real element center position M1 and the temporary element center position H1, the square value of the distance between the real element center position M3 and the temporary element center position H3, and the square value of the distance between the real element center position M4 and the temporary element center position H1.
  • the sum of the square value of the distance to the center position H4 and the square value of the distance between the actual element center position M5 and the provisional element center position H5 is calculated.
  • the CPU 61 calculates the temporary center position where the sum of the squared distance values is the minimum as the component center position N(x2, y2) of the electronic component C in the binarized image Im2.
  • the CPU 61 sets the value 1 to the variable i (S115).
  • the CPU 61 calculates a relative element center position Ri (xi3, yi3), which is the relative center position of the i-th element Ei with respect to the component center position N, based on the corresponding actual element center position M. Calculate (S120).
  • the CPU 61 calculates xi3(xi1-x2) by subtracting the X coordinate value of the component center position N of the electronic component C from the X coordinate value of the actual element center position Mi of the i-th element Ei, and yi3 (yi1-y2) is calculated by subtracting the Y coordinate value of the component center position N from the Y coordinate value of the actual element center position Mi of the number element Ei.
  • element E is the relative element center position
  • R when there is no particular distinction as to which element E is the relative element center position, it is simply referred to as the relative element center position R.
  • the CPU 61 calculates the ideal element center position Ii (xi4, yi4), which is the ideal center position of the i-th element Ei with respect to the component center position N of the electronic component C (S125).
  • the ideal element center position Ii is the i-th element with respect to the component center position N(x2, y2) in the binarized image Im2 when the i-th element Ei is arranged according to the relative element position specified in the shape data 73a. This is the relative center position of element Ei.
  • the CPU 61 adds the relative element position of the i-th element Ei to the component center position N(x2, y2) of the electronic component C in the binarized image Im2 calculated in S110, and calculates the ideal element of the i-th element Ei.
  • the center position Ii (xi4, yi4) is calculated.
  • element E is the ideal element center position
  • it is simply referred to as the ideal element center position I.
  • the CPU 61 calculates the positional deviation amount ⁇ i (dxi, dyi) of the i-th element Ei (S130). Specifically, the CPU 61 subtracts the X-axis coordinate value of the relative element center position Ri calculated in S120 from the X-axis coordinate value of the ideal element center position Ii calculated in S125 to obtain the positional deviation amount dxi(xi4 -xi3). Then, the CPU 61 subtracts the Y-axis coordinate value of the relative element center position Ri calculated in S120 from the Y-axis coordinate value of the ideal element center position Ii calculated in S125 to obtain a positional deviation amount dyi (yi4-yi3) in the Y-axis direction. Calculate.
  • the CPU 61 determines whether the positional deviation amount ⁇ i of the i-th element Ei is within an allowable range (S135). If both the positional deviation amount dxi in the X-axis direction and the positional deviation amount dyi in the Y-axis direction are within a predetermined range, the CPU 61 determines that the positional deviation amount ⁇ i of the i-th element Ei is within an allowable range. It recognizes that it is within the range and makes an affirmative determination.
  • the CPU 61 determines that the positional deviation amount ⁇ i of the i-th element Ei is outside the allowable range. Recognizing that, a negative judgment is made.
  • the CPU 61 discards the electronic component C (S140). Specifically, the CPU 61 controls the head moving device 30 so that the suction nozzle 41 moves above the waste box 28 . After S140, the CPU 61 returns to S100.
  • the CPU 61 increments the value of the variable i by 1 (S145).
  • the CPU 61 determines whether the value of the variable i is greater than the number of elements E (S150). If the value of the variable i is less than or equal to the number of elements E, the CPU 61 recognizes that there is an element E for which the amount of positional deviation ⁇ needs to be calculated, and makes a negative determination. On the other hand, if the value of the variable i is larger than the number of elements E, the CPU 61 recognizes that there is no positional deviation exceeding the allowable range in all elements E, and makes an affirmative determination. If a negative determination is made in S150, the CPU 61 returns to S120 again and calculates the next relative element center position R with respect to the component center position N.
  • the CPU 61 mounts the electronic component C on the board S (S155). Specifically, the CPU 61 controls the head moving device 30 so that the electronic component C sucked by the suction nozzle 41 moves above the mounting position of the board S. Then, the CPU 61 controls the Z-axis actuator 42 so that the electronic component C is pressed against the substrate S, and also controls the solenoid valve so that the electronic component C is released from suction. Then, the CPU 61 controls the solenoid valve so that the electronic component C is released from being attracted. After S155, the CPU 61 ends this routine.
  • the CPU 61 determines the component center position N of the electronic component C in the binarized image Im2 from the plurality of elements E by the least squares method. Therefore, if there is a large error in the actual element center position M of some elements E, the component center position N calculated in S110 may deviate greatly from the original position as shown in FIG. 6C.
  • the CPU 61 acquires the appropriate pitch element group G in the appropriate pitch setting processing subroutine, and executes the component position recognition process using the appropriate pitch elements EP in S110 of the component mounting processing routine. . Therefore, the CPU 61 can accurately recognize the component center position N of the electronic component C in the binarized image Im2.
  • the pin P1 (element E2) is in a position largely deviated from its original position due to bending. Further, in FIG. 6C, the component center position N calculated using the elements E1 to E5 is indicated by a black square mark, and the original component center position N is indicated by a black circle mark. Furthermore, in FIG. 6C, the original position of the pin P1 (element E2) is shown by a dashed line.
  • control device 60 of this embodiment corresponds to the image processing device of the present disclosure
  • the CPU 61 corresponds to an image acquisition section, a calculation section, a pitch acquisition section, and a determination section. Further, the CPU 61 corresponds to a selection unit, a component position recognition unit, and a characteristic part position recognition unit.
  • the control device 60 described in detail above determines whether or not the actual pitch RP is an appropriate pitch in all combinations of the two. As a result, even if any two of three or more elements E are uniformly deformed, the combination with other elements E will not be determined to have an appropriate pitch, so the element with the abnormality We can find E.
  • control device 60 selects a group consisting of three or more elements E, in which the actual pitch RP is the appropriate pitch for all combinations of two selected from the group, as the appropriate pitch element group G. .
  • the element E in which the abnormality has occurred can be found more appropriately. This is because when the two elements E are uniformly deformed, there are two combinations selected from three or more in which the actual pitch RP does not become the appropriate pitch.
  • control device 60 uses the plurality of elements E included in the appropriate pitch element group G to recognize the position of the electronic component C (component center position N) with respect to the reference position (origin O) of the binarized image Im2. Executes part position recognition processing. Thereby, the position of the electronic component C in the binarized image Im2 can be recognized with high accuracy.
  • control device 60 is an element that recognizes the position of each of the plurality of elements E based on the position of the electronic component C (component center position N) in the binarized image Im2 based on the result of the component position recognition process. Execute location recognition processing. Thereby, the positions of the plurality of elements E (relative element center position R) with respect to the position of the electronic component C in the binarized image Im2 can be recognized more accurately.
  • the image processing device of the present disclosure was described as the control device 60, but it may also be the management device 70.
  • the ideal pitch data 73b was stored in the storage 73 of the management device 70.
  • the ideal pitch data 73b may be stored in the storage 63 of the control device 60.
  • the control device 60 may execute the component mounting processing routine after inputting the shape data 73a together with an instruction to start production.
  • the shape data 73a was stored in the storage 73 of the management device 70.
  • the shape data 73a may be stored in the storage 63 of the control device 60.
  • the control device 60 may execute the component mounting processing routine after inputting the ideal pitch data 73b together with an instruction to start production.
  • the ideal pitch data 73b stores the ideal pitch IP for all combinations of two elements E selected from among the plurality of elements E.
  • the ideal pitch data 73b may store ideal pitch IPs for some combinations.
  • the CPU 61 may calculate the ideal pitch IPs of other combinations from the stored ideal pitches IPs of some of the combinations.
  • the ideal pitch data 73b stores at least the ideal pitch IP between adjacent elements E.
  • all the elements E included in the appropriate pitch element group G were used to perform the component position recognition process and the element position recognition process. However, some elements E belonging to the appropriate pitch element group G may be used to perform the component position recognition process and the element position recognition process. In this case, three or more elements E belonging to the appropriate pitch element group G may be arbitrarily selected by the CPU 61.
  • the CPU 61 determines three combinations of CMs selected from a plurality of elements E, and determines pitch suitability for all combinations of two elements E selected from the combinations of CMs. I did this. However, in the appropriate pitch element group setting processing subroutine, the CPU 61 may directly determine a combination of two elements E from a plurality of elements E, and determine whether or not the pitch is appropriate. Alternatively, in the appropriate pitch element group setting processing subroutine, the CPU 61 determines four or more combinations selected from a plurality of elements E, and determines pitch suitability for all combinations of two elements E selected from the determined combinations. It's okay.
  • the CPU 61 calculates the actual element center position M of each element E from the binarized image Im2, determines the appropriate pitch element group G using the actual element center position M of each element E, and determines the appropriate pitch element group G.
  • the component center position N is calculated through component position recognition processing, and the relative element center position R of each element E with respect to the component center position N is recognized through element position recognition processing, and positional deviation is determined for each element E. It was determined whether or not this was occurring.
  • the CPU 61 may omit the component position recognition process and the element position recognition process.
  • the CPU 61 may discard the electronic component C.
  • the CPU 61 repeatedly excludes the element E with the largest number of abnormal occurrences and the combination CM including the element E from the abnormality occurrence number data 63a until the number of abnormalities becomes 0 for all elements E,
  • the set of elements E constituting the remaining combination CM was determined to be an appropriate pitch element group G.
  • the CPU 61 directly finds a combination CM in which the number of abnormalities in all elements E is 0 from the abnormality occurrence number data 63a, and also converts the set of elements E constituting the found combination CM into a group of appropriate pitch elements. It may be determined by G.
  • the holding member of the present disclosure was described as the suction nozzle 41.
  • other holding members such as a mechanical chuck may be used as the holding member of the present disclosure.
  • control device 60 has been described as the control device 60, but it may also be applied as an image processing method.
  • the present disclosure can be used in the manufacturing industry of component mounting machines and component mounting systems.
  • Component mounting system 10 Component mounter, 12 Housing, 21 Component supply device, 21a Tray supply device, 21b Tape feeder, 22 Conveyance device, 23 Actual pitch, 24 Parts camera, 25 Mark camera, 26 Light source, 28 Disposal box , 30 head moving device, 32 X-axis slider, 33 X-axis guide rail, 34 Y-axis slider, 35 Y-axis guide rail, 36 X-axis actuator, 37 X-axis position sensor, 38 Y-axis actuator, 39 Y-axis position sensor, 40 Head, 41 Suction nozzle, 42 Z-axis actuator, 43 Z-axis position sensor, 60 Control device, 61 CPU, 62 ROM, 63 Storage, 63a Abnormality occurrence data, 64 RAM, 65 Input/output interface, 66 Bus, 70 Management Device, 71 CPU, 72 ROM, 73 Storage, 73a Shape data, 73b Ideal pitch data, 74 RAM, B Body, C Electronic components, CM combination, E, E1 to E5

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Supply And Installment Of Electrical Components (AREA)

Abstract

本開示の画像処理装置は、3つ以上の特徴部を有する電子部品を撮像した画像を取得する画像取得部と、複数の特徴部から選ばれる2つの全ての組合せについて、2つの特徴部同士の実際のピッチである実ピッチを、画像に基づいて算出する算出部と、複数の特徴部から選ばれる2つの全ての組合せについて、2つの特徴部同士の理想的なピッチである理想ピッチを取得するピッチ取得部と、2つの全ての組合せについて、実ピッチと対応する理想ピッチとを比較して実ピッチが適正ピッチであるか否かを判定する判定部と、を備える。

Description

画像処理装置および画像処理方法
 本明細書は、画像処理装置および画像処理方法について開示する。
 従来、複数のリードを有する電子部品において、リード曲りを検出可能なリード曲り検出装置が知られている。例えば、特許文献1には、電子部品を撮像した画像において、基準となるリード(基準リード)を定め、基準リードに対する他の各リード(対象リード)の相対距離を求め、相対距離が予め定められた許容範囲に収まっているか否かを判定することで、対象リードが曲がって否かを判定するリード曲り検出装置が開示されている。
特開平5-196439号公報
 しかしながら、特許文献1に開示されているリード曲り検出装置では、基準リードと対象リードとが一様に曲がっている場合には、基準リードに対する対象リードの相対距離が許容範囲内に収まり、対象リードの曲がりを適切に検出できない場合がある。
 本開示は、3つ以上の特徴部を有する電子部品を撮像した画像において、各特徴部の異常を適切に検出できるようにすることを主目的とする。
 本開示では、上述の主目的を達成するために以下の手段を採った。
 本開示の画像処理装置は、
 3つ以上の特徴部を有する電子部品を撮像した画像を取得する画像取得部と、
 前記複数の特徴部から選ばれる2つの全ての組合せについて、2つの前記特徴部同士の実際のピッチである実ピッチを、前記画像に基づいて算出する算出部と、
 前記複数の特徴部から選ばれる2つの全ての組合せについて、2つの前記特徴部同士の理想的なピッチである理想ピッチを取得するピッチ取得部と、
 前記2つの全ての組合せについて、前記実ピッチと対応する前記理想ピッチとを比較して前記実ピッチが適正ピッチであるか否かを判定する判定部と、
 を備えることを要旨とする。
 この画像処理装置では、2つの全ての組合せで実ピッチが適正ピッチであるか否かを判定する。これにより、3つ以上の特徴部のうちいずれか2つが一様に変形していた場合であっても、他の特徴部との組合せが適正ピッチと判定されないため、異常が発生している特徴部を見つけ出すことができる。
 本開示の画像処理方法は、
 3つ以上の特徴部を有する電子部品を撮像した画像を取得し、
 前記複数の特徴部から選ばれる2つの全ての組合せについて、2つの前記特徴部同士の実際のピッチである実ピッチを、前記画像に基づいて算出し、
 前記複数の特徴部から選ばれる2つの全ての組合せについて、2つの前記特徴部同士の理想的なピッチである理想ピッチを取得し、
 前記2つの全ての組合せについて、前記実ピッチと対応する前記理想ピッチとを比較して前記実ピッチが適正ピッチであるか否かを判定する、
 ことを要旨とする。
 この画像処理方法では、本開示の画像処理装置と同様の効果を奏する。
部品実装機10の概略構成を示す斜視図である。 実装前の電子部品Cおよび基板Sの縦断面図である。 実装後の電子部品Cおよび基板Sの縦断面図である。 光源26の斜視図である。 部品実装システム1の電気的な接続関係を示すブロック図である。 部品実装処理ルーチンの一例を示すフローチャートである。 2値化画像Im2の一例を示す説明図である。 2値化画像Im2の一例を示す説明図である。 2値化画像Im2の一例を示す説明図である。 適正ピッチエレメント群設定処理サブルーチンの前半部の一例を示すフローチャートである。 適正ピッチエレメント群設定処理サブルーチンの後半部の一例を示すフローチャートである。 実ピッチRPの一例を示す説明図である。 理想ピッチIPの一例を示す説明図である。 理想ピッチデータ73bの一例を示す説明図である。 異常発生数データ63aの初期値の一例を示す説明図である。 異常発生数データ63aの全ての組合せでピッチ適否判定した際の一例を示す説明図である。 異常を除外した後の異常発生数データ63aの一例を示す説明図である。 異常発生数のカウント方法の一例を示す説明図である。 異常発生数のカウント方法の一例を示す説明図である。
 次に、本開示の発明を実施するための形態について図面を参照しながら説明する。図1は、部品実装機10の概略構成を示す斜視図である。図2A,2Bは、電子部品Cおよび基板Sの縦断面図である。図3は、光源26の斜視図である。図4は、部品実装システム1の電気的な接続関係を示すブロック図である。なお、図1,3中、左右方向をX軸方向とし、前後方向をY軸方向とし、上下方向をZ軸方向とする。
 部品実装システム1は、図1に示すように、部品実装機10と管理装置70とを備える。部品実装機10は、部品供給装置21から供給された電子部品Cを取り出して基板Sに実装するものである。この部品実装機10は、図1に示すように、部品供給装置21と搬送装置22とヘッド移動装置30とヘッド40とパーツカメラ24とマークカメラ25と光源26(図3参照)と廃棄ボックス28と制御装置60(図4参照)とを備える。電子部品Cは、例えば、図2A,2Bに示すように、平面視において矩形状のボディBと、ボディBの裏面端部に設けられた複数(本実施形態では2)の端子T1,T2と、ボディBの裏面に所定の間隔をおいて配列された複数(本実施形態では3)のピンP1~P3と、有するものである。なお、本実施形態では端子T1,T2をエレメントE1,E5と称し、ピンP1~P3をエレメントE2~E4と称することがある。また、エレメントE1~E5を特に区別しない場合には、単にエレメントE(本開示の特徴部に相当)と称することがある。
 部品供給装置21としては、例えば、電子部品Cを収容する収容ポケットを多数有するトレイを供給するトレイ供給装置21aや、電子部品Cを収容するキャビティを多数有するテープを送るテープフィーダ21bなどを挙げることができる。
 搬送装置22は、一対のコンベアベルトを駆動することにより、被挿入物としての基板Sを左から右へと搬送するものである。搬送装置22は、例えば、前後(Y軸方向)に所定の間隔をおいて設置され、左右(X軸方向)に架け渡された一対のコンベアベルトを有する。
 ヘッド移動装置30は、ヘッド40を前後左右(XY軸方向)に移動させるものであり、図1に示すように、X軸スライダ32とY軸スライダ34とを備える。X軸スライダ32は、Y軸スライダ34の前面に左右方向(X軸方向)に延在するように設置された上下一対のX軸ガイドレール33に支持されている。X軸スライダ32は、X軸アクチュエータ36(図4参照)の駆動によってX軸ガイドレール33に沿ってX軸方向に移動する。Y軸スライダ34は、筐体12の上段部に前後方向(Y軸方向)に延在するように設置された左右一対のY軸ガイドレール35に支持されている。Y軸スライダ34は、Y軸アクチュエータ38(図4参照)の駆動によってY軸ガイドレール35に沿ってY軸方向に移動する。なお、X軸スライダ32は、X軸位置センサ37(図4参照)によりX軸方向における位置が検知される。また、Y軸スライダ34は、Y軸位置センサ39(図4参照)によりY軸方向における位置が検知される。X軸スライダ32にはヘッド40が取り付けられている。このため、ヘッド40は、ヘッド移動装置30(X軸アクチュエータ36およびY軸アクチュエータ38)を駆動制御することにより、XY平面(水平面)に沿って移動する。
 ヘッド40は、電子部品Cをピックアップ(吸着)して保持する吸着ノズル41を備える。吸着ノズル41には、図示しないが、電磁弁(開閉弁)を介して負圧源が接続され、吸着ノズル41は、負圧源からの負圧の供給を受けて電子部品Cを吸着する。また、吸着ノズル41は、Z軸アクチュエータ42(図4参照)の駆動によって上下方向(Z軸方向)に移動する。Z軸位置センサ43(図4参照)によりZ軸方向における位置が検知される。
 パーツカメラ24は、部品供給装置21により供給された電子部品Cをピックアップして搬送装置22により搬送された基板Sに装着(挿入)するに際して、パーツカメラ24の上方を電子部品Cが通過するときに当該電子部品Cを下方から撮像するものである。パーツカメラ24は、図1に示すように、部品供給装置21と搬送装置22との間に設置されている。パーツカメラ24で撮像された画像は、制御装置60に出力される。
 マークカメラ25は、搬送装置22により搬入された基板Sや部品供給装置21により供給された電子部品Cを上方から撮像するものである。マークカメラ25は、図1に示すように、X軸スライダ32に取り付けられ、ヘッド移動装置30によりヘッド40と共にXY軸方向に移動する。マークカメラ25で撮像された画像は、制御装置60に出力される。
 光源26は、図3に示すように、パーツカメラ24で電子部品Cの画像を撮像する際に、電子部品C(エレメントEの先端部)に対して側方から光を照射するものである。光源26は、パーツカメラ24の光軸に対して直交する方向にレーザー光を照射する。
 廃棄ボックス28は、異常が発生している電子部品Cを廃棄するためのボックスである。廃棄ボックス28は、部品供給装置21と搬送装置22との間に、パーツカメラ24に隣接して設置されている。
 制御装置60は、図4に示すように、CPU61を中心としたマイクロプロセッサとて構成されており、CPU61の他に、ROM62と、ストレージ(例えば、HDDやSSD)63と、RAM64と、入出力インタフェース65とを備える。これらは、バス66を介して電気的に接続されている。制御装置60には、X軸位置センサ37やY軸位置センサ39、Z軸位置センサ43からの位置信号が入力される。また、制御装置60には、パーツカメラ24やマークカメラ25からの画像信号なども入力される。また、制御装置60は、パーツカメラ24から入力した画像を用いて、吸着ノズル41に吸着された電子部品Cの吸着ずれ量を算出したり、電子部品CのボディBに対する各エレメントEの位置ずれ量(曲り量)を算出したりする。一方、制御装置60からは、部品供給装置21や、搬送装置22、X軸アクチュエータ36、Y軸アクチュエータ38、Z軸アクチュエータ42への駆動信号が出力される。また、制御装置60からは、パーツカメラ24やマークカメラ25、光源26への制御信号も出力される。ストレージ63には、異常発生数データ63aが記憶されている。異常発生数データ63aについては後述する。
 管理装置70は、図4に示すように、CPU71を中心としたマイクロプロセッサとて構成されており、CPU71の他に、ROM72と、ストレージ73と、RAM74とを備える。管理装置70は、制御装置60と通信可能に接続されている。ストレージ73には、基板Sに実装する電子部品C毎に、シェイプデータ73aや、生産スケジュール、理想ピッチデータ73bなどが記憶されている。シェイプデータ73aは、電子部品Cの外形や、基板Sに対して実装する電子部品Cの種類、電子部品Cの中心位置に対する各エレメントEの相対的な中心位置(以下、相対エレメント位置と称する)、エレメントEの数などを記憶したデータである。生産スケジュールは、部品実装機10において、基板Sにどの電子部品Cをどの順番で実装するか、また、そのように実装した基板S(製品)を何枚作製するかなどを記憶したものである。理想ピッチデータ73bは、エレメントE1~E5から選ばれる2つのエレメントEの全ての組合せについて、エレメントE同士の組合せと、エレメントE同士の理想ピッチIPとを対応付けて記憶したものである(図9,10参照)。理想ピッチIPは、エレメントE1~E5から選ばれた2つのエレメントE同士の本来の(設計上の)ピッチである。
 次に、こうして構成された部品実装システム1の動作について説明する。ここでは、部品実装機10のCPU61によって実行される部品実装処理について図5~図12Bを用いて説明する。図5は、部品実装処理ルーチンの一例を示すフローチャートである。本ルーチンは、制御装置60のストレージ63に記憶されており、CPU61によって実行される。CPU61は、管理装置70から生産開始の指示と共にシェイプデータ73aおよび理想ピッチデータ73bを入力し、シェイプデータ73aおよび理想ピッチデータ73bをストレージ63に記憶した後、部品実装処理ルーチンを開始する。
 本ルーチンを開始すると、CPU61は、部品供給装置21から供給される電子部品Cを吸着ノズル41に吸着させる(S100)。具体的には、CPU61は、部品供給装置21による電子部品Cの供給位置の上方へ吸着ノズル41が移動するようヘッド移動装置30(X軸アクチュエータ36およびY軸アクチュエータ38)を制御した後、吸着ノズル41が下降するようZ軸アクチュエータ42を制御すると共に当該吸着ノズル41に負圧が供給されるよう電磁弁を制御する。
 続いて、CPU61は、図7A,7Bに示す適正ピッチエレメント群設定処理サブルーチンを実行して、適正ピッチエレメント群Gを設定する(S105)。適正ピッチエレメント群Gは、本ルーチンのS110において実行される部品位置認識処理に用いられる複数(3つ以上)のエレメントEの集合である。また、適正ピッチエレメント群Gに含まれる複数のエレメントEは、任意の2つを選んだ際の全ての組合せにおいて、エレメントE同士の実ピッチRPが、エレメントE同士の理想ピッチIPに対して適正範囲内に収まっているものである。なお、実ピッチRPは、図8に示すように、2つのエレメントEの中心同士の実際のピッチである。なお、図8では、ピンP1(エレメントE2)が、曲がりにより、本来の位置から大きく外れた位置にある状態である。また、図8では、ピンP1(エレメントE2)の本来の位置を、一点鎖線で示した。
 適正ピッチエレメント群設定処理サブルーチンを開始すると、CPU61は、暫定的に全てのエレメントEを含む群を、適正ピッチエレメント群Gに設定する(S200)。次に、CPU61は、異常発生数データ63aに初期値をセットする(S205)。具体的には、CPU61は、図11Aに示すように、異常発生数データ63aの全ての値に0をセットする。異常発生数データ63aは、3つのエレメントEの組合せCMと、当該組合せCMを構成するエレメントEに発生した異常の数とを対応付けて記憶したものである。エレメントE同士の組合せCMは、後述する本サブルーチンのS265で決定されるものである。続いて、CPU61は、光源26を点灯させると共に(S210)、吸着ノズル41に吸着された電子部品Cの下面をパーツカメラ24で撮像する(S215)。具体的には、CPU61は、まず、電子部品Cを吸着した吸着ノズル41がパーツカメラ24の上方へ移動するようヘッド移動装置30を制御する。次に、CPU61は、電子部品CのエレメントEの先端部が光源26から照射されている光のあたる位置まで下降するように、Z軸アクチュエータ42を制御する。そして、CPU61は、電子部品Cが下面側から撮像されるようにパーツカメラ24を制御する。以下では、S215で撮像された電子部品Cの画像を部品画像Im1(図示せず)と称する。
 そして、CPU61は、部品画像Im1を2値化する(S220)。具体的には、CPU61は、画素の輝度値が所定値未満の画素を黒色にし、画素の輝度値が所定値以上の画素を白色にする。これにより、エレメントEの先端部は白色となり、それ以外の部分が黒色となる。このようにして得られた画像を2値化画像Im2と称する。このようにして得られた2値化画像Im2の一例を図6Aに示す。なお、図6Aでは、ピンP1(エレメントE2)が、曲がりにより、本来の位置から大きく外れた位置にある状態である。また、図6Aでは、ピンP1(エレメントE2)の本来の位置を一点鎖線で示した。
 続いて、CPU61は、2値化画像Im2において白色の画素が集まった領域をエレメントEの候補として検出する(S225)。そして、CPU61は、変数iに値1をセットする(S230)。次に、CPU61は、i番目(以下では、iは1以上5以下の整数)のエレメントE(以下、i番エレメントEiと称する)の実際の中心位置である実エレメント中心位置Mi(xi1,yi1)を算出する(S235)。具体的には、CPU61は、図6Bに示すように、2値化画像Im2を、2値化画像Im2における所定点(例えば、2値化画像Im2を左前の角)を原点OとしたXY平面とした場合における、i番エレメントEiの候補(白色の領域)の重心のX座標値とY座標値とを、2値化画像Im2におけるi番エレメントEiの実エレメント中心位置Mi(xi1,yi1)として算出する。なお、図6Bでは、ピンP1(エレメントE2)の本来の位置を一点鎖線で示した。また、本実施形態では、いずれのエレメントEの中心位置であるかを特に区別しない場合には、単に実エレメント中心位置Mと称する。
 続いて、CPU61は、変数iの値を1だけインクリメントする(S240)。そして、CPU61は、変数iの値がエレメントEの数(本実施形態では5)よりも大きいか否かを判定する(S245)。変数iの値がエレメントEの数以下であるならば、CPU61は、実エレメント中心位置Mをまだ算出していないエレメントEがあると認識して、否定判定を行なう。一方、変数iの値がエレメントEの数よりも大きいならば、CPU61は、全てのエレメントEの実エレメント中心位置Mを算出したと認識して、肯定判定を行なう。S245で否定判定を行なったならば、CPU61は、再びS235に戻り、次のエレメントEの実エレメント中心位置Mを算出する。
 一方、S245で肯定判定を行なったならば、CPU61は、変数iに値1をセットする(S250)。次に、CPU61は、変数jに値(i+1)をセットする(S255)。続いて、CPU61は、変数kに値(j+1)をセットする(S260)。そして、CPU61は、組合せCM(i,j,k)を決定する(S265)。これにより、エレメントE1~E5から3つのエレメントEを選んだ際の組合せが決定する。なお、本実施形態では、いずれの組合せCM(i,j,k)であるかを特に区別しない場合には、単に組合せCMと称する。
 次に、CPU61は、i番エレメントEiとj番エレメントEjとの実ピッチRPである、実ピッチRPijを算出する(S270)。具体的には、CPU61は、i番エレメントEiの実エレメント中心位置Miと、j番エレメントEjの実エレメント中心位置Mjとの距離を実ピッチRPijとして算出する。続いて、CPU61は、S270と同様に、j番エレメントEjとk番エレメントEkとの実ピッチRPjkおよびk番エレメントEkとi番エレメントEiとの実ピッチRPikを算出する(S275,S280)。これにより、CPU61は、S265で決定した組合せCM(i,j,k)の中から選ばれる2つのエレメントEの全ての組合せについて、エレメントE同士の実ピッチRPを算出する。
 そして、CPU61は、i番エレメントEiとj番エレメントEjとの理想ピッチIPである、理想ピッチIPijを算出する(S285)。具体的には、CPU61は、理想ピッチデータ73bを参照して、i番エレメントEiとj番エレメントEjとの理想ピッチIPijを取得する。次に、CPU61は、S285と同様に、j番エレメントEjとk番エレメントEkとの理想ピッチIPjkおよびi番エレメントEiとk番エレメントEkとの理想ピッチIPikを、理想ピッチデータ73bから取得する(S290,S295)。これにより、S265で決定した組合せCM(i,j,k)の中から選ばれる2つのエレメントEの全ての組合せについて、エレメントE同士の理想ピッチIPを取得する。
 次に、図7Bに示すように、CPU61は、実ピッチRPijが以下の判定式(1)を満たすか否かを判定する(S300)。
 (1-α)×IPij≦RPij≦(1+α)×IPij (1)
 ここで、αは、予め定められた値であり、例えば0.1~0.2程度の値である。実ピッチRPijが判定式(1)を満たすならば、CPU61は、実ピッチRPijが理想ピッチIPijに対して適正範囲内であると判断して、肯定判定を行なう。一方、実ピッチRPijが判定式(1)を満たさないならば、CPU61は、実ピッチRPijが理想ピッチIPijに対して適正範囲外であると判断して、否定判定を行なう。S300で肯定判定を行なったならば、CPU61は、本サブルーチンのS315に進む。
 S300で否定判定を行なったならば、CPU61は、組合せCM(i,j,k)に対応するi番エレメントEiの異常数の値に1を加え(S305)、組合せCM(i,j,k)に対応するj番エレメントEjの異常数の値に1を加える(S310)。
 S300で肯定判定を行なった後またはS310の後、CPU61は、実ピッチRPjkが以下の判定式(2)を満たすか否かを判定する(S315)。
 (1-α)×IPjk≦RPjk≦(1+α)×IPjk (2)
 実ピッチRPjkが判定式(2)を満たすならば、CPU61は、実ピッチRPjkが理想ピッチIPjkに対して適正範囲内であると判断して、肯定判定を行なう。一方、実ピッチRPjkが判定式(2)を満たさないならば、CPU61は、実ピッチRPjkが理想ピッチIPjkに対して適正範囲外であると判断して、否定判定を行なう。S315で肯定判定を行なったならば、CPU61は、本サブルーチンのS330に進む。
 S315で否定判定を行なったならば、CPU61は、組合せCM(i,j,k)に対応するj番エレメントEjの異常数の値に1を加え(S320)、組合せCM(i,j,k)に対応するk番エレメントEkの異常数の値に1を加える(S325)。
 S315で肯定判定を行なった後またはS325の後、CPU61は、実ピッチRPjkが以下の判定式(3)を満たすか否かを判定する(S330)。
 (1-α)×IPik≦RPik≦(1+α)×IPik (3)
 実ピッチRPikが判定式(3)を満たすならば、CPU61は、実ピッチRPikが理想ピッチIPikに対して適正範囲内であると判断して、肯定判定を行なう。一方、実ピッチRPikが判定式(3)を満たさないならば、CPU61は、実ピッチRPikが理想ピッチIPikに対して適正範囲外であると判断して、否定判定を行なう。S330で肯定判定を行なったならば、CPU61は、本サブルーチンのS345に進む。
 S330で否定判定を行なったならば、CPU61は、組合せCM(i,j,k)に対応するi番エレメントEiの異常数の値に1を加え(S335)、組合せCM(i,j,k)に対応するk番エレメントEkの異常数の値に1を加える(S340)。
 なお、以下では、S270~S340に示したように、実ピッチRPが理想ピッチIPに対して適正範囲に収まっているか否か判定する処理を、ピッチ適否判定と称するものとする。
 ここで、S300~S340の処理の一例ついて、図12A,12Bを用いて説明する。図12A,12Bは、異常発生数のカウント方法の一例を示す説明図である。図12A,12Bでは、異常発生数データ63aのうち、組合せCM(1,2,3)に対応する部分のみを示した。本実施形態では、S250~S265の処理を実行したことによって組合せCM(1,2,3)が決定した場合について説明する。なお、本実施形態では、図6Aに示すように、電子部品Cは、ピンP1(エレメントE2)が曲がりにより、本来の位置から大きく外れた位置にある状態であり、端子T1(エレメントE1)およびピンP2(エレメントE3)は、本来の位置にある状態である。
 まず、CPU61、実ピッチRP12が、上記判定式(1)を満たすか否かを判定する(S300)。本実施形態では、エレメントE2は、曲りにより本来の位置から大きく外れた位置にあるため、実ピッチRP12は上記の判定式(1)を満たさない。したがって、CPU61は否定判定を行なう。次に、CPU61は、図12Aに示すように、組合せCM(1,2,3)に対応するエレメントE1の異常数の値に1を加える(S305)。続いて、CPU61は、組合せCM(1,2,3)に対応するエレメントE2の異常数の値に1を加える(S310)。これにより、組合せCM(1,2,3)に対応するエレメントE1の異常数の値は1となり、組合せCM(1,2,3)に対応するエレメントE2の異常数の値は1となる。そして、CPU61は、実ピッチRP23が、上記の判定式(2)を満たすか否かを判定する(S315)。本実施形態では、エレメントE2は、曲りにより本来の位置から大きく外れた位置にあるため、実ピッチ23は上記の判定式(2)を満たさない。したがって、CPU61は否定判定を行なう。次に、CPU61は、図12Bに示すように、組合せCM(1,2,3)に対応するエレメントE2の異常数の値に1を加える(S320)。続いて、CPU61は、組合せCM(1,2,3)に対応するエレメントE3の異常数の値に1を加える(S325)。これにより、組合せCM(1,2,3)に対応するエレメントE2の異常数の値は2となり、組合せCM(1,2,3)に対応するエレメントE3の異常数の値は1となる。そして、CPU61は、実ピッチRP13が、上記の判定式(3)を満たすか否かを判定する(S330)。エレメントE1およびエレメントE3は、本来の位置にある状態であるため、実ピッチR13は、上記の判定式(3)を満たす。したがって、CPU61は肯定判定を行ない、本サブルーチンのS345に進む。
 S330で肯定判定を行なった後またはS340の後、CPU61は、変数kの値を1だけインクリメントする(S345)。次に、CPU61は、変数kの値がエレメントEの数(本実施形態では5)よりも大きいか否かを判定する(S350)。変数kの値がエレメントEの数以下ならば、CPU61は、i番エレメントEiとj番エレメントEjとをそのままに、次のk番エレメントEkを直前のk番エレメントEkの1つ隣のエレメントEにシフトさせた組合せCMに対してピッチ適否判定をすると判断して、否定判定を行なう。一方、変数kの値がエレメントEの数よりも大きいならば、CPU61は、肯定判定を行なう。S350で否定判定を行なったならば、CPU61は、再び本サブルーチンのS265に戻る。
 一方、S350で肯定判定を行なったならば、CPU61は、変数jの値を1だけインクリメントする(S355)。次に、CPU61は、変数jの値が(エレメントEの数-1)よりも大きいか否かを判定する(S360)。変数jの値が(エレメントEの数-1)以下ならば、CPU61は、i番エレメントEiをそのままに、次のj番エレメントEjを直前のj番エレメントEjの隣のエレメントEにシフトさせ、次のk番エレメントEkをシフト後のj番エレメントEjの隣のエレメントEに変更した組合せCMに対して、ピッチ適否判定をすると判断して、否定判定を行なう。一方、変数jの値が(エレメントEの数-1)よりも大きいならば、CPU61は、肯定判定を行なう。S360で否定判定を行なったならば、CPU61は、再び本サブルーチンのS260に戻る。
 一方、S360で肯定判定を行なったならば、CPU61は、変数iの値を1だけインクリメントする(S365)。そして、CPU61は、変数iの値が、(エレメントEの数-2)よりも大きいか否かを判定する(S370)。変数iの値が、(エレメントEの数-2)以下ならば、CPU61は、次のi番エレメントEiを直前のi番エレメントEiの隣のエレメントEにシフトさせ、j番エレメントEjをシフト後のi番エレメントEiの隣のエレメントEに変更し、k番エレメントEkを変更後のj番エレメントEjの隣のエレメントEに変更した組合せCMに対して、ピッチ適否判定をすると判断して、否定判定を行なう。一方、変数iの値が、(エレメントEの数-2)よりも大きいならば、CPU61は、全ての組合せCMに対してピッチ適否判定をしたと判断して、肯定判定を行なう。
 上述したように、CPU61は、S265~S340の処理を実行することで、ある組合せCMを構成するエレメントEにおいて異常が発生しているか否かを判断する。また、CPU61は、S345~S370の処理を実行することより、図11Aに示す異常発生数データ63aに示す組合せCMの順(上から順)で、ピッチ適否判定を行なう。
 S370で否定判定を行なったならば、CPU61は、再び本サブルーチンのS255に戻る。一方、S370で肯定判定を行なったならば、CPU61は、エレメントE毎に、異常発生数の合計を算出する(S375)。全ての組合せCMに対してピッチ適否判定を行なうと共にS375の処理を実行することにより得られた異常発生数データ63aの一例を図11Bに示す。
 次に、CPU61は、異常発生数データ63aにおいて、全てのエレメントEで異常発生数が0であるか否かを判定する(S380)。異常発生数データ63aにおいていずれかのエレメントEで異常発生数が0でないならば、CPU61は、適正ピッチエレメント群Gの中に異常が発生しているエレメントEが含まれていると判断して、否定判定を行なう。一方、異常発生数データ63aにおいて全てのエレメントEで異常発生数が0であるならば、CPU61は、適正ピッチエレメント群Gの中に、異常が発生しているエレメントEが含まれていないと判断して、肯定判定を行なう。
 S380で否定判定を行なったならば、CPU61は、異常発生数データ63aから、異常数が最大のエレメントEを含む組合せCMを除外し、異常数が最大のエレメントEを除外する(S385)。このようにして得られた異常発生数データ63aの一例を図11Cに示す。
 続いて、CPU61は、適正ピッチエレメント群Gに残存する組合せCMの数が0であるか否かを判定する(S390)。組合せCMは、3つのエレメントEを含んでいる。そのため、全てのエレメントEにおいて異常が発生していないエレメントEが2つ未満である場合には、全ての組合せCMにおいて異常が発生しているエレメントEが少なくとも1つは含まれることとなり、S385において全ての組合せCMが除外される。したがって、CPU61はこのような判定を行なう。
 S390で否定判定を行なったならば、CPU61は、再びS380に戻る。一方、S390で肯定判定を行なったならば、CPU61は、エラーを出力する(S395)。具体的には、CPU61は、部品実装機10に設けられた図示しない表示装置に、エラーメッセージを表示させる。続いて、CPU61は、電子部品Cを廃棄する(S400)。具体的には、CPU61は、吸着ノズル41が、廃棄ボックス28の上方に移動するようにヘッド移動装置30を制御した後、電子部品Cの吸着が解除されるように電磁弁を制御する。S400の後、CPU61は、部品実装ルーチンのS100に戻る。
 一方、S380で肯定判定を行なったならば、CPU61は、残りのエレメントE(図11Cでは、エレメントE1,E3~E5)を適正ピッチエレメント群Gに確定させて(S405)、本サブルーチンを終了する。なお、本実施形態では、適正ピッチエレメント群Gに含まれるエレメントEを適正ピッチエレメントEPと称するものとする。S405の後、CPU61は、図5に示す部品実装ルーチンのS110に進む。
 そして、CPU61は、部品位置認識処理として、適正ピッチエレメント群設定処理サブルーチンのS235で特定した実エレメント中心位置Mと、シェイプデータ73aで規定している適正ピッチエレメントEPの相対エレメント位置とに基づき、2値化画像Im2における電子部品Cの中心位置である部品中心位置N(x2,y2)を最小二乗法により算出する(S110)。この処理は、例えば以下のようにして実行される。なお、本実施形態では、適正ピッチエレメントEPは、図6Bにおいてハッチングが施されたエレメントE(ピンP1(エレメントE2)以外のエレメントE)に特定されているものとする。
 また、以下では、2値化画像Im2における電子部品Cの仮の中心位置である仮部品中心位置を基準として、シェイプデータ73aに規定された相対エレメント位置だけ離れた位置にエレメントE1があるとした場合におけるエレメントE1の仮想的な中心位置を仮エレメント中心位置H1(図示せず)と称するものとする。また、仮部品中心位置を基準として、相対エレメント位置だけ離れた位置にエレメントE3があるとした場合におけるエレメントE3の仮想的な中心位置を仮エレメント中心位置H3(図示せず)と称するものとする。更に、仮部品中心位置を基準として、相対エレメント位置だけ離れた位置にエレメントE4があるとした場合におけるエレメントE4の仮想的な中心位置を仮エレメント中心位置H4(図示せず)と称するものとする。そして、仮部品中心位置を基準として、相対エレメント位置だけ離れた位置にエレメントE5があるとした場合におけるエレメントE5の仮想的な中心位置を仮エレメント中心位置H5(図示せず)と称するものとする。
 まず、CPU61は、適正ピッチエレメント群設定処理サブルーチンのS235で算出した実エレメント中心位置M1と仮エレメント中心位置H1との距離の二乗値、S235で算出した実エレメント中心位置M3と仮エレメント中心位置H3との距離の二乗値、S235で算出した実エレメント中心位置M4と仮エレメント中心位置H4との距離の二乗値およびS235で算出した実エレメント中心位置M5と仮エレメント中心位置H5との距離の二乗値を算出する。次に、CPU61は、実エレメント中心位置M1と仮エレメント中心位置H1との距離の二乗値、実エレメント中心位置M3と仮エレメント中心位置H3との距離の二乗値、実エレメント中心位置M4と仮エレメント中心位置H4との距離の二乗値および実エレメント中心位置M5と仮エレメント中心位置H5との距離の二乗値の総和を算出する。そして、CPU61は、距離の二乗値の総和が最小となる仮中心位置を、2値化画像Im2における電子部品Cの部品中心位置N(x2,y2)として算出する。
 そして、CPU61は、変数iに値1をセットする(S115)。次に、CPU61は、エレメント位置認識処理として、対応する実エレメント中心位置Mに基づいて部品中心位置Nに対するi番エレメントEiの相対的な中心位置である相対エレメント中心位置Ri(xi3,yi3)を算出する(S120)。具体的には、CPU61は、i番エレメントEiの実エレメント中心位置MiのX座標値から電子部品Cの部品中心位置NのX座標値を減じてxi3(xi1-x2)を算出すると共に、i番エレメントEiの実エレメント中心位置MiのY座標値から部品中心位置NのY座標値を減じてyi3(yi1-y2)を算出する。なお、本実施形態では、いずれのエレメントEの相対エレメント中心位置であるかを特に区別しない場合には、単に相対エレメント中心位置Rと称する。
 次に、CPU61は、電子部品Cの部品中心位置Nに対するi番エレメントEiの理想的な中心位置である理想エレメント中心位置Ii(xi4,yi4)を算出する(S125)。理想エレメント中心位置Iiは、シェイプデータ73aに規定された相対エレメント位置通りにi番エレメントEiが配置されていたとする場合に、2値化画像Im2における部品中心位置N(x2,y2)に対するi番エレメントEiの相対的な中心位置である。具体的には、CPU61は、S110で算出した2値化画像Im2における電子部品Cの部品中心位置N(x2,y2)にi番エレメントEiの相対エレメント位置を加え、i番エレメントEiの理想エレメント中心位置Ii(xi4,yi4)を算出する。なお、本実施形態では、いずれのエレメントEの理想エレメント中心位置であるかを特に区別しない場合には、単に理想エレメント中心位置Iと称する。
 そして、CPU61は、i番エレメントEiの位置ずれ量δi(dxi、dyi)を算出する(S130)。具体的には、CPU61は、S125で算出した理想エレメント中心位置IiのX軸座標値からS120で算出した相対エレメント中心位置RiのX軸座標値を減じてX軸方向の位置ずれ量dxi(xi4-xi3)を算出する。そして、CPU61は、S125で算出した理想エレメント中心位置IiのY軸座標値からS120で算出した相対エレメント中心位置RiのY軸座標値を減じてY軸方向の位置ずれ量dyi(yi4-yi3)を算出する。なお、本実施形態では、いずれのエレメントEの位置ずれ量であるかを特に区別しない場合には、単に位置ずれ量δと称する。そして、CPU61は、i番エレメントEiの位置ずれ量δiが許容範囲内であるか否かを判定する(S135)。CPU61は、X軸方向の位置ずれ量dxiおよびY軸方向の位置ずれ量dyiのいずれもが所定の範囲内に収まっているならば、CPU61は、i番エレメントEiの位置ずれ量δiが許容範囲内であると認識して、肯定判定を行なう。一方、X軸方向の位置ずれ量dxiおよびY軸方向の位置ずれ量dyiのうち少なくとも1つが所定の範囲から外れているならば、CPU61は、i番エレメントEiの位置ずれ量δiが許容範囲外であると認識して、否定判定を行なう。
 S135で否定判定を行なったならば、CPU61は、電子部品Cを廃棄する(S140)。具体的には、CPU61は、吸着ノズル41が、廃棄ボックス28の上方に移動するようにヘッド移動装置30を制御する。S140の後、CPU61は、S100に戻る。
 一方、S135で肯定判定を行なったならば、CPU61は、変数iの値を1だけインクリメントする(S145)。次に、CPU61は、変数iの値がエレメントEの数よりも大きいか否かを判定する(S150)。変数iの値がエレメントEの数以下ならば、CPU61は、位置ずれ量δを算出しなければならないエレメントEがあると認識して、否定判定を行なう。一方、変数iの値がエレメントEの数よりも大きいならば、CPU61は、全てのエレメントEにおいて許容範囲を超える位置ずれがないと認識して、肯定判定を行なう。S150で否定判定を行なったならば、CPU61は、再びS120に戻り、部品中心位置Nに対する次の相対エレメント中心位置Rを算出する。
 一方、S150で肯定判定を行なったならば、CPU61は、基板Sに対して電子部品Cを実装する(S155)。具体的には、CPU61は、吸着ノズル41に吸着された電子部品Cが、基板Sの実装位置の上方に移動するようにヘッド移動装置30を制御する。そして、CPU61は、電子部品Cが基板Sに押し当てられるようにZ軸アクチュエータ42を制御すると共に電子部品Cの吸着が解除されるように電磁弁を制御する。そして、CPU61は、電子部品Cの吸着が解除されるように電磁弁を制御する。S155の後、CPU61は、本ルーチンを終了する。
 ここで、本実施形態のS110において、CPU61は、複数のエレメントEから最小二乗法により、2値化画像Im2における電子部品Cの部品中心位置Nを求める。そのため、一部のエレメントEの実エレメント中心位置Mに大きいが誤差があると、S110で算出される部品中心位置Nは、図6Cに示すように本来の位置から大きくずれるおそれがある。これに対して、本実施形態では、CPU61は、適正ピッチ設定処理サブルーチンにおいて適正ピッチエレメント群Gを取得して、部品実装処理ルーチンのS110では適正ピッチエレメントEPを用いて部品位置認識処理を実行する。そのため、CPU61は、2値化画像Im2において精度よく電子部品Cの部品中心位置Nを認識することができる。なお、図6Cでは、ピンP1(エレメントE2)が、曲がりにより、本来の位置から大きく外れた位置にある状態である。また、図6Cでは、エレメントE1~E5を用いて算出した部品中心位置Nを黒色の四角印で示し、本来の部品中心位置Nを黒色の丸印で示した。更に、図6Cでは、ピンP1(エレメントE2)の本来の位置を一点鎖線で示した。
 ここで、本実施形態の構成要素と本開示の構成要素との対応関係を明らかにする。すなわち、本実施形態の制御装置60が本開示の画像処理装置に相当し、CPU61が画像取得部、算出部、ピッチ取得部および判定部に相当する。また、CPU61が選定部、部品位置認識部および特徴部位置認識部に相当する。
 以上詳説した制御装置60では、2つの全ての組合せで実ピッチRPが適正ピッチであるか否かを判定する。これにより、3つ以上のエレメントEのうちいずれか2つが一様に変形していた場合であっても、他のエレメントEとの組合せが適正ピッチと判定されないため、異常が発生しているエレメントEを見つけ出すことができる。
 また、制御装置60では、3つ以上のエレメントEからなる群であって当該群の中から選ばれる2つの全ての組合せについて実ピッチRPが適正ピッチとなる群を適正ピッチエレメント群Gとして選定する。これにより、2つのエレメントEが一様に変形している場合であっても、より適切に異常が発生しているエレメントEを見つけ出すことができる。2つのエレメントEが一様に変形している場合には、3つ以上の中から選ばれる2つの組合せにおいて実ピッチRPが適正ピッチとならない組合わせがあるためである。
 また、制御装置60では、適正ピッチエレメント群Gに含まれる複数のエレメントEを用いて、2値化画像Im2の基準位置(原点O)に対する電子部品Cの位置(部品中心位置N)を認識する部品位置認識処理を実行する。これにより、2値化画像Im2における電子部品Cの位置を精度よく認識することができる。
 また、制御装置60は、部品位置認識処理の結果に基づいて、2値化画像Im2における電子部品Cの位置(部品中心位置N)を基準とした複数のエレメントEのそれぞれの位置を認識するエレメント位置認識処理を実行する。これにより、2値化画像Im2における電子部品Cの位置を基準とした複数のエレメントEの位置(相対エレメント中心位置R)をより正確に認識することができる。
 なお、本開示は上述した実施形態に何ら限定されることはなく、本開示の技術的範囲に属する限り種々の態様で実施し得ることはいうまでもない。
 上述した実施形態では、本開示の画像処理装置を制御装置60として説明したが、管理装置70としてもよい。
 上述した実施形態では、理想ピッチデータ73bは、管理装置70のストレージ73に記憶されていた。しかし、理想ピッチデータ73bは、制御装置60のストレージ63に記憶されていてもよい。この場合、制御装置60は、生産開始の指示と共にシェイプデータ73aを入力した後に、部品実装処理ルーチンを実行すればよい。
 上述した実施形態では、シェイプデータ73aは、管理装置70のストレージ73に記憶されていた。しかし、シェイプデータ73aは、制御装置60のストレージ63に記憶されていてもよい。この場合、制御装置60は、生産開始の指示と共に理想ピッチデータ73bを入力した後に、部品実装処理ルーチンを実行すればよい。
 上述した実施形態では、理想ピッチデータ73bは、複数のエレメントEの中から2つ選んだ全ての組合せについて、理想ピッチIPを記憶していた。しかし、理想ピッチデータ73bは、一部の組合せについて理想ピッチIPを記憶していてもよい。この場合、CPU61は、他の組合せの理想ピッチIPを、記憶した一部の組合せの理想ピッチIPから演算により求めてもよい。例えば、上述した実施形態における電子部品Cである場合、理想ピッチデータ73bには、少なくとも隣接し合うエレメントE同士の理想ピッチIPが記憶されていればよい。
 上述した実施形態では、実ピッチRPが適正ピッチであるか否かを判定するにあたり、判定式(1)~(3)を用いた。しかし、実ピッチRPと理想ピッチIPとのピッチ差ΔP(=RP-IP)やピッチ差ΔPの絶対値に基づいて、実ピッチRPが適正ピッチであるか否かを判定してもよい。
 上述した実施形態では、適正ピッチエレメント群Gに含まれる全てのエレメントEを用いて部品位置認識処理およびエレメント位置認識処理を実行した。しかし、適正ピッチエレメント群Gに属する一部のエレメントEを用いて部品位置認識処理およびエレメント位置認識処理を実行してもよい。この場合、CPU61によって、適正ピッチエレメント群Gに属する3つ以上のエレメントEが任意に選択されればよい。
 上述した実施形態では、CPU61は、適正ピッチエレメント群設定処理サブルーチンにおいて、複数のエレメントEから選ばれる3つの組合せCMを決定し、組合せCMから選ばれる2つのエレメントEの全ての組合せについてピッチ適否判定を行なった。しかし、CPU61は、適正ピッチエレメント群設定処理サブルーチンにおいて、複数のエレメントEから直接に2つのエレメントEの組合せを決定し、ピッチ適否判定を行なってもよい。あるいは、CPU61は、適正ピッチエレメント群設定処理サブルーチンにおいて、複数のエレメントEから選ばれる4つ以上の組合せを決定し、決定した組合せから選ばれる2つのエレメントEの全ての組合せについてピッチ適否判定を行なってもよい。
 上述した実施形態では、CPU61は、2値化画像Im2から各エレメントEの実エレメント中心位置Mを算出し、各エレメントEの実エレメント中心位置Mを用いて適正ピッチエレメント群Gを決定し、適正ピッチエレメント群Gを用いて部品位置認識処理により部品中心位置Nを算出し、エレメント位置認識処理により部品中心位置Nに対する各エレメントEの相対エレメント中心位置Rを認識して、各エレメントEに位置ずれが生じているか否かを判定した。しかし、CPU61は、部品位置認識処理とエレメント位置認識処理とを省略してもよい。この場合、CPU61は、組合せCMから選ばれる2つのエレメントEの組合せにおいて、実ピッチRPが理想ピッチIPに対して適正範囲内に収まっていない組合せを検出したならば(S380のNO)、いずれかのエレメントEに位置ずれが生じていると判定してもよい。また、この場合、CPU61は、電子部品Cを廃棄するものとしてもよい。
 上述した実施形態では、CPU61は、全てのエレメントEで異常数が0になるまで異常発生数データ63aから異常発生数が最大のエレメントEおよび当該エレメントEを含む組合せCMを除外することを繰り返し、残存する組合せCM構成するエレメントEの集合を適正ピッチエレメント群Gに確定させた。しかし、CPU61は、異常発生数データ63aの中から、全てのエレメントEでの異常発生数が0である組合せCMを直接に見つけ出すと共に見つけ出した組合せCMを構成するエレメントEの集合を適正ピッチエレメント群Gに確定させてもよい。
 上述した実施形態では、本開示の保持部材を吸着ノズル41として説明した。しかし、上述した実施形態において、本開示の保持部材として、メカニカルチャックなどの他の保持部材を用いてもよい。
 上述した実施形態では、本開示を制御装置60として説明したが、画像処理方法としてもよい。
 本開示は、部品実装機や部品実装システムの製造産業などに利用可能である。
 1 部品実装システム、10 部品実装機、12 筐体、21 部品供給装置、21a トレイ供給装置、21b テープフィーダ、22 搬送装置、23 実ピッチ、24 パーツカメラ、25 マークカメラ、26 光源、28 廃棄ボックス、30 ヘッド移動装置、32 X軸スライダ、33 X軸ガイドレール、34 Y軸スライダ、35 Y軸ガイドレール、36 X軸アクチュエータ、37 X軸位置センサ、38 Y軸アクチュエータ、39 Y軸位置センサ、40 ヘッド、41 吸着ノズル、42 Z軸アクチュエータ、43 Z軸位置センサ、60 制御装置、61 CPU、62 ROM、63 ストレージ、63a 異常発生数データ、64 RAM、65 入出力インタフェース、66 バス、70 管理装置、71 CPU、72 ROM、73 ストレージ、73a シェイプデータ、73b 理想ピッチデータ、74 RAM、B ボディ、C 電子部品、CM 組合せ、E,E1~E5 エレメント、EP 適正ピッチエレメント、G 適正ピッチエレメント群、H1,H3~H5 仮エレメント中心位置、I 理想エレメント中心位置、Im1 部品画像、Im2 2値化画像、IP 理想ピッチ、M,M1~M5 エレメント中心位置、N 部品中心位置、O 原点、P1~P3 ピン、R 相対エレメント中心位置、RP 実ピッチ、S 基板、T1,T2 端子、dxi 位置ずれ量、dyi 位置ずれ量、δ,δi 位置ずれ量、ΔP ピッチ差。

Claims (5)

  1.  3つ以上の特徴部を有する電子部品を撮像した画像を取得する画像取得部と、
     前記複数の特徴部から選ばれる2つの全ての組合せについて、2つの前記特徴部同士の実際のピッチである実ピッチを、前記画像に基づいて算出する算出部と、
     前記複数の特徴部から選ばれる2つの全ての組合せについて、2つの前記特徴部同士の理想的なピッチである理想ピッチを取得するピッチ取得部と、
     前記2つの全ての組合せについて、前記実ピッチと対応する前記理想ピッチとを比較して前記実ピッチが適正ピッチであるか否かを判定する判定部と、
     を備える画像処理装置。
  2.  請求項1に記載の画像処理装置であって、
     前記判定部の結果に基づいて、3つ以上の前記特徴部からなる特徴部群であって当該特徴部群の中から選ばれる2つの全ての組合せについて前記実ピッチが前記適正ピッチとなる前記特徴部群を適正特徴部群として選定する選定部
     を備える画像処理装置。
  3.  請求項2に記載の画像処理装置であって、
     前記適正特徴部群に含まれる複数の前記特徴部を用いて、前記画像の基準位置に対する前記電子部品の位置を認識する部品位置認識処理を実行する部品位置認識部
     を備える画像処理装置。
  4.  請求項3に記載の画像処理装置であって、
     前記部品位置認識処理の結果に基づいて、前記画像における前記電子部品の位置を基準とした前記複数の特徴部のそれぞれの位置を認識する特徴部位置認識処理を実行する特徴部位置認識部
     を備える画像処理装置。
  5.  3つ以上の特徴部を有する電子部品を撮像した画像を取得し、
     前記複数の特徴部から選ばれる2つの全ての組合せについて、2つの前記特徴部同士の実際のピッチである実ピッチを、前記画像に基づいて算出し、
     前記複数の特徴部から選ばれる2つの全ての組合せについて、2つの前記特徴部同士の理想的なピッチである理想ピッチを取得し、
     前記2つの全ての組合せについて、前記実ピッチと対応する前記理想ピッチとを比較して前記実ピッチが適正ピッチであるか否かを判定する、
     画像処理方法。
PCT/JP2022/033781 2022-09-08 2022-09-08 画像処理装置および画像処理方法 WO2024053067A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/JP2022/033781 WO2024053067A1 (ja) 2022-09-08 2022-09-08 画像処理装置および画像処理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2022/033781 WO2024053067A1 (ja) 2022-09-08 2022-09-08 画像処理装置および画像処理方法

Publications (1)

Publication Number Publication Date
WO2024053067A1 true WO2024053067A1 (ja) 2024-03-14

Family

ID=90192457

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/033781 WO2024053067A1 (ja) 2022-09-08 2022-09-08 画像処理装置および画像処理方法

Country Status (1)

Country Link
WO (1) WO2024053067A1 (ja)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05196439A (ja) * 1992-01-21 1993-08-06 Yamaha Motor Co Ltd チップ部品のリード曲がり検出方法及び装置
JP2001217595A (ja) * 2000-02-02 2001-08-10 Juki Corp 部品位置検出方法及び装置
JP2001256481A (ja) * 2000-03-14 2001-09-21 Anritsu Corp 外観検査装置及び方法
JP2006084198A (ja) * 2004-09-14 2006-03-30 I-Pulse Co Ltd 実装基板の検査方法および同装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05196439A (ja) * 1992-01-21 1993-08-06 Yamaha Motor Co Ltd チップ部品のリード曲がり検出方法及び装置
JP2001217595A (ja) * 2000-02-02 2001-08-10 Juki Corp 部品位置検出方法及び装置
JP2001256481A (ja) * 2000-03-14 2001-09-21 Anritsu Corp 外観検査装置及び方法
JP2006084198A (ja) * 2004-09-14 2006-03-30 I-Pulse Co Ltd 実装基板の検査方法および同装置

Similar Documents

Publication Publication Date Title
JP3965288B2 (ja) 対基板作業結果検査装置
US20170066133A1 (en) Coordinate system setting method, coordinate system setting apparatus, and robot system provided with coordinate system setting apparatus
EP3307039B1 (en) Component mounting device and suction position setting method
EP3451812B1 (en) Substrate work machine
CN109076727B (zh) 安装装置及安装方法
KR100730831B1 (ko) 부품의 실장 방법
EP3328180B1 (en) Component-mounting machine
WO2024053067A1 (ja) 画像処理装置および画像処理方法
CN111869342B (zh) 元件安装装置
CN110602939A (zh) 元件安装线的最优化装置及元件安装线的最优化方法
JP2016207729A (ja) 部品実装機、部品実装方法
WO2024038527A1 (ja) 画像処理装置および画像処理システム
EP4007473A1 (en) Mounting device and method for controlling mounting device
JP6627077B2 (ja) 制御データのキャリブレーション方法及び部品実装装置
JP2005353750A (ja) 電子部品搭載装置の保守管理装置
EP3771310B1 (en) Component-mounting device
CN116491236A (zh) 元件安装系统
US11154000B2 (en) Substrate work machine
US7542151B2 (en) Method of placing at least one component on at least one substrate as well as such a system
JP7572837B2 (ja) 部品実装システム
WO2024111064A1 (ja) 画像取得装置、基板検査装置および画像取得方法
JP7384916B2 (ja) 情報処理装置及び実装装置
CN115004877B (zh) 图像处理装置、安装装置及图像处理方法
JP7169366B2 (ja) 部品実装装置
JP2004063867A (ja) 部品搭載装置及び部品搭載方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22958145

Country of ref document: EP

Kind code of ref document: A1