JPWO2018100692A1 - Image processing method for electronic parts and image processing apparatus - Google Patents

Image processing method for electronic parts and image processing apparatus Download PDF

Info

Publication number
JPWO2018100692A1
JPWO2018100692A1 JP2018553585A JP2018553585A JPWO2018100692A1 JP WO2018100692 A1 JPWO2018100692 A1 JP WO2018100692A1 JP 2018553585 A JP2018553585 A JP 2018553585A JP 2018553585 A JP2018553585 A JP 2018553585A JP WO2018100692 A1 JPWO2018100692 A1 JP WO2018100692A1
Authority
JP
Japan
Prior art keywords
surface portion
curved surface
metal curved
image processing
bump
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018553585A
Other languages
Japanese (ja)
Other versions
JP6670949B2 (en
Inventor
郁夫 鈴木
郁夫 鈴木
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Publication of JPWO2018100692A1 publication Critical patent/JPWO2018100692A1/en
Application granted granted Critical
Publication of JP6670949B2 publication Critical patent/JP6670949B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/08Measuring arrangements characterised by the use of optical techniques for measuring diameters

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Supply And Installment Of Electrical Components (AREA)

Abstract

本開示の画像処理方法では、金属曲面部の3次元CADデータと金属曲面部に照射される光の向きとに基づいて、金属曲面部で反射した光が撮像位置に到達したときに生成する図形の2次元データを作成する。そして、その図形の2次元データに基づいて、実際に撮像された画像から得られる金属曲面部に関する情報を評価する。In the image processing method of the present disclosure, a figure generated when light reflected by the metal curved surface portion reaches the imaging position based on the three-dimensional CAD data of the metal curved surface portion and the direction of light irradiated to the metal curved surface portion. Create 2D data of Then, based on the two-dimensional data of the figure, the information on the metal curved surface portion obtained from the actually captured image is evaluated.

Description

本明細書は、電子部品の画像処理方法及び画像処理装置を開示する。   This specification discloses an image processing method and an image processing apparatus for electronic parts.

従来より、部品供給装置から供給される電子部品を採取し、採取した電子部品を基板上の所定の位置に装着する部品実装機が知られている。こうした部品実装機において、複数のバンプが配列された電子部品のバンプ面に光を照射して撮像し、撮像された画像からバンプのサイズや配置情報を求めるものも知られている(例えば特許文献1)。一方、バンプを撮像する際には側射光源を用いることがあるが、その場合、バンプの中央部分は曲面であり、その中央部分で反射された光はカメラに入射し難いため、バンプの中央部分は暗い画像となることも知られている(例えば特許文献2)。   2. Description of the Related Art Conventionally, there has been known a component mounter which samples electronic components supplied from a component supply device and mounts the collected electronic components at predetermined positions on a substrate. Among such component mounting machines, there is also known one that irradiates light onto a bump surface of an electronic component in which a plurality of bumps are arrayed to pick up an image, and obtains bump size and arrangement information from the picked up image (for example, patent document 1). On the other hand, when imaging a bump, a side-emitting light source may be used. In that case, the central portion of the bump is a curved surface, and light reflected by the central portion is difficult to enter the camera. It is also known that a part will be a dark image (for example, patent document 2).

特開2000−315896号公報JP 2000-315896 A 特開2008−216140号公報JP, 2008-216140, A

側射光源を用いてバンプを撮像した場合、バンプの中央部分のほかに外周部分も暗い画像となる。そのため、撮像された画像には、バンプは明るい環状帯として現れるが、その環状帯の外径は実際のバンプ径よりも小さくなる。こうしたことから、画像上での環状帯の外径を、一律に実際のバンプ径の所定割合(例えば90%)に設定することがあった。しかしながら、バンプの形状はバンプの種類によって様々である。そのため、各バンプの形状を考慮することなく、環状帯の外径を一律に実際のバンプ径の所定割合に設定してしまうと、画像上のバンプを正しく評価できないおそれがあった。   In the case of imaging a bump using a side-emitting light source, an outer peripheral portion also becomes a dark image in addition to the central portion of the bump. Therefore, in the captured image, the bumps appear as bright annular bands, but the outer diameter of the annular bands is smaller than the actual bump diameter. Because of this, the outer diameter of the annular band on the image may be uniformly set to a predetermined ratio (for example, 90%) of the actual bump diameter. However, the shape of the bumps varies depending on the type of bump. Therefore, if the outer diameter of the annular band is uniformly set to a predetermined ratio of the actual bump diameter without considering the shape of each bump, there is a possibility that the bumps on the image can not be evaluated correctly.

本開示は、上述した課題を解決するためになされたものであり、電子部品の金属曲面部に関する情報を精度よく評価することを主目的とする。   The present disclosure has been made to solve the above-described problems, and has as its main object to accurately evaluate information on a metal curved portion of an electronic component.

本開示の画像処理方法は、
金属曲面部を備えた電子部品の前記金属曲面部に側射光源及び/又は傾斜光源の光を照射し、光の照射された前記金属曲面部を、前記金属曲面部に対向する所定の撮像位置から撮像し、該撮像された画像に基づいて前記金属曲面部に関する情報を得る画像処理方法であって、
前記金属曲面部の3次元CADデータと前記金属曲面部に照射される光の向きとに基づいて、前記金属曲面部で反射した光が前記撮像位置に到達したときに生成する図形の2次元データを作成し、前記図形の2次元データに基づいて前記撮像された画像から得られる前記金属曲面部に関する情報を評価する、
ものである。
The image processing method of the present disclosure is
The metal curved surface portion of the electronic component provided with the metal curved surface portion is irradiated with the light of the side light source and / or the inclined light source, and the metal curved surface portion irradiated with light is a predetermined imaging position facing the metal curved surface portion An image processing method for obtaining information on the metal curved surface portion based on the captured image,
Two-dimensional data of a figure generated when light reflected by the metal curved surface portion reaches the imaging position based on the three-dimensional CAD data of the metal curved surface portion and the direction of light irradiated to the metal curved surface portion And evaluating information on the metal curved surface portion obtained from the captured image based on two-dimensional data of the graphic,
It is a thing.

本開示の画像処理装置は、
金属曲面部を備えた電子部品の前記金属曲面部に側射光源及び/又は傾斜光源の光を照射し、光の照射された前記金属曲面部を、前記金属曲面部に対向する所定の撮像位置から撮像し、該撮像された画像に基づいて前記金属曲面部に関する情報を得る画像処理装置であって、
前記金属曲面部の3次元CADデータを記憶する記憶装置と、
前記金属曲面部の3次元CADデータと前記金属曲面部に照射される光の向きとに基づいて、前記金属曲面部で反射した光が前記撮像位置に到達したときに生成する図形の2次元データを作成し、前記図形の2次元データに基づいて前記撮像された画像から得られる前記金属曲面部に関する情報を評価する制御装置と、
を備える。
The image processing apparatus of the present disclosure is
The metal curved surface portion of the electronic component provided with the metal curved surface portion is irradiated with the light of the side light source and / or the inclined light source, and the metal curved surface portion irradiated with light is a predetermined imaging position facing the metal curved surface portion An image processing apparatus for obtaining information from the curved metal surface portion on the basis of the captured image;
A storage device for storing three-dimensional CAD data of the metal curved surface portion;
Two-dimensional data of a figure generated when light reflected by the metal curved surface portion reaches the imaging position based on the three-dimensional CAD data of the metal curved surface portion and the direction of light irradiated to the metal curved surface portion A controller configured to evaluate information on the metal curved surface portion obtained from the captured image based on two-dimensional data of the figure;
Equipped with

本開示の画像処理方法及び画像処理装置では、金属曲面部の3次元CADデータと金属曲面部に照射される光の向きとに基づいて、金属曲面部で反射した光が所定の撮像位置に到達したときに生成する図形の2次元データを作成する。また、その図形の2次元データに基づいて、撮像された画像から得られる金属曲面部に関する情報を評価する。図形の2次元データは3次元CADデータに基づく正確なデータである。したがって、撮像された画像から得られる金属曲面部に関する情報を図形の2次元データに基づいて評価することにより、電子部品の金属曲面部に関する情報を精度よく評価することができる。   In the image processing method and the image processing apparatus of the present disclosure, the light reflected by the metal curved surface reaches a predetermined imaging position based on the three-dimensional CAD data of the metal curved surface and the direction of the light irradiated to the metal curved surface. Create two-dimensional data of the figure to be generated when In addition, based on two-dimensional data of the figure, information on a metal curved surface portion obtained from the captured image is evaluated. The two-dimensional data of a figure is accurate data based on three-dimensional CAD data. Therefore, the information on the metal curved surface portion of the electronic component can be evaluated with high accuracy by evaluating the information on the metal curved surface portion obtained from the captured image based on the two-dimensional data of the figure.

部品実装装置10の斜視図。FIG. 2 is a perspective view of the component mounting apparatus 10; パーツカメラ40の構成の概略説明図。FIG. 2 is a schematic explanatory view of a configuration of a part camera 40. 部品実装装置10の制御に関わる構成を示すブロック図。FIG. 2 is a block diagram showing a configuration related to control of the component mounting apparatus 10. 部品実装処理ルーチンのフローチャート。The flowchart of a component mounting process routine. バンプ94の撮像画像の説明図。Explanatory drawing of the captured image of bump 94. FIG. 基準データ作成ルーチンのフローチャート。The flowchart of reference data creation routine. バンプ94aを持つBGAパッケージの部品90aの説明図。Explanatory drawing of the components 90a of the BGA package which has bump 94a. バンプ94bを持つBGAパッケージの部品90bの説明図。Explanatory drawing of the components 90b of the BGA package which has bump 94b. LED48aから照射される光束の角度範囲を示す説明図。Explanatory drawing which shows the angle range of the light beam irradiated from LED48a. バンプ94aへ照射した光が反射して撮像部49へ入射する様子を示す説明図。FIG. 14 is an explanatory view showing a state in which light irradiated to the bumps 94 a is reflected and is incident on an imaging unit 49; 環状帯98aの説明図。Explanatory drawing of the cyclic | annular band 98a. バンプ94bへ照射した光が反射して撮像部49へ入射する様子を示す説明図。Explanatory drawing which shows a mode that the light irradiated to bump 94b is reflected and it injects into the imaging part 49. FIG. 環状帯98bの説明図。Explanatory drawing of the cyclic | annular band 98b.

本開示の画像処理方法及び画像処理装置の好適な実施形態を、図面を参照しながら以下に説明する。図1は部品実装装置10の斜視図、図2はパーツカメラ40の構成の概略説明図、図3は部品実装装置10の制御に関わる構成を示すブロック図である。なお、本実施形態において、左右方向(X軸)、前後方向(Y軸)及び上下方向(Z軸)は、図1に示した通りとする。   Preferred embodiments of the image processing method and image processing apparatus of the present disclosure will be described below with reference to the drawings. FIG. 1 is a perspective view of the component mounting apparatus 10, FIG. 2 is a schematic explanatory view of a configuration of the parts camera 40, and FIG. 3 is a block diagram showing a configuration related to control of the component mounting apparatus 10. In the present embodiment, the left-right direction (X axis), the front-rear direction (Y axis), and the up-down direction (Z axis) are as shown in FIG.

部品実装装置10は、基台12と、基台12の上に設置された実装装置本体14と、実装装置本体14に装着された部品供給装置としてのリールユニット70とを備えている。   The component mounting apparatus 10 includes a base 12, a mounting apparatus main body 14 installed on the base 12, and a reel unit 70 as a component supply apparatus mounted on the mounting apparatus main body 14.

実装装置本体14は、基台12に対して交換可能に設置されている。この実装装置本体14は、基板搬送装置18と、ヘッド24と、ノズル37と、パーツカメラ40と、制御装置60とを備えている。   The mounting device main body 14 is exchangeably installed on the base 12. The mounting device body 14 includes a substrate transfer device 18, a head 24, a nozzle 37, a part camera 40, and a control device 60.

基板搬送装置18は、基板16を搬送したり保持したりする装置である。この基板搬送装置18は、支持板20,20と、コンベアベルト22,22(図1では片方のみ図示)とを備えている。支持板20,20は、左右方向に延びる部材であり、図1の前後に間隔を開けて設けられている。コンベアベルト22,22は、支持板20,20の左右に設けられた駆動輪及び従動輪に無端状となるように架け渡されている。基板16は、一対のコンベアベルト22,22の上面に乗せられて左から右へと搬送される。この基板16は、多数立設された支持ピン23によって裏面側から支持可能となっている。   The substrate transfer device 18 is a device for transferring and holding the substrate 16. The substrate transfer device 18 includes support plates 20 and 20, and conveyor belts 22 and 22 (only one is shown in FIG. 1). The support plates 20, 20 are members extending in the left-right direction, and are provided at intervals in the front and back of FIG. The conveyor belts 22, 22 are endlessly wound around drive wheels and driven wheels provided on the left and right of the support plates 20, 20. The substrates 16 are carried on the upper surfaces of the pair of conveyor belts 22, 22 and conveyed from left to right. The substrate 16 can be supported from the back side by a large number of support pins 23 set up.

ヘッド24は、X軸スライダ26の前面に取り付けられている。X軸スライダ26は、Y軸スライダ30の前面に取り付けられている。Y軸スライダ30は、前後方向に延びる左右一対のガイドレール32,32にスライド可能に取り付けられている。Y軸スライダ30の前面には、左右方向に延びる上下一対のガイドレール28,28が設けられている。X軸スライダ26は、このガイドレール28,28にスライド可能に取り付けられている。ヘッド24は、X軸スライダ26が左右方向に移動するのに伴って左右方向に移動し、Y軸スライダ30が前後方向に移動するのに伴って前後方向に移動する。なお、各スライダ26,30は、それぞれ駆動モータ26a,30a(図3参照)により駆動される。また、ヘッド24は、Z軸モータ34を内蔵し、Z軸に沿って延びるボールネジ35に取り付けられたノズル37の高さをZ軸モータ34によって調整する。さらに、ヘッド24は、ノズル37を回転させるQ軸モータ36(図3参照)を内蔵している。   The head 24 is attached to the front of the X-axis slider 26. The X-axis slider 26 is attached to the front of the Y-axis slider 30. The Y-axis slider 30 is slidably attached to a pair of left and right guide rails 32, 32 extending in the front-rear direction. A pair of upper and lower guide rails 28, 28 extending in the left-right direction is provided on the front surface of the Y-axis slider 30. The X-axis slider 26 is slidably attached to the guide rails 28, 28. The head 24 moves in the left-right direction as the X-axis slider 26 moves in the left-right direction, and moves in the front-rear direction as the Y-axis slider 30 moves in the front-rear direction. The sliders 26 and 30 are respectively driven by drive motors 26a and 30a (see FIG. 3). Further, the head 24 incorporates a Z-axis motor 34, and the height of the nozzle 37 attached to a ball screw 35 extending along the Z-axis is adjusted by the Z-axis motor 34. Furthermore, the head 24 incorporates a Q-axis motor 36 (see FIG. 3) for rotating the nozzle 37.

ノズル37は、ノズル先端に部品を吸着して保持したり、ノズル先端に吸着している部品を吸着解除したりする部材である。ノズル37は、図示しない圧力供給源から圧力を供給可能であり、例えば負圧が供給されると部品を吸着し、負圧の供給が停止されるか又は正圧が供給されると部品を吸着解除する。ノズル37は、ヘッド24の本体底面から下方に突出している。また、Z軸モータ34によってノズル37がZ軸方向に沿って昇降することで、ノズル37に吸着された部品の高さが調整される。Q軸モータ36によってノズル37が回転することで、ノズル37に吸着された部品の向きが調整される。   The nozzle 37 is a member that sucks and holds components at the tip of the nozzle and releases suction of components that are sucked at the tip of the nozzle. The nozzle 37 can supply pressure from a pressure supply source (not shown), for example, suctions parts when negative pressure is supplied, and suctions parts when negative pressure supply is stopped or positive pressure is supplied. To release. The nozzle 37 protrudes downward from the bottom of the main body of the head 24. Further, the nozzle 37 is moved up and down along the Z-axis direction by the Z-axis motor 34, whereby the height of the component attracted to the nozzle 37 is adjusted. The rotation of the nozzle 37 by the Q-axis motor 36 adjusts the orientation of the component attracted to the nozzle 37.

パーツカメラ40は、基板搬送装置18の前側の支持板20の前方に配置されている。パーツカメラ40は、パーツカメラ40の上方が撮像範囲であり、ノズル37に保持された部品を下方から撮像して撮像画像を生成する。パーツカメラ40は、図2に示すように、照明部41と、撮像部49とを備えている。   The parts camera 40 is disposed in front of the support plate 20 on the front side of the substrate transfer device 18. The parts camera 40 has an imaging range above the parts camera 40, and images the parts held by the nozzles 37 from below to generate a captured image. As shown in FIG. 2, the parts camera 40 includes an illumination unit 41 and an imaging unit 49.

照明部41は、撮像対象の部品90に対して光を照射する。この照明部41は、ハウジング42と、連結部43と、落射光源44と、ハーフミラー46と、多段光源47と、を備えている。ハウジング42は、上面及び下面(底面)が八角形状に開口した椀状の部材である。ハウジング42は、下面の開口よりも上面の開口の方が大きく、下面から上面に向かって内部空間が大きくなる傾向の形状をしている。連結部43は、ハウジング42と撮像部49とを連結する筒状の部材である。落射光源44は、LED45を複数有している。ハーフミラー46は、落射光源44のLED45からの水平方向の光を上方に反射する。また、ハーフミラー46は上方からの光については撮像部49に向けて透過する。多段光源47は、上段光源47aと、中段光源47bと、下段光源47cとを備えている。上段光源47aは、複数のLED48aを有し、中段光源47bは、複数のLED48bを有し、下段光源47cは、複数のLED48cを有している。LED48a〜48cは、いずれも光軸49aから傾斜した方向に光を照射する。LED48a〜48cの照射方向の光軸49aからの傾斜角は、LED48aが最も大きく、LED48aはほぼ水平方向に光を照射する。また、この傾斜角は、LED48cが最も小さくなっている。上段光源47aはほぼ水平方向に光を照射することから側射光源と称し、中段光源47bは斜め上向きに光を照射することから傾斜光源と称する。   The illumination unit 41 emits light to the component 90 to be imaged. The illumination unit 41 includes a housing 42, a connection unit 43, an incident light source 44, a half mirror 46, and a multistage light source 47. The housing 42 is a bowl-shaped member whose upper and lower surfaces (bottom surfaces) are opened in an octagonal shape. The housing 42 has a shape in which the opening on the upper surface is larger than the opening on the lower surface, and the internal space tends to increase from the lower surface to the upper surface. The connection part 43 is a cylindrical member which connects the housing 42 and the imaging part 49. The incident light source 44 has a plurality of LEDs 45. The half mirror 46 reflects upward light from the LED 45 of the incident light source 44 in the horizontal direction. The half mirror 46 transmits light from above toward the imaging unit 49. The multistage light source 47 includes an upper stage light source 47a, a middle stage light source 47b, and a lower stage light source 47c. The upper stage light source 47a has a plurality of LEDs 48a, the middle stage light source 47b has a plurality of LEDs 48b, and the lower stage light source 47c has a plurality of LEDs 48c. The LEDs 48a to 48c all emit light in a direction inclined from the optical axis 49a. The inclination angle from the optical axis 49a in the irradiation direction of the LEDs 48a to 48c is largest for the LED 48a, and the LED 48a emits light in a substantially horizontal direction. In addition, the inclination angle of the LED 48c is the smallest. The upper-stage light source 47a emits light in a substantially horizontal direction, so it is called a side-emitting light source, and the middle-stage light source 47b emits light obliquely upward, so it is called an inclined light source.

撮像部49は、受光した光に基づいて撮像画像を生成する。この撮像部49は、図示しないレンズなどの光学系及び撮像素子(例えばCCD)を備えている。落射光源44及び多段光源47から発せられ撮像対象の部品で反射した後の光がハーフミラー46を透過して撮像部49に到達すると、撮像部49はこの光を受光して撮像画像を生成する。   The imaging unit 49 generates a captured image based on the received light. The imaging unit 49 includes an optical system such as a lens (not shown) and an imaging device (for example, a CCD). When the light emitted from the incident light source 44 and the multistage light source 47 and reflected by the component to be imaged passes through the half mirror 46 and reaches the imaging unit 49, the imaging unit 49 receives this light and generates a captured image .

制御装置60は、図3に示すように、CPU61、ROM62、HDD63、RAM64、入出力インターフェース65などを備えており、これらはバス66を介して接続されている。この制御装置60は、基板搬送装置18、X軸スライダ26の駆動モータ26a、Y軸スライダ30の駆動モータ30a、Z軸モータ34、Q軸モータ36、パーツカメラ40及びノズル37用の図示しない圧力供給源へ駆動信号を出力する。また、制御装置60は、パーツカメラ40からの撮像画像を入力する。制御装置60は、リールユニット70のフィーダコントローラ76と通信可能に接続されている。なお、図示しないが、各スライダ26,30には図示しない位置センサが装備されており、制御装置60はそれらの位置センサからの位置情報を入力しつつ、各スライダ26,30の駆動モータ26a,30aを制御する。   As shown in FIG. 3, the control device 60 includes a CPU 61, a ROM 62, an HDD 63, a RAM 64, an input / output interface 65, and the like, which are connected via a bus 66. The control device 60 includes a substrate transfer device 18, a drive motor 26a for the X-axis slider 26, a drive motor 30a for the Y-axis slider 30, a Z-axis motor 34, a Q-axis motor 36, and pressure for the parts camera 40 and the nozzle 37. Output a drive signal to the supply source. In addition, the control device 60 inputs a captured image from the part camera 40. The controller 60 is communicably connected to the feeder controller 76 of the reel unit 70. Although not shown, each slider 26, 30 is equipped with a position sensor (not shown), and the control device 60 inputs the position information from the position sensor while the drive motor 26a of each slider 26, 30 is, Control 30a.

リールユニット70は、複数のリール72を備え、実装装置本体14の前側に着脱可能に取り付けられている。各リール72には、テープが巻き付けられている。テープの表面には、テープの長手方向に沿って複数の収容凹部が設けられている。各収容凹部には、部品が収容されている。これらの部品は、テープの表面を覆うフィルムによって保護されている。こうしたテープは、リールから後方に向かって巻きほどかれ、フィーダ部74においてフィルムが剥がされて部品が露出した状態となる。この露出した状態の部品は、ノズル37によって吸着される。リールユニット70の動作はフィーダコントローラ76(図3参照)によって制御される。   The reel unit 70 includes a plurality of reels 72 and is detachably attached to the front side of the mounting apparatus main body 14. A tape is wound around each reel 72. The surface of the tape is provided with a plurality of receiving recesses along the longitudinal direction of the tape. A component is accommodated in each accommodation recess. These parts are protected by a film covering the surface of the tape. Such a tape is unwound from the reel toward the rear, and the film is peeled off at the feeder section 74 to expose the parts. The component in the exposed state is suctioned by the nozzle 37. The operation of the reel unit 70 is controlled by a feeder controller 76 (see FIG. 3).

管理コンピュータ80は、部品実装装置10の生産ジョブを管理するコンピュータであり、部品実装装置10の制御装置60と通信可能に接続されている。なお、生産ジョブは、部品実装装置10においてどの部品をどういう順番でどの基板16に装着するか、また、何枚の基板16に部品の実装を行うかなどを定めた情報である。管理コンピュータ80は、この生産ジョブを記憶しており、生産ジョブに含まれる情報を必要に応じて部品実装装置10に出力する。   The management computer 80 is a computer that manages production jobs of the component mounting apparatus 10 and is communicably connected to the control device 60 of the component mounting apparatus 10. The production job is information that defines which component is mounted on which substrate 16 and in what order in the component mounting apparatus 10, and how many substrates 16 the component mounting is performed. The management computer 80 stores the production job, and outputs information included in the production job to the component mounting apparatus 10 as needed.

次に、本実施形態の部品実装装置10の動作について説明する。ここでは、部品として、図2に示すように、本体92の下面に複数のバンプ94が配設されたBGAパッケージの部品90を例に挙げて説明する。   Next, the operation of the component mounting apparatus 10 of the present embodiment will be described. Here, as a component, as shown in FIG. 2, a component 90 of a BGA package in which a plurality of bumps 94 are disposed on the lower surface of the main body 92 will be described as an example.

まず、部品実装処理ルーチンについて説明する。図4はこのルーチンのフローチャートである。制御装置60のCPU61は、部品実装処理ルーチンを開始すると、部品90をノズル37に吸着させる(S100)。具体的には、CPU61は、X軸スライダ26やY軸スライダ30を制御して、リールユニット70によって供給される部品90の直上にノズル37を配置する。このとき、ノズル37の中心が部品90の中心の直上に来るようにノズル37を配置する。続いて、CPU61は、ヘッド24を制御して、ノズル37を部品90の上面まで下降し、ノズル37に負圧を供給して部品90をノズル37に吸着させる。   First, the component mounting process routine will be described. FIG. 4 is a flowchart of this routine. When the component mounting processing routine is started, the CPU 61 of the control device 60 causes the component 90 to be attracted to the nozzle 37 (S100). Specifically, the CPU 61 controls the X-axis slider 26 and the Y-axis slider 30 to arrange the nozzle 37 immediately above the component 90 supplied by the reel unit 70. At this time, the nozzle 37 is disposed so that the center of the nozzle 37 is right above the center of the part 90. Subsequently, the CPU 61 controls the head 24 to lower the nozzle 37 to the upper surface of the component 90 and supply a negative pressure to the nozzle 37 to cause the component 90 to be attracted to the nozzle 37.

次に、CPU61は、部品90に含まれるバンプ94をパーツカメラ40に撮像させる(S110)。具体的には、CPU61は、ヘッド24を制御して、ノズル37に吸着された部品90が他の部材と干渉しない高さまでノズル37を上昇する。続いて、CPU61は、X軸スライダ26やY軸スライダ30を制御して、パーツカメラ40の光軸49a上にノズル37の中心が一致するようにノズル37を配置する。続いて、CPU61は、パーツカメラ40の上段光源47aのみを点灯させ、部品90に含まれるバンプ94をパーツカメラ40に撮像させ、その撮像画像を入力する。バンプ94の表面は曲面であるため、バンプ94の中心付近で反射された光は撮像部49に入射しない。そのため、パーツカメラ40によって撮像された画像には、図5に示すように、バンプ94は、黒色背景96に白色の環状帯(ドーナツ状の帯)98として現れる。   Next, the CPU 61 causes the part camera 40 to image the bumps 94 included in the part 90 (S110). Specifically, the CPU 61 controls the head 24 to ascend the nozzle 37 to such a height that the component 90 attracted to the nozzle 37 does not interfere with other members. Subsequently, the CPU 61 controls the X-axis slider 26 and the Y-axis slider 30 to arrange the nozzles 37 on the optical axis 49 a of the part camera 40 so that the centers of the nozzles 37 coincide. Subsequently, the CPU 61 turns on only the upper light source 47a of the part camera 40, causes the part camera 40 to image the bumps 94 included in the part 90, and inputs the captured image. Since the surface of the bump 94 is a curved surface, light reflected near the center of the bump 94 does not enter the imaging unit 49. Therefore, in the image captured by the parts camera 40, as shown in FIG. 5, the bumps 94 appear as white annular bands (donut-shaped bands) 98 on the black background 96.

次に、CPU61は、撮像画像から白色の環状帯98の外径drを演算し(S120)、予め設定しておいた基準データを用いてその環状帯98の外径drをバンプ94の外径Dr(図5参照)に換算する(S130)。このS130の処理の詳細については後述する。   Next, the CPU 61 calculates the outer diameter dr of the white annular band 98 from the captured image (S120), and uses the reference data set in advance to calculate the outer diameter dr of the annular band 98 as the outer diameter of the bumps 94. Convert to Dr (see FIG. 5) (S130). Details of the process of S130 will be described later.

次に、CPU61は、換算したバンプ94の外径Drが適正範囲内か否かを判定する(S140)。適正範囲は、設計上のバンプ94の外径に誤差・公差等を見込んで設定された許容量を付加した範囲である。S140で肯定判定だったならば、CPU61は、ノズル37に吸着された部品90を基板16の所定位置に装着し(S150)、本ルーチンを終了する。具体的には、CPU61は、X軸スライダ26やY軸スライダ30を制御して、基板16の所定位置の直上にノズル37の中心が一致するようにノズル37を配置する。続いて、CPU61は、ヘッド24を制御して、ノズル37に吸着された部品90を基板16の上面まで下降し、ノズル37に大気圧又は正圧を供給して部品90を基板16に装着する。一方、S140で否定判定だったならば、CPU61は、図示しないディスプレイにエラーメッセージを表示し(S160)、本ルーチンを終了する。   Next, the CPU 61 determines whether the converted outer diameter Dr of the bump 94 is within the appropriate range (S140). The appropriate range is a range obtained by adding an allowance set in consideration of errors, tolerances, and the like to the outer diameter of the bump 94 in design. If an affirmative determination is made in S140, the CPU 61 mounts the component 90 sucked by the nozzle 37 at a predetermined position on the substrate 16 (S150), and ends this routine. Specifically, the CPU 61 controls the X-axis slider 26 and the Y-axis slider 30 to arrange the nozzles 37 immediately above the predetermined position of the substrate 16 so that the centers of the nozzles 37 coincide. Subsequently, the CPU 61 controls the head 24 to lower the component 90 absorbed by the nozzle 37 to the upper surface of the substrate 16 and supply the atmospheric pressure or positive pressure to the nozzle 37 to mount the component 90 on the substrate 16 . On the other hand, if a negative determination is made in S140, the CPU 61 displays an error message on a display not shown (S160), and ends this routine.

ここで、基準データについて詳説する。CPU61は、上述した部品実装処理ルーチンを実行する前に、基準データ作成ルーチンを実行する。図6はこのルーチンのフローチャートである。制御装置60のCPU61は、基準データ作成ルーチンを開始すると、HDD63に記憶されている部品90の3次元CADデータを取得する(S200)。HDD63には、基板16に実装される各種部品(部品90を含む)の3次元CADデータが記憶されている。部品90の3次元CADデータには、バンプ94の外形形状のデータが含まれている。バンプ94の外形形状のデータとしては、バンプ94の高さや外径(バンプ94を平面視したときの円の直径)のほか、バンプ94の曲面を定義するデータ(曲率半径など)が含まれている。次に、CPU61は、部品90に含まれるバンプ94に側射光源の光を照射したときの理想画像(2次元データ)を3次元CADデータから演算する(S210)。バンプ94の理想画像は、図5の環状帯98と同様の環状帯として現れる。次に、CPU61は、理想画像から環状帯の外径を演算する(S220)。次に、CPU61は、設計上のバンプ94の外径に対する環状帯の外径の比率を基準データとして演算し、その基準データを部品90の識別情報と対応づけてHDD63に記憶し(S230)、本ルーチンを終了する。なお、識別情報は、部品種類を区別するために付された情報である。   Here, the reference data will be described in detail. The CPU 61 executes a reference data creation routine before executing the component mounting process routine described above. FIG. 6 is a flowchart of this routine. When the reference data creation routine is started, the CPU 61 of the control device 60 acquires three-dimensional CAD data of the component 90 stored in the HDD 63 (S200). The HDD 63 stores three-dimensional CAD data of various components (including the component 90) mounted on the substrate 16. The three-dimensional CAD data of the part 90 includes data of the outer shape of the bump 94. Data of the external shape of the bump 94 includes data (such as radius of curvature) defining the curved surface of the bump 94 in addition to the height and outer diameter of the bump 94 (diameter of a circle when the bump 94 is viewed in plan). There is. Next, the CPU 61 calculates, from the three-dimensional CAD data, an ideal image (two-dimensional data) when the light of the side-reflection light source is irradiated to the bumps 94 included in the component 90 (S210). The ideal image of the bumps 94 appears as an annular band similar to the annular band 98 of FIG. Next, the CPU 61 calculates the outer diameter of the annular band from the ideal image (S220). Next, the CPU 61 calculates the ratio of the outer diameter of the annular band to the outer diameter of the bump 94 in design as reference data, associates the reference data with the identification information of the part 90, and stores it in the HDD 63 (S230), End this routine. The identification information is information attached to distinguish the part type.

部品90としては、例えば、図7に示すように半球状のバンプ94aを持つBGAパッケージの部品90aや、図8に示すように円柱の底面に半楕円球が接合した形状のバンプ94bを持つBGAパッケージの部品90bなどがある。バンプ94aは、ランドの上に溶融ハンダを供給して固化させたものである。バンプ94bは、カップ状の受け皿の上に溶融ハンダを供給し固化させたものである。HDD63には、部品90aの識別情報に対応づけて記憶された基準データRaと、部品90bの識別情報に対応づけて記憶された基準データRbとが存在する。   As the component 90, for example, a component 90a of a BGA package having hemispherical bumps 94a as shown in FIG. 7 or a BGA having bumps 94b having a shape in which a semi-elliptic sphere is joined to the bottom of a cylinder as shown in FIG. There is a part 90b of the package. The bumps 94 a are formed by supplying molten solder onto the lands and solidifying them. The bumps 94 b are obtained by supplying and solidifying molten solder on a cup-shaped pan. The HDD 63 includes reference data Ra stored in association with identification information of the component 90 a and reference data Rb stored in association with identification information of the component 90 b.

部品90aの基準データRaの求め方について、以下に説明する。上段光源47aのLED48aから照射される光束は、図9に示すように、所定の角度範囲を持っている。図9には上段光源47aのうち図2で右側のLED48aから照射される光束を示したが、その他の場所のLED48aから照射される光束もこれと同様の角度範囲を持っている。LED48aから照射される所定の角度範囲を持った光束がバンプ94aに照射されると、図10に示すように、バンプ94aの表面で光軸49aと平行な方向に反射した光だけが撮像部49に入射する。そのため、バンプ94aの理想画像は、図11に示すように、黒色背景96に白色の環状帯98aとして現れる。この環状帯98aの外径daは、図10とバンプ94aの3次元CADデータとを用いれば正確に算出することができる。そのため、設計上のバンプ94aの外径Daに対する環状帯98aの外径daの比率Ra(基準データ)を、正確に求めることができる。ここでは、Ra=da/Da=60(%)だったとする。HDD63には、部品90aの識別情報と基準データRaとが対応づけて記憶される。   The method of obtaining the reference data Ra of the component 90a will be described below. The luminous flux emitted from the LED 48a of the upper light source 47a has a predetermined angle range as shown in FIG. Although FIG. 9 shows the light flux emitted from the LED 48a on the right side in FIG. 2 among the upper light sources 47a, the light flux emitted from the LED 48a in other places also has an angle range similar to this. When the light beam having a predetermined angle range emitted from the LED 48a is irradiated to the bump 94a, as shown in FIG. 10, only the light reflected in the direction parallel to the optical axis 49a on the surface of the bump 94a is the imaging unit 49. Incident to Therefore, the ideal image of the bumps 94a appears as a white annular band 98a on the black background 96, as shown in FIG. The outer diameter da of the annular band 98a can be accurately calculated using FIG. 10 and the three-dimensional CAD data of the bumps 94a. Therefore, the ratio Ra (reference data) of the outer diameter da of the annular band 98a to the outer diameter Da of the designed bump 94a can be accurately obtained. Here, it is assumed that Ra = da / Da = 60 (%). In the HDD 63, identification information of the component 90a and reference data Ra are stored in association with each other.

部品90bの基準データRbの求め方について、以下に説明する。上段光源47aのLED48aから照射される光束は、上述したとおり、所定の角度範囲を持っている。LED48aから照射される所定の角度範囲を持った光束がバンプ94bに照射されると、図12に示すように、バンプ94bの表面で光軸49aと平行な方向に反射した光だけが撮像部49に入射する。そのため、バンプ94bの理想画像は、図12に示すように、黒色背景96に白色の環状帯98bとして現れる。この環状帯98bの外径dbは、図12とバンプ94bの3次元CADデータとを用いれば正確に算出することができる。そのため、設計上のバンプ94bの外径Dbに対する環状帯98bの外径dbの比率Rb(基準データ)を正確に求めることができる。ここでは、Rb=db/Db=90(%)だったとする。HDD63には、部品90bの識別情報と基準データRbとが対応づけて記憶される。   The method of obtaining the reference data Rb of the part 90b will be described below. The luminous flux emitted from the LED 48a of the upper light source 47a has a predetermined angular range as described above. When a light beam having a predetermined angle range emitted from the LED 48a is irradiated to the bump 94b, as shown in FIG. 12, only light reflected in a direction parallel to the optical axis 49a on the surface of the bump 94b is the imaging unit 49. Incident to Therefore, the ideal image of the bumps 94b appears as a white annular band 98b on a black background 96, as shown in FIG. The outer diameter db of the annular band 98b can be accurately calculated using FIG. 12 and the three-dimensional CAD data of the bumps 94b. Therefore, the ratio Rb (reference data) of the outer diameter db of the annular band 98b to the outer diameter Db of the designed bump 94b can be accurately obtained. Here, it is assumed that Rb = db / Db = 90 (%). In the HDD 63, identification information of the component 90b and reference data Rb are stored in association with each other.

上述したS130において、ノズル37に吸着された部品90の識別情報が部品90aの識別情報と一致していた場合、S120で演算した環状帯98の外径drを、部品90aの基準データである比率Raを用いて撮像対象のバンプ94の外径Drに換算する。この場合、Dr=dr/Ra≒1.67drになる。S140では、この換算した外径Drが適正範囲内か否かが判定される。一方、上述したS130において、ノズル37に吸着された部品90の識別情報が部品90bの識別情報と一致していた場合、S120で演算した環状帯の外径drを、部品90bの基準データである比率Rbを用いて撮像対象のバンプ94の外径Drに換算する。この場合、Dr=dr/Rb≒1.11drになる。S140では、この換算した外径Drが適正範囲内か否かが判定される。   In the above-described S130, when the identification information of the component 90 attracted to the nozzle 37 matches the identification information of the component 90a, the ratio of the outer diameter dr of the annular band 98 calculated in S120 to the reference data of the component 90a It converts into the outer diameter Dr of bump 94 of imaging object using Ra. In this case, Dr = dr / Ra ≒ 1.67 dr. In S140, it is determined whether the converted outer diameter Dr is within an appropriate range. On the other hand, when the identification information of the component 90 attracted to the nozzle 37 matches the identification information of the component 90b in S130 described above, the outer diameter dr of the annular band calculated in S120 is the reference data of the component 90b. The ratio Rb is used to convert to the outer diameter Dr of the bump 94 to be imaged. In this case, Dr = dr / Rb ≒ 1.11 dr. In S140, it is determined whether the converted outer diameter Dr is within an appropriate range.

ところで、部品90aでも部品90bでもバンプ外径に対する環状帯外径の比率を同じ値とした場合、その比率は実際のバンプの形状を考慮した値ではない。そのため、環状帯の外径drからバンプの外径Drをその比率を用いて換算したとしても、バンプの外径Drは誤差が大きくなる。その結果、バンプの外径Drが適正範囲内か否かの判定精度は低くなる。これに対して、本実施形態では、比率Ra,Rbは実際のバンプの形状を考慮した値となっている。そのため、環状帯の外径drからバンプの外径Drを比率Ra,Rbを用いて換算して得られるバンプの外径Drは、誤差が非常に小さいものとなる。その結果、バンプの外径Drが適正範囲内か否かの判定精度は高くなる。   By the way, when the ratio of the annular belt outer diameter to the bump outer diameter is made the same in both the component 90a and the component 90b, the ratio is not a value in consideration of the actual shape of the bump. Therefore, even if the outer diameter Dr of the bump is converted from the outer diameter dr of the annular band using the ratio, the error of the outer diameter Dr of the bump becomes large. As a result, the determination accuracy as to whether the outer diameter Dr of the bump is within the appropriate range is lowered. On the other hand, in the present embodiment, the ratios Ra and Rb are values in consideration of actual bump shapes. Therefore, the outer diameter Dr of the bump obtained by converting the outer diameter Dr of the bump from the outer diameter dr of the annular band using the ratios Ra and Rb has a very small error. As a result, the determination accuracy as to whether the outer diameter Dr of the bump is within the appropriate range is enhanced.

ここで、本実施形態の構成要素と本開示の画像処理方法(又は画像処理装置)の構成要素との対応関係について説明する。本実施形態のバンプ94が「金属曲面部」に相当し、環状帯98が「図形」に相当し、バンプ94の外径が「金属曲面部に関する情報」に相当し、比率Ra,Rbが「基準データ」に相当する。   Here, the correspondence between the components of the present embodiment and the components of the image processing method (or the image processing apparatus) of the present disclosure will be described. The bump 94 of this embodiment corresponds to a "metal curved surface portion", the annular band 98 corresponds to a "figure", the outer diameter of the bump 94 corresponds to "information on a metal curved surface portion", and the ratios Ra and Rb are " It corresponds to "reference data".

以上説明した本実施形態では、バンプ94の3次元CADデータとバンプ94に照射される光の向きとに基づいて、バンプ94で反射した光が撮像部49に到達したときに生成する環状帯98の2次元データを作成する。また、その環状帯98の2次元データに基づいて基準データである比率Ra,Rbを作成する。そして、撮像画像から得られる環状帯98の外径drを比率Ra,Rbを用いて評価する。各比率は、各部品の3次元CADデータに基づく正確なデータである。したがって、部品90のバンプ94の外径Drを精度よく評価することができる。   In the embodiment described above, based on the three-dimensional CAD data of the bumps 94 and the direction of the light irradiated to the bumps 94, an annular band 98 generated when the light reflected by the bumps 94 reaches the imaging unit 49. Create 2D data of Also, based on the two-dimensional data of the annular band 98, ratios Ra and Rb which are reference data are created. Then, the outer diameter dr of the annular band 98 obtained from the captured image is evaluated using the ratios Ra and Rb. Each ratio is accurate data based on three-dimensional CAD data of each part. Therefore, the outer diameter Dr of the bump 94 of the component 90 can be evaluated with high accuracy.

また、バンプ94は、一般的には半球状又はそれに近い形状であるが、詳細にみると種々の形状のものがある。そのため、複数種類のバンプ94について3次元CADデータの外径が同じだとしても、2次元データに変換した後の環状帯98の外径は異なることがある。したがって、各バンプ94の3次元CADデータを利用して比率Ra,Rbを作成する意義が高い。   Also, although the bumps 94 are generally hemispherical or near in shape, there are various shapes in detail. Therefore, even if the outer diameters of the three-dimensional CAD data of the plurality of types of bumps 94 are the same, the outer diameter of the annular band 98 after conversion into two-dimensional data may be different. Therefore, the significance of creating the ratios Ra and Rb using the three-dimensional CAD data of each bump 94 is high.

なお、本発明は上述した実施形態に何ら限定されることはなく、本発明の技術的範囲に属する限り種々の態様で実施し得ることはいうまでもない。   It is needless to say that the present invention is not limited to the above-mentioned embodiment at all, and can be implemented in various modes within the technical scope of the present invention.

例えば、上述した実施形態では、金属曲面部として、BGAパッケージ部品のバンプを例示したが、特にこれに限定されるものではなく、例えばPGAパッケージ部品のピン電極であってもよいし、リード部品のリード(但し湾曲部を有するリード)であってもよい。ピン電極の先端は曲面であるため、側射光源が照射されたときの撮像画像には上述したバンプと同様、環状帯が現れる。また、湾曲部を有するリードの湾曲部も曲面であるため、側射光源が照射されたときの撮像画像には線状帯が現れる。したがって、バンプの代わりにピン電極や湾曲部を有するリードを採用した場合でも、上述した実施形態と同様の効果が得られる。   For example, in the above-described embodiment, the bump of the BGA package component is exemplified as the metal curved portion, but the invention is not particularly limited thereto. For example, the pin electrode of the PGA package component may be used. It may be a lead (but a lead having a curved portion). Since the tip of the pin electrode is a curved surface, an annular band appears in the captured image when the side-reflection light source is irradiated, like the above-described bump. Further, since the curved portion of the lead having the curved portion is also a curved surface, a linear band appears in the captured image when the side-emitting light source is irradiated. Therefore, even in the case of adopting a lead having a pin electrode or a curved portion instead of the bump, the same effect as that of the above-described embodiment can be obtained.

上述した実施形態の部品実装処理ルーチン(図4)において、S130を省略し、S140でバンプ94の外径Drが適正範囲内か否かを判定する代わりに環状帯の外径drが適正範囲内か否かを判定してもよい。この場合、部品実装処理ルーチンを実行する前に、基準データ作成ルーチン(図6)の代わりに、環状帯外径演算ルーチンを行う。環状帯外径演算ルーチンは、基準データ作成ルーチンのS230を省略したもの(つまりS200〜S220)である。環状帯の外径drが適正範囲内か否かは、環状帯の外径drが理想画像から得られる環状帯の外径の許容範囲内か否かによって判断される。理想画像から得られる環状帯の外径は3次元CADデータに基づく正確なデータである。そのため、このようにしても、部品90を精度よく評価することができる。   In the component mounting process routine (FIG. 4) of the embodiment described above, S130 is omitted, and instead of determining whether the outer diameter Dr of the bump 94 is within the appropriate range in S140, the outer diameter dr of the annular band is within the appropriate range It may be determined whether or not. In this case, before executing the component mounting process routine, the annular band outer diameter calculation routine is performed instead of the reference data creation routine (FIG. 6). The annular band outer diameter calculation routine is the one in which S230 of the reference data creation routine is omitted (that is, S200 to S220). Whether or not the outer diameter dr of the annular band is within the appropriate range is determined based on whether or not the outer diameter dr of the annular band is within the allowable range of the outer diameter of the annular band obtained from the ideal image. The outer diameter of the annular zone obtained from the ideal image is accurate data based on three-dimensional CAD data. Therefore, even in this manner, the component 90 can be evaluated with high accuracy.

上述した実施形態では、バンプ94を撮影するにあたり、側射光源である上段光源47aのみを点灯させたが、これに代えて又は加えて、傾斜光源である中段光源47bを点灯させてもよい。傾斜光源をバンプ94に照射した場合も、バンプ94は撮影画像に環状帯として現れるため、上述した実施形態と同様の効果が得られる。また、側射光源及び傾斜光源の一方又は両方を点灯させると共に落射光源44を点灯させてもよい。このようにしても上述した実施形態と同様の効果が得られる。   In the embodiment described above, only the upper light source 47a which is a side-emitting light source is turned on when photographing the bump 94, but instead of or in addition to this, the middle light source 47b which is an inclined light source may be turned on. Even when the inclined light source irradiates the bumps 94, the bumps 94 appear as an annular band in the photographed image, and therefore, the same effect as that of the above-described embodiment can be obtained. In addition, the epi-illumination light source 44 may be lit while lighting one or both of the side-reflection light source and the inclined light source. Even in this case, the same effect as that of the above-described embodiment can be obtained.

上述した実施形態では、部品供給装置としてリールユニット70を例示したが、特にこれに限定されるものではなく、例えば、トレイに部品を載せて供給するトレイユニットを採用してもよい。   In the embodiment described above, the reel unit 70 has been exemplified as the component supply device, but the invention is not particularly limited thereto. For example, a tray unit may be adopted in which components are placed on a tray and supplied.

上述した実施形態では、部品90を採取する部材としてノズル37を用いたが、その代わりに爪で掴むタイプのチャックを採用してもよい。   In the embodiment described above, the nozzle 37 is used as a member for picking up the part 90, but instead, a chuck of a type grasped by a claw may be adopted.

本開示の画像処理方法や画像処理装置は、以下のように構成してもよい。   The image processing method and the image processing apparatus of the present disclosure may be configured as follows.

本開示の画像処理方法において、前記図形の2次元データに基づいて前記金属曲面部に関する情報の基準データを作成し、前記撮像された画像から得られる前記金属曲面部に関する情報を前記基準データを用いて評価してもよい。また、本開示の画像処理装置において、前記制御装置は、前記図形の2次元データに基づいて前記金属曲面部に関する情報の基準データを作成し、前記撮像された画像から得られる前記金属曲面部に関する情報を前記基準データを用いて評価してもよい。こうすれば、金属曲面部に関する情報の基準データは3次元CADデータに基づく正確なデータとなる。したがって、撮像された画像から得られる金属曲面部に関する情報を基準データを用いて評価することにより、電子部品の金属曲面部に関する情報を精度よく評価することができる。   In the image processing method of the present disclosure, reference data of information on the metal curved surface portion is created based on two-dimensional data of the graphic, and information on the metal curved surface portion obtained from the captured image is used with the reference data. It may be evaluated. Further, in the image processing apparatus of the present disclosure, the control device generates reference data of information related to the metal curved surface portion based on two-dimensional data of the graphic, and relates to the metal curved surface portion obtained from the captured image. Information may be evaluated using the reference data. In this way, the reference data of the information on the metal curved surface portion becomes accurate data based on the three-dimensional CAD data. Therefore, the information on the metal curved surface portion of the electronic component can be evaluated with high accuracy by evaluating the information on the metal curved surface portion obtained from the captured image using the reference data.

本開示の画像処理方法及び画像処理装置において、前記金属曲面部は、バンプであり、前記図形は、環状帯であり、前記金属曲面部に関する情報は、前記バンプの外径であってもよい。バンプは、一般的には半球状又はそれに近い形状であるが、詳細にみると種々の形状のものがある。そのため、複数種類のバンプについて3次元CADデータの外径が同じだとしても、2次元データに変換した後の環状帯の外径は異なることがある。したがって、本開示の画像処理方法や画像処理装置を適用する意義が高い。   In the image processing method and the image processing apparatus of the present disclosure, the metal curved surface portion may be a bump, the graphic may be an annular band, and the information on the metal curved surface portion may be an outer diameter of the bump. The bumps are generally hemispherical or near in shape, but variously in detail. Therefore, even if the outer diameter of the three-dimensional CAD data is the same for a plurality of types of bumps, the outer diameter of the annular band after conversion into two-dimensional data may be different. Therefore, the significance of applying the image processing method and the image processing apparatus of the present disclosure is high.

本発明は、バンプなどの金属表面部を備えた部品を基板に実装する部品実装機などに利用可能である。   The present invention is applicable to a component mounting machine or the like for mounting a component provided with a metal surface portion such as a bump on a substrate.

10 部品実装装置、12 基台、14 実装装置本体、16 基板、18 基板搬送装置、20 支持板、22 コンベアベルト、23 支持ピン、24 ヘッド、26 X軸スライダ、26a 駆動モータ、28 ガイドレール、30 Y軸スライダ、30a 駆動モータ、32 ガイドレール、34 Z軸モータ、35 ボールネジ、36 Q軸モータ、37 ノズル、40 パーツカメラ、41 照明部、42 ハウジング、43 連結部、44 落射光源、45 LED、46 ハーフミラー、47 多段光源、47a 上段光源、47b 中段光源、47c 下段光源、48a,48b,48c LED、49 撮像部、49a 光軸、60 制御装置、61 CPU、62 ROM、63 HDD、64 RAM、65 入出力インターフェース、66 バス、70 リールユニット、72 リール、74 フィーダ部、76 フィーダコントローラ、80 管理コンピュータ、90,90a,90b 部品、92 本体、94,94a,94b バンプ、96 黒色背景、98,98a,98b 環状帯。 DESCRIPTION OF SYMBOLS 10 component mounting apparatus, 12 base, 14 mounting apparatus main body, 16 board | substrates, 18 board | substrate conveyance apparatus, 20 support plates, 22 conveyor belts, 23 support pins, 24 heads, 26 X-axis sliders, 26a drive motor, 28 guide rails, 30 Y-axis slider, 30a drive motor, 32 guide rails, 34 Z-axis motor, 35 ball screw, 36 Q-axis motor, 37 nozzles, 40 parts camera, 41 lighting units, 42 housings, 43 connecting parts, 44 epi-illumination light sources, 45 LEDs 46 half mirror 47 multistage light source 47a upper stage light source 47b middle stage light source 47c lower stage light source 48a 48b 48c LED 49 imaging unit 49a optical axis 60 controller 61 CPU 62 ROM 63 HDD 64 RAM, 65 I / O interface, 66 Scan, 70 reel, 72 reels, 74 feeder, 76 a feeder controller, 80 control computer, 90, 90a, 90b parts, 92 body, 94,94A, 94b bump, 96 black background, 98,98A, 98b annulus.

Claims (6)

金属曲面部を備えた電子部品の前記金属曲面部に側射光源及び/又は傾斜光源の光を照射し、光の照射された前記金属曲面部を、前記金属曲面部に対向する所定の撮像位置から撮像し、該撮像された画像に基づいて前記金属曲面部に関する情報を得る画像処理方法であって、
前記金属曲面部の3次元CADデータと前記金属曲面部に照射される光の向きとに基づいて、前記金属曲面部で反射した光が前記撮像位置に到達したときに生成する図形の2次元データを作成し、前記図形の2次元データに基づいて前記撮像された画像から得られる前記金属曲面部に関する情報を評価する、
画像処理方法。
The metal curved surface portion of the electronic component provided with the metal curved surface portion is irradiated with the light of the side light source and / or the inclined light source, and the metal curved surface portion irradiated with light is a predetermined imaging position facing the metal curved surface portion An image processing method for obtaining information on the metal curved surface portion based on the captured image,
Two-dimensional data of a figure generated when light reflected by the metal curved surface portion reaches the imaging position based on the three-dimensional CAD data of the metal curved surface portion and the direction of light irradiated to the metal curved surface portion And evaluating information on the metal curved surface portion obtained from the captured image based on two-dimensional data of the graphic,
Image processing method.
前記図形の2次元データに基づいて前記金属曲面部に関する情報の基準データを作成し、前記撮像された画像から得られる前記金属曲面部に関する情報を前記基準データを用いて評価する、
請求項1に記載の画像処理方法。
Reference data of information on the metal curved surface portion is created based on two-dimensional data of the graphic, and information on the metal curved surface portion obtained from the captured image is evaluated using the reference data.
The image processing method according to claim 1.
前記金属曲面部は、バンプであり、
前記図形は、環状帯であり、
前記金属曲面部に関する情報は、前記バンプの外径である、
請求項1又は2に記載の画像処理方法。
The metal curved portion is a bump,
The figure is an annular band,
The information on the metal curved portion is the outer diameter of the bump,
The image processing method according to claim 1.
金属曲面部を備えた電子部品の前記金属曲面部に側射光源及び/又は傾斜光源の光を照射し、光の照射された前記金属曲面部を、前記金属曲面部に対向する所定の撮像位置から撮像し、該撮像された画像に基づいて前記金属曲面部に関する情報を得る画像処理装置であって、
前記金属曲面部の3次元CADデータを記憶する記憶装置と、
前記金属曲面部の3次元CADデータと前記金属曲面部に照射される光の向きとに基づいて、前記金属曲面部で反射した光が前記撮像位置に到達したときに生成する図形の2次元データを作成し、前記図形の2次元データに基づいて前記撮像された画像から得られる前記金属曲面部に関する情報を評価する制御装置と、
を備える画像処理装置。
The metal curved surface portion of the electronic component provided with the metal curved surface portion is irradiated with the light of the side light source and / or the inclined light source, and the metal curved surface portion irradiated with light is a predetermined imaging position facing the metal curved surface portion An image processing apparatus for obtaining information from the curved metal surface portion on the basis of the captured image;
A storage device for storing three-dimensional CAD data of the metal curved surface portion;
Two-dimensional data of a figure generated when light reflected by the metal curved surface portion reaches the imaging position based on the three-dimensional CAD data of the metal curved surface portion and the direction of light irradiated to the metal curved surface portion A controller configured to evaluate information on the metal curved surface portion obtained from the captured image based on two-dimensional data of the figure;
An image processing apparatus comprising:
前記制御装置は、前記図形の2次元データに基づいて前記金属曲面部に関する情報の基準データを作成し、前記撮像された画像から得られる前記金属曲面部に関する情報を前記基準データを用いて評価する、
請求項4に記載の画像処理方法。
The control device creates reference data of information on the metal curved surface portion based on two-dimensional data of the figure, and evaluates information on the metal curved surface portion obtained from the captured image using the reference data ,
The image processing method according to claim 4.
前記金属曲面部は、バンプであり、
前記図形は、環状帯であり、
前記金属曲面部に関する情報は、前記バンプの外径である、
請求項4又は5に記載の画像処理装置。
The metal curved portion is a bump,
The figure is an annular band,
The information on the metal curved portion is the outer diameter of the bump,
The image processing apparatus according to claim 4.
JP2018553585A 2016-11-30 2016-11-30 Image processing method and image processing apparatus for electronic components Active JP6670949B2 (en)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2016/085605 WO2018100692A1 (en) 2016-11-30 2016-11-30 Image processing method and image processing device for electronic part

Publications (2)

Publication Number Publication Date
JPWO2018100692A1 true JPWO2018100692A1 (en) 2019-07-11
JP6670949B2 JP6670949B2 (en) 2020-03-25

Family

ID=62242844

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018553585A Active JP6670949B2 (en) 2016-11-30 2016-11-30 Image processing method and image processing apparatus for electronic components

Country Status (2)

Country Link
JP (1) JP6670949B2 (en)
WO (1) WO2018100692A1 (en)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03269310A (en) * 1990-03-20 1991-11-29 Matsushita Electric Ind Co Ltd Instrument and method for inspecting shape of solder
JP2000121338A (en) * 1998-10-13 2000-04-28 Yamagata Casio Co Ltd Electronic component inspecting device
JP2000294590A (en) * 1999-04-06 2000-10-20 Fujitsu Ltd Bump inspection method and its inspection device
JP2000315896A (en) * 1999-04-30 2000-11-14 Tenryu Technics Co Ltd Surface mounting part-fitting machine
US20040175029A1 (en) * 2003-03-04 2004-09-09 Tong Fang Ball grid array modeling for inspecting surface mounted devices
JP2005173963A (en) * 2003-12-11 2005-06-30 Matsushita Electric Ind Co Ltd Method and device for analyzing electronic component, and electronic component using them
JP2008216140A (en) * 2007-03-06 2008-09-18 Fuji Mach Mfg Co Ltd Transfer material transfer inspection method in electronic component installing device
JP2011075470A (en) * 2009-10-01 2011-04-14 Fujitsu Ltd Image processing program, image processing method, and image processing device
WO2013128503A1 (en) * 2012-03-01 2013-09-06 株式会社 東芝 Defect detection device

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH03269310A (en) * 1990-03-20 1991-11-29 Matsushita Electric Ind Co Ltd Instrument and method for inspecting shape of solder
JP2000121338A (en) * 1998-10-13 2000-04-28 Yamagata Casio Co Ltd Electronic component inspecting device
JP2000294590A (en) * 1999-04-06 2000-10-20 Fujitsu Ltd Bump inspection method and its inspection device
JP2000315896A (en) * 1999-04-30 2000-11-14 Tenryu Technics Co Ltd Surface mounting part-fitting machine
US20040175029A1 (en) * 2003-03-04 2004-09-09 Tong Fang Ball grid array modeling for inspecting surface mounted devices
JP2005173963A (en) * 2003-12-11 2005-06-30 Matsushita Electric Ind Co Ltd Method and device for analyzing electronic component, and electronic component using them
JP2008216140A (en) * 2007-03-06 2008-09-18 Fuji Mach Mfg Co Ltd Transfer material transfer inspection method in electronic component installing device
JP2011075470A (en) * 2009-10-01 2011-04-14 Fujitsu Ltd Image processing program, image processing method, and image processing device
WO2013128503A1 (en) * 2012-03-01 2013-09-06 株式会社 東芝 Defect detection device

Also Published As

Publication number Publication date
JP6670949B2 (en) 2020-03-25
WO2018100692A1 (en) 2018-06-07

Similar Documents

Publication Publication Date Title
JP6231791B2 (en) Mounting device
CN108029243B (en) Mounting device, shooting processing method and shooting unit
JP2023118927A (en) Substrate handling work system
JP6059973B2 (en) Surface mounter and component supply device
JP2017139388A (en) Mounting apparatus
JP6837161B2 (en) Imaging unit and component mounting machine
JP6475165B2 (en) Mounting device
EP3407696A1 (en) Mounting apparatus and image processing method
JP6859356B2 (en) Lighting condition identification device and lighting condition identification method
CN110651538B (en) Working machine and calculation method
JPWO2018100692A1 (en) Image processing method for electronic parts and image processing apparatus
JPWO2016143059A1 (en) Mounting apparatus, imaging processing method, and imaging unit
JPWO2018100706A1 (en) Work machine
JP6482165B2 (en) Recognition device and recognition method
JP7271738B2 (en) Imaging unit
WO2024004074A1 (en) Mounting machine
CN114287176B (en) Working machine
US11924976B2 (en) Work machine
JP2021136332A (en) Imaging apparatus and component mounting machine
JP6789603B2 (en) Mounting device
JP2021144979A (en) Lighting device and component mounting device
WO2019176024A1 (en) Image-capturing unit and component-mounting device
JP6190172B2 (en) Component mounting device
JPH07193398A (en) Automatic assembly/mounting device and its method
JPWO2020065698A1 (en) Production optimization system for component data, component data creation system, component mounting machine and component mounting line

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20190327

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200204

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200302

R150 Certificate of patent or registration of utility model

Ref document number: 6670949

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250