JP2005109288A - Electronic component mounter - Google Patents

Electronic component mounter Download PDF

Info

Publication number
JP2005109288A
JP2005109288A JP2003342727A JP2003342727A JP2005109288A JP 2005109288 A JP2005109288 A JP 2005109288A JP 2003342727 A JP2003342727 A JP 2003342727A JP 2003342727 A JP2003342727 A JP 2003342727A JP 2005109288 A JP2005109288 A JP 2005109288A
Authority
JP
Japan
Prior art keywords
suction nozzle
color
electronic component
colored
type
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003342727A
Other languages
Japanese (ja)
Other versions
JP4309221B2 (en
Inventor
Masaru Saito
勝 斉藤
Hiroshi Anzai
洋 安西
Naoyuki Hachiman
直幸 八幡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Juki Corp
Original Assignee
Juki Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Juki Corp filed Critical Juki Corp
Priority to JP2003342727A priority Critical patent/JP4309221B2/en
Publication of JP2005109288A publication Critical patent/JP2005109288A/en
Application granted granted Critical
Publication of JP4309221B2 publication Critical patent/JP4309221B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To recognize the type of a suction nozzle mounted on a mounting head or its mounting state through a simple arrangement using a simple recognition algorithm. <P>SOLUTION: Specified surface 8' of a nozzle 8 for sucking an electronic component is colored and color information is imparted to the suction nozzle. A recognition camera picks up the color image at the colored part of the suction nozzle from a lower part and a recognition unit recognizes the color at the colored part on the basis of its color image and then recognizes the type of the suction nozzle from the color information prestored for each type of the suction nozzle. With such an arrangement, the suction nozzle can be colored variously and since the type of the suction nozzle can be recognized on the basis of its color information, a variety of suction nozzles can be recognized inexpensively through a simple system. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は、電子部品実装装置、更に詳細には、電子部品をプリント基板または液晶やディスプレイパネル基板などに自動的に実装する電子部品実装装置に関するものである。   The present invention relates to an electronic component mounting apparatus, and more particularly to an electronic component mounting apparatus that automatically mounts an electronic component on a printed circuit board, a liquid crystal display panel, a display panel substrate, or the like.

従来より、前後左右に移動することができる搭載ヘッドに、上下方向に駆動できるZ軸を備えて、この搭載ヘッドにより電子部品をプリント基板に自動で搭載する電子部品実装装置がある。そして、この搭載ヘッドが持つZ軸下部には、電子部品を吸着させるために各電子部品の種類やサイズに対応する吸着ノズルが装着される。吸着ノズルには様々な種類があり、電子部品を吸着ノズルで吸着して移動させる際、その電子部品に適した吸着ノズルが搭載ヘッドに装着される。適していない吸着ノズルが装着されていると、良好な電子部品の吸着が保証されなくなり、電子部品をプリント基板上の所定位置に正確に搭載する搭載精度に悪影響を及ぼす可能性がでてくる。   2. Description of the Related Art Conventionally, there is an electronic component mounting apparatus in which a mounting head that can be moved back and forth and left and right is provided with a Z-axis that can be driven in the vertical direction, and an electronic component is automatically mounted on a printed board by this mounting head. A suction nozzle corresponding to the type and size of each electronic component is attached to the lower part of the Z axis of the mounting head in order to suck the electronic component. There are various types of suction nozzles, and when an electronic component is picked up and moved by the suction nozzle, a suction nozzle suitable for the electronic component is mounted on the mounting head. If an unsuitable suction nozzle is mounted, good electronic component suction cannot be guaranteed, and the mounting accuracy for accurately mounting the electronic component at a predetermined position on the printed circuit board may be adversely affected.

このため、プリント基板の生産動作開始前に、これから使用する生産プログラムに書きこまれている数種類の吸着ノズルがノズル交換機(吸着ノズルを収納するもの)の所定の位置にセットされ、生産前に検査を実施することにより、生産中の吸着や搭載ミスを減少させている。   For this reason, before starting the production operation of the printed circuit board, several types of suction nozzles written in the production program to be used are set at predetermined positions on the nozzle changer (which stores the suction nozzles) and inspected before production. By doing so, adsorption and mounting errors during production are reduced.

例えば、特許文献1では、ノズルの自動交換を行なうため、ノズル毎に異なる形状や個数のマークを形成し、マークの形状や個数を認識することでノズル種類の識別を行ない最適なノズルを搭載ヘッドに装着している。
特開2002−280798号公報(図1)
For example, in Patent Document 1, in order to automatically replace nozzles, different shapes and numbers of marks are formed for each nozzle, and the nozzle type is identified by recognizing the shape and number of the marks. It is attached to.
JP 2002-280798 A (FIG. 1)

しかしながら、特許文献1に示すような方式では、吸着ノズルの種類を認識するために、ノズル本体に、ノズルを識別できる固有のマークを形成し、その形状や数によりノズルの識別を行なっている。このため、ノズル種が増大するに連れてマーク形状の変更や配置が煩雑となり、製造コストを増大させてしまうという問題や、ノズル種を識別するための認識プログラムが複雑化するという問題があった。   However, in the method shown in Patent Document 1, in order to recognize the type of the suction nozzle, a unique mark that can identify the nozzle is formed on the nozzle body, and the nozzle is identified by its shape and number. For this reason, as the number of nozzle types increases, the change and arrangement of the mark shape becomes complicated, increasing the manufacturing cost, and the recognition program for identifying the nozzle type becomes complicated. .

従って、本発明は、このような問題点を解決するためになされたもので、簡単な構成でしかも簡単な認識アルゴリズムで、搭載ヘッドに装着された吸着ノズルの種類あるいはその装着状態を認識することが可能な電子部品実装装置を提供することを課題とする。   Accordingly, the present invention has been made to solve such problems, and recognizes the type of the suction nozzle mounted on the mounting head or the mounting state thereof with a simple configuration and a simple recognition algorithm. It is an object of the present invention to provide an electronic component mounting apparatus capable of performing the above.

本発明(請求項1)は、
吸着ノズルにより吸着された電子部品を回路基板に実装する電子部品実装装置において、
吸着ノズルの種類ごとに異なる色で着色された吸着ノズルと、
着色された部分をカラー撮像する撮像手段と、
吸着ノズルの種類ごとに付与された色情報を吸着ノズルの種類に対応させて記憶する記憶装置と、
前記着色された部分のカラー画像から着色された部分の色を識別し、記憶されている色情報から吸着ノズルの種類を認識する認識手段と、
を備えたことを特徴とする。
The present invention (Claim 1)
In an electronic component mounting apparatus for mounting an electronic component sucked by a suction nozzle on a circuit board,
A suction nozzle colored in a different color for each type of suction nozzle;
An imaging means for color-imaging the colored portion;
A storage device that stores color information assigned to each type of suction nozzle in correspondence with the type of suction nozzle;
Recognizing means for recognizing the color of the colored portion from the color image of the colored portion and recognizing the type of the suction nozzle from the stored color information;
It is provided with.

また、本発明(請求項3)は、
吸着ノズルにより吸着された電子部品を回路基板に実装する電子部品実装装置において、
一部が所定の色でこの部分と隣接する部分が前記所定の色と異なる色で着色された吸着ノズルと、
吸着ノズルの着色された部分をカラー撮像する撮像手段と、
前記着色されたカラー画像から色の異なる部分の境界線を識別し、識別された境界線に基づき吸着ノズルの装着状態を認識する認識手段と、
を備えたことを特徴とする。
The present invention (Claim 3)
In an electronic component mounting apparatus for mounting an electronic component sucked by a suction nozzle on a circuit board,
A suction nozzle in which a part is a predetermined color and a part adjacent to this part is colored with a color different from the predetermined color;
Imaging means for color imaging the colored portion of the suction nozzle;
Recognizing means for recognizing boundary lines of different colors from the colored color image and recognizing the mounting state of the suction nozzle based on the identified boundary lines;
It is provided with.

また、本発明(請求項4)は、
吸着ノズルにより吸着された電子部品を回路基板に実装する電子部品実装装置において、
吸着ノズルの種類ごとに異なる色で着色された吸着ノズルと、
着色された部分に異なる色の照明光を順次切り替えて照射する照明手段と、
着色された部分からの反射光を受光する受光器と、
吸着ノズルの種類ごとに付与された色情報を吸着ノズルの種類に対応させて記憶する記憶装置と、
前記受光器の信号に基づき着色された部分の色を識別し、記憶されている色情報から吸着ノズルの種類を認識する認識手段と、
を備えたことを特徴とする。
The present invention (Claim 4)
In an electronic component mounting apparatus for mounting an electronic component sucked by a suction nozzle on a circuit board,
A suction nozzle colored in a different color for each type of suction nozzle;
Illumination means for sequentially switching and illuminating different colored illumination lights on the colored part;
A receiver that receives the reflected light from the colored portion;
A storage device that stores color information assigned to each type of suction nozzle in correspondence with the type of suction nozzle;
Recognizing means for recognizing the color of the colored portion based on the signal of the light receiver and recognizing the type of the suction nozzle from the stored color information;
It is provided with.

本発明によれば、吸着ノズルに多種の色情報を付すことができ、この色情報が簡単な構成で、しかも簡単なシステムで認識できるため、吸着ノズルの種類や、その装着状態を認識する認識プログラムの作成が容易となり、装置製造コストを低減でき、また、認識時間を短縮して、基板生産効率を向上させることができる。   According to the present invention, since various kinds of color information can be attached to the suction nozzle, and this color information can be recognized by a simple system with a simple system, the recognition of the kind of the suction nozzle and its mounting state is recognized. The creation of a program is facilitated, the device manufacturing cost can be reduced, the recognition time can be shortened, and the board production efficiency can be improved.

また、本発明では、吸着ノズルの装着状態、特に吸着ノズルのノズル軸を中心とする取り付け回転角度(装着角度)を簡単に認識することができるので、ノズル交換機にてノズルの交換を行ったとき、その装着角度を調整でき、吸着ミスや搭載ミスを低減させて高い信頼性で部品搭載を行うことができる。また、ノズル交換機への格納時にノズル角度を調整する必要がある場合にも、スムーズな格納が可能であり、ノズルやノズル交換機の損傷を防ぐことができる。   Further, in the present invention, the mounting state of the suction nozzle, in particular, the mounting rotation angle (mounting angle) around the nozzle axis of the suction nozzle can be easily recognized, so when the nozzle is replaced by the nozzle changer The mounting angle can be adjusted, and the component mounting can be performed with high reliability by reducing the suction error and the mounting error. Further, even when it is necessary to adjust the nozzle angle during storage in the nozzle changer, smooth storage is possible, and damage to the nozzle and the nozzle changer can be prevented.

本発明は、吸着ノズルに色情報を付し、これを認識装置で認識して吸着ノズルの種類や、その装着状態を認識するもので、以下図面に示す実施例に基づき本発明を詳細に説明する。   The present invention attaches color information to the suction nozzle and recognizes it with a recognition device to recognize the type and mounting state of the suction nozzle. The present invention will be described in detail based on the embodiments shown in the drawings below. To do.

図1は、本発明の1実施例を示す電子部品実装装置の構成図である。符号1で示すものは、搭載ヘッドであり、後述のようにそれぞれ電子部品(以下、部品と略す)を吸着保持する複数の吸着ノズルを備えている。搭載ヘッド1は、X軸方向に移動できるようにX軸ガントリ2に取付けられており、X軸ガントリ2は、Y軸方向に移動できるように、Y軸ガントリ3に取付けられている。また、回路基板(以下、基板と略す)5に実装する部品を供給する電子部品供給装置4が電子部品実装装置の前面に配置されている。さらに、電子部品の吸着位置ずれ(吸着ノズルの中心位置と吸着した部品の中心位置との位置ずれ)と吸着角度ずれ(傾き)を検出するために、部品を撮像するカラーCCDからなる認識カメラ(撮像手段)6が、電子部品供給装置4と基板5間に配置される。この認識カメラ6は、さらに吸着ノズルに付された色を識別するために、吸着ノズルを下方部からカラー撮像する。また、吸着する部品のサイズや形状に応じて、搭載ヘッド1の吸着ノズルを交換するためのノズル交換機7が装置本体に設けられており、このノズル交換機7内には複数種のノズルが保管、管理されている。   FIG. 1 is a block diagram of an electronic component mounting apparatus showing an embodiment of the present invention. Reference numeral 1 denotes a mounting head, which includes a plurality of suction nozzles for sucking and holding electronic components (hereinafter abbreviated as components) as will be described later. The mounting head 1 is attached to the X-axis gantry 2 so as to be movable in the X-axis direction, and the X-axis gantry 2 is attached to the Y-axis gantry 3 so as to be movable in the Y-axis direction. An electronic component supply device 4 that supplies components to be mounted on a circuit board (hereinafter abbreviated as a substrate) 5 is disposed on the front surface of the electronic component mounting apparatus. Further, in order to detect a suction position shift (position shift between the center position of the suction nozzle and the center position of the sucked part) and a suction angle shift (tilt) of the electronic component, a recognition camera (including a color CCD that images the part) An imaging unit 6 is disposed between the electronic component supply device 4 and the substrate 5. The recognition camera 6 performs color imaging of the suction nozzle from the lower part in order to further identify the color assigned to the suction nozzle. Further, a nozzle changer 7 for replacing the suction nozzle of the mounting head 1 is provided in the apparatus main body according to the size and shape of the part to be sucked, and a plurality of types of nozzles are stored in the nozzle changer 7. It is managed.

図2は搭載ヘッド1の構造を詳細に示している。搭載ヘッド1は、その基台1aが図1のX軸ガントリ2に取り付けられX軸駆動機構によりX軸方向に移動可能となっている。搭載ヘッド1は、部品を真空吸着する吸着ノズル8を複数備え、夫々の吸着ノズルのノズル軸(吸着軸)を中心に吸着ノズルを回転させるθ軸回転機構9と、吸着ノズルを上下方向に駆動するZ軸駆動機構10が基台1aに取り付けられている。各吸着ノズル8のθ軸回転機構9とZ軸駆動機構10は、互いに独立しており他のノズルの動作に関係なく、回転または昇降動作が可能となっている。   FIG. 2 shows the structure of the mounting head 1 in detail. The mounting head 1 has a base 1a attached to the X-axis gantry 2 of FIG. 1 and is movable in the X-axis direction by an X-axis drive mechanism. The mounting head 1 includes a plurality of suction nozzles 8 that vacuum-suck the components, and a θ-axis rotating mechanism 9 that rotates the suction nozzle around the nozzle axis (suction axis) of each suction nozzle, and the suction nozzle is driven in the vertical direction. A Z-axis drive mechanism 10 is attached to the base 1a. The θ-axis rotation mechanism 9 and the Z-axis drive mechanism 10 of each suction nozzle 8 are independent of each other and can rotate or move up and down regardless of the operation of other nozzles.

ノズル交換機7内に収納されている吸着ノズル8は、図4(a)、(b)に示すように、その円錐柱部8’の周面全体が、認識カメラ6が感度を有する色で着色されたり、あるいは図5(a)、(b)に示すように、円錐柱部8’の周面が3つの面8a、8b、8cに分割され、各面が、認識カメラ6の感度を有する色、例えば面8aは赤色で、面8bは緑色で、面8cは青色でそれぞれ着色されている。   As shown in FIGS. 4A and 4B, the suction nozzle 8 housed in the nozzle changer 7 is colored with a color that the recognition camera 6 has sensitivity to the entire peripheral surface of the conical column portion 8 ′. 5 or, as shown in FIGS. 5A and 5B, the circumferential surface of the conical column portion 8 ′ is divided into three surfaces 8a, 8b, and 8c, and each surface has the sensitivity of the recognition camera 6. The color, for example, the surface 8a is red, the surface 8b is green, and the surface 8c is blue.

図3は電子部品実装装置の制御系の構成を示している。20は、装置全体を制御するマイクロコンピュータ(CPU)、並びにRAM、ROMなどからなるコントローラ(制御手段)であり、これに以下の21〜32の構成が接続され、それぞれを制御している。   FIG. 3 shows the configuration of the control system of the electronic component mounting apparatus. Reference numeral 20 denotes a microcomputer (CPU) that controls the entire apparatus, and a controller (control means) including a RAM, a ROM, and the like. The following configurations 21 to 32 are connected to the controller, and each is controlled.

X軸モータ21は、搭載ヘッド1のX軸駆動機構(不図示)の駆動源で、搭載ヘッド1をX軸ガントリ2に沿ってX軸方向に移動させ、また、Y軸モータ22は、搭載ヘッド1のY軸駆動機構(不図示)の駆動源で、X軸ガントリ2をY軸ガントリ3に沿ってY軸方向に駆動し、それにより搭載ヘッド1はX軸方向とY軸方向に移動可能となる。   The X-axis motor 21 is a drive source of an X-axis drive mechanism (not shown) of the mounting head 1 and moves the mounting head 1 along the X-axis gantry 2 in the X-axis direction, and the Y-axis motor 22 is mounted The drive source of the Y-axis drive mechanism (not shown) of the head 1 drives the X-axis gantry 2 along the Y-axis gantry 3 in the Y-axis direction, so that the mounting head 1 moves in the X-axis direction and the Y-axis direction. It becomes possible.

Z軸モータ23は、吸着ノズル8を昇降させるZ軸駆動機構10の駆動源で、吸着ノズル8をZ軸方向(高さ方向)に昇降させる。また、θ軸モータ24は、吸着ノズル8のθ軸回転機構9の駆動源で、吸着ノズル8をそのノズル中心軸(吸着軸)を中心にして回転させる。なお、図3では、Z軸モータ23とθ軸モータ24は、1個しか図示されていないが、装着される吸着ノズルの数(図2の例では4個)だけ設けられる。   The Z-axis motor 23 is a drive source for the Z-axis drive mechanism 10 that moves the suction nozzle 8 up and down, and moves the suction nozzle 8 up and down in the Z-axis direction (height direction). The θ-axis motor 24 is a drive source for the θ-axis rotation mechanism 9 of the suction nozzle 8 and rotates the suction nozzle 8 around the nozzle center axis (suction axis). In FIG. 3, only one Z-axis motor 23 and θ-axis motor 24 are shown, but the number of suction nozzles to be mounted (four in the example of FIG. 2) is provided.

バキューム機構32は真空を発生し、不図示のバキュームスイッチを介して各吸着ノズル8に真空の負圧を発生させる。   The vacuum mechanism 32 generates a vacuum, and a vacuum negative pressure is generated at each suction nozzle 8 via a vacuum switch (not shown).

認識装置(認識手段)27は、吸着ノズル8のそれぞれに吸着された部品12の画像認識を行うもので、A/D変換器27a、メモリ27b及びCPU27cから構成される。そして、吸着された部品12を撮像した認識カメラ6から出力されるアナログの画像信号をA/D変換器27aによりデジタル信号に変換してメモリ27bに格納し、CPU27cがその画像データに基づいて吸着された部品12の吸着位置ずれ量と吸着角度ずれ量を算出する。また、認識装置27は、認識カメラ6で撮像された吸着ノズルの着色部分8’の下方部からのカラー画像を取り込んで、吸着ノズル8の種類やその装着状態を認識する。   The recognition device (recognition means) 27 performs image recognition of the component 12 sucked by each of the suction nozzles 8 and includes an A / D converter 27a, a memory 27b, and a CPU 27c. Then, an analog image signal output from the recognition camera 6 that images the picked-up component 12 is converted into a digital signal by the A / D converter 27a and stored in the memory 27b, and the CPU 27c picks up the image based on the image data. A suction position deviation amount and a suction angle deviation amount of the component 12 thus calculated are calculated. Further, the recognition device 27 captures a color image from the lower part of the colored portion 8 ′ of the suction nozzle imaged by the recognition camera 6 and recognizes the type of the suction nozzle 8 and its mounting state.

キーボード28とマウス29は部品データなどのデータを入力するために用いられる。また、記憶装置30は、フラッシュメモリなどで構成され、キーボード28とマウス29により入力された部品データ、あるいは不図示のホストコンピュータから供給される部品データを格納するのに用いられる。また、記憶装置30には、吸着ノズルの種類ごとに異なる色で着色された部分が何色であるかの色情報が吸着ノズルの種類に対応させて記憶されている。   The keyboard 28 and mouse 29 are used for inputting data such as component data. The storage device 30 is composed of a flash memory or the like, and is used to store component data input by the keyboard 28 and the mouse 29 or component data supplied from a host computer (not shown). Further, the storage device 30 stores color information indicating the color of the portion colored in a different color for each type of suction nozzle in association with the type of suction nozzle.

モニタ(表示装置)31は、部品データ、演算データ、及び認識カメラ6で撮像した部品12の画像などを表示する。   The monitor (display device) 31 displays component data, calculation data, an image of the component 12 captured by the recognition camera 6, and the like.

なお、図3は、制御系の構成を示す図なので、各要素の配置は必ずしも、実際のものとは一致しておらず、例えば、吸着ノズル8は一つしか図示されていない。   3 is a diagram showing the configuration of the control system, the arrangement of each element does not necessarily match the actual one. For example, only one suction nozzle 8 is shown.

次に、以上の構成において部品の吸着から画像認識を行なって基板に搭載するまでの動作について説明する。以下の動作はコントローラ20の制御の元に行われる。   Next, the operation from the component suction to the image recognition and mounting on the board in the above configuration will be described. The following operations are performed under the control of the controller 20.

まず、X軸モータ21とY軸モータ22を駆動することにより、搭載ヘッド1を電子部品供給装置4の上方に移動させ、続いて、一つあるいは複数の吸着ノズル8をZ軸モータ23を駆動することにより下降させる。また、バキューム機構32により真空を発生させて、電子部品供給装置4にある部品を、吸着ノズル8により吸着保持する。この時、部品の吸着は電子部品供給装置4からの供給状況によって複数ノズルにより同時に、若しくは順次に行われる。   First, by driving the X-axis motor 21 and the Y-axis motor 22, the mounting head 1 is moved above the electronic component supply device 4, and then one or a plurality of suction nozzles 8 are driven to the Z-axis motor 23. To lower. Further, a vacuum is generated by the vacuum mechanism 32, and the components in the electronic component supply device 4 are sucked and held by the suction nozzle 8. At this time, the suction of the components is performed simultaneously or sequentially by a plurality of nozzles depending on the supply status from the electronic component supply device 4.

部品吸着が完了すると、搭載ヘッド1が認識カメラ6の上方へと移動し、各複数ノズルにより吸着された部品が撮像され、その画像信号が認識装置27に送信される。認識装置27は、その画像をメモリ27bに取り込んで、公知のアルゴリズムで部品の画像認識を行い、部品の吸着位置ずれ(吸着ノズルの中心位置と吸着した部品の中心位置との位置ずれ)と吸着角度ずれ(傾き)を算出し、そのデータが記憶装置30、コントローラ20のRAMなどに記憶される。   When the component suction is completed, the mounting head 1 moves above the recognition camera 6, the component sucked by each of the plurality of nozzles is imaged, and the image signal is transmitted to the recognition device 27. The recognizing device 27 captures the image in the memory 27b, recognizes the image of the component by a known algorithm, the component suction position shift (position shift between the center position of the suction nozzle and the center position of the sucked component) and the suction. The angular deviation (tilt) is calculated, and the data is stored in the storage device 30, the RAM of the controller 20, or the like.

搭載ヘッド1が基板位置に移動すると、各吸着ノズル8で吸着された部品の基板への搭載が行われる。吸着ノズルで吸着された部品は、その搭載位置に到達したら、その吸着ノズルで吸着した部品について算出しておいた吸着位置ずれ並びに角度ずれを、X軸モータ21、Y軸モータ22、θ軸モータ24を微小駆動することにより、それぞれ補正し、その後、吸着ノズルを下降させ、そのバキュームスイッチを切り、負圧を解除して部品を基板上に搭載した後、吸着ノズルを上昇させる。同様に、他の吸着ノズルで吸着された部品が、それぞれ位置ずれ、角度ずれを補正して基板上の所定位置に搭載される。   When the mounting head 1 moves to the substrate position, the components sucked by the suction nozzles 8 are mounted on the substrate. When the component sucked by the suction nozzle reaches the mounting position, the X-axis motor 21, the Y-axis motor 22, and the θ-axis motor are used to calculate the suction position shift and the angle shift calculated for the component sucked by the suction nozzle. Each of the corrections is performed by micro-driving 24, and then the suction nozzle is lowered, the vacuum switch is turned off, the negative pressure is released and the component is mounted on the substrate, and then the suction nozzle is raised. Similarly, the components sucked by other suction nozzles are mounted at predetermined positions on the substrate by correcting the positional deviation and the angular deviation, respectively.

このような部品搭載時に、搭載部品のサイズや形状が変更される場合には、X軸モータ21、Y軸モータ22を駆動して搭載ヘッド1をノズル交換機7まで移動し、当該部品に最適な吸着ノズルを選択しその吸着ノズルへの交換が行われる。最適な吸着ノズルへの交換が行われると、搭載ヘッド1が認識カメラ6へ移動され、吸着ノズル8の着色された部分8’が下方からカラーで撮像される。   When the size or shape of the mounted component is changed at the time of mounting such a component, the X-axis motor 21 and the Y-axis motor 22 are driven to move the mounting head 1 to the nozzle changer 7 and the optimum for the component. The suction nozzle is selected and replaced with the suction nozzle. When replacement with the optimum suction nozzle is performed, the mounting head 1 is moved to the recognition camera 6, and the colored portion 8 'of the suction nozzle 8 is imaged in color from below.

撮像された吸着ノズルの着色部分のカラー画像は、認識装置27に入力され、デジタル画像に変換された後メモリ27bに格納される。認識装置27のCPU27cは、メモリ27bに格納された画像から、認識カメラ6のカラーCCD(原色系のCCD)のピクセルごとのR(赤色)信号値の総和、G(緑色)信号値の総和、B(青色)信号値の総和を比較することにより、着色部分が何色で着色されているかを識別する。例えば、R信号値の総和が所定のしきい値以上で、他の信号値の総和がほぼ0であると、図4の吸着ノズル8の円錐柱部の周面8’が赤色で着色さていると識別し、G信号値の総和が所定のしきい値以上で、他の信号値の総和がほぼ0であると、緑色に、またB信号値の総和が所定のしきい値以上で他の信号値の総和がほぼ0であると、青色に着色されていると識別する。また、RGBの各信号値の総和がどのような比率になっているかで、中間色も識別することができる。   The imaged color image of the colored portion of the suction nozzle is input to the recognition device 27, converted into a digital image, and stored in the memory 27b. The CPU 27c of the recognition device 27 calculates the sum of R (red) signal values and the sum of G (green) signal values for each pixel of the color CCD (primary color CCD) of the recognition camera 6 from the image stored in the memory 27b. By comparing the sum of the B (blue) signal values, the color of the colored portion is identified. For example, when the sum of the R signal values is equal to or greater than a predetermined threshold and the sum of the other signal values is substantially 0, the peripheral surface 8 ′ of the conical column portion of the suction nozzle 8 of FIG. 4 is colored in red. When the sum of the G signal values is equal to or greater than a predetermined threshold and the sum of the other signal values is almost 0, the signal is green, and the sum of the B signal values is equal to or greater than the predetermined threshold. If the sum of the signal values is almost zero, it is identified as colored blue. Also, intermediate colors can be identified based on the ratio of the sum of the RGB signal values.

記憶装置30には、吸着ノズルの種類に応じて付与された着色部分の色情報が吸着ノズルの種類に対応させてデータベース化されて記憶されているので、認識装置27は、識別された色に対応する吸着ノズルの種類を取得することにより吸着ノズルの種類を認識する。   Since the storage device 30 stores the color information of the colored portion assigned according to the type of the suction nozzle in a database corresponding to the type of the suction nozzle, the recognition device 27 sets the identified color to the identified color. The type of the suction nozzle is recognized by acquiring the type of the corresponding suction nozzle.

なお、色の識別を向上させるために、適当な方法で着色部分8’以外の部分の画像をマスキングし、S/N比を高めるようにするのが好ましい。   In order to improve color identification, it is preferable to mask the image of the portion other than the colored portion 8 'by an appropriate method so as to increase the S / N ratio.

また、上記RGBの信号値の総和は、着色部分の画像をメモリ27bに格納してから求めるのではなく、認識カメラ6から認識装置27に画像を取り込むときに、リアルタイムに求めるようにしてもよい。   The sum of the RGB signal values may be obtained in real time when the image of the colored portion is not stored after being stored in the memory 27b but when the image is captured from the recognition camera 6 to the recognition device 27. .

また、認識した吸着ノズルの種類が、これから搭載される部品に適した吸着ノズルである場合には、上記のように、部品吸着を開始し、また、適した吸着ノズルでない場合には、再び、搭載ヘッド1をノズル交換機7に移動させて、適した吸着ノズルに交換し、上記と同様な吸着ノズルの認識を行って、その適否を再検査する。   If the recognized suction nozzle type is a suction nozzle suitable for a component to be mounted, the component suction is started as described above. If the suction nozzle is not a suitable suction nozzle, again, The mounting head 1 is moved to the nozzle changer 7 and replaced with a suitable suction nozzle. The suction nozzle is recognized in the same manner as described above, and its suitability is reinspected.

また、図5(a)、(b)に示したように、吸着ノズル8が単色ではなく、複数色(赤、緑、青)で着色されている場合には、搭載ヘッドにおける吸着ノズルの装着状態、特に、吸着ノズルのノズル軸を中心とする取り付け回転角度(装着角度)を認識することができる。すなわち、RGBの信号値が顕著に変化するピクセル位置を取得することにより、異なる色の領域8a、8b、8cの境界線8d、8e、8fのピクセル位置を求めることができるので、その境界線の傾きを求めることができる。従って、これを基準角度と比較することにより、吸着ノズルの基準角度に対する装着角度を求めることができる。   Further, as shown in FIGS. 5A and 5B, when the suction nozzle 8 is colored in a plurality of colors (red, green, blue) instead of a single color, the suction nozzle is mounted on the mounting head. The state, in particular, the attachment rotation angle (mounting angle) around the nozzle axis of the suction nozzle can be recognized. That is, by obtaining the pixel positions where the RGB signal values change significantly, the pixel positions of the boundary lines 8d, 8e, 8f of the different color regions 8a, 8b, 8c can be obtained. The inclination can be obtained. Therefore, the mounting angle with respect to the reference angle of the suction nozzle can be obtained by comparing this with the reference angle.

吸着ノズルの装着角度が演算できる場合には、電子部品供給装置4で部品を吸着する際、θ軸モータ24を駆動して吸着ノズル8の装着角度を補正し、吸着ノズルを部品吸着に最適なθ角度に調整を行なった上で、部品の吸着を行なう。更に、部品種の変更などによりノズル交換が必要となった際には、上記で得た装着角度を元に、θ軸モータ24を駆動し、吸着ノズル8をノズル交換機7への格納に適した角度に調整した上で、吸着ノズルの格納、交換を実施する。   If the mounting angle of the suction nozzle can be calculated, when the electronic component supply device 4 sucks the component, the θ-axis motor 24 is driven to correct the mounting angle of the suction nozzle 8 and the suction nozzle is optimal for component suction. After adjusting the θ angle, the components are sucked. Furthermore, when it is necessary to replace the nozzle due to a change in the part type, etc., the θ-axis motor 24 is driven based on the mounting angle obtained above, and the suction nozzle 8 is suitable for storing in the nozzle exchanger 7. The suction nozzle is stored and replaced after adjusting the angle.

なお、搭載ヘッド1には、図2に示すように、複数のノズルが装着されているので、搭載ヘッド1を認識カメラ6上で移動させることにより、各吸着ノズルを順次撮像して、他の吸着ノズルに関しても、同様に吸着ノズルの種類を認識するようにする。   Since the mounting head 1 is equipped with a plurality of nozzles as shown in FIG. 2, each suction nozzle is sequentially imaged by moving the mounting head 1 on the recognition camera 6. Similarly, the type of the suction nozzle is recognized with respect to the suction nozzle.

図6は、吸着ノズルに付された色情報を検出する他の実施例を示す図である。この実施例では、吸着ノズルを認識カメラ6で撮像する代わりに、図6に示すように、吸着ノズル8の側方で、搭載ヘッド1上に搭載された検出装置11により吸着ノズルを認識する。検出装置11は、照明手段13と、受光器14からなり、照明手段13は、赤色(R)の照明光を発生する光源13a、緑色(G)の照明光を発生する光源13b、青色(B)の照明光を発生する光源13cを有し、図7に示すように、コントローラ20により制御される光源点灯回路25により光源13a、13b、13cが順次所定時間だけ点灯され、RGB三色の照明光が時間差を持たせて発生される。各色の照明光は、吸着ノズル8の着色された部分8’に照射され、着色された部分8’からの反射光が受光器14で受光され、その信号値が認識装置27に入力される。   FIG. 6 is a diagram showing another embodiment for detecting the color information attached to the suction nozzle. In this embodiment, instead of imaging the suction nozzle with the recognition camera 6, the suction nozzle is recognized by the detection device 11 mounted on the mounting head 1 on the side of the suction nozzle 8, as shown in FIG. The detection device 11 includes an illumination unit 13 and a light receiver 14. The illumination unit 13 includes a light source 13a that generates red (R) illumination light, a light source 13b that generates green (G) illumination light, and a blue (B ), And the light sources 13a, 13b and 13c are sequentially turned on for a predetermined time by the light source lighting circuit 25 controlled by the controller 20, as shown in FIG. Light is generated with a time difference. The illumination light of each color is applied to the colored portion 8 ′ of the suction nozzle 8, the reflected light from the colored portion 8 ′ is received by the light receiver 14, and the signal value is input to the recognition device 27.

また、搭載ヘッドの複数の吸着ノズルを認識するために、検出装置11は、図7に示したように、検出装置駆動機構(不図示)の駆動モータ26により吸着ノズル8の並び方向に移動される。   Further, in order to recognize a plurality of suction nozzles of the mounting head, the detection device 11 is moved in the direction in which the suction nozzles 8 are arranged by a drive motor 26 of a detection device drive mechanism (not shown) as shown in FIG. The

その他の構成は、実施例1と同様である。   Other configurations are the same as those of the first embodiment.

このような構成において、吸着ノズル8が搭載ヘッドに装着されたら、駆動モータ26を駆動して検出装置11を吸着ノズル8に移動させ、光源点灯回路25により光源13a、13b、13cを順次所定時間点灯する。それにより、図8に示したように、赤色(R)、緑色(G)、青色(B)の照明光が順次発生され、吸着ノズル8の着色部分8’に照射される。受光器14のスペクトル感度が、赤、緑、青の領域で同じであると仮定して、例えば、吸着ノズルの着色部分が緑色に着色されている場合には、光源13bを点灯して緑色の照明光を照射したときに最も反射光量が多くなり、受光器14は、大きな出力値を認識装置27に送信する。従って、認識装置27は、吸着ノズルが、光源13bの照明光と同色の緑色に着色されていることを識別する。この色情報を元に記憶装置30に格納されているデータベースにアクセスして、その緑色の色情報に係る吸着ノズルの種類を取得して、吸着ノズルの種類を認識する。   In such a configuration, when the suction nozzle 8 is mounted on the mounting head, the drive motor 26 is driven to move the detection device 11 to the suction nozzle 8, and the light source lighting circuit 25 sequentially turns the light sources 13 a, 13 b, and 13 c to a predetermined time. Light. Thereby, as shown in FIG. 8, red (R), green (G), and blue (B) illumination lights are sequentially generated and applied to the colored portion 8 ′ of the suction nozzle 8. Assuming that the spectral sensitivity of the light receiver 14 is the same in the red, green, and blue regions, for example, when the colored portion of the suction nozzle is colored green, the light source 13b is turned on and the green color is changed. When the illumination light is irradiated, the amount of reflected light is the largest, and the light receiver 14 transmits a large output value to the recognition device 27. Therefore, the recognition device 27 identifies that the suction nozzle is colored in the same color as the illumination light of the light source 13b. Based on this color information, a database stored in the storage device 30 is accessed to acquire the type of suction nozzle related to the green color information and recognize the type of suction nozzle.

この実施例の場合も、各光源13a、13b、13cを順次切り替えて点灯させたとき、それぞれ受光器13から得られる信号値を比較することにより、中間色も識別できるので、実施例1と同様に、吸着ノズルが何色で着色されているかを識別でき、データベースとして記憶されている色情報から吸着ノズルの種類を識別することができる。   Also in this embodiment, when the light sources 13a, 13b, and 13c are sequentially switched and turned on, the intermediate values can be identified by comparing the signal values obtained from the light receivers 13, respectively. The color of the suction nozzle can be identified, and the type of the suction nozzle can be identified from the color information stored as a database.

なお、搭載ヘッド1には、図2に示すように、複数のノズルが装着されているので、検出装置11を吸着ノズル8の並びの方向(X軸方向)に移動して、他の吸着ノズルの種類を同様に認識する。   Since the mounting head 1 is equipped with a plurality of nozzles as shown in FIG. 2, the detection device 11 is moved in the direction in which the suction nozzles 8 are arranged (X-axis direction), and other suction nozzles are moved. Recognize the same type.

他の実施例Other examples

認識カメラ6は、図1に示したように、実装装置本体に固定する固定型、搭載ヘッドに搭載される搭載型、若しくはその他の方式があるが、いずれのタイプでも同様な効果が得られる。   As shown in FIG. 1, the recognition camera 6 has a fixed type that is fixed to the mounting apparatus main body, a mounting type that is mounted on a mounting head, or other methods, but the same effect can be obtained with any type.

吸着ノズルの種類、その装着角度の認識は、ノズルの交換前後のみでなく、実動時間や部品の吸着・搭載回数などによって定められる一定間隔毎や、吸着や搭載エラーの発生頻度に応じて行なうようにしてもよい。   The types of suction nozzles and their mounting angles are recognized not only before and after the replacement of the nozzles, but also at regular intervals determined by the actual operation time, the number of suction and mounting of parts, and according to the frequency of suction and mounting errors. You may do it.

本発明の電子部品実装装置の全体の構成を概略示す斜視図である。1 is a perspective view schematically showing an overall configuration of an electronic component mounting apparatus according to the present invention. 搭載ヘッドの詳細な構成を示した斜視図である。It is the perspective view which showed the detailed structure of the mounting head. 電子部品実装装置の制御系の構成を示すブロック図である。It is a block diagram which shows the structure of the control system of an electronic component mounting apparatus. (a)は、周面が単色で着色された吸着ノズルの斜視図、(b)はその底面図である。(A) is a perspective view of a suction nozzle whose peripheral surface is colored with a single color, and (b) is a bottom view thereof. (a)は、周面が複数色で着色された吸着ノズルの斜視図、(b)はその底面図である。(A) is a perspective view of a suction nozzle whose peripheral surface is colored with a plurality of colors, and (b) is a bottom view thereof. 吸着ノズルの色情報を識別する検出装置の構成を示した構成図である。It is the block diagram which showed the structure of the detection apparatus which identifies the color information of a suction nozzle. 実施例2の制御系の構成を示すブロック図である。FIG. 5 is a block diagram illustrating a configuration of a control system according to a second embodiment. 吸着ノズルに付した色情報を識別する方法を示したタイミング図である。It is a timing diagram showing a method for identifying color information attached to the suction nozzle.

符号の説明Explanation of symbols

1 搭載ヘッド
6 認識カメラ
7 ノズル交換機
8 吸着ノズル
8’ 吸着ノズルの着色部分
11 検出装置
12 電子部品
13 照明手段
14 受光器
DESCRIPTION OF SYMBOLS 1 Mount head 6 Recognition camera 7 Nozzle exchange machine 8 Adsorption nozzle 8 'Colored part of adsorption nozzle 11 Detection apparatus 12 Electronic component 13 Illumination means 14 Light receiver

Claims (5)

吸着ノズルにより吸着された電子部品を回路基板に実装する電子部品実装装置において、
吸着ノズルの種類ごとに異なる色で着色された吸着ノズルと、
着色された部分をカラー撮像する撮像手段と、
吸着ノズルの種類ごとに付与された色情報を吸着ノズルの種類に対応させて記憶する記憶装置と、
前記着色された部分のカラー画像から着色された部分の色を識別し、記憶されている色情報から吸着ノズルの種類を認識する認識手段と、
を備えたことを特徴とする電子部品実装装置。
In an electronic component mounting apparatus for mounting an electronic component sucked by a suction nozzle on a circuit board,
A suction nozzle colored in a different color for each type of suction nozzle;
An imaging means for color-imaging the colored portion;
A storage device that stores color information assigned to each type of suction nozzle in correspondence with the type of suction nozzle;
Recognizing means for recognizing the color of the colored portion from the color image of the colored portion and recognizing the type of the suction nozzle from the stored color information;
An electronic component mounting apparatus comprising:
複数の吸着ノズルと撮像手段が相対的に移動されて、各吸着ノズルごとに前記認識が行われることを特徴とする請求項1に記載の電子部品実装装置。   The electronic component mounting apparatus according to claim 1, wherein the recognition is performed for each suction nozzle by relatively moving a plurality of suction nozzles and an imaging unit. 吸着ノズルにより吸着された電子部品を回路基板に実装する電子部品実装装置において、
一部が所定の色でこの部分と隣接する部分が前記所定の色と異なる色で着色された吸着ノズルと、
吸着ノズルの着色された部分をカラー撮像する撮像手段と、
前記着色されたカラー画像から色の異なる部分の境界線を識別し、識別された境界線に基づき吸着ノズルの装着状態を認識する認識手段と、
を備えたことを特徴とする電子部品実装装置。
In an electronic component mounting apparatus for mounting an electronic component sucked by a suction nozzle on a circuit board,
A suction nozzle in which a part is a predetermined color and a part adjacent to this part is colored with a color different from the predetermined color;
Imaging means for color imaging the colored portion of the suction nozzle;
Recognizing means for recognizing boundary lines of different colors from the colored color image and recognizing the mounting state of the suction nozzle based on the identified boundary lines;
An electronic component mounting apparatus comprising:
吸着ノズルにより吸着された電子部品を回路基板に実装する電子部品実装装置において、
吸着ノズルの種類ごとに異なる色で着色された吸着ノズルと、
着色された部分に異なる色の照明光を順次切り替えて照射する照明手段と、
着色された部分からの反射光を受光する受光器と、
吸着ノズルの種類ごとに付与された色情報を吸着ノズルの種類に対応させて記憶する記憶装置と、
前記受光器の信号に基づき着色された部分の色を識別し、記憶されている色情報から吸着ノズルの種類を認識する認識手段と、
を備えたことを特徴とする電子部品実装装置。
In an electronic component mounting apparatus for mounting an electronic component sucked by a suction nozzle on a circuit board,
A suction nozzle colored in a different color for each type of suction nozzle;
Illumination means for sequentially switching and illuminating different colored illumination lights on the colored part;
A receiver that receives the reflected light from the colored portion;
A storage device that stores color information assigned to each type of suction nozzle in correspondence with the type of suction nozzle;
Recognizing means for recognizing the color of the colored portion based on the signal of the light receiver and recognizing the type of the suction nozzle from the stored color information;
An electronic component mounting apparatus comprising:
複数の吸着ノズルと照明手段並びに受光器とが相対的に移動されて、各吸着ノズルごとに前記認識が行われることを特徴とする請求項4に記載の電子部品実装装置。   The electronic component mounting apparatus according to claim 4, wherein the plurality of suction nozzles, the illuminating unit, and the light receiver are relatively moved so that the recognition is performed for each suction nozzle.
JP2003342727A 2003-10-01 2003-10-01 Electronic component mounting equipment Expired - Fee Related JP4309221B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003342727A JP4309221B2 (en) 2003-10-01 2003-10-01 Electronic component mounting equipment

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003342727A JP4309221B2 (en) 2003-10-01 2003-10-01 Electronic component mounting equipment

Publications (2)

Publication Number Publication Date
JP2005109288A true JP2005109288A (en) 2005-04-21
JP4309221B2 JP4309221B2 (en) 2009-08-05

Family

ID=34536911

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003342727A Expired - Fee Related JP4309221B2 (en) 2003-10-01 2003-10-01 Electronic component mounting equipment

Country Status (1)

Country Link
JP (1) JP4309221B2 (en)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010016027A (en) * 2008-07-01 2010-01-21 Panasonic Corp Nozzle individual information reading device, component mounter, nozzle individual information reading method and component mounting method
JP2010067733A (en) * 2008-09-10 2010-03-25 Panasonic Corp Nozzle identification device, part mounter, nozzle identification method, and part mounting method
WO2013150703A1 (en) * 2012-04-06 2013-10-10 パナソニック株式会社 Method for assessing orientation of suction nozzle, and component mounting device
JP2014127628A (en) * 2012-12-27 2014-07-07 Juki Corp Electronic component packaging apparatus and electronic component packaging method
WO2017022618A1 (en) * 2015-07-31 2017-02-09 三菱電機株式会社 Deaeration tool, and switch gear electrical apparatus manufacturing method using deaeration tool
WO2020070858A1 (en) * 2018-10-04 2020-04-09 株式会社Fuji Camera for capturing component images, and component mounting machine
JP2020107638A (en) * 2018-12-26 2020-07-09 ヤマハ発動機株式会社 Work-piece adsorber and nozzle tip recognition method

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010016027A (en) * 2008-07-01 2010-01-21 Panasonic Corp Nozzle individual information reading device, component mounter, nozzle individual information reading method and component mounting method
JP2010067733A (en) * 2008-09-10 2010-03-25 Panasonic Corp Nozzle identification device, part mounter, nozzle identification method, and part mounting method
WO2013150703A1 (en) * 2012-04-06 2013-10-10 パナソニック株式会社 Method for assessing orientation of suction nozzle, and component mounting device
JP2014127628A (en) * 2012-12-27 2014-07-07 Juki Corp Electronic component packaging apparatus and electronic component packaging method
WO2017022618A1 (en) * 2015-07-31 2017-02-09 三菱電機株式会社 Deaeration tool, and switch gear electrical apparatus manufacturing method using deaeration tool
JP6157769B1 (en) * 2015-07-31 2017-07-05 三菱電機株式会社 Deaeration tool and method of manufacturing switchgear electrical device using the deaeration tool
WO2020070858A1 (en) * 2018-10-04 2020-04-09 株式会社Fuji Camera for capturing component images, and component mounting machine
JP2020107638A (en) * 2018-12-26 2020-07-09 ヤマハ発動機株式会社 Work-piece adsorber and nozzle tip recognition method
JP7266945B2 (en) 2018-12-26 2023-05-01 ヤマハ発動機株式会社 Work suction device

Also Published As

Publication number Publication date
JP4309221B2 (en) 2009-08-05

Similar Documents

Publication Publication Date Title
JP4637417B2 (en) Standard line setting method for reference mark part search and reference mark part search method
JP2007220837A (en) Method and device for mounting electronic component
JP7098795B2 (en) Setting direction error angle of supply parts Teaching method
JP2009182280A (en) Mark recognizing method in electronic component mounting apparatus
JP4260545B2 (en) Surface mount machine
JP4309221B2 (en) Electronic component mounting equipment
JP2005011950A (en) Surface mounting machine
JP4302234B2 (en) Mounting parts inspection device
JP4883636B2 (en) Electronic component orientation inspection apparatus, electronic component orientation inspection method, and electronic component placement machine
JP4315752B2 (en) Electronic component mounting equipment
JP2008066608A (en) Electronic component mounting apparatus
JP4704218B2 (en) Component recognition method, apparatus and surface mounter
JP4351488B2 (en) Electronic component mounting equipment
JP3807490B2 (en) Component recognition camera position offset teaching method and teaching apparatus
JP3600643B2 (en) Substrate position detection method and substrate position detection device
JP4781157B2 (en) Parts library data creation device
JP2003142891A (en) Electronic component mounting apparatus
JP2005183412A (en) Electronic component mounter
JP3946502B2 (en) Component mounting method
JP4925943B2 (en) How to verify parts library data
JPH09307292A (en) Data generation device/method and electronic parts installation device
JPH07162200A (en) Method and apparatus for mounting electronic part
JP4832586B2 (en) Substrate recognition processing method
JPH08195599A (en) Method and apparatus for detecting component mounting state in mounting apparatus
JP2007103436A (en) Part mounting method and part mounting apparatus

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060927

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20070202

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20070202

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090121

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090127

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090311

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090407

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090507

R150 Certificate of patent (=grant) or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120515

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees