JP2010107249A - Device of inspecting inspection object - Google Patents

Device of inspecting inspection object Download PDF

Info

Publication number
JP2010107249A
JP2010107249A JP2008277341A JP2008277341A JP2010107249A JP 2010107249 A JP2010107249 A JP 2010107249A JP 2008277341 A JP2008277341 A JP 2008277341A JP 2008277341 A JP2008277341 A JP 2008277341A JP 2010107249 A JP2010107249 A JP 2010107249A
Authority
JP
Japan
Prior art keywords
inspected
substrate
imaging
angle
imaging angle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008277341A
Other languages
Japanese (ja)
Other versions
JP5296490B2 (en
Inventor
Yoshihiro Akiyama
吉宏 秋山
Yukio Iwano
行雄 岩野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Saki Corp
Original Assignee
Saki Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Saki Corp filed Critical Saki Corp
Priority to JP2008277341A priority Critical patent/JP5296490B2/en
Publication of JP2010107249A publication Critical patent/JP2010107249A/en
Application granted granted Critical
Publication of JP5296490B2 publication Critical patent/JP5296490B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Length Measuring Devices By Optical Means (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To perceive the height of a component on a board while suppressing costs of an image pickup device. <P>SOLUTION: In a board inspection system, a mirror angle control part switches an image pickup angle so that a line sensor scans an image of a board 2 seen from image pickup angles having different absolute values of the angles with respect to a normal line of a surface to be inspected. The mirror angle control part switches the image pickup angle so that an optical path length from the line sensor to the board 2 is not varied. The mirror angle control part switches the image pickup angle by changing the angle of a semi-transparent mirror 42 reflecting the light from the board 2 to the line sensor so that the optical path length from the line sensor to the board 2 is not varied. The mirror angle control part switches a perpendicular image pickup angle perpendicular to the surface of the board 2 and an inclination image pickup angle inclined with respect to the surface of the board 2. <P>COPYRIGHT: (C)2010,JPO&INPIT

Description

本発明は、被検査体の検査装置に関し、特に撮像して得られた被検査体の画像を利用して被検査体を検査する被検査体の検査装置に関する。   The present invention relates to an inspection apparatus for an inspection object, and more particularly to an inspection apparatus for an inspection object that inspects an inspection object using an image of the inspection object obtained by imaging.

電子部品には足がある場合があり、この足と基板との間に異物が挟まる場合がある。このような異物が挟まっているか否かを判定するためには、基板上の部品の高さを精度良く把握することが要求される。このため、例えば2つのカメラアレイによって撮像されたステレオ画像を利用して基板のプロファイルを取得する自動検査システムが提案されている(例えば、特許文献1参照)。
特表2003−522347号公報
An electronic component may have a foot, and a foreign object may be caught between the foot and the substrate. In order to determine whether or not such foreign matter is sandwiched, it is required to accurately grasp the height of the component on the board. For this reason, for example, an automatic inspection system that acquires a substrate profile using stereo images captured by two camera arrays has been proposed (see, for example, Patent Document 1).
JP-T-2003-522347

上述の自動検査システムのように互いに異なる複数の撮像角度から見た被検査体の映像を走査可能な複数のカメラを設ける場合、カメラに要するコストの増大を抑制することは困難である。   When providing a plurality of cameras capable of scanning an image of an object to be inspected viewed from a plurality of different imaging angles as in the above-described automatic inspection system, it is difficult to suppress an increase in cost required for the cameras.

本発明はこうした状況に鑑みてなされたものであり、その目的は、撮像装置に要するコストを抑制しつつ基板上の部品の高さを把握することにある。   The present invention has been made in view of such circumstances, and an object of the present invention is to grasp the height of components on a substrate while suppressing the cost required for an imaging apparatus.

上記課題を解決するために、本発明のある態様の被検査体の検査装置は、ライン状のセンサ列と、被検査面の垂線に対する角度の絶対値が互いに異なる撮像角度から見た被検査体の映像をライン状のセンサ列が走査できるよう撮像角度を切り替える撮像角度切替手段と、を備える。撮像角度切替手段は、ライン状のセンサ列から被検査体への光路長が変化しないよう撮像角度を切り替える。   In order to solve the above-described problems, an inspection apparatus for an object to be inspected according to an aspect of the present invention includes an object to be inspected as viewed from imaging angles in which the absolute value of the angle with respect to the line-shaped sensor array and the perpendicular to the surface to be inspected is different from each other. Imaging angle switching means for switching the imaging angle so that the line-shaped sensor array can scan the video. The imaging angle switching means switches the imaging angle so that the optical path length from the linear sensor array to the object to be inspected does not change.

この態様によれば、被検査体に焦点を合わせたまま撮像角度を切り替えることができる。このため、撮像角度と焦点合わせを別々の工程で行う場合に比べ、ステレオ画像取得のための検査工数を削減することができる。なお、ライン状のセンサ列は、ラインセンサであってもよく、また、エリアセンサに含まれるライン状のセンサ列であってもよい。   According to this aspect, it is possible to switch the imaging angle while keeping the focus on the inspection object. For this reason, compared with the case where imaging angle and focusing are performed in separate processes, the number of inspection steps for acquiring a stereo image can be reduced. Note that the line-shaped sensor array may be a line sensor or a line-shaped sensor array included in the area sensor.

撮像角度切替手段は、被検査体からの光をライン状のセンサ列に向けて反射するミラーの角度を、ライン状のセンサ列から被検査体への光路長が変化しないよう変更して撮像角度を切り替えてもよい。この態様によれば、ミラーの角度を変更させるという簡易な構成で被検査体に対する撮像角度を切り替えることができる。   The imaging angle switching means changes the angle of the mirror that reflects the light from the inspected object toward the line-shaped sensor array so that the optical path length from the line-shaped sensor array to the inspected object does not change. May be switched. According to this aspect, the imaging angle with respect to the object to be inspected can be switched with a simple configuration in which the angle of the mirror is changed.

撮像角度切替手段は、被検査面に対して垂直に被検査体を見る垂直撮像角度と、被検査面に対して傾斜して被検査体を見る傾斜撮像角度とを切り替えてもよい。この態様によれば、被検査体の被検査面に対して垂直に見た映像を走査した画像を取得することができるため、例えば被検査体の被検査面の高さ以外の様々な項目についても簡易に検査を実施することが可能となる。   The imaging angle switching means may switch between a vertical imaging angle for viewing the inspection object perpendicular to the surface to be inspected and a tilted imaging angle for viewing the inspection object while being inclined with respect to the inspection surface. According to this aspect, an image obtained by scanning an image viewed perpendicularly to the surface to be inspected of the object to be inspected can be acquired. It becomes possible to carry out the inspection easily.

撮像角度切替手段は、主走査方向に見て、垂直撮像角度から被検査体の映像を走査するときのミラーの反射ポイントを原点とし、原点を含む水平軸をx軸、原点を含む垂直軸をy軸とし、原点から被検査体までの距離をA1、ミラーの回転角度をθ1としたとき、以下の座標、

Figure 2010107249
を中心としてミラーを回転させることにより垂直撮像角度と傾斜撮像角度とを切り替えてもよい。 The imaging angle switching means uses the mirror reflection point when scanning the image of the object to be inspected from the vertical imaging angle as seen in the main scanning direction as the origin, the horizontal axis including the origin as the x axis, and the vertical axis including the origin as the origin. When the y-axis is assumed, the distance from the origin to the object to be inspected is A1, and the rotation angle of the mirror is θ1, the following coordinates:
Figure 2010107249
The vertical imaging angle and the tilted imaging angle may be switched by rotating the mirror around the center.

この態様によれば、ミラーを回転させるという簡易な構成により、ミラーの角度を適切に変更することができる。   According to this aspect, the angle of the mirror can be appropriately changed with a simple configuration of rotating the mirror.

ライン状のセンサ列による走査位置と被検査体の位置とを相対的に往復移動させる移動手段をさらに備えてもよい。撮像角度切替手段は、往路と復路とで、被検査面の垂線に対する角度の絶対値が互いに異なる撮像角度から見た被検査体の映像をライン状のセンサ列が走査できるよう撮像角度を切り替えてもよい。この態様によれば、往復移動させる一工程において互いに異なる複数の撮像角度から見た被検査体の画像データを取得することができ、検査工数を抑制することができる。   You may further provide the moving means to relatively reciprocate the scanning position by a line-shaped sensor row | line | column, and the position of to-be-inspected object. The imaging angle switching means switches the imaging angle so that the line-shaped sensor array can scan the image of the inspected object viewed from the imaging angle in which the absolute value of the angle with respect to the normal of the surface to be inspected is different between the forward path and the return path. Also good. According to this aspect, it is possible to acquire the image data of the inspected object viewed from a plurality of different imaging angles in one step of reciprocating movement, and to suppress the inspection man-hours.

ライン状のセンサ列は、被検査体からの反射光をレンズ光軸に対して平行に集光する光学系を介して被検査体の映像を走査してもよい。この態様によれば、視差の影響が少ないステレオ画像を利用することができるため、被検査体における被検査面の立体形状を高速かつ高精度に把握することが可能となる。   The line-shaped sensor array may scan an image of the inspection object through an optical system that collects reflected light from the inspection object in parallel to the lens optical axis. According to this aspect, since a stereo image with little influence of parallax can be used, the three-dimensional shape of the surface to be inspected in the object to be inspected can be grasped at high speed and with high accuracy.

本発明に係る被検査体の検査装置によれば、撮像装置に要するコストを抑制しつつ基板上の部品の高さを把握することができる。   According to the inspection apparatus for an object to be inspected according to the present invention, it is possible to grasp the height of components on a substrate while suppressing the cost required for the imaging apparatus.

以下、図面を参照して本発明の実施の形態(以下、「実施形態」という。)について説明する。   Hereinafter, embodiments of the present invention (hereinafter referred to as “embodiments”) will be described with reference to the drawings.

図1は、本実施形態に係る基板検査システム10の構成を示す図である。基板検査システム10は、基板搬送機構12および撮像システム14を有する。基板搬送機構12は、支持プレート18、および支持プレート18により支持される2本の搬送レール20を有している。   FIG. 1 is a diagram illustrating a configuration of a substrate inspection system 10 according to the present embodiment. The substrate inspection system 10 includes a substrate transport mechanism 12 and an imaging system 14. The substrate transport mechanism 12 includes a support plate 18 and two transport rails 20 supported by the support plate 18.

搬送レール20はモータ(図示せず)を駆動することにより基板2を搬送する搬送ベルト(図示せず)を有し、搬送ベルトに載置された基板2を基板搬送機構12の略中央まで搬送する。搬送レール20の上方であって検査テーブルの略中央には、基板2の搬送を検知する光センサなどの搬送センサ(図示せず)が設けられている。この搬送センサが基板2の端面や基板2に設けられた検知孔を検知すると、基板検査システム10は、基板2が基板搬送機構12の略中央に搬送されたと判定し、搬送レール20による基板2の搬送を停止させる。   The transport rail 20 has a transport belt (not shown) for transporting the substrate 2 by driving a motor (not shown), and transports the substrate 2 placed on the transport belt to the approximate center of the substrate transport mechanism 12. To do. A conveyance sensor (not shown) such as an optical sensor for detecting the conveyance of the substrate 2 is provided above the conveyance rail 20 and substantially in the center of the inspection table. When this transport sensor detects the end face of the substrate 2 or a detection hole provided in the substrate 2, the substrate inspection system 10 determines that the substrate 2 has been transported to the approximate center of the substrate transport mechanism 12, and the substrate 2 by the transport rail 20. Stop the transport of.

基板搬送機構12の下方には、搬送レール20の延在方向と直行する方向に延在するボールネジ22が設けられている。ボールネジ22は、搬送モータ(図示せず)によって駆動される。ボールネジ22が回転することにより支持プレート18が搬送レール20の延在方向と垂直な方向に移動される。このとき、基板搬送機構12もまた支持プレート18と共に移動される。こうして基板検査システム10は、基板2を撮像システム14の下方に搬送する。   A ball screw 22 extending in a direction perpendicular to the extending direction of the transport rail 20 is provided below the substrate transport mechanism 12. The ball screw 22 is driven by a transport motor (not shown). As the ball screw 22 rotates, the support plate 18 is moved in a direction perpendicular to the extending direction of the transport rail 20. At this time, the substrate transport mechanism 12 is also moved together with the support plate 18. In this way, the substrate inspection system 10 conveys the substrate 2 below the imaging system 14.

所定の位置まで基板2が移動すると、基板検査システム10は搬送モータを逆転させてボールネジ22を逆回転させ、もとの位置まで基板搬送機構12を移動させる。基板検査システム10は、こうしてもとの位置まで移動された基板2を搬送レール20によって次の工程へと搬送する。次に検査を行う基板2がある場合、基板検査システム10は再び搬送レール20によってその基板2を基板搬送機構12の略中央まで搬送し、上述の動作を繰り返す。なお、本図手前側の搬送レール20には、搬送レール20上の載置された基板2を上方から押圧して基板2の形状を矯正するクランプが設けられている。基板搬送機構12の略中央に搬送された基板2は、このクランプによりゆがみが矯正された状態で撮像システム14へ搬送される。   When the substrate 2 moves to a predetermined position, the substrate inspection system 10 reverses the conveyance motor and reversely rotates the ball screw 22 to move the substrate conveyance mechanism 12 to the original position. The substrate inspection system 10 transports the substrate 2 moved to the original position to the next process by the transport rail 20. When there is a substrate 2 to be inspected next, the substrate inspection system 10 again conveys the substrate 2 to the approximate center of the substrate conveyance mechanism 12 by the conveyance rail 20 and repeats the above-described operation. The transport rail 20 on the front side of the figure is provided with a clamp that presses the substrate 2 placed on the transport rail 20 from above to correct the shape of the substrate 2. The substrate 2 transported to the approximate center of the substrate transport mechanism 12 is transported to the imaging system 14 with the distortion corrected by this clamp.

撮像システム14は、撮像ユニット24および回転機構26を有する。撮像ユニット24は、基板2へ光を照射すると共に基板2を撮像し、画像データを生成する。回転機構26はユニット回転モータ(図示せず)およびギヤなどからなる伝達機構(図示せず)を有している。回転機構26は、ユニット回転モータが作動することにより伝達機構を介して基板2の被検査面と垂直な軸を中心に撮像ユニット24を回転させて、基板2の搬送方向と撮像ユニット24による走査方向とがなす角度である主走査角度を変更する。   The imaging system 14 includes an imaging unit 24 and a rotation mechanism 26. The imaging unit 24 irradiates the substrate 2 with light and images the substrate 2 to generate image data. The rotation mechanism 26 has a transmission mechanism (not shown) including a unit rotation motor (not shown) and gears. The rotation mechanism 26 rotates the imaging unit 24 around an axis perpendicular to the surface to be inspected of the substrate 2 via the transmission mechanism by the operation of the unit rotation motor, so that the conveyance direction of the substrate 2 and the scanning by the imaging unit 24 are performed. The main scanning angle which is an angle formed by the direction is changed.

図2は、本実施形態に係る撮像ユニット24の内部構成を示す斜視図である。撮像ユニット24は、走査ユニット30および照明ユニット50を有する。走査ユニット30は、支持プレート36上にラインセンサ38、レンズ39、テレセントリックレンズ40、およびハーフミラー42を備える。   FIG. 2 is a perspective view showing an internal configuration of the imaging unit 24 according to the present embodiment. The imaging unit 24 includes a scanning unit 30 and an illumination unit 50. The scanning unit 30 includes a line sensor 38, a lens 39, a telecentric lens 40, and a half mirror 42 on a support plate 36.

図3は、本実施形態に係る撮像ユニット24の構成を模式的に表した図である。図3において、基板2は左側から右側へと搬送されている間に撮像ユニット24によって基板2の撮像処理が実施される。以下、図3の右方向を第1方向、図3の左方向を第2方向として説明する。なお、撮像ユニット24は、基板2が第2方向に搬送されている間に基板2の撮像処理を実施してもよい。   FIG. 3 is a diagram schematically illustrating the configuration of the imaging unit 24 according to the present embodiment. In FIG. 3, the imaging process of the substrate 2 is performed by the imaging unit 24 while the substrate 2 is being conveyed from the left side to the right side. In the following description, the right direction in FIG. 3 is the first direction, and the left direction in FIG. 3 is the second direction. Note that the imaging unit 24 may perform an imaging process for the substrate 2 while the substrate 2 is being transported in the second direction.

ラインセンサ38は、ライン状のセンサ列を内部に含み、ハーフミラー42によって反射されてテレセントリックレンズ40およびレンズ39を通過した基板2における走査ライン上の映像を走査する。以下、走査ラインが基板2の搬送方向と垂直に向くときの撮像ユニット24の位置を「ユニット初期位置」という。また、「走査する」は、対象物の映像を示す光の量をラインセンサ38内の受光素子が電気信号に変換して出力する動作をいう。また、「撮像する」は、一走査単位を走査することをいう。一走査単位とは、例えば基板の一方の端部から他方の端部までの1回の一方向の走査や1回の往復の走査など、ラインセンサ38の走査の単位をいう。   The line sensor 38 includes a line-shaped sensor array inside, and scans an image on a scanning line on the substrate 2 that is reflected by the half mirror 42 and passes through the telecentric lens 40 and the lens 39. Hereinafter, the position of the imaging unit 24 when the scanning line is perpendicular to the conveyance direction of the substrate 2 is referred to as “unit initial position”. “Scanning” refers to an operation in which a light receiving element in the line sensor 38 converts an amount of light indicating an image of an object into an electric signal and outputs the electric signal. “Imaging” means scanning one scanning unit. One scanning unit refers to a unit of scanning of the line sensor 38 such as one unidirectional scanning from one end of the substrate to the other end and one reciprocating scanning.

なお、ラインセンサ38に代えて、エリアセンサが用いられてもよい。この場合、エリアセンサによって撮像された画像のうち、エリアセンサに含まれるライン状のセンサ列のいずれかによって撮像された部分の画像を用いて基板2の検査を実施する。   Instead of the line sensor 38, an area sensor may be used. In this case, the inspection of the substrate 2 is performed using an image of a part imaged by one of the line-shaped sensor arrays included in the area sensor among the images imaged by the area sensor.

照明ユニット50は、第1光源52、第2光源54、第3光源56、アクリルシート58を有する。基板搬送機構12は、まず本図右方向に基板2を搬送し、所定の長さを搬送後、図3における左方向に基板2を搬送する。以下、図3における右方向を第1方向、左方向を第2方向として説明する。   The illumination unit 50 includes a first light source 52, a second light source 54, a third light source 56, and an acrylic sheet 58. The substrate transport mechanism 12 first transports the substrate 2 in the right direction in the figure, transports the substrate 2 in the left direction in FIG. 3 after transporting a predetermined length. Hereinafter, the right direction in FIG. 3 is described as a first direction, and the left direction is described as a second direction.

第1光源52は、ラインセンサ38の走査方向に被検査体である基板2の長さ以上に列ぶLED(発光ダイオード)群により構成される。第1光源52は、基板2に落射する光を照射することができるように、ラインセンサ38が走査する基板2における走査ラインの真上に配置される。本実施形態においては、第1光源52は、基板2の被撮像面と平行に配設された基板に設けられたLED群により構成される。なお、効率的に検査中の走査ラインへ落射光を投ずるために、LED群を取り付ける基板を中央からふたつのサブ基板に分け、それぞれのサブ基板に走査方向に列んだLED群を構成してもよい。第1光源52により落射光を基板2に投じ、この反射光をラインセンサ38で検出することにより、基板2に実装される部品の位置ずれ欠品、ハンダのヌレなどに関する検査を実施することができる。   The first light source 52 is configured by a group of LEDs (light emitting diodes) arranged in the scanning direction of the line sensor 38 so as to be longer than the length of the substrate 2 that is an object to be inspected. The first light source 52 is disposed directly above the scanning line in the substrate 2 scanned by the line sensor 38 so that the light incident on the substrate 2 can be irradiated. In the present embodiment, the first light source 52 is configured by an LED group provided on a substrate disposed in parallel with the imaging surface of the substrate 2. In order to efficiently project incident light onto the scanning line being inspected, the board to which the LED group is attached is divided into two sub-boards from the center, and the LED group is arranged on each sub-board in the scanning direction. Also good. By injecting incident light onto the substrate 2 by the first light source 52 and detecting this reflected light with the line sensor 38, it is possible to carry out an inspection regarding misalignment of components mounted on the substrate 2, solder scum, etc. it can.

第2光源54は、基板2の被撮像面と平行に配設された2つの基板に設けられた、ラインセンサ38の走査方向に被検査体である基板2の長さ以上に列ぶLED群により構成される。LEDが取り付けられた2つの基板は、第1光源52が走査ラインに落射光を投ずる光路に干渉しないように、走査ラインを含む鉛直面を挟んで両側に配置される。   The second light source 54 is an LED group arranged on two substrates arranged in parallel with the imaging surface of the substrate 2 and arranged in the scanning direction of the line sensor 38 so as to be longer than the length of the substrate 2 that is an object to be inspected. Consists of. The two substrates to which the LEDs are attached are arranged on both sides of the vertical plane including the scanning line so that the first light source 52 does not interfere with the optical path that projects incident light on the scanning line.

第3光源56も、第2光源54と同様にLED群により構成される。このLED群は、基板2の被撮像面と平行に配設された2つの基板に設けられ、被検査体となる基板2の走査方向長さ以上にわたって列べられて構成される。LEDが取り付けられた2つの基板は、第1光源52および第2光源54が走査ラインに光を照射する光路に干渉しないように、走査ラインを含む鉛直面を挟んで両側に配置される。第2光源54により側射光を基板2に投じ、この反射光をラインセンサ38で検出することにより、基板2におけるハンダブリッジの有無、実装部品の間違い、極性の反転などに関する検査を実施することができる。   Similarly to the second light source 54, the third light source 56 is also composed of an LED group. This LED group is provided on two substrates arranged in parallel with the imaging surface of the substrate 2 and is arranged over the length in the scanning direction of the substrate 2 to be inspected. The two substrates to which the LEDs are attached are arranged on both sides of the vertical plane including the scanning line so that the first light source 52 and the second light source 54 do not interfere with the optical path for irradiating the scanning line with light. By injecting side light onto the substrate 2 by the second light source 54 and detecting this reflected light with the line sensor 38, it is possible to carry out inspections regarding the presence or absence of solder bridges on the substrate 2, errors in the mounted components, polarity reversal, etc. it can.

第1光源52は緑色の光を照射し、第2光源54は白色の光を照射し、第3光源56は青色の光を照射する。各々の光源は、異なる入射角度で被検査体となる基板2に光を照射する。このため、照明ユニット50は被検査体である基板2に複数の入射角度の光を照射する複合光源として機能する。第1光源52を緑色とし第3光源56を青色としたのは、SN比のよいクリアな画像を得るためである。プリント基板は緑色の場合が多いことから、落射光により平明を明るく照射するため、第1光源52を緑色としている。また、ICやチップのボディにレーザー印字された文字は、低い角度から青い光を当てることにより認識しやすくなるため、第3光源56を青色としている。   The first light source 52 emits green light, the second light source 54 emits white light, and the third light source 56 emits blue light. Each light source irradiates light to the substrate 2 to be inspected at different incident angles. For this reason, the illumination unit 50 functions as a composite light source that irradiates light having a plurality of incident angles onto the substrate 2 that is an object to be inspected. The reason why the first light source 52 is green and the third light source 56 is blue is to obtain a clear image with a good SN ratio. Since the printed circuit board is often green, the first light source 52 is green in order to brightly illuminate the plain with incident light. In addition, since the characters laser-printed on the body of the IC or chip are easily recognized by applying blue light from a low angle, the third light source 56 is blue.

第1光源52の鉛直下方にハーフミラー42が設けられる。第1光源52からの落射光は、ハーフミラー42を通過して基板2の検査面へ入射角がほぼゼロで投じられる。本実施形態においては、第1光源52に幅をもたせており、基板2が反ったときでも入射角がゼロになるような落射光成分が存在するように配慮されている。走査ラインからの反射光は、ハーフミラー42で反射し、テレセントリックレンズ40およびレンズ39を通過してラインセンサ38へ入射する。   A half mirror 42 is provided vertically below the first light source 52. Incident light from the first light source 52 passes through the half mirror 42 and is incident on the inspection surface of the substrate 2 with an incident angle of substantially zero. In the present embodiment, the first light source 52 has a width, and it is considered that there is an incident light component such that the incident angle becomes zero even when the substrate 2 is warped. The reflected light from the scanning line is reflected by the half mirror 42, passes through the telecentric lens 40 and the lens 39, and enters the line sensor 38.

第2光源54および第3光源56と走査ラインの間には、アクリルシート58が設けられる。このアクリルシート58は、第2光源54および第3光源56からの光を拡散する。第2光源54および第3光源56は、点光源であるLEDの集合体であるため、拡散作用がなければスポット的な光が画像データに写り込んで検査精度に影響を与える可能性があるからである。   An acrylic sheet 58 is provided between the second light source 54 and the third light source 56 and the scanning line. The acrylic sheet 58 diffuses light from the second light source 54 and the third light source 56. Since the second light source 54 and the third light source 56 are aggregates of LEDs that are point light sources, if there is no diffusing action, spot-like light may be reflected in the image data and affect the inspection accuracy. It is.

図4は、走査ユニット30の主光線の光路を示す図である。なお、図4においてハーフミラー42による主光線の反射に関する図示は省略している。   FIG. 4 is a diagram showing the optical path of the chief ray of the scanning unit 30. In FIG. 4, illustration of the reflection of the chief ray by the half mirror 42 is omitted.

視差による歪みがある画像を利用して基板2に実装された部品の高さを算出しようとすると、視差による歪みを考慮した複雑な計算工程を経る必要があり、また、精度の高い算出結果を期待することも困難である。このため、ラインセンサ38は、テレセントリックレンズ40を介して基板2の映像を走査する。テレセントリックレンズ40は、基板2からの反射光をレンズ光軸に対して平行に集光する。このため、テレセントリックレンズ40と基板2との間では、主光線は光軸に対して平行、すなわち画角が実質的にゼロ度となる。   When trying to calculate the height of a component mounted on the board 2 using an image with distortion due to parallax, it is necessary to go through a complicated calculation process considering the distortion due to parallax, and to obtain a highly accurate calculation result. It is also difficult to expect. For this reason, the line sensor 38 scans the image of the substrate 2 through the telecentric lens 40. The telecentric lens 40 collects the reflected light from the substrate 2 in parallel with the lens optical axis. For this reason, between the telecentric lens 40 and the substrate 2, the principal ray is parallel to the optical axis, that is, the field angle is substantially zero degrees.

このため、被写体の像が光軸中心にあっても光軸から離れた周辺位置にあっても視差による影響を受けず、原理的には視差による歪みのない画像を撮影することができる。したがって、シンプルな計算工程によって基板2に実装された部品などの高さを正確に算出することが可能となる。   Therefore, regardless of whether the subject image is at the center of the optical axis or at a peripheral position away from the optical axis, it is not affected by the parallax, and in principle, an image free from distortion due to the parallax can be taken. Therefore, it is possible to accurately calculate the height of components mounted on the substrate 2 by a simple calculation process.

図5は、本実施形態に係る走査ユニット30を主走査方向に見た図である。以下、基板2の表面に対して垂直な垂直撮像角度から被検査体の映像を走査するときのハーフミラー42の位置を「ミラー初期位置」という。このため、ハーフミラー42がミラー初期位置にあるときの反射面と水平面との角度である初期ミラー角度θ0は45度に設定されている。   FIG. 5 is a view of the scanning unit 30 according to the present embodiment when viewed in the main scanning direction. Hereinafter, the position of the half mirror 42 when scanning the image of the object to be inspected from the vertical imaging angle perpendicular to the surface of the substrate 2 is referred to as “mirror initial position”. For this reason, the initial mirror angle θ0, which is the angle between the reflecting surface and the horizontal plane when the half mirror 42 is at the mirror initial position, is set to 45 degrees.

ハーフミラー42がミラー初期位置にあるときにラインセンサ38に入射する光を反射する反射面上の反射ラインの位置を原点Oとする。また、原点Oを含む水平軸をx軸、原点Oを含む垂直軸をy軸とする。また、原点Oから基板2の表面までの距離を垂直光路長A1、原点Oからテレセントリックレンズ40までの水平距離を第1水平光路長B1とする。   The position of the reflection line on the reflection surface that reflects the light incident on the line sensor 38 when the half mirror 42 is at the mirror initial position is defined as an origin O. The horizontal axis including the origin O is defined as the x axis, and the vertical axis including the origin O is defined as the y axis. Further, a distance from the origin O to the surface of the substrate 2 is defined as a vertical optical path length A1, and a horizontal distance from the origin O to the telecentric lens 40 is defined as a first horizontal optical path length B1.

また、走査ユニット30には、ハーフミラー42を回転させるミラー角度切替機構70が設けられている。以下、ハーフミラー42のミラー初期位置からの回転角度をθ1とする。ミラー角度切替機構70によってハーフミラー42が回転された場合、ラインセンサ38は、垂直撮像角度に対して2×θ1だけ傾斜する傾斜撮像角度から基板2を見た映像を走査する。すなわち、垂直撮像角度は、被検査面の垂線に対する角度の絶対値がゼロ度となる方向、すなわち被検査面を垂直に見た映像を走査するときの撮像角度であり、傾斜撮像角度は、被検査面の垂線に対する角度の絶対値が2×θ1となる方向から見た映像を走査するときの撮像角度である。このとき、ラインセンサ38に入射する光を反射するハーフミラー42の反射ラインと基板2の走査ラインとの距離を傾斜光路長A2とする。   Further, the scanning unit 30 is provided with a mirror angle switching mechanism 70 that rotates the half mirror 42. Hereinafter, the rotation angle of the half mirror 42 from the mirror initial position is θ1. When the half mirror 42 is rotated by the mirror angle switching mechanism 70, the line sensor 38 scans an image of the substrate 2 viewed from an inclined imaging angle that is inclined by 2 × θ1 with respect to the vertical imaging angle. That is, the vertical imaging angle is the direction in which the absolute value of the angle with respect to the perpendicular to the surface to be inspected is zero degrees, that is, the imaging angle when scanning an image when the surface to be inspected is viewed vertically. This is the imaging angle when scanning an image viewed from the direction in which the absolute value of the angle with respect to the normal of the inspection surface is 2 × θ1. At this time, the distance between the reflection line of the half mirror 42 that reflects the light incident on the line sensor 38 and the scanning line of the substrate 2 is defined as an inclined optical path length A2.

仮にミラー角度切替機構70が原点Oを中心にハーフミラー42を回転させた場合、第1水平光路長B1は変わらないが、垂直光路長A1と傾斜光路長A2とが異なる長さとなるため、光路長は変化する。このときの光路長の変化量をλとすると、λは、
λ=A2−A1=A1×(1/cos(2×θ1)−1)・・・数式1
によって表される。
If the mirror angle switching mechanism 70 rotates the half mirror 42 around the origin O, the first horizontal optical path length B1 does not change, but the vertical optical path length A1 and the inclined optical path length A2 are different from each other. The length varies. Assuming that the amount of change in the optical path length at this time is λ, λ is
λ = A2−A1 = A1 × (1 / cos (2 × θ1) −1) Equation 1
Represented by

光路長が変化すると別途焦点合わせを実施する構成および工程が必要となり、コストや検査工数の抑制が困難となる。このためミラー角度切替機構70は、ラインセンサ38から基板2への光路長が変化しないようハーフミラー42を回転させて、垂直撮像角度と傾斜撮像角度とを切り替える。これにより、別途焦点合わせを実施する構成および工程が不要となり、コストや検査工数を抑制することができる。   When the optical path length changes, a configuration and a process for performing focusing separately are required, and it becomes difficult to reduce costs and inspection man-hours. Therefore, the mirror angle switching mechanism 70 rotates the half mirror 42 so that the optical path length from the line sensor 38 to the substrate 2 does not change, and switches between the vertical imaging angle and the tilt imaging angle. Thereby, the structure and process for performing focusing separately are unnecessary, and the cost and the number of inspection steps can be suppressed.

まず、ミラー初期位置にあるときのハーフミラー42の反射面は、
y=−xtanθ0・・・数式2
によって表される。
First, the reflection surface of the half mirror 42 when in the mirror initial position is
y = −x tan θ0 (2)
Represented by

ハーフミラー42をミラー初期位置から回転させても光路長を変化させないためには、ハーフミラー42による反射ポイントの座標を(−λ,0)とする必要がある。このため、光路長を変化させないようミラー初期位置からミラー回転角度θ1回転したとき、そのときのハーフミラー42の反射面は、
y=−xtan(θ0−θ1)−λtan(θ0−θ1)・・・数式3
によって表される。
In order not to change the optical path length even when the half mirror 42 is rotated from the mirror initial position, the coordinates of the reflection point by the half mirror 42 need to be (−λ, 0). For this reason, when the mirror rotation angle θ1 is rotated from the initial mirror position so as not to change the optical path length, the reflection surface of the half mirror 42 at that time is
y = −xtan (θ0−θ1) −λtan (θ0−θ1) Equation 3
Represented by

この数式2および数式3より、x、yの解、すなわちハーフミラー42の回転中心を求める。まず、数式2と数式3からyを消去すると、

Figure 2010107249
となる。 From Equations 2 and 3, the solution of x and y, that is, the rotation center of the half mirror 42 is obtained. First, if y is deleted from Equation 2 and Equation 3,
Figure 2010107249
It becomes.

加法定理より、数式4は、

Figure 2010107249
となる。 From the additive theorem, Equation 4 is
Figure 2010107249
It becomes.

初期ミラー角度θ0=45度であることから、tanθ0=1を代入すると、

Figure 2010107249
となる。 Since the initial mirror angle θ0 = 45 degrees, substituting tan θ0 = 1,
Figure 2010107249
It becomes.

この分子分母に(1+tanθ1)を乗じると、

Figure 2010107249
となる。 Multiplying this numerator denominator by (1 + tanθ1)
Figure 2010107249
It becomes.

この数式7のλに数式1を代入すると、

Figure 2010107249
となる。 Substituting Equation 1 into λ of Equation 7,
Figure 2010107249
It becomes.

また、数式2のxに数式8を代入すると、

Figure 2010107249
となる。 Also, when substituting Equation 8 for x in Equation 2,
Figure 2010107249
It becomes.

以上より、ハーフミラー42の回転中心の座標は、

Figure 2010107249
となる。 From the above, the coordinates of the rotation center of the half mirror 42 are
Figure 2010107249
It becomes.

図6は、ユニット初期位置にあるときの撮像ユニット24と、回転機構26によりユニット初期位置から回転された位置にあるときの撮像ユニット24とを示す上面図である。図5において、撮像ユニット24がユニット初期位置にあるときに走査ユニット30が走査する走査ラインを第1主走査ラインL1とする。また、撮像ユニット24がユニット初期位置から回転したときの走査ラインを第2主走査ラインL2とする。第1主走査ラインL1と第2主走査ラインL2とがなす角度は、撮像ユニット24がユニット初期位置から回転した角度となる。以下、この角度を主走査角度αとする。   FIG. 6 is a top view showing the imaging unit 24 when in the unit initial position and the imaging unit 24 when in the position rotated from the unit initial position by the rotation mechanism 26. In FIG. 5, the scanning line scanned by the scanning unit 30 when the imaging unit 24 is in the unit initial position is defined as a first main scanning line L1. The scanning line when the imaging unit 24 rotates from the unit initial position is defined as a second main scanning line L2. The angle formed by the first main scanning line L1 and the second main scanning line L2 is an angle obtained by rotating the imaging unit 24 from the unit initial position. Hereinafter, this angle is referred to as a main scanning angle α.

このように回転機構26は、基板2の搬送方向と基板2上の走査ラインとの角度を変更する撮像角度変更手段として機能する。このように基板2の搬送方向と基板2上の走査ラインとの角度を変更することにより、ラインスキャン特有の指向性の抑制し、検査対象である基板2の全体形状を計測し易くすることができる。本実施形態では、主走査角度αは45度に予め設定されている。   Thus, the rotation mechanism 26 functions as an imaging angle changing unit that changes the angle between the transport direction of the substrate 2 and the scanning line on the substrate 2. By changing the angle between the transport direction of the substrate 2 and the scanning line on the substrate 2 in this way, directivity specific to line scanning can be suppressed and the entire shape of the substrate 2 to be inspected can be easily measured. it can. In the present embodiment, the main scanning angle α is preset to 45 degrees.

図7は、本実施形態に係る基板検査システム10の機能ブロック図である。基板検査システム10は、基板搬送機構12および撮像システム14の他に、PC100およびディスプレイ130を有する。なお、図4においてPC100は、各種演算処理を実行するCPU、各種制御プログラムを格納するROM、データ格納やプログラム実行のためのワークエリアとして利用されるRAMなどのハードウェア、およびソフトウェアの連携によって実現される機能ブロックが描かれている。したがって、これらの機能ブロックはハードウェアおよびソフトウェアの組合せによって様々な形で実現することができる。   FIG. 7 is a functional block diagram of the substrate inspection system 10 according to the present embodiment. The substrate inspection system 10 includes a PC 100 and a display 130 in addition to the substrate transport mechanism 12 and the imaging system 14. In FIG. 4, the PC 100 is realized by cooperation of hardware such as a CPU that executes various arithmetic processes, a ROM that stores various control programs, a RAM that is used as a work area for data storage and program execution, and software. The function block to be performed is drawn. Therefore, these functional blocks can be realized in various forms by a combination of hardware and software.

PC100は、搬送制御部102、回転制御部104、照明制御部106、撮像制御部108、ミラー角度制御部110、記憶部112、画像処理部114、メモリ116、検査部118、および表示制御部120を有する。   The PC 100 includes a conveyance control unit 102, a rotation control unit 104, an illumination control unit 106, an imaging control unit 108, a mirror angle control unit 110, a storage unit 112, an image processing unit 114, a memory 116, an inspection unit 118, and a display control unit 120. Have

基板2を第1方向および第2方向に搬送する搬送モータ72は、PC100に接続されている。搬送制御部102は、搬送モータ72に駆動信号を供給することにより搬送モータ72を作動させて基板搬送機構12を移動させることにより、基板2を第1方向および第2方向に移動させる。したがって搬送制御部102および基板搬送機構12は、ラインセンサ38による走査位置と基板2の位置とを相対的に移動させる移動手段として機能する。   A transport motor 72 that transports the substrate 2 in the first direction and the second direction is connected to the PC 100. The transport control unit 102 moves the substrate 2 in the first direction and the second direction by operating the transport motor 72 by supplying a drive signal to the transport motor 72 and moving the substrate transport mechanism 12. Therefore, the conveyance control unit 102 and the substrate conveyance mechanism 12 function as a moving unit that relatively moves the scanning position of the line sensor 38 and the position of the substrate 2.

回転機構26内に設けられたユニット回転モータ(図示せず)は、PC100に接続されている。回転制御部104は、ユニット回転モータに供給する駆動信号を制御することにより、撮像ユニット24の回転角度を制御する。照明ユニット50はPC100に接続されている。照明制御部106は、第1光源52、第2光源54、および第3光源56の点灯を制御する。撮像制御部108は、照明ユニットが基板2に光を照射するタイミングで基板2の映像を走査するよう、ラインセンサ38の各々の撮像を制御する。   A unit rotation motor (not shown) provided in the rotation mechanism 26 is connected to the PC 100. The rotation control unit 104 controls the rotation angle of the imaging unit 24 by controlling a drive signal supplied to the unit rotation motor. The lighting unit 50 is connected to the PC 100. The illumination control unit 106 controls lighting of the first light source 52, the second light source 54, and the third light source 56. The imaging control unit 108 controls the imaging of each of the line sensors 38 so that the image of the substrate 2 is scanned at the timing when the illumination unit irradiates the substrate 2 with light.

ミラー角度切替機構70に含まれるミラー角度変更モータ(図示せず)は、PC100に接続されている。ミラー角度制御部110は、ミラー角度変更モータの作動を制御することにより、ハーフミラー42の角度を変化させて撮像角度を切り替える。このため、ミラー角度切替機構70およびミラー角度制御部110は、撮像角度を切り替える撮像角度切替手段として機能する。   A mirror angle changing motor (not shown) included in the mirror angle switching mechanism 70 is connected to the PC 100. The mirror angle control unit 110 switches the imaging angle by changing the angle of the half mirror 42 by controlling the operation of the mirror angle changing motor. For this reason, the mirror angle switching mechanism 70 and the mirror angle control unit 110 function as an imaging angle switching unit that switches the imaging angle.

記憶部112はハードディスクにより構成されており、基板検査に利用される判定基準データが予め格納されている。また、検査部118による検査結果なども記憶部112に格納される。画像処理部114は、走査ユニット30のラインセンサ38によって撮像され生成された画像データに画像処理を施す。メモリ116は、画像処理が施された画像データなどを保持する。   The storage unit 112 is configured by a hard disk, and preliminarily stores determination criterion data used for substrate inspection. In addition, the inspection result by the inspection unit 118 is also stored in the storage unit 112. The image processing unit 114 performs image processing on image data captured and generated by the line sensor 38 of the scanning unit 30. The memory 116 holds image data subjected to image processing.

検査部118は、メモリ116に保持された画像データを解析し、まず基準データを取得する。ここで基準データは、例えば基板2に設けられた、基板2の位置を示す認識マークの位置データ、基板2に設けられたバーコードなどの識別マークを解析することにより得られる基板2シリアルナンバーや製造年月日などの識別データを含む。   The inspection unit 118 analyzes the image data held in the memory 116 and first acquires reference data. Here, the reference data includes, for example, the position data of the recognition mark indicating the position of the substrate 2 provided on the substrate 2, the substrate 2 serial number obtained by analyzing the identification mark such as a barcode provided on the substrate 2, and the like. Includes identification data such as date of manufacture.

また、検査部118は、メモリ116に保持された画像データを解析し、さらに取得した基準データを利用して、基板2に実装される各部品やハンダ個所の位置を示す位置情報データを取得する。検査部118は、記憶部112に格納された判定基準データを利用して、基板2の部品の実装状態に関する総合的な検査を実施する。なお、部品の実装状態とは、被検査体としての基板2に実装される素子など部品の有無、位置、適正な部品か等だけではなく、ハンダの有無、ハンダの量、ブリッジの有無、部品の高さ等を含む。   Further, the inspection unit 118 analyzes the image data held in the memory 116, and acquires position information data indicating the position of each component or solder location mounted on the board 2 using the acquired reference data. . The inspection unit 118 performs comprehensive inspection on the mounting state of the components on the board 2 using the determination reference data stored in the storage unit 112. The component mounting state is not only the presence / absence / position of a component such as an element mounted on the board 2 as an object to be inspected, whether it is a proper component, etc. Including the height of

検査部118は、記憶部112に保持された基準データおよび位置情報データを利用して、基板2に実装される部品の高さを算出する。このため、検査部118は高さ算出部としても機能する。   The inspection unit 118 calculates the height of the component mounted on the board 2 using the reference data and the position information data held in the storage unit 112. For this reason, the inspection unit 118 also functions as a height calculation unit.

具体的には、走査ユニット30は、それぞれ異なる視点で見た基板2の被検査面を走査するため、被検査面の高さがゼロの平面を基準とすると、高さがある部分はそれぞれの走査ユニットにより得られる画像の位置が異なることになる。本実施形態では、走査ユニット30が傾斜撮像角度に基板2を走査するときの角度は基板2表面の鉛直方向に対して45度と予め決まっている。検査部118は、これを利用して、記憶部112に保持された位置情報データが示す各部品位置のずれ量に基づいて基板2に実装される部品の高さを算出する。記憶部112には、基板2における部品の高さに関する検査基準データが予め格納されている。検査部118は、記憶部112に格納された検査基準データを利用して、例えば検査基準データが示す正常範囲の高さに各部品の高さが入っているか否かを判定する高さ検査を実施する。これにより、例えば電子部品の足と基板との間に異物が挟まっているかなどを検出することが可能となる。   Specifically, since the scanning unit 30 scans the surface to be inspected of the substrate 2 viewed from different viewpoints, if the surface of the surface to be inspected is based on a plane having a height of zero, each portion having a height is The position of the image obtained by the scanning unit will be different. In the present embodiment, the angle at which the scanning unit 30 scans the substrate 2 at the tilted imaging angle is predetermined as 45 degrees with respect to the vertical direction of the surface of the substrate 2. The inspection unit 118 uses this to calculate the height of the component mounted on the board 2 based on the amount of displacement of each component position indicated by the position information data held in the storage unit 112. The storage unit 112 stores in advance inspection reference data relating to the height of components on the substrate 2. The inspection unit 118 uses the inspection reference data stored in the storage unit 112 to perform a height inspection to determine whether the height of each component is within the normal range height indicated by the inspection reference data, for example. carry out. As a result, for example, it is possible to detect whether a foreign object is sandwiched between the legs of the electronic component and the substrate.

表示制御部120は、検査部118による基板2の総合的な検査結果をディスプレイ130に表示させる。このとき表示制御部120は、メモリ116に格納された画像データを利用して、基板2を鉛直上方から見た画像を、異常がある部品の位置を明示しながらディスプレイ130に表示させてもよい。   The display control unit 120 causes the display 130 to display a comprehensive inspection result of the substrate 2 by the inspection unit 118. At this time, using the image data stored in the memory 116, the display control unit 120 may cause the display 130 to display an image of the substrate 2 as viewed from vertically above while clearly indicating the position of the component having an abnormality. .

図8は、本実施形態に係る基板検査システム10の基板検査処理工程を示すフローチャートである。本フローチャートにおける処理は、基板検査システム10に設けられたスタートボタンがユーザによって押されたときに開始する。   FIG. 8 is a flowchart showing a substrate inspection processing process of the substrate inspection system 10 according to the present embodiment. The processing in this flowchart starts when a start button provided in the substrate inspection system 10 is pressed by the user.

ユーザはマウスやキーボードなどの入力装置を用いて、主走査方向の変更指示を入力することができる。回転制御部104は、主走査方向の変更指示が入力されたか否かを判定する(S10)。   The user can input an instruction to change the main scanning direction using an input device such as a mouse or a keyboard. The rotation control unit 104 determines whether an instruction to change the main scanning direction has been input (S10).

主走査方向の変更指示がユーザによって入力された場合(S10のY)、回転制御部104は、回転機構26のユニット回転モータに駆動信号を供給して、ユニット初期位置から主走査角度αとして設定されいる45度だけ撮像ユニット24を回転させる(S12)。これにより、基板2の幅方向または長さ方向に並んで実装された部品の間など、検査の死角となる範囲を低減させることができる。なお、入力装置を用いて主走査角度αが入力可能となっていてもよい。主走査角度αが入力された場合、回転制御部104は、ユニット初期位置から入力された主走査角度αだけ撮像ユニット24を回転させる。主走査方向の変更指示の入力が場合(S10のN)、S12をスキップする。   When an instruction to change the main scanning direction is input by the user (Y in S10), the rotation control unit 104 supplies a drive signal to the unit rotation motor of the rotation mechanism 26 and sets it as the main scanning angle α from the unit initial position. The imaging unit 24 is rotated by 45 degrees (S12). Thereby, the range which becomes a blind spot of a test | inspection, such as between the components mounted along with the width direction or the length direction of the board | substrate 2, can be reduced. The main scanning angle α may be input using an input device. When the main scanning angle α is input, the rotation control unit 104 rotates the imaging unit 24 by the main scanning angle α input from the unit initial position. When an instruction to change the main scanning direction is input (N in S10), S12 is skipped.

次に撮像制御部108および搬送制御部102は、往路において通常撮像処理を実行する(S14)。この通常撮像処理では、回転制御部104はミラー角度θを45度に保持した状態とし、搬送制御部102は第1方向に基板2を搬送する。   Next, the imaging control unit 108 and the conveyance control unit 102 perform normal imaging processing in the forward path (S14). In this normal imaging process, the rotation control unit 104 maintains the mirror angle θ at 45 degrees, and the transport control unit 102 transports the substrate 2 in the first direction.

基板2が撮像システム14の下方に搬入されると、撮像制御部108は、ラインセンサ38に基板2の撮像を開始させる。具体的には、照明制御部106が第2光源54を点灯させて基板の上面に白色の光を落射させ、撮像制御部108はこのタイミングで基板2からの反射光をラインセンサ38に撮像させる。次に照明制御部106が第1光源52を点灯させて緑色の光を基板の上面に落射させ、撮像制御部108は、このタイミングで基板からの反射光をラインセンサ38に撮像させる。次に照明制御部106が第3光源56を点灯させて基板の上面に青色の光を落射させ、撮像制御部108は、このタイミングで基板2からの反射光をラインセンサ38に撮像させる。このように、照明制御部106は、一走査単位につき3回異なる色の落射光を基板に投じ、撮像制御部108は、各色での落射光の基板による反射光をラインセンサ38に撮像させる。以下、これを1ラインの第1撮像という。   When the substrate 2 is carried below the imaging system 14, the imaging control unit 108 causes the line sensor 38 to start imaging the substrate 2. Specifically, the illumination control unit 106 turns on the second light source 54 to make white light fall on the upper surface of the substrate, and the imaging control unit 108 causes the line sensor 38 to capture the reflected light from the substrate 2 at this timing. . Next, the illumination control unit 106 turns on the first light source 52 to cause the green light to fall on the upper surface of the substrate, and the imaging control unit 108 causes the line sensor 38 to image the reflected light from the substrate at this timing. Next, the illumination control unit 106 turns on the third light source 56 to make blue light fall on the upper surface of the substrate, and the imaging control unit 108 causes the line sensor 38 to image the reflected light from the substrate 2 at this timing. As described above, the illumination control unit 106 projects incident light of different colors three times per scanning unit on the substrate, and the imaging control unit 108 causes the line sensor 38 to capture reflected light of the incident light of each color by the substrate. Hereinafter, this is referred to as 1-line first imaging.

1ラインの第1撮像が終了すると、搬送制御部102は、基板を搬送方向に所定の走査ライン間隔だけ移動させ、照明制御部106およびラインセンサ38は再び1ラインの第1撮像を実施する。照明制御部106、撮像制御部108、および搬送制御部102は、基板の撮像処理においてこの動作を繰り返すことにより、検査対象となる基板の全上面を撮像する。   When the first imaging of one line is completed, the conveyance control unit 102 moves the substrate in the conveyance direction by a predetermined scanning line interval, and the illumination control unit 106 and the line sensor 38 again perform the first imaging of one line. The illumination control unit 106, the imaging control unit 108, and the conveyance control unit 102 repeat this operation in the imaging process of the substrate, thereby imaging the entire upper surface of the substrate to be inspected.

ここで、撮像ユニット24が回転されて主走査方向が変更されている場合、搬送制御部102は、搬送方向における各走査ラインの間隔がL×cosαになるよう基板2を搬送させる。本実施形態ではαは45度に設定されていることから、搬送制御部102は、搬送方向における各走査ラインの間隔がL×√2になるよう基板2を搬送させる。このLは、基板2がユニット初期位置にあるときの基板2の被検査面における各走査ラインの間隔を示す。これにより、基板2がユニット初期位置にあるときに比べ、搬送方向の解像度を1/cosα、即ち1/√2に高めることができる。また、このように基板2の搬送速度を調整することにより、搬送方向の解像度を基板幅方向の解像度に合わせることができる。   Here, when the imaging unit 24 is rotated and the main scanning direction is changed, the conveyance control unit 102 conveys the substrate 2 so that the interval between the scanning lines in the conveyance direction becomes L × cos α. In this embodiment, since α is set to 45 degrees, the transport control unit 102 transports the substrate 2 so that the interval between the scanning lines in the transport direction is L × √2. This L indicates the interval between the scanning lines on the surface to be inspected of the substrate 2 when the substrate 2 is in the unit initial position. Accordingly, the resolution in the transport direction can be increased to 1 / cos α, that is, 1 / √2, compared to when the substrate 2 is at the unit initial position. Further, by adjusting the transport speed of the substrate 2 in this way, the resolution in the transport direction can be matched with the resolution in the substrate width direction.

本実施形態に係る基板検査システム10では、ユーザは、入力装置を用いてPC100にステレオ撮像モードまたは通常撮像モードを択一的に選択することが可能となっている。往路における第1撮像処理を終了すると、ミラー角度制御部110は、ユーザによってステレオ撮像モードが選択されているか否かを判定する(S16)。ステレオ撮像モードが選択されている場合(S16のY)、ミラー角度制御部110は、ミラー角度切替機構70を作動させてハーフミラー42をミラー回転角度θ1だけ回転させてその角度を変更させる(S18)。   In the board inspection system 10 according to the present embodiment, the user can alternatively select the stereo imaging mode or the normal imaging mode for the PC 100 using the input device. When the first imaging process in the forward path is finished, the mirror angle control unit 110 determines whether or not the stereo imaging mode is selected by the user (S16). When the stereo imaging mode is selected (Y in S16), the mirror angle control unit 110 operates the mirror angle switching mechanism 70 to rotate the half mirror 42 by the mirror rotation angle θ1 and change the angle (S18). ).

ハーフミラー42の角度変更が終了すると、撮像制御部108および搬送制御部102は、復路において傾斜撮像処理を実行する(S20)。この傾斜撮像処理では、搬送制御部102は第2方向に基板2を搬送させる。   When the angle change of the half mirror 42 is completed, the imaging control unit 108 and the conveyance control unit 102 execute the tilt imaging process in the return path (S20). In the tilt imaging process, the transport control unit 102 transports the substrate 2 in the second direction.

傾斜撮像処理では、照明制御部106が第2光源54を点灯させて基板の上面に白色の光を落射させ、撮像制御部108はこのタイミングで基板2からの反射光をラインセンサ38に撮像させる。以下、これを1ラインの第2撮像という。1ラインの第2撮像が終了すると、搬送制御部102は、基板を搬送方向に所定の走査ライン間隔だけ移動させ、照明制御部106およびラインセンサ38は再び1ラインの第2撮像を実施する。照明制御部106、撮像制御部108、および搬送制御部102は、基板の撮像処理においてこの動作を繰り返すことにより、検査対象となる基板の全上面を撮像する。なお、走査ライン間隔および搬送速度は往路と同様である。   In the tilt imaging process, the illumination control unit 106 turns on the second light source 54 and causes white light to fall on the upper surface of the substrate, and the imaging control unit 108 causes the line sensor 38 to capture the reflected light from the substrate 2 at this timing. . Hereinafter, this is referred to as one-line second imaging. When the second imaging of one line is completed, the conveyance control unit 102 moves the substrate in the conveyance direction by a predetermined scanning line interval, and the illumination control unit 106 and the line sensor 38 again perform the second imaging of one line. The illumination control unit 106, the imaging control unit 108, and the conveyance control unit 102 repeat this operation in the imaging process of the substrate, thereby imaging the entire upper surface of the substrate to be inspected. The scanning line interval and the conveyance speed are the same as those in the forward path.

このようにミラー角度制御部110は、ステレオ撮像モードが選択された場合、ハーフミラー42の角度を変更することによって、基板の2の垂線に対する角度の絶対値が互いに異なる垂直撮像角度と傾斜撮像角度とを切り替える。このようにステレオ撮像モードにおいても垂直撮像角度から見た基板2の画像データを取得することで、基板2における部品の高さ以外の様々な項目についてこの画像データを利用して検査を実施することが可能となる。   As described above, when the stereo imaging mode is selected, the mirror angle control unit 110 changes the angle of the half mirror 42, thereby changing the vertical imaging angle and the tilt imaging angle in which the absolute values of the angles with respect to the two perpendiculars of the substrate are different from each other. And switch. As described above, by acquiring the image data of the board 2 viewed from the vertical imaging angle even in the stereo imaging mode, various items other than the height of the components on the board 2 are used to perform inspection using the image data. Is possible.

なお、ミラー角度制御部110は、垂直撮像角度と傾斜撮像角度とを切り替えるだけでなく、被検査面の垂線に対する角度の絶対値が互いに異なる撮像角度から見た基板2の映像をラインセンサ38が走査できるよう撮像角度を切り替えるてもよい。この場合も、ミラー角度制御部110は、ラインセンサ38から基板2への光路長が変化しないよう撮像角度を切り替える。   The mirror angle control unit 110 not only switches between the vertical imaging angle and the tilt imaging angle, but the line sensor 38 displays an image of the substrate 2 viewed from imaging angles having different absolute values with respect to the normal of the surface to be inspected. You may switch an imaging angle so that it can scan. Also in this case, the mirror angle control unit 110 switches the imaging angle so that the optical path length from the line sensor 38 to the substrate 2 does not change.

また、ミラー角度制御部110は、往路と復路とでラインセンサが被検査面の垂線に対する角度の絶対値が互いに異なる複数の撮像角度から見た被検査体の映像を択一的に走査することができるよう、基板2に対する撮像角度を切り替える。これにより、往復移動させる一工程において、互いに異なる複数の撮像角度から見た基板2の画像データを取得することができる。   In addition, the mirror angle control unit 110 alternatively scans the image of the inspected object viewed from a plurality of imaging angles in which the absolute value of the angle with respect to the normal of the inspected surface is different between the forward path and the return path. The imaging angle with respect to the substrate 2 is switched so that Thereby, the image data of the board | substrate 2 seen from the mutually different several imaging angle is acquirable in 1 process to reciprocate.

こうして傾斜撮像処理を終了して基板2の全撮像工程を完了すると、検査部118は、各部品の高さを算出する(S22)。なお、通常撮像モードが選択されている場合(S16のN)、S18〜S22をスキップする。次に検査部118は、基板2に実装される部品の位置ずれ欠品、ハンダのヌレ、ハンダブリッジの有無、実装部品の間違い、極性の反転などに関する総合検査を実行する(S24)。なお、ステレオ撮像モードが選択されている場合、検査部118は、算出された各部品の高さを利用して、基板との間に異物が挟まって電子部品の足が浮いているかなどの高さ検査も総合判定の一部をして実施する。総合検査を終了すると、表示制御部120は、総合検査結果をディスプレイ130に表示する(S26)。   When the tilt imaging process is thus completed and the entire imaging process of the substrate 2 is completed, the inspection unit 118 calculates the height of each component (S22). When the normal imaging mode is selected (N in S16), S18 to S22 are skipped. Next, the inspecting unit 118 performs comprehensive inspection regarding misplaced parts of components mounted on the board 2, solder slip, presence / absence of solder bridge, wrong mounting components, polarity reversal, and the like (S24). When the stereo imaging mode is selected, the inspection unit 118 uses the calculated height of each component to determine whether a foreign object is sandwiched between the substrate and the electronic component is floating. The inspection is also carried out as part of the overall judgment. When the comprehensive inspection is finished, the display control unit 120 displays the comprehensive inspection result on the display 130 (S26).

本発明は上述の各実施形態に限定されるものではなく、各実施形態の各要素を適宜組み合わせたものも、本発明の実施形態として有効である。また、当業者の知識に基づいて各種の設計変更等の変形を各実施形態に対して加えることも可能であり、そのような変形が加えられた実施形態も本発明の範囲に含まれうる。以下、そうした例をあげる。   The present invention is not limited to the above-described embodiments, and an appropriate combination of the elements of each embodiment is also effective as an embodiment of the present invention. Various modifications such as design changes can be added to each embodiment based on the knowledge of those skilled in the art, and embodiments to which such modifications are added can also be included in the scope of the present invention. Here are some examples.

ある変形例では、搬送レール20上にターンテーブルが設けられる。ターンテーブルはモータが作動することにより回転するよう構成されている。ユーザによってPC100に主走査角度αが入力された後スタートボタンが押されると、回転制御部104は、このモータを作動させてターンテーブルを主走査角度αだけ回転させる。このように撮像ユニット24を回転させる代わりに基板2を回転させることによっても、主走査角度αを変更することができる。   In a modification, a turntable is provided on the transport rail 20. The turntable is configured to rotate when the motor operates. When the user inputs the main scanning angle α to the PC 100 and then presses the start button, the rotation control unit 104 operates the motor to rotate the turntable by the main scanning angle α. Thus, the main scanning angle α can also be changed by rotating the substrate 2 instead of rotating the imaging unit 24.

本実施形態に係る基板検査システムの構成を示す図である。It is a figure showing composition of a substrate inspection system concerning this embodiment. 本実施形態に係る撮像ユニットの内部構成を示す斜視図である。It is a perspective view which shows the internal structure of the imaging unit which concerns on this embodiment. 本実施形態に係る撮像ユニットの構成を模式的に表した図である。It is the figure which represented typically the structure of the imaging unit which concerns on this embodiment. 第1走査ユニットの主光線の光路を示す図である。It is a figure which shows the optical path of the chief ray of a 1st scanning unit. 本実施形態に係る第1走査ユニットを主走査方向に見た図である。It is the figure which looked at the 1st scanning unit concerning this embodiment in the main scanning direction. ユニット初期位置にあるときの撮像ユニットと、回転機構によりユニット初期位置から回転された位置にあるときの撮像ユニットとを示す上面図である。It is a top view which shows the imaging unit when it exists in a unit initial position, and the imaging unit when it exists in the position rotated from the unit initial position by the rotation mechanism. 本実施形態に係る基板検査システムの機能ブロック図である。It is a functional block diagram of the board | substrate inspection system which concerns on this embodiment. 本実施形態に係る基板検査システムの基板検査処理工程を示すフローチャートである。It is a flowchart which shows the board | substrate inspection process process of the board | substrate inspection system which concerns on this embodiment.

符号の説明Explanation of symbols

2 基板、 10 基板検査システム、 12 基板搬送機構、 14 撮像システム、 24 撮像ユニット、 26 回転機構、 30 走査ユニット、 36 支持プレート、 38 ラインセンサ、 39 レンズ、 40 テレセントリックレンズ、 42 ハーフミラー、 50 照明ユニット、 52 第1光源、 54 第2光源、 56 第3光源、 70 ミラー角度切替機構、 72 搬送モータ、 100 PC、 102 搬送制御部、 104 回転制御部、 106 照明制御部、 108 撮像制御部、 110 ミラー角度制御部、 112 記憶部、 118 検査部、 120 表示制御部、 130 ディスプレイ。   2 substrates, 10 substrate inspection system, 12 substrate transport mechanism, 14 imaging system, 24 imaging unit, 26 rotating mechanism, 30 scanning unit, 36 support plate, 38 line sensor, 39 lens, 40 telecentric lens, 42 half mirror, 50 illumination Unit 52 first light source 54 second light source 56 third light source 70 mirror angle switching mechanism 72 transport motor 100 PC 102 transport control unit 104 rotation control unit 106 illumination control unit 108 imaging control unit 110 mirror angle control unit, 112 storage unit, 118 inspection unit, 120 display control unit, 130 display.

Claims (6)

ライン状のセンサ列と、
被検査面の垂線に対する角度の絶対値が互いに異なる撮像角度から見た被検査体の映像を前記ライン状のセンサ列が走査できるよう撮像角度を切り替える撮像角度切替手段と、
を備え、
前記撮像角度切替手段は、前記ライン状のセンサ列から被検査体への光路長が変化しないよう撮像角度を切り替えることを特徴とする被検査体の検査装置。
A line-shaped sensor array;
An imaging angle switching means for switching the imaging angle so that the line-shaped sensor array can scan the image of the inspected object viewed from imaging angles having different absolute values with respect to the normal of the surface to be inspected;
With
The inspection apparatus for inspecting an object to be inspected, wherein the imaging angle switching means switches an imaging angle so that an optical path length from the linear sensor array to the inspection object does not change.
前記撮像角度切替手段は、被検査体からの光を前記ライン状のセンサ列に向けて反射するミラーの角度を、前記ライン状のセンサ列から被検査体への光路長が変化しないよう変更して撮像角度を切り替えることを特徴とする請求項1に記載の被検査体の検査装置。   The imaging angle switching means changes the angle of the mirror that reflects the light from the inspected object toward the line-shaped sensor array so that the optical path length from the line-shaped sensor array to the inspected object does not change. The inspecting device for an object to be inspected according to claim 1, wherein the imaging angle is switched. 前記撮像角度切替手段は、被検査面に対して垂直に被検査体を見る垂直撮像角度と、被検査面に対して傾斜して被検査体を見る傾斜撮像角度とを切り替えることを特徴とする請求項1または2に記載の被検査体の検査装置。   The imaging angle switching means switches between a vertical imaging angle for viewing the object to be inspected perpendicular to the surface to be inspected and a tilted imaging angle for viewing the object to be inspected with respect to the surface to be inspected The inspection apparatus for an object to be inspected according to claim 1 or 2. 前記撮像角度切替手段は、主走査方向に見て、垂直撮像角度から被検査体の映像を走査するときのミラーの反射ポイントを原点とし、原点を含む水平軸をx軸、原点を含む垂直軸をy軸とし、原点から被検査体までの距離をA1、ミラーの回転角度をθ1としたとき、以下の座標、
Figure 2010107249
を中心としてミラーを回転させることにより垂直撮像角度と傾斜撮像角度とを切り替えることを特徴とする請求項1から3のいずれかに記載の被検査体の検査装置。
The imaging angle switching means has a mirror reflection point when scanning an image of the object to be inspected from a vertical imaging angle as viewed in the main scanning direction, and the horizontal axis including the origin is the x axis and the vertical axis including the origin Is the y axis, the distance from the origin to the object to be inspected is A1, and the rotation angle of the mirror is θ1, the following coordinates:
Figure 2010107249
The inspection apparatus for an object to be inspected according to any one of claims 1 to 3, wherein the vertical imaging angle and the tilt imaging angle are switched by rotating a mirror around the center.
前記ライン状のセンサ列による走査位置と被検査体の位置とを相対的に往復移動させる移動手段をさらに備え、
前記撮像角度切替手段は、往路と復路とで、被検査面の垂線に対する角度の絶対値が互いに異なる撮像角度から見た被検査体の映像を前記ライン状のセンサ列が走査できるよう撮像角度を切り替えることを特徴とする請求項1から4のいずれかに記載の被検査体の検査装置。
A moving unit that reciprocally moves the scanning position of the line-shaped sensor array and the position of the object to be inspected;
The imaging angle switching means sets the imaging angle so that the line-shaped sensor array can scan the image of the inspected object viewed from the imaging angle in which the absolute value of the angle with respect to the normal of the inspection surface is different between the forward path and the return path. 5. The inspection object inspection apparatus according to claim 1, wherein the inspection object inspection apparatus is switched.
前記ライン状のセンサ列は、被検査体からの反射光をレンズ光軸に対して平行に集光する光学系を介して被検査体の映像を走査することを特徴とする請求項1から5のいずれかに記載の被検査体の検査装置。   6. The line-shaped sensor array scans an image of an object to be inspected through an optical system that collects reflected light from the object to be inspected in parallel with a lens optical axis. An inspection apparatus for an object to be inspected according to any one of the above.
JP2008277341A 2008-10-28 2008-10-28 Inspection device for inspection object Active JP5296490B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008277341A JP5296490B2 (en) 2008-10-28 2008-10-28 Inspection device for inspection object

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008277341A JP5296490B2 (en) 2008-10-28 2008-10-28 Inspection device for inspection object

Publications (2)

Publication Number Publication Date
JP2010107249A true JP2010107249A (en) 2010-05-13
JP5296490B2 JP5296490B2 (en) 2013-09-25

Family

ID=42296845

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008277341A Active JP5296490B2 (en) 2008-10-28 2008-10-28 Inspection device for inspection object

Country Status (1)

Country Link
JP (1) JP5296490B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015206752A (en) * 2014-04-23 2015-11-19 株式会社サキコーポレーション Inspection device
CN112595718A (en) * 2020-12-04 2021-04-02 英华达(上海)科技有限公司 Imaging system, optical detection system, imaging method, imaging apparatus, and storage medium
WO2023238480A1 (en) * 2022-06-08 2023-12-14 株式会社ヴィーネックス Optical line sensor

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08254500A (en) * 1995-03-16 1996-10-01 Saki Corp:Kk Appearance inspection device
JPH08328171A (en) * 1995-05-31 1996-12-13 Saki Corp:Kk Stereoscopic image input device and its input method
JPH1123239A (en) * 1997-06-27 1999-01-29 Nippon Electro Sensari Device Kk Inspection apparatus
JP2001197521A (en) * 2000-01-06 2001-07-19 Toppan Printing Co Ltd Image pickup device, image pickup method, and storage medium recording data relating to image pickup condition
JP2002181730A (en) * 2000-12-12 2002-06-26 Saki Corp:Kk Visual inspection apparatus
JP2007082005A (en) * 2005-09-15 2007-03-29 Ricoh Co Ltd Image reading apparatus and image reading method
JP2007192598A (en) * 2006-01-17 2007-08-02 Saki Corp:Kk Device for inspecting object to be inspected
JP2008130771A (en) * 2006-11-20 2008-06-05 Matsushita Electric Ind Co Ltd Component recognition method

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08254500A (en) * 1995-03-16 1996-10-01 Saki Corp:Kk Appearance inspection device
JPH08328171A (en) * 1995-05-31 1996-12-13 Saki Corp:Kk Stereoscopic image input device and its input method
JPH1123239A (en) * 1997-06-27 1999-01-29 Nippon Electro Sensari Device Kk Inspection apparatus
JP2001197521A (en) * 2000-01-06 2001-07-19 Toppan Printing Co Ltd Image pickup device, image pickup method, and storage medium recording data relating to image pickup condition
JP2002181730A (en) * 2000-12-12 2002-06-26 Saki Corp:Kk Visual inspection apparatus
JP2007082005A (en) * 2005-09-15 2007-03-29 Ricoh Co Ltd Image reading apparatus and image reading method
JP2007192598A (en) * 2006-01-17 2007-08-02 Saki Corp:Kk Device for inspecting object to be inspected
JP2008130771A (en) * 2006-11-20 2008-06-05 Matsushita Electric Ind Co Ltd Component recognition method

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015206752A (en) * 2014-04-23 2015-11-19 株式会社サキコーポレーション Inspection device
CN112595718A (en) * 2020-12-04 2021-04-02 英华达(上海)科技有限公司 Imaging system, optical detection system, imaging method, imaging apparatus, and storage medium
WO2023238480A1 (en) * 2022-06-08 2023-12-14 株式会社ヴィーネックス Optical line sensor

Also Published As

Publication number Publication date
JP5296490B2 (en) 2013-09-25

Similar Documents

Publication Publication Date Title
WO2009090871A1 (en) Apparatus for inspecting subject to be inspected
JP2006234553A (en) Visual inspection device and visual inspection method
US7751611B2 (en) Apparatus for inspecting appearance of inspection piece
EP3832295A1 (en) Device and method for checking for surface defect, using image sensor
JP5660810B2 (en) Adsorption nozzle inspection device for component mounting machines
TWI507660B (en) 3d vision inspection method and 3d vision inspection apparatus for light emitting diode
JP2007147433A (en) Flaw inspection method of ceramic plate and flaw inspection device therefor
JP2010151479A (en) Wiring pattern inspecting device
JP4687248B2 (en) Appearance inspection device
US20190132524A1 (en) Image generation method, image generation apparatus, and defect determination method using image generation method and image generation apparatus
JP5296490B2 (en) Inspection device for inspection object
JP2007322166A (en) Printed board inspection device
JP2008300456A (en) Inspection system for inspection subject
JP2009092485A (en) Print solder inspection device
JP2007033202A (en) Visual inspection apparatus and visual inspection method
JP5272784B2 (en) Optical inspection method and optical inspection apparatus
JP2007334423A (en) Automatic photographing device
JP6339849B2 (en) Inspection device
JP2010107250A (en) Device of inspecting inspection object
JP2007333672A (en) Apparatus and method for visual inspection
JP2007192597A (en) Device for inspecting object to be inspected
JP4714462B2 (en) Device for inspecting appearance of object
JP2007192598A (en) Device for inspecting object to be inspected
JP6508763B2 (en) Surface inspection device
JP6358527B2 (en) Inspection device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20110914

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120911

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130207

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130219

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130422

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130604

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130613

R150 Certificate of patent or registration of utility model

Ref document number: 5296490

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250