JP4228773B2 - Board inspection equipment - Google Patents

Board inspection equipment Download PDF

Info

Publication number
JP4228773B2
JP4228773B2 JP2003134977A JP2003134977A JP4228773B2 JP 4228773 B2 JP4228773 B2 JP 4228773B2 JP 2003134977 A JP2003134977 A JP 2003134977A JP 2003134977 A JP2003134977 A JP 2003134977A JP 4228773 B2 JP4228773 B2 JP 4228773B2
Authority
JP
Japan
Prior art keywords
image
solder
ray
inspection
component
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2003134977A
Other languages
Japanese (ja)
Other versions
JP2004340632A (en
Inventor
佳久 角田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2003134977A priority Critical patent/JP4228773B2/en
Publication of JP2004340632A publication Critical patent/JP2004340632A/en
Application granted granted Critical
Publication of JP4228773B2 publication Critical patent/JP4228773B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

【0001】
【発明の属する技術分野】
本発明は、例えば、IC(Integrated Circuit)チップ等の部品が実装されるプリント基板の検査に適用して好適な、基板検査装置に関する。
【0002】
【従来の技術】
従来、X線を利用したX線基板検査装置は、例えば、高密度基板実装に使用されるICパッケージのBGA(Ball Grid Array)内部の半田状態の検査等の目的に使用されている。実装基板の検査はそれだけでは完結せず、実装する部品チップの部品極性や位置ずれ、品種違いは可視光を利用しての光学画像による光学基板検査装置で行っている(例えば、特許文献1参照。)。
【0003】
【特許文献1】
特開平11−295242号公報
【0004】
【発明が解決しようとする課題】
しかしながら、光学画像では見にくい半田フィレットを全てX線で見ようとすると、部品と半田の区別がつかず、検査できないものも存在するという問題があった。また、光学基板検査装置とX線基板検査装置を、二台シリーズに配置すると、コスト・スペースに大変不利であった。
【0005】
斯かる点に鑑み、本発明は、例えばX線画像を使用して基板検査を行う際、X線画像では半田と部品の区別がつかない部品など、X線画像と光学画像とを検査対象に応じて組み合わせて検査することで最適な検査を行うことを目的とする。
【0006】
【課題を解決するための手段】
本発明の基板検査装置は、品を実装する被検査対象物へ照射されたX線の透過X線画像を撮像するX線撮像部と、前記被検査対象物を撮像する可視光撮像部と前記X線撮像部で得られる前記部品および該部品を固定している半田を含むX線画像に、前記可視光撮像部で得られる光学画像の前記部品に相当する部分を合成して、前記X線画像の部品相当部分を前記光学画像の部品相当部分で置き換えた合成画像を生成する画像処理手段と、前記被検査対象物に実装される部品に応じて、前記X線画像、前記光学画像、あるいは前記X線画像と前記光学画像の合成画像による検査を選択する選択手段と、を備えることを特徴とする。
【0007】
また、上述した基板検査装置においては、前記画像処理手段により、前記X線画像における半田部分の半田全体の重心位置と、前記X線画像における半田部分のうち高輝度部の重心位置との差を得、前記半田部分の半田全体の重心位置と前記半田部分のうち高輝度部の重心位置との差に基づいて、前記半田の形状を検査する。
【0008】
また、上述した基板検査装置においては、前記画像処理手段により、前記X線画像における対向する半田部分の半田全体の重心位置間の距離と、前記X線画像における対向する半田部分のうち高輝度部の重心位置間の距離との差を得、前記対抗する半田部分の半田全体の重心位置間の距離と前記対向する半田部分のうち高輝度部の重心位置間の距離との差に基づいて、前記部品の有無を検査する
【0009】
斯かる本発明によれば、光学画像及びX線画像を組み合わせ加工し、加工された合成画像により、例えば、X線画像では半田か部品か区別のつかない部品の半田または部品の判別を行うことができるようになる。また、選択手段により、基板に実装される部品の種類に応じて、それぞれX線画像、光学画像、合成画像、またはこれらの組み合わせによる最適な検査が選択される。
【0010】
また、本発明においては、X線照射によって、基板上の広範囲にわたる輝度分布を一回に得て、この輝度分布により算出される半田状態により半田付けの良否を判定することができる。特に、X線画像における半田部分の半田全体の重心位置と半田部分のうち高輝度部の重心位置との差に基づいて、該当半田の形状を検査することが好適である。正常な半田ではこの差が大きくなる。
【0011】
さらに、本発明においては、X線画像における対向する半田部分の半田全体の重心位置間の距離と、X線画像における対向する半田部分のうち高輝度部の重心位置間の距離との差に基づいて、該当半田の形状を検査することが好適である。正常な半田の場合、半田部分のうち高輝度部の重心位置が半田全体の重心位置より外側に存在するので、この差が大きくなる。
【0014】
【発明の実施の形態】
以下、図1〜図11を参照して、本発明の基板検査装置の一実施の形態の例、及び、この例に適用される基板検査方法について説明する。
【0015】
図1は本例の基板検査装置の概略機器構成図である。1は被検査対象物の画像データを収集し、データ処理装置へと供給するデータ収集装置を示す。X線が出射されるX線源6を、ICチップ等の部品が搭載される検査対象基板(以下、単に基板と称する。)5下方に配置する。検査対象基板5上方には、光学撮像部としての光学CCDカメラ2及びX線撮像部としてのX線受光CCDカメラ3を配置する。光学CCDカメラ2及びX線受光CCDカメラ3は、例えば機構部4を備え、自動的にまたは利用者の操作により、紙面と垂直方向の平面上を移動し、位置決めが行われるとする。あるいは、基板5を紙面と垂直方向の平面上を移動可能な図示しないXYステージ上に載置し、XYステージを動かして基板5の位置決めを行うようにしてもよい。また、X線源6に機構部を設けて移動可能としてもよい。
【0016】
X線を利用する装置はもれ放射線を防ぐために密閉したケース内に収められるため、ケース内は真っ暗であるので、可視光線を得る手段として通常照明が必要であるが、ここでは記載を省略している。
【0017】
10はデータ処理装置を示し、データ収集装置1で撮像されて送られた画像データの処理や加工、データの解析、操作手段としてのGUIを介してX線源1の照射X線の制御や、機構部4等の制御、あるいは基板5に実装される部品の種類に応じて適切な検査方法を選択するなどの制御を行う。このデータ処理装置10は、パーソナルコンピュータ等種々のものが考えられる。
【0018】
11はデータ収集装置の制御・演算を司るCPU、12はCPU11の制御プログラム等を格納したROM及びワークエリアとして機能するRAMよりなるメインメモリ、13は光学CCDカメラ2及びX線受光CCDカメラ3から送信される画像データを処理、加工する画像処理手段としての画像ボード、14は装置に必要な入出力を行うためのI/Oボード、15は機構部4などの位置決めを制御するモータボードである。また、16は、例えばLCDなどの表示手段と、キーボードやマウス、あるいはタッチパネル等の操作手段とから構成されるGUI(Graphical User Interface)である。これらのデバイスは、システムバス17により接続されデータの送受信が行われる。なお、データ収集装置1の各機器からデータ処理装置10の各ボードへの配線の表現は省略している。
【0019】
上述構成の基板検査装置において、検査対象基板5のX線画像を得る場合、機構部4を制御して、X線源1、検査対象基板5、X線受光CCDカメラ3が一直線上になるよう配置する。そして、X線源6から基板5に対しX線を照射すると、X線は基板5を透過し、基板5の上方に設けられたX線受光CCD3が透過X線を撮像する。そして、X線受光CCDカメラ3で撮像した画像データを画像ボード13へ送信し、画像処理を行い、GUI16の表示画面にX線画像を表示する。
【0020】
一方、検査対象基板5の光学画像を得る場合、機構部4を制御して、光学CCDカメラ2及び検査対象基板5が適切な位置関係になるよう配置する。そして、基板5を光学CCDカメラ2にて撮像し、光学CCDカメラ2が撮像した画像データを画像ボード13へ送信し、画像処理を行い、GUI16の表示画面に光学画像を表示する。
【0021】
画像ボード13は、X線画像及び光学画像を合成する画像処理手段としても機能し、必要に応じてCPU11からの指令により、メインメモリ12等に保持されたX線画像及び光学画像を使用して、合成処理を行い、作成した合成画像をGUI16の表示画面に表示させることができる。
【0022】
以下に、上述のような基板検査装置を用いて、基板上に実装されたチップ部品の半田付け状態を検査するのに、半田形状検査による半田付け良否判定方法について説明する。
【0023】
基板上のチップ部品、例えばチップ抵抗のX線画像を利用した半田形状検査について述べる。図2に、チップ部品が実装された基板の一部を撮像した光学画像の例を示す。図中、4つの部品があるように見えるが、両側がチップ部品あり、中央部はチップ部品が欠品している状態である。図3は、図2と同じ部位をX線により撮像したX線画像である。
【0024】
図3のX線画像を基に、X線画像スレッシュ表示したものを、図4に示す。X線画像スレッシュ表示は、図2に示すX線画像の輝度分布を表し、具体的には、8bit、256階調の輝度表示を、10階調毎に色分けして表示したものである。輝度の高い部分は、X線透過率の低いところ、つまり半田部分であってこの例では黄色または緑色で表示される。
【0025】
例えば、桃色以上の色を半田がある部分として、半田がある部分の半田全体の重心位置(+部)20aと、黄色以上の高輝度部の重心位置(+部)20bとのそれぞれの位置の差を計算することで、半田形状を検査することができる。重心位置の算出は、一例として、輝度分布から対象部分の面積を求めてその中心を算出することができ、例えば、画像処理ソフトウェアエンジンの関数を使用して求めることができる。また、X線画像の輝度分布から、チップ部品横の半田部断面の高さや半田のせり上がり具合がわかるので、半田フィレットの体積(半田量)を算出したりすることができる。
【0026】
レーザ光を半田部に照射して、その反射レーザ光を測定することで、半田部の高さを測る方法が知られているが、この従来の方法は、極小面積のレーザスポット単位で半田部の高さを測定するため、時間がかかっていた。本例のX線の輝度分布を利用した方法では、X線を基板全体に照射して、各部品の半田高さ測定処理がまとめてできるので、効率がよく、測定時間が短くてすむといる利点がある。
【0027】
図4のチップ部品の半田がある重心位置20aとこの部品上の対向する重心位置との距離をAとし、高輝度部の重心位置20bとこの部品上の対向する重心位置との距離をBとするなどとして、各パッド内の最高点どうしの距離を測定することで部品の有無を検査することが可能である。例えば、正常な半田フィレットa部は、最上点20bが画像のより外側に存在するが、チップ浮きや欠品のあるb部では最上点20bが中心、即ち重心20a近くに存在する。
【0028】
図5Aは、図4のa部のチップ部品の半田フィレット断面の模式図を示すものである。基板5上に載置されたチップ部品21に対し、正常な半田フィレット22が形成されている様子を表している。また、図5Bは、図4のb部のチップ部品の半田フィレット断面の模式図を示すものである。基板5上に載置されたチップ部品21に対し、不良な半田付けがなされた半田フィレット23が形成され、チップ部品21が浮いてしまっている様子を表している。このように、半田付けの良否を、面積、体積だけでなく、半田形状によって行い、より正確な判断が可能になる。
【0029】
図6は、あるチップ部品の半田部の立体図(3D図)である。X線画像の輝度の違いから半田部の断面の高さを検出し、メッシュ状に表示した立体図を作成して、図2〜図5に示す平面図を、この立体図によって、半田部の形状を視覚的に表現する。例えば、上述平面図によっては検査することが難しいような場合に、利用者のGUI16を介した指示によりまたは自動的に、CPU11から指令を出して立体図を作成し、半田形状を利用者が視覚的にチェックするときにこの立体図を合わせて使用することで、容易に半田形状が確認できる。
【0030】
次に、X線画像と光学画像との組み合わせによる半田検査について、チップ部品として、例えばチップコンデンサを例として説明する。図7のX線画像及び光学画像同じチップコンデンサを撮像したものである。このX線画像からわかるように、X線では、チップコンデンサのようにいわゆる黒ぬけ状態となって、半田と部品の区別がつかない部品が存在する。このような場合、X線画像では正確に半田部分の検査を行うことはできない。そこで、光学画像を利用し、画像ボード13にてX線画像及び光学画像を組み合わせ、X線画像から部品相当部分を切り抜き演算した加工画像を作成することで、半田部の正確な位置を知ることができる。図中、囲い部20は加工画像の半田部を表す。
【0031】
図8は、図7に示した加工画像を、実際の検査に使用できるレベルまで処理したものである。図中、囲い部20は半田部を示す。図7のものは、基礎的な処理(人間が見てわかりやすい)を示していたが、実際の検査では、最終的には画像データを2値化し、輝度レベルのHi、Loの2種類しか存在させないようにする。そのため、X線で検出した半田及び部品を含む輝度から、光学で求めた部品の部分を消去してX線半田のみに処理する。
式にすると、
X線(部品・半田)−光学(部品)=X線(半田)
と表される。
【0032】
次に、チップ部品として、例えばBGA(Ball Grid Array)を検査する場合を例として説明する。図9は、基板に実装されたBGA及びその周辺部の光学画像を表している。ここでの検査項目として、位置ずれ、極性、品種違いをチェックする。位置ずれチェックでは、基準位置として基板に設けられている、いわゆるフィデンシャルマークを検出して、補正する。これらのチェックは、タンタルコンデンサや電解コンデンサ、QFP(Quad Flat Package)やSOP(Small Outline Package)等の各種ICなど、その他、種々の部品に適用される。
【0033】
図10はBGAのX線画像を表し、半田の有り無しのチェック及び半田形状のチェックを行う。
【0034】
図11に、本例の基板検査装置による検査のフローチャートを示す。まず、検査対象基板またはその基板の検査部位の光学画像を撮像できるように光学CCDカメラ2を設定し、光学画像の取り込みを行い(ステップS1)、取り込んだ光学画像により、図9及び図10を参照して述べた検査を行う(ステップS2)。ここでは、光学画像検査の対象になっている、例えばBGA等各種部品の部品有り無し、部品極性、位置ずれなどを検査して、良品・不良品の判別を行う(ステップS3)。検査の結果、NGであれば、その基板上の該当する部品は不良品であると判定する。
【0035】
ステップS3の判別処理において、検査の結果OKであれば、次のX線画像検査のステップに移行する。検査対象基板またはその基板の検査部位のX線画像を撮像できるように、X線源6、X線受光CCDカメラ3を設定し、X線画像の取り込みを行い(ステップS4)、取り込んだX線画像により、図4〜図6及び図10を参照して述べた検査を行う(ステップS5)。ここでは、X線画像検査の対象になっている、例えばBGA内半田量及び半田形状、一般部品半田量などを検査して、良品・不良品の判別を行う(ステップS6)。検査の結果、NGであれば、その基板上の該当する部品は不良品であると判定する。
【0036】
ステップS6の判別処理において、検査の結果OKであれば、次にX線画像と光学画像との加工処理に移行する。検査対象基板の上述光学画像及びX線画像を、例えばメインメモリ12等の保存部から読み出し、図7に示したように互いの画像を組み合わせて画像を加工する(ステップS7)。そして、得られた加工画像により、図7及び図8を参照して述べた検査を行う(ステップS8)。ここでは、X線画像及び光学画像の加工画像の検査対象になっている、例えばコンデンサやその他部品の半田量を検査して、良品・不良品の判別を行う(ステップS9)。検査の結果、NGであれば、その基板上の該当する部品は不良品であると判定する。
【0037】
ステップS7の判別処理において、検査の結果OKであれば、検査した基板は良品として、基板検査を終了する。
【0038】
この、検査フローチャートは、同一装置内にX線系と光学系の検査手段を備えることで、選択手段としてのCPU11が、基板に実装される部品の種類に応じて、それぞれX線画像及び光学画像の最適な方、または加工画像による検査方法を選択しながら、効率よく検査を行うことができる。例えば、部品によっては、ステップS1〜ステップS3の光学画像検査を行った後、X線画像検査が必要ないとなれば、ステップS7にスキップしてX線画像・光学画像の加工画像による検査を行う。あるいは、光学画像検査及びX線画像検査では検査できず、加工画像による検査を必要とする部品であれば、ステップS7の加工画像による検査から始めるなど、種々の組み合わせによる検査フローが考えられる。
【0039】
上述のCPU11の選択は、例えば、予めメインメモリ12に完成品として実装される部品が登録されており、その登録内容に従って検査方法を選択する。または、最初に光学画像を取り込み、その光学画像から、どのような部品が実装されているかを判断して、検査方法を選択するようにすることも考えられる。
【0040】
以上述べたように、本例によれば、部品実装基板検査において、X線画像検査と光学画像検査とを組み合わせることで、従来難しいとされた部品の検査が可能になる。
【0041】
また、本例の基板検査装置により、X線検査装置と光学検査装置を単純にシリーズに配置するよりも、両画像を加工することで、これら検査装置の2台分以上に相当するような効果が得られる。つまり、検査には、部品の有り無し、部品極性、位置ずれ等を光学画像による光学検査装置で行うものと、また、半田フィレットやBGA内半田等をX線画像によるX線検査装置で行うものがある。2台をシリーズに配置すれば、双方の機能をそのまま加算して2台分の機能となる。しかし、半田フィレットを確認する場合、部品と半田の区別がつかないものが存在し、これは上述のそれぞれの検査装置単独では検査できない。今回の基板検査装置で、光学画像及びX線画像のそれぞれの画像を組み合わせ加工することで、検査することが実現可能となる。
【0042】
尚、本発明は、上述実施の形態の例に限らず、その他、X線源から検査対象基板に対し照射するX線と、照明などからの光が検査対象基板にて反射された光とが同一軸上にあるような場合にも適用することができる。
【0043】
また、本発明は上述した実施の形態の例に限られるものではなく、本発明の要旨を逸脱することなくその他種々の構成を取り得ることは勿論である。
【0044】
【発明の効果】
斯かる本発明によれば、光学画像及びX線画像を組み合わせ加工し、その加工された合成画像により、例えば、X線画像では半田か部品か区別のつかない部品でも、半田または部品の判別を行うことができ、従来困難であった部品の検査が実現可能となる効果がある。
【0045】
また、半田付けの良否を、面積・体積だけでなく、X線照射によって基板上の広範囲にわたる輝度分布を一回に得て、この輝度分布により算出される半田形状など半田状態により行い、半田付けの良否をより正確に判定することができる効果がある。
【0046】
また、X線画像の輝度分布により半田部立体図を作成することで、輝度分布により算出した半田状態に、この半田部立体図を加え、視覚的に半田状態を確認でき、半田付けのより正確な良否判定を行うことができる効果がある。
【0047】
また、基板に実装される部品の種類に応じて、それぞれX線画像、光学画像、合成画像、またはそれらの組み合わせによる最適な検査が選択されるので、効率よく検査を行うことができる効果がある。
【図面の簡単な説明】
【図1】本発明の基板検査装置の一実施の形態の例を示す機器構成図である。
【図2】本発明の一実施の形態の例の説明に供する光学画像である。
【図3】本発明の一実施の形態の例の説明に供するX線画像である。
【図4】本発明の一実施の形態の例の説明に供するX線画像スレッシュ表示である。
【図5】本発明の一実施の形態の例の説明に供する半田フィレットの例を示す線図である。
【図6】本発明の一実施の形態の例の説明に供するX線画像3D図である。
【図7】本発明の一実施の形態の例の説明に供する加工画像である。
【図8】本発明の一実施の形態の例の説明に供する他の加工画像である。
【図9】本発明の一実施の形態の例の説明に供するBGA光学画像である。
【図10】本発明の一実施の形態の例の説明に供するBGAX線画像である。
【図11】本発明の基板検査方法の説明に供するフローチャートである。
【符号の説明】
1…データ収集装置、2…光学カメラ、3…X線カメラ、4…機構部、5…検査対象基板、6…X線源、10…データ処理装置、11…CPU、12…メインメモリ、13…画像ボード、14…I/Oボード、15…モータボード、16…GUI、
17…システムバス、20…半田部分、20a…半田部分重心位置、20b…高輝度部重心位置、21…部品チップ、22、23…半田フィレット
[0001]
BACKGROUND OF THE INVENTION
The present invention is, for example, IC (Integrated Circuit) suitably applied to a component inspection of printed circuit board mounted in the chip or the like, relates to a substrate inspection equipment.
[0002]
[Prior art]
Conventionally, an X-ray board inspection apparatus using X-rays is used for the purpose of, for example, inspection of the solder state inside a BGA (Ball Grid Array) of an IC package used for high-density board mounting. The inspection of the mounting substrate is not completed by itself, and the component polarity, positional deviation, and product type difference of the component chip to be mounted are performed by an optical substrate inspection device based on an optical image using visible light (for example, see Patent Document 1). .)
[0003]
[Patent Document 1]
Japanese Patent Laid-Open No. 11-295242
[Problems to be solved by the invention]
However, when all of the solder fillets that are difficult to see in the optical image are viewed with X-rays, there is a problem that there is a case where parts cannot be distinguished from solder and some cannot be inspected. Further, if the optical substrate inspection device and the X-ray substrate inspection device are arranged in a series of two units, it is very disadvantageous in terms of cost and space.
[0005]
In view of such points, the present invention, when performing board inspection using, for example, an X-ray image, examines X-ray images and optical images, such as components that cannot be distinguished from solder and components by X-ray images. depending an object and TURMERIC row optimal inspection by inspection in combination.
[0006]
[Means for Solving the Problems]
Substrate inspection device of the present invention includes an X-ray imaging unit for imaging the transmitted X-ray image of the X-rays irradiated to the inspected object that implements parts products, and the visible light imaging section for imaging the object to be inspected the X-ray image obtained by X-ray imaging unit including solder the securing parts and the component, by combining a portion corresponding to the component of the optical image obtained by the visible light imaging unit, wherein Image processing means for generating a composite image in which a part equivalent part of the X-ray image is replaced with a part equivalent part of the optical image, and the X-ray image and the optical image according to the parts mounted on the inspection object Or a selection means for selecting an examination based on a composite image of the X-ray image and the optical image .
[0007]
Further, in the board inspection apparatus described above, the image processing means calculates the difference between the center of gravity position of the solder of the solder portion in the X-ray image and the center of gravity position of the high-luminance portion of the solder portion in the X-ray image. In addition, the shape of the solder is inspected based on the difference between the center of gravity position of the entire solder of the solder portion and the center of gravity of the high brightness portion of the solder portion.
[0008]
In the board inspection apparatus described above, the image processing means causes the distance between the center of gravity positions of the entire solder of the opposing solder portions in the X-ray image and the high brightness portion of the opposing solder portions in the X-ray image. Based on the difference between the distance between the center of gravity of the entire solder of the opposing solder part and the distance between the center of gravity of the high brightness part of the opposing solder parts, Inspecting the presence or absence of the parts [0009]
According to the present invention, the optical image and the X-ray image are combined and processed, and the processed composite image is used to determine, for example, the solder or the component that cannot be distinguished from the solder or the component in the X-ray image. Will be able to. Further, the selection means selects an optimal inspection based on an X-ray image, an optical image, a composite image, or a combination thereof, depending on the type of component mounted on the board.
[0010]
In the present invention, a luminance distribution over a wide range on the substrate can be obtained at a time by X-ray irradiation, and the quality of soldering can be determined based on the solder state calculated from the luminance distribution. In particular, it is preferable to inspect the shape of the corresponding solder based on the difference between the center of gravity position of the entire solder in the X-ray image and the position of the center of gravity of the high luminance portion of the solder portion. This difference becomes large with normal solder.
[0011]
Furthermore, in the present invention, based on the difference between the distance between the gravity center positions of the entire solder of the opposing solder portions in the X-ray image and the distance between the gravity center positions of the high-luminance portions of the opposing solder portions in the X-ray image. Thus, it is preferable to inspect the shape of the corresponding solder. In the case of normal solder, this difference is large because the center of gravity of the high-luminance portion of the solder portion is present outside the center of gravity of the entire solder.
[0014]
DETAILED DESCRIPTION OF THE INVENTION
Hereinafter, an example of an embodiment of a substrate inspection apparatus of the present invention and a substrate inspection method applied to this example will be described with reference to FIGS.
[0015]
FIG. 1 is a schematic equipment configuration diagram of the substrate inspection apparatus of this example. Reference numeral 1 denotes a data collection device that collects image data of an inspection object and supplies it to a data processing device. An X-ray source 6 that emits X-rays is disposed below an inspection target substrate (hereinafter simply referred to as a substrate) 5 on which components such as an IC chip are mounted. An optical CCD camera 2 as an optical imaging unit and an X-ray receiving CCD camera 3 as an X-ray imaging unit are disposed above the inspection target substrate 5. The optical CCD camera 2 and the X-ray light receiving CCD camera 3 include, for example, a mechanism unit 4 and are moved or moved on a plane perpendicular to the paper surface automatically or by user operation. Alternatively, the substrate 5 may be placed on an XY stage (not shown) that can move on a plane perpendicular to the paper surface, and the substrate 5 may be positioned by moving the XY stage. Further, the X-ray source 6 may be provided with a mechanism portion so as to be movable.
[0016]
Since the device using X-rays is housed in a sealed case to prevent leaking radiation, the inside of the case is completely dark, so normal illumination is necessary as a means for obtaining visible light, but the description is omitted here. ing.
[0017]
Reference numeral 10 denotes a data processing device. Processing and processing of image data captured and transmitted by the data collection device 1, analysis of data, control of irradiation X-rays of the X-ray source 1 via a GUI as an operation means, Control of the mechanism unit 4 or the like, or control such as selecting an appropriate inspection method according to the type of component mounted on the substrate 5 is performed. Various types of data processing apparatus 10 such as a personal computer can be considered.
[0018]
Reference numeral 11 denotes a CPU for controlling and calculating the data collecting apparatus, 12 is a main memory including a ROM storing a control program of the CPU 11 and a RAM functioning as a work area, and 13 is an optical CCD camera 2 and an X-ray receiving CCD camera 3. An image board as image processing means for processing and processing transmitted image data, 14 is an I / O board for performing input / output necessary for the apparatus, and 15 is a motor board for controlling the positioning of the mechanism unit 4 and the like. . Reference numeral 16 denotes a GUI (Graphical User Interface) composed of display means such as an LCD and operation means such as a keyboard, mouse, or touch panel. These devices are connected by a system bus 17 to transmit and receive data. Note that the representation of wiring from each device of the data collection device 1 to each board of the data processing device 10 is omitted.
[0019]
In the substrate inspection apparatus configured as described above, when an X-ray image of the inspection target substrate 5 is obtained, the mechanism unit 4 is controlled so that the X-ray source 1, the inspection target substrate 5, and the X-ray receiving CCD camera 3 are in a straight line. Deploy. When the substrate 5 is irradiated with X-rays from the X-ray source 6, the X-rays are transmitted through the substrate 5, and the X-ray receiving CCD 3 provided above the substrate 5 images the transmitted X-rays. Then, the image data captured by the X-ray light receiving CCD camera 3 is transmitted to the image board 13 to perform image processing, and an X-ray image is displayed on the display screen of the GUI 16.
[0020]
On the other hand, when an optical image of the inspection target substrate 5 is obtained, the mechanism unit 4 is controlled so that the optical CCD camera 2 and the inspection target substrate 5 are in an appropriate positional relationship. Then, the substrate 5 is imaged by the optical CCD camera 2, image data captured by the optical CCD camera 2 is transmitted to the image board 13, image processing is performed, and an optical image is displayed on the display screen of the GUI 16.
[0021]
The image board 13 also functions as an image processing unit that synthesizes an X-ray image and an optical image, and uses an X-ray image and an optical image held in the main memory 12 or the like according to a command from the CPU 11 as necessary. Then, the composition process can be performed and the created composite image can be displayed on the display screen of the GUI 16.
[0022]
In the following, a soldering quality determination method based on a solder shape inspection will be described in order to inspect the soldering state of a chip component mounted on a substrate using the above-described board inspection apparatus.
[0023]
A solder shape inspection using an X-ray image of a chip component on a substrate, for example, a chip resistor will be described. FIG. 2 shows an example of an optical image obtained by imaging a part of the substrate on which the chip component is mounted. In the figure, there appear to be four parts, but there are chip parts on both sides and the chip part is missing in the center. FIG. 3 is an X-ray image obtained by imaging the same part as FIG. 2 with X-rays.
[0024]
FIG. 4 shows an X-ray image threshold display based on the X-ray image of FIG. The X-ray image threshold display represents the luminance distribution of the X-ray image shown in FIG. 2. Specifically, the 8-bit, 256-gradation luminance display is displayed by color-coding every 10 gradations. The portion with high luminance is a portion with low X-ray transmittance, that is, a solder portion, and is displayed in yellow or green in this example.
[0025]
For example, assuming that the portion where the solder is present is a color of pink or higher color, the position of the center of gravity (+ portion) 20a of the entire solder in the portion where the solder is present and the position of the center of gravity (+ portion) 20b of the high luminance portion above yellow The solder shape can be inspected by calculating the difference. For example, the center of gravity position can be calculated by calculating the area of the target portion from the luminance distribution and calculating the center thereof, for example, using a function of the image processing software engine. In addition, since the brightness distribution of the X-ray image shows the height of the cross section of the solder part beside the chip component and the degree of solder rise, the volume (solder amount) of the solder fillet can be calculated.
[0026]
A method of measuring the height of a solder part by irradiating the solder part with a laser beam and measuring the reflected laser beam is known, but this conventional method is based on a laser spot unit of a minimum area. It took time to measure the height of the. In the method using the luminance distribution of X-rays in this example, X-rays are irradiated on the entire substrate, and the solder height measurement processing of each component can be performed together, so that it is efficient and the measurement time is short. There are advantages.
[0027]
The distance between the center of gravity position 20a where the chip component solder of FIG. 4 is located and the opposite center of gravity position on this component is A, and the distance between the center of gravity position 20b of the high brightness portion and the opposite center of gravity position on this component is B. For example, it is possible to inspect the presence or absence of parts by measuring the distance between the highest points in each pad. For example, in the normal solder fillet a portion, the uppermost point 20b exists outside the image, but in the portion b where the chip floats or is missing, the uppermost point 20b exists in the center, that is, near the center of gravity 20a.
[0028]
FIG. 5A shows a schematic diagram of a solder fillet cross-section of the chip part in part a of FIG. 4. A state in which a normal solder fillet 22 is formed on the chip component 21 placed on the substrate 5 is shown. FIG. 5B shows a schematic diagram of a solder fillet cross section of the chip part of FIG. A state in which a solder fillet 23 with poor soldering is formed on the chip component 21 placed on the substrate 5 and the chip component 21 is floating is shown. As described above, whether soldering is good or bad is determined not only by the area and volume but also by the solder shape, so that more accurate determination can be made.
[0029]
FIG. 6 is a three-dimensional view (3D view) of a solder portion of a chip component. The height of the cross section of the solder part is detected from the difference in luminance of the X-ray image, and a three-dimensional view displayed in a mesh shape is created. The plan views shown in FIGS. Represent the shape visually. For example, in the case where it is difficult to inspect depending on the above-described plan view, a command is generated from the CPU 11 in response to an instruction from the user GUI 16 or automatically, and a three-dimensional diagram is created, and the user visually recognizes the solder shape. By using this three-dimensional view together when checking, the solder shape can be easily confirmed.
[0030]
Next, solder inspection based on a combination of an X-ray image and an optical image will be described using a chip capacitor as an example as a chip component. The same chip capacitor as the X-ray image and optical image of FIG. 7 is imaged. As can be seen from this X-ray image, in X-rays, there are components that are in a so-called blackened state, such as chip capacitors, and cannot be distinguished from solder and components. In such a case, the X-ray image cannot accurately inspect the solder portion. Therefore, by using the optical image, the X-ray image and the optical image are combined on the image board 13, and a processed image is created by cutting out a part equivalent part from the X-ray image, thereby knowing the exact position of the solder part. Can do. In the figure, an enclosure 20 represents a solder portion of the processed image.
[0031]
FIG. 8 shows the processed image shown in FIG. 7 processed to a level that can be used for actual inspection. In the figure, the enclosure portion 20 indicates a solder portion. 7 shows basic processing (easy to see and understand by humans), but in actual inspection, finally the image data is binarized and there are only two types of brightness levels, Hi and Lo. Do not let it. Therefore, the part of the component obtained by optics is erased from the luminance including the solder and the component detected by X-rays, and the processing is performed only for the X-ray solder.
In the formula
X-ray (component / solder)-optics (component) = X-ray (solder)
It is expressed.
[0032]
Next, a case where, for example, a BGA (Ball Grid Array) is inspected as a chip component will be described as an example. FIG. 9 shows an optical image of the BGA mounted on the substrate and its peripheral part. As inspection items here, check for misalignment, polarity, and product type. In the misregistration check, a so-called fiducial mark provided on the substrate as a reference position is detected and corrected. These checks are applied to various other components such as tantalum capacitors, electrolytic capacitors, various ICs such as QFP (Quad Flat Package) and SOP (Small Outline Package).
[0033]
FIG. 10 shows an X-ray image of BGA, where the presence / absence of solder and the shape of the solder are checked.
[0034]
FIG. 11 shows a flowchart of inspection by the substrate inspection apparatus of this example. First, the optical CCD camera 2 is set so that an optical image of a substrate to be inspected or an inspection site of the substrate can be captured, the optical image is captured (step S1), and FIG. 9 and FIG. The inspection described with reference is performed (step S2). Here, the non-defective product / defective product is discriminated by inspecting, for example, the presence / absence of components of various components such as BGA, the component polarity, the positional deviation, and the like, which are the targets of the optical image inspection (step S3). If the result of the inspection is NG, it is determined that the corresponding part on the board is defective.
[0035]
If the result of the inspection is OK in the determination processing in step S3, the process proceeds to the next X-ray image inspection step. The X-ray source 6 and the X-ray receiving CCD camera 3 are set so that an X-ray image of the inspection target substrate or the inspection site of the substrate can be captured, and the X-ray image is captured (step S4). The inspection described with reference to FIGS. 4 to 6 and 10 is performed based on the image (step S5). Here, for example, the amount of solder in BGA, the solder shape, the amount of general component solder, etc., which are the targets of the X-ray image inspection, are inspected, and a non-defective product / defective product is discriminated (step S6). If the result of the inspection is NG, it is determined that the corresponding part on the board is defective.
[0036]
If the result of the inspection in step S6 is OK, the process proceeds to processing of an X-ray image and an optical image. The above-described optical image and X-ray image of the substrate to be inspected are read from, for example, a storage unit such as the main memory 12, and the images are processed by combining the images as shown in FIG. 7 (step S7). Then, the inspection described with reference to FIGS. 7 and 8 is performed on the obtained processed image (step S8). Here, for example, the amount of solder of capacitors and other components, which are inspection targets of the processed image of the X-ray image and the optical image, is inspected, and a non-defective product / defective product is discriminated (step S9). If the result of the inspection is NG, it is determined that the corresponding part on the board is defective.
[0037]
If the result of the inspection in step S7 is OK, the inspected substrate is a non-defective product and the substrate inspection is terminated.
[0038]
In this inspection flowchart, the X-ray system and the optical system inspection means are provided in the same apparatus, so that the CPU 11 as the selection means can perform an X-ray image and an optical image, respectively, according to the type of components mounted on the board. It is possible to perform inspection efficiently while selecting an optimal method or an inspection method using a processed image. For example, depending on the part, after the optical image inspection in step S1 to step S3 is performed, if the X-ray image inspection is not necessary, the process skips to step S7 and performs the inspection using the processed image of the X-ray image / optical image. . Alternatively, if it is a part that cannot be inspected by the optical image inspection and the X-ray image inspection and needs to be inspected by the processed image, an inspection flow by various combinations such as starting from the inspection by the processed image in step S7 can be considered.
[0039]
For the selection by the CPU 11 described above, for example, a part to be mounted as a finished product is registered in the main memory 12 in advance, and an inspection method is selected according to the registered content. Alternatively, it is conceivable that an optical image is first captured, and an inspection method is selected by determining what components are mounted from the optical image.
[0040]
As described above, according to this example, it is possible to inspect components that have been difficult in the past by combining the X-ray image inspection and the optical image inspection in the component mounting board inspection.
[0041]
In addition, the substrate inspection apparatus of this example has an effect equivalent to two or more of these inspection apparatuses by processing both images rather than simply arranging the X-ray inspection apparatus and the optical inspection apparatus in series. Is obtained. In other words, the inspection is performed by using an optical inspection apparatus with the presence / absence of parts, component polarity, positional deviation, etc., and with the X-ray inspection apparatus using X-ray images for solder fillets, solder in BGA, etc. There is. If two units are arranged in a series, the functions of both units are added as they are to obtain the function of two units. However, when confirming a solder fillet, there are some which cannot distinguish between a component and solder, and this cannot be inspected by each of the above-described inspection devices alone. In this substrate inspection apparatus, inspection can be realized by combining and processing the optical image and the X-ray image.
[0042]
In addition, the present invention is not limited to the above-described embodiment, and in addition, there are X-rays irradiated from the X-ray source to the inspection target substrate, and light reflected from the inspection target substrate by illumination or the like. The present invention can also be applied to cases where they are on the same axis.
[0043]
Further, the present invention is not limited to the above-described embodiments, and various other configurations can be taken without departing from the gist of the present invention.
[0044]
【The invention's effect】
According to the present invention, the optical image and the X-ray image are combined and processed, and the processed composite image is used to determine whether the solder or the component is indistinguishable from the solder or the component in the X-ray image. Therefore, there is an effect that it is possible to realize inspection of parts which has been difficult in the past.
[0045]
In addition, the soldering quality is determined not only by the area and volume but also by the X-ray irradiation at once to obtain a wide luminance distribution on the board, and the solder shape calculated by this luminance distribution is used for soldering. There is an effect that it is possible to more accurately determine whether the quality is good or bad.
[0046]
Also, by creating a three-dimensional view of the solder part from the luminance distribution of the X-ray image, the solder state can be visually confirmed by adding this three-dimensional view of the solder part to the solder state calculated from the luminance distribution, and soldering is more accurate. There is an effect that it is possible to make a pass / fail judgment.
[0047]
In addition, since an optimum inspection based on an X-ray image, an optical image, a composite image, or a combination thereof is selected according to the type of components mounted on the board, there is an effect that the inspection can be performed efficiently. .
[Brief description of the drawings]
FIG. 1 is an apparatus configuration diagram showing an example of an embodiment of a substrate inspection apparatus of the present invention.
FIG. 2 is an optical image for explaining an example of an embodiment of the present invention.
FIG. 3 is an X-ray image for explaining an example of an embodiment of the present invention.
FIG. 4 is an X-ray image threshold display for explaining an example of an embodiment of the present invention.
FIG. 5 is a diagram showing an example of a solder fillet for explaining an example of an embodiment of the present invention.
FIG. 6 is an X-ray image 3D diagram for explaining an example of an embodiment of the present invention.
FIG. 7 is a processed image for explaining an example of an embodiment of the present invention.
FIG. 8 is another processed image for explaining an example of an embodiment of the present invention.
FIG. 9 is a BGA optical image for explaining an example of an embodiment of the present invention.
FIG. 10 is a BGAX line image for explaining an example of an embodiment of the present invention;
FIG. 11 is a flowchart for explaining a substrate inspection method according to the present invention.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 ... Data collection device, 2 ... Optical camera, 3 ... X-ray camera, 4 ... Mechanism part, 5 ... Board | substrate to be examined, 6 ... X-ray source, 10 ... Data processing apparatus, 11 ... CPU, 12 ... Main memory, 13 ... Image board, 14 ... I / O board, 15 ... Motor board, 16 ... GUI,
17 ... System bus, 20 ... Solder part, 20a ... Solder part center of gravity position, 20b ... High brightness part center of gravity position, 21 ... Component chip, 22, 23 ... Solder fillet

Claims (2)

部品を実装する被検査対象物へ照射されたX線の透過X線画像を撮像するX線撮像部と、
前記被検査対象物を撮像する可視光撮像部と、
前記X線撮像部で得られる前記部品および該部品を固定している半田を含むX線画像に、前記可視光撮像部で得られる光学画像の前記部品に相当する部分を合成して、前記X線画像の部品相当部分を前記光学画像の部品相当部分で置き換えた合成画像を生成する画像処理手段と、
前記被検査対象物に実装される部品に応じて、前記X線画像、前記光学画像、あるいは前記X線画像と前記光学画像の合成画像による検査を選択する選択手段と、を備え
前記画像処理手段により、前記X線画像における半田部分の半田全体の重心位置と、前記X線画像における半田部分のうち高輝度部の重心位置との差を得、前記半田部分の半田全体の重心位置と前記半田部分のうち高輝度部の重心位置との差に基づいて、前記半田の形状を検査する
基板検査装置。
An X-ray imaging unit that captures a transmitted X-ray image of an X-ray irradiated to an object to be inspected on which a component is mounted;
A visible light imaging unit that images the inspection object;
A portion corresponding to the part of the optical image obtained by the visible light imaging unit is synthesized with an X-ray image including the part obtained by the X-ray imaging unit and solder fixing the component, and the X Image processing means for generating a composite image in which a part equivalent part of a line image is replaced with a part equivalent part of the optical image;
According to a component mounted on the inspection object, the X-ray image, the optical image, or a selection unit that selects an inspection based on a composite image of the X-ray image and the optical image ,
The image processing means obtains the difference between the centroid position of the entire solder of the solder portion in the X-ray image and the centroid position of the high-luminance portion of the solder portion in the X-ray image. A board inspection apparatus that inspects the shape of the solder based on the difference between the position and the position of the center of gravity of the high luminance portion of the solder portion .
部品を実装する被検査対象物へ照射されたX線の透過X線画像を撮像するX線撮像部と、
前記被検査対象物を撮像する可視光撮像部と、
前記X線撮像部で得られる前記部品および該部品を固定している半田を含むX線画像に、前記可視光撮像部で得られる光学画像の前記部品に相当する部分を合成して、前記X線画像の部品相当部分を前記光学画像の部品相当部分で置き換えた合成画像を生成する画像処理手段と、
前記被検査対象物に実装される部品に応じて、前記X線画像、前記光学画像、あるいは前記X線画像と前記光学画像の合成画像による検査を選択する選択手段と、を備え
前記画像処理手段により、前記X線画像における対向する半田部分の半田全体の重心位置間の距離と、前記X線画像における対向する半田部分のうち高輝度部の重心位置間の距離との差を得、前記対向する半田部分の半田全体の重心位置間の距離と前記対向する半田部分のうち高輝度部の重心位置間の距離との差に基づいて、前記部品の有無を検査する
基板検査装置。
An X-ray imaging unit that captures a transmitted X-ray image of an X-ray irradiated to an object to be inspected on which a component is mounted;
A visible light imaging unit that images the inspection object;
A portion corresponding to the part of the optical image obtained by the visible light imaging unit is synthesized with an X-ray image including the part obtained by the X-ray imaging unit and solder fixing the component, and the X Image processing means for generating a composite image in which a part equivalent part of a line image is replaced with a part equivalent part of the optical image;
According to a component mounted on the inspection object, the X-ray image, the optical image, or a selection unit that selects an inspection based on a composite image of the X-ray image and the optical image ,
By the image processing means, the difference between the distance between the center of gravity of the entire solder of the opposing solder part in the X-ray image and the distance between the center of gravity of the high-luminance part of the opposing solder part in the X-ray image is calculated. The presence / absence of the component is inspected based on the difference between the distance between the center of gravity positions of the entire solder of the opposing solder portions and the distance between the center of gravity positions of the high brightness portions of the opposing solder portions.
Board inspection equipment.
JP2003134977A 2003-05-13 2003-05-13 Board inspection equipment Expired - Fee Related JP4228773B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2003134977A JP4228773B2 (en) 2003-05-13 2003-05-13 Board inspection equipment

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003134977A JP4228773B2 (en) 2003-05-13 2003-05-13 Board inspection equipment

Publications (2)

Publication Number Publication Date
JP2004340632A JP2004340632A (en) 2004-12-02
JP4228773B2 true JP4228773B2 (en) 2009-02-25

Family

ID=33525387

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003134977A Expired - Fee Related JP4228773B2 (en) 2003-05-13 2003-05-13 Board inspection equipment

Country Status (1)

Country Link
JP (1) JP4228773B2 (en)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006343193A (en) * 2005-06-08 2006-12-21 Shimadzu Corp X-ray fluoroscope
JP4551324B2 (en) * 2005-12-28 2010-09-29 芝浦メカトロニクス株式会社 Paste coating amount measuring device and paste coating device
JP5126645B2 (en) * 2006-08-23 2013-01-23 国際技術開発株式会社 Inspection device
JP5599062B2 (en) * 2010-12-06 2014-10-01 株式会社リガク X-ray diffraction apparatus and X-ray diffraction measurement method
JP6030833B2 (en) * 2011-12-14 2016-11-24 ヤマハ発動機株式会社 X-ray inspection equipment
JP6255851B2 (en) * 2013-09-30 2018-01-10 日本電気株式会社 Solder wetting inspection apparatus and solder wetting inspection method
CN105849772B (en) * 2013-12-22 2019-06-11 模拟技术公司 Check system and method
CN110687134B (en) * 2019-09-29 2021-03-16 武汉大学 Online detection device and method in production of banded FPC
US11756157B2 (en) 2020-03-27 2023-09-12 Battelle Memorial Institute Multimodal inspection system
CN112014404A (en) * 2020-08-27 2020-12-01 Oppo(重庆)智能科技有限公司 Component detection method, device, system, electronic equipment and storage medium

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS5817544U (en) * 1981-07-27 1983-02-03 ソフテツクス株式会社 Television device for observing soft X-ray images and solid images
JPH0252246A (en) * 1988-08-15 1990-02-21 Tokyo Electron Ltd X-ray inspection device
JPH0469511A (en) * 1990-07-09 1992-03-04 Iwaki Electron Corp Ltd Visual inspection device for soldering part and packaging component
JPH04125942A (en) * 1990-09-18 1992-04-27 Fujitsu Ltd Object surface shape displaying equipment using x-ray and object surface shape inspection equipment
JP3942786B2 (en) * 1999-04-09 2007-07-11 松下電器産業株式会社 Bonding inspection apparatus and method

Also Published As

Publication number Publication date
JP2004340632A (en) 2004-12-02

Similar Documents

Publication Publication Date Title
JP5493360B2 (en) X-ray inspection method, X-ray inspection apparatus and X-ray inspection program
US5493594A (en) Method and apparatus for inspection of solder joints by x-ray fluoroscopic imaging
JP5421763B2 (en) Inspection apparatus and inspection method
JPH03500580A (en) Computerized tomography inspection of electronic equipment
KR101129349B1 (en) Parts mount board inspection apparatus
JP6451142B2 (en) Quality control device and control method for quality control device
CN104837302B (en) Quality control system and internal check device
JP4228773B2 (en) Board inspection equipment
EP2312526A2 (en) Process and apparatus for image processing and computer-readable medium storing image processing program
JP5830928B2 (en) Inspection area setting method and X-ray inspection system
JPH0231144A (en) Apparatus for inspecting printed circuit board
US7925074B2 (en) Adaptive background propagation method and device therefor
JP6387620B2 (en) Quality control system
JP4333349B2 (en) Mounting appearance inspection method and mounting appearance inspection apparatus
JP2000352559A (en) Apparatus and method for inspection of joint
JP4449596B2 (en) Mounting board inspection equipment
JP5275377B2 (en) X-ray inspection equipment
JPH0743329B2 (en) Internal defect inspection method and apparatus
KR100300586B1 (en) Single Layer Inspection Device and Inspection Method of Printed Circuit Board Using X-Ray
Nicholson et al. Development of a comprehensive in‐line quality control system for printed circuit board assemblies
JP3902017B2 (en) Solder height measuring apparatus and method
JP2022138308A (en) Information generation device
JP2021032816A (en) Inspection device
KR20010097612A (en) Method and apparatus for examining both sides of PCB using X-Ray
Ghaffarian 3D X-ray CT for BGA/CGA Workmanship Defect Detection

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20060426

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080403

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080408

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20080609

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080819

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081008

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20081111

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20081124

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111212

Year of fee payment: 3

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121212

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees