JP4453503B2 - 基板検査装置および基板検査方法並びに基板検査装置の検査ロジック生成装置および検査ロジック生成方法 - Google Patents

基板検査装置および基板検査方法並びに基板検査装置の検査ロジック生成装置および検査ロジック生成方法 Download PDF

Info

Publication number
JP4453503B2
JP4453503B2 JP2004281591A JP2004281591A JP4453503B2 JP 4453503 B2 JP4453503 B2 JP 4453503B2 JP 2004281591 A JP2004281591 A JP 2004281591A JP 2004281591 A JP2004281591 A JP 2004281591A JP 4453503 B2 JP4453503 B2 JP 4453503B2
Authority
JP
Japan
Prior art keywords
inspection
logic
image
feature amount
defective product
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004281591A
Other languages
English (en)
Other versions
JP2006098093A (ja
Inventor
貴子 大西
洋貴 和田
俊洋 森谷
敦 清水
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp filed Critical Omron Corp
Priority to JP2004281591A priority Critical patent/JP4453503B2/ja
Publication of JP2006098093A publication Critical patent/JP2006098093A/ja
Application granted granted Critical
Publication of JP4453503B2 publication Critical patent/JP4453503B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/84Systems specially adapted for particular applications
    • G01N21/88Investigating the presence of flaws or contamination
    • G01N21/95Investigating the presence of flaws or contamination characterised by the material or shape of the object to be examined
    • G01N21/956Inspecting patterns on the surface of objects
    • G01N21/95684Patterns showing highly reflecting parts, e.g. metallic elements

Description

本発明は、基板検査装置で用いられる検査ロジックを自動生成するための技術に関する。
従来より、多数の電子部品が実装されたプリント基板の実装品質を検査するための基板検査装置が提案されている。この種のプリント基板において「電子部品の電極部とランドを半田付けした際の半田盛りの形状」を半田フィレットと呼ぶが、電子部品の電極部の濡れ上がりによっては、半田フィレットが形成されているように見えて、実は電子部品と半田フィレットが未接触な場合もある。よって、半田付けの良否を検査するには、自由曲線からなる半田フィレットの形状を正確に捉える必要がある。
しかしながら、従前の基板検査装置では、モノクロ(単色)単一照明を光源に用いていたために、半田フィレットの3次元形状を画像解析するのが困難であった。それゆえ、半田付けの良否を判定することができず、基板検査装置として実用に耐えるものではなかった。
このような課題を解決するため、本出願人は、図13に示す方式の基板検査装置を提案した(特許文献1参照)。この方式は3色光源カラーハイライト方式(もしくは単にカラーハイライト方式)とよばれるもので、複数の色の光源で検査対象を照らすことによって半田フィレットの3次元形状を疑似カラー画像として得る技術である。
プリント基板の自動検査の実用化は、実質、このカラーハイライト方式技術の登場以降であると言われている。特に、電子部品が小型化する現在では、半田フィレット形状を目視で判別することも困難であり、カラーハイライト方式の基板検査装置なしでは基板検査が成り立たないと言うこともできる。
図13に示すように、カラーハイライト方式の基板検査装置は、基板110上の検査対象107に異なる入射角で三原色光を照射する投光部105と、検査対象107からの反射光を撮像する撮像部106と、を備える。この投光部105は、異なる径を有し、かつ制御処理部からの制御信号に基づき赤色光、緑色光、青色光を同時に照射する3個の円環状光源111,112,113により構成されている。各光源111,112,113は、検査対象107の真上位置に中心を合わせ、かつ検査対象107から見て異なる仰角に対応する方向に配置されている。
かかる構成の投光部105で検査対象(半田フィレット)107を照射すると、撮像部106には、検査対象107の表面の傾斜に応じた色の光が入射する。よって、図14に示すように、電子部品の半田付けが良好であるとき/部品が欠落しているとき/半田不足の状態であるときなど、半田フィレットの形状に応じて、撮像画像の色彩パターンに明確な差異が現れる。これにより、半田フィレットの3次元形状を画像解析するのが容易になり、電子部品の有無や半田付けの良否を正確に判定することができるようになる。
カラーハイライト方式の基板検査装置では、「あるべき良品の色」や「あるべき不良品の色」を表す色パラメータ(色条件)を予め設定しておき、検査画像の中から色パラメータに該当する色領域を抽出し、その抽出された領域のもつ種々の特徴量(例えば、面積や長さ)に基づいて良否の判定を行う。したがって、実際の検査に先立ち、検査に用いる色
パラメータ、特徴量の種類、良品と不良品とを切り分けるための判定条件(たとえば、しきい値)などを設定しておく必要がある。この色パラメータ、特徴量および判定条件を合わせて検査ロジックもしくは検査パラメータと呼び、また検査ロジックを設定・調整することを一般にティーチングと呼ぶ。
検査精度を向上するためには、良品の示す特徴量と不良品の示す特徴量との間に有意かつ明確な差異が現れるように色パラメータを設定することが肝要である。すなわち、色パラメータのティーチングの善し悪しが検査精度を直接左右すると言える。
そこで本出願人は、図15に示すように、カラーハイライト方式における色パラメータの設定を支援するためのツールを提案している(特許文献2参照)。このツールでは、色パラメータとして、赤、緑、青の各色相比ROP、GOP、BOPおよび明度データBRTのそれぞれの上限値および下限値の設定が可能である。図15の入力画面には、色パラメータの設定値を入力するための色パラメータ設定部127とともに、設定された各色パラメータにより抽出される色彩の範囲を表示するための設定範囲表示部128が設けられている。この設定範囲表示部128には、所定の明度の下で得られるすべての色彩を示した色合い図134が表示されており、オペレータが各色パラメータの上限値、下限値を設定すると、色合い図134上には、設定された色パラメータにより抽出される色彩を囲むような確認領域135が表示される。また、2値化表示ボタン129を押すと、現在の色パラメータによる抽出結果が二値画像で表示される。このツールによれば、オペレータは、確認領域135や二値画像を見ながら、適切な抽出結果が得られるまで色パラメータの追い込みを行うことができる。
特開平2−78937号公報 特開平9−145633号公報
基板検査装置は、プリント基板の実装品質について一度に複数の検査項目を高速かつ正確に検査することが出来るという利点がある。ただし、基板検査装置の実稼動にあたっては、個別の検査対象に合わせて検査ロジック各々のティーチングを行い、不良品の見逃しがなく、かつ、良品を不良品と判定してしまう過検出が許容値(あらかじめ想定する値)以下に抑え込めるまで、判定精度を十分に高めなければならない。
ところが、カラーハイライト方式の基板検査装置では、実用に耐え得る高度な基板検査が可能な反面、不良品の見逃しと過検出を目標値まで抑え込むためのティーチングが難しい。上述した色パラメータ設定支援ツールを利用したとしても、結局、色パラメータの追い込みはオペレータの経験と勘に頼る部分が大きいため、設定ミスの発生は避けられない。しかも、どれだけ優れたオペレータでも試行錯誤的に調整を繰り返さなければならず、非効率的であり、多大な労力と調整時間を要してしまうという問題がある。
また最近では、高密度実装が進み、部品間の距離が狭まってきているが、これに起因して次のような問題が生じている。たとえば図16に示すように、検査対象部品140のそばに大きな部品141が存在すると、3つの光源111,112,113のうち最も入射角の大きな(仰角の小さな)光源113からの光(本例では青色光)が部品141に遮られる。そうすると、青色光が検査対象部品140に当たらないため、半田フィレット形状を正確に反映した色彩パターンが得られない。
図17の上段に、不良品(半田不足)、良品(青色光が遮られているもの)、良品(遮光がないもの)、不良品(半田過多)それぞれの半田フィレットの形状(側面図)を示し、中段に各半田フィレットを撮像して得た色彩パターン(上視図)を示す。通常は、良品
の半田フィレットでは青系色の領域が大きくなり、不良品の半田フィレットでは青系色の領域が小さくなる傾向にあるため、下段のように青系色の画素領域だけを抽出し、その画素領域の大きさ(面積や長さなど)を比べれば、半田フィレットの良否判定を行うことができる。しかしながら、青色光が遮られた半田フィレットでは、たとえ良品であっても青系色の画素領域が非常に小さくなり、不良品との判別をつけづらい。
図18は、良品、不良品それぞれの青系色の画素領域の面積をヒストグラムにしたものである。青色光が遮られた良品の度数分布が不良品の度数分布と重なってしまうことがわかる。どのような検査であっても不良品の流出は絶対に許されないため、不良品と良品との切り分けが難しい場合は、しきい値を図18のように設定し、過検出の発生を許容せざるを得ない。しかし、これでは過検出が頻発し、良品を不良品として廃棄するロスコストが増えたり、不良品の目視による再検査が必要となるなど、検査を自動化するメリットがなくなってしまう。
本発明は上記実情に鑑みてなされたものであって、その目的とするところは、高密度実装基板における半田フィレットの良否判定を高精度に行うことのできる技術を提供することにある。
本発明のさらなる目的は、高密度実装基板における半田フィレット検査で用いられるパラメータを自動生成可能な技術を提供することである。
本発明の基板検査装置は、以下に述べる基板検査方法によって半田フィレットの良否判定を行う。
まず、投光手段によって、基板上の検査対象部品に異なる入射角で複数の色の光を照射し、撮像手段によって、その反射光を撮像して検査画像を取得する。入射角とは光と基板の法線(撮像手段の光軸)とのなす角であり、基板(部品)から見た仰角が大きい光源からの光ほど入射角は小さい。検査画像の半田部分には、半田フィレットの傾斜角に応じた色彩パターンが現れる。
基板検査装置は検査ロジックを記憶する記憶部を有する。詳しくは、記憶部は、入射角が最も大きい光の色成分を含む画素を抽出するための第1色条件、および、前記第1色条件を満足する画素領域がもつ第1特徴量に関して、良品の過検出は排除し且つ不良品の見逃しは許容する値に設定された第1判定条件を含む第1ロジック、並びに、入射角が最も小さい光の色成分を含む画素を抽出するための第2色条件、および、前記第2色条件を満足する画素領域がもつ第2特徴量に関して、前記第1ロジックで見逃され得る不良品の見逃しは排除する値に設定された第2判定条件を含む第2ロジックを記憶している。
半田フィレット検査を行う際には、記憶部から第1ロジックおよび第2ロジックが読み込まれる。
そしてまず、基板検査装置の第1検査手段が、第1ロジックに従って、前記検査画像の半田部分から前記第1色条件を満足する第1画素領域を抽出して、前記第1画素領域のもつ第1特徴量が前記第1判定条件を満足するか判定する。
ここで、第1色条件は入射角が最も大きい光の色成分を含む画素を抽出するものであることから、第1画素領域は、良品では大きく(広く)、不良品では小さく(狭く)なる傾向にある。よって、第1特徴量としては、画素領域の大きさを表す量を採用するとよい。たとえば、第1画素領域を構成するラインのうち、所定幅以上の画素数をもつラインの本
数を第1特徴量とすることが好ましい。この特徴量は、画素領域の固まりの大きさを反映した量といえる。また、第1特徴量として第1画素領域の面積(画素数)を用いてもよい。
高密度実装基板では、入射角の最も大きい光は他の部品で遮られる可能性がある。その場合、正しい色彩パターンが得られず、良品であっても第1画素領域が不良品並に小さくなる。しかし、第1判定条件は良品の過検出を排除する値に設定されているので、良品であれば必ず判定結果が真となる。なお、入射角の最も大きい光が遮られた良品における場合と同等の大きさの第1画素領域をもつ不良品は、第1ロジックでは見逃される(判定結果が真となる)。
次に、基板検査装置の第2検査手段が、第2ロジックに従って、前記検査画像の半田部分から前記第2色条件を満足する第2画素領域を抽出して、前記第2画素領域のもつ第2特徴量が前記第2判定条件を満足するか判定する。
ここで、第2色条件は入射角が最も小さい光の色成分を含む画素を抽出するものであることから、第2画素領域は、良品では小さく(狭く)、不良品では大きく(広く)なる傾向にある。よって、第2特徴量も、第1特徴量と同様、画素領域の大きさを表す量を採用するとよい。なお、半田の不良には、半田なし、半田不足、半田過多など様々な形態があり、それぞれ第2画素領域の現れ方もまちまちである。よって、第2画素領域の構成画素が固まっていても離散していても同様の値が得られるという点で、第2特徴量として第2画素領域の面積(画素数)を採用することが好ましい。また、面積を用いた場合には、検査ロジック(第2判定条件)の生成が簡単になるという利点もある。
第2画素領域の大きさは、入射角の最も大きい光が他の部品に遮られていても何ら影響を受けない。よって、第1ロジックで見逃される不良品と、入射角の最も大きい光が遮られた良品とのあいだに、第2特徴量の有意かつ明確な差異を見出すことが可能である。言い換えれば、第1ロジックで見逃され得る不良品を排除する値に第2判定条件を設定することが可能であり、この第2判定条件を用いれば少なくとも、第1ロジックにおいて良品と判定された部品の中から、見逃された不良品を除くことができる。
そして、基板検査装置の判定手段は、前記第1ロジックおよび第2ロジックの判定結果が共に真の場合に前記検査対象部品を良品と判定する。これにより、入射角の最も大きい光が他の部品に遮られていたとしても、良品は良品と判定され、且つ、不良品の見逃しは排除されるので、高密度実装基板における半田フィレットについての高精度な良否判定を実現することができる。
上記第1ロジックおよび第2ロジックからなる検査ロジックは、本発明の検査ロジック生成装置によって自動生成される。検査ロジック生成装置は、画像取得手段、第1画素領域抽出手段、第1特徴量ヒストグラム生成手段、第1判定条件決定手段、特定不良品画像選出手段、第2画素領域抽出手段、第2特徴量ヒストグラム生成手段、第2判定条件決定手段、検査ロジック生成手段を有し、これらの機能は情報処理装置のプログラムによって実現される。
本発明の検査ロジック生成装置では、まず、画像取得手段が、半田付けの良好な部品を撮像して得られた複数の良品画像と半田付けの不良な部品を撮像して得られた複数の不良品画像とを取得する。
そして、第1画素領域抽出手段が、入射角が最も大きい光の色成分を含む画素を抽出するための第1色条件を用いて、前記良品画像および不良品画像のそれぞれから第1画素領
域を抽出し、第1特徴量ヒストグラム生成手段が、それぞれの第1画素領域がもつ第1特徴量について第1特徴量ヒストグラムを作成し、第1判定条件決定手段が、前記第1特徴量ヒストグラムにおいて前記良品画像の度数分布のすべてを内包するように第1判定条件を決定する。これにより、良品の過検出は排除し且つ不良品の見逃しは許容する値をもつ第1判定条件を生成することができる。
ここで、第1特徴量として、「第1画素領域を構成するラインのうち、所定幅以上の画素数をもつラインの本数」を採用した場合には、次の手順で「幅」および「本数のしきい値」の最適解を探索するとよい。
まず、第1判定条件決定手段が、ラインの幅を任意に設定する。そして、前記良品画像および不良品画像それぞれの第1画素領域における前記幅以上の画素数をもつラインの本数について前記第1特徴量ヒストグラム生成手段に第1特徴量ヒストグラムを作成させ、前記良品画像の度数分布の下限よりも小さなにしきい値を設定し、そのしきい値による前記良品画像と前記不良品画像の分離度を算出する。
第1判定条件決定手段は、「幅」の設定値を変えながら、上述した一連の探索処理を繰り返すことによって、分離度が最大となる幅を決定し、決定された「幅」および「その幅におけるしきい値」を前記第1判定条件とする。これにより、自動的に第1判定条件の最適解を求めることができる。
良品画像と不良品画像の分離度としては、種々の量を採用できるが、前記しきい値を超える度数の不良品画像の数に基づいて算出される量であることが好ましい。このような分離度を採用すれば、第1ロジックで見逃される不良品の数を少なくすることができ、最終的な判定精度の向上につながる。たとえば、単純に、しきい値を超える度数の不良品画像の数を分離度として採用してもよいし、その数の関数を分離度としてもよい。また、良品画像の度数分布の下限値と、しきい値以下の不良品画像の度数分布の上限値とのあいだの距離や、良品画像の度数分布のピーク値と不良品画像の度数分布のピーク値とのあいだの距離などを考慮することも好ましい。
第1判定条件が決定したら、特定不良品画像選出手段が、前記不良品画像の中から前記第1判定条件を満足する度数のものを特定不良品画像として選び出す。つまり、特定不良品画像とは、第1ロジックで見逃され得る不良品に対応している。
続いて、第2画素領域抽出手段が、入射角が最も小さい光の色成分を含む画素を抽出するための第2色条件を用いて、前記良品画像および前記特定不良品画像のそれぞれから第2画素領域を抽出し、第2特徴量ヒストグラム生成手段が、それぞれの第2画素領域がもつ第2特徴量について第2特徴量ヒストグラムを作成し、第2判定条件決定手段が、前記第2特徴量ヒストグラムの度数分布に基づいて、前記特定不良品画像の第2特徴量から前記良品画像の第2特徴量を分離するための第2判定条件を決定する。このように、第2判定条件の基準となる教師画像を、良品画像と特定不良品画像に限ったことにより、第1ロジックで見逃され得る不良品(特定不良品)の見逃しを排除する値をもつ第2判定条件を生成することができる。
ここで、第2特徴量として、第2画素領域の面積を採用した場合には、上述したような探索処理が不要となるため、第2判定条件の決定処理が簡単になる。なお、第2特徴量として、「第2画素領域を構成するラインのうち、所定幅以上の画素数をもつラインの本数」を採用し、上述した探索処理に準じた手順で「幅」および「本数のしきい値」の最適解を探索することも可能である。
第1および第2判定条件が決定したら、検査ロジック生成手段が、検査対象部品を撮像して得られた検査画像から前記第1色条件を満足する画素領域を抽出して、その画素領域のもつ第1特徴量が前記第1判定条件を満足するか判定する第1ロジックと、前記検査画像から前記第2色条件を満たす画素領域を抽出して、その画素領域のもつ第2特徴量が前記第2判定条件を満足するか判定する第2ロジックとからなり、前記第1ロジックおよび第2ロジックの判定結果が共に真の場合に前記検査対象部品を良品と判定する検査ロジックを生成する。この検査ロジックは基板検査装置に渡され、半田フィレット検査に供される。
なお、本発明は、上記処理の少なくとも一部を含む基板検査装置の基板検査方法もしくは検査ロジック生成方法、または、かかる方法を実現するためのプログラムとして捉えることができる。また、本発明は、上記処理を実行する手段の少なくとも一部を有する基板検査装置または基板検査装置の検査ロジック生成装置として捉えることもできる。上記手段および処理の各々は可能な限り互いに組み合わせて本発明を構成することができる。
本発明の基板検査装置によれば、高密度実装基板における半田フィレットの良否判定を高精度に行うことができる。また、本発明の検査ロジック生成装置によれば、基板検査装置に用いられるパラメータ、特に高密度実装基板における半田フィレット検査で用いられる検査ロジックを自動生成することができ、ティーチング作業の軽減、さらにはティーチングの自動化を図ることが可能となる。
以下に図面を参照して、この発明の好適な実施の形態を例示的に詳しく説明する。
(基板検査システムの構成)
図1は、本発明の実施形態に係る基板検査システムのハードウェア構成を示している。
基板検査システムは、基板検査処理を実行する基板検査装置1と、この基板検査装置1の基板検査処理において用いられる検査ロジック(パラメータ)を自動生成する検査ロジック生成装置2とから構成される。基板検査装置1と検査ロジック生成装置2は、有線もしくは無線のネットワーク、または、MOやDVDなどの記録媒体を介して、画像やパラメータなどの電子データの受け渡しを行うことができる。なお、本実施形態では基板検査装置1と検査ロジック生成装置2が別体構成となっているが、基板検査装置本体に検査ロジック生成装置の機能を組み込んで一体構成とすることも可能である。
(基板検査装置の構成)
基板検査装置1は、カラーハイライト方式により基板20上の実装部品21の実装品質(半田付け状態など)を自動検査する装置である。基板検査装置1は、概略、Xステージ22、Yステージ23、投光部24、撮像部25、制御処理部26を備えている。
Xステージ22およびYステージ23は、それぞれ制御処理部26からの制御信号に基づいて動作するモータ(図示せず)を備える。これらモータの駆動によりXステージ22が投光部24および撮像部25をX軸方向へ移動させ、またYステージ23が基板20を支持するコンベヤ27をY軸方向へ移動させる。
投光部24は、異なる径を有しかつ制御処理部26からの制御信号に基づき赤色光,緑色光,青色光を同時に照射する3個の円環状光源28,29,30により構成されている。各光源28,29,30は、観測位置の真上位置に中心を合わせかつ観測位置から見て異なる仰角に対応する方向に配置されている。かかる配置により、投光部24は基板20
上の実装部品21に異なる入射角で複数の色の光(本実施形態では、R,G,Bの3色)を照射する。
撮像部25はカラーカメラであって、観測位置の真上位置に下方に向けて位置決めしてある。これにより基板表面の反射光が撮像部25により撮像され、三原色のカラー信号R,G,Bに変換されて制御処理部26へ供給される。
制御処理部26は、A/D変換部33、画像処理部34、検査ロジック記憶部35、判定部36、撮像コントローラ31、XYステージコントローラ37、メモリ38、制御部(CPU)39、記憶部32、入力部40、表示部41、プリンタ42、通信I/F43などで構成される。
A/D変換部33は、撮像部25からのカラー信号R,G,Bを入力してディジタル信号に変換する回路である。各色相毎のディジタル量の濃淡画像データは、メモリ38内の画像データ格納エリアへと転送される。
撮像コントローラ31は、制御部39と投光部24および撮像部25とを接続するインターフェイスなどを備える回路であり、制御部39の出力に基づき投光部24の各光源28,29,30の光量を調整したり、撮像部25の各色相光出力の相互バランスを保つなどの制御を行う。
XYステージコントローラ37は制御部39とXステージ22およびYステージ23とを接続するインターフェイスなどを備える回路であり、制御部39の出力に基づきXステージ22およびYステージ23の駆動を制御する。
検査ロジック記憶部35は、基板検査処理に用いられる検査ロジックを記憶する記憶部である。基板検査装置1では、半田形状を検査するフィレット検査や部品の欠落を検査する欠落検査など、複数種類の検査処理を行うことができる。検査ロジックは、検査の種類ごとに用意されるものであって、画像から所定の色彩パターン(画素領域)を抽出するための色パラメータ(色条件)、その色彩パターンから抽出する特徴量の種類、その特徴量に関する良否の判定条件などから構成される。
画像処理部34は、基板20上の部品21を撮像して得られた画像から色パラメータを満たす領域を抽出する処理、および、抽出された領域から所定の特徴量を算出する処理を実行する回路である。判定部36は、画像処理部34で算出された特徴量を受け取り、その特徴量が所定の判定条件を満たすか否かで部品の実装状態の良否を判定する処理を実行する回路である。
入力部40は、操作情報や基板20に関するデータなどを入力するのに必要なキーボードやマウスなどから構成されている。入力されたデータは制御部39へ供給される。通信I/F43は、検査ロジック生成装置2や他の外部装置などとの間でデータの送受信を行うためのものである。
制御部(CPU)39は、各種演算処理や制御処理を実行する回路である。記憶部32は、ハードディスクやメモリから構成される記憶装置であって、制御部39にて実行されるプログラムの他、基板のCAD情報、基板検査処理の判定結果などが格納される。
図2に基板検査装置1の機能構成を示す。基板検査装置1は、指示情報受付機能10、基板搬入機能11、CAD情報読込機能12、ステージ操作機能13、撮像機能14、検査ロジック読込機能15、検査機能16、判定結果書込機能17、基板搬出機能18を有
する。また、検査機能16は、半田領域抽出機能16a、第1検査機能16b、第2検査機能16c、判定機能16dから構成される。これらの機能は、制御部39が記憶部32に格納されたプログラムに従って上記ハードウェアを制御することによって実現されるものである。また、記憶部32の内部には、CAD情報を記憶するCAD情報記憶部32aと判定結果を記憶する判定結果記憶部32bが設けられている。
(基板検査処理)
次に、上記基板検査装置1における基板検査処理について述べる。ここでは、基板検査処理の一例として、高密度実装基板に対応した半田フィレット検査を説明する。半田フィレット検査とは、半田フィレットの形状が良好か否かを判定する処理である。
図3(a)に示すように、良品の半田フィレットでは、部品21から基板20上のランドにかけて山の裾野のような広い傾斜面が形成される。これに対し、半田不足が起こると傾斜面の面積が小さくなり、逆に半田過多の場合には半田フィレットがランド上に盛り上がった形状となる。
これらの半田フィレットを基板検査装置1で撮像すると、それぞれ図3(b)に示すような画像(色彩パターン)が得られる。赤色,緑色,青色の照射光はそれぞれ異なる角度で半田フィレットに入射するため、半田フィレットの傾斜に応じて撮像部25に入射する反射光の色相が変化する。つまり、傾斜の急な部分では入射角度の最も浅い青色光の反射光が支配的となるのに対し、傾斜がほとんどない部分では赤色光の反射光が支配的となる。
したがって、通常は、良品の半田フィレットでは青系色の画素領域が大きく、赤系色の画素領域が小さくなり、不良品の半田フィレットでは逆に青系色の画素領域が小さく、赤系色の画素領域が大きくなるのである。ただし、他の部品により青色光が遮られた半田フィレットでは、たとえ良品であっても青系色の画素領域が不良品並に小さくなる(赤系色の画素領域には影響がない)。
本実施形態のフィレット検査では、このような色彩パターンの傾向を利用し、青色領域の大きさに基づき良否判定を行う第1ロジックと、赤色領域の大きさに基づき良否判定を行う第2ロジックとを組み合わせることによって、高密度実装に対応したフィレット検査を実現する。以下、図4のフローチャートに沿って、フィレット検査の処理の流れを具体的に説明する。
指示情報受付機能10は、基板検査の実行を指示する指示情報が入力されるまで待ち状態にある(ステップS100;NO、ステップS101)。入力部40の操作により、もしくは、通信I/F43を介して外部機器から指示情報が入力されると、指示情報受付機能10が指示情報を、基板搬入機能11、CAD情報読込機能12および検査ロジック読込機能15に送る(ステップS100;YES)。この指示情報には検査対象となる基板の情報(型番など)が含まれている。
検査ロジック読込機能15は、基板の型番に対応する検査ロジックを検査ロジック記憶部35から読み込む(ステップS102)。ここではフィレット検査用の検査ロジックが読み込まれる。
本実施形態の検査ロジックは第1ロジックと第2ロジックとから構成される。第1ロジックには、入射角が最も大きい光の色成分を含む画素(つまり、青系色の画素)を抽出するための第1色パラメータ(第1色条件)、および、幅としきい値からなる第1判定条件が含まれる。また、第2ロジックには、入射角が最も小さい光の色成分を含む画素(つま
り、赤系色の画素)を抽出するための第2色パラメータ(第2色条件)、および、しきい値からなる第2判定条件が含まれている。
基板搬入機能11は、指示情報に基づいてプリント基板搬入部から検査対象となる基板20をコンベヤ27上に搬入し(ステップS103)、CAD情報読込機能12は、基板の型番に対応するCAD情報をCAD情報記憶部32aから読み込む(ステップS104)。
次に、ステージ操作機能13は、読み込まれたCAD情報から基板20の寸法、形状、部品の配置などの情報を得て、基板20上に実装された複数の部品21が順に観測位置(撮像位置)に位置合わせされるように、XYステージコントローラ37を介してXステージ22およびYステージ23を操作する(ステップS105)。
一方、撮像機能14は、撮像コントローラ31を介して投光部24の3個の光源28,29,30を発光させ、赤色、緑色、青色の光を同時に基板20上に照射する。また、撮像機能14は、撮像コントローラ31を介して撮像部25を制御し、ステージ22,23の操作に同期して基板20上の部品21を撮像する(ステップS106)。撮像された画像はメモリ38に取り込まれる。
検査機能16では、半田領域抽出機能16aが、画像処理部34によって撮像画像から半田領域を抽出する(ステップS107)。半田領域の抽出はたとえばテンプレートマッチングにより自動で行うことができる。
続いて、第1検査機能16bが、第1ロジックに従って、抽出された半田領域から第1色パラメータを満足する第1画素領域を抽出する(ステップS108)。ここで用いられる第1色パラメータは、青色の彩度の下限と上限、および、明度の下限と上限の4つの値で構成されている。第1検査機能16bは、二値化処理によって、第1色パラメータで定義された色範囲内に含まれる画素を白画素に、それ以外の画素を黒画素に変換する。図3(c)は、二値化後の半田領域を示している。第1色パラメータで二値化することにより、半田領域中の青系色の第1画素領域のみが白画素として抽出されていることがわかる。
次に、第1検査機能16bは、画像処理部34にて、第1画素領域(白画素領域)の特徴量を抽出する(ステップS109)。ここでは図5に示すように、特徴量として、第1画素領域を構成するラインのうち、第1判定条件で規定された幅(以下、「規定幅」と呼ぶ)以上の画素数をもつラインの本数(以下、「規定幅ライン数」と呼ぶ)が算出される。図5の例では、良品の第1画素領域から「4本」、不良品の第1画素領域から「1本」という特徴量が抽出されている。この特徴量は画素領域の固まりの大きさを反映しており、良品画像における青系色領域を見分けるのに適している。なお、説明をわかりやすくするために図5では10×10画素の画像を例示したが、実際の検査では数十×数十〜百数十×百数十程度の画像が用いられる。
次に、第1検査機能16bは、第1画素領域の規定幅ライン数を判定部36に引き渡し、判定部36にて第1画素領域の規定幅ライン数と第1判定条件に含まれるしきい値とを比較する(ステップS110)。規定幅ライン数がしきい値を超えた場合には「真」と判定され、しきい値以下の場合には「偽」と判定される。たとえば、しきい値が「3本」であれば、図5の良品は「真」、不良品は「偽」という判定結果が得られる。
本実施形態では、第1判定条件の規定幅としきい値とが、良品の過検出は排除し且つ不良品の見逃しは許容する値に予め設定されている(具体的な設定方法については後述する)。技術常識的には、検査に用いられる判定条件は良品の過検出は許容し且つ不良品の見
逃しは排除する値に設定されるものであるが、本実施形態ではあえてその逆の設定を採用している。これにより、図3(d)に示すように、遮光の有無に拘わらず、良品であれば必ず第1ロジックの判定結果が「真」となる。なお、左から2番目の不良品は、遮光ありの良品と同等の大きさの第1画素領域をもつため、その判定結果は「真」となり、不良品の見逃しが起こる。この見逃し不良品を排除するために、第1ロジックで「真」と判定された画像は、第2ロジックにかけられることとなる(ステップS110;YES)。
第2検査機能16cは、第2ロジックに従って、半田領域から第2色パラメータを満足する第2画素領域を抽出する(ステップS111)。ここで用いられる第2色パラメータは、赤色の彩度の下限と上限、および、明度の下限と上限の4つの値で構成されている。第2検査機能16cは、二値化処理によって、第2色パラメータで定義された色範囲内に含まれる画素を白画素に、それ以外の画素を黒画素に変換する。図3(e)は、二値化後の半田領域を示している。第2色パラメータで二値化することにより、半田領域中の赤系色の第2画素領域のみが白画素として抽出されていることがわかる。
次に、第2検査機能16cは、画像処理部34にて、第2画素領域(白画素領域)の特徴量を抽出する(ステップS112)。ここでは特徴量として第2画素領域の面積値(画素数)が算出される。そして、第2検査機能16cは、面積値を判定部36に引き渡し、判定部36にて第2画素領域の面積値と第2判定条件に含まれるしきい値とを比較する(ステップS113)。面積値がしきい値以下の場合には「真」と判定され、しきい値を超えた場合には「偽」と判定される。
本実施形態では、第2判定条件のしきい値が、第1ロジックで見逃され得る不良品の見逃しを排除する値に予め設定されている(具体的な設定方法については後述する)。これにより、図3(f)に示すように、良品の場合は判定結果が「真」となり、第1ロジックで見逃された不良品については判定結果が「偽」となる。
判定機能16dは、第1ロジックおよび第2ロジックの判定結果が共に「真」の場合に検査対象部品を「良品」と判定し、少なくともいずれか一方の判定結果が「偽」の場合には「不良品」と判定する(ステップS114,S115)。図3の破線は「良品」と判定される対象を表している。
判定結果書込機能17は、上記判定結果をロケーションID(部品を特定するための情報)とともに判定結果記憶部32bに書き込む(ステップS116)。
基板20上のすべての部品について検査を行ったら、基板搬出機能18がプリント基板搬送部によって基板20を搬出し、基板検査処理を終了する(ステップS117)。
以上述べた基板検査処理によれば、2次元画像に現れる色彩パターンによって半田フィレットの3次元形状を的確に把握できるため、半田実装品質の良否を正確に判定可能となる。しかも、青色光が他の部品に遮られたとしても、良品は良品と判定され、且つ、不良品の見逃しは排除されるので、高密度実装基板における半田フィレットについての高精度な良否判定を実現することができる。
では次に、上述した検査ロジックを生成する方法について説明する。本実施形態では、検査ロジック生成装置2によって検査ロジックが自動的に生成される。
(検査ロジック生成装置の構成)
検査ロジック生成装置2は、図1に示すように、CPU、メモリ、ハードディスク、I/O制御部、通信I/F、表示部、情報入力部(キーボードやマウス)などを基本ハード
ウェアとして備える汎用のコンピュータ(情報処理装置)によって構成される。
図6に検査ロジック生成装置2の機能構成を示す。検査ロジック生成装置2は、指示情報受付機能50、教師画像情報読込機能51、画像取得機能52、振分機能53、第1画素領域抽出機能54、第1特徴量抽出機能55、第1特徴量ヒストグラム生成機能56、第1判定条件決定機能57、特定不良品画像選出機能58、第2画像領域抽出機能59、第2特徴量抽出機能60、第2特徴量ヒストグラム生成機能61、第2判定条件決定機能62、検査ロジック生成機能63、検査ロジック書込機能64を有する。これらの機能は、メモリもしくはハードディスクに格納されたプログラムがCPUに読み込まれ実行されることによって実現されるものである。
また、ハードディスク内には、ティーチングに用いる教師画像情報を記憶する教師画像情報DB65が設けられている。教師画像情報は、基板検査装置1によって撮像された実装部品の画像と、その画像が検出すべきもの(良品)か除外すべきもの(不良品)かを示す教師情報(ティーチングデータ)とからなる。ティーチングの信頼性を高めるために、良品と不良品それぞれについて数十〜数千の教師画像情報を準備することが好ましい。
(検査ロジック生成処理)
図7Aおよび図7Bのフローチャートに沿って、検査ロジック生成処理の流れを説明する。
指示情報受付機能50は、検査ロジックの自動生成を指示する指示情報が入力されるまで待ち状態にある(ステップS200;NO、ステップS201)。情報入力部から指示情報が入力されると、指示情報受付機能50は教師画像情報読込機能51に指示情報を伝える(ステップS200;YES)。この指示情報には検査ロジック生成の対象となる教師画像情報を特定する情報、および、検査ロジックの種類などが含まれている。
教師画像情報読込機能51は、指示情報に従って、作成すべき検査ロジックに対応する教師画像情報を教師画像情報DB65から読み込む(ステップS202)。教師画像情報には、良品画像(半田フィレットの良好な画像)と不良品画像(半田フィレットの不良な画像)とが含まれる。また良品画像には、青色光が他の部品により遮られている部品の画像と、青色光が正しく照射されている部品の画像とが含まれる。これらの画像には教師情報が付与されている。
教師画像情報が読み込まれたら、画像取得機能52が、教師情報の付与された画像から半田領域を抽出する(ステップS203)。画像取得機能52は、図8に示すように、ランドウィンドウ70と部品本体ウィンドウ71から構成されるテンプレートを有しており、テンプレートを拡大/縮小したり、ランドウィンドウ70と部品本体ウィンドウ71の相対位置をずらしたりしながら、各ウィンドウ70,71を画像中のランド領域72および部品73に合わせ込む。ウィンドウの合わせ込みには、例えば、テンプレートマッチングなどの手法を利用すればよい。これにより、良品画像と不良品画像それぞれについてランド領域72が特定される。そして、ランドウィンドウ70から部品本体ウィンドウ71との重なり部分を除いた領域が半田領域として抽出される(図8の斜線部分参照)。
次に、振分機能53が、教師情報に基づき、抽出された半田領域を良品画像と不良品画像とに振り分ける(ステップS204)。良品画像や不良品画像の例は、図3(b)を参照のこと。
(1)第1判定条件の決定処理
第1画素領域抽出機能54は、予め設定されている第1色パラメータを用いて、良品画
像および不良品画像のすべての半田領域を二値化する(ステップS205)。第1色パラメータは、青色の彩度の下限と上限、および、明度の下限と上限の4つの値で構成されている。第1色パラメータの値は、青色全体を包含するように設定されていてもよいし、良品画像と不良品画像それぞれの画素の色の傾向から自動的に算出するようにしてもよい。この二値化処理では、第1色パラメータで定義された色範囲内に含まれる青系色画素が白画素に、それ以外の画素が黒画素に変換される。二値化後の白画素領域を第1画素領域と呼ぶ。
図3(c)に示すように、原則として、良品画像では第1画素領域が非常に大きく、不良品画像では第1画素領域がきわめて小さくなる。よって、このような二値化画像を利用すると、良品・不良品を識別するための特徴量を定量的に計算するのが容易になる。特徴量としては、第1画素領域の面積、面積比、重心、長さ、最大幅、形状などが挙げられるが、ここでは上述したように規定幅ライン数を特徴量として選ぶ。
ただし、規定幅の設定しだいで規定幅ライン数は変化し、良品と不良品の分離度も変化する。そこで本実施形態では、規定幅を仮の値に設定し、良品画像および不良品画像それぞれの第1画素領域における規定幅ライン数について第1特徴量ヒストグラムを作成し、良品画像の度数分布の下限よりも小さな値にしきい値を設定し、そのしきい値による良品画像と不良品画像の分離度を算出する、といった一連の探索処理を繰り返すことによって、分離度が最大となる最適な規定幅を決定する。
具体的には、まず、第1特徴量抽出機能55が、良品画像と不良品画像それぞれの第1画素領域についてライン毎の幅(白画素の数)を計算する(ステップS206)。図9に示すように、良品画像では幅の広いラインが多く、不良品画像では少ない。また、遮光ありの良品画像では遮光部分が黒画素になってしまうため、幅の広いラインが少なくなっていることがわかる。
次に、第1特徴量抽出機能55は、規定幅の初期値を設定する(ステップS207)。ここでは、ランド幅の10%〜90%の規定幅について探索を行うこととし、初期値はランド幅の10%に設定される(規定幅の値は、ランド幅に対する割合(%)の形式でもよいし、それを画素数に換算した形式でもよい)。
第1特徴量抽出機能55は、各第1画素領域について、規定幅以上の幅をもつラインの本数(規定幅ライン数)を計算する(ステップS208)。第1特徴量ヒストグラム生成機能56は、各第1画素領域の規定幅ライン数に関する第1特徴量ヒストグラムを作成する(ステップS209)。図10に第1特徴量ヒストグラムの一例を示す。図中の黒部分が良品画像の度数分布(良品分布)を表しており、白部分が不良品画像の度数分布(不良品分布)を表している。遮光ありの良品画像は遮光なしの良品画像に比べて規定幅ライン数が少ないために、良品分布の一部が不良品分布に重なっていることがわかる。
第1判定条件決定機能57は、第1特徴量ヒストグラムにおいて良品画像の度数分布(遮光あり、なしの両方を含む)のすべてを内包するようなしきい値を決定する(ステップS210)。本実施形態では、良品分布の下限値と、不良品分布から良品分布との重なりを除いた部分(以下、「非重複分布」という。)の上限値との間にしきい値を設定する。たとえば、図10のように非重複分布と良品分布とが連なっている(間隔が無い)場合には、非重複分布の上限値(良品分布の下限値より1小さい値)をしきい値とすればよい。また、非重複分布と良品分布とが離れている(間隔が有る)場合(図11の中段参照)には、非重複分布の上限値と良品分布の下限値の中間値をしきい値とするか、好ましくは、非重複分布の分散と良品分布の分散に基づいて両分布の間の適切な位置にしきい値を設定すればよい。なお、良品分布の下限値よりも小さな値にしきい値が設定されるのであれば
、他のしきい値決定アルゴリズムを採用しても構わない。
そして、第1判定条件決定機能57は、このしきい値による良品画像と不良品画像の分離度を算出する(ステップS211)。ここでは単純に、「しきい値を超える度数の不良品画像の数」を分離度と定義する。つまり、このしきい値によって見逃される不良品の数が少ないほど分離度が良好であると判断するのである。算出された分離度は、規定幅およびしきい値とともにメモリに格納される。
なお、この定義以外の分離度を採用しても構わない。たとえば、非重複分布の上限値と良品分布の下限値とのあいだの距離や、非重複分布(もしくは不良品分布)と良品分布の分散や、非重複分布(もしくは不良品分布)のピーク値と良品分布のピーク値とのあいだの距離などを考慮することも好ましい。さらに、距離をX、見逃し数をYとした場合に、分離度Eを下記の関数式にて定義してもよい。
E=αX+βY
E=αX/Y
ただし、α,βは係数。
その後、図11に示すように、第1特徴量抽出機能55によって規定幅が順次更新され(ステップS213)、各々の規定幅におけるしきい値および分離度が算出されてはメモリに格納されていく(ステップS208〜S212;NO)。規定幅の最大値(本例ではランド幅の90%)に達したら、上記探索処理を終了する(ステップS212;YES)。そして、メモリに蓄積された各規定幅での分離度を比較して、分離度が最大となった規定幅を選び出し、当該規定幅およびその規定幅におけるしきい値を第1判定条件として決定する(ステップS214)。以上の処理により、良品の過検出は排除し且つ不良品の見逃しは許容する第1判定条件が求まる。
(2)第2判定条件の決定処理
第1判定条件が確定したら、特定不良品画像選出機能58が、不良品画像の中からその第1判定条件を満足する(しきい値を超える)度数のものを特定不良品画像として選び出す(ステップS215)。つまり、特定不良品画像とは、第1ロジックで見逃され得る不良品に対応している(図10参照)。
第2画素領域抽出機能59は、予め設定されている第2色パラメータを用いて、良品画像および特定不良品画像のすべての半田領域を二値化する(ステップS216)。第2色パラメータは、赤色の彩度の下限と上限、および、明度の下限と上限の4つの値で構成されている。第2色パラメータの値は、赤色全体を包含するように設定されていてもよいし、良品画像と特定不良品画像それぞれの画素の色の傾向から自動的に算出するようにしてもよい。この二値化処理では、第2色パラメータで定義された色範囲内に含まれる赤系色画素が白画素に、それ以外の画素が黒画素に変換される。二値化後の白画素領域を第2画素領域と呼ぶ。
図3(e)に示すように、原則として、良品画像では第2画素領域が非常に小さく、不良品画像では第2画素領域がきわめて大きくなる。よって、このような二値化画像を利用すると、良品・不良品を識別するための特徴量を定量的に計算するのが容易になる。特徴量としては、第2画素領域の面積、面積比、重心、長さ、最大幅、形状などが挙げられるが、ここでは面積(面積値)を特徴量として選ぶ。面積値は単一パラメータであるため、規定幅ライン数のような複合パラメータ(幅、ライン数)と異なり、しきい値(判定条件)の決定処理が簡単となる。
具体的には、第2特徴量抽出機能60が、良品画像と特定不良品画像それぞれの第2画
素領域について面積(画素数)を計算し(ステップS217)、第2特徴量ヒストグラム生成機能61が、各第2画素領域の面積値に関する第2特徴量ヒストグラムを作成する(ステップS218)。図12は、良品画像と特定不良品画像の第2特徴量ヒストグラムの一例を示している。良品画像と特定不良品画像とを比べた場合、赤系色画素の面積値に明確な差異が現れることがわかる。
次に、第2判定条件決定機能62が、第2特徴量ヒストグラムの度数分布に基づいて、特定不良品画像の面積値から良品画像の面積値を最適に分離するためのしきい値を算出する(ステップS219)。このしきい値が第2判定条件となる。
なお、特徴量ヒストグラムに現れた2つの山を最適に分離する手法は種々提案されており、ここではどの方法を採用してもよい。たとえば、大津の判別分析法を利用してもよいし、あるいは、経験に基づき良品画像の山の端から3σだけ離れた点をしきい値に決めてもよい。また、第1判定条件の場合と同様のしきい値決定アルゴリズムを採用してもよい(ただし、第2判定条件のしきい値決定に際しては、特定不良品の見逃しを排除できるようにしきい値を設定すべきである。)。
上記処理によって第1判定条件および第2判定条件が確定したら、検査ロジック生成機能63が、第1色パラメータと第1判定条件(規定幅としきい値)とから第1ロジックを生成するとともに、第2色パラメータと第2判定条件(しきい値)とから第2ロジックを生成し、さらにそれらを組み合わせ、第1ロジックおよび第2ロジックの判定結果が共に真の場合に検査対象部品を良品と判定する半田フィレット用の検査ロジックを生成する(ステップS220)。そして、検査ロジック書込機能64が、その検査ロジックを基板検査装置1の検査ロジック記憶部35に書き込む(ステップS221)。
以上述べた本実施形態によれば、半田フィレット検査で用いられる検査ロジックが自動で生成されるので、ティーチングに要する時間と負荷を大幅に削減することができる。しかも、この検査ロジックによれば、高密度実装基板における半田フィレットの良否判定を高精度に行うことができる。なお、色パラメータとしきい値の信頼性は、最初に与える教師画像情報の数が多くなるほど向上する。
<変形例>
上述した実施形態は本発明の一具体例を例示したものにすぎない。本発明の範囲は上記実施形態に限られるものではなく、その技術思想の範囲内で種々の変形が可能である。
たとえば、上記実施形態では彩度の下限と上限および明度の下限と上限からなる色パラメータを用いているが、色パラメータの種類や値の選択は基板検査装置で撮像された部品画像がもつ色彩パターンの傾向に合わせて決定すればよい。また、色パラメータは矩形に限らず、円形、多角形、自由曲線図形などを用いてもよいし、さらに多次元形状にしてもよい。
また、第1画素領域や第2画素領域から抽出する特徴量としては、他にも、面積比、長さ、最大幅、重心などを好ましく採用できる。面積比とは、ランドウィンドウ内で二値化された面積の占有率である。たとえばランド領域に対して部品がずれて半田付けされていると、半田領域の面積が大小するため、面積比が変化する。これを特徴量として捉えれば、部品ずれの検査に有効である。また、長さとは、白画素領域の縦方向や横方向の長さであり、最大長は、白画素領域の長さの中で最大の値である。また、重心とは、白画素領域の重心のランドウィンドウに対する相対位置である。
良否を精度良く判定できるものであればどの特徴量を用いてもよく、精度向上のために
複数種類の特徴量を組み合わせることも好ましい。また、検査ロジック生成処理において複数種類の特徴量を抽出し、その中で良品と不良品とが最もよく分離されるものを特徴量として採用するといったことも可能である。なお、上記実施形態では判定条件の決定に特徴量ヒストグラムを用いたが、特徴量の種類が異なればそれに合わせて、面積比ヒストグラム、長さヒストグラム、最大幅ヒストグラム、重心ヒストグラムなど、を用いることになる。例えば、面積値ヒストグラムの替わりに面積比ヒストグラムを用いれば、ランドウィンドウにおける色パラメータで二値化された画素の占有率によって良否判定を実行するので、部品がズレたり傾いたりしてランドウィンドウの大きさが小さくなったり大きくなったりした場合でも、ランドウィンドウの大きさに影響されない判定処理が可能となる。
本発明の実施形態に係る基板検査システムのハードウェア構成を示す図。 基板検査装置の機能構成を示す図。 半田フィレットの形状と色彩パターンと二値化画像と検査ロジックの判定結果の関係を示す図。 基板検査処理の流れを示すフローチャート。 規定幅および規定幅ライン数について説明する図。 検査ロジック生成装置の機能構成を示す図。 検査ロジック生成処理の流れを示すフローチャート。 検査ロジック生成処理の流れを示すフローチャート。 半田領域の抽出処理を示す図。 第1画素領域の特徴量を示す図。 第1特徴量ヒストグラムを示す図。 第1判定条件の探索処理を示す図。 第2判定条件の決定処理を示す図。 カラーハイライト方式の基板検査装置の構成を示す図。 撮像画像に現れる色彩パターンの一例を示す図。 色パラメータの設定支援ツールを示す図。 高密度実装に起因する問題を示す図。 半田フィレットの形状と色彩パターンと二値化画像の関係を示す図。 良品、不良品それぞれの青系色の画素領域の面積ヒストグラムを示す図。
符号の説明
1 基板検査装置
2 検査ロジック生成装置
10 指示情報受付機能
11 基板搬入機能
12 CAD情報読込機能
13 ステージ操作機能
14 撮像機能
15 検査ロジック読込機能
16 検査機能
16a 半田領域抽出機能
16b 第1検査機能
16c 第2検査機能
16d 判定機能
17 判定結果書込機能
18 基板搬出機能
20 基板
21 実装部品
22 Xステージ
23 Yステージ
24 投光部
25 撮像部
26 制御処理部
27 コンベヤ
28 赤色光源
29 緑色光源
30 青色光源
31 撮像コントローラ
32 記憶部
32a CAD情報記憶部
32b 判定結果記憶部
33 A/D変換部
34 画像処理部
35 検査ロジック記憶部
36 判定部
37 XYステージコントローラ
38 メモリ
39 制御部
40 入力部
41 表示部
42 プリンタ
50 指示情報受付機能
51 教師画像情報読込機能
52 画像取得機能
53 振分機能
54 第1画素領域抽出機能
55 第1特徴量抽出機能
56 第1特徴量ヒストグラム生成機能
57 第1判定条件決定機能
58 特定不良品画像選出機能
59 第2画像領域抽出機能
60 第2特徴量抽出機能
61 第2特徴量ヒストグラム生成機能
62 第2判定条件決定機能
63 検査ロジック生成機能
64 検査ロジック書込機能
65 教師画像情報DB
70 ランドウィンドウ
71 部品本体ウィンドウ
72 ランド領域
73 部品

Claims (14)

  1. 投光手段によって、基板上の検査対象部品に異なる入射角で複数の色の光を照射し、
    撮像手段によって、その反射光を撮像して検査画像を取得し、
    入射角が最も大きい光の色成分を含む画素を抽出するための第1色条件と、前記第1色条件を満足する画素領域がもつ第1特徴量に関して、良品の過検出は排除し且つ不良品の見逃しは許容する値に設定された第1判定条件とを含む第1ロジックを記憶部から読み込み、
    前記第1ロジックに従って、前記検査画像の半田部分から前記第1色条件を満足する第1画素領域を抽出して、前記第1画素領域のもつ第1特徴量が前記第1判定条件を満足するか判定し、
    入射角が最も小さい光の色成分を含む画素を抽出するための第2色条件と、前記第2色条件を満足する画素領域がもつ第2特徴量に関して、前記第1ロジックで見逃され得る不良品の見逃しを排除する値に設定された第2判定条件とを含む第2ロジックを記憶部から読み込み、
    前記第2ロジックに従って、前記検査画像の半田部分から前記第2色条件を満足する第2画素領域を抽出して、前記第2画素領域のもつ第2特徴量が前記第2判定条件を満足するか判定し、
    前記第1ロジックおよび第2ロジックの判定結果が共に真の場合に前記検査対象部品を良品と判定する
    基板検査装置による基板検査方法。
  2. 前記第1特徴量は、前記第1画素領域を構成するラインのうち、所定幅以上の画素数をもつラインの本数である
    請求項1記載の基板検査装置による基板検査方法。
  3. 前記第2特徴量は、前記第2画素領域の面積である
    請求項1または2記載の基板検査装置による基板検査方法。
  4. 基板上の実装部品に異なる入射角で複数の色の光を照射し、その反射光を撮像して得られた画像に基づいて部品の実装状態を検査する基板検査装置において用いられる検査ロジックを自動生成する方法であって、
    情報処理装置が、
    半田付けの良好な部品を撮像して得られた複数の良品画像と半田付けの不良な部品を撮像して得られた複数の不良品画像とを取得し、
    入射角が最も大きい光の色成分を含む画素を抽出するための第1色条件を用いて、前記良品画像および不良品画像のそれぞれから第1画素領域を抽出し、
    それぞれの第1画素領域がもつ第1特徴量について第1特徴量ヒストグラムを作成し、
    前記第1特徴量ヒストグラムにおいて前記良品画像の度数分布のすべてを内包するように第1判定条件を決定し、
    前記不良品画像の中から前記第1判定条件を満足する度数のものを特定不良品画像として選び出し、
    入射角が最も小さい光の色成分を含む画素を抽出するための第2色条件を用いて、前記良品画像および前記特定不良品画像のそれぞれから第2画素領域を抽出し、
    それぞれの第2画素領域がもつ第2特徴量について第2特徴量ヒストグラムを作成し、
    前記第2特徴量ヒストグラムの度数分布に基づいて、前記特定不良品画像の第2特徴量から前記良品画像の第2特徴量を分離するように第2判定条件を決定し、
    検査対象部品を撮像して得られた検査画像から前記第1色条件を満足する画素領域を抽出して、その画素領域のもつ第1特徴量が前記第1判定条件を満足するか判定する第1ロジックと、前記検査画像から前記第2色条件を満たす画素領域を抽出して、その画素領域
    のもつ第2特徴量が前記第2判定条件を満足するか判定する第2ロジックとからなり、前記第1ロジックおよび第2ロジックの判定結果が共に真の場合に前記検査対象部品を良品と判定する検査ロジックを生成する
    基板検査装置の検査ロジック生成方法。
  5. 前記第1特徴量は、前記第1画素領域を構成するラインのうち、所定幅以上の画素数をもつラインの本数である
    請求項4記載の基板検査装置の検査ロジック生成方法。
  6. 情報処理装置は、
    ラインの幅を設定し、前記良品画像および不良品画像それぞれの第1画素領域における前記幅以上の画素数をもつラインの本数について前記第1特徴量ヒストグラムを作成し、前記良品画像の度数分布の下限よりも小さな値にしきい値を設定し、そのしきい値による前記良品画像と前記不良品画像の分離度を算出する探索処理を繰り返すことによって、分離度が最大となる幅を決定し、
    決定された幅およびその幅におけるしきい値を前記第1判定条件とする
    請求項5記載の基板検査装置の検査ロジック生成方法。
  7. 前記分離度は、前記しきい値を超える度数の不良品画像の数に基づいて算出される
    請求項6記載の基板検査装置の検査ロジック生成方法。
  8. 前記第2特徴量は、前記第2画素領域の面積である
    請求項4〜7のうちいずれか1項記載の基板検査装置の検査ロジック生成方法。
  9. 基板上の検査対象部品に異なる入射角で複数の色の光を照射する投光手段と、
    その反射光を撮像して検査画像を取得する撮像手段と、
    入射角が最も大きい光の色成分を含む画素を抽出するための第1色条件、および、前記第1色条件を満足する画素領域がもつ第1特徴量に関して、良品の過検出は排除し且つ不良品の見逃しは許容する値に設定された第1判定条件を含む第1ロジック、並びに、入射角が最も小さい光の色成分を含む画素を抽出するための第2色条件、および、前記第2色条件を満足する画素領域がもつ第2特徴量に関して、前記第1ロジックで見逃され得る不良品の見逃しを排除する値に設定された第2判定条件を含む第2ロジックを記憶する記憶部と、
    前記第1ロジックに従って、前記検査画像の半田部分から前記第1色条件を満足する第1画素領域を抽出して、前記第1画素領域のもつ第1特徴量が前記第1判定条件を満足するか判定する第1検査手段と、
    前記第2ロジックに従って、前記検査画像の半田部分から前記第2色条件を満足する第2画素領域を抽出して、前記第2画素領域のもつ第2特徴量が前記第2判定条件を満足するか判定する第2ロジックを実行する第2検査手段と、
    前記第1ロジックおよび第2ロジックの判定結果が共に真の場合に前記検査対象部品を良品と判定する判定手段と、
    を備える基板検査装置。
  10. 基板上の実装部品に異なる入射角で複数の色の光を照射し、その反射光を撮像して得られた画像に基づいて部品の実装状態を検査する基板検査装置において用いられる検査ロジックを自動生成するための装置であって、
    半田付けの良好な部品を撮像して得られた複数の良品画像と半田付けの不良な部品を撮像して得られた複数の不良品画像とを取得する画像取得手段と、
    入射角が最も大きい光の色成分を含む画素を抽出するための第1色条件を用いて、前記良品画像および不良品画像のそれぞれから第1画素領域を抽出する第1画素領域抽出手段
    と、
    それぞれの第1画素領域がもつ第1特徴量について第1特徴量ヒストグラムを作成する第1特徴量ヒストグラム生成手段と、
    前記第1特徴量ヒストグラムにおいて前記良品画像の度数分布のすべてを内包するように第1判定条件を決定する第1判定条件決定手段と、
    前記不良品画像の中から前記第1判定条件を満足する度数のものを特定不良品画像として選び出す特定不良品画像選出手段と、
    入射角が最も小さい光の色成分を含む画素を抽出するための第2色条件を用いて、前記良品画像および前記特定不良品画像のそれぞれから第2画素領域を抽出する第2画素領域抽出手段と、
    それぞれの第2画素領域がもつ第2特徴量について第2特徴量ヒストグラムを作成する第2特徴量ヒストグラム生成手段と、
    前記第2特徴量ヒストグラムの度数分布に基づいて、前記特定不良品画像の第2特徴量から前記良品画像の第2特徴量を分離するように第2判定条件を決定する第2判定条件決定手段と、
    検査対象部品を撮像して得られた検査画像から前記第1色条件を満足する画素領域を抽出して、その画素領域のもつ第1特徴量が前記第1判定条件を満足するか判定する第1ロジックと、前記検査画像から前記第2色条件を満たす画素領域を抽出して、その画素領域のもつ第2特徴量が前記第2判定条件を満足するか判定する第2ロジックとからなり、前記第1ロジックおよび第2ロジックの判定結果が共に真の場合に前記検査対象部品を良品と判定する検査ロジックを生成する検査ロジック生成手段と、
    を備える基板検査装置の検査ロジック生成装置。
  11. 前記第1特徴量は、前記第1画素領域を構成するラインのうち、所定幅以上の画素数をもつラインの本数である
    請求項10記載の基板検査装置の検査ロジック生成装置。
  12. 第1判定条件決定手段は、
    ラインの幅を設定し、前記良品画像および不良品画像それぞれの第1画素領域における前記幅以上の画素数をもつラインの本数について前記第1特徴量ヒストグラム生成手段に第1特徴量ヒストグラムを作成させ、前記良品画像の度数分布の下限よりも小さな値にしきい値を設定し、そのしきい値による前記良品画像と前記不良品画像の分離度を算出する探索処理を繰り返すことによって、分離度が最大となる幅を決定し、
    決定された幅およびその幅におけるしきい値を前記第1判定条件とする
    請求項11記載の基板検査装置の検査ロジック生成装置。
  13. 前記分離度は、前記しきい値を超える度数の不良品画像の数に基づいて算出される
    請求項12記載の基板検査装置の検査ロジック生成装置。
  14. 前記第2特徴量は、前記第2画素領域の面積である
    請求項10〜13のうちいずれか1項記載の基板検査装置の検査ロジック生成装置。
JP2004281591A 2004-09-28 2004-09-28 基板検査装置および基板検査方法並びに基板検査装置の検査ロジック生成装置および検査ロジック生成方法 Expired - Fee Related JP4453503B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004281591A JP4453503B2 (ja) 2004-09-28 2004-09-28 基板検査装置および基板検査方法並びに基板検査装置の検査ロジック生成装置および検査ロジック生成方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004281591A JP4453503B2 (ja) 2004-09-28 2004-09-28 基板検査装置および基板検査方法並びに基板検査装置の検査ロジック生成装置および検査ロジック生成方法

Publications (2)

Publication Number Publication Date
JP2006098093A JP2006098093A (ja) 2006-04-13
JP4453503B2 true JP4453503B2 (ja) 2010-04-21

Family

ID=36238081

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004281591A Expired - Fee Related JP4453503B2 (ja) 2004-09-28 2004-09-28 基板検査装置および基板検査方法並びに基板検査装置の検査ロジック生成装置および検査ロジック生成方法

Country Status (1)

Country Link
JP (1) JP4453503B2 (ja)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4747955B2 (ja) * 2006-06-07 2011-08-17 オムロン株式会社 検査制御装置、検査制御方法、検査システム、制御プログラム、および、記録媒体
JP4788517B2 (ja) * 2006-07-28 2011-10-05 オムロン株式会社 基板外観検査用の検査基準データの設定方法およびこの方法を用いた基板外観検査装置
JP4719284B2 (ja) 2008-10-10 2011-07-06 トヨタ自動車株式会社 表面検査装置
KR20180054063A (ko) * 2016-11-14 2018-05-24 주식회사 고영테크놀러지 검사체에 대한 양부 판정 조건을 조정하는 방법 및 장치
JP7219016B2 (ja) * 2018-04-27 2023-02-07 日立造船株式会社 判定装置、判定方法、および対象物判定プログラム
CN111289538B (zh) * 2020-02-25 2023-08-29 青岛滨海学院 基于机器视觉的pcb板元件检测系统及检测方法
CN114002225B (zh) * 2021-10-19 2023-05-12 业成科技(成都)有限公司 光学检测系统与方法

Also Published As

Publication number Publication date
JP2006098093A (ja) 2006-04-13

Similar Documents

Publication Publication Date Title
JP4595705B2 (ja) 基板検査装置並びにそのパラメータ設定方法およびパラメータ設定装置
JP4736764B2 (ja) 基板検査装置並びにその検査ロジック設定方法および検査ロジック設定装置
JP4935109B2 (ja) 基板検査装置並びにその検査ロジック設定方法および検査ロジック設定装置
JP4830501B2 (ja) 基板検査方法および装置、並びに、その検査ロジック設定方法および装置
JP3551188B2 (ja) 表面状態検査方法および基板検査装置
JP4492356B2 (ja) 基板検査装置並びにそのパラメータ設定方法およびパラメータ設定装置
WO2011036846A1 (ja) 欠陥検査装置および欠陥検査方法
JP5861462B2 (ja) はんだ検査のための検査基準登録方法およびその方法を用いた基板検査装置
JP4539355B2 (ja) 基板検査装置並びにそのパラメータ設定方法およびパラメータ設定装置
JP5417197B2 (ja) 検査装置および検査方法
JP4453503B2 (ja) 基板検査装置および基板検査方法並びに基板検査装置の検査ロジック生成装置および検査ロジック生成方法
JP4506395B2 (ja) 基板検査装置並びにそのパラメータ設定方法およびパラメータ設定装置
JP2007033126A (ja) 基板検査装置並びにそのパラメータ調整方法およびパラメータ調整装置
JP6049052B2 (ja) ウエハ外観検査装置及びウエハ外観検査装置における感度しきい値設定方法
JP7215218B2 (ja) 分光検査方法、画像処理装置、及びロボットシステム
JP4507785B2 (ja) 基板検査装置並びにそのパラメータ設定方法およびパラメータ設定装置
JP2006078285A (ja) 基板検査装置並びにそのパラメータ設定方法およびパラメータ設定装置
JP4419778B2 (ja) 基板検査装置並びにそのパラメータ設定方法およびパラメータ設定装置
JP2002250700A (ja) パターン検査方法およびその装置
JP4858227B2 (ja) 検査パラメータ設定支援装置、その制御プログラムおよび制御方法
JP2003216930A (ja) 変色検査方法及び変色検査装置
JP2004085543A (ja) 外観検査装置及び外観検査方法
JPH10112469A (ja) ワイヤボンディング検査装置
JP2014134526A (ja) 基板検査装置、画像解析装置、基板の検査方法及び基板の製造方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20070226

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090929

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100112

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100125

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130212

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4453503

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140212

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees