JP2010121958A - 欠陥検出方法および欠陥検出装置 - Google Patents

欠陥検出方法および欠陥検出装置 Download PDF

Info

Publication number
JP2010121958A
JP2010121958A JP2008293291A JP2008293291A JP2010121958A JP 2010121958 A JP2010121958 A JP 2010121958A JP 2008293291 A JP2008293291 A JP 2008293291A JP 2008293291 A JP2008293291 A JP 2008293291A JP 2010121958 A JP2010121958 A JP 2010121958A
Authority
JP
Japan
Prior art keywords
image
difference
defect
averaging
original image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2008293291A
Other languages
English (en)
Inventor
Yuichiro Maruyama
祐一郎 丸山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2008293291A priority Critical patent/JP2010121958A/ja
Publication of JP2010121958A publication Critical patent/JP2010121958A/ja
Pending legal-status Critical Current

Links

Images

Landscapes

  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)

Abstract

【課題】検査対象の画像における特定方向のパターンを除去することにより、欠陥の誤検出を防止する。
【解決手段】検査対象となるパターンを有する基板11を撮像して元画像51を得る撮像工程S1と、元画像51を、基板11のパターン方向の成分を用いて平均化して平均化画像52を生成する指向性平均化処理工程S2と、元画像51と平均化画像52との各画素の差分を算出して差分画像53を生成する差分処理工程S3と、差分画像を2値化した2値化画像54を生成する2値化処理工程S4と、2値化画像54から基板11の欠陥を判定する欠陥判定工程S5と、を備えている。
【選択図】図4

Description

本発明は、検査対象を撮像した画像を基づき検査対象の欠陥を検出する欠陥検出方法および欠陥検出装置に関する。
従来、撮像した検査対象の画像に2値化処理を施し、得られた2値化画像の高輝度の画素(白い部分)を膨張させて所定の大きさになったものを検出領域に設定し、その検出領域に濃淡処理を行なって強調された濃淡に基づいてクラック(欠陥)候補を抽出し、抽出した欠陥候補の長さが一定以上のものを欠陥とするクラック検査方法(欠陥検出方法)が知られている。
この欠陥検出方法では、表面の凹凸は連続性が無く、画像処理の結果が「点」として認識されるため、一定以上の長さのものを選択することによって画像の輝度斑の影響をうけずに、欠陥が検出できるようになっている。
特開2008−082860号公報
しかし、このような欠陥検出方法では、濃淡処理の際、輝度値の差が大きい箇所が強調された画像となるため、例えば、電子回路等の配線パターンのような検査対象では、配線のエッジ部分が強調されてしまい、これを欠陥であると誤検出してしまうという問題があった。
本発明は、検査対象の画像における特定方向のパターンを除去することにより、欠陥の誤検出を防止することのできる欠陥検出方法および欠陥検出装置を提供することを課題とする。
本発明の欠陥検出方法は、パターンを有する検査対象を撮像して元画像を得る撮像工程と、元画像を、検査対象のパターン方向の成分を用いて平均化して平均化画像を生成する指向性平均化処理工程と、元画像と平均化画像との各画素の差分を算出して差分画像を生成する差分処理工程と、差分画像を2値化した2値化画像を生成する2値化処理工程と、2値化画像から検査対象の欠陥を判定する欠陥判定工程と、を備えたことを特徴とする。
本発明の欠陥検出装置は、パターンを有する検査対象を撮像して元画像を得る撮像手段と、元画像を、検査対象のパターン方向の成分を用いて平均化して平均化画像を生成する指向性平均化処理手段と、元画像と平均化画像との各画素の差分を算出して差分画像を生成する差分処理手段と、差分画像を2値化した2値化画像を生成する2値化処理手段と、2値化画像から検査対象の欠陥を判定する欠陥判定手段と、を備えたことを特徴とする。
これらの構成によれば、少なくとも1のパターン方向の成分が強調された平均化画像が生成され、これと元画像との差分を算出することで、画像の輝度斑および元画像におけるパターン方向の成分が除去された差分画像を生成することができる。これにより、例えば、電子回路基板等の配線パターンを有する検査対象においても、差分画像における回路配線のエッジ部分の輝度を弱めることができるため、これを欠陥であると誤検出することがない。
この場合、指向性平均化処理工程は、元画像に、任意のパターン方向の成分を抽出可能な複数画素×複数画素の指向性平均化フィルタを用いて平均化を行うことが好ましい。
この構成によれば、簡単な計算処理で平均化画像を生成することができ、元画像の任意の方向のパターンを除去することができる。
この場合、撮像手段による撮像のために検査対象を照らす照明手段を更に備え、照明手段は、LEDリング照明で構成されていることが好ましい。
この構成によれば、均一に検査対象を照らすことができ、均一な輝度分布を持つ元画像を生成することができる。これにより、正確な欠陥検査を行うことができる。
以下、添付図面を参照して、本発明の一実施形態に係る欠陥検出方法を適用した欠陥検出装置について説明する。この欠陥検出装置は、配線パターンが形成された基板(電子回路基板等)を撮像し、その撮像した画像から基板上のメッキ部のシミや傷、ソルダーレジスト部の異物混入、塗布斑等の欠陥の有無を検査するものである。
図1に示すように、欠陥検出装置1は、検査対象である基板11を撮像するCCDカメラ12(撮像手段)と、基板11を照らすLEDリング照明13(照明手段)と、基板11を平坦に吸着保持する吸着テーブル14と、吸着テーブル14上の基板11に吸引力を作用させる真空吸引ポンプ15と、を備えている。なお、撮像手段は、CCDカメラ12に限られたものではなく、CMOSカメラ等、他の撮像方式の撮像手段を用いてもよい。
吸着テーブル14と真空吸引ポンプ15とは、真空吸引チューブ16により接続され、吸着テーブル14上に導入された基板11は、真空吸引ポンプ15を駆動することで吸着テーブル14上に吸着セットされる。これにより、高い水平精度をもって、歪みのない基板11の全体画像50(元画像51)を得ることができる(図3参照)。なお、詳細は後述するが、全体画像50とは、基板11全体の撮像画像を指す。また、これも詳細は後述するが、元画像51とは、全体画像50を分割設定した小エリア32内の画像を指す。
また、撮像用の照明としてLEDリング照明13を用いることで、均一に基板11を照らすことができ、均一な輝度分布を持つ全体画像50(元画像51)を生成することができるため、正確な欠陥検査を行うことができる。
図2(a)に示すように、欠陥検出装置1は、画像処理手段2(パーソナルコンピュータ)を備えており、画像処理手段2は、画像処理のための作業領域(一時記憶領域)として使用されるRAM21と、画像処理に用いる各種データおよび各種プログラム(後述する検査アルゴリズム等)を記憶(保存)するHDD22と、HDD22に記憶されたプログラム等に従い、各種データを演算処理するCPU23と、CPU23による各種処理を行うための制御プログラムおよび制御データを記憶するROM24と、を有している。また、画像処理手段2には、キーボードやマウス等の入力デバイス25、ディスプレイ26およびスピーカ27が接続されており、画像処理手段2は、インターフェース(図示省略)を介して、CCDカメラ12に接続されている。
そして、この欠陥検出装置1では、CCDカメラ12により撮像した画像である元画像51に対し画像処理手段2により様々な画像処理を施す。そして、画像処理手段2は、画像処理の結果得られる処理済み画像に基づいて、検査対象の良否を判定し、その判定結果を出力するようになっている。なお、請求項にいう「指向性平均化処理手段」、「差分処理手段」、「2値化処理手段」および「欠陥判定手段」は、画像処理手段2を指す。
ここで、図2および図3を参照し、欠陥検出装置1による検査項目および検査範囲を規定する検査アルゴリズムについて説明する。ユーザは、先ず、欠陥検査の前処理として、各種検査アルゴリズムの設定を行う。各種検査アルゴリズムの設定は、撮像範囲となる各検査エリア31と、各検査エリア31(正確には、各小エリア32)における検出すべき欠陥の検査項目(欠陥の種類)と、各検査項目の2値化処理方法と、2値化処理方法において検出する検出色と、2値化処理方法において用いる閾値と、を画像処理手段2の入力デバイス25を用いて入力する。入力された各種検査アルゴリズムは、HDD22に格納される。
各検査エリア31は、撮像範囲をディスプレイ26上で確認しながら、入力デバイス25を用いて矩形の範囲を指定することで設定される。本実施形態では、検査項目ごとに基板11の検査範囲を設定しており、基板11を6つの検査エリア31に分割し(図3(a)参照)、それぞれの検査エリア31ごとにCCDカメラ12で撮像を行なう。なお、検査エリア31の分割数は、任意である。この各検査エリア31には、特に図示しないが、アライメントマークがマーキングされており、このアライメントマークを基準にして各検査エリア31の正確な位置を認識できるようになっている。なお、各検査エリア31は、その範囲を規定する複数(4つ)の座標(数値)を、キーボードを用いて入力するようにしてもよい。
CCDカメラ12により撮像された6つの検査エリア31の撮像画像は、画像処理手段2により、一の全体画像50に結合される。そして、この全体画像50を、基板11の配線パターンの方向ごとに、且つ僅かに生じる輝度斑の悪影響が生じにくい最適な範囲となるように、複数の小エリア32に分割設定される(図3(a)および(b)参照)。具体的には、配線パターンが存在しない一様な面から成る範囲(広範囲パターン)や、垂直な配線パターンが形成されている範囲(垂直配線パターン)等を、小エリア32として設定する。この設定は、ユーザが、全体画像50をディスプレイ26上で確認しながら、入力デバイス25を用いて矩形の範囲を指定することで行われる。なお、上記の検査エリア31と同様に、座標を入力するようにしてもよい。
検査項目は、小エリア32ごとに複数設定可能となっており、具体的な検査項目としては、基板11の小エリア32(のソルダーレジスト部42等)への白異物や黒異物の混入等が挙げられる。その他にも、基板11上のソルダーレジスト部42の欠け等の欠陥、メッキ部のシミや傷等も検査項目として設定することができる(図示省略)。
2値化処理方法は、検査項目ごとに設定可能となっており、本実施形態では、2値化処理方法として、固定閾値法、自動2値化法および可変閾値法を用いている。
固定閾値法の閾値は、検出したい欠陥の輝度と元画像51の配線パターンの平均輝度からの差分から求める。自動2値化法の閾値は、輝度値のヒストグラム分布から領域分けを行って求めている。他方、可変閾値法の閾値は、詳細は後述するが、各画素の輝度値に基づいて、画像処理手段2により自動的に設定される。なお、これらの閾値の求め方は、一例であり、モード法、判別分析法等の既知の手法や、ユーザが実験或いは経験等に基づいて求めてもよい。また、検出したい欠陥の輝度値は、予め欠陥のサンプルを用いて求めておく。
2値化処理は、設定した閾値により行われ、2値化処理により得られた2値化画像54において、検査項目(欠陥の種類)の輝度値に応じて設定された検出色(「白」或いは「黒」のいずれか)を検出するようになっている。例えば、背景に比べて輝度値が高い白色の欠陥である場合、2値化画像54では、白く表示されるため、「白」を、欠陥として認識するように設定する。これにより、欠陥の誤検出を防止し、効率よく且つ確実に欠陥検査を行うことができる。なお、白異物や黒異物の混入等以外にも、例えば、基板11上のソルダーレジスト部42の欠け等の欠陥や、メッキ部のシミや傷等の検査項目についても、それらの輝度値に応じて検出する値(「白」或いは「黒」)を設定することができる。
また、2値化処理方法として、輝度斑が少ない面や、配線パターンが存在しない一様な面(広範囲パターン)に対しては、固定閾値法や自動2値化法によって、基板11上の欠陥検出を行うように設定される。他方、輝度斑が比較的大きいエリアでは、固定閾値法等で欠陥を検出することが困難であるため、可変閾値法による欠陥検査を行うように設定される。
しかし、可変閾値法では、後述する平均化画像52の生成の際に、輝度値の差が大きい箇所が強調された画像となるため、配線パターンを有する画像では、配線のエッジ部分が強調されてしまい、これを欠陥であると誤検出してしまうという問題があった。そこで、本実施形態では、以下のような、元画像51に含まれる配線パターンの影響を打ち消すための画像処理を行うことで、正確な欠陥検出ができる。
図4を参照して、欠陥検出装置1(画像処理手段2)による欠陥検出方法について詳細に説明する。ここでは、具体例として、配線部41とソルダーレジスト部42とで構成された縦縞の配線パターンの中に円形の異物43(気泡等、白色)が混入している基板11(小エリア32)の欠陥検出について説明する。欠陥検出方法は、上記の小エリア32ごとに予め設定した、画像処理手段2内のHDD22に格納されている各種検査アルゴリズムの中から最適なプログラムが適用される(図2(b)参照)。プログラムは作業領域であるRAM21に展開され、CPU23により各種処理が行われる。
この欠陥検出方法は、配線パターンを有する基板11を撮像して元画像51を得る撮像工程S1と、元画像51を、基板11の配線パターン方向の成分を用いて平均化して平均化画像52を生成する指向性平均化処理工程S2と、元画像51と平均化画像52との各画素の差分を算出して差分画像53を生成する差分処理工程S3と、差分画像53を2値化した2値化画像54を生成する2値化処理工程S4と、2値化画像54から基板11の欠陥を判定する欠陥判定工程S5と、を備えている。
先ず、撮像工程S1では、基板11を吸着セットした後に、LEDリング照明13を点灯させ、上記したように、CCDカメラ12により6つの検査エリア31を撮像し全体画像50を生成し、その結果から元画像51が得られる(図4(a)参照)。
続いて行われる指向性平均化処理工程S2では、RAM21に記憶された元画像51に対し、指向性平均化フィルタFを用いて所定の計算を実施することで平均化画像52を生成する(図4(b)参照)。この例における指向性平均化フィルタFは、3×3行列となっており、この行列の左から2列目が全て「1」で、その他の行列の要素は「0」となっている(図5(b)参照)。なお、指向性平均化フィルタFは、上記した検査アルゴリズムの設定の際に、小エリア32の配線パターン方向に応じたものを設定しておく。
ここで、図5を参照して、平均化画像52の生成について説明する。平均化画像52は、周知の平均化処理における、いわゆる畳み込みフィルタ処理によって算出される。例えば、平均化画像52の画素C´3は(各マスは画素に該当し、各マス中の文字は輝度値に該当する)、以下の式で求めることができる。
C´3=(B2×a1+B3×a2+B4×a3
+C2×b1+C3×b2+C4×b3
+D2×c1+D3×c2+D4×c3)÷M
(M=a1+a2+a3+b1+b2+b3+c1+c2+c3)
このような簡単な計算処理を元画像51全域(小エリア32)に対して行うことで、平均化画像52が生成される。これにより、配線パターンの方向(縦方向)の成分(画素)のみを用いて、平均化を行うことができる。なお、配線パターンが、横方向である場合は、行列の2行目が全て「1」に、斜め方向である場合は、その角度に対応する対角線の要素が「1」となっている指向性平均化フィルタFを用いる(図6(a)参照)。また、特に説明はしないが、平均化画像52の最端に位置する画素に対しては、例外処理を行っている。
このように、生成された平均化画像52は、配線パターン方向(この例では縦方向)の成分(画素)のみが強調された画像となる(図4(b)参照)。したがって、元画像51の縦縞の配線パターンは、平均化後の平均化画像52でも、はっきりとしたラインを維持していると共に、異物43のエッジ部分の縦方向の成分のみが強調される。なお、本実施形態では、1の配線パターン方向でのみ平均化を行っているが、検査対象が複数方向の配線パターンを有する場合、複数の配線パターン方向で平均化を行ってもかまわない。また、指向性平均化フィルタFの行数および列数を更に増やすことで、詳細な角度の配線パターンの方向を指定することができる。例えば、図6(b)に示す指向性平均化フィルタFでは、約30度の角度を持つ配線パターン方向に対応している。
次に、差分処理工程S3では、元画像51と、生成した平均化画像52との各々対応する画素の差分を算出することで差分画像53を生成する。これにより、元画像51と平均化画像52とに存する撮像時の輝度斑や、配線部41とソルダーレジスト部42との各境界部分は、互いに打ち消し合って、異物43の輪郭のみが残った差分画像53を得ることができる(図4(c)参照)。
2値化処理工程S4では、差分画像53に2値化処理を施すことによって、異物43のエッジ部分が強調表示された2値化画像54を生成する(図4(d)参照)。この2値化処理は、差分画像53の各画素について行われ、画素ごとの最適な閾値は、平均化画像52の該当画素の輝度値に、検出したい異物43の輝度変化量を加えた値を用いている。なお、検出したい異物43の輝度値は、予め異物43のサンプルを用いて求めておく。この工程により、異物43を明確に認識できるようになるため、画像処理手段2による認識精度を高めることができる。
なお、この2値化処理は、画素ごとではなく、小エリア32ごとに設定される閾値に基づいて行ってもよい。また、閾値は、モード法や判別分析法等の既知の手法や、ユーザが実験或いは経験等に基づいて設定してもよい。
欠陥判定工程S5では、得られた2値化画像54を用いて、強調表示された部分を認識し、ユーザに対して基板11に欠陥が存在することを出力する。
本具体例では、異物43は白色であり、背景(配線部41とソルダーレジスト部42)に比べて輝度値が高いため、2値化画像54では、白く表示される(図4(d)参照)。画像処理手段2は、この「白」に表示された部分を異物43(欠陥)であると認識する。そして、画像処理手段2のディスプレイ26への表示や、スピーカ等からの警告音、或いはログ出力等の手段により、ユーザに検出結果を報知する。なお、欠陥が検出されなかった場合、正常であった旨を報知するようにしてもよい。
以上の構成によれば、少なくとも1のパターン方向の成分が強調された平均化画像52が生成され、これと元画像51との差分を算出することで、画像の輝度斑および元画像51におけるパターン方向の成分が除去された差分画像53を生成することができる。これにより、例えば、電子回路基板等の配線パターンを有する基板11でも、差分画像53における回路配線のエッジ部分の輝度を弱めることができるため、これを欠陥であると誤検出することがない。
本実施形態に係る欠陥検出装置の構成を示す模式図である。 画像処理手段のブロック図(a)および各種検査アルゴリズムの設定の説明図(b)である。 本実施形態に係る検査対象である基板の検査エリア等(a)および小エリア(b)を示す説明図である。 本実施形態に係る各画像処理中の画像の例を付加した欠陥検出方法のフローチャートである。 平均化画像の生成、指向性平均化フィルタについての説明図である。 他の指向性平均化フィルタを示した説明図である。
符号の説明
11:基板、13:LEDリング照明、43:異物、50:全体画像、51:元画像、52:平均化画像、53:差分画像、54:2値化画像、F:指向性平均化フィルタ

Claims (4)

  1. パターンを有する検査対象を撮像して元画像を得る撮像工程と、
    前記元画像を、前記検査対象のパターン方向の成分を用いて平均化して平均化画像を生成する指向性平均化処理工程と、
    前記元画像と前記平均化画像との各画素の差分を算出して差分画像を生成する差分処理工程と、
    前記差分画像を2値化した2値化画像を生成する2値化処理工程と、
    前記2値化画像から前記検査対象の欠陥を判定する欠陥判定工程と、を備えたことを特徴とする欠陥検出方法。
  2. 前記指向性平均化処理工程は、前記元画像に、任意のパターン方向の成分を抽出可能な複数画素×複数画素の指向性平均化フィルタを用いて平均化を行うことを特徴とする請求項1に記載の欠陥検出方法。
  3. パターンを有する検査対象を撮像して元画像を得る撮像手段と、
    前記元画像を、前記検査対象のパターン方向の成分を用いて平均化して平均化画像を生成する指向性平均化処理手段と、
    前記元画像と前記平均化画像との各画素の差分を算出して差分画像を生成する差分処理手段と、
    前記差分画像を2値化した2値化画像を生成する2値化処理手段と、
    前記2値化画像から前記検査対象の欠陥を判定する欠陥判定手段と、を備えたことを特徴とする欠陥検出装置。
  4. 前記撮像手段による撮像のために前記検査対象を照らす照明手段を更に備え、
    前記照明手段は、LEDリング照明で構成されていることを特徴とする請求項3に記載の欠陥検出装置。
JP2008293291A 2008-11-17 2008-11-17 欠陥検出方法および欠陥検出装置 Pending JP2010121958A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008293291A JP2010121958A (ja) 2008-11-17 2008-11-17 欠陥検出方法および欠陥検出装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008293291A JP2010121958A (ja) 2008-11-17 2008-11-17 欠陥検出方法および欠陥検出装置

Publications (1)

Publication Number Publication Date
JP2010121958A true JP2010121958A (ja) 2010-06-03

Family

ID=42323441

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008293291A Pending JP2010121958A (ja) 2008-11-17 2008-11-17 欠陥検出方法および欠陥検出装置

Country Status (1)

Country Link
JP (1) JP2010121958A (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013245985A (ja) * 2012-05-24 2013-12-09 Lasertec Corp 欠陥検査装置、欠陥検査方法、及び欠陥検査プログラム
CN112881430A (zh) * 2021-03-10 2021-06-01 深圳汇义科技有限公司 一种基于图像识别的显示屏缺陷监测系统及其检测方法

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2013245985A (ja) * 2012-05-24 2013-12-09 Lasertec Corp 欠陥検査装置、欠陥検査方法、及び欠陥検査プログラム
CN112881430A (zh) * 2021-03-10 2021-06-01 深圳汇义科技有限公司 一种基于图像识别的显示屏缺陷监测系统及其检测方法

Similar Documents

Publication Publication Date Title
CN108445007B (zh) 一种基于图像融合的检测方法及其检测装置
TWI787296B (zh) 光學檢測方法、光學檢測裝置及光學檢測系統
WO2017067342A1 (zh) 板卡位置检测方法及装置
JP2007285754A (ja) 欠陥検出方法および欠陥検出装置
JP2009293999A (ja) 木材欠陥検出装置
WO2017071406A1 (zh) 金针类元件的引脚检测方法和系统
JP2018096908A (ja) 検査装置及び検査方法
TWI512284B (zh) 玻璃氣泡瑕疵檢測系統
JP2018004272A (ja) パターン検査装置およびパターン検査方法
JP2005121546A (ja) 欠陥検査方法
KR101862310B1 (ko) 얼룩결함 검사장치 및 얼룩결함 검사방법
JP6628185B2 (ja) 透明体の検査方法
JP2011095108A (ja) 木材欠陥検出装置およびその方法
JP2010121958A (ja) 欠陥検出方法および欠陥検出装置
KR20060130109A (ko) 기판 검사 장치
JP2016194434A (ja) 検査システムおよび検査方法
JP5634390B2 (ja) ガラス容器の欠陥検査方法及び装置
JP5239275B2 (ja) 欠陥検出方法および欠陥検出装置
JP2002195958A (ja) 表面検査方法
TWI510776B (zh) 玻璃氣泡瑕疵檢測處理方法
JP2004286708A (ja) 欠陥検出装置、方法及びプログラム
JP2006284543A (ja) 実装回路基板検査方法および実装回路基板検査装置
JP2006189293A (ja) スジ状ムラ欠陥の検査方法および装置
KR101053779B1 (ko) 디스플레이 수단의 메탈 마스크 검사 방법
JP7300155B2 (ja) 固形製剤外観検査における教示装置、及び固形製剤外観検査における教示方法