JP2021047162A - 外観検査装置、外観検査装置の較正方法 - Google Patents
外観検査装置、外観検査装置の較正方法 Download PDFInfo
- Publication number
- JP2021047162A JP2021047162A JP2019171844A JP2019171844A JP2021047162A JP 2021047162 A JP2021047162 A JP 2021047162A JP 2019171844 A JP2019171844 A JP 2019171844A JP 2019171844 A JP2019171844 A JP 2019171844A JP 2021047162 A JP2021047162 A JP 2021047162A
- Authority
- JP
- Japan
- Prior art keywords
- calibration
- feature amount
- visual inspection
- inspection apparatus
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
- G01N21/93—Detection standards; Calibrating baseline adjustment, drift correction
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- General Health & Medical Sciences (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
【課題】較正用の標準面を撮影して行う外観検査装置の較正において、標準面の清浄度を厳密に保たずとも正確な較正を実現できる技術を提供する。【解決手段】被検査物に対して、照明光を照射する照明手段91と、被検査物、及び、較正用に準備される較正用標準面95を撮影する撮影手段92と、撮影手段によって撮影された画像を処理することによって、被検査物を検査する検査手段93と、撮影手段と較正用標準面との水平方向における相対位置が異なった状態で撮影手段によって撮影される較正用標準面の複数の画像から所定の特徴量を抽出し、抽出された複数の特徴量の値に基づいて、一の調整用特徴量を算出する、調整用特徴量算出手段932と、を備え、調整用特徴量に基づいて、照明手段の較正及び/又は撮影された画像の補正処理を行う外観検査装置9。【選択図】図1
Description
本発明は、被検査物に照明光を照射して撮影された被検査物の画像に基づいて前記被検査物の検査を行う外観検査装置、及びその較正方法に関する。
従来から、被検査物に照明光を照射して撮影された被検査物の画像に基づいて、被検査物の検査を行う外観検査装置が知られている。
例えば、特許文献1には、いわゆるカラーハイライト方式による鏡面物体の三次元形状計測と、いわゆる位相シフト法による拡散物体の三次元形状計測を組み合わせて、基板の外観検査を行う装置が開示されている。
このような外観検査装置においては、照明光を照射する光源とカメラなどの撮影装置からなる光学系が、使用頻度や環境によって、経時的に本来の性能を発揮できなくなることがあるため、較正を実施することで、本来の性能を発揮できるように再調整して用いることが一般的である。
上記のような較正は、次のようにして行われている。光源から光を治具(標準板など)に照射し、当該治具表面(以下、標準面ともいう)を撮影装置で撮影する(即ち、治具で反射した光を受光する)。そして、撮影装置で撮影した画像から輝度値を抽出し、その値が予め設定された基準値から外れている場合には、基準値に近づくように光源側の電流値を調節するなどして照明条件を調整して、再度照射、撮影を行う。このようにして、抽出される輝度値が基準値になるように調整を行う。
ところで上記したような方法で較正を行う場合、標準面の清浄度が非常に重要になる。即ち、標準面にゴミ(埃など)や汚れが付着していた場合、撮影画像にはそれらが写り込み、当該箇所の輝度値に大きな変動が生じるため、正確な較正が実現できない。このことは、光学系の較正に限らず、例えば撮影画像のシェーディング補正など、治具表面の画像を用いて行う補正においても同様である。
このため、標準面のゴミなどの影響をなくすために、治具の状態を清浄に保つ、又は少なくとも較正の実行前に十分な清浄さを確保する必要があり、清浄度の確認に時間がかかるという問題があった。また、清浄度を確保するために治具のクリーニングを実施したとしても、クリーニング後から較正の実行までに清浄度を確保する必要があるうえ、装置に治具のクリーニング機構を設けた場合、装置のコストが高くなるという問題があった。
本発明は、上記のような実情に鑑みてなされたものであり、較正用の標準面を撮影して行う外観検査装置の較正において、標準面の清浄度を厳密に保たずとも正確な較正を実現できる技術を提供することを目的とする。
前記の目的を達成するために、本発明は以下の構成を採用する。
本発明に係る外観検査装置は、
被検査物に対して、照明光を照射する照明手段と、
前記被検査物、及び、較正のために準備される較正用標準面を撮影する撮影手段と、
前記撮影手段によって撮影された画像を処理することによって、前記被検査物を検査する検査手段と、
前記撮影手段と前記較正用標準面とに平行な方向における相対位置が異なった状態で前記撮影手段によって撮影される前記較正用標準面の複数の画像から所定の特徴量を抽出し、該抽出された複数の特徴量の値に基づいて、一の調整用特徴量を算出する、調整用特徴量算出手段と、
を備え、
前記調整用特徴量に基づいて、前記照明手段の較正、及び/又は、撮影された画像の補正処理、を行うことを特徴とする。
被検査物に対して、照明光を照射する照明手段と、
前記被検査物、及び、較正のために準備される較正用標準面を撮影する撮影手段と、
前記撮影手段によって撮影された画像を処理することによって、前記被検査物を検査する検査手段と、
前記撮影手段と前記較正用標準面とに平行な方向における相対位置が異なった状態で前記撮影手段によって撮影される前記較正用標準面の複数の画像から所定の特徴量を抽出し、該抽出された複数の特徴量の値に基づいて、一の調整用特徴量を算出する、調整用特徴量算出手段と、
を備え、
前記調整用特徴量に基づいて、前記照明手段の較正、及び/又は、撮影された画像の補正処理、を行うことを特徴とする。
なお、上記の特徴量は例えば、輝度、明度、彩度などとすることができる。また、較正用標準面は、外観検査装置とは別体の標準板に設けられて、較正のために当該標準板が疎外感検査装置に配置されるのであってもよいし、外観検査装置に内蔵されたものでよい。
上記のように、異なる範囲を撮影した複数の画像に基づいて調整用特徴量を求めることで、較正用の標準面にゴミ、汚れなどが存在する場合でも、これらの影響を抑止して、正確な較正を実現することが可能になる。
また、前記外観検査装置は、較正用標準板をさらに備え、前記較正用標準面は前記較正用標準板に設けられていてもよい。また、前記外観装置は、前記較正用標準板、及び/又は、前記撮影手段を、水平方向に移動させる、移動機構をさらに備えていてもよい。
このような移動機構によって、撮影手段と較正用標準面とを互いに平行な方向において相対的に少しずつ移動させながら較正用標準面を撮影することで、容易に撮影手段と較正用標準面相対位置が異なった複数の画像を取得することができる。
また、前記調整用特徴量算出手段は、前記複数の画像の特徴量の階調値を、1×1画素以上の領域毎に抽出し、前記複数の画像から抽出された前記領域毎の前記階調値の最頻値を、前記領域における前記調整用特徴量とするようにしてもよい。なお、ここでいう「階調」は、画像の明暗のみを示すのでは無く、色彩における明度、彩度の程度も含む意味に用いる。また、「階調値」とは、例えば0〜255の256段階のように画像データの画素が有する特徴量の階調そのものの値のみをいうのではなく、特徴量をある程度の値の幅を有するようにして何段階かにレベル分けし、段階毎の代表値として設定された値も含む意味に用いる。具体的には、例えば0〜255の階調値を25段階に分類し、各段階の代表値を、10、20、30・・・とした場合の、その代表値を含む。また、前記領域が複数の画素からなる場合の特徴量の階調値は、当該領域を構成する各画素の階調値の平均値、最頻値、などとすることができる。また、領域毎の前記調整用特徴量とするのは、必ずしも複数の階調値の最頻値に限られるわけではなく、例えば複数の階調値の平均値又は中央値であってもよいし、最大値としてもよい。
このようにすることで、較正用標準面のゴミ、汚れの影響を排除した、信頼度の高い調整用特徴量を得ることができる。
また、前記外観検査装置は、前記照明光の照明条件を設定する照明条件設定手段、をさらに備え、前記照明条件設定手段は、前記調整用特徴量と、予め設定されている基準特徴
量との比較に基づいて前記照明光の照明条件を設定することで、前記照明手段の較正を行うようにしてもよい。
量との比較に基づいて前記照明光の照明条件を設定することで、前記照明手段の較正を行うようにしてもよい。
このような構成により、外観検査装置の光学系に経時変化が生じた場合であっても、適切に照明条件を再設定して、被検査物の外観検査を実施することができる。
また、前記外観検査装置は、前記調整用特徴量を用いて補正用画像を生成する、補正画像生成手段、をさらに備え、前記画像の補正処理は、前記検査手段が、前記補正用画像に基づいて、前記撮影手段によって撮影された画像のシェーディング補正を行うものであってもよい。
ここで、補正用画像は、例えば各画素の値を調整用特徴量とした画像とすることができ、このような画像データを撮影画像のシェーディング補正の基準とすることで、精度の高いシェーディング補正を行うことができる。なお、シェーディング補正は、撮影された画像における観察光学系の収差などを是正する補正である。
また、本発明に係る、外観検査装置の較正方法は、
被検査物に照明光を照射して撮影された被検査物の画像に基づいて前記被検査物の検査を行う外観検査装置の較正を行う方法であって、
較正のために準備される較正用標準面に前記照明光を照射する照射ステップと、
前記照明光が照射された前記較正用標準面の異なる複数の範囲を撮影する撮影ステップと、
複数の前記較正用標準面の画像から、それぞれ特徴量を抽出する抽出ステップと、
抽出された複数の特徴量の値に基づいて、一の調整用特徴量を算出する算出ステップと、
前記調整量特徴量に基づいて、前記外観検査装置の較正を行う較正ステップと、
を有することを特徴とする。
被検査物に照明光を照射して撮影された被検査物の画像に基づいて前記被検査物の検査を行う外観検査装置の較正を行う方法であって、
較正のために準備される較正用標準面に前記照明光を照射する照射ステップと、
前記照明光が照射された前記較正用標準面の異なる複数の範囲を撮影する撮影ステップと、
複数の前記較正用標準面の画像から、それぞれ特徴量を抽出する抽出ステップと、
抽出された複数の特徴量の値に基づいて、一の調整用特徴量を算出する算出ステップと、
前記調整量特徴量に基づいて、前記外観検査装置の較正を行う較正ステップと、
を有することを特徴とする。
なお、ここでいう較正方法、には光学系の較正方法のみでなく、画像処理における補正方法も含む意味に用いられる。
また、前記撮影ステップでは、前記較正用標準面、及び/又は、撮影手段を前記較正標準面に平行な方向に移動させ、前記較正用標準面と前記撮影手段とに平行な方向における相対位置が異なる状態の前記較正用標準面の画像を、複数撮影してもよい。
また、前記抽出ステップでは、前記複数の画像の特徴量の階調値を、1×1画素以上の領域毎に抽出し、前記算出ステップでは、前記複数の画像から抽出された前記領域毎の前記階調値の最頻値を、前記領域における前記調整用特徴量としてもよい。
また、前記較正ステップでは、前記調整用特徴量と、予め設定される基準特徴量とを比較することによって前記照明光の照明条件を較正してもよい。
また、前記較正ステップでは、前記調整用特徴量を用いて補正用画像を生成し、前記補正用画像に基づいて、前記被検査物の画像のシェーディング補正を行ってもよい。
また、本発明は、上記の方法を外観検査装置に実行させるためのプログラム、そのようなプログラムを非一時的に記録したコンピュータ読取可能な記録媒体として捉えることもできる。
また、上記構成及び処理の各々は技術的な矛盾が生じない限り互いに組み合わせて本発
明を構成することができる。
明を構成することができる。
本発明によれば、較正用の標準面を撮影して行う外観検査装置の較正において、標準面の清浄度を厳密に保たずとも正確な較正を実現できる技術を提供することができる。
以下、図面を参照して、本発明の実施例について説明する。
<適用例>
(適用例の構成)
本発明は例えば、図1に示すような外観検査装置に適用することができる。図1は本適用例に係る外観検査装置9の概略構成を概略模式図である。外観検査装置9は、検査対象物(図示せず)の画像を撮影し、当該画像に基づいて検査対象物を検査する装置であり、図1に示すように主な構成として照明手段としての照明装置91、撮影手段としてのカメラ92、検査手段としての情報処理装置93(例えばコンピュータ)、移動機構94を有している。
(適用例の構成)
本発明は例えば、図1に示すような外観検査装置に適用することができる。図1は本適用例に係る外観検査装置9の概略構成を概略模式図である。外観検査装置9は、検査対象物(図示せず)の画像を撮影し、当該画像に基づいて検査対象物を検査する装置であり、図1に示すように主な構成として照明手段としての照明装置91、撮影手段としてのカメラ92、検査手段としての情報処理装置93(例えばコンピュータ)、移動機構94を有している。
照明装置91は、検査対象物、及び較正用標準板95に対して照明光を照射可能に構成されている。カメラ92は、照明光が照射された状態の検査対象物、及び較正用標準板95を撮影し、デジタル画像を出力する撮影手段である。なお、以下では、撮影手段によって撮影された検査対象物の画像を観測画像、較正用標準板95の画像を較正用画像とも表記する。カメラ92は例えば、光学系とイメージセンサを有して構成される。
情報処理装置93は、照明装置91、カメラ92及び移動機構94の制御、カメラ92から取り込まれた画像に対する処理、三次元形状計測などの機能を有しており、本発明における検査手段に該当する。情報処理装置93は、CPU(Central Processing Unit)
、RAM(Random Access Memory)、不揮発性の記憶装置(例えば、ハードディスクドライブ、フラッシュメモリなど)、入力装置(例えば、キーボード、マウス、タッチパネルなど)、表示装置(例えば、液晶ディスプレイなど)を備えるコンピュータにより構成することができる。
、RAM(Random Access Memory)、不揮発性の記憶装置(例えば、ハードディスクドライブ、フラッシュメモリなど)、入力装置(例えば、キーボード、マウス、タッチパネルなど)、表示装置(例えば、液晶ディスプレイなど)を備えるコンピュータにより構成することができる。
移動機構94は、検査対象物、又は較正用標準板95を載置するステージを兼ねており、モーター(図示せず)などのアクチュエータの駆動力によって、図1中に示すX軸方向
、Y軸方向に移動し、検査対象物、又は較正用標準板95を載置している場合には、これらも移動させる。
、Y軸方向に移動し、検査対象物、又は較正用標準板95を載置している場合には、これらも移動させる。
較正用標準板95は、照明装置91からの照明光をカメラ92に反射させる、例えば白色の板部材である。較正用標準板95の照明光反射面(即ちカメラ92に撮影される面)が、本発明における較正用標準面に相当する。なお、較正用標準板95は、外観検査装置9とは別体のものとしてもよいし、装置に組み込まれていてもよい。
以上のような構成を有する外観検査装置9において検査対象物の外観検査を行う際には、照明装置91から照明光を照射された状態の検査対象物の画像をカメラ92によって複数撮影し、撮影された画像を情報処理装置93がカラーハイライト方式などの方法により画像処理することで、検査対象物を検査する。
(情報処理装置)
続いて、情報処理装置93が有する機能について説明する。情報処理装置93は、外観検査に関わる機能モジュールとして、画像取得部931、調整用特徴量算出部932、較正処理部933、照明条件設定部934、移動機構制御部935、を含んでいる。
続いて、情報処理装置93が有する機能について説明する。情報処理装置93は、外観検査に関わる機能モジュールとして、画像取得部931、調整用特徴量算出部932、較正処理部933、照明条件設定部934、移動機構制御部935、を含んでいる。
画像取得部931はカメラ92から画像を取り込む機能であり、例えば、照明光が照射された状態の検査対象物の観測画像の他、較正用標準板95を撮影した複数の較正用画像を取得する。例えば、本適用例では、較正用標準板95の異なる箇所を撮影した6つの較正用画像データを取得する。
調整用特徴量算出部932は、較正に用いる調整用特徴量を算出する機能である。例えば、本適用例では画像取得部931によって取得された6つの較正用画像データのそれぞれから、画像の各画素が有する特徴量(例えば輝度値)を抽出し、これに基づいて、画素毎に一の調整用特徴量を算出する。例えば、画素毎に、6つの画像データから抽出された6つの輝度値のデータの最頻値を求め、当該最頻値の値を、調整用特徴量とする。例えば、6つの較正用画像から得られたある画素の輝度値として、200が3つ、150が2つ、100が1つであった場合、当該画素の調整用特徴量を200とする。この例では、正常な標準面の輝度値が200で、輝度値が150、100の箇所にはゴミや汚れなどの何らかの障害が生じているものと考えることができる。
較正処理部933は、調整用特徴量算出部932によって算出された調整用特徴量と、予め設定されている較正用基準値を比較し較正する機能であり、両者の値の差の有無、いずれの値が高い値か、その程度、などを求める。
照明条件設定部934は、照明装置91による照明条件の設定を行う機能であり、較正処理部933によって求められた結果に基づいて、較正用画像から抽出される調整用特徴量が較正用基準値と適合するように、照明装置91の電流値を変更するなど処理を行う。
移動機構制御部935は、移動機構95の駆動を制御する機構であり。ユーザーの入力、予め定められたプログラム、などに基づいて移動機構95を移動させるためのアクチュエータの制御などを行う。
(較正処理の流れ)
次に、図2を参照して、本適用例において較正用標準板95を用いて光学系の較正処理を行う手順について説明する。まず、情報処理装置93は照明装置91を制御し、較正用標準板に対し照明光を照射する(ステップS901)。次に、情報処理装置93は、カメラ92を制御して、照明光が照射されている状態の較正用標準板95を撮影し、画像を取
得する(ステップS902)。
次に、図2を参照して、本適用例において較正用標準板95を用いて光学系の較正処理を行う手順について説明する。まず、情報処理装置93は照明装置91を制御し、較正用標準板に対し照明光を照射する(ステップS901)。次に、情報処理装置93は、カメラ92を制御して、照明光が照射されている状態の較正用標準板95を撮影し、画像を取
得する(ステップS902)。
次に、情報処理装置93は較正用標準板95を撮影した回数が規定回数に達しているか否かを判定する(ステップS903)。規定回数は2回以上であれば限定されないが、例えば6回とすることができる。ここで、撮影回数が規定回数に達していない場合には、ステップS904に進み、較正用標準板95を、X軸方向及び/又はY軸方向に移動させてから(ステップS904)、ステップS902に戻り、その後の処理を繰り返す。これによって、カメラ92の視野に収まる較正用標準板95の範囲が、前回の撮影時とは異なる範囲となり、較正用標準板95の異なる範囲を撮影した規定回数分の較正用画像を取得することができる。図3A〜図3Fに較正用標準板95と、6つの較正用画像の撮影範囲との関係を示す。図中の破線で示された矩形が撮影範囲である。なお、図中のHはゴミを、Yは汚れを、それぞれ示している。
ステップS903で、規定回数撮影を行ったと判定された場合には、情報処理装置93は、取得した複数の較正用画像から特徴量を抽出し(ステップS905)、抽出した複数の特徴量に基づいて、調整用特徴量を算出する(ステップS906)。続けて、情報処理装置93は、算出された調整用特徴量と、予め設定されている較正用基準値を比較し(ステップS907)、当該比較結果に基づき、必要に応じて照明条件の設定を行う(ステップS908)。具体的には、調整用特徴量と較正用基準値とに差がある場合には、当該差を較正するように照明装置91の電流値の調節を行うなどして、照明条件を再設定する。これによって外観検査装置9の光学系の較正処理の一連のルーテインは終了する。
なお、上記において、ステップS903撮影回数が規定回数に満たない場合は、ステップS904を経て、ステップS902に戻るようにしていたが、ステップS901に戻ってもよい。即ち、撮影の度に、照明のON/OFFを行ってもよい。
以上のような、本適用例に係る外観検査装置9の構成により、較正用標準板95に多少のゴミや汚れが生じていた場合であっても、複数の較正用画像から得られる特徴量に基づいて、各画素の調整用特徴量を算出するため、ゴミや汚れの影響を低減して精度の高い較正を実施することができる。このため、較正用標準板95の清浄度の確保、維持のためのコストを低減することができる。
<実施形態1>
次に、本発明を実施するための形態の他の例である基板検査装置1について説明する。ただし、この実施形態に記載されている構成部品の寸法、材質、形状、その相対配置などは、特に記載がない限りは、この発明の範囲をそれらのみに限定する趣旨のものではない。
次に、本発明を実施するための形態の他の例である基板検査装置1について説明する。ただし、この実施形態に記載されている構成部品の寸法、材質、形状、その相対配置などは、特に記載がない限りは、この発明の範囲をそれらのみに限定する趣旨のものではない。
(基板検査装置のハードウェア構成)
図4を参照して、本発明の実施形態に係る基板検査装置の全体構成について説明する。図4は基板検査装置のハードウェア構成を示す模式図である。この基板検査装置1は、表面実装ラインにおける基板外観検査(例えば、リフロー後のはんだ接合状態の検査など)に利用される。
図4を参照して、本発明の実施形態に係る基板検査装置の全体構成について説明する。図4は基板検査装置のハードウェア構成を示す模式図である。この基板検査装置1は、表面実装ラインにおける基板外観検査(例えば、リフロー後のはんだ接合状態の検査など)に利用される。
基板検査装置1は、主な構成として、ステージ10、計測ユニット11、制御装置12、情報処理装置13、表示装置14を備える。計測ユニット11は、カメラ110、照明装置111、を有している。
ステージ10は、検査対象となる基板、較正用標準板15を保持し、カメラ110の撮影位置に位置合わせするための機構である。図4に示すようにステージ10に平行にX軸
とY軸をとり、ステージ10と垂直にZ軸をとった場合、ステージ10は少なくともX方向とY方向の2軸の並進が可能である。カメラ110は、光軸がZ軸と平行になるように配置されており、ステージ10上の基板、較正用標準板15を鉛直上方から撮影する。カメラ110で撮影された画像データは情報処理装置13に取り込まれる。
とY軸をとり、ステージ10と垂直にZ軸をとった場合、ステージ10は少なくともX方向とY方向の2軸の並進が可能である。カメラ110は、光軸がZ軸と平行になるように配置されており、ステージ10上の基板、較正用標準板15を鉛直上方から撮影する。カメラ110で撮影された画像データは情報処理装置13に取り込まれる。
カメラ110は、所望の撮影範囲を撮影可能な視野を有するものであればよく、任意の公知技術を採用することができる。
照明装置111(111R,111G,111B)は、基板、較正用標準板15に対し異なる色(波長)の照明光を照射する照明手段である。図4は照明装置111のXZ断面を模式的に示したものであり、実際には、同じ色の光を全方位(Z軸回りの全方向)から照明可能なように照明装置111は円環状又はドーム形状を呈している。
図5は、照明装置111の各光源111R、111G、111Bの配置関係を模式的に示す平面概略図である。照明装置111は、赤色光源111R、緑色光源111G、青色光源111Bの3つの円環状の光源を、カメラ110の光軸を中心として同心円状に配置した構造を有している。各光源111R、111G、111Bは、赤色光、緑色光、青色光の順に、基板、較正用標準板15に対する入射角が大きくなるよう、仰角及び向きが調整されている。このような照明装置111は、例えば、ドーム形状の拡散板の外側にR、G、B各色のLEDを円環状に配列することで形成できる。
制御装置12は、基板検査装置1の動作を制御する制御手段であり、ステージ10の移動制御、照明装置111の点灯及び調光制御、カメラ110の撮影制御などを担っている。
情報処理装置13は、カメラ110から取り込まれた画像データを用いて、較正用標準板15に関する各種の計測値を取得したり、計測ユニット11の光学系の較正を行ったり、検査対象基板の状態を検査したりする機能を有する装置である。表示装置14は、情報処理装置13で得られた計測値や検査結果を表示する装置である。情報処理装置13は、例えば、CPU、RAM、不揮発性の記憶装置、入力装置を有する汎用のコンピュータにより構成することができる。なお、図4では、制御装置12と情報処理装置13と表示装置14を別のブロックで示したが、これらは別体の装置で構成してもよいし、単一の装置で構成してもよい。
較正用標準板15は、カメラの視野よりも広い面積を有しており、照明装置111からの照明光をカメラ110に反射させ、これによって較正用の画像を取得可能にする白色板であり、較正を行う際に、ステージ10上に設置して用いられる。
(機能構成)
図6は、情報処理装置13が提供する検査処理に関わる機能モジュールの構成を示すブロック図である。これらの機能モジュールは、情報処理装置13のCPUが補助記憶装置に格納されたプログラムを読み込み実行することにより実現されるものである。ただし、全部又は一部の機能をASICやFPGAなどの回路で構成してもよい。
図6は、情報処理装置13が提供する検査処理に関わる機能モジュールの構成を示すブロック図である。これらの機能モジュールは、情報処理装置13のCPUが補助記憶装置に格納されたプログラムを読み込み実行することにより実現されるものである。ただし、全部又は一部の機能をASICやFPGAなどの回路で構成してもよい。
なお、画像取得部131、調整用特徴量算出部132は、較正処理部133の各機能モジュールについては、適用例に係る外観検査装置9のものと同様であるため、詳細な説明は省略する。
補正画像生成部134は、観測画像のシェーディング補正に用いる補正画像を生成する機能である。調整用特徴量算出部132によって算出された調整用特徴量を用いて、画像
を構成する各画素が調整用特徴量からなる補正画像を生成する。
を構成する各画素が調整用特徴量からなる補正画像を生成する。
三次元形状計測部135は、二次元の画像データから検査対象基板の三次元形状を計測(復元)する機能モジュールである。基板の三次元形状の計測には、いわゆるカラーハイライト方式で得られる画像を利用する。カラーハイライト方式とは、複数の色(即ち、波長)の光を互いに異なる入射角で基板に照射し、基板表面にその法線方向に応じた色特徴(即ち、カメラから見て正反射方向にある光源の色)が現れるようにした状態で撮影を行うことにより、基板表面の三次元形状を二次元の色相情報として捉える方法である。画像の中から、R、G、Bの光源色が現れている領域のみを抽出して、R、G、Bの各領域の形状、幅、順番に基づいて、基板の三次元形状を復元することができる。なお、三次元形状の復元には公知の手法を用いることができるため、ここでは詳しい説明を省略する。
検査部136は、三次元形状計測部135で得られた三次元形状データを基に、検査基板の形状に関わる各種指標を計測し、これらの計測値を用いて基板の状態を検査する機能モジュールである。
記憶部137は、各種のプログラムや、検査部136における検査の項目、条件などを定義した検査プログラムの他、外観検査装置9の較正のためのプログラムなど、各種情報を格納する機能モジュールである。検査プログラムには、例えば、検査対象の位置及びサイズ、部品のサイズ、計測する指標の種類、指標ごとの判定基準値(良品と不良品を判定するための閾値や値域)などが定義されている。
出力処理部138は、ステージ10、計測ユニット11を制御するための指令を、制御装置12に出力したり、検査部136で得られた計測値や検査結果などを表示装置14などへ出力したりする機能モジュールである。
(検査処理の流れ)
次に、図7を用いて、基板検査装置1で行われる検査処理の流れを説明する。図7は、検査処理の流れを示すフローチャートである。
次に、図7を用いて、基板検査装置1で行われる検査処理の流れを説明する。図7は、検査処理の流れを示すフローチャートである。
まず、基板の検査に先だって、基板検査装置1の光学系を較正する処理を実行する(ステップS101)。当該処理は適用例に係る外観検査装置9のものと同様であるため、詳細な説明は省略するが、較正用標準板15の異なる箇所を撮影した複数の較正用画像データ(例えば、それぞれ一分解能以上、撮影範囲の位置が異なる画像データを10個程度)を取得し、当該画像から調整用特徴量を算出し、これに基づいて較正を実施する。
次に、情報処理装置13は、補正画像生成部134において、観測画像のシェーディング補正に用いる補正用画像を生成する(ステップS102)。具体的には、上述したように、ステップS101の較正処理の際に算出した調整用特徴量を用いて、画像を構成する各画素が調整用特徴量からなる補正画像を生成する。
次に、制御装置12が記憶部137に記憶されている検査プログラムに従ってステージ10を制御し、検査対象の基板計測位置(カメラ110の視野)に移動させる(ステップS103)。そして、制御装置12が照明装置111を点灯し(ステップS104)、赤色光、緑色光、青色光を照射した状態でカメラ110で撮影を行う(ステップS105)。得られた画像データ(観測画像)は、画像取得部131により情報処理装置13に取り込まれる。
次に、情報処理装置13は、ステップS102で得られた補正用画像を基準として、ステップS105で得られた観測画像をシェーディング補正する(ステップS106)。そ
して、三次元形状計測部135は、このようにして補正された観測画像から、基板の三次元形状を復元し、検査部136が、当該三次元形状と、検査プログラムの閾値とによって、基板の外観検査を実施する(ステップS107)。検査が終了すると、表示装置14は、検査の結果を表示し(ステップS108)、一連の処理を終了する。
して、三次元形状計測部135は、このようにして補正された観測画像から、基板の三次元形状を復元し、検査部136が、当該三次元形状と、検査プログラムの閾値とによって、基板の外観検査を実施する(ステップS107)。検査が終了すると、表示装置14は、検査の結果を表示し(ステップS108)、一連の処理を終了する。
以上述べた本実施形態の基板検査装置によれば、較正用標準板15の異なる箇所を撮影した複数の画像から、所定の特徴量を抽出し、該抽出された複数の特徴量の値に基づいて算出される調整用特徴量を用いて、照明条件の較正を行うだけでなく、被検査物を撮影した画像のシェーディング補正も実施することができる。
<その他>
上記各実施形態は、本発明を例示的に説明するものに過ぎず、本発明は上記の具体的な形態には限定されない。本発明はその技術的思想の範囲内で種々の変形が可能である。例えば、上記の実施形態においては、カラーハイライト方式を用いる基板検査装置に本発明が適用されていたが、他の方式による基板検査装置、透過光及び/又は反射光によってシート状の被検査物を検査するシート外観検査装置などに、本発明を適用することもできる。
上記各実施形態は、本発明を例示的に説明するものに過ぎず、本発明は上記の具体的な形態には限定されない。本発明はその技術的思想の範囲内で種々の変形が可能である。例えば、上記の実施形態においては、カラーハイライト方式を用いる基板検査装置に本発明が適用されていたが、他の方式による基板検査装置、透過光及び/又は反射光によってシート状の被検査物を検査するシート外観検査装置などに、本発明を適用することもできる。
また、上記の各例では、較正用標準板を載置するステージを移動させて、複数の異なる箇所を撮影した較正用画像を取得していたが、撮影手段を水平面内で移動させることにより、これを取得するようにしてもよい。
また、上記の実施形態では較正用標準板は、カメラの視野よりも広い面積を有するものであったが、必ずしもその必要はなく、較正用標準板はカメラの視野と同等、又は狭い面積を有するものであってもよい。この場合でも、撮影画像に対して処理を行う領域を絞り込むことで目的を達成することができる。
また、上記の実施形態においては、較正用標準板は白色板であったが、白色である必要は無く、透明板であってもよい。また、較正用標準板は外観検査装置と別体である必要は無く、カメラの撮影範囲内に固定された治具であってもよい。
また、上記の各例においては、輝度値は取得された画像の各画素から抽出されていたが、例えば100×100画素の領域を一つの単位として、当該領域内の各画素の輝度値の平均値を、「特徴量の階調値」として抽出するのであってもよい。このような手法によれば、一つ一つの画素毎に「調整用特徴量」を算出する場合に比べ、処理の負荷を軽減し、処理時間を短縮させることができる。
本発明の一の態様は、被検査物に対して、照明光を照射する照明手段(91)と、
前記被検査物、及び、較正のために準備される較正用標準面を撮影する撮影手段(92)と、
前記撮影手段によって撮影された画像を処理することによって、前記被検査物を検査する検査手段(93)と、
前記撮影手段と前記較正用標準面との水平方向における相対位置が異なった状態で前記撮影手段によって撮影される前記較正用標準面の複数の画像から所定の特徴量を抽出し、該抽出された複数の特徴量の値に基づいて、一の調整用特徴量を算出する、調整用特徴量算出手段(932)と、
を備え、
前記調整用特徴量に基づいて、前記照明手段の較正、及び/又は、撮影された画像の補正処理、を行う外観検査装置(9)、である。
である。
前記被検査物、及び、較正のために準備される較正用標準面を撮影する撮影手段(92)と、
前記撮影手段によって撮影された画像を処理することによって、前記被検査物を検査する検査手段(93)と、
前記撮影手段と前記較正用標準面との水平方向における相対位置が異なった状態で前記撮影手段によって撮影される前記較正用標準面の複数の画像から所定の特徴量を抽出し、該抽出された複数の特徴量の値に基づいて、一の調整用特徴量を算出する、調整用特徴量算出手段(932)と、
を備え、
前記調整用特徴量に基づいて、前記照明手段の較正、及び/又は、撮影された画像の補正処理、を行う外観検査装置(9)、である。
である。
また、本発明の他の一の態様は、被検査物に照明光を照射して撮影された被検査物の画像に基づいて前記被検査物の検査を行う外観検査装置の較正を行う方法であって、
較正のために準備される較正用標準面に前記照明光を照射する照射ステップ(S901)と、
前記照明光が照射された前記較正用標準面の異なる複数の範囲を撮影する撮影ステップ(S902;S903;S904)と、
複数の前記較正用標準面の画像から、それぞれ特徴量を抽出する抽出ステップ(S905)と、
抽出された複数の特徴量の値に基づいて、一の調整用特徴量を算出する算出ステップ(S906)と、
前記調整量特徴量に基づいて、前記外観検査装置の較正を行う較正ステップ(S907;S908)と、
を有することを特徴とする、外観検査装置の較正方法、である。
較正のために準備される較正用標準面に前記照明光を照射する照射ステップ(S901)と、
前記照明光が照射された前記較正用標準面の異なる複数の範囲を撮影する撮影ステップ(S902;S903;S904)と、
複数の前記較正用標準面の画像から、それぞれ特徴量を抽出する抽出ステップ(S905)と、
抽出された複数の特徴量の値に基づいて、一の調整用特徴量を算出する算出ステップ(S906)と、
前記調整量特徴量に基づいて、前記外観検査装置の較正を行う較正ステップ(S907;S908)と、
を有することを特徴とする、外観検査装置の較正方法、である。
1・・・基板検査装置
9・・・外観検査装置
10・・・ステージ
11・・・検査ユニット
110、92・・・カメラ
111、91・・・照明装置
12・・・制御装置
13、93・・・情報処理装置
14・・・表示装置
15、95・・・較正用標準板
94・・・移動機構
H・・・ゴミ
Y・・・汚れ
9・・・外観検査装置
10・・・ステージ
11・・・検査ユニット
110、92・・・カメラ
111、91・・・照明装置
12・・・制御装置
13、93・・・情報処理装置
14・・・表示装置
15、95・・・較正用標準板
94・・・移動機構
H・・・ゴミ
Y・・・汚れ
Claims (12)
- 被検査物に対して、照明光を照射する照明手段と、
前記被検査物、及び、較正のために準備される較正用標準面を撮影する撮影手段と、
前記撮影手段によって撮影された画像を処理することによって、前記被検査物を検査する検査手段と、
前記撮影手段と前記較正用標準面とに平行な方向における相対位置が異なった状態で前記撮影手段によって撮影される前記較正用標準面の複数の画像から所定の特徴量を抽出し、該抽出された複数の特徴量の値に基づいて、一の調整用特徴量を算出する、調整用特徴量算出手段と、
を備え、
前記調整用特徴量に基づいて、前記照明手段の較正、及び/又は、撮影された画像の補正処理、を行う外観検査装置。 - 較正用標準板をさらに備え、前記較正用標準面は前記較正用標準板に設けられている、
ことを特徴とする、請求項1に記載の外観検査装置。 - 前記較正用標準板、及び/又は、前記撮影手段を、水平方向に移動させる、移動機構をさらに備える、
ことを特徴とする、請求項2に記載の外観検査装置。 - 前記調整用特徴量算出手段は、
前記複数の画像の特徴量の階調値を、1×1画素以上の領域毎に抽出し、前記複数の画像から抽出された前記領域毎の前記階調値の最頻値を、前記領域における前記調整用特徴量とする、
ことを特徴とする、請求項1から3のいずれか一項に記載の外観検査装置。 - 前記照明光の照明条件を設定する照明条件設定手段、をさらに備え、
前記照明条件設定手段は、前記調整用特徴量と、予め設定されている基準特徴量との比較に基づいて前記照明光の照明条件を設定することで、前記照明手段の較正を行う、
ことを特徴とする、請求項1から4のいずれか一項に記載の外観検査装置。 - 前記調整用特徴量を用いて補正用画像を生成する、補正画像生成手段、をさらに備え、
前記画像の補正処理は、前記検査手段が、前記補正用画像に基づいて、前記撮影手段によって撮影された画像のシェーディング補正を行うことである、
請求項1から4のいずれか一項に記載の外観検査装置。 - 被検査物に照明光を照射して撮影された被検査物の画像に基づいて前記被検査物の検査を行う外観検査装置の較正を行う方法であって、
較正のために準備される較正用標準面に前記照明光を照射する照射ステップと、
前記照明光が照射された前記較正用標準面の異なる複数の範囲を撮影する撮影ステップと、
複数の前記較正用標準面の画像から、それぞれ特徴量を抽出する抽出ステップと、
抽出された複数の特徴量の値に基づいて、一の調整用特徴量を算出する算出ステップと、
前記調整量特徴量に基づいて、前記外観検査装置の較正を行う較正ステップと、
を有することを特徴とする、外観検査装置の較正方法。 - 前記撮影ステップでは、前記較正用標準面、及び/又は、撮影手段を前記較正用標準面に平行な方向に移動させ、前記較正用標準面と前記撮影手段とに平行な方向における相対
位置が異なる状態の前記較正用標準面の画像を、複数撮影する、
ことを特徴とする、請求項7に記載の外観検査装置の較正方法。 - 前記抽出ステップでは、前記複数の画像の特徴量の階調値を、1×1画素以上の領域毎に抽出し、
前記算出ステップでは、前記複数の画像から抽出された前記領域毎の前記階調値の最頻値を、前記領域における前記調整用特徴量とする、
ことを特徴とする、請求項7又は8に記載の外観検査装置の較正方法。 - 前記較正ステップでは、前記調整用特徴量と、予め設定される基準特徴量とを比較することによって前記照明光の照明条件を較正する、
ことを特徴とする、請求項7から9のいずれか一項に記載の外観検査装置の較正方法。 - 前記較正ステップでは、前記調整用特徴量を用いて補正用画像を生成し、前記補正用画像に基づいて、前記被検査物の画像のシェーディング補正を行う、
ことを特徴とする、請求項7から9のいずれか一項に記載の外観検査装置の較正方法。 - 請求項7から11のいずれか一項に記載の各ステップを外観検査装置に実行させるためのプログラム。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019171844A JP2021047162A (ja) | 2019-09-20 | 2019-09-20 | 外観検査装置、外観検査装置の較正方法 |
TW109105391A TW202113344A (zh) | 2019-09-20 | 2020-02-20 | 外觀檢查裝置及其校正方法、及電腦可讀取的記錄媒體 |
PCT/JP2020/008748 WO2021053852A1 (ja) | 2019-09-20 | 2020-03-02 | 外観検査装置、外観検査装置の較正方法及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019171844A JP2021047162A (ja) | 2019-09-20 | 2019-09-20 | 外観検査装置、外観検査装置の較正方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2021047162A true JP2021047162A (ja) | 2021-03-25 |
Family
ID=74876605
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019171844A Withdrawn JP2021047162A (ja) | 2019-09-20 | 2019-09-20 | 外観検査装置、外観検査装置の較正方法 |
Country Status (3)
Country | Link |
---|---|
JP (1) | JP2021047162A (ja) |
TW (1) | TW202113344A (ja) |
WO (1) | WO2021053852A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113126132A (zh) * | 2021-04-09 | 2021-07-16 | 内蒙古科电数据服务有限公司 | 一种移动巡检中轨迹校准与分析方法及系统 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4021351B2 (ja) * | 2003-03-24 | 2007-12-12 | 株式会社新川 | ボンディング用照明装置及びボンディング用照明装置の較正方法 |
JP2010127787A (ja) * | 2008-11-28 | 2010-06-10 | Panasonic Corp | 標準画像の生成方法 |
JP2012112729A (ja) * | 2010-11-22 | 2012-06-14 | Toshiba Corp | 表面検査装置のシェーディング補正方法 |
JP5589888B2 (ja) * | 2011-02-18 | 2014-09-17 | Jfeスチール株式会社 | 表面検査装置の評価装置及び表面検査装置の評価方法 |
US20170343418A1 (en) * | 2016-05-27 | 2017-11-30 | Erin Hurbi | Thermal camera calibration palette |
-
2019
- 2019-09-20 JP JP2019171844A patent/JP2021047162A/ja not_active Withdrawn
-
2020
- 2020-02-20 TW TW109105391A patent/TW202113344A/zh unknown
- 2020-03-02 WO PCT/JP2020/008748 patent/WO2021053852A1/ja active Application Filing
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113126132A (zh) * | 2021-04-09 | 2021-07-16 | 内蒙古科电数据服务有限公司 | 一种移动巡检中轨迹校准与分析方法及系统 |
CN113126132B (zh) * | 2021-04-09 | 2022-11-25 | 内蒙古科电数据服务有限公司 | 一种移动巡检中轨迹校准与分析方法及系统 |
Also Published As
Publication number | Publication date |
---|---|
TW202113344A (zh) | 2021-04-01 |
WO2021053852A1 (ja) | 2021-03-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
TWI484283B (zh) | 影像計算量測方法、影像計算量測裝置及影像檢查裝置 | |
US10796428B2 (en) | Inspection system and inspection method | |
JP5940383B2 (ja) | 顕微鏡システム | |
US20110031418A1 (en) | Optical sensor measurement and crosstalk evaluation | |
JP2008113416A (ja) | 表示の形状及び色の自動較正及び修正のためのシステム及び方法 | |
JP6330574B2 (ja) | 基板検査装置のティーチング装置及びティーチング方法 | |
TW201235140A (en) | Adjustment apparatus, laser machining apparatus, and adjustment method | |
TWI589838B (zh) | Three-dimensional measuring device | |
JP2014035261A (ja) | 情報処理方法、情報処理装置、プログラム、撮像装置、検査方法、検査装置、及び基板の製造方法 | |
WO2021053852A1 (ja) | 外観検査装置、外観検査装置の較正方法及びプログラム | |
JP2008180602A (ja) | 検査装置、検査方法、検査プログラムおよびコンピュータ読み取り可能な記録媒体 | |
JP2020182127A (ja) | キャリブレーション装置、キャリブレーションシステム、および表示装置のキャリブレーション方法 | |
JP2006084286A (ja) | 3次元計測方法とその計測装置 | |
JP5996462B2 (ja) | 画像処理装置、顕微鏡システム及び画像処理方法 | |
JP2011002401A (ja) | 輝度測定装置における補正係数算出方法および輝度測定装置 | |
JP2016035542A (ja) | 位置測定方法、位置ずれマップの作成方法および検査システム | |
JP7030079B2 (ja) | 三次元計測装置及び三次元計測方法 | |
JP2008175768A (ja) | 表示パネルの欠陥検査装置および欠陥検査方法 | |
JP2008154195A (ja) | レンズのキャリブレーション用パターン作成方法、レンズのキャリブレーション用パターン、キャリブレーション用パターンを利用したレンズのキャリブレーション方法、レンズのキャリブレーション装置、撮像装置のキャリブレーション方法、および撮像装置のキャリブレーション装置 | |
WO2021153057A1 (ja) | 三次元形状計測装置、三次元形状計測方法及びプログラム | |
JP2004186789A (ja) | 画像評価装置 | |
WO2023032313A1 (ja) | 撮像システムおよびその制御方法 | |
JP7424074B2 (ja) | 三次元形状計測装置、三次元形状計測方法及びプログラム | |
WO2023032312A1 (ja) | 撮像システムおよびその制御方法 | |
WO2013133115A1 (ja) | デフォーカス量検出装置およびカメラ |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220707 |
|
A761 | Written withdrawal of application |
Free format text: JAPANESE INTERMEDIATE CODE: A761 Effective date: 20221110 |