JP2004198129A - Measurement device and inspection device - Google Patents

Measurement device and inspection device Download PDF

Info

Publication number
JP2004198129A
JP2004198129A JP2002363771A JP2002363771A JP2004198129A JP 2004198129 A JP2004198129 A JP 2004198129A JP 2002363771 A JP2002363771 A JP 2002363771A JP 2002363771 A JP2002363771 A JP 2002363771A JP 2004198129 A JP2004198129 A JP 2004198129A
Authority
JP
Japan
Prior art keywords
imaging
measurement
light
unit
predetermined
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2002363771A
Other languages
Japanese (ja)
Other versions
JP3872007B2 (en
Inventor
Ikuo Futamura
伊久雄 二村
Hiroyuki Ishigaki
裕之 石垣
Riyouji Taga
僚治 多賀
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
CKD Corp
Original Assignee
CKD Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by CKD Corp filed Critical CKD Corp
Priority to JP2002363771A priority Critical patent/JP3872007B2/en
Priority to TW92134122A priority patent/TWI228023B/en
Priority to CN 200310118256 priority patent/CN1261737C/en
Publication of JP2004198129A publication Critical patent/JP2004198129A/en
Application granted granted Critical
Publication of JP3872007B2 publication Critical patent/JP3872007B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a measurement device and an inspection device which relatively corrects measurement even if physical correction is not carried out even when a board has warpage or the like. <P>SOLUTION: A three-dimensional measurement device 1 is provided with: an irradiation means 5 for three-dimensional measurement; a CCD camera 6 vertically movable by a Z-axis movement mechanism 9; and a main control means 7. A deviation amount in the height direction with respect to a predetermined reference height position is measured in a predetermined imaging area before imaging and measurement in each imaging area, and when the deviation amount is in a predetermined allowable range, the imaging for measurement in the area is executed while keeping the relative height relationship; and the relative height relationship is corrected by the deviation amount portion in moving to the next imaging area. When the deviation amount is not in the allowable range, the imaging for measurement is executed after the relative height relationship is corrected by the deviation amount portion. <P>COPYRIGHT: (C)2004,JPO&NCIPI

Description

【0001】
【発明の属する技術分野】
本発明は、基板等の計測装置及び検査装置に係り、より詳しくは、プリント基板上に配設されたクリームハンダ等の計測対象を計測するための計測装置及び当該計測装置を具備する検査装置に関するものである。
【0002】
【従来の技術】
プリント基板の製造過程にあって、主要な工程として基板上に電子部品を実装する工程がある。電子部品の実装に際しては、まずプリント基板上に配設された所定の電極パターン上にクリームハンダが印刷される。次に、該クリームハンダの粘性に基づいてプリント基板上に電子部品が仮止めされる。その後、前記プリント基板がリフロー炉へ導かれ、所定のリフロー工程を経ることでハンダ付けが行われる。リフロー炉に導かれる前段階においてクリームハンダの印刷状態を検査する必要があり、かかる検査に際して三次元計測装置が用いられることがある。
【0003】
近年、光を用いたいわゆる非接触式の三次元計測装置が種々提案されており、計測に際し採用される手法としては、例えば位相シフト法、光切断法、空間コード法、合焦法等が挙げられる。
【0004】
ところで、三次元計測に際し、基板が反ったままの状態で計測を行ったのでは、ハンダ等の位置関係が狂ってしまい、正確な計測に支障を来す。このため、基板の反りを矯正(補正)した上で計測を行う必要がある。
【0005】
従来、このような反りを矯正するべく、水平状態に配置された基板の端部を支持固定した状態で、下方から上方に向けて押し上げピンを基板下面に当てて押し上げたりすることで、基板の反りを矯正することが行われている。しかしながら、このような物理的な矯正では、必ずしも基板が正確にフラットに矯正できるとは限らない。また、矯正のための機構を必要とし、装置の複雑化、大型化を招くおそれもある。
【0006】
これに対し、センサヘッドをZ軸(高さ)方向に移動させることで計測に際し反り分を補正するという技術がある(例えば、特許文献1参照)。この技術では、センサヘッドをプリント基板に対して相対的にXY軸方向に走査することによって、高さデータを得、高さデータの平均値が設定範囲内に納まっているときには次回のセンサヘッドによる走査時におけるZ軸移動手段の高さ制御を実行せず、プリント基板とセンサヘッドの間隔が一定の状態で走査を実行させる。一方、高さデータの平均値が設定範囲から外れた場合には、次回のセンサヘッドによる走査時にZ軸移動手段の高さ制御を実行する。
【0007】
【特許文献1】
特開2001−156425号公報
【0008】
【発明が解決しょうとする課題】
ところが、上記技術では、基板表面に急激な高低差(例えば段差等)が存在していると、次回にその分を適正に反映できない場合がある。また、初回の測定に際し、上記高低差があった場合、それを踏まえて補正してしまうと、次回の測定に適正に反映されていないといった事態が生じるおそれがある。さらに、最後に測定を行うときに、急激な段差等が存在している場合、最後であるために当該段差分が補正に反映されなかったりする不具合もある。このような場合、ピントが合わないままの状態で測定が進行してしまうおそれがある。その結果、正確な計測に支障を来すおそれがある。
【0009】
なお、上記の不具合は、必ずしも高さ計測を含む三次元計測のみならず、二次元計測を行う場合にも同様にして起こりうる。
【0010】
本発明は、上記事情に鑑みてなされたものであり、基板に反り等がある場合であっても、物理的な矯正を行わずとも、より正確な計測を行うことの可能な計測装置及び検査装置を提供することを主たる目的の一つとしている。
【0011】
【課題を解決するための手段及び発明の効果】
上記目的を達成し得る特徴的手段について以下に説明する。また、各手段につき、特徴的な作用及び効果を必要に応じて記載する。
【0012】
手段1.基板上に配設された計測対象に対し、所定の光を照射可能な計測用照射手段と、前記所定の光の照射された計測対象を、複数の各撮像エリア毎に撮像可能な撮像手段と、少なくとも前記撮像手段にて撮像された画像データに基づき、前記計測対象に関し二次元計測又は三次元計測を行う計測手段とを備えた計測装置であって、
前記基板と前記撮像手段との相対高さ関係を調整可能な移動手段と、各撮像エリアでの前記撮像及び計測に先だって、所定の撮像エリアにおいて、予め定められた基準高さ位置に対する高さ方向のずれ量を測定するずれ量測定手段と、前記ずれ量測定手段により測定された高さ方向のずれ量が予め定められた許容範囲内にあるか否かを判定する判定手段とを設け、
前記判定手段にて前記ずれ量が予め定められた許容範囲内にあると判定された場合には、前記基板と前記撮像手段との相対高さ関係を保持したまま、当該所定の撮像エリアでの前記計測用の撮像を行い、次の撮像エリアに移行するときに、前記移動手段を制御して前記ずれ量分だけ前記相対高さ関係を補正し、
前記判定手段にて前記ずれ量が前記許容範囲内にないと判定された場合には、前記移動手段を制御して前記ずれ量分だけ前記相対高さ関係を補正した上で、当該所定の撮像エリアでの前記計測用の撮像を行うよう構成したことを特徴とする計測装置。
【0013】
手段1によれば、計測用照射手段により、基板上に配設された計測対象に対し、所定の光が照射され、撮像手段により、所定の光の照射された計測対象が、複数の各撮像エリア毎に撮像される。そして、少なくとも撮像手段にて撮像された画像データに基づき、計測手段では、計測対象に関し二次元計測又は三次元計測が行われる。さて、ずれ量測定手段では、各撮像エリアでの前記撮像及び計測に先だって、所定の撮像エリアにおいて、予め定められた基準高さ位置に対する高さ方向のずれ量が測定される。判定手段では、ずれ量測定手段により測定された高さ方向のずれ量が予め定められた許容範囲内にあるか否かが判定される。そして、判定手段にて前記ずれ量が予め定められた許容範囲内にあると判定された場合には、基板と撮像手段との相対高さ関係を保持したまま、当該所定の撮像エリアでの計測用の撮像が行われる。その後、次の撮像エリアに移行するときに、移動手段が制御されることで、前記ずれ量分だけ、基板と撮像手段との相対高さ関係が補正される。このため、いちいち各撮像エリア毎に相対高さ関係を調整するような場合に比べて、計測に関する高速性が確保される。また、判定手段にて前記ずれ量が許容範囲内にないと判定された場合には、移動手段が制御されることで前記ずれ量分だけ相対高さ関係が補正された上で、当該所定の撮像エリアでの計測用の撮像が行われる。従って、所定の撮像エリアにおいて急激な高低差(例えば段差等)が存在していたとしても、その場で速やかに相対高さ関係が補正されることから、高低差分をその場で反映させて計測することが可能となる。結果として、各撮像エリア毎に、ピントを合わせた状態で正確に計測を行うことができる。
【0014】
なお、「前記判定手段にて前記ずれ量が前記許容範囲内にないと判定された場合には、前記移動手段を制御して前記ずれ量分だけ前記相対高さ関係を補正した上で、再度、前記ずれ量測定手段にてずれ量を測定するとともに、前記判定手段にてそのずれ量が予め定められた許容範囲内にあるか否かを判定し、許容範囲内にある場合に、当該所定の撮像エリアでの前記計測用の撮像を行うよう構成」してもよく、また、「前記判定手段にて前記ずれ量が前記許容範囲内にないと判定された場合には、前記移動手段を制御して前記ずれ量分だけ前記相対高さ関係を補正した上で、再度、前記ずれ量測定手段にてずれ量を測定するとともに、前記判定手段にてそのずれ量が予め定められた許容範囲内にあるか否かを判定し、所定回数許容範囲内にないと判定された場合には、エラー判定するよう構成」してもよい。
【0015】
手段2.基板上に配設された計測対象に対し、所定の光を照射可能な計測用照射手段と、前記所定の光の照射された計測対象を、複数の各撮像エリア毎に撮像可能な撮像手段と、少なくとも前記撮像手段にて撮像された画像データに基づき、前記計測対象に関し二次元計測又は三次元計測を行う計測手段とを備えた計測装置であって、
前記基板と前記撮像手段との相対高さ関係を調整可能なZ軸方向移動手段と、
撮像エリアを切り換えるべく前記基板と前記撮像手段との相対位置関係を調整可能なXY軸方向移動手段と、各撮像エリアでの前記撮像及び計測に先だって、各撮像エリアにおいて、予め定められた基準高さ位置に対する高さ方向のずれ量を測定するずれ量測定手段と、
前記ずれ量測定手段により測定された高さ方向のずれ量が予め定められた許容範囲内にあるか否かを判定する判定手段と、
第1の撮像エリアにおいて、前記判定手段にて前記ずれ量が予め定められた許容範囲内にあると判定された場合には、前記基板と前記撮像手段との相対高さ関係を保持したまま、当該第1の撮像エリアでの前記計測用の撮像を許容し、前記XY軸方向移動手段を制御して第2の撮像エリアに撮像エリアを切り換えるときに、前記Z軸方向移動手段を制御して前記ずれ量分だけ前記相対高さ関係を補正し、
第1の撮像エリアにおいて、前記判定手段にて前記ずれ量が前記許容範囲内にないと判定された場合には、前記Z軸方向移動手段を制御して前記ずれ量分だけ前記相対高さ関係を補正した上で、当該第1の撮像エリアでの前記計測用の撮像を許容する制御手段とを設けたことを特徴とする計測装置。
【0016】
手段2によれば、Z軸方向移動手段により、基板と撮像手段との相対高さ関係が調整される。また、XY軸方向移動手段により、基板と撮像手段との相対位置関係が調整されることで撮像エリアが切り換えられる。さて、ずれ量測定手段では、各撮像エリアでの撮像及び計測に先だって、各撮像エリアにおいて、予め定められた基準高さ位置に対する高さ方向のずれ量が測定され、判定手段では、そのずれ量が予め定められた許容範囲内にあるか否かが判定される。そして、第1の撮像エリアにおいて、判定手段にて前記ずれ量が予め定められた許容範囲内にあると判定された場合には、制御手段により、基板と前記撮像手段との相対高さ関係が保持されたまま、当該第1の撮像エリアでの計測用の撮像が許容される。さらに、XY軸方向移動手段が制御されて第2の撮像エリアに撮像エリアが切り換えられるときに、Z軸方向移動手段が制御されてずれ量分だけ相対高さ関係が補正される。このため、いちいち各撮像エリア毎に相対高さ関係を調整するような場合に比べて、計測に関する高速性が確保される。また、第1の撮像エリアにおいて、判定手段にて前記ずれ量が許容範囲内にないと判定された場合には、Z軸方向移動手段が制御されて前記ずれ量分だけ相対高さ関係が補正された上で、当該第1の撮像エリアでの計測用の撮像が許容される。従って、第1の撮像エリアにおいて急激な高低差(例えば段差等)が存在していたとしても、その場で速やかに相対高さ関係が補正されることから、高低差分をその場で反映させて計測することが可能となる。結果として、各撮像エリア毎に、ピントを合わせた状態で正確に計測を行うことができる。
【0017】
手段3.前記第1の撮像エリアにおいて、前記判定手段にて前記ずれ量が前記許容範囲内にないと判定された場合には、前記Z軸方向移動手段を制御して前記ずれ量分だけ前記相対高さ関係を補正した上で、当該第1の撮像エリアでの前記計測用の撮像を許容し、前記XY軸方向移動手段を制御して第2の撮像エリアに撮像エリアを切り換えるときには、前記相対高さ関係を保持するものであることを特徴とする手段2に記載の計測装置。
【0018】
手段3によれば、第1の撮像エリアにて既に大幅な補正が行われている場合には、第2の撮像エリアに切り換えられるときに、その補正された相対高さ関係がとりあえず保持される。従って、第2の撮像エリアにおいて補正が必要なければ、計測に関しての高速性がより一層確保されることとなる。
【0019】
手段4.前記各撮像エリアでの前記撮像及び計測に先だって、計測対象を抽出する計測対象抽出手段を設けたことを特徴とする手段1乃至3のいずれかに記載の計測装置。
【0020】
手段4によれば、計測対象抽出手段により計測対象が抽出され、その上で各撮像エリアでの撮像及び計測が行われる。このため、計測対象に関し、より正確な計測が可能となる。
【0021】
手段5.前記基板はプリント基板であり、前記計測対象はプリント基板の銅箔上に配設されたクリームハンダであり、前記計測対象抽出手段は、前記プリント基板上に青色又はそれに準じる波長域の光照射を行うことのできる抽出用照射手段からの光を、前記プリント基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記クリームハンダの領域を抽出するものであることを特徴とする手段4に記載の計測装置。
【0022】
手段5によれば、プリント基板の銅箔上に配設されたクリームハンダに関し、計測が行われる。ここで、抽出用照射手段により、プリント基板上に青色又はそれに準じる波長域の光照射が行われ、計測対象抽出手段では、その照射面が撮像手段にて撮像して得られた画像データに基づきクリームハンダの領域が抽出される。通常、プリント基板においては、銅箔は赤色系統の色を有し、クリームハンダは、青色系統の色を有する。それ故、青色系統の光は銅箔部分からは暗くしか反射されない。これにより、銅箔部分がより暗く明暗の差が大きくなる。従って、クリームハンダをより正確に抽出した上で、撮像、計測を行うことができる。
【0023】
手段6.前記基板はプリント基板であり、前記計測対象はプリント基板の銅箔上に配設されたクリームハンダであり、前記計測対象抽出手段は、前記プリント基板上に赤色又はそれに準じる波長域の小入射角での光照射と、青色又はそれに準じる波長域の大入射角での光照射とを同時に行うことのできる抽出用照射手段からの光を、前記プリント基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記クリームハンダの領域を抽出するものであることを特徴とする手段4に記載の計測装置。
【0024】
手段6によれば、プリント基板の銅箔上に配設されたクリームハンダに関し、計測が行われる。ここで、抽出用照射手段により、プリント基板上に赤色又はそれに準じる波長域の小入射角での光照射と、青色又はそれに準じる波長域の大入射角での光照射とが同時に行われ、計測対象抽出手段では、その照射面が撮像手段にて撮像して得られた画像データに基づきクリームハンダの領域が抽出される。通常、プリント基板においては、銅箔は赤色系統の色を有し、クリームハンダは、青色系統の色を有する。それ故、赤色系統の光はクリームハンダ部分からは暗くしか反射されず青色系統の光は銅箔部分からは暗くしか反射されない。これにより、青色画像としては銅箔部分がより暗く、赤色画像としてはクリームハンダ部分がより暗くなることから、各色画像とも、明暗の差が大きくなる。従って、クリームハンダをより正確に抽出した上で、撮像、計測を行うことができる。
【0025】
手段7.前記ずれ量測定手段は、補正用照射手段から前記基板面に対し斜めに照射された所定の光を、前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するものであることを特徴とする手段1乃至6のいずれかに記載の計測装置。
【0026】
手段7によれば、ずれ量測定手段では、補正用照射手段から基板面に対し斜めに照射された所定の光が、撮像手段にて撮像されて得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量が演算される。そのため、構造の複雑化を招くことなく、比較的簡素な構造でずれ量を測定することができる。
【0027】
手段8.前記補正用照射手段から照射される所定の光は、ライン光であることを特徴とする手段7に記載の計測装置。
【0028】
手段8によれば、補正用照射手段から照射される所定の光が、ライン光であることから、基準高さからのずれ量を比較的把握しやすい。
【0029】
手段9.前記ずれ量測定手段は、補正用照射手段から前記基板面に対し斜めに照射された所定のライン光を、前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するものであって、前記所定のライン光は、前記計測対象抽出手段により計測対象が抽出される際に照射される光の波長域とは異なる波長域の光であることを特徴とする手段4乃至6のいずれかに記載の計測装置。
【0030】
手段9によれば、補正用照射手段から基板面に対し斜めに照射される所定のライン光が、計測対象抽出手段により計測対象が抽出される際に照射される光の波長域とは異なる波長域の光であることから、所定のライン光と、計測対象が抽出される際の光とを同時に照射しても、撮像手段がカラーカメラ等の如く色彩の相違を区別可能なものであれば、両者を比較的容易に区別することができる。それ故、1回の撮像で、計測対象の抽出と、ずれ量の演算とを併せて行うことができる。結果として、計測時間のさらなる短縮、データの簡素化を図ることができる。
【0031】
手段10.前記ずれ量測定手段は、補正用照射手段から前記基板面に対し斜めに照射された所定のライン光を、前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するものであって、前記所定のライン光は、前記抽出用照射手段からの照射光とは異なる、緑色又はそれに準じる波長域の光であることを特徴とする手段5又は6に記載の計測装置。
【0032】
手段10によれば、補正用照射手段から基板面に対し斜めに照射される所定のライン光が緑色又はそれに準じる波長域の光であって、抽出用照射手段から照射される青色系統、或いは、青色系統及び赤色系統の光の波長域とは異なる。このため、ライン光と、計測対象が抽出される際の光とを同時に照射しても、撮像手段がカラーカメラ等の如く色彩の相違を区別可能なものであれば、両者を比較的容易に区別することができる。それ故、1回の撮像で、計測対象の抽出と、ずれ量の演算とを併せて行うことができる。結果として、計測時間のさらなる短縮、データの簡素化を図ることができる。
【0033】
手段11.前記基板はプリント基板であり、前記計測対象はプリント基板の銅箔上に配設されたクリームハンダであり、前記計測対象抽出手段は、前記プリント基板上に所定の波長域の光照射を行うことのできる抽出用照射手段からの光を、前記プリント基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記クリームハンダの領域を抽出するものであって、
さらに、前記ずれ量測定手段は、補正用照射手段から前記基板面に対し斜めに照射された所定のライン光を、前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するものであって、前記所定のライン光は、前記抽出用照射手段より照射される光の波長域とは異なる波長域の光であることを特徴とする手段4に記載の計測装置。
【0034】
手段11によれば、1回の撮像で、計測対象の抽出と、ずれ量の演算とを併せて行うことができる。結果として、計測時間のさらなる短縮、データの簡素化を図ることができる。
【0035】
手段12.前記基板はプリント基板であり、前記計測対象はプリント基板の銅箔上に配設されたクリームハンダであり、前記計測対象抽出手段は、前記プリント基板上に第1の波長域の小入射角での光照射と、該第1の波長域とは異なる第2の波長域の大入射角での光照射とを同時に行うことのできる抽出用照射手段からの光を、前記プリント基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記クリームハンダの領域を抽出するものであって、
さらに、前記ずれ量測定手段は、補正用照射手段から前記基板面に対し斜めに照射された所定のライン光を、前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するものであって、前記所定のライン光は、前記抽出用照射手段より照射される光の第1、第2の波長域とは異なる第3の波長域の光であることを特徴とする請求項4に記載の計測装置。
【0036】
手段12によれば、1回の撮像で、計測対象の抽出と、ずれ量の演算とを併せて行うことができる。結果として、計測時間のさらなる短縮、データの簡素化を図ることができる。また、特に、第1の波長域と第2の波長域とを前記銅箔やクリームハンダの色に適合した波長域に設定することで、計測対象たるクリームハンダをより明確に抽出することができる。
【0037】
手段13.前記補正用照射手段からの所定の光と、前記抽出用照射手段からの光とを同時に照射した上で、前記撮像手段にて撮像を行うようにしたことを特徴とする手段10乃至12のいずれかに記載の計測装置。
【0038】
手段13によれば、補正用照射手段からの所定の光と、抽出用照射手段からの光とが同時に照射された上で、実際に撮像手段にて撮像が行われるため、上記作用効果がより確実に奏される。
【0039】
手段14.基板上に配設された計測対象に対し、所定の光を照射可能な計測用照射手段と、
前記計測用照射手段の光とは異なる所定の波長域のパターン光を前記基板面に対し斜めに照射可能な補正用照射手段と、
前記所定の光及びパターン光が同時に照射された計測対象を、複数の各撮像エリア毎に撮像可能な撮像手段と、
前記撮像手段にて撮像された前記所定の光の画像データに基づき、前記計測対象に関し二次元計測及び三次元計測のうち少なくとも一方を行う計測手段と、
前記撮像手段にて撮像して得られた前記パターン光の画像データに基づき、基準高さに対するずれ量を演算するずれ量演算手段と
を備えたことを特徴とする計測装置。
【0040】
手段14によれば、基板上に配設された計測対象に対し、計測用照射手段からは所定の光が照射される。また、補正用照射手段からは、計測用照射手段の光とは異なる所定の波長域のパターン光が基板面に対し斜めに照射される。そして、所定の光及びパターン光が同時に照射された計測対象が、撮像手段によって、複数の各撮像エリア毎に撮像される。そして、撮像手段にて撮像された所定の光の画像データに基づき、計測手段では、計測対象に関し二次元計測及び三次元計測のうち少なくとも一方が行われる。また、撮像手段にて撮像して得られた前記パターン光の画像データに基づき、ずれ量演算手段によって、基準高さに対するずれ量が演算される。このため、構造の複雑化を招くことなく、比較的簡素な構造でずれ量を測定することができる。そして、そのずれ量を反映して計測を行うことができる。さらに、本手段では、補正用照射手段からのパターン光と、計測用照射手段からの光とが同時に照射された上で、実際に撮像手段にて撮像が行われる。このため、従来では複数回の撮像を行った上で、計測と、ずれ量の演算とを行わざるを得なかったのに対し、1回の撮像で演算されたずれ量を加味した計測を行うことができる。結果として、計測時間のさらなる短縮を図ることができる。また、所定の光と光パターンとの波長域がそれぞれ相違するため、両者を区別しやすく、ずれ量演算及び計測に支障が生じることが起こりにくい。
【0041】
手段15.基板上に配設された計測対象に対し、所定の光を照射可能な計測用照射手段と、
前記所定の光の照射された計測対象を、複数の各撮像エリア毎に撮像可能な撮像手段と、
少なくとも前記撮像手段にて撮像された画像データに基づき、前記計測対象に関し二次元計測及び三次元計測のうち少なくとも一方を行う計測手段と
を備えた計測装置であって、
各撮像エリアでの前記撮像及び計測に先だって、所定の撮像エリアにおいて、所定の波長域のパターン光を照射可能な補正用照射手段から、当該パターン光を前記基板面に対し斜めに照射して、その照射面を前記撮像手段にて撮像して得られた画像データに基づき、基準高さに対するずれ量を演算するずれ量演算手段と、
前記各撮像エリアでの前記撮像及び計測に先だって、前記基板上に前記所定の波長域とは異なる波長域の光照射を行うことのできる抽出用照射手段からの光を、前記基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記計測対象の領域を抽出する前記計測対象抽出手段とを設け、
前記補正用照射手段からのパターン光と、前記抽出用照射手段からの光とを同時に照射した上で、前記撮像手段にて撮像を行うようにしたことを特徴とする計測装置。
【0042】
手段15によれば、抽出用照射手段により、基板上に光照射が行われ、計測対象抽出手段では、その照射面が撮像手段にて撮像して得られた画像データに基づき計測対象の領域が抽出される。従って、計測対象をより正確に抽出した上で、撮像、計測を行うことができる。また、ずれ量測定手段では、補正用照射手段から基板面に対し斜めに所定の波長域のパターン光が照射され、その照射面が撮像手段にて撮像されて得られた画像データに基づき、基準高さに対するずれ量が演算される。そのため、構造の複雑化を招くことなく、比較的簡素な構造でずれ量を測定することができる。そして、そのずれ量を反映して計測を行うことができる。さらに、本手段では、補正用照射手段からのパターン光と、抽出用照射手段からの光とが同時に照射された上で、実際に撮像手段にて撮像が行われる。このため、従来では複数回の撮像を行った上で、抽出及びずれ量の演算を行わざるを得なかったのに対し、1回の撮像で計測対象領域の抽出とずれ量の演算とを行うことができ、結果として、計測時間のさらなる短縮、データの簡素化を図ることができる。また、各光の波長域がそれぞれ相違するため、抽出や演算に支障が生じることがない。
【0043】
手段16.プリント基板の銅箔上に配設されたクリームハンダに対し、所定の光を照射可能な計測用照射手段と、
前記所定の光の照射された計測対象を、複数の各撮像エリア毎に撮像可能な撮像手段と、
少なくとも前記撮像手段にて撮像された画像データに基づき、前記計測対象に関し二次元計測及び三次元計測のうち少なくとも一方を行う計測手段と
を備えた計測装置であって、
各撮像エリアでの前記撮像及び計測に先だって、所定の撮像エリアにおいて、所定の波長域のパターン光を照射可能な補正用照射手段から、当該パターン光を前記プリント基板面に対し斜めに照射して、その照射面を前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するずれ量演算手段と、
前記各撮像エリアでの前記撮像及び計測に先だって、前記プリント基板上に前記所定の波長域とは異なる波長域の光照射を行うことのできる抽出用照射手段からの光を、前記プリント基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記クリームハンダの領域を抽出する前記計測対象抽出手段とを設け、
前記補正用照射手段からのパターン光と、前記抽出用照射手段からの光とを同時に照射した上で、前記撮像手段にて撮像を行うようにしたことを特徴とする計測装置。
【0044】
手段16によれば、抽出用照射手段により、プリント基板上に光照射が行われ、計測対象抽出手段では、その照射面が撮像手段にて撮像して得られた画像データに基づきクリームハンダの領域が抽出される。従って、クリームハンダをより正確に抽出した上で、撮像、計測を行うことができる。また、ずれ量測定手段では、補正用照射手段から基板面に対し斜めに所定の波長域のパターン光が照射され、その照射面が撮像手段にて撮像されて得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量が演算される。そのため、構造の複雑化を招くことなく、比較的簡素な構造でずれ量を測定することができる。そして、そのずれ量を反映して計測を行うことができる。さらに、本手段では、補正用照射手段からのパターン光と、抽出用照射手段からの光とが同時に照射された上で、実際に撮像手段にて撮像が行われる。このため、従来では複数回の撮像を行った上で、抽出及びずれ量の演算を行わざるを得なかったのに対し、1回の撮像でクリームハンダ領域の抽出とずれ量の演算とを行うことができ、結果として、計測時間のさらなる短縮、データの簡素化を図ることができる。また、各光の波長域がそれぞれ相違するため、抽出や演算に支障が生じることがない。
【0045】
手段17.プリント基板の銅箔上に配設されたクリームハンダに対し、所定の光を照射可能な計測用照射手段と、
前記所定の光の照射された計測対象を、複数の各撮像エリア毎に撮像可能な撮像手段と、
少なくとも前記撮像手段にて撮像された画像データに基づき、前記計測対象に関し二次元計測及び三次元計測のうち少なくとも一方を行う計測手段と
を備えた計測装置であって、
各撮像エリアでの前記撮像及び計測に先だって、所定の撮像エリアにおいて、第3の波長域のパターン光を照射可能な補正用照射手段から、当該パターン光を前記プリント基板面に対し斜めに照射して、その照射面を前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するずれ量演算手段と、
前記各撮像エリアでの前記撮像及び計測に先だって、前記プリント基板上に前記第3の波長域とは異なる第1の波長域の小入射角での光照射と、前記第3及び第1の波長域とは異なる第2の波長域の大入射角での光照射とを同時に行うことのできる抽出用照射手段からの光を、前記プリント基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記クリームハンダの領域を抽出する前記計測対象抽出手段とを設け、
前記補正用照射手段からのパターン光と、前記抽出用照射手段からの光とを同時に照射した上で、前記撮像手段にて撮像を行うようにしたことを特徴とする計測装置。
【0046】
手段17によれば、抽出用照射手段により、プリント基板上に第1の波長域の小入射角での光照射と、第2の波長域の大入射角での光照射とが同時に行われ、計測対象抽出手段では、その照射面が撮像手段にて撮像して得られた画像データに基づきクリームハンダの領域が抽出される。通常、プリント基板上の銅箔とクリームハンダとは異なる色を呈しているため、各波長域を適宜それらの色彩に適合させることで、クリームハンダ部分を明確に抽出することができる。従って、クリームハンダをより正確に抽出した上で、撮像、計測を行うことができる。また、ずれ量測定手段では、補正用照射手段から基板面に対し斜めにパターン光が照射され、その照射面が撮像手段にて撮像されて得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量が演算される。そのため、構造の複雑化を招くことなく、比較的簡素な構造でずれ量を測定することができる。そして、そのずれ量を反映して計測を行うことができる。さらに、本手段では、補正用照射手段からのパターン光と、抽出用照射手段からの光とが同時に照射された上で、実際に撮像手段にて撮像が行われる。このため、1回の撮像でクリームハンダ領域の抽出とずれ量の演算とを行うことができ、結果として、計測時間のさらなる短縮、データの簡素化を図ることができる。また、各光の波長域がそれぞれ相違するため、抽出や演算に支障が生じることがない。
【0047】
手段18.プリント基板の銅箔上に配設されたクリームハンダに対し、所定の光を照射可能な計測用照射手段と、
前記所定の光の照射された計測対象を、複数の各撮像エリア毎に撮像可能な撮像手段と、
少なくとも前記撮像手段にて撮像された画像データに基づき、前記計測対象に関し二次元計測及び三次元計測のうち少なくとも一方を行う計測手段と
を備えた計測装置であって、
各撮像エリアでの前記撮像及び計測に先だって、所定の撮像エリアにおいて、緑色又はそれに準じるパターン光を照射可能な補正用照射手段から、当該パターン光を前記プリント基板面に対し斜めに照射して、その照射面を前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するずれ量演算手段と、
前記各撮像エリアでの前記撮像及び計測に先だって、前記プリント基板上に赤色又はそれに準じる波長域の小入射角での光照射と、青色又はそれに準じる波長域の大入射角での光照射とを同時に行うことのできる抽出用照射手段からの光を、前記プリント基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記クリームハンダの領域を抽出する前記計測対象抽出手段とを設け、前記補正用照射手段からのパターン光と、前記抽出用照射手段からの光とを同時に照射した上で、前記撮像手段にて撮像を行うようにしたことを特徴とする計測装置。
【0048】
手段18によれば、抽出用照射手段により、プリント基板上に赤色又はそれに準じる波長域の小入射角での光照射と、青色又はそれに準じる波長域の大入射角での光照射とが同時に行われ、計測対象抽出手段では、その照射面が撮像手段にて撮像して得られた画像データに基づきクリームハンダの領域が抽出される。通常、プリント基板においては、銅箔は赤色系統の色を有し、クリームハンダは、青色系統の色を有する。それ故、赤色系統の光はクリームハンダ部分からは暗くしか反射されず青色系統の光は銅箔部分からは暗くしか反射されない。これにより、青色画像としては銅箔部分がより暗く、赤色画像としてはクリームハンダ部分がより暗くなることから、各色画像とも、明暗の差が大きくなる。従って、クリームハンダをより正確に抽出した上で、撮像、計測を行うことができる。また、ずれ量測定手段では、補正用照射手段から基板面に対し斜めにパターン光が照射され、その照射面が撮像手段にて撮像されて得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量が演算される。そのため、構造の複雑化を招くことなく、比較的簡素な構造でずれ量を測定することができる。そして、そのずれ量を反映して計測を行うことができる。さらに、本手段では、補正用照射手段からのパターン光と、抽出用照射手段からの赤色系統及び青色系統の光とが同時に照射された上で、実際に撮像手段にて撮像が行われる。このため、1回の撮像でクリームハンダ領域の抽出とずれ量の演算とを行うことができ、結果として、計測時間のさらなる短縮、データの簡素化を図ることができる。また、各光の波長域がそれぞれ相違するため、抽出や演算に支障が生じることがない。
【0049】
手段19.前記ずれ量演算手段の演算結果に基づいて、前記基板と前記撮像手段との相対高さ関係を調整するよう構成したことを特徴とする手段14乃至18のいずれかに記載の計測装置。
【0050】
手段19によれば、実際に相対高さ関係が調整された上での計測が可能となることから、より正確な計測を担保することができる。
【0051】
手段20.前記補正用照射手段から照射されるパターン光は、ライン光であることを特徴とする手段14乃至19のいずれかに記載の計測装置。
【0052】
手段20によれば、基準高さからのずれ量を比較的把握しやすい。
【0053】
手段21.前記計測手段による計測が、撮像エリアの移行の際に行われるよう構成したことを特徴とする手段1乃至20のいずれかに記載の計測装置。
【0054】
手段21によれば、計測手段による計測が、撮像エリアの移行の際に行われる。換言すれば、計測が完了するのを待って撮像エリアを移行したりすることがない。そのため、効率的な計測を行うことができ、総合的な計測時間の短縮化を図ることができる。
【0055】
手段22.手段1乃至21のいずれかに記載の計測装置を具備し、前記計測手段の計測結果に基づき、前記計測対象に関する良否判定を行うよう構成したことを特徴とする検査装置。
【0056】
手段22によれば、上記各手段に対応する作用効果が、良否判定を行う検査に際し奏される。
【0057】
【発明の実施の形態】
以下、一実施の形態について、図面を参照しつつ説明する。
【0058】
図1は、本実施の形態における計測装置としての三次元計測装置1を模式的に示す概略構成図である。なお、本実施の形態では、三次元計測装置1は、プリント基板K(の銅箔)上に印刷されてなるクリームハンダ(主として計測対象を構成する)の印刷状態を検査するための印刷状態検査装置として具現化されている。
【0059】
三次元計測装置1は、基台2を備えているとともに、基台2上には、X軸移動機構3及びY軸移動機構4が設けられている。Y軸移動機構4上には、レール10が配設されており、該レール10上に基板としてのプリント基板Kが載置されるようになっている。そして、X軸移動機構3及びY軸移動機構4が作動することで、プリント基板KがX軸方向及びY軸方向に移動するようになっている。これらX軸移動機構3及びY軸移動機構4はXY軸方向移動手段を構成する。
【0060】
三次元計測装置1はまた、計測用照射手段としての三次元計測用照射手段5と、撮像手段としてのCCDカメラ(カラーカメラ)6と、CCDカメラ6に対し電気的に接続された主制御手段7とを備えている。三次元計測用照射手段5は、プリント基板Kの表面に対し斜め上方から所定の光パターンを照射するように構成されている。CCDカメラ6は、プリント基板Kの真上に配置され、プリント基板K上の前記光パターンの照射された部分を撮像可能となっている。そして、主制御手段7では、所定の三次元計測方法によって、前記CCDカメラ6にて撮像された画像データに基づき、画像処理が行われ、クリームハンダの三次元計測(主として高さ計測)及びクリームハンダの印刷状態の検査が行われるようになっている。つまり、主制御手段7は、クリームハンダの高さ(体積)に基づいて印刷状態を検査する検査手段8を具備している(図4参照)。なお、本実施の形態における三次元計測に際しては、位相シフト法、光切断法、空間コード法、合焦法等、任意の計測方法が適宜採用される。
【0061】
本実施の形態では、前記CCDカメラ6は、Z軸移動機構9に取付けられている。すなわち、Z軸移動機構9が駆動されることで、CCDカメラ6が上下方向に移動可能となっている。これにより、プリント基板KとCCDカメラ6との相対高さ関係が変更させられるようになっている。
【0062】
また、本実施の形態における三次元計測装置1は、前記三次元計測に際し(先だって)、クリームハンダの配設されてなる領域を抽出するための手段を具備している(計測対象抽出手段)。当該手段には、ハンダ抽出用照射手段11が含まれる。ハンダ抽出用照射手段11は、三次元計測用照射手段5による光パターンの照射に先だってプリント基板Kに対し、所定の光を照射するものである。より詳しく説明すると、ハンダ抽出用照射手段11は、図2に示すように、上下一対のリングライト12,13を具備している。
【0063】
上部のリングライト12は、小入射角での光照射を行うようになっているとともに、赤色の光を照射可能に構成されている。下部のリングライト13は、大入射角での光照射を行うようになっているとともに、青色の光を照射可能に構成されている。通常、プリント基板Kにおいては、基板Kには赤色系統の銅箔が設けられており、その上に青色系統のクリームハンダが印刷されていることから、赤色光はクリームハンダ部分からは暗くしか反射されず青色光は銅箔部分からは暗くしか反射されない。これにより、青色画像としては銅箔部分がより暗く、赤色画像としてはクリームハンダ部分がより暗くなることから、各色画像とも、明暗の差が大きくなる。そこで、本実施の形態では、三次元計測に先だって、計測対象たるクリームハンダの領域抽出を行うべく、両リングライト12,13により赤色青色の光を照射し、その照射面をCCDカメラ6で撮像し、主制御手段7において、クリームハンダの配設領域を特定(抽出)する作業が行われるようになっている。
【0064】
また、本実施の形態における三次元計測装置1は、前記三次元計測に際し(先だって)、プリント基板Kの反りを補正するための手段を具備している。当該手段には、Z軸補正用照射手段14が含まれる。Z軸補正用照射手段14は、前記三次元計測用照射手段5による光パターンの照射に先だって、前記ハンダ抽出用照射手段11による光の照射とともに、プリント基板Kに対し、所定のパターン光としてのライン光を照射するものである。より詳しく説明すると、Z軸補正用照射手段14は、前記リングライト12,13とは異なる波長域のパターン光(本実施の形態では緑色のライン光)を照射可能となっている。
【0065】
Z軸補正用照射手段14による緑色のライン光の照射は、プリント基板Kの反りに起因する基準高さからの「高さずれ量」を把握するために行われるものである。すなわち、図3に示すように、Z軸補正用照射手段14によりライン光が照射され、その光がCCDカメラ6により撮像される場合、ある撮像エリアにおいて、図示するようにプリント基板Kの高さ位置が相違すると、CCDカメラ6で撮像されるライン光の位置が左右方向に相違することとなる。本実施の形態では、主制御手段7において、前記ライン光の位置に基づいて、三角測量の原理によって、プリント基板Kの高さずれ量が演算されるようになっている。つまり、主制御手段7は、プリント基板Kの高さずれ量を演算するずれ量測定手段としてのZ軸ずれ量演算手段15を具備している(図4参照)。
【0066】
次に、主制御手段7を中心とする三次元計測装置1の電気的構成について説明する。
【0067】
図4に示すように、CCDカメラ6は、主制御手段7に対し電気的に接続されている。主制御手段7は、上述したように、検査手段8及びZ軸ずれ量演算手段15を備えている。これとともに、主制御手段7は、Z軸ずれ量演算手段15の演算結果に基づき、「ずれ量」の適否を判定する判定手段としてのずれ量判定手段16を具備している。
【0068】
主制御手段7は、照射制御手段21に接続されている。照射制御手段21は、前記三次元計測用照射手段5、ハンダ抽出用照射手段11(リングライト12,13)及び、Z軸補正用照射手段14に接続されており、前記主制御手段7からの制御信号に基づき、各照射手段5,11,14の照射を切換制御する。
【0069】
主制御手段7は、X軸移動制御手段22及びY軸移動制御手段23に接続されている。これらX軸移動制御手段22及びY軸移動制御手段23は、各撮像エリアの切り換えを行うべく、前記X軸移動機構3及びY軸移動機構4を適宜駆動制御する。これにより、プリント基板KがX軸方向、Y軸方向へと適宜移動させられるようになっている。
【0070】
主制御手段7はまた、Z軸移動制御手段24に接続されている。当該Z軸移動制御手段24は、主制御手段7、特にずれ量判定手段16からの入力信号に基づいて、前記Z軸移動機構9を駆動制御する。これにより、CCDカメラ6とプリント基板Kとの相対高さ関係が調整される(反り等がある場合には、それが補正される)ようになっている。
【0071】
次に、上記のように構成されてなる三次元計測装置1における作用効果を、主制御手段7によって行われる制御内容を中心として説明する。
【0072】
主制御手段7は、まず、第1の撮像エリアにおいて、クリームハンダ領域の抽出及び高さずれ量の測定を行うべく、前記照射制御手段21を介して、ハンダ抽出用照射手段11の両リングライト12,13からの光を照射させるとともに、Z軸補正用照射手段14からのライン光を照射させる。そして、CCDカメラ6にて、抽出用の照射光及びライン光の照射された第1の撮像エリアを撮像する。このとき、撮像により得られた画像データに関して、両リングライト12,13からの赤色青色の光と、Z軸補正用照射手段14からの緑色のライン光とが混在する。しかしながら、各光の波長域がそれぞれ異なるため、1つの画像データであっても、それらを容易に区別することができる。そして、前記画像データに基づき、一旦クリームハンダ領域の抽出を行う。
【0073】
次に、主制御手段7(Z軸ずれ量演算手段15)は、前記画像データのうち、緑色のライン光に基づき、高さずれ量Zaを算出する。例えば、図5(a)において、ライン光が基準高さ位置(反り等がなければ、ライン光は当該位置にくるであろうという位置)から所定量(図ではα)だけずれていたとする。Z軸ずれ量演算手段15では、当該所定のずれ量に基づき、上述した三角測量の原理により、基準高さ位置からのZ軸方向(高さ方向)のずれ量Zaを算出する。
【0074】
続いて、主制御手段7(ずれ量判定手段16)は、前記ずれ量Zaが、予め定められた基準範囲内にあるか否かを判定する。そして、その判定結果により、以下に記す制御を行う。
【0075】
(1)ずれ量Zaが予め定められた基準範囲内にある場合
ずれ量Zaが基準範囲内にある場合には、主制御手段7は、当該第1の撮像エリアにおいて、前記抽出されたクリームハンダ領域に関し三次元計測を実行する。すなわち、照射制御手段21を介して、三次元計測用照射手段5から所定の光パターンを照射する。そして、CCDカメラ6にて照射された光パターンを撮像する。
【0076】
撮像完了後、主制御手段7はX軸移動制御手段22及びY軸移動制御手段23を介して、X軸移動機構3及びY軸移動機構4を駆動せしめ、次の撮像エリア(第2の撮像エリア)へと撮像エリアを切換制御する。
【0077】
そして、この撮像エリアの切換の途中で、主制御手段7は、Z軸移動制御手段24を介してZ軸移動機構9を駆動せしめ、CCDカメラ6を前記ずれ量Zaだけ移動させ、その高さ位置を補正(調整)する。これにより、次の撮像エリアにおいては、前回の撮像エリアでの許容範囲内でのずれ量が補正され、多くの場合において、CCDカメラ6とプリント基板K表面との高さ位置関係が適正なものとなる。
【0078】
また、当該撮像エリアの切換の間に、主制御手段7(検査手段8)は、前記第1の撮像エリアにおける抽出データ及び画像データに基づき、三次元計測(クリームハンダの高さ計算及び体積計算)を行い、クリームハンダの印刷状態が適正であるか否かの判断を行う。このように、撮像エリアの移行の間に計測(演算)が行われることで、効率的な計測を行うことができ、総合的な計測時間の短縮化を図ることができる。
【0079】
(2)ずれ量Zaが予め定められた基準範囲内にない場合
一方、前記ずれ量Zaが基準範囲内にない場合には、主制御手段7は、当該第1の撮像エリアにおいて、まず、プリント基板Kの反り等が著しく、速やかに補正を行う必要があるものとして、三次元計測に先だって、Z軸移動制御手段24を介してZ軸移動機構9を駆動せしめ、CCDカメラ6を前記ずれ量Zaだけ移動させ、その高さ位置を補正(調整)する。これにより、当該第1の撮像エリアにおいて、速やかにずれ量が補正され、CCDカメラ6の異常等特殊な事情がない限りは、CCDカメラ6とプリント基板K表面との高さ位置関係が適正なものとなる。
【0080】
補正後、再度、主制御手段7は、照射制御手段21を介して、ハンダ抽出用照射手段11の両リングライト12,13からの光を照射させるとともに、Z軸補正用照射手段14からのライン光を照射させる。そして、CCDカメラ6にて、抽出用の照射光及びライン光の照射された第1の撮像エリアを撮像し、再度クリームハンダ領域の抽出を行う。
【0081】
なお、この時点で、前記補正により、高さ位置関係が適正なものとなっている筈であるため、基本的には再度ずれ量までは確認する必要はないが、念のため、再度前記ライン光に基づいてずれ量Zaを算出することとしてもよい。そして、再度算出したずれ量Zaが(繰り返し)許容範囲を逸脱するような場合には、異常が生じたものとしてエラー判定することとしてもよい。
【0082】
ただし、基本的には、前記補正により当該第1の撮像エリアにおける高さ位置関係は適正なものとなっている筈であるため、主制御手段7は、次に、三次元計測の実行を許容する。すなわち、照射制御手段21を介して、三次元計測用照射手段5から所定の光パターンを照射する。そして、CCDカメラ6にて照射された光パターンを撮像する。撮像完了後、主制御手段7はX軸移動制御手段22及びY軸移動制御手段23を介して、X軸移動機構3及びY軸移動機構4を駆動せしめ、次の撮像エリア(第2の撮像エリア)へと撮像エリアを切換制御する。
【0083】
そして、この撮像エリアの切換に際しては、主制御手段7は、Z軸移動機構9を駆動させることなく(CCDカメラ6の高さ位置を補正することなく)撮像エリアを切り換える。これは、前記第1の撮像エリアにおいて、既に補正が完了しているためである。
【0084】
当該撮像エリアの切換の間に、主制御手段7(検査手段8)は、前記第1の撮像エリアにおける再度の抽出データ及び画像データに基づき、三次元計測(クリームハンダの高さ計算及び体積計算)を行い、クリームハンダの印刷状態が適正であるか否かの判断を行う。このように、撮像エリアの移行の間に計測(演算)が行われることで、効率的な計測を行うことができ、総合的な計測時間の短縮化を図ることができる。
【0085】
本実施の形態では、主制御手段7により、各撮像エリア毎に、上記の作業が繰り返し行われる。そして、全ての撮像エリアにおける検査が完了した時点で、三次元計測及び検査が終了することとなる。
【0086】
以上詳述したように、本実施の形態では、各撮像エリアでの三次元計測に先だって、予め定められた基準高さ位置に対する高さ方向のずれ量Zaが測定され、そのずれ量Zaが許容範囲内にあると判定された場合には、プリント基板KとCCDカメラ6との相対高さ関係が保持されたまま、当該撮像エリアでの撮像が行われる。その後、次の撮像エリアに移行するときに、Z軸移動機構9が制御されることで、前記ずれ量Za分だけ、高さ位置関係が補正される。
【0087】
例えば図5(a)に示すように、検査エリア(撮像エリア)Aにおいて、基準高さからのずれ量Zaが許容範囲内のαであったとする。この場合には、当該検査エリアAにおいては、CCDカメラ6の高さが補正されることなく三次元計測用の撮像が行われる。そして、次の検査エリアBに移行するときに、演算、検査が行われるとともに、前記α分だけCCDカメラ6の高さが補正される。そして、次の検査エリアBにおいて、同様のことが行われる。検査エリアBへの移行に際し、CCDカメラ6の高さ位置が補正されているため、多くの場合、基準高さ位置からのずれ量は少なくて済む。
【0088】
このため、いちいち各撮像エリア毎に相対高さ関係を調整するような場合に比べて、計測に関する高速性が確保される。
【0089】
また、ずれ量Zaが許容範囲内にないと判定された場合には、即座にZ軸移動機構9が制御されることで、前記ずれ量Za分だけ、高さ位置関係が補正される。その上で、当該撮像エリアでの撮像及び計測が行われる。
【0090】
例えば、図5(b)に示すように、検査エリアAにおいて、基準高さからのずれ量Zaが許容範囲内のαであったとする。この場合には、上述したように当該検査エリアAにおいては、CCDカメラ6の高さが補正されることなく三次元計測用の撮像が行われる。そして、次の検査エリアBに移行するときに、演算、検査が行われるとともに、前記α分だけCCDカメラ6の高さが補正される。そして、次の検査エリアBにおいて、同様のことが行われる。このとき、当該検査エリアBにおいて、急激な高低差等が存在すると、ずれ量Zaが許容範囲を逸脱することがある。この場合、本実施の形態では、当該検査エリアBにおいてCCDカメラ6の高さ位置が補正される。
【0091】
従って、所定の撮像エリアにおいて急激な高低差が存在していたとしても、その場で速やかに相対高さ位置が補正されることから、高低差分をその場で反映させて計測することが可能となる。結果として、各撮像エリア毎に、ピントを合わせた状態で正確に計測を行うことができる。
【0092】
また、図5(b)の如く、検査エリアBにて既に大幅な補正が行われた場合には、次の検査エリア(撮像エリア)に切り換えられるときに、その補正された相対高さ関係がとりあえず保持される。換言すれば、切換の途中で高さ位置が補正されない。従って、次の検査エリアにおいて補正が必要なければ、計測に関しての高速性がより一層確保されることとなる。
【0093】
さらに、本実施の形態では、各検査エリアでの撮像及び計測に先だって、計測対象を抽出することとしている。このため、計測対象に関し、より正確な計測が可能となる。
【0094】
しかも、当該抽出用の照射光と、ずれ量Zaを算出するためののライン光とは波長域が異なるため、抽出用の照射光とライン光とを同時に照射しても、CCDカメラ6が色彩の相違を区別可能なものであれば、両者を比較的容易に区別することができる。それ故、1回の撮像で、クリームハンダの抽出と、ずれ量Zaの算出とを併せて行うことができる。結果として、計測時間のさらなる短縮、データ量の削減を図ることができる。
【0095】
併せて、本実施の形態では、クリームハンダの高さ計算及び検査を、撮像エリアの移行の際に行われるようにしている。つまり、計測が完了するのを待って撮像エリアを移行したりすることがない。そのため、効率的な計測を行うことができ、総合的な計測時間の短縮化を図ることができる。
【0096】
尚、上述した実施の形態の記載内容に限定されることなく、例えば次のように実施してもよい。
【0097】
(a)上記実施の形態では、クリームハンダの主として高さ計測(三次元計測)を行う場合に具体化しているが、例えばクリームハンダの面積計測等の二次元計測を行う場合にも具体化することができる。この場合、クリームハンダの抽出と二次元計測とを兼用することも可能である。換言すれば、抽出作業を省略して、ずれ量演算のための照射と計測のための照射とを同時に行った上で、撮像し、その画像データに基づいてずれ量を演算し、それを反映して計測を行うことも可能である。
【0098】
(b)撮像手段としては、上記実施の形態のようなエリアを撮像可能なCCDカメラ以外にも、ラインカメラであってもよい。さらに、例えば、CMOSカメラなど、エリア状又はライン状に撮像可能なカメラであってもよく、必ずしもCCDカメラに限定されるものではない。
【0099】
(c)上記実施の形態では、クリームハンダ領域を抽出し、その上で三次元計測を行うこととしているが、かかる抽出手段を省略してもよい。
【0100】
(d)各照射手段5,11,14を構成する光源は、ハロゲンランプでもよいし、LEDであってもよい。また、レーザ光を照射可能な照射手段を採用してもよい。
【0101】
(e)上記実施の形態では、XY軸方向へは、プリント基板Kが、Z軸方向へはCCDカメラ6がそれぞれ移動する構成となっているが、両者が相対移動可能であればよく、例えばプリント基板Kが上下動可能となっていてもよいし、CCDカメラ6がXY軸方向へ移動可能となっていてもよい。
【0102】
(f)上記実施の形態では、クリームハンダの印刷状態を検査するための検査装置に具現化されている。これに対し、上記のような構成を、基板の製造等に関連する他の装置に具現化することも可能である。例えば、基板上に実装された電子部品の実装状態や、キズ等の有無を検査するための検査装置に具体化してもよい。
【0103】
(g)上記実施の形態では、Z軸補正用照射手段14からは緑色のライン光が照射されることとなっているが、抽出のための照射光とは異なる波長域であれば、必ずしも緑に限定されるものではなく、例えば赤外線や紫外線を照射可能な構成となっていてもよい。また、抽出のための照射光とは別に撮像するのであれば、抽出用の光と同じ波長域の光を照射することとしてもよい。
【0104】
(h)上記実施の形態では、Z軸補正用照射手段14からライン光が照射されることとなっているが、このライン光は一本であってもよいし、複数であってもよい。ライン光が複数の場合には、それぞれが平行であってもよいし、(互いに交わるよう)所定の角度をもっていてもよい(例えば直交していてもよい)。また、それぞれのライン光の幅は、撮像エリアを超える幅であってもよいし、それよりも十分に短くても、例えば点、或いは、ポイントであってもよい。ただし、検査エリアをカバーする幅であれば、例えば銅箔部など、高さずれ量を安定して測定できる部分を、より確実に含むことができる。
【図面の簡単な説明】
【図1】一実施の形態における計測装置を模式的に示す概略斜視図である。
【図2】ハンダ抽出用照射手段及びZ軸補正用照射手段等の配置構成を示す模式図である。
【図3】ずれ量算出に際しての概念を説明するための模式図である。
【図4】主制御手段等の電気的構成を説明するためのブロック図である。
【図5】(a),(b)はともに実施の形態の作用効果を説明するための検査エリア毎の画像データ等を模式的に示す図である。
【符号の説明】
1…三次元計測装置、3…XY軸方向移動手段としてのX軸移動機構、4…XY軸方向移動手段としてのY軸移動機構、5…三次元計測用照射手段、6…撮像手段としてのCCDカメラ、7…主制御手段、8…検査手段、9…Z軸移動機構、11…ハンダ抽出用照射手段、12,13…リングライト、14…Z軸補正用照射手段、15…Z軸ずれ量演算手段、16…ずれ量判定手段、K…プリント基板。
[0001]
TECHNICAL FIELD OF THE INVENTION
The present invention relates to a measurement device and an inspection device for a substrate and the like, and more particularly, to a measurement device for measuring a measurement target such as a cream solder provided on a printed circuit board and an inspection device including the measurement device. Things.
[0002]
[Prior art]
In the process of manufacturing a printed circuit board, there is a main step of mounting electronic components on the board. In mounting electronic components, first, cream solder is printed on a predetermined electrode pattern provided on a printed circuit board. Next, the electronic component is temporarily fixed on the printed circuit board based on the viscosity of the cream solder. Thereafter, the printed circuit board is guided to a reflow furnace, and is subjected to a predetermined reflow process, so that soldering is performed. It is necessary to inspect the printing state of the cream solder before it is led to the reflow furnace, and a three-dimensional measuring device may be used for such inspection.
[0003]
In recent years, various types of so-called non-contact type three-dimensional measurement devices using light have been proposed, and examples of methods adopted for measurement include a phase shift method, a light cutting method, a space code method, and a focusing method. Can be
[0004]
By the way, if the measurement is performed while the substrate is warped in the three-dimensional measurement, the positional relationship of the solder or the like will be out of order, which will hinder accurate measurement. Therefore, it is necessary to perform measurement after correcting (correcting) the warpage of the substrate.
[0005]
Conventionally, in order to correct such a warp, in a state where the end portion of the substrate arranged in a horizontal state is supported and fixed, a push-up pin is pressed upward from below to hit the lower surface of the substrate and pushed up, thereby lifting the substrate. Warpage is being corrected. However, such physical correction does not always enable the substrate to be accurately and flatly corrected. Further, a mechanism for correction is required, which may lead to a complicated and large-sized device.
[0006]
On the other hand, there is a technique in which the sensor head is moved in the Z-axis (height) direction to correct the warpage during measurement (for example, see Patent Document 1). In this technique, height data is obtained by scanning the sensor head relative to the printed circuit board in the X and Y directions, and when the average value of the height data is within the set range, the next sensor head is used. The height control of the Z-axis moving means at the time of scanning is not performed, and the scanning is performed with the distance between the printed board and the sensor head being constant. On the other hand, when the average value of the height data is out of the set range, the height control of the Z-axis moving unit is executed at the next scanning by the sensor head.
[0007]
[Patent Document 1]
JP 2001-156425 A
[0008]
[Problems to be solved by the invention]
However, in the above technique, if there is a sudden height difference (for example, a step) on the substrate surface, it may not be properly reflected next time. In addition, when the above-mentioned height difference is present in the first measurement, if the difference is corrected based on the difference, a situation may occur in which the difference is not properly reflected in the next measurement. Further, when a sudden step is present when the measurement is performed last, there is a problem that the step difference is not reflected in the correction because it is the last. In such a case, there is a possibility that the measurement may proceed in a state where the focus is not achieved. As a result, accurate measurement may be hindered.
[0009]
Note that the above-described problem may occur not only in three-dimensional measurement including height measurement but also in two-dimensional measurement.
[0010]
The present invention has been made in view of the above circumstances, and even when a substrate is warped or the like, a measurement device and an inspection capable of performing more accurate measurement without performing physical correction. One of the main purposes is to provide a device.
[0011]
Means for Solving the Problems and Effects of the Invention
The characteristic means capable of achieving the above object will be described below. In addition, characteristic actions and effects of each means will be described as necessary.
[0012]
Means 1. A measurement irradiation unit capable of irradiating a predetermined light to a measurement target arranged on a substrate, and an imaging unit capable of imaging the measurement target irradiated with the predetermined light for each of a plurality of imaging areas. A measurement device comprising: a measurement unit that performs two-dimensional measurement or three-dimensional measurement on the measurement target based on at least image data captured by the imaging unit.
A moving unit capable of adjusting a relative height relationship between the substrate and the imaging unit, and a height direction with respect to a predetermined reference height position in a predetermined imaging area prior to the imaging and measurement in each imaging area. Deviation amount measuring means for measuring the deviation amount, and a determination means for determining whether the deviation amount in the height direction measured by the deviation amount measuring means is within a predetermined allowable range,
If the determination unit determines that the deviation amount is within a predetermined allowable range, the relative height relationship between the substrate and the imaging unit is maintained, and the predetermined height in the predetermined imaging area is maintained. Perform the imaging for measurement, when moving to the next imaging area, control the moving means to correct the relative height relationship by the amount of deviation,
When the determining unit determines that the deviation amount is not within the allowable range, the control unit controls the moving unit to correct the relative height relationship by the deviation amount, and then performs the predetermined imaging. A measuring device configured to perform the measurement imaging in an area.
[0013]
According to the means (1), the measurement object provided on the substrate is irradiated with predetermined light by the measurement irradiation means, and the measurement object irradiated with the predetermined light is subjected to a plurality of imaging by the imaging means. An image is taken for each area. Then, based on at least the image data captured by the imaging unit, the measurement unit performs two-dimensional measurement or three-dimensional measurement on the measurement target. By the way, the shift amount measuring means measures a shift amount in a height direction with respect to a predetermined reference height position in a predetermined imaging area prior to the imaging and measurement in each imaging area. The determining means determines whether or not the amount of deviation in the height direction measured by the amount of deviation measuring means is within a predetermined allowable range. When the determination unit determines that the deviation amount is within a predetermined allowable range, the measurement in the predetermined imaging area is performed while maintaining the relative height relationship between the substrate and the imaging unit. Imaging is performed. Thereafter, when moving to the next imaging area, the relative height relationship between the substrate and the imaging means is corrected by the displacement amount by controlling the moving means. For this reason, high-speed measurement is ensured as compared with a case where the relative height relationship is adjusted for each imaging area. If the determining unit determines that the deviation amount is not within the allowable range, the relative height relationship is corrected by the deviation amount by controlling the moving unit, and the predetermined height is corrected. Imaging for measurement is performed in the imaging area. Therefore, even if there is a sudden height difference (for example, a step) in a predetermined imaging area, the relative height relationship is corrected immediately on the spot, and the height difference is reflected on the spot to perform measurement. It is possible to do. As a result, accurate measurement can be performed in a focused state for each imaging area.
[0014]
In addition, "if the determination unit determines that the deviation amount is not within the allowable range, after controlling the moving unit to correct the relative height relationship by the deviation amount, The displacement amount is measured by the displacement amount measuring means, and whether the displacement amount is within a predetermined allowable range is determined by the determining means. May be configured to perform the imaging for measurement in the imaging area of the imaging device, and when the determination unit determines that the deviation amount is not within the allowable range, the moving unit After the control, the relative height relationship is corrected by the deviation amount, the deviation amount is measured again by the deviation amount measuring means, and the deviation amount is set to a predetermined allowable range by the determination means. Is determined to be within the allowable number of times. If it is determined that can be configured "to determine the error.
[0015]
Means 2. A measurement irradiation unit capable of irradiating a predetermined light to a measurement target arranged on a substrate, and an imaging unit capable of imaging the measurement target irradiated with the predetermined light for each of a plurality of imaging areas. A measurement device comprising: a measurement unit that performs two-dimensional measurement or three-dimensional measurement on the measurement target based on at least image data captured by the imaging unit.
Z-axis direction moving means capable of adjusting a relative height relationship between the substrate and the imaging means,
XY-axis direction moving means capable of adjusting the relative positional relationship between the substrate and the imaging means to switch the imaging area, and a predetermined reference height in each imaging area prior to the imaging and measurement in each imaging area. Displacement amount measuring means for measuring the displacement amount in the height direction with respect to the height position,
Determining means for determining whether the amount of displacement in the height direction measured by the displacement amount measuring means is within a predetermined allowable range,
In the first imaging area, when it is determined by the determination unit that the deviation amount is within a predetermined allowable range, while maintaining the relative height relationship between the substrate and the imaging unit, When the imaging for measurement in the first imaging area is allowed and the XY-axis direction moving means is controlled to switch the imaging area to the second imaging area, the Z-axis direction moving means is controlled. Correcting the relative height relationship by the amount of deviation,
In the first imaging area, when the determination unit determines that the deviation amount is not within the allowable range, the Z-axis direction moving unit is controlled to control the relative height relationship by the deviation amount. And a control means for allowing the measurement image pickup in the first image pickup area after correcting the above.
[0016]
According to the means 2, the relative height relationship between the substrate and the imaging means is adjusted by the Z-axis direction moving means. The imaging area is switched by adjusting the relative positional relationship between the substrate and the imaging means by the XY-axis direction moving means. Prior to imaging and measurement in each imaging area, the deviation amount measuring means measures a deviation amount in a height direction with respect to a predetermined reference height position in each imaging area. Is determined to be within a predetermined allowable range. Then, in the first imaging area, when the determination unit determines that the deviation amount is within a predetermined allowable range, the control unit sets the relative height relationship between the substrate and the imaging unit. While being held, imaging for measurement in the first imaging area is allowed. Further, when the imaging area is switched to the second imaging area by controlling the XY-axis direction moving means, the Z-axis direction moving means is controlled and the relative height relationship is corrected by the amount of deviation. For this reason, high-speed measurement is ensured as compared with a case where the relative height relationship is adjusted for each imaging area. Further, in the first imaging area, when the determining means determines that the deviation amount is not within the allowable range, the Z-axis direction moving means is controlled to correct the relative height relationship by the deviation amount. Then, imaging for measurement in the first imaging area is allowed. Therefore, even if there is a sudden height difference (for example, a step) in the first imaging area, the relative height relationship is quickly corrected on the spot, and the height difference is reflected on the spot. It becomes possible to measure. As a result, accurate measurement can be performed in a focused state for each imaging area.
[0017]
Means 3. In the first imaging area, when the determination unit determines that the deviation amount is not within the allowable range, the Z-axis direction moving unit is controlled to control the relative height by the deviation amount. After correcting the relationship, when the imaging for measurement in the first imaging area is allowed and the imaging area is switched to the second imaging area by controlling the XY-axis direction moving means, the relative height 3. The measuring device according to claim 2, wherein the measuring device holds the relationship.
[0018]
According to the means 3, when a large correction has already been performed in the first imaging area, when the switching to the second imaging area is performed, the corrected relative height relationship is maintained for the time being. . Therefore, if no correction is required in the second imaging area, the high-speed measurement is further ensured.
[0019]
Means 4. The measuring device according to any one of claims 1 to 3, further comprising: a measurement target extraction unit that extracts a measurement target prior to the imaging and measurement in each of the imaging areas.
[0020]
According to the means 4, the measurement target is extracted by the measurement target extraction means, and the imaging and measurement in each imaging area are performed thereon. Therefore, more accurate measurement can be performed on the measurement target.
[0021]
Means 5. The substrate is a printed circuit board, the measurement object is cream solder disposed on a copper foil of the printed circuit board, and the measurement object extracting unit emits light of a blue or similar wavelength range on the printed circuit board. Light from the irradiating means for extraction which can be performed is irradiated on the printed circuit board, and the area of the cream solder is extracted based on image data obtained by imaging by the imaging means. The measuring device according to Means 4.
[0022]
According to the means 5, the measurement is performed on the cream solder provided on the copper foil of the printed circuit board. Here, the irradiation means for extraction irradiates the printed circuit board with light in a blue or similar wavelength range on the printed circuit board, and the measurement object extraction means uses the image data obtained by imaging the irradiation surface with the imaging means. The area of cream solder is extracted. Usually, on a printed circuit board, the copper foil has a red-based color, and the cream solder has a blue-based color. Therefore, blue light is only reflected darkly from the copper foil portion. Thereby, the copper foil portion is darker and the difference between light and dark becomes large. Therefore, imaging and measurement can be performed after extracting cream solder more accurately.
[0023]
Means 6. The substrate is a printed circuit board, the object to be measured is cream solder provided on a copper foil of the printed circuit board, and the object to be measured is a small incident angle in a red or similar wavelength range on the printed circuit board. Irradiating light on the printed circuit board with light from the irradiating means for extraction, which can simultaneously perform light irradiation at the same time and light irradiation at a large incident angle in a blue wavelength range or a similar wavelength range, and imaged by the imaging means. The measuring apparatus according to claim 4, wherein the area of the cream solder is extracted based on the image data obtained by performing the above.
[0024]
According to the means 6, the measurement is performed on the cream solder provided on the copper foil of the printed circuit board. Here, by the irradiation means for extraction, light irradiation at a small incident angle in a red or similar wavelength region and light irradiation at a large incident angle in a blue or similar wavelength region are simultaneously performed on the printed circuit board, and the measurement is performed. In the target extracting means, a cream solder area is extracted based on image data obtained by imaging the irradiation surface by the imaging means. Usually, on a printed circuit board, the copper foil has a red-based color, and the cream solder has a blue-based color. Therefore, red-based light is only reflected darkly from the cream solder portion, and blue-based light is only darkly reflected from the copper foil portion. As a result, the copper image portion becomes darker as a blue image, and the cream solder portion becomes darker as a red image, so that the difference between light and dark becomes large in each color image. Therefore, imaging and measurement can be performed after extracting cream solder more accurately.
[0025]
Means 7. The displacement amount measuring means is based on triangulation principles based on image data obtained by imaging predetermined light radiated obliquely to the substrate surface from the correcting irradiation means by the imaging means. The measuring device according to any one of means 1 to 6, wherein a displacement amount with respect to the height is calculated.
[0026]
According to the means 7, in the displacement amount measuring means, predetermined light radiated obliquely to the substrate surface from the correction irradiating means is based on image data obtained by being imaged by the imaging means, based on the principle of triangulation. Calculates the amount of deviation from the reference height. Therefore, the amount of displacement can be measured with a relatively simple structure without complicating the structure.
[0027]
Means 8. The measuring apparatus according to claim 7, wherein the predetermined light emitted from the correcting irradiation means is line light.
[0028]
According to the means 8, since the predetermined light emitted from the correcting irradiation means is a line light, it is relatively easy to grasp the amount of deviation from the reference height.
[0029]
Means 9. The shift amount measuring unit is based on the principle of triangulation based on image data obtained by imaging the predetermined line light obliquely irradiated from the correcting irradiation unit to the substrate surface by the imaging unit. The shift amount with respect to a reference height is calculated, and the predetermined line light is light in a wavelength range different from a wavelength range of light emitted when a measurement target is extracted by the measurement target extraction unit. The measuring device according to any one of means 4 to 6, wherein:
[0030]
According to the means (9), the predetermined line light emitted obliquely to the substrate surface from the correcting irradiation means has a wavelength different from the wavelength range of the light emitted when the measurement target is extracted by the measurement target extraction means. Since it is a light of the area, even if the predetermined line light and the light at the time when the measurement target is extracted are simultaneously irradiated, if the imaging means can distinguish the color difference like a color camera, etc. , Can be distinguished relatively easily. Therefore, the extraction of the measurement target and the calculation of the shift amount can be performed together by one imaging. As a result, the measurement time can be further reduced and the data can be simplified.
[0031]
Means 10. The shift amount measuring unit is based on the principle of triangulation based on image data obtained by imaging the predetermined line light obliquely irradiated from the correcting irradiation unit to the substrate surface by the imaging unit. Means for calculating a shift amount with respect to a reference height, wherein the predetermined line light is light of a green color range or a wavelength range similar thereto, which is different from irradiation light from the extraction irradiation means. The measurement device according to 5 or 6.
[0032]
According to the means 10, the predetermined line light emitted obliquely to the substrate surface from the correction irradiation means is green or light in a wavelength range equivalent thereto, and a blue light emitted from the extraction irradiation means, or It is different from the wavelength range of blue and red light. For this reason, even if the line light and the light at the time when the measurement target is extracted are simultaneously irradiated, if the imaging means can distinguish the difference in color as in a color camera, etc., the two can be easily compared. Can be distinguished. Therefore, the extraction of the measurement target and the calculation of the shift amount can be performed together by one imaging. As a result, the measurement time can be further reduced and the data can be simplified.
[0033]
Means 11. The substrate is a printed circuit board, the measurement object is cream solder provided on a copper foil of the printed circuit board, and the measurement object extracting unit irradiates the printed circuit board with light in a predetermined wavelength range. Irradiating the printed circuit board with light from the irradiating means for extraction capable of extracting the area of the cream solder based on image data obtained by imaging by the imaging means,
Further, the displacement amount measuring means is based on image data obtained by imaging the predetermined line light obliquely irradiated from the correction irradiating means onto the substrate surface by the imaging means, based on the principle of triangulation. Calculating the shift amount with respect to the reference height, wherein the predetermined line light is light in a wavelength range different from the wavelength range of the light irradiated from the extraction irradiation means. The measuring device according to claim 4.
[0034]
According to the means 11, the extraction of the measurement target and the calculation of the shift amount can be performed together by one imaging. As a result, the measurement time can be further reduced and the data can be simplified.
[0035]
Means 12. The substrate is a printed circuit board, the object to be measured is cream solder provided on a copper foil of the printed circuit board, and the object to be measured is provided on the printed circuit board at a small incident angle in a first wavelength range. Irradiating the printed circuit board with light from extraction irradiating means capable of simultaneously performing light irradiation and light irradiation at a large incident angle in a second wavelength range different from the first wavelength range. Extracting the area of the cream solder based on image data obtained by imaging by the imaging means,
Further, the displacement amount measuring means is based on image data obtained by imaging the predetermined line light obliquely irradiated from the correction irradiating means onto the substrate surface by the imaging means, based on the principle of triangulation. Wherein the predetermined line light is a third wavelength range different from the first and second wavelength ranges of the light emitted from the extraction irradiating means. The measuring device according to claim 4, wherein the light is light.
[0036]
According to the means 12, the extraction of the measurement target and the calculation of the shift amount can be performed together by one imaging. As a result, the measurement time can be further reduced and the data can be simplified. Further, in particular, by setting the first wavelength range and the second wavelength range to a wavelength range suitable for the color of the copper foil or cream solder, the cream solder to be measured can be more clearly extracted. .
[0037]
Means 13. Any one of the means 10 to 12, wherein the predetermined light from the correction irradiating means and the light from the extracting irradiating means are simultaneously irradiated, and then the imaging means performs imaging. The measuring device according to any one of the above.
[0038]
According to the means 13, since the predetermined light from the correction irradiating means and the light from the extracting irradiating means are simultaneously radiated, the image is actually taken by the imaging means. It is definitely played.
[0039]
Means 14. For a measurement object arranged on a substrate, a measurement irradiation means capable of irradiating predetermined light,
Correction irradiation means capable of irradiating pattern light of a predetermined wavelength range different from the light of the measurement irradiation means obliquely to the substrate surface,
An imaging unit capable of imaging the measurement target irradiated with the predetermined light and the pattern light simultaneously for each of a plurality of imaging areas,
A measurement unit that performs at least one of two-dimensional measurement and three-dimensional measurement on the measurement target based on image data of the predetermined light imaged by the imaging unit;
A shift amount calculating unit that calculates a shift amount with respect to a reference height based on image data of the pattern light obtained by imaging by the imaging unit;
A measuring device comprising:
[0040]
According to the means 14, the measurement object disposed on the substrate is irradiated with predetermined light from the measurement irradiation means. Further, the pattern irradiation light having a predetermined wavelength range different from the light of the measurement irradiation means is emitted obliquely to the substrate surface from the correction irradiation means. Then, the measurement object irradiated with the predetermined light and the pattern light at the same time is imaged by the imaging means for each of the plurality of imaging areas. Then, based on the image data of the predetermined light captured by the imaging unit, the measurement unit performs at least one of two-dimensional measurement and three-dimensional measurement on the measurement target. Further, a shift amount with respect to a reference height is calculated by a shift amount calculating unit based on image data of the pattern light obtained by imaging by the imaging unit. For this reason, the amount of displacement can be measured with a relatively simple structure without complicating the structure. Then, measurement can be performed by reflecting the deviation amount. Further, in the present means, after the pattern light from the correction irradiation means and the light from the measurement irradiation means are simultaneously irradiated, the image is actually taken by the imaging means. For this reason, in the related art, the measurement and the calculation of the shift amount have to be performed after performing the imaging multiple times, whereas the measurement is performed in consideration of the shift amount calculated in the single imaging. be able to. As a result, the measurement time can be further reduced. In addition, since the wavelength ranges of the predetermined light and the light pattern are different from each other, the two can be easily distinguished from each other, and it is unlikely that the calculation and measurement of the shift amount will be hindered.
[0041]
Means 15. For a measurement object arranged on a substrate, a measurement irradiation means capable of irradiating predetermined light,
Imaging means capable of imaging the measurement target irradiated with the predetermined light for each of a plurality of imaging areas;
A measurement unit that performs at least one of two-dimensional measurement and three-dimensional measurement on the measurement target based on at least image data captured by the imaging unit;
A measuring device comprising:
Prior to the imaging and measurement in each imaging area, in a predetermined imaging area, from a correction irradiating means capable of irradiating pattern light in a predetermined wavelength range, the pattern light is irradiated obliquely to the substrate surface, A shift amount calculating unit that calculates a shift amount with respect to a reference height based on image data obtained by imaging the irradiation surface by the imaging unit;
Prior to the imaging and measurement in each of the imaging areas, the substrate is irradiated with light from an irradiation means for extraction capable of performing light irradiation in a wavelength range different from the predetermined wavelength range on the substrate. And the measurement target extraction means for extracting the measurement target area based on image data obtained by imaging by the imaging means,
A measuring apparatus, wherein the pattern light from the correction irradiating unit and the light from the extracting irradiating unit are simultaneously irradiated, and then the imaging unit performs imaging.
[0042]
According to the means 15, light irradiation is performed on the substrate by the irradiation means for extraction, and the area to be measured is determined by the measurement object extraction means based on image data obtained by imaging the irradiation surface by the imaging means. Is extracted. Therefore, imaging and measurement can be performed after extracting the measurement target more accurately. Further, in the shift amount measuring means, pattern light of a predetermined wavelength range is irradiated obliquely to the substrate surface from the correcting irradiation means, and based on image data obtained by imaging the irradiated surface by the imaging means, A shift amount with respect to the height is calculated. Therefore, the amount of displacement can be measured with a relatively simple structure without complicating the structure. Then, measurement can be performed by reflecting the deviation amount. Further, in the present means, after the pattern light from the correction irradiation means and the light from the extraction irradiation means are simultaneously irradiated, an image is actually taken by the imaging means. For this reason, in the related art, the extraction and the calculation of the shift amount have to be performed after performing the imaging multiple times, whereas the extraction of the measurement target area and the calculation of the shift amount are performed by one imaging. As a result, the measurement time can be further reduced and the data can be simplified. Further, since the wavelength ranges of the respective lights are different from each other, there is no problem in the extraction and the calculation.
[0043]
Means 16. Irradiation means for measurement capable of irradiating predetermined light to cream solder arranged on copper foil of a printed circuit board,
Imaging means capable of imaging the measurement target irradiated with the predetermined light for each of a plurality of imaging areas;
A measurement unit that performs at least one of two-dimensional measurement and three-dimensional measurement on the measurement target based on at least image data captured by the imaging unit;
A measuring device comprising:
Prior to the imaging and measurement in each imaging area, in a predetermined imaging area, from a correction irradiating means capable of irradiating pattern light in a predetermined wavelength range, the pattern light is obliquely irradiated onto the printed circuit board surface. Based on image data obtained by imaging the illuminated surface by the imaging unit, a deviation amount calculation unit that calculates a deviation amount from a reference height based on the principle of triangulation,
Prior to the imaging and measurement in each of the imaging areas, the printed circuit board is irradiated with light from extraction irradiating means capable of performing light irradiation in a wavelength range different from the predetermined wavelength range on the printed circuit board. And, the measurement target extraction means for extracting the area of the cream solder based on the image data obtained by imaging by the imaging means,
A measuring apparatus, wherein the pattern light from the correction irradiating unit and the light from the extracting irradiating unit are simultaneously irradiated, and then the imaging unit performs imaging.
[0044]
According to the means (16), light irradiation is performed on the printed circuit board by the irradiation means for extraction, and the area to be measured is extracted based on image data obtained by imaging the irradiation surface by the imaging means. Is extracted. Therefore, imaging and measurement can be performed after extracting cream solder more accurately. Further, in the shift amount measuring means, pattern light in a predetermined wavelength range is irradiated obliquely to the substrate surface from the correcting irradiation means, and based on image data obtained by imaging the irradiated surface by the imaging means, a triangular shape is obtained. The amount of deviation from the reference height is calculated based on the principle of surveying. Therefore, the amount of displacement can be measured with a relatively simple structure without complicating the structure. Then, measurement can be performed by reflecting the deviation amount. Further, in the present means, after the pattern light from the correction irradiation means and the light from the extraction irradiation means are simultaneously irradiated, an image is actually taken by the imaging means. For this reason, in the related art, the extraction and the calculation of the shift amount have to be performed after performing the imaging multiple times, whereas the extraction of the cream solder region and the calculation of the shift amount are performed by one imaging. As a result, the measurement time can be further reduced and the data can be simplified. Further, since the wavelength ranges of the respective lights are different from each other, there is no problem in the extraction and the calculation.
[0045]
Means 17. Irradiation means for measurement capable of irradiating predetermined light to cream solder arranged on copper foil of a printed circuit board,
Imaging means capable of imaging the measurement target irradiated with the predetermined light for each of a plurality of imaging areas;
A measurement unit that performs at least one of two-dimensional measurement and three-dimensional measurement on the measurement target based on at least image data captured by the imaging unit;
A measuring device comprising:
Prior to the imaging and measurement in each imaging area, in a predetermined imaging area, the pattern light is obliquely irradiated onto the printed circuit board surface from a correction irradiating unit capable of irradiating pattern light in a third wavelength range. Based on image data obtained by imaging the illuminated surface by the imaging unit, a shift amount calculating unit that calculates a shift amount with respect to a reference height based on the principle of triangulation;
Prior to the imaging and measurement in each of the imaging areas, light irradiation at a small incident angle in a first wavelength range different from the third wavelength range on the printed circuit board; and the third and first wavelengths The light from the irradiating means for extraction, which can simultaneously perform light irradiation at a large incident angle in a second wavelength range different from the range, is irradiated onto the printed circuit board and imaged by the imaging means. The measurement object extraction means for extracting the area of the cream solder based on the obtained image data,
A measuring apparatus, wherein the pattern light from the correction irradiating unit and the light from the extracting irradiating unit are simultaneously irradiated, and then the imaging unit performs imaging.
[0046]
According to the means 17, light irradiation at a small incident angle in the first wavelength range and light irradiation at a large incident angle in the second wavelength range are simultaneously performed on the printed board by the irradiation means for extraction. In the measuring object extracting means, the area of the cream solder is extracted based on image data obtained by imaging the irradiation surface by the imaging means. Normally, the copper foil on the printed circuit board and the cream solder have different colors, so that the cream solder portion can be clearly extracted by appropriately adjusting each wavelength range to those colors. Therefore, imaging and measurement can be performed after extracting cream solder more accurately. Further, in the displacement amount measuring means, pattern light is radiated from the correction irradiating means to the substrate surface obliquely, and based on image data obtained by imaging the irradiating surface with the imaging means, based on the principle of triangulation. A shift amount with respect to the reference height is calculated. Therefore, the amount of displacement can be measured with a relatively simple structure without complicating the structure. Then, measurement can be performed by reflecting the deviation amount. Further, in the present means, after the pattern light from the correction irradiation means and the light from the extraction irradiation means are simultaneously irradiated, an image is actually taken by the imaging means. Therefore, the extraction of the cream solder region and the calculation of the shift amount can be performed by one imaging, and as a result, the measurement time can be further reduced and the data can be simplified. Further, since the wavelength ranges of the respective lights are different from each other, there is no problem in the extraction and the calculation.
[0047]
Means 18. Irradiation means for measurement capable of irradiating predetermined light to cream solder arranged on copper foil of a printed circuit board,
Imaging means capable of imaging the measurement target irradiated with the predetermined light for each of a plurality of imaging areas;
A measurement unit that performs at least one of two-dimensional measurement and three-dimensional measurement on the measurement target based on at least image data captured by the imaging unit;
A measuring device comprising:
Prior to the imaging and measurement in each imaging area, in a predetermined imaging area, from a correction irradiating means capable of irradiating green or similar pattern light, irradiate the pattern light obliquely to the printed circuit board surface, Based on image data obtained by imaging the illuminated surface with the imaging unit, based on the principle of triangulation, calculating a deviation amount with respect to a reference height;
Prior to the imaging and measurement in each of the imaging areas, light irradiation at a small incident angle in a red or similar wavelength region on the printed circuit board, and light irradiation at a large incident angle in a blue or similar wavelength region on the printed circuit board. The measuring object extracting means for irradiating the printed circuit board with light from the extracting irradiating means which can be performed simultaneously, and extracting the cream solder area based on image data obtained by imaging by the imaging means. A measuring device configured to simultaneously irradiate the pattern light from the correction irradiating unit and the light from the extracting irradiating unit, and then perform imaging by the imaging unit.
[0048]
According to the means 18, the irradiation means for extraction simultaneously irradiates the printed circuit board with light at a small incident angle in a red or similar wavelength range and light irradiation at a large incident angle in a blue or similar wavelength range. Here, in the measurement object extracting means, the area of the cream solder is extracted based on the image data obtained by imaging the irradiation surface by the imaging means. Usually, on a printed circuit board, the copper foil has a red-based color, and the cream solder has a blue-based color. Therefore, red-based light is only reflected darkly from the cream solder portion, and blue-based light is only darkly reflected from the copper foil portion. As a result, the copper image portion becomes darker as a blue image, and the cream solder portion becomes darker as a red image, so that the difference between light and dark becomes large in each color image. Therefore, imaging and measurement can be performed after extracting cream solder more accurately. Further, in the displacement amount measuring means, pattern light is radiated from the correction irradiating means to the substrate surface obliquely, and based on image data obtained by imaging the irradiating surface with the imaging means, based on the principle of triangulation. A shift amount with respect to the reference height is calculated. Therefore, the amount of displacement can be measured with a relatively simple structure without complicating the structure. Then, measurement can be performed by reflecting the deviation amount. Further, in the present means, after the pattern light from the correcting irradiation means and the red and blue light from the extracting irradiation means are simultaneously irradiated, an image is actually taken by the imaging means. Therefore, the extraction of the cream solder region and the calculation of the shift amount can be performed by one imaging, and as a result, the measurement time can be further reduced and the data can be simplified. Further, since the wavelength ranges of the respective lights are different from each other, there is no problem in the extraction and the calculation.
[0049]
Means 19. 19. The measuring apparatus according to claim 14, wherein a relative height relationship between the substrate and the imaging unit is adjusted based on a calculation result of the shift amount calculation unit.
[0050]
According to the means 19, the measurement can be performed after the relative height relationship is actually adjusted, so that more accurate measurement can be secured.
[0051]
Means 20. The measuring apparatus according to any one of means 14 to 19, wherein the pattern light emitted from the correcting irradiation means is a line light.
[0052]
According to the means 20, the deviation amount from the reference height can be relatively easily grasped.
[0053]
Means 21. 21. The measuring device according to claim 1, wherein the measurement by the measuring unit is performed when the imaging area is shifted.
[0054]
According to the means 21, the measurement by the measuring means is performed when the imaging area is shifted. In other words, there is no need to shift the imaging area until the measurement is completed. Therefore, efficient measurement can be performed, and the total measurement time can be reduced.
[0055]
Means 22. 22. An inspection apparatus, comprising: the measurement device according to any one of means 1 to 21; and configured to determine acceptability of the measurement target based on a measurement result of the measurement unit.
[0056]
According to the means 22, the operation and effect corresponding to each of the above means are exhibited in the inspection for performing the quality judgment.
[0057]
BEST MODE FOR CARRYING OUT THE INVENTION
Hereinafter, an embodiment will be described with reference to the drawings.
[0058]
FIG. 1 is a schematic configuration diagram schematically showing a three-dimensional measuring device 1 as a measuring device in the present embodiment. In the present embodiment, the three-dimensional measuring apparatus 1 performs a print state inspection for inspecting a print state of cream solder (mainly constituting a measurement target) printed on (the copper foil of) the printed board K. It is embodied as a device.
[0059]
The three-dimensional measuring apparatus 1 includes a base 2, and an X-axis moving mechanism 3 and a Y-axis moving mechanism 4 are provided on the base 2. A rail 10 is provided on the Y-axis moving mechanism 4, and a printed board K as a board is mounted on the rail 10. When the X-axis moving mechanism 3 and the Y-axis moving mechanism 4 operate, the printed circuit board K moves in the X-axis direction and the Y-axis direction. These X-axis moving mechanism 3 and Y-axis moving mechanism 4 constitute XY-axis direction moving means.
[0060]
The three-dimensional measurement device 1 also includes a three-dimensional measurement irradiation unit 5 as a measurement irradiation unit, a CCD camera (color camera) 6 as an imaging unit, and a main control unit electrically connected to the CCD camera 6. 7 is provided. The three-dimensional measurement irradiating means 5 is configured to irradiate a predetermined light pattern onto the surface of the printed board K from obliquely above. The CCD camera 6 is arranged right above the printed board K, and is capable of capturing an image of the portion of the printed board K irradiated with the light pattern. The main control means 7 performs image processing based on image data captured by the CCD camera 6 by a predetermined three-dimensional measurement method, and performs three-dimensional measurement (mainly height measurement) of cream solder and cream. An inspection of the printing state of the solder is performed. That is, the main control unit 7 includes the inspection unit 8 that inspects the printing state based on the height (volume) of the cream solder (see FIG. 4). In the three-dimensional measurement according to the present embodiment, an arbitrary measurement method such as a phase shift method, a light section method, a space code method, and a focusing method is appropriately employed.
[0061]
In the present embodiment, the CCD camera 6 is attached to a Z-axis moving mechanism 9. That is, when the Z-axis moving mechanism 9 is driven, the CCD camera 6 can move up and down. Thereby, the relative height relationship between the printed board K and the CCD camera 6 can be changed.
[0062]
Further, the three-dimensional measuring apparatus 1 according to the present embodiment includes a means for extracting a region where cream solder is provided (measurement target extracting means) when performing the three-dimensional measurement (before). The means includes a solder extraction irradiation means 11. The solder extraction irradiating unit 11 irradiates the printed board K with predetermined light prior to the irradiation of the light pattern by the three-dimensional measurement irradiating unit 5. More specifically, the solder extraction irradiation unit 11 includes a pair of upper and lower ring lights 12 and 13 as shown in FIG.
[0063]
The upper ring light 12 emits light at a small incident angle, and is configured to emit red light. The lower ring light 13 emits light at a large incident angle, and is configured to emit blue light. Normally, on the printed circuit board K, a red-based copper foil is provided on the substrate K, and a blue-based cream solder is printed thereon, so that the red light is reflected only darkly from the cream solder portion. The blue light is only reflected darkly from the copper foil portion. As a result, the copper image portion becomes darker as a blue image, and the cream solder portion becomes darker as a red image, so that the difference between light and dark becomes large in each color image. Therefore, in the present embodiment, prior to the three-dimensional measurement, in order to extract the area of the cream solder to be measured, red and blue light is irradiated by both ring lights 12 and 13, and the irradiated surface is imaged by the CCD camera 6. The main control means 7 performs an operation of specifying (extracting) the arrangement area of the cream solder.
[0064]
Further, the three-dimensional measuring apparatus 1 according to the present embodiment includes a unit for correcting the warpage of the printed board K at the time of performing the three-dimensional measurement (before). The means includes a Z-axis correction irradiation means 14. Prior to the irradiation of the light pattern by the three-dimensional measurement irradiating means 5, the Z-axis correction irradiating means 14 irradiates the printed circuit board K with a predetermined pattern light together with the light irradiation by the solder extracting irradiating means 11. It irradiates line light. More specifically, the irradiating means 14 for Z-axis correction can irradiate pattern light (in this embodiment, green line light) in a wavelength range different from those of the ring lights 12 and 13.
[0065]
The irradiation of the green line light by the Z-axis correction irradiating unit 14 is performed to grasp the “height deviation amount” from the reference height due to the warpage of the printed board K. That is, as shown in FIG. 3, when the line light is irradiated by the Z-axis correction irradiation means 14 and the light is picked up by the CCD camera 6, the height of the printed board K in a certain image pickup area as shown in FIG. If the positions are different, the position of the line light imaged by the CCD camera 6 will be different in the left-right direction. In the present embodiment, the main controller 7 calculates the height deviation amount of the printed board K based on the triangulation principle based on the position of the line light. That is, the main control means 7 includes the Z-axis shift amount calculating means 15 as a shift amount measuring means for calculating the height shift amount of the printed board K (see FIG. 4).
[0066]
Next, the electrical configuration of the three-dimensional measuring apparatus 1 centered on the main control means 7 will be described.
[0067]
As shown in FIG. 4, the CCD camera 6 is electrically connected to the main control means 7. As described above, the main control unit 7 includes the inspection unit 8 and the Z-axis shift amount calculation unit 15. In addition, the main control unit 7 includes a shift amount determining unit 16 as a determining unit that determines whether the “shift amount” is appropriate based on the calculation result of the Z-axis shift amount calculating unit 15.
[0068]
The main control means 7 is connected to the irradiation control means 21. The irradiation control unit 21 is connected to the irradiation unit 5 for three-dimensional measurement, the irradiation unit 11 for extracting solder (ring lights 12 and 13), and the irradiation unit 14 for Z-axis correction, and is controlled by the main control unit 7. The irradiation of each of the irradiation means 5, 11, and 14 is switched and controlled based on the signal.
[0069]
The main control means 7 is connected to the X-axis movement control means 22 and the Y-axis movement control means 23. The X-axis movement control means 22 and the Y-axis movement control means 23 appropriately control the driving of the X-axis movement mechanism 3 and the Y-axis movement mechanism 4 in order to switch the respective imaging areas. Thus, the printed board K can be appropriately moved in the X-axis direction and the Y-axis direction.
[0070]
The main control means 7 is also connected to the Z-axis movement control means 24. The Z-axis movement control means 24 controls the driving of the Z-axis movement mechanism 9 based on an input signal from the main control means 7, in particular, the deviation amount determination means 16. Thereby, the relative height relationship between the CCD camera 6 and the printed board K is adjusted (when there is a warp or the like, it is corrected).
[0071]
Next, the operation and effect of the three-dimensional measuring apparatus 1 configured as described above will be described focusing on the control contents performed by the main control unit 7.
[0072]
First, the main control means 7 transmits both the ring lights 12 of the irradiation means 11 for solder extraction through the irradiation control means 21 in order to extract the cream solder area and measure the height deviation amount in the first imaging area. , 13 and the line light from the Z-axis correcting irradiation means 14. Then, the CCD camera 6 captures an image of the first imaging area irradiated with the irradiation light for extraction and the line light. At this time, red and blue light from both ring lights 12 and 13 and green line light from the Z-axis correction irradiating means 14 are mixed in the image data obtained by imaging. However, since the wavelength ranges of the respective lights are different from each other, even one image data can be easily distinguished. Then, a cream solder area is once extracted based on the image data.
[0073]
Next, the main control means 7 (Z-axis shift amount calculating means 15) calculates the height shift amount Za based on the green line light in the image data. For example, in FIG. 5A, it is assumed that the line light is shifted by a predetermined amount (α in the figure) from a reference height position (a position where the line light will come to the position if there is no warpage or the like). The Z-axis shift amount calculating means 15 calculates the shift amount Za in the Z-axis direction (height direction) from the reference height position based on the above-described predetermined shift amount, based on the above-described triangulation principle.
[0074]
Subsequently, the main control means 7 (shift amount determining means 16) determines whether or not the shift amount Za is within a predetermined reference range. Then, the following control is performed based on the determination result.
[0075]
(1) When the displacement amount Za is within a predetermined reference range
When the displacement amount Za is within the reference range, the main control means 7 performs three-dimensional measurement on the extracted cream solder area in the first imaging area. That is, a predetermined light pattern is emitted from the irradiation unit 5 for three-dimensional measurement via the irradiation control unit 21. Then, the light pattern irradiated by the CCD camera 6 is imaged.
[0076]
After the completion of the imaging, the main control means 7 drives the X-axis movement mechanism 3 and the Y-axis movement mechanism 4 via the X-axis movement control means 22 and the Y-axis movement control means 23, and the next imaging area (second imaging area) Area).
[0077]
Then, during the switching of the imaging area, the main control means 7 drives the Z-axis movement mechanism 9 via the Z-axis movement control means 24, moves the CCD camera 6 by the displacement amount Za, and moves the CCD camera 6 to its height. Correct (adjust) the position. As a result, in the next imaging area, the shift amount within the allowable range in the previous imaging area is corrected, and in many cases, the height positional relationship between the CCD camera 6 and the surface of the printed board K is appropriate. It becomes.
[0078]
During the switching of the imaging area, the main control means 7 (inspection means 8) performs three-dimensional measurement (height calculation and volume calculation of the cream solder) based on the extracted data and the image data in the first imaging area. ) To determine whether the printing condition of the cream solder is proper. As described above, by performing measurement (calculation) during the transition of the imaging area, efficient measurement can be performed, and overall measurement time can be reduced.
[0079]
(2) When the displacement amount Za is not within a predetermined reference range
On the other hand, when the displacement amount Za is not within the reference range, the main control unit 7 first needs to perform the correction promptly in the first imaging area because the printed board K is significantly warped. Prior to the three-dimensional measurement, the Z-axis movement mechanism 9 is driven via the Z-axis movement control means 24, and the CCD camera 6 is moved by the shift amount Za to correct (adjust) the height position. As a result, the shift amount is quickly corrected in the first imaging area, and the height positional relationship between the CCD camera 6 and the surface of the printed board K is appropriate unless there is a special situation such as abnormality of the CCD camera 6. It will be.
[0080]
After the correction, the main control means 7 again irradiates the light from both the ring lights 12 and 13 of the solder extraction irradiation means 11 via the irradiation control means 21 and the line light from the Z-axis correction irradiation means 14 again. Is irradiated. Then, the first imaging area irradiated with the irradiation light for extraction and the line light is imaged by the CCD camera 6, and the cream solder region is extracted again.
[0081]
At this point, since the height positional relationship should be proper by the correction, basically, it is not necessary to confirm the displacement amount again. The shift amount Za may be calculated based on the light. Then, when the recalculated deviation amount Za deviates from the (repeated) allowable range, an error may be determined as an occurrence of an abnormality.
[0082]
However, basically, since the height position relationship in the first imaging area should be appropriate due to the correction, the main control means 7 next permits execution of three-dimensional measurement. I do. That is, a predetermined light pattern is emitted from the irradiation unit 5 for three-dimensional measurement via the irradiation control unit 21. Then, the light pattern irradiated by the CCD camera 6 is imaged. After the completion of the imaging, the main control means 7 drives the X-axis movement mechanism 3 and the Y-axis movement mechanism 4 via the X-axis movement control means 22 and the Y-axis movement control means 23, and the next imaging area (second imaging area) Area).
[0083]
Then, when switching the imaging area, the main control means 7 switches the imaging area without driving the Z-axis moving mechanism 9 (without correcting the height position of the CCD camera 6). This is because the correction has already been completed in the first imaging area.
[0084]
During the switching of the imaging area, the main control means 7 (inspection means 8) performs three-dimensional measurement (height calculation and volume calculation of the cream solder) based on the extracted data and image data in the first imaging area again. ) To determine whether the printing condition of the cream solder is proper. As described above, by performing measurement (calculation) during the transition of the imaging area, efficient measurement can be performed, and overall measurement time can be reduced.
[0085]
In the present embodiment, the main controller 7 repeats the above operation for each imaging area. Then, when the inspection in all the imaging areas is completed, the three-dimensional measurement and the inspection are completed.
[0086]
As described in detail above, in the present embodiment, prior to the three-dimensional measurement in each imaging area, the shift amount Za in the height direction with respect to the predetermined reference height position is measured, and the shift amount Za is allowed. When it is determined that the distance is within the range, the image is taken in the imaging area while the relative height relationship between the printed board K and the CCD camera 6 is maintained. Thereafter, when shifting to the next imaging area, the Z-axis moving mechanism 9 is controlled, so that the height positional relationship is corrected by the shift amount Za.
[0087]
For example, as shown in FIG. 5A, in the inspection area (imaging area) A, it is assumed that the deviation amount Za from the reference height is α within the allowable range. In this case, in the inspection area A, imaging for three-dimensional measurement is performed without correcting the height of the CCD camera 6. Then, when moving to the next inspection area B, calculation and inspection are performed, and the height of the CCD camera 6 is corrected by the amount α. Then, the same operation is performed in the next inspection area B. When shifting to the inspection area B, the height position of the CCD camera 6 has been corrected, and in many cases, the amount of deviation from the reference height position can be small.
[0088]
For this reason, high-speed measurement is ensured as compared with a case where the relative height relationship is adjusted for each imaging area.
[0089]
If it is determined that the deviation Za is not within the allowable range, the Z-axis moving mechanism 9 is immediately controlled, so that the height positional relationship is corrected by the deviation Za. Then, imaging and measurement in the imaging area are performed.
[0090]
For example, as shown in FIG. 5B, in the inspection area A, it is assumed that the deviation amount Za from the reference height is α within the allowable range. In this case, imaging for three-dimensional measurement is performed in the inspection area A without correcting the height of the CCD camera 6 as described above. Then, when moving to the next inspection area B, calculation and inspection are performed, and the height of the CCD camera 6 is corrected by the amount α. Then, the same operation is performed in the next inspection area B. At this time, if there is a sudden height difference or the like in the inspection area B, the shift amount Za may deviate from the allowable range. In this case, in the present embodiment, the height position of the CCD camera 6 is corrected in the inspection area B.
[0091]
Therefore, even if there is a sudden height difference in a predetermined imaging area, the relative height position is corrected immediately on the spot, so that the height difference can be reflected and measured on the spot. Become. As a result, accurate measurement can be performed in a focused state for each imaging area.
[0092]
Further, as shown in FIG. 5B, when a large correction has already been made in the inspection area B, when the next inspection area (imaging area) is switched, the corrected relative height relationship is changed. It is kept for the time being. In other words, the height position is not corrected during the switching. Therefore, if no correction is required in the next inspection area, the high-speed measurement is further ensured.
[0093]
Further, in the present embodiment, a measurement target is extracted prior to imaging and measurement in each inspection area. Therefore, more accurate measurement can be performed on the measurement target.
[0094]
Moreover, since the irradiation light for extraction and the line light for calculating the shift amount Za have different wavelength ranges, even if the irradiation light for extraction and the line light are irradiated at the same time, the color of the CCD camera 6 is increased. Can be relatively easily distinguished if the difference between them can be distinguished. Therefore, the extraction of the cream solder and the calculation of the shift amount Za can be performed together by one imaging. As a result, it is possible to further reduce the measurement time and the data amount.
[0095]
In addition, in the present embodiment, the calculation and the inspection of the height of the cream solder are performed when the imaging area is shifted. That is, there is no need to shift the imaging area after the measurement is completed. Therefore, efficient measurement can be performed, and the total measurement time can be reduced.
[0096]
The present invention is not limited to the above-described embodiment, and may be implemented as follows, for example.
[0097]
(A) In the above embodiment, the present invention is embodied mainly when measuring height (three-dimensional measurement) of cream solder, but is also embodied when performing two-dimensional measurement such as area measurement of cream solder. be able to. In this case, it is also possible to use both cream solder extraction and two-dimensional measurement. In other words, the extraction work is omitted, the irradiation for calculating the shift amount and the irradiation for the measurement are performed at the same time, an image is taken, the shift amount is calculated based on the image data, and the result is reflected. It is also possible to perform measurement.
[0098]
(B) As the imaging means, a line camera may be used in addition to the CCD camera capable of imaging the area as in the above embodiment. Further, for example, a camera that can capture images in an area or a line, such as a CMOS camera, may be used, and is not necessarily limited to a CCD camera.
[0099]
(C) In the above embodiment, the cream solder region is extracted, and three-dimensional measurement is performed thereon. However, such an extracting unit may be omitted.
[0100]
(D) The light source constituting each of the irradiation means 5, 11, 14 may be a halogen lamp or an LED. Further, an irradiation unit that can irradiate a laser beam may be employed.
[0101]
(E) In the above embodiment, the printed circuit board K is moved in the XY-axis direction, and the CCD camera 6 is moved in the Z-axis direction. The printed board K may be movable up and down, or the CCD camera 6 may be movable in the XY axis directions.
[0102]
(F) In the above embodiment, the present invention is embodied in an inspection device for inspecting the printing state of cream solder. On the other hand, the above-described configuration can be embodied in another apparatus related to the manufacture of a substrate or the like. For example, the present invention may be embodied in an inspection device for inspecting the mounting state of electronic components mounted on a substrate and the presence or absence of a flaw.
[0103]
(G) In the above embodiment, the green line light is emitted from the Z-axis correction irradiating means 14. However, if the wavelength range is different from the irradiation light for extraction, the green line light is necessarily emitted. However, the present invention is not limited to this, and may be configured to be able to irradiate infrared rays or ultraviolet rays, for example. Further, if imaging is performed separately from irradiation light for extraction, light in the same wavelength range as the light for extraction may be irradiated.
[0104]
(H) In the above embodiment, the line light is emitted from the Z-axis correction irradiating means 14, but the line light may be one or plural. When there are a plurality of line lights, they may be parallel or may have a predetermined angle (to cross each other) (for example, they may be orthogonal). Further, the width of each line light may be a width exceeding the imaging area, or may be sufficiently shorter, for example, a point or a point. However, if the width covers the inspection area, a portion that can stably measure the height deviation amount, such as a copper foil portion, can be more reliably included.
[Brief description of the drawings]
FIG. 1 is a schematic perspective view schematically showing a measuring device according to an embodiment.
FIG. 2 is a schematic view showing an arrangement of a solder extraction irradiation unit and a Z-axis correction irradiation unit;
FIG. 3 is a schematic diagram for explaining a concept of calculating a shift amount.
FIG. 4 is a block diagram for explaining an electrical configuration of a main control unit and the like.
FIGS. 5A and 5B are diagrams schematically illustrating image data and the like for each inspection area for explaining the operation and effect of the embodiment; FIG.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 ... Three-dimensional measuring device, 3 ... X-axis moving mechanism as XY-axis direction moving means, 4 ... Y-axis moving mechanism as XY-axis direction moving means, 5 ... Irradiating means for three-dimensional measurement, 6 ... as imaging means CCD camera, 7: Main control means, 8: Inspection means, 9: Z-axis moving mechanism, 11: Irradiation means for solder extraction, 12, 13: Ring light, 14: Irradiation means for Z-axis correction, 15: Z-axis shift amount Calculation means, 16: shift amount determination means, K: printed circuit board.

Claims (22)

基板上に配設された計測対象に対し、所定の光を照射可能な計測用照射手段と、
前記所定の光の照射された計測対象を、複数の各撮像エリア毎に撮像可能な撮像手段と、
少なくとも前記撮像手段にて撮像された画像データに基づき、前記計測対象に関し二次元計測又は三次元計測を行う計測手段と
を備えた計測装置であって、
前記基板と前記撮像手段との相対高さ関係を調整可能な移動手段と、
各撮像エリアでの前記撮像及び計測に先だって、所定の撮像エリアにおいて、予め定められた基準高さ位置に対する高さ方向のずれ量を測定するずれ量測定手段と、
前記ずれ量測定手段により測定された高さ方向のずれ量が予め定められた許容範囲内にあるか否かを判定する判定手段とを設け、
前記判定手段にて前記ずれ量が予め定められた許容範囲内にあると判定された場合には、前記基板と前記撮像手段との相対高さ関係を保持したまま、当該所定の撮像エリアでの前記計測用の撮像を行い、次の撮像エリアに移行するときに、前記移動手段を制御して前記ずれ量分だけ前記相対高さ関係を補正し、
前記判定手段にて前記ずれ量が前記許容範囲内にないと判定された場合には、前記移動手段を制御して前記ずれ量分だけ前記相対高さ関係を補正した上で、当該所定の撮像エリアでの前記計測用の撮像を行うよう構成したことを特徴とする計測装置。
For a measurement object arranged on a substrate, a measurement irradiation means capable of irradiating predetermined light,
Imaging means capable of imaging the measurement target irradiated with the predetermined light for each of a plurality of imaging areas;
A measurement device comprising: a measurement unit configured to perform two-dimensional measurement or three-dimensional measurement on the measurement target based on at least image data captured by the imaging unit,
Moving means capable of adjusting the relative height relationship between the substrate and the imaging means,
Prior to the imaging and measurement in each imaging area, in a predetermined imaging area, a shift amount measuring unit that measures a shift amount in a height direction with respect to a predetermined reference height position,
Determining means for determining whether the deviation amount in the height direction measured by the deviation amount measuring means is within a predetermined allowable range,
If the determination unit determines that the deviation amount is within a predetermined allowable range, the relative height relationship between the substrate and the imaging unit is maintained, and the predetermined height in the predetermined imaging area is maintained. Perform the imaging for measurement, when moving to the next imaging area, control the moving means to correct the relative height relationship by the amount of deviation,
When the determining unit determines that the deviation amount is not within the allowable range, the control unit controls the moving unit to correct the relative height relationship by the deviation amount, and then performs the predetermined imaging. A measuring device configured to perform the measurement imaging in an area.
基板上に配設された計測対象に対し、所定の光を照射可能な計測用照射手段と、
前記所定の光の照射された計測対象を、複数の各撮像エリア毎に撮像可能な撮像手段と、
少なくとも前記撮像手段にて撮像された画像データに基づき、前記計測対象に関し二次元計測又は三次元計測を行う計測手段と
を備えた計測装置であって、
前記基板と前記撮像手段との相対高さ関係を調整可能なZ軸方向移動手段と、
撮像エリアを切り換えるべく前記基板と前記撮像手段との相対位置関係を調整可能なXY軸方向移動手段と、
各撮像エリアでの前記撮像及び計測に先だって、各撮像エリアにおいて、予め定められた基準高さ位置に対する高さ方向のずれ量を測定するずれ量測定手段と、
前記ずれ量測定手段により測定された高さ方向のずれ量が予め定められた許容範囲内にあるか否かを判定する判定手段と、
第1の撮像エリアにおいて、前記判定手段にて前記ずれ量が予め定められた許容範囲内にあると判定された場合には、前記基板と前記撮像手段との相対高さ関係を保持したまま、当該第1の撮像エリアでの前記計測用の撮像を許容し、前記XY軸方向移動手段を制御して第2の撮像エリアに撮像エリアを切り換えるときに、前記Z軸方向移動手段を制御して前記ずれ量分だけ前記相対高さ関係を補正し、
第1の撮像エリアにおいて、前記判定手段にて前記ずれ量が前記許容範囲内にないと判定された場合には、前記Z軸方向移動手段を制御して前記ずれ量分だけ前記相対高さ関係を補正した上で、当該第1の撮像エリアでの前記計測用の撮像を許容する制御手段とを設けたことを特徴とする計測装置。
For a measurement object arranged on a substrate, a measurement irradiation means capable of irradiating predetermined light,
Imaging means capable of imaging the measurement target irradiated with the predetermined light for each of a plurality of imaging areas;
A measurement device comprising: a measurement unit configured to perform two-dimensional measurement or three-dimensional measurement on the measurement target based on at least image data captured by the imaging unit,
Z-axis direction moving means capable of adjusting a relative height relationship between the substrate and the imaging means,
XY-axis direction moving means capable of adjusting a relative positional relationship between the substrate and the imaging means to switch an imaging area;
Prior to the imaging and measurement in each imaging area, in each imaging area, a deviation amount measuring unit that measures a deviation amount in a height direction with respect to a predetermined reference height position,
Determining means for determining whether the amount of displacement in the height direction measured by the displacement amount measuring means is within a predetermined allowable range,
In the first imaging area, when it is determined by the determination unit that the deviation amount is within a predetermined allowable range, while maintaining the relative height relationship between the substrate and the imaging unit, When the imaging for measurement in the first imaging area is allowed and the XY-axis direction moving means is controlled to switch the imaging area to the second imaging area, the Z-axis direction moving means is controlled. Correcting the relative height relationship by the amount of deviation,
In the first imaging area, when the determination unit determines that the deviation amount is not within the allowable range, the Z-axis direction moving unit is controlled to control the relative height relationship by the deviation amount. And a control means for allowing the measurement image pickup in the first image pickup area after correcting the above.
前記第1の撮像エリアにおいて、前記判定手段にて前記ずれ量が前記許容範囲内にないと判定された場合には、前記Z軸方向移動手段を制御して前記ずれ量分だけ前記相対高さ関係を補正した上で、当該第1の撮像エリアでの前記計測用の撮像を許容し、前記XY軸方向移動手段を制御して第2の撮像エリアに撮像エリアを切り換えるときには、前記相対高さ関係を保持するものであることを特徴とする請求項2に記載の計測装置。In the first imaging area, when the determination unit determines that the deviation amount is not within the allowable range, the Z-axis direction moving unit is controlled to control the relative height by the deviation amount. After correcting the relationship, when the imaging for measurement in the first imaging area is allowed and the imaging area is switched to the second imaging area by controlling the XY-axis direction moving means, the relative height 3. The measuring device according to claim 2, wherein the relationship is maintained. 前記各撮像エリアでの前記撮像及び計測に先だって、計測対象を抽出する計測対象抽出手段を設けたことを特徴とする請求項1乃至3のいずれかに記載の計測装置。The measuring apparatus according to any one of claims 1 to 3, further comprising: a measurement target extraction unit configured to extract a measurement target prior to the imaging and measurement in each of the imaging areas. 前記基板はプリント基板であり、前記計測対象はプリント基板の銅箔上に配設されたクリームハンダであり、前記計測対象抽出手段は、前記プリント基板上に青色又はそれに準じる波長域の光照射を行うことのできる抽出用照射手段からの光を、前記プリント基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記クリームハンダの領域を抽出するものであることを特徴とする請求項4に記載の計測装置。The substrate is a printed circuit board, the measurement object is cream solder disposed on a copper foil of the printed circuit board, and the measurement object extracting unit emits light on the printed circuit board in blue or a wavelength range equivalent thereto. Light from the irradiating means for extraction which can be performed is irradiated on the printed circuit board, and the area of the cream solder is extracted based on image data obtained by imaging by the imaging means. The measuring device according to claim 4. 前記基板はプリント基板であり、前記計測対象はプリント基板の銅箔上に配設されたクリームハンダであり、前記計測対象抽出手段は、前記プリント基板上に赤色又はそれに準じる波長域の小入射角での光照射と、青色又はそれに準じる波長域の大入射角での光照射とを同時に行うことのできる抽出用照射手段からの光を、前記プリント基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記クリームハンダの領域を抽出するものであることを特徴とする請求項4に記載の計測装置。The substrate is a printed circuit board, the object to be measured is cream solder provided on a copper foil of the printed circuit board, and the object to be measured is a small incident angle in a red or similar wavelength range on the printed circuit board. Irradiating light on the printed circuit board with light from the irradiating means for extraction, which can simultaneously perform light irradiation at the same time and light irradiation at a large incident angle in a blue wavelength range or a similar wavelength range, and imaged by the imaging means. 5. The measuring device according to claim 4, wherein the region of the cream solder is extracted based on the image data obtained by performing the measurement. 前記ずれ量測定手段は、
補正用照射手段から前記基板面に対し斜めに照射された所定の光を、前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するものであることを特徴とする請求項1乃至6のいずれかに記載の計測装置。
The displacement amount measuring means includes:
Based on image data obtained by imaging the predetermined light obliquely irradiated from the correcting irradiation means onto the substrate surface by the imaging means, a shift amount with respect to a reference height is calculated based on the principle of triangulation. The measuring device according to claim 1, wherein the measurement is performed.
前記補正用照射手段から照射される所定の光は、ライン光であることを特徴とする請求項7に記載の計測装置。The measuring device according to claim 7, wherein the predetermined light emitted from the correction irradiating means is line light. 前記ずれ量測定手段は、
補正用照射手段から前記基板面に対し斜めに照射された所定のライン光を、前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するものであって、前記所定のライン光は、前記計測対象抽出手段により計測対象が抽出される際に照射される光の波長域とは異なる波長域の光であることを特徴とする請求項4乃至6のいずれかに記載の計測装置。
The displacement amount measuring means includes:
Based on image data obtained by imaging the predetermined line light obliquely irradiated from the correcting irradiation means onto the substrate surface by the imaging means, the amount of deviation from the reference height is determined based on the principle of triangulation. The method according to claim 1, wherein the predetermined line light is light in a wavelength range different from a wavelength range of light emitted when the measurement target is extracted by the measurement target extraction unit. Item 7. The measuring device according to any one of Items 4 to 6.
前記ずれ量測定手段は、
補正用照射手段から前記基板面に対し斜めに照射された所定のライン光を、前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するものであって、前記所定のライン光は、前記抽出用照射手段からの照射光とは異なる、緑色又はそれに準じる波長域の光であることを特徴とする請求項5又は6に記載の計測装置。
The displacement amount measuring means includes:
Based on image data obtained by imaging the predetermined line light obliquely irradiated from the correcting irradiation means onto the substrate surface by the imaging means, the amount of deviation from the reference height is determined based on the principle of triangulation. 7. The arithmetic unit according to claim 5, wherein the predetermined line light is light in a green color range or a wavelength range similar thereto, which is different from irradiation light from the extraction irradiation unit. 8. Measuring device.
前記基板はプリント基板であり、前記計測対象はプリント基板の銅箔上に配設されたクリームハンダであり、前記計測対象抽出手段は、前記プリント基板上に所定の波長域の光照射を行うことのできる抽出用照射手段からの光を、前記プリント基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記クリームハンダの領域を抽出するものであって、
さらに、前記ずれ量測定手段は、補正用照射手段から前記基板面に対し斜めに照射された所定のライン光を、前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するものであって、前記所定のライン光は、前記抽出用照射手段より照射される光の波長域とは異なる波長域の光であることを特徴とする請求項4に記載の計測装置。
The substrate is a printed circuit board, the measurement object is cream solder provided on a copper foil of the printed circuit board, and the measurement object extracting unit irradiates the printed circuit board with light in a predetermined wavelength range. Irradiating the printed circuit board with light from the irradiating means for extraction capable of extracting the area of the cream solder based on image data obtained by imaging by the imaging means,
Further, the displacement amount measuring means is based on image data obtained by imaging the predetermined line light obliquely irradiated from the correction irradiating means onto the substrate surface by the imaging means, based on the principle of triangulation. Calculating the shift amount with respect to the reference height, wherein the predetermined line light is light in a wavelength range different from the wavelength range of the light irradiated from the extraction irradiation means. The measuring device according to claim 4.
前記基板はプリント基板であり、前記計測対象はプリント基板の銅箔上に配設されたクリームハンダであり、前記計測対象抽出手段は、前記プリント基板上に第1の波長域の小入射角での光照射と、該第1の波長域とは異なる第2の波長域の大入射角での光照射とを同時に行うことのできる抽出用照射手段からの光を、前記プリント基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記クリームハンダの領域を抽出するものであって、
さらに、前記ずれ量測定手段は、補正用照射手段から前記基板面に対し斜めに照射された所定のライン光を、前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するものであって、前記所定のライン光は、前記抽出用照射手段より照射される光の第1、第2の波長域とは異なる第3の波長域の光であることを特徴とする請求項4に記載の計測装置。
The substrate is a printed circuit board, the object to be measured is cream solder provided on a copper foil of the printed circuit board, and the object to be measured is provided on the printed circuit board at a small incident angle in a first wavelength range. Irradiating the printed circuit board with light from extraction irradiating means capable of simultaneously performing light irradiation and light irradiation at a large incident angle in a second wavelength range different from the first wavelength range. Extracting the area of the cream solder based on image data obtained by imaging by the imaging means,
Further, the displacement amount measuring means is based on image data obtained by imaging the predetermined line light obliquely irradiated from the correction irradiating means onto the substrate surface by the imaging means, based on the principle of triangulation. Wherein the predetermined line light is a third wavelength range different from the first and second wavelength ranges of the light emitted from the extraction irradiating means. The measuring device according to claim 4, wherein the light is light.
前記補正用照射手段からの所定の光と、前記抽出用照射手段からの光とを同時に照射した上で、前記撮像手段にて撮像を行うようにしたことを特徴とする請求項10乃至12のいずれかに記載の計測装置。13. The image pickup device according to claim 10, wherein the predetermined light from the correction irradiation unit and the light from the extraction irradiation unit are simultaneously irradiated, and then the imaging unit performs imaging. The measuring device according to any one of the above. 基板上に配設された計測対象に対し、所定の光を照射可能な計測用照射手段と、
前記計測用照射手段の光とは異なる所定の波長域のパターン光を前記基板面に対し斜めに照射可能な補正用照射手段と、
前記所定の光及びパターン光が同時に照射された計測対象を、複数の各撮像エリア毎に撮像可能な撮像手段と、
前記撮像手段にて撮像された前記所定の光の画像データに基づき、前記計測対象に関し二次元計測及び三次元計測のうち少なくとも一方を行う計測手段と、
前記撮像手段にて撮像して得られた前記パターン光の画像データに基づき、基準高さに対するずれ量を演算するずれ量演算手段と
を備えたことを特徴とする計測装置。
For a measurement object arranged on a substrate, a measurement irradiation means capable of irradiating predetermined light,
Correction irradiation means capable of irradiating pattern light of a predetermined wavelength range different from the light of the measurement irradiation means obliquely to the substrate surface,
An imaging unit capable of imaging the measurement target irradiated with the predetermined light and the pattern light simultaneously for each of a plurality of imaging areas,
A measurement unit that performs at least one of two-dimensional measurement and three-dimensional measurement on the measurement target based on image data of the predetermined light imaged by the imaging unit;
A measuring apparatus comprising: a shift amount calculating unit that calculates a shift amount with respect to a reference height based on image data of the pattern light obtained by imaging by the imaging unit.
基板上に配設された計測対象に対し、所定の光を照射可能な計測用照射手段と、
前記所定の光の照射された計測対象を、複数の各撮像エリア毎に撮像可能な撮像手段と、
少なくとも前記撮像手段にて撮像された画像データに基づき、前記計測対象に関し二次元計測及び三次元計測のうち少なくとも一方を行う計測手段と
を備えた計測装置であって、
各撮像エリアでの前記撮像及び計測に先だって、所定の撮像エリアにおいて、所定の波長域のパターン光を照射可能な補正用照射手段から、当該パターン光を前記基板面に対し斜めに照射して、その照射面を前記撮像手段にて撮像して得られた画像データに基づき、基準高さに対するずれ量を演算するずれ量演算手段と、
前記各撮像エリアでの前記撮像及び計測に先だって、前記基板上に前記所定の波長域とは異なる波長域の光照射を行うことのできる抽出用照射手段からの光を、前記基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記計測対象の領域を抽出する前記計測対象抽出手段とを設け、
前記補正用照射手段からのパターン光と、前記抽出用照射手段からの光とを同時に照射した上で、前記撮像手段にて撮像を行うようにしたことを特徴とする計測装置。
For a measurement object arranged on a substrate, a measurement irradiation means capable of irradiating predetermined light,
Imaging means capable of imaging the measurement target irradiated with the predetermined light for each of a plurality of imaging areas;
A measurement apparatus comprising: a measurement unit that performs at least one of two-dimensional measurement and three-dimensional measurement on the measurement target based on at least image data captured by the imaging unit.
Prior to the imaging and measurement in each imaging area, in a predetermined imaging area, from a correction irradiating means capable of irradiating pattern light in a predetermined wavelength range, the pattern light is irradiated obliquely to the substrate surface, A shift amount calculating unit that calculates a shift amount with respect to a reference height based on image data obtained by imaging the irradiation surface by the imaging unit;
Prior to the imaging and measurement in each of the imaging areas, the substrate is irradiated with light from an irradiation means for extraction capable of performing light irradiation in a wavelength range different from the predetermined wavelength range on the substrate. And the measurement target extraction means for extracting the measurement target area based on image data obtained by imaging by the imaging means,
A measuring apparatus, wherein the pattern light from the correction irradiating unit and the light from the extracting irradiating unit are simultaneously irradiated, and then the imaging unit performs imaging.
プリント基板の銅箔上に配設されたクリームハンダに対し、所定の光を照射可能な計測用照射手段と、
前記所定の光の照射された計測対象を、複数の各撮像エリア毎に撮像可能な撮像手段と、
少なくとも前記撮像手段にて撮像された画像データに基づき、前記計測対象に関し二次元計測及び三次元計測のうち少なくとも一方を行う計測手段と
を備えた計測装置であって、
各撮像エリアでの前記撮像及び計測に先だって、所定の撮像エリアにおいて、所定の波長域のパターン光を照射可能な補正用照射手段から、当該パターン光を前記プリント基板面に対し斜めに照射して、その照射面を前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するずれ量演算手段と、
前記各撮像エリアでの前記撮像及び計測に先だって、前記プリント基板上に前記所定の波長域とは異なる波長域の光照射を行うことのできる抽出用照射手段からの光を、前記プリント基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記クリームハンダの領域を抽出する前記計測対象抽出手段とを設け、
前記補正用照射手段からのパターン光と、前記抽出用照射手段からの光とを同時に照射した上で、前記撮像手段にて撮像を行うようにしたことを特徴とする計測装置。
Irradiation means for measurement capable of irradiating predetermined light to cream solder arranged on copper foil of a printed circuit board,
Imaging means capable of imaging the measurement target irradiated with the predetermined light for each of a plurality of imaging areas;
A measurement apparatus comprising: a measurement unit that performs at least one of two-dimensional measurement and three-dimensional measurement on the measurement target based on at least image data captured by the imaging unit.
Prior to the imaging and measurement in each imaging area, in a predetermined imaging area, from a correction irradiating means capable of irradiating pattern light in a predetermined wavelength range, the pattern light is obliquely irradiated onto the printed circuit board surface. Based on image data obtained by imaging the illuminated surface by the imaging unit, a deviation amount calculation unit that calculates a deviation amount from a reference height based on the principle of triangulation,
Prior to the imaging and measurement in each of the imaging areas, the printed circuit board is irradiated with light from extraction irradiating means capable of performing light irradiation in a wavelength range different from the predetermined wavelength range on the printed circuit board. And, the measurement target extraction means for extracting the area of the cream solder based on the image data obtained by imaging by the imaging means,
A measuring apparatus, wherein the pattern light from the correction irradiating unit and the light from the extracting irradiating unit are simultaneously irradiated, and then the imaging unit performs imaging.
プリント基板の銅箔上に配設されたクリームハンダに対し、所定の光を照射可能な計測用照射手段と、
前記所定の光の照射された計測対象を、複数の各撮像エリア毎に撮像可能な撮像手段と、
少なくとも前記撮像手段にて撮像された画像データに基づき、前記計測対象に関し二次元計測及び三次元計測のうち少なくとも一方を行う計測手段と
を備えた計測装置であって、
各撮像エリアでの前記撮像及び計測に先だって、所定の撮像エリアにおいて、第3の波長域のパターン光を照射可能な補正用照射手段から、当該パターン光を前記プリント基板面に対し斜めに照射して、その照射面を前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するずれ量演算手段と、
前記各撮像エリアでの前記撮像及び計測に先だって、前記プリント基板上に前記第3の波長域とは異なる第1の波長域の小入射角での光照射と、前記第3及び第1の波長域とは異なる第2の波長域の大入射角での光照射とを同時に行うことのできる抽出用照射手段からの光を、前記プリント基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記クリームハンダの領域を抽出する前記計測対象抽出手段とを設け、
前記補正用照射手段からのパターン光と、前記抽出用照射手段からの光とを同時に照射した上で、前記撮像手段にて撮像を行うようにしたことを特徴とする計測装置。
Irradiation means for measurement capable of irradiating predetermined light to cream solder arranged on copper foil of a printed circuit board,
Imaging means capable of imaging the measurement target irradiated with the predetermined light for each of a plurality of imaging areas;
A measurement apparatus comprising: a measurement unit that performs at least one of two-dimensional measurement and three-dimensional measurement on the measurement target based on at least image data captured by the imaging unit.
Prior to the imaging and measurement in each imaging area, in a predetermined imaging area, the pattern light is obliquely irradiated onto the printed circuit board surface from a correction irradiating unit capable of irradiating pattern light in a third wavelength range. Based on image data obtained by imaging the illuminated surface by the imaging unit, a shift amount calculating unit that calculates a shift amount with respect to a reference height based on the principle of triangulation;
Prior to the imaging and measurement in each of the imaging areas, light irradiation at a small incident angle in a first wavelength range different from the third wavelength range on the printed circuit board; and the third and first wavelengths The light from the irradiating means for extraction, which can simultaneously perform light irradiation at a large incident angle in a second wavelength range different from the range, is irradiated onto the printed circuit board and imaged by the imaging means. The measurement object extraction means for extracting the area of the cream solder based on the obtained image data,
A measuring apparatus, wherein the pattern light from the correction irradiating unit and the light from the extracting irradiating unit are simultaneously irradiated, and then the imaging unit performs imaging.
プリント基板の銅箔上に配設されたクリームハンダに対し、所定の光を照射可能な計測用照射手段と、
前記所定の光の照射された計測対象を、複数の各撮像エリア毎に撮像可能な撮像手段と、
少なくとも前記撮像手段にて撮像された画像データに基づき、前記計測対象に関し二次元計測及び三次元計測のうち少なくとも一方を行う計測手段と
を備えた計測装置であって、
各撮像エリアでの前記撮像及び計測に先だって、所定の撮像エリアにおいて、緑色又はそれに準じるパターン光を照射可能な補正用照射手段から、当該パターン光を前記プリント基板面に対し斜めに照射して、その照射面を前記撮像手段にて撮像して得られた画像データに基づき、三角測量の原理にて基準高さに対するずれ量を演算するずれ量演算手段と、
前記各撮像エリアでの前記撮像及び計測に先だって、前記プリント基板上に赤色又はそれに準じる波長域の小入射角での光照射と、青色又はそれに準じる波長域の大入射角での光照射とを同時に行うことのできる抽出用照射手段からの光を、前記プリント基板に照射して、前記撮像手段にて撮像して得られた画像データに基づき前記クリームハンダの領域を抽出する前記計測対象抽出手段とを設け、前記補正用照射手段からのパターン光と、前記抽出用照射手段からの光とを同時に照射した上で、前記撮像手段にて撮像を行うようにしたことを特徴とする計測装置。
Irradiation means for measurement capable of irradiating predetermined light to cream solder arranged on copper foil of a printed circuit board,
Imaging means capable of imaging the measurement target irradiated with the predetermined light for each of a plurality of imaging areas;
A measurement apparatus comprising: a measurement unit that performs at least one of two-dimensional measurement and three-dimensional measurement on the measurement target based on at least image data captured by the imaging unit.
Prior to the imaging and measurement in each imaging area, in a predetermined imaging area, from a correction irradiating means capable of irradiating green or similar pattern light, irradiate the pattern light obliquely to the printed circuit board surface, Based on image data obtained by imaging the illuminated surface with the imaging unit, based on the principle of triangulation, calculating a deviation amount with respect to a reference height;
Prior to the imaging and measurement in each of the imaging areas, light irradiation at a small incident angle in a red or similar wavelength region on the printed circuit board, and light irradiation at a large incident angle in a blue or similar wavelength region on the printed circuit board. The measuring object extracting means for irradiating the printed circuit board with light from the extracting irradiating means which can be performed simultaneously, and extracting the cream solder area based on image data obtained by imaging by the imaging means. A measuring device configured to simultaneously irradiate the pattern light from the correction irradiating unit and the light from the extracting irradiating unit, and then perform imaging by the imaging unit.
前記ずれ量演算手段の演算結果に基づいて、前記基板と前記撮像手段との相対高さ関係を調整するよう構成したことを特徴とする請求項14乃至18のいずれかに記載の計測装置。19. The measuring apparatus according to claim 14, wherein a relative height relationship between the substrate and the imaging unit is adjusted based on a calculation result of the shift amount calculating unit. 前記補正用照射手段から照射されるパターン光は、ライン光であることを特徴とする請求項14乃至19のいずれかに記載の計測装置。20. The measuring apparatus according to claim 14, wherein the pattern light emitted from the correction irradiating means is line light. 前記計測手段による計測が、撮像エリアの移行の際に行われるよう構成したことを特徴とする請求項1乃至20のいずれかに記載の計測装置。21. The measurement apparatus according to claim 1, wherein the measurement by the measurement unit is performed when the imaging area is shifted. 請求項1乃至21のいずれかに記載の計測装置を具備し、前記計測手段の計測結果に基づき、前記計測対象に関する良否判定を行うよう構成したことを特徴とする検査装置。An inspection apparatus comprising the measurement apparatus according to any one of claims 1 to 21, wherein the inspection apparatus is configured to perform a pass / fail determination on the measurement target based on a measurement result of the measurement means.
JP2002363771A 2002-12-16 2002-12-16 Measuring device and inspection device Expired - Fee Related JP3872007B2 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
JP2002363771A JP3872007B2 (en) 2002-12-16 2002-12-16 Measuring device and inspection device
TW92134122A TWI228023B (en) 2002-12-16 2003-12-04 Measure device
CN 200310118256 CN1261737C (en) 2002-12-16 2003-12-08 Measuring devices

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002363771A JP3872007B2 (en) 2002-12-16 2002-12-16 Measuring device and inspection device

Publications (2)

Publication Number Publication Date
JP2004198129A true JP2004198129A (en) 2004-07-15
JP3872007B2 JP3872007B2 (en) 2007-01-24

Family

ID=32761829

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002363771A Expired - Fee Related JP3872007B2 (en) 2002-12-16 2002-12-16 Measuring device and inspection device

Country Status (3)

Country Link
JP (1) JP3872007B2 (en)
CN (1) CN1261737C (en)
TW (1) TWI228023B (en)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006047290A (en) * 2004-06-30 2006-02-16 Omron Corp Image generation method for board inspection, board inspecting device and illumination device for board inspection
JP2007024510A (en) * 2005-07-12 2007-02-01 Ckd Corp Inspection device of substrate
KR100734431B1 (en) 2006-01-26 2007-07-03 주식회사 고영테크놀러지 Method for measuring three-dimension shape
JP2008275577A (en) * 2007-04-27 2008-11-13 King Yuan Electronics Co Ltd Apparatus and method for monitoring overlapping
JP2009253038A (en) * 2008-04-07 2009-10-29 Fuji Mach Mfg Co Ltd Substrate height measuring system, electronic component mounting apparatus and substrate height measurement method
KR100933715B1 (en) 2006-05-09 2009-12-24 주식회사 아이너스기술 System and method for modeling precision analysis of reverse engineering execution using 3D scan data
US7884949B2 (en) 2003-02-06 2011-02-08 Koh Young Technology Inc. Three-dimensional image measuring apparatus
CN102179726A (en) * 2011-03-24 2011-09-14 哈尔滨理工大学 Instrument and method for measuring secondary clamping deviation during numerical control machining based on image technology
US8644590B2 (en) 2009-05-13 2014-02-04 Koh Young Technology Inc. Method of measuring measurement target
CN103878269A (en) * 2012-12-20 2014-06-25 深圳市威美实业有限公司 Punching device based on visual positioning system
CN104359407A (en) * 2014-10-31 2015-02-18 秦皇岛丰泰自动化设备制造有限公司 Part height automatic detection device
KR20190129678A (en) * 2018-05-11 2019-11-20 베이징 쿠앙쉬 테크놀로지 씨오., 엘티디. Method, apparatus, and system for determining a position of an item
CN113508651A (en) * 2019-03-05 2021-10-15 株式会社富士 Correction amount calculation device, component mounting machine, and correction amount calculation method
DE112020002626T5 (en) 2019-05-29 2022-02-17 Ckd Corporation Three-dimensional measuring device and three-dimensional measuring method
CN117147570A (en) * 2023-10-30 2023-12-01 深圳硬之城信息技术有限公司 Manufacturing control method, device, equipment and storage medium based on machine vision

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101398291B (en) * 2007-09-25 2010-12-01 宝山钢铁股份有限公司 Band steel tracking imaging vision detection method
TWI407075B (en) 2010-03-16 2013-09-01 Test Research Inc Measuring system for a 3d profile of object
CN102200431B (en) * 2010-03-26 2013-10-02 德律科技股份有限公司 System for measuring stereo object
JP2011232279A (en) * 2010-04-30 2011-11-17 Sony Corp Tilt inspection device and tilt inspection method
CN102095377A (en) * 2010-11-04 2011-06-15 深圳市华星光电技术有限公司 Line width measuring device
CN103299728B (en) * 2010-12-29 2016-02-17 株式会社高永科技 Substrate inspecting method
KR101306289B1 (en) 2011-09-15 2013-09-09 (주) 인텍플러스 Method of inspecting plat panel
JP5421409B2 (en) * 2012-03-02 2014-02-19 Wit株式会社 Appearance inspection apparatus and appearance inspection method
CN103575234B (en) * 2012-07-20 2016-08-24 德律科技股份有限公司 3-dimensional image measurement apparatus
KR20140087715A (en) * 2012-12-31 2014-07-09 동우 화인켐 주식회사 Apparatus for in-line measurement
DE102013001458A1 (en) 2013-01-23 2014-07-24 Jenoptik Optical Systems Gmbh System for determining the position of a test object and associated method
JP5820424B2 (en) * 2013-04-16 2015-11-24 Ckd株式会社 Solder printing inspection device
CN103615979B (en) * 2013-12-05 2018-04-03 天津芯硕精密机械有限公司 Scaling method and device applied to different-thickness substrate in laser imaging system
TWI504886B (en) * 2013-12-26 2015-10-21 Machvision Inc Inspection method of crack defects and heterochromatic of printed circuit board and inspection apparatus of the same
CN105043272A (en) * 2015-08-21 2015-11-11 天津市耀辉光电技术有限公司 Stepped surface height difference measurement device
CN105115462A (en) * 2015-09-29 2015-12-02 爱佩仪中测(成都)精密仪器有限公司 Three-coordinate measurement apparatus convenient for correcting obtained data
JP2017083234A (en) * 2015-10-26 2017-05-18 オムロン株式会社 Three-dimensional shape measurement device, three-dimensional shape measurement system, program, computer-readable recording medium, and three-dimensional shape measurement method
CN106017322A (en) * 2016-06-20 2016-10-12 无锡兴彦影像科技有限公司 Color three-dimensional imaging device used for circuit board solder paste or patch detection and method
CN106524942A (en) * 2016-12-24 2017-03-22 大连日佳电子有限公司 Soldering-tin three-dimension surface scanning device
CN109520441A (en) * 2019-01-10 2019-03-26 英特维科技(深圳)有限公司 Contour outline measuring set and its contour measuring method based on line laser
JP7157112B2 (en) * 2020-10-07 2022-10-19 Ckd株式会社 Solder print inspection device

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7884949B2 (en) 2003-02-06 2011-02-08 Koh Young Technology Inc. Three-dimensional image measuring apparatus
JP2006047290A (en) * 2004-06-30 2006-02-16 Omron Corp Image generation method for board inspection, board inspecting device and illumination device for board inspection
JP2007024510A (en) * 2005-07-12 2007-02-01 Ckd Corp Inspection device of substrate
JP4684033B2 (en) * 2005-07-12 2011-05-18 シーケーディ株式会社 Board inspection equipment
KR100734431B1 (en) 2006-01-26 2007-07-03 주식회사 고영테크놀러지 Method for measuring three-dimension shape
KR100933715B1 (en) 2006-05-09 2009-12-24 주식회사 아이너스기술 System and method for modeling precision analysis of reverse engineering execution using 3D scan data
JP2008275577A (en) * 2007-04-27 2008-11-13 King Yuan Electronics Co Ltd Apparatus and method for monitoring overlapping
JP2009253038A (en) * 2008-04-07 2009-10-29 Fuji Mach Mfg Co Ltd Substrate height measuring system, electronic component mounting apparatus and substrate height measurement method
US9256912B2 (en) 2009-05-13 2016-02-09 Koh Young Technology Inc. Method of measuring measurement target
US8644590B2 (en) 2009-05-13 2014-02-04 Koh Young Technology Inc. Method of measuring measurement target
CN102179726A (en) * 2011-03-24 2011-09-14 哈尔滨理工大学 Instrument and method for measuring secondary clamping deviation during numerical control machining based on image technology
CN103878269A (en) * 2012-12-20 2014-06-25 深圳市威美实业有限公司 Punching device based on visual positioning system
CN103878269B (en) * 2012-12-20 2016-04-20 深圳市威美实业有限公司 The pressing equipment of view-based access control model navigation system
CN104359407A (en) * 2014-10-31 2015-02-18 秦皇岛丰泰自动化设备制造有限公司 Part height automatic detection device
KR20190129678A (en) * 2018-05-11 2019-11-20 베이징 쿠앙쉬 테크놀로지 씨오., 엘티디. Method, apparatus, and system for determining a position of an item
US10788313B2 (en) 2018-05-11 2020-09-29 Beijing Kuangshi Technology Co., Ltd. Method for determining a position of an item, item monitoring system and non-transitory computer-readable recording medium
KR102255268B1 (en) * 2018-05-11 2021-05-25 베이징 쿠앙쉬 테크놀로지 씨오., 엘티디. Method, apparatus, and system for determining a position of an item
CN113508651A (en) * 2019-03-05 2021-10-15 株式会社富士 Correction amount calculation device, component mounting machine, and correction amount calculation method
CN113508651B (en) * 2019-03-05 2022-09-20 株式会社富士 Correction amount calculation device, component mounting machine, and correction amount calculation method
DE112020002626T5 (en) 2019-05-29 2022-02-17 Ckd Corporation Three-dimensional measuring device and three-dimensional measuring method
US11930600B2 (en) 2019-05-29 2024-03-12 Ckd Corporation Three-dimensional measurement apparatus and three-dimensional measurement method
CN117147570A (en) * 2023-10-30 2023-12-01 深圳硬之城信息技术有限公司 Manufacturing control method, device, equipment and storage medium based on machine vision

Also Published As

Publication number Publication date
JP3872007B2 (en) 2007-01-24
TWI228023B (en) 2005-02-11
CN1510393A (en) 2004-07-07
TW200418352A (en) 2004-09-16
CN1261737C (en) 2006-06-28

Similar Documents

Publication Publication Date Title
JP3872007B2 (en) Measuring device and inspection device
JP5421763B2 (en) Inspection apparatus and inspection method
CN108700409B (en) Three-dimensional measuring device
JP2014526706A (en) Non-contact type component inspection apparatus and component inspection method
KR101659302B1 (en) Three-dimensional shape measurement apparatus
JP5546292B2 (en) Inspection apparatus and inspection method
JP2006136923A (en) Laser beam machine and laser beam machining method
JP2003279329A (en) Three-dimensional measuring apparatus
JP3863389B2 (en) Laser processing method and apparatus
JP4381764B2 (en) IMAGING DEVICE AND OBJECT MOVING DEVICE EQUIPPED WITH THE DEVICE
JP6097389B2 (en) Inspection apparatus and inspection method
JP2009092485A (en) Print solder inspection device
JP5191089B2 (en) Board inspection equipment
JP6276809B2 (en) Substrate position detector
JPH11245369A (en) Image recognition device and cream solder printer
JP3723139B2 (en) 3D measuring device
JP3868917B2 (en) Three-dimensional measuring device and inspection device
JP4034325B2 (en) Three-dimensional measuring device and inspection device
JP4091040B2 (en) Board inspection equipment
JP3737491B2 (en) Solder appearance inspection device
WO2022074897A1 (en) Solder printing inspection device
JP2021021816A (en) Exposure method
JP3730222B2 (en) Three-dimensional measuring device and inspection device
JP2002267415A (en) Semiconductor measuring instrument
JP2004198263A (en) Visual inspection device and three-dimensional measurement device

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20050214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20050426

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20050613

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20061017

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20061018

R150 Certificate of patent or registration of utility model

Ref document number: 3872007

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101027

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101027

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111027

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111027

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121027

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121027

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131027

Year of fee payment: 7

LAPS Cancellation because of no payment of annual fees