JPWO2020065850A1 - 3次元測定装置 - Google Patents

3次元測定装置 Download PDF

Info

Publication number
JPWO2020065850A1
JPWO2020065850A1 JP2020547739A JP2020547739A JPWO2020065850A1 JP WO2020065850 A1 JPWO2020065850 A1 JP WO2020065850A1 JP 2020547739 A JP2020547739 A JP 2020547739A JP 2020547739 A JP2020547739 A JP 2020547739A JP WO2020065850 A1 JPWO2020065850 A1 JP WO2020065850A1
Authority
JP
Japan
Prior art keywords
unit
measurement
information
measuring
reliability
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2020547739A
Other languages
English (en)
Other versions
JP7174768B2 (ja
Inventor
伸章 田端
伸章 田端
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yamaha Motor Co Ltd
Original Assignee
Yamaha Motor Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yamaha Motor Co Ltd filed Critical Yamaha Motor Co Ltd
Publication of JPWO2020065850A1 publication Critical patent/JPWO2020065850A1/ja
Application granted granted Critical
Publication of JP7174768B2 publication Critical patent/JP7174768B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2518Projection by scanning of the object
    • G01B11/2522Projection by scanning of the object the position of the object changing and being recorded
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/245Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures using a plurality of fixed, simultaneously operating transducers
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01BMEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
    • G01B11/00Measuring arrangements characterised by the use of optical techniques
    • G01B11/24Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
    • G01B11/25Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
    • G01B11/2518Projection by scanning of the object
    • G01B11/2527Projection by scanning of the object with phase change by in-plane movement of the patern

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

この外観検査装置(100)(3次元測定装置)は、位相シフト法により3次元情報を測定する第1測定部(30)と、光切断法により3次元情報を測定する第2測定部(40)と、第1測定部および第2測定部の両方の測定結果に基づいて、測定対象の3次元情報を取得する制御装置(50)と、を備える。

Description

この発明は、3次元測定装置に関する。
従来、3次元測定装置が知られている。このような3次元測定装置は、たとえば、特開2000−193432号公報に開示されている。
上記特開2000−193432号公報には、ライン状のレーザ光を基準面に対して斜め方向から投影して撮像を行う光切断法により3次元形状を測定する測定部を備える3次元測定装置が開示されている。
特開2000−193432号公報
しかしながら、上記特開2000−193432号公報の3次元測定装置では、ライン状のレーザ光を基準面に対して斜め方向から投影しているため、レーザ光が測定対象の3次元形状により影となる領域ができてしまう。このため、影の影響により、測定対象の3次元形状を精度よく測定することが困難であるという問題点がある。
この発明は、上記のような課題を解決するためになされたものであり、この発明の1つの目的は、測定対象の3次元情報を精度よく測定することが可能な3次元測定装置を提供することである。
この発明の一の局面による3次元測定装置は、位相シフト法により3次元情報を測定する第1測定部と、光切断法により3次元情報を測定する第2測定部と、第1測定部および第2測定部の両方の測定結果に基づいて、測定対象の3次元情報を取得する制御部と、を備える。なお、位相シフト法は、正弦波状の光強度分布を有する等間隔の格子状の明暗パターン(縞パターン光)を測定対象に投影し、この明暗パターンの位置(位相)をシフトさせた複数の画像を撮像して、撮像した複数の画像における同一部分の画素値の差異に基づいて、測定対象の立体形状(高さ)を算出する方法である。また、光切断法は、ライン状の光を測定対象に投影し、画像を撮像して、画像内のラインの変形(視差)に基づいて、測定対象の立体形状(高さ)を算出する方法である。
この発明の一の局面による3次元測定装置では、上記のように構成することによって、測定対象を光切断法および位相シフト法の両方により測定するので、光切断法による光の照射が影になる位置でも、位相シフト法の測定により高さ情報を補完することができる。また、光切断法および位相シフト法による複数の方法により3次元情報を取得することができるので、3次元情報の取得精度を高めることができる。これらにより、測定対象の3次元情報を精度よく測定することができる。
上記一の局面による3次元測定装置において、好ましくは、第1測定部は、第1撮像部と、第1撮像部により撮像する第1測定パターンを投影する第1投影部とを含み、第1撮像部および第1投影部のうち一方は、基準面に対して垂直方向に光軸が配置され、第1撮像部および第1投影部のうち他方は、一方の光軸方向に対して傾斜した方向に光軸が配置されているとともに複数設けられており、第2測定部は、基準面の垂直方向とは傾斜した方向に光軸が配置され、テレセントリック光学系を有する第2撮像部と、基準面に対して第2撮像部の光軸が正反射した方向の位置に配置され、第2撮像部により撮像するライン状の第2測定パターンを投影する第2投影部と、を含む。このように構成すれば、測定対象が鏡面やガラス面などの反射面であったとしても、第2投影部から投影された第2測定パターンを正反射した方向の位置に配置された第2撮像部により確実に撮像することができる。また、第2撮像部は、テレセントリック光学系を有するため、測定対象の反射面により反射された第2測定パターンを光学系により変形させることなく平行に撮像することができる。これにより、反射面を有する測定対象でも3次元情報を精度よく測定することができる。また、第1測定部に、第1投影部または第1撮像部を複数設けることにより、第1測定パターンを投影する方向または撮像する方向を複数にすることができる。これにより、ある位置において、一方の方向からの投影では影ができる場合でも、他方の方向からの投影では影ができるのを抑制することができる。これにより、ある位置における3次元情報を確実に測定することができる。
上記一の局面による3次元測定装置において、好ましくは、制御部は、第1測定部の測定に基づいて、各位置における高さを示す高さ情報、および、各位置における高さ情報の信頼度を示す信頼度情報を取得し、第2測定部の測定に基づいて、高さ情報および信頼度情報を取得するとともに、第1測定部の測定による高さ情報および信頼度情報と、第2測定部の測定による高さ情報および信頼度情報と、に基づいて、1つの高さ情報を取得するように構成されている。このように構成すれば、第1測定部の測定による高さ情報と、第2測定部の測定による高さ情報とが大きく異なる場合でも、各々の信頼度情報に基づいて、より信頼度が高い1つの高さ情報を取得することができる。
この場合、好ましくは、第1測定部は、複数の方向から第1測定パターンを投影して3次元情報を測定するように構成されており、制御部は、第1測定部の測定に基づいて、複数の高さ情報および信頼度情報を取得するとともに、第1測定部の測定による複数の高さ情報および複数の信頼度情報と、第2測定部の測定による高さ情報および信頼度情報と、に基づいて、1つの高さ情報を取得するように構成されている。このように構成すれば、位相シフト法を用いた第1測定部により、複数の高さ情報を取得するので、より信頼度が高い1つの高さ情報を取得することができる。
上記第1測定部が複数の方向から第1測定パターンを投影して3次元情報を測定する構成において、好ましくは、制御部は、第2測定部により測定した信頼度情報の信頼度が低い高さ情報を、第1測定部により測定した高さ情報により補完するように構成されている。このように構成すれば、光切断法を用いた第2測定部による測定において、影などの影響により信頼度が低くなる場合でも、位相シフト法を用いた第1測定部による測定により高さ情報を補完することができる。
この場合、好ましくは、制御部は、第1測定部の第1測定パターンを投影する方向が測定対象により影となると推定される場合、影となる方向からの測定結果を除外して、高さ情報を補完するように構成されている。このように構成すれば、位相シフト法による複数の第1測定パターンの投影方向のうち、影の影響を受けて精度が低くなる投影方向による測定結果を除外することができるので、位相シフト法を用いた第1測定部により測定した複数の高さ情報から、光切断法を用いた第2測定部による高さ情報をより精度よく補完することができる。
上記制御部が第1測定部の測定による高さ情報および信頼度情報と、第2測定部の測定による高さ情報および信頼度情報とに基づいて1つの高さ情報を取得する構成において、好ましくは、制御部は、第1測定部の複数の測定による輝度差に基づいて、各位置における信頼度情報を取得するように構成されている。このように構成すれば、位相シフト法を用いた第1測定部による複数の測定による輝度差に基づいて信頼度情報を容易に取得することができる。
上記制御部が第1測定部の測定による高さ情報および信頼度情報と、第2測定部の測定による高さ情報および信頼度情報とに基づいて1つの高さ情報を取得する構成において、好ましくは、制御部は、第2測定部の測定による輝度値に基づいて、各位置における信頼度情報を取得するように構成されている。このように構成すれば、光切断法を用いた第2測定部による輝度値に基づいて信頼度情報を容易に取得することができる。
上記一の局面による3次元測定装置において、好ましくは、制御部は、第1測定部の測定結果による突起形状を、第2測定部の測定結果に基づいてノイズであるか構造物であるかを判断するように構成されている。このように構成すれば、第1測定部の位相シフト法の撮像により突起形状に現れる虚像を、第2測定部の光切断法によりノイズであると判断することができるので、ノイズを除去することにより、高さ情報をより精度よく取得することができる。
上記一の局面による3次元測定装置において、好ましくは、制御部は、第1測定部による測定の前に、第2測定部により測定を行い、第2測定部の測定結果に基づいて、第1測定部の測定高さ位置を調整する制御を行うように構成されている。このように構成すれば、光切断法を用いた第2測定部により測定した3次元情報に基づいて、測定対象の3次元形状に沿うように位相シフト法を用いた第1測定部による測定高さ位置を調整することができるので、画像のピントを合わせやすくすることができる。
上記一の局面による3次元測定装置において、好ましくは、制御部は、第1測定部による測定の前に、第2測定部により測定を行い、第2測定部の測定結果に基づいて、測定対象の平面位置情報を取得し、第1測定部による測定の平面位置を調整する制御を行うように構成されている。このように構成すれば、位相シフト法を用いた第1測定部により平面位置情報を取得する動作を省略することができるので、第1測定部において改めて平面位置情報を取得する場合に比べて、測定動作に要する時間が長くなるのを抑制することができる。
上記一の局面による3次元測定装置において、好ましくは、測定対象は、電子部品が実装された基板である。このように構成すれば、電子部品が実装された基板の3次元情報を精度よく測定することができる。
本発明によれば、上記のように、測定対象の3次元情報を精度よく測定することができる。
本発明の一実施形態による外観検査装置を示したブロック図である。 本発明の一実施形態による外観検査装置の第2測定部を示した図である。 本発明の一実施形態による外観検査装置の第1測定部を示した図である。 本発明の一実施形態による外観検査装置の高さ情報の取得を説明するための図である。 本発明の一実施形態による外観検査装置の第2測定部による高さ測定を説明するための図である。 本発明の一実施形態による外観検査装置の第2測定部による高さ測定の信頼度を説明するための図である。 本発明の一実施形態による外観検査装置の第2測定部による高さ測定の信頼度の判定を説明するための図である。 本発明の一実施形態による外観検査装置の高さ情報のノイズの除去を説明するための図である。 本発明の一実施形態による外観検査装置の測定時の影領域を説明するための図である。 本発明の一実施形態による外観検査装置の測定時の影領域の判定を説明するための図である。 本発明の一実施形態による外観検査装置の測定時の影領域の測定結果の除外を説明するための図である。 本発明の一実施形態による外観検査装置の測定結果のグルーピングを説明するための図である。 本発明の一実施形態による外観検査装置の光切断法による測定結果の信頼度が低い場合の測定結果の統合を説明するための図である。 本発明の一実施形態による外観検査装置の光切断法による測定結果の信頼度が中くらいの場合の測定結果の統合を説明するための図である。 本発明の一実施形態による外観検査装置の測定結果に外れ値がある場合の測定結果の統合を説明するための図である。 本発明の一実施形態による外観検査装置の制御装置による3次元情報取得処理を説明するためのフローチャートである。 本発明の一実施形態による外観検査装置の制御装置による視野毎高さ情報合成処理の第1例を説明するためのフローチャートである。 本発明の一実施形態による外観検査装置の制御装置による視野毎高さ情報合成処理の第2例を説明するためのフローチャートである。 本発明の一実施形態による外観検査装置の制御装置による画像の統合処理を説明するためのフローチャートである。 本発明の一実施形態の第1変形例による外観検査装置の第2測定部を示した図である。 本発明の一実施形態の第2変形例による外観検査装置の第2測定部を示した図である。 本発明の一実施形態の第3変形例による外観検査装置の第1測定部を示した図である。
以下、本発明の実施形態を図面に基づいて説明する。
図1〜図15を参照して、本発明の一実施形態による外観検査装置100の構成について説明する。なお、外観検査装置100は、請求の範囲の「3次元測定装置」の一例である。
図1に示すように、本実施形態による外観検査装置100は、基板製造プロセスにおける製造中または製造後のプリント基板(以下、「基板」という)110を検査対象として撮像し、基板110および基板110上の電子部品111(図2参照)に対する各種検査を行う装置である。外観検査装置100は、電子部品111を基板110に実装して回路基板を製造するための基板製造ラインの一部を構成している。なお、基板110は、請求の範囲の「測定対象」の一例である。
基板製造プロセスの概要としては、まず、配線パターンが形成された基板110上に、ハンダ印刷装置(図示せず)によって所定のパターンでハンダ(ハンダペースト)の印刷(塗布)が行われる(ハンダ印刷工程)。続いて、ハンダ印刷後の基板110に、表面実装機(図示せず)によって電子部品111が搭載(実装)される(実装工程)ことにより、電子部品111の端子部がハンダ上に配置される。その後、実装済み基板110がリフロー炉(図示せず)に搬送されてハンダの溶融および硬化(冷却)が行われる(リフロー工程)ことにより、電子部品111の端子部が基板110の配線に対して半田接合される。これにより、電子部品111が配線に対して電気的に接続された状態で基板110上に固定され、基板製造が完了する。
外観検査装置100は、たとえば、ハンダ印刷工程後の基板110上のハンダの印刷状態の検査や、実装工程後における電子部品111の実装状態の検査、または、リフロー工程後における電子部品111の実装状態の検査などに用いられる。したがって、外観検査装置100は、基板製造ラインにおいて1または複数設けられる。ハンダの印刷状態としては、設計上の印刷位置に対する印刷位置ずれ、ハンダの形状、体積および高さ(塗布量)、ブリッジ(短絡)の有無などの検査が行われる。電子部品111の実装状態としては、電子部品111の種類および向き(極性)が適正か否か、電子部品111の設計上の実装位置に対する位置ずれの量が許容範囲内か、端子部の半田接合状態が正常か否かなどの検査が行われる。また、各工程間での共通の検査内容として、ゴミやその他の付着物などの異物の検出も行われる。
図1に示すように、外観検査装置100は、基板110を搬送するための基板搬送コンベア10と、基板搬送コンベア10の上方をXY方向(水平方向)およびZ方向(上下方向)に移動可能なヘッド移動機構20と、ヘッド移動機構20によって保持された第1測定部30および第2測定部40と、外観検査装置100の制御を行う制御装置50とを備えている。なお、制御装置50は、請求の範囲の「制御部」の一例である。
基板搬送コンベア10は、基板110を水平方向に搬送するとともに、所定の検査位置で基板110を停止させて保持することが可能なように構成されている。また、基板搬送コンベア10は、検査が終了した基板110を所定の検査位置から水平方向に搬送して、外観検査装置100から基板110を搬出することが可能なように構成されている。
ヘッド移動機構20は、基板搬送コンベア10の上方に設けられ、たとえばボールネジ軸とサーボモータとを用いた直交3軸(XYZ軸)ロボットにより構成されている。ヘッド移動機構20は、これらのX軸、Y軸およびZ軸の駆動を行うためのX軸モータ、Y軸モータおよびZ軸モータを備えている。これらのX軸モータ、Y軸モータおよびZ軸モータにより、ヘッド移動機構20は、第1測定部30および第2測定部40を、基板搬送コンベア10(基板110)の上方でXY方向(水平方向)およびZ方向(上下方向)に移動させることが可能なように構成されている。
第1測定部30は、位相シフト法により3次元情報を測定するように構成されている。第1測定部30は、第1撮像部31と、第1投影部32とを備えている。この第1測定部30がヘッド移動機構20によって基板110の上方の所定位置に移動されるとともに、第1撮像部31や第1投影部32などを用いることによって、第1測定部30が基板110および基板110上の電子部品111などの外観検査のための撮像を行うように構成されている。
第1撮像部31は、第1投影部32により縞パターン光が照射された基板110を撮像するように構成されている。第1撮像部31は、CCDイメージセンサやCMOSイメージセンサなどの撮像素子を有している。第1撮像部31は、略矩形形状の撮像領域において基板110を撮像可能なように構成されている。また、第1撮像部31は、水平方向の基準面に対して垂直方向に光軸311が配置されている。つまり、第1撮像部31は、基板110の上面の2次元画像を略垂直上方の位置から撮像するように構成されている。この第1撮像部31により、第1投影部32による照明光の下では、2次元画像が得られる。
第1投影部32は、複数設けられている。また、複数の第1投影部32は、それぞれ、第1撮像部31の光軸311方向に対して傾斜した方向から第1撮像部31により撮像する第1測定パターンを投影するように構成されている。つまり、第1測定部30は、複数の方向から第1測定パターンを投影して3次元情報を測定するように構成されている。第1投影部32は、図3に示すように、上方からみて、第1撮像部31の周囲を取り囲むように複数個(4個)配置されている。また、4個の第1投影部32は、撮像中心(第1撮像部31)から等距離の位置に、略等角度(略90度)間隔で配列されている。4個の第1投影部32は、A1方向、A2方向、A3方向、A4方向から、それぞれ、第1測定パターンを投影するように構成されている。また、第1投影部32は、図1に示すように、それぞれ、第1撮像部31の光軸311に対して斜め方向からから第1測定パターンを投影するように構成されている。また、第1投影部32は、第1測定パターンとして、正弦波状の光強度分布を有する等間隔の格子状の明暗パターン(縞パターン光)を投影するように構成されている。また、第1投影部32は、この明暗パターンの位置(位相)をシフトさせて投影するように構成されている。
第2測定部40は、光切断法により3次元情報を測定するように構成されている。第2測定部40は、第2撮像部41と、第2投影部42とを備えている。この第2測定部40がヘッド移動機構20によって基板110の上方の所定位置に移動されるとともに、第2撮像部41や第2投影部42などを用いることによって、第2測定部40が基板110および基板110上の電子部品111などの外観検査のための撮像を行うように構成されている。
第2撮像部41は、第2投影部42によりライン状のパターン光が照射された基板110を撮像するように構成されている。第2撮像部41は、CCDイメージセンサやCMOSイメージセンサなどの撮像素子を有している。また、第2撮像部41は、水平方向の基準面の垂直方向とは傾斜した方向に光軸が配置されている。また、第2撮像部41は、図2に示すように、テレセントリック光学系411を有している。テレセントリック光学系411は、光軸に平行な光を第2撮像部41に入射させるように構成されている。
第2投影部42は、水平方向の基準面に対して第2撮像部41の光軸が正反射した方向の位置に配置されている。また、第2投影部42は、第2撮像部41により撮像するライン状の第2測定パターンを投影するように構成されている。また、第2投影部42は、レーザ光を照射するように構成されている。また、第2投影部42は、ライン上のレーザ光をテレセントリック(平行)に照射するように構成されている。第2投影部42および第2撮像部41は、ライン状のレーザ光を走査(移動)しながら、基板110を撮像するように構成されている。図2に示すように、第2投影部42は、垂直方向に対して角度θだけ斜めに光軸が配置されている。また、第2撮像部41は、垂直方向に対して第2投影部42とは反対側に角度θだけ斜めに光軸が配置されている。これにより、電子部品111が鏡面で構成され、第2測定パターンが略全反射される場合でも、第2撮像部41により第2測定パターンを撮像することが可能である。
図1に示すように、制御装置50は、外観検査装置100の各部を制御するように構成されている。制御装置50は、制御部51と、記憶部52と、画像処理部53と、撮像制御部54と、投影制御部55と、モータ制御部56とを含んでいる。
制御部51は、論理演算を実行するCPU(中央処理装置)などのプロセッサ、CPUを制御するプログラムなどを記憶するROM(Read Only Memory)および装置の動作中に種々のデータを一時的に記憶するRAM(Random Access Memory)などから構成されている。制御部51は、ROMに記憶されているプログラムや、記憶部52に格納されたソフトウェア(プログラム)に従って、画像処理部53、撮像制御部54、投影制御部55およびモータ制御部56を介して、外観検査装置100の各部を制御するように構成されている。そして、制御部51は、第1測定部30および第2測定部40を制御して、基板110に対する各種の外観検査を行う。
記憶部52は、各種データの記憶および制御部51による読み出しが可能な不揮発性の記憶装置からなる。記憶部52には、第1撮像部31および第2撮像部41によって撮像された撮像画像データ、基板110に実装される電子部品111の設計上の位置情報を定めた基板データ、基板110に実装される電子部品111の形状を定めた部品形状データベース、第1投影部32および第2投影部42が生成する投影パターン(第1測定パターンおよび第2測定パターン)の情報などが記憶されている。制御部51は、第1測定部30および第2測定部40による3次元形状測定による3次元(立体形状)検査に基づいて、基板110上のハンダの検査や、基板110に実装された電子部品111の実装状態検査、および、完成状態の基板110の検査などを行う。
画像処理部53は、第1撮像部31および第2撮像部41によって撮像された撮像画像(撮像信号)を画像処理して、基板110の電子部品111や半田接合部(ハンダ)を認識(画像認識)するのに適した画像データを生成するように構成されている。
撮像制御部54は、制御部51から出力される制御信号に基づいて、第1撮像部31および第2撮像部41から所定のタイミングで撮像信号の読み出しを行うとともに、読み出した撮像信号を画像処理部53に出力するように構成されている。投影制御部55は、制御部51から出力される制御信号に基づいて、第1投影部32および第2投影部42による投影の制御を行うように構成されている。
モータ制御部56は、制御部51から出力される制御信号に基づいて、外観検査装置100の各サーボモータ(ヘッド移動機構20のX軸モータ、Y軸モータおよびZ軸モータ、基板搬送コンベア10を駆動するためのモータ(図示せず)など)の駆動を制御するように構成されている。また、モータ制御部56は、各サーボモータのエンコーダ(図示せず)からの信号に基づいて、第1測定部30、第2測定部40および基板110などの位置を取得するように構成されている。
ここで、本実施形態では、制御装置50は、第1測定部30および第2測定部40の両方の測定結果に基づいて、測定対象の3次元情報を取得するように構成されている。
具体的には、制御装置50は、図4に示すように、第1測定部30の測定に基づいて、各位置における高さを示す高さ情報、および、各位置における高さ情報の信頼度を示す信頼度情報を取得する。また、制御装置50は、第2測定部40の測定に基づいて、高さ情報および信頼度情報を取得する。そして、制御装置50は、第1測定部30の測定による高さ情報および信頼度情報と、第2測定部40の測定による高さ情報および信頼度情報と、に基づいて、1つの高さ情報を取得するように構成されている。
まず、制御装置50は、第2測定部40の光切断法により、光切断高さ情報を取得する。第2測定部40は、所定のスキャン幅でレーザスキャンを行い、基板110全体の3次元情報を測定する。高さ情報は、各位置(画素に対応)毎に高さに関する数値情報を含んでいる。また、制御装置50は、光切断信頼度情報を取得する。信頼度情報は、各位置(画素に対応)毎にその位置における高さの信頼度に関する情報を含んでいる。たとえば、信頼度に関する情報は、高、中、低と3段階に分類されている。
次に、制御装置50は、第1測定部30の位相シフト法により、位相シフト高さ情報を取得する。第1測定部30は、基板110上の必要な位置を順次撮像する。この場合、第1測定部30は、4つの第1投影部32により投影を行いながら第1撮像部31により撮像を行うため、1つの位置につき4つの高さ情報および信頼度情報が得られる。つまり、制御装置50は、第1測定部30の測定に基づいて、複数の高さ情報および信頼度情報を取得する。
そして、制御装置50は、第1測定部30の測定による複数の高さ情報および複数の信頼度情報と、第2測定部40の測定による高さ情報および信頼度情報と、に基づいて、1つの高さ情報を取得するように構成されている。
第1測定部30による位相シフト法では、正弦波状の光強度分布を有する等間隔の格子状の明暗パターン(縞パターン光)を測定対象に投影し、この明暗パターンの位置(位相)をシフトさせた複数の画像を撮像して、撮像した複数の画像における同一部分の画素値の差異に基づいて、測定対象の立体形状(高さ)を算出する。
第1測定部30による位相シフト法では、制御装置50は、第1測定部30の複数の測定による輝度差に基づいて、各位置における信頼度情報を取得するように構成されている。つまり、制御装置50は、位相をシフトさせた複数の測定による輝度差に基づいて信頼度情報を取得するように構成されている。具体的には、位相をπ/2ずつシフトさせながら、4回撮像を行った場合、各輝度値をd0、d1、d2およびd3とする。位相シフト角αは、α=atan((d2−d0)/(d3−d1))と算出される。また、信頼度Rは、R=√((d2−d0)+(d3−d1))と算出される。
第2測定部40による光切断法では、ライン状の光を測定対象に投影し、画像を撮像して、画像内のラインの変形(視差)に基づいて、測定対象の立体形状(高さ)を算出する。たとえば、図5に示すように、電子部品111の上面のパターンと、基板110の上面のパターンとでは、撮像面において視差Pだけずれる。この視差Pを用いて、電子部品111の高さhは、h=P/2sinθと算出される。
第2測定部40による光切断法では、制御装置50は、第2測定部40の測定による輝度値に基づいて、各位置における信頼度情報を取得するように構成されている。具体的には、図6に示すように、基板110上に鏡面を有する電子部品111が搭載されている場合、電子部品111上を反射したレーザ光は鏡面反射して第2撮像部41に到達する。この場合、図7に示すように、同じライン上における輝度値のピークは大きくなる。そして、輝度値のピークが信頼度判定しきい値の「高」よりも大きい場合、制御装置50は、その位置における高さ情報の信頼度を「高」とする。
また、図6に示すように、基板110を反射したレーザ光は、拡散して第2撮像部41に到達する。この場合、図7に示すように、同じライン上における輝度値のピークは中くらいになる。そして、輝度値のピークが信頼度判定しきい値の「高」より小さく「中」以上の場合、制御装置50は、その位置における高さ情報の信頼度を「中」とする。なお、信頼度が「中」となるのは、鏡面以外の部品の位置なども含まれる。
また、図6に示すように、電子部品111の影となる部分では、レーザ光は、第2撮像部41に到達しない。この場合、図7に示すように、同じライン上における輝度値のピークは低くなる。そして、輝度値のピークが信頼度判定しきい値の「中」より小さい場合、制御装置50は、その位置における高さ情報の信頼度を「低」とする。なお、信頼度が「低」となるのは、電子部品111の影や穴、くぼみなどが含まれる。なお、第2投影部42のレーザ光の光量を変更してより大きくすることにより、基板110表面の反射光の輝度を信頼度が高となるようにすることもできる。しかし、その場合には鏡面の反射光の輝度が大きくなりすぎるため、第2撮像部41の受光状態が飽和してしまい正確な測定ができなくなる虞がある。したがって、レーザ光の光量を鏡面での反射光の輝度が測定に十分で第2撮像部41の受光状態が飽和しない信頼度が高となる適度なものとすることが好ましい。この場合には基板110表面や鏡面でない部品の上面では反射光の輝度が下がり、信頼度としては中のレベルとなり易い。場合によっては、鏡面の反射光も基板110表面等の反射光の両者とも信頼度が高となる輝度でありカメラの受光状態も飽和しないようにできることもあり得る。
制御装置50は、図8に示すように、第1測定部30の測定結果による突起形状を、第2測定部40の測定結果に基づいてノイズであるか構造物であるかを判断するように構成されている。つまり、図8に示すように、位相シフト法では観測された突起形状が、光切断法により観測されない場合は、制御装置50は、ノイズと判断し、除去する。また、位相シフト法で観測され、かつ、光切断法でも観測された場合、制御装置50は、突起形状が構造物(電子部品111)であると判断し、ノイズ除去の対象外とする。たとえば、位相シフト法におけるノイズは、半田フィレットの曲面に周辺が写り込むことにより発生する。具体的には、部品接合部の半田フィレットは、半鏡面の曲面となる。そして、半田フィレットの部分に周辺の基板110面や部品が縞パターンと共に写り込む。このため、半田フィレット部に、周辺環境の位相縞が観測され、ノイズ要因となる。
また、位相シフト法におけるノイズは、多重反射によっても発生する。たとえば、部品側面で反射された縞が、周囲の基板110面や部品上に投影される(2次反射縞)。この場合、当該領域では、1次縞に2次縞が重なり、ノイズの要因となる。上記のようなノイズの発生が、複数の異なる高さの測定値が測定される一因と考えられる。
制御装置50は、図9〜図11に示すように、第2測定部40により測定した信頼度情報の信頼度が低い高さ情報を、第1測定部30により測定した高さ情報により補完するように構成されている。具体的には、制御装置50は、第2投影部42によるレーザ光が影となるような信頼度が低い位置における高さ情報を、第1測定部30の位相シフト法により測定した高さ情報により補完する。
また、制御装置50は、影領域の周辺の領域B1〜B4の高さを比較して、どの方向による投影が影となるかを判断する。そして、制御装置50は、第1測定部30の第1測定パターンを投影する方向が測定対象により影となると推定される場合、影となる方向からの測定結果を除外して、高さ情報を補完するように構成されている。
具体的には、図10に示すように、制御装置50は、影領域の右の領域B2(B4)の高さが左の領域B1(B3)よりも高い場合は、右からの投影が影となると判断する。つまり、制御装置50は、図11に示すように、A1方向の第1投影部32からの投影が影となると判断する。この場合、この影領域において、A1方向の第1投影部32からの投影を撮像した画像は、画像の補完(統合)に使用されない。
また、制御装置50は、影領域の左の領域B1(B3)の高さが右の領域B2(B4)よりも高い場合は、左からの投影が影となると判断する。つまり、制御装置50は、A3方向の第1投影部32からの投影が影となると判断する。この場合、この影領域において、A3方向の第1投影部32からの投影を撮像した画像は、画像の補完(統合)に使用されない。
また、制御装置50は、影領域の左の領域B1(B3)の高さと右の領域B2(B4)とが同じ高さの場合は、右からの投影および左からの投影が影となると判断する。つまり、制御装置50は、A1方向およびA3方向の第1投影部32からの投影が影となると判断する。この場合、この影領域において、A1方向およびA3方向の第1投影部32からの投影を撮像した画像は、画像の補完(統合)に使用されない。
また、制御装置50は、第1測定部30による測定の前に、第2測定部40により測定する制御を行うように構成されている。また、制御装置50は、第2測定部40の測定結果に基づいて、第1測定部30の測定高さ位置を調整する制御を行うように構成されている。つまり、制御装置50は、第2測定部40により測定した基板110の高さ位置に基づいて、第1測定部30による撮像のピントが合いやすい位置に第1測定部30の高さ位置を調整する。
また、制御装置50は、第1測定部30による測定の前に、第2測定部40により測定を行い、第2測定部40の測定結果に基づいて、測定対象の平面位置情報を取得するように構成されている。また、制御装置50は、第1測定部30による測定の平面位置を調整する制御を行うように構成されている。具体的には、制御装置50は、第2測定部40による撮像に基づいて、基板110のフィデューシャルマークを認識する。そして、制御装置50は、認識したフィデューシャルマークに基づいて、第1測定部30による測定する水平方向の位置を調整する。
また、制御装置50は、各位置(注目画素)において、第1測定部30により測定した複数の測定値(高さ情報)と、第2測定部40により測定した測定値(高さ情報)とを統合して1つの測定値(高さ情報)を取得するように構成されている。たとえば、図12に示すように、制御装置50は、第1測定部30により測定した測定値(高さ情報)(P1、P2、P3およびP4)と、第2測定部40により測定した測定値(高さ情報)(L1)とをグルーピングしてから統合する。グルーピングでは、各測定値を中心に、データ間範囲しきい値内の測定値が同じグループとされる。測定値L1のグループは、測定値L1のみ(1データ)のグループとなる。測定値P1のグループは、測定値P1およびP2(2データ)のグループとなる。測定値P2のグループは、測定値P1、P2およびP3(3データ)のグループとなる。測定値P3のグループは、測定値P2およびP3(2データ)のグループとなる。測定値P4のグループは、測定値P4のみ(1データ)のグループとなる。
測定値L1、P1〜P4のグループのうち、データ数が多いのは、測定値P2のグループとなる。そこで、制御装置50は、データ数が最大グループ(測定値P2のグループ)の測定値の平均を高さ情報の統合した測定値とする。つまり、統合した測定値Hは、H=(P1+P2+P3)/3と算出される。
また、制御装置50は、各位置(注目画素)において、第2測定部40により測定した測定値(高さ情報)の信頼度に基づいて、測定値(高さ情報)の統合を行うように構成されている。たとえば、図13に示すように、第2測定部40により測定した測定値L1の信頼度が低い場合、制御装置50は、信頼度が低い第2測定部40による測定値L1を除外した上で、信頼度が有効範囲内の第1測定部30の測定値P1〜P4の統合を行う。具体的には、制御装置50は、測定値P1〜P4のうち、設定された公差により抽出された複数の測定値の平均を高さ情報の統合した測定値とする。図13の例の場合、測定値P1およびP2の距離が公差の範囲内であるので、統合した測定値Hは、H=(P1+P2)/2と算出される。
また、図14に示すように、第2測定部40により測定した測定値L1の信頼度が中の場合、制御装置50は、測定値L1を中心として公差内の測定値の平均を高さ情報の統合した測定値とする。これは、光切断法を用いた第2測定部40による計測値が最も信頼できるということに基づいている。図14の例の場合、測定値P3およびP4が測定値L1の公差の範囲内にあるので、統合した測定値Hは、H=(P3+P4+L1)/3と算出される。
また、図15に示すように、第2測定部40により測定した測定値L1の信頼度が中〜高であっても、第1測定部30により測定した測定値P1〜P4の集合状態を考慮して、制御装置50は、測定値L1を除外した上で、測定値の統合を行う。図15の例の場合、測定値P1〜P4のうち過半数の測定値P1〜P3が公差の範囲内に集合している。これにより、測定値P1〜P3との距離が公差以上の測定値L1は、外れ値とされる。また、同様に、測定値P1〜P3との距離が公差以上の測定値P4は、外れ値とされる。そして、統合した測定値Hは、H=(P1+P2+P3)/3と算出される。
(3次元情報取得処理の説明)
次に、図16を参照して、制御装置50による3次元情報取得処理について説明する。
図16のステップS1において、基板110が基板搬送コンベア10により搬入される。ステップS2において、第2測定部40により光切断法の撮像が行われる。この場合、基板110全体のスキャン(撮像)が行われる。
ステップS3において、第1測定部30により撮像するための視野を移動する。ステップS4において、第1測定部30により移動された視野における位相シフト法の撮像が行われる。
ステップS5において、撮像した視野の高さ情報が合成される。ステップS6において、第1測定部30により全視野の撮像が完了したか否かが判断される。全視野の撮像が完了していなければ、ステップS3に戻る。全視野の撮像が完了していれば、ステップS7に進む。
ステップS7において、基板110が基板搬送コンベア10により搬出される。その後、3次元情報取得処理が終了される。
(視野毎高さ情報合成処理(第1例)の説明)
図17を参照して、制御装置50による図16のステップS5における視野毎高さ情報合成処理(第1例)について説明する。
図17のステップS11において、方向別の位相シフト画像を統合した画像(高さ情報)が作成される。具体的には、4つの方向から撮像した位相シフト画像が統合された高さ情報が作成される。
ステップS12において、位相シフト法の統合画像の注目画素の信頼度が判断される。注目画素の信頼度が低ければ、ステップS13に進み、注目画素の信頼度が高ければ、ステップS17に進む。
ステップS13において、光切断法の画像の注目画素の信頼度が判断される。注目画素の信頼度が低ければ、ステップS14に進み、注目画素の信頼度が高ければ、ステップS15に進む。ステップS14において、注目画素の高さ情報が欠落(値なし)にされる。
ステップS15において、注目画素の高さ情報が光切断法の画像の測定値に置換される。ステップS16において、視野内の全画素の高さ情報の合成(統合)が完了したか否かが判断される。完了すれば、視野毎高さ情報合成処理が終了される。完了していなければ、ステップS17に進む。
ステップS17において、高さ情報の合成処理が次の画素に切り替えられる。その後、ステップS12に戻る。
(視野毎高さ情報合成処理(第2例)の説明)
図18を参照して、制御装置50による図16のステップS5における視野毎高さ情報合成処理(第2例)について説明する。
図18のステップS21において、光切断法の画像の注目画素の信頼度が判断される。注目画素の信頼度が高ければ、ステップS22に進み、注目画素の信頼度が中であれば、ステップS23に進み、注目画素の信頼度が低ければ、ステップS24に進む。ステップS22において、注目画素の高さ情報が光切断法の画像の測定値にされる。その後、ステップS25に進む。
ステップS23において、方向別の位相シフト法の画像の測定値と光切断法の画像の測定値とを合成(統合)した測定値が算出される。そして、算出された測定値が注目画素の高さ情報にされる。その後、ステップS25に進む。ステップS24において、方向別の位相シフト法の画像の測定値を合成(統合)した測定値が算出される。そして、算出された測定値が注目画素の高さ情報にされる。その後、ステップS25に進む。
ステップS25において、視野内の全画素の情報の合成(統合)が完了したか否かが判断される。完了すれば、視野毎高さ情報合成処理が終了される。完了していなければ、ステップS26に進む。ステップS26において、高さ情報の合成処理が次の画素に切り替えられる。その後、ステップS21に戻る。
(画像の統合処理の説明)
図19を参照して、制御装置50による画像の統合処理について説明する。この画像の統合処理では、測定した高さ情報(測定値)を各位置においてそれぞれ統合(合成)する処理が行われる。
図19のステップS31において、信頼度の低い高さ情報のデータが統合の対象から除外される。ステップS32において、有効データの数が判断される。有効データの数が2以上の場合、ステップS33に進み、有効データの数が1の場合、ステップS39に進み、有効データの数が0の場合、ステップS40に進む。
ステップS33において、図12に示すように、有効データをデータ間範囲しきい値によりグルーピングする。つまり、ある有効データを中心にデータ間範囲しきい値内の有効データを1つのグループとする。グループは、最大で有効データの数だけ生成される。ステップS34において、複数あるか否かが判断される。データの数が最大のグループが複数なければ(1つであれば)、ステップS35に進み、データの数が最大のグループが複数あれば、ステップS36に進む。
ステップS35において、データの数が最大のグループの測定値の平均値が統合した測定値とされる。その後、画像の統合処理が終了される。
ステップS36において、光切断法による測定値を含むグループがあるか否かが判断される。光切断法による測定値を含むグループがない場合、ステップS37に進み、光切断法による測定値を含むグループがある場合、ステップS38に進む。ステップS37において、グループ内の複数のデータ間の距離の合計が最小のグループの測定値の平均値が統合した測定値とされる。その後、画像の統合処理が終了される。
ステップS38において、光切断法による測定値を含むグループの測定値の平均値が統合した測定値とされる。その後、画像の統合処理が終了される。
ステップS39において、除外されずに残った1つの有効データが統合した測定値とされる。その後、画像の統合処理が終了される。
ステップS40において、注目画素の高さ情報が欠落(値なし)にされる。その後、画像の統合処理が終了される。
(実施形態の効果)
本実施形態では、以下のような効果を得ることができる。
本実施形態では、上記のように、測定対象を光切断法および位相シフト法の両方により測定するので、光切断法による光の照射が影になる位置でも、位相シフト法の測定により高さ情報を補完することができる。また、光切断法および位相シフト法による複数の方法により3次元情報を取得することができるので、3次元情報の取得精度を高めることができる。これらにより、測定対象の3次元情報を精度よく測定することができる。
また、本実施形態では、上記のように、第1測定部30は、基準面に対して垂直方向に光軸が配置された第1撮像部31と、第1撮像部31の光軸方向に対して傾斜した方向から第1撮像部31により撮像する第1測定パターンを投影する複数の第1投影部32と、を含む。第2測定部40は、基準面の垂直方向とは傾斜した方向に光軸が配置され、テレセントリック光学系411を有する第2撮像部41と、基準面に対して第2撮像部41の光軸が正反射した方向の位置に配置され、第2撮像部41により撮像するライン状の第2測定パターンを投影する第2投影部42と、を含む。これにより、測定対象が鏡面やガラス面などの反射面であったとしても、第2投影部42から投影された第2測定パターンを正反射した方向の位置に配置された第2撮像部41により確実に撮像することができる。また、第2撮像部41は、テレセントリック光学系411を有するため、測定対象の反射面により反射された第2測定パターンを光学系により変形させることなく平行に撮像することができる。これにより、反射面を有する測定対象でも3次元情報を精度よく測定することができる。また、第1測定部30に、第1投影部32を複数設けることにより、第1測定パターンを投影する方向を複数にすることができる。これにより、ある位置において、一方の方向からの投影では影ができる場合でも、他方の方向からの投影では影ができるのを抑制することができる。これにより、ある位置における3次元情報を確実に測定することができる。
また、本実施形態では、上記のように、制御装置50を、第1測定部30の測定による高さ情報および信頼度情報と、第2測定部40の測定による高さ情報および信頼度情報と、に基づいて、1つの高さ情報を取得するように構成する。これにより、第1測定部30の測定による高さ情報と、第2測定部40の測定による高さ情報とが大きく異なる場合でも、各々の信頼度情報に基づいて、より信頼度が高い1つの高さ情報を取得することができる。
また、本実施形態では、上記のように、制御装置50を、第1測定部30の測定による複数の高さ情報および複数の信頼度情報と、第2測定部40の測定による高さ情報および信頼度情報と、に基づいて、1つの高さ情報を取得するように構成する。これにより、位相シフト法を用いた第1測定部30により、複数の高さ情報を取得するので、より信頼度が高い1つの高さ情報を取得することができる。
また、本実施形態では、上記のように、制御装置50を、第2測定部40により測定した信頼度情報の信頼度が低い高さ情報を、第1測定部30により測定した高さ情報により補完するように構成する。これにより、光切断法を用いた第2測定部40による測定において、影などの影響により信頼度が低くなる場合でも、位相シフト法を用いた第1測定部30による測定により高さ情報を補完することができる。
また、本実施形態では、上記のように、制御装置50を、第1測定部30の第1測定パターンを投影する方向が測定対象により影となると推定される場合、影となる方向からの測定結果を除外して、高さ情報を補完するように構成する。これにより、複数の第1測定パターンの投影方向のうち、影の影響を受けて精度が低くなる投影方向による測定結果を除外することができるので、位相シフト法を用いた第1測定部30により測定した複数の高さ情報から、光切断法を用いた第2測定部40による高さ情報をより精度よく補完することができる。
また、本実施形態では、上記のように、制御装置50を、第1測定部30の複数の測定による輝度差に基づいて、各位置における信頼度情報を取得するように構成する。これにより、位相シフト法を用いた第1測定部30による複数の測定による輝度差に基づいて信頼度情報を容易に取得することができる。
また、本実施形態では、上記のように、制御装置50を、第2測定部40の測定による輝度値に基づいて、各位置における信頼度情報を取得するように構成する。これにより、光切断法を用いた第2測定部40による輝度値に基づいて信頼度情報を容易に取得することができる。
また、本実施形態では、上記のように、制御装置50を、第1測定部30の測定結果による突起形状を、第2測定部40の測定結果に基づいてノイズであるか構造物であるかを判断するように構成する。これにより、第1測定部30の位相シフト法の撮像により突起形状に現れる虚像を、第2測定部40の光切断法によりノイズであると判断することができるので、ノイズを除去することにより、高さ情報をより精度よく取得することができる。
また、本実施形態では、上記のように、制御装置50を、第1測定部30による測定の前に、第2測定部40により測定を行い、第2測定部40の測定結果に基づいて、第1測定部30の測定高さ位置を調整する制御を行うように構成する。これにより、光切断法を用いた第2測定部40により測定した3次元情報に基づいて、測定対象の3次元形状に沿うように位相シフト法を用いた第1測定部30による測定高さ位置を調整することができるので、画像のピントを合わせやすくすることができる。
また、本実施形態では、上記のように、制御装置50を、第1測定部30による測定の前に、第2測定部40により測定を行い、第2測定部40の測定結果に基づいて、測定対象の平面位置情報を取得し、第1測定部30による測定の平面位置を調整する制御を行うように構成する。これにより、位相シフト法を用いた第1測定部30により平面位置情報を取得する動作を省略することができるので、第1測定部30において改めて平面位置情報を取得する場合に比べて、測定動作に要する時間が長くなるのを抑制することができる。
(変形例)
なお、今回開示された実施形態は、すべての点で例示であって制限的なものではないと考えられるべきである。本発明の範囲は、上記した実施形態の説明ではなく請求の範囲によって示され、さらに請求の範囲と均等の意味および範囲内でのすべての変更(変形例)が含まれる。
たとえば、上記実施形態では、第2投影部が基準面に対して第2撮像部の光軸が正反射した方向の位置に配置されている構成の例を示したが、本発明はこれに限られない。本発明では、図20に示す実施形態の第1変形例のように、第2撮像部41が基準面に対して垂直方向に光軸を有するように配置されており、第2投影部42が第2撮像部41の光軸に対して所定の角度傾斜する方向に配置されていてもよい。
また、図21に示す実施形態の第2変形例のように、第2撮像部41が基準面に対して垂直方向に光軸を有するように配置されており、複数の第2投影部42が第2撮像部41の光軸に対して所定の角度傾斜する方向に配置されていてもよい。
また、上記実施形態では、第1測定部に、基準面に対して垂直方向に光軸が配置された第1撮像部と、第1撮像部の光軸方向に対して傾斜した方向に光軸が配置された複数の第1投影部とを設ける構成の例を示したが、本発明はこれに限られない。本発明では、図22に示す実施形態の第3変形例のように、第1測定部30に、基準面に対して垂直方向に光軸が配置された第1投影部32と、第1投影部32の光軸方向に対して傾斜した方向に光軸が配置された複数の第1撮像部31とを設けてもよい。この場合、第1投影部32にテレセントリック光学系321を設けてもよい。これにより、基準面に対して第1測定パターンが垂直に投影される。その結果、2次反射を抑制することができるので、2次縞が発生するのを抑制することが可能である。また、第1撮像部31は、上方からみて、第1投影部32の周囲を取り囲むように複数配置してもよい。また、複数の第1撮像部31は、投影中心(第1投影部32)から等距離の位置に、略等角度間隔で配列してもよい。これにより、複数の第1撮像部31により同時に撮像することによって、別個に撮像する場合に比べて、撮像時間を短縮することが可能である。つまり、撮像方向を増やしたとしても、撮像時間が増加するのを抑制することが可能である。
また、上記実施形態では、本発明の3次元測定装置を、基板を検査する外観検査装置に適用する例を示したが、本発明はこれに限られない。本発明は、異物検査装置、半田印刷検査装置および部品検査装置などのほかの3次元測定にも適用可能である。また、本発明は、基板を検査する以外の装置にも適用可能である。
また、上記実施形態では、第1測定部に4つの第1投影部が設けられている構成の例を示したが、本発明はこれに限られない。本発明では、第1測定部に4つ以外の単数または複数の第1投影部が設けられていてもよい。
また、上記実施形態では、第2撮像部がテレセントリック光学系を有し、第2投影部が光をテレセントリックに投影する構成の例を示したが、本発明はこれに限られない。本発明では、第2投影部からテレセントリックではない広がる光を投影してもよいし、第2撮像部がテレセントリック光学系を有していなくてもよい。
また、上記実施形態では、第2測定部の信頼度情報を高、中、低の3段階に分類する構成の例を示したが、本発明はこれに限られない。本発明では、第2測定部の信頼度情報を2段階または4段階以上に分類してもよい。また、第2測定部の信頼度情報を無段階の数値としてもよい。
また、上記実施形態では、説明の便宜上、制御装置(制御部)の制御処理を処理フローに沿って順番に処理を行うフロー駆動型のフローを用いて説明したが、本発明はこれに限られない。本発明では、制御部の処理を、イベント単位で処理を実行するイベント駆動型(イベントドリブン型)の処理により行ってもよい。この場合、完全なイベント駆動型で行ってもよいし、イベント駆動およびフロー駆動を組み合わせて行ってもよい。
30 第1測定部
31 第1撮像部
32 第1投影部
40 第2測定部
41 第2撮像部
42 第2投影部
50 制御装置(制御部)
100 外観検査装置(3次元測定装置)
110 基板(測定対象)
111 電子部品
411 テレセントリック光学系

Claims (12)

  1. 位相シフト法により3次元情報を測定する第1測定部と、
    光切断法により3次元情報を測定する第2測定部と、
    前記第1測定部および前記第2測定部の両方の測定結果に基づいて、測定対象の3次元情報を取得する制御部と、を備える、3次元測定装置。
  2. 前記第1測定部は、第1撮像部と、前記第1撮像部により撮像する第1測定パターンを投影する第1投影部とを含み、前記第1撮像部および前記第1投影部のうち一方は、基準面に対して垂直方向に光軸が配置され、前記第1撮像部および前記第1投影部のうち他方は、一方の光軸方向に対して傾斜した方向に光軸が配置されているとともに複数設けられており、
    前記第2測定部は、前記基準面の垂直方向とは傾斜した方向に光軸が配置され、テレセントリック光学系を有する第2撮像部と、前記基準面に対して前記第2撮像部の光軸が正反射した方向の位置に配置され、前記第2撮像部により撮像するライン状の第2測定パターンを投影する第2投影部と、を含む、請求項1に記載の3次元測定装置。
  3. 前記制御部は、前記第1測定部の測定に基づいて、各位置における高さを示す高さ情報、および、各位置における前記高さ情報の信頼度を示す信頼度情報を取得し、前記第2測定部の測定に基づいて、前記高さ情報および前記信頼度情報を取得するとともに、前記第1測定部の測定による前記高さ情報および前記信頼度情報と、前記第2測定部の測定による前記高さ情報および前記信頼度情報と、に基づいて、1つの前記高さ情報を取得するように構成されている、請求項1または2に記載の3次元測定装置。
  4. 前記第1測定部は、複数の方向から第1測定パターンを投影して3次元情報を測定するように構成されており、
    前記制御部は、前記第1測定部の測定に基づいて、複数の前記高さ情報および前記信頼度情報を取得するとともに、前記第1測定部の測定による複数の前記高さ情報および複数の前記信頼度情報と、前記第2測定部の測定による前記高さ情報および前記信頼度情報と、に基づいて、1つの前記高さ情報を取得するように構成されている、請求項3に記載の3次元測定装置。
  5. 前記制御部は、前記第2測定部により測定した前記信頼度情報の信頼度が低い前記高さ情報を、前記第1測定部により測定した前記高さ情報により補完するように構成されている、請求項4に記載の3次元測定装置。
  6. 前記制御部は、前記第1測定部の第1測定パターンを投影する方向が前記測定対象により影となると推定される場合、影となる方向からの測定結果を除外して、前記高さ情報を補完するように構成されている、請求項5に記載の3次元測定装置。
  7. 前記制御部は、前記第1測定部の複数の測定による輝度差に基づいて、各位置における前記信頼度情報を取得するように構成されている、請求項3〜6のいずれか1項に記載の3次元測定装置。
  8. 前記制御部は、前記第2測定部の測定による輝度値に基づいて、各位置における前記信頼度情報を取得するように構成されている、請求項3〜7のいずれか1項に記載の3次元測定装置。
  9. 前記制御部は、前記第1測定部の測定結果による突起形状を、前記第2測定部の測定結果に基づいてノイズであるか構造物であるかを判断するように構成されている、請求項1〜8のいずれか1項に記載の3次元測定装置。
  10. 前記制御部は、前記第1測定部による測定の前に、前記第2測定部により測定を行い、前記第2測定部の測定結果に基づいて、前記第1測定部の測定高さ位置を調整する制御を行うように構成されている、請求項1〜9のいずれか1項に記載の3次元測定装置。
  11. 前記制御部は、前記第1測定部による測定の前に、前記第2測定部により測定を行い、前記第2測定部の測定結果に基づいて、前記測定対象の平面位置情報を取得し、前記第1測定部による測定の平面位置を調整する制御を行うように構成されている、請求項1〜10のいずれか1項に記載の3次元測定装置。
  12. 前記測定対象は、電子部品が実装された基板である、請求項1〜11のいずれか1項に記載の3次元測定装置。
JP2020547739A 2018-09-27 2018-09-27 3次元測定装置 Active JP7174768B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2018/036029 WO2020065850A1 (ja) 2018-09-27 2018-09-27 3次元測定装置

Publications (2)

Publication Number Publication Date
JPWO2020065850A1 true JPWO2020065850A1 (ja) 2021-08-30
JP7174768B2 JP7174768B2 (ja) 2022-11-17

Family

ID=69952967

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2020547739A Active JP7174768B2 (ja) 2018-09-27 2018-09-27 3次元測定装置

Country Status (6)

Country Link
US (1) US11982522B2 (ja)
JP (1) JP7174768B2 (ja)
KR (1) KR102515369B1 (ja)
CN (1) CN112639395B (ja)
DE (1) DE112018008035T5 (ja)
WO (1) WO2020065850A1 (ja)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240042042A (ko) * 2021-09-01 2024-04-01 야마하하쓰도키 가부시키가이샤 워크 높이 계측 장치 및 이것을 사용한 실장 기판 검사 장치
TWI787107B (zh) * 2021-09-24 2022-12-11 盟立自動化股份有限公司 非接觸式曲面量測路徑規劃方法、非接觸式曲面量測方法及非接觸式曲面量測系統
TWI804128B (zh) * 2021-12-23 2023-06-01 國立臺灣師範大學 量測物體三維複合表面輪廓之方法與裝置
KR20240060825A (ko) * 2022-03-09 2024-05-08 야마하하쓰도키 가부시키가이샤 삼차원 계측용 연산 장치, 삼차원 계측용 프로그램, 기록 매체, 삼차원 계측 장치 및 삼차원 계측용 연산 방법
KR20240003079A (ko) 2022-06-30 2024-01-08 이석근 변형 목마형 유모차

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01173804A (ja) * 1987-12-28 1989-07-10 Sharp Corp 基板のパターン検査装置
JP2004144612A (ja) * 2002-10-24 2004-05-20 Ricoh Co Ltd 表面欠陥検査方法及びそれを用いた表面欠陥検査装置
JP2009097941A (ja) * 2007-10-16 2009-05-07 Nikon Corp 形状測定装置および表面状態測定装置
JP2012053015A (ja) * 2010-09-03 2012-03-15 Saki Corp:Kk 外観検査装置及び外観検査方法
JP2012141206A (ja) * 2010-12-28 2012-07-26 Canon Inc 三次元計測装置、三次元計測方法、およびプログラム
JP2016180645A (ja) * 2015-03-24 2016-10-13 株式会社小坂研究所 非接触式の表面形状測定装置
JP2017142188A (ja) * 2016-02-12 2017-08-17 Ckd株式会社 三次元計測装置
JP2018146521A (ja) * 2017-03-08 2018-09-20 株式会社リコー 計測装置、計測方法およびロボット

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2930746B2 (ja) * 1991-01-22 1999-08-03 株式会社豊田中央研究所 部品検査装置
JP2000193432A (ja) 1998-12-25 2000-07-14 Tani Denki Kogyo Kk 画像認識による計測方法および装置
US7525669B1 (en) 2004-07-09 2009-04-28 Mohsen Abdollahi High-speed, scanning phase-shifting profilometry using 2D CMOS sensor
JP5765651B2 (ja) * 2011-02-01 2015-08-19 Jukiオートメーションシステムズ株式会社 3次元測定装置
JP2013064644A (ja) 2011-09-16 2013-04-11 Nikon Corp 形状測定装置、形状測定方法、構造物製造システム及び構造物の製造方法
JP6116164B2 (ja) * 2012-09-11 2017-04-19 株式会社キーエンス 形状測定装置、形状測定方法および形状測定プログラム
JP6161276B2 (ja) * 2012-12-12 2017-07-12 キヤノン株式会社 測定装置、測定方法、及びプログラム
JP6238521B2 (ja) * 2012-12-19 2017-11-29 キヤノン株式会社 3次元計測装置およびその制御方法
JP5780659B2 (ja) 2013-06-13 2015-09-16 ヤマハ発動機株式会社 3次元形状測定装置
JP5633058B1 (ja) 2013-07-19 2014-12-03 株式会社三次元メディア 3次元計測装置及び3次元計測方法
JP2015045587A (ja) * 2013-08-28 2015-03-12 株式会社キーエンス 三次元画像処理装置、三次元画像処理装置の状態変化判定方法、三次元画像処理装置の状態変化判定プログラム及びコンピュータで読み取り可能な記録媒体並びに記録した機器
JP6184289B2 (ja) 2013-10-17 2017-08-23 株式会社キーエンス 三次元画像処理装置、三次元画像処理方法、三次元画像処理プログラム及びコンピュータで読み取り可能な記録媒体並びに記録した機器
JP6256249B2 (ja) 2014-08-08 2018-01-10 オムロン株式会社 計測装置、基板検査装置、及びその制御方法
WO2016166807A1 (ja) 2015-04-14 2016-10-20 ヤマハ発動機株式会社 外観検査装置および外観検査方法
JP6795993B2 (ja) * 2016-02-18 2020-12-02 株式会社ミツトヨ 形状測定システム、形状測定装置及び形状測定方法
JP6681743B2 (ja) * 2016-02-26 2020-04-15 株式会社キーエンス 画像検査装置、画像検査方法、画像検査プログラム及びコンピュータで読み取り可能な記録媒体並びに記録した機器
JP6846950B2 (ja) * 2017-03-03 2021-03-24 株式会社キーエンス ロボットシミュレーション装置、ロボットシミュレーション方法、ロボットシミュレーションプログラム及びコンピュータで読み取り可能な記録媒体並びに記録した機器

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01173804A (ja) * 1987-12-28 1989-07-10 Sharp Corp 基板のパターン検査装置
JP2004144612A (ja) * 2002-10-24 2004-05-20 Ricoh Co Ltd 表面欠陥検査方法及びそれを用いた表面欠陥検査装置
JP2009097941A (ja) * 2007-10-16 2009-05-07 Nikon Corp 形状測定装置および表面状態測定装置
JP2012053015A (ja) * 2010-09-03 2012-03-15 Saki Corp:Kk 外観検査装置及び外観検査方法
JP2012141206A (ja) * 2010-12-28 2012-07-26 Canon Inc 三次元計測装置、三次元計測方法、およびプログラム
JP2016180645A (ja) * 2015-03-24 2016-10-13 株式会社小坂研究所 非接触式の表面形状測定装置
JP2017142188A (ja) * 2016-02-12 2017-08-17 Ckd株式会社 三次元計測装置
JP2018146521A (ja) * 2017-03-08 2018-09-20 株式会社リコー 計測装置、計測方法およびロボット

Also Published As

Publication number Publication date
CN112639395A (zh) 2021-04-09
DE112018008035T5 (de) 2021-06-24
US20210348918A1 (en) 2021-11-11
US11982522B2 (en) 2024-05-14
KR102515369B1 (ko) 2023-03-29
KR20210016612A (ko) 2021-02-16
JP7174768B2 (ja) 2022-11-17
CN112639395B (zh) 2023-05-23
WO2020065850A1 (ja) 2020-04-02

Similar Documents

Publication Publication Date Title
JP7174768B2 (ja) 3次元測定装置
US10346963B2 (en) Point cloud merging from multiple cameras and sources in three-dimensional profilometry
US8243285B2 (en) Inspection system and method
KR100927429B1 (ko) 소자 배치를 검사하는 픽 앤드 플레이스 머신
EP0563829B1 (en) Device for inspecting printed cream solder
US20120327215A1 (en) High speed optical sensor inspection system
JP5109633B2 (ja) 測定方法及び検査方法並びに測定装置及び検査装置
KR20140145541A (ko) 3차원 형상 측정장치
JP2003279329A (ja) 三次元計測装置
KR101659302B1 (ko) 3차원 형상 측정장치
TWI463133B (zh) 基板檢查裝置
JP4877100B2 (ja) 実装基板の検査装置および検査方法
US6518997B1 (en) Grid array inspection system and method
KR101144749B1 (ko) 소자의 불량 검사방법
JP2019100753A (ja) プリント基板検査装置及びプリント基板検査方法
JP3722608B2 (ja) 外観検査装置
JP2009139285A (ja) 半田ボール検査装置、及びその検査方法、並びに形状検査装置
JP2002286427A (ja) はんだ印刷検査装置
JP2001349710A (ja) 三次元計測装置
Sadaghiani et al. Recovery of oversaturated pixels in a low-cost solder paste inspection setup
US20240200934A1 (en) Measurement device and board inspection device
WO2023032095A1 (ja) ワーク高さ計測装置、及びこれを用いた実装基板検査装置
Chu et al. Solder paste inspection by special led lighting for SMT manufacturing of printed circuit boards
JPH02102405A (ja) 半田付け接合部の外観検査装置
JPH03155700A (ja) 表面実装部品のリード端子の不良検出方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210219

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220118

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220307

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220628

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220805

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20221101

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20221107

R150 Certificate of patent or registration of utility model

Ref document number: 7174768

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150