JP2003522347A - ステレオ画像による自動検査システム - Google Patents

ステレオ画像による自動検査システム

Info

Publication number
JP2003522347A
JP2003522347A JP2000590448A JP2000590448A JP2003522347A JP 2003522347 A JP2003522347 A JP 2003522347A JP 2000590448 A JP2000590448 A JP 2000590448A JP 2000590448 A JP2000590448 A JP 2000590448A JP 2003522347 A JP2003522347 A JP 2003522347A
Authority
JP
Japan
Prior art keywords
image
article
camera
feature
height
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2000590448A
Other languages
English (en)
Inventor
ジャクソン,クリストファー,ビー.
Original Assignee
サイバーオプティクス コーポレーション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by サイバーオプティクス コーポレーション filed Critical サイバーオプティクス コーポレーション
Publication of JP2003522347A publication Critical patent/JP2003522347A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • G06T7/001Industrial image inspection using an image reference approach
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/239Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05KPRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
    • H05K13/00Apparatus or processes specially adapted for manufacturing or adjusting assemblages of electric components
    • H05K13/08Monitoring manufacture of assemblages
    • H05K13/081Integration of optical monitoring devices in assembly lines; Processes using optical monitoring devices specially adapted for controlling devices or machines in assembly lines
    • H05K13/0815Controlling of component placement on the substrate during or after manufacturing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • G06T2207/10012Stereo images
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20076Probabilistic image processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30141Printed circuit board [PCB]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20Image signal generators
    • H04N13/204Image signal generators using stereoscopic image cameras
    • H04N13/246Calibration of cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074Stereoscopic image analysis
    • H04N2013/0081Depth or disparity estimation from stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Operations Research (AREA)
  • Manufacturing & Machinery (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

(57)【要約】 ステレオ画像による自動検査システムを提供する。 【解決手段】本発明の1つの実施例では、2つのバンクの固定されたアレイカメラ(22,24)がタイル状ステレオ画像(I1,I2,I3)を供給し、電子回路がタイル状ステレオ画像をモザイク画像に組み立てる。モザイク画像は、2組のステレオ画像から導出される高さ情報を含み、また実際の基板(10)により一層適合するように、画像内の基準点の関数として補正される。SAMモデルが基準点を位置決めするのに用いられるのが好ましい。基板上の部品に対応する再構築SAMモデルは、ある特定様式の部品が見出されることが期待される探査領域内で適用される。スキュー角度および確率ばかりでなく、探査領域内の部品の最適適合位置までもが計算される。最適適合位置は、マンハノボリス距離および残留誤差が最適化される場所である。最適適合位置が計算されると、不適切に位置決めされた部品、および部品の不存在などを明らかにするために、最適適合位置が公差と比較される。

Description

【発明の詳細な説明】
【0001】 発明の分野 本発明は、物品の検査装置および検査方法、特に電子部品の組立などのプリ
ント回路基板上への電子部品組立分野に関する。
【0002】 発明の背景 本発明はプリント回路基板などの製造された物品の検査に関する。これらは、
本発明の主要かつ非常に重要な用途であり、主に本発明を説明するために用いら
れるが、以下に示されるように、本発明はプリント回路基板の検査以外にもより
広い用途に用いられる。プリント回路基板の製造では、合成組成物の固い板が基
板として用いられ、その基板上に、銅製の導電体が、従来のフォトレジストおよ
びエッチング処理によって一つのパターンに形成される。
【0003】 コンデンサおよび抵抗などの電子部品が配置されるべき場所、および一般的に
は、その導電体に接続されるべき多端子を有するプロセッサチップなどが配置さ
れるべき場所には、シルクスクリーン印刷によって、半田ペーストが前記銅製の
導電体に施される。電子部品および端子がペーストに張り付き、その後、基板、
および配置された電子部品とチップがオーブン内を通過させられ、そこで、半田
ペーストが電子部品およびチップの端子にしっかりと半田付けされる。これらの
基板が2つの面を有するときは、そのプロセスは第2の面についても繰り返され
る。
【0004】 これらの基板は非常に複雑で小型にされることが可能で、1つの基板が莫大な
数の電子部品、およびそれに伴なう莫大な数の電気的結合(接続)を有すること
がある。プリント回路基板は、現在では大量に製造されているが、それら自体が
高価であり、また高価な装置に用いられるので、プリント基板が損失を最小限に
して、正確に製造されることが重要である。遺憾ながら、現在有効な製造手法で
は、(不合格による)損失は、未だに他の産業におけるよりも多い。
【0005】 プリント回路基板上の典型的な不良(fault)は、基板上の部品配置の不正確
さを含み、そのことは、電子部品が基板内で電気的に正しく接続されないこと、
あるいは電気的接続が形成されないこと、または電気的接続不備の原因となる不
充分なペーストの付着、あるいは短絡の原因となるペーストの過多などが存在す
ることを意味する。
【0006】 この産業では、信頼できる物品を供給することが非常に困難なので、基板の製
造の正確さをチェックするために、広範囲な検査が必要である。現在の検査装置
は、非常に高価であるか、非常に動作が遅いか、または非常に不正確であり、あ
るいはこれらの短所の組合せを欠点として有する。したがって、正確な検査装置
が強く望まれており、そのような装置が、現存の装置よりも動作が速く、および
/あるいは廉価であるならばなおさら結構である。
【0007】 現在入手可能な装置およびプリント回路基板の検査に用いられる方法に関して
、最も基本的な方法は手動のものである。検査技手は、単純に目視で前述の不良
を検出する。技手は、補助のためにマスクを持ち、それを基板上に置いて、一区
切りずつ、電子部品が正しく配置され、電気的に接続されていること、および電
気的短絡がないことを確認する。手動検査は、実際に非常に正確であることがで
きるが、それに伴なう問題は、技手が交替した後の最初の間は正確であるが、時
間が経つにつれて、その正確さが低下する傾向があることである。また、それは
非常に遅い方法であり、労働集約的で経費がかかる。
【0008】 他の方法では、テレセントリックレンズを備え、平行光線で画像を観察するテ
レセントリックカメラを用いて基板を走査し、基板の一部分を撮影し、さらにソ
フトウェアを用いて画像を分析する。カメラおよび基板は相対的に移動可能なの
で、基板のあらゆる所望の部分を観察することができる。1つの事例では、カメ
ラは固定ガントリー上に設置され、基板がカメラを通過して動かされることがで
きる。他の事例では、基板が固定され、カメラが動かされることができる。
【0009】 テレセントリックカメラを用いる場合、視差による問題を解決することができ
るが、カメラが2方向でのみしか画像を観察できないという、配置に伴なう短所
がある。そのことは、基板が厳密に平坦である限りは問題ではないが、一般的に
は、これらの基板は、名目上は平坦であるけれども、厳密に平坦にすることは、
不可能ではないにしても、様々な理由によって達成が難しい。その方法を正確に
するのに必要な程度まで基板を平坦に保つために、種々の工程が用いられるが、
このことは容易ではない。実際に、基板は、しばしば、結果を受け入れ可能にす
るのに充分平坦に保つように努力しながら固定される。この時、当該基板の非平
坦の程度(すなわち、撓みの程度)の大きさは、ミクロン単位で測定されるが、
たとえそうであるとしても、このようなわずかな程度の基板の撓みが、検査の精
度に重大な影響を及ぼすことがあるということに留意しなければならない。
【0010】 従来の自動化された方法もまた、グレイスケールモデルを、検査中の部品に正
確に一致させることができないことに悩まされてきた。このようなモデルは形状
、色彩、照明などの変動に対して補正することができず、このことが適正に配置
された部品を誤って位置決めされていると識別(すなわち、誤判定:false call
s)する多数の例をもたらした。
【0011】 前述の方法の他の短所は、その装置が高価であり、高価で精密なX―Yガント
リーを含むことである。この方法はまた、動作が遅い傾向があり、カメラによっ
て観察される基板の各部分の精密な機械的レジストレーション(一致:registra
tion)を要求する。本発明は、低い「誤判断」率を可能にし、しかも高価な装置
を用いることを必要としないで、既知の方法よりもずっと正確な検査装置を提供
する。
【0012】 発明の概要 本発明の1つの実施例では、検査されようとしている表面あるいは対象物を観
察するような、少なくとも2つの観察光線を作り出す手段を含む検査装置が提供
される。これらの光線は、異なる角度で表面あるいは対象物を観察し、1つの共
通の虚あるいは実存の基準点を観察するように配置されている。この手段によっ
て、基準点からその点までの距離が計算されることができる。また、この手段に
よって、プリント回路基板の観察に適用される際に特別な長所を有する広範囲の
フォトモザイクが作り出される。
【0013】 前記観察光線は、従来の一般的なCCTVカメラで作られるように、円錐状の
性質であるのが好ましい。この装置によって、装置の費用を最低限にとどめるこ
とができる。2つの異なる角度で表面を観察し、基準点を供給することによって
、xおよびy座標ばかりでなく、距離あるいは高さの座標を得ることができ、プ
リント回路基板の場合には、これらが基板のプロファイル(profile)を示す表
示を与える。基板は、名目上は平坦であるけれども、例えばオーブン内での加熱
中における熱膨張の結果として、通常は僅かに撓み、完全に平坦ではなくなると
いう理由で、その撓みは肉眼では見られないかも知れないが、実際には平坦であ
ることは稀である。この撓みはまた、基板が垂れ下がってしまうような低い機械
的強度であることや、単なる製造公差の結果としても起こる。
【0014】 画像形成が繰り返され、充分な基準点が供給されるか、または存在すると、連
続的な画像形成によって、基板表面のプロファイルの完全な写真(映像)が作り
上げられることができる。基板のプロファイルは検査の正確さに影響するので(
従来技術において、複雑な、締付けを用いる理由である)、基板のプロファイル
が知られると、装置は、例えばソフトウェア処理において、これを考慮に入れ、
より正確な検査結果を供給することができる。
【0015】 本発明の装置では、このプロファイル形成(取得)は、装置の処理手段に提供
される。基板を固定するための高価な装置、あるいは高価なガントリー(これも
また基板を固定する)を用いること、または本発明で用いられることができるカ
メラよりも高価なテレセントリックカメラを用いることなしに、改良された結果
が得られる。
【0016】 光線は、適当な角度に調整された、約760×575ピクセル程度の解像度の
数対の低品位CCTVカメラによって供給されるか、または約1024×102
4ピクセル程度の解像度の一台の高品位カメラおよびビーム(光線)スプリット
光学装置から供給されることができる。後者においては、一台のカメラが、レジ
ストレーション(画像の正確な一致性)を高めるような2つの重複した画像を取
得する。
【0017】 プリント回路基板が、「基準(fiducial)」点と称される基板上の基準点、お
よびそれを通して基板(検査後の)を貫通する電気的接続が形成される「バイア
(via)」と呼ばれるアパーチャを有することはよくあることである。基準点、
バイアス、および類似のものは、基板の全体的なプロファイルを作り上げるため
の基準点として用いられることができる。このプロファイルが考慮されると、検
査処理中の基板上の部品およびチップの位置の正確さが高められる。
【0018】 本発明の1つの形態では、検査されようとしている基板は、単純な構造の1対
のコンベヤベルト上に載せられ、異なる角度から基板を撮像するために、コンベ
ヤベルト上に対をなして配置された1組のカメラバンクを通過させられる。典型
的には、カメラは、互いに約3度の角度に調整された、異なる軸上から基板を観
察する。コンベヤベルトは基板を段階的に搬送してカメラを通過させる。各搬送
段階で、それぞれのカメラが基板の部分画像を捉え、それぞれのカメラ対からの
画像が重なり合い、1つまたは複数の同じ基準点を正確に一致させるので、同一
基板の電子走査による複数画像が「合成され(つなぎ合わせられ)」る。換言す
れば、それらが正確な一致(レジストレーション)状態に位置決めされることが
できる。同じことが、隣り合って配置されたカメラ対の画像でも行なわれること
ができる。
【0019】 その結果、基板の完全な画像が作り上げられ、その画像が、基板がどのように
見えるべきかを示すモデル画像と比較される。そして、部品が位置決めされ、モ
デルと比較され、制限範囲内である限りは、検査は受け入れ可能な製品であるこ
とを示すであろう。本発明の特別な長所は、例えば、モデルと比較される基板の
直線的歪み(linear distortion)の結果として生ずる基準点の直線的ずれを考
慮することに加えて、装置が、光学的技術によって、基板表面上の点の高さのず
れをも考慮し、改善された結果をもたらすことである。例えば、テレセントリッ
クカメラを用いる従来の方法では、高さのずれを検出することができず、その結
果基板を不合格とするのに対し、本発明は、高さのずれの検出を考慮することで
、基板をよく合格させるであろう。
【0020】 本発明では、SAMモデルと呼ばれる、部品あるいは基準点の統計的なモデル
を採用することが好ましい。SAMモデルは、部品およびその極く近傍の色、形
、照明などの変動性を統合する。SAMモデルの第1の用法は画像合成処理で実
行されるのが好ましく、その場合、基準点のSAMモデルが、モザイク画像を正
確に合成するために、基準点を正確に位置決めすることを助ける。SAMモデル
の第2の用法はプリント回路基板の検査中に実行されるのが好ましく、その場合
は、特定の部品のための探査領域が限られ、探査領域内で見出されると期待され
る部品に対応するSAMモデルが、探査領域内の各点に適用される。探査領域内
の各点で、探査領域のその部分の特定の変化を考慮するためにSAMモデルが再
構築され、再構築されたSAMモデルが探査領域内の各点に適用される。探査領
域内の各点で、一致の程度が計算され、一致の程度が最適化された点が基板上の
部品の実際の位置を表わす最適適合点として用いられる。
【0021】 したがって、本発明は、特にプリント回路基板検査の分野で大きな有用性を有
することが見出される。しかしながら、本発明はプリント回基板産業の内でも外
でも用いられることが言及されるべきである。プリント回路基板産業内での1例
は、この発明装置が、半田(ろう)使用の検査の前後に、基板上の半田、あるい
は半田パッドの高さを検出することによって、プリント回路基板上の半田、ある
いは半田ペーストの量を計算するために用いられることができることである。
【0022】 本発明は特に、名目上は平坦だが、実際には完全に平坦ではないような表面の
ステレオ画像検査において新規性を有する。
【0023】 図面の簡単な説明 図1Aは、本発明による装置によって検査されようとしているプリント回路基
板の部分を示し、 図1Bは、基板が垂直方向に、どのように歪み、またそれがどのように部品の
横方向移動をもたらすかを示す拡大図であり、 図2は、本発明の第1の実施例による装置の概念的側面図であり、 図3は、図2に示される本発明の実施例の光学系を示す拡大側面図であり、 図4は、プリント回路基板が歪まされる時に作用する、光学的影響を示す拡大
斜視図であり、 図5は、図4の2つのカメラによって観察したときの、基準点の画像の間隔を
示し、 図6は本発明の別の実施例を示す、図2と類似の図であり、 図7は本発明の方法のフローチャートであり、 図8は本発明のシステムの全体的なブロック図であり、 図9はSAMモデルの概略図である。
【0024】 好ましい実例の詳細な説明 本発明の実施例が、添付の図面を参照して、説明されるであろう。
【0025】 図1Aを参照すると、検査されようとしているプリント回路基板は符号10で
示され、本例では、その基板上にプロセッシングチップ12、部品14、および
プリント回路リード線16を有するように示される。基本部品が非常に小さく、
基板上に非常にぎっしりと詰められることができることは注目されるべきである
。一般的には、基板の両面にそれらの部品要素が取り付けられている。
【0026】 本発明の目的は、様々な要素を基板上に正しく配置していることがチェックで
きる基板の検査装置を提供することである。このことは、後述されるような閉回
路テレビジョンカメラ装置で走査することによって実行される。
【0027】 図2および3を参照すると、これらの図に概略的に示された走査用の装置は、
その間に基板10を支えることができる距離だけ離れた、1対のコンベヤベルト
18および20を有する。コンベヤ18と20との間隔は、異なる大きさの基板
に適応して調整されることができる。
【0028】 検査カメラは、基板10の垂直上方に位置決めされ、図2の符号22および2
4で示されるように2つ1組で配置される。基板がコンベヤ18および20によ
って運ばれる、矢印26で示される搬送方向に対して横方向に並べられた一群の
カメラの対A、B、CおよびDなどがある。コンベヤは段階(間欠)的に動作す
るように調整されるので、基板10はカメラの視野を段階的に通過し、矢印26
の方向に存在し、また図3では矢印28で示される方向(矢印26と直角の方向
)に平行に並んで配置されるストリップに、連続的に撮影される。これによって
、カメラは基板のすべてを撮影するように配置され、基板の写真が、カメラの出
力が送信される電子コンピュータ装置32のディスプレイスクリーン30上に再
構築されることができる。
【0029】 コンピュータ装置32には、プリント回路基板のモデルがあらかじめ読み込ま
れるので、コンピュータ装置はカメラが撮影したものと前記モデルの細部とを比
較し、基板が製造品質を満たすか、あるいは不合格とすべきかを検査することが
できる。比較は、主には、基板上の各種要素が正しく、正確に位置決めされてい
ることを保証するが、回路の短絡あるいは不完全な電気的接続をそれぞれ意味す
る可能性のある、半田の過剰あるいは不足などの項目をチェックすることもでき
る。以下にそのプロセスを詳述する。
【0030】 図1Aに戻って、長方形および重複領域I1およびI2は、検査プロセスの第1
段階で、それぞれのカメラ22および24によって観察された画像を示す。図2
は、前記画像が、互いに角度Xをなしている光軸の別々の発散(divergent)光
線36および38によって形成されることを示す。前述の角度は3度程度である
けれども、その実質的な効果は、カメラ22および24が基板をステレオ画像技
法で観察し、画像I1およびI2が重複する程度を調整することによって、これら
が電子的に処理される時に、画像I1およびI2を「合成する(つなぎ合わせる:
stitching)」ことによって、スクリーン30上に基板のモザイク画像を正確に
再生成することができるが、モザイク画像内の情報のステレオ性は保存されるこ
とである。このことは、基板10上にあるバイア(孔:via)40および42の
ような基準点に関連し、およびこれもまた基板10上にある44のような標準(
点)に対するこれらの位置に関連付ける情報で、コンピュータ装置32をあらか
じめプログラミングすることによって実行される。
【0031】 画像I1およびI2が基板の縦方向で重なり合うことが考慮されるならば、横方
向に並んだカメラからの画像もまた画像I3で示されるように横方向で重なり合
い、この方向でも合成されるので、基板10の完全なモザイク写真が電子機器3
2によって構築されることができ、モデル入力34との比較が正確に行なわれる
ことができる。縦および横方向でのカメラのあらゆる調整は、画像ファシリティ
ー(facility)の合成を提供するように適用されることができる。
【0032】 それぞれ対をなす2つのカメラ22および24を用いて、基板を立体的に観察
することによって、基板10のあらゆる外面の平坦性(すなわち、撓み)のため
に、比較を行なうことができる。前述のような外面の平坦性あるいは歪みは、本
書に述べられた理由によって起こる。説明のために、図4には、実際に歪ませら
れた基板10の形状を示し、また一方、符号10Aが、(実際にも稀に存在する
)基板10の最適な平坦構造を示す。
【0033】 ここで、光路36および38について検討し、例えば基板10上のバイア基準
点40について考慮すると、実際には、コンピュータシステムが前記点が位置決
めされていると予測(期待)した(平面10A上の)場所から下方に、点40が
ずれていることが分かるであろう。
【0034】 したがって、図5では、カメラ22および24からの出力は、基板10がカメ
ラから正しい距離だけ離れているならば、カメラ22および24が、平面10内
に存在すべき画像40Aおよび40Bを期待しているところから、互いに相対的
にずれた2つの画像40Aおよび40Bを示す。
【0035】 画像40Aおよび40B間の間隔Sが計算されると、これはさらに実際のバイ
ア40のずれの程度を与え、したがって、高さの補償係数が供給されることがで
きる。この高さ補償係数が比較に含まれない場合は、擬似(spurious)結果が供
給される可能性があり、このことは図1Bを参照して説明される。図1Bは、基
板が理想的に存在すると期待される位置50での拡大側面図であり、部品は符号
52で示される。部品は54の幅を有する。検査用電子機器は、図示される位置
に存在するはずであり、かつ幅54を示す部品52を捜している。しかしながら
、基板が、56で示されるように歪まされている場合は、部品52は、実際には
下方にずれているばかりでなく、横方向にも距離Dだけ移動されているであろう
【0036】 また電子機器がその歪みの結果生じた基板の外形を補正しない場合には、位置
4で観察している電子機器が見るのは部品52の一部分のみであり、したがって
電子機器は、部品4は「位置ずれ」しているという判定を下すであろう。しかし
ながら、高さあるいは歪みの補正および外形形状が考慮されるならば、電子機器
は基板の下方への歪みおよび部品52の横方向の移動が存在することを計算し、
部品52を不合格にする(排除する)のではなく、むしろ位置58にあると認識
するであろう。タイル単位での区分的線形適合(piecewise linear fit)が好ま
しいけれども、他の方法が本発明と共に用いられることができる。
【0037】 したがって、基板の立体観察による検査は、既知の方法に用いられるような高
価な装置を必要とすることなく、装置の改良された性能を提供する。
【0038】 ここに説明される実施例では、複数対の比較的に廉価で、比較的に低分解能の
CCTVカメラが用いられ、検査中に基板を機械的に平坦にしようと試みる必要
は全くない。典型的なカメラの解像度は760×575ピクセル(画素)である
。他の実施例でも、基板を機械的に平坦にする必要はないが、カメラの各対に代
わって、高解像度であるが、各段階で2つのステレオ画像を供給するために、ビ
ームをスプリット(分割)するように調整された一台のカメラを用いることがで
きる。このような配置が図6に示される。動作の方法は、他の点では、既に説明
された方法と同じである。
【0039】 図6において、高解像度カメラ60は、光線(ビーム)を2つの同等で、かつ
互いに反対方向に指向される光線66および68に分割する光分割プリズム64
に入射する観察光線62を有する。これらのステレオ光線66および68は、そ
れぞれ鏡70および72に入射し、結果として、光線36および38が実行した
のと同じ方法で、基板10を光学的に観察するステレオ入射光線74および76
を生成する。この配列の長所は、光線74および76の双方が同じカメラによっ
て生成されること、そしてステレオ画像タイルのレジストレーションおよび情報
の処理がわずかに類似していることである。
【0040】 画像が、基板上の基準点を観察することによって合成されることは前に詳述さ
れた。これらの基準点は実在の物であるが、本システムはまた、例えば光の点に
よって供給される虚の基準点で作動するようにされることもできる。図6は、ペ
ンシル基準光線78および80が、カメラ光線と同じ光学系を通るが、共通点8
2に照射して基準点を形成するように調整された、1つの可能な配置を示す。基
板10が、図4に関して説明されたように歪まされるか、曲げられるかした場合
には、基準点の観察は、図5に示されるのと同じ方法で、2つの画像を作り出す
であろう。本発明は、高価なガントリーXY装置、あるいはテレセントリックカ
メラや、基板を平坦に固定するための高価な組み込み装置を採用する必要なしに
、プリント回路基板のような表面および対象物の正確な高速検査を可能にする装
置および方法を提供する。
【0041】 もちろん、本発明は本書に示される以外の広範な用途を有する。1つの例にお
いては、ステレオ観察は、他の複数の点を観察して、その点における半田の量(
体積)を表わす信号を供給するために用いられることができる。確かに、画像領
域I1およびI2を観察すること、そしてこれらを40および42のような基準点
と関連付けること、さらに引き続いて、正確な画像(描写)を供給するために画
像を合成することなどの概念は、観察光線が発散されて重なり合う限りは、たと
え前記観察光線が平行に調整されるとしても、新しい観点(特徴)を構成する。
【0042】 本発明はまた、波長が変動する電磁放射を用いて実現されることもできる。X
線源がカメラに代わり、適当なX線受信器が観察される物品の画像を記録するた
めに採用される。X線の実施例に追加するハードウェアは、本書に述べられたの
と同じ機能を果たすであろう。実際には、物品およびリニア検出器が相対的に移
動している間に、その物品の画像がラインごとに形成されるような場合、この物
品のライン走査画像でさえも、本発明の方法および装置によって得られることが
期待される。本発明のライン走査の実施例では、リニア検出器から集められた一
連の出力が、物品の単一画像を供給するために必要であり、リニア検出器から集
められる他の一連の出力は、モザイク画像を構成するために必要である。
【0043】 以下の記述は図7に関し、統計的外形(外観)モデリング(statistical appe
arance modeling)処理が、本発明の好ましい実施例のモザイク画像と共にどの
ように用いられるかをより詳細に理解するのに有用である。部品位置の厳密で正
確な測定は、部品が組み込まれる表面(基板)の形状を確定することに依存し、
このことは曲がった表面上の点間の通路長さ距離を正確に考慮するため、および
好ましい実施例における画像装置内の非テレセントリック光学系に用いることに
よって生じる誤差を抑えるために必要とされる。
【0044】 ボックス302で、タイル状の画像がカメラ対によって取得される。ボックス
304で、対となる双方のステレオ画像内に見える基準点の位置が確定される。
各ステレオ画像中の基準点の測定位置間の場所的不一致、および較正プロセス中
に取得されるシステム内のすべてのカメラの位置を示す測定値によって、システ
ムは、基準点と当該基準点を撮像したカメラ間の距離を確定することができる。
この距離は、システム較正中に確定される基準平面上の基準点の高さを確定する
ために用いられる。処理能力の限界、および物品を生産する製造プロセスのサイ
クルタイム内でそのシステムが稼動する必要性によって、この高さ測定がなされ
る点の数を制限することが必要となる。そのために、物品の基板の全表面の、ま
ばらに分布された高さ地図が形成される。
【0045】 基板の3次元形状の完全な表現(記述)を作り出すために、高さ地図上の複数
の点の間を補間(内挿)する必要がある。以下に示される種々の数学的モデルが
高さ地図データに課せられることができる。
【0046】 1. 基板がコンベヤシステムのレールの間に垂れ下ってしまったと推定され
る場合の「撓み(たるみ)」。 基板の表面の高さは、 z(x,y)=ax2+bx+c によって定義されるので、基板の表面はxに関して唯一の二次式である。助変数
{a,b,c}は、最小自乗法で、n個の測定された基準点(xi,yi,zi
(1≦i≦n)から決定され、このモデルを高さ地図に適合させる。
【0047】 2. 基板が充分に厚くて曲がらず、したがって比較的に平坦であり、補正へ
の影響が板(面)の厚さと傾斜のみに依存する場合の「厚さ/傾斜」。 この値は、 ax+by+cz+d=0 によって与えられる。助変数{a,b,c,d}は、ここでも、測定された基準
点(xi,yi,zi)(1≦i≦n)から最小自乗法で決定され、このモデルを
高さ地図に適合させる。
【0048】 3. 基板が同時に多方向に撓まされたと考えられる場合の「ウォープ(撓曲
)」。 ここでは、基準点の測定値(xi,yi,zi)(1≦i≦n)は、「薄い板の
細片」として知られる補間(内挿)面を構成するために用いられる。薄い板の細
片は、点(xi,yi)での高さziに正確に一致するように「曲げられる」曲げ
やすい材料のモデルを用いる。そのことによって板を曲げるために要求される概
念的(conceptual)エネルギーの総量が最小化される。その結果、測定された基
準点(すなわち、zi=f(xi,yi))を補間する連続表面z=f(x,y)
が高さ地図に一致させられる。
【0049】 画像取得プロセスによって決定される列の重なり合い内に基準点が見出される
か、あるいは列の重り合いが有効な基準点の位置から決定されるか、しなければ
ならない。基準点の位置は、多数の方法で決定されることができるが、基準点の
SAMモデルを採用することが好ましい。1つの方法は、使用者が適切な候補で
ある基準点の座標を定めるような、サンプル画像を使用することである。第2の
方法は、適当な基準点の位置を決定する装置(article:たとえば、CADやゲ
ルバー:Gerber)用の設計情報を用いることである。第3の方法は、他の画像処
理および分析アルゴリズム(例えば、ホフトランスフォーム:Hough Transform
)を用いて物品の画像を分析し、特定の特徴的形状の対象物の位置を定義するこ
とである。
【0050】 完全な物品を取得することは不可能な場合があるので、「完全な(golden)」
物品が基準点の位置を決定するために所望されないことは1つの利点である。し
かしながら、物品のための設計情報が利用可能ならば、基準点の実際の位置をそ
の予測(期待)された位置と比較することによって、より大きな精密さと正確さ
が得られることができる。
【0051】 より大きな物品の画像データを取得するために、ステレオ重複タイルが合成さ
れてモザイク画像が形成されるが、その場合は、物品あるいは画像装置アレイを
移動する必要がある。画像レジストレーションプロセスは、前述の高さ地図作成
プロセスと同時に行なわれる。この方法では、高さおよび移動修正されたモザイ
ク画像を形成するために、複数対のステレオ画像タイルの多数の列のモザイク画
像が集結される。モザイク画像が作り出される全プロセスは「合成(つなぎ合わ
せ)」と呼ばれる。
【0052】 基板のトポロジー(topology)の厳密な数学的画像を確定し、かつ不正確な機
械の影響によって画像取得プロセスに導入される誤差を処理し終ったならば、あ
る特徴(例えば、部品)の位置を正確に測定することが実行可能になる。
【0053】 物品の基板上に組み込まれる部品は、ボックス308に示されるように、統計
的外形モデルを用いて位置決めされる。統計的外形モデル化(SAM)を用いる
ことは、部品存在の非常に確かな評価、および部品位置の非常に正確で繰り返し
可能な評価を、結果としてもたらす。典型的にはプリント回路基板上に共通して
見出される基準目印に基づいて、物品の座標システムに関する部品の位置を測定
することが目的である。この検査手順は、まず、これらの基準目印の位置を検出
、測定し、それからこれらの測定された位置から座標システムを作り出すことを
含む(ボックス306)。基準目印の検出および位置測定はSAMを用いて実行
されるが、他の画像分析方法も本発明の範囲内である。基板は画像形成装置アレ
イおよび製造プロセスに関連する通常の公差に基づいて、物品の位置決めの結果
による誤差の影響を受ける(これらの誤差は基板上にプリント/エッチングされ
たパターンの歪みという結果をもたらす)。
【0054】 ボックス306で、モザイク画像中の物品の補正された座標システムを確定し
終ったならば、ボックス308から312で、検査されるべきすべての部品が検
出され、それらの位置が測定される。各種類の部品のために、相応のSAMモデ
ル、および通過されると思われる部品の検査のために充足されなければならない
合格基準リストが存在する。基準は、これらに限定はされないが、x、y、スキ
ュー角度の公差、および検査中の部品が、その関連SAMモデルによってどのよ
うに記述されるべきかの尺度(適合性の確率として表わされる)を含む。
【0055】 基板上のそれらの位置を正確に確定するために、目印および部品の位置の測定
では、基準平面に対するそれらの高さを考慮しなければならない。部品の位置を
検出し、測定するのにSAMモデルが用いられるようにするために、ボックス3
08に示されるように、モザイク画像のある角度範囲で、前記部品あるいは特徴
が予測される場所の付近に、部品あるいは特徴に相応するモデルが適用される。
ボックス310で、位置決めプロセスは、限られた探索範囲内のすべての点でS
AMモデルと特徴間の対応を評価し、SAMがその探索範囲内のデータを最高に
説明するような最適適合点(モザイク画像内の情報の各ステレオ画像の組から1
つずつの)を確定する。このプロセスは、最適適合x,y座標、スキュー角度、
およびSAMモデルが部品を適当に記述した確率を選出(return)する。
【0056】 合成プロセスにおいて、高さ測定が基準面に関して計算されることを可能にす
るように、最適適合点のx、y座標間の不一致によって、画像装置からの部品表
面の距離が計算される。そしてこの高さ測定値は、ボックス312で、基板上の
部品の表面の位置の突起の高さ補正座標を計算するために用いられる。ボックス
314で、訂正されたx、y、スキュー角度、および確率の測定値が、この様式
の部品のための受入基準に対して検査され、これらの測定値が指定された受入基
準内であれば、この部品の検査は合格となる。しかしながら、部品が受入基準か
ら外れていることを検査が示すと、基板は、廃棄されるか、再加工の予定に入れ
られるか、あるいはオペレータに対して適当な警告が与えられる(ボックス31
6)。
【0057】 本発明の他の実施例では、CADから得られる部品の高さ評価と他の部品の設
計情報とを組み合わせることによって、部品のための補正された位置が、部品が
写されている1つのステレオ画像から得られる最適適合位置から計算されること
ができる。
【0058】 システムの全体的なブロック図が図8に示される。プリント回路基板402は
コンベヤベルト400上に静止している。コンベヤベルト400は、コンピュー
タ406からの命令に基づいて作動するモータおよびモータドライブ404によ
って駆動される。コンピュータ406は標準設計のマルチプロセッサコンピュー
タであり、2群(バンク)のビデオカメラ408、410からの画像を収集して
デジタル化するための回路、およびキーボード、マウス、スクリーンを含むマン
マシン・インタフェース412を含む。コンピュータ406は+/−0.5mm
の精度で基板402の動きを制御し、そのような方法で画像を収集するために基
板を位置決めする。コンピュータ406はまた、バンク408、410から基板
402の部分画像を取得するように指令する。発光体414は画像取得のための
照明を提供する。
【0059】 図9に示されるSAMモデル500は、形、色、照明、表面パターンなどの適
正な変動性を適当に考慮することを可能にする。このことによって、補正された
タイプの特徴があるかないかを正確に判断し、あるいはそれが物品上のどこにあ
るかを正確に評価する。SAMモデル500は、対象物の画像中の全ての点(ピ
クセル)の強度値を記述し、また各点の強度がどのようにして他の全ての点の強
度に関して値を変化することができるかを示す。SAMの使用には2つの異なる
段階がある。
【0060】 第1の段階は、502〜508で示されるような、同じ様式の様々な特徴の画
像を分析することによるSAMモデルの構築を含み、ここでは任意の数の例がS
AMモデルを創生するのに用いられることができることは明らかである。第2の
段階は、基準目印および部品に関して前述されたように、存在するかもしれない
し、または存在しないかもしれない特徴が検出された画像内で、SAMモデルが
示す特徴を検出し、位置決めするためにSAMモデルを用いることを含む。
【0061】 SAMモデルは、関心のある特徴を備えた画像例を集めること、各例からの画
像データを予備的に処理すること、およびそれぞれをピクセル値の一次元ベクト
ルに転換することによって作られる。全てのベクトルが与えられると、特徴の平
均的外形または外観(appearance)を表わす、各例に1つの平均ベクトルxmean が式1で与えられる。 ここで、xjはピクセル値のn×1ベクトル、nは各ベクトルのピクセル数、お
よびNは画像例の個数である。
【0062】 ここで、各画像例は、平均からの変異度を表わし、平均調整ベクトルと呼ばれ
、式2によって与えられる、ゼロを基点とするベクトル(zero centered vector
)x’iとして表わされることができる。 x’i=xi−xmean 式2 ここで、各例がどのくらい平均から逸脱しているかの簡潔な表示は、前段階か
らの全ての平均調整ベクトルを用いて、式3に示されるような、共変量マトリッ
クス(共分散行列)Sを作成することによって生成されることができる。 ここで、x’=はn×1マトリックス、x’i Tは1×nマトリックスであるので
、2つのマトリックスの積はn×n対称マトリックスである。
【0063】 共変量マトリックスSの固有(eigen)システムは、式4によって与えられる
。 Spk=λkk 1≦k≦n 式4 ここで、λkは共変量マトリクスのkthの固有値、pkは直交固有ベクトルであり
、正規直交性は によって定義される。
【0064】 固有システムは、特徴の画像のピクセルの形、色、照明、表面パターンなど、
および各変化モードの大きさを表わす固有値が変化する、特定の方法(変化モー
ドと呼ばれる)を表わす固有ベクトルの直交システムを生み出す。各例の画像デ
ータに存在する不則的ノイズの影響を低減するために、最大(most significant
)変化モードだけが残される。典型的には、画像例の変動可能性の95%を説明
する、より大きい(more significant)変化モードだけが、式5に示されるよう
に用いられる。
【0065】 P=[p1…pn] 式5 ここで、Pはn×mマトリックス、PTはm×nマトリックスであり、PPT=1
である。見られるもの、見られないものを含み、その外形または外観(ピクセル
密度あるいはグレイ値)が変化モードの大きさによって規定された範囲内にある
ような、あらゆる画像例の再構成を可能にするSAMモデル500が形成された
【0066】 次に、SAMモデルは、図7のボックス308に述べられた検査中の部品によ
りよく一致するように、それ自身を再構成するために使用される。新しい再構成
モデルは、検査中の部品の周辺(すなわち、探索領域)内の各点のための角度範
囲で計算される。最適再構成モデルは最適適合位置で生じる。式6は再構成の一
般的な様式を表わす。 x=xmean+Pb 式6 助変数ベクトルbについて式6を解くと、式7が得られる。 b=PT(x−xmean) 式7
【0067】 一旦bベクトル値が計算されると、再構築されたSAMモデルが検査中の部品
とどの程度よく一致しているかの一致程度の全体品質が、マンハノボリス(Manh
anobolis)距離と残留誤差との関数として計算される。特に、マンハノボリス距
離はSAMモデルが候補をいかに良く表わしているかの正規化された程度を提供
し、式8によって与えられる。 ここで、mはSAMモデルを構築するために用いられる画像例の数である。
【0068】 一致品質の他の尺度は、検査中の部品と再構築されたSAMモデルとの間の残
留誤差を評価し、式9によって与えられる。 ここで、nはモデル中のピクセル数、rjは適切な(relevent)探索領域のピク
セル数とSAMモデルの再構築された概数との間のjthピクセルの誤差、および
λr,jは、前に記憶された画像例全部についてのrjの分散(variance)である。
【0069】 統合的な「一致品質」は、式10から得られる。 ffit=fmanhob+fresid 式10 数値ffitは、画像例の母集団からのffit値がχ2(カイ二乗)分布に従うと
仮定して、モデルが検査中の部品を示す確率を表わす「一致の確率」に書き換え
られる。一致の確率の値Pfは、次式によって与えられる不完全なガンマ関数を
用いて計算されることが好ましい。 Pf=G(ffit
【0070】 以前には1つの例としては見られなかったけれども、平均値から変更された特
徴の外形(外観)を作り出すためのモデルを構築するのに用いられる全ての画像
例の間に再構築が滑らかに挿入されることができるので、SAMモデルの使用に
よって、画像内に特徴が存在するかどうかを非常に高い信頼度で決定することが
できる。しかしながら、新たに生成される特徴の外形は、モデル構築段階中に収
集される変化可能性と一致する。また、特徴内の変化可能性がモデルによって適
切に記述されるので、位置決めプロセスから戻される(returned)最適適合点は
非常に正確で、繰り返し可能である。
【0071】 特徴と対応SAMモデルとが比較される時、誤差の原因が2つある。1つは特
徴とモデルとの相違によって生じ、他の1つは画像取得プロセスおよび他の要因
による不規則なノイズによって生じる。システムが用いる位置決めプロセスおよ
びSAMモデルは、第1の誤差の原因を取り除き、第2の原因のみを残すが、そ
れは非常に低レベルであるので、本方法を用いないようなシステムに比して、測
定性能と検出の信頼性を向上させる。
【0072】 本発明を好ましい実施例によって説明してきたが、本発明の精神や範囲を逸脱
することなく詳細や形式上の変更が可能なことは、当業者には理解できるであろ
う。例えば、実質的に同じ機能を実現するような、本発明の論理フローの各ステ
ップ内の非本質的な変更は、本発明の範囲内として理解されるであろう。さらに
、本発明で使用されるために説明された光学系は本発明を限定するものと解され
るべきではなく、対象の表面の高さ地図が計算される他の構成、および表面上の
対象とされる特徴の位置が高さによって補正される構成なども本発明の範囲内で
あることが理解されるであろう。検査中の画像とより正確に整合するように再構
築されることができる限りにおいては、本明細書に開示された以外の画像分析方
法もまた、本発明の精神の範囲内である。最後に、本発明は電子部品組立検査機
械の領域での使用に限定されず、その平面性にばらつきのある表面上に、ある要
素(物品)があるかないかを正確に識別しなければならないような他の検査およ
び製造システムに用いられることができる。
【図面の簡単な説明】
【図7】 本発明の方法のフローチャートである。
【図9】 SAMモデルの概略図である。
【符号の説明】
18,20……コンベヤ、22,24……1対のカメラ、30……ディスプレ
イスクリーン、32……電子コンピュータ装置、34……モデル入力、36,3
8……発散光線
───────────────────────────────────────────────────── フロントページの続き (51)Int.Cl.7 識別記号 FI テーマコート゛(参考) G06T 7/00 G06T 7/00 C H05K 13/08 H05K 13/08 U (81)指定国 EP(AT,BE,CH,CY, DE,DK,ES,FI,FR,GB,GR,IE,I T,LU,MC,NL,PT,SE),OA(BF,BJ ,CF,CG,CI,CM,GA,GN,GW,ML, MR,NE,SN,TD,TG),AP(GH,GM,K E,LS,MW,SD,SL,SZ,TZ,UG,ZW ),EA(AM,AZ,BY,KG,KZ,MD,RU, TJ,TM),AE,AL,AM,AT,AU,AZ, BA,BB,BG,BR,BY,CA,CH,CN,C R,CU,CZ,DE,DK,DM,EE,ES,FI ,GB,GD,GE,GH,GM,HR,HU,ID, IL,IN,IS,JP,KE,KG,KP,KR,K Z,LC,LK,LR,LS,LT,LU,LV,MA ,MD,MG,MK,MN,MW,MX,NO,NZ, PL,PT,RO,RU,SD,SE,SG,SI,S K,SL,TJ,TM,TR,TT,TZ,UA,UG ,UZ,VN,YU,ZA,ZW Fターム(参考) 2F065 AA03 AA19 AA20 AA24 AA54 BB02 BB05 CC01 CC28 DD06 FF04 FF05 FF09 FF61 HH02 HH04 HH12 JJ03 JJ05 JJ26 LL12 PP15 QQ03 QQ18 QQ31 QQ42 RR08 2G051 AA61 AA65 AB14 CA07 CB01 DA06 EA11 EA12 5B057 AA03 BA17 CA13 CA16 CB13 CB18 CE08 CH01 DA03 DA07 DA17 DB03 DC33 5L096 AA09 BA03 CA05 DA03 EA14 FA69 FA77 HA07 JA11

Claims (35)

    【特許請求の範囲】
  1. 【請求項1】 物品の品質を評価する方法であって、 物品の2つのステレオ画像を収集すること、 1対の最適位置を供給するために、2つのステレオ画像に、物品上の特徴に対
    応する統計的なモデルを適用すること、 補正された位置を生成するために、前記1対の最適位置の関数として、基準に
    対する特徴の高さを計算すること、および 補正された位置を、特徴の期待位置に関する受け入れ基準と比較することから
    なる方法。
  2. 【請求項2】 2つのステレオ画像が、それぞれがある角度から物品を観察す
    るように位置決めされた2つの固定されたアレイカメラによって収集される請求
    項1の方法。
  3. 【請求項3】 2つのステレオ画像が2つのバンクのカメラによって収集され
    、各バンクのカメラがそれぞれ異なる角度から物品の一部を観察するように位置
    決めされた請求項1の方法。
  4. 【請求項4】 前記角度がほぼ3度である請求項1あるいは2の方法。
  5. 【請求項5】 各バンクのカメラがそれぞれ物品の1組の部分画像を供
    給し、各組の部分画像がそれぞれモザイク画像を形成するように合成される請求
    項4による方法。
  6. 【請求項6】 モザイクが少なくとも1つの基準目印を含み、前記方法はさら
    に、その目印の位置から物品のための修正された座標システムを計算する段階を
    含む請求項5の方法。
  7. 【請求項7】 高さを計算する段階が、物品の高さ地図を計算することを含む
    請求項1による方法。
  8. 【請求項8】 高さ地図がまばらに分布される請求項6の方法。
  9. 【請求項9】 高さ地図が、撓み、厚さ/一致、およびウォ−プと呼ばれる式
    の群から選択された式によって数学的に計算される請求項2の方法。
  10. 【請求項10】 統計的なモデルがSAMモデルである請求項1の方法。
  11. 【請求項11】 SAMモデルが特徴の外観の変動可能性を模している請求項
    1の方法。
  12. 【請求項12】 モデルが物品上の特徴を表わし、統計的なモデルを適用する
    段階が特徴の期待位置の近傍のモデルを移動、回転させる段階を含む請求項10
    の方法。
  13. 【請求項13】 SAMモデルの適用が、測定の改良された反復可能性と正確
    さを結果としてもたらす請求項10の方法。
  14. 【請求項14】 物品がプリント回路基板である請求項1の方法。
  15. 【請求項15】 公差が、位置、スキュー角度、および一致確率の測定値の1
    つを含む請求項1の方法。
  16. 【請求項16】 高さを計算する段階が、期待位置での高さの推定を含む請求
    項1の方法。
  17. 【請求項17】 基準が基準平面である請求項1の方法。
  18. 【請求項18】 基準平面が物品の平面と実質上一致している請求項17の方
    法。
  19. 【請求項19】 基準の平坦性(flatness)を有する物品の品質を評価する方
    法であって、 物品の2つのステレオ画像を収集し、物品上の多数の特徴の高さ地図を構築す
    ること、 基準の平坦性に対する特徴の高さを計算すること、 特徴の位置を高さで補正し、補正された位置を供給すること、および 補正された位置を理想的な公差と比較することからなる方法。
  20. 【請求項20】 物品の品質を評価するシステムであって、 それぞれが、ある角度から物品の一部を観察するように位置決めされ、1対の
    ステレオ画像を供給するための2つのカメラおよびその関連電子回路と、 前記対の画像の関数である、物品上の特徴の高さを計算し、特徴の位置を前記
    高さで補正して物品の品質の尺度を供給するプロセッサとを含むシステム。
  21. 【請求項21】 さらに、前記システムが、物品の別の部分を観察し、1対の
    追加のステレオ画像を供給するように位置決めされた、少なくとも1対の追加の
    カメラおよび関連電子回路を具備し、プロセッサが前記対のステレオ画像および
    前記追加の対のステレオ画像を合成してモザイク画像を形成する請求項20のシ
    ステム。
  22. 【請求項22】 モザイク画像が物品に実質上対応する領域をカバーする請求
    項20のシステム。
  23. 【請求項23】 さらに、物品を観察領域に移動するためのコンベヤシステム
    を含み、カメラが前記観察領域内で物品を観察するように配置された請求項20
    によるシステム。
  24. 【請求項24】 さらに、前記1対の画像が取得される間に、管理された様式
    で物品を移動するような物品移動コンベヤシステムを含む請求項20によるシス
    テム。
  25. 【請求項25】 さらに、各画像対に対応する座標システムを補正するための
    電子回路を含む請求項20によるシステム。
  26. 【請求項26】 多数対のステレオ画像がモザイク画像に合成され、さらに前
    記モザイク画像が基準点を含む請求項20によるシステム。
  27. 【請求項27】 基準点が光点の像、基準目印、およびバイアスを含む基準点
    の群から選択される請求項26によるシステム。
  28. 【請求項28】 製造された物品の画像を収集するためのカメラ、および前記
    画像を処理するためのプロセッサを具備し、前記物品を検査するシステムであっ
    て、 前記プロセッサが、 基準目印を検出して正しく合成された画像を供給するための手段、 正しく合成された前記画像に物品上の特徴を表わすSAMモデルを適用して特
    徴の最適一致座標を位置決めする手段、 基準の平坦性尺度からの特徴のずれに対して前記最適一致座標を補正し、補正
    された画像を供給する手段、および 特徴の補正された画像を、特徴の期待位置に対応する受入基準と比較する手段
    を含むシステム。
  29. 【請求項29】 カメラが単一の固定アレイカメラである請求項28のシステ
    ム。
  30. 【請求項30】 カメラがライン走査カメラである請求項28のシステム。
  31. 【請求項31】 さらに、物品の第2の画像を収集するための追加のカメラを
    含み、プロセッサが前記画像と第2の画像とからステレオビジョン画像を生成し
    、当該ステレオビジョン画像に関連して演算する請求項28のシステム。
  32. 【請求項32】 製造された物品の画像をカメラで収集する段階、およびその
    画像を処理する段階よりなる、物品検査のための処理システムであって、 前記システムが、 基準目印を検出して正しく合成された画像を供給する段階、 正しく合成された前記画像に物品上の特徴を表わすSAMモデルを適用して
    、前記特徴の最適一致座標を位置決めする段階、 基準の平坦性尺度からの特徴のずれに対して、最適一致座標を補正し、補正
    された画像を供給する段階、および 補正された画像を、特徴の期待位置に対応する受入基準と比較する段階を含
    む物品検査システム。
  33. 【請求項33】 カメラが単一の固定されたアレイカメラである請求項32の
    システム。
  34. 【請求項34】 カメラがライン走査カメラである請求項32のシステム。
  35. 【請求項35】 さらに、物品の第2の画像を収集するための追加のカメラを
    含み、処理段階が前記画像と第2の画像とからステレオビジョン画像を生成し、
    前記プロセッサが当該ステレオビジョン画像に関して演算することを含む請求項
    32のシステム。
JP2000590448A 1998-12-19 1999-12-17 ステレオ画像による自動検査システム Pending JP2003522347A (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
GBGB9828109.0A GB9828109D0 (en) 1998-12-19 1998-12-19 Inspection equipment and methods of inspection
GB9828109.0 1998-12-19
PCT/US1999/030206 WO2000038494A2 (en) 1998-12-19 1999-12-17 Automatic inspection system with stereovision

Publications (1)

Publication Number Publication Date
JP2003522347A true JP2003522347A (ja) 2003-07-22

Family

ID=10844634

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2000590448A Pending JP2003522347A (ja) 1998-12-19 1999-12-17 ステレオ画像による自動検査システム

Country Status (8)

Country Link
EP (1) EP1057390A2 (ja)
JP (1) JP2003522347A (ja)
KR (1) KR20010040998A (ja)
AU (1) AU3342500A (ja)
CA (1) CA2321096A1 (ja)
GB (1) GB9828109D0 (ja)
IL (1) IL137778A0 (ja)
WO (1) WO2000038494A2 (ja)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006324599A (ja) * 2005-05-20 2006-11-30 Canon Machinery Inc ダイボンダ用撮像装置
WO2006135040A1 (ja) 2005-06-17 2006-12-21 Omron Corporation 3次元計測を行う画像処理装置および画像処理方法
JP2011215013A (ja) * 2010-03-31 2011-10-27 Nagoya Electric Works Co Ltd 基板外観検査装置および基板外観検査方法
JP2013505464A (ja) * 2009-09-22 2013-02-14 サイバーオプティクス コーポレーション カメラアレイ及びコンパクトな組み込み照明装置を備えた高速光学検査システム
WO2019111388A1 (ja) * 2017-12-07 2019-06-13 ヤマハ発動機株式会社 被実装物作業装置

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1220596A1 (en) * 2000-12-29 2002-07-03 Icos Vision Systems N.V. A method and an apparatus for measuring positions of contact elements of an electronic component
WO2003005793A2 (en) * 2001-07-04 2003-01-16 Koninklijke Philips Electronics N.V. Choice of reference markings for enabling fast estimating of the position of an imaging device
DE112006003019T5 (de) * 2005-10-31 2008-10-23 Cyberoptics Corp., Golden Valley Elektronikmontagevorrichtung mit eingebauter Lötpastenprüfung
WO2009094489A1 (en) * 2008-01-23 2009-07-30 Cyberoptics Corporation High speed optical inspection system with multiple illumination imagery
CN101614679B (zh) * 2008-06-27 2011-06-22 上海纺印印刷包装有限公司 一种凹凸印刷品的质量检测装置
US8670031B2 (en) 2009-09-22 2014-03-11 Cyberoptics Corporation High speed optical inspection system with camera array and compact, integrated illuminator
US8872912B2 (en) 2009-09-22 2014-10-28 Cyberoptics Corporation High speed distributed optical sensor inspection system
US8388204B2 (en) 2009-09-22 2013-03-05 Cyberoptics Corporation High speed, high resolution, three dimensional solar cell inspection system
US8894259B2 (en) 2009-09-22 2014-11-25 Cyberoptics Corporation Dark field illuminator with large working area
US8681211B2 (en) 2009-09-22 2014-03-25 Cyberoptics Corporation High speed optical inspection system with adaptive focusing
KR101160663B1 (ko) * 2010-10-21 2012-06-28 한국원자력연구원 볼륨복원 기반 스테레오 x-선 영상의 3차원 형상화장치
SG2014011639A (en) * 2011-11-14 2014-06-27 Ev Group E Thallner Gmbh Measuring form changes of a substrate
US20140198185A1 (en) * 2013-01-17 2014-07-17 Cyberoptics Corporation Multi-camera sensor for three-dimensional imaging of a circuit board
US11176635B2 (en) 2013-01-25 2021-11-16 Cyberoptics Corporation Automatic programming of solder paste inspection system
US10126252B2 (en) * 2013-04-29 2018-11-13 Cyberoptics Corporation Enhanced illumination control for three-dimensional imaging
US9743527B2 (en) 2013-08-09 2017-08-22 CyberOptics Corporaiton Stencil programming and inspection using solder paste inspection system
US9707584B2 (en) 2014-07-09 2017-07-18 Nordson Corporation Dual applicator fluid dispensing methods and systems
CN106290423B (zh) * 2016-10-18 2024-04-05 同方威视技术股份有限公司 用于扫描成像的方法、装置以及系统
CN113692215A (zh) * 2021-07-30 2021-11-23 广州佳帆计算机有限公司 一种贴片元件位置可调整系统、方法及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4978224A (en) * 1987-07-14 1990-12-18 Sharp Kabushiki Kaisha Method of and apparatus for inspecting mounting of chip components
EP0301255A1 (de) * 1987-07-30 1989-02-01 Siemens Aktiengesellschaft 3D-Lageerkennung von Bauelementeanschlüssen für die automatische Bestückung
JP2714277B2 (ja) * 1991-07-25 1998-02-16 株式会社東芝 リード形状計測装置

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006324599A (ja) * 2005-05-20 2006-11-30 Canon Machinery Inc ダイボンダ用撮像装置
JP4596422B2 (ja) * 2005-05-20 2010-12-08 キヤノンマシナリー株式会社 ダイボンダ用撮像装置
WO2006135040A1 (ja) 2005-06-17 2006-12-21 Omron Corporation 3次元計測を行う画像処理装置および画像処理方法
JP2013505464A (ja) * 2009-09-22 2013-02-14 サイバーオプティクス コーポレーション カメラアレイ及びコンパクトな組み込み照明装置を備えた高速光学検査システム
JP2011215013A (ja) * 2010-03-31 2011-10-27 Nagoya Electric Works Co Ltd 基板外観検査装置および基板外観検査方法
WO2019111388A1 (ja) * 2017-12-07 2019-06-13 ヤマハ発動機株式会社 被実装物作業装置
JPWO2019111388A1 (ja) * 2017-12-07 2020-11-19 ヤマハ発動機株式会社 被実装物作業装置

Also Published As

Publication number Publication date
WO2000038494A8 (en) 2000-10-26
WO2000038494A3 (en) 2000-09-14
AU3342500A (en) 2000-07-12
GB9828109D0 (en) 1999-02-17
IL137778A0 (en) 2001-10-31
CA2321096A1 (en) 2000-06-29
KR20010040998A (ko) 2001-05-15
WO2000038494A2 (en) 2000-06-29
EP1057390A2 (en) 2000-12-06

Similar Documents

Publication Publication Date Title
JP2003522347A (ja) ステレオ画像による自動検査システム
US5909285A (en) Three dimensional inspection system
EP0638801B1 (en) Method of inspecting the array of balls of an integrated circuit module
US8233041B2 (en) Image processing device and image processing method for performing three dimensional measurements
US6490368B2 (en) Automatic X-ray determination of solder joint and view Delta Z values from a laser mapped reference surface for circuit board inspection using X-ray laminography
US7034272B1 (en) Method and apparatus for evaluating integrated circuit packages having three dimensional features
US6496270B1 (en) Method and system for automatically generating reference height data for use in a three-dimensional inspection system
US7015951B1 (en) Picture generating apparatus and picture generating method
US6055054A (en) Three dimensional inspection system
JPH04287943A (ja) リード線相互の平坦性評価装置を有する表面実装装置
US9157874B2 (en) System and method for automated x-ray inspection
CN114577135B (zh) 基于单镜头的芯片引脚翘曲的3d检测方法及系统
US5402505A (en) Semiconductor device lead inspection system
JP2006317408A (ja) 反り検査装置
US5838434A (en) Semiconductor device lead calibration unit
JPH0875454A (ja) 測距装置
WO2002029357A2 (en) Method and apparatus for evaluating integrated circuit packages having three dimensional features
JP2961140B2 (ja) 画像処理方法
CN112710662A (zh) 生成方法及装置、生成系统和存储介质
WO2001098762A1 (en) Automatic inspection system with x-ray imaging
Randil et al. 3D Full-Field Deformation Measuring Technique with Optics-Based Measurements
CN118424108B (zh) 扫描处理方法、装置、扫描设备及存储介质
Munaro et al. Fast 2.5 D model reconstruction of assembled parts with high occlusion for completeness inspection
US20240062401A1 (en) Measurement system, inspection system, measurement device, measurement method, inspection method, and program
JP2795790B2 (ja) 3次元計測装置のセンサ座標補正方法