JP3927239B2 - 2次元空間曲線中の形状の検出 - Google Patents
2次元空間曲線中の形状の検出 Download PDFInfo
- Publication number
- JP3927239B2 JP3927239B2 JP52430897A JP52430897A JP3927239B2 JP 3927239 B2 JP3927239 B2 JP 3927239B2 JP 52430897 A JP52430897 A JP 52430897A JP 52430897 A JP52430897 A JP 52430897A JP 3927239 B2 JP3927239 B2 JP 3927239B2
- Authority
- JP
- Japan
- Prior art keywords
- space curve
- model
- dimensional space
- angle
- curve
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Lifetime
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/46—Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
- G06V10/752—Contour matching
Landscapes
- Engineering & Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Evolutionary Computation (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Software Systems (AREA)
- Databases & Information Systems (AREA)
- Computing Systems (AREA)
- Artificial Intelligence (AREA)
- Health & Medical Sciences (AREA)
- Image Analysis (AREA)
Description
本発明はコンピュータ・ビジョンに関するもので、特に2次元空間曲線の画像解析に関するものである。
発明の背景
コンピュータ・ビジョンでは、2次元曲線を持つ画像が得られることがある。例えば、ある物体の画像がエッジ・ディテクターで解析されるときを考えると、物体の境界は一連のつながったエッジ点で表わされ、それらの点は2次元空間曲線のカーブを形成してる。この場合の物体は、例えば、半導体のウエハである場合もある。
ある物体の画像に対する空間曲線を得る他の方法には、1995年6月2日付同時係属特許出願番号08/458,908に開示された方法のような、設定可能なしきい値に基づいた境界トラッカー、又は1995年12月6日付同時係属特許出願代理人ドケット番号C95−043に開示された方法のような、エッジの「ピーク」を追従する境界トラッカーを用いる方法が含まれる。両出願は共にCognex Corporationに譲渡されている。
空間曲線はまた、2次元空間の点の流れを検出し、時間をパラメータにした信号を生成する位置センサーによっても生成することができる。例えば、その曲線は、道路上を走るトラックのある時間にわたる2次元の位置を表わしても良い。この場合、検出された曲線はある交通パターンを表わしている。或いは、温度計又は地震計がセンサーとして用いられるときには、それらの曲線はそれぞれ、ある場所における温度の時間に対する関数、また地震計の針の振れの時間に対する関数を表わしている。
物体の境界を表わす空間曲線中に存在するある形状は、その物体のひとつの特徴に対応している場合がある。例えば、半導体ウエハの境界で見られる凹型の角度の付いた曲線部分(三角形の2辺)は、半導体ウエハの周辺で通常見られるノッチを表わしている場合もある。
ある曲線部分の1つ又は2つ以上をより大きな2次元空間曲線中で検出したい場合がある。実際、2次元画像中に2次元形状を検出するための方法は多く存在する。しかし、回転不変且つ並進不変の任意の形状をした曲線部分を2次元空間曲線中で検出する一般的方法は知られていない。
出願人は、現時点で、矩形曲線の一部のみがより大きな2次元空間曲線内にあるのを検出する方法があることを承知している。例えば、曲線の一部が直線でできている場合、各直線は4つの異なった角度の一つで特徴づけられる。この場合、角度のヒストグラムを用い、矩形曲線部の角度の位置を検出し、その結果、境界に矩形曲線部を持つ物体の配向角(angular orientation)が求められる。この方法は、1994年10月26日付の同時係属出願番号08/330,223に記載されている。当出願は、既に放棄された1992年11月23日付の出願番号07/979,848の継続出願であり、Cognex Corporationに譲渡されている。
物体の境界を表わす2次元空間曲線中に存在する任意の形状を持つ空間曲線の部分を検出する一般的方法があるとするなら、物体のある特徴の位置及び/又は配向を、その特徴に対応する空間曲線の特定部分を検出することにより知ることが可能である。例えば、半導体ウエハのノッチ(三角形の2辺)を表わす空間曲線部分を半導体ウエハの画像の境界中に検出できるなら、そのノッチの配向角、従ってウエハの配向角を検出できることになる。
発明が解決しようとする課題
本発明の目的は、ある形状の例を空間曲線内で検出する方法及び装置を提供することである。
本発明の他の目的は、任意の形状を持つ2次元空間曲線をより大きな他の2次元空間曲線中で検出する方法及び装置を提供することである。
本発明のもう一つの目的は、モデル2次元空間曲線を、その配向、並進、又はスケーリング(拡大縮小)にかかわらず、より大きな他のターゲット2次元空間曲線中で検出する方法及び装置を提供することである。
さらに、本発明の他の目的は、ある形状を持つ例を空間曲線中に検出する方法及び装置で、矩形状の空間曲線を検出するだけに限らない方法及び装置を提供することである。
本発明の他の目的は、モデル空間曲線の形状の例を、探索するモデル空間曲線全体を含むより大きなターゲット空間曲線内に検出する方法及び装置を提供することである。
さらに、本発明の他の目的は、ターゲット空間曲線内にモデル空間曲線の形状の例を検出する際、探索するモデル空間曲線に対し特別な検出法を施す必要がない方法及び装置を提供することである。
発明の要約
物体の少なくとも一部分を表わすターゲット2次元空間曲線中に、該物体の特徴を表わすモデル2次元空間曲線の少なくとも1つの例を検出することにより、該物体の該特徴を検出する方法及び装置が提供される。該方法は、トレーニング時には、該モデル2次元空間曲線を取得するステップを含む。該モデル2次元空間曲線は複数の点を持ち、各点は、該モデル2次元空間曲線に沿った距離Sの関数である2次元の位置で特徴付けられている。次いで、該モデル2次元空間曲線の複数の点の各点に対し、距離Sの関数である2次元の位置は、距離Sの関数である角度に変換され、角度表示のモデル空間曲線が得られる。
次に、実行時に、ターゲット2次元空間曲線が取得される。該ターゲット2次元空間曲線は複数の点を持ち、各点は、該ターゲット2次元空間曲線に沿った距離Sの関数である2次元の位置で特徴付けられている。次いで、該ターゲット2次元空間曲線の複数の点の各点に対し、距離Sの関数である2次元の位置は、距離Sの関数である角度に変換され、角度表示のターゲット空間曲線が得られる。続いて、角度表示のモデル空間曲線を用い、該角度表示のターゲット空間曲線に沿い、合致計量(match metric)値が合致しきい値を越えるような少なくとも1つの位置を検出する。
モデル2次元空間曲線を角度表示のモデル空間曲線に変換した後、該角度表示のモデル空間曲線のダイナミック・レンジを減少させ、且つ/又は、その不連続性を取り除くことが好ましい。さらに、ターゲット2次元空間曲線を角度表示のターゲット空間曲線に変換した後、該角度表示のターゲット空間曲線のダイナミック・レンジを減少させ、且つ/又は、その不連続性を取り除くことが好ましい。
角度表示の空間曲線に対する回転、並進、及びスケーリングに関する不変性を得るため、合致計量として規格化された相関を用いることが好ましい。或いは、回転不変が必要でない応用の場合には、合致計量として差の絶対値の和又は相関を用いてもよい。
本発明の方法及び装置を用いて、半導体ウエハの周辺にあるノッチ又はフラットを検出することが可能である。例えば、ノッチを表わすモデル空間曲線を、そのノッチ又はフラットの数学的記述に基づいて合成的に生成することが可能である。或いは、典型的な2次元空間曲線の集合を用いて複合モデル2次元空間曲線を統計的にコンパイルすることも可能である。
モデル空間曲線もターゲット空間曲線も、解析しようとする物体の画像から、その物体の少なくとも一部分を表わす画像に対してエッジ・ディテクションを実行し、又はその物体の少なくとも一部分を表わす画像に対して境界トラッキングを実行して、抽出することが可能である。
距離Sの関数である2次元の位置を距離Sの関数である角度に変換する方法は、距離Sの関数である2次元の位置のそれぞれの次元に対して距離Sに関する第1階の微分操作を行い、第1階の微分の商を得ることが含まれる。ここで得られた商の逆正接が空間曲線に沿った距離Sに於ける角度を与えるのである。簡便には、Sの単位長さの変化に対する第1次元の変化及びSの単位長さの変化に対する第2次元の変化を、角度の列を有するルックアップテーブルのインデックスとして用い、空間曲線に沿った各距離Sに於ける角度を得ることも可能である。
2次元空間曲線内にもう1つの2次元空間曲線を検出する従来の方法と異なり、本発明の方法は、任意の形状を、それがいかなる配向又は位置にあろうとも、2次元空間曲線内で検出することが可能である。それに加え、本方法は、2次元空間曲線を角度表現しているため、スケールの変化に対して不変である。本方法は矩形状の空間曲線の検出に限定されているのではない。本方法は探索する空間曲線全体を利用し、探索する空間曲線内で特別な検出法を必要としない。
【図面の簡単な説明】
本発明は、以下に述べる詳細な説明及び以下の図から、よりよく理解される。
図1はターゲット空間曲線及び該ターゲット空間曲線中に存在するモデル空間曲線を示す図である。
図2は図1のモデル空間曲線及び該モデル空間曲線に沿った距離の関数である角度のプロット、並びに、図1のモデル空間曲線を回転した例及び該回転したモデル空間曲線に沿った距離の関数である角度のプロットを示す図である。
図3は図1のモデル空間曲線及び該モデル空間曲線に沿った距離の関数である角度のプロット、並びに、図1のモデル空間曲線を縮小した例及び該縮小したモデル空間曲線に沿った距離の関数である角度のプロットを示す図である。
図4Aは本発明の方法のトレーニング段階に対するフローチャートである。
図4Bは本発明の方法の実行段階に対するフローチャートである。
好適な実施例の詳細な説明
本発明は、ターゲット2次元空間曲線中の任意の場所にあり、任意の形状を持ち、任意の回転、並進が行われたモデル2次元空間曲線の1つ以上の例を検出する方法を提供する。
当方法には、モデル2次元空間曲線を生成するトレーニング段階と、そのモデル2次元空間曲線を用い、その位置をターゲット2次元空間曲線中で検出する実行段階が含まれている。トレーニング段階に於いては、検出しようとするモデル2次元空間曲線としてのパターンは、2次元空間曲線から1次元空間曲線に変換される。ここで該2次元空間曲線は、空間曲線に沿った距離Sにある各点の位置(X及びY)で表わされているのに反し、該1次元空間曲線は、空間曲線に沿った距離Sにある各点の接線の角度で表わされる。言い換えると、検出しようとするパターンは、空間曲線に沿った距離Sの関数としての2次元座標系の位置で表現される空間曲線から、空間曲線に沿った距離Sの関数としての角度で表現される空間曲線に変換されるのである。
空間曲線の角度表現で現れる不連続性は、以下で述べるように、幾何学的性質を用いることにより、及び/又は、モデル又はターゲット空間曲線の2つ以上のコピーを用いることにより、取り除かれる。
実行段階では、モデル2次元空間曲線に対してトレーニング段階で行ったと同様、探索する空間曲線即ちターゲット空間曲線が、2次元位置表現から1次元角度表現に変換される。次に、角度表現をしたターゲット空間曲線にそって角度表現をしたモデル空間曲線の探索が実行され、合致計量が予め与えた合致しきい値を越える値になる1つ又はそれ以上の位置Sが求められる。
好ましい実施例では、合致計量とは、角度表現をした2つの空間曲線間の規格化された相関である。差の絶対値の和又は相関のような他の合致計量を用いることもできるが、これらの計量は、回転、並進、スケーリングに対して異なった特性を持つ。例えば、差の絶対値の和の計量は、回転不変性に関して規格化した相関と同じようには作用しないだろう。
最終結果として、合致計量が、予め与えた合致しきい値を越える値になる1つ又は2つ以上の位置Sが、ターゲット空間曲線中のモデル空間曲線の求められた場所である。
まず最初に、2次元空間曲線の特性に付いて述べる。図1にターゲット空間曲線10とモデル空間曲線12を示す。ターゲット空間曲線10は、モデル空間曲線12の一例14を含む。もっともこの例14は、図1に示すように、モデル空間曲線12に関して約45°回転され且つ並進が行われている。しかし、回転され且つ並進が行われたモデル空間曲線12の例14は、本発明の方法の特定の実施例、例えば、以下に説明する規格化した相関合致計量を採用した実施例を用いて、ターゲット空間曲線10に沿って検出することが可能である。
図2には、モデル空間曲線12の第2の例16及び曲線16に沿った距離"S"関数である角度"A"のプロット18、並びに、モデル空間曲線12の第3の例20及び曲線20に沿った距離"S"の関数である角度"A"のプロット22が示されている。第3の例20は第2の例16を90°回転しただけであることに注意。又、プロット22はある定数だけ下方に平行移動されたこと以外プロット18と同一であることに注意。このように空間曲線の回転は、距離Sに対する角度"A"プロットをA軸に沿って平行移動させる効果を持つ。
図3には、モデル空間曲線12の第2の例16及び曲線16に沿った距離"S"関数である角度"A"のプロット18、並びに、モデル空間曲線12の第4の例24及び曲線20に沿った距離"S"の関数である角度"A"のプロット26が示されている。第4の例24は第2の例16を約30%縮小しただけであることに注意。又、プロット26はある定数だけ拡大されていること以外プロット18と同一であることに注意。このように空間曲線の縮小は、距離Sに対する角度"A"のプロットをA軸に沿って拡大させる効果を持つ。
規格化された相関の特性を持つ合致計量は、18と22、22と26、18と26のプロットの間で実質的に完全な合致をもたらす。これは、規格化された相関の合致計量は、プロット18に関するプロット26のように、プロットをスケーリングしたり、プロット18に関するプロット22のように、プロットに定数を加えるような線型変換には関係しないからである。このため、規格化された相関のような合致計量を採用した本発明の方法は、角度表示したモデル又はターゲット空間曲線の一方を回転、並進、ある種のスケーリングを行っても不変なのである。
図4Aを参照して、本発明の方法に於いて、トレーニング段階の第1のステップ(30)で、2次元座標X(S)及びY(S)によって表わされた2次元モデル空間曲線を得る。ここで、X(S)は空間曲線の各点のX座標、Y(S)は空間曲線の各点のY標で、また、Sは、X(S)及びY(S)の座標対で表わされる空間曲線の各点に対応する空間曲線に沿った距離を表わすパラメータである。
発明の背景の節で述べたように、物体の画像を解析するエッジ・ディテクターを用いることにより、一連のつながったエッジ点X(S)及びY(S)で表わされる物体の境界が得られる。これらの点は全体として2次元モデル空間曲線を形成する。物体は、例えば、半導体ウエハのノッチでもよい。エッジ点は、各エッジ点が既に空間曲線上にある正確に1つの近傍を持つかどうかをテストし、その後その点も空間曲線上にあるとみなすことを繰り返すことによって連結される。或いは、エッジ点は、空間曲線に最後に加えたエッジ点の全ての近傍を再帰的にテストすることにより連結することも可能である。
ある物体の画像に対する空間曲線を得る他の方法には、1995年6月2日付同時係属特許出願番号08/458,908に開示されたコグネックス境界トラッカーのような、設定可能なしきい値に基づいた境界トラッカー、又は1995年12月6日付同時係属特許出願代理人ドケット番号C 95−043に開示された方法のような、エッジの「ピーク」に追従する境界トラッカーを用いる方法が含まれる。両出願共Cognex Corporationに譲渡されている。
モデル空間曲線を作る他の方法は、空間曲線X(S)、Y(S)の数学的仕様に基づいてモデル2次元空間曲線を合成的に生成する方法である。例えば、三角形状のモデル空間曲線を得るのに、その三角形の方程式を用い、X(S)、Y(S)で表わされる対応した2次元空間曲線を生成するのである。
さらに、モデル空間曲線を作る他の方法は、典型的な2次元空間曲線の集合を用いて複合モデル2次元空間曲線を統計的にコンパイルするものである。
次に、該2次元モデル空間曲線X(S)、Y(S)が1次元の、角度で表わされる空間曲線A(S)に変換される(32)。ただし、曲線A(S)はまだ、曲線に沿った距離Sパラメータ表示されていることに注意。本発明の方法では、変換は実質的に、空間曲線に沿った各点Sに於ける空間曲線X(S)、Y(S)の接線の角度を求めて行われる。従って、最初空間曲線に沿って各点Sの空間曲線X(S)、Y(S)の接線が計算され、次いで各点Sの接線の角度が決定されなくてはならない。以下に述べるルックアップテーブルを用いる好ましい実施例では、接線を求めその角度を決めるステップは、ルックアップテーブルを見るという1つのステップにまとめることが可能である。
空間曲線X(S)、Y(S)の接線を求めるために、第1階偏微分の商が曲線に沿って各点Sで計算される。これは、曲線に沿った各点SでSに関するX(S)の偏微分を取り、それを、曲線に沿った各点SでSに関するY(S)の偏微分で割ることによって得られる。
空間曲線X(S)、Y(S)の各点Sの接線の角度は、上で求めた第1階偏微分の商の逆正接を求めて得られる。これにはルックアップテーブルを用いるのが最も望ましい。
パラメータSで表わされる曲線に沿った複数の点に於ける、曲線の接線と接線の角度を求めるステップを行う1つの方法は、コグネックス・アングル・ファインダーを曲線に適用するものである。コグネックス・アングル・ファインダーは、空間曲線に沿った引き続く点(数点づつ離して取られた点である場合もある)を調べ、ルックアップテーブルを用いてその曲線部分の角度を求める。ルックアップテーブルでは、上述した偏微分は、1階の差、即ち、Xの1階の差(「デルタX」即ち、Sの単位長さの変化に対するXの変化)及びYの1階の差(「デルタY」即ち、Sの単位長さの変化に対するYの変化)で近似される。ここで、デルタX及びデルタYは、ルックアップテーブルのインデックスの役をする。即ち、デルタXとデルタYの可能な組み合わせのそれぞれに対し、その特定のデルタXとデルタYの商に対する逆正接が、そのデルタXとデルタYで示されたロケーションに格納されている。その逆正接の値は、デルタXとデルタYの商で表わされる正接の角度である。
角度表示の空間曲線A(S)に沿って不連続性が発生する場合もある。これは、角のような、空間曲線A(S)の方向が突然変化するところで必ず発生する。例えば、90°の左手回転は、空間曲線A(S)に於いて90°の不連続をもたらす。さらに、この不連続性は270°の右手回転と同等で、空間曲線A(S)に於ける270°の不連続として表現されてもよい。従って、この2つの不連続性は異なったように見えるが、実際は同等である。このため、ターゲット空間曲線中にモデル空間曲線の例を検出する際に失敗が生じることもある。
この不連続を同じ値にする1つの方法は、負の不連続が現れたときそれに360°を加えることである。これは、0°を加えることと同等である。他の方法は、絶対値が最大の不連続に360°を加えるか差し引くかして、その絶対値が最大の不連続を減少させることである。従って、上の例では、−270°には360°を加え、90°を得る。どちらの規則を適用しても、明らかに等しくない不連続の数は減少し(34)、その結果生じる角度表示の空間曲線は、モデル空間曲線として使用するのにより適したものになる。
規格化した相関を合致計量として用いる場合は、モデル空間曲線のダイナミック・レンジを下げることができ、モデル空間曲線の角度のオフセットは以下の方法で調整することが可能である。モデル空間曲線のダイナミック・レンジを下げるため、角度表示の空間曲線の全体に一定の角度を乗算する。次に、この角度表示の空間曲線の全ての値が正になるよう、この角度表示の空間曲線の全体に一定の角度を加える。この結果、正で小さなダイナミック・レンジを持つモデル空間曲線が得られる。これに加え、応用として、前記の方法を用い、ターゲット空間曲線にも正で小さなダイナミック・レンジを持たせるのが便利な場合もある。
ターゲット空間曲線中にモデル空間曲線の例を検出する本発明を多重スケール法に適用可能にすることができる。これを行うには、多重スケールのモデル空間曲線を生成する。最も簡単な多重スケール表現は、モデル空間曲線をローパスフィルターでろ過し、その後それを二段抽出して生成する。多重スケール表示の各スケールは、サブサンプリングとローパスフィルタリングがX方向及びY方向に1オクターブであれば、約1/4の長さのモデル空間曲線に関連付けられる。
図4Bを参照して、本発明の方法に於ける実行段階の第1のステップ(36)では、2次元座標X(S)及びY(S)によって表わされた2次元ターゲット空間曲線を得る。ここで、ターゲット空間曲線とは、その中で1つ以上のモデル空間曲線の例を探索する空間曲線のことである。モデル空間曲線の場合と同様、X(S)はターゲット空間曲線の各点のX座標、Y(S)はターゲット空間曲線の各点のY座標で、また、Sは、X(S)及びY(S)の座標対で表わされるターゲット空間曲線の各点に対応するターゲット空間曲線に沿った距離を表わすパラメータである。
発明の背景の節で述べたように、物体の画像を解析するエッジ・ディテクターを用いることにより、一連の連結したエッジ点X(S)及びY(S)で表わされる物体の境界が得られる。これらの点は全体として2次元ターゲット空間曲線を形成する。物体は、例えば、半導体ウエハでもよい。エッジ点は、各エッジ点が既に空間曲線上にある正確に1つの近傍を持つかどうかをテストし、その後その点も空間曲線上にあるとみなすことを繰り返すことによって連結されていく。或いは、エッジ点は、空間曲線に最後に加えたエッジ点の全ての近傍を再帰的にテストすることにより連結していくことも可能である。
ある物体の画像に対するターゲット空間曲線を得る他の方法には、1995年6月2日付同時係属特許出願番号08/458,908に開示されたコグネックス境界トラッカーのような、設定可能なしきい値に基づいた境界トラッカー、又は1995年12月6日付同時係属特許出願代理人ドケット番号C95−043に開示された方法のような、エッジの「ピーク」に追従する境界トラッカーを用いる方法が含まれる。両出願共Cognex Corporationに譲渡されている。
次に、該2次元ターゲット空間曲線X(S)、Y(S)が、ステップ(32)で述べたのと同様な方法により、1次元の、角度で表わされるターゲット空間曲線A(S)に変換される(38)。
モデル空間曲線A(S)の場合と同様、角度表示のターゲット空間曲線A(S)に沿って不連続が発生する場合もあり、これら不連続を何らかの方法で補償しなくてはならない(40)。特に、ターゲット空間曲線A(S)に沿った角度が0°を横切る不連続を取り除くのは重要である。そのような不連続が取り除かれない場合は、ターゲット空間曲線A(S)の多重バージョンを生成しなくてはならない。この際、それぞれのバージョンは異なった場所で不連続性を持つ。そして、ターゲット空間曲線A(S)、A'(S)等の各バージョンでモデル空間曲線の探索が行われる。
ターゲット空間曲線の多重バージョンを生成することにより、ターゲット空間曲線の角度に関するダイナミック・レンジを減らすことができるので有利である。しかし、モデル空間曲線A(S)の場合と異なり、角度の値は、固定小数演算ハードウエア及びソフトウエアの容量を越え始める値まで増加することができる。例えば、ターゲット空間曲線の方向変換が全て+90°なら、角度は方向変換を行う度に増加する。ターゲット空間曲線A(S)に沿ったいくつかの点で−360°を加算することができるなら、角度のダイナミック・レンジに限界を設定することができる。角度に関するダイナミック・レンジにこのようにして限界を設けることにより、固定小数演算ハードウエア及びソフトウエアを用いるとき精度を高めることが可能である。
次に、モデル空間曲線A(S)の例を求めてターゲット空間曲線が探索される(42)。ターゲット空間曲線A(S)に沿ってモデル空間曲線A(S)の各候補点で合致計量が計算され、合致計量値の数列が生成される。実験的に決めたしきい値を越える合致計量を生じる候補点があれば、それは、ターゲット空間曲線中にモデル空間曲線の1つ以上の例が存在することを示している。しきい値の設定は、モデル空間曲線とターゲット空間曲線の雑音の量、及びモデルの識別性能に依存する。モデル空間曲線のどの候補点の合致計量もしきい値を越えない場合には、モデル空間曲線の例を検出しなかったということを示している。
ターゲット空間曲線中のモデル空間曲線の形状の例の正確な位置は、例えば放物線補間のような補間を用いて決定するのが最も望ましい。或いは、ターゲット空間曲線中のモデル空間曲線の特定の例に対する合致計量が最大値をとる位置が、ターゲット空間曲線中のモデル空間曲線の形状の例の位置を表わすとしてもよい。
好ましい合致計量は規格化した相関である。差の絶対値の和や相関のような他の合致計量を用いることも可能である。しかし、角度表示の空間曲線の並進不変性、回転不変性、スケーリング不変性が望ましい場合は、規格化した相関が好ましい。規格化した相関は、スケーリングとオフセットを組み合わせた変換、即ち線型変換によって互いに関連付けられた角度表示の空間曲線を合致させることが可能であるからである。例えば、1つの角度表示の空間曲線が他のものの2倍の大きさである場合(スケーリング)、又は角度で100単位上方に平行移動されている場合(オフセット)でも、スケーリング及び/又はオフセットされた角度表示の空間曲線に対する合致特性は不変である。図2及び3を参照し、角度表示の空間曲線に対するスケーリング及びオフセットがそれに対応する位置表示の空間曲線とどう対応するかを確認することができる。
規格化した相関は、コグネックスVC−1/VC-3集積回路を用いて、或いはCognex Corporationに譲渡された1994年3月1日付同時係属特許出願番号08/03,812で開示された規格化相関を高速に実行する方法を用いて、加速することが可能である。
前記した多重スケーリングをしたモデル空間曲線を用いて、ターゲット空間曲線中のモデル空間曲線の例を探索するのに多重スケーリングを用いるのが望ましい場合もある。
特許請求項で述べる本発明の精神と範囲から逸脱することなく他の変更及び具体化を考え付くことは当業者には容易であろう。従って、前述した説明は、以下の特許請求の範囲で示されるもの以外、本発明を制限するものでない。
Claims (18)
- 第1取得手段と、第1変換手段と、第2取得手段と、第2変換手段と、使用手段とを有するコンピュータを使用して、物体の少なくとも一部分を表わす画像内のターゲット2次元空間曲線中に、該物体の特徴を表わすモデル2次元空間曲線の少なくとも1つの例を検出することにより、該物体の該特徴を検出する方法であって、該方法は、
トレーニング時には:
前記第1取得手段によって前記モデル2次元空間曲線を取得するステップであって、前記モデル2次元空間曲線は複数の点を持ち、各点は、前記モデル2次元空間曲線の沿った距離S関数である2次元の位置で特徴付けられるステップと、
前記モデル2次元空間曲線の前記複数の点の各点に対し、前記第1変換手段によって距離Sの関数である2次元の前記位置を距離Sの関数である角度に変換し、角度表示のモデル空間曲線を得るステップと、
実行時には:
前記第2取得手段によって前記ターゲット2次元空間曲線を取得するステップであって、前記ターゲット2次元空間曲線は複数の点を持ち、各点は、前記ターゲット2次元空間曲線に沿った距離Sの関数である2次元の位置で特徴付けられるステップと、
前記ターゲット2次元空間曲線の前記複数の点の各点に対し、前記第2変換手段によって距離Sの関数である2次元の前記位置を距離Sの関数である角度に変換し、角度表示のターゲット空間曲線を得るステップと、
前記使用手段によって前記角度表示のモデル空間曲線を使用し、前記の角度表示のターゲット空間曲線に沿い、合致計量値が合致しきい値を越えるような少なくとも1つの位置を検出するステップと
を有することを特徴とする物体の特徴を検出する方法。 - 請求項1に記載の方法に於いて、前記コンピュータは減少手段を更に有し、
前記モデル2次元空間曲線を前記角度表示のモデル空間曲線に変換するステップの後、前記減少手段によって前記角度表示のモデル空間曲線のダイナミック・レンジを減少させるステップをさらに有することを特徴とする方法。 - 請求項1に記載の方法に於いて、前記コンピュータは減少手段を更に有し、
前記ターゲット2次元空間曲線を前記角度表示のターゲット空間曲線に変換するステップの後、前記減少手段によって前記角度表示のターゲット空間曲線のダイナミック・レンジを減少させるステップをさらに有することを特徴とする方法。 - 請求項1に記載の方法に於いて、該合致計量は規格化された相関であることを特徴とする方法。
- 請求項1に記載の方法に於いて、該合致計量は差の絶対値の和であることを特徴とする方法。
- 請求項1に記載の方法に於いて、該合致計量は相関であることを特徴とする方法。
- 請求項1に記載の方法に於いて、前記物体は半導体ウエハーであり、前記特徴は前記半導体ウエハーの周辺にあるノッチであることを特徴とする方法。
- 請求項1に記載の方法に於いて、前記モデル2次元空間曲線を取得するステップは、モデル2次元空間曲線を合成的に生成するステップを含むことを特徴とする方法。
- 請求項1に記載の方法に於いて、前記モデル2次元空間曲線を取得するステップは、典型的な2次元空間曲線の集合を用いて複合モデル2次元空間曲線を統計的にコンパイルすることを特徴とする方法。
- 請求項1に記載の方法に於いて、前記モデル2次元空間曲線を取得するステップは、前記物体の少なくとも一部分を表わす画像に対してエッジ・ディテクションを実行し、2次元空間曲線を得るステップを含むことを特徴とする方法。
- 請求項1に記載の方法に於いて、前記モデル2次元空間曲線を取得するステップは、前記物体の少なくとも一部分を表わす画像に対して境界トラッキングを実行し、2次元空間曲線を得るステップを含むことを特徴とする方法。
- 請求項1に記載の方法に於いて、前記ターゲット2次元空間曲線を取得するステップは、前記物体の少なくとも一部分を表わす画像に対してエッジ・ディテクションを実行し、2次元空間曲線を得るステップを含むことを特徴とする方法。
- 請求項1に記載の方法に於いて、前記ターゲット2次元空間曲線を取得するステップは、前記物体の少なくとも一部分を表わす画像に対して境界トラッキングを実行し、2次元空間曲線を得るステップを含むことを特徴とする方法。
- 請求項1に記載の方法に於いて、距離Sの関数である2次元の前記位置を距離Sの関数である角度に変換する各ステップは、
距離Sの関数である2次元の前記位置のそれぞれの次元に対して距離Sに関する第1階の微分操作を行うステップと、
前記対の第1の微分を前記対の第2の微分で除し、商を得るステップと、
前記商の逆正接を前記距離Sに於ける前記角度とするステップと
を含むことを特徴とする方法。 - 請求項1に記載の方法に於いて、距離Sの関数である2次元の前記位置を距離Sの関数である角度に変換する各ステップは、
前記2次元空間曲線に沿った一対の点のそれぞれに対し、第1の次元の変化及び第2の次元の変化を計算するステップと、
前記第1の次元の前記変化及び前記第2の次元の前記変化を、角度の列を有するルックアップテーブルのインデックスとして用い、前記第1の次元の前記変化及び前記第2の次元の前記変化に対応する角度を得るステップ
とを含むことを特徴とする方法。 - 請求項2に記載の方法に於いて、不連続を除くステップは、角度表示のモデル空間曲線に沿ったある点で360°を加えるステッフを含むことを特徴とする方法。
- 請求項1に記載の方法に於いて、前記コンピュータは生成手段を更に有し、
前記生成手段によって前記角度表示のモデル空間曲線及びターゲット空間曲線の多重スケール表現を生成するステップをさらに含むことを特徴とする方法。 - 物体の少なくとも一部分を表わす画像内のターゲット2次元空間曲線中に、該物体の特徴を表わすモデル2次元空間曲線の少なくとも1つの例を検出することにより、該物体の該特徴を検出する装置であって、該装置は、
トレーニング時に、前記モデル2次元空間曲線を取得する手段であって、前記モデル2次元空間曲線は複数の点を持ち、各点は、前記モデル2次元空間曲線に沿った距離Sの関数である2次元の位置で特徴付けられる手段と、
トレーニング時の前記取得手段と協同して、前記モデル2次元空間曲線の前記複数の点の各点に対し、距離Sの関数である2次元の前記位置を距離Sの関数である角度に変換し、角度表示のモデル空間曲線を得る第1の変換手段と、
実行時に、前記第1の変換手段と協同して、前記ターゲット2次元空間曲線を取得する手段であって、前記ターゲット2次元空間曲線は複数の点を持ち、各点は、前記ターゲット2次元空間曲線に沿った距離Sの関数である2次元の位置で特徴付けられる手段と、
実行時の前記取得手段と協同して、前記ターゲット2次元空間曲線の前記複数の点の各点に対し、距離Sの関数である2次元の前記位置を距離Sの関数である角度に変換し、角度表示のターゲット空間曲線を得る第2の変換手段と、
前記第1の変換手段及び前記第2の変換手段と協同して、前記角度表示の空間曲線を用い、前記の角度表示のターゲット空間曲線に沿い、合致計量値が合致しきい値を越えるような少なくとも1つの位置を検出する手段と
を有することを特徴とする物体の特徴を検出する装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US08/581,955 | 1996-01-02 | ||
US08/581,955 US5751853A (en) | 1996-01-02 | 1996-01-02 | Locating shapes in two-dimensional space curves |
PCT/US1996/013026 WO1997024692A1 (en) | 1995-12-31 | 1996-08-09 | Locating shapes in two-dimensional space curves |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2000502824A JP2000502824A (ja) | 2000-03-07 |
JP3927239B2 true JP3927239B2 (ja) | 2007-06-06 |
Family
ID=24327264
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP52430897A Expired - Lifetime JP3927239B2 (ja) | 1996-01-02 | 1996-08-09 | 2次元空間曲線中の形状の検出 |
Country Status (4)
Country | Link |
---|---|
US (1) | US5751853A (ja) |
EP (1) | EP0871940A4 (ja) |
JP (1) | JP3927239B2 (ja) |
WO (1) | WO1997024692A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109000583A (zh) * | 2013-05-22 | 2018-12-14 | 康耐视公司 | 使用激光位移传感器进行有效表面测量的系统和方法 |
Families Citing this family (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6259827B1 (en) | 1996-03-21 | 2001-07-10 | Cognex Corporation | Machine vision methods for enhancing the contrast between an object and its background using multiple on-axis images |
US6075881A (en) | 1997-03-18 | 2000-06-13 | Cognex Corporation | Machine vision methods for identifying collinear sets of points from an image |
US6608647B1 (en) | 1997-06-24 | 2003-08-19 | Cognex Corporation | Methods and apparatus for charge coupled device image acquisition with independent integration and readout |
US6047226A (en) * | 1997-06-26 | 2000-04-04 | Hughes Electronics Corporation | Enhanced stellar attitude determination system |
US6363173B1 (en) * | 1997-12-19 | 2002-03-26 | Carnegie Mellon University | Incremental recognition of a three dimensional object |
US6714679B1 (en) | 1998-02-05 | 2004-03-30 | Cognex Corporation | Boundary analyzer |
US6381375B1 (en) | 1998-02-20 | 2002-04-30 | Cognex Corporation | Methods and apparatus for generating a projection of an image |
US7016539B1 (en) | 1998-07-13 | 2006-03-21 | Cognex Corporation | Method for fast, robust, multi-dimensional pattern recognition |
AUPP557898A0 (en) | 1998-08-28 | 1998-09-24 | Canon Kabushiki Kaisha | Method and apparatus for orientating a character stroke |
AU743334B2 (en) * | 1998-08-28 | 2002-01-24 | Canon Kabushiki Kaisha | Method and apparatus for orientating a character stroke |
US6381366B1 (en) | 1998-12-18 | 2002-04-30 | Cognex Corporation | Machine vision methods and system for boundary point-based comparison of patterns and images |
US6687402B1 (en) | 1998-12-18 | 2004-02-03 | Cognex Corporation | Machine vision methods and systems for boundary feature comparison of patterns and images |
US6078698A (en) | 1999-09-20 | 2000-06-20 | Flir Systems, Inc. | System for reading data glyphs |
GB2352076B (en) * | 1999-07-15 | 2003-12-17 | Mitsubishi Electric Inf Tech | Method and apparatus for representing and searching for an object in an image |
US6684402B1 (en) | 1999-12-01 | 2004-01-27 | Cognex Technology And Investment Corporation | Control methods and apparatus for coupling multiple image acquisition devices to a digital data processor |
US6748104B1 (en) | 2000-03-24 | 2004-06-08 | Cognex Corporation | Methods and apparatus for machine vision inspection using single and multiple templates or patterns |
US8081820B2 (en) | 2003-07-22 | 2011-12-20 | Cognex Technology And Investment Corporation | Method for partitioning a pattern into optimized sub-patterns |
JP4213052B2 (ja) * | 2004-01-28 | 2009-01-21 | 任天堂株式会社 | タッチパネル入力を用いたゲームシステム |
JP4159491B2 (ja) * | 2004-02-23 | 2008-10-01 | 任天堂株式会社 | ゲームプログラムおよびゲーム装置 |
JP2005346467A (ja) * | 2004-06-03 | 2005-12-15 | Nintendo Co Ltd | 図形認識プログラム |
US20060012611A1 (en) * | 2004-07-16 | 2006-01-19 | Dujmich Daniel L | Method and apparatus for visualizing the fit of an object in a space |
JP4717489B2 (ja) * | 2005-04-07 | 2011-07-06 | 任天堂株式会社 | ゲームプログラム |
US8111904B2 (en) | 2005-10-07 | 2012-02-07 | Cognex Technology And Investment Corp. | Methods and apparatus for practical 3D vision system |
ITUD20050203A1 (it) * | 2005-11-29 | 2007-05-30 | Isomorph S R L | Dispositivo e procedimento per il riconoscimento di un oggetto in un'immagine |
US7965887B2 (en) * | 2005-12-01 | 2011-06-21 | Cognex Technology And Investment Corp. | Method of pattern location using color image data |
DE102005061834B4 (de) * | 2005-12-23 | 2007-11-08 | Ioss Intelligente Optische Sensoren & Systeme Gmbh | Vorrichtung und Verfahren zum optischen Prüfen einer Oberfläche |
US8162584B2 (en) | 2006-08-23 | 2012-04-24 | Cognex Corporation | Method and apparatus for semiconductor wafer alignment |
US8553969B1 (en) | 2012-03-13 | 2013-10-08 | The Procter And Gamble Company | Systems and methods for counting and processing pliable objects |
US9552532B2 (en) | 2013-04-01 | 2017-01-24 | Aselsan Elektronik Sanayi Ve Ticaret Anonim Sirketi | System and method for describing image outlines |
US9679224B2 (en) | 2013-06-28 | 2017-06-13 | Cognex Corporation | Semi-supervised method for training multiple pattern recognition and registration tool models |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4183013A (en) * | 1976-11-29 | 1980-01-08 | Coulter Electronics, Inc. | System for extracting shape features from an image |
US4534813A (en) * | 1982-07-26 | 1985-08-13 | Mcdonnell Douglas Corporation | Compound curve-flat pattern process |
FR2540263B1 (fr) * | 1983-01-31 | 1988-05-20 | Commissariat Energie Atomique | Procede de reconnaissance automatique d'une image a partir d'une image correspondante de reference |
US4783829A (en) * | 1983-02-23 | 1988-11-08 | Hitachi, Ltd. | Pattern recognition apparatus |
JPS60204086A (ja) * | 1984-03-28 | 1985-10-15 | Fuji Electric Co Ltd | 物体識別装置 |
EP0163885A1 (de) * | 1984-05-11 | 1985-12-11 | Siemens Aktiengesellschaft | Anordnung zur Segmentierung von Linien |
US4910786A (en) * | 1985-09-30 | 1990-03-20 | Eichel Paul H | Method of detecting intensity edge paths |
US4982438A (en) * | 1987-06-02 | 1991-01-01 | Hitachi, Ltd. | Apparatus and method for recognizing three-dimensional shape of object |
JP2630605B2 (ja) * | 1987-07-29 | 1997-07-16 | 三菱電機株式会社 | 曲面創成方法 |
-
1996
- 1996-01-02 US US08/581,955 patent/US5751853A/en not_active Expired - Lifetime
- 1996-08-09 WO PCT/US1996/013026 patent/WO1997024692A1/en not_active Application Discontinuation
- 1996-08-09 JP JP52430897A patent/JP3927239B2/ja not_active Expired - Lifetime
- 1996-08-09 EP EP96927380A patent/EP0871940A4/en not_active Withdrawn
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109000583A (zh) * | 2013-05-22 | 2018-12-14 | 康耐视公司 | 使用激光位移传感器进行有效表面测量的系统和方法 |
CN109000583B (zh) * | 2013-05-22 | 2022-04-26 | 康耐视公司 | 使用激光位移传感器进行有效表面测量的系统和方法 |
Also Published As
Publication number | Publication date |
---|---|
US5751853A (en) | 1998-05-12 |
WO1997024692A1 (en) | 1997-07-10 |
EP0871940A4 (en) | 1999-12-22 |
EP0871940A1 (en) | 1998-10-21 |
JP2000502824A (ja) | 2000-03-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP3927239B2 (ja) | 2次元空間曲線中の形状の検出 | |
Shin et al. | Comparison of edge detector performance through use in an object recognition task | |
Marji et al. | Polygonal representation of digital planar curves through dominant point detection—a nonparametric algorithm | |
Rosin et al. | Segmentation of edges into lines and arcs | |
US5933523A (en) | Machine vision method and apparatus for determining the position of generally rectangular devices using boundary extracting features | |
Ziou | Line detection using an optimal IIR filter | |
JPH03294976A (ja) | 基準マークパターン検出装置 | |
JPH0835818A (ja) | 画像処理装置および方法 | |
US7330609B2 (en) | MTF measuring method and system | |
US6728392B1 (en) | Shape comparison using a rotational variation metric and applications thereof | |
Tsai | An improved generalized Hough transform for the recognition of overlapping objects | |
Shen et al. | Real time gray level corner detector | |
Parvin et al. | Adaptive multiscale feature extraction from range data | |
CN114936997A (zh) | 检测方法、装置、电子设备及可读存储介质 | |
JP3819828B2 (ja) | 微細パターン測定方法 | |
KR20120094102A (ko) | 유사도 산출 디바이스, 유사도 산출 방법 및 프로그램 | |
JP4339037B2 (ja) | パターン検出装置、パターン検出方法、パターン検出プログラムおよびコンピュータで読み取り可能な記録媒体 | |
Li et al. | Unmanned aerial vehicle image matching based on improved RANSAC algorithm and SURF algorithm | |
Awrangjeb et al. | A robust corner matching technique | |
Chen et al. | Subpixel estimation of circle parameters using orthogonal circular detector | |
Mustafa | Quick matching of binary images | |
JPH07225843A (ja) | 円中心位置測定方法 | |
Mendonça et al. | Bias in the localization of curved edges | |
JP2007502471A (ja) | 画像中のコンパクト・オブジェクトを検出するシステム及び方法 | |
Dai et al. | An object-based approach to automated image matching |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060613 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20060913 |
|
RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20060913 |
|
A602 | Written permission of extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A602 Effective date: 20061030 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061213 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20070213 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20070302 |
|
R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20110309 Year of fee payment: 4 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130309 Year of fee payment: 6 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140309 Year of fee payment: 7 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
EXPY | Cancellation because of completion of term |