JP4933771B2 - 画像システムにおいてビデオツールを自動的にリカバリーするシステムおよび方法 - Google Patents

画像システムにおいてビデオツールを自動的にリカバリーするシステムおよび方法 Download PDF

Info

Publication number
JP4933771B2
JP4933771B2 JP2005314749A JP2005314749A JP4933771B2 JP 4933771 B2 JP4933771 B2 JP 4933771B2 JP 2005314749 A JP2005314749 A JP 2005314749A JP 2005314749 A JP2005314749 A JP 2005314749A JP 4933771 B2 JP4933771 B2 JP 4933771B2
Authority
JP
Japan
Prior art keywords
tool
image
feature
inspection
edge
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2005314749A
Other languages
English (en)
Other versions
JP2006126200A (ja
Inventor
ケー ブリル ロバート
幸三 有我
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitutoyo Corp
Original Assignee
Mitutoyo Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitutoyo Corp filed Critical Mitutoyo Corp
Publication of JP2006126200A publication Critical patent/JP2006126200A/ja
Application granted granted Critical
Publication of JP4933771B2 publication Critical patent/JP4933771B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • G06T7/0004Industrial image inspection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G06V10/457Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by analysing connectivity, e.g. edge linking, connected component analysis or slices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/94Hardware or software architectures specially adapted for image or video understanding
    • G06V10/945User interactive design; Environments; Toolboxes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30108Industrial image inspection
    • G06T2207/30164Workpiece; Machine component
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/06Recognition of objects for industrial automation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • Quality & Reliability (AREA)
  • Length Measuring Devices By Optical Means (AREA)
  • Investigating Materials By The Use Of Optical Means Adapted For Particular Applications (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Description

本発明は、複数方向に互いに相対移動可能なカメラおよびステージを備える画像検査システムを運転し、ステージ上のワークの選択された特徴を走査および検査する方法に関する。より詳細には、本発明は、このような画像システムにおいて使用されるビデオに基づく検査/測定ツールの動作を自動的にリカバリーし、あるいは、補うシステムおよび方法に関する。
画像検査システム(あるいは、略して『画像システム』)は、検査対象の正確な寸法測定や、様々な他の特性の検査に利用されている。このようなシステムは、コンピュータ,カメラおよび光学システム,カメラが検査対象のワーク特徴を走査できるように複数方向に移動可能な精密ステージを含んでいる。このようなシステムの例として、イリノイ州オーロラのミツトヨアメリカ社(MAC)から市販されているPCベースの画像システムである QUICK VISION(登録商標)シリーズや、QVPAK(登録商標)ソフトウェアが挙げられる。画像システムである QUICK VISION シリーズ、および、 QVPAK ソフトウェアの特徴および動作は、例えば、QVPAK 3D CNC Vision Measuring Machine Users Guide(2003年1月発行)や、QVPAK 3D CNC Vision Measuring Machine Operation Guide(1996年9月発行)に記載されている。この製品(例えば、QV-302 Pro model)は、ワークの画像を様々な倍率で提供し、1つのビデオ画像の境界を超えてワーク表面を横切るようにステージを動かすことができる顕微鏡タイプの光学システムを使用することができる。一般に、所望の倍率,測定分解能が設定され,さらに、物理的サイズの制限があるこのようなシステムでは、1つのビデオ画像が、観察あるいは検査対象のワークの一部のみを囲むに過ぎない。
画像検査システムは、自動ビデオ検査を行う。米国特許第6,542,180号には、このような自動ビデオ検査の様々な側面についての記載がある。この’180特許に記載されているように、自動ビデオ検査測定指示は、自動検査イベントシーケンス(自動検査の手順)がユーザによって各ワーク形状ごとに設定されることを可能とするプログラミング能力を含んでいる。これは、テキストベースプログラミング、または、ユーザによって実行される検査オペレーションのシーケンスに対応する装置制御指示のシーケンスを記録することによって検査イベントシーケンスを累進的に『学習する』記録モード、あるいは、以上の2つの方法の組合せなどによって実行することが可能である。このような記録モードは、通常、『学習モード』や『トレーニングモード』などと呼ばれている。一旦、検査イベントシーケンスが学習モードにおいて定義されると、『実行モード』では、このようなシーケンスによって、ワークの画像を自動的に取得する(そして、さらに解析あるいは検査する)ことができる。
特定の検査イベントシーケンスを含む装置制御指示(すなわち、各画像を取得する方法および各取得画像を解析/検査する方法)は、一般に、特定のワーク形状に固有の『パートプログラム』や『ワークプログラム』として記録される。例えば、パートプログラムは、どのように各画像を取得するか(例えば、どのような照明レベル,倍率レベルの下で、ワークに対してカメラをどのように配置するか)を規定する。さらに、パートプログラムは、どのように(例えば、エッジ/境界検出ビデオツールのような1または複数のビデオツールを使用することによって)取得画像を解析/検査するかを規定する。
ビデオツールが適切に動作するか否かは、ツールの動作に影響を与える装置,画像,ビデオツールパラメータを正しく設定できるか否かにかかっている。例えば、エッジ/境界検出ビデオツールを、画像中の検出対象エッジ/境界上に配置させるためには、画像は正しい照明/輝度,焦点,倍率レベルの下で取得されなければならない。また、ビデオツールの関心領域(すなわち、ビデオ画像中においてビデオツールが探索する領域)も、検出対象のエッジ/境界特徴を含むように設定されなければならない。
一般に、ワーク特徴の画像の取得および特徴の検査を左右する装置およびビデオツールパラメータは、ビデオツールを定義して訓練する初期の段階(例えば、運転またはプログラミングの訓練モード中)において想定された略理想的な状況の下で設定される。これは、一般に、オペレータが、ワーク特徴のリアルタイムの表示を見ながら、当該ワーク特徴の正確な検査結果を提供するために比較的理想的な状態になったとオペレータ自身が判断するまで、関連する装置およびビデオツールパラメータ(例えば、装置の位置,照明,ツールの位置および方向)の調整を行うからである。しかしながら、これに続く実行モードにおいて繰り返し行われるビデオツールの自動動作中には、部分の組立て状態,部分の固定状態,画像装置の劣化,周囲の照明状態などの予期しない各種の変動が生じるため、先に設定された動作パラメータのままでは、ビデオツールに適切な動作を行わせるのに適していない動作条件となってしまう。このように、従来のビデオツールは、例えば、動作条件やワーク特性における1または複数の予期しない変動のために、実行モード中において適切に動作しない場合があった。また、ツールの動作を十分に理解していない比較的経験の浅いユーザが装置,画像,ビデオツールパラメータを正しく設定することができなかった場合、従来のビデオツールは、学習モード中においても適切に動作しない場合があった。
従来、ビデオツールが適切に動作しない場合には、以降のツールの動作が中止され、ユーザはツールのリカバリーをマニュアルで(例えば、ワークに対するカメラの位置,照明,ビデオツールの各種のパラメータをマニュアルで調整することによって)行わなければならなかった。これは煩雑で時間がかかる作業であり、学習モードにおけるオペレータの生産性や、実行モードにおける画像システムの検査処理量を大幅に低下させてしまうことになる。また、オペレータには、ビデオツールが適切に動作しない原因を解析し、動作が適切に行われるようにビデオツールパラメータを調整するための高度の技術や経験が必要とされることになる。
したがって、適切でないビデオツールの動作を自動的にリカバリーし、あるいは、補い、ビデオツールが適切に動作しないときにもオペレータが介入する必要のない方法およびシステムが必要である。
本発明は、画像システムにおいて適切に動作しないビデオツールを自動的にリカバリーする方法およびシステムを提供する。本発明は、ビデオツールに関連する、あるいは、ビデオツールに一体化され、当該ビデオツールが適切に動作しなくなったときに『呼び出される』プログラムまたはルーチンを提供し、当該ツールを自動的にリカバリーして検査結果の提供を続行できるようにする。すなわち、ビデオツールが適切に動作しなくなったときのために、リカバリープログラムまたはルーチンは、ワーク特徴の画像の取得および特徴の検査を左右する関連する装置,画像,ビデオツールパラメータを修正,再プログラム,調整する動作を含んでいる。以下、ワーク特徴の画像の取得および特徴の検査の重要な側面を左右する装置,画像,ビデオツールパラメータを、まとめて、あるいは、個別に、特徴検査パラメータと称する。
画像検査システムにおいてビデオツールの動作を自動的にリカバリーする方法は、次の3つのステップを含むリカバリーの画像特性解析フェーズを含んでいてもよい。
1のステップ(a)では、検査対象のワーク特徴との関係でビデオツールが適切に動作していないことを検出すると、特徴の画像の解析に基づいて、少なくとも特徴の周囲の領域において、1または複数の画像特性値が決定される。画像特性値は、画像の輝度,画像の焦点のような画像の特性または特質を示す値であればどのようなものでもよい。
2のステップ(b)では、決定された各画像特性値について、当該値が許容範囲(大抵は、予め決まっている範囲,デフォルト範囲,1または複数の特徴検査パラメータによって決まる範囲などである)内に入っているか否かが判断される。特性値に応じて、画像が暗過ぎる,明る過ぎる,焦点がずれているなどと、画像についての判断を下すことができる。
3のステップ(c)では、画像特性値が許容範囲内に入るように、画像検査システムにおける適当な特徴検査パラメータが調整される。少なくとも、画像の平均輝度が許容範囲外である場合には、画像の照明状態に影響を与える各種のハードウェア/ソフトウェアパラメータが調整される。
本発明では、複数の特徴検査パラメータを考慮に入れて、前述した方法と同様に特徴検査パラメータを評価および修正する方法を、各特徴検査パラメータについて繰り返し行う。例えば、前述したようなリカバリーの画像特性解析フェーズを経てもビデオツールが適切に動作しない場合には、リカバリーの追加的なフェーズ(例えば、ツール/特徴位置および方向解析フェーズ)が実行され、他の特徴検査パラメータが調整される。さらに、このようなリカバリーの追加的なフェーズを経てもビデオツールが適切に動作しない場合には、リカバリーの画質向上フェーズが実行されるようにしてもよい。
調整作業は、特徴検査パラメータの数に関係なく実行される。ここで、複数の特徴検査パラメータおよびこれに関係する特徴を考慮に入れた調整作業の順序は、最も効率的に自動ツールリカバリープロセスを実行することができるように、予め設定されている。例えば、他の特徴検査パラメータを評価や調整するために適切に設定することが必要である特徴検査パラメータは、最初に評価および調整されるようになっており、他のパラメータが適切に調整された後だと評価や調整を最も良く行うことができるような特徴検査パラメータは、最後に評価および修正されるようになっている(例えば、多くの場合、画像の焦点は、画像の輝度が評価および調整された後だと、最も良く評価および修正される)。さらに、ツールが適切に動作しなくなってしまう際に生じる頻度が最も高い原因のうちの少なくとも1つに関連する特徴検査パラメータは、比較的早い段階で評価および修正されたほうがよく、ツールが適切に動作しなくなってしまう際に生じる頻度が比較的低い原因に関連する特徴検査パラメータは、比較的遅い段階で考慮されたほうがよい。さらに、比較的少ない、あるいは、高速で解析および調整されるハードウェア/ソフトウェア特性の調整によって修正可能な特徴検査パラメータは、比較的早い段階で評価および修正されたほうがよく、いくつかの、あるいは、比較的低速で解析および調整されるハードウェア/ソフトウェア特性の調整を必要とする特徴検査パラメータは、比較的遅い段階で考慮されたほうがよい。
ビデオツールを自動的にリカバリーする本発明の方法では、画像の輝度や画像の焦点を示す1または複数の画像特性値を算出してもよい。そして、いずれかの画像特性値が所定の許容範囲外であると判断されると、画像特性値が所定の許容範囲内に入るように、画像検査システムにおける適当なハードウェア/ソフトウェアパラメータ(例えば、各種の照明制御パラメータ)が調整される。
本発明の方法は、ビデオツールの位置や方向を再設定するステップ、より正確に言えば、検査対象の特徴に対してビデオツールの関心領域の位置や方向を再設定するステップを含んでいてもよい。このステップは、例えば、画像中におけるビデオツールの関心領域の位置の再設定や、ワークに対するカメラの位置の再設定および新しい画像の取得(必要であれば)などによって実行される。
本発明の方法は、ビデオツールの各種の動作パラメータを調整するステップを含んでいてもよい。例えば、各種のエッジ検出ツールについて、エッジ極性インジケータ,1または複数のエッジ検出閾値,その他のエッジツールパラメータを、画像の各種の特性に基づいて調整してもよい。端的に言えば、エッジ検出閾値は、ビデオツールがエッジ/境界特徴の存在を認識する光の強度勾配を規定する。したがって、ビデオツールのエッジ検出閾値を低くすれば、ツールは、光の強度勾配が小さい『弱い』エッジにも敏感に反応するようになる。多くの画像検査システムでは、学習モードにおいて、特徴検査のために配置されたエッジ検出ツールを『訓練』することによって、特定のワーク特徴と関連する1または複数のエッジ検出パラメータについて特定の値が決定される。このような訓練は、学習モードにおいて定型的に自動的に実行され、これに関連するパラメータ値が、ワーク検査のためのパートプログラムと関連付けられて記録される。
本発明では、各種の特徴検査パラメータを調整してもビデオツールが適切に動作しない場合には、1または複数の画質向上オペレーションを実行して、ビデオツールが適切に動作するようにしてもよい。例えば、各種のフィルタリングあるいは画像閾値オペレーションなどを、少なくとも検査対象の特徴周りの画像領域において実行してもよい。その後、ビデオツールは、結果として得られる画像上で再度実行される。しかしながら、このような場合、画質向上オペレーションが検査対象の特徴において検査に関連する側面を、(例えば、当初から明白だったエッジの位置を移動させることによって)大幅に変化させないように注意を払うことが重要である。
本発明では、リカバリーオペレーションのセットを行ってもビデオツールが適切に動作しない場合には、このビデオツールを、これと同様の検査結果を出すことができ、かつ、よりロバストなビデオツールに取り替えてもよい。例えば、ワーク画像における強度勾配に基づいて動作する従来のエッジ検出ツールは、周縁照明効果や、粗い面に囲まれることによるエッジの不明瞭化などのために、適切に動作しないことがある。このような場合、リカバリーオペレーションは、当該従来のエッジ検出ツールを、色や手触りなどの変化に基づく境界検出ツールに取り替えるステップを含んでいてもよい。但し、このようなツールの『取替え』は、実行するのに時間がかかり、あるいは、精度が低下してしまうこともあるので、最初から実行するのは好ましくない。
本発明の自動ツールリカバリー方法は、画像検査システムの制御システム部にロードされるコンピュータによって実行可能な指示によって実行されてもよい。
本発明では、照明,焦点,位置,方向,ワークエッジ/表面特性揺らぎなどについての許容度が高いロバストなビデオツールが設けられていてもよい。このビデオツールは、検査対象のワークの画像上において所定の画像解析/検査オペレーションを実行するように形成される。さらに、このビデオツールは、適切に動作しないツールのリカバリーを自動的に試みる自動ツールリカバリー指示の組と関連している。このような指示は、例えば、コンピュータプログラムに含まれていてもよい。また、指示はビデオツールの動作と一体不可分に構成されていてもよい。また、指示は、ビデオツールの動作とは別々に記録されているものの、当該ビデオツールの動作と関連して動作するプログラムやルーチンなどを含んでいてもよい。自動ツールリカバリー指示が、前述した本発明の1または複数の側面のいずれかに応じて動作するようにしてもよい。
本発明において、自動ツールリカバリー指示の動作は、全体に亘って、または、特定のビデオツールの動作との関係において、あるいは、両者を包含する形で、ユーザによって設定可能である。例えば、ユーザは、1あるいは複数の選択されたタイプの特徴検査パラメータの調整(例えば、照明の調整,焦点の調整,位置および方向の調整)が、自動リカバリー指示によって実行されるように、当該指示を設定することができる。他の例として、ユーザは、本来的に指示によって実行されるべき各タイプの調整について、許容レベルまたは許容調整範囲を指定してもよい。
本発明において、自動ツールリカバリー指示は、適切に動作しなかったビデオツールのタイプや、各ツールをリカバリーするために実行された調整のタイプなどを、特定の特徴,ワーク,画像検査システムなどと関係付けて記録するように設定されてもよい。このようなデータは、ユーザによって集められて解析され、例えば、ツールが適切に動作しなくなる原因のうち頻度の高いものを調査して、このようなことが将来的に起こらないようにするために利用されてもよい。例えば、解析に基づいて、ユーザは、装置を調整または修理してもよいし、各ツールが適切に動作するように各種のハードウェア/ソフトウェアパラメータを最適に規定してもよいし、各種の関係するリカバリーオペレーションを、全体に亘って、または、特定のツールとの関係において最適に設定してもよい。
本発明において、パートプログラムが、CADデータなどに基づいて『オフライン』で生成され、本発明の自動リカバリーオペレーションを含むようにしてもよい。オフラインで生成されたパートプログラムは、最初は実際のワークを検査するために実行され、自動リカバリーオペレーションは、当該最初の実行中に適切に動作しない少なくともいくつかのビデオツールをリカバリーしようと試みる。ツールのリカバリーが成功すると、成功したツール動作に用いられた調整済みの特徴検査パラメータが、最初にパートプログラムに含まれていた『適切でない』パラメータ取り替えるために用いられる。この取替えは、成功したツールリカバリーに用いられた調整済みの特徴検査パラメータを特定する出力された報告に基づいてマニュアルで実行されてもよいし、半自動的に実行されてもよいし、自動的に実行されてもよい。取替えが半自動的または自動的に実行される場合には、自動取替えを行わせる指示は、取替えが行われた後には不要となって削除してもよく、結果として得られる新しいパートプログラムを、ユーザが故意に変えようとしない限り『安定』なものとしてもよい。結果として得られる新しいパートプログラムは記録される。この新しいパートプログラムは、その後、最初のパートプログラムよりも優先的に自動検査オペレーションにおいて使用される。
本発明の自動リカバリーオペレーションを含むパートプログラムは、実際のワークを検査するために実行され、自動リカバリーオペレーションは、実行中に適切に動作しない少なくともいくつかのビデオツールをリカバリーしようと試みる。このパートプログラムは、成功したツールリカバリーに用いられた1または複数の調整済みの特徴検査パラメータが、先にパートプログラムに含まれていた対応する『適切でない』パラメータと自動的に取り替えられるようにする指示を含む。この自動取替えを行わせる指示は、取替えが行われた後には不要となって削除してもよく、結果として得られる新しいパートプログラムを、ユーザが故意に変えようとしない限り『安定』なものとしてもよい。また、成功した特徴検査パラメータが、対応する『適切でない』パラメータと取り替えられることを可能にする指示が、パートプログラム中に存在し続けてもよく、当該指示は、ユーザが1または複数の適当なパートプログラム制御ステートメントを追加または変更することによって、実行可能とすることも実行不可能とすることもできるようにしてもよい。
図1は、本発明の画像検査システム10の一例を示す図である。画像検査システム10は、データや制御信号をやり取りするために制御コンピュータシステム14と接続された画像測定装置12を含んでいる。制御コンピュータシステム14は、さらに、データや制御信号をやり取りするためにモニタ16,プリンタ18,ジョイスティック22,キーボード24,マウス26と接続されている。画像測定装置12は、可動ワークステージ32と、拡大レンズや交換可能レンズ群などを含む光学画像システム34とを含んでいる。ズームレンズや交換可能レンズ群によれば、光学画像システム34によって取得される画像の倍率を調整することができる。
ジョイスティック22を用いれば、光学画像システム34の焦平面と平行なX方向およびY方向に沿う可動ワークステージ32の移動を制御することができる。また、ジョイスティック22によって、Z方向あるいは焦点方向に沿う光学画像システム34の移動を制御することもできる。ここで、Z方向移動は、ジョイスティック22におけるハンドルやノブの回転要素によって制御されるようになっている。なお、ジョイスティック22の機能を他のものに持たせてもよい。例えば、マウス26などのコンピュータ入力装置によって制御可能な『仮想的な移動制御装置』をモニタ16上に表示させて、ジョイスティック22の代わりに用いてもよい。
図2は、本発明に基づく画像検査システム100における制御システム部120と画像コンポーネント部200とを示す図である。詳細については後述するが、制御システム部120は、画像コンポーネント部200を制御するために利用される。画像コンポーネント部200は、光学アセンブリ部205と、光源220,230,240と、中央透明部212を有するワークステージ210とを含んでいる。ワークステージ210は、ワーク20が載置されるステージ面と平行な平面上に設定されるX軸およびY軸に沿って移動可能である。光学アセンブリ部205は、カメラシステム260と、交換可能な対物レンズ250と、タレットレンズアセンブリ280と、同軸光源230とを含んでいる。なお、タレットレンズアセンブリ280の代わりに、固定された、あるいは、手で交換可能な倍率可変レンズや、拡大レンズなどを設けてもよい。後述するように、光学アセンブリ部205は、制御モータ294によって、X軸およびY軸と垂直なZ軸に沿って移動可能である。
画像検査システム100によって画像が取得されるワーク20は、ワークステージ210に載置される。光源220,230,240の少なくとも1つが、光源光222,232,242をそれぞれ出射し、ワーク20を照明する。ワーク20を照明した光は、ワーク光255のように反射または透過し、交換可能な対物レンズ250,タレットレンズアセンブリ280を通過した後、カメラシステム260に集められる。カメラシステム260によって取得されたワーク20の画像は、信号線262によって制御システム部120に出力される。
ワーク20の照明に利用される光源220,230,240は、ステージ光220,同軸光230,リング光やプログラム制御可能なリング光のような表面光240を出射可能であり、それぞれ、信号線あるいはバス221,231,241を介して制御システム部120に接続されている。光学アセンブリ部205は、画像検査システム100における第1光学アセンブリとして、前記の各構成要素に加えて、レンズ,開口部のような光学素子,ビームスプリッタなどの同軸照明を生成する際に必要な構成要素や、画像検査システムのその他の機能にとって望ましい構成要素などを含んでいてもよい。そして、このような第1光学アセンブリに加え、画像検査システム100における第2の光学アセンブリとして、タレットレンズアセンブリ280は、少なくとも、第1タレットレンズ位置およびレンズ286,第2のタレットレンズ位置およびレンズ288を含んでいる。制御システム部120は、信号線あるいはバス281を介して、タレットレンズアセンブリ280を、少なくとも第1および第2のタレットレンズ位置間において、軸284回りに回転させる。
ワークステージ210と光学アセンブリ部205との間の距離は調整可能であり、カメラシステム260によって取得されるワーク20の画像の焦点を変化させることができる。特に、本実施形態では、光学アセンブリ部205は、アクチュエータを駆動する制御モータ294や接続ケーブルなどによって、ワークステージ210に対してZ軸方向に沿った相対移動が可能であり、当該光学アセンブリ部205をZ軸に沿って移動させることができる。ここで、Z軸とは、光学アセンブリ部205によって取得される画像の焦点合わせをする際の移動方向に沿う軸のことである。制御モータ294は、使用時には、信号線296を介して入出力インターフェイス130に接続される。
図2に示されるように、本実施形態では、制御システム部120は、コントローラ125と、入出力インターフェイス130と、メモリ140と、ワークプログラム生成手段および実行手段170と、CADファイル特徴抽出手段180と、電源部190とを含んでいる。これらの各構成要素は、以下で述べる追加的な構成要件と同様、データ/制御バスやアプリケーションプログラミングインターフェイスなどによって相互に接続され、あるいは、各種の構成要素と直接接続される。
入出力インターフェイス130は、画像制御インターフェイス131と、移動制御インターフェイス132と、照明制御インターフェイス133と、レンズ制御インターフェイス134とを含んでいる。移動制御インターフェイス132は、位置制御要素132aと、速度/加速度制御要素132bとを含んでいる。ここで、これらの要素は一体不可分のものとして構成してもよい。照明制御インターフェイス133は、画像検査システム100における対応する光源(例えば、光源220,230,240)についての、選択,電力,オン/オフスイッチ,ストロボパルスタイミングなどを制御する照明制御要素1331〜133nを含んでいる。
メモリ140は、画像ファイルメモリ部141と、パートプログラムなどを格納可能なワークプログラムメモリ部142と、ビデオツール部143とを含んでいる。ビデオツール部143は、対応するツールについてGUI(Graphical User Interface)や画像処理オペレーションなどを決定するツール部1431〜143mを含んでいる。また、ビデオツール部143は、当該ビデオツール部143に含まれる各種のビデオツールにおいてオペレート可能な各種の関心領域を定義する自動,半自動,手動オペレーションをサポートする関心領域生成手段143xも含んでいる。メモリ140は、画像中に所望の画像特徴が含まれるようにワーク20の画像を取得する画像コンポーネント部200のオペレートに利用されるデータを格納する。さらに、メモリ140は、取得された画像に対して各種の検査,測定オペレーションを手動または自動で実行し、結果を入出力インターフェイス130を通じて出力する画像検査システム100のオペレートに利用されるデータも格納する。また、メモリ140は、入出力インターフェイス130を通じてオペレート可能なGUIを定義するデータも格納する。
ステージ光220,同軸光230,表面光240の信号線あるいはバス221,231,241は、それぞれ、入出力インターフェイス130に接続される。カメラシステム260からの信号線262、および、制御モータ294からの信号線296も入出力インターフェイス130に接続される。信号線262は、カメラシステム260からの画像データの伝送に加えて、コントローラ125からの画像取得開始信号の伝送も行う。
1または複数の表示装置136や、1または複数の入力装置138を入出力インターフェイス130に接続することもできる。表示装置136および入力装置138は、パートプログラムの視認,生成,修正、カメラシステム260によって取得された画像の視認、画像コンポーネント部200の直接制御などに利用することができる。なお、予め設定されたパートプログラム(あるいは、ワークプログラム)を有する完全に自動化されたシステムにおいては、表示装置136や入力装置138は省略することができる。
CADファイル特徴抽出手段180に関しては、ワークや、これと実質的に同一のワークについての過去の画像などを表現するCADファイルのような情報が、画像検査システムを産業上の応用する際にしばしば利用可能である。CADファイル表現のケースでは、CADファイル表現におけるエッジや境界の位置は、CADファイル特徴抽出について知られている各種の方法に基づいて、手動/半自動/完全自動でCADファイル表現から決定することができる。
本実施形態では、ユーザがワーク20についてのワーク画像取得プログラムを生成するために画像検査システム100を使用する場合、ユーザは、ワークプログラミング言語を用いて自動,半自動,手動で明示的に指示をコード化するか、あるいは、ワークプログラム指示がトレーニングシーケンスを取り込めるように、画像検査システム100に画像取得トレーニングシーケンスを行わせることによって、ワークプログラム指示を生成する。このプロセスは、取得される画像群における複数の画像に対して繰り返し行われる。これらの指示は、実行されると、ワーク20の特定部分が、カメラシステム260の視野内に入っており、かつ、取得される画像群の各画像において所望の焦点状態にあるように、ワークステージ210やカメラシステム260を所定の速度で画像検査システムに操作させる。このようなカメラとワークとの相対移動を制御するプログラム指示に加えて、画像取得時にワーク20を所望の照明状態に置けるように光源220〜240を駆動するプログラム指示も必要であるところ、これを行うワーク画像取得プログラムも必要である。
一旦、ワーク画像取得指示のセットが規定されると、制御システム部120は、指示を実行し、当該指示に従ってワーク20の1または複数の画像を取得するようにカメラシステム260に指令する。そして、制御システム部120は、コントローラ125による制御の下、取得された画像を入出力インターフェイス130を通じて入力し、当該画像をメモリ140に記憶する。コントローラ125は、取得された画像を表示装置136に表示させることもできる。
制御システム部120は、さらに、取得,記憶されたワーク検査画像を読み出したり、このようなワーク検査画像においてワーク特徴を検査,解析したり、検査結果を記録,出力したりすることもできる。このような方法は、メモリ140におけるビデオツール部143に含まれる各種ビデオツールにおいて実現される。このようなツールとしては、例えば、エッジ/境界検出ツール(その一例が、米国特許出願第09/987,986号に開示されている),形状またはパターンマッチングツール,寸法測定ツール,座標マッチングツールなどが挙げられる。このようなツールは、画像システムであるQUICK VISION(商標)シリーズや、これと関連する前記のQVPAK(商標)ソフトウェアなどのような市販されている各種の画像検査システムにおいて、慣習的に使用されているものである。
QVPAK ソフトウェアにおいて利用可能なビデオエッジ/境界検出ツールは、例えば、ポイントツール,ボックスツール,サークルツール,アークツールを含んでいる(QVPAK 3D CNC Vision Measuring Machine User’s Guide 参照)。簡潔に言えば、ポイントツールは、画像と、当該画像上に配置される1つの走査線との交点をデータポイントとして生成する(あるいは、交点の位置がデータポイントの位置であると突き止める)。ボックスツールは、互いに平行な一連の走査線を生成する。ここで、各走査線は、エッジ特徴が検出された点をデータポイントとして生成する。サークルツールは、原点周りの360°に亘って当該原点から径方向に沿って放射状に形成される一連の走査線を生成する。ここでも、各走査線は、エッジ特徴が検出された点をデータポイントとして生成する。アークツールは、原点から径方向に沿って放射状に形成される一連の走査線を生成する。ここでも、各走査線は、エッジ特徴が検出された点をデータポイントとして生成する(アークツールは、例えば、角が丸くなった部分からデータポイントを生成する上で有用である)。これらの各ツールは、画像における特定のエッジ/境界特徴を自動的に検出するために使用される。
これらのビデオツールのうちの1または複数を用いる画像検査/解析オペレーションが完了すると、制御システム部120は各解析/検査オペレーションの結果を入出力インターフェイス130に出力し、さらに、ビデオディスプレイ,プリンタなどのような各種の表示装置136に出力する。制御システム部120は、各検査オペレーションの結果をメモリ140に記録してもよい。
背景技術のセクションで述べたように、ビデオツールは各種の原因(例えば、ビデオツールの動作に影響を与えるパラメータの少なくともいくつかが正しく設定されていないなど)で適切に動作しないことがあり、また、部分の組立て状態,部分の固定状態,画像装置の劣化,周囲の照明状態などの予期しない各種の変動が生じると、先に設定された動作パラメータのままでは、ビデオツールに適切な動作を行わせるのに適していない動作条件となってしまうこともある。ビデオツールが適切に動作しない場合には、制御システム部120がエラーメッセージをビデオディスプレイなどに出力し、ツールが適切に動作せず、解析/検査結果を提供できなかったことをユーザに通知する。このような場合、従来では、ユーザがツールをマニュアルでリカバリーしなければならなかった。これに対して、本実施形態では、適切に動作しないビデオツールを、例えば、1または複数のメモリ140に格納されている自動リカバリー指示にしたがって、自動的にリカバリーする方法およびシステムを提供することができる。
図3Aは、自動ツールリカバリールーチン300を示すフローチャートである。現画像においてツールが適切に動作しなくなると、ブロック301では、当該現画像が解析され、各種の画像特性が決定および記録される。例えば、画像の平均輝度,画像において飽和した画素の数,画像の焦点状態を示す値などが算出されて記録される。以下、画像特性値という語を、取得された画像におけるいくつかの特性または特質を示すあらゆる値を包含する語として用いる。なお、画像特性値は、状態や特性の単純な有無を示すだけのものであってもよい。このような画像特性値(例えば、平均輝度,飽和度,焦点状態)を決定する上で有用な各種の方法およびビデオツールは、例えば、前述した QVPAK ソフトウェアにおいて利用可能である。先に引用した’180特許や、’986出願は、各種の画像について適用可能な、エッジ可視度,コントラスト,その他の特性に関連して画像特性を決定する方法について詳細に記述している。なお、以上の開示事項から当業者にとって明白となるような他の有用な特性、および、これらを決定するための方法は、当然、本発明の技術的範囲に属する。
判定ブロック302では、ブロック301において決定された各種の画像特性が許容可能か否かの評価が行われる。評価は、例えば、数値で表される画像特性を許容範囲と比較することによって行うことができる。また、画像特性が状態や特性の有無を示すインジケータである場合は、これを所望の状態と比較することによって評価を行うことができる。いずれの場合も、評価された画像特性の全てが許容可能であれば、オペレーションはブロック306にジャンプする。逆に、評価された画像特性のいずれかが許容可能でない場合には、オペレーションはブロック303に進む。
ブロック303では、評価された画像特性が許容可能になるように、適当な特徴検査パラメータ(ここでは、1または複数の画像取得パラメータ)が調整される。例えば、ブロック302において、画像の平均輝度(または強度値)が低すぎると判定された場合には、ブロック303では、平均輝度値に影響を与えるハードウェア/ソフトウェアパラメータ(例えば、光パワーレベルパラメータ)が調整される。他の例として、先に引用した’180特許および’986出願に開示されているツールのような1または複数の評価ツールが自動的に実行され、適当な画像取得パラメータやツールパラメータが自動的に調整されるようにしてもよい。また、米国特許第6,627,863号に開示されているツールのような包括的な自動照明選択および調整ツールを利用してもよい。同様に、市販されている多くの画像検査システムに含まれている自動焦点ツールを利用してもよい。さらに、適当な画像取得パラメータやツールパラメータを、合理的な範囲内で最初の設定から変化させ、変化させた結果得られる画像特性の評価が、許容可能な画像特性結果が得られるまで、あるいは、ビデオツールが適切に動作するようになるまで、続けられるようにしてもよい。より一般的には、パラメータの調整が、各種の公知の方法にしたがって行われるようにしてもよい。
ブロック303において、適当な画像取得パラメータが調整され、評価された画像特性が許容可能になると、ブロック304では、ビデオツールが、結果として得られる調整された画像に基づいて実行される。なお、ビデオツールが、ブロック303におけるパラメータ調整評価の一部として同じ画像について実行されていた場合には、ブロック304のオペレーションが、実質上、既に実行されていたことになる。いずれの場合も、ビデオツールが実行された後は、判定ブロック305に進み、ツールが適切に動作したと判定された場合には、ブロック305´が実行されてルーチンが終了する。
ブロック305´は、必要な場合にのみ実行すればよい。ブロック305´では、『ツールリカバリー報告』の準備および出力または記録が行われる。このような報告は、例えば、発生したツールの不適切な動作のタイプを明らかにするとともに、ツールをリカバリーするためにどの特徴検査パラメータの調整が行われたかを明らかにするようなものとすることができる。このような報告は、装置の劣化,部分の組立て状態の予期しない変動などを検出あるいは分析する上で有益である。パートプログラムが類似の部分について繰り返し実行される状況下では、このような一連の報告が、不適切な動作と、そのリカバリーの傾向を知るために解析され、部分組立てプロセスについての『プロセスドリフト』を検出することができ、画像システムに対する予防的なメンテナンスの必要性を明らかにすることができる。また、このような一連の報告は、パートプログラム指示において不適切に動作しがちなパラメータを見逃すことなく取り替えることができる1または複数の『最良の』あるいは平均的な特徴検査パラメータの調整方法を明らかにし、続くワーク検査中におけるビデオツールの不適切な動作を防止あるいは低減する上で有益である。
一方、調整された画像においてもツールが適切に動作しない場合には、ブロック305から判定ブロック306に進む。判定ブロック306では、当該ビデオツールについて、他に評価,調整すべき特徴検査パラメータがあるか否かが判定される。ビデオツールの不適切な動作のいくつかの潜在的な原因を自動的に修正することのリスクが大きすぎる場合(例えば、画像における特徴が極度に粗かったり、ノイズ成分を多く含んでいたりする場合や、各特徴が互いにかなり接近している場合など)には、自動ツールリカバリーオペレーションが、不適切なツールをリカバリーしようとする際には、いくつかの『リスクの小さい』パラメータ(例えば、照明を左右するパラメータ)を調整し、『リスクが大きい』とされるパラメータの調整(例えば、間隔が狭く、極度に粗い各特徴間へのビデオツールの再配置)を避けるように設定されてもよい。これは、欠陥のある検査結果が生じる可能性を少なくするための保守的なアプローチであるが、一方で、適切に動作しないツールのリカバリーのためにオペレータが介入する必要性を高めてしまうことにもなる。逆に、多くのタイプの自動パラメータ調整が『リスクの小さい』ものである場合(例えば、検査対象の各ワーク特徴が、なめらかで(粗くなく)、互いに十分に離隔している場合)には、自動ツールリカバリーオペレーションが、全ての自動調整可能なパラメータの調整を試みるように設定されてもよい。以上のように、自動リカバリーの試みに含まれる特定のタイプのパラメータ、または、個々のパラメータは、デフォルト条件として設定されてもよいし、特定の用途,個々の特徴,個々のビデオツール向けに(例えば、学習モードにおけるオペレータの入力に基づいて)設定されてもよい。いずれの場合も、許容可能な自動パラメータ調整候補は、判定ブロック306における判定をサポートするように規定される。ブロック306において評価,調整すべき特徴検査パラメータが他にないと判定された場合(他のパラメータの評価,調整が禁止されている場合や、パラメータについて試みた全ての調整がうまくいかなかった場合)には、ブロック307に進み、ツールの失敗表示あるいは報告が出力され、ルーチンが終了する。失敗表示は、ユーザに警告して、ツールを適切に動作させるためのユーザの介入を促すためのものである。例えば、ビデオツールの不適切な動作が、ハードウェア/ソフトウェアパラメータの調整では直すことのできない装置の故障(例えば、ライトバルブの故障)に起因している場合には、ユーザの介入が必要である。
一方、ブロック306において当該ビデオツールについて評価,調整すべき他の特徴検査パラメータがあると判定された場合には、ブロック308に進む。ブロック308では、現画像(ルーチン300において先に行われたパラメータ調整によって『改善された』画像)が、評価,調整対象の現特徴検査パラメータに関連する特定の特性,プロセス,パラメータに関して解析される。例えば、評価対象の特徴検査パラメータが、予期される特徴(例えば、エッジ)が現画像におけるビデオツールの関心領域中に存在することを保証するパラメータである場合は、関心領域が検査されて、エッジを示す強度勾配の有無や大小が判定される(なお、エッジの有無を示すために必要とされる条件は、エッジ位置を正確に測定するために必要とされる条件と異なっていてもよい)。続いて、ブロック309では、ブロック308において解析された各種の特性や要素についての結果が評価され、これらがビデオツールの適切な動作をサポートする上で許容可能か否かが判定される。結果が許容可能である場合には、判定ブロック306に戻り、評価,調整すべき他の特徴検査パラメータがあるか否かが判定される。逆に、結果が許容可能でない場合には、ブロック310に進む。
ブロック310では、適当な特徴検査パラメータが、現特徴検査パラメータに関連する特性,プロセス,パラメータがツールを適切に動作させる上で許容可能になるように調整される。例えば、判定ブロック309において、エッジツールの関心領域中にエッジを示す勾配が1つもないと判定された場合には、ブロック310では、関心領域周りの合理的な範囲内において探索を行い、向きの調整を誤った(想定される)エッジ特徴の位置を突き止め、これに合わせて関心領域の位置パラメータを調整するためのオペレーションが実行される。なお、このようなオペレーションの詳細については、後述する。このような修正が、現特徴検査パラメータがツールの適切な動作をサポートすることを保証するために行われると、ブロック304に戻り、調整されたパラメータに基づいてツールが再度実行される。ブロック304〜310のオペレーションは、ツールが適切に動作したか、自動リカバリーオペレーションに利用可能なパラメータの調整がうまくいかなかったか、のいずれかの原因によってルーチンが終了するまで繰り返し行われる。
詳細については後述するが、各種の画像特性や他の特徴検査パラメータが考慮される順序は、ツールリカバリーにおける効率を最大限に高める上で重要である。特に、いくつかの画像,ツールパラメータは、他のパラメータ(例えば、画像焦点は、画像の輝度が適切に調整された後だと最も良く評価,調整することができる)の評価,調整を可能にするために、最初に評価,調整されなければならない。他に考慮すべきことは、ツールの不適切な動作のいくつかの原因が他の原因よりも頻繁に生じる場合は、自動リカバリーシーケンスの初期の段階でこれらに関連するパラメータの評価を行う必要があることである。また、いくつかの特徴検査パラメータが、他のパラメータよりも簡単に、または、早く修正することができるということも考慮すべきである。例えば、LED照明が使用される場合、照明変動は、ワークの配置よりも大幅に早く評価,調整,テストすることができる。このように、『早く調整可能な』パラメータをリカバリーシーケンスの初期の段階で調整することによって、多くの場合、リカバリーの実行速度を大きくすることができる。また、ツールの不適切な動作の頻度の高い原因に対応する画像特性値,修正が簡単な画像特性値,他のパラメータの評価または修正を可能にするために修正されなければならない画像特性値は、自動ツールリカバリープロセスを最も効率的に行わせるために、最初に考慮されて修正されるべきである。例えば、図3Bを参照して詳細に述べるように、取得された画像の照明や焦点の質を示す画像特性値は、最初に考慮されて修正されるべきである。
公知のファジーロジック(fuzzy logic)やニューラルプログラミングトレーニングメソッド(neural programming training method)を使用することによって、ブロック301および308において実行される特性解析の結果と、当該結果の観測されたパターンを修正する上で効果的なパラメータとの関連を『予め決定する』ことができる。すなわち、公知の方法にしたがって、典型的な画像および欠陥の組を利用した『分類手段』の発展あるいは訓練を行うことができる。この分類手段は、(例えば、ブロック302〜303,308〜309における)特性解析の結果に対しても適用可能であり、結果を分類して、対応するクラスに属する欠陥を修正する上で効果的であることが分かっている対応するパラメータ調整方法を選択することができる。このような方法は、ロバストで迅速な欠陥解析を実現することが知られている。しかしながら、このような技術を利用した場合であっても、分類手段の第1の組を、ツールの不適切な動作の頻度の高い原因に対応する特性値,修正が簡単な、あるいは、修正に時間のかからない特性値,他のパラメータの評価または修正を可能にするために修正されなければならない特性値に対応する特性の第1の組に、最初に適用するほうが有利である。これに続いて、分類手段の第2の組を、ツールの不適切な動作の頻度の低い原因に対応する特性値,修正が困難な、あるいは、修正に時間のかかる特性値,他のパラメータの修正の後だと最も良く修正される特性値に対応する特性の第2の組に適用して、最も効率的に自動ツールリカバリープロセスが遂行されるようにしてもよい。例えば、特性および分類手段の第1の組を、輝度および焦点に関する画像取得パラメータに主として関連するものとし、特性および分類手段の第2の組を、評価および調整を行うためには適切に照明され焦点が合った画像を必要とする特徴検査パラメータ(例えば、位置,方向に関連するパラメータや、正確な測定結果を保証する特徴固有のエッジ検出パラメータ(勾配関連閾値パラメータや、エッジを横切る強度変化についての閾値パラメータを含んでいてもよい))に関連するものとしてもよい。
図3Bは、ビデオツールの自動リカバリーの比較的詳細なルーチン315を示すフローチャートである。ルーチン315では、ツールの不適切な動作の4つのタイプの原因、すなわち、不適切な照明,不適切な焦点,画像における特徴に対するビデオツールの不適切な位置または方向,1または複数の不適切なエッジ検出パラメータを取り扱う。ルーチン315は、これらの原因をこの順序で取り扱う。これは、多くの場合、ツールの不適切な動作のいくつかの潜在的な原因を修正することが、他の原因を信頼性の高い評価および修正を行うためには必要だからである(例えば、焦点の評価は、適切な画像照明レベルが確保された後に限って最も良く行われる)。これらの各種の原因が取り扱われる順序は、特定の応用に対して有効な各種の仮定や判断に基づいて変更してもよいし、さらに、特定の応用に対応する特定のルーチンでは、より多くの、あるいは、より少ない原因を取り扱うようにしてもよい。なお、ルーチン315における順序は、不適切な動作の原因とパラメータの調整とを組み合わせる上で有利である。
ブロック316においてビデオツールの不適切な動作が生じると、判定ブロック318では、画像の輝度が評価され、許容範囲内に入っているか否かが判定される。例えば、ビデオツールの関心領域内において、平均輝度や飽和画素数が算出され、当該各値についての所定の許容可能範囲と比較される。画像の輝度が許容範囲内に入っていない場合には、少なくとも関心領域において、取得画像の輝度に影響を与える適当なハードウェア/ソフトウェアパラメータが調整される(ブロック320)。例えば、使用される光源の数/タイプと、各光源の光パワーレベルとが調整される。これとの関係で、自動的または半自動的に最適照明レベルを設定する各種のツールを使用してもよい。例えば、先に引用した’863特許に記載されている方法や、前述した QVPAK ソフトウェアにおいて利用可能な Lighting Wizard(登録商標)などを使用することができる。簡潔に言えば、Lighting Wizard は、異なる照明設定の組合せの下で複数の画像を取得し、さらなる照明設定の組合せのシミュレーションおよび補間を、シミュレーション画像に選択的に重ねることによって行い、最良のシミュレーション/補間画像に基づいて照明設定の最適な組合せを割り出すことによって、画像を取得するための最適照明レベルを自動的に見つける。他の例として、エッジの両側の2つの選択された画像領域を反復的および自動的に解析し、照明を調整して前記2つの画像領域間の輝度やコントラストの差異を最大化し、エッジを規定する勾配を大きくするために、先に引用した’180特許に記載されている方法や、前述した QVPAK ソフトウェアにおいて利用可能な方法を利用する Dual Area Contrast tool を使用してもよい。適当なハードウェア/ソフトウェアパラメータが調整されて、画像の輝度が修正された後、あるいは、ブロック318において、画像の輝度が既に許容範囲内に入っており、調整の必要がないと判定された後には、ブロック322において、画像の焦点が許容範囲内に入っているか否かが判定される。この目的のために、自動的または半自動的に画像の焦点状態を決定する公知の各種のツールや方法を利用することができる。焦点が許容可能でないと判定された場合には、ブロック324において、焦点状態に影響を与える適当なハードウェア/ソフトウェアパラメータが調整される。例えば、ワークステージ210と光学アセンブリ部205(図2参照)との間の距離が焦点状態を変えるために調整されてもよい。また、自動的または半自動的に最適焦点状態を実現することができる各種のツールを利用してもよい。例えば、カメラの位置をワークに対してZ軸に沿って調整しながらワークの一部の複数の画像を取得し、取得画像の解析に基づいて、最良の焦点状態の画像を提供するカメラの位置を選択する前述した QVPAK ソフトウェアにおいて利用可能な AutoFocus tool を利用することができる。
適当なハードウェア/ソフトウェアパラメータが調整されて、画像の焦点状態が修正された後、あるいは、ブロック322において、画像の焦点が既に許容範囲内に入っており、調整の必要がないと判定された後には、ブロック326においてビデオツールが再実行される。なお、大抵の場合、輝度および焦点の組合せがツールの不適切な動作の原因になることが多いので、輝度および焦点の双方の調整後にツールを再実行するのがより効率的ではあるものの、ブロック320における輝度の調整の直後であって、ブロック322における画像焦点のチェックの前にツールを再実行することも可能である(例えば、照明調整の評価のために画像の取得が行われる場合)。なお、輝度および焦点がブロック318および322において許容可能であると判定されて調整が行われなかった場合には、ブロック326におけるツールの再実行は新しい情報を提供するものではないので、当該ブロック326をスキップしてしまってもよい。
ブロック328では、再実行されたツールが不適切に動作したか否かが判定される。ここで適切に動作したと判定された場合には、ブロック342に進み、ルーチン315は終了する(例えば、ツールがきちんとリカバリーされた場合)。一方、再実行されたツールが不適切に動作してしまった場合、不適切な動作の次に可能性の高い原因は、検出対象のエッジ/境界に対する、ツール,より厳密に言えばツールの関心領域の位置または方向が不適切であることだと思われる。そこで、ブロック330では、検出対象のエッジ/境界をツールの関心領域内に入れるために、ツールの位置または方向が直近のエッジ特徴に合わせて再設定される。このプロセスについては、図4Aおよび4Bを参照して後で詳細に説明する。
ブロック330における位置または方向の再設定の後、ツールはブロック332において再実行される。ブロック334では、ツールが不適切に動作したか否かが判定される。ここで適切に動作したと判定された場合には、ツールがきちんとリカバリーされたのでルーチンはブロック342において終了する。一方、ツールが不適切に動作してしまった場合には、ブロック336に進み、エッジ強度閾値のようなエッジ検出閾値パラメータが調整される。通常、ツールが不適切に動作した場合には、エッジ強度閾値が低くされる。このような場合、学習モードにおいて特徴づけられた実際のエッジ画像に基づいて『訓練』され、あるいは、設定されたパラメータを有する各種のタイプのエッジ検出閾値を使用するのが普通である。このような技術は、貧弱なエッジ位置検査精度しか提供できないような勾配を示すエッジ特徴画像を拒絶するパラメータまたは制限を提供するとともに、エッジの『アイデンティティ』を示す傾向のあるパラメータを提供する。先に引用した QVPAK 3D CNC Vision Measuring Machine User’s Guide および QVPAK 3D CNC Vision Measuring Machine Operation Guide に詳細に記載されているように、エッジ検出閾値は、ビデオツールがエッジ/境界特徴を認識する閾値レベルを設定するために使用される。特に、エッジ/境界検出ツールは、光強度の変化を検出対象のエッジ/境界として認識する。このように、単純化された形態では、エッジ検出閾値は、エッジ/境界検出ツールがエッジ/境界として認識する光強度変化の量を規定する。例えば、エッジ検出閾値が高く設定された場合、エッジ/境界検出ツールは、2つの隣接する領域間で比較的大きな量の光強度変化を検出した部分においてのみエッジ/境界を認識するようになる。したがって、閾値が高く設定された場合には、ツールは、2つの領域間でコントラストの大きい、比較的はっきりした、あるいは、『強い』エッジのみを検出することができる。一方、エッジ検出閾値が低く設定された場合、エッジ/境界検出ツールは、比較的小さい量の光強度変化であっても、エッジ/境界として認識するようになる。したがって、閾値が低く設定された場合には、ツールは、強いエッジだけでなく、比較的ぼんやりした、あるいは、『弱い』エッジも検出することができる。ブロック336では、閾値が高すぎたためにツールがターゲットのエッジ/境界を検出することができなかったという仮定の下、エッジ検出閾値が低くされる。一般に、エッジ検出閾値が高くなると、画像におけるエッジ位置測定精度が高くなる可能性が高くなるが、ビデオツールが適切に動作しない可能性も高くなる。逆に、エッジ検出閾値が低くなると、ビデオツールが適切に動作しない可能性が低くなるが、(ノイズをエッジとして検出するなどして)間違った検出結果が得られる可能性や、測定精度が悪化する可能性が高くなる。最初は、閾値は、最良のエッジ選択性および測定精度をサポートするエッジ勾配のみを検出するように設定または訓練されたほうがよい。しかしながら、ツールが適切に動作しないときには、多くの場合、閾値を低くするとツールが適切に動作するようになる(すなわち、閾値による制限がエッジ勾配特性に反しなくなる)とともに、十分な(最適ではないが)選択性が得られる。
ブロック336における閾値の調整の後、ブロック337では、ツールが再実行される。ブロック338では、ツールが不適切に動作したか否かが判定される。ここで適切に動作したと判定された場合には、ツールがきちんとリカバリーされたのでルーチンはブロック342において終了する。一方、ツールが不適切に動作してしまった場合には、ブロック340において、ルーチンは、エラーインジケータを出力し、オペレータ(ユーザ)にマニュアルでのツールのリカバリーを促す。例えば、ツールの不適切な動作の原因が装置の故障である場合には、ユーザの介入が必要となる。そして、オペレータは、ツールをマニュアルでリカバリーする。
なお、リカバリーオペレーションのセットが、ブロック338においてビデオツールの適切な動作を実現することができない場合には、現ビデオツールを、予め用意されている『予備』ビデオツール(現ビデオツールと同様の検査結果を提供可能)に取り替えてもよい。一般に、『予備』ビデオツールは、取替え前のツールとは幾分か異なる動作を行うので、(取替え前のツールとは違って)適切に動作する可能性がある。例えば、ワーク画像における強度勾配に基づいて動作する従来のエッジ検出ツールは、周縁照明効果や、粗い面に囲まれることによるエッジの不明瞭化などのために、適切に動作しないことがある。このような場合、リカバリーオペレーションは、当該従来のエッジ検出ツールを、色や手触りなどの変化に基づく境界検出ツールに取り替えるステップを含んでいてもよい。但し、このようなツールの『取替え』は、実行するのに時間がかかり、あるいは、精度が低下してしまうこともあるので、最初から実行するのは好ましくない。例えば、このようなツールとしては、従来のエッジツールの取替えに使用可能なロバストな境界検出ツールが挙げられる(先に引用した’986出願に記載されている)。このようなツールの取替えがブロック338の後に行われると、取替え後のツールの関心領域が、取替え前のツールの関心領域に代わって配置され、ツールが現画像あるいは新たに取得された画像上で実行される。取替え後のツールが適切に動作すれば、ルーチンは終了する。そうでなければ、ルーチン315は、始めのブロック318から続けられる(繰り返される)。
図4Aおよび4Bは、適切に動作しなかったビデオツールの位置(図4Aでは、方向も含まれる)を直近のエッジに対して再設定するためのルーチン(図3Bに示されるルーチン315のブロック330において実行される)を示すフローチャートである。図4Aは、エッジツール(例えば、エッジ(大抵は真っ直ぐなエッジ)に沿って多数の点を検出するボックスツール,エッジに沿って1つの点を検出するポイントツール)の位置の再設定に利用され、このようなツールの自動リカバリーを容易にするルーチン401を示している。このようなツールの例は、前述した QVPAK ソフトウェアに記載されている。
例えば、自動リカバリーシーケンスにおいて、ツールの不適切な動作の原因のうち、(ツールの位置よりも)可能性の高い他の全ての原因を点検し終わったときのように、エッジツールの位置を再設定すべき判定されると、ルーチン401がブロック402から開始する。ブロック402では、少なくとも関心領域を囲む近傍において、現画像におけるエッジ(あるいは、エッジ画素)が探索される。1つの有用なエッジ画素割出しプロセスの詳細については、図5を参照して後述する。より一般的には、各種の公知のエッジ検出(エッジ画素割出し)方法、例えば、Canny edge detector を使用してもよい。いくつかの公知のエッジ検出方法の例が、Machine Vision, by Ramesh Jain, et al., McGraw Hill, 1995 という本の第5章に記載されている。また、エッジ画素の検出は、実行時間を短くし、重要でない(遠くの)画像特徴が所望のエッジの検出作業に悪影響を及ぼしたり混乱させたりするのを防ぐために、ツールの関心領域の近傍(通常は、特定のビデオツールの関心領域を規定するボックスよりも多少大きい)に限定されるようにするのが好ましい。このように、図4A,4B,5との関連で使用される『画像』という語は、元々のカメラ視野内のサブ画像を意味している。
画像におけるエッジ画素が割り出されると、ブロック404において、ツールの中心、あるいは、より正確にはツールの関心領域の中心の位置が、『十分に強い』エッジ画素、例えば、関連するエッジツールの走査方向に沿って高い勾配値を示す位置に対応する画素の直近に再設定される。なお、回転方向に沿った配置不良のリカバリーが必要な場合には、ツールの向きの再設定を行ってもよい。直近の『十分に強い』エッジ画素を含む真っ直ぐなエッジの方向は、例えば、直近の『十分に強い』エッジ画素や、『十分に強い』エッジ画素を含む隣接画素のグループから取得される勾配方向情報を利用することによって決定されてもよい。位置または方向の再設定が終わると、ルーチンは終了する。エッジ検出閾値に関連して先に簡潔に記載したように、各エッジの強度は、エッジを規定する2つの隣接領域間の光強度変化の量との関連で定義される。このように、エッジ検出閾値,勾配閾値,他のエッジ検出パラメータを、デフォルト設定,ユーザ設定,関連するツールの訓練中にエッジ特性から得られる設定によって十分に高いレベルに設定することができ、ツールを、当該ツールに適切な動作を行わせるのに十分なエッジ強度と関連する画素との関係のみにおいて位置の再設定を行えばよいようになっている。
図4Bは、曲がったエッジツール(例えば、サークルツール,アークツール)の位置の再設定に使用されるルーチン410を示している。このようなツールの例は、前述した QVPAK ソフトウェアに記載されている。サークルツールは、図6に示されている。例えば、自動リカバリーシーケンスにおいて、ツールの不適切な動作の原因のうち、(ツールの位置よりも)可能性の高い他の全ての原因を点検し終わったときのように、サークルまたはアークツールの位置を再設定すべき判定されると、ルーチン410は開始される。ルーチン410は、ブロック412から開始する。ブロック412では、図4Aにおけるブロック402に関して述べたように、現画像におけるエッジ(あるいは、エッジ画素)が探索される。ブロック414では、エッジ画素勾配方向のノイズを少なくするための公知の画像フィルタリング技術にしたがって画像が平滑化される
次に、ブロック415では、Generalized Hough 変換が実行される。Generalized Hough 変換は、大量のデータに隠されているパターン(その位置)を見つける技術においてよく知られている、画像解析に使用される標準的なツールである。Hough 変換技術の各種の側面は、当該技術の特定の形態について記載している米国特許第5,136,660号から理解することができる。Generalized Hough 変換の応用については、『Generalizing The Hough Transformation To Detect Arbitrary Shapes』(by D.H. Ballard, in Pattern Recognition, 13(2), 1981, pp. 111-122)から理解することができる。ここで基礎として用いる技術は、2以上の次元を有する適当なパラメータ空間においてパラメータ化できる円/円弧パターンを見つける技術である。
特に、ブロック416では、半径(R1+R2)/2の円に対応して[勾配方向,中心オフセット]ルックアップテーブルが準備される。ここで、R1は、関心領域の円状または円弧状の境界の内半径であり、R2は、ツールの外半径である(図6における623A´および623B´を参照)。このような半径は、ツールによって位置を見出されて測定されるべきエッジ特徴の半径の合理的な見積もりである。勾配方向という語は、ここでは最大勾配方向、あるいは、円状のエッジを横切る径方向、あるいは、その部分という意味で用いる。テーブルは、勾配方向、すなわち、基準の軸に対してなす角度によってインデックス付けされている。
ブロック418では、ブロック412および414において得られた全てのエッジ画素に対する勾配方向が算出される(エッジ画素以外の画素については算出されない)。ブロック420では、[勾配方向,中心オフセット]ルックアップテーブルを用いて、各エッジ画素に対して、2Dアキュムレータアレイにおけるセルがインクリメントされる。特に、Generalized Hough 変換への単純な拡張を行うことによって、セルのインクリメントが、円の可能な中心同士を結ぶ線分(勾配方向)に沿ってエッジ画素の両側で実行されるようになる。可能な中心の位置は、エッジ画素について算出された勾配方向に対応するルックアップテーブルにおける中心オフセットベクトルを利用して算出される。このベクトルは、第1の可能な円の中心を得るために現画素の座標に加算され、第2の可能な円の中心を得るために減算される。エッジの両側における2つの可能な円の中心を考慮することによって、2つの可能なエッジ傾斜または極性(一方は、エッジを横切る走査方向に沿って上昇する強度に関連し、他方は、エッジを横切って下降する強度に関連する)を説明することができる。
アキュムレータアレイにおける1つのセルのインクリメントの代わりに線分を使用することによって、この特定のアルゴリズムは、先に見積もった(R1+R2)/2とは若干異なる半径を有する円や円弧を見つけることができる。このように、円や円弧に対する Hough 変換は、3パラメータ空間(位置を定義する2Dアキュムレータアレイおよび円半径のフレキシビリティー(3つ目のパラメータ))を効果的に使用している。変換は、2Dアキュムレータアレイにおける点の代わりに、線分に対応する値を生成することによって達成される。
ブロック421では、2Dアキュムレータアレイ(パラメータ画像のようなものと考えてもよい)に閾値処理が行われ、ブロック420において重要でない値をアキュムレートした全てのセルが除去される。小さな値のセルは、予期される大きさおよび形状を有する特徴上には存在しない。元々の、および、閾値処理後の2Dアキュムレータアレイは、いずれも、後での参照のために記録される。
ブロック422では、形態学的閉塞オペレーション(膨張処理と、これに引き続く侵食処理)が、領域中の穴を閉塞するために閾値処理後の2Dアキュムレータアレイ上で実行される。ブロック424では、公知の画像処理方法(領域ラベリング方法など)にしたがって閾値処理後の2Dアキュムレータアレイにおける連結した要素(領域)が見出され、対応する『画素』に、当該画素が特定の連結領域に属することを示すためのラベリングが行われる。ブロック426では、ラベリングされた画素のアドレスに基づいて各連結領域の重心が決定され、元々の2Dアキュムレータアレイにおける連結領域に対応する(すなわち、一致する)全てのセルの値が加算されて、位置検出対象の特徴の予期される半径および形状にどれだけ強く符合するかを示す『票数』が算出される。
ブロック428では、全ての連結領域(すなわち、円の中心の候補)に、その票数(各領域の票の合計)およびツールの中心との距離(重心についての)に基づいて、ランク付けが行われる。例えば、票数および距離についての値が同じ数値範囲に規格化され、各連結領域について、規格化された票数および規格化された距離が加算されて、数量的なランク値が算出されるようにしてもよい。ブロック430では、関連する円の中心が最高のランク値を有する連結領域の重心に配置されるように、すなわち、ツールによって解析される位置設定不良の特徴の最も可能性の高い中心に合わせるように、当該ツールの位置が再設定される。そして、ルーチンは終了する。
図5は、画像においてエッジ(あるいは、エッジ画素)を見つけるために利用可能なルーチン500を示すフローチャートである。このルーチン500は、図4Aに示されるルーチン401におけるブロック402や、図4Bに示されるルーチン410におけるブロック412などにおいて実行される。ブロック502では、例えば平均フィルタを使用することによって画像が平滑化され、粗い表面を含む画像についてのヒストグラムモダリティー(histogram modality)が向上される。ブロック504では、画像のグレイスケールヒストグラムが算出されて平滑化される。判定ブロック506では、グレイスケールヒストグラムが明確なモード(すなわち、画像において最も頻繁に生じる画素値を反映する値の孤立した集合)を有するか否かが判定される。もしそうであれば、ブロック508では、ヒストグラムのモードに基づいて閾値が割り出され(自動閾値処理)、当該閾値が画像に適用されて、ヒストグラムの値の孤立した集合の一方または双方に対応する明確な領域(対象または特徴)をより良く定義するバイナリ画像が生成される。これに対して、ブロック506においてグレイスケールヒストグラムが明確なモードを有しない判定されると、ブロック507において、例えば Sobel オペレータを使用することによって勾配画像が算出され、当該勾配画像に適当な閾値が適用されてバイナリエッジ画像が生成される。
バイナリ画像がブロック507および508のいずれにおいて決定されたかに関わらず、ブロック510では、形態学的閉塞オペレーション(膨張処理と、これに引き続く侵食処理)がバイナリ画像上で実行され、明確な領域(対象または特徴)における穴が閉塞される。
ブロック512では、ブロック510において形態学的にフィルタリングされたバイナリ画像において連結領域が定義され、当該連結領域にサイズフィルタが適用されて、所定のサイズ閾値よりも小さい関係のない領域が除去される。ブロック514では、ここで残っている連結領域の境界における画素がエッジ画素として特定され、ルーチンが終了する。前述した Sobel オペレータが使用される場合には、画像におけるエッジ画素に最も良く対応するのは、連結領域の『中心線』である。しかしながら、このような連結領域は、とても狭くなりやすく、境界におけるエッジ画素の特定が、当該エッジ画素を利用する続くオペレーションの結果に大きな影響を与えにくくなる。
なお、自動ツールリカバリー方法は、コンピュータによって実行可能な指示を含む自動ツールリカバリーコンピュータプログラムによって実行される。当該プログラムは、画像検査システムにおける制御システム部120(図2参照)にロードされてもよい。また、自動ツールリカバリーコンピュータプログラムは、制御システム部120におけるメモリ140のビデオツール部143に含まれていてもよい。このリカバリープログラムは、ビデオツールに関連していてもよいし(各ビデオツールの一部として機能的に一体化されてもよい)、ビデオツールとは『別々』にされ、当該ビデオツールのいずれかが適切に動作しないときに呼び出されるようにしてもよい。いずれの場合も、このようなプログラムがビデオツールの動作に関連していれば、当該ビデオツールが自動的に自身をリカバリーできるようになるという点で、当該ビデオツールのロバスト性が高まる。
なお、自動ツールリカバリー指示のセットは、ユーザによって設定されてもよい。図6は、画像における円状特徴に対するサークルツールの自動再配置と同様に、自動ツールリカバリー指示のセットのユーザ設定(またはカスタマイズ)を可能にするユーザインターフェイスの一例を示すビデオディスプレイからのサンプルスクリーンショットである。図6において、ビデオディスプレイ601は、検査対象の円状特徴602,メッセージウィンドウ605,コントロールパネル607を示す画像ウィンドウ603を含んでいる。コントロールパネル607は、画像の解析に基づいて算出された関連する画像特性値(例えば、画像の焦点や輝度)を表示する画像特性値パネル610を含んでいる。当該パネル610は、熟練ユーザの参照用として有用である。コントロールパネル607は、さらに、リカバリータイプ選択パネル608,許容度設定パネル609,リカバリートライアルコマンドパネル611を含んでいる。
リカバリータイプ選択パネル608は、自動ツールリカバリーコンピュータプログラムによって実行される調整の1または複数のタイプのユーザによる選択を可能にする。図示された例では、4つのタイプの調整、すなわち、『Light』,『Focus』,『Position』(画像特徴に対するツールの位置),『THS』(エッジ強度閾値)が選択される。そして、結果として得られる自動ツールリカバリー指示のセットが、これらの各タイプの調整を自動的に実行するように設定される。ユーザは、対応するチェックボックスの状態を変更することによって、これらのタイプの調整が行われないようにすることもできる。例えば、ユーザは、自動ツールリカバリーコンピュータプログラムが『Light』,『Focus』の調整のみを実行するように、『Position』,『THS』の調整が行われないようにすることができる。
許容度設定パネル609は、各調整タイプ(図6においては、『Light』,『Focus』,『Position』,『THS』)についての許容レベルのユーザによる設定を可能にする。特に、調整の各タイプは、リカバリープロセス中に使用可能な設定範囲を有しており、当該範囲のどの割合(部分)がツールリカバリー中に使用されるかを許容レベルは効果的に設定することができる。図示された例では、許容度設定パネル609では、各許容度が『Low』,『Medium』,『High』に設定できるようになっている。『Low』は、与えられたパラメータ(照明,焦点,ツール位置など)を許容可能な値にする上で、全ての可能な調整設定のうち比較的小さい部分の使用が許容されることを意味し、『High』は、与えられたパラメータを許容可能な値にする上で、全ての可能な調整設定のうち比較的大きい部分(あるいは全部)の使用が許容されることを意味する。『許容度』という語は、ここでは、ツールリカバリーオペレーション中に各種の特徴検査パラメータをうまく調整しようとするときに使用される各種のパラメータ探索範囲について設定される限界を意味する。一般に、許容度が低い(Low)状態での調整は、パラメータ探索範囲が小さいので、短時間になりやすい。しかしながら、許容度が低いと、制限されたパラメータ探索範囲では適当なパラメータ調整を見出すことができないことがあるため、リカバリーが失敗する可能性が高くなる。したがって、ユーザが自動ツールリカバリーの速度を上げることを希望し、リカバリーの失敗する可能性が高くなることをいとわない場合には、ユーザは、『Low』の許容レベルを選択すればよい。一方、効果的なパラメータ調整が行われる可能性が高いことが求められ、ユーザが、調整されたパラメータ値がツールの不適切な動作の原因となったパラメータ値と大幅に異なることや、リカバリーの速度が遅くなることを受け入れる場合には、ユーザは、『High』の許容レベルを選択すればよい。なお、許容レベルは、各種の他のフォーマットやインターフェイス装置を利用することによって各種の他の方法によって設定されてもよく、本発明は、図6の例によって限定されることはない。例えば、3つの選択肢(『Low』,『Medium』,『High』)の代わりに、より多いあるいは少ない選択肢を設けてもよい。他の例として、許容度設定パネル609が、許容値の設定のためにユーザに数値入力を促すようなものであってもよい。
リカバリートライアルコマンドパネル611は、自動ツールリカバリー指示のセットの特定の設定の予備的なテストを実行し、ユーザが当該設定の有効性を評価できるようにするために使用することができる。例えば、ユーザは、ツール(例えば、図6に示されるサークルツール620)を故意に『外れた位置』に定義および配置したり、照明設定を故意に誤って調整したりした後に、『Recover Circle Tool』ボタンを押して、当該ツール、および、自動ツールリカバリー指示の現在の設定を実行させてもよい。このとき、リカバリーが成功すれば、照明は適切に調整され、他の特徴検査パラメータも適切に調整され、メッセージウィンドウ605に表示された『TOOL OK!...』のメッセージの通り、ツールが適切に実行されるようになる。位置が再設定されたサークルツール620´は、元のサークルツール620とともに表示され、ユーザが、円状特徴602に対する表示画像上のツールの最初のおよび調整後の位置を見ることができるようになっている。図6に示されるように、リカバリーされたサークルツール620´は、その関心領域の内径623A´および外径623B´が検査対象の円状特徴602のエッジを囲むように配置されている。
本発明では、自動ツールリカバリーコンピュータプログラムは、さらに、そのオペレーションを追跡するように、すなわち、どのタイプのツールが何回不適切に動作したかといった情報や、さらに、各ツールの不適切な動作についてどのタイプの調整がツールのリカバリーのために必要であったかといった情報を集めるように設定されてもよい。適当な数の計数手段が追跡オペレーションの実行のために設けられていてもよい。ツールの不適切な動作およびそのリカバリーの履歴が記録されて、例えばツールの不適切な動作の頻度の高い原因を調査するために、ユーザによって解析されるようにしてもよい。
以上、本発明の好適な実施形態について述べてきたが、本発明の原理,精神,範囲から外れなければ、各種の変更を加えることが可能である。
本発明に基づく画像検査システムの一例を示す図である。 本発明に基づく画像検査システムにおける制御システム部と画像コンポーネント部とを示す図である。 自動ツールリカバリールーチンを示すフローチャートである。 ビデオツールの自動リカバリーの比較的詳細なルーチンを示すフローチャートである。 エッジツールの位置の再設定に利用され、このようなツールの自動リカバリーを容易にするルーチンを示すフローチャートである。 曲がったエッジツールの位置の再設定に使用されるルーチンを示すフローチャートである。 画像においてエッジを見つけるために利用可能なルーチンを示すフローチャートである。 自動ツールリカバリー指示のセットのユーザ設定を可能にするユーザインターフェイスの一例を示すビデオディスプレイからのサンプルスクリーンショットである。

Claims (7)

  1. ワーク検査用の画像検査システムにおいて、特徴検査パラメータに基づいて動作するビデオツールを利用してワーク特徴画像の取得および当該ワーク特徴画像におけるワーク特徴の検査を行う際に、前記特徴検査パラメータの最初のセットに基づいて前記ビデオツールが適切に動作しない場合に、適切に動作しないビデオツールを自動的にリカバリーする方法であって、
    前記方法は、
    (a)前記ビデオツールの不適切な動作を検出すると、少なくとも1つの特徴検査パラメータに関する画像特性値を前記ワーク特徴画像の解析に基づいて評価するステップと、
    (b)評価された画像特性値について、当該画像特性値が当該画像特性値についての所定の許容範囲内に入っているか否かを判定するステップと、
    (c)前記ステップ(b)において前記画像特性値が前記許容範囲外であると判定された場合には、前記特徴検査パラメータの前記最初のセットの前記画像特性値に関する少なくとも1つの画像取得パラメータを調整して、当該画像特性が前記所定の許容範囲内に入るようにし、前記ビデオツールを適切に動作させるような特徴検査パラメータの取替えセットを提供するステップと
    を備え
    前記画像特性値に関する少なくとも1つの画像取得パラメータを調整するステップは、少なくとも1つの照明パラメータを調整して、輝度特性が当該輝度特性についての所定の許容範囲内に入るようにするステップを含む
    ことを特徴とする方法。
  2. 請求項1に記載の方法において、
    前記ステップ(c)に含まれる、前記少なくとも1つの画像取得パラメータを調整するステップは、
    前記少なくとも1つの照明パラメータを調整して、輝度特性が当該輝度特性についての所定の許容範囲内に入るようにするステップを第1のステップとし、
    前記第1のステップに続いて、少なくとも1つの焦点パラメータを調整して、焦点特性が当該焦点特性についての所定の許容範囲内に入るようにする第2のステップ
    を含むことを特徴とする方法。
  3. 請求項1に記載の方法において、
    前記ステップ(c)において、前記少なくとも1つの画像取得パラメータを調整するステップの後に行われる、特徴検査パラメータの前記最初のセットの少なくとも1つの要素を自動的に調整する前記ステップは、
    (d)少なくとも1つの調整された前記画像取得パラメータにより前記最初のセットにおける対応する要素を取り替えることによって、特徴検査パラメータの試験セットを形成するステップと、
    (e)前記試験セットに基づいて、ワーク特徴画像を取得し、前記ビデオツールによる当該画像におけるワーク特徴の検査動作を行うステップと、
    (f)前記ビデオツールが適切に動作した場合には、前記試験セットを前記取替えセットとして使用するステップと
    を含むことを特徴とする方法。
  4. 請求項3に記載の方法において、
    前記ステップ(f)の実行中に前記ビデオツールが適切に動作した場合には、
    パートプログラムの実行中に、前記最初のセットを前記取替えセットに自動的に取り替えるステップ,
    前記画像検査システムの訓練モード中に、前記最初のセットを前記取替えセットに自動的に取り替えるステップ,
    前記ステップ(f)における前記ビデオツールの適切な動作中に得られた検査結果を、パートプログラムにおける当該ビデオツール動作についての検査結果として自動的に使用し、当該パートプログラムにおける次の動作を自動的に続けるステップ
    の少なくとも1つのステップが実行される
    ことを特徴とする方法。
  5. 請求項4に記載の方法において、
    前記ビデオツールがエッジツールであり、当該ビデオツールが前記ステップ(f)において適切に動作しなかった場合、特徴検査パラメータの前記最初のセットの少なくとも1つの要素を自動的に調整するステップは、
    (g)前記ステップ(e)において前記ビデオツールがエッジを囲んでいなかったか否かを判定するステップと、
    (h)前記ステップ(e)において前記ビデオツールがエッジを囲んでいなかった場合には、当該エッジの位置を当該ビデオツールの直近に設定し、当該ビデオツールが当該直近のエッジを囲むように、前記試験セットに含まれるツール位置パラメータを調整するステップと、
    (i)前記ステップ(e)および(f)を繰り返し行うステップと
    を含むことを特徴とする方法。
  6. 請求項5に記載の方法において、
    前記ビデオツールがエッジツールであり、当該ビデオツールが前記ステップ(i)において適切に動作しなかった場合、特徴検査パラメータの前記最初のセットの少なくとも1つの要素を自動的に調整するステップは、
    (j)前記試験セットにおけるエッジ強度閾値パラメータを小さくするステップと、
    (k)前記ステップ(e)および(f)を繰り返し行うステップと
    を含むことを特徴とする方法。
  7. 請求項6に記載の方法において、
    輝度パラメータ,焦点パラメータ,ツール位置パラメータ,エッジ強度パラメータによって構成される特徴検査パラメータのグループに含まれる少なくとも1つの特徴検査パラメータについての許容される自動調整範囲が、前記画像検査システムにおけるユーザインターフェイスのユーザによる操作に基づいて決定される
    ことを特徴とする方法。
JP2005314749A 2004-10-29 2005-10-28 画像システムにおいてビデオツールを自動的にリカバリーするシステムおよび方法 Active JP4933771B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/978,227 US7454053B2 (en) 2004-10-29 2004-10-29 System and method for automatically recovering video tools in a vision system
US10/978,227 2004-10-29

Publications (2)

Publication Number Publication Date
JP2006126200A JP2006126200A (ja) 2006-05-18
JP4933771B2 true JP4933771B2 (ja) 2012-05-16

Family

ID=35395973

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005314749A Active JP4933771B2 (ja) 2004-10-29 2005-10-28 画像システムにおいてビデオツールを自動的にリカバリーするシステムおよび方法

Country Status (5)

Country Link
US (1) US7454053B2 (ja)
EP (1) EP1653408B1 (ja)
JP (1) JP4933771B2 (ja)
CN (1) CN1782661B (ja)
DE (1) DE602005008857D1 (ja)

Families Citing this family (129)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8127247B2 (en) 2004-06-09 2012-02-28 Cognex Corporation Human-machine-interface and method for manipulating data in a machine vision system
US20130074005A1 (en) * 2004-11-12 2013-03-21 Cognex Corporation System, method and graphical user interface for displaying and controlling vision system operating parameters
US9292187B2 (en) 2004-11-12 2016-03-22 Cognex Corporation System, method and graphical user interface for displaying and controlling vision system operating parameters
US7627162B2 (en) * 2005-01-31 2009-12-01 Mitutoyo Corporation Enhanced video metrology tool
CN100377151C (zh) * 2005-03-11 2008-03-26 鸿富锦精密工业(深圳)有限公司 量测设备离线编程系统及方法
US8274715B2 (en) 2005-07-28 2012-09-25 Omnivision Technologies, Inc. Processing color and panchromatic pixels
US8139130B2 (en) 2005-07-28 2012-03-20 Omnivision Technologies, Inc. Image sensor with improved light sensitivity
US8311311B2 (en) 2005-10-31 2012-11-13 Mitutoyo Corporation Optical aberration correction for machine vision inspection systems
US7724942B2 (en) * 2005-10-31 2010-05-25 Mitutoyo Corporation Optical aberration correction for machine vision inspection systems
US9208582B2 (en) * 2005-11-02 2015-12-08 Hitachi Medical Corporation Image analyzing system and method
US7567713B2 (en) * 2006-02-08 2009-07-28 Mitutoyo Corporation Method utilizing intensity interpolation for measuring edge locations in a high precision machine vision inspection system
US8103105B2 (en) * 2006-04-26 2012-01-24 Mitsubishi Electric Corporation Object detection device, and object detection device for elevator
CA2651437C (en) * 2006-05-18 2016-01-05 Resonant Medical Inc. Methods and systems for segmentation using boundary reparameterization
US7916362B2 (en) 2006-05-22 2011-03-29 Eastman Kodak Company Image sensor with improved light sensitivity
US7570795B2 (en) * 2006-07-18 2009-08-04 Mitutoyo Corporation Multi-region autofocus tool and mode
US7636478B2 (en) * 2006-07-31 2009-12-22 Mitutoyo Corporation Fast multiple template matching using a shared correlation map
US9451928B2 (en) * 2006-09-13 2016-09-27 Elekta Ltd. Incorporating internal anatomy in clinical radiotherapy setups
US8031258B2 (en) 2006-10-04 2011-10-04 Omnivision Technologies, Inc. Providing multiple video signals from single sensor
US7769222B2 (en) * 2006-10-27 2010-08-03 Mitutoyo Corporation Arc tool user interface
US7769230B2 (en) * 2006-11-30 2010-08-03 Eastman Kodak Company Producing low resolution images
WO2009012577A1 (en) * 2007-07-20 2009-01-29 Resonant Medical Inc. Methods and systems for compensating for changes in anatomy of radiotherapy patients
US10531858B2 (en) * 2007-07-20 2020-01-14 Elekta, LTD Methods and systems for guiding the acquisition of ultrasound images
US8135198B2 (en) * 2007-08-08 2012-03-13 Resonant Medical, Inc. Systems and methods for constructing images
US8085295B2 (en) * 2007-10-26 2011-12-27 Mitutoyo Corporation Controllable micro light assembly
JP5053830B2 (ja) * 2007-12-28 2012-10-24 株式会社竹中工務店 施設稼動シミュレーション装置及び施設稼動シミュレーションプログラム
JP5039570B2 (ja) * 2008-01-09 2012-10-03 キヤノン株式会社 表示装置、映像表示システム、及び表示方法
JP5210643B2 (ja) 2008-01-11 2013-06-12 株式会社ミツトヨ 画像測定装置における照明光量の設定方法および画像測定装置
US8189738B2 (en) * 2008-06-02 2012-05-29 Elekta Ltd. Methods and systems for guiding clinical radiotherapy setups
US8923602B2 (en) * 2008-07-22 2014-12-30 Comau, Inc. Automated guidance and recognition system and method of the same
JP4730412B2 (ja) * 2008-08-12 2011-07-20 ソニー株式会社 画像処理装置及び画像処理方法
US8736751B2 (en) 2008-08-26 2014-05-27 Empire Technology Development Llc Digital presenter for displaying image captured by camera with illumination system
US8111938B2 (en) 2008-12-23 2012-02-07 Mitutoyo Corporation System and method for fast approximate focus
DE102009015594B4 (de) * 2009-03-30 2015-07-30 Carl Zeiss Sms Gmbh Verfahren und Vorrichtung zur subpixelgenauen Positionsbestimmung einer Kante einer Markerstruktur in einer Vielzahl von Aufnahmepixeln aufweisenden Aufnahme der Markerstruktur
AU2010262034B2 (en) * 2009-04-30 2013-01-10 Hexagon Technology Center Gmbh An inspection method and an inspection apparatus
US10542962B2 (en) * 2009-07-10 2020-01-28 Elekta, LTD Adaptive radiotherapy treatment using ultrasound
US8111905B2 (en) * 2009-10-29 2012-02-07 Mitutoyo Corporation Autofocus video tool and method for precise dimensional inspection
US8605209B2 (en) 2009-11-24 2013-12-10 Gregory Towle Becker Hurricane damage recording camera system
AU2010329533A1 (en) * 2009-12-07 2012-07-26 Hiok Nam Tay Auto-focus image system
US8581162B2 (en) * 2009-12-08 2013-11-12 Mitutoyo Corporation Weighting surface fit points based on focus peak uncertainty
US8941726B2 (en) * 2009-12-10 2015-01-27 Mitsubishi Electric Research Laboratories, Inc. Method and system for segmenting moving objects from images using foreground extraction
US20110172526A1 (en) 2010-01-12 2011-07-14 Martin Lachaine Feature Tracking Using Ultrasound
US9248316B2 (en) 2010-01-12 2016-02-02 Elekta Ltd. Feature tracking using ultrasound
US8271895B2 (en) 2010-03-22 2012-09-18 Mitutoyo Corporation GUI for programming step and repeat operations in a machine vision inspection system
CN101853393B (zh) * 2010-04-22 2013-02-13 深圳市鼎为科技有限公司 机器视觉系统检测算法的自动产生和自动学习方法
US8456637B2 (en) 2010-08-26 2013-06-04 Mitutoyo Corporation Multiple measuring point configuration for a chromatic point sensor
US8194251B2 (en) 2010-08-26 2012-06-05 Mitutoyo Corporation Method for operating a dual beam chromatic point sensor system for simultaneously measuring two surface regions
US8588535B2 (en) 2010-09-15 2013-11-19 Sharp Laboratories Of America, Inc. Methods and systems for estimation of compression noise
US8600188B2 (en) 2010-09-15 2013-12-03 Sharp Laboratories Of America, Inc. Methods and systems for noise reduction and image enhancement
US8538193B2 (en) 2010-09-28 2013-09-17 Sharp Laboratories Of America, Inc. Methods and systems for image enhancement and estimation of compression noise
US8175411B2 (en) 2010-09-28 2012-05-08 Sharp Laboratories Of America, Inc. Methods and systems for estimation of compression noise
US8532429B2 (en) 2010-09-28 2013-09-10 Sharp Laboratories Of America, Inc. Methods and systems for noise reduction and image enhancement involving selection of noise-control parameter
US8648906B2 (en) 2010-10-13 2014-02-11 Mitutoyo Corporation Precision solder resist registration inspection method
US8773526B2 (en) 2010-12-17 2014-07-08 Mitutoyo Corporation Edge detection using structured illumination
US8280172B1 (en) * 2011-03-22 2012-10-02 Mitutoyo Corporation Edge location measurement correction for coaxial light images
US8269830B1 (en) 2011-04-14 2012-09-18 Mitutoyo Corporation Inspecting potentially interfering features in a machine vision system
JP2013036964A (ja) * 2011-08-11 2013-02-21 Mitsutoyo Corp 画像測定装置及び画像測定方法
US9080855B2 (en) 2011-09-23 2015-07-14 Mitutoyo Corporation Method utilizing image correlation to determine position measurements in a machine vision system
DE102012220759A1 (de) * 2011-11-15 2013-06-27 Mitutoyo Corporation Programmbearbeitungsumgebung eines maschinell sehenden Systems mit synchronisierten Benutzerschnittstellenmerkmalen
US8902307B2 (en) 2011-11-15 2014-12-02 Mitutoyo Corporation Machine vision system editing environment for a part program in which a continuous stream of image acquisition operations are performed during a run mode
US8957960B2 (en) 2011-11-15 2015-02-17 Mitutoyo Corporation Machine vision system program editing environment including real time context generation features
US9013574B2 (en) 2011-11-15 2015-04-21 Mitutoyo Corporation Machine vision system program editing environment including synchronized user interface features
US9167215B2 (en) 2011-11-15 2015-10-20 Mitutoyo Corporation Machine vision system editing environment for a part program in which a continuous stream of image acquisition operations are performed during a run mode
US9223306B2 (en) 2011-11-15 2015-12-29 Mitutoyo Corporation System and method utilizing an editing initialization block in a part program editing environment in a machine vision system
DE112012005389T5 (de) * 2011-12-23 2014-09-11 Mitutoyo Corp. "Points-from-Focus"-Operationen, die mehrere Beleuchtungseinstellungen in einem maschinell sehenden System verwenden
US20130162806A1 (en) 2011-12-23 2013-06-27 Mitutoyo Corporation Enhanced edge focus tool
US8937654B2 (en) 2012-08-22 2015-01-20 Mitutoyo Corporation Machine vision inspection system comprising two cameras having a rotational offset
JP5947169B2 (ja) * 2012-09-14 2016-07-06 株式会社キーエンス 外観検査装置、外観検査法およびプログラム
US8689127B1 (en) * 2012-11-05 2014-04-01 Mitutoyo Corporation Edge measurement video tool parameter-setting user interface
US9177222B2 (en) * 2012-11-05 2015-11-03 Mitutoyo Corporation Edge measurement video tool and interface including automatic parameter set alternatives
US8885945B2 (en) 2012-12-27 2014-11-11 Mitutoyo Corporation Method for improving repeatability in edge location results of a machine vision inspection system
US8995749B2 (en) 2013-03-28 2015-03-31 Mitutoyo Corporation Enhanced edge detection tool for edges of irregular surfaces
US9304089B2 (en) 2013-04-05 2016-04-05 Mitutoyo Corporation System and method for obtaining images with offset utilized for enhanced edge resolution
US8917940B2 (en) 2013-04-26 2014-12-23 Mitutoyo Corporation Edge measurement video tool with robust edge discrimination margin
US9235337B2 (en) 2013-05-09 2016-01-12 Mitutoyo Corporation System, GUI and method for editing step and repeat operation instructions in a machine vision inspection system
JP6386540B2 (ja) 2013-05-13 2018-09-05 株式会社ミツトヨ 動作コンテキストを意識したコピーアンドペースト機能を含むマシンビジョンシステムプログラム編集環境
US9350921B2 (en) 2013-06-06 2016-05-24 Mitutoyo Corporation Structured illumination projection with enhanced exposure control
US9143674B2 (en) 2013-06-13 2015-09-22 Mitutoyo Corporation Machine vision inspection system and method for performing high-speed focus height measurement operations
US9789462B2 (en) * 2013-06-25 2017-10-17 The Boeing Company Apparatuses and methods for accurate structure marking and marking-assisted structure locating
US9456120B2 (en) 2013-07-11 2016-09-27 Mitutoyo Corporation Focus height repeatability improvement in a machine vision inspection system
US9444995B2 (en) 2013-10-11 2016-09-13 Mitutoyo Corporation System and method for controlling a tracking autofocus (TAF) sensor in a machine vision inspection system
US9182583B2 (en) 2013-11-15 2015-11-10 Mitutoyo Corporation Structured illumination microscopy optical arrangement including projection artifact supression element
US10178321B2 (en) 2013-11-27 2019-01-08 Mitutoyo Corporation Machine vision inspection system and method for obtaining an image with an extended depth of field
US9726876B2 (en) 2013-11-27 2017-08-08 Mitutoyo Corporation Machine vision inspection system and method for obtaining an image with an extended depth of field
US20150178484A1 (en) 2013-12-20 2015-06-25 Mitutoyo Corporation Remote Accessory Management in a Programming Environment for a Progammable Metrology System
US9606525B2 (en) 2013-12-23 2017-03-28 Mitutoyo Corporation Remote accessory for generating customized and synchronized reference notes for a programmable metrology system
DE102015208337A1 (de) 2014-06-17 2015-12-17 Mitutoyo Corp. Bearbeitungsumgebung eines maschinellen sichtsystems für ein teileprogramm, in dem ein durchgehender datenstrom von bilderfassungsvorgängen in einem laufmodus ausgeführt wird
US9740190B2 (en) 2014-10-09 2017-08-22 Mitutoyo Corporation Method for programming a three-dimensional workpiece scan path for a metrology system
US10521898B2 (en) 2015-01-06 2019-12-31 Sikorsky Aircraft Corporation Structural masking for progressive health monitoring
US9261351B1 (en) 2015-03-04 2016-02-16 Mitutoyo Corporation Chromatic range sensor including high sensitivity measurement mode
CN107535090B (zh) * 2015-05-21 2020-09-01 株式会社富士 元件方向判定数据生成装置及元件方向判定数据生成方法
US9958266B2 (en) 2015-07-09 2018-05-01 Mitutoyo Corporation Chromatic range sensor including dynamic intensity compensation function
US9602715B2 (en) 2015-07-09 2017-03-21 Mitutoyo Corporation Adaptable operating frequency of a variable focal length lens in an adjustable magnification optical system
US10095214B2 (en) * 2015-08-21 2018-10-09 Processchamp, Llc System and method for joining workpieces to form an article
US9830694B2 (en) 2015-08-31 2017-11-28 Mitutoyo Corporation Multi-level image focus using a tunable lens in a machine vision inspection system
JP6599698B2 (ja) * 2015-08-31 2019-10-30 株式会社ミツトヨ 画像測定装置及びその制御プログラム
JP6599697B2 (ja) * 2015-08-31 2019-10-30 株式会社ミツトヨ 画像測定装置及びその制御プログラム
US9774765B2 (en) 2015-09-15 2017-09-26 Mitutoyo Corporation Chromatic aberration correction in imaging system including variable focal length lens
US9930243B2 (en) 2016-05-02 2018-03-27 Mitutoyo Corporation Variable focal length imaging system
US9736355B1 (en) * 2016-05-03 2017-08-15 Mitutoyo Corporation Phase difference calibration in a variable focal length lens system
US9961253B2 (en) 2016-05-03 2018-05-01 Mitutoyo Corporation Autofocus system for a high speed periodically modulated variable focal length lens
US10151962B2 (en) * 2016-09-29 2018-12-11 Mitutoyo Corporation Variable focal length lens system with focus monitoring and control
US10142550B2 (en) 2016-11-15 2018-11-27 Mitutoyo Corporation Extending a focus search range in an imaging system including a high speed variable focal length lens
DE102017220101A1 (de) 2016-11-23 2018-05-24 Mitutoyo Corporation Prüfsystem unter Verwendung von maschinellem Sehen zum Erhalten eines Bilds mit erweiterter Tiefenschärfe
US10101572B2 (en) 2016-11-23 2018-10-16 Mitutoyo Corporation Variable focal length lens system with multi-level extended depth of field image processing
US10768404B2 (en) 2017-03-22 2020-09-08 Mitutoyo Corporation Modulation monitoring system for use with an imaging system that includes a high speed periodically modulated variable focal length lens
US10737446B2 (en) * 2017-04-28 2020-08-11 The Boeing Company Process control of a composite fabrication process
US10225457B1 (en) 2017-09-06 2019-03-05 Mitutoyo Corporation Stabilizing operation of a high speed variable focal length tunable acoustic gradient lens in an imaging system
US10341646B2 (en) 2017-09-29 2019-07-02 Mitutoyo Corporation Variable focal length lens system with optical power monitoring
US10171725B1 (en) 2017-12-21 2019-01-01 Mitutoyo Corporation Variable focal length lens system including a focus state reference subsystem
US10281700B1 (en) 2017-12-21 2019-05-07 Mitutoyo Corporation Variable focal length lens system including a focus state reference subsystem
US11294363B2 (en) 2018-04-17 2022-04-05 Processchamp, Llc System and method for positioning workpiece in a workstation using an automatic guided vehicle
US10578827B2 (en) 2018-04-27 2020-03-03 Mitutoyo Corporation Variable focal length lens system with quasi-sinusoidal periodic intensity modulated light
US10498948B1 (en) 2018-06-05 2019-12-03 Applied Materials, Inc. Methods and apparatus for absolute and relative depth measurements using camera focus distance
US10812701B2 (en) 2018-12-13 2020-10-20 Mitutoyo Corporation High-speed tag lens assisted 3D metrology and extended depth-of-field imaging
US11125967B2 (en) 2018-12-26 2021-09-21 Mitutoyo Corporation System and method for calibrating variable focal length lens system using calibration object with planar tilted pattern surface
US10520301B1 (en) 2018-12-31 2019-12-31 Mitutoyo Corporation Method for measuring Z height values of a workpiece surface with a machine vision inspection system
US11313671B2 (en) 2019-05-28 2022-04-26 Mitutoyo Corporation Chromatic confocal range sensing system with enhanced spectrum light source configuration
US11573498B2 (en) 2019-08-30 2023-02-07 Mitutoyo Corporation Fast high power pulsed light source system for high speed metrology imaging
US10880468B1 (en) 2019-12-19 2020-12-29 Mitutoyo Corporation Metrology system with transparent workpiece surface mode
US11119382B2 (en) 2019-12-20 2021-09-14 Mitutoyo Corporation Tunable acoustic gradient lens system with amplitude adjustment corresponding to z-height as indicated by calibration data
US11249225B2 (en) * 2019-12-20 2022-02-15 Mitutoyo Corporation Tunable acoustic gradient lens system utilizing amplitude adjustments for acquiring images focused at different z-heights
US11430105B2 (en) 2020-06-15 2022-08-30 Mitutoyo Corporation Workpiece inspection and defect detection system including monitoring of workpiece images
US11150200B1 (en) 2020-06-15 2021-10-19 Mitutoyo Corporation Workpiece inspection and defect detection system indicating number of defect images for training
US11568567B2 (en) * 2020-07-31 2023-01-31 Zebra Technologies Corporation Systems and methods to optimize performance of a machine vision system
US11328409B2 (en) 2020-09-30 2022-05-10 Mitutoyo Corporation System and method utilizing multi-point autofocus to align an optical axis of an optical assembly portion to be normal to a workpiece surface
US11587246B2 (en) 2020-10-30 2023-02-21 Mitutoyo Corporation Metrology system with projected pattern for points-from-focus type processes
US11486694B2 (en) 2020-12-18 2022-11-01 Mitutoyo Corporation Chromatic range sensor system for measuring workpiece thickness
US20230032656A1 (en) 2021-07-29 2023-02-02 Mitutoyo Corporation Chromatic range sensor system including camera
US11756186B2 (en) 2021-09-15 2023-09-12 Mitutoyo Corporation Workpiece inspection and defect detection system utilizing color channels

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0356680A1 (de) * 1988-08-11 1990-03-07 Siemens Aktiengesellschaft Optische Aufnahmeeinrichtung für Bildverarbeitungssysteme
JP2761391B2 (ja) * 1988-10-04 1998-06-04 オリンパス光学工業株式会社 焦点検出装置
US5136660A (en) * 1989-10-13 1992-08-04 International Business Machines Corporation Apparatus and method for computing the radon transform of digital images
US5227830A (en) * 1989-11-27 1993-07-13 Olympus Optical Co., Ltd. Automatic camera
DE19727471C1 (de) * 1997-06-27 1998-12-17 Siemens Ag Verfahren zur automatischen Intensitätseinstellung einer Beleuchtung für Einrichtungen zur Lageerkennung und/oder Qualitätskontrolle bei der automatischen Bestückung von Bauelementen
US6753919B1 (en) * 1998-11-25 2004-06-22 Iridian Technologies, Inc. Fast focus assessment system and method for imaging
US6665425B1 (en) * 1999-12-16 2003-12-16 Xerox Corporation Systems and methods for automated image quality based diagnostics and remediation of document processing systems
US6542180B1 (en) * 2000-01-07 2003-04-01 Mitutoyo Corporation Systems and methods for adjusting lighting of a part based on a plurality of selected regions of an image of the part
JP4477782B2 (ja) * 2000-01-18 2010-06-09 株式会社ミツトヨ 被測定物のイメージにおける複数選択領域該当箇所の照明調整装置及び方法
US6627863B2 (en) * 2000-12-15 2003-09-30 Mitutoyo Corporation System and methods to determine the settings of multiple light sources in a vision system
US7003161B2 (en) * 2001-11-16 2006-02-21 Mitutoyo Corporation Systems and methods for boundary detection in images
JP2004150855A (ja) * 2002-10-29 2004-05-27 Nikon Corp 測定機の光量補正方法及び光量補正装置
US20050207655A1 (en) * 2004-03-22 2005-09-22 Nasreen Chopra Inspection system and method for providing feedback

Also Published As

Publication number Publication date
CN1782661B (zh) 2010-04-14
EP1653408B1 (en) 2008-08-13
JP2006126200A (ja) 2006-05-18
US7454053B2 (en) 2008-11-18
CN1782661A (zh) 2006-06-07
DE602005008857D1 (de) 2008-09-25
EP1653408A1 (en) 2006-05-03
US20060093205A1 (en) 2006-05-04

Similar Documents

Publication Publication Date Title
JP4933771B2 (ja) 画像システムにおいてビデオツールを自動的にリカバリーするシステムおよび方法
US8995749B2 (en) Enhanced edge detection tool for edges of irregular surfaces
JP6001305B2 (ja) マシンビジョンシステムにおける潜在的な干渉要素の検査
US7636478B2 (en) Fast multiple template matching using a shared correlation map
US7668388B2 (en) System and method for single image focus assessment
US7580560B2 (en) System and method for fast template matching by adaptive template decomposition
US8111905B2 (en) Autofocus video tool and method for precise dimensional inspection
CN101762268B (zh) 用于快速近似聚焦的系统和方法
EP1622082A2 (en) Method of measuring occluded features for high precision machine vision metrology
US20050031191A1 (en) Methods and apparatus for inspection of lines embedded in highly textured material
JP6355411B2 (ja) エッジ検出方法
US20130162806A1 (en) Enhanced edge focus tool
JP2021196363A (ja) 訓練用の欠陥画像の数を示すワークピース検査及び欠陥検出システム
US9177222B2 (en) Edge measurement video tool and interface including automatic parameter set alternatives
JP2006127517A (ja) 機械視覚検査方法およびそのためのユーザーインターフェース
JP7349816B2 (ja) 画像検査装置
US20140185910A1 (en) Method for improving repeatability in edge location results of a machine vision inspection system
CN113866165A (zh) 包括监视工件图像的工件检查和缺陷检测系统
US8689127B1 (en) Edge measurement video tool parameter-setting user interface
WO2021075152A1 (ja) 欠陥分類装置、欠陥分類プログラム

Legal Events

Date Code Title Description
RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20070703

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20070809

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080904

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20110601

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20110607

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110803

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120214

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120217

R150 Certificate of patent or registration of utility model

Ref document number: 4933771

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150224

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250