JP6278752B2 - 形状検査装置及び形状検査方法 - Google Patents
形状検査装置及び形状検査方法 Download PDFInfo
- Publication number
- JP6278752B2 JP6278752B2 JP2014043019A JP2014043019A JP6278752B2 JP 6278752 B2 JP6278752 B2 JP 6278752B2 JP 2014043019 A JP2014043019 A JP 2014043019A JP 2014043019 A JP2014043019 A JP 2014043019A JP 6278752 B2 JP6278752 B2 JP 6278752B2
- Authority
- JP
- Japan
- Prior art keywords
- segment
- representative value
- height
- value
- segments
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000007689 inspection Methods 0.000 title claims description 62
- 238000000034 method Methods 0.000 title claims description 60
- 230000007547 defect Effects 0.000 claims description 67
- 238000005259 measurement Methods 0.000 claims description 43
- 238000012545 processing Methods 0.000 description 30
- 238000003384 imaging method Methods 0.000 description 13
- 238000003466 welding Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 238000012935 Averaging Methods 0.000 description 9
- 230000002950 deficient Effects 0.000 description 7
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 230000002159 abnormal effect Effects 0.000 description 4
- 230000005856 abnormality Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- XEEYBQQBJWHFJM-UHFFFAOYSA-N Iron Chemical compound [Fe] XEEYBQQBJWHFJM-UHFFFAOYSA-N 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000002184 metal Substances 0.000 description 2
- 229910052751 metal Inorganic materials 0.000 description 2
- 230000010363 phase shift Effects 0.000 description 2
- 239000010953 base metal Substances 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 229910052742 iron Inorganic materials 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000005477 standard model Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
- G06T7/0006—Industrial image inspection using a design-rule based approach
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/243—Classification techniques relating to the number of classes
- G06F18/2433—Single-class perspective, e.g. one-against-all classification; Novelty detection; Outlier detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/04—Indexing scheme for image data processing or generation, in general involving 3D image data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10028—Range image; Depth image; 3D point clouds
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30164—Workpiece; Machine component
Landscapes
- Engineering & Computer Science (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Image Processing (AREA)
- Image Analysis (AREA)
Description
ワークの表面形状における高さ情報を含む距離画像を取得する距離画像取得手段と、
取得した前記距離画像を表示する表示手段と、
該表示手段に表示されている前記距離画像に対して複数の且つ一方向に並んだセグメントを設定するセグメント設定手段と、
該一方向に並んだ複数のセグメントの各々のセグメントに含まれる各画素が有する高さ情報に関する代表値の種別を選択するための代表値選択手段と、
該代表値選択手段により選択された前記代表値を各セグメント毎に求め、前記一方向に並んだ各セグメントの代表値が所定の公差範囲内にあるか否かによって欠陥判定を行う第1モードと、前記一方向に並んだ各々のセグメントの代表値の配列から直線、円、または自由曲線の基準モデル線を推定し、推定された基準モデル線と各セグメントの代表値との差分が所定のしきい値よりも大きいか小さいかによって欠陥判定を行う第2モードのいずれかのモードで検査を行う欠陥判定手段とを備えることを特徴とする形状検査装置を提供することにより達成される。
検査対象物の表面形状における高さ情報を含む距離画像を取得する距離画像取得工程と、
取得した前記距離画像を表示部に表示する表示工程と、
前記表示部に表示されている前記距離画像に対して複数の且つ一方向に並んだセグメントを設定するセグメント設定工程と、
該一方向に並んだ複数のセグメントの各々のセグメントに含まれる各画素が有する高さ情報に関する代表値の種別を選択するための代表値選択工程と、
該代表値選択工程で選択された前記代表値を各セグメント毎に求める代表値抽出工程と、
前記一方向に並んだ各セグメントの代表値が所定の公差範囲内にあるか否かによって欠陥判定を行う第1モードと、前記一方向に並んだ各々のセグメントの代表値の配列から直線、円、または自由曲線の基準モデル線を推定し、推定された基準モデル線と各セグメントの代表値との差分が所定のしきい値よりも大きいか小さいかによって欠陥判定を行う第2モードのいずれかのモードで検査を行う欠陥判定工程とを含む形状検査方法を提供することにより達成される。
実施例の形状検査装置1の構成を図1に示す。この形状検査装置1は、ヘッド部2と、コントローラ部4とを有する。ヘッド部2は、検査対象物(ワーク)WPを照らす投光手段201と、ワークWPの多値画像を撮像する撮像手段202と、ヘッド部2をコントローラ部4に接続するためのヘッド側通信手段203を備える。
図2は水平方向に延びる長方形のウインドウ20を設定した場合を示す。このウインドウ20の中に、その長手方向つまり水平方向に複数のセグメント30が設定される。各セグメント30の幅W及び隣接する2つのセグメント30間の距離(ピッチ)Ptをユーザに指定又は設定させればよい。セグメント幅W及びピッチPtの指定は画素数の指定と等価である。
ワークWPの形状欠陥を検出するのに都合の良い代表値をユーザが指定できる。例えば表示部6に代表値の種別をメニュー表示し、ユーザはその中から所望の代表値を選択できるようにするのがよい。実施例の形状検査装置1では、(1)平均高さ、(2)最大高さ、(3)最小高さの3種類の代表値から一つを選択できる。
ユーザが代表値として「平均高さ」を指定したときには、各セグメント30に含まれる全ての画素の高さ情報の平均値を算出して、この平均値が各セグメント30の代表値になる。演算の結果得られた代表値は、各代表値が各セグメントの位置情報を有している。この特性を有する代表値を選択することで、欠陥位置がどのセグメントに存在しているかを特定することができる。
最大高さに関しては2つの求め方がある。第1の求め方は、各セグメント30に含まれる全ての画素の高さ情報から最大高さを抽出するやり方である。選択の結果得られたこの代表値によれば、各セグメント30の最大高さと共に当該最大高さの情報を持つ画素を特定できる。各画素は、それ自体が位置情報を持っていることから、どの画素が最大高さの情報を持っているかを特定できる。つまり、各セグメント30において、どの位置が最大高さを有しているかを特定できるという利点がある。高さ情報に加えて各画素は位置情報を実質的に有している。この特性を使うことのできる代表値を採用することで、欠陥位置を特定するのが容易となる。
最小高さに関しても、上記の最大高さと同様に、2つの求め方がある。第1の求め方は、各セグメント30に含まれる全ての画素の高さ情報から最小高さを抽出するやり方である。これによれば、各セグメント30の最小高さと共に当該最小高さの情報を持つ画素を特定できる。
第1モードは、各セグメント30の代表値が共通の公差の範囲内にあるか否かによって欠陥判定を行う。
各セグメント30の本来あるべき面(背景)を「ゼロ面」として設定し、このゼロ面に対して上記の代表値の値を調整するのがよい。例えばワークWPが傾いた状態で撮像された場合、その傾きを補正するのが「ゼロ面」という概念である。このゼロ面補正を行うことで、ゼロ面を基準にワークWPの表面高さを求めることができる。
各セグメント30の代表値(高さデータ)の配列と、隣接する2つのセグメント間のピッチPtを使って、以下の式に基づいて最小二乗法により円の式に当てはめればよい。
ここに、xは各セグメント30の移動量つまり開始位置のセグメントからの距離である。
zは各セグメント30の代表値(高さデータ)である。
A、B、Rは求める円の式の係数である。
各セグメント30の代表値(高さデータ)の配列から、以下の式に基づいて最小二乗法により平面の式に当てはめればよい。
ここに、x、y、zは代表値の点の三次元座標値である。
A、B、Cは求める平面の式の係数である。
第2モードは、各セグメント30の代表値に基づいてトレンドの基準モデル線を推定し、基準モデル線と各セグメント30の代表値との差分が所定のしきい値よりも大きいか小さいかによって欠陥判定を行う。この第2モードにおいて、上述した第1モードと同様にウインドウ20及びセグメント30を使用する。このウインドウ20及びセグメント30は、上記第1モードと同じであることから、その説明を省略する。
第1モードで説明した「平面」と同じ手法で求めればよい。
第1モードで説明した「近似円」と同じ手法で求めればよい。
ワークWPの表面形状が規定式に当て嵌めることのできる場合には、上記の直線や円と同様に、x、zを用いた2変数の多項式を規定し、この式に基づいて最小二乗法を適用して自由曲線を求めればよい。その具体的な手法は、前記特許文献2(特開2009−186338号公報)に詳しく説明されていることから、この特許文献2を、本明細書に援用することで、その説明を省略する。
前述した具体的な適用例で説明すれば、図16に図示の溶接部位が計測対象物である場合、この溶接部位の基礎となる金属板が完全な平面であれば問題はないが、金属板が、うねっていたり、反っていたり、丸みを帯びていたり様々である。このような場合、計測対象物の高さは、基礎となる金属板の反りなどの影響を受ける。換言すれば、計測対象物の高さが、計測対象物に関連した面の形状によって影響を受ける場合には、この影響を排除する必要がある。
第2の計測領域内における高さ画像(複数の画素)の三次元情報で計算した最小二乗平面をゼロ面とする。
第2の計測領域内における高さ画像のZ値の平均値をZ切片とする且つ撮像系の基準面に平行な平面をゼロ面とする。
ユーザが指定した3点の画素の三次元情報で計算した平面の高さを基準とする。勿論、ユーザに3点よりも多い複数の点を指定させ、これらの点の画素の三次元情報で平面を求めるようにしてもよい。この場合は、その複数の点から最小二乗平面を算出し、ゼロ面とする。
4 コントローラ部
6 表示部(液晶モニタ)
8 入力手段
20 ウインドウ
30 セグメント
W セグメントの幅
Pt 隣接するセグメント間の距離(ピッチ)
50 基準モデル線
WP ワーク(検査対象物)
Claims (9)
- ワークの表面形状における高さ情報を含む距離画像を取得する距離画像取得手段と、
取得した前記距離画像を表示する表示手段と、
該表示手段に表示されている前記距離画像に対して複数の且つ一方向に並んだセグメントを設定するセグメント設定手段と、
該一方向に並んだ複数のセグメントの各々のセグメントに含まれる各画素が有する高さ情報に関する代表値の種別を選択するための代表値選択手段と、
該代表値選択手段により選択された前記代表値を各セグメント毎に求め、前記一方向に並んだ各セグメントの代表値が所定の公差範囲内にあるか否かによって欠陥判定を行う第1モードと、前記一方向に並んだ各々のセグメントの代表値の配列から直線、円、または自由曲線の基準モデル線を推定し、推定された基準モデル線と各セグメントの代表値との差分が所定のしきい値よりも大きいか小さいかによって欠陥判定を行う第2モードのいずれかのモードで検査を行う欠陥判定手段とを備えることを特徴とする形状検査装置。 - 前記表示手段に表示されている前記距離画像に対して計測領域を規定するウインドウを設定するウインドウ設定手段を更に有し、
該ウインドウ設定手段によって設定されたウインドウの中に前記セグメントが割り付けられる、請求項1に記載の形状検査装置。 - 前記代表値が、各画素が有する高さ情報から抽出できる値である、請求項1又は2に記載の形状検査装置。
- 前記代表値が、各セグメントに含まれる複数の画素の最大高さ又は最小高さである、請求項3に記載の形状検査装置。
- 前記代表値が、前記セグメントに含まれる各画素が有する高さ情報に基づいて演算によって求められる値である、請求項1又は2に記載の形状検査装置。
- 前記代表値が、前記セグメントに含まれる各画素が有する高さ情報の平均値である、請求項5に記載の形状検査装置。
- 各セグメントの代表値から前記ワークの前記一方向の表面形状の基準となる基準モデル線を求め、該基準モデル線と各代表値との差分がしきい値を超えているか否かによって欠陥判定を行う欠陥判定手段を更に有する、請求項1〜6のいずれか一項に記載の形状検査装置。
- ユーザが指定する前記セグメントの幅及び隣接する2つのセグメント間の距離を受け付けて、該セグメントの幅及び隣接する2つのセグメント間の距離に基づいて前記複数のセグメントが前記ウインドウの中に割り付けられる、請求項2に記載の形状検査装置。
- 検査対象物の表面形状における高さ情報を含む距離画像を取得する距離画像取得工程と、
取得した前記距離画像を表示部に表示する表示工程と、
前記表示部に表示されている前記距離画像に対して複数の且つ一方向に並んだセグメントを設定するセグメント設定工程と、
該一方向に並んだ複数のセグメントの各々のセグメントに含まれる各画素が有する高さ情報に関する代表値の種別を選択するための代表値選択工程と、
該代表値選択工程で選択された前記代表値を各セグメント毎に求める代表値抽出工程と、
前記一方向に並んだ各セグメントの代表値が所定の公差範囲内にあるか否かによって欠陥判定を行う第1モードと、前記一方向に並んだ各々のセグメントの代表値の配列から直線、円、または自由曲線の基準モデル線を推定し、推定された基準モデル線と各セグメントの代表値との差分が所定のしきい値よりも大きいか小さいかによって欠陥判定を行う第2モードのいずれかのモードで検査を行う欠陥判定工程とを含む形状検査方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014043019A JP6278752B2 (ja) | 2014-03-05 | 2014-03-05 | 形状検査装置及び形状検査方法 |
US14/601,261 US20150254830A1 (en) | 2014-03-05 | 2015-01-21 | Shape Inspecting Device And Shape Inspecting Method |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014043019A JP6278752B2 (ja) | 2014-03-05 | 2014-03-05 | 形状検査装置及び形状検査方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2015169473A JP2015169473A (ja) | 2015-09-28 |
JP6278752B2 true JP6278752B2 (ja) | 2018-02-14 |
Family
ID=54017852
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014043019A Active JP6278752B2 (ja) | 2014-03-05 | 2014-03-05 | 形状検査装置及び形状検査方法 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20150254830A1 (ja) |
JP (1) | JP6278752B2 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6743760B2 (ja) * | 2017-05-23 | 2020-08-19 | トヨタ自動車株式会社 | 3次元曲面上の凹凸形状測定方法 |
WO2019220674A1 (ja) * | 2018-05-18 | 2019-11-21 | 三菱電機株式会社 | 伝熱管検査装置、伝熱管検査方法及びプログラム |
DE102018113225A1 (de) * | 2018-06-04 | 2019-12-05 | Lisa Dräxlmaier GmbH | Verfahren und Vorrichtung zum elektrisch leitenden Verbinden einer Stromschiene für ein Fahrzeug mit einer abzweigenden Lasche |
JP7378934B2 (ja) * | 2019-01-29 | 2023-11-14 | キヤノン株式会社 | 情報処理装置、情報処理方法及びシステム |
US11803943B2 (en) * | 2019-06-25 | 2023-10-31 | Illinois Tool Works Inc. | Brightness and contrast correction for video extensometer systems and methods |
JPWO2021177361A1 (ja) * | 2020-03-05 | 2021-09-10 | ||
JPWO2022091543A1 (ja) * | 2020-10-28 | 2022-05-05 | ||
CN112907593B (zh) * | 2021-04-17 | 2023-09-22 | 湖南健坤激光科技有限公司 | 一种手机镜片胶体断层位置的识别方法、装置及相关设备 |
CN117115154B (zh) * | 2023-10-23 | 2024-05-14 | 深圳市欧康精密技术有限公司 | 基于机器视觉的插座连接器精密检测方法 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH02245643A (ja) * | 1989-03-18 | 1990-10-01 | Fujitsu Ltd | 実装部品検査装置 |
JP2002319091A (ja) * | 2001-04-20 | 2002-10-31 | Fuji Heavy Ind Ltd | 後続車両認識装置 |
JP2005172559A (ja) * | 2003-12-10 | 2005-06-30 | Seiko Epson Corp | パネルの線欠陥検出方法及び装置 |
JP4714104B2 (ja) * | 2006-07-31 | 2011-06-29 | 富士重工業株式会社 | 物体傾き検出装置 |
JP5422129B2 (ja) * | 2008-02-07 | 2014-02-19 | 株式会社キーエンス | 欠陥検出装置、欠陥検出方法及びコンピュータプログラム |
JP4789964B2 (ja) * | 2008-04-01 | 2011-10-12 | オリンパス株式会社 | 画像処理装置、画像処理プログラム、画像処理方法、および電子機器 |
JP2010197313A (ja) * | 2009-02-26 | 2010-09-09 | Sumitomo Electric Ind Ltd | 製品形状の検査システム |
JP2012058850A (ja) * | 2010-09-06 | 2012-03-22 | Sony Corp | 画像処理装置および方法、並びにプログラム |
CN103324977B (zh) * | 2012-03-21 | 2016-03-30 | 日电(中国)有限公司 | 一种目标数量检测方法和设备 |
US8811670B2 (en) * | 2012-09-28 | 2014-08-19 | The Boeing Company | Method and system for using fingerprints to track moving objects in video |
US9111444B2 (en) * | 2012-10-31 | 2015-08-18 | Raytheon Company | Video and lidar target detection and tracking system and method for segmenting moving targets |
-
2014
- 2014-03-05 JP JP2014043019A patent/JP6278752B2/ja active Active
-
2015
- 2015-01-21 US US14/601,261 patent/US20150254830A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
JP2015169473A (ja) | 2015-09-28 |
US20150254830A1 (en) | 2015-09-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6278752B2 (ja) | 形状検査装置及び形状検査方法 | |
US12001191B2 (en) | Automated 360-degree dense point object inspection | |
US10775160B2 (en) | System and method for efficient surface measurement using a laser displacement sensor | |
US7567713B2 (en) | Method utilizing intensity interpolation for measuring edge locations in a high precision machine vision inspection system | |
JP7150105B2 (ja) | 三次元画像処理装置及び三次元画像処理方法 | |
EP3963414A2 (en) | Automated 360-degree dense point object inspection | |
JP5597056B2 (ja) | 画像測定装置、画像測定方法及び画像測定装置用のプログラム | |
JP6681743B2 (ja) | 画像検査装置、画像検査方法、画像検査プログラム及びコンピュータで読み取り可能な記録媒体並びに記録した機器 | |
JP6649802B2 (ja) | 三次元画像検査装置、三次元画像検査方法、三次元画像検査プログラム及びコンピュータで読み取り可能な記録媒体並びに記録した機器 | |
JP7064404B2 (ja) | 光学式変位計 | |
US8942837B2 (en) | Method for inspecting a manufacturing device | |
CN109000583B (zh) | 使用激光位移传感器进行有效表面测量的系统和方法 | |
TWI521476B (zh) | 週期性圖案之自動光學檢測方法 | |
US10379006B2 (en) | Data generation method and data generation apparatus | |
JP2017190985A (ja) | 管状体内表面検査装置、管状体内表面検査方法、ドリフトゲージ及びドリフト検査方法 | |
JP2015520359A (ja) | 任意の形状の対象物の中心線を評価する方法 | |
CN111062913B (zh) | 一种激光选区融化成型粉床铺粉质量检测方法 | |
TW201818064A (zh) | 晶圓中開口尺寸之光學量測 | |
TW201722256A (zh) | 用於焊點檢查的設備及方法 | |
US20240271925A1 (en) | Shape inspection device, processing device, height image processing device | |
KR101799051B1 (ko) | 레이저 스캔을 이용한 용접비드의 검사 방법 및 장치 | |
KR101236847B1 (ko) | 용접 비드 검사 장치 및 그 방법 | |
JP2012037488A (ja) | 形状検査装置及び形状検査方法 | |
KR102592603B1 (ko) | 비전 검사 장비의 모니터링 방법 | |
JP7073732B2 (ja) | 溶接ビードの外観評価方法および外観評価装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20160909 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170629 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170808 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171006 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180109 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180116 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6278752 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |