JP7416071B2 - 判定装置、および判定プログラム - Google Patents
判定装置、および判定プログラム Download PDFInfo
- Publication number
- JP7416071B2 JP7416071B2 JP2021542815A JP2021542815A JP7416071B2 JP 7416071 B2 JP7416071 B2 JP 7416071B2 JP 2021542815 A JP2021542815 A JP 2021542815A JP 2021542815 A JP2021542815 A JP 2021542815A JP 7416071 B2 JP7416071 B2 JP 7416071B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- feature
- distribution
- defective
- product
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000002950 deficient Effects 0.000 claims description 247
- 238000009826 distribution Methods 0.000 claims description 185
- 238000004364 calculation method Methods 0.000 claims description 35
- 238000007689 inspection Methods 0.000 claims description 32
- 230000008859 change Effects 0.000 claims description 29
- 230000005484 gravity Effects 0.000 claims description 15
- 238000000034 method Methods 0.000 claims description 7
- 230000008569 process Effects 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 29
- 230000010365 information processing Effects 0.000 description 26
- 230000006870 function Effects 0.000 description 17
- 230000007547 defect Effects 0.000 description 12
- 238000012545 processing Methods 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 5
- 206010028980 Neoplasm Diseases 0.000 description 3
- 201000011510 cancer Diseases 0.000 description 3
- 238000002591 computed tomography Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 238000002595 magnetic resonance imaging Methods 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- General Health & Medical Sciences (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- Chemical & Material Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Description
前記計算した特徴量の分布から、所定の対象データに該当するか、該当しないかを判定するための基準となる基準データのデータ分布を生成する分布計算部と、
前記基準データの特徴量から、限度基準データを生成する限度基準データ生成部と、
前記限度基準データ生成部によって生成された前記限度基準データを出力する出力部と、
ユーザーからの変更指示を受け付けて、前記基準データの特徴量を変更する限度基準データ変更部と、
前記判定対象が前記所定の対象データに該当するか、該当しないかを判定する判定部と、を有し、
前記分布計算部は、入力された前記判定対象に関するデータの特徴量を計算し、
前記限度基準データ生成部は、前記限度基準データ変更部が変更した基準データの特徴量に基づき前記限度基準データを変更し、
前記出力部は、変更された前記限度基準データを出力し、
前記判定部は、得られた前記判定対象に関するデータの特徴量と、前記限度基準データ変更部によって変更された基準データの特徴量とを比較して、前記判定対象に関するデータに含まれる前記判定対象が前記所定の対象データに該当するか、該当しないかを判定する、判定装置。
前記良品画像の特徴量から、限度見本画像として前記製品のイメージ画像を生成する限度見本画像生成部と、
前記限度見本画像生成部によって生成された前記限度見本画像を出力する出力部と、
ユーザーからの変更指示を受け付けて、前記良品画像の特徴量を変更する限度見本画像変更部と、
製品の写っている検査対象画像に写っている前記製品が良品か、不良品かを判定する判定部と、を有し、
前記分布計算部は、製品の写っている検査対象画像が入力されて、当該検査対象画像の特徴量を計算し、
前記限度見本画像生成部は、前記限度見本画像変更部が変更した前記良品画像の特徴量に基づき前記限度見本画像を変更し、
前記出力部は、変更された前記限度見本画像を出力し、
前記判定部は、得られた前記検査対象画像の特徴量と、前記限度見本画像変更部によって変更された良品画像の特徴量とを比較して、前記検査対象画像に写っている前記製品が良品か、不良品かを判定する、判定装置。
前記分布計算部は、前記復元モデル生成部の学習によって得られた前記画像の特徴量の分布に基づき前記良品画像の分布を計算する、上記(5)または(6)に記載の判定装置。
前記計算した特徴量の分布から、所定の対象データに該当するか、該当しないかを判定するための基準となる基準データのデータ分布を生成する段階(a)と、
前記基準データの特徴量から、限度基準データを生成する段階(b)と、
前記段階(b)において生成された前記限度基準データを出力する段階(c)と、
ユーザーからの変更指示を受け付けて、前記基準データの特徴量を変更する段階(d)と、
前記段階(d)において変更した基準データの特徴量に基づき前記限度基準データを変更する段階(e)と、
前記段階(e)において変更された前記限度基準データを出力する段階(f)と、
判定対象に関するデータが入力されて、当該判定対象に関するデータの特徴量を計算する段階(g)と、
前記段階(g)において得られた前記判定対象に関するデータの特徴量と、前記段階(d)において変更された基準データの特徴量とを比較して、前記判定対象に関するデータに含まれる前記判定対象が前記所定の対象データに該当するか、該当しないかを判定する、処理をコンピューターに実行させるための判定プログラム。
前記良品画像の特徴量から、限度見本画像として前記製品のイメージ画像を生成する段階(b)と、
前記段階(b)において生成された前記限度見本画像を出力する段階(c)と、
ユーザーからの変更指示を受け付けて、前記良品画像の特徴量を変更する段階(d)と、
前記段階(d)において変更された前記良品画像の特徴量に基づき前記限度見本画像を変更する段階(e)と、
前記(e)において変更された前記限度見本画像を出力する段階(f)と、
製品の写っている検査対象画像が入力されて、当該検査対象画像の特徴量を計算する段階(g)と、
前記段階(g)において得られた前記検査対象画像の特徴量と、前記段階(d)において変更された前記良品画像の特徴量とを比較して、前記検査対象画像に写っている前記製品が良品か、不良品かを判定する段階(h)と、を有する処理をコンピューターに実行させるための判定プログラム。
学習によって得られた前記画像の特徴量の分布に基づき前記良品画像の分布を計算する、上記(12)または(13)に記載の判定プログラム。
図1は、実施形態1の情報処理装置の機能構成および処理を説明するための説明図である。
図6は、実施形態2の情報処理装置10の機能構成および処理を説明するための説明図である。なお、本実施形態2の説明においては、実施形態1と同様の機能を有する各部については同一の符号を付し、それらの説明は省略する。
13 良品/不良品判定部、
101 特徴量分布計算・復元モデル、
102 良品画像の分布、
103 検査対象画像、
104 入力画像の分布、
105 判定結果、
111 分布計算部、
112 分布出力部、
114 判定結果出力部、
150、250 製品モデル、
151~155 特徴量の分布、
157 新たな良品の限度位置、
160 良品範囲、
161 新たな良品範囲、
161a、161b 拡大された良品範囲
201 良品画像群、
204 検査画像の分布、
205 限度見本画像、
215 復元モデル生成部、
216 限度見本画像生成部、
217 限度見本画像出力部、
218 限度見本画像変更部、
219 良品画像分布変更部、
251 画像例、
271 良品画像、
272 生成画像、
273 不良品画像、
275a、275b、276 欠陥、
280 重心位置。
Claims (14)
- 判定対象に関するデータを入力し、前記判定対象に関するデータの特徴量の分布を計算し、
前記計算した特徴量の分布から、所定の対象データに該当するか、該当しないかを判定するための基準となる基準データのデータ分布を生成する分布計算部と、
前記基準データの特徴量から、限度基準データを生成する限度基準データ生成部と、
前記限度基準データ生成部によって生成された前記限度基準データを出力する出力部と、
ユーザーからの変更指示を受け付けて、前記基準データの特徴量を変更する限度基準データ変更部と、
前記判定対象が前記所定の対象データに該当するか、該当しないかを判定する判定部と、を有し、
前記分布計算部は、入力された前記判定対象に関するデータの特徴量を計算し、
前記限度基準データ生成部は、前記限度基準データ変更部が変更した基準データの特徴量に基づき前記限度基準データを変更し、
前記出力部は、変更された前記限度基準データを出力し、
前記判定部は、得られた前記判定対象に関するデータの特徴量と、前記限度基準データ変更部によって変更された基準データの特徴量とを比較して、前記判定対象に関するデータに含まれる前記判定対象が前記所定の対象データに該当するか、該当しないかを判定する、判定装置。 - 前記限度基準データ変更部は、前記基準データの特徴量の分布の外側にある特徴量と、前記基準データの特徴量のうち、前記外側にある特徴量から近い2つの特徴量とに基づいて画定される範囲を拡大された基準データ範囲として設定する、請求項1に記載の判定装置。
- 前記限度基準データ変更部は、前記2つの特徴量のうちの1つの特徴量と前記外側にある特徴量とを結ぶ直線上の前記1つの特徴量と前記外側にある特徴量との間にある1点と、前記2つの特徴量とに基づいて画定される範囲を拡大された基準データ範囲として設定する、請求項2に記載の判定装置。
- 前記限度基準データ変更部は、前記基準データの特徴量の分布の重心と前記外側にある特徴量とを結ぶ直線上の前記重心と前記外側にある特徴量との間にある1点と、前記2つの特徴量とに基づいて画定される範囲を拡大された基準データ範囲として設定する、請求項2に記載の判定装置。
- 製品が写っている画像を入力として、前記画像の特徴量の分布を計算して、当該計算した分布から、前記画像に写っている前記製品の良品、不良品を判定するための基準となる良品画像の特徴量の分布を生成する分布計算部と、
前記良品画像の特徴量から、限度見本画像として前記製品のイメージ画像を生成する限度見本画像生成部と、
前記限度見本画像生成部によって生成された前記限度見本画像を出力する出力部と、
ユーザーからの変更指示を受け付けて、前記良品画像の特徴量を変更する限度見本画像変更部と、
製品の写っている検査対象画像に写っている前記製品が良品か、不良品かを判定する判定部と、を有し、
前記分布計算部は、製品の写っている検査対象画像が入力されて、当該検査対象画像の特徴量を計算し、
前記限度見本画像生成部は、前記限度見本画像変更部が変更した前記良品画像の特徴量に基づき前記限度見本画像を変更し、
前記出力部は、変更された前記限度見本画像を出力し、
前記判定部は、得られた前記検査対象画像の特徴量と、前記限度見本画像変更部によって変更された良品画像の特徴量とを比較して、前記検査対象画像に写っている前記製品が良品か、不良品かを判定する、判定装置。 - 前記出力部は、前記検査対象画像の特徴量から生成された画像を出力する、請求項5に記載の判定装置。
- 複数の良品の前記画像からなる良品画像群を入力とし、当該良品画像群のなかのそれぞれの前記画像の特徴量の分布を学習して、復元モデルを生成する復元モデル生成部を有し、
前記分布計算部は、前記復元モデル生成部の学習によって得られた前記画像の特徴量の分布に基づき前記良品画像の分布を計算する、請求項5または6に記載の判定装置。 - 判定対象に関するデータを入力し、前記判定対象に関するデータの特徴量の分布を計算し、
前記計算した特徴量の分布から、所定の対象データに該当するか、該当しないかを判定するための基準となる基準データのデータ分布を生成する段階(a)と、
前記基準データの特徴量から、限度基準データを生成する段階(b)と、
前記段階(b)において生成された前記限度基準データを出力する段階(c)と、
ユーザーからの変更指示を受け付けて、前記基準データの特徴量を変更する段階(d)と、
前記段階(d)において変更した基準データの特徴量に基づき前記限度基準データを変更する段階(e)と、
前記段階(e)において変更された前記限度基準データを出力する段階(f)と、
判定対象に関するデータが入力されて、当該判定対象に関するデータの特徴量を計算する段階(g)と、
前記段階(g)において得られた前記判定対象に関するデータの特徴量と、前記段階(d)において変更された基準データの特徴量とを比較して、前記判定対象に関するデータに含まれる前記判定対象が前記所定の対象データに該当するか、該当しないかを判定する、処理をコンピューターに実行させるための判定プログラム。 - 前記段階(d)において、前記基準データの特徴量の分布の外側にある特徴量と、前記基準データの特徴量のうち、前記外側にある特徴量から近い2つの特徴量とに基づいて画定される範囲を拡大された基準範囲として設定する、請求項8に記載の判定プログラム。
- 前記段階(d)において、前記2つの特徴量のうちの1つの特徴量と前記外側にある特徴量とを結ぶ直線上の前記1つの特徴量と前記外側にある特徴量との間にある1点と、前記2つの特徴量とに基づいて画定される範囲を拡大された基準範囲として設定する、請求項9に記載の判定プログラム。
- 前記段階(d)において、前記基準データの特徴量の分布の重心と前記外側にある特徴量とを結ぶ直線上の前記重心と前記外側にある特徴量との間にある1点と、前記2つの特徴量とに基づいて画定される範囲を拡大された基準範囲として設定する、請求項9に記載の判定プログラム。
- 製品が写っている画像を入力として、前記画像の特徴量の分布を計算して、当該計算した分布から、前記画像に写っている前記製品の良品、不良品を判定するための基準となる良品画像の特徴量の分布を生成する段階(a)と、
前記良品画像の特徴量から、限度見本画像として前記製品のイメージ画像を生成する段階(b)と、
前記段階(b)において生成された前記限度見本画像を出力する段階(c)と、
ユーザーからの変更指示を受け付けて、前記良品画像の特徴量を変更する段階(d)と、
前記段階(d)において変更された前記良品画像の特徴量に基づき前記限度見本画像を変更する段階(e)と、
前記(e)において変更された前記限度見本画像を出力する段階(f)と、
製品の写っている検査対象画像が入力されて、当該検査対象画像の特徴量を計算する段階(g)と、
前記段階(g)において得られた前記検査対象画像の特徴量と、前記段階(d)において変更された前記良品画像の特徴量とを比較して、前記検査対象画像に写っている前記製品が良品か、不良品かを判定する段階(h)と、を有する処理をコンピューターに実行させるための判定プログラム。 - 前記検査対象画像の特徴量から生成された画像を出力する段階を有する、請求項12に記載の判定プログラム。
- 複数の良品の前記画像からなる良品画像群を入力とし、当該良品画像群のなかのそれぞれの前記画像の特徴量の分布を学習して、復元モデルを生成する段階をさらに有し、
学習によって得られた前記画像の特徴量の分布に基づき前記良品画像の分布を計算する、請求項12または13に記載の判定プログラム。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019153041 | 2019-08-23 | ||
JP2019153041 | 2019-08-23 | ||
JP2020053267 | 2020-03-24 | ||
JP2020053267 | 2020-03-24 | ||
PCT/JP2020/031479 WO2021039591A1 (ja) | 2019-08-23 | 2020-08-20 | 判定基準生成装置、判定装置、判定基準生成プログラム、および判定プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2021039591A1 JPWO2021039591A1 (ja) | 2021-03-04 |
JP7416071B2 true JP7416071B2 (ja) | 2024-01-17 |
Family
ID=74685518
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2021542815A Active JP7416071B2 (ja) | 2019-08-23 | 2020-08-20 | 判定装置、および判定プログラム |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7416071B2 (ja) |
WO (1) | WO2021039591A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7379574B2 (ja) * | 2022-03-30 | 2023-11-14 | 本田技研工業株式会社 | 疑似不良品データ生成装置 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003156448A (ja) | 2001-11-21 | 2003-05-30 | Shirai Denshi Kogyo Kk | 印刷物の検査方法およびその検査装置 |
JP2012021919A (ja) | 2010-07-16 | 2012-02-02 | Keyence Corp | 画像処理装置、画像処理方法及びコンピュータプログラム |
US20140002632A1 (en) | 2012-06-27 | 2014-01-02 | Jason Z. Lin | Detection of defects embedded in noise for inspection in semiconductor manufacturing |
WO2017168630A1 (ja) | 2016-03-30 | 2017-10-05 | 株式会社日立ハイテクノロジーズ | 欠陥検査装置、欠陥検査方法 |
JP2018005773A (ja) | 2016-07-07 | 2018-01-11 | 株式会社リコー | 異常判定装置及び異常判定方法 |
JP2019087181A (ja) | 2017-11-10 | 2019-06-06 | アズビル株式会社 | 画像検査装置および方法 |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020051982A (ja) * | 2018-09-28 | 2020-04-02 | Jfeテクノリサーチ株式会社 | 画像検査装置及び検査モデル構築システム |
-
2020
- 2020-08-20 WO PCT/JP2020/031479 patent/WO2021039591A1/ja active Application Filing
- 2020-08-20 JP JP2021542815A patent/JP7416071B2/ja active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003156448A (ja) | 2001-11-21 | 2003-05-30 | Shirai Denshi Kogyo Kk | 印刷物の検査方法およびその検査装置 |
JP2012021919A (ja) | 2010-07-16 | 2012-02-02 | Keyence Corp | 画像処理装置、画像処理方法及びコンピュータプログラム |
US20140002632A1 (en) | 2012-06-27 | 2014-01-02 | Jason Z. Lin | Detection of defects embedded in noise for inspection in semiconductor manufacturing |
WO2017168630A1 (ja) | 2016-03-30 | 2017-10-05 | 株式会社日立ハイテクノロジーズ | 欠陥検査装置、欠陥検査方法 |
JP2018005773A (ja) | 2016-07-07 | 2018-01-11 | 株式会社リコー | 異常判定装置及び異常判定方法 |
JP2019087181A (ja) | 2017-11-10 | 2019-06-06 | アズビル株式会社 | 画像検査装置および方法 |
Also Published As
Publication number | Publication date |
---|---|
JPWO2021039591A1 (ja) | 2021-03-04 |
WO2021039591A1 (ja) | 2021-03-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Karaaslan et al. | Artificial intelligence assisted infrastructure assessment using mixed reality systems | |
US20200242822A1 (en) | Digital Media Environment for Style-Aware Patching in a Digital Image | |
KR20230124713A (ko) | 결함 검출 방법, 장치 및 시스템 | |
JP6707920B2 (ja) | 画像処理装置、画像処理方法、およびプログラム | |
TWI622877B (zh) | System and method for recording and replaying mouse behavior, recording media and program products | |
CN111797998A (zh) | 生成机器学习样本的组合特征的方法及系统 | |
JP7027978B2 (ja) | 検査装置、検査方法、及び検査プログラム | |
US11373350B2 (en) | Apparatus and method for editing data and program | |
GB2587833A (en) | Image modification styles learned from a limited set of modified images | |
JP2020139905A (ja) | 検査装置、検査方法、およびプログラム | |
JP7416071B2 (ja) | 判定装置、および判定プログラム | |
JP7059889B2 (ja) | 学習装置、画像生成装置、学習方法、及び学習プログラム | |
US20220163387A1 (en) | Method for optimizing output result of spectrometer and electronic device using the same | |
JP7392425B2 (ja) | 学習装置、学習方法およびプログラム | |
Tao et al. | Anomaly detection for fabricated artifact by using unstructured 3D point cloud data | |
JP2018124990A (ja) | モデル生成装置、評価装置、モデル生成方法、評価方法及びプログラム | |
JP2022114462A (ja) | 検査装置および検査方法 | |
US11763462B2 (en) | Mesh hole area detection | |
KR102273334B1 (ko) | 다 채널 이미지를 이용한 인공신경망 학습 방법 및 장치 | |
Yousef et al. | Innovative inspection device for investment casting foundries | |
JP2016029543A (ja) | 情報処理装置及びプログラム | |
JP2006260410A (ja) | 画像処理アルゴリズムの評価装置、生成装置、評価方法、生成方法、コンピュータをその評価装置として機能させるためのプログラム、およびコンピュータをその生成装置として機能させるためのプログラム | |
Čejka et al. | UX and Machine Learning-Preprocessing of Audiovisual Data Using Computer Vision to Recognize UI Elements. | |
US20180081951A1 (en) | Information generation system, a method and a non-transitory computer readable medium thereof | |
JP7344501B1 (ja) | プログラム、方法、情報処理装置、システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221223 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230808 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20231006 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231102 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231205 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231218 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7416071 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |