JP7436752B2 - 検知装置および検知方法 - Google Patents
検知装置および検知方法 Download PDFInfo
- Publication number
- JP7436752B2 JP7436752B2 JP2023508334A JP2023508334A JP7436752B2 JP 7436752 B2 JP7436752 B2 JP 7436752B2 JP 2023508334 A JP2023508334 A JP 2023508334A JP 2023508334 A JP2023508334 A JP 2023508334A JP 7436752 B2 JP7436752 B2 JP 7436752B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- processing
- processing unit
- images
- detection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims description 120
- 238000012545 processing Methods 0.000 claims description 193
- 230000005856 abnormality Effects 0.000 claims description 52
- 238000000034 method Methods 0.000 claims description 42
- 238000004364 calculation method Methods 0.000 claims description 21
- 238000003384 imaging method Methods 0.000 claims description 17
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 238000002156 mixing Methods 0.000 claims description 6
- 238000004148 unit process Methods 0.000 claims description 3
- 230000002159 abnormal effect Effects 0.000 description 15
- 238000003860 storage Methods 0.000 description 9
- 230000002950 deficient Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 238000004519 manufacturing process Methods 0.000 description 7
- 239000002131 composite material Substances 0.000 description 6
- 238000007781 pre-processing Methods 0.000 description 6
- 230000007547 defect Effects 0.000 description 5
- 230000015572 biosynthetic process Effects 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000003672 processing method Methods 0.000 description 4
- 238000003786 synthesis reaction Methods 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012935 Averaging Methods 0.000 description 1
- 208000033985 Device component issue Diseases 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000003754 machining Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000011282 treatment Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
- G01N21/88—Investigating the presence of flaws or contamination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
Landscapes
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- General Health & Medical Sciences (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Image Analysis (AREA)
Description
これによれば、判定対象である第1画像と、その画像を加工した第2画像をオートエンコーダが処理した第3画像との差分を示す第4画像に基づき判定することで、画像の中で検知すべき対象が極めて小さい領域に示される場合であっても、そのような検知対象を見逃して正常/異常を判定することを防止する検知装置を提供することができる。
これによれば、第2画像は判定対象である第1画像を部分的に加工したものであることで、判定対象に存在した検知対象が第3画像に現れるため第4画像では当該検知対象部分が強調されて表示され、かかる検知対象を見逃すことを防止できる。
これによれば、複数の異なる加工処理された第2画像をオートエンコーダが処理した複数の異なる第3画像を合成して1つの第4画像を生成し、かかる第4画像に基づき判定することで、極めて小さい検知対象であっても当該部分が重畳することで強調されて表示され、かかる検知対象を見逃すことを防止できる。
これによれば、複数の差分の論理積を算出した1つの第4画像を生成し、かかる第4画像に基づき判定することで、極めて小さい検知対象であっても当該部分が重畳することで強調されて表示され、かかる検知対象を見逃すことを防止できる。
これによれば、判定対象である第1画像を複数の異なる加工処理を行うことで、判定対象に存在した検知対象がすべての第3画像に共通して現れるため第4画像では当該部分が重畳することで強調されて表示され、かかる検知対象を見逃すことを防止できる。
これによれば、撮像装置と一体化した検知装置を提供することができる。
これによれば、判定対象である第1画像と、その画像を加工した第2画像をオートエンコーダが処理した第3画像との差分を示す第4画像に基づき判定することで、画像の中で検知すべき対象が極めて小さい領域に示される場合であっても、そのような検知対象を見逃して正常/異常を判定することを防止する検知方法を提供することができる。
<第一実施形態>
図1~図7を参照し、本実施形態における異常検知システム101および異常検知システム101に組み込まれた検知装置100を説明する。異常検知システム101は、図1に示すように、たとえばねじ102の製造ライン103において、製造されたねじ102の異常を検知して良・不良品の振り分けに用いられる。異常検知システム101は、良品と不良品が混在する製造ライン103のねじ102を撮像し、撮像した画像に基づき異常を検知する。異常検知システム101は、異常を検知しなかったねじ102を良品の製造ライン103へ振り分け、異常を検知したねじ102を不良品の製造ライン103へ振り分ける制御を行う。なお、本図では、不良品のねじ102は、頭部の工具溝(十字形部分)が潰れている異常を有することを示している。もちろん、異常検知システム101は、本図の例に限られず、たとえばある構造物そのものやその構造物を構成する基板などの部品、食品を含む生産物など、様々な検知対象に使用され得る。
Claims (7)
- 画像に含まれる検知対象の正常/異常を検知する検知装置であって、
検知対象を含む第1画像を取得する画像取得部と、
前記第1画像に対してノイズを加える加工処理を行った第2画像を出力する画像加工部と、
学習済みのオートエンコーダにより、前記第1画像と前記第2画像の内少なくとも前記第2画像を処理した第3画像を出力するAE処理部と、
前記第1画像と前記第3画像との差分を算出し、第4画像を出力する算出処理部と、
前記第4画像に基づき正常/異常の判定を行う判定部と、
を備える検知装置。 - 前記画像加工部は、前記第1画像に対して部分的にノイズを加える加工処理を行った前記第2画像を出力することを特徴とする請求項1に記載の検知装置。
- 前記画像加工部は、前記第1画像に対して異なる複数のノイズを加える加工処理を行うことにより複数の第2画像を出力し、
前記AE処理部は、前記複数の第2画像を処理し、前記複数の第2画像のそれぞれに対応する複数の第3画像を出力し、
前記算出処理部は、前記第1画像と前記複数の第3画像との差分を算出し、一の前記第4画像を出力する、
ことを特徴とする請求項1または2に記載の検知装置。 - 前記算出処理部は、算出された複数の差分の論理積を算出することにより前記一の第4画像を出力することを特徴とする請求項3に記載の検知装置。
- 前記画像加工部は、明度変換処理、ぼかし処理、エッジ強調処理、および、アルファブレンディング処理の組から任意の2以上の異なるノイズを加える加工処理を行うことを特徴とする請求項3または4に記載の検知装置。
- 検知対象を撮像する撮像装置をさらに備え、
前記画像取得部は、前記撮像装置から前記第1画像を取得することを特徴とする請求項1乃至5のいずれかに記載の検知装置。 - 画像に含まれる検知対象の正常/異常を検知する検知方法であって、
検知対象を含む第1画像を取得するステップと、
前記第1画像に対してノイズを加える加工処理を行った第2画像を出力するステップと、
学習済みのオートエンコーダにより、前記第1画像と前記第2画像の内少なくとも前記第2画像を処理した第3画像を出力するステップと、
前記第1画像と前記第3画像との差分を算出し、第4画像を出力するステップと、
前記第4画像に基づき正常/異常の判定を行うステップと、
を備える検知方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2021/012632 WO2022201451A1 (ja) | 2021-03-25 | 2021-03-25 | 検知装置および検知方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2022201451A1 JPWO2022201451A1 (ja) | 2022-09-29 |
JP7436752B2 true JP7436752B2 (ja) | 2024-02-22 |
Family
ID=83395468
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023508334A Active JP7436752B2 (ja) | 2021-03-25 | 2021-03-25 | 検知装置および検知方法 |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP7436752B2 (ja) |
WO (1) | WO2022201451A1 (ja) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019188040A1 (ja) | 2018-03-29 | 2019-10-03 | 日本電気株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
WO2020031984A1 (ja) | 2018-08-08 | 2020-02-13 | Blue Tag株式会社 | 部品の検査方法及び検査システム |
JP2020067865A (ja) | 2018-10-25 | 2020-04-30 | 株式会社アルム | 画像処理装置、画像処理システム、および画像処理プログラム |
US20200250812A1 (en) | 2019-01-31 | 2020-08-06 | Siemens Healthcare Limited | Method and system for image analysis |
JP2020140580A (ja) | 2019-02-28 | 2020-09-03 | 日本電信電話株式会社 | 検知装置及び検知プログラム |
WO2020184069A1 (ja) | 2019-03-08 | 2020-09-17 | 日本電気株式会社 | 画像処理方法、画像処理装置、プログラム |
JP2020187735A (ja) | 2019-05-13 | 2020-11-19 | 富士通株式会社 | 表面欠陥識別方法及び装置 |
-
2021
- 2021-03-25 WO PCT/JP2021/012632 patent/WO2022201451A1/ja active Application Filing
- 2021-03-25 JP JP2023508334A patent/JP7436752B2/ja active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019188040A1 (ja) | 2018-03-29 | 2019-10-03 | 日本電気株式会社 | 画像処理装置、画像処理方法および画像処理プログラム |
WO2020031984A1 (ja) | 2018-08-08 | 2020-02-13 | Blue Tag株式会社 | 部品の検査方法及び検査システム |
JP2020067865A (ja) | 2018-10-25 | 2020-04-30 | 株式会社アルム | 画像処理装置、画像処理システム、および画像処理プログラム |
US20200250812A1 (en) | 2019-01-31 | 2020-08-06 | Siemens Healthcare Limited | Method and system for image analysis |
JP2020140580A (ja) | 2019-02-28 | 2020-09-03 | 日本電信電話株式会社 | 検知装置及び検知プログラム |
WO2020184069A1 (ja) | 2019-03-08 | 2020-09-17 | 日本電気株式会社 | 画像処理方法、画像処理装置、プログラム |
JP2020187735A (ja) | 2019-05-13 | 2020-11-19 | 富士通株式会社 | 表面欠陥識別方法及び装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2022201451A1 (ja) | 2022-09-29 |
JPWO2022201451A1 (ja) | 2022-09-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11386549B2 (en) | Abnormality inspection device and abnormality inspection method | |
US11615520B2 (en) | Information processing apparatus, information processing method of information processing apparatus, and storage medium | |
US20200143582A1 (en) | Image processing apparatus, image processing method, and storage medium | |
JP2005122361A (ja) | 画像処理装置及び方法、コンピュータプログラム、記録媒体 | |
CN113255537A (zh) | 一种用于航行船舶识别的图像增强去噪方法 | |
CN113808054B (zh) | 用于对眼底图像的视盘区域进行修复的方法和相关产品 | |
Chen et al. | A benchmark dataset for both underwater image enhancement and underwater object detection | |
Wang et al. | Single Underwater Image Enhancement Based on $ L_ {P} $-Norm Decomposition | |
JP7436752B2 (ja) | 検知装置および検知方法 | |
Cui et al. | Progressive dual-branch network for low-light image enhancement | |
US20230024820A1 (en) | Analysis device and analysis method | |
WO2022130814A1 (ja) | 指標選択装置、情報処理装置、情報処理システム、検査装置、検査システム、指標選択方法、および指標選択プログラム | |
CN111598794A (zh) | 一种去除水下重叠情况的图像成像方法及装置 | |
CN116189037A (zh) | 一种火焰检测的识别方法、装置及终端设备 | |
WO2021124791A1 (ja) | 状態判定装置および状態判定方法 | |
US11212480B2 (en) | Brightness and contrast optimization of images in real time | |
JPH0222421B2 (ja) | ||
Chaczko et al. | A preliminary investigation on computer vision for telemedicine systems using OpenCV | |
WO2019106877A1 (ja) | 画像処理装置、画像処理方法、及びプログラム | |
Agaian et al. | A new edge detection algorithm in image processing based on LIP-ratio approach | |
Chaczko et al. | Teaching Computer Vision for telemedicine systems using OpenCV | |
WO2022259661A1 (ja) | 学習装置、学習プログラム、異常検出装置、および異常検出プログラム | |
JP7414540B2 (ja) | 確率取得装置及び確率取得方法 | |
WO2024018876A1 (ja) | 被写体検出装置、被写体検出方法及び被写体検出プログラム | |
CN117197129B (zh) | 黑化程度检测方法、装置和计算机设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230324 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231121 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231221 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240206 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240208 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7436752 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |