JPWO2016143106A1 - 部品種類自動判別方法及び部品種類自動判別システム並びに画像処理用部品データ作成方法及び画像処理用部品データ作成システム - Google Patents
部品種類自動判別方法及び部品種類自動判別システム並びに画像処理用部品データ作成方法及び画像処理用部品データ作成システム Download PDFInfo
- Publication number
- JPWO2016143106A1 JPWO2016143106A1 JP2017504511A JP2017504511A JPWO2016143106A1 JP WO2016143106 A1 JPWO2016143106 A1 JP WO2016143106A1 JP 2017504511 A JP2017504511 A JP 2017504511A JP 2017504511 A JP2017504511 A JP 2017504511A JP WO2016143106 A1 JPWO2016143106 A1 JP WO2016143106A1
- Authority
- JP
- Japan
- Prior art keywords
- component
- image
- power spectrum
- feature
- lead
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims abstract description 45
- 238000000034 method Methods 0.000 title claims description 59
- 238000012850 discrimination method Methods 0.000 title claims description 10
- 238000001228 spectrum Methods 0.000 claims abstract description 56
- 230000000737 periodic effect Effects 0.000 claims abstract description 18
- 230000008569 process Effects 0.000 claims description 22
- 238000012706 support-vector machine Methods 0.000 claims description 14
- 238000000605 extraction Methods 0.000 claims description 9
- 102100028971 HLA class I histocompatibility antigen, C alpha chain Human genes 0.000 abstract 1
- 101100395312 Homo sapiens HLA-C gene Proteins 0.000 abstract 1
- 238000010586 diagram Methods 0.000 description 17
- 239000013598 vector Substances 0.000 description 6
- 239000011295 pitch Substances 0.000 description 4
- 238000006073 displacement reaction Methods 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 238000012935 Averaging Methods 0.000 description 2
- 238000005311 autocorrelation function Methods 0.000 description 2
- 238000007796 conventional method Methods 0.000 description 2
- 238000002790 cross-validation Methods 0.000 description 2
- 238000002474 experimental method Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000005452 bending Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000012467 final product Substances 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000003595 spectral effect Effects 0.000 description 1
- 238000012549 training Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/42—Global feature extraction by analysis of the whole pattern, e.g. using frequency domain transformations or autocorrelation
- G06V10/431—Frequency domain transformation; Autocorrelation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/24—Classification techniques
- G06F18/241—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches
- G06F18/2411—Classification techniques relating to the classification model, e.g. parametric or non-parametric approaches based on the proximity to a decision surface, e.g. support vector machines
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
- G06T7/001—Industrial image inspection using an image reference approach
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/764—Arrangements for image or video recognition or understanding using pattern recognition or machine learning using classification, e.g. of video objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20048—Transform domain processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30148—Semiconductor; IC; Wafer
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/06—Recognition of objects for industrial automation
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Evolutionary Computation (AREA)
- Data Mining & Analysis (AREA)
- Artificial Intelligence (AREA)
- Medical Informatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Computing Systems (AREA)
- Software Systems (AREA)
- General Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Databases & Information Systems (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Quality & Reliability (AREA)
- Image Analysis (AREA)
- Supply And Installment Of Electrical Components (AREA)
- Image Processing (AREA)
Abstract
Description
本実施例の部品種類自動判別システムは、画像処理用部品データ作成システムとしての機能も搭載され、図1に示すように、パーソナルコンピュータ等のコンピュータ11と、部品種類判別対象(画像処理用部品データの作成対象)となる部品を撮像してグレースケール画像を取得するCMOSセンサ等のイメージセンサを内蔵するカメラ12と、キーボード、マウス、タッチパネル等の入力装置13と、液晶ディスプレイ、CRT等の表示装置14と、後述する図8の部品種類自動判別プログラム、画像処理用部品データ作成プログラムや各種のデータ等を記憶する記憶装置15とを備えた構成となっている。
上述した手法で作成したリード存在候補領域画像が、実際にリードが存在する領域であるか否かを判別するため、高次元データの二値分類として定評のあるSVMを使用する。クラス間には重複する領域があることを考慮して、ソフトマージンSVMを使用し、カーネルにはRBF(Radial Basis Function )カーネルを使用する。教師データとラベルのセットを(xn ,tn )、スラック変数をξn 、Cをペナルティとすると、SVMの最適化問題は次のように表される。
Claims (10)
- カメラで撮像した部品画像を処理してその部品の種類を自動判別する部品種類自動判別方法において、
前記部品画像から高速フーリエ変換(FFT)を用いてパワースペクトル画像を作成するパワースペクトル画像作成処理と、
前記パワースペクトル画像の周期的な特徴を抽出するために前記パワースペクトル画像から高次局所自己相関(HLAC)特徴を求めるHLAC特徴抽出処理と、
前記高次局所自己相関特徴を用いてリードのあるコネクタ部品であるか否かを判別するコネクタ部品判別処理と
を含むことを特徴とする部品種類自動判別方法。 - 前記パワースペクトル画像作成処理では、前記部品画像のうちのリードが存在する候補となる領域に対して1走査ライン毎に高速フーリエ変換を適用して前記パワースペクトル画像を作成することを特徴とする請求項1に記載の部品種類自動判別方法。
- 前記コネクタ部品判別処理では、前記高次局所自己相関特徴の特徴量をサポートベクターマシン(SVM)を使用して学習してリード付きのコネクタ部品であるか否かを判別することを特徴とする請求項1又は2に記載の部品種類自動判別方法。
- 前記カメラで撮像した部品画像から当該部品の特徴データを抽出し、抽出した特徴データを、データベースに登録されている複数種類の部品のリファレンス用特徴データと比較して両者が最も一致する部品の種類を判別する部品種類判別処理を含み、
前記部品種類判別処理によって異型部品と判別された部品画像について、前記パワースペクトル画像作成処理、前記HLAC特徴抽出処理及び前記コネクタ部品判別処理を行ってリード付きのコネクタ部品を異型部品と区別して判別することを特徴とする請求項1乃至3のいずれかに記載の部品種類自動判別方法。 - カメラで撮像した部品画像を処理してその部品の種類を自動判別する部品種類自動判別システムにおいて、
前記部品画像から高速フーリエ変換(FFT)を用いてパワースペクトル画像を作成するパワースペクトル画像作成手段と、
前記パワースペクトル画像の周期的な特徴を抽出するために前記パワースペクトル画像から高次局所自己相関(HLAC)特徴を求めるHLAC特徴抽出手段と、
前記高次局所自己相関特徴を用いてリードのあるコネクタ部品であるか否かを判別するコネクタ部品判別手段と
を含むことを特徴とする部品種類自動判別システム。 - 前記パワースペクトル画像作成手段は、前記部品画像のうちのリードが存在する候補となる領域に対して1走査ライン毎に高速フーリエ変換を適用して前記パワースペクトル画像を作成することを特徴とする請求項5に記載の部品種類自動判別システム。
- 前記コネクタ部品判別手段は、前記高次局所自己相関特徴の特徴量をサポートベクターマシン(SVM)を使用して学習してリード付きのコネクタ部品であるか否かを判別することを特徴とする請求項5又は6に記載の部品種類自動判別システム。
- 前記カメラで撮像した部品画像から当該部品の特徴データを抽出し、抽出した特徴データを、データベースに登録されている複数種類の部品のリファレンス用特徴データと比較して両者が最も一致する部品の種類を判別する部品種類判別手段を含み、
前記パワースペクトル画像作成手段、前記HLAC特徴抽出手段及び前記コネクタ部品判別手段は、前記部品種類判別手段によって異型部品と判別された部品画像について、前記パワースペクトル画像を作成して前記高次局所自己相関特徴を求め、リード付きのコネクタ部品を異型部品と区別して判別することを特徴とする請求項5乃至7のいずれかに記載の部品種類自動判別システム。 - 部品実装機で実装する部品を画像認識する際に使用する画像処理用部品データを作成する画像処理用部品データ作成方法において、
請求項1乃至4のいずれかに記載の部品種類自動判別方法で判別した部品の種類に応じて前記部品画像から当該部品の特徴データを抽出して画像処理用部品データを作成することを特徴とする画像処理用部品データ作成方法。 - 部品実装機で実装する部品を画像認識する際に使用する画像処理用部品データを作成する画像処理用部品データ作成システムにおいて、
請求項5乃至8のいずれかに記載の部品種類自動判別システムで判別した部品の種類に応じて前記部品画像から当該部品の特徴データを抽出して画像処理用部品データを作成する部品データ作成手段を備えていることを特徴とする画像処理用部品データ作成システム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2015/057220 WO2016143106A1 (ja) | 2015-03-11 | 2015-03-11 | 部品種類自動判別方法及び部品種類自動判別システム並びに画像処理用部品データ作成方法及び画像処理用部品データ作成システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2016143106A1 true JPWO2016143106A1 (ja) | 2017-12-21 |
JP6504682B2 JP6504682B2 (ja) | 2019-04-24 |
Family
ID=56878614
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017504511A Active JP6504682B2 (ja) | 2015-03-11 | 2015-03-11 | 部品種類自動判別方法及び部品種類自動判別システム並びに画像処理用部品データ作成方法及び画像処理用部品データ作成システム |
Country Status (5)
Country | Link |
---|---|
US (1) | US10559076B2 (ja) |
EP (1) | EP3270351B1 (ja) |
JP (1) | JP6504682B2 (ja) |
CN (1) | CN107533748B (ja) |
WO (1) | WO2016143106A1 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6818252B2 (ja) * | 2017-03-14 | 2021-01-20 | オムロン株式会社 | データベース装置、学習結果管理方法、及びそのプログラム |
CN109166261B (zh) * | 2018-10-11 | 2022-06-07 | 平安科技(深圳)有限公司 | 基于图像识别的图像处理方法、装置、设备及存储介质 |
JP7092889B2 (ja) * | 2018-10-31 | 2022-06-28 | Jx金属株式会社 | 電子・電気機器部品屑の組成解析装置、電子・電気機器部品屑の処理装置及び電子・電気機器部品屑の処理方法 |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06242013A (ja) * | 1993-02-16 | 1994-09-02 | Matsushita Electric Ind Co Ltd | 欠陥検査装置 |
Family Cites Families (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6813377B1 (en) * | 1999-08-06 | 2004-11-02 | Cognex Corporation | Methods and apparatuses for generating a model of an object from an image of the object |
US6647132B1 (en) * | 1999-08-06 | 2003-11-11 | Cognex Technology And Investment Corporation | Methods and apparatuses for identifying regions of similar texture in an image |
JP3966189B2 (ja) * | 2003-02-27 | 2007-08-29 | オムロン株式会社 | 基板検査方法およびこの方法を用いた基板検査装置 |
EP1967988B1 (en) * | 2004-07-22 | 2010-04-07 | NEC Corporation | Image processing system |
WO2006020779A2 (en) * | 2004-08-10 | 2006-02-23 | Dow Global Technologies Inc. | Targeting chelants and chelates |
JP4674853B2 (ja) | 2005-06-03 | 2011-04-20 | 富士機械製造株式会社 | 画像処理用部品データ作成方法及び画像処理用部品データ作成装置 |
US7664324B2 (en) * | 2005-11-30 | 2010-02-16 | Iscon Video Imaging, Inc. | Methods and systems for detecting concealed objects |
JP4165580B2 (ja) * | 2006-06-29 | 2008-10-15 | トヨタ自動車株式会社 | 画像処理装置及び画像処理プログラム |
JP2009188720A (ja) * | 2008-02-06 | 2009-08-20 | Panasonic Corp | 固体撮像装置およびその製造方法 |
JP2010246883A (ja) * | 2009-03-27 | 2010-11-04 | Mitsubishi Electric Corp | 患者位置決めシステム |
CN103942544B (zh) * | 2009-12-22 | 2017-11-28 | 松下电器产业株式会社 | 动作解析装置 |
EP2537141B1 (en) * | 2010-06-10 | 2016-03-30 | Sartorius Stedim Biotech GmbH | Assembling method, operating method, augmented reality system and computer program product |
KR101515184B1 (ko) * | 2010-06-11 | 2015-04-24 | 가부시키가이샤 리코 | 정보 저장 장치, 탈착 장치, 현상제 용기 및 화상 형성 장치 |
JP6235886B2 (ja) * | 2013-01-08 | 2017-11-22 | キヤノン株式会社 | 生体組織画像の再構成方法及び装置並びに該生体組織画像を用いた画像表示装置 |
CN106415192B (zh) * | 2014-06-06 | 2019-05-03 | 株式会社富士 | 引线图像识别方法及识别装置以及图像处理用元件数据生成方法及生成装置 |
JP6962673B2 (ja) * | 2016-09-12 | 2021-11-05 | 株式会社ジャパンディスプレイ | 樹脂基板 |
-
2015
- 2015-03-11 CN CN201580077487.6A patent/CN107533748B/zh active Active
- 2015-03-11 WO PCT/JP2015/057220 patent/WO2016143106A1/ja active Application Filing
- 2015-03-11 EP EP15884596.6A patent/EP3270351B1/en active Active
- 2015-03-11 JP JP2017504511A patent/JP6504682B2/ja active Active
- 2015-03-11 US US15/556,056 patent/US10559076B2/en active Active
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06242013A (ja) * | 1993-02-16 | 1994-09-02 | Matsushita Electric Ind Co Ltd | 欠陥検査装置 |
Non-Patent Citations (2)
Title |
---|
亀田 和宏: "ウェーブレット解析を用いた部品の自動仕分けに関する研究", 日本ロジスティクスシステム学会 第7回全国大会予稿集 オンデマンドロジスティクス・SCMの展望 PROC, JPN6019009971, 22 November 2004 (2004-11-22), JP, pages 1 - 5 * |
鬼頭 秀一郎: "電子部品のリード形状データの自動生成", SSII2014 第20回画像センシングシンポジウム 講演論文集 [CD−ROM] THE 20TH SYMPOSI, JPN6019009970, 11 June 2014 (2014-06-11), JP, pages p.IS1-27-1−p.IS1-27-6 * |
Also Published As
Publication number | Publication date |
---|---|
US20180047145A1 (en) | 2018-02-15 |
US10559076B2 (en) | 2020-02-11 |
EP3270351A4 (en) | 2018-12-12 |
EP3270351A1 (en) | 2018-01-17 |
CN107533748A (zh) | 2018-01-02 |
WO2016143106A1 (ja) | 2016-09-15 |
JP6504682B2 (ja) | 2019-04-24 |
EP3270351B1 (en) | 2023-03-01 |
CN107533748B (zh) | 2020-08-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106778586B (zh) | 离线手写签名鉴别方法及系统 | |
US8792715B2 (en) | System and method for forms classification by line-art alignment | |
JP6061713B2 (ja) | 検査装置、検査方法及びプログラム | |
JP4232800B2 (ja) | ラインノイズ除去装置、ラインノイズ除去方法、ラインノイズ除去プログラム | |
JP2013167596A (ja) | 欠陥検査装置、欠陥検査方法及びプログラム | |
US20080013803A1 (en) | Method and apparatus for determining print image quality | |
JP6352695B2 (ja) | 文字検出装置、方法およびプログラム | |
TW201616395A (zh) | 指紋辨識方法 | |
US20070201733A1 (en) | Fingerprint collation apparatus, fingerprint pattern area extracting apparatus and quality judging apparatus, and method and program of the same | |
CN106033535A (zh) | 电子阅卷方法 | |
CN111814852B (zh) | 图像检测方法、装置、电子设备和计算机可读存储介质 | |
CN107239792A (zh) | 一种基于二进制描述子的工件识别方法及装置 | |
US20130243251A1 (en) | Image processing device and image processing method | |
CN111507344A (zh) | 从图像中识别出文字的方法和装置 | |
US9672439B2 (en) | Object detection apparatus object detection method and storage medium | |
Hagi et al. | Defect classification of electronic circuit board using SVM based on random sampling | |
JP6504682B2 (ja) | 部品種類自動判別方法及び部品種類自動判別システム並びに画像処理用部品データ作成方法及び画像処理用部品データ作成システム | |
CN113435219B (zh) | 防伪检测方法、装置、电子设备及存储介质 | |
CA2999099C (en) | Method and system for extracting information from hand-marked industrial inspection sheets | |
JP2007018176A (ja) | 学習装置、学習方法、学習プログラム、記録媒体、パターン認識装置およびパターン認識方法 | |
KR101473991B1 (ko) | 얼굴 검출 방법 및 그 장치 | |
CN101075295B (zh) | 被动式及交互式实时影像辨识方法 | |
JP2009259190A (ja) | 文字認識プログラムおよび文字認識装置 | |
Iwahori et al. | Discrimination of true defect and indefinite defect with visual inspection using SVM | |
KAMIL et al. | An Improved Iris Segmentation using Pupil Candidate Bank for Non-Cooperative Iris Recognition |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20180105 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190320 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190322 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6504682 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |