JP2008130865A - 部品吸着姿勢判別方法及び部品吸着姿勢判別システム - Google Patents
部品吸着姿勢判別方法及び部品吸着姿勢判別システム Download PDFInfo
- Publication number
- JP2008130865A JP2008130865A JP2006315102A JP2006315102A JP2008130865A JP 2008130865 A JP2008130865 A JP 2008130865A JP 2006315102 A JP2006315102 A JP 2006315102A JP 2006315102 A JP2006315102 A JP 2006315102A JP 2008130865 A JP2008130865 A JP 2008130865A
- Authority
- JP
- Japan
- Prior art keywords
- suction
- adsorption
- component
- abnormal
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012850 discrimination method Methods 0.000 title description 2
- 230000002159 abnormal effect Effects 0.000 claims abstract description 100
- 238000013528 artificial neural network Methods 0.000 claims abstract description 54
- 238000012545 processing Methods 0.000 claims abstract description 6
- 238000001179 sorption measurement Methods 0.000 claims description 160
- 238000000034 method Methods 0.000 claims description 27
- 230000001537 neural effect Effects 0.000 claims 1
- 230000013016 learning Effects 0.000 description 31
- 230000036544 posture Effects 0.000 description 26
- 238000002474 experimental method Methods 0.000 description 10
- 230000003287 optical effect Effects 0.000 description 8
- 238000012937 correction Methods 0.000 description 6
- 238000012360 testing method Methods 0.000 description 6
- 238000004458 analytical method Methods 0.000 description 4
- 210000002569 neuron Anatomy 0.000 description 4
- 238000013461 design Methods 0.000 description 2
- 230000000903 blocking effect Effects 0.000 description 1
- 238000005282 brightening Methods 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
Images
Landscapes
- Image Processing (AREA)
- Supply And Installment Of Electrical Components (AREA)
- Image Analysis (AREA)
Abstract
【解決手段】電子部品実装機の吸着ノズルに吸着した部品をカメラで撮像し、画像処理技術によって当該部品の吸着姿勢が正常吸着か異常吸着かを判別するシステムにおいて、予め収集した多数の正常吸着の部品画像データと異常吸着の部品画像データを教師データとしてニューラルネットワークで学習しておき、電子部品実装機の稼働中に前記カメラで撮像した部品の画像データを前記ニューラルネットワークに入力して、当該ニューラルネットワークの出力値に基づいて当該部品の吸着姿勢が正常吸着か異常吸着かを判別する。この場合、ニューラルネットワークの出力層は1つでも良いし、複数であっても良い。
【選択図】図8
Description
まず、図1に基づいて電子部品実装機全体の概略構成を説明する。
X軸スライド11は、X軸ボールねじ12によってX軸方向(図1の左右方向)にスライド移動可能に設けられ、このX軸スライド11に対して、Y軸スライド13がY軸ボールねじ14によってY軸方向(図1の紙面垂直方向)にスライド移動可能に設けられている。
図2に示すように、カメラ22で撮像した画像中の部品の位置と角度を検出して、角度補正・位置補正を施し、部品部分のみを例えば32×24[画素]のサイズで切り出した8bitグレースケール画像を部品画像データとして用いる。以下に説明する判別試験で教師データとテストデータとして使用した部品画像の一部が図3〜図6に示されている。
図4は左斜め吸着の画像例を示している。左斜め吸着は、部品の左電極側面が見えている吸着状態であり、これも異常吸着の一種である。
図5は右斜め吸着の画像例を示している。右斜め吸着は、部品の右電極側面が見えている吸着状態であり、異常吸着の一種である。
本例で使用した異常吸着の画像は、従来の外形サイズによる検出方法では異常吸着を全く検出できなかったものばかりである。
この3階層型ニューラルネットワークは、入力層のニューロン数を32×24、中間層のニューロン数を128、出力層の数を1つとしている。出力層の出力値が“1.0”に近いほど“正常吸着”を示し、“0.0”に近いほど“異常吸着”を示している。
なお、この図10の学習プログラムは、電子部品実装機の制御装置とは別のコンピュータで実行しても良い。
判別率=(3253+5874)/(3280+5891)×100[%]
=99.5[%]
誤り率=100−99.5[%]
=0.5[%]
出力層1(正常吸着)の出力値 =0.3
出力層2(左斜め吸着)の出力値=0.8
出力層3(右斜め吸着)の出力値=0.1
出力層4(横吸着)の出力値 =0.2
という出力が得られた場合、出力層2(左斜め吸着)の出力値(0.8)が最大であり、出力層2(左斜め吸着)の出力値(0.8)が出力層1(正常吸着)の出力値(0.3)よりも大きいため、“異常吸着”と判定される。
判別率=(3280+5757)/(3280+5891)×100[%]
=98.5[%]
誤り率=100−98.5[%]
=1.5[%]
その他、本発明は、図1に示すような構成の電子部品実装機に限定されず、様々な構成の電子部品実装機に適用して実施できる。
Claims (8)
- 電子部品実装機の吸着ノズルに吸着した部品をカメラで撮像し、画像処理技術によって当該部品の吸着姿勢が正常吸着か異常吸着かを判別する部品吸着姿勢判別方法において、 予め収集した多数の正常吸着の部品画像データと異常吸着の部品画像データを教師データとしてニューラルネットワークで学習しておき、電子部品実装機の稼働中に前記カメラで撮像した部品の画像データを前記ニューラルネットワークに入力して、当該ニューラルネットワークの出力値に基づいて当該部品の吸着姿勢が正常吸着か異常吸着かを判別することを特徴とする部品吸着姿勢判別方法。
- 前記ニューラルネットワークは、部品の吸着姿勢を複数のパターンに区分してそれぞれのパターンの教師データと入力データとの類似度に応じた数値を出力する複数の出力層を有するように構成し、各出力層の出力値を比較して正常吸着と異常吸着とを判別することを特徴とする請求項1に記載の部品吸着姿勢判別方法。
- 前記ニューラルネットワークは、部品の吸着姿勢を、正常吸着、右斜め吸着による異常吸着、左斜め吸着による異常吸着、横吸着による異常吸着の4つのパターンに区分して、それぞれのパターンの教師データと入力データとの類似度に応じた数値を出力する4つの出力層を有することを特徴とする請求項2に記載の部品吸着姿勢判別方法。
- 前記複数の出力層の中から出力値が最大となる出力層を選択して正常吸着と異常吸着とを判別することを特徴とする請求項2又は3に部品吸着姿勢判別方法。
- 電子部品実装機の吸着ノズルに吸着した部品を撮像するカメラと、このカメラで撮像した部品の画像データを画像処理して当該部品の吸着姿勢が正常吸着か異常吸着かを判別する吸着姿勢判別手段とを備えた部品吸着姿勢判別システムにおいて、
前記吸着姿勢判別手段は、予め収集した多数の正常吸着の部品画像データと異常吸着の部品画像データを教師データとしてニューラルネットワークで学習しておき、電子部品実装機の稼働中に前記カメラで撮像した部品の画像データを前記ニューラルネットワークに入力して、当該ニューラルネットワークの出力値に基づいて当該部品の吸着姿勢が正常吸着か異常吸着かを判別することを特徴とする部品吸着姿勢判別システム。 - 前記ニューラルネットワークは、部品の吸着姿勢を複数のパターンに区分してそれぞれのパターンの教師データと入力データとの類似度に応じた数値を出力する複数の出力層を有するように構成し、各出力層の出力値を比較して正常吸着と異常吸着とを判別することを特徴とする請求項5に記載の部品吸着姿勢判別システム。
- 前記ニューラルネットワークは、部品の吸着姿勢を、正常吸着、右斜め吸着による異常吸着、左斜め吸着による異常吸着、横吸着による異常吸着の4つのパターンに区分して、それぞれのパターンの教師データと入力データとの類似度に応じた数値を出力する4つの出力層を有することを特徴とする請求項6に記載の部品吸着姿勢判別システム。
- 前記複数の出力層の中から出力値が最大となる出力層を選択して正常吸着と異常吸着とを判別することを特徴とする請求項6又は7に記載の部品吸着姿勢判別システム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006315102A JP4514230B2 (ja) | 2006-11-22 | 2006-11-22 | 部品吸着姿勢判別方法及び部品吸着姿勢判別システム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2006315102A JP4514230B2 (ja) | 2006-11-22 | 2006-11-22 | 部品吸着姿勢判別方法及び部品吸着姿勢判別システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2008130865A true JP2008130865A (ja) | 2008-06-05 |
JP4514230B2 JP4514230B2 (ja) | 2010-07-28 |
Family
ID=39556388
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2006315102A Active JP4514230B2 (ja) | 2006-11-22 | 2006-11-22 | 部品吸着姿勢判別方法及び部品吸着姿勢判別システム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4514230B2 (ja) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017506324A (ja) * | 2013-12-12 | 2017-03-02 | エムイーエス メディカル エレクトロニック システムズ リミテッド | 家庭用検査装置 |
WO2018146825A1 (ja) * | 2017-02-13 | 2018-08-16 | オムロン株式会社 | 状態判定装置、学習装置、状態判定方法及びプログラム |
WO2018216075A1 (ja) * | 2017-05-22 | 2018-11-29 | 株式会社Fuji | 画像処理装置、多重通信システム及び画像処理方法 |
JP2019110257A (ja) * | 2017-12-20 | 2019-07-04 | ヤマハ発動機株式会社 | 部品実装システム |
WO2019155593A1 (ja) | 2018-02-09 | 2019-08-15 | 株式会社Fuji | 部品画像認識用学習済みモデル作成システム及び部品画像認識用学習済みモデル作成方法 |
JP2019169010A (ja) * | 2018-03-24 | 2019-10-03 | 株式会社ダイシン | 搬送物の判定装置及びこれを用いた搬送システム |
JP2020060398A (ja) * | 2018-10-05 | 2020-04-16 | オムロン株式会社 | 推定器生成装置、検査装置、推定器生成方法、及び推定器生成プログラム |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2024084588A1 (ja) * | 2022-10-18 | 2024-04-25 | ヤマハ発動機株式会社 | 部品実装システムおよび部品実装方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0772094A (ja) * | 1993-09-02 | 1995-03-17 | Sanyo Electric Co Ltd | ハンダ付け検査装置 |
JPH117536A (ja) * | 1997-04-25 | 1999-01-12 | Fuji Electric Co Ltd | ニューラルネットワークを用いた画像認識装置、画像認識方法、及び変換装置 |
JP2000307298A (ja) * | 1999-04-22 | 2000-11-02 | Sony Corp | 部品装着方法 |
-
2006
- 2006-11-22 JP JP2006315102A patent/JP4514230B2/ja active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0772094A (ja) * | 1993-09-02 | 1995-03-17 | Sanyo Electric Co Ltd | ハンダ付け検査装置 |
JPH117536A (ja) * | 1997-04-25 | 1999-01-12 | Fuji Electric Co Ltd | ニューラルネットワークを用いた画像認識装置、画像認識方法、及び変換装置 |
JP2000307298A (ja) * | 1999-04-22 | 2000-11-02 | Sony Corp | 部品装着方法 |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017506324A (ja) * | 2013-12-12 | 2017-03-02 | エムイーエス メディカル エレクトロニック システムズ リミテッド | 家庭用検査装置 |
WO2018146825A1 (ja) * | 2017-02-13 | 2018-08-16 | オムロン株式会社 | 状態判定装置、学習装置、状態判定方法及びプログラム |
JP2018132329A (ja) * | 2017-02-13 | 2018-08-23 | オムロン株式会社 | 状態判定装置、学習装置、状態判定方法及びプログラム |
JPWO2018216075A1 (ja) * | 2017-05-22 | 2019-12-12 | 株式会社Fuji | 画像処理装置、多重通信システム及び画像処理方法 |
WO2018216075A1 (ja) * | 2017-05-22 | 2018-11-29 | 株式会社Fuji | 画像処理装置、多重通信システム及び画像処理方法 |
JP2019110257A (ja) * | 2017-12-20 | 2019-07-04 | ヤマハ発動機株式会社 | 部品実装システム |
CN111656883A (zh) * | 2018-02-09 | 2020-09-11 | 株式会社富士 | 元件图像识别用学习完成模型生成系统及元件图像识别用学习完成模型生成方法 |
WO2019155593A1 (ja) | 2018-02-09 | 2019-08-15 | 株式会社Fuji | 部品画像認識用学習済みモデル作成システム及び部品画像認識用学習済みモデル作成方法 |
JPWO2019155593A1 (ja) * | 2018-02-09 | 2020-10-22 | 株式会社Fuji | 部品画像認識用学習済みモデル作成システム及び部品画像認識用学習済みモデル作成方法 |
CN111656883B (zh) * | 2018-02-09 | 2021-07-30 | 株式会社富士 | 元件图像识别用学习完成模型生成系统及方法 |
US11386546B2 (en) | 2018-02-09 | 2022-07-12 | Fuji Corporation | System for creating learned model for component image recognition, and method for creating learned model for component image recognition |
JP2019169010A (ja) * | 2018-03-24 | 2019-10-03 | 株式会社ダイシン | 搬送物の判定装置及びこれを用いた搬送システム |
JP2020060398A (ja) * | 2018-10-05 | 2020-04-16 | オムロン株式会社 | 推定器生成装置、検査装置、推定器生成方法、及び推定器生成プログラム |
JP7070308B2 (ja) | 2018-10-05 | 2022-05-18 | オムロン株式会社 | 推定器生成装置、検査装置、推定器生成方法、及び推定器生成プログラム |
Also Published As
Publication number | Publication date |
---|---|
JP4514230B2 (ja) | 2010-07-28 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4514230B2 (ja) | 部品吸着姿勢判別方法及び部品吸着姿勢判別システム | |
CN107734955B (zh) | 表面安装线的检查装置、品质管理系统以及记录介质 | |
US10489900B2 (en) | Inspection apparatus, inspection method, and program | |
EP3499418B1 (en) | Information processing apparatus, identification system, setting method, and program | |
CN111656883B (zh) | 元件图像识别用学习完成模型生成系统及方法 | |
JP6955211B2 (ja) | 識別装置、識別方法及びプログラム | |
CN108353534B (zh) | 引脚前端位置图像识别方法及引脚前端位置图像识别系统 | |
US20210072734A1 (en) | Information processing apparatus and method, robot controlling apparatus and method, and non-transitory computer-readable storage medium | |
US20220114725A1 (en) | Microscopy System and Method for Checking Input Data | |
KR102228957B1 (ko) | 인쇄 회로 기판 검사 장치, 스크린 프린터의 결함 유형 결정 방법 및 컴퓨터 판독 가능한 기록 매체 | |
KR20140146137A (ko) | 화상 처리 시스템, 화상 처리 방법 및 화상 처리 프로그램이 기록된 컴퓨터 판독가능한 기록 매체 | |
CN113570582A (zh) | 相机盖板清洁度检测方法及检测装置 | |
JP4870054B2 (ja) | 基板処理装置、表面実装機、印刷機、検査機、及び塗布機 | |
JP2009130034A (ja) | 吸着部品表裏判定装置及び吸着部品表裏判定方法 | |
JPH08254501A (ja) | 外観検査方法及び装置 | |
CN114174812A (zh) | 用于具有光学检验的工艺监测的方法 | |
JP2021056004A (ja) | 画像判定装置及び画像判定方法 | |
JP2000275028A (ja) | 半田付け状態の検査方法 | |
JP4683429B2 (ja) | 部品吸着姿勢判別方法及び部品吸着姿勢判別システム | |
KR20220118140A (ko) | 딥러닝 기반 사출물 품질 검사 시스템 | |
TW201326869A (zh) | 光源辨識裝置、光源辨識方法以及光學追蹤裝置 | |
JP4744234B2 (ja) | 部品の位置決め方法及び装置 | |
JP4565465B2 (ja) | 部品吸着姿勢識別方法及び部品吸着姿勢識別システム | |
JP5778685B2 (ja) | ボールグリッドアレイデバイスの位置合わせ及び検査のためのシステム及び方法 | |
JP2011205172A (ja) | 撮影画像における物体座標の対応付け方法、対応付け装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20091110 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20091215 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20100113 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100219 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100310 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100413 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20100416 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20100510 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20100510 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 4514230 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20130521 Year of fee payment: 3 |
|
FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20140521 Year of fee payment: 4 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S533 | Written request for registration of change of name |
Free format text: JAPANESE INTERMEDIATE CODE: R313533 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
S111 | Request for change of ownership or part of ownership |
Free format text: JAPANESE INTERMEDIATE CODE: R313117 |
|
R350 | Written notification of registration of transfer |
Free format text: JAPANESE INTERMEDIATE CODE: R350 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |