JPWO2019229920A1 - 認識パラメータ最適化装置、部品実装システム、認識パラメータ最適化方法 - Google Patents
認識パラメータ最適化装置、部品実装システム、認識パラメータ最適化方法 Download PDFInfo
- Publication number
- JPWO2019229920A1 JPWO2019229920A1 JP2020522494A JP2020522494A JPWO2019229920A1 JP WO2019229920 A1 JPWO2019229920 A1 JP WO2019229920A1 JP 2020522494 A JP2020522494 A JP 2020522494A JP 2020522494 A JP2020522494 A JP 2020522494A JP WO2019229920 A1 JPWO2019229920 A1 JP WO2019229920A1
- Authority
- JP
- Japan
- Prior art keywords
- component
- image data
- recognition
- brightness
- mounting machine
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims description 39
- 238000005457 optimization Methods 0.000 title claims description 28
- 238000003860 storage Methods 0.000 claims abstract description 49
- 238000003384 imaging method Methods 0.000 claims abstract description 47
- 238000004364 calculation method Methods 0.000 claims description 57
- 238000004891 communication Methods 0.000 claims description 54
- 238000005286 illumination Methods 0.000 claims description 53
- 238000012545 processing Methods 0.000 claims description 23
- 230000001678 irradiating effect Effects 0.000 claims description 9
- 239000000758 substrate Substances 0.000 abstract description 10
- 238000004519 manufacturing process Methods 0.000 description 22
- 238000002360 preparation method Methods 0.000 description 20
- 238000010586 diagram Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 230000002950 deficient Effects 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000011410 subtraction method Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 239000003990 capacitor Substances 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000011144 upstream manufacturing Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05K—PRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
- H05K13/00—Apparatus or processes specially adapted for manufacturing or adjusting assemblages of electric components
- H05K13/08—Monitoring manufacture of assemblages
- H05K13/081—Integration of optical monitoring devices in assembly lines; Processes using optical monitoring devices specially adapted for controlling devices or machines in assembly lines
- H05K13/0818—Setup of monitoring devices prior to starting mounting operations; Teaching of monitoring devices for specific products; Compensation of drifts during operation, e.g. due to temperature shifts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/90—Dynamic range modification of images or parts thereof
- G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05K—PRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
- H05K13/00—Apparatus or processes specially adapted for manufacturing or adjusting assemblages of electric components
- H05K13/08—Monitoring manufacture of assemblages
- H05K13/081—Integration of optical monitoring devices in assembly lines; Processes using optical monitoring devices specially adapted for controlling devices or machines in assembly lines
- H05K13/0812—Integration of optical monitoring devices in assembly lines; Processes using optical monitoring devices specially adapted for controlling devices or machines in assembly lines the monitoring devices being integrated in the mounting machine, e.g. for monitoring components, leads, component placement
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10024—Color image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/07—Target detection
Landscapes
- Engineering & Computer Science (AREA)
- Operations Research (AREA)
- Manufacturing & Machinery (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Supply And Installment Of Electrical Components (AREA)
- Multimedia (AREA)
Abstract
Description
10…部品実装機
51…光照射部(照明)
55…撮像部(カメラ)
9…サーバコンピュータ(認識パラメータ最適化装置)
91…演算部
92…記憶部
93…通信部
B…基板
P…部品
Dp…画像データ
Dpr…参照画像データ
Dpc…調整画像データ
S102…部品認識
Claims (12)
- 照明から部品に光を照射しつつカメラによって部品を撮像することで取得した画像データが示す輝度に対して閾値を用いた画像処理を実行した結果に基づき前記部品を認識する部品認識を実行し、前記部品認識の結果に基づき前記部品を基板に実装する部品実装機で取得された前記画像データを受信する通信部と、
前記通信部が受信した前記画像データを記憶する記憶部と、
前記部品認識で使用する前記照明の光の明るさと前記閾値との組合せを示す輝度関連条件を、前記記憶部に記憶された前記画像データに基づき最適化して前記記憶部に記憶する演算部と
を備える認識パラメータ最適化装置。 - 前記記憶部は、前記画像データの属性と関連付けて前記画像データを記憶し、
前記属性は、前記画像データに含まれる前記部品の種類によって少なくとも区別され、
前記演算部は、同一の属性に対応する前記種類の前記部品に対して前記部品認識を実行する際の前記輝度関連条件を、前記同一の属性を有する複数の画像データに基づき最適化する請求項1に記載の認識パラメータ最適化装置。 - 前記属性は、前記部品認識の対象となった前記部品の製造元、前記部品認識で用いられた前記カメラおよび前記部品認識を実行した前記部品実装機の少なくとも1つと前記部品の種類との組合せによって区別される請求項2に記載の認識パラメータ最適化装置。
- 前記通信部が、前記部品認識で取得予定の前記画像データの前記属性を受信すると、前記演算部は、前記通信部により受信された前記属性の前記画像データに基づき最適化された前記輝度関連条件を、前記通信部を介して前記部品実装機に送信する請求項2または3に記載の認識パラメータ最適化装置。
- 前記部品実装機が前記部品認識の開始前に前記部品を撮像することで取得した前記画像データを、前記通信部が受信すると、前記演算部は、前記通信部により受信された前記画像データと所定関係を有する前記画像データに基づき最適化された前記輝度関連条件を、前記通信部を介して前記部品実装機に送信する請求項1ないし4のいずれか一項に記載の認識パラメータ最適化装置。
- 前記演算部は、前記通信部により受信された前記画像データと類似する前記画像データに基づき最適化された前記輝度関連条件を、前記通信部を介して前記部品実装機に送信する請求項5に記載の認識パラメータ最適化装置。
- 前記通信部は、前記部品実装機が前記照明から所定明るさの光を照射するという所定照明条件下で前記部品を撮像することで、前記部品認識の開始前に取得した前記画像データを受信する請求項5に記載の認識パラメータ最適化装置。
- 前記記憶部は、前記輝度関連条件で取得した前記画像データを前記所定照明条件で取得した場合に相当する前記画像データを、参照画像データとして前記輝度関連条件に関連付けて記憶し、
前記演算部は、前記通信部により受信された前記画像データと類似する前記参照画像データに関連付けられた前記輝度関連条件を、前記通信部を介して前記部品実装機に送信する請求項7に記載の認識パラメータ最適化装置。 - 前記記憶部は、前記輝度関連条件の最適化に用いた前記画像データと前記輝度関連条件とを関連付けて記憶し、
前記演算部は、前記通信部により受信された前記画像データと、前記輝度関連条件と関連付けられた前記画像データとを照合した結果、所定の照合条件を満たす前記画像データに関連付けられた前記輝度関連条件を、前記通信部を介して前記部品実装機に送信し、
前記照合条件は、前記通信部により受信された前記画像データの輝度を、前記所定照明条件と照合対象の前記画像データに関連付けられた前記輝度関連条件との違いに応じて調整することで作成した調整画像データと、照合対象の前記画像データとが類似するという条件である請求項7に記載の認識パラメータ最適化装置。 - 前記部品認識では、前記輝度関連条件の前記閾値を用いて前記画像データから抽出した前記部品と、前記部品の構成に関する部品関連条件との比較に基づき、前記部品を認識し、
前記演算部は、最適化された前記輝度関連条件の前記閾値を用いて前記画像データから抽出した前記部品の構成に基づき前記部品関連条件を最適化して、前記記憶部に記憶する請求項1ないし9のいずれか一項に記載の認識パラメータ最適化装置。 - 照明から部品に光を照射しつつカメラによって部品を撮像することで取得した画像データが示す輝度に対して閾値を用いた画像処理を実行した結果に基づき前記部品を認識する部品認識を実行し、前記部品認識の結果に基づき前記部品を基板に実装する部品実装機と、
請求項1ないし10のいずれか一項印記載の認識パラメータ最適化装置と
を備える部品実装システム。 - 照明から部品に光を照射しつつカメラによって部品を撮像することで取得した画像データが示す輝度に対して閾値を用いた画像処理を実行した結果に基づき前記部品を認識する部品認識を実行し、前記部品認識の結果に基づき前記部品を基板に実装する部品実装機で取得された前記画像データを通信部により受信する工程と、
前記通信部が受信した前記画像データを記憶部に記憶する工程と、
前記部品認識で使用する前記照明の光の明るさと前記閾値との組合せを示す輝度関連条件を、前記記憶部に記憶された前記画像データに基づき最適化して前記記憶部に記憶する工程とを備える認識パラメータ最適化方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2018/020913 WO2019229920A1 (ja) | 2018-05-31 | 2018-05-31 | 認識パラメータ最適化装置、部品実装システム、認識パラメータ最適化方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2019229920A1 true JPWO2019229920A1 (ja) | 2021-02-12 |
JP7021347B2 JP7021347B2 (ja) | 2022-02-16 |
Family
ID=68698328
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020522494A Active JP7021347B2 (ja) | 2018-05-31 | 2018-05-31 | 認識パラメータ最適化装置、部品実装システム、認識パラメータ最適化方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11386638B2 (ja) |
JP (1) | JP7021347B2 (ja) |
CN (1) | CN112005624B (ja) |
DE (1) | DE112018007668T5 (ja) |
WO (1) | WO2019229920A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR102554675B1 (ko) | 2018-11-13 | 2023-07-13 | 삼성전자주식회사 | 전자 장치 및 전자 장치에서 디스플레이 정보에 기반한 조도 센싱 방법 |
WO2023218606A1 (ja) * | 2022-05-12 | 2023-11-16 | 株式会社Fuji | 部品実装システム |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1056299A (ja) * | 1997-06-20 | 1998-02-24 | Yamaha Motor Co Ltd | 実装機の部品認識装置 |
JP2002366613A (ja) * | 2001-06-06 | 2002-12-20 | Matsushita Electric Ind Co Ltd | 生産情報システム |
JP2003042970A (ja) * | 2001-07-31 | 2003-02-13 | Matsushita Electric Ind Co Ltd | 実装基板の外観検査装置および外観検査方法 |
JP2006049380A (ja) * | 2004-07-30 | 2006-02-16 | Matsushita Electric Ind Co Ltd | 電子部品の画像生成方法 |
JP2014027064A (ja) * | 2012-07-25 | 2014-02-06 | Juki Corp | 情報管理システムおよび情報提供方法 |
JP2016018940A (ja) * | 2014-07-10 | 2016-02-01 | ヤマハ発動機株式会社 | 部品認識データ提供方法、部品認識データ提供装置および部品認識データ提供システム |
JP2018063973A (ja) * | 2016-10-11 | 2018-04-19 | ヤマハ発動機株式会社 | 部品実装機、部品認識方法 |
Family Cites Families (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1168400A (ja) * | 1997-08-11 | 1999-03-09 | Yamaha Motor Co Ltd | 表面実装機の部品認識装置 |
WO2001035049A1 (fr) * | 1999-11-08 | 2001-05-17 | Matsushita Electric Industrial Co., Ltd. | Procede et appareil de reconnaissance de composants |
JP4215937B2 (ja) | 2000-08-07 | 2009-01-28 | パナソニック株式会社 | 電子部品実装データ設定方法及び装置 |
JP4147923B2 (ja) * | 2002-12-03 | 2008-09-10 | 松下電器産業株式会社 | 電子部品実装装置および電子部品実装方法 |
KR100557526B1 (ko) * | 2003-05-19 | 2006-03-03 | 삼성전기주식회사 | Rgb 컬러를 이용한 인쇄회로기판의 표면 상태 분석시스템 및 방법 |
WO2007001062A1 (en) * | 2005-06-27 | 2007-01-04 | Matsushita Electric Industrial Co., Ltd. | Mounting condition determination method |
JP2008205226A (ja) * | 2007-02-21 | 2008-09-04 | Matsushita Electric Ind Co Ltd | 電子部品実装用装置における撮像用の照明装置 |
JP4922890B2 (ja) * | 2007-10-03 | 2012-04-25 | 富士機械製造株式会社 | 電子部品実装方法 |
JP5047031B2 (ja) * | 2008-03-28 | 2012-10-10 | 富士機械製造株式会社 | 電子部品装着装置における部品認識方法 |
JP5517638B2 (ja) * | 2009-01-29 | 2014-06-11 | パナソニック株式会社 | 実装部品検査方法、およびその方法を実施する実装部品検査装置、およびその実装部品検査装置を備えた部品実装機 |
CN101877959B (zh) * | 2009-04-29 | 2012-10-10 | 三星Techwin株式会社 | 电子部件识别装置及具有其的贴片机 |
JP5780712B2 (ja) * | 2009-05-29 | 2015-09-16 | 富士機械製造株式会社 | 撮像システムおよび電子回路部品装着機 |
JP5926881B2 (ja) | 2010-03-30 | 2016-05-25 | 富士機械製造株式会社 | 画像処理用部品データ作成方法及び画像処理用部品データ作成装置 |
JP5441266B2 (ja) * | 2010-06-24 | 2014-03-12 | 合同会社IP Bridge1号 | 部品実装システムおよび画像認識用データ作成装置ならびに画像認識用データ作成方法 |
JP5338773B2 (ja) * | 2010-08-26 | 2013-11-13 | パナソニック株式会社 | 部品実装用装置および撮像用の照明装置ならびに照明方法 |
GB201020516D0 (en) * | 2010-12-03 | 2011-01-19 | Univ Sheffield | Improvements in providing image data |
EP2975921B1 (en) * | 2013-03-12 | 2019-12-18 | FUJI Corporation | Component recognition system for component mounting machine |
JP6424456B2 (ja) * | 2013-07-17 | 2018-11-21 | セイコーエプソン株式会社 | 発光装置、発光装置の製造方法、受発光装置、電子機器 |
JP6271953B2 (ja) * | 2013-11-05 | 2018-01-31 | キヤノン株式会社 | 画像処理装置、画像処理方法 |
JP6745117B2 (ja) * | 2016-02-24 | 2020-08-26 | Juki株式会社 | 検査装置、実装装置、検査方法及びプログラム |
CN107205335A (zh) * | 2016-03-17 | 2017-09-26 | 深圳市堃琦鑫华股份有限公司 | 一种自动化插件方法 |
CN106385792A (zh) * | 2016-08-25 | 2017-02-08 | 深圳市宝瑞达科技有限公司 | 一种高速智能自动插件机 |
CN106447673A (zh) * | 2016-09-30 | 2017-02-22 | 哈尔滨工业大学 | 一种非均匀光照条件下的芯片引脚提取方法 |
JP6802035B2 (ja) * | 2016-10-24 | 2020-12-16 | 株式会社日立製作所 | 画像処理装置、警告装置、画像処理システム、画像処理方法 |
-
2018
- 2018-05-31 DE DE112018007668.7T patent/DE112018007668T5/de active Pending
- 2018-05-31 JP JP2020522494A patent/JP7021347B2/ja active Active
- 2018-05-31 CN CN201880092585.0A patent/CN112005624B/zh active Active
- 2018-05-31 WO PCT/JP2018/020913 patent/WO2019229920A1/ja active Application Filing
- 2018-05-31 US US17/049,918 patent/US11386638B2/en active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1056299A (ja) * | 1997-06-20 | 1998-02-24 | Yamaha Motor Co Ltd | 実装機の部品認識装置 |
JP2002366613A (ja) * | 2001-06-06 | 2002-12-20 | Matsushita Electric Ind Co Ltd | 生産情報システム |
JP2003042970A (ja) * | 2001-07-31 | 2003-02-13 | Matsushita Electric Ind Co Ltd | 実装基板の外観検査装置および外観検査方法 |
JP2006049380A (ja) * | 2004-07-30 | 2006-02-16 | Matsushita Electric Ind Co Ltd | 電子部品の画像生成方法 |
JP2014027064A (ja) * | 2012-07-25 | 2014-02-06 | Juki Corp | 情報管理システムおよび情報提供方法 |
JP2016018940A (ja) * | 2014-07-10 | 2016-02-01 | ヤマハ発動機株式会社 | 部品認識データ提供方法、部品認識データ提供装置および部品認識データ提供システム |
JP2018063973A (ja) * | 2016-10-11 | 2018-04-19 | ヤマハ発動機株式会社 | 部品実装機、部品認識方法 |
Also Published As
Publication number | Publication date |
---|---|
DE112018007668T5 (de) | 2021-04-08 |
WO2019229920A1 (ja) | 2019-12-05 |
CN112005624A (zh) | 2020-11-27 |
US20210241017A1 (en) | 2021-08-05 |
US11386638B2 (en) | 2022-07-12 |
JP7021347B2 (ja) | 2022-02-16 |
CN112005624B (zh) | 2022-04-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111656504B (zh) | 裸片拾取方法及装置 | |
JP7021347B2 (ja) | 認識パラメータ最適化装置、部品実装システム、認識パラメータ最適化方法 | |
CN107926154B (zh) | 元件安装装置 | |
JP6411663B2 (ja) | 部品実装装置 | |
KR20060015513A (ko) | 전자부품 실장장치 및 전자부품 실장방법 | |
JP6648252B2 (ja) | 画像処理システム及び画像処理方法 | |
JP2006261205A (ja) | 干渉検知方法および同装置 | |
JP2011082506A (ja) | 部品検査装置及び部品実装装置 | |
CN109983859B (zh) | 表面安装机、元件识别装置、元件识别方法 | |
JP6765756B2 (ja) | 部品実装機、部品認識方法 | |
JPWO2018216075A1 (ja) | 画像処理装置、多重通信システム及び画像処理方法 | |
JP2009212373A (ja) | 部品装着装置 | |
JP2013236011A (ja) | 部品実装装置 | |
JP4704218B2 (ja) | 部品認識方法、同装置および表面実装機 | |
CN110892799A (zh) | 对基板作业系统 | |
JP6920548B2 (ja) | 部品認識装置、部品実装機および部品認識方法 | |
JP2009170524A (ja) | 部品の実装方法および表面実装機 | |
JP2020017554A (ja) | 実装データ管理装置、部品実装システム、実装データ管理方法 | |
JP4351083B2 (ja) | 表面実装機 | |
JPWO2020183516A1 (ja) | 実装データ作成支援装置、実装データ作成支援方法、外観検査機、部品実装システム | |
JP7153127B2 (ja) | 良否判定装置および良否判定方法 | |
JP2005216933A (ja) | 部品認識方法、同装置および表面実装機 | |
JP2007103436A (ja) | 部品実装方法及び部品実装機 | |
JP2019075475A (ja) | 部品実装装置 | |
JP7153126B2 (ja) | 良否判定装置および良否判定方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200819 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210706 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210728 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211102 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211217 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220201 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220203 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7021347 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |