JPWO2017098561A1 - 基板用の画像処理装置および画像処理方法 - Google Patents
基板用の画像処理装置および画像処理方法 Download PDFInfo
- Publication number
- JPWO2017098561A1 JPWO2017098561A1 JP2017554682A JP2017554682A JPWO2017098561A1 JP WO2017098561 A1 JPWO2017098561 A1 JP WO2017098561A1 JP 2017554682 A JP2017554682 A JP 2017554682A JP 2017554682 A JP2017554682 A JP 2017554682A JP WO2017098561 A1 JPWO2017098561 A1 JP WO2017098561A1
- Authority
- JP
- Japan
- Prior art keywords
- template
- substrate
- image data
- image processing
- mark
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 239000000758 substrate Substances 0.000 title claims abstract description 133
- 238000012545 processing Methods 0.000 title claims abstract description 105
- 238000003672 processing method Methods 0.000 title claims abstract description 10
- 238000001514 detection method Methods 0.000 claims abstract description 57
- 238000000034 method Methods 0.000 claims description 81
- 238000003384 imaging method Methods 0.000 claims description 19
- 230000001105 regulatory effect Effects 0.000 claims 1
- 238000004519 manufacturing process Methods 0.000 description 18
- 238000003860 storage Methods 0.000 description 15
- 238000012546 transfer Methods 0.000 description 12
- 230000000295 complement effect Effects 0.000 description 10
- 238000005259 measurement Methods 0.000 description 6
- 229910000679 solder Inorganic materials 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000007639 printing Methods 0.000 description 3
- 238000007689 inspection Methods 0.000 description 2
- 230000015654 memory Effects 0.000 description 2
- 238000002360 preparation method Methods 0.000 description 2
- 239000000047 product Substances 0.000 description 2
- 238000007650 screen-printing Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 238000011179 visual inspection Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/74—Determining position or orientation of objects or cameras using feature-based methods involving reference images or patches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
-
- H—ELECTRICITY
- H05—ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
- H05K—PRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
- H05K13/00—Apparatus or processes specially adapted for manufacturing or adjusting assemblages of electric components
- H05K13/04—Mounting of components, e.g. of leadless components
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30141—Printed circuit board [PCB]
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Manufacturing & Machinery (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Image Analysis (AREA)
- Supply And Installment Of Electrical Components (AREA)
- Image Processing (AREA)
Abstract
Description
(生産ライン1の構成)
生産ライン1は、図1に示すように、ネットワークを介してホストコンピュータ2と通信可能に接続された複数の生産設備により構成される。この生産設備には、部品実装機10の他に、例えばスクリーン印刷機や実装検査機、リフロー炉などが含まれる。部品実装機10を含む生産設備は、ネットワークを介してホストコンピュータ2と種々のデータを入出力可能に構成されている。
生産ライン1を構成する複数台の部品実装機10は、図1に示すように、基板搬送装置11と、部品供給装置12と、部品移載装置13と、部品カメラ14と、基板カメラ15と、制御装置20とを備える。以下の説明において、部品実装機10の水平幅方向(図1の左右方向)をX軸方向とし、部品実装機10の水平奥行き方向(図1の上下方向に)をY軸方向とし、X軸およびY軸に垂直な鉛直方向(図1の前後方向)をZ軸方向とする。
制御装置20は、主として、CPUや各種メモリ、制御回路により構成される。制御装置20は、電子部品の実装処理を制御する。制御装置20は、ネットワークを介してホストコンピュータ2と通信可能に接続されている。制御装置20は、図1に示すように、実装制御部21、記憶装置22、表示装置23、入力装置24、および画像処理装置30を備える。
画像処理装置30は、部品カメラ14および基板カメラ15の撮像により得られた画像データを取得して、用途に応じた画像処理を実行する。この画像処理には、例えば、画像データの二値化、フィルタリング、色相抽出、超解像処理などが含まれ得る。画像処理装置30は、基板50の基準位置を認識する画像処理を実行する。
上記の基板用の画像処理装置30による基板50の基準位置を認識する画像処理について説明する。画像処理は、例えば部品実装機10の実装処理において、基板搬送装置11により位置決めされた基板50の基準位置を認識するために実行される。画像処理装置30は、先ず、図4に示すように、準備処理を実行する(ステップ11(以下、「ステップ」を「S」と表記する))。
補完処理(S15)のテンプレート設定処理(S20)において、テンプレート取得部33は、第二テンプレート80を新たに生成、または既存の第二テンプレート80を取得することによって、後の位置合わせ処理(S30)に使用される第二テンプレート80を設定する。
第二実施形態の画像処理装置および画像処理方法の構成は、主として、第一実施形態における補完処理(S15)が相違する。その他の共通する構成については、第一実施形態と実質的に同一であるため、詳細な説明を省略する。第二実施形態において、補完処理(S115)には、図9に示すように、第二テンプレート80の設定処理(S20)と、第二テンプレート80を用いた再検出を実行する第二検出処理(S140)と、位置合わせ処理(S30)とが含まれる。
基板用の画像処理装置30は、基板50の上面に配置された基準マーク(Fマーク55)が含まれる第一領域Mを撮像して得られた画像データ60を取得する画像取得部31と、基準マーク(Fマーク55)の形状を示す第一テンプレート70を用いて画像データ60を走査して基準マーク(Fマーク55)の位置を検出する検出部32と、検出部32の走査によって基準マーク(Fマーク55)の位置が検出されなかった場合に、第一領域Mにおいて基準マーク(Fマーク55)の外側に位置する基板50の特徴部53を示す第二テンプレート80を取得するテンプレート取得部33と、第二テンプレート80を用いて基板50の基準位置を認識する位置認識部35と、を備える。
第一、第二実施形態において、基板50の上面に配置された基準マークは、Fマーク55であるものとした。これに対して、画像処理装置30は、例えば基板50の配線パターンの一部のように、基板50の特徴部を基準マークとして採用してもよい。これは、例えば基板50の集密度を高めるためにFマーク55が省略された場合や、基板50の構成上、Fマーク55と配線パターンとの位置関係が一定でない場合などに適用される。
10:部品実装機
11:基板搬送装置
12:部品供給装置、 12a:フィーダ
13:部品移載装置
13a:ヘッド駆動装置、 13b:移動台
13c:装着ヘッド
14:部品カメラ、 15:基板カメラ
20:制御装置
21:実装制御部、 22:記憶装置、
23:表示装置(表示部)、 24:入力装置(設定受け付け部)
30:画像処理装置
31:画像取得部、 32:検出部
33:テンプレート取得部、 35:位置認識部
50:基板
51:ランド、 52:配線部、 53:特徴部
55:フィデューシャルマーク(Fマーク)
60:画像データ
60B:(基準マークの検出に成功した)画像データ(第一画像データ)
61:区画、 61R:(除去対象の)区画
70:第一テンプレート、 71:シークライン、 72:規定点
80:第二テンプレート、 81:標準線、 82:規定点
M:第一領域、 Ps:供給位置
Claims (8)
- 基板の上面に配置された基準マークが含まれる第一領域を撮像して得られた画像データを取得する画像取得部と、
前記基準マークの形状を示す第一テンプレートを用いて前記画像データを走査して前記基準マークの位置を検出する検出部と、
前記検出部の走査によって前記基準マークの位置が検出されなかった場合に、前記第一領域において前記基準マークの外側に位置する前記基板の特徴部を示す第二テンプレートを取得するテンプレート取得部と、
前記第二テンプレートを用いて前記基板の基準位置を認識する位置認識部と、
を備える基板用の画像処理装置。 - 前記画像処理装置は、
取得された前記第二テンプレートを前記画像データに重ねて表示する表示部と、
前記画像データに対する前記第二テンプレートの相対位置の設定を受け付ける設定受け付け部と、をさらに備え、
前記位置認識部は、前記設定の内容および前記第二テンプレートに規定された前記基準位置との位置関係に基づいて、前記基板の基準位置を認識する、請求項1に記載の基板用の画像処理装置。 - 前記表示部は、前記画像データに前記第二テンプレートを重ねて表示した場合に、前記基板の前記特徴部に対する前記第二テンプレートの相対位置に基づく一致度合いを併せて表示する、請求項2に記載の基板用の画像処理装置。
- 前記検出部は、取得された前記第二テンプレートを用いて前記画像データを走査して前記特徴部の位置を検出し、
前記位置認識部は、前記検出部による検出の結果および前記第二テンプレートに規定された前記基準位置との位置関係に基づいて、前記基板の前記基準位置を認識する、請求項1−3の何れか一項に記載の基板用の画像処理装置。 - 前記画像処理装置は、前記基板に複数の電子部品を実装する部品実装機に適用され、前記部品実装機による実装処理の実行中において前記基準位置を認識する認識処理を複数回に亘って行い、
テンプレート取得部は、2回目以降の前記認識処理において前記検出部の前記第一テンプレートを用いた走査によって前記基準マークの位置が検出されなかった場合に、前記基準マークの位置が検出された前回以前の前記認識処理に用いられた前記画像データである第一画像データを取得し、当該第一画像データを透明化する画像処理または前記特徴部に対応するエッジ部を抽出する画像処理を実行して前記第二テンプレートを生成する、請求項1−4の何れか一項に記載の基板用の画像処理装置。 - 前記テンプレート取得部は、前記第二テンプレートを生成する生成処理において、前記第一画像データのうち前記基準マークを含む領域を除去する画像処理を実行する、請求項5に記載の基板用の画像処理装置。
- 前記テンプレート取得部は、前記第二テンプレートを生成する生成処理において、前記第一画像データを複数の区画に区分して、前記複数の区画のうち前記電子部品を実装された区画、または画像の複雑さが予め設定された閾値を超える区画を除去する画像処理を実行する、請求項5または6に記載の基板用の画像処理装置。
- 基板の上面に配置された基準マークが含まれる第一領域を撮像して得られた画像データを取得する画像取得工程と、
前記基準マークの形状を示す第一テンプレートを用いて前記画像データを走査して前記基準マークの位置を検出する検出工程と、
前記検出工程の走査によって前記基準マークの位置が検出されなかった場合に、前記第一領域において前記基準マークの外側に位置する前記基板の特徴部を示す第二テンプレートを取得するテンプレート取得工程と、
前記第二テンプレートを用いて前記基板の基準位置を認識する位置認識工程と、
を備える基板用の画像処理方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2015/084303 WO2017098561A1 (ja) | 2015-12-07 | 2015-12-07 | 基板用の画像処理装置および画像処理方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2017098561A1 true JPWO2017098561A1 (ja) | 2018-09-27 |
JP6734868B2 JP6734868B2 (ja) | 2020-08-05 |
Family
ID=59012869
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017554682A Active JP6734868B2 (ja) | 2015-12-07 | 2015-12-07 | 基板用の画像処理装置および画像処理方法 |
Country Status (3)
Country | Link |
---|---|
EP (1) | EP3389007B1 (ja) |
JP (1) | JP6734868B2 (ja) |
WO (1) | WO2017098561A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11210764B2 (en) | 2017-06-21 | 2021-12-28 | Fuji Corporation | Apparatus for performing work on substrate |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP7090219B2 (ja) * | 2017-09-13 | 2022-06-24 | パナソニックIpマネジメント株式会社 | 位置特定方法および位置特定装置 |
CN108717697B (zh) * | 2018-05-18 | 2021-04-13 | 广州视源电子科技股份有限公司 | 电路板检测方法、装置、计算机设备和存储介质 |
US20240208047A1 (en) * | 2021-04-23 | 2024-06-27 | Nec Corporation | Control device, control method, and storage medium |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2002157582A (ja) * | 2000-11-21 | 2002-05-31 | Matsushita Electric Ind Co Ltd | 半導体ウエハ上のic傾き補正方法、及びic傾き補正装置 |
JP2005116561A (ja) * | 2003-10-02 | 2005-04-28 | Nikon Corp | テンプレート作成方法及び装置、位置検出方法及び装置、並びに露光方法及び装置 |
JP4337757B2 (ja) * | 2004-09-29 | 2009-09-30 | カシオ計算機株式会社 | 撮影装置、撮影システム、及びプログラム |
CN101996398B (zh) * | 2009-08-12 | 2012-07-04 | 睿励科学仪器(上海)有限公司 | 用于晶圆对准的图像匹配方法及设备 |
WO2017081773A1 (ja) * | 2015-11-11 | 2017-05-18 | 富士機械製造株式会社 | 基板用の画像処理装置および画像処理方法 |
-
2015
- 2015-12-07 JP JP2017554682A patent/JP6734868B2/ja active Active
- 2015-12-07 WO PCT/JP2015/084303 patent/WO2017098561A1/ja active Application Filing
- 2015-12-07 EP EP15910178.1A patent/EP3389007B1/en active Active
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11210764B2 (en) | 2017-06-21 | 2021-12-28 | Fuji Corporation | Apparatus for performing work on substrate |
Also Published As
Publication number | Publication date |
---|---|
EP3389007A4 (en) | 2018-11-14 |
EP3389007B1 (en) | 2020-06-10 |
WO2017098561A1 (ja) | 2017-06-15 |
EP3389007A1 (en) | 2018-10-17 |
JP6734868B2 (ja) | 2020-08-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5798371B2 (ja) | 基準マークモデルテンプレート作成方法 | |
JP6310058B2 (ja) | 画像処理装置および基板生産システム | |
JP6734868B2 (ja) | 基板用の画像処理装置および画像処理方法 | |
JP4629584B2 (ja) | 実装システムおよび電子部品の実装方法 | |
JP2006220426A (ja) | 実装された電子部品の検査方法及び装置 | |
JP6571116B2 (ja) | 検査支援装置 | |
JP6646916B2 (ja) | 基板用の画像処理装置および画像処理方法 | |
JP2003304100A (ja) | 部品装着管理方法、装着検査装置および装着システム | |
JP6608543B2 (ja) | 画像処理システム及び画像処理方法 | |
EP3410834B1 (en) | Electronic component mounting apparatus and production line | |
JP5988839B2 (ja) | 部品実装機 | |
US11751370B2 (en) | Correction amount calculation device, component mounting machine, and correction amount calculation method | |
US20220151120A1 (en) | Correction amount calculating device and correction amount calculating method | |
JP6904978B2 (ja) | 部品装着機 | |
EP3370493B1 (en) | Base plate position searching device and component mounting machine | |
JP5443894B2 (ja) | 電子部品実装装置及びその吸着位置補正方法 | |
JP2011014946A (ja) | 電子部品実装方法及び実装機 | |
JP7153126B2 (ja) | 良否判定装置および良否判定方法 | |
JP2017072924A (ja) | 基板用の画像処理装置 | |
CN110678060B (zh) | 图像处理装置、安装装置、图像处理方法、存储介质 | |
JP7153127B2 (ja) | 良否判定装置および良否判定方法 | |
JP7094366B2 (ja) | 検査設定装置および検査設定方法 | |
CN111373852B (zh) | 电子元件安装方向确认系统及电子元件安装方向确认方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20181128 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200123 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200318 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200707 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200710 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6734868 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |