JP2019012016A - 位置制御システム、位置検出装置、および制御プログラム - Google Patents
位置制御システム、位置検出装置、および制御プログラム Download PDFInfo
- Publication number
- JP2019012016A JP2019012016A JP2017128749A JP2017128749A JP2019012016A JP 2019012016 A JP2019012016 A JP 2019012016A JP 2017128749 A JP2017128749 A JP 2017128749A JP 2017128749 A JP2017128749 A JP 2017128749A JP 2019012016 A JP2019012016 A JP 2019012016A
- Authority
- JP
- Japan
- Prior art keywords
- detection
- image data
- detection process
- detected
- position detection
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 claims abstract description 451
- 238000000034 method Methods 0.000 claims description 281
- 230000008569 process Effects 0.000 claims description 265
- 238000004519 manufacturing process Methods 0.000 claims description 25
- 230000007246 mechanism Effects 0.000 claims description 11
- 238000003860 storage Methods 0.000 claims description 10
- 238000012545 processing Methods 0.000 abstract description 183
- 238000005516 engineering process Methods 0.000 abstract description 3
- 230000006866 deterioration Effects 0.000 abstract 1
- 238000003384 imaging method Methods 0.000 abstract 1
- 230000033001 locomotion Effects 0.000 description 26
- 238000005259 measurement Methods 0.000 description 26
- 230000002159 abnormal effect Effects 0.000 description 18
- 238000011156 evaluation Methods 0.000 description 15
- 230000015654 memory Effects 0.000 description 15
- 238000004891 communication Methods 0.000 description 13
- 238000003708 edge detection Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 9
- 238000010586 diagram Methods 0.000 description 8
- 239000000872 buffer Substances 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 5
- 238000010801 machine learning Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 239000000284 extract Substances 0.000 description 3
- 238000007639 printing Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000003936 working memory Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
- G05B19/4189—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM] characterised by the transport system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/0014—Image feed-back for automatic industrial control, e.g. robot with camera
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B23—MACHINE TOOLS; METAL-WORKING NOT OTHERWISE PROVIDED FOR
- B23Q—DETAILS, COMPONENTS, OR ACCESSORIES FOR MACHINE TOOLS, e.g. ARRANGEMENTS FOR COPYING OR CONTROLLING; MACHINE TOOLS IN GENERAL CHARACTERISED BY THE CONSTRUCTION OF PARTICULAR DETAILS OR COMPONENTS; COMBINATIONS OR ASSOCIATIONS OF METAL-WORKING MACHINES, NOT DIRECTED TO A PARTICULAR RESULT
- B23Q3/00—Devices holding, supporting, or positioning work or tools, of a kind normally removable from the machine
- B23Q3/18—Devices holding, supporting, or positioning work or tools, of a kind normally removable from the machine for positioning only
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30108—Industrial image inspection
- G06T2207/30164—Workpiece; Machine component
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Robotics (AREA)
- Mechanical Engineering (AREA)
- Quality & Reliability (AREA)
- Automation & Control Theory (AREA)
- Manufacturing & Machinery (AREA)
- General Engineering & Computer Science (AREA)
- Image Analysis (AREA)
- Length Measuring Devices By Optical Means (AREA)
- Image Processing (AREA)
Abstract
Description
図1は、本実施の形態に係る位置制御システム1が適用される生産ラインの一例を説明するための図である。
図2は、本実施の形態に係る位置制御システム1の全体構成を示す図である。図2に示すように、位置制御システム1は、位置検出装置100と、モーションコントローラ200と、ステージ300とを備える。
図3は、本実施の形態に係る位置検出装置100のハードウェア構成を示す図である。図3に示すように、位置検出装置100は、典型的には、汎用的なコンピュータアーキテクチャに従う構造を有しており、予めインストールされたプログラムをプロセッサが実行することで、後述するような各種の処理を実現する。
図4は、本実施の形態に係るモーションコントローラ200のハードウェア構成を示す図である。図4に示すように、モーションコントローラ200は、主制御ユニット210と、複数のサーボユニット240,242,244とを含む。本実施の形態に係る位置制御システム1では、ステージ300が3軸分のサーボモータ310,312,314を有する例を示し、この軸数に応じた数のサーボユニット240,242,244がモーションコントローラ200に含まれる。
図5および図6は、本実施の形態に係る位置検出装置100において処理フローを設定するときの画面表示例を示す図である。図5および図6には、画像処理の一例として、サーチ検出処理のアルゴリズムを処理フローとして設定する場合の例を示す。なお、位置検出装置100のプロセッサ110および図示しないグラフィックボードなどが協働することで、図5および図6に示すような画面を表示させる。このような画面表示は、OS(Operating System)の一部として組み込まれるGUI(Graphical User Interface)プログラムによって実現され、またGUIは、ユーザがキーボード134またはマウス138により操作される画面上のカーソルや矢印アイコンを用いて、さまざまなユーザ設定を行うための環境も提供する。
図7は、本実施の形態に係る位置検出装置100が実行するアライメント処理を示すフローチャートである。なお、以下では、各ステップを単に「S」と略す。
図8は、本実施の形態に係る位置検出装置100において位置検出に失敗したときの画面表示例を示す図である。図8に示すように、第2検出処理で位置検出に失敗した場合(図7のS18でNOの場合)、表示部132に座標設定画面400Cが表示される。以下、座標設定画面400Cについて説明する。
図9は、本実施の形態に係る位置検出装置100が実行する処理フロー決定処理を示すフローチャートである。なお、以下では、各ステップを単に「S」と略す。
図10は、本実施の形態に係る位置検出装置100が実行する処理フロー決定処理の概略を説明するための図である。
図11は、本実施の形態に係る位置検出装置100における処理フローの評価結果を説明するための図である。
図12〜図15は、本実施の形態に係る位置検出装置100における第1検出処理と第2検出処理とのロバスト性の違いを説明するための一例を示す図である。
本実施の形態に係る位置制御システム1においては、図7に示すように、位置検出装置100は、第2検出処理によってワークの位置を検出したか否かに関わらず(S18の結果に関わらず)、ワークを生産ラインから外部へ搬送するようにワークの位置を制御するための指令をモーションコントローラ200に出力するものであった(S22)。しかし、位置検出装置100は、図16に示すような処理を実行してもよい。
本実施の形態に係る位置制御システム1および位置検出装置100によれば、ワークの位置が検出されなかった場合であっても、ユーザが目視で確認して位置座標を手入力する頻度を減らせることができるため、生産性が低下することを極力防止することができる。
Claims (10)
- 移動機構によって移動する対象物の位置を制御する位置制御システムであって、
前記移動機構を制御する制御手段と、
前記対象物を撮影して得られる画像データを取得する取得手段と、
第1検出処理に従って前記画像データに基づき前記対象物の位置を検出する第1検出手段と、
前記第1検出手段によって前記対象物の位置が検出された場合に、前記対象物の位置を制御するための第1制御指令を前記制御手段に出力する第1出力手段と、
前記第1検出手段によって前記対象物の位置が検出されなかった場合に、前記第1検出処理よりもロバスト性が高い第2検出処理に従って前記画像データに基づき前記対象物の位置を検出する第2検出手段と、
前記第2検出手段による検出結果に基づき前記対象物の位置を制御するための第2制御指令を前記制御手段に出力する第2出力手段とを備える、位置制御システム。 - 移動機構によって移動する対象物の位置を検出する位置検出装置であって、
前記対象物を撮影して得られる画像データを取得する取得手段と、
第1検出処理によって前記画像データに基づき前記対象物の位置を検出する第1検出手段と、
前記第1検出手段によって前記対象物の位置が検出された場合に、前記対象物の位置を制御するための第1制御指令を出力する第1出力手段と、
前記第1検出手段によって前記対象物の位置が検出されなかった場合に、前記第1検出処理よりもロバスト性が高い第2検出処理によって前記画像データに基づき前記対象物の位置を検出する第2検出手段と、
前記第2検出手段による検出結果に基づき前記対象物の位置を制御するための第2制御指令を出力する第2出力手段とを備える、位置検出装置。 - 前記第2検出処理が従うアルゴリズムは、前記第1検出処理が従うアルゴリズムと異なる、請求項2に記載の位置検出装置。
- 前記第2検出処理が従うパラメータの設定値は、前記第1検出処理が従うパラメータの設定値と異なる、請求項2または請求項3に記載の位置検出装置。
- 前記第2検出処理による前記対象物の位置検出の回数は、前記第1検出処理による前記対象物の位置検出の回数よりも多い、請求項2〜請求項4のいずれか1項に記載の位置検出装置。
- 前記第2検出手段によって前記対象物の位置が検出されなかった場合に、前記対象物の位置を特定可能な位置データを受け付ける受付手段をさらに備える、請求項2〜請求項5のいずれか1項に記載の位置検出装置。
- 前記画像データとともに前記画像データに対応付けて前記位置データを記憶する記憶手段と、
前記記憶手段に記憶された前記画像データおよび前記位置データに基づき、前記第2検出処理が従うアルゴリズムおよびパラメータの設定値のうちの少なくとも一方を更新する更新手段とをさらに備える、請求項6に記載の位置検出装置。 - 前記第2制御指令は、前記対象物を生産ラインから外部へ搬送するように前記対象物の位置を制御するための指令であり、
前記第2出力手段は、前記第2検出手段によって前記対象物の位置が検出されたか否かに関わらず、前記第2制御指令を出力する、請求項2〜請求項7のいずれか1項に記載の位置検出装置。 - 前記第1制御指令は、前記対象物を生産ライン上の次工程に搬送するように前記対象物の位置を制御するための指令であり、
前記第2制御指令は、前記対象物を生産ラインから外部へ搬送するように前記対象物の位置を制御するための指令であり、
前記第2出力手段は、
前記第2検出手段によって前記対象物の位置が検出された場合に前記第1制御指令を出力し、
前記第2検出手段によって前記対象物の位置が検出されなかった場合に前記第2制御指令を出力する、請求項2〜請求項7のいずれか1項に記載の位置検出装置。 - コンピュータにより実行されることで移動機構によって移動する対象物の位置を検出する位置検出装置を実現する制御プログラムであって、前記コンピュータに、
前記対象物を撮影して得られる画像データを取得する取得ステップと、
第1検出処理によって前記画像データに基づき前記対象物の位置を検出する第1検出ステップと、
前記第1検出ステップによって前記対象物の位置が検出された場合に、前記対象物の位置を制御するための第1制御指令を出力する第1出力ステップと、
前記第1検出ステップによって前記対象物の位置が検出されなかった場合に、前記第1検出処理よりもロバスト性が高い第2検出処理によって前記画像データに基づき前記対象物の位置を検出する第2検出ステップと、
前記第2検出ステップによる検出結果に基づき前記対象物の位置を制御するための第2制御指令を出力する第2出力ステップとを実行させる、制御プログラム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017128749A JP7167418B2 (ja) | 2017-06-30 | 2017-06-30 | 位置制御システム、位置検出装置、および制御プログラム |
DE102018102833.4A DE102018102833A1 (de) | 2017-06-30 | 2018-02-08 | Positionskontrollsystem, positionserkennungsvorrichtung und steuerprogramm |
US15/892,360 US10664939B2 (en) | 2017-06-30 | 2018-02-08 | Position control system, position detection device, and non-transitory recording medium |
CN201810141083.4A CN109213090B (zh) | 2017-06-30 | 2018-02-11 | 位置控制系统、位置检测装置及记录介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017128749A JP7167418B2 (ja) | 2017-06-30 | 2017-06-30 | 位置制御システム、位置検出装置、および制御プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2019012016A true JP2019012016A (ja) | 2019-01-24 |
JP7167418B2 JP7167418B2 (ja) | 2022-11-09 |
Family
ID=64662193
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017128749A Active JP7167418B2 (ja) | 2017-06-30 | 2017-06-30 | 位置制御システム、位置検出装置、および制御プログラム |
Country Status (4)
Country | Link |
---|---|
US (1) | US10664939B2 (ja) |
JP (1) | JP7167418B2 (ja) |
CN (1) | CN109213090B (ja) |
DE (1) | DE102018102833A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6333871B2 (ja) * | 2016-02-25 | 2018-05-30 | ファナック株式会社 | 入力画像から検出した対象物を表示する画像処理装置 |
US11745354B2 (en) | 2018-08-16 | 2023-09-05 | Mitutoyo Corporation | Supplementary metrology position coordinates determination system including an alignment sensor for use with a robot |
US11002529B2 (en) | 2018-08-16 | 2021-05-11 | Mitutoyo Corporation | Robot system with supplementary metrology position determination system |
US10871366B2 (en) * | 2018-08-16 | 2020-12-22 | Mitutoyo Corporation | Supplementary metrology position coordinates determination system for use with a robot |
US10913156B2 (en) | 2018-09-24 | 2021-02-09 | Mitutoyo Corporation | Robot system with end tool metrology position coordinates determination system |
CN115570422A (zh) * | 2022-10-21 | 2023-01-06 | 华南理工大学 | 面向多层磁介质电容原料的切割定位方法和装置 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000037884A1 (fr) * | 1998-12-22 | 2000-06-29 | Mitsubishi Denki Kabushiki Kaisha | Procede et appareil permettant de mesurer des erreurs de positionnement au moyen d'un repere, et appareil d'usinage susceptible de corriger des erreurs en fonction de resultats de mesure |
JP2002140694A (ja) * | 2000-10-31 | 2002-05-17 | Keyence Corp | 画像処理装置、画像処理方法および画像処理プログラムを記録した記録媒体 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001344592A (ja) * | 2000-05-31 | 2001-12-14 | Toyo Jidoki Co Ltd | キャップ取付け状態検査方法 |
US7636449B2 (en) * | 2004-11-12 | 2009-12-22 | Cognex Technology And Investment Corporation | System and method for assigning analysis parameters to vision detector using a graphical interface |
JP2006214816A (ja) * | 2005-02-02 | 2006-08-17 | Nikon Corp | 半導体検査装置 |
US8609441B2 (en) * | 2006-12-12 | 2013-12-17 | Asml Netherlands B.V. | Substrate comprising a mark |
JP6167622B2 (ja) | 2013-04-08 | 2017-07-26 | オムロン株式会社 | 制御システムおよび制御方法 |
-
2017
- 2017-06-30 JP JP2017128749A patent/JP7167418B2/ja active Active
-
2018
- 2018-02-08 US US15/892,360 patent/US10664939B2/en active Active
- 2018-02-08 DE DE102018102833.4A patent/DE102018102833A1/de active Pending
- 2018-02-11 CN CN201810141083.4A patent/CN109213090B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2000037884A1 (fr) * | 1998-12-22 | 2000-06-29 | Mitsubishi Denki Kabushiki Kaisha | Procede et appareil permettant de mesurer des erreurs de positionnement au moyen d'un repere, et appareil d'usinage susceptible de corriger des erreurs en fonction de resultats de mesure |
JP2002140694A (ja) * | 2000-10-31 | 2002-05-17 | Keyence Corp | 画像処理装置、画像処理方法および画像処理プログラムを記録した記録媒体 |
Also Published As
Publication number | Publication date |
---|---|
DE102018102833A1 (de) | 2019-01-03 |
US10664939B2 (en) | 2020-05-26 |
JP7167418B2 (ja) | 2022-11-09 |
CN109213090A (zh) | 2019-01-15 |
CN109213090B (zh) | 2021-01-29 |
US20190005600A1 (en) | 2019-01-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7167418B2 (ja) | 位置制御システム、位置検出装置、および制御プログラム | |
WO2012053521A1 (ja) | 光学情報処理装置、光学情報処理方法、光学情報処理システム、光学情報処理プログラム | |
JP5620200B2 (ja) | 点群位置データ処理装置、点群位置データ処理方法、点群位置データ処理システム、および点群位置データ処理プログラム | |
US8831330B2 (en) | Parameter determination assisting device and parameter determination assisting program | |
US10430650B2 (en) | Image processing system | |
CA2507174A1 (en) | Method of registering and aligning multiple images | |
EP2387000B1 (en) | Image measuring apparatus, program, and teaching method of image measuring apparatus | |
JP2001319219A (ja) | 画像測定装置用パートプログラム生成装置及び方法、並びに画像測定装置及びその測定結果表示方法 | |
TW201510878A (zh) | 計測裝置 | |
US20220067907A1 (en) | Image processing method and image processing apparatus | |
JP3963975B2 (ja) | 実装位置データ作成方法および実装検査方法 | |
KR102344227B1 (ko) | 동체 검출 장치, 동체 검출 방법, 동체 검출 프로그램 | |
JPS62285004A (ja) | 対象パタ−ンの回転角検出方式 | |
JP2010133744A (ja) | 欠陥検出方法およびその方法を用いた視覚検査装置 | |
US11989928B2 (en) | Image processing system | |
CN111199533B (zh) | 图像处理装置 | |
JP6572117B2 (ja) | 顕微鏡、画像貼り合わせ方法、プログラム | |
JP3545558B2 (ja) | ウェハの測定位置決定方法 | |
JP7094806B2 (ja) | 画像処理装置およびその制御方法、撮像装置、プログラム | |
CN113379692A (zh) | 校准om和sem坐标关系的方法和装置、设备和存储介质 | |
US5471536A (en) | Figure digitizing system | |
JP4530723B2 (ja) | パターンマッチング方法、パターンマッチング装置、および電子部品実装方法 | |
JP2984267B1 (ja) | 対象物の画像処理方法 | |
US11836218B2 (en) | System and method for object detection and dimensioning | |
US12019958B2 (en) | Method and apparatus for automated test plan generation to measure a measurement object |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180221 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180307 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200303 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20201209 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210202 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210322 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210928 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20211118 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20220420 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220705 |
|
C60 | Trial request (containing other claim documents, opposition documents) |
Free format text: JAPANESE INTERMEDIATE CODE: C60 Effective date: 20220705 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20220713 |
|
C21 | Notice of transfer of a case for reconsideration by examiners before appeal proceedings |
Free format text: JAPANESE INTERMEDIATE CODE: C21 Effective date: 20220719 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220927 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221010 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7167418 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |