JP2021026276A - 撮像検出データの転送システム - Google Patents
撮像検出データの転送システム Download PDFInfo
- Publication number
- JP2021026276A JP2021026276A JP2019140981A JP2019140981A JP2021026276A JP 2021026276 A JP2021026276 A JP 2021026276A JP 2019140981 A JP2019140981 A JP 2019140981A JP 2019140981 A JP2019140981 A JP 2019140981A JP 2021026276 A JP2021026276 A JP 2021026276A
- Authority
- JP
- Japan
- Prior art keywords
- detection system
- image capturing
- image
- imaging detection
- vision system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 115
- 238000011144 upstream manufacturing Methods 0.000 claims abstract description 7
- 230000005540 biological transmission Effects 0.000 claims abstract description 5
- 238000003384 imaging method Methods 0.000 claims description 55
- 238000005286 illumination Methods 0.000 claims description 7
- 238000000034 method Methods 0.000 description 8
- 230000000694 effects Effects 0.000 description 5
- 239000012536 storage buffer Substances 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000006870 function Effects 0.000 description 4
- 238000011143 downstream manufacturing Methods 0.000 description 3
- 230000007547 defect Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/01—Arrangements or apparatus for facilitating the optical investigation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/0007—Image acquisition
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/84—Systems specially adapted for particular applications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0004—Industrial image inspection
- G06T7/0008—Industrial image inspection checking presence/absence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/74—Image or video pattern matching; Proximity measures in feature spaces
- G06V10/75—Organisation of the matching processes, e.g. simultaneous or sequential comparisons of image or video features; Coarse-fine approaches, e.g. multi-scale approaches; using context analysis; Selection of dictionaries
- G06V10/751—Comparing pixel values or logical combinations thereof, or feature values having positional relevance, e.g. template matching
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/01—Arrangements or apparatus for facilitating the optical investigation
- G01N2021/0106—General arrangement of respective parts
- G01N2021/0112—Apparatus in one mechanical, optical or electronic block
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/06—Recognition of objects for industrial automation
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Medical Informatics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Evolutionary Computation (AREA)
- Computing Systems (AREA)
- Artificial Intelligence (AREA)
- Software Systems (AREA)
- Pathology (AREA)
- Databases & Information Systems (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- Immunology (AREA)
- Quality & Reliability (AREA)
- Manipulator (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
Abstract
Description
以下、本発明の第1実施形態について図1〜図3を参照しながら説明する。
図1は、本発明の第1実施形態に係るビジョンデータの転送システムの概略図である。転送システム1は、第1ビジョンシステム(以降では、「第1撮像検出システム」とも呼称する)10と、ロボット13と、第2ビジョンシステム20と、操作端末23とを備える。更に、第1ビジョンシステム10は、検出用カメラ11と制御部12を備え、第2ビジョンシステム(以降では、「第2撮像検出システム」とも呼称する)20は、検出用カメラ21と制御部22とを備える。
この場合、ワーク52A及びワーク52Bに、関連付けのための用いるタグやQRコード(登録商標)を貼付する必要は発生しない。
図2は、転送システム1の機能ブロック図である。
転送システム1は、第1ビジョンシステム10、産業機械13、第2ビジョンシステム20、及び操作端末23を備える。
撮像部11は、第1ビジョンシステム10において検出対象となるワーク52Bを撮像する。なお、撮像部11は、図1における検出用カメラ11に対応する。
撮像部21は、第2ビジョンシステム20において検出対象となるワーク52Aを撮像する。なお、撮像部21は、図1における検出用カメラ21に対応する。
図3は、転送システム1の動作を示すフローチャートである。
ステップS11において、操作端末23から第2ビジョンシステム20に対し、ワーク52Aの検出指示を出力する。
本実施形態に係る転送システム1により、事前にワークの検出の可否を確認できる。また、ワークの未検出や誤検出等、検出不具合の発生に際しては、その場でビジョンプログラム、パラメータ、又は照明の設定等を調整することで、正常に検出可能な設定を調整することができる。
以下、本発明の第2実施形態について図4を参照しながら説明する。
第1実施形態は、下流工程においてワークを検出するよりも上流工程において予めワークを検出し、未検出・誤検出の場合にはビジョンシステムデータを調整・変更した上で、上流工程から下流工程にビジョンシステムデータを送信し、下流工程において上流工程から受信したビジョンシステムを用いてワークを検出することにより、ビジョン正常検出の可能性を向上させるものであった。
本実施形態に係る転送システム1Aにより、トレーに汚れが付着している場合であっても、事前にトレーのみの画像を取得しておくことにより、正常に検出可能な設定を調整することができる。
上記の第1実施形態及び第2実施形態においては、第1ビジョンシステム10の受信部121と、第2ビジョンシステム20の送信部224とが別体であったが、これには限定されない。例えば、受信部121と送信部224とが同一の筐体内に格納されてもよい。
更に、上記のように転送システム1又は1Aがストレージバッファを備える場合には、受信部121、送信部224に加え、ストレージバッファも同一の筐体内に格納されてもよい。
10 第1ビジョンシステム
11,21 撮像部(検出用カメラ)
12,22 制御部
13 産業機械(ロボット)
20 第2ビジョンシステム
23 操作端末
121 受信部
122,221 検出部
123 出力部
222 変更部
223 関連付け部
224 送信部
Claims (5)
- 撮像した第1画像を用いて対象物を検出する第1撮像検出システムと、
前記第1撮像検出システムによる検出情報を用いた動作をする産業機械と、
前記第1撮像検出システムの上流に設置され、撮像した第2画像を用いて対象物を検出する第2撮像検出システムと、
前記第2撮像検出システムに対して検出指示を出力すると共に、前記第2撮像検出システムで用いられる撮像検出システムデータを変更する操作端末とを備え、
前記第1撮像検出システムは、前記第2撮像検出システムから前記撮像検出システムデータを受信する受信部を備え、
前記第2撮像検出システムは、前記第1撮像検出システムに前記撮像検出システムデータを送信する送信部を備える、撮像検出データの転送システム。 - 前記撮像検出システムデータは、前記対象物に係るデータと関連付けられた状態で、前記送信部から前記受信部に送受信される、請求項1に記載の転送システム。
- 前記操作端末は、前記第2撮像検出システムでの検出が正しく行われなかった場合に、前記第2撮像検出システムでの検出が正しく行われるように、前記撮像検出システムデータを変更するインタフェースを備える、請求項1又は請求項2に記載の転送システム。
- 前記撮像検出システムデータは、前記第1画像、前記第2画像、撮像検出プログラム、撮像検出パラメータ、前記第1撮像検出システム及び前記第2撮像検出システムで用いられる照明の照度、及び前記照明の色のうち、少なくとも1つを有する、請求項1から請求項3のいずれか1項に記載の転送システム。
- 前記第2画像が、前記対象物がセットされていないトレーの画像であり、前記第1撮像検出システムは、前記第1画像から前記第2画像を差し引いた画像を用いて前記対象物を検出する、請求項1から請求項4のいずれか1項に記載の転送システム。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019140981A JP7269126B2 (ja) | 2019-07-31 | 2019-07-31 | 撮像検出データの転送システム |
US16/909,143 US11367174B2 (en) | 2019-07-31 | 2020-06-23 | Transfer system for transferring imaging and detection data |
DE102020003780.1A DE102020003780A1 (de) | 2019-07-31 | 2020-06-24 | Übertragungssystem zur übertragung von bild- und erfassungsdaten |
CN202010738769.9A CN112504961A (zh) | 2019-07-31 | 2020-07-28 | 摄像检测数据的传输系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019140981A JP7269126B2 (ja) | 2019-07-31 | 2019-07-31 | 撮像検出データの転送システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021026276A true JP2021026276A (ja) | 2021-02-22 |
JP7269126B2 JP7269126B2 (ja) | 2023-05-08 |
Family
ID=74174951
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019140981A Active JP7269126B2 (ja) | 2019-07-31 | 2019-07-31 | 撮像検出データの転送システム |
Country Status (4)
Country | Link |
---|---|
US (1) | US11367174B2 (ja) |
JP (1) | JP7269126B2 (ja) |
CN (1) | CN112504961A (ja) |
DE (1) | DE102020003780A1 (ja) |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0554127A (ja) * | 1991-08-22 | 1993-03-05 | Omron Corp | 視覚認識装置 |
JP2006058284A (ja) * | 2004-07-21 | 2006-03-02 | Omron Corp | 基板検査用ウィンドウの設定条件の決定方法、基板検査方法、基板検査用の検査データ作成方法、および基板検査装置 |
JP2011013720A (ja) * | 2009-06-30 | 2011-01-20 | Jfe Steel Corp | カテゴリ判定ルールの作成方法、装置およびコンピュータプログラム |
JP2012123416A (ja) * | 2012-03-12 | 2012-06-28 | Canon Inc | 対象物の処理方法 |
JP2013000860A (ja) * | 2011-06-20 | 2013-01-07 | Yaskawa Electric Corp | ピッキングシステム |
WO2014087946A1 (ja) * | 2012-12-03 | 2014-06-12 | 株式会社日立情報制御ソリューションズ | 製品画像検査装置および製品画像検査方法 |
WO2017191363A1 (en) * | 2016-05-06 | 2017-11-09 | Procemex Oy | A machine vision method and system for monitoring manufacturing processes |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6494313B2 (ja) | 2015-02-09 | 2019-04-03 | キヤノン株式会社 | 画像処理方法、装置システム、プログラム、記憶媒体 |
JP2019049780A (ja) * | 2017-09-07 | 2019-03-28 | 富士通株式会社 | 教師データ作成プログラム、教師データ作成装置、及び教師データ作成方法 |
TWI744610B (zh) * | 2018-03-01 | 2021-11-01 | 宏達國際電子股份有限公司 | 場景重建系統、方法以及非暫態電腦可讀取媒體 |
-
2019
- 2019-07-31 JP JP2019140981A patent/JP7269126B2/ja active Active
-
2020
- 2020-06-23 US US16/909,143 patent/US11367174B2/en active Active
- 2020-06-24 DE DE102020003780.1A patent/DE102020003780A1/de active Pending
- 2020-07-28 CN CN202010738769.9A patent/CN112504961A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0554127A (ja) * | 1991-08-22 | 1993-03-05 | Omron Corp | 視覚認識装置 |
JP2006058284A (ja) * | 2004-07-21 | 2006-03-02 | Omron Corp | 基板検査用ウィンドウの設定条件の決定方法、基板検査方法、基板検査用の検査データ作成方法、および基板検査装置 |
JP2011013720A (ja) * | 2009-06-30 | 2011-01-20 | Jfe Steel Corp | カテゴリ判定ルールの作成方法、装置およびコンピュータプログラム |
JP2013000860A (ja) * | 2011-06-20 | 2013-01-07 | Yaskawa Electric Corp | ピッキングシステム |
JP2012123416A (ja) * | 2012-03-12 | 2012-06-28 | Canon Inc | 対象物の処理方法 |
WO2014087946A1 (ja) * | 2012-12-03 | 2014-06-12 | 株式会社日立情報制御ソリューションズ | 製品画像検査装置および製品画像検査方法 |
WO2017191363A1 (en) * | 2016-05-06 | 2017-11-09 | Procemex Oy | A machine vision method and system for monitoring manufacturing processes |
Non-Patent Citations (1)
Title |
---|
YIZHE ZHANG, 外5名: ""Gilbreth: A Conveyor-Belt Based Pick-and-Sort Industrial Robotics Application"", 2018 SECOND IEEE INTERNATIONAL CONFERENCE ON ROBOTIC COMPUTING (IRC), JPN6023010928, 2 February 2018 (2018-02-02), pages 17 - 24, ISSN: 0005016463 * |
Also Published As
Publication number | Publication date |
---|---|
US20210035283A1 (en) | 2021-02-04 |
US11367174B2 (en) | 2022-06-21 |
CN112504961A (zh) | 2021-03-16 |
JP7269126B2 (ja) | 2023-05-08 |
DE102020003780A1 (de) | 2021-02-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US8615111B2 (en) | Method and apparatus for image detection with undesired object removal | |
US7852374B2 (en) | Image-pickup and associated methodology of dividing an exposure-time period into a plurality of exposures | |
JP4411037B2 (ja) | レンズ装置および撮影システム | |
JP4806717B2 (ja) | 画像処理システム | |
US8760678B2 (en) | Image displaying apparatus, image displaying method, and image displaying program for detecting and displaying multifeed | |
US11084091B2 (en) | System and method for detecting 3D printing errors | |
US20140198229A1 (en) | Image pickup apparatus, remote control apparatus, and methods of controlling image pickup apparatus and remote control apparatus | |
JP5972423B2 (ja) | 光条件の変化に基づいて、ピクセル密度の要件を変更する必要性を決定する方法及び装置 | |
TW201209532A (en) | Interaction control system, method for detecting motion of object, host apparatus and control method thereof | |
US10911671B2 (en) | Automatic processing of automatic image capture parameter adjustment | |
EP3273662B1 (en) | Data acquisition device, and data sharing method and system thereof | |
US20110032228A1 (en) | Luminance Adjustment Systems and Methods for Display Units | |
JP2015099022A (ja) | 作業確認システム | |
US20120157159A1 (en) | Communication apparatus using image sensor and error correction method | |
JP2021026276A (ja) | 撮像検出データの転送システム | |
JP6337361B2 (ja) | 制御システムおよびセンサユニット | |
US10140080B2 (en) | Projector and control method | |
US20150312466A1 (en) | Imaging apparatus, imaging system, imaging method, and computer program product saving program | |
JP2006270768A (ja) | 画像読取装置 | |
JP2018152799A (ja) | 画像処理装置、画像処理方法、プログラムおよび映像送受信システム | |
GB2605081A (en) | System and method of selective auxiliary data capture | |
JP4586548B2 (ja) | 物体検出装置および物体検出方法 | |
KR102453859B1 (ko) | 전파 방해 탐지 및 알람 제공 방법 및 이를 위한 장치 | |
US20210006705A1 (en) | Recording control apparatus, recording control method, and program | |
JP2017123561A (ja) | 画像処理装置、画像処理装置の画像処理方法、画像処理装置の制御方法、及びプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220408 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230313 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230322 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230421 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7269126 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |