JP7087058B2 - 複数の候補を用いた画像ベースの管頭部円検出 - Google Patents
複数の候補を用いた画像ベースの管頭部円検出 Download PDFInfo
- Publication number
- JP7087058B2 JP7087058B2 JP2020500875A JP2020500875A JP7087058B2 JP 7087058 B2 JP7087058 B2 JP 7087058B2 JP 2020500875 A JP2020500875 A JP 2020500875A JP 2020500875 A JP2020500875 A JP 2020500875A JP 7087058 B2 JP7087058 B2 JP 7087058B2
- Authority
- JP
- Japan
- Prior art keywords
- tube
- image
- candidates
- tray
- processor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000001514 detection method Methods 0.000 title claims description 27
- 238000000034 method Methods 0.000 claims description 46
- 230000000007 visual effect Effects 0.000 claims description 15
- 238000000338 in vitro Methods 0.000 claims description 5
- 239000003086 colorant Substances 0.000 claims description 4
- 239000000284 extract Substances 0.000 claims description 4
- 239000011159 matrix material Substances 0.000 claims description 2
- 230000001186 cumulative effect Effects 0.000 claims 2
- 239000000523 sample Substances 0.000 description 38
- 230000008569 process Effects 0.000 description 19
- 238000012545 processing Methods 0.000 description 9
- 230000004044 response Effects 0.000 description 9
- 238000004422 calculation algorithm Methods 0.000 description 8
- 238000004891 communication Methods 0.000 description 8
- 230000006870 function Effects 0.000 description 8
- 239000013610 patient sample Substances 0.000 description 6
- 238000012360 testing method Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 238000004458 analytical method Methods 0.000 description 4
- 238000010191 image analysis Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000003556 assay Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 238000007689 inspection Methods 0.000 description 3
- 230000007246 mechanism Effects 0.000 description 3
- 230000001413 cellular effect Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 238000003745 diagnosis Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 239000013589 supplement Substances 0.000 description 2
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 241000699670 Mus sp. Species 0.000 description 1
- 206010000269 abscess Diseases 0.000 description 1
- 238000012801 analytical assay Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 210000001124 body fluid Anatomy 0.000 description 1
- 239000010839 body fluid Substances 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000001143 conditioned effect Effects 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 239000010949 copper Substances 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 238000003708 edge detection Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 239000012530 fluid Substances 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000007788 liquid Substances 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000009131 signaling function Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000001131 transforming effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N21/25—Colour; Spectral properties, i.e. comparison of effect of material on the light at two or more different wavelengths or wavelength bands
- G01N21/251—Colorimeters; Construction thereof
- G01N21/253—Colorimeters; Construction thereof for batch operation, i.e. multisample apparatus
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N35/00—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor
- G01N35/00584—Control arrangements for automatic analysers
- G01N35/00722—Communications; Identification
- G01N35/00732—Identification of carriers, materials or components in automatic analysers
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N35/00—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor
- G01N35/02—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor using a plurality of sample containers moved by a conveyor system past one or more treatment or analysis stations
- G01N35/04—Details of the conveyor system
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N35/00—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor
- G01N35/02—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor using a plurality of sample containers moved by a conveyor system past one or more treatment or analysis stations
- G01N35/04—Details of the conveyor system
- G01N2035/0401—Sample carriers, cuvettes or reaction vessels
- G01N2035/0418—Plate elements with several rows of samples
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N35/00—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor
- G01N35/02—Automatic analysis not limited to methods or materials provided for in any single one of groups G01N1/00 - G01N33/00; Handling materials therefor using a plurality of sample containers moved by a conveyor system past one or more treatment or analysis stations
- G01N35/04—Details of the conveyor system
- G01N2035/0496—Other details
- G01N2035/0498—Drawers used as storage or dispensing means for vessels or cuvettes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V2201/00—Indexing scheme relating to image or video recognition or understanding
- G06V2201/06—Recognition of objects for industrial automation
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Immunology (AREA)
- Biochemistry (AREA)
- Pathology (AREA)
- Health & Medical Sciences (AREA)
- Life Sciences & Earth Sciences (AREA)
- Chemical & Material Sciences (AREA)
- Analytical Chemistry (AREA)
- General Health & Medical Sciences (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Image Processing (AREA)
- Automatic Analysis And Handling Materials Therefor (AREA)
- Image Analysis (AREA)
Description
本願は、2017年7月11日出願の米国仮出願62/531,108に基づく優先権を主張するものであり、その全内容が本明細書に援用される。
Claims (14)
- 試料管をそれぞれ受容するように構成された管スロットを多数含むトレイについて、画像ベースの管頭部円検出を使用する方法であって、
前記トレイの前記管スロットの列ごとに、複数のカメラにより複数の視点から画像を取得し、
当該画像を受信したプロセッサにより、前記管スロットの1つの列にある試料管の1つに関し、該対象の試料管が位置する前記管スロットの前記列に対し取得された前記複数視点からの画像のそれぞれにおいて複数の候補を抽出し、
前記プロセッサにより、前記複数視点の1つの視点の前記複数の候補と前記複数視点の別の視点の前記複数の候補との可能な組み合わせの全てについて一貫性スコアを計算し、
前記プロセッサにより、前記計算した一貫性スコアを累積し、
前記プロセッサにより、前記累積した一貫性スコアで最も高くなったスコアに基づいて前記候補を選抜し、前記対象の試料管の正当な管頭部円を前記画像において選択する、ことを含む方法。 - 前記一貫性スコアを計算するときに、
前記プロセッサにより、前記複数の候補の可能な組み合わせを判定し、
前記プロセッサにより、前記複数の候補のそれぞれの特徴に基づく属性を前記可能な組み合わせごとに計算し、
前記プロセッサにより、前記計算した属性に基づいて前記一貫性スコアを計算する、ことを含む、請求項1に記載の方法。 - 前記計算した属性をルックアップテーブルに保存することをさらに含む、請求項2に記載の方法。
- 前記属性として、円直径、円中心位置、円の高さ、及び円中心オフセットの1つ以上を含む、請求項2又は3に記載の方法。
- 前記属性として、複数の画像パッチにわたる形状、色、及びテクスチャの1つ以上を含む、請求項2又は3に記載の方法。
- 前記トレイは、開位置と閉位置との間を移動可能なドロワの部分内に収まるように構成されており、該ドロワを前記開位置と前記閉位置との間で移動させるときに、前記トレイの画像が複数のカメラを備えた画像取得システムにより取得される、請求項1~5のいずれか1項に記載の方法。
- 前記対象の試料管について前記正当な管頭部円を分析し、管カテゴリ及び管特徴を判定することをさらに含む、請求項1~6のいずれか1項に記載の方法。
- 体外診断環境において使用する視覚システムであって、
多数の管スロットが行と列のマトリックスに配列され、該各管スロットに試料管を受容するように構成されているトレイと、
該トレイを受けるように構成された載置面と、
前記トレイの画像を、前記管スロットの列ごとに複数の視点から取得するように構成された複数のカメラと、
プロセッサとを含み、
前記プロセッサは、
前記管スロットの1つの列にある試料管の1つに関し、該対象の試料管が位置する前記管スロットの前記列に対し取得された前記複数視点からの画像のそれぞれにおいて複数の候補を抽出し、
前記複数視点の1つの視点の前記複数の候補と前記複数視点の別の視点の前記複数の候補との可能な組み合わせの全てについて一貫性スコアを計算し、
前記計算した一貫性スコアを累積し、
前記累積した一貫性スコアで最も高くなったスコアに基づいて前記候補を選抜し、前記対象の試料管の正当な管頭部円を前記画像において選択するように、構成される、視覚システム。 - 前記プロセッサが前記一貫性スコアを計算するときに、
前記複数の候補の可能な組み合わせを判定し、
前記複数の候補のそれぞれの特徴に基づく属性を前記可能な組み合わせごとに計算し、
前記計算した属性に基づいて前記一貫性スコアを計算する、ことを含む、請求項8に記載の視覚システム。 - 前記プロセッサは、前記計算した属性をルックアップテーブルに保存するように、さらに構成されている、請求項9に記載の視覚システム。
- 前記属性として、円直径、円中心位置、円の高さ、及び円中心オフセットの1つ以上を含む、請求項9又は10に記載の視覚システム。
- 前記属性として、複数の画像パッチにわたる形状、色、及びテクスチャの1つ以上を含む、請求項9又は10に記載の視覚システム。
- 前記載置面は、開位置と閉位置との間を移動可能なドロワの部分で構成され、該ドロワを前記開位置と前記閉位置との間で移動させるときに、前記トレイの画像が前記複数のカメラにより取得される、請求項8~12のいずれか1項に記載の視覚システム。
- 前記プロセッサは、前記対象の試料管について前記正当な管頭部円を分析し、管カテゴリ及び管特徴を判定するように、さらに構成されている、請求項8~13のいずれか1項に記載の視覚システム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201762531108P | 2017-07-11 | 2017-07-11 | |
US62/531,108 | 2017-07-11 | ||
PCT/US2018/039283 WO2019013961A1 (en) | 2017-07-11 | 2018-06-25 | DETECTION OF TUBE TOP CIRCLES BASED ON IMAGES WITH MULTIPLE CANDIDATES |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020526759A JP2020526759A (ja) | 2020-08-31 |
JP7087058B2 true JP7087058B2 (ja) | 2022-06-20 |
Family
ID=65001796
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020500875A Active JP7087058B2 (ja) | 2017-07-11 | 2018-06-25 | 複数の候補を用いた画像ベースの管頭部円検出 |
Country Status (5)
Country | Link |
---|---|
US (1) | US20200232908A1 (ja) |
EP (1) | EP3652674B1 (ja) |
JP (1) | JP7087058B2 (ja) |
CN (1) | CN110832502B (ja) |
WO (1) | WO2019013961A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023066532A1 (en) * | 2021-10-18 | 2023-04-27 | H&T Marsberg Gmbh & Co. Kg | Inspection unit for cans and method for determining the quality of cans |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004265407A (ja) | 2003-02-28 | 2004-09-24 | Eastman Kodak Co | デジタル画像におけるカラーオブジェクトの検出方法 |
JP2011100223A (ja) | 2009-11-04 | 2011-05-19 | Panasonic Electric Works Co Ltd | 画像処理装置および画像処理方法 |
WO2016133924A1 (en) | 2015-02-18 | 2016-08-25 | Siemens Healthcare Diagnostics Inc. | Image-based tube slot circle detection for a vision system |
US20170069113A1 (en) | 2015-09-04 | 2017-03-09 | International Business Machines Corporation | Unsupervised asymmetry detection |
JP2017068739A (ja) | 2015-10-01 | 2017-04-06 | 日本電信電話株式会社 | 物体顕著性マップ算出装置、方法、及びプログラム |
Family Cites Families (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3797686B2 (ja) * | 1995-09-07 | 2006-07-19 | 株式会社東芝 | 形状認識装置及びその方法 |
US7988933B2 (en) * | 2006-09-01 | 2011-08-02 | Siemens Healthcare Diagnostics Inc. | Identification system for a clinical sample container |
JPWO2012117844A1 (ja) * | 2011-03-03 | 2014-07-07 | 株式会社日立ハイテクノロジーズ | 分析装置用の試料データ処理装置、オートサンプラ装置、液体クロマトグラフ装置、試料データ処理方法および分析方法 |
EP2686830B1 (en) * | 2011-03-15 | 2015-01-21 | Siemens Healthcare Diagnostics Inc. | Multi-view stereo systems and methods for tube inventory in healthcare diagnostics |
WO2012129105A1 (en) * | 2011-03-18 | 2012-09-27 | Siemens Healthcare Diagnostics Inc. | Methods and systems for calibration of a positional orientation between a sample container and nozzle tip |
AU2012287299C1 (en) * | 2011-07-22 | 2016-02-18 | Roche Diagnostics Hematology, Inc. | Fluid sample preparation systems and methods |
CN103988064B (zh) * | 2011-09-09 | 2018-09-14 | 简.探针公司 | 自动化样品处理仪器、系统、过程和方法 |
EP2776845B1 (en) * | 2011-11-07 | 2020-11-04 | Beckman Coulter, Inc. | Robotic arm |
KR20140091033A (ko) * | 2011-11-07 | 2014-07-18 | 베크만 컬터, 인코포레이티드 | 검체 컨테이너 검출 |
US20130328760A1 (en) * | 2012-06-08 | 2013-12-12 | Qualcomm Incorporated | Fast feature detection by reducing an area of a camera image |
WO2014152329A1 (en) * | 2013-03-14 | 2014-09-25 | Siemens Healthcare Diagnostics Inc. | Tube tray vision system |
US10140705B2 (en) * | 2014-06-10 | 2018-11-27 | Siemens Healthcare Diagnostics Inc. | Drawer vision system |
US10739364B2 (en) * | 2015-01-28 | 2020-08-11 | Hitachi High-Tech Corporation | Liquid surface inspection device, automated analysis device, and processing device |
ES2917617T3 (es) * | 2016-03-15 | 2022-07-11 | Abbott Molecular Inc | Método para análisis automatizado |
-
2018
- 2018-06-25 EP EP18832802.5A patent/EP3652674B1/en active Active
- 2018-06-25 WO PCT/US2018/039283 patent/WO2019013961A1/en unknown
- 2018-06-25 US US16/630,286 patent/US20200232908A1/en active Pending
- 2018-06-25 JP JP2020500875A patent/JP7087058B2/ja active Active
- 2018-06-25 CN CN201880046201.1A patent/CN110832502B/zh active Active
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004265407A (ja) | 2003-02-28 | 2004-09-24 | Eastman Kodak Co | デジタル画像におけるカラーオブジェクトの検出方法 |
JP2011100223A (ja) | 2009-11-04 | 2011-05-19 | Panasonic Electric Works Co Ltd | 画像処理装置および画像処理方法 |
WO2016133924A1 (en) | 2015-02-18 | 2016-08-25 | Siemens Healthcare Diagnostics Inc. | Image-based tube slot circle detection for a vision system |
US20170069113A1 (en) | 2015-09-04 | 2017-03-09 | International Business Machines Corporation | Unsupervised asymmetry detection |
JP2017068739A (ja) | 2015-10-01 | 2017-04-06 | 日本電信電話株式会社 | 物体顕著性マップ算出装置、方法、及びプログラム |
Also Published As
Publication number | Publication date |
---|---|
CN110832502A (zh) | 2020-02-21 |
JP2020526759A (ja) | 2020-08-31 |
EP3652674A1 (en) | 2020-05-20 |
EP3652674B1 (en) | 2024-02-28 |
CN110832502B (zh) | 2023-09-05 |
US20200232908A1 (en) | 2020-07-23 |
WO2019013961A1 (en) | 2019-01-17 |
EP3652674A4 (en) | 2020-07-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107532125B (zh) | 用于视觉系统的基于图像的管槽圆形检测 | |
JP6960980B2 (ja) | 視覚システムにおける画像ベーストレイ位置合わせ及びチューブスロット位置特定 | |
CN107615336B (zh) | 视觉系统中托盘槽类型和试管类型的基于位置的检测 | |
CN109073664A (zh) | 自动诊断分析仪及其操作方法 | |
EP2967424B1 (en) | System and methods for processing a biopsy sample | |
JP7087058B2 (ja) | 複数の候補を用いた画像ベースの管頭部円検出 | |
CN108828242A (zh) | 用于检体检测的自动化检测设备及其方法 | |
US11119055B2 (en) | Method for operating an x-ray system | |
EP2920571B1 (en) | Method and apparatus for reagent validation in automated sample processing | |
US9760678B2 (en) | Systems and methods in digital pathology | |
WO2017163112A1 (en) | Sample mixing control | |
CN111413511A (zh) | 设备控制方法、装置、检测设备和存储介质 | |
US20210298691A1 (en) | Tissue properties presentation system and method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200317 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20200317 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20210305 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20210309 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20210608 |
|
RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20210608 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210729 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211130 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220210 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220531 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220608 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7087058 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |