JP2013137663A - 画像処理装置、撮像装置、顕微鏡装置、画像処理方法、及び画像処理プログラム - Google Patents
画像処理装置、撮像装置、顕微鏡装置、画像処理方法、及び画像処理プログラム Download PDFInfo
- Publication number
- JP2013137663A JP2013137663A JP2011288390A JP2011288390A JP2013137663A JP 2013137663 A JP2013137663 A JP 2013137663A JP 2011288390 A JP2011288390 A JP 2011288390A JP 2011288390 A JP2011288390 A JP 2011288390A JP 2013137663 A JP2013137663 A JP 2013137663A
- Authority
- JP
- Japan
- Prior art keywords
- image
- image processing
- template
- processing apparatus
- molecular
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/69—Microscopic objects, e.g. biological cells or cellular parts
- G06V20/698—Matching; Classification
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/645—Specially adapted constructive features of fluorimeters
- G01N21/6456—Spatial resolved fluorescence measurements; Imaging
- G01N21/6458—Fluorescence microscopy
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
- G06T7/73—Determining position or orientation of objects or cameras using feature-based methods
- G06T7/75—Determining position or orientation of objects or cameras using feature-based methods involving models
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Molecular Biology (AREA)
- Analytical Chemistry (AREA)
- Chemical & Material Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Pathology (AREA)
- Immunology (AREA)
- Optics & Photonics (AREA)
- Biochemistry (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Image Analysis (AREA)
- Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
- Image Processing (AREA)
- Investigating Or Analysing Biological Materials (AREA)
- Microscoopes, Condenser (AREA)
Abstract
【解決手段】画像処理装置10は、撮像素子40によって取得された試料の光学画像を基に分子位置を特定する装置であって、分子モデルに対応するM行M列(Mは3以上の整数)の画素に含まれるテンプレートから、分子モデルの形状を分割した形状に対応する部分テンプレートを作成するテンプレート作成部15と、光学画像中において、選択した注目画素を中心にして所定角度ずつ回転させた形状に対応した部分テンプレートを用いて、光学画像と該部分テンプレートとの一致度を評価して複数の注目画素毎に評価値を算出する評価値算出部17と、光学画像中の複数の注目画素に対して算出された評価値に基づいて、光学画像中の分子位置を特定する分子位置特定部18とを備える。
【選択図】図1
Description
Claims (9)
- 撮像素子によって取得された試料のイメージ画像を基に分子位置を特定する画像処理装置であって、
分子モデルに対応するM行M列(Mは3以上の整数)の画素に含まれるテンプレートから、前記分子モデルの形状を所定の割合に分割した形状に対応する部分テンプレートを作成するテンプレート作成手段と、
前記イメージ画像中において、選択した注目画素を中心にして所定角度ずつ回転させた形状に対応した前記部分テンプレートを用いて、前記イメージ画像と該部分テンプレートとの一致度を評価して複数の前記注目画素毎に評価値を算出する評価値算出手段と、
前記イメージ画像中の複数の前記注目画素に対して算出された前記評価値に基づいて、前記イメージ画像中の前記分子位置を特定する分子位置特定手段と、
を備えることを特徴とする画像処理装置。 - 前記テンプレートは、円形画像に対応した画素を有し、
前記部分テンプレートは、前記円形画像の中心角をα倍(αは1より小さく0より大きい数)した中心角を有する扇形の形状に対応した画素を有する、
ことを特徴とする請求項1記載の画像処理装置。 - 前記評価値算出手段は、前記一致度の評価対象の前記注目画素の画素値に対応して、前記部分テンプレートに対応する前記所定の割合を選択する、
ことを特徴とする請求項1又は2に記載の画像処理装置。 - 前記評価値算出手段は、前記イメージ画像に含まれる画素のうちから、該画素の画素値に基づいて前記評価値の算出対象の前記注目画素を選択する、
ことを特徴とする請求項1〜3のいずれか1項に記載の画像処理装置。 - 前記評価値算出手段は、前記分子位置特定手段によって前記分子位置として特定された前記注目画素を複数の分割領域に分割し、前記複数の分割領域毎に前記部分テンプレートを用いて前記評価値を再度算出し、
前記分子位置特定手段は、前記注目画素中の前記複数の分割領域に対して算出された前記評価値に基づいて、前記イメージ画像中の前記分子位置を再度特定する、
ことを特徴とする請求項1〜4のいずれか1項に記載の画像処理装置。 - 請求項1〜5のいずれか1項に記載の画像処理装置と、
前記イメージ画像を取得する撮像素子と、
を備えることを特徴とする撮像装置。 - 請求項1〜5のいずれか1項に記載の画像処理装置と、
前記イメージ画像を取得する撮像素子と、
前記撮像素子に対して前記試料の像を生成する光学系と、
を備えることを特徴とする顕微鏡装置。 - 撮像素子によって取得された試料のイメージ画像を基に分子位置を特定する画像処理方法であって、
画像処理装置が、分子モデルに対応するM行M列(Mは3以上の整数)の画素に含まれるテンプレートから、前記分子モデルの形状を所定の割合に分割した形状に対応する部分テンプレートを作成するテンプレート作成ステップと、
前記画像処理装置が、前記イメージ画像中において、選択した注目画素を中心にして所定角度ずつ回転させた形状に対応した前記部分テンプレートを用いて、前記イメージ画像と該部分テンプレートとの一致度を評価して複数の前記注目画素毎に評価値を算出する評価値算出ステップと、
前記画像処理装置が、前記イメージ画像中の複数の前記注目画素に対して算出された前記評価値に基づいて、前記イメージ画像中の前記分子位置を特定する分子位置特定ステップと、
を備えることを特徴とする画像処理方法。 - 撮像素子によって取得された試料のイメージ画像を基に分子位置を特定する画像処理プログラムであって、
コンピュータを、
分子モデルに対応するM行M列(Mは3以上の整数)の画素に含まれるテンプレートから、前記分子モデルの形状を所定の割合に分割した形状に対応する部分テンプレートを作成するテンプレート作成手段、
前記イメージ画像中において、選択した注目画素を中心にして所定角度ずつ回転させた形状に対応した前記部分テンプレートを用いて、前記イメージ画像と該部分テンプレートとの一致度を評価して複数の前記注目画素毎に評価値を算出する評価値算出手段、及び
前記イメージ画像中の複数の前記注目画素に対して算出された前記評価値に基づいて、前記イメージ画像中の前記分子位置を特定する分子位置特定手段、
として機能させることを特徴とする画像処理プログラム。
Priority Applications (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011288390A JP5878756B2 (ja) | 2011-12-28 | 2011-12-28 | 画像処理装置、撮像装置、顕微鏡装置、画像処理方法、及び画像処理プログラム |
GB1407785.3A GB2515179B (en) | 2011-12-28 | 2012-08-31 | Image processing device, image pickup apparatus, microscope apparatus, image processing method, and image processing program |
PCT/JP2012/072222 WO2013099356A1 (ja) | 2011-12-28 | 2012-08-31 | 画像処理装置、撮像装置、顕微鏡装置、画像処理方法、及び画像処理プログラム |
DE112012005521.7T DE112012005521T5 (de) | 2011-12-28 | 2012-08-31 | Bildverarbeitungsvorrichtung, Bildaufnahme, Apparatur, Mikroskopapparatur, Bildverarbeitungsverfahren und Bildverarbeitungsprogramm |
CN201280065612.8A CN104024833B (zh) | 2011-12-28 | 2012-08-31 | 图像处理装置、摄像装置、显微镜装置、图像处理方法以及图像处理程序 |
US13/726,916 US10055638B2 (en) | 2011-12-28 | 2012-12-26 | Image processing device, imaging device, microscope device, image processing method, and image processing program |
US16/037,416 US20180322329A1 (en) | 2011-12-28 | 2018-07-17 | Image processing device, imaging device, microscope device, image processing method, and image processing program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011288390A JP5878756B2 (ja) | 2011-12-28 | 2011-12-28 | 画像処理装置、撮像装置、顕微鏡装置、画像処理方法、及び画像処理プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2013137663A true JP2013137663A (ja) | 2013-07-11 |
JP5878756B2 JP5878756B2 (ja) | 2016-03-08 |
Family
ID=48694520
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011288390A Expired - Fee Related JP5878756B2 (ja) | 2011-12-28 | 2011-12-28 | 画像処理装置、撮像装置、顕微鏡装置、画像処理方法、及び画像処理プログラム |
Country Status (6)
Country | Link |
---|---|
US (2) | US10055638B2 (ja) |
JP (1) | JP5878756B2 (ja) |
CN (1) | CN104024833B (ja) |
DE (1) | DE112012005521T5 (ja) |
GB (1) | GB2515179B (ja) |
WO (1) | WO2013099356A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6044377B2 (ja) * | 2013-02-07 | 2016-12-14 | 株式会社デンソー | 地点検索装置 |
CN106204889B (zh) * | 2016-07-27 | 2019-03-12 | 深圳怡化电脑股份有限公司 | 一种纸币荧光区域的定位方法和装置 |
JP6811244B2 (ja) * | 2016-08-23 | 2021-01-13 | 株式会社日立製作所 | 画像処理装置、ステレオカメラ装置及び画像処理方法 |
CN106446807A (zh) * | 2016-09-09 | 2017-02-22 | 成都通甲优博科技有限责任公司 | 一种井盖失窃检测方法 |
US11042967B2 (en) * | 2017-02-28 | 2021-06-22 | Shimadzu Corporation | Image processing method |
CN111507333B (zh) * | 2020-04-21 | 2023-09-15 | 腾讯科技(深圳)有限公司 | 一种图像矫正方法、装置、电子设备和存储介质 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007510199A (ja) * | 2003-10-08 | 2007-04-19 | ライフスパン バイオサイエンス,インク. | 自動顕微鏡スライド組織サンプルマッピング及び画像取得 |
WO2010060515A1 (de) * | 2008-11-03 | 2010-06-03 | Carl Zeiss Microlmaging Gmbh | Kombinationsmikroskopie |
JP2011008713A (ja) * | 2009-06-29 | 2011-01-13 | Fujitsu Semiconductor Ltd | 画像処理プログラム、画像処理装置、および画像処理方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN100518628C (zh) * | 2008-04-25 | 2009-07-29 | 清华大学 | 可调用多种成像算法的在体荧光分子成像建模方法 |
US8559726B2 (en) * | 2008-08-22 | 2013-10-15 | Hewlett-Packard Development Company, L.P. | Image analysis based on pixel brightness grouping |
CN101766476B (zh) * | 2009-07-08 | 2011-05-11 | 中国科学院自动化研究所 | 自发荧光分子影像系统 |
CN102288589B (zh) * | 2011-06-23 | 2013-05-08 | 深圳大学 | 单个荧光探针的定位方法、装置及超分辨成像方法、系统 |
US20130121417A1 (en) * | 2011-11-16 | 2013-05-16 | Qualcomm Incorporated | Constrained reference picture sets in wave front parallel processing of video data |
-
2011
- 2011-12-28 JP JP2011288390A patent/JP5878756B2/ja not_active Expired - Fee Related
-
2012
- 2012-08-31 DE DE112012005521.7T patent/DE112012005521T5/de not_active Withdrawn
- 2012-08-31 CN CN201280065612.8A patent/CN104024833B/zh not_active Expired - Fee Related
- 2012-08-31 WO PCT/JP2012/072222 patent/WO2013099356A1/ja active Application Filing
- 2012-08-31 GB GB1407785.3A patent/GB2515179B/en not_active Expired - Fee Related
- 2012-12-26 US US13/726,916 patent/US10055638B2/en not_active Expired - Fee Related
-
2018
- 2018-07-17 US US16/037,416 patent/US20180322329A1/en not_active Abandoned
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2007510199A (ja) * | 2003-10-08 | 2007-04-19 | ライフスパン バイオサイエンス,インク. | 自動顕微鏡スライド組織サンプルマッピング及び画像取得 |
WO2010060515A1 (de) * | 2008-11-03 | 2010-06-03 | Carl Zeiss Microlmaging Gmbh | Kombinationsmikroskopie |
JP2011008713A (ja) * | 2009-06-29 | 2011-01-13 | Fujitsu Semiconductor Ltd | 画像処理プログラム、画像処理装置、および画像処理方法 |
Non-Patent Citations (2)
Title |
---|
JPN7012004546; Seamus J Holden, Stephan Uphoff, Achillefs N Kapanidis: '"DAOSTORM: an algorithm for high- density super-resolution microscopy"' Nature Methods Vol.8, No.4, 20110330, pp.279-280, Nature Publishing Group * |
JPN7015002863; FANG Huang et al.: '"Simultaneous multiple-emitter fitting for single molecule super-resolution imaging"' Biomed Opt Express Vol.2, No.5, 20110429, pp.1377-1393, Optical Society of America * |
Also Published As
Publication number | Publication date |
---|---|
GB201407785D0 (en) | 2014-06-18 |
US20180322329A1 (en) | 2018-11-08 |
GB2515179A (en) | 2014-12-17 |
WO2013099356A1 (ja) | 2013-07-04 |
US10055638B2 (en) | 2018-08-21 |
CN104024833B (zh) | 2016-03-16 |
DE112012005521T5 (de) | 2014-09-11 |
GB2515179B (en) | 2018-07-25 |
JP5878756B2 (ja) | 2016-03-08 |
CN104024833A (zh) | 2014-09-03 |
US20130169787A1 (en) | 2013-07-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5878756B2 (ja) | 画像処理装置、撮像装置、顕微鏡装置、画像処理方法、及び画像処理プログラム | |
JP7431458B2 (ja) | 超解像イメージングの精度に関するフィードバックを行い、その精度を改善するためのシステム、デバイス、および方法 | |
JP7422825B2 (ja) | 顕微鏡スライド画像のための焦点重み付き機械学習分類器誤り予測 | |
JP6511986B2 (ja) | プログラム生成装置、プログラム生成方法および生成プログラム | |
JP6188695B2 (ja) | 表面高さ属性を用いて瑕疵を分類する方法および装置 | |
JP6320649B1 (ja) | 機械学習装置及び画像認識装置 | |
JP2013257304A5 (ja) | ||
CN113424292A (zh) | 包括多束粒子显微镜的系统及其操作方法 | |
JP6607261B2 (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
JP5775949B2 (ja) | パターンマッチング用テンプレートの作成方法、及び画像処理装置 | |
JP2023052869A (ja) | 基板上の流動的対象を自動的にマッピングするための方法およびシステム | |
US20120249770A1 (en) | Method for automatically focusing a microscope on a predetermined object and microscope for automatic focusing | |
JP2019503012A (ja) | 3次元顕微鏡画像の区分化のためのシステムおよび方法 | |
JP5032895B2 (ja) | ディジタルグレー値画像を二値化する方法 | |
US20230237777A1 (en) | Information processing apparatus, learning apparatus, image recognition apparatus, information processing method, learning method, image recognition method, and non-transitory-computer-readable storage medium | |
WO2020121739A1 (ja) | 画像マッチング方法、および画像マッチング処理を実行するための演算システム | |
JP7062563B2 (ja) | 輪郭抽出方法、輪郭抽出装置、及びプログラム | |
JP2020154977A (ja) | パターンマッチング方法 | |
JP2020115283A (ja) | 特徴量決定方法、学習用データ生成方法、学習用データセット、評価システム、プログラム、及び、学習方法 | |
JP2015187782A (ja) | 物体検出装置 | |
JP2021135893A (ja) | 検査装置、検査方法、及びプログラム | |
JP2021129043A (ja) | 検査装置、検査方法、及びプログラム | |
US20240071033A1 (en) | Neural network device and system and operating method of the neural network device | |
JP2006126374A (ja) | 画像表示方法、プログラム、及び走査型共焦点顕微鏡 | |
JP2018101091A (ja) | 顕微鏡装置、プログラム、観察方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20141219 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20151020 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160105 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160129 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5878756 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |