JP2016520798A - 生物学的な及び非生物学的な媒質でナノ粒子の位置を特定するための3次元画像処理 - Google Patents
生物学的な及び非生物学的な媒質でナノ粒子の位置を特定するための3次元画像処理 Download PDFInfo
- Publication number
- JP2016520798A JP2016520798A JP2016501501A JP2016501501A JP2016520798A JP 2016520798 A JP2016520798 A JP 2016520798A JP 2016501501 A JP2016501501 A JP 2016501501A JP 2016501501 A JP2016501501 A JP 2016501501A JP 2016520798 A JP2016520798 A JP 2016520798A
- Authority
- JP
- Japan
- Prior art keywords
- dimensional
- target particle
- sample
- image
- biological
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 title claims description 34
- 239000002105 nanoparticle Substances 0.000 title description 5
- 230000004807 localization Effects 0.000 title 1
- 239000002245 particle Substances 0.000 claims abstract description 166
- 238000000034 method Methods 0.000 claims abstract description 136
- 210000004027 cell Anatomy 0.000 claims description 115
- 230000006870 function Effects 0.000 claims description 56
- 239000000523 sample Substances 0.000 claims description 51
- 238000005286 illumination Methods 0.000 claims description 14
- 210000003850 cellular structure Anatomy 0.000 claims description 12
- 230000005284 excitation Effects 0.000 claims description 12
- 238000004364 calculation method Methods 0.000 claims description 11
- 229920006395 saturated elastomer Polymers 0.000 claims description 10
- 230000003287 optical effect Effects 0.000 claims description 8
- 238000001228 spectrum Methods 0.000 claims description 8
- 210000003463 organelle Anatomy 0.000 claims description 7
- 230000005855 radiation Effects 0.000 claims description 7
- 230000003595 spectral effect Effects 0.000 claims description 7
- 239000012472 biological sample Substances 0.000 claims description 5
- 239000000835 fiber Substances 0.000 claims description 5
- 239000000463 material Substances 0.000 claims description 5
- 239000011159 matrix material Substances 0.000 claims description 5
- 230000001678 irradiating effect Effects 0.000 claims description 4
- 239000011248 coating agent Substances 0.000 claims description 3
- 238000000576 coating method Methods 0.000 claims description 3
- 210000001723 extracellular space Anatomy 0.000 claims description 3
- 230000010354 integration Effects 0.000 claims description 3
- 239000000203 mixture Substances 0.000 claims description 3
- 210000003093 intracellular space Anatomy 0.000 claims description 2
- 238000003384 imaging method Methods 0.000 abstract description 5
- 230000015654 memory Effects 0.000 description 31
- 230000008569 process Effects 0.000 description 13
- 239000003814 drug Substances 0.000 description 5
- 229940079593 drug Drugs 0.000 description 5
- 230000001413 cellular effect Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 239000007850 fluorescent dye Substances 0.000 description 4
- 238000001215 fluorescent labelling Methods 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 230000003834 intracellular effect Effects 0.000 description 3
- 238000002156 mixing Methods 0.000 description 3
- 238000002360 preparation method Methods 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 239000007787 solid Substances 0.000 description 3
- 239000000126 substance Substances 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 229910052799 carbon Inorganic materials 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 238000013500 data storage Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000009977 dual effect Effects 0.000 description 2
- PCHJSUWPFVWCPO-UHFFFAOYSA-N gold Chemical compound [Au] PCHJSUWPFVWCPO-UHFFFAOYSA-N 0.000 description 2
- 229910052737 gold Inorganic materials 0.000 description 2
- 239000010931 gold Substances 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000011160 research Methods 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- OAICVXFJPJFONN-UHFFFAOYSA-N Phosphorus Chemical compound [P] OAICVXFJPJFONN-UHFFFAOYSA-N 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000000969 carrier Substances 0.000 description 1
- 210000005056 cell body Anatomy 0.000 description 1
- 210000000170 cell membrane Anatomy 0.000 description 1
- 210000003855 cell nucleus Anatomy 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000000205 computational method Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000009792 diffusion process Methods 0.000 description 1
- 238000005315 distribution function Methods 0.000 description 1
- 239000000839 emulsion Substances 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 238000002795 fluorescence method Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 229910052736 halogen Inorganic materials 0.000 description 1
- 150000002367 halogens Chemical class 0.000 description 1
- 238000003709 image segmentation Methods 0.000 description 1
- 210000005061 intracellular organelle Anatomy 0.000 description 1
- 238000002955 isolation Methods 0.000 description 1
- 238000002372 labelling Methods 0.000 description 1
- 210000003712 lysosome Anatomy 0.000 description 1
- 230000001868 lysosomic effect Effects 0.000 description 1
- QSHDDOUJBYECFT-UHFFFAOYSA-N mercury Chemical compound [Hg] QSHDDOUJBYECFT-UHFFFAOYSA-N 0.000 description 1
- 229910052753 mercury Inorganic materials 0.000 description 1
- 238000000386 microscopy Methods 0.000 description 1
- 239000002048 multi walled nanotube Substances 0.000 description 1
- 239000002086 nanomaterial Substances 0.000 description 1
- 239000002073 nanorod Substances 0.000 description 1
- 210000004940 nucleus Anatomy 0.000 description 1
- 230000010287 polarization Effects 0.000 description 1
- 239000002096 quantum dot Substances 0.000 description 1
- 239000010453 quartz Substances 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- VYPSYNLAJGMNEJ-UHFFFAOYSA-N silicon dioxide Inorganic materials O=[Si]=O VYPSYNLAJGMNEJ-UHFFFAOYSA-N 0.000 description 1
- 229910052709 silver Inorganic materials 0.000 description 1
- 239000004332 silver Substances 0.000 description 1
- 239000002109 single walled nanotube Substances 0.000 description 1
- 229940126585 therapeutic drug Drugs 0.000 description 1
- 210000001519 tissue Anatomy 0.000 description 1
- 238000013024 troubleshooting Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/06—Means for illuminating specimens
- G02B21/08—Condensers
- G02B21/10—Condensers affording dark-field illumination
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/645—Specially adapted constructive features of fluorimeters
- G01N21/6456—Spatial resolved fluorescence measurements; Imaging
- G01N21/6458—Fluorescence microscopy
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/16—Microscopes adapted for ultraviolet illumination ; Fluorescence microscopes
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
- G02B21/367—Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/08—Volume rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/50—Lighting effects
- G06T15/506—Illumination models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
- G06T5/75—Unsharp masking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
- G01N2015/0038—Investigating nanoparticles
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N15/00—Investigating characteristics of particles; Investigating permeability, pore-volume or surface-area of porous materials
- G01N15/10—Investigating individual particles
- G01N15/14—Optical investigation techniques, e.g. flow cytometry
- G01N15/1434—Optical arrangements
- G01N2015/144—Imaging characterised by its optical setup
- G01N2015/1445—Three-dimensional imaging, imaging in different image planes, e.g. under different angles or at different depths, e.g. by a relative motion of sample and detector, for instance by tomography
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/04—Indexing scheme for image data processing or generation, in general involving 3D image data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10056—Microscopic image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/41—Medical
Landscapes
- Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Analytical Chemistry (AREA)
- Chemical & Material Sciences (AREA)
- Theoretical Computer Science (AREA)
- Optics & Photonics (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Computer Graphics (AREA)
- General Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biochemistry (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Medical Informatics (AREA)
- Radiology & Medical Imaging (AREA)
- Quality & Reliability (AREA)
- Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
- Microscoopes, Condenser (AREA)
- Investigating Or Analysing Biological Materials (AREA)
- Image Processing (AREA)
Abstract
Description
本願は、2013年3月12日に出願された、シリアル番号61/776,977の「生物学的な及び非生物学的な媒質でのナノ粒子の位置を特定するための3次元画像処理」という名称の同時継続中の米国仮出願の優先権を主張し、参照によって組み込む。
本明細書にて開示される方法及び装置は、二つの全般的なカテゴリに分類される。暗視野顕微鏡を用いる、対象粒子を含む生物学的な媒質及び非生物学的な媒質の3次元(3D)画像データを獲得するために用いられる獲得方法が記載される。さらに、これまでにはかなえられなかった画像データについての3次元デコンボリューション処理を拡張する方法及び装置が記載される。
このセクションは3次元画像データの方法及び装置を説明する。暗視野画像方法を用いる記録化は、対象粒子が散りばめられているいくつかの媒質を有する、定義されたボリュームを含んで構成される。記録化は、非制限的具体例として、米国特許第7、564、623の「顕微鏡照明装置及びそのアダプタ」に記載されている装置のような、任意の適切な暗視野顕微鏡装置に対応して構成される。媒質は、細胞体のような生物学的な的な媒質でも、又は繊維マトリクスのような非生物学的な的な媒質でもよい。対象粒子がない媒質の記録化は、同様の技術を用いても得られる。対象粒子が含まれるとき、本開示に記載されている処理のために、対象粒子は検出されるため及び局在化されるために蛍光的に標識付けされる必要がない。媒質及び細胞はガラスのスライドによって支持され、さらにカバーの下に固定されるか、又は媒質及び細胞は生物学的な細胞をサポートすることのできる環境フローチャンバ(environmental flow chamber)であってもよい。
このセクションは、前述のようにして獲得されたデータから3次元画像を計算するための3次元デコンボリューション処理装置及び方法を考察する。暗視野顕微鏡において、光源からの光はオブジェクトによって拡散される。拡散の強度、つまりオブジェクトの画像は、カメラによって行われる記録化での暗視野に対して比較的輝いている。蛍光において光はオブジェクトの標識によって拡散される。蛍光による放射の強さは比較的に弱く、さらに記録された蛍光は狭帯域波長内に含まれる。蛍光での暗い光状態に対して、オブジェクトによって拡散された光は広帯域波長を含み、さらに蛍光よりも通常はかなり強い。対象粒子を含む細胞のような未染色の生物学的な媒質において、このことは、デコンボリューションアルゴリズムにおいて両方が処理される弱信号オブジェクト(細胞)と強信号オブジェクト(対象粒子)があるかもしれないことを意味する。
及び/又は少なくとも一つの測定による狭帯域点像分布関数(PSF)を含む。
Claims (38)
- サンプルの3次元ボリューム画像を得るための方法であって、
焦点方向に沿って等間隔とされた複数のサンプル位置のそれぞれで撮影された少なくとも一つの2次元画像を含む複数の2次元画像であり、さらに前記サンプルから焦点の合った、及び焦点のずれた光の両方を含有するそれぞれの2次元画像を含む前記複数の2次元画像を前記サンプルから暗視野顕微鏡によって得ること、
前記サンプルに存在する少なくとも一つの構造の位置を判断するための3次元のコンピュータ計算方法に前記複数の2次元画像を投入すること、
前記サンプルに存在する少なくとも一つの構造の位置を表す、前記サンプルの3次元ボリューム画像を構築すること
を備える前記サンプルの3次元ボリューム画像を得るための方法。 - 前記サンプルは、
少なくとも一つの細胞及び/又は他の類似の生物学的な又は非生物学的な構造と、
前記少なくとも一つの細胞内の少なくとも一つの未染色の対象粒子を備える請求項1記載の前記方法。 - 前記暗視野顕微鏡は、前記サンプルの照明のために広帯域光を用いる請求項1又は2記載の前記方法。
- 前記少なくとも一つの細胞及び/又は他の類似の生物学的な又は非生物学的な構造は蛍光性であり、
前記少なくとも一つの未染色の対象粒子は非蛍光性であり、
前記暗視野顕微鏡は前記サンプルの照明のために蛍光励起光の特定波長が混合された広帯域光を含む請求項2又は3記載の前記方法。 - 前記サンプルに存在する前記少なくとも一つの構造は、
少なくとも一つの細胞及び/又は他の類似の生物学的な又は非生物学的な構造と、
前記少なくとも一つの細胞及び/又は他の類似の生物学的な又は非生物学的な構造内の少なくとも一つの標識付けされた細胞構造と、
前記少なくとも一つの細胞及び/又は他の類似の生物学的な又は非生物学的な構造内の少なくとも一つの非蛍光性対象粒子を備え、
さらに前記暗視野顕微鏡は前記サンプルを照射するために、前記少なくとも一つの標識付けされた細胞構造を励起する狭帯域光と、前記少なくとも一つの非蛍光性対象粒子から拡散する広帯域光の混合光を含む前記請求項1〜4のいずれか一項記載の前記方法。 - 前記画像に弱く寄与する前記少なくとも一つの標識付けされた細胞構造と前記画像に強く寄与する前記少なくとも一つの対象粒子の前記画像における輝きを等しくするために前記狭帯域光と前記広帯域光の相対的な強さを調整すること、
少なくとも一つの標識付けされた細胞構造の前記位置と、前記少なくとも一つの対象粒子の前記位置を飽和のない前記3次元画像に表すことを備える、請求項1〜5のいずれか一項記載の前記方法。 - スペクトル出力の少なくとも一つのピークを含むアークランプの使用を通して狭帯域光及び広帯域光の混合光を発生することであり、前記アークランプの光の強度は前記少なくとも一つのピークによって定義される狭波長範囲にわたって強く、前記少なくとも一つのピークによって定義される狭波長の外側の広波長範囲にわたって弱い、前記混合光を発生すること、
前記少なくとも一つのピークの波長を通す通過帯域を有する励起フィルタに前記アークランプからの光を通すこと、
前記励起フィルタを通された狭帯域光を少なくとも一つの標識付けされた細胞構造に照射すること、
前記アークランプからの広帯域光を前記少なくとも一つの対象粒子に同時に照射すること、
前記放射フィルタの、前記少なくとも一つの標識付けされた細胞構造から放射された光を通過させかつ前記励起フィルタの前記通過帯域内に光を通過させない第1通過帯域を介して光を受光すること、
前記放射フィルタの、前記第1通過帯域内に光を通過させない第2通過帯域を介して光を受光すること
を備える請求項1〜6のいずれか一項記載の前記方法。 - サンプル内の少なくとも一つの対象粒子の3次元(3D)位置を判断するための方法であって、
前記サンプルの、それぞれが焦点方向に沿った異なるサンプル位置で撮影された少なくとも二つの画像を暗視野顕微鏡によって得ること、
3次元デコンボリューションを介して前記少なくとも二つの画像を分析することであり、少なくとも一つの多重点像分布関数(multiple-PSF)の使用を含む前記少なくとも二つの画像を分析すること、
3次元コンボリューションを介して前記少なくとも二つの画像を分析することの結果から前記少なくとも一つの対象粒子の位置を判断すること、
前記少なくとも一つの対象粒子の3次元位置を表す一つ以上の3次元画像を得ること
を備える前記サンプル内の少なくとも一つの対象粒子の3次元位置を判断するための方法。 - 前記暗視野顕微鏡は広帯域光を含む請求項8記載の前記方法。
- 前記少なくとも一つの多重点像分布関数(multiple-PSF)は、波長範囲にわたる複数の狭帯域点像分布関数(PSFs)のスペクトル的に加重される積分を含む請求項8又は9記載の前記方法。
- 前記複数の狭帯域点像分布関数(PSFs)は少なくとも一つの計算された狭帯域点像分布関数(PSF)を含む請求項10記載の前記方法。
- 前記複数の狭帯域点像分布関数(PSFs)は少なくとも一つの測定された狭帯域点像分布関数(PSF)を含む請求項10記載の前記方法。
- 前記少なくとも一つの3次元画像を不鮮明化すること、
焦点の方向で前記少なくとも一つの3次元画像を補間すること、
前記少なくとも一つの3次元画像内にピークの位置を特定すること
をさらに含む請求項8〜12のいずれか一項記載の前記方法。 - 前記少なくとも一つの多重点像分布関数(multiple-PSF)は一つの対象粒子ボクセル点像分布関数(PSF)及び一つの分離非対象粒子ボクセル点像分布関数(PSF)を含む請求項13記載の前記方法。
- 前記少なくとも一つの対象粒子は被膜され、この被膜化は前記少なくとも一つの対象粒子の光学スペクトルを変更する請求項8〜14のいずれか一項記載の前記方法。
- 前記サンプルは生物学的なサンプルである請求項8〜15のいずれか一項記載の前記方法。
- 前記生物学的なサンプルは染色されない請求項16記載の前記方法。
- 前記生物学的なサンプルは染色される請求項16記載の前記方法。
- 前記サンプルは半透明材料を含む請求項8〜18のいずれか一項記載の前記方法。
- 前記サンプルは繊維マトリクスを含む請求項8〜19のいずれか一項記載の前記方法。
- 少なくとも一つの対象粒子の位置と、細胞及び/又は他の類似の生物学的な又は非生物学的な構造内の少なくとも一つの細胞構造の位置の間の少なくとも一つの空間的相関を判断するための方法であって、
3次元座標系内の前記少なくとも一つの対象粒子の前記位置を判断すること、
前記3次元座標系内の前記少なくとも一つの細胞の前記位置を判断すること、
前記3次元座標系での前記少なくとも一つの細胞構造の前記位置に対する前記少なくとも一つの対象粒子の前記位置のベクトル記述を定式化すること、
前記ベクトル記述から前記空間的相関を判断すること
を備える前記少なくとも一つの空間的相関を判断するための方法。 - 前記細胞及び/又は他の類似の生物学的な又は非生物学的な構造内の細胞内空間の位置に対する前記少なくとも一つの対象粒子の前記位置を判断することをさらに含む請求項21記載の前記方法。
- 前記細胞及び/又は他の類似の生物学的な又は非生物学的な構造外の細胞外空間の位置に対する前記少なくとも一つの対象粒子の前記位置を判断することをさらに含む請求項21又は22記載の前記方法。
- 前記少なくとも一つの対象粒子は複数の対象粒子を含む請求項21〜23のいずれか一項記載の前記方法。
- 前記少なくとも一つの細胞構造の境界によって囲まれる、前記複数の対象粒子を記述する3次元(3D)密度関数を得ることをさらに含む請求項21〜24のいずれか一項記載の前記方法。
- 前記少なくとも一つの細胞構造は細胞小器官を含む請求項25記載の前記方法。
- 前記少なくとも一つの細胞構造は、完全な細胞及び/又は他の類似の生物学的な又は非生物学的な構造を含む請求項25記載の前記方法。
- 前記少なくとも一つの細胞構造は、染色される請求項21〜27のいずれか一項記載の前記方法。
- 前記少なくとも一つの細胞構造は、未染色である請求項21〜27のいずれか一項記載の前記方法。
- 内部細胞小器官の空間の位置に対する前記少なくとも一つの対象粒子の前記位置を判断することをさらに備える請求項21〜29のいずれか一項記載の前記方法。
- 外部細胞小器官の空間の位置に対する前記少なくとも一つの対象粒子の前記位置を判断することをさらに備える請求項21〜30のいずれか一項記載の前記方法。
- 前記複数の対象粒子のそれぞれの位置と前記少なくとも一つの細胞構造の前記位置との間の最小距離を判断することをさらに備える請求項21〜31のいずれか一項記載の前記方法。
- 前記少なくとも一つの細胞構造は、前記細胞及び/又は他の類似の生物学的な又は非生物学的な構造の染色された境界である請求項32記載の前記方法。
- 前記少なくとも一つの細胞構造は、染色された細胞核膜である請求項32記載の前記方法。
- 少なくとも一つの対象粒子の位置を表示するための方法であって、
それぞれが焦点方向に沿った異なるサンプル位置で撮影された少なくとも二つの画像をサンプルから暗視野顕微鏡によって得ること、
3次元デコンボリューションを介して前記少なくとも二つの画像を分析することであり、少なくとも一つの多重点像分布関数(multiple-PSF)の使用を含む前記少なくとも二つの画像を分析すること、
3次元コンボリューションを介して前記少なくとも二つの画像を分析することの結果から前記少なくとも一つの対象粒子の位置を判断すること、
前記少なくとも一つの対象粒子の3次元位置で、特定の3次元空間座標を描写する球状のアイコンを表示することによって前記少なくとも一つの対象粒子の3次元位置を表す一つ以上の3次元画像を得ることを備え少なくとも一つの対象粒子の位置を表示するための方法。 - 前記一つ以上の3次元画像内に細胞構造の半透明なボリューム画像を表示することをさらに備え、前記少なくとも一つの対象粒子の前記3次元位置は前記細胞構造の前記半透明ボリューム画像の内側に表示される請求項35記載の前記方法。
- 弱及び強光源を含むサンプルから獲得される3次元画像のダイナミックレンジを拡大するための方法であって、
短露光時間を使用して得られる短露光3次元画像をサンプルから暗視野顕微鏡によって獲得すること、
長露光時間を使用して得られる長露光3次元画像を前記サンプルから暗視野顕微鏡によって獲得すること、
前記長露光画像の飽和画素を識別すること、
前記長露光画像からの前記飽和画素を励起すること、
最終画像を形成するために、前記長露光画像の前記励起された画素を、前記短露光画像からの対応する画素で置き換えること、
共通露光時間を反映するために前記最終画像を再倍率変更すること
を備える前記3次元画像のダイナミックレンズを拡大するための方法。 - 3次元画像(3D)を垂直方向にシャープニングするための方法であって、
局所の最小値を識別するために各横画素の垂直輪郭を処理すること、
前記局所の最小点の間の輪郭部分を前記輪郭部分の積分と等しい単一の値を除いた0を含む新しい輪郭部分で置き換えることであり、前記単一の値は垂直方向で前記輪郭部分の質量の中心に位置される、前記置き換えること
を備える前記シャープニングするための方法。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201361776977P | 2013-03-12 | 2013-03-12 | |
US61/776,977 | 2013-03-12 | ||
PCT/US2014/024346 WO2014165091A2 (en) | 2013-03-12 | 2014-03-12 | Three-dimensional image processing to locate nanoparticles in biolgical and nonbiological media |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016520798A true JP2016520798A (ja) | 2016-07-14 |
JP6503335B2 JP6503335B2 (ja) | 2019-04-17 |
Family
ID=50841937
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016501501A Active JP6503335B2 (ja) | 2013-03-12 | 2014-03-12 | 生物学的な及び非生物学的な媒質でナノ粒子の位置を特定するための3次元画像処理 |
Country Status (5)
Country | Link |
---|---|
US (2) | US10152823B2 (ja) |
EP (1) | EP2972231B1 (ja) |
JP (1) | JP6503335B2 (ja) |
CN (1) | CN105190290B (ja) |
WO (1) | WO2014165091A2 (ja) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2019082788A1 (ja) * | 2017-10-26 | 2019-05-02 | コニカミノルタ株式会社 | 画像処理装置、合焦位置特定方法及び合焦位置特定プログラム |
JP2019536085A (ja) * | 2016-10-26 | 2019-12-12 | モレキュラー デバイシーズ, エルエルシー | コントラストを増進し、かつ焦点を見出すための干渉縞の使用を伴う透過照明撮像 |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9799113B2 (en) * | 2015-05-21 | 2017-10-24 | Invicro Llc | Multi-spectral three dimensional imaging system and method |
CN104931397B (zh) * | 2015-06-29 | 2018-04-10 | 广州机械科学研究院有限公司 | 基于励磁吸附的三维数字颗粒图像生成装置及方法 |
EP3424403B1 (en) * | 2016-03-03 | 2024-04-24 | Sony Group Corporation | Medical image processing device, system, method, and program |
CN106225778A (zh) * | 2016-07-18 | 2016-12-14 | 北京邮电大学 | 多介质传播中随机波动的视觉定位研究 |
WO2018069283A1 (de) * | 2016-10-10 | 2018-04-19 | MAX-PLANCK-Gesellschaft zur Förderung der Wissenschaften e.V. | Verfahren zum räumlich hochauflösenden bestimmen des orts eines vereinzelten, mit anregungslicht zur emission von lumineszenzlicht anregbaren moleküls in einer probe |
JP7320352B2 (ja) * | 2016-12-28 | 2023-08-03 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ | 三次元モデル送信方法、三次元モデル受信方法、三次元モデル送信装置及び三次元モデル受信装置 |
US10694113B1 (en) * | 2019-05-01 | 2020-06-23 | Xiris Automation Inc. | Dark field illumination for laser beam delivery system |
US11854281B2 (en) | 2019-08-16 | 2023-12-26 | The Research Foundation For The State University Of New York | System, method, and computer-accessible medium for processing brain images and extracting neuronal structures |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020098588A1 (en) * | 2000-11-30 | 2002-07-25 | Paul Sammak | Microbead-based test plates and test methods for fluorescence imaging systems |
JP2002531840A (ja) * | 1998-12-01 | 2002-09-24 | イェダ リサーチ アンド デベロップメント カンパニー リミテッド | コンピュータを使用した適応画像形成装置及び方法 |
JP2004513481A (ja) * | 2000-11-06 | 2004-04-30 | ゼネラル・エレクトリック・カンパニイ | 導電部材としてプレアロイ粉をアーク管へ適用する方法 |
JP2007140322A (ja) * | 2005-11-22 | 2007-06-07 | Tohoku Univ | 光学装置 |
JP2009223348A (ja) * | 1995-02-03 | 2009-10-01 | Regents Of The Univ Of California | 解像深度が強化された3次元顕微鏡法のための方法及び装置 |
JP2011145191A (ja) * | 2010-01-15 | 2011-07-28 | Omron Corp | 測定方法 |
US20120200694A1 (en) * | 2009-10-12 | 2012-08-09 | Karl Garsha | Multi-modality contrast and brightfield context rendering for enhanced pathology determination and multi-analyte detection in tissue |
JP2013029836A (ja) * | 2011-07-27 | 2013-02-07 | Leica Microsystems Cms Gmbh | 顕微鏡照明方法及び顕微鏡 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7197193B2 (en) * | 2002-05-03 | 2007-03-27 | Creatv Microtech, Inc. | Apparatus and method for three dimensional image reconstruction |
WO2005101086A2 (en) * | 2004-04-16 | 2005-10-27 | Auburn University | Microsope illumination device and adapter therefor |
JP5479733B2 (ja) * | 2005-07-15 | 2014-04-23 | オーバーン ユニバーシティ | 顕微鏡照明装置及びアダプタ |
US20070229823A1 (en) * | 2006-03-31 | 2007-10-04 | Intel Corporation | Determination of the number concentration and particle size distribution of nanoparticles using dark-field microscopy |
CN101414056B (zh) * | 2008-12-05 | 2010-08-11 | 南京东利来光电实业有限责任公司 | 暗视场照明物镜装置 |
DK200801722A (en) * | 2008-12-05 | 2010-06-06 | Unisensor As | Optical sectioning of a sample and detection of particles in a sample |
JP5651118B2 (ja) * | 2010-02-10 | 2015-01-07 | ドルビー・インターナショナル・アーベー | 画像処理装置および画像処理方法 |
US8744164B2 (en) * | 2010-04-06 | 2014-06-03 | Institute For Systems Biology | Automated analysis of images using bright field microscopy |
US8620065B2 (en) * | 2010-04-09 | 2013-12-31 | The Regents Of The University Of Colorado | Methods and systems for three dimensional optical imaging, sensing, particle localization and manipulation |
WO2011144212A1 (en) * | 2010-05-21 | 2011-11-24 | Chemometec A/S | A compact dark field light source and dark field image analysis at low magnification |
CN101963582B (zh) * | 2010-09-13 | 2012-03-14 | 深圳大学 | 一种三维荧光纳米显微成像方法、系统及成像设备 |
US9295431B2 (en) * | 2011-10-28 | 2016-03-29 | New York University | Constructing a 3-dimensional image from a 2-dimensional image and compressing a 3-dimensional image to a 2-dimensional image |
CN102565395B (zh) * | 2012-02-14 | 2014-04-16 | 北京大学 | 用包被抗体的金纳米颗粒检测细菌数量的方法 |
-
2014
- 2014-03-12 JP JP2016501501A patent/JP6503335B2/ja active Active
- 2014-03-12 US US14/775,309 patent/US10152823B2/en active Active
- 2014-03-12 WO PCT/US2014/024346 patent/WO2014165091A2/en active Application Filing
- 2014-03-12 CN CN201480025297.5A patent/CN105190290B/zh active Active
- 2014-03-12 EP EP14727096.1A patent/EP2972231B1/en active Active
-
2018
- 2018-11-28 US US16/202,370 patent/US10930061B2/en active Active
Patent Citations (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009223348A (ja) * | 1995-02-03 | 2009-10-01 | Regents Of The Univ Of California | 解像深度が強化された3次元顕微鏡法のための方法及び装置 |
JP2002531840A (ja) * | 1998-12-01 | 2002-09-24 | イェダ リサーチ アンド デベロップメント カンパニー リミテッド | コンピュータを使用した適応画像形成装置及び方法 |
JP2004513481A (ja) * | 2000-11-06 | 2004-04-30 | ゼネラル・エレクトリック・カンパニイ | 導電部材としてプレアロイ粉をアーク管へ適用する方法 |
US20020098588A1 (en) * | 2000-11-30 | 2002-07-25 | Paul Sammak | Microbead-based test plates and test methods for fluorescence imaging systems |
JP2007140322A (ja) * | 2005-11-22 | 2007-06-07 | Tohoku Univ | 光学装置 |
US20120200694A1 (en) * | 2009-10-12 | 2012-08-09 | Karl Garsha | Multi-modality contrast and brightfield context rendering for enhanced pathology determination and multi-analyte detection in tissue |
JP2013507612A (ja) * | 2009-10-12 | 2013-03-04 | ベンタナ メディカル システムズ, インコーポレイテッド | 高められた病理学的決定のための複数モダリティコントラストおよび明視野コンテキスト表現、および組織内の複数検体検出 |
JP2011145191A (ja) * | 2010-01-15 | 2011-07-28 | Omron Corp | 測定方法 |
JP2013029836A (ja) * | 2011-07-27 | 2013-02-07 | Leica Microsystems Cms Gmbh | 顕微鏡照明方法及び顕微鏡 |
Non-Patent Citations (2)
Title |
---|
SHENG-HANN WANG: "Size-dependent endocytosis of gold nanoparticles studied by three-dimensional mapping of plasmonic s", JOURNAL OF NANOBIOTECHNOLOGY, vol. 8, JPN6017044301, 20 December 2010 (2010-12-20), pages 1 - 13, ISSN: 0003843078 * |
萩窪真也: "自家蛍光寿命イメージング:単一細胞内pHのその場検出", [ONLINE], JPN6018026739, 2012, ISSN: 0003843079 * |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019536085A (ja) * | 2016-10-26 | 2019-12-12 | モレキュラー デバイシーズ, エルエルシー | コントラストを増進し、かつ焦点を見出すための干渉縞の使用を伴う透過照明撮像 |
JP7277051B2 (ja) | 2016-10-26 | 2023-05-18 | モレキュラー デバイシーズ, エルエルシー | コントラストを増進し、かつ焦点を見出すための干渉縞の使用を伴う透過照明撮像 |
WO2019082788A1 (ja) * | 2017-10-26 | 2019-05-02 | コニカミノルタ株式会社 | 画像処理装置、合焦位置特定方法及び合焦位置特定プログラム |
Also Published As
Publication number | Publication date |
---|---|
EP2972231B1 (en) | 2022-09-07 |
US10152823B2 (en) | 2018-12-11 |
CN105190290B (zh) | 2019-06-14 |
US20160027206A1 (en) | 2016-01-28 |
US20190108674A1 (en) | 2019-04-11 |
WO2014165091A3 (en) | 2014-11-27 |
JP6503335B2 (ja) | 2019-04-17 |
EP2972231A2 (en) | 2016-01-20 |
WO2014165091A2 (en) | 2014-10-09 |
CN105190290A (zh) | 2015-12-23 |
US10930061B2 (en) | 2021-02-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10930061B2 (en) | Three-dimensional image processing to locate nanoparticles in biological and nonbiological media | |
Chen et al. | Three-dimensional residual channel attention networks denoise and sharpen fluorescence microscopy image volumes | |
JP6235563B2 (ja) | ウェーブレット分析を用いた単一粒子位置特定の方法および装置 | |
Baddeley et al. | 4D super-resolution microscopy with conventional fluorophores and single wavelength excitation in optically thick cells and tissues | |
EP2601513B1 (en) | Enhancing visual assessment of samples | |
Becker et al. | Deconvolution of light sheet microscopy recordings | |
US10032064B2 (en) | Visualization and measurement of cell compartments | |
EP3724854A1 (en) | Generating virtually stained images of unstained samples | |
JP2013515958A (ja) | 高密度の確率的サンプリング撮像のシステムおよび方法 | |
JP2014137558A (ja) | 撮像装置、撮像システム、および画像処理方法 | |
Zhao et al. | Quantitatively mapping local quality of super-resolution microscopy by rolling Fourier ring correlation | |
CN116391143A (zh) | 通过自适应扫描定位单个荧光染料分子的方法和荧光显微镜 | |
Hoppe et al. | Three-dimensional FRET reconstruction microscopy for analysis of dynamic molecular interactions in live cells | |
Becker et al. | Visualizing minute details in light‐sheet and confocal microscopy data by combining 3D rolling ball filtering and deconvolution | |
Owen et al. | Super-resolution imaging by localization microscopy | |
Maalouf | Contribution to fluorescence microscopy, 3D thick samples deconvolution and depth-variant PSF | |
Wouterlood | 3‐D reconstruction of neurons from multichannel confocal laser scanning image series | |
Hardo et al. | Quantitative Microbiology with Microscopy: Effects of Projection and Diffraction | |
Wouterlood et al. | Translation, touch, and overlap in multi-fluorescence confocal laser scanning microscopy to quantitate synaptic connectivity | |
Pankajakshan et al. | Deconvolution and denoising for confocal microscopy | |
Li | THE NOISE AND INFLUENCE ON FLUORESCENCE MICROSCOPY | |
Hardo et al. | Quantitative microbiology with widefield microscopy: navigating optical artefacts for accurate interpretations | |
Koho | Bioimage informatics in STED super-resolution microscopy | |
Alain | Contribution to fluorescence microscopy, 3D thick samples deconvolution and depth-variant PSF | |
Wilson | Quantitative analysis of microscopy |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170116 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20171122 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171128 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180228 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180724 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20181017 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20190226 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20190325 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6503335 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |