CN108027981B - 多光谱三维成像系统和方法 - Google Patents
多光谱三维成像系统和方法 Download PDFInfo
- Publication number
- CN108027981B CN108027981B CN201680037990.3A CN201680037990A CN108027981B CN 108027981 B CN108027981 B CN 108027981B CN 201680037990 A CN201680037990 A CN 201680037990A CN 108027981 B CN108027981 B CN 108027981B
- Authority
- CN
- China
- Prior art keywords
- image
- specimen
- processor
- slice
- created
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 106
- 238000003384 imaging method Methods 0.000 title description 23
- 230000008569 process Effects 0.000 claims abstract description 34
- 238000005286 illumination Methods 0.000 claims description 10
- 238000000295 emission spectrum Methods 0.000 claims description 8
- 230000003287 optical effect Effects 0.000 claims description 5
- 238000000342 Monte Carlo simulation Methods 0.000 claims description 4
- 230000006870 function Effects 0.000 description 20
- 238000003860 storage Methods 0.000 description 12
- 238000009826 distribution Methods 0.000 description 11
- 238000000799 fluorescence microscopy Methods 0.000 description 9
- 239000000523 sample Substances 0.000 description 9
- 238000002073 fluorescence micrograph Methods 0.000 description 8
- 238000004590 computer program Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 238000011084 recovery Methods 0.000 description 5
- 239000003795 chemical substances by application Substances 0.000 description 4
- 210000004556 brain Anatomy 0.000 description 3
- 238000009513 drug distribution Methods 0.000 description 3
- 238000001727 in vivo Methods 0.000 description 3
- 239000000463 material Substances 0.000 description 3
- 239000003068 molecular probe Substances 0.000 description 3
- 239000013307 optical fiber Substances 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 2
- 239000002872 contrast media Substances 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 2
- 238000009509 drug development Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 238000007913 intrathecal administration Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 210000000056 organ Anatomy 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 238000002604 ultrasonography Methods 0.000 description 2
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 1
- RYGMFSIKBFXOCR-UHFFFAOYSA-N Copper Chemical compound [Cu] RYGMFSIKBFXOCR-UHFFFAOYSA-N 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- 101100277637 Mus musculus Dffa gene Proteins 0.000 description 1
- 241000700159 Rattus Species 0.000 description 1
- 230000004075 alteration Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000000701 chemical imaging Methods 0.000 description 1
- 238000007635 classification algorithm Methods 0.000 description 1
- 229910052802 copper Inorganic materials 0.000 description 1
- 239000010949 copper Substances 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000008878 coupling Effects 0.000 description 1
- 238000010168 coupling process Methods 0.000 description 1
- 238000005859 coupling reaction Methods 0.000 description 1
- 238000002716 delivery method Methods 0.000 description 1
- 238000002059 diagnostic imaging Methods 0.000 description 1
- 238000007876 drug discovery Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000007429 general method Methods 0.000 description 1
- 239000012216 imaging agent Substances 0.000 description 1
- 238000000338 in vitro Methods 0.000 description 1
- MOFVSTNWEDAEEK-UHFFFAOYSA-M indocyanine green Chemical compound [Na+].[O-]S(=O)(=O)CCCCN1C2=CC=C3C=CC=CC3=C2C(C)(C)C1=CC=CC=CC=CC1=[N+](CCCCS([O-])(=O)=O)C2=CC=C(C=CC=C3)C3=C2C1(C)C MOFVSTNWEDAEEK-UHFFFAOYSA-M 0.000 description 1
- 229960004657 indocyanine green Drugs 0.000 description 1
- 238000002347 injection Methods 0.000 description 1
- 239000007924 injection Substances 0.000 description 1
- 238000001990 intravenous administration Methods 0.000 description 1
- 230000005865 ionizing radiation Effects 0.000 description 1
- 238000012538 light obscuration Methods 0.000 description 1
- 210000004185 liver Anatomy 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000012528 membrane Substances 0.000 description 1
- 238000002156 mixing Methods 0.000 description 1
- 231100000252 nontoxic Toxicity 0.000 description 1
- 230000003000 nontoxic effect Effects 0.000 description 1
- 238000012014 optical coherence tomography Methods 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 108090000623 proteins and genes Proteins 0.000 description 1
- 102000004169 proteins and genes Human genes 0.000 description 1
- 238000011002 quantification Methods 0.000 description 1
- 239000000700 radioactive tracer Substances 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000009870 specific binding Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 238000013222 sprague-dawley male rat Methods 0.000 description 1
- 238000007920 subcutaneous administration Methods 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
- 238000001356 surgical procedure Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
- 230000002792 vascular Effects 0.000 description 1
- 238000004876 x-ray fluorescence Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
- G06T7/0012—Biomedical image inspection
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/6428—Measuring fluorescence of fluorescent products of reactions or of fluorochrome labelled reactive substances, e.g. measuring quenching effects, using measuring "optrodes"
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/645—Specially adapted constructive features of fluorimeters
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/645—Specially adapted constructive features of fluorimeters
- G01N21/6456—Spatial resolved fluorescence measurements; Imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N23/00—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00
- G01N23/02—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material
- G01N23/04—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and forming images of the material
- G01N23/046—Investigating or analysing materials by the use of wave or particle radiation, e.g. X-rays or neutrons, not covered by groups G01N3/00 – G01N17/00, G01N21/00 or G01N22/00 by transmitting the radiation through the material and forming images of the material using tomography, e.g. computed tomography [CT]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/73—Deblurring; Sharpening
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2503/00—Evaluating a particular growth phase or type of persons or animals
- A61B2503/42—Evaluating a particular growth phase or type of persons or animals for laboratory research
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B2576/00—Medical imaging apparatus involving image processing or analysis
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
- A61B5/0073—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by tomography, i.e. reconstruction of 3D images from 2D projections
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/0507—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves using microwaves or terahertz waves
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/053—Measuring electrical impedance or conductance of a portion of the body
- A61B5/0536—Impedance imaging, e.g. by tomography
-
- A—HUMAN NECESSITIES
- A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
- A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
- A61B5/00—Measuring for diagnostic purposes; Identification of persons
- A61B5/05—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves
- A61B5/055—Detecting, measuring or recording for diagnosis by means of electric currents or magnetic fields; Measuring using microwaves or radio waves involving electronic [EMR] or nuclear [NMR] magnetic resonance, e.g. magnetic resonance imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/6428—Measuring fluorescence of fluorescent products of reactions or of fluorochrome labelled reactive substances, e.g. measuring quenching effects, using measuring "optrodes"
- G01N2021/6439—Measuring fluorescence of fluorescent products of reactions or of fluorochrome labelled reactive substances, e.g. measuring quenching effects, using measuring "optrodes" with indicators, stains, dyes, tags, labels, marks
- G01N2021/6441—Measuring fluorescence of fluorescent products of reactions or of fluorochrome labelled reactive substances, e.g. measuring quenching effects, using measuring "optrodes" with indicators, stains, dyes, tags, labels, marks with two or more labels
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10004—Still image; Photographic image
- G06T2207/10012—Stereo images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10064—Fluorescence image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10072—Tomographic images
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10141—Special mode during image acquisition
- G06T2207/10152—Varying illumination
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30024—Cell structures in vitro; Tissue sections in vitro
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30004—Biomedical image processing
- G06T2207/30101—Blood vessel; Artery; Vein; Vascular
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H30/00—ICT specially adapted for the handling or processing of medical images
- G16H30/40—ICT specially adapted for the handling or processing of medical images for processing medical images, e.g. editing
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Life Sciences & Earth Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Chemical & Material Sciences (AREA)
- Theoretical Computer Science (AREA)
- Analytical Chemistry (AREA)
- Biochemistry (AREA)
- Radiology & Medical Imaging (AREA)
- Medical Informatics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Quality & Reliability (AREA)
- Pulmonology (AREA)
- Public Health (AREA)
- Veterinary Medicine (AREA)
- Heart & Thoracic Surgery (AREA)
- Molecular Biology (AREA)
- Surgery (AREA)
- Animal Behavior & Ethology (AREA)
- Biophysics (AREA)
- Biomedical Technology (AREA)
- Chemical Kinetics & Catalysis (AREA)
- Optics & Photonics (AREA)
- Computer Graphics (AREA)
- Geometry (AREA)
- Software Systems (AREA)
- Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种创建标本图像的计算机实现的方法,所述方法包括:接收标本的第一切面的第一图像,所述第一图像使用第一波长的不可见光创建;接收所述标本的第二切面的第二图像,所述第二切面邻近于所述第一切面并且所述第二图像使用所述第一波长的不可见光创建;共同配准所述第一图像和所述第二图像;以及由处理器使用下一个图像过程创建所述第一切面的单一平面图像。
Description
相关申请的交叉引用
本申请要求2015年5月21日提交的、标题为“Multi-Spectral Three DimensionalImaging System and Method”的美国临时申请序列号62/164,800的权益,所述申请的全部公开内容以引用方式并入本文。
技术领域
本发明构思涉及成像,并且更具体地,涉及使用不同波长的光进行成像。
背景技术
多光谱荧光低温切片(cryoslice)成像先前已经用来在独立或改进的低温切片成像仪[1,2]中测量体外药物分布。单一成像系统中的这类特殊性可导致每次扫描具有高成本。为了高流通量和低成本,构造具有对应的软件包的荧光成像仪将是有价值的,所述荧光成像仪可与已经处于适当位置的常见的低温切片器械协同工作。为此,在此概括的方法展示用于现有低温切片器械的多功能的、可转运的附加程序的低温荧光成像技术的工作流程。
发明内容
本发明构思的方面包括一种创建标本图像的计算机实现的方法,所述方法包括:由处理器接收标本的第一切面的第一图像,所述第一图像使用第一波长的不可见光创建;由处理器接收标本的第二切面的第二图像,所述第二切面邻近于第一切面并且第二图像使用第一波长的不可见光创建;共同配准第一图像和第二图像;以及由处理器使用下一个图像过程创建第一切面的单一平面图像。
方法可包括:由处理器接收标本的第N切面的使用第一波长的不可见光创建的图像;以及由处理器使用邻近标本切面的可使用下一个图像处理创建的至少三个图像来创建标本的3D图像。
方法还可包括:由处理器接收标本的第一切面的第三图像,所述第三图像使用第二波长的不可见光创建;由处理器接收标本的第二切面的第四图像,第四图像使用第二波长的不可见光创建;由处理器共同配准第一图像和第二图像。
方法还可包括:由处理器对第一图像进行去模糊;使用可见光图像确定组织类型,并且去模糊可基于组织类型(例如)由处理器使用基于存储历史或库的分类算法执行。根据各方面,去模糊可包括蒙特卡罗模拟、点扩散函数方法和去卷积方法中的一种。还根据各方面,去卷积方法可包括测量的点扩散函数核心、模拟的点扩散函数核心、路西理查森方法、维纳滤波去卷积、范西特泽尼克去卷积、盲去卷积和正则化去卷积方法中的一种。
根据各方面,标本可与具有处于近似200nm至1000nm范围中的发射光谱的至少一个第一荧光团接触。并且根据各方面,标本可与第二荧光团接触,所述第二荧光团具有处于近似200nm至1000nm范围中并且不同于所述第一荧光团的发射光谱。
并且根据各方面,所述方法还可包括:由处理器接收标本的第一切面的使用可见光创建的图像;以及由处理器共同配准标本的第一切面的图像。
根据另一方面,本发明构思是用于创建标本图像的系统,所述系统包括光源;图像捕获装置;以及处理器。光源可包括可见光源和/或不可见光源。还根据各方面,所述系统可包括显示器和/或用于输出数据(包括使用本发明构思的系统和方法创建的图像)的输出构件。
另一方面包括用于实现根据本发明构思创建标本图像的方法的非暂态程序产品。
本发明构思的又一方面包括一种创建标本图像的计算机实现的方法,所述方法包括:由处理器接收标本的第N切面的第NX图像,所述第NX图像使用第一波长的光创建;由处理器接收标本的第N切面的第NY图像,所述第NY图像使用第二波长的光创建,Y等于X+l并且M等于N+l,并且第M切面邻近第N切面;由处理器接收标本的第N切面的可见光图像;所述可见光图像使用可见光创建;由处理器共同配准第NX图像、第NY图像和可见光图像;以及
由处理器对第NX图像和第NY图像使用下一个图像过程来创建标本的3D图像。
所述方法还可包括反复进行以下各项:接收标本的第N切面的第NX图像;接收标本的第N切面的第NY图像;共同配准第NX图像、第NY图像和可见光图像;以及创建3D图像,其中NX=Nx+l、Ny=Ny+1并且M=M+1。所述方法还可包括接收第N切面的第P光图像,其中N为整数倍。
附图说明
图1是示出根据本发明各方面的过程的说明性流程图;
图2示出根据本发明各方面的环境中的装置;
图3A和图3B示出使用本发明构思的一个方面创建的图像;
图4是根据本发明各方面捕获的一系列说明性连续切面图像;
图5A、图5B和图5C是根据各方面的说明性截面图像;
图6示出根据本发明各方面的环境中的装置;
图7示出根据本发明各方面的环境中的装置;
图8示出根据本发明各方面的环境中的装置;
图9示出根据本发明各方面的环境中的装置;并且
图10示出根据本发明各方面的环境中的装置。
具体实施方式
对动物、器官或组织内的各种物质的荧光分布进行成像的能力在药物发现和研发中已经被证明是有价值的。由于光学光在组织中的高散射,已经证明体内荧光成像尤其对于处于一定深度的靶而言是一个难题。体内体荧光成像已经使用断层成像恢复以及落射照明方案和透射照明方案执行。然而,使用这些形式的成像的荧光恢复已经示出对于位于深处和高度吸收的器官(诸如肝脏)具有差的准确性。另外,体内荧光恢复的分辨率极限广泛地被认为归因于荧光恢复问题的不适定性质而最多受限于几毫米。这一类分辨率极限降低提供关于相关(例如,脉管的)特性长度标度水平超过距受试体表面约几百微米的深度的任何有意义的荧光信息的能力。随着药物研发的进展,当在荧光中存在宽视场的脉管和靶向成像试剂时,仅检查荧光分布的体特性是不够的。为了执行具有增加的分辨率的荧光成像,可对低温切片与荧光落射照明成像执行耦合。虽然先前已经展示可用射线照相方法执行药物分布成像,但是荧光低温切片成像可在不使用电离辐射的情况下执行。另外,许多试剂是稳定贮存且无毒的。使用多光谱成像技术对若干试剂同时进行成像也是可能的。
本发明构思的各方面提供用于低温切片成像仪的独立(但便捷的)附加程序的简单的工作流程和软件,所述低温切片成像仪是在许多实验室中可用的一类常用器械。然而,由于根据本发明构思的各方面的荧光成像系统可被构造用于转运,因而将荧光成像与单一低温切片器械组合在一起不是必要的。根据本发明构思的器械用法和处理方案的多功能性部分地在于其可转运性。例如,在使用被设计用于全身成像的一个低温切片器械成像之后,将荧光器械移动至被构造用于高分辨率、单一器官成像的另一个低温切片器是可能的。
包括荧光成像的现有低温切片工作流程的延伸打开了使用分子探针的切削刃的大门。本发明的各方面使得在使用本发明构思的成像方案的同时,可能测量和可视化药物分布和/或分子探针,通过不同递送方法(例如,通过鞘内、口服、静脉内、皮下途径、通过吸入等)利用分子探针(单独地或组合地)给药。本发明的各方面能够同时实现感兴趣区的成像、图像的共同配准和多个荧光团的渲染。而且,相对强度量化可例如通过利用一个或多个荧光团的不同性质和分布来执行。三维图像可被创建和显示,这允许详细分析通过感兴趣区域的探针转运。本发明构思的方面利用K FLARE系统,其被优化用于与在包括吲哚菁绿的荧光引导手术中常见地使用的荧光团一起使用,但许多其他荧光团可使用本发明构思的方法和系统成像。例如参见表1中列出的探针。最后,光学数据与另外的模态(诸如x射线CT和MRI)的配准可实现混合试剂的多模态验证。
图1是示出创建标本图像的计算机实现的方法100的过程的流程图;所述方法可包括由处理器执行的过程。根据说明性方法的第一过程可包括由处理器接收标本的第一切面的第一图像102,所述第一图像使用第一波长的不可见光创建。通过不可见光,应当理解,可包括近红外(NIR)或红外(IR)光谱的波长中的电磁能以及诸如(如X射线荧光中的)X射线的电磁能。此外,超声、MRI和现已知的或随后研发的其他模态可用于解剖引导。此外,不可见光可包括紫外光。不可见光还可包括现已知的或随后研发的荧光团发荧光所处的波长。
所述方法的另一个过程可包括接收标本的第二切面的第二图像104,第二切面邻近于第一切面并且第二图像使用第一波长的不可见光创建。可设想,可根据本发明构思的各方面对标本的连续但非顺序的切面(例如,每隔一个切面、每隔三个切面)进行成像,或可对顺序的和非顺序的切面的进行组合成像并且进行处理。可执行的下一个过程包括共同配准第一图像和第二图像106。并且根据本发明构思的方面的最后的过程包括使用下一个图像过程创建第一切面的单一平面图像108。
可结合上述过程执行的任选的过程包括接收标本的第N切面的使用第一波长的不可见光创建的图像110。另外的任选的过程包括使用邻近标本切面的至少三个图像创建标本的3D图像(图3)。可对多个切面重复地执行N次这些任选的过程,以创建标本(或其部分)的完全的(或不完全的)3D渲染。创建3D图像可通过下一个图像处理执行。这种方法可被描述成包括如下:接收标本的第N切面的第NX图像,所述第NX图像使用第一波长的光创建;接收标本的第N切面的第NY图像,所述第NY图像使用第二波长的光创建,Y等于X+l并且M等于N+l,并且第M切面邻近第N切面;接收标本的第N切面的可见光图像;所述可见光图像使用可见光创建;由处理器共同配准第NX图像、第NY图像和可见光图像;以及对第NX图像和第NY图像使用下一个图像过程来创建标本的3D图像。根据本发明构思的方法可包括反复进行以下中的每一项:接收标本的第N切面的第NX图像;接收标本的第N切面的第NY图像;共同配准第NX图像、第NY图像和可见光图像;以及创建3D图像,其中Nx=Nx+l、NY=Ny+1并且M=M+1。
另外,根据本发明构思的方法可包括接收第N切面的第P光图像,其中N为整数倍。使用光图像的共同配准对确定图像数据的适当布局和对确定组织类型可能是有用的。将每个荧光图像与同一切面的每个可见光图像共同配准可能是不必要的并且每个第5可见光图像、第10可见光图像或其他整数倍(第P)可见光图像可用于与其第P不可见光图像共同配准。
可以考虑可使用不同的荧光团,使得可使不同波长的光成像。可结合特异性结合使用不同荧光团来发现和照明与标本相关联的不同蛋白或结构。因此,可根据本发明的各方面执行的另外的任选过程包括接收标本的第一切面的第三图像114,所述第三图像使用第二波长的不可见光创建。下一个任选过程可包括接收标本的第二切面的第四图像116,所述第四图像使用第二波长的不可见光创建。下一个过程可包括共同配准第三图像和第四图像118。可执行共同配准以确保不同切面内的相同结构在图像中被适当地对齐。
根据本发明构思的方面,用来接触标本的荧光团可表现出处于近似200nm至1000nm范围中的发射光谱,并且如上文所论述,可在单一标本上使用多个荧光团,每个荧光团具有不同于其他荧光团的发射光谱。荧光团可包括但不限于表1中详述的那些。
可执行的另一个任选的过程包括对第一图像和/或任何其他图像进行去模糊。可在使用白光图像确定组织类型之后基于组织类型执行去模糊。可使用任何适当方法来执行去模糊,所述适当方法包括但不限于蒙特卡罗模拟、点扩散函数方法和去卷积方法。另外,去卷积方法可包括但不限于测量的点扩散函数核心、模拟的点扩散函数核心、路西理查森方法、维纳滤波去卷积、范西特泽尼克去卷积、盲去卷积和正则化去卷积方法。在本发明的另一个方面,结构图像过程可包括在具有将均匀结构图像的边缘和区域保留在所产生的荧光/功能图像中的约束的情况下,将已知点扩散函数从图像概率性地去卷积的去卷积过程。
另一个任选的过程包括使用白光的替代选择用于图像恢复、去模糊和重构。任何种类的共同配准的结构成像模态(诸如x射线CT、超声、MRI等)可用于获知(informed)去卷积。
另外,图像可首先由人或自动分类方法去模糊,之后基于针对每个区域定义的点扩散函数去模糊。
可对第一图像和/或任何其他图像执行去模糊。去模糊可包括移除损害图像清晰度的图像伪影的过程。能够经得起去模糊的图像伪影可以是亚表面荧光、相机光学器件像差和其他环境影响(诸如装备的振动)的结果。
可在使用白光图像确定组织类型之后基于组织执行去模糊。可使用任何适当方法来执行去模糊,所述适当方法包括但不限于蒙特卡罗模拟、点扩散函数方法和去卷积方法。
点扩散函数被理解成包括取用图像中的单一点或多个点的组合并且校正导致图像模糊的图像伪影的手段。点扩散函数是用于对图像进行去模糊的优选方法,其中模糊是亚表面荧光的结果。
所使用的去卷积方法可包括但不限于测量的点扩散函数核心、模拟的点扩散函数核心、路西理查森方法、维纳滤波去卷积、范西特泽尼克去卷积、盲去卷积和正则化去卷积方法。在本发明的另一个方面,结构图像过程可包括在具有将均匀结构图像的边缘和区域保留在所产生的荧光/功能图像中的约束的情况下,将已知点扩散函数从图像概率性地去卷积的去卷积过程。
虽然上文所论述的方法已经提及使用如本文所定义的不可见光进行成像,但是也可根据本发明构思的方面使用可见光进行成像。可结合其他过程使用的任选的过程包括接收标本的第一切面的使用可见光创建的图像;以及共同配准标本的第一切面的图像。
还设想用于创建标本图像的系统。根据各方面的说明性系统200在图2中示出并且包括光源202。光源202可适于发射光的任何波长或波长组合。也就是说,光源202可发射可见光以及致使荧光团发荧光的波长。光源202可被配置来发射单独的特定波长或同时连同其他波长一起发射。光源202可结合物理滤波器203使用。另外,可以数字的方式执行滤波以操纵图像数据以便产生以数字的方式更改的图像。还示出的是图像捕获装置204。图像捕获装置204可包括数字相机、数字视频捕获装置、电荷耦合装置(CCD)、增强的电荷耦合装置(iCCD)、膜、闪烁器、光学相干断层成像术、另外的光和用于解剖引导的医学成像模态(诸如x射线)。系统200包括处理器206,所述处理器206具体地根据本发明构思被编程来执行所述方法。处理器206可以单一单元或连接在一起或未连接在一起的多个单元实施。例如,第一过程可由处于一个位置处的处理器执行并且后续过程可由不同处理器执行,使得可对从一个处理器发送至另一个处理器的数据执行过程的组合。显示器208被示出。显示器208可适于示出使用根据本发明构思的方法创建的重构图像。显示器208可以是未知的或随后研发的任何适当的显示器。
根据本发明构思的替代性实施例,可使用可降低对共同配准各种分类(即,具有光亮对光熄灭的荧光、低分辨率对高分辨率白光)的图像的需要的相对高分辨率的相机。根据各方面,高分辨率的、固有地共同配准的白光和荧光图像可同时被聚集和存储。可根据各方面使用的高分辨率的示例包括1024乘1024像素或36498乘2432像素或任何其他适当分辨率。
根据这类方面,荧光重构可以如下执行:暴露的块面的白光和荧光图像被捕获用于每个图像切片。基准参考标记在白光图像中是可见的,并且通常是被钻到块中的油墨填充的孔。孔被构造成笔直的,这允许使用孔来将一个白光图像与下一个对准(即,顺序切面的图像可与彼此对准)。对于每个切片,白光图像和荧光图像被天然地共同配准,意味着当白光图像被对准时,那些对准转换可用来使荧光图像对准。以此方式,白光和荧光信息的完全对准的3D分布可被聚集在一起。
在本发明的另一方面,如果使用高分辨率相机聚集在一起的荧光图像仍具有亚表面荧光的外观,那么亚表面荧光的影响可通过使用去卷积方法或下一种图像处理方法移除。这些校正所需的参数可启发式地或根据经验确定。这些参数对于每个组织类型可能是不同的。
根据本发明的另外的方面,可使用白光图像,使用颜色匹配、图谱配准或混合技术,而不使用另外的成像模态(诸如x射线XCT或MRI)、或人工干预或这些的组合执行组织识别。当组织被识别时,查找表可用来隔离用于亚表面荧光移除的适当参数。每个组织然后可用适当参数处理以用于恢复。这导致如由校正的光子计数测量的荧光的分布。
在这类情况下,当系统被很好地表征(即,全部相机和光纤的效率和稳定性是已知的)时,然后可将这一类分布转化成荧光的定量分布。可替代地,如果被注射的荧光团的总分子计数是已知的并且整个身体已经被成像,那么使用比率测量技术来使荧光分布恢复是可能的。可替代地,如果荧光标准在视域中也是可见的,那么基于标准的光子计数来将荧光缩放至一定浓度。
根据这些方面的工作流程可向图像添加元信息,使得可在数据库中索引3D荧光图像和白光图像。元信息的非限制性示例可包括与受试体名称成对的识别号码、成像日期、用来捕获信息的模态、其他号码、项目或研究特定信息、像素大小或体素大小等。这意味着图像然后可在世界上任何地方通过云进行访问。
根据本发明构思的方法可被实施为非暂态计算机程序产品。可利用一个或多个计算机可读存储装置或计算机可读介质的任何组合。计算机可读介质可以是计算机可读存储介质。计算机可读存储装置可以是(例如)但不限于电子、磁性、光学、电磁、或半导体系统、设备或装置或者前述系统、设备或装置的任何合适组合。计算机可读存储装置的更特定的示例(非详尽列表)将包括以下各项:便携式计算机软盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦可编程只读存储器(EPROM或闪存)、光纤、便携式光盘只读存储器(CD-ROM)、光学存储装置、磁性存储装置或前述介质的任何合适组合。在本文档的上下文中,计算机可读存储装置可以是可存储供指令执行系统、设备或装置使用或者与所述指令执行系统、设备或装置结合使用的程序的任何有形装置或介质。术语“计算机可读存储装置”或“其变型”并不涵盖单一传播介质,诸如铜电缆、光纤或无线传输介质。
在计算机可读存储装置或计算机可读介质上实施的程序代码可以使用任何适当的介质来传输,所述介质包括但不限于无线、有线线路、光纤电缆、RF等或前述介质的任何合适组合。
用于进行本发明方面的操作的计算机程序代码可以用一种或多种编程语言的任何组合来编写,所述编程语言包括面向受试体的编程语言,如Java、Smalltalk、C++等,以及常规程序性编程语言,如“C”编程语言或类似的编程语言。程序代码可以完全在用户的计算机上运行、部分地在用户的计算机上运行、作为独立的软件包运行,部分地在用户的计算机上且部分地在远程计算机上运行,或者完全在远程计算机或服务器上运行。在后一种场景中,远程计算机可通过任何类型的网络(包括局域网(LAN)或广域网(WAN))连接到用户的计算机,或者可连接到外部计算机(例如,通过使用互联网服务提供商的互联网)。
本文中参考根据本发明的实施例的方法、设备(系统)和计算机程序产品的流程图图解和/或方框图来描述本发明的各方面。应了解,流程图图解和/或方框图的每一个方框以及流程图图解和/或方框图中的方框的组合可通过计算机程序指令来实现。这些计算机程序指令可以提供给一个或多个通用计算机、专用计算机或其他可编程数据处理设备的一个或多个处理器以便产生一种机器,使得通过计算机或其他可编程数据处理设备的一个或多个处理器执行的指令创建用于实现流程图和/或方框图一个或多个方框中所规定的功能/动作的手段。
还可以将这些计算机程序指令存储在可以引导一个或多个计算机、一个或多个其他可编程数据处理设备或一个或多个其他装置以特定方式起作用的一个或多个的计算机可读存储装置或计算机可读介质中,使得存储在一个或多个计算机可读存储装置或计算机可读介质中的指令产生一种制品,所述制品包括实现在流程图和/或方框图的一个或多个方框中规定的功能/操作的指令。
计算机程序指令也可以加载到一个或多个计算机、一个或多个其他可编程数据处理设备或一个或多个其他装置上以致使在一个或多个计算机、一个或多个其他可编程数据处理装置或一个或多个其他装置上执行一系列操作步骤来产生计算机实现的过程,使得在一个或多个计算机、一个或多个其他可编程数据处理设备或一个或多个其他装置上运行的指令提供用于实现流程图和/或方框图一个或多个方框中所规定的功能/动作的过程。
本文所使用的术语仅用于描述具体实施例的目的,并且不意图限制本发明。如本文所用,除非上下文另外明确说明,否则单数形式“一(a/an)”和“所述(the)”也意图包括复数形式。还应理解,术语“包括(comprises)”和/或“包括(comprising)”当在本说明书中使用时,规定存在所陈述的特征、整数、步骤、操作、元件和/或部件,但是不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、部件和/或其群组。
以下权利要求书中的所有装置或步骤加功能要素的对应结构、材料、动作和等效物意图包括用于结合如具体要求保护的其他所要求保护的要素来执行所述功能的任何结构、材料或动作。出于说明和描述的目的已经呈现了对本发明的描述,但并不意图为详尽的或将本公开限制于呈所公开形式的本发明。在不脱离本发明的范围和精神的情况下,许多修改和变化对于本领域普通技术人员来说将是显而易见的。选择并且描述实施例以便最好地解释本发明的原理和实际应用,并且使得其他本领域普通技术人员了解各种实施例以及各种修改适合于所涵盖的具体用途。
一般方法:为了测量,首先通过适当方法预备受试体以供研究(即,用给定剂量的造影剂注射并且然后通常在适当时间之后处死)。以最佳切削温度材料(O.C.T.)冷冻感兴趣的样本。在低温切片器上将O.C.T.块连续地切片,其中每个切片或切面的高分辨率的白光图像与荧光图像被协同取用。可在适当滤波的情况下对多个荧光团同时成像。基于解剖和基准标记剪裁和对准切面图像。如果使用多个相机(即,白光相机被定位成使得感兴趣的受试体由白光和荧光相机从不同角度观看),那么12参数仿射配准连同在低温切片图像处理中执行的标准刚性对准一起执行。然后使用Steyer等人呈现的修改形式的方法对荧光图像进行处理[3],从而导致产生被共同配准到白光图像叠层的3D荧光分布恢复。
示例
首次接受试验的雄性斯普拉-道来大鼠鞘内注射70uL的浓度为100uM的ZW800-1[4]。允许造影剂分布90分钟,之后将受试体处死并且将大脑切除。然后将大脑在O.C.T.中冷冻并且使用徕卡3050低温恒温器(德国韦茨拉尔的徕卡相机AG)、高分辨率佳能EOS 700白光相机(美国纽约梅尔维尔的佳能)和K-FLARE外科手术荧光成像系统(美国马萨诸塞州伍斯特Curadel有限公司)成像。
图4示出在连续切面上取用的一组图像。图5A-C示出根据本发明构思的各方面成像的切面。具体地,图5A示出根据本发明构思的各方面预备和成像的大鼠大脑的矢状切面,图5B示出冠状切面并且图5C示出横切面。
荧光示踪剂的测量的分布基于先前研究与期望的分布匹配。所述方法展示了可使用单独的荧光成像系统与建立的低温切片器械协同执行多功能荧光成像技术。
参考文献:
[1]Roy等人,Anat Rec(2009).
[2]Sarantopoulos等人,Mol Imaging Biol(2011).
[3]Steyer等人,Annals of Biomed.Eng.(2009).
[4]Choi等人,Anger Chem Int Ed Engl(2011).
表1
Claims (14)
1.一种创建标本图像的计算机实现的方法,所述方法包括:
由处理器接收标本的第一切面的第一图像,所述第一图像是通过使用第一波长的不可见光对所述标本的落射照明创建的;
由所述处理器接收所述标本的第二切面的第二图像,所述第二切面邻近于所述第一切面并且所述第二图像是通过使用所述第一波长的不可见光对所述标本的落射照明创建的;
由所述处理器共同配准所述第一图像和所述第二图像;
由所述处理器从所述第一图像和所述第二图像创建所述第一切面的单一平面图像;
其中所述标本与至少一个第一荧光团接触,所述第一荧光团具有处于近似200nm至1000nm范围中的发射光谱;以及
其特征在于,所述方法还包括由所述处理器对所述第一图像或所述第二图像或所述单一平面图像进行去模糊,其中所述去模糊基于所述处理器使用可见光图像确定至少一个组织类型并基于组织类型向所述图像施加去模糊算法。
2.如权利要求1所述的方法,其还包括:
由所述处理器接收所述标本的第三切面的图像,所述图像使用所述第一波长的不可见光创建;以及
由所述处理器使用邻近标本切面中的至少三个图像创建所述标本的3D图像。
3.一种用于创建标本图像的系统,所述系统包括:
光源;
图像捕获装置;
可见光源;
处理器,所述处理器被配置来:
接收标本的第一切面的第一图像,所述第一图像是通过使用第一波长的不可见光对所述标本的落射照明创建的;
接收所述标本的第二切面的第二图像,所述第二切面邻近于所述第一切面并且所述第二图像是通过使用所述第一波长的不可见光对所述标本的落射照明创建的;
共同配准所述第一图像和所述第二图像;
从所述第一图像和所述第二图像创建所述第一切面的单一平面图像;
接收所述标本的所述第一切面的第一可见光图像,所述第一可见光图像使用可见光创建;以及
共同配准所述标本的所述第一切面的图像;
其特征在于,所述处理器进一步被配置来:
对所述第一图像或所述第二图像或所述单一平面图像进行去模糊;以及
使用可见光图像确定至少一个组织类型,其中所述去模糊由所述处理器基于针对所确定的组织类型的去模糊算法执行。
4.如权利要求3所述的系统,其中所述可见光源是白光源。
5.如权利要求4所述的系统,其中所述处理器进一步被配置来使用下一个图像过程创建3D图像,其中所述处理器被配置来:
接收所述标本的第N切面的使用所述第一波长的不可见光创建的第N图像;并且
使用邻近标本切面的至少三个图像创建所述标本的3D图像。
6.如权利要求4所述的系统,其中所述标本与至少一个第一荧光团接触,所述第一荧光团具有处于近似200nm至1000nm范围中的发射光谱。
7.如权利要求4所述的系统,其中所述标本与第一荧光团和不同的第二荧光团接触,所述第二荧光团具有处于近似200nm至1000nm范围中的发射光谱。
8.如权利要求4所述的系统,其中所述处理器进一步被配置来:
接收所述标本的所述第一切面的第三图像,所述第三图像使用第二波长的不可见光创建;
接收所述标本的第二切面的第四图像,所述第四图像使用所述第二波长的不可见光创建;
共同配准所述第三图像和所述第四图像;以及
使用邻近标本切面的至少三个图像创建所述第一切面的单一平面图像。
9.如权利要求8所述的系统,其中所述处理器进一步被配置来:
使用去模糊算法对所述第一图像进行去模糊;以及由所述处理器使用可见光图像确定组织类型,其中所述去模糊算法基于所确定的组织类型执行。
10.如权利要求9所述的系统,其中所述去模糊包括光学转运的解析解、蒙特卡罗模拟、点扩散函数方法和去卷积方法中的一种。
11.如权利要求10所述的系统,其中所述去卷积方法包括测量的点扩散函数核心、模拟的点扩散函数核心、路西理查森方法、维纳滤波去卷积、范西特泽尼克去卷积、盲去卷积和正则化去卷积方法中的一种。
12.如权利要求3或4所述的系统,其还包括:
显示器。
13.一种创建标本图像的计算机实现的方法,所述方法包括:
由处理器接收标本的第一切面的第一图像,所述第一图像是通过使用第一波长的不可见光对所述标本的落射照明创建的;
由所述处理器接收所述标本的第二切面的第二图像,所述第二切面邻近于所述第一切面并且所述第二图像是通过使用所述第一波长的不可见光对所述标本的落射照明创建的;
由所述处理器共同配准所述第一图像和所述第二图像;
由所述处理器从所述第一图像和所述第二图像创建所述第一切面的单一平面图像;
由所述处理器对所述第一图像或所述第二图像或所述单一平面图像进行去模糊;
使用可见光图像确定至少一种组织类型,其中所述去模糊基于针对所确定的组织类型的去模糊算法执行;
由所述处理器接收所述标本的第三切面的图像,所述图像是通过使用所述第一波长的不可见光对所述标本的落射照明创建的;以及
由所述处理器使用邻近标本切面的至少三个图像创建所述标本的3D图像;
其中所述标本与具有处于近似200nm至1000nm范围中的发射光谱的至少一个第一荧光团接触。
14.如权利要求13所述的方法,其中所述处理器进一步被配置为:
接收所述标本的第N切面的第N图像,所述第N图像使用所述第一波长的不可见光创建;以及
使用邻近标本切面的至少三个图像创建所述标本的3D图像。
Applications Claiming Priority (5)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201562164800P | 2015-05-21 | 2015-05-21 | |
US62/164,800 | 2015-05-21 | ||
US15/158,928 | 2016-05-19 | ||
US15/158,928 US9799113B2 (en) | 2015-05-21 | 2016-05-19 | Multi-spectral three dimensional imaging system and method |
PCT/US2016/033547 WO2016187549A1 (en) | 2015-05-21 | 2016-05-20 | Multi-spectral three dimensional imaging system and method |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108027981A CN108027981A (zh) | 2018-05-11 |
CN108027981B true CN108027981B (zh) | 2022-03-15 |
Family
ID=57320905
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201680037990.3A Expired - Fee Related CN108027981B (zh) | 2015-05-21 | 2016-05-20 | 多光谱三维成像系统和方法 |
Country Status (9)
Country | Link |
---|---|
US (2) | US9799113B2 (zh) |
EP (1) | EP3298588B1 (zh) |
JP (1) | JP2018528498A (zh) |
KR (1) | KR20180018580A (zh) |
CN (1) | CN108027981B (zh) |
AU (1) | AU2016263801B2 (zh) |
BR (1) | BR112017024936A2 (zh) |
CA (1) | CA2986727C (zh) |
WO (1) | WO2016187549A1 (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10580130B2 (en) * | 2017-03-24 | 2020-03-03 | Curadel, LLC | Tissue identification by an imaging system using color information |
US20180357819A1 (en) * | 2017-06-13 | 2018-12-13 | Fotonation Limited | Method for generating a set of annotated images |
US11100350B2 (en) * | 2018-02-19 | 2021-08-24 | Avigilon Corporation | Method and system for object classification using visible and invisible light images |
EP3633614A1 (en) * | 2018-10-03 | 2020-04-08 | FEI Company | Object tracking using image segmentation |
CN112747822A (zh) * | 2020-07-17 | 2021-05-04 | 奕目(上海)科技有限公司 | 一种三维成像系统和方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008005991A1 (en) * | 2006-07-03 | 2008-01-10 | Beth Israel Deaconess Medical Center, Inc. | Invisible light fluorescent platelets for intraoperative detection of vascular thrombosis |
CN102007369A (zh) * | 2008-02-18 | 2011-04-06 | 维森盖特有限公司 | 利用紫外线放射对活细胞进行3d成像 |
WO2012068142A3 (en) * | 2010-11-15 | 2012-09-07 | Tissuevision, Inc. | Systems and methods for imaging and processing tissue |
WO2014165091A2 (en) * | 2013-03-12 | 2014-10-09 | Cytoviva, Inc. | Three-dimensional image processing to locate nanoparticles in biolgical and nonbiological media |
Family Cites Families (49)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH01169305A (ja) | 1987-12-25 | 1989-07-04 | Hitachi Ltd | 顕微鏡装置のパターン検出方法 |
US5422730A (en) | 1994-03-25 | 1995-06-06 | Barlow; Clyde H. | Automated optical detection of tissue perfusion by microspheres |
DE59708387D1 (de) | 1996-07-29 | 2002-11-07 | Leica Microsystems | Scheiben-mikrotom |
US5836877A (en) | 1997-02-24 | 1998-11-17 | Lucid Inc | System for facilitating pathological examination of a lesion in tissue |
EP1078257A4 (en) | 1998-05-09 | 2007-07-18 | Iconisys Inc | METHOD AND APPARATUS FOR COMPUTER-ASSISTED DIAGNOSIS OF RARE CELLS, INCLUDING FETAL CELLS |
US6236708B1 (en) * | 1998-11-25 | 2001-05-22 | Picker International, Inc. | 2D and 3D tomographic X-ray imaging using flat panel detectors |
US6330348B1 (en) | 1999-01-21 | 2001-12-11 | Resolution Sciences Corporation | Method and apparatus for measurement of microtome performance |
US6387653B1 (en) | 1999-04-09 | 2002-05-14 | Culterra, Llc | Apparatus and method for automatically producing tissue slides |
CN1384949A (zh) | 1999-04-13 | 2002-12-11 | 色品视觉医学体系股份有限公司 | 组织重现和图像自动分析 |
US6256366B1 (en) * | 1999-07-22 | 2001-07-03 | Analogic Corporation | Apparatus and method for reconstruction of volumetric images in a computed tomography system using sementation of slices |
US6844150B2 (en) * | 2000-08-24 | 2005-01-18 | The Regents Of The University Of California | Ultrahigh resolution multicolor colocalization of single fluorescent probes |
GB0030310D0 (en) | 2000-12-13 | 2001-01-24 | Medical Res Council | Apparatus and method for imaging a histological sample |
DE10110511C1 (de) | 2001-02-28 | 2002-10-10 | Attomol Gmbh Molekulare Diagno | Verfahren zur Herstellung eines Arrays zur Detektion von Komponenten aus einer biologischen Probe |
WO2003077749A2 (en) | 2002-03-12 | 2003-09-25 | Beth Israel Deaconess Medical Center | Medical imaging systems |
AU2003245499A1 (en) | 2002-06-14 | 2003-12-31 | Chromavision Medical Systems, Inc. | Automated slide staining apparatus |
WO2003105675A2 (en) | 2002-06-18 | 2003-12-24 | Lifespan Biosciences, Inc. | Computerized image capture of structures of interest within a tissue sample |
US7582872B2 (en) | 2002-10-11 | 2009-09-01 | Malvern Instruments Incorporated | Volumetric spectral imaging |
US7372985B2 (en) | 2003-08-15 | 2008-05-13 | Massachusetts Institute Of Technology | Systems and methods for volumetric tissue scanning microscopy |
US20050136549A1 (en) | 2003-10-30 | 2005-06-23 | Bioimagene, Inc. | Method and system for automatically determining diagnostic saliency of digital images |
JP2007510199A (ja) | 2003-10-08 | 2007-04-19 | ライフスパン バイオサイエンス,インク. | 自動顕微鏡スライド組織サンプルマッピング及び画像取得 |
CN1953701A (zh) * | 2004-03-11 | 2007-04-25 | 通用医院有限公司 | 使用荧光蛋白进行断层摄影成像的方法和系统 |
DE202004006265U1 (de) | 2004-04-21 | 2004-06-17 | Leica Microsystems Nussloch Gmbh | Mikrotem zur Erzeugung von Dünnschnitten |
US20050250091A1 (en) | 2004-05-05 | 2005-11-10 | Chemlmage Corporation | Raman molecular imaging for detection of bladder cancer |
US7677289B2 (en) | 2004-07-08 | 2010-03-16 | President And Fellows Of Harvard College | Methods and apparatuses for the automated production, collection, handling, and imaging of large numbers of serial tissue sections |
US20060127880A1 (en) | 2004-12-15 | 2006-06-15 | Walter Harris | Computerized image capture of structures of interest within a tissue sample |
US7767414B1 (en) | 2005-04-20 | 2010-08-03 | The Board Of Trustees Of The Leland Stanford Junior University | Optical imaging of molecular characteristics of biological specimen |
US7627153B2 (en) | 2005-08-04 | 2009-12-01 | Carl Zeiss Microimaging Gmbh | Repositioning inaccuracies in an automated imaging system |
DE102005042367B4 (de) | 2005-09-07 | 2009-11-12 | Leica Microsystems Cms Gmbh | Vorrichtung zum Erzeugen von 3-D Bildern einer Probe |
ES2272192B1 (es) * | 2005-10-14 | 2008-03-16 | Consejo Superior Invet. Cientificas | Metodo de deconvolucion ciega y superresolucion para secuencias y conjuntos de imagenes, y sus aplicaciones. |
US7831075B2 (en) | 2005-10-20 | 2010-11-09 | Case Western Reserve University | Imaging system |
JP4636552B2 (ja) | 2006-01-25 | 2011-02-23 | セイコーインスツル株式会社 | 自動薄切装置 |
US9008378B2 (en) | 2006-12-20 | 2015-04-14 | The Board Of Trustees Of The Leland Stanford Junior University | Arrangement and imaging of biological samples |
US20090091566A1 (en) * | 2007-10-05 | 2009-04-09 | Turney Stephen G | System and methods for thick specimen imaging using a microscope based tissue sectioning device |
GB2462360B (en) | 2008-08-08 | 2010-12-01 | Leica Biosystems Nussloch Gmbh | Production of thin sections of a sample by means of a microtome with an image recognition system |
DE102009022157B4 (de) | 2008-08-08 | 2011-09-01 | Leica Biosystems Nussloch Gmbh | Verfahren zum Herstellen von Dünnschnitten einer Probe mittels einer Bilderkennung |
US8386015B2 (en) | 2008-10-27 | 2013-02-26 | Siemens Aktiengesellschaft | Integration of micro and macro information for biomedical imaging |
US8995733B2 (en) | 2009-04-28 | 2015-03-31 | Koninklijke Philips N.V. | Microdissection method and information processing system |
EP2534461A4 (en) | 2010-02-09 | 2015-05-06 | Internat Genomics Consortium | LASER DISCONNECTION SYSTEM AND METHOD |
EP2553513B1 (en) * | 2010-03-28 | 2020-10-28 | Ecole Polytechnique Federale de Lausanne (EPFL) | Complex index refraction tomography with improved resolution |
US8839700B2 (en) | 2010-06-23 | 2014-09-23 | Tissuevision, Inc. | Oscillating microtome with flexure drive |
US8787651B2 (en) | 2010-09-28 | 2014-07-22 | Flagship Biosciences, LLC | Methods for feature analysis on consecutive tissue sections |
EP2652537B1 (de) | 2010-12-15 | 2021-02-03 | Carl Zeiss Microscopy GmbH | Automatisierte abbildung vorbestimmter bereiche in schnittserien |
JP5766004B2 (ja) | 2011-04-26 | 2015-08-19 | 倉敷紡績株式会社 | 薄切片試料作製装置及び薄切片試料作製方法 |
JP5969772B2 (ja) | 2012-02-08 | 2016-08-17 | サクラファインテックジャパン株式会社 | 薄切片作製装置及び薄切片作製方法 |
WO2013163211A1 (en) * | 2012-04-24 | 2013-10-31 | The General Hospital Corporation | Method and system for non-invasive quantification of biological sample physiology using a series of images |
US9194775B2 (en) | 2012-07-30 | 2015-11-24 | Aspect Imaging Ltd. | Guided slicing system for obtaining histological samples and methods thereof |
US10376147B2 (en) | 2012-12-05 | 2019-08-13 | AccuVeiw, Inc. | System and method for multi-color laser imaging and ablation of cancer cells using fluorescence |
CA2902356A1 (en) * | 2013-02-25 | 2014-08-28 | Huron Technologies International Inc. | Microscopy slide scanner with variable magnification |
DE202013103215U1 (de) | 2013-07-17 | 2013-08-08 | Aspect Imaging Ltd. | Ein geführtes Scheibenschneidsystem zum Erhalten von histologischen Proben |
-
2016
- 2016-05-19 US US15/158,928 patent/US9799113B2/en active Active
- 2016-05-20 JP JP2017560800A patent/JP2018528498A/ja active Pending
- 2016-05-20 WO PCT/US2016/033547 patent/WO2016187549A1/en unknown
- 2016-05-20 CA CA2986727A patent/CA2986727C/en active Active
- 2016-05-20 CN CN201680037990.3A patent/CN108027981B/zh not_active Expired - Fee Related
- 2016-05-20 BR BR112017024936-7A patent/BR112017024936A2/pt active Search and Examination
- 2016-05-20 EP EP16797389.0A patent/EP3298588B1/en active Active
- 2016-05-20 KR KR1020177036724A patent/KR20180018580A/ko not_active Application Discontinuation
- 2016-05-20 AU AU2016263801A patent/AU2016263801B2/en not_active Ceased
-
2017
- 2017-10-03 US US15/723,585 patent/US20180047161A1/en not_active Abandoned
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2008005991A1 (en) * | 2006-07-03 | 2008-01-10 | Beth Israel Deaconess Medical Center, Inc. | Invisible light fluorescent platelets for intraoperative detection of vascular thrombosis |
CN102007369A (zh) * | 2008-02-18 | 2011-04-06 | 维森盖特有限公司 | 利用紫外线放射对活细胞进行3d成像 |
WO2012068142A3 (en) * | 2010-11-15 | 2012-09-07 | Tissuevision, Inc. | Systems and methods for imaging and processing tissue |
WO2014165091A2 (en) * | 2013-03-12 | 2014-10-09 | Cytoviva, Inc. | Three-dimensional image processing to locate nanoparticles in biolgical and nonbiological media |
Non-Patent Citations (1)
Title |
---|
《3D Reconstruction of High-Resolution STED》;Punge A,Rizzoli S O,Jahn R;《Microscope Reaearch & Technique》;20080901;第71卷(第9期);第645-646页、第648页 * |
Also Published As
Publication number | Publication date |
---|---|
AU2016263801B2 (en) | 2021-04-01 |
WO2016187549A1 (en) | 2016-11-24 |
EP3298588B1 (en) | 2023-09-06 |
US20160343131A1 (en) | 2016-11-24 |
EP3298588A1 (en) | 2018-03-28 |
JP2018528498A (ja) | 2018-09-27 |
CA2986727C (en) | 2023-07-25 |
CN108027981A (zh) | 2018-05-11 |
US20180047161A1 (en) | 2018-02-15 |
KR20180018580A (ko) | 2018-02-21 |
US9799113B2 (en) | 2017-10-24 |
BR112017024936A2 (pt) | 2018-07-31 |
AU2016263801A1 (en) | 2017-12-07 |
EP3298588A4 (en) | 2018-12-19 |
EP3298588C0 (en) | 2023-09-06 |
CA2986727A1 (en) | 2016-11-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108027981B (zh) | 多光谱三维成像系统和方法 | |
Balanoff et al. | Best practices for digitally constructing endocranial casts: examples from birds and their dinosaurian relatives | |
Warren et al. | Removing physiological motion from intravital and clinical functional imaging data | |
Schulmerich et al. | Noninvasive Raman tomographic imaging of canine bone tissue | |
US20180042483A1 (en) | Systems and methods for hyperspectral imaging | |
JP4317412B2 (ja) | 画像処理方法 | |
EP2780890A1 (en) | System for creating a tomographic object image based on multiple imaging modalities | |
Ale et al. | Fluorescence background subtraction technique for hybrid fluorescence molecular tomography/x-ray computed tomography imaging of a mouse model of early stage lung cancer | |
Mozumder et al. | Approximate marginalization of absorption and scattering in fluorescence diffuse optical tomography | |
Chicherova et al. | Automatic deformable registration of histological slides to μCT volume data | |
Pu et al. | Resolving fluorophores by unmixing multispectral fluorescence tomography with independent component analysis | |
Ma et al. | Assessment of asthmatic inflammation using hybrid fluorescence molecular tomography–x-ray computed tomography | |
Anastasopoulou et al. | Fluorescence imaging reversion using spatially variant deconvolution | |
Tardif et al. | Validating intravascular imaging with serial optical coherence tomography and confocal fluorescence microscopy | |
Erten et al. | Enhancing magnetic resonance imaging tumor detection with fluorescence intensity and lifetime imaging | |
Byrd et al. | A hyperspectral approach for recovering agent excretion biodistributions using whole-body fluorescence cryo-imaging | |
Holbrook et al. | Multiscale dual energy micro-CT for imaging using iodinated and gold nanoparticles | |
Magsam et al. | Optical projection tomography with a tissue clearing agent for developmental and reproductive toxicology studies | |
Holt et al. | Development and Optimization of Standalone Multi-Wavelength Fluorescence Add-on for a Cryoslicer | |
WO2024114625A1 (en) | System and method for generating digitally stained histological images | |
Davy-Jow et al. | Virtual anthropology and virtopsy in human identification | |
Brent | Imaging, Dynamic Histomorphometry, and Mechanical Testing in Preclinical Bone Research | |
Meng et al. | A method of extracting structural priors from images of micro-CT for fluorescence molecular tomography reconstruction | |
Byrd | Advancing Fluorescent Contrast Agent Recovery Methods for Surgical Guidance Applications | |
Aguirre et al. | Design and development of a co-planar fluorescence and X-ray tomograph |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
TA01 | Transfer of patent application right |
Effective date of registration: 20180928 Address after: Delaware Applicant after: Emmet imaging Inc. Address before: Massachusetts, USA Applicant before: Invicro LLC |
|
TA01 | Transfer of patent application right | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20220315 |
|
CF01 | Termination of patent right due to non-payment of annual fee |