CN101680749A - 具有深度鉴别的光学再现的方法和装置 - Google Patents
具有深度鉴别的光学再现的方法和装置 Download PDFInfo
- Publication number
- CN101680749A CN101680749A CN200880018509A CN200880018509A CN101680749A CN 101680749 A CN101680749 A CN 101680749A CN 200880018509 A CN200880018509 A CN 200880018509A CN 200880018509 A CN200880018509 A CN 200880018509A CN 101680749 A CN101680749 A CN 101680749A
- Authority
- CN
- China
- Prior art keywords
- illumination
- sample
- optical
- light
- detector
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000003287 optical effect Effects 0.000 title claims abstract description 147
- 238000000034 method Methods 0.000 title claims abstract description 74
- 238000009826 distribution Methods 0.000 claims abstract description 74
- 238000001514 detection method Methods 0.000 claims abstract description 42
- 238000005286 illumination Methods 0.000 claims description 183
- 238000012937 correction Methods 0.000 claims description 47
- 230000003595 spectral effect Effects 0.000 claims description 46
- 238000003384 imaging method Methods 0.000 claims description 21
- 230000033001 locomotion Effects 0.000 claims description 21
- 230000008859 change Effects 0.000 claims description 13
- 230000010287 polarization Effects 0.000 claims description 11
- 230000008569 process Effects 0.000 claims description 11
- 238000012545 processing Methods 0.000 claims description 10
- 230000004075 alteration Effects 0.000 claims description 8
- 230000000737 periodic effect Effects 0.000 claims description 8
- 230000005284 excitation Effects 0.000 claims description 7
- 230000005540 biological transmission Effects 0.000 claims description 6
- 238000004020 luminiscence type Methods 0.000 claims description 5
- 239000000203 mixture Substances 0.000 claims description 5
- 230000010363 phase shift Effects 0.000 claims description 5
- 230000002123 temporal effect Effects 0.000 claims description 5
- 238000004519 manufacturing process Methods 0.000 claims description 4
- 230000036961 partial effect Effects 0.000 claims description 3
- 230000003993 interaction Effects 0.000 claims description 2
- 230000001360 synchronised effect Effects 0.000 claims description 2
- 238000000926 separation method Methods 0.000 claims 3
- 210000001747 pupil Anatomy 0.000 claims 2
- 239000000835 fiber Substances 0.000 claims 1
- 239000011159 matrix material Substances 0.000 claims 1
- 238000000386 microscopy Methods 0.000 abstract description 8
- 239000000523 sample Substances 0.000 description 81
- 238000005259 measurement Methods 0.000 description 19
- 230000008901 benefit Effects 0.000 description 9
- 238000013461 design Methods 0.000 description 9
- 230000000295 complement effect Effects 0.000 description 8
- 238000001444 catalytic combustion detection Methods 0.000 description 7
- 238000000799 fluorescence microscopy Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 230000001419 dependent effect Effects 0.000 description 4
- 230000002829 reductive effect Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 239000013307 optical fiber Substances 0.000 description 3
- 238000002310 reflectometry Methods 0.000 description 3
- 238000001228 spectrum Methods 0.000 description 3
- 239000000758 substrate Substances 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000004061 bleaching Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000006073 displacement reaction Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000011835 investigation Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 238000004441 surface measurement Methods 0.000 description 2
- 241000226585 Antennaria plantaginifolia Species 0.000 description 1
- 238000010521 absorption reaction Methods 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000002238 attenuated effect Effects 0.000 description 1
- 238000000701 chemical imaging Methods 0.000 description 1
- 238000004624 confocal microscopy Methods 0.000 description 1
- 230000021615 conjugation Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 239000000975 dye Substances 0.000 description 1
- 238000005530 etching Methods 0.000 description 1
- 238000002292 fluorescence lifetime imaging microscopy Methods 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- QSHDDOUJBYECFT-UHFFFAOYSA-N mercury Chemical compound [Hg] QSHDDOUJBYECFT-UHFFFAOYSA-N 0.000 description 1
- 229910052753 mercury Inorganic materials 0.000 description 1
- 238000010606 normalization Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000000704 physical effect Effects 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000003325 tomography Methods 0.000 description 1
- 238000012876 topography Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01B—MEASURING LENGTH, THICKNESS OR SIMILAR LINEAR DIMENSIONS; MEASURING ANGLES; MEASURING AREAS; MEASURING IRREGULARITIES OF SURFACES OR CONTOURS
- G01B11/00—Measuring arrangements characterised by the use of optical techniques
- G01B11/24—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures
- G01B11/25—Measuring arrangements characterised by the use of optical techniques for measuring contours or curvatures by projecting a pattern, e.g. one or more lines, moiré fringes on the object
- G01B11/2504—Calibration devices
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/62—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
- G01N21/63—Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
- G01N21/64—Fluorescence; Phosphorescence
- G01N21/645—Specially adapted constructive features of fluorimeters
- G01N21/6456—Spatial resolved fluorescence measurements; Imaging
- G01N21/6458—Fluorescence microscopy
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B21/00—Microscopes
- G02B21/36—Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
- G02B21/365—Control or image processing arrangements for digital or video microscopes
- G02B21/367—Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/50—Depth or shape recovery
- G06T7/55—Depth or shape recovery from multiple images
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Health & Medical Sciences (AREA)
- Analytical Chemistry (AREA)
- Multimedia (AREA)
- Chemical & Material Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Immunology (AREA)
- Pathology (AREA)
- Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
- Life Sciences & Earth Sciences (AREA)
- Biochemistry (AREA)
- Optics & Photonics (AREA)
- Theoretical Computer Science (AREA)
- Microscoopes, Condenser (AREA)
- Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
- Length Measuring Devices By Optical Means (AREA)
Abstract
本发明涉及一种用于产生光学截面图像的方法和装置。本发明允许对空间扩展物体的三维的、逐层的光学扫描,并且用于显微术,但并被限于这个领域。在所述方法中,在至少一个方向上具有周期性的照明分布(3)投影到平面(9)中,被样本(10)反射和/或散射和/或发射的荧光和/或冷光被成像到空间分辨检测器上。根据本发明,首先执行校准步骤,在校准步骤中,针对检测器(11)上的每个位置确定照明图案的局部相位和/或局部周期。在样本检测模式中,为了计算每个光学截面图像,存在两种投影到样本(10)中或样本上的照明分布,得到的强度分布再现在检测器上。投影和检测这两种照明分布的方法步骤能够根据需要重复执行,尤其是对于样本(10)的不同聚焦位置和/或不同的曝光波长,其中,在局部相位和/或局部周期的辅助下,根据捕捉的强度分布计算至少一个光学截面图像。
Description
本发明涉及一种用于产生光学截面图像的方法和装置。
本发明适用于对空间扩展物体(spatially extended object)的三维、逐层扫描,主要应用于显微术,但不限于这个领域。为了产生物体的三维图像或映射,通常使用光学层析(optical sectioning)的技术。所谓的光学截面是包含一定范围深度的信息的图像。因此,用于产生光学截面图像的光学系统对焦平面内的这些物体细节执行选择性成像,然而焦平面外的物体细节在光学截面图像中被抑制。
通过记录位于不同聚焦位置的一系列光学截面图像,能够逐步地扫描三维物体。因此,能够分析物体的三维表示(three-dimensionalrepresentation)或它的形貌。在下面,术语“物体”和“样本”被可互换地使用。尤其在显微术,研究的物体经常被称为“样本”。
本发明允许以特别简单的方式产生光学截面图像,并且能够用于例如生物、医学或材料科学中对物体的分析。
产生光学截面图像的第一种方法之一是Minsky的共焦显微镜[1]。这里,通过设置共焦针孔来抑制对焦平面外的细节的成像。
用于产生光学截面图像的另一种方法是结构照明(structuredillumination),例如,如Wilson等人在[2]所描述的那样。这里,例如光栅的结构被投影到将被成像的样本中。这样又产生对样本内的光分布的调制。例如,如[2]中所示,调制深度在焦平面中具有其最大值,并且在这种意义上标记焦平面。在结构照明中,第一步是对照明光进行调制,然后记录投影结构的不同位置(相位跳跃(phasestep)),最后根据记录的数据计算光学截面图像。
为了这个目的,提出了几种装置。在Wilson等人的专利[3]中,光栅置于与样本共轭的平面中,并且垂直于光轴移动。在Gerstner等人的不同设计[4][5]中,平行板被插入到光路中并倾斜,从而横向地移动被投影到样本中的照明结构。对于透明或半透明的样品,投影到样本中,而对于不透明的表面结构,投影到样本上。另一解决方案由Neil等人提出[6]。这里,通过干涉在样本内直接产生照明结构。
所有的方法[2-6]具有这样的性质:它们需要记录至少三个独立的图像。所有这些方法具有这样的共同之处:由于需要快速而准确地设置机械元件,所以在结构的定位和投影期间,伪像和不准确度可能会出现。例如,关于伪像及其补偿的细节可以在[7]中找到。用于实施该方法的不同方案根据用于对照明结构的位置执行改变的装置(相位设置)而不同之处。特别地,提出有不需要移动部件的装置,因此这种装置允许对相位跳跃的固定对准(alignment)和非常好的再现。
在US专利5381236[11]中,描述了用于对三维物体测距的光学传感器。这里,周期性结构被投影到物体上,其中能够使照明结构颠倒(invert),这对应于180度的相移。这里提出的方法也是基于按照两步的对照明结构的改变,但与[11]相比,该方法具有下述的不同:在[11]中,照明结构的各元件需要精确地与检测器(CCD像素)的各元件对准。这是很强的限制,理由如下:在放大方面,光学装置将需要非常准确以实现照明图案(illumination pattern)与检测器的匹配。另外,这两个结构彼此对准将需要非常准确并具有子像素精度。可能最重要的限制是因为这样的事实:即使光学图像中小的畸变(例如,桶形畸变或枕形畸变)也会导致无法在整个视场以子像素水平匹配照明图案的元件与检测器的元件。这一装置将需要高度校正并良好调节的光学器件,这对于广泛的、耐用的应用而言是障碍。对于提出的方法,与[11]相反,由于不需要照明图案和检测器的精确匹配,所以可以根据类型和图案尺寸自由地选择照明图案。这允许调节光学系统的深度鉴别(depth discrimination),例如产生的光学截面的厚度(在共焦显微镜系统中,这对应于共焦针孔的直径的调节)。根据本发明,能够容易地实现这一点,而根据现有技术的状态,用[11]中的设计不可能实现这一点。因此,能够避免[11]的特征缺点。不需要移动部件的装置能够避免由于位置不准确而引起的缺点,并且也没有在[11]中被公开。
眼下,为了清楚的定义和与其它方法区分开,参考了在文献中描述的基于结构照明的测量表面的概念上不同的方法。存在与结构照明结合的基于三角测量法的表面测量方法。作为示例,提到了[12]和在该文献中引用的其它参考文献。三角测量法在投影到物体上的期间估计照明图案(例如,条纹图案)的变形,其中,根据投影的图案的局部相位来确定物体的轮廓。因此,测量的主要量是局部相位。其特征还在于:使用分离的非同轴光学系统实现对图案的投影和检测,或者物体相对于光轴倾斜。对于具有深度鉴别的光学再现的本方法,目的是从与背景对应的图像信号之中分离(鉴别)源自焦平面的图像信号。样本的深度轮廓能够通过使用聚焦设备(focussing device)通过对样本的轴向扫描来获得,其中,轴向扫描的每个局部图像代表光学截面图像。光学截面,有时也称为伪共焦图像,仅包含来自焦平面的图像信号,而使用适当的方法抑制或去除背景信号。共焦显微镜[1]也产生光学截面;然而,这一任务是通过不同的光学装置来实现的。对于结构照明的方法,深度鉴别是基于作为测量的主要量的局部调制的检测。
另外,在本发明中,优选地,对照明图案的投影和对来自样本的光的检测通过面向样本的单一光学器件(物镜)来执行。与此形成对照的是,三角测量法从不同方向执行投影和检测。实施具有深度鉴别的结构照明的方法的另一重要方面是使用不同波长。当前已知的实施方式(implementation)在波长改变时存在下述问题:由于残余的轴向色差(这可能取决于使用的物镜和中间光学器件),投影的结构(通常为掩模)需要在轴向方向上重新定位。这需要在已知显微镜装置内相对较大的移动,因此在机械元件的移动上花费很多时间(例如,参见[4])。
本发明提出一种新型装置,该装置不再需要对投影掩模结构的机械轴向运动,因此,由于针对不同波长的更快的时间顺序或者甚至同时的成像,该装置在速度方面具有优势。另外,存在为了解决色彩校正的问题而提出的新的装置,这些装置使用机械部件,但与现有技术的状态相比具有较低的复杂性。
根据现有技术状态的结构照明的原理的另一版本使用连续移动的照明掩模,该照明掩模分别被投影到样本中或投影到样本上[8,9]。这里,移动掩模用于对照明结构的编码以及解码。对于这个处理,其特征在于:源自样本的光穿过掩模。在[8]中,描述了一种适合用于宽视场的显微镜的装置。[9]中的装置与行扫描器(line scanner)结合使用特别有用。方法[8]和[9]二者的共同之处在于:两个不同的信号在空间分辨检测器上结合(integrate),其中,通过两个图像数据集的简单减法获得希望的光学截面图像。[8]和[9]中的装置共有下述缺点:源自样本的待检测的光在由检测器登记(register)之前被掩模削弱。这一点在观测弱光信号(这尤其发生在荧光显微术中)时特别有关。
在出版物[13]中,示出了结构照明的方法如何能够与荧光寿命测量的方法结合。这里,使用根据现有技术状态的来自[2,3]的方法,该方法需要记录三个照明步骤的序列。荧光寿命的测量是使用具有非常高的时间分辨率的检测器(门控光学增强器(gated opticalintensifier))和脉冲激光激发的组合来实施的。用于确定荧光寿命的不同版本是“频域FLIM”,其中,激发光被周期性地调制,并且根据检测信号相对于激发信号的相移来确定寿命。如果使用适当的检测器和光源,则本发明还允许通过在计算的每个光学截面仅记录两个独立图像来测量光学截面图像中的荧光寿命。
出版物[14]包括仅从一个图像产生光学截面图像的一种方法。这里,如[2,3]中所示,实施使用照明图案的方法。在该处理中,使用不同波长的光对投影到样本中或投影到样本上的三个照明图案以及来自样本的相位跳跃进行编码。这允许同时投影和检测。这种技术在速度方面有优势,但产生了其它问题。由于染料具有预定的光谱性质(激发波长和发射波长),所以在这里,使用荧光显微术是不可行的。另外,当样本在反射模式中表现出不同质的光谱性质时会出现问题。因此,出版物[14]被认为是方法[2,3]的特殊情况,其中,由于照明步骤的波长编码而导致出现限制。对于本发明,由于不需要对照明步骤的光谱编码,所以不存在这种限制。
本发明涉及一种基于结构照明产生光学截面图像的方法和装置,并且用于逐层地对空间扩展物体进行光学扫描。与现有技术的状态相比,通过把两个照明图案中的每一个投影并记录到样本上,可以获得光学截面图像。另外,应该去除到目前为止必要的但难以实现的要求:照明结构与检测器的以像素水平的对准。
该装置的目的在于:以相同数量的检测光子提供对样本的更快扫描、更坚固的构造以及改善的光学截面图像的信噪比。
另外,提出了一种在不需要移动机械部件的情况下实施根据本发明的方法的装置。这显著地降低了对准的成本、机械致动器的成本以及由于定位不准确而导致的图像伪像。
本发明的另一方面涉及光学截面图像的产生,其中,使用多种波长对样本进行扫描。这可能会导致光学器件的轴向色彩性质的问题,这些问题到目前为止例如通过使用光学元件的机械重新定位已经得以解决。而且,还公开解决了在不使用机械部件的情况下对结构照明的轴向色彩校正的问题的装置,尤其是在被集成在普通的显微镜系统内时。与现有技术的状态相比,这导致了在速度方面的进一步的优势。
另外,存在用于实施给定的结构照明的新的装置:该装置对于照明图案的相移和轴向色彩校正的重新调节的这两项任务仅使用一个致动器。
在独立权利要求中定义了对上述任务的解决方案。
通过投影两个照明图案来产生光学截面图像的方法被描述如下:
对于结构照明,投影到样品上的照明光在至少一个空间方向上需要调制。根据现有技术状态的结构照明的方法分别需要至少三个照明图案或周期性结构的至少三个相位位置的投影。
根据本发明,确切地说,对两个结构进行投影,其中,如果第二结构的强度分布与第一结构互补并且两个照明图案的平均强度彼此相差不太大,则是有利的。
即使也可以使用二维照明图案,为了简单起见,仍将使用光栅结构来解释原理。在没有对通常情况的限制的情况下,假定正弦光栅结构被投影到样本中/样本上。
投影到样本中/样本上的第一结构具有下面的形式:
G1(a,b)=1+Acos(ωa+δ). <1>
然后,与第一结构互补的第二图案如下:
G2(a,b)=1-Acos(ωa+δ)=1+Acos(ωa+π+δ). <2>
这里,a和b是投影图案的系统中的局部横向坐标,ω是光栅频率,δ是光栅的相位。从<2>中能够看出,互补的照明图案对应于周期性图案偏移相位值π。必须注意的是,根据本发明,能够在不使用移动机械部件的情况下实施图案及其互补图案的投影。这消除了由于设置机械元件的位置时的不准确而导致的潜在的相位误差,稍后将对此进行讨论。另外,如果在整个视场平均的样本处的两个投影的强度彼此相差不太大,则是有利的。投影到样本中/样本上的光图案G1(a,b)和G2(a,b)被样本散射、反射、透射、吸收,或者激发荧光或冷光。上述相互作用的任意组合也是可以的,并且也可以在各种不同的波长处。另外,通过对检测器的适当配置,能够确定荧光寿命。为了这个目的,除了检测器的高时间分辨率以外,还需要激发光的脉冲激发或调制。
在样本中产生的强度图案G1(a,b)的投影从样本的位置被成像到空间分辨检测器(spatially resolving detector)上。强度分布G1(a,b)和G2(a,b)以及物平面(样本)和检测器位于互为共轭的像平面中。当在显微镜内实施时,如果正被投影的照明图案位于与视场光阑(field stop diaphragm)共轭的平面中,则是有利的。
如果G1(a,b)被投影,则在检测器处测量下面的强度分布。
I1(x,y)=K(x,y)+S(x,y)*cos[x*g(x,y)+α(x,y)] <3>
第二互补结构G2(a,b)的投影导致在检测器处测量下面的互补强度分布。
I2(x,y)=K(x,y)-S(x,y)*cos[x*g(x,y)+α(x,y)] <4>
这里,(x,y)是检测器的平面中的坐标,g(x,y)是x坐标方向上的调制频率(光栅频率),其中,g=2π/T,T是x方向上的周期。常见的空间分辨检测器(诸如,CCD或CMOS传感器)是基于像素的。因此,坐标(x,y)也能够以离散的像素坐标指定。参数α(x,y)是周期性结构的相位。量K(x,y)是传统的图像,它也包含来自焦平面外的各层的图像信息。在显微术中,K(x,y)对应于样本的宽视场图像。
在方程<3>和<4>的帮助下,能够方便地计算传统的图像:
量S(x,y)是待确定的光学截面图像,它也对应于由结构照明导致的调制深度。对于具有坐标(x,y)的检测器的每个位置,由<3>和<4>组成的方程组一共包含4个未知量:传统的图像K(x,y)、待确定的光学截面图像S(x,y)、光栅频率g(x,y)和局部相位α(x,y)。在投影到样本中或样本上的照明图案的理想(perfect)几何形状的情况下以及在理想成像条件的情况下,光栅频率和相位将不依赖于坐标(x,y)。在实际条件下以及在存在光学器件的稍微不理想的成像的情况下,这个假设仅是一种近似。因此,这些局部参数的确定是有利的或者必要的。
根据现有技术状态的方法[2-7]假定局部恒定的光栅频率。因此,剩下3个未知量,到目前为止的方法[2-7]仍需要测量投影结构的至少三个相位跳跃α,以便计算光学截面图像。在根据本发明的方法中,执行校准步骤,在该校准步骤中,根据测量的校准数据或者在检测器的坐标系统中每个位置(x,y)的图像数据I1(x,y)和/或I2(x,z)确定局部相位α(x,y)和(可选的)局部光栅频率g(x,y)。在这两种情况下,都能够使用待讨论的相同的方法(例如,傅立叶变换或小波方法)来确定某一区域中的局部相位和局部光栅频率。根据本发明,通过校准步骤或者对局部相位α(x,y)和局部光栅频率g(x,y)的知晓以及使用在下面进一步描述的算法,产生光学截面图像所需的投影步骤的数目能够减少为仅两个。与根据现有技术状态的其它方法相同,在样本扫描模式中的第三步骤或进一步的步骤不再使用。这导致减少了样本损伤和光漂白(photo-bleaching),尤其在荧光显微术的情况下。优选地,校准测量使用平坦的、同质的校准物体,该校准物体反射并且/或者散射,并且/或者具有荧光和/或冷光性质。可以使校准物体的插入和校准过程自动化。校准物体可替代于样本而插入,或者可插入在与样本的位置共轭的像平面。在校准物体的帮助下,由分别在图案G1(a,b)和G2(a,b)的投影期间的C1(x,y)和(可选的)C2(x,y)组成的校准数据集被记录,用于校准测量。根据校准物体的近似同质的性质,C1(x,y)和C2(x,y)分别代表照明图案及其在检测器的坐标系统中的位置。如果图像数据集I1(x,y)和I2(x,z)分别用于局部相位的确定,则这些数据集包含在其上施加照明图案的样本信息。因为样本性质能够在整个视场内变化,并且也在研究的不同的焦平面之间变化,所以局部相位和光栅频率的确定的质量也可以变化,并且根据样本可能仅在某些区域中是可行的。如果扫描了一系列的几个焦平面,则由于是共同的设置,所以来自几个焦平面的信息能够用于校准步骤。例如,对于每个检测器区域,可以分别选择允许具有局部相位和局部光栅频率的最高质量的确定的焦平面。局部参数的确定的质量的示例性标准将在下面进一步给出(参见<5c>中的度量(metric))。在一些区域中的确定较为困难的情况下,对局部参数的知晓可通过插值(横向和/或轴向)或通过周期性延伸来延伸至检测器的整个坐标系统。对于这个处理,优选地,应该使用来自具有局部参数的确定的高质量的区域的数据。
现在,将使用傅立叶方法的例子示出某一区域的局部相位α(x,y)和局部光栅频率g(x,y)的确定。也可以使用小波方法或迭代程序。局部光栅频率g(x,y)对于常见的装置而言是连续函数,并且仅在视场内具有缓慢的变化。作为近似,局部光栅频率g(x,y)也可以通过由已知的n个周期覆盖的图像内的距离E来确定;然后,得到g=n2π/E。为了更准确的确定,定义下面的量:
这里,L(x,y)表示待研究的数据集,可以是来自校准测量的数据集(C1(x,y)或C2(x,y))或图像数据集(I1(x,y)或I2(x,z))。积分F的区域以坐标(x,y)作为中心,并在良好的近似下覆盖图案的整数个周期。在离散的坐标(x,y)的情况下,相应地,积分能够通过求和来代替。现在,让我们定义度量:
现在,确切地说,g(x,y)的值是度量M(g,x,y)提供最大值时的值。在g是光栅频率的情况下,M(g,x,y)的值对应于由光栅引起的局部调制深度。因此,M(g,x,y)是另外的可用于局部参数的确定的质量或准确度的标准。局部相位α(x,y)也可以被确定,这是因为:
现在,能够通过对正切函数的反演(inversion)获得值α(x,y),其中,考虑FTS或FTC的符号以获得象限。由编程语言C提供的函数atan2(.,.)自动执行这些处理。与校准测量相比,分别根据图像数据I1(x,y)和I2(x,z)确定局部相位可能会导致稍微不太准确的局部相位的结果;然而,这允许省略装置的校准测量和相应的元件。局部参数的准确度和空间分辨率之间的平衡能够通过相应地选择区域F的尺寸与物体的条件匹配。
在下面,假定根据所描述的校准步骤或根据现有技术的知识,局部相位α(x,y)和局部光栅频率g(x,y)是已知的。
为了计算光学截面图像,使用<3>和<4>,引入下面的量:
现在,通过方程<3>、<4>、<6>和<7>能够方便地计算待确定的光学截面图像:
另外,两种图案的照明分布在检测器处可以是不同质的。这会是由于投影结构自身的缺陷或者投影到样本中或样本上且随后成像到检测器上的不同质的性质所导致的。根据本发明,可以把数据I1(x,y)和I2(x,y)归一化以补偿不同质的性质:
其中,
分别是在整个区域F的C1(x,y)和C2(x,y)的平均值,该区域F包含坐标(x,y),并且覆盖图案的整数个周期。由于照明图案的不均匀强度(照明问题或掩模缺陷)或检测器的不同质性质而导致的不利影响能够通过归一化量N1(x,y)和N2(x,y)而不是方程<5,6,7,8>中的记录量I1(x,y)和I2(x,y)来补偿。这里,使用连续可变的、正弦的照明图案的投影的简单例子,演示了在样本扫描模式期间通过针对每个光学截面图像的两个照明分布的投影和检测来计算光学截面图像。但是,经常使用二进制图案(binary pattern),这是因为这种掩模能够以较低成本制造。为了减少与使用二进制或其它掩模相关的成像伪像,对照明结构的局部相位的知晓也是重要的,并且能够通过校准步骤来实现。
上述方法能够在各种装置中实现,尤其能够在宽视场荧光显微镜和用于EPI配置(反射模式)中对表面的研究和深度剖析(profiling)的宽视场显微镜中实现。在下面,将讨论用于实施根据本发明的方法的附图和装置。
图1示出用于实施该方法的简化装置。为了简单起见,未画出可选的中间图像和中继光学器件。根据本发明,照明单元(1)产生两个不同的照明图案。因此,照明掩模结构、照明DMD芯片(数字镜设备,即称为Texas Instruments的DLP技术)或光分布的中间图像位于平面(3)中,并在至少一个空间方向上受到调制。因为术语“掩模”或“掩模结构”在本文中经常使用,所以应该对该术语进行更严密地限定:掩模是这样的光学元件,在该光学元件中,在元件的整个区域上物理性质(尤其是透射和/或反射和/或吸收和/或光程差)被图案化。如果光程差被图案化,则指的是例如能够通过在玻璃基底上蚀刻结构来制造的相位掩模。照明相位掩模由于衍射而能够产生某一光分布,并且可以实现高的光学效率。这里提及的所有类型的掩模在下面都被称为共同的术语“掩模”。
存在于平面(3)中的光分布经由分束器(7)和物镜(5)被投影到物体(10)(样本)。这里,平面(3)和标称物平面(nominalobject plane)(9)彼此共轭。分束器(7)可以是半透明的反射镜或二向色分束器。也可以使用多带分束器。现在,使用物镜和另外的中间光学器件,将被投影到样本中或样本上的光分布成像到检测单元(11)上。平面(13)是像平面或中间像平面,它与平面(9)以及平面(3)共轭。物体内的焦平面的位置可以使用聚焦单元来被设置,聚焦单元通常实现物镜(5)或样本的轴向运动。在显微镜系统中,如果包含待投影的光分布的平面(3)与视场光阑的平面共轭,则是有利的。在检测单元(11)内,可包含空间分辨检测器,诸如CCD或CMOS传感器。作为对此的另一种替代方案,单元(11)也可以把平面(13)中的光进一步成像到一个或多个检测器上。
图2示出根据本发明的照明单元(1)的装置。光源(19)和(23)被设置为使得能够使用分束器(21)从不同侧对平面(3)中的掩模结构进行照明。能够控制由光源(19)和(23)发射的光的强度和(可选的)光谱成分(spectral composition)。在同时从两侧对平面(3)中的掩模结构进行照明的情况下,光源(19)和(23)也可由单一光源代替,该单一光源通过分束器和适当的光路从两侧对掩模进行照明。平面(3)中的掩模包含具有非常高的反射性的区域和具有非常高的透射性的其它互补区域。这种掩模不仅可以包含二进制结构(binary structure),还可以包含连续的分布。图案化的镜表面可以位于平面(3)中。因此,通过平面(3)中掩模结构处的透射(光源(19))和反射(光源(23)),这两个光源产生两种彼此互补的照明分布。
应该指出,这种装置提供两种不同的照明图案,在没有任何移动机械元件的情况下,这两种照明图案分别允许两个结构的同时或时间顺序投影或者同一结构的两种相位设置。这在实施根据本发明的方法时导致了速度方面的优势并减少了为对准而付出的努力,与现有技术的状态相比表现出了相当大的优势。
在时间顺序操作的情况下,光源(19)或光源(23)发光,其中,使用检测单元(11)对样本图像的记录与其同步。
在本发明的另一方面,分别同时发射两种光分布或照明图案。为了对这两种分布的编码,可以使用发射光的偏振或光谱成分。为此,分别使用两个可选的偏振滤波器或光谱滤波器(20)和(24)(参见图2)。在偏振滤波器的情况下,这些偏振滤波器彼此相交,以便沿方向(22)发射的分别穿过滤波器(20)或(24)的光具有彼此正交的两个偏振方向。作为对线性偏振光的另一替代方案,可以使用左旋或右旋圆偏振光。如在本发明的上述实施例中一样,通过偏振或光谱特性编码的两种照明图案的同时发射在速度方面还具有优势,并允许实时产生光学截面图像,这一点尤其对于反射模式的材料显微术以及对于微观或宏观的物体的表面测量系统的构造是希望的。
实施根据本发明的照明单元的另一选择示出于图(2b),在该图(2b)中,与图2一样,使用相同的附图标记。这里,装置了两个掩模,两个掩模位于彼此共轭的平面(3)中。这两个掩模都在透射光中工作。与图2相比,这里示出的装置具有稍微较高的光学效率,但它也需要这两个掩模彼此对准,以便根据对光源的选择沿方向(22)发射两种照明图案,其中,它们各自的相位彼此偏移180度。这种对准仅需进行一次,并且,由于仅需要对分束器(21)进行对准而导致可以忽略的图像的畸变,所以不存在任何问题。
图3示出用于实施光源(19)和(23)的根据本发明的有利装置。这里,作为照明单元(1)的一部分的光源(19)和(23)由两根光纤或光波导(37)和(39)的输出来代替。该装置还包含n个光源,其中,在图3中,仅示出光源1(25)和光源n(27)。这些光源也能够代表由单一光源产生并随后在空间和光谱上被分离的光的不同光谱成分。不同的光源可具有不同的光谱成分。光纤(31)连接到致动器(33)和(35),并使用光学单元(29)进行耦合。根据本发明,整个装置充当开关,允许任何光源与光纤的两个输出之一(19)或(23)连接。这具有两个主要的优点:首先,仅使用了一个光源,这降低了成本并在两个投影步骤中都保证了相同的光谱成分。第二,输出(19)和(23)可以起到具有固定对准的点光源的作用,该点光源相对于投影单元的其余光学器件保持对准。这减少了对准所需的努力。
在图4中,示出了掩模的示例性设计,它可以是图2中示出的投影单元的一部分,并位于平面(3)中。在最简单的情况下,以交替方式在透明基底(41)上设置具有高反射率和低透明度的同质区域(47)以及具有高透明度和低反射率的同质区域(49)。这里,所有的透明区和不透明区的组合区域分别具有相同的尺寸。即使在这个例子中使用了二进制图案,具有几种透射和反射的水平、或连续分布的掩模设计也是可行的。
在图5中,示出了根据现有技术状态[2]的照明单元(1)的装置,其中,掩模(52)在透射光中工作,并由致动器(51)沿与光学器件垂直的方向移动。这种装置也能够用于实施根据本发明的从两个投影步骤产生光学截面图像的方法。与使用三个投影步骤的现有技术状态相比,这使得增加了样本扫描处理的速度并减少了光漂白。与图2中根据本发明的使用固定掩模的实施方式相反,这需要致动器(51),需要致动器(51)为投影的两种光图案的设置提供良好的可重复性。
在图6中,讨论校准测量和色彩校正的方面。这里,图1的图解补充了附加的中间光学器件(55)。对于校准测量,根据要求,荧光和/或反射和/或散射元件(53)可被旋转(swivel)到光路中。元件(53)的平面对应于中间像平面,并且与(3)、(9)和(13)共轭。中间图像和在平坦样本重新成像回到元件(53)的平面时形成的中间图像的位置和性质可以是相同的。由此,把元件(53)旋转到光路中可以与在物镜(5)前面安装校准物体互换。把元件(53)旋转到光路中的操作可以在光学装置内部自动执行。这简化了使用,并允许使用已知校准物体进行全自动的校准测量,例如,记录用于对于检测器坐标系统内每个位置的局部相位α(x,y)和(可选的)局部光栅频率g(x,y)的随后确定的数据。另外,这个物体不能被污染或者磨损(lost),因为它是光学装置的一部分。元件(53)可以是漫反射或荧光物体,或者可以具有仅以某一波长反射的表面。在手动地置于物镜(5)前面的样本空间中的校准物体的帮助下,可以在任何时间与元件(53)独立地执行校准测量。
根据现有技术状态的装置的另一问题是投影期间的强度变化。尤其是,高压水银灯由于其设计而可以具有光强的波动,这会在结构照明的处理中导致伪像。如果与检测器(11)处的图像采集结合地测量不同投影步骤的相对照明量(relative illumination dose),则能够对此进行补偿。关于相对照明强度的信息可随后用于计算光学截面图像,并可以有助于减少伪像。对于相对照明量的测量,位于(3)或成像到该位置的照明图案可包含在每个投影结构的边缘处的测试区域。根据本发明,元件(该元件也可以位于校准元件(53)处)仅在投影图案的中间图像的位置(例如,(53)的位置)处部分地插入到光路中,以便它仅在视场边缘处成像到检测器(11)上。这个元件在用于产生光学截面图像的整个投影过程期间保持在光路中。这允许了独立于观察的样本及其性质而在检测器(11)上记录(log)投影步骤的相对强度。
当执行利用几种波长的成像时,尤其在荧光显微术中,在应该实现更高的系统速度时出现与根据现有技术状态的装置相关的另一问题和障碍。由于色差(尤其是轴向色差),导致图6中的平面(3)和(13)不再彼此精确地共轭。根据现有技术状态[3、4、5]的装置通过与图6中的平面(3)的轴向偏移相对应地对掩模重新聚焦来解决了这个问题。出于此目的,当使用几种波长时,经常需要长距离,从而导致长的总处理时间。尤其对于荧光显微术,经常需要同时记录或者至少快速连续地记录图像。
根据本发明,这一任务通过光谱校正来得以解决,而不需要移动正被投影的结构或掩模。因此,可选的校正元件被插入到平面(15)和/或(17)中,并且可选地插入到检测单元(11)中(参见图6)。例如,这些校正元件可包括:影响光学器件的光谱性质的、具有公知的色散性质的透镜、或衍射光学元件或全息图。衍射光学校正元件能够被制造为专门地用于某一光学配置的校正。当物镜改变时,校正元件的改变也可能是必要的。
在下面的图10的帮助下进一步讨论可能是必要的用于检测单元(11)内的校正的附加测量。如果校正元件(15)和(17)位于基本上准直的光路的一部分中,则是有利的。这里,对轴向色差的校正能够以两种不同的方式实施,其中,两种设计都能够避免被投影的结构的轴向运动。
在部分色彩校正的第一版本中,校正元件确保平面(3)和(13)对于用于成像的所有波长都是彼此共轭的。尽管平面(3)和(13)保持彼此共轭的事实,但是这种校正仍然可能会导致样本(10)中或样本(10)上的照明图案的轴向位置的波长依赖性。这一点可通过使用软件容易地进行补偿。在样本的物理轴向扫描的处理期间,在建立样本的3D数据集时,可以考虑并分配投影的稍微移位的轴向位置。作为对此的另一种替代方案,样本自身可在波长改变期间移动轴向移位的量。在大多数显微镜系统中,与在照明侧的结构(掩模或DMD)的轴向移动相比,在样本侧能够更快地实现这一点。对于第二版本,完整的轴向色彩校正确保样本中或样本上的投影结构(9)的平面(3)和检测器上的平面(13)对于使用的所有波长都彼此共轭。
图7示出根据本发明的照明单元(1)的另一实施方式。这里,在平面(3)中,存在DMD芯片(数字镜装置,也被称为TexasInstruments的DLP技术)。光源(23)通过分束器(21)对DMD芯片进行照明。现在,在该芯片上显示的待投影的照明图案通过元件(21)发射。替代DMD芯片,也可以使用可行的LCD模块,LCD模块安装在平面(3)中并能够使用图2中示出的光源(19)在透射光中工作。这种装置具有这样的优点:待投影的图案能够通过使用软件非常快速地被更新。对投影图案的调节能够容易而快速地实现,当物镜改变时,这一点可能是必要的。
图8示出根据本发明的检测单元(11)的实施方式的例子。这里,入射光通过分束器(57)被分割并传输到位于两个共轭平面(13)中的两个空间分辨检测器(例如,CCD)。例如,分束器(57)可以是二向色镜或偏振相关分束器。因此,能够同时且分开地观察到图像的两个光谱区或偏振态。如果这两个投影的光图案根据图2以光谱方式或通过偏振而被编码,则能够同时并实时地实现这两种照明图案的投影和记录。与现有技术设计[2-6]的状态相比,这个原理允许构造用于根据本发明的方法测量表面性质的快得多的设计。
图9示出检测单元(11)的实施方式的另一可能性,其中,使用了分束器(59)和全反射镜(61)。分束器(59)可以是二向色镜或偏振相关分束器。平行检测类似于在图8中显示的实施方式。然而,平行观察利用位于平面(13)中的单一检测器来实现,这以降低了分辨率为代价节省了成本。
图10讨论根据本发明的已有光学装置的变型例,其中,可以同时产生不同光谱波道(channel)的光学截面图像而不需要轴向移动投影的光分布(例如,掩模)。这一测量可以与图6中讨论的光谱校正元件(15)和(17)结合应用,或者可以单独应用而不需要与光谱校正元件(15)和(17)结合。根据现有技术的状态,存在这样的装置:以不同的波道(诸如,光谱或偏振态)分割物体的图像,并在空间分辨检测器(例如,CCD芯片[10])上同时形成彼此相邻的这些波道的图像。在存在轴向色差的情况下,进入的中间图像(13)的轴向位置可依赖于波长。光学单元(63)根据其光谱特性把图像分成几个波道,其中,这里显示了四个波道。随后,在其中光束基本上准直的布局的部分中,各波道可包含根据现有技术状态的光谱滤波器(65)。光学单元(69)以这样的方式对平行波道进行聚焦:使它们彼此相邻地成像到空间分辨检测器(71)。在图10中,四个波道彼此相邻地线性排列,另一常见的配置也是投影到检测器的四个不同象限。根据本发明,这个装置通过使用校正元件(67)来修改,校正元件(67)优选地位于光路的准直部分中并优选地位于光谱滤波器(65)之后。校正元件(67)可与各滤波器(65)形成组合单元。校正元件优选地是衍射光学元件。这样校正确保:尽管中间输入图像(13)的轴向位置具有波长依赖性,但是所有的光谱波道仍然同时并平行地聚焦到检测器(71)上。衍射光学元件或全息图(67)也可彼此相邻地设置于同一基底上。通过组合根据本发明的不需要移动机械部件的对不同光谱波道的同时检测、以及根据本发明的不需要移动机械部件的从两个照明步骤产生光学截面图像的方法和装置,能够设计具有深度鉴别和高的光学效率的光学系统,与现有技术的状态相比,这种光学系统操作速度快得多并且能够以更低的成本构造。
因为不同的光谱成像波道的光谱校正是根据现有技术状态的结构照明系统的主要方面,并且对于利用几种波长的扫描妨碍了速度的增加,所以下面将公开根据本发明的结构照明系统中用于光谱校正的另一解决方案。光谱校正装置的目的在于针对不同波长实现样本中产生的照明图案的焦平面和与检测器共轭的焦平面的匹配。
由于光学器件的光谱性质(例如,用于照明和检测的光路的光谱性质的差别),所以根据波长,投影到样本中的照明图案的轴向位置可能不同于成像到检测器上的平面的轴向位置。因此,平面(3)和(13)(参见图1)将不会根据需要彼此共轭。因此,光谱校正的任务要确保平面(3)和(13)的共轭。例如,这可以通过照明图案的轴向定位或通过管透镜(tube lens)的适当位移来实现。作为对此的另一替代方案,如本发明的前述实施例中所述,可以校正光学器件的光谱性质,以便图(1)中的平面(3)独立于波长地与平面(13)共轭。根据现有技术的状态,通过步进电机(stepper motor)经由投影结构(光栅)的轴向移动来实施色彩校正。另外,光栅必须被手动地改变,以便针对不同的成像条件来调节设置各光栅周期。在下面,将公开根据本发明的装置,在该装置中,解决了在增加速度时的色彩校正以及照明图案(例如,光栅)的改变的问题。本发明的实施例示出在图11中。投影到样本中或样本上的周期性照明图案优选地为掩模的形式,并且能够通过部件更换器(changer)旋转到光路中。掩模位于与平面(3)(参见图1)共轭的轴向位置。这里,部件更换器为部件轮(component wheel)(73)的形式,线性装置也是可行的。图11示出与光轴垂直的平面,图11b示出在与光轴平行的平面(79)中通过部件轮(73)的旋转轴(81)的横截面。部件轮(73)具有几个用于光学部件的部件槽(slot)(75),其能够通过轮的旋转(77)旋转到光路或调换。如果通过适当的锁定(lock-in)位置限定部件轮的各位置,则是有利的。图11示出具有被粗画的6个部件槽(75)的例子,但是槽的数量可以符合要求。根据本发明,部件轮(73)被设计为位于部件轮(73)中的光学部件(87)的轴向位置可以被对准在轴向方向(85)上。
在图11b的横截面中,示出了位于不同轴向位置的两个光学部件(87)。沿轴向方向(85)对光学部件(87)的调节能够手动地进行或通过电子致动器来进行。图11示出使用用于轴向方向对准的手动调节把手(knob)(83)的实施例。这里,关键特征在于:部件轮(73)的部件之间的改变可以很快。能够实现大约50毫秒的时间。根据现有技术状态的通过步进电机投影的结构的直接轴向定位只有通过很大的努力才能实现这一点。这里公开的装置在速度方面具有优势,这是因为能够在不同部件(87)的预对准的轴向位置之间非常迅速地改变,而实际的轴向对准是手动地进行的,或者是利用慢而廉价的致动器来进行的。根据本发明,轮能够承载具有不同图案尺寸的掩模。当部件槽(75)空的时候,这使得能够从结构照明的模式切换到另外的传统模式。保持在部件槽(75)中的光学部件(87)可以是预安装的单元,包括光谱滤波器(91)和待投影的结构(89)(参见图11c中较大的显示)。这里,用于在样本的位置处产生照明图案的元件(89)可以是其中透射和/或反射和/或相位性质被图案化的掩模,以便在至少一个空间方向上存在周期性。一个或多个视场光阑(可变光阑或固定直径)也可以分别安装在部件槽(75)中或安装在各部件(79)中。
图11中描述和示出的装置能够同时实现几个任务:
根据安装的部件,部件轮(73)位置的改变能够在与装置的色彩校正相对应的光学部件(87)的几个轴向对准之间切换;能够在掩模的不同图案尺寸之间变化,适当的光谱滤波器能够被旋转到与相应的色彩校正匹配的光路(轴向位置),并且装置能够从结构照明的模式切换到传统的照明图案。
在图12中示出了用于实施结构照明的另外的照明单元(1)。这个照明单元(1)(先前在不同的实施例中已对这个照明单元进行了描述)的任务在于为投影到样本中或样本上而提供具有不同相位设置的照明分布。作为图12中示出的实施例的特定特征,在样本中产生的照明结构的相移以及装置的光谱校正通过单一致动器来进行。用于在样本内产生照明分布的元件位于先前描述的平面(3)中,平面(3)与物平面(9)和中间像平面或检测器平面(13)共轭。平面(3)、(9)和(13)彼此共轭的光学系统的具体配置可依赖于波长。针对不同波长满足这个条件(共轭的平面)是色彩校正的任务。装置使用可在光谱上切换的光源(19)。投影到样本中或样本上的照明图案的相移通过反射镜(93)来实现。在图12中,光轴(99)相对于反射镜具有45度的倾斜,然而,也可以选择其它角度。反射镜(93)通过可基于压电技术的致动器来移动。反射镜直线地移动(97)或倾斜(101)。倾斜(101)控制投影的图案的相位,而直线移动(97)允许控制相位以及色彩校正的调节,下面将对此进行讨论。反射镜(93)的直线运动导致投影到样本中或样本上的平面(3)中的固定图案的图像(4)的运动(98)。图像(4)的运动(98)具有两个分量:轴向和横向(垂直于光轴(99))。该运动的横向分量影响样本中/样本上的照明图案的相位位置,该运动的轴向分量影响光谱校正。用于照明图案的进一步成像的光学器件(可能具有管透镜的形式)的特征在于,通常具有小的数值孔径,并因此具有相应大的聚焦深度。因此,该装置能够被配置为使得照明图案的相位位置对运动(98)比对色彩校正((4)的轴向位置)更敏感。
对于按成像的平面(3)中图案的周期性的次序的(97)的较小的运动,主要是投影到样本中或样本上的光分布的相位改变,而(98)的轴向运动分量的影响可以忽略。如果致动器(95)移动了较大距离,则除了投影图案的几个周期的相位的改变之外,结构的图像的轴向位置也改变,这能够用于装置的光谱校正。因此,单一致动器(95)足以控制投影图案的相位以及样本中照明图案的轴向位置。由于由单一致动器影响的这两个参数的不同敏感性,所以这基本上是可行的。根据本发明的这种装置能够结合根据本发明的仅使用两个照明步骤的结构照明的方法使用,或者能够结合根据现有技术状态的使用三个或更多个步骤的结构照明的方法使用。
在图12中还显示的照明单元(2)是照明单元(1)的子单元。它使用所提及的平面(3)中的掩模产生照明分布。与在几个实施例中描述的照明单元(1)形成对照,单元(2)仅产生单一、稳定的照明分布,并且不像装置(1)那样其特征在于具有控制照明分布的相位的选择。
下面,将给出实现本发明的另外的实施例或根据现有技术状态的结构照明的另一方法,其中,主要考虑简单的集成到现有显微镜系统的问题以及轴向色彩校正的问题。
现在,再次参照图1。在波长改变期间样本(10)内由检测单元(11)成像的平面和与平面(3)共轭的平面偏离的原因可能是照明光学器件(103)和成像光学器件(104)的不同的波长依赖性质。这个问题能够通过用于产生照明分布的掩模的轴向重新调节来得以解决。
根据本发明,如果用于把照明图案成像到样本中的光学器件(103)(照明管光学器件)以及用于把来自样本的照明分布成像到检测单元上的光学器件(104)(检测器管光学器件)具有相同的性质(即,设计相同),则能够减少或完全避免光谱校正所需的努力。在并非为了结构照明而设计的标准显微镜中,照明管光学器件和检测器管光学器件经常具有不同的性质和直径,因为它们是为了不同的要求而设计的。
在图13中,示出了用于在显微镜中实施结构照明的升级单元(upgrade unit),其中,升级单元(109)附着到原始显微镜(110)的照相机端口(111)。这种照相机端口是用于安装空间分辨检测器(诸如,CCD照相机)的标准化机械接口。通常的标准是“C-mount”。中间像平面(113)对应于其中图像传感器(例如,CCD)被假定位于原始显微镜装置(110)中的平面。在图1中,检测器平面(13)对应于图13的中间像平面(113)。
通过去除检测单元(11)、二向色镜(7)和(可选的)其它照明器件能够升级图1中示出的显微镜装置,其中,图13中的升级模块被附着为使得中间像平面(113)位于以前的图1中的检测器平面(13)的位置。对于投影的照明图案的相位的改变,存在两种都分别包含在图13内的可能性或配置。
第一配置结合固定的二向色镜或半透明反射镜(115)使用所描述的照明单元(1),该照明单元(1)包含用于改变相位设置的装置。第二配置使用较不复杂的照明单元(2),该照明单元(2)发射静态的照明分布并通过致动器(95)控制投影到样本上或样本中的照明图案,该致动器(95)移动二向色镜或半透明反射镜(115)以便改变在样本中或样本上产生的照明图案的相位。
在图13中,照明单元(2)的图像通过与投影到样本中或样本上的照明图案的相移相对应的二向色镜和/或半透明反射镜(115)的直线(97)和/或倾斜(101)运动来移动。管透镜(105)对中间图像(113)成像,而二向色镜或半透明反射镜位于其中光基本上准直的光路的位置。光学单元(103)和(104)(管光学器件)优选地具有相似的光谱性质,并且优选地以相同的方式构造。这种对称导致这样的情况:独立于波长,平面(3)和(13)分别经光学器件(103)和(104)彼此足够接近地成像到样本内的平面中,以便根据良好的近似,它们能够被视为共轭平面。因此,可以不需要使用机械移动部件的有效光谱校正(active spectral correction),这使得装置更快、更较不复杂。因此,这里公开了用于结构照明的装置,该装置尽管在使用不同波长的情况下也可以工作而不需要移动机械部件。图13中示出的显微镜装置(110)的截面使用结构照明进行升级,并且还显示具有关联的管透镜(117)的照相机端口(111),管透镜(117)原来期望用于在平面(113)中产生样本的实像,其中,(119)是显微镜的准直光路(无限光路)的一部分。因为平面(113)中的中间图像对于提出的装置来说并非是严格必要的,所以图13中示出的装置的光学效率能够通过图14中示出的另一变型例来得以提高。这里,去除了显微镜的管光学器件(117)和升级模块(109)的(105),这导致了显微镜的无限光路的延长直到二向色镜或半透明反射镜(115)并超出它。在有利的实施方式中,管光学器件(104)和(103)与显微镜的原始管光学器件(117)具有相同的性质。
在另一实施例中,将示出把用于结构照明的装置集成到显微镜中,其中,部件的附图标记与图14相同,并且该显微镜的特征在于具有至少两个照相机端口(111)。
图15示出显微镜系统(110)的截面,其中,(119)是连接到显微镜装置的物镜(5)的无限光路的一部分。在实际的装置中,该光路可能通过反射镜或分束器折叠一次或几次,这里为了简单起见而没有对此进行示出。在照相机端口(111)之一上,安装了检测单元(11),其中,由管光学器件(104)形成的实像成像到检测平面(13)上,该检测平面(13)又与样本(10,未示出)内的平面(9)共轭,照明单元(1)或(2)将周期性的照明图案投影在样本中。检测单元(11)的特征在于可以具有几个空间分辨检测器。在最简单的情况下,(11)是如通常一样安装在照相机端口(111)上的照相机。照明单元(1)或(2)也安装在照相机端口(111)上。这里,与样本上或样本中的平面(9)和检测单元上的平面(13)共轭的平面(3)被正好调节到通常安装标准的空间分辨检测器的位置。通常用于在空间分辨检测器上形成实像的管光学器件(103)现在用于把照明单元和掩模或它在平面(3)中的图像成像到样本中。原始的显微镜装置(110)替代被假定在两个照相机端口(111)之间分布检测光的二向色分束器或半透明反射镜(115)来提供了分束器。安装的元件(115)的功能是从源自样本的检测光中分解出来自照明单元(1)或(2)的照明光。在使用先前描述的照明单元(1)的情况下,使用固定的、不移动的二向色滤波器或半透明反射镜(115),并且省略致动器(95),其中,该照明单元(1)的特征在于具有用于控制投影到样本上或样本中的照明图案的相位的器件。如果使用没有用于相位控制的特征的较不复杂的照明单元(2),则元件(115)可以在致动器(95)帮助下移动,致动器(95)允许通过横向运动(97)和/或倾斜来控制投影到样本上或样本中的照明图案的相位。在适合荧光的装置中,例如,元件(115)可以是多带二向色镜的形式。应该指出的是,使用如图15中所示的装置需要去除显微镜装置(110,图中未示出)的原始分束器或者用反射镜替代显微镜装置(110)的原始分束器。使用两个照相机端口(111)具有这样的优点:管光学器件(103)和(104)(可)具有相同的光谱性质,并且根据现有技术状态的慢的、机械的色彩校正不是必要的。如果显微镜装置具有两个以上的照相机端口(111),则检测光路(121)可在穿过元件(115)之后被分成两个或更多个路径,并且可以被引向安装在适当的照相机端口上的检测单元(11)。
在图14和图15中,管光学器件(104)可以用图9中的用于同时检测单一检测器上的不同(例如,光谱)波道的单元来代替。这里,示出了分成两个波道的情况。图9中示出的检测单元的位置在紧挨在从检测光中分离照明光的分束器之后的无限光路内。与在实的中间图像之后的常见装置(诸如,在单元(11)内)形成对照,这种甚至在中间图像之前的布置方式具有进一步提高光学效率的优点。
根据本发明的方法可以总结如下:
在第一步骤中,将稍后也用于产生光学截面图像的一个或多个照明图案被投影到已知的校准物体上。根据用于计算光学截面图像自身的这个数据或图像数据,针对检测器上的每个位置,确定投影图案的局部相位和(可选的)结构的局部周期和/或投影步骤的强度分布。如果投影的照明图案的局部相位和周期能够根据在处理中稍后记录的图像数据来确定,则可以不需要校准测量来进行工作。
在可能重复多次以及针对几个波长和样本的不同轴向位置的处理的其它步骤中,针对在检测器上的照明分布的局部相位和光栅频率的帮助下计算的每个光学截面图像,存在两个投影到样本上的图案。根据现有技术状态的结构照明的实施方式为了产生一个光学截面图像需要至少三个投影步骤,因此效率比较低。另外,提出了甚至同时在一个实施例中执行两个照明图案的投影而不需要移动机械元件的根据本发明的装置。投影的光分布的选择可以通过光源和/或光学开关的电子控制来实现。根据本发明的其它装置允许改变成像波长而不需要移动机械元件。
用于确定局部相位和光栅频率的校准测量仅在光学系统发生改变的情况下(诸如,物镜改变,以及也许在首次使用新的波长的时候)才必须被执行。当可以根据记录的图像数据以足够的质量进行确定时以及当可以容忍需要的计算时间时,可以省略校准测量。
参考文献
[1]Marvin Minsky,″Microscopy Apparatus″,US patent 3013467,1961
[2]M.A.A.Neil,R.Juskaitis,and T.Wilson:″Method of Obtaining OpticalSectioning by using Structured Light in a conventional microscope″,OpticsLetters,Vol.22,No.24,p.1905,1997
[3]Wilson et al.,″Microscopy Imaging Apparatus and Method″,US patent6376818,2002
[4]Gerstner et al.,″Assembly for Increasing the Depth Discrimination of anOptical Imaging System″,US patent 681945 B2,2004
[5]Gerstner et al.,″Assembly for Increasing the Depth Discrimination of anOptical Imaging System″,Internationales Patent WO02/12945,2002
[6]M.A.A.Neil et al.,″Real Time 3D Fluorescence Microscopy by Two-BeamInterference Illumination″,Optics Communications,153,1998
[7]Schaefer,″Structured illumination microscopy:artefact analysis andreduction utilizing a parameter optimization approach″,Journal of Microscopy216(2),165-174,2004
[8]Wilson et al.,″Confocal Microscopy Apparatus and Method″,US patent6687052,2004
[9]Ralf Wolleschensky,″Verfahren und Anordnung zurop-tischen Erfassung einer Probe″,Patent EP 1420281,2004
[10]Mark Hopkins,″Multi-Spectral Two-Dimensional Imaging Spectrometer″,US patent US5926283
[11]Colin G.Morgan,″Optical Sensor for imaging an object″,United StatesPatent US5381236
[12]Chenggen Quan et al.,″Shape measurement by use of liquid-crystaldisplay fringe projection with two-step phase shifting″,Applied Optics,Vol,42,No.13,2003,2329-2335
[13]S.E.D.Webb et al,″A wide field timeβdomain fluorescence lifetimeimaging microscope with optical sectioning″,Review of ScientificInstruments,Vol.73,No.4,2002,1898-1907
[14]L.G.Kryewina and M.K.Kim,″Single-exposure optical sectioning bycolor structured illumination microscopy″,Optics Letters,Vol.31,No.4,2006,477-479
Claims (22)
1.一种通过对样本的结构照明来产生光学截面图像的方法,其中,在至少一个空间方向上具有周期性的照明分布被投影到样本平面中,并且,使在样本上反射的光和/或散射和/或发射的荧光和/或冷光在空间分辨检测器上形成图像,
其中,
存在校准步骤,在该校准步骤中,针对检测器上的每个位置确定照明分布的局部相位和/或局部周期,并且
在样本扫描模式中,
--为了计算每个光学截面图像,两个照明分布投影到样本中或样本上,并且使得到的光分布在检测器上形成图像,
--两个照明分布的投影和检测的处理步骤能够重复任何期望的次数,尤其是对于样本的不同聚焦位置和/或不同的照明波长,以及
根据强度分布,在局部相位和/或局部周期的帮助下,从记录的强度分布计算至少一个光学截面图像。
2.如权利要求1所述的通过对样本的结构照明来产生光学截面图像的方法,
其中,
针对检测器上的每个位置确定照明分布的局部相位和/或局部周期,
--使用源自投影的强度分布和对优选地具有同质性质的已知校准物体上的至少一种照明光分布的检测,其中,该照明分布与稍后在样本采集模式中使用的照明分布相同,或者
针对检测器上的每个位置确定照明分布的局部相位和/或局部周期,
--使用在样本扫描模式中记录的强度数据。
3.如权利要求1所述的通过对样本的结构照明来产生光学截面图像的方法,
其中,
投影到样本中或样本上的这两种照明分布的相位彼此相差180度。
4.如权利要求1所述的方法,
其中,
为了根据每两个记录的照明分布计算光学截面图像,使用照明分布之间的差别和/或两种强度分布内的空间性质之间的差别,其中,所述空间性质能够是照明分布内的偏导数或梯度。
5.如权利要求1所述的方法,
其中,
针对样本的不同平面执行光学截面图像的产生,因此,逐层地对样本进行扫描,其中,为了对样本进行聚焦,移动样本自身和/或光学装置的部件,并且根据一系列的光学截面图像产生代表样本的三维形状的数据集。
6.如权利要求1所述的产生光学截面图像的方法,
其中,
除了照明分布的强度之外,该照明分布的时间性质也被调制,发射处理的时间性质由检测器记录,并且确定荧光寿命和/或冷光寿命。
7.一种尤其是用于实施根据权利要求1至6中任一项所述的方法的产生光学截面图像的装置,该装置包括照明单元、用于把样本成像到至少一个空间分辨检测器上的光学装置、聚焦装置以及信号处理单元,
其中,
照明单元在样本中或样本上产生两种不同的照明分布,这些照明分布在至少一个空间方向上具有周期性,产生照明分布的样本平面与相应的空间分辨检测器的平面共轭,由于与照明光的相互作用而得到的样本内的光分布被顺序地或同时地登记于所述一个或多个空间分辨检测器上,并被提供给信号处理单元,以便计算光学截面图像。
8.如权利要求7所述的装置,
其中,
为了校准在一个或多个检测器上登记的光分布,尤其是照明图案的相位和/或局部周期和/或均匀性,存在校准物体,校准物体代替样本被插入,或者能够被放到光学系统中的位置或安装在与样本共轭的像平面中,其中,校准物体优选地具有同质的和/或已知的样本性质,并且优选地是平坦的。
9.如权利要求7所述的产生光学截面图像的装置,
其中,
所述一个或多个空间分辨检测器检测从样本发射的荧光和/或冷光,其中,通过照明单元激发的时间调制结合同步检测或时间分辨检测来实施,并且确定荧光和/或冷光寿命。
10.如权利要求7所述的产生光学截面图像的装置,
其中,
用于在样本中或样本上产生照明分布的照明单元使用透射和/或反射中的掩模或相位掩模或诸如LCD矩阵的像素化元件或可寻址反射镜阵列(DLP),或者通过平面波的干涉来产生照明图案。
11.如权利要求7所述的产生光学截面图像的装置,
其中,
照明单元产生两种照明分布,其中,这两种周期性光分布的相位彼此相差180度。
12.如权利要求7所述的产生光学截面图像的装置,
其中,
这两种照明分布是通过掩模结构的前照明或后照明在照明单元内产生的。
13.如权利要求7所述的产生光学截面图像的装置,
其中,
这两种照明分布是通过光源的电子切换和/或光纤开关的切换在照明单元内配置的。
14.如权利要求7所述的产生光学截面图像的装置,
其中,
该装置允许对由照明单元发射的光和/或由所述至少一个空间分辨检测器登记的光的光谱成分进行配置和/或切换。
15.如权利要求7所述的产生光学截面图像的装置,
其中,
在用于产生照明分布的照明单元内使用的掩模预安装在部件更换器内,其中,部件槽中的各掩模能够在图案尺寸或周期性方面不同,光学系统内沿光轴的掩模的轴向位置能够在各部件槽之间不同并能够被预对准,其中,掩模元件能够组合成具有光谱滤波器的单元。
16.如权利要求7所述的产生光学截面图像的装置,
其中,
两种照明分布同时投影到样本上或样本中并被检测,其中,用于这两种投影的光在偏振和/或光谱成分方面不同,照明光的这些不同性质导致从样本同时发射的光分布的不同性质,从样本发射的光的这些性质用于在检测侧分离照明图案,这两种照明分布能够同时分布到一个或多个空间分辨检测器。
17.一种尤其是用于实施根据权利要求1至6中任一项所述的方法的产生光学截面图像的装置,该装置包括用于在样本中或样本上产生照明分布的照明单元、用于登记来自样本的信号的至少一个空间分辨检测器、聚焦装置以及信号处理单元,
其中,
由照明单元投影的结构的相移和可选的色彩校正通过反射镜或二向色镜的直线运动或倾斜来实现,这涉及把照明单元成像到样本中,其中色彩校正意味着产生照明图案的样本平面与成像到一个或多个检测器上的平面的匹配。
18.一种尤其是用于实施根据权利要求1至6中任一项所述的方法的产生光学截面图像的装置,该装置包括用于在样本中或样本上逐步产生几种光分布的照明单元、用于登记样本中或样本上的光分布的至少一个空间分辨检测器、用于选择样本平面的聚焦装置以及信号处理单元,
其中,
轴向色差通过优选地在来自照明单元的输出之后的光路的准直部分、和/或物镜的光瞳面、或与该光瞳面共轭的平面、和/或空间分辨检测系统的一个或多个光谱波道中插入一个或多个校正元件来补偿,其中,校正元件优选地包含衍射光学元件或全息图,成像波长的改变不需要在照明结构的投影过程中所涉及的元件的机械运动,并且,在样本位置处潜在的残余轴向色差在数据采集期间通过软件来补偿,或者通过样本的轴向运动来补偿。
19.一种尤其是用于实施根据权利要求1至6中任一项所述的方法的产生光学截面图像的装置,该装置包括用于在样本中或样本上产生光分布的照明单元、用于登记样本中或样本上的光分布的至少一个空间分辨检测器、用于选择样本平面的聚焦装置以及信号处理单元,
其中,
用于照明和检测的光路在光学上与这些光路的轴向色彩校正相同,其中,特别地,这些光路能够以相同的方式构造,从而使得不需要在波长改变期间为了调节轴向色差而执行的对光学元件的机械重新调节。
20.一种尤其是用于实施根据权利要求1至6中任一项所述的方法的产生光学截面图像的装置,包括用于在样本中或样本上产生光分布的照明单元、用于登记样本中或样本上的光分布的至少一个空间分辨检测器、显微镜装置、用于选择样本平面的聚焦装置以及信号处理单元,
其中,
包括照明单元和检测单元的模块连接到显微镜装置的照相机端口,其中,该模块包含用于分离照明光和检测光的分束器,并且显微镜的原始分束器被去除或由反射镜代替。
21.一种尤其是用于实施根据权利要求1至6中任一项所述的方法的产生光学截面图像的装置,包括用于在样本中或样本上产生光分布的照明单元、用于登记样本中或样本上的光分布的至少一个空间分辨检测器、显微镜装置、用于选择样本平面的聚焦装置以及信号处理单元,
其中,
照明模块附着到所述显微镜装置的第一照相机端口,并且至少一个检测单元附着到显微镜装置的至少一个另外的照相机端口。
22.如权利要求19至21中的一项或多项所述的在显微镜中产生光学截面图像的装置,
其中,
紧接在无限光路中的二向色分束器之后进行用于分成一个或多个光谱波道的光谱分离,以便在仅一个空间分辨检测器上同时投影,其中,所述分束器执行对照明光和检测光的分离,并且在形成中间图像之前执行对光谱波道的分离。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102007018048.0 | 2007-04-13 | ||
DE102007018048A DE102007018048A1 (de) | 2007-04-13 | 2007-04-13 | Verfahren und Anordnung zur optischen Abbildung mit Tiefendiskriminierung |
PCT/EP2008/054390 WO2008125605A2 (de) | 2007-04-13 | 2008-04-11 | Verfahren und anordnung zur optischen abbildung mit tiefendiskriminierung |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101680749A true CN101680749A (zh) | 2010-03-24 |
CN101680749B CN101680749B (zh) | 2013-07-10 |
Family
ID=39642649
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2008800185091A Active CN101680749B (zh) | 2007-04-13 | 2008-04-11 | 具有深度鉴别的光学再现的方法和装置 |
Country Status (5)
Country | Link |
---|---|
US (1) | US7977625B2 (zh) |
EP (1) | EP2137488B1 (zh) |
CN (1) | CN101680749B (zh) |
DE (1) | DE102007018048A1 (zh) |
WO (1) | WO2008125605A2 (zh) |
Cited By (23)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103198511A (zh) * | 2011-09-15 | 2013-07-10 | 佳能株式会社 | 图像处理装置及图像处理方法 |
CN103257367A (zh) * | 2012-02-21 | 2013-08-21 | 株式会社理光 | 光学目标检测 |
CN103868471A (zh) * | 2012-12-12 | 2014-06-18 | 佳能株式会社 | 三维形状测量装置及其控制方法 |
CN104303089A (zh) * | 2012-05-16 | 2015-01-21 | 卡尔蔡司显微镜有限责任公司 | 光学显微镜和用于利用光学显微镜记录图像的方法 |
CN105026916A (zh) * | 2013-03-06 | 2015-11-04 | 浜松光子学株式会社 | 荧光受光装置以及荧光受光方法 |
CN105518507A (zh) * | 2013-09-11 | 2016-04-20 | 西诺德牙科设备有限公司 | 用于为共聚焦显微镜生成随时间推移而变化的图案的光学系统 |
CN105874391A (zh) * | 2013-12-02 | 2016-08-17 | Imec 非营利协会 | 用于执行物体的同轴无透镜数字全息术的装置和方法 |
CN106716485A (zh) * | 2014-09-15 | 2017-05-24 | 卡尔蔡司显微镜有限责任公司 | 用于产生结果图像的方法和光学器件 |
CN108303373A (zh) * | 2018-02-01 | 2018-07-20 | 京东方科技集团股份有限公司 | 一种检测消影等级的装置及其控制方法 |
CN108885336A (zh) * | 2016-04-08 | 2018-11-23 | 徕卡显微系统复合显微镜有限公司 | 用于研究样品的方法和显微镜 |
CN110057743A (zh) * | 2019-05-06 | 2019-07-26 | 西安交通大学 | 基于光学虚拟染色的血涂片免标记细胞三维形态检测方法 |
CN110207609A (zh) * | 2019-04-25 | 2019-09-06 | 合刃科技(武汉)有限公司 | 基于多种光谱的主动光的三维成像方法、装置及存储介质 |
CN110233973A (zh) * | 2019-05-28 | 2019-09-13 | 怀光智能科技(武汉)有限公司 | 一种玻片扫描仪光源 |
CN110573831A (zh) * | 2017-08-04 | 2019-12-13 | Ifm电子股份有限公司 | 光截面传感器和用于操作光截面传感器的方法 |
CN110824690A (zh) * | 2019-11-13 | 2020-02-21 | 河北工程大学 | 一种基于大数据的司法痕检用全息显微设备 |
CN111356896A (zh) * | 2020-02-24 | 2020-06-30 | 长江存储科技有限责任公司 | 用于半导体芯片表面形貌计量的系统和方法 |
CN111656251A (zh) * | 2017-11-16 | 2020-09-11 | Sd光学公司 | 功能模块和配备有该功能模块的显微镜 |
CN111664884A (zh) * | 2019-03-06 | 2020-09-15 | 株式会社大福 | 检查系统 |
CN113252633A (zh) * | 2021-07-14 | 2021-08-13 | 季华实验室 | 一种液相芯片分析仪的质控检测方法及标准盘 |
CN114502914A (zh) * | 2019-08-21 | 2022-05-13 | 卡尔蔡司Smt有限责任公司 | 测试干涉仪的衍射光学元件 |
US11448499B2 (en) | 2020-02-24 | 2022-09-20 | Yangtze Memory Technologies Co., Ltd. | Systems and methods for semiconductor chip surface topography metrology |
US11454491B2 (en) | 2020-02-24 | 2022-09-27 | Yangtze Memory Technologies Co., Ltd. | Systems having light source with extended spectrum for semiconductor chip surface topography metrology |
US11562919B2 (en) | 2020-02-24 | 2023-01-24 | Yangtze Memory Technologies Co., Ltd. | Systems and methods for semiconductor chip surface topography metrology |
Families Citing this family (57)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2010077205A1 (en) * | 2009-01-05 | 2010-07-08 | Ge Healthcare Bio-Sciences Corp | A system and method for simultaneously obtaining a plurality of images in an imaging system |
DE102009009950A1 (de) | 2009-02-23 | 2010-10-21 | Confovis Gmbh | Anordnung und Verfahren für die Gewinnung von dreidimensionalen Objektdaten |
EP2223650A1 (en) * | 2009-02-25 | 2010-09-01 | The Provost, Fellows and Scholars of the College of the Holy and Undivided Trinity of Queen Elizabeth near Dublin | Method and apparatus for imaging tissue topography |
GB0907965D0 (en) * | 2009-05-08 | 2009-06-24 | King S College London | Imaging system |
JP5654583B2 (ja) | 2009-06-17 | 2015-01-14 | 3シェイプ アー/エス | 焦点操作装置 |
US8414124B2 (en) | 2009-10-21 | 2013-04-09 | Sis Ag, Surgical Instrument Systems | Device and method for measuring a cornea |
EP2314200B1 (de) * | 2009-10-21 | 2016-01-13 | SIS AG, Surgical Instrument Systems | Vorrichtung und Verfahren zum Vermessen einer Cornea |
ES2364916B1 (es) * | 2010-03-05 | 2012-09-04 | Consejo Superior De Investigaciones Científicas (Csic) | Instrumento para la realizacion de imagenes de campo ancho a distintas profundidades de un especimen |
WO2011119678A2 (en) | 2010-03-23 | 2011-09-29 | California Institute Of Technology | Super resolution optofluidic microscopes for 2d and 3d imaging |
DE102010016598A1 (de) * | 2010-04-23 | 2011-10-27 | Leica Microsystems Cms Gmbh | Verfahren zum Untersuchen einer fluoreszierende Farbstoffe enthaltenden Probe mit Hilfe eines Mikroskops |
JP2011229603A (ja) * | 2010-04-26 | 2011-11-17 | Fujifilm Corp | 内視鏡装置 |
JP2011229625A (ja) * | 2010-04-26 | 2011-11-17 | Fujifilm Corp | 内視鏡装置 |
US10010268B2 (en) * | 2010-09-15 | 2018-07-03 | Olympus Corporation | Endoscope apparatus |
EP2437027A3 (de) | 2010-10-03 | 2012-05-30 | Confovis GmbH | Vorrichtung und Verfahren zur dreidimensionalen optischen Abtastung einer Probe |
US9643184B2 (en) * | 2010-10-26 | 2017-05-09 | California Institute Of Technology | e-Petri dishes, devices, and systems having a light detector for sampling a sequence of sub-pixel shifted projection images |
JP2013542468A (ja) | 2010-10-26 | 2013-11-21 | カリフォルニア インスティチュート オブ テクノロジー | 走査型投影レンズレス顕微鏡システム |
US9569664B2 (en) * | 2010-10-26 | 2017-02-14 | California Institute Of Technology | Methods for rapid distinction between debris and growing cells |
JP2014515179A (ja) | 2011-03-03 | 2014-06-26 | カリフォルニア インスティチュート オブ テクノロジー | 光ガイドピクセル |
DE102011017046A1 (de) * | 2011-04-14 | 2012-10-18 | Till Photonics Gmbh | Umschaltbare Mikroskopanordnung mit mehreren Detektoren |
DE102011114932A1 (de) | 2011-10-06 | 2013-04-11 | Hommel-Etamic Gmbh | Verfahren zur Ermittlung einer Kontur einer Oberfläche |
US8340456B1 (en) * | 2011-10-13 | 2012-12-25 | General Electric Company | System and method for depth from defocus imaging |
DE102012007045B4 (de) | 2012-04-05 | 2023-03-16 | Carl Zeiss Microscopy Gmbh | Vorrichtung und Verfahren zur Mikroskopie |
AU2013202804A1 (en) * | 2012-06-14 | 2014-01-16 | Gen-Probe Incorporated | Use of a fluorescent material to detect failure or deteriorated performance of a fluorometer |
DE102012017920B4 (de) * | 2012-09-11 | 2023-11-30 | Carl Zeiss Microscopy Gmbh | Optikanordnung und Lichtmikroskop |
DE102012017922B4 (de) * | 2012-09-11 | 2024-03-14 | Carl Zeiss Microscopy Gmbh | Optikanordnung und Lichtmikroskop |
JP6128822B2 (ja) * | 2012-12-05 | 2017-05-17 | オリンパス株式会社 | 光学装置 |
US20140235948A1 (en) * | 2013-02-19 | 2014-08-21 | The Board Of Trustees Of The Leland Stanford Junior University | Method for single-fiber microscopy using intensity-pattern sampling and optimization-based reconstruction |
DE102013103333A1 (de) * | 2013-04-03 | 2014-10-09 | Karl Storz Gmbh & Co. Kg | Kamera zur Erfassung von optischen Eigenschaften und von Raumstruktureigenschaften |
US9618450B2 (en) | 2013-09-27 | 2017-04-11 | Ecolab USA, Inc. | Multi-channel fluorometric sensor and method of using same |
JP6811610B2 (ja) * | 2013-10-01 | 2021-01-13 | レニショウ パブリック リミテッド カンパニーRenishaw Public Limited Company | 電子コンポーネントを製造する方法 |
WO2015118120A1 (en) | 2014-02-07 | 2015-08-13 | 3Shape A/S | Detecting tooth shade |
JP6378931B2 (ja) * | 2014-05-21 | 2018-08-22 | 浜松ホトニクス株式会社 | 顕微鏡装置及び画像取得方法 |
DE102014009372A1 (de) * | 2014-06-23 | 2015-12-24 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. | Anordnung zur Bestimmung von Eigenschaften und/oder Parametern einer Probe und/oder mindestens einer auf oder an einer Oberfläche einer Probe ausgebildeten Schicht |
US9675430B2 (en) | 2014-08-15 | 2017-06-13 | Align Technology, Inc. | Confocal imaging apparatus with curved focal surface |
CN104296660A (zh) * | 2014-11-05 | 2015-01-21 | 哈尔滨工业大学 | 基于结构光方法的微观光滑自由曲面样品测量装置和方法 |
CN104570315B (zh) * | 2014-12-30 | 2017-06-27 | 中国科学院西安光学精密机械研究所 | 一种基于结构照明的彩色三维层析显微成像系统及方法 |
DE102015208080A1 (de) * | 2015-04-30 | 2016-11-03 | Carl Zeiss Microscopy Gmbh | Verfahren zur Reflexionskorrektur von Abbildungen und diesbezügliche Vorrichtungen |
DE102015209402A1 (de) * | 2015-05-22 | 2016-11-24 | Sirona Dental Systems Gmbh | Vorrichtung zur optischen 3D-Vermessung eines Objekts |
DE102015210016A1 (de) | 2015-06-01 | 2016-12-01 | Carl Zeiss Microscopy Gmbh | Verfahren zum Ermitteln einer ortsaufgelösten Höheninformation einer Probe mit einem Weitfeldmikroskop und Weitfeldmikroskop |
DE102015108912A1 (de) | 2015-06-05 | 2016-12-08 | Carl Zeiss Microscopy Gmbh | Vorrichtung und Verfahren zur Erfassung von Oberflächentopographien |
DE102015217091B4 (de) | 2015-09-07 | 2017-05-11 | Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V | Anordnung zur Bestimmung der erreichbaren Haftfestigkeit vor Ausbildung einer stoffschlüssigen Verbindung an einer Oberfläche eines Fügepartners |
US10725279B2 (en) * | 2016-04-08 | 2020-07-28 | Arizona Board Of Regents On Behalf Of The University Of Arizona | Systems and methods for extended depth-of-field microscopy |
JP2017207329A (ja) * | 2016-05-17 | 2017-11-24 | Juki株式会社 | 照明装置及び検査装置 |
DE102016117803A1 (de) | 2016-09-21 | 2018-03-22 | Leica Microsystems Cms Gmbh | Mikroskopbeleuchtungsanordnung zur strukturierten Beleuchtung |
US11889979B2 (en) * | 2016-12-30 | 2024-02-06 | Barco Nv | System and method for camera calibration |
DE102017205474B4 (de) | 2017-03-31 | 2019-06-27 | Robert Bosch Gmbh | Vorrichtung, beispielsweise für einen LIDAR-Sensor, zum Erzeugen von variablen Interferenzmustern und Verfahren zum Betreiben einer solchen Vorrichtung |
CN107621463B (zh) * | 2017-10-16 | 2024-03-22 | 苏州微景医学科技有限公司 | 图像重建方法、装置及显微成像装置 |
DE102017009804A1 (de) * | 2017-10-20 | 2019-04-25 | Vermicon Ag | Verfahren zur Bewertung von mikroskopischen Proben und Vorrichtung zur Ausführung dieses Verfahrens |
JP7228917B2 (ja) * | 2018-01-02 | 2023-02-27 | キングス カレッジ ロンドン | 局在化顕微鏡法のための方法及びシステム |
TWI725875B (zh) | 2018-01-16 | 2021-04-21 | 美商伊路米納有限公司 | 結構照明成像系統和使用結構化光來創建高解析度圖像的方法 |
EP3938763A4 (en) | 2019-03-14 | 2022-12-07 | Applied Materials, Inc. | IDENTIFICATION OF LANDMARK MARKERS IN MICROSCOPE IMAGES |
US11255785B2 (en) * | 2019-03-14 | 2022-02-22 | Applied Materials, Inc. | Identifying fiducial markers in fluorescence microscope images |
KR102116232B1 (ko) * | 2019-11-12 | 2020-05-28 | (주)로고스바이오시스템스 | 시료 검출 장치 및 이를 이용한 시료 검출 방법 |
DE102021110263A1 (de) | 2021-04-22 | 2022-10-27 | MAX-PLANCK-Gesellschaft zur Förderung der Wissenschaften e.V. | Verfahren und Beleuchtungsvorrichtung der adaptiven Optik in der Reflexionsmikroskopie |
CN115061270B (zh) * | 2022-05-30 | 2024-01-16 | 中国人民解放军国防科技大学 | 一种倾斜模式望远显微组合成像方法 |
DE102022213412A1 (de) | 2022-12-12 | 2024-06-13 | Robert Bosch Gesellschaft mit beschränkter Haftung | Vorrichtung und Verfahren zur dynamischen Fluoreszenzanalyse, insbesondere für die Molekulardiagnostik |
CN116892883B (zh) * | 2023-09-11 | 2023-11-28 | 深圳市深视智能科技有限公司 | 一种倾角位移传感器及光学防抖系统 |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US3013467A (en) | 1957-11-07 | 1961-12-19 | Minsky Marvin | Microscopy apparatus |
GB9102903D0 (en) * | 1991-02-12 | 1991-03-27 | Oxford Sensor Tech | An optical sensor |
DE69802514T2 (de) | 1997-04-04 | 2002-06-27 | Isis Innovation | Abbildungssystem und -verfahren für mikroskopie |
WO1999002950A1 (en) | 1997-07-12 | 1999-01-21 | Optical Insights, Llc | Multi-spectral two-dimensional imaging spectrometer |
GB9901365D0 (en) | 1999-01-22 | 1999-03-10 | Isis Innovations Ltd | Confocal microscopy apparatus and method |
JP4429431B2 (ja) * | 1999-10-21 | 2010-03-10 | オリンパス株式会社 | 光学装置 |
JP2001330555A (ja) * | 2000-05-19 | 2001-11-30 | Yokogawa Electric Corp | 光スキャナ及びこれを用いた断層画像取得装置 |
US6628381B1 (en) * | 2000-06-20 | 2003-09-30 | Applied Materials, Inc. | Optical inspection method and apparatus utilizing a collection angle design |
DE10038527A1 (de) | 2000-08-08 | 2002-02-21 | Zeiss Carl Jena Gmbh | Anordnung zur Erhöhung der Tiefendiskriminierung optisch abbildender Systeme |
DE10118463A1 (de) | 2001-04-07 | 2002-10-10 | Zeiss Carl Jena Gmbh | Verfahren und Anordnung zur tiefenaufgelösten optischen Erfassung einer Probe |
GB0200819D0 (en) | 2002-01-15 | 2002-03-06 | Cole Polytechnique Federale De | Microscopy imaging apparatus and method for generating an image |
DE10204430A1 (de) * | 2002-02-04 | 2003-08-07 | Zeiss Carl | Stereo-Mikroskopieverfahren und Stereo-Mikroskopiesystem |
DE10254139A1 (de) | 2002-11-15 | 2004-05-27 | Carl Zeiss Jena Gmbh | Verfahren und Anordnung zur tiefenaufgelösten optischen Erfassung einer Probe |
US7041998B2 (en) * | 2003-03-24 | 2006-05-09 | Photon Dynamics, Inc. | Method and apparatus for high-throughput inspection of large flat patterned media using dynamically programmable optical spatial filtering |
US7115848B1 (en) * | 2004-09-29 | 2006-10-03 | Qioptiq Imaging Solutions, Inc. | Methods, systems and computer program products for calibration of microscopy imaging devices |
-
2007
- 2007-04-13 DE DE102007018048A patent/DE102007018048A1/de not_active Ceased
-
2008
- 2008-04-11 WO PCT/EP2008/054390 patent/WO2008125605A2/de active Application Filing
- 2008-04-11 US US12/450,759 patent/US7977625B2/en active Active
- 2008-04-11 EP EP08736106A patent/EP2137488B1/de active Active
- 2008-04-11 CN CN2008800185091A patent/CN101680749B/zh active Active
Cited By (36)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103198511A (zh) * | 2011-09-15 | 2013-07-10 | 佳能株式会社 | 图像处理装置及图像处理方法 |
CN103257367A (zh) * | 2012-02-21 | 2013-08-21 | 株式会社理光 | 光学目标检测 |
CN103257367B (zh) * | 2012-02-21 | 2015-11-18 | 株式会社理光 | 光学目标检测 |
CN104303089A (zh) * | 2012-05-16 | 2015-01-21 | 卡尔蔡司显微镜有限责任公司 | 光学显微镜和用于利用光学显微镜记录图像的方法 |
US10261300B2 (en) | 2012-05-16 | 2019-04-16 | Carl Zeiss Microscopy Gmbh | Light microscope and method for image recording using a light microscope |
US10066934B2 (en) | 2012-12-12 | 2018-09-04 | Canon Kabushiki Kaisha | Three-dimensional shape measuring apparatus and control method thereof |
CN103868471A (zh) * | 2012-12-12 | 2014-06-18 | 佳能株式会社 | 三维形状测量装置及其控制方法 |
US9740166B2 (en) | 2013-03-06 | 2017-08-22 | Hamamatsu Photonics K.K. | Fluorescence receiving apparatus and fluorescence receiving method |
CN105026916B (zh) * | 2013-03-06 | 2017-07-14 | 浜松光子学株式会社 | 荧光受光装置以及荧光受光方法 |
CN105026916A (zh) * | 2013-03-06 | 2015-11-04 | 浜松光子学株式会社 | 荧光受光装置以及荧光受光方法 |
US9910255B2 (en) | 2013-09-11 | 2018-03-06 | DENTSPLY SIRONA, Inc. | Optical system for generating a pattern which changes over time for a confocal microscope |
CN105518507A (zh) * | 2013-09-11 | 2016-04-20 | 西诺德牙科设备有限公司 | 用于为共聚焦显微镜生成随时间推移而变化的图案的光学系统 |
CN105874391B (zh) * | 2013-12-02 | 2019-04-02 | Imec 非营利协会 | 用于执行物体的同轴无透镜数字全息术的装置和方法 |
CN105874391A (zh) * | 2013-12-02 | 2016-08-17 | Imec 非营利协会 | 用于执行物体的同轴无透镜数字全息术的装置和方法 |
CN106716485A (zh) * | 2014-09-15 | 2017-05-24 | 卡尔蔡司显微镜有限责任公司 | 用于产生结果图像的方法和光学器件 |
CN108885336A (zh) * | 2016-04-08 | 2018-11-23 | 徕卡显微系统复合显微镜有限公司 | 用于研究样品的方法和显微镜 |
CN108885336B (zh) * | 2016-04-08 | 2021-12-14 | 徕卡显微系统复合显微镜有限公司 | 用于研究样品的方法和显微镜 |
CN110573831A (zh) * | 2017-08-04 | 2019-12-13 | Ifm电子股份有限公司 | 光截面传感器和用于操作光截面传感器的方法 |
CN111656251A (zh) * | 2017-11-16 | 2020-09-11 | Sd光学公司 | 功能模块和配备有该功能模块的显微镜 |
CN108303373A (zh) * | 2018-02-01 | 2018-07-20 | 京东方科技集团股份有限公司 | 一种检测消影等级的装置及其控制方法 |
CN111664884A (zh) * | 2019-03-06 | 2020-09-15 | 株式会社大福 | 检查系统 |
CN110207609A (zh) * | 2019-04-25 | 2019-09-06 | 合刃科技(武汉)有限公司 | 基于多种光谱的主动光的三维成像方法、装置及存储介质 |
CN110207609B (zh) * | 2019-04-25 | 2021-03-23 | 合刃科技(武汉)有限公司 | 基于多种光谱的主动光的三维成像方法、装置及存储介质 |
CN110057743A (zh) * | 2019-05-06 | 2019-07-26 | 西安交通大学 | 基于光学虚拟染色的血涂片免标记细胞三维形态检测方法 |
CN110233973A (zh) * | 2019-05-28 | 2019-09-13 | 怀光智能科技(武汉)有限公司 | 一种玻片扫描仪光源 |
CN110233973B (zh) * | 2019-05-28 | 2021-01-15 | 怀光智能科技(武汉)有限公司 | 一种玻片扫描仪光源 |
CN114502914A (zh) * | 2019-08-21 | 2022-05-13 | 卡尔蔡司Smt有限责任公司 | 测试干涉仪的衍射光学元件 |
CN110824690A (zh) * | 2019-11-13 | 2020-02-21 | 河北工程大学 | 一种基于大数据的司法痕检用全息显微设备 |
US11243067B2 (en) | 2020-02-24 | 2022-02-08 | Yangtze Memory Technologies Co., Ltd. | Systems and methods for semiconductor chip surface topography metrology |
CN111356896A (zh) * | 2020-02-24 | 2020-06-30 | 长江存储科技有限责任公司 | 用于半导体芯片表面形貌计量的系统和方法 |
US11448499B2 (en) | 2020-02-24 | 2022-09-20 | Yangtze Memory Technologies Co., Ltd. | Systems and methods for semiconductor chip surface topography metrology |
US11454491B2 (en) | 2020-02-24 | 2022-09-27 | Yangtze Memory Technologies Co., Ltd. | Systems having light source with extended spectrum for semiconductor chip surface topography metrology |
US11562919B2 (en) | 2020-02-24 | 2023-01-24 | Yangtze Memory Technologies Co., Ltd. | Systems and methods for semiconductor chip surface topography metrology |
US11796307B2 (en) | 2020-02-24 | 2023-10-24 | Yangtze Memory Technologies Co., Ltd. | Systems and methods for semiconductor chip surface topography metrology |
CN113252633A (zh) * | 2021-07-14 | 2021-08-13 | 季华实验室 | 一种液相芯片分析仪的质控检测方法及标准盘 |
CN113252633B (zh) * | 2021-07-14 | 2021-10-12 | 季华实验室 | 一种液相芯片分析仪的质控检测方法及标准盘 |
Also Published As
Publication number | Publication date |
---|---|
EP2137488B1 (de) | 2012-08-08 |
US20100108873A1 (en) | 2010-05-06 |
EP2137488A2 (de) | 2009-12-30 |
WO2008125605A3 (de) | 2009-02-26 |
CN101680749B (zh) | 2013-07-10 |
WO2008125605A2 (de) | 2008-10-23 |
DE102007018048A1 (de) | 2008-10-16 |
US7977625B2 (en) | 2011-07-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101680749A (zh) | 具有深度鉴别的光学再现的方法和装置 | |
US10725279B2 (en) | Systems and methods for extended depth-of-field microscopy | |
US20190041621A1 (en) | Method and Configuration for the Optical Detection of an Illuminated Specimen | |
JP5878207B2 (ja) | 照明された試料を光学的に捕捉するための方法および装置 | |
US7274446B2 (en) | Method and arrangement for the deep resolved optical recording of a sample | |
CN108254909B (zh) | 光学显微镜和用于利用光学显微镜记录图像的方法 | |
US8649024B2 (en) | Non-contact surface characterization using modulated illumination | |
US8773757B2 (en) | Slit-scan multi-wavelength confocal lens module and slit-scan microscopic system and method using the same | |
US8175353B2 (en) | Method and device for producing an image of a thin layer of an object | |
US8174761B2 (en) | Total internal reflection interferometer with laterally structured illumination | |
US20090296207A1 (en) | Laser scanning microscope and its operating method | |
JP2018513404A (ja) | 光シート顕微鏡検査法によって検体を検査する方法及び配置構成 | |
TW201800720A (zh) | 光學系統及使用該系統之物體表面或內部光反射介面三維形貌偵測方法 | |
US11287629B2 (en) | Method for determining a height position of an object | |
US7645971B2 (en) | Image scanning apparatus and method | |
JP5266551B2 (ja) | 表面形状測定装置、及び表面形状測定方法 | |
KR101356706B1 (ko) | 광량 변조와 스캐닝 시스템 기반의 구조 조명 현미경 | |
WO2013105922A2 (en) | Non-contact surface characterization using modulated illumination | |
JP2013113650A (ja) | トレンチ深さ測定装置及びトレンチ深さ測定方法並びに共焦点顕微鏡 | |
JP2004191240A (ja) | 3次元形状測定装置 | |
CN107710046A (zh) | 用于使用宽场显微镜确定样本的空间分辨高度信息的方法和宽场显微镜 | |
JP2008292240A (ja) | 3次元形状観察装置 | |
JP7370326B2 (ja) | 大視野3d分光顕微鏡法 | |
US7586086B2 (en) | Scanning imaging device for image-substraction confocal microscopy | |
US11971531B2 (en) | Method and microscope for determining the thickness of a cover slip or slide |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |