CN113281305B - 一种基于散射介质实现超分辨显微成像方法及其装置 - Google Patents
一种基于散射介质实现超分辨显微成像方法及其装置 Download PDFInfo
- Publication number
- CN113281305B CN113281305B CN202110538402.7A CN202110538402A CN113281305B CN 113281305 B CN113281305 B CN 113281305B CN 202110538402 A CN202110538402 A CN 202110538402A CN 113281305 B CN113281305 B CN 113281305B
- Authority
- CN
- China
- Prior art keywords
- scattering medium
- observed
- target
- super
- resolution
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N21/47—Scattering, i.e. diffuse reflection
- G01N21/4795—Scattering, i.e. diffuse reflection spatially resolved investigating of object in scattering medium
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N21/47—Scattering, i.e. diffuse reflection
- G01N21/49—Scattering, i.e. diffuse reflection within a body or fluid
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N2021/1765—Method using an image detector and processing of image signal
- G01N2021/177—Detector of the video camera type
- G01N2021/1772—Array detector
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N2021/178—Methods for obtaining spatial resolution of the property being measured
Abstract
本发明属于光学显微成像、散射光学以及计算成像交叉领域。基于散射介质实现超分辨显微成像装置主要由照明装置1、载物台2、待观测目标3、散射介质4、光阑5、面阵探测器6和中央处理器7构成。其中,面阵探测器6与散射介质4之间的距离,需要通过考虑探测的散斑图满足奈奎斯特定理来确定;待观测目标3到散射介质4的距离,由显微成像具体的视场和分辨率来确定。光阑5紧靠散射介质4;待观测目标3置于载物台2上,由中央处理器7控制照明装置1主动引入稀疏且随机点光源照明。本发明还涉及基于散射介质实现超分辨显微成像方法。
Description
技术领域
本发明属于光学显微成像、散射光学以及计算成像交叉领域,具体涉及一种基于散射介质结合计算成像技术。
背景技术
超分辨光学成像技术通常指的是基于远场光学显微镜的超分辨成像技术,主要包括两种实现途径:一种是基于特殊强度分布照明光场的超分辨成像方法(如STED)。另一种是基于单分子成像和定位的方法(如PALM)。1.受激发射损耗显微镜技术(StimulatedEmission Depletion Microscopy,简称STED)该成像理论来源于爱因斯坦的受激辐射理论,德国科学家斯蒂芬·赫尔(Stefan W.Hell)创造性地利用受激辐射来抑制自发荧光辐射,最终实现了受激发射损耗显微镜技术(STED)。一个典型的STED显微镜需要两束严格共轴的激光,其中一束为激发光,另外一束为损耗光(也称STED光)。利用激发光使艾里斑范围内的荧光分子被激发,其电子从基态跃迁到激发态。随后,使用甜甜圈型(Doughnut,跟救生圈形状类似)的损耗光照射样品,使得处于激发光斑外围的激发态分子以受激辐射的方式释放能量回到基态,而位于激发光斑内部区域的激发态分子则不受损耗光的影响,继续以自发荧光的方式回到基态。这种照明方式的组合,将荧光发射区域限制在小于艾里斑的区域内,获得了一个小于衍射极限的荧光发光点。最后,通过在二维(或三维)空间内扫描共轴的激发光和损耗光,获得一幅二维(或三维)超分辨图像。1994年,斯蒂芬·赫尔等人提出了STED显微镜的理论。2000年,斯蒂芬·赫尔研究组通过生物实验证实了STED显微镜的超分辨成像能力。2.光激活定位显微镜技术(Photoactivation Localization Microscopy,简称PALM)阿贝极限指出,在远场无法分辨相距l/2NA的两个荧光分子所成的像,但是并没有对单个荧光分子的中心位置确定精度进行限制。如果在艾里斑内仅有一个分子在发射荧光,我们可以利用单分子定位算法并结合光学系统艾里斑的形状,以超高精度(纳米量级)获得荧光分子的中心位置。倘若将这个单分子定位思想用于实现超分辨成像,其关键在于如何在一个艾里斑内区分多个荧光分子。为了克服一个艾里斑内只允许一个分子发射荧光的限制,1995年美国科学家埃里克·白兹格(Eric Betzig)通过理论分析,提出可以利用光谱特性对艾里斑内的发射波长不同的荧光分子进行分时探测和中心位置定位,从而实现荧光密集标记样本的超分辨成像。2006年,埃里克·白兹格等人利用光激活绿色荧光蛋白(PA-GFP)的可控荧光开关特性,结合单分子定位算法,实现了生物样本的超分辨成像。他们首先利用低能量的405nm激光(激活光)来稀疏活化PA-GFP,再使用561nm激光(激发光)对活化后的PA-GFP进行单分子荧光成像,直至活化后的PA-GFP分子被光漂白。重复激活-激发-定位-漂白过程,可以在艾里斑内高精度找到大量PA-GFP分子的中心位置,从而重建出一幅由PA-GFP分子中心位置组成的超分辨图像。这种技术被称为光激活定位显微镜(Photoactivation Localization Microscopy,简称PALM)。2006年,哈佛大学的庄小威小组提出了随机光学重建显微镜(Stochastic Optical Reconstruction Microscopy,简称STORM),其成像原理与PALM类似,但是在密集标记样本内实现荧光发射稀疏化的方案有所不同。
这些传统的显微成像技术无一例外都需要构成的镜头。
发明内容
本发明所要解决的技术问题是:如何基于散射介质实现超分辨显微成像,不需要使用透镜。
本发明所采用的技术方案是:基于散射介质实现超分辨显微成像方法,按如下步骤进行:
步骤一:引入主动照明,使待观测目标的稀疏位置点随机发光n次,则有
其中,O是待观察目标的图像,Oi是待观察目标第i次发光的位置点图,n为自然数;
步骤二:采集步骤一中待观测目标的每次发光经过散射介质散射后形成的散斑图,待观测目标的n次发光相应采集获得n幅散斑图;
步骤三:待观察目标第i次发光经过散射介质散射后形成的散斑图为Ii,计算其自相关值Ii★Ii,其中★表示自相关运算;
步骤四:由于散射介质的记忆效应,即在一定的视场角度范围内,待观察目标的自相关近似等于经过介质散射测得散斑图的自相关,即其中P为功率谱,因此,依据该功率谱P,通过相位恢复算法,可以计算得到 是Oi经过散射介质的模糊的像,即因为散射介质衍射极限限制,
步骤六:在记忆效应范围内,基于散射介质实现超分辨显微成像系统,可以看成是一个线性系统,因而满足相应地因而,可以由散斑图Ii和步骤四计算得到的去获得该成像系统的点扩散函数PSF,由维纳反卷积算法得到PSF:
其中,deconv表示反卷积,{ }c表示复共轭,FFT{ }表示快速傅里叶变换,FFT-1{ }表示逆快速傅变换里叶变换,SNR表示系统的信噪比;
其中,k=1...n,Loc{ }表示高斯拟合重定位处理;
基于散射介质实现超分辨显微成像装置主要由照明装置1、载物台2、待观测目标3、散射介质4、光阑5、面阵探测器6和中央处理器7构成。其中,面阵探测器6与散射介质4之间的距离,需要通过考虑探测的散斑图满足奈奎斯特定理来确定;待观测目标3到散射介质4的距离,由显微成像具体的视场和分辨率来确定。光阑5紧靠散射介质4;待观测目标3置于载物台2上,由中央处理器7控制照明装置1主动引入稀疏且随机点光源照明。
本发明具有如下优点:成像装置结构简单;无需复杂的光机结构,就可以实现纳米尺度成像;性价比很高。仅利用基于散射介质的简易装置,就能实现纳米量级超分辨显微成像。具有成像系统装置简单、成像分辨率高、性价比高等优点。适合于生物学和生命科学等领域中,对纳米尺度微观结构的观测应用。
本发明属于无透镜成像的范畴,它不是由透镜成像原理来实现,而是依据散射介质的记忆效应实现的,即在一定的视场角度范围内,待成像目标的自相关,近似等于经过介质散射测得散斑图的自相关。为了实现超分辨成像,本发明首次提出利用待观测目标发光稀疏性、随机性、以及探测获得的对应一些列散斑图的相关性,结合计算成像算法,就可以实现纳米量级超分辨显微成像。具有成像系统装置简单、成像分辨率高、性价比高等优点。适合于生物学和生命科学等领域中,对纳米尺度微观结构的观测应用。
附图说明
图1基于散射介质实现超分辨显微成像装置示意图
1、照明装置 2、载物台 3、待观测目标 4、散射介质 5、光阑 6、面阵探测器 7、中央处理器。
具体实施方式
基于散射介质实现超分辨显微成像装置,包括按顺序直线顺序排列的照明装置1、载物台2、散射介质4、面阵探测器6,待观测目标3安装在载物台2上,光阑5安装在散射介质4的上表面,照明装置1发出的光照在载物台2上,待观测目标(3)通过光阑5后被面阵探测器6探测,照明装置1和面阵探测器6连接中央处理器7,面阵探测器6与散射介质4之间的距离满足奈奎斯特定理
面阵探测器6与散射介质4之间的距离,需要通过考虑探测的散斑图满足奈奎斯特定理来确定;待观测目标3到散射介质4的距离,由显微成像具体的视场和分辨率来确定。光阑5紧靠散射介质4;待观测目标3置于载物台2上,由中央处理器7控制照明装置1主动引入稀疏且随机点光源照明。
基于散射介质实现超分辨显微成像方法的步骤如下:
其中,O是待观察目标的图像,Oi是待观察目标第i次发光的位置点图,n为自然数;
步骤二:中央处理器7通过面阵探测器6,采集步骤一中待观测目标的每次发光经过散射介质4散射后形成的散斑图,待观测目标的n次发光相应采集获得n幅散斑图;
步骤三:待观察目标第i次发光经过散射介质散射后形成的散斑图为Ii,计算其自相关值Ii★Ii,其中★表示自相关运算;
步骤四:由于散射介质的记忆效应,即在一定的视场角度范围内,待观察目标的自相关近似等于经过介质散射测得散斑图的自相关,即其中P为功率谱,因此,依据该功率谱P,通过相位恢复算法,可以计算得到 是Oi经过散射介质的模糊的像,即因为散射介质衍射极限限制,
步骤六:在记忆效应范围内,基于散射介质实现超分辨显微成像系统,可以看成是一个线性系统,因而满足相应地因而,可以由散斑图Ii和步骤四计算得到的去获得该成像系统的点扩散函数PSF,由维纳反卷积算法得到PSF:
其中,deconv表示反卷积,{ }c表示复共轭,FFT{ }表示快速傅里叶变换,FFT-1{ }表示逆快速傅变换里叶变换,SNR表示系统的信噪比;
其中,k=1...n,Loc{ }表示高斯拟合重定位处理;
面阵探测器可以为CCD相机、sCOMS,散射介质为人工透明散射介质中一种如毛玻璃。
Claims (1)
1.基于散射介质实现超分辨显微成像方法,其特征在于按如下步骤进行:
步骤一:引入主动照明,使待观测目标的稀疏位置点随机发光n次,则有
其中,O是待观察目标的图像,Oi是待观察目标第i次发光的位置点图,n为自然数;
步骤二:采集步骤一中待观测目标的每次发光经过散射介质散射后形成的散斑图,待观测目标的n次发光相应采集获得n幅散斑图;
步骤三:待观察目标第i次发光经过散射介质散射后形成的散斑图为Ii,计算其自相关值Ii★Ii,其中★表示自相关运算;
步骤四:由于散射介质的记忆效应,即在一定的视场角度范围内,待观察目标的自相关近似等于经过介质散射测得散斑图的自相关,即其中P为功率谱,因此,依据该功率谱P,通过相位恢复算法,可以计算得到是Oi经过散射介质的模糊的像,即因为散射介质衍射极限限制,
步骤六:在记忆效应范围内,基于散射介质实现超分辨显微成像系统,可以看成是一个线性系统,因而满足相应地因而,可以由散斑图Ii和步骤四计算得到的去获得该成像系统的点扩散函数PSF,由维纳反卷积算法得到PSF:
其中,deconv表示反卷积,{}c表示复共轭,FFT{}表示快速傅里叶变换,FFT-1{}表示逆快速傅变换里叶变换,SNR表示系统的信噪比;
其中,k=1...n,Loc{}表示高斯拟合重定位处理;
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110538402.7A CN113281305B (zh) | 2021-05-17 | 2021-05-17 | 一种基于散射介质实现超分辨显微成像方法及其装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110538402.7A CN113281305B (zh) | 2021-05-17 | 2021-05-17 | 一种基于散射介质实现超分辨显微成像方法及其装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113281305A CN113281305A (zh) | 2021-08-20 |
CN113281305B true CN113281305B (zh) | 2023-04-14 |
Family
ID=77279516
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110538402.7A Active CN113281305B (zh) | 2021-05-17 | 2021-05-17 | 一种基于散射介质实现超分辨显微成像方法及其装置 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113281305B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116242252B (zh) * | 2023-05-11 | 2023-08-15 | 之江实验室 | 一种具有定位和尺寸测量功能的散射成像方法 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104849874A (zh) * | 2015-06-02 | 2015-08-19 | 西安电子科技大学 | 基于稀疏表示的随机散射光学成像系统及成像方法 |
CA2914892A1 (en) * | 2015-04-30 | 2016-10-30 | Farnoud Kazemzadeh | A system, method and apparatus for ultra-resolved ultra-wide field-of-view multispectral and hyperspectral holographic microscopy |
CN109828371A (zh) * | 2019-03-28 | 2019-05-31 | 清华大学深圳研究生院 | 一种基于移动散斑光源的大视场散射成像方法 |
WO2019186393A1 (en) * | 2018-03-27 | 2019-10-03 | Crestoptics S.P.A. | Scattering-assisted super-localization microscopy method and relative apparatus |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4563130B2 (ja) * | 2004-10-04 | 2010-10-13 | 株式会社トプコン | 光画像計測装置 |
US9019503B2 (en) * | 2010-04-19 | 2015-04-28 | The United States Of America, As Represented By The Secretary Of The Navy | MEMS microdisplay optical imaging and sensor systems for underwater and other scattering environments |
US9867525B2 (en) * | 2011-04-01 | 2018-01-16 | Nanyang Technological University | High sensitivity temporal focusing widefield multiphoton endoscope capable of deep imaging |
KR101252938B1 (ko) * | 2011-04-08 | 2013-04-12 | 한국과학기술원 | 초고해상도 현미경 시스템 및 그 시스템을 이용한 영상 획득 방법 |
EP3055643B1 (en) * | 2013-10-11 | 2019-07-31 | National University of Ireland Galway | A nano-sensitive fourier-domain optical coherence tomography inspection system |
US9817224B2 (en) * | 2014-04-30 | 2017-11-14 | University Of Connecticut | Methods and systems for Fourier ptychographic imaging |
CN104102017B (zh) * | 2014-07-07 | 2017-09-29 | 西安电子科技大学 | 基于结构光照的随机散射光学超衍射极限成像系统及方法 |
CN105005053B (zh) * | 2015-07-13 | 2017-11-21 | 西安电子科技大学 | 基于led照明的随机散射关联成像系统及成像方法 |
JP6739391B2 (ja) * | 2017-04-10 | 2020-08-12 | 浜松ホトニクス株式会社 | 擬似スペックルパターン生成装置、擬似スペックルパターン生成方法、観察装置および観察方法 |
CN108760684B (zh) * | 2018-05-03 | 2020-09-18 | 太原理工大学 | 一种测量流体界面性质的传感器 |
CN110441983B (zh) * | 2019-07-24 | 2022-09-09 | 成都仲伯科技有限公司 | 基于光学传递函数的x光高分辨率成像方法 |
CN110836892B (zh) * | 2019-11-26 | 2021-06-11 | 清华大学 | 衍射超分辨显微成像方法及系统 |
CN112634380B (zh) * | 2020-12-01 | 2023-08-15 | 西安电子科技大学 | 一种单帧超光学记忆效应的多目标彩色散射成像方法 |
-
2021
- 2021-05-17 CN CN202110538402.7A patent/CN113281305B/zh active Active
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA2914892A1 (en) * | 2015-04-30 | 2016-10-30 | Farnoud Kazemzadeh | A system, method and apparatus for ultra-resolved ultra-wide field-of-view multispectral and hyperspectral holographic microscopy |
CN104849874A (zh) * | 2015-06-02 | 2015-08-19 | 西安电子科技大学 | 基于稀疏表示的随机散射光学成像系统及成像方法 |
WO2019186393A1 (en) * | 2018-03-27 | 2019-10-03 | Crestoptics S.P.A. | Scattering-assisted super-localization microscopy method and relative apparatus |
CN109828371A (zh) * | 2019-03-28 | 2019-05-31 | 清华大学深圳研究生院 | 一种基于移动散斑光源的大视场散射成像方法 |
Also Published As
Publication number | Publication date |
---|---|
CN113281305A (zh) | 2021-08-20 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10795144B2 (en) | Microscopy with structured plane illumination and point accumulation for imaging and nanoscale topography | |
Backlund et al. | The role of molecular dipole orientation in single‐molecule fluorescence microscopy and implications for super‐resolution imaging | |
CN105765690B (zh) | 可变照明傅立叶重叠关联成像设备、系统以及方法 | |
JP5702356B2 (ja) | 光変換可能な光学標識を用いる光学顕微鏡法 | |
CN107209357B (zh) | 用于获得对象的超分辨率图像的成像方法和系统 | |
US20180017939A1 (en) | Device for observing a sample | |
CN108982456B (zh) | 基于倏逝波照明的三维活细胞超分辨显微成像方法和装置 | |
CN111982870B (zh) | 一种扫描结构光超分辨显微成像装置及方法 | |
CN111077121B (zh) | 空域中直接重构结构光照明超分辨图像的快速方法及系统 | |
CN111024659B (zh) | 一种基于并行探测的多图像重建显微成像方法和装置 | |
CN108227233B (zh) | 基于光片结构光的显微层析超分辨率成像方法及系统 | |
WO2016020684A1 (en) | Multiplexed optical tomography | |
CN104458683A (zh) | 深层细胞超分辨率成像的方法、系统及棱镜光薄片装置 | |
WO2013008033A1 (en) | Improvements relating to fluorescence microscopy | |
CN113281305B (zh) | 一种基于散射介质实现超分辨显微成像方法及其装置 | |
CN109035143B (zh) | 一种基于贝塞尔光片成像的三维超分辨方法 | |
JP2022180582A (ja) | 超解像顕微鏡法 | |
CN111458318B (zh) | 利用正方晶格结构光照明的超分辨成像方法及系统 | |
Haustein et al. | Trends in fluorescence imaging and related techniques to unravel biological information | |
CN107209110B (zh) | 高吞吐量生化筛查 | |
TWI554740B (zh) | 高速三維成像之光學系統 | |
CN111579486B (zh) | 基于低功率受激发射损耗的超分辨成像方法及成像系统 | |
JP2011039247A (ja) | 顕微鏡、画像処理装置、及び画像処理方法。 | |
CN113568294A (zh) | 一种全息光镊融合结构光照明显微系统和方法 | |
CN113514441A (zh) | 基于细胞旋转主动光操控技术的光片荧光显微方法和系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |