CN115619633A - 基于加速互相关的7帧结构光照明超分辨图像重建方法 - Google Patents

基于加速互相关的7帧结构光照明超分辨图像重建方法 Download PDF

Info

Publication number
CN115619633A
CN115619633A CN202210992210.8A CN202210992210A CN115619633A CN 115619633 A CN115619633 A CN 115619633A CN 202210992210 A CN202210992210 A CN 202210992210A CN 115619633 A CN115619633 A CN 115619633A
Authority
CN
China
Prior art keywords
correlation
representing
super
modulation
interference
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210992210.8A
Other languages
English (en)
Inventor
左超
曹煜
陈钱
钱佳铭
毕莹
徐凯龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Science and Technology
Original Assignee
Nanjing University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Science and Technology filed Critical Nanjing University of Science and Technology
Priority to CN202210992210.8A priority Critical patent/CN115619633A/zh
Publication of CN115619633A publication Critical patent/CN115619633A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4053Scaling of whole images or parts thereof, e.g. expanding or contracting based on super-resolution, i.e. the output image resolution being higher than the sensor resolution
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/0004Microscopes specially adapted for specific applications
    • G02B21/002Scanning microscopes
    • G02B21/0024Confocal scanning microscopes (CSOMs) or confocal "macroscopes"; Accessories which are not restricted to use with CSOMs, e.g. sample holders
    • G02B21/008Details of detection or image processing, including general computer control
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B21/00Microscopes
    • G02B21/36Microscopes arranged for photographic purposes or projection purposes or digital imaging or video purposes including associated control and data processing arrangements
    • G02B21/365Control or image processing arrangements for digital or video microscopes
    • G02B21/367Control or image processing arrangements for digital or video microscopes providing an output produced by processing a plurality of individual source images, e.g. image tiling, montage, composite images, depth sectioning, image comparison
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/10Image enhancement or restoration using non-spatial domain filtering
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/70Denoising; Smoothing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/80Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20048Transform domain processing
    • G06T2207/20056Discrete and fast Fourier transform, [DFT, FFT]

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Chemical & Material Sciences (AREA)
  • Analytical Chemistry (AREA)
  • Optics & Photonics (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)

Abstract

本发明公开了一种基于加速互相关的7帧结构光照明超分辨图像重建方法,包括:首先搭建基于SLM的双光束干涉式SIM系统,并逐像素预标定荧光光强;其次采用调制分配的空间滤波器去除低信噪比的不可靠背景;然后通过特殊设计的相移条纹并结合荧光标定实现频谱分离;最后采用粗到精的加速相关算法进行参数估计修正高频信息,利用广义维纳滤波对频谱分量进行加权重组实现超分辨图像重建。本发明能够在保证对复杂实验环境的鲁棒性的同时,能够以4.5倍于传统的迭代相关方法的效率实现高精度参数估计和高质量的超分辨率重建。

Description

基于加速互相关的7帧结构光照明超分辨图像重建方法
技术领域
本发明属于光学显微成像领域,具体为一种基于加速互相关的7帧结构光照明超分辨图像重建方法
背景技术
荧光超分辨显微成像技术是近几十年来发展最快,受关注度最高的光学成像技术之一,这种技术突破了阿贝衍射极限,将光学显微镜的空间分辨率提升到了纳米级,对生命科学、材料科学等具有重大意义。结构光照明显微镜(SIM)凭借其快速全场成像和低光损伤的优点,适用于活细胞的研究。传统的2D-SIM通过结构照明将处于光学传递函数之外的高频信息搬运到探测通带之内,然后通过相关算法进行解调、重组,获得超分辨图像。为了获取各向同性的超分辨效果,通需要在三个方向上应用三步相移的条纹,即每次重建需要九幅结构照明图像,尽管相比于其他需要曝光数千次的基于点扫描的超分辨技术(STED/STORM/PALM)具备更高的时间分辨率,但对于活细胞观测仍然充满挑战。另外,SIM的重建算法极度依赖于后验的照明参数,不准确的参数估计将造成严重的伪影。
为了减少原始图像数量提高时间分辨率,通常采用空域/频域迭代算法进行重建,然而,这些方法需要对超分辨图像的形成过程进行假设,最终结果受到成像环境和噪声的严重限制,并且在计算效率方面也很耗时,因此,基于相移频谱分离的传统算法仍是首选。为最小化重建伪影,许多参数估计算法被提出,其中基于迭代的互相关算法可能是目前最流行的参数估计算法,其通过实空间相位梯度的形式进行亚像素优化,具备较高的精度和抗噪性能,但迭代优化耗时较长,进一步限制了SIM的成像效率优势。
因此,针对结构光照明超分辨显微术而言,目前尚缺一种时间分辨率与计算效率兼备的高保真重建方法。
发明内容
本发明提出了一种基于加速互相关的7帧结构光照明超分辨图像重建方法,在减少SIM超分辨重建所需原始图像数量的同时,优化了传统互相关参数估计算法,实现了1.3倍的时间分辨率、4.5倍的计算效率的提升。
实现本发明目的的技术方案为:一种基于加速互相关的7帧结构光照明超分辨图像重建方法,具体步骤为:
步骤1:搭建基于SLM的双光束干涉式SIM系统并完成荧光光强标定;
步骤2:通过SLM载入7幅相移条纹图像,利用±1级衍射光在样品焦面上产生干涉,通过干涉条纹对样品信息进行调制,采集调制后的荧光图像;
步骤3:利用调制分配的空间滤波器去除离焦背景与无效信息;
步骤4:分别对三个照明方向分别进行频谱分离;
步骤5:采用从粗到精的加速相关算法进行参数估计修正高频信息,利用广义维纳滤波进行超分辨图像重建。
本发明与现有技术相比,其显著优点为:本发明利用调制度滤波可快速有效去除离焦背景与无效信息,可获得更好的图像视觉效果和重建质量;本发明通过特殊设计相移条纹实现7帧SIM重建,提高了SIM成像的时间分辨率;本发明优化传统互相关参数估计算法,在保证精度与抗噪性能的同时计算效率比传统方法快了4.5倍。
下面结合附图对本发明做进一步详细的描述。
附图说明
图1为本发明的流程图。
图2为所搭建的SIM系统的原理示意图。
图3为本发明与传统方法的实验对比图,图3(a)为宽场图像与超分辨图像的对比,图3(b)是标定与未标定的对比,图3(c)是图3(a)中矩形框区域放大的细节对比。
具体实施方式
一种基于加速互相关的7帧结构光照明超分辨图像重建方法,首先搭建基于SLM的双光束干涉式SIM系统并完成荧光光强标定,采集7帧结构照明图像,通过调制度分配滤波去除离焦背景与无效信息,然后进行频谱分离,通过加速相关的参数估计算法对照明参数进行计算,并修正高频信息,最后通过维纳滤波进行超分辨重组,流程示意图如图1所示,实现步骤如下:
步骤1:搭建基于SLM的双光束干涉式SIM系统并完成荧光光强标定,其具体步骤为:
步骤1.1:SIM系统包含一台计算机,一台科研级sCMOS相机,一台倒置荧光显微镜,三台不同波长(561nm、488nm、405nm)的激光器、两个半波片(H1、H2)、铁电液晶空间光调制器(SLM)、偏振分束器(PBS)、空间滤波器、MASK板、两片二向色镜(DM1、DM2)、三片平面反射镜(M1、M2、M3)、四片透镜(L1-L4)。根据荧光样品特定特性选择适当波段的激光照明光,出射激光通过平面镜和二向色镜反射进入空间滤波器,并通过透镜L1完成准直扩束,为了最小化能量的损失,半波片H1改变激光的偏振态使其完全透过PBS,并入射到SLM上产生衍射,衍射光被H2改变偏振态并被PBS完全反射,由透镜L2聚焦到MASK上进行滤波,只保留±1级衍射光,通过透镜L3和L4组成的4F系统进入显微镜主体,被显微物镜收集在样品焦面上产生干涉,形成干涉条纹,最终发射荧光信号通过二向色镜被相机采集,其中相机和SLM由计算机控制同步触发,干涉条纹频率和方向可由SLM控制。
步骤1.2:对于整体荧光分布相对均匀的样品,在三个照明方向上分别采集传统三步相移图像,表示为
Figure BDA0003803625590000031
上式中,r表示空间坐标,n表示方向,j表示相移步数,S表示样品的荧光分布信息,mn表示方向n上的调制度,pn表示方向n上的条纹的空间频率,
Figure BDA0003803625590000032
表示方向n上的初相位,H(r)表示点扩散函数,
Figure BDA0003803625590000033
表示卷积。将三步相移图像组成线性方程组,求解各个方向的0级光谱和相应的空间宽场图像Cn,0(r),并采用多帧平均的方法去除噪声。对于每个宽场图像,计算以每个像素为中心的大小为5x5的范围内的荧光强度之和,然后得到每个框内第一个照明方向的强度和与其他方向的强度和的比值作为标定参数:
Figure BDA0003803625590000034
其中n=2和3。根据标定参数,可在后续进行7帧超分辨重建中直接从第1个方向获取第2和第3个方向的宽场图像:
Cn,0(r)=Mn(r)C1,0(r)
另外,在每次标定完成之后,后续实验无需重复标定。
步骤2:对荧光样品进行超分辨成像需要采集7帧结构照明图像,其具体步骤为:
将通过Matlab生成的7幅分辨率为1536*2048的光栅条纹图像载入SLM:
I1,j(r)=127+128cos(2πp·r+(j-1)·π/3)|j=1,2,3
I2or3,j(r)=127+128cos(2πp·r+(j-1)·π/4)|j=1,2
当相机开始曝光时SLM显示条纹图像,经准直扩束后的照明光产生衍射,利用±1级衍射光在样品焦面上产生干涉,通过干涉条纹对样品信息进行调制。最后被调制的荧光信号被sCMOS相机采集,记为
Figure BDA0003803625590000041
当n=1时,j=1,2,3,
Figure BDA0003803625590000042
当n=2或3时,j=1,2,
Figure BDA0003803625590000043
步骤3:利用调制分配的空间滤波器去除离焦背景与无效信息,其具体步骤为:
根据步骤2中采集到的照明方向1的相移图像计算调制度图像,
Figure BDA0003803625590000044
利用调制度图像的直方图选取一个公共期望的阈值对原始图像进行修正,阈值被选定为调制直方图峰值的两倍。
步骤4:分别对三个照明方向分别进行频谱分离,其具体步骤为:
步骤4.1:对于步骤2中采集到的原始图像在傅里叶空间可以表示为:
Figure BDA0003803625590000045
其中k表示频率坐标,~表示原始对象的傅里叶变换,
Figure BDA0003803625590000046
表示光学传递函数。
对方向1求解方程组
Figure BDA0003803625590000051
求解结果记为
Figure BDA0003803625590000052
Figure BDA0003803625590000053
步骤4.2:再将
Figure BDA0003803625590000054
与步骤1中的标定参数结合,得到
Figure BDA0003803625590000055
并构建新的方程组并求解得到所有的频谱分量:
Figure BDA0003803625590000056
步骤5:利用从粗到精的加速相关算法进行参数估计修正高频信息,并利用广义维纳滤波进行超分辨重建,其具体步骤为:
步骤5.1:将步骤4中获得的高频信息
Figure BDA0003803625590000057
整像素移动到中心位置,并对移动后的1级谱和0级谱进行反卷积,以消除光学传递函数的影响,得到
Figure BDA0003803625590000058
Figure BDA0003803625590000059
然后选取
Figure BDA00038036255900000510
Figure BDA00038036255900000511
之间的一个公共区域(半径为光学传递函数半径的85%的圆相交的区域),并对其进行相关计算:
Figure BDA00038036255900000512
通过改变ps大小构建一个小范围内的相关分布(包含九个整像素位置ps,x or y=0,±1和四个亚像素位置ps,x or y=±0.5,其中x和y表示水平和数值分量),并通过质心算法计算出该分布的质心坐标
Figure BDA00038036255900000513
将该坐标作为粗估计;
步骤5.2:用步骤5.1的质心坐标pc作为初始估计点,将1级谱小步水平平移,并计算其与0级谱的相关值,定位最大相关峰:
Figure BDA00038036255900000514
其中p's表示像素位移量,p's,y=pc,y,p's,x∈[-0.5+pc,x,0.5+pc,x],p's,y和p's,x分别表示y和x方向的平移量,pc,y和pc,x分别表示质心的y、x坐标;argmax表示寻找最大值。然后从
Figure BDA0003803625590000061
开始,沿着垂直方向进行相同的操作,即
Figure BDA0003803625590000062
直至定位出亚像素波矢。利用估计的亚像素波矢将1级谱移到正确的位置,通过复线性回归得到初始相位和调制度:
Figure BDA0003803625590000063
Figure BDA0003803625590000064
其中angle表示取幅值的操作。
步骤5.3:利用估计出的照明参数对原始频谱分量进行修正;
步骤5.4:利用广义维纳滤波对各个频谱分量进行加权平均重组,最后进行傅里叶逆变换得到超分辨图像
Figure BDA0003803625590000065
其中ifft表示傅里叶逆变换,u=0,±1,pn表示方向n的条纹空间频率,
Figure BDA0003803625590000066
表示光学传递函数
Figure BDA0003803625590000067
的共轭,ω表示维纳常数,A(k)表示切趾函数,用来抑制高频伪影。
实验例
为验证本发明的有效性,搭建了一套基于SLM的双光束干涉式系统,如图1所示,该系统主要包含一台PCO edge5.5相机,一台奥林巴斯IX73倒置荧光显微镜,一台QXGA-3DM铁电液晶空间光调制器,三台Coherent激光器(405,488,561nm)及其他光学元件。使用Dell计算机(Intel(R)Core(TM)i7-9700 CPU)进行硬件控制,MATLAB完成超分辨算法重建。最终可实现成像速度达33HZ,成像空间分辨率为100nm。
实验结果如图3所示,通过60x/1.42NA的油浸物镜观察COS-7细胞,主要包括细胞核、线粒体、肌动蛋白等细胞器。从图a显示的宽场图像中可以看出,由于样品散射造成的离焦严重影响了成像质量。图b显示了未标定荧光光强将会给重建结果带来严重的伪影,这是由于不同照明方向的荧光不匹配导致的,而这些伪影通过标定可以很好的去除。此外,由于调制度分配滤波的预处理,我们的方法获得的重建结果质量优于传统方法,对于COS-7细胞中的肌动蛋白,我们的方法获得了最好的对比度。

Claims (7)

1.一种基于加速互相关的7帧结构光照明超分辨图像重建方法,其特征在于,具体步骤为:
步骤1:搭建基于SLM的双光束干涉式SIM系统并完成荧光光强标定;
步骤2:通过SLM载入7幅相移条纹图像,利用±1级衍射光在样品焦面上产生干涉,通过干涉条纹对样品信息进行调制,采集调制后的荧光图像;
步骤3:利用调制分配的空间滤波器去除离焦背景与无效信息;
步骤4:分别对三个照明方向分别进行频谱分离;
步骤5:采用从粗到精的加速相关算法进行参数估计修正高频信息,利用广义维纳滤波进行超分辨图像重建。
2.根据权利要求1所述的基于加速互相关的7帧结构光照明超分辨图像重建方法,其特征在于,所述基于SLM的双光束干涉式SIM系统包括计算机、sCMOS相机、倒置荧光显微镜、三台不同波长的激光器、两个半波片(H1、H2)、铁电液晶空间光调制器(SLM)、偏振分束器(PBS)、空间滤波器、MASK板、两片二向色镜(DM1、DM2)、三片平面反射镜(M1、M2、M3)、四片透镜(L1-L4),根据荧光样品特定特性选择对应波段的激光照明光,出射激光通过平面镜和二向色镜反射进入空间滤波器,并通过透镜L1完成准直扩束,准直扩束后的激光通过半波片H1改变激光的偏振态使其完全透过偏振分束器(PBS),并入射到SLM上产生衍射,衍射光被半波片H2改变偏振态并被偏振分束器(PBS)完全反射,由透镜L2聚焦到MASK板上进行滤波,只保留±1级衍射光,±1级衍射光通过透镜L3和透镜L4组成的4F系统进入显微镜主体,被显微物镜收集在样品焦面上产生干涉,形成干涉条纹,发射荧光信号通过二向色镜被相机采集,其中相机和SLM由计算机控制同步触发,干涉条纹频率和方向可由SLM控制。
3.根据权利要求1所述的基于加速互相关的7帧结构光照明超分辨图像重建方法,其特征在于,荧光光强标定的具体方法为:
对于整体荧光分布相对均匀的样品,为获取各向同性的超分辨效果,在三个相隔60°的照明方向上分别采集三步相移图像,具体为:
Figure FDA0003803625580000011
式中,r表示空间坐标,n表示方向,n=1,2,3,j表示相移步数,S表示样品的荧光分布信息,mn表示方向n上的调制度,pn表示方向n上的条纹的空间频率,
Figure FDA0003803625580000021
表示方向n上的初相位,
Figure FDA0003803625580000022
表示相移量,H(r)表示点扩散函数,
Figure FDA0003803625580000027
表示卷积;
通过求解三步相移图像组成的线性方程组得到各个方向的0级光谱和相应的空间宽场图像Cn,0(r),并采用多帧平均的方法去除噪声;
对于每个宽场图像,计算以每个像素为中心的大小为5x5的范围内的荧光强度之和,得到每个框内第一个照明方向的强度和与其他方向的强度和的比值作为标定参数:
Figure FDA0003803625580000023
4.根据权利要求1所述的基于加速互相关的7帧结构光照明超分辨图像重建方法,其特征在于,通过SLM载入7幅相移条纹图像,利用±1级衍射光在样品焦面上产生干涉,通过干涉条纹对样品信息进行调制,采集调制后的荧光图像的具体步骤为:
将Matlab生成的7幅分辨率为1536*2048的光栅条纹图像载入SLM,具体表示为:
I1,j(r)=127+128cos(2πp·r+(j-1)·π/3)|j=1,2,3
I2 or 3,j(r)=127+128cos(2πp·r+(j-1)·π/4)|j=1,2
当相机开始曝光时SLM显示条纹图像,经准直扩束后的照明光产生衍射,利用±1级衍射光在样品焦面上产生干涉,通过干涉条纹对样品信息进行调制;
sCMOS相机采集被调制的荧光信号,记为:
Figure FDA0003803625580000024
当n=1时,j=1,2,3,
Figure FDA0003803625580000025
当n=2或3时,j=1,2,
Figure FDA0003803625580000026
5.根据权利要求1所述的基于加速互相关的7帧结构光照明超分辨图像重建方法,其特征在于,步骤3利用调制分配的空间滤波器去除离焦背景与无效信息的具体步骤为:
对采集到的照明方向1的三步相移图像计算调制度图像,具体计算公式为:
Figure FDA0003803625580000031
D1,j(r)为相机采集到的方向1的三步相移图像;
利用调制度图像的直方图选取一个公共期望的阈值对原始图像进行修正,其中,阈值被选定为调制直方图峰值的两倍。
6.根据权利要求1所述的基于加速互相关的7帧结构光照明超分辨图像重建方法,其特征在于,步骤4对三个照明方向分别进行频谱分离的其具体步骤为:
步骤4.1:对于步骤2中采集到的原始图像,在傅里叶空间表示为:
Figure FDA0003803625580000032
其中,
Figure FDA0003803625580000033
表示原始图像的傅里叶变换,k表示频率坐标,n表示方向,n=1,2,3,j表示相移步数,
Figure FDA0003803625580000034
表示样品的低频信息,
Figure FDA0003803625580000035
Figure FDA0003803625580000036
分别表示样品的高频信息,mn表示方向n上的调制度,pn表示方向n上的条纹的空间频率,
Figure FDA0003803625580000037
表示方向n上的初相位,
Figure FDA0003803625580000038
表示相移量,
Figure FDA0003803625580000039
表示光学传递函数;
对方向1求解方程组
Figure FDA00038036255800000310
式中,k表示频率坐标,~表示原始对象的傅里叶变换,
Figure FDA00038036255800000311
表示低频信息,
Figure FDA00038036255800000312
Figure FDA00038036255800000313
分别表示高频信息,m1表示方向1的调制度,
Figure FDA00038036255800000314
表示方向1的初相位,
Figure FDA00038036255800000315
表示光学传递函数,求解结果为
Figure FDA00038036255800000316
上式中
Figure FDA00038036255800000317
是方向1的宽场图像,而
Figure FDA00038036255800000318
包含了方向1上的高频细节信息,且受到调制度m1和初相位
Figure FDA00038036255800000319
的影响。
步骤4.2:将
Figure FDA0003803625580000041
与步骤1中的标定参数结合,得到
Figure FDA0003803625580000042
其中n=2,3,并构建新的方程组求解得到所有的频谱分量:
Figure FDA0003803625580000043
其中mn表示方向n的调制度,
Figure FDA0003803625580000044
表示方向n的初相位,pn表示方向n的条纹空间频率。
7.根据权利要求6所述的基于加速互相关的7帧结构光照明超分辨图像重建方法,其特征在于,步骤5利用从粗到精的加速相关算法进行参数估计修正高频信息,并利用广义维纳滤波进行超分辨重建的具体步骤为:
步骤5.1:将获得的高频信息
Figure FDA0003803625580000045
整像素移动到中心位置,并对移动后的1级谱和0级谱进行反卷积去除光学传递函数的影响,得到
Figure FDA0003803625580000046
Figure FDA0003803625580000047
其中
Figure FDA0003803625580000048
Figure FDA0003803625580000049
分别表示低频信息和高频信息,mn
Figure FDA00038036255800000410
分别表示方向n的调制度和初相位;
选取
Figure FDA00038036255800000411
Figure FDA00038036255800000412
之间的一个公共区域,并对公共区域进行相关计算:
Figure FDA00038036255800000413
其中,ps表示位移量,mn表示方向n的调制度,
Figure FDA00038036255800000414
表示方向n的初相位,
Figure FDA00038036255800000415
表示低频信息
Figure FDA00038036255800000416
的共轭,
Figure FDA00038036255800000417
表示高频信息;
通过改变ps构建一个小范围内的相关分布,利用质心算法计算出相关分布的质心坐标
Figure FDA00038036255800000418
将质心坐标作为粗估计;
步骤5.2:用质心坐标pc作为初始估计点,将1级谱小步水平平移,并计算1级谱小步水平平移与0级谱的相关值,定位最大相关峰:
Figure FDA00038036255800000419
上式中argmax表示寻找最大值,p's表示像素位移量,且满足:
p's,y=pc,y,p's,x∈[-0.5+pc,x,0.5+pc,x]
其中p's,y表示y方向的平移量,p's,x表示x方向的平移量,pc,y表示质心的y坐标,pc,x表示质心的x坐标;
Figure FDA0003803625580000051
开始,沿着垂直方向进行相同的操作定位出亚像素波矢,即
Figure FDA0003803625580000052
其中
Figure FDA0003803625580000053
Figure FDA0003803625580000054
分别表示x和y方向上的亚像素波矢;
利用估计的亚像素波矢将1级谱移到正确的位置,通过复线性回归得到初相位和调制度:
Figure FDA0003803625580000055
Figure FDA0003803625580000056
其中,angle表示取幅值的操作;
步骤5.3:利用估计出的照明参数对原始频谱分量进行修正;
步骤5.4:利用广义维纳滤波对各个频谱分量进行加权平均重组,进行傅里叶逆变换得到超分辨图像
Figure FDA0003803625580000057
其中ifft表示傅里叶逆变换,u=0,±1,pn表示方向n的条纹空间频率,
Figure FDA0003803625580000058
表示光学传递函数
Figure FDA0003803625580000059
的共轭,ω表示维纳常数,A(k)表示切趾函数。
CN202210992210.8A 2022-08-18 2022-08-18 基于加速互相关的7帧结构光照明超分辨图像重建方法 Pending CN115619633A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210992210.8A CN115619633A (zh) 2022-08-18 2022-08-18 基于加速互相关的7帧结构光照明超分辨图像重建方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210992210.8A CN115619633A (zh) 2022-08-18 2022-08-18 基于加速互相关的7帧结构光照明超分辨图像重建方法

Publications (1)

Publication Number Publication Date
CN115619633A true CN115619633A (zh) 2023-01-17

Family

ID=84856662

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210992210.8A Pending CN115619633A (zh) 2022-08-18 2022-08-18 基于加速互相关的7帧结构光照明超分辨图像重建方法

Country Status (1)

Country Link
CN (1) CN115619633A (zh)

Similar Documents

Publication Publication Date Title
US8019136B2 (en) Optical sectioning microscopy
US9535247B2 (en) Interferometric focusing of guide-stars for direct wavefront sensing
CN111145089B (zh) 高保真图像重构方法、系统、计算机设备和存储介质
CN107490562B (zh) 利用波面整形器的超高速三维折射率影像拍摄和荧光结构光照明显微镜系统及其使用方法
EP2592459B1 (en) Holographic microscope and method for processing microscopic subject hologram image
EP3065001B1 (en) Holographic microscope and data processing method for high-resolution hologram image
CN108665411B (zh) 一种图像重建的方法和系统
CN109712072B (zh) 基于全内反射的条纹照明傅里叶域迭代更新超分辨显微成像方法
Chen et al. Superresolution structured illumination microscopy reconstruction algorithms: a review
JPWO2019044336A1 (ja) ホログラフィック撮像装置および同装置に用いるデータ処理方法
CN113670878B (zh) 基于空频域混合式重建的超分辨结构光照明显微成像方法
CN115308185A (zh) 高速无伪影超分辨结构光照明显微成像方法
JP5085608B2 (ja) 空間光変調器を用いた広視野超解像光学顕微鏡
Zhao et al. Advances in high-speed structured illumination microscopy
CN114594588A (zh) 基于光栅投影和slm相移的结构光照明显微装置及方法
CN116183568A (zh) 一种三维结构光照明超分辨显微成像的高保真重构的方法和装置
CN115619633A (zh) 基于加速互相关的7帧结构光照明超分辨图像重建方法
WO2024044981A1 (zh) 超分辨率分析系统、方法及相应成像设备和模型训练方法
Ma et al. Enhanced resolution of edge enhancement in three-dimensional vortex imaging based on a modified Michelson interferometer
Ďuriš et al. Coherence-encoded synthetic aperture for super-resolution quantitative phase imaging
Ströhl et al. A concept for single-shot volumetric fluorescence imaging via orthogonally polarized excitation lattices
CN113946044A (zh) 基于点扩散函数工程的多焦点多光子显微成像系统及方法
Fan et al. Accurate dynamic quantitative phase imaging using multi-wavelength multiplexing
Xu et al. Mechanical-scan-free and multi-color super-resolution imaging with diffractive spot array illumination
CN112596362B (zh) 一种全场超分辨率的数字全息装置及成像方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination