CN105245761B - 单次快照多频解调方法 - Google Patents

单次快照多频解调方法 Download PDF

Info

Publication number
CN105245761B
CN105245761B CN201510638861.7A CN201510638861A CN105245761B CN 105245761 B CN105245761 B CN 105245761B CN 201510638861 A CN201510638861 A CN 201510638861A CN 105245761 B CN105245761 B CN 105245761B
Authority
CN
China
Prior art keywords
frequency
modulation
image
component
demodulation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510638861.7A
Other languages
English (en)
Other versions
CN105245761A (zh
Inventor
徐敏
曾碧新
曹自立
林维豪
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wenzhou Medical University
Original Assignee
Wenzhou Medical University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wenzhou Medical University filed Critical Wenzhou Medical University
Priority to CN201510638861.7A priority Critical patent/CN105245761B/zh
Publication of CN105245761A publication Critical patent/CN105245761A/zh
Application granted granted Critical
Publication of CN105245761B publication Critical patent/CN105245761B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Processing (AREA)

Abstract

本发明涉及一种单次快照多频解调的方法,在时间域或空间域对由一个或多个原始成分经不同频率调制相加得到的调制图像、尤其是包含有多个不同频率成分的调制图像,首先依次提取出每个像素点的各个频率交流(AC)和直流(DC)分量值,进而得到相应各个频率交流(AC)和直流(DC)的原始成分图像。该方法可以用于时域或空域中,利用一次测量就能分解出多个频率成分图像,具有速度快、解调精度更高以及去噪效果很好的优点,满足了一次性获取多个频率信息量的需求,克服了多次测量中不能避免的误差问题。同时,也可以利用该解调方法一次性传输多幅图像信息,实现在通讯领域多信息并行实时传输。

Description

单次快照多频解调方法
技术领域
本发明涉及空间频域成像、实时多成分成像、时空域实时信号调制解调技术及多组分图像信息传输,更具体地,涉及一种用于非接触式成像技术中涉及的单次快照多频解调方法。
背景技术
在生物医学成像领域中,新兴的空间频域成像(Spatial Frequency DomainImaging,SFDI)作为一种新颖的非接触式成像技术,具有独一无二的空间上同时解析光学吸收和散射参数的能力,允许宽视场量化组织光学参数分布。通过入射不同空间频率的空间调制图案到样品区域并用CCD相机捕捉反射图像来获取样品的调制传递函数(MTF)。MTF包含了重要的光学特性信息——吸收系数(μa)和衰减散射系数(μs')。基于蒙特卡罗或各种散射模型,通过非线性最小二乘法拟合或查表方法,由MTF数据可以反演计算出生物组织的吸收系数与衰减散射系数的二维分布图。最后,通过光学参数的变化可以反推出组织结构和组织成分的改变,进而做出相应疾病的诊断。
根据Essex T.J.H.,Byrne R O.A laser Doppler scanner for imaging bloodflow in skin[J].Medical engineering and physics,1991,13(3):189-194的记载,假设入射到样品的结构光强用函数表示为:
这里S0代表光源强度,M0是入射调制深度,fx是空间频率,α是空间相位,x是空间坐标。
从样品反射出来被CCD照相机捕获的光可以分解为直流DC部分和交流AC部分:
I=IAC+IDC (2)
样品反射光的AC部分可以用函数表示为:
IAC=MAC(x,fx)×cos(2πx+α) (3)
这里MAC表征散射光子密度波的调制,此因子在混沌介质中依赖于组织的光学特性,目前的主流作法是基于扩散理论或蒙特卡罗的光传输方法进行建模。为了得出MAC,必须对信号进行解调,传统的标准作法是三相移法(在文献Neil MAA,Juskaitis R,WilsonT.Method of obtaining optical sectioning by using structured light in aconventional microscope.Opt.Lett1997;22(24):1905–1907.[PubMed:18188403]中提到)。即若样品是在一个特定频率正弦波的三个相位差α=0,2π/3,4π/3处进行光照,测得三幅光强图像I1、I2、I3,则MAC因子可以用式(4)解调方程来计算。
为了进一步得到组织的光学参数,MAC需要在不同空间频率使用三个相位投影来测量。首先,多种频率的光投射到样品,这种方式是以多个相位投影到样品并用方程(4)进行解调。然后,漫反射在每一个空间频率都使用硅校准模型的已知光学参数来进行校准,从而矫正MTF值。最后在图像上的每一个像素点使用一个逆模型得出各独立波长的光学参数。
总的来说,传统的SFDI的成像步骤及光学参数的获得步骤如下:
a)将包含多种频率fx的调制光投影到样品上,并通过CCD相机采集从样品反射回的光强;
b)每一个光照频率在三个相位点成像,然后用解调公式(4)进行解调,并由公式(5)得出每一个像素点的反射率R,其中MTFsystem由已知光学参数校准模型在同一条件下测量获得:
MAC(xi)=I0MTFsystem(xi)×R(xi) (5)
c)每一个像素点的R值利用光传输模型的蒙特卡罗方法或查表获得吸收系数μa和衰减散射系数μs′的二维映射分布。
由上可知,三相移标准法,即给定三个不同初始相位(0°,120°,240°),通过公式求解出交流分量和直流分量,该方法被公认为解调交流/直流分量的“金标准”,但该方法在实际成像中需要至少三次成像才能够解调出交流分量,限制了成像时间和成像次数。除此之外,根据Nadeau,K.P.,Durkin,A.J.,Tromberg,B.J..Advanced demodulation techniquefor the extraction of tissue optical properties and structural orientationcontrast in the spatial frequency domain[J].Journal of Biomedical Optics,2014,19(5):056013.的记载,还可以利用Hilbert变换法在单个相位的条件下解调出交流分量,这能够大大提高光学参数测量效率,但其仅能实现单个相位的交流分量解调,并且噪声抑制效果不佳。
发明内容
本发明的目的在于克服现有技术存在的上述缺陷,提供了一种单次快照多频解调法,该方法可以快速解调出多个不同频率的交流成分幅值和直流分量。
为达到上述目的,本发明采取的解决方案为:
一种单次多频快照解调法,其包括:在时间域或空间域中,对于包含有一个或多个频率的调制图像,首先依次提取出每个像素点的各个频率交流(AC)和直流(DC)分量值,进而得到相应于各个频率AC和DC的原始成分图像。
进一步地,对于具有一种频率或两种以上不同频率的交流分量的调制图像,首先,取一T1×T2的矩阵作为基核(Kernel),其中T1、T2分别为各交流分量周期的横向和纵向分量最小公倍数;然后在图像中,按照预定顺序依次以每个像素点为矩阵左上角选取基核大小的基核单元,并分别与相对应的基核图案作积分求和处理。
进一步地,其中积分求和处理进一步包括:图像中的每个基核单元分别与同频率、同方向的余弦及正弦基核图案作乘法处理后,再进行积分求和,从而得到与原始图像尺寸大小相同的余弦调制和正弦调制图案。
进一步地,其中对于具有不同频率f1、f2、…的交流分量的调制图像,各分量关系如公式(6)所示:
其中,k≥1为交流调制分量个数,Ai、fi分别为各交流成分幅值、频率和空间初始相位,mi∈[-1,1]、ni∈[-1,1]共同决定了交流调制条纹的方向,且需满足公式(7),B为直流分量,x、y为空间坐标。
其中,进一步利用公式(8)解调出调制图案的交流成分幅值,利用公式(9)解调出直流成分:
其中,σ为图像中每个像素点对应的基核单元。T1、T2分别为各交流分量周期的横向和纵向分量最小公倍数;
其中,进一步地,对于基核图案,提取图像的不同频率或方向的交流成分时,基核图案也不相同,并且基核图案与提取交流调制图案具有相同的频率和方向。
其中,进一步地,所述预定顺序为以图像左上角为起点,依次从左到右、从上到下的顺序。
此外,还提供了一种空间频域成像方法,其包括将包含一种或多种频率的调制光投影到样品上,并通过CCD相机采集从样品反射回的光强、透射出光强或激发出的荧光光强;其中所述CCD相机采集的光分解为直流(DC)部分和交流(AC)部分,其特征在于所述CCD相机采集的光采用前面所述的单次多频快照解调法进行解调。
此外还提供了一种信号传输方法,其中包括前述的空间频域信息的调制及解调方法。
由此可见,本发明提出一种单次快照多频解调法,在空间域由一个或多个原始成分经不同频率调制相加得到的调制图像、尤其是包含有多个不同频率成分的调制图像,通过该方法依次提取出每个像素点的各个频率交流(AC)和直流(DC)分量值,进而得到相应于各个频率交流(AC)和直流(DC)的原始成分图像。该方法具有速度快、解调精度更高以及去噪效果很好的优点,满足了一次性获取多个频率信息量的需求,克服了多次测量中不能避免的误差问题。同时,也可以利用该解调方法一次性传输多幅图像信息,实现在通讯领域多信息并行实时传输。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些示例性实施例。
图1为利用单次快照多频解调法对包括两个空间频率的图像进行解调处理的图示。
图2为分别利用三相移标准法、Hilbert变换法和单次快照多频解调法对含有一个频率的图案进行解调处理的对比图示。
图3为分别利用Hilbert变化法和单次快照分解法对含有两个频率的图案进行解调处理的对比图示。
图4为利用单次快照分解法对含有三个频率的图案进行解调处理的对比图示。
具体实施方式
下面将结合本发明的附图,对本发明实施方式中的技术方案进行清楚、完整地描述,显然,所描述的实施方式仅仅是本发明的一部分实施方式,而不是全部的实施方式。基于本发明中的实施方式,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施方式,都属于本发明保护的范围。
下面就以空间频域成像为例介绍了单次快照多频解调法,相较于标准三相移法,速度快、解调精度更高并具有很好的去噪效果,满足了一次性获取多个频率信息量的需求,克服了多次测量中不能避免的误差问题。
单次多频快照解调法是在空间域对由一个或多个原始成分经不同频率调制相加得到的调制图像通过该方法依次提取出每个像素点的各个频率AC和DC分量值,进而得到相应于各个频率AC和DC的原始成分图像。如图1所示,利用单次快照多频解调法对包括两个空间频率的图像进行解调处理,单次测得的图像中包括两个不同空间频率(f1、f2)的成分。单次快照多频解调法可以精准地解调出不同频率的空间调制图像。
具体步骤如下:
对于具有两种不同频率交流分量的图像,若频率分别为f1、f2,各分量关系如公式(10)所示。为了能够提取出图像中不同频率交流分量大小,首先,取一T1×T2的矩阵作为基核(Kernel),其中T1、T2分别为各交流分量周期的横向和纵向分量最小公倍数;然后在图像中,依次从左到右、从上到下的顺序以每个像素点为矩阵左上角选取基核大小的基核单元,并分别与相对应的基核图案作积分求和处理。对于基核图案,提取图像的不同频率、方向交流分量时,基核图案也不相同,但应保证基核图案与提取分量具有相同的频率和方向。图像中的每个基核单元分别与同频率、同方向的余弦及正弦图案作乘法处理后,进行积分求和。得到与原始图案尺寸大小相同的余弦解调和正弦解调图案;
然后,利用公式(11)、(12)解调出调制图案的交流成分幅值,利用公式(13)解调出直流成分。
其中在公式(10)中,a、b分别为各交流成分幅值,f1和f2为各交流调制图案频率,为空间初始相位,c为直流分量,x、y为空间坐标。
其中,σ为图像中每个像素点对应的基核单元。T1、T2分别为各交流分量周期的横向和纵向分量最小公倍数。
进一步地,对于具有多个不同频率f1、f2、…的交流分量的调制图像,各分量关系则如公式(14)所示:
其中,k≥1为交流调制分量个数,Ai、fi分别为各交流成分幅值、频率和空间初始相位,mi∈[-1,1]、ni∈[-1,1]共同决定了交流调制条纹的方向,B为直流分量,x、y为空间坐标;并且其中调制图案的交流成分幅值利用公式(15)解调出,直流成分利用公式(16)解调出:
其中,σ为图像中每个像素点对应的基核单元。T1、T2分别为各交流分量周期的横向和纵向分量最小公倍数。
对比实验:
分别利用三相移标准法、Hilbert变换法和单次快照多频解调法对含有一个频率的图案进行解调,得到的结果如图2所示。其中原始图像包含三部分分量,分别为直流分量、交流分量及噪声信号,我们通过几种不同的解调方法来比较各方法的优缺点。根据所得结果可知,三种方法都可实现从噪声及直流信号中解调出交流信号的目的,但从对噪声抑制效果来说,单次快照多频解调法优于三相移标准法和Hilbert变换法,其能够很好地抑制噪声干扰。
如图3所示,利用Hilbert变化法和单次快照分解法分别对含有两个频率的图案进行解调:其中图3(a).原始图像是通过对“中”字作横向调制,fy=0.2,对“华”字作纵向调制,fx=0.1;然后对“中”和“华”字进行叠加处理,并加以直流分量和噪声信号。已知三相移标准法只能解调出单频交流分量,因此在此只对Hilbert变换法和单次快照多频解调法作比较。图3(b)为对图3(a)作Hilbert变换法解调后的结果,从结果可以看出,在有两个或多个频率交流分量情况下,解调后的交流分量并不能分离出不同频率的信号,而从图3(c)与3(d)可以看出,单次快照多频解调法能够很好地解调出不同频率的交流调制信号。
如图4所示,利用单次快照分解法分别对含有三个频率的图案进行解调:其中图4(a)中,原始图像是通过对“大”字作横向调制,fy=0.1,对“中”字作纵向调制,fx=0.5,对“华”作倾斜45°调制,fx=0.25,fy=0.25;然后对“大”、“中”和“华”字进行叠加处理,并加以直流成分和噪声信号。已知三相移标准法只能解调出单频交流分量,Hilbert变换法区分不出多个频率调制信号,下图仅为单次快照多频解调法得到的结果。从图4(b)、图4(c)与图4(d)可以看出,单次快照多频解调法能够很好地解调出不同频率的交流调制信号。
从实验结果可以清楚得到,单次快照多频解调法不仅可以很好地从噪声中解调出单频交流分量及抑制噪声的干扰,而且可以解调出两个或多个频率的交流分量。这样我们能够实现不同空间频率MTF函数的实时成像,快速解析出组织的光学参数,从而克服多次成像引起噪声干扰的难题。
如上所述的各实施方式,通过利用上述单次快照多频解调法,在空间域对由一个或多个原始成分经不同频率调制相加得到的调制图像、尤其是包含有多个不同频率成分的调制图像,通过该方法依次提取出每个像素点的各个频率交流(AC)和直流(DC)分量值,进而得到相应于各个频率AC和DC的原始成分图像。该方法具有速度快、解调精度更高以及去噪效果很好的优点,满足了一次性获取多个频率信息量的需求,克服了多次测量中不能避免的误差问题。同时,也可以利用该解调方法一次性传输多幅图像信息,实现在通讯领域多信息并行实时传输。
本技术领域技术人员可以理解,本发明中已经讨论过的各种操作、方法、流程中的步骤、措施、方案可以被交替、更改、组合或省略。进一步地,具有本发明中已经讨论过的各种操作、方法、流程中的其他步骤、措施、方案也可以被交替、更改、重排、分解、组合或省略。进一步地,现有技术中的具有与本发明中公开的各种操作、方法、流程中的步骤、措施、方案也可以被交替、更改、重排、分解、组合或省略。
以上所述仅是本发明的部分实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和调整,这些改进和调整也落入本发明的保护范围内。

Claims (8)

1.一种单次快照多频解调方法,其包括:
在时间域或空间域中,对于包含有一个或多个频率的调制图像,首先依次提取出每个像素点的各个频率交流AC和直流DC分量值,进而得到相应于各个频率AC和DC的原始成分图像;其中,对于所述调制图像,首先,取一T1×T2的矩阵作为基核(Kernel),其中T1、T2分别为各交流分量周期的横向和纵向分量最小公倍数;然后在图像中,按照预定顺序依次以每个像素点为矩阵左上角选取基核大小的基核单元,并分别与相对应的基核图案作积分求和处理。
2.根据权利要求1所述的方法,其中积分求和处理具体包括:图像中的每个基核单元分别与同频率、同方向的余弦及正弦基核图案作乘法处理后,再进行积分求和,从而得到与原始图像尺寸大小相同的余弦解调和正弦解调图案。
3.根据权利要求2所述的方法,其中对于具有各不同频率f1、f2、…的交流分量的调制图像,各分量关系如公式(1)所示:
其中,k≥1为交流调制分量个数,Ai、fi分别为各交流成分幅值、频率和空间初始相位,mi∈[-1,1]、ni∈[-1,1]并共同决定了交流调制条纹的方向,且需满足公式(2),B为直流分量,x、y为空间坐标。
4.根据权利要求3所述的方法,其中进一步利用公式(3)解调出调制图案的交流成分幅值,利用公式(4)解调出直流成分:
其中,σ为图像中每个像素点对应的基核单元,T1、T2分别为各交流分量周期的横向和纵向分量最小公倍数。
5.根据权利要求1至4任一所述的方法,其中对于基核图案,提取图像的不同频率或方向的交流成分时,基核图案也不相同,并且基核图案与提取交流调制图案具有相同的频率和方向。
6.根据权利要求1至4任一所述的方法,其中所述预定顺序为以图像左上角为起点,依次从左到右、从上到下的顺序。
7.一种空间频域成像方法,其包括将包含一种或多种频率的调制光投影到样品上,并通过CCD相机采集从样品反射回的光强、透射出光强或激发出的荧光光强;其中所述CCD相机采集的光分解为直流(DC)部分和交流(AC)部分,其特征在于所述CCD相机采集的光采用权利要求1至6任一项所述的单次快照多频解调方法进行解调。
8.一种信号传输方法,其利用权利要求1-6任一项所述的单次快照多频解调方法实现多幅图像的一次性传输。
CN201510638861.7A 2015-09-30 2015-09-30 单次快照多频解调方法 Active CN105245761B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510638861.7A CN105245761B (zh) 2015-09-30 2015-09-30 单次快照多频解调方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510638861.7A CN105245761B (zh) 2015-09-30 2015-09-30 单次快照多频解调方法

Publications (2)

Publication Number Publication Date
CN105245761A CN105245761A (zh) 2016-01-13
CN105245761B true CN105245761B (zh) 2018-08-24

Family

ID=55043243

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510638861.7A Active CN105245761B (zh) 2015-09-30 2015-09-30 单次快照多频解调方法

Country Status (1)

Country Link
CN (1) CN105245761B (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017166082A1 (zh) * 2016-03-30 2017-10-05 温州医科大学 一种基于空间频域调制大面积解析微观结构的快速无损组织活检方法与技术
CN105866035B (zh) * 2016-03-30 2019-04-05 温州医科大学 一种基于空间频域调制大面积解析微观结构的快速无损组织活检方法与技术
CN107802269A (zh) * 2017-10-30 2018-03-16 温州医科大学 实时单次快照多频解调空间频域成像方法
CN111698435B (zh) * 2020-06-10 2021-04-27 北京理工大学 空频谱多维联合调制的成像加速方法和装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1848234A (zh) * 2005-04-11 2006-10-18 三星电子株式会社 显示装置及其控制方法
CN101802675A (zh) * 2007-07-06 2010-08-11 新加坡国立大学 荧光焦点调制显微系统和方法
CN103430626A (zh) * 2011-03-22 2013-12-04 皇家飞利浦有限公司 光检测系统和方法
CN104156908A (zh) * 2014-08-27 2014-11-19 广西大学 高时间分辨率的频域瞬态成像方法
CN104168423A (zh) * 2014-08-25 2014-11-26 清华大学 频域瞬态成像方法及系统
WO2015010967A1 (en) * 2013-07-23 2015-01-29 Koninklijke Philips N.V. Modulation of coded light components

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1848234A (zh) * 2005-04-11 2006-10-18 三星电子株式会社 显示装置及其控制方法
CN101802675A (zh) * 2007-07-06 2010-08-11 新加坡国立大学 荧光焦点调制显微系统和方法
CN103430626A (zh) * 2011-03-22 2013-12-04 皇家飞利浦有限公司 光检测系统和方法
WO2015010967A1 (en) * 2013-07-23 2015-01-29 Koninklijke Philips N.V. Modulation of coded light components
CN104168423A (zh) * 2014-08-25 2014-11-26 清华大学 频域瞬态成像方法及系统
CN104156908A (zh) * 2014-08-27 2014-11-19 广西大学 高时间分辨率的频域瞬态成像方法

Also Published As

Publication number Publication date
CN105245761A (zh) 2016-01-13

Similar Documents

Publication Publication Date Title
CN105245761B (zh) 单次快照多频解调方法
CN105203044B (zh) 以计算激光散斑为纹理的立体视觉三维测量方法及系统
US7844079B2 (en) System and technique for retrieving depth information about a surface by projecting a composite image of modulated light patterns
Feng et al. General solution for high dynamic range three-dimensional shape measurement using the fringe projection technique
Laidler et al. TFIT: A Photometry Package Using Prior Information for Mixed‐Resolution Data Sets
Pages et al. Optimised De Bruijn patterns for one-shot shape acquisition
Falcao et al. Plane-based calibration of a projector-camera system
US6750975B2 (en) Three-dimensional shape measuring method
US9141868B2 (en) Contemporaneously reconstructing images captured of a scene illuminated with unstructured and structured illumination sources
US10664685B2 (en) Methods, systems, and devices for optical sectioning
Morgan Features and the ‘primal sketch’
US10648789B2 (en) Method for monitoring linear dimensions of three-dimensional objects
US10999569B2 (en) Three-dimensional image reconstruction using multi-layer data acquisition
US20070285422A1 (en) Method for Separating Direct and Global Illumination in a Scene
US9404741B2 (en) Color coding for 3D measurement, more particularly for transparent scattering surfaces
US9459094B2 (en) Color-encoded fringe pattern for three-dimensional shape measurement
CN106780584B (zh) 基于灰度共生矩阵的纹理方向精细估算方法
CN105989360A (zh) 图像拾取装置
CN104680534A (zh) 基于单帧复合模板的物体深度信息获取方法
US10230927B2 (en) Single snapshot multi-frequency demodulation method
US10274307B2 (en) Film thickness measurement device using interference of light and film thickness measurement method using interference of light
Hoffman et al. Single-image structured illumination using Hilbert transform demodulation
Maimone Characterizing stereo matching problems using local spatial frequency
Liu Accuracy improvement of 3D measurement using digital fringe projection
CN110118755A (zh) 基于傅里叶光场和关联成像的光学成像方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant