CN102353449A - 一种极弱光多光谱成像方法及其系统 - Google Patents

一种极弱光多光谱成像方法及其系统 Download PDF

Info

Publication number
CN102353449A
CN102353449A CN2011101664716A CN201110166471A CN102353449A CN 102353449 A CN102353449 A CN 102353449A CN 2011101664716 A CN2011101664716 A CN 2011101664716A CN 201110166471 A CN201110166471 A CN 201110166471A CN 102353449 A CN102353449 A CN 102353449A
Authority
CN
China
Prior art keywords
mrow
msup
lens
control system
msub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011101664716A
Other languages
English (en)
Other versions
CN102353449B (zh
Inventor
杜克铭
孙志斌
王超
王迪
何微
蔡世界
刘国才
蒋远大
翟光杰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
National Space Science Center of CAS
Original Assignee
National Space Science Center of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by National Space Science Center of CAS filed Critical National Space Science Center of CAS
Priority to CN201110166471.6A priority Critical patent/CN102353449B/zh
Publication of CN102353449A publication Critical patent/CN102353449A/zh
Priority to PCT/CN2012/074536 priority patent/WO2012174940A1/zh
Priority to US14/113,250 priority patent/US9807317B2/en
Priority to EP12802420.5A priority patent/EP2728324A4/en
Priority to JP2014516173A priority patent/JP5947377B2/ja
Application granted granted Critical
Publication of CN102353449B publication Critical patent/CN102353449B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J3/2803Investigating the spectrum using photoelectric array detector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J3/2823Imaging spectrometer
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/75Systems in which material is subjected to a chemical reaction, the progress or the result of the reaction being investigated
    • G01N21/76Chemiluminescence; Bioluminescence
    • G01N21/763Bioluminescence
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0075Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence by spectroscopy, i.e. measuring spectra, e.g. Raman spectroscopy, infrared absorption spectroscopy
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J1/00Photometry, e.g. photographic exposure meter
    • G01J1/42Photometry, e.g. photographic exposure meter using electric radiation detectors
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J1/00Photometry, e.g. photographic exposure meter
    • G01J1/42Photometry, e.g. photographic exposure meter using electric radiation detectors
    • G01J1/44Electric circuits
    • G01J2001/4413Type
    • G01J2001/442Single-photon detection or photon counting
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J3/2823Imaging spectrometer
    • G01J2003/2826Multispectral imaging, e.g. filter imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01NINVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
    • G01N21/00Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
    • G01N21/62Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light
    • G01N21/63Systems in which the material investigated is excited whereby it emits light or causes a change in wavelength of the incident light optically excited
    • G01N21/64Fluorescence; Phosphorescence
    • G01N21/645Specially adapted constructive features of fluorimeters
    • G01N21/6452Individual samples arranged in a regular 2D-array, e.g. multiwell plates

Landscapes

  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Plasma & Fusion (AREA)
  • Health & Medical Sciences (AREA)
  • Chemical Kinetics & Catalysis (AREA)
  • Analytical Chemistry (AREA)
  • Biochemistry (AREA)
  • General Health & Medical Sciences (AREA)
  • Immunology (AREA)
  • Pathology (AREA)
  • Spectrometry And Color Measurement (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Investigating, Analyzing Materials By Fluorescence Or Luminescence (AREA)
  • Investigating Or Analysing Materials By The Use Of Chemical Reactions (AREA)

Abstract

本发明涉及一种极弱光多光谱成像方法及其系统,将各个响应波段的单光子探测器组成线性阵列,结合分光技术,即可实现极弱光对象的多光谱二维成像。该极弱光多光谱二维成像系统采用压缩传感理论和DLP技术,并以单光子探测器线阵为探测元件,实现了高分辨率的光学调制;所述的极弱光多光谱二维成像系统包括:滤光片(6)、第一透镜(1)、DMD控制系统(7)、第二透镜(2)、分光光度计(3)、由若干不同响应波长的单光子探测器组成的单光子探测器线阵(4),和中央处理单元(5);其灵敏度可以达到单光子水平。本发明可广泛应用于生物自发光检测、医疗诊断、非破坏性物质分析、天文观测、国防军事、光谱测量、量子电子学等领域。

Description

一种极弱光多光谱成像方法及其系统
技术领域
本发明涉及极弱光探测技术领域,特别涉及一种极弱光多光谱成像方法及其系统,采用单光子探测器线性阵列和分光技术实现了极弱光对象的多光谱二维成像,可应用在生物自发光、医疗诊断、非破坏性物质分析、天文观测、国防军事、光谱测量、量子电子学等领域。
背景技术
多光谱成像是获得和显示精确颜色信息的重要技术,原因之一是多光谱图像包含了更多的光谱信息,原因之二是多光谱成像技术很好地克服了同色异谱现象。极弱光对象的多光谱成像更是在多种领域有广泛的应用前景。
一种典型的极弱光探测器就是单光子探测器,计数型的单光子探测器工作在饱和状态,灵敏度可以到达单光子水平,采用统计学方法获得光子密度图像;具备光子数分辨能力的单光子探测器工作在亚饱和状态,输出的电信号幅值随探测到的光子数的变化而变化,据此电信号获得极弱光图像。虽然目前的单光子探测器响应光谱范围覆盖了红外、可见光等波段,但是对于单个单光子探测器,它的响应光谱范围很窄,一般用来探测单一频率的光。
其中,单光子探测器实现二维成像是基于压缩传感理论(Compressive Sensing,简称CS)和数字光处理(Digital Light Processing,简称DLP)技术,克服了目前的极弱光二维成像技术中面元探测技术不甚成熟,难以实现对极弱光对象的高质量成像的困难,避免了采用点探测器结合二维传动扫描的方法带来的成像时间长、分辨率受机械传动精度制约的问题。
CS理论是由E.J.Candès等人提出的,它打破了传统的线性采样模式,表明可压缩信号的少量线性随机投影中包含足够的信息来重建原信号。这种“先采样,后重建”的思想使得将二维信号转换为随时间分布的一维信号,并且由单个探测器采样成为可能。
CS理论包括两部分:压缩采样和稀疏重建。
压缩采样是被测信号由高维向低维映射的过程。假设x∈Rn是被测数据,y∈Rk是观测数据,Φ∈Rk×n是随机投影矩阵(k<<n),e∈Rk是测量噪声,那么压缩采样过程可以描述为(1)式:
y=Φx+e                      (1)
如果x是变换域稀疏的,即θ=Ψx,Ψ是稀疏变换矩阵,那么(1)式变化为(2)式:
y=ΦΨ-1θ+e                 (2)
随机投影矩阵Φ,也叫测量矩阵,需要满足RIP(Restricted Isometry Property)。另外,Φ与Ψ越不相关,采样所需的测量数k越小。所以,一般情况下Φ设计为随机矩阵。
稀疏重建实际上是在已知观测数据y和测量矩阵Φ的条件下求解(1)式中的x,这是一个ill-posed问题,一般用最优化方法求解,可描述为(3)式:
min x ∈ R n ( 1 2 | | y - Φx | | 2 2 + τ | | x | | 1 ) - - - ( 3 )
如果x是变换域稀疏的,对应于(2)式的重建问题可以描述为(4)式:
min x ∈ R n ( 1 2 | | y - Φx | | 2 2 + τ | | Ψx | | 1 ) - - - ( 4 )
(3)式和(4)式中,第一项是最小二乘约束,记为f(x);第二项是对x稀疏度的一种约束;两项之和是目标函数,记为
DLP技术是美国德州仪器公司(TI)提出的一项技术,它与数字视频或图形信号结合起来,其微镜和透镜系统可以将数字图像反射到屏幕或其它表面,其核心是DLP芯片——数字微镜器件(Digital Micro-mirror Device,简称DMD),这可能是世界上最精密的光开关。它包含一个多达200万个安装在铰链上的微镜的矩阵,每个微镜的大小小于人的头发丝的五分之一。每个微镜都可以在-12°和+12°之间摆动,如果把这两种状态记为0和1,那么用脉宽调制波(PWM)来驱动微镜,使其在0和1之间高速抖动,就可以实现中间状态。DMD及其周围精密的电子元件就是所谓的DLP技术。
发明内容
本发明的目的在于,结合单光子探测技术和光谱分光技术,解决采用单光子探测器这种点探测器实现二维成像以及极弱光对象的多光谱成像问题,从而提供一种新型的极弱光多光谱成像方法及其系统,将各个响应波段的单光子探测器组成线性阵列,结合分光技术,即可实现极弱光对象的多光谱二维成像。
为实现上述第一个目的,本发明提供一种新型的极弱光二维成像方法,其特征在于,该极弱光二维成像方法采用压缩传感理论和DLP技术,并以单光子探测器线阵为探测元件,实现了高分辨率的光学调制。其步骤包括:
1)压缩采样的步骤;
所述的压缩采样是由DMD控制系统7结合第一透镜1和第二透镜2,用于将二维图像数据转化为一维数据序列完成被测信号的压缩采样,
极弱光通过滤光片6滤除杂光,经第一透镜1在DMD控制系统7处成像,并由DMD控制系统7控制光子被反射到第二透镜2的概率,经过第二透镜2控制光子聚焦;
被调制和会聚的极弱光经由分光光度计3进行分光后,通过单光子探测器线阵4对不同的波长进行成像;
2)稀疏重建的步骤;
所述的稀疏重建是由中央处理单元5结合单光子探测器线阵4完成稀疏重建,并和DMD控制系统7上的测量矩阵经过最优化算法重建光子密度图像,解算出二维图像。
该方法的具体步骤包括:
1)所述的压缩采样,是被测信号由高维向低维映射的过程:
假设x∈Rn是被测数据,y∈Rk是观测数据,Φ∈Rk×n是随机投影矩阵(k<<n),e∈Rk是测量噪声,那么,压缩采样的过程可以描述为(1)式:
y=Φx+e                    (1)
如果x是变换域稀疏的,即θ=Ψx,Ψ是稀疏变换矩阵,那么(1)式变化为(2)式:
y=ΦΨ-1θ+e                (2)
式中,Ψ为小波变换矩阵,Φ为Gaussian随机矩阵;
2)假设测量数为k,二维图像的像素个数为n,则(1)式中的测量矩阵则为Φ={Φ1,…,Φi,…,Φk},Φi是Φ的第i行,把
Figure BDA0000069553230000031
的二维图像的列首尾相连,化成n×1的一维列向量,对应(1)式中的x,其中的每一个元素代表相应位置处的光子密度;DMD控制系统具有同样的分辨率,它的列首尾相连,化成1×n的一维行向量,对应测量矩阵Φ中的一行,其中的每个元素代表相应位置处光子透射到第二透镜(2)的概率;
3)假设测量周期为T,在这段时间内,DMD控制系统7保持不变,分光光度计3使光谱分离,对准相应波长的单光子探测器,单光子探测器线阵4中对应某一波长的探测器探测到的光子数为N,那么N/T就相当于被观察对象光谱中相应波长的光子密度图像与DMD控制系统上的随机数阵列的内积值,对应于(1)式中观察向量y的一个元素式中,Φi,j、xj分别是Φi和x的第j个元素;根据测量矩阵改变DMD控制系统,重复k次测量,就可以得到整个观测数据y,进而为得到该波长的光谱图像准备好了数据;
其他波长的光谱图像的获取也适用同样的方法;
4)所述的稀疏重建是在已知观测数据y和测量矩阵Φ的条件下求解(1)式中的x,一般用最优化方法求解,可描述为(3)式:
min x ∈ R n ( 1 2 | | y - Φx | | 2 2 + τ | | x | | 1 ) - - - ( 3 )
如果x是变换域稀疏的,对应于(2)式的重建问题可以描述为(4)式:
min x ∈ R n ( 1 2 | | y - Φx | | 2 2 + τ | | Ψx | | 1 ) - - - ( 4 )
(3)式和(4)式中,第一项是最小二乘约束,记为f(x);第二项是对x稀疏度的一种约束;两项之和是目标函数,记为
Figure BDA0000069553230000044
作为一种优选,所述的最优化方法是采用小波变换下可分离逼近的稀疏重建算法SpaRSA-DWT(Sparse Reconstruction by Separable Approximation with DiscreteWavelet Transform)把本次迭代的估计值做DWT变换,对变换系数做阈值处理,再做DWT反变换得到下一次迭代的估计值,并且在每次迭代中计算最优的步长因子;
如果阈值处理函数描述为S(u,v)=sign(u)max{|u|-v,0},那么,该算法可以描述为:
x t + 1 = Ψ - 1 · S ( Ψ ( x t - 1 α t ▿ f ( x t ) ) , τ α t )
其中,αt采用随迭代次数变化的αt,使αtI逼近
Figure BDA0000069553230000046
即: α t ( x t - x t - 1 ) = ▿ f ( x t ) - ▿ f ( x t - 1 ) ;
利用最小二乘法求解此式,得到 α t = | | Φ ( x t - x t - 1 ) | | 2 2 | | x t - x t - 1 | | 2 2 .
本发明的成像过程分为压缩采样和稀疏重建两个步骤;其中,压缩采样是将二维图像数据转化为一维数据序列,由DMD结合透镜来完成;稀疏重建是根据得到的一维数据序列解算出二维图像。
为了实现第二个目的,本发明提供一种新型的极弱光多光谱二维成像系统。其特征在于,该极弱光多光谱二维成像系统采用压缩传感理论和DLP技术,并以单光子探测器线阵为探测元件,实现了高分辨率的光学调制。
所述的极弱光多光谱二维成像系统包括:滤光片6、第一透镜1、DMD控制系统7、第二透镜2、分光光度计3、由若干不同响应波长的单光子探测器组成的单光子探测器线阵4,和中央处理单元5;其中,
DMD控制系统7结合第一透镜1和第二透镜2,用于将二维图像数据转化为一维数据序列完成被测信号的压缩采样,极弱光通过滤光片6滤除杂光,经第一透镜1在DMD控制系统7处成像,并由DMD控制系统7控制光子被反射到第二透镜2的概率,经过第二透镜2控制光子聚焦;
被调制和会聚的极弱光经由分光光度计3进行分光后,再通过单光子探测器线阵4对不同的波长进行成像;被调制和会聚的极弱光在被单光子探测线阵接收之前,由分光光度计(包括棱镜和光栅等各种分光器件和装置)实现光谱分离,便于后续的不同响应波长的探测器探测,就可以对不同的波长进行成像,也就是多光谱成像;
中央处理单元5结合单光子探测器线阵4完成稀疏重建,并和DMD控制系统7上的测量矩阵经过最优化算法重建光子密度图像,解算出二维图像。
所述的单光子探测器采用计数型单光子探测器,用于在一定时间内对光子进行计数,用统计学方法计算光子数密度,将该数值折算成探测到光子的概率作为测量值。
所述的单光子探测器采用具备光子数分辨能力的单光子探测器,用于根据输出电信号幅值的大小获得图像数据,其输出的电信号幅值即可作为光子密度的测量值。
所述的分光光度计包括:光准直部分、分光部分、角度测量部分、光度观察和测量部分,用于光谱分析和测量。
所述的分光光度计为棱镜分光光度计或光栅分光光度计。
本发明的优点是:本发明以压缩传感(Compressive Sensing,简称CS)理论为基础,以数字光学处理(Digital Light Processing,简称DLP)技术进行光学调制,以单光子探测器为探测元件,实现了用点探测器对极弱光对象的单一光谱成分进行二维成像,用线阵单光子探测器对极弱光对象进行多光谱二维成像,结构简单,灵敏度可以达到单光子水平,分辨率与DMD直接相关,而DMD目前可以达到很高的分辨率;探测器为单光子探测线阵,可以响应多种波长,同时完成极弱光的多光谱二维成像。
本发明可广泛应用于生物自发光检测、医疗诊断、非破坏性物质分析、天文观测、国防军事、光谱测量、量子电子学等领域。
附图说明
图1是本发明提出的系统结构图。
图2(a)~(l)是对本发明的采用SpaRSA-DWT算法的重建彩色图像的模拟结果图。
附图标识
1、第一透镜2、第二透镜3、分光光度计
4、单光子探测器线阵5、中央处理单元6、滤光片
7、DMD控制系统
具体实施方式
以下结合附图对本发明作进一步的详细说明。
图1中,观察对象发出的极弱光被滤光片6滤除杂光,经第一透镜1在DMD处成像。DMD控制系统7控制光子被反射到第二透镜2的概率,而后被第二透镜2会聚。如果探测器是计数型单光子探测器,那么它在一定时间内对光子进行计数,将该数值折算成探测到光子的概率作为测量值;如果采用具备光子数分辨能力的单光子探测器,那么输出的电信号幅值即可作为光子密度的测量值。最后由计算机5根据测量值和DMD控制系统7上的测量矩阵经过最优化算法重建光子密度图像。
为了便于数学上的理解,假设测量数为k,(1)式中的测量矩阵写为Φ={Φ1,…,Φi,…,Φk),Φi是Φ的第i行。我们把
Figure BDA0000069553230000061
的二维图像的列首尾相连,化成n×1的一维列向量,对应(1)式中的x,其中的每一个元素代表相应位置处的光子密度;DMD具有同样的分辨率,它的列首尾相连,化成1×n的一维行向量,对应测量矩阵Φ中的一行,其中的每个元素代表相应位置处光子透射到第二透镜2的概率。如果探测器是计数型单光子探测器,假设测量周期为T,在这段时间内,DMD保持不变,单光子探测器探测到的光子数为N,那么N/T就相当于光子密度图像与DMD上的随机数阵列的内积值;如果采用具备光子数分辨能力的单光子探测器,那么单光子探测器的输出电信号幅值就相当于光子密度图像与DMD控制系统7上的随机数阵列的内积值。
该内积值对应于(1)式中观察向量y的一个元素i,j、xj分别是Φi和x的第j个元素)。根据测量矩阵改变DMD,重复k次测量,就可以得到整个观测数据y,在物理上实现(1)式的过程。
根据光子学的知识,在一个元面积dA内,任意时刻在r点观察到一个光子的概率p(r)dA正比于该处光强。所以在模拟实验中,我们用生物芯片的彩色图像模拟极弱光图像。生物芯片是典型的极弱光源,目前主要通过荧光标记的方法使其便于观察。实际上生物都有自发光的特性,并且自发光光谱包含很多重要的信息。
为验证本系统的可行性和实用性,在模拟实验中将该生物芯片彩色图像看作R、G、B三原色的组合来模拟光谱分离,在假设不知道原图像的情况下采用本系统介绍的方法恢复原彩色图像。实验中图像分辨率为64×64,采用Gaussian矩阵进行压缩采样,SpaRSA-DWT稀疏重建算法进行图像重建,得到图2所示的结果,其中,图2(a)是原始光子密度彩色图像;图2(b)是一次测量中DMD上的随机矩阵,黑点代表0,白点代表1,灰点代表中间值;图2(c)是原图像的R分量;图2(d)是SpaRSA-DWT算法的R分量重建图像;图2(e)是SpaRSA-DWT算法的R分量残差图像;图2(f)是原图像的G分量;图2(g)是SpaRSA-DWT算法的G分量重建图像,图2(h)是SpaRSA-DWT算法的G分量残差图像;图2(i)是原图像的B分量;图2(j)是SpaRSA-DWT算法的B分量重建图像;图2(k)是SpaRSA-DWT算法的B分量残差图像;图2(l)是SpaRSA-DWT算法的重建彩色图像,与原始图像的相关系数0.9783,信噪比23.95dB。
最后所应说明的是,以上实施例仅用以说明本发明的技术方案而非限制。尽管参照实施例对本发明进行了详细说明,本领域的普通技术人员应当理解,对本发明的技术方案进行修改或者等同替换,都不脱离本发明技术方案的精神和范围,其均应涵盖在本发明的权利要求范围当中。

Claims (8)

1.一种极弱光多光谱二维成像方法,其特征在于,该极弱光多光谱二维成像方法采用压缩传感理论和DLP技术,并以单光子探测器线阵为探测元件,实现了高分辨率的光学调制;其步骤包括:
1)压缩采样的步骤;
所述的压缩采样是由DMD控制系统(7)结合第一透镜(1)和第二透镜(2),用于将二维图像数据转化为一维数据序列完成被测信号的压缩采样,
极弱光通过滤光片(6)滤除杂光,经第一透镜(1)在DMD控制系统(7)处成像,并由DMD控制系统(7)控制光子被反射到第二透镜(2)的概率,经过第二透镜(2)控制光子聚焦;
被调制和会聚的极弱光经由分光光度计(3)进行分光后,通过单光子探测器线阵(4)对不同的波长进行成像;
2)稀疏重建的步骤;
所述的稀疏重建是由中央处理单元(5)结合单光子探测器线阵(4)完成稀疏重建,并和DMD控制系统(7)上的测量矩阵经过最优化算法重建光子密度图像,解算出二维图像。
2.根据权利要求1所述的极弱光多光谱二维成像方法,其特征在于,该方法的具体步骤包括:
1)所述的压缩采样,是被测信号由高维向低维映射的过程:
假设x∈Rn是被测数据,y∈Rk是观测数据,Φ∈Rk×n是随机投影矩阵(k<<n),e∈Rk是测量噪声,那么,压缩采样的过程可以描述为(1)式:
y=Φx+e         (1)
如果x是变换域稀疏的,即θ=Ψx,Ψ是稀疏变换矩阵,那么(1)式变化为(2)式:
y=ΦΨ-1θ+e    (2)
式中,Ψ为小波变换矩阵,Φ为Gaussian随机矩阵;
2)假设测量数为k,二维图像的像素个数为n,则(1)式中的测量矩阵则为Φ={Φ1,…,Φi,…,Φk},Φi是Φ的第i行,把
Figure FDA0000069553220000011
的二维图像的列首尾相连,化成n×1的一维列向量,对应(1)式中的x,其中的每一个元素代表相应位置处的光子密度;DMD控制系统具有同样的分辨率,它的列首尾相连,化成1×n的一维行向量,对应测量矩阵Φ中的一行,其中的每个元素代表相应位置处光子透射到第二透镜(2)的概率;
3)假设测量周期为T,在这段时间内,DMD控制系统(7)保持不变,分光光度计(3)使光谱分离,对准相应波长的单光子探测器,单光子探测器线阵(4)中对应某一波长的单光子探测器探测到的光子数为N,那么N/T就相当于被观察对象光谱中相应波长的光子密度图像与DMD控制系统上的随机数阵列的内积值,对应于(1)式中观察向量y的一个元素
Figure FDA0000069553220000021
式中,Φi,j、xj分别是Φi和x的第j个元素;根据测量矩阵改变DMD控制系统,重复k次测量,就可以得到整个观测数据y,进而为得到该波长的光谱图像准备好了数据;
其他波长的光谱图像的获取也适用同样的方法;
4)所述的稀疏重建是在已知观测数据y和测量矩阵Φ的条件下求解(1)式中的x,一般用最优化方法求解,可描述为(3)式:
min x ∈ R n ( 1 2 | | y - Φx | | 2 2 + τ | | x | | 1 ) - - - ( 3 )
如果x是变换域稀疏的,对应于(2)式的重建问题可以描述为(4)式:
min x ∈ R n ( 1 2 | | y - Φx | | 2 2 + τ | | Ψx | | 1 ) - - - ( 4 )
(3)式和(4)式中,第一项是最小二乘约束,记为f(x);第二项是对x稀疏度的一种约束;两项之和是目标函数,记为
3.根据权利要求1所述的极弱光多光谱二维成像方法,其特征在于,所述的最优化方法是采用小波变换下可分离逼近的稀疏重建算法,把本次迭代的估计值做DWT变换,对变换系数做阈值处理,再做DWT反变换得到下一次迭代的估计值,并且在每次迭代中计算最优的步长因子;
如果阈值处理函数描述为S(u,v)=sign(u)max{|u|-v,0},那么,该算法可以描述为:
x t + 1 = Ψ - 1 · S ( Ψ ( x t - 1 α t ▿ f ( x t ) ) , τ α t )
其中,αt采用随迭代次数变化的αt,使αtI逼近
Figure FDA0000069553220000032
即: α t ( x t - x t - 1 ) = ▿ f ( x t ) - ▿ f ( x t - 1 ) ;
利用最小二乘法求解此式,得到 α t = | | Φ ( x t - x t - 1 ) | | 2 2 | | x t - x t - 1 | | 2 2 .
4.一种极弱光多光谱二维成像系统,其特征在于,该极弱光多光谱二维成像系统采用压缩传感理论和DLP技术,并以单光子探测器线阵为探测元件,实现了高分辨率的光学调制;
所述的极弱光多光谱二维成像系统包括:滤光片(6)、第一透镜(1)、DMD控制系统(7)、第二透镜(2)、分光光度计(3)、由若干不同响应波长的单光子探测器组成的单光子探测器线阵(4),和中央处理单元(5);其中,
DMD控制系统(7)结合第一透镜(1)和第二透镜(2),用于将二维图像数据转化为一维数据序列完成被测信号的压缩采样,极弱光通过滤光片(6)滤除杂光,经第一透镜(1)在DMD控制系统(7)处成像,并由DMD控制系统(7)控制光子被反射到第二透镜(2)的概率,经过第二透镜(2)控制光子聚焦;
被调制和会聚的极弱光经由分光光度计(3)进行分光后,再通过单光子探测器线阵(4)对不同的波长进行成像;
中央处理单元(5)结合单光子探测器线阵(4)完成稀疏重建,并和DMD控制系统(7)上的测量矩阵经过最优化算法重建光子密度图像,解算出二维图像。
5.根据权利要求4所述的极弱光多光谱二维成像系统,其特征在于,所述的单光子探测器采用计数型单光子探测器,用于在一定时间内对光子进行计数,用统计学方法计算光子数密度,将该数值折算成探测到光子的概率作为测量值。
6.根据权利要求4所述的极弱光多光谱二维成像系统,其特征在于,所述的单光子探测器采用具备光子数分辨能力的单光子探测器,用于根据输出电信号幅值的大小获得图像数据,其输出的电信号幅值即可作为光子密度的测量值。
7.根据权利要求4所述的极弱光多光谱二维成像系统,其特征在于,所述的分光光度计包括:光准直部分、分光部分、角度测量部分、光度观察和测量部分,用于光谱分析和测量。
8.根据权利要求4或7所述的极弱光多光谱二维成像系统,其特征在于,所述的分光光度计为棱镜分光光度计或光栅分光光度计。
CN201110166471.6A 2011-06-20 2011-06-20 一种极弱光多光谱成像方法及其系统 Active CN102353449B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201110166471.6A CN102353449B (zh) 2011-06-20 2011-06-20 一种极弱光多光谱成像方法及其系统
PCT/CN2012/074536 WO2012174940A1 (zh) 2011-06-20 2012-04-23 一种极弱光多光谱成像方法及其系统
US14/113,250 US9807317B2 (en) 2011-06-20 2012-04-23 Multi-spectral imaging method for ultraweak photon emission and system thereof
EP12802420.5A EP2728324A4 (en) 2011-06-20 2012-04-23 MULTISPECTRAL IMAGING METHOD FOR ULTRA-LIGHT PHOTONIC EMISSION AND SYSTEM THEREOF
JP2014516173A JP5947377B2 (ja) 2011-06-20 2012-04-23 極めて弱い光のマルチスペクトル二次元イメージング方法及びそのシステム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201110166471.6A CN102353449B (zh) 2011-06-20 2011-06-20 一种极弱光多光谱成像方法及其系统

Publications (2)

Publication Number Publication Date
CN102353449A true CN102353449A (zh) 2012-02-15
CN102353449B CN102353449B (zh) 2014-11-12

Family

ID=45577060

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201110166471.6A Active CN102353449B (zh) 2011-06-20 2011-06-20 一种极弱光多光谱成像方法及其系统

Country Status (5)

Country Link
US (1) US9807317B2 (zh)
EP (1) EP2728324A4 (zh)
JP (1) JP5947377B2 (zh)
CN (1) CN102353449B (zh)
WO (1) WO2012174940A1 (zh)

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102768069A (zh) * 2012-07-27 2012-11-07 中国科学院空间科学与应用研究中心 一种互补测量的单光子光谱计数成像系统及方法
WO2012174940A1 (zh) * 2011-06-20 2012-12-27 中国科学院空间科学与应用研究中心 一种极弱光多光谱成像方法及其系统
CN103925999A (zh) * 2014-05-06 2014-07-16 中山大学 一种图像光谱探测方法及系统
CN104267407A (zh) * 2014-09-12 2015-01-07 清华大学 基于压缩采样的主动成像方法和系统
CN104796674A (zh) * 2015-04-17 2015-07-22 南京理工大学 基于压缩感知的彩色成像装置及方法
CN106840400A (zh) * 2017-01-24 2017-06-13 深圳企管加企业服务有限公司 多光谱成像系统
CN106908144A (zh) * 2017-03-28 2017-06-30 北京振兴计量测试研究所 一种超微弱星光照度测量装置及方法
CN107976408A (zh) * 2017-10-17 2018-05-01 中国科学院遥感与数字地球研究所 一种文物无损检测装置
WO2019178794A1 (zh) * 2018-03-22 2019-09-26 深圳大学 一种荧光寿命的测量方法及装置
CN110487427A (zh) * 2019-07-08 2019-11-22 清远市天之衡传感科技有限公司 基于dmd微镜阵列的单光子偏振态量子成像系统
CN111315488A (zh) * 2018-08-06 2020-06-19 卡梅尔诊断有限公司 细胞组织分析的方法及装置
CN112197863A (zh) * 2020-12-04 2021-01-08 武汉精测电子集团股份有限公司 一种点阵光谱测量装置、面阵色度测量装置及方法
CN113324920A (zh) * 2021-05-27 2021-08-31 西安电子科技大学 基于微纳结构滤光片调制和稀疏矩阵变换的光谱重建方法
CN113447976A (zh) * 2021-06-29 2021-09-28 中国科学院高能物理研究所 一种高分辨率慢正电子束形貌的测量方法及装置

Families Citing this family (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104054266B (zh) 2011-10-25 2016-11-23 中国科学院空间科学与应用研究中心 一种时间分辨单光子或极弱光多维成像光谱系统及方法
WO2016092451A1 (en) * 2014-12-09 2016-06-16 Basf Se Optical detector
WO2018038734A1 (en) * 2016-08-26 2018-03-01 Halliburton Energy Services, Inc. Optical fiber spectroscopy using single photon detectors (spds)
KR101775615B1 (ko) * 2016-11-24 2017-09-07 단국대학교 산학협력단 고감도 영상 획득방법
CN107590472B (zh) * 2017-09-19 2024-04-05 中国科学院西安光学精密机械研究所 基于推扫式光谱成像仪的光谱分类器及分类方法
CN107846592A (zh) * 2017-10-18 2018-03-27 中国科学院计算技术研究所 压缩感知图像的采集重建方法和系统
CN107807091B (zh) * 2017-11-29 2024-03-19 苏州蛟视智能科技有限公司 一种压缩感知成像装置及方法
US10630917B1 (en) * 2018-09-28 2020-04-21 Massachusetts Institute Of Technology Apparatus and methods for all-CMOS compressive sensing
US20200288965A1 (en) * 2019-03-11 2020-09-17 Spring Biomed Vision Ltd. System and method for enhanced imaging of biological tissue
CN110187498B (zh) * 2019-05-27 2021-08-17 中国科学院国家空间科学中心 一种真热光关联成像系统
CN111007006B (zh) * 2019-11-25 2021-11-26 东北大学 一种多光谱调制输出光源装置
CN112946876B (zh) * 2019-12-10 2023-01-03 苏州大学 应用于dmd系统工作台低速运动控制方法及系统
CN112037132B (zh) * 2020-08-31 2023-07-28 广东工业大学 一种多孔径紧凑型多光谱成像系统及深度学习图像超分辨率重建方法
CN113379906B (zh) * 2021-07-23 2023-04-11 中国科学院西安光学精密机械研究所 一种基于超像素滤波的单光子三维图像重建方法及系统
CN114397255B (zh) * 2021-11-12 2023-09-01 中国科学院西安光学精密机械研究所 一种宽谱段高分辨视频光谱成像系统和方法
CN114486746B (zh) * 2021-11-25 2023-12-08 中国科学院西安光学精密机械研究所 基于压缩感知的高分辨率光子集成成像系统及成像方法
CN114264370B (zh) * 2021-12-23 2024-04-26 中国科学院国家空间科学中心 一种压缩感知计算层析成像光谱仪系统和成像方法
CN114935758B (zh) * 2022-05-17 2024-05-10 中国科学院西安光学精密机械研究所 基于光子集成回路的分布式合成孔径成像系统及成像方法
CN116773850B (zh) * 2023-05-16 2024-07-23 苏州大学 一种基于单光子探测器测量转速和转角的装置及方法
CN116538949B (zh) * 2023-07-03 2023-09-15 湖南大学 一种基于时域超分辨的高速动态过程dic测量装置与方法
CN118334818B (zh) * 2024-06-12 2024-08-16 太原理工大学 一种基于互补成像的远距离火灾预警系统及方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101387548A (zh) * 2007-09-11 2009-03-18 中国科学院西安光学精密机械研究所 单光子计数成像仪
US20100097604A1 (en) * 2008-10-22 2010-04-22 Texas Instruments Incorporated Encoding Optical Spectra Using A DMD Array

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6249348B1 (en) * 1998-11-23 2001-06-19 Lj Laboratories, L.L.C. Integrated spectrometer assembly and methods
JP2000244933A (ja) * 1999-02-24 2000-09-08 Dainippon Printing Co Ltd 撮像装置
US6996292B1 (en) * 2002-04-18 2006-02-07 Sandia Corporation Staring 2-D hadamard transform spectral imager
WO2004046698A1 (en) * 2002-11-18 2004-06-03 Mitsui Engineering & Shipbuilding Co.,Ltd. Two-dimensional weak radiation detector
JP3950059B2 (ja) * 2003-01-06 2007-07-25 三井造船株式会社 時間分解二次元微弱光検出方法および装置
JP2005249760A (ja) * 2004-03-01 2005-09-15 Atoo Kk 微弱光スペクトルの測定方法及びその装置
US7283231B2 (en) * 2004-07-20 2007-10-16 Duke University Compressive sampling and signal inference
US20060239336A1 (en) * 2005-04-21 2006-10-26 Baraniuk Richard G Method and Apparatus for Compressive Imaging Device
US20080174777A1 (en) * 2006-04-11 2008-07-24 University Of Wyoming Spectrometers using 2-dimensional microelectromechanical digital micromirror devices
US20080219579A1 (en) * 2007-03-05 2008-09-11 Aksyuk Vladimir A Methods and Apparatus for Compressed Imaging Using Modulation in Pupil Plane
US8582098B2 (en) * 2007-10-25 2013-11-12 The Research Foundation Of State University Of New York Single photon spectrometer
CN101509869B (zh) 2009-03-13 2011-06-08 重庆大学 基于可编程微镜阵列的可见-近红外光谱探测方法及光谱仪
WO2011035408A1 (en) * 2009-09-22 2011-03-31 La Corporation De L'ecole Polytechnique De Montreal B.R.C.D.T. Method and system for optical data acquisition and tomography imaging of a turbid medium object
US20110109773A1 (en) * 2009-11-10 2011-05-12 General Electric Company System and method for adaptive nonlinear compressed visual sensing
US8860835B2 (en) * 2010-08-11 2014-10-14 Inview Technology Corporation Decreasing image acquisition time for compressive imaging devices
US8717484B2 (en) * 2010-08-11 2014-05-06 Inview Technology Corporation TIR prism to separate incident light and modulated light in compressive imaging device
CN102353449B (zh) * 2011-06-20 2014-11-12 中国科学院空间科学与应用研究中心 一种极弱光多光谱成像方法及其系统
CN102393248B (zh) * 2011-10-26 2013-09-11 中国科学院空间科学与应用研究中心 一种时间分辨极弱光多光谱成像系统及方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101387548A (zh) * 2007-09-11 2009-03-18 中国科学院西安光学精密机械研究所 单光子计数成像仪
US20100097604A1 (en) * 2008-10-22 2010-04-22 Texas Instruments Incorporated Encoding Optical Spectra Using A DMD Array

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
MACRO F. DUARTE,ET. AL: "Single-Pixel imageing via compressive sampling", 《IEEE SIGNAL PROCESSING MAGAZINE》 *
寇松峰等: "光子计数成像研究", 《应用光学》 *

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9807317B2 (en) 2011-06-20 2017-10-31 Center For Space Science And Applied Research, Chinese Academy Of Sciences Multi-spectral imaging method for ultraweak photon emission and system thereof
WO2012174940A1 (zh) * 2011-06-20 2012-12-27 中国科学院空间科学与应用研究中心 一种极弱光多光谱成像方法及其系统
CN102768069A (zh) * 2012-07-27 2012-11-07 中国科学院空间科学与应用研究中心 一种互补测量的单光子光谱计数成像系统及方法
CN103925999A (zh) * 2014-05-06 2014-07-16 中山大学 一种图像光谱探测方法及系统
CN103925999B (zh) * 2014-05-06 2015-12-30 中山大学 一种图像光谱探测方法及系统
CN104267407A (zh) * 2014-09-12 2015-01-07 清华大学 基于压缩采样的主动成像方法和系统
CN104796674A (zh) * 2015-04-17 2015-07-22 南京理工大学 基于压缩感知的彩色成像装置及方法
CN106840400A (zh) * 2017-01-24 2017-06-13 深圳企管加企业服务有限公司 多光谱成像系统
CN106908144A (zh) * 2017-03-28 2017-06-30 北京振兴计量测试研究所 一种超微弱星光照度测量装置及方法
CN107976408A (zh) * 2017-10-17 2018-05-01 中国科学院遥感与数字地球研究所 一种文物无损检测装置
WO2019178794A1 (zh) * 2018-03-22 2019-09-26 深圳大学 一种荧光寿命的测量方法及装置
CN111315488A (zh) * 2018-08-06 2020-06-19 卡梅尔诊断有限公司 细胞组织分析的方法及装置
CN110487427A (zh) * 2019-07-08 2019-11-22 清远市天之衡传感科技有限公司 基于dmd微镜阵列的单光子偏振态量子成像系统
CN112197863A (zh) * 2020-12-04 2021-01-08 武汉精测电子集团股份有限公司 一种点阵光谱测量装置、面阵色度测量装置及方法
CN113324920A (zh) * 2021-05-27 2021-08-31 西安电子科技大学 基于微纳结构滤光片调制和稀疏矩阵变换的光谱重建方法
CN113324920B (zh) * 2021-05-27 2022-05-17 西安电子科技大学 基于微纳结构滤光片调制和稀疏矩阵变换的光谱重建方法
CN113447976A (zh) * 2021-06-29 2021-09-28 中国科学院高能物理研究所 一种高分辨率慢正电子束形貌的测量方法及装置
CN113447976B (zh) * 2021-06-29 2024-04-02 中国科学院高能物理研究所 一种高分辨率慢正电子束形貌的测量方法及装置

Also Published As

Publication number Publication date
US20140043486A1 (en) 2014-02-13
JP2014520268A (ja) 2014-08-21
CN102353449B (zh) 2014-11-12
EP2728324A1 (en) 2014-05-07
EP2728324A4 (en) 2015-02-18
WO2012174940A1 (zh) 2012-12-27
US9807317B2 (en) 2017-10-31
JP5947377B2 (ja) 2016-07-06

Similar Documents

Publication Publication Date Title
CN102353449A (zh) 一种极弱光多光谱成像方法及其系统
CN102759408B (zh) 一种单光子计数成像系统及其方法
Edgar et al. Principles and prospects for single-pixel imaging
Arce et al. Compressive coded aperture spectral imaging: An introduction
CN104121990B (zh) 基于随机光栅的压缩感知宽波段高光谱成像系统
CN103471718B (zh) 一种基于稀疏孔径压缩计算关联的高光谱成像系统及方法
Bacca et al. Noniterative hyperspectral image reconstruction from compressive fused measurements
WO2021083163A1 (zh) 一种用于火焰拍摄的高速高精度光谱视频系统及方法
Liu et al. Measurement dimensions compressed spectral imaging with a single point detector
CN108156399A (zh) 基于压缩感知理论的单像素相机视频成像系统
CN110044481A (zh) 一种压缩高光谱显微成像的系统及方法
CN110998259A (zh) 编码孔光谱成像装置
CN114022364A (zh) 基于光谱库优化学习的多光谱图像光谱超分方法和系统
Abolbashari et al. High dynamic range compressive imaging: a programmable imaging system
CN103954357A (zh) 压缩光谱成像系统测量矩阵的获取方法
CN108627465A (zh) 一种基于压缩感知高光谱成像的快速无损监测装置
CN102768070B (zh) 一种互补测量的单光子计数成像系统及方法
Leblanc et al. Interferometric lensless imaging: rank-one projections of image frequencies with speckle illuminations
CN115278247A (zh) 一种偏振光谱视频压缩采集系统
Wei et al. Rapid hyperspectral imaging system via sub-sampling coding
Gehm et al. Adaptive spectroscopy: towards adaptive spectral imaging
Saragadam et al. Wavelet tree parsing with freeform lensing
Sun Compressive Sensing and Imaging Applications
Rueda-Chacon Higher order discretization model for coded aperture spectral imaging systems
Leblanc et al. Interferometric Lensless Imaging

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP01 Change in the name or title of a patent holder

Address after: 100190 No. two south of Zhongguancun, Haidian District, Beijing 1

Patentee after: NATIONAL SPACE SCIENCE CENTER, CAS

Address before: 100190 No. two south of Zhongguancun, Haidian District, Beijing 1

Patentee before: Space Science & Applied Research Centre, Chinese Academy of Sciences

CP01 Change in the name or title of a patent holder