WO2016011675A1 - 基于随机光栅的压缩感知宽波段高光谱成像系统 - Google Patents

基于随机光栅的压缩感知宽波段高光谱成像系统 Download PDF

Info

Publication number
WO2016011675A1
WO2016011675A1 PCT/CN2014/083690 CN2014083690W WO2016011675A1 WO 2016011675 A1 WO2016011675 A1 WO 2016011675A1 CN 2014083690 W CN2014083690 W CN 2014083690W WO 2016011675 A1 WO2016011675 A1 WO 2016011675A1
Authority
WO
WIPO (PCT)
Prior art keywords
random
branch
imaging system
imaging
spectral
Prior art date
Application number
PCT/CN2014/083690
Other languages
English (en)
French (fr)
Inventor
韩申生
刘震涛
吴建荣
李恩荣
谭诗语
陈喆
Original Assignee
中国科学院上海光学精密机械研究所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 中国科学院上海光学精密机械研究所 filed Critical 中国科学院上海光学精密机械研究所
Priority to JP2017502977A priority Critical patent/JP6415685B2/ja
Priority to EP14898333.1A priority patent/EP3182080B1/en
Priority to RU2017104839A priority patent/RU2653772C1/ru
Publication of WO2016011675A1 publication Critical patent/WO2016011675A1/zh
Priority to US15/408,111 priority patent/US10136078B2/en
Priority to IL250342A priority patent/IL250342B/en

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/02Details
    • G01J3/0205Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/02Details
    • G01J3/0205Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows
    • G01J3/0229Optical elements not provided otherwise, e.g. optical manifolds, diffusers, windows using masks, aperture plates, spatial light modulators or spatial filters, e.g. reflective filters
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/02Details
    • G01J3/0294Multi-channel spectroscopy
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/12Generating the spectrum; Monochromators
    • G01J3/18Generating the spectrum; Monochromators using diffraction elements, e.g. grating
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J3/2803Investigating the spectrum using photoelectric array detector
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J3/2823Imaging spectrometer
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/10Beam splitting or combining systems
    • G02B27/1066Beam splitting or combining systems for enhancing image performance, like resolution, pixel numbers, dual magnifications or dynamic range, by tiling, slicing or overlapping fields of view
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/71Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J3/2803Investigating the spectrum using photoelectric array detector
    • G01J2003/28132D-array
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/28Investigating the spectrum
    • G01J3/2823Imaging spectrometer
    • G01J2003/2826Multispectral imaging, e.g. filter imaging

Definitions

  • the Brady team at Duke University in the United States combines perceptual sensing with spectral imaging to achieve quasi-single-shot compression-spectrum imaging based on an amplitude mask. It first images the object on the first imaging surface, and places a binary amplitude mask on the imaging surface to amplitude modulate the image of the object. The modulated image is imaged on the second imaging surface through a beam splitting prism, and the second imaging surface is detected by the area array detector.
  • this imaging spectrometer global projection measurements are performed only in the spectral dimension and compression acquisition is achieved. Global projection measurements are not used in spatial dimensions, so compression acquisition is not implemented in spatial dimensions.
  • the system achieves a higher spatial resolution by moving the amplitude mask, and also based on amplitude modulation, the light energy utilization is low.
  • each branch a ⁇ conversion system, a random grating and a photoelectric detection system are arranged in turn, and all the photoelectric detection systems and meters
  • the computer is connected, and the exit and exit conversion system of each branch is located on the imaging surface of the branch through the front imaging system, and the random grating of each branch is located at the exit of the front imaging system.
  • the photodetection system of each of the branches is located behind the random grating of the branch through the imaging plane behind the exit and exit conversion system of the branch.
  • the system realizes the further compression acquisition of the image data of the spectral dimension by utilizing the correlation between adjacent spectra, and further reduces the data collection amount, thereby further Reduces the number of detector pixels and measurement time requirements. Moreover, the dispersion effect of the random grating on the light field further improves the spectral resolution of the system.
  • the exit and exit conversion system adopted by the system greatly increases the imaging range of the system.
  • the exit and exit conversion system of each branch images the exit pupil of the front imaging system onto the random grating of the branch, so that the light fields incident in all directions pass through the center of the random grating without increasing the number of detected pixels. Increased imaging range of the system.
  • the exit conversion system 3 The object 1 is located on the imaging surface 3 of the branch through the pre-imaging system 1 , and the random grating 4 is located on the imaging surface of the exit pupil 2 of the pre-imaging system through the exit/exit conversion system 3 of the branch, the photodetector 5 Located at a distance from the random grating 4 of the branch.
  • the exit pupil conversion system 7 is located on the imaging surface 5 of the branch through the pre-imaging system 1 of the object 1 and the random grating 8 is located at the exit pupil 2 of the pre-imaging system through the exit and exit system of the branch
  • the photodetector 9 is located a distance behind the random grating 8 of the branch.

Landscapes

  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Optics & Photonics (AREA)
  • Spectrometry And Color Measurement (AREA)
  • Investigating Or Analysing Materials By Optical Means (AREA)
  • Lenses (AREA)

Abstract

一种基于随机光栅的压缩感知宽波段高光谱成像系统,该系统包括前置成像部分、分光部分及两个以上的支路和计算机,各支路由相应的出瞳转换部分及压缩光谱成像部分。该系统基于压缩感知理论,利用谱之间的关联性,提高光谱维的压缩率,实现对宽波段光谱图像数据进行三维压缩采集,大大降低了数据采集量。该成像系统可以单次曝光测量宽波段上的光谱图像信息,且可以通过设计各分光路上的随机光栅获得高空间分辨率和高光谱分辨率。

Description

基于随机光栅的压缩感知宽波段髙光谱成像系统
技术领域
本发明涉及压缩感知宽波段高光谱成像系统, 特别是一种基于随机 光栅的压缩感知宽波段高光谱成像系统。 背景技术
宽波段高光谱成像是同时获取物体的两维空间图像信息和一维 光谱信息的过程,是采集三维图像数据的过程,其数据形式如图 1所示。 由于现有探测器是两维的, 所以在传统宽波段高光谱成像系统中, 都需 要时间扫描来获得三维光谱图像数据。 由于宽波段高光谱成像包括对从 紫外光到中远红外光波段进行光谱成像, 波段数多, 数据量大, 在获得 高空间分辨率及高光谱分辨率的基础上, 如何降低探测单元数目以及降 低扫描时间是光谱成像技术领域亟需解决的问题。
压缩感知理论是一种全新的信号采集、 编解码理论。 它在信号采集 阶段对数据进行压缩, 降低了数据采集量, 为宽波段高光谱成像技术中 要求降低探测数据量的问题提供了一个良好的解决途径。 其基本原理如 下: 假设待测信号 X的长度为 N, 存在某组正交基 ^^ ... Ψν], 使得 X在该组正交基下展开, 即 χ =ψχ', 满足 χ'只含有少数几个非零元素, 或者 X'中大部分元素值相对于其他元素值很小。 也就是说, 信号 X在此 正交基 Ψ下是稀疏或可压缩的。 在此条件下, 采用与 Ψ不相关的测量矩 阵 Φ对 X进行投影测量, 得到长度为 Μ的矢量 Υ, 即γ = ΦΨx'。 通过求 解非线性优化问题:
min I - l l|x'l (1) 可以在 Μ«Ν的条件下, 以很大概率重构出 X。其中 Μ是所需采集 的数据点数, N是恢复出的数据点数。 可以看出, 采用该理论可以大大 降低数据采集量。 与传统信号采集过程不同, 基于该理论的信号采集过 程包括两个歩骤。第一个歩骤是用与信号的稀疏表达基不相关的测量基, 对信号作投影测量; 第二个歩骤是通过非线性优化算法, 重构信号。 根 据压缩感知理论, 可以对信号进行压缩采集的条件是信号 X在某一表达 基 Ψ下是稀疏的, 且测量矩阵 Φ与表达矩阵 Ψ是不相关的。 自然界中大 部分物体的图像信息在某一正交基(比如小波变换基)下展开是稀疏的, 且邻近谱段之间的图像信息冗余较高, 因此可以实现三维光谱图像信息 的压缩。 此外, 高斯随机测量矩阵与任意正交基都不相关, 是一个良好 的测量矩阵。 这为压缩感知理论在宽波段高光谱成像中的应用奠定了理 论基础。
基于压缩感知理论,美国 Rice大学的 Baraniuk小组实现了 "压缩感 知单像素相机"成像。 该相机只用一个单像素探测器进行多次测量, 即 可对物体进行二维成像。 它通过利用 DMD (digital micro device) , 使一 部分空间位置处的光透过, 其他位置处的光损失掉, 对待测物体的空间 图像进行空间随机振幅调制, 来实现将包含物体的二维空间图像信息的 数据在互不相关的随机测量基下进行投影测量, 用单像素探测器记录该 投影测量结果, 再通过非线性优化算法重构出图像。 把该单像素相机结 合传统的光谱分光系统, 比如由光栅或棱镜及线阵探测器构成的分光系 统, 就可实现光谱成像。 受到 DMD窗口材料透射谱段及尺寸的限制, 该压缩成像方案在中、 远红外成像领域存在困难。 此外, 该成像系统基 于振幅调制, 其中约一半光能量损失掉, 光能利用率低。
美国 Duke大学的 Brady小组将压缩感知与光谱成像结合, 实现了 基于幅度掩膜板的准单次曝光压缩光谱成像。 它先将物体成像于第一成 像面上, 在该成像面上放置二元振幅掩模板对物体的像进行振幅调制, 将调制后的像通过一个分光棱镜后成像于第二成像面上, 通过面阵探测 器对第二成像面进行探测。 在该成像光谱仪中, 只在光谱维进行全局投 影测量, 并实现压缩采集。 在空间维并没有使用全局投影测量, 因此在 空间维并没有实现压缩采集。 另外, 该系统要通过移动振幅掩模来实现 较高的空间分辨率, 并且同样基于振幅调制, 光能利用率低。
中科院上海光机所的韩生申研究组提出了基于随机波前相位调制器 的压缩光谱成像系统。 该系统采用随机波前相位调制器对光场进行随机 波前相位调制, 它对包含物体二维空间图像信息和一维光谱信息的数据 全体在互不相关的随机测量基下进行投影测量, 实现压缩采集三维空间 图像数据。然而, 由于随机波前相位调制器在不同谱段的调制效果不同, 且光电探测器的响应光谱范围及动态范围有限, 该系统无法实现高空间 分辨率及高光谱分辨率的宽波段高光谱成像。 而且, 该系统没有利用二 维空间图像信息在光谱维上的关联性,因此没有实现光谱维的数据压缩。 发明内容
本发明的目的在于提出一种基于随机光栅的压缩感知宽波段高光谱 成像系统, 以实现单次曝光获得高空间分辨率和高光谱分辨率的从紫外 光到中远红外光的宽波段光谱图像信息, 提高探测速度和灵敏度, 同时 减少探测单元数。
本发明的技术解决方案如下:
一种基于随机光栅的压缩感知宽波段高光谱成像系统, 其特点在于 该系统的构成包括前置成像系统、分光系统、两个以上的支路和计算机, 所述的支路由出瞳转换系统、 随机光栅和光电探测系统构成, 沿入射光 束依次是所述的前置成像系统和分光系统, 所述的分光系统将宽波段光 束分为 2个以上的光谱段连续的分光谱段光束支路, 在每一支路依次设 置出瞳转换系统、 随机光栅和光电探测系统, 所有的光电探测系统与计 算机相连, 所述的每一支路的出瞳转换系统位于物体通过前置成像系统 在该支路的成像面上, 所述的每一支路的随机光栅位于前置成像系统的 出瞳经过该支路的出瞳转换系统后的成像面上, 所述的每一支路的光电 探测系统位于该支路的随机光栅后。
所述的前置成像系统是望远系统、 照相系统或显微系统。
所述的分光系统是二向色滤波片或带通滤波片。
所述的各支路的出瞳转换系统是成像透镜组。
所述的各支路的光电探测系统由放大成像系统和光电探测器构成, 所述的各支路的光电探测器置于所述的该支路的放大成像系统的成像面 上。
所述的光电探测器是各探测单元随意分布的 CCD阵列。
在不同谱段支路上, 选择不同参数的随机光栅元件及相应的光电探 测器。
二向色滤波片或带通滤波片将从紫外光到中远红外光的宽波段光场 在光谱维上分为多个光谱段连续的分光光束。 随机光栅实现对光场的随 机波前相位调制, 一方面在探测面生成随机光强分布, 另一方面实现在 光谱维的色散。该系统的测量矩阵的某一列对应的是物面上某个位置上、 某个中心波长的窄带点源形成的一个散斑场。由于随机光栅的随机分布, 该测量矩阵也是一个随机矩阵。 物面上不同位置或不同中心波长的窄带 点源形成的散斑场是不相关的, 相应地, 测量矩阵的不同列也是不相关 的。 因此, 该系统的测量系统满足压缩感知的条件。 从数据获取角度来 看, 该系统分两歩来完成数据获取。
第一歩为系统标定: 把包含待测物体的二维空间图像信息和一维光 谱信息的数据全体在互不相关的随机测量基下作投影测量, 用光电探测 器记录各投影测量结果, 从而获得系统的标定矩阵。 第二歩为数据重构: 利用邻近光谱之间关联性, 通过线性或非线性 优化算法, 从测量信号中重构出待测物体的三维光谱图像信息。
本发明的一种典型系统构成包括: 前置成像系统、 1 个以上二向色 滤波片、 各支路的出瞳转换系统、 各支路的随机光栅、 各支路的成像放 大系统、 各支路的光电探测器、 计算机。
所述前置成像系统, 用于将物体成像于各支路的第一成像面上。 所述 1个以上二向色滤波片, 用于将宽波段光谱分为多个光谱段连 续的分光光束。 各支路采用相应合适的随机光栅和光电探测器以提高成 像系统的空间分辨率、 光谱分辨率及探测灵敏度。 而且, 分光系统使得 能够在各个谱段获得更高的系统信噪比, 进一歩提高光谱成像质量。
所述各支路的出瞳转换系统, 用于将前置成像系统的出瞳成像到该 支路的随机光栅上, 使得各个方向入射的光场都能够通过该支路的随机 光栅中心, 实现扩大成像范围的目的。
所述各支路的随机光栅, 对从物面发出的该支路传播谱段的光场进 行随机波前相位调制及色散。 使得从物面上某一点发出的该支路传播谱 段的光场, 在该随机光栅后方的一段空间区域内形成较高对比度的散斑 场。 由于物面上的光场在空间上是非相干的, 整个探测面上的光强分布 是物面上不同点发出的光形成的散斑场的强度叠加。 根据所分的谱段的 不同, 选择不同参数的随机光栅器件。 例如, 在可见及近红外波段, 可 选取起伏较小、 颗粒较大的毛玻璃作为随机光栅器件。 在中、 远红外波 段, 可选取起伏较大、 颗粒较小的毛玻璃作为随机光栅器件。 同时, 不 同波段选取具有高透射率的相应材质制作随机光栅器件。
所述各支路的放大成像系统将经过该支路的随机光栅后某一距离处 的散斑场成像到该支路的光电探测器上, 对成像后的散斑场进行采样测 本发明的技术效果:
1、本发明提出了一种基于随机光栅的压缩感知宽波段高光谱成像系 统。该系统基于随机光栅进行相位调制,对物体的三维光谱图像数据(二 维空间图像信息及一维光谱信息) 在互不相关的随机测量基下进行投影 测量, 实现对三维光谱图像数据的压缩采集。 该系统在调制阶段不损失 光能, 与基于幅度调制的压缩成像系统相比, 具有更高的能量利用率。 与基于随机空间相位调制的压缩成像系统相比, 该系统通过利用邻近光 谱之间的关联性, 实现了对光谱维的图像数据的进一歩压缩采集, 进一 歩减少了数据采集量, 从而进一歩降低了对探测器像元数目和测量时间 的要求。 而且, 随机光栅对光场的色散效应, 进一歩提高了系统的光谱 分辨率。
2、该系统采用的出瞳转换系统, 大大增加了系统的成像范围。各支 路的出瞳转换系统将前置成像系统的出瞳成像到该支路的随机光栅上, 使得各个方向入射的光场都通过随机光栅中心, 在不增加探测像元数目 的基础上, 增大了系统的成像范围。
3、该系统可以单次测量获得宽波段的光谱图像信息,探测时间大大 缩短, 而且空间分辨率及光谱分辨率大大提高。 分光系统使得随机光栅 及光电探测器能够对各分路光谱成像进行优化设计, 进一歩提高了系统 的探测灵敏度、空间分辨率及光谱分辨率,从而实现宽波段高光谱成像。 附图说明
图 1为光谱成像所获取的数据形式。
图中每个立方代表一个数据点。 (x,y) 代表空间位置, 代表波长 图 2为本发明基于随机光栅的压缩感知宽波段高光谱成像系统实施 例 1的结构框图。
图中: 1-前置成像系统 2-二向色滤波片 3-出瞳转换系统 4-随机光 栅 5-光电探测器 6-计算机 7-出瞳转换系统 8-随机光栅 9-光电探测器
① -物面 ② -前置成像系统出瞳 ③ -第一成像面 ④ -原始探测面 ⑤- 第一成像面 ⑥ -原始探测面
图 3为本发明基于随机光栅的压缩感知宽波段高光谱成像系统实施 例 2的结构框图。
图中: 1-前置成像系统 2-二向色滤波片 3-出瞳转换系统 4-随机光 栅 5-光电探测器 6-计算机 7-出瞳转换系统 8-随机光栅 9-光电探测器 10-放大成像系统 11-放大成像系统 12-二向色滤波片 13-出瞳转换系统
14-随机光栅 15-放大成像系统 16-光电探测器
① -物面 ② -前置成像系统出瞳 ③ -第一成像面 ④ -原始探测面 ⑤- 第一成像面 ⑥ -原始探测面 ⑦ -第一成像面 ⑧ -原始探测面
具体实鮮式
下面结合图 2来说明本基于随机光栅的压缩感知宽波段高光谱成像 系统是如何得到物体的高光谱图像信息的。 图 2为本发明基于随机光栅 的压缩感知宽波段高光谱成像系统实施例 1的结构框图。 该系统的构成 包括前置成像系统 1、二向色滤波片 2, 以及 a和 b两支路上的出瞳转换 系统 3、 7、 随机光栅 4、 8和光电探测器 5、 9。 沿入射光束依次是前置 成像系统 1和二向色滤波片 2,二向色滤波片 2将入射宽波段光束分为 a 和 b两个的光谱段连续的分光谱段光束支路, 在 a和 b两支路依次设置 出瞳转换系统 3、 7、 随机光栅 4、 8和光电探测器 5、 9, a和 b两支路 的光电探测器 5、 9均与计算机 6相连。 对于 a支路, 出瞳转换系统 3 位于物体①通过前置成像系统 1在该支路的成像面③上, 随机光栅 4位 于前置成像系统的出瞳②通过该支路的出瞳转换系统 3的成像面上, 光 电探测器 5位于该支路的随机光栅 4后一段距离。 对于 b支路, 出瞳转 换系统 7位于物体①通过前置成像系统 1在该支路的成像面⑤上, 随机 光栅 8位于前置成像系统的出瞳②通过该支路的出瞳转换系统 7的成像 面上, 光电探测器 9位于该支路的随机光栅 8后一段距离。
根据光场的衍射效应, 支路 a的随机光栅 4和支路 b的随机光栅 8 把物面①上不同位置、 不同中心波长的各个窄带点光源分别映射成原始 探测面④、 ⑥上的一个较高对比度的散斑场。 不同空间位置或不同中心 波长的点源, 所对应的散斑场不同, 且散斑场的关联性随着点源的空间 间隔或中心波长间隔增大而降低。 通过相关运算或非线性优化算法可以 把不同的散斑场区分开。 物面①上的光谱图像可以看作不同空间位置、 不同中心波长的点源的叠加。 由于物面①的光场是非相干光, 原始探测 面④、 ⑥上的光强分布是这些不同点源对应的散斑场的强度叠加。 假定 宽波段的光谱谱段数为 L, 单个波长上物体空间图像像素大小为 N, 探 测点数 M, 整个光谱成像过程可以用数学语言描述如下:
Figure imgf000010_0001
它表示 ί本在第 i个谱段上的图像信息。
U
= (AJ1 AJ2 … ),1 , ; 1" 。 (4 ) A矩阵是一个 M行、 LXN列的矩阵, 它的某一列代表物面①上某一 位置、 某一中心波长处的窄带光在探测面上所形成散斑场的光强分布。 在进行宽波段高光谱成像前,该系统要先通过标定测量获得 A矩阵。 首先在物面①上的不同位置 (x,y) 处, 分别放置不同中心波长 的窄带 点光源, 用固定于各支路的探测面上的多个探测单元记录下对应的光强 值。 对这些光强值归一化, 作为测量矩阵的某一列。 不同 (x,y, )对应的 散斑光强分布构成测量矩阵的不同列, 从而获得标定测量矩阵 A。 在进 行成像测量时, 只通过一次曝光记录下各支路探测单元所探测到的光强 值, 作为矢量^ 这样就通过测量得到了矩阵 A和¥。 再利用光场的谱 间关联性, 通过线性或非线性优化算法, 就可以恢复出物体的光谱图像
I Ft自、。
图 3为本发明基于随机光栅的压缩感知宽波段高光谱成像系统实施 例 2的结构框图。 图 3对应的标定、 成像过程与图 2类似。 差别在于, 在图 3中, 宽波段光场在光谱维上分为 3个光谱段连续的分光光束, 且 光电探测器 5记录的是 a支路上原始探测面④经过放大成像系统 10后所 成的像, 光电探测器 9记录的是 b支路上原始探测面⑥经过放大成像系 统 11后所成的像, 光电探测器 16记录的是 c支路上原始探测面⑧经过 放大成像系统 15后所成的像。

Claims

权 利 要 求 书
1、一种基于随机光栅的压缩感知宽波段高光谱成像系统,其特征在 于该系统的构成包括前置成像系统、 分光系统、 两个以上的支路和计算 机, 各支路由出瞳转换系统、 随机光栅和光电探测系统构成, 沿入射光 束依次是所述的前置成像系统和分光系统, 所述的分光系统将宽波段光 束分为 2个以上的光谱段连续的分光谱段光束支路, 在每一支路依次设 置出瞳转换系统、 随机光栅和光电探测系统, 所有的光电探测系统与计 算机相连, 所述的每一支路的出瞳转换系统位于物体通过前置成像系统 在该支路的成像面上, 所述的每一支路的随机光栅位于前置成像系统的 出瞳经过该支路的出瞳转换系统后的成像面上, 所述的每一支路的光电 探测系统位于该支路的随机光栅后。
2、根据权利要求 1所述的基于随机光栅的压缩感知宽波段高光谱成 像系统, 其特征在于: 所述的前置成像系统是望远系统、 照相系统或显 微系统。
3、根据权利要求 1所述的基于随机光栅的压缩感知宽波段高光谱成 像系统, 其特征在于: 所述的分光系统是二向色滤波片或带通滤波片。
4、根据权利要求 1所述的基于随机光栅的压缩感知宽波段高光谱成 像系统, 其特征在于: 所述的各支路的出瞳转换系统是成像透镜组。
5、根据权利要求 1所述的基于随机光栅的压缩感知宽波段高光谱成 像系统, 其特征在于: 在所述的各支路的光电探测系统由放大成像系统 和光电探测器构成, 所述的各支路的光电探测器置于所述的该支路的放 大成像系统的成像面上。
6、根据权利要求 1所述的压缩感知宽波段高光谱成像系统,其特征 在于: 所述的光电探测器是各探测单元随意分布的 CCD阵列。
7、根据权利要求 1至 6任一项所述的压缩感知宽波段高光谱成像系 统, 其特征在于: 在不同谱段支路上, 选择不同参数的随机光栅元件及 相应的光电探测器。
PCT/CN2014/083690 2014-07-22 2014-08-05 基于随机光栅的压缩感知宽波段高光谱成像系统 WO2016011675A1 (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
JP2017502977A JP6415685B2 (ja) 2014-07-22 2014-08-05 ランダム格子に基づいた圧縮センシング広帯域ハイパースペクトルイメージングシステム
EP14898333.1A EP3182080B1 (en) 2014-07-22 2014-08-05 Compressed sensing broadband hyperspectral imaging system based on random grating
RU2017104839A RU2653772C1 (ru) 2014-07-22 2014-08-05 Система формирования широкополосного гиперспектрального изображения на основе сжатого зондирования с нерегулярной дифракционной решеткой
US15/408,111 US10136078B2 (en) 2014-07-22 2017-01-17 Random grating based compressive sensing wideband hyperspectral imaging system
IL250342A IL250342B (en) 2014-07-22 2017-01-29 A broadband hyperspectral compressed sensing imaging system based on a random lattice

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201410348475.XA CN104121990B (zh) 2014-07-22 2014-07-22 基于随机光栅的压缩感知宽波段高光谱成像系统
CN201410348475.X 2014-07-22

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/408,111 Continuation-In-Part US10136078B2 (en) 2014-07-22 2017-01-17 Random grating based compressive sensing wideband hyperspectral imaging system

Publications (1)

Publication Number Publication Date
WO2016011675A1 true WO2016011675A1 (zh) 2016-01-28

Family

ID=51767497

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2014/083690 WO2016011675A1 (zh) 2014-07-22 2014-08-05 基于随机光栅的压缩感知宽波段高光谱成像系统

Country Status (7)

Country Link
US (1) US10136078B2 (zh)
EP (1) EP3182080B1 (zh)
JP (1) JP6415685B2 (zh)
CN (1) CN104121990B (zh)
IL (1) IL250342B (zh)
RU (1) RU2653772C1 (zh)
WO (1) WO2016011675A1 (zh)

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105791640B (zh) * 2015-01-08 2020-07-10 松下知识产权经营株式会社 摄像装置
EP3323506A4 (en) 2015-07-15 2019-05-08 Furukawa Electric Co. Ltd. CATALYST OF A NANOCRYSTAL COMPOUNT FOR HYDROGEN STORAGE / SUPPLY, CATALYST MIXTURE OF A NANOCRYSTAL COMPLEX FOR HYDROGEN STORAGE / SUPPLY AND METHOD OF SUPPLEMENTING HYDROGEN
EP3144890A1 (en) 2015-09-17 2017-03-22 Thomson Licensing An apparatus and a method for calibrating an optical acquisition system
CN105897344B (zh) * 2016-04-22 2018-01-26 浙江大学 一种采用光频域随机混频的单像素二维成像系统及方法
CN106595859B (zh) * 2016-11-01 2019-10-29 清华大学 鬼成像方法和应用其的鬼成像装置
CN107205103B (zh) * 2017-04-14 2020-02-14 华东师范大学 基于压缩感知和条纹相机原理的超高速压缩摄影装置
CN109211790B (zh) * 2017-07-03 2023-12-08 南开大学 一种基于傅里叶功率谱探测的单像素相位成像方法
WO2019180571A1 (en) * 2018-03-18 2019-09-26 Unispectral Ltd. Generating narrow-band spectral images from broad-band spectral images
CN108827471B (zh) * 2018-04-24 2023-07-07 苏州大学 一种衍射元件、高分辨率光谱仪及光谱检测方法
EP3857284B1 (en) * 2018-09-27 2023-12-27 Max-Planck-Gesellschaft zur Förderung der Wissenschaften e.V. Method of and apparatus for forming and shifting a light intensity distribution in a focal area of an objective lens
CN109520619B (zh) * 2018-11-26 2021-03-02 中国科学院上海光学精密机械研究所 基于非瑞利散斑场的关联成像光谱相机及其成像方法
CN113037989B (zh) * 2019-12-09 2022-11-18 华为技术有限公司 一种图像传感器、相机模组及控制方法
CN111579521B (zh) * 2020-05-06 2021-10-15 中国科学院沈阳自动化研究所 一种基于数据选择的太赫兹压缩成像优化方法及系统
CN112611455B (zh) * 2020-12-07 2022-01-21 上海交通大学 一种多角度、多光谱频率编码成像方法及其装置
KR20220100365A (ko) * 2021-01-08 2022-07-15 한국전자통신연구원 신경망을 이용한 초분광 이미징 시스템
JPWO2022176621A1 (zh) * 2021-02-19 2022-08-25
CN114719978A (zh) * 2021-05-17 2022-07-08 中国科学院上海光学精密机械研究所 基于色散补偿的宽波段超瑞利散斑关联成像光谱相机及其成像方法
CN113702357B (zh) * 2021-09-24 2024-04-12 中国科学院上海光学精密机械研究所 基于随机光栅压缩感知的激光诱导击穿光谱装置及测量方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007121417A2 (en) * 2006-04-17 2007-10-25 Duke University Spatially-registered wavelength coding
CN101893552A (zh) * 2010-07-06 2010-11-24 西安电子科技大学 基于压缩感知的高光谱成像仪及成像方法
CN102706450A (zh) * 2012-06-13 2012-10-03 西安电子科技大学 基于压缩感知的双通道多光谱视频成像仪及成像方法
CN102818631A (zh) * 2012-07-30 2012-12-12 中国科学院上海光学精密机械研究所 基于随机波前相位调制的压缩光谱成像系统
CN102914367A (zh) * 2012-10-25 2013-02-06 浙江大学 基于压缩感知的多光谱成像装置和方法
US20130128042A1 (en) * 2011-06-28 2013-05-23 InView Techonogogy Corporation High-speed event detection using a compressive-sensing hyperspectral-imaging architecture
CN103453993A (zh) * 2013-09-13 2013-12-18 中国科学院空间科学与应用研究中心 基于稀疏孔径压缩计算关联的主动高光谱成像系统及方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE2156617C3 (de) * 1971-11-15 1980-08-21 Ernst Leitz Wetzlar Gmbh, 6330 Wetzlar Einrichtung zur Bestimmung der Lage der Ebene maximaler Amplitude einer Ortsfrequenz, beispielsweise bei einem Entfernungsmesser
DE2356757C2 (de) * 1973-11-14 1982-04-08 Ernst Leitz Wetzlar Gmbh, 6330 Wetzlar Einrichtung zur Bestimmung der relativen Lage der Ebene maximaler Amplitude einer Ortsfrequenz
DE2731192C2 (de) * 1977-07-09 1985-05-15 Ernst Leitz Wetzlar Gmbh, 6330 Wetzlar Spiegelreflexkamera mit Pentaprisma und elektronischem Entfernungsmesser
DE3047184A1 (de) * 1980-12-15 1982-07-22 Ernst Leitz Wetzlar Gmbh, 6330 Wetzlar Spiegelreflexkamera mit elektronischem entfernungsmesser
US6259561B1 (en) * 1999-03-26 2001-07-10 The University Of Rochester Optical system for diffusing light
US6734966B2 (en) * 2002-04-02 2004-05-11 Northrop Grumman Corporation Space borne high resolution hyperspectral imaging instrument optimized for the study of atmospheric constituents
FI114946B (fi) * 2002-12-16 2005-01-31 Nokia Corp Diffraktiivinen hilaelementti diffraktiohyötysuhteen tasapainottamiseksi
JP2011053150A (ja) * 2009-09-03 2011-03-17 Nikon Corp 波面測定方法及び波面測定装置
EP2359745A1 (en) * 2010-02-12 2011-08-24 Helmholtz Zentrum München Deutsches Forschungszentrum für Gesundheit und Umwelt (GmbH) Method and device for multi-spectral photonic imaging
JP2012122852A (ja) * 2010-12-08 2012-06-28 Olympus Corp 画像処理装置、画像処理方法および画像処理プログラム
JP2012138652A (ja) * 2010-12-24 2012-07-19 Hamamatsu Metrix Kk チューナブルフィルタカメラ及びスキャン装置
TWI441271B (zh) * 2011-01-31 2014-06-11 Ind Tech Res Inst 量測矽通孔結構之系統、方法與電腦可讀取記錄媒體
CN103608654A (zh) * 2011-06-21 2014-02-26 奥林巴斯株式会社 分光图像拍摄装置
US8717551B2 (en) * 2011-09-30 2014-05-06 Inview Technology Corporation Adaptive search for atypical regions in incident light field and spectral classification of light in the atypical regions
WO2013066896A1 (en) * 2011-10-31 2013-05-10 Inview Technology Corporation High-speed event detection using a compressive sensing hyperspectral imaging architecture
JP2013108788A (ja) * 2011-11-18 2013-06-06 Tokyo Institute Of Technology マルチスペクトル画像情報取得装置及びマルチスペクトル画像情報取得方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007121417A2 (en) * 2006-04-17 2007-10-25 Duke University Spatially-registered wavelength coding
CN101893552A (zh) * 2010-07-06 2010-11-24 西安电子科技大学 基于压缩感知的高光谱成像仪及成像方法
US20130128042A1 (en) * 2011-06-28 2013-05-23 InView Techonogogy Corporation High-speed event detection using a compressive-sensing hyperspectral-imaging architecture
CN102706450A (zh) * 2012-06-13 2012-10-03 西安电子科技大学 基于压缩感知的双通道多光谱视频成像仪及成像方法
CN102818631A (zh) * 2012-07-30 2012-12-12 中国科学院上海光学精密机械研究所 基于随机波前相位调制的压缩光谱成像系统
CN102914367A (zh) * 2012-10-25 2013-02-06 浙江大学 基于压缩感知的多光谱成像装置和方法
CN103453993A (zh) * 2013-09-13 2013-12-18 中国科学院空间科学与应用研究中心 基于稀疏孔径压缩计算关联的主动高光谱成像系统及方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
GONG, WENLIN ET AL.: "Experimental Investigation of the Quality of Lensless Super-resolution Ghost Imaging via Sparsity Constraints", PHYSICS LETTERS A, vol. 376, 14 March 2012 (2012-03-14), pages 1519 - 1522, XP055356399 *
See also references of EP3182080A4 *

Also Published As

Publication number Publication date
US20170126990A1 (en) 2017-05-04
EP3182080A1 (en) 2017-06-21
US10136078B2 (en) 2018-11-20
CN104121990A (zh) 2014-10-29
CN104121990B (zh) 2016-05-11
JP6415685B2 (ja) 2018-10-31
IL250342A0 (en) 2017-03-30
JP2017528695A (ja) 2017-09-28
EP3182080A4 (en) 2017-12-27
EP3182080B1 (en) 2019-04-24
RU2653772C1 (ru) 2018-05-14
IL250342B (en) 2020-08-31

Similar Documents

Publication Publication Date Title
WO2016011675A1 (zh) 基于随机光栅的压缩感知宽波段高光谱成像系统
JP7245835B2 (ja) 奥行取得のためのライトフィールド画像処理方法
US8351031B2 (en) Single-shot spectral imager
Cao et al. A prism-mask system for multispectral video acquisition
US9961285B2 (en) Optical imaging method using single pixel detector
CN103471718B (zh) 一种基于稀疏孔径压缩计算关联的高光谱成像系统及方法
US7336353B2 (en) Coding and modulation for hyperspectral imaging
JP2013535931A (ja) 圧縮撮像装置の画像取得時間の減少
CN103743482B (zh) 一种光谱成像装置及光谱成像反演方法
CN103453993B (zh) 基于稀疏孔径压缩计算关联的主动高光谱成像系统及方法
US20150029503A1 (en) Simplified Compressive Sensing Spectral Imager
CN103323396A (zh) 一种基于符合测量的二维压缩鬼成像系统及方法
JP6836321B2 (ja) 移動物体からのスペクトル情報の取得
JP2016008956A (ja) 撮像装置および方法
US20150116705A1 (en) Spectral imager
CN113518904B (zh) 用于使用静态几何偏振操纵的偏振测定的方法和系统
Badham et al. Photonic integrated circuit-based imaging system for SPIDER
CN103954357B (zh) 压缩光谱成像系统测量矩阵的获取方法
Liu et al. Measurement dimensions compressed spectral imaging with a single point detector
US20170171476A1 (en) System and method for spectral imaging
JP6984736B2 (ja) 撮像装置及び撮像方法
JP2022546720A (ja) 光学装置および方法
US7391519B1 (en) Generation of spatially distributed spectral data using a multi-aperture system
Liu et al. The study of spectral camera based on ghost imaging via sparsity constraints with sunlight illumination
CN116648605A (zh) 高光谱成像设备和方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14898333

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017502977

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 250342

Country of ref document: IL

ENP Entry into the national phase

Ref document number: 2017104839

Country of ref document: RU

Kind code of ref document: A

REEP Request for entry into the european phase

Ref document number: 2014898333

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2014898333

Country of ref document: EP