CN104123740A - 一种基于压缩感知的图像重构方法 - Google Patents

一种基于压缩感知的图像重构方法 Download PDF

Info

Publication number
CN104123740A
CN104123740A CN201410323782.2A CN201410323782A CN104123740A CN 104123740 A CN104123740 A CN 104123740A CN 201410323782 A CN201410323782 A CN 201410323782A CN 104123740 A CN104123740 A CN 104123740A
Authority
CN
China
Prior art keywords
observation
image
matrix
method based
compressed sensing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410323782.2A
Other languages
English (en)
Inventor
张根源
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang University of Media and Communications
Original Assignee
Zhejiang University of Media and Communications
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang University of Media and Communications filed Critical Zhejiang University of Media and Communications
Priority to CN201410323782.2A priority Critical patent/CN104123740A/zh
Publication of CN104123740A publication Critical patent/CN104123740A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

本发明公开了一种基于压缩感知的图像重构方法,该方法首先从待重构图像的原始场景中选取若干像素点作为观测点,同一时刻采集所有观测点的观测值作为观测值矩阵,然后基于压缩感知贪婪算法计算观测值矩阵的压缩观测值矩阵,根据压缩观测值矩阵进行图像重构。本发明同时采集多个观测点的观测值,可以避免现有方法在连续采样期间场景发生变化而引起的图像失真问题,且通过压缩感知贪婪算法获取压缩观测值矩阵,能够保证得到的压缩观测值矩阵包含构建待重构图像的原始场景的所有必要信息。

Description

一种基于压缩感知的图像重构方法
技术领域
本发明涉及图像处理领域,具体涉及一种基于压缩感知的图像重构方法。
背景技术
众所周知,实际生活中图像在变换域中是可以被压缩的,这也是JPEG以及JPEG2000等变换编码压缩算法得以实现的原因。绝大多数图像重构系统都没有在图像采集阶段进行压缩,而是度量完整的像素信息,然后在压缩阶段又会丢失掉相当一部分信息。自然会想到是否可以在采集阶段直接只度量图像中那些“重要的”信息,而不耗费资源(时间,带宽,能量等)去度量那些在压缩阶段会被丢失的信息。
为了实现这个目标,将压缩感知理论应用于图像重构应用近年来成为热点,形成了压缩图像重构研究领域。压缩感知理论提出:如果信号在一个变换域内是稀疏的,在特定条件下使用简单优化算法,可以基于一小部分线性测量值重构出完整的信号。
不同于传统相机的传感器阵列中每个像素同时度量不同值,单像素相机使单片感光器每次只度量一个强度值。虽然单像素相机很早就存在了(比如1920年代的flying spot相机),但是将压缩感知应用于成像的推广促进了单像素相机系统的发展。2005年,Sen等人利用一台DLP投影仪和一个感光器演示了第一个单像素相机,他们把这称为“双摄影”(dual photography)。由于压缩感知理论还没有发展起来,他们实现了一种高效的适应算法,可以在使用少于1000种模式的情况下获得高质量图像。后来Sen和Darabi将这项技术进行了发展,引入了压缩感知,使得采集过程大大简化。
2006年,Rice大学的DSP团队实现了另一种单像素相机,借助一台DSP设备,将场景图像直接调制到感光器上。这项工作的创新点在于它利用了压缩感知的概念,一开始就高效的采集了图像,而无需使用适应算法。在压缩感知研究领域,基于任意基函数采集场景投影的能力,为成像应用注入了活力。
目前,大多数图像压缩算法是针对由随机模式投影获得的连续测量值而开发的。这类算法的扩展包括基于块的压缩感知和使用CMOS硬件加速系数测量。Haupt和Nowak对传统像素采样和压缩感知成像进行了对比,但是在比较时对两种方法进行了区别处理:针对传统成像,在k像素样本中进行了插值,针对压缩成像假定图像有k个连续投影。除此之外,还针对频域中的样本进行压缩成像的研究工作。但是,傅立叶域成像算法不能实际应用于相机应用,大多数压缩成像算法需要通过k个连续样本才能重建图像。
传统压缩图像重构中,需要进行k次连续度量(k<n),图像x在每个k采样基函数上被投影,然后使用压缩感知重建稀疏。稀疏可以被转换成原图像x的近似结果,且在转换过程中只会丢失少量信息。这个处理过程需要对场景采集k张照片,然而实际应用中k的数量依然是相当大的,导致其无法成为一套适用的压缩图像重构方案,且在k次连续采样期间场景可能发生变化,进而引起的图像失真问题。
发明内容
针对现有技术的不足,本发明提供了一种基于压缩感知的图像重构方法。
一种基于压缩感知的图像重构方法,包括:
(1)在待重构图像的原始场景中选定若干个像素点作为观测点,并在某一时刻获取所有观测点的观测值作为观测值矩阵;
(2)采用压缩感知贪婪算法按照设定的压缩矩阵计算所述观测值矩阵的压缩观测值矩阵;
(3)利用所述的压缩观测值矩阵进行图像重构,得到重构图像。
本发明中观测点的观测值实际上指各个观测点的像素值。本发明在待重构图像的原始场景中选取若干像素点作为观测点,在同一时刻采集所有观测点的观测值作为观测值矩阵,基于压缩感知贪婪算法计算观测值矩阵的压缩观测值矩阵,进一步根据压缩观测值矩阵进行图像重构。本发明同时采集多个观测点的观测值,可以避免现有方法在连续采样期间场景发生变化而引起的图像失真问题,且通过压缩感知贪婪算法获取压缩观测值矩阵,能够最大程度保证得到的压缩观测值矩阵包括待重构图像的原始场景中所有必要信息。
所述步骤(1)按照泊松盘分布选定若干个像素点作为观测点。
相邻各观测点之间的距离为1~3个像素
为达到良好的采样效果,按照泊松盘分布在选择多个像素点作为观测点,为保证精度,相邻各观测点之间保持一定的距离,各有像素样本被以至少一个固定距离间隔,相对于完全随机样本而言,按照本发明的方法选定观测点,保证了观测值的有效性和全局性,且在保证最终图像重构质量的前提下降低了观测点数,降低了数据量和复杂度。选定观测点后,可以通过简单测量原始图像(待重构图像)中各个观测点的位置来模拟成像过程。
本发明中相邻观测点之间的距离为1~3个像素,是指相邻观测点之间的距离在该范围内分布,每组相邻观测点之间的距离相互独立,可能相同,也可能不同,互不影响。
所述观测点的个数为待重构图像中像素点个数的10~90%。
作为优选,所述观测点的个数为待重构图像中像素点个数的25%。
观测点的个数直接影响到重构图像的精确度和质量,可根据实际情况设定,通常在待重构图像大小相同的情况下,观测点的个数越多,丢失的信息越少,精确度越高,质量越好,反之,精确度越低,质量越差。但是观测点多,导致计算量大,进一步导致重构速率下降。
所述的压缩矩阵为:
SΦ(ΨT)-1y,
其中,S为设定的采样矩阵,Φ为可逆模糊滤波器,Ψ为小波基,y为观测值矩阵。
本发明中采样矩阵S大小为n×k,可逆模糊滤波器Φ和小波基Ψ均为k*k的矩阵,k为观测点的个数,n为待重构图像中像素点个数。
确定压缩矩阵是得到能够重构高质量的图像的关键,本发明中采样矩阵每行每列都有唯一的非零元素,且为1,其中中为1的元素的位置由各个观测点在待重构图像中的位置对应。
作为优选,所述的可逆模糊滤波器为高斯滤波器。
设置可逆模糊滤波器为高斯滤波器。通过在频畴Φ=FTGF中将高斯矩阵G(即高斯滤波器)进行相乘实现。矩阵F是傅立叶变换矩阵,高斯矩阵G的对角线构成一个高斯方程。为了计算反滤波器,需要对逆高斯矩阵G-1求值,G-1也是一个对角矩阵。由于逆高斯曲线容易放大噪点,使用线性Wiener滤波对高斯方程进行转化,这意味着的逆矩阵中的对角线元素可以表示为增加高斯滤波器之后,压缩矩阵现在由两部分组成:采样矩阵S和经过滤波的小波矩阵Φ-1ΨT
所述步骤(2)中根据以下公式计算压缩观测值矩阵
x b ^ = S&Phi; ( &Psi; T ) - 1 y .
在压缩矩阵确定时,可以使用压缩感知贪婪算法能够快速的获得观测值矩阵y的压缩观测值矩阵
由于小波基与采样矩阵不是非连续的。通常,一种变换在定义局部特征表现得越好,则它使用的采样矩阵的尖峰时连续性越好,而在压缩感知框架下的可用性越差。傅立叶域中,真实图像的稀疏性还不够大,由于基于压缩感知理论进行图像重构时需要离散系数个数4到5倍的样本量,导致该方法失效。
为提高应用范围,压缩中采用小波基提高了得到的压缩观测值矩阵的稀疏性,可以有效提高观测值的离散性,降低压缩观测值矩阵的大小,进而降低数据量,且本发明中通过对小波基进行可逆模糊滤波,降低小波基与采样矩阵的相关性,进一步提高图像重新的效果。
所述的步骤(3)中根据以下公式获得重构图像X:
X = &Phi; - 1 &Psi; - 1 x b ^ .
与现有技术相比,本发明的具有如下有益效果:
(a)本发明采用在多个观测点上同时进行观测的方法,可以避免现有方法在连续采样期间场景发生变化而引起的图像失真问题。
(b)本发明按照泊松盘分布选取观测点,保证了观测值的有效性和全局性,在保证最终图像重构质量的前提下减小了观测点的数量,降低了数据量和复杂度。
(c)本发明的压缩矩阵使用经过高斯滤波的小波基,可以有效提高观测值的离散性,降低压缩观测值矩阵的大小,进而降低数据量,且通过高斯滤降低压缩矩阵与观测值矩阵的相关性,提高图像重建效果。
具体实施方式
下面将结合具体实施例对本发明进一步详细描述。
本实施例的基于压缩感知的图像重构方法,包括如下步骤:
(1)按照泊松盘分布在待重构图像的原始场景中选定若干个像素点作为观测点。
观测点的个数直接影响到重构图像的精确度,根据实际情况设定,通常在待重构图像大小相同的情况下,观测点的个数越多,丢失的信息越少,精度越高,反之,精度越低。但是观测点多导致计算量大,进而使重构速率下降。相邻观测点之间的距离为1~3个像素,观测点的个数为待重构图像中像素点个数的25%。
(2)采用压缩感知贪婪算法按照设定的压缩矩阵计算观测值矩阵的压缩观测值矩阵具体根据以下公式计算:
x b ^ = S&Phi; ( &Psi; T ) - 1 y ,
其中,y为观测值矩阵,S为设定的采样矩阵,Φ为可逆模糊滤波器(本实施例中为高斯滤波器),Ψ为小波基。
本实施例中采样矩阵S的每行每列都只有唯一一个非零元素,且为1(其余元素全部为0),大小为n×k,k为观测点的个数,n为待重构图像中像素点个数,该采样矩阵中为1的元素的位置由各个观测点在待重构图像中的位置决定,且采样矩阵为待重构图像矩阵的正交基。
在频畴Φ=FTGF中将高斯矩阵G进行相乘实现。F是傅立叶变换,G的对角线构成一个高斯方程。为了计算反滤波器,对G-1求值,G-1也是一个对角矩阵。由于逆高斯曲线容易放大噪点,使用线性维纳滤波(Wiener滤波)对高斯方程进行转化,则逆矩阵中的对角线元素可以表示为本实施例中令λ=0.4。高斯方程中的变量σ2取决于观测点的个数与待重构图像的中像素点个数的比例,本实施例中该比例为25%,对应设定σ2=3.38×103
本实施例中,压缩矩阵现在由两部分组成:采样矩阵S和经过滤波的小波矩阵Φ-1ΨT。以采样矩阵S和经过高斯滤波的小波矩阵Φ-1ΨT中任意两个元素的最大内积的倍的值来衡量二者的关联性。对于滤波后小波矩阵Φ-1ΨT,与采样矩阵S的关联性是158.3,而没有经过滤波的值是261.6,二者关联性越小,重构得到的重构图像的质量越高。
(3)利用压缩观测值矩阵基于压缩感知理论进行图像重构,得到重构图像,具体根据以下公式得到重构图像X:
X = &Phi; - 1 &Psi; - 1 x b ^ .
以上所述的具体实施方式对本发明的技术方案和有益效果进行了详细说明,应理解的是以上所述仅为本发明的最优选实施例,并不用于限制本发明,凡在本发明的原则范围内所做的任何修改、补充和等同替换等,均应包含在本发明的保护范围之内。

Claims (9)

1.一种基于压缩感知的图像重构方法,其特征在于,包括:
(1)在待重构图像的原始场景中选定若干个像素点作为观测点,并在某一时刻获取所有观测点的观测值作为观测值矩阵;
(2)采用压缩感知贪婪算法按照设定的压缩矩阵计算所述观测值矩阵的压缩观测值矩阵;
(3)利用所述的压缩观测值矩阵进行图像重构,得到重构图像。
2.如权利要求1所述的基于压缩感知的图像重构方法,其特征在于,所述步骤(1)按照泊松盘分布选定若干个像素点作为观测点。
3.如权利要求2所述的基于压缩感知的图像重构方法,其特征在于,相邻观测点之间的距离为1~3个像素。
4.如权利要求3所述的基于压缩感知的图像重构方法,其特征在于,所述观测点的个数为待重构图像中像素点个数的10~90%。
5.如权利要求4所述的基于压缩感知的图像重构方法,其特征在于,所述观测点的个数为待重构图像中像素点个数的25%。
6.如权利要求5所述的基于压缩感知的图像重构方法,其特征在于,所述的压缩矩阵为:
SΦ(ΨT)-1y,
其中,S为设定的采样矩阵,Φ为可逆模糊滤波器,Ψ为小波基,y为观测值矩阵。
7.如权利要求6所述的基于压缩感知的图像重构方法,其特征在于,所述步骤(2)中根据以下公式计算压缩观测值矩阵
x b ^ = S&Phi; ( &Psi; T ) - 1 y .
8.如权利要求7所述的基于压缩感知的图像重构方法,其特征在于,所述的可逆模糊滤波器为高斯滤波器。
9.如权利要求7所述的基于压缩感知的图像重构方法,其特征在于,所述的步骤(3)中根据以下公式获得重构图像X:
X = &Phi; - 1 &Psi; - 1 x b ^ .
CN201410323782.2A 2014-07-08 2014-07-08 一种基于压缩感知的图像重构方法 Pending CN104123740A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410323782.2A CN104123740A (zh) 2014-07-08 2014-07-08 一种基于压缩感知的图像重构方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410323782.2A CN104123740A (zh) 2014-07-08 2014-07-08 一种基于压缩感知的图像重构方法

Publications (1)

Publication Number Publication Date
CN104123740A true CN104123740A (zh) 2014-10-29

Family

ID=51769137

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410323782.2A Pending CN104123740A (zh) 2014-07-08 2014-07-08 一种基于压缩感知的图像重构方法

Country Status (1)

Country Link
CN (1) CN104123740A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105374020A (zh) * 2015-12-17 2016-03-02 深圳职业技术学院 一种快速高分辨率的超声成像检测方法
CN105915868A (zh) * 2016-04-22 2016-08-31 南京理工大学 基于扩展小波树的彩色成像系统及方法
CN105915869A (zh) * 2016-04-22 2016-08-31 南京理工大学 一种彩色自适应压缩计算鬼成像系统及方法
CN108280818A (zh) * 2018-01-19 2018-07-13 清华大学深圳研究生院 一种基于压缩感知的快速目标成像方法和系统
CN109088638A (zh) * 2018-08-15 2018-12-25 苏州蛟视智能科技有限公司 一种基于二进制测量矩阵的压缩感知方法
TWI773603B (zh) * 2021-11-30 2022-08-01 國立清華大學 壓縮感知成像方法及系統

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011069055A2 (en) * 2009-12-04 2011-06-09 Stc.Unm System and methods of compressed sensing as applied to computer graphics and computer imaging
CN102708576A (zh) * 2012-05-18 2012-10-03 西安电子科技大学 基于结构字典的分块图像压缩感知重建方法
CN103824264A (zh) * 2014-03-06 2014-05-28 西安电子科技大学 基于随机傅里叶特征的压缩感知方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011069055A2 (en) * 2009-12-04 2011-06-09 Stc.Unm System and methods of compressed sensing as applied to computer graphics and computer imaging
CN102708576A (zh) * 2012-05-18 2012-10-03 西安电子科技大学 基于结构字典的分块图像压缩感知重建方法
CN103824264A (zh) * 2014-03-06 2014-05-28 西安电子科技大学 基于随机傅里叶特征的压缩感知方法

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105374020A (zh) * 2015-12-17 2016-03-02 深圳职业技术学院 一种快速高分辨率的超声成像检测方法
CN105374020B (zh) * 2015-12-17 2018-04-17 深圳职业技术学院 一种快速高分辨率的超声成像检测方法
CN105915868A (zh) * 2016-04-22 2016-08-31 南京理工大学 基于扩展小波树的彩色成像系统及方法
CN105915869A (zh) * 2016-04-22 2016-08-31 南京理工大学 一种彩色自适应压缩计算鬼成像系统及方法
CN108280818A (zh) * 2018-01-19 2018-07-13 清华大学深圳研究生院 一种基于压缩感知的快速目标成像方法和系统
CN108280818B (zh) * 2018-01-19 2020-04-03 清华大学深圳研究生院 一种基于压缩感知的快速目标成像方法和系统
CN109088638A (zh) * 2018-08-15 2018-12-25 苏州蛟视智能科技有限公司 一种基于二进制测量矩阵的压缩感知方法
TWI773603B (zh) * 2021-11-30 2022-08-01 國立清華大學 壓縮感知成像方法及系統

Similar Documents

Publication Publication Date Title
CN104123740A (zh) 一种基于压缩感知的图像重构方法
Wan et al. Compressive image fusion
CN110084862B (zh) 基于多尺度小波变换与深度学习的图像压缩感知算法
CN110211044B (zh) 基于去马赛克算法和主成分分析的多光谱成像方法及装置
CN108419083B (zh) 一种图像多级小波全子带压缩感知编码方法
Canh et al. Multi-scale/multi-resolution Kronecker compressive imaging
CN103793883A (zh) 一种基于主成分分析的成像光谱图像超分辨率复原方法
CN103500444A (zh) 一种偏振图像融合方法
Zhou et al. A high performance missing pixel reconstruction algorithm for hyperspectral images
Bi et al. Image compressed sensing based on wavelet transform in contourlet domain
CN104660269B (zh) 一种用于信号压缩感知的感知矩阵生成方法
Zeng et al. Image reconstruction of IoT based on parallel CNN
Wang et al. Image reconstruction from patch compressive sensing measurements
CN102982563A (zh) 一种基于光学轮廓波变换的图像压缩方法
Jing et al. Single-image super-resolution based on decomposition and sparse representation
Abrardo et al. A compressive sampling scheme for iterative hyperspectral image reconstruction
Karaca et al. MultiTempGAN: multitemporal multispectral image compression framework using generative adversarial networks
Wu et al. Coprime interpolation and compressive sensing for future heterogeneous network towards 5G
Sun et al. A novel multi-focus image fusion algorithm based on NSST-FRFT
Ye et al. Spectral aperture code design for multi-shot compressive spectral imaging
Wang et al. Perceptual compressive sensing scheme based on human vision system
Ukasha et al. An efficient zonal sampling method for contour extraction and image compression using DCT transform
Nguyen Canh et al. Error resilient deep compressive sensing
Langari et al. Multi-resolution edge-guided image gap restoration
Haron et al. Image Data Compression Using Discrete Cosine Transform Technique for Wireless Transmission.

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20141029

RJ01 Rejection of invention patent application after publication