CN103559696A - 一种基于压缩感知的图像融合方法 - Google Patents

一种基于压缩感知的图像融合方法 Download PDF

Info

Publication number
CN103559696A
CN103559696A CN201310454377.XA CN201310454377A CN103559696A CN 103559696 A CN103559696 A CN 103559696A CN 201310454377 A CN201310454377 A CN 201310454377A CN 103559696 A CN103559696 A CN 103559696A
Authority
CN
China
Prior art keywords
image
fusion
time
gained
observed reading
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310454377.XA
Other languages
English (en)
Other versions
CN103559696B (zh
Inventor
朱卫平
康彬
颜俊
孟庆民
叶新荣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing Post and Telecommunication University
Original Assignee
Nanjing Post and Telecommunication University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing Post and Telecommunication University filed Critical Nanjing Post and Telecommunication University
Priority to CN201310454377.XA priority Critical patent/CN103559696B/zh
Publication of CN103559696A publication Critical patent/CN103559696A/zh
Application granted granted Critical
Publication of CN103559696B publication Critical patent/CN103559696B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Image Processing (AREA)

Abstract

本发明提出了一种基于压缩感知的图像融合方法,所述方法采用压缩感知的图像融合方法,包括从图像采集、观测值融合以及图像重构三个部分,图像采集将待融合的图像分成图像块;观测值融合采用双通道脉冲耦合神经网络模型进行初步图像融合,采用加权平均方法对观测值进行精细融合;最后通过图像重构算法得到最终的图像融合结果。本发明采样部分充分考虑到待融合图像自身特点,提高了融合所得结果的细节信息;采用分块压缩方法,在采样端对分块图像在采样的同时即进行压缩,避免了传统压缩感知采样端事先进行稀疏处理所增加的采样端复杂度;重构算法具有较快重构速度以及较强鲁棒性。

Description

一种基于压缩感知的图像融合方法
技术领域
本发明属于图像处理技术领域,尤其是涉及一种基于压缩感知的图像融合方法。
背景技术
随着数字信息时代的发展,图像融合技术越来越受到人们的关注,特别是针对红外以及自然光照图像间的以及遥感图像之间的图像融合为该领域研究的热点。近年来基于压缩感知(Compressive Sensing)的图像融合技术已成为图像融合技术发展新的方向。压缩感知由Candes及Donoho提出,其核心思想是在信号采样的同时对其进行压缩。信号的压缩感知过程可描述为:在采样端采集信号的非自适应线性投影测量值;在重构端,根据其测量值,利用相应的重构算法完成信号的重构。压缩感知的最大优点在于突破了香农采样定理的瓶颈,以远低于奈奎斯特频率进行采样,信号的投影测量数据量远远小于传统采样方法所获的数据量。基于以上优点,基于压缩感知的图像融合可在数据采集端口将大数据量的遥感图像直接进行压缩编码,不受采样带宽限制,大大降低了后续计算的复杂度。压缩传感理论主要包括信号的稀疏表示、编码测量和重构算法三个方面。
设信号X在一组正交稀疏基上具有稀疏性,X是N×1大小的一维向量,N为自然数;通过θ=ΨTX可求出Ψ基下的变换稀疏系数θ=[θ12,...θN]T,其中,θ为对信号X进行稀疏变换后的一维稀疏系数,维数与X相同;Ψ∈RN×N为小波稀疏变换矩阵,该稀疏系数的稀疏性为K,K表示向量θ中非零向量的个数,如果sup(X)={i:Xi≠0},那么当|sup(X)|≤K时,称信号X为K-稀疏信号。在得到原始信号的稀疏表示之后通过观测器得到原信号的M个观测值构成的M×1大小的一维向量Y=[y1,y2,...yM]T。因为M<N,所以该过程为实际的压缩采样过程,表示为:
Y=ΦX=ΦΨθ
上式中,Φ∈RM×N为随机观测矩阵。在原始信号的重构过程中,若观测矩阵Φ满足受限等距条件,则可通过已知的观测值Y重构出原始信号X。由于Y的维数M远小于原信号X的维数N,所以原始信号的重构过程为欠定问题,可通过求解l0范数(表示为||·||0,用以统计向量的非零元素个数)的最优化方法来解决
min &Theta; | | &theta; | | 0 s . t . Y = &Phi;&Psi;&theta;
重构所得估计信号
Figure BDA0000389866390000022
为了便于实际应用,最常用的压缩感知重构算法分为两类,一类是将最小l0范数(表示为||·||0,0范数,用以统计向量的非零元素个数)问题转化为最小l1范数(表示为||·||1,1范数,用以统计向量中各元素绝对值的和)问题。具有代表性的有内点法、梯度投影法等。此类算法计算复杂度较大。另一类方法为贪婪追踪算法,是通过每次迭代时选择一个局部最优解来逐步逼近原始信号,包括匹配追踪算法MP和正交匹配追踪算法OMP等。
将基于压缩感知的图像融合算法推向实际工程应用的难点有以下几个方面:①简单实用的采样方法;②针对观测系数的有效融合方法;③快速实用的重构算法。目前基于压缩感知的图像融合算法重点针对以上一个或两个难点而展开,并没有一种算法系统的对上述三个难点同时进行考虑。目前基于压缩感知图像融合算法的采样端通常采用“星型”二维傅利叶矩阵,二维傅利叶矩阵仅仅与时域稀疏的信号具有不相关性,这一点明显限制了其广泛的应用的范围。在观测系数融合方法方面,加权平均方法是一种最为实用的融合方法,但该方法并未充分考虑到待融合图像自身的特点。在最后的图象重构过程中,正交匹配追踪算法OMP算法以其收敛速度快,复杂度低的特点成为重构算法的首选,但此算法在重构精度方面并不能取得较为理想的结果。
发明内容
本发明所要解决的技术问题在于克服现有技术的不足,针对基于压缩感知的图像融合方法推向实际工程应用的难点问题,本发明提出了一种基于压缩感知的图像融合方法。
为解决上述技术问题,本发明所采用的技术方案是:
一种基于压缩感知的图像融合方法,包括如下步骤:
步骤A,图像采集,
将待融合的两幅图像分别分成S×T大小的图像块,S、T均是自然数;
步骤B,观测值融合,其步骤如下:
步骤B1,观测值初步融合,将步骤A所述两幅图像的图像块分别变换成一维列向量X1,X2,将其输入双通道脉冲耦合神经网络模型,产生初步融合结果X3;X1,X2,X3均是长度为N的列向量,N=S×T;
步骤B2,观测值精细融合,分别对X1,X2,X3压缩采样,获得压缩采样值Y1,Y2,Y3,Y1,Y2,Y3均是长度为M的列向量,M为自然数;压缩采样矩阵为分块哈达玛矩阵ΦB,ΦB∈RM×N,M<N;对Y1,Y2,Y3采用加权平均方法进行观测值精细融合获得观测值精细融合结果Y;
步骤C,图像重构,
对步骤B2所述观测值精细融合结果Y进行重构,重构算法采用一种基于快速分块压缩感知的迭代重构方法,重构输出结果为x,x是长度为N的列向量;重构过程中的已知参数为:融合后的观测值Y,采样矩阵ΦB以及正交小波基Ψ,图像重构的过程如下:
步骤C1,初始化参数;
初始化x(1)=0,t(1)=1,β=1.5以及α(1)=1;
步骤C2,更新x,
令:
x ^ ( k ) = SPML ( x ( k ) , Y , &Phi; B , &Psi; , &alpha; ( k ) )
t ( k + 1 ) = 1 + 1 + 4 ( t ( k ) ) 2 2
x ( k + 1 ) = x ^ ( k ) + ( t ( k ) - 1 t ( k + 1 ) ) ( x ^ ( k ) - x ^ ( k - 1 ) )
步骤C3,更新α
如果 | | &dtri; x ( k + 1 ) | | 2 &NotEqual; 0 , &alpha; ( k + 1 ) = | | &dtri; x ( k + 1 ) | | 2 | | &dtri; x ( k ) | | 2
否则:α(k+1)=β
步骤C4,判断迭代更新是否终止
令:D(k+1)=(1/N)×||x(k+1)-x(k)||2
如果|D(k+1)-D(k)|<10-4,返回步骤C2继续进行迭代;否则,终止x的更新迭代;
||·||2为2范数;
SPML()是修正投影的兰德韦伯迭代方程;
Figure BDA0000389866390000041
为第k次更新所得的线性优化值,
Figure BDA0000389866390000042
为第k-1次更新所得的线性优化值;
t为更新时间算子,t(k)为第k次更新所得的时间算子,t(k+1)为第k+1次更新所得的时间算子;
α为自适应加权系数,α(k)是第k次更新所得α的加权系数,α(k+1)是第k+1次更新所得α的加权系数;
Figure BDA0000389866390000043
为第k次更新所得x的梯度,
Figure BDA0000389866390000044
为第k+1次更新所得x的梯度;
D(k)是D(k+1)前一次更新的值;
x为重构输出结果,x是长度为N的列向量,x(k)是x第k次重构迭代的结果。
本发明的有益效果是:本发明提出了一种基于压缩感知的图像融合方法,所述方法采用压缩感知的图像融合方法,包括从图像采集、观测值融合以及图像重构三个部分,图像采集将待融合的图像分成图像块;观测值融合采用双通道脉冲耦合神经网络模型进行初步图像融合,采用加权平均方法对观测值进行精细融合;最后通过本发明提出的图像重构算法得到最终的图像融合结果。本发明采样部分充分考虑到待融合图像自身特点,提高了融合所得结果的细节信息;采用分块压缩方法,在采样端对分块图像在采样的同时即进行压缩,避免了传统压缩感知采样端事先进行稀疏处理所增加的采样端复杂度;重构算法具有较快重构速度以及较强鲁棒性。
附图说明
图1是本设计所产生图像融合系统的结构。
图2是双通道脉冲耦合神经网络模型示意图。
图3是10db噪声干扰情况下重构图像的峰值信噪比PSNR。
具体实施方式
下面结合附图,对本发明提出的一种基于压缩感知的图像融合方法进行详细说明:
如图1所示,本设计所提出的基于压缩感知的图像融系统将待融合图像进行分块处理,其处理流程为:将待融合的图像1和2分成S×T大小的图像块,系统每次处理一组图像块(表示为图像块A、B);每次对图像块进行融合处理的过程为:将所分图像块A,B变换成一维列向量(表示为X1,X2),将其输入双通道脉冲耦合神经网络模型,产生初步融合结果X3;所获得的初步融合结果X3会同时与X1以及X2一起进行压缩采样,获得压缩采样值Y1、Y2以及Y3,对Y1、Y2以及Y3进行精细融合获得融合观测值Y;对Y进行重构获得最终重构融合图像。按照所设计的处理流程,整个系统对每个图像块的详细实现步骤为:
步骤1:在设计实现过程中令分割的图像块大小S=T=32。系统每次处理过程中将待融合的图像块A,B变换成一维列向量X1以及X2输入双通道脉冲耦合神经网络模型中,如图2所示,双通道脉冲耦合神经网络模型是由多个单细胞双通道脉冲耦合神经网络所组成的非线性数学模型。在实际处理图像过程中,第(i,j)个像素点对应第(i,j)个单细胞双通道脉冲耦合神经网络;(i,j)为待处理图像像素的坐标({(i,j)|i≤E,j≤F},E×F为所处理二维图像大小);本专利所设计系统在实际利用双通道脉冲耦合神经网络模型处理X1以及X2时,是将X1以及X2先还原为32×32大小的矩阵A、B,然后输入到双通道脉冲耦合神经网络模型中,输出结果转换为列向量表示为X3(X3=R1024×1);第(i,j)个单细胞的双通道脉冲耦合神经网络表示为:
H i , j 1 ( n ) = M ( I ( n - 1 ) ) + S i , j 1
H i , j 2 ( n ) = W ( I ( n - 1 ) ) + S i , j 2
U i , j ( n ) = ( 1 + &beta; 1 H i , j 1 ( n ) ) ( 1 + &beta; 2 H i , j 2 ( n ) ) + &sigma;
I i , j ( n ) = 1 , U i , j ( n ) > T i , j ( n - 1 ) 0 , else
T i , j ( n ) = exp ( - &alpha; T ) T i , j ( n - 1 ) + V T I i , j ( n )
上述模型中,第(i,j)个单细胞双通道脉冲耦合神经网络对应处理二维矩阵A,B中第(i,j)个像素点。
Figure BDA0000389866390000063
表示二维矩阵A中第(i,j)点的像素灰度值;表示二维矩阵B中第(i,j)点的像素灰度值;Ii,j表示第(i,j)个神经网络的输出脉冲;为对应处理二维矩阵A所形成的第(i,j)个生物电流传输通道;
Figure BDA0000389866390000066
为对应处理二维矩阵B所形成的第(i,j)个生物电流传输通道;M(·)、W(·)都是3×3的回馈方程矩阵,该方程表示当前已接受刺激的神经细胞受到周围其它神经细胞外部刺激的大小;Ui,j代表第(i,j)个神经网络的内部活动项(内部活动项表示对细胞所接受的刺激信号进行调制后所得结果)。βk∈[0,1]为权重因子,该权重因子决定不同生物电流传输通道在图像融合过程中的重要程度,通常情况下β12=0.5;Ti,j为决定第(i,j)个神经网络是否点火的动态阈值;αT为时间常量,VT为生物电压常量;σ表示内部活动向活动能力矫正参数,该参数能对信号调制结果进行矫正;Ii,j(n)为第n次迭代后第(i,j)个神经网络所输出的脉冲信号;I为以Ii,j为中心包含Ii,j周围8个神经元脉冲输出所组成的3×3大小矩阵。本设计将双通道脉冲耦合神经网络模型的内部活动项作为输出,输出一维列向量X3;(X3=[U1,1,U1,2…,Ui,j…US,T]T,X3∈R1024×1)。
双通道脉冲耦合神经网络模型的参数选取为:回馈方程
Figure BDA0000389866390000067
其中代表卷积运算,K为3×3大小的矩阵,矩阵参数设置为:
K=[0.1091,0.1409,0.1091;0.1409,0,0.1409;0.1091,0.1409,0.1091];β12=0.5,σ=1.0,生物电压常数VT=4000以及时间常数αT=0.012。当得到向量X1、X2、X3后便可利用采样矩阵ΦB对其进行压缩采样。采样矩阵ΦB选用分块哈达玛矩阵。压缩采样结果为Y1,Y2以及Y3。双通道脉冲耦合神经网络模型能将两幅待融合图像的细节信息都包含到该模型的内部活动项输出结果中,该细节信息是充分结合待融合图像各自不同图像特点而得到的。引入上述初步融合部分,可为观测系数精确融合部分提供更多的原图像细节信息。
步骤2:对采样端输出的观测值Y1,Y2以及Y3进行精细融合。传统的图像融合准则都是针对图像像素域进行的,针对压缩感知采样观测值的融合准则不能选用传统图像融合准则。在所设计系统中,图像融合准则采用加权平均方法,该融合准则如下所示
Y=ω1×Y12×Y23×Y3
该融合准则的设计难点为权重ω1,ω2以及ω3的选择,本设计将Y1,Y2以及Y3分别划分为两个区域R1以及R2,区域划分方法依据为:以Y3向量为参考向量,对比向量Y1,Y2以及Y3中各元素值大小,当Y1和Y2中某个相同位置元素的元素值同时小于Y3中相应位置的元素值,将此元素所在位置记录下来,统计上述这类特殊元素所在位置,其所组成的集合定义为区域R1,区域R2为区域R1的补集。区域R1中所提取的元素能包含大量原图像细节信息;统计Y1,Y2以及Y3各自R1,R2区域的信息量可选用标准方差,信息熵或最大相似性等数理统计方法。Y1的R1,R2区域统计所得的结果经过加权平均可得到sdy1,同理可计算出sdy2以及sdy3。ω1,ω2以及ω3的计算为:
ω1=sdy1/(sdy1+sdy2+sdy3)
ω2=sdy2/(sdy1+sdy2+sdy3)
ω3=sdy3/(sdy1+sdy2+sdy3)
以clock图像为例,选用三种不同数理统计方法计算ω1,ω2以及ω3值,三组不同加权系数融合结果的对比如下表所示。
Figure BDA0000389866390000071
对融合结果选用了三种评价指标分别为:SSIM(结构相似度指数),CC(参数相关度),SD(标准方差)。通过上表的对比可以看出,选用标准方差计算权值ω1,ω2以及ω3可以得到较好图像融合结果。因此本设计选用标准方差计算加权值。
步骤3:在图像重构部分,为了重构出分块压缩采样的图像块,本设计提出了一种新的分块压缩感知图像重构算法,算法已知参数为:融合观测值Y,采样矩阵ΦB以及正交基Ψ
图像重构部分的重构流程如下
步骤C1,初始化参数;
初始化x(1)=0,t(1)=1,β=1.5以及α(1)=1;
步骤C2,更新x,
x ^ ( k ) = SPML ( x ( k ) , Y , &Phi; B , &Psi; , &alpha; ( k ) )
t ( k + 1 ) = 1 + 1 + 4 ( t ( k ) ) 2 2
x ( k + 1 ) = x ^ ( k ) + ( t ( k ) - 1 t ( k + 1 ) ) ( x ^ ( k ) - x ^ ( k - 1 ) )
步骤C3,更新α(k)
如果 | | &dtri; x ( k + 1 ) | | 2 &NotEqual; 0 , &alpha; ( k + 1 ) = | | &dtri; x ( k + 1 ) | | 2 | | &dtri; x ( k ) | | 2
否则:α(k+1)=β
步骤C4,判断迭代更新是否终止
D(k+1)=(1/N)×||x(k+1)-x(k)||2
如果|D(k+1)-D(k)|<10-4,返回步骤C2执行;否则,更新迭代过程结束;
上述迭代更新过程中,||·||2为2范数;在x的第k+1次迭代更新过程中,首先通过已知参数:观测值Y,采样矩阵ΦB以及正交小波基Ψ,利用迭代方程SPML对x(k)进行线性优化,所得线性优化值为
Figure BDA0000389866390000086
线性优化的作用是修正x的重构精度;其次更新时间算子t;然后将更新的时间算子引入x(k)的迭代更新过程中;时间算子的引入可加快x(k+1)的迭代收敛速度;t(k+1)为第k+1次更新所得的时间算子;由于SPML方程中所用到的迭代加权系数α为自适应加权系数,自适应加权系数会随着x的更新而自动更新;选择自适应加权系数可明显提高重构图像的重构精度;在图像重构流程中,α(k+1)为第k+1次更新所得加权系数;为第k+1次更新所得x的梯度;x的更新过程中,每次迭代结束后需要利用迭代终止判断准则判断下次迭代是否继续;第k次迭代终止准则中所用到的参数D(k+1)作用为:计算x(k+1)以及x(k)之间的重构误差。
在x的更新流程中,SPML迭代方程的完整流程如下
xw(k)=Wiener(x(k))
x &OverBar; ( k ) = x w ( k ) + &alpha; ( k ) ( &Phi; B T &Phi; B + &mu; 1 ) - 1 &Phi; B T ( Y - &Phi; B x w ( k ) )
Figure BDA0000389866390000093
x &OverBar; &OverBar; ( k ) = &Psi; T x ^ ^ ( k )
x ^ ( k ) = x &OverBar; &OverBar; ( k ) + &alpha; ( k ) ( &Phi; B T &Phi; B + &mu; 1 ) - 1 &Phi; B T ( Y - &Phi; B x &OverBar; &OverBar; ( k ) )
上述流程中,xw(k)为对第k次循环输入向量x(k)进行维纳滤波器滤波后的输出向量,维纳滤波器的引入能平滑向量x(k);在滤波之后向量xw(k)将进行第一次Landwebber(兰德韦伯)迭代,迭代输出值为
Figure BDA00003898663900000915
之后对
Figure BDA00003898663900000916
进行正交稀疏变换,变换结果为当获得
Figure BDA0000389866390000097
后将利用阈值λ对其进行阈值判定,用于修正稀疏域参数,修正后的稀疏域参数为
Figure BDA0000389866390000098
Figure BDA0000389866390000099
进行正交稀疏反变换后获得
Figure BDA00003898663900000910
Figure BDA00003898663900000911
为向量
Figure BDA00003898663900000912
的修正值。流程最后再通过一次Landwebber迭代获得SPML函数最终输出值
Figure BDA00003898663900000913
本设计中的Landwebber迭代是针对传统迭代方法不具有鲁棒性而进行的改进,改进后的Landwebber迭代具有较强鲁棒性,能有效抑制噪声干扰。图3为clock图加入10分贝噪声后,在各个采样率下重构图像PSNR(峰值信噪比)大小曲线。实验中用带圆圈的直线、带方块的直线以及带菱形的直线都代表本文所提出的分块压缩感知重构算法,三者的区别为正交稀疏基Ψ的选择不同。带圆圈的直线代表正交基Ψ选择为DCT(离散余弦变换);带方块的直线代表正交基Ψ选择为DWT(离散小波变换);带菱形的直线代表正交基Ψ选择为DDWT(对偶小波变换);带三角的直线代表TV(全变差)算法。由图3可见,本设计所提出的图像重构算法在三种不同正交稀疏基下的重构PSNR(值;选取TV算法作为参考,因为TV算法为目前重构精度,抗噪性能最好的图像重构算法之一。该实验结果表明本设计所提出的图像重构算法选用对偶小波基时具有最强鲁棒性。通过与OMP(正交匹配追踪算法),TWIST(两次更新的迭代阈值算法)以及SPL(平滑投影的兰德韦伯迭代)算法的收敛速度对比可以看出本文所提出的图像重构算法具有最快的收敛速度,收敛精度也明显优于以上三种重构算法。
图像融合结果仿真实验
为了验证本设计所提出图像融合系统的性能,实验仿真首先选取了多聚焦lab图进行实验,该实验图像由两副实验图片(图片1、2)组成,图片1是将钟表进行聚焦而人物部分模糊;图片2是对人物进行聚焦而钟表部分模糊。对该图像进行实验能说明新提出图像融合算法在融合结果细节方面的改进。比对实验选取MS(最大值选择)算法,该算法为基于压缩感知图像融合领域最为通用的图像融合算法。由实验结果可以看出,所设计的新的图像融合系统能在一副图中将钟表以及人物这两个聚焦点都进行聚焦。相比于MS算法,新的图像融合系统融合所得图像中,钟表的数字时间显示部分得到了凸显,这充分说明了系的图像融合系统能有效突出图像的细节信息。将融合后图像中的人物头部进行放大可以明显看出,放大后的人物头部依然很清晰,这说明通过新的图像融合系统能得到清晰,不失真的聚焦图像。

Claims (1)

1.一种基于压缩感知的图像融合方法,其特征在于,包括如下步骤:
步骤A,图像采集,
将待融合的两幅图像分别分成S×T大小的图像块,S、T均是自然数;
步骤B,观测值融合,其步骤如下:
步骤B1,观测值初步融合,将步骤A所述两幅图像的图像块分别变换成一维列向量X1,X2,将其输入双通道脉冲耦合神经网络模型,产生初步融合结果X3;X1,X2,X3均是长度为N的列向量,N=S×T;
步骤B2,观测值精细融合,分别对X1,X2,X3压缩采样,获得压缩采样值Y1,Y2,Y3,Y1,Y2,Y3均是长度为M的列向量,M为自然数;压缩采样矩阵为分块哈达玛矩阵ΦB,ΦB∈RM×N,M<N;对Y1,Y2,Y3采用加权平均方法进行观测值精细融合获得观测值精细融合结果Y;
步骤C,图像重构,
对步骤B2所述观测值精细融合结果Y进行重构,重构算法采用一种基于快速分块压缩感知的迭代重构方法,重构输出结果为x,x是长度为N的列向量;重构过程中的已知参数为:融合后的观测值Y,采样矩阵ΦB以及正交小波基Ψ,图像重构的过程如下:
步骤C1,初始化参数;
初始化x(1)=0,t(1)=1,β=1.5以及α(1)=1;
步骤C2,更新x,
令:
x ^ ( k ) = SPML ( x ( k ) , Y , &Phi; B , &Psi; , &alpha; ( k ) )
t ( k + 1 ) = 1 + 1 + 4 ( t ( k ) ) 2 2
x ( k + 1 ) = x ^ ( k ) + ( t ( k ) - 1 t ( k + 1 ) ) ( x ^ ( k ) - x ^ ( k - 1 ) )
步骤C3,更新α
如果 | | &dtri; x ( k + 1 ) | | 2 &NotEqual; 0 , &alpha; ( k + 1 ) = | | &dtri; x ( k + 1 ) | | 2 | | &dtri; x ( k ) | | 2
否则:α(k+1)=β
步骤C4,判断迭代更新是否终止
令:D(k+1)=(1/N)×||x(k+1)-x(k)||2
如果|D(k+1)-D(k)|<10-4,返回步骤C2继续进行迭代;否则,终止x的更新迭代;
其中,
||·||2为2范数;
SPML()是修正投影的兰德韦伯迭代方程;
Figure FDA0000389866380000023
为第k次更新所得的线性优化值,
Figure FDA0000389866380000024
为第k-1次更新所得的线性优化值;
t为更新时间算子,t(k)为第k次更新所得的时间算子,t(k+1)为第k+1次更新所得的时间算子;
α为自适应加权系数,α(k)是第k次更新所得α的加权系数,α(k+1)是第k+1次更新所得α的加权系数;
Figure FDA0000389866380000025
为第k次更新所得x的梯度,
Figure FDA0000389866380000026
为第k+1次更新所得x的梯度;
x为重构输出结果,x是长度为N的列向量,x(k)是x第k次重构迭代的结果。
CN201310454377.XA 2013-09-29 2013-09-29 一种基于压缩感知的图像融合方法 Expired - Fee Related CN103559696B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310454377.XA CN103559696B (zh) 2013-09-29 2013-09-29 一种基于压缩感知的图像融合方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310454377.XA CN103559696B (zh) 2013-09-29 2013-09-29 一种基于压缩感知的图像融合方法

Publications (2)

Publication Number Publication Date
CN103559696A true CN103559696A (zh) 2014-02-05
CN103559696B CN103559696B (zh) 2016-04-13

Family

ID=50013935

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310454377.XA Expired - Fee Related CN103559696B (zh) 2013-09-29 2013-09-29 一种基于压缩感知的图像融合方法

Country Status (1)

Country Link
CN (1) CN103559696B (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104504740A (zh) * 2015-01-23 2015-04-08 天津大学 压缩感知框架下的图像融合方法
CN104732504A (zh) * 2015-01-23 2015-06-24 天津大学 基于压缩感知和wbct变换的图像融合方法
CN104779960A (zh) * 2015-03-20 2015-07-15 南京邮电大学 一种基于分块压缩感知的信号重构方法
CN105099462A (zh) * 2014-05-22 2015-11-25 北京邮电大学 一种基于压缩感知的信号处理方法
CN105915868A (zh) * 2016-04-22 2016-08-31 南京理工大学 基于扩展小波树的彩色成像系统及方法
CN105915869A (zh) * 2016-04-22 2016-08-31 南京理工大学 一种彩色自适应压缩计算鬼成像系统及方法
CN106331674A (zh) * 2016-08-23 2017-01-11 深圳市捷视飞通科技股份有限公司 基于图像稀疏特征的立体视频显示方法及装置
CN104182954B (zh) * 2014-08-27 2017-04-19 中国科学技术大学 一种实时的多模态医学图像融合方法
CN106899810A (zh) * 2015-12-21 2017-06-27 中国矿业大学(北京) 一种矿井视频图像融合方法与装置
CN107301668A (zh) * 2017-06-14 2017-10-27 成都四方伟业软件股份有限公司 一种基于稀疏矩阵、卷积神经网络的图片压缩方法
CN107392975A (zh) * 2017-07-27 2017-11-24 神华集团有限责任公司 图像自适应多尺度分块压缩感知方法、电子设备
CN108510464A (zh) * 2018-01-30 2018-09-07 西安电子科技大学 基于分块观测的压缩感知网络及全图重构方法
WO2020172974A1 (zh) * 2019-02-25 2020-09-03 中国科学院自动化研究所 基于正交投影矩阵的人工神经网络优化方法、系统、装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008070544A2 (en) * 2006-12-01 2008-06-12 Harris Corporation Structured smoothing for superresolution of multispectral imagery based on registered panchromatic image
CN102096913A (zh) * 2011-01-25 2011-06-15 西安电子科技大学 压缩感知框架下的多策略图像融合方法
CN102254314A (zh) * 2011-07-17 2011-11-23 西安电子科技大学 基于压缩感知的可见光和红外图像融合方法
CN102722877A (zh) * 2012-06-07 2012-10-10 内蒙古科技大学 基于双通道pcnn的多聚焦图像融合方法
CN103164850A (zh) * 2013-03-11 2013-06-19 南京邮电大学 一种基于压缩感知的多聚焦图像融合方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2008070544A2 (en) * 2006-12-01 2008-06-12 Harris Corporation Structured smoothing for superresolution of multispectral imagery based on registered panchromatic image
CN102096913A (zh) * 2011-01-25 2011-06-15 西安电子科技大学 压缩感知框架下的多策略图像融合方法
CN102254314A (zh) * 2011-07-17 2011-11-23 西安电子科技大学 基于压缩感知的可见光和红外图像融合方法
CN102722877A (zh) * 2012-06-07 2012-10-10 内蒙古科技大学 基于双通道pcnn的多聚焦图像融合方法
CN103164850A (zh) * 2013-03-11 2013-06-19 南京邮电大学 一种基于压缩感知的多聚焦图像融合方法及装置

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
吴仰玉,纪峰,常霞,李翠: "图像融合研究新进展", 《科技创新导报》 *
李奕,尹贺峰,吴小俊: "融入压缩感知的脉冲耦合神经网络用于图像快速融合", 《光电子·激光》 *

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105099462A (zh) * 2014-05-22 2015-11-25 北京邮电大学 一种基于压缩感知的信号处理方法
CN105099462B (zh) * 2014-05-22 2018-08-03 北京邮电大学 一种基于压缩感知的信号处理方法
CN104182954B (zh) * 2014-08-27 2017-04-19 中国科学技术大学 一种实时的多模态医学图像融合方法
CN104732504A (zh) * 2015-01-23 2015-06-24 天津大学 基于压缩感知和wbct变换的图像融合方法
CN104504740A (zh) * 2015-01-23 2015-04-08 天津大学 压缩感知框架下的图像融合方法
CN104779960A (zh) * 2015-03-20 2015-07-15 南京邮电大学 一种基于分块压缩感知的信号重构方法
CN104779960B (zh) * 2015-03-20 2018-04-03 南京邮电大学 一种基于分块压缩感知的信号重构方法
CN106899810A (zh) * 2015-12-21 2017-06-27 中国矿业大学(北京) 一种矿井视频图像融合方法与装置
CN105915868A (zh) * 2016-04-22 2016-08-31 南京理工大学 基于扩展小波树的彩色成像系统及方法
CN105915869A (zh) * 2016-04-22 2016-08-31 南京理工大学 一种彩色自适应压缩计算鬼成像系统及方法
CN106331674A (zh) * 2016-08-23 2017-01-11 深圳市捷视飞通科技股份有限公司 基于图像稀疏特征的立体视频显示方法及装置
CN106331674B (zh) * 2016-08-23 2018-05-15 深圳市捷视飞通科技股份有限公司 基于图像稀疏特征的立体视频显示方法及装置
CN107301668A (zh) * 2017-06-14 2017-10-27 成都四方伟业软件股份有限公司 一种基于稀疏矩阵、卷积神经网络的图片压缩方法
CN107301668B (zh) * 2017-06-14 2019-03-15 成都四方伟业软件股份有限公司 一种基于稀疏矩阵、卷积神经网络的图片压缩方法
CN107392975A (zh) * 2017-07-27 2017-11-24 神华集团有限责任公司 图像自适应多尺度分块压缩感知方法、电子设备
CN107392975B (zh) * 2017-07-27 2021-02-09 神华集团有限责任公司 图像自适应多尺度分块压缩感知方法、电子设备
CN108510464A (zh) * 2018-01-30 2018-09-07 西安电子科技大学 基于分块观测的压缩感知网络及全图重构方法
CN108510464B (zh) * 2018-01-30 2021-11-30 西安电子科技大学 基于分块观测的压缩感知网络及全图重构方法
WO2020172974A1 (zh) * 2019-02-25 2020-09-03 中国科学院自动化研究所 基于正交投影矩阵的人工神经网络优化方法、系统、装置

Also Published As

Publication number Publication date
CN103559696B (zh) 2016-04-13

Similar Documents

Publication Publication Date Title
CN103559696A (zh) 一种基于压缩感知的图像融合方法
CN109741256B (zh) 基于稀疏表示和深度学习的图像超分辨率重建方法
Li et al. An efficient augmented Lagrangian method with applications to total variation minimization
CN104159003A (zh) 一种基于3d协同滤波与低秩矩阵重建的视频去噪方法及系统
CN104123705B (zh) 一种超分辨率重建图像质量Contourlet域评价方法
CN103037212B (zh) 基于视觉感知的自适应块压缩传感图像编码方法
CN108830823B (zh) 基于空域结合频域分析的全参考型图像质量评价方法
CN107154064B (zh) 基于深度稀疏编码的自然图像压缩感知重建方法
CN105243650A (zh) 一种基于小波变换和傅里叶变换的条纹噪声去除方法及系统
CN102882530A (zh) 一种压缩感知信号重构方法
CN106447632B (zh) 一种基于稀疏表示的raw图像去噪方法
CN109523513A (zh) 基于稀疏重建彩色融合图像的立体图像质量评价方法
CN106658004B (zh) 一种基于图像平坦区域特征的压缩方法和装置
CN104376565A (zh) 基于离散余弦变换和稀疏表示的无参考图像质量评价方法
CN104217449A (zh) 基于相关性向量分组的压缩感知图像重构方法
CN109978772A (zh) 基于深度学习与双域互补的压缩图像复原方法
CN113222812A (zh) 一种基于信息流加强深度展开网络的图像重建方法
Gao et al. Image compressive sensing reconstruction based on z-score standardized group sparse representation
CN111163314A (zh) 一种图像压缩方法及系统
CN103164850A (zh) 一种基于压缩感知的多聚焦图像融合方法及装置
CN104734724A (zh) 基于重加权拉普拉斯稀疏先验的高光谱图像压缩感知方法
CN111915518A (zh) 基于三重低秩模型的高光谱图像去噪方法
Fan et al. Image defogging algorithm based on sparse representation
CN103700074A (zh) 基于离散余弦变换系数分布的自适应压缩感知采样方法
CN104143203A (zh) 一种图像编辑传播方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20140205

Assignee: Jiangsu Nanyou IOT Technology Park Ltd.

Assignor: NANJING University OF POSTS AND TELECOMMUNICATIONS

Contract record no.: 2016320000218

Denomination of invention: Image fusion method based on compressed sensing

Granted publication date: 20160413

License type: Common License

Record date: 20161118

LICC Enforcement, change and cancellation of record of contracts on the licence for exploitation of a patent or utility model
EC01 Cancellation of recordation of patent licensing contract
EC01 Cancellation of recordation of patent licensing contract

Assignee: Jiangsu Nanyou IOT Technology Park Ltd.

Assignor: NANJING University OF POSTS AND TELECOMMUNICATIONS

Contract record no.: 2016320000218

Date of cancellation: 20180116

CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20160413

Termination date: 20210929