CN102436655A - 一种基于svd的超分辨率重建图像质量评价方法 - Google Patents
一种基于svd的超分辨率重建图像质量评价方法 Download PDFInfo
- Publication number
- CN102436655A CN102436655A CN2011102593629A CN201110259362A CN102436655A CN 102436655 A CN102436655 A CN 102436655A CN 2011102593629 A CN2011102593629 A CN 2011102593629A CN 201110259362 A CN201110259362 A CN 201110259362A CN 102436655 A CN102436655 A CN 102436655A
- Authority
- CN
- China
- Prior art keywords
- image
- sigma
- svd
- super
- images
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Processing (AREA)
- Image Analysis (AREA)
Abstract
一种基于SVD的超分辨率重建图像质量评价方法,先对两幅以上的LR图像进行配准以及SR重建得到SR图像,再分别对SR图像和配准后的LR图像进行计算,得到各自的灰度图、去均值图像和梯度图像,然后基于SVD计算各图像间的子评价结果,最后线性合成最终的SR图像质量评价结果SSQI,本发明基于SVD得到最终的SR图像质量评价结果,能够有效的评价SR重建图像的质量,还能够用于迭代性SR重建方法中,计算每一次迭代后重建图像质量提升了多少,从而可以有效的控制迭代次数,节约运算时间,以及用来分析某种SR算法提高原始LR图像分辨率的能力。
Description
技术领域
本发明涉及一种图像质量评价方法,具体涉及一种基于SVD的超分辨率重建图像质量评价方法。
背景技术
超分辨率(super resolution,SR)图像重建是通过图像处理的手段利用一幅或多幅从不同角度、不同位置、不同传感器得到的低分辨率(low resolution,LR)图像重建出一幅高分辨率(high resolution,HR)图像的方法。精确的图像配准是对多幅LR图像进行SR重建的关键。对于同一组LR图像,采用不同的配准算法或不同的SR重建算法所得到的HR图像质量是不同的,因此就需要建立一种机制对此类重建图像质量进行评价。
数字图像面临很多的降质因素,比如在获取、处理、存储、压缩、传输、重建图像等过程中都会使导致图像质量下降。人类可以通过眼睛观察这些图像而得到对它们质量的主观评价,但是这种主观评价的结果受观察者、图像类型和周围环境的影响比较大,而且需要统计大量的数据才有意义,具有耗时长、不方便、代价高的缺点。这表明设计一种与主观观察结果具有一致性的客观图像质量评价方法是很必要的。现有的客观评价方法按照是否需要理想参照图像可以分为三大类:全参考评价,半参考评价,无参考评价。
最简单、应用最广泛的全参考评价方法有MSE(mean squareerror),PSNR(peak signal-to-noise ratio),二者都是基于统计降质图像和理想参照图像之间的误差而进行质量评价的,但是它们的评价结果往往与人眼观察结果不一致。现有的无参考评价方法有基于熵、基于边缘图像的,它们主要度量在图像融合中有多少输入图像的信息传递到了最终的融合图像中。
上述评价方法都不适用于SR重建图像评价,因为SR图像重建中既没有原始的高分辨率图像又不是单纯的图像融合。常见的SR重建方法有IBP(iterative back projection),POCS(projection ontoconvex sets),MAP(maximum a posteriori)等,这些SR重建方法的基础是LR图像之间精确的亚像素级配准,即找到它们之间的变换关系。选取其中一幅LR图像作为参考图像,其余的称为输入图像,即选取第一幅LR图像y1为参考图像,则它们之间的关系可以描述为:
fm(ym)=f1(Tmy1)+e 2≤m≤p (1)
其中,e为误差项,ρ为LR图像数目,函数f代表图像灰度。配准过程即是求得输入图像与参考图像之间的变换参数,即变换矩阵Tm。配准参数的精度会直接影响SR重建图像的质量。
采用SVD得到SR图像质量评价结果(SSQI,SVD-based SRimage quality index),SVD能将任一实矩阵A分解为三个矩阵相乘A=USVT,其中,U,V都是正交矩阵,分别称为左特征矩阵和右特征矩阵,S=diag(s1,s2,...)为对角阵,其对角线上的值称为矩阵A的奇异值,该评价方法能够有效的衡量不同的配准精度对重建图像质量的影响,也能够反映出不同的SR重建方法对图像质量的影响。
目前还没有基于SVD的超分辨率重建图像质量评价方法。
发明内容
为了克服上述现有技术的缺点,本发明的目的在于提供一种基于SVD的超分辨率重建图像质量评价方法,能够有效的评价SR重建图像的质量,还能够用于控制迭代次数,节约运算时间,以及用来分析某种SR算法提高原始LR图像分辨率的能力。
为了达到上述目的,本发明采取的技术方案为:
一种基于SVD的超分辨率重建图像质量评价方法,包括以下步骤:
第一步,对两幅以上的LR图像进行配准以及SR重建得到SR图像;
第二步,分别对SR图像和配准后的LR图像进行计算,得到各自的灰度图、去均值图像和梯度图像;
第三步,基于SVD计算各图像间的子评价结果,即计算出SR图像与配准后的LR图像的灰度图的ILSg、去均值图像的ILSm和梯度图的ILSt,以及配准后的LR图像的灰度图的ILLg、去均值图像的ILLm和梯度图的ILLt,在计算时首先将各图像分割为8×8的图像块,先在局部范围内对图像质量进行评价,然后再综合形成一个全局的评价值,而且为了保证块与块之间的连续性,各图像块之间有3个像素的重叠区;
第四步,将各子评价结果线性合成为最终的SR图像质量评价结果SSQI,它是采用对应图像块奇异值差别来度量它们之间的信息差别。
所述的灰度图的ILSg、去均值图像的ILSm和梯度图的ILSt分别从亮度、对比度、边缘及纹理三个方面来度量LR图像和SR图像的关系,三者的定义如下:
其中,
Lk,k=1,2,…,p代表LR图像,H代表SR图像,w为图像块,W为图像块的集合,Q(Lk,H|w)在局部图像块范围内用奇异值的差别来衡量图像间的信息差别,分别是Lk图像和H图像中对应图像块的奇异值,n为奇异值的个数,α为w内不同的LR图像对评价结果ILS影响的权系数,η为不同的w对ILS影响的权系数,在计算时,将原LR图像放大至与SR图像同样的大小,由于放大图像完全由原图得到,所以这样并不影响图像的质量。
所述的灰度图的ILLg、去均值图像的ILLm和梯度图的ILLt分别从亮度、对比度、边缘及纹理三个方面度量了多幅LR图像间的关系:
(3)
其中,L1为参考图像,Lj j=2,…,p为输入图像,β是一个可以度量两个信号之间相似性的测度,分别是图像L1和Kj的均值和均方差,w为图像块,w为图像块的集合,Q是在局部图像块范围内用奇异值的差别来衡量图像间的信息差别,BLKNUM为图像所划分的图像块数目,C1、C2为常数。
所述的评价结果SSQI为一个整体评价结果,依照下式来计算:
SSQI=0.3ILHg+0.2ILLg+0.1(ILHm+ILLm)+0.15(ILHt+ILLt)
本发明基于SVD得到SR图像质量评价结果,能够有效的评价SR重建图像的质量,还能够用于迭代性SR重建方法中,计算每一次迭代后重建图像质量提升了多少,从而可以有效的控制迭代次数,节约运算时间,以及用来分析某种SR算法提高原始LR图像分辨率的能力。
附图说明
附图为本发明各图像间的子评价的示意图。
具体实施方式
下面结合附图对本发明做详细描述。
一种基于SVD的超分辨率重建图像质量评价方法,包括以下步骤:
第一步,对两幅以上的LR图像进行配准以及SR重建得到SR图像;
第二步,分别对SR图像和配准后的LR图像进行计算,得到各自的灰度图、去均值图像和梯度图像;
第三步,参照附图,基于SVD计算各图像间的子评价结果,即计算出SR图像与配准后的LR图像的灰度图的ILSg、去均值图像的ILSm和梯度图的ILSt,以及配准后的LR图像的灰度图的ILLg、去均值图像的ILLm和梯度图的ILLt,在计算时首先将各图像分割为8×8的图像块,先在局部范围内对图像质量进行评价,然后再综合形成一个全局的评价值,而且为了保证块与块之间的连续性,各图像块之间有3个像素的重叠区;
第四步,将各子评价结果合成最终的SR图像质量评价结果SSQI,它即采用对应图像块奇异值差别来度量它们之间的信息差别。
所述的灰度图的ILSg、去均值图像的ILSm和梯度图的ILSt分别从亮度、对比度、边缘及纹理三个方面来度量LR图像和SR图像的关系,三者的定义如下:
其中,
Lk,k=1,2,…,p代表LR图像,H代表SR图像,w为图像块,W为图像块的集合,Q(Lk,H|w)在局部图像块范围内用奇异值的差别来衡量图像间的信息差别,分别是Lk图像和H图像中对应图像块的奇异值,n为奇异值的个数,α为w内不同的LR图像对评价结果ILS影响的权系数,η为不同的w对ILS影响的权系数,在计算时,将原LR图像放大至与SR图像同样的大小,由于放大图像完全由原图得到,所以这样并不影响图像的质量。
所述的灰度图的ILLg、去均值图像的ILLm和梯度图的ILLt分别从亮度、对比度、边缘及纹理三个方面度量了多幅LR图像间的关系:
(3)
其中,L1为参考图像,Lj j=2,…,p为输入图像,β是一个可以度量两个信号之间相似性的测度,分别是图像L1和Lj的均值和均方差,w为图像块,w为图像块的集合,Q是在局部图像块范围内用奇异值的差别来衡量图像间的信息差别,BLKNUM为图像所划分的图像块数目,C1、C2为常数。
所述的评价结果SSQI为一个整体评价结果,依照下式来计算:
SSQI=0.3ILHg+0.2ILLg+0.1(ILHm+ILLm)+0.15(ILHt+ILLt)
本发明基于SVD得到SR图像质量评价结果,能够有效的评价SR重建图像的质量,还能够用于迭代性SR重建方法中,计算每一次迭代后重建图像质量提升了多少,从而可以有效的控制迭代次数,节约运算时间,以及用来分析某种SR算法提高原始LR图像分辨率的能力。
Claims (4)
1.一种基于SVD的超分辨率重建图像质量评价方法,其特征在于,包括以下步骤:
第一步,对两幅以上的LR图像进行配准以及SR重建得到SR图像;
第二步,分别对SR图像和配准后的LR图像进行计算,得到各自的灰度图、去均值图像和梯度图像;
第三步,基于SVD计算各图像间的子评价结果,即计算出SR图像与配准后的LR图像的灰度图的ILSg、去均值图像的ILSm和梯度图的ILSt,以及配准后的LR图像的灰度图的ILLg、去均值图像的ILLm和梯度图的ILLt,在计算时首先将各图像分割为8×8的图像块,先在局部范围内对图像质量进行评价,然后再综合形成一个全局的评价值,而且为了保证块与块之间的连续性,各图像块之间有3个像素的重叠区;
第四步,将各子评价结果线性合成最终的SR图像质量评价结果SSQI,它是采用对应图像块奇异值差别来度量它们之间的信息差别。
2.根据权利要求1所述的一种基于SVD的超分辨率重建图像质量评价方法,其特征在于:所述的灰度图的ILSg、去均值图像的ILSm和梯度图的ILSt分别从亮度、对比度、边缘及纹理三个方面来度量LR图像和SR图像的关系,三者的定义如下:
其中,
3.一种基于SVD的超分辨率重建图像质量评价方法,其特征在于:所述的灰度图的ILLg、去均值图像的ILLm和梯度图的ILLt分别从亮度、对比度、边缘及纹理三个方面度量了多幅LR图像间的关系:
(3)
其中,L1为参考图像,Lj j=2,…,p为输入图像,β是一个可以度量两个信号之间相似性的测度,分别是图像L1和Lj的均值和均方差,w为图像块,w为图像块的集合,Q是在局部图像块范围内用奇异值的差别来衡量图像间的信息差别,BLKNUM为图像所划分的图像块数目,C2、C2为常数。
4.一种基于SVD的超分辨率重建图像质量评价方法,其特征在于:所述的评价结果SSQI为一个整体评价结果,依照下式来计算:
SSQI=0.3ILHg+0.2ILLg+0.1(ILHm+ILLm)+0.15(ILHt+ILLt)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201110259362.9A CN102436655B (zh) | 2011-09-02 | 2011-09-02 | 一种基于svd的超分辨率重建图像质量评价方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201110259362.9A CN102436655B (zh) | 2011-09-02 | 2011-09-02 | 一种基于svd的超分辨率重建图像质量评价方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102436655A true CN102436655A (zh) | 2012-05-02 |
CN102436655B CN102436655B (zh) | 2014-01-15 |
Family
ID=45984697
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201110259362.9A Expired - Fee Related CN102436655B (zh) | 2011-09-02 | 2011-09-02 | 一种基于svd的超分辨率重建图像质量评价方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN102436655B (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104103065A (zh) * | 2013-04-10 | 2014-10-15 | 无锡金帆钻凿设备股份有限公司 | 一种基于奇异值分解无参考模糊图像质量评价方法 |
CN104123705B (zh) * | 2014-07-22 | 2016-08-24 | 北华大学 | 一种超分辨率重建图像质量Contourlet域评价方法 |
CN106570862A (zh) * | 2016-10-25 | 2017-04-19 | 中国人民解放军信息工程大学 | 一种超分辨率重建质量的评价方法及装置 |
CN106709945A (zh) * | 2017-01-09 | 2017-05-24 | 方玉明 | 一种对于超分辨率图像的质量评价方法 |
CN108550153A (zh) * | 2018-04-28 | 2018-09-18 | 福州大学 | 一种非整数插值图像的质量评价方法 |
CN109410177A (zh) * | 2018-09-28 | 2019-03-01 | 深圳大学 | 一种超分辨率图像的图像质量分析方法及系统 |
CN109636727A (zh) * | 2018-12-17 | 2019-04-16 | 辽宁工程技术大学 | 一种超分辨率重建影像空间分辨率评价方法 |
CN110415242A (zh) * | 2019-08-02 | 2019-11-05 | 中国人民解放军军事科学院国防科技创新研究院 | 一种基于参考图像的超分辨倍率评价方法 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1897634A (zh) * | 2006-06-08 | 2007-01-17 | 复旦大学 | 一种基于超复数奇异值分解的图像质量评估方法 |
CN101950422A (zh) * | 2010-09-29 | 2011-01-19 | 北京航空航天大学 | 一种基于奇异值分解的图像质量评价方法 |
-
2011
- 2011-09-02 CN CN201110259362.9A patent/CN102436655B/zh not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1897634A (zh) * | 2006-06-08 | 2007-01-17 | 复旦大学 | 一种基于超复数奇异值分解的图像质量评估方法 |
CN101950422A (zh) * | 2010-09-29 | 2011-01-19 | 北京航空航天大学 | 一种基于奇异值分解的图像质量评价方法 |
Non-Patent Citations (4)
Title |
---|
ALEKSANDR SHNAYDERMAN, ET AL: "An SVD-Based Grayscale Image Quality Measure for Local and Global Assessment", 《IEEE TRANSACTIONS ON IMAGE PROCESSING》 * |
DONG-O KIM, ET AL: "Gradient Information-Based Image Quality Metric", 《IEEE TRANSACTIONS ON CONSUMER ELECTRONICS》 * |
张志,等: "基于SIFT特征的多帧图像超分辨重建", 《中国图象图形学报》 * |
张飞艳,等: "基于视觉加权的奇异值分解压缩图像质量评价测度", 《电子与信息学报》 * |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104103065A (zh) * | 2013-04-10 | 2014-10-15 | 无锡金帆钻凿设备股份有限公司 | 一种基于奇异值分解无参考模糊图像质量评价方法 |
CN104123705B (zh) * | 2014-07-22 | 2016-08-24 | 北华大学 | 一种超分辨率重建图像质量Contourlet域评价方法 |
CN106570862B (zh) * | 2016-10-25 | 2020-02-21 | 中国人民解放军信息工程大学 | 一种超分辨率重建质量的评价方法及装置 |
CN106570862A (zh) * | 2016-10-25 | 2017-04-19 | 中国人民解放军信息工程大学 | 一种超分辨率重建质量的评价方法及装置 |
CN106709945A (zh) * | 2017-01-09 | 2017-05-24 | 方玉明 | 一种对于超分辨率图像的质量评价方法 |
CN106709945B (zh) * | 2017-01-09 | 2018-03-06 | 方玉明 | 一种对于超分辨率图像的质量评价方法 |
CN108550153A (zh) * | 2018-04-28 | 2018-09-18 | 福州大学 | 一种非整数插值图像的质量评价方法 |
CN108550153B (zh) * | 2018-04-28 | 2021-12-17 | 福州大学 | 一种非整数插值图像的质量评价方法 |
CN109410177A (zh) * | 2018-09-28 | 2019-03-01 | 深圳大学 | 一种超分辨率图像的图像质量分析方法及系统 |
CN109410177B (zh) * | 2018-09-28 | 2022-04-01 | 深圳大学 | 一种超分辨率图像的图像质量分析方法及系统 |
CN109636727A (zh) * | 2018-12-17 | 2019-04-16 | 辽宁工程技术大学 | 一种超分辨率重建影像空间分辨率评价方法 |
CN109636727B (zh) * | 2018-12-17 | 2022-11-15 | 辽宁工程技术大学 | 一种超分辨率重建影像空间分辨率评价方法 |
CN110415242A (zh) * | 2019-08-02 | 2019-11-05 | 中国人民解放军军事科学院国防科技创新研究院 | 一种基于参考图像的超分辨倍率评价方法 |
Also Published As
Publication number | Publication date |
---|---|
CN102436655B (zh) | 2014-01-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102436655B (zh) | 一种基于svd的超分辨率重建图像质量评价方法 | |
CN102144923B (zh) | 用于减小扩散成像中的失真的方法和磁共振设备 | |
CN102279375B (zh) | 用于降低在扩散成像中的失真的方法和磁共振设备 | |
US7646938B2 (en) | Method and system for super-resolution of confocal images acquired through an image guide, and device used for implementing such a method | |
CN106204447A (zh) | 基于总变差分和卷积神经网络的超分辨率重建方法 | |
CN106709958A (zh) | 一种基于灰度梯度和颜色直方图的图像质量评价方法 | |
CN102547368B (zh) | 一种立体图像质量客观评价方法 | |
CN107451956B (zh) | 一种编码孔径光谱成像系统的重构方法 | |
CN107464222B (zh) | 基于张量空间的无参考高动态范围图像客观质量评价方法 | |
CN103793883B (zh) | 一种基于主成分分析的成像光谱图像超分辨率复原方法 | |
CN102572499B (zh) | 基于小波变换多分辨率预测的无参考图像质量评价方法 | |
WO2019153659A1 (zh) | 一种新型的非线性并行重建的磁共振成像方法、装置及介质 | |
Vu et al. | Perception-enhanced image super-resolution via relativistic generative adversarial networks | |
CN104635188A (zh) | K空间重建方法及磁共振成像方法 | |
CN104376550A (zh) | 基于含积分的平差模型的超分辨率图像重建方法 | |
CN101183460B (zh) | 彩色图像背景杂波量化方法 | |
CN105976351A (zh) | 基于中央偏移的立体图像质量评价方法 | |
CN105931242B (zh) | 基于字典学习和时间梯度的动态核磁共振图像重建方法 | |
Han et al. | Structural information-based image quality assessment using LU factorization | |
CN106683084B (zh) | 一种基于行间像偏移估计的tdi图像形变程度客观评价方法 | |
CN115578255A (zh) | 一种基于帧间亚像素块匹配的超分辨率重建方法 | |
CN103020936B (zh) | 一种人脸图像超分辨率重构方法 | |
CN104337517B (zh) | 功能磁共振成像方法和装置 | |
CN106530253B (zh) | 一种sar图像压缩感知重建样本的构建方法 | |
CN106920213B (zh) | 一种高分辨率图像的获取方法及系统 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20140115 Termination date: 20180902 |