CN111862000A - 基于局部平均特征值的图像质量评价方法 - Google Patents

基于局部平均特征值的图像质量评价方法 Download PDF

Info

Publication number
CN111862000A
CN111862000A CN202010590625.3A CN202010590625A CN111862000A CN 111862000 A CN111862000 A CN 111862000A CN 202010590625 A CN202010590625 A CN 202010590625A CN 111862000 A CN111862000 A CN 111862000A
Authority
CN
China
Prior art keywords
image
dictionary
local average
matrix
image matrix
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010590625.3A
Other languages
English (en)
Other versions
CN111862000B (zh
Inventor
杨嘉琛
武建鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tianjin University
Original Assignee
Tianjin University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tianjin University filed Critical Tianjin University
Priority to CN202010590625.3A priority Critical patent/CN111862000B/zh
Publication of CN111862000A publication Critical patent/CN111862000A/zh
Application granted granted Critical
Publication of CN111862000B publication Critical patent/CN111862000B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/0002Inspection of images, e.g. flaw detection
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/21Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
    • G06F18/214Generating training patterns; Bootstrap methods, e.g. bagging or boosting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/28Determining representative reference patterns, e.g. by averaging or distorting; Generating dictionaries
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10024Color image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30168Image quality inspection

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • General Engineering & Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Quality & Reliability (AREA)
  • Image Analysis (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)

Abstract

本发明涉及一种基于局部平均特征值的图像质量评价方法,包括下列步骤:将图像的像素值进行归一化,得到归一化后的图像矩阵A,计算图像矩阵A局部平均特征值LME;从归一化得到的图像矩阵A中,计算其幅值、方差、熵和对比度即NSS特征,结合第一步得到的图像矩阵A的局部平均特征值,将所得到的各个特征用于稀疏字典学习;寻找与测试图片最接近和最稀疏的特征表示;学习到的稀疏表示系数将用于计算测试图片的质量Q。

Description

基于局部平均特征值的图像质量评价方法
技术领域
本发明属图像处理领域,涉及图像质量评价方法。
背景技术
随着互联网的飞速发展以及科学技术的日益提高,许多图像信息技术被广泛应用。然而日常生活中人们所接触到的图像,其在获取、处理、传输和接收的过程中,由于成像系统、处理方法、传输媒介和记录设备等不完善,加之物体运动、噪声污染等原因,都会不可避免地带来某些图像的失真和降质,从而影响人类对图像的感知,因此对图像进行质量评价就显得很重要,有必要了解图像的失真程度。例如,经过编码压缩后的失真图像,需要对其进行图像质量评价,以便调整相应的策略来更好地满足服务质量的需求。
根据参考图像的可用性,将图像质量评价(IQA)算法分为完全参考、减少参考(需要原始图像的完整或部分信息)和无参考操作IQA算法。由于失真图像的原始图像一般不存在,因此无参的质量评价是最实用的。目前质量评价的方法有许多,如可以从失真图像中提取自然场景统计特征,并将其用于分类失真类型,进而评估失真特性;还可以使用互反奇异值曲线的面积和曲率作为质量感知特征。CN201810297714.1从图像的灰度特征和纹理特征出发,综合地考察细小目标特征的探测情况,同时采用灰度和纹理两方面的特征来进行质量评价。CN201910350172.4提出一种基于信息熵的图像质量评价方法,用于解决现有的图像质量评价方法不能有效的评价多重失真以及去模糊失真类的图像的问题。CN201810759247.X基于非负矩阵分解的图像质量评价方法基础上,利用高斯混合模型刻画图像的统计分布特性,设计基于互信息的视觉内容权重,进行图像质量评价。虽然这些算法有良好的性能,但在无参质量评价方面仍有很大的发展空间,就目前的研究来看,将特征值用于图像质量评价的研究较少,因此本发明提出一种基于特征值的有效的无参质量评价方法。
发明内容
本发明的目的是提出一种基于局部平均特征值的图像质量评价方法,技术方案如下:
一种基于局部平均特征值的图像质量评价方法,包括下列步骤:
第一步:将图像的像素值进行归一化,得到归一化后的图像矩阵A,计算图像矩阵A局部平均特征值LMEs,LMEs的计算过程如下:将图像矩阵A进行分割,将其分割为N个S*S大小的小方阵,计算每个小方阵的S个特征值,然后求它们的平均值,即得到图像矩阵A的局部平均特征值;
第二步:从归一化得到的图像矩阵A中,计算其幅值、方差、熵和对比度即NSS特征,其中的NSS特征为从HSV色彩空间中计算分割后图像的对比度特征,结合第一步得到的图像矩阵A的局部平均特征值,将所得到的各个特征用于稀疏字典学习,对于稀疏字典学习,结合50%训练集的特征构造字典D,字典D可表示为:
Figure BDA0002555371940000021
其中D是一个M×N矩阵,M为特征数量,N是构造字典所使用的训练图像的数量,字典D的每个元素代表特征;
第三步:寻找与测试图片最接近和最稀疏的特征表示f=(f1,f2,...,fM),使用字典D求解下列公式:
Figure BDA0002555371940000022
公式(1)采用最小绝对收敛和选择算子求解,其中η*=(η1 *2 *,...,ηN *)是稀疏表示系数,RN代表R维实数空间,β为一个常数,用于平衡两项的权重;
第四步:学习到的稀疏表示系数将用于计算测试图片的质量Q,基于相同质量的图像具有相似特征的假设,质量分数的计算如下列公式所示:
Figure BDA0002555371940000023
其中Q表示所预测的图像质量分数,Q(i)字典中第i张图片的主观质量分数。
本发明基于图像的基本特性,由归一化后的灰色图像计算得到矩阵的局部平均特征值(LMEs),分析其与图像感知质量的相关性,然后提取NSS特征,接着使用LMEs和NSS特征进行简单的字典学习,最后计算预测的质量分数,进而对图像做出更加全面和准确的客观评价。
附图说明
图1本发明的方法流程图
图2特征值反映频率信息的对比图
图3 LMEs与DMOSs(差异平均意见得分)的关系图
具体实施方式
本发明首先由归一化后的图像矩阵,计算得到其局部平均特征值(LMEs),分析其与图像感知质量的相关性,然后计算图像矩阵的幅值、方差、熵和对比度(NSS特征),然后使用LMEs和计算得到的多种特征特征进行简单的字典学习,并计算预测的质量分数,进而对图像做出更加全面和准确的客观评价。实施方式如下:
1.基于局部平均特征值的图像质量评价方法,包括下列步骤:
第一步:将图像的像素值进行归一化,得到归一化后的图像矩阵A,计算其局部平均特征值(LMEs)。LMEs的计算过程如下:将图像矩阵进行分割,将其分割为N个S*S大小的小方阵,计算每个小方阵的S个特征值,然后求它们的平均值,即得到图像矩阵A的局部平均特征值。如果图像被JP2K、JPEG、高斯模糊和快衰落等内容相关失真(CDDs)处理,会在一定程度上失去结构信息和良好的纹理结构;另一方面,如果图像被白噪声等与内容无关的畸变(CIDs)所破坏,结构和纹理的复杂度将呈负相关增长,而图像的LMEs很好地反映了这些性质。
第二步:从归一化得到的图像中,计算其幅值、方差、熵和对比度(简称为NSS特征)。为了解决彩色失真问题,从HSV色彩空间中计算分割后图像的对比度特征。并结合第一步得到的局部特征值,将所得到的特征用于稀疏字典学习,对于稀疏字典学习,结合50%训练集的特征构造字典D。字典D可表示为:
Figure BDA0002555371940000031
其中D是一个M×N矩阵(M为特征数量,N是构造字典所使用的训练图像的数量),f代表特征。
第三步:寻找与测试图片最接近和最稀疏的特征表示f=(f1,f2,...,fM),使用字典求解下列公式。
Figure BDA0002555371940000032
公式(1)可采用最小绝对收敛和选择算子求解。其中η*=(η1 *2 *,...,ηN *)是稀疏表示系数,RN代表R维实数空间,β为一个常数,用于平衡两项的权重。
第四步:学习到的稀疏表示系数将用于计算测试图片的质量Q,基于相同质量的图像具有相似特征的假设,质量分数的计算如下列公式所示:
Figure BDA0002555371940000033
其中Q表示所预测的图像质量分数,Q(i)字典中第i张图片的主观质量分数。

Claims (1)

1.基于局部平均特征值的图像质量评价方法,包括下列步骤:
第一步:将图像的像素值进行归一化,得到归一化后的图像矩阵A,计算图像矩阵A局部平均特征值LMEs,LMEs的计算过程如下:将图像矩阵A进行分割,将其分割为N个S*S大小的小方阵,计算每个小方阵的S个特征值,然后求它们的平均值,即得到图像矩阵A的局部平均特征值。
第二步:从归一化得到的图像矩阵A中,计算其幅值、方差、熵和对比度即NSS特征,其中的NSS特征为从HSV色彩空间中计算分割后图像的对比度特征,结合第一步得到的图像矩阵A的局部平均特征值,将所得到的各个特征用于稀疏字典学习,对于稀疏字典学习,结合50%训练集的特征构造字典D,字典D可表示为:
Figure FDA0002555371930000011
其中D是一个M×N矩阵,M为特征数量,N是构造字典所使用的训练图像的数量,字典D的每个元素代表特征;
第三步:寻找与测试图片最接近和最稀疏的特征表示f=(f1,f2,...,fM),使用字典D求解下列公式:
Figure FDA0002555371930000012
公式(1)采用最小绝对收敛和选择算子求解,其中η*=(η1 *2 *,...,ηN *)是稀疏表示系数,RN代表R维实数空间,β为一个常数,用于平衡两项的权重;
第四步:学习到的稀疏表示系数将用于计算测试图片的质量Q,基于相同质量的图像具有相似特征的假设,质量分数的计算如下列公式所示:
Figure FDA0002555371930000013
其中Q表示所预测的图像质量分数,Q(i)字典中第i张图片的主观质量分数。
CN202010590625.3A 2020-06-24 2020-06-24 基于局部平均特征值的图像质量评价方法 Active CN111862000B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010590625.3A CN111862000B (zh) 2020-06-24 2020-06-24 基于局部平均特征值的图像质量评价方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010590625.3A CN111862000B (zh) 2020-06-24 2020-06-24 基于局部平均特征值的图像质量评价方法

Publications (2)

Publication Number Publication Date
CN111862000A true CN111862000A (zh) 2020-10-30
CN111862000B CN111862000B (zh) 2022-03-15

Family

ID=72988204

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010590625.3A Active CN111862000B (zh) 2020-06-24 2020-06-24 基于局部平均特征值的图像质量评价方法

Country Status (1)

Country Link
CN (1) CN111862000B (zh)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102945552A (zh) * 2012-10-22 2013-02-27 西安电子科技大学 基于自然场景统计中稀疏表示的无参考图像质量评价方法
CN105574901A (zh) * 2016-01-18 2016-05-11 浙江科技学院 一种基于局部对比度模式的通用无参考图像质量评价方法
WO2018058090A1 (en) * 2016-09-26 2018-03-29 University Of Florida Research Foundation Incorporated Method for no-reference image quality assessment
CN110706196A (zh) * 2018-11-12 2020-01-17 浙江工商职业技术学院 基于聚类感知的无参考色调映射图像质量评价算法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102945552A (zh) * 2012-10-22 2013-02-27 西安电子科技大学 基于自然场景统计中稀疏表示的无参考图像质量评价方法
CN105574901A (zh) * 2016-01-18 2016-05-11 浙江科技学院 一种基于局部对比度模式的通用无参考图像质量评价方法
WO2018058090A1 (en) * 2016-09-26 2018-03-29 University Of Florida Research Foundation Incorporated Method for no-reference image quality assessment
CN110706196A (zh) * 2018-11-12 2020-01-17 浙江工商职业技术学院 基于聚类感知的无参考色调映射图像质量评价算法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
FUCUI LI 等: "Local ans global sparse representation for no-reference quality assessment of stereoscopic", 《INFORMATION SCIENCE》 *
闫亚星: "基于稀疏表示的无参考图像质量评价方法及应用", 《中国优秀博硕士学位论文全文数据库(硕士) 信息科技辑》 *

Also Published As

Publication number Publication date
CN111862000B (zh) 2022-03-15

Similar Documents

Publication Publication Date Title
CN112767385B (zh) 基于显著性策略与特征融合无参考图像质量评价方法
CN109978854B (zh) 一种基于边缘与结构特征的屏幕内容图像质量评估方法
CN109754390B (zh) 一种基于混合视觉特征的无参考图像质量评价方法
CN110070539A (zh) 基于信息熵的图像质量评价方法
CN107948635B (zh) 一种基于退化测量的无参考声纳图像质量测评方法
CN110443800B (zh) 视频图像质量的评价方法
CN109788275A (zh) 自然性、结构和双目不对称无参考立体图像质量评价方法
CN104376565A (zh) 基于离散余弦变换和稀疏表示的无参考图像质量评价方法
CN108830829B (zh) 联合多种边缘检测算子的无参考质量评价算法
CN111047618B (zh) 基于多尺度的无参考屏幕内容图像质量评估方法
CN116309178A (zh) 一种基于自适应注意力机制网络的可见光图像去噪方法
Morzelona Human visual system quality assessment in the images using the IQA model integrated with automated machine learning model
CN108648180B (zh) 一种基于视觉多重特征深度融合处理的全参考图像质量客观评价方法
CN111862000B (zh) 基于局部平均特征值的图像质量评价方法
CN109447952B (zh) 一种基于Gabor差分盒加权维数的半参考型图像质量评价方法
CN108681684A (zh) 一种二维条码图像无参考质量评价方法及其装置、系统
Gaata et al. No-reference quality metric for watermarked images based on combining of objective metrics using neural network
Peng et al. Multiple levels perceptual noise backed visual information fidelity for picture quality assessment
CN106875383B (zh) 基于威布尔统计特征的内容不敏感模糊图像质量评价方法
CN108665433B (zh) 一种结合多种特征的无参考自然图像质量评价方法
CN115272203A (zh) 一种基于深度学习的无参考图像质量评价方法
CN112634278B (zh) 基于超像素的恰可察觉失真方法
CN111818329B (zh) 基于堆栈式自适应编码器的视频质量评价方法
CN115018723A (zh) 基于卷积神经网络且用于对模糊图像进行处理的方法
CN113920394B (zh) 一种无参考图像质量评价方法及其系统

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant