CN105574885A - 基于机器学习并融合视觉特征的全参考图像质量评估方法 - Google Patents

Abstract

本发明涉及一种基于机器学习并融合视觉特征的全参考图像质量评估方法，包括以下步骤：分别采用客观全参考图像质量评估方法、结合图像显著性分布的客观全参考图像质量评估方法、结合局部图像质量排序的客观全参考图像质量评估方法、结合局部图像质量数据统计的客观全参考图像质量评估方法对目标图像提取特征，获得特征集F1、F2、F3和F4；综合特征集F1、F2、F3和F4，将其作为机器学习算法的特征集T，通过机器学习算法和三等分交叉验证方法学习得出客观评估模型；采用客观评估模型对图像进行质量评估，得到客观全参考图像质量评估得分值。该方法可有效的对全参考图像的质量进行评估，与用户主观评分之间具有较好的相关性与准确性。

Description

基于机器学习并融合视觉特征的全参考图像质量评估方法

技术领域

本发明涉及图像处理及计算机视觉技术领域，特别是一种与主观感知相一致的基于机器学习并融合视觉特征的全参考图像质量评估方法。

背景技术

在大多数现代图像处理系统中图像质量评价成为一个极为重要的组成部分，图像质量的评估成为图像处理、计算机视觉领域的一个基本而又具有重要意义的问题。

图像质量评估可以分为主观评价方法和客观评价方法。主观方法即人直接观察图像，通过评分评判图像质量。但主观评价的方法难以用数学模型表达并加以应用。所以一般使用建立模型的客观评估方法评价图像质量。客观图像质量评价的最初研究专注于纯数学指标上，基于数学统计这一性质，这个数学指标则是基于两个图像之间的量化误差。SNR、PSNR和MSE是其中的先驱。尽管拥有简单和方便的优点，但这些方法与主观评估并无太大关联，这些算法的局限性也被后续的文章证实了。因此，Mitsa和Varkur提出了加权派生的SNR(WSNR)，之后NQM及一些其他指标也相继提出。

之后人们从人类视觉系统(HumanVisualSystem,HVS)的角度出发，Wang和Bovik于2002年提出HVS可以被分解成三个独立通道：亮度、对比度和结构，他们主张，人眼通过这三个通道获取图像信息，UQI和SSIM正是基于HVS特性中的这三个组成通道构造得到的。Wang之后又提出三种SSIM变体，包括multi-scaleSSIM(MS-SSIM)、theSSIMwithautomaticdown-sampling(MSSIM)和wavelets-SSIM；

2004年之后，多种指标相继被提出，包括VIF、VIFP、M-SVD、VSNR、R-SVD、RFSIM、PSNRHVS、PSNRHVSM等。

客观全参考图像质量评估方法是目前发展程度最为成熟的方法。从最原始的数学偏差方法到加入对人类视觉系统的考虑，各种方法分别从不同的角度出发，试图建立一个能够将图像量化值映射到与人的主观感受的模型。随着人们对HVS的研究不断深入，越来越多的与主观感知相关的特征被发现，可见，人眼主观感知并不单一地与某个特征关联，可能与多个特征都存在关联。同样的，我们想到将各个与主观感知有关联的特征都纳入考虑，能够结合这些特征的优点，去构建一个与主观感知最一致的模型。

发明内容

有鉴于此，本发明的目的是提供一种与主观感知相一致的基于机器学习并融合视觉特征的全参考图像质量评估方法，该方法能够使评估结果与用户主观感知之间具有较好的相关性和准确性。

本发明采用以下方案实现：一种基于机器学习并融合视觉特征的全参考图像质量评估方法，包括以下步骤：

步骤S1：输入参考图像和目标图像，目标图像即为失真图像，基于客观全参考图像质量评估方法对目标图像进行特征提取，获得特征集F1；

步骤S2：采用结合图像显著性分布的客观全参考图像质量评估方法进行特征提取，获得特征集F2；

步骤S3：采用结合局部图像质量排序的客观全参考图像质量评估方法进行特征提取，获得特征集F3；

步骤S4：采用结合局部图像质量数据统计的客观全参考图像质量评估方法进行特征提取，获得特征集F4；

步骤S5：综合特征集F1、F2、F3和F4，将其作为机器学习算法的特征集T，并通过机器学习算法和三等分交叉验证方法学习得出客观评估模型；

步骤S6：采用客观评估模型对图像进行质量评估，得到最终的客观全参考图像质量评估得分值。

进一步地，在步骤S1中，基于客观全参考图像质量评估方法对目标图像进行特征提取的具体方法为：采用10种客观全参考图像质量评估方法FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、VSI、MAD、PSNRHA和PSNRHMA对目标图像进行质量评估，生成10个对应的特征值：F1₁、F1₂、…、F1₁₀，组成特征集F1={F1₁,F1₂,…,F1₁₀}。

进一步地，在步骤S2中，采用结合图像显著性分布的客观全参考图像质量评估方法进行特征提取，具体包括以下步骤：

步骤S21：采用图像显著区域检测算法GS，获得参考图像的显著性图W(i,j);

步骤S22：分别采用FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、MAD、PSNRHA和PSNRHMA算法计算结合图像显著性分布的客观全参考图像质量评估特征，计算公式为：

其中，k=1,2,…,9，F2₁、F2₂、…、F2₉分别表示FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、MAD、PSNRHA和PSNRHMA算法结合图像显著性分布计算得到的特征值，W(i,j)表示GS算法计算得到的像素(i,j)的显著性值，i=1,2,…,p，j=1,2,…,q，p、q分别表示图像的高度和宽度，S₁(i,j)、S₂(i,j)、…、S₉(i,j)分别表示FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、MAD、PSNRHA和PSNRHMA算法计算得到的像素(i,j)的评估值；

VSI算法已考虑显著性图对图像质量的影响，故只采用上述9种算法进行计算，得到9个融合显著性的客观全参考图像质量评估特征值：F2₁、F2₂、…、F2₉，组成特征集F2={F2₁,F2₂,…,F2₉}。

进一步地，在步骤S3中，采用结合局部图像质量排序的客观全参考图像质量评估方法进行特征提取的具体方法为：

根据特征计算过程中是否需要与整个图像相关数据分两类方法计算图像局部区域特征：

1）对于不需要与整个图像相关数据的FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、VSI和MAD算法，将每种客观全参考图像质量评估方法计算得到的每个像素的评估值S_m(i,j)表示成一幅评估值图像，m表示所使用的客观全参考图像质量评估方法，在步骤1）中，m=1,2,…,8，分别对应FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、VSI和MAD算法，然后将所述评估值图像均匀划分为n*n个网格区域，根据评估值图像计算每个网格区域的质量，并按照每个网格区域的质量从差到好的顺序排列后得到n*n个特征值：F3_m ¹、F3_m ²、…、F3_m ^n*n，每种客观全参考图像质量评估方法组成结合局部图像质量排序的特征集F3_m={F3_m ¹,F3_m ²,…,F3_m ^n*n}；

2）对于需要与整个图像相关数据的PSNRHA和PSNRHMA算法，将参考图像和失真图像均匀划分为n*n的网格，将得到的每个网格内的子图像使用客观全参考图像质量评估方法计算其质量，同样按照每个网格区域的质量从差到好的顺序排列后得到n*n个特征值：F3_m ¹、F3_m ²、…、F3_m ^n*n，每种客观全参考图像质量评估方法组成结合局部图像质量排序的特征集F3_m={F3_m ¹,F3_m ²,…,F3_m ^n*n}，在步骤2）中，m=9,10，分别对应PSNRHA和PSNRHMA算法；

3）然后利用得到的10种客观全参考图像质量评估方法的结合局部图像质量排序的特征集组合得到特征集F3，F3={F3₁,F3₂,…,F3₁₀}。

进一步地，在步骤S4中，采用结合局部图像质量数据统计的客观全参考图像质量评估方法进行特征提取，具体包括以下步骤：

步骤S41：基于步骤S3得到的n*n个网格区域，计算每种客观全参考图像质量评估方法对应的n*n个结合局部图像质量数据统计的客观全参考图像质量评估特征值：F3_m ¹、F3_m ²、…、F3_m ^n*n，在步骤S4中，由于质量非常差的局部区域的大小未知，采用多个图像划分粒度，n取值5,7,11，m表示所使用的客观全参考图像质量评估方法；

步骤S42：按照下列公式计算最差局部区域质量：

max、min分别表示取最大、最小值的函数；

步骤S43：按照下列公式计算最好质量和最差质量之间的跨度：

步骤S44：按照下列公式计算局部区域质量的标准方差：

std表示计算标准方差的函数；

得到结合局部图像质量数据统计的客观全参考图像质量评估特征集：F4={F4₁ ⁵¹,F4₁ ⁵²,F4₁ ⁵³,F4₁ ⁷¹,F4₁ ⁷²,F4₁ ⁷³,F4₁ ¹¹¹,F4₁ ¹¹²,F4₁ ¹¹³,…,F4₁₀ ⁵¹,F4₁₀ ⁵²,F4₁₀ ⁵³,F4₁₀ ⁷¹,F4₁₀ ⁷²,F4₁₀ ⁷³,F4₁₀ ¹¹¹,F4₁₀ ¹¹²,F4₁₀ ¹¹³}。

进一步地，在步骤S5中，综合特征集F1、F2、F3和F4，将其作为机器学习算法的特征集T，并通过机器学习算法和三等分交叉验证方法学习得出客观评估模型，具体包括以下步骤：

步骤S51：组成特征集T={F1,F2,F3,F4}，并将特征集T随机三等分，形成三个特征集T₁、T₂和T₃；

步骤S52：计算用于求解特征集T₁、T₂和T₃所对应的图像集的主观平均得分值MOS的集合，分别记为MOS₁、MOS₂和MOS₃；

步骤S53：将T₁、T₂和MOS₁、MOS₂作为机器学习的训练数据集，学习得到图像质量评估模型M₁；

步骤S54：重复步骤S53，分别求出T₁、T₃和MOS₁、MOS₃作为训练数据集的图像质量评估模型M₂与T₂、T₃和MOS₂、MOS₃作为训练数据集的图像质量评估模型M₃。

进一步地，在步骤S6中，采用客观评估模型对图像进行质量评估，得到最终的客观全参考图像质量评估得分值，具体包括以下步骤：

步骤S61：采用模型M₁对特征集T₃进行计算，得到特征集T₃对应的图像集的客观全参考图像质量评估得分值集合AS₁；

步骤S62：采用模型M₂对特征集T₂进行计算，得到特征集T₂对应的图像集的客观全参考图像质量评估得分值集合AS₂；

步骤S63：采用模型M₃对特征集T₁进行计算，得到特征集T₁对应的图像集的客观全参考图像质量评估得分值集合AS₃；

步骤S64：综合评估得分值集合AS={AS₁,AS₂,AS₃}，得到最终的客观全参考图像质量评估得分值集合AS。

相较于现有技术，本发明的有益效果是：本方法通过使用机器学习的方法，利用机器学习的特性，挖掘各个特征与主观感知的关联性，集合各个算法的优点，获得一个性能更优秀的全参考图像评估模型。同时，为进一步降低主观感知和客观评估之间的差异，本方法集成了更多的视觉特征，包括图像内容的显著性分布、图像局部区域质量的排序和数值统计特征。综上，本发明的方法能够更有效的对图像的质量进行评估。

附图说明

图1是本发明实施例的实现流程图。

图2是本发明实施例中步骤S1、S2、S3和S4的实现流程图。

图3是本发明实施例中步骤S5和S6的实现流程图。

具体实施方式

下面结合附图及实施例对本发明做进一步说明。

本发明提供一种基于机器学习并融合视觉特征的全参考图像质量评估方法，如图1所示，包括以下步骤：

步骤S1：输入参考图像和目标图像，目标图像即为失真图像，基于客观全参考图像质量评估方法对目标图像进行特征提取，获得特征集F1。

在本实施例中，如图2所示，基于客观全参考图像质量评估方法对目标图像进行特征提取的具体方法为：采用10种客观全参考图像质量评估方法FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、VSI、MAD、PSNRHA和PSNRHMA对目标图像进行质量评估，生成10个对应的特征值：F1₁、F1₂、…、F1₁₀，组成特征集F1={F1₁,F1₂,…,F1₁₀}。

步骤S2：采用结合图像显著性分布的客观全参考图像质量评估方法进行特征提取，获得特征集F2。

在本实施例中，如图2所示，采用结合图像显著性分布的客观全参考图像质量评估方法进行特征提取，具体包括以下步骤：

步骤S21：采用图像显著区域检测算法GS，获得参考图像的显著性图W(i,j);

步骤S22：分别采用FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、MAD、PSNRHA和PSNRHMA算法计算结合图像显著性分布的客观全参考图像质量评估特征，计算公式为：

其中，k=1,2,…,9，F2₁、F2₂、…、F2₉分别表示FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、MAD、PSNRHA和PSNRHMA算法结合图像显著性分布计算得到的特征值，W(i,j)表示GS算法计算得到的像素(i,j)的显著性值，i=1,2,…,p，j=1,2,…,q，p、q分别表示图像的高度和宽度，S₁(i,j)、S₂(i,j)、…、S₉(i,j)分别表示FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、MAD、PSNRHA和PSNRHMA算法计算得到的像素(i,j)的评估值；

VSI算法已考虑显著性图对图像质量的影响，故只采用上述9种算法进行计算，得到9个融合显著性的客观全参考图像质量评估特征值：F2₁、F2₂、…、F2₉，组成特征集F2={F2₁,F2₂,…,F2₉}。

步骤S3：采用结合局部图像质量排序的客观全参考图像质量评估方法进行特征提取，获得特征集F3。

在本实施例中，如图2所示，采用结合局部图像质量排序的客观全参考图像质量评估方法进行特征提取的具体方法为：

根据特征计算过程中是否需要与整个图像相关数据分两类方法计算图像局部区域特征：

1）对于不需要与整个图像相关数据的FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、VSI和MAD算法，将每种客观全参考图像质量评估方法计算得到的每个像素的评估值S_m(i,j)表示成一幅评估值图像，m表示所使用的客观全参考图像质量评估方法，在步骤1）中，m=1,2,…,8，分别对应FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、VSI和MAD算法，然后将所述评估值图像均匀划分为n*n个网格区域，根据评估值图像计算每个网格区域的质量，并按照每个网格区域的质量从差到好的顺序排列后得到n*n个特征值：F3_m ¹、F3_m ²、…、F3_m ^n*n，每种客观全参考图像质量评估方法组成结合局部图像质量排序的特征集F3_m={F3_m ¹,F3_m ²,…,F3_m ^n*n}；

2）对于需要与整个图像相关数据的PSNRHA和PSNRHMA算法，将参考图像和失真图像均匀划分为n*n的网格，在本实施例中我们取n=3，将得到的每个网格内的子图像使用客观全参考图像质量评估方法计算其质量，同样按照每个网格区域的质量从差到好的顺序排列后得到n*n个特征值：F3_m ¹、F3_m ²、…、F3_m ^n*n，每种客观全参考图像质量评估方法组成结合局部图像质量排序的特征集F3_m={F3_m ¹,F3_m ²,…,F3_m ^n*n}，在步骤2）中，m=9,10，分别对应PSNRHA和PSNRHMA算法；

3）然后利用得到的10种客观全参考图像质量评估方法的结合局部图像质量排序的特征集组合得到特征集F3，F3={F3₁,F3₂,…,F3₁₀}。

步骤S4：采用结合局部图像质量数据统计的客观全参考图像质量评估方法进行特征提取，获得特征集F4。

在本实施例中，如图2所示，采用结合局部图像质量数据统计的客观全参考图像质量评估方法进行特征提取，具体包括以下步骤：

步骤S41：基于步骤S3得到的n*n个网格区域，计算每种客观全参考图像质量评估方法对应的n*n个结合局部图像质量数据统计的客观全参考图像质量评估特征值：F3_m ¹、F3_m ²、…、F3_m ^n*n，在步骤S4中，由于质量非常差的局部区域的大小未知，采用多个图像划分粒度，n取值5,7,11，m表示所使用的客观全参考图像质量评估方法；

步骤S42：按照下列公式计算最差局部区域质量：

max、min分别表示取最大、最小值的函数；

步骤S43：按照下列公式计算最好质量和最差质量之间的跨度：

步骤S44：按照下列公式计算局部区域质量的标准方差：

std表示计算标准方差的函数；

得到结合局部图像质量数据统计的客观全参考图像质量评估特征集：F4={F4₁ ⁵¹,F4₁ ⁵²,F4₁ ⁵³,F4₁ ⁷¹,F4₁ ⁷²,F4₁ ⁷³,F4₁ ¹¹¹,F4₁ ¹¹²,F4₁ ¹¹³,…,F4₁₀ ⁵¹,F4₁₀ ⁵²,F4₁₀ ⁵³,F4₁₀ ⁷¹,F4₁₀ ⁷²,F4₁₀ ⁷³,F4₁₀ ¹¹¹,F4₁₀ ¹¹²,F4₁₀ ¹¹³}。

步骤S5：综合特征集F1、F2、F3和F4，将其作为机器学习算法的特征集T，并通过机器学习算法和三等分交叉验证方法学习得出客观评估模型。

在本实施例中，如图3所示，综合特征集F1、F2、F3和F4，将其作为机器学习算法的特征集T，并通过机器学习算法和三等分交叉验证方法学习得出客观评估模型，具体包括以下步骤：

步骤S51：组成特征集T={F1,F2,F3,F4}，并将特征集T随机三等分，形成三个特征集T₁、T₂和T₃；

步骤S52：计算用于求解特征集T₁、T₂和T₃所对应的图像集的主观平均得分值MOS的集合，分别记为MOS₁、MOS₂和MOS₃；

步骤S53：将T₁、T₂和MOS₁、MOS₂作为机器学习的训练数据集，学习得到图像质量评估模型M₁；本发明采用RandomForestRegression(RFR)机器学习方法进行评估模型的学习；

步骤S54：重复步骤S53，分别求出T₁、T₃和MOS₁、MOS₃作为训练数据集的图像质量评估模型M₂与T₂、T₃和MOS₂、MOS₃作为训练数据集的图像质量评估模型M₃。M₁、M₂、M₂即为客观评估模型。

步骤S6：采用客观评估模型对图像进行质量评估，得到最终的客观全参考图像质量评估得分值。

在本实施例中，如图3所示，采用客观评估模型对图像进行质量评估，得到最终的客观全参考图像质量评估得分值，具体包括以下步骤：

步骤S61：采用模型M₁对特征集T₃进行计算，得到特征集T₃对应的图像集的客观全参考图像质量评估得分值集合AS₁；

步骤S62：采用模型M₂对特征集T₂进行计算，得到特征集T₂对应的图像集的客观全参考图像质量评估得分值集合AS₂；

步骤S63：采用模型M₃对特征集T₁进行计算，得到特征集T₁对应的图像集的客观全参考图像质量评估得分值集合AS₃；

步骤S64：综合评估得分值集合AS={AS₁,AS₂,AS₃}，得到最终的客观全参考图像质量评估得分值集合AS。

本发明基于机器学习并融合视觉特征的全参考图像质量评估方法，借鉴已有的具有代表性的客观图像质量评估方法，得到基于客观图像质量评估方法的特征，然后结合人眼对图像内容的显著性分布、局部图像质量的排序和统计数据，从图像中提取与图像质量有关联的一系列特征，作为机器学习方法的特征，利用机器学习的特性，挖掘各个成分与人眼的主观感知之间的关联，设计并得到一个能够集合各个方法优点的客观全参考图像质量评估方法。首先我们获得目标图像的四类特征，利用训练出来的回归模型获得图像质量的预测评估值。所述方法能够有效的对图像质量进行评估，评估结果与用户主观评估得分值保持较好的一致性，具有较高的相关性和准确性。

以上是本发明的较佳实施例，凡依本发明技术方案所作的改变，所产生的功能作用未超出本发明技术方案的范围时，均属于本发明的保护范围。

Claims (7)

1.一种基于机器学习并融合视觉特征的全参考图像质量评估方法，其特征在于，包括以下步骤：

步骤S1：输入参考图像和目标图像，目标图像即为失真图像，基于客观全参考图像质量评估方法对目标图像进行特征提取，获得特征集F1；

步骤S2：采用结合图像显著性分布的客观全参考图像质量评估方法进行特征提取，获得特征集F2；

步骤S3：采用结合局部图像质量排序的客观全参考图像质量评估方法进行特征提取，获得特征集F3；

步骤S4：采用结合局部图像质量数据统计的客观全参考图像质量评估方法进行特征提取，获得特征集F4；

步骤S5：综合特征集F1、F2、F3和F4，将其作为机器学习算法的特征集T，并通过机器学习算法和三等分交叉验证方法学习得出客观评估模型；

步骤S6：采用客观评估模型对图像进行质量评估，得到最终的客观全参考图像质量评估得分值。

2.根据权利要求1所述的基于机器学习并融合视觉特征的全参考图像质量评估方法，其特征在于，在步骤S1中，基于客观全参考图像质量评估方法对目标图像进行特征提取的具体方法为：采用10种客观全参考图像质量评估方法FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、VSI、MAD、PSNRHA和PSNRHMA对目标图像进行质量评估，生成10个对应的特征值：F1₁、F1₂、…、F1₁₀，组成特征集F1={F1₁,F1₂,…,F1₁₀}。

3.根据权利要求1所述的基于机器学习并融合视觉特征的全参考图像质量评估方法，其特征在于，在步骤S2中，采用结合图像显著性分布的客观全参考图像质量评估方法进行特征提取，具体包括以下步骤：

步骤S21：采用图像显著区域检测算法GS，获得参考图像的显著性图W(i,j);

步骤S22：分别采用FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、MAD、PSNRHA和PSNRHMA算法计算结合图像显著性分布的客观全参考图像质量评估特征，计算公式为：

其中，k=1,2,…,9，F2₁、F2₂、…、F2₉分别表示FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、MAD、PSNRHA和PSNRHMA算法结合图像显著性分布计算得到的特征值，W(i,j)表示GS算法计算得到的像素(i,j)的显著性值，i=1,2,…,p，j=1,2,…,q，p、q分别表示图像的高度和宽度，S₁(i,j)、S₂(i,j)、…、S₉(i,j)分别表示FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、MAD、PSNRHA和PSNRHMA算法计算得到的像素(i,j)的评估值；

VSI算法已考虑显著性图对图像质量的影响，故只采用上述9种算法进行计算，得到9个融合显著性的客观全参考图像质量评估特征值：F2₁、F2₂、…、F2₉，组成特征集F2={F2₁,F2₂,…,F2₉}。

4.根据权利要求1所述的基于机器学习并融合视觉特征的全参考图像质量评估方法，其特征在于，在步骤S3中，采用结合局部图像质量排序的客观全参考图像质量评估方法进行特征提取的具体方法为：

根据特征计算过程中是否需要与整个图像相关数据分两类方法计算图像局部区域特征：

1）对于不需要与整个图像相关数据的FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、VSI和MAD算法，将每种客观全参考图像质量评估方法计算得到的每个像素的评估值S_m(i,j)表示成一幅评估值图像，m表示所使用的客观全参考图像质量评估方法，在步骤1）中，m=1,2,…,8，分别对应FSIM、FSIMc、PSNR、PSNRc、PSNRHVS、SSIM、VSI和MAD算法，然后将所述评估值图像均匀划分为n*n个网格区域，根据评估值图像计算每个网格区域的质量，并按照每个网格区域的质量从差到好的顺序排列后得到n*n个特征值：F3_m ¹、F3_m ²、…、F3_m ^n*n，每种客观全参考图像质量评估方法组成结合局部图像质量排序的特征集F3_m={F3_m ¹,F3_m ²,…,F3_m ^n*n}；

2）对于需要与整个图像相关数据的PSNRHA和PSNRHMA算法，将参考图像和失真图像均匀划分为n*n的网格，将得到的每个网格内的子图像使用客观全参考图像质量评估方法计算其质量，同样按照每个网格区域的质量从差到好的顺序排列后得到n*n个特征值：F3_m ¹、F3_m ²、…、F3_m ^n*n，每种客观全参考图像质量评估方法组成结合局部图像质量排序的特征集F3_m={F3_m ¹,F3_m ²,…,F3_m ^n*n}，在步骤2）中，m=9,10，分别对应PSNRHA和PSNRHMA算法；

3）然后利用得到的10种客观全参考图像质量评估方法的结合局部图像质量排序的特征集组合得到特征集F3={F3₁,F3₂,…,F3₁₀}。

5.根据权利要求4所述的基于机器学习并融合视觉特征的全参考图像质量评估方法，其特征在于，在步骤S4中，采用结合局部图像质量数据统计的客观全参考图像质量评估方法进行特征提取，具体包括以下步骤：

步骤S41：基于步骤S3得到的n*n个网格区域，计算每种客观全参考图像质量评估方法对应的n*n个结合局部图像质量数据统计的客观全参考图像质量评估特征值：F3_m ¹、F3_m ²、…、F3_m ^n*n，在步骤S4中，由于质量非常差的局部区域的大小未知，采用多个图像划分粒度，n取值5,7,11，m表示所使用的客观全参考图像质量评估方法；

步骤S42：按照下列公式计算最差局部区域质量：

max、min分别表示取最大、最小值的函数；

步骤S43：按照下列公式计算最好质量和最差质量之间的跨度：

步骤S44：按照下列公式计算局部区域质量的标准方差：

std表示计算标准方差的函数；

得到结合局部图像质量数据统计的客观全参考图像质量评估特征集：F4={F4₁ ⁵¹,F4₁ ⁵²,F4₁ ⁵³,F4₁ ⁷¹,F4₁ ⁷²,F4₁ ⁷³,F4₁ ¹¹¹,F4₁ ¹¹²,F4₁ ¹¹³,…,F4₁₀ ⁵¹,F4₁₀ ⁵²,F4₁₀ ⁵³,F4₁₀ ⁷¹,F4₁₀ ⁷²,F4₁₀ ⁷³,F4₁₀ ¹¹¹,F4₁₀ ¹¹²,F4₁₀ ¹¹³}。

6.根据权利要求1所述的基于机器学习并融合视觉特征的全参考图像质量评估方法，其特征在于，在步骤S5中，综合特征集F1、F2、F3和F4，将其作为机器学习算法的特征集T，并通过机器学习算法和三等分交叉验证方法学习得出客观评估模型，具体包括以下步骤：

步骤S51：组成特征集T={F1,F2,F3,F4}，并将特征集T随机三等分，形成三个特征集T₁、T₂和T₃；

步骤S52：计算用于求解特征集T₁、T₂和T₃所对应的图像集的主观平均得分值MOS的集合，分别记为MOS₁、MOS₂和MOS₃；

步骤S53：将T₁、T₂和MOS₁、MOS₂作为机器学习的训练数据集，学习得到图像质量评估模型M₁；

步骤S54：重复步骤S53，分别求出T₁、T₃和MOS₁、MOS₃作为训练数据集的图像质量评估模型M₂与T₂、T₃和MOS₂、MOS₃作为训练数据集的图像质量评估模型M₃。

7.根据权利要求1所述的基于机器学习并融合视觉特征的全参考图像质量评估方法，其特征在于，在步骤S6中，采用客观评估模型对图像进行质量评估，得到最终的客观全参考图像质量评估得分值，具体包括以下步骤：

步骤S61：采用模型M₁对特征集T₃进行计算，得到特征集T₃对应的图像集的客观全参考图像质量评估得分值集合AS₁；

步骤S62：采用模型M₂对特征集T₂进行计算，得到特征集T₂对应的图像集的客观全参考图像质量评估得分值集合AS₂；

步骤S63：采用模型M₃对特征集T₁进行计算，得到特征集T₁对应的图像集的客观全参考图像质量评估得分值集合AS₃；

步骤S64：综合评估得分值集合AS={AS₁,AS₂,AS₃}，得到最终的客观全参考图像质量评估得分值集合AS。