CN103354617B - 一种基于dct域的边缘强度压缩的图像质量客观评价方法 - Google Patents

一种基于dct域的边缘强度压缩的图像质量客观评价方法 Download PDF

Info

Publication number
CN103354617B
CN103354617B CN201310278405.7A CN201310278405A CN103354617B CN 103354617 B CN103354617 B CN 103354617B CN 201310278405 A CN201310278405 A CN 201310278405A CN 103354617 B CN103354617 B CN 103354617B
Authority
CN
China
Prior art keywords
half overlapping
designated
prime
coefficient
coordinate position
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201310278405.7A
Other languages
English (en)
Other versions
CN103354617A (zh
Inventor
郁梅
孔真真
邵枫
彭宗举
陈芬
王晓东
李福翠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ningbo University
Original Assignee
Ningbo University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ningbo University filed Critical Ningbo University
Priority to CN201310278405.7A priority Critical patent/CN103354617B/zh
Publication of CN103354617A publication Critical patent/CN103354617A/zh
Application granted granted Critical
Publication of CN103354617B publication Critical patent/CN103354617B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Abstract

本发明公开了一种基于DCT域的边缘强度压缩的图像质量客观评价方法,其首先通过分别获取无失真图像和失真图像的亮度分量图的4个方向的系数矩阵,获取无失真图像和失真图像的亮度分量图的全局边缘强度,其次通过获取两个全局边缘强度中的每个8×8的半重叠块的均值、标准差和方差,获取失真图像中相对应的每个区域的敏感因子,接着通过获取两个全局边缘强度中的每个半重叠块的DCT系数矩阵,获取两个全局边缘强度中相对应的两个半重叠块的能量相似性,最后根据敏感因子及能量相似性,获取失真图像的质量评价分数,由于本方法充分去除了人眼的视觉冗余信息,有效利用了人眼比较敏感的边缘强度,因此得到的客观评价结果与人眼主观感知能够保持很好的一致性。

Description

一种基于DCT域的边缘强度压缩的图像质量客观评价方法
技术领域
本发明涉及一种图像质量评价方法,尤其是涉及基于DCT域的边缘强度压缩的图像质量客观评价方法。
背景技术
近年来,图像质量评价由于在视频图像处理中的广泛应用而受到了越来越多研究者的关注。图像质量的好坏是视频系统的重要技术指标,图像质量评价的研究成为视频系统和算法优劣的重要技术手段。由于目前人眼还是最终的接收端,因此主观的度量是最直接最合理的质量评价方法。然而,主观的实验测试条件苛刻,费时费力,从而限制了在实际中的应用。因此,需要实用的易操作的图像质量客观评价方法来评价图像质量,并且引导图像处理的应用。图像处理的核心问题是怎样有效地描述图像的视觉信息,比如常用的图像压缩、图像频率变换和图像的特征提取等等。图像质量客观评价按照参照原始图像的信息量的多少分为全参考、半参考和无参考。由于全参考需要原始图像的所有信息,而在实际应用中原始图像大多情况下是得不到的,因此半参考和无参考的评价方法越来越实用,其中半参考的评价方法只需选取合适的特征,在传输的过程中只需传输这些特征,因此可以更好地调整码率,并且与人眼感知具有较好的一致性。不少研究者在考虑多通道分辨率特性,如小波变换、离散余弦变换等,提取图像的特征建立半参考的评价方法,常见的有基于傅里叶变换提取相位信息和频率信息的半参考评价方法等。然而,这些半参考评价方法由于没有考虑人眼的多通道效应,比如高频子带的视觉冗余信息等,因此仍然没有与人眼主观达成很好的一致性。
发明内容
本发明所要解决的技术问题是提供一种基于DCT域的边缘强度压缩的图像质量客观评价方法,其不仅能够提高传输速度,节省带宽,而且能够有效地提高客观评价结果与主观感知之间的相关性。
本发明解决上述技术问题所采用的技术方案为:一种基于DCT域的边缘强度压缩的图像质量客观评价方法,其特征在于它的处理过程为:首先,通过分别获取原始的无失真图像的亮度分量图和待评价的失真图像的亮度分量图的水平方向系数矩阵、对角线45°方向系数矩阵、垂直方向系数矩阵和对角线135°方向系数矩阵,获取原始的无失真图像的亮度分量图的全局边缘强度和待评价的失真图像的亮度分量图的全局边缘强度;其次,将两个全局边缘强度分别分割成多个8×8的半重叠块,再通过获取两个全局边缘强度中的每个半重叠块的均值、标准差和方差,获取待评价的失真图像中相对应的每个8×8的区域的敏感因子;接着,获取两个全局边缘强度中的每个半重叠块的DCT系数矩阵,并获取两个全局边缘强度中的每个半重叠块的DCT系数矩阵中去除直流系数后形成的列向量,再通过获取两个全局边缘强度中的每个半重叠块对应的列向量经压缩后的所有DCT系数的平均值,获取两个全局边缘强度中相对应的两个半重叠块的能量相似性;最后,根据待评价的失真图像中相对应的每个8×8的区域的敏感因子及两个全局边缘强度中相对应的两个半重叠块的能量相似性,计算待评价的失真图像的质量评价分数。
本发明的基于DCT域的边缘强度压缩的图像质量客观评价方法,它具体包括以下步骤:
①令f表示原始的无失真图像,令g表示待评价的失真图像,分别提取出f和g的亮度分量图;
②采用水平方向高通滤波器、对角线45°方向高通滤波器、垂直方向高通滤波器和对角线135°方向高通滤波器分别对f的亮度分量图进行高通滤波处理,对应得到水平方向系数矩阵、对角线45°方向系数矩阵、垂直方向系数矩阵和对角线135°方向系数矩阵,对应记为f1'、f2'、f3'和f4',将f1'中坐标位置为(i,j)处的系数记为f1'(i,j),将f2'中坐标位置为(i,j)处的系数记为f2'(i,j),将f3'中坐标位置为(i,j)处的系数记为f3'(i,j),将f4'中坐标位置为(i,j)处的系数记为f4'(i,j),
采用水平方向高通滤波器、对角线45°方向高通滤波器、垂直方向高通滤波器和对角线135°方向高通滤波器分别对g的亮度分量图进行高通滤波处理,对应得到水平方向系数矩阵、对角线45°方向系数矩阵、垂直方向系数矩阵和对角线135°方向系数矩阵,对应记为g1'、g'2、g'3和g'4,将g1'中坐标位置为(i,j)处的系数记为g1'(i,j),将g2'中坐标位置为(i,j)处的系数记为g'2(i,j),将g'3中坐标位置为(i,j)处的系数记为g'3(i,j),将g'4中坐标位置为(i,j)处的系数记为g'4(i,j),
在此,1≤i≤W,1≤j≤H,W表示f和g的宽度,H表示f和g的高度,f(i,j)表示f的亮度分量图中坐标位置为(i,j)的像素点的像素值,f(i-3+m,j-3+n)表示f的亮度分量图中坐标位置为(i-3+m,j-3+n)的像素点的像素值,g(i,j)表示g的亮度分量图中坐标位置为(i,j)的像素点的像素值,g(i-3+m,j-3+n)表示g的亮度分量图中坐标位置为(i-3+m,j-3+n)的像素点的像素值,B1(m,n)表示5×5的水平方向高通滤波器中坐标位置为(m,n)处的元素,B2(m,n)表示5×5的对角线45°方向高通滤波器中坐标位置为(m,n)处的元素,B3(m,n)表示5×5的垂直方向高通滤波器中坐标位置为(m,n)处的元素,B4(m,n)表示5×5的对角线135°方向高通滤波器中坐标位置为(m,n)处的元素;
③根据f1'和f3',计算f的亮度分量图在水平垂直方向的边缘强度,记为中坐标位置为(i,j)的像素点的像素值记为 并根据f2'和f4',计算f的亮度分量图在对角线方向的边缘强度,记为中坐标位置为(i,j)的像素点的像素值记为 其中,符号“||”为取绝对值符号;
同样,根据g1'和g'3,计算g的亮度分量图在水平垂直方向的边缘强度,记为中坐标位置为(i,j)的像素点的像素值记为 并根据g'2和g'4,计算g的亮度分量图在对角线方向的边缘强度,记为中坐标位置为(i,j)的像素点的像素值记为
④根据计算f的亮度分量图的全局边缘强度,记为Ef,将Ef中坐标位置为(i,j)的像素点的像素值记为Ef(i,j),其中,max()为取最大值函数;
根据及Ef,计算g的亮度分量图的全局边缘强度,记为Eg,将Eg中坐标位置为(i,j)的像素点的像素值记为Eg(i,j),
⑤将Ef分割成K个尺寸大小为8×8的半重叠块,其中,符号为向下取整符号;然后计算Ef中的每个半重叠块的均值、标准差和方差,将Ef中的第n个半重叠块的均值、标准差和方差分别记为μf_n、δf_n,其中,1≤n≤K;再对Ef中的每个半重叠块进行离散余弦变换,得到每个半重叠块对应的DCT系数矩阵,将Ef中的第n个半重叠块对应的DCT系数矩阵记为Fn;最后去除Ef中的每个半重叠块对应的DCT系数矩阵中的直流系数,并将Ef中的每个半重叠块对应的DCT系数矩阵中剩余的63个DCT系数按照先行后列的顺序排列组成63×1维的列向量,将Ef中的第n个半重叠块对应的DCT系数矩阵Fn中去除直流系数后剩余的63个DCT系数按照先行后列的顺序排列组成的63×1维的列向量记为Fn';
将Eg分割成K个尺寸大小为8×8的半重叠块;然后计算Eg中的每个半重叠块的均值、标准差和方差,将Eg中的第n个半重叠块的均值、标准差和方差分别记为μg_n、δg_n再对Eg中的每个半重叠块进行离散余弦变换,得到每个半重叠块对应的DCT系数矩阵,将Eg中的第n个半重叠块对应的DCT系数矩阵记为Gn;最后去除Eg中的每个半重叠块对应的DCT系数矩阵中的直流系数,并将Eg中的每个半重叠块对应的DCT系数矩阵中剩余的63个DCT系数按照先行后列的顺序排列组成63×1维的列向量,将Eg中的第n个半重叠块对应的DCT系数矩阵中去除直流系数后剩余的63个DCT系数按照先行后列的顺序排列组成的63×1维的列向量记为G'n
⑥根据Ef中的每个半重叠块的均值和Eg中的每个半重叠块的均值,计算Ef和Eg中相对应的两个半重叠块的均值相似性,将Ef中的第n个半重叠块与Eg中的第n个半重叠块的均值相似性记为ln其中,C1为用于防止分母为零的常数;
根据Ef中的每个半重叠块的标准差和方差及Eg中的每个半重叠块的标准差和方差,计算Ef和Eg中相对应的两个半重叠块的方差相似性,将Ef中的第n个半重叠块与Eg中的第n个半重叠块的方差相似性记为cn其中,C2为用于防止分母为零的常数;
将Ef和Eg中相对应的两个半重叠块的均值相似性作为Eg中相对应的半重叠块的亮度因子,将Ef和Eg中相对应的两个半重叠块的方差相似性作为Eg中相对应的半重叠块的对比度因子,然后根据Eg中的每个半重叠块的亮度因子和对比度因子,计算Eg中的每个半重叠块的敏感因子,将Eg中的第n个半重叠块的敏感因子记为wn,wn=ln×cn
⑦对Ef中的每个半重叠块对应的63×1维的列向量进行压缩处理,得到压缩后的列向量,将Ef中的第n个半重叠块对应的压缩后的列向量记为Fn'',Fn''=φ×Fn',其中,φ为63×63维的高斯随机矩阵;然后计算Ef中的每个半重叠块对应的压缩后的列向量中的所有DCT系数的平均值,将Ef中的第n个半重叠块对应的压缩后的列向量中的所有DCT系数的平均值记为 其中,1≤k≤63,Fn''(k)表示Fn''中的第k个DCT系数;
对Eg中的每个半重叠块对应的63×1维的列向量进行压缩处理,得到压缩后的列向量,将Eg中的第n个半重叠块对应的压缩后的列向量记为G''n,G''n=φ×G'n;然后计算Eg中的每个半重叠块对应的压缩后的列向量中的所有DCT系数的平均值,将Eg中的第n个半重叠块对应的压缩后的列向量中的所有DCT系数的平均值记为 其中,G''n(k)表示G''n中的第k个DCT系数;
计算Ef和Eg中相对应的两个半重叠块的能量相似性,将Ef中的第n个半重叠块与Eg中的第n个半重叠块的能量相似性记为en e n = Σ k = 1 63 ( F n ′ ′ ( k ) - μ F n ′ ′ ) × ( G n ′ ′ ( k ) - μ G n ′ ′ ) + C 3 Σ k = 1 63 ( F n ′ ′ ( k ) - μ F n ′ ′ ) 2 × ( G n ′ ′ ( k ) - μ G n ′ ′ ) 2 + C 3 , 其中,C3为用于防止分母为零的常数;
⑧根据Eg中的每个半重叠块的敏感因子、Ef和Eg中相对应的两个半重叠块的能量相似性,计算Eg中的每个半重叠块的质量评价分数,将Eg中的第n个半重叠块的质量评价分数记为Qn,Qn=wn×en;然后根据Eg中的所有半重叠块的质量评价分数,计算g的客观质量评价分数,记为Q,
所述的步骤⑥中取C1=0.01×L,C2=0.03×L,其中,L表示图像的灰度级数。
所述的步骤⑦中取C3=(0.03×L)/2,其中,L表示图像的灰度级数。
所述的步骤⑦中高斯随机矩阵φ选用均值为0且方差为1的高斯随机矩阵。
与现有技术相比,本发明的优点在于:其首先通过分别获取原始的无失真图像和待评价的失真图像的亮度分量图的4个方向的系数矩阵,获取原始的无失真图像和待评价的失真图像的亮度分量图的全局边缘强度,其次通过获取两个全局边缘强度中的每个8×8的半重叠块的均值、标准差和方差,获取待评价的失真图像中相对应的每个8×8的区域的敏感因子,接着通过获取两个全局边缘强度中的每个半重叠块的DCT系数矩阵,获取两个全局边缘强度中相对应的两个半重叠块的能量相似性,最后根据敏感因子及能量相似性,获取待评价的失真图像的质量评价分数,由于本发明方法充分去除了人眼的视觉冗余信息,有效利用了人眼比较敏感的边缘强度,因此得到的客观评价结果与人眼主观感知能够保持很好的一致性,同时提高了传输速度,并节省了带宽。
附图说明
图1_1为bikes(768×512)图像;
图1_2为building2(640×512)图像;
图1_3为buildings(768×512)图像;
图1_4为caps(768×512)图像;
图1_5为carnivaldolls(610×488)图像;
图1_6为cemetry(627×482)图像;
图1_7为churchandcapitol(634×505)图像;
图1_8为coinsinfountain(640×512)图像;
图1_9为dancers(618×453)图像;
图1_10为flowersonih35(640×512)图像;
图1_11为house(768×512)图像;
图1_12为lighthouse2(768×512)图像;
图1_13为lighthouse(480×720)图像;
图1_14为manfishing(634×438)图像;
图1_15为monarch(768×512)图像;
图1_16为ocean(768×512)图像;
图1_17为paintedhouse(768×512)图像;
图1_18为parrots(768×512)图像;
图1_19为plane(768×512)图像;
图1_20为rapids(768×512)图像;
图1_21为sailing1(768×512)图像;
图1_22为sailing2(480×720)图像;
图1_23为sailing3(480×720)图像;
图1_24为sailing4(768×512)图像;
图1_25为statue(480×720)图像;
图1_26为stream(768×512)图像;
图1_27为studentsculpture(632×505)图像;
图1_28为woman(480×720)图像;
图1_29为womanhat(480×720)图像;
图2a为高通滤波器0°水平方向的算子模板的示意图;
图2b为高通滤波器45°方向的算子模板的示意图;
图2c为高通滤波器的90°垂直方向的算子模板的示意图;
图2d为高通滤波器的135°方向的算子模板的示意图;
图3a为JP2K(1)失真图像评价与平均主观评分差值的拟合散点图;
图3b为JP2K(2)失真图像评价与平均主观评分差值的拟合散点图;
图3c为JPEG(1)失真图像评价与平均主观评分差值的拟合散点图;
图3d为JPEG(2)失真图像评价与平均主观评分差值的拟合散点图;
图3e为高斯白噪声(WN)失真图像评价与平均主观评分差值的拟合散点图;
图3f为高斯模糊(GBLUR)失真图像评价与平均主观评分差值的拟合散点图;
图3g为快衰落(FF)失真图像评价与平均主观评分差值的拟合散点图;
图4为本发明方法的总体实现框图。
具体实施方式
以下结合附图实施例对本发明作进一步详细描述。
本发明提出的一种基于DCT域的边缘强度压缩的图像质量客观评价方法,其总体实现框图如图4所示,其处理过程为:首先,通过分别获取原始的无失真图像的亮度分量图和待评价的失真图像的亮度分量图的水平方向系数矩阵、对角线45°方向系数矩阵、垂直方向系数矩阵和对角线135°方向系数矩阵,获取原始的无失真图像的亮度分量图的全局边缘强度和待评价的失真图像的亮度分量图的全局边缘强度;其次,将两个全局边缘强度分别分割成多个8×8的半重叠块,再通过获取两个全局边缘强度中的每个半重叠块的均值、标准差和方差,获取待评价的失真图像中相对应的每个8×8的区域的敏感因子;接着,获取两个全局边缘强度中的每个半重叠块的DCT系数矩阵,并获取两个全局边缘强度中的每个半重叠块的DCT系数矩阵中去除直流系数后形成的列向量,再通过获取两个全局边缘强度中的每个半重叠块对应的列向量经压缩后的所有DCT系数的平均值,获取两个全局边缘强度中相对应的两个半重叠块的能量相似性;最后,根据待评价的失真图像中相对应的每个8×8的区域的敏感因子及两个全局边缘强度中相对应的两个半重叠块的能量相似性,计算待评价的失真图像的质量评价分数。
本发明的基于DCT域的边缘强度压缩的图像质量客观评价方法,其具体包括以下步骤:
①令f表示原始的无失真图像,令g表示待评价的失真图像,分别提取出f和g的亮度分量图。
②采用水平方向(即0°方向)高通滤波器、对角线45°方向高通滤波器、垂直方向(即90°方向)高通滤波器和对角线135°方向高通滤波器分别对f的亮度分量图进行高通滤波处理,对应得到水平方向系数矩阵、对角线45°方向系数矩阵、垂直方向系数矩阵和对角线135°方向系数矩阵,对应记为f1'、f2'、f3'和f4',将f1'中坐标位置为(i,j)处的系数记为f1'(i,j),将f2'中坐标位置为(i,j)处的系数记为f2'(i,j),将f3'中坐标位置为(i,j)处的系数记为f3'(i,j),将f4'中坐标位置为(i,j)处的系数记为f4'(i,j),
采用水平方向高通滤波器、对角线45°方向高通滤波器、垂直方向高通滤波器和对角线135°方向高通滤波器分别对g的亮度分量图进行高通滤波处理,对应得到水平方向系数矩阵、对角线45°方向系数矩阵、垂直方向系数矩阵和对角线135°方向系数矩阵,对应记为g1'、g'2、g'3和g'4,将g1'中坐标位置为(i,j)处的系数记为g1'(i,j),将g'2中坐标位置为(i,j)处的系数记为g'2(i,j),将g'3中坐标位置为(i,j)处的系数记为g'3(i,j),将g'4中坐标位置为(i,j)处的系数记为g'4(i,j),
在此,1≤i≤W,1≤j≤H,W表示f和g的宽度,H表示f和g的高度,f(i,j)表示f的亮度分量图中坐标位置为(i,j)的像素点的像素值,f(i-3+m,j-3+n)表示f的亮度分量图中坐标位置为(i-3+m,j-3+n)的像素点的像素值,g(i,j)表示g的亮度分量图中坐标位置为(i,j)的像素点的像素值,g(i-3+m,j-3+n)表示g的亮度分量图中坐标位置为(i-3+m,j-3+n)的像素点的像素值,B1(m,n)表示5×5的水平方向高通滤波器中坐标位置为(m,n)处的元素,B2(m,n)表示5×5的对角线45°方向高通滤波器中坐标位置为(m,n)处的元素,B3(m,n)表示5×5的垂直方向高通滤波器中坐标位置为(m,n)处的元素,B4(m,n)表示5×5的对角线135°方向高通滤波器中坐标位置为(m,n)处的元素。
图2a给出了水平方向高通滤波器的算子模板,图2b给出了对角线45°方向高通滤波器的算子模板,图2c给出了垂直方向高通滤波器的算子模板,图2d给出了对角线135°方向高通滤波器的算子模板。
③根据f1'和f3',计算f的亮度分量图在水平垂直方向的边缘强度,记为中坐标位置为(i,j)的像素点的像素值(即边缘强度值)记为 并根据f2'和f4',计算f的亮度分量图在对角线方向的边缘强度,记为中坐标位置为(i,j)的像素点的像素值记为 其中,符号“||”为取绝对值符号。
同样,根据g1'和g'3,计算g的亮度分量图在水平垂直方向的边缘强度,记为中坐标位置为(i,j)的像素点的像素值记为 并根据g'2和g'4,计算g的亮度分量图在对角线方向的边缘强度,记为中坐标位置为(i,j)的像素点的像素值记为
④由于人眼对图像的边缘强度值大的像素点会更加敏感,因此可以从中选取较大的边缘强度值作为f的亮度分量图的全局边缘强度中的像素点的边缘强度值,即根据计算f的亮度分量图的全局边缘强度,记为Ef,将Ef中坐标位置为(i,j)的像素点的像素值记为Ef(i,j),其中,max()为取最大值函数。
根据及Ef,计算g的亮度分量图的全局边缘强度,记为Eg,将Eg中坐标位置为(i,j)的像素点的像素值记为Eg(i,j),
⑤为了避免JPEG失真的失真图像在分块边界处的块效应,将原始的无失真图像的亮度分量图的全局边缘强度Ef分成K个8×8的半重叠块,虽然其它失真类型的失真图像不受分块影响,但在本发明中做同样的处理。即将Ef分割成K个尺寸大小为8×8的半重叠块,其中,符号为向下取整符号;然后计算Ef中的每个半重叠块的均值、标准差和方差,将Ef中的第n个半重叠块的均值、标准差和方差分别记为μf_n、δf_n其中,1≤n≤K;再对Ef中的每个半重叠块进行离散余弦变换(DCT),得到每个半重叠块对应的DCT系数矩阵,将Ef中的第n个半重叠块对应的DCT系数矩阵记为Fn;最后由于DCT变换具有去除冗余的效果,并且直流信息稳定,因此去除Ef中的每个半重叠块对应的DCT系数矩阵中的直流系数即第一个DCT系数,并将Ef中的每个半重叠块对应的DCT系数矩阵中剩余的63个DCT系数按照先行后列的顺序排列组成63×1维的列向量,将Ef中的第n个半重叠块对应的DCT系数矩阵Fn中去除直流系数后剩余的63个DCT系数按照先行后列的顺序排列组成的63×1维的列向量记为Fn'。
将Eg分割成K个尺寸大小为8×8的半重叠块;然后计算Eg中的每个半重叠块的均值、标准差和方差,将Eg中的第n个半重叠块的均值、标准差和方差分别记为μg_n、δg_n;再对Eg中的每个半重叠块进行离散余弦变换,得到每个半重叠块对应的DCT系数矩阵,将Eg中的第n个半重叠块对应的DCT系数矩阵记为Gn;最后由于DCT变换具有去除冗余的效果,并且直流信息稳定,因此去除Eg中的每个半重叠块对应的DCT系数矩阵中的直流系数,并将Eg中的每个半重叠块对应的DCT系数矩阵中剩余的63个DCT系数按照先行后列的顺序排列组成63×1维的列向量,将Eg中的第n个半重叠块对应的DCT系数矩阵中去除直流系数后剩余的63个DCT系数按照先行后列的顺序排列组成的63×1维的列向量记为G'n
⑥由于人眼对不同失真的失真图像感知敏感度不同,对不同的失真图像内容感知也不同,因此对于不同的半重叠块,人眼的感知也是不同的。根据Ef中的每个半重叠块的均值和Eg中的每个半重叠块的均值,计算Ef和Eg中相对应的两个半重叠块的均值相似性,将Ef中的第n个半重叠块与Eg中的第n个半重叠块的均值相似性记为ln其中,C1为用于防止分母为零的常数。
根据Ef中的每个半重叠块的标准差和方差及Eg中的每个半重叠块的标准差和方差,计算Ef和Eg中相对应的两个半重叠块的方差相似性,将Ef中的第n个半重叠块与Eg中的第n个半重叠块的方差相似性记为cn其中,C2为用于防止分母为零的常数。
将Ef和Eg中相对应的两个半重叠块的均值相似性作为Eg中相对应的半重叠块的亮度因子,将Ef和Eg中相对应的两个半重叠块的方差相似性作为Eg中相对应的半重叠块的对比度因子,然后根据Eg中的每个半重叠块的亮度因子和对比度因子,计算Eg中的每个半重叠块的敏感因子,将Eg中的第n个半重叠块的敏感因子记为wn,wn=ln×cn
在本实施例中,取C1=0.01×L,C2=0.03×L,其中,L表示图像的灰度级数,即L=255。
⑦对Ef中的每个半重叠块对应的63×1维的列向量进行压缩处理,得到压缩后的列向量,将Ef中的第n个半重叠块对应的压缩后的列向量记为Fn'',Fn''=φ×Fn',其中,φ为63×63维的高斯随机矩阵;然后计算Ef中的每个半重叠块对应的压缩后的列向量中的所有DCT系数的平均值,将Ef中的第n个半重叠块对应的压缩后的列向量中的所有DCT系数的平均值记为 其中,1≤k≤63,Fn''(k)表示Fn''中的第k个DCT系数。
对Eg中的每个半重叠块对应的63×1维的列向量进行压缩处理,得到压缩后的列向量,将Eg中的第n个半重叠块对应的压缩后的列向量记为G''n,G''n=φ×G'n;然后计算Eg中的每个半重叠块对应的压缩后的列向量中的所有DCT系数的平均值,将Eg中的第n个半重叠块对应的压缩后的列向量中的所有DCT系数的平均值记为 其中,G''n(k)表示G''n中的第k个DCT系数。
计算Ef和Eg中相对应的两个半重叠块的能量相似性,将Ef中的第n个半重叠块与Eg中的第n个半重叠块的能量相似性记为en e n = Σ k = 1 63 ( F n ′ ′ ( k ) - μ F n ′ ′ ) × ( G n ′ ′ ( k ) - μ G n ′ ′ ) + C 3 Σ k = 1 63 ( F n ′ ′ ( k ) - μ F n ′ ′ ) 2 × ( G n ′ ′ ( k ) - μ G n ′ ′ ) 2 + C 3 , 其中,C3为用于防止分母为零的常数。
在本实施例中,取C3=(0.03×L)/2,其中,L表示图像的灰度级数,即L=255;高斯随机矩阵φ选用均值为0且方差为1的高斯随机矩阵。
⑧根据Eg中的每个半重叠块的敏感因子、Ef和Eg中相对应的两个半重叠块的能量相似性,计算Eg中的每个半重叠块的质量评价分数,将Eg中的第n个半重叠块的质量评价分数记为Qn,Qn=wn×en;然后根据Eg中的所有半重叠块的质量评价分数,计算g的客观质量评价分数,记为Q,
以下为通过实验说明本发明方法的可行性和有效性。
在本实施例中,使用的图像数据为美国Texas大学图像和视频工程实验室公开的图像质量估计数据库(LIVE)所提供的808幅图像,其中包括无失真的参考图像29幅(如图1_1至图1_29所示),失真图像779幅。另外,这779幅失真图像按失真类型被分到5个子图像库中,即:高斯白噪声(WN,white noise)失真图像库(包含145幅图像)、高斯模糊(GBLUR,Gaussian blurring)失真图像库(包含145幅图像)、JPEG失真图像库(包含175幅图像)、JP2K失真图像库(包含169幅图像)以及快衰落(FF,fast fading)失真图像库(包含145幅图像)。JPEG失真图像和JP2K失真图像分别平均分2组进行测试,记为JPEG(1)、JPEG(2)、JP2K(1)和JP2K(2)。同时,上述每幅失真图像的失真类型是单一的。数据库给出了每组失真图像的平均主观评分差值(Difference Mean Opinion Scores,DMOS)。DMOS取值范围是[0,100],其值越大,表示图像的质量越差,失真越严重。
在此采用四个评价标准来验证本发明的图像质量客观评价方法与主观立体感知质量之间的一致性:第一个指标为非线性回归条件下的主观预测值与DMOS之间的线性相关系数(Pearson Linear Correlation Coefficient,CC),其非线性回归处理采用四参数进行拟合,反映了图像质量客观评价方法的预测精确性;第二个指标为Spearman秩相关系数(Spearman Rank Order Correlation Coefficient,SROCC),反映图像质量客观评价方法的预测单调性;第三个指标为均方根误差(Rooted Mean Squared Error,RMSE),反映图像质量客观评价方法的预测准确性;第四个指标为平均绝对误差(Mean AbsoluteError,MAE),反映图像质量客观评价方法预测的稳定性。其中,CC值和SROCC值取值范围在[0,1]之间,值越大说明客观评价方法越好,MAE和RMSE值越小越好。
表1给出了不同失真图像经本发明方法处理后的评价性能指标。从表1中所列的数据可以看出,针对不同的失真类型CC值和SROCC值均在0.92以上,与人眼主观感知具有较好的一致性。同时,由于本发明方法只在边缘强度进行信号信息的采集和处理,因此为视频图像的传输省去了大量的数据量,同时节省了带宽。为了进一步说明本发明方法的优势,图3a给出了JP2K(1)压缩失真图像评价与平均主观评分差值的拟合散点图,图3b给出了JP2K(2)压缩失真图像评价与平均主观评分差值的拟合散点图,图3c给出了JPEG(1)压缩失真图像评价与平均主观评分差值的拟合散点图,图3d给出了JPEG(2)压缩失真图像评价与平均主观评分差值的拟合散点图,图3e给出了高斯白噪声(WN)失真图像评价与平均主观评分差值的拟合散点图,图3f给出了高斯模糊(GBLUR)失真图像评价与平均主观评分差值的拟合散点图,图3g给出了快衰落(FF)失真图像评价与平均主观评分差值的拟合散点图。从图3a至图3g中可以看出,本发明方法得到的客观质量评价分数与主观感知具有高度的一致性,从而证明了本发明方法的可行性和有效性,相对于峰值信噪比、结构相似度等传统方法,本发明方法在各个评价指标方面都取得了相对较好的结果。
表1不同失真图像经本发明方法处理后的评价性能指标

Claims (4)

1.一种基于DCT域的边缘强度压缩的图像质量客观评价方法,其特征在于它的处理过程为:首先,通过分别获取原始的无失真图像的亮度分量图和待评价的失真图像的亮度分量图各自的水平方向系数矩阵、对角线45°方向系数矩阵、垂直方向系数矩阵和对角线135°方向系数矩阵,获取原始的无失真图像的亮度分量图的全局边缘强度和待评价的失真图像的亮度分量图的全局边缘强度;其次,将两个全局边缘强度分别分割成多个8×8的半重叠块,再通过获取两个全局边缘强度中的每个半重叠块的均值、标准差和方差,获取待评价的失真图像中相对应的每个8×8的区域的敏感因子;接着,获取两个全局边缘强度中的每个半重叠块的DCT系数矩阵,并获取两个全局边缘强度中的每个半重叠块的DCT系数矩阵中去除直流系数后形成的列向量,再通过获取两个全局边缘强度中的每个半重叠块对应的列向量经压缩后的所有DCT系数的平均值,获取两个全局边缘强度中相对应的两个半重叠块的能量相似性;最后,根据待评价的失真图像中相对应的每个8×8的区域的敏感因子及两个全局边缘强度中相对应的两个半重叠块的能量相似性,计算待评价的失真图像的质量评价分数;
该图像质量客观评价方法具体包括以下步骤:
①令f表示原始的无失真图像,令g表示待评价的失真图像,分别提取出f和g的亮度分量图;
②采用水平方向高通滤波器、对角线45°方向高通滤波器、垂直方向高通滤波器和对角线135°方向高通滤波器分别对f的亮度分量图进行高通滤波处理,对应得到水平方向系数矩阵、对角线45°方向系数矩阵、垂直方向系数矩阵和对角线135°方向系数矩阵,对应记为f′1、f′2、f′3和f′4,将f′1中坐标位置为(i,j)处的系数记为f′1(i,j),将f′2中坐标位置为(i,j)处的系数记为f′2(i,j),将f′3中坐标位置为(i,j)处的系数记为f′3(i,j),将f′4中坐标位置为(i,j)处的系数记为f′4(i,j),
采用水平方向高通滤波器、对角线45°方向高通滤波器、垂直方向高通滤波器和对角线135°方向高通滤波器分别对g的亮度分量图进行高通滤波处理,对应得到水平方向系数矩阵、对角线45°方向系数矩阵、垂直方向系数矩阵和对角线135°方向系数矩阵,对应记为g′1、g′2、g′3和g′4,将g′1中坐标位置为(i,j)处的系数记为g′1(i,j),将g′2中坐标位置为(i,j)处的系数记为g′2(i,j),将g′3中坐标位置为(i,j)处的系数记为g′3(i,j),将g′4中坐标位置为(i,j)处的系数记为g′4(i,j),
在此,1≤i≤W,1≤j≤H,W表示f和g的宽度,H表示f和g的高度,f(i,j)表示f的亮度分量图中坐标位置为(i,j)的像素点的像素值,f(i-3+m,j-3+n)表示f的亮度分量图中坐标位置为(i-3+m,j-3+n)的像素点的像素值,g(i,j)表示g的亮度分量图中坐标位置为(i,j)的像素点的像素值,g(i-3+m,j-3+n)表示g的亮度分量图中坐标位置为(i-3+m,j-3+n)的像素点的像素值,B1(m,n)表示5×5的水平方向高通滤波器中坐标位置为(m,n)处的元素,B2(m,n)表示5×5的对角线45°方向高通滤波器中坐标位置为(m,n)处的元素,B3(m,n)表示5×5的垂直方向高通滤波器中坐标位置为(m,n)处的元素,B4(m,n)表示5×5的对角线135°方向高通滤波器中坐标位置为(m,n)处的元素;
③根据f′1和f′3,计算f的亮度分量图在水平垂直方向的边缘强度,记为中坐标位置为(i,j)的像素点的像素值记为 E f 1,3 ( i , j ) = | f 1 ′ ( i , j ) - f 3 ′ ( i , j ) | , 并根据f′2和f′4,计算f的亮度分量图在对角线方向的边缘强度,记为中坐标位置为(i,j)的像素点的像素值记为 E f 2,4 ( i , j ) = | f 2 ′ ( i , j ) - f 4 ′ ( i , j ) | , 其中,符号“||”为取绝对值符号;
同样,根据g′1和g′3,计算g的亮度分量图在水平垂直方向的边缘强度,记为中坐标位置为(i,j)的像素点的像素值记为 E g 1,3 ( i , j ) = | g 1 ′ ( i , j ) - g 3 ′ ( i , j ) | , 并根据g′2和g′4,计算g的亮度分量图在对角线方向的边缘强度,记为中坐标位置为(i,j)的像素点的像素值记为 E g 2,4 ( i , j ) = | g 2 ′ ( i , j ) - g 4 ′ ( i , j ) | ;
④根据计算f的亮度分量图的全局边缘强度,记为Ef,将Ef中坐标位置为(i,j)的像素点的像素值记为Ef(i,j),其中,max()为取最大值函数;
根据及Ef,计算g的亮度分量图的全局边缘强度,记为Eg,将Eg中坐标位置为(i,j)的像素点的像素值记为Eg(i,j),
⑤将Ef分割成K个尺寸大小为8×8的半重叠块,其中,符号为向下取整符号;然后计算Ef中的每个半重叠块的均值、标准差和方差,将Ef中的第n个半重叠块的均值、标准差和方差分别记为μf_n、δf_n其中,1≤n≤K;再对Ef中的每个半重叠块进行离散余弦变换,得到每个半重叠块对应的DCT系数矩阵,将Ef中的第n个半重叠块对应的DCT系数矩阵记为Fn;最后去除Ef中的每个半重叠块对应的DCT系数矩阵中的直流系数,并将Ef中的每个半重叠块对应的DCT系数矩阵中剩余的63个DCT系数按照先行后列的顺序排列组成63×1维的列向量,将Ef中的第n个半重叠块对应的DCT系数矩阵Fn中去除直流系数后剩余的63个DCT系数按照先行后列的顺序排列组成的63×1维的列向量记为F′n
将Eg分割成K个尺寸大小为8×8的半重叠块;然后计算Eg中的每个半重叠块的均值、标准差和方差,将Eg中的第n个半重叠块的均值、标准差和方差分别记为μg_n、δg_n再对Eg中的每个半重叠块进行离散余弦变换,得到每个半重叠块对应的DCT系数矩阵,将Eg中的第n个半重叠块对应的DCT系数矩阵记为Gn;最后去除Eg中的每个半重叠块对应的DCT系数矩阵中的直流系数,并将Eg中的每个半重叠块对应的DCT系数矩阵中剩余的63个DCT系数按照先行后列的顺序排列组成63×1维的列向量,将Eg中的第n个半重叠块对应的DCT系数矩阵中去除直流系数后剩余的63个DCT系数按照先行后列的顺序排列组成的63×1维的列向量记为G′n
⑥根据Ef中的每个半重叠块的均值和Eg中的每个半重叠块的均值,计算Ef和Eg中相对应的两个半重叠块的均值相似性,将Ef中的第n个半重叠块与Eg中的第n个半重叠块的均值相似性记为ln其中,C1为用于防止分母为零的常数;
根据Ef中的每个半重叠块的标准差和方差及Eg中的每个半重叠块的标准差和方差,计算Ef和Eg中相对应的两个半重叠块的方差相似性,将Ef中的第n个半重叠块与Eg中的第n个半重叠块的方差相似性记为cn其中,C2为用于防止分母为零的常数;
将Ef和Eg中相对应的两个半重叠块的均值相似性作为Eg中相对应的半重叠块的亮度因子,将Ef和Eg中相对应的两个半重叠块的方差相似性作为Eg中相对应的半重叠块的对比度因子,然后根据Eg中的每个半重叠块的亮度因子和对比度因子,计算Eg中的每个半重叠块的敏感因子,将Eg中的第n个半重叠块的敏感因子记为wn,wn=ln×cn
⑦对Ef中的每个半重叠块对应的63×1维的列向量进行压缩处理,得到压缩后的列向量,将Ef中的第n个半重叠块对应的压缩后的列向量记为F″n,F″n=φ×F′n,其中,φ为63×63维的高斯随机矩阵;然后计算Ef中的每个半重叠块对应的压缩后的列向量中的所有DCT系数的平均值,将Ef中的第n个半重叠块对应的压缩后的列向量中的所有DCT系数的平均值记为 其中,1≤k≤63,表示F″n中的第k个DCT系数;
对Eg中的每个半重叠块对应的63×1维的列向量进行压缩处理,得到压缩后的列向量,将Eg中的第n个半重叠块对应的压缩后的列向量记为G″n,G″n=φ×G′n;然后计算Eg中的每个半重叠块对应的压缩后的列向量中的所有DCT系数的平均值,将Eg中的第n个半重叠块对应的压缩后的列向量中的所有DCT系数的平均值记为 其中,G″n(k)表示G″n中的第k个DCT系数;
计算Ef和Eg中相对应的两个半重叠块的能量相似性,将Ef中的第n个半重叠块与Eg中的第n个半重叠块的能量相似性记为en e n = Σ k = 1 63 ( F n ′ ′ ( k ) - μ F n ′ ′ ) × ( G n ′ ′ ( k ) - μ G n ′ ′ ) + C 3 Σ k = 1 63 ( F n ′ ′ ( k ) - μ F n ′ ′ ) 2 × ( G n ′ ′ ( k ) - μ G n ′ ′ ) 2 + C 3 , 其中,C3为用于防止分母为零的常数;
⑧根据Eg中的每个半重叠块的敏感因子、Ef和Eg中相对应的两个半重叠块的能量相似性,计算Eg中的每个半重叠块的质量评价分数,将Eg中的第n个半重叠块的质量评价分数记为Qn,Qn=wn×en;然后根据Eg中的所有半重叠块的质量评价分数,计算g的客观质量评价分数,记为Q,
2.根据权利要求1所述的一种基于DCT域的边缘强度压缩的图像质量客观评价方法,其特征在于所述的步骤⑥中取C1=0.01×L,C2=0.03×L,其中,L表示图像的灰度级数。
3.根据权利要求1或2所述的一种基于DCT域的边缘强度压缩的图像质量客观评价方法,其特征在于所述的步骤⑦中取C3=(0.03×L)/2,其中,L表示图像的灰度级数。
4.根据权利要求3所述的一种基于DCT域的边缘强度压缩的图像质量客观评价方法,其特征在于所述的步骤⑦中高斯随机矩阵φ选用均值为0且方差为1的高斯随机矩阵。
CN201310278405.7A 2013-07-03 2013-07-03 一种基于dct域的边缘强度压缩的图像质量客观评价方法 Expired - Fee Related CN103354617B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310278405.7A CN103354617B (zh) 2013-07-03 2013-07-03 一种基于dct域的边缘强度压缩的图像质量客观评价方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310278405.7A CN103354617B (zh) 2013-07-03 2013-07-03 一种基于dct域的边缘强度压缩的图像质量客观评价方法

Publications (2)

Publication Number Publication Date
CN103354617A CN103354617A (zh) 2013-10-16
CN103354617B true CN103354617B (zh) 2015-03-04

Family

ID=49310914

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310278405.7A Expired - Fee Related CN103354617B (zh) 2013-07-03 2013-07-03 一种基于dct域的边缘强度压缩的图像质量客观评价方法

Country Status (1)

Country Link
CN (1) CN103354617B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104658461B (zh) * 2014-01-29 2017-08-01 广西科技大学 显示器发光均匀性的测试方法
CN104655403B (zh) * 2014-01-29 2017-04-19 广西科技大学 一种点阵光源发光均匀性测试方法
GB2541179B (en) 2015-07-31 2019-10-30 Imagination Tech Ltd Denoising filter
CN107360416A (zh) * 2017-07-12 2017-11-17 天津大学 基于局部多元高斯描述子的立体图像质量评价方法
CN111161223A (zh) * 2019-12-13 2020-05-15 中国人民解放军国防科技大学 基于边缘强度相似度的图像受干扰程度评价方法
CN112950592B (zh) * 2021-03-05 2023-06-06 宁波大学 基于高维离散余弦变换的无参考光场图像质量评价方法
CN116132298B (zh) * 2023-02-24 2023-10-03 中电装备山东电子有限公司 用于无线通信的多路复用系统

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1656824A (zh) * 2002-05-24 2005-08-17 皇家飞利浦电子股份有限公司 根据局部边缘统计分布估计清晰度度量的方法和系统
CN101715146A (zh) * 2008-10-08 2010-05-26 中国移动通信集团公司 压缩视频质量评价方法及评价系统

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7038710B2 (en) * 2002-07-17 2006-05-02 Koninklijke Philips Electronics, N.V. Method and apparatus for measuring the quality of video data
CN100559881C (zh) * 2008-05-09 2009-11-11 中国传媒大学 一种基于人工神经网络的视频质量评价方法
CN101478697A (zh) * 2009-01-20 2009-07-08 中国测绘科学研究院 影像有损压缩质量评价方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1656824A (zh) * 2002-05-24 2005-08-17 皇家飞利浦电子股份有限公司 根据局部边缘统计分布估计清晰度度量的方法和系统
CN101715146A (zh) * 2008-10-08 2010-05-26 中国移动通信集团公司 压缩视频质量评价方法及评价系统

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
JPEG图像的无参考质量评价方法研究;姜林美;《计算机应用技术》;20071130;全文 *
基于DCT系数误差的图像质量评价模型;郑扛云,扛巨浪,李强;《计算机工程》;20110804;第37卷(第9期);全文 *
基于结构信息和空域信息的视频质量评价方法;章颖,李均利,陈刚等;《第十四届全国图象图形学学术会议》;20080516;正文3.2 *

Also Published As

Publication number Publication date
CN103354617A (zh) 2013-10-16

Similar Documents

Publication Publication Date Title
CN103354617B (zh) 一种基于dct域的边缘强度压缩的图像质量客观评价方法
CN102333233B (zh) 一种基于视觉感知的立体图像质量客观评价方法
CN103077511B (zh) 基于字典学习和结构相似的图像超分辨率重建方法
CN109255358B (zh) 一种基于视觉显著性和深度图的3d图像质量评价方法
CN101562675B (zh) 基于Contourlet变换的无参考型图像质量评测方法
CN102547368B (zh) 一种立体图像质量客观评价方法
CN103037212B (zh) 基于视觉感知的自适应块压缩传感图像编码方法
CN101127926A (zh) 基于多尺度几何分析的图像质量评测方法
CN103517065B (zh) 一种质降参考立体图像质量客观评价方法
CN102843572B (zh) 一种基于相位的立体图像质量客观评价方法
CN103366378A (zh) 基于条件直方图形状一致性的无参考型图像质量评价方法
CN102036098B (zh) 一种基于视觉信息量差异的全参考型图像质量评价方法
CN104376565A (zh) 基于离散余弦变换和稀疏表示的无参考图像质量评价方法
CN104123705A (zh) 一种超分辨率重建图像质量Contourlet域评价方法
CN100433795C (zh) 基于变换域数学形态学的图像降噪方法
CN102903107B (zh) 一种基于特征融合的立体图像质量客观评价方法
CN104103064A (zh) 基于梯度相似度的无参考噪声图像质量评价方法
CN109447903A (zh) 一种半参考型超分辨率重构图像质量评价模型的建立方法
CN103200420B (zh) 一种基于三维视觉注意力的立体图像质量客观评价方法
CN104809735B (zh) 基于傅里叶变换实现图像雾霾评价的系统及方法
CN104574424A (zh) 基于多分辨率dct边缘梯度统计的无参照图像模糊度评价方法
CN103914835A (zh) 一种针对模糊失真立体图像的无参考质量评价方法
CN103369348A (zh) 一种基于区域重要性分类的立体图像质量客观评价方法
CN102497576A (zh) 基于Gabor特征互信息的全参考图像质量评价方法
Fu et al. Screen content image quality assessment using Euclidean distance

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150304

Termination date: 20210703