CN103369348B - 一种基于区域重要性分类的立体图像质量客观评价方法 - Google Patents

一种基于区域重要性分类的立体图像质量客观评价方法 Download PDF

Info

Publication number
CN103369348B
CN103369348B CN201310266616.9A CN201310266616A CN103369348B CN 103369348 B CN103369348 B CN 103369348B CN 201310266616 A CN201310266616 A CN 201310266616A CN 103369348 B CN103369348 B CN 103369348B
Authority
CN
China
Prior art keywords
mrow
org
msubsup
dis
msub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201310266616.9A
Other languages
English (en)
Other versions
CN103369348A (zh
Inventor
邵枫
段芬芳
蒋刚毅
郁梅
李福翠
彭宗举
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing Lihe Printing Co ltd
Original Assignee
Ningbo University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ningbo University filed Critical Ningbo University
Priority to CN201310266616.9A priority Critical patent/CN103369348B/zh
Publication of CN103369348A publication Critical patent/CN103369348A/zh
Application granted granted Critical
Publication of CN103369348B publication Critical patent/CN103369348B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Image Processing (AREA)

Abstract

本发明公开了一种基于区域重要性分类的立体图像质量客观评价方法,其首先分别计算原始的无失真的立体图像的独眼图和待评价的失真的立体图像的独眼图,然后计算两个独眼图之间的结构失真图和原始的无失真的立体图像的独眼图的三维显著图,再将待评价的失真的立体图像的独眼图分成显著失真、显著非失真、非显著失真和非显著非失真这四个区域分别进行评价,并对各个区域的客观评价度量值进行融合,得到待评价的失真的立体图像的图像质量客观评价预测值,优点是获得的结构失真图和三维显著图能够较好地反映人眼对不同区域的敏感程度,使得客观评价结果能更符合人类视觉,从而有效地提高了客观评价结果与主观感知的相关性。

Description

一种基于区域重要性分类的立体图像质量客观评价方法
技术领域
本发明涉及一种图像质量评价方法,尤其是涉及一种基于区域重要性分类的立体图像质量客观评价方法。
背景技术
随着图像编码技术和立体显示技术的迅速发展,立体图像技术受到了越来越广泛的关注与应用,已成为当前的一个研究热点。立体图像技术利用人眼的双目视差原理,双目各自独立地接收来自同一场景的左右视点图像,通过大脑融合形成双目视差,从而欣赏到具有深度感和逼真感的立体图像。由于会受到采集系统、存储压缩及传输设备的影响,立体图像会不可避免地引入一系列的失真,而与单通道图像相比,立体图像需要同时保证两个通道的图像质量,因此对其进行质量评价具有非常重要的意义。然而,目前对立体图像质量进行评价缺乏有效的客观评价方法。因此,研究有效的立体图像质量客观评价方法具有十分重要的意义。
目前的立体图像质量客观评价方法是直接将平面图像质量评价方法应用于评价立体图像质量,然而,人眼感知立体图像产生立体视觉的过程并不是简单的左右视点图像叠加的过程:1)立体视觉特征(例如,三维视觉注意力)并不是平面视觉特性的简单拓展;2)人类视觉对不同区域有不同的感知偏好(各区域对感知的重要性不一致)。因此,如何在立体图像质量评价过程中有效地根据区域重要性对评价结果进行融合,使得客观评价结果更加感觉符合人类视觉系统,都是在对立体图像进行客观质量评价过程中需要研究解决的问题。
发明内容
本发明所要解决的技术问题是提供一种基于区域重要性分类的立体图像质量客观评价方法,其能够有效地提高客观评价结果与主观感知的相关性。
本发明解决上述技术问题所采用的技术方案为:一种基于区域重要性分类的立体图像质量客观评价方法,其特征在于包括以下步骤:
①令Sorg表示原始的无失真的立体图像,令Sdis表示待评价的失真的立体图像,将Sorg的左视点图像记为{Lorg(x,y)},将Sorg的右视点图像记为{Rorg(x,y)},将Sdis的左视点图像记为{Ldis(x,y)},将Sdis的右视点图像记为{Rdis(x,y)},然后计算{Lorg(x,y)}与{Rorg(x,y)}之间的视差图像,记为其中,此处(x,y)表示左视点图像和右视点图像中的像素点的坐标位置,1≤x≤W,1≤y≤H,W表示左视点图像和右视点图像的宽度,H表示左视点图像和右视点图像的高度,Lorg(x,y)表示{Lorg(x,y)}中坐标位置为(x,y)的像素点的像素值,Rorg(x,y)表示{Rorg(x,y)}中坐标位置为(x,y)的像素点的像素值,Ldis(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的像素值,Rdis(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的像素值,表示中坐标位置为(x,y)的像素点的像素值;
②根据{Lorg(x,y)}、{Rorg(x,y)}、{Ldis(x,y)}、{Rdis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,对应获取{Lorg(x,y)}、{Rorg(x,y)}、{Ldis(x,y)}、{Rdis(x,y)}中的每个像素点的振幅,然后根据{Lorg(x,y)}和{Rorg(x,y)}中的每个像素点的振幅及中的每个像素点的像素值,计算Sorg的独眼图,记为{CMorg(x,y)},并根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的振幅及中的每个像素点的像素值,计算Sdis的独眼图,记为{CMdis(x,y)},其中,CMorg(x,y)表示{CMorg(x,y)}中坐标位置为(x,y)的像素点的像素值,CMdis(x,y)表示{CMdis(x,y)}中坐标位置为(x,y)的像素点的像素值;
③根据{CMorg(x,y)}、{CMdis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMorg(x,y)}与{CMdis(x,y)}之间的结构失真图,记为{Dappear(x,y)},其中,Dappear(x,y)表示{Dappear(x,y)}中坐标位置为(x,y)的像素点的像素值;
④根据{CMorg(x,y)}离散傅立叶变换后得到的振幅和相位,获取{CMorg(x,y)}的二维显著图;然后通过获取的视差梯度图和相对视差图,获取的深度显著图;再根据{CMorg(x,y)}的二维显著图和的深度显著图,获取{CMorg(x,y)}的三维显著图,记为{S3D(x,y)},其中,S3D(x,y)表示{S3D(x,y)}中坐标位置为(x,y)的像素点的像素值;
⑤根据{Dappear(x,y)}和{S3D(x,y)},将{CMdis(x,y)}分成四类区域,分别为显著失真区域显著非失真区域非显著失真区域非显著非失真区域
⑥根据{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMorg(x,y)}中的每个像素点的相位,并根据{CMdis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMdis(x,y)}中的每个像素点的相位;再根据{CMorg(x,y)}和{CMdis(x,y)}中的每个像素点的相位、{S3D(x,y)},并结合{CMdis(x,y)}中的每个像素点所属的区域,计算Sdis的图像质量客观评价预测值,记为Q。
所述的步骤②的具体过程为:
②-1、采用log-Gabor滤波器对{Lorg(x,y)}进行滤波处理,得到{Lorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为其中,α表示log-Gabor滤波器的尺度因子,1≤α≤4,θ表示log-Gabor滤波器的方向因子,1≤θ≤4;
②-2、根据{Lorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{Lorg(x,y)}中的每个像素点的振幅,将{Lorg(x,y)}中坐标位置为(x,y)的像素点的振幅记为 GE org L ( x , y ) = Σ θ = 1 4 Σ α = 1 4 ( e α , θ L ( x , y ) ) 2 + ( o α , θ L ( x , y ) ) 2 ;
②-3、按照步骤②-1至步骤②-2获取{Lorg(x,y)}中的每个像素点的振幅的操作过程,以相同的方式获取{Rorg(x,y)}、{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的振幅,将{Rorg(x,y)}中坐标位置为(x,y)的像素点的振幅记为将{Ldis(x,y)}中坐标位置为(x,y)的像素点的振幅记为将{Rdis(x,y)}中坐标位置为(x,y)的像素点的振幅记为
②-4、根据{Lorg(x,y)}和{Rorg(x,y)}中的每个像素点的振幅及中的每个像素点的像素值,计算Sorg的独眼图,记为{CMorg(x,y)},将{CMorg(x,y)}中坐标位置为(x,y)的像素点的像素值记为CMorg(x,y), CM org ( x , y ) = GE org L ( x , y ) × L org ( x , y ) + GE org R ( x - d org L ( x , y ) , y ) × R org ( x - d org L ( x , y ) , y ) GE org L ( x , y ) + GE org R ( x - d org L ( x , y ) , y ) , 其中,表示{Rorg(x,y)}中坐标位置为的像素点的振幅,表示{Rorg(x,y)}中坐标位置为的像素点的像素值;
②-5、根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的振幅及中的每个像素点的像素值,计算Sdis的独眼图,记为{CMdis(x,y)},将{CMdis(x,y)}中坐标位置为(x,y)的像素点的像素值记为CMdis(x,y), CM dis ( x , y ) = GE dis L ( x , y ) × L dis ( x , y ) + GE dis R ( x - d org L ( x , y ) , y ) × R dis ( x - d org L ( x , y ) , y ) GE dis L ( x , y ) + GE dis R ( x - d dis L ( x , y ) , y ) , 其中,表示{Rdis(x,y)}中坐标位置为的像素点的振幅,表示{Rdis(x,y)}中坐标位置为的像素点的像素值。
所述的步骤③的具体过程为:
③-1、采用log-Gabor滤波器对{CMorg(x,y)}进行滤波处理,得到{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为其中,α表示log-Gabor滤波器的尺度因子,1≤α≤4,θ表示log-Gabor滤波器的方向因子,1≤θ≤4;
③-2、根据{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMorg(x,y)}中的每个像素点在不同尺度和方向的振幅,将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅记为 GE α , θ org ( x , y ) = ( e α , θ CM ( x , y ) ) 2 + ( o α , θ CM ( x , y ) ) 2 ;
③-3、按照步骤③-1至步骤③-2获取{CMorg(x,y)}中的每个像素点在不同尺度和方向的振幅的操作过程,以相同的方式获取{CMdis(x,y)}中的每个像素点在不同尺度和方向的振幅,将{CMdis(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅记为
③-4、计算{CMorg(x,y)}中的每个像素点在不同尺度和方向的振幅的标准差、偏度和峰度,将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅的标准差、偏度和峰度分别对应记为 σ α , θ org ( x , y ) = Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ org ( x 1 , y 1 ) - μ α , θ org ( x , y ) ) 2 M , ζ α , θ org ( x , y ) = 1 M × Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ org ( x 1 , y 1 ) - μ α , θ org σ α , θ org ( x , y ) ) 4 , κ α , θ org ( x , y ) = 1 M × Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ org ( x 1 , y 1 ) - μ α , θ org ( x , y ) σ α , θ org ( x , y ) ) 3 , 其中,
N(x,y)表示以坐标位置为(x,y)的像素点为中心的邻域窗口,M表示N(x,y)内包含的像素点的个数,表示{CMorg(x,y)}中坐标位置为(x1,y1)的像素点在不同尺度和方向的振幅,1≤x1≤W,1≤y1≤H;
计算{CMdis(x,y)}中的每个像素点在不同尺度和方向的振幅的标准差、偏度和峰度,将{CMdis(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅的标准差、偏度和峰度分别对应记为 σ α , θ dis ( x , y ) = Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ dis ( x 1 , y 1 ) - μ α , θ dis ( x , y ) ) 2 M , ζ α , θ dis ( x , y ) = 1 M × Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ dis ( x 1 , y 1 ) - μ α , θ dis ( x , y ) σ α , θ dis ( x , y ) ) 4 , κ α , θ dis ( x , y ) = 1 M × Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ dis ( x 1 , y 1 ) - μ α , θ dis ( x , y ) σ α , θ dis ( x , y ) ) 3 , 其中, μ α , θ dis ( x , y ) = Σ ( x 1 , y 1 ) ∈ N ( x , y ) GE α , θ dis ( x 1 , y 1 ) M , 表示{CMdis(x,y)}中坐标位置为(x1,y1)的像素点在不同尺度和方向的振幅;
③-5、根据{CMorg(x,y)}中的每个像素点在不同尺度和方向的振幅的标准差、偏度和峰度及{CMdis(x,y)}中的每个像素点在不同尺度和方向的振幅的标准差、偏度和峰度,计算{CMorg(x,y)}与{CMdis(x,y)}之间的结构失真图,记为{Dappear(x,y)},将{Dappear(x,y)}中坐标位置为(x,y)的像素点的像素值记为Dappear(x,y), D appear ( x , y ) = Σ θ = 1 4 Σ α = 1 4 ω θ × ( ρ × | σ α , θ org ( x , y ) - σ α , θ dis ( x , y ) | + λ × | ζ α , θ org ( x , y ) - ζ α , θ dis ( x , y ) | + γ × | κ α , θ org ( x , y ) - κ α , θ dis ( x , y ) | ) ,其中,ωθ表示不同尺度的加权系数,ρ、λ和γ为控制系数,符号“||”为取绝对值符号。
所述的步骤③-4中邻域窗口N(x,y)的大小为4×4;所述的步骤③-5中当θ=1时取ωθ=0.5,当θ=2时取ωθ=0.75,当θ=3时取ωθ=1.5,当θ=4时取ωθ=6;所述的步骤③-5中取ρ=0.6、λ=0.05、γ=0.02。
所述的步骤④的具体过程为:
④-1、对{CMorg(x,y)}进行离散傅立叶变换,得到{CMorg(x,y)}的振幅和相位,分别对应记为{Morg(u,v)}和{Aorg(u,v)},其中,u表示变换域的振幅或相位的水平坐标位置,v表示变换域的振幅或相位的垂直坐标位置,1≤u≤W,1≤v≤H,Morg(u,v)表示{Morg(u,v)}中坐标位置为(u,v)的像素点的振幅值,Aorg(u,v)表示{Aorg(u,v)}中坐标位置为(u,v)的像素点的相位值;
④-2、计算{Morg(u,v)}的高频分量的振幅,记为{Forg(u,v)},将{Forg(u,v)}中坐标位置为(u,v)的像素点的高频分量的振幅值记为Forg(u,v),Forg(u,v)=ln(Morg(u,v))-hm(u,v)*ln(Morg(u,v)),其中,ln()为以e为底的对数函数,e=2.718281828,符号“*”为卷积操作符号,hm(u,v)表示m×m的均值滤波矩阵,
④-3、根据{Forg(u,v)}和{Aorg(u,v)}进行离散傅立叶反变换,将获得的反变换图像作为{CMorg(x,y)}的二维显著图,记为{SMorg(x,y)},其中,SMorg(x,y)表示{SMorg(x,y)}中坐标位置为(x,y)的像素点的像素值;
④-4、采用高斯差分滤波器对进行滤波处理,得到的视差梯度图,记为{D1(x,y)},将{D1(x,y)}中坐标位置为(x,y)的像素点的像素值记为D1(x,y), D 1 ( x , y ) = d org L ( x , y ) * ( 1 2 πσ 1 2 exp ( - x 2 + y 2 2 σ 1 2 ) - 1 2 π ( k 1 σ 1 ) 2 exp ( - x 2 + y 2 2 ( k 1 σ 1 ) 2 ) ) , 其中,符号“*”为卷积操作符号,exp()为以e为底的指数函数,e=2.718281828,σ1为高斯算子的标准差,k1为控制参数;
④-5、根据中的最大视差值和最小视差值,计算的相对视差图,记为{D2(x,y)},将{D2(x,y)}中坐标位置为(x,y)的像素点的像素值记为D2(x,y),其中,dmin表示中的最小视差值,dmax表示中的最大视差值;
④-6、根据的视差梯度图{D1(x,y)}和相对视差图{D2(x,y)},获取的深度显著图,记为{D(x,y)},将{D(x,y)}中坐标位置为(x,y)的像素点的像素值记为D(x,y),其中,表示D1(x,y)的权重,表示D2(x,y)的权重,
④-7、根据{CMorg(x,y)}的二维显著图{SMorg(x,y)}和的深度显著图{D(x,y)},获取{CMorg(x,y)}的三维显著图,记为{S3D(x,y)},将{S3D(x,y)}中坐标位置为(x,y)的像素点的像素值记为S3D(x,y),其中,表示SMorg(x,y)的权重,表示D(x,y)的权重,
所述的步骤④-2中取m=3;所述的步骤④-4中取σ1=0.67,k1=4;所述的步骤④-6中取所述的步骤④-7中取 θ 1 = 0.5 , θ 2 = 0.5 .
所述的步骤⑤的具体过程为:
⑤-1、将{CMdis(x,y)}中当前待处理的像素点定义为当前像素点;
⑤-2、假设当前像素点的坐标位置为(x1,y1),其中,1≤x1≤W,1≤y1≤H;
⑤-3、如果S3D(x1,y1)>T1且Dappear(x1,y1)>T2,则将当前像素点归属为显著失真区域如果S3D(x1,y1)>T1且Dappear(x1,y1)≤T2,则将当前像素点归属为显著非失真区域如果S3D(x1,y1)≤T1且Dappear(x1,y1)>T2,则将当前像素点归属为非显著失真区域如果S3D(x1,y1)≤T1且Dappear(x1,y1)≤T2,则将当前像素点归属为非显著非失真区域其中,T1为{S3D(x,y)}通过大津法得到的自适应阈值,T2=k2σ2,σ2为{Dappear(x,y)}的标准差,k2为控制参数,S3D(x1,y1)表示{S3D(x,y)}中坐标位置为(x1,y1)的像素点的像素值,Dappear(x1,y1)表示{Dappear(x,y)}中坐标位置为(x1,y1)的像素点的像素值;
⑤-4、将{CMdis(x,y)}中下一个待处理的像素点作为当前像素点,然后返回步骤⑤-2继续执行,直至{CMdis(x,y)}中的所有像素点处理完毕。
所述的步骤⑤-3中取k2=1.54。
所述的步骤⑥的具体过程为:
⑥-1、采用log-Gabor滤波器对{CMorg(x,y)}进行滤波处理,得到{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为其中,α表示log-Gabor滤波器的尺度因子,1≤α≤4,θ表示log-Gabor滤波器的方向因子,1≤θ≤4;
⑥-2、根据{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMorg(x,y)}中的每个像素点的相位,将{CMorg(x,y)}中坐标位置为(x,y)的像素点的相位记为LPorg(x,y), LP org ( x , y ) = arctan ( Σ θ = 1 4 Σ α = 1 4 o α , θ CM ( x , y ) / Σ θ = 1 4 Σ α = 1 4 e α , θ CM ( x , y ) ) , 其中,arctan()为取反正切函数;
⑥-3、按照步骤⑥-1至步骤⑥-2获取{CMorg(x,y)}中的每个像素点的相位的操作过程,以相同的方式获取{CMdis(x,y)}中的每个像素点的相位,将{CMdis(x,y)}中坐标位置为(x,y)的像素点的相位记为LPdis(x,y);
⑥-4、根据{CMorg(x,y)}和{CMdis(x,y)}中的每个像素点的相位、{S3D(x,y)},并结合{CMdis(x,y)}中的每个像素点所属的区域,计算Sdis的图像质量客观评价预测值,记为Q,Q=w1×Q1+w2×Q2+w3×Q3+w4×Q4 其中,w1表示Q1的权重,w2表示Q2的权重,w3表示Q3的权重,w4表示Q4的权重,w1+w2+w3+w4=1,C1为控制参数。
所述的步骤⑥-4中取w1=0.475,w2=0.280,w3=0.045,w4=0.200,C1=0.000001。
与现有技术相比,本发明的优点在于:
1)本发明方法分别提取出无失真的立体图像的独眼图与待评价的失真的立体图像的独眼图之间的结构失真图、待评价的失真的立体图像的独眼图的三维显著图,得到的结构失真图和三维显著图能够较好地反映人眼对不同区域的敏感程度,使得客观评价结果能更符合人类视觉,从而有效地提高了客观评价结果与主观感知的相关性。
2)本发明方法将待评价的失真的立体图像的独眼图分成显著失真、显著非失真、非显著失真和非显著非失真这四个区域分别进行评价,并对各个区域的客观评价度量值进行融合得到待评价的失真的立体图像的图像质量客观评价预测值,有效地提高了客观评价结果与主观感知的相关性。
附图说明
图1为本发明方法的总体实现框图;
图2a为Akko&Kayo立体图像的独眼图的二维显著图;
图2b为Akko&Kayo立体图像的左视点图像与右视点图像之间的视差图像的深度显著图;
图2c为Akko&Kayo立体图像的独眼图的三维显著图;
图3a为Door Flowers立体图像的独眼图的二维显著图;
图3b为Door Flowers立体图像的左视点图像与右视点图像之间的视差图像的深度显著图;
图3c为Door Flowers立体图像的独眼图的三维显著图;
图4a为Leaving Laptop立体图像的独眼图的二维显著图;
图4b为Leaving Laptop立体图像的左视点图像与右视点图像之间的视差图像的深度显著图;
图4c为Leaving Laptop立体图像的独眼图的三维显著图;
图5a为Akko&Kayo(640×480)立体图像的左视点图像;
图5b为Alt Moabit(1024×768)立体图像的左视点图像;
图5c为Balloons(1024×768)立体图像的左视点图像;
图5d为Door Flowers(1024×768)立体图像的左视点图像;
图5e为Kendo(1024×768)立体图像的左视点图像;
图5f为Leaving Laptop(1024×768)立体图像的左视点图像;
图5g为Lovebird1(1024×768)立体图像的左视点图像;
图5h为Newspaper(1024×768)立体图像的左视点图像;
图5i为Xmas(640×480)立体图像的左视点图像;
图6为失真立体图像集合中的各幅失真的立体图像的图像质量客观评价预测值与平均主观评分差值的散点图。
具体实施方式
以下结合附图实施例对本发明作进一步详细描述。
本发明提出的一种基于区域重要性分类的立体图像质量客观评价方法,其总体实现框图如图1所示,其首先分别计算原始的无失真的立体图像的独眼图和待评价的失真的立体图像的独眼图,然后计算两个独眼图之间的结构失真图和原始的无失真的立体图像的独眼图的三维显著图,再将待评价的失真的立体图像的独眼图分成显著失真、显著非失真、非显著失真和非显著非失真这四个区域分别进行评价,并对各个区域的客观评价度量值进行融合,得到待评价的失真的立体图像的图像质量客观评价预测值,具体包括以下步骤:
①令Sorg表示原始的无失真的立体图像,令Sdis表示待评价的失真的立体图像,将Sorg的左视点图像记为{Lorg(x,y)},将Sorg的右视点图像记为{Rorg(x,y)},将Sdis的左视点图像记为{Ldis(x,y)},将Sdis的右视点图像记为{Rdis(x,y)},然后采用立体匹配法计算{Lorg(x,y)}与{Rorg(x,y)}之间的视差图像,记为其中,此处(x,y)表示左视点图像和右视点图像中的像素点的坐标位置,1≤x≤W,1≤y≤H,W表示左视点图像和右视点图像的宽度,H表示左视点图像和右视点图像的高度,Lorg(x,y)表示{Lorg(x,y)}中坐标位置为(x,y)的像素点的像素值,Rorg(x,y)表示{Rorg(x,y)}中坐标位置为(x,y)的像素点的像素值,Ldis(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的像素值,Rdis(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的像素值,表示中坐标位置为(x,y)的像素点的像素值。
②根据{Lorg(x,y)}、{Rorg(x,y)}、{Ldis(x,y)}、{Rdis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,对应获取{Lorg(x,y)}、{Rorg(x,y)}、{Ldis(x,y)}、{Rdis(x,y)}中的每个像素点的振幅,然后根据{Lorg(x,y)}和{Rorg(x,y)}中的每个像素点的振幅及中的每个像素点的像素值,计算Sorg的独眼图,记为{CMorg(x,y)},并根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的振幅及中的每个像素点的像素值,计算Sdis的独眼图,记为{CMdis(x,y)},其中,CMorg(x,y)表示{CMorg(x,y)}中坐标位置为(x,y)的像素点的像素值,CMdis(x,y)表示{CMdis(x,y)}中坐标位置为(x,y)的像素点的像素值。
在此具体实施例中,步骤②的具体过程为:
②-1、采用log-Gabor滤波器对{Lorg(x,y)}进行滤波处理,得到{Lorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为其中,α表示log-Gabor滤波器的尺度因子,1≤α≤4,θ表示log-Gabor滤波器的方向因子,1≤θ≤4。
②-2、根据{Lorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{Lorg(x,y)}中的每个像素点的振幅,将{Lorg(x,y)}中坐标位置为(x,y)的像素点的振幅记为 GE org L ( x , y ) = Σ θ = 1 4 Σ α = 1 4 ( e α , θ L ( x , y ) ) 2 + ( o α , θ L ( x , y ) ) 2 .
②-3、按照步骤②-1至步骤②-2获取{Lorg(x,y)}中的每个像素点的振幅的操作过程,以相同的方式获取{Rorg(x,y)}、{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的振幅,将{Rorg(x,y)}中坐标位置为(x,y)的像素点的振幅记为将{Ldis(x,y)}中坐标位置为(x,y)的像素点的振幅记为将{Rdis(x,y)}中坐标位置为(x,y)的像素点的振幅记为例如:获取{Ldis(x,y)}中的每个像素点的振幅的具体过程为:1)采用log-Gabor滤波器对{Ldis(x,y)}进行滤波处理,得到{Ldis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{Ldis(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为将{Ldis(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为根据{Ldis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{Ldis(x,y)}中的每个像素点的振幅,将{Ldis(x,y)}中坐标位置为(x,y)的像素点的振幅记为 GE dis L ( x , y ) = Σ θ = 1 4 Σ α = 1 4 ( e α , θ ′ L ( x , y ) ) 2 + ( o α , θ ′ L ( x , y ) ) 2 .
②-4、根据{Lorg(x,y)}和{Rorg(x,y)}中的每个像素点的振幅及中的每个像素点的像素值,计算Sorg的独眼图,记为{CMorg(x,y)},将{CMorg(x,y)}中坐标位置为(x,y)的像素点的像素值记为CMorg(x,y), CM org ( x , y ) = GE org L ( x , y ) × L org ( x , y ) + GE org R ( x - d org L ( x , y ) , y ) × R org ( x - d org L ( x , y ) , y ) GE org L ( x , y ) + GE org R ( x - d org L ( x , y ) , y ) , 其中,表示{Rorg(x,y)}中坐标位置为的像素点的振幅,表示{Rorg(x,y)}中坐标位置为的像素点的像素值。
②-5、根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的振幅及中的每个像素点的像素值,计算Sdis的独眼图,记为{CMdis(x,y)},将{CMdis(x,y)}中坐标位置为(x,y)的像素点的像素值记为CMdis(x,y), CM dis ( x , y ) = GE dis L ( x , y ) × L dis ( x , y ) + GE dis R ( x - d org L ( x , y ) , y ) × R dis ( x - d org L ( x , y ) , y ) GE dis L ( x , y ) + GE dis R ( x - d org L ( x , y ) , y ) , 其中,表示{Rdis(x,y)}中坐标位置为的像素点的振幅,表示{Rdis(x,y)}中坐标位置为的像素点的像素值。
③根据{CMorg(x,y)}、{CMdis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMorg(x,y)}与{CMdis(x,y)}之间的结构失真图,记为{Dappear(x,y)},其中,Dappear(x,y)表示{Dappear(x,y)}中坐标位置为(x,y)的像素点的像素值。
在此具体实施例中,步骤③的具体过程为:
③-1、采用log-Gabor滤波器对{CMorg(x,y)}进行滤波处理,得到{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为其中,α表示log-Gabor滤波器的尺度因子,1≤α≤4,θ表示log-Gabor滤波器的方向因子,1≤θ≤4。
③-2、根据{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMorg(x,y)}中的每个像素点在不同尺度和方向的振幅,将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅记为 GE α , θ org ( x , y ) = ( e α , θ CM ( x , y ) ) 2 + ( o α , θ CM ( x , y ) ) 2 .
③-3、按照步骤③-1至步骤③-2获取{CMorg(x,y)}中的每个像素点在不同尺度和方向的振幅的操作过程,以相同的方式获取{CMdis(x,y)}中的每个像素点在不同尺度和方向的振幅,将{CMdis(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅记为即获取{CMdis(x,y)}中的每个像素点在不同尺度和方向的振幅的操作过程为:1)采用log-Gabor滤波器对{CMdis(x,y)}进行滤波处理,得到{CMdis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{CMdis(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为将{CMdis(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为根据{CMdis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMdis(x,y)}中的每个像素点在不同尺度和方向的振幅,将{CMdis(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅记为 GE α , θ dis ( x , y ) = ( e α , θ ′ CM ( x , y ) ) 2 + ( o α , θ ′ CM ( x , y ) ) 2 .
③-4、计算{CMorg(x,y)}中的每个像素点在不同尺度和方向的振幅的标准差、偏度和峰度,将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅的标准差、偏度和峰度分别对应记为 σ α , θ org ( x , y ) = Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ org ( x 1 , y 1 ) - μ α , θ org ( x , y ) ) 2 M , ζ α , θ org ( x , y ) = 1 M × Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ org ( x 1 , y 1 ) - μ α , θ org ( x , y ) σ α , θ org ( x , y ) ) 4 , κ α , θ org ( x , y ) = 1 M × Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ org ( x 1 , y 1 ) - μ α , θ org ( x , y ) σ α , θ org ( x , y ) ) 3 , 其中, μ α , θ org ( x , y ) = Σ ( x 1 , y 1 ) ∈ N ( x , y ) GE α , θ org ( x 1 , y 1 ) M , N(x,y)表示以坐标位置为(x,y)的像素点为中心的邻域窗口,在此邻域窗口N(x,y)的大小为4×4,M表示N(x,y)内包含的像素点的个数,在此M=16,表示{CMorg(x,y)}中坐标位置为(x1,y1)的像素点在不同尺度和方向的振幅,1≤x1≤W,1≤y1≤H。
计算{CMdis(x,y)}中的每个像素点在不同尺度和方向的振幅的标准差、偏度和峰度,将{CMdis(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅的标准差、偏度和峰度分别对应记为 σ α , θ dis ( x , y ) = Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ dis ( x 1 , y 1 ) - μ α , θ dis ( x , y ) ) 2 M , ζ α , θ dis ( x , y ) = 1 M × Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ dis ( x 1 , y 1 ) - μ α , θ dis ( x , y ) σ α , θ dis ( x , y ) ) 4 , κ α , θ dis ( x , y ) = 1 M × Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ dis ( x 1 , y 1 ) - μ α , θ dis ( x , y ) σ α , θ dis ( x , y ) ) 3 , 其中, μ α , θ dis ( x , y ) = Σ ( x 1 , y 1 ) ∈ N ( x , y ) GE α , θ dis ( x 1 , y 1 ) M , 表示{CMdis(x,y)}中坐标位置为(x1,y1)的像素点在不同尺度和方向的振幅。
③-5、根据{CMorg(x,y)}中的每个像素点在不同尺度和方向的振幅的标准差、偏度和峰度及{CMdis(x,y)}中的每个像素点在不同尺度和方向的振幅的标准差、偏度和峰度,计算{CMorg(x,y)}与{CMdis(x,y)}之间的结构失真图,记为{Dappear(x,y)},将{Dappear(x,y)}中坐标位置为(x,y)的像素点的像素值记为Dappear(x,y), D appear ( x , y ) = Σ θ = 1 4 Σ α = 1 4 ω θ × ( ρ × | σ α , θ org ( x , y ) - σ α , θ dis ( x , y ) | + λ × | ζ α , θ org ( x , y ) - ζ α , θ dis ( x , y ) | + γ × | κ α , θ org ( x , y ) - κ α , θ dis ( x , y ) | ) ,其中,ωθ表示不同尺度的加权系数,在本实施例中当θ=1时取ωθ=0.5,当θ=2时取ωθ=0.75,当θ=3时取ωθ=1.5,当θ=4时取ωθ=6,ρ、λ和γ为控制系数,在此取ρ=0.6、λ=0.05、γ=0.02,符号“||”为取绝对值符号。
④根据{CMorg(x,y)}离散傅立叶变换后得到的振幅和相位,获取{CMorg(x,y)}的二维显著图;然后通过获取的视差梯度图和相对视差图,获取的深度显著图;再根据{CMorg(x,y)}的二维显著图和的深度显著图,获取{CMorg(x,y)}的三维显著图,记为{S3D(x,y)},其中,S3D(x,y)表示{S3D(x,y)}中坐标位置为(x,y)的像素点的像素值。
在此具体实施例中,步骤④的具体过程为:
④-1、对{CMorg(x,y)}进行离散傅立叶变换,得到{CMorg(x,y)}的振幅和相位,分别对应记为{Morg(u,v)}和{Aorg(u,v)},其中,u表示变换域的振幅或相位的水平坐标位置,v表示变换域的振幅或相位的垂直坐标位置,1≤u≤W,1≤v≤H,Morg(u,v)表示{Morg(u,v)}中坐标位置为(u,v)的像素点的振幅值,Aorg(u,v)表示{Aorg(u,v)}中坐标位置为(u,v)的像素点的相位值。
④-2、计算{Morg(u,v)}的高频分量的振幅,记为{Forg(u,v)},将{Forg(u,v)}中坐标位置为(u,v)的像素点的高频分量的振幅值记为Forg(u,v),Forg(u,v)=ln(Morg(u,v))-hm(u,v)*ln(Morg(u,v)),其中,ln()为以e为底的对数函数,e=2.718281828,符号“*”为卷积操作符号,hm(u,v)表示m×m的均值滤波矩阵,在此取m×m的值为3×3,即 h m ( u , v ) = 1 9 1 1 1 1 1 1 1 1 1 .
④-3、根据{Forg(u,v)}和{Aorg(u,v)}进行离散傅立叶反变换,将获得的反变换图像作为{CMorg(x,y)}的二维显著图,记为{SMorg(x,y)},其中,SMorg(x,y)表示{SMorg(x,y)}中坐标位置为(x,y)的像素点的像素值。
④-4、采用高斯差分滤波器对进行滤波处理,得到的视差梯度图,记为{D1(x,y)},将{D1(x,y)}中坐标位置为(x,y)的像素点的像素值记为D1(x,y), D 1 ( x , y ) = d org L ( x , y ) * ( 1 2 πσ 1 2 exp ( - x 2 + y 2 2 σ 1 2 ) - 1 2 π ( k 1 σ 1 ) 2 exp ( - x 2 + y 2 2 ( k 1 σ 1 ) 2 ) ) , 其中,符号“*”为卷积操作符号,exp()为以e为底的指数函数,e=2.718281828,σ1为高斯算子的标准差,在此取σ1=0.67,k1为控制参数,在此取k1=4。
④-5、根据中的最大视差值和最小视差值,计算的相对视差图,记为{D2(x,y)},将{D2(x,y)}中坐标位置为(x,y)的像素点的像素值记为D2(x,y),其中,dmin表示中的最小视差值,dmax表示中的最大视差值。
④-6、根据的视差梯度图{D1(x,y)}和相对视差图{D2(x,y)},获取的深度显著图,记为{D(x,y)},将{D(x,y)}中坐标位置为(x,y)的像素点的像素值记为D(x,y),其中,表示D1(x,y)的权重,表示D2(x,y)的权重,在此取
④-7、根据{CMorg(x,y)}的二维显著图{SMorg(x,y)}和的深度显著图{D(x,y)},获取{CMorg(x,y)}的三维显著图,记为{S3D(x,y)},将{S3D(x,y)}中坐标位置为(x,y)的像素点的像素值记为S3D(x,y),其中,表示SMorg(x,y)的权重,表示D(x,y)的权重,在此取
在此,图2a、图2b和图2c分别给出了“Akko&Kayo”的独眼图的二维显著图、“Akko&Kayo”的左视点图像与右视点图像之间的视差图像的深度显著图、“Akko&Kayo”的独眼图的三维显著图,图3a、图3b和图3c分别给出了“Door Flowers”的独眼图的二维显著图、“Door Flowers”的左视点图像与右视点图像之间的视差图像的深度显著图、“DoorFlowers”的独眼图的三维显著图,图4a、图4b和图4c分别给出了“Leaving Laptop”的独眼图的二维显著图、“Leaving Laptop”的左视点图像与右视点图像之间的视差图像的深度显著图、“Leaving Laptop”的独眼图的三维显著图,从图2c、图3c和图4c中可以看出,本发明方法提取的三维显著图能够很好地反映人类视觉注意力。
⑤根据{Dappear(x,y)}和{S3D(x,y)},将{CMdis(x,y)}分成四类区域,分别为显著失真区域显著非失真区域非显著失真区域非显著非失真区域
在此具体实施例中,步骤⑤的具体过程为:
⑤-1、将{CMdis(x,y)}中当前待处理的像素点定义为当前像素点。
⑤-2、假设当前像素点的坐标位置为(x1,y1),其中,1≤x1≤W,1≤y1≤H。
⑤-3、如果S3D(x1,y1)>T1且Dappear(x1,y1)>T2,则将当前像素点归属为显著失真区域如果S3D(x1,y1)>T1且Dappear(x1,y1)≤T2,则将当前像素点归属为显著非失真区域如果S3D(x1,y1)≤T1且Dappear(x1,y1)>T2,则将当前像素点归属为非显著失真区域如果S3D(x1,y1)≤T1且Dappear(x1,y1)≤T2,则将当前像素点归属为非显著非失真区域其中,T1为{S3D(x,y)}通过大津法得到的自适应阈值,T2=k2σ2,σ2为{Dappear(x,y)}的标准差,k2为控制参数,在此取k2=1.54,S3D(x1,y1)表示{S3D(x,y)}中坐标位置为(x1,y1)的像素点的像素值,Dappear(x1,y1)表示{Dappear(x,y)}中坐标位置为(x1,y1)的像素点的像素值。
⑤-4、将{CMdis(x,y)}中下一个待处理的像素点作为当前像素点,然后返回步骤⑤-2继续执行,直至{CMdis(x,y)}中的所有像素点处理完毕。
⑥根据{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMorg(x,y)}中的每个像素点的相位,并根据{CMdis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMdis(x,y)}中的每个像素点的相位;再根据{CMorg(x,y)}和{CMdis(x,y)}中的每个像素点的相位、{S3D(x,y)},并结合{CMdis(x,y)}中的每个像素点所属的区域,计算Sdis的图像质量客观评价预测值,记为Q。
在此具体实施例中,步骤⑥的具体过程为:
⑥-1、采用log-Gabor滤波器对{CMorg(x,y)}进行滤波处理,得到{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为其中,α表示log-Gabor滤波器的尺度因子,1≤α≤4,θ表示log-Gabor滤波器的方向因子,1≤θ≤4。
⑥-2、根据{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMorg(x,y)}中的每个像素点的相位,将{CMorg(x,y)}中坐标位置为(x,y)的像素点的相位记为LPorg(x,y), LP org ( x , y ) = arctan ( Σ θ = 1 4 Σ α = 1 4 o α , θ CM ( x , y ) / Σ θ = 1 4 Σ α = 1 4 e α , θ CM ( x , y ) ) , 其中,arctan()为取反正切函数。
⑥-3、按照步骤⑥-1至步骤⑥-2获取{CMorg(x,y)}中的每个像素点的相位的操作过程,以相同的方式获取{CMdis(x,y)}中的每个像素点的相位,将{CMdis(x,y)}中坐标位置为(x,y)的像素点的相位记为LPdis(x,y)。即:获取{CMdis(x,y)}中的每个像素点的相位的操作过程为:1)采用log-Gabor滤波器对{CMdis(x,y)}进行滤波处理,得到{CMdis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{CMdis(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为将{CMdis(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为2)根据{CMdis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMdis(x,y)}中的每个像素点的相位,将{CMdis(x,y)}中坐标位置为(x,y)的像素点的相位记为LPdis(x,y), LP dis ( x , y ) = arctan ( Σ θ = 1 4 Σ α = 1 4 o α , θ ′ CM ( x , y ) / Σ θ = 1 4 Σ α = 1 4 e α , θ ′ CM ( x , y ) ) , 其中,arctan()为取反正切函数。
⑥-4、根据{CMorg(x,y)}和{CMdis(x,y)}中的每个像素点的相位、{S3D(x,y)},并结合{CMdis(x,y)}中的每个像素点所属的区域,计算Sdis的图像质量客观评价预测值,记为Q,Q=w1×Q1+w2×Q2+w3×Q3+w4×Q4 其中,w1表示Q1的权重,w2表示Q2的权重,w3表示Q3的权重,w4表示Q4的权重,w1+w2+w3+w4=1,在此取w1=0.475,w2=0.280,w3=0.045,w4=0.200,C1为控制参数,在此取C1=0.000001。
⑦采用n幅原始的无失真的立体图像,建立其在不同失真类型不同失真程度下的失真立体图像集合,该失真立体图像集合包括多幅失真的立体图像,利用主观质量评价方法分别获取该失真立体图像集合中每幅失真的立体图像的平均主观评分差值,记为DMOS,DMOS=100-MOS,其中,MOS表示主观评分均值,DMOS∈[0,100],n≥1;然后按照步骤①至步骤⑥计算Sdis的图像质量客观评价预测值Q的操作,以相同的方式分别计算该失真立体图像集合中每幅失真的立体图像的图像质量客观评价预测值。
在本实施例中,利用9幅无失真的立体图像(图5a、图5b、图5c、图5d、图5e、图5f、图5g、图5h和图5i分别给出了立体图像的左视点图像),建立对应在高斯模糊下5个失真等级、高斯白噪声下5个失真等级、JPEG压缩下5个失真等级、JPEG2000压缩下5个失真等级、H.264压缩下6个失真等级的一共234幅失真立体图像作为测试立体图像。这234幅失真立体图像构成一个失真立体图像集合,利用现有的主观质量评价方法分别获取该失真立体图像集合中每幅失真的立体图像的平均主观评分差值,记为DMOS,DMOS=100-MOS,其中,MOS表示主观评分均值,DMOS∈[0,100];然后按照步骤①至步骤⑥计算Sdis的图像质量客观评价预测值Q的操作,以相同的方式分别计算该失真立体图像集合中每幅失真的立体图像的图像质量客观评价预测值。
采用图5a至图5i所示的9幅无失真的立体图像在不同程度的JPEG压缩、JPEG2000压缩、高斯模糊、白噪声和H.264编码失真情况下的234幅失真的立体图像来分析这234幅失真的立体图像的图像质量客观评价预测值与平均主观评分差值之间的相关性。在本实施例中,利用评估图像质量评价方法的4个常用客观参量作为评价指标,即非线性回归条件下的Pearson相关系数(Pearson linear correlation coefficient,PLCC)、Spearman相关系数(Spearman rank order correlation coefficient,SROCC)、Kendall相关系数(Kendall rank-order correlation coefficient,KROCC)、均方误差(root mean squared error,RMSE),PLCC和RMSE反映失真的立体图像的图像质量客观评价预测值的准确性,SROCC和KROCC反映其单调性。将计算得到的234幅失真的立体图像的图像质量客观评价预测值做四参数Logistic函数非线性拟合,PLCC、SROCC和KROCC值越高、RMSE值越小说明本发明的质量客观评价方法与平均主观评分差值相关性越好。反映立体图像客观评价方法性能的PLCC、SROCC、KROCC和RMSE系数如表1所列,从表1所列的数据可知,按本发明方法得到的失真的立体图像的最终的图像质量客观评价预测值与平均主观评分差值之间的相关性是很高的,这充分表明了客观评价结果与人眼主观感知的结果较为一致,足以说明本发明方法的有效性。
将本发明方法与现有的全局评价方法的性能进行比较,全局评价方法直接从全局图像中得到图像质量评价预测值(不考虑不同区域的重要性),表2给出了本发明方法与全局评价方法的PLCC和SROCC性能的比较结果,从表2中可以看出,由于本发明方法根据区域重要性对各个区域分别进行评价,并对各个区域的客观评价度量值进行融合,得到的图像质量评价预测值与平均主观评分差值之间的相关性更强,足以说明本方法是有效的。
图6给出了234幅失真的立体图像的图像质量客观评价预测值与平均主观评分差值的散点图,散点越集中,说明客观评价结果与主观感知的一致性越好。从图6中可以看出,采用本发明方法得到的散点图比较集中,与主观评价数据之间的吻合度较高。
表1利用本发明方法得到的234幅失真的立体图像的图像质量客观评价预测值与平均主观评分差值之间的相关性
表2本发明方法与全局评价方法的PLCC和SROCC性能的比较结果
评价方法 全局评价方法 本发明方法
PLCC 0.9092 0.9303
SROCC 0.9014 0.9189

Claims (10)

1.一种基于区域重要性分类的立体图像质量客观评价方法,其特征在于包括以下步骤:
①令Sorg表示原始的无失真的立体图像,令Sdis表示待评价的失真的立体图像,将Sorg的左视点图像记为{Lorg(x,y)},将Sorg的右视点图像记为{Rorg(x,y)},将Sdis的左视点图像记为{Ldis(x,y)},将Sdis的右视点图像记为{Rdis(x,y)},然后计算{Lorg(x,y)}与{Rorg(x,y)}之间的视差图像,记为其中,此处(x,y)表示左视点图像和右视点图像中的像素点的坐标位置,1≤x≤W,1≤y≤H,W表示左视点图像和右视点图像的宽度,H表示左视点图像和右视点图像的高度,Lorg(x,y)表示{Lorg(x,y)}中坐标位置为(x,y)的像素点的像素值,Rorg(x,y)表示{Rorg(x,y)}中坐标位置为(x,y)的像素点的像素值,Ldis(x,y)表示{Ldis(x,y)}中坐标位置为(x,y)的像素点的像素值,Rdis(x,y)表示{Rdis(x,y)}中坐标位置为(x,y)的像素点的像素值,表示中坐标位置为(x,y)的像素点的像素值;
②根据{Lorg(x,y)}、{Rorg(x,y)}、{Ldis(x,y)}、{Rdis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,对应获取{Lorg(x,y)}、{Rorg(x,y)}、{Ldis(x,y)}、{Rdis(x,y)}中的每个像素点的振幅,然后根据{Lorg(x,y)}和{Rorg(x,y)}中的每个像素点的振幅及中的每个像素点的像素值,计算Sorg的独眼图,记为{CMorg(x,y)},并根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的振幅及中的每个像素点的像素值,计算Sdis的独眼图,记为{CMdis(x,y)},其中,CMorg(x,y)表示{CMorg(x,y)}中坐标位置为(x,y)的像素点的像素值,CMdis(x,y)表示{CMdis(x,y)}中坐标位置为(x,y)的像素点的像素值;
③根据{CMorg(x,y)}、{CMdis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMorg(x,y)}与{CMdis(x,y)}之间的结构失真图,记为{Dappear(x,y)},其中,Dappear(x,y)表示{Dappear(x,y)}中坐标位置为(x,y)的像素点的像素值;
④根据{CMorg(x,y)}离散傅立叶变换后得到的振幅和相位,获取{CMorg(x,y)}的二维显著图;然后通过获取的视差梯度图和相对视差图,获取的深度显著图;再根据{CMorg(x,y)}的二维显著图和的深度显著图,获取{CMorg(x,y)}的三维显著图,记为{S3D(x,y)},其中,S3D(x,y)表示{S3D(x,y)}中坐标位置为(x,y)的像素点的像素值;
⑤根据{Dappear(x,y)}和{S3D(x,y)},将{CMdis(x,y)}分成四类区域,分别为显著失真区域、显著非失真区域、非显著失真区域、非显著非失真区域
⑥根据{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMorg(x,y)}中的每个像素点的相位,并根据{CMdis(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMdis(x,y)}中的每个像素点的相位;再根据{CMorg(x,y)}和{CMdis(x,y)}中的每个像素点的相位、{S3D(x,y)},并结合{CMdis(x,y)}中的每个像素点所属的区域,计算Sdis的图像质量客观评价预测值,记为Q,Q=w1×Q1+w2×Q2+w3×Q3+w4×Q4 其中,w1表示Q1的权重,w2表示Q2的权重,w3表示Q3的权重,w4表示Q4的权重,w1+w2+w3+w4=1,C1为控制参数,LPorg(x,y)表示{CMorg(x,y)}中坐标位置为(x,y)的像素点的相位,LPdis(x,y)表示{CMdis(x,y)}中坐标位置为(x,y)的像素点的相位。
2.根据权利要求1所述的一种基于区域重要性分类的立体图像质量客观评价方法,其特征在于所述的步骤②的具体过程为:
②-1、采用log-Gabor滤波器对{Lorg(x,y)}进行滤波处理,得到{Lorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为将{Lorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为其中,α表示log-Gabor滤波器的尺度因子,1≤α≤4,θ表示log-Gabor滤波器的方向因子,1≤θ≤4;
②-2、根据{Lorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{Lorg(x,y)}中的每个像素点的振幅,将{Lorg(x,y)}中坐标位置为(x,y)的像素点的振幅记为 GE org L ( x , y ) = Σ θ = 1 4 Σ α = 1 4 ( e α , θ L ( x , y ) ) 2 + ( o α , θ L ( x , y ) 2 ) ;
②-3、按照步骤②-1至步骤②-2获取{Lorg(x,y)}中的每个像素点的振幅的操作过程,以相同的方式获取{Rorg(x,y)}、{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的振幅,将{Rorg(x,y)}中坐标位置为(x,y)的像素点的振幅记为将{Ldis(x,y)}中坐标位置为(x,y)的像素点的振幅记为将{Rdis(x,y)}中坐标位置为(x,y)的像素点的振幅记为
②-4、根据{Lorg(x,y)}和{Rorg(x,y)}中的每个像素点的振幅及中的每个像素点的像素值,计算Sorg的独眼图,记为{CMorg(x,y)},将{CMorg(x,y)}中坐标位置为(x,y)的像素点的像素值记为CMorg(x,y), CM org ( x , y ) = GE org L ( x , y ) × L org ( x , y ) + GE org R ( x - d org L ( x , y ) , y ) × R org ( x - d org L ( x , y ) , y ) GE org L ( x , y ) + GE org R ( x - d org L ( x , y ) , y ) , 其中,表示{Rorg(x,y)}中坐标位置为的像素点的振幅,表示{Rorg(x,y)}中坐标位置为的像素点的像素值;
②-5、根据{Ldis(x,y)}和{Rdis(x,y)}中的每个像素点的振幅及中的每个像素点的像素值,计算Sdis的独眼图,记为{CMdis(x,y)},将{CMdis(x,y)}中坐标位置为(x,y)的像素点的像素值记为CMdis(x,y), CM dis ( x , y ) = GE dis L ( x , y ) × L dis ( x , y ) + GE dis R ( x - d org L ( x , y ) , y ) × R dis ( x - d org L ( x , y ) , y ) GE dis L ( x , y ) + GE dis R ( x - d org L ( x , y ) , y ) , 其中,表示{Rdis(x,y)}中坐标位置为的像素点的振幅,表示{Rdis(x,y)}中坐标位置为的像素点的像素值。
3.根据权利要求1或2所述的一种基于区域重要性分类的立体图像质量客观评价方法,其特征在于所述的步骤③的具体过程为:
③-1、采用log-Gabor滤波器对{CMorg(x,y)}进行滤波处理,得到{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为其中,α表示log-Gabor滤波器的尺度因子,1≤α≤4,θ表示log-Gabor滤波器的方向因子,1≤θ≤4;
③-2、根据{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMorg(x,y)}中的每个像素点在不同尺度和方向的振幅,将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅记为 GE α , θ org ( x , y ) = ( e α , θ CM ( x , y ) ) 2 + ( o α , θ CM ( x , y ) ) 2 ;
③-3、按照步骤③-1至步骤③-2获取{CMorg(x,y)}中的每个像素点在不同尺度和方向的振幅的操作过程,以相同的方式获取{CMdis(x,y)}中的每个像素点在不同尺度和方向的振幅,将{CMdis(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅记为
③-4、计算{CMorg(x,y)}中的每个像素点在不同尺度和方向的振幅的标准差、偏度和峰度,将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅的标准差、偏度和峰度分别对应记为 σ α , θ org ( x , y ) = Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ org ( x 1 , y 1 ) - μ α , θ org ( x , y ) ) 2 M , κ α , θ org ( x , y ) = 1 M × Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ org ( x 1 , y 1 ) - μ α , θ org ( x , y ) σ α , θ org ( x , y ) ) 3 , 其中,N(x,y)表示以坐标位置为(x,y)的像素点为中心的邻域窗口,M表示N(x,y)内包含的像素点的个数,表示{CMorg(x,y)}中坐标位置为(x1,y1)的像素点在不同尺度和方向的振幅,1≤x1≤W,1≤y1≤H;
计算{CMdis(x,y)}中的每个像素点在不同尺度和方向的振幅的标准差、偏度和峰度,将{CMdis(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的振幅的标准差、偏度和峰度分别对应记为 σ α , θ dis ( x , y ) = Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ dis ( x 1 , y 1 ) - μ α , θ dis ( x , y ) ) 2 M , κ α , θ dis ( x , y ) = 1 M × Σ ( x 1 , y 1 ) ∈ N ( x , y ) ( GE α , θ dis ( x 1 , y 1 ) - μ α , θ dis ( x , y ) σ α , θ dis ( x , y ) ) 3 , 其中, 表示{CMdis(x,y)}中坐标位置为(x1,y1)的像素点在不同尺度和方向的振幅;
③-5、根据{CMorg(x,y)}中的每个像素点在不同尺度和方向的振幅的标准差、偏度和峰度及{CMdis(x,y)}中的每个像素点在不同尺度和方向的振幅的标准差、偏度和峰度,计算{CMorg(x,y)}与{CMdis(x,y)}之间的结构失真图,记为{Dappear(x,y)},将{Dappear(x,y)}中坐标位置为(x,y)的像素点的像素值记为Dappear(x,y),,其中,ωθ表示不同尺度的加权系数,当θ=1时取ωθ=0.5,当θ=2时取ωθ=0.75,当θ=3时取ωθ=1.5,当θ=4时取ωθ=6,ρ、λ和γ为控制系数,取ρ=0.6、λ=0.05、γ=0.02,符号“||”为取绝对值符号。
4.根据权利要求3所述的一种基于区域重要性分类的立体图像质量客观评价方法,其特征在于所述的步骤③-4中邻域窗口N(x,y)的大小为4×4。
5.根据权利要求4所述的一种基于区域重要性分类的立体图像质量客观评价方法,其特征在于所述的步骤④的具体过程为:
④-1、对{CMorg(x,y)}进行离散傅立叶变换,得到{CMorg(x,y)}的振幅和相位,分别对应记为{Morg(u,v)}和{Aorg(u,v)},其中,u表示变换域的振幅或相位的水平坐标位置,v表示变换域的振幅或相位的垂直坐标位置,1≤u≤W,1≤v≤H,Morg(u,v)表示{Morg(u,v)}中坐标位置为(u,v)的像素点的振幅值,Aorg(u,v)表示{Aorg(u,v)}中坐标位置为(u,v)的像素点的相位值;
④-2、计算{Morg(u,v)}的高频分量的振幅,记为{Forg(u,v)},将{Forg(u,v)}中坐标位置为(u,v)的像素点的高频分量的振幅值记为Forg(u,v),Forg(u,v)=ln(Morg(u,v))-hm(u,v)*ln(Morg(u,v)),其中,ln()为以e为底的对数函数,e=2.718281828,符号“*”为卷积操作符号,hm(u,v)表示m×m的均值滤波矩阵,
④-3、根据{Forg(u,v)}和{Aorg(u,v)}进行离散傅立叶反变换,将获得的反变换图像作为{CMorg(x,y)}的二维显著图,记为{SMorg(x,y)},其中,SMorg(x,y)表示{SMorg(x,y)}中坐标位置为(x,y)的像素点的像素值;
④-4、采用高斯差分滤波器对进行滤波处理,得到的视差梯度图,记为{D1(x,y)},将{D1(x,y)}中坐标位置为(x,y)的像素点的像素值记为D1(x,y), D 1 ( x , y ) = d org L ( x , y ) * ( 1 2 π σ 1 2 exp ( - x 2 + y 2 2 σ 1 2 ) - 1 2 π ( k 1 σ 1 ) 2 exp ( - x 2 + y 2 2 ( k 1 σ 1 ) 2 ) ) , 其中,符号“*”为卷积操作符号,exp()为以e为底的指数函数,e=2.718281828,σ1为高斯算子的标准差,k1为控制参数;
④-5、根据中的最大视差值和最小视差值,计算的相对视差图,记为{D2(x,y)},将{D2(x,y)}中坐标位置为(x,y)的像素点的像素值记为D2(x,y),其中,dmin表示中的最小视差值,dmax表示中的最大视差值;
④-6、根据的视差梯度图{D1(x,y)}和相对视差图{D2(x,y)},获取的深度显著图,记为{D(x,y)},将{D(x,y)}中坐标位置为(x,y)的像素点的像素值记为D(x,y),其中,表示D1(x,y)的权重,表示D2(x,y)的权重,
④-7、根据{CMorg(x,y)}的二维显著图{SMorg(x,y)}和的深度显著图{D(x,y)},获取{CMorg(x,y)}的三维显著图,记为{S3D(x,y)},将{S3D(x,y)}中坐标位置为(x,y)的像素点的像素值记为S3D(x,y),其中,表示SMorg(x,y)的权重,表示D(x,y)的权重,
6.根据权利要求5所述的一种基于区域重要性分类的立体图像质量客观评价方法,其特征在于所述的步骤④-2中取m=3;所述的步骤④-4中取σ1=0.67,k1=4;所述的步骤④-6中取所述的步骤④-7中取
7.根据权利要求6所述的一种基于区域重要性分类的立体图像质量客观评价方法,其特征在于所述的步骤⑤的具体过程为:
⑤-1、将{CMdis(x,y)}中当前待处理的像素点定义为当前像素点;
⑤-2、假设当前像素点的坐标位置为(x1,y1),其中,1≤x1≤W,1≤y1≤H;
⑤-3、如果S3D(x1,y1)>T1且Dappear(x1,y1)>T2,则将当前像素点归属为显著失真区域如果S3D(x1,y1)>T1且Dappear(x1,y1)≤T2,则将当前像素点归属为显著非失真区域如果S3D(x1,y1)≤T1且Dappear(x1,y1)>T2,则将当前像素点归属为非显著失真区域如果S3D(x1,y1)≤T1且Dappear(x1,y1)≤T2,则将当前像素点归属为非显著非失真区域其中,T1为{S3D(x,y)}通过大津法得到的自适应阈值,T2=k2σ2,σ2为{Dappear(x,y)}的标准差,k2为控制参数,S3D(x1,y1)表示{S3D(x,y)}中坐标位置为(x1,y1)的像素点的像素值,Dappear(x1,y1)表示{Dappear(x,y)}中坐标位置为(x1,y1)的像素点的像素值;
⑤-4、将{CMdis(x,y)}中下一个待处理的像素点作为当前像素点,然后返回步骤⑤-2继续执行,直至{CMdis(x,y)}中的所有像素点处理完毕。
8.根据权利要求7所述的一种基于区域重要性分类的立体图像质量客观评价方法,其特征在于所述的步骤⑤-3中取k2=1.54。
9.根据权利要求8所述的一种基于区域重要性分类的立体图像质量客观评价方法,其特征在于所述的步骤⑥的具体过程为:
⑥-1、采用log-Gabor滤波器对{CMorg(x,y)}进行滤波处理,得到{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的偶对称频率响应记为将{CMorg(x,y)}中坐标位置为(x,y)的像素点在不同尺度和方向的奇对称频率响应记为其中,α表示log-Gabor滤波器的尺度因子,1≤α≤4,θ表示log-Gabor滤波器的方向因子,1≤θ≤4;
⑥-2、根据{CMorg(x,y)}中的每个像素点在不同尺度和方向的偶对称频率响应和奇对称频率响应,计算{CMorg(x,y)}中的每个像素点的相位,将{CMorg(x,y)}中坐标位置为(x,y)的像素点的相位记为LPorg(x,y), LP org ( x , y ) = arctan ( Σ θ = 1 4 Σ α = 1 4 o α , θ CM ( x , y ) / Σ θ = 1 4 Σ α = 1 4 e α , θ CM ( x , y ) ) , 其中,arctan()为取反正切函数;
⑥-3、按照步骤⑥-1至步骤⑥-2获取{CMorg(x,y)}中的每个像素点的相位的操作过程,以相同的方式获取{CMdis(x,y)}中的每个像素点的相位,将{CMdis(x,y)}中坐标位置为(x,y)的像素点的相位记为LPdis(x,y);
⑥-4、根据{CMorg(x,y)}和{CMdis(x,y)}中的每个像素点的相位、{S3D(x,y)},并结合{CMdis(x,y)}中的每个像素点所属的区域,计算Sdis的图像质量客观评价预测值,记为Q,Q=w1×Q1+w2×Q2+w3×Q3+w4×Q4 其中,w1表示Q1的权重,w2表示Q2的权重,w3表示Q3的权重,w4表示Q4的权重,w1+w2+w3+w4=1,C1为控制参数。
10.根据权利要求9所述的一种基于区域重要性分类的立体图像质量客观评价方法,其特征在于所述的步骤⑥-4中取w1=0.475,w2=0.280,w3=0.045,w4=0.200,C1=0.000001。
CN201310266616.9A 2013-06-27 2013-06-27 一种基于区域重要性分类的立体图像质量客观评价方法 Active CN103369348B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310266616.9A CN103369348B (zh) 2013-06-27 2013-06-27 一种基于区域重要性分类的立体图像质量客观评价方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310266616.9A CN103369348B (zh) 2013-06-27 2013-06-27 一种基于区域重要性分类的立体图像质量客观评价方法

Publications (2)

Publication Number Publication Date
CN103369348A CN103369348A (zh) 2013-10-23
CN103369348B true CN103369348B (zh) 2015-03-25

Family

ID=49369742

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310266616.9A Active CN103369348B (zh) 2013-06-27 2013-06-27 一种基于区域重要性分类的立体图像质量客观评价方法

Country Status (1)

Country Link
CN (1) CN103369348B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104268926B (zh) * 2014-10-17 2017-01-25 合肥工业大学 基于三维显著度的图像剪裁方法
CN105338335B (zh) * 2015-10-15 2017-03-29 宁波大学 一种立体图像显著图提取方法
CN109272479B (zh) * 2017-07-12 2021-11-02 天津大学 基于立体感知特性的立体图像质量评价方法
CN108401149A (zh) * 2018-02-13 2018-08-14 天津大学 基于多尺度空间理论和非显著区域图的立体图像舒适度评价
CN109887023B (zh) * 2019-01-11 2020-12-29 杭州电子科技大学 一种基于加权梯度幅度的双目融合立体图像质量评价方法

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101872479A (zh) * 2010-06-09 2010-10-27 宁波大学 一种立体图像客观质量评价方法
CN102903107A (zh) * 2012-09-24 2013-01-30 宁波大学 一种基于特征融合的立体图像质量客观评价方法

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4196845B2 (ja) * 2003-03-31 2008-12-17 セイコーエプソン株式会社 画像処理装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101872479A (zh) * 2010-06-09 2010-10-27 宁波大学 一种立体图像客观质量评价方法
CN102903107A (zh) * 2012-09-24 2013-01-30 宁波大学 一种基于特征融合的立体图像质量客观评价方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
基于结构失真分析的立体图像质量客观评价模型;毛香英等;《计算机辅助设计与图形学学报》;20120831;第24卷(第8期);全文 *

Also Published As

Publication number Publication date
CN103369348A (zh) 2013-10-23

Similar Documents

Publication Publication Date Title
CN102708567B (zh) 一种基于视觉感知的立体图像质量客观评价方法
CN104036501B (zh) 一种基于稀疏表示的立体图像质量客观评价方法
CN103369348B (zh) 一种基于区域重要性分类的立体图像质量客观评价方法
US8953873B2 (en) Method for objectively evaluating quality of stereo image
CN103413298B (zh) 一种基于视觉特性的立体图像质量客观评价方法
CN103347196B (zh) 一种基于机器学习的立体图像视觉舒适度评价方法
CN102903107B (zh) 一种基于特征融合的立体图像质量客观评价方法
CN103581661A (zh) 一种立体图像视觉舒适度评价方法
CN102521825B (zh) 一种基于零水印的立体图像质量客观评价方法
CN102843572B (zh) 一种基于相位的立体图像质量客观评价方法
CN104394403B (zh) 一种面向压缩失真的立体视频质量客观评价方法
CN102333233A (zh) 一种基于视觉感知的立体图像质量客观评价方法
CN103136748B (zh) 一种基于特征图的立体图像质量客观评价方法
CN104036502B (zh) 一种无参考模糊失真立体图像质量评价方法
CN104658001A (zh) 一种无参考非对称失真立体图像客观质量评价方法
CN105407349A (zh) 基于双目视觉感知的无参考立体图像质量客观评价方法
CN103780895B (zh) 一种立体视频质量评价方法
CN104408716A (zh) 一种基于视觉保真度的立体图像质量客观评价方法
CN103200420B (zh) 一种基于三维视觉注意力的立体图像质量客观评价方法
CN105282543A (zh) 一种基于立体视觉感知的全盲立体图像质量客观评价方法
CN102999911B (zh) 一种基于能量图的立体图像质量客观评价方法
CN102999912B (zh) 一种基于失真图的立体图像质量客观评价方法
CN103841411B (zh) 一种基于双目信息处理的立体图像质量评价方法
CN102708568A (zh) 一种基于结构失真的立体图像客观质量评价方法
CN102737380B (zh) 一种基于梯度结构张量的立体图像质量客观评价方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20191219

Address after: Room 1,020, Nanxun Science and Technology Pioneering Park, No. 666 Chaoyang Road, Nanxun District, Huzhou City, Zhejiang Province, 313000

Patentee after: Huzhou You Yan Intellectual Property Service Co.,Ltd.

Address before: 315211 Zhejiang Province, Ningbo Jiangbei District Fenghua Road No. 818

Patentee before: Ningbo University

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20211119

Address after: 401254 No. 92, Donglin Avenue, Biquan street, Bishan District, Chongqing (plant 52)

Patentee after: Chongqing high tech Industry Research Institute Co.,Ltd.

Address before: 313000 room 1020, science and Technology Pioneer Park, 666 Chaoyang Road, Nanxun Town, Nanxun District, Huzhou, Zhejiang.

Patentee before: Huzhou You Yan Intellectual Property Service Co.,Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20231221

Address after: 400000 Factory Building 1, No. 8 Potash Mountain Road, Biquan Street, Bishan District, Chongqing

Patentee after: Chongqing Lihe Printing Co.,Ltd.

Address before: 401254 No. 92, Donglin Avenue, Biquan street, Bishan District, Chongqing (plant 52)

Patentee before: Chongqing high tech Industry Research Institute Co.,Ltd.

TR01 Transfer of patent right