CN103841411A - 一种基于双目信息处理的立体图像质量评价方法 - Google Patents

一种基于双目信息处理的立体图像质量评价方法 Download PDF

Info

Publication number
CN103841411A
CN103841411A CN201410083852.1A CN201410083852A CN103841411A CN 103841411 A CN103841411 A CN 103841411A CN 201410083852 A CN201410083852 A CN 201410083852A CN 103841411 A CN103841411 A CN 103841411A
Authority
CN
China
Prior art keywords
org
dis
band
multiple wavelet
stereogram
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410083852.1A
Other languages
English (en)
Other versions
CN103841411B (zh
Inventor
蒋刚毅
朱江英
靳鑫
邵枫
彭宗举
陈芬
李福翠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangxi zuixiang Information Technology Co., Ltd.
Original Assignee
Ningbo University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ningbo University filed Critical Ningbo University
Priority to CN201410083852.1A priority Critical patent/CN103841411B/zh
Publication of CN103841411A publication Critical patent/CN103841411A/zh
Application granted granted Critical
Publication of CN103841411B publication Critical patent/CN103841411B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种基于双目信息处理的立体图像质量评价方法,其通过复小波变换获取简单细胞信息矩阵,再根据这些复小波变换的各项系数汇聚成复杂细胞信息矩阵;接着在复杂细胞信息矩阵基础上进行两方面的评价,一是融合双目复杂细胞信息矩阵得到双目融合图像,再根据人眼对不同频率的双目信息具有不同视觉敏感度,最后得到双目融合图像评价质量;二是从复杂细胞信息矩阵中提取双目立体感知信息,从立体视差角度考虑再结合双目掩蔽特性,人眼在视觉感知过程中会受到背景亮度、纹理掩蔽及空间对比灵敏度等的影响,获取立体视觉感知评价质量;最后结合两部分的评价得到最终的立体图像质量评价结果,该评价结果与人眼的主观感知性能具有较好的一致性。

Description

一种基于双目信息处理的立体图像质量评价方法
技术领域
本发明涉及一种图像质量评价方法,尤其是涉及一种基于双目信息处理的立体图像质量评价方法。
背景技术
随着多媒体通信技术和图像处理显示技术的飞速发展,立体图像已经开始慢慢融入人类社会生活中,如应用于相机、手机、影视等。但是,立体图像在图像采集、压缩、编码、传输、显示等过程中都会引起不同程度和类型的失真,因而在这些环节中如何评价立体图像的质量已成为图像领域的关键问题;此外,立体图像质量评价在塑造大多数的处理算法和系统中起着核心作用。
目前,立体图像质量评价的方法大致可以分成三类:第一类主要是基于2D的评价方法;第二类是在基于2D的评价方法的基础上,再结合其他一些信息,如深度或视差信息等;第三类是依靠3D方面的信息来评价。其中,基于2D的评价方法中常用的方法是直接采用经典的平面图像质量评价方法来评价立体图像质量的方法,由于立体图像和平面图像最大的区别就是立体图像具有深度感、临场感,然而该方法缺乏考虑立体图像的深度感知问题,因此该方法的客观质量评价结果与主观感知之间的一致性不是很好。
发明内容
本发明所要解决的技术问题是提供一种基于双目信息处理的立体图像质量评价方法,其能够有效地提高客观质量评价结果与主观感知之间的一致性。
本发明解决上述技术问题所采用的技术方案为:一种基于双目信息处理的立体图像质量评价方法,其特征在于总体处理过程为:令Lorg表示原始的无失真的立体图像的左视点图像的亮度图,令Rorg表示原始的无失真的立体图像的右视点图像的亮度图,令Ldis表示待评价的失真的立体图像的左视点图像的亮度图,令Rdis表示待评价的失真的立体图像的右视点图像的亮度图;对Lorg、Rorg、Ldis和Rdis分别实施M级复小波变换,得到的系数矩阵作为简单细胞信息矩阵,其中,1≤M≤5;根据Lorg、Rorg、Ldis和Rdis各自对应的简单细胞信息矩阵获取对应的复杂细胞信息矩阵;根据Lorg和Rorg各自对应的复杂细胞信息矩阵,获取原始的无失真的立体图像对应的双目融合图,并根据Ldis和Rdis各自对应的复杂细胞信息矩阵,获取待评价的失真的立体图像对应的双目融合图;根据原始的无失真的立体图像对应的双目融合图和待评价的失真的立体图像对应的双目融合图,获取待评价的失真的立体图像相对于原始的无失真的立体图像的双目融合质量评价指标值;根据Lorg和Rorg各自对应的复杂细胞信息矩阵,获取原始的无失真的立体图像对应的立体视觉图,并根据Ldis和Rdis各自对应的复杂细胞信息矩阵,获取待评价的失真的立体图像对应的立体视觉图;获取原始的无失真的立体图像对应的立体视觉图中的每个5×5的图像块的双目恰可觉察失真值及双目恰可觉察失真值的失真权重,并获取待评价的失真的立体图像对应的立体视觉图中的每个5×5的图像块的双目恰可觉察失真值及双目恰可觉察失真值的失真权重;利用原始的无失真的立体图像对应的立体视觉图中的每个5×5的图像块的双目恰可觉察失真值的失真权重,获得原始的无失真的立体图像对应的加权后立体视觉图,并利用待评价的失真的立体图像对应的立体视觉图中的每个5×5的图像块的双目恰可觉察失真值的失真权重,获得待评价的失真的立体图像对应的加权后立体视觉图;获取原始的无失真的立体图像对应的加权后立体视觉图和待评价的失真的立体图像对应的加权后立体视觉图中位置相同的图像块之间的梯度结构相似度,再根据梯度结构相似度获取待评价的失真的立体图像相对于原始的无失真的立体图像的立体视觉评价度量值;根据双目融合质量评价指标值和立体视觉评价度量值,获取待评价的失真的立体图像的图像质量评价分值。
本发明的一种基于双目信息处理的立体图像质量评价方法,其具体包括以下步骤:
①令Sorg表示原始的无失真的立体图像,令Sdis表示待评价的失真的立体图像,将Sorg的左视点图像的亮度图记为Lorg,将Sorg的右视点图像的亮度图记为Rorg,将Sdis的左视点图像的亮度图记为Ldis,将Sdis的右视点图像的亮度图记为Rdis
②对Lorg实施M级复小波变换,得到每级的三个方向的复小波子带的系数矩阵、一个直流复小波子带的系数矩阵,并将这些系数矩阵作为简单细胞信息矩阵,将Lorg实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的系数矩阵记为
Figure BDA0000469786010000031
将Lorg实施M级复小波变换后得到的直流复小波子带的系数矩阵记为
Figure BDA0000469786010000032
其中,1≤M≤5,1≤m≤M,三个方向分别为水平方向、垂直方向和对角线方向,q=1,2,3,当q=1时第q个方向为水平方向、当q=2时第q个方向为垂直方向、当q=3时第q个方向为对角线方向;
对Rorg实施M级复小波变换,得到每级的三个方向的复小波子带的系数矩阵、一个直流复小波子带的系数矩阵,并将这些系数矩阵作为简单细胞信息矩阵,将Rorg实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的系数矩阵记为
Figure BDA0000469786010000033
将Rorg实施M级复小波变换后得到的直流复小波子带的系数矩阵记为
Figure BDA0000469786010000034
对Ldis实施M级复小波变换,得到每级的三个方向的复小波子带的系数矩阵、一个直流复小波子带的系数矩阵,并将这些系数矩阵作为简单细胞信息矩阵,将Ldis实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的系数矩阵记为将Ldis实施M级复小波变换后得到的直流复小波子带的系数矩阵记为
Figure BDA0000469786010000036
对Rdis实施M级复小波变换,得到每级的三个方向的复小波子带的系数矩阵、一个直流复小波子带的系数矩阵,并将这些系数矩阵作为简单细胞信息矩阵,将Rdis实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的系数矩阵记为将Rdis实施M级复小波变换后得到的直流复小波子带的系数矩阵记为
Figure BDA0000469786010000038
③获取Lorg实施M级复小波变换后得到的每级的三个方向的复小波子带的复杂细胞信息矩阵,将Lorg实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的复杂细胞信息矩阵记为 其中, p org , L q , m = | E org , L q , m | = ( Re ( E org , L q , m ) ) 2 + ( Im ( E org , L q , m ) ) 2 , θ org , L q , m = arctan ( Im ( E org , L q , m ) Re ( E org , L q , m ) ) , exp()表示以自然基数e为底的指数函数,符号“||”为求复数的模值,arctan()表示反正切函数,
Figure BDA0000469786010000043
表示
Figure BDA0000469786010000044
的实部,
Figure BDA0000469786010000045
表示
Figure BDA0000469786010000046
的虚部;并获取Lorg实施M级复小波变换后得到的直流复小波子带的复杂细胞信息矩阵,记为
Figure BDA0000469786010000047
Figure BDA0000469786010000048
其中, p org , L DC = | E org , L DC | = ( Re ( E org , L DC ) ) 2 + ( Im ( E org , L DC ) ) 2 , θ org , L DC = arctan ( Im ( E org , L DC ) Re ( E org , L DC ) ) ,
Figure BDA00004697860100000411
表示
Figure BDA00004697860100000412
的实部,
Figure BDA00004697860100000413
表示
Figure BDA00004697860100000414
的虚部;
获取Rorg实施M级复小波变换后得到的每级的三个方向的复小波子带的复杂细胞信息矩阵,将Rorg实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的复杂细胞信息矩阵记为
Figure BDA00004697860100000415
Figure BDA00004697860100000416
其中, p org , R q , m = | E org , R q , m | = ( Re ( E org , R q , m ) ) 2 + ( Im ( E org , R q , m ) ) 2 , θ org , R q , m = arctan ( Im ( E org , R q , m ) Re ( E org , R q , m ) ) , 表示
Figure BDA00004697860100000420
的实部,
Figure BDA00004697860100000421
表示的虚部;并获取Rorg实施M级复小波变换后得到的直流复小波子带的复杂细胞信息矩阵,记为
Figure BDA00004697860100000423
Figure BDA00004697860100000424
其中, p org , R DC = | E org , R DC | = ( Re ( E org , R DC ) ) 2 + ( Im ( E org , R DC ) ) 2 , θ org , R DC = arctan ( Im ( E org , R DC ) Re ( E org , R DC ) ) ,
Figure BDA00004697860100000427
表示
Figure BDA00004697860100000428
的实部,表示
Figure BDA00004697860100000430
的虚部;
获取Ldis实施M级复小波变换后得到的每级的三个方向的复小波子带的复杂细胞信息矩阵,将Ldis实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的复杂细胞信息矩阵记为
Figure BDA00004697860100000431
Figure BDA00004697860100000432
其中, p dis , L q , m = | E dis , L q , m | = ( Re ( E dis , L q , m ) ) 2 + ( Im ( E dis , L q , m ) ) 2 , θ dis , L q , m = arctan ( Im ( E dis , L q , m ) Re ( E dis , L q , m ) ) ,
Figure BDA00004697860100000435
表示
Figure BDA00004697860100000436
的实部,
Figure BDA00004697860100000437
表示的虚部;并获取Ldis实施M级复小波变换后得到的直流复小波子带的复杂细胞信息矩阵,记为
Figure BDA0000469786010000051
Figure BDA0000469786010000052
其中, p dis , L DC = | E dis , L DC | = ( Re ( E dis , L DC ) ) 2 + ( Im ( E dis , L DC ) ) 2 , θ dis , L DC = arctan ( Im ( E dis , L DC ) Re ( E dis , L DC ) ) ,
Figure BDA0000469786010000055
表示
Figure BDA0000469786010000056
的实部,
Figure BDA0000469786010000057
表示
Figure BDA0000469786010000058
的虚部;
获取Rdis实施M级复小波变换后得到的每级的三个方向的复小波子带的复杂细胞信息矩阵,将Rdis实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的复杂细胞信息矩阵记为
Figure BDA0000469786010000059
其中, p dis , R q , m = | E dis , R q , m | = ( Re ( E dis , R q , m ) ) 2 + ( Im ( E dis , R q , m ) ) 2 , θ dis , R q , m = arctan ( Im ( E dis , R q , m ) Re ( E dis , R q , m ) ) ,
Figure BDA00004697860100000513
表示
Figure BDA00004697860100000514
的实部,
Figure BDA00004697860100000515
表示的虚部;并获取Rdis实施M级复小波变换后得到的直流复小波子带的复杂细胞信息矩阵,记为
Figure BDA00004697860100000517
Figure BDA00004697860100000518
其中, p dis , R DC = | E dis , R DC | = ( Re ( E dis , R DC ) ) 2 + ( Im ( E dis , R DC ) ) 2 , θ dis , R DC = arctan ( Im ( E dis , R DC ) Re ( E dis , R DC ) ) ,
Figure BDA00004697860100000521
表示
Figure BDA00004697860100000522
的实部,
Figure BDA00004697860100000523
表示的虚部;
④根据Lorg实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵和Rorg实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵,获取Sorg的每级的每个方向的复小波子带的双目融合图,将Sorg的第m级的第q个方向的复小波子带的双目融合图记为
Figure BDA00004697860100000525
B org q , m = | C org , L q , m + C org , R q , m | = ( p org , L q , m ) 2 + ( p org , R q , m ) 2 + p org , L q , m p org , R q , m cos ( Δθ org q , m ) , 其中,符号“||”为求复数的模值,cos()为求余弦函数,
Figure BDA00004697860100000527
并根据
Figure BDA00004697860100000528
获取Sorg的直流复小波子带的双目融合图,记为 B org DC = | C org , L DC + C org , R DC | = ( p org , L DC ) 2 + ( p org , R DC ) 2 + p org , L DC p org , R DC cos ( Δθ org DC ) , 其中, Δθ org DC = θ org , L DC - θ org , R DC ;
根据Ldis实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵和Rdis实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵,获取Sdis的每级的每个方向的复小波子带的双目融合图,将Sdis的第m级的第q个方向的复小波子带的双目融合图记为
Figure BDA0000469786010000061
B dis q , m = | C dis , L q , m + C dis , R q , m | = ( p dis , L q , m ) 2 + ( p dis , R q , m ) 2 + p dis , L q , m p dis , R q , m cos ( Δθ dis q , m ) , 其中, Δθ dis q , m = θ dis , L q , m - θ dis , R q , m ; 并根据
Figure BDA0000469786010000064
Figure BDA0000469786010000065
获取Sdis的直流复小波子带的双目融合图,记为
Figure BDA0000469786010000066
B dis DC = | C dis , L DC + C dis , R DC | = ( p dis , L DC ) 2 + ( p dis , R DC ) 2 + p dis , L DC p dis , R DC cos ( Δθ dis DC ) , 其中, Δθ dis DC = θ dis , L DC - θ dis , R DC ;
⑤计算Sorg与Sdis所有的同级的同方向的两个复小波子带的双目融合图的双目融合峰值信噪比,将
Figure BDA00004697860100000610
的双目融合峰值信噪比记为BFPSNRq,m BFPSNR q , m = 1 10 × log 255 2 1 w q , m × h q , m × L q , m × ω q , m , 其中,wq,m表示
Figure BDA00004697860100000613
的宽度,hq,m表示
Figure BDA00004697860100000614
Figure BDA00004697860100000615
的高度, L q , m = Σ i = 1 w q , m Σ j = 1 h q , m | B org q , m ( i , j ) - B dis q , m ( i , j ) | 1 , “||1”为1范数符号,
Figure BDA00004697860100000617
表示
Figure BDA00004697860100000618
中坐标位置为(i,j)的像素点的像素值,
Figure BDA00004697860100000619
表示
Figure BDA00004697860100000620
中坐标位置为(i,j)的像素点的像素值,ωq,m表示
Figure BDA00004697860100000622
的视觉敏感度权值;
计算Sorg的直流复小波子带的双目融合图与Sdis的直流复小波子带的双目融合图
Figure BDA00004697860100000624
的双目融合峰值信噪比,记为BFPSNRDC BFPSNR DC = 1 10 × log 255 2 1 w DC × h DC × L DC × ω DC , 其中,wDC表示
Figure BDA00004697860100000626
Figure BDA00004697860100000627
的宽度,hDC表示
Figure BDA00004697860100000628
Figure BDA00004697860100000629
的高度, L DC = Σ i = 1 w DC Σ j = 1 h DC | B org DC ( i , j ) - B dis DC ( i , j ) | 1 , “||1”为1范数符号,
Figure BDA00004697860100000631
表示
Figure BDA00004697860100000632
中坐标位置为(i,j)的像素点的像素值,
Figure BDA00004697860100000633
表示
Figure BDA00004697860100000634
中坐标位置为(i,j)的像素点的像素值,ωDC表示
Figure BDA00004697860100000635
Figure BDA00004697860100000636
的视觉敏感度权值;
⑥计算Sdis相对于Sorg的双目融合质量评价指标值,记为Qs Q s = Σ m = 1 M Σ q = 1 3 BFPSNR q , m + BFPSNR DC Σ m = 1 M Σ q = 1 3 ω q , m + ω DC ;
⑦根据Lorg实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵和Rorg实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵,获取Sorg的每级的每个方向的复小波子带的立体视觉图,将Sorg的第m级的第q个方向的复小波子带的立体视觉图记为
Figure BDA0000469786010000072
V org q , m = | C org , L q , m - C org , R q , m | = ( p org , L q , m ) 2 + ( p org , R q , m ) 2 - p org , L q , m p org , R q , m cos ( Δθ org q , m ) , 其中,符号“||”为求复数的模值,cos()为求余弦函数,
Figure BDA0000469786010000074
并根据
Figure BDA0000469786010000075
Figure BDA0000469786010000076
获取Sorg的直流复小波子带的立体视觉图,记为
Figure BDA0000469786010000077
V org DC = | C org , L DC - C org , R DC | = ( p org , L DC ) 2 + ( p org , R DC ) 2 - p org , L DC p org , R DC cos ( Δθ org DC ) , 其中, Δθ org DC = θ org , L DC - θ org , R DC ;
根据Ldis实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵和Rdis实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵,获取Sdis的每级的每个方向的复小波子带的立体视觉图,将Sdis的第m级的第q个方向的复小波子带的立体视觉图记为
Figure BDA00004697860100000710
V dis q , m = | C dis , L q , m - C dis , R q , m | = ( p dis , L q , m ) 2 + ( p dis , R q , m ) 2 - p dis , L q , m p dis , R q , m cos ( Δθ dis q , m ) , 其中, Δθ dis q , m = θ dis , L q , m - θ dis , R q , m ; 并根据
Figure BDA00004697860100000714
获取Sdis的直流复小波子带的立体视觉图,记为 V dis DC = | C dis , L DC - C dis , R DC | = ( p dis , L DC ) 2 + ( p dis , R DC ) 2 - p dis , L DC p dis , R DC cos ( Δθ dis DC ) , 其中, Δθ dis DC = θ dis , L DC - θ dis , R DC ;
⑧采用尺寸大小为5×5的滑动窗口在Sorg的每级的每个方向的复小波子带的立体视觉图中逐像素点移动,将Sorg的每级的每个方向的复小波子带的立体视觉图分割成多个相重叠的且尺寸大小为5×5的图像块;采用尺寸大小为5×5的滑动窗口在中逐像素点移动,将
Figure BDA0000469786010000081
分割成多个相重叠的且尺寸大小为5×5的图像块;
采用尺寸大小为5×5的滑动窗口在Sdis的每级的每个方向的复小波子带的立体视觉图中逐像素点移动,将Sdis的每级的每个方向的复小波子带的立体视觉图分割成多个相重叠的且尺寸大小为5×5的图像块;采用尺寸大小为5×5的滑动窗口在
Figure BDA0000469786010000082
中逐像素点移动,将
Figure BDA0000469786010000083
分割成多个相重叠的且尺寸大小为5×5的图像块;
⑨分别获取Sorg的每级的每个方向的复小波子带的立体视觉图及Sorg的直流复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值及双目恰可觉察失真值的失真权重;
分别获取Sdis的每级的每个方向的复小波子带的立体视觉图及Sdis的直流复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值及双目恰可觉察失真值的失真权重;
⑩对Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块进行失真权重加权,得到Sorg的每级的每个方向的复小波子带的加权后立体视觉图,将Sorg的第m级的第q个方向的复小波子带的加权后立体视觉图记为
Figure BDA0000469786010000084
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值记为
Figure BDA0000469786010000086
Figure BDA0000469786010000087
其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,1≤u≤5,1≤v≤5,
Figure BDA0000469786010000088
表示中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,
Figure BDA00004697860100000810
表示
Figure BDA00004697860100000811
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重;
Figure BDA00004697860100000812
中的每个图像块进行失真权重加权,得到Sorg的直流复小波子带的加权后立体视觉图,将Sorg的直流复小波子带的加权后立体视觉图记为
Figure BDA00004697860100000813
Figure BDA00004697860100000814
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值记为
Figure BDA00004697860100000815
Figure BDA00004697860100000816
其中,在此1≤x≤wDC-4,1≤y≤hDC-4,1≤u≤5,1≤v≤5,表示
Figure BDA00004697860100000818
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,
Figure BDA0000469786010000091
表示
Figure BDA0000469786010000092
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重;
对Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块进行失真权重加权,得到Sdis的每级的每个方向的复小波子带的加权后立体视觉图,将Sdis的第m级的第q个方向的复小波子带的加权后立体视觉图记为
Figure BDA0000469786010000094
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值记为
Figure BDA0000469786010000095
Figure BDA0000469786010000096
其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,1≤u≤5,1≤v≤5,
Figure BDA0000469786010000097
表示
Figure BDA0000469786010000098
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,
Figure BDA0000469786010000099
表示
Figure BDA00004697860100000910
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重;
中的每个图像块进行失真权重加权,得到Sdis的直流复小波子带的加权后立体视觉图,将Sdis的直流复小波子带的加权后立体视觉图记为
Figure BDA00004697860100000912
Figure BDA00004697860100000913
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值记为
Figure BDA00004697860100000914
Figure BDA00004697860100000915
其中,在此1≤x≤wDC-4,1≤y≤hDC-4,1≤u≤5,1≤v≤5,
Figure BDA00004697860100000916
表示
Figure BDA00004697860100000917
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,
Figure BDA00004697860100000918
表示
Figure BDA00004697860100000919
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重;
Figure BDA00004697860100000920
计算Sorg和Sdis同级的同个方向的复小波子带的加权后立体视觉图中所有的坐标位置相同的两个图像块之间的梯度结构相似度,将Sorg的第m级的第q个方向的复小波子带的加权后立体视觉图
Figure BDA00004697860100000921
中坐标位置为(x,y)的图像块和Sdis的第m级的第q个方向的复小波子带的加权后立体视觉图
Figure BDA00004697860100000922
中坐标位置为(x,y)的图像块之间的梯度结构相似度记为
Figure BDA00004697860100000923
GSSIM ( x , y ) q , m = [ ( 2 × u org q , m × u dis q , m + C 1 ) ( ( u org q , m ) 2 + ( u dis q , m ) 2 + C 1 ) ] α × [ ( 2 × σ org q , m × σ dis q , m + C 2 ) ( ( σ org q , m ) 2 + ( σ dis q , m ) 2 + C 2 ) ] β × [ ( σ org - dis q , m + C 3 ) ( σ org q , m × σ dis q , m + C 3 ) ] γ , 其中,
Figure BDA00004697860100000925
表示
Figure BDA00004697860100000926
中坐标位置为(x,y)的图像块中的所有像素点的像素值的均值,
Figure BDA00004697860100000927
表示
Figure BDA00004697860100000928
中坐标位置为(x,y)的图像块中的所有像素点的像素值的均值,
Figure BDA0000469786010000101
表示
Figure BDA0000469786010000102
中坐标位置为(x,y)的图像块中的所有像素点的像素值的方差,
Figure BDA0000469786010000103
表示
Figure BDA0000469786010000104
中坐标位置为(x,y)的图像块中的所有像素点的像素值的方差,
Figure BDA0000469786010000105
表示
Figure BDA0000469786010000106
中坐标位置为(x,y)的图像块与
Figure BDA0000469786010000107
中坐标位置为(x,y)的图像块的相关系数, σ org - dis q , m = Σ u = 1 5 Σ v = 1 5 ( ( V org , ( x , y ) ′ q , m ( u , v ) - u org q , m ) × ( V dis , ( x , y ) ′ q , m ( u , v ) - u dis q , m ) ) Σ u = 1 5 Σ v = 1 5 ( V org , ( x , y ) ′ q , m ( u , v ) - u org q , m ) 2 × Σ u = 1 5 Σ v = 1 5 ( V dis , ( x , y ) ′ q , m ( u , v ) - u dis q , m ) 2 ,
Figure BDA0000469786010000109
表示
Figure BDA00004697860100001010
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,表示
Figure BDA00004697860100001012
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,C1、C2、C3均为防止分母为零的常数,α=1、β=1、γ=1;
计算Sorg的直流复小波子带的加权后立体视觉图
Figure BDA00004697860100001013
和Sdis的直流复小波子带的加权后立体视觉图
Figure BDA00004697860100001014
中所有的坐标位置相同的两个图像块之间的梯度结构相似度,将Sorg的直流复小波子带的加权后立体视觉图
Figure BDA00004697860100001015
中坐标位置为(x,y)的图像块和Sdis的直流复小波子带的加权后立体视觉图中坐标位置为(x,y)的图像块之间的梯度结构相似度记为
Figure BDA00004697860100001017
GSSIM ( x , y ) DC = [ ( 2 × u org DC × u dis DC + C 1 ) ( ( u org DC ) 2 + ( u dis DC ) 2 + C 1 ) ] α × [ ( 2 × σ org DC × σ dis DC + C 2 ) ( ( σ org DC ) 2 + ( σ dis DC ) 2 + C 2 ) ] β × [ ( σ org - dis DC + C 3 ) ( σ org DC × σ dis DC + C 3 ) ] γ , 其中,
Figure BDA00004697860100001019
表示中坐标位置为(x,y)的图像块中的所有像素点的像素值的均值,
Figure BDA00004697860100001021
表示
Figure BDA00004697860100001022
中坐标位置为(x,y)的图像块中的所有像素点的像素值的均值,
Figure BDA00004697860100001023
表示
Figure BDA00004697860100001024
中坐标位置为(x,y)的图像块中的所有像素点的像素值的方差,
Figure BDA00004697860100001025
表示
Figure BDA00004697860100001026
中坐标位置为(x,y)的图像块中的所有像素点的像素值的方差,
Figure BDA00004697860100001027
表示
Figure BDA00004697860100001028
中坐标位置为(x,y)的图像块与
Figure BDA00004697860100001029
中坐标位置为(x,y)的图像块的相关系数, σ org - dis DC = Σ u = 1 5 Σ v = 1 5 ( ( V org , ( x , y ) ′ DC ( u , v ) - u org DC ) × ( V dis , ( x , y ) ′ DC ( u , v ) - u dis DC ) ) Σ u = 1 5 Σ v = 1 5 ( V org , ( x , y ) ′ DC ( u , v ) - u org DC ) 2 × Σ u = 1 5 Σ v = 1 5 ( V dis , ( x , y ) ′ DC ( u , v ) - u dis DC ) 2 ,
Figure BDA0000469786010000112
表示
Figure BDA0000469786010000113
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,表示
Figure BDA0000469786010000115
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值;
Figure BDA0000469786010000116
计算Sdis相对于Sorg的立体视觉评价度量值,记为Qd Q d = Σ m = 1 M Σ q = 1 3 ( ( Σ x = 1 w q , m - 7 Σ y = 1 h q , m - 7 GSSIM ( x , y ) q , m ) × ω q , m ) + ( Σ x = 1 w DC - 7 Σ y = 1 h DC - 7 GSSIM ( x , y ) DC ) × ω DC Σ m = 1 M Σ q = 1 3 ω q , m + ω DC ;
Figure BDA0000469786010000118
根据Sdis相对于Sorg的双目融合质量评价指标值Qs和Sdis相对于Sorg的立体视觉评价度量值Qd,计算Sdis的图像质量评价分值,记为Q,Q=Qs×(Qd)λ,其中,λ为常数,λ表示乘性系数。
所述的步骤⑤和所述的步骤
Figure BDA00004697860100001118
中ωq,m的确定过程为:当q=1或q=2时, ω q , m = ∫ a m b m 2.6 × ( 0.0192 + 0.114 × f ) × e [ - ( 0.114 × f ) 1.1 ] b m - a m ; 当q=3时, ω q , m = ∫ a m b m 2.6 × ( 0.0192 + 0.114 × 2 1 2 × f ) × e [ - ( 0.114 × 2 1 2 × f ) 1.1 ] b m - a m , 其中,f表示复小波变换的频率,am为区间[0,0.5]分成M个子区间后的第m个子区间的下限, a m = 0 m = 1 2 × ( m - 1 ) m > 1 , bm为区间[0,0.5]分成M个子区间后的第m个子区间的上限, b m = 0.5 m = 1 0.5 2 × m m > 1 ;
所述的步骤⑤和所述的步骤
Figure BDA00004697860100001113
中ωDC的确定过程为:ωDC1,M3,M或ωDC2,M3,M,其中,ω1,M表示Sorg的第M级的第1个方向的复小波子带的双目融合图
Figure BDA00004697860100001114
和Sdis的第M级的第1个方向的复小波子带的双目融合图的视觉敏感度权值,ω3,M表示Sorg的第M级的第3个方向的复小波子带的双目融合图
Figure BDA00004697860100001116
和Sdis的第M级的第3个方向的复小波子带的双目融合图
Figure BDA00004697860100001117
的视觉敏感度权值,ω2,M表示Sorg的第M级的第2个方向的复小波子带的双目融合图
Figure BDA0000469786010000121
和Sdis的第M级的第2个方向的复小波子带的双目融合图
Figure BDA0000469786010000122
的视觉敏感度权值。
所述的步骤⑨的具体过程为:
⑨-1、计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的背景亮度的恰可觉察失真值,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA0000469786010000123
中坐标位置为(x,y)的图像块的背景亮度的恰可觉察失真值记为
Figure BDA0000469786010000124
Figure BDA0000469786010000125
其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,
Figure BDA0000469786010000126
B(h1,h2)为平均背景亮度算子B中下标为(h1,h2)处的值,1≤h1≤5,1≤h2≤5,
Figure BDA0000469786010000127
表示中坐标位置为(x,y)的图像块中坐标位置为(h1,h2)的像素点的像素值;
计算Sorg的直流复小波子带的立体视觉图中的每个图像块的背景亮度的恰可觉察失真值,将Sorg的直流复小波子带的立体视觉图
Figure BDA00004697860100001210
中坐标位置为(x,y)的图像块的背景亮度的恰可觉察失真值记为
Figure BDA00004697860100001211
Figure BDA00004697860100001212
其中,在此1≤x≤wDC-4,1≤y≤hDC-4, V org , ( x , y ) DC ‾ = Σ h 1 = 1 5 Σ h 2 = 1 5 V org , ( x , y ) DC ( h 1 , h 2 ) × B ( h 1 , h 2 ) Σ h 1 = 1 5 Σ h 2 = 1 5 B ( h 1 , h 2 ) , 表示
Figure BDA00004697860100001215
中坐标位置为(x,y)的图像块中坐标位置为(h1,h2)的像素点的像素值;
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的背景亮度的恰可觉察失真值,将Sdis的第m级的第q个方向的复小波子带的立体视觉图中坐标位置为(x,y)的图像块的背景亮度的恰可觉察失真值记为
Figure BDA0000469786010000132
Figure BDA0000469786010000133
其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4, V dis , ( x , y ) q , m ‾ = Σ h 1 = 1 5 Σ h 2 = 1 5 V dis , ( x , y ) q , m ( h 1 , h 2 ) × B ( h 1 , h 2 ) Σ h 1 = 1 5 Σ h 2 = 1 5 B ( h 1 , h 2 ) ,
Figure BDA0000469786010000135
表示
Figure BDA0000469786010000136
中坐标位置为(x,y)的图像块中坐标位置为(h1,h2)的像素点的像素值;
计算Sdis的直流复小波子带的立体视觉图中的每个图像块的背景亮度的恰可觉察失真值,将Sdis的直流复小波子带的立体视觉图
Figure BDA0000469786010000137
中坐标位置为(x,y)的图像块的背景亮度的恰可觉察失真值记为
Figure BDA0000469786010000138
Figure BDA0000469786010000139
其中,在此1≤x≤wDC-4,1≤y≤hDC-4, V dis , ( x , y ) DC ‾ = Σ h 1 = 1 5 Σ h 2 = 1 5 V dis , ( x , y ) DC ( h 1 , h 2 ) × B ( h 1 , h 2 ) Σ h 1 = 1 5 Σ h 2 = 1 5 B ( h 1 , h 2 ) ,
Figure BDA00004697860100001311
表示
Figure BDA00004697860100001312
中坐标位置为(x,y)的图像块中坐标位置为(h1,h2)的像素点的像素值;
⑨-2、计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的纹理掩蔽的恰可觉察失真值,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100001313
中坐标位置为(x,y)的图像块的纹理掩蔽的恰可觉察失真值记为
Figure BDA00004697860100001314
VT org , ( x , y ) q , m = max k = 1,2,3,4 { | 1 16 Σ h 1 = 1 5 Σ h 2 = 1 5 V org , ( x , y ) q , m ( h 1 , h 2 ) × G k ( h 1 , h 2 ) | } × β ′ , 其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,max()为取最大值函数,在此“||”为取绝对值符号,Gk(h1,h2)表示第k个方向的高斯平均加权因子Gk中下标为(h1,h2)处的加权值,第1个方向的高斯平均加权因子G1为水平方向的高斯平均加权因子,第2个方向的高斯平均加权因子G2为垂直方向的高斯平均加权因子,第3个方向的高斯平均加权因子G3为45度角方向的高斯平均加权因子,第4个方向的高斯平均加权因子G4为135度角方向的高斯平均加权因子,β'为调节因子;
计算Sorg的直流复小波子带的立体视觉图
Figure BDA0000469786010000141
中的每个图像块的纹理掩蔽的恰可觉察失真值,将Sorg的直流复小波子带的立体视觉图
Figure BDA0000469786010000142
中坐标位置为(x,y)的图像块的纹理掩蔽的恰可觉察失真值记为
Figure BDA0000469786010000143
VT org , ( x , y ) DC = max k = 1,2,3,4 { | 1 16 Σ h 1 = 1 5 Σ h 2 = 1 5 V org , ( x , y ) DC ( h 1 , h 2 ) × G k ( h 1 , h 2 ) | } × β ′ , 其中,在此1≤x≤wDC-4,1≤y≤hDC-4;
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的纹理掩蔽的恰可觉察失真值,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA0000469786010000145
中坐标位置为(x,y)的图像块的纹理掩蔽的恰可觉察失真值记为
Figure BDA0000469786010000146
VT dis , ( x , y ) q , m = max k = 1,2,3,4 { | 1 16 Σ h 1 = 1 5 Σ h 2 = 1 5 V dis , ( x , y ) q , m ( h 1 , h 2 ) × G k ( h 1 , h 2 ) | } × β ′ , 其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4;
计算Sdis的直流复小波子带的立体视觉图中的每个图像块的纹理掩蔽的恰可觉察失真值,将Sdis的直流复小波子带的立体视觉图
Figure BDA0000469786010000148
中坐标位置为(x,y)的图像块的纹理掩蔽的恰可觉察失真值记为
Figure BDA0000469786010000149
VT dis , ( x , y ) DC = max k = 1,2,3,4 { | 1 16 Σ h 1 = 1 5 Σ h 2 = 1 5 V dis , ( x , y ) DC ( h 1 , h 2 ) × G k ( h 1 , h 2 ) | } × β ′ , 其中,在此1≤x≤wDC-4,1≤y≤hDC-4;
⑨-3、计算Sorg的每级的每个方向的复小波子带的立体视觉图的空间对比灵敏度,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100001411
的空间对比灵敏度记为
Figure BDA00004697860100001412
CSF org q , m = 2.6 × ( 0.0192 + 0.114 × f org q , m ) × e ( - ( 0.114 × f org q , m ) 1.1 ) , 表示
Figure BDA00004697860100001415
的空间频率,
Figure BDA00004697860100001416
表示
Figure BDA00004697860100001418
的行频率, f R , org q , m = 1 w q , m × h q , m Σ i = 1 w q , m Σ j = 2 h q , m [ V org q , m ( i , j ) - V org q , m ( i , j - 1 ) ] 2 ,
Figure BDA0000469786010000152
表示
Figure BDA0000469786010000153
中坐标位置为(i,j)的像素点的像素值,
Figure BDA0000469786010000154
表示
Figure BDA0000469786010000155
中坐标位置为(i,j-1)的像素点的像素值,
Figure BDA0000469786010000156
表示
Figure BDA0000469786010000157
的列频率, f C , org q , m = 1 w q , m × h q , m Σ i = 2 w q , m Σ j = 1 h q , m [ V org q , m ( i , j ) - V org q , m ( i - 1 , j ) ] 2 , 表示
Figure BDA00004697860100001510
中坐标位置为(i-1,j)的像素点的像素值;
计算Sorg的直流复小波子带的立体视觉图
Figure BDA00004697860100001511
的空间对比灵敏度,记为
Figure BDA00004697860100001512
CSF org DC = 2.6 × ( 0.0192 + 0.114 × f org DC ) × e ( - ( 0.114 × f org DC ) 1.1 ) ,
Figure BDA00004697860100001514
表示的空间频率,
Figure BDA00004697860100001516
Figure BDA00004697860100001517
表示
Figure BDA00004697860100001518
的行频率, f R , org DC = 1 w DC × h DC Σ i = 1 w DC Σ j = 2 h DC [ V org DC ( i , j ) - V org DC ( i , j - 1 ) ] 2 , 表示
Figure BDA00004697860100001521
中坐标位置为(i,j)的像素点的像素值,
Figure BDA00004697860100001522
表示
Figure BDA00004697860100001523
中坐标位置为(i,j-1)的像素点的像素值,
Figure BDA00004697860100001524
表示
Figure BDA00004697860100001525
的列频率, f C , org DC = 1 w DC × h DC Σ i = 2 w DC Σ j = 1 h DC [ V org DC ( i , j ) - V org DC ( i - 1 , j ) ] 2 ,
Figure BDA00004697860100001527
表示中坐标位置为(i-1,j)的像素点的像素值;
计算Sdis的每级的每个方向的复小波子带的立体视觉图的空间对比灵敏度,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100001529
的空间对比灵敏度记为
Figure BDA00004697860100001530
CSF dis q , m = 2.6 × ( 0.0192 + 0.114 × f dis q , m ) × e ( - ( 0.114 × f dis q , m ) 1.1 ) ,
Figure BDA00004697860100001532
表示
Figure BDA00004697860100001533
的空间频率, 表示
Figure BDA00004697860100001536
的行频率, f R , dis q , m = 1 w q , m × h q , m Σ i = 1 w q , m Σ j = 2 h q , m [ V dis q , m ( i , j ) - V dis q , m ( i , j - 1 ) ] 2 ,
Figure BDA00004697860100001538
表示
Figure BDA00004697860100001539
中坐标位置为(i,j)的像素点的像素值,
Figure BDA00004697860100001540
表示
Figure BDA00004697860100001541
中坐标位置为(i,j-1)的像素点的像素值,表示
Figure BDA00004697860100001543
的列频率, f C , dis q , m = 1 w q , m × h q , m Σ i = 2 w q , m Σ j = 1 h q , m [ V dis q , m ( i , j ) - V dis q , m ( i - 1 , j ) ] 2 ,
Figure BDA00004697860100001545
表示
Figure BDA00004697860100001546
中坐标位置为(i-1,j)的像素点的像素值;
计算Sdis的直流复小波子带的立体视觉图
Figure BDA0000469786010000161
的空间对比灵敏度,记为
Figure BDA0000469786010000162
CSF dis DC = 2.6 × ( 0.0192 + 0.114 × f dis DC ) × e ( - ( 0.114 × f dis DC ) 1.1 ) ,
Figure BDA0000469786010000164
表示
Figure BDA0000469786010000165
的空间频率,
Figure BDA0000469786010000166
Figure BDA0000469786010000167
表示
Figure BDA0000469786010000168
的行频率, f R , dis DC = 1 w DC × h DC Σ i = 1 w DC Σ j = 2 h DC [ V dis DC ( i , j ) - V dis DC ( i , j - 1 ) ] 2 , 表示中坐标位置为(i,j)的像素点的像素值,表示中坐标位置为(i,j-1)的像素点的像素值,
Figure BDA00004697860100001614
表示
Figure BDA00004697860100001615
的列频率, f C , dis DC = 1 w DC × h DC Σ i = 2 w DC Σ j = 1 h DC [ V dis DC ( i , j ) - V dis DC ( i - 1 , j ) ] 2 ,
Figure BDA00004697860100001617
表示
Figure BDA00004697860100001618
中坐标位置为(i-1,j)的像素点的像素值;
⑨-4、计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的中心凹位置权重,将Sorg的第m级的第q个方向的复小波子带的立体视觉图中坐标位置为(x,y)的图像块的中心凹位置权重记为
Figure BDA00004697860100001620
Figure BDA00004697860100001621
其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,在此ic和jc分别表示
Figure BDA00004697860100001622
中的中心像素点的横坐标和纵坐标, i c = w q , m 2 , j c = h q , m 2 , σ表示高斯函数的尺度参数, σ = i c 2 + j c 2 ;
计算Sorg的直流复小波子带的立体视觉图
Figure BDA00004697860100001625
中的每个图像块的中心凹位置权重,将Sorg的直流复小波子带的立体视觉图
Figure BDA00004697860100001626
中坐标位置为(x,y)的图像块的中心凹位置权重记为
Figure BDA00004697860100001628
其中,在此1≤x≤wDC-4,1≤y≤hDC-4,在此ic和jc分别表示
Figure BDA00004697860100001629
中的中心像素点的横坐标和纵坐标,
Figure BDA00004697860100001630
σ表示高斯函数的尺度参数, σ = i c 2 + j c 2 ;
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的中心凹位置权重,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100001632
中坐标位置为(x,y)的图像块的中心凹位置权重记为
Figure BDA00004697860100001633
Figure BDA00004697860100001634
其中,在此1≤i≤wq,m-4,1≤j≤hq,m-4,在此ic和jc分别表示
Figure BDA00004697860100001635
中的中心像素点的横坐标和纵坐标, i c = w q , m 2 , j c = h q , m 2 , σ表示高斯函数的尺度参数, σ = i c 2 + j c 2 ;
计算Sdis的直流复小波子带的立体视觉图中的每个图像块的中心凹位置权重,将Sdis的直流复小波子带的立体视觉图
Figure BDA0000469786010000174
中坐标位置为(x,y)的图像块的中心凹位置权重记为
Figure BDA0000469786010000175
其中,在此1≤x≤wDC-4,1≤y≤hDC-4,在此ic和jc分别表示中的中心像素点的横坐标和纵坐标,
Figure BDA0000469786010000178
σ表示高斯函数的尺度参数, σ = i c 2 + j c 2 ;
⑨-5、依据Canny边缘算子分别将Sorg的每级的每个方向的复小波子带的立体视觉图、Sorg的直流复小波子带的立体视觉图
Figure BDA00004697860100001710
Sdis的每级的每个方向的复小波子带的立体视觉图和Sdis的直流复小波子带的立体视觉图
Figure BDA00004697860100001711
中的图像块划分到边缘区域或非边缘区域;
计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100001712
中坐标位置为(x,y)的图像块的双目恰可觉察失真值,记为
Figure BDA00004697860100001713
Figure BDA00004697860100001714
其中,max()为取最大值函数,min()为取最小值函数;
计算Sorg的直流复小波子带的立体视觉图
Figure BDA00004697860100001715
中的每个图像块的双目恰可觉察失真值,将Sorg的直流复小波子带的立体视觉图
Figure BDA00004697860100001716
中坐标位置为(x,y)的图像块的双目恰可觉察失真值,记为
Figure BDA00004697860100001717
Figure BDA00004697860100001718
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100001719
中坐标位置为(x,y)的图像块的双目恰可觉察失真值,记为
Figure BDA0000469786010000181
Figure BDA0000469786010000182
计算Sdis的直流复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值,将Sdis的直流复小波子带的立体视觉图
Figure BDA0000469786010000184
中坐标位置为(x,y)的图像块的双目恰可觉察失真值,记为
Figure BDA0000469786010000185
Figure BDA0000469786010000186
⑨-6、计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值的失真权重,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA0000469786010000187
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重,记为 W BJND , org , ( x , y ) q , m = BJND org , ( x , y ) q , m - BJND max , org q , m BJND max , org q , m - BJND min , org q , m , 其中,表示Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100001811
中的所有图像块的双目恰可觉察失真值中的最大值,
Figure BDA00004697860100001812
表示Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100001813
中的所有图像块的双目恰可觉察失真值中的最小值;
计算Sorg的直流复小波子带的立体视觉图
Figure BDA00004697860100001814
中的每个图像块的双目恰可觉察失真值的失真权重,将Sorg的直流复小波子带的立体视觉图
Figure BDA00004697860100001815
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重,记为
Figure BDA00004697860100001816
W BJND , org , ( x , y ) DC = BJND org , ( x , y ) DC - BJND max , org DC BJND max , org DC - BJND min , org DC , 其中,表示Sorg的直流复小波子带的立体视觉图
Figure BDA00004697860100001819
中的所有图像块的双目恰可觉察失真值中的最大值,
Figure BDA00004697860100001820
表示Sorg的直流复小波子带的立体视觉图
Figure BDA00004697860100001821
中的所有图像块的双目恰可觉察失真值中的最小值;
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值的失真权重,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA0000469786010000191
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重,记为
Figure BDA0000469786010000192
W BJND , dis , ( x , y ) DC = BJND dis , ( x , y ) DC - BJND max , dis DC BJND max , dis DC - BJND min , dis DC , 其中,表示Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA0000469786010000195
中的所有图像块的双目恰可觉察失真值中的最大值,
Figure BDA0000469786010000196
表示Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA0000469786010000197
中的所有图像块的双目恰可觉察失真值中的最小值;
计算Sdis的直流复小波子带的立体视觉图
Figure BDA0000469786010000198
中的每个图像块的双目恰可觉察失真值的失真权重,将Sdis的直流复小波子带的立体视觉图中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重,记为 W BJND , dis , ( x , y ) DC = BJND dis , ( x , y ) DC - BJND max , dis DC BJND max , dis DC - BJND min , dis DC , 其中,
Figure BDA00004697860100001912
表示Sdis的直流复小波子带的立体视觉图
Figure BDA00004697860100001913
中的所有图像块的双目恰可觉察失真值中的最大值,表示Sdis的直流复小波子带的立体视觉图中的所有图像块的双目恰可觉察失真值中的最小值。
所述的步骤⑨-1中平均背景亮度算子 B = 1 1 1 1 1 1 2 2 2 1 1 2 0 2 1 1 2 2 2 1 1 1 1 1 1 ; 所述的步骤⑨-2中 G 1 = 0 0 0 0 0 1 3 8 3 1 0 0 0 0 0 - 1 - 3 - 8 - 3 - 1 0 0 0 0 0 , G 2 = 0 0 1 0 0 0 8 3 0 0 1 3 0 - 3 - 1 0 0 - 3 - 8 0 0 0 - 1 0 0 , G 3 = 0 0 1 0 0 0 0 3 8 0 - 1 - 3 0 3 1 0 - 8 - 3 0 0 0 0 - 1 0 0 , G 4 = 0 1 0 - 1 0 0 3 0 - 3 0 0 8 0 - 8 0 0 3 0 - 3 0 0 1 0 - 1 0 ; 所述的步骤⑨-2中β'=2/17。
所述的步骤中λ的获取过程为:
Figure BDA00004697860100001920
、采用n幅无失真的立体图像建立其在不同失真类型不同失真程度下的失真立体图像集,该失真立体图像集包括多幅失真的立体图像,其中,n≥1;
Figure BDA0000469786010000201
、采用主观质量评价方法获取该失真立体图像集中的每幅失真的立体图像的平均主观评分差值,记为DMOS,DMOS=100-MOS,其中,MOS表示主观评分均值,DMOS∈[0,100];
Figure BDA0000469786010000202
、根据步骤①至步骤
Figure BDA0000469786010000203
的操作过程,计算该失真立体图像集中的每幅失真的立体图像相对于对应的无失真的立体图像的双目融合质量评价指标值Qs和立体视觉评价度量值Qd
Figure BDA0000469786010000204
、采用乘性加权的数学拟合方法Q=Qs×(Qd)λ拟合该失真立体图像集中的每幅失真的立体图像的平均主观评分差值DMOS及每幅失真的立体图像相对于对应的无失真的立体图像的双目融合质量评价指标值和立体视觉评价度量值,得到λ值。
与现有技术相比,本发明的优点在于:本发明方法从人类双目信息的传输过程角度考虑,即人眼双目视觉信息从光信号进入双眼后,先经过了简单细胞来确定双眼各自接收的信息,再传输复杂细胞来汇聚来自双眼的信息;接着进入到更高层次的视皮层进行加工处理,如双目竞争、双目融合、双目抑制等特性;最后由人的大脑感知信息,认识世界,对上述本发明方法通过复小波变换来获取简单细胞信息矩阵,再根据这些复小波变换的各项系数汇聚成复杂细胞信息矩阵;接着在这些复杂细胞信息矩阵基础上,进行两方面的评价,一是融合双目复杂细胞信息矩阵得到双目融合图像,再根据人眼对不同频率的双目信息具有不同视觉敏感度特性,最后得到双目融合图像评价质量;二是从复杂细胞信息矩阵中提取双目立体感知信息,从立体视差角度考虑,再结合双目的掩蔽特性,人眼在视觉感知过程中会受到背景亮度的变化、纹理掩蔽特性及空间对比灵敏度等特性的影响,来获取立体视觉感知评价质量;最后结合这两部分的评价得到最终的立体图像质量评价结果,而该评价结果与人眼的主观感知性能具有较好的一致性,更加符合人眼的主观感知。
附图说明
图1为本发明方法的总体实现框图;
图2a为Akko&Kayo(640×480)立体图像;
图2b为Alt Moabit(1024×768)立体图像;
图2c为Balloons(1024×768)立体图像;
图2d为Door Flowers(1024×768)立体图像;
图2e为Kendo(1024×768)立体图像;
图2f为Leaving Laptop(1024×768)立体图像;
图2g为Lovebird1(1024×768)立体图像;
图2h为Newspaper(1024×768)立体图像;
图2i为Xmas(640×480)立体图像;
图2j为Puppy(720×480)立体图像;
图2k为Soccer2(720×480)立体图像;
图2l为Horse(480×270)立体图像;
图3a为乘性系数λ与评价指标CC的拟合曲线;
图3b为乘性系数λ与评价指标SROCC的拟合曲线;
图3c为乘性系数λ与评价指标RMSE的拟合曲线。
具体实施方式
以下结合附图实施例对本发明作进一步详细描述。
本发明提出的一种基于双目信息处理的立体图像质量评价方法,其总体实现框图如图1所示,其总体处理过程为:令Lorg表示原始的无失真的立体图像的左视点图像的亮度图,令Rorg表示原始的无失真的立体图像的右视点图像的亮度图,令Ldis表示待评价的失真的立体图像的左视点图像的亮度图,令Rdis表示待评价的失真的立体图像的右视点图像的亮度图;对Lorg、Rorg、Ldis和Rdis分别实施M级复小波变换,得到的系数矩阵作为简单细胞信息矩阵,其中,1≤M≤5;根据Lorg、Rorg、Ldis和Rdis各自对应的简单细胞信息矩阵获取对应的复杂细胞信息矩阵;根据Lorg和Rorg各自对应的复杂细胞信息矩阵,获取原始的无失真的立体图像对应的双目融合图,并根据Ldis和Rdis各自对应的复杂细胞信息矩阵,获取待评价的失真的立体图像对应的双目融合图;根据原始的无失真的立体图像对应的双目融合图和待评价的失真的立体图像对应的双目融合图,获取待评价的失真的立体图像相对于原始的无失真的立体图像的双目融合质量评价指标值;根据Lorg和Rorg各自对应的复杂细胞信息矩阵,获取原始的无失真的立体图像对应的立体视觉图,并根据Ldis和Rdis各自对应的复杂细胞信息矩阵,获取待评价的失真的立体图像对应的立体视觉图;获取原始的无失真的立体图像对应的立体视觉图中的每个5×5的图像块的双目恰可觉察失真值及双目恰可觉察失真值的失真权重,并获取待评价的失真的立体图像对应的立体视觉图中的每个5×5的图像块的双目恰可觉察失真值及双目恰可觉察失真值的失真权重;利用原始的无失真的立体图像对应的立体视觉图中的每个5×5的图像块的双目恰可觉察失真值的失真权重,获得原始的无失真的立体图像对应的加权后立体视觉图,并利用待评价的失真的立体图像对应的立体视觉图中的每个5×5的图像块的双目恰可觉察失真值的失真权重,获得待评价的失真的立体图像对应的加权后立体视觉图;获取原始的无失真的立体图像对应的加权后立体视觉图和待评价的失真的立体图像对应的加权后立体视觉图中位置相同的图像块之间的梯度结构相似度,再根据梯度结构相似度获取待评价的失真的立体图像相对于原始的无失真的立体图像的立体视觉评价度量值;根据双目融合质量评价指标值和立体视觉评价度量值,获取待评价的失真的立体图像的图像质量评价分值。
本发明方法具体包括以下步骤:
①令Sorg表示原始的无失真的立体图像,令Sdis表示待评价的失真的立体图像,然后分别将Sorg的左视点图像和右视点图像以及Sdis的左视点图像和右视点图像从RGB颜色空间转换到YUV颜色空间,得到Sorg的左视点图像的亮度图(Y通道图)、第一色度图(U通道图)、第二色度图(V通道图),Sorg的右视点图像的亮度图、第一色度图、第二色度图,Sdis的左视点图像的亮度图、第一色度图、第二色度图,Sdis的右视点图像的亮度图、第一色度图、第二色度图,将Sorg的左视点图像的亮度图记为Lorg,将Sorg的右视点图像的亮度图记为Rorg,将Sdis的左视点图像的亮度图记为Ldis,将Sdis的右视点图像的亮度图记为Rdis
②对Lorg实施M级复小波变换,得到每级的三个方向的复小波子带的系数矩阵、一个直流复小波子带的系数矩阵,并将这些系数矩阵作为简单细胞信息矩阵,将Lorg实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的系数矩阵记为
Figure BDA0000469786010000221
将Lorg实施M级复小波变换后得到的直流复小波子带的系数矩阵记为
Figure BDA0000469786010000222
其中,1≤M≤5,1≤m≤M,三个方向分别为水平方向、垂直方向和对角线方向,q=1,2,3,当q=1时第q个方向为水平方向、当q=2时第q个方向为垂直方向、当q=3时第q个方向为对角线方向。
对Rorg实施M级复小波变换,得到每级的三个方向的复小波子带的系数矩阵、一个直流复小波子带的系数矩阵,并将这些系数矩阵作为简单细胞信息矩阵,将Rorg实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的系数矩阵记为
Figure BDA0000469786010000231
将Rorg实施M级复小波变换后得到的直流复小波子带的系数矩阵记为
对Ldis实施M级复小波变换,得到每级的三个方向的复小波子带的系数矩阵、一个直流复小波子带的系数矩阵,并将这些系数矩阵作为简单细胞信息矩阵,将Ldis实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的系数矩阵记为
Figure BDA0000469786010000233
将Ldis实施M级复小波变换后得到的直流复小波子带的系数矩阵记为
Figure BDA0000469786010000234
对Rdis实施M级复小波变换,得到每级的三个方向的复小波子带的系数矩阵、一个直流复小波子带的系数矩阵,并将这些系数矩阵作为简单细胞信息矩阵,将Rdis实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的系数矩阵记为
Figure BDA0000469786010000235
将Rdis实施M级复小波变换后得到的直流复小波子带的系数矩阵记为
Figure BDA0000469786010000236
③获取Lorg实施M级复小波变换后得到的每级的三个方向的复小波子带的复杂细胞信息矩阵,将Lorg实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的复杂细胞信息矩阵记为
Figure BDA0000469786010000238
其中, p org , L q , m = | E org , L q , m | = ( Re ( E org , L q , m ) ) 2 + ( Im ( E org , L q , m ) ) 2 , θ org , L q , m = arctan ( Im ( E org , L q , m ) Re ( E org , L q , m ) ) , exp()表示以自然基数e为底的指数函数,符号“||”为求复数的模值,arctan()表示反正切函数,表示
Figure BDA00004697860100002311
的实部,表示的虚部;并获取Lorg实施M级复小波变换后得到的直流复小波子带的复杂细胞信息矩阵,记为
Figure BDA00004697860100002314
其中, p org , L DC = | E org , L DC | = ( Re ( E org , L DC ) ) 2 + ( Im ( E org , L DC ) ) 2 , θ org , L DC = arctan ( Im ( E org , L DC ) Re ( E org , L DC ) ) , 表示
Figure BDA00004697860100002317
的实部,表示
Figure BDA0000469786010000242
的虚部。
获取Rorg实施M级复小波变换后得到的每级的三个方向的复小波子带的复杂细胞信息矩阵,将Rorg实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的复杂细胞信息矩阵记为
Figure BDA0000469786010000243
Figure BDA0000469786010000244
其中, p org , R q , m = | E org , R q , m | = ( Re ( E org , R q , m ) ) 2 + ( Im ( E org , R q , m ) ) 2 , θ org , R q , m = arctan ( Im ( E org , R q , m ) Re ( E org , R q , m ) ) ,
Figure BDA0000469786010000247
表示
Figure BDA0000469786010000248
的实部,表示的虚部;并获取Rorg实施M级复小波变换后得到的直流复小波子带的复杂细胞信息矩阵,记为
Figure BDA00004697860100002411
Figure BDA00004697860100002412
其中, p org , R DC = | E org , R DC | = ( Re ( E org , R DC ) ) 2 + ( Im ( E org , R DC ) ) 2 , θ org , R DC = arctan ( Im ( E org , R DC ) Re ( E org , R DC ) ) ,
Figure BDA00004697860100002415
表示
Figure BDA00004697860100002416
的实部,
Figure BDA00004697860100002417
表示
Figure BDA00004697860100002418
的虚部。
获取Ldis实施M级复小波变换后得到的每级的三个方向的复小波子带的复杂细胞信息矩阵,将Ldis实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的复杂细胞信息矩阵记为
Figure BDA00004697860100002420
其中, p dis , L q , m = | E dis , L q , m | = ( Re ( E dis , L q , m ) ) 2 + ( Im ( E dis , L q , m ) ) 2 , θ dis , L q , m = arctan ( Im ( E dis , L q , m ) Re ( E dis , L q , m ) ) ,
Figure BDA00004697860100002434
表示的实部,
Figure BDA00004697860100002435
表示
Figure BDA00004697860100002436
的虚部;并获取Ldis实施M级复小波变换后得到的直流复小波子带的复杂细胞信息矩阵,记为
Figure BDA00004697860100002426
其中, p dis , L DC = | E dis , L DC | = ( Re ( E dis , L DC ) ) 2 + ( Im ( E dis , L DC ) ) 2 , θ dis , L DC = arctan ( Im ( E dis , L DC ) Re ( E dis , L DC ) ) ,
Figure BDA00004697860100002430
表示
Figure BDA00004697860100002431
的实部,
Figure BDA00004697860100002432
表示
Figure BDA00004697860100002433
的虚部。
获取Rdis实施M级复小波变换后得到的每级的三个方向的复小波子带的复杂细胞信息矩阵,将Rdis实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的复杂细胞信息矩阵记为
Figure BDA0000469786010000251
其中, p dis , R q , m = | E dis , R q , m | = ( Re ( E dis , R q , m ) ) 2 + ( Im ( E dis , R q , m ) ) 2 , θ dis , R q , m = arctan ( Im ( E dis , R q , m ) Re ( E dis , R q , m ) ) ,
Figure BDA0000469786010000255
表示
Figure BDA0000469786010000256
的实部,
Figure BDA0000469786010000257
表示
Figure BDA0000469786010000258
的虚部;并获取Rdis实施M级复小波变换后得到的直流复小波子带的复杂细胞信息矩阵,记为
Figure BDA0000469786010000259
Figure BDA00004697860100002510
其中, p dis , R DC = | E dis , R DC | = ( Re ( E dis , R DC ) ) 2 + ( Im ( E dis , R DC ) ) 2 , θ dis , R DC = arctan ( Im ( E dis , R DC ) Re ( E dis , R DC ) ) ,
Figure BDA00004697860100002513
表示
Figure BDA00004697860100002514
的实部,
Figure BDA00004697860100002515
表示
Figure BDA00004697860100002516
的虚部。
④根据Lorg实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵和Rorg实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵,获取Sorg的每级的每个方向的复小波子带的双目融合图,将Sorg的第m级的第q个方向的复小波子带的双目融合图记为
Figure BDA00004697860100002517
B org q , m = | C org , L q , m + C org , R q , m | = ( p org , L q , m ) 2 + ( p org , R q , m ) 2 + p org , L q , m p org , R q , m cos ( Δ θ org q , m ) , 其中,符号“||”为求复数的模值,cos()为求余弦函数,
Figure BDA00004697860100002519
并根据
Figure BDA00004697860100002520
Figure BDA00004697860100002521
获取Sorg的直流复小波子带的双目融合图,记为
Figure BDA00004697860100002522
B org DC = | C org , L DC + C org , R DC | = ( p org , L DC ) 2 + ( p org , R DC ) 2 + p org , L DC p org , R DC cos ( Δ θ org DC ) , 其中, Δ θ org DC = θ org , L DC - θ org , R DC .
根据Ldis实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵和Rdis实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵,获取Sdis的每级的每个方向的复小波子带的双目融合图,将Sdis的第m级的第q个方向的复小波子带的双目融合图记为
Figure BDA00004697860100002525
B dis q , m = | C dis , L q , m + C dis , R q , m | = ( p dis , L q , m ) 2 + ( p dis , R q , m ) 2 + p dis , L q , m p dis , R q , m cos ( Δ θ dis q , m ) , 其中, Δ θ dis q , m = θ dis , L q , m - θ dis , R q , m ; 并根据
Figure BDA00004697860100002528
获取Sdis的直流复小波子带的双目融合图,记为 B dis DC = | C dis , L DC + C dis , R DC | = ( p dis , L DC ) 2 + ( p dis , R DC ) 2 + p dis , L DC p dis , R DC cos ( Δ θ dis DC ) , 其中, Δ θ dis DC = θ dis , L DC - θ dis , R DC .
⑤计算Sorg与Sdis所有的同级的同方向的两个复小波子带的双目融合图的双目融合峰值信噪比,将
Figure BDA0000469786010000264
的双目融合峰值信噪比记为BFPSNRq,m SFPSNR q , m = 1 10 × log 255 2 1 w q , m × h q , m × L q , m × ω q , m , 其中,wq,m表示
Figure BDA0000469786010000266
Figure BDA0000469786010000267
的宽度,hq,m表示
Figure BDA0000469786010000268
Figure BDA0000469786010000269
的高度, L q , m = Σ i = 1 w q , m Σ j = 1 h q , m | B org q , m ( i - j ) - B dis q , m ( i , j ) | 1 , “||1”为1范数符号,
Figure BDA00004697860100002611
表示
Figure BDA00004697860100002612
中坐标位置为(i,j)的像素点的像素值,
Figure BDA00004697860100002613
表示
Figure BDA00004697860100002614
中坐标位置为(i,j)的像素点的像素值,ωq,m表示
Figure BDA00004697860100002616
的视觉敏感度权值。
计算Sorg的直流复小波子带的双目融合图
Figure BDA00004697860100002617
与Sdis的直流复小波子带的双目融合图
Figure BDA00004697860100002618
的双目融合峰值信噪比,记为BFPSNRDC SFPSNR DC = 1 10 × log 255 2 1 w DC × h DC × L DC × ω DC , 其中,wDC表示
Figure BDA00004697860100002620
Figure BDA00004697860100002621
的宽度,hDC表示
Figure BDA00004697860100002622
Figure BDA00004697860100002623
的高度, L DC = Σ i = 1 w DC Σ j = 1 h DC | B org DC ( i - j ) - B dis DC ( i , j ) | 1 , “||1”为1范数符号,
Figure BDA00004697860100002625
表示
Figure BDA00004697860100002626
中坐标位置为(i,j)的像素点的像素值,
Figure BDA00004697860100002627
表示
Figure BDA00004697860100002628
中坐标位置为(i,j)的像素点的像素值,ωDC表示
Figure BDA00004697860100002629
Figure BDA00004697860100002630
的视觉敏感度权值。
⑥计算Sdis相对于Sorg的双目融合质量评价指标值,记为Qs Q s = Σ m = 1 M Σ q = 1 3 BFPSNR q , m + BFPSNR DC Σ m = 1 M Σ q = 1 3 ω q , m + ω DC .
⑦根据Lorg实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵和Rorg实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵,获取Sorg的每级的每个方向的复小波子带的立体视觉图,将Sorg的第m级的第q个方向的复小波子带的立体视觉图记为
Figure BDA00004697860100002632
V org q , m = | C org , L q , m - C org , R q , m | = ( p org , L q , m ) 2 + ( p org , R q , m ) 2 - p org , L q , m p org , R q , m cos ( Δ θ org q , m ) , 其中,符号“||”为求复数的模值,cos()为求余弦函数,
Figure BDA0000469786010000272
并根据
Figure BDA0000469786010000273
Figure BDA0000469786010000274
获取Sorg的直流复小波子带的立体视觉图,记为
Figure BDA0000469786010000275
V org DC = | C org , L DC - C org , R DC | = ( p org , L DC ) 2 + ( p org , R DC ) 2 - p org , L DC p org , R DC cos ( Δ θ org DC ) , 其中, Δ θ org DC = θ org , L DC - θ org , R DC .
根据Ldis实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵和Rdis实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵,获取Sdis的每级的每个方向的复小波子带的立体视觉图,将Sdis的第m级的第q个方向的复小波子带的立体视觉图记为
Figure BDA0000469786010000278
V dis q , m = | C dis , L q , m - C dis , R q , m | = ( p dis , L q , m ) 2 + ( p dis , R q , m ) 2 - p dis , L q , m p dis , R q , m cos ( Δ θ dis q , m ) , 其中, Δ θ dis q , m = θ dis , L q , m - θ dis , R q , m ; 并根据
Figure BDA00004697860100002711
Figure BDA00004697860100002712
获取Sdis的直流复小波子带的立体视觉图,记为
Figure BDA00004697860100002713
V dis DC = | C dis , L DC - C dis , R DC | = ( p dis , L DC ) 2 + ( p dis , R DC ) 2 - p dis , L DC p dis , R DC cos ( Δ θ dis DC ) , 其中, Δ θ dis DC = θ dis , L DC - θ dis , R DC .
⑧采用尺寸大小为5×5的滑动窗口在Sorg的每级的每个方向的复小波子带的立体视觉图中逐像素点移动,将Sorg的每级的每个方向的复小波子带的立体视觉图分割成多个相重叠的且尺寸大小为5×5的图像块;采用尺寸大小为5×5的滑动窗口在
Figure BDA00004697860100002716
中逐像素点移动,将
Figure BDA00004697860100002717
分割成多个相重叠的且尺寸大小为5×5的图像块。
采用尺寸大小为5×5的滑动窗口在Sdis的每级的每个方向的复小波子带的立体视觉图中逐像素点移动,将Sdis的每级的每个方向的复小波子带的立体视觉图分割成多个相重叠的且尺寸大小为5×5的图像块;采用尺寸大小为5×5的滑动窗口在
Figure BDA00004697860100002718
中逐像素点移动,将
Figure BDA00004697860100002719
分割成多个相重叠的且尺寸大小为5×5的图像块。
⑨分别获取Sorg的每级的每个方向的复小波子带的立体视觉图及Sorg的直流复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值及双目恰可觉察失真值的失真权重。
分别获取Sdis的每级的每个方向的复小波子带的立体视觉图及Sdis的直流复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值及双目恰可觉察失真值的失真权重。
在此具体实施例中,步骤⑨的具体过程为:
⑨-1、计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的背景亮度的恰可觉察失真值,将Sorg的第m级的第q个方向的复小波子带的立体视觉图中坐标位置为(x,y)的图像块的背景亮度的恰可觉察失真值记为
Figure BDA0000469786010000282
Figure BDA0000469786010000283
其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,
Figure BDA0000469786010000284
B(h1,h2)为平均背景亮度算子B中下标为(h1,h2)处的值,1≤h1≤5,1≤h2≤5,
Figure BDA0000469786010000285
表示
Figure BDA0000469786010000286
中坐标位置为(x,y)的图像块中坐标位置为(h1,h2)的像素点的像素值。
计算Sorg的直流复小波子带的立体视觉图
Figure BDA0000469786010000287
中的每个图像块的背景亮度的恰可觉察失真值,将Sorg的直流复小波子带的立体视觉图中坐标位置为(x,y)的图像块的背景亮度的恰可觉察失真值记为
Figure BDA0000469786010000289
Figure BDA00004697860100002810
其中,在此1≤x≤wDC-4,1≤y≤hDC-4, V org , ( x , y ) DC ‾ = Σ h 1 = 1 5 Σ h 2 = 1 5 V org , ( x , y ) DC ( h 1 , h 2 ) × B ( h 1 , h 2 ) Σ h 1 = 1 5 Σ h 2 = 1 5 B ( h 1 , h 2 ) ,
Figure BDA00004697860100002812
表示
Figure BDA00004697860100002813
中坐标位置为(x,y)的图像块中坐标位置为(h1,h2)的像素点的像素值。
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的背景亮度的恰可觉察失真值,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA0000469786010000291
中坐标位置为(x,y)的图像块的背景亮度的恰可觉察失真值记为
Figure BDA0000469786010000292
Figure BDA0000469786010000293
其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4, V dis , ( x , y ) q , m ‾ = Σ h 1 = 1 5 Σ h 2 = 1 5 V dis , ( x , y ) q , m ( h 1 , h 2 ) × B ( h 1 , h 2 ) Σ h 1 = 1 5 Σ h 2 = 1 5 B ( h 1 , h 2 ) ,
Figure BDA0000469786010000295
表示
Figure BDA0000469786010000296
中坐标位置为(x,y)的图像块中坐标位置为(h1,h2)的像素点的像素值。
计算Sdis的直流复小波子带的立体视觉图中的每个图像块的背景亮度的恰可觉察失真值,将Sdis的直流复小波子带的立体视觉图
Figure BDA0000469786010000297
中坐标位置为(x,y)的图像块的背景亮度的恰可觉察失真值记为
Figure BDA0000469786010000298
其中,在此1≤x≤wDC-4,1≤y≤hDC-4, V dis , ( x , y ) DC ‾ = Σ h 1 = 1 5 Σ h 2 = 1 5 V dis , ( x , y ) DC ( h 1 , h 2 ) × B ( h 1 , h 2 ) Σ h 1 = 1 5 Σ h 2 = 1 5 B ( h 1 , h 2 ) ,
Figure BDA00004697860100002911
表示
Figure BDA00004697860100002912
中坐标位置为(x,y)的图像块中坐标位置为(h1,h2)的像素点的像素值。
在此,平均背景亮度算子 B = 1 1 1 1 1 1 2 2 2 1 1 2 0 2 1 1 2 2 2 1 1 1 1 1 1 .
⑨-2、计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的纹理掩蔽的恰可觉察失真值,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA0000469786010000301
中坐标位置为(x,y)的图像块的纹理掩蔽的恰可觉察失真值记为
Figure BDA0000469786010000302
VT org , ( x , y ) q , m = max k = 1,2,3,4 { | 1 16 Σ h 1 = 1 5 Σ h 2 = 1 5 V org , ( x , y ) q , m ( h 1 , h 2 ) × G k ( h 1 , h 2 ) | } × β ′ , 其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,max()为取最大值函数,在此“||”为取绝对值符号,Gk(h1,h2)表示第k个方向的高斯平均加权因子Gk中下标为(h1,h2)处的加权值,第1个方向的高斯平均加权因子G1为水平方向的高斯平均加权因子,第2个方向的高斯平均加权因子G2为垂直方向的高斯平均加权因子,第3个方向的高斯平均加权因子G3为45度角方向的高斯平均加权因子,第4个方向的高斯平均加权因子G4为135度角方向的高斯平均加权因子,β'为调节因子。
计算Sorg的直流复小波子带的立体视觉图
Figure BDA0000469786010000304
中的每个图像块的纹理掩蔽的恰可觉察失真值,将Sorg的直流复小波子带的立体视觉图
Figure BDA0000469786010000305
中坐标位置为(x,y)的图像块的纹理掩蔽的恰可觉察失真值记为
Figure BDA0000469786010000306
VT org , ( x , y ) DC = max k = 1,2,3,4 { | 1 16 Σ h 1 = 1 5 Σ h 2 = 1 5 V org , ( x , y ) DC ( h 1 , h 2 ) × G k ( h 1 , h 2 ) | } × β ′ , 其中,在此1≤x≤wDC-4,1≤y≤hDC-4。
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的纹理掩蔽的恰可觉察失真值,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA0000469786010000308
中坐标位置为(x,y)的图像块的纹理掩蔽的恰可觉察失真值记为
Figure BDA0000469786010000309
VT dis , ( x , y ) q , m = max k = 1,2,3,4 { | 1 16 Σ h 1 = 1 5 Σ h 2 = 1 5 V dis , ( x , y ) q , m ( h 1 , h 2 ) × G k ( h 1 , h 2 ) | } × β ′ , 其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4。
计算Sdis的直流复小波子带的立体视觉图中的每个图像块的纹理掩蔽的恰可觉察失真值,将Sdis的直流复小波子带的立体视觉图
Figure BDA00004697860100003011
中坐标位置为(x,y)的图像块的纹理掩蔽的恰可觉察失真值记为
Figure BDA00004697860100003012
VT dis , ( x , y ) DC = max k = 1,2,3,4 { | 1 16 Σ h 1 = 1 5 Σ h 2 = 1 5 V dis , ( x , y ) DC ( h 1 , h 2 ) × G k ( h 1 , h 2 ) | } × β ′ , 其中,在此1≤x≤wDC-4,1≤y≤hDC-4。
在此, G 1 = 0 0 0 0 0 1 3 8 3 1 0 0 0 0 0 - 1 - 3 - 8 - 3 - 1 0 0 0 0 0 , G 2 = 0 0 1 0 0 0 8 3 0 0 1 3 0 - 3 - 1 0 0 - 3 - 8 0 0 0 - 1 0 0 , G 3 = 0 0 1 0 0 0 0 3 8 0 - 1 - 3 0 3 1 0 - 8 - 3 0 0 0 0 - 1 0 0 , G 4 = 0 1 0 - 1 0 0 3 0 - 3 0 0 8 0 - 8 0 0 3 0 - 3 0 0 1 0 - 1 0 ; β'=2/17,该值是经主观实验得到。
⑨-3、计算Sorg的每级的每个方向的复小波子带的立体视觉图的空间对比灵敏度,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA0000469786010000313
的空间对比灵敏度记为
Figure BDA0000469786010000314
CSF org q , m = 2.6 × ( 0.0192 + 0.114 × f org q , m ) × e ( - ( 0.114 × f org q , m ) 1.1 ) ,
Figure BDA0000469786010000316
表示
Figure BDA0000469786010000317
的空间频率, f org q , m = ( f R , org q , m ) 2 + ( f C , org q , m ) 2 ,
Figure BDA0000469786010000319
表示
Figure BDA00004697860100003110
的行频率, f R , org q , m = 1 w q , m × h q , m Σ i = 1 w q , m Σ j = 2 h q , m [ V org q , m ( i , j ) - V org q , m ( i , j - 1 ) ] 2 ,
Figure BDA00004697860100003112
表示
Figure BDA00004697860100003113
中坐标位置为(i,j)的像素点的像素值,表示
Figure BDA00004697860100003115
中坐标位置为(i,j-1)的像素点的像素值,表示
Figure BDA00004697860100003117
的列频率, f C , org q , m = 1 w q , m × h q , m Σ i = 2 w q , m Σ j = 1 h q , m [ V org q , m ( i , j ) - V org q , m ( i - 1 , j ) ] 2 ,
Figure BDA00004697860100003119
表示
Figure BDA00004697860100003120
中坐标位置为(i-1,j)的像素点的像素值。
计算Sorg的直流复小波子带的立体视觉图
Figure BDA00004697860100003121
的空间对比灵敏度,记为
Figure BDA00004697860100003122
CSF org DC = 2.6 × ( 0.0192 + 0.114 × f org DC ) × e ( - ( 0.114 × f org DC ) 1.1 ) ,
Figure BDA00004697860100003124
表示
Figure BDA00004697860100003125
的空间频率, f org DC = ( f R , org DC ) 2 + ( f C , org DC ) 2 ,
Figure BDA00004697860100003127
表示
Figure BDA00004697860100003128
的行频率, f R , org DC = 1 w DC × h DC Σ i = 1 w DC Σ j = 2 h DC [ V org DC ( i , j ) - V org DC ( i , j - 1 ) ] 2 ,
Figure BDA00004697860100003130
表示中坐标位置为(i,j)的像素点的像素值,
Figure BDA00004697860100003132
表示中坐标位置为(i,j-1)的像素点的像素值,
Figure BDA00004697860100003134
表示
Figure BDA00004697860100003135
的列频率, f C , org DC = 1 w DC × h DC Σ i = 2 w DC Σ j = 1 h DC [ V org DC ( i , j ) - V org DC ( i - 1 , j ) ] 2 ,
Figure BDA00004697860100003137
表示中坐标位置为(i-1,j)的像素点的像素值。
计算Sdis的每级的每个方向的复小波子带的立体视觉图的空间对比灵敏度,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA0000469786010000321
的空间对比灵敏度记为
Figure BDA0000469786010000322
CSF dis q , m = 2.6 × ( 0.0192 + 0.114 × f dis q , m ) × e ( - ( 0.114 × f dis q , m ) 1.1 ) ,
Figure BDA0000469786010000324
表示
Figure BDA0000469786010000325
的空间频率, f dis q , m = ( f R , dis q , m ) 2 + ( f C , dis q , m ) 2 ,
Figure BDA0000469786010000327
表示的行频率, f R , dis q , m = 1 w q , m × h q , m Σ i = 1 w q , m Σ j = 2 h q , m [ V dis q , m ( i , j ) - V dis q , m ( i , j - 1 ) ] 2 ,
Figure BDA00004697860100003210
表示
Figure BDA00004697860100003211
中坐标位置为(i,j)的像素点的像素值,
Figure BDA00004697860100003212
表示
Figure BDA00004697860100003213
中坐标位置为(i,j-1)的像素点的像素值,
Figure BDA00004697860100003214
表示
Figure BDA00004697860100003215
的列频率, f C , dis q , m = 1 w q , m × h q , m Σ i = 2 w q , m Σ j = 1 h q , m [ V dis q , m ( i , j ) - V dis q , m ( i - 1 , j ) ] 2 ,
Figure BDA00004697860100003217
表示
Figure BDA00004697860100003218
中坐标位置为(i-1,j)的像素点的像素值。
计算Sdis的直流复小波子带的立体视觉图
Figure BDA00004697860100003219
的空间对比灵敏度,记为 CSF dis DC = 2.6 × ( 0.0192 + 0.114 × f dis DC ) × e ( - ( 0.114 × f dis DC ) 1.1 ) ,
Figure BDA00004697860100003222
表示
Figure BDA00004697860100003223
的空间频率, f dis DC = ( f R , dis DC ) 2 + ( f C , dis DC ) 2 ,
Figure BDA00004697860100003225
表示
Figure BDA00004697860100003226
的行频率, f R , dis DC = 1 w DC × h DC Σ i = 1 w DC Σ j = 2 h DC [ V dis DC ( i , j ) - V dis DC ( i , j - 1 ) ] 2 ,
Figure BDA00004697860100003228
表示
Figure BDA00004697860100003229
中坐标位置为(i,j)的像素点的像素值,
Figure BDA00004697860100003230
表示
Figure BDA00004697860100003231
中坐标位置为(i,j-1)的像素点的像素值,
Figure BDA00004697860100003232
表示
Figure BDA00004697860100003233
的列频率, f C , dis DC = 1 w DC × h DC Σ i = 2 w DC Σ j = 1 h DC [ V dis DC ( i , j ) - V dis DC ( i - 1 , j ) ] 2 ,
Figure BDA00004697860100003235
表示
Figure BDA00004697860100003236
中坐标位置为(i-1,j)的像素点的像素值。
⑨-4、计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的中心凹位置权重,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100003237
中坐标位置为(x,y)的图像块的中心凹位置权重记为
Figure BDA00004697860100003238
Figure BDA00004697860100003239
其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,在此ic和jc分别表示中的中心像素点的横坐标和纵坐标, i c = w q , m 2 , j c = h q , m 2 , σ表示高斯函数的尺度参数, σ = i c 2 + j c 2 .
计算Sorg的直流复小波子带的立体视觉图
Figure BDA0000469786010000333
中的每个图像块的中心凹位置权重,将Sorg的直流复小波子带的立体视觉图
Figure BDA0000469786010000334
中坐标位置为(x,y)的图像块的中心凹位置权重记为
Figure BDA0000469786010000336
其中,在此1≤x≤wDC-4,1≤y≤hDC-4,在此ic和jc分别表示
Figure BDA0000469786010000337
中的中心像素点的横坐标和纵坐标,
Figure BDA0000469786010000338
σ表示高斯函数的尺度参数, σ = i c 2 + j c 2 .
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的中心凹位置权重,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100003310
中坐标位置为(x,y)的图像块的中心凹位置权重记为
Figure BDA00004697860100003312
其中,在此1≤i≤wq,m-4,1≤j≤hq,m-4,在此ic和jc分别表示
Figure BDA00004697860100003313
中的中心像素点的横坐标和纵坐标, i c = w q , m 2 , j c = h q , m 2 , σ表示高斯函数的尺度参数, σ = i c 2 + j c 2 .
计算Sdis的直流复小波子带的立体视觉图
Figure BDA00004697860100003316
中的每个图像块的中心凹位置权重,将Sdis的直流复小波子带的立体视觉图
Figure BDA00004697860100003317
中坐标位置为(x,y)的图像块的中心凹位置权重记为
Figure BDA00004697860100003318
Figure BDA00004697860100003319
其中,在此1≤x≤wDC-4,1≤y≤hDC-4,在此ic和jc分别表示
Figure BDA00004697860100003320
中的中心像素点的横坐标和纵坐标,
Figure BDA00004697860100003321
σ表示高斯函数的尺度参数, σ = i c 2 + j c 2 .
⑨-5、依据Canny边缘算子分别将Sorg的每级的每个方向的复小波子带的立体视觉图、Sorg的直流复小波子带的立体视觉图
Figure BDA00004697860100003323
Sdis的每级的每个方向的复小波子带的立体视觉图和Sdis的直流复小波子带的立体视觉图中的图像块划分到边缘区域或非边缘区域。
计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100003325
中坐标位置为(x,y)的图像块的双目恰可觉察失真值,记为
Figure BDA0000469786010000341
Figure BDA0000469786010000342
其中,max()为取最大值函数,min()为取最小值函数。
计算Sorg的直流复小波子带的立体视觉图
Figure BDA0000469786010000343
中的每个图像块的双目恰可觉察失真值,将Sorg的直流复小波子带的立体视觉图
Figure BDA0000469786010000344
中坐标位置为(x,y)的图像块的双目恰可觉察失真值,记为
Figure BDA0000469786010000345
Figure BDA0000469786010000346
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA0000469786010000347
中坐标位置为(x,y)的图像块的双目恰可觉察失真值,记为
Figure BDA0000469786010000348
Figure BDA0000469786010000349
计算Sdis的直流复小波子带的立体视觉图
Figure BDA00004697860100003410
中的每个图像块的双目恰可觉察失真值,将Sdis的直流复小波子带的立体视觉图
Figure BDA00004697860100003411
中坐标位置为(x,y)的图像块的双目恰可觉察失真值,记为
Figure BDA00004697860100003412
Figure BDA00004697860100003413
⑨-6、计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值的失真权重,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100003414
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重,记为
Figure BDA00004697860100003415
W BJND , org , ( x , y ) q , m = BJND org , ( x , y ) q , m - BJND max , org q , m BJND max , org q , m - BJND min , org q , m , 其中,
Figure BDA00004697860100003417
表示Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA0000469786010000351
中的所有图像块的双目恰可觉察失真值中的最大值,
Figure BDA0000469786010000352
表示Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA0000469786010000353
中的所有图像块的双目恰可觉察失真值中的最小值。
计算Sorg的直流复小波子带的立体视觉图
Figure BDA0000469786010000354
中的每个图像块的双目恰可觉察失真值的失真权重,将Sorg的直流复小波子带的立体视觉图
Figure BDA0000469786010000355
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重,记为
Figure BDA0000469786010000356
W BJND , org , ( x , y ) DC = BJND org , ( x , y ) DC - BJND max , org DC BJND max , org DC - BJND min , org DC , 其中,
Figure BDA0000469786010000358
表示Sorg的直流复小波子带的立体视觉图
Figure BDA0000469786010000359
中的所有图像块的双目恰可觉察失真值中的最大值,
Figure BDA00004697860100003510
表示Sorg的直流复小波子带的立体视觉图
Figure BDA00004697860100003511
中的所有图像块的双目恰可觉察失真值中的最小值。
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值的失真权重,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100003512
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重,记为
Figure BDA00004697860100003513
W BJND , dis , ( x , y ) q , m = BJND dis , ( x , y ) q , m - BJND max , dis q , m BJND max , dis q , m - BJND min , dis q , m , 其中,
Figure BDA00004697860100003515
表示Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100003516
中的所有图像块的双目恰可觉察失真值中的最大值,
Figure BDA00004697860100003517
表示Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure BDA00004697860100003518
中的所有图像块的双目恰可觉察失真值中的最小值。
计算Sdis的直流复小波子带的立体视觉图
Figure BDA00004697860100003519
中的每个图像块的双目恰可觉察失真值的失真权重,将Sdis的直流复小波子带的立体视觉图
Figure BDA00004697860100003520
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重,记为
Figure BDA00004697860100003521
W BJND , dis , ( x , y ) DC = BJND dis , ( x , y ) DC - BJND max , dis DC BJND max , dis DC - BJND min , dis DC , 其中,
Figure BDA00004697860100003523
表示Sdis的直流复小波子带的立体视觉图中的所有图像块的双目恰可觉察失真值中的最大值,表示Sdis的直流复小波子带的立体视觉图
Figure BDA00004697860100003526
中的所有图像块的双目恰可觉察失真值中的最小值。
⑩对Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块进行失真权重加权,得到Sorg的每级的每个方向的复小波子带的加权后立体视觉图,将Sorg的第m级的第q个方向的复小波子带的加权后立体视觉图记为
Figure BDA0000469786010000361
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值记为
Figure BDA0000469786010000363
Figure BDA0000469786010000364
其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,1≤u≤5,1≤v≤5,表示
Figure BDA0000469786010000366
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,
Figure BDA0000469786010000367
表示
Figure BDA0000469786010000368
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重。
Figure BDA0000469786010000369
中的每个图像块进行失真权重加权,得到Sorg的直流复小波子带的加权后立体视觉图,将Sorg的直流复小波子带的加权后立体视觉图记为
Figure BDA00004697860100003611
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值记为
Figure BDA00004697860100003613
其中,在此1≤x≤wDC-4,1≤y≤hDC-4,1≤u≤5,1≤v≤5,
Figure BDA00004697860100003614
表示
Figure BDA00004697860100003615
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,
Figure BDA00004697860100003616
表示
Figure BDA00004697860100003617
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重。
对Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块进行失真权重加权,得到Sdis的每级的每个方向的复小波子带的加权后立体视觉图,将Sdis的第m级的第q个方向的复小波子带的加权后立体视觉图记为
Figure BDA00004697860100003619
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值记为
Figure BDA00004697860100003621
其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,1≤u≤5,1≤v≤5,
Figure BDA00004697860100003622
表示
Figure BDA00004697860100003623
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,
Figure BDA00004697860100003624
表示
Figure BDA00004697860100003625
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重。
Figure BDA00004697860100003626
中的每个图像块进行失真权重加权,得到Sdis的直流复小波子带的加权后立体视觉图,将Sdis的直流复小波子带的加权后立体视觉图记为
Figure BDA0000469786010000371
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值记为
Figure BDA0000469786010000373
Figure BDA0000469786010000374
其中,在此1≤x≤wDC-4,1≤y≤hDC-4,1≤u≤5,1≤v≤5,
Figure BDA0000469786010000375
表示
Figure BDA0000469786010000376
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,
Figure BDA0000469786010000377
表示
Figure BDA0000469786010000378
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重。
计算Sorg和Sdis同级的同个方向的复小波子带的加权后立体视觉图中所有的坐标位置相同的两个图像块之间的梯度结构相似度,将Sorg的第m级的第q个方向的复小波子带的加权后立体视觉图
Figure BDA0000469786010000379
中坐标位置为(x,y)的图像块和Sdis的第m级的第q个方向的复小波子带的加权后立体视觉图
Figure BDA00004697860100003710
中坐标位置为(x,y)的图像块之间的梯度结构相似度记为 GSSIM ( x , y ) q , m = [ ( 2 × u org q , m × u dis q , m + C 1 ) ( ( u org q , m ) 2 + ( u dis q , m ) 2 + C 1 ) ] α × [ ( 2 × σ org q , m × σ dis q , m + C 2 ) ( ( σ org q , m ) 2 + ( σ dis q , m ) 2 + C 2 ) ] β × [ ( σ org - dis q , m + C 3 ) ( σ org q , m × σ dis q , m + C 3 ) ] γ , 其中,
Figure BDA00004697860100003713
表示
Figure BDA00004697860100003714
中坐标位置为(x,y)的图像块中的所有像素点的像素值的均值,表示
Figure BDA00004697860100003716
中坐标位置为(x,y)的图像块中的所有像素点的像素值的均值,
Figure BDA00004697860100003717
表示中坐标位置为(x,y)的图像块中的所有像素点的像素值的方差,
Figure BDA00004697860100003719
表示
Figure BDA00004697860100003720
中坐标位置为(x,y)的图像块中的所有像素点的像素值的方差,
Figure BDA00004697860100003721
表示
Figure BDA00004697860100003722
中坐标位置为(x,y)的图像块与中坐标位置为(x,y)的图像块的相关系数, σ org - dis q , m = Σ u = 1 5 Σ v = 1 5 ( ( V org , ( x , y ) ′ q , m ( u , v ) - u org q , m ) × ( V dis , ( x , y ) ′ q , m ( u , v ) - u dis q , m ) ) Σ u = 1 5 Σ v = 1 5 ( V org , ( x , y ) ′ q , m ( u , v ) - u org q , m ) 2 × Σ u = 1 5 Σ v = 1 5 ( V dis , ( x , y ) ′ q , m ( u , v ) - u dis q , m ) 2 ,
Figure BDA00004697860100003725
表示中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,
Figure BDA00004697860100003727
表示
Figure BDA00004697860100003728
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,C1、C2、C3均为防止分母为零的常数,C1=2.56,C2=2,C3=7.68,α=1、β=1、γ=1。
计算Sorg的直流复小波子带的加权后立体视觉图
Figure BDA0000469786010000381
和Sdis的直流复小波子带的加权后立体视觉图
Figure BDA0000469786010000382
中所有的坐标位置相同的两个图像块之间的梯度结构相似度,将Sorg的直流复小波子带的加权后立体视觉图
Figure BDA0000469786010000383
中坐标位置为(x,y)的图像块和Sdis的直流复小波子带的加权后立体视觉图
Figure BDA0000469786010000384
中坐标位置为(x,y)的图像块之间的梯度结构相似度记为 GSSIM ( x , y ) DC = [ ( 2 × u org DC × u dis DC + C 1 ) ( ( u org DC ) 2 + ( u dis DC ) 2 + C 1 ) ] α × [ ( 2 × σ org DC × σ dis DC + C 2 ) ( ( σ org DC ) 2 + ( σ dis DC ) 2 + C 2 ) ] β × [ ( σ org - dis DC + C 3 ) ( σ org DC × σ dis DC + C 3 ) ] γ , 其中,
Figure BDA0000469786010000387
表示
Figure BDA0000469786010000388
中坐标位置为(x,y)的图像块中的所有像素点的像素值的均值,
Figure BDA0000469786010000389
表示
Figure BDA00004697860100003810
中坐标位置为(x,y)的图像块中的所有像素点的像素值的均值,
Figure BDA00004697860100003811
表示中坐标位置为(x,y)的图像块中的所有像素点的像素值的方差,
Figure BDA00004697860100003813
表示
Figure BDA00004697860100003814
中坐标位置为(x,y)的图像块中的所有像素点的像素值的方差,
Figure BDA00004697860100003815
表示
Figure BDA00004697860100003816
中坐标位置为(x,y)的图像块与
Figure BDA00004697860100003817
中坐标位置为(x,y)的图像块的相关系数, σ org - dis DC = Σ u = 1 5 Σ v = 1 5 ( ( V org , ( x , y ) ′ DC ( u , v ) - u org DC ) × ( V dis , ( x , y ) ′ DC ( u , v ) - u dis DC ) ) Σ u = 1 5 Σ v = 1 5 ( V org , ( x , y ) ′ DC ( u , v ) - u org DC ) 2 × Σ u = 1 5 Σ v = 1 5 ( V dis , ( x , y ) ′ DC ( u , v ) - u dis DC ) 2 ,
Figure BDA00004697860100003819
表示中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,
Figure BDA00004697860100003821
表示
Figure BDA00004697860100003822
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值。
Figure BDA00004697860100003824
计算Sdis相对于Sorg的立体视觉评价度量值,记为Qd Q d = Σ m = 1 M Σ q = 1 3 ( ( Σ x = 1 w q , m - 4 Σ y = 1 h q , m - 4 GSSIM ( x , y ) q , m ) × ω q , m ) + ( Σ x = 1 W DC - 4 Σ y = 1 h DC - 4 GSSIM ( x , y ) DC ) × ω DC Σ m = 1 M Σ q = 1 3 ω q , m + ω DC .
根据Sdis相对于Sorg的双目融合质量评价指标值Qs和Sdis相对于Sorg的立体视觉评价度量值Qd,计算Sdis的图像质量评价分值,记为Q,Q=Qs×(Qd)λ,其中,λ为常数,λ表示乘性系数。
在本实施例中,λ的获取过程为:
、采用n幅无失真的立体图像建立其在不同失真类型不同失真程度下的失真立体图像集,该失真立体图像集包括多幅失真的立体图像,其中,n≥1。
Figure BDA00004697860100003911
、采用主观质量评价方法获取该失真立体图像集中的每幅失真的立体图像的平均主观评分差值,记为DMOS,DMOS=100-MOS,其中,MOS表示主观评分均值,DMOS∈[0,100]。
Figure BDA00004697860100003912
、根据步骤①至步骤
Figure BDA00004697860100003914
的操作过程,计算该失真立体图像集中的每幅失真的立体图像相对于对应的无失真的立体图像的双目融合质量评价指标值Qs和立体视觉评价度量值Qd
Figure BDA00004697860100003913
、采用乘性加权的数学拟合方法Q=Qs×(Qd)λ拟合该失真立体图像集中的每幅失真的立体图像的平均主观评分差值DMOS及每幅失真的立体图像相对于对应的无失真的立体图像的双目融合质量评价指标值和立体视觉评价度量值,得到λ值。在此,λ从[-10,10]范围内通过统计得到最佳的Q值来选取λ。
在本实施例中,步骤⑤和步骤
Figure BDA00004697860100003915
中ωq,m的确定过程为:当q=1或q=2时, ω q , m = ∫ a m b m 2.6 × ( 0.0192 + 0.114 × f ) × e [ - ( 0.114 × f ) 1.1 ] b m - a m ; 当q=3时, ω q , m = ∫ a m b m 2.6 × ( 0.0192 + 0.114 × 2 1 2 × f ) × e [ - ( 0.114 × 2 1 2 × f ) 1.1 ] b m - a m , 其中,f表示复小波变换的频率,am为区间[0,0.5]分成M个子区间后的第m个子区间的下限, a m = 0 m = 1 0.5 2 × ( m - 1 ) m > 1 , bm为区间[0,0.5]分成M个子区间后的第m个子区间的上限, b m = 0.5 m = 1 0.5 2 × m m > 1 ; ωDC的确定过程为:ωDC1,M3,M或ωDC2,M3,M,其中,ω1,M表示Sorg的第M级的第1个方向的复小波子带的双目融合图
Figure BDA0000469786010000395
和Sdis的第M级的第1个方向的复小波子带的双目融合图
Figure BDA0000469786010000396
的视觉敏感度权值,ω3,M表示Sorg的第M级的第3个方向的复小波子带的双目融合图和Sdis的第M级的第3个方向的复小波子带的双目融合图
Figure BDA0000469786010000398
的视觉敏感度权值,ω2,M表示Sorg的第M级的第2个方向的复小波子带的双目融合图
Figure BDA0000469786010000399
和Sdis的第M级的第2个方向的复小波子带的双目融合图
Figure BDA0000469786010000401
的视觉敏感度权值。
在本实施例中,利用如图2a、图2b、图2c、图2d、图2e、图2f、图2g、图2h、图2i、图2j、图2k、图2l所示的12幅无失真的立体图像,通过对这12幅无失真的立体图像进行五种不同失真类型,且每一种失真类型包括几种不同失真程度下的失真处理,得到共312幅失真的立体图像,其中JPEG压缩的失真的立体图像共60幅,JPEG2000压缩的失真的立体图像共60幅,白噪声失真的立体图像共60幅,高斯模糊失真的立体图像共60幅,H.264编码失真的立体图像共72幅。再对这312幅失真的立体图像采用公知的主观质量评价方法进行主观质量评价,得到这312幅失真的立体图像各自的平均主观评分差值(DMOS,Difference Mean Opinion Scores),即每幅失真的立体图像的主观质量评分值。DMOS为主观评分均值(MOS)和满分(100)的差值,即DMOS=100-MOS,因此,DMOS值越大表示失真的立体图像的质量越差,DMOS值越小表示失真的立体图像的质量越好,且DMOS的取值范围为[0,100]。对上述312幅失真的立体图像和12幅无失真的立体图像根据步骤①至步骤
Figure BDA0000469786010000402
相同的操作计算得到每幅失真的立体图像相对于相应的无失真的立体图像的双目融合质量评价指标值Qs和立体视觉评价度量值Qd。然后采用乘性加权得到这312幅失真的立体图像的DMOS与相应的双目融合质量评价指标值Qs及立体视觉评价度量值Qd之间的相关性分析、单调性及误差分析。这里,利用评估图像质量评价方法的3个常用客观参量作为评价指标,即非线性回归条件下的相关系数(CC)、秩排序相关系数(SROCC)及均方误差指标(RMSE)。CC和RMSE反映了立体图像客观评价方法与主观感知质量之间的准确性,SROCC反映了立体图像客观评价方法与主观感知质量之间的单调性。CC、SROCC值越大,说明评价性能越好,RMSE值越小,说明评价性能越好,反之亦然。图3a给出了乘性系数λ与上述312幅失真的立体图像的评价指标CC的拟合曲线,图3b给出了乘性系数λ与上述312幅失真的立体图像的评价指标SROCC的拟合曲线,图3c给出了乘性系数λ与上述312幅失真的立体图像的评价指标RMSE的拟合曲线,图3a、图3b和图3c中的横坐标表示λ的变化值,纵坐标表示相应的评价指标,λ值的大小决定了双目融合质量评价指标值Qs和立体视觉评价度量值Qd对图像质量评价分值Q的贡献大小。从图3a、图3b和图3c中可知,λ取值的变化对该立体图像质量客观方法与主观感知之间的评价性能影响较大,都是在十分位上进行波动,在图3a、图3b和图3c中都存在极值点,一个极大值和一个极小值,当λ取值为4时,立体图像质量客观评价方法与主观感知之间的一致性达到最佳,故在本实施方案中取λ=4。
分析本实施例得到的失真的立体图像的图像质量评价分值Q=Qs×(Qd)4的最终评价结果与平均主观评分差值DMOS之间的相关性。按本实施例计算得到的失真的立体图像的图像质量评价指标Q做四参数Logistic函数非线性拟合,然后分析拟合后的预测值与主观感知之间的相关特性。实验结果如表1所列,CC和SROCC值的取值范围为[0,1],其值越高说明客观评价方法与DMOS相关性越好,RMSE值越低说明客观评价方法与DMOS相关性越好。根据表1所列的数据可见,CC和SROCC值都超过0.93,除了白噪声失真的SROCC值外,RMSE值低于5.8,说明最终评价结果的输出值Q与平均主观评分差值DMOS之间的相关性很好,与人眼主观感知的结果一致,说明了本发明方法的有效性和可行性。
表1失真的立体图像的图像质量评价分值与平均主观评分差值之间的相关性
CC SROCC RMSE
高斯模糊失真的立体图像(60幅) 0.9673 0.9626 5.3524
JPEG2000压缩的失真的立体图像(60幅) 0.9582 0.9543 3.4293
JPEG压缩的失真的立体图像(60幅) 0.9458 0.9491 4.6274
白噪声失真的立体图像(60幅) 0.9464 0.9032 5.0470
H.264编码失真的立体图像(72幅) 0.9663 0.9617 3.6097
失真立体图像集(312幅) 0.9425 0.9338 5.7430

Claims (6)

1.一种基于双目信息处理的立体图像质量评价方法,其特征在于总体处理过程为:令Lorg表示原始的无失真的立体图像的左视点图像的亮度图,令Rorg表示原始的无失真的立体图像的右视点图像的亮度图,令Ldis表示待评价的失真的立体图像的左视点图像的亮度图,令Rdis表示待评价的失真的立体图像的右视点图像的亮度图;对Lorg、Rorg、Ldis和Rdis分别实施M级复小波变换,得到的系数矩阵作为简单细胞信息矩阵,其中,1≤M≤5;根据Lorg、Rorg、Ldis和Rdis各自对应的简单细胞信息矩阵获取对应的复杂细胞信息矩阵;根据Lorg和Rorg各自对应的复杂细胞信息矩阵,获取原始的无失真的立体图像对应的双目融合图,并根据Ldis和Rdis各自对应的复杂细胞信息矩阵,获取待评价的失真的立体图像对应的双目融合图;根据原始的无失真的立体图像对应的双目融合图和待评价的失真的立体图像对应的双目融合图,获取待评价的失真的立体图像相对于原始的无失真的立体图像的双目融合质量评价指标值;根据Lorg和Rorg各自对应的复杂细胞信息矩阵,获取原始的无失真的立体图像对应的立体视觉图,并根据Ldis和Rdis各自对应的复杂细胞信息矩阵,获取待评价的失真的立体图像对应的立体视觉图;获取原始的无失真的立体图像对应的立体视觉图中的每个5×5的图像块的双目恰可觉察失真值及双目恰可觉察失真值的失真权重,并获取待评价的失真的立体图像对应的立体视觉图中的每个5×5的图像块的双目恰可觉察失真值及双目恰可觉察失真值的失真权重;利用原始的无失真的立体图像对应的立体视觉图中的每个5×5的图像块的双目恰可觉察失真值的失真权重,获得原始的无失真的立体图像对应的加权后立体视觉图,并利用待评价的失真的立体图像对应的立体视觉图中的每个5×5的图像块的双目恰可觉察失真值的失真权重,获得待评价的失真的立体图像对应的加权后立体视觉图;获取原始的无失真的立体图像对应的加权后立体视觉图和待评价的失真的立体图像对应的加权后立体视觉图中位置相同的图像块之间的梯度结构相似度,再根据梯度结构相似度获取待评价的失真的立体图像相对于原始的无失真的立体图像的立体视觉评价度量值;根据双目融合质量评价指标值和立体视觉评价度量值,获取待评价的失真的立体图像的图像质量评价分值。
2.根据权利要求1所述的一种基于双目信息处理的立体图像质量评价方法,其特征在于具体包括以下步骤:
①令Sorg表示原始的无失真的立体图像,令Sdis表示待评价的失真的立体图像,将Sorg的左视点图像的亮度图记为Lorg,将Sorg的右视点图像的亮度图记为Rorg,将Sdis的左视点图像的亮度图记为Ldis,将Sdis的右视点图像的亮度图记为Rdis
②对Lorg实施M级复小波变换,得到每级的三个方向的复小波子带的系数矩阵、一个直流复小波子带的系数矩阵,并将这些系数矩阵作为简单细胞信息矩阵,将Lorg实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的系数矩阵记为
Figure FDA0000469786000000021
将Lorg实施M级复小波变换后得到的直流复小波子带的系数矩阵记为
Figure FDA0000469786000000022
其中,1≤M≤5,1≤m≤M,三个方向分别为水平方向、垂直方向和对角线方向,q=1,2,3,当q=1时第q个方向为水平方向、当q=2时第q个方向为垂直方向、当q=3时第q个方向为对角线方向;
对Rorg实施M级复小波变换,得到每级的三个方向的复小波子带的系数矩阵、一个直流复小波子带的系数矩阵,并将这些系数矩阵作为简单细胞信息矩阵,将Rorg实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的系数矩阵记为
Figure FDA0000469786000000023
将Rorg实施M级复小波变换后得到的直流复小波子带的系数矩阵记为
Figure FDA0000469786000000024
对Ldis实施M级复小波变换,得到每级的三个方向的复小波子带的系数矩阵、一个直流复小波子带的系数矩阵,并将这些系数矩阵作为简单细胞信息矩阵,将Ldis实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的系数矩阵记为
Figure FDA0000469786000000025
将Ldis实施M级复小波变换后得到的直流复小波子带的系数矩阵记为
Figure FDA0000469786000000026
对Rdis实施M级复小波变换,得到每级的三个方向的复小波子带的系数矩阵、一个直流复小波子带的系数矩阵,并将这些系数矩阵作为简单细胞信息矩阵,将Rdis实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的系数矩阵记为将Rdis实施M级复小波变换后得到的直流复小波子带的系数矩阵记为
③获取Lorg实施M级复小波变换后得到的每级的三个方向的复小波子带的复杂细胞信息矩阵,将Lorg实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的复杂细胞信息矩阵记为
Figure FDA0000469786000000031
C org , L q , m = p org , L q , m exp ( θ org , L q , m ) , 其中, p org , L q , m = | E org , L q , m | = ( Re ( E org , L q , m ) ) 2 + ( Im ( E org , L q , m ) ) 2 , θ org , L q , m = arctan ( Im ( E org , L q , m ) Re ( E org , L q , m ) ) , exp()表示以自然基数e为底的指数函数,符号“||”为求复数的模值,arctan()表示反正切函数,表示
Figure FDA0000469786000000035
的实部,
Figure FDA0000469786000000036
表示
Figure FDA0000469786000000037
的虚部;并获取Lorg实施M级复小波变换后得到的直流复小波子带的复杂细胞信息矩阵,记为
Figure FDA0000469786000000038
Figure FDA0000469786000000039
其中, p org , L DC = | E org . L DC | = ( Re ( E org , L DC ) ) 2 + ( Im ( E org , L DC ) ) 2 , θ org , L DC = arctan ( Im ( E org , L DC ) Re ( E org , L DC ) ) ,
Figure FDA00004697860000000311
表示的实部,
Figure FDA00004697860000000313
表示
Figure FDA00004697860000000314
的虚部;
获取Rorg实施M级复小波变换后得到的每级的三个方向的复小波子带的复杂细胞信息矩阵,将Rorg实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的复杂细胞信息矩阵记为
Figure FDA00004697860000000315
Figure FDA00004697860000000316
其中, p org , R q , m = | E org , R q , m | = ( Re ( E org , R q , m ) ) 2 + ( Im ( E org , R q , m ) ) 2 , θ org , R q , m = arctan ( Im ( E org , R q , m ) Re ( E org , R q , m ) ) ,
Figure FDA00004697860000000318
表示的实部,
Figure FDA00004697860000000320
表示
Figure FDA00004697860000000321
的虚部;并获取Rorg实施M级复小波变换后得到的直流复小波子带的复杂细胞信息矩阵,记为 其中, p org , R DC = | E org . R DC | = ( Re ( E org , R DC ) ) 2 + ( Im ( E org , R DC ) ) 2 , θ org , R DC = arctan ( Im ( E org , R DC ) Re ( E org , R DC ) ) ,
Figure FDA00004697860000000325
表示
Figure FDA00004697860000000326
的实部,
Figure FDA00004697860000000327
表示的虚部;
获取Ldis实施M级复小波变换后得到的每级的三个方向的复小波子带的复杂细胞信息矩阵,将Ldis实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的复杂细胞信息矩阵记为
Figure FDA0000469786000000041
Figure FDA0000469786000000042
其中, p dis , L q , m = | E dis , L q , m | = ( Re ( E dis , L q , m ) ) 2 + ( Im ( E dis , L q , m ) ) 2 , θ dis , L q , m = arctan ( Im ( E dis , L q , m ) Re ( E dis , L q , m ) ) ,
Figure FDA0000469786000000044
表示
Figure FDA0000469786000000045
的实部,
Figure FDA0000469786000000046
表示
Figure FDA0000469786000000047
的虚部;并获取Ldis实施M级复小波变换后得到的直流复小波子带的复杂细胞信息矩阵,记为
Figure FDA0000469786000000048
Figure FDA0000469786000000049
其中, p dis , L DC = | E dis , L DC | = ( Re ( E dis , L DC ) ) 2 + ( Im ( E dis , L DC ) ) 2 , θ dis , L DC = arctan ( Im ( E dis , L DC ) Re ( E dis , L DC ) ) , 表示的实部,
Figure FDA00004697860000000413
表示
Figure FDA00004697860000000414
的虚部;
获取Rdis实施M级复小波变换后得到的每级的三个方向的复小波子带的复杂细胞信息矩阵,将Rdis实施第m级复小波变换后得到的第m级的第q个方向的复小波子带的复杂细胞信息矩阵记为
Figure FDA00004697860000000415
Figure FDA00004697860000000416
其中, p dis , R q , m = | E dis , R q , m | = ( Re ( E dis , R q , m ) ) 2 + ( Im ( E dis , R q , m ) ) 2 , θ dis , R q , m = arctan ( Im ( E dis , R q , m ) Re ( E dis , R q , m ) ) , 表示的实部,
Figure FDA00004697860000000420
表示的虚部;并获取Rdis实施M级复小波变换后得到的直流复小波子带的复杂细胞信息矩阵,记为
Figure FDA00004697860000000422
Figure FDA00004697860000000423
其中, p dis , R DC = | E dis , R DC | = ( Re ( E dis , R DC ) ) 2 + ( Im ( E dis , R DC ) ) 2 , θ dis , R DC = arctan ( Im ( E dis , R DC ) Re ( E dis , R DC ) ) ,
Figure FDA00004697860000000425
表示
Figure FDA00004697860000000426
的实部,
Figure FDA00004697860000000427
表示
Figure FDA00004697860000000428
的虚部;
④根据Lorg实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵和Rorg实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵,获取Sorg的每级的每个方向的复小波子带的双目融合图,将Sorg的第m级的第q个方向的复小波子带的双目融合图记为
Figure FDA00004697860000000429
B org q , m = | C org , L q , m + C org , R q . m | = ( p org , L q , m ) 2 + ( p org , R q , m ) 2 + p org , L q , m p org , R q , m cos ( Δθ org q , m ) , 其中,符号“||”为求复数的模值,cos()为求余弦函数, Δθ org q , m = θ org , L q , m - θ org , R q , m ; 并根据
Figure FDA0000469786000000052
Figure FDA0000469786000000053
获取Sorg的直流复小波子带的双目融合图,记为
Figure FDA0000469786000000054
B org DC = | C org , L DC + C org , R DC | = ( p org , L DC ) 2 + ( P org , R DC ) 2 + p org , L DC p org , R DC cos ( Δθ org DC ) , 其中, Δθ org DC = θ org , DC - θ org , R DC ;
根据Ldis实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵和Rdis实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵,获取Sdis的每级的每个方向的复小波子带的双目融合图,将Sdis的第m级的第q个方向的复小波子带的双目融合图记为
Figure FDA0000469786000000057
B dis q , m = | C ids , L q , m + C dis , R q . m | = ( p ids , L q , m ) 2 + ( p dis , R q , m ) 2 + p dis , L q , m p dis , R q , m cos ( Δθ dis q , m ) , 其中, Δθ dis q , m = θ dis , L q , m - θ dis , R q , m ; 并根据
Figure FDA00004697860000000510
获取Sdis的直流复小波子带的双目融合图,记为
Figure FDA00004697860000000512
B dis DC = | C dis , L DC + C dis , R DC | = ( p dis , L DC ) 2 + ( P ids , R DC ) 2 + p dis , L DC p dis , R DC cos ( Δθ dis DC ) , 其中, Δθ dis FC = Δθ dis , L DC - θ dis , R DC ;
⑤计算Sorg与Sdis所有的同级的同方向的两个复小波子带的双目融合图的双目融合峰值信噪比,将
Figure FDA00004697860000000515
的双目融合峰值信噪比记为BFPSNRq,m BFPSNR q , m = 1 10 × log 255 2 1 w q , m × h q , m × L q , m × ω q , m , 其中,wq,m表示的宽度,hq,m表示
Figure FDA00004697860000000521
的高度, L q , m = Σ i = 1 w q , m Σ j = 1 h q , m | B org q , m ( i , j ) - B dis q , m ( i , j ) | 1 , “||1”为1范数符号,
Figure FDA00004697860000000523
表示
Figure FDA00004697860000000524
中坐标位置为(i,j)的像素点的像素值,
Figure FDA00004697860000000525
表示
Figure FDA00004697860000000526
中坐标位置为(i,j)的像素点的像素值,ωq,m表示
Figure FDA00004697860000000527
Figure FDA00004697860000000528
的视觉敏感度权值;
计算Sorg的直流复小波子带的双目融合图
Figure FDA00004697860000000529
与Sdis的直流复小波子带的双目融合图
Figure FDA00004697860000000530
的双目融合峰值信噪比,记为BFPSNRDC BFPSNR DC = 1 10 log 255 2 1 w DC × h DC × L DC × ω DC , 其中,wDC表示
Figure FDA00004697860000000532
Figure FDA00004697860000000533
的宽度,hDC表示
Figure FDA00004697860000000534
Figure FDA00004697860000000535
的高度, L DC = Σ i = 1 w DC Σ j = 1 h DC | B org DC ( i , j ) - B dis DC ( i , j ) | 1 , “||1”为1范数符号,
Figure FDA00004697860000000537
表示
Figure FDA00004697860000000538
中坐标位置为(i,j)的像素点的像素值,
Figure FDA00004697860000000539
表示
Figure FDA0000469786000000061
中坐标位置为(i,j)的像素点的像素值,ωDC表示
Figure FDA0000469786000000063
的视觉敏感度权值;
⑥计算Sdis相对于Sorg的双目融合质量评价指标值,记为Qs Q s = Σ m = 1 M Σ q = 1 3 BFPSNR q , m + BFPSNR DC Σ m = 1 M Σ q = 1 3 ω q , m + ω DC ;
⑦根据Lorg实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵和Rorg实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵,获取Sorg的每级的每个方向的复小波子带的立体视觉图,将Sorg的第m级的第q个方向的复小波子带的立体视觉图记为
Figure FDA0000469786000000065
V org q , m = | C org , L q , m - C org , R q . m | = ( p org , L q , m ) 2 + ( p org , R q , m ) 2 - p org , L q , m p org , R q , m cos ( Δθ org q , m ) , 其中,符号“||”为求复数的模值,cos()为求余弦函数, Δθ org q , m = θ org . L q , m - θ org , R q , m ; 并根据
Figure FDA0000469786000000068
Figure FDA0000469786000000069
获取Sorg的直流复小波子带的立体视觉图,记为 V org DC = | C org , L DC - C org , R DC | = ( p org , L DC ) 2 + ( P org , R DC ) 2 - p org , L DC p org , R DC cos ( Δθ org DC ) , 其中, Δθ org DC = θ org , L DC - θ org , R DC ;
根据Ldis实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵和Rdis实施M级复小波变换后得到的每级的每个方向的复小波子带的复杂细胞信息矩阵,获取Sdis的每级的每个方向的复小波子带的立体视觉图,将Sdis的第m级的第q个方向的复小波子带的立体视觉图记为
Figure FDA00004697860000000613
V dis q , m = | C dis , L q , m - C dis , R q . m | = ( p dis , L q , m ) 2 + ( p dis , R q , m ) 2 - p dis , L q , m p dis , R q , m cos ( Δθ dis q , m ) , 其中, Δθ dis q , m = θ dis , L q , m - θ dis , R q , m ; 并根据
Figure FDA00004697860000000617
获取Sdis的直流复小波子带的立体视觉图,记为
Figure FDA00004697860000000618
V dis DC = | C dis , L DC - C dis , R DC | = ( p dis , L DC ) 2 + ( P dis , R DC ) 2 - p dis , L DC p dis , R DC cos ( Δθ dis DC ) , 其中, Δθ dis DC = θ dis , L DC - θ dis , R DC ;
⑧采用尺寸大小为5×5的滑动窗口在Sorg的每级的每个方向的复小波子带的立体视觉图中逐像素点移动,将Sorg的每级的每个方向的复小波子带的立体视觉图分割成多个相重叠的且尺寸大小为5×5的图像块;采用尺寸大小为5×5的滑动窗口在中逐像素点移动,将
Figure FDA0000469786000000072
分割成多个相重叠的且尺寸大小为5×5的图像块;
采用尺寸大小为5×5的滑动窗口在Sdis的每级的每个方向的复小波子带的立体视觉图中逐像素点移动,将Sdis的每级的每个方向的复小波子带的立体视觉图分割成多个相重叠的且尺寸大小为5×5的图像块;采用尺寸大小为5×5的滑动窗口在中逐像素点移动,将
Figure FDA0000469786000000074
分割成多个相重叠的且尺寸大小为5×5的图像块;
⑨分别获取Sorg的每级的每个方向的复小波子带的立体视觉图及Sorg的直流复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值及双目恰可觉察失真值的失真权重;
分别获取Sdis的每级的每个方向的复小波子带的立体视觉图及Sdis的直流复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值及双目恰可觉察失真值的失真权重;
⑩对Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块进行失真权重加权,得到Sorg的每级的每个方向的复小波子带的加权后立体视觉图,将Sorg的第m级的第q个方向的复小波子带的加权后立体视觉图记为
Figure FDA0000469786000000075
Figure FDA0000469786000000076
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值记为
Figure FDA0000469786000000077
V org , ( x , y ) ′ q , m ( u , v ) = V org , ( x , y ) q , m ( u , v ) × W BJND , org , ( x , y ) q , m , 其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,1≤u≤5,1≤v≤5,表示中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,
Figure FDA00004697860000000711
表示中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重;
Figure FDA00004697860000000713
中的每个图像块进行失真权重加权,得到Sorg的直流复小波子带的加权后立体视觉图,将Sorg的直流复小波子带的加权后立体视觉图记为
Figure FDA00004697860000000714
Figure FDA00004697860000000715
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值记为
Figure FDA00004697860000000716
V org , ( x , y ) ′ DC ( u , v ) = V org , ( x , y ) DC ( u , v ) × W BJND , org , ( x . y ) DC , 其中,在此1≤x≤wDC-4,1≤y≤hDC-4,1≤u≤5,1≤v≤5,
Figure FDA0000469786000000082
表示
Figure FDA0000469786000000083
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,
Figure FDA0000469786000000084
表示
Figure FDA0000469786000000085
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重;
对Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块进行失真权重加权,得到Sdis的每级的每个方向的复小波子带的加权后立体视觉图,将Sdis的第m级的第q个方向的复小波子带的加权后立体视觉图记为
Figure FDA0000469786000000086
Figure FDA0000469786000000087
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值记为
Figure FDA0000469786000000088
V dis , ( x , y ) ′ q , m ( u , v ) = V dis , ( x , y ) q , m ( u , v ) × W BJND , dis , ( x , y ) q , m , 其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,1≤u≤5,1≤v≤5,
Figure FDA00004697860000000810
表示
Figure FDA00004697860000000811
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,表示
Figure FDA00004697860000000813
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重;
Figure FDA00004697860000000814
中的每个图像块进行失真权重加权,得到Sdis的直流复小波子带的加权后立体视觉图,将Sdis的直流复小波子带的加权后立体视觉图记为
Figure FDA00004697860000000816
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值记为
Figure FDA00004697860000000817
V dis , ( x , y ) ′ DC ( u , v ) = V dis , ( x , y ) DC ( u , v ) × W BJND , dis , ( x , y ) dc , 其中,在此1≤x≤wDC-4,1≤y≤hDC-4,1≤u≤5,1≤v≤5,
Figure FDA00004697860000000819
表示
Figure FDA00004697860000000820
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,
Figure FDA00004697860000000821
表示
Figure FDA00004697860000000822
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重;
Figure FDA00004697860000000826
计算Sorg和Sdis同级的同个方向的复小波子带的加权后立体视觉图中所有的坐标位置相同的两个图像块之间的梯度结构相似度,将Sorg的第m级的第q个方向的复小波子带的加权后立体视觉图
Figure FDA00004697860000000823
中坐标位置为(x,y)的图像块和Sdis的第m级的第q个方向的复小波子带的加权后立体视觉图
Figure FDA00004697860000000824
中坐标位置为(x,y)的图像块之间的梯度结构相似度记为
Figure FDA00004697860000000825
GSSIM ( x , y ) q , m = [ ( 2 × u org q , m × u dis q , m + C 1 ) ( ( u org q , m ) 2 + ( u dis q , m ) 2 + C 1 ) ] α × [ 2 × σ org q , m × σ dis q , m + C 2 ( ( σ org q , m ) 2 + ( σ dis q , m ) 2 + C 2 ) ] β × [ ( σ org - dis q , m + C 3 ) ( σ org q , m × σ dis q , m + C 3 ) ] γ , 其中,
Figure FDA0000469786000000092
表示
Figure FDA0000469786000000093
中坐标位置为(x,y)的图像块中的所有像素点的像素值的均值,
Figure FDA0000469786000000094
表示
Figure FDA0000469786000000095
中坐标位置为(x,y)的图像块中的所有像素点的像素值的均值,
Figure FDA0000469786000000096
表示
Figure FDA0000469786000000097
中坐标位置为(x,y)的图像块中的所有像素点的像素值的方差,
Figure FDA0000469786000000098
表示
Figure FDA0000469786000000099
中坐标位置为(x,y)的图像块中的所有像素点的像素值的方差,
Figure FDA00004697860000000910
表示
Figure FDA00004697860000000911
中坐标位置为(x,y)的图像块与
Figure FDA00004697860000000912
中坐标位置为(x,y)的图像块的相关系数, σ org - dis q , m = Σ u = 1 5 Σ v = 1 5 ( ( V org , ( x , y ) ′ q , m ( u , v ) - u org q , m ) × ( V dis , ( x , y ) ′ q , m ( u , v ) - u dis q , m ) ) Σ u = 1 5 Σ v = 1 5 ( V org , ( x , y ) ′ q , m ( u , v ) - u org q , m ) 2 × Σ u = 1 5 Σ v = 1 5 ( V dis , ( x , y ) ′ q , m ( u , v ) - u dis q , m ) 2 ,
Figure FDA00004697860000000914
表示
Figure FDA00004697860000000915
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,表示
Figure FDA00004697860000000917
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,C1、C2、C3均为防止分母为零的常数,α=1、β=1、γ=1;
计算Sorg的直流复小波子带的加权后立体视觉图
Figure FDA00004697860000000918
和Sdis的直流复小波子带的加权后立体视觉图中所有的坐标位置相同的两个图像块之间的梯度结构相似度,将Sorg的直流复小波子带的加权后立体视觉图
Figure FDA00004697860000000920
中坐标位置为(x,y)的图像块和Sdis的直流复小波子带的加权后立体视觉图
Figure FDA00004697860000000921
中坐标位置为(x,y)的图像块之间的梯度结构相似度记为
Figure FDA00004697860000000922
GSSIM ( x , y ) DC = [ ( 2 × u org DC × u dis DC + C 1 ) ( ( u org DC ) 2 + ( u dis DC ) 2 + C 1 ) ] α × [ 2 × σ org DC × σ dis DC + C 2 ( ( σ org DC ) 2 + ( σ dis DC ) 2 + C 2 ) ] β × [ ( σ org - dis DC + C 3 ) ( σ org DC × σ dis DC + C 3 ) ] γ , 其中,
Figure FDA00004697860000000924
表示
Figure FDA00004697860000000925
中坐标位置为(x,y)的图像块中的所有像素点的像素值的均值,
Figure FDA00004697860000000926
表示
Figure FDA00004697860000000927
中坐标位置为(x,y)的图像块中的所有像素点的像素值的均值,
Figure FDA00004697860000000928
表示中坐标位置为(x,y)的图像块中的所有像素点的像素值的方差,
Figure FDA00004697860000000930
表示
Figure FDA00004697860000000931
中坐标位置为(x,y)的图像块中的所有像素点的像素值的方差,
Figure FDA0000469786000000101
表示中坐标位置为(x,y)的图像块与
Figure FDA0000469786000000103
中坐标位置为(x,y)的图像块的相关系数, σ org - dis DC = Σ u = 1 5 Σ v = 1 5 ( ( V org , ( x , y ) ′ DC ( u , v ) - u org DC ) × ( V dis , ( x , y ) ′ DC ( u , v ) - u dis DC ) ) Σ u = 1 5 Σ v = 1 5 ( V org , ( x , y ) ′ DC ( u , v ) - u org DC ) 2 × Σ u = 1 5 Σ v = 1 5 ( V dis , ( x , y ) ′ DC ( u , v ) - u dis DC ) 2 ,
Figure FDA0000469786000000105
表示
Figure FDA0000469786000000106
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值,
Figure FDA0000469786000000107
表示
Figure FDA0000469786000000108
中坐标位置为(x,y)的图像块中坐标位置为(u,v)的像素点的像素值;
Figure FDA00004697860000001014
计算Sdis相对于Sorg的立体视觉评价度量值,记为Qd Q d = Σ m = 1 M Σ q = 1 3 ( ( Σ x = 1 w q , m - 7 Σ y = 1 h q , m - 7 GSSIM ( x , y ) q , m ) × ω q , m ) + ( Σ x = 1 w DC - 7 Σ y = 1 h DC - 7 GSSIM ( x , y ) DC ) × ω DC Σ m = 1 M Σ q = 1 3 ω q , m + ω DC ;
Figure FDA00004697860000001015
根据Sdis相对于Sorg的双目融合质量评价指标值Qs和Sdis相对于Sorg的立体视觉评价度量值Qd,计算Sdis的图像质量评价分值,记为Q,Q=Qs×(Qd)λ,其中,λ为常数,λ表示乘性系数。
3.根据权利要求2所述的一种基于双目信息处理的立体图像质量评价方法,其特征在于所述的步骤⑤和所述的步骤中ωq,m的确定过程为:当q=1或q=2时, ω q , m = ∫ a m b m 2.6 × ( 0.0192 + 0.114 × f ) × e [ - ( 0.114 × f ) 1.1 ] b m - a m ; 当q=3时, ω q , m = ∫ a m b m 2.6 × ( 0.0192 + 0.114 × 2 1 2 × f ) × e [ - ( 0.114 × 2 1 2 × f ) 1.1 ] b m - a m , 其中,f表示复小波变换的频率,am为区间[0,0.5]分成M个子区间后的第m个子区间的下限, a m = 0 m = 1 0.5 2 × ( m - 1 ) m > 1 , bm为区间[0,0.5]分成M个子区间后的第m个子区间的上限, b m = 0.5 m = 1 0.5 2 × m m > 1 ;
所述的步骤⑤和所述的步骤
Figure FDA00004697860000001017
中ωDC的确定过程为:ωDC1,M3,M或ωDC2,M3,M,其中,ω1,M表示Sorg的第M级的第1个方向的复小波子带的双目融合图
Figure FDA0000469786000000111
和Sdis的第M级的第1个方向的复小波子带的双目融合图
Figure FDA0000469786000000112
的视觉敏感度权值,ω3,M表示Sorg的第M级的第3个方向的复小波子带的双目融合图和Sdis的第M级的第3个方向的复小波子带的双目融合图
Figure FDA0000469786000000114
的视觉敏感度权值,ω2,M表示Sorg的第M级的第2个方向的复小波子带的双目融合图
Figure FDA00004697860000001115
M和Sdis的第M级的第2个方向的复小波子带的双目融合图
Figure FDA00004697860000001116
的视觉敏感度权值。
4.根据权利要求2或3所述的一种基于双目信息处理的立体图像质量评价方法,其特征在于所述的步骤⑨的具体过程为:
⑨-1、计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的背景亮度的恰可觉察失真值,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA0000469786000000115
中坐标位置为(x,y)的图像块的背景亮度的恰可觉察失真值记为
Figure FDA0000469786000000116
Figure FDA0000469786000000117
其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,
Figure FDA0000469786000000118
B(h1,h2)为平均背景亮度算子B中下标为(h1,h2)处的值,1≤h1≤5,1≤h2≤5,
Figure FDA0000469786000000119
表示
Figure FDA00004697860000001110
中坐标位置为(x,y)的图像块中坐标位置为(h1,h2)的像素点的像素值;
计算Sorg的直流复小波子带的立体视觉图
Figure FDA00004697860000001111
中的每个图像块的背景亮度的恰可觉察失真值,将Sorg的直流复小波子带的立体视觉图
Figure FDA00004697860000001112
中坐标位置为(x,y)的图像块的背景亮度的恰可觉察失真值记为
Figure FDA00004697860000001114
其中,在此1≤x≤wDC-4,1≤y≤hDC-4, V org , ( x , y ) DC ‾ = Σ h 1 = 1 5 Σ h 2 = 1 5 V org , ( x , y ) DC ( h 1 , h 2 ) × B ( h 1 , h 2 ) Σ h 1 = 1 5 Σ h 2 = 1 5 B ( h 1 , h 2 ) ,
Figure FDA0000469786000000122
表示
Figure FDA0000469786000000123
中坐标位置为(x,y)的图像块中坐标位置为(h1,h2)的像素点的像素值;
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的背景亮度的恰可觉察失真值,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA0000469786000000124
中坐标位置为(x,y)的图像块的背景亮度的恰可觉察失真值记为
Figure FDA0000469786000000125
Figure FDA0000469786000000126
其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4, V dis , ( x , y ) q , m ‾ = Σ h 1 = 1 5 Σ h 2 = 1 5 V dis , ( x , y ) q , m ( h 1 , h 2 ) × B ( h 1 , h 2 ) Σ h 1 = 1 5 Σ h 2 = 1 5 B ( h 1 , h 2 ) ,
Figure FDA0000469786000000128
表示中坐标位置为(x,y)的图像块中坐标位置为(h1,h2)的像素点的像素值;
计算Sdis的直流复小波子带的立体视觉图中的每个图像块的背景亮度的恰可觉察失真值,将Sdis的直流复小波子带的立体视觉图
Figure FDA00004697860000001210
中坐标位置为(x,y)的图像块的背景亮度的恰可觉察失真值记为
Figure FDA00004697860000001211
Figure FDA00004697860000001212
其中,在此1≤x≤wDC-4,1≤y≤hDC-4, V dis , ( x , y ) DC ‾ = Σ h 1 = 1 5 Σ h 2 = 1 5 V dis , ( x , y ) DC ( h 1 , h 2 ) × B ( h 1 , h 2 ) Σ h 1 = 1 5 Σ h 2 = 1 5 B ( h 1 , h 2 ) , 表示
Figure FDA00004697860000001215
中坐标位置为(x,y)的图像块中坐标位置为(h1,h2)的像素点的像素值;
⑨-2、计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的纹理掩蔽的恰可觉察失真值,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA0000469786000000131
中坐标位置为(x,y)的图像块的纹理掩蔽的恰可觉察失真值记为 VT org , ( x , y ) q , m = max k = 1,2,3,4 , { | 1 16 Σ h 1 = 1 5 Σ h 2 = 1 5 V org , ( x , y ) q , m ( h 1 , h 2 ) × G k ( h 1 , h 2 ) | } × β ′ , 其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,max()为取最大值函数,在此“||”为取绝对值符号,Gk(h1,h2)表示第k个方向的高斯平均加权因子Gk中下标为(h1,h2)处的加权值,第1个方向的高斯平均加权因子G1为水平方向的高斯平均加权因子,第2个方向的高斯平均加权因子G2为垂直方向的高斯平均加权因子,第3个方向的高斯平均加权因子G3为45度角方向的高斯平均加权因子,第4个方向的高斯平均加权因子G4为135度角方向的高斯平均加权因子,β'为调节因子;
计算Sorg的直流复小波子带的立体视觉图
Figure FDA0000469786000000134
中的每个图像块的纹理掩蔽的恰可觉察失真值,将Sorg的直流复小波子带的立体视觉图
Figure FDA0000469786000000135
中坐标位置为(x,y)的图像块的纹理掩蔽的恰可觉察失真值记为
Figure FDA0000469786000000136
VT org , ( x , y ) DC = max k = 1,2,3,4 , { | 1 16 Σ h 1 = 1 5 Σ h 2 = 1 5 V org , ( x , y ) DC ( h 1 , h 2 ) × G k ( h 1 , h 2 ) | } × β ′ , 其中,在此1≤x≤wDC-4,1≤y≤hDC-4;
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的纹理掩蔽的恰可觉察失真值,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA0000469786000000138
中坐标位置为(x,y)的图像块的纹理掩蔽的恰可觉察失真值记为
Figure FDA0000469786000000139
VT dis , ( x , y ) q , m = max k = 1,2,3,4 , { | 1 16 Σ h 1 = 1 5 Σ h 2 = 1 5 V dis , ( x , y ) q , m ( h 1 , h 2 ) × G k ( h 1 , h 2 ) | } × β ′ , 其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4;
计算Sdis的直流复小波子带的立体视觉图中的每个图像块的纹理掩蔽的恰可觉察失真值,将Sdis的直流复小波子带的立体视觉图
Figure FDA00004697860000001311
中坐标位置为(x,y)的图像块的纹理掩蔽的恰可觉察失真值记为 VT dis , ( x , y ) DC = max k = 1,2,3,4 , { | 1 16 Σ h 1 = 1 5 Σ h 2 = 1 5 V dis , ( x , y ) DC ( h 1 , h 2 ) × G k ( h 1 , h 2 ) | } × β ′ , 其中,在此1≤x≤wDC-4,1≤y≤hDC-4;
⑨-3、计算Sorg的每级的每个方向的复小波子带的立体视觉图的空间对比灵敏度,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA0000469786000000141
的空间对比灵敏度记为
Figure FDA0000469786000000142
CSF org q , m = 2.6 × ( 0.0192 + 0.114 × f org q , m ) × e ( - ( 0.114 × f org q , m ) 1.1 ) ,
Figure FDA0000469786000000144
表示
Figure FDA0000469786000000145
的空间频率, f org q , m = ( f R , org q , m ) 2 + ( f C , org q , m ) 2 ,
Figure FDA0000469786000000147
表示
Figure FDA0000469786000000148
的行频率, f R , org q , m = 1 w q , m × h q , m Σ i = 1 w q , m Σ j = 2 h q , m [ V org q , m ( i , j ) - V org q , m ( i , j - 1 ) ] 2 ,
Figure FDA00004697860000001410
表示中坐标位置为(i,j)的像素点的像素值,
Figure FDA00004697860000001412
表示
Figure FDA00004697860000001413
中坐标位置为(i,j-1)的像素点的像素值,
Figure FDA00004697860000001414
表示的列频率, f C , org q , m = 1 w q , m × h q , m Σ i = 2 w q , m Σ j = 1 h q , m [ V org q , m ( i , j ) - V org q , m ( i - j , 1 ) ] 2 ,
Figure FDA00004697860000001417
表示
Figure FDA00004697860000001418
中坐标位置为(i-1,j)的像素点的像素值;
计算Sorg的直流复小波子带的立体视觉图的空间对比灵敏度,记为
Figure FDA00004697860000001420
CSF org DC = 2.6 × ( 0.0192 + 0.114 × f org DC ) × e ( - ( 0.114 × f org DC ) 1.1 ) ,
Figure FDA00004697860000001422
表示
Figure FDA00004697860000001423
的空间频率, f org DC = ( f R , org DC ) 2 + ( f C , org DC ) 2 , 表示
Figure FDA00004697860000001441
的行频率, f R , org DC = 1 w DC × h DC Σ i = 1 w DC Σ j = 2 h DC [ V org DC ( i , j ) - V org DC ( i , j - 1 ) ] 2 ,
Figure FDA00004697860000001427
表示
Figure FDA00004697860000001428
中坐标位置为(i,j)的像素点的像素值,表示
Figure FDA00004697860000001430
中坐标位置为(i,j-1)的像素点的像素值,表示
Figure FDA00004697860000001432
的列频率, f C , org DC = 1 w DC × h DC Σ i = 2 w DC Σ j = 1 h DC [ V org DC ( i , j ) - V org DC ( i - 1 , j ) ] 2 ,
Figure FDA00004697860000001434
表示
Figure FDA00004697860000001435
中坐标位置为(i-1,j)的像素点的像素值;
计算Sdis的每级的每个方向的复小波子带的立体视觉图的空间对比灵敏度,将Sdis的第m级的第q个方向的复小波子带的立体视觉图的空间对比灵敏度记为
Figure FDA00004697860000001437
CSF dis q , m = 2.6 × ( 0.0192 + 0.114 × f dis q , m ) × e ( - ( 0.114 × f dis q , m ) 1.1 ) ,
Figure FDA00004697860000001439
表示
Figure FDA00004697860000001440
的空间频率, f dis q , m = ( f R , dis q . m ) 2 + ( f C , dis q , m ) 2 ,
Figure FDA0000469786000000152
表示的行频率, f R , dis q , m = 1 w q , m × h q , m Σ i = 2 w q , m Σ j = 1 h q , m [ V dis q , m ( i , j ) - V dis q , m ( i , j - 1 ) ] 2 ,
Figure FDA0000469786000000155
表示
Figure FDA0000469786000000156
中坐标位置为(i,j)的像素点的像素值,
Figure FDA0000469786000000157
表示
Figure FDA0000469786000000158
中坐标位置为(i,j-1)的像素点的像素值,
Figure FDA0000469786000000159
表示的列频率, f C , dis q , m = 1 w q , m × h q , m Σ i = 2 w q , m Σ j = 1 h q , m [ V dis q , m ( i , j ) - V dis q , m ( i - 1 , j ) ] 2 ,
Figure FDA00004697860000001512
表示中坐标位置为(i-1,j)的像素点的像素值;
计算Sdis的直流复小波子带的立体视觉图
Figure FDA00004697860000001514
的空间对比灵敏度,记为 CSF dis DC = 2.6 × ( 0.0192 + 0.114 × f dis DC ) × e ( - ( 0.114 × f dis DC ) 1.1 ) , 表示
Figure FDA00004697860000001518
的空间频率, f dis DC = ( f R , dis DC ) 2 + ( f C , dis DC ) 2 ,
Figure FDA00004697860000001520
表示
Figure FDA00004697860000001521
的行频率, f R , dis DC = 1 w DC × h DC Σ i = 1 w DC Σ j = 2 h DC [ V dis DC ( i , j ) - V dis DC ( i , j - 1 ) ] 2 ,
Figure FDA00004697860000001523
表示
Figure FDA00004697860000001524
中坐标位置为(i,j)的像素点的像素值,
Figure FDA00004697860000001525
表示
Figure FDA00004697860000001526
中坐标位置为(i,j-1)的像素点的像素值,
Figure FDA00004697860000001527
表示
Figure FDA00004697860000001528
的列频率, f C , dis DC = 1 w DC × h DC Σ i = 2 w DC Σ j = 1 h DC [ V dis DC ( i , j ) - V dis DC ( i - 1 , j ) ] 2 ,
Figure FDA00004697860000001530
表示
Figure FDA00004697860000001531
中坐标位置为(i-1,j)的像素点的像素值;
⑨-4、计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的中心凹位置权重,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA00004697860000001532
中坐标位置为(x,y)的图像块的中心凹位置权重记为
Figure FDA00004697860000001533
其中,在此1≤x≤wq,m-4,1≤y≤hq,m-4,在此ic和jc分别表示中的中心像素点的横坐标和纵坐标, i c = w q , m 2 , j c = h q , m 2 , σ表示高斯函数的尺度参数, σ = i c 2 + j c 2 ;
计算Sorg的直流复小波子带的立体视觉图
Figure FDA00004697860000001539
中的每个图像块的中心凹位置权重,将Sorg的直流复小波子带的立体视觉图中坐标位置为(x,y)的图像块的中心凹位置权重记为
Figure FDA00004697860000001541
Figure FDA00004697860000001542
其中,在此1≤x≤wDC-4,1≤y≤hDC-4,在此ic和jc分别表示
Figure FDA0000469786000000161
中的中心像素点的横坐标和纵坐标,
Figure FDA00004697860000001625
σ表示高斯函数的尺度参数, σ = i c 2 + j c 2 ;
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的中心凹位置权重,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA0000469786000000165
中坐标位置为(x,y)的图像块的中心凹位置权重记为
Figure FDA0000469786000000166
其中,在此1≤i≤wq,m-4,1≤j≤hq,m-4,在此ic和jc分别表示
Figure FDA0000469786000000168
中的中心像素点的横坐标和纵坐标, i c = w q , m 2 , j c = h q , m 2 , σ表示高斯函数的尺度参数, σ = i c 2 + j c 2 ;
计算Sdis的直流复小波子带的立体视觉图
Figure FDA00004697860000001612
中的每个图像块的中心凹位置权重,将Sdis的直流复小波子带的立体视觉图
Figure FDA00004697860000001613
中坐标位置为(x,y)的图像块的中心凹位置权重记为
Figure FDA00004697860000001614
Figure FDA00004697860000001615
其中,在此1≤x≤wDC-4,1≤y≤hDC-4,在此ic和jc分别表示
Figure FDA00004697860000001616
中的中心像素点的横坐标和纵坐标,σ表示高斯函数的尺度参数, σ = i c 2 + j c 2 ;
⑨-5、依据Canny边缘算子分别将Sorg的每级的每个方向的复小波子带的立体视觉图、Sorg的直流复小波子带的立体视觉图
Figure FDA00004697860000001620
Sdis的每级的每个方向的复小波子带的立体视觉图和Sdis的直流复小波子带的立体视觉图
Figure FDA00004697860000001621
中的图像块划分到边缘区域或非边缘区域;
计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA00004697860000001622
中坐标位置为(x,y)的图像块的双目恰可觉察失真值,记为
Figure FDA00004697860000001623
其中,max()为取最大值函数,min()为取最小值函数;
计算Sorg的直流复小波子带的立体视觉图
Figure FDA0000469786000000171
中的每个图像块的双目恰可觉察失真值,将Sorg的直流复小波子带的立体视觉图
Figure FDA0000469786000000172
中坐标位置为(x,y)的图像块的双目恰可觉察失真值,记为
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA0000469786000000175
中坐标位置为(x,y)的图像块的双目恰可觉察失真值,记为
Figure FDA0000469786000000176
Figure FDA0000469786000000177
计算Sdis的直流复小波子带的立体视觉图
Figure FDA0000469786000000178
中的每个图像块的双目恰可觉察失真值,将Sdis的直流复小波子带的立体视觉图
Figure FDA0000469786000000179
中坐标位置为(x,y)的图像块的双目恰可觉察失真值,记为
Figure FDA00004697860000001710
Figure FDA00004697860000001711
⑨-6、计算Sorg的每级的每个方向的复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值的失真权重,将Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA00004697860000001712
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重,记为
Figure FDA00004697860000001713
W BJND , org , ( x , y ) q , m = BJND org , ( x , y ) q , m - BJND max , org q , m BJND max , org q , m - BJND min , org q , m , 其中,
Figure FDA00004697860000001715
表示Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA00004697860000001716
中的所有图像块的双目恰可觉察失真值中的最大值,
Figure FDA00004697860000001717
表示Sorg的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA00004697860000001718
中的所有图像块的双目恰可觉察失真值中的最小值;
计算Sorg的直流复小波子带的立体视觉图
Figure FDA00004697860000001719
中的每个图像块的双目恰可觉察失真值的失真权重,将Sorg的直流复小波子带的立体视觉图
Figure FDA0000469786000000181
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重,记为
Figure FDA0000469786000000182
W BJND , org , ( x , y ) DC = BJND org , ( x , y ) DC - BJND max , org DC BJND max , org DC - BJND min , org DC , 其中,
Figure FDA0000469786000000184
表示Sorg的直流复小波子带的立体视觉图
Figure FDA0000469786000000185
中的所有图像块的双目恰可觉察失真值中的最大值,
Figure FDA0000469786000000186
表示Sorg的直流复小波子带的立体视觉图
Figure FDA0000469786000000187
中的所有图像块的双目恰可觉察失真值中的最小值;
计算Sdis的每级的每个方向的复小波子带的立体视觉图中的每个图像块的双目恰可觉察失真值的失真权重,将Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA0000469786000000188
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重,记为
Figure FDA0000469786000000189
W BJND , dis , ( x , y ) q , m = BJND dis , ( x , y ) q , m - BJND max , dis q , m BJND max , dis q , m - BJND min , dis q , m , 其中,
Figure FDA00004697860000001811
表示Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA00004697860000001812
中的所有图像块的双目恰可觉察失真值中的最大值,表示Sdis的第m级的第q个方向的复小波子带的立体视觉图
Figure FDA00004697860000001814
中的所有图像块的双目恰可觉察失真值中的最小值;
计算Sdis的直流复小波子带的立体视觉图
Figure FDA00004697860000001815
中的每个图像块的双目恰可觉察失真值的失真权重,将Sdis的直流复小波子带的立体视觉图
Figure FDA00004697860000001816
中坐标位置为(x,y)的图像块的双目恰可觉察失真值的失真权重,记为
Figure FDA00004697860000001817
W BJND , dis , ( x , y ) DC = BJND dis , ( x , y ) DC - BJND max , dis DC BJND max , dis DC - BJND min , dis DC , 其中,
Figure FDA00004697860000001819
表示Sdis的直流复小波子带的立体视觉图
Figure FDA00004697860000001820
中的所有图像块的双目恰可觉察失真值中的最大值,表示Sdis的直流复小波子带的立体视觉图
Figure FDA00004697860000001822
中的所有图像块的双目恰可觉察失真值中的最小值。
5.根据权利要求4所述的一种基于双目信息处理的立体图像质量评价方法,其特征在于所述的步骤⑨-1中平均背景亮度算子 B = 1 1 1 1 1 1 2 2 2 1 1 2 0 2 1 1 2 2 2 1 1 1 1 1 1 ; 所述的步骤⑨-2中 G 1 = 0 0 0 0 0 1 3 8 3 1 0 0 0 0 0 - 1 - 3 - 8 - 3 - 1 0 0 0 0 0 , G 2 = 0 0 1 0 0 0 8 3 0 0 1 3 0 - 3 - 1 0 0 - 3 - 8 0 0 0 - 1 0 0 , G 3 = 0 0 1 0 0 0 0 3 8 0 - 1 - 3 0 3 1 0 - 8 - 3 0 0 0 0 - 1 0 0 , G 4 = 0 1 0 - 1 0 0 3 0 - 3 0 0 8 0 - 8 0 0 3 0 - 3 0 0 1 0 - 1 0 ; 所述的步骤⑨-2中β'=2/17。
6.根据权利要求5所述的一种基于双目信息处理的立体图像质量评价方法,其特征在于所述的步骤
Figure FDA0000469786000000195
中λ的获取过程为:
Figure FDA00004697860000001911
、采用n幅无失真的立体图像建立其在不同失真类型不同失真程度下的失真立体图像集,该失真立体图像集包括多幅失真的立体图像,其中,n≥1;
Figure FDA00004697860000001912
、采用主观质量评价方法获取该失真立体图像集中的每幅失真的立体图像的平均主观评分差值,记为DMOS,DMOS=100-MOS,其中,MOS表示主观评分均值,DMOS∈[0,100];
Figure FDA00004697860000001913
、根据步骤①至步骤
Figure FDA00004697860000001910
的操作过程,计算该失真立体图像集中的每幅失真的立体图像相对于对应的无失真的立体图像的双目融合质量评价指标值Qs和立体视觉评价度量值Qd
Figure FDA00004697860000001914
、采用乘性加权的数学拟合方法Q=Qs×(Qd)λ拟合该失真立体图像集中的每幅失真的立体图像的平均主观评分差值DMOS及每幅失真的立体图像相对于对应的无失真的立体图像的双目融合质量评价指标值和立体视觉评价度量值,得到λ值。
CN201410083852.1A 2014-02-26 2014-02-26 一种基于双目信息处理的立体图像质量评价方法 Active CN103841411B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410083852.1A CN103841411B (zh) 2014-02-26 2014-02-26 一种基于双目信息处理的立体图像质量评价方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410083852.1A CN103841411B (zh) 2014-02-26 2014-02-26 一种基于双目信息处理的立体图像质量评价方法

Publications (2)

Publication Number Publication Date
CN103841411A true CN103841411A (zh) 2014-06-04
CN103841411B CN103841411B (zh) 2015-10-28

Family

ID=50804493

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410083852.1A Active CN103841411B (zh) 2014-02-26 2014-02-26 一种基于双目信息处理的立体图像质量评价方法

Country Status (1)

Country Link
CN (1) CN103841411B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104853175A (zh) * 2015-04-24 2015-08-19 张艳 一种新的合成虚拟视点客观质量评价方法
CN105069794A (zh) * 2015-08-12 2015-11-18 浙江科技学院 一种基于双目竞争的全盲立体图像质量评价方法
US9460501B1 (en) * 2015-04-08 2016-10-04 Ningbo University Objective assessment method for stereoscopic video quality based on wavelet transform
CN109191427A (zh) * 2018-07-24 2019-01-11 中国传媒大学 基于双目抑制的dwt域亮度掩蔽模型构建方法及装置
CN112236827A (zh) * 2018-05-30 2021-01-15 皇家飞利浦有限公司 用于数字病理学的灵敏度分析

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002016946A (ja) * 2000-06-28 2002-01-18 Kddi Corp 画像処理装置および画質評価装置
WO2006129955A2 (en) * 2005-05-30 2006-12-07 Sk Telecom Co., Ltd. Systems and methods for video quality measurement using auxiliary information of codec
US20070269126A1 (en) * 2006-05-22 2007-11-22 Samsung Electronics Co., Ltd. Apparatus, method, and medium for adjusting image quality of display device
KR20080029371A (ko) * 2006-09-29 2008-04-03 광운대학교 산학협력단 영상 화질 평가 시스템 및 방법
WO2008047865A1 (fr) * 2006-10-19 2008-04-24 Nec Corporation Procédé, système et programme d'évaluation de qualité d'image
CN101370154A (zh) * 2008-10-15 2009-02-18 北京中星微电子有限公司 一种图像质量的评测方法及装置
CN101389045A (zh) * 2008-10-23 2009-03-18 北京中星微电子有限公司 一种图像质量的评测方法及装置
CN101562758A (zh) * 2009-04-16 2009-10-21 浙江大学 基于区域权重和人眼视觉特性的图像质量客观评价方法
KR20110073198A (ko) * 2009-12-21 2011-06-29 한국전자통신연구원 스테레오 매칭 결과를 개선하는 장치, 상기 장치를 이용한 스테레오 매칭 결과를 개선 방법 및 스테레오 매칭 결과를 수신하는 시스템
CN102333233A (zh) * 2011-09-23 2012-01-25 宁波大学 一种基于视觉感知的立体图像质量客观评价方法
US20120163701A1 (en) * 2010-12-27 2012-06-28 Sony Corporation Image processing device, image processing method, and program

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002016946A (ja) * 2000-06-28 2002-01-18 Kddi Corp 画像処理装置および画質評価装置
WO2006129955A2 (en) * 2005-05-30 2006-12-07 Sk Telecom Co., Ltd. Systems and methods for video quality measurement using auxiliary information of codec
US20070269126A1 (en) * 2006-05-22 2007-11-22 Samsung Electronics Co., Ltd. Apparatus, method, and medium for adjusting image quality of display device
KR20080029371A (ko) * 2006-09-29 2008-04-03 광운대학교 산학협력단 영상 화질 평가 시스템 및 방법
WO2008047865A1 (fr) * 2006-10-19 2008-04-24 Nec Corporation Procédé, système et programme d'évaluation de qualité d'image
CN101370154A (zh) * 2008-10-15 2009-02-18 北京中星微电子有限公司 一种图像质量的评测方法及装置
CN101389045A (zh) * 2008-10-23 2009-03-18 北京中星微电子有限公司 一种图像质量的评测方法及装置
CN101562758A (zh) * 2009-04-16 2009-10-21 浙江大学 基于区域权重和人眼视觉特性的图像质量客观评价方法
KR20110073198A (ko) * 2009-12-21 2011-06-29 한국전자통신연구원 스테레오 매칭 결과를 개선하는 장치, 상기 장치를 이용한 스테레오 매칭 결과를 개선 방법 및 스테레오 매칭 결과를 수신하는 시스템
US20120163701A1 (en) * 2010-12-27 2012-06-28 Sony Corporation Image processing device, image processing method, and program
CN102333233A (zh) * 2011-09-23 2012-01-25 宁波大学 一种基于视觉感知的立体图像质量客观评价方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
WALID HACHICHA,ET AL: "STEREO IMAGE QUALITY ASSESSMENT USING A BINOCULAR JUST NOTICEABLE DIFFERENCE MODEL", 《2013 20TH IEEE INTERNATIONAL CONFERENCE ON IMAGE PROCESSING》, 18 September 2013 (2013-09-18) *
周武杰,等: "基于小波图像融合的非对称失真立体图像质量评价方法", 《光电工程》, vol. 38, no. 11, 30 November 2011 (2011-11-30) *
王阿红: "一种基于人眼视觉特性的立体图像质量客观评价方法", 《光电工程》, vol. 38, no. 01, 31 January 2011 (2011-01-31) *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9460501B1 (en) * 2015-04-08 2016-10-04 Ningbo University Objective assessment method for stereoscopic video quality based on wavelet transform
CN104853175A (zh) * 2015-04-24 2015-08-19 张艳 一种新的合成虚拟视点客观质量评价方法
CN105069794A (zh) * 2015-08-12 2015-11-18 浙江科技学院 一种基于双目竞争的全盲立体图像质量评价方法
CN105069794B (zh) * 2015-08-12 2017-09-19 浙江科技学院 一种基于双目竞争的全盲立体图像质量评价方法
CN112236827A (zh) * 2018-05-30 2021-01-15 皇家飞利浦有限公司 用于数字病理学的灵敏度分析
CN109191427A (zh) * 2018-07-24 2019-01-11 中国传媒大学 基于双目抑制的dwt域亮度掩蔽模型构建方法及装置
CN109191427B (zh) * 2018-07-24 2020-09-22 中国传媒大学 基于双目抑制的dwt域亮度掩蔽模型构建方法及装置

Also Published As

Publication number Publication date
CN103841411B (zh) 2015-10-28

Similar Documents

Publication Publication Date Title
CN101872479B (zh) 一种立体图像客观质量评价方法
CN102547368B (zh) 一种立体图像质量客观评价方法
CN103517065B (zh) 一种质降参考立体图像质量客观评价方法
CN102663747B (zh) 一种基于视觉感知的立体图像客观质量评价方法
CN104394403B (zh) 一种面向压缩失真的立体视频质量客观评价方法
CN104811691B (zh) 一种基于小波变换的立体视频质量客观评价方法
CN103841411B (zh) 一种基于双目信息处理的立体图像质量评价方法
CN102708567B (zh) 一种基于视觉感知的立体图像质量客观评价方法
CN109345502B (zh) 一种基于视差图立体结构信息提取的立体图像质量评价方法
CN104202594B (zh) 一种基于三维小波变换的视频质量评价方法
CN110246111B (zh) 基于融合图像和强化图像的无参考立体图像质量评价方法
CN103413298B (zh) 一种基于视觉特性的立体图像质量客观评价方法
CN105407349A (zh) 基于双目视觉感知的无参考立体图像质量客观评价方法
Ma et al. Reduced-reference stereoscopic image quality assessment using natural scene statistics and structural degradation
CN102843572B (zh) 一种基于相位的立体图像质量客观评价方法
Geng et al. A stereoscopic image quality assessment model based on independent component analysis and binocular fusion property
CN104036502A (zh) 一种无参考模糊失真立体图像质量评价方法
CN104240248A (zh) 一种无参考立体图像质量客观评价方法
CN105574901A (zh) 一种基于局部对比度模式的通用无参考图像质量评价方法
CN102903107B (zh) 一种基于特征融合的立体图像质量客观评价方法
CN103780895A (zh) 一种立体视频质量评价方法
CN103136748A (zh) 一种基于特征图的立体图像质量客观评价方法
CN104361583A (zh) 一种非对称失真立体图像客观质量评价方法
CN106412571A (zh) 一种基于梯度相似性标准差的视频质量评价方法
CN103108209B (zh) 基于视觉阈值与通道融合的立体图像客观质量评价方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20190809

Address after: Room 1,020, Nanxun Science and Technology Pioneering Park, No. 666 Chaoyang Road, Nanxun District, Huzhou City, Zhejiang Province, 313000

Patentee after: Huzhou You Yan Intellectual Property Service Co., Ltd.

Address before: 315211 Zhejiang Province, Ningbo Jiangbei District Fenghua Road No. 818

Patentee before: Ningbo University

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20191010

Address after: No. 117, floor 1, building 2, No. 29, Xinliu Avenue, Yufeng District, Liuzhou City, Guangxi Zhuang Autonomous Region

Patentee after: Guangxi Qianbaidu Technology Co., Ltd.

Address before: Room 1,020, Nanxun Science and Technology Pioneering Park, No. 666 Chaoyang Road, Nanxun District, Huzhou City, Zhejiang Province, 313000

Patentee before: Huzhou You Yan Intellectual Property Service Co., Ltd.

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20191016

Address after: 545026 no.d2-09, 2f, building D, information industry park, No.15, Gaoxin 1st Road, Liuzhou City, Guangxi Zhuang Autonomous Region

Patentee after: Guangxi zuixiang Information Technology Co., Ltd.

Address before: No. 117, floor 1, building 2, No. 29, Xinliu Avenue, Yufeng District, Liuzhou City, Guangxi Zhuang Autonomous Region

Patentee before: Guangxi Qianbaidu Technology Co., Ltd.

TR01 Transfer of patent right