CN102790881A - 基于帧级编码端速率控制的变换域分布式视频编解码器 - Google Patents

基于帧级编码端速率控制的变换域分布式视频编解码器 Download PDF

Info

Publication number
CN102790881A
CN102790881A CN2012102492143A CN201210249214A CN102790881A CN 102790881 A CN102790881 A CN 102790881A CN 2012102492143 A CN2012102492143 A CN 2012102492143A CN 201210249214 A CN201210249214 A CN 201210249214A CN 102790881 A CN102790881 A CN 102790881A
Authority
CN
China
Prior art keywords
module
frame
motion vector
sent
coefficient
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2012102492143A
Other languages
English (en)
Other versions
CN102790881B (zh
Inventor
陈健
邸高松
刘儒
阔永红
杨龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Xidian University
Original Assignee
Xidian University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Xidian University filed Critical Xidian University
Priority to CN201210249214.3A priority Critical patent/CN102790881B/zh
Publication of CN102790881A publication Critical patent/CN102790881A/zh
Application granted granted Critical
Publication of CN102790881B publication Critical patent/CN102790881B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

本发明公开了一种基于帧级编码端速率控制的变换域分布式视频编解码器,主要解决变换域分布式视频编解码器在缺乏反馈信道时无法应用问题。该系统包括编码器和解码器两部分,编码器包括H.264帧内编码器和WZ帧编码器,其中WZ帧编码器首先估计出该WZ帧成功解码的码率,然后根据估计出码率对该WZ帧进行独立编码;解码器包括H.264帧内解码器和WZ帧解码器,其中WZ帧解码器对接收到的码流联合边信息进行联合解码。本发明通过循环移位算法使错误比特基本均匀的分布于整帧图像,进而把比特平面级的速率估计提高到帧级,降低了解码端对速率估计的精度要求,提高了解码图像质量。

Description

基于帧级编码端速率控制的变换域分布式视频编解码器
技术领域
本发明属于视频编解码技术领域,涉及分布式视频编解码系统,特别涉及基于帧级编码端速率控制的变换域分布式视频编码器,可用于无线多媒体传感器网络中视频图像的实时传输。
背景技术
随着便携式多媒体设备、无线传感器网络等多媒体应用的不断发展,对编解码算法提出了新的要求,如低的编码算法复杂度,算法复杂度可以在编解码器之间动态调节等。传统的编码系统由于编码端需要采用运动搜索算法导致其编码算法是解码算法复杂度的5到10倍,不能很好的满足其要求。在此背景下,分布式视频编解码DVC以其低复杂度的编码算法和高效的压缩效率引起人们的关注。
分布式视频编解码作为一种全新的非对称的视频压缩框架,其理论基础是20世纪70年代Slepian和Wolf提出的分布式无损编码理论,以及Wyner和Ziv提出的基于边信息的有损编码理论。具有编码端算法复杂度低,算法复杂度可以在编解码器之间动态调节等特点。传统的分布式视频编解码器主要是通过反馈信道进行解码端速率控制,这就要求应用的环境中提供反馈信道,不适用于没有反馈信道的环境,且解码复杂,会引入很大的延时。现有的技术是通过在编码端进行速率控制来去掉分布式视频编解码对反馈信道依赖,但现有的方法都是进行比特平面的速率估计,导致解码端对速率估计的精度要求高,解码出的图象质量不高。
发明内容
本发明针现有技术的不足,提供了一种基于帧级编码端速率估计的变换域分布式视频编解码系统,降低了解码端对速率估计的精度要求,提高解码图像质量。
为实现上述目的,本发明提供的基于帧级编码端速率控制的变换域分布式视频编码器包括:
H.264/AVC帧内编码器(101),用于根据WZ帧的质量选择相应的量化因子对关键帧进行编码,使关键帧的质量与WZ帧基本相同,并将得到的压缩码流发送至解码端;
第一DCT模块(102),用于对WZ帧进行n×n块大小的离散余弦变换DCT,并将变换后的系数子带发送至第一量化模块(103),其中n代表像素;
第一量化模块(103),用于对第一DCT模块传送的变换系数子带进行量化得到量化系数,并将量化后的系数子代发送到第一循环移位模块(104);
第一循环移位模块(104),把输入的量化后的系数子带按Z字形顺序扫描,把每块内所有的系数子带首尾相连形成一个新的系数子带,并将该新的系数子带的第1块向左循环移1位,第2块向左循环移2位,第N块向左循环移NmodR位,其中N表示块数,R表示形成的新系数子带的总比特数,mod表示取模运算,将循环移位后的系数子带发送至第一抽取比特平面模块(105);
第一抽取比特平面模块(105),将循环移位后的系数子代抽取比特平面,并将比特平面传送给LDPC编码模块(108);
快速边信息估计模块(106),基于相邻关键帧,进行基本帧估计和原始帧估计,并通过内插算法快速估计出边信息,并将估计出的边信息发送到帧级速率控制模块(107);
帧级速率控制模块(107),根据速率估计公式Y=K(X-(aX2+bX+c))+B,估计出编码速率,其中X表示估计出边信息的PSNR,Y表示编码速率,K,a,b,c和B是根据最小二乘拟合方法得到的系数,并把估计出的编码速率发送到LDPC编码模块(108);
LDPC编码模块(108),根据估计出的WZ帧解码速率对WZ帧进行独立的LDPC编码,并将校验比特发送到解码端等待解码。
所述的快速边信息估计模块(106),包括基本帧估计子模块(3)和原始帧估计子模块(4)两部分,该基本帧估计子模块(3),提取基本帧,并估计基本帧的运动矢量,把估计出的运动矢量发送至原始帧估计子模块;该原始帧估计子模块(4),根据基本帧估计出的运动矢量,估计原始帧的运动矢量,并通过内插算法得到边信息。
所述的基本帧估计子模块(3)包括:
基本帧提取模块(301),用于提取图像X所有偶数行偶数列的像素点构成基本帧
Figure BDA00001904153800021
并将基本帧
Figure BDA00001904153800022
发送至运动矢量估计模块(302);
运动矢量估计模块(302),用于把基本帧
Figure BDA00001904153800023
第K块相邻的上面和左面两块已得到的运动矢量的均值的作为该块初始运动矢量
Figure BDA00001904153800031
其中块的大小为8×8,并将矢量估计值
Figure BDA00001904153800032
发送至运动矢量修正模块(303);
运动矢量修正模块(303),以
Figure BDA00001904153800033
原点,对(0,0),(±1,0)和(0,±1)这5个点进行以绝对值误差总和SAD为代价函数的搜索匹配,即取SAD最小的运动矢量为
Figure BDA00001904153800034
如果
Figure BDA00001904153800035
在(0,0)处,将的值赋给矢量
Figure BDA00001904153800037
并将矢量
Figure BDA00001904153800038
发送至运动矢量合成模块(304),如果不在(0,0)处,则对其周围4个点(0,±2)和(±2,0)进行搜索匹配,取SAD最小的运动矢量为
Figure BDA000019041538000310
并将矢量
Figure BDA000019041538000311
和初始矢量
Figure BDA000019041538000312
发送至运动矢量合成模块(304);
运动矢量合成模块(304),用于把矢量
Figure BDA000019041538000313
和初始矢量
Figure BDA000019041538000314
相加,得到最终运动矢量
Figure BDA000019041538000315
Figure BDA000019041538000316
并将最终运动矢量
Figure BDA000019041538000317
和对应SAD的值
Figure BDA000019041538000318
发送至原始帧估计子模块(4)。
所述的原始帧估计子模块(4)包括:
运动矢量初值提取模块(401),用于把基本帧
Figure BDA000019041538000319
估计出的每块的运动矢量赋给原始帧X对应块的初始运动矢量Vm0和绝对值误差总和SADm0,其中块的大小为8×8,X帧的每块的Vm0和SADm0发送至原始帧运动矢量修正模块(402);
原始帧运动矢量修正模块(402),用于计算原始帧运动矢量Vm0对应的SAD值,如果SAD值小于Δ×SADm0,该矢量为该块的最终运动矢量Vm,并将最终运动矢量Vm发送至内插模块(403),如果SAD值大于Δ×SADm0,对围绕Vm0的(±1,0)和(0,±1)这4个点进行搜索匹配,得到的SAD最小值的运动矢量为该块的最终矢量Vm,并将最终矢量Vm发送至内插模块(403);
内插模块(403),用于根据每块的运动矢量Vm通过内插方法得到最终估计的边信息SI。
为实现上述目的,本发明提供的基于帧级编码端速率控制的变换域分布式视频解码器包括:
H.264/AVC帧内解码器(201),用于对接收到的关键帧压缩码流进行帧内解码,并将解码得到的数据发送至边信息生成模块(202);
边信息生成模块(202),用于对已解码的相邻关键帧采用基于帧内插的方式产生边信息,并将其发送至第二DCT模块(203);
第二DCT模块(203),用于对边信息进行n×n块大小的离散余弦变换DCT,并将变换域的系数子带发送至第二量化模块(204),其中n代表像素;
第二量化模块(204),用于对变换域的系数子带进行量化得到量化系数,并将量化后的系数子代发送到第二循环移位模块(205);
第二循环移位模块(205),把输入的量化后的系数子代按Z字形顺序扫描,把每块内所有的系数子代首尾相连形成一个新的系数子代,并将该新的系数子带的第1块向左循环移1位,第2块向左循环移2位,第N块向左循环移NmodR位,其中N表示块数,R表示形成的新系数子代的总比特数,mod表示取模运算,将循环移位后的系数子代发送至第二抽取比特平面模块(206);
第二抽取比特平面模块(206),将循环移位后的系数子代抽取比特平面,并将比特平面传送给LDPC解码模块(207);
LDPC解码模块(207),用于在边信息的辅助下,利用接收到的校验比特根据相关噪声模型提供的参数进行解码,解码后的参数发送到反循环移位模块(208);
反循环移位模块(208),用于将解码后的数据恢复成系数子带形式,并按与编码端循环移位模块相反的方向进行反循环移位恢复数据的原始性,并将其发送至重建模块(209);
重建模块(209),用于将输入数据恢复其在帧内的位置,并进行反量化,将该帧数据发送至IDCT模块(210);
IDCT模块(210),用于对输入的数据按块进行反离余弦选变换IDCT,得到解码图像。
本发明与现有技术相比具有以下优点:
1)本发明提供了循环移位模块,对边信息进行比特级交织,使得错误比特近似均匀的分布于整帧图像,从而把比特平面级的速率估计提高到帧级,降低了解码端对编码端速率估计的精度要求,提高了解码图像质量;
2)本发明提供了分层快速边信息估计模块和简单的帧级速率估计模块,在没有提高算法复杂度的前提下,提高了编码端边信息估计的精度,进而提高了编码端速率估计的精度。
附图说明
图1本发明的帧级编码端速率控制变换域分布式视频编解码器框图;
图2本发明的基本帧的提取示意图;
图3本发明的基本帧搜索图;
图4本发明的循环移位示意图;
图5本发明的编码端快速编信息估计模块框图;
图6本发明的分层低复杂度边信息估计模块的仿真结果;
图7本发明的循环移位模块的仿真结果;
图8本发明的率失真性能对比图。
具体实施方式
参照图1,本发明的帧级编码端速率控制变换域分布式视频编解码器,由编码器和解码器两部分组成,其中:
编码器:用于将输入视频帧分为关键帧和Wyner-Ziv帧,并分别对关键帧和Wyner-Ziv帧进行H.264/AVC帧内编码和Wyner-Ziv编码。它主要由H.264/AVC帧内编码器101、第一DCT模块102、第一量化模块103、第一循环移位模块104、抽取比特平面模块105、低复杂度信息估计模块106、帧级别速率估计模块107及LDPC编码模块108组成。其中H.264/AVC帧内编码器101,根据WZ帧的质量选择相应的量化因子对关键帧进行编码,使关键帧的质量与WZ帧基本相同,并将得到的压缩码流发送至解码端;第一DCT模块102,对WZ帧进行基于4×4块大小的离散余弦变换DCT,并将DCT后的系数子带发送至第一量化模块,其中4代表像素;第一量化模块103,对第一DCT模块传送的系数子带进行量化得到量化系数,并将量化后的系数子代发送到第一循环移位模块;第一循环移位模块104,如图4所示,把输入的量化后的系数子带按Z字形顺序扫描,把每块内所有的系数子带首尾相连形成一个新的系数子带,对于该系数子带的第1块,向左循环移1位,第2块循环移2位,第N块循环移NmodR位,其中N表示块数,R表示形成的新系数子带的总比特数,mod表示取模运算,将循环移位后的系数子带发送至第一抽取比特平面模块;第一抽取比特平面模块105,将循环移位后的系数子代抽取比特平面,并将比特平面传送给LDPC编码模块;快速边信息估计模块106,基于相邻关键帧,进行基本帧估计和原始帧估计,并通过内插算法快速估计出边信息,并将估计出的边信息发送到帧级别速率控制模块;帧级别速率控制模块107,通过估计出的边信息和原始WZ帧计算边信息的峰值信噪比PSNR,根据速率估计公式Y=K(X-(aX2+bX+c))+B,估计出编码速率,其中X表示边信息的PSNR,Y表示估计出的编码速率,K,a,b,c和B是根据最小二乘拟合方法得到的系数,并把该速率发送到LDPC编码模块;LDPC编码模块108,根据估计出的WZ帧解码速率对接收到的比特平面进行独立的LDPC编码,并将校验比特发送到解码端等待解码。
本发明的低复杂度边信息估计模块(106)包括基本帧估计子模块和原始帧估计子模块两部分(如图5所示),该基本帧估计子模块,提取基本帧,并估计基本帧的运动矢量,把估计出的运动矢量发送至原始帧估计子模块;该原始帧估计子模块,根据基本帧估计出的运动矢量,估计原始帧的运动矢量,并通过内插算法得到边信息。
其中基本帧估计模块包括:
基本帧提取模块301,如图2所示,提取图像X所有偶数行偶数列的像素点构成基本帧
Figure BDA00001904153800061
并将基本帧
Figure BDA00001904153800062
发送至运动矢量估计模块(302);
运动矢量估计模块302:把基本帧
Figure BDA00001904153800063
第K块相邻的上面和左面两块已得到的运动矢量的均值的作为该块初始运动矢量
Figure BDA00001904153800064
其中块的大小为8×8,并将矢量估计值发送至运动矢量修正模块(303);
运动矢量修正模块303,如图3中
Figure BDA00001904153800066
所示,对(0,0),(±1,0)和(0,±1)这5个点进行以绝对值误差总和SAD为代价函数的搜索匹配,即取SAD最小的运动矢量为
Figure BDA00001904153800067
如果
Figure BDA00001904153800068
在(0,0)处,将
Figure BDA00001904153800069
的值赋给矢量
Figure BDA000019041538000610
并将矢量
Figure BDA000019041538000611
发送至运动矢量合成模块(304),如果
Figure BDA000019041538000612
不在(0,0)处,如图3中
Figure BDA000019041538000613
所示,则对其周围4个点(0,±2)和(±2,0)进行搜索匹配,取SAD最小的运动矢量为
Figure BDA000019041538000614
并将矢量和初始矢量
Figure BDA000019041538000616
发送至运动矢量合成模块(304);
运动矢量合成模块304,用于把矢量
Figure BDA00001904153800071
和初始矢量
Figure BDA00001904153800072
相加,得到最终运动矢量
Figure BDA00001904153800073
Figure BDA00001904153800074
并将最终运动矢量和对应SAD的值
Figure BDA00001904153800076
发送至原始帧估计子模块。
其中原始帧估计子模块包括:
运动矢量初值提取模块401,用于把基本帧
Figure BDA00001904153800077
估计出的每块的运动矢量
Figure BDA00001904153800078
Figure BDA00001904153800079
赋给原始帧X对应块的初始运动矢量Vm0和绝对值误差总和SADm0,其中块的大小为8×8,X帧的每块的Vm0和SADm0发送至原始帧运动矢量修正模块(402);
原始帧运动矢量修正模块402,用于计算原始帧运动矢量Vm0对应的SAD值,如果SAD值小于Δ×SADm0,该矢量为该块的最终运动矢量Vm,并将最终运动矢量Vm发送至内插模块(403),如果SAD值大于Δ×SADm0,对围绕Vm0的(±1,0)和(0,±1)这4个点进行搜索匹配,得到的SAD最小值的运动矢量为该块的最终矢量Vm,并将最终矢量Vm发送至内插模块(403);
内插模块403,用于根据每块的运动矢量Vm通过内插方法得到最终估计的边信息SI。
本发明提供的帧级速率估计模块(107)中的参数K,B,a,b和c估计包括以下两部分:
(1)参数K和B是通过最优化问题确定的:
对Foreman和Soccer两个序列边信息PSNR与解码速率进行统计分析,假设边信息的PSNR与解码速率的关系服从直线Y=KX+B;假设先验解码成功率为T%,即有T%的点在直线Y=KX+B下面;假设成功解码的点到直线Y=KX+B的距离为该点成功解码的代价;其中Y表示一帧图像成功解码的解码速率,X表示边信息的质量PSNR。从而得到一个以代价最小为目标函数,以先验解码成功率T%作为约束条件的优化问题,从而求解最优的参数K和B。
(2)参数a,b和c通过最小二乘拟合算法确定的:
假设编码端估计的边信息质量和解码端的边信息质量误差服从
Figure BDA00001904153800081
的二次多项式分布,其中XE表示编码端估计的边信息与解码端边信息的误差dB,X表示编码端估计出的边信息质量PSNR,对Foreman和Soccer两个序列的边信息估计误差进行最小二乘拟合,得到参数a、b和c。
解码器:用于对Wyner-Ziv帧进行联合解码,得到恢复视频帧。它主要由H.264/AVC帧内解码器201、边信息生成模块202、第二DCT模块203、第二量化模块204、第二循环移位模块205、第二抽取比特平面模块206、LDPC解码模块207、反循环移位模块208、重建模块209及IDCT模块210组成。其中:H.264/AVC帧内解码器201,用于对接收到的关键帧压缩码流进行帧内解码,并将解码得到的数据发送至边信息生成模块;边信息生成模块202,用于对已解码的相邻关键帧采用基于帧内插的方式产生边信息,并将其发送至第二DCT模块;第二DCT模块203,用于对边信息基于块的4×4的离散余弦变换DCT,并将得到的频率系数按其在4×4块中所处的位置划分构成变换系数子带,再将各系数子带发送至第二量化模块,其中4代表像素;第二量化模块204,用于对第二DCT模块传送的变换系数子带进行量化得到量化系数,并将量化后的系数子代发送到第二循环移位模块;第二循环移位模块205,把输入的量化后的系数子代按Z字形顺序扫描,把每块内所有的系数子代首尾相连形成一个新的系数子代,对于该系数子带的第1块,向左循环移1位,第2块循环移2位,第N块循环移N%R位,其中N表示块数,R表示形成的新系数子代的总比特数,%表示取余运算,将循环移位后的系数子代发送至第二抽取比特平面模块;第二抽取比特平面模块206,将循环移位后的系数子代抽取比特平面,并将比特平面传送给LDPC解码模块;LDPC解码模块207,用于在边信息的辅助下,利用接收到的校验比特根据相关噪声模型提供的参数进行解码,解码后的参数发送到反循环移位模块;反循环移位模块208,用于将解码后的数据恢复成系数子带形式,并按与编码端循环移位模块相反的方向进行反循环移位恢复数据的原始性,并将其发送至重建模块;重建模块209,用于将输入数据恢复其在帧内的位置,并进行反量化,将该帧数据发送至IDCT模块;IDCT模块210,用于对输入的数据按块进行反离散预选变换IDCT,得到解码图像。
本发明的效果可以通过以下仿真进一步说明:
一仿真条件:
(1)软件环境:Visual Studio 2008;
(2)GOP尺寸:奇数帧为WZ帧,偶数帧为关键帧;
(3)块尺寸:4×4像素;
(4)参考序列:Carphone(低速运动)序列,Coastguard(中低速运动)序列、Foreman(中高速运动)序列,Soccer(高速运动)序列;
(5)分辨率:176×144;
(6)WZ帧先验解码成功率:95%;
(7)信号:只考虑亮度信号;
(8)PSNR和速率:PSNR和速率同时考虑了关键帧和WZ的PSNR和速率。
二.仿真与分析:
(1)编码端边信息估计性能仿真:
对本发明的低复杂度边信息估计模块与FMCI进行平均匹配数和归一化均方误差NRMSE仿真对比,仿真结果如图6和表1所示。
表1平均匹配数和NRMSE
Figure BDA00001904153800091
从图6(a)、图6(b)和表1中可以看出,与最新的FMCI算法相比,Coastguard序列在每块平均搜索次数增加0.24(5%)的代价下,归一化均方根误差NRMSE从0.075降低到了0.029,Soccer序列在每块平均搜索次数增加0.14(3%)的代价下,归一化均方根误差从0.153降低到了0.097,其中FMCI是Catarina Brites在2007年在文章Encoder rate control for transform domain wyner-ziv video coding中提出的。从仿真结果可以看出,在没有明显增加搜索次数的前提下,提出的算法比FMCI算法在估计的精度方面有了大幅度的提高,特别是对中低速运动的图像序列。
(2)循环移位性能仿真:
对本发明的循环移位模块进行仿真,仿真结果如图7所示,其中黑色表示未进行循环移位,灰色表示进行循环移位.从图7(a)和图7(b)中我们可以明显看出循环移位对比特平面错误率和解码速率平均化的效果,Soccer序列的每个比特平面速率的标准方差从496.55下降为3.85;Foreman序列的每个比特平面速率的标准方差从357.56下降为8.31,证实提出的循环移位模块可以很好的平均每个比特平面的解码速率。
(3)编码端复杂度分析:
编码端的复杂度增加主要在边信息估计处理,从表1中我们可以发现,提出的快速边信息估计算法每块的平均搜索次数不高于5次,由于我们选择8*8块进行处理,对于QCIF序列,一帧图像的总匹配数不高于2000次,而且每次仅进行64次加法运算。从而说明编码端增加的计算量很小。
(4)系统仿真:
对本发明的系统进行仿真,仿真结果如图8所示,其中FERC表示本发明的率失真曲线,DRC表示解码端速率控制的率失真曲线。图8(a)和图8(b)中我们可以发现,对于Coastguard序列和Foreman序列,本发明比2009年提出的ERA系统解码图像质量PSNR分别提高了3dB和0.5dB,其中ERA系统是W.A.R.J.Weerakkody在2009年的文章Enhanced reconstruction algorithm for unidirectional distributed video coding中提出的。因为Foreman的运动强度比Coastguard要大,解码端对编码端速率估计的精度要求就更高,由于提出的系统能很好的降低解码端对编码端速率估计的精度要求,进而导致了更多的性能提升。从图8(a)、图8(b)、图8(c)和图8(d)中我们可以发现,跟有反馈的解码端速率控制方案相比,仅有1.3dB的差距。说明提出的系统能在去掉反馈信道的前提下,系统的性能并没有明显的降低。
(5)结论
本发明提出的基于编码端速率控制的无反馈变换域分布式视频编解码系统,在没有明显增加编码端复杂度的前提下,去掉了系统的反馈信道,与有反馈的解码端速率控制系统相比,本发明的性能并没有明显的降低;与现有的编码端速率控制系统相比,本发明提高了解码图像质量。

Claims (5)

1.一种基于帧级编码端速率控制的变换域分布式视频编码器,包括:
H.264/AVC帧内编码器(101),用于根据WZ帧的质量选择相应的量化因子对关键帧进行编码,使关键帧的质量与WZ帧基本相同,并将得到的压缩码流发送至解码端;
第一DCT模块(102),用于对WZ帧进行n×n块大小的离散余弦变换DCT,并将变换后的系数子带发送至第一量化模块(103),其中n代表像素;
第一量化模块(103),用于对第一DCT模块传送的变换系数子带进行量化得到量化系数,并将量化后的系数子代发送到第一循环移位模块(104);
第一循环移位模块(104),把输入的量化后的系数子带按Z字形顺序扫描,把每块内所有的系数子带首尾相连形成一个新的系数子带,并将该新的系数子带的第1块向左循环移1位,第2块向左循环移2位,第N块向左循环移NmodR位,其中N表示块数,R表示形成的新系数子带的总比特数,mod表示取模运算,将循环移位后的系数子带发送至第一抽取比特平面模块(105);
第一抽取比特平面模块(105),将循环移位后的系数子代抽取比特平面,并将比特平面传送给LDPC编码模块(108);
快速边信息估计模块(106),基于相邻关键帧,进行基本帧估计和原始帧估计,并通过内插算法快速估计出边信息,并将估计出的边信息发送到帧级速率控制模块(107);
帧级速率控制模块(107),根据速率估计公式Y=K(X-(aX2+bX+c))+B,估计出编码速率,其中X表示估计出边信息的PSNR,Y表示编码速率,K,a,b,c和B是根据最小二乘拟合方法得到的系数,并把估计出的编码速率发送到LDPC编码模块(108);
LDPC编码模块(108),根据估计出的WZ帧解码速率对WZ帧进行独立的LDPC编码,并将校验比特发送到解码端等待解码。
2.根据权利要求1所述的视频编码器,其特征在于,快速边信息估计模块(106),包括基本帧估计子模块(3)和原始帧估计子模块(4)两部分,该基本帧估计子模块(3),提取基本帧,并估计基本帧的运动矢量,把估计出的运动矢量发送至原始帧估计子模块;该原始帧估计子模块(4),根据基本帧估计出的运动矢量,估计原始帧的运动矢量,并通过内插算法得到边信息。
3.根据权利要求1所述的视频编码器,其特征在于,基本帧估计子模块(3)包括:
基本帧提取模块(301),用于提取图像X所有偶数行偶数列的像素点构成基本帧
Figure FDA00001904153700021
并将基本帧
Figure FDA00001904153700022
发送至运动矢量估计模块(302);
运动矢量估计模块(302),用于把基本帧
Figure FDA00001904153700023
第K块相邻的上面和左面两块已得到的运动矢量的均值的作为该块初始运动矢量其中块的大小为8×8,并将矢量估计值
Figure FDA00001904153700025
发送至运动矢量修正模块(303);
运动矢量修正模块(303),以
Figure FDA00001904153700026
原点,对(0,0),(±1,0)和(0,±1)这5个点进行以绝对值误差总和SAD为代价函数的搜索匹配,即取SAD最小的运动矢量为如果
Figure FDA00001904153700028
在(0,0)处,将的值赋给矢量
Figure FDA000019041537000210
并将矢量
Figure FDA000019041537000211
发送至运动矢量合成模块(304),如果
Figure FDA000019041537000212
不在(0,0)处,则对其周围4个点(0,±2)和(±2,0)进行搜索匹配,取SAD最小的运动矢量为
Figure FDA000019041537000213
并将矢量
Figure FDA000019041537000214
和初始矢量
Figure FDA000019041537000215
发送至运动矢量合成模块(304);
运动矢量合成模块(304),用于把矢量
Figure FDA000019041537000216
和初始矢量
Figure FDA000019041537000217
相加,得到最终运动矢量
Figure FDA000019041537000218
并将最终运动矢量
Figure FDA000019041537000220
和对应SAD的值
Figure FDA000019041537000221
发送至原始帧估计子模块(4)。
4.根据权利要求1所述的视频编码器,其特征在于,原始帧估计子模块(4)包括:
运动矢量初值提取模块(401),用于把基本帧
Figure FDA000019041537000222
估计出的每块的运动矢量
Figure FDA000019041537000223
赋给原始帧X对应块的初始运动矢量Vm0和绝对值误差总和SADm0,其中块的大小为8×8,X帧的每块的Vm0和SADm0发送至原始帧运动矢量修正模块(402);
原始帧运动矢量修正模块(402),用于计算原始帧运动矢量Vm0对应的SAD值,如果SAD值小于Δ×SADm0,该矢量为该块的最终运动矢量Vm,并将最终运动矢量Vm发送至内插模块(403),如果SAD值大于Δ×SADm0,对围绕Vm0的(±1,0)和(0,±1)这4个点进行搜索匹配,得到的SAD最小值的运动矢量为该块的最终矢量Vm,并将最终矢量Vm发送至内插模块(403);
内插模块(403),用于根据每块的运动矢量Vm通过内插方法得到最终估计的边信息SI。
5.一种基于帧级编码端速率控制的变换域分布式视频解码器,包括:
H.264/AVC帧内解码器(201),用于对接收到的关键帧压缩码流进行帧内解码,并将解码得到的数据发送至边信息生成模块(202);
边信息生成模块(202),用于对已解码的相邻关键帧采用基于帧内插的方式产生边信息,并将其发送至第二DCT模块(203);
第二DCT模块(203),用于对边信息进行n×n块大小的离散余弦变换DCT,并将变换域的系数子带发送至第二量化模块(204),其中n代表像素;
第二量化模块(204),用于对变换域的系数子带进行量化得到量化系数,并将量化后的系数子代发送到第二循环移位模块(205);
第二循环移位模块(205),把输入的量化后的系数子代按Z字形顺序扫描,把每块内所有的系数子代首尾相连形成一个新的系数子代,并将该新的系数子带的第1块向左循环移1位,第2块向左循环移2位,第N块向左循环移NmodR位,其中N表示块数,R表示形成的新系数子代的总比特数,mod表示取模运算,将循环移位后的系数子代发送至第二抽取比特平面模块(206);
第二抽取比特平面模块(206),将循环移位后的系数子代抽取比特平面,并将比特平面传送给LDPC解码模块(207);
LDPC解码模块(207),用于在边信息的辅助下,利用接收到的校验比特根据相关噪声模型提供的参数进行解码,解码后的参数发送到反循环移位模块(208);
反循环移位模块(208),用于将解码后的数据恢复成系数子带形式,并按与编码端循环移位模块相反的方向进行反循环移位恢复数据的原始性,并将其发送至重建模块(209);
重建模块(209),用于将输入数据恢复其在帧内的位置,并进行反量化,将该帧数据发送至IDCT模块(210);
IDCT模块(210),用于对输入的数据按块进行反离余弦选变换IDCT,得到解码图像。
CN201210249214.3A 2012-07-18 2012-07-18 基于帧级编码端速率控制的变换域分布式视频编解码器 Expired - Fee Related CN102790881B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201210249214.3A CN102790881B (zh) 2012-07-18 2012-07-18 基于帧级编码端速率控制的变换域分布式视频编解码器

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201210249214.3A CN102790881B (zh) 2012-07-18 2012-07-18 基于帧级编码端速率控制的变换域分布式视频编解码器

Publications (2)

Publication Number Publication Date
CN102790881A true CN102790881A (zh) 2012-11-21
CN102790881B CN102790881B (zh) 2015-01-28

Family

ID=47156170

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201210249214.3A Expired - Fee Related CN102790881B (zh) 2012-07-18 2012-07-18 基于帧级编码端速率控制的变换域分布式视频编解码器

Country Status (1)

Country Link
CN (1) CN102790881B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104349120A (zh) * 2013-07-26 2015-02-11 北京计算机技术及应用研究所 一种音视频解码系统及解码方法
CN103888769B (zh) * 2014-03-11 2017-07-14 河海大学常州校区 分布式视频编码中基于时空相关性的不等差错保护方法
CN109348589A (zh) * 2018-08-29 2019-02-15 浙江大丰实业股份有限公司 基于图像识别的射灯定向照明平台

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101621690A (zh) * 2009-07-24 2010-01-06 北京交通大学 基于Wyner-Ziv理论的两描述视频编码方法
CN102026000A (zh) * 2011-01-06 2011-04-20 西安电子科技大学 像素域-变换域联合的分布式视频编码系统

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101621690A (zh) * 2009-07-24 2010-01-06 北京交通大学 基于Wyner-Ziv理论的两描述视频编码方法
CN102026000A (zh) * 2011-01-06 2011-04-20 西安电子科技大学 像素域-变换域联合的分布式视频编码系统

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
MEI GUO ET AL.: "Witsenhausen–Wyner Video Coding", 《IEEE TRANSACTIONS ON CIRCUITS AND SYSTEMS FOR VIDEO TECHNOLOGY》, vol. 21, no. 8, 31 August 2011 (2011-08-31), pages 1049 - 1058 *
张国华 等: "Girth-8 (3,L)-规则QC-LDPC码的一种确定性构造方法", 《电子与信息学报》, vol. 32, no. 5, 31 May 2010 (2010-05-31), pages 1152 - 1156 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104349120A (zh) * 2013-07-26 2015-02-11 北京计算机技术及应用研究所 一种音视频解码系统及解码方法
CN103888769B (zh) * 2014-03-11 2017-07-14 河海大学常州校区 分布式视频编码中基于时空相关性的不等差错保护方法
CN109348589A (zh) * 2018-08-29 2019-02-15 浙江大丰实业股份有限公司 基于图像识别的射灯定向照明平台
CN109348589B (zh) * 2018-08-29 2020-04-10 浙江大丰实业股份有限公司 基于图像识别的射灯定向照明平台

Also Published As

Publication number Publication date
CN102790881B (zh) 2015-01-28

Similar Documents

Publication Publication Date Title
Hu et al. Coarse-to-fine deep video coding with hyperprior-guided mode prediction
CN102026000B (zh) 像素域-变换域联合的分布式视频编码系统
CN104041035B (zh) 用于复合视频的无损编码及相关信号表示方法
CN102281446B (zh) 一种分布式视频编码中基于视觉感知特性的量化方法
US20130083840A1 (en) Advance encode processing based on raw video data
CN103139565A (zh) 用于对色度图像解码的方法
CN103581647A (zh) 一种基于彩色视频运动矢量的深度图序列分形编码方法
CN102970536B (zh) 一种改进的带有预测残差调整的视频编码方法
CN103546758A (zh) 一种快速深度图序列帧间模式选择分形编码方法
CN107864380A (zh) 基于dct的3d‑hevc快速帧内预测决策方法
CN102256133A (zh) 一种基于边信息精化的分布式视频编码及解码方法
CN102291582A (zh) 一种基于运动补偿精化的分布式视频编码方法
CN102625102A (zh) 一种面向h.264/svc mgs编码的率失真模式选择方法
Ilic et al. Experimental analysis of picture quality after compression by different methods
CN101964910B (zh) 基于码率型转码辅助的视频空间分辨率转换方法
CN109922339A (zh) 结合多采样率下采样和超分辨率重建技术的图像编码框架
CN101783954B (zh) 一种视频图像编解码方法
CN102572428B (zh) 面向多媒体传感网分布式编解码的边信息估计方法
CN105611301A (zh) 基于小波域残差的分布式视频编解码方法
CN102790881A (zh) 基于帧级编码端速率控制的变换域分布式视频编解码器
CN106534855A (zh) 一种面向satd的拉格朗日因子计算方法
Haiyan et al. Research on quantization and scanning order for 3-D DCT video coding
CN101360236B (zh) 一种Wyner-ziv视频编解码方法
CN102523454B (zh) 利用3d字典消除3d播放系统中块效应的方法
CN102158710B (zh) 一种面向虚拟视图质量的深度图编码率失真判断方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150128

Termination date: 20200718

CF01 Termination of patent right due to non-payment of annual fee