CN102355583B - 一种可分级视频编码的块级别层间帧内预测方法 - Google Patents

一种可分级视频编码的块级别层间帧内预测方法 Download PDF

Info

Publication number
CN102355583B
CN102355583B CN 201110305694 CN201110305694A CN102355583B CN 102355583 B CN102355583 B CN 102355583B CN 201110305694 CN201110305694 CN 201110305694 CN 201110305694 A CN201110305694 A CN 201110305694A CN 102355583 B CN102355583 B CN 102355583B
Authority
CN
China
Prior art keywords
ilip
filter
encoding block
signal
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN 201110305694
Other languages
English (en)
Other versions
CN102355583A (zh
Inventor
覃团发
常侃
刘运毅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Runjian Co., Ltd.
Original Assignee
Guangxi University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangxi University filed Critical Guangxi University
Priority to CN 201110305694 priority Critical patent/CN102355583B/zh
Publication of CN102355583A publication Critical patent/CN102355583A/zh
Application granted granted Critical
Publication of CN102355583B publication Critical patent/CN102355583B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression, Expansion, Code Conversion, And Decoders (AREA)

Abstract

本发明公开了一种SVC的块级别ILIP方法,包括:在编码端,依次计算增强层当前编码帧中每个块的方差,根据方差值设定滤波器控制标志位。若标志位为1,则计算该块ILIP信号之间的自相关值以及原始EL信号与层间帧内预测信号之间的互相关值;若一帧内所有块循环完毕,则计算当前帧对应的维纳滤波器系数。其次,采用计算出的维纳滤波器系数,对EL当前编码帧中滤波器控制标志位为1的块的层间帧内预测结果进行滤波操作,并根据滤波结果判断是否应该对该块的层间帧内预测结果进行滤波。最后,将滤波器控制标志位及维纳滤波器系数经过编码后写入条带头信息传输至解码端。采用本发明所述的方法,可以有效地提高层间帧内预测技术的准确性,提高编码器的编码效率。

Description

一种可分级视频编码的块级别层间帧内预测方法
技术领域
本发明涉及视频压缩技术,特别涉及视频压缩技术中一种可分级视频编码的块级别层间帧内预测方法。
背景技术
作为H.264/AVC视频编码标准的扩展,可分级视频编码(Scalable VideoCoding,SVC)提供了时域、空域以及质量域三种分级方式,以解决视频通信中传输、存储系统中的异构问题。其中,时域分级方式可以通过层级B帧(Hierarichal B)技术实现;空域分级和质量域分级则采用分层编码的结构实现——基本层(Base Layer,BL)编码帧采用传统的H.264/AVC编码方式,具有最小的空域分辨率和较差的质量;增强层(Enhanced Layer,EL)编码帧具有更大的空域分辨率和较高的质量,其既可以采用传统单层编码模式,也可以采用层间预测模式进行编码。为了充分去除层间冗余,从而获得与传统单层H.264/AVC编码方式相近的编码效率,在SVC中引入了3种层间预测技术,分别为:层间运动预测(Inter-Layer Motion Prediction,ILMP)、层间残差预测(Inter-Layer Residual Prediction,ILRP)和层间帧内预测(Inter-Layer Intra Prediction,ILIP)。
在空域分级方式中,为了遵循单次解码限制,若当前编码宏块为EL宏块,采用ILIP技术的前提是BL编码帧对应位置块采用帧内编码模式。在此条件下,BL编码帧对应位置块的解码图像在经过去块滤波后进行上采样操作,以获取EL当前编码宏块图像的预测图像。预测结果与实际EL图像越接近,就有越多的EL宏块采用INTRA_BL模式进行编码,编码效率也就越高。但是,SVC中采用的多相滤波器结构简单,在处理图像这一复杂信号时上采样性能不理想,进而会影响ILIP的精确度以及最终的编码器编码效率。
为了提高SVC中ILIP的准确性,采用的优化算法有:
在离散余弦变换(Discrete Cosine Transform,DCT)域进行插值,可以获得比双线性、双三次等空域线性上采样滤波器更高质量的插值结果,从而提升ILIP结果的准确性。但是该方法得到的结果并不是最优的。
可以根据视频信号的非平稳特性,采用自适应滤波技术(如维纳滤波器)获得统计意义上的最优结果。但是,若以一帧为单位进行维纳滤波器系数训练并做滤波操作,滤波器控制不够精确,因此SVC中ILIP信号的准确性,还存在进一步提高的空间。
综上,目前SVC中ILIP结果不够精确,现有的优化算法性能也有待进一步提升。
发明内容
有鉴于此,本发明的主要目的在于提供一种SVC的块级别ILIP方法,能够克服SVC的传统ILIP方法及其优化方法在性能上的不足,获得最有效的ILIP结果,从而提高编码效率。
为达到上述目的,本发明的技术方法具体是这样实现的:
一种可分级视频编码的块级别层间帧内预测方法,用于精确计算增强层(Enhancement Layer,EL)当前编码帧的层间帧内预测(Inter-Layer IntraPrediction,ILIP)信号,在编码端,该方法包括:
A、采用H.264SVC标准中的多相滤波器计算EL当前编码帧的ILIP信号,并为EL当前编码帧的每个编码块对应设置滤波器控制标志位,用于指示相应的编码块的ILIP信号是否进行滤波操作;
B、判断所述EL当前编码帧中的每个编码块是否参与维纳滤波器的系数训练;对参与维纳滤波器的系数训练的各个编码块,计算编码块的原始EL信号和ILIP信号间的互相关以及ILIP信号间的自相关;
C、将参与维纳滤波器的系数训练的各个编码块的所述互相关和自相关的计算结果代入Wiener-Hopf方程,确定所述EL当前编码帧的维纳滤波器系数;
D、利用所述维纳滤波器系数,对参与维纳滤波器系数训练的各个编码块的ILIP信号进行滤波,并根据滤波结果判断是否对相应编码块的ILIP信号进行维纳滤波操作;将确定进行滤波操作的各个编码块对应的滤波器控制标志位进行置位,其他滤波标志位不置位,并根据所述滤波器控制标志位确定相应编码块的ILIP结果;
E、对所述EL当前编码帧的各个编码块对应的滤波器控制标志位和所述维纳滤波器系数进行编码并发送。
较佳地,判断所述EL当前编码帧中的任一编码块是否参与维纳滤波器系数训练的方式包括:
若所述任一编码块的图像细节量超过预设门限,则判定该编码块参与维纳滤波器的系数训练,否则,判定该编码块不参与维纳滤波器的系数训练。
较佳地,利用所述任一编码块的方差值代表所述图像细节量,若所述任一编码块的方差值大于预设的阈值T,则确定所述任一编码块的图像细节量超过预设门限,否则确定所述任一编码块的图像细节。
较佳地,T=7。
较佳地,对于基本层图像为QCIF格式的序列,编码块的尺寸为8×8;对于基本层图像为CIF格式的序列,编码块的尺寸为16×16;对于基本层图像为4CIF格式的序列,编码块的尺寸为32×32。
较佳地,在步骤B中进一步包括:将参与维纳滤波器系数训练的各个编码块对应的滤波器控制标志位进行置位,用于表示相应编码块参与维纳滤波器的系数训练。
较佳地,步骤D所述滤波结果判断是否对相应编码块的ILIP信号进行维纳滤波操作的方式为:
Σ i , j ∈ B n | p i , j - q i , j | 2 > Σ i , j ∈ B n | q i , j ′ - q i , j | 2 , 则确定对相应编码块的ILIP信号进行维纳滤波操作;
Σ i , j ∈ B n | p i , j - q i , j | 2 ≤ Σ i , j ∈ B n | q i , j ′ - q i , j | 2 , 则确定不对相应编码块的ILIP信号进行维纳滤波操作;
其中,所述n表示编码块在所述当前编码帧中的序号;所述Bn代表编码块n中的像素在EL当前编码帧中以像素为单位的坐标范围;所述i,j分别代表以像素为单位的横坐标和纵坐标值;所述qi,j代表原始EL信号在当前编码帧中坐标为(i,j)处的像素值;所述pi,j代表ILIP信号在当前编码帧中坐标为(i,j)处的像素值;所述q′i,j是经过维纳滤波器滤波后的ILIP信号在当前编码帧中坐标为(i,j)处的像素值。
较佳地,步骤E中对所述维纳滤波器系数进行编码时,仅对所述维纳滤波器系数的时域预测残差采用指数哥伦布编码,所述时域预测残差的计算如下:
dm(k,l)=hm(k,l)-hm-1(k,l)
其中,所述m代表所述EL当前编码帧在EL中的帧号;所述dm(k,l)代表第m帧滤波器系数的滤波窗口中坐标为(k,l)处的时域预测残差值;所述hm(k,l)代表第m帧的滤波器系数组中滤波窗口中坐标为(k,l)处的系数值。
较佳地,所述根据滤波器控制标志位确定相应编码块的ILIP结果为:若滤波器控制标志位被置位,则确定相应编码块的ILIP结果为,对该编码块的所述ILIP信号进行维纳滤波的结果数据;若滤波器控制标志位未被置位,则确定相应编码块的ILIP结果为,该编码块的所述ILIP信号。
一种可分级视频编码的块级别层间帧内预测方法,在解码端,该方法包括:
接收编码端依照权利要求1到9中任一所述方法发送的滤波器控制标志位和所述维纳滤波器系数;
若接收的任一编码块的滤波器控制标志位被置位,则对编码端发送的该任一编码块的基本层信号进行上采样后,利用接收的所述维纳滤波器系数进行滤波,将滤波结果作为相应编码块的ILIP结果。
由上述的技术方法可见,本发明中的块级别ILIP方法在计算EL当前编码帧的ILIP信号时,首先采用传统方法计算ILIP信号,并对应每个编码块设置滤波器控制标志位,用于表示相应编码块是否进行滤波操作;其次确定参与进行维纳滤波器系数训练的EL当前编码帧中的编码块,并利用确定出的编码块的统计结果计算维纳滤波器系数;接着将计算出的维纳滤波器系数用于块级别的滤波优化,通过滤波结果确定是否对相应编码块进行维纳滤波,并将进行维纳滤波的编码块对应的滤波器控制标志位置位;最后将滤波器控制标志位、维纳滤波器系数进行编码传输。在解码端,采用维纳滤波器系数对EL当前帧中滤波器控制标志位为1的块的传统ILIP结果进行滤波。本发明能够克服SVC的ILIP方法及其优化算法在性能上的不足,获得最有效的ILIP结果,从而提高编码效率。
附图说明
图1为本发明所采用的SVC中块级别ILIP方法的编码端流程图;
图2(a)、图2(b)、图2(c)、图2(d)为对BL为CIF格式,EL为4CIF格式的“Harbour”序列采用本实施例方法、传统SVC的ILIP方法及帧级别ILIP优化方法后的ILIP结果主观质量比较;
图3为对BL为QCIF格式,EL为CIF格式的“Soccer”序列采用本实施例方法、传统SVC的ILIP方法及帧级别ILIP优化方法后SVC编码器的编码性能比较示意图;
图4为对BL为CIF格式,EL为4CIF格式的“Ice”序列采用本实施例方法、传统SVC的ILIP方法及帧级别ILIP优化方法后SVC编码器的编码性能比较示意图。
具体实施方式
为解决现有技术中存在的问题,本发明提出一种全新的SVC中块级别ILIP方法,即从块级别对维纳滤波器训练、维纳滤波操作进行控制的ILIP优化方法。首先采用传统方法计算ILIP信号,并对应每个编码块设置滤波器控制标志位,用于表示相应编码块是否进行滤波操作;其次根据EL当前编码帧中每个编码块的图像细节信息,确定是否将该编码块数据用于维纳滤波器系数训练;接着将计算出的维纳滤波器系数用于块级别的滤波优化,并通过滤波结果确定是否对某个编码块进行维纳滤波,并将进行维纳滤波的编码块对应的滤波器控制标志位进行置位;最后将滤波器控制标志位、维纳滤波器系数进行编码传输。在解码端,采用维纳滤波器系数对EL当前帧中滤波器控制标志位为1的块的传统ILIP结果进行滤波。本发明能够克服SVC的ILIP方法及其优化算法在性能上的不足,获得最有效的ILIP结果,从而提高编码效率。
为使本发明的目的、技术方法及优点更加清楚明白,以下参照附图并举实施例,对本发明进一步详细说明。
图1为本发明所采用的SVC中的块级别ILIP方法的编码端流程图。在图1所示的编码端ILIP方法中,对所有的EL编码帧,块级别ILIP方法均相同,在下面的实施例中,仅以其中任一帧为例,对本发明的块级别ILIP方法进行描述。如图1所示,该方法包括以下步骤:
步骤100:进行传统SVC的ILIP,即采用H.264SVC标准中的传统多相滤波器对BL重建信号进行上采样,得到EL当前编码帧的预测信号;为EL当前编码帧的每个编码块对应设置滤波器控制标志位,用于指示相应编码块的ILIP信号是否进行滤波操作。
其中,滤波器控制标志位是一个布尔型变量,其值为1表示需要对当前块的ILIP信号进行维纳滤波;否则表示不需要对当前块的ILIP信号进行维纳滤波。本步骤,仅对应编码块设置滤波器控制标志位,关于相应编码块的滤波器控制标志位的取值,通过后续操作确定,这里可以先设置各个滤波器控制标志位全部取0。
接下来,通过一个循环操作,依次对各个编码块判断是否参与维纳滤波器的系数训练,并对参与系数训练的编码块计算统计结果,用于维纳滤波器的系数训练。具体地,
步骤101:令n=1。
步骤102,根据第n个编码块的图像细节信息量判断该编码块是否参与系数训练,若是,则执行步骤103,否则,执行步骤104。
其中,图像细节信息量大于预设门限的编码块,确定参与维纳滤波器的系数训练。具体可以通过编码块的方差表征图像细节信息量的多少,其中,方差指随机变量的取值相对于其数学期望的偏离度,对于图像中的块来说,其计算为现有技术,采用如下公式:
V = 1 M × M Σ i = 0 M - 1 Σ j = 0 M - 1 ( q i , j - μ n )
其中,M×M是块的尺寸。M值越小,即每帧图像的分块数越多,维纳滤波器控制也越精确,ILIP的滤波结果也就越好;另一方面,每帧图像的分块数越多,需要用更多的比特数来表示滤波器控制标志位,这样会抵消精确的ILIP结果带来的编码效率提升。在本发明中,为了获得最高的编码效率提升,对于BL为QCIF格式的序列,采用经验值M=8;对于BL为CIF格式的序列,采用经验值M=16;对于4CIF或更高分辨率格式序列,采用经验值M=32。i,j分别代表一个块中以像素为单位的横、纵坐标值;所述qi,j代表坐标为(i,j)处像素值;所述μn代表第n个块的所有像素的平均值。
将上述计算得到的方差值,与预设门限值T进行比较,若方差值大于T,说明当前块拥有较多图像细节信息,应参与维纳滤波器的系数训练。为简化处理,这里借用编码块的滤波器控制标志位表示相应编码块是否参与系数训练,因此,若确定第n个编码块参与系数训练,则设置其滤波器控制标志位为1,否则设置为0。门限值T根据实验经验得到,在本发明实施例中确定其值为7。
步骤103:计算第n个编码块的ILIP信号的自相关以及第n个编码块的原始EL信号与ILIP信号间的互相关。
这里所述的编码块的ILIP信号为步骤101中计算得到的相应编码块的ILIP信号。需要根据滤波器窗口大小来计算自相关与互相关。在本发明中,对于BL为QCIF的序列,滤波窗口采用固定的3×3滤波窗;对于BL为CIF或更大分辨率序列,滤波窗口采用固定的5×5滤波窗。
这里所提到的自相关与互相关的计算为现有技术,在此不再赘述。该步骤的进行是为了建立维纳滤波器系数方程。
步骤104:判断n是否等于EL当前编码帧的总编码块数,若是,则将n自加后返回到步骤101;否则进入步骤105。
步骤105:计算维纳滤波器系数。
将前述循环中步骤103所计算的所有统计特性结果,包括参与维纳滤波器系数训练的各个编码块的自相关和互相关,分别代入如下方程,即Wiener-Hopf方程,并求解出维纳滤波器系数:
Rpph=rpq
Wiener-Hopf方程为现有技术,其中,h为待求解的当前帧维纳滤波器系数,Rpp代表自相关矩阵,rpq代表互相关矩阵。
接下来,再通过一个循环,依次判断当前编码帧中参与维纳滤波器系数训练的各个编码块,是否需要进行维纳滤波。
步骤106:令n=1。
步骤107:判断第n个编码块的滤波器控制标志位是否为1,若为1,进入步骤108;否则进入步骤111。
步骤108:利用步骤105计算出来的维纳滤波器系数,对EL当前编码帧中第n个编码块的ILIP结果进行维纳滤波操作。
其中,编码块的ILIP结果为前述步骤101中计算出的ILIP结果。
步骤109:将步骤108得到的ILIP信号的滤波结果与未滤波前的ILIP信号进行比较,若滤波结果优于未滤波的ILIP信号,则进入步骤111,否则进入步骤110。
这里对第n个编码块的ILIP信号滤波结果与未滤波前的ILIP信号进行比较的方法采用如下准则:
Σ i , j ∈ B n | p i , j - q i , j | 2 > Σ i , j ∈ B n | q i , j ′ - q i , j | 2 , 维纳滤波后的ILIP信号更好;
Σ i , j ∈ B n | p i , j - q i , j | 2 ≤ Σ i , j ∈ B n | q i , j ′ - q i , j | 2 , 未滤波前的ILIP信号更好;
其中,所述n表示当前块在当前帧中的序号;所述Bn代表第n个块在EL当前编码帧中的以像素为单位的坐标范围;所述i,j分别代表以像素为单位的横坐标和纵坐标值;所述qi,j代表原始EL帧中坐标为(i,j)处的像素值;所述q′i,j是经过维纳滤波器处理后的ILIP信号中坐标为(i,j)处的像素值;所述pi,j代表原始ILIP信号坐标为(i,j)处的像素值。
步骤110:将第n个编码块的滤波器控制标志位设置为0。
将不进行维纳滤波的编码块对应的滤波器控制标志位取消置位。本实施例中,取值为1表示置位,取值为0表示取消置位。
步骤111:判断n是否等于当前编码帧EL的总编码块数,若是,进入步骤112,否则将n自加后进入步骤107。
步骤112:对各个编码块对应的滤波器控制标志位和步骤105计算得到的维纳滤波器系数进行编码和发送;根据滤波器控制标志位确定相应编码块的最终ILIP结果。
对于某个EL编码帧来说,所有编码块的滤波器控制标志位是一串二进制数据,对该二进制数据的编码,首先进行游程编码,然后对游程编码结果再进行指数哥伦布编码。游程编码和指数哥伦布编码为现有技术,在此不再赘述。
对维纳滤波器系数的编码首先采用时域预测,即采用之前一帧的维纳滤波器系数预测当前帧的维纳滤波器系数,只对预测后的残差数据进行编码。时域预测的残差数据的计算如下:
dm(k,l)=hm(k,l)-hm-1(k,l)
其中,所述m代表当前编码帧为EL中第m帧;所述dm(k,l)代表第m帧滤波器系数的滤波窗口中坐标为(k,l)处的时域预测残差值;所述hm(k,l)代表第m帧的滤波器系数组中滤波窗口中坐标为(k,l)处的系数值。
根据滤波器控制标志位确定相应编码块的最终ILIP结果为:若滤波器控制标志位被置位,则确定相应编码块的最终ILIP结果为,对该编码块的传统ILIP信号进行维纳滤波的结果数据;若滤波器控制标志位未被置位,则确定相应编码块的最终ILIP结果为,该编码块的传统ILIP信号。其中,传统ILIP信号即指步骤100中得到的相应编码块的ILIP信号。
至此,即完成了本发明所述的SVC中的块级别ILIP方法过程。通过上述方式,能够得到更加准确的层间帧内预测结果,编码端再利用该最终ILIP结果计算当前编码帧的残差数据传输到解码端,从而提高编码效率。
解码端接收滤波器控制标志位、维纳滤波器系数和残差数据后,根据滤波器控制标志位中被置位的标志位,确定出需要进行维纳滤波处理的编码块,对这些编码块的基本层信号的上采样信号进行维纳滤波,再利用维纳滤波结果与接收的残差数据,确定相应编码块的EL信号。对于未被置位的标志位,其相应编码块的处理与现有处理方式相同,这里就不再赘述。
需要进一步说明的是,本实施例中所述的SVC中的块级别ILIP方法只适用于H.264的SVC扩展中的ILIP技术。
以SVC相关软件JSVM9.19.9作为平台,分别采用本实施例中的块级别ILIP方法、H.264 SVC标准中的传统ILIP方法与ILIP的帧级别优化算法对序列进行仿真。
仿真中采用Scalable High Intra档次,采用的测试序列为Ice,City,Crew,Soccer与Harbour,分别测试了BL为QCIF格式序列,EL为CIF格式序列的空域分级组合(记为QCIF/CIF)以及BL为CIF格式序列,EL为4CIF格式序列的空域分级组合(记为CIF/4CIF)下的编码结果。对于QCIF/CIF场景,帧率为15fps;在CIF/4CIF场景下,帧率为30fps。
表1和表2分别列出了传统ILIP方法、ILIP帧级别优化方法以及本发明方法所获得的预测结果的峰值信噪比(Peak Signal-to-Noise Ratio,PSNR)。其中,BL的QP值设置为25。从两个表中可以看出,相比于传统ILIP方法和ILIP帧级别优化方法,本发明方法都可以获得较高的PSNR增益;在细节信息相对较少的序列中(例如“Ice”、“Crew”),本发明方法结果明显优于ILIP帧级别优化结果。
表1QCIF/CIF场景下PSNR比较
Figure BSA00000588623200111
表2CIF/4CIF场景下PSNR比较
Figure BSA00000588623200112
图2所示为“Harbour“序列在CIF/4CIF场景下的ILIP预测结果的主观质量比较。其中(a)为原始EL图像,(b)为传统ILIP图像,(c)为帧级别ILIP优化图像,(d)为本发明方法得到的ILIP图像。从图中可以看出,相比于传统ILIP方法,帧级别ILIP优化方法以及本发明方法可以获得更为清晰的ILIP预测图像,此结果与表2的结果一致。
为了比较算法的率失真性能,采用了BD-BR(Bjontegaard delta bit rate)与BD-PSNR(Bjontegaard delta PSNR)进行衡量。BD-BR以及BD-PSNR利用曲线拟合原理,能够表征原始算法与优化算法的R-D(Rate-Distortion)曲线之间的码率、PSNR平均差异,可用于反映算法的全局编码效率增益。对于5个测试序列,分别测试了(20,22),(25,27),(30,32)以及(35,37)四种QP组合。
表3和表4分别列出了QCIF/CIF以及CIF/4CIF场景下5个序列的测试结果。从两个表中可看出,首先,相比于传统ILIP方法,无论是本发明方法还是帧级别ILIP优化算法都可以获得较高的编码效率提升;其次,本发明方法性能优于ILIP帧级别优化算法。
表3QCIF/CIF场景下编码性能比较
Figure BSA00000588623200121
表4CIF/4CIF场景下编码性能比较
为了更为直观地展示不同的ILIP算法对编码效率的影响,图3和图4给出了序列“Crew“在QCIF/CIF场景下以及序列”Ice“在CIF/4CIF场景下的率失真曲线图。可观察到,本发明方法和帧级别ILIP优化算法的R-D点都位于传统ILIP方法的左方。这是因为维纳滤波器的使用减少了预测误差能量,所以需要传输的残差数据量大大减少。另外,与ILIP帧级别优化算法相比,本发明方法采用了精确的滤波器控制,获得了更高的编码效率。
总之,本发明方法在计算EL当前编码帧的ILIP信号时,首先采用传统方法计算ILIP信号,其次计算EL当前编码帧中每个块的方差值,根据方差值确定是否计算将该块数据用于维纳滤波器系数训练;接着将计算出的维纳滤波器系数用于块级别的滤波优化,并通过滤波结果确定是否应该对某个块进行维纳滤波;最后将滤波器控制标志位、维纳滤波器系数进行编码传输。在解码端,采用维纳滤波器系数对EL当前编码帧中滤波器控制标志位被置位的块的传统ILIP结果进行滤波。本发明能够克服SVC的传统ILIP方法及其优化算法在性能上的不足,获得最有效的ILIP结果,从而提高编码效率。
综上所述,以上仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (9)

1.一种可分级视频编码的块级别层间帧内预测方法,用于精确计算增强层(Enhancement Layer,EL)当前编码帧的层间帧内预测(Inter-Layer IntraPrediction,ILIP)信号,其特征在于,在编码端,该方法包括:
A、采用H.264SVC标准中的多相滤波器计算EL当前编码帧的ILIP信号,并为EL当前编码帧的每个编码块对应设置滤波器控制标志位,用于指示相应的编码块的ILIP信号是否进行滤波操作;
B、判断所述EL当前编码帧中的每个编码块是否参与维纳滤波器的系数训练;对参与维纳滤波器的系数训练的各个编码块,计算编码块的原始EL信号和ILIP信号间的互相关以及ILIP信号间的自相关;
C、将参与维纳滤波器的系数训练的各个编码块的所述互相关和自相关的计算结果代入Wiener-Hopf方程,确定所述EL当前编码帧的维纳滤波器系数;
D、利用所述维纳滤波器系数,对参与维纳滤波器系数训练的各个编码块的ILIP信号进行滤波,并根据滤波结果判断是否对相应编码块的ILIP信号进行维纳滤波操作;将确定进行滤波操作的各个编码块对应的滤波器控制标志位进行置位,其他滤波标志位不置位,并根据所述滤波器控制标志位确定相应编码块的ILIP结果;
E、对所述EL当前编码帧的各个编码块对应的滤波器控制标志位和所述维纳滤波器系数进行编码并发送;
步骤D所述根据滤波结果判断是否对相应编码块的ILIP信号进行维纳滤波操作的方式为:
Figure FDA00002554951500011
则确定对相应编码块的ILIP信号进行维纳滤波操作;若则确定不对相应编码块的ILIP信号进行维纳滤波操作;
其中,所述n表示编码块在所述当前编码帧中的序号;所述Bn代表编码块n中的像素在EL当前编码帧中以像素为单位的坐标范围;所述i,j分别代表以像素为单位的横坐标和纵坐标值;所述qi,j代表原始EL信号在当前编码帧中坐标为(i,j)处的像素值;所述pi,j代表ILIP信号在当前编码帧中坐标为(i,j)处的像素值;所述
Figure FDA00002554951500021
是经过维纳滤波器滤波后的ILIP信号在当前编码帧中坐标为(i,j)处的像素值。。
2.如权利要求1所述的方法,其特征在于,判断所述EL当前编码帧中的任一编码块是否参与维纳滤波器系数训练的方式包括:
若所述任一编码块的图像细节量超过预设门限,则判定该编码块参与维纳滤波器的系数训练,否则,判定该编码块不参与维纳滤波器的系数训练。
3.如权利要求2所述的方法,其特征在于,利用所述任一编码块的方差值代表所述图像细节量,若所述任一编码块的方差值大于预设的阈值T,则确定所述任一编码块的图像细节量超过预设门限,否则确定所述任一编码块的图像细节。
4.如权利要求3所述的方法,其特征在于,T=7。
5.根据权利要求1到4中任一所述的方法,其特征在于,对于基本层图像为QCIF格式的序列,编码块的尺寸为8×8;对于基本层图像为CIF格式的序列,编码块的尺寸为16×16;对于基本层图像为4CIF格式的序列,编码块的尺寸为32×32。
6.如权利要求1所述的方法,其特征在于,在步骤B中进一步包括:将参与维纳滤波器系数训练的各个编码块对应的滤波器控制标志位进行置位,用于表示相应编码块参与维纳滤波器的系数训练。
7.如权利要求1所述的方法,其特征在于,步骤E中对所述维纳滤波器系数进行编码时,仅对所述维纳滤波器系数的时域预测残差采用指数哥伦布编码,所述时域预测残差的计算如下:
dm(k,l)=hm(k,l)-hm-1(k,l)
其中,所述m代表所述EL当前编码帧在EL中的帧号;所述dm(k,l)代表第m帧滤波器系数的滤波窗口中坐标为(k,l)处的时域预测残差值;所述hm(k,l)代表第m帧的滤波器系数组中滤波窗口中坐标为(k,l)处的系数值。
8.根据权利要求1所述的方法,其特征在于,所述根据所述滤波器控制标志位确定相应编码块的ILIP结果为:若滤波器控制标志位被置位,则确定相应编码块的ILIP结果为,对该编码块的所述ILIP信号进行维纳滤波的结果数据;若滤波器控制标志位未被置位,则确定相应编码块的ILIP结果为,该编码块的所述ILIP信号。
9.一种可分级视频编码的块级别层间帧内预测方法,其特征在于,在解码端,该方法包括:
接收编码端依照权利要求1到8中任一所述方法发送的滤波器控制标志位和所述维纳滤波器系数;
若接收的任一编码块的滤波器控制标志位被置位,则对编码端发送的该任一编码块的基本层信号进行上采样后,利用接收的所述维纳滤波器系数进行滤波,将滤波结果作为相应编码块的ILIP结果。
CN 201110305694 2011-09-29 2011-09-29 一种可分级视频编码的块级别层间帧内预测方法 Active CN102355583B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN 201110305694 CN102355583B (zh) 2011-09-29 2011-09-29 一种可分级视频编码的块级别层间帧内预测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN 201110305694 CN102355583B (zh) 2011-09-29 2011-09-29 一种可分级视频编码的块级别层间帧内预测方法

Publications (2)

Publication Number Publication Date
CN102355583A CN102355583A (zh) 2012-02-15
CN102355583B true CN102355583B (zh) 2013-03-13

Family

ID=45579071

Family Applications (1)

Application Number Title Priority Date Filing Date
CN 201110305694 Active CN102355583B (zh) 2011-09-29 2011-09-29 一种可分级视频编码的块级别层间帧内预测方法

Country Status (1)

Country Link
CN (1) CN102355583B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103716622B (zh) * 2012-09-29 2017-02-08 华为技术有限公司 用于图像处理的方法和装置
CN103716628B (zh) * 2012-09-29 2017-08-18 华为技术有限公司 编解码处理方法、编码器和解码器

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101662682A (zh) * 2008-07-09 2010-03-03 英特尔公司 视频编码技术
CN101674475A (zh) * 2009-05-12 2010-03-17 北京合讯数通科技有限公司 一种h.264/svc的自适应层间纹理预测方法
CN102148986A (zh) * 2011-03-24 2011-08-10 太原科技大学 基于自适应块压缩传感的渐进图像编码方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101662682A (zh) * 2008-07-09 2010-03-03 英特尔公司 视频编码技术
CN101674475A (zh) * 2009-05-12 2010-03-17 北京合讯数通科技有限公司 一种h.264/svc的自适应层间纹理预测方法
CN102148986A (zh) * 2011-03-24 2011-08-10 太原科技大学 基于自适应块压缩传感的渐进图像编码方法

Also Published As

Publication number Publication date
CN102355583A (zh) 2012-02-15

Similar Documents

Publication Publication Date Title
Cheng et al. Learning image and video compression through spatial-temporal energy compaction
US20200154104A1 (en) Apparatus for encoding and decoding image by skip encoding and method for same
CN101710993B (zh) 基于块的自适应超分辨率视频处理方法及系统
CN103501441B (zh) 一种基于人类视觉系统的多描述视频编码方法
CN104301724B (zh) 视频处理方法、编码设备和解码设备
US20150264353A1 (en) Adaptive intra-prediction encoding and decoding method
CN102710936B (zh) 用于视频压缩的高性能环路滤波器
US20070133891A1 (en) Method and device for intra prediction coding and decoding of image
CN1926876B (zh) 空间和时间可扩展编码的图像序列的编码和解码方法
CN104702950A (zh) 以帧内预测模式解码图像的方法
CN103096056B (zh) 矩阵编码方法与装置及解码方法与装置
CN101729892B (zh) 一种非对称立体视频编码方法
CN1719735A (zh) 编码源图像序列的方法和设备
CN111464815B (zh) 一种基于神经网络的视频编码方法及系统
CN102036062A (zh) 视频编码方法、装置及电子设备
CN108989802A (zh) 一种利用帧间关系的hevc视频流的质量估计方法及系统
Huang et al. Multi-hypothesis transform domain Wyner-Ziv video coding including optical flow
CN101002476A (zh) 用于编码和解码的方法以及用于视频编码的编码和解码装置
CN110677654A (zh) 高效视频编码标准低时延编码结构的量化参数级联方法
CN110913232B (zh) 一种tu划分模式的选择方法及装置、可读存储介质
CN100493191C (zh) 具有低复杂度噪声消减的视频编码器及视频编码方法
CN104780383B (zh) 一种3d‑hevc多分辨率视频编码方法
CN102355583B (zh) 一种可分级视频编码的块级别层间帧内预测方法
Hu et al. Complexity-guided slimmable decoder for efficient deep video compression
CN101360236B (zh) 一种Wyner-ziv视频编解码方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20160224

Address after: XIXIANGTANG district headquarters 530007 Nanning Road, the Guangxi Zhuang Autonomous Region No. 1 China ASEAN science and technology incubator base in a D7 building five floor

Patentee after: RUNJIAN COMMUNICATION CO., LTD.

Address before: 530004, Guangxi University, 100, University Road, the Guangxi Zhuang Autonomous Region, Nanning

Patentee before: Guangxi University

CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: Room 501, D7 Building, Phase I, China-ASEAN Science and Technology Business Incubation Base, No. 1 Headquarters Road, Xixiangtang District, Nanning City, Guangxi Zhuang Autonomous Region

Patentee after: Runjian Co., Ltd.

Address before: 530007 5th Floor, D7 Building, Phase I, China ASEAN Science and Technology Enterprise Incubation Base, No. 1 Headquarters Road, Xixiangtang District, Nanning City, Guangxi Zhuang Autonomous Region

Patentee before: RUNJIAN COMMUNICATION CO., LTD.