CN104602019A - 一种视频编码方法及装置 - Google Patents

Abstract

一种视频编码方法及装置，该方法包括：对待编码的初始分辨率视频图像进行下采样，生成1个或多个分辨率级的下采样视频图像；为各分辨率级的下采样视频图像分别进行参考帧决策，得到各分辨率级的下采样图像中每一图像帧的PU的最优参考帧；对初始分辨率视频图像进行参考帧决策时，将当前PU的下采样参考帧集合与当前参考帧列表中共同包含的参考帧纳入当前PU的参考帧候选集合中，并从参考帧候选集合中选择出当前PU的最优参考帧。采用本发明的方法及装置，可以在现有x265编码框架上节省50％的参考帧决策时间。

Description

一种视频编码方法及装置

技术领域

本申请涉及视频编码领域，尤其涉及一种视频编码方法及装置。

背景技术

在对视频图像进行帧间预测编码时，由于活动图像邻近帧中的景物存在着一定的相关性，因此可以将活动图像分成若干块或宏块，并设法搜索出每个块或宏块在邻近帧图像中的位置，并得出两者之间的空间位置的相对偏移量，得到的相对偏移量就是通常所指的运动矢量，得到运动矢量的过程被称为运动估计。

将运动矢量和经过运动匹配后得到的预测误差共同发送到解码端，在解码端按照运动矢量指明的位置，从已经解码的邻近参考帧图像中找到相应的块或宏块，和预测误差相加后就得到了块或宏块在当前帧中的位置。

通过运动估计可以去除视频图像的帧间冗余度，使得视频传输的比特数大为减少。因此，运动估计是视频编码系统中的一个重要组成部分。一般的运动估计方法如下：设t时刻的帧图像为当前帧f(x,y)，时刻t′的帧图像为参考帧f′(x,y)，参考帧在时间上可以超前或者滞后于当前帧，如图1所示，当t′<t时，称之为后向运动估计，当t′>t时，称之为前向运动估计。当在参考帧t′中搜索到当前帧t中的块的最佳匹配时，可以得到相应的运动场d(x；t,t±△t)，即可得到当前帧的运动矢量。

为了提高预测精度，H.264中可从一组前面或后面已编码图像中选出一个或两个与当前帧最匹配的图像作为帧间编码的参考图像(也可以称为参考帧)，这将使帧间预测的复杂度大为增加，但多次比较的结果，使匹配后的预测精度显著改进。H.264中最多可从15个参考图像中选出最佳的匹配图像，并将参考图像分为两个参考图像列表(也可称为参考帧列表)，分别记作：List0和List1。

对于P片中帧间编码宏块和宏块分割的预测可从参考帧列表“List0”中选择参考图像；对于B片中的帧间编码宏块和宏块分割的预测，可从参考帧列表“List0”和“List1”中选择参考图像。

List0中：将基于POC(Picture Order Count，图像序列号)的最近前向图像标为index0，接着是其余前向图像(以POC递增顺序)，及后向图像(以POC递增顺序)。

List1中：将最近后向图像标为index0，接着是其余后向图像(以POC递增顺序)，及前向图像(以POC递增顺序)。

P、B片的预测方式如图2所示。

例如，如表1所示，一个H.264解码器存储了6幅短期参考图像，其POC分别为：123，125，126，128，129和130。当前图像的POC为127。所有6幅短期参考图像在list0和list1中都标为“用作参考”。

Index	List0	List1
			0	126	128
1	125	129
			2	123	130
3	128	126
			4	129	125
5	130	123

表1短期缓冲索引

HEVC(High Efficiency Video Coding，高效视频编码)同样继承了H.264的多参考帧方案，从一组前面或后面已编码图像中选出一个或两个与当前帧最匹配的图像作为帧间编码的参考图像，这将使帧间预测的复杂度大为增加。

近年来，随着互联网和硬件设备的发展，人们制作视频的成本愈来愈低，对视频的分享和访问需求日益增强。视频的分辨率愈来愈大，高清视频(分辨率为1920×1080，记作1080p)甚至超高清视频(分辨率为3840×2160，记作4K)被越来越多地制作、传播和播放。这一趋势将加快HEVC的视频编码领域的应用。由于HEVC采用递归的方式对编码块进行划分，如果继续沿用H.264高复杂度的参考帧决策方案，会带来编码速度的指数级下降。

发明内容

本申请所要解决的技术问题是，克服现有技术的不足，提供一种可以提高HEVC视频编码速度的视频编码方法及装置。

为了解决上述问题，本申请提供一种视频编码方法，该方法包括：

对待编码的初始分辨率视频图像进行下采样，生成一个或多个分辨率级的下采样视频图像；

为各分辨率级的下采样视频图像分别进行参考帧决策，得到各分辨率级的下采样图像中每一图像帧的PU的最优参考帧；

对初始分辨率视频图像进行参考帧决策时，将当前PU的下采样参考帧集合与当前参考帧列表中共同包含的参考帧纳入当前PU的参考帧候选集合中，并从参考帧候选集合中选择出当前PU的最优参考帧；

其中，所述当前PU的下采样参考帧集合中包括：当前PU对应的各分辨率级的下采样图像中的PU的最优参考帧；

所述当前PU对应的各分辨率级的下采样图像的PU包括：各下采样视频图像中，与当前PU所占的图像区域重合或部分重合的PU。

此外，对初始分辨率视频图像进行参考帧决策时，还将当前PU的相邻块的参考帧纳入所述当前PU的参考帧候选集合中。

此外，为各分辨率级的下采样视频图像分别进行参考帧决策时，以绝对差值和为标准计算PU在各候选参考帧中的匹配块的编码代价值，并选择编码代价值最小的匹配块所对应的候选参考帧作为对应PU的最优参考帧。

此外，为初始分辨率视频图像进行参考帧决策时，以率失真代价为标准计算PU在参考帧候选集合中各候选参考帧中的匹配块的编码代价值，并选择编码代价值与λ×R(ref)之和最小的匹配块所对应的候选参考帧作为对应PU的最优参考帧；

其中，λ为拉格朗日常数，R(ref)表示参考帧号ref占用的比特数目。

此外，进行所述下采样的初始分辨率视频图像为视频图像的原始帧。

本发明还提供一种视频编码方法，该方法包括：

为待编码视频图像进行参考帧决策时，将当前PU的相邻块的参考帧作为候选参考帧，并从中选择出当前PU的最优参考帧。

此外，为待编码视频图像进行参考帧决策时，以率失真代价为标准计算当前PU在各候选参考帧中的匹配块的编码代价值，并选择编码代价值与λ×R(ref)之和最小的匹配块所对应的候选参考帧作为当前PU的最优参考帧；

其中，λ为拉格朗日常数，R(ref)表示参考帧号占用的比特数目。

本发明还提供一种视频编码装置，该装置中包含：下采样单元、预测单元；其中：

所述下采样单元，用于对待编码的初始分辨率视频图像进行下采样，生成一个或多个分辨率级的下采样视频图像；

所述预测单元，用于为各分辨率级的下采样视频图像分别进行参考帧决策，得到各分辨率级的下采样图像中每一图像帧的PU的最优参考帧；

所述预测单元，还用于在对初始分辨率视频图像进行参考帧决策时，将当前PU的下采样参考帧集合与当前参考帧列表中共同包含的参考帧纳入当前PU的参考帧候选集合中，并从参考帧候选集合中选择出当前PU的最优参考帧；

其中，所述当前PU的下采样参考帧集合中包括：当前PU对应的各分辨率级的下采样图像中的PU的最优参考帧；

所述当前PU对应的各分辨率级的下采样图像的PU包括：各下采样视频图像中，与当前PU所占的图像区域重合或部分重合的PU。

此外，所述预测单元在对初始分辨率视频图像进行参考帧决策时，还将当前PU的相邻块的参考帧纳入所述当前PU的参考帧候选集合中。

本发明还提供一种视频编码装置，该装置中包含：预测单元；其中：

所述预测单元，用于在为待编码视频图像进行参考帧决策时，将当前PU的相邻块的参考帧作为候选参考帧，并从中选择出当前PU的最优参考帧。

综上所述，本发明提出了一种可大幅降低运算量的快速多参考帧决策方案，将该方案应用于视频编码系统时，通过下采样帧的编码数据获得当前编码块的候选参考帧，在不牺牲帧间预测效果的前提下减少了候选参考帧的数量，提高了参考帧决策的速度；此外，本发明还可以通过当前编码块的相邻预测块获得当前编码块的候选参考帧，进一步提高了参考帧决策的预测准确度。采用本发明的方法及装置，可以在现有x265编码框架上节省50％的参考帧决策时间。

附图说明

图1是现有技术中前向和后向运动估计示意图；

图2是H.264协议中P片与B片的预测方式示意图；

图3是本发明第一方法实施例的视频编码方法流程图；

图4为采用隔点抽样的方式进行下采样的示意图；

图5是HEVC的运动信息的空域候选位置示意图；

图6是本发明第二方法实施例的视频编码方法流程图；

图7是本发明的视频编码装置第一实施例的结构示意图；

图8是本发明的视频编码装置第二实施例的结构示意图。

具体实施方式

本发明主要包含两方面内容：层级参考帧决策，相邻块参考帧决策。

上述层级参考帧决策是指，对待编码的初始分辨率视频图像进行下采样，生成1个或多个分辨率级的下采样视频图像；为各分辨率级的下采样图像中的PU(Prediction Unit，预测单元)分别进行参考帧决策，得到各分辨率级的下采样图像中每一图像帧的PU的参考帧；在对初始分辨率视频图像进行参考帧决策时，将各分辨率级的下采样图像中与当前PU所对应的图像区域重合或部分重合的各分辨率级的下采样图像中的PU的最优参考帧的集合与当前PU的参考帧列表(List0和List1)的交集作为参考帧候选集合，进行参考帧的决策。

上述相邻块参考帧决策是指，在对视频图像进行参考帧决策时，将当前PU的相邻块的参考帧集合作为参考帧候选集合，进行参考帧的决策。

下面将结合附图对本发明的实施例进行详细描述。

第一方法实施例

图3是本发明第一方法实施例的视频编码方法流程图；如图3所示，该方法包括：

步骤301：对待编码的初始分辨率视频图像(L₀级视频图像)序列进行下采样，生成各分辨率级的下采样视频图像：L₁，…，L_D级视频图像；D为大于等于1的整数；

本步骤中，可以采用不同的下采样比值(即源分辨率与目标分辨率的比值)进行下采样。下采样比值为Ds:1时，表示每Ds个像素采样1个像素，Ds为大于1的整数。

本实施例中，为了更好地保留视频的原有特性(例如，视频的纹理特征)，令Ds＝2，即采用隔点抽样的方式进行下采样，如图4所示。

此外，为了加快运算的速度，本实施例中仅对原始帧作下采样处理，对重构帧不作处理。

步骤302：对各级下采样视频图像(L₁～L_D级视频图像)进行参考帧决策，得到各级下采样视频图像中各PU(可称为下采样图像PU)的参考帧；

具体地说，对于L_d(1≤d≤D)级视频图像中的各PU，可以采用如下方式进行参考帧决策：

通过运动估计得到L_d级视频图像中的当前PU在参考帧列表中的每一参考帧中的匹配块，并计算各匹配块的编码代价值(Cost)，选择编码代价值最小的匹配块所对应的参考帧作为该PU最优参考帧；

设当前参考帧列表中的参考帧包括：ref₀,ref₁,ref₂.......ref_n；

每个参考帧中的匹配块的编码代价值分别为：Cost₀,Cost₁,Cost₂....Cost_n；

则L_d级视频图像中当前PU的参考帧为：

$\mathrm{ref}=\underset{\mathrm{ref}=\mathrm{0,1,2}...n}{\mathrm{ArgMin}}\left({\mathrm{Cost}}_{\mathrm{ref}}\right);$   (公式1)

即，将编码代价值最小的匹配块(最优匹配块)所对应的参考帧确定为最优参考帧。

本实施例中，对于L_d(1≤d≤D)级视频图像，以绝对差值和(SAD)为标准计算上述各匹配块的编码代价值(Cost)：

$\mathrm{SAD}(s,c\left(\mathrm{MV}\right))=\underset{x=1,y=1}{\overset{\mathrm{Bx},\mathrm{By}}{\mathrm{\&Sigma;}}}\left|s\right[x,y]-c[x-{\mathrm{MV}}_x,y-{\mathrm{MV}}_y\left]\right|;$   (公式2)

其中，s是当前进行编码的原始数据，c是已经编码重建的用于进行运动补偿的参考帧的数据；Bx,By为当前预测块的宽高信息；MV为候选的运动矢量；MVx为运动矢量的x坐标；MVy为运动矢量的y坐标。

也就是说，对于L_d(1≤d≤D)级视频图像中的各PU，采用绝对差值和(SAD)最小原则选择当前PU的最优匹配块，进而选择当前PU的最优参考帧。

步骤303：对初始分辨率视频图像(L₀级视频图像)中的各PU进行参考帧决策前，首先确定各PU在各下采样视频图像中的对应PU，以及各对应PU的参考帧；

具体地说，将L₀级视频图像中的当前PU记作PU₀，PU0在各下采样视频图像中的对应PU包括：在下采样视频图像中，与PU0所占区域重合或部分重合的下采样视频图像PU。

PU₀在各下采样视频图像中可包含多个对应PU，记作下采样PU集合P_b：

P_b＝{PU_b1,…,PU_bn}；集合P_b中的各PU_bi可以来自相同或不同的下采样分辨率级，1≤i≤n，n为大于等于1的整数。

集合P_b中不同的PU_bi可以对应相同或不同参考帧，可以将集合P_b所对应的参考帧集合记作下采样参考帧集合R_b：

R_b＝{R_b1,…,R_bm}，m为大于等于1且小于等于15的整数。

步骤304：将初始分辨率视频图像(L₀级视频图像)中的各PU的下采样参考帧集合与参考帧列表中共同包含的参考帧纳入对应PU的参考帧候选集合中；

具体地说，将L₀级视频图像中的当前PU记作PU₀，PU₀的下采样参考帧集合为R_b＝{R_b1,…,R_bm}；参考帧列表List0＝{ref₀₁,…ref_0k}，参考帧列表List1＝{ref₁₁,…ref_1j}，k和j为正整数，且k+j小于等于15；则，PU₀的参考帧候选集合C₀：

C₀＝R_b∩(List0∪List1)；其中，∩表示交集，∪表示并集。

也就是说将既包含在R_b中又包含在List0中的参考帧，以及既包含在R_b中又包含在List1中的参考帧纳入PU₀的参考帧候选集合C₀中。

具体实现时，也可以先将参考帧列表List0和List1中的各参考帧全部标记为不用搜索，然后使用R_b中包含的参考帧与参考帧列表List0和List1中包含的参考帧进行对比，如果参考帧列表List0和List1中包含的参考帧同时包含在R_b中，则将参考帧列表中对应参考帧的标记更新为需要搜索。

步骤305：对初始分辨率视频图像(L₀级视频图像)中的各PU，使用其相邻块的参考帧更新该PU的参考帧候选集合，即将各PU相邻块的参考帧也纳入对应PU的参考帧候选集合；

图5是HEVC的运动信息的空域候选位置示意图。

本实施例中可以采用如图5所示的{a₀，a₁，b₀，b₁，b₂}作为PU的相邻块，并将各相邻块的参考帧纳入对应PU的参考帧候选集合。

具体地说，将L₀级视频图像中的当前PU记作PU₀，PU₀的参考帧候选集合C₀＝R_b∩(List0∪List1)；将PU₀的相邻块的参考帧所对应的集合记作相邻块参考帧集合R_n＝{R_n1,…,R_ns}，s为小于等于5的整数；

则：C₀＝{R_b∩(List0∪List1)}∪R_n；

也就是说在步骤304的基础上，进一步将包含在R_n中的参考帧纳入PU₀的参考帧候选集合C₀中。

具体实现时，可以使用PU的相邻块的参考帧与参考帧列表List0和List1中包含的参考帧进行对比，如果参考帧列表List0和List1中包含的参考帧同时是PU的相邻块的参考帧，则将参考帧列表中对应参考帧的标记更新为需要搜索。

将相邻块的参考帧纳入参考帧候选集合可以减少丢失最优参考帧的几率。

本步骤为可选步骤。

步骤306：使用初始分辨率视频图像(L₀级视频图像)中各PU的参考帧候选集合进行参考帧决策，得到各PU的最优参考帧；

本步骤中，对于L₀级视频图像采用率失真代价值计算各匹配块的编码代价值，即以率失真代价最小原则选择最优匹配块；并将各匹配块的编码代价值结合参考帧号所占用比特数来选择最优参考帧。

具体地说，将L₀级视频图像中的当前PU记作PU₀，PU₀的参考帧候选集合C₀＝{ref₀,…ref_n}，n为小于15的整数；

通过运动估计得到PU₀在参考帧候选集合C₀中的每一参考帧中的匹配块，并计算各匹配块的编码代价值(Cost)：Cost₀,Cost₁,Cost₂....Cost_n；

则PU₀的参考帧为：

$\mathrm{ref}=\underset{\mathrm{ref}=\mathrm{0,1,2}...n}{\mathrm{ArgMin}}({\mathrm{Cost}}_{\mathrm{ref}}+\mathrm{\&lambda;}\&times;R\left(\mathrm{ref}\right));$   (公式3)

其中，R(ref)表示参考帧号占用的比特数目；λ为拉格朗日常数。

即，将编码代价值与λ×R(ref)之和最小的参考帧确定为最优参考帧。

本实施例中，对于L₀级视频图像，以率失真代价值J为标准计算上述各匹配块的编码代价值(Cost)：

J(MV,λ)＝SAD(s,c(MV))+λ×R(MV-PMV)；  (公式4)

其中，MV为候选的运动矢量，λ为拉格朗日常数，PMV为中值预测矢量，R(MV-PMV)代表了运动矢量差分编码可能耗费的比特数。

步骤307：使用初始分辨率视频图像(L₀级视频图像)中各PU的参考帧进行帧间编码，并进行后续的视频编码处理。

第二方法实施例

图6是本发明第二方法实施例的视频编码方法流程图；如图6所示，该方法包括：

步骤601：对待编码视频图像中的各PU，使用其相邻块的参考帧确定该PU的参考帧候选集合，即将各PU相邻块的参考帧纳入对应PU的参考帧候选集合；

本实施例中可以采用如图5所示的{a₀，a₁，b₀，b₁，b₂}作为PU的相邻块，并将各相邻块的参考帧纳入对应PU的参考帧候选集合。

具体实现时，可以先将参考帧列表List0和List1中的各参考帧全部标记为不用搜索，然后使用PU的相邻块的参考帧与参考帧列表List0和List1中包含的参考帧进行对比，如果参考帧列表List0和List1中包含的参考帧同时是PU的相邻块的参考帧，则将参考帧列表中对应参考帧的标记更新为需要搜索。

步骤602：使用待编码视频图像中各PU的参考帧候选集合进行参考帧决策，得到各PU的最优参考帧；

本步骤中，采用率失真代价值计算各匹配块的编码代价值，即以率失真代价最小原则选择最优匹配块；并将各匹配块的编码代价值结合参考帧号所占用比特数来选择最优参考帧。

具体地说，将待编码视频图像中的当前PU记作PU₀，PU₀的参考帧候选集合C₀＝{ref₀,…ref_n}，n为小于15的整数；

通过运动估计得到PU₀在参考帧候选集合C₀中的每一参考帧的匹配块，并计算各匹配块的编码代价值(Cost)：Cost₀,Cost₁,Cost₂....Cost_n；

则PU₀的参考帧为：

$\mathrm{ref}=\underset{\mathrm{ref}=\mathrm{0,1,2}...n}{\mathrm{ArgMin}}({\mathrm{Cost}}_{\mathrm{ref}}+\mathrm{\&lambda;}\&times;R\left(\mathrm{ref}\right));$

其中，R(ref)表示参考帧号占用的比特数目；λ为拉格朗日常数。

即，将编码代价值与λ×R(ref)之和最小的参考帧确定为最优参考帧。

本实施例中，以率失真代价值J为标准计算上述各匹配块的编码代价值(Cost)：

J(MV,λ)＝SAD(s,c(MV))+λ×R(MV-PMV)；

其中，MV为候选的运动矢量，λ为拉格朗日常数，PMV为中值预测矢量，R(MV-PMV)代表了运动矢量差分编码可能耗费的比特数。

步骤603：使用待编码视频图像中各PU的参考帧进行帧间编码，并进行后续的视频编码处理。

装置第一实施例

图7是本发明的视频编码装置第一实施例的结构示意图；如图7所示，该装置中包含：下采样单元，预测单元；其中：

下采样单元，用于对待编码的初始分辨率视频图像进行下采样，生成一个或多个分辨率级的下采样视频图像；

预测单元，用于为各分辨率级的下采样视频图像分别进行参考帧决策，得到各分辨率级的下采样图像中每一图像帧的PU的最优参考帧；

预测单元，还用于在对初始分辨率视频图像进行参考帧决策时，将当前PU的下采样参考帧集合与当前参考帧列表中共同包含的参考帧纳入当前PU的参考帧候选集合中，并从参考帧候选集合中选择出当前PU的最优参考帧；

其中，所述当前PU的下采样参考帧集合中包括：当前PU对应的各分辨率级的下采样图像中的PU的最优参考帧；

所述当前PU对应的各分辨率级的下采样图像的PU包括：各下采样视频图像中，与当前PU所占的图像区域重合或部分重合的PU。

此外，预测单元在对初始分辨率视频图像进行参考帧决策时，还将当前PU的相邻块的参考帧纳入所述当前PU的参考帧候选集合中。

装置第二实施例

图8是本发明的视频编码装置第二实施例的结构示意图；如图8所示，该装置中包含：预测单元；其中：

预测单元，用于在为待编码视频图像进行参考帧决策时，将当前PU的相邻块的参考帧作为候选参考帧，并从中选择出当前PU的最优参考帧。

综上所述，本发明提出了一种可大幅降低运算量的快速多参考帧决策方案，将该方案应用于视频编码系统时，通过下采样帧的编码数据获得当前编码块的候选参考帧，在不牺牲帧间预测效果的前提下减少了候选参考帧的数量，提高了参考帧决策的速度；此外，本发明还可以通过当前编码块的相邻预测块获得当前编码块的候选参考帧，进一步提高了参考帧决策的预测准确度。采用本发明的方法及装置，可以在现有x265编码框架上节省50％的参考帧决策时间。

Claims (10)

1.一种视频编码方法，其特征在于，该方法包括：

对待编码的初始分辨率视频图像进行下采样，生成一个或多个分辨率级的下采样视频图像；

为各分辨率级的下采样视频图像分别进行参考帧决策，得到各分辨率级的下采样图像中每一图像帧的PU的最优参考帧；

对初始分辨率视频图像进行参考帧决策时，将当前PU的下采样参考帧集合与当前参考帧列表中共同包含的参考帧纳入当前PU的参考帧候选集合中，并从参考帧候选集合中选择出当前PU的最优参考帧；

其中，所述当前PU的下采样参考帧集合中包括：当前PU对应的各分辨率级的下采样图像中的PU的最优参考帧；

所述当前PU对应的各分辨率级的下采样图像的PU包括：各下采样视频图像中，与当前PU所占的图像区域重合或部分重合的PU。

2.根据权利要求1所述的方法，其特征在于，

对初始分辨率视频图像进行参考帧决策时，还将当前PU的相邻块的参考帧纳入所述当前PU的参考帧候选集合中。

3.根据权利要求1所述的方法，其特征在于，

为各分辨率级的下采样视频图像分别进行参考帧决策时，以绝对差值和为标准计算PU在各候选参考帧中的匹配块的编码代价值，并选择编码代价值最小的匹配块所对应的候选参考帧作为对应PU的最优参考帧。

4.根据权利要求1所述的方法，其特征在于，

为初始分辨率视频图像进行参考帧决策时，以率失真代价为标准计算PU在参考帧候选集合中各候选参考帧中的匹配块的编码代价值，并选择编码代价值与λ×R(ref)之和最小的匹配块所对应的候选参考帧作为对应PU的最优参考帧；

其中，λ为拉格朗日常数，R(ref)表示参考帧号ref占用的比特数目。

5.根据权利要求1所述的方法，其特征在于，

进行所述下采样的初始分辨率视频图像为视频图像的原始帧。

6.一种视频编码方法，其特征在于，该方法包括：

为待编码视频图像进行参考帧决策时，将当前PU的相邻块的参考帧作为候选参考帧，并从中选择出当前PU的最优参考帧。

7.根据权利要求6所述的方法，其特征在于，

为待编码视频图像进行参考帧决策时，以率失真代价为标准计算当前PU在各候选参考帧中的匹配块的编码代价值，并选择编码代价值与λ×R(ref)之和最小的匹配块所对应的候选参考帧作为当前PU的最优参考帧；

其中，λ为拉格朗日常数，R(ref)表示参考帧号占用的比特数目。

8.一种视频编码装置，其特征在于，该装置中包含：下采样单元和预测单元；其中：

所述下采样单元，用于对待编码的初始分辨率视频图像进行下采样，生成一个或多个分辨率级的下采样视频图像；

所述预测单元，用于为各分辨率级的下采样视频图像分别进行参考帧决策，得到各分辨率级的下采样图像中每一图像帧的PU的最优参考帧；

所述预测单元，还用于在对初始分辨率视频图像进行参考帧决策时，将当前PU的下采样参考帧集合与当前参考帧列表中共同包含的参考帧纳入当前PU的参考帧候选集合中，并从参考帧候选集合中选择出当前PU的最优参考帧；

其中，所述当前PU的下采样参考帧集合中包括：当前PU对应的各分辨率级的下采样图像中的PU的最优参考帧；

所述当前PU对应的各分辨率级的下采样图像的PU包括：各下采样视频图像中，与当前PU所占的图像区域重合或部分重合的PU。

9.根据权利要求8所述的装置，其特征在于，

所述预测单元在对初始分辨率视频图像进行参考帧决策时，还将当前PU的相邻块的参考帧纳入所述当前PU的参考帧候选集合中。

10.一种视频编码装置，其特征在于，该装置中包含：预测单元；其中：

所述预测单元，用于在为待编码视频图像进行参考帧决策时，将当前PU的相邻块的参考帧作为候选参考帧，并从中选择出当前PU的最优参考帧。