CN104717511B - 视频编码或解码的方法及装置 - Google Patents
视频编码或解码的方法及装置 Download PDFInfo
- Publication number
- CN104717511B CN104717511B CN201410652880.0A CN201410652880A CN104717511B CN 104717511 B CN104717511 B CN 104717511B CN 201410652880 A CN201410652880 A CN 201410652880A CN 104717511 B CN104717511 B CN 104717511B
- Authority
- CN
- China
- Prior art keywords
- block
- sub
- background
- current
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 44
- 238000005192 partition Methods 0.000 claims abstract description 45
- 230000003044 adaptive effect Effects 0.000 claims abstract description 24
- 241000208340 Araliaceae Species 0.000 claims description 4
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims description 4
- 235000003140 Panax quinquefolius Nutrition 0.000 claims description 4
- 235000008434 ginseng Nutrition 0.000 claims description 4
- 241001269238 Data Species 0.000 claims 2
- 238000004458 analytical method Methods 0.000 claims 1
- 238000009795 derivation Methods 0.000 claims 1
- 238000010586 diagram Methods 0.000 description 5
- 239000011159 matrix material Substances 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 238000012544 monitoring process Methods 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000011664 signaling Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000009897 systematic effect Effects 0.000 description 1
Landscapes
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
本发明提供一种视频编码或解码方法，使用自适应背景残差预测，该方法包括：在当前图像中接收相应于当前编码区块的输入数据；将该当前编码区块分割为一或多个编码子区块；根据相应于该当前编码区块的运动矢量定位参考图像中的参考子区块以用于该当前编码区块的当前子区块；定位背景图像中的背景参考子区块以用于该参考子区块，以及根据选择决定而选择第一预测因子或第二预测因子以编码或解码该当前子区块，其中，该第一预测因子对应于该参考子区块，且第二预测因子是根据该参考子区块和该背景图像推导的。本发明提供的视频编码或解码方法可有效地适用于图像中包括混合前景和背景的区块的情形，提高编解码效率。
Description
技术领域
发明有关于视频编码。更特别地，本发明有关于使用基于背景残差信号预测的视频编码。
背景技术
对于由静态摄像头捕捉的视频序列，视频内容通常包括一些背景区域。例如，监测和远程会议序列经常显示此种类型的视频。背景信息可用于视频编码以减少视频序列的所需比特率。例如，背景预测是采用参考图像中的类似背景数据的一种发展中的技术。此技术利用基于全局静态背景的预测以实现更有效的预测。由于产生的或者选择的背景图像为静态的并且不需要更新或者只需要不频繁地更新，因此可以高质量地产生或编码背景图像而不消耗很高的比特率。然后，高质量背景图像可以为背景图像中具有相似背景区域的后续图像提供高质量的参考。
采用背景预测的视频编码标准的一个实例是由中国音频和视频编码标准工作组发展的音频和视频编码标准(audio and video coding standard,AVS)。背景预测用于AVS的监测简介(surveillance profile)中且AVS的监测简介的简短概要如下所述。
可将I图像(I-picture)标记为G图像(G-picture)并存储在参考图像缓存中以提供后续帧的全局背景参考(global background reference)。在G图像的帮助下，后续的P图像(P-picture)可选择使用G图像作为参考图像列表中的最近参考，或者另一图像(即，S图像(S-picture))可选择G图像作为其具有零运动矢量(zero motion vector)的唯一参考图像.
在基于AVS的系统的编码器端,可从原始输入帧中选择或从一组输入帧中产生G图像。在编码器和解码器两端两端，重建的G图像存储在G图像参考缓存中。在每个当前图像的编码和解码过程中，可选择G图像以替换参考图像列表中的最近参考图像。
在本揭露中，将用于当前区块的匹配区块(matched block)定义为在背景图像中与该当前区块之间产生较小绝对差值的一个区块。将当前区块的对应区块定义为在背景图像中位于相同图像位置的一个区块。将当前区块的参考区块定义为在参考图像中由相应于当前区块的运动矢量指示的区块。
上述的AVS系统使用背景参考预测，其中，对于在高质量背景图像中具有完全匹配对应区块的“纯背景区块(pure background block)”，背景参考预测可有效地工作。然而，对于“纯前景区块(pure foreground block)”,在背景图像中几乎不存在任何匹配的对应区块。因此，背景参考预测将不能有助于改进前景区块的编码效率且因此不应被选择。
在AVS系统中，对于“混合前景和背景区块(hybrid-foreground-and-backgroundblock)”,仅有一部分区块与背景图像中的其对应区块相匹配。因此，由于不匹配的部分不能被有效地预测，背景参考预测也不是非常有效。“混合前景和背景区块”经常存在于前景区域和背景区域之间的边界区域。
因此需要开发对于混合前景和背景区块也能有效工作的技术。
发明内容
有鉴于此，本发明提供一种视频编码或解码方法及装置。
本发明提供一种视频编码或解码方法，使用自适应背景残差预测，该方法包括：在当前图像中接收相应于当前编码区块的输入数据；将该当前编码区块分割为一或多个编码子区块；根据相应于该当前编码区块的运动矢量定位参考图像中的参考子区块以用于该当前编码区块的当前子区块；定位背景图像中的背景参考子区块以用于该参考子区块，其中，该背景参考子区块是第一个共位位置区块—该参考子区块在背景图像中的共位位置区块；以及根据选择决定而选择第一预测因子或第二预测因子以编码或解码该当前子区块，其中，该第一预测因子对应于该参考子区块，且第二预测因子是根据该参考子区块、该背景参考子区块及该背景图像的背景当前子区块推导的。
本发明另提供一种视频编码或解码装置，该装置使用自适应背景残差预测，且该装置包括：在当前图像中接收相应于当前编码区块的输入数据的电路；将该当前编码区块分割为一或多个编码子区块的电路；根据相应于该当前编码区块的运动矢量定位参考图像中的参考子区块以用于该当前编码区块的当前子区块的电路；定位背景图像中的背景参考子区块以用于该参考子区块的电路，其中，该背景参考子区块是第一个共位位置区块—该参考子区块在背景图像中的共位位置区块；以及根据选择决定而选择第一预测因子或第二预测因子以编码或解码该当前子区块，其中，该第一预测因子对应于该参考子区块，且第二预测因子是根据该参考子区块、该背景参考子区块及该背景图像的背景当前子区块推导的。
本发明还提供一种视频编码或解码方法，使用自适应背景残差预测，该方法包括：在当前图像中接收相应于当前编码区块的输入数据；将该当前编码区块分割为一或多个编码子区块；根据相应于该当前编码区块的运动矢量定位参考图像中的参考子区块以用于该当前编码区块的当前子区块；定位背景图像中的背景参考子区块以用于该参考子区块，其中，该背景参考子区块是第一个共位位置区块—该参考子区块该参考子区块在背景图像中的共位位置区块；定位该背景图像中的背景当前子区块，其中，该背景当前子区块是第二个共位位置区块—该当前子区块在背景图像中的共位位置区块；根据该参考子区块、该背景参考子区块以及该背景当前子区块计算用于该当前子区块的预测因子；以及使用该预测因子编码或解码该当前子区块。
本发明提供的视频编码或解码方法可有效地适用于图像中包括混合前景和背景的区块的情形，提高编解码效率。
附图说明
图1为显示相应于传统背景预测的问题的示意图。
图2为显示背景残差预测技术过程的简化示意图。
图3为根据本发明一个实施例的自适应背景残差预测过程的流程图。
图4为根据本发明的背景残差预测的示例模块示意图。
图5为根据本发明的实施例包括自适应背景残差预测的视频编码或解码系统的流程图。
具体实施方式
如上所述，背景预测对于纯背景区域中的区块提供有效的压缩。然而，对于混合前景和背景区块，由于仅有部分区块可与背景图像中的区块相匹配，传统的背景预测不能实现有效的预测。图1中显示了相应于传统背景预测的问题。区块112对应于参考图像110中的区块，且区块122对应于当前图像120中的区块。区域132和134对应于两个背景区域。如果区块112不位于前进区域和背景区域(以参考132和134表示)之间的边界，则区块112将是区块122的匹配区块。因此，当前区块122在参考图像中不能找到好的匹配区块。
因此，本发明的实施例揭露一种背景残差预测技术。图2为显示背景残差预测技术过程的简化示意图。方块210、220及230分别对应于背景图像、参考图像及当前图像。区块234为当前图像(230)中的当前区块，且区块222为参考图像(220)中的参考区块。用于区块234和区块222的背景图像中的对应区块分别以区块214和的区块212指示。在本揭露中，区块212也称为背景参考区块，而区块214称为背景当前区块(background current block)。用于每个区块的像素值以具有局部坐标(local coordinate)x和y的矩阵表示。当前区块(234)的像素值以CurrentMatrix[x,y]表示，且参考区块(222)的像素值以RefMatrixFw[x,y]表示。用于当前区块和参考区块的背景图像中的对应区块分别表示为BgcMatrix[x,y]和BgrMatrix[x,y]。如图2所示，参考残差对应于(RefMatrixFw[x,y]-BgrMatrix[x,y])，且当前残差对应于(CurrentMatrix[x,y]-BgcMatrix[x,y])。当使用参考的残差预测当前残差时，用于当前区块的预测因子(predictor)是从参考区块、背景参考区块以及北京当前区块中确定的。
背景图像可从解码的图像中选择或者从一组解码的图像中产生。用于背景的残差预测的本发明可使用任何的已知技术来产生背景图像。
根据本发明的一个实施例的自适应背景残差预测的流程显示在下列伪代码中：
对于矩阵中的每个像素
其中，PredMatrixFw[x,y]对应于当前区块的预测因子,且BgDiffPredThreshold对应于用于根据等式(1)和(2)选择预测因子的阈值。根据等式(1)的预测因子对应于用于参考区块的背景残差(即RefMatrixFw[x,y]-BgrMatrix[x,y])和用于当前区块的背景残差(即CurrentMatrix[x,y]-BgcMatrix[x,y])的和值。然后在从0至25的范围内截断和值。尽管使用特定形式(即RefMatrixFw[x,y]-BgrMatrix[x,y]-BgcMatrix[x,y])作背景残差预测的实例，也可使用其他形式。例如，可使用以前权重因子和线性组合。
背景残差预测过程也可以使用图3中的示例流程图来进行描述。图3为根据本发明一个实施例的自适应背景残差预测过程的流程图。根据本发明的多个的实施例允许将每个当前编码区块划分为多个子区块且逐个子区块地对当前编码区块进行处理。子区块可以为MxN区块，其中N和N为正整数。使C为当前编码子区块的采样矩阵(sample matrix)，P为C的预测子区块，R为用于当前子区块C的参考区块中的采样矩阵，BR为对应于R的背景图像中的子区块，以及BC为对应于C的背景图像中的子区块。
需要决定阈值和子区块尺寸以用于背景残差预测。编码器和解码器可使用预设值或者包括视频流中的区块尺寸和阈值。可以根据系统参数决定阈值。例如，对于具有4×4的子区块尺寸的系统可将阈值设置为40。又例如，当子区块尺寸为1x1时可将阈值设置为255。也可以使用一些典型的视频测试数据以凭经验确定阈值。也可以将阈值确定为性能与编码/解码时间之间的折中。此外，当通过背景残差预测致能标志进行表示时，系统可以自适应地致能背景残差预测。当编码区块的宽度和高度大于8时可以在编码区块级别对标志进行发信(signal)。
一旦确定了阈值和子区块的尺寸，提供当前编码区块以用于背景残差预测。在步骤310中提供来自当前编码区块的子区块和它的参考子区块。通过获取位于C的运动矢量指向的位置的子区块获取当前编码子区块C的参考子区块R。在编码器中，可以使用图像域或背景残差域中的运动估计(ME)来推导运动矢量。当在图像域中执行ME时，ME分别以一或多个参考图像中的一或多个参考区块与当前编码区块相匹配。当在背景残差域中执行ME时，根据背景参考残差和背景当前残差执行ME。背景参考残差对应于参考图像与背景图像之间的差值。背景当前残差对应于当前图像与背景图像之间的差值。在这种情形中，ME以背景参考残差匹配对应于当前编码区块的背景当前残差中的当前区块以寻找对于当前区块具有最佳匹配的区块。在解码器端，从视频流中将运动矢量解码为使用传统的ME的编码系统。在步骤320中检查背景残差预测致能标志。如果标志指示未致能背景残差预测(即”否”路径)，如步骤360中所示将预测因子P设置为R。
如果标志指示已致能背景残差预测(即”是”路径)，如步骤330中所示分别获取用于C和R的背景图像中的对应子区块(BC和BR)。如步骤340中所示，检查R和BR之间的差值以确定是否(R-BR)的任意绝对值大于阈值。如果(R-BR)的任意绝对值大于阈值(即“是”路径)，如步骤360中所示，将预测因子设置为R，即P＝R。否则(即“否”路径)，如步骤350中所示，将预测因子设置为P＝clip(0,MaxValue,R-BR+BC)。在根据步骤350或步骤360选择预测因子之后，如步骤370中所示，该流程检查是否当前子区块C为当前编码区块中的最近子区块。如果当前子区块C是当前编码区块中的最近子区块(即“是”路径)，结束该流程。否则(即“否”路径)，流程进行至步骤310以用于下一个子区块。在步骤350中，clip(x,y,z)对应于将z的值的截断在从x到y的范围内的截断函数。MaxValue对应于用于视频数据的最大有效值。
在图3的示例流程图中，对应于步骤350或步骤360的有关于用于当前子区块的预测因子的选择的决定是根据是否(R-BR)的任意绝对值大于阈值。然而，也可使用对应于步骤350或步骤360的用于当前子区块的预测因子的选择的其他方式。例如，可以计数(R-BR)中绝对值大于阈值的像素数目。如果数目等于或大于第二阈值，选择根据步骤360的预测。否则，使用根据步骤350的预测。因此，相应于步骤340的决定对应于的将第二阈值设置为1的情形。
尽管在图3的示例中使用(R-BR)的绝对值，也可以使用其他误差测量。例如，可以使用绝对差值的和值(sum of absolute difference,SAD)或R和的BR之间的平均方差(mean squared error,MSE)。如果SAD或MSE大于阈值，使用根据步骤360的预测。否则，使用根据步骤350的预测。
图4为根据本发明的背景残差预测的示例模块示意图。帧410对应于背景图像。背景参考子区块412是用于图1的参考子区块(112)的背景图像中的对应子区块。背景当前子区块422是用于图1的当前子区块(122)的背景图像中的对应子区块。背景参考残差(414)通过从参考子区块(112)中减去背景参考子区块(412)形成。类似的，背景当前残差(424)通过从当前子区块(122)中减去背景当前子区块(422)形成。如图4中所示，背景参考残差(414)表示用于背景当前残差(424)的极佳预测因子。如果将用于图3的类似的符合运用于图4，背景当前残差(424)对应于(C-BC),且背景参考残差(414)对应于(R-BR)。当以背景参考残差(414)预测背景参考残差(414)时，剩余预测残差，Δ变为Δ＝(C-BC)-(R-BR)。当前子区块C可以C＝(R-BR)+BC+Δ表示。换言之，根据背景残差预测用于当前子区块的预测因子为((R-BR)+BC)。
根据发明的多个的实施例可发信令对比特流中的背景残差预测进行使用。信令可指示使用背景残差预测作为附加预测模式或者系统可以使用附加标志以指示背景残差预测的使用。系统也可以使用标志以指示是否使用自适应背景残差预测对编码区块内部的子区块进行编码。
自适应背景残差预测致能标志可包括在图像级别(例如，在图像参数集合(picture parameter set,PPS)中)或片级别(例如，片(sice)头部)之中。如果在图像级别中的标志指示背景残差预测被致能，对整个图像运用自适应背景残差预测。如果在片级别中的标志指示的背景残差预测被致能，对整个片运用自适应背景残差预测。可对标志进行发信以用于每个编码区块以指示是否致能背景残差预测以用于编码区块。然而，当在合并模式或超过模式中对编码区块进行编码时，无需发信对自适应背景残差预测的使用。当使用多个预测单元对编码区块进行预测时，将不使用背景残差预测致能标志。换言之，仅当通过一整个预测单元预测编码区块时才对背景残差预测致能标志进行发信。编码区块尺寸较小时，相应于的背景残差致能标志的比特率开销将变大。因此，仅当编码区块具有大于W的区块宽度或高度时才将对自适应背景残差预测致能标志进行发信，其中可将W设置为8或16。
图5为根据本发明的实施例包括自适应背景残差预测的视频编码或解码系统的流程图。在步骤510中，系统接收当前图像中的相应于当前编码区块的输入数据。对于编码，输入数据对应于待编码的视频数据。对于解码，输入数据对应于待解码的编码数据。可从存储器(例如，计算机存储器，缓存(RAM或DRAM)或者其他媒介)或处理器撷取输入数据。如步骤520中所示,将当前编码区块分割为一或多个编码子区块。如步骤530中所示，根据相应于当前编码区块的运动矢量定位参考图像中的参考子区块以用于当前编码子区块。如步骤540中所示，定位背景图像中的背景参考子区块以用于参考子区块，其中，背景参考子区块是参考子区块在背景图像中的第一个共位位置(co-located location)区块。然后如步骤550中所示，根据选择决定选择第一预测因子或第二预测因子以编码或解码当前子区块，其中第一预测因子对应于参考子区块，且第二预测因子是根据参考子区块和背景图像推导的。
上述流程图意在说明根据本发明的自适应背景残差预测的示例。本领域技术人员可修改、重排、分割或组合各个步骤以在不脱离本发明精神的范围内实现本发明。
上述的叙述以足够的细节叙述使本领域技术人员能藉由上述的描述实施本发明所揭露的系统以及方法。对本领域技术人员而言，对上述实施例的各种修改为显而易见的，以及本发明所定义的原理亦可应用于其它实施例中。因此，前述的实施例并非用于限定本发明范围，但符合本发明所揭露的原理以及新颖特征的最大范围。在上述的详细描述中，所描述的各种特定细节用于彻底理解本发明。然而，本领域技术人员皆可理解并实施上述特定细节。
前述本发明的示范实施例可透过各种硬件、软件编码或者两者的包括实现。举例来说，本发明一个实施例可为嵌入于视频压缩芯片中的电路或者嵌入于视频压缩软件的程式编码以执行本发明所述的程序。本发明一个实施例亦可为数位信号处理器所执行的程式编码以执行本发明所述的程序。本发明亦可包括由电脑处理器、数位信号处理器、微处理器或者现场可编辑逻辑闸阵列(field programmable gate array,FPGA)所执行的多个功能。上述的处理器是透过定义本发明的特定方法的计算机可读取软件编码或者韧体编码执行的特定任务。软件编码或者韧体编码可为不同的程式语言以及不同的格式或者类型。亦可对不同的目标平台编译软件编码。无论如何，根据本发明的软件编码的不同编码格式、类型以及语言以及用于执行任务的其它配置编码将不脱离本发明的精神以及范围。
在不脱离本发明的精神以及范围内，本发明可以其它特定格式呈现。所描述的实施例在所有方面仅用于说明的目的而并非用于限制本发明。本发明的保护范围当视后附的权利要求所界定者为准。本领域技术人员皆在不脱离本发明之精神以及范围内做些许更动与润饰。
Claims (22)
1.一种视频编码或解码方法，使用自适应背景残差预测，该方法包括：
在当前图像中接收相应于当前编码区块的输入数据；
将该当前编码区块分割为一或多个编码子区块；
根据相应于该当前编码区块的运动矢量定位参考图像中的参考子区块以用于该当前编码区块的当前子区块；
定位背景图像中的背景参考子区块以用于该参考子区块，其中，该背景参考子区块是该参考子区块在该背景图像中的第一个共位位置区块；以及
根据选择决定而选择第一预测因子或第二预测因子以编码或解码该当前子区块，其中，该第一预测因子对应于该参考子区块，且第二预测因子是根据该参考子区块、该背景参考子区块及该背景图像的背景当前子区块推导的。
2.如权利要求1所述的方法，其特征在于，该背景图像是根据一或多个解码的图像产生的。
3.如权利要求1所述的方法，其特征在于，该选择决定是根据该参考子区块和该背景参考子区块推导的。
4.如权利要求3所述的方法，其特征在于，推导该参考子区块与该背景参考子区块之间的绝对差值的和值或平均方差，如果该绝对差值的和值或该平均方差大于阈值，选择该第一预测因子；且如果该绝对差值的和值或该平均方差小于该阈值，选择该第二预测因子。
5.如权利要求3所述的方法，其特征在于，推导该参考子区块与该背景参考子区块之间的多个绝对差值，如果超过阈值的该多个绝对差值的数目大于选择的数目，则选择该第一预测因子，否则，选择该第二预测因子，以及，其中该选择的数目对应于非负整数。
6.如权利要求1所述的方法，其特征在于，以标志指示该选择决定。
7.如权利要求1所述的方法，其特征在于，该方法更包括，在编码器端包括语法元素或在解码器端解析语法元素，其中，该语法元素指示是否致能该自适应背景残差预测。
8.如权利要求7所述的方法，其特征在于，在视频比特流的图像级别或片头级别包括该语法元素以控制分别用于图像或片的该自适应背景残差预测的选择。
9.如权利要求7所述的方法，其特征在于，在用于该当前编码区块的编码数据中包括该语法元素以控制用于该当前编码区块的该自适应背景残差预测的选择。
10.如权利要求9所述的方法，其特征在于，如果该当前编码区块使用合并模式或跳过模式进行编码，对于该当前编码区块跳过该在该编码器端包括该语法元素和在该解码器端解析该语法元素。
11.如权利要求9所述的方法，其特征在于，如果该当前编码区块使用小于该当前编码区块的多个预测单元进行预测，对于该当前编码区块跳过该在该编码器端包括该语法元素和在该解码器端解析该语法元素。
12.如权利要求9所述的方法，其特征在于，如果该当前编码区块的宽度或高度等于或小于选择的尺寸，对于该当前编码区块跳过该在该编码器端包括该语法元素和在该解码器端解析该语法元素，其中，该选择的尺寸定义于正整数。
13.如权利要求12所述的方法，其特征在于，该选择的尺寸为8或16。
14.如权利要求1所述的方法，其特征在于，该当前子区块的宽度为从1至图像宽度，且该当前子区块的高度为从1至图像高度。
15.如权利要求1所述的方法，其特征在于，该第二预测因子对应于该参考子区块、该背景参考子区块及该背景图像中的背景当前子区块的线性组合，其中，该背景当前子区块是该当前子区块在该背景图像中的第二个共位位置区块。
16.如权利要求15所述的方法，其特征在于，将该第二预测因子设置为参考残差和该背景当前子区块的和值，且其中，该参考残差是从该参考子区块中减去该背景参考子区块推导的。
17.如权利要求1所述的方法，其特征在于，在图像域或背景残差域中推导相应于该当前编码区块的该运动矢量，其中，使用该当前图像和该参考图像以推导用于该图像域的该运动矢量，且使用当前背景残差数据和参考背景残差数据以推导用于该背景残差域的该运动矢量，该当前背景残差数据是该当前图像与该背景图像之间的第一个差值数据，且该参考背景残差数据是该参考图像与该背景图像之间的第二个差值数据。
18.一种视频编码或解码装置，该装置使用自适应背景残差预测，且该装置包括：
在当前图像中接收相应于当前编码区块的输入数据的电路；
将该当前编码区块分割为一或多个编码子区块的电路；
根据相应于该当前编码区块的运动矢量定位参考图像中的参考子区块以用于该当前编码区块的当前子区块的电路；
定位背景图像中的背景参考子区块以用于该参考子区块的电路，其中，该背景参考子区块是该参考子区块在该背景图像中的第一个共位位置区块；以及
根据选择决定而选择第一预测因子或第二预测因子以编码或解码该当前子区块，其中，该第一预测因子对应于该参考子区块，且第二预测因子是根据该参考子区块、该背景参考子区块及该背景图像的背景当前子区块推导的。
19.一种视频编码或解码方法，使用自适应背景残差预测，该方法包括：
在当前图像中接收相应于当前编码区块的输入数据；
将该当前编码区块分割为一或多个编码子区块；
根据相应于该当前编码区块的运动矢量定位参考图像中的参考子区块以用于该当前编码区块的当前子区块；
定位背景图像中的背景参考子区块以用于该参考子区块，其中，该背景参考子区块是该参考子区块在该背景图像中的第一个共位位置区块；
定位该背景图像中的背景当前子区块，其中，该背景当前子区块是该当前子区块在该背景图像中的第二个共位位置区块；
根据该参考子区块、该背景参考子区块以及该背景当前子区块计算用于该当前子区块的预测因子；以及
使用该预测因子编码或解码该当前子区块。
20.如权利要求19所述的方法，其特征在于，在编码器端包括语法元素或在解码器端解析语法元素，其中，该语法元素指示是否致能该自适应背景残差预测。
21.如权利要求19所述的方法，其特征在于，将该预测因子设置为参考残差和该背景当前子区块的和值，且其中，该参考残差是从该参考子区块中减去该背景参考子区块推导的。
22.如权利要求19所述的方法，其特征在于，在图像域或背景残差域中推导相应于该当前编码区块的该运动矢量，其中，使用该当前图像和该参考图像以推导用于该图像域的该运动矢量，且使用当前背景残差数据和参考背景残差数据以推导用于该背景残差域的该运动矢量，该当前背景残差数据是该当前图像与该背景图像之间的第一个差值数据，且该参考背景残差数据是该参考图像与该背景图像之间的第二个差值数据。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410652880.0A CN104717511B (zh) | 2013-12-13 | 2014-11-17 | 视频编码或解码的方法及装置 |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CNPCT/CN2013/089375 | 2013-12-13 | ||
| PCT/CN2013/089375 WO2015085575A1 (en) | 2013-12-13 | 2013-12-13 | Methods for background residual prediction |
| CN201410652880.0A CN104717511B (zh) | 2013-12-13 | 2014-11-17 | 视频编码或解码的方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN104717511A CN104717511A (zh) | 2015-06-17 |
| CN104717511B true CN104717511B (zh) | 2018-10-16 |
Family
ID=53416396
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410652880.0A Expired - Fee Related CN104717511B (zh) | 2013-12-13 | 2014-11-17 | 视频编码或解码的方法及装置 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN104717511B (zh) |
Families Citing this family (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105872556B (zh) * | 2016-04-11 | 2020-01-03 | 华为技术有限公司 | 视频编码方法和装置 |
| CN107396138A (zh) * | 2016-05-17 | 2017-11-24 | 华为技术有限公司 | 一种视频编解码方法及设备 |
| CN110235446B (zh) * | 2017-06-08 | 2024-04-12 | 深圳市大疆创新科技有限公司 | 视频编码方法、视频解码方法及相关装置 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0123616A1 (en) * | 1983-04-20 | 1984-10-31 | Nippon Telegraph And Telephone Corporation | Interframe coding method and apparatus therefor |
| CN101127912A (zh) * | 2007-09-14 | 2008-02-20 | 浙江大学 | 利用动态背景帧的视频编码方法 |
| CN101272494A (zh) * | 2008-01-25 | 2008-09-24 | 浙江大学 | 利用合成参考帧的视频编解码方法及装置 |
| CN101321287A (zh) * | 2008-07-08 | 2008-12-10 | 浙江大学 | 基于运动目标检测的视频编码方法 |
| CN102098519A (zh) * | 2009-12-09 | 2011-06-15 | 浙江大学 | 视频编码方法、解码方法、编码及解码装置 |
-
2014
- 2014-11-17 CN CN201410652880.0A patent/CN104717511B/zh not_active Expired - Fee Related
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP0123616A1 (en) * | 1983-04-20 | 1984-10-31 | Nippon Telegraph And Telephone Corporation | Interframe coding method and apparatus therefor |
| CN101127912A (zh) * | 2007-09-14 | 2008-02-20 | 浙江大学 | 利用动态背景帧的视频编码方法 |
| CN101272494A (zh) * | 2008-01-25 | 2008-09-24 | 浙江大学 | 利用合成参考帧的视频编解码方法及装置 |
| CN101321287A (zh) * | 2008-07-08 | 2008-12-10 | 浙江大学 | 基于运动目标检测的视频编码方法 |
| CN102098519A (zh) * | 2009-12-09 | 2011-06-15 | 浙江大学 | 视频编码方法、解码方法、编码及解码装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN104717511A (zh) | 2015-06-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7104186B2 (ja) | Ｉｂｃとａｔｍｖｐとの間でのインタラクション | |
| TWI816858B (zh) | 用於變換矩陣選擇的隱式編碼 | |
| US9756336B2 (en) | Method of background residual prediction for video coding | |
| US9258519B2 (en) | Encoder assisted frame rate up conversion using various motion models | |
| TWI532369B (zh) | 用於基於高效率視訊寫碼之可擴縮寫碼視訊資訊之裝置及方法 | |
| CN112106371B (zh) | 视频解码的方法、装置、可读介质和设备 | |
| CN114175661A (zh) | 具有补充信息消息的点云压缩 | |
| CN113574880B (zh) | 关于子块变换模式的分割 | |
| JP2017507554A (ja) | 非対称パーティション並びにエンコーダ側の検索パターン、検索範囲、及び分割のためのアプローチを使用するイントラブロックコピー予測 | |
| JP2017528987A (ja) | 予測符号化、復号化方法、対応するエンコーダ、デコーダ及び電子機器 | |
| JP2021517392A5 (zh) | ||
| KR20210049930A (ko) | 비디오 디코딩을 위한 방법 및 장치 | |
| CN108235007B (zh) | 各模式使用不同精度同种编码参数的数据压缩方法和装置 | |
| CN116193127A (zh) | 专用历史最近运动矢量预测候选集的图像压缩方法及装置 | |
| CN104717511B (zh) | 视频编码或解码的方法及装置 | |
| US11514610B2 (en) | Method and apparatus for point cloud coding | |
| US20130235931A1 (en) | Masking video artifacts with comfort noise | |
| CN110944178A (zh) | 使用多个以编码参数关联的候选集的数据压缩方法和装置 | |
| JPWO2020035829A5 (zh) | ||
| CN107770527B (zh) | 使用邻近编码参数和最近编码参数的数据压缩方法和装置 | |
| CN103856780A (zh) | 视频编码方法、解码方法、编码器及解码器 | |
| CN109361924B (zh) | 图像编码方法及装置 | |
| WO2022184110A1 (zh) | 用于图像编码的方法、电子设备、存储介质和记录介质 | |
| RU2787711C1 (ru) | Управление буфером декодированных изображений для кодирования видеосигналов | |
| KR20230094414A (ko) | 미러링 기반 비디오 부호화/복호화 방법 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20181016 |
|
| CF01 | Termination of patent right due to non-payment of annual fee |