CN108293128A - 视频编解码系统中全局运动补偿的方法及装置 - Google Patents

视频编解码系统中全局运动补偿的方法及装置 Download PDF

Info

Publication number
CN108293128A
CN108293128A CN201680067484.9A CN201680067484A CN108293128A CN 108293128 A CN108293128 A CN 108293128A CN 201680067484 A CN201680067484 A CN 201680067484A CN 108293128 A CN108293128 A CN 108293128A
Authority
CN
China
Prior art keywords
global motion
video
motion compensation
coding
processing unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680067484.9A
Other languages
English (en)
Inventor
刘杉
许晓中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaTek Inc
Original Assignee
MediaTek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Inc filed Critical MediaTek Inc
Publication of CN108293128A publication Critical patent/CN108293128A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/527—Global motion vector estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明公开了一种在视频编码器侧或视频解码器侧执行视频编解码帧间预测的方法以及装置。在一个方法中，在所述视频编码器侧发信GMC指示或者在所述视频解码器侧解析来自视频比特流的所述GMC指示，GMC(全局运动补偿)指示指出全局运动补偿是否是启用。如果所述GMC指示指出GMC是启用的，使用包括GMC模式的一个或多个编解码模式对当前处理单元进行编码或解码。根据另一方法，如果GMC对于区域是启用的，决定数目用于使用多个全局运动模型的区域中的多个处理单元进行编码或解码，所述数目表示所允许的所述多个全局运动模型的总数目。在又一个方法中，选择性地或者以组合的方式应用GMC以及局部运动补偿。

Description

视频编解码系统中全局运动补偿的方法及装置
相关引用
本发明要求提交于2015年11月20日的，号码为62/257,754的美国临时专利申请案的优先权，该美国临时专利申请案整体通过引用纳入其中。
技术领域
本发明涉及使用运动估计和运动补偿的视频编解码，特别地，本发明涉及用于视频压缩的全局运动补偿(global motion compensation)。
背景技术
在过去二十年已经开发了各种视频编解码标准，在新的编解码标准中，使用了更强大的编解码工具去提高编解码的效率。高效视频编码(HEVC)是近些年发展起来的新的编解码标准，在高效视频编码(HEVC)系统中，H.264/AVC中的固定尺寸的宏块(macroblock)被灵活的块所替代，称为编码单元(coding unit，CU)。CU中的像素共享相同的编解码参数以提到编解码效率，一个CU可能开始于最大的CU(LCU)，其在HEVC中也称为编码树单元(codedtree unit，CTU)。除了编码单元的概念，HEVC中还引入了预测单元(prediction unit，PU)的概念。一旦完成CU分层树(hierarchical tree)的拆分，根据预测类型以及PU分割(PUpartition)，每一叶CU(leaf CU)被进一步拆分成一个或多个预测单元。
在大多数编解码标准中，在块的基础上使用自适应帧间/帧内预测，在帧间预测模式中，确定一个或两个运动向量用于每一块来选择一个参考块(也就是单向预测)或者两个参考块(也就是双向预测)，为每个单独的块确定以及编码一个或多个运动向量。对于某些图像，例如在相机摇镜头(camera pan)下捕获的这些图像，整个图像或部分图像进行相同的运动(也就是平移的全局运动(translational global motion))。因此，全局运动补偿(GMC)已经用于一些编解码标准中，在下文中，简单的介绍了一些已知的GMC技术。
为了描述全局运动，本领域中已经广泛的使用了各种全局运动模型(globalmotion model)来描述沿时间轴(temporal axis)的图像的运动。假定A(x,y)是在考虑的位置处(x,y)的原始像素，A’(x’,y’)是当前像素A(x,y)的在参考图像中位置(x’,y’)的对应的像素，所描述的一些典型的运动模型如下。
平移模型
最简单的平移模型是2-D平移运动，其中兴趣区域(area of interest)中的所有像素沿着相同的运动方向以及强度(magnitude)，这一模型可以被描述如下，其中a0是水平方向上的运动以及b0是垂直方向上的运动。
x’＝a0+x,以及
y’＝b0+y. (1)
在这一模型中，要确定两个参数(也就是a0和b0)。方程式(1)适用于兴趣区域中的所有像素，因此，这一区域中用于像素A(x,y)以及对应的像素A’(x’,y’)的运动向量是(a0,b0)。图1示出了根据该平移模型的全局运动补偿的示例，其中当前区域110被映射到参考图像中的参考区域120。当前区域的四个角落像素和参考区域的四个角落像素之间的对应关系由四个箭头所指示。
缩放模型
缩放模型除了在水平以及垂直方向上的运动以外还包括缩放效应(scalingeffect)，该模型可以被描述如下：
x’＝a0+a1*x,以及
y’＝b0+b1*y (2)
根据这一模型，总共使用了四个参数，包括比例因子(scaling factor)a1和b1以及平移运动值a0和b0。对于兴趣区域中的每一像素A(x,y)，用于这一像素以及它对应的参考像素A’(x’,y’)的运动向量是(a0+(a1-1)*x,b0+(b1-1)*y)。因此，用于每一像素的运动向量是位置相关的。图2示出了根据该缩放模型的全局运动补偿的示例，其中当前区域210被映射到参考图像中的参考区域220。当前区域的四个角落像素和参考区域的四个角落像素之间的对应关系由四个箭头所指示。
仿射模型
仿射模型(affine model)能够描述二维块旋转以及二维变形来将正方形(或矩形)转换成为平行四边形(parallelogram)。该模型可以描述如下：
x’＝a0+a1*x+a2*y,以及
y’＝b0+b1*x+b2*y (3)
在这一模型中，总共使用了6个参数。对于兴趣区域中的每一像素A(x,y)，这一像素与它对应的参考像素A’(x’,y’)之间的运动向量是(a0+(a1-1)*x+a2*y,b0+b1*x+(b2-1)*y)，因此，用于每一像素的运动向量也是位置相关的。图3示出了根据该仿射模型的全局运动补偿的示例，其中当前区域310被映射到参考图像中的参考区域320。仿射转换可以将任何三角形映射成任何三角形，换句话说，如图3所示，当前区域的三个角落像素以及参考区域的三个角落像素之间的对应关系可以由三个箭头决定。在这种情况下，用于第四个角落像素的运动向量可以根据其他三个运动向量导出而不是独立于其他三个运动向量导出。用于该仿射模型的6个参数可以基于用于三个不同位置的三个已知的运动向量导出，该仿射模型的参数导出在本领域是公知的，在此不再赘述。
透视模型(perspective model)
透视运动模型可以用于描述相机运动，例如变焦、摇镜头(pan)以及倾斜(tilt)之类的相机运动。这一模型可以描述如下：
x’＝(a0+a1*x+a2*y)/(1+c1*x+c2*y),以及
y’＝(b0+b1*x+b2*y)/(1+c1*x+c2*y) (4)
在这一模型中，使用了8个参数，对于兴趣区域中的每一像素A(x,y)，用于这种情况的运动向量可以由对应的A’(x’,y’)以及A(x,y)决定，也就是(x’-x,y’-y)。因此，用于每一像素的运动向量是位置相关的。
通常，一个N-参数模型可以通过将M个像素对A和A’作为输入来求解，实际上，可以使用M个像素对，其中M>N。例如，在仿射模型中，参数集a＝(a0,a1,a2)以及b＝(b0,b1,b2)可以独立地求解。
让C＝(1,1,1,…,1)，X＝(x0,x1,…,xM-1)，Y＝(y0,y1,…,YM-1)，U＝(x’0,x’1,000,x’M-1)以及V＝(y’0,y’1,…,y’M-1)，然后可以导出下列方程式：
KaT＝U,以及
KbT＝V (4)
因此，参数集a可以根据a＝(KTK)-1(KTU)来求解以及参数集b可以根据b＝(KTK)-1(KTV)来求解，其中K＝(CT,XT,YT)、KTK常常是3×3的矩阵而不论M的大小。
在由Li提出的技术论文中(L.Li,H.Li,Z.Lv以及H.Yang，“An Affine MotionCompensation Framework for High Efficiency Video Coding”，2015年5月，关于电路和系统的2015IEEE国际学术研讨会(ISCAS)，第525-528页)，导出以及发信在CU角落处的三个运动向量，其用于导出用于使用仿射运动模型(也就是6参数模型)的CU中所有像素的运动向量。
需要提高在视频编码或解码系统中使用全局运动补偿的效率。
发明内容
本发明公开了一种在视频编码器或视频解码器执行视频编解码的帧间预测的方法以及装置。根据这一方法，在视频编码器侧发信GMC(全局运动补偿)指示或者在视频解码器侧解析来自视频比特流的所述GMC指示；所述GMC指示指出全局运动补偿是否是启用的；如果所述GMC指示指出所述全局运动补偿是启用的，使用包括GMC模式的一个或多个编解码模式在所述视频编码器侧对当前处理单元进行编码或者在所述解码器侧对所述当前处理单元进行解码。所述当前处理单元对应于序列、图像、切片、方块、区域、编码块或者预测块。所述GMC指示可以在语法层级高于或者等于所述当前处理单元的层级的所述视频比特流中被发信。此外，可以在所述视频编码器侧发信用于所述视频比特流中当前处理单元的GMC使用旗标，或者在所述视频解码器侧解析用于来自视频比特流的所述当前处理单元的所述GMC使用旗标。所述GMC使用旗标指出所述GMC模式是否应用于所述当前处理单元。如果所述GMC指示指出全局运动补偿是启用的，发信与用于所述GMC模式的全局运动模型有关的参数的总数目以及多个参数的值。在一些实施例中，如果所述GMC指示指出所述全局运动补偿是启用的，在视频编码器侧，可以在视频比特流中发信指示用于所述GMC模式的全局运动模型的数量，或者在视频解码器侧，解析来自所述视频比特流的旗标。在一些实施例中，可以在所述视频编码器侧的视频比特流中发信旗标或者在所述视频解码器侧解析来自所述视频比特流的所述旗标用于所述当前处理单元，所述旗标指示从多个候选全局运动模型中选出的所选择的全局运动模型。
根据另一方法，如果GMC模式对于区域是启用的，决定表示所允许的多个全局运动模型的总数目的第一数目，用于使用多个全局运动模型对所述区域中的多个处理单元进行编码或解码；使用一个或多个编解码模式对当前处理单元进行编码或解码，所述一个或多个编解码模式包括具有从所述多个全局运动模型中选择的一个全局运动模型的所述GMC模式。表示每一所述多个全局运动模型的参数的总数目的第二数目可以包括于所述视频比特流中。用于每一所述多个全局运动模型的运动类型可以包括于与所述区域有关的高层级语法的所述视频比特流中，其中所述运动类型被映射到对应的用于每一所述多个全局运动模型的参数的总数目。所述运动类型可以是由可变长度编码进行二进制化。用于所述给定全局运动模型的所述运动类型也可以由用于与先前编码区域有关的所述给定全局运动模型的另一个运动类型进行预测性编码。在这种情况下，所述先前编码区域可以对应于左边区域、上方区域或时间同位区域。此外，旗标可以用于指示是否由与所述先前编码区域有关的所述给定全局运动模型的所述另一个运动类型精确地预测所述给定全局运动模型的所述运动类型。
在上述方法中，每一所述多个全局运动模型的参数被并入到与所述区域有关的高层级语法的视频比特流中，所述高层级语法可以对应于SPS(序列参数集)、PPS(图像参数集)、切片数据头、区域或者块。所述当前处理单元可以对应于CTU(编码树单元)、编码块或者预测块。可以使用与先前编码区域相关的给定全局运动模型的其他参数在所述高层级语法中预测性地发信所述给定全局运动模型的所述多个参数，所述先前编码区域对应于左边区域、上方区域或者时间同位区域。旗标可以用于指示是否由与所述先前编码区域相关的所述给定全局运动模型的其他参数精确地预测所述给定全局运动模型的所述多个参数。
在一些实施例中，可以在该层级语法的视频比特流中发信GMC指示来指出所述GMC模式对于所述区域是否是启用的，其中所述高层级语法高于或等于所述当前处理单元的层级。GMC使用旗标可以并入视频比特流中，其中所述GMC使用旗标在所述视频比特流的所述当前处理单元的层级内，来指示所述GMC模式是否应用于所述当前处理单元，当所述GMC使用旗标指示所述GMC模式应用于当前处理单元的时候，全局运动索引或全局运动索引增量可以用于确定从用于所述当前处理单元的多个全局运动模型中选择的全局运动模型。可以在所述视频比特流中所述当前处理单元的层级中发信所述当前处理单元所允许的从所述多个全局运动模型中选择的所述全局运动模型的多组参数以及在用于所述多个参数中选择的指示。
根据又一方法，可以使用选择性的GMC/LMC(局部运动补偿)模式或者组合的GMC/LMC模式任一个对每一区域进行编码，如果选择所述选择性的GMC/LMC模式用于给定区域，使用GMC模式或LMC模式任一个对所述给定区域中的每一处理单元进行编码。如果选择所述组合的GMC/LMC模式用于所述给定区域，使用所述GMC模式和所述LMC模式两者一起对每一处理单元进行编码。当选择所述选择性的GMC/LMC模式用于所述给定区域的时候，旗标用于指示所述GMC模式是否用于所述给定区域中的处理单元。如果所述GMC模式允许多个全局运动模型，全局运动索引用于指示在所述多个全局运动模型中选择用于所述处理单元的给定全局运动模型。当选择组合的GMC/LMC模式用于所述给定区域的时候，根据基于所述GMC模式生成的GMC预测子以及基于所述LMC模式生成的LMC预测子的加权和，生成用于所述给定区域中处理单元的组合的预测子。当选择所述组合GMC/LMC模式用于所述给定区域的时候，根据所述GMC模式可以将GMC运动向量用作初始运动向量以及所述初始运动向量根据所述LMC模式进行细化来获得最终的运动向量。当发信运动向量差异的时候，所述运动向量差异对应于所述最终运动向量与所述初始运动向量之间的差异。当选择GMC模式用于所述给定区域的时候，可以发信合并索引用于所述给定区域来指示从由所述合并索引所指向的先前编码区域的GMC信息继承或者预测的所述给定区域的所述GMC信息，其中所述GMC信息包括与所述GMC模式有关的多个参数。存储用于上方行中一个或多个编码区域的所述GMC信息并用于导出用于所述给定区域的所述GMC信息的一个或多个合并候选，其中如果不在所述GMC模式中对所述上方行中的所述一个或多个编码区中的目标区域进行编码，在用于所述目标区域的位置处存储来自所述目标区域的上方区域或左边区域的所述GMC信息。
附图说明
图1示出了平移全局运动模型的示例。
图2示出了缩放全局运动模型的示例。
图3示出了仿射全局运动模型的示例。
图4示出了存储用于上方行区域以及在相同行区域中优于当前区域的区域全局运动信息的示例。
图5示出了示例性编解码系统的流程图，其在视频编码器侧发信GMC(全局运动补偿)指示或者在解码器侧解析来自于视频比特流的所述GMC指示，其中所述GMC指示指出全局运动补偿是否启用。
图6示出了根据本发明的示例性编解码系统的流程图，其中所允许的多个全局运动模型的数目被合并到视频比特流中。
图7示出了根据本发明的示例性编解码系统的流程图，其中有选择地或组合地应用GMC(全局运动补偿)以及LMC(local motion compensation，局部运动补偿)。
具体实施方式
下文的描述是实施本发明的最佳实施方式，所做的描述的目的是为了说明本发明的基本原理，因此不应当对其做限制性理解。本发明的保护范围由参考所附权利要求最佳确定。
全局运动补偿的使用的指示
根据提高全局运动补偿(GMC)的效率的第一方法，可以在编码的区域或单元的数据头中指出或发信全局运动补偿的使用，所述单元由用于处理目的的一组像素组成，本发明中，所述单元也可以称为处理单元(processing unit)，所述单元可以是编码块或预测块、一组编码块或预测块(例如，编码树块、CTU)、切片(slice)、一组切片、方块(tile)、图像的一部分、图像、一组图像或者整个视频序列。如果在给定的单元中全局运动补偿的使用是启用的，那么可以在这一单元中使用全局运动补偿。否则，全局运动补偿将不会用于这一单元，发信GMC的示例可以在如下所示的层级中，但是不限于此：
●每一序列(例如，在序列参数集(sequence parameter set，SPS)中发信一启用旗标指出GMC是否启用)
●每一图像(例如，在图像参数集(picture parameter set，PPS)中发信的一启用旗标指出GMC是否启用)
●每一切片(例如，在切片数据头(slice header)中发信的一启用旗标指出GMC是否启用)
●每一方块或波前(wavefront)(例如，基础处理单元的行，例如CTU)
●每一区域，包括如下：
○一组基础处理单元(例如，连续多个CTU)
○一给定大小的阵列(例如，3×5CTU阵列)
●每一块(例如，预测单元)
在一个实施例中，使用了一个两层级方法。可以在高层级(例如，区域、切片数据头、PPS或SPS)发信启用旗标，启用旗标也可以在块层级发信。当在高层级的所述启用旗标设置为ON的时候(也就是，GMC是启用的)，可以在每一单元的开始使用旗标(例如，使用旗标)来指出在这一单元中是否使用了GMC。当使用旗标不存在的时候，推测这一使用旗标是OFF(也就是在这一单元中没有使用GMC)。
全局运动的表现
第二方法解决了全局运动的表现。一旦使用了GMC，如果使用旗标指出GMC用于当前单元，发信全局运动参数。在一个实施例中，在当前单元中仅允许使用一个全局运动模型，在这种情况下，不需要指出全局运动模型的总数目或者所选择的特定的全局运动模型。逐一发信全局运动参数，例如，如果全局运动模型是具有6个参数的仿射运动模型，紧接着GMC使用旗标，以某一次序逐一编码以及发信这6个参数(例如，a0,a1,a2,b0,b1,b2)。
在下面的表1a、表1b以及表2中示出了示例性语法表，在表1a以及表1b中，示出了更高层级(例如，SPS或PPS)的语法。
表1a
表1b
在表1a中，所使用的用于全局运动模型参数的数目(也就是，mum_params)被发信，如注释(1-1)所示。如注释(1-2)所示，发信的全局运动参数。在表1b中，如注释(1-3)所示，发信全局运动模型的类型，而非发信用于这一全局运动模型的参数的数目。可以建立在运动类型和用于这一类型的参数的数目之间的映射表(也就是由注释(1-4)所指出的num_params[motion_type])。如注释(1-5)，发信所述全局运动参数。
在表2中，示出了较低层级(例如，切片净负荷(slice payload)或者编码单元)的语法，如果旗标global_motion_enabled_flag被设置为1(也就是GMC是启用的)，如注释(2-1)所指出的发信旗标use_global_motion_flag。
表2
在一个实施例中，发信语法元素use_global_motion_flag用于每一编码块，所述旗标可以与来自上方和/或左边相邻块的上下文(context)一起编码。例如，如果用于上方以及左边相邻块两者的use_global_motion_flag的值是1(也就是使用GMC)，分配第一上下文；如果用于上方以及左边相邻块两者的use_global_motion_flag的值是0(也就是不使用GMC)，分配第二上下文，以及如果仅用于所述两个相邻块其中一个的use_global_motion_flag的值是1，分配第三上下文。在另一个实施例中，所述旗标可以与来自于先前编码块的上下文一起编码，例如，仅一个上下文可以用于编码这一旗标。对于每一块，通过使用用于当前块的use_global_motion_flag的值更新这一上下文的CABAC状态。在又一实施例中，对这一旗标use_global_motion_flag进行旁路编码(by-pass coded)而不使用任何上下文。
在另一个实施例中，在当前单元中可能使用不止一个全局运动模型，在这种情况下，每一全局运动模型被分配一个索引。例如，在当前单元(例如，视频序列)中可以使用三个全局运动模型，全局运动模型可以被分配索引0、1以及2，并且可以使用可变长度码字(variable-length codewords)，如0、10以及11，对索引进行编码。一个单元中所允许的全局运动的最大数目可以是在高层级语法数据头(例如，SPS、PPS、切片数据头等等)中预定义以及被发信。支持全局运动索引以及全局运动参数的示例性语法如表3所示，其中如注释(3-1)中旗标global_motion_enabled_flag所指出的启用GMC，发信的所使用的全局运动模型的数目(如注释(3-2)所指出的)以及用于每一全局运动模型的全局运动参数的数目(如注释(3-3)所指出的)。如注释(3-4)所指示，发信用于每一全局运动模型的多个参数。
表3
或者，对于每一全局运动模型，可以发信运动类型。可以使用运动类型与参数数量之间的映射表而不发信用于每一全局运动模型的参数的数量。表4示出了motion_type与num_params之间的映射的示例，在这一示例中，“motion_type”使用可变长度编码进行二进制化。
表4
表5示出了使用全局运动模型的数量以及每一全局运动模型的运动类型的全局运动参数发信的语法表的示例。当GMC是如注释(5-1)中旗标global_motion_enabled_flag所指示为启用的时候，发信所使用的全局运动模型的数量(如注释(5-2)所指示)以及用于每一全局运动模型的运动类型(如注释(5-3)所指示)。发信用于每一全局运动模型的参数如注释(5-4)所指示。
表5
在另一个实施例中，当在更高层级数据头(例如，SPS、PPS或切片数据头)发信多组全局运动参数的时候，较低层级单元(例如，切片、多个块的区域、编码树、编码块或预测块)可以参考如在更高层级数据头指出的所选择的全局运动模型。较低层级单元可以使用全局运动索引去鉴定将在较低层级中使用的特定的全局运动模型。换句话说，与全局运动索引有关的全局运动模型被应用于当前较低层级单元。用于发信全局运动模型的示例语法如表6所示，所述全局运动模型的发信在较低层级中使用的旗标(如由注释(6-1)所指示)以及所选择的全局运动索引(如由注释(6-2)所指示)。
表6
在一个实施例中，发信“global_motion_idx”用于每一编码块，其可以是由可变长度编码进行二进制化，例如，二进制化可以基于指数-哥伦布编码(exponential-Golombcodes)。或者，二进制化可以使用固定长度编码(fixed length code)，在这种情况下，假定全局运动模型的最大数目对编码器以及解码器两者是已知的，或者可以在更高层级的语法发信最大数目。例如，所允许的全局运动的最大数目在SPS或PPS或切片数据头中设置为16，或者由编码器以及解码器两者假定为16。因此，4比特位的固定长度编码可以用于对global_motion_idx进行二进制化。
用于global_motion_idx的二进制化的字符串(strings)(也就是二进制数(bins))可以与来自它上方和/或左边相邻块的上下文一起编码。用于编码给定二进制数的上下文分配的示例如下：如果用于上方以及左边相邻块两者的global_motion_idx的这个二进制数的值是1，分配第一上下文；如果用于上方以及左边相邻块两者的global_motion_idx的这个二进制数的值是0，分配第二上下文，以及如果用于上方以及左边相邻块两者仅其中之一的global_motion_idx的这个二进制数的值是1，分配第三上下文。在另一个实施例中，二进制数与来自先前编码块的上下文一起编码。在这种情况下，仅一个上下文用于编码这个二进制数。对于每一块，通过使用当前块的global_motion_idx的二进制数的值来更新这个上下文的CABAC的状态。在又一实施例中，对global_motion_idx的所有二进制数进行旁路编码而不使用任何上下文。
在另一个实施例中，发信当前索引与先前索引之间的索引差异，示例性的语法如表7所示，其中对应于当前块的全局运动索引与先前块的全局运动索引之间差异的增量索引global_motion_idx_delta如注释(7-1)所示。
表7
在这一示例中，解码的全局运动索引(globalMotionIdx)导出如下：
globalMotionIdx＝globalMotionIdxPrev+global_motion_idx_delta.
变量globalMotionIdxPrev表示先前的globalMotionIdx，当它第一时间被调用的时候，globalMotionIdxPrev的初始值为0，每次在导出globalMotionIdx后，globalMotionIdxPrev被设置为等于globalMotionIdx。
因为global_motion_idx_delta表示两个索引之间的差异，其可以是正数也可以是负数。因此，这一语法可以包括符号信息(sign information)。例如，这一语法的第一二进制数是它的符号以及接下来的二进制数用于表示它的绝对值。
从更高层级的数据头下到块层级，可能会有多个可用全局运动模型以及多个参数候选以供选择。在编解码进程中，可以由隐式导出(implicit derivation)或直接的发信来更新多个新的全局运动模型和/或参数。在一个实施例中，在编解码一个序列的开头，可以在SPS上构造以及发信一个初始全局运动模型和/或参数候选列表，所述列表由若干组运动模型和/或它们的参数组成。在一个图像的编解码以后，从当前图像所导出的运动模型和/或参数被添加到候选列表中，所导出的新的候选可以隐含地放入候选列表中或者明确地被发信来更新候选列表，更新的候选列表将用于编解码后续的图像。在多个候选用于一个单元的情况下，需要发信候选的数目，对于从一个单元到另一个单元(例如从一个图像到另一个图像)GMC候选列表的更新进程，如果使用了新的候选的显式发信(explicitsignalling)，那么可能需要发信新的候选的数目。
如果多组候选运动模型和/或多个参数用于一个单元，一个较低层级单元可以选择通过使用显式发信或隐式导出来减少潜在候选的数量。如果使用了显式发信的方法，潜在候选的子集被标记以致仅这个子集将被用于特定的较低层级单元，因此，减少了选择一个候选的发信成本(signalling cost)。如果使用了隐式发信，可以使用比整个列表小的列表(在候选的数量方面)，对于每一更新，仅这些高度可能的候选被选择包含于较小列表中。选择进程可以被分别定义，例如，所述选择进程可以基于先前编码单元中出现的数量的顺序。在候选的数量减少以后，如果仅剩下一个候选，不需要发信所选择的候选，否则，可以使用一个索引旗标(indexl flag)来发信用于当前单元的候选。
在上述用于减少潜在候选列表的数量的两个方法中(也就是隐含地以及明确地发信候选列表的选择)，可以使用这两种方法的组合。例如，在从整个列表隐含地选择较小数量的候选以后，可以使用显式发信来指示将用于后续单元的一些额外的候选，其中所述额外的候选不存在于由隐式发信形成的列表中。
在一个实施例中，在序列数据头中发信仿射模式的N组运动参数，其中N是正整数，可以在图像数据头更新一些额外组的运动参数(例如M个额外组)。可以在切片数据头发信指向于这(M+N)组的条目的索引阵列来指示仅这些条目将被用于这一切片中。
可以使用后续方法的任一个来发信用于给定运动模型的参数：
●发信单元中一些代表性位置的运动向量，每一运动向量具有两个分量，其相当于两个参数。
●直接地发信模型参数而不是运动向量。
●使用发信的运动向量以及导出的运动向量的组合，
○例如，对于在一个单元中使用的6参数模型，需要3个运动向量。由于需要三个运动向量，可以明确地发信两个运动向量而使用来自于空间/时间相邻单元的一些运动向量预测导出另一个运动向量。
●使用发信的参数以及导出的参数的组合。
可以通过使用现有的运动参数/运动类型作为预测子以及仅发信差异来以一个预测的方式完成GMC参数/运动类型的发信。或者，可以使用一个旗标来指示是否从现有的一个运动参数/运动类型精确地预测当前运动参数/运动类型，或者需要发信新的运动参数/运动类型。运动参数/运动类型的精确预测意味着现有的参数/运动类型可以用作为当前运动参数/运动类型，以及不需要发信差异。在一个实施例中，发信单元(signalling unit)是一个CTU(编码树单元)，当发信当前CTU的GMC参数/运动类型的时候，来自于左边、上方或时间同位的CTU的GMC参数/运动类型可以用作为预测子。一个旗标可以用于发信当前CTU的GMC参数/运动类型是否从这些预测子中导出。如果旗标指出“是”，另一个索引旗标用于发信将使用哪一预测子，如果旗标指出“否”，发信一组新的参数/运动类型。
在本发明中，全局运动的参数的数目可以是灵活的，例如，仿射运动模型一般需要的6个参数，然而，随着某些假设，例如一些简化，可能需要较少的参数。例如，如果在转换以后，原始块可以保持它的形状(也就是，仍然是正方形或矩形)，所需要的参数的数量可以从6减少到4。因此，用于全局运动类型/参数发信的现有方法可以包括用于全局运动模型的参数数量的灵活性。
在多个参考图像的情境中，对于一个切片(或图像)，一个或多个全局运动可以用于当前切片(或图像)的每一参考图像。对于本发明中的方法以及实施例，仅描述了列表0中的图像，然而，能够理解的是，相似的方法以及实施例也可以应用于列表中的参考图像。
在一个实施例中，在参考图像列表中预定位置处的参考图像被用作为用于全局运动补偿的参考图像。在一个示例中，这一参考图像是当前切片的同位图像。在表8中示出了用于预测单元(PU)的发信全局运动索引的示例性语法。在这一示例中，当使用全局运动补偿的时候，因为在编码器以及解码器两者假定参考图像是预定义的，不需要发信参考图像的参考索引。该预定义的参考图像可以是同位图像、在列表的第一位置的图像等等。在表8中，如注释(8-1)所指出的，检测是否没有使用全局运动补偿。如果没有使用全局运动，如注释(8-2)到注释(8-3)所指出的，包括了用于常规帧间预测模式的运动信息。如果使用了全局运动，如注释(8-4)所示，发信语法global_motion_idx来指示全局运动索引。虽然之前所提到的global_motion_idx用于这一示例中，也可以使用全局运动索引增量。
表8
在另一个实施例中，当前图像或切片允许多个全局运动模型，特别地，发信或导出用于每一参考图像的一组全局运动参数。因此，当选择一个特定的参考图像用于当前块的时候(例如，通过使用参考图像索引)，那么当全局运动补偿用于这一块的时候，推测使用了对应的一组全局运动参数，而不需要发信使用了哪一组全局运动参数。表9示出了预测单元中全局运动补偿的发信的示例性语法。在表9中，当如注释(9-1)所指出的，当帧间预测块不使用全局运动补偿的时候，在注释(9-2)以及(9-3)中发信运动信息，否则，不发信运动信息。
表9
在又一实施例中，不管是否使用了全局运动补偿，发信参考图像列表中的参考图像索引。表10示出了预测单元中全局运动补偿的发信的示例性语法，在表10中，当使用全局运动补偿的时候(也就是如注释(10-1)所指出的情况)，如注释(10-2)所指出的，发信语法global_motion_idx。
表10
全局运动补偿与局部运动补偿的一同使用
全局运动补偿可以有选择地或者以组合的方式和局部运动补偿一起使用，可以通过将当前图像(切片或多个区域)分割成多个区域来实施选择性的GMC(全局运动补偿)/LMC(局部运动补偿)模式，选择GMC模式或LMC模式用于每一区域。对于使用GMC模式的区域，应用所发信的模型类型/参数于这些区域，对于使用LMC模式的区域，可以将常规的多个MV应用于区域中的每一块，其中所述多个MV可以被明确地发信或由预测进行推测。在一个实施例中，旗标(例如“use_global_motion_flag”)用于指出GMC是否用于当前单元，如果旗标是ON(也就是使用GMC)以及在更高层级语法数据头中仅发信一个全局运动模型，这一全局运动模型用于这一单元的预测和补偿而不需要额外的发信来确定全局运动模型。如果在更高层级语法数据头中发信不止一个全局运动模型，除了语法旗标“use_global_motion_flag”还发信全局运动索引，将与这一运动索引有关的全局运动应用于区域内的当前单元。如果“use_global_motion_flag”是OFF(也就是没有使用GMC)，那么发信局部运动向量以及用于当前单元，并且应用传统运动补偿。
可以明确地发信用于指出区域是否使用GMC模式或者LMC模式的旗标，该旗标也可以通过分析当前区域是否有可能具有GMC模式而隐含地决定。如果是，必要时可以发信用于这一区域的模型类型和/或全局运动索引和/或参数，或者不使用明确的旗标导出。相同的分析应该在编码器以及解码器两者执行来使发信或模型类型和/或参数的导出同步。表11示出了仅具有一个全局运动模型的示例性语法表，如表11中注释(11-1)所指出的，仅发信一个旗标use_global_motion_flag而不需要全局运动索引来确定全局运动模型。
表11
表12示出了具有多组全局运动模型的示例性语法，如表12注释(12-1)所指出的，发信旗标use_global_motion_flag。如注释(12-2)所指示的，如果旗标use_global_motion_flag为真，则如注释(12-3)所指示的，发信额外的语法global_motion_idx。
表12
在一个实施例中，可以分配全局运动或局部运动至每一块(例如，4×4块)，或者甚至每一像素，其是支持运动补偿的最小块尺寸。
组合方法(被称为组合的GMC/LMC模式)可以实施如下，在第一实施例中，将由全局运动所指出的预测样本以及由局部运动所指出的预测样本组合到一起来形成用于当前块的最终预测样本。例如，组合的预测Pred(x,y)可以根据下方等式来决定：
Pred(x,y)＝weight1*Pred_global(x,y)+weight2*Pred_local(x,y).
在上述等式中，Pred_global(x,y)是由GMC模式生成的预测样本，Pred_local(x,y)是由LMC模式生成的预测样本，weight1以及weight2是分别应用于两个预测样本的权重。根据这一实施例，除了发信全局运动补偿使用旗标(也可能连同所使用的全局运动模型的的索引)，此处不需要改变预测单元语法。当选择组合的GMC/LMC模式用于当前块的时候，解码器可以执行全局运动补偿和局部运动补偿两者，并组合两者的补偿。
在第二实施例中，基于全局运动补偿使用局部运动补偿，换句话说，根据LMC模式的局部运动相对于根据GMC模式全局运动而测量。根据这一实施例，用于当前块的解码的运动向量差异将被添加到已知的全局运动来决定当前块的绝对运动。从另一个观点来看，局部运动被当做是现有全局运动的细化。表13示出了用于预测单元的组合的全局运动和局部运动的仅具有一个全局运动模型的示例性语法，如表13所示，当帧间预测不使用参考列表1的时候，如果在列表中有不止一个参考图像，如注释(13-1)和(13-2)所指出的，发信列表0的参考图像索引(也就是ref_idx_l0[x0][y0])，在注释(13-3)中发信MV差异。在注释(13-4)中检查旗标use_global_motion_flag是否不为真，如果旗标use_global_motion_flag不为真(也就是局部运动)，如注释(13-5)所指出的，发信语法mvp_l0_flag[x0][y0]，其中mvp_l0_flag[x0][y0]指定用于块位置(x0,y0)的列表0的运动向量预测子索引。
表13
在这一示例中，当不使用全局运动的时候(也就是use_global_motion_flag等于0)，发信用于运动向量预测候选的索引。解码器将解码的MV差异添加到运动向量预测子来形成用于当前块的解码的MV。否则，当使用全局运动的时候(也就是use_global_motion_flag等于1)，解码器将解码的MV差异添加到全局运动向量预测子来形成用于当前块的解码的MV，该全局运动来自于全局运动模型。
表14示出了用于预测单元层级的具有用于组合的GMC和局部运动的多组全局运动模型的示例性语法，表14类似于表13，然而，当use_global_motion_flag的值为1的时候，如注释(14-1)所指出的，发信语法global_motion_idx[x0][y0]来从多组全局运动模型中选择全局运动模型。
表14
在这一示例中，当不使用全局运动的时候(也就是use_global_motion_flag等于0)，发信用于运动向量预测候选的索引，解码器将解码的MV差异添加到所选择的MV运动向量预测子来形成用于当前块的解码的MV。否则，当使用全局运动的时候(也就是use_global_motion_flag等于1)，发信用于运动向量预测候选的索引，其来自于全局运动模型，解码器将解码的MV差异添加到所选择的全局运动向量预测子来形成用于当前块的解码的MV。
在第三实施例中，从局部运动中减去全局运动。用这种方法，除了发信全局运动使用旗标(也可能连同所使用全局运动的索引)，此处不需要改变预测单元语法。当使用全局运动的时候，解码器可能有全局运动向量以及局部运动向量两者，并从全局运动向量中减去局部运动向量，或者从局部运动向量中减去全局运动向量。例如，最终运动向量MV可以如下导出：
MV＝(lmvx-gmvx,lmvy-gmvy).
在上述等式中，由(gmvx,gmvy)表示全局运动向量GMV以及由(lmvx,lmvy)表示解码的局部运动向量LMV。下方的表15示出了用于预测单元层级的具有多组全局运动向量模型的示例性语法，其中如注释(15-1)以及注释(15-2)所指出的，如果帧间预测不使用列表1参考以及旗标use_global_motion_flag的值为1，如注释(15-3)所指出的，发信语法global_motion_idx[x0][y0]。
表15
在表15中，可以在比预测单元层级更高的语法层级发信旗标use_global_motion_flag，例如编码单元语法。或者，可以在一些相同层级的某些地方发信旗标use_global_motion_flag，在这一示例中，即使当使用全局运动的时候，仍然需要解码局部运动。
在合并候选列表构造中，如果合并索引(Merge index)指向在GMC模式中编码的位置以及最终选择这一合并索引并发送这一合并索引到解码器，这一所指向位置的全局运动/参数将被继承并且用于当前块。所继承的全局运动/参数可能需要经过额外的处理，例如运动向量缩放、参考图像调整、双向预测与单向预测之间的转换，在这种情况下，不需要明确地发信旗标来指出当前块使用GMC而不是局部运动补偿。
关于GMC信息(例如，模型类型和/或参数)的存储，本发明公开了后续的方法。根据一个方法，行缓冲器用于存储来自于上方行(例如CTU或CU的单元)的GMC参数。例如，如果不使用GMC对当前CTU进行编码，用于这一位置的存储空间将复制来自它上方或左边CTU的信息。这样，可以从全局运动补偿信息更新进程中排除局部运动区域。这一继承信息的预测可以在合并模式或常规预测模式中。
图4示出了说明上述方案的示例，在这一示例中，不在GMC模式中对当前CTU的多个相邻CTU进行编码。为了预测在GMC模式中编码的当前CTU的运动类型和/或参数，可以使用遥远的以GMC编码的CTU的信息。如果任何相邻CTU都没有在GMC模式中进行编码，这是通过传播相邻的(上方以及左边)CTU来从它们的相邻的CTU中继承GMC信息来完成的。例如，因为使用局部运动补偿(LMC)对当前CTU上方的相邻CTU410进行编码，当前CTU上方的相邻CTU410不具有GMC信息。所存储的用于上方CTU410的GMC信息可以来自于CTU410上方的CTU420或者CTU430，CTU430在CTU410左边距离两个CTU。
或者，保留缓冲器来存储来自编码的单元的最新的GMC信息。在这一缓冲器中，可以存储一组或多组GMC信息。如果此处仅存储了一组运动信息，仅当当前单元在GMC模式中编码的时候更新所述缓冲器。如果在缓冲器中存储了不止一组运动信息，如果当前单元是在GMC模式中编码，当前单元的运动信息将被放入所述缓冲器中。如果所述缓冲器的容量是固定的或有限的，则可以使用不同的方法从缓冲器中移除非复制组(non-duplicatedset)，例如，使用先进先出原则来移除缓冲器中最旧的一组运动信息。
编码器设计
本发明公开了关于如何导出全局运动信息的几种方法。
在一个方法中，完成一个预分割(pre-segmentation)来区分全局(也就是背景)运动区域以及局部(也就是前景)运动区域。根据这一方法，首先假设一个全局运动或多个全局运动。在一个实施例中，建立当前图像与参考图像之间的像素对应关系来计算全局运动参数。在另一个实施例中，执行小块尺寸运动估计来获得参考像素与当前像素(也就是(A’,A)对)之间的像素对应关系。使用这一像素对的位置关系来计算运动模型以及参数，所述计算基于：
●全分辨率的像素
●子取样的分辨率的像素来减少计算的复杂度，或者
●表示某一尺寸块的像素，例如参数计算中块的左上方/中间像素。
对于所导出的全局运动以及参数，可以将全局运动补偿应用于当前图像中每一块/区域来找到在参考图像中它对应的参考块/区域。比较两个块/区域之间的失真以及根据以下方式做出决定：
●如果失真比较小(例如，小于给定的阈值)，这一块/区域被认为是具有全局运动；
●如果失真比较大(例如，大于给定的阈值)，这一块/区域被认为是具有局部运动；
基于全局运动/局部运动的决定，也基于每一单元的大小是如何定义的，可以发信旗标来指出这一单元是否可以应用GMC。如果该单元属于全局运动地区或区域，可以发信旗标用于所述单元。
在相同图像中的不同区域可能应用单独的全局运动，在这种情况下，全局运动的导出可以是基于区域的，换句话说，对于模型以及参数计算，仅考虑给定区域中的像素。
在上述全局运动类型/参数的导出中，可以使用迭代的进程来优化所述导出，例如，在一些区域被定义为不适合于GMC后，可以从运动类型/参数的计算中排除这些区域。可以使用更新的区域再次应用导出进程，因此，可以导出更精确的一组全局运动信息。
在另一个示例中，对于一组导出的运动参数，导出进程集中于一个作为待优化变量的参数上而假定其他参数已经是最佳的，在这一参数上执行优化来决定将增量值添加到参数中是否会导致模型的整体提升。例如，这一提升可以在是当前单元与参考像素之间整体失真上的减少。
在又一实施例中，对于一组发信的运动向量，可以调整一个或多个运动向量来决定是否任何调整可以导致所述模型整体的提升。例如，这一提升可以是在当前单元与参考像素之间整体失真上的减少。
在另一个方法中，可以通过应用如深度学习或者机器学习的技术来实现全局运动类型/参数的导出以及优化。
图5示出了示例性编解码系统的流程图，所述示例性编解码系统在视频编码器侧发信GMC(全局运动补偿)指示或者在视频解码器侧解析来自于视频比特流的所述GMC指示，其中所述GMC指示指出全局运动补偿是否是启用的。在步骤510中，所述方法在视频编码器侧接收与当前处理单元有关的输入数据或者在视频解码器侧接收视频比特流，所述视频比特流对应于包括所述当前处理单元的压缩数据，其中所述当前处理单元由来自视频数据的一组像素组成；在步骤520中，在所述视频编码器侧发信GMC(全局运动补偿)指示或者在所述视频解码器侧解析来自所述视频比特流的所述GMC指示，其中所述GMC指示指出全局运动补偿是否是启用的；在步骤530中，如果所述GMC指示指出GMC是启用的，使用包括GMC模式的一个或多个编解码模式，在所述视频编码器侧对所述当前处理单元进行编码或者在所述视频解码器侧对所述当前处理单元进行解码。
图6示出了根据本发明的示例性编解码系统的流程图，其中所允许的多个全局运动模型的数目被并入视频比特流之中。在步骤610中，所述方法在视频编码器侧接收与区域中当前处理单元有关的输入数据或者在视频解码器侧接收视频比特流，所述视频比特流对应于包括所述区域中所述当前处理单元的压缩数据，其中所述当前处理单元由来自于视频数据的一组像素组成；在步骤620中，检查用于所述区域的GMC(全局运动补偿)模式是否是启用的；如果结果是“是”，执行步骤630以及640，否则(也就是“否”)，跳过步骤630以及640。在步骤630中，决定第一数目，其表示所允许的多个全局运动模型的总数目，其中在所述视频编码器侧使用所述多个全局运动模型对所述区域中处理单元进行编码或者在所述视频解码器侧使用所述多个全局运动模型对所述区域中所述处理单元进行解码；在步骤640中，使用包括GMC模式的一个或多个编码模式，在所述视频编码器侧对所述当前处理单元进行编码或者在所述视频解码器侧对所述当前处理单元进行解码，所述GMC模式具有从所述多个全局运动模型中选择的一个全局运动模型。
图7示出了根据本发明的示例性编解码系统的流程图，其中分别地或组合地应用所述GMC(全局运动补偿)模式以及LMC(局部运动补偿)模式。在步骤710中，所述方法在视频编码器侧接收与当前图像中多个区域有关的输入数据或者在视频解码器侧接收视频比特流，所述视频比特流对应于包括来自所述当前图像的所述多个区域的压缩的数据；在步骤720中，使用选择性的GMC(全局运动补偿)/LMC(局部运动补偿)模式或者组合的GMC/LMC模式中的任一个对每一区域进行编码或解码，其中如果选择所述选择性的GMC/LMC模式用于给定区域，使用GMC模式或者LMC模式中的任一个对所述给定区域中每一处理单元进行编码或解码，如果选择所述组合的GMC/LMC模式用于所述给定区域，使用GMC模式以及LMC模式两者一起对所述给定区域中每一处理单元进行编码或解码。
上述示出的多个流程图旨在说明根据本发明的视频编解码的示例，本领域技术人员可以修改每一步骤、重新排列这些步骤、拆分一个步骤或者组合多个步骤来实施本发明而不背离本发明的精神。在本发明中，已经使用了特定的语法以及语义来说明实施本发明实施例的多个示例，本领域技术人员可以用等同的语法以及语义来替代已使用的语法以及语义来实施本发明而不背离本发明的精神。
上述的描述是为了使本领域普通技术人员能够在所提供的特定应用和其需求的情境中实施本发明。所描述实施例的各种修正对本领域普通技术人员将是显而易见的，以及此处所定义的基本原理也可以应用于其他实施。因此，本发明不旨在限于所示和所描述的特定实施例，而是与此处所公开的原理以及新颖特征一致的最宽的范围。在上述细节描述中，所示出的各种特定的细节是为了提供本发明的透彻的理解，然而，本领域普通技术人员能够理解，可以实施本发明。
上述所描述的本发明的实施例可以以各种硬件、软件代码或者两者的组合来实施。例如，本发明的实施例可以是集成到视频压缩芯片上用来执行本发明所描述的进程的一个或多个电子电路或者集成到视频压缩软件来执行本发明所描述的进程的程序代码。本发明的实施例也可以是在数字信号处理器上执行的程序代码来执行本发明所描述的进程。本发明也涉及由计算机处理器、数字信号处理器、微处理器或者场可编程门阵列(FPGA)执行的若干功能，这些处理器可以配置于执行根据本发明的特定的任务，通过执行由本发明实施的定义特定方法的机器可读软件代码或固件代码，所述软件代码或固件代码可以以不同的程序语言以及不同的格式或风格开发，所述软件代码也可以由不同的目标平台所编译。然而，不同的代码格式、风格以及软件代码的语言以及配置代码的其他方法来执行与本发明一致的任务将不背离本发明的精神和范围。
本发明可以以其他特殊的形式实施而不背离其精神或基础特征，所描述的多个示例在所有方面仅认为是说明性的而非限制性的。因此，本发明的范围由所附权利要求而非由前述描述所指示，在权利要求的等同的方法以及范围内的所有变化都被包括在它们的范围内。

Claims (36)

1.一种在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，所述方法包括：
在视频编码器侧接收与当前处理单元有关的输入数据或者在视频解码器侧接收视频比特流，所述视频比特流对应于包括所述当前处理单元的压缩数据，其中所述当前处理单元由来自视频数据的一组像素组成；
在所述视频编码器侧发信全局运动补偿指示或者在所述视频解码器侧解析来自所述视频比特流的所述全局运动补偿指示，其中所述全局运动补偿指示指出全局运动补偿是否是启用的；以及
如果所述全局运动补偿指示指出所述全局运动补偿是启用的，使用包括全局运动补偿模式的一个或多个编解码模式在所述视频编码器侧对所述当前处理单元进行编码或者在所述解码器侧对所述当前处理单元进行解码。
2.如权利要求1所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中所述当前处理单元对应于序列、图像、切片、方块、区域、编码块或者预测块。
3.如权利要求1所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中在语法层级高于或者等于所述当前处理单元的层级的所述视频比特流中发信所述全局运动补偿指示。
4.如权利要求3所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，在所述视频编码器侧发信用于所述视频比特流中当前处理单元的全局运动补偿使用旗标，或者在所述视频解码器侧解析用于来自所述视频比特流的所述当前处理单元的所述全局运动补偿使用旗标，其中所述全局运动补偿使用旗标指出所述全局运动补偿模式是否应用于与所述当前处理单元。
5.如权利要求1所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，进一步包括如果所述全局运动补偿指示指出所述全局运动补偿是启用的，发信与用于所述全局运动补偿模式的全局运动模型有关的参数的总数目以及多个参数的值。
6.如权利要求1所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，进一步包括如果所述全局运动补偿指示指出所述全局运动补偿是启用的，发信指示用于所述全局运动补偿模式的全局运动模型数量的旗标。
7.如权利要求6所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，进一步包括发信指示所选择的全局运动模型的旗标，所述所选择的全局运动模型从用于所述当前处理单元的多个候选全局运动模型中选出。
8.一种在视频编码器或视频解码器中执行视频编解码的帧间预测的装置，其特征在于，所述装置包括一个或多个电子电路或处理器用于：
在视频编码器侧接收与当前处理单元有关的输入数据或者在视频解码器侧接收视频比特流，所述视频比特流对应于包括所述当前处理单元的压缩数据，其中所述当前处理单元由来自视频数据的一组像素组成；
在所述视频编码器侧发信全局运动补偿指示或者在所述视频解码器侧解析来自所述视频比特流的所述全局运动补偿指示，其中所述全局运动补偿指示指出全局运动补偿是否是启用的；以及
如果所述全局运动补偿指示指出所述全局运动补偿是启用的，使用包括全局运动补偿模式的一个或多个编解码模式在所述视频编码器侧对所述当前处理单元进行编码或者在所述解码器侧对所述当前处理单元进行解码。
9.一种在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，所述方法包括：
在视频编码器侧接收与区域中当前处理单元有关的输入数据或者在视频解码器侧接收视频比特流，所述视频比特流对应于包括所述区域中所述当前处理单元的压缩数据，其中所述当前处理单元由来自视频数据的一组像素组成；
如果全局运动补偿模式对于所述区域是启用的：
决定第一数目，所述第一数目表示用于在所述视频编码器侧使用多个全局运动模型对所述区域中的多个处理单元进行编码或者在所述视频解码器侧使用所述多个全局运动模型对所述区域中的所述多个处理单元进行解码所允许的所述多个全局运动模型的总数目；以及
使用一个或多个编解码模式在所述视频编码器侧对所述当前处理单元进行编码或者在所述视频解码器侧对所述当前处理单元进行解码，所述一个或多个编解码模式包括具有从所述多个全局运动模型中选择的一个全局运动模型的所述全局运动补偿模式。
10.如权利要求9所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中表示每一所述多个全局运动模型的参数的总数目的第二数目可以包括于所述视频比特流中。
11.如权利要求9所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中用于每一所述多个全局运动模型的运动类型包括于与所述区域有关的高层级语法的所述视频比特流中，其中所述运动类型被映射到对应的用于每一所述多个全局运动模型的参数的总数目。
12.如权利要求11所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中使用可变长度编码对所述运动类型进行二进制化。
13.如权利要求11所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中由与先前编码区域有关的给定全局运动模型的另一个运动类型预测性地对所述给定全局运动模型的所述运动类型进行编码。
14.如权利要求13所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中所述先前编码区域对应于左边区域、上方区域或者时间同位区域。
15.如权利要求13所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中旗标用于去指示是否由与所述先前编码区域有关的所述给定全局运动模型的所述另一个运动类型精确地预测所述给定全局运动模型的所述运动类型。
16.如权利要求9所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中在所述视频编码器侧，在与所述区域相关的高层级语法的所述视频比特流中发信每一所述多个全局运动模型的多个参数，或者在所述视频解码器侧，解析来自所述高层级语法的所述视频流的所述多个参数。
17.如权利要求16所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中所述高层级语法对应于序列参数集、图像参数集、切片数据头、区域或者块。
18.如权利要求17所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中所述当前处理单元对应于编码树单元、编码块或者预测块。
19.如权利要求16所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中使用与先前编码区域相关的给定全局运动模型的其他参数在所述高层级语法中预测性地发信所述给定全局运动模型的所述多个参数。
20.如权利要求19所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中所述先前编码区域对应于左边区域、上方区域或者时间同位区域。
21.如权利要求20所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，使用旗标来指示是否由与所述先前编码区域有关的所述给定全局运动模型的所述其他参数精确地预测所述给定全局运动模型的所述多个参数。
22.如权利要求9所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，在高层级语法的所述视频比特流中发信全局运动补偿指示来指出所述全局运动补偿模式对于所述区域是否是启用的，其中所述高层级语法高于或等于所述当前处理单元的层级。
23.如权利要求22所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，在所述视频编码器侧，在所述视频比特流中发信全局运动补偿使用旗标，或者在所述视频解码器侧，解析来自所述视频比特流的所述全局运动补偿使用旗标，其中所述全局运动补偿使用旗标在所述视频比特流中所述当前处理单元的层级内，来指示所述全局运动补偿模式是否应用于所述当前处理单元。
24.如权利要求23所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中当所述全局运动补偿使用旗标指示所述全局运动补偿模式应用于所述当前处理单元的时候，全局运动索引用于确定所述一个全局运动模型，所述一个全局运动模型从用于所述当前处理单元的所述多个全局运动模型中选出。
25.如权利要求23所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中当所述全局运动补偿使用旗标指示所述全局运动补偿模式应用于所述当前处理单元的时候，全局运动索引增量用于确定所述一个全局运动模型，所述一个全局运动模型从用于所述当前处理单元的所述多个全局运动模型中选出，其中所述全局运动索引增量对应于与所述当前处理单元有关的第一全局运动索引和与先前编码处理单元有关的第二全局运动索引之间的差异。
26.如权利要求9所述的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中对于所述当前处理单元，允许从所述多个全局运动模型中选择的所述一个全局运动模型的多于一组参数，以及在所述视频比特流中所述当前处理单元的层级中发信用于在所述多于一组参数中选择的指示。
27.一种在视频编码器或视频解码器中执行视频编解码的帧间预测的装置，其特征在于，所述装置包括一个或多个电子电路或处理器用于：
在视频编码器侧接收与区域中当前处理单元有关的输入数据或者在视频解码器侧接收视频比特流，所述视频比特流对应于包括所述区域中所述当前处理单元的压缩数据，其中所述当前处理单元由来自视频数据的一组像素组成；
如果全局运动补偿模式对于所述区域是启用的：
决定第一数目，所述第一数目表示用于在所述视频编码器侧使用多个全局运动模型对所述区域中的多个处理单元进行编码或者在所述视频解码器侧使用所述多个全局运动模型对所述区域中的所述多个处理单元进行解码所允许的所述多个全局运动模型的总数目；以及
使用一个或多个编解码模式在所述视频编码器侧对所述当前处理单元进行编码或者在所述视频解码器侧对所述当前处理单元进行解码，所述一个或多个编解码模式包括具有从所述多个全局运动模型中选择的一个全局运动模型的所述全局运动补偿模式。
28.一种在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，所述方法包括：
在视频编码器侧接收与当前图像中多个区域有关的输入数据或者在视频解码器侧接收视频比特流，所述视频比特流对应于包括所述当前图像中所述多个区域的压缩数据；以及
使用选择性的全局运动补偿/局部运动补偿模式或者组合的全局运动补偿/局部运动补偿模式中的任一个对每一区域进行编码或解码，其中如果选择所述选择性的全局运动补偿/局部运动补偿模式用于给定区域，使用全局运动补偿模式或局部运动补偿模式中的任一个对所述给定区域中的每一处理单元进行编码或解码，以及如果选择所述组合的全局运动补偿/局部运动补偿模式用于所述给定区域，使用所述全局运动补偿模式以及所述局部运动补偿模式两者一起对所述给定区域中的每一处理单元进行编码或解码。
29.如权利要求28所示的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中当选择所述选择性全局运动补偿/局部运动补偿模式用于所述给定区域，旗标用于来指示所述全局运动补偿模式是否用于所述给定区域中的处理单元。
30.如权利要求29所示的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中如果所述全局运动补偿模式允许多个全局运动模型，使用全局运动索引来指示从所述多个全局运动模型选择的用于所述处理单元的给定的全局运动模型。
31.如权利要求28所示的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中当选择组合的全局运动补偿/局部运动补偿模式用于给定区域的时候，根据基于所述全局运动补偿模式生成的全局运动补偿预测子以及基于所述局部运动补偿模式生成的局部运动补偿预测子的加权和，生成用于所述给定区域中处理单元的组合预测子。
32.如权利要求28所示的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中当选择所述组合的全局运动补偿/局部运动补偿模式用于所述给定区域的时候，根据所述全局运动补偿模式将全局运动补偿运动向量用作为初始运动向量，以及根据所述局部运动补偿模式细化所述初始运动向量以获得最终运动向量。
33.如权利要求32所示的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中当发信运动向量差异的时候，所述运动向量差异对应于所述最终运动向量和所述初始运动向量之间的差异。
34.如权利要求28所示的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中当所述全局运动补偿模式用于所述给定区域的时候，发信合并索引用于所述给定区域来指示从由所述合并索引所指向的先前编码区域的全局运动补偿信息继承或者预测所述给定区域的所述全局运动补偿信息，其中所述全局运动补偿信息包括与所述全局运动补偿模式有关的多个参数。
35.如权利要求34所示的在视频编码器或视频解码器中执行视频编解码的帧间预测的方法，其特征在于，其中存储用于上方行中一个或多个编码区域的所述全局运动补偿信息，并用于导出用于所述给定区域的所述全局运动补偿信息的一个或多个合并候选，其中如果不在所述全局运动补偿模式中对所述上方行中的所述一个或多个编码区域中的目标区域进行编码，在用于所述目标区域的位置处存储来自所述目标区域的上方区域或左边区域的所述全局运动补偿信息。
36.一种在视频编码器或视频解码器中执行视频编解码的帧间预测的装置，其特征在于，所述装置包括一个或多个电子电路或处理器用于：
在视频编码器侧接收与当前图像中多个区域有关的输入数据或者在视频解码器侧接收视频比特流，所述视频比特流对应于包括所述当前图像中所述多个区域的压缩数据；以及
使用选择性的全局运动补偿/局部运动补偿模式或者组合的全局运动补偿/局部运动补偿模式中的任一个对每一区域进行编码或解码，其中如果选择所述选择性的全局运动补偿/局部运动补偿模式用于给定区域，使用全局运动补偿模式或者局部运动补偿模式中的任一个对所述给定区域中每一处理单元进行编码或解码，以及如果选择所述组合的全局运动补偿/局部运动补偿模式用于所述给定区域，使用所述全局运动补偿模式和所述局部运动补偿模式两者一起对所述给定区域中每一处理单元进行编码或解码。
CN201680067484.9A 2015-11-20 2016-11-18 视频编解码系统中全局运动补偿的方法及装置 Pending CN108293128A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201562257754P 2015-11-20 2015-11-20
US62/257,754 2015-11-20
PCT/US2016/062681 WO2017087751A1 (en) 2015-11-20 2016-11-18 Method and apparatus for global motion compensation in video coding system

Publications (1)

Publication Number Publication Date
CN108293128A true CN108293128A (zh) 2018-07-17

Family

ID=58717829

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680067484.9A Pending CN108293128A (zh) 2015-11-20 2016-11-18 视频编解码系统中全局运动补偿的方法及装置

Country Status (3)

Country Link
US (1) US11082713B2 (zh)
CN (1) CN108293128A (zh)
WO (1) WO2017087751A1 (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110677655A (zh) * 2019-06-21 2020-01-10 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及存储介质
WO2020042990A1 (zh) * 2018-08-28 2020-03-05 华为技术有限公司 帧间预测方法、装置及其应用的编/解方法及装置
CN110959292A (zh) * 2019-07-03 2020-04-03 北京小米移动软件有限公司 视频的编码、解码的方法及装置、存储介质
CN111010565A (zh) * 2018-10-04 2020-04-14 华为技术有限公司 帧间预测方法、装置及其应用的编/解方法及装置
CN111726630A (zh) * 2019-03-18 2020-09-29 华为技术有限公司 基于三角预测单元模式的处理方法及装置
WO2021056214A1 (zh) * 2019-09-24 2021-04-01 Oppo广东移动通信有限公司 编码方法、解码方法、编码器、解码器以及存储介质
CN113016185A (zh) * 2018-11-17 2021-06-22 北京字节跳动网络技术有限公司 以运动矢量差分模式控制Merge
CN113812159A (zh) * 2019-05-14 2021-12-17 北京字节跳动网络技术有限公司 视频编解码中的缩放方法
CN114339216A (zh) * 2020-10-10 2022-04-12 阿里巴巴集团控股有限公司 视频处理方法、装置、电子设备及存储介质
CN114467308A (zh) * 2019-09-22 2022-05-10 北京字节跳动网络技术有限公司 视频处理中的参考图片重采样

Families Citing this family (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10560712B2 (en) * 2016-05-16 2020-02-11 Qualcomm Incorporated Affine motion prediction for video coding
US10448010B2 (en) 2016-10-05 2019-10-15 Qualcomm Incorporated Motion vector prediction for affine motion models in video coding
US10681370B2 (en) * 2016-12-29 2020-06-09 Qualcomm Incorporated Motion vector generation for affine motion model for video coding
WO2018169571A1 (en) * 2017-03-15 2018-09-20 Google Llc Segmentation-based parameterized motion models
CN118214883A (zh) 2017-08-03 2024-06-18 Oppo广东移动通信有限公司 利用仿射预测处理视频信号的方法和装置
US11877001B2 (en) * 2017-10-10 2024-01-16 Qualcomm Incorporated Affine prediction in video coding
SG11202100434TA (en) 2018-07-17 2021-02-25 Huawei Tech Co Ltd Motion model signaling
CN110876059B (zh) * 2018-09-03 2022-06-10 华为技术有限公司 运动矢量的获取方法、装置、计算机设备及存储介质
EP3700216B1 (en) 2018-09-10 2022-08-03 LG Electronics Inc. Affine motion prediction-based image coding using affine mvp candidate list
US11356695B2 (en) 2018-09-14 2022-06-07 Koninklijke Kpn N.V. Video coding based on global motion compensated motion vector predictors
EP3850845A1 (en) * 2018-09-14 2021-07-21 Koninklijke KPN N.V. Video coding based on global motion compensated motion vectors
KR20210069715A (ko) * 2018-10-10 2021-06-11 인터디지털 브이씨 홀딩스 인코포레이티드 비디오 인코딩 및 디코딩의 아핀 모드 시그널링
GB2578150C (en) * 2018-10-18 2022-05-18 Canon Kk Video coding and decoding
GB2595054B (en) * 2018-10-18 2022-07-06 Canon Kk Video coding and decoding
US11025951B2 (en) * 2019-01-13 2021-06-01 Tencent America LLC Method and apparatus for video coding
EP3939300A1 (en) 2019-03-15 2022-01-19 InterDigital VC Holdings, Inc. Method and device for image encoding and decoding
KR20210153129A (ko) 2019-04-25 2021-12-16 오피 솔루션즈, 엘엘씨 글로벌 모션을 갖는 프레임들에서의 선택적 모션 벡터 예측 후보들
KR20220002991A (ko) * 2019-04-25 2022-01-07 오피 솔루션즈, 엘엘씨 글로벌 모션을 갖는 프레임들에서의 적응적 모션 벡터 예측 후보들
JP2022530054A (ja) * 2019-04-25 2022-06-27 オーピー ソリューションズ， エルエルシー ピクチャヘッダ内の大域的運動ベクトルの信号伝達
SG11202111738RA (en) 2019-04-25 2021-11-29 Op Solutions Llc Global motion constrained motion vector in inter prediction
EP3959887A4 (en) * 2019-04-25 2022-08-10 OP Solutions, LLC CANDIDATES IN FRAMEWORK WITH GLOBAL MOVEMENT
EP3959873A4 (en) 2019-04-25 2022-08-10 OP Solutions, LLC EFFICIENT CODING OF GLOBAL MOTION VECTORS
KR20210153128A (ko) * 2019-04-25 2021-12-16 오피 솔루션즈, 엘엘씨 인터 예측에서의 병합 모드 후보들에 대한 글로벌 모션
SG11202111760SA (en) 2019-04-25 2021-11-29 Op Solutions Llc Signaling of global motion vector in picture header
KR20220002987A (ko) * 2019-04-25 2022-01-07 오피 솔루션즈, 엘엘씨 모션 벡터 인터 예측을 위한 글로벌 모션 모델들
CN118077203A (zh) * 2021-07-15 2024-05-24 谷歌有限责任公司 具有明确信示的扩展旋转的经扭曲的运动补偿

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1156944A (zh) * 1995-10-26 1997-08-13 现代电子产业株式会社 结合全域、区域动推测方式的选择型动推测装置及其方法
JPH10145795A (ja) * 1996-11-15 1998-05-29 Nippon Telegr & Teleph Corp <Ntt> 動画像符号化方法、復号方法、動画像符号化装置および動画像復号装置
US20030174776A1 (en) * 1997-06-25 2003-09-18 Nippon Telegraph And Telephone Corporation Motion vector predictive encoding method, motion vector decoding method, predictive encoding apparatus and decoding apparatus, and storage media storing motion vector predictive encoding and decoding programs
US20030174775A1 (en) * 2002-03-13 2003-09-18 Hitachi, Ltd. Encoding and decoding apparatus, method for monitoring images
CN1633812A (zh) * 2001-11-30 2005-06-29 艾利森电话股份有限公司 视频图片的全局运动补偿
CN103026707A (zh) * 2010-07-21 2013-04-03 杜比实验室特许公司 使用用于视频编码的高级运动模型的参考处理
US20150222920A1 (en) * 2014-02-06 2015-08-06 Kabushiki Kaisha Toshiba Image processing device, imaging device, and image processing method

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5473379A (en) 1993-11-04 1995-12-05 At&T Corp. Method and apparatus for improving motion compensation in digital video coding
US7050500B2 (en) 2001-08-23 2006-05-23 Sharp Laboratories Of America, Inc. Method and apparatus for motion vector coding with global motion parameters
KR101108661B1 (ko) 2002-03-15 2012-01-25 노키아 코포레이션 비디오 시퀀스에서의 움직임 부호화 방법
US20050105621A1 (en) * 2003-11-04 2005-05-19 Ju Chi-Cheng Apparatus capable of performing both block-matching motion compensation and global motion compensation and method thereof
KR101365445B1 (ko) * 2007-01-03 2014-02-19 삼성전자주식회사 전역 및 국부 움직임 보상을 순차적으로 이용하는 움직임보상 방법, 복호화 방법, 장치, 인코더 및 디코더
US8860781B2 (en) * 2009-06-30 2014-10-14 Qualcomm Incorporated Texture compression in a video decoder for efficient 2D-3D rendering
CN115065823A (zh) 2012-07-02 2022-09-16 韩国电子通信研究院 视频编码/解码方法和非暂时性计算机可读记录介质
GB2514334B (en) * 2013-05-13 2020-04-22 Snell Advanced Media Ltd Video processing

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1156944A (zh) * 1995-10-26 1997-08-13 现代电子产业株式会社 结合全域、区域动推测方式的选择型动推测装置及其方法
JPH10145795A (ja) * 1996-11-15 1998-05-29 Nippon Telegr & Teleph Corp <Ntt> 動画像符号化方法、復号方法、動画像符号化装置および動画像復号装置
US20030174776A1 (en) * 1997-06-25 2003-09-18 Nippon Telegraph And Telephone Corporation Motion vector predictive encoding method, motion vector decoding method, predictive encoding apparatus and decoding apparatus, and storage media storing motion vector predictive encoding and decoding programs
CN1633812A (zh) * 2001-11-30 2005-06-29 艾利森电话股份有限公司 视频图片的全局运动补偿
US20030174775A1 (en) * 2002-03-13 2003-09-18 Hitachi, Ltd. Encoding and decoding apparatus, method for monitoring images
CN103026707A (zh) * 2010-07-21 2013-04-03 杜比实验室特许公司 使用用于视频编码的高级运动模型的参考处理
US20150222920A1 (en) * 2014-02-06 2015-08-06 Kabushiki Kaisha Toshiba Image processing device, imaging device, and image processing method

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020042990A1 (zh) * 2018-08-28 2020-03-05 华为技术有限公司 帧间预测方法、装置及其应用的编/解方法及装置
CN111010565A (zh) * 2018-10-04 2020-04-14 华为技术有限公司 帧间预测方法、装置及其应用的编/解方法及装置
CN111010565B (zh) * 2018-10-04 2023-05-16 华为技术有限公司 帧间预测方法、装置及其应用的编/解方法及装置
CN113016185A (zh) * 2018-11-17 2021-06-22 北京字节跳动网络技术有限公司 以运动矢量差分模式控制Merge
CN113016185B (zh) * 2018-11-17 2024-04-05 北京字节跳动网络技术有限公司 以运动矢量差分模式控制Merge
US11831901B2 (en) 2018-11-17 2023-11-28 Beijing Bytedance Network Technology Co., Ltd Generalized bi directional prediction mode in video processing
CN111726630A (zh) * 2019-03-18 2020-09-29 华为技术有限公司 基于三角预测单元模式的处理方法及装置
CN111726630B (zh) * 2019-03-18 2024-03-15 华为技术有限公司 基于三角预测单元模式的处理方法及装置
CN113812159A (zh) * 2019-05-14 2021-12-17 北京字节跳动网络技术有限公司 视频编解码中的缩放方法
CN110677655B (zh) * 2019-06-21 2022-08-16 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及存储介质
CN110677655A (zh) * 2019-06-21 2020-01-10 杭州海康威视数字技术股份有限公司 一种编解码方法、装置及存储介质
US12075066B2 (en) 2019-06-21 2024-08-27 Hangzhou Hikvision Digital Technology Co., Ltd. Coding/decoding method and device, and storage medium
CN110959292A (zh) * 2019-07-03 2020-04-03 北京小米移动软件有限公司 视频的编码、解码的方法及装置、存储介质
CN114467308A (zh) * 2019-09-22 2022-05-10 北京字节跳动网络技术有限公司 视频处理中的参考图片重采样
CN114467308B (zh) * 2019-09-22 2024-04-12 北京字节跳动网络技术有限公司 视频处理中的参考图片重采样
CN113261285A (zh) * 2019-09-24 2021-08-13 Oppo广东移动通信有限公司 编码方法、解码方法、编码器、解码器以及存储介质
WO2021056214A1 (zh) * 2019-09-24 2021-04-01 Oppo广东移动通信有限公司 编码方法、解码方法、编码器、解码器以及存储介质
CN113261285B (zh) * 2019-09-24 2023-06-02 Oppo广东移动通信有限公司 编码方法、解码方法、编码器、解码器以及存储介质
CN114339216A (zh) * 2020-10-10 2022-04-12 阿里巴巴集团控股有限公司 视频处理方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
US11082713B2 (en) 2021-08-03
WO2017087751A1 (en) 2017-05-26
US20200260111A1 (en) 2020-08-13

Similar Documents

Publication Publication Date Title
CN108293128A (zh) 视频编解码系统中全局运动补偿的方法及装置
JP7525178B2 (ja) 適応的動きベクトル解像度を用いるビデオ信号処理方法及び装置
US11032568B2 (en) Method of video coding using prediction based on intra picture block copy
CN111919449B (zh) 使用运动补偿的视频信号处理方法及设备
CN102907095B (zh) 局部多重假设预测的执行方法及装置
CN113574880B (zh) 关于子块变换模式的分割
CN105120264B (zh) 用于视频编码的低复杂度帧内预测
JP2022044613A (ja) 画像予測方法および関連装置
CN105981388B (zh) 调色板编码中句法冗余移除的方法和装置
CN110313180A (zh) 用于编码和解码运动信息的方法和装置
TW201830972A (zh) 用於視訊寫碼之低複雜度符號預測
CN109089117A (zh) 编码或解码视频数据的方法及装置
CN107810635A (zh) 图像编译系统中基于照度补偿预测块的方法和设备
CN109804627A (zh) 图像编码/解码方法和设备
CN104885470A (zh) 用于下一代视频的预测和编码的内容自适应划分
CN106576171A (zh) 统一帧内块复制和帧间预测
CN105847792A (zh) 运动图像编码装置以及图像编码方法
CN104221383A (zh) 运动图像编码装置、运动图像解码装置、运动图像编码方法以及运动图像解码方法
CN106791833A (zh) 编码方法、解码方法、编码设备以及解码设备
CN106899847A (zh) 编码设备、解码设备、编码方法和解码方法
CN103503457A (zh) 运动图像编码装置、运动图像解码装置、运动图像编码方法以及运动图像解码方法
TWI722465B (zh) 子塊的邊界增強
CN101632306B (zh) 用于运动补偿预测视频编码和解码的自适应内插方法和系统
CN108965870B (zh) 通过基于图像内容搜索和分级在视频压缩中对至参考块的链接进行编码
CN112823526A (zh) 通过使用交叉分量线性模型来处理视频信号的方法和设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20180717

WD01 Invention patent application deemed withdrawn after publication