CN114270860A - 针对仿射模式的自适应运动矢量分辨率 - Google Patents

针对仿射模式的自适应运动矢量分辨率 Download PDF

Info

Publication number
CN114270860A
CN114270860A CN202080040325.6A CN202080040325A CN114270860A CN 114270860 A CN114270860 A CN 114270860A CN 202080040325 A CN202080040325 A CN 202080040325A CN 114270860 A CN114270860 A CN 114270860A
Authority
CN
China
Prior art keywords
mvd
block
video
prediction
pixels
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202080040325.6A
Other languages
English (en)
Inventor
修晓宇
陈漪纹
王祥林
叶水明
马宗全
朱弘正
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Dajia Internet Information Technology Co Ltd
Original Assignee
Beijing Dajia Internet Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Dajia Internet Information Technology Co Ltd filed Critical Beijing Dajia Internet Information Technology Co Ltd
Publication of CN114270860A publication Critical patent/CN114270860A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

电子装置执行在帧间预测模式下计算针对当前块的运动矢量差(MVD)的方法。电子装置首先从视频比特流接收指示多个MVD分辨率集合中的第一MVD分辨率集合的第一语义元素，其中第一语义元素在预定义分区级被用信号发送，并且其中第一MVD分辨率集合包括多个MVD分辨率值。随后，电子装置从视频比特流接收指示第一MVD分辨率集合中的第一MVD分辨率值的第二语义元素以及指示与当前块相关联的MVD的第三语义元素。电子装置然后基于第二语义元素和第三语义元素将MVD重建为其实际值。

Description

针对仿射模式的自适应运动矢量分辨率
技术领域
本申请总体上涉及视频数据编码和解码，并且具体地，涉及用于提高在仿射模式下用信号发送运动矢量的效率的方法和系统。
背景技术
各种电子设备(诸如数字电视、膝上型计算机或台式计算机、平板计算机、数码相机、数字记录设备、数字媒体播放器、视频游戏机、智能电话、视频电话会议设备、视频流设备等)都支持数字视频。电子设备通过实施如由MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4、Part 10、高级视频编解码(AVC)、高效视频编解码(HEVC)和通用视频编解码(VVC)标准定义的视频压缩/解压缩标准来发送、接收、编码、解码和/或存储数字视频数据。视频压缩通常包括执行空间(帧内)预测和/或时间(帧间)预测来减少或去除视频数据中固有的冗余。对于基于块的视频编解码，视频帧被分割为一个或更多个条带，每个条带具有多个视频块，视频块也可被称为编解码树单元(CTU)。每个CTU可包含一个编解码单元(CU)，或者递归地被拆分为更小的CU直到达到预定义的最小CU尺寸为止。每个CU(也称为叶CU)包含一个或多个变换单元(TU)，并且每个CU还包含一个或多个预测单元(PU)。每个CU可以以帧内模式、帧间模式或IBC模式被编解码。视频帧的帧内编解码(I)条带中的视频块是使用针对同一视频帧内的相邻块中的参考样点的空间预测被编码的。视频帧的帧间编解码(P或B)条带中的视频块可以使用针对同一视频帧内的相邻块中的参考样点的空间预测或针对其他先前和/或未来参考视频帧中的参考样点的时间预测。
基于先前已被编码的参考块(例如，相邻块)的空间预测或时间预测得出用于待编解码的当前视频块的预测块。可以通过块匹配算法来完成找到参考块的过程。表示待编解码的当前块与预测块之间的像素差的残差数据被称为残差块或预测误差。帧间编解码块根据运动矢量和残差块被编码，运动矢量指向参考帧中的形成预测块的参考块。确定运动矢量的过程通常被称为运动估计。帧内编解码块根据帧内预测模式和残差块被编码。为了进一步压缩，残差块从像素域被变换到变换域(例如，频域)，从而得出残差变换系数，残差变换系数然后可以被量化。最初以二维阵列布置的量化的变换系数可以被扫描以产生变换系数的一维矢量，并且然后被熵编码为视频比特流以实现甚至更大的压缩。
经编码的视频比特流然后被保存于计算机可读存储介质(例如，闪存存储器)中，以由具有数字视频能力的另一电子设备访问，或者有线地或无线地直接发送到电子设备。电子设备然后执行视频解压缩(其为与上文描述的视频压缩相反的过程)，例如，通过对经编码的视频比特流进行解析来从比特流获得语义元素，并且至少部分地基于从比特流获得的语义元素从经编码的视频比特流将数字视频数据重建为其原始格式，并且电子设备在电子设备的显示器上呈现重建的数字视频数据。
发明内容
本申请描述了与视频数据编码和解码相关的实施方式，并且更具体地，实施方式与提高在仿射模式下用信号发送运动矢量的效率的视频编解码的系统和方法相关。
根据本申请的第一方面，一种在帧间预测模式下计算针对当前块的运动矢量差(MVD)的方法，所述方法包括：从视频比特流接收指示多个MVD分辨率集合中的第一MVD分辨率集合的第一语义元素，其中所述第一语义元素在预定义分区级被用信号发送，并且其中所述第一MVD分辨率集合包括多个MVD分辨率值；从所述视频比特流接收指示所述第一MVD分辨率集合中的第一MVD分辨率值的第二语义元素以及指示与所述当前块相关联的MVD的第三语义元素；以及基于所述第二语义元素和所述第三语义元素将所述当前块的所述MVD重建为其实际值。
根据本申请的第二方面，一种电子装置包括一个或更多个处理单元、存储器和存储在存储器中的多个程序。程序在被一个或更多个处理单元执行时使电子装置执行上文描述的用于在帧间预测模式下计算针对当前块的运动矢量差的操作。
根据本申请的第三方面，一种非暂态计算机可读存储介质存储用于由具有一个或更多个处理单元的电子装置执行的多个程序。程序在被一个或更多个处理单元执行时使电子装置执行上文描述的用于在帧间预测模式下计算针对当前块的运动矢量差的操作。
根据本申请的第四方面，一种在仿射帧间预测模式下计算针对当前块的控制点运动矢量CPMV的方法，所述方法包括：从视频比特流接收指示第一运动矢量差分辨率集合的第一语义元素，其中所述第一MVD分辨率集合包括多个MVD分辨率值，每个MVD分辨率值对应于所述当前块的相应CPMV；针对与所述当前块相关联的CPMV中的每个CPMV：从所述视频比特流接收指示所述CPMV的MVD的第二语义元素；以及基于所述第一第二语义元素和所述第二语义元素将所述CPMV的所述MVD重建为其实际值。
根据本申请的第五方面，一种电子装置包括一个或更多个处理单元、存储器和存储在存储器中的多个程序。程序在被一个或更多个处理单元执行时使电子装置执行上文描述的用于在仿射帧间预测模式下计算针对当前块的控制点运动矢量的操作。
根据本申请的第六方面，一种非暂态计算机可读存储介质存储用于由具有一个或更多个处理单元的电子装置执行的多个程序。程序在被一个或更多个处理单元执行时使电子装置执行上文描述的用于在仿射帧间预测模式下计算针对当前块的控制点运动矢量的操作。
附图说明
附图被包括以提供对实施方式的进一步理解并且被并入本文并构成说明书的一部分，附图示出了所描述的实施方式并且与本描述一起用于解释基本原理。相似的参考标号指代对应的部分。
图1是示出根据本公开的一些实施方式的示例性视频编码和解码系统的框图。
图2是示出根据本公开的一些实施方式的示例性视频编码器的框图。
图3是示出根据本公开的一些实施方式的示例性视频解码器的框图。
图4A至图4E是示出根据本公开的一些实施方式的如何将帧递归地分割为不同尺寸和形状的多个视频块的框图。
图5A和图5B是分别示出根据本公开的一些实施方式的4参数的基于块的仿射运动模型和6参数的基于块的仿射运动模型的框图。
图5C是示出根据本公开的一些实施方式的从4参数仿射运动模型导出的4×4子块的示例性运动矢量分布的框图。
图5D是示出根据本公开的一些实施方式的经帧间预测的当前块内的子块与相邻仿射块之间的空间关系的框图。
图6A是示出根据本公开的一些实施方式的使用自适应运动矢量分辨率精度集合进行解码的过程的流程图。
图6B是示出根据本公开的一些实施方式的计算针对图像块的控制点运动矢量的过程的流程图。
具体实施方式
现在将详细参照具体实施方式，其示例在附图中示出。在以下详细描述中，阐述了很多非限制性具体细节以便帮助理解本文呈现的主题。但是对本领域普通技术人员将显而易见的是，各种替代方案可以在不脱离权利要求的范围的情况下被使用，并且主题可以在没有这些具体细节的情况下被实践。例如，对本领域普通技术人员将显而易见的是，本文呈现的主题可以在具有数字视频能力的许多类型的电子设备上实现。
图1是示出根据本公开的一些实施方式的用于并行地对视频块进行编码和解码的示例性系统10的框图。如图1中所示，系统10包括源设备12，源设备12生成并编码稍后将由目标设备14解码的视频数据。源设备12和目标设备14可以包括各种各样的电子设备中的任何电子设备，包括台式计算机或膝上型计算机、平板计算机、智能电话、机顶盒、数字电视、相机、显示器设备、数字媒体播放器、视频游戏机、视频流传输设备等。在一些实施方式中，源设备12和目标设备14配备有无线通信能力。
在一些实施方式中，目标设备14可以经由链路16接收待解码的编码视频数据。链路16可以包括能够将编码视频数据从源设备12移动到目标设备14的任何类型的通信介质或设备。在一个示例中，链路16可以包括使源设备12能够实时地将编码视频数据直接发送到目标设备14的通信介质。编码视频数据可以根据通信标准(诸如无线通信协议)被调制，并且被发送到目标设备14。通信介质可以包括任何无线或有线通信介质，诸如射频(RF)频谱或者一个或更多个物理传输线。通信介质可以形成基于分组的网络(诸如局域网、广域网或全球网，诸如互联网)的一部分。通信介质可以包括路由器、交换机、基站、或可以有利于促进从源设备12到目标设备14的通信的任何其他装备。
在一些其他实施方式中，编码视频数据可以从输出接口22被发送到存储设备32。随后，存储设备32中的编码视频数据可以由目标设备14经由输入接口28被访问。存储设备32可以包括各种分布式或本地访问的数据存储介质中的任何数据存储介质，诸如硬盘驱动器、蓝光光盘、DVD、CD-ROM、闪存存储器、易失性或非易失性存储器、或者用于存储编码视频数据的任何其他合适的数字存储介质。在进一步的示例中，存储设备32可以对应于文件服务器或可以保持由源设备12生成的编码视频数据的另一中间存储设备。目标设备14可以从存储设备32经由流传输或下载来访问存储的视频数据。文件服务器可以是能够存储编码视频数据并且将编码视频数据发送到目标设备14的任何类型的计算机。示例性文件服务器包括web服务器(例如，用于网站)、FTP服务器、网络附属存储(NAS)设备、或本地磁盘驱动器。目标设备14可以通过适合于访问存储在文件服务器上的编码视频数据的任何标准数据连接来访问编码视频数据，标准数据连接包括无线信道(例如，Wi-Fi连接)、有线连接(例如，DSL、电缆调制解调器等)、或两者的组合。编码视频数据从存储设备32的传输可以是流传输、下载传输、或两者的组合。
如图1中所示，源设备12包括视频源18、视频编码器20和输出接口22。视频源18可以包括诸如以下项的源或此类源的组合：视频捕获设备(例如，摄像机)、包含先前捕获的视频的视频存档、用于从视频内容提供者接收视频的视频馈送接口、和/或用于生成作为源视频的计算机图形数据的计算机图形系统。作为一个示例，如果视频源18是安全监控系统的摄像机，则源设备12和目标设备14可以形成相机电话或视频电话。然而，本申请中所描述的实施方式可以一般性地适用于视频编解码，并且可以应用于无线和/或有线应用。
捕获的、预先捕获的或计算机生成的视频可以由视频编码器20编码。编码视频数据可以经由源设备12的输出接口22直接发送到目标设备14。编码视频数据还可以(或可选地)被存储到存储设备32上以供稍后被目标设备14或其他设备访问，以用于解码和/或回放。输出接口22可以进一步包括调制解调器和/或发送器。
目标设备14包括输入接口28、视频解码器30和显示器设备34。输入接口28可以包括接收器和/或调制解调器，并且通过链路16接收编码视频数据。通过链路16通信传送的或在存储设备32上提供的编码视频数据可以包括由视频编码器20生成的各种语义元素，以供视频解码器30在解码视频数据时使用。此类语义元素可以被包括在通信介质上发送的、在存储介质上存储的、或在文件服务器上存储的编码视频数据内。
在一些实施方式中，目标设备14可以包括显示器设备34，显示器设备34可以是集成显示器设备和被配置为与目标设备14通信的外部显示器设备。显示器设备34将已解码的视频数据显示给用户，并且可以包括各种显示器设备中的任何显示器设备，诸如液晶显示器(LCD)、等离子显示器、有机发光二极管(OLED)显示器、或另一类型的显示器设备。
视频编码器20和视频解码器30可以根据专有标准或行业标准(诸如VVC、HEVC、MPEG-4、Part 10、高级视频编解码AVC)或此类标准的扩展进行操作。应当理解，本申请不限于特定的视频编解码/解码标准，并且可以适用于其他视频编解码/解码标准。通常认为源设备12的视频编码器20可以被配置为根据这些当前标准或未来标准中的任何标准来编码视频数据。类似地，还通常认为目标设备14的视频解码器30可以被配置为根据这些当前标准或未来标准中的任何标准来解码视频数据。
视频编码器20和视频解码器30可以分别被实现为各种合适的编码器电路系统中的任何电路系统，诸如一个或更多个微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、离散逻辑、软件、硬件、固件或其任何组合。当部分地以软件实现时，电子设备可以将用于软件的指令存储于合适的非暂态计算机可读介质中，并且使用一个或更多个处理器执行硬件中的指令以执行本公开中所公开的视频编解码/解码操作。视频编码器20和视频解码器30中的每一个可以被包括在一个或更多个编码器或解码器中，编码器或解码器中的任一者可以被集成为相应设备中的组合式编码器/解码器(CODEC)的一部分。
图2是示出根据本申请中描述的一些实施方式的示例性视频编码器20的框图。视频编码器20可以执行对视频帧内的视频块的帧内预测编解码和帧间预测编解码。帧内预测编解码依赖于空间预测以减少或去除给定视频帧或图片内的视频数据中的空间冗余。帧间预测编解码依赖于时间预测以减少或去除视频序列的邻近视频帧或图片内的视频数据中的时间冗余。
如图2中所示，视频编码器20包括视频数据存储器40、预测处理单元41、解码图片缓冲器(DPB)64、加法器50、变换处理单元52、量化单元54和熵编码单元56。预测处理单元41进一步包括运动估计单元42、运动补偿单元44、分割单元45、帧内预测处理单元46和帧内块复制(BC)单元48。在一些实施方式中，视频编码器20还包括用于视频块重建的反量化单元58、逆变换处理单元60和加法器62。去块滤波器(未示出)可以位于加法器62与DPB 64之间，以对块边界进行滤波以从重建的视频中去除块效应。除了去块滤波器之外，还可以使用环路滤波器(未示出)来对加法器62的输出进行滤波。视频编码器20可以采取固定或可编程硬件单元的形式，或者可以分散在所说明的固定或可编程硬件单元中的一个或更多个中。
视频数据存储器40可以存储将由视频编码器20的组件编码的视频数据。视频数据存储器40中的视频数据可以例如从视频源18获得。DPB 64是存储参考视频数据的缓冲器，参考视频数据供视频编码器20(例如，以帧内或帧间预测编解码模式)在编码视频数据时使用。视频数据存储器40和DPB 64可以由各种存储器设备中的任何存储器设备形成。在各种示例中，视频数据存储器40可以与视频编码器20的其他组件一起在片上形成，或相对于那些组件片外形成。
如图2中所示，在接收到视频数据之后，预测处理单元41内的分割单元45将视频数据分割为视频块。此分割还可以包括根据与视频数据相关联的预定义的拆分结构(诸如四叉树结构)将视频帧分割为条带、瓦片(tile)、或其他更大的编解码单元(CU)。视频帧可以被划分为多个视频块(或视频块集合，被称为瓦片)。预测处理单元41可以基于误差结果(例如，编解码速率和失真等级)为当前视频块选择多个可能的预测编解码模式中的一个，诸如多个帧内预测编解码模式中的一个或多个帧间预测编解码模式中的一个。预测处理单元41可以将所得的帧内预测编解码块或帧间预测编解码块提供给加法器50以生成残差块，并且提供给加法器62以重建被编码的块以用于随后作为参考帧的一部分使用。预测处理单元41还将语义元素(诸如运动矢量、帧内模式指示符、分割信息和其他此类语义信息)提供给熵编码单元56。
为了选择用于当前视频块的合适的帧内预测编解码模式，预测处理单元41内的帧内预测处理单元46可以相对于一个或更多个相邻块来执行当前视频块的帧内预测编解码以提供空间预测，该一个或更多个相邻块与待编解码的当前块在同一帧中。预测处理单元41内的运动估计单元42和运动补偿单元44相对于一个或更多个参考帧中的一个或更多个预测块来执行当前视频块的帧间预测编解码以提供时间预测。视频编码器20可以执行多个编解码遍次，例如，来为视频数据的每个块选择合适的编解码模式。
在一些实施方式中，运动估计单元42通过根据视频帧序列内的预定模式生成运动矢量来确定用于当前视频帧的帧间预测模式，运动矢量指示当前视频帧内的视频块的预测单元(PU)相对于参考视频帧内的预测块的位移。由运动估计单元42执行的运动估计是生成运动矢量的过程，运动矢量估计了针对视频块的运动。运动矢量例如可以指示当前视频帧或图片内的视频块的PU相对于参考帧内的预测块(或其他被编解码的单元)的位移，预测块是相对于当前帧内正被编解码的当前块(或其他被编解码的单元)而言的。预定模式可以将序列中的视频帧指定为P帧或B帧。帧内BC单元48可以以运动估计单元42确定用于帧间预测的运动矢量类似的方式来确定用于帧内BC编解码的矢量(例如，块矢量)，或可以利用运动估计单元42来确定块矢量。
在像素差方面，预测块是被认为与待编解码的视频块的PU紧密匹配的参考帧的块，像素差可以由绝对差总和(SAD)、平方差总和(SSD)或其他差度量确定。在一些实施方式中，视频编码器20可以计算用于DPB 64中存储的参考帧的亚整数像素位置的值。例如，视频编码器20可以对参考帧的四分之一像素位置、八分之一像素位置或其他分数像素位置的值进行插值。因此，运动估计单元42可以相对于全像素位置和分数像素位置执行运动搜索，并且输出具有分数像素精度的运动矢量。
运动估计单元42通过以下方式来计算针对帧间预测编解码帧中的视频块的PU的运动矢量：将PU的位置与从第一参考帧列表(列表0)或第二参考帧列表(列表1)选择的参考帧的预测块的位置进行比较，第一参考帧列表和第二参考帧列表中的每一个参考帧列表标识存储在DPB 64中的一个或更多个参考帧。运动估计单元42将计算出的运动矢量发送到运动补偿单元44，并且然后发送到熵编码单元56。
由运动补偿单元44执行的运动补偿可以涉及基于由运动估计单元42确定的运动矢量来提取或生成预测块。在接收到针对当前视频块的PU的运动矢量时，运动补偿单元44可以在参考帧列表中的一个参考帧列表中定位运动矢量所指向的预测块，从DPB 64取回预测块，并且将预测块转发到加法器50。加法器50然后通过从正被编解码的当前视频块的像素值减去由运动补偿单元44提供的预测块的像素值，来形成像素差值的残差视频块。形成残差视频块的像素差值可以包括亮度差分量或色度差分量或两者。运动补偿单元44还可以生成与视频帧的视频块相关联的语义元素，以供视频解码器30在解码视频帧的视频块时使用。语义元素可以包括，例如，定义用于识别预测块的运动矢量的语义元素、指示预测模式的任何标记、或本文描述的任何其他语义信息。注意，运动估计单元42和运动补偿单元44可以高度集成，但出于概念目的而单独说明。
在一些实施方式中，帧内BC单元48可以以上文结合运动估计单元42和运动补偿单元44所描述的方式类似的方式生成矢量并提取预测块，但是这些预测块与正被编解码的当前块在同一帧中，并且这些矢量被称为块矢量而非运动矢量。具体地，帧内BC单元48可以确定将用于编码当前块的帧内预测模式。在一些示例中，帧内BC单元48可以例如在多个单独的编码遍次期间使用各种帧内预测模式来编码当前块，并且通过率失真分析来测试它们的性能。接下来，帧内BC单元48可以在各种已测试的帧内预测模式中选择合适的帧内预测模式以使用，并且相应地生成帧内模式指示符。例如，帧内BC单元48可以使用率失真分析针对各种已测试的帧内预测模式来计算率失真值，并且在已测试的模式中选择具有最佳率失真特性的帧内预测模式作为合适的帧内预测模式来使用。率失真分析通常确定已编码的块与被编码以产生已编码的块的原始未编码的块之间的失真(或误差)量、以及用于产生已编码的块的比特率(即，比特数量)。帧内BC单元48可以从针对各种已编码的块的失真和速率来计算比率，以确定哪个帧内预测模式展现出针对块的最佳率失真值。
在其他示例中，帧内BC单元48可以全部地或部分地使用运动估计单元42和运动补偿单元44来执行根据本文描述的实施方式的用于帧内BC预测的此类功能。在任一种情况下，对于帧内块复制，在像素差方面，预测块可以是被认为与待编解码的块紧密匹配的块，像素差可以由绝对差总和(SAD)、平方差总和(SSD)或其他差度量确定，并且预测块的识别可以包括计算针对亚整数像素位置的值。
无论预测块是来自根据帧内预测的同一帧还是来自根据帧间预测的不同帧，视频编码器20可以通过从正被编解码的当前视频块的像素值减去预测块的像素值来形成像素差值，从而形成残差视频块。形成残差视频块的像素差值可以包括亮度分量差和色度分量差两者。
作为如上面所描述的由运动估计单元42和运动补偿单元44执行的帧间预测或由帧内BC单元48执行的帧内块复制预测的替代方案，帧内预测处理单元46可以对当前视频块进行帧内预测。具体地，帧内预测处理单元46可以确定用于编码当前块的帧内预测模式。为了这样做，帧内预测处理单元46可以例如在多个单独的编码遍次期间，使用各种帧内预测模式来编码当前块，并且帧内预测处理单元46(或在一些示例中，模式选择单元)可以从已测试的帧内预测模式中选择要使用的合适的帧内预测模式。帧内预测处理单元46可以将指示针对块选择的帧内预测模式的信息提供给熵编码单元56。熵编码单元56可以将指示所选择的帧内预测模式的信息编码在比特流中。
在预测处理单元41经由帧间预测或帧内预测确定针对当前视频块的预测块之后，加法器50通过从当前视频块减去预测块来形成残差视频块。残差块中的残差视频数据可以被包括在一个或更多个变换单元(TU)中，并且被提供给变换处理单元52。变换处理单元52使用变换(诸如离散余弦变换DCT或概念上类似的变换)将残差视频数据变换为残差变换系数。
变换处理单元52可以将所得到的变换系数发送到量化单元54。量化单元54对变换系数进行量化以进一步减小比特率。量化过程还可以减小与系数中的一些系数或全部系数相关联的比特深度。量化程度可以通过调整量化参数来修改。在一些示例中，量化单元54然后可以执行对包括量化的变换系数的矩阵的扫描。可选地，熵编码单元56可以执行扫描。
在量化之后，熵编码单元56使用例如上下文自适应可变长度编解码(CAVLC)、上下文自适应二进制算术编解码(CABAC)、基于语义的上下文自适应二进制算术编解码(SBAC)、概率区间分割熵(PIPE)编解码或另一熵编码方法或技术，将量化的变换系数熵编码成视频比特流。经编码的比特流然后可以被发送到视频解码器30，或被存档于存储设备32中以供稍后发送到视频解码器30或由视频解码器30取回。熵编码单元56还可以对用于正被编解码的当前视频帧的运动矢量和其他语义元素进行熵编码。
反量化单元58和逆变换处理单元60分别应用反量化和逆变换以在像素域中重建残差视频块，以用于生成用于预测其他视频块的参考块。如上文指出的，运动补偿单元44可以从DPB 64中存储的帧的一个或更多个参考块来生成经运动补偿的预测块。运动补偿单元44还可以将一个或更多个插值滤波器应用于预测块，以计算在运动估计中使用的亚整数像素值。
加法器62将重建的残差块加到由运动补偿单元44产生的经运动补偿的预测块来产生要存储在DPB 64中的参考块。参考块然后可以由帧内BC单元48、运动估计单元42和运动补偿单元44用作预测块，以对后续视频帧中的另一视频块进行帧间预测。
图3是示出根据本申请的一些实施方式的示例性视频解码器30的框图。视频解码器30包括视频数据存储器79、熵解码单元80、预测处理单元81、反量化单元86、逆变换处理单元88、加法器90和DPB 92。预测处理单元81进一步包括运动补偿单元82、帧内预测处理单元84和帧内BC单元85。视频解码器30可以执行与上文结合图2关于视频编码器20所描述的编码过程大体上互逆的解码过程。例如，运动补偿单元82可以基于从熵解码单元80接收的运动矢量生成预测数据，而帧内预测单元84可以基于从熵解码单元80接收的帧内预测模式指示符生成预测数据。
在一些示例中，视频解码器30的单元可以被分派任务以执行本申请的实施方式。此外，在一些示例中，本公开的实施方式可以分散在视频解码器30的多个单元中的一个或更多个单元中。例如，帧内BC单元85可以单独地或与视频解码器30的其他单元(诸如运动补偿单元82、帧内预测处理单元84和熵解码单元80)组合地执行本申请的实施方式。在一些示例中，视频解码器30可以不包括帧内BC单元85，并且帧内BC单元85的功能可以由预测处理单元81的其他组件(诸如运动补偿单元82)执行。
视频数据存储器79可以存储将由视频解码器30的其他组件解码的视频数据，诸如经编码的视频比特流。视频数据存储器79中存储的视频数据可以例如从存储设备32、从本地视频源(诸如相机)、经由视频数据的有线或无线网络通信、或通过访问物理数据存储介质(例如，闪存驱动器或硬盘)获得。视频数据存储器79可以包括编解码图片缓冲器(CPB)，CPB存储经编码的视频比特流中的经编码的视频数据。视频解码器30的解码图片缓冲器(DPB)92存储参考视频数据，以供视频解码器30(例如，以帧内或帧间预测编解码模式)在解码视频数据时使用。视频数据存储器79和DPB 92可以由各种存储器设备中的任何存储器设备形成，诸如动态随机存取存储器(DRAM)(包括同步DRAM(SDRAM))、磁阻式RAM(MRAM)、电阻式RAM(RRAM)、或其他类型的存储器设备。出于说明性目的，视频数据存储器79和DPB 92在图3中描绘为视频解码器30的两个不同组件。但是对本领域的技术人员将显而易见的是，视频数据存储器79和DPB 92可以由同一存储器设备或单独存储器设备提供。在一些示例中，视频数据存储器79可以与视频解码器30的其他组件一起在片上形成，或相对于那些组件在片外形成。
在解码过程期间，视频解码器30接收经编码的视频比特流，其表示经编码的视频帧的视频块和相关联的语义元素。视频解码器30可以在视频帧级和/或视频块级接收语义元素。视频解码器30的熵解码单元80对比特流进行熵解码以生成量化系数、运动矢量或帧内预测模式指示符、以及其他语义元素。熵解码单元80然后将运动矢量和其他语义元素转发到预测处理单元81。
当视频帧被编解码为帧内预测编解码(I)帧或用于其他类型的帧中的帧内编解码预测块时，预测处理单元81的帧内预测处理单元84可以基于用信号发送的帧内预测模式和来自当前帧的先前解码块的参考数据，来生成用于当前视频帧的视频块的预测数据。
当视频帧被编解码为帧间预测编解码(即，B或P)帧时，预测处理单元81的运动补偿单元82基于从熵解码单元80接收的运动矢量和其他语义元素，产生针对当前视频帧的视频块的一个或更多个预测块。预测块中的每一个预测块可以从参考帧列表中的一个参考帧列表内的参考帧产生。视频解码器30可以基于DPB 92中存储的参考帧使用默认构建技术来构建参考帧列表-列表0和列表1。
在一些示例中，当视频块根据本文描述的帧内BC模式被编解码时，预测处理单元81的帧内BC单元85基于从熵解码单元80接收的块矢量和其他语义元素，产生针对当前视频块的预测块。预测块可以在与视频编码器20定义的当前视频块的同一图片的重建区域内。
运动补偿单元82和/或帧内BC单元85通过解析运动矢量和其他语义元素来确定针对当前视频帧的视频块的预测信息，并且然后使用该预测信息产生针对正被解码的当前视频块的预测块。例如，运动补偿单元82使用接收到的语义元素中的一些语义元素来确定用于对视频帧的视频块进行编解码的预测模式(例如，帧内预测或帧间预测)、帧间预测帧类型(例如，B或P)、针对用于帧的参考帧列表中的一个或更多个参考帧列表的构建信息、用于帧的每个帧间预测编码视频块的运动矢量、用于帧的每个帧间预测编解码视频块的帧间预测状态、以及用于对当前视频帧中的视频块进行解码的其他信息。
类似地，帧内BC单元85可以使用接收到的语义元素中的一些语义元素，例如标记，以确定当前视频块是使用帧内BC模式被预测的、帧的在重建区域内且应当被存储在DPB 92中的视频块的构建信息、用于帧的每个帧内BC预测视频块的块矢量、用于帧的每个帧内BC预测视频块的帧内BC预测状态、以及用于对当前视频帧中的视频块进行解码的其他信息。
运动补偿单元82还可以使用如由视频编码器20在视频块的编码期间使用的插值滤波器执行插值，以计算针对参考块的亚整数像素的插值。在这种情况下，运动补偿单元82可以从接收到的语义元素确定由视频编码器20使用的插值滤波器，并且使用这些插值滤波器来产生预测块。
反量化单元86使用由视频编码器20针对视频帧中的每个视频块计算的用于确定量化程度的相同量化参数，对在比特流中提供且由熵解码单元80熵解码的量化的变换系数进行反量化。逆变换处理单元88将逆变换(例如，逆DCT、逆整数变换、或概念上类似的逆变换过程)应用于变换系数，以便在像素域中重建残差块。
在运动补偿单元82或帧内BC单元85基于矢量和其他语义元素生成针对当前视频块的预测块之后，加法器90通过将来自逆变换处理单元88的残差块与由运动补偿单元82和帧内BC单元85生成的对应预测块相加，来重建针对当前视频块的已解码的视频块。环路滤波器(未示出)可以位于加法器90与DPB 92之间以进一步处理已解码的视频块。给定帧中的已解码的视频块然后被存储在DPB 92中，DPB 92存储用于接下来的视频块的后续运动补偿的参考帧。DPB 92或与DPB 92分离的存储器设备还可以存储已解码的视频，以用于稍后呈现在显示器设备(诸如图1的显示器设备34)上。
在典型的视频编解码过程中，视频序列通常包括帧或图片的有序集合。每一帧可以包括三个样点阵列，表示为SL、SCb和SCr。SL是亮度样点的二维阵列。SCb是Cb色度样点的二维阵列。SCr是Cr色度样点的二维阵列。在其他情况下，帧可以是单色的并且因此仅包括亮度样点的一个二维阵列。
如图4A中所示，视频编码器20(或更具体地，分割单元45)通过首先将帧分割为编解码树单元(CTU)的集合来生成帧的编码表示。视频帧可以包括以光栅扫描顺序从左到右和从上到下连续排序的整数个CTU。每个CTU是最大的逻辑编解码单元，并且由视频编码器20以序列参数集用信号发送CTU的宽度和高度，使得视频序列中的所有CTU具有128×128、64×64、32×32和16×16之一的相同尺寸。但是应当注意，本申请不一定限于特定尺寸。如图4B中所示，每个CTU可以包括亮度样点的一个编解码树块(CTB)、色度样点的两个对应编解码树块、以及用于对编解码树块的样点进行编解码的语义元素。语义元素描述编解码像素块的不同类型的单元的性质以及可以如何在视频解码器30处重建视频序列，包括帧间预测或帧内预测、帧内预测模式、运动矢量和其他参数。在单色图片或具有三个单独颜色平面的图片中，CTU可以包括单个编解码树块和用于对该编解码树块的样点进行编解码的语义元素。编解码树块可以是N×N样点块。
为实现更好的性能，视频编码器20可以对CTU的编解码树块递归地执行树分割，诸如二叉树分割、三叉树分割、四叉树分割或两者的组合，并且将CTU划分为较小的编解码单元(CU)。如图4C中所描绘的，64×64CTU 400首先被划分为四个较小的CU，每个CU具有32×32的块尺寸。在四个较小的CU中，CU 410和CU 420分别被划分为块尺寸为16×16的四个CU。两个16×16的CU 430和CU 440分别进一步被划分为块尺寸为8×8的四个CU。图4D描绘了四叉树数据结构，其示出了如图4C中所描绘的CTU 400的分割过程的最终结果，四叉树的每个叶节点对应于范围从32×32到8×8的各个尺寸的一个CU。类似于图4B中描绘的CTU，每个CU可以包括相同尺寸的帧的亮度样点的编解码块(CB)和色度样点的两个对应编解码块、以及用于对编解码块的样点进行编解码的语义元素。在单色图片或具有三个单独颜色平面的图片中，CU可以包括单个编解码块和用于对编解码块的样点进行编解码的语义结构。应注意，图4C和图4D中所描绘的四叉树分割仅用于说明性目的，并且一个CTU可基于四叉树分割/三叉树分割/二叉树分割而被拆分为多个CU以适应于变化的局部特性。在多类型树结构中，一个CTU按照四叉树结构被分割，并且每个四叉树叶CU可按照二叉和三叉树结构被进一步分割。如图4E所示，宽度为W且高度为H的编解码块有五种可能的分割类型，即四元分割、水平二元分割、垂直二元分割、水平三元分割和垂直三元分割。
在一些实施方式中，视频编码器20可以进一步将CU的编解码块分割为一个或更多个M×N预测块(PB)。预测块是被应用相同预测(帧间或帧内)的矩形(正方形或非正方形)样点块。CU的预测单元(PU)可以包括亮度样点的预测块、色度样点的两个对应预测块、以及用于对预测块进行预测的语义元素。在单色图片或具有三个单独颜色平面的图片中，PU可以包括单个预测块和用于对预测块进行预测的语义结构。视频编码器20可以生成针对CU的每个PU的亮度预测块、Cb预测块和Cr预测块的预测亮度块、预测Cb块和预测Cr块。
视频编码器20可以使用帧内预测或帧间预测来生成针对PU的预测块。如果视频编码器20使用帧内预测来生成PU的预测块，则视频编码器20可以基于与PU相关联的帧的已解码样点来生成PU的预测块。如果视频编码器20使用帧间预测来生成PU的预测块，则视频编码器20可以基于除了与PU相关联的帧之外的一个或更多个帧的已解码样点来生成PU的预测块。
在视频编码器20生成针对CU的一个或更多个PU的预测亮度块、预测Cb块和预测Cr块之后，视频编码器20可以通过将CU的预测亮度块从其原始亮度编解码块中减去来生成针对CU的亮度残差块，使得CU的亮度残差块中的每个样点指示CU的预测亮度块之一中的亮度样点与CU的原始亮度编解码块中的对应样点之间的差。类似地，视频编码器20可以分别生成针对CU的Cb残差块和Cr残差块，使得CU的Cb残差块中的每个样点指示CU的预测Cb块之一中的Cb样点与CU的原始Cb编解码块中的对应样点之间的差，并且CU的Cr残差块中的每个样点可以指示CU的预测Cr块之一中的Cr样点与CU的原始Cr编解码块中的对应样点之间的差。
此外，如图4C中所示，视频编码器20可以使用四叉树分割将CU的亮度残差块、Cb残差块和Cr残差块分解成一个或更多个亮度变换块、Cb变换块和Cr变换块。变换块是被应用相同变换的矩形(正方形或非正方形)样点块。CU的变换单元(TU)可以包括亮度样点的变换块、色度样点的两个对应变换块、以及用于对变换块样点进行变换的语义元素。因此，CU的每个TU可以与亮度变换块、Cb变换块和Cr变换块相关联。在一些示例中，与TU相关联的亮度变换块可以是CU的亮度残差块的子块。Cb变换块可以是CU的Cb残差块的子块。Cr变换块可以是CU的Cr残差块的子块。在单色图片或具有三个单独颜色平面的图片中，TU可以包括单个变换块和用于对该变换块的样点进行变换的语义结构。
视频编码器20可以将一个或更多个变换应用于TU的亮度变换块以生成针对TU的亮度系数块。系数块可以是变换系数的二维阵列。变换系数可以是标量。视频编码器20可以将一个或更多个变换应用于TU的Cb变换块以生成针对TU的Cb系数块。视频编码器20可以将一个或更多个变换应用于TU的Cr变换块以生成针对TU的Cr系数块。
在生成系数块(例如，亮度系数块、Cb系数块或Cr系数块)之后，视频编码器20可以对系数块进行量化。量化通常是指一种过程，在该过程中，变换系数被量化以可能减少用于表示变换系数的数据量，从而提供进一步压缩。在视频编码器20对系数块进行量化之后，视频编码器20可以对指示量化的变换系数的语义元素进行熵编码。例如，视频编码器20可以对指示量化的变换系数的语义元素执行上下文自适应二进制算术编解码(CABAC)。最后，视频编码器20可以输出包括比特序列的比特流，比特序列形成已编解码的帧和相关联数据的表示，比特流被保存于存储设备32中或被发送到目标设备14。
在接收到由视频编码器20生成的比特流之后，视频解码器30可以解析比特流以从比特流获得语义元素。视频解码器30可以至少部分地基于从比特流获得的语义元素来重建视频数据的帧。重建视频数据的过程通常与由视频编码器20执行的编码过程互逆。例如，视频解码器30可以对与当前CU的TU相关联的系数块执行逆变换，以重建与当前CU的TU相关联的残差块。视频解码器30还通过将针对当前CU的PU的预测块的样点加到当前CU的TU的变换块的对应样点，来重建当前CU的编解码块。在重建针对帧的每个CU的编解码块之后，视频解码器30可以重建帧。
随着数字视频质量从高清晰度变为4K×2K或甚至8K×4K，将被编码/解码的视频数据量呈指数增长。在保持解码的视频数据的图像质量的同时，如何更有效率地编码/解码视频数据是一直存在的问题。各种视频编解码标准已经采用了不同的方法来解决这个问题。例如，已经发现，当存在许多类型的运动(例如，放大/缩小、旋转、透视运动和现实世界中的其他不规则运动)时，平移运动模型对于运动补偿预测表现不佳。因此，已经提出多个基于块的仿射运动模型以增加运动补偿预测的准确性。
图5A和图5B是分别示出根据本公开的一些实施方式的4参数的基于块的仿射运动模型和6参数的基于块的仿射运动模型的框图。如图5A中所描绘的，当前块510通过以下两个运动矢量与参考块(图中未示出)相关：当前块510的左上角控制点处的MV0(mv0x,mv0y)和当前块510的右上角控制点处的MV1(mv1x,mv1y)。MV0(mv0x,mv0y)和MV1(mv1x,mv1y)也被称为控制点运动矢量(CPMV)。假设当前块510的宽度为W，则当前块510内的任何位置(x,y)处的运动矢量MV(mvx,mvy)通过线性仿射运动模型被定义如下：
Figure BDA0003382990790000171
类似地，如图5B中所描绘的，另一当前块520通过以下三个运动矢量与参考块(图中未示出)相关：当前块520的左上角控制点处的MV0(mv0x,mv0y)、当前块520的右上角控制点处的MV1(mv1x,mv1y)、和当前块520的左下角控制点处的MV2(mv2x,mv2y)。假设当前块520的宽度和高度分别为W和H，则当前块520内的任何位置(x,y)(例如，针对当前块520内的子块的运动矢量)处的运动矢量MV(mvx,mvy)通过线性仿射运动模型被定义如下：
Figure BDA0003382990790000172
CPMV被存储在与解码器图片缓冲器分离的缓冲器中。所存储的CPMV仅被用于在仿射合并模式(即，从相邻仿射块的CPMV继承仿射CPMV)和仿射显式模式(即，根据基于预测的方案用信号发送仿射CPMV)下产生仿射CPMV预测值。在这些仿射模式下，从CPMV导出的子块运动矢量(例如，基于上述等式(2))被用于运动补偿、平移运动矢量的运动矢量预测和去块。
在一些实施例中，为避免由于对CPMV的额外存储请求而导致图片线缓冲器大小增加，来自位于上方CTU中的编解码块的仿射运动数据继承和来自位于同一CTU中的相邻块的仿射运动数据继承被区别对待。具体地，对于当前CU，如果用于仿射运动数据继承的空间相邻者位于上方CTU中，则线缓冲器中的子块MV而非上方CTU中的CPMV被用于针对当前CU的仿射MV预测值(MVP)导出。以这种方式，CPMV仅被存储在本地缓冲器中而非线缓冲器中。如果使用6参数仿射模型编解码候选CU，则仿射模型被降级到4参数模型。
在通用视频编解码(VVC)标准中，仿射非合并模式可被应用于宽度和高度两者大于或等于16的编解码块。对于仿射非合并模式，针对CU在比特流中用信号发送多达四个或六个CPMV(取决于是应用4参数仿射模型还是6参数仿射模型以及预测是单向还是双向)。具体地，首先用信号发送CU级中的一个仿射标志以指示是否使用仿射模式。之后，用信号发送另一标志以在4参数仿射模型与6参数仿射模型之间进行选择。仿射CPMV候选列表大小为2，并且其通过根据以下顺序添加四种类型的CPMV候选而产生：
1)从相邻编解码块的CPMV外推出的继承仿射CPMV候选
2)使用相邻4×4子块的MV导出的经构建的仿射CPMV候选
3)来自相邻编解码块的平移MV
4)零MV
另外，为了减少信令开销，每个CPMV与其预测值的差从编码器用信号发送到解码器。MV与其预测值的差被称为运动矢量差(或MVD)。MVD包括x分量MVD和y分量MVD。因为4参数仿射模型具有两个CPMV，所以针对单向预测的仿射块用信号发送两个MVD，并且针对双向预测的仿射块用信号发送四个MVD。另一方面，在6参数仿射具有三个CPMV的情况下，针对单向预测的仿射块和双向预测的仿射块分别用信号发送三个MVD和六个MVD。
在高效视频编解码(HEVC)标准中，经帧间非合并模式编解码的块的MVD始终以四分之一像素为单位被用信号发送。在VVC中，一个称为自适应运动矢量分辨率(AMVR)的帧间编解码工具被引入以减少MVD信令开销。具体地，AMVR允许一个帧间非合并块的MVD以各种分辨率被编解码。根据当前编解码块是以常规帧间非合并模式还是仿射非合并模式被编解码，编解码块的MVD的分辨率可以自适应地被选择为：
常规帧间非合并模式：四分之一像素、整数像素和四像素
仿射非合并模式：四分之一像素、十六分之一像素和整数像素
基于现有AMVR设计，如果当前编解码块具有至少一个非零MVD分量，则有条件地用信号发送一个AMVR指示标志。如果所有MVD分量(即，针对参考列表L0和参考列表L1的水平MVD和垂直MVD两者)为零，则推断四分之一像素MVD分辨率。
对于具有至少一个非零MVD分量的编解码块，用信号发送第一标志(即，amvr_flag)以指示四分之一像素MVD分辨率是否被用于编解码块。如果第一标志为0，则不用信号发送另外的语义并且四分之一像素MVD分辨率被用于当前块。否则，用信号发送第二标志(即，amvr_precision_flag)以指示是整数像素还是四像素MVD分辨率被用于常规帧间非合并块。同样的第二标志被用于指示是十六像素还是整数像素MVD精度被用于仿射非合并块。此外，为了确保已重建的MV具有预期分辨率，用于常规帧间非合并模式的MV预测值和仿射非合并模式的CPMV预测值将被四舍五入到与产生最终MV/CPMV之前的对应MVD的分辨率相同的分辨率。
因此，两个不同的MVD分辨率集合被应用于常规帧间非合并模式和仿射非合并模式，{1/4像素，1像素，4像素}的集合被用于常规帧间非合并模式，并且{1/4像素，1/16像素，1像素}被用于仿射非合并模式。从标准化的角度看，这种非统一的设计可能不是最优的。
另一方面，针对仿射AMVR所允许的当前MVD分辨率集合可能并不总是最优的。例如，尽管十六分之一像素可提高仿射CPMV的精度，但它在信令中消耗更多编解码比特。此外，一个仿射块的CPMV不直接被用于运动补偿；相反，它们仅被用于导出块内的子块的MV。因此，在编解码效率方面，使用较高MVD分辨率可能并不总是最优的。例如，与小分辨率视频序列(例如，VGA和WQVGA)相比，大分辨率视频序列(例如，HD、4K或甚至8K视频)中的一个帧间块内的样点的特性倾向于更加一致，并且其对应的MV通常大得多。在这样的情况下，由于此情况下的取舍不佳，所以可能不值得将一个仿射块的CPMV分辨率增加到1/16像素级。
因此，请参照图6A和下文关于所提出的方法的相关描述，以解决与当前设计相关联的问题，包括允许使用不同的MVD分辨率集合，如从编码器用信号发送到解码器。
图5C是示出根据本公开的一些实施方式的从如上文所描述的4参数的基于块的仿射运动模型导出的样点的4×4子块的示例性运动矢量分布的框图。通过将4×4子块内的每个样点的坐标应用于上面的等式(1)，在该样点(i,j)处计算出运动矢量预测MV(i,j)，如由对应箭头符号所指示。基于仿射运动模型的运动矢量可以由视频编码器20在仿射帧间预测模式下用于基于子块的仿射运动补偿，以提高所预测的像素值的准确度。在基于子块的仿射运动补偿被执行之后，亮度预测样点可以通过加上由光流等式导出的差而进一步细化。
首先，假设在基于子块的仿射运动补偿被执行之后，样点(i,j)处的亮度预测为I(i，j)。使用3抽头滤波器[-1,0,1]，子块亮度预测的空间梯度gx(i，j)和gy(i，j)在子块内的每个样点位置处计算如下：
Figure BDA0003382990790000201
注意，子块亮度预测在每一侧被扩展一个像素以用于梯度计算。为了减少存储器带宽和复杂度，子块的扩展边界上的像素是从参考图片中的最近整数像素位置复制的，以避免用于填充区域的额外插值。
根据光流等式，亮度预测细化ΔI(i，j)是像素值梯度矢量和运动矢量差的内积作为像素值差，其定义如下：
ΔI(i，j)＝gx(i，j)*Δmvx(i，j)+gy(i，j)*Δmvy(i，j) (4)
其中Δmv(i，j)是针对样点位置(i，j)计算的运动矢量(由mv(i，j)表示)与到该像素(i，j)的子块的运动矢量之间的运动矢量差。运动矢量差Δmv(i，j)可以使用4参数仿射运动模型和6参数仿射运动模型之一或者本领域的技术人员已知的其他仿射模型来计算。
出于说明性目的，下面使用4参数仿射运动模型。如图5C中所描绘的，假设i和j是从像素位置到当前子块的左上方点的水平x偏移和垂直y偏移，当前子块内的任何样点的运动矢量mv(i，j)可以通过以下等式导出：
Figure BDA0003382990790000211
如上面所描述的，对于4参数仿射运动模型，上述等式的参数为：
Figure BDA0003382990790000212
对于6参数仿射模型，上述等式的参数为：
Figure BDA0003382990790000213
其中(mv0x，mv0y)、(mv1x，mv1y)、(mv2x，mv2y)是当前块的左上方控制点运动矢量、右上方控制点运动矢量和左下方控制点运动矢量，W和H是当前块的宽度和高度。
给定上述运动矢量mv(i，j)的定义，当前子块内的任何样点的运动矢量差Δmv(i，j)可以通过以下等式导出：
Figure BDA0003382990790000214
其中
Figure BDA0003382990790000215
为当前子块的运动矢量。通过将子块亮度预测的空间梯度gx(i，j)和gy(i，j)以及运动矢量差Δmv(i，j)插入等式(4)中，可以确定像素值差，即亮度预测细化。
最后，亮度预测细化被加到从仿射模型运动预测导出的样点(i,j)处的亮度预测I(i，j)，并且最终预测I′(i，j)被生成如下：
I′(i，j)＝I(i，j)+ΔI(i，j) (9)
在一些实施例中，上文所描述的方法可以扩展到非仿射帧间预测模式中的CU，尤其是在CU具有根据仿射模式被帧间预测出的相邻块的情况下。在这种情况下，用于当前块的仿射模型控制点运动矢量可以从所选相邻块的仿射模型控制点运动矢量导出。在一些实施方式中，当前块将直接使用所选相邻块的仿射模型来导出针对当前块中的每个样点的仿射运动。
图5D是示出根据本公开的一些实施方式的经帧间预测的当前块530内的子块与相邻仿射块之间的空间关系的框图。假设相邻块540-1是根据仿射运动模型被帧间预测的并且其位于当前块530的左侧，则有可能的是，当前块530内的在相邻块540-1附近的子块(例如，4×4子块530-1)由于它们的空间接近性(例如，4×4子块530-1与相邻块540-1可能是相同物体的一部分)，而可以能够受益于如上文所描述的基于光流的预测细化。类似地，如果相邻块540-2是根据仿射运动模型被帧间预测的块，则当前块530内的位于相邻块540-2下方的4×4子块530-2也由于它们的空间接近性而可以受益于如上文所描述的基于光流的预测细化。注意，如果位于4×4子块530-2左侧的相邻块(图中未示出)也是根据仿射运动模型被帧间预测的块，则出于上述相同原因，4×4子块530-2也可以能够受益于该相邻块。在这种情况下，选择哪个相邻块用于对子块530-2执行预测细化是一种设计选择。
因为当前块是根据非仿射模式被帧间预测的，所以其可能不具有如图5A(4参数仿射模型)和图5B(6参数仿射模型)中所描绘的仿射模型控制点运动矢量那样的仿射模型控制点运动矢量。有必要确定用于当前块(更具体地说，特定子块)的仿射模型控制点运动矢量的对应集合。例如，假设x和y表示从当前块中的像素位置到所选相邻仿射块的左上方点的水平偏移和垂直偏移，并且(mv0x，mv0y)、(mv1x，mv1y)、(mv2x，mv2y)为所选相邻仿射块的左上方控制点运动矢量、右上方控制点运动矢量和左下方控制点运动矢量，则可以使用用于4参数仿射模型的等式(1)或用于6参数仿射模型的等式(2)来导出像素位置的运动矢量。可选地，相邻块中的运动矢量可以直接用于导出针对当前块中的每个像素的仿射运动矢量。在任一种情况下，最终预测I’根据以下等式被生成：
I′(i，j)＝I(i，j)+w*ΔI(i，j) (10)
其中w是加权因子，用于调整ΔI(i，j)对样点(i,j)处的非仿射模式亮度预测I(i，j)的影响。在一个示例中，w被设置为等于1。在另一示例中，w被设置为小于1，例如0.5。注意，此加权因子可以从一个CU到另一CU被修改或针对整个图片保持相同。当然，加权因子的值应当在视频比特流中用信号发送到视频解码器30。
因为当前块是根据非仿射模式被帧间预测的，所以其可能不具有仿射模型。
图6A是示出根据本公开的一些实施方式的使用自适应运动矢量分辨率精度集合进行视频解码的过程600的流程图。注意，该过程可以由视频编码器或视频解码器采用。出于说明性目的，该过程将被描述为由解码器(例如，视频解码器30)进行的视频解码过程的一部分。
在现有的视频编解码方法中，固定的MVD分辨率集合被用于一个视频序列中的帧间块(常规帧间模式或仿射模式)；因此，由于MVD分辨率集合被隐式地确定(例如，(1/4像素、1像素、4像素)用于常规帧间非合并块并且(1/4像素、1/16像素和1像素)用于仿射非合并块)，所以不需要将那些MVD分辨率集合从编码器用信号发送到解码器。提出了针对常规帧间模式和仿射模式使用不同的MVD分辨率集合，并且将所选集合从编码器用信号发送到解码器。例如，基于特定分辨率要求，可以使用更高或更低的MVD分辨率。根据本公开，可以使用不同的信号发送方法。在一种方法中，编码器可即时确定期望的MVD分辨率集合并且在比特流中用信号发送它们。在这种情况下，被允许的MVD分辨率的数量以及实际分辨率是完全灵活选择的。例如，数量不一定必须是三。在另一方法中，多个MVD分辨率集合可被预定义并且在较高编解码级(例如，序列参数集合SPS和/或图片参数集合PPS)用信号发送，而在较低级，诸如在每个图片、条带和/或瓦片中，一个特定集合可被选择。在这种情况下，仅需要在较低级用信号发送所选集合的索引值。
作为第一步骤，解码器从视频比特流接收指示多个运动矢量差MVD分辨率集合中的第一MVD分辨率集合的第一语义元素(610)。在预定义分区级用信号发送第一语义元素，并且第一MVD分辨率集合包括多个MVD分辨率值。例如，为表示具有一般精度平移运动的仿射块的MVD和具有高精度缩放/旋转运动的仿射块的MVD，分辨率集合(1/4像素、1/8像素、1/8像素)可被使用。为表示具有粗略平移运动的仿射块的MVD和具有一般精度缩放/旋转运动的仿射块的MVD，分辨率集合(1像素、1/4像素、1/4像素)可被使用。在一些实施例中，取决于第一MVD分辨率集合的总数，第一语义元素是N位二值化码(参考下面的表1)。例如，如果存在将被使用的总共四个不同的MVD分辨率集合，则第一语义元素是2位二值化码(“00”、“01”、“10”和“11”)。
接下来，解码器从视频比特流接收指示第一MVD分辨率集合中的第一MVD分辨率值的第二语义元素以及指示与当前块相关联的MVD的第三语义元素(620)。第二语义元素指示第一MVD分辨率集合中的哪个分辨率值将被用于重建当前块的MVD。类似于第一语义元素，取决于所选择的MVD分辨率集合内的分辨率值的总数，第二语义元素是M位二值化码(参考下面的表2至表5)。
在(从第二语义元素)确定第一MVD分辨率集合中的第一MVD分辨率值并且(从第三语义元素)确定与当前块相关联的MVD之后，解码器然后基于第二语义元素和第三语义元素将该MVD重建为当前块的MVD实际值(630)。
在一些实施例中，帧间预测模式包括常规非合并帧间预测模式或仿射非合并帧间预测模式。
在一些实施例中，在序列参数集(SPS)、图片参数集(PPS)、条带头、瓦片头或块头中用信号发送第一语义元素。
在一些实施例中，多个MVD分辨率集合中的相应MVD分辨率集合包括1/32像素的MVD分辨率、1/16像素的MVD分辨率、1/8像素的MVD分辨率、1/4像素的MVD分辨率、1/2像素的MVD分辨率、1像素的MVD分辨率或4像素的MVD分辨率。
在一些实施例中，在高于预定义分区级的分区级用信号发送多个MVD分辨率集合(例如，在SPS或PPS级下用信号发送多个MVD分辨率集合，而在条带级或瓦片级用信号发送第一MVD分辨率集合)。
在一些实施例中，在仿射AMVR模式下对AMVR精度的选择取决于CPMV的位置。在现有设计中，在仿射AMVR模式下，使用同一MVD分辨率来表示一个仿射块的所有CPMV值。然而，实际上，一个仿射块的不同位置处的CPMV具有不同的物理含义和重要性。例如，一个仿射块的左上角处的CPMV控制整个块的平移运动，而右上角和左下角处的CPMV(在6参数仿射模型被应用的情况下)控制块的缩放运动和旋转运动。在一般情况下，在信令开销和预测效率之间的取舍方面，以低精度表示平移运动而以更高精度表示缩放运动和旋转运动可能更加有益。基于此考虑，提出使用不同的AMVR精度来用信号发送不同位置处的CPMV的MVD。具体地，在此方法中，取决于应用4参数仿射模型还是6参数仿射模型而联合地用信号发送两个或三个CPMV的精度。令(S0,S1,S2)表示应用于一个仿射块的左上角、右上角和左下角处的CPMV的AMVR精度。在一个示例中，可针对一个仿射非合并块选择以下三个仿射AMVR分辨率集合：{(1/4像素、1/4像素、1/4像素)、(1/4像素、1/8像素、1/8像素)和(1像素、1/4像素、1/4像素)}。由于VVC中的默认MVD分辨率为1/4像素，所以此处使用(1/4像素、1/4像素、1/4像素)表示一般精度仿射块的MVD，并且使用(1/4像素、1/8像素、1/8像素)表示具有一般精度平移运动和高精度缩放/旋转运动的仿射块的MVD，并且使用(1像素、1/4像素、1/4像素)表示具有粗略平移运动和一般精度缩放/旋转运动的仿射块的MVD。表1示出当所提出的CPMV位置相关的AMVR方法被应用于仿射模式时的示例性二值化方法。值得一提的是，在实践中，基于实施例的相同设计精神，可以使用其他二值化方法和/或不同的AMVR分辨率组合来表示不同CPMV位置处的MVD分辨率。例如，基于相同的设计精神，至少10和11的码字可以是可交换的。
MVD分辨率 二值化
(1/4像素,1/4像素,1/4像素) 0
(1/4像素,1/8像素,1/8像素) 10
(1像素,1/4像素,1/4像素) 11
表1用于所提出的针对仿射模式的联合AMVR方法的二值化方法
图6B是示出计算针对图像块的CPMV以在仿射AMVR模式下针对每个CPMV实施AMVR精度的位置相关选择的过程650的流程图。首先，解码器从视频比特流接收指示第一运动矢量差MVD分辨率集合的第一语义元素，其中第一MVD分辨率集合包括多个MVD分辨率值，每个MVD分辨率值对应于当前块的相应CPMV(660)。对于与当前块相关联的CPMV中的每个CPMV，解码器然后从视频比特流接收指示CPMV的MVD的第二语义元素(670)，并且基于第一第二语义元素和第二语义元素将CPMV的MVD重建为其实际值(680)。
在一些实施例中，当仿射帧间预测模式为4参数模式时，针对当前块的左上角和右上角处的两个CPMV在第一MVD分辨率集合中存在两个MVD分辨率值，并且针对右上角的MVD分辨率比针对左上角的MVD分辨率更精细。
在一些实施例中，当仿射帧间预测模式为6参数模式时，针对当前块的左上角、右上角和左下角处的三个CPMV在第一MVD分辨率集合中存在三个MVD分辨率值；针对右上角的MVD分辨率比针对左上角的MVD分辨率更精细，并且针对左下角的MVD分辨率比针对左上角的MVD分辨率更精细。
在一些实施例中，第一MVD分辨率集合包括作为默认模式的(1/4像素、1/4像素、1/4像素)、(1/4像素、1/8像素、1/8像素)或(1像素、1/4像素、1/4像素)。
在当前VVC中，针对常规帧间AMVR和仿射AMVR，AMVR语义元素amvr_flag和amvr_precision_flag使用不同的上下文模型。当前VVC中的amvr_flag标志和amvr_precision_flag标志的上下文模型和二值化被描述在表2和表3中。
Figure BDA0003382990790000261
表2针对常规帧间AMVR的上下文模型
Figure BDA0003382990790000262
Figure BDA0003382990790000271
表3针对仿射AMVR的上下文模型
为简化上下文建模，根据本公开，针对amvr_flag，一个统一的上下文模型将被用于常规帧间AMVR和仿射AMVR两者，并且针对amvr_precision_flag，另一个统一的上下文模型将被用于常规帧间AMVR和仿射AMVR两者。如表4和表5所示，上下文模型的总数从4减少到2。
Figure BDA0003382990790000272
表4针对常规帧间AMVR的统一的上下文模型
Figure BDA0003382990790000273
表5针对仿射AMVR的统一的上下文模型
在一个或更多个示例中，所描述的功能可以以硬件、软件、固件或其任何组合实施。如果以软件实施，则功能可以作为一个或更多个指令或代码存储在计算机可读介质上或通过计算机可读介质传输，并且由基于硬件的处理单元执行。计算机可读介质可以包括计算机可读存储介质或通信介质，计算机可读存储介质对应于诸如数据存储介质的有形介质，通信介质包括促进将计算机程序从一处传送到另一处(例如，根据通信协议)的任何介质。以此方式，计算机可读介质通常可以对应于(1)非暂态的有形计算机可读存储介质、或(2)通信介质，诸如信号或载波。数据存储介质可以是任何可用介质，其可以由一个或更多个计算机或者一个或更多个处理器访问以取回用于实现本申请中描述的实施方式的指令、代码和/或数据结构。计算机程序产品可以包括计算机可读介质。
在本文的实施方式的描述中使用的术语仅用于描述特定实施方式的目的，并且不旨在限制权利要求的范围。如在实施方式的描述和所附权利要求中所使用的，单数形式“一种”、“一个”和“该”旨在也包括复数形式，除非上下文另有明确指示。还将理解，如本文使用的术语“和/或”指代并且涵盖相关联的所列项目中的一个或更多个的任何和所有可能的组合。将进一步理解，术语“包括”和/或“包括…的”当在本说明书中使用时，指定存在所陈述的特征、元件和/或组件，但不排除存在或添加一个或更多个其他特征、元件、组件和/或其群组。
还将被理解，尽管本文可能使用术语第一、第二等来描述各种元件，但是这些元件不应当受这些术语的限制。这些术语仅用于将一个元件与另一个元件区分开。例如，在不脱离实施方式的范围的情况下，第一电极可以被称为第二电极，并且类似地，第二电极可以被称为第一电极。第一电极和第二电极两者都是电极，但它们不是同一电极。
本申请的描述已经出于说明和描述的目的被呈现，并且不旨在穷举或限于所公开的形式的发明。受益于在前面的描述和相关联的附图中呈现的教导，许多修改、变化和替代实施方式对于本领域普通技术人员将是显而易见的。选择和描述实施例是为了最好地解释本发明的原理、实际应用，并且使本领域的其他技术人员能够理解本发明以用于各种实施方式，并且最好地利用基本原理和具有适合于预期的特定用途的各种修改的各种实施方式。因此，将理解，权利要求的范围不限于所公开的实施方式的具体示例，并且修改和其他实施方式旨在被包括在所附权利要求的范围内。

Claims (13)

1.一种在帧间预测模式下计算针对当前块的运动矢量差MVD的方法，所述方法包括：
从视频比特流接收指示多个MVD分辨率集合中的第一MVD分辨率集合的第一语义元素，其中所述第一语义元素在预定义分区级被用信号发送，并且其中所述第一MVD分辨率集合包括多个MVD分辨率值；
从所述视频比特流接收指示所述第一MVD分辨率集合中的第一MVD分辨率值的第二语义元素以及指示与所述当前块相关联的MVD的第三语义元素；以及
基于所述第二语义元素和所述第三语义元素将所述当前块的所述MVD重建为其实际值。
2.根据权利要求1所述的方法，其中所述帧间预测模式包括常规非合并帧间预测模式或仿射非合并帧间预测模式。
3.根据权利要求1至2中任一项所述的方法，其中所述第一语义元素在序列参数集、图片参数集、条带头、瓦片头或块头中被用信号发送。
4.根据权利要求1至3中任一项所述的方法，其中所述多个MVD分辨率集合中的相应MVD分辨率集合包括1/32像素、1/16像素、1/8像素、1/4像素、1/2像素、1像素或4像素的MVD分辨率。
5.根据权利要求1至4中任一项所述的方法，其中所述多个MVD分辨率集合在高于所述预定义分区级的分区级被用信号发送。
6.一种计算设备，包括：
一个或更多个处理器；
存储器，耦接到所述一个或更多个处理器；以及
多个程序，存储在所述存储器中，所述多个程序在由所述一个或更多个处理器执行时，使所述计算设备执行根据权利要求1至5中任一项所述的操作。
7.一种非暂态计算机可读存储介质，存储用于由具有一个或更多个处理器的计算设备执行的多个程序，其中所述多个程序在由所述一个或更多个处理器执行时，使所述计算设备执行根据权利要求1至5中任一项所述的操作。
8.一种在仿射帧间预测模式下计算针对当前块的控制点运动矢量CPMV的方法，所述方法包括：
从视频比特流接收指示第一运动矢量差MVD分辨率集合的第一语义元素，其中所述第一MVD分辨率集合包括多个MVD分辨率值，每个MVD分辨率值对应于所述当前块的相应CPMV；
针对与所述当前块相关联的CPMV中的每个CPMV：
从所述视频比特流接收指示所述CPMV的MVD的第二语义元素；以及
基于所述第一第二语义元素和所述第二语义元素将所述CPMV的所述MVD重建为其实际值。
9.根据权利要求8所述的方法，其中当所述仿射帧间预测模式为4参数模式时，在所述第一MVD分辨率集合中存在针对所述当前块的左上角和右上角处的两个CPMV的两个MVD分辨率值，并且针对右上角的MVD分辨率值比针对左上角的MVD分辨率值更精细。
10.根据权利要求8至9中任一项所述的方法，其中当所述仿射帧间预测模式为6参数模式时，在所述第一MVD分辨率集合中存在针对所述当前块的左上角、右上角和左下角处的三个CPMV的三个MVD分辨率值；并且其中针对右上角的MVD分辨率值比针对左上角的MVD分辨率值更精细，并且其中针对左下角的MVD分辨率值比针对左上角的MVD分辨率值更精细。
11.根据权利要求8至10中任一项所述的方法，其中所述第一MVD分辨率集合包括(1/4像素,1/4像素,1/4像素)、(1/4像素,1/8像素,1/8像素)和(1像素,1/4像素,1/4像素)。
12.一种计算设备，包括：
一个或更多个处理器；
存储器，耦接到所述一个或更多个处理器；以及
多个程序，存储在所述存储器中，所述多个程序在由所述一个或更多个处理器执行时，使所述计算设备执行根据权利要求8至11中任一项所述的操作。
13.一种非暂态计算机可读存储介质，存储用于由具有一个或更多个处理器的计算设备执行的多个程序，其中所述多个程序在由所述一个或更多个处理器执行时，使所述计算设备执行根据权利要求8至11中任一项所述的操作。
CN202080040325.6A 2019-06-04 2020-06-04 针对仿射模式的自适应运动矢量分辨率 Pending CN114270860A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201962857228P 2019-06-04 2019-06-04
US62/857,228 2019-06-04
PCT/US2020/036041 WO2020247577A1 (en) 2019-06-04 2020-06-04 Adaptive motion vector resolution for affine mode

Publications (1)

Publication Number Publication Date
CN114270860A true CN114270860A (zh) 2022-04-01

Family

ID=73652930

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080040325.6A Pending CN114270860A (zh) 2019-06-04 2020-06-04 针对仿射模式的自适应运动矢量分辨率

Country Status (2)

Country Link
CN (1) CN114270860A (zh)
WO (1) WO2020247577A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020214900A1 (en) 2019-04-19 2020-10-22 Beijing Dajia Internet Information Technology Co., Ltd. Methods and apparatus of video coding using prediction refinement with optical flow
US20220337865A1 (en) * 2019-09-23 2022-10-20 Sony Group Corporation Image processing device and image processing method
US20230362402A1 (en) * 2022-05-09 2023-11-09 Tencent America LLC Systems and methods for bilateral matching for adaptive mvd resolution

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
RU2696551C1 (ru) * 2016-03-15 2019-08-02 МедиаТек Инк. Способ и устройство для кодирования видео с компенсацией аффинного движения
WO2018049594A1 (en) * 2016-09-14 2018-03-22 Mediatek Inc. Methods of encoder decision for quad-tree plus binary tree structure
US10602180B2 (en) * 2017-06-13 2020-03-24 Qualcomm Incorporated Motion vector prediction

Also Published As

Publication number Publication date
WO2020247577A1 (en) 2020-12-10

Similar Documents

Publication Publication Date Title
TWI755376B (zh) 用於視訊寫碼之濾波器之幾何轉換
TW201633787A (zh) 寫碼樹單元級可適性迴路濾波器
JP2019519141A (ja) フィルタ処理情報のシグナリング
CN114501000B (zh) 用于视频编码的方法和电子装置
CN114080806B (zh) 在多跨分量预测(pmc)模式下的色度编解码增强
CN114710679A (zh) 视频编解码中的小色度块大小限制
CN114270860A (zh) 针对仿射模式的自适应运动矢量分辨率
CN114567786B (zh) 以4:4:4色度格式进行视频编解码的方法和装置
CN114615506B (zh) 视频解码方法、计算设备、存储介质
US11943468B2 (en) Methods and apparatus of video coding using prediction refinement with optical flow
CN115278256B (zh) 对视频数据进行解码的方法、装置和介质
CN113906751A (zh) 使用调色板模式的基于分段的视频编解码的方法和装置
CN117501694A (zh) 用于视频编解码中的仿射运动补偿的具有双向匹配的运动细化
CN112789859A (zh) 使用基于子块的时间运动向量预测进行视频编码的方法和装置
US20230011286A1 (en) Spatial neighbor based affine motion derivation
CN117730535A (zh) 视频编解码中用于仿射运动补偿预测的几何分割
CN114466185A (zh) 使用调色板模式进行视频编解码的方法和装置
WO2022271756A1 (en) Video coding using multi-direction intra prediction

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination