CN112740677A - 用于对图像信号进行编码/解码的方法及其装置 - Google Patents
用于对图像信号进行编码/解码的方法及其装置 Download PDFInfo
- Publication number
- CN112740677A CN112740677A CN202080005092.6A CN202080005092A CN112740677A CN 112740677 A CN112740677 A CN 112740677A CN 202080005092 A CN202080005092 A CN 202080005092A CN 112740677 A CN112740677 A CN 112740677A
- Authority
- CN
- China
- Prior art keywords
- block
- motion information
- prediction
- current block
- intra
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 182
- 238000005070 sampling Methods 0.000 abstract description 25
- 238000005192 partition Methods 0.000 description 402
- 239000013598 vector Substances 0.000 description 169
- 239000013074 reference sample Substances 0.000 description 150
- 238000000638 solvent extraction Methods 0.000 description 133
- 239000000523 sample Substances 0.000 description 126
- 238000010586 diagram Methods 0.000 description 91
- 238000012545 processing Methods 0.000 description 89
- 230000009466 transformation Effects 0.000 description 44
- 238000013139 quantization Methods 0.000 description 34
- IESVDEZGAHUQJU-ZLBXKVHBSA-N 1-hexadecanoyl-2-(4Z,7Z,10Z,13Z,16Z,19Z-docosahexaenoyl)-sn-glycero-3-phosphocholine Chemical compound CCCCCCCCCCCCCCCC(=O)OC[C@H](COP([O-])(=O)OCC[N+](C)(C)C)OC(=O)CC\C=C/C\C=C/C\C=C/C\C=C/C\C=C/C\C=C/CC IESVDEZGAHUQJU-ZLBXKVHBSA-N 0.000 description 30
- PXFBZOLANLWPMH-UHFFFAOYSA-N 16-Epiaffinine Natural products C1C(C2=CC=CC=C2N2)=C2C(=O)CC2C(=CC)CN(C)C1C2CO PXFBZOLANLWPMH-UHFFFAOYSA-N 0.000 description 28
- 239000011159 matrix material Substances 0.000 description 27
- 230000011664 signaling Effects 0.000 description 19
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 17
- 230000008569 process Effects 0.000 description 17
- 238000006243 chemical reaction Methods 0.000 description 14
- 238000001914 filtration Methods 0.000 description 14
- 230000002457 bidirectional effect Effects 0.000 description 10
- 238000012935 Averaging Methods 0.000 description 9
- 238000009499 grossing Methods 0.000 description 9
- 238000012937 correction Methods 0.000 description 7
- 230000015654 memory Effects 0.000 description 7
- 230000003044 adaptive effect Effects 0.000 description 6
- 230000007774 longterm Effects 0.000 description 6
- 230000008707 rearrangement Effects 0.000 description 6
- 241000023320 Luma <angiosperm> Species 0.000 description 5
- 230000006835 compression Effects 0.000 description 5
- 238000007906 compression Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 5
- 230000002123 temporal effect Effects 0.000 description 5
- 230000003247 decreasing effect Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 238000007670 refining Methods 0.000 description 4
- 238000011426 transformation method Methods 0.000 description 4
- 230000001174 ascending effect Effects 0.000 description 3
- 238000003491 array Methods 0.000 description 2
- 230000015556 catabolic process Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000006731 degradation reaction Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001131 transforming effect Effects 0.000 description 2
- 101150052795 cbh-1 gene Proteins 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 229940050561 matrix product Drugs 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
- H04N19/159—Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Physics & Mathematics (AREA)
- Discrete Mathematics (AREA)
- General Physics & Mathematics (AREA)
Abstract
一种根据本发明的图像解码方法包括以下步骤：参考用于指示是否允许通过序列参数集用信号传送的帧内基于块的增量脉冲编码调制(BDPCM)的第一标志，以便确定是否对用于指示是否将所述帧内BDPCM应用于当前块的第二标志进行解析；基于第二标志确定是否将所述帧内BDPCM应用于所述当前块；当确定将所述帧内BDPCM应用于所述当前块时，确定所述当前块的帧内BDPCM模式；以及基于所述帧内BDPCM模式获取所述当前块的残差样点。
Description
技术领域
本公开涉及一种视频信号编码/解码方法及其装置。
背景技术
随着显示面板变大，需要更高质量的视频服务。高清视频服务最大的问题是数据量大大增加。为了解决以上问题，正在积极进行提高视频压缩率的研究。作为代表性示例，视频编码联合工作组(JCT-VC)于2009年由国际电信联盟电信标准分局(ITU-T)下的运动图像专家组(MPEG)和视频编码专家组(VCEG)成立。JCT-VC提出了一种视频压缩标准：高效视频编码(HEVC)，其压缩性能大约是H.264/AVC的两倍，并且于2013年1月25日作为标准获得批准。然而，随着高清视频服务的飞速发展，HEVC的性能逐渐显示出其局限性。
发明内容
技术目的
本公开的目的在于提供一种用于在对视频信号进行编码/解码时执行帧内BDPCM的方法以及用于执行该方法的装置。
本公开的目的在于提供一种在对视频信号进行编码/解码时在将编码块分区为多个子块之后以子块为单位执行帧内预测的方法以及用于执行该方法的装置。
本公开的目的在于提供一种在对视频信号进行编码/解码时在将编码块分区为多个子块之后针对所述多个子块中的至少一个子块执行变换的方法以及用于执行该方法的装置。
从本公开可获得的技术目的不限于上述技术目的，并且本公开所属技术领域的普通技术人员可从以下描述中清楚地理解其他未提及的技术目的。
技术方案
根据本公开的一种视频信号解码方法可包括：通过参考通过序列参数集用信号传送的表示是否允许帧内BDPCM(基于块的增量脉冲编码调制)的第一标志确定是否对表示是否将所述帧内BDPCM应用于当前块的第二标志进行解析，基于第二标志确定是否将所述帧内BDPCM应用于所述当前块，当确定将所述帧内BDPCM应用于所述当前块时，确定所述当前块的帧内BDPCM模式，以及基于所述帧内BDPCM模式获得所述当前块的残差样点。
在根据本公开的视频信号解码方法中，所述帧内BDPCM模式可被确定为水平方向或垂直方向。
在根据本公开的视频信号解码方法中，所述残差样点可以是通过将与所述残差样点相邻的邻近残差样点与在比特流中解码的残差差值相加被推导出的。
在根据本公开的视频信号解码方法中，当将所述帧内BDPCM应用于所述当前块时，强制将变换跳过应用于所述当前块。
在根据本公开的视频信号解码方法中，当将所述帧内BDPCM应用于所述当前块时，在推导与所述当前块的右侧或底部相邻的邻近块的MPM(最可能模式)候选时，可推断所述当前块的帧内预测模式具有水平方向或垂直方向。
应当理解的是，前述概述的特征是本公开的以下详细描述的示例性方面，而不限制本公开的范围。
技术效果
根据本公开，可通过建议帧内BDPCM方法来提高视频信号的编码/解码效率。
根据本公开，可通过将编码块分区为多个子块并对所述多个子块中的至少一个子块执行变换来提高视频信号的编码/解码效率。
可从本公开获得的效果可不受上述效果的限制，并且本公开所属技术领域的普通技术人员可从以下描述中清楚地理解其他未提及的效果。
附图说明
图1是示出根据本公开的实施例的视频编码装置(编码器)的框图的示图。
图2是示出根据本公开的实施例的视频解码装置(解码器)的框图的示图。
图3是示出根据本公开的实施例的基本编码树单元的示图。
图4是示出编码块的各种分区类型的示图。
图5是示出对CTU进行分区的一方面的示例的示图。
图6是根据本公开的实施例的帧间预测方法的流程图。
图7是在合并模式下推导当前块运动信息的处理的流程图。
图8是示出用于推导合并候选的候选块的示图。
图9是示出用于推导合并候选的候选块的示图。
图10是用于解释运动信息表的更新方面的示图。
图11是示出运动信息表的更新方面的示图。
图12是示出更新预保存的运动信息候选的索引的示例的示图。
图13是示出代表性子块的位置的示图。
图14示出针对每个帧间预测模式产生运动信息表的示例。
图15示出针对每个运动矢量分辨率产生运动信息表的示例。
图16示出将应用合并偏移编码方法的块的运动信息存储在单独的运动信息表中的示例。
图17是示出将包括在长期运动信息表中的运动信息候选添加到合并候选列表的示例的示图。
图18是示出仅针对合并候选的一部分执行冗余检查的示例的示图。
图19是示出省略与特定合并候选的冗余检查的示例的示图。
图20是示出将包括在与当前块相同的合并处理区域中的候选块设置为不可用作合并候选的示例的示图。
图21是示出在当前块被包括在合并处理区域中时推导针对当前块的合并候选的示例的示图。
图22是示出临时运动信息表的示图。
图23是示出统一运动信息表和临时运动信息表的示例的示图。
图24是示出通过使用对角线将编码块分区为多个预测单元的示例的示图。
图25是示出将编码块分区为两个预测单元的示例的示图。
图26示出将编码块分区为多个不同尺寸的预测块的示例。
图27是示出用于推导分区模式合并候选的邻近块的示图。
图28是用于解释针对每个预测单元确定邻近块的可用性的示例的示图。
图29和图30是示出基于第一预测样点和第二预测样点的加权和运算推导预测样点的示例的示图。
图31至图34是示出根据当前块的尺寸的基于矩阵的帧内预测的实现方面的示图。
图35是根据本公开的实施例的帧内预测方法的流程图。
图36是示出帧内预测模式的示图。
图37和图38是示出将参考样点排列成行的一维阵列的示例的示图。
图39是示出由方向帧内预测模式与平行于x轴的直线形成的角度的示图。
图40是示出在当前块具有非正方形形状时获得预测样点的一方面的示图。
图41是示出广角帧内预测模式的示图。
图42是示出垂直方向分区和水平方向分区的示例的示图。
图43是示出确定编码块的分区类型的示例的示图。
图44是示出确定编码块的分区类型的示例的示图。
图45是示出基于编码块的帧内预测模式确定编码块的分区类型的示例的示图。
图46是用于描述编码块的分区方面的示图。
图47是示出针对每个子块不同地设置预测编码模式的示例的示图。
图48是示出PDPC的应用方面的示图。
图49和图50是示出子变换块编码方法的应用方面的示图。
图51和图52示出根据作为变换目标的子块的位置的水平方向变换类型和垂直方向变换类型。
具体实施方式
在下文中，将参照附图详细地描述本公开的实施例。
基于块执行图像编码和解码。在示例中，可针对编码块、变换块或预测块执行诸如变换、量化、预测、环内滤波、重建等编码/解码处理。
在下文中，编码/解码目标块被称为“当前块”。在示例中，根据当前的编码/解码处理，当前块可表示编码块、变换块或预测块。
另外，在本说明书中使用的术语“单元”表示用于执行特定编码/解码处理的基本单元，并且“块”可被理解为表示具有预定尺寸的样点阵列。除非另有说明，否则可互换使用“块”和“单元”。在示例中，编码块和编码单元在稍后描述的示例中可被理解为具有彼此相同的含义。
图1是示出根据本公开的实施例的图像编码设备(编码器)的框图的示图。
参照图1，图像编码设备100可包括画面分区单元110、预测单元120和预测单元125、变换单元130、量化单元135、重排单元160、熵编码单元165、反量化单元140、逆变换单元145、滤波器单元150和存储器155。
图1中描述的组件被独立地示出，以便示出图像编码设备中的不同特征功能，并且该图并不意味着每一个组件都由分开的硬件或一个软件单元组成。也就是说，每一个组件仅被列举以便于解释，各个组件中的至少两个组件可构成一个组件，或者一个组件可被分区为可执行它们的功能的多个组件。甚至是集成了各个组件的实施例以及对组件进行划分的实施例也被包括在本公开的范围内，除非它们脱离了本公开的精神。
此外，一些组件不是执行本公开的必要功能的必要组件，而是仅用于改善性能的可选组件。可利用除了仅用于改善性能的组件之外的用于实施本公开的精神的必要组件来实现本公开，并且仅包括除了仅用于改善性能的可选组件之外的必要组件的结构也被包括在本公开的范围内。
画面分区单元110可将输入的画面分区为至少一个处理单元。在这方面，处理单元可以是预测单元(PU)、变换单元(TU)或编码单元(CU)。在画面分区单元110中，可将单个画面分区为多个编码单元、预测单元和变换单元的多个组合，并且可通过根据预定条件(例如，代价函数)选择编码单元、预测单元和变换单元的组合来对画面进行编码。
例如，可将单个画面分区为多个编码单元。为了将画面分区为编码单元，可使用诸如四叉树结构的递归树结构，并且源自诸如单个图像或最大编码单元的根的编码单元可被分区为其它编码单元并且可具有与分区出的编码单元一样多的子节点。根据特定限制不再被分区的编码单元成为叶节点。即，当假设只有正方形分区可用于单个编码单元时，可将单个编码单元分区为最多四个其它编码单元。
在下文中，在本公开的实施例中，编码单元可被用作用于编码的单元，或者可被用作用于解码的单元。
可通过将单个编码单元分区为具有相同尺寸的至少一个正方形或矩形来获得预测单元，或者可按照一个预测单元在形状和/或尺寸上可不同于另一个预测单元的方式将单个编码单元分区为预测单元。
在基于正执行帧内预测的编码块产生预测单元时，当编码单元不是最小编码单元时，可在不执行分区为多个N×N的预测单元的情况下执行帧内预测。
预测单元120和预测单元125可包括执行帧间预测的帧间预测单元120以及执行帧内预测的帧内预测单元125。可确定对预测单元执行帧间预测还是帧内预测，并且可确定根据每一种预测方法的详细信息(例如，帧内预测模式、运动矢量、参考画面等)。在这方面，被执行预测的处理单元可不同于被确定预测方法及其详情的预测单元。例如，可基于预测单元来确定预测方法、预测模式等，并且可基于变换单元来执行预测。所产生的预测块与原始块之间的残差值(残差块)可被输入到变换单元130。另外，用于预测的预测模式信息、运动矢量信息等可由熵编码单元165使用残差值来编码，并且可被发送给解码器。当特定编码模式被使用时，原始块在无需通过预测单元120或预测单元125产生预测块的情况下按照原样被编码并且被发送给解码单元。
帧间预测单元120可基于关于当前画面的先前画面和后续画面中的至少一个的信息对预测单元进行预测，或者在某些情况下，可基于关于当前画面中的一些已编码区域的信息对预测单元进行预测。帧间预测单元120可包括参考画面插值单元、运动预测单元和运动补偿单元。
参考画面插值单元可从存储器155接收参考画面信息，并且可从参考画面产生整数像素或更小像素的像素信息。在亮度像素的情况下，可使用具有不同系数的基于DCT的8抽头插值滤波器，以便以1/4像素为单位产生关于整数像素或更小像素的像素信息。在色度信号的情况下，可使用具有不同滤波器系数的基于DCT的4抽头插值滤波器，以便以1/8像素为单位产生关于整数像素或更小像素的像素信息。
运动预测单元可基于由参考画面插值单元插值后的参考画面来执行运动预测。可将诸如基于全搜索的匹配算法(FBMA)、三步搜索(TSS)算法、新三步搜索(NTS)算法等各种方法用作用于计算运动矢量的方法。运动矢量可基于插值后的像素具有以1/2像素或1/4像素为单位的运动矢量值。运动预测单元可通过改变运动预测方法对当前预测单元进行预测。可将诸如跳过方法、合并方法、高级运动矢量预测(AMVP)方法、帧内块复制方法等各种方法用作运动预测方法。
帧内预测单元125可基于作为当前画面中的像素信息的在当前块周围的参考像素的信息来产生预测单元。在当前预测单元的邻近块是被执行帧间预测的块，并因此参考像素是被执行帧间预测的像素时，可用关于被执行帧内预测的邻近块的参考像素的信息来替换包括在被执行帧间预测的块中的参考像素。换句话说，当参考像素不可用时，可使用可用参考像素中的至少一个参考像素来代替不可用的参考像素信息。
帧内预测下的预测模式可包括当执行预测时根据预测方向使用参考像素信息的方向预测模式、以及当执行预测时不使用方向信息的非方向模式。用于预测亮度信息的模式可不同于用于预测色度信息的模式。为了预测色度信息，可使用关于用于预测亮度信息的帧内预测模式的信息或者关于预测出的亮度信号的信息。
在执行帧内预测时，当预测单元的尺寸与变换单元的尺寸相同时，可基于位于预测单元的左侧、左上方和顶部的像素对预测单元执行帧内预测。然而，在执行帧内预测时，当预测单元的尺寸与变换单元的尺寸不同时，可基于变换单元通过使用参考像素来执行帧内预测。另外，使用N×N分区的帧内预测可仅被用于最小编码单元。
在帧内预测方法中，可在根据预测模式将自适应帧内平滑(AIS)滤波器应用于参考像素之后产生预测块。应用于参考像素的AIS滤波器的类型可变化。为了执行帧内预测方法，可从当前预测单元周围存在的预测单元的帧内预测模式预测用于当前预测单元的帧内预测模式。在通过使用从邻近预测单元预测出的模式信息来预测用于当前预测单元的预测模式时，当用于当前预测单元的帧内预测模式与该邻近预测单元的帧内预测模式相同时，可通过使用预定标志信息来发送指示当前预测单元与该邻近预测单元具有相同预测模式的信息。当用于当前预测单元的预测模式不同于邻近预测单元的预测模式时，可执行熵编码来对关于用于当前块的预测模式的信息进行编码。
另外，可产生包括关于残差值的信息的残差块，其中，残差值是由预测单元120或预测单元125执行了预测的预测单元与该预测单元的原始块之间的差值。产生的残差块可被输入到变换单元130。
变换单元130可通过使用诸如离散余弦变换(DCT)或离散正弦变换(DST)的变换方法对残差块执行变换，其中，残差块包括关于原始块与由预测单元120或预测单元125产生的预测单元之间的残差值的信息。在这方面，DCT变换核包括DCT2或DCT8中的至少一个，并且DST变换核包括DST7。可基于关于被用于产生残差块的预测单元的帧内预测模式的信息来确定是应用DCT还是应用DST以便对残差块执行变换。可跳过针对残差块的变换。可对指示是否跳过针对残差块的变换的标志进行编码。对于尺寸小于或等于阈值的残差块、在4:4:4格式下的亮度分量的残差块或色度分量的残差块，可允许进行变换跳过。
量化单元135可对由变换单元130变换到频域的值执行量化。量化系数可根据图像的重要性或块而变化。在量化单元135中计算出的值可被提供给反量化单元140和重排单元160。
重排单元160可对关于量化残差值的变换系数执行重排。
重排单元160可通过系数扫描方法将二维块形式的系数变为一维矢量形式的系数。例如，重排单元160可通过使用Z字形扫描方法从DC系数至高频域中的系数进行扫描，以便将系数变为一维矢量形式。根据变换单元的尺寸和帧内预测模式，可使用沿列方向扫描二维块形式的系数的垂直方向扫描或沿行方向扫描二维块形式的系数的水平方向扫描，而不是Z字形扫描。换句话说，可根据变换单元的尺寸和帧内预测模式来确定使用Z字形扫描、垂直方向扫描和水平方向扫描中的哪一种扫描方法。
熵编码单元165可基于由重排单元160计算出的值来执行熵编码。熵编码可使用各种编码方法，例如，指数哥伦布编码、上下文自适应可变长度编码(CAVLC)或上下文自适应二进制算术编码(CABAC)。
熵编码单元165可对从重排单元160以及预测单元120和预测单元125获得的各种类型的信息(诸如，关于残差值系数的信息和关于编码单元的块类型的信息、关于预测模式的信息、关于分区单元的信息、关于预测单元的信息和关于变换单元的信息、关于运动矢量的信息、关于参考帧的信息、关于块插值的信息、滤波信息等)进行编码。
熵编码单元165可对从重排单元160输入的编码单元的系数进行熵编码。
反量化单元140可对在量化单元135中量化的值执行反量化，并且逆变换单元145可对在变换单元130中变换的值执行逆变换。可将由反量化单元140和逆变换单元145产生的残差值与由包括在预测单元120和预测单元125中的运动估计单元、运动补偿单元或帧内预测单元预测出的预测单元相加，以便产生重建块。
滤波器单元150可包括去块滤波器、偏移校正单元和自适应环路滤波器(ALF)中的至少一个。
去块滤波器可去除由于重建画面中的块之间的边界而发生的块失真。为了确定是否执行去块，可基于在块中包括的几行或几列中所包括的像素来确定是否对当前块应用去块滤波器。当去块滤波器被应用于块时，根据所需要的去块滤波强度来应用强滤波器或弱滤波器。另外，在应用去块滤波器时，当执行水平方向滤波和垂直方向滤波时，可将水平方向滤波和垂直方向滤波配置为并行处理。
偏移校正单元可相对于被执行去块的图像用以像素为单位的偏移来校正原始图像。为了对特定画面执行偏移校正，可使用对在将图像的像素分区为预定数量个区域之后所确定的区域应用偏移的方法、或者根据每一个像素的边缘信息应用偏移的方法。
可基于通过将经过滤波的重建图像与原始图像进行比较而获得的值来执行自适应环路滤波(ALF)。可将图像中包括的像素分区为预定群组，可确定将被应用于每一个群组的滤波器，并且可对每一个群组单独地执行滤波。可针对亮度信号对每一个编码单元(CU)发送关于是否应用ALF的信息，并且将被应用的ALF滤波器的形状和滤波器系数可基于每一个块而变化。可选地，可应用具有相同形状(固定形状)的ALF滤波器，而不管将被应用滤波器的块的特征如何。
在存储器155中，可存储通过滤波器单元150计算的重建块或重建画面。当执行帧间预测时，存储的重建块或重建画面可被提供给预测单元120或预测单元125。
图2是示出根据本公开的实施例的图像解码设备(解码器)的框图的示图。
参照图2，图像解码设备200可包括熵解码单元210、重排单元215、反量化单元220、逆变换单元225、预测单元230和预测单元235、滤波器单元240和存储器245。
当从编码器输入了图像比特流时，可根据图像编码设备的逆处理来对输入的比特流进行解码。
熵解码单元210可根据由图像编码器的熵编码单元进行的熵编码的逆处理来执行熵解码。例如，可与由图像编码器设备执行的方法相关联地应用各种方法，诸如指数哥伦布编码、上下文自适应可变长度编码(CAVLC)或上下文自适应二进制算术编码(CABAC)。
熵解码单元210可对关于由编码器执行的帧内预测和帧间预测的信息进行解码。
重排单元215可基于在编码器中使用的重排方法对由熵解码单元210进行熵解码的比特流执行重排。一维矢量形式表示的系数可被重建，并且可被重排成二维块形式的系数。重排单元215可通过接收与在编码器中执行的系数扫描有关的信息并基于在编码器中执行的扫描顺序进行逆扫描的方法来执行重排。
反量化单元220可基于从编码器接收的量化参数以及重排后的块的系数值来执行反量化。
针对在图像编码器中由变换单元对量化结果执行的变换(即DCT或DST)，逆变换单元225可执行逆变换(即逆DCT或逆DST)。在这方面，DCT变换核可包括DCT2或DCT8中的至少一个，并且DST变换核可包括DST7。可选地，当在图像编码器中跳过了变换时，在逆变换单元225中也不执行逆变换。可基于由图像编码器确定的变换单元来执行逆变换。图像解码器的逆变换单元225可根据多条信息(诸如，预测方法、当前块的尺寸、预测方向等)来选择性地执行变换方法(例如，DCT或DST)。
预测单元230或预测单元235可基于从熵解码单元210接收到的与预测块相关的信息以及从存储器245接收到的关于先前解码块或画面的信息来产生预测块。
如上所述，如同图像编码器的操作那样，在执行帧内预测的过程中，当预测单元的尺寸与变换单元的尺寸相同时，可基于位于预测单元的左侧、左上方和顶部的像素对预测单元执行帧内预测。然而，在执行帧内预测的过程中，当预测单元的尺寸与变换单元的尺寸不同时，可基于变换单元通过使用参考像素来执行帧内预测。另外，通过使用N×N分区的帧内预测可仅被用于最小编码单元。
预测单元230和预测单元235可包括PU确定模块、帧间预测单元和帧内预测单元。PU确定单元可接收从熵解码单元210输入的各种类型的信息(诸如，关于预测单元的信息、关于帧内预测方法的预测模式的信息、关于帧间预测方法的运动预测的信息等)，可对当前编码单元中的预测单元进行划分，并且可确定对预测单元执行帧间预测还是执行帧内预测。通过使用从图像编码器接收到的当前预测单元的帧间预测所需的信息，帧间预测单元230可基于关于包括当前预测单元的当前画面的先前画面和后续画面中的至少一个的信息来对当前预测单元执行帧间预测。可选地，可基于关于包括当前预测单元的当前画面中的一些预先重建的区域的信息来执行帧间预测。
为了执行帧间预测，可基于编码单元来确定跳过模式、合并模式、AMVP模式或帧内块复制模式中的哪种方法被用作用于编码单元中包括的预测单元的运动预测方法。
帧内预测单元235可基于关于当前画面内的像素的信息来产生预测块。当预测单元是已经被执行了帧内预测的预测单元时，可基于从图像编码器接收到的关于预测单元的帧内预测模式的信息来执行帧内预测。帧内预测单元235可包括自适应帧内平滑(AIS)滤波器、参考像素插值模块或DC滤波器。AIS滤波器可对当前块的参考像素执行滤波，并且，可根据用于当前预测单元的预测模式来确定是否应用滤波器。当对当前块的参考像素执行AIS滤波时，可使用从图像编码器接收到的预测单元的预测模式以及关于AIS滤波器的信息。当用于当前块的预测模式是不被应用AIS滤波的模式时，可不应用AIS滤波器。
当预测单元的预测模式是基于通过对参考像素进行插值而获得的像素值来执行帧内预测的预测模式时，参考像素插值单元可对参考像素进行插值，以便产生具有整数单位或更小单位的参考像素。当用于当前预测单元的预测模式是在不对参考像素进行插值的情况下产生预测块的预测模式时，可不对参考像素进行插值。当用于当前块的预测模式是DC模式时，DC滤波器可通过滤波产生预测块。
重建块或重建画面可被提供给滤波器单元240。滤波器单元240可包括去块滤波器、偏移校正模块和ALF。
可从图像编码器接收关于去块滤波器是否已被应用于相应块或画面的信息、以及关于在去块滤波器被应用时是应用强滤波器还是弱滤波器的信息。图像解码器的去块滤波器可从图像编码器接收关于去块滤波器的信息，并且图像解码器可对相应块执行去块滤波。
偏移校正单元可基于在执行编码时应用于图像的偏移校正的类型、关于偏移值的信息等对重建图像执行偏移校正。
可基于从编码器接收到的关于是否应用ALF的信息、关于ALF系数的信息等对编码单元应用ALF。以上的ALF信息可通过被包括在特定参数集中而被提供。
在存储器245中，可存储重建画面或重建块以便将其用作参考画面或参考块，并且重建画面可被提供给输出单元。
图3是示出根据本公开的实施例的基本编码树单元的示图。
最大编码块可被定义为编码树块。单个画面可被分区为多个编码树单元(CTU)。CTU可以是最大尺寸的编码单元，并且可被称为最大编码单元(LCU)。图3是示出单个画面被分区为多个CTU的示例的示图。
可在画面级别或序列级别来定义CTU的尺寸。同样，可通过画面参数集或序列参数集用信号传送表示CTU的尺寸的信息。
在示例中，可将用于序列内的整个画面的CTU的尺寸设置为128×128。可选地，可在画面级别将128×128或256×256中的任何一个确定为CTU的尺寸。在示例中，可在第一画面中将CTU设置为具有尺寸128×128，并且可在第二画面中将CTU设置为具有尺寸256×256。
通过对CTU进行分区可产生编码块。编码块表示用于执行编码/解码的基本单元。在示例中，可针对每一个编码块执行预测或变换，或者，可针对每一个编码块确定预测编码模式。在这方面，预测编码模式表示产生预测图像的方法。在示例中，预测编码模式可包括帧内预测、帧间预测、当前画面参考(CPR)、帧内块复制(IBC)或组合预测。对编码块，可通过使用帧内预测、帧间预测、当前画面参考、或组合预测中的至少一个的预测编码模式来产生编码块的预测块。
可在比特流中用信号传送表示用于当前块的预测编码模式的信息。在示例中，所述信息可以是表示预测编码模式是帧内模式还是帧间模式的1比特标志。当用于当前块的预测编码模式被确定为帧间模式时，当前画面参考或组合预测可以是可用的。
当前画面参考是将当前画面设置为参考画面并从当前画面内已经被编码/解码的区域获得当前块的预测块。在这方面，当前画面表示包括当前块的画面。可在比特流中用信号传送表示当前画面参考是否被应用于当前块的信息。在示例中，所述信息可以是1比特标志。当该标志为真(TRUE)时，用于当前块的预测编码模式可被确定为当前画面参考，当该标志为假(FALSE)时，用于当前块的预测编码模式可被确定为帧间预测。
可选地，可基于参考画面索引来确定用于当前块的预测编码模式。在示例中，当参考画面索引指示当前画面时，用于当前块的预测编码模式可被确定为当前画面参考。当参考画面索引指示除了当前画面之外的画面时，用于当前块的预测编码模式可被确定为帧间预测。换句话说，当前画面参考是使用关于在当前画面内已经被编码/解码的区域的信息的预测方法，帧间预测是使用关于已经被编码/解码的另一画面的信息的预测方法。
组合预测表示组合了帧内预测、帧间预测和当前画面参考中的至少两个的组合编码模式。在示例中，当应用组合预测时，可基于帧内预测、帧间预测或当前画面参考中的任何一个来产生第一预测块，并且可基于帧内预测、帧间预测或当前画面参考中的另一个来产生第二预测块。当产生了第一预测块和第二预测块时，可通过计算第一预测块和第二预测块的平均值或加权和来产生最终预测块。可在比特流中用信号传送表示是否对当前块应用组合预测的信息。所述信息可以是1比特标志。
图4是示出编码块的各种分区类型的示图。
可基于四叉树分区、二叉树分区或三叉树分区将编码块分区为多个编码块。可基于四叉树分区、二叉树分区或三叉树分区将分区出的编码块再分区为多个编码块。
四叉树分区表示将当前块分区为四个块的方法。作为四叉树分区的结果，可将当前块分区为四个正方形分区(参照图4的(a)的“SPLIT_QT”)。
二叉树分区表示将当前块分区为两个块的方法。可将沿垂直方向(也就是说，使用穿过当前块的垂直线)将当前块分区为两个块的操作称为垂直方向二叉树分区，并且可将沿水平方向(也就是说，使用穿过当前块的水平线)将当前块分区为两个块的操作称为水平方向二叉树分区。作为二叉树分区的结果，当前块可被分区为两个非正方形分区。图4的(b)的“SPLIT_BT_VER”是示出垂直方向二叉树分区的结果的示图，图4的(c)的“SPLIT_BT_HOR”是示出水平方向二叉树分区的结果的示图。
三叉树分区表示将当前块分区为三个块的方法。可将沿垂直方向(也就是说，使用穿过当前块的两条垂直线)将当前块分区为三个块的操作称为垂直方向三叉树分区，并且可将沿水平方向(也就是说，使用穿过当前块的两条水平线)将当前块分区为三个块的操作称为水平方向三叉树分区。作为三叉树分区的结果，当前块可被分区为三个非正方形分区。在这方面，位于当前块中心的分区的宽度/高度可以是其它分区的宽度/高度的两倍。图4的(d)的“SPLIT_TT_VER”是示出垂直方向三叉树分区的结果的示图，图4的(e)的“SPLIT_TT_HOR”是示出水平方向三叉树分区的结果的示图。
CTU的分区次数可被定义为分区深度。可在序列级别或画面级别确定CTU的最大分区深度。因此，CTU的最大分区深度可基于序列或画面而变化。
可选地，可针对每一个分区方法独立地确定最大分区深度。在示例中，允许四叉树分区的最大分区深度可不同于允许二叉树分区和/或三叉树分区的最大分区深度。
编码器可在比特流中用信号传送表示当前块的分区类型和分区深度中的至少一个的信息。解码器可基于通过对比特流进行解析而获得的信息来确定CTU的分区类型和分区深度。
图5是示出对CTU进行分区的一方面的示例的示图。
可将通过使用四叉树分区、二叉树分区和/或三叉树分区对编码块进行分区的操作称为多叉树分区。
可将通过应用多叉树分区对编码块进行分区而产生的编码块称为子编码块。当编码块的分区深度是k时，子编码块的分区深度被设置为k+1。
与此相反，对于分区深度为k+1的编码块，可将分区深度为k的编码块称为父编码块。
可基于父编码块的分区类型和邻近编码块的分区类型中的至少一个来确定当前编码块的分区类型。在这方面，邻近编码块可以是与当前编码块相邻的块，并且可包括顶部邻近块、左侧邻近块或与当前编码块的左上角相邻的邻近块中的至少一个。在这方面，分区类型可包括是否应用四叉树分区、是否应用二叉树分区、二叉树分区的方向、是否应用三叉树分区、或者三叉树分区的方向。
为了确定编码块的分区类型，可在比特流中用信号传送表示编码块是否被分区的信息。所述信息可以是1比特标志“split_cu_flag”，并且当该标志为真时，它可表示编码块通过多叉树分区方法被分区。
当split_cu_flag为真时，可在比特流中用信号传送表示编码块是否通过四叉树分区被分区的信息。所述信息是1比特标志split_qt_flag，并且当该标志为真时，编码块可被分区为四个块。
在示例中，在图5中示出的示例中，通过四叉树分区对CTU进行了分区，并因此产生了分区深度为1的四个编码块。另外，示出了再次对通过四叉树分区而产生的四个编码块之中的第一编码块和第四编码块应用四叉树分区。结果，可产生分区深度为2的四个编码块。
另外，通过再次对分区深度为2的编码块应用四叉树分区，可产生分区深度为3的编码块。
当四叉树分区未被应用于编码块时，可根据编码块的尺寸、编码块是否位于画面边界、最大分区深度、或邻近块的分区类型中的至少一个来确定是否针对编码块执行二叉树分区或三叉树分区。当确定针对编码块执行二叉树分区或三叉树分区时，可在比特流中用信号传送表示分区方向的信息。所述信息可以是1比特标志mtt_split_cu_vertical_flag。可基于该标志来确定分区方向是垂直方向还是水平方向。另外，可在比特流中用信号传送表示二叉树分区或三叉树分区中的哪一个被应用于编码块的信息。所述信息可以是1比特标志mtt_split_cu_binary_flag。可基于该标志确定二叉树分区被应用于编码块还是三叉树分区被应用于编码块。
在示例中，在图5中示出的示例中，垂直方向二叉树分区被应用于分区深度为1的编码块，垂直方向三叉树分区被应用于通过该垂直方向二叉树分区而产生的编码块之中的左侧编码块，并且垂直方向二叉树分区被应用右侧编码块。
帧间预测是通过使用关于先前画面的信息对当前块进行预测的预测编码模式。在示例中，可将先前画面内与当前块位于相同位置的块(在下文中称为同位块)设置为当前块的预测块。在下文中，基于当前块的同位块所产生的预测块可被称为同位预测块。
与此相反，当在先前画面中存在的对象在当前画面中已经移动到另一位置时，可通过使用对象的运动来有效地预测当前块。例如，当通过将先前画面与当前画面进行比较来确定对象的运动方向和大小时，可根据对象的运动信息来产生当前块的预测块(或预测图像)。在下文中，通过使用运动信息所产生的预测块可被称为运动预测块。
可通过从当前块减去预测块来产生残差块。在这方面，在对象移动的情况下，通过使用运动预测块而不是使用同位预测块可减少残差块的能量，并因此可提高残差块的压缩性能。
如上，通过使用运动信息产生预测块的操作可被称为运动估计预测。在大多数帧间预测中，可基于运动补偿预测来产生预测块。
运动信息可包括运动矢量、参考画面索引、预测方向和双向加权因子索引中的至少一个。运动矢量表示对象的运动方向和幅度。参考画面索引指定在参考画面列表中包括的参考画面之中的当前块的参考画面。预测方向指示单向L0预测、单向L1预测或双向预测(L0预测和L1预测)中的任何一个。可根据当前块的预测方向来使用L0方向运动信息和L1方向运动信息中的至少一个。双向加权因子索引指定被应用于L0预测块的加权因子和被应用于L1预测块的加权因子。
图6是根据本公开的实施例的帧间预测方法的流程图。
参照图6，帧间预测方法包括：确定用于当前块的帧间预测模式S601、根据确定的帧间预测模式获得当前块的运动信息S602、以及基于获得的运动信息针对当前块执行运动补偿预测S603。
在这方面，帧间预测模式可表示用于确定当前块的运动信息的各种方法，并且可包括使用平移运动信息的帧间预测模式、使用仿射运动信息的帧间预测模式。在示例中，使用平移运动信息的帧间预测模式可包括合并模式和运动矢量预测模式，使用仿射运动信息的帧间预测模式可包括仿射合并模式和仿射运动矢量预测模式。可基于与当前块邻近的邻近块或者通过对比特流进行解析而获得的信息来确定关于当前块的运动信息。
可从另一块的运动信息推导当前块的运动信息。在这方面，另一块可以是在当前块之前通过帧间预测被编码/解码的块。将当前块的运动信息设置为与另一块的运动信息相同的操作可被定义为合并模式。此外，将另一块的运动矢量设置为当前块的运动矢量的预测值的操作可被定义为运动矢量预测模式。
图7是在合并模式下推导当前块的运动信息的处理的流程图。
可推导当前块的合并候选S701。可从在当前块之前通过帧间预测被编码/解码的块推导当前块的合并候选。
图8是示出用于推导合并候选的候选块的示图。
候选块可包括邻近块或非邻近块中的至少一个，其中，所述邻近块包括与当前块相邻的样点，所述非邻近块包括不与当前块相邻的样点。在下文中，确定候选块的样点被定义为基本样点。另外，与当前块相邻的基本样点被称为邻近基本样点，并且不与当前块相邻的基本样点被称为非邻近基本样点。
邻近基本样点可被包括在当前块的最左侧列的邻近列或当前块的最上方行的邻近行中。在示例中，在当前块的左上方样点的坐标为(0,0)时，包括在位置(-1,H-1)、(W-1,-1)、(W,-1)、(-1,H)或(-1,1)处的基本样点的块中的至少一个可被用作候选块。参照示图，索引0到4的邻近块可被用作候选块。
非邻近基本样点表示与相邻于当前块的基本样点的x轴距离或y轴距离中的至少一个为预定义值的样点。在示例中，包括与左侧基本样点的x轴距离为预定义值的基本样点的块、包括与顶部基本样点的y轴距离为预定义值的非邻近样点的块或包括与左上方基本样点的x轴距离和y轴距离为预定义值的非邻近样点的块中的至少一个可被用作候选块。预定义值可以是诸如4、8、12、16等的自然数。参照附图，索引为5至26的块中的至少一个块可被用作候选块。
可将不位于与邻近基本样点相同的垂直线、水平线或对角线上的样点设置为非邻近基本样点。
在下文中，候选块中的包括邻近基本样点的候选块被称为邻近块，并且包括非邻近基本样点的候选块被称为非邻近块。
在当前块与候选块之间的距离等于或大于阈值时，候选块可被设置为不可用作合并候选。可基于编码树单元的尺寸来确定阈值。在示例中，可将阈值设置为编码树单元的高度(ctu_height)或者将偏移与编码树单元的高度相加或从编码树单元的高度减去偏移而得到的值(ctu_height±N)。由于偏移N是编码装置和解码装置中的预定义值，因此可将其设置为4、8、16、32或ctu_height。
在当前块的y轴坐标与包括在候选块中的样点的y轴坐标之间的差大于阈值时，可确定候选块不可用作合并候选。
可选地，可将与当前块不属于相同的编码树单元的候选块设置为不可用作合并候选。在示例中，当基本样点在当前块所属的编码树单元的上方边界之外时，可将包括该基本样点的候选块可被设置为不可用作合并候选。
在当前块的上方边界邻接编码树单元的上方边界时，可确定多个候选块不可用作合并候选，因此可能降低当前块的编码/解码效率。为了解决这样的问题，可设置位于当前块左侧的候选块的数量大于位于当前块顶部的候选块的数量。
图9是示出用于推导合并候选的候选块的示图。
如在图9中所示出的示例中，属于当前块顶部的N个块行的顶部块和属于当前块左侧的M个块列的左侧块可被设置为候选块。在这种情况下，可通过将N设置为大于M来将左侧候选块的数量设置为大于顶部候选块的数量。
在示例中，可将当前块中的基本样点的y轴坐标与可用作候选块的顶部块的y轴坐标之间的差设置为不超过当前块的高度的N倍。另外，可将当前块中的基本样点的x轴坐标与可用作候选块的左侧块的x轴坐标之间的差设置为不超过当前块的宽度的M倍。
在示例中，在图9中所示出的示例示出了属于当前块顶部的两个块行的块和属于当前块左侧的五个左侧块列的块被设置为候选块。
可从与当前块包括在不同的画面中的时间邻近块推导合并候选。在示例中，可从包括在同位画面中的同位块推导合并候选。可将包括在参考画面列表中的参考画面中的任何一个设置为同位画面。可在比特流中用信号传送标识参考画面中的同位画面的索引信息。可选地，可将参考画面中的具有预定义索引的参考画面确定为同位画面。
可将合并候选的运动信息设置为与候选块的运动信息相同。在示例中，可将候选块的运动矢量、参考画面索引、预测方向或双向权重索引中的至少一个设置为合并候选的运动信息。
可产生包括合并候选的合并候选列表S702。
可根据预定顺序分配合并候选列表中的合并候选的索引。在示例中，可按照从左侧邻近块推导的合并候选、从顶部邻近块推导的合并候选、从右上方邻近块推导的合并候选、从左下方邻近块推导的合并候选、从左上方邻近块推导的合并候选和从时间邻近块推导的合并候选的顺序分配索引。
当多个合并候选被包括在合并候选中时，可选择多个合并候选中的至少一个S703。具体地，可在比特流中用信号传送用于指定多个合并候选中的任何一个的信息。在示例中，可在比特流中用信号传送表示包括在合并候选列表中的合并候选中的任何一个的索引的信息merge_idx。
当包括在合并候选列表中的合并候选的数量小于阈值时，可将包括在运动信息表中的运动信息候选作为合并候选被添加到合并候选列表。在这方面，阈值可以是可被包括在合并候选列表中的合并候选的最大数量或从合并候选的最大数量减去偏移而得到的值。偏移可以是诸如1或2等的自然数。
运动信息表包括从当前画面中的基于帧间预测编码/解码的块推导出的运动信息候选。在示例中，可将包括在运动信息表中的运动信息候选的运动信息设置为与基于帧间预测编码/解码的块的运动信息相同。在这方面，运动信息可包括运动矢量、参考画面索引、预测方向或双向权重索引中的至少一个。
包括在运动信息表中的运动信息候选也可被称为帧间区域合并候选或预测区域合并候选。
可在编码器和解码器中预先定义可包括在运动信息表中的运动信息候选的最大数量。在示例中，可包括在运动信息表中的运动信息候选的最大数量可以是1、2、3、4、5、6、7、8或更大(例如，16)。
可选地，可在比特流中用信号传送表示可包括在运动信息表中的运动信息候选的最大数量的信息。可在序列、画面或条带级别用信号传送所述信息。所述信息可表示可包括在运动信息表中的运动信息候选的最大数量。可选地，所述信息可表示可包括在运动信息表中的运动信息候选的最大数量与可包括在合并候选列表中的合并候选的最大数量之间的差。
可选地，可根据画面尺寸、条带尺寸或编码树单元尺寸来确定可包括在运动信息表中的运动信息候选的最大数量。
可以以画面、条带、并行块、分块、编码树单元或编码树单元线(行或列)为单位对运动信息表进行初始化。在示例中，当条带被初始化时，运动信息表也被初始化，因此，运动信息表可以不包括任何运动信息候选。
可选地，可在比特流中用信号传送表示是否将对运动信息表进行初始化的信息。可在条带、并行块、分块或块级别用信号传送所述信息。在所述信息指示运动信息表的初始化之前，可使用预先配置的运动信息表。
可选地，可在画面参数集或条带头中用信号传送关于初始运动信息候选的信息。尽管条带被初始化，但运动信息表可包括初始运动信息候选。因此，可将初始运动信息候选用于作为条带中的第一编码/解码目标的块。
可选地，可将包括在先前编码树单元的运动信息表中的运动信息候选设置为初始运动信息候选。在示例中，可将在先前编码树单元的运动信息表中包括的运动信息候选中的具有最小索引或具有最大索引的运动信息候选设置为初始运动信息候选。
按照编码/解码的顺序对块进行编码/解码，并且可按照编码/解码的顺序将基于帧间预测编码/解码的块顺序地设置为运动信息候选。
图10是用于解释运动信息表的更新方面的示图。
当针对当前块执行帧间预测时S1001，可基于当前块推导运动信息候选S1002。可将运动信息候选的运动信息设置为与当前块的运动信息相同。
当运动信息表为空时S1003，可将基于当前块推导出的运动信息候选添加到运动信息表S1004。
当运动信息表已经包括运动信息候选时S1003，可执行针对当前块的运动信息(或基于当前块推导出的运动信息候选)的冗余检查S1005。冗余检查被用于确定运动信息表中的预存储的运动信息候选的运动信息是否与当前块的运动信息相同。可针对运动信息表中的所有预存储的运动信息候选执行冗余检查。可选地，可针对运动信息表中的预存储的运动信息候选中的具有超过或低于阈值的索引的运动信息候选执行冗余检查。可选地，可针对预定义数量的运动信息候选执行冗余检查。在示例中，可将具有最小索引或具有最大索引的2个运动信息候选确定为冗余检查的目标。
当具有与当前块相同的运动信息的运动信息候选未被包括时，可将基于当前块推导出的运动信息候选添加到运动信息表S1008。可基于运动信息候选的运动信息(例如，运动矢量/参考画面索引等)是否相同来确定运动信息候选是否相同。
在这方面，当最大数量的运动信息候选已经被存储在运动信息表中时S1006，可删除最旧的运动信息候选S1007，并且可将基于当前块推导出的运动信息候选添加到运动信息表S1008。在这方面，最旧的运动信息候选可以是具有最大或最小索引的运动信息候选。
可通过各个索引识别运动信息候选。当将从当前块推导出的运动信息候选添加到运动信息表时，可将最小索引(例如，0)分配给该运动信息候选，并且预存储的运动信息候选的索引可增加1。在这方面，当最大数量的运动信息候选已经被存储在运动信息表中时，移除具有最大索引的运动信息候选。
可选地，当将从当前块推导出的运动信息候选添加到运动信息表时，可将最大索引分配给该运动信息候选。在示例中，当运动信息表中的预存储的运动信息候选的数量小于最大值时，可将具有与预存储的运动信息候选的数量相同的值的索引分配给该运动信息候选。可选地，当运动信息表中的预存储的运动信息候选的数量等于最大值时，可将从最大值减去1而得到的索引分配给该运动信息候选。可选地，移除具有最小索引的运动信息候选，并且其余的预存储的运动信息候选的索引减小1。
图11是示出运动信息表的更新方面的示图。
假设当将从当前块推导出的运动信息候选添加到运动信息表时，将最大索引分配给该运动信息候选。另外，假设最大数量的运动信息候选已经被存储在运动信息表中。
当将从当前块推导出的运动信息候选HmvpCand[n+1]添加到运动信息表HmvpCandList时，可删除预存储的运动信息候选中的具有最小索引的运动信息候选HmvpCand[0]，并且其余的运动信息候选的索引可减小1。另外，可将从当前块推导出的运动信息候选HmvpCand[n+1]的索引设置为最大值(例如，图11中所示出的n)。
当与基于当前块推导出的运动信息候选相同的运动信息候选被预先存储时S1005，可以不将基于当前块推导出的运动信息候选添加到运动信息表S1009。
可选地，在将基于当前块推导出的运动信息候选添加到运动信息表的同时，可移除与该运动信息候选相同的预存储的运动信息候选。在这种情况下，产生与预存储的运动信息候选的索引被新更新时相同的效果。
图12是示出更新预存储的运动信息候选的索引的示例的示图。
当与从当前块推导出的运动信息候选mvCand相同的预存储的运动信息候选的索引为hIdx时，可移除该预存储的运动信息候选，并且索引大于hIdx的运动信息候选的索引可减小1。在示例中，图12中所示出的示例示出在运动信息表HvmpCandList中删除与mvCand相同的HmvpCand[2]，并且从HmvpCand[3]至HmvpCand[n]的索引减小1。
并且，可将基于当前块推导出的运动信息候选mvCand添加到运动信息表的末尾。
可选地，可更新被分配给与基于当前块推导出的运动信息候选相同的预存储的运动信息候选的索引。例如，可将预存储的运动信息候选的索引改变为最小值或最大值。
可将包括在预定区域中的块的运动信息设置为不被添加到运动信息表。在示例中，可以不将基于包括在合并处理区域中的块的运动信息推导出的运动信息候选添加到运动信息表。由于针对包括在合并处理区域中的块的编码/解码顺序未被定义，因此将包括在合并处理区域中的块中的任何一个块的运动信息用于它们中的另一个块的帧间预测是不合适的。因此，可以不将基于包括在合并处理区域中的块推导出的运动信息候选添加到运动信息表。
可选地，可将小于预设尺寸的块的运动信息设置为不被添加到运动信息表。在示例中，可以不将基于宽度或高度小于4或8的编码块的运动信息或者4×4尺寸的编码块的运动信息推导出的运动信息候选添加到运动信息表。
当以每个子块为基础执行运动补偿预测时，可基于包括在当前块中的多个子块中的代表性子块的运动信息来推导运动信息候选。在示例中，当子块合并候选被用于当前块时，可基于子块中的代表性子块的运动信息来推导运动信息候选。
可按照以下顺序推导子块的运动矢量。首先，可选择包括在当前块的合并候选列表中的合并候选中的任何一个，并且可基于选择的合并候选的运动矢量来推导初始移位矢量(shVector)。并且，可通过将初始移位矢量与编码块中的每一个子块的基本样点(例如，左上方样点或中心样点)的位置(xSb,ySb)相加来推导基本样点位于位置(xColSb,yColSb)处的移位子块。下面的等式1示出用于推导移位子块的公式。
[等式1]
(xColSb，yColSb)＝(xSb+shVector[0]＞＞4，ySb+shVector[1]＞＞4)
然后，可将与包括(xColSb,yColSb)的子块的中心位置相应的同位块的运动矢量设置为包括(xSb,ySb)的子块的运动矢量。
代表性子块可表示包括当前块的左上方样点、中心样点、右下方样点、右上方样点或左下方样点的子块。
图13是示出代表性子块的位置的示图。
图13的(a)示出将位于当前块的左上方处的子块设置为代表性子块的示例，并且图13的(b)示出将位于当前块的中心处的子块设置为代表性子块的示例。当基于子块执行运动补偿预测时，可基于包括当前块的左上方样点或包括当前块的中心样点的子块的运动矢量来推导当前块的运动信息候选。
基于当前块的帧间预测模式，可确定当前块是否将被用作运动信息候选。在示例中，可将基于仿射运动模型编码/解码的块设置为不可用作运动信息候选。因此，尽管通过帧间预测对当前块进行编码/解码，但在当前块的帧间预测模式为仿射预测模式时，可以不基于当前块更新运动信息表。
可选地，可基于当前块的运动矢量分辨率、是否应用合并偏移编码方法、是否应用组合预测或者是否应用三角分区中的至少一个来确定当前块是否将被用作运动信息候选。在示例中，在以下情况中的至少一个情况下可将当前块设置为不可用作运动信息候选：当前块的运动信息分辨率等于或大于2个整数像素的情况、将组合预测应用于当前块的情况或者将合并偏移编码方法应用于当前块的情况。
可选地，可基于包括在基于仿射运动模型编码/解码的块中的子块的至少一个子块矢量推导运动信息候选。在示例中，可通过使用位于当前块的左上方、中心或右上方处的子块来推导运动信息候选。可选地，可将多个子块的子块矢量的平均值设置为运动信息候选的运动矢量。
可选地，可基于根据仿射运动模型编码/解码的块的仿射种子矢量的平均值来推导运动信息候选。在示例中，可将当前块的第一仿射种子矢量、第二仿射种子矢量或第三仿射种子矢量的至少一个平均值设置为运动信息候选的运动矢量。
可选地，可针对帧间预测模式配置运动信息表。在示例中，可对通过帧内块复制编码/解码的块的运动信息表、基于平移运动模型编码/解码的块的运动信息表或者基于仿射运动模型编码/解码的块的运动信息表中的至少一个进行定义。根据当前块的帧间预测模式，可选择多个运动信息表中的任何一个。
图14示出针对每个帧间预测模式产生运动信息表的示例。
当基于非仿射运动模型对块进行编码/解码时，可将基于块推导出的运动信息候选mvCand添加到非仿射运动信息表HmvpCandList。另一方面，当基于仿射运动模型对块进行编码/解码时，可将基于以上模型推导出的运动信息候选mvAfCand添加到仿射运动信息表HmvpAfCandList。
以上块的仿射种子矢量可被存储在从基于仿射运动模型编码/解码的块推导出的运动信息候选中。因此，运动信息候选可被用作用于推导当前块的仿射种子矢量的合并候选。
可选地，可针对每个运动矢量分辨率配置运动信息表。在示例中，可定义用于存储运动矢量分辨率为1/16像素的运动信息的运动信息表、用于存储运动矢量分辨率为1/4像素的运动信息的运动信息表、用于存储运动矢量分辨率为1/2像素的运动信息的运动信息表、用于存储运动矢量分辨率为整数像素的运动信息的运动信息表或用于存储运动矢量分辨率为4个整数像素的运动信息的运动信息表中的至少一个。
图15示出针对每个运动矢量分辨率产生运动信息表的示例。
当块的运动矢量分辨率具有1/4像素时，块的运动信息mvCand可被存储在四分之一像素运动信息表HmvpQPCandList中。另一方面，当块的运动矢量分辨率具有整数像素时，块的运动信息mvCand可被存储在整数像素运动信息表HmvpIPCandList中。当块的运动矢量分辨率具有4个整数像素时，块的运动信息mvCand可被存储在4个整数像素运动信息表Hmvp4IPCandList中。
基于当前块的运动矢量分辨率，可通过选择运动信息表推导当前块的合并候选。在示例中，在当前块的运动矢量分辨率为1/4像素时，可通过使用四分之一像素运动信息表HmvpQPCandList推导当前块的合并候选。另一方面，在当前块的运动矢量分辨率是整数像素时，可通过使用整数像素运动信息表HmvpIPCandList来推导当前块的合并候选。
可选地，可将应用合并偏移编码方法的块的运动信息存储在单独的运动信息表中。
图16示出将应用合并偏移编码方法的块的运动信息存储在单独的运动信息表中的示例。
当合并偏移矢量编码方法不被应用于块时，块的运动信息mvCand可被存储在运动信息表HmvpCandList中。另一方面，当合并偏移矢量编码方法被应用于块时，块的运动信息mvCand可以不被存储在运动信息表HmvpCandList中，并且可被存储在合并偏移运动信息表HmvpMMVDCandList中。
基于合并偏移矢量编码方法是否被应用于当前块，可选择运动信息表。在示例中，当合并偏移编码方法不被应用于当前块时，可通过使用运动信息表HmvpCandList推导当前块的合并候选。另一方面，当合并偏移编码方法被应用于当前块时，可通过使用合并偏移运动信息表HmvpMMVDCandList来推导当前块的合并候选。
除了所描述的运动信息表之外，还可定义附加运动信息表。除了上述运动信息表(下文中，被称为第一运动信息表)之外，还可定义长期运动信息表(下文中，被称为第二运动信息表)。在这方面，长期运动信息表包括长期运动信息候选。
当第一运动信息表和第二运动信息表两者均为空时，首先，可将运动信息候选添加到第二运动信息表。在可用于第二运动信息表的运动信息候选的数量达到最大数量之后，可将运动信息候选添加到第一运动信息表。
可选地，可将一个运动信息候选添加到第二运动信息表和第一运动信息表两者。
在这方面，完全填充的第二运动信息表可以不再执行更新。可选地，当条带中的解码的区域超过预定比率时，可更新第二运动信息表。可选地，可针对每N个编码树单元线更新第二运动信息表。
另一方面，每当通过帧间预测产生编码/解码块时，可更新第一运动信息表。但是，可将被添加到第二运动信息表的运动信息候选设置为不被用于更新第一运动信息表。
可在比特流中用信号传送用于选择第一运动信息表或第二运动信息表中的任何一个的信息。当包括在合并候选列表中的合并候选的数量小于阈值时，可将包括在由所述信息指示的运动信息表中的运动信息候选作为合并候选添加到合并候选列表。
可选地，可基于当前块的尺寸、当前块的形状、当前块的帧间预测模式、是否将双向预测应用于当前块、是否对运动矢量进行细化或是否将三角形分区应用于当前块来选择运动信息表。
可选地，当即使添加了包括在第一运动信息表中的运动信息候选，在合并候选列表中包括的合并候选的数量仍小于最大数量时，可将包括在第二运动信息表中的运动信息候选添加到合并候选列表。
图17是示出将包括在长期运动信息表中的运动信息候选添加到合并候选列表的示例的示图。
在包括在合并候选列表中的合并候选的数量小于最大数量的情况下，可将包括在第一运动信息表HmvpCandList中的运动信息候选添加到合并候选列表。当即使将包括在第一运动信息表中的运动信息候选添加到了合并候选列表，在合并候选列表中包括的合并候选的数量仍小于最大数量时，可将包括在长期运动信息表HmvpLTCandList中的运动信息候选添加到合并候选列表。
可将运动信息候选设置为包括除运动信息以外的附加信息。在示例中，块的尺寸、形状或分区信息中的至少一个可被另外存储在运动信息候选中。当配置当前块的合并候选列表时，可仅使用运动信息候选中的其尺寸、形状或分区信息与当前块相同或相似的运动信息候选，或者可将尺寸、形状或分区信息与当前块相同或相似的运动信息候选预先添加到合并候选列表。可选地，可针对块尺寸、形状或分区信息产生运动信息表。可通过使用多个运动信息表中的与当前块的形状、尺寸或分区信息相匹配的运动信息表来配置当前块的合并候选列表。
当包括在当前块的合并候选列表中的合并候选的数量小于阈值时，可将包括在运动信息表中的运动信息候选作为合并候选添加到合并候选列表。按照反映按升序或降序排列的运动信息候选的索引的顺序的顺序执行附加处理。在示例中，可首先将具有最大索引的运动信息候选添加到当前块的合并候选列表。
当将包括在运动信息表中的运动信息候选添加到合并候选列表时，可执行运动信息候选与合并候选列表中的预存储的合并候选之间的冗余检查。作为冗余检查的结果，可以不将具有与预存储的合并候选相同的运动信息的运动信息候选添加到合并候选列表。
可仅针对包括在运动信息表中的运动信息候选中的一部分执行冗余检查。在示例中，可仅针对具有超过或低于阈值的索引的运动信息候选执行冗余检查。可选地，可仅针对具有最大索引或最小索引的N个运动信息候选执行冗余检查。可选地，可仅针对合并候选列表中的预存储的合并候选中的一部分执行冗余检查。在示例中，可仅对其索引超过或低于阈值的合并候选或从特定位置处的块推导出的合并候选执行冗余检查。在这方面，特定位置可包括当前块的左侧邻近块、顶部邻近块、右上方邻近块或左下方邻近块中的至少一个。
图18是示出仅针对合并候选中的一部分执行冗余检查的示例的示图。
当将运动信息候选HmvpCand[j]添加到合并候选列表时，可针对运动信息候选执行与具有最大索引的2个合并候选mergeCandList[NumMerge-2]和mergeCandList[NumMerge-1]的冗余检查。在这方面，NumMerge可示出可用的空间合并候选和时间合并候选的数量。
与示出的示例不同，当将运动信息候选HmvpCand[j]添加到合并候选列表时，可针对运动信息候选执行与具有最小索引的2个合并候选的冗余检查。例如，可检查mergeCandList[0]和mergeCandList[1]是否与HmvpCand[j]相同。
可选地，可仅针对从特定位置推导出的合并候选执行冗余检查。在示例中，可针对从位于当前块左侧或当前块顶部处的邻近块推导出的合并候选中的至少一个执行冗余检查。当在合并候选列表中不存在从特定位置推导出的合并候选时，可在不进行冗余检查的情况下将运动信息候选添加到合并候选列表。
当将运动信息候选HmvpCand[j]添加到合并候选列表时，可针对运动信息候选执行与具有最大索引的2个合并候选mergeCandList[NumMerge-2]和mergeCandList[NumMerge-1]的冗余检查。在这方面，NumMerge可示出可用的空间合并候选和时间合并候选的数量。
可仅针对运动信息候选中的一部分执行与合并候选的冗余检查。在示例中，可仅针对包括在运动信息表中的运动信息候选中的具有大索引或小索引的N个运动信息候选执行冗余检查。在示例中，可仅针对具有包括在运动信息表中的运动信息候选的数量和运动信息候选的差低于阈值的索引的运动信息候选执行冗余检查。当阈值为2时，可仅针对包括在运动信息表中的运动信息候选中的具有最大索引值的3个运动信息候选执行冗余检查。对于除了上述3个运动信息候选之外的运动信息候选，可省略冗余检查。当省略冗余检查时，可将运动信息候选添加到合并候选列表，而不考虑是否存在与合并候选相同的运动信息。
相反地，将冗余检查设置为仅针对具有包括在运动信息表中的运动信息候选的数量和运动信息候选的差超过阈值的索引的运动信息候选被执行。
可在编码器和解码器中重新定义执行冗余检查的运动信息候选的数量。在示例中，阈值可以是诸如0、1或2的整数。
可选地，可基于包括在合并候选列表中的合并候选的数量或包括在运动信息表中的运动信息候选的数量中的至少一个来确定阈值。
当发现与第一运动信息候选相同的合并候选时，可在针对第二运动信息候选的冗余检查中省略与和第一运动信息候选相同的合并候选的冗余检查。
图19是示出省略与特定合并候选的冗余检查的示例的示图。
当将索引为i的运动信息候选HmvpCand[i]添加到合并候选列表时，执行运动信息候选与合并候选列表中的预存储的合并候选之间的冗余检查。在这方面，当发现合并候选mergeCandlist[j]与运动信息候选HmvpCand[i]相同时，可在不将运动信息候选HmvpCand[i]添加到合并候选列表的情况下执行运动信息候选HmvpCand[i-1](其中，其索引为i-1)与合并候选之间的冗余检查。在这方面，可省略运动信息候选HmvpCand[i-1]与合并候选mergeCandList[j]之间的冗余检查。
在示例中，在图19示出的示例中，已经确定HmvpCand[i]与mergeCandList[2]相同。因此，可在不将HmvpCand[i]添加到合并候选列表的情况下执行针对HmvpCand[i-1]的冗余检查。在这方面，可省略HmvpCand[i-1]与mergeCandList[2]之间的冗余检查。
当包括在当前块的合并候选列表中的合并候选的数量小于阈值时，除了包括运动信息候选之外，可另外包括成对合并候选或零合并候选中的至少一个。成对合并候选表示具有从对多于2个合并候选的运动矢量求平均而获得的值作为运动矢量的合并候选，零合并候选表示运动矢量为0的合并候选。
对于当前块的合并候选列表，可按照以下顺序添加合并候选。
空间合并候选-时间合并候选-运动信息候选-(仿射运动信息候选)-成对合并候选-零合并候选
空间合并候选表示从邻近块或非邻近块中的至少一个推导出的合并候选，时间合并候选表示从先前参考画面推导出的合并候选。仿射运动信息候选表示从通过仿射运动模型编码/解码的块推导出的运动信息候选。
运动信息表可被用在运动矢量预测模式中。在示例中，当包括在当前块的运动矢量预测候选列表中的运动矢量预测候选的数量小于阈值时，可将包括在运动信息表中的运动信息候选设置为当前块的运动矢量预测候选。具体地，可将运动信息候选的运动矢量设置为运动矢量预测候选。
如果选择包括在当前块的运动矢量预测候选列表中的运动矢量预测候选中的任何一个，则可将所选择的候选设置为当前块的运动矢量预测因子。然后，在对当前块的运动矢量残差值进行解码之后，可通过将运动矢量预测因子和运动矢量残差值相加来获得当前块的运动矢量。
可按照以下顺序配置当前块的运动矢量预测候选列表。
空间运动矢量预测候选-时间运动矢量预测候选-运动信息候选-(仿射运动信息候选)-零运动矢量预测候选
空间运动矢量预测候选表示从邻近块或非邻近块中的至少一个推导出的运动矢量预测候选，并且时间运动矢量预测候选表示从先前参考画面推导出的运动矢量预测候选。仿射运动信息候选表示从通过仿射运动模型编码/解码的块推导出的运动信息候选。零运动矢量预测候选表示运动矢量的值为0的候选。
可定义大于编码块的合并处理区域。可并行地处理包括在合并处理区域中的编码块，而无需顺序地进行编码/解码。在这方面，不被顺序地编码/解码意味着未定义编码/解码的顺序。因此，可独立地处理包括在合并处理区域中的块的编码/解码处理。可选地，包括在合并处理区域中的块可共享合并候选。在这方面，可基于合并处理区域推导合并候选。
根据上述特征，合并处理区域可被称为并行处理区域、共享合并区域(SMR)或合并估计区域(MER)。
可基于编码块推导当前块的合并候选。然而，在当前块包括在大于当前块的合并处理区域中时，可将包括在与当前块相同的合并处理区域中的候选块设置为不可用作合并候选。
图20是示出将包括在与当前块相同的合并处理区域中的候选块设置为不可用作合并候选的示例的示图。
在图20的(a)所示出的示例中，在对CU5的解码/解码时，可将包括与CU5相邻的基本样点的块设置为候选块。在这方面，可将包括在与CU5相同的合并处理区域中的候选块X3和X4设置为不可用作CU5的合并候选。但是，可将不包括在与CU5相同的合并处理区域中的候选块X0、X1和X2设置为可用作合并候选。
在图20的(b)所示出的示例中，在对CU8的解码/解码时，可将包括与CU8相邻的基本样点的块设置为候选块。在这方面，可将包括在与CU8相同的合并处理区域中的候选块X6、X7和X8设置为不可用作合并候选。然而，可将不包括在与CU8相同的合并处理区域中的候选块X5和X9设置为可用作合并候选。
可选地，在当前块包括在合并处理区域中时，可将与当前块和合并处理区域相邻的邻近块设置为候选块。
图21是示出在当前块被包括在合并处理区域中时推导当前块的合并候选的示例的示图。
如在图21的(a)所示出的示例中，可将与当前块相邻的邻近块设置为用于推导当前块的合并候选的候选块。在这方面，可将包括在与当前块相同的合并处理区域中的候选块设置为不可用作合并候选。在示例中，在推导编码块CU3的合并候选时，可将包括在与编码块CU3相同的合并处理区域中的顶部邻近块y3和右上邻近块y4设置为不可用作编码块CU3的合并候选。
通过按照预定义顺序扫描与当前块相邻的邻近块，可推导合并候选。在示例中，预定义顺序可以是y1、y3、y4、y0和y2的顺序。
当可从与当前块相邻的邻近块推导出的合并候选的数量小于从合并候选的最大数量减去偏移而得到的值或所述最大数量时，如图21的(b)所示出的示例，可通过使用与合并处理区域相邻的邻近块来推导当前块的合并候选。在示例中，可将与包括编码块CU3的合并处理区域相邻的邻近块设置为编码块CU3的候选块。在这方面，与合并处理区域相邻的邻近块可包括左侧邻近块x1、顶部邻近块x3、左下方邻近块x0、右上方邻近块x4或左上方邻近块x2中的至少一个。
可通过按照预定义顺序扫描与合并处理区域相邻的邻近块来推导合并候选。在示例中，预定义顺序可以是x1、x3、x4、x0和x2的顺序。
总之，可通过按照以下扫描顺序扫描候选块来推导关于包括在合并处理区域中的编码块CU3的合并候选。
(y1,y3,y4,y0,y2,x1,x3,x4,x0,x2)
但是，上述候选块的扫描顺序仅示出本公开的示例，并且可按照与上述示例不同的顺序扫描候选块。可选地，可基于当前块或合并处理区域的尺寸或形状中的至少一个来自适应地确定扫描顺序。
合并处理区域可以是正方形或非正方形的。可在比特流中用信号传送用于确定合并处理区域的信息。该信息可包括表示合并处理区域的形状的信息或表示合并处理区域的尺寸的信息中的至少一个。当合并处理区域为非正方形时，可在比特流中用信号传送表示合并处理区域的尺寸的信息、表示合并处理区域的宽度或高度的信息或者表示合并处理区域的宽度与高度之间的比的信息中的至少一个。
可基于在比特流中用信号传送的信息、画面分辨率、条带的尺寸或并行块的尺寸中的至少一个来确定合并处理区域的尺寸。
如果针对包括在合并处理区域中的块执行运动补偿预测，则可将基于执行运动补偿预测的块的运动信息而推导出的运动信息候选添加到运动信息表。
但是，如果从包括在合并处理区域中的块推导出的运动信息候选被添加到运动信息表，则可能发生从该块推导出的运动信息候选用在合并处理区域中的编码/解码实际上比该块慢的其他块的编码/解码的情况。换句话说，尽管对包括在合并处理区域中的块进行编码/解码时应该排除块之间的依赖性，但可能发生通过使用包括在合并处理区域中的其他块的运动信息来执行运动预测补偿的情况。为了解决这样的问题，尽管完成了包括在合并处理区域中的块的编码/解码，但是可以不将完成了编码/解码的块的运动信息添加到运动信息表。
可选地，可通过仅使用合并处理区域中的预定义位置处的块来更新运动信息表。预定义位置可包括合并处理区域中的左上方位置处的块、右上方位置处的块、左下方位置处的块、右下方位置处的块、中心位置处的块、与右侧边界相邻的块或与下方边界相邻的块中的至少一个。在示例中，可在运动信息表中仅更新合并处理区域中的与右下角相邻的块的运动信息，并且可以不在运动信息表中更新其它块的运动信息。
可选地，在对包括在合并处理区域中的所有块进行解码之后，可将从所述块推导出的运动信息候选添加到运动信息表。换句话说，虽然包括在合并处理区域中的块被编码/解码，但可以不更新运动信息表。
在示例中，如果对包括在合并处理区域中的块执行运动补偿预测，则可按照预定义顺序将从所述块推导出的运动信息候选添加到运动信息表。在这方面，可按照合并处理区域或编码树单元中的编码块的扫描顺序来确定预定义顺序。扫描顺序可以是光栅扫描、水平扫描、垂直扫描或Z字形扫描中的至少一个。可选地，可基于每一块的运动信息或具有相同运动信息的块的数量来确定预定义顺序。
可选地，包括单向运动信息的运动信息候选可在包括双向运动信息的运动信息候选之前被添加到运动信息表。相反，包括双向运动信息的运动信息候选可在包括单向运动信息的运动信息候选之前被添加到运动信息表。
可选地，可在合并处理区域或编码树单元中按照高使用频率或低使用频率的顺序将运动信息候选添加到运动信息表。
在当前块包括在合并处理区域中并且在当前块的合并候选列表中包括的合并候选的数量小于最大数量时，可将包括在运动信息表中的运动信息候选添加到合并候选列表。在这方面，可将从包括在与当前块相同的合并处理区域中的块推导出的运动信息候选设置为不被添加到当前块的合并候选列表。
可选地，在当前块包括在合并处理区域中时，可将其设置为不使用包括在运动信息表中的运动信息候选。换句话说，尽管包括在当前块的合并候选列表中的合并候选的数量小于最大数量，但包括在运动信息表中的运动信息候选可以不被添加到合并候选列表。
在另一示例中，可配置关于合并处理区域或编码树单元的运动信息表。该运动信息表起到临时存储包括在合并处理区域中的块的运动信息的作用。为了区分一般运动信息表与针对合并处理区域或编码树单元的运动信息表，针对合并处理区域或编码树单元的运动信息表被称为临时运动信息表。并且，存储在临时运动信息表中的运动信息候选被称为临时运动信息候选。
图22是示出临时运动信息表的示图。
可配置针对编码树单元或合并处理区域的临时运动信息表。当针对包括在编码树单元或合并处理区域中的当前块执行运动补偿预测时，可以不将块的运动信息添加到运动信息表HmvpCandList。相反，可将从块推导出的临时运动信息候选添加到临时运动信息表HmvpMERCandList。换句话说，可以不将被添加到临时运动信息表的临时运动信息候选添加到运动信息表。因此，运动信息表可以不包括基于在编码树单元或包括当前块的合并处理区域中包括的块的运动信息推导出的运动信息候选。
可选地，可仅将包括在合并处理区域中的块中的一些块的运动信息添加到临时运动信息表。在示例中，仅合并处理区域中的预定义位置处的块可被用于更新运动信息表。预定义位置可包括合并处理区域中的左上方位置处的块、右上方位置处的块、左下方位置处的块、右下方位置处的块、中心位置处的块、与右侧边界相邻的块或与下方边界相邻的块中的至少一个。在示例中，可仅将合并处理区域中的与右下角相邻的块的运动信息添加到临时运动信息表，并且可以不将其它块的运动信息添加到临时运动信息表。
可将可由临时运动信息表包括的临时运动信息候选的最大数量设置为与运动信息候选的最大数量相同。可选地，可根据编码树单元或合并处理区域的尺寸来确定可由临时运动信息表包括的临时运动信息候选的最大数量。可选地，可将可包括在临时运动信息表中的临时运动信息候选的最大数量设置为小于可包括在运动信息表中的运动信息候选的最大数量。
可将包括在编码树单元或合并处理区域中的当前块设置为不使用关于相应编码树单元或合并处理区域的临时运动信息表。换句话说，当包括在当前块的合并候选列表中的合并候选的数量小于阈值时，可将包括在运动信息表中的运动信息候选添加到合并候选列表，并且可以不将包括在临时运动信息表中的临时运动信息候选添加到合并候选列表。因此，包括在与当前块相同的编码树单元或相同的合并处理区域中的其他块的运动信息可以不被用于当前块的运动补偿预测。
如果完成对包括在编码树单元或合并处理区域中的所有块的编码/解码，则可统一运动信息表和临时运动信息表。
图23是示出统一运动信息表和临时运动信息表的示例的示图。
如果完成对包括在编码树单元或合并处理区域中的所有块的编码/解码，则如图23中所示出的示例，可在运动信息表中更新包括在临时运动信息表中的临时运动信息候选。
在这方面，可按照被插入在临时运动信息表中的顺序(换句话说，按照索引值的升序或降序)将包括在临时运动信息表中的临时运动信息候选添加到运动信息表。
在另一示例中，可按照预定义顺序将包括在临时运动信息表中的临时运动信息候选添加到运动信息表。在这方面，可按照合并处理区域或编码树单元中的编码块的扫描顺序来确定预定义顺序。扫描顺序可以是光栅扫描、水平扫描、垂直扫描或Z字形扫描中的至少一个。可选地，可基于每一个块的运动信息或具有相同运动信息的块的数量来确定预定义顺序。
可选地，包括单向运动信息的临时运动信息候选可在包括双向运动信息的临时运动信息候选之前被添加到运动信息表。相反，包括双向运动信息的临时运动信息候选可在包括单向运动信息的临时运动信息候选之前被添加到运动信息表。
可选地，可按照在合并处理区域或编码树单元中的高使用频率或低使用频率的顺序将临时运动信息候选添加到运动信息表。
在将包括在临时运动信息表中的临时运动信息候选添加到运动信息表的情况下，可执行针对临时运动信息候选的冗余检查。在示例中，当与包括在临时运动信息表中的临时运动信息候选相同的运动信息候选被预先存储在运动信息表中时，可以不将临时运动信息候选添加到运动信息表。在这方面，可针对包括在运动信息表中的运动信息候选的一部分执行冗余检查。在示例中，可针对具有超过或低于阈值的索引的运动信息候选执行冗余检查。在示例中，当临时运动信息候选等于具有超过预定义值的索引的运动信息候选时，可以不将临时运动信息候选添加到运动信息表。
其可限制从与当前块相同的编码树单元或相同的合并处理区域中包括的块推导出的运动信息候选作为当前块的合并候选的使用。为此，可另外存储块的地址信息以用于运动信息候选。块的地址信息可包括块的位置、块的地址、块的索引、包括块的合并处理区域的位置、包括块的合并处理区域的地址、包括块的合并处理区域的索引、包括块的编码树区域的位置、包括块的编码树区域的地址或者包括块的编码树区域的索引中的至少一个。
可将编码块分区为多个预测单元，并且可针对分区的预测单元中的每一个执行预测。在这种情况下，预测单元表示用于执行预测的基本单元。
可通过使用垂直线、水平线、斜线或对角线中的至少一个来对编码块进行分区。由分区线进行分区的预测单元可具有诸如三角形、四边形、梯形或五边形的形状。在示例中，编码块可被分区为两个三角形预测单元、两个梯形预测单元、两个四边形预测单元或者一个三角形预测单元和一个五边形预测单元。
可在比特流中用信号传送用于确定对编码块进行分区的线的数量、角度或位置中的至少一个的信息。在示例中，可在比特流中用信号传送表示编码块的分区类型候选中的一个的信息，或可在比特流中用信号传送指定对编码块进行分区的多个线候选中的一个的信息。在示例中，可在比特流中用信号传送指示多个线候选中的一个的索引信息。
针对多个候选线中的每一个，角度或位置中的至少一个可以不同。可基于当前块的尺寸或形状、可用合并候选的数量或者特定位置处的邻近块是否可用作合并候选来确定可用于当前块的线候选的数量。
可选地，可在比特流中用信号传送用于确定线候选的数量或类型的信息。在示例中，可通过使用1比特标志来确定具有大于对角线的角度的斜线和/或具有小于对角线的角度的斜线是否可用作线候选。可在序列、画面或序列级别用信号传送该信息。
可选地，可基于编码块的帧内预测模式或帧间预测模式、可用合并候选的位置或者邻近块的分区类型中的至少一个来自适应地确定对编码块进行分区的线的数量、角度或位置中的至少一个。
当编码块被分区为多个预测单元时，可针对每一个分区出的预测单元执行帧内预测或帧间预测。
图24是示出通过使用对角线将编码块分区为多个预测单元的示例的示图。
如在图24的(a)和(b)所示出的示例中，可通过使用对角线将编码块分区为两个三角形预测单元。
图24的(a)和(b)示出通过使用连接编码块的两个顶点的对角线将编码块分区为两个预测单元。但是，可通过使用线的至少一端不穿过编码块的顶点的斜线将编码块分区为两个预测单元。
图25是示出将编码块分区为两个预测单元的示例的示图。
如在图的25(a)和(b)所示出的示例中，可通过使用两端分别邻接编码块的上方边界和下方边界的斜线将编码块分区为两个预测单元。
可选地，如在图25的(c)和(d)所示出的示例中，以通过使用两端分别邻接编码块的左侧边界和右侧边界的斜线将编码块分区为两个预测单元。
可选地，可将编码块分区为具有不同尺寸的两个预测单元。在示例中，可通过设置对编码块进行分区的斜线以与形成一个顶点的两个边界相遇来将编码块分区为具有不同尺寸的两个预测单元。
图26示出将编码块分区为多个不同尺寸的预测块的示例。
如在图26的(a)和(b)所示出的示例中，可通过设置连接编码块的左上方和右下方的对角线以穿过左侧边界、右侧边界、上方边界或下方边界而不是编码块的左上角或右下角来将编码块分区为具有不同尺寸的两个预测单元。
可选地，如在图26的(c)和(d)所示出的示例中，可通过设置连接编码块的右上方和左下方的对角线以穿过左侧边界、右侧边界、上方边界或下方边界而不是编码块的左上角或右下角来将编码块分区为具有不同尺寸的两个预测单元。
通过对编码块进行分区而产生的预测单元中的每一个被称为“第n预测单元”。在示例中，在图24至图26所示出的示例中，PU1可被定义为第一预测单元，并且PU2可以被定义为第二预测单元。第一预测单元可表示包括编码块中的左下方位置处的样点或左上方位置处的样点的预测单元，并且第二预测单元可表示包括编码块中的右上方位置的样点或右下方位置的样点的预测单元。
相反，包括编码块中的右上方位置处的样点或右下方位置处的样点的预测单元可被定义为第一预测单元，并且包括编码块中的左下方位置处的样点或左上方位置处的样点的预测单元可被定义为第二预测单元。
当通过使用水平线、垂直线、对角线或斜线对编码块进行分区时，可将其称为预测单元分区。通过应用预测单元分区而产生的预测单元可根据其形状被称为三角形预测单元、四边形预测单元或五边形预测单元。
在下面的实施例中，将假设通过使用对角线对编码块进行分区。具体地，当通过使用对角线将编码块分区为两个预测单元时，其被称为对角线分区或三角形分区。但是，即使当通过使用具有与垂直线、水平线或对角线不同的角度的斜线来对编码块进行分区时，也可根据下述实施例对预测单元进行编码/解码。换句话说，与下面描述的三角形预测单元的编码/解码相关的事项也可被应用于四边形预测单元或五边形预测单元的编码/解码。
可基于条带类型、可包括在合并候选列表中的合并候选的最大数量、编码块的尺寸、编码块的形状、编码块的预测编码模式或父节点的分区方面中的至少一个来确定预测单元分区是否将被应用于编码块。
在示例中，可基于当前条带是否为B类型来确定预测单元分区是否将被应用于编码块。可仅在当前条带为B类型时允许预测单元分区。
可选地，可基于包括在合并候选列表中的合并候选的最大数量是否等于或大于2来确定预测单元分区是否将被应用于编码块。仅当包括在合并候选列表中的合并候选的最大数量等于或大于2时，才可允许预测单元分区。
可选地，当宽度或高度中的至少一个大于64时，在实现冗余地访问64×64尺寸的数据处理单元的硬件期间可能出现缺点。因此，当编码块的宽度或高度中的至少一个大于阈值时，可能不允许将编码块分区为多个预测单元。在示例中，当编码块的宽度或高度中的至少一个大于64时(例如，当宽度或高度中的至少一个为128时)，可以不使用预测单元分区。
可选地，通过考虑可由实现的硬件同时处理的样点的最大数量，针对样点数量大于阈值的编码块，可以不允许预测单元分区。在示例中，针对样点数量大于4096的编码树块，可以不允许预测单元分区。
可选地，针对包括在编码块中的样点的数量小于阈值的编码块，可以不允许预测单元分区。在示例中，当包括在编码块中的样点的数量小于64时，可将预测单元分区设置为不被应用于编码块。
可选地，可基于编码块的宽高比是否小于第一阈值或者编码块的宽高比是否大于第二阈值中的至少一个来确定预测单元分区是否将被应用于编码块。在这种情况下，如以下等式2所示出的，可将编码块的宽高比whRatio确定为编码块的宽度CbW和高度CbH的比。
[等式2]
whRatio＝abs(Log2(CbW/CbH))
可选地，当编码块的宽高比小于第一阈值或大于第二阈值时，预测单元分区可被应用于编码块。在示例中，当第一阈值为4时，针对64×4或4×64尺寸的编码块可以不允许预测单元分区。
可选地，基于父节点的分区类型，可确定是否允许预测单元分区。在示例中，当基于四叉树分区来对编码块(父节点)进行分区时，预测单元分区可被应用于编码块(叶节点)。另一方面，当基于二叉树或三叉树分区对编码块(父节点)进行分区时，可将预测单元分区设置为针对编码块(叶节点)是不允许的。
可选地，基于编码块的预测编码模式，可确定是否允许预测单元划分。在示例中，仅当通过帧内预测对编码块进行编码时，当通过帧间预测对编码块进行编码时，或者当通过预定义的帧间预测模式对编码块进行编码时，才可允许预测单元划分。在此情况下，预定义的帧间预测模式可包括合并模式、运动矢量预测模式、仿射合并模式或仿射运动矢量预测模式中的至少一个。
可选地，基于并行处理区域的尺寸，可确定是否允许预测单元分区。在一个示例中，当编码块的尺寸大于并行处理区域的尺寸时，可以不使用预测单元分区。
通过考虑上面列举的条件中的两个或更多个，可确定预测单元分区是否将被应用于编码块。
在另一示例中，可在比特流中用信号传送表示预测单元分区是否将被应用于编码块的信息。可在序列、画面、条带或块级别用信号传送该信息。例如，可在编码块级别用信号传送表示预测单元分区是否被应用于编码块的标志triangle_partition_flag。
当确定将预测单元分区应用于编码块时，可在比特流中用信号传送表示对编码块进行分区的线的数量或线的位置的信息。
在示例中，当通过对角线对编码块进行分区时，可在比特流中用信号传送表示对编码块进行分区的对角线的方向的信息。在示例中，可在比特流中用信号传送表示对角线的方向的标志triangle_partition_type_flag。该标志表示是否根据连接左上方和右下方的对角线对编码块进行分区，或者是否根据连接右上方和左下方的对角线对编码块进行分区。当通过连接左上方和右下方的对角线对编码块进行分区时，其可被称为左侧三角形分区类型，并且当编码块由连接右上方和左下方的对角线划分时，其可被称为右侧三角形分区类型。在示例中，当标志的值为0时，其可表示编码块的分区类型为左侧三角形分区类型，并且当标志的值为1时，其可表示编码块的分区类型为右侧三角形分区类型。
另外，可在比特流中用信号传送表示预测单元的尺寸是否相同的信息或表示对编码块进行分区的对角线的位置的信息。在示例中，当表示预测单元的尺寸的信息表示预测单元的尺寸相同时，可省略对表示对角线的位置的信息的编码，并且可通过使用穿过编码块的两个顶点的对角线将编码块分区为两个预测单元。另一方面，当表示预测单元的尺寸的信息表示预测单元的尺寸不相同时，可基于表示对角线的位置的信息来确定对编码块进行分区的对角线的位置。在示例中，当左侧三角形分区类型被应用于编码块时，位置信息可表示对角线是否与编码块的左侧边界和下方边界相遇，或者对角线是否与上方边界和右侧边界相遇。可选地，当右侧三角形分区类型被应用于编码块时，位置信息可表示对角线是否与编码块的右侧边界和下方边界相遇，或者对角线是否与上方边界和左侧边界相遇。
可在编码块级别用信号传送表示编码块的分区类型的信息。因此，可针对应用预测单元分区的每个编码块来确定分区类型。
在另一示例中，可用信号传送表示针对序列、画面、条带、并行块或编码树单元的分区类型的信息。在这种情况下，可将在序列、编码块、画面、条带、并行块或编码树单元中应用对角线分区的编码块的分区类型设置为相同。
可选地，可对用于确定编码树单元中的应用预测单元分区的第一编码单元的分区类型的信息进行编码和用信号传送，并且可将第二或之后应用预测单元分区的编码单元设置为使用与第一编码单元相同的分区类型。
在另一示例中，可基于邻近块的分区类型来确定编码块的分区类型。在此情况下，邻近块可包括与编码块的左上角相邻的邻近块、与右上角相邻的邻近块、与左下角相邻的邻近块、位于顶部处的邻近块或位于左侧处的邻近块中的至少一个。在示例中，可将当前块的分区类型设置为与邻近块的分区类型相同。可选地，可基于左侧三角形分区类型是否被应用于左上方邻近块或者右侧三角形分区类型是否被应用于右上方邻近块或左下方邻近块来确定当前块的分区类型。
为了针对第一预测单元和第二预测单元执行运动预测补偿，可推导第一预测单元和第二预测单元中的每一个的运动信息。在此情况下，可从包括在合并候选列表中的合并候选推导第一预测单元和第二预测单元的运动信息。为了区分一般合并候选列表与用于推导预测单元的运动信息的合并候选列表，用于推导预测单元的运动信息的合并候选列表被称为分区模式合并候选列表或三角形合并候选列表。另外，包括在分区模式合并候选列表中的合并候选被称为分区模式合并候选或三角形合并候选。但是，应用上述推导合并候选的方法和上述构成合并候选列表的方法来推导分区模式合并候选以及构成分区模式合并候选列表也包括在本公开的范围内。
可在比特流中用信号传送用于确定可包括在分区模式合并候选列表中的分区模式合并候选的最大数量的信息。所述信息可表示可包括在合并候选列表中的合并候选的最大数量与可包括在分区模式合并候选列表中的分区模式合并候选的最大数量之间的差。
可从编码块的空间邻近块和时间邻近块推导分区模式合并候选。
图27是示出用于推导分区模式合并候选的邻近块的示图。
可通过使用位于编码块顶部处的邻近块、位于编码块左侧处的邻近块或包括在与编码块不同的画面中的同位块中的至少一个来推导分区模式合并候选。顶部邻近块可包括包含位于编码块顶部处的样点(xCb+CbW-1,yCb-1)的块、包括位于编码块顶部处的样点(xCb+CbW,yCb-1)的块或包括位于编码块顶部处的样点(xCb-1,yCb-1)的块中的至少一个。左侧邻近块可包括包含位于编码块左侧处的样点(xCb-1,yCb+CbH-1)的块或包括位于编码块左侧处的样点(xCb-1,yCb+CbH)的块中的至少一个。同位块可被确定为包括与同位画面中的编码块的右上角相邻的样点(xCb+CbW,yCb+CbH)的块或包括位于同位画面中的编码块的中心处的样点(xCb/2,yCb/2)的块中的一个。
可按照预定义顺序搜索邻近块，并且可根据预定义顺序用分区模式合并候选配置分区模式合并候选列表。在示例中，可按照B1、A1、B0、A0、C0、B2和C1的顺序搜索分区模式合并候选以配置分区模式合并候选列表。
可基于分区模式合并候选列表推导预测单元的运动信息。换句话说，预测单元可共享单个分区模式合并候选列表。
为了推导预测单元的运动信息，可在比特流中用信号传送用于指定包括在分区模式合并候选列表中的分区模式合并候选中的至少一个的信息。在示例中，可在比特流中用信号传送用于指定分区模式合并候选中的至少一个的索引信息merge_triangle_idx。
索引信息可指定第一预测单元的合并候选与第二预测单元的合并候选的组合。在示例中，下面的表格1是根据索引信息merge_triangle_idx表示合并候选的组合的示例。
[表格1]
| merge_triangle_idx | 0 | 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 |
| 第一预测单元 | 1 | 0 | 0 | 0 | 2 | 0 | 0 | 1 | 3 |
| 第二预测单元 | 0 | 1 | 2 | 1 | 0 | 3 | 4 | 0 | 0 |
| merge_triangle_idx | 9 | 10 | 11 | 12 | 13 | 14 | 15 | 16 | 17 |
| 第一预测单元 | 4 | 0 | 1 | 1 | 0 | 0 | 1 | 1 | 1 |
| 第二预测单元 | 0 | 2 | 2 | 2 | 4 | 3 | 3 | 4 | 4 |
| merge_triangle_idx | 18 | 19 | 20 | 21 | 22 | 23 | 24 | 25 | 26 |
| 第一预测单元 | 1 | 2 | 2 | 2 | 4 | 3 | 3 | 3 | 4 |
| 第二预测单元 | 3 | 1 | 0 | 1 | 3 | 0 | 2 | 4 | 0 |
| merge_triangle_idx | 27 | 28 | 29 | 30 | 31 | 32 | 33 | 34 | 35 |
| 第一预测单元 | 3 | 2 | 4 | 4 | 2 | 4 | 3 | 4 | 3 |
| 第二预测单元 | 1 | 3 | 1 | 1 | 3 | 2 | 2 | 3 | 1 |
| merge_triangle_idx | 36 | 37 | 38 | 39 | |||||
| 第一预测单元 | 2 | 2 | 4 | 3 | |||||
| 第二预测单元 | 4 | 4 | 2 | 4 |
当索引信息merge_triangle_idx的值为1时，其表示从索引为1的合并候选推导第一预测单元的运动信息，并且从索引为0的合并候选推导第二预测单元的运动信息。可通过索引信息merge_triangle_idx来确定用于推导第一预测单元的运动信息的分区模式合并候选和用于推导第二预测单元的运动信息的分区模式合并候选。还可基于索引信息确定被应用对角线分区的编码块的分区类型。换句话说，索引信息可指定第一预测单元的合并候选、第二预测单元的合并候选和编码块的分区方向的组合。当由索引信息确定编码块的分区类型时，可以不对表示对编码块进行分区的对角线的方向的信息triangle_partition_type_flag进行编码。表格2表示针对索引信息merge_triangle_idx的编码块的分区类型。
[表格2]
| merge_triangle_idx | 0 | 1 | 2 | 3 | 4 | 5 | 6 | 7 | 8 |
| TriangleDir | 0 | 1 | 1 | 0 | 0 | 1 | 1 | 1 | 0 |
| merge_triangle_idx | 9 | 10 | 11 | 12 | 13 | 14 | 15 | 16 | 17 |
| TriangleDir | 0 | 0 | 0 | 1 | 0 | 0 | 0 | 0 | 1 |
| merge_triangle_idx | 18 | 19 | 20 | 21 | 22 | 23 | 24 | 25 | 26 |
| TriangleDir | 1 | 1 | 1 | 0 | 0 | 1 | 1 | 1 | 1 |
| merge_triangle_idx | 27 | 28 | 29 | 30 | 31 | 32 | 33 | 34 | 35 |
| TriangleDir | 1 | 1 | 1 | 0 | 0 | 1 | 0 | 1 | 0 |
| merge_triangle_idx | 36 | 37 | 38 | 39 | |||||
| TriangleDir | 0 | 1 | 0 | 0 |
当变量TriangleDir为0时，其表示左侧三角形分区类型被应用于编码块，并且当变量TriangleDir为1时，其表示右侧三角形分区类型被应用于编码块。通过组合表格1和表格2，可设置索引信息merge_triangle_idx以指定第一预测单元的合并候选、第二预测单元的合并候选和编码块的分区方向的组合。在另一示例中，可用信号传送仅针对第一预测单元和第二预测单元中的一个的索引信息，并且可基于索引信息确定针对第一预测单元和第二预测单元中的另一个的合并候选的索引。在示例中，可基于表示分区模式合并候选中的一个的索引的索引信息merge_triangle_idx来确定第一预测单元的合并候选。并且，可基于merge_triangle_idx指定第二预测单元的合并候选。在示例中，可通过将偏移与索引信息merge_triangle_idx相加或从索引信息merge_triangle_idx减去偏移来推导第二预测单元的合并候选。偏移可以是诸如1或2的整数。在示例中，第二预测单元的合并候选可被确定为具有通过将1与merge_triangle_idx相加而获得的值作为索引的分区模式合并候选。当merge_triangle_idx指示分区模式合并候选中的具有最大索引值的分区模式合并候选时，可从索引为0的分区模式合并候选或具有从merge_triangle_idx减去1的值作为索引的分区模式合并候选推导第二预测单元的运动信息。
可选地，可从与由索引信息指定的第一预测单元的分区模式合并候选具有相同的参考画面的分区模式合并候选推导第二预测单元的运动信息。在这种情况下，与第一预测单元的分区模式合并候选具有相同的参考画面的分区模式合并候选可表示L0参考画面或L1参考画面中的至少一个与第一预测单元的分区模式合并候选相同的分区模式合并候选。当存在与第一预测单元的分区模式合并候选具有相同的参考画面的多个分区模式合并候选时，可基于合并候选的索引与索引信息之间的差值或合并候选是否包括双向运动信息中的至少一个来选择多个分区模式合并候选中的任何一个。
在另一示例中，可针对第一预测单元和第二预测单元中的每一个用信号传送索引信息。在示例中，可在比特流中用信号传送用于确定第一预测单元的分区模式合并候选的第一索引信息1st_merge_idx和用于确定第二预测单元的分区模式合并候选的第二索引信息2nd_merge_idx。可从基于第一索引信息1st_merge_idx确定的分区模式合并候选推导第一预测单元的运动信息，并且可从基于第二索引信息2nd_merge_idx确定的分区模式合并候选推导第二预测单元的运动信息。
第一索引信息1st_merge_idx可表示包括在分区模式合并候选列表中的分区模式合并候选中的一个的索引。第一预测单元的分区模式合并候选可以被确定为由第一索引信息1st_merge_idx指示的分区模式合并候选。
由第一索引信息1st_merge_idx指示的分区模式合并候选可被设置为不可用作第二预测单元的分区模式合并候选。因此，第二预测单元的第二索引信息2nd_merge_idx可表示除由第一索引信息指示的分区模式合并候选以外的其余分区模式合并候选中的任何一个的索引。当第二索引信息2nd_merge_idx的值小于第一索引信息1st_merge_idx的值时，第二预测单元的分区模式合并候选可被确定为具有由第二索引信息2nd_merge_idx表示的索引信息的分区模式合并候选。另一方面，当第二索引信息2nd_merge_idx的值等于或大于第一索引信息1st_merge_idx的值时，第二预测单元的分区模式合并候选可被确定为具有通过将第二索引信息2nd_merge_idx的值加1而获得的值作为索引的分区模式合并候选。
可选地，根据包括在分区模式合并候选列表中的分区模式合并候选的数量，可确定是否用信号传送第二索引信息。在示例中，当可包括在分区模式合并候选列表中的分区模式合并候选的最大数量不超过2时，可省略第二索引信息的信号传送。当省略第二索引信息的信号传送时，可通过将偏移与第一索引信息相加或从第一索引信息减去偏移来推导第二分区模式合并候选。在示例中，当可包括在分区模式合并候选列表中的分区模式合并候选的最大数量为2并且第一索引信息指示索引0时，可通过将1与第一索引信息相加来推导第二分区模式合并候选。可选地，当可包括在分区模式合并候选列表中的分区模式合并候选的最大数量为2并且第一索引信息指示1时，可通过从第一索引信息减去1来推导第二分区模式合并候选。
可选地，当省略第二索引信息的信号传送时，可将第二索引信息推断为默认值。在这种情况下，默认值可以是0。可通过对第一索引信息与第二索引信息进行比较来推导第二分区模式合并候选。在示例中，当第二索引信息小于第一索引信息时，可将索引为0的合并候选设置为第二分区模式合并候选，并且当第二索引信息与第一索引信息相同或大于第一索引信息时，可将索引为1的合并候选设置为第二分区模式合并候选。
当分区模式合并候选具有单向运动信息时，可将分区模式合并候选的单向运动信息设置为预测单元的运动信息。另一方面，当分区模式合并候选具有双向运动信息时，可仅将L0运动信息或L1运动信息中的一个设置为预测单元的运动信息。可基于分区模式合并候选的索引或另一预测单元的运动信息来确定将采用L0运动信息或L1运动信息中的哪一个。
在示例中，当分区模式合并候选的索引为偶数时，可将预测单元的L0运动信息设置为0，并且可将分区模式合并候选的L1运动信息设置为预测单元的L1运动信息。另一方面，当分区模式合并候选的索引为奇数时，可将预测单元的L1运动信息设置为0，并且可将分区模式合并候选的L0运动信息设置为0。相反，当分区模式合并候选的索引为偶数时，可将分区模式合并候选的L0运动信息设置为预测单元的L0运动信息，并且当分区模式合并候选的索引为奇数时，可将分区模式合并候选的L1运动信息被设置为预测单元的L1运动信息。可选地，针对于第一预测单元，当针对第一预测单元的分区模式合并候选是偶数时，可将分区模式合并候选的L0运动信息设置为第一预测单元的L0运动信息，但针对第二预测单元，当针对第二预测单元的分区模式合并候选是奇数时，可将分区模式合并候选的L1运动信息设置为第二预测单元的L1运动信息。
可选地，当第一预测单元具有L0运动信息时，可将第二预测单元的L0运动信息设置为0，并且可将分区模式合并候选的L1运动信息设置为第二预测单元的L1运动信息。另一方面，当第一预测单元具有L1运动信息时，可将第二预测单元的L1运动信息设置为0，并且可将分区模式合并候选的L0运动信息设置为第二预测单元的L0运动信息。
可将用于推导第一预测单元的运动信息的分区模式合并候选列表设置为不同于用于推导第二预测单元的运动信息的分区模式合并候选列表。
在示例中，当基于针对第一预测单元的索引信息指定分区模式合并候选列表中的用于推导第一预测单元的运动信息的分区模式合并候选时，可通过使用包括除由索引信息指示的分区模式合并候选之外的其余分区模式合并候选的分区模式合并列表来推导第二预测单元的运动信息。具体地，可从其余分区模式合并候选中的一个推导第二预测单元的运动信息。
因此，包括在第一预测单元的分区模式合并候选列表中的分区模式合并候选的最大数量可不同于包括在第二预测单元的分区模式合并候选列表中的分区模式合并候选的最大数量。在示例中，当第一预测单元的分区模式合并候选列表包括M个合并候选时，第二预测单元的分区模式合并候选列表可包括除由第一预测单元的索引信息指示的分区模式合并候选以外的M-1个合并候选。
在另一示例中，可通过除考虑预测单元的形状或位置之外还基于与编码块相邻的邻近块推导每一个预测单元的合并候选来确定邻近块的可用性。
图28是用于解释针对每个预测单元确定邻近块的可用性的示例的示图。
不与第一预测单元相邻的邻近块可被设置为不可用于第一预测单元，并且不与第二预测单元相邻的邻近块可被设置为不可用于第二预测单元。
在示例中，如在图28的(a)所示出的示例中，当左侧三角形分区类型被应用于编码块时，与编码块相邻的邻近块中的与第一预测单元相邻的块A1、A0和A2可被确定为可用于第一预测单元，但块B0和B1可被确定为不可用于第一预测单元。因此，第一预测单元的分区模式合并候选列表可包括从块A1、A0和A2推导出的分区模式合并候选，但它可以不包括从块B0和B1推导出的分区模式合并候选。
如在图28的(b)所示出的示例中，当左侧三角形分区类型被应用于编码块时，与第二预测单元相邻的块B0和B1可被确定为可用于第二预测单元，但块A1、A0和A2可被确定为不可用于第二预测单元。因此，第二预测单元的分区模式合并候选列表可包括从块B0和B1推导出的分区模式合并候选，但其可以不包括从块A1、A0和A2推导出的分区模式合并候选。
因此，可基于预测单元的位置或编码块的分区类型中的至少一个来确定可由预测单元使用的分区模式合并候选的数量或分区模式合并候选的范围。
在另一示例中，合并模式可仅被应用于第一预测单元和第二预测单元中的一个。并且，第一预测单元和第二预测单元中的另一个的运动信息可被设置为与应用合并模式的预测单元的运动信息相同，或者可通过对应用合并模式的预测单元的运动信息进行细化被推导出。
在示例中，可基于分区模式合并候选推导第一预测单元的运动矢量和参考画面索引，并且可通过对第一预测单元的运动矢量进行细化来推导第二预测单元的运动矢量。在示例中，可通过将细化运动矢量{Rx,Ry}与第一预测单元的运动矢量{mvD1LXx,mvD1LXy}相加或从第一预测单元的运动矢量{mvD1LXx,mvD1LXy}减去细化运动矢量{Rx,Ry}来推导第二预测单元的运动矢量。可将第二预测单元的参考画面索引设置为与第一预测单元的参考画面索引相同。
可在比特流中用信号传送用于确定表示第一预测单元的运动矢量与第二预测单元的运动矢量之间的差的细化运动矢量的信息。所述信息可包括表示细化运动矢量的大小的信息或表示细化运动矢量的正负号的信息中的至少一个。
可选地，可基于被应用于编码块的分区类型或预测单元的位置或索引中的至少一个来推导细化运动矢量的正负号。
在另一示例中，可用信号传送第一预测单元和第二预测单元中的一个的运动矢量和参考画面索引。可通过对用信号传送的运动矢量进行细化来推导第一预测单元和第二预测单元中的另一个的运动矢量。
在示例中，基于在比特流中用信号传送的信息，可确定第一预测单元的运动矢量和参考画面索引。并且，可通过对第一预测单元的运动矢量进行细化来推导第二预测单元的运动矢量。在示例中，可通过将细化运动矢量{Rx,Ry}与第一预测单元的运动矢量{mvD1LXx,mvD1LXy}相加或从第一预测单元的运动矢量{mvD1LXx,mvD1LXy}减去细化运动矢量{Rx,Ry}来推导第二预测单元的运动矢量。可将第二预测单元的参考画面索引设置为与第一预测单元的参考画面索引相同。
在另一示例中，合并模式可仅被应用于第一预测单元和第二预测单元中的一个。并且，可基于被应用合并模式的预测单元的运动信息推导第一预测单元和第二预测单元中的另一个的运动信息。在示例中，可将第一预测单元的运动矢量的对称运动矢量设置为第二预测单元的运动矢量。在此情况下，对称运动矢量可表示具有与第一预测单元的运动矢量相同的量值但具有x轴或y轴分量的至少一个相反正负号的运动矢量，或具有与通过缩放第一预测单元的运动矢量获得的缩放矢量相同的量值但具有x轴或y轴分量的至少一个相反正负号的运动矢量。在示例中，当第一预测单元的运动矢量为(MVx,MVy)时，第二预测单元的运动矢量可被设置为作为运动矢量的对称运动矢量的(MVx,-MVy)、(-MVx,MVy)或(-MVx,-MVy)。
可将第一预测单元和第二预测单元中的未应用合并模式的预测单元的参考画面索引设置为与应用合并模式的预测单元的参考画面索引相同。可选地，可将未应用合并模式的预测单元的参考画面索引设置为预定义值。在这种情况下，预定义值可以是参考画面列表中的最小索引或最大索引。可选地，可以在比特流中用信号传送指定未应用合并模式的预测单元的参考画面索引的信息。可选地，可从与应用合并模式的预测单元的参考画面所属的参考画面列表不同的参考画面列表中选择未应用合并模式的预测单元的参考画面。在示例中，当从L0参考画面列表中选择应用合并模式的预测单元的参考画面时，可从L1参考画面列表中选择未应用合并模式的预测单元的参考画面。在这种情况下，可基于应用合并模式的预测单元的参考画面与当前画面之间的画面顺序计数(POC)差来推导未应用合并模式的预测单元的参考画面。在示例中，当从L0参考画面列表中选择应用合并模式的预测单元的参考画面时，可选择L1参考画面列表中的与当前画面的差值和应用合并模式的预测单元的参考画面与当前画面之间的差值相同或相似的参考画面作为未应用合并模式的预测单元的参考画面。
当第一预测单元的参考画面和当前画面之间的画面顺序计数差值不同于第二预测单元的参考画面和当前画面之间的画面顺序计数差值时，可将应用合并模式的预测单元的缩放运动矢量的对称运动矢量设置为未应用合并模式的预测单元的运动矢量。在这种情况下，可基于每一个参考画面与当前画面之间的画面顺序计数差值来执行缩放。
在另一示例中，在推导出第一预测单元和第二预测单元中的每一个的运动矢量之后，可将细化矢量与推导出的运动矢量相加或者从推导出的运动矢量减去细化矢量。在示例中，可通过将第一细化矢量与基于第一合并候选推导出的第一运动矢量相加或从基于第一合并候选推导出的第一运动矢量减去第一细化矢量来推导第一预测单元的运动矢量，并且可通过将第二细化矢量与基于第二合并候选推导出的第二运动矢量相加或从基于第二合并候选推导出的第二运动矢量减去第二细化矢量来推导第二预测单元的运动矢量。可在比特流中用信号传送用于确定第一细化矢量或第二细化矢量中的至少一个的信息。所述信息可包括用于确定细化矢量的量值的信息或用于确定细化矢量的正负号的信息中的至少一个。
第二细化矢量可以是第一细化矢量的对称运动矢量。在此状况下，可仅针对第一细化矢量和第二细化矢量中的一个用信号传送用于确定细化矢量的信息。在示例中，当通过在比特流中用信号传送的信息将第一细化矢量确定为(MVDx,MVDy)时，可将作为第一细化矢量的对称运动矢量的(-MVDx,MVDy)、(MVDx,-MVDy)或(-MVDx,-MVDy)设置为第二细化矢量。根据每个预测单元的参考画面的画面顺序计数，可将通过对第一细化矢量进行缩放而获得的缩放运动矢量的对称运动矢量设置为第二细化矢量。
在另一示例中，可基于合并候选推导第一预测单元和第二预测单元中的一个的信息，并且可基于在比特流中用信号传送的信息确定另一个的运动信息。在示例中，可针对第一预测单元用信号传送合并索引，并且可针对第二预测单元用信号传送用于确定运动矢量的信息和用于确定参考画面的信息中的至少一个。可将第一预测单元的运动信息设置为与由合并索引指定的合并候选的运动信息相同。可由在比特流中用信号传送的用于确定运动矢量的信息和用于确定参考画面的信息中的至少一个指定第二预测单元的运动信息。
可基于第一预测单元的运动信息和第二预测单元的运动信息来执行每一个编码块的运动预测补偿预测。在这种情况下，可在第一预测单元和第二预测单元的边界上产生质量劣化。在示例中，质量连续性可能在第一预测单元和第二预测单元的边界上的边缘周围劣化。为了减少边界上的质量劣化，可通过平滑滤波器或加权预测来推导预测样点。
可基于在第一预测单元的运动信息的基础上获得的第一预测样点和在第二预测单元的运动信息的基础上获得的第二预测样点的加权和运算来推导对其应用对角线分区的编码块中的预测样点。可选地，可从基于第一预测单元的运动信息确定的第一预测块推导出第一预测单元的预测样点，并且可从基于第二预测单元的运动信息确定的第二预测块推导出第二预测单元的预测样点，但可基于包括在第一预测块中的第一预测样点和包括在第二预测块中的第二预测样点的加权和运算来推导第一预测单元和第二预测单元的边界区域上的预测样点。在示例中，以下等式3表示推导第一预测单元和第二预测单元的预测样点的示例。
[等式3]
P(x，y)＝w1*P1(x，y)+(1-w1)*P2(x，y)
在等式3中，P1表示第一预测样点，并且P2表示第二预测样点。w1表示施加于第一预测样点的权重，并且(1-w1)表示施加于第二预测样点的权重。如在等式3中所示出的示例中，可通过从常数值减去施加于第一预测样点的权重来推导施加于第二预测样点的权重。
当左侧三角形分区类型被应用于编码块时，边界区域可包括具有相同x轴坐标和y轴坐标的预测样点。另一方面，当右侧三角形分区类型被应用于编码块时，边界区域可包括x轴坐标和y轴坐标的总和等于或大于第一阈值且等于或小于第二阈值的预测样点。
可基于编码块的尺寸、编码块的形状、预测单元的运动信息、预测单元的运动矢量差值、参考画面的画面顺序计数或对角线边界上的第一预测样点与第二预测样点之间的差值中的至少一个来确定边界区域的尺寸。
图29和图30是示出基于第一预测样点和第二预测样点的加权和运算推导预测样点的示例的示图。图29示出将左侧三角形分区类型应用于编码块的情况，图30示出将右侧三角形分区类型应用于编码块的情况。另外，图29的(a)和图30的(a)是表示亮度分量的预测方面的示图，并且图29的(b)和图30的(b)是表示色度分量的预测方面的示图。
在所示出的示图中，在第一预测单元和第二预测单元的边界周围的预测样点上标记的数字表示施加于第一预测样点的权重。在示例中，当在预测样点上标记的数字为N时，可通过将N/8的权重施加于第一预测样点并且将(1-(N/8))的权重施加于第二预测样点来推导预测样点。
在非边界区域中，可将第一预测样点或第二预测样点确定为预测样点。参见图29中的示例，可将基于第一预测单元的运动信息推导出的第一预测样点确定为属于第一预测单元的区域中的预测样点。另一方面，可将基于第二预测单元的运动信息推导出的第二预测样点确定为属于第二预测单元的区域中的预测样点。
参见图30中的示例，可将基于第一预测单元的运动信息推导出的第一预测样点确定为x轴坐标与y轴坐标的总和小于第一阈值的区域中的预测样点。另一方面，可将基于第二预测单元的运动信息推导出的第二预测样点确定为x轴坐标与y轴坐标的总和大于第二阈值的区域中的预测样点。
可基于编码块的尺寸、编码块的形状或颜色分量中的至少一个来确定用于确定非边界区域的阈值。在示例中，当用于亮度分量的阈值被设置为N时，可将用于色度分量的阈值设置为N/2。
可基于第一预测样点和第二预测样点的加权和运算推导包括在边界区域中的预测样点。在这种情况下，可基于预测样点的位置、编码块的尺寸、编码块的形状或颜色分量中的至少一个来确定施加于第一预测样点和第二预测样点的权重。
在示例中，如在图29的(a)中所示出的示例中，可通过将相同权重施加于第一预测样点和第二预测样点来推导具有相同x轴坐标和y轴坐标的预测样点。可通过将施加于第一预测样点和第二预测样点的权重比设置为(3:1)或(1:3)来推导x轴坐标与y轴坐标之间的差的绝对值为1的预测样点。另外，可通过将施加于第一预测样点和第二预测样点的权重比设置为(7:1)或(1:7)来推导x轴坐标与y轴坐标之间的差的绝对值为2的预测样点。
可选地，如在图29的(b)中所示出的示例中，可通过将相同权重施加于第一预测样点及第二预测样点来推导具有相同x轴坐标和y轴坐标的预测样点，并且可通过将施加于第一预测样点和第二预测样点的权重比设置为(7:1)或(1:7)来推导x轴坐标与y轴坐标之间的差的绝对值为1的预测样点。
在示例中，如在图30的(a)所示出的示例中，可通过将样点权重施加于第一预测样点和第二预测样点来推导x轴坐标与y轴坐标的总和比编码块的宽度或高度小1的预测样点。可通过将施加于第一预测样点和第二预测样点的权重比设置为(3:1)或(1:3)来推导x轴坐标与y轴坐标的总和与编码块的宽度或高度相同或者比编码块的宽度或高度小2的预测样点。可通过将施加于第一预测样点和第二预测样点的权重比设置为(7:1)或(1:7)来推导x轴坐标与y轴坐标的总和比编码块的宽度或高度大1或者比编码块的宽度或高度小3的预测样点。
可选地，如在图30的(b)所示出的示例中，可通过将样点权重施加于第一预测样点和第二预测样点来推导x轴坐标与y轴坐标的总和比编码块的宽度或高度小1的预测样点。可通过将施加于第一预测样点和第二预测样点的权重比设置为(7:1)或(1:7)来推导x轴坐标与y轴坐标的总和与编码块的宽度或高度相同或者比编码块的宽度或高度小2的预测样点。
在另一示例中，可通过考虑预测样点的位置或编码块的形状来确定权重。等式4至等式6表示在左侧三角形分区类型被应用于编码块时推导权重的示例。等式4表示当编码块为正方形时推导施加于第一预测样点的权重的示例。
[等式4]
w1＝(x-y+4)/8
在等式4中，x和y表示预测样点的位置。当编码块为非正方形时，可如在以下等式5或等式6中那样推导施加于第一预测样点的权重。等式5表示编码块的宽度大于高度的情况，等式6表示编码块的宽度小于高度的情况。
[等式5]
w1＝((x/whRatio)-y+4)/8
[等式6]
w1＝(x-(y*whRatio)+4)/8
当右侧三角形分区类型被应用于编码块时，可如等式7至等式9中那样确定施加于第一预测样点的权重。等式7表示当编码块为正方形时推导施加于第一预测样点的权重的示例。
[等式7]
w1＝(CbW-1-x-y)+4)/8
在等式7中，CbW表示编码块的宽度。当编码块为非正方形时，可如在以下等式8或等式9中那样推导施加于第一预测样点的权重。等式8表示编码块的宽度大于高度的情况，等式9表示编码块的宽度小于高度的情况。
[等式8]
w1＝(CbH-1-(x/whRatio)-y)+4)/8
[等式9]
w1＝(CbW-1-x-(y*whRatio)+4)/8
在等式8中，CbH表示编码块的高度。
如在所示出的示例中，可通过向第一预测样点给定比第二预测样点更大的权重来推导边界区域中的预测样点中的包括在第一预测单元中的预测样点，并且可通过向第二预测样点给定比第一预测样点更大的权重来推导边界区域中的预测样点中的包括在第二预测单元中的预测样点。
当对角线分区被应用于编码块时，可将帧内预测模式和合并模式组合的组合预测模式设置为不被应用于编码块。
当完成编码块的编码/解码时，完成编码/解码的编码块的运动信息可被存储以用于后续编码块的编码/解码。运动信息可以以具有预设尺寸的子块为单位被存储。在示例中，具有预设尺寸的子块可具有4×4尺寸。可选地，根据编码块的尺寸或形状，可不同地确定子块的尺寸或形状。
当子块属于第一预测单元时，第一预测单元的运动信息可被存储为子块的运动信息。另一方面，当子块属于第二预测单元时，第二预测单元的运动信息可被存储为子块的运动信息。
当子块在第一预测单元和第二预测单元的边界上时，第一预测单元的运动信息和第二预测单元的运动信息中的任何一个可被设置为子块的运动信息。在示例中，可将第一预测单元的运动信息设置为子块的运动信息，或可将第二预测单元的运动信息设置为子块的运动信息。
在另一示例中，当子块在第一预测单元与第二预测单元的边界上时，可从第一预测单元推导子块的L0运动信息和L1运动信息中的任何一个，并且可从第二预测单元推导子块的L0运动信息和L1运动信息中的另一个。在示例中，可将第一预测单元的L0运动信息设置为子块的L0运动信息，并且可将第二预测单元的L1运动信息设置为子块的L1运动信息。但是，当第一预测单元和第二预测单元仅具有L0运动信息或仅具有L1运动信息时，可通过选择第一预测单元或第二预测单元中的任何一个来确定子块的运动信息。可选地，可将第一预测单元和第二预测单元的运动矢量平均值设置为子块的运动矢量。
可在运动信息表中更新完成编码/解码的编码块的运动信息。在这种情况下，可将应用预测单元分区的编码块的运动信息设置为不被添加到运动信息表。
可选地，可仅将通过对编码块进行分区而产生的多个预测单元中的任何一个的运动信息添加到运动信息表。在示例中，当可将第一预测单元的运动信息添加到运动信息表时，可以不将第二预测单元的运动信息添加到运动信息表。在这种情况下，可基于编码块的尺寸、编码块的形状、预测单元的尺寸、预测单元的形状或是否针对预测单元执行双向预测中的至少一个来选择将被添加到运动信息表的预测单元。
可选地，可将通过对编码块进行分区而产生的多个预测单元中的每一个的运动信息添加到运动信息表。在此情况下，可在编码装置和解码装置中预定义运动信息表的添加顺序。在示例中，包括左上样点或左下角样点的预测单元的运动信息可在另一预测单元的运动信息之前被添加到运动信息表。可选地，可基于每一个预测单元的合并索引或参考画面索引或者运动矢量的量值中的至少一个来确定针对运动信息表的相加顺序。
可选地，可将组合第一预测单元的运动信息与第二预测单元的运动信息的运动信息添加到运动信息表。可从第一预测单元推导组合运动信息的L0运动信息和L1运动信息中的任何一个，并且可从第二预测单元推导L0运动信息和L1运动信息中的另一个。
可选地，基于第一预测单元的参考画面是否与第二预测单元的参考画面相同，可确定将被添加到运动信息表的运动信息。在示例中，当第一预测单元的参考画面不同于第二预测单元的参考画面时，可将第一预测单元和第二预测单元中的任何一个的运动信息或组合第一预测单元和第二预测单元的运动信息添加到运动信息表。另一方面，当第一预测单元的参考画面与第二预测单元的参考画面相同时，可将第一预测单元的运动矢量和第二预测单元的运动矢量的平均值添加到运动信息表。
可选地，基于编码块的尺寸、编码块的形状或编码块的分区形状，可确定将被添加到运动信息表的运动矢量。在示例中，当右侧三角形分区被应用于编码块时，可将第一预测单元的运动信息添加到运动信息表。另一方面，当左三角分区被应用于编码块时，可将第二预测单元的运动信息添加到运动信息表，或者可将组合第一预测单元的运动信息和第二预测单元的运动信息的运动信息添加到运动信息表。
可单独定义用于存储应用预测单元分区的编码块的运动信息的运动信息表。在示例中，应用预测单元分区的编码块的运动信息可被存储在分区模式运动信息表中。分区模式运动信息表可被称为三角形运动信息表。换句话说，未应用预测单元分区的编码块的运动信息可被存储在一般运动信息表中，并且应用预测单元分区的编码块的运动信息可被存储在分区模式运动信息表中。将应用了上述预测单元分区的编码块的运动信息添加到运动信息表的实施例可被应用于更新分区模式运动信息表。在示例中，可将第一预测单元的运动信息、第二预测单元的运动信息、组合第一预测单元的运动信息和第二预测单元的运动信息的运动信息以及对第一预测单元的运动矢量和第二预测单元的运动矢量求平均的运动信息添加到分区模式运动信息表。
当预测模式分区不被应用于编码块时，可通过使用一般运动信息表推导合并候选。另一方面，当预测模式分区被应用于编码块时，可通过使用分区模式运动信息表推导合并候选。
帧内预测是用于通过使用已经被编码/解码并且在当前块周围的重建样点来对当前块执行预测的方法。在这方面，在应用环路内滤波器之前的重建样点可被用于当前块的帧内预测。
帧内预测方法包括基于矩阵的帧内预测和根据具有邻近重建样点的方向的帧内预测。可在比特流中用信号传送指示当前块的帧内预测方法的信息。该信息可以是1比特标志。可选地，可基于当前块的位置、当前块的尺寸、当前块的形状或邻近块的帧内预测方法中的至少一个来确定当前块的帧内预测。在一个示例中，当存在跨越画面边界的当前块时，可设置使得基于矩阵的帧内预测方法不被应用于当前块。
基于矩阵的帧内预测方法是基于存储在编码器和解码器中的矩阵与当前块周围的重建样点的矩阵乘积来获得当前块的预测块的方法。可在比特流中用信号传送用于指定多个预存储矩阵中的任何一个的信息。解码器可基于上述信息和当前块的尺寸来确定用于对当前块执行帧内预测的矩阵。
可在比特流中用信号传送表示是否将基于矩阵的帧内预测应用于当前块的信息。在示例中，可在比特流中用信号传送标志intra_mip_flag。当语法intra_mip_flag为1时，其表示应用基于矩阵的帧内预测。当语法intra_mip_flag为0时，其表示不应用基于矩阵的帧内预测。
图31至图34是示出根据当前块的尺寸的基于矩阵的帧内预测的实现方面的示图。
如在图31至图34所示出的示例中，可通过对与当前块相邻的参考样点进行子采样或者针对每个预设数量的参考样点执行平均运算来推导边界平滑样点。在示例中，可通过针对当前块的顶部参考样点进行子采样或者针对预设数量的顶部参考样点执行平均运算来推导N个顶部边界平滑样点。另外，可通过针对当前块的左侧参考样点进行子采样或对预设数量的左侧参考样点执行平均运算来推导M个左侧边界平滑样点。
根据当前块的尺寸或形状，可不同地设置用于执行平均运算的参考样点的数量或采样率。在这种情况下，当前块的尺寸可表示样点的宽度、高度或数量中的至少一个。在示例中，在当前块的宽度或高度为4时，可将两个参考样点中的一个设置为边界平滑样点，或者可将两个参考样点的平均值设置为边界平滑样点。可选地，在当前块的宽度或高度为16时，可将四个参考样点中的一个设置为边界平滑样点，或者可将四个参考样点的平均值设置为边界平滑样点。
可选地，可基于当前块的宽度来确定顶部参考样点的采样率或在顶部参考样点的平均运算中使用的参考样点的数量，并且可基于当前块的高度来确定左侧参考样点的采样率或在左侧参考样点的平均运算中使用的参考样点的数量。
根据当前块的尺寸，可省略子采样。在一个示例中，在当前块具有4×8尺寸时，可对省略针对顶部参考样点的子采样。可选地，在当前块具有8×4尺寸时，可省略针对左侧参考样点的子采样。当省略子采样时，可将参考样点设置为边界平滑参考样点。
可通过将顶部边界平滑参考样点和左侧边界平滑参考样点排列成行来产生边界平滑参考样点阵列。在这种情况下，可在比特流中用信号传送表示边界平滑参考样点的阵列顺序的信息。在示例中，可在比特流中用信号传送表示边界平滑参考样点的阵列顺序的标志is_transposed_flag。当语法is_transposed_flag为真时，左侧边界平滑参考样点可被排列在顶部边界平滑参考样点之前。当语法is_transposed_flag为假时，顶部边界平滑参考样点可被排列在左侧边界平滑参考样点之前。
可通过使用矩阵和边界平滑参考样点阵列来获得当前块的子采样预测样点。在示例中，等式10示出获得子采样预测样点的示例。
[等式10]
在等式10中，predMip[x][y]表示子采样的预测样点。Bdry[j]表示边界平滑参考样点阵列的第j个分量。mWeight[iMode][j][y*predSize+x]表示由当前块的帧内预测模式iMode指定的矩阵中的第j行第(y*predSize+x)列分量。Offset表示偏移。根据当前块的帧内预测模式，可不同地设置偏移。
可基于当前块的尺寸来确定变量predSize。在示例中，predSize可表示当前块的宽度与高度中的最小值。当宽度与高度中的最小值大于8时，可将predSize设置为8。
可通过输入基于与初始边界平滑参考样点的差值推导出的边界平滑参考样点差值阵列代替边界平滑参考样点阵列来推导子采样的预测样点。在示例中，等式11表示通过使用边界平滑参考样点差阵列DBdry[j]推导子采样的预测样点的示例。
[等式11]
边界平滑参考样点差阵列的第j个分量DBdry[j]可表示初始边界平滑参考样点与第j个边界平滑参考样点之间的差或者初始边界平滑参考样点与第j+1个边界平滑参考样点之间的差。初始边界平滑参考样点可以表示边界平滑参考样点阵列的第0个边界平滑参考样点。
可通过对子采样的预测样点进行上采样来获得当前块的预测样点。在这种情况下，可按照水平方向和垂直方向的顺序执行上采样。可选地，可按照垂直方向和水平方向的顺序执行上采样。
可选地，可通过使用子采样的预测样点的线性插值来获得当前块的预测样点。在此情况下，内插滤波器的系数、抽头大小或强度中的至少一个可根据当前块的尺寸或形状或预测样点的位置而不同。
用于帧内预测的矩阵可被预先存储在编码装置和解码装置中。在这种情况下，可根据当前块的尺寸可变地确定可由当前块使用的矩阵的数量。在示例中，在当前块的尺寸为4×4时，可由当前块使用的矩阵的数量可以是15。在当前块的尺寸为4×8或8×4时，可由当前块使用的矩阵的数量可以是7。在当前块的尺寸为8×8或更大时，可由当前块使用的矩阵的数量可以是5。
可选地，可基于当前块的帧内预测模式来确定当前块的矩阵。可基于与当前块相邻的邻近块的帧内预测模式或在比特流中用信号传送的信息中的至少一个来确定当前块的帧内预测模式。
表示帧内预测模式和矩阵之间的相应关系的查找表可被预先存储在编码装置和解码装置中。在示例中，可将四个连续的帧内预测模式映射到一个矩阵。在示例中，在当前块的帧内预测模式为0到3时，可将第一矩阵MWeight[0]应用于当前块，并且在当前块的帧内预测模式为4到7时，可将第二矩阵MWeight[1]应用于当前块。
在基于当前块的MPM候选推导出当前块的帧内预测模式之后，可确定与从查找表推导出的帧内预测模式相应的矩阵。
可选地，可在比特流中用信号传送表示当前块的帧内预测模式的信息。该信息可以是用于标识可由当前块使用的矩阵中的任何一个的索引信息。在示例中，可在比特流中用信号传送索引intra_mip_mode。
语法intra_mip_mode的最大比特数可根据当前块的尺寸而不同。在示例中，在当前块的尺寸是4×4时，语法intra_mip_mode的最大比特长度可以是15。在当前块的尺寸是4×8或8×4时，语法intra_mip_mode的最大比特长度可以是7。在当前块的尺寸是8×8或更大时，语法intra_mip_mode的最大比特长度可以是5。
一般帧内预测是一种基于非方向帧内预测模式或方向帧内预测模式获得当前块的预测块的方法。在下文中，将参照附图描述基于一般帧内预测的帧内预测的处理。
图35是示出根据本公开的实施例的帧内预测方法的流程图的示图。
可确定当前块的参考样点线S3501。参考样点线是指包括在与当前块的顶部和/或左侧间隔开的第k行中的一组参考样点。可从已经被编码/解码的当前块周围的重建样点推导参考样点。
可在比特流中用信号传送标识多个参考样点线中的用于当前块的参考样点线的索引信息。在示例中，可在比特流中用信号传送用于指定用于当前块的参考样点线的索引信息intra_luma_ref_idx。可在编码块基础上用信号传送该索引信息。
多个参考样点线可包括从当前块的顶部和/或左侧开始的第一线、第二线或第三线中的至少一个。由所述多个参考样点线中的与当前块的顶部相邻的行和与当前块的左侧相邻的列组成的参考样点线可被称为相邻参考样点线，其余的参考样点线可被称为非相邻参考样点线。
表格3示出被分配给每个候选参考样点线的索引。
[表格3]
| 索引(intra_luma_ref_idx) | 参考样点线 |
| 0 | 相邻参考样点线 |
| 1 | 第一非相邻参考样点线 |
| 2 | 第二非相邻参考样点线 |
基于当前块的位置、尺寸、形状或其邻近块的预测编码模式中的至少一个，可确定当前块的参考样点线。在一个示例中，在当前块邻接画面、并行块、条带或编码树单元的边界时，可将相邻参考样点线确定为用于当前块的参考样点线。参考样点线可包括位于当前块顶部处的顶部参考样点和位于当前块左侧处的左侧参考样点。可从在当前块周围的重建样点推导顶部参考样点和左侧参考样点。重建样点可处于被应用环路内滤波器之前的状态。
接下来，可确定用于当前块的帧内预测模式S3502。在这方面，可将非方向帧内预测模式或方向帧内预测模式中的至少一个确定为当前块的帧内预测模式。非方向帧内预测模式包括平面(Planar)模式和DC模式。方向帧内预测模式包括从左下对角线方向到右上对角线方向的33或65个模式。
图36是示出帧内预测模式的示图。
图36的(a)示出35个帧内预测模式。图36的(b)示出67个帧内预测模式。
可定义比图36所示出的帧内预测模式的数量更多或更少个数量的帧内预测模式。
基于与当前块相邻的邻近块的帧内预测模式，可设置MPM(最可能模式)。在这方面，邻近块可包括与当前块的左侧相邻的左侧邻近块和与当前块的顶部相邻的顶部邻近块。
可在编码装置和解码装置中预先设置包括在MPM列表中的MPM的数量。在示例中，MPM的数量可以是3、4、5或6。可选地，可在比特流中用信号传送表示MPM的数量的信息。可选地，可基于邻近块的预测编码模式、当前块的尺寸、形状或参考样点线索引中的至少一个来确定MPM的数量。在示例中，虽然当相邻参考样点线被确定为当前块的参考样点线时可使用N个MPM，但是当非相邻参考样点线被确定为当前块的参考样点线时可使用M个MPM。由于M是小于N的自然数，因此在示例中，N可以是6并且M可以是5、4或3。因此，虽然在当前块的参考样点线的索引为0并且MPM标志为真时，当前块的帧内预测模式可被确定为6个候选帧内预测模式中的任何一个，但是在当前块的参考样点线的索引大于0并且MPM标志为真时，当前块的帧内预测模式可被确定为5个候选帧内预测模式中的任何一个。
可选地，可使用固定数量(例如，6或5个)的MPM候选，而不管当前块的参考样点线的索引如何。
当基于矩阵的帧内预测被应用于邻近块时，可将邻近块的帧内预测模式视为平面(Planar)并且可推导MPM候选。
当帧内BDPCM被应用于邻近块时，可将邻近块的帧内预测模式视为默认模式并且可推导MPM候选。在这种情况下，默认模式可以是DC、平面、垂直方向或水平方向中的至少一个。
可选地，基于邻近块的帧内BDPCM应用方向，可确定邻近块的帧内预测模式。在示例中，当水平方向上的帧内BDPCM被应用于邻近块时，可将邻近块的帧内预测模式视为具有水平方向。另一方面，当垂直方向上的帧内BDPCM被应用于邻近块时，可将邻近块的帧内预测模式视为具有垂直方向。
可产生包括多个MPM的MPM列表，并且可在比特流中用信号传送表示与当前块的帧内预测模式相同的MPM是否被包括在MPM列表中的信息。由于所述信息是1比特标志，因此其可被称为MPM标志。当MPM标志表示与当前块相同的MPM被包括在MPM列表中时，可在比特流中用信号传送用于识别MPM中的一个的索引信息。在示例中，可在比特流中用信号传送指定多个MPM中的任何一个的索引信息mpm_idx。由索引信息指定的MPM可被设置为当前块的帧内预测模式。当MPM标志表示与当前块相同的MPM不被包括在MPM列表中时，可在比特流中用信号传送指示除MPM以外的其余帧内预测模式中的任何一个的其余模式信息。其余模式信息指示与重新分配索引的不包括MPM的其余帧内预测模式中的当前块的帧内预测模式相应的索引值。解码装置按照升序排列MPM，并通过将其余模式信息与MPM进行比较来确定当前块的帧内预测模式。在示例中，当其余模式信息与MPM相同或小于MPM时，可通过将残差模式信息加1来推导当前块的帧内预测模式。
在当前块的帧内预测模式被推导出时，可省略MPM的一部分与其余模式信息之间的比较。在示例中，可从比较目标排除MPM中的作为非方向帧内预测模式的MPM。当非方向帧内预测模式被设置为MPM时，显然其余模式信息指示方向帧内预测模式，因此可通过将不包括非方向帧内预测模式的其余MPM与残差模式信息进行比较来推导当前块的帧内预测模式。不是从比较目标中排除非方向帧内预测模式，而是可将非方向帧内预测模式的数量与其余模式信息相加以将以上结果值与其余MPM进行比较。
可在比特流中用信号传送表示当前块的帧内预测模式是否为默认模式的信息来代替将默认模式设置为MPM。所述信息可以是1比特标志，并且所述标志可被称为默认模式标志。可仅在MPM标志表示与当前块相同的MPM被包括在MPM列表中时用信号传送默认模式标志。如上所述，默认模式可包括平面、DC、垂直方向模式或水平方向模式中的至少一个。在示例中，当平面被设置为默认模式时，默认模式标志可指示当前块的帧内预测模式是否是平面。当默认模式标志指示当前块的帧内预测模式不是默认模式时，由索引信息指示的MPM中的一个可被设置为当前块的帧内预测模式。
当使用默认模式标志时，可将与默认模式相同的帧内预测模式设置为不被设置为MPM。在示例中，当默认模式标志指示当前块的帧内预测模式是否为平面时，可通过使用不包括与平面相应的MPM的5个MPM来推导当前块的帧内预测模式。
当将多个帧内预测模式设置为默认模式时，还可用信号传送指示默认模式中的任何一个的索引信息。当前块的帧内预测模式可被设置为由索引信息指示的默认模式。
在针对当前块的参考样点线的索引不为0时，可将其设置为不使用默认模式。在示例中，当非相邻参考样点线被确定为当前块的参考样点线时，可将其设置为不使用非方向帧内预测模式(诸如，DC模式或平面模式)。因此，当参考样点线的索引不为0时，可以不用信号传送默认模式标志，并且可将默认模式标志的值推断为预定义值(即，假)。
在当前块的帧内预测模式被确定时，可基于所确定的帧内预测模式来获得针对当前块的预测样点S3503。
在选择DC模式的情况下，基于参考样点的平均值产生针对当前块的预测样点。详细地，可基于参考样点的平均值来产生预测块内的所有样点的值。可使用与当前块的顶部相邻的顶部参考样点和与当前块的左侧相邻的左侧参考样点中的至少一个来推导平均值。
在推导平均值时使用的参考样点的数量或范围可基于当前块的形状而变化。在示例中，在当前块为宽度大于高度的非正方形块时，可通过使用顶部参考样点来计算平均值。相反，在当前块是宽度小于高度的非正方形块时，可通过使用左侧参考样点来计算平均值。换句话说，在当前块的宽度和高度不同时，可使用与较大长度相邻的参考样点来计算平均值。可选地，可基于当前块的宽度与高度之间的比来确定是通过使用顶部参考样点还是通过使用左侧参考样点来计算平均值。
当选择平面模式时，可通过使用水平方向预测样点和垂直方向预测样点来获得预测样点。在这方面，可基于与预测样点位于同一水平线上的左侧参考样点和右侧参考样点来获得水平方向预测样点，并且可基于与预测样点位于同一垂直线上的顶部参考样点和底部参考样点来获得垂直方向预测样点。在这方面，可通过复制与当前块的右上角相邻的参考样点来产生右侧参考样点，并且可通过复制与当前块的左下角相邻的参考样点来产生底部参考样点。可基于左侧参考样点和右侧参考样点的加权和获得水平方向预测样点，并且可基于顶部参考样点和底部参考样点的加权和获得垂直方向预测样点。在这方面，可根据预测样点的位置来确定分配给每个参考样点的加权因子。可基于水平方向预测样点和垂直方向预测样点的平均值或加权和来获得预测样点。当使用加权和时，可基于预测样点的位置来确定分配给水平方向预测样点和垂直方向预测样点的加权因子。
当选择方向预测模式时，可确定表示所选择的方向预测模式的预测方向(或预测角度)的参数。下面的表格4表示用于每一个帧内预测模式的帧内方向参数intraPredAng。
[表格4]
| PredModeIntra | 1 | 2 | 3 | 4 | 5 | 6 | 7 |
| IntraPredAng | - | 32 | 26 | 21 | 17 | 13 | 9 |
| PredModeIntra | 8 | 9 | 10 | 11 | 12 | 13 | 14 |
| IntraPredAng | 5 | 2 | 0 | -2 | -5 | -9 | -13 |
| PredModeIntra | 15 | 16 | 17 | 18 | 19 | 20 | 21 |
| IntraPredAng | -17 | -21 | -26 | -32 | -26 | -21 | -17 |
| PredModeIntra | 22 | 23 | 24 | 25 | 26 | 27 | 28 |
| IntraPredAng | -13 | -9 | -5 | -2 | 0 | 2 | 5 |
| PredModeIntra | 29 | 30 | 31 | 32 | 33 | 34 | |
| IntraPredAng | 9 | 13 | 17 | 21 | 26 | 32 |
表格4表示每一个帧内预测模式的帧内方向参数，其中，当定义35个帧内预测模式时，其索引是2至34中的一个。当方向帧内预测模式被定义为大于33个时，可通过对表格4进行细分来设置每个帧内预测模式的帧内方向参数。针对当前块的顶部参考样点和左侧参考样点被排列成线，然后可基于帧内方向参数的值获得预测样点。在这方面，当帧内方向参数的值为负值时，左侧参考样点和顶部参考样点可被排列成线。
图37和图38是示出将参考样点排列成线的一维阵列的示例的示图。
图37示出在垂直方向上的一维阵列的示例，其中，参考样点沿垂直方向排列，并且图38示出在水平方向上的一维阵列的示例，其中，参考样点沿水平方向排列。通过假设定义了35个帧内预测模式的情况来描述图37和图38的实施例。
当帧内预测模式索引是11至18中的任何一个时，可应用逆时针旋转顶部参考样点的水平方向上的一维阵列，并且当帧内预测模式索引是19至25中的任何一个时，可应用顺时针旋转左侧参考样点的垂直方向上的一维阵列。在将参考样点排列成线时，可考虑帧内预测模式角度。
基于帧内方向参数，可确定参考样点确定参数。参考样点确定参数可包括用于指定参考样点的参考样点索引和用于确定应用于参考样点的权重的权重参数。
可通过下面的等式12和等式13分别获得参考样点索引iIdx和加权因子参数ifact。
[等式12]
iIdx＝(y+1)*Pang/32
[等式13]
ifact＝[(y+1)*Pang]&31
在等式12和等式13中，Pang表示帧内方向参数。由参考样点索引iIdx指定的参考样点与整数像素相应。
为了推导预测样点，可指定至少一个参考样点。具体地，根据预测模式的斜率，可指定用于推导预测样点的参考样点的位置。在示例中，可通过使用参考样点索引iIdx来指定用于推导预测样点的参考样点。
在这方面，当帧内预测模式的斜率不由一个参考样点表示时，可通过对多个参考样点执行插值来产生预测样点。在示例中，当帧内预测模式的斜率是预测样点与第一参考样点之间的斜率和预测样点与第二参考样点之间的斜率之间的值时，可通过对第一参考样点和第二参考样点执行插值来获得预测样点。换句话说，当根据帧内预测角度的角度线不穿过位于整数像素处的参考样点时，可通过对位于角度线穿过的位置的左侧和右侧或者顶部和底部附近的参考样点执行插值来获得预测样点。
下面的等式14表示基于参考样点获得预测样点的示例。
[等式14]
P(x，y)＝((32-ifact)/32)*Ref_1D(x+iIdx+1)+(ifact/32)*Ref_1D(x+iIdx+2)
在等式14中，P表示预测样点，Ref_1D表示排列成线的参考样点中的任何一个。在这方面，可通过预测样点的位置(x,y)和参考样点索引iIdx来确定参考样点的位置。
当能够由一个参考样点表示帧内预测模式的斜率时，将加权因子参数ifact设置为0。因此，等式14可被简化为下面的等式15。
[等式15]
P(x，y)＝Ref_1D(x+iIdx+1)
基于多个帧内预测模式，可执行用于当前块的帧内预测。在一个示例中，可针对每个预测样点推导帧内预测模式，并且可基于分配给其的帧内预测模式来推导预测样点。
可选地，可针对每个区域推导帧内预测模式，并且可基于分配给每个区域的帧内预测模式来执行针对每个区域的帧内预测。在这种情况下，该区域可包括至少一个样点。可基于当前块的尺寸或形状或帧内预测模式中的至少一个自适应地确定区域的尺寸或形状中的至少一个。可选地，可在编码装置和解码装置中独立地预先定义区域的尺寸或形状中的至少一个，而不管当前块的尺寸或形状如何。
图39是示出由方向帧内预测模式与平行于x轴的直线形成的角度的示图。
如在图39中所示的示例中，方向预测模式可存在于左下对角线方向与右上对角线方向之间。如由x轴和方向预测模式形成的角度所描述的，方向预测模式可存在于45度(左下对角线方向)与-135度(右上对角线方向)之间。
在当前块为非正方形时，可能存在如下情况：通过使用位于根据帧内预测角度的角度线处的参考样点中的位于比靠近根据当前块的帧内预测模式的预测样点的参考样点更远的参考样点来推导预测样点。
图40是示出在当前块具有非正方形形状时获得预测样点的方面的示图。
在示例中，如在图40的(a)所示出的示例中，假设当前块具有宽度大于高度的非正方形形状，并且当前块的帧内预测模式是具有从0度到45度的角度的方向帧内预测模式。在这种情况下，当推导当前块的右侧列附近的预测样点A时，可能发生使用远离该预测样点的左侧参考样点L而不是位于跟随角度的角度模式中的参考样点中的接近预测样点的顶部参考样点T的情况。
在另一示例中，如在图40的(b)所示出的示例中，假设当前块具有高度大于宽度的非正方形形状，并且当前块的帧内预测模式是从-90度到-135度的方向帧内预测模式。在这种情况下，当推导当前块的底部行附近的预测样点A时，可能发生使用远离该预测样点的顶部参考样点T而不是位于跟随角度的角度模式中的参考样点中的接近该预测样点的左侧参考样点L的情况。
为了解决上述问题，在当前块是非正方形时，可用相反方向的帧内预测模式替换当前块的帧内预测模式。因此，对于非正方形块，可使用具有大于或小于图36中所示出的方向预测模式的角度的角度的方向预测模式。上述方向帧内预测模式可被定义为广角帧内预测模式。广角帧内预测模式表示不属于45度到-135度范围的方向帧内预测模式。
图41是示出广角帧内预测模式的示图。
在图41中所示出的示例中，具有从-1到-14的索引的帧内预测模式以及具有从67到80的索引的帧内预测模式表示广角帧内预测模式。
在图41中，示出角度大于45度的14个广角帧内预测模式(从-1到-14)和角度小于-135度的4个广角帧内预测模式(从67到80)。然而，可定义更多或更少个数量的广角帧内预测模式。
当使用广角帧内预测模式时，顶部参考样点的长度可被设置为2W+1，并且左侧参考样点的长度可被设置为2H+1。
当使用广角帧内预测模式时，可通过使用参考样点T来预测图41的(a)所示出的样点A，并且可通过使用参考样点L来预测图41的(b)所示出的样点A。
可使用由现有帧内预测模式加上N个广角帧内预测模式而构成的总共67+N个帧内预测模式。在示例中，表格5表示当定义了20个广角帧内预测模式时的帧内预测模式的帧内方向参数。
[表格5]
在当前块为非正方形并且在S2502中获得的当前块的帧内预测模式属于转换范围时，可将当前块的帧内预测模式转换为广角帧内预测模式。可基于当前块的尺寸或形状或比中的至少一个来确定转换范围。在这方面，所述比可表示当前块的宽度与高度之间的比。在当前块具有宽度大于高度的非正方形形状时，可将转换范围设置为从右上对角线方向上的帧内预测模式索引(例如，66)到(从右上对角线方向上的帧内预测模式的索引减去N)。在这种情况下，可基于当前块的比来确定N。在当前块的帧内预测模式属于转换范围时，帧内预测模式可被转换为广角帧内预测模式。可通过从帧内预测模式减去预定义值来执行转换，并且预定义值可以是不包括广角帧内预测模式的帧内预测模式的总数(例如，67)。
通过本实施例，可将第66号到第53号之间的帧内预测模式中的每一个分别转换为第-1号到第-14号之间的广角帧内预测模式。
在当前块具有高度大于宽度的非正方形形状时，可将转换范围设置为从左下对角线方向上的帧内预测模式索引(例如，2)到(左下对角线方向上的帧内预测模式的索引+M)。在这种情况下，可基于当前块的比来确定M。在当前块的帧内预测模式属于转换范围时，帧内预测模式可被转换为广角帧内预测模式。可通过将预定义值与帧内预测模式相加来执行转换，并且预定义值可以是除广角帧内预测模式之外的方向帧内预测模式的总数(例如，65)。
通过本实施例，可将第2号至第15号之间的帧内预测模式中的每一个分别转换为第67号至第80号之间的广角帧内预测模式。
在下文中，属于转换范围的帧内预测模式被称为广角替换的帧内预测模式。
可基于当前块的比来确定转换范围。在示例中，表格6和表格7分别表示当定义了35个帧内预测模式时以及当定义了67个帧内预测模式(不包括广角帧内预测模式)时的转换范围。
[表格6]
[表格7]
如在表格6和表格7所示出的示例中，根据当前块的比，包括在转换范围中的广角替换的帧内预测模式的数量可变化。通过对当前块的比进行细分，可如以下表格8中进一步对转换范围进行细分。
[表格8]
当非相邻参考样点线被确定为当前块的参考样点线时，或者当使用选择多个参考样点线中的任何一个的多线帧内预测编码方法时，可将其设置为不使用广角帧内预测模式。换句话说，尽管当前块是非正方形的并且当前块的帧内预测模式属于转换范围，但是当前块的帧内预测模式可以不被转换为广角帧内预测模式。可选地，在当前块的帧内预测模式被确定为广角帧内预测模式时，可设置为使非相邻参考样点线不可用作当前块的参考样点线，或者不使用选择多个参考样点线中的任何一个的多线帧内预测编码方法。当不使用多线帧内预测编码方法时，可将相邻参考样点线确定为当前块的参考样点线。
当不使用广角帧内预测模式时，可将refW和refH设置为nTbW与nTbH的总和。因此，除了左上参考样点之外，与当前块的距离为i的非相邻参考样点可包括(nTbW+nTbH+offsetX[i])个顶部参考样点和(nTbW+nTbH+offsetY[i])个左侧参考样点。换句话说，与当前块的距离为i的非相邻参考样点可包括(2nTbW+2nTbH+offsetX[i]+offsetY[i]+1)个参考样点。例如，当whRatio的值大于1时，offsetX的值可被设置为大于offsetY的值。在示例中，offsetX的值可被设置为1，并且offsetY的值可被设置为0。另一方面，当whRatio的值小于1时，offsetY的值可被设置为大于offsetX的值。在示例中，offsetX的值可被设置为0，并且offsetY的值可被设置为1。
由于除了现有帧内预测模式之外还使用广角帧内预测模式，因此可增加编码广角帧内预测模式所需的资源并且可降低编码效率。因此，可对针对广角帧内预测模式的替换的帧内预测模式进行编码以提高编码效率，而不是按原样对广角帧内预测模式进行编码。
在示例中，当通过使用第67号广角帧内预测模式对当前块进行编码时，可将第67号的广角替换的帧内预测模式第2号编码为当前块的帧内预测模式。另外，在当前块被编码为第-1号广角帧内预测模式时，可将第-1号的广角替换的帧内预测模式第66号编码为当前块的帧内预测模式。
解码装置可对当前块的帧内预测模式进行解码，并判断解码的帧内预测模式是否被包括在转换范围中。当解码的帧内预测模式是广角替换的帧内预测模式时，帧内预测模式可被转换为广角帧内预测模式。
可选地，在当前块被编码为广角帧内预测模式时，广角帧内预测模式可按照原样进行编码。
可基于上述MPM列表执行帧内预测模式的编码。具体地，当邻近块被编码为广角帧内预测模式时，可基于与广角帧内预测模式相应的广角替换的帧内预测模式来设置MPM。
编码块或变换块可被分区为多个子块(或子分区)。当编码块或变换块被分区为所述多个子块时，可针对每一个子块执行预测、变换和量化。将编码块或变换块分区为多个子块可被定义为子分区帧内编码方法。
可在比特流中用信号传送表示是否应用子分区帧内编码方法的信息。该信息可以是1比特标志。在示例中，可在比特流中用信号传送表示编码块或变换块是否被分区为多个子块的语法元素“intra_subpartitions_mode_flag”。
可选地，可基于编码块或变换块的尺寸、形状或帧内预测模式中的至少一个来确定是否应用子分区帧内编码方法。在示例中，当编码块的帧内预测模式是非方向帧内预测模式(例如，平面或DC)或预定义的方向帧内预测模式(例如，水平方向上的帧内预测模式、垂直方向上的帧内预测模式或对角线方向上的帧内预测模式)时，可设置为不应用子分区帧内编码方法。可选地，当编码块的尺寸小于阈值时，可设置为不应用子分区帧内编码方法。
可选地，当基于编码块的帧内预测模式执行子块的帧内预测时，可基于包括在邻近子块中的重建样点是否应该被用作子块的帧内预测的参考样点来确定是否应用子分区帧内编码方法。在示例中，当编码块的帧内预测模式是对角线方向上的帧内预测模式或广角帧内预测模式，并且邻近子块在基于帧内预测模式对子块执行帧内预测时被不能用作参考样点时，可设置不使用子分区帧内编码方法。
可选地，当编码块的高宽比等于或大于阈值或等于或小于阈值时，可设置为不使用子分区帧内编码方法。可选地，当编码块的高度或宽度中的至少一个等于或小于阈值时，可设置为不使用子分区帧内编码方法。在示例中，当编码块的宽度或高度等于或小于阈值时，或者当编码块的高度和宽度都等于或小于阈值时，可以不使用子分区帧内编码方法。可选地，当包括在编码块中的样点的数量等于或小于阈值时，可以不使用子分区帧内编码方法。阈值可在编码装置和解码装置中具有预定义值。可选地，可在比特流中用信号传送用于确定阈值的信息。
可选地，可基于编码块或变换块的尺寸、形状或帧内预测模式中的至少一个来确定是否用信号传送指示是否应用子分区帧内编码方法的标志。在示例中，只有当编码块的高度和宽度两者都等于或小于阈值时和/或当编码块的尺寸等于或大于阈值时，才可对指示是否应用子分区帧内编码方法的标志进行编码和用信号传送指示是否应用子分区帧内编码方法的标志。当指示是否应用子分区帧内编码方法的标志不被编码时，可以不应用子分区帧内编码方法。
当不使用子分区帧内编码方法时，可省略语法元素intra_subpartitions_mode_flag的信号传送。当省略标志的信号传送时，可将标志视为指示不应用子分区帧内编码方法。
当应用子分区帧内编码方法时，可确定编码块或变换块的分区类型。在这种情况下，分区类型表示编码块或变换块的分区方向。在示例中，在垂直方向上进行分区可表示通过使用至少一条垂直线对编码块或变换块进行分区，在水平方向上进行分区可表示通过使用至少一条水平线对编码块或变换块进行分区。
图42是示出垂直方向分区和水平方向分区的示例的示图。
图42的(a)表示将编码块分区为2个子块的示例，图42的(b)表示将编码块分区为4个子块的示例。
可在比特流中用信号传送用于确定编码块或变换块的分区类型的信息。在示例中，可用信号传送表示垂直方向分区是否诶应用于编码块或变换块或者水平方向分区是否被应用于编码块或变换块的信息。该信息可以是1比特标志intra_subpart_type_flag。当标志的值为1时，其表示在水平方向上对编码块或变换块进行分区，并且当标志的值为0时，其表示在垂直方向上对编码块或变换块进行分区。
可选地，可基于编码块或变换块的尺寸、形状或帧内预测模式来确定编码块或变换块的分区类型。在示例中，可基于编码块的宽高比来确定编码块的分区类型。例如，当表示编码块的高宽比的whRatio的值等于或大于第一阈值时，可将垂直方向分区应用于编码块。否则，可将水平方向分区应用于编码块。
图43是示出确定编码块的分区类型的示例的示图。
为了便于描述，假设第一阈值为2。在图43的(a)所示出的示例中，编码块的whRatio为1，其小于第一阈值。因此，可省略表示编码块的分区类型的信息的编码，并且可将水平方向分区应用于编码块。
在图43的(b)所示的示例中，编码块的whRatio为2，其与第一阈值相同。因此，可省略表示对编码块的分区类型的信息的编码，并且可将垂直方向分区应用于编码块。
可通过使用正负号与第一阈值相反的第二阈值来确定编码块的分区类型。在示例中，当whRatio的值等于或小于第二阈值时，可将水平方向分区应用于编码块，否则，可将垂直方向分区应用于编码块。第一阈值和第二阈值的绝对值可相同，并且它们的正负号可以不同。在示例中，当第一阈值是N(在这种情况下，N是诸如1、2、4等的整数)时，第二阈值可以是-N。
图44是示出确定编码块的分区类型的示例的示图。
为了便于描述，假设第二阈值为-2。在图44的(a)所示出的示例中，编码块的whRatio为-1，其大于第二阈值。因此，可省略对表示编码块的分区类型的信息的编码，并且可将垂直方向分区应用于编码块。
在图44的(b)所示的示例中，编码块的whRatio为-2，其与第二阈值相同。因此，可省略对表示编码块的分区类型的信息的编码，并且可将水平方向分区应用于编码块。
可选地，可基于第一阈值和第二阈值确定编码块的分区类型。在示例中，当whRatio的值等于或大于第一阈值时，可将水平方向分区应用于编码块，并且当whRatio的值等于或小于第二阈值时，可将垂直方向分区应用于编码块。当whRatio的值存在于第一阈值和第二阈值之间时，可通过对比特流中的信息进行解析来确定编码块的分区类型。
可在编码装置和解码装置中预先定义第一阈值和第二阈值。可选地，可针对每个序列、画面或条带定义第一阈值和第二阈值。
可选地，可基于编码块或变换块的尺寸确定分区类型。在示例中，当编码块的尺寸为N×n时，可应用垂直方向分区，当编码块的尺寸为n×N时，可应用水平方向分区。在这种情况下，N可以是小于N的自然数。N和/或n可以是编码装置和解码装置中的预定义值。可选地，可在比特流中用信号传送用于确定N和/或n的信息。因此，当编码块的尺寸是128×n(在这种情况下，n是诸如16、32或64等的自然数)时，可应用垂直方向分区，并且当编码块的尺寸是n×128时，可应用水平方向分区。
可选地，可基于编码块或变换块的帧内预测模式来确定编码块或变换块的分区类型。在示例中，当编码块的帧内预测模式具有水平方向或具有与水平方向类似的方向时，可将垂直方向分区应用于编码块。在这种情况下，具有与水平方向类似的方向的帧内预测模式表示与水平方向上的帧内预测模式(例如，图36的(b)所示出的INTRA_ANGULAR18)的索引差值等于或小于阈值的帧内预测模式(例如，INTRA_ANGULAR18±N)。另一方面，当编码块的帧内预测模式具有垂直方向或具有与垂直方向类似的方向时，可对编码块应用水平方向分区。在这种情况下，具有与垂直方向类似的方向的帧内预测模式表示与垂直方向上的帧内预测模式(例如，图36的(b)所示出的INTRA_ANGULAR50)的索引差值等于或小于阈值的帧内预测模式(例如，INTRA_ANGULAR50±N)。在这种情况下，阈值N可以是编码装置和解码装置中的预定义值。可选地，可在序列级别、画面级别或条带级别中用信号传送用于确定阈值N的信息。
图45是示出基于编码块的帧内预测模式确定编码块的分区类型的示例的示图。
如在图45的(a)所示出的示例中，当编码块的帧内预测模式具有与垂直方向类似的方向时，可将水平方向分区应用于编码块。
另一方面，如在图45的(b)所示出的示例中，当编码块的帧内预测模式具有与水平方向类似的方向时，可将垂直方向分区应用于编码块。
与所示出的示例相反，当编码块的帧内预测模式具有水平方向或具有与水平方向类似的方向时，可应用水平方向分区，当编码块的帧内预测模式具有垂直方向或具有与垂直方向类似的方向时，可应用垂直方向分区。
当应用垂直方向分区或水平方向分区时，可基于通过对编码块或变换块进行分区而产生的子块的宽度或高度中的至少一个是否小于阈值来确定编码块或变换块的分区类型。在这种情况下，阈值可以是诸如2、4或8等的整数。
图46是用于描述编码块的分区方面的示图。
如果将水平方向分区应用于图46的(a)所示出的4×8尺寸的编码块，则将编码块分区为2×8尺寸的子块。在此情况下，子块的宽度小于阈值，因此水平方向分区可能不可用于编码块。另一方面，如果将垂直方向分区应用于4×8尺寸的编码块，则将编码块分区为4×4尺寸的子块。由于子块的宽度和高度两者都等于或大于阈值，因此垂直方向分区可用于编码块。由于仅垂直方向分区可用于编码块，因此可省略对表示编码块的划分类型的信息的编码，并且可将垂直方向分区应用于编码块。
如果将垂直方向分区应用于图46的(b)所示出的8×4尺寸的编码块，则将编码块分区为8×2尺寸的子块。在此情况下，子块的高度小于阈值，因此垂直方向分区可能不可用于编码块。另一方面，如果将水平方向分区应用于8×4尺寸的编码块，则将编码块分区为4×4尺寸的子块。由于子块的宽度和高度两者都等于或大于阈值，因此水平方向分区可用于编码块。由于仅水平方向分区可用于编码块，因此可省略对表示编码块的分区类型的信息的编码，并且可将垂直方向分区应用于编码块。
如果垂直方向分区和水平方向分区两者都可用，则可通过对指示编码块的分区类型的信息进行解析来确定编码块的分区类型。
可基于编码块或变换块的尺寸或形状中的至少一个来确定子块的数量。在示例中，当编码块的宽度或高度中的一个为8并且另一个为4时，编码块可被分区为2个子块。另一方面，当编码块的宽度和高度都为8或更大时，或者当编码块的宽度或高度中的一个大于8时，编码块可被分区为4个子块。总之，当编码块具有4×4尺寸时，编码块可不被分区为子块。当编码块具有4×8或8×4尺寸时，编码块可被分区为2个子块。否则，编码块可被分区为4个子块。
可选地，可在比特流中用信号传送表示子块的尺寸或形状或者子块的数量的信息。可由表示子块的数量的信息确定子块的尺寸或形状。可选地，可由表示子块的尺寸或形状的信息来确定子块的数量。
当应用子分区帧内编码方法时，通过对编码块或变换块进行分区而产生的子块可使用相同的帧内预测模式。在示例中，可基于与编码块相邻的邻近块的帧内预测模式来推导用于编码块的MPM，并且可基于推导出的MPM来确定用于编码块的帧内预测模式。当确定编码块的帧内预测模式时，每一个子块可通过使用所确定的帧内预测模式来执行帧内预测。
当应用子分区帧内编码方法时，可将MPM中的一个确定为编码块的帧内预测模式。换句话说，当应用子分区帧内编码方法时，尽管MPM标志未用信号传送，但可推断MPM标志为真。
可选地，当应用子分区帧内编码方法时，可将预定义的候选帧内预测模式中的一个确定为编码块的帧内预测模式。在示例中，可将具有水平方向的帧内预测模式、具有垂直方向的帧内预测模式、具有对角线方向的帧内预测模式(例如左上帧内预测模式、右上帧内预测模式或左下帧内预测模式中的至少一个)或非方向性帧内预测模式(例如平面或DC中的至少一个)中的一个确定为编码块的帧内预测模式。可在比特流中用信号传送指定预定义候选帧内预测模式中的一个的索引信息。可选地，根据编码块的分区方向，候选帧内预测模式的数量和/或类型可不同。在示例中，当将水平方向分区应用于编码块时，可将非方向帧内预测模式、具有垂直方向的帧内预测模式、具有左上对角线方向的帧内预测模式或具有右上对角线方向的帧内预测模式中的至少一个设置为候选帧内预测模式。另一方面，当将垂直方向划分应用于编码块时，可将非方向帧内预测模式、具有水平方向的帧内预测模式、具有左上对角线方向的帧内预测模式或具有左下对角线方向的帧内预测模式中的至少一个设置为候选帧内预测模式。
根据本公开的实施例，可与其他子块不同地设置子块的至少一个帧内预测模式。在示例中，可通过将第(N-1)子块的帧内预测模式与偏移相加或从第(N-1)子块的帧内预测模式减去偏移来推导第N子块的帧内预测模式。可在编码装置和解码装置中预先定义偏移。可选地，可基于编码块的尺寸、形状或帧内预测模式、子块的尺寸或形状、子块的数量或编码块的分区方向中的至少一个来推导偏移。可选地，可在比特流中用信号传送用于推导偏移的信息。
可选地，当第(N-1)子块的帧内预测模式为非方向模式时，也可将第N子块的帧内预测模式设置为与第(N-1)子块的帧内预测模式相同，并且当第(N-1)子块的帧内预测模式为方向模式时，可将通过将第(N-1)子块的帧内预测模式与偏移相加或从第(N-1)子块的帧内预测模式减去偏移推导的帧内预测模式设置为第N子块的帧内预测模式。
可选地，可将方向帧内预测模式应用于多个子块的一部分，并且可将非方向帧内预测模式应用于其余部分。可通过考虑子块的尺寸、形状或位置或子块的数量中的至少一个来确定被应用非方向帧内预测模式的子块。可选地，仅当被应用于多个子块中的一个的方向帧内预测模式是预定义值时，才可将非方向帧内预测模式应用于另一子块。
可选地，可从MPM推导每一个子块的帧内预测模式。为此，可针对每一个子块用信号传送指定MPM中的任何一个的索引信息。
可选地，可从预定义候选帧内预测模式推导每一个子块的帧内预测模式。为此，可针对每一个子块用信号传送指定预定义候选帧内预测模式中的任何一个的索引信息。可针对每个子块不同地设置候选帧内预测模式的数量和/或类型。
可选地，可在比特流中用信号传送表示子块的帧内预测模式是否被设置为相同的信息。
可单独地确定子块的量化参数。因此，可不同地设置每一个子块的量化参数的值。表示与先前子块的量化参数的差值的信息可被编码以确定每一个子块的量化参数。在示例中，对于第N子块，可对第N子块的量化参数与第(N-1)子块的量化参数之间的不同值进行编码。
可通过使用参考样点来执行子块的帧内预测。在此情况下，可从与子块相邻的邻近块的重建样点推导参考样点。当与子块相邻的邻近块是包括在与该子块相同的编码块中的另一子块时，可基于所述另一子块的重建样点推导该子块的参考样点。在示例中，当第一子块位于第二子块的左侧或顶部时，可从第一子块的重建样点推导第二子块的参考样点。为此，可以不在子块之间应用并行帧内预测。换句话说，可针对包括在编码块中的子块顺序地进行编码/解码。因此，在完成第一子块的编码/解码之后，可执行针对第二子块的帧内预测。
当应用子分区帧内编码方法时，可设置为不使用选择多个参考样点线候选中的任何一个的多线帧内预测编码方法。当不使用多线帧内预测编码方法时，可将与每一个子块相邻的相邻参考样点线确定为每一个子块的参考样点线。可选地，在当前块的参考样点线的索引大于0时，可省略对表示是否应用子分区帧内编码方法的语法元素intra_subpartitions_mode_flag的编码。当省略对语法intra_subpartitions_mode_flag的编码时，可以不应用子分区帧内编码方法。
可选地，尽管应用子分区帧内编码方法，但也可使用多线帧内预测编码方法。为此，可针对每一个子块用信号传送用于指定参考样点线的索引信息。可选地，可仅针对多个子块中的任何一个用信号传送用于指定参考样点线的索引信息，并且该索引信息也可被应用于其余子块。可选地，可针对编码块用信号传送用于指定参考样点线的索引信息，并且包括在编码块中的多个子块可共享索引信息。
可选地，多线帧内预测编码方法可仅被用于多个子块中的在预定义位置处的子块或具有预定义分区索引的子块。在示例中，可仅针对多个子块中的分区索引为0的子块或邻接编码块的顶部边界或左侧边界的子块用信号传送指定参考样点线候选中的任何一个的索引信息。多线帧内预测编码方法可不被应用于其余子块。因此，其余子块可通过使用相邻参考样点线来执行帧内预测。
可针对每个子块不同地设置预测编码模式。在示例中，帧内预测可被应用于一些子块，并且帧间预测、当前画面参考或组合预测可被应用于其它子块。
图47是示出针对每个子块不同地设置预测编码模式的示例的示图。
可针对每一个子块不同地设置帧内预测模式或预测编码模式。例如，图47中所示出的示例示出了将帧内预测应用于子块0和子块1，并且将当前画面参考应用于子块1和子块2。
当使用当前画面参考时，可从当前画面或条带(或并行块群组)的已解码区域推导子块的预测块。当应用当前画面参考时，可推导运动矢量以指定子块的预测块。当前画面参考下的运动矢量可被称为“块矢量”。
可基于与编码块或子块相邻的邻近块的运动矢量推导运动矢量。可选地，可在比特流中用信号传送用于确定运动矢量的信息。
在这种情况下，可根据子块的尺寸或者子块所属的编码块或变换块的尺寸来确定子块的运动矢量的最大值。在示例中，可将子块的运动矢量设置为不在子块所属的编码块或变换块的边界之外。换句话说，可从在子块所属的编码块中的子块之前被编码/解码的区域推导子块的预测块。
作为运动矢量的代替，可对表示编码块中的预先解码的子块中的任何一个的索引信息进行编码和用信号传送。子块的预测块可被确定为由索引信息指定的预先解码的子块。
在另一示例中，可允许子块的运动矢量在子块所属的编码块或变换块的边界之外。
当作为帧内预测的结果产生预测块时，可基于包括在预测块中的预测样点的每一个位置来更新预测样点。这种更新方法可被称为基于样点位置的帧内加权预测方法(或位置相关预测组合(PDPC))。
可考虑当前块的尺寸、形状或帧内预测模式、当前块的参考样点线、当前块的尺寸或颜色分量来确定是否使用PDPC。在示例中，在当前块的帧内预测模式为平面、DC、垂直方向、水平方向、具有小于垂直方向的索引值的模式或具有大于水平方向的索引值的模式中的至少一个时，可使用PDPC。可选地，可仅在当前块的宽度或高度中的至少一个大于4时使用PDPC。可选地，可仅在当前块的参考画面线的索引为0时使用PDPC。可选地，可仅在当前块的参考画面线的索引超过预定义值时使用PDPC。可选地，PDPC可以仅被用于亮度分量。可选地，可根据是否满足以上列举的条件中的多于2个条件来确定是否使用PDPC。
可选地，基于是否使用子分区帧内编码方法，可确定是否使用PDPC。在示例中，当将子分区帧内编码方法应用于编码块或变换块时，可将PDPC设置为不被使用。可选地，当将子分区帧内编码方法应用于编码块或变换块时，可将PDPC应用于多个子块中的至少一个子块。在这种情况下，可基于编码块或子块的尺寸、形状、位置、帧内预测模式或参考样点线索引中的至少一个来确定作为PDPC的目标的子块。在一个示例中，PDPC可被应用于与编码块的顶部和/或左侧边界相邻的子块，或者与编码块的底部和/或右侧边界相邻的子块。可选地，基于子块的尺寸或形状，可设置为将PDPC应用于包括在编码块中的所有子块，或者不将PDPC应用于包括在编码块中的所有子块。在示例中，当子块的宽度或高度中的至少一个小于阈值时，可省略PDPC的应用。在另一示例中，PDPC可被应用于编码块中的所有子块。
可选地，基于通过对编码块或变换块进行分区而产生的子块的尺寸、形状、帧内预测模式或参考画面索引中的至少一个是否满足预设条件，可针对每一个子块确定是否应用PDPC。在示例中，当子块的宽度或高度中的至少一个大于4时，可将PDPC应用于子块。
在另一示例中，可在比特流中用信号传送示出是否应用PDPC的信息。
可选地，可基于当前块的尺寸、形状或帧内预测模式、或预测样点的位置中的至少一个来确定应用PDPC的区域。在示例中，在当前块的帧内预测模式具有大于垂直方向的索引时，可以不校正x轴坐标或y轴坐标中的至少一个大于阈值的预测样点，并且可仅校正x轴坐标或y轴坐标等于或小于阈值的预测样点。可选地，在当前块的帧内预测模式具有小于水平方向的索引时，可以不校正x轴坐标或y轴坐标中的至少一个大于阈值的预测样点，并且可仅校正x轴坐标或y轴坐标等于或小于阈值的预测样点。在这种情况下，可基于当前块的尺寸、形状或帧内预测模式中的至少一个来确定阈值。
当通过帧内预测样点获得预测样点时，可基于所获得的预测样点的位置来确定用于校正预测样点的参考样点。为了便于解释，用于校正预测样点的参考样点在稍后描述的实施例中被称为PDPC参考样点。另外，通过帧内预测获得的预测样点被称为第一预测样点，并且通过校正第一预测样点获得的预测样点被称为第二预测样点。
图48是示出PDPC的应用方面的示图。
利用至少一个PDPC参考样点，可校正第一预测样点。PDPC参考样点可包括与当前块的左上角相邻的参考样点、位于当前块顶部处的顶部参考样点或位于当前块左侧处的左侧参考样点中的至少一个。
可将属于当前块的参考样点线的参考样点中的至少一个设置为PDPC参考样点。可选地，不管当前块的参考样点线如何，可将属于索引为0的参考样点线的参考样点中的至少一个设置为PDPC参考样点。在一个示例中，尽管通过使用包括在索引为1或2的参考样点线中的参考样点来获得第一预测样点，但也可通过使用包括在索引为0的参考样点线中的参考样点来获得第二预测样点。
可考虑当前块的帧内预测模式、当前块的尺寸、当前块的形状或第一预测样点的位置中的至少一个来确定用于校正第一预测样点的PDPC参考样点的数量或位置。
在示例中，在当前块的帧内预测模式是平面或DC模式时，可通过使用顶部参考样点和左侧参考样点来获得第二预测样点。在这方面，顶部参考样点可以是与第一预测样点垂直的参考样点(例如，具有相同x坐标的参考样点)，并且左侧参考样点可以是与第一预测样点水平的参考样点(例如，具有相同y坐标的参考样点)。
在当前块的帧内预测模式是水平方向帧内预测模式时，可通过使用顶部参考样点来获得第二预测样点。在这方面，顶部参考样点可以是与第一预测样点垂直的参考样点。
在当前块的帧内预测模式是垂直方向帧内预测模式时，可通过使用左侧参考样点来获得第二预测样点。在这方面，左侧参考样点可以是与第一预测样点水平的参考样点。
在当前块的帧内预测模式是左下对角线方向或右上对角线方向帧内预测模式时，可基于左上方参考样点、顶部参考样点和左侧参考样点获得第二预测样点。左上方参考样点可以是与当前块的左上角相邻的参考样点(例如，位于(-1,-1)处的参考样点)。顶部参考样点可以是位于第一预测样点的右上对角线方向处的参考样点，并且左侧参考样点可以是位于第一预测样点的左下对角线方向处的参考样点。
总之，当第一预测样点位于(x,y)时，R(-1,-1)可被设置为左上方参考样点，并且R(x+y+1,-1)或R(x,-1)可被设置为顶部参考样点。另外，R(-1,x+y+1)或R(-1,y)可被设置为左侧参考样点。
在针对当前块执行帧内预测之后，可通过从当前块的原始样点减去预测样点来获得残差样点。在此情况下，可在推导残差样点与邻近残差样点之间的差之后对推导出的差进行编码，而不是按原样对残差样点进行编码。
例如，在减去属于第一线的残差样点和属于第二线的残差样点之后，然后可对减后的残差差值进行编码，而不是对属于第二线的残差进行编码。在这种情况下，针对第一线和第二线，x轴坐标或y轴坐标中的至少一个可以不同。编码装置可对残差差值或通过对残差差值进行变换而产生的变换系数进行编码。
解码装置可将属于第一线的残差样点设置为第二残差样点的残差预测值，并通过将解码的残差差值与残差预测值相加来推导第二残差样点。
如上所述，在减去残差样点之后基于残差差值执行编码/解码可被称为帧内BDPCM(基于块的增量脉冲编码调制)。仅当通过帧内预测确定当前块的预测编码模式时，才可使用帧内BDPCM。
当应用帧内BDPCM时，可将当前块的预测样点设置为0。换句话说，当应用帧内BDPCM时，可将残差样点设置为重建样点。
可选地，当应用帧内BDPCM时，可基于帧内预测推导当前块的预测样点。在这种情况下，可根据帧内BDPCM方向来确定当前块的帧内预测模式。在示例中，当帧内BDPCM方向为水平时，可基于水平方向的帧内预测模式获得预测样点。当帧内BDPCM方向为垂直时，可基于垂直方向的帧内预测模式获得预测样点。
可选地，可通过使用默认帧内预测模式推导当前块的预测样点。默认帧内预测模式可以是DC、平面、水平或垂直方向中的一个。可在编码装置和解码装置中预先定义默认帧内预测模式。可选地，可从多个MPM候选中的一个推导帧内预测模式。
当将帧内BDPCM应用于当前块时，可强制使用相邻参考样点线。换句话说，可省略指定对参考样点线中的一个的索引信息的信号传送，并且可通过使用相邻参考样点线来获得预测样点。
当应用帧内BDPCM方法时，可在比特流中用信号传送用于确定帧内BDPCM方向的信息。在示例中，可在比特流中用信号传送表示帧内BDPCM方向的标志intra_bdpcm_dir_flag。当语法intra_bdpcm_dir_flag为0时，其表示应用水平方向上的BDPCM，而当语法intra_bdpcm_dir_flag为1时，其表示应用垂直方向上的BDPCM。
可选地，基于当前块的尺寸或形状，可确定帧内BDPCM方向。在示例中，在当前块具有宽度大于高度的非正方形形状时，可应用水平方向上的BDPCM。另一方面，在当前块具有高度大于宽度的非正方形形状时，可应用垂直方向上的BDPCM。
可选地，可基于与当前块相邻的邻近块的帧内预测模式来确定帧内BDPCM方向。在示例中，在当前块的左侧块和顶部块中的至少一个的帧内预测模式具有水平方向或具有与水平方向类似的方向时，可将水平方向上的BDPCM应用于当前块。在这种情况下，与水平方向类似的方向表示与水平方向的帧内预测模式的差等于或小于阈值的帧内预测模式。可选地，在当前块的左侧块和顶部块中的至少一个的帧内预测模式具有垂直方向或具有与垂直方向类似的方向时，可将垂直方向上的BDPCM应用于当前块。在这种情况下，与垂直方向类似的方向表示与垂直方向的帧内预测模式的差等于或小于阈值的帧内预测模式。
当应用水平方向上的BDPCM时，可对残差样点和与残差样点的顶部相邻的邻近残差样点之间的差值进行编码。解码装置可通过将顶部残差样点与解码的差值相加来推导残差样点。
当应用垂直方向上的BDPCM时，可对残差样点和与残差样点左侧相邻的邻近残差样点之间的差值进行编码。解码装置可通过将左侧残差样点与解码的差值相加来推导残差样点。
可选地，可应用非方向BDPCM。在示例中，DC BDPCM表示对残差样点的平均值与邻近残差样点之间的差进行编码/解码。平面BDPCM表示对水平方向差值与垂直方向差值求平均或加权和的结果进行编码/解码，其中，所述水平方向差值表示残差样点与位于该残差样点的水平方向上的残差样点之间的差，所述垂直方向差值表示残差样点与位于该残差样点的垂直方向上的残差样点之间的差。
可在比特流中用信号传送用于指定可用BDPCM模式的信息。该信息可以是表示是否应用非方向BDPCM的信息或用于指定可应用于当前块的多个BDPCM候选中的任何一个的信息。
可在比特流中用信号传送表示是否将对当前块应用帧内BDPCM的信息。在示例中，可在比特流中用信号传送标志intra_bdpcm_flag。当语法intra_bdpcm_flag为1时，其表示将帧内BDPCM应用于当前块。当语法intra_bdpcm_flag为0时，其表示不将帧内BDPCM应用于当前块。
可在画面级别或序列级别中用信号传送表示帧内BDPCM的可用性的信息。在示例中，可在序列参数集(SPS)中用信号传送表示帧内BDPCM的可用性的标志sps_intra_bdpcm_flag。当语法sps_intra_bdpcm_flag为1时，其表示参考序列参数集的画面可使用帧内BDPCM。当语法sps_intra_bdpcm_flag为0时，其表示参考序列参数集的画面可以不使用帧内BDPCM。可仅在sps_intra_bdpcm_flag为1时用信号传送表示是否将帧内BDPCM应用于当前块的intra_bdpcm_flag。
当帧内BDPCM被应用于当前块时，可设置为不使用PDPC。
当帧内BDPCM被应用于当前块时，可强制跳过变换。换句话说，当将帧内BDPCM被应用于当前块时，尽管不用信号传送指示是否应用变换跳过的transform_skip_flag，但是可推断其值为1。
可在比特流中用信号传送表示是否使用常规帧内模式的标志。在常规帧内预测模式下，可将是否使用基于矩阵的帧内预测、参考样点线的索引、是否使用帧内BDPCM、是否使用子分区帧内编码方法或帧内预测模式中的至少一个设置为默认值。因此，当将常规帧内预测模式应用于当前块时，可省略对以下项中的至少一项的编码/解码：表示是否使用基于矩阵的帧内预测的标志intra_mip_flag、表示参考样点线的索引的索引intra_luma_ref_idx、表示是否使用帧内BDPCM的标志intra_bdpcm_flag、表示是否使用子分区帧内编码方法的标志intra_subpartitions_mode_flag或者用于确定帧内预测模式的标志mpm_flag。
具体地，可将与不应用基于矩阵的帧内预测的情况、不应用子分区帧内编码方法的情况、不应用帧内BDPCM的情况、仅使用相邻参考样点线的情况或者使用预定义的帧内预测模式的情况中的至少一种情况相应的情况定义为常规帧内模式。
在示例中，可将不应用基于矩阵的帧内预测和子分区帧内编码方法并且使用相邻参考样点线的一般帧内预测定义为常规帧内模式。在这种情况下，在常规帧内模式下，选择性地使用67个帧内预测模式中的一个。
另外，当确定将常规帧内模式应用于当前块时，可省略对表示是否使用基于矩阵的帧内预测的标志intra_mip_flag、表示参考样点线的索引的索引intra_luma_ref_idx以及表示是否使用子分区帧内编码方法的标志intra_subpartitions_mode_flag的编码/解码，并且可将它们的值设置为0。
表格9表示包括表示是否应用常规帧内模式的标志regular_intra_flag的语法表。
[表格9]
当语法regular_intra_flag为1时，其表示常规帧内模式被应用于当前块。当语法regular_intra_flag为0时，其表示常规帧内模式不被应用于当前块。
仅当语法regular_intra_flag为0时，才可用信号传送intra_mip_flag、intra_luma_ref_idx和/或intra_subpartitions_mode_flag。
在另一示例中，基于矩阵的帧内预测和不使用帧内BDPCM的帧内预测可被定义为常规帧内模式。在这种情况下，在常规帧内模式下，可选择性地使用67个帧内预测模式中的一个，可选择性地使用多个参考样点线中的一个，并且可选择性地应用子分区帧内编码方法。
另外，当确定常规帧内模式被应用于当前块时，可省略对表示是否使用基于矩阵的帧内预测的标志intra_mip_flag的编码/解码，并且可将其值设置为0。
表格10表示包括表示是否应用常规帧内模式的标志regular_intra_flag的语法表。
[表格10]
当常规帧内模式被应用于当前块时，也可省略对表示是否使用帧内BDPCM的标志intra_bdpcm_flag的编码/解码。
表格11表示包括表示是否应用常规帧内模式的标志regular_intra_flag的语法表。
[表格11]
基于当前块的尺寸或形状中的至少一个，可确定常规帧内模式的可用性。在示例中，仅在当前块为非正方形时和/或在当前块的尺寸等于或小于阈值时，可确定常规帧内模式可用。当常规帧内模式可用于当前块时，可在比特流中用信号传送语法regular_intra_flag。另一方面，在当前块可以不使用常规帧内模式时，可省略语法regular_intra_flag的信号传送，并且可将其值设置为0。
可通过从原始图像减去预测图像来推导残差图像。在这方面，当将残差图像转换为频域时，即使从频率分量去除高频分量，图像的主观图像质量也不会显著下降。因此，当高频分量的值被变换为小值时，或者当高频分量的值被设置为0时，可提高压缩效率而不会引起大的视觉失真。反映上述特征，可对当前块执行变换，以便将残差图像分解为二维频率分量。可通过使用诸如DCT(离散余弦变换)、DST(离散正弦变换)等的变换方法来执行变换。
DCT是通过使用余弦变换将残差图像分解(或变换)为二维频率分量，而DST是通过使用正弦变换将残差图像合成(或变换)为二维频率分量。作为对残差图像进行变换的结果，频率分量可被表示为基本图像。在示例中，当针对N×N尺寸的块执行DCT变换时，可获得N2个基本模式分量。可通过变换获得包括在N×N尺寸的块中的基本模式分量中的每一个的大小。根据所使用的变换方法，基本模式分量的大小可被称为DCT系数或DST系数。
变换方法DCT主要被用于对分布有许多非零低频分量的图像进行变换。变换方法DST主要被用于分布有许多高频分量的图像。
还能够通过使用除DCT或DST之外的变换方法来变换残差图像。
在下文中，将残差图像变换为二维频率分量被称为二维图像变换。另外，通过变换获得的基本模式分量的大小被称为变换系数。在示例中，变换系数可指DCT系数或DST系数。当应用以下描述的第一变换和第二变换两者时，变换系数可表示由第二变换的结果产生的基本模式分量。另外，应用变换跳过的残差样点也被称为变换系数。
可以以块为单位确定变换方法。可基于当前块的预测编码模式、当前块的尺寸或当前块的形状中的至少一个来确定变换方法。在示例中，在当前块通过帧内预测模式被编码并且当前块的尺寸小于N×N时，可通过使用DST变换方法执行变换。另一方面，当不满足条件时，可通过使用DCT变换方法来执行变换。
可以不针对残差图像的一些块执行二维图像变换。不执行二维图像变换可被称为变换跳过。当应用变换跳过时，可将量化应用于不执行变换的残差值。
可基于当前块的尺寸或形状中的至少一个来确定是否允许针对当前块进行变换跳过。在示例中，仅在当前块的尺寸小于阈值时，可应用变换跳过。阈值与当前块的样点的宽度、高度或数量中的至少一个相关，并且可被定义为32×32等。可选地，可仅针对正方形块允许变换跳过。在示例中，针对32×32、16×16、8×8或4×4尺寸的正方形块，可允许变换跳过。可选地，仅当不使用子分区帧内编码方法时，才可允许变换跳过。
在通过使用DCT或DST对当前块执行变换之后，可再次对变换的当前块执行变换。在这方面，基于DCT或DST的变换可被定义为第一变换，并且再次对应用了第一变换的块执行变换可被定义为第二变换。
可通过使用多个变换核候选中的任何一个来执行第一变换。在示例中，可通过使用DCT2、DCT8或DST7中的任何一个来执行第一变换。
不同变换核可用于水平方向及垂直方向。表示水平方向的变换核与垂直方向的变换核的组合的信息可在比特流中用信号表示。
第一变换的处理单元可不同于第二变换。在示例中，可对8×8块执行第一变换，并且可对变换的8×8块内的4×4尺寸的子块执行第二变换。可选地，可针对属于三个4×4尺寸的子块的变换系数执行第二变换。所述三个子块可包括位于当前块的左上方的子块、与该子块的右侧相邻的子块以及与该子块的底部邻近的子块。可选地，可对8×8尺寸的块执行第二变换。
还可以将不执行第二变换的其余区域中的变换系数设置为0。
可选地，可对4×4块执行第一变换，并且可对具有包括变换的4×4块的8×8尺寸的区域执行第二变换。
可在比特流中用信号传送表示是否执行第二变换的信息。在示例中，可用信号传送表示是否执行第二变换的标志，或指定是否执行第二变换和用于第二变换的变换核的索引信息。在示例中，当索引信息为0时，其表示不对当前块执行第二变换。另一方面，当索引信息大于0时，可通过索引信息确定用于第二变换的变换核。
可选地，可基于水平方向变换核和垂直方向变换核是否彼此相同而确定是否执行第二变换。在一个示例中，可仅在水平方向变换核和垂直方向变换核彼此相同时执行第二变换。可选地，可仅在水平方向变换核和垂直方向变换核彼此不同时执行第二变换。
可选地，可仅在预定义变换核用于水平方向变换和垂直方向变换时允许第二变换。在一个示例中，当DCT2变换核被用于水平方向变换和垂直方向变换时，可允许第二变换。可选地，当子分区帧内编码方法被应用于当前块时，可仅当DCT2变换核被用于水平方向变换和垂直方向变换时才允许第二变换。
可选地，可基于当前块的非零变换系数的数量确定是否执行第二变换。在一个示例中，在当前块的非零变换系数的数量小于或等于阈值时，预测方法可被配置为不使用第二变换。在当前块的非零变换系数的数量大于阈值时，预测方法可被配置为使用第二变换。只要使用帧内预测对当前块进行编码，预测方法就可被配置为使用第二变换。
可选地，可基于当前块的最后一个非零变换系数的位置确定是否执行第二变换。在示例中，在当前块的最后一个非零变换系数的x轴坐标或y轴坐标中的至少一个大于阈值时，或在当前块的最后一个非零变换系数所属的子块的x轴坐标或y轴坐标中的至少一个大于阈值时，可以不执行第二变换。在这种情况下，可在编码装置和解码装置中预先定义阈值。可选地，可基于当前块的尺寸或形状确定阈值。
可选地，当在当前块中仅存在DC分量的变换系数时，可设置为不执行第二变换。在这种情况下，DC分量表示当前块中的左上方位置处的变换系数。
可选地，当将基于矩阵的帧内预测被应用于当前块时，可设置为不执行第二变换。
可在比特流中用信号传送表示当前块的变换类型的信息。该信息可以是索引信息tu_mts_idx，其表示用于水平方向的变换类型和用于垂直方向的变换类型的组合中的一个。
基于由索引信息tu_mts_idx指定的变换类型候选，可确定针对垂直方向的变换核和针对水平方向的变换核。表格12和表格13表示根据tu_mts_idx的变换类型组合。
[表格12]
[表格13]
变换类型可被确定为DCT2、DST7、DCT8或变换跳过中的一个。可选地，可通过仅使用不包括变换跳过的变换核来配置变换类型组合候选。
如果假设使用表格12，则当tu_mts_idx为0时，可在水平方向和垂直方向上应用变换跳过。当tu_mts_idx为1时，可以在水平方向和垂直方向上应用DCT2。当tu_mts_idx为3时，可在水平方向上应用DCT8，并且可在垂直方向上应用DCT7。
如果假设使用表格13，则当th_mts_idx为0时，可在水平方向和垂直方向上应用DCT2。当tu_mts_idx为1时，可在水平方向和垂直方向上应用变换跳过。当tu_mts_idx为3时，可在水平方向上应用DCT8，并且可在垂直方向上应用DCT7。
可基于当前块的尺寸或形状、非零系数的数量、是否执行第二变换或是否应用子分区帧内编码方法中的至少一个来确定是否编码索引信息。在示例中，当将子分区帧内编码方法应用于当前块时，或者当非零系数的数量等于或小于阈值时，可省略索引信息的信号传送。当省略对索引信息的信号传送时，可将默认变换类型应用于当前块。
默认变换类型可包括DCT2或DST7中的至少一个。当存在多个默认变换类型时，可通过考虑是否执行第二变换、是否应用子分区帧内编码方法、或当前块的尺寸、形状或帧内预测模式中的至少一个来选择多个默认变换类型中的一个。在示例中，可基于当前块的宽度是否在预设范围内将多个变换类型中的一个确定为水平方向变换类型，并且可基于当前块的高度是否在预设范围内将多个变换类型中的一个确定为垂直方向变换类型。可选地，可根据当前块的尺寸、形状或帧内预测模式或是否执行第二变换来不同地确定默认模式。
可选地，当在当前块中仅存在DC分量的变换系数时，可将水平方向变换类型和垂直方向变换类型设置为默认变换类型。在示例中，当在当前块中仅存在DC分量的变换系数时，可将水平方向变换类型和垂直方向变换类型设置为DCT2。
可基于当前块的尺寸或形状确定阈值。在示例中，在当前块的尺寸等于或小于32×32时，可将阈值设置为2，并且在当前块大于32×32时(例如，在当前块为32×64或64×32尺寸的编码块时)，可将阈值设置为4。
多个查找表可被预先存储在编码装置/解码装置中。分配给变换类型组合候选的索引值、变换类型组合候选的类型或变换类型组合候选的数量中的至少一个针对多个查找表中的每一个可以不同。
基于当前块的尺寸、形状或帧内预测模式、是否应用第二变换或是否将变换跳过应用于邻近块中的至少一个，可选择用于当前块的查找表。
在示例中，在当前块的尺寸等于或小于4×4时，或在当前块通过帧间预测被编码时，可使用表格12中的查找表，在当前块的尺寸大于4×4时，或在当前块通过帧内预测被编码时，可使用表格13中的查找表。
可选地，可在比特流中用信号传送指示多个查找表中的一个的信息。解码装置可基于所述信息选择当前块的查找表。
在另一示例中，可基于当前块的尺寸、形状、预测编码模式或帧内预测模式、是否应用第二变换或是否将变换跳过应用于邻近块中的至少一项来自适应地确定分配给变换类型组合候选的索引。在示例中，在当前块的尺寸为4×4时被分配给变换跳过的索引可小于在当前块的尺寸大于4×4时被分配给变换跳过的索引。具体地，在当前块的尺寸为4×4时，可将索引0分配给变换跳过，在当前块大于4×4且等于或小于16×16时，可将大于0的索引(例如，索引1)分配给变换跳过。在当前块大于16×16时，可将最大值(例如，5)分配给变换跳过的索引。
可选地，当通过帧间预测对当前块进行编码时，可将索引0分配给变换跳过。当通过帧内预测对当前块进行编码时，可将大于0的索引(例如，索引1)分配给变换跳过。
可选地，在当前块是通过帧间预测被编码的4×4尺寸的块时，可将索引0分配给变换跳过。另一方面，在当前块未通过帧间预测被编码时，或在当前块大于4×4时，可将大于0的索引(例如，索引1)分配给变换跳过。
还可使用不同于表格12和表格13中列举的变换类型组合候选的变换类型组合候选。在示例中，可使用由应用于水平方向变换或垂直方向变换中的一个的变换跳过以及应用于另一个的变换核(例如DCT2、DCT8或DST7等)组成的变换类型组合候选。在这种情况下，可基于当前块的尺寸(例如，宽度和/或高度)、形状、预测编码模式或帧内预测模式中的至少一个来确定变换跳过将被用作水平方向还是垂直方向的变换类型候选。
可在比特流中用信号传送表示是否显式地用信号传送用于确定当前块的变换类型的索引信息的信息。在示例中，可在序列级别用信号传送sps_explicit_intra_mts_flag(表示针对通过帧内预测编码的块是否允许显式变换类型确定的信息)和/或sps_explicit_intra_mts_flag(表示针对通过帧间预测编码的块是否允许显式变换类型确定的信息)。
当允许显式变换类型确定时，可基于在比特流中用信号传送的索引信息tu_mts_idx来确定当前块的变换类型。另一方面，当不允许显式变换类型确定时，可基于是否允许以子块为单位执行变换、包括非零变换系数的子块的位置、是否执行第二变换、是否应用子分区帧内编码方法、或当前块的尺寸或形状中的至少一个来确定变换类型。在示例中，可基于当前块的宽度确定当前块的水平方向变换类型，并且可基于当前块的高度确定当前块的垂直方向变换类型。例如，在当前块的宽度小于4或大于16时，可将水平方向变换类型确定为DCT2。否则，可将水平方向变换类型确定为DST7。在当前块的高度小于4或大于16时，可将垂直方向变换类型确定为DCT2。否则，可将垂直方向变换类型确定为DST7。在这种情况下，可基于当前块的尺寸、形状或帧内预测模式中的至少一个来确定将与宽度和高度进行比较的阈值，以确定水平方向变换类型和垂直方向变换类型。
可选地，在当前块具有其高度与宽度相同的正方形形状时，可将水平方向变换类型和垂直方向变换类型设置为相同，但在当前块具有高度和宽度彼此不同的非正方形形状时，可将水平方向变换类型和垂直方向变换类型设置为不同。在示例中，在当前块的宽度大于高度时，可将水平方向变换类型确定为DST7，并且可将垂直方向变换类型确定为DCT2。在当前块的高度大于宽度时，可将垂直方向变换类型确定为DST7，并且可将水平方向变换类型确定为DCT2。
变换类型候选的数量和/或类型或变换类型组合候选的数量和/或类型可根据是否允许显式变换类型确定而不同。在示例中，当允许显式变换类型确定时，DCT2、DST7和DCT8可被用作变换类型候选。因此，水平方向变换类型和垂直方向变换类型中的每一个可被设置为DCT2、DST8或DCT8。当不允许显式变换类型确定时，仅DCT2和DST7可被用作变换类型候选。因此，可将水平方向变换类型和垂直方向变换类型中的每一个确定为DCT2或DST7。
可将编码块或变换块分区为多个子块，并且可仅针对多个子块的部分执行变换。将变换应用于多个子块的仅一部分可被定义为子变换块编码方法。
图49和图50是示出子变换块编码方法的应用方面的示图。
图49是示出仅针对4个子块中的一个子块执行变换的示例的示图，图50是示出仅针对2个子块中的任何一个子块执行变换的示例的示图。在图49和图50中，假设仅针对标记了“目标”的子块执行变换。
如在图49所示出的示例中，在通过使用相互正交的垂直线和水平线将编码块分区为4个子块之后，可仅针对它们中的一个执行变换和量化。可将不被执行变换的子块中的变换系数设置为0。
可选地，如在图50所示出的示例中，在通过使用垂直线或水平线将编码块分区为2个子块之后，可仅针对其中一个子块执行变换和量化。可以将不执行变换的子块中的变换系数设置为0。
可在比特流中用信号传送表示子变换块编码方法是否被应用于编码块的信息。该信息可以是1比特标志cu_sbt_flag。当标志为1时，其表示仅针对通过对编码块或变换块进行分区而产生的多个子块的一部分执行变换，并且当标志为0时，其表示在不将编码块或变换块分区为子块的情况下执行变换。
可基于编码块的尺寸、形状或预测编码模式或者是否将组合预测模式用于编码块中的至少一个来确定子变换块编码方法是否可被用于编码块。在示例中，当满足编码块的宽度或高度中的至少一个等于或大于阈值的情况、对编码块应用帧间预测的情况或不对编码块应用组合预测模式的情况中的至少一个情况时，子变换块编码方法可用于编码块。在这种情况下，阈值可以是诸如4、8或16等的自然数。
当帧内预测被应用于编码块时或者当帧内块复制模式被应用时，可确定子变换块编码方法不可用。
可选地，可基于子分区帧内编码方法是否被应用于编码块来确定子变换块编码方法是否可用于编码块。在示例中，当子分区帧内编码方法被应用时，可确定子变换块编码方法可用。
当确定子变换块编码方法可用于编码块时，可在比特流中用信号传送语法cu_sbt_flag。根据解析的cu_sbt_flag的值，可确定是否应用子变换块编码方法。
另一方面，当确定子变换块编码方法不可用于编码块时，可省略语法cu_sbt_flag的信号传送。当省略语法cu_sbt_flag的信号传送时，可确定不将子变换块编码方法应用于编码块。
当将子变换编码方法应用于编码块时，可在比特流中用信号传送表示编码块的分区形状的信息。表示编码块的分区形状的信息可包括表示编码块是否被分区为4个子块的信息、表示编码块的分区方向的信息或表示子块的数量的信息中的至少一个。
在示例中，当语法cu_sbt_flag为1时，可用信号传送表示编码块是否被分区为4个子块的标志cu_sbt_quadtree_flag。当语法cu_sbt_quadtree_flag为1时，其表示编码块被分区为4个子块。在示例中，可通过使用3条垂直线或3条水平线将编码块分区为4个子块，或可通过使用1条垂直线和1条水平线将编码块分区为4个子块。将编码块分区为4个子块可被称为四叉树分区。
当语法cu_sbt_quadtree_flag为0时，其表示编码块被分区为2个子块。在示例中，可通过使用1条垂直线或1条水平线将编码块分区为2个子块。将编码块分区为2个子块可被称为二叉树分区。
另外，可在比特流中用信号传送表示编码块的分区方向的标志。在一个示例中，可对表示是否将水平方向分区应用于编码块的标志cu_sbt_horizontal_flag进行编码和用信号传送。当cu_sbt_horizontal_flag的值为1时，表示应用使用与编码块的顶侧和底侧平行的至少一条分区线的水平方向分区。当cu_sbt_horizontal_flag的值为0时，表示应用使用与编码块的左侧和右侧平行的至少一条分区线的垂直方向分区。
根据编码块的尺寸或形状，可确定编码块的分区形状。在示例中，当编码块的宽度或高度中的至少一个等于或大于第一阈值时，四叉树分区可以是可用的。在示例中，第一阈值可以是诸如4、8或16的自然数。第一阈值可被称为四叉树阈值。
当确定四叉树分区可用时，可在比特流中用信号传送语法cu_sbt_quadtree_flag。根据解析的cu_sbt_quadtree_flag的值，可确定是否将四叉树分区应用于编码块。
当确定四叉树分区不可用时，可省略语法cu_sbt_quadtree_flag的信号传送。当省略语法cu_sbt_quadtree_flag的信号传送时，可确定将二叉树分区应用于编码块。
表格14示出用于确定是否对语法cu_sbt_quadtree_flag进行解析的语法结构。
[表格14]
在表格14中，基于四叉树阈值确定变量allowSbtVerQ和allowSbtHorQ。在示例中，当四叉树阈值为16时，allowSbtVerQ表示基于编码块的宽度是16或大于16而确定的变量，并且allowSbtorQ表示基于编码块的高度是16或大于16而确定的变量。
如在表格14所示出的示例中，当两个变量allowSbtVerQ和allowSbtHorQ都为真时，可在比特流中对语法cu_sbt_quad_flag进行解析。在示例中，当编码块为16×8时，将变量allowSbtHorQ设置为假，因此可省略语法cu_sbt_quad_flag的解析。可选地，当编码块为8×16时，将变量allowSbtVerQ设置为假，因此可省略对语法cu_sbt_quad_flag的解析。当省略语法cu_sbt_quad_flag的解析时，可将二叉树分区应用于编码块。
表格14示出仅在编码块的宽度和高度两者都等于或大于四叉树阈值时四叉树分区可用。与所示出的不同，当编码块的宽度和高度中的任何一个等于或大于四叉树阈值时，可将四叉树分区设置为可用。
可选地，尽管编码块的宽度或高度中的任何一个等于或大于第一阈值，但当编码块的宽度或高度中的另一个等于或小于第二阈值时，可确定编码块的四叉树分区不可用。在这种情况下，第二阈值可具有小于第一阈值的值。在示例中，第二阈值可以是诸如2、4或8的自然数。
当编码块的高度等于或大于阈值时，可将水平方向上的二叉树分区设置为可用。当编码块的宽度等于或大于阈值时，可将垂直方向上的二叉树分区设置为可用。在这种情况下，阈值可以是诸如4、8或16的自然数。
当水平方向上的二叉树分区和垂直方向上的二叉树分区两者可用时，可在比特流中用信号传送语法cu_sbt_horizontal_flag。另一方面，当仅水平方向上的二叉树分区和垂直方向上的二叉树分区中的任何一个可用时，可省略对语法cu_sbt_horizontal_flag的信号传送。当省略对语法cu_sbt_horizontal_flag的信号传送时，可将水平方向上的二叉树分区和垂直方向上的二叉树分区中的可用的一个应用于编码块。
可选地，可基于编码块的形状来确定是否允许四叉树分区。在示例中，可基于编码块的宽高比是否大于阈值来确定水平方向上的二叉树分区和垂直方向上的二叉树分区的可用性。阈值可以是自然数，诸如2、3或4等。
表格15示出根据编码块的形状确定是允许水平方向上的二叉树分区还是允许垂直方向上的二叉树分区的示例。
[表格15]
在表格15中，变量allowSbtHorQ表示是否允许水平方向上的二叉树分区，并且变量allowSbtVerQ表示是否允许垂直方向上的二叉树分区。当编码块的宽度大于高度的两倍时，可将allowSbtHorQ设置为假。换句话说，当编码块的宽度大于高度的两倍时，可以不允许水平方向上的二叉树分区。当编码块的高度大于宽度的两倍时，可将变量allowSbtVerQ设置为假。换句话说，当编码块的高度大于宽度的两倍时，可以不允许垂直方向上的二叉树分区。
当水平方向上的二叉树分区或垂直方向上的二叉树分区不可用时，可省略语法cu_sbt_horizontal_flag的信号传送。当省略语法cu_sbt_horizontal_flag的信号传送并且变量allowSbtHorQ为真时，可将水平方向上的二叉树分区应用于编码块。当省略语法cu_sbt_horizontal_flag的信号传送并且变量allowSbtVerQ为真时，可将垂直方向上的二叉树分区应用于编码块。
可在比特流中用信号传送用于指定多个子块当中的作为变换目标的子块的信息。在示例中，可在比特流中用信号传送语法cu_sbt_pos_flag。语法cu_sbt_pos_flag表示变换目标是否是编码块中的第一子块。在示例中，当水平方向上的二叉树分区被应用于编码块时，如果cu_sbt_flag为1，则将左侧子块确定为变换目标，如果cu_sbt_flag为0，则将右侧子块确定为变换目标。当将垂直方向上的二叉树分区被应用于编码块时，如果cu_sbt_flag为1，则将顶部子块确定为变换目标，如果cu_sbt_flag为0，则将底部子块确定为变换目标。
当四叉树分区被应用于编码块时，可用信号传送指定4个子块中的一个的索引cu_sbt_pos_idx来代替标志cu_sbt_pos_flag。语法cu_sbt_pos_idx可具有从0到3的值，并且具有由cu_sbt_pos_idx指示的索引的子块可被确定为变换目标。
可选地，当四叉树分区被应用时，可通过使用语法cu_sbt_horizontal_flag和语法cu_sbt_pos_flag来确定作为变换目标的子块。为此，尽管应用了四叉树分区，但是可用信号传送语法cu_sbt_horizontal_flag。在示例中，当语法cu_sbt_horizontal_flag为1时，其表示可选择2个顶部子块或2个左侧子块中的一个作为变换目标，当语法cu_sbt_horizontal_flag为0时，其表示可选择2个底部子块或2个右侧子块中的一个作为变换目标。当语法cu_sbt_flag为1时，其表示选择2个子块中的第一子块作为变换目标，当语法cu_sbt_flag为0时，其表示选择2个子块中的第二子块作为变换目标。
可选地，当将编码块分区为4个子块时，可选择多个子块作为变换目标。多个子块可在水平或垂直方向上彼此邻近。
可通过考虑编码块的分区方向和子块的位置来确定子块的变换类型。在示例中，当沿垂直方向对编码块进行分区并且针对子块中的左侧位置处的子块执行变换时，可不同地设置水平方向变换类型和垂直方向变换类型。
图51和图52示出根据作为变换目标的子块的位置的水平方向变换类型和垂直方向变换类型。
在图51所示出的示例中，当作为变换的目标的子块包括编码块的左上方样点或右下方样点时，可将水平方向变换类型和垂直方向变换类型设置为相同。在示例中，图51所示出的示例示出当作为变换的目标的子块包括编码块的左上方样点时，将水平方向变换类型和垂直方向变换类型设置为DCT8，当作为变换的目标的子块包括编码块的右下方样点时，将水平方向变换类型和垂直方向变换类型设置为DST7。
当作为变换目标的子块包括编码块的右上方样点或左下方样点时，可不同地设置水平方向变换类型和垂直方向变换类型。在示例中，图51所示出的示例示出当作为变换目标的子块包括编码块的右上方样点时，将水平方向变换类型设置为DST7，并且将垂直方向变换类型设置为DCT8。当作为变换目标的子块包括编码块的左下方样点时，将水平方向变换类型设置为DCT8，并且将垂直方向变换类型设置为DST7。
与图51所示出的示例不同，当编码块中的包括左上方样点的子块或包括右下方样点的子块被确定为变换目标时，可不同地设置水平方向变换类型和垂直方向变换类型，当编码块中的包括右上方样点的子块或包括左下方样点的子块被确定为变换目标时，可相同地设置水平方向变换类型和垂直方向变换类型。
在图52所示出的示例中，当作为变换目标的子块包括编码块的左上方样点时，可不同地设置水平方向变换类型和垂直方向变换类型。在示例中，在图52中所示出的示例中，当水平方向上的二叉树分区被应用并且顶部子块被确定为变换目标时，可将水平方向变换类型设置为DST7，并且可将垂直方向变换类型设置为DCT7。当垂直方向上的二叉树分区被应用并且左侧子块被确定为变换目标时，可将水平方向变换类型设置为DCT8，并且可将垂直方向变换类型设置为DST7。
与图52所示出的示例不同，当作为变换的目标的子块包括编码块的左上方样点时，可将水平方向变换类型和垂直方向变换类型设置为相同，当作为变换的目标的子块包括编码块的右下方样点时，可将水平方向变换类型和垂直方向变换类型设置为不同。
当作为变换目标的子块包括编码块的右下方样点时，可将水平方向变换类型和垂直方向变换类型设置为相同。在示例中，在图52中所示出的示例中，当水平方向上的二叉树分区被应用并且底部子块被确定为变换目标时，可将水平方向变换类型和垂直方向变换类型设置为DST7。当垂直方向上的二叉树分区被应用并且右侧子块被确定为变换目标时，可将水平方向变换类型和垂直方向变换类型设置为DST7。
如在上述示例中，可根据编码块中的作为变换目标的子块的位置来确定是否将水平方向变换类型和垂直方向变换类型设置为相同。另外，可根据编码块中的作为变换目标的子块的位置来确定水平方向变换类型和垂直方向变换类型。
针对子块，可省略对表示是否存在非零系数(例如，CBF)的信息的编码。当省略对CBF的编码时，可基于执行变换的块的位置来确定在每一个子块中是否包括非零残差系数。在示例中，当被应用二叉树分区的编码块中的右侧或底部位置处的子块被确定为变换目标时，可推断针对左侧或顶部位置处的子块的CBF值为0，并且可推断针对右侧或底部位置处的子块的CBF值为1。可选地，当被应用二叉树分区的编码块中的左侧或底部位置处的子块被确定为变换目标时，可推断针对左侧或顶部位置处的子块的CBF值为1，并且可推断针对右侧或底部位置处的子块的CBF值为0。
可通过预测样点与残差样点的总和推导执行变换的子块的重建样点。另一方面，可将预测样点设置为在省略掉变换的子块中的重建样点。量化是为了减少块的能量，并且量化处理包括将变换系数除以特定常数值的处理。可由量化参数推导常数值，并且量化参数可被定义为从1至63的值。
当在编码装置中执行变换和量化时，解码装置可通过反量化和逆变换获得残差块。可通过在解码装置中将预测块与残差块相加来获得当前块的重建块。
在当前块的重建块被获得时，可经由环路内滤波来减少在量化和编码处理时发生的信息损失。环路滤波器可包括去块滤波器、样点自适应偏移滤波器(SAO)或自适应环路滤波器(ALF)中的至少一个。在下文中，在应用环路内滤波器之前的重建块被称为第一重建块，并且在应用环路内滤波器之后的重建块被称为第二重建块。
可通过将去块滤波器、SAO或ALF中的至少一个应用于第一重建块来获得第二重建块。在此情况下，可在应用去块滤波器之后应用SAO或ALF。
将如关于解码处理或编码处理所描述的实施例分别应用于编码处理或解码护理可被包括在本公开的范围内。在本公开的范围内，其中，按照预定顺序进行操作的实施例可被修改为按照与预定顺序不同的顺序进行操作的实施例。
尽管基于一系列操作或流程图描述了上述实施例，但是实施例不将方法的操作的时间序列顺序限制于此。在另一示例中，操作可根据需要同时被执行或按照与其不同的顺序被执行。此外，在上述实施例中，构成框图的组件中的每一个(例如，单元、模块等)可以以硬件装置或软件的形式来实现。多个组件可彼此组合成单个组件，其中，所述单个组件可使用单个硬件装置或软件来实现。可使用可经由各种计算机组件执行的程序指令来实现上述实施例。指令可被记录在计算机可读存储介质中。计算机可读存储介质可在其中单独地或彼此组合地包括程序指令、数据文件、数据结构等。计算机可读存储介质的示例包括磁介质(诸如硬盘、软盘和磁带)、光存储介质(诸如CD-ROM、DVD)和磁光介质(诸如光软盘)、以及硬件装置(诸如ROM、RAM、闪存等)，其被特别配置为在其中存储并执行程序指令。硬件装置可被配置为作为一个或更多个软件模块进行操作以执行根据本公开的处理，反之亦然。
[工业实用性]
本公开可被应用于对视频进行编码/解码的电子装置。
Claims (10)
1.一种视频解码方法，包括：
通过参考通过序列参数集用信号传送的表示是否允许帧内BDPCM(基于块的增量脉冲编码调制)的第一标志来确定是否对表示是否将所述帧内BDPCM应用于当前块的第二标志进行解析；
基于第二标志确定是否将所述帧内BDPCM应用于所述当前块；
当确定将所述帧内BDPCM应用于所述当前块时，确定所述当前块的帧内BDPCM模式；以及
基于所述帧内BDPCM模式获得所述当前块的残差样点。
2.根据权利要求1所述的方法，其中，所述帧内BDPCM模式被确定为水平方向或垂直方向。
3.根据权利要求2所述的方法，其中，所述残差样点是通过将与所述残差样点相邻的邻近残差样点与从比特流解码的残差差值相加被推导出的。
4.根据权利要求1所述的方法，其中，当将所述帧内BDPCM应用于所述当前块时，强制将变换跳过应用于所述当前块。
5.根据权利要求1所述的方法，其中，当将所述帧内BDPCM应用于所述当前块时，在推导针对与所述当前块的右侧或底部相邻的邻近块的MPM(最可能模式)候选时，推断所述当前块的帧内预测模式具有水平方向或垂直方向。
6.一种视频编码方法，包括：
确定是否将帧内BDPCM(基于块的增量脉冲编码调制)应用于当前块；
当确定将所述帧内BDPCM应用于所述当前块时，确定所述当前块的帧内BDPCM模式；
基于所述帧内BDPCM模式获得所述当前块的残差样点；以及
基于所述帧内BDPCM是否已经被应用于所述当前块，对表示是否应用所述帧内BDPCM的信息进行编码；
其中，所述信息包括序列参数集中所包括的第一标志和基于第一标志的值选择性地解析的第二标志。
7.根据权利要求6所述的方法，其中，所述帧内BDPCM模式被确定为水平方向或垂直方向。
8.根据权利要求7所述的方法，其中，所述残差样点的残差系数是通过从与所述残差样点相邻的邻近残差样点减去所述残差样点被推导出的。
9.根据权利要求6所述的方法，其中，当将所述帧内BDPCM应用于所述当前块时，强制将变换跳过应用于所述当前块。
10.根据权利要求6所述的方法，其中，当将所述帧内BDPCM应用于所述当前块时，在推导与所述当前块的右侧或底部相邻的邻近块的MPM(最可能模式)候选时，推断所述所述当前块的帧内预测模式具有水平方向或垂直方向。
Applications Claiming Priority (5)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR20190023615 | 2019-02-28 | ||
| KR10-2019-0023615 | 2019-02-28 | ||
| KR10-2019-0073785 | 2019-06-20 | ||
| KR20190073785 | 2019-06-20 | ||
| PCT/KR2020/002838 WO2020175938A1 (ko) | 2019-02-28 | 2020-02-27 | 영상 신호 부호화/복호화 방법 및 이를 위한 장치 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN112740677A true CN112740677A (zh) | 2021-04-30 |
Family
ID=72240137
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202080005092.6A Pending CN112740677A (zh) | 2019-02-28 | 2020-02-27 | 用于对图像信号进行编码/解码的方法及其装置 |
Country Status (5)
| Country | Link |
|---|---|
| US (3) | US11711534B2 (zh) |
| KR (2) | KR102608847B1 (zh) |
| CN (1) | CN112740677A (zh) |
| MX (1) | MX2021010159A (zh) |
| WO (1) | WO2020175938A1 (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113574894A (zh) * | 2019-04-30 | 2021-10-29 | 腾讯美国有限责任公司 | 用于帧内预测模式与块差分脉冲编码调制模式之间交互的方法和装置 |
Families Citing this family (22)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10284844B1 (en) * | 2018-07-02 | 2019-05-07 | Tencent America LLC | Method and apparatus for video coding |
| WO2020175938A1 (ko) | 2019-02-28 | 2020-09-03 | 주식회사 엑스리스 | 영상 신호 부호화/복호화 방법 및 이를 위한 장치 |
| BR112021017154A2 (pt) * | 2019-03-05 | 2021-11-09 | Fraunhofer Ges Forschung | Aparelho que compreende um codificador ou decodificador, método para codificar ou decodificar dados de imagem ou de vídeo e produto de programa de computador |
| JP7145793B2 (ja) * | 2019-03-11 | 2022-10-03 | Kddi株式会社 | 画像復号装置、画像復号方法及びプログラム |
| CN116939199A (zh) * | 2019-03-11 | 2023-10-24 | 日本放送协会 | 图像编码装置、图像解码装置和程序 |
| KR20210137058A (ko) * | 2019-03-22 | 2021-11-17 | 엘지전자 주식회사 | 영상 코딩 시스템에서 인트라 예측 기반 영상 디코딩 방법 및 그 장치 |
| CN113785588B (zh) * | 2019-04-12 | 2023-11-24 | 北京字节跳动网络技术有限公司 | 基于矩阵的帧内预测的色度编解码模式确定 |
| CN113748676B (zh) | 2019-04-16 | 2024-05-10 | 北京字节跳动网络技术有限公司 | 帧内编解码模式下的矩阵推导 |
| WO2020219733A1 (en) | 2019-04-24 | 2020-10-29 | Bytedance Inc. | Quantized residual differential pulse code modulation representation of coded video |
| CN113812150B (zh) | 2019-05-01 | 2023-11-28 | 北京字节跳动网络技术有限公司 | 使用滤波的基于矩阵的帧内预测 |
| WO2020221372A1 (en) * | 2019-05-01 | 2020-11-05 | Beijing Bytedance Network Technology Co., Ltd. | Context coding for matrix-based intra prediction |
| WO2020223612A1 (en) * | 2019-05-02 | 2020-11-05 | Bytedance Inc. | Signaling in transform skip mode |
| WO2020228717A1 (en) | 2019-05-13 | 2020-11-19 | Beijing Bytedance Network Technology Co., Ltd. | Block dimension settings of transform skip mode |
| CN113853787B (zh) * | 2019-05-22 | 2023-12-22 | 北京字节跳动网络技术有限公司 | 基于子块使用变换跳过模式 |
| WO2020235960A1 (ko) * | 2019-05-22 | 2020-11-26 | 엘지전자 주식회사 | Bdpcm 에 대한 영상 디코딩 방법 및 그 장치 |
| KR20220011127A (ko) * | 2019-05-22 | 2022-01-27 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 업샘플링을 이용한 행렬 기반 인트라 예측 |
| JP2022535726A (ja) | 2019-05-31 | 2022-08-10 | 北京字節跳動網絡技術有限公司 | 行列ベースイントラ予測における制約されたアップサンプリングプロセス |
| CN113906742B (zh) * | 2019-06-03 | 2024-07-02 | Lg电子株式会社 | 基于矩阵的帧内预测装置和方法 |
| JP2022534320A (ja) | 2019-06-05 | 2022-07-28 | 北京字節跳動網絡技術有限公司 | マトリクスベースイントラ予測のためのコンテキスト決定 |
| CN117579823A (zh) | 2019-10-28 | 2024-02-20 | 北京字节跳动网络技术有限公司 | 基于颜色分量的语法信令通知和解析 |
| US20230069984A1 (en) * | 2021-08-24 | 2023-03-09 | Tencent America LLC | Hardware friendly design for intra mode coding |
| WO2023090932A1 (ko) * | 2021-11-18 | 2023-05-25 | 엘지전자 주식회사 | 영상 인코딩/디코딩 방법 및 장치, 그리고 비트스트림을 저장한 기록 매체 |
Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1629437A2 (en) * | 2003-05-20 | 2006-03-01 | AMT Advanced Multimedia Technology AB | Hybrid digital video compression |
| WO2009067741A1 (en) * | 2007-11-27 | 2009-06-04 | Acouity Pty Ltd | Bandwidth compression of parametric soundfield representations for transmission and storage |
| WO2018026118A1 (ko) * | 2016-08-01 | 2018-02-08 | 한국전자통신연구원 | 영상 부호화/복호화 방법 |
Family Cites Families (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20140080884A (ko) * | 2012-12-20 | 2014-07-01 | 주식회사 팬택 | 계층적 비디오 코딩에서 색차 블록의 화면 내 예측 모드를 복호화하는 방법 및 이러한 방법을 사용하는 장치 |
| US11323747B2 (en) * | 2013-06-05 | 2022-05-03 | Qualcomm Incorporated | Residual differential pulse code modulation (DPCM) extensions and harmonization with transform skip, rotation, and scans |
| WO2015057438A1 (en) | 2013-10-14 | 2015-04-23 | Mediatek Singapore Pte. Ltd. | Method of residue differential pulse-code modulation for hevc range extension |
| KR101768173B1 (ko) * | 2014-02-13 | 2017-08-16 | 한국전자통신연구원 | 영상 부호화에서의 화면 내 예측 생략 방법 및 장치 |
| EP4013051A1 (en) | 2015-06-05 | 2022-06-15 | Dolby Laboratories Licensing Corporation | Methods for encoding and decoding intra-frame prediction |
| WO2020175938A1 (ko) | 2019-02-28 | 2020-09-03 | 주식회사 엑스리스 | 영상 신호 부호화/복호화 방법 및 이를 위한 장치 |
-
2020
- 2020-02-27 WO PCT/KR2020/002838 patent/WO2020175938A1/ko active Application Filing
- 2020-02-27 MX MX2021010159A patent/MX2021010159A/es unknown
- 2020-02-27 US US17/265,418 patent/US11711534B2/en active Active
- 2020-02-27 KR KR1020200024509A patent/KR102608847B1/ko active IP Right Grant
- 2020-02-27 CN CN202080005092.6A patent/CN112740677A/zh active Pending
-
2023
- 2023-04-19 US US18/136,572 patent/US11936895B2/en active Active
- 2023-11-28 KR KR1020230168150A patent/KR20230165189A/ko active Application Filing
-
2024
- 2024-02-09 US US18/437,671 patent/US20240187629A1/en active Pending
Patent Citations (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| EP1629437A2 (en) * | 2003-05-20 | 2006-03-01 | AMT Advanced Multimedia Technology AB | Hybrid digital video compression |
| WO2009067741A1 (en) * | 2007-11-27 | 2009-06-04 | Acouity Pty Ltd | Bandwidth compression of parametric soundfield representations for transmission and storage |
| WO2018026118A1 (ko) * | 2016-08-01 | 2018-02-08 | 한국전자통신연구원 | 영상 부호화/복호화 방법 |
Non-Patent Citations (2)
| Title |
|---|
| ABDOLI MOHSEN ET AL.: "AHG11: Block DPCM for Screen Content Coding", 12TH MEETING- JOINT VIDEO EXPERTS TEAM (JVET), 12 October 2018 (2018-10-12), pages 1 - 7 * |
| ABDOLI MOHSEN ET AL.: "CE8: BDPCM with horizontal/vertical predictor and independently decodable areas (test 8.3.1b)", 13TH MEETING- JOINT VIDEO EXPERTS TEAM (JVET), 18 January 2019 (2019-01-18), pages 1 - 7 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113574894A (zh) * | 2019-04-30 | 2021-10-29 | 腾讯美国有限责任公司 | 用于帧内预测模式与块差分脉冲编码调制模式之间交互的方法和装置 |
| CN113574894B (zh) * | 2019-04-30 | 2024-02-20 | 腾讯美国有限责任公司 | 视频解码方法、视频解码器、计算机设备及介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| US11936895B2 (en) | 2024-03-19 |
| KR20230165189A (ko) | 2023-12-05 |
| KR102608847B1 (ko) | 2023-12-04 |
| MX2021010159A (es) | 2021-09-14 |
| US20240187629A1 (en) | 2024-06-06 |
| US20210306654A1 (en) | 2021-09-30 |
| US20240015317A1 (en) | 2024-01-11 |
| WO2020175938A1 (ko) | 2020-09-03 |
| US11711534B2 (en) | 2023-07-25 |
| KR20200105434A (ko) | 2020-09-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR102608847B1 (ko) | 영상 신호 부호화/복호화 방법 및 이를 위한 장치 | |
| CN112673637A (zh) | 用于对图像信号进行编码/解码的方法及其装置 | |
| JP7500691B2 (ja) | ビデオ信号の符号化／復号化方法及び前記方法のための装置 | |
| CN112425160B (zh) | 用于对视频信号进行编码/解码的方法及其设备 | |
| US20230283773A1 (en) | Video signal encoding/decoding method and device therefor | |
| CN112514380A (zh) | 用于对视频信号进行编码/解码的方法及其设备 | |
| CN113382234B (zh) | 视频信号编码/解码方法以及用于所述方法的设备 | |
| CN113170130A (zh) | 图像信号编码/解码方法及其装置 | |
| CN113347429A (zh) | 图像信号编码/解码方法及其设备 | |
| CN112930683A (zh) | 用于对图像信号进行编码/解码的方法及其设备 | |
| CN113574878A (zh) | 用于对视频信号进行编码/解码的方法及其设备 | |
| US20220007035A1 (en) | Image signal encoding/decoding method and device therefor | |
| CN113039799B (zh) | 图像信号编码/解码方法及其设备 | |
| CN112789860A (zh) | 用于对图像信号进行编码/解码的方法及其装置 | |
| CN112236998A (zh) | 用于对视频信号进行编码/解码的方法及其装置 | |
| CN112544083A (zh) | 图像信号编码/解码方法及用于其的装置 | |
| CN112470479A (zh) | 图像信号编码/解码方法及其装置 | |
| CN113170199B (zh) | 用于对图像信号进行编码/解码的方法及其装置 | |
| CN112970251A (zh) | 用于对图像信号进行编码/解码的方法及其装置 | |
| CN113439439A (zh) | 用于对图像信号进行编码/解码的方法及其装置 | |
| CN116112684A (zh) | 用于对图像信号进行编码/解码的方法及其装置 | |
| CN112956198A (zh) | 用于对图像信号进行编码/解码的方法及其装置 | |
| CN112236996B (zh) | 视频信号编码/解码方法及其装置 | |
| CN113287310A (zh) | 用于对图像信号进行编码/解码方法及其装置 | |
| CN112236996A (zh) | 视频信号编码/解码方法及其装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| TA01 | Transfer of patent application right | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20220414 Address after: California, USA Applicant after: APPLE Inc. Address before: Gyeonggi Do city of South Korea Applicant before: Xris Co.,Ltd. |