CN113812149A - 图像编译系统中的图像解码方法和设备以及图像编码方法和设备 - Google Patents
图像编译系统中的图像解码方法和设备以及图像编码方法和设备 Download PDFInfo
- Publication number
- CN113812149A CN113812149A CN202080028234.0A CN202080028234A CN113812149A CN 113812149 A CN113812149 A CN 113812149A CN 202080028234 A CN202080028234 A CN 202080028234A CN 113812149 A CN113812149 A CN 113812149A
- Authority
- CN
- China
- Prior art keywords
- intra prediction
- prediction mode
- current block
- mode
- mpm
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 229
- 239000000523 sample Substances 0.000 claims description 159
- 238000005192 partition Methods 0.000 claims description 128
- 239000013074 reference sample Substances 0.000 claims description 111
- 230000008569 process Effects 0.000 abstract description 84
- 241000023320 Luma <angiosperm> Species 0.000 description 35
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 description 35
- 238000001914 filtration Methods 0.000 description 31
- 238000010276 construction Methods 0.000 description 17
- 239000013598 vector Substances 0.000 description 13
- 230000003044 adaptive effect Effects 0.000 description 11
- 238000013139 quantization Methods 0.000 description 8
- 238000000638 solvent extraction Methods 0.000 description 8
- 230000009466 transformation Effects 0.000 description 8
- 230000002123 temporal effect Effects 0.000 description 7
- 238000004891 communication Methods 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 4
- 230000002457 bidirectional effect Effects 0.000 description 4
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 230000011664 signaling Effects 0.000 description 4
- 238000003491 array Methods 0.000 description 3
- 230000014509 gene expression Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000002146 bilateral effect Effects 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 239000011159 matrix material Substances 0.000 description 2
- 238000005457 optimization Methods 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000009795 derivation Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 239000004984 smart glass Substances 0.000 description 1
- 230000000153 supplemental effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000013316 zoning Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
Abstract
根据本文件的实施例，可以通过针对帧内预测类型构建共同的帧内预测模式列表的过程来构建当前块的帧内预测模式候选列表。因此，减少了在构建帧内预测模式列表的过程中的帧内预测类型的依赖性，从而可以提高帧内预测的编译效率。
Description
技术领域
本公开涉及一种图像编译技术，更具体地，涉及一种用于通过在图像编译系统中，从多个帧内预测类型导出帧内预测模式候选列表来执行帧内预测的图像解码方法和装置。
背景技术
近来，在各种领域中，对诸如HD(高清)图像和UHD(超高清)图像这样的高分辨率、高质量图像的需求正在增长。因为图像数据具有高分辨率和高质量，所以相对于传统图像数据，待传输的信息或比特的量增加。因此，当使用诸如传统有线/无线宽带线路这样的介质发送图像数据或者使用现有存储介质存储图像数据时，其传输成本和存储成本增加。
因此，需要用于有效地发送、存储和再现高分辨率高质量图像的信息的高效图像压缩技术。
发明内容
技术问题
本公开的技术目的是提供一种提高图像编译效率的方法和装置。
本公开的另一个目的是提供一种提高帧内预测的效率的方法和装置。
本公开的另一个目的是提供一种用于在构建用于导出帧内预测模式的帧内预测模式候选列表中，将相同的构建过程应用于帧内预测类型的方法和装置。
本公开的另一目的是提供一种用于考虑参考线索引来导出在DC帧内预测模式中使用的参考样本的方法和装置。
技术方案
根据本公开的实施例，提供了一种由解码装置执行的图像解码方法。该方法包括：接收包括用于当前块的预测相关信息的图像信息并且基于图像信息生成当前块的重构样本。
根据本公开的另一实施例，提供了一种执行图像解码的解码装置。解码装置包括：熵解码器，被配置为接收包括用于当前块的预测相关信息的图像信息；以及预测器，被配置为基于图像信息生成当前块的重构样本。
根据本公开的另一实施例，提供了一种由编码装置执行的图像编码方法。该方法包括：生成当前块的重构样本、生成用于当前块的预测相关信息以及对包括预测相关信息的图像信息进行编码。
根据本公开的另一实施例，提供了一种图像编码装置。该编码装置包括：预测器，被配置为生成当前块的重构样本；以及熵编码器，被配置为生成用于当前块的预测相关信息，以对包括预测相关信息的图像信息进行编码。
有益效果
根据本公开，可以提高整体图像/视频压缩效率。
根据本公开，可以使用针对帧内预测类型的统一帧内预测模式列表构建过程来降低硬件和软件实现复杂度。
根据本公开，可以通过使用针对帧内预测类型的统一帧内预测模式列表构建过程来减少对帧内预测类型的依赖性，提高帧内预测编译效率。
根据本公开，可以通过基于参考图片索引导出在应用MRL并且将帧内预测模式导出为DC帧内预测模式时使用的参考样本来提高帧内预测的编译效率。
根据本公开，可以通过基于参考图片索引和当前块的形状导出在应用MRL并且将帧内预测模式导出为DC帧内预测模式时使用的参考样本来提高帧内预测的编译效率。
根据本公开，可以通过基于参考图片索引导出在应用MRL并且将帧内预测模式导出为平面帧内预测模式时使用的参考样本来提高帧内预测的编译效率。
附图说明
图1简要图示了可应用本公开的实施例的视频/图像编译设备的示例。
图2是图示了可以应用本公开的实施例的视频/图像编码装置的配置的示意图。
图3是图示了可以应用本公开的实施例的视频/图像解码装置的配置的示意图。
图4示意性地示出了编译图像/视频的层级结构。
图5示意性地示出了用于编码语法元素的上下文自适应二进制算术编译(CABAC)。
图6图示了基于帧内预测的视频/图像编码方法的示例。
图7图示了基于帧内预测的视频/图像解码方法的示例。
图8示意性地示出了帧内预测过程。
图9图示了65个预测方向中的帧内定向模式。
图10图示了可以在MRL中使用的多条参考线。
图11图示了基于块大小，将应用了ISP的块分区为子块的示例。
图12图示了根据应用的帧内预测导出MPM列表的示例。
图13图示了根据本实施例的构建当前块的MPM列表并且导出帧内预测模式的示例。
图14图示了根据本实施例的基于帧内预测的编码的示例。
图15图示了根据本实施例的基于帧内预测的编码的示例。
图16图示了根据本实施例的基于帧内预测的编码的示例。
图17图示了在当前块的帧内预测类型是MRL并且当前块的帧内预测模式是DC帧内预测模式时，用于导出DC值的参考样本。
图18图示了在当前块的帧内预测类型是MRL并且当前块的帧内预测模式是平面帧内预测模式时使用的参考样本。
图19图示了在当前块的帧内预测类型是MRL并且当前块的帧内预测模式是DC帧内预测模式时，用于导出DC值的参考样本。
图20图示了在当前块的帧内预测类型是MRL并且当前块的帧内预测模式是平面帧内预测模式时使用的参考样本。
图21示意性地图示了由根据本公开的编码装置执行的图像编码方法。
图22示意性地图示了执行根据本公开的图像编码方法的编码装置。
图23示意性地图示了由根据本公开的解码装置执行的图像解码方法。
图24示意性地图示了执行根据本公开的图像解码方法的解码装置。
图25图示了应用本公开的内容流传输系统的结构图。
具体实施方式
本公开可以以各种形式修改，并且将在附图中描述和例示其特定实施例。然而，实施例并非旨在限制本公开。在以下描述中使用的术语仅用于描述特定实施例，并非旨在限制本公开。只要清楚地以不同的方式理解，单数的表达包括复数的表达。诸如“包括”和“具有”之类的术语旨在表示存在以下描述中使用的特征、数目、步骤、操作、元件、组件或其组合，因此应理解的为不排除存在或添加一个或更多个不同的特征、数目、步骤、操作、元件、组件或其组合的可能性。
同时，本发明所描述的附图中的元件是为了便于说明不同的具体功能而独立绘制的，并不意味着这些元件由独立的硬件或独立的软件来体现。例如，可以将这些元件中的两个或更多个元件组合以形成单个元件，或者可以将一个元件划分为多个元件。组合和/或划分元件的实施例属于本公开。
本公开涉及视频/图像编译。例如，本公开中公开的方法/实施例可以应用于通用视频编译(VVC)中公开的方法。此外，本公开中公开的方法/实施例可以应用于EVC(基本视频编译)标准、AOMedia Video1(AV1)标准、第2代音频视频编译标准(AVS2)或下一代视频/图像编译标准(例如，H.267、或H.268等)中公开的方法。
本公开呈现了视频/图像编译的各种实施例，并且除非另外提及，否则实施例可以彼此组合地执行。
在下文中，将参照附图详细地描述本公开的实施例。另外，在整个附图中，相似的附图标记用于指示相似的元件，并且将省略对相似元件的相同描述。
图1简要图示了可应用本公开的实施例的视频/图像编译设备的示例。
参照图1，视频/图像编译系统可以包括第一设备(源设备)和第二设备(接收设备)。源设备可以经由数字存储介质或网络以文件或流的形式向接收设备发送编码视频/图像信息或数据。
源设备可以包括视频源、编码装置和发送器。接收设备可以包括接收器、解码装置和渲染器。编码装置可以称为视频/图像编码装置，并且解码装置可以称为视频/图像解码装置。发送器可以包括在编码装置中。接收器可以包括在解码装置中。渲染器可以包括显示器，并且显示器可以被配置为单独的设备或外部组件。
视频源可以通过捕获、合成或生成视频/图像的处理来获取视频/图像。视频源可以包括视频/图像捕获设备和/或视频/图像生成设备。视频/图像捕获设备可以包括例如一个或更多个相机、包括先前捕获的视频/图像的视频/图像档案等。视频/图像生成设备可以包括例如计算机、平板电脑和智能电话，并且可以(电子地)生成视频/图像。例如，可以通过计算机等生成虚拟视频/图像。在这种情况下，视频/图像捕获处理可以由生成相关数据的处理代替。
编码装置可以对输入的视频/图像进行编码。编码装置可以执行诸如预测、变换和量化的一系列过程，以实现压缩和编译效率。编码数据(编码视频/图像信息)可以以比特流的形式输出。
发送器可以通过数字存储介质或网络以文件或流的形式向接收设备的接收器发送以比特流形式输出的编码后的图像/图像信息或数据。数字存储介质可以包括诸如USB、SD、CD、DVD、蓝光、HDD、SSD等的各种存储介质。发送器可以包括用于通过预定文件格式生成媒体文件的元件，并且可以包括用于通过广播/通信网络进行发送的元件。接收器可以接收/提取比特流，并向解码装置发送接收到的比特流。
解码装置可以通过执行与编码装置的操作相对应的诸如解量化、逆变换和预测之类的一系列过程，来对视频/图像进行解码。
渲染器可以渲染经解码的视频/图像。经渲染的视频/图像可以通过显示器显示。
在本公开中，视频可以是指随时间推移的一系列图像。通常，图片是指表示特定时间区中的一个图像的单元，并且切片(slice)/图块(tile)是构成编译中的图片的一部分的单元。切片/图块可以包括一个或多个编译树单元(CTU)。一个图片可以由一个或多个切片/图块构成。图块是图片中的特定图块列和特定图块行内的CTU的矩形区域。图块列是CTU的矩形区域，该矩形区域的高度等于图片的高度并且宽度由图片参数集中的语法元素指定。图块行是CTU的矩形区域，该矩形区域的高度由图片参数集中的语法元素指定并且宽度等于图片的宽度。图块扫描是对图片进行分区的CTU的特定顺序排序，其中，可以在图块中按CTU光栅扫描对CTU进行连续排序，而可以按图片的图块的光栅扫描对图片中的图块进行连续排序。切片可以包括整数个完整图块或图片的图块内的整数个连续完整CTU行，其可排他地包含在单个NAL单元中。
同时，图片可以被划分为两个或更多个子图片。子图片可以是图片内一个或多个切片的矩形区域。
像素或像元(pel)可以表示组成一个图片(或图像)的最小单位。另外，“样本”可以用作与像素相对应的术语。样本通常可以表示像素或像素值，并且可以仅表示亮度分量的像素/像素值或仅表示色度分量的像素/像素值。
单元可以表示图像处理的基本单位。单元可以包括图片的特定区域和与该区域有关的信息中的至少一个。一个单元可以包括一个亮度块和两个色度(例如，cb、cr)块。在一些情况下，单元可以与诸如块或区域之类的术语互换使用。在一般情况下，M×N块可以包括M列和N行的样本(或样本阵列)或变换系数的集合(或阵列)。
在本说明书中，“A或B”可以是指“仅A”、“仅B”或“A和B”。换言之，在本说明书中，“A或B”可以被解释为“A和/或B”。例如，“A、B或C”在本文中是指“仅A”、“仅B”、“仅C”或“A、B和C的任何一个和任何组合”。
本说明书中使用的斜线(/)或逗号(comma)可以是指“和/或”。例如，“A/B”可以是指“A和/或B”。因此，“A/B”可以是指“仅A”、“仅B”或“A和B”。例如，“A,B,C”可以是指“A、B或C”。
在本说明书中，“A和B中的至少一个”可以是指“仅A”、“仅B”或“A和B两者”。另外，在本说明书中，表述“A或B中的至少一个”或“A和/或B中的至少一个”可以被解释为与“A和B中的至少一个”相同。
另外，在本说明书中，“A、B和C中的至少一个”是指“仅A”、“仅B”、“仅C”或“A、B和C的任意组合”。此外，“A、B或C中的至少一个”或“A、B和/或C中的至少一个”可以是指“A、B和C中的至少一个”。
此外，本说明书中使用的括号可以是指“例如”。具体地，当指示“预测(帧内预测)”时，可能将“帧内预测”作为“预测”的示例提出。换言之，本说明书中的“预测”不限于“帧内预测”，可以将“帧内预测”作为“预测”的示例提出。此外，即使当指示“预测(即，帧内预测)”时，“帧内预测”也可以作为“预测”的示例提出。
在本说明书中，在单个附图中单独描述的技术特征可以单独实现或可以同时实现。
图2是图示可以应用本公开的实施例的视频/图像编码装置的配置的示意图。在下文中，编码装置可以包括图像编码装置和/或视频编码装置。此外，图像编码方法/装置可以包括视频编码方法/装置。可替代地，视频编码方法/装置可以包括图像编码方法/装置。
参照图2，编码装置200包括图像分割器210、预测器220、残差处理器230和熵编码器240、加法器250、滤波器260和存储器270。预测器220可以包括帧间预测器221和帧内预测器222。残差处理器230可以包括变换器232、量化器233、解量化器234和逆变换器235。残差处理器230还可以包括减法器231。加法器250可以称为重构器或重构块生成器。根据实施例，图像分割器210、预测器220、残差处理器230、熵编码器240、加法器250和滤波器260可以由至少一个硬件组件(例如，编码器芯片组或处理器)构成。另外，存储器270可以包括解码图片缓冲器(DPB)或者可以由数字存储介质构成。硬件组件还可以包括作为内部/外部组件的存储器270。
图像分割器210可以将输入到编码装置200的输入图像(或图片或帧)分区到一个或更多个处理器中。例如，处理器可以被称为编译单元(CU)。在这种情况下，可以根据四叉树二叉树三叉树(QTBTTT)结构从编译树单元(CTU)或最大编译单元(LCU)来递归地分区编译单元。例如，一个编译单元可以基于四叉树结构、二叉树结构和/或三元结构而被分区为深度更深的多个编译单元。在这种情况下，例如，可以首先应用四叉树结构，随后可以应用二叉树结构和/或三元结构。另选地，可以首先应用二叉树结构。可以基于不再分区的最终编译单元来执行根据本公开的编译过程。在这种情况下，可以根据图像特性基于编译效率将最大编译单元用作最终编译单元，或者如果需要，可以将编译单元递归地分区为深度更深的编译单元并且具有最佳大小的编译单元可以用作最终编译单元。这里，编译过程可以包括预测、变换和重构的过程，这将在后面描述。作为另一示例，处理器还可以包括预测单元(PU)或变换单元(TU)。在这种情况下，可以从上述最终编译单元来分割或分区预测单元和变换单元。预测单元可以是样本预测的单元，并且变换单元可以是用于导出变换系数的单元和/或用于从变换系数导出残差信号的单元。
在一些情况下，单元可以与诸如块或区域之类的术语互换使用。在一般情况下，M×N块可以表示由M列和N行组成的样本或变换系数的集合。样本通常可以表示像素或像素值，可以仅表示亮度分量的像素/像素值，或者仅表示色度分量的像素/像素值。样本可用作与像素或像元的一个图片(或图像)相对应的术语。
在编码装置200中，从输入图像信号(原始块、原始样本阵列)中减去从帧间预测器221或帧内预测器222输出的预测信号(预测块、预测样本阵列)，以生成残差信号(残差块、残差样本阵列)并且所生成的残差信号被发送到变换器232。在这种情况下，如图所示，在编码器200中用于从输入图像信号(原始块、原始样本阵列)减去预测信号(预测块、预测样本阵列)的单元可以称为减法器231。预测器可以对要处理的块(在下文中称为当前块)执行预测，并生成包括当前块的预测样本的预测块。预测器可以以当前块或CU为基础来确定是应用帧内预测还是应用帧间预测。如稍后在每个预测模式的描述中所述，预测器可以生成与预测有关的、诸如预测模式信息之类的各种信息，并向熵编码器240发送所生成的信息。关于预测的信息可以在熵编码器240中编码并以比特流的形式输出。
帧内预测器222可以通过参考当前图片中的样本来预测当前块。根据预测模式，参考的样本可以位于当前块的附近，或者可以远离当前块。在帧内预测中，预测模式可以包括多个非定向模式和多个定向模式。非定向模式可以包括例如DC模式和平面模式。根据预测方向的详细程度，定向模式可以包括例如33个定向预测模式或65个定向预测模式。然而，这仅是示例，依据设置，可以使用更多或更少的定向预测模式。帧内预测器222可以通过使用应用于相邻块的预测模式来确定应用于当前块的预测模式。
帧间预测器221可以基于由参考图片上的运动矢量指定的参考块(参考样本阵列)来导出当前块的预测块。这里，为了减少在帧间预测模式下发送的运动信息的量，可以基于相邻块和当前块之间的运动信息的相关性，以块、子块或样本为单位来预测运动信息。运动信息可以包括运动矢量和参考图片索引。运动信息还可包括帧间预测方向(L0预测、L1预测、Bi预测等)信息。在帧间预测的情况下，相邻块可以包括存在于当前图片中的空间相邻块和存在于参考图片中的时间相邻块。包括参考块的参考图片和包括时间相邻块的参考图片可以相同或不同。时间相邻块可以称为并置参考块、共位CU(colCU)等，并且包括时间相邻块的参考图片可以称为并置图片(colPic)。例如，帧间预测器221可以基于相邻块来配置运动信息候选列表，并且生成指示使用哪个候选来导出当前块的运动矢量和/或参考图片索引的信息。可以基于各种预测模式来执行帧间预测。例如，在跳过模式和合并模式的情况下，帧间预测器221可以将相邻块的运动信息用作当前块的运动信息。在跳过模式下，与合并模式不同，可能无法发送残差信号。在运动矢量预测(MVP)模式的情况下，可以将相邻块的运动矢量用作运动矢量预测子，并且可以通过发信号通知运动矢量差来指示当前块的运动矢量。
预测器220可以基于以下描述的各种预测方法来生成预测信号。例如，预测器不仅可以应用帧内预测或帧间预测来预测一个块，而且可以同时应用帧内预测和帧间预测二者。这可以称为组合帧间和帧内预测(CIIP)。另外，预测器可以基于帧内块复制(IBC)预测模式或调色板模式来预测块。IBC预测模式或调色板模式可用于游戏等的内容图像/视频编译，例如，屏幕内容编码(SCC)。IBC基本上在当前图片中执行预测，但是可以类似于帧间预测来执行IBC，因为参考块是在当前图片中导出出的。即，IBC可以使用本公开中描述的帧间预测技术中的至少一种。调色板模式可以被视为帧内编译或帧内预测的示例。当应用调色板模式时，可以基于关于调色板表和调色板索引的信息来发信号通知图片内的样本值。
由预测器(包括帧间预测器221和/或帧内预测器222)生成的预测信号可以用于生成重构信号或生成残差信号。变换器232可以通过向残差信号应用变换技术来生成变换系数。例如，变换技术可以包括离散余弦变换(DCT)、离散正弦变换(DST)、基于图的变换(GBT)或条件非线性变换(CNT)中的至少一种。这里，GBT表示当像素之间的关系信息由图表示时从图获得的变换。CNT是指基于使用所有先前重构的像素生成的预测信号而生成的变换。另外，变换过程可以应用于具有相同大小的正方形像素块，或者可以应用于具有可变大小而非正方形的块。
量化器233可以对变换系数进行量化，并且将它们发送给熵编码器240，并且熵编码器240可以对量化信号(关于量化变换系数的信息)进行编码并且输出比特流。关于量化变换系数的信息可以称为残差信息。量化器233可以基于系数扫描顺序将块类型量化变换系数重新布置为一维矢量形式，并且基于一维矢量形式的量化变换系数来生成关于量化变换系数的信息。可以生成关于变换系数的信息。熵编码器240可以执行各种编码方法，诸如，例如指数哥伦布(Golomb)、上下文自适应变长编译(CAVLC)、上下文自适应二进制算术编译(CABAC)等。熵编码器240可以对除了量化变换系数以外的视频/图像重构所需的信息(例如，语法元素的值等)一起或分开地进行编码。可以以比特流的形式以NAL(网络抽象层)为单位发送或存储编码信息(例如，编码视频/图像信息)。视频/图像信息还可以包括关于诸如自适应参数集(APS)、图片参数集(PPS)、序列参数集(SPS)或视频参数集(VPS)之类的各种参数集的信息。另外，视频/图像信息还可包括一般约束信息。在本公开中，从编码装置向解码装置发送/发信号通知的信息和/或语法元素可以包括在视频/图片信息中。视频/图像信息可以通过上述编码过程被编码并且被包括在比特流中。比特流可以通过网络发送，或者可以存储在数字存储介质中。网络可以包括广播网络和/或通信网络，并且数字存储介质可以包括诸如USB、SD、CD、DVD、蓝光、HDD、SSD等的各种存储介质。可以包括发送从熵编码器240输出的信号的发送器(未示出)和/或存储该信号的存储单元(未示出)作为编码装置200的内部/外部元件，另选地，发送器可以包括在熵编码器240中。
从量化器233输出的量化变换系数可以用于生成预测信号。例如，可以通过利用解量化器234和逆变换器235对量化变换系数应用解量化和逆变换，来重构残差信号(残差块或残差样本)。加法器250将重构的残差信号与从帧间预测器221或帧内预测器222输出的预测信号相加，以生成重构信号(重构图片、重构块、重构样本阵列)。如果要处理的块没有残差(诸如应用了跳过模式的情况)，则可以将预测块用作重构块。加法器250可以称为重构器或重构块生成器。所生成的重构信号可以用于在当前图片中要处理的下一块的帧内预测，并且可以通过如下所述的滤波用于下一图片的帧间预测。
此外，在图片编码和/或重构期间，可以应用亮度映射与色度缩放(LMCS)。
滤波器260可以通过对重构信号应用滤波来改善主观/客观图像质量。例如，滤波器260可以通过对重构图片应用各种滤波方法来生成修改后的重构图片，并将修改后的重构图片存储在存储器270(具体地，存储器270的DPB)中。各种滤波方法可包括例如去块滤波、样本自适应偏移、自适应环路滤波器、双边滤波器等。滤波器260可以生成与滤波有关的各种信息，并且将生成的信息发送给熵编码器240，如稍后在各种滤波方法的描述中所述。与滤波有关的信息可以由熵编码器240编码并且以比特流的形式输出。
发送给存储器270的修改后的重构图片可以用作帧间预测器221中的参考图片。当通过编码装置应用帧间预测时，可以避免编码装置200与解码装置之间的预测不匹配，并且可以提高编译效率。
存储器270的DPB可以存储用作帧间预测器221中的参考图片的修改后的重构图片。存储器270可以存储从中导出(或编码)当前图片中的运动信息的块的运动信息和/或图片中已重构的块的运动信息。所存储的运动信息可以发送给帧间预测器221，并且用作空间相邻块的运动信息或时间相邻块的运动信息。存储器270可以存储当前图片中的重构块的重构样本，并且可以将重构样本传送给帧内预测器222。
图3是图示可以应用本公开的实施例的视频/图像解码装置的配置的示意图。在下文中，解码装置可以包括图像解码装置和/或视频解码装置。此外，图像解码方法/装置可以包括视频解码方法/装置。可替代地，视频解码方法/装置可以包括图像解码方法/装置。
参照图3，解码装置300可以包括熵解码器310、残差处理器320、预测器330、加法器340、滤波器350、存储器360。预测器330可以包括帧间预测器332和帧内预测器331。残差处理器320可以包括解量化器321和逆变换器322。根据实施例，熵解码器310、残差处理器320、预测器330、加法器340和滤波器350可以由硬件组件(例如，解码器芯片组或处理器)构成。另外，存储器360可以包括解码图片缓冲器(DPB)，或者可以由数字存储介质构成。硬件组件还可以包括存储器360作为内部/外部组件。
当输入包括视频/图像信息的比特流时，解码装置300可以与在图2的编码装置中处理视频/图像信息的处理相对应地重构图像。例如，解码装置300可以基于从比特流获得的块分区相关信息来导出单元/块。解码装置300可以使用在编码装置中应用的处理器来执行解码。因此，解码的处理器可以是例如编译单元，并且可以根据四叉树结构、二叉树结构和/或三叉树结构，从编译树单元或最大编译单元对编译单元进行分区。可以从编译单元导出一个或更多个变换单元。可以通过再现装置来再现通过解码装置300解码并输出的重构图像信号。
解码装置300可以接收以比特流形式从图2的编码装置输出的信号，并且可以通过熵解码器310对接收到的信号进行解码。例如，熵解码器310可以解析比特流，以导出图像重构(或图片重构)所需的信息(例如，视频/图像信息)。视频/图像信息还可以包括关于诸如自适应参数集(APS)、图片参数集(PPS)、序列参数集(SPS)或视频参数集(VPS)之类的各种参数集的信息。另外，视频/图像信息还可以包括一般约束信息。解码装置还可以基于关于参数集的信息和/或一般约束信息来对图片进行解码。本公开中稍后描述的发信号通知的/接收的信息和/或语法元素可以通过解码过程被解码，并从比特流中获取。例如，熵解码器310基于诸如指数哥伦布编译、CAVLC或CABAC之类的编译方法对比特流中的信息进行解码，并输出图像重构所需的语法元素和残差的变换系数的量化值。更具体地，CABAC熵解码方法可以接收与比特流中的每个语法元素相对应的bin(二进制位)，使用解码目标语法元素信息、解码目标块的解码信息或在先前级中解码的符号/bin的信息来确定上下文模型，并通过根据所确定的上下文模型预测bin的出现概率来对该bin进行算术解码，并且生成与每个语法元素的值相对应的符号。在这种情况下，在确定上下文模型之后，CABAC熵解码方法可以通过将经解码的符号/bin的信息用于下一符号/bin的上下文模型来更新上下文模型。由熵解码器310解码的信息当中与预测有关的信息可以提供给预测器(帧间预测器332和帧内预测器331)，并且在熵解码器310中对其执行了熵解码的残差值(也就是说，量化变换系数和相关参数信息)可以被输入到残差处理器320。残差处理器320可以导出残差信号(残差块、残差样本、残差样本阵列)。另外，由熵解码器310解码的信息当中关于滤波的信息可以提供给滤波器350。此外，用于接收从编码装置输出的信号的接收器(未示出)可以进一步被配置为解码装置300的内部/外部元件，或者接收器可以是熵解码器310的组件。此外，根据本公开的解码装置可以称为视频/图像/图片解码装置，并且解码装置可以分类为信息解码器(视频/图像/图片信息解码器)和样本解码器(视频/图像/图片样本解码器)。信息解码器可以包括熵解码器310，并且样本解码器可以包括解量化器321、逆变换器322、加法器340、滤波器350、存储器360、帧间预测器332和帧内预测器331中的至少一个。
解量化器321可以对量化变换系数进行解量化并且输出变换系数。解量化器321可以以二维块的形式重新布置量化变换系数。在这种情况下，可以基于在编码装置中执行的系数扫描顺序来执行重新布置。解量化器321可以通过使用量化参数(例如，量化步长信息)对量化变换系数执行解量化，并且获得变换系数。
逆变换器322对变换系数进行逆变换以获得残差信号(残差块、残差样本阵列)。
预测器可以对当前块执行预测，并生成包括当前块的预测样本的预测块。预测器可以基于从熵解码器310输出的关于预测的信息来确定向当前块应用帧内预测还是帧间预测，并且可以确定具体的帧内/帧间预测模式。
预测器320可以基于以下描述的各种预测方法来生成预测信号。例如，预测器不仅可以应用帧内预测或帧间预测来预测一个块，而且可以同时应用帧内预测和帧间预测。这可以称为组合帧间和帧内预测(CIIP)。另外，预测器可以基于帧内块复制(IBC)预测模式或调色板模式来预测块。IBC预测模式或调色板模式可以用于游戏等的内容图像/视频编译，例如，屏幕内容编译(SCC)。IBC基本上在当前图片中执行预测，但是可以类似于帧间预测来执行IBC，因为在当前图片中导出参考块。即，IBC可以使用本公开中描述的帧间预测技术中的至少一种。调色板模式可以被视为帧内编译或帧内预测的示例。当应用调色板模式时，可以基于关于调色板表和调色板索引的信息来发信号通知图片内的样本值。
帧内预测器331可以通过参考当前图片中的样本来预测当前块。根据预测模式，参考的样本可以位于当前块的附近，或者可以远离当前块。在帧内预测中，预测模式可以包括多个非定向模式和多个定向模式。帧内预测器331可以通过使用应用于相邻块的预测模式来确定应用于当前块的预测模式。
帧间预测器332可以基于由参考图片上的运动矢量指定的参考块(参考样本阵列)来导出当前块的预测块。在这种情况下，为了减少在帧间预测模式中发送的运动信息的量，可以基于相邻块和当前块之间的运动信息的相关性，以块、子块或样本为单位来预测运动信息。运动信息可以包括运动矢量和参考图片索引。运动信息还可包括帧间预测方向(L0预测、L1预测、Bi预测等)信息。在帧间预测的情况下，相邻块可以包括存在于当前图片中的空间相邻块和存在于参考图片中的时间相邻块。例如，帧间预测器332可以基于相邻块来配置运动信息候选列表，并基于接收到的候选选择信息来导出当前块的运动矢量和/或参考图片索引。可以基于各种预测模式来执行帧间预测，并且关于预测的信息可以包括指示针对当前块的帧间预测的模式的信息。
加法器340可以通过将所获得的残差信号与从预测器(包括帧间预测器332和/或帧内预测器331)输出的预测信号(预测块、预测样本阵列)相加来生成重构信号(重构图片、重构块、重构样本阵列)。如果要处理的块没有残差(例如当应用跳过模式时)，则可以将预测块用作重构块。
加法器340可以称为重构器或重构块生成器。所生成的重构信号可以用于当前图片中要处理的下一块的帧内预测，可以通过如下所述的滤波输出，或者可以用于下一图片的帧间预测。
此外，在图片解码处理中可以应用亮度映射与色度缩放(LMCS)。
滤波器350可以通过向重构信号应用滤波来改善主观/客观图像质量。例如，滤波器350可以通过对重构图片应用各种滤波方法来生成修改后的重构图片，并将修改后的重构图片存储在存储器360(具体地，存储器360的DPB)中。各种滤波方法可包括例如去块滤波、样本自适应偏移、自适应环路滤波器、双边滤波器等。
存储器360的DPB中存储的(修改后的)重构图片可以用作帧间预测器332中的参考图片。存储器360可以存储从中导出(或解码)当前图片中的运动信息的块的运动信息和/或图片中已重构的块的运动信息。所存储的运动信息可以发送给帧间预测器260，以作为空间相邻块的运动信息或时间相邻块的运动信息来利用。存储器360可以存储当前图片中的重构块的重构样本，并且可以将重构样本传送给帧内预测器331。
在本公开中，在编码装置200的滤波器260、帧间预测器221和帧内预测器222中描述的实施例可以与解码装置300的滤波器350、帧间预测器332和帧内预测器331相同或者分别被应用以对应于解码装置300的滤波器350、帧间预测器332和帧内预测器331。相同的内容也可以应用于帧间预测器332和帧内预测器331。
图4示意性地示出了编译图像/视频的层级结构。
参考图4，将编译的图像/视频分为处置图像/视频及其自身的解码处理的视频编译层(VCL)、发送和存储编译信息的子系统，以及存在于VCL和子系统之间并且负责网络适配功能的网络抽象层(NAL)。
在VCL中，可以生成包括压缩视频数据(切片数据)的VCL数据，或者可以生成视频解码过程额外所需的补充增强信息(SEI)消息或包括诸如图片参数集(PPS)、序列参数集(SPS)、视频参数集(VPS)的信息的参数集。
在NAL中，可以通过向在VCL中生成的原始字节序列有效载荷(RBSP)添加头信息(NAL单元头)来生成NAL单元。在这种情况下，RBSP是指在VCL中生成的切片数据、参数集、SEI消息等。NAL单元头可以包括根据包括在相应NAL单元中的RBSP数据指定的NAL单元类型信息。
如图所示，NAL单元可以根据VCL中生成的RBSP分为VCL NAL单元和非VCL NAL单元。VCL NAL单元可以是指包括关于图像(切片数据)的信息的NAL单元，非VCL NAL单元可以是指包括解码图像所需的信息(参数集或SEI消息)的NAL单元。
可以根据子系统的数据标准，通过附加头信息，经网络发送上述VCL NAL单元和非VCL NAL单元。例如，NAL单元可以被变换成预定标准的数据形式，诸如H.266/VVC文件格式、实时传送协议(RTP)、传送流(TS)，并且通过各种网络发送。
如上所述，在NAL单元中，可以根据包括在相应NAL单元中的RBSP数据结构来指定NAL单元类型，并且可以在NAL单元头中存储和发信号通知关于该NAL单元类型的信息。
例如，根据NAL单元是否包括图像信息(切片数据)，NAL单元可以主要分为VCL NAL单元类型和非VCL NAL单元类型。VCL NAL单元类型可以根据包括在VCL NAL单元中的图片的属性和类型进行分类，并且非VCL NAL单元类型可以根据参数集的类型进行分类。
以下是根据非VCL NAL单元类型中包括的参数集的类型指定的NAL单元类型的示例。
-自适应参数集(APS)NAL单元：包含APS的NAL单元的类型
-解码参数集(DPS)NAL单元：包含DPS的NAL单元的类型
-视频参数集(VPS)NAL单元：包含VPS的NAL单元的类型
-序列参数集(SPS)NAL单元：包含SPS的NAL单元的类型
-PPS(图片参数集)NAL单元：包含PPS的NAL单元的类型
-图片头(PH)NAL单元：包含PH的NAL单元的类型
上述NAL单元类型可以具有用于NAL单元类型的语法信息，并且可以在NAL单元头中存储和发信号通知该语法信息。例如，语法信息可以是nal_unit_type，并且NAL单元类型可以由nal_unit_type值指定。
同时，如上所述，一个图片可以包括多个切片，并且一个切片可以包括切片头和切片数据。在这种情况下，可以针对一个图片中的多个切片(切片头和切片数据集)进一步添加一个图片头。图片头(图片头语法)可以包括通常适用于图片的信息/参数。在本公开中，切片可以与图块组混合或由图块组代替。此外，在本公开中，切片头可以与类型组头混合或由类型组头代替。
切片头(切片头语法)可以包括通常适用于切片的信息/参数。APS(APS语法)或PPS(PPS语法)可以包括通常适用于一个或多个切片或图片的信息/参数。SPS(SPS语法)可以包括通常适用于一个或多个序列的信息/参数。VPS(VPS语法)可以包括通常适用于多个层的信息/参数。DPS(DPS语法)可以包括通常适用于整个视频的信息/参数。DPS可以包括与编译视频序列(CVS)的级联相关的信息/参数。在本公开中，高级语法(HLS)可以包括APS语法、PPS语法、SPS语法、VPS语法、DPS语法、图片头语法和切片头语法中的至少一种。
在本公开中，由编码装置编码并以比特流的形式发信号通知解码装置的图像/视频信息不仅可以包括图片分区相关信息、帧内/帧间预测信息、残差信息、环内滤波信息等，而且可以包括切片头中包括的信息、图片头中包括的信息、APS中包括的信息、PPS中包括的信息、SPS中包括的信息、VPS中包括的信息和/或DPS中包括的信息。另外，图像/视频信息可以进一步包括NAL单元头的信息。
此外，如上所述，编码装置可以执行各种编码方法，诸如(例如)指数哥伦布、上下文自适应可变长度编译(CAVLC)和上下文自适应二进制算术编译(CABAC)。另外，解码装置可以基于编译方法，诸如指数哥伦布编译、CAVLC或CABAC，对比特流中的信息进行解码，并且输出图像重构所需的语法元素的值和与残差有关的变换系数的量化值。
例如，可以如下所述执行上述编译方法。
图5示意性地示出了用于编码语法元素的上下文自适应二进制算术编译(CABAC)。例如，在CABAC编码过程中，当输入信号是语法元素而不是二进制值时，编码装置可以通过对输入信号的值进行二值化来将输入信号转换为二进制值。另外，当输入信号已经是二进制值时(即，当输入信号的值为二进制值时)，可以不执行二值化，并且可以旁路二值化。在此，构成二进制值的每个二进制数0或1可以被称为bin。例如，如果二值化后的二进制串为110，则1、1、0中的每一个被称为一个bin。用于一个语法元素的bin可以指示语法元素的值。
此后，可以将语法元素的二值化bin输入到常规编码引擎或旁路编码引擎。编码装置的常规编码引擎可以对相应的bin分配反映概率值的上下文模型，并且可以基于所分配的上下文模型对相应的bin进行编码。在对每个bin进行编码之后，编码装置的常规编码引擎可以更新用于相应bin的上下文模型。如上所述的编码bin可以被称为上下文编译的bin。
同时，当语法元素的二值化bin被输入到旁路编码引擎时，它们可以被如下编译。例如，编码装置的旁路编码引擎省略了估计关于输入bin的概率的过程，以及在编码后更新应用于bin的概率模型的过程。当应用旁路编码时，编码装置可以通过应用均匀概率分布而不是分配上下文模型来对输入bin进行编码，从而提高编码速度。如上所述的编码bin可以被称为旁路bin。
熵解码可以表示以相反的顺序执行与上述熵编码相同的过程的过程。
例如，当基于上下文模型对语法元素进行解码时，解码装置可以通过比特流接收与语法元素对应的bin，可以使用语法元素和解码目标块或相邻块的解码信息或者上一步解码的符号/bin的信息来确定上下文模型，可以通过根据所确定的上下文模型预测所接收到的bin的出现概率并且对bin执行算术解码，来导出语法元素的值。此后，可以利用所确定的上下文模型来更新下一个解码bin的上下文模型。
此外，例如，当旁路解码语法元素时，解码装置可以通过比特流接收与语法元素对应的bin，并且可以通过应用均匀概率分布来对输入bin进行解码。在这种情况下，解码装置可以省略用于导出语法元素的上下文模型的过程以及用于解码之后更新应用于bin的上下文模型的过程。
同时，当如上所述执行视频编译时，执行预测以提高压缩效率。因此，可以生成包括用于作为编译目标块的当前块的预测样本的预测块。例如，当执行上述帧内预测时，可以使用样本之间的相关性，并且可以获得原始块和预测块之间的差，即残差。可以将上述变换和量化应用于该残差以去除空间冗余。具体地，使用帧内预测的编码方法和解码方法可以如下。
图6图示了基于帧内预测的视频/图像编码方法的示例。
参照图6，编码设备对当前块执行帧内预测(S600)。编码设备导出当前块的帧内预测模式/类型，导出当前块的相邻参考样本，基于帧内预测模式/类型和相邻参考样本生成当前块中的预测样本。在此，帧内预测模式/类型确定、相邻参考样本导出和预测样本生成过程可以同时执行，或者一个过程可以在另一个过程之前执行。编码设备可以从多个帧内预测模式/类型中确定应用于当前块的模式/类型。编码设备可以比较帧内预测模式/类型的RD成本并且确定当前块的最佳帧内预测模式/类型。
同时，编码设备可以执行预测样本滤波过程。预测样本滤波可以被称为后滤波。一些或所有预测样本可以由预测样本滤波过程滤波。在一些情况下，可以省略预测样本滤波过程。
编码设备基于(滤波的)预测样本生成当前块的残差样本(S610)。编码设备可以基于相位比较当前块的原始样本中的预测样本并且导出残差样本。
编码设备可以对包括关于帧内预测的信息(预测信息)和关于残差样本的残差信息的图像信息进行编码(S620)。预测信息可以包括帧内预测模式信息和帧内预测类型信息。编码设备可以以比特流的形式输出编码的图像信息。输出比特流可以通过存储介质或网络发送到解码设备。
残差信息可以包括稍后所述的残差编译语法。编码设备可以变换/量化残差样本以导出量化的变换系数。残差信息可以包括关于量化的变换系数的信息。
同时，如上所述，编码设备可以生成重构图片(包括重构样本和重构块)。为此，编码设备可以通过对量化的变换系数再次执行逆量化/逆变换来导出(修改的)残差样本。以这种方式对残差样本进行变换/量化之后再次执行逆量化/逆变换的原因是为了导出与上述解码设备中导出的残差样本相同的残差样本。编码设备可以基于预测样本和(修改的)残差样本生成包括用于当前块的重构样本的重构块。可以基于重构块生成用于当前图片的重构图片。如上所述，环内滤波过程可以被进一步应用于重构图片。
图7图示了基于帧内预测的视频/图像解码方法的示例。
解码设备可以执行与编码装置执行的操作相对应的操作。
可以从比特流中获得预测信息和残差信息。可以基于残差信息导出当前块的残差样本。具体地，可以通过基于根据残差信息导出的量化变换系数执行逆量化来导出变换系数，通过对变换系数执行逆变换来导出当前块的残差样本。
具体地，解码设备可以基于所接收的预测信息(帧内预测模式/类型信息)，导出当前块的帧内预测模式/类型(S700)。解码设备可以导出当前块的相邻参考样本(S710)。解码设备基于帧内预测模式/类型和相邻参考样本，生成当前块中的预测样本(S720)。在这种情况下，解码设备可以执行预测样本滤波过程。预测样本滤波可以被称为后滤波。一些或所有预测样本可以由预测样本滤波过程滤波。在一些情况下，可以省略预测样本滤波过程。
解码设备基于接收到的残差信息生成用于当前块的残差样本(S730)。解码设备可以基于预测样本和残差样本，生成当前块的重构样本，并且可以导出包括重构样本的重构块(S740)。可以基于重构块生成当前图片的重构图片。如上所述，环内滤波过程可以被进一步应用于重构图片。
帧内预测模式信息可以包括例如标志信息(例如，intra_luma_mpm_flag)，其指示是否将MPM(最可能模式)应用于当前块或是否应用剩余模式，并且当将MPM应用于当前块时，预测模式信息可以进一步包括指示帧内预测模式候选(MPM候选)之一的索引信息(例如，intra_luma_mpm_idx)。帧内预测模式候选(MPM候选)可以由MPM候选列表或MPM列表构成。另外，当MPM没有应用于当前块时，帧内预测模式信息包括指示除了帧内预测模式候选(MPM候选)之外的剩余帧内预测模式之一的剩余模式信息(例如intra_luma_mpm_remainder)。解码设备可以基于帧内预测模式信息，确定当前块的帧内预测模式。
此外，可以以各种形式实现帧内预测类型信息。例如，帧内预测类型信息可以包括指示帧内预测类型之一的帧内预测类型索引信息。作为另一示例，帧内预测类型信息可以包括表示是否将MRL应用于当前块，并且如果应用，使用哪个参考样本线的参考样本线信息(例如，intra_luma_ref_idx)、表示是否将ISP应用于当前块的ISP标志信息(例如intra_subpartitions_mode_flag)、当应用ISP时指示子分区的分割类型的ISP类型信息(例如intra_subpartitions_split_flag)、表示是否应用PDCP的标志信息或表示是否应用LIP的标志信息中的至少一个。此外，帧内预测类型信息可以包括表示是否将基于矩阵的帧内预测(MIP)应用于当前块的MIP标志。
可以通过本公开中描述的编译方法，对帧内预测模式信息和/或帧内预测类型信息进行编码/解码。例如，可以通过熵编译(例如，CABAC、CAVLC)对帧内预测模式信息和/或帧内预测类型信息进行编码/解码。
图8示意性地示出了帧内预测过程。
参照图8，如上所述，帧内预测过程可以包括确定帧内预测模式/类型的步骤、导出相邻参考样本的步骤和执行帧内预测(生成预测样本)的步骤。帧内预测过程可以由如上所述的编码设备和解码设备执行。在本公开中，编译设备可以包括编码设备和/或解码设备。
参照图8，编译设备确定帧内预测模式/类型S800。
编码设备可以从上述各种帧内预测模式/类型中确定应用于当前块的帧内预测模式/类型，并且可以生成预测相关信息。预测相关信息可以包括表示应用于当前块的帧内预测模式的帧内预测模式信息和/或表示应用于当前块的帧内预测类型的帧内预测类型信息。解码设备可以基于预测相关信息确定应用于当前块的帧内预测模式/类型。
帧内预测模式信息可以包括例如表示将最可能模式(MPM)应用于当前块还是应用剩余模式的标志信息(例如，intra_luma_mpm_flag)，以及当将MPM应用于当前块时，预测模式信息可以进一步包括指示帧内预测模式候选(MPM候选)之一的索引信息(例如，intra_luma_mpm_idx)。帧内预测模式候选(MPM候选)可以由MPM候选列表或MPM列表构成。另外，当MPM没有应用于当前块时，帧内预测模式信息可以进一步包括指示除了帧内预测模式候选(MPM候选)之外的剩余帧内预测模式之一的剩余模式信息(例如，intra_luma_mpm_remainder)。解码设备可以基于帧内预测模式信息确定当前块的帧内预测模式。
另外，可以以各种形式实现帧内预测类型信息。例如，帧内预测类型信息可以包括指示帧内预测类型之一的帧内预测类型索引信息。作为另一示例，帧内预测类型信息可以包括表示是否将MRL应用于当前块，并且如果应用，使用哪个参考样本线的参考样本线信息(例如，intra_luma_ref_idx)、表示是否将ISP应用于当前块的ISP标志信息(例如intra_subpartitions_mode_flag)、当应用ISP时指示子分区的分割类型的ISP类型信息(例如intra_subpartitions_split_flag)、表示是否应用PDCP的标志信息或表示是否应用LIP的标志信息中的至少一个。此外，帧内预测类型信息可以包括表示是否将基于矩阵的帧内预测(MIP)应用于当前块的MIP标志。
例如，当应用帧内预测时，可以使用相邻块的帧内预测模式来确定应用于当前块的帧内预测模式。例如，编译设备可以选择基于附加候选模式和/或当前块的相邻块(例如，左和/或上相邻块)的帧内预测模式导出的MPM列表中的最可能模式(MPM)候选之一或基于MPM剩余信息(剩余帧内预测模式信息)选择未包括在MPM候选(和平面模式)中的剩余帧内预测模式之一。MPM列表可以被配置为包括或不包括平面模式作为候选。例如，当MPM列表将平面模式包括为候选时，MPM列表可以有6个候选，当MPM列表不将平面模式包括为候选时，MPM列表可以有5个候选。当MPM列表不将平面模式包括为候选时，可以发信号通知表示当前块的帧内预测模式是否不是平面模式的非平面标志(例如，intra_luma_not_planar_flag)。例如，可以首先发信号通知MPM标志，并且当MPM标志的值为1时，可以发信号通知MPM索引和非平面标志。此外，当非平面标志的值为1时，可以发信号通知MPM索引。在此，配置MPM列表不将平面模式包括为候选的事实是平面模式总是被认为是MPM而不是认为平面模式不是MPM，因此，首先发信号通知标志(非平面标志)以检查它是否是平面模式。
例如，可以基于MPM标志(例如，intra_luma_mpm_flag)指示应用于当前块的帧内预测模式是在MPM候选(和平面模式)之中还是在剩余模式之中。值为1的MPM标志可以指示当前块的帧内预测模式在MPM候选(和平面模式)内，而值为0的MPM标志可以指示当前块的帧内预测模式不在MPM候选(和平面模式)内。值为0的非平面标志(例如intra_luma_not_planar_flag)可以指示当前块的帧内预测模式为平面模式，值为1的非平面标志可以指示当前块的帧内预测模式不是平面模式。可以以mpm_idx或intra_luma_mpm_idx语法元素的形式发信号通知MPM索引，并且可以以rem_intra_luma_pred_mode或intra_luma_mpm_remainder语法元素的形式发信号通知剩余帧内预测模式信息。例如，剩余帧内预测模式信息可以通过按照预测模式编号的顺序索引来指示所有帧内预测模式当中的未包括在MPM候选(和平面模式)中的剩余帧内预测模式之一。帧内预测模式可以是亮度分量(样本)的帧内预测模式。在下文中，帧内预测模式信息可以包括MPM标志(例如intra_luma_mpm_flag)、非平面标志(例如intra_luma_not_planar_flag)、MPM索引(例如mpm_idx或intra_luma_mpm_idx)或剩余的帧内预测模式信息(rem_intra_luma_luma_mpm_mode或intra_luma_mpminder)中的至少一个。在本公开中，MPM列表可以用多种术语，诸如MPM候选列表和candModeList来指代。
当将MIP应用于当前块时，可以发信号通知用于MIP的单独MPM标志(例如，intra_mip_mpm_flag)、MPM索引(例如，intra_mip_mpm_idx)和剩余帧内预测模式信息(例如，intra_mip_mpm_remainder)，并且可以不发信号通知非平面标志。
换言之，一般而言，当执行图像的块分区时，待编译的当前块和相邻块具有相似的图像特征。因此，当前块和相邻块具有相同或相似的帧内预测模式的可能性很高。因此，编码器可以使用相邻块的帧内预测模式来对当前块的帧内预测模式进行编码。
编译设备可以为当前块构建最可能模式(MPM)列表。MPM列表可以被称为MPM候选列表。在此，MPM可以是指用于在帧内预测模式编译期间，考虑当前块和相邻块之间的相似性来提高编译效率的模式。如上所述，MPM列表可以被构造为包括平面模式，或者可以被构造为排除平面模式。例如，当MPM列表包括平面模式时，MPM列表中的候选数量可以是6。而当MPM列表不包括平面模式时，MPM列表中的候选数量可以是5。
编码设备可以基于各种帧内预测模式执行预测，并且可以基于根据其的速率失真优化(RDO)来确定最佳帧内预测模式。在这种情况下，编码设备可以通过仅使用MPM列表中配置的MPM候选和平面模式，或者通过进一步使用剩余帧内预测模式以及MPM列表中配置的MPM候选和平面模式来确定最佳帧内预测模式。具体地，例如，如果当前块的帧内预测类型是正常帧内预测类型以外的特定类型(例如LIP、MRL或ISP)，则编码设备可以通过仅将MPM候选和平面模式视作当前块的帧内预测模式候选来确定最佳帧内预测模式。即，在这种情况下，可以仅从MPM候选和平面模式中确定当前块的帧内预测模式，并且在这种情况下，可以不执行MPM标志的编码/信令。在这种情况下，解码设备可以推断MPM标志为1，而无需单独地发信号通知MPM标志。
同时，通常，在当前块的帧内预测模式不是平面模式，而是MPM列表中的MPM候选之一时，编码设备生成指示MPM候选之一的MPM索引(mpm idx)。在当前块的帧内预测模式未被包括在MPM列表中时，编码设备生成MPM剩余信息(剩余帧内预测模式信息)，指示未包括在MPM列表(和平面模式)中的剩余帧内预测模式当中的与当前块的帧内预测模式相同的模式。MPM剩余信息可以包括例如intra_luma_mpm_remainder语法元素。
解码设备从比特流中获得帧内预测模式信息。如上所述，帧内预测模式信息可以包括MPM标志、非平面标志、MPM索引和MPM剩余信息(剩余帧内预测模式信息)中的至少一个。解码设备可以构建MPM列表。MPM列表的构建与在编码设备中构建的MPM列表相同。即，MPM列表可以包括相邻块的帧内预测模式，或者可以进一步包括根据预定方法的特定帧内预测模式。
解码设备可以基于MPM列表和帧内预测模式信息确定当前块的帧内预测模式。例如，当MPM标志的值为1时，解码设备可以(基于非平面标志)将平面模式导出为当前块的帧内预测模式，或者将MPM列表的MPM候选当中的由MPM索引指示的候选导出为当前块的帧内预测模式。在此，MPM候选可以仅表示MPM列表中包括的候选，也可以不仅包括MPM列表中包括的候选，而且包括MPM标志的值为1时适用的平面模式。
又例如，当MPM标志的值为0时，解码设备可以将在未包括在MPM列表和平面模式中的剩余帧内预测模式当中的由剩余帧内预测模式信息(可以被称为mpm剩余信息)指示的帧内预测模式导出为当前块的帧内预测模式。同时，作为另一示例，在当前块的帧内预测类型是特定类型(例如LIP、MRL或ISP等)时，解码设备可以将由平面模式或MPM列表中的MPM标志指示的候选导出为当前块的帧内预测模式，无需解析/解码/检查MPM标志。
编译设备导出当前块的相邻参考样本S810。当帧内预测被应用于当前块时，可以导出要用于当前块的帧内预测的相邻参考样本。当前块的相邻参考样本可以包括与大小为nWxnH的当前块的左边界相邻的样本和与当前块的左下相邻的总共2xnH个样本、与当前块的上边界相邻的样本和与右上相邻的总共2xnW个样本以及与当前块的左上相邻的样本。可替代地，当前块的相邻参考样本可以包括多列上相邻样本和多行左相邻样本。此外，当前块的相邻参考样本可以包括与大小为nWxnH的当前块的右边界相邻的总共nH个样本、与当前块的下边界相邻的总共nW个样本以及与当前块的右下相邻的样本。
另一方面，当应用MRL时(即当MRL索引的值大于0时)，相邻参考样本可能位于线1至2而不是在左/上侧与当前块相邻的线0，以及在这种情况下，可以进一步增加相邻参考样本的数量。同时，当应用ISP时，可以以子分区为单位导出相邻参考样本。
编译设备通过对当前块执行帧内预测来导出预测样本S820。编译设备可以基于帧内预测模式/类型和相邻样本来导出预测样本。编译设备可以根据当前块的相邻参考样本中的当前块的帧内预测模式来导出参考样本，并且可以基于参考样本来导出当前块的预测样本。
同时，当帧内预测应用于当前块时，编码装置/解码装置可以导出当前块的帧内预测模式，并基于帧内预测模式导出当前块的预测样本，如上所述。即，编码装置/解码装置可以通过基于当前块的相邻参考样本应用定向或非定向模式来导出当前块的预测样本。
作为参考，帧内预测模式可以包括例如两个非定向(或非角度)帧内预测模式和65个定向(或角度)帧内预测模式。非定向帧内预测模式可以包括平面帧内预测模式#0和DC帧内预测模式#1，以及定向帧内预测模式可以包括65个帧内预测模式#2至#66。然而，这是示例，并且本公开也可以应用于不同数量的帧内预测模式的情况。可以根据需要另外使用帧内预测模式#67，并且帧内预测模式#67可以表示线性模型(LM)模式。
图9图示了65个预测方向中的帧内定向模式。
参照图9，基于左上对角预测方向上的帧内预测模式#34，帧内预测模式可以被划分为具有水平方向性的帧内预测模式和具有垂直方向性的帧内预测模式。在图9中，H和V表示水平方向性和垂直方向性，数字-32至32指示在样本网格位置处以1/32为单位的位移。帧内预测模式#2至#33具有水平方向性，而帧内预测模式#34至#66具有垂直方向性。帧内预测模式#18和帧内预测模式#30分别是水平帧内预测模式和垂直帧内预测模式，帧内预测模式#2可以被称为左下对角帧内预测模式，帧内预测模式#34可以被称为左上对角帧内预测模式，而帧内预测模式#55可以称为右上对角帧内预测模式。
作为帧内预测的实施例，可以提出一种从当前块的多条参考样本线中选择具有最高预测准确度的参考样本线并使用位于所选参考样本线中的预测方向的参考样本导出预测样本的方法。这种方法可以被称为多参考线(MRL)帧内预测或基于MRL的帧内预测。
具体地，在传统的帧内预测中，可以将仅当前块上方的第一条线的相邻样本和当前块的左侧的第一条线的相邻样本用作为用于帧内预测的参考样本。然而，在MRL中，可以将位于与当前块相隔1、2或3个样本距离的上和/或左样本线中的相邻样本用作参考样本来执行帧内预测。
图10图示了可以在MRL中使用的多条参考线。当执行MRL时，解码装置可以接收参考线索引。参考线索引可以指示多条参考线之一。解码装置可以基于由参考线索引指示的参考线中的参考样本来执行帧内预测。参考线索引的语法元素可以是intra_luma_ref_idx。此外，对于CTU中的第一线(即第一行)的块，可以禁用MRL。
作为帧内预测的实施例，可以提出在水平方向或垂直方向上对当前块进行分区并且以分区的块为单位执行帧内预测的方法。即，可以提出在水平方向或垂直方向上分区当前块以导出子块并对子块执行帧内预测的方法。在这种情况下，可以对每个分区子块进行编码/解码以生成重构块，并且可以将重构块用作下一个分区子块的参考块。上述方法也可以被称为帧内子分区预测(ISP预测)、帧内子分区(ISP)模式或基于帧内子分区(ISP)的预测。另外，上述方法也可以被称为基于ISP的帧内预测。此外，子块可以被称为帧内子分区。此外，根据ISP分区的子块(或子分区)可以被称为变换单元(TU)。
根据ISP，可以根据当前块的大小，将当前块在垂直或水平方向上分区为两个或四个子分区。例如，在执行ISP时，可以根据当前块的大小，将当前块分区为下表所示的子块数量。
[表1]
| 块大小(CU) | 分区数 |
| 4×4 | 无分区 |
| 4×8,8×4 | 2 |
| 其他情形 | 4 |
参考表1，在当前块的大小为4×4时，可以禁用ISP。当前块的大小为4×8或8×4时，可以将当前块分区为两个子块，而在当前块的大小具有除4×4、4×8和8×4以外的大小(即大小大于4×8或8×4)时，可以将当前块分区为四个子块。
图11图示了基于块大小，将应用了ISP的块分区为子块的示例。参考图11的(a)，在当前块的大小为4×8或8×4时，可以将当前块分区为两个子块。参考图11的(b)，在当前块具有除4×4、4×8和8×4之外的大小(即，大小大于4×8或8×4)时，可以将当前块分区为四个子块。
同时，M×128(M≤64)和128×N(N≤64)ISP块(即帧内子分区)对于64×64VDPU可能会带来潜在的问题。例如，单个树中的M×128CU可能具有M×128亮度TB和与亮度TB对应的两个M/2×64色度TB。当将ISP应用于CU时，亮度TB可以被分区为4个M×32TB，即4个M×32子块(只能水平分割)，并且每个TB小于64×64的块。然而，在这种情况下，根据当前的视频标准，在设计中可能不会分区应用了ISP的色度块。因此，亮度分量TB的两个色度分量TB的大小大于32×32。同样，128×N CU可能会导致与上述情况类似的情况。因此，上述两种情况可能会成为64×64解码器流水线中的问题。为此，可以使用ISP的CU的最大大小可以被限制到64×64。
当应用ISP时，编码装置可以根据分区方法(例如，水平分割或垂直分割)生成MPM列表以便降低编译复杂度，并在速率失真优化(RDO)方面比较所生成的MPM列表中的帧内预测模式以导出最佳帧内预测模式。当使用上述MRL时，不能使用ISP。也就是说，只有当第0参考线用于帧内预测时(即，intra_luma_ref_idx的值为0时)，才可以应用ISP。此外，当使用ISP时，不能使用位置相关帧内预测(PDPC)。
可以每块发送指示是否应用ISP的标志，并且当将ISP应用于当前块时，可以编码/解码指示分割类型是水平分割还是垂直分割，即分割方向是水平方向还是垂直方向的标志。指示是否应用ISP的标志可以被称为ISP标志，ISP标志的语法元素可以是intra_subpartitions_mode_flag。进一步地，指示分割类型的标志可以被称为ISP分割标志，并且ISP分割类型的语法元素可以是intra_subpartitions_split_flag。
与ISP相关的语法元素如下表所示。
[表2]
在表2中，intra_luma_ref_idx可以是参考线索引的语法元素。当应用ISP时，当前块的帧内预测模式可以同等地应用于当前块的子分区，并且可以通过导出每个子分区的相邻参考样本来执行帧内预测以提高帧内预测性能。即，当应用ISP时，可以对每个子分区执行残差样本处理过程。换句话说，可以对每个子分区执行帧内预测以导出预测样本，并且可以将针对每个子分区的残差信号(残差样本)添加到针对每个子分区的预测样本以导出重构样本。可以基于比特流中的残差信息(量化的变换系数信息或残差编译语法)，通过逆量化/逆变换过程导出残差信号(残差样本)。当分割类型为垂直分割时，可以从最左子分区到最右子分区执行对子分区的帧内预测，以及当分割类型为水平分割时，可以从最上子分区到最下子分区执行对子分区的帧内预测。
例如，可以对当前块的第一子分区执行帧内预测以导出预测样本，可以基于关于第一子分区的残差信息导出针对第一子分区的残差样本，并且可以基于预测样本和残差样本来导出针对第一子分区的重构样本。在此，如果应用ISP的当前块的分割类型是垂直分割，则第一子分区可以是最左子块，而如果应用ISP的当前块的分割类型是水平分割，则第一子分区可以是最上子块。
随后，在导出针对第二子分区的预测样本的过程中，可以将第一子分区中的一些重构样本用作针对第二子分区的相邻参考样本(例如，第二子分区的左或上相邻参考样本)。具体地，可以对当前块的第二子分区执行帧内预测以导出预测样本，可以基于关于第二子分区的残差信息，导出针对第二子分区的残差样本，以及可以基于预测样本和残差样本导出针对第二子分区的重构样本。同样地，当执行针对第三子分区导出预测样本的过程时，第二子分区中的一些重构样本可以被用作针对第三子分区的相邻参考样本(例如，第三子分区的左或上相邻参考样本)。同样地，当执行导出针对第四子分区的预测样本的过程时，可以将第三子分区中的一些重构样本用作针对第四子分区的相邻参考样本(例如，第四子分区的左或上相邻参考样本)。
同时，作为帧内预测的另一实施例，可以提出组合帧间和帧内预测(CIIP)。CIIP可以表示基于帧间预测和帧内预测导出当前块的预测样本的过程。例如，当将CIIP应用于当前块时，可以导出出当前块的帧内预测模式，并且可以基于帧内预测模式导出当前块的第一预测样本。此后，可以通过对当前块执行帧间预测，导出当前块的第二预测样本，以及通过对第一预测样本和第二预测执行加权求和(即加权平均)导出当前块的预测样本。在此，第一预测样本可以被称为帧内预测样本，而第二预测样本可以被称为帧间预测样本。此外，例如，用于当前块的帧间预测可以是根据一般合并模式的帧间预测。具体地，例如，可以基于当前块的相邻块的运动信息，构建当前块的合并候选列表，并且基于合并候选列表中由当前块的合并索引指示的合并候选，导出当前块的运动信息，并且可以基于运动信息导出当前块的第二预测样本。
此外，例如，可以发信号通知表示是否将CIIP应用于当前块的CIIP标志，并且可以基于CIIP标志来确定是否将CIIP应用于当前块。例如，当以合并模式编译当前块，并且当前块包括至少64个亮度样本(即当前块的宽度和高度的乘积为64或更大)时，可以发信号通知CIIP标志。
此外，例如，可以基于两个语法元素导出当应用CIIP时的当前块的帧内预测模式。例如，可以将最多四种帧内预测模式之一用作帧内预测模式。四种帧内预测模式可以包括DC帧内预测模式、平面帧内预测模式、水平帧内预测模式和/或垂直帧内预测模式。
例如，在用于亮度分量的CIIP中，可以使用最多四种帧内预测模式，包括DC帧内预测模式、平面帧内预测模式、水平帧内预测模式和垂直帧内预测模式。此外，例如，在当前块的宽度大于高度的两倍时，垂直帧内预测模式可能不可用。在这种情况下，仅三种帧内预测模式可用。此外，例如，在当前块的高度大于宽度的两倍时，垂直帧内预测模式可能不可用。在这种情况下，仅三种帧内预测模式可用。
具体地，例如，当CIIP应用于当前块时，可以如下导出当前块的帧内预测模式。例如，可以如下构造包括用于当前块的最可能模式(MPM)候选的MPM列表。例如，MPM列表可以包括三个MPM候选。
例如，当前块的左相邻块可以被设置为A，而上相邻块可以被设置为B。此后，可以如下导出由intraModeA和intraModeB指示的左相邻块A和上相邻块B的帧内预测模式。
-将X设定为A或B
-1)当块X不可用时，2)当不使用CIIP或帧内预测模式预测块X时，3)当块B位于当前CTU之外时，可以将intraModeX设置为DC帧内预测模式。在此，当前CTU可以指包括当前块的CTU。
-否则，1)当块X的帧内预测模式为DC帧内预测模式或平面帧内预测模式时，intraModeX可以被设置为块X的帧内预测模式，即DC帧内预测模式或平面帧内预测模式，或2)当块X的帧内预测模式为类垂直定向帧内预测模式(即帧内预测模式#35至#66)时，可以将intraModeX设置为垂直帧内预测模式，或3)当块X的帧内预测模式为类水平定向帧内预测模式(即帧内预测模式#2至#34)时，可以将intraModeX设置为水平帧内预测模式。
此后，可以基于导出的intraModeA和intraModeB导出MPM候选。
-例如，当intraModeA和intraModeB相同时：
-当intraModeA为平面帧内预测模式或DC帧内预测模式时，可以将三个MPM候选依次设置为{平面帧内预测模式、DC帧内预测模式、垂直帧内预测模式}。
-或者，否则，即当intraModeA不是平面帧内预测模式和DC帧内预测模式时，可以将三个MPM候选依次设置为{intraModeA，平面帧内预测模式，DC帧内预测模式}。
-否则，即，当intraModeA和intraModeB不相同时：
-可以将前两个MPM候选设置为{intraModeA,intraModeB}。
-此后，当通过按照平面帧内预测模式、DC帧内预测模式和垂直帧内预测模式的顺序检查其是否被包括在先前导出的MPM候选中而确认为除了所导出的MPM候选之外的帧内预测模式时，可以将其添加为第三MPM候选。
同时，例如，在当前块的宽度大于高度的两倍或当前块的高度大于宽度的两倍时，可以在不发信号通知的情况下推断MPM标志等于1。否则，可以发信号通知当前块的MPM标志。
例如，当MPM标志的值为1时，可以发信号通知指示MPM列表的MPM候选之一的MPM索引，并且可以将由MPM索引指示的MPM候选导出为当前块的帧内预测模式。此外，例如，当MPM标志的值为0时，可以将当前块的帧内预测模式设置为“缺失”模式。在此，缺失模式可以表示在CIIP中可用的四种帧内预测模式当中未包括在MPM列表中的帧内预测模式。例如，当MPM列表中不包括平面帧内预测模式时，缺失模式可以是平面帧内预测模式，以及当MPM标志的值为0时，可以将当前块的帧内预测模式导出为平面帧内预测模式，即缺失模式。同时，例如，可以存储利用CIIP编译的CU的帧内预测模式并且用于在该CU之后编译的相邻CU的预测。
同时，如上所述，可以对第一预测样本和第二预测样本执行加权平均。在此，例如，可以基于当前块的帧内预测模式和/或当前样本在当前块中的位置导出第一预测样本和第二预测样本的权重。
具体地，例如，在当前块的帧内预测模式为DC帧内预测模式或平面帧内预测模式，或者当前块的宽度或高度小于4时，可以对第一预测样本和第二预测样本应用相同的权重。即在当前块的帧内预测模式为DC帧内预测模式或平面帧内预测模式，或者当前块的宽度或高度小于4时，可以将第一预测样本和第二预测样本的权重导出为相同的值。
另外，在除上述情况之外的情况下，可以基于当前块的帧内预测模式和当前块中的当前样本位置，导出用于第一预测样本和第二预测样本的权重。例如，在当前块的帧内预测模式为水平帧内预测模式时，可以将当前块划分为大小为(W/4)×H的分区。并且，在当前样本位于当前块的帧内预测参考样本的最近分区中时，可以将当前样本的第一预测样本的权重设置为6，并且将第二预测样本的权重设置为2，或者，在当前样本位于当前块的帧内预测参考样本的第二最近分区中时，可以将当前样本的第一预测样本的权重设置为5，并且将第二预测样本的权重设置为3，或者，在当前样本位于当前块的帧内预测参考样本的第三最近分区中时，可以将当前样本的第一预测样本的权重设置为3，并且将第二预测样本的权重设置为5，或者，在当前样本位于当前块的帧内预测参考样本的最远分区中时，可以将当前样本的第一预测样本的权重设置为2，并且将第二预测样本的权重设置为6。在此，当前块的大小可以是WxH，W可以表示当前块的宽度，H可以表示当前块的高度。
此外，例如，在当前块的帧内预测模式是垂直帧内预测模式时，当前块可以被划分为大小为W×(H/4)的分区。并且，在当前样本位于当前块的帧内预测参考样本的最近分区中时，可以将当前样本的第一预测样本的权重设置为6，并且将第二预测样本的权重设置为2，或者，在当前样本位于当前块的帧内预测参考样本的第二最近分区中时，可以将当前样本的第一预测样本的权重设置为5，并且将第二预测样本的权重设置为3，或者，在当前样本位于当前块的帧内预测参考样本的第三最近分区中时，可以将当前样本的第一预测样本的权重设置为3，并且将第二预测样本的权重设置为5，或者，在当前样本位于当前块的帧内预测参考样本的最远分区中时，可以将当前样本的第一预测样本的权重设置为2，并且将第二预测样本的权重设置为6。
此后，可以通过基于权重对第一预测样本和第二预测样本执行加权平均来导出当前样本的预测样本。例如，可以通过以下等式导出预测样本。
[等式1]
PCIIP＝((8-wt)*Pinter+wt*Pintra+4)＞＞3
其中，PCIIP可以表示预测样本，Pintra可以表示第一预测样本，Pinter可以表示第二预测样本，wt可以表示第一预测样本的权重，以及(8-wt)可以表示第二预测样本的权重。
同时，当如上所述执行帧内预测时，可以应用一般帧内预测、MRL和/或ISP。在此，在一般帧内预测、MRL和ISP中可以采用不同的MPM列表生成方法。在一般帧内预测中可以使用67个帧内预测模式，在基于MRL的帧内预测中可以使用除平面帧内预测模式和DC帧内预测模式之外的65个帧内预测模式，以及在ISP中可以使用除了DC帧内预测模式外的66个帧内预测模式。由于以使用不同数量的帧内预测模式的三个帧内预测(一般帧内预测、基于MRL的帧内预测和ISP)执行编码/解码，对于各个帧内预测，MPM列表生成方法可能不同。
具体地，当执行一般帧内预测时，可以使用全部67个帧内预测模式来构建包括六个MPM候选的MPM列表。当执行基于MRL的帧内预测时，可以使用除平面帧内预测模式和DC帧内预测模式之外的所有65个帧内预测模式来构建包括六个MPM候选的MPM列表。此外，当执行ISP时，可以使用除DC帧内预测模式之外的66个帧内预测模式来构建包括六个MPM候选的MPM列表。在此，可以通过取决于ISP的分割类型是水平分割还是垂直分割的方法来构建MPM列表。
图12图示了根据应用的帧内预测导出MPM列表的示例。参照图12，解码装置可以确定是否将MRL或ISP应用于当前块(S1205)。如果将MRL或ISP应用于当前块，则解码装置可以确定是否将MRL应用于当前块(S1210)。如果将MRL应用于当前块，则解码装置可以生成用于当前块的MRL MPM列表(S1215)。在此，MRL MPM列表可以是通过在应用MRL时的MPM列表生成方法生成的MPM列表。随后，解码装置可以解析MPM索引(S1220)。MPM索引可以指示在MPM候选当中被导出为当前块的帧内预测模式的MPM候选。解码装置可以将MRL MPM列表的MPM候选当中由MPM索引指示的MPM候选导出为当前块的帧内预测模式。
如果对当前块应用了ISP而不是MRL，则解码装置可以生成用于当前块的ISP MPM列表(S1225)。在此，ISP MPM列表可以是通过在应用ISP时的MPM列表生成方法生成的MPM列表。此后，解码装置可以解析MPM索引(S1220)。解码装置可以将ISP MPM列表的MPM候选当中由MPM索引指示的MPM候选导出为当前块的帧内预测模式。
如果MRL和ISP中的任一个都没有被应用于当前块，则解码装置可以解析当前块的MPM标志(S1230)。随后，解码装置可以基于MPM标志，确定当前块的帧内预测模式是否为MPM模式，即，可以基于MPM标志，确定当前块的帧内预测模式是否为MPM列表中包括的MPM候选(S1235)。在此，MPM标志可以指示当前块的帧内预测模式是否被包括在MPM列表中。
如果当前块的帧内预测模式是MPM模式，则解码装置可以生成在一般帧内预测中的MPM列表(S1240)并且解析当前块的MPM索引(S1220)。解码装置可以将MPM列表的MPM候选之中，由MPM索引指示的MPM候选导出为当前块的帧内预测模式。
另一方面，如果当前块的帧内预测模式不是MPM模式，即，如果当前块的帧内预测模式不被包括在MPM候选中，则解码装置可以解析表示不被包括在MPM列表的MPM候选中的剩余帧内预测模式之一的剩余帧内预测模式信息(S1245)。解码装置可以将剩余帧内预测模式当中由剩余帧内预测模式信息指示的帧内预测模式导出为当前块的帧内预测模式。
如上所述，可以根据帧内预测使用不同方法来配置包括六个MPM候选的MPM列表。然而，如果MPM列表生成方法取决于帧内预测执行方法，则可能会增加编译复杂度并且可能会降低编译效率。
因此，本公开提出一种将在传统的一般帧内预测、基于MRL的帧内预测和ISP中使用的MPM列表生成方法修改为一般化方法的方法。即，本公开提出了一种使用一般化方法生成MPM列表的方法。可以通过使用一般化MPM列表生成方法，简化帧内预测编/解码结构并且提高使用帧内预测模式的编码/解码效率以提高视频编译效率。
作为实施例，提出了一种使用一般化方法生成MPM列表，然后将MPM列表中的MPM候选应用为传统一般帧内预测、基于MRL的帧内预测和ISP帧内预测中的帧内预测模式的方法。
例如，可以将生成在传统的一般帧内预测中使用的包括六个MPM候选的MPM列表的方法应用为用于基于MRL的帧内预测和基于ISP的帧内预测的MPM列表生成方法。在此，MPM列表生成方法可以是传统的MPM列表生成方法或从传统的MPM列表生成方法增强的方法。上述生成在传统的一般帧内预测中使用的包括六个MPM候选的MPM列表的方法是考虑所有67个帧内预测模式来生成MPM列表的方法，并且MPM列表可以包括平面帧内预测模式和/或DC帧内预测模式作为MPM候选。然而，由于基于MRL的帧内预测中不使用平面帧内预测模式和DC帧内预测模式并且在基于ISP的帧内预测中不使用DC帧内预测模式，因此对基于MRL的帧内预测和基于ISP的帧内预测，可能需要不同于传统方法的MPM列表构建方法。
图13图示了根据本实施例的构建当前块的MPM列表并导出帧内预测模式的示例。参照图13，解码装置可以确定是否将MRL或ISP应用于当前块(S1310)。如果将MRL或ISP应用于当前块，则解码装置可以生成当前块的MPM列表(S1320)并解析用于当前块的MPM索引(S1330)。解码装置可以将MPM列表的MPM候选之中，由MPM索引指示的MPM候选导出为当前块的帧内预测模式。
如果MRL和ISP中的任何一个都未被应用于当前块，则解码装置可以解析用于当前块的MPM标志(S1340)并且基于MPM标志，确定当前块的帧内预测模式是否被包括在MPM列表中(S1350)。MPM标志可以指示当前块的帧内预测模式是否被包括在MPM列表的MPM候选中。
在当前块的帧内预测模式为MPM模式时，即，当MPM标志指示当前块的帧内预测模式被包括在MPM列表的MPM候选中时(例如，当MPM标志为1时)，解码装置可以生成当前块的MPM列表(S1320)。在此，MPM列表可以与在将MRL或ISP应用于当前块时生成的MPM列表相同。随后，解码装置可以解析用于当前块的MPM索引(S1330)并且将MPM列表的MPM候选当中由MPM索引指示的MPM候选导出为当前块的帧内预测模式。
另一方面，在当前块的帧内预测模式不是MPM模式时，即，当MPM标志指示当前块的帧内预测模式不被包括在MPM列表的MPM候选中时(例如，当MPM标志为0)时，解码装置可以解析当前块的剩余帧内预测模式信息(S1360)。解码装置可以将剩余帧内预测模式当中由剩余帧内预测模式信息指示的帧内预测模式导出为当前块的帧内预测模式。
本实施例中提出的并且常用在一般帧内预测、基于MRL的帧内预测和基于ISP的帧内预测中的MPM列表生成方法可以与以下示例相同。
MPM列表生成方法的示例可以如下表所示。
[表3]
根据表3所示的MPM列表生成方法的示例，编码装置/解码装置可以将MPM候选0导出为当前块的左相邻块的帧内预测模式，如果导出的MPM候选0是平面帧内预测模式则可以将MPM候选1导出为DC帧内预测模式，如果导出的MPM候选0不是平面帧内预测模式则可以将MPM候选1导出为平面帧内预测模式，可以将MPM候选2导出为垂直帧内预测模式，可以将MPM候选3导出为水平帧内预测模式，可以将MPM候选4导出为与通过从垂直帧内预测模式的模式编号减去4获得的模式编号(即帧内预测模式#46)相对应的帧内预测模式，以及可以将MPM候选5导出为与通过对垂直帧内预测模式的模式编号加4得到的模式编号(即，帧内预测模式#54)相对应的帧内预测模式。
此后，编码装置/解码装置可以确定当前块的左相邻块的帧内预测模式是否与上相邻块的帧内预测模式相同，并且基于左相邻块的帧内预测模式是否与上相邻块的帧内预测模式相同，重构MPM列表。例如，当左相邻块的帧内预测模式与上相邻块的帧内预测模式相同时，编码装置/解码装置可以确定左相邻块的帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，并且如果左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号，则导出当前块的MPM列表，其包括所导出的MPM候选0至MPM候选5，如下所述。
-mpm[0]＝leftIntraDir
-mpm[1]＝PLANAR_IDX
-mpm[2]＝DC_IDX
-mpm[3]＝((leftIntraDir+offset)％mod)+2
-mpm[4]＝((leftIntraDir-1)％mod)+2
-mpm[5]＝((leftIntraDir+offset-1)％mod)+2
即，可以将MPM列表的MPM候选0导出为左相邻块的帧内预测模式，可以将MPM列表的MPM候选1导出为平面帧内预测模式，可以将MPM列表的MPM候选2导出为DC帧内预测模式，可以将MPM列表的MPM候选3导出为模式编号为((leftIntraDir+offset)％mod)+2的帧内预测模式，即具有通过对左相邻块的帧内预测模式的模式编号和偏移量之和执行模算术运算，并将模算术运算结果加2获得的值作为模式编号的帧内预测模式，可以将MPM列表的MPM候选4导出为模式编号为((leftIntraDir–1)％mod)+2的帧内预测模式，即具有通过对左相邻块的帧内预测模式的模式编号减1获得的值执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式，以及可以将MPM列表的MPM候选5导出为模式编号为((leftIntraDir+offset–1)％mod)+2的帧内预测模式，即具有通过对左相邻块的帧内预测模式的模式编号与(偏移-1)之和执行模算术运算并对模算术运算结果加2获得的值作为模式编号的帧内预测模式。
例如，如果左相邻块的帧内预测模式与上相邻块的帧内预测模式相同，并且左相邻块的帧内预测模式的模式编号不大于DC帧内预测模式的模式编号，则编码装置/解码装置可以导出当前块的MPM列表，该列表包括先前导出的MPM候选0至MPM候选5。
另一方面，如果左相邻块的帧内预测模式与上相邻块的帧内预测模式不同，那么，例如，编码装置/解码装置可以将当前块的左相邻块的帧内预测模式导出为MPM列表的MPM候选0，并且可以将当前块的上相邻块的帧内预测模式导出为MPM列表的MPM候选1。此外，如果MPM候选0的模式编号大于MPM候选1的模式编号，则编码装置/解码装置可以将maxCandModeIdx导出为0，以及如果MPM候选0的模式编号不大于MPM候选1的模式编号，则编码装置/解码装置可以将maxCandModeIdx导出为1。
然后，如果左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号，则编码装置/解码装置可以将平面帧内预测模式导出为MPM列表的MPM候选2并且可以将DC帧内预测模式导出为MPM列表的MPM候选3。
然后，如果通过从模式编号mpm[maxCandModeIdx]减去模式编号mpm[！maxCandModeIdx]获得的值小于63且大于1，则编码装置/解码装置可以将具有模式编号((mpm[maxCandModeIdx]+offset)％mod)+2的帧内预测模式导出为MPM列表的MPM候选4并且将具有模式编号((mpm[maxCandModeIdx]-1)％mod)+2的帧内预测模式导出为MPM列表的MPM候选5。在此，如果maxCandModeIdx为0，则mpm[maxCandModeIdx]可以指示MPM候选0并且mpm[！maxCandModeIdx]可以指示MPM候选1，并且如果maxCandModeIdx为1，则mpm[maxCandModeIdx]可以指示MPM候选1并且mpm[！maxCandModeIdx]可以指示MPM候选0。
进一步地，如果从模式编号mpm[maxCandModeIdx]减去模式编号mpm[！maxCandModeIdx]得到的值等于或大于63或等于或小于1，则编码装置/解码装置可以将模式编号为((mpm[maxCandModeIdx]+offset-1)％mod)+2的帧内预测模式导出MPM列表的MPM候选4，并且可以将模式编号为((mpm[maxCandModeIdx])％mod)+2的帧内预测模式导出为MPM列表的MPM候选5。
例如，如果左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的至少一个不大于DC帧内预测模式的模式编号，则编码装置/解码装置可以确定左相邻块的帧内预测模式的模式编号与上相邻块的帧内预测模式的模式编号之和是否等于或大于2，并且如果左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号之和等于或大于2，则如下导出MPM候选2至MPM候选5。
-mpm[2]＝(mpm[！maxCandModeIdx]＝＝PLANAR_IDX)？DC_IDX：PLANAR_IDX
-mpm[3]＝((mpm[maxCandModeIdx]+offset)％mod)+2
-mpm[4]＝((mpm[maxCandModeIdx]-1)％mod)+2
-mpm[5]＝((mpm[maxCandModeIdx]+offset-1)％mod)+2
也就是说，如果mpm[！maxCandModeIdx]是平面帧内预测模式，则MPM列表的MPM候选2可以被导出为DC帧内预测模式，以及如果mpm[！maxCandModeIdx]不是平面帧内预测模式，则可以被导出为平面帧内预测模式。另外，可以将MPM列表的MPM候选3导出为模式编号为((mpm[maxCandModeIdx]+offset)％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]和偏移量之和执行模算术运算并且将模算术运算结果加2得到的值作为模式编号的帧内预测模式，可以将MPM列表的MPM候选4导出为具有模式编号((mpm[maxCandModeIdx]-1)％mod)+2的帧内预测模式，即具有通过对通过从mpm[maxCandModeIdx]减1得到的值执行模算术运算并且对模算术运算结果加2得到的值作为模式编号的帧内预测模式，以及可以将MPM列表的MPM候选5导出为模式编号为((mpm[maxCandModeIdx]+offset-1)％mod)+2的帧内预测模式，即，具有通过对mpm[maxCandModeIdx]和(offset-1)之和执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式。
否则，可以使用MPM列表生成方法的另一个示例。MPM列表生成方法的另一示例可以如下表所示。
[表4]
根据表4所示的MPM列表生成方法的示例，编码装置/解码装置可以将当前块的MPM候选0导出为当前块的左相邻块的帧内预测模式，如果所导出的MPM候选0是平面帧内预测模式则可以将MPM候选1导出为DC帧内预测模式，如果所导出的MPM候选0不是平面帧内预测模式则可以将MPM候选1导出为平面帧内预测模式，可以将MPM候选2导出为垂直帧内预测模式，可以将MPM候选3导出为水平帧内预测模式，可以将MPM候选4导出为与通过从垂直帧内预测模式的模式编号减去4得到的模式编号(即，帧内预测模式#46)相对应的帧内预测模式，并且可以将MPM候选5导出为与通过将4与垂直帧内预测模式的模式编号相加获得的模式编号(即帧内预测模式#54)相对应的帧内预测模式。
此后，编码装置/解码装置可以确定当前块的左相邻块的帧内预测模式是否与上相邻块的帧内预测模式相同，并且基于左相邻块的帧内预测模式是否与上相邻块的帧内预测模式相同，构建MPM列表。例如，当左相邻块的帧内预测模式与上相邻块的帧内预测模式相同时，编码装置/解码装置可以确定左相邻块的帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，并且如果左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号，则导出当前块的MPM列表，其包括所导出的MPM候选0至MPM候选5，如下所述。
-mpm[0]＝leftIntraDir
-mpm[1]＝PLANAR_IDX
-mpm[2]＝((leftIntraDir+offset)％mod)+2
-mpm[3]＝((leftIntraDir-1)％mod)+2
-mpm[4]＝DC_IDX
-mpm[5]＝((leftIntraDir+offset-1)％mod)+2
即，可以将MPM列表的MPM候选0导出为左相邻块的帧内预测模式，可以将MPM列表的MPM候选1导出为平面帧内预测模式，可以将MPM列表的MPM候选2导出为模式编号为((leftIntraDir+offset)％mod)+2的帧内预测模式，即具有通过对左相邻块的帧内预测模式的模式编号和偏移量之和执行模算术运算，并将模算术运算结果加2获得的值作为模式编号的帧内预测模式，可以将MPM列表的MPM候选3导出为模式编号为((leftIntraDir–1)％mod)+2的帧内预测模式，即具有通过对从左相邻块的帧内预测模式的模式编号减1获得的值执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式，可以将MPM列表的MPM候选4导出为DC帧内预测模式，以及可以将MPM列表的MPM候选5导出为模式编号为((leftIntraDir+offset–1)％mod)+2的帧内预测模式，即具有通过对左相邻块的帧内预测模式的模式编号与(偏移-1)之和执行模算术运算并对模算术运算结果加2获得的值作为模式编号的帧内预测模式。
例如，如果左相邻块的帧内预测模式与上相邻块的帧内预测模式相同，并且左相邻块的帧内预测模式的模式编号不大于DC帧内预测模式的模式编号，则编码装置/解码装置可以导出当前块的MPM列表，该列表包括先前导出的MPM候选0至MPM候选5。
另一方面，如果左相邻块的帧内预测模式与上相邻块的帧内预测模式不同，那么，例如，编码装置/解码装置可以将当前块的左相邻块的帧内预测模式导出为MPM列表的MPM候选0，并且可以将当前块的上相邻块的帧内预测模式导出为MPM列表的MPM候选1。此外，如果MPM候选0的模式编号大于MPM候选1的模式编号，则编码装置/解码装置可以将maxCandModeIdx导出为0，以及如果MPM候选0的模式编号不大于MPM候选1的模式编号，则编码装置/解码装置可以将maxCandModeIdx导出为1。
然后，如果左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号，则编码装置/解码装置可以将平面帧内预测模式导出为MPM列表的MPM候选1并且可以将上相邻块的帧内预测模式导出为MPM列表的MPM候选2。此外，如果MPM候选0的模式编号大于MPM候选2的模式编号，则编码装置/解码装置可以将maxCandModeIdx导出为0，并且如果MPM候选0的模式编号不大于MPM候选2的模式编号，则可以将maxCandModeIdx导出为2。另外，如果MPM候选0的模式编号大于MPM候选2的模式编号，则编码装置/解码装置可以将minCandModeidx导出为2，以及如果MPM候选0的模式编号不大于MPM候选2的模式编号，则可以将maxCandModeIdx导出为0。此外，编码装置/解码装置可以将DC帧内预测模式导出为MPM列表的MPM候选3。
然后，如果通过从模式编号mpm[maxCandModeIdx]减去模式编号mpm[minCandModeidx]获得的值小于63且大于1，则编码装置/解码装置可以将具有模式编号((mpm[maxCandModeIdx]+offset)％mod)+2的帧内预测模式导出为MPM列表的MPM候选4并且将具有模式编号((mpm[maxCandModeIdx]-1)％mod)+2的帧内预测模式导出为MPM列表的MPM候选5。在此，如果maxCandModeIdx为0，则mpm[maxCandModeIdx]可以是MPM候选0，如果maxCandModeIdx是1，则mpm[maxCandModeIdx]可以是MPM候选1，如果maxCandModeIdx是2，则mpm[maxCandModeIdx]可以是MPM候选2，如果minCandModeidx为0，则mpm[minCandModeidx]可以是MPM候选0，以及如果minCandModeidx为2，则mpm[minCandModeidx]可以是MPM候选2。
进一步地，如果从模式编号mpm[maxCandModeIdx]减去模式编号mpm[minCandModeidx]得到的值等于或大于63或等于或小于1，编码装置/解码装置可以将模式编号为((mpm[maxCandModeIdx]+offset-1)％mod)+2的帧内预测模式导出为MPM列表的MPM候选4，并且可以将模式编号为((mpm[maxCandModeIdx])％mod)+2的帧内预测模式导出为MPM列表的MPM候选5。
例如，如果左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的至少一个不大于DC帧内预测模式的模式编号，则编码装置/解码装置可以确定左相邻块的帧内预测模式的模式编号与上相邻块的帧内预测模式的模式编号之和是否等于或大于2，并且如果左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号之和等于或大于2，则确定左相邻块的帧内预测模式和上相邻块的帧内预测模式中的至少一个是否与平面帧内预测模式相同。
如果左相邻块的帧内预测模式和上相邻块的帧内预测模式中的至少一个与平面帧内预测模式相同，则编码装置/解码装置可以如下导出MPM候选0和MPM候选1。
-mpm[0]＝PLANAR_IDX
-mpm[1]＝(leftIntraDir<aboveIntraDir)？aboveIntraDir:leftIntraDir
即，可以将MPM列表的MPM候选0导出为平面帧内预测模式，如果左相邻块的帧内预测模式的模式编号小于上相邻块的帧内预测模式的模式编号，则可以将MPM列表的MPM候选1导出为上相邻块的帧内预测模式，以及如果左相邻块的帧内预测模式的模式编号等于或大于上相邻块的帧内预测模式的模式编号，则可以将MPM列表的MPM候选1导出为左相邻块的帧内预测模式。此外，maxCandModeIdx可以被导出为1。
另一方面，如果左相邻块的帧内预测模式和上相邻块的帧内预测模式与平面帧内预测模式不同，则MPM列表的MPM候选0和MPM候选1可以是先前导出的帧内预测模式。此外，maxCandModeIdx可以是先前导出的值。
此外，如果左相邻块的帧内预测模式的模式编号与上相邻块的帧内预测模式的模式编号之和等于或大于2，则编码装置/解码装置可以导出MPM候选2至MPM候选5如下。
-mpm[2]＝(mpm[！maxCandModeIdx]＝＝PLANAR_IDX)？DC_IDX：PLANAR_IDX
-mpm[3]＝((mpm[maxCandModeIdx]+offset)％mod)+2
-mpm[4]＝((mpm[maxCandModeIdx]-1)％mod)+2
-mpm[5]＝((mpm[maxCandModeIdx]+offset-1)％mod)+2
也就是说，如果mpm[！maxCandModeIdx]是平面帧内预测模式，则可以将MPM列表的MPM候选2导出为DC帧内预测模式，以及如果mpm[！maxCandModeIdx]不是平面帧内预测模式，则可以将MPM列表的MPM候选2导出为平面帧内预测模式。另外，可以将MPM列表的MPM候选3导出为模式编号为((mpm[maxCandModeIdx]+offset)％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]和偏移量之和执行模算术运算并且将模算术运算结果加2得到的值作为模式编号的帧内预测模式，可以将MPM列表的MPM候选4导出为具有模式编号((mpm[maxCandModeIdx]-1)％mod)+2的帧内预测模式，即具有通过对通过从mpm[maxCandModeIdx]减1获得的值执行模算术运算并且对模算术运算结果加2得到的值作为模式编号的帧内预测模式，以及可以将MPM列表的MPM候选5导出为模式编号为((mpm[maxCandModeIdx]+offset-1)％mod)+2的帧内预测模式，即，具有通过对mpm[maxCandModeIdx]和(offset-1)之和执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式。
否则，可以使用MPM列表生成方法的另一个示例。MPM列表生成方法的另一示例可以如下表所示。
[表5]
根据表5所示的MPM列表生成方法的示例，编码装置/解码装置可以确定当前块的左相邻块的帧内预测模式是否与上相邻块的帧内预测模式相同。
如果左相邻块的帧内预测模式与上相邻块的帧内预测模式相同，则编码装置/解码装置可以确定左相邻块的帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，以及如果左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号，则可以导出当前块的MPM列表，包括如下导出的MPM候选0至MPM候选2。
-mpm[0]＝g_intraMode65to33AngMapping[leftIntraDir]
-mpm[1]＝((g_intraMode65to33AngMapping[leftIntraDir]+offset)％mod)+2
-mpm[2]＝((g_intraMode65to33AngMapping[leftIntraDir]-1)％mod)+2
即，可以将MPM列表的MPM候选0导出为左相邻块的帧内预测模式。另外，可以将MPM列表的MPM候选1导出为模式编号为((g_intraMode65to33AngMapping[leftIntraDir]+offset)％mod)+2的帧内预测模式，即具有通过对左相邻块的帧内预测模式的模式编号与偏移量之和执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式，以及可以将MPM列表的MPM候选2导出为模式编号为((g_intraMode65to33AngMapping[leftIntraDir]-1)％mod)+2的帧内预测模式，即具有通过对通过从左相邻块的帧内预测模式的模式编号减1获得的值执行模算术运算并且将模算术运算结果加2得到的值作为模式编号的帧内预测模式。
如果左相邻块的帧内预测模式的模式编号等于或小于DC帧内预测模式的模式编号，则编码装置/解码装置可以导出包括如下所述导出的MPM候选0至MPM候选2的当前块的MPM列表。
-mpm[0]＝g_intraMode65to33AngMapping[PLANAR_IDX]
-mpm[1]＝g_intraMode65to33AngMapping[DC_IDX]
-mpm[2]＝g_intraMode65to33AngMapping[VER_IDX]
即，MPM列表的MPM候选0可以被导出为平面帧内预测模式，可以将MPM列表的MPM候选1导出为DC帧内预测模式，以及可以将MPM列表的MPM候选2导出为垂直帧内预测模式。
另一方面，如果左相邻块的帧内预测模式与上相邻块的帧内预测模式不同，编码装置/解码装置可以将MPM候选0导出为当前块的左相邻块的帧内预测模式并且可以将MPM候选1导出为当前块的上相邻块的帧内预测模式。
如果左相邻块的帧内预测模式和上相邻块的帧内预测模式都不是平面帧内预测模式，则编码装置/解码装置可以将MPM候选2导出为平面帧内预测模式。如果左相邻块的帧内预测模式和上相邻块的帧内预测模式中的至少一个是平面帧内预测模式，则编码装置/解码装置可以确定左相邻块的帧内预测模式的模式编号与上相邻块的帧内预测模式的模式编号之和是否小于2，如果左相邻块的帧内预测模式的模式编号与上相邻块的帧内预测模式的模式编号之和小于2，则将MPM候选2导出为垂直帧内预测模式，以及如果左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号之和等于或大于2，则将MPM候选2导出为DC帧内预测模式。
此外，本公开提出将在传统的一般帧内预测、基于MRL的帧内预测和基于ISP的帧内预测中使用的MPM列表生成方法修改为一般化方法的另一实施例。提出了一种不考虑不用于编码器阶段的多参考线帧内预测和子分区帧内预测的帧内预测模式的方法。
作为示例，当编码器执行多参考线帧内预测时，编码器仅考虑包括在MPM列表中的帧内预测模式来执行帧内预测。例如，在本实施例中可以提出在生成MPM列表时不考虑不被用于MRL和/或ISP的帧内预测模式的示例。
即，例如，当编码装置执行基于MRL的帧内预测时，编码装置可以仅考虑包括在MPM列表中的帧内预测模式来执行帧内预测。即，当MPM列表包括平面帧内预测模式或DC帧内预测模式时，在本实施例中，编码装置可以不选择平面帧内预测模式或DC帧内预测模式作为当前块的帧内预测模式。此外，作为与前述示例类似的示例，当编码装置执行ISP时，当MPM列表包括DC帧内预测模式时，编码装置可以跳过DC帧内预测模式。
本实施例中提出的MPM模式生成方法和模式解码方法可以与上述实施例的MPM模式生成方法和模式解码方法相同，并且可以包括仅在编码时不考虑特定帧内预测模式的特征。因此，在MPM索引编码和解码期间，可能会在一定程度上降低编译效率，但可以根据生成一般化MPM列表降低硬件和软件实现复杂度，并且可以维持不使用特定帧内预测模式的基于MRL的帧内预测和ISP。
本实施例提出了一种在应用基于MRL的帧内预测和/或ISP时，与特定帧内预测模式无关地，由编码装置执行帧内预测的方法。在这种情况下，解码装置解析的MPM索引可以不指示特定帧内预测模式。
例如，可以提出示例，其中当应用基于MRL的帧内预测时，禁止使用平面帧内预测模式和DC帧内预测模式的编码，并且当应用ISP时，禁止使用DC帧内预测模式的编码。
图14图示了根据本实施例的基于帧内预测的编码的示例。参照图14，编码装置可以确定是否将MRL或ISP应用于当前块(S1405)。如果对当前块应用了MRL或ISP，则编码装置可以确定是否应用了MRL(S1410)。
如果MRL被应用于当前块，则编码装置可以通过MPM列表生成过程来生成当前块的MPM列表(S1415)。此后，编码装置可以基于MPM列表中除了平面帧内预测模式和DC帧内预测模式之外的MPM候选(即，除了平面帧内预测模式和DC帧内预测模式外，被导出为MPM列表的MPM候选的帧内预测模式)，对当前块执行帧内预测(S1420)并且为当前块选择最佳帧内预测模式(S1425)。
如果ISP被应用于当前块而不是MRL，则编码装置可以通过MPM列表生成过程生成当前块的MPM列表(S1430)。在此，MPM列表生成过程可以与在应用MRL时执行的上述MPM列表生成过程相同。此后，编码装置可以基于除DC帧内预测模式之外的MPM列表中的MPM候选(即，除DC帧内预测模式之外的被导出为MPM列表的MPM候选的帧内预测模式)，对当前块执行帧内预测(S1435)，并且对当前块选择最佳帧内预测模式(S1440)。
如果MRL和ISP均未被应用于当前块，则编码装置可以基于67个帧内预测模式对当前块执行一般帧内预测(S1445)，并且为当前块选择最佳帧内预测模式(S1450)。
作为另一示例，可以提出示例，其中当应用基于MRL的帧内预测时禁止使用平面帧内预测模式的编码，并且当应用ISP时禁止使用DC帧内预测模式的编码。
图15图示了根据本实施例的基于帧内预测的编码的示例。参照图15，编码装置可以确定是否将MRL或ISP应用于当前块(S1505)。如果对当前块应用了MRL或ISP，则编码装置可以确定是否应用了MRL(S1510)。
如果MRL被应用于当前块，则编码装置可以通过MPM列表生成过程来生成当前块的MPM列表(S1515)。此后，编码装置可以基于MPM列表中除了平面帧内预测模式之外的MPM候选(即，除了平面帧内预测模式外的被导出为MPM列表的MPM候选的帧内预测模式)，对当前块执行帧内预测(S1520)，并且为当前块选择最佳帧内预测模式(S1525)。
如果ISP而不是MRL被应用于当前块，则编码装置可以通过MPM列表生成过程生成当前块的MPM列表(S1530)。在此，MPM列表生成过程可以与在应用MRL时执行的上述MPM列表生成过程相同。此后，编码装置可以基于除DC帧内预测模式之外的MPM列表中的MPM候选(即，除DC帧内预测模式之外的的被导出为MPM列表的MPM候选的帧内预测模式)，对当前块执行帧内预测(S1535)，并且对当前块选择最佳帧内预测模式(S1540)。
如果MRL和ISP均未被应用于当前块，则编码装置可以基于67个帧内预测模式对当前块执行一般帧内预测(S1545)，并且为当前块选择最佳帧内预测模式(S1550)。
作为另一示例，可以提出当应用基于MRL的帧内预测时禁止使用平面帧内预测模式的编码的示例。
图16图示了根据本实施例的基于帧内预测的编码的示例。参照图16，编码装置可以确定是否将MRL或ISP应用于当前块(S1605)。如果对当前块应用了MRL或ISP，则编码装置可以确定是否应用了MRL(S1610)。
如果MRL被应用于当前块，则编码装置可以通过MPM列表生成过程来生成当前块的MPM列表(S1615)。此后，编码装置可以基于MPM列表中除了平面帧内预测模式之外的MPM候选(即，除了平面帧内预测模式外，被导出为MPM列表的MPM候选的帧内预测模式)，对当前块执行帧内预测(S1620)，并且为当前块选择最佳帧内预测模式(S1625)。
如果ISP而不是MRL被应用于当前块，则编码装置可以通过MPM列表生成过程生成当前块的MPM列表(S1630)。在此，MPM列表生成过程可以与在应用MRL时执行的上述MPM列表生成过程相同。此后，编码装置可以基于MPM列表中的MPM候选(即，被导出为MPM列表的MPM候选的帧内预测模式)，对当前块执行帧内预测(S1635)并且对当前块选择最佳帧内预测模式(S1640)。
如果MRL和ISP均未被应用于当前块，则编码装置可以基于67个帧内预测模式对当前块执行一般帧内预测(S1645)，并且为当前块选择最佳帧内预测模式(S1650)。
同时，本公开提出了一种在应用MRL时，更有效地执行基于DC帧内预测模式执行的帧内预测的方法。例如，本实施例提出了一种方法，该方法用于在基于MRL的帧内预测中，当应用DC帧内预测模式时(即在当前块的帧内预测类型为MRL且当前块的帧内预测模式为DC帧内预测模式时)计算DC值。
图17图示了在当前块的帧内预测类型是MRL并且当前块的帧内预测模式是DC帧内预测模式时，用于导出DC值的参考样本。
图17的(a)可以表示在当前块是正方形块时，用来导出DC值的参考样本。例如，当由参考线索引所指示的参考线为参考线0、参考线1、参考线2或参考线3时，可以基于图17的(a)中所示的区域(1700)中的参考样本来导出DC值。即，可以基于当前块的上参考线中的从左端参考样本的等于宽度的数量的参考样本和当前块的左参考线中的从上端参考样本的等于宽度的数量的参考样本，导出DC值。换句话说，在当前块的大小为WxH且当前块的左上位置的x分量和y分量为0时，可以基于在由参考线索引指示的上参考线中的(0,-refIdx-1)坐标参考样本到(W-1,-refIdx-1)坐标参考样本以及在由参考线索引指示的左参考线中的(-refIdx-1,0)坐标参考样本到(-refIdx-1,H-1)坐标参考样本，导出DC值。
例如，可以如下述等式导出DC值。
[等式2]
其中，dcVal可以表示DC值，nTbW可以表示当前块的宽度，refIdx可以表示参考线索引所指示的参考线。
此外，图17的(b)可以表示在当前块是非正方形块时，用来导出DC值的参考样本。在本实施例中，在当前块为非正方形块时，可以基于在当前块的宽度和高度中较长边的参考线中的参考样本来导出DC值。例如，当参考线索引所指示的参考线为参考线0、参考线1、参考线2或参考线3时，可以基于在当前块的宽度和高度中较长边的参考线的区域(1710)中的参考样本来导出DC值。例如，在当前块的宽度大于高度时，可以基于当前块的上参考线中的从左端参考样本的与宽度相同的数量的参考样本来导出DC值。换句话说，在当前块的大小为WxH且当前块的左上位置的x分量和y分量为0时，可以基于在由参考线索引指示的上参考线中的(0,-refIdx-1)坐标参考推样本到(W-1,-refIdx-1)坐标参考样本来导出DC值。可以如下述等式导出DC值。
[等式3]
其中，dcVal可以表示DC值，nTbW可以表示当前块的宽度，refIdx可以表示参考线索引所指示的参考线。
另外，例如，在当前块的宽度小于高度时，可以基于当前块的左参考线中的从上端参考样本的与高度相同的数量的参考样本来导出DC值。换句话说，在当前块的大小为WxH且当前块的左上位置的x分量和y分量为0时，可以基于在由参考线索引指示的左参考线中(-refIdx-1,0)坐标参考样本到(-refIdx-1,H-1)坐标参考样本，来导出DC值。可以如下述等式导出DC值。
[等式4]
其中，dcVal可以表示DC值，nTbH可以表示当前块的高度，refIdx可以表示由参考线索引所指示的参考线。
此后，可以将当前块的预测样本导出为DC值。
同时，本公开提出了一种在应用MRL时更有效地执行基于平面帧内预测模式执行的帧内预测的方法。例如，本实施例提出一种方法，该方法用于在基于MRL的帧内预测中，应用平面帧内预测模式时(即在当前块的帧内预测类型为MRL并且当前块的帧内预测模式为平面帧内预测模式时)，确定用于平面预测的参考样本。
图18图示了在当前块的帧内预测类型是MRL并且当前块的帧内预测模式是平面帧内预测模式时使用的参考样本。
参照图18，当由参考线索引指示的参考线是参考线0、参考线1、参考线2或参考线3时，可以基于图18中所示的参考线的区域(1800)中的参考样本，执行平面预测。根据本实施例，可以基于当前块的宽度/高度的末端+1的样本来执行平面预测，与参考线索引无关。即，根据本实施例，在当前块的左上位置的x分量和y分量为0，当前块的帧内预测类型为MRL，并且当前块的帧内预测模式为平面帧内预测模式时，可以基于上参考线中的(W,-refIdx-1)坐标的参考样本和左参考线中的(-refIdx-1,H)坐标的参考样本来执行当前块的平面预测。
参考本实施例，可以使用由参考线索引所指示的参考线的参考样本来执行平面帧内预测，具体地，可以基于参考线的参考样本当中，与当前块的当前样本位置相同行(即相同y坐标)中的左参考样本以及与当前样本位置相同列(即，相同x坐标)中的上参考样本，以及上参考线中的(W,-refIdx-1)坐标的参考样本和左参考线中的(-refIdx-1,H)坐标的参考样本，来执行平面帧内预测。在这种情况下，可以通过基于上述四个参考样本的值执行双向线性插值来导出当前样本的预测样本值。在此，可以假设左下参考样本位于当前样本的下侧并且右上参考样本位于当前样本的右侧来执行双向线性插值。
同时，可以使用与在通常用在上述一般帧内预测、MRL和ISP中的MPM列表生成方法的实施例不同的实施例。即，本公开提出了通常用在一般帧内预测、MRL和ISP中的MPM列表生成方法的另一示例。MPM列表生成方法的另一示例可以如下表所示。
[表6]
根据表6所示的MPM列表生成方法的示例，编码装置/解码装置可以导出当前块的左相邻块的帧内预测模式和上相邻块的帧内预测模式。左相邻块的帧内预测模式可以被表示为leftIntraDir，而上相邻块的帧内预测模式可以被表示为aboveIntraDir。
此外，例如，编码装置/解码装置可以导出默认MPM列表。例如，编码装置/解码装置可以将平面帧内预测模式导出为默认MPM列表的MPM候选0、将DC帧内预测模式导出为默认MPM列表的MPM候选1、将垂直帧内预测模式导出为默认MPM列表的MPM候选2、将水平帧内预测模式导出为默认MPM列表的MPM候选3、将通过从垂直帧内预测模式的模式编号减去4得到的模式编号的帧内预测模式(即，帧内预测模式#46)导出为默认MPM列表的MPM候选4、将通过使垂直帧内预测模式的模式编号加4得到的模式编号的帧内预测模式(即，帧内预测模式#54)导出为默认MPM列表的MPM候选5。
此后，编码装置/解码装置可以确定当前块的左相邻块的帧内预测模式和上相邻块的帧内预测模式是否相同，以及左相邻块的帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号。
例如，当左相邻块的帧内预测模式与上相邻块的帧内预测模式相同且左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号时，编码装置/解码装置可以如下所述导出包括所导出的MPM候选0至MPM候选5的当前块的MPM列表。
-mpm[0]＝PLANAR_IDX
-mpm[1]＝leftIntraDir
-mpm[2]＝2+((leftIntraDir+61)％64)
-mpm[3]＝2+((leftIntraDir–1)％64)
-mpm[4]＝DC_IDX
-mpm[5]＝2+((leftIntraDir+60)％64)
即，可以将MPM列表的MPM候选0导出为平面帧内预测模式，可以将MPM列表的MPM候选1导出为左相邻块的帧内预测模式，可以将MPM列表的MPM候选2导出为具有模式编号2+((leftIntraDir+61)％64)的预测模式，即具有通过对将左相邻块的帧内预测模式的模式编号加61获得的值执行取64的模算术运算并且使模算术运算结果加2获得的值作为模式编号的帧内预测模式，可以将MPM列表的MPM候选3导出为模式编号为2+((leftIntraDir–1)％64)的帧内预测模式，即通过对左相邻块的帧内预测模式的模式编号减1获得的值执行取64的模算术运算并且使模算术运算结果加2得到的值作为模式编号的帧内预测模式，以及可以将MPM列表的MPM候选4导出为DC帧内预测模式，以及可以将MPM列表的MPM候选5导出为模式编号为2+((leftIntraDir+60)％64)的帧内预测模式，即通过对将左相邻块的帧内预测模式的模式编号加60获得的值执行取64的模算术运算并且使模算术运算结果加2获得的值作为模式编号的帧内预测模式。
同时，在当前块的左相邻块的帧内预测模式与上相邻块的帧内预测模式不同时，编码装置/解码装置可以确定左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号，并且上相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号。
当左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号并且上相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号时，编码装置/解码装置可以将平面帧内预测模式导出为MPM列表的MPM候选0、将左相邻块的帧内预测模式导出为MPM列表的MPM候选1、将上相邻块的帧内预测模式导出为MPM列表的MPM候选2、将DC帧内预测模式导出为MPM列表的MPM候选3。另外，当MPM候选1的模式编号大于MPM候选2的模式编号时，编码装置/解码装置可以将maxCandModeIdx导出为1，当MPM候选1的模式编号不大于MPM候选2的模式编号时，编码装置/解码装置可以将maxCandModeIdx导出为2。
此后，当从模式编号mpm[maxCandModeIdx]减去模式编号mpm[minCandModeidx]所获得的值小于63且大于1时，编码装置/解码装置可以将模式编号为2+((maxAB+61)％64)的帧内预测模式导出为MPM列表的MPM候选4，以及将模式编号为2+((maxAB-1)％64)的帧内预测模式导出为MPM列表的MPM候选5。在此，当maxCandModeIdx为1时，mpm[maxCandModeIdx]可以为MPM候选1，当maxCandModeIdx为2时，mpm[maxCandModeIdx]可以为MPM候选2，当minCandModeidx为1时，mpm[minCandModeidx]可以为MPM候选1，当minCandModeidx为2时，mpm[minCandModeidx]可能是MPM候选2。此外，在此，maxAB可以是左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的较大值。
可替代地，当通过从模式编号mpm[maxCandModeIdx]减去模式编号mpm[minCandModeidx]所获得的值大于或等于63或者小于或等于1时，编码装置/解码装置可以将模式编号为2+((maxAB+60)％64)的帧内预测模式导出为MPM列表的MPM候选4，以及将模式编号为2+(maxAB％64)的帧内预测模式导出为MPM列表的MPM候选5。
同时，在当前块的左相邻块的帧内预测模式与上相邻块的帧内预测模式不同，或者左相邻块的帧内预测模式和上相邻块的帧内预测模式的模式编号中的至少一个小于DC帧内预测模式的模式编号时，编码装置/解码装置可以确定左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号之和是否等于或大于DC帧内预测模式的模式编号。
当左相邻块的帧内预测模式的模式编号与上相邻块的帧内预测模式的模式编号之和等于或大于DC帧内预测模式的模式编号时，编码装置/解码装置可以如下所述导出当前块的MPM列表，该列表包括所导出的MPM候选0至MPM候选5。
-mpm[0]＝PLANAR_IDX
-mpm[1]＝(leftIntraDir<aboveIntraDir)？aboveIntraDir:leftIntraDir
-mpm[2]＝DC_IDX
-mpm[3]＝2+((maxAB+61)％64)
-mpm[4]＝2+((maxAB–1)％64)
-mpm[5]＝2+((maxAB+60)％64)
即，可以将MPM列表的MPM候选0导出为平面帧内预测模式；当左相邻块的帧内预测模式的模式编号小于上相邻块的帧内预测模式的模式编号时，可以将MPM列表的MPM候选1导出为上相邻块的帧内预测模式；当左相邻块的帧内预测模式的模式编号大于或等于上相邻块的帧内预测模式的模式编号时，将MPM列表的MPM候选1导出为左相邻块的帧内预测模式；可以将MPM列表的MPM候选2导出为DC帧内预测模式；可以将MPM列表的MPM候选3导出为模式编号为2+((maxAB+61)％64)的帧内预测模式，即具有对通过使左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的较大值加61获得的值执行取64的模算术运算并且使模算术运算结果加2获得的值作为模式编号的帧内预测模式；将MPM列表的MPM候选4导出为模式编号为2+((maxAB-1)％64)的帧内预测模式，即具有对通过从左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的较大值减1获得的值执行取64的模算术运算并且使模算术运算结果加2获得的值作为模式编号的帧内预测模式；将MPM列表的MPM候选5导出为模式编号为2+((maxAB+60)％64)的帧内预测模式，即具有对通过使左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的较大值加60获得的值执行取64的模算术运算并且使模算术运算结果加2获得的值作为模式编号的帧内预测模式。
同时，上述MPM列表的生成方法的实施例可以作为源代码如下表所示。
[表7]
另外，上述MPM列表的生成方法的实施例可以以标准格式如下表所示。
[表8]
同时，当以标准格式表示根据当前块的帧内预测模式的帧内预测时，可以如下表所示。
[表9]
此外，在本公开中应用MRL时执行的基于平面帧内预测模式的帧内预测的实施例可以以标准格式在下表中示出。
[表10]
另外，在本公开中应用MRL时执行的基于DC帧内预测模式的帧内预测的实施例可以以标准格式在下表中示出。
[表11]
另外，根据帧内预测模式导出的水平变换核和垂直变换核可以如下。
[表12]
例如，在当前块的帧内预测模式被确定为DC帧内预测模式时，DCT2可以被用作当前块的残差的变换/逆变换的垂直变换核，以及DCT2可以被用作水平变换核。
同时，根据本公开，根据基于上下文的规则编译，来编译MPM索引的语法元素的bin串的bin中的第一bin，可以旁路编译bin串的剩余bin。
在这种情况下，可以基于当前块的ISP标志的值和/或当前块的参考线索引的值中的至少一个来不同地设置用于指示第一bin的上下文模型的上下文索引增量ctxInc如下。
[表13]
例如，参考表13，当参考线索引的值不为0时，可以将ctxInc导出为2，当参考线索引的值为0时，如果ISP标志的值为1，则可以将ctxInc导出为0，以及如果ISP标志的值不为1，则可以将ctxInc导出为1。
同时，本公开提出了在应用MRL时更有效地执行基于DC帧内预测模式执行的帧内预测的另一实施例。
图19图示了在当前块的帧内预测类型为MRL并且当前块的帧内预测模式是DC帧内预测模式时，用来导出DC值的参考样本。
图19的(a)可以表示在当前块是正方形块时，用来导出DC值的参考样本。例如，当由参考线索引所指示的参考线为参考线0、参考线1、参考线2或参考线3时，可以基于图19的(a)中所示的区域(1900)中的参考样本来导出DC值。即，在当前块的左上位置的x分量和y分量为0时，可以基于当前块的上参考线中的从(-refIdx,-refIdx-1)坐标参考样本的等于宽度的数量的参考样本和当前块的左参考线中的从(-refIdx-1,-refIdx)坐标参考样本的等于宽度的数量的参考样本，导出DC值。例如，当参考线索引的值为0时，可以基于当前块的上参考线0中的从(0,-1)坐标的参考样本的等于宽度的数量的参考样本和当前块的左参考线0中的从(-1,0)坐标的参考样本的等于宽度的数量的参考样本，导出DC值；当参考线索引的值为1时，可以基于当前块的上参考线1中的从(-1,-2)坐标的参考样本的等于宽度的数量的参考样本和当前块的左参考线1中的从(-2,-1)坐标的参考样本的等于宽度的数量的参考样本，导出DC值；当参考线索引的值为2时，可以基于当前块的上参考线2中的从(-2,-3)坐标的参考样本的等于宽度的数量的参考样本和当前块的左参考线2中的从(-3,-2)坐标的参考样本的等于宽度的数量的参考样本，导出DC值；当参考线索引的值为3时，可以基于当前块的上参考线3中的从(-3,-4)坐标的参考样本的等于宽度的数量的参考样本和当前块的左参考线3中的从(-4,-3)坐标的参考样本的等于宽度的数量的参考样本，导出DC值。
此外，图19的(b)可以表示在当前块是非正方形块时，用来导出DC值的参考样本。在本实施例中，在当前块为非正方形块时，可以基于在当前块的宽度和高度中较长边的参考线中的参考样本来导出DC值。例如，当参考线索引所指示的参考线为参考线0、参考线1、参考线2或参考线3时，可以基于在当前块的宽度和高度中较长边的参考线的区域(1910)中的参考样本来导出DC值。例如，在当前块的宽度大于高度时，可以基于当前块的上参考线中的从(-refIdx,-refIdx-1)坐标参考样本的与宽度相同的数量的参考样本来导出DC值。例如，当参考线索引的值为0时，可以基于当前块的上参考线0中的从(0,-1)坐标的参考样本的等于宽度的数量的参考样本来导出DC值；当参考线索引的值为1时，可以基于当前块的上参考线1中的从(-1,-2)坐标的参考样本的等于宽度的数量的参考样本来导出DC值，当参考线索引的值为2时，可以基于当前块的上参考线2中的从(-2,-3)坐标的参考样本的等于宽度的数量的参考样本来导出DC值，当参考线索引的值为3时，可以基于当前块的上参考线3中的从(-3,-4)坐标的参考样本的等于宽度的数量的参考样本来导出DC值。
另外，例如，在当前块的宽度小于高度时，可以基于当前块的左参考线中的从(-refIdx-1,-refIdx)坐标参考样本的与高度相同的数量的参考样本来导出DC值。例如，当参考线索引的值为0时，可以基于当前块的左参考线0的从(-1,0)坐标的参考样本的等于高度的数量的参考样本来导出DC值；当参考线索引的值为1时，可以基于当前块的左参考线1的从(-2,-1)坐标的参考样本的等于高度的数量的参考样本来导出DC值；当参考线索引的值为2时，可以基于当前块的左参考线2的从(-3,-2)坐标的参考样本的等于高度的数量的参考样本来导出DC值；当参考线索引的值为3时，可以基于当前块的左参考线3的从(-4,-3)坐标的参考样本的等于高度的数量的参考样本来导出DC值。
此后，可以将当前块的预测样本导出为DC值。
在本公开中应用MRL时执行的基于DC帧内预测模式的帧内预测的实施例可以在下表中以标准格式示出。
[表14]
同时，本公开提出了在应用MRL时更有效地执行基于平面帧内预测模式执行的帧内预测的另一实施例。
图20图示了在当前块的帧内预测类型是MRL并且当前块的帧内预测模式是平面帧内预测模式时使用的参考样本。
参照图20，当由参考线索引指示的参考线是参考线0、参考线1、参考线2或参考线3时，可以基于图20中所示的参考线的区域(2000)中的参考样本，执行平面预测。根据本实施例，可以基于当前块的宽度/高度的末端+1-refIdx的样本来执行平面预测，与参考线索引无关。即，根据本实施例，在当前块的左上位置的x分量和y分量为0时，当前块的帧内预测类型为MRL，并且当前块的帧内预测模式为平面帧内预测模式，可以基于上参考线中的(W-refIdx,-refIdx-1)坐标的参考样本和左参考线中的(-refIdx-1,H-refIdx)坐标的参考样本来执行当前块的平面预测。
参考本实施例，可以使用由参考线索引所指示的参考线的参考样本来执行平面帧内预测，具体地，可以基于参考线的参考样本当中，与当前块的当前样本位置相同行(即相同y坐标)中的左参考样本以及与当前样本位置相同列(即，相同x坐标)中的上参考样本，以及上参考线中的(W-refIdx,-refIdx-1)坐标的参考样本和左参考线中的(-refIdx-1,H-refIdx)坐标的参考样本，来执行平面帧内预测。在这种情况下，可以通过基于上述四个参考样本的值执行双向线性插值来导出当前样本的预测样本值。在此，可以假设左下参考样本位于当前样本的下侧并且右上参考样本位于当前样本的右侧来执行双向线性插值。
在本公开中应用MRL时执行的基于平面帧内预测模式的帧内预测的实施例可以在下表中以标准格式示出。
[表15]
图21示意性地图示了由根据本公开的编码装置执行的图像编码方法。图21中公开的方法可以由图2中公开的编码装置来执行。具体地，例如，图21的S2100可以由编码装置的预测器执行，以及S2110至S2120可以由编码装置的熵编码器执行。此外，虽然未示出，但是基于原始样本针对当前块导出残差样本以及针对当前块导出预测样本的过程可以由编码装置的减法器执行，基于残差样本生成关于当前块的残差信息的过程可以由编码装置的残差处理器执行，以及编码包括残差信息的图像信息的过程可以由编码装置的熵编码器执行。
编码装置生成当前块的重构样本(S2100)。编码装置可以通过对当前块执行预测来导出当前块的预测样本，基于预测样本导出当前块的残差样本，以及基于预测样本和残差样本生成当前块的重构样本。
例如，编码装置可以从上述帧内预测类型中确定用于当前块的帧内预测类型。例如，编码装置可以考虑到速率失真(RD)成本来确定当前块的帧内预测类型。上述帧内预测类型可以包括使用与当前块相邻的帧内预测参考线的第一帧内预测类型、使用与当前块不相邻的帧内预测参考线的第二帧内预测类型，以及对其应用帧内子分区模式(ISP)的第三帧内预测类型。第一帧内预测类型可以指示上述一般帧内预测，第二帧内预测类型可以指示上述MRL，以及第三帧内预测类型可以指示上述ISP。
例如，编码装置可以生成和编码指示当前块的帧内预测参考线的参考线索引。可以基于参考线索引确定当前块的帧内预测类型是否是第二帧内预测类型。例如，如果当前块的帧内预测类型不是第二帧内预测类型，则编码装置可以生成并编码表示是否将第三帧内预测类型应用于当前块的ISP标志。可以基于ISP标志来确定用于当前块的帧内预测类型是否为第三帧内预测类型。如果ISP标志指示将第三帧内预测类型应用于当前块，则可以将用于当前块的帧内预测类型导出为第三帧内预测类型，并且如果ISP标志指示未将第三帧内预测类型应用于当前块，则可以将用于当前块的帧内预测类型导出为第一帧内预测类型。预测相关信息可以包括参考线索引、ISP标志和/或ISP索引。预测相关信息可以包括参考线索引，以及当参考线索引为0时，可以进一步包括ISP标志。当ISP标志为1时，预测相关信息可以进一步包括ISP索引。
例如，编码装置可以基于当前块的相邻块的帧内预测模式来构建当前块的帧内预测模式候选列表。
例如，编码装置通过执行表3所示的帧内预测模式候选列表构建过程来构建当前块的帧内预测模式候选列表。同时，帧内预测模式候选列表可以是指上述最可能模式(MPM)列表。
例如，编码装置可以基于第一候选帧内预测模式和第二候选帧内预测模式来构建帧间预测模式候选列表。编码装置可以基于第一候选帧内预测模式是否与第二候选帧内预测模式相同和/或第一候选帧内预测模式的模式编号和/或第二候选帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，来构建帧间预测模式候选列表。在此，可以基于当前块的左相邻块的帧内预测模式导出第一候选帧内预测模式，以及可以基于当前块的上相邻块的帧内预测模式导出第二候选帧内预测模式。例如，可以将当前块的左相邻块的帧内预测模式导出为第一候选帧内预测模式，以及可以将当前块的上相邻块的帧内预测模式导出为第二候选帧内预测模式。
具体地，例如，当第一候选帧内预测模式与第二候选帧内预测模式相同时，编码装置可以确定第一候选帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，如果第一候选帧内预测模式的模式编号大于DC帧内预测模式的模式编号，则如下导出包括帧内预测模式候选的用于当前块的帧内预测模式候选列表。
-mpm[0]＝leftIntraDir
-mpm[1]＝PLANAR_IDX
-mpm[2]＝DC_IDX
-mpm[3]＝((leftIntraDir+offset)％mod)+2
-mpm[4]＝((leftIntraDir-1)％mod)+2
-mpm[5]＝((leftIntraDir+offset-1)％mod)+2
在此，mpm[0]、mpm[1]、mpm[2]、mpm[3]、mpm[4]、mpm[5]分别表示帧内预测模式候选0、帧内预测模式候选1、帧内预测模式候选2、帧内预测模式候选3、帧内预测模式候选4和帧内预测模式候选5，leftIntraDir表示第一候选帧内预测模式、PLANAR_IDX表示平面帧内预测模式以及DC_IDX表示DC帧内预测模式。即，可以将帧内预测模式候选列表的帧内预测模式候选0导出为第一候选帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选1导出为平面帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为DC帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选3导出为模式编号为(leftIntraDir+offset)％mod)+2的帧内预测模式，即具有通过对第一候选帧内预测模式的模式编号和偏移量之和执行模算术运算并将模算术运算结果加2获得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为((leftIntraDir–1)％mod)+2的帧内预测模式，即具有通过对从第一候选帧内预测模式的模式编号减1获得的值执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为((leftIntraDir+offset–1)％mod)+2的帧内预测模式，即具有通过对第一候选帧内预测模式的模式编号与(偏移-1)之和执行模算术运算并对模算术运算结果加2获得的值作为模式编号的帧内预测模式。
例如，当第一候选帧内预测模式与第二候选帧内预测模式不同时，编码装置可以如下导出帧内预测模式候选0和帧内预测模式候选1。
-mpm[0]＝leftIntraDir
-mpm[1]＝aboveIntraDir
即，可以将帧内预测模式候选列表的帧内预测模式候选0导出为第一候选帧内预测模式，以及将帧内预测模式候选列表的帧内预测模式候选1导出为第二候选帧内预测模式。此外，如果帧内预测模式候选0的模式编号大于帧内预测模式候选1的模式编号，则可以将maxCandModeIdx导出为0，如果帧内预测模式候选0的模式编号不大于帧内预测模式候选1的模式编号，则可以将maxCandModeIdx导出为1。
如果第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号均大于DC帧内预测模式的模式编号，则编码装置可以如下导出帧内预测模式候选2和帧内预测模式候选3。
-mpm[2]＝PLANAR_IDX
-mpm[3]＝DC_IDX
即，可以将帧内预测模式候选列表的帧内预测模式候选2导出为平面帧内预测模式，将帧内预测模式候选列表的帧内预测模式候选3导出为DC帧内预测模式。
然后，如果通过从mpm[maxCandModeIdx]的模式编号中减去mpm[！maxCandModeIdx]的模式编号所获得的值小于63且大于1，则编码装置/解码装置可以如下导出帧内预测模式候选4和帧内预测模式候选5。
-mpm[4]＝((mpm[maxCandModeIdx]+offset)％mod)+2
-mpm[5]＝((mpm[maxCandModeIdx]-1)％mod)+2
即，可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为((mpm[maxCandModeIdx]+offset)％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]和偏移量之和执行模算术运算并且将模算术运算结果加2得到的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为具有模式编号((mpm[maxCandModeIdx]-1)％mod)+2的帧内预测模式，即具有通过对通过从mpm[maxCandModeIdx]减1得到的值执行模算术运算并且对模算术运算结果加2得到的值作为模式编号的帧内预测模式。
如果通过从模式编号mpm[maxCandModeIdx]减去模式编号mpm[！maxCandModeIdx]得到的值等于或大于63或等于或小于1，则编码装置/解码装置可以如下导出帧内预测模式候选4和帧内预测模式候选5。
-mpm[4]＝((mpm[maxCandModeIdx]+offset-1)％mod)+2
-mpm[5]＝((mpm[maxCandModeIdx])％mod)+2
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为((mpm[maxCandModeIdx]+offset-1)％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]和(偏移量-1)之和执行模算术运算并且将模算术运算结果加2得到的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为具有模式编号((mpm[maxCandModeIdx])％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]执行模算术运算并且对模算术运算结果加2得到的值作为模式编号的帧内预测模式。
如果第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号中的至少一个不大于DC帧内预测模式的模式编号，则编码装置可以确定第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号之和是否等于或大于2。如果第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号之和等于或大于2，则编码装置可以如下导出帧内预测模式候选2至帧内预测模式候选5。
-mpm[2]＝(mpm[！maxCandModeIdx]＝＝PLANAR_IDX)？DC_IDX：PLANAR_IDX
-mpm[3]＝((mpm[maxCandModeIdx]+offset)％mod)+2
-mpm[4]＝((mpm[maxCandModeIdx]-1)％mod)+2
-mpm[5]＝((mpm[maxCandModeIdx]+offset-1)％mod)+2
即，如果mpm[！maxCandModeIdx]是平面帧内预测模式，则帧内预测模式候选列表的帧内预测模式候选2可以被导出为DC帧内预测模式，以及如果mpm[！maxCandModeIdx]不是平面帧内预测模式，则可以将其导出为平面帧内预测模式。另外，可以将帧内预测模式候选列表的帧内预测模式候选3导出为模式编号为((mpm[maxCandModeIdx]+offset)％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]和偏移量之和执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为((mpm[maxCandModeIdx]-1)％mod)+2的帧内预测模式，即具有通过对从mpm[maxCandModeIdx]减1获得的值执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为((mpm[maxCandModeIdx]+offset-1)％mod)+2，即具有通过mpm[maxCandModeIdx]和(偏移量-1)之和执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式。
如果不满足前述条件，则编码装置可以如下导出帧内预测模式候选0至帧内预测模式候选5。
-mpm[0]＝leftIntraDir
-mpm[1]＝(mpm[0]＝＝PLANAR_IDX)？DC_IDX：PLANAR_IDX
-mpm[2]＝VER_IDX
-mpm[3]＝HOR_IDX
-mpm[4]＝VER_IDX–4
-mpm[5]＝VER_IDX+4
即，可以将帧内预测模式候选列表的帧内预测模式候选0导出为第一候选帧内预测模式；如果帧内预测模式候选0是平面帧内预测模式，则可以将帧内预测模式候选列表的帧内预测模式候选1导出为DC帧内预测模式，以及如果帧内预测模式候选0不是平面帧内预测模式，则将其导出为平面帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为垂直帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选3导出为水平帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为对应于通过将垂直帧内预测模式的模式编号减去4获得的模式编号的帧内预测模式，即，帧内预测模式#46；可以将帧内预测模式候选列表的帧内预测模式候选5导出对应于通过将垂直帧内预测模式的模式编号加4得到的模式编号的帧内预测模式，即帧内预测模式#54。
例如，编码装置可以执行表4所示的帧内预测模式候选列表构建过程来构建用于当前块的帧内预测模式候选列表。
例如，编码装置可以基于第一候选帧内预测模式和第二候选帧内预测模式来构建帧内预测模式候选列表。编码装置可以基于第一候选帧内预测模式是否与第二候选帧内预测模式相同，和/或第一候选帧内预测模式的模式编号和/或第二候选帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，来构建帧间预测模式候选列表。在此，可以基于当前块的左相邻块的帧内预测模式导出第一候选帧内预测模式，以及可以基于当前块的上相邻块的帧内预测模式导出第二候选帧内预测模式。例如，可以将当前块的左相邻块的帧内预测模式导出为第一候选帧内预测模式，以及可以将当前块的上相邻块的帧内预测模式导出为第二候选帧内预测模式。
具体地，例如，当第一候选帧内预测模式与第二候选帧内预测模式相同时，编码装置可以确定第一候选帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，如果第一候选帧内预测模式的模式编号大于DC帧内预测模式的模式编号，则如下导出包括帧内预测模式候选的用于当前块的帧内预测模式候选列表。
-mpm[0]＝leftIntraDir
-mpm[1]＝PLANAR_IDX
-mpm[2]＝((leftIntraDir+offset)％mod)+2
-mpm[3]＝((leftIntraDir-1)％mod)+2
-mpm[4]＝DC_IDX
-mpm[5]＝((leftIntraDir+offset-1)％mod)+2
在此，mpm[0]、mpm[1]、mpm[2]、mpm[3]、mpm[4]、mpm[5]分别表示帧内预测模式候选0、帧内预测模式候选1、帧内预测模式候选2、帧内预测模式候选3、帧内预测模式候选4和帧内预测模式候选5，leftIntraDir表示第一候选帧内预测模式、PLANAR_IDX表示平面帧内预测模式，以及DC_IDX表示DC帧内预测模式。即，可以将帧内预测模式候选列表的帧内预测模式候选0导出为第一候选帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选1导出为平面帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为模式编号为(leftIntraDir+offset)％mod)+2的帧内预测模式，即具有通过对第一候选帧内预测模式的模式编号和偏移量之和执行模算术运算并将模算术运算结果加2获得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选3导出为模式编号为((leftIntraDir–1)％mod)+2的帧内预测模式，即具有通过对从第一候选帧内预测模式的模式编号减1获得的值执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为DC帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为((leftIntraDir+offset–1)％mod)+2的帧内预测模式，即具有通过对第一候选帧内预测模式的模式编号与(偏移-1)之和执行模算术运算并对模算术运算结果加2获得的值作为模式编号的帧内预测模式。
例如，当第一候选帧内预测模式与第二候选帧内预测模式不同时，编码装置可以如下导出帧内预测模式候选0和帧内预测模式候选1。
-mpm[0]＝leftIntraDir
-mpm[1]＝aboveIntraDir
即，可以将帧内预测模式候选列表的帧内预测模式候选0导出为第一候选帧内预测模式，以及将帧内预测模式候选列表的帧内预测模式候选1导出为第二候选帧内预测模式。此外，如果帧内预测模式候选0的模式编号大于帧内预测模式候选1的模式编号，则编码装置可以将maxCandModeIdx导出为0，并且如果帧内预测模式候选0的模式编号不大于帧内预测模式候选1的模式编号，则将maxCandModeIdx导出为1。
如果第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号均大于DC帧内预测模式的模式编号，则编码装置可以如下导出帧内预测模式候选1至帧内预测模式候选3。
-mpm[1]＝PLANAR_IDX
-mpm[2]＝aboveIntraDir
-maxCandModeIdx＝mpm[0]>mpm[2]？0:2
-int minCandModeidx＝mpm[0]>mpm[2]？2:0
-mpm[3]＝DC_IDX；
即，可以将帧内预测模式候选列表的帧内预测模式候选1导出为平面帧内预测模式，可以将帧内预测模式候选列表的帧内预测模式候选2导出为第二候选帧内预测模式，以及可以将帧内预测模式候选列表的帧内预测模式候选3导出为DC帧内预测模式。此外，如果帧内预测模式候选0的模式编号大于帧内预测模式候选2的模式编号，则编码装置可以将maxCandModeIdx导出为0，并且如果帧内预测模式候选0的模式编号不大于帧内预测模式候选2的模式编号，则将maxCandModeIdx导出为2。此外，如果帧内预测模式候选0的模式编号大于帧内预测模式候选2的模式编号，则编码装置可以将minCandModeidx导出为2，以及如果帧内预测模式候选0的模式编号不大于帧内预测模式候选2的模式编号，则将minCandModeidx导出为0。
如果通过从mpm[maxCandModeIdx]的模式编号中减去mpm[minCandModeidx]的模式编号所获得的值小于63且大于1，则编码装置/解码装置可以如下导出帧内预测模式候选4和帧内预测模式候选5。
-mpm[4]＝((mpm[maxCandModeIdx]+offset)％mod)+2
-mpm[5]＝((mpm[maxCandModeIdx]-1)％mod)+2
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为((mpm[maxCandModeIdx]+offset)％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]和偏移量之和执行模算术运算并且将模算术运算结果加2得到的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为具有模式编号((mpm[maxCandModeIdx]-1)％mod)+2的帧内预测模式，即具有通过对通过从mpm[maxCandModeIdx]减1得到的值执行模算术运算并且对模算术运算结果加2得到的值作为模式编号的帧内预测模式。
如果通过从模式编号mpm[maxCandModeIdx]减去模式编号mpm[minCandModeIdx]得到的值等于或大于63或等于或小于1，则编码装置/解码装置可以如下导出帧内预测模式候选4和帧内预测模式候选5。
-mpm[4]＝((mpm[maxCandModeIdx]+offset-1)％mod)+2
-mpm[5]＝((mpm[maxCandModeIdx])％mod)+2
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为((mpm[maxCandModeIdx]+offset-1)％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]和(偏移量-1)之和执行模算术运算并且将模算术运算结果加2得到的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为具有模式编号((mpm[maxCandModeIdx])％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]执行模算术运算并且对模算术运算结果加2得到的值作为模式编号的帧内预测模式。
如果第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号中的至少一个不大于DC帧内预测模式的模式编号，则编码装置可以确定第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号之和是否等于或大于2。如果第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号之和等于或大于2，则编码装置可以确定第一候选帧内预测模式和第二候选帧内预测模式中的至少一个是否为平面帧内预测模式。
如果第一候选帧内预测模式和第二候选帧内预测模式中的至少一个是平面帧内预测模式，则编码装置可以如下导出帧内预测模式候选0和帧内预测模式候选1。
-mpm[0]＝PLANAR_IDX
-mpm[1]＝(leftIntraDir<aboveIntraDir)？aboveIntraDir:leftIntraDir
-maxCandModeIdx＝1
即，可以将帧内预测模式候选列表的帧内预测模式候选0导出为平面帧内预测模式，如果第一候选帧内预测模式的模式编号小于第二候选帧内预测模式的模式编号，则可以将帧内预测模式候选列表的帧内预测模式候选1导出为第二候选帧内预测模式，以及如果第一候选帧内预测模式的模式编号大于或等于第二候选帧内预测模式的模式编号，则将其导出为第一候选帧内预测模式。此外，编码装置可以将maxCandModeIdx导出为1。
如果第一候选帧内预测模式和第二候选帧内预测模式均不是平面帧内预测模式，则编码装置可以如下导出帧内预测模式候选2至帧内预测模式候选5。
-mpm[2]＝(mpm[！maxCandModeIdx]＝＝PLANAR_IDX)？DC_IDX：PLANAR_IDX
-mpm[3]＝((mpm[maxCandModeIdx]+offset)％mod)+2
-mpm[4]＝((mpm[maxCandModeIdx]-1)％mod)+2
-mpm[5]＝((mpm[maxCandModeIdx]+offset-1)％mod)+2
即，如果mpm[！maxCandModeIdx]是平面帧内预测模式，则帧内预测模式候选列表的帧内预测模式候选2可以被导出为DC帧内预测模式，以及如果mpm[！maxCandModeIdx]不是平面帧内预测模式，则可以将其导出为平面帧内预测模式。另外，可以将帧内预测模式候选列表的帧内预测模式候选3导出为模式编号为((mpm[maxCandModeIdx]+offset)％mod)+2的帧内预测模式，即，具有通过对mpm[maxCandModeIdx]和偏移量之和执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为((mpm[maxCandModeIdx]-1)％mod)+2的帧内预测模式，即具有通过对从mpm[maxCandModeIdx]减1获得的值执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为((mpm[maxCandModeIdx]+offset-1)％mod)+2，即具有通过对mpm[maxCandModeIdx]和(偏移量-1)之和执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式。
如果不满足前述条件，则编码装置可以如下导出帧内预测模式候选0至帧内预测模式候选5。
-mpm[0]＝leftIntraDir
-mpm[1]＝(mpm[0]＝＝PLANAR_IDX)？DC_IDX：PLANAR_IDX
-mpm[2]＝VER_IDX
-mpm[3]＝HOR_IDX
-mpm[4]＝VER_IDX–4
-mpm[5]＝VER_IDX+4
即，可以将帧内预测模式候选列表的帧内预测模式候选0导出为第一候选帧内预测模式；如果帧内预测模式候选0是平面帧内预测模式，则可以将帧内预测模式候选列表的帧内预测模式候选1导出为DC帧内预测模式，以及如果帧内预测模式候选0不是平面帧内预测模式，则将其导出为平面帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为垂直帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选3导出为水平帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为对应于通过将垂直帧内预测模式的模式编号减去4获得的模式编号的帧内预测模式，即，帧内预测模式#46；可以将帧内预测模式候选列表的帧内预测模式候选5导出对应于通过将垂直帧内预测模式的模式编号加4得到的模式编号的帧内预测模式，即帧内预测模式#54。
例如，编码装置可以执行表5所示的帧内预测模式候选列表构建过程来构建用于当前块的帧内预测模式候选列表。
例如，编码装置可以基于第一候选帧内预测模式和第二候选帧内预测模式来构建帧内预测模式候选列表。编码装置可以基于第一候选帧内预测模式是否与第二候选帧内预测模式相同，和/或第一候选帧内预测模式的模式编号和/或第二候选帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，来构建帧间预测模式候选列表。在此，可以基于当前块的左相邻块的帧内预测模式导出第一候选帧内预测模式，以及可以基于当前块的上相邻块的帧内预测模式导出第二候选帧内预测模式。例如，可以将当前块的左相邻块的帧内预测模式导出为第一候选帧内预测模式，以及可以将当前块的上相邻块的帧内预测模式导出为第二候选帧内预测模式。
具体地，例如，当第一候选帧内预测模式与第二候选帧内预测模式相同时，编码装置可以确定第一候选帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，如果第一候选帧内预测模式的模式编号大于DC帧内预测模式的模式编号，则如下导出包括帧内预测模式候选的用于当前块的帧内预测模式候选列表。
-mpm[0]＝g_intraMode65to33AngMapping[leftIntraDir]
-mpm[1]＝((g_intraMode65to33AngMapping[leftIntraDir]+offset)％mod)+2
-mpm[2]＝((g_intraMode65to33AngMapping[leftIntraDir]-1)％mod)+2
可以将帧内预测模式候选列表的帧内预测模式候选0导出为第一候选帧内预测模式。另外，可以将帧内预测模式候选列表的帧内预测模式候选1导出为模式编号为((g_intraMode65to33AngMapping[leftIntraDir]+offset)％mod)+2的帧内预测模式，即具有通过对第一候选帧内预测模式的模式编号与偏移量之和执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选2导出为模式编号为((g_intraMode65to33AngMapping[leftIntraDir]-1)％mod)+2的帧内预测模式，即具有通过对通过从第一候选帧内预测模式的模式编号减1获得的值执行模算术运算并且将模算术运算结果加2得到的值作为模式编号的帧内预测模式。
如果第一候选帧内预测模式的模式编号等于或小于DC帧内预测模式的模式编号，则编码装置可以如下导出包括帧内预测模式候选的用于当前块的帧内预测模式候选列表。
-mpm[0]＝g_intraMode65to33AngMapping[PLANAR_IDX]
-mpm[1]＝g_intraMode65to33AngMapping[DC_IDX]
-mpm[2]＝g_intraMode65to33AngMapping[VER_IDX]
即，帧内预测模式候选列表的帧内预测模式候选0可以被导出为平面帧内预测模式，可以将帧内预测模式候选列表的帧内预测模式候选1导出为DC帧内预测模式，以及可以将帧内预测模式候选列表的帧内预测模式候选2导出为垂直帧内预测模式。
此外，如果第一候选帧内预测模式与第二候选帧内预测模式不同，则编码装置可以导出帧内预测模式候选0和帧内预测模式候选1。
-mpm[0]＝g_intraMode65to33AngMapping[leftIntraDir]
-mpm[1]＝g_intraMode65to33AngMapping[aboveIntraDir]
即，可以将帧内预测模式候选列表的帧内预测模式候选0作为第一候选帧内预测模式，以及可以将帧内预测模式候选列表的帧内预测模式候选1导出为第二候选帧内预测模式。
然后，如果第一候选帧内预测模式和第二候选帧内预测模式均为平面帧内预测模式，则编码装置可以如下导出帧内预测模式候选2。
-mpm[2]＝g_intraMode65to33AngMapping[PLANAR_IDX]
即，可以将帧内预测模式候选列表的帧内预测模式候选2导出为平面帧内预测模式。
否则，如果第一候选帧内预测模式和第二候选帧内预测模式中的至少一个是平面帧内预测模式，则编码装置可以如下导出帧内预测模式候选2。
-mpm[2]＝g_intraMode65to33AngMapping[(leftIntraDir+aboveIntraDir)<2？VER_IDX：DC_IDX]
也就是说，如果第一候选帧内预测模式的模式编号与第二候选帧内预测模式的模式编号之和小于2，则可以将帧内预测模式候选列表的帧内预测模式候选2导出为垂直帧内预测模式，以及如果第一候选帧内预测模式的模式编号与第二候选帧内预测模式的模式编号之和等于或大于2，则可以将其导出为DC帧内预测模式。
例如，编码装置可以基于如表6所示的当前块的相邻块的帧内预测模式构建当前块的帧内预测模式候选列表。同时，帧内预测模式候选列表可以是指上述最可能模式(MPM)列表。
例如，编码装置可以基于当前块的左相邻块的帧内预测模式和当前块的上相邻块的帧内预测模式来构建帧内预测模式候选列表。编码装置可以确定当前块的左相邻块的帧内预测模式和上相邻块的帧内预测模式是否相同，以及左相邻块的帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号。编码装置可以基于当前块的左相邻块的帧内预测模式和上相邻块的帧内预测模式是否相同和/或左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号来构建帧内预测模式候选列表。
在当前块的左相邻块的帧内预测模式与上相邻块的帧内预测模式相同且左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号时，编码装置可以如下所述导出包括帧内预测模式候选的当前块的帧内预测模式候选列表。
-mpm[0]＝INTRA_PLANAR
-mpm[1]＝candIntraPredModeA
-mpm[2]＝2+((candIntraPredModeA+61)％64)
-mpm[3]＝2+((candIntraPredModeA–1)％64)
-mpm[4]＝INTRA_DC
-mpm[5]＝2+((candIntraPredModeA+60)％64)
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选0导出为平面帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选1导出为左相邻块的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为模式编号为2+((candIntraPredModeA+61)％64)的帧内预测模式，即具有通过对通过将左相邻块的帧内预测模式的模式编号加上61获得的值执行取64的模算术运算并将模算术运算结果加2所获得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选3导出为模式编号为2+((candIntraPredModeA-1)％64)的帧内预测模式，即通过对从左相邻块的帧内预测模式的模式编号减1获得的值执行取64的模算术运算并将模算术运算结果加2所获得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为DC帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为2+((candIntraPredModeA+60)％64)，即通过对通过将左相邻块的帧内预测模式的模式编号加上60获得的值执行取64的模算术运算并将模算术运算结果加2所获得的值作为模式编号的帧内预测模式。即，例如，当左相邻块的帧内预测模式和上相邻块的帧内预测模式相同，并且左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号时，帧内预测模式候选列表可以包括左相邻块的帧内预测模式、上相邻块的帧内预测模式、模式编号为2+((candIntraPredModeA+61)％64)的帧内预测模式、模式编号2+((candIntraPredModeA-1)％64)的帧内预测模式和模式编号2+((candIntraPredModeA+60)％64)的帧内预测模式作为帧内预测模式候选。在此，candIntraPredModeA可以表示当前块的左相邻块的帧内预测模式的模式编号。
同时，在当前块的左相邻块的帧内预测模式和上相邻块的帧内预测模式不相同时，例如，编码装置可以确定左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的至少一个是否大于DC帧内预测模式的模式编号。当左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的至少一个大于DC帧内预测模式的模式编号时，可以如下导出变量minAB和变量maxAB。
-minAB＝Min(candIntraPredModeA,candIntraPredModeB)
-maxAB＝Max(candIntraPredModeA,candIntraPredModeB)
在此，candIntraPredModeA可以表示当前块的左相邻块的帧内预测模式的模式编号，以及candIntraPredModeB可以表示当前块的上相邻块的帧内预测模式的模式编号。即，minAB可以表示左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的较小值，maxAB可以表示左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的较大值。
此外，在当前块的左相邻块的帧内预测模式与上相邻块的帧内预测模式不相同时，编码装置可以确定左相邻块的帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，以及上相邻块的帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号。
例如，当左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号并且上相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号时，编码装置可以如下所述导出帧内预测模式候选0至帧内预测模式候选3。
mpm[0]＝INTRA_PLANAR
mpm[1]＝candIntraPredModeA
mpm[2]＝candIntraPredModeB
mpm[3]＝INTRA_DC
即，可以将帧内预测模式候选列表的帧内预测模式候选0导出为平面帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选1导出为左相邻块的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为上相邻块的帧内预测模式，以及可以将帧内预测模式候选列表的帧内预测模式候选3导出为DC帧内预测模式。在此，candIntraPredModeB可以表示当前块的上相邻块的帧内预测模式的模式编号。即，例如，当左相邻块的帧内预测模式和上相邻块的帧内预测模式不相同并且左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式均大于DC帧内预测模式的模式编号时，帧内预测模式候选列表可以包括左相邻块的帧内预测模式和上相邻块的帧内预测模式，作为帧内预测模式候选。
此后，可以基于maxAB和minAB导出剩余的帧内预测模式候选(帧内预测模式候选4和帧内预测模式候选5)。具体地，可以基于左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号之间的较大值和较小值之间的差来导出剩余的帧内预测模式候选。
例如，当maxAB减去minAB得到的值小于63且大于1时(即当maxAB减去minAB得到的值为2至62之一时)，编码装置可以如下所述导出帧内预测模式候选4和帧内预测模式候选5。
-mpm[4]＝2+((maxAB+61)％64)
-mpm[5]＝2+((maxAB–1)％64)
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为2+((maxAB+61)％64)的帧内预测模式，即具有通过对通过将maxAB加61得到的值执行取64的模算术运算并且使模算术运算结果加2所得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为2+((maxAB-1)％64)的帧内预测模式，即具有通过对通过使maxAB减1得到的值执行取64的模算术运算并且使模算术运算结果加2所得的值作为模式编号的帧内预测模式。在此，maxAB可以表示左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的较大值。
可替代地，当从maxAB减去minAB所获得的值等于或大于63或等于或小于1时，编码装置可以如下所述导出帧内预测模式候选4和帧内预测模式候选5。
-mpm[4]＝2+((maxAB+60)％64)
-mpm[5]＝2+(maxAB％64)
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为2+((maxAB+60)％64)的帧内预测模式，即具有通过对通过将maxAB加60得到的值执行取64的模算术运算并且使模算术运算结果加2所得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为2+(maxAB％64)的帧内预测模式，即具有通过对maxAB执行取64的模算术运算并且使模算术运算结果加2所得的值作为模式编号的帧内预测模式。在此，maxAB可以表示左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的较大值。
同时，在当前块的左相邻块的帧内预测模式与上相邻块的帧内预测模式不相同，或者左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的至少一个小于DC帧内预测模式的模式编号时，编码装置可以确定左相邻块的帧内预测模式的模式编号与上相邻块的帧内预测模式的模式编号之和是否等于或大于DC帧内预测模式的模式编号。
例如，当左相邻块的帧内预测模式的模式编号与上相邻块的帧内预测模式的模式编号之和等于或大于DC帧内预测模式的模式编号时，编码装置可以如下所述导出包括帧内预测模式候选的当前块的帧内预测模式候选列表。
-mpm[0]＝INTRA_PLANAR
-mpm[1]＝maxAB
-mpm[2]＝INTRA_DC
-mpm[3]＝2+((maxAB+61)％64)
-mpm[4]＝2+((maxAB–1)％64)
-mpm[5]＝2+((maxAB+60)％64)
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选0导出为平面帧内预测模式；可以将帧内预测模式候选1导出为maxAB，即，当左相邻块的帧内预测模式的模式编号小于上相邻块的帧内预测模式的模式编号时，可以将帧内预测模式候选1导出为上相邻块的帧内预测模式，以及当左相邻块的帧内预测模式的模式编号大于或等于上相邻块的帧内预测模式的模式编号时，可以将帧内预测模式候选1导出为左相邻块的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为DC帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选3导出为模式编号为2+((maxAB+61)％64)的帧内预测模式，即具有通过对通过将maxAB加61得到的值执行取64的模算术运算并且使模算术运算结果加2所得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为2+((maxAB-1)％64)的帧内预测模式，即具有通过对通过将maxAB减1得到的值执行取64的模算术运算并且使模算术运算结果加2所得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为2+((maxAB+60)％64)的帧内预测模式，即具有通过对通过将maxAB加60得到的值执行取64的模算术运算并且使模算术运算结果加2所得的值作为模式编号的帧内预测模式。
或者，例如，当上述条件不满足时，编码装置可以如下所述导出包括帧内预测模式候选的当前块的帧内预测模式候选列表。
-mpm[0]＝INTRA_PLANAR
-mpm[1]＝INTRA_DC
-mpm[2]＝INTRA_ANGULAR50
-mpm[3]＝INTRA_ANGULAR18
-mpm[4]＝INTRA_ANGULAR46
-mpm[5]＝INTRA_ANGULAR54
即，可以将帧内预测模式候选列表的帧内预测模式候选0导出为平面帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选1导出为DC帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为垂直帧内预测模式(即帧内预测模式#50)；可以将帧内预测模式候选列表的帧内预测模式候选3导出为水平帧内预测模式(即帧内预测模式#18)；可以将帧内预测模式候选列表的帧内预测模式候选4导出为通过将垂直帧内预测模式的模式编号减去4得到的模式编号的帧内预测模式，即，帧内预测模式#46；可以将帧内预测模式候选列表的帧内预测模式候选5导出为模通过将垂直帧内预测模式的模式编号加4得到的模式编号的帧内预测模式，即帧内预测模式#54。即，例如，当不满足上述条件时，帧内预测模式候选列表可以包括DC帧内预测模式、帧内预测模式#50、帧内预测模式#18、帧内预测模式#46和帧内预测模式#54作为帧内预测模式候选。
同时，例如，当左相邻块不可用时，不将帧内预测应用于左相邻块，并且可以将与上相邻块的CIIP标志的值不是1的情况和左相邻块的pcm标志的值为1的情况中的至少一个相对应的左相邻块的帧内预测模式导出为平面帧内预测模式。此外，当上相邻块不可用时，不将帧内预测应用于上相邻块，并且可以将与上相邻块的CIIP标志的值不是1的情况、上相邻块的pcm标志的值为1的情况以及上相邻块不被包括在当前CTU中的情况中的至少一个相对应的左相邻块的帧内预测模式导出为平面帧内预测模式。
同时，当帧内预测类型为第一帧内预测类型时生成的帧内预测模式候选列表、当帧内预测类型为第二帧内预测类型时生成的帧内预测模式候选列表，以及当帧内预测类型为第三帧内预测类型时生成的帧内预测模式候选列表可以相同。即，无论当前块的帧内预测类型如何，都可以构建相同的帧内预测模式候选列表。无论当前块的帧内预测类型如何，可以通过相同的帧内预测模式构建过程来构建帧内预测模式候选列表。帧内预测模式构建过程可以与上述实施例之一相同。
例如，编码装置可以基于帧内预测模式候选列表导出当前块的帧内预测模式。编码装置可以通过执行各种帧内预测模式来将具有最优RD成本的帧内预测模式导出为当前块的帧内预测模式。例如，编码装置可以从帧内预测模式候选列表中的帧内预测模式候选当中导出具有最优RD成本的帧内预测模式作为当前块的帧内预测模式。帧内预测模式可以是两个非定向帧内预测模式和65个定向帧内预测模式之一。如上所述，两个非定向帧内预测模式可以包括DC帧内预测模式和平面帧内预测模式。
例如，当用于当前块的帧内预测类型被导出为第二帧内预测类型时，可以将当前块的帧内预测模式选择为除平面帧内预测模式和DC帧内预测模式以外的帧内预测模式之一，而当用于当前块的帧内预测类型被导出为第三帧内预测类型时，将其选择为除DC帧内预测模式以外的帧内预测模式之一。
例如，当用于当前块的帧内预测类型被导出为第二帧内预测类型时，可以将用于当前块的帧内预测模式选择为除平面帧内预测模式以外的帧内预测模式之一，而当用于当前块的帧内预测类型被导出为第三帧内预测类型时，可以将其选择为除DC帧内预测模式以外的帧内预测模式之一。
例如，当用于当前块的帧内预测类型被导出为第二帧内预测类型时，可以将当前块的帧内预测模式选择为除平面帧内预测模式以外的帧内预测模式之一。
编码装置可以生成指示所确定的帧内预测模式是否被包括在帧内预测模式候选列表的帧内预测模式候选中的MPM标志。MPM标志也可以被称为帧内预测模式候选标志。如果所确定的帧内预测模式被包括在帧内预测模式候选列表的帧内预测模式候选中，则编码装置可以生成指示帧内预测模式候选当中的所确定的帧内预测模式的MPM索引。MPM索引也可以被称为帧内预测模式候选索引。如果所确定的帧内预测模式未被包括在帧内预测模式候选列表的帧内预测模式候选中，则编码装置可以生成指示未被包括在帧内预测模式候选中的剩余帧内预测模式当中的所确定的帧内预测模式的剩余帧内预测模式信息。此外，如果所确定的帧内预测模式被包括在帧内预测模式候选列表的帧内预测模式候选中，则编码装置可以不发信号通知MPM标志并且可以将MPM标志的值导出为1。当前块的预测相关信息可以包括MPM标志、MPM索引和/或剩余帧内预测模式信息。
例如，编码装置可以基于帧内预测类型和帧内预测模式导出当前块的预测样本。
例如，当帧内预测类型被导出为第一帧内预测类型时，编码装置可以基于帧内预测模式，从与当前块相邻的帧内预测参考线中的参考样本中导出至少一个参考样本，并且基于参考样本生成当前块的预测样本。参考样本可以包括当前块的左上参考样本、上参考样本和左参考样本。例如，在当前块的大小为W×H、当前块的左上样本位置的x分量为xN以及其y分量为yN时，左参考样本可以是p[xN-1][yN]至p[xN-1][2H+yN-1]、左上参考样本可以是p[xN-1][yN-1]，以及上参考样本可以是p[xN][yN-1]至p[2W+xN-1][yN-1]。
例如，当帧内预测类型被导出为第二帧内预测类型时，编码装置可以基于帧内预测模式，从与当前块不相邻的帧内预测参考线的参考样本中导出至少一个参考样本，并且基于参考样本生成当前块的预测样本。在此，帧内预测参考线可以是与当前块的上边界和/或左边界相隔1、2或3个样本距离的参考线。
例如，当将帧内预测类型导出为第三帧内预测类型时，编码装置可以确定当前块的ISP分割类型，并且根据ISP分割类型对当前块进行分区以导出子块。分割类型可以是水平分割类型或垂直分割类型。例如，在当前块的大小为4×4时，可以不分区当前块。例如，在当前块的大小为4×8且分割类型为水平分割类型时，可以将当前块分区为两个4×4的子块。例如，在当前块的大小为4×8并且分割类型为垂直分割类型时，可以将当前块分区为两个2×8的子块。例如，在当前块的大小为8×4且分割类型为水平分割类型时，可以将当前块分区为两个8×2的子块。例如，在当前块的大小为8×4且分割类型为垂直分割类型时，可以将当前块分区为两个4×4的子块。例如，在当前块的大小为W×H(除4×8、8×4、4×4以外的大小)且分割类型为水平分割类型时，可以将当前块分区为4个W×H/4个子块。例如，在当前块的大小为W×H且分割类型为垂直分割类型时，可以将当前块分区为四个W/4×H的子块。此后，编码装置可以对子块执行帧内预测以生成预测样本。即，编码装置可以基于帧内预测模式，导出当前块的每个子块的帧内预测参考线中的至少一个参考样本，并且基于参考样本生成预测样本。每个子块的帧内预测参考线可以是与每个子块相邻的参考线。同时，编码装置可以生成并编码指示ISP分割类型的ISP分割标志。上述预测相关信息可以包括ISP分割标志。
例如，当将当前块的帧内预测模式导出为DC帧内预测模式、当前块为正方形块、当前块的大小为WxH、当前块的左上位置的x分量和y分量为0时，可以基于由当前块的参考线索引指示的上帧内预测参考线中的(0,-refIdx-1)坐标的参考样本至(W-1，-refIdx-1)坐标的参考样本以及由该参考线索引指示的左帧内预测参考线中的(-refIdx-1,0)坐标的参考样本至(-refIdx-1,H-1)坐标的参考样本来导出DC值。可以将当前块的预测样本导出为DC值。
例如，在将当前块的帧内预测模式导出为DC帧内预测模式、当前块为其宽度大于高度的非正方形块、当前块的大小为WxH、并且当前块的左上位置的x分量和y分量为0时，可以基于由当前块的参考线索引指示的上帧内预测参考线中的(0,-refIdx-1)坐标的参考样本至(W-1，-refIdx-1)坐标的参考样本来导出DC值。可以将当前块的预测样本导出为DC值。
例如，在将当前块的帧内预测模式导出为DC帧内预测模式、当前块为其高度大于宽度的非正方形块、当前块的大小为WxH并且当前块的左上位置的x分量和y分量为0时，可以基于由当前块的参考线索引指示的左帧内预测参考线中的(-refIdx-1,0)坐标的参考样本至(-refIdx-1,H-1)坐标的参考样本来导出DC值。可以将当前块的预测样本导出为DC值。
例如，在将当前块的帧内预测模式导出为平面帧内预测模式、当前块的大小为WxH、当前块的左上位置的x分量和y分量为0时，可以基于由当前块的参考线索引指示的帧内预测参考线中的(W-1，-refIdx-1)坐标的参考样本至(-refIdx-1,H-1)坐标的参考样本来导出预测样本。
此外，例如，编码装置可以基于预测样本导出当前块的残差样本。编码装置可以从原始样本和预测样本之间的差异导出残差样本。然后，例如，编码装置可以基于预测样本和残差样本来生成当前块的重构样本。此后，如上所述，编码装置可以将诸如去块滤波和/或SAO过程的环内滤波过程应用于重构样本(即，重构图片)以根据需要改进主观/客观图片质量。
编码装置生成用于当前块的预测相关信息(S2110)。编码装置可以生成用于当前块的预测相关信息。
例如，预测相关信息可以包括当前块的参考线索引。参考线索引可以指示当前块的帧内预测参考线。例如，当参考线索引的值为0时，参考线索引可以指示与当前块的上边界和/或左边界相邻的参考线，当参考线索引的值为1时，参考线索引可以指示与当前块的上边界和/或左边界相隔一个样本距离的参考线，当参考线索引的值为2时，参考线索引可以指示与当前块的上边界和/或左边界相隔2个样本距离的参考线，当参考线索引的值为3时，参考线索引可以指示与当前块的上边界和/或左边界相隔3个样本距离的参考线。
另外，例如，当参考线索引指示与当前块相邻的参考线时，即当参考线索引的值为0时，预测相关信息可以包括帧内子分区模式(ISP)标志。ISP标志可以表示对其应用了ISP的第三帧内预测类型是否被应用于当前块。也就是说，ISP标志可以表示是否将ISP应用于当前块。例如，当IPS标志的值为1时，ISP标志可以表示对当前块应用第三帧内预测类型，当IPS标志的值为0时，ISP标志可以表示不对当前块应用第三帧内预测类型。此外，例如，当ISP标志的值为1时，预测相关信息可以包括表示ISP分割类型的ISP分割标志。
此外，例如，预测相关信息可以包括最可能模式(MPM)标志。可替代地，例如，预测相关信息可以不包括MPM标志，并且在这种情况下，编码装置可以将MPM标志的值导出为1。MPM标志可以表示当前块的帧内预测模式是否为帧内预测模式候选列表的帧内预测模式候选之一。MPM标志可以被称为帧内预测模式候选标志。
此外，例如，当MPM标志的值为1时，预测相关信息可以包括MPM索引。MPM索引可以指示帧内预测模式候选列表中的帧内预测模式候选之一。MPM索引可以以mpm_idx或intra_luma_mpm_idx语法元素的形式发信号通知。MPM索引可以被称为帧内预测模式候选索引。
此外，例如，当MPM标志的值为0时，预测相关信息可以包括剩余帧内预测模式信息。剩余帧内预测模式信息可以指示除帧内预测模式候选列表的帧内预测模式候选之外的剩余帧内预测模式之一。剩余帧内预测模式信息可以以rem_intra_luma_pred_mode或intra_luma_mpm_remainder语法元素的形式发信号通知。
编码装置对包括预测相关信息的图像信息进行编码(S2120)。编码装置可以对包括预测相关信息的图像信息进行编码，并且可以以比特流的形式输出图像信息。预测相关信息可以包括参考线索引、ISP标志和/或ISP索引。此外，预测相关信息可以包括MPM标志、MPM索引和/或剩余帧内预测模式信息。另外，虽然未示出，但是编码装置可以基于残差样本生成当前块的残差信息，以及可以对包括残差信息的图像信息进行编码，并且可以以比特流的形式输出图像信息。同时，比特流可以通过网络或(数字)存储介质传输到解码装置。在此，网络可以包括广播网络和/或通信网络，而数字存储介质可以包括诸如USB、SD、CD、DVD、蓝光、HDD和SSD的各种存储介质。
图22示意性地示出了根据本公开的执行图像编码方法的编码装置。图21中公开的方法可以由图22中公开的编码装置来执行。具体地，图22的编码装置的预测器可以执行图21的S2100，以及图22的编码装置的熵编码器可以执行图21的S2110到S2120。虽然未示出，但是可以由图20的编码装置的减法器执行基于当前块的原始样本和预测样本导出当前块的残差样本的过程，以及可以由图20的编码装置的残差处理器执行基于残差样本生成关于当前块的残差信息的过程，以及可以由图20的编码装置的熵编码器执行对包括残差信息的图像信息执行编码的过程。
图23示意性地图示了根据本公开的由解码装置执行的图像解码方法。图23中公开的方法可以由图3中公开的解码装置来执行。具体地，图23的S2300可以由解码装置的熵解码器执行，以及图23的S2310可以由解码装置的预测器执行。此外，虽然未示出，但是可以通过解码装置的熵解码器执行通过比特流获得包括用于当前块的残差信息的图像信息的过程，以及可以由解码装置的逆变换器执行基于残差信息导出用于当前块的残差样本的过程。
解码装置接收包括用于当前块的预测相关信息的图像信息(S2300)。例如，解码装置可以通过比特流接收和解析包括当前块的预测相关信息和/或残差信息的图像信息。例如，预测相关信息可以如上表2所示。
例如，预测相关信息可以包括当前块的参考线索引。参考线索引可以指示当前块的帧内预测参考线。例如，当参考线索引的值为0时，参考线索引可以指示与当前块的上边界和/或左边界相邻的参考线，当参考线索引的值为1时，参考线索引可以指示与当前块的上边界和/或左边界相隔一个样本距离的参考线，当参考线索引的值为2时，参考线索引可以指示与当前块的上边界和/或左边界相隔2个样本距离的参考线，当参考线索引的值为3时，参考线索引可以指示与当前块的上边界和/或左边界相隔3个样本距离的参考线。
另外，例如，当参考线索引指示与当前块相邻的参考线时，即当参考线索引的值为0时，预测相关信息可以包括帧内子分区模式(ISP)标志。ISP标志可以表示对其应用了ISP的第三帧内预测类型是否被应用于当前块。也就是说，ISP标志可以表示是否将ISP应用于当前块。例如，当IPS标志的值为1时，ISP标志可以表示对当前块应用第三帧内预测类型，当IPS标志的值为0时，ISP标志可以表示不对当前块应用第三帧内预测类型。此外，例如，当ISP标志的值为1时，预测相关信息可以包括表示ISP分割类型的ISP分割标志。
此外，例如，预测相关信息可以包括最可能模式(MPM)标志。可替代地，例如，预测相关信息可以不包括MPM标志，并且在这种情况下，解码装置可以将MPM标志的值导出为1。MPM标志可以表示当前块的帧内预测模式是否为帧内预测模式候选列表的帧内预测模式候选之一。MPM标志可以被称为帧内预测模式候选标志。
此外，例如，当MPM标志的值为1时，预测相关信息可以包括MPM索引。MPM索引可以指示帧内预测模式候选列表中的帧内预测模式候选之一。MPM索引可以以mpm_idx或intra_luma_mpm_idx语法元素的形式发信号通知。MPM索引可以被称为帧内预测模式候选索引。
此外，例如，当MPM标志的值为0时，预测相关信息可以包括剩余帧内预测模式信息。剩余帧内预测模式信息可以指示除帧内预测模式候选列表的帧内预测模式候选之外的剩余帧内预测模式之一。剩余帧内预测模式信息可以以rem_intra_luma_pred_mode或intra_luma_mpm_remainder语法元素的形式发信号通知。
解码装置基于图像信息生成当前块的重构样本(S2310)。解码装置可以通过对当前块执行预测来导出预测样本，基于当前块的残差信息导出当前块的残差样本，并且基于预测样本和残差样本生成当前块的重构样本。
例如，解码装置可以基于预测相关信息导出帧内预测类型当中的用于当前块的帧内预测类型。解码装置可以基于预测相关信息导出用于当前块的帧内预测类型。在此，帧内预测类型可以包括使用与当前块相邻的帧内预测参考线的第一帧内预测类型、使用与当前块不相邻的帧内预测参考线的第二帧内预测类型以及对其应用帧内子分区模式(ISP)的第三帧内预测类型。第一帧内预测类型可以指示上述一般帧内预测，第二帧内预测类型可以指示上述MRL，以及第三帧内预测类型可以指示上述ISP。
例如，解码装置可以基于表2所示的预测相关信息导出用于当前块的帧内预测类型。例如，解码装置可以基于当前块的参考线索引确定用于当前块的帧内预测类型是否为第二帧内预测类型。预测相关信息可以包括参考线索引。参考线索引可以指示当前块的帧内预测参考线。例如，当参考线索引为0时，参考线索引可以指示与当前块的上边界和/或左边界相邻的参考线；当参考线索引为1时，参考线索引可以指示与当前块的上边界和/或左边界相隔1个样本距离的参考线；当参考线索引为2时，参考线索引可以指示与当前块的上边界和/或左边界相隔2个样本距离的参考线；以及当参考线索引为3时，参考线索引可以指示与当前块的上边界和/或左边界相隔3个样本距离的参考线。当参考线索引指示与当前块相邻的参考线时，解码装置可以将与当前块相邻的参考线导出为当前块的帧内预测参考线，并且确定当前块的帧内预测类型不是第二帧内预测类型。此外，当参考线索引指示与当前块不相邻的参考线时，解码装置可以将与当前块不相邻的参考线导出为当前块的帧内预测参考线，并且将第二帧内预测类型导出为当前块的帧内预测类型。在此，与当前块不相邻的参考线可以是与当前块的上边界和/或左边界相隔1、2或3个样本距离的参考线。
另外，当参考线索引指示与当前块相邻的参考线时，即，在用于当前块的帧内预测类型不是第二帧内预测类型时，解码装置可以基于帧内子分区模式(ISP)标志，确定用于当前块的帧内预测类型是否为第三帧内预测类型。预测相关信息可以包括ISP标志。ISP标志可以指示应用了ISP的第三帧内预测类型是否被应用于当前块。即，ISP标志可以指示ISP是否被应用于当前块。例如，ISP标志在被设置为1时，可以指示第三帧内预测类型被应用于当前块，并且当ISP标志被设置为0时，可以指示第三帧内预测类型不被应用于当前块。当ISP标志指示应用第三帧内预测类型时，解码装置可以将第三帧内预测类型导出为用于当前块的帧内预测类型，并且当ISP标志指示不应用第三帧内预测类型时，将第一帧内预测类型导出为用于当前块的帧内预测类型。
例如，解码装置可以基于当前块的相邻块的帧内预测模式来构建当前块的帧内预测模式候选列表。
例如，解码装置通过执行表3所示的帧内预测模式候选列表构建过程来构建当前块的帧内预测模式候选列表。同时，帧内预测模式候选列表可以是指上述最可能模式(MPM)列表。
例如，解码装置可以基于第一候选帧内预测模式和第二候选帧内预测模式来构建帧间预测模式候选列表。解码装置可以基于第一候选帧内预测模式是否与第二候选帧内预测模式相同，和/或第一候选帧内预测模式的模式编号和/或第二候选帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，来构建帧间预测模式候选列表。在此，可以基于当前块的左相邻块的帧内预测模式导出第一候选帧内预测模式，以及可以基于当前块的上相邻块的帧内预测模式导出第二候选帧内预测模式。例如，可以将当前块的左相邻块的帧内预测模式导出为第一候选帧内预测模式，以及可以将当前块的上相邻块的帧内预测模式导出为第二候选帧内预测模式。
具体地，例如，当第一候选帧内预测模式与第二候选帧内预测模式相同时，解码装置可以确定第一候选帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，如果第一候选帧内预测模式的模式编号大于DC帧内预测模式的模式编号，则如下导出包括帧内预测模式候选的用于当前块的帧内预测模式候选列表。
-mpm[0]＝leftIntraDir
-mpm[1]＝PLANAR_IDX
-mpm[2]＝DC_IDX
-mpm[3]＝((leftIntraDir+offset)％mod)+2
-mpm[4]＝((leftIntraDir-1)％mod)+2
-mpm[5]＝((leftIntraDir+offset-1)％mod)+2
在此，mpm[0]、mpm[1]、mpm[2]、mpm[3]、mpm[4]、mpm[5]分别表示帧内预测模式候选0、帧内预测模式候选1、帧内预测模式候选2、帧内预测模式候选3、帧内预测模式候选4和帧内预测模式候选5，leftIntraDir表示第一候选帧内预测模式、PLANAR_IDX表示平面帧内预测模式以及DC_IDX表示DC帧内预测模式。也就是说，可以将帧内预测模式候选列表的帧内预测模式候选0导出为第一候选帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选1导出为平面帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为DC帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选3导出为模式编号为(leftIntraDir+offset)％mod)+2的帧内预测模式，即具有通过对第一候选帧内预测模式的模式编号和偏移量之和执行模算术运算并将模算术运算结果加2获得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为((leftIntraDir–1)％mod)+2的帧内预测模式，即具有通过对从第一候选帧内预测模式的模式编号减1获得的值执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为((leftIntraDir+offset–1)％mod)+2的帧内预测模式，即具有通过对第一候选帧内预测模式的模式编号与(偏移-1)之和执行模算术运算并对模算术运算结果加2获得的值作为模式编号的帧内预测模式。
例如，当第一候选帧内预测模式与第二候选帧内预测模式不同时，解码装置可以如下导出帧内预测模式候选0和帧内预测模式候选1。
-mpm[0]＝leftIntraDir
-mpm[1]＝aboveIntraDir
即，可以将帧内预测模式候选列表的帧内预测模式候选0导出为第一候选帧内预测模式，以及将帧内预测模式候选列表的帧内预测模式候选1导出为第二候选帧内预测模式。此外，如果帧内预测模式候选0的模式编号大于帧内预测模式候选1的模式编号，则解码装置可以将maxCandModeIdx导出为0，并且如果帧内预测模式候选0的模式编号不大于帧内预测模式候选1的模式编号，则可以将maxCandModeIdx导出为1。
如果第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号均大于DC帧内预测模式的模式编号，则解码装置可以如下导出帧内预测模式候选2和帧内预测模式候选3。
-mpm[2]＝PLANAR_IDX
-mpm[3]＝DC_IDX
即，可以将帧内预测模式候选列表的帧内预测模式候选2导出为平面帧内预测模式，将帧内预测模式候选列表的帧内预测模式候选3导出为DC帧内预测模式。
然后，如果通过从mpm[maxCandModeIdx]的模式编号中减去mpm[！maxCandModeIdx]的模式编号所获得的值小于63且大于1，则解码装置可以如下导出帧内预测模式候选4和帧内预测模式候选5。
-mpm[4]＝((mpm[maxCandModeIdx]+offset)％mod)+2
-mpm[5]＝((mpm[maxCandModeIdx]-1)％mod)+2
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为((mpm[maxCandModeIdx]+offset)％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]和偏移量之和执行模算术运算并且将模算术运算结果加2得到的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为具有模式编号((mpm[maxCandModeIdx]-1)％mod)+2的帧内预测模式，即具有通过对通过从mpm[maxCandModeIdx]减1得到的值执行模算术运算并且对模算术运算结果加2得到的值作为模式编号的帧内预测模式。
如果通过从模式编号mpm[maxCandModeIdx]减去模式编号mpm[！maxCandModeIdx]得到的值等于或大于63或等于或小于1，则解码装置/解码装置可以如下导出帧内预测模式候选4和帧内预测模式候选5。
-mpm[4]＝((mpm[maxCandModeIdx]+offset-1)％mod)+2
-mpm[5]＝((mpm[maxCandModeIdx])％mod)+2
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为((mpm[maxCandModeIdx]+offset-1)％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]和(偏移量-1)之和执行模算术运算并且将模算术运算结果加2得到的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为具有模式编号((mpm[maxCandModeIdx])％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]执行模算术运算并且对模算术运算结果加2得到的值作为模式编号的帧内预测模式。
如果第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号中的至少一个不大于DC帧内预测模式的模式编号，则解码装置可以确定第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号之和是否等于或大于2。如果第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号之和等于或大于2，则解码装置可以如下导出帧内预测模式候选2至帧内预测模式候选5。
-mpm[2]＝(mpm[！maxCandModeIdx]＝＝PLANAR_IDX)？DC_IDX：PLANAR_IDX
-mpm[3]＝((mpm[maxCandModeIdx]+offset)％mod)+2
-mpm[4]＝((mpm[maxCandModeIdx]-1)％mod)+2
-mpm[5]＝((mpm[maxCandModeIdx]+offset-1)％mod)+2
即，如果mpm[！maxCandModeIdx]是平面帧内预测模式，则帧内预测模式候选列表的帧内预测模式候选2可以被导出为DC帧内预测模式，以及如果mpm[！maxCandModeIdx]不是平面帧内预测模式，则可以将其导出为平面帧内预测模式。另外，可以将帧内预测模式候选列表的帧内预测模式候选3导出为模式编号为((mpm[maxCandModeIdx]+offset)％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]和偏移量之和执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为((mpm[maxCandModeIdx]-1)％mod)+2的帧内预测模式，即具有通过对从mpm[maxCandModeIdx]减1获得的值执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为((mpm[maxCandModeIdx]+offset-1)％mod)+2，即具有通过mpm[maxCandModeIdx]和(偏移量-1)之和执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式。
如果不满足前述条件，则解码装置可以如下导出帧内预测模式候选0至帧内预测模式候选5。
-mpm[0]＝leftIntraDir
-mpm[1]＝(mpm[0]＝＝PLANAR_IDX)？DC_IDX：PLANAR_IDX
-mpm[2]＝VER_IDX
-mpm[3]＝HOR_IDX
-mpm[4]＝VER_IDX–4
-mpm[5]＝VER_IDX+4
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选0导出为第一候选帧内预测模式；如果帧内预测模式候选0是平面帧内预测模式，则可以将帧内预测模式候选列表的帧内预测模式候选1导出为DC帧内预测模式以及如果帧内预测模式候选0不是平面帧内预测模式，则将其导出为平面帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为垂直帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选3导出为水平帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为对应于通过将垂直帧内预测模式的模式编号减去4获得的模式编号的帧内预测模式，即帧内预测模式#46；可以将帧内预测模式候选列表的帧内预测模式候选5导出对应于通过将垂直帧内预测模式的模式编号加4得到的模式编号的帧内预测模式，即帧内预测模式#54。
例如，解码装置可以执行表4所示的帧内预测模式候选列表构建过程来构建用于当前块的帧内预测模式候选列表。
例如，解码装置可以基于第一候选帧内预测模式和第二候选帧内预测模式来构建帧内预测模式候选列表。解码装置可以基于第一候选帧内预测模式是否与第二候选帧内预测模式相同，和/或第一候选帧内预测模式的模式编号和/或第二候选帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，来构建帧间预测模式候选列表。在此，可以基于当前块的左相邻块的帧内预测模式导出第一候选帧内预测模式，以及可以基于当前块的上相邻块的帧内预测模式导出第二候选帧内预测模式。例如，可以将当前块的左相邻块的帧内预测模式导出为第一候选帧内预测模式，以及可以将当前块的上相邻块的帧内预测模式导出为第二候选帧内预测模式。
具体地，例如，当第一候选帧内预测模式与第二候选帧内预测模式相同时，解码装置可以确定第一候选帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，如果第一候选帧内预测模式的模式编号大于DC帧内预测模式的模式编号，则如下导出包括帧内预测模式候选的用于当前块的帧内预测模式候选列表。
-mpm[0]＝leftIntraDir
-mpm[1]＝PLANAR_IDX
-mpm[2]＝((leftIntraDir+offset)％mod)+2
-mpm[3]＝((leftIntraDir-1)％mod)+2
-mpm[4]＝DC_IDX
-mpm[5]＝((leftIntraDir+offset-1)％mod)+2
在此，mpm[0]、mpm[1]、mpm[2]、mpm[3]、mpm[4]、mpm[5]分别表示帧内预测模式候选0、帧内预测模式候选1、帧内预测模式候选2、帧内预测模式候选3、帧内预测模式候选4和帧内预测模式候选5，leftIntraDir表示第一候选帧内预测模式、PLANAR_IDX表示平面帧内预测模式以及DC_IDX表示DC帧内预测模式。也就是说，可以将帧内预测模式候选列表的帧内预测模式候选0导出为第一候选帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选1导出为平面帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为模式编号为(leftIntraDir+offset)％mod)+2的帧内预测模式，即具有通过对第一候选帧内预测模式的模式编号和偏移量之和执行模算术运算并将模算术运算结果加2获得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选3导出为模式编号为((leftIntraDir–1)％mod)+2的帧内预测模式，即具有通过对从第一候选帧内预测模式的模式编号减1获得的值执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为DC帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为((leftIntraDir+offset–1)％mod)+2的帧内预测模式，即具有通过对第一候选帧内预测模式的模式编号与(偏移-1)之和执行模算术运算并对模算术运算结果加2获得的值作为模式编号的帧内预测模式。
例如，当第一候选帧内预测模式与第二候选帧内预测模式不同时，解码装置可以如下导出帧内预测模式候选0和帧内预测模式候选1。
-mpm[0]＝leftIntraDir
-mpm[1]＝aboveIntraDir
即，可以将帧内预测模式候选列表的帧内预测模式候选0导出为第一候选帧内预测模式，以及将帧内预测模式候选列表的帧内预测模式候选1导出为第二候选帧内预测模式。此外，如果帧内预测模式候选0的模式编号大于帧内预测模式候选1的模式编号，则解码装置可以将maxCandModeIdx导出为0，并且如果帧内预测模式候选0的模式编号不大于帧内预测模式候选1的模式编号，则将maxCandModeIdx导出为1。
如果第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号均大于DC帧内预测模式的模式编号，则解码装置可以如下导出帧内预测模式候选1至帧内预测模式候选3。
-mpm[1]＝PLANAR_IDX
-mpm[2]＝aboveIntraDir
-maxCandModeIdx＝mpm[0]>mpm[2]？0:2
-int minCandModeidx＝mpm[0]>mpm[2]？2:0
-mpm[3]＝DC_IDX；
即，可以将帧内预测模式候选列表的帧内预测模式候选1导出为平面帧内预测模式，可以将帧内预测模式候选列表的帧内预测模式候选2导出为第二候选帧内预测模式，以及可以将帧内预测模式候选列表的帧内预测模式候选3导出为DC帧内预测模式。此外，如果帧内预测模式候选0的模式编号大于帧内预测模式候选2的模式编号，则解码装置可以将maxCandModeIdx导出为0，并且如果帧内预测模式候选0的模式编号不大于帧内预测模式候选2的模式编号，则将maxCandModeIdx导出为2。此外，如果帧内预测模式候选0的模式编号大于帧内预测模式候选2的模式编号，则解码装置可以将minCandModeidx导出为2，以及如果帧内预测模式候选0的模式编号不大于帧内预测模式候选2的模式编号，则将minCandModeidx导出为0。
如果通过从mpm[maxCandModeIdx]的模式编号中减去mpm[minCandModeidx]的模式编号所获得的值小于63且大于1，则解码装置可以如下导出帧内预测模式候选4和帧内预测模式候选5。
-mpm[4]＝((mpm[maxCandModeIdx]+偏移量)％mod)+2
-mpm[5]＝((mpm[maxCandModeIdx]-1)％mod)+2
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为((mpm[maxCandModeIdx]+offset)％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]和偏移量之和执行模算术运算并且将模算术运算结果加2得到的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为具有模式编号((mpm[maxCandModeIdx]-1)％mod)+2的帧内预测模式，即具有通过对通过从mpm[maxCandModeIdx]减1得到的值执行模算术运算并且对模算术运算结果加2得到的值作为模式编号的帧内预测模式。
如果通过从模式编号mpm[maxCandModeIdx]减去模式编号mpm[minCandModeIdx]得到的值等于或大于63或等于或小于1，则解码装置可以如下导出帧内预测模式候选4和帧内预测模式候选5。
-mpm[4]＝((mpm[maxCandModeIdx]+offset-1)％mod)+2
-mpm[5]＝((mpm[maxCandModeIdx])％mod)+2
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为((mpm[maxCandModeIdx]+offset-1)％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]和(偏移量-1)之和执行模算术运算并且将模算术运算结果加2得到的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为具有模式编号((mpm[maxCandModeIdx])％mod)+2的帧内预测模式，即具有通过对mpm[maxCandModeIdx]执行模算术运算并且对模算术运算结果加2得到的值作为模式编号的帧内预测模式。
如果第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号中的至少一个不大于DC帧内预测模式的模式编号，则解码装置可以确定第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号之和是否等于或大于2。如果第一候选帧内预测模式的模式编号和第二候选帧内预测模式的模式编号之和等于或大于2，则解码装置可以确定第一候选帧内预测模式和第二候选帧内预测模式中的至少一个是否为平面帧内预测模式。
如果第一候选帧内预测模式和第二候选帧内预测模式中的至少一个是平面帧内预测模式，则解码装置可以如下导出帧内预测模式候选0和帧内预测模式候选1。
-mpm[0]＝PLANAR_IDX
-mpm[1]＝(leftIntraDir<aboveIntraDir)？aboveIntraDir:leftIntraDir
-maxCandModeIdx＝1
即，可以将帧内预测模式候选列表的帧内预测模式候选0导出为平面帧内预测模式，如果第一候选帧内预测模式的模式编号小于第二候选帧内预测模式的模式编号，则可以将帧内预测模式候选列表的帧内预测模式候选1导出为第二候选帧内预测模式，以及如果第一候选帧内预测模式的模式编号大于或等于第二候选帧内预测模式的模式编号，则可以将帧内预测模式候选列表的帧内预测模式候选1导出为第一候选帧内预测模式。此外，解码装置可以将maxCandModeIdx导出为1。
如果第一候选帧内预测模式和第二候选帧内预测模式均不是平面帧内预测模式，则解码装置可以如下导出帧内预测模式候选2至帧内预测模式候选5。
-mpm[2]＝(mpm[！maxCandModeIdx]＝＝PLANAR_IDX)？DC_IDX：PLANAR_IDX
-mpm[3]＝((mpm[maxCandModeIdx]+offset)％mod)+2
-mpm[4]＝((mpm[maxCandModeIdx]-1)％mod)+2
-mpm[5]＝((mpm[maxCandModeIdx]+offset-1)％mod)+2
即，如果mpm[！maxCandModeIdx]是平面帧内预测模式，则帧内预测模式候选列表的帧内预测模式候选2可以被导出为DC帧内预测模式，以及如果mpm[！maxCandModeIdx]不是平面帧内预测模式，则可以将其导出为平面帧内预测模式。另外，可以将帧内预测模式候选列表的帧内预测模式候选3导出为模式编号为((mpm[maxCandModeIdx]+offset)％mod)+2的帧内预测模式，即，具有通过对mpm[maxCandModeIdx]和偏移量之和执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为((mpm[maxCandModeIdx]-1)％mod)+2的帧内预测模式，即具有通过对从mpm[maxCandModeIdx]减1获得的值执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为((mpm[maxCandModeIdx]+offset-1)％mod)+2，即具有通过对mpm[maxCandModeIdx]和(偏移量-1)之和执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式。
如果不满足前述条件，则解码装置可以如下导出帧内预测模式候选0至帧内预测模式候选5。
-mpm[0]＝leftIntraDir
-mpm[1]＝(mpm[0]＝＝PLANAR_IDX)？DC_IDX：PLANAR_IDX
-mpm[2]＝VER_IDX
-mpm[3]＝HOR_IDX
-mpm[4]＝VER_IDX–4
-mpm[5]＝VER_IDX+4
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选0导出为第一候选帧内预测模式；如果帧内预测模式候选0是平面帧内预测模式，则可以将帧内预测模式候选列表的帧内预测模式候选1导出为DC帧内预测模式，以及如果帧内预测模式候选0不是平面帧内预测模式，则将其导出为平面帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为垂直帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选3导出为水平帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为对应于通过将垂直帧内预测模式的模式编号减去4获得的模式编号的帧内预测模式，即帧内预测模式#46；可以将帧内预测模式候选列表的帧内预测模式候选5导出对应于通过将垂直帧内预测模式的模式编号加4得到的模式编号的帧内预测模式，即帧内预测模式#54。
例如，解码装置可以执行表5所示的帧内预测模式候选列表构建过程来构建用于当前块的帧内预测模式候选列表。
例如，解码装置可以基于第一候选帧内预测模式和第二候选帧内预测模式来构建帧内预测模式候选列表。解码装置可以基于第一候选帧内预测模式是否与第二候选帧内预测模式相同，和/或第一候选帧内预测模式的模式编号和/或第二候选帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，来构建帧间预测模式候选列表。在此，可以基于当前块的左相邻块的帧内预测模式导出第一候选帧内预测模式，以及可以基于当前块的上相邻块的帧内预测模式导出第二候选帧内预测模式。例如，可以将当前块的左相邻块的帧内预测模式导出为第一候选帧内预测模式，以及可以将当前块的上相邻块的帧内预测模式导出为第二候选帧内预测模式。
具体地，例如，当第一候选帧内预测模式与第二候选帧内预测模式相同时，解码装置可以确定第一候选帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，如果第一候选帧内预测模式的模式编号大于DC帧内预测模式的模式编号，则如下导出包括帧内预测模式候选的用于当前块的帧内预测模式候选列表。
-mpm[0]＝g_intraMode65to33AngMapping[leftIntraDir]
-mpm[1]＝((g_intraMode65to33AngMapping[leftIntraDir]+offset)％mod)+2
-mpm[2]＝((g_intraMode65to33AngMapping[leftIntraDir]-1)％mod)+2
可以将帧内预测模式候选列表的帧内预测模式候选0导出为第一候选帧内预测模式。另外，可以将帧内预测模式候选列表的帧内预测模式候选1导出为模式编号为((g_intraMode65to33AngMapping[leftIntraDir]+offset)％mod)+2的帧内预测模式，即具有通过对第一候选帧内预测模式的模式编号与偏移量之和执行模算术运算并且将模算术运算结果加2获得的值作为模式编号的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选2导出为模式编号为((g_intraMode65to33AngMapping[leftIntraDir]-1)％mod)+2的帧内预测模式，即具有通过对通过从第一候选帧内预测模式的模式编号减1获得的值执行模算术运算并且将模算术运算结果加2得到的值作为模式编号的帧内预测模式。
如果第一候选帧内预测模式的模式编号等于或小于DC帧内预测模式的模式编号，则解码装置可以如下导出包括帧内预测模式候选的用于当前块的帧内预测模式候选列表。
-mpm[0]＝g_intraMode65to33AngMapping[PLANAR_IDX]
-mpm[1]＝g_intraMode65to33AngMapping[DC_IDX]
-mpm[2]＝g_intraMode65to33AngMapping[VER_IDX]
即，可以将帧内预测模式候选列表的帧内预测模式候选0导出为平面帧内预测模式，可以将帧内预测模式候选列表的帧内预测模式候选1导出为DC帧内预测模式，以及可以将帧内预测模式候选列表的帧内预测模式候选2导出为垂直帧内预测模式。
此外，如果第一候选帧内预测模式与第二候选帧内预测模式不同，则解码装置可以导出帧内预测模式候选0和帧内预测模式候选1。
-mpm[0]＝g_intraMode65to33AngMapping[leftIntraDir]
-mpm[1]＝g_intraMode65to33AngMapping[aboveIntraDir]
即，可以将帧内预测模式候选列表的帧内预测模式候选0作为第一候选帧内预测模式，以及可以将帧内预测模式候选列表的帧内预测模式候选1导出为第二候选帧内预测模式。
然后，如果第一候选帧内预测模式和第二候选帧内预测模式均为平面帧内预测模式，则解码装置可以如下导出帧内预测模式候选2。
-mpm[2]＝g_intraMode65to33AngMapping[PLANAR_IDX]
即，可以将帧内预测模式候选列表的帧内预测模式候选2导出为平面帧内预测模式。
否则，如果第一候选帧内预测模式和第二候选帧内预测模式中的至少一个是平面帧内预测模式，则解码装置可以如下导出帧内预测模式候选2。
-mpm[2]＝g_intraMode65to33AngMapping[(leftIntraDir+aboveIntraDir)<2？VER_IDX：DC_IDX]
也就是说，如果第一候选帧内预测模式的模式编号与第二候选帧内预测模式的模式编号之和小于2，则可以将帧内预测模式候选列表的帧内预测模式候选2导出为垂直帧内预测模式，以及如果第一候选帧内预测模式的模式编号与第二候选帧内预测模式的模式编号之和等于或大于2，则可以将其导出为DC帧内预测模式。
例如，解码装置可以基于如表6所示的当前块的相邻块的帧内预测模式构建当前块的帧内预测模式候选列表。同时，帧内预测模式候选列表可以是指上述最可能模式(MPM)列表。
例如，解码装置可以基于当前块的左相邻块的帧内预测模式和当前块的上相邻块的帧内预测模式来构建帧内预测模式候选列表。解码装置可以确定当前块的左相邻块的帧内预测模式和上相邻块的帧内预测模式是否相同，以及左相邻块的帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号。解码装置可以基于当前块的左相邻块的帧内预测模式和上相邻块的帧内预测模式是否相同，和/或左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号，来构建帧内预测模式候选列表。
在当前块的左相邻块的帧内预测模式与上相邻块的帧内预测模式相同且左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号时，解码装置可以如下所述导出包括帧内预测模式候选的当前块的帧内预测模式候选列表。
-mpm[0]＝INTRA_PLANAR
-mpm[1]＝candIntraPredModeA
-mpm[2]＝2+((candIntraPredModeA+61)％64)
-mpm[3]＝2+((candIntraPredModeA–1)％64)
-mpm[4]＝INTRA_DC
-mpm[5]＝2+((candIntraPredModeA+60)％64)
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选0导出为平面帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选1导出为左相邻块的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为模式编号为2+((candIntraPredModeA+61)％64)的帧内预测模式，即具有通过对通过将左相邻块的帧内预测模式的模式编号加上61获得的值执行取64的模算术运算并将模算术运算结果加2所获得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选3导出为模式编号为2+((candIntraPredModeA-1)％64)的帧内预测模式，即通过对从左相邻块的帧内预测模式的模式编号减1获得的值执行取64的模算术运算并将模算术运算结果加2所获得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为DC帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为2+((candIntraPredModeA+60)％64)，即通过对通过将左相邻块的帧内预测模式的模式编号加上60获得的值执行取64的模算术运算并将模算术运算结果加2所获得的值作为模式编号的帧内预测模式。即，例如，当左相邻块的帧内预测模式和上相邻块的帧内预测模式相同，并且左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号时，帧内预测模式候选列表可以包括左相邻块的帧内预测模式、上相邻块的帧内预测模式、模式编号为2+((candIntraPredModeA+61)％64)的帧内预测模式、模式编号2+((candIntraPredModeA-1)％64)的帧内预测模式和模式编号2+((candIntraPredModeA+60)％64)的帧内预测模式作为帧内预测模式候选。在此，candIntraPredModeA可以表示当前块的左相邻块的帧内预测模式的模式编号。
同时，在当前块的左相邻块的帧内预测模式和上相邻块的帧内预测模式不相同时，例如，解码装置可以确定左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的至少一个是否大于DC帧内预测模式的模式编号。当左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的至少一个大于DC帧内预测模式的模式编号时，可以如下导出变量minAB和变量maxAB。
-minAB＝Min(candIntraPredModeA,candIntraPredModeB)
-maxAB＝Max(candIntraPredModeA,candIntraPredModeB)
在此，candIntraPredModeA可以表示当前块的左相邻块的帧内预测模式的模式编号，以及candIntraPredModeB可以表示当前块的上相邻块的帧内预测模式的模式编号。即，minAB可以表示左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的较小值，maxAB可以表示左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的较大值。
此外，在当前块的左相邻块的帧内预测模式与上相邻块的帧内预测模式不相同时，解码装置可以确定左相邻块的帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号，以及上相邻块的帧内预测模式的模式编号是否大于DC帧内预测模式的模式编号。
例如，当左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号并且上相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号时，解码装置可以如下所述导出帧内预测模式候选0至帧内预测模式候选3。
mpm[0]＝INTRA_PLANAR
mpm[1]＝candIntraPredModeA
mpm[2]＝candIntraPredModeB
mpm[3]＝INTRA_DC
即，可以将帧内预测模式候选列表的帧内预测模式候选0导出为平面帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选1导出为左相邻块的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为上相邻块的帧内预测模式；以及可以将帧内预测模式候选列表的帧内预测模式候选3导出为DC帧内预测模式。在此，candIntraPredModeB可以表示当前块的上相邻块的帧内预测模式的模式编号。即，例如，当左相邻块的帧内预测模式和上相邻块的帧内预测模式不相同并且左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式均大于DC帧内预测模式的模式编号时，帧内预测模式候选列表可以包括左相邻块的帧内预测模式和上相邻块的帧内预测模式，作为帧内预测模式候选。
此后，可以基于maxAB和minAB导出剩余的帧内预测模式候选(帧内预测模式候选4和帧内预测模式候选5)。具体地，可以基于左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号之间的较大值和较小值之间的差来导出剩余的帧内预测模式候选。
例如，当maxAB减去minAB得到的值小于63且大于1时(即当maxAB减去minAB得到的值为2至62之一时)，解码装置可以如下所述导出帧内预测模式候选4和帧内预测模式候选5。
-mpm[4]＝2+((maxAB+61)％64)
-mpm[5]＝2+((maxAB–1)％64)
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为2+((maxAB+61)％64)的帧内预测模式，即具有通过对通过将maxAB加61得到的值执行取64的模算术运算并且使模算术运算结果加2所得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为2+((maxAB-1)％64)的帧内预测模式，即具有通过对通过使maxAB减1得到的值执行取64的模算术运算并且使模算术运算结果加2所得的值作为模式编号的帧内预测模式。在此，maxAB可以表示左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的较大值。
可替代地，当从maxAB减去minAB所获得的值等于或大于63或等于或小于1时，解码装置可以如下所述导出帧内预测模式候选4和帧内预测模式候选5。
-mpm[4]＝2+((maxAB+60)％64)
-mpm[5]＝2+(maxAB％64)
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为2+((maxAB+60)％64)的帧内预测模式，即具有通过对通过将maxAB加60得到的值执行取64的模算术运算并且使模算术运算结果加2所得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为2+(maxAB％64)的帧内预测模式，即具有通过对maxAB执行取64的模算术运算并且使模算术运算结果加2所得的值作为模式编号的帧内预测模式。在此，maxAB可以表示左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的较大值。
同时，在当前块的左相邻块的帧内预测模式与上相邻块的帧内预测模式不相同，或者左相邻块的帧内预测模式的模式编号和上相邻块的帧内预测模式的模式编号中的至少一个小于DC帧内预测模式的模式编号时，解码装置可以确定左相邻块的帧内预测模式的模式编号与上相邻块的帧内预测模式的模式编号之和是否等于或大于DC帧内预测模式的模式编号。
例如，当左相邻块的帧内预测模式的模式编号与上相邻块的帧内预测模式的模式编号之和等于或大于DC帧内预测模式的模式编号时，解码装置可以如下所述导出包括帧内预测模式候选的当前块的帧内预测模式候选列表。
-mpm[0]＝INTRA_PLANAR
-mpm[1]＝maxAB
-mpm[2]＝INTRA_DC
-mpm[3]＝2+((maxAB+61)％64)
-mpm[4]＝2+((maxAB–1)％64)
-mpm[5]＝2+((maxAB+60)％64)
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选0导出为平面帧内预测模式；可以将帧内预测模式候选1导出为maxAB，即当左相邻块的帧内预测模式的模式编号小于上相邻块的帧内预测模式的模式编号时，可以将帧内预测模式候选1导出为上相邻块的帧内预测模式，以及当左相邻块的帧内预测模式的模式编号大于或等于上相邻块的帧内预测模式的模式编号时，可以将帧内预测模式候选1导出为左相邻块的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为DC帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选3导出为模式编号为2+((maxAB+61)％64)的帧内预测模式，即具有通过对通过将maxAB加61得到的值执行取64的模算术运算并且使模算术运算结果加2所得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选4导出为模式编号为2+((maxAB-1)％64)的帧内预测模式，即具有通过对通过将maxAB减1得到的值执行取64的模算术运算并且使模算术运算结果加2所得的值作为模式编号的帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选5导出为模式编号为2+((maxAB+60)％64)的帧内预测模式，即具有通过对通过将maxAB加60得到的值执行取64的模算术运算并且使模算术运算结果加2所得的值作为模式编号的帧内预测模式。
或者，例如，当上述条件不满足时，解码装置可以如下所述导出包括帧内预测模式候选的当前块的帧内预测模式候选列表。
-mpm[0]＝INTRA_PLANAR
-mpm[1]＝INTRA_DC
-mpm[2]＝INTRA_ANGULAR50
-mpm[3]＝INTRA_ANGULAR18
-mpm[4]＝INTRA_ANGULAR46
-mpm[5]＝INTRA_ANGULAR54
也就是说，可以将帧内预测模式候选列表的帧内预测模式候选0导出为平面帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选1导出为DC帧内预测模式；可以将帧内预测模式候选列表的帧内预测模式候选2导出为垂直帧内预测模式(即帧内预测模式#50)；可以将帧内预测模式候选列表的帧内预测模式候选3导出为水平帧内预测模式(即帧内预测模式#18)；可以将帧内预测模式候选列表的帧内预测模式候选4导出为通过将垂直帧内预测模式的模式编号减去4得到的模式编号的帧内预测模式，即帧内预测模式#46；可以将帧内预测模式候选列表的帧内预测模式候选5导出为模通过将垂直帧内预测模式的模式编号加4得到的模式编号的帧内预测模式，即帧内预测模式#54。即，例如，当不满足上述条件时，帧内预测模式候选列表可以包括DC帧内预测模式、帧内预测模式#50、帧内预测模式#18、帧内预测模式#46和帧内预测模式#54，作为帧内预测模式候选。
同时，例如，当左相邻块不可用时，不将帧内预测应用于左相邻块，并且可以将与上相邻块的CIIP标志的值不是1的情况和左相邻块的pcm标志的值为1的情况中的至少一个相对应的左相邻块的帧内预测模式导出为平面帧内预测模式。此外，当上相邻块不可用时，不将帧内预测应用于上相邻块，并且可以将与上相邻块的CIIP标志的值不是1的情况、上相邻块的pcm标志的值为1的情况以及上相邻块不被包括在当前CTU中的情况中的至少一个相对应的左相邻块的帧内预测模式导出为平面帧内预测模式。
同时，当帧内预测类型为第一帧内预测类型时生成的帧内预测模式候选列表、当帧内预测类型为第二帧内预测类型时生成的帧内预测模式候选列表，以及当帧内预测类型为第三帧内预测类型时生成的帧内预测模式候选列表可以相同。即，无论当前块的帧内预测类型如何，都可以构建相同的帧内预测模式候选列表。无论当前块的帧内预测类型如何，可以通过相同的帧内预测模式构建过程来构建帧内预测模式候选列表。帧内预测模式构建过程可以与上述实施例之一相同。
例如，解码装置可以基于帧内预测模式候选列表导出当前块的帧内预测模式。
例如，解码装置可以导出关于当前块的MPM标志。预测相关信息可以包括MPM标志。例如，解码装置可以接收用于当前块的预测相关信息，并且预测相关信息可以包括关于当前块的MPM标志。预测相关信息可以不包括MPM标志。在这种情况下，解码装置可以将MPM标志的值导出为1。MPM标志可以指示当前块的帧内预测模式是否是帧内预测模式候选列表的帧内预测模式候选之一。MPM标志也可以被称为帧内预测模式候选标志。
当MPM标志为1时，解码装置可以将帧内预测模式候选列表的帧内预测模式候选中，由MPM索引指示的帧内预测模式候选导出为当前块的帧内预测模式。MPM索引可以以mpm_idx或intra_luma_mpm_idx语法元素的形式发信号通知。MPM索引也可以被称为帧内预测模式候选索引。
当MPM标志为0时，解码装置可以将剩余帧内预测模式当中由剩余帧内预测模式信息指示的帧内预测模式导出为用于当前块的帧内预测模式。剩余帧内预测模式可以表示不包括在帧内预测模式候选列表的帧内预测模式候选中的帧内预测模式。上述预测相关信息可以包括剩余帧内预测模式信息。剩余帧内预测模式信息可以以rem_intra_luma_pred_mode或intra_luma_mpm_remainder语法元素的形式发信号通知。
例如，当用于当前块的帧内预测类型被导出为第二帧内预测类型时，可以将当前块的帧内预测模式导出为除平面帧内预测模式和DC帧内预测模式以外的帧内预测模式之一，而当用于当前块的帧内预测类型被导出为第三帧内预测类型时，将其导出为除DC帧内预测模式以外的帧内预测模式之一。
例如，当用于当前块的帧内预测类型被导出为第二帧内预测类型，可以将用于当前块的帧内预测模式导出为除平面帧内预测模式以外的帧内预测模式之一，而当用于当前块的帧内预测类型被导出为第三帧内预测类型时，可以将其导出为除DC帧内预测模式以外的帧内预测模式之一。
例如，当用于当前块的帧内预测类型被导出为第二帧内预测类型时，可以将当前块的帧内预测模式导出为除平面帧内预测模式以外的帧内预测模式之一。
例如，解码装置可以基于帧内预测类型和帧内预测模式导出当前块的预测样本。
例如，当帧内预测类型被导出为第一帧内预测类型时，解码装置可以基于帧内预测模式从与当前块相邻的帧内预测参考线中的参考样本中导出至少一个参考样，本并且基于参考样本生成当前块的预测样本。参考样本可以包括当前块的左上参考样本、上参考样本和左参考样本。例如，在当前块的大小为W×H、当前块的左上样本位置的x分量为xN以及其y分量为yN时，左参考样本可以是p[xN-1][yN]至p[xN-1][2H+yN-1]、左上参考样本可以是p[xN-1][yN-1]以及上参考样本可以是p[xN][yN-1]至p[2W+xN-1][yN-1]。
例如，当帧内预测类型被导出为第二帧内预测类型时，解码装置可以基于帧内预测模式从与当前块不相邻的帧内预测参考线的参考样本中导出至少一个参考样本，并且基于参考样本生成当前块的预测样本。在此，帧内预测参考线可以是与当前块的上边界和/或左边界相隔1、2或3个样本距离的参考线。
例如，当将帧内预测类型导出为第三帧内预测类型时，解码装置可以基于指示ISP分割类型的ISP分割标志，导出当前块的ISP分割类型，并且根据ISP分割类型对当前块进行分区以导出子块。分割类型可以是水平分割类型或垂直分割类型。例如，在当前块的大小为4×4时，可以不分区当前块。例如，在当前块的大小为4×8且分割类型为水平分割类型时，可以将当前块分区为两个4×4的子块。例如，在当前块的大小为4×8并且分割类型为垂直分割类型时，可以将当前块分区为两个2×8的子块。例如，在当前块的大小为8×4且分割类型为水平分割类型时，可以将当前块分区为两个8×2的子块。例如，在当前块的大小为8×4且分割类型为垂直分割类型时，可以将当前块分区为两个4×4的子块。例如，在当前块的大小为W×H(除4×8、8×4、4×4以外的大小)且分割类型为水平分割类型时，可以将当前块分区为4个W×H/4个子块。例如，在当前块的大小为W×H且分割类型为垂直分割类型时，可以将当前块分区为四个W/4×H的子块。此后，解码装置可以对子块执行帧内预测以生成预测样本。即，解码装置可以基于帧内预测模式，导出当前块的每个子块的帧内预测参考线中的至少一个参考样本，并且基于参考样本生成预测样本。每个子块的帧内预测参考线可以是与每个子块相邻的参考线。
例如，当将当前块的帧内预测模式导出为DC帧内预测模式、当前块为正方形块、当前块的大小为WxH、当前块的左上位置的x分量和y分量为0时，可以基于由当前块的参考线索引指示的上帧内预测参考线中的(0,-refIdx-1)坐标的参考样本至(W-1，-refIdx-1)坐标的参考样本以及由该参考线索引指示的左帧内预测参考线中的(-refIdx-1,0)坐标的参考样本至(-refIdx-1,H-1)坐标的参考样本来导出DC值。可以将当前块的预测样本导出为DC值。
例如，在将当前块的帧内预测模式导出为DC帧内预测模式、当前块为其宽度大于高度的非正方形块、当前块的大小为WxH、并且当前块的左上位置的x分量和y分量为0时，可以基于由当前块的参考线索引指示的上帧内预测参考线中的(0,-refIdx-1)坐标的参考样本至(W-1，-refIdx-1)坐标的参考样本来导出DC值。可以将当前块的预测样本导出为DC值。
例如，在将当前块的帧内预测模式导出为DC帧内预测模式、当前块为其高度大于宽度的非正方形块、当前块的大小为WxH并且当前块的左上位置的x分量和y分量为0时，可以基于由当前块的参考线索引指示的左帧内预测参考线中的(-refIdx-1,0)坐标的参考样本至(-refIdx-1,H-1)坐标的参考样本来导出DC值。可以将当前块的预测样本导出为DC值。
例如，在将当前块的帧内预测模式导出为平面帧内预测模式、当前块的大小为WxH、当前块的左上位置的x分量和y分量为0时，可以基于由当前块的参考线索引指示的帧内预测参考线中的(W-1，-refIdx-1)坐标的参考样本至(-refIdx-1,H-1)坐标的参考样本来导出预测样本。
此外，例如，解码装置可以基于用于当前块的残差信息导出当前块的残差样本。图像信息可以包括残差信息。残差信息可以包括残差样本的变换系数。解码装置可以基于残差信息，导出当前块的残差样本(或残差样本阵列)。
然后，例如，解码装置可以基于预测样本和残差样本，生成当前块的重构样本。例如，解码装置可以通过将残差样本与预测样本相加来生成重构样本。
此后，如上所述，解码装置可以将诸如去块滤波和/或SAO过程的环内滤波过程应用于重构样本(即，重构图片)以根据需要改进主观/客观图片质量。
图24示意性地示出了根据本公开的执行图像解码方法的解码装置。图23中公开的方法可以由图24所示的解码装置执行。具体地，例如，图24的解码装置的熵解码器可以执行图23的S2300，以及图24的解码装置的预测器可以执行图23的S2310。另外，虽然未示出，但是可以由图24的解码装置的熵解码器执行通过比特流获得包括关于当前块的残差信息的图像信息的过程，以及可以由图24的解码装置的残差处理器执行基于残差信息导出关于当前块的残差样本的过程。
根据上述本公开，可以使用用于帧内预测类型的统一帧内预测模式列表构建过程来降低硬件和软件实现复杂度。
此外，根据本公开，可以使用针对帧内预测类型的统一帧内预测模式列表构建过程来减少对帧内预测类型的依赖性以提高帧内预测的编译效率。
此外，根据本公开，可以通过基于参考图片索引导出在应用MRL并且将帧内预测模式导出为DC帧内预测模式时使用的参考样本来提高帧内预测的编译效率。
此外，根据本公开，可以通过基于参考图片索引和当前块的形状导出在应用MRL并且将帧内预测模式导出为DC帧内预测模式时使用的参考样本来提高帧内预测的编译效率。
此外，根据本公开，可以通过基于参考图片索引导出在应用MRL并且将帧内预测模式导出为平面帧内预测模式时使用的参考样本来提高帧内预测的编译效率。
在以上实施例中，基于具有一系列步骤或方框的流程图描述了方法。本公开不限于以上步骤或方框的顺序。一些步骤或方框可以以与上述的其它步骤或方框不同的顺序执行或同时执行。此外，本领域技术人员将理解，流程图中所示的步骤不是排它的，并且可以还包括其它步骤，或者可以在不影响本公开的范围的情况下删除流程图中的一个或更多个步骤。
在本说明书中所描述的实施例可以通过被实现在处理器、微处理器、控制器或芯片上来执行。例如，每个图中所示的功能单元可以通过被实现在计算机、处理器、微处理器、控制器或芯片上来执行。在这种情况下，用于实现的信息(例如，关于指令的信息)或算法可以存储在数字存储介质中。
另外，应用本公开的解码装置和编码装置可以被包括在如下装置中：多媒体广播发送/接收装置、移动通信终端、家庭影院视频装置、数字影院视频装置、监视相机、视频聊天装置、诸如视频通信的实时通信装置、移动流装置、存储介质、便携式摄像机、VoD服务提供装置、顶置(OTT)视频装置、互联网流服务提供装置、三维(3D)视频装置、电话会议视频装置、运输用户装置(例如，车辆用户装置、飞机用户装置和轮船用户装置)和医疗视频设备；并且应用本公开的解码装置和编码装置可以用于处理视频信号或数据信号。例如，过顶(OTT)视频装置可以包括游戏机、蓝光播放器、互联网接入电视机、家庭影院系统、智能电话、平板电脑、数字视频记录仪(DVR)等。
另外，应用本公开的处理方法可以以计算机执行的程序的形式产生，并且可以存储在计算机可读记录介质中。根据本公开的具有数据结构的多媒体数据也可以存储在计算机可读记录介质中。计算机可读记录介质包括其中存储计算机可读数据的所有类型的存储设备。计算机可读记录介质可以包括例如BD、通用串行总线(USB)、ROM、PROM、EPROM、EEPROM、RAM、CD-ROM、磁带、软盘和光学数据存储设备。另外，计算机可读记录介质包括以载波(例如，经由互联网的传输)形式实现的介质。另外，由编码方法生成的比特流可以存储在计算机可读记录介质中或通过有线/无线通信网络来传输。
另外，本公开的实施例可以根据程序代码利用计算机程序产品来实现，并且程序代码可以通过本公开的实施例在计算机中执行。程序代码可以存储在计算机可读载体上。
图25例示了应用了本公开的内容流传输系统的结构图。
应用本文档的实施例的内容流系统可以主要包括编码服务器、流服务器、网络服务器、媒体储存器、用户设备和多媒体输入设备。
编码服务器将从诸如智能手机、相机或便携式摄像机等的多媒体输入设备输入的内容压缩为数字数据，以生成比特流并将比特流发送到流服务器。作为另一示例，当诸如智能手机、相机或便携式摄像机等的多媒体输入设备直接生成比特流时，可以省略编码服务器。
可以通过应用了本公开的实施例的编码方法或比特流生成方法来生成比特流，并且流服务器可以在发送或接收比特流的过程中临时存储比特流。
流服务器基于用户请求通过网络服务器向用户设备发送多媒体数据，并且网络服务器用作向用户通知服务的媒介。当用户从网络服务器请求所需的服务时，网络服务器向流服务器递送该请求，并且流服务器向用户发送多媒体数据。在这种情况下，内容流系统可以包括单独的控制服务器。在这种情况下，控制服务器用于控制内容流系统内的设备之间的命令/响应。
流服务器可以从媒体储存器和/或编码服务器接收内容。例如，当从编码服务器接收内容时，可以实时接收内容。在这种情况下，为了提供平稳的流服务，流服务器可以将比特流存储预定时间段。
用户设备的示例可以包括移动电话、智能电话、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航仪、触屏PC、平板PC、超级本、可穿戴设备(例如，智能手表、智能眼镜和头戴式显示器)、数字TV、台式计算机和数字标牌等。内容流系统内的每个服务器可以作为分布式服务器来操作，在这种情况下，从每个服务器接收的数据可以被分布。
本公开中描述的权利要求可以以各种方式组合。例如，可以组合本公开的方法权利要求的技术特征以实现为装置，以及可以组合本公开的装置权利要求的技术特征以实现为方法。此外，可以组合本公开的方法权利要求的技术特征和装置权利要求的技术特征以实施为装置，以及可以组合本公开的方法权利要求的技术特征和装置权利要求的技术特征以实现为方法。
Claims (15)
1.一种由解码装置执行的图像解码方法，包括：
接收图像信息，所述图像信息包括用于当前块的预测相关信息；以及
基于所述图像信息生成所述当前块的重构样本，
其中，生成所述重构样本包括：
基于所述预测相关信息，导出帧内预测类型当中的用于所述当前块的帧内预测类型；
基于所述当前块的相邻块的帧内预测模式，构建所述当前块的帧内预测模式候选列表，
其中，所述帧内预测类型包括：基于与所述当前块相邻的帧内预测参考线的第一帧内预测类型、基于与所述当前块不相邻的帧内预测参考线的第二帧内预测类型，以及对其应用帧内子分区模式(ISP)的第三帧内预测类型，以及
其中，针对所述帧内预测类型为所述第一帧内预测类型的情况构建的所述帧内预测模式候选列表、针对所述帧内预测类型为所述第二帧内预测类型的情况构建的所述帧内预测模式候选列表，以及针对所述帧内预测类型为所述第三帧内预测类型的情况构建的所述帧内预测模式候选列表是相同的。
2.根据权利要求1所述的图像解码方法，其中，生成所述重构样本包括：
基于所述帧内预测模式候选列表，导出所述当前块的帧内预测模式；
基于所述帧内预测类型和所述帧内预测模式，导出所述当前块的预测样本；
基于所述当前块的残差信息，导出所述当前块的残差样本；以及
基于所述预测样本和所述残差样本，生成所述重构样本，
其中，所述图像信息包括所述残差信息。
3.根据权利要求1所述的图像解码方法，
其中，所述相邻块包括所述当前块的左相邻块和上相邻块，
其中，当所述左相邻块的帧内预测模式与所述上相邻块的帧内预测模式相同并且所述左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号时，所述帧内预测模式候选列表包括：所述左相邻块的帧内预测模式、模式编号为2+((candIntraPredModeA+61)％64)的帧内预测模式、模式编号为2+((candIntraPredModeA-1)％64)的帧内预测模式以及模式编号为2+((candIntraPredModeA+60)％64)的帧内预测模式，作为帧内预测模式候选，以及
其中，所述candIntraPredModeA表示所述左相邻块的帧内预测模式的模式编号。
4.根据权利要求3所述的图像解码方法，
其中，当所述左相邻块的帧内预测模式和所述上相邻块的帧内预测模式不相同，并且所述左相邻块的帧内预测模式的模式编号和所述上相邻块的帧内预测模式的模式编号大于所述DC帧内预测模式的模式编号时，所述帧内预测模式候选列表包括所述左相邻块的帧内预测模式和所述上相邻块的帧内预测模式作为所述帧内预测模式候选，
其中，基于所述左相邻块的帧内预测模式的模式编号和所述上相邻块的帧内预测模式的模式编号中的较大值和较小值之间的差，导出所述帧内预测模式候选列表的剩余帧内预测模式候选。
5.根据权利要求3所述的图像解码方法，其中，当不对所述左相邻块应用帧内预测、所述左相邻块的组合帧间和帧内预测(CIIP)标志的值不为1时，将所述左相邻块的帧内预测模式导出为平面帧内预测模式。
6.根据权利要求1所述的图像解码方法，
其中，当将所述当前块的帧内预测模式导出为所述DC帧内预测模式、所述当前块为正方形块、所述当前块的大小为WxH、所述当前块的左上位置的x分量和y分量为0时，基于由所述当前块的参考线索引指示的帧内预测参考线中的(0,-refIdx-1)坐标的参考样本至(W-1,-refIdx-1)坐标的参考样本以及所述帧内预测参考线中的(-refIdx-1，0)坐标的参考样本至(-refIdx-1，H-1)坐标的参考样本，来导出DC值，并且将所述预测样本导出为所述DC值，
其中，所述refIdx为所述参考线索引的值，以及所述预测相关信息包括所述参考线索引。
7.根据权利要求1所述的图像解码方法，
其中，当将所述当前块的帧内预测模式导出为所述DC帧内预测模式、所述当前块为宽度大于其高度的非正方形块、所述当前块的大小为WxH、所述当前块的左上位置的x分量和y分量为0时，基于由所述当前块的参考线索引指示的帧内预测参考线中的(0,-refIdx-1)坐标的参考样本至(W-1,-refIdx-1)坐标的参考样本来导出DC值，并且将所述预测样本导出为所述DC值，
其中，所述refIdx为所述参考线索引的值，以及所述预测相关信息包括所述参考线索引。
8.根据权利要求1所述的图像解码方法，
其中，当将所述当前块的帧内预测模式导出为所述DC帧内预测模式、所述当前块为高度大于其宽度的非正方形块、所述当前块的大小为WxH、所述当前块的左上位置的x分量和y分量为0时，基于由所述当前块的参考线索引指示的帧内预测参考线中的(-refIdx-1,0)坐标的参考样本至(-refIdx-1,H-1)坐标的参考样本来导出DC值，以及将所述预测样本导出为所述DC值，
其中，所述refIdx为所述参考线索引的值，以及所述预测相关信息包括所述参考线索引。
9.根据权利要求1所述的图像解码方法，
其中，当将所述当前块的帧内预测模式导出为平面帧内预测模式、所述当前块的大小为WxH、所述当前块的左上位置的x分量和y分量为0时，基于由所述当前块的参考线索引所指示的帧内预测参考线中的(W-1，-refIdx-1)坐标的参考样本和(-refIdx-1，H-1)坐标的参考样本来导出所述预测样本，
其中，所述refIdx为所述参考线索引的值，以及所述预测相关信息包括所述参考线索引。
10.根据权利要求1所述的图像解码方法，其中，基于所述预测相关信息导出所述帧内预测类型当中的用于所述当前块的帧内预测类型包括：
基于所述当前块的参考线索引确定用于所述当前块的帧内预测类型是否是所述第二帧内预测类型，
其中，所述预测相关信息包括所述参考线索引，以及
其中，当所述参考线索引指示与所述当前块不相邻的参考线时，将与所述当前块不相邻的所述参考线导出为所述当前块的帧内预测参考线，以及将所述第二帧内预测类型导出为用于所述当前块的帧内预测类型。
11.根据权利要求10所述的图像解码方法，其中，基于所述预测相关信息导出所述帧内预测类型当中的用于所述当前块的帧内预测类型包括：
当用于所述当前块的帧内预测类型不是所述第二帧内预测类型时，基于帧内子分区模式(ISP)标志，确定用于所述当前块的帧内预测类型是否是所述第三帧内预测类型，
其中，所述预测相关信息包括所述ISP标志，
其中，当所述ISP标志指示应用所述第三帧内预测类型时，将所述第三帧内预测类型导出为用于所述当前块的帧内预测类型，以及
其中，当所述ISP标志指示不应用所述第三帧内预测类型时，将所述第一帧内预测类型导出为用于所述当前块的帧内预测类型。
12.一种由编码装置执行的图像编码方法，包括：
生成当前块的重构样本；
生成用于所述当前块的预测相关信息；以及
编码包括所述预测相关信息的图像信息，
其中，生成所述当前块的重构样本包括：
确定帧内预测类型当中的用于所述当前块的帧内预测类型；
基于所述当前块的相邻块的帧内预测模式，构建所述当前块的帧内预测模式候选列表，
其中，所述帧内预测类型包括：使用与所述当前块相邻的帧内预测参考线的第一帧内预测类型、使用与所述当前块不相邻的帧内预测参考线的第二帧内预测类型，以及对其应用帧内子分区模式(ISP)的第三帧内预测类型，
其中，针对所述帧内预测类型为所述第一帧内预测类型的情况构建的所述帧内预测模式候选列表、针对所述帧内预测类型为所述第二帧内预测类型的情况构建的所述帧内预测模式候选列表，以及针对所述帧内预测类型为所述第三帧内预测类型的情况构建的所述帧内预测模式候选列表是相同的。
13.根据权利要求12所述的图像编码方法，其中，生成所述重构样本包括：
基于所述帧内预测模式候选列表，导出所述当前块的帧内预测模式；
基于所述帧内预测类型和所述帧内预测模式，导出所述当前块的预测样本；
基于所述预测样本，导出所述当前块的残差样本；以及
基于所述预测样本和所述残差样本，生成所述重构样本。
14.根据权利要求12所述的图像编码方法，
其中，所述相邻块包括所述当前块的左相邻块和上相邻块，
其中，当所述左相邻块的帧内预测模式与所述上相邻块的帧内预测模式相同并且所述左相邻块的帧内预测模式的模式编号大于DC帧内预测模式的模式编号时，所述帧内预测模式候选列表包括：所述左相邻块的帧内预测模式、模式编号为2+((candIntraPredModeA+61)％64)的帧内预测模式、模式编号为2+((candIntraPredModeA-1)％64)的帧内预测模式以及模式编号为2+((candIntraPredModeA+60)％64)的帧内预测模式，作为帧内预测模式候选，以及
其中，所述candIntraPredModeA表示所述左相邻块的帧内预测模式的模式编号。
15.一种非暂时性计算机可读存储介质，存储包括图像信息的比特流，使得解码装置执行以下步骤：
接收图像信息，所述图像信息包括用于当前块的预测相关信息；以及
基于所述图像信息生成所述当前块的重构样本，
其中，生成所述重构样本包括：
基于所述预测相关信息，导出帧内预测类型当中的用于所述当前块的帧内预测类型；
基于所述当前块的相邻块的帧内预测模式，构建所述当前块的帧内预测模式候选列表，
其中，所述帧内预测类型包括：基于与所述当前块相邻的帧内预测参考线的第一帧内预测类型、基于与所述当前块不相邻的帧内预测参考线的第二帧内预测类型，以及对其应用帧内子分区模式(ISP)的第三帧内预测类型，以及
其中，针对所述帧内预测类型为所述第一帧内预测类型的情况构建的所述帧内预测模式候选列表、针对所述帧内预测类型为所述第二帧内预测类型的情况构建的所述帧内预测模式候选列表，以及针对所述帧内预测类型为所述第三帧内预测类型的情况构建的所述帧内预测模式候选列表是相同的。
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US201962822735P | 2019-03-22 | 2019-03-22 | |
| US62/822,735 | 2019-03-22 | ||
| PCT/KR2020/003678 WO2020197155A1 (ko) | 2019-03-22 | 2020-03-18 | 영상 코딩 시스템에서 영상 디코딩 방법 및 그 장치, 영상 인코딩 방법 및 그 장치 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113812149A true CN113812149A (zh) | 2021-12-17 |
| CN113812149B CN113812149B (zh) | 2024-04-12 |
Family
ID=72610221
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202080028234.0A Active CN113812149B (zh) | 2019-03-22 | 2020-03-18 | 图像编译系统中的图像解码方法和设备以及图像编码方法和设备 |
Country Status (10)
| Country | Link |
|---|---|
| US (1) | US11973940B2 (zh) |
| EP (2) | EP4325863A3 (zh) |
| KR (2) | KR20230003254A (zh) |
| CN (1) | CN113812149B (zh) |
| CA (2) | CA3134688C (zh) |
| FI (1) | FI3944616T3 (zh) |
| MX (1) | MX2021011384A (zh) |
| PL (1) | PL3944616T3 (zh) |
| SI (1) | SI3944616T1 (zh) |
| WO (1) | WO2020197155A1 (zh) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113812149B (zh) * | 2019-03-22 | 2024-04-12 | Lg电子株式会社 | 图像编译系统中的图像解码方法和设备以及图像编码方法和设备 |
| US11575941B2 (en) * | 2021-03-23 | 2023-02-07 | Tencent America LLC | Parallel processing in video coding |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013153496A (ja) * | 2013-03-08 | 2013-08-08 | Jvc Kenwood Corp | 画像復号装置、画像復号方法、画像復号プログラム、受信装置、受信方法、及び受信プログラム |
| WO2017190288A1 (en) * | 2016-05-04 | 2017-11-09 | Microsoft Technology Licensing, Llc | Intra-picture prediction using non-adjacent reference lines of sample values |
| US20170332073A1 (en) * | 2014-11-28 | 2017-11-16 | Tongji University | Image Coding Method, Decoding Method, Coding Device and Decoding Device |
| CN107743705A (zh) * | 2015-06-18 | 2018-02-27 | 高通股份有限公司 | 帧内预测及帧内模式译码 |
| US20180262763A1 (en) * | 2017-03-10 | 2018-09-13 | Qualcomm Incorporated | Intra filtering flag in video coding |
| US20180332284A1 (en) * | 2017-05-09 | 2018-11-15 | Futurewei Technologies, Inc. | Intra-Prediction With Multiple Reference Lines |
| US20180367814A1 (en) * | 2017-06-15 | 2018-12-20 | Qualcomm Incorporated | Intra filtering applied together with transform processing in video coding |
| KR20180135836A (ko) * | 2011-12-14 | 2018-12-21 | 주식회사 스카이미디어테크 | 적중률이 높은 ｍｐｍ을 통한 영상의 부호화 방법 및 장치, 그리고 복호화 방법 및 장치 |
| KR20180136555A (ko) * | 2016-06-03 | 2018-12-24 | 엘지전자 주식회사 | 영상 코딩 시스템에서 인트라 예측 방법 및 장치 |
| CN109196867A (zh) * | 2016-06-08 | 2019-01-11 | 高通股份有限公司 | 在帧内预测中使用的参考线索引的隐式译码 |
| CN109479129A (zh) * | 2016-07-18 | 2019-03-15 | 韩国电子通信研究院 | 图像编码/解码方法和装置以及存储比特流的记录介质 |
Family Cites Families (16)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| BR112013003521B1 (pt) | 2011-07-18 | 2022-03-03 | Sun Patent Trust | Método de codificação de imagem, método de decodificação de imagem, aparelho de codificação de imagem, aparelho de decodificação de imagem e aparelho de codificação e decodificação de imagem |
| CN108293116A (zh) | 2015-11-24 | 2018-07-17 | 三星电子株式会社 | 视频解码方法及设备和视频编码方法及设备 |
| US10265680B2 (en) * | 2016-03-04 | 2019-04-23 | Fuji Xerox Co., Ltd. | Silica particle comprising a titania coating and method for producing the same |
| KR20170108367A (ko) | 2016-03-17 | 2017-09-27 | 세종대학교산학협력단 | 인트라 예측 기반의 비디오 신호 처리 방법 및 장치 |
| US10547854B2 (en) | 2016-05-13 | 2020-01-28 | Qualcomm Incorporated | Neighbor based signaling of intra prediction modes |
| US20190238840A1 (en) | 2016-09-30 | 2019-08-01 | Lg Electronics Inc. | Method for processing picture based on intra-prediction mode and apparatus for same |
| US10904567B2 (en) | 2016-12-28 | 2021-01-26 | Lg Electronics Inc. | Intra prediction mode-based image processing method, and apparatus therefor |
| WO2019078629A1 (ko) * | 2017-10-18 | 2019-04-25 | 한국전자통신연구원 | 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
| KR102595070B1 (ko) * | 2017-11-16 | 2023-10-27 | 인텔렉추얼디스커버리 주식회사 | 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
| WO2020060185A1 (ko) * | 2018-09-19 | 2020-03-26 | 한국전자통신연구원 | 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
| US10469845B1 (en) * | 2018-09-21 | 2019-11-05 | Tencent America, Llc | Method and apparatus for intra mode coding |
| CN117560509A (zh) * | 2019-03-04 | 2024-02-13 | 北京字节跳动网络技术有限公司 | 视频处理中滤波信息的两级信令 |
| CN113812149B (zh) * | 2019-03-22 | 2024-04-12 | Lg电子株式会社 | 图像编译系统中的图像解码方法和设备以及图像编码方法和设备 |
| US11057619B2 (en) * | 2019-03-23 | 2021-07-06 | Lg Electronics Inc. | Image coding method and apparatus based on intra prediction using MPM list |
| US11375219B2 (en) * | 2019-09-24 | 2022-06-28 | Tencent America LLC | Coding method and system with improved dynamic internal bit depth |
| KR20220080107A (ko) * | 2019-10-23 | 2022-06-14 | 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 | 참조 픽처 리샘플링을 위한 시그널링 |
-
2020
- 2020-03-18 CN CN202080028234.0A patent/CN113812149B/zh active Active
- 2020-03-18 PL PL20778840.7T patent/PL3944616T3/pl unknown
- 2020-03-18 MX MX2021011384A patent/MX2021011384A/es unknown
- 2020-03-18 US US17/442,046 patent/US11973940B2/en active Active
- 2020-03-18 SI SI202030378T patent/SI3944616T1/sl unknown
- 2020-03-18 EP EP23220565.8A patent/EP4325863A3/en active Pending
- 2020-03-18 KR KR1020227042533A patent/KR20230003254A/ko active Application Filing
- 2020-03-18 EP EP20778840.7A patent/EP3944616B1/en active Active
- 2020-03-18 KR KR1020217030106A patent/KR102476277B1/ko active IP Right Grant
- 2020-03-18 CA CA3134688A patent/CA3134688C/en active Active
- 2020-03-18 CA CA3229435A patent/CA3229435A1/en active Pending
- 2020-03-18 WO PCT/KR2020/003678 patent/WO2020197155A1/ko unknown
- 2020-03-18 FI FIEP20778840.7T patent/FI3944616T3/fi active
Patent Citations (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20180135836A (ko) * | 2011-12-14 | 2018-12-21 | 주식회사 스카이미디어테크 | 적중률이 높은 ｍｐｍ을 통한 영상의 부호화 방법 및 장치, 그리고 복호화 방법 및 장치 |
| JP2013153496A (ja) * | 2013-03-08 | 2013-08-08 | Jvc Kenwood Corp | 画像復号装置、画像復号方法、画像復号プログラム、受信装置、受信方法、及び受信プログラム |
| US20170332073A1 (en) * | 2014-11-28 | 2017-11-16 | Tongji University | Image Coding Method, Decoding Method, Coding Device and Decoding Device |
| CN107743705A (zh) * | 2015-06-18 | 2018-02-27 | 高通股份有限公司 | 帧内预测及帧内模式译码 |
| WO2017190288A1 (en) * | 2016-05-04 | 2017-11-09 | Microsoft Technology Licensing, Llc | Intra-picture prediction using non-adjacent reference lines of sample values |
| CN109076241A (zh) * | 2016-05-04 | 2018-12-21 | 微软技术许可有限责任公司 | 利用样本值的非相邻参考线进行帧内图片预测 |
| KR20180136555A (ko) * | 2016-06-03 | 2018-12-24 | 엘지전자 주식회사 | 영상 코딩 시스템에서 인트라 예측 방법 및 장치 |
| CN109196867A (zh) * | 2016-06-08 | 2019-01-11 | 高通股份有限公司 | 在帧内预测中使用的参考线索引的隐式译码 |
| CN109479129A (zh) * | 2016-07-18 | 2019-03-15 | 韩国电子通信研究院 | 图像编码/解码方法和装置以及存储比特流的记录介质 |
| US20180262763A1 (en) * | 2017-03-10 | 2018-09-13 | Qualcomm Incorporated | Intra filtering flag in video coding |
| US20180332284A1 (en) * | 2017-05-09 | 2018-11-15 | Futurewei Technologies, Inc. | Intra-Prediction With Multiple Reference Lines |
| US20180367814A1 (en) * | 2017-06-15 | 2018-12-20 | Qualcomm Incorporated | Intra filtering applied together with transform processing in video coding |
Non-Patent Citations (3)
| Title |
|---|
| JIN HEO: "CE3-3.1.2:Harmonization on MPM list", Retrieved from the Internet <URL:JVET-NO451-v3, Joint Video Experts Team(JVET)of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 14th Meeting:Geneva, <http://phenix.int-evry.fr/jvet>> * |
| SANTIAGO DE-LUXAN-HERNANDEZ: "CE3:Intra Sub-Partitions Coding Mode (Tests 1.1.1 and 1.1.2)", Retrieved from the Internet <URL:NANDEZ云，`CE3:Intra Sub-Partitions Coding Mode (Tests 1.1.1 and 1.1.2)`, JVET-M0102-v3, Joint Video Experts Team(JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 1113th Meet ing:Marrakech, MA, <http://phenix.int-evry.fr/jvet>> * |
| TIAN RUI ET AL: "Adaptive intra mode decision for HEVC based on texture characteristics and multiple reference lines", MULTIMEDIA TOOLS AND APPLICATIONS, KLUWER ACADEMIC PUBLISHERS, BOSTON, US VOL.78, NO.1, 23 APRIL 2018(2018-04-23) , PAGES 289-310, XP036695257, ISSN:1380-7501, DOI: 10.1007/S11042-018-6001-X [RETRIEVED ON 2018-04-23], pages 289 - 310 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CA3229435A1 (en) | 2020-10-01 |
| EP3944616A4 (en) | 2023-01-04 |
| SI3944616T1 (sl) | 2024-04-30 |
| KR102476277B1 (ko) | 2022-12-09 |
| US20220191478A1 (en) | 2022-06-16 |
| KR20210135258A (ko) | 2021-11-12 |
| CN113812149B (zh) | 2024-04-12 |
| FI3944616T3 (fi) | 2024-03-12 |
| EP3944616B1 (en) | 2024-02-07 |
| EP4325863A2 (en) | 2024-02-21 |
| MX2021011384A (es) | 2021-11-04 |
| CA3134688C (en) | 2024-03-05 |
| US11973940B2 (en) | 2024-04-30 |
| CA3134688A1 (en) | 2020-10-01 |
| EP4325863A3 (en) | 2024-04-03 |
| WO2020197155A1 (ko) | 2020-10-01 |
| KR20230003254A (ko) | 2023-01-05 |
| EP3944616A1 (en) | 2022-01-26 |
| PL3944616T3 (pl) | 2024-05-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN112806003B (zh) | 使用mpm列表的基于帧内预测的图像编码方法及其装置 | |
| US11601640B2 (en) | Image coding method using history-based motion information and apparatus for the same | |
| CN111448800B (zh) | 在图像编码系统中使用仿射mvp候选列表的基于仿射运动预测的图像解码方法及设备 | |
| US11575891B2 (en) | Intra prediction method and device based on intra sub-partitions in image coding system | |
| US20220132102A1 (en) | Mpm list-based intra prediction method and device | |
| JP7157152B2 (ja) | 画像コーディングシステムにおけるサブブロック単位の動き予測に基づく画像デコーディング方法及び装置 | |
| JP2023021354A (ja) | 変換インデックスを利用する映像コーディング | |
| US11849151B2 (en) | Syntax design method and apparatus for performing coding by using syntax | |
| US20220132109A1 (en) | Image decoding method and apparatus using intra prediction in image coding system | |
| CN113273192A (zh) | 使用mpm列表的基于帧内预测的视频编码方法及装置 | |
| CN113767625A (zh) | 基于mpm列表的帧内预测方法及其设备 | |
| CN114930816A (zh) | 对图像进行编译的装置和方法 | |
| US11902572B2 (en) | Intra prediction-based image coding method and apparatus using unified MPM list | |
| CN113812149B (zh) | 图像编译系统中的图像解码方法和设备以及图像编码方法和设备 | |
| US20220124309A1 (en) | Unified mpm list-based intra prediction | |
| CN114600451A (zh) | 基于矩阵帧内预测的图像编码设备和方法 | |
| CN112840649A (zh) | 图像编码系统中通过使用块分割对图像解码的方法及其装置 | |
| RU2780018C1 (ru) | Способ и устройство декодирования изображения и способ и устройство кодирования изображения в системе кодирования изображения | |
| KR20220085819A (ko) | 영상 디코딩 방법 및 그 장치 | |
| CN114586354A (zh) | 基于矩阵的帧内预测设备和方法 | |
| CN113273210A (zh) | 用于编译关于合并数据的信息的方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |