CN111602400B - 用于色度分量的帧内预测编码/解码方法和装置 - Google Patents

Abstract

公开了一种使用颜色分量之间的相关性来执行色度分量的帧内预测的图像解码方法。此处，使用颜色分量之间的相关性来执行色度分量的帧内预测的图像解码方法包括以下步骤：检查比特流中的图像数据和预测模式；根据重建的预测模式来生成预测块；根据当前块的尺寸和重建的预测模式来确定补偿设置；根据所确定的补偿设置来补偿预测块；以及通过将重建的图像数据与预测块相加来重建当前块。

Description

用于色度分量的帧内预测编码/解码方法和装置

技术领域

本发明涉及用于色度分量的图像编码/解码方法和装置。更特别地，本发明涉及用于基于颜色分量之间的相关性信息来生成预测块并且通过对所生成的预测块应用校正来减少块之间的劣化的方法和装置。

背景技术

随着因特网和便携式终端的普及以及信息通信技术的发展，多媒体数据的使用正在迅速增加。因此，为了通过各种系统中的图像预测来执行各种服务或任务，提高图像处理系统的性能和效率的需求已经显著增加，但能够响应于该气氛的研究和开发结果不足。

如以上所述，在常规图像编码和解码方法和装置中，需要提高图像处理——特别是图像编码或图像解码——的性能。

发明内容

技术问题

用于解决以上问题的本发明的目的是：提供用于通过利用颜色分量之间的相关性来执行帧内预测的图像编码/解码方法和装置。

技术解决方案

根据本发明的实施方式的用于实现以上目的的对图像进行解码的方法可以包括：检查比特流中的图像数据和预测模式；根据恢复的预测模式来生成预测块；根据当前块的尺寸和所恢复的预测模式来确定校正设置；根据所确定的校正设置来补偿预测块；以及通过将重建的图像数据与预测块相加来恢复当前块。

在本文中，确定校正设置的步骤还可以包括：根据当前块的尺寸和预测模式的类型来确定是否执行校正。

在本文中，确定校正设置的步骤还可以包括：根据当前块的尺寸和预测模式的类型来确定要校正的区域。

有益效果

如以上所述，当使用根据本发明的用于通过利用颜色分量之间的相关性来执行帧内预测的方法时，预测准确度高并且可以提高编码性能。

此外，由于对预测块的边界区域执行校正，因此具有可以减少块劣化的优点。

附图说明

图1是根据本发明的实施方式的图像编码和解码系统的概念图。

图2是根据本发明的实施方式的图像编码设备的框图。

图3是根据本发明的实施方式的图像解码设备的框图。

图4是示出根据本发明的实施方式的帧内预测模式的示例性图。

图5是示出根据本发明的实施方式的用于定向模式和非定向模式的帧内预测的概念图。

图6是示出根据本发明的实施方式的关于颜色复制模式的帧内预测的概念图。

图7是示出根据本发明的实施方式的与颜色复制模式有关的每个颜色空间的对应块和与该对应块相邻的区域的示例性图。

图8是用于说明根据本发明的实施方式的用于帧内预测的参考像素配置的示例性图。

图9是示出根据本发明的实施方式的与用于帧内预测的目标块相邻的块的概念图。

图10是用于说明根据本发明的实施方式的图像编码方法的实现方式示例的流程图。

图11是用于说明根据本发明的实施方式的图像解码方法的实现方式示例的流程图。

图12是根据本发明的实施方式的用于颜色复制模式的详细设置的示例性图。

图13是示出根据本发明的实施方式的当前块中的要校正的像素的各种配置示例的概念图。

图14是用于说明根据本发明的实施方式的在颜色复制模式下执行校正的情况的示例性图。

图15是用于说明根据本发明的实施方式的在颜色复制模式下执行校正的情况的示例性图。

本发明的最佳实施方式

根据本发明的实施方式的用于实现以上目的的对图像进行解码的方法可以包括：检查比特流中的图像数据和预测模式；根据恢复的预测模式来生成预测块；根据当前块的尺寸和所恢复的预测模式来确定校正设置；根据所确定的校正设置来补偿预测块；以及通过将重建的图像数据与预测块相加来恢复当前块。

在本文中，确定校正设置的步骤还可以包括：根据当前块的尺寸和预测模式的类型来确定是否执行校正。

在本文中，确定校正设置的步骤还可以包括：根据当前块的尺寸和预测模式的类型来确定要校正的区域。

本发明的具体实施方式

本发明可以应用于各种改变并且可以具有各种实施方式，并且将在附图中示出并且详细描述特定的实施方式。然而，这并不旨在将本发明限制为特定的实施方式，而是应被理解为包括本发明的构思和技术范围中包括的所有修改、等同物和替代物。

可以使用诸如第一、第二、A和B的术语来描述各种部件，但是这些部件不应受这些术语的限制。这些术语仅用于将一个部件与其他部件进行区分的目的。例如，在不脱离本发明的范围的情况下，第一部件可以被称为第二部件，并且类似地，第二部件可以被称为第一部件。术语“和/或”包括多个相关描述项的组合或者多个相关描述项中的任何一个。

当元件被称为“链接”或“连接”至另一元件时，该元件可以直接链接或连接至其他部件，但是应当理解，中间可以存在其他部件。另一方面，当部件被称为“直接链接”或“直接连接”至另一部件时，应当理解，中间没有其他部件存在。

本发明中使用的术语仅用于描述特定的实施方式，而并不旨在限制本发明。除非上下文另外清楚地指出，否则单数表达包括复数表达。在本发明中，诸如“包括”或“具有”的术语旨在指示在说明书中存在被描述的特征、数字、步骤、操作、部件、部分或其组合，并且应当理解，一个或更多个其他特征或数字、步骤、动作、部件、部分或其组合不被预先排除。

除非另外限定，否则本文所使用的所有术语——包括技术或科学术语——均与本发明所属领域的技术人员通常理解的含义相同。诸如在常用字典中限定的那些术语的术语应被解释为与相关技术的上下文中的含义一致，并且除非在本发明中明确限定，否则不应被解释为理想的或过于正式的含义。

通常，可以根据图像的颜色格式来配置一个或更多个颜色空间。根据颜色格式，颜色空间可以由具有特定尺寸的一个或更多个图片或具有不同尺寸的一个或更多个图片组成。例如，在YCbCr颜色配置中可以支持诸如4:4:4、4:2:2、4:2:0和单色(仅由Y组成)的颜色格式。例如，在YCbCr为4:2:0的情况下，颜色空间可以由一个亮度分量(在该示例中为Y)和两个色度分量(在该示例中为Cb/Cr)组成。在本文中，色度分量和亮度分量的组成比率可以具有1:2的水平和垂直比率。例如，在4:4:4的情况下，它的水平和垂直纵横比可能相同。当如以上示例中那样被配置为一个或更多个颜色空间时，可以将图片划分成每个颜色空间。

可以根据图像类型(例如，图片类型、切片类型、图块类型等)将图像分类成I、P、B等。在本文中，I图像类型可以是指不使用参考图片进行自解码/解码的图像，P图像类型可以是指使用参考图片进行编码/解码但仅允许前向预测的图像，而B图像类型可以是指通过使用参考图片执行编码/解码来允许前向/后向预测的图像。此外，取决于编码/解码设置，可以对一些类型进行组合(组合P和B)，或者可以支持不同配置的图像类型。

图1是根据本发明的实施方式的图像编码和解码系统的概念图。

参照图1，图像编码设备(105)和解码设备(100)可以是个人计算机(PC)、笔记本计算机、个人数字助理(PDA)、便携式多媒体播放器(PMP)、便携式游戏机(PSP)、无线通信终端、诸如智能电话或电视的用户终端、或诸如应用服务器和服务服务器的服务器终端，并且可以包括各种装置，所述各种装置具有：用于与各种设备进行通信或有线和无线通信的诸如通信调制解调器的通信设备、用于存储用于帧间或帧内预测的各种程序和数据以对图像进行编码或解码的存储器(120，125)、用于通过执行程序进行计算和控制的处理器(110，115)等。

此外，可以将由图像编码设备(105)编码为比特流的图像通过因特网、短程无线通信网络、无线LAN网络、无线宽带网络或移动通信网络或通过诸如线缆或通用串行总线(USB)的各种通信接口实时或非实时地发送至图像解码设备(100)，并且可以将该图像解码、重建为图像，并且在图像解码设备(100)中再现。此外，可以通过计算机可读记录介质将由图像编码设备(105)编码成比特流的图像从图像编码设备(105)发送至图像解码设备(100)。

上述图像编码设备和图像解码设备可以是单独的设备，但是根据实现方式可以被制成一个图像编码/解码设备。在这种情况下，作为与图像解码设备的一些部件基本相同的技术要素，图像编码设备的一些部件可以被实现为包括与图像解码设备的一些部件至少相同的结构或执行至少相同的功能。

因此，在以下技术要素及其操作原理的详细描述中，将省略对应技术要素的重复描述。此外，由于图像解码设备对应于将由图像编码设备执行的图像编码方法应用于解码的计算设备，因此以下描述将集中于图像编码设备。

计算设备可以包括存储器和处理器，存储器存储实现图像编码方法和/或图像解码方法的程序或软件模块，处理器连接至存储器并且执行程序。在本文中，分别地，图像编码设备可以被称为编码器，并且图像解码设备可以被称为解码器。

图2是根据本发明的实施方式的图像编码设备的框图。

参照图2，图像编码设备(20)可以包括预测单元(200)、减法单元(205)、变换单元(210)、量化单元(215)、逆量化单元(220)和逆变换单元(225)、加法器(230)、滤波器单元(235)、编码图片缓冲器(240)和熵编码器(245)。

预测单元(200)可以使用作为软件模块的预测模块来实现，并且可以通过针对要编码的块使用帧内预测方法或帧间预测方法来生成预测块。预测单元(200)可以通过预测当前要在图像中编码的当前块来生成预测块。换言之，预测单元(200)可以生成以下预测块，该预测块具有通过根据帧内预测或帧间预测对要在图像中编码的当前块的每个像素的像素值进行预测而生成的每个像素的预测像素值(预测的像素值)。此外，预测单元(200)可以将生成预测块所需的信息(例如关于诸如帧内预测模式或帧间预测模式的预测模式的信息)发送至编码单元，以使编码单元对关于预测模式的信息进行编码。在本文中，可以根据编码/解码设置来确定执行预测的处理单元以及确定预测方法和特定内容的处理单元。例如，在预测单元中确定预测方法、预测模式等，并且可以在变换单元中执行预测。

在帧间预测单元中，可以根据运动预测方法来划分平移运动模型和非平移运动模型。在平移运动模型的情况下，可以仅考虑平行运动来执行预测，而在非平移运动模型的情况下，可以考虑诸如旋转、透视和放大/缩小以及平行运动的运动来执行预测。假设单向预测，平移运动模型可能需要一个运动矢量，但非平移运动模型可能需要一个或更多个运动矢量。在非平移运动模型的情况下，每个运动矢量可以是应用于当前块的预设位置(例如，当前块的左上顶点和右上顶点)的信息，并且可以以像素或子块为单位来获取当前块的要通过对应的运动矢量预测的区域的位置。在帧间预测单元中，可以共同地应用以下描述的一些处理，并且可以根据运动模型单独地应用一些其他处理。

帧间预测单元可以包括参考图片构造单元、运动估计单元、运动补偿单元、运动信息确定单元和运动信息编码单元。参考图片构造单元可以将在当前图片之前或之后编码的图片包括在参考图片列表(L0，L1)中。可以从参考图片列表中包括的参考图片获得预测块，并且还可以根据编码设置将当前图片配置为参考图片并且将当前图片包括在参考图片列表中的至少一个中。

在帧间预测单元中，参考图片构造单元可以包括参考图片内插单元，并且可以根据内插精度对十进制像素单位执行内插处理。例如，可以将8抽头的基于DCT的内插滤波器应用于亮度分量，并且可以将4抽头的基于DCT的内插滤波器应用于色度分量。

在帧间预测单元中，运动估计单元可以是通过参考图片搜索与当前块具有高相关性的块的处理，并且可以使用诸如基于完全搜索的块匹配算法(FBMA)和三步搜索(TSS)的各种方法。此外，运动补偿单元是指通过运动估计处理来获得预测块的处理。

在帧间预测单元中，运动信息确定单元可以执行用于选择当前块的最佳运动信息的处理，并且可以通过诸如跳过模式、合并模式和竞争模式的运动信息编码模式来对运动信息进行编码。可以通过根据运动模型组合支持的模式来配置模式，并且跳过模式(平移)、跳过模式(除平移之外)、合并模式(平移)，合并模式(除平移之外)、竞争模式(平移)和竞争模式(除平移之外)可以作为模式的示例。根据编码设置，模式中的一些可以包括在候选组中。

运动信息编码模式可以从至少一个候选块获得当前块的运动信息预测值(运动矢量、参考图片、预测方向等)，并且当支持两个或更多个候选块时，可能存在最佳候选选择信息。在跳过模式(无残差信号)和合并模式(存在残差信号)中，可以将预测值用作当前块的运动信息，而在竞争模式中，可能存在当前块的运动信息与预测值之间的差信息。

可以根据运动信息编码模式来自适应地并且不同地构造当前块的运动信息预测值的候选组。在空间上与当前块相邻的块(例如，左、上、左上、右上、左下的块等)的运动信息可以被包括在候选组中，并且在时间上与当前块相邻的块的运动信息可以被包括在候选组中，并且空间候选和时间候选的混合运动信息可以被包括在候选组中。

时间上相邻的块可以包括与当前块对应的另一图像中的块，并且可以是指位于该块的左、右、上、下、左上、右上、左下、右下的块等中的块。混合运动信息可以是指通过空间上相邻的块的运动信息和时间上相邻的块的运动信息获得作为平均值、中值等的信息。

可以存在用于构造运动信息预测值的候选组的优先级顺序。可以根据优先级顺序来确定包括在预测值的候选组的配置中的顺序，并且可以在根据优先顺序填充候选组的数量(根据运动信息编码模式确定的)时，完成候选组的配置。在本文中，可以按照空间上相邻的块的运动信息、时间上相邻的块的运动信息以及空间候选和时间候选的混合运动信息的顺序来确定优先级顺序，但是其他修改也是可能的。

例如，在空间上相邻的块中，可以按左-上-右上-左下-左上等的块的顺序将运动信息包括在候选组中，并且在时间上相邻的块中，可以按右下-中-右-下等的顺序将运动信息包括在候选组中。

减法单元(205)可以通过从当前块减去预测块来生成残差块。换言之，减法单元(205)可以通过计算要编码的当前块的每个像素的像素值与通过预测单元生成的预测块的每个像素的预测像素值之间的差来生成残差块，该残差块是呈块形式的残差信号。此外，减法单元(205)可以根据除通过稍后描述的块划分单元获得的块单元之外的单元来生成残差块。

变换单元(210)可以将属于空间域的信号变换成属于频域的信号，并且通过变换处理获得的信号被称为变换系数。例如，可以对从减法单元接收到的具有残差信号的残差块进行变换以获得具有变换系数的变换块，并且根据编码设置来确定输入信号，该输入信号不限于残差信号。

变换单元可以使用诸如哈达玛变换(Hadamard Transform)、离散正弦变换(基于DST的变换)和离散余弦变换(基于DCT的变换)的变换技术来变换残差块。然而，本发明可以不限于此，并且可以使用改进和修改本发明的各种转换技术。

例如，可以支持变换技术中的至少一种，并且在每种变换技术中可以支持至少一种详细的变换技术。在这种情况下，详细的变换技术可以是其中在每个变换技术中一些基本矢量被不同地配置的变换技术。

例如，在DCT的情况下，可以支持DCT-I至DCT-VIII中的一种或更多种详细的变换技术，并且在DST的情况下，可以支持DST-I至DST-VIII中的一种或更多种详细的变换技术。一些详细的变换技术可以被配置成配置用于变换技术的候选组。例如，可以将DCT-II、DCT-VIII和DST-VII配置为执行变换的变换技术的候选组。

可以在水平/垂直方向上执行变换。例如，可以通过执行总的二维变换来将空间域中的像素值转换到频域中，其中，使用DCT-II的变换技术在水平方向上执行一维变换并且使用DST-VIII的变换技术在垂直方向执行一维变换。

可以使用一种固定的变换技术来执行变换，或者可以通过根据编码/解码设置自适应地选择变换技术来执行变换。在本文中，在自适应情况下，可以使用显式或隐式方法来选择变换技术。在显式的情况下，应用于水平方向和垂直方向的每个变换技术选择信息或变换技术集选择信息可以发生在诸如块的单元中。在隐式情况下，可以根据图像类型(I/P/B)、颜色分量、块尺寸、形状和帧内预测模式来限定编码设置，并且可以相应地选择预定义的变换技术。

此外，取决于编码设置，可以省略变换中的一些。这意味着可以显式或隐式地省略水平/垂直单元中的一个或更多个。

此外，变换单元可以将生成变换块所需的信息发送至编码单元以对该信息进行编码，将经编码信息记录到比特流，并且将其发送至解码器，并且解码器的解码单元可以解析发送的信息，并且在逆变换的处理中使用该信息。

量化单元(215)可以对输入信号进行量化，并且通过量化处理获得的信号被称为量化系数。例如，可以通过对具有从变换单元接收到的残差变换系数的残差块进行量化来获得具有量化系数的量化块，并且根据编码设置来确定输入信号，该编码设置不限于残差变换系数。

量化单元可以使用诸如死区均匀阈值量化(Dead Zone Uniform ThresholdQuantization)、量化加权矩阵等的量化技术来对变换的残差块进行量化，但是该量化技术不限于此，并且可以使用对其进行改进和修改的各种量化技术。

根据编码设置，可以省略量化处理。例如，根据编码设置(例如，量化参数为0，即无损压缩环境)，可以省略量化处理(包括其逆处理)。作为另一示例，如果根据图像的特性未实现通过量化的压缩性能，则可以省略量化处理。在这种情况下，在量化块(M×N)中省略了量化处理的区域可以是整个区域或部分区域(M/2×N/2、M×N/2、M/2×N等)，并且可以隐式或显式地确定量化省略选择信息。

量化单元可以将生成量化块所需的信息发送至编码单元以对该信息进行编码，将经编码信息记录到比特流，并且将其发送至解码器，并且解码器的解码单元可以解析所发送的信息并且在逆量化的处理中使用它。

尽管已经在通过变换单元和量化单元对残差块进行变换和量化的假设下描述了以上示例，但是可以通过对残差块的残差信号进行变换来生成具有变换系数的残差块，并且可以不执行量化处理。此外，不仅可以在不将残差信号变换成变换系数的情况下执行量化处理，而且还可以不执行变换处理和量化处理两者。这可以根据编码器设置来确定。

逆量化单元(220)对由量化单元(215)量化的残差块进行逆量化。即，逆量化单元(220)对量化频率系数序列进行逆量化，以生成具有频率系数的残差块。

逆变换单元(225)对由逆量化单元(220)量化的残差块进行逆变换。即，逆变换单元(225)对逆量化的残差块的频率系数进行逆变换，以生成具有像素值的残差块，即，重建的残差块。在本文中，逆变换单元(225)可以相反地使用由变换单元(210)使用的变换方法来执行逆变换。

加法器(230)通过将由预测单元(200)预测的预测块和由逆变换单元(225)恢复的残差块相加来恢复当前块。重建的当前块作为参考图片被存储在编码图片缓冲器(240)中，并且可以在将来对下一个块、另一个块或另一个图片进行编码时用作参考图片。

滤波器单元(235)可以包括一个或更多个后处理滤波器处理，例如解块滤波器、样本自适应偏移(SAO)和自适应环路滤波器(ALF)。解块滤波器可以去除由重建的图片中的块之间的边界引起的块失真。ALF可以基于通过将经由解块滤波器对块滤波之后的重建图像与原始图像进行比较而获得的值，来执行滤波。SAO可以针对被应用解块滤波器的残差块以像素为单位恢复与原始图像的偏移差。这些后处理滤波器可以应用于重建的图片或块。

编码图片缓冲器(240)可以存储通过滤波器单元(235)重建的块或图片。可以将存储在编码图片缓冲器(240)中的重建块或图片提供给执行帧内预测或帧间预测的预测单元(200)。

熵编码单元(245)根据各种扫描方法来扫描所生成的量化频率系数序列以生成量化系数序列，并且通过使用熵编码技术等进行编码来将该量化系数序列输出。可以将扫描图案设置为各种图案之一，例如锯齿形、对角线形和光栅形。此外，可以生成并输出包括从比特流中的每个分量发送的编码信息的编码数据。

图3是根据本发明的实施方式的图像解码设备的框图。

参照图3，图像解码设备(30)可以被配置成包括熵解码单元(305)、预测单元(310)、逆量化单元(315)、逆变换单元(320)、加法器/减法器(325)、滤波器(330)和解码图片缓冲器(335)。

此外，预测单元(310)可以再次包括帧内预测模块和帧间预测模块。

首先，当接收到从图像编码设备(20)发送的图像比特流时，可以将其传送至熵解码单元(305)。

熵解码单元(305)可以对比特流进行解码，并且对包括量化系数的解码数据和发送至每个部件的解码信息进行解码。

预测单元(310)可以基于从熵解码单元(305)发送的数据来生成预测块。在本文中，基于存储在解码图片缓冲器(335)中的参考图像，可以构造使用默认配置技术的参考图片列表。

帧间预测单元可以包括参考图片构造单元、运动补偿单元和运动信息解码单元，并且一些可以执行与编码器相同的处理，并且一些可以执行逆处理。

逆量化单元(315)可以对从比特流提供并且由熵解码单元(305)解码的经量化的变换系数进行逆量化。

逆变换单元(320)可以通过应用逆DCT、逆整数变换或类似的逆变换技术以变换系数，来生成残差块。

在这种情况下，逆量化单元(315)和逆变换单元(320)可以逆向地执行由上述图像编码设备(20)的变换单元(210)和量化单元(215)执行的处理，并且可以以各种方式实现。例如，可以使用与变换单元(210)和量化单元(215)共享的相同处理和逆变换，并且可以使用来自图像编码设备(20)的关于变换和量化处理的信息(例如，变换尺寸和变换形状、量化类型等)来逆向地执行变换和量化处理。

可以将经历了逆量化和逆变换处理的残差块与由预测单元(310)得出的预测块相加，以生成重建的图像块。加法可以由加法器/减法器单元(325)来执行。

针对重建的图像块，滤波器(330)可以在必要时应用解块滤波器以去除块(blocking)现象，并且还可以在解码处理之前和之后使用附加的环路滤波器以改善视频质量。

经重建和滤波的图像块可以被存储在解码图片缓冲器(335)中。

尽管在附图中未示出，但是图像编码/解码设备还可以包括图片划分单元和块划分单元。

图片划分单元可以将图片划分(或分割)成至少一个处理单元，例如颜色空间(例如，YCbCr、RGB、XYZ等)、图块、切片或基本编码单元(或最大编码单元)等。块划分单元可将基本编码单元划分成至少一个处理单元(例如，编码、预测、变换、量化、熵和环路内滤波器单元)。

可以通过以规则的间隔在水平和垂直方向上划分图片来获得基本编码单元。基于此，可以执行对图块、切片等的划分，但是可以不限于此。诸如图块和切片的划分单元可以由基本编码块的整数倍组成，但是位于图像边界处的划分单元中可能发生异常。为此，可以发生对基本编码块尺寸的调整。

例如，图片可以在被划分为基本编码单元之后被划分成划分单元，或者图片可以在被划分为划分单元之后被划分成基本编码单元。在本发明中，假设每个单元的分割和划分顺序是前者，但是可以不限于此，并且取决于编码/解码设置，后者也是可能的。在后者的情况下，基本编码单元的尺寸可以根据划分单元(图块等)被变换成自适应情况。即，这意味着可以支持对于每个划分单元具有不同尺寸的基本编码块。

在本发明中，将图片被分割成基本编码单元的情况设置为基本设置，并且将描述稍后描述的示例。默认设置可能意味着图片未被划分成图块或切片，或者图片是一个图块或一个切片。然而，如上所述，当首先基于获得的单元将每个划分单元(图块、切片等)分割和划分成基本编码单元(即，每个划分单元不是基本编码单元的整数倍等)时，应当理解，可以相同或改变地来应用以下描述的各种实施方式。

在划分单元中的切片的情况下，其可以由根据扫描图案的一束至少一个连续块组成，并且在图块的情况下，其可以由呈矩形形状的一束空间上相邻的块组成，并且可以通过对所支持的其他附加单元的限定来配置。切片和图块可以是出于并行处理等目的而被支持的划分单元，并且为此，划分单元之间的参考可以受到限制(即，不能被参考)。

在这种情况下，可以根据编码/解码设置将切片和图块划分成多个单元。

例如，一些单元<A>可以是包括影响编码/解码处理的设置信息的单元(即，包括图块头部或切片头部)，并且一些单元<B>可以是不包括设置信息的单元。替选地，一些单元<A>可以是在编码/解码处理中不能参考其他单元的单元，并且一些单元<B>可以是可以参考其他单元的单元。此外，一些单元<A>可以具有包括其他单元<B>的垂直关系，或者一些单元<A>可以与其他单元<B>具有等同关系。

在本文中，A和B可以是切片和图块(或图块和切片)。替选地，A和B可以由切片和图块中之一组成。例如，A可以是切片/图块<类型1>，并且B可以是切片/图块<类型2>。

在本文中，类型1和类型2可以分别是一个切片或图块。替选地，类型1(包括类型2)可以是多个切片或图块(一组切片或一组图块)，并且类型2可以是单个切片或图块。

如上所述，在假设图片由一个切片或图块组成的情况下描述了本发明，但是当出现两个或更多个划分单元时，以上描述可以应用于以下描述的实施方式并且在以下描述的实施方式中被理解。此外，A和B是划分单元可以具有的特性的示例，并且每个示例的A和B被混合的示例也是可能的。

同时，可以通过块划分单元将图片划分成不同尺寸的块。在本文中，块可以由根据颜色格式的一个或更多个块(例如，一个亮度块和两个色度块等)组成，并且可以根据颜色格式来确定块的尺寸。在下文中，为了便于描述，将基于根据一个颜色分量(亮度分量)的块进行描述。

应当理解，下面描述的内容针对一个颜色分量，但是该内容可以与根据颜色格式的比率成比例地应用于其他颜色分量(例如，在YCbCr为4:2:0的情况下，亮度分量和色度分量的水平长度与垂直长度的比为2:1)。此外，尽管可以取决于其他颜色分量(例如，取决于Cb/Cr中的Y的块划分结果)来执行块划分，但是应当理解，对于每个颜色分量可以进行独立的块划分。此外，尽管可以使用一个通用的块划分设置(考虑与长度比率的比例)，但是有必要考虑和理解根据颜色分量来使用各个块划分设置。

块可以具有诸如M×N的可变尺寸(M和N是诸如4、8、16、32、64和128的整数)，并且可以是用于执行编码的单元(编码块)。详细地，该块可以是作为预测、变换、量化和熵编码的基础的单元，并且在本发明中通常被称为块。在本文中，块不是仅指正方形的块，而是可以理解为包括诸如三角形和圆形的各种类型的区域的宽泛概念，并且将主要在正方形的情况下描述本发明。

可以关于图像编码设备和解码设备的每个部件来设置块划分单元，并且可以通过该处理来确定块的尺寸和形状。在本文中，可以根据部件不同地限定要设置的块，并且预测单元中的预测块、变换单元中的变换块和量化单元中的量化块可以与此对应。然而，本发明可以不限于此，并且可以另外限定根据其他部件的块单元。在本发明中，假设在每个部件中输入和输出是块(即，矩形)，但是在一些部件中，其他形状(例如，正方形、三角形等)的输入/输出也是可能的。

可以从较高的单元确定块划分单元的初始(或起始)块的尺寸和形状。例如，在编码块的情况下，基本编码块可以是初始块，并且在预测块的情况下，编码块可以是初始块。此外，在变换块的情况下，编码块或预测块可以是初始块，并且这可以根据编码/解码设置来确定。

例如，如果编码模式是帧内的，则预测块可以是变换块的较高单元，并且如果编码模式是帧间的，则预测块可以是独立于变换块的单元。作为划分的起始单元的初始块可以被划分成小尺寸的块，并且如果确定了根据块的划分的最佳尺寸和形状，则该块可以被确定为较低单元的初始块。作为划分的起始单元的初始块可以被考虑为较高单元的初始块。在本文中，较高单元可以是编码块，并且较低单元可以是预测块或变换块，但是不限于此。当如以上示例中那样确定较低单元的初始块时，可以如较高单元中那样执行用于找到块的最佳尺寸和形状的划分处理。

总之，块划分单元可以将基本编码单元(或最大编码单元)划分成至少一个编码单元(或较低编码单元)。此外，编码单元可以被划分成至少一个预测单元，并且可以被划分成至少一个变换单元。编码单元可以被划分成至少一个编码块，该编码块可以被划分成至少一个预测块，并且被划分成至少一个变换块。预测单元可以被划分成至少一个预测块，并且变换单元可以被划分成至少一个变换块。

在这种情况下，一些块可以与其他块组合以执行一个划分处理。例如，当将编码块和变换块组合为一个单元时，执行划分处理以获得最佳块尺寸和形状，其不仅可以是编码块的最佳尺寸和形状，而且还可以是变换块的最佳尺寸和形状。替选地，可以将编码块和变换块组合成一个单元，可以将预测块和变换块组合成一个单元，并且可以将编码块、预测块和变换块组合成一个单元。此外，其他块的组合也是可能的。

如上所述，当找到块的最佳尺寸和形状时，可以生成模式信息(例如，划分信息等)。模式信息可以与由块所属于的部件生成的信息(例如，与预测有关的信息、与变换有关的信息等)一起存储在比特流中，并且发送给解码器，并且可以在解码器中以相同级别的单位被解析，并且被用于图像解码处理。

在下文中，将描述划分方法，并且为了便于描述，假设初始块为正方形的形式。然而，即使呈矩形的形式，也可以以相同或相似的方式来应用初始块，但不限于此。

可以支持用于块划分的各种方法，但是本发明将集中于基于树的划分，并且可以支持至少一个树划分。在这种情况下，可以支持四叉树(Quad Tree，QT)、二叉树(BT)、三叉树(TT)等。当支持一种树方法时，可以将其称为单个树划分，并且当支持两种或更多树方法时，可以将其称为多树方法。

四叉树划分意味着将块分别在水平和垂直方向上划分成两个，二叉树划分意味着将块在水平或垂直方向上划分成两个，而三叉树划分意味着将块在水平或垂直方向上划分成三个。

在本发明中，如果划分之前的块是M×N，则假设在四叉树划分的情况下，将该块划分成四个M/2×N/2，在二叉树划分的情况下，将该块划分成为M/2×N或M×N/2，并且在三叉树划分的情况下，将该块划分成M/4×N/M/2×N/M/4×N或M×N/4/M×N/2/M×N/4。然而，划分结果不限于以上情况，并且各种修改的示例是可能的。

取决于编码/解码设置，可以支持树划分方法中的一种或更多种。例如，可以支持四叉树划分，可以支持四叉树划分和二叉树划分，可以支持四叉树划分和三叉树划分，或者可以支持四叉树划分、二叉树划分和三叉树划分。

以上示例是基本划分方法是四叉树并且根据是否支持其他树而将二叉树划分和三叉树划分包括在附加划分模式中的情况的示例，但是可以进行各种修改。在本文中，可以根据编码/解码设置隐式地确定关于是否支持其他树的信息(bt_enabled_flag、tt_enabled_flag、bt_tt_enabled_flag等。其可以具有为0或1的值，如果为0：不支持；如果为1：支持)，或者可以以序列、图片、切片、图块等为单位显式地确定。

划分信息可以包括关于是否划分的信息(tree_part_flag或qt_part_flag、bt_part_flag、tt_part_flag、bt_tt_part_flag。其可以具有为0或1的值，并且如果为0：不划分，并且如果为1：划分)。此外，可以根据划分方法(二叉树、三叉树)添加关于划分方向的信息(dir_part_flag或bt_dir_part_flag、tt_dir_part_flag、bt_tt_dir_part_flag。其可以具有为0或1的值，如果为0：<水平>，如果为1：<垂直>)，该信息可以是在划分被执行时可以生成的信息。

当支持多树划分时，各种划分信息配置是可能的。以下将在假设如何在一个深度级别配置划分信息的示例的情况下进行描述(即，由于支持的划分深度被设置成一个或更多个，因此递归划分也是可能的，但是为了便于说明，假设在一个深度级别下进行描述)。

作为示例(1)，检查关于是否划分的信息。在本文中，如果不执行划分，则划分结束。

如果执行划分，则检查用于划分类型的划分信息(例如，tree_idx。如果0：QT；如果1：BT；如果2：TT)。在这种情况下，附加地根据所选择的划分类型来检查划分方向信息，并且处理进行至下一步骤(如果由于划分深度未达到最大值等原因而可能进行附加划分时，重新开始划分，并且如果划分是不可能的，则划分结束。)

作为示例(2)，检查关于是否针对某些树方法(QT)进行划分的信息，并且处理进行到下一步骤。在本文中，如果不执行划分，则检查关于是否针对某些树方法(BT)进行划分的信息。在本文中，如果不执行划分，则检查是否针对某些树方法(TT)进行划分的信息。在本文中，如果不执行划分，则划分处理结束。

如果执行一些树方法(QT)的划分，则处理进行至下一步骤。此外，如果执行某些树方法(BT)的划分，则检查划分方向信息，并且处理进行至下一步骤。此外，如果执行某些树方法(TT)的划分，则检查划分方向信息，并且处理进行至下一步骤。

作为示例(3)，检查关于是否针对某些树方法(QT)进行划分的信息。在本文中，如果不执行划分，则检查关于是否针对某些树方法(BT和TT)进行划分的信息。在本文中，如果不执行划分，则划分处理结束。

如果执行某些树方法(QT)的划分，则处理进行至下一步骤。此外，如果执行某些树方法(BT和TT)的划分，则检查划分方向信息，并且处理进行至下一步骤。

以上示例可以是树划分的优先级存在(示例2和3)或不存在(示例1)的情况，但是各种修改的示例是可能的。此外，在以上示例中，当前阶段的划分是用于说明与先前阶段的划分结果无关的情况的示例，但是也可以根据先前阶段的划分结果来设置当前阶段的划分。

例如，在示例1至示例3的情况下，如果在先前步骤中执行了某些树方法(QT)的划分并且该处理转至当前步骤，则可以在当前步骤中支持相同树方法(QT)的划分。

另一方面，如果在先前步骤中未执行某些树方法(QT)的划分，并且执行了其他树方法(BT或TT)的划分，并且该处理转至当前步骤，则也可以在后续步骤(包括当前步骤)中支持对除某些树方法(QT)外的一些树方法(BT和TT)的划分。

在以上情况下，这意味着支持块划分的树配置可以是自适应的，并且因此，上述划分信息配置也可以被不同地配置。(假设稍后要描述的示例是第三示例)，即在以上示例中，如果在先前步骤中未执行某些树方法(QT)的划分，则在当前阶段中可以在不考虑某些树方法(QT)的情况下执行划分处理。此外，可以通过移除关于相关树方法的划分信息(例如，关于是否划分的信息、关于划分方向的信息等。在该示例<QT>中，是关于是否划分的信息)来进行配置。

以上示例针对允许块划分的情况的自适应划分信息配置(例如，块尺寸在最大值与最小值之间的范围内，每种树方法的划分深度未达到最大深度<允许深度>等)，并且即使在块划分受到限制(例如，块尺寸不在最大值与最小值之间的范围内，每种树方法的划分深度达到最大深度等)时，自适应划分信息配置也是可能的。

如已经提及的，可以使用递归方法来执行本发明中的基于树的划分。例如，当具有划分深度k的编码块的划分标志为0时，在具有划分深度k的编码块中执行对编码块的编码，并且当具有划分深度k的编码块的划分标志是1时，根据划分方法在具有k+1的划分深度的N个子编码块中执行对编码块的编码(其中，N是2或更大的整数，例如2、3、4)。

可以通过以上处理将子编码块再次设置为编码块(k+1)，并且将子编码块划分成子编码块(k+2)，并且可以根据诸如划分范围和划分允许深度的划分设置来确定这样的分层划分方法。

在本文中，可以从一种或更多种扫描方法中选择用于表示划分信息的比特流结构。例如，可以基于划分深度顺序来配置划分信息的比特流，或者可以基于是否执行划分来构造划分信息的比特流。

例如，在划分深度顺序标准的情况下，它是指基于初始块获得当前级别深度处的划分信息以及获得下一级别深度处的划分信息的方法。此外，在关于是否执行划分的标准的情况下，这是指优先获取基于初始块划分的块中的附加划分信息的方法，并且可以考虑其他附加扫描方法。在本发明中，假设基于是否执行划分来配置划分信息的比特流。

如上所述，已经描述了块划分的各种情况，并且可以支持块划分的固定或自适应设置。

在本文中，与块划分有关的设置可以显式地包括以诸如序列、图片、切片和图块为单位的相关信息。替选地，可以根据编码/解码设置隐式地确定块划分设置，其中，可以根据诸如图像类型(I/P/B)、颜色分量、划分类型和划分深度的各种编码/解码元素中的一个或两个或更多个的组合来配置编码/解码设置。

在根据本发明的实施方式的图像编码方法中，帧内预测可以如下配置。预测单元的帧内预测可以包括：构造参考像素；生成预测块；确定预测模式；以及对预测模式进行编码。此外，图像编码设备可以被配置成包括参考像素配置单元、预测块生成单元和预测模式编码单元，其实现参考像素配置步骤、预测块生成步骤、预测模式确定步骤以及预测模式编码步骤。可以省略上述处理中的一些，或者可以添加其他处理。此外，可以按照上述顺序之外的顺序改变。

图4是示出根据本发明的实施方式的帧内预测模式的示例性图。

参照图4，说明了，假设将67种预测模式配置为用于帧内预测的预测模式候选组，并且其中65种是定向模式，而其中2种是非定向模式(DC、平面)。然而，它不限于此，并且各种配置是可能的。在本文中，定向模式可以被划分成斜率(例如，dy/dx)或角度信息(度)。此外，预测模式中的全部或部分可以被包括在亮度分量或色度分量的预测模式候选组中，并且其他附加模式可以被包括在预测模式候选组中。

在本发明中，定向模式的方向可以是指直线，并且弯曲定向模式也可以被配置为预测模式。此外，在非定向模式的情况下，预测模式可以包括：DC模式，用于获得具有当前块的相邻的邻近块(例如，左块、上块、左上块、右上块和左下块)的像素的平均值(或加权平均值等)的预测块；以及平面模式，用于通过对邻近块的像素的线性内插来获得预测块等。

在本文中，在DC模式下，可以从以诸如左、上、左+上、左+左下、上+右上、左+上+左下+右上等的各种组合分组的块中获得用于生成预测块的参考像素。此外，可以根据由图像类型、颜色分量、块尺寸/形状/位置限定的编码/解码设置来确定获得参考像素的块位置。

在本文中，在平面模式下，可以在由参考像素组成的区域(例如，左、上、左上、右上、左下等)以及不由参考像素组成的区域(例如，右、下、右下等)中获得用于生成预测块的像素。在不由参考像素组成的区域(即未编码)的情况下，可以通过使用由参考像素组成的区域中的一个或更多个像素(例如，照原样复制，加权平均等)隐式地获得该区域，或者可以显式地生成关于不由参考像素组成的区域中的至少一个像素的信息。因此，如上所述，可以使用由参考像素组成的区域和不由参考像素组成的区域来生成预测块。

图5是示出根据本发明的实施方式的用于定向模式和非定向模式的帧内预测的概念图。

参照图5的(a)，示出了根据在垂直(5a)方向、水平(5b)方向和对角线(5c至5e)方向上的模式的帧内预测。参考图5的(b)，示出了根据DC模式的帧内预测。参考图5的(c)，示出了根据平面模式的帧内预测。

除了以上描述之外，还可以包括附加的非定向模式。在本发明中，主要描述了线性定向模式以及DC模式和平面模式的非定向模式，但是也可以应用对其他情况的改变。

图4可以是与块的尺寸无关地被固定支持的预测模式。此外，根据块尺寸支持的预测模式可能与图4不同。

例如，预测模式候选组的数量可以是自适应的(例如，预测模式之间的角度均等间隔，但是角度被不同地设置。定向模式的数量是9、17、33、65、129等)，或者预测模式候选组的数量可以是固定的，但可以具有不同的配置(例如，定向模式角度、非定向类型等)。

此外，图4可以是与块类型无关地被固定支持的预测模式。此外，根据块类型支持的预测模式可能与图4不同。

例如，预测模式候选组的数量可以是自适应的(例如，根据块的水平/垂直比率，将从水平或垂直方向得出的预测模式的数量设置为较大或较小)，或者预测模式候选组的数量可以是固定的，但是可以具有不同的配置(例如，更具体地根据块的水平/垂直比率来设置从水平或垂直方向得出的预测模式)。

替选地，较长的块长度的预测模式可以支持较大的数目，而较短的块长度的预测模式可以支持较少的数目。在图4中，在长块的情况下，预测模式间隔可以支持位于模式66右侧的模式(例如，基于第50个模式的角度为+45度或更大的模式，即具有诸如67至80的编号的模式)或位于模式2左侧的模式(例如，基于第18个模式的角度为-45度或更大的模式，即具有诸如-1至-14的编号的模式)。这可以根据块的水平长度与垂直长度的比率来确定，反之亦然。

在本发明中，主要将预测模式描述为其中预测模式是固定支持的预测模式(与任何编码/解码元素无关)的情况(如图4所示)，但是也可以根据编码设置来设置自适应支持的预测模式。

此外，在对预测模式进行分类时，水平模式和垂直模式(模式18和模式50)以及一些对角线模式(右上对角线<2>、右下对角线<34>、左下对角线<66>等)可以是标准，并且这可以是基于某些方向性(或45度、90度等角度)执行的分类方法。

此外，位于定向模式的两端的一些模式(模式2和模式66)可以是作为预测模式分类的基础的模式，这是在如图4所示的那样配置帧内预测模式时可能的示例。即，当预测模式配置是自适应的时，改变参考模式的示例也是可能的。例如，可以将模式2替换为具有小于或大于2的编号(-2、-1、3、4等)的模式，或者将模式66替换为具有小于或大于66的编号(64、66、67、68等)的模式。

此外，在预测模式候选组中可以包括用于颜色分量的附加预测模式。下面描述颜色复制模式和颜色模式作为预测模式的示例。

(颜色复制模式)

可以支持与从位于不同颜色空间中的区域获得用于生成预测块的数据的方法相关的预测模式。

例如，用于使用颜色空间之间的相关性在另一颜色空间中获取用于生成预测块的数据的方法的预测模式可以是其示例。

图6是示出根据本发明的实施方式的关于颜色复制模式的帧内预测的概念图。参照图6，当前空间M的当前块C可以在同一时间t处使用不同颜色空间N的对应区域D的数据来执行预测。

在这种情况下，当以YCbCr作为示例时，颜色空间之间的相关性可以指Y与Cb、Y与Cr以及Cb与Cr之间的相关性。即，在色度分量(Cb或Cr)的情况下，可以将与当前块对应的亮度分量Y的重建块用作当前块的预测块(色度与亮度是稍后描述的示例的的默认设置)。替选地，可以将与某个色度分量(Cr或Cb)的当前块对应的某个色度分量(Cb或Cr)的重建块用作当前块的预测块。

在本文中，在某些颜色格式(例如，YCbCr为4:4:4等)中，与当前块对应的区域在每个图像中可以具有相同的绝对位置。替选地，在某些颜色格式(例如，YCbCr为4:2:0等)中，每个图像中的相对位置可以相同。可以根据取决于颜色格式的水平长度与垂直长度的比率来确定对应位置，并且可以通过将当前像素的坐标的每个分量乘以或除以取决于颜色格式的水平长度与垂直长度的比率，来获得颜色空间中的与当前图像的像素不同的对应像素。

为了便于描述，描述将主要集中在某些颜色格式(4:4:4)的情况下，但是应当理解，可以根据取决于颜色格式的水平长度与垂直长度的比率来确定其他颜色空间的对应区域的位置。

在颜色复制模式中，可以将不同的颜色空间的重建块用作预测块，或者可以将通过考虑颜色空间之间的相关性而获得的块用作预测块。通过考虑颜色空间之间的相关性而获得的块是指可以通过对现有块执行校正而获得的块。具体地，在{P＝a*R+b}的公式中，a和b是指用于校正的平均值，并且R和P分别是指在不同颜色空间中获得的值和当前颜色空间的预测值。在本文中，P是指通过考虑颜色空间之间的相关性而获得的块。

在该示例中，假设通过使用颜色空间之间的相关性而获得的数据被用作当前块的预测值，但是如下情况也是可能的：该数据被用作应用于现有块的预测值的校正值。即，可以使用不同颜色空间的残差值来校正当前块的预测值。

在本发明中，假设以前一种情况为前提，但是本发明可以不限于此，并且对将数据用作校正值的情况的相同或改变的应用也可以是可适用的。

在颜色复制模式下，可以根据编码/解码设置来确定是显式地还是隐式地支持颜色复制模式。在本文中，可以根据图像类型、颜色分量、块位置/尺寸/形状以及块宽度/长度比中的一个或者两个或更多个的组合来限定编码/解码设置。此外，在显式的情况下，相关信息可以被包括在序列、图片、切片或图块的单元中。此外，根据编码/解码设置，在一些情况下可以隐式地确定是否支持颜色复制模式，并且在一些情况下可以显式地生成相关信息。

在颜色复制模式下，可以根据编码/解码设置来显式地生成或隐式地获得颜色空间之间的相关性信息(a、b等)。

在这种情况下，要被比较(或参考)以获得相关性信息的区域可以是当前块(图6中的C)和不同颜色空间的对应区域(图6中的D)。替选地，该区域可以是当前块的相邻区域(图6中的C的左块、上块、左上块、右上块、左下块等)和不同颜色空间的对应区域的相邻区域(图6中的D的左块、上块、左上块、右上块、左下块等)。

在以上描述中，在前一种情况下，由于必须使用与当前块对应的块的数据直接获得相关性信息，因此它可以对应于显式地处理相关信息的示例。即，可以存在以下情况：由于当前块的数据尚未被编码，因此应当生成相关性信息。在后一种情况下，由于可以使用与当前块的相邻区域对应的块的相邻区域的数据来间接地获得相关性信息，因此这可以对应于隐式地处理相关信息的示例。

总之，在前一种情况下，通过比较当前块和对应块来获得相关性信息，而在后一种情况下，通过比较分别与当前块和对应块相邻的区域来获得相关性信息。此外，通过将相关性信息应用于对应块而获得的数据可以用作当前块的预测像素。

在本文中，在前一种情况下，可以按原样对相关性信息进行编码，或者可以将通过比较相邻区域而获得的相关性信息用作预测值来对关于差异的信息进行编码。相关性信息可以是当选择颜色复制模式作为预测模式时可能发生的信息。

在本文中，后一种情况可以理解为如下隐含的情况的示例：除了在预测模式候选组中选择颜色复制模式作为最佳模式之外，不存在另外生成的信息。即，这可以是在支持一个相关性信息的配置下可能的示例。

在支持两个或更多个相关性信息的设置中，除了选择颜色复制模式作为最佳模式之外，可能还需要用于相关性信息的选择信息。如在以上示例中，根据编码/解码设置，将显式情况和隐式情况混合的配置也是可能的。

在本发明中，将集中在以下情况进行描述：间接地获得相关性信息，并且所获得的相关性信息可以是N或更大(N是1或更大的整数，例如1、2、3)。关于相关性信息的数量的设置信息可以被包括在诸如序列、图片、切片、图块等的单元中。应当理解，在以下描述的一些示例中，当支持两个或更多个相关性信息时，其可以与当支持两个或更多个颜色复制模式时具有相同的含义。

图7是示出根据本发明的实施方式的与颜色复制模式有关的每个颜色空间的对应块和及其相邻区域的示例性图。参照图7，示出了当前颜色空间(M)和不同颜色空间(N)中的像素间对应关系(p和q)的示例，并且这可以理解为可能在某些颜色格式(4:2:0)下发生的情况。此外，可以确认用于获得相关性信息的对应关系(7a)和用于应用预测值的对应关系(7b)。

以下继续关于在颜色复制模式下获得相关性信息的描述。为了获得相关性信息，可以比较(或使用)每个颜色空间的预定区域(与当前块相邻的区域以及与对应于当前块的块相邻的区域中的全部或一部分)中的像素的像素值(即，执行1:1像素值比较处理)。在这种情况下，可以基于每个颜色空间中的对应像素位置来获得要比较的像素值。像素值可以是从每个颜色空间中的至少一个像素得出的值。

例如，在一些颜色格式(4:4:4)中，色度空间中的一个像素的像素值和亮度空间中的一个像素的像素值可以用作与相关性信息获取处理对应的像素值。替选地，在一些颜色格式(4:2:0)中，色度空间中的一个像素的像素值和从亮度空间中的一个或更多个像素得出的像素值可以用作与相关性信息获取处理对应的像素值。

具体地，在前一种情况下，可以将色度空间的p[x,y]与亮度空间的q[x，y]进行比较。在这种情况下，作为像素值，可以按原样使用一个像素的亮度值。在后一种情况下，可以将色度空间中的p[x,y]与亮度空间中的q[2x,2y]、q[2x,2y+1]、q[2x+1,2y]、q[2x+1,2y+1]等进行比较。

在本文中，由于必须执行1:1像素值比较，因此在亮度空间的情况下，可以将多个像素之一用作用于与色度像素的像素值进行比较的值。即，按原样使用多个像素之中的一个像素的亮度值。替选地，一个像素值可以从多个像素之中的两个或更多个像素(两个至四个)中得出，并且用作要比较的值。即，可以将加权平均(可以向每个像素相等地分配权重或非均匀地分配权重)应用于两个或更多个像素。

当如以上示例中那样存在多个对应像素时，预定像素的像素值或从两个或更多个像素得出的像素值可以用作要比较的值。在这种情况下，可以单独或组合地使用用于根据编码/解码设置在每个颜色空间中得出要比较的像素值的两种方法中的一种。

以下可以是基于如下假设的描述：一个像素的像素值用于在当前颜色空间中进行的比较，并且其他颜色空间中的一个或更多个像素可以用于得出像素值。例如，假设颜色格式是YCbCr 4:2:0，则当前颜色空间是色度空间，而另一颜色空间是亮度空间。将集中于不同的颜色空间来描述用于得出像素值的方法。

例如，可以根据块的形状(水平长度与垂直长度的比率)来确定像素值。作为详细示例，可以将与当前块(或要预测的块)的较长边相邻的色度空间的p[x,y]与亮度空间的q[2x,2y]进行比较，并且将与较短边相邻的色度空间的p[x,y]与亮度空间中的q[2x,2y]和q[2x+1,2y]的平均值进行比较。

在这种情况下，可以将诸如以上的自适应设置应用于一些块类型(矩形)，而与水平长度与垂直长度的比率无关，或者可以仅当水平长度与垂直长度的比率大于或等于/大于特定比率(k:1或1:k，k为2或更大，例如2:1、4:1等)时才应用诸如以上的自适应设置。

例如，可以根据块的尺寸来确定像素值。作为详细示例，当当前块的尺寸大于或等于/大于特定尺寸(M×N。例如，2^m×2ⁿ，其中m和n是大于或等于1的整数，例如2至6)时，可以将色度空间的p[x,y]与亮度空间的q[2x+1,2y]进行比较，并且当当前块的尺寸小于或等于/小于特定尺寸时，可以将色度空间的p[x,y]与亮度空间的q[2x,2y]、q[2x,2y+1]的平均值进行比较。

在这种情况下，可以存在用于尺寸比较的边界值中的一个或更多个，或者诸如两个或更多个(M₁×N₁、M₂×N₂等)的自适应设置也是可能的。

以上示例是可以在计算量方面考虑的一些情况，并且包括与以上示例相反的情况的各种修改的示例是可能的。

例如，可以根据块的位置来确定像素值。作为详细示例，当当前块位于预设区域(假设在该示例中为最大编码块)内时，可以将色度空间的p[x,y]与亮度空间的q[2x,2y]、q[2x+1,2y]、q[2x,2y+1]、q[2x+1,2y+1]的平均值进行比较，并且当位于预设区域的边界(假设在该示例中为左上边界)处时，可以将色度空间的p[x,y]与亮度空间的q[2x+1,2y+1]进行比较。预设区域可以是指基于切片、图块、块等设置的区域。具体地，可以基于切片、图块和最大编码/预测/变换块的整数倍来获得预设区域。

作为另一示例，当当前块位于区域的某边界(假设在该示例中为上边界)处时，可以将与某边界(上)相邻的色度空间的P[x,y]与亮度空间的q[2x+1,2y+1]相比较，并且可以将与该区域的内部(左)相邻的色度空间的P[x,y]与q[2x,2y]、q[2x+1,2y]、q[2x,2y+1]、q[2x+1,2y+1]的平均值进行比较。

以上示例是可以在存储器方面考虑的一些情况，并且包括与以上示例相反的情况的、各种修改的示例是可能的。

通过上述示例，描述了在每个颜色空间中比较的像素值得出的各种情况。如在以上示例中，可以考虑各种编码/解码元素以及块的尺寸/形状/位置来确定用于获得相关性信息的像素值得出设置。

通过以上示例，描述了与当前块对应的块的一个或两个参考像素行分别被用作要被比较以获得相关性信息的区域的情况。即，在YCbCr 4:4:4的情况下，分别使用一个参考像素行，并且在其他格式中，在某些颜色空间中，是指如图7中的某些颜色空间<颜色N>中那样使用两个参考像素行的情况。此外，可以不限于这种情况，并且各种修改的示例可以是可能的。

下面将集中对当前颜色空间中的参考像素行进行描述，并且应当理解，在其他颜色空间中，可以根据颜色格式来确定参考像素行。即，可以使用相同数目的参考像素行，或者可以使用两倍数目的参考像素行。

在本发明的颜色复制模式下，可以使用(或比较)k个参考像素行(其中k为1或更大的整数，例如1和2)来获得相关性信息。此外，可以固定地或自适应地使用k个参考像素行。下面，将描述设置参考像素行的数目的各种示例。

例如，可以根据块的形状(水平长度与垂直长度的比率)来确定参考像素行的数目。作为详细的示例，可以使用与当前块的较长侧相邻的两个参考像素行，并且可以使用与当前块的较短侧相邻的一个参考像素行。

在这种情况下，上述内容可以应用于一些块类型(矩形)，而不管水平长度与垂直长度的比率如何，或者可以仅在水平/垂直长度比率大于或等于特定比率(k:1或1:k。k是2或更大，例如2:1、4:1等)时应用上述内容。此外，对于水平长度与垂直长度的比率，存在两个或更多个边界值，在2:1或1:2的情况下，使用与较长侧(或较短侧)相邻的两个参考像素行，而在4:1或1:4的情况下，可以进行扩展，例如使用与较长侧(或较短侧)相邻的三个参考像素行。

在以上示例中，根据水平长度与垂直长度的比率，较长侧(或较短侧)使用s个参考像素行，并且较短侧(或较长侧)使用t个参考像素行。在这种情况下，可以是s大于或等于t(即，s和t是大于或等于1的整数)的情况的示例。

例如，可以根据块的尺寸来确定参考像素行的数目。作为详细的示例，在当前块的尺寸大于或等于/大于特定尺寸(M×N。例如，2^m×2ⁿ，其中m和n为大于或等于1的整数，例如2至6)时，可以使用两个参考像素行，并且当该尺寸小于或等于/小于预定尺寸时，可以使用一个参考像素行。

在本文中，可以如以上示例中那样存在用于尺寸比较的一个边界值，或者诸如两个或更多个(M₁×N₁、M₂×N₂等)的自适应设置可以是可能的。

例如，可以根据块的位置来确定参考像素行的数目。作为详细的示例，在当前块位于预设区域(能够从与获得相关性信息相关的先前描述得出。在该示例中假设最大编码块)内部时，可以使用两个参考像素行，并且在当前块位于预设区域的边界(在该示例中假设左上边界)处时，可以使用一个参考像素行。

作为另一示例，在当前块位于预设区域的某一边界(在此示例中假设上边界)处时，可以使用与某一边界(上)相邻的一个参考像素行，并且可以使用与预设区域的内部(左)相邻的两个参考像素行。

以上示例是可以在相关性信息的准确性和存储方面考虑的一些情况，并且包括与以上示例相反的情况的各种修改的示例是可能的。

通过上述示例，描述了在每个颜色空间中设置用于获得相关性信息的参考像素行的各种情况。如在以上示例中，可以考虑各种编码/解码元素以及块的尺寸/形状/位置来确定用于获得相关性信息的参考像素行设置。

下面描述要比较(或参考)以获得相关性信息的区域的另一情况。要比较的区域可以针对当前颜色空间中与当前块相邻的左、上、左上、右上、左下等的位置相邻的像素。

在这种情况下，可以设置要比较的区域，包括左、上、左上、右上和左下位置中的所有块。替选地，参考像素区域可以由在一些位置处的块的组合来配置。例如，要比较的区域可以由相邻块的组合来配置，相邻块的组合例如是左块/上块/左块+上块/左块+上块+左上块/左块+左下块/上块+右上块/左块+左上块+左下块/上块+左上块+右上块/左块+上块+右上块/左块+上块+左下块。

总之，可以将用于获得相关性信息而要比较的区域配置为预定区域。替选地，可以以一些区域的各种组合来配置预定区域。即，要比较的区域可以是固定的，或者是根据编码/解码设置自适应配置的。

在下文中，将看一下在当前颜色空间中哪个方向相邻区域被配置为当前块的参考区域的各种示例。在本文中，假设在不同颜色空间的相应块中，根据当前颜色块的参考区域的配置来确定将什么方向相邻区域配置为参考区域。此外，假设基本参考区域由左块和上块组成。

例如，可以根据块的形状(水平/垂直长度比率)来确定参考区域。作为详细的示例，如果当前块在水平方向上较长，则左块、上块和右上块可以被设置为参考区域，并且如果当前块在垂直方向上较长，则左块、上块和左下块可以被设置为参考区域。

在这种情况下，上述内容可以应用于一些块形状(矩形)，而不管水平/垂直长度比率如何，或者可以仅在水平/垂直长度比率大于或等于/大于特定比率(k:1或1:k。k为2或更大，例如2:1、4:1等)时应用上述内容。此外，对于水平/垂直长度比率存在两个或更多个边界值，在2:1(或1:2)的情况下，左块、上块和右上块(或左块、上块和左下块)块被设置为参考区域，而在4:1(或1:4)的情况下，诸如上块和右上块(或左块和左下块)的扩展可以被设置为参考区域。

例如，可以根据块的尺寸来确定基本参考区域。作为详细示例，在当前块的尺寸大于或等于/大于特定尺寸(M×N。例如，2^m×2ⁿ，其中m和n为大于或等于1的整数，例如2至6)时，左块和上块可以被设置为参考区域，并且在当前块的尺寸小于或等于/小于特定尺寸时，左块、上块和左上块可以被设置为参考区域。

在这种情况下，可以存在用于尺寸比较的一个边界值，或者诸如两个或更多(M₁×N₁、M₂×N₂等)的自适应设置可以是可能的。

例如，可以根据块的位置来确定基本参考区域。作为详细的示例，在当前块位于预设区域(能够从与获得相关性信息相关的先前描述得出。在该示例中假设最大编码块)内部时，左块、上块、左上块、右上块和左下块被设置为参考区域，并且在当前块位于预设区域的边界(在该示例中假设左上边界)处时，左块和上块被设置为参考区域。

作为另一示例，在当前块位于预设区域的某一边界(在该示例中假设上边界)处时，除与某一边界(上边界)相邻的块外，与预设区域相邻的左块和左下块可以被设置为参考区域。即，左块和左下块可以被设置为参考区域。

以上示例是可以在计算量、存储器等方面考虑的一些情况，并且包括与以上示例相反的情况的各种修改的示例是可能的。

通过上述示例，描述了在每个颜色空间中设置用于获得相关性信息的参考区域的各种情况。如在以上示例中，可以考虑各种编码/解码元素以及块的尺寸/形状/位置来确定用于获得相关性信息的参考区域设置。

此外，要比较的区域可以是在当前颜色空间中与当前块相邻的像素。在本文中，可以使用所有参考像素来获得相关性信息，或者可以使用所有参考像素中的一些来获得相关性信息。

例如，在当前块(基于图7中的颜色M)是具有像素范围(a,b)到(a+7,b+7)(即，8×8)的块时，假设要比较的区域(因为可以根据颜色格式解释相应块，所以省略该块)是当前块的左块和上块的一个参考像素行。

在这种情况下，在(a,b-1)到(a+7,b-1)和(a-1,b)到(a-1,b+7)的范围内的所有像素可以包括在要比较的区域中。替选地，可以包括(a,b-1)、(a+2,b-1)、(a+4,b-1)、(a+6,b-1)和(a-1,b)、(a-1,b+2)、(a-1,b+4)、(a-1,b+6)，它们是以上范围内的一些像素。替选地，可以包括(a,b-1)、(a+4,b-1)和(a-1,b)、(a-1,b+4)，它们是以上范围内的一些像素。

以上示例可以适用于减少获得相关性所需的计算量的量的目的。在设置被比较区域的参考像素采样以获得相关性信息时，可以考虑诸如块的尺寸/形状/位置的各种编码/解码元素以及以上已经描述的许多示例。此外，可以从先前的示例中得出相关应用的示例，并且因此省略详细描述。

通过上述各种示例，检查影响相关性信息的获取的各种元素(相应像素值的得出、参考像素行的数目、参考区域方向设置、参考像素采样等)。其中以上示例单独或组合地影响相关性信息的获取的许多不同的情况可以是可能的。

以上描述可以被理解为用于获得一个相关性信息的预设处理。此外，如已经提及的，可以根据编码/解码设置来支持一个或更多个相关性信息。在这种情况下，可以通过放置两个或更多个预设设置(即，影响相关性信息的获取的元素的组合)来支持两个或更多个相关性信息。

总之，可以从当前块的相邻区域和相应块的相邻区域得出基于相关性信息的参数信息。即，可以基于相关性信息生成至少一个参数(例如，<a1,b1>、<a2,b2>、<a3,b3>等)，并且所述至少一个参数可以用作乘以不同色彩空间中的经重建块的像素的值或与该像素相加的值。

下面继续描述在颜色复制模式中应用的线性模型。通过应用通过以上处理获得的参数，可以执行基于以下线性模型的预测。

[等式1]

pred_sample_C(i，j)＝a×rec_sample_D(i，j)+b

在以上等式中，pred_sample_C表示当前颜色空间中的当前块的预测像素值，并且rec_sample_D表示另一颜色空间中的相应块的重建像素值。可以通过最小化当前块的相邻区域与相应块的相邻区域之间的回归误差来获得a和b，并且a和b可以通过以下等式来计算。

[等式2]

在以上等式中，D(n)表示相应块的相邻区域，C(n)表示当前块的相邻区域，并且N表示基于当前块的水平或垂直长度而设置的值(在该示例中，假设该值是水平或垂直长度的最小值的两倍)。

此外，可以使用诸如用于基于每个颜色空间的相邻区域的最小值和最大值来获得相关性信息的简化直线方程的各种方法。在这种情况下，作为用于获得相关性信息的模型，可以使用一个预设模型，或者可以选择多个模型中的一个。在本文中，选择多个模型中的一个的含义表示模型信息可以被视为是基于相关性信息的参数信息的编码/解码元素。即，当支持多个参数时，这可能意味着，即使剩余的相关性信息设置相同，也可以根据用于获得相关性的不同模型而将剩余的相关性信息设置分类为不同的参数信息。

在某些颜色格式(如果不是4:4:4)中，当前块的一个像素可以对应于相应块的一个或更多个(2、4等)像素。例如，在4:2:0的情况下，色度空间中的p[x,y]可以对应于亮度空间中的q[2x,2y]、q[2x,2y+1]、q[2x+1,2y]、q[2x+1,2y+1]等。

对于一个预测像素值，可以从预定像素或相应的多个像素中的两个或更多个像素的像素值(或预测值)中得出一个像素值。取决于编码/解码设置，各种情况可以是可能的，并且由于可以从关于得出相应像素值以获得相关性信息的部分中得出相关描述，因此将省略对其的详细描述。

(颜色模式)

可以支持与获得用于从位于不同颜色空间中的区域生成预测块的预测模式的方法相关的预测模式。

例如，用于获得用于使用颜色空间之间的相关性在另一颜色空间中生成预测块的预测模式的方法的预测模式可以是示例。即，颜色模式可以是，通过使用现有的预测方向和方法，根据与不同的颜色空间对应的块的预测模式自适应地确定的模式，而不具有任何特定的预测方向或预测方法。

在这种情况下，可以根据块划分设置来获得各种颜色模式。

例如，在根据某些颜色分量(亮度)的块划分的结果来隐式地确定某些颜色分量(色度)的块划分的设置(即，当显式地确定亮度分量的块划分时)，某些颜色分量(色度)的一个块可以对应于某些颜色空间(亮度)的一个块。因此，(假设4:4:4。对于其他格式，可以根据水平长度与垂直长度的比率来得出该示例的说明)，如果当前块(色度)具有(a,b)到(a+m,b+n)的像素范围，则即使当前块指向相应块(亮度)的(a,b)到(a+m,b+n)的像素范围内的任何像素位置，由于它指向一个块，因此可以在包括相应像素的块中获得一种预测模式。

替选地，在根据每个颜色分量支持单独的块划分(即，显式地确定每个颜色空间的块划分)的情况下，某些颜色分量(色度)的一个块可以对应于某些颜色空间(亮度)的一个或更多个块。因此，即使当前块(色度)具有与以上示例的像素范围相同的像素范围，根据块划分的结果，相应的块(亮度)也可以由一个或更多个块组成。因此，可以根据当前块的像素范围内的像素的位置，从由相应像素指示的相应块获得不同的预测模式(即，一个或更多个模式)。

如果色度分量的帧内预测模式候选组支持一种颜色模式，则可以设置从相应块的何处获得预测模式。

例如，可以在相应块的中心-左上-右上-左下-右下等的位置处获得预测模式。即，如果按以上顺序获得预测模式，但是相应块不可用(例如，编码模式是帧间等)，则可以获得与下一顺序对应的位置的预测模式。替选地，可以获得在该位置处的块中具有高频率(两次或更多次)的预测模式。

替选地，当支持多种颜色模式时，可以根据优先级设置在何处获得预测模式。替选地，根据优先级来获得一些预测模式以及获得在该位置处的块中具有高频率的预测模式的组合可以是可能的。在本文中，优先级是示例，并且各种修改的示例可以是可能的。

颜色模式和颜色复制模式可以是能够支持色度分量的预测模式。例如，可以配置用于色度分量的预测模式候选组，包括水平、垂直、DC、平面、对角线模式等。替选地，可以配置包括颜色模式和颜色复制模式的帧内预测模式候选组。

即，配置可以是定向+非定向+颜色模式或定向+非定向+颜色复制模式，或定向+非定向+颜色模式+颜色复制模式。此外，可以包括并配置用于附加色度分量的模式。

可以根据编码/解码设置来确定是否支持颜色模式和颜色复制模式，在这种情况下，可以进行隐式或显式处理。替选地，显式+隐式处理的混合配置可以是可能的。这包括与颜色模式和颜色复制模式相关的详细设置(例如，支持的模式的数目等)，使得可以进行隐式或显式处理。

例如，相关信息可以显式地包括在序列、图片、片、图块、块等的单元中，或者可以根据各种编码/解码元素(例如，图像类型、块位置、块尺寸、块形状、块宽度/长度比率等)来隐式地确定相关信息。替选地，取决于编码/解码元素，可以隐式地确定一些条件，或者可以在一些条件下显式地生成相关信息。

图8是用于说明根据本发明的实施方式的用于帧内预测的参考像素配置的示例性图。预测块的尺寸和形状(M×N)可以通过块划分单元来获得。

被定义为帧内预测的最小块尺寸和最大块尺寸的块范围信息可以包括诸如序列、图片、片、图块等的单元中的相关信息。通常，指定水平长度和垂直长度(例如，32×32、64×64等)，使得可以设置尺寸信息，但是也可以以水平长度与垂直长度的乘积的形式设置尺寸信息。例如，当水平与垂直的乘积是64时，最小块尺寸可以对应于4×16、8×8、16×4等。

此外，可以对通过指定水平长度和垂直长度来设置尺寸信息或者以乘积形式设置尺寸信息进行混合并使用。例如，对于最大块尺寸，如果水平长度与垂直长度的乘积是4096并且两个长度之一的最大值是64，则64×64可以对应于最大块尺寸。

如在以上示例中，除了最小块和最大块尺寸信息之外，还混合块划分信息以最终确定预测块的尺寸和形状。在本发明中，预测块的水平长度和垂直长度必须大于或等于s(例如，s是2的倍数，例如16、32)，并且水平/垂直长度之一大于或等于k(例如，k是4、8等)。此外，尽管可以分别在等于或小于v和w的设置(例如，v和w是2的倍数，例如16、32、64等)下定义块的水平长度和垂直长度。但是可以不限于此，并且各种块范围设置可以是可能的。

帧内预测通常可以以预测块为单位来执行，但是根据块划分单元的设置，可以以编码块、变换块等为单位来执行。在检查块信息之后，参考像素配置单元可以配置用于预测当前块的参考像素。在这种情况下，可以通过临时存储器(例如阵列<Array>，第一阵列、第二阵列等)来管理参考像素，针对块的每个帧内预测处理生成并移除参考像素，并且可以根据参考像素的配置来确定临时存储器的尺寸。

在该示例中，描述了假设使用左块、上块、左上块、右上块和左下块进行当前块的预测，但是可以不限于此，并且可以使用具有不同配置的块候选组进行当前块的预测。例如，参考像素的相邻块的候选组可以是遵循光栅或Z扫描的示例，并且可以根据扫描顺序移除候选组中的一些候选或者候选组中的一些候选可以被配置成包括其他块候选(例如，右块、下块、右下块等)。

此外，如果支持某种预测模式(颜色复制模式)，则不同颜色空间的一些区域可以用于当前块的预测，并且其也可以被认为是参考像素。现有参考像素(当前块的空间相邻区域)和附加参考像素可以作为一个或单独地进行管理(例如，参考像素A和参考像素B。即，参考像素存储器可以被单独地命名，就好像临时存储器被单独地使用一样)。

例如，基本参考像素的临时存储器的尺寸可以为<2×blk_width+2×blk_height+1>(基于一个参考像素行)，并且附加参考像素的临时存储器的尺寸可以为<blk_width×blk_height>(当4:4:4时)(当4:2:0时需要blk_width/2×blk_height/2)。临时存储器尺寸是一个示例，并且不限于此。

此外，可以将其(包括要被比较(或参考)以获得相关性信息的当前块和相应块的相邻区域)作为参考像素来进行管理。即，可以根据颜色复制模式来管理附加参考像素。

总之，当前块的相邻区域可以被包括作为用于当前块的帧内预测的参考像素，并且根据预测模式，不同颜色空间的相应块及其相邻区域可以被包括作为参考像素。为了便于描述，将主要给出对基本参考像素配置的情况的描述。

如图8所示，用于当前块的预测的参考像素可以被配置为左块、上块、左上块、右上块和左下块的相邻像素(图8中的Ref_L、Ref_T、Ref_TL、Ref_TR、Ref_BL)。在这种情况下，参考像素通常由最靠近当前块的相邻块的像素(图8中的a作为参考像素行)组成，但是也可以将其他像素(图8中的b和其他外部行的像素)配置成参考像素。

与当前块相邻的像素可以被分类为至少一个参考像素行，并且最靠近当前块的像素可以被分类为ref_0{例如，当前块的边界像素与该像素之间的距离为1的像素。p(-1,-1)到p(2m-1,-1)，p(-1,0)到p(-1,2n-1)}、下一相邻像素被分类为ref_1{例如，当前块的边界像素与该像素之间的距离是2。p(-2,-2)到p(2m,-2)，p(-2,-1)到p(-2,2n)}、下一相邻像素被分类为ref_2{例如，当前块的边界像素与该像素之间的距离是3。p(-3,-3)到p(2m+1,-3)，p(-3,-2)到p(-3,2n+1)}。即，可以根据与当前块的边界像素相邻的像素距离将与当前块相邻的像素分类为参考像素行。

在本文中，所支持的参考像素行的数目可以是N或更多，并且N可以是1或更大的整数，例如1至5。在这种情况下，通常从最靠近当前块的参考像素行开始将参考像素行顺序地包括在参考像素行候选组中，但是不限于此。例如，当N为3时，可以将候选组顺序地配置为<ref_0、ref_1、ref_2>，或者还可以利用排除最近的参考像素行的配置或诸如<ref_0、ref_1、ref_3>、<ref_0、ref_2、ref_3>、<ref_1、ref_2、ref_3>的非顺序配置对候选组进行配置。

可以使用候选组中的所有参考像素行来执行预测，或者可以使用一些参考像素行(一个或更多个)来执行预测。

例如，可以根据编码/解码设置来选择多个参考像素行中的一个，并且可以使用参考像素行来执行帧内预测。替选地，可以选择多个参考像素行中的两个或更多个来使用相应的参考像素行(例如，将加权平均应用于每个参考像素行的数据)以执行帧内预测。

在本文中，可以隐式地或显式地确定参考像素行选择。例如，在隐式的情况下，这意味着根据编码/解码设置来确定参考像素行，编码/解码设置是根据诸如图像类型、颜色分量和块的尺寸/形状/位置中的一个或者两个或更多个元素的组合来定义的。此外，显式情况意味着可以以诸如块的单位生成参考像素行选择信息。

尽管本发明主要描述了使用最近的参考像素行来执行帧内预测的情况，但是应当理解，当使用多个参考像素行时，以下描述的各种实施方式可以应用于相同或类似的应用。

本发明的帧内预测的参考像素配置单元可以包括参考像素生成单元、参考像素内插单元和参考像素滤波器单元，并且可以包括以上配置的全部或部分。

可以通过检查参考像素配置单元中的参考像素的可用性来对可用参考像素和不可用参考像素进行分类。在本文中，当满足以下条件中的至少一个时，将参考像素的可用性确定为不可用。

例如，如果满足以下情况中的任何情况，则可以将参考像素确定为不可用：如果参考像素位于图片边界的外部；如果参考像素不属于与当前块相同的划分单元(例如，除了具有可参考特性的划分单元之外，不能彼此参考的单元，例如片和图块)；以及如果没有完成编码/解码。即，当以上条件都不满足时，可以将参考像素确定为可用。

此外，可以基于编码/解码设置来限制参考像素的使用。例如，即使根据以上条件确定参考像素是能够使用的，也可以根据是否执行受限的帧内预测(例如constrained_intra_pred_flag)来限制参考像素的使用。当对诸如通信环境的外部因素执行抗差错编码/解码时，或者当禁止将从另一图像参考和重建的块用作参考像素时，可以执行受限的帧内预测。

当受限的帧内预测被禁用时(例如，I图片类型。或者P或B图片类型中constrained_intra_pred_flag＝0)，所有参考像素候选块可以是可用的。

替选地，当受限的帧内预测被激活时(例如，P或B图片类型中constrained_intra_pred_flag＝1)，参考像素候选块将被假设为用于根据编码模式(帧内或帧间)确定是否使用参考像素的条件。此外，可以根据各种其他编码/解码元素来确定以上条件。

由于参考像素由一个或更多个块组成，因此当确认并分类参考像素的可用性时，可以将参考像素分类为三种情况：<全部可用>、<一些可用>和<不是全部可用>。在除<全部可用>的情况之外的所有情况下，可以填充或生成在不可用候选块位置处的参考像素。

当参考像素候选块可用时，相应位置处的像素可以被包括在当前块的参考像素存储器中。在这种情况下，像素数据可以被原样复制，或者可以通过诸如参考像素滤波和参考像素内插的处理而被包括在参考像素存储器中。此外，当参考像素候选块不可用时，通过参考像素生成处理获得的像素可以被包括在当前块的参考像素存储器中。

以下是使用各种方法在不可使用块位置处生成参考像素的示例。

例如，可以使用任意像素值来生成参考像素。在本文中，任意像素值可以是属于像素值范围(例如，基于位深度的像素值范围或根据相应图像中的像素分布的像素值范围)的一个像素值(例如，像素值范围的最小值、最大值、中值等)。具体地，使用任意像素值来生成参考像素可以是当所有参考像素候选块不可用时应用的示例。

替选地，可以从完成图像编码/解码的区域中生成参考像素。具体地，可以从与不可使用块相邻的至少一个可使用块生成参考像素。在这种情况下，可以使用诸如外推、内插和复制的方法中的至少一种。

在参考像素内插单元中完成参考像素配置之后，可以通过参考像素的线性内插来生成小数单位中的参考像素。替选地，可以在以下描述的参考像素滤波器处理之后执行参考像素内插处理。

在这种情况下，在水平、垂直、一些对角线模式(例如，垂直/水平上45度差异的模式，例如右上对角线、右下对角线、左下对角线。对应于图4中的模式2、模式34和模式66)、非定向模式、颜色复制模式等的情况下，可以不执行内插处理，并且可以在其他模式(其他对角线模式)下执行内插处理。

可以根据预测模式(例如预测模式的方向性、dy/dx等)以及参考像素和预测像素的位置，确定执行内插的像素位置(即，对哪个小数单位进行了内插。从1/2到1/64等进行确定)。在这种情况下，可以应用一个滤波器(例如，假设滤波器具有用于确定滤波器系数或滤波器抽头的长度的相同方程。然而，假设仅根据小数单位的精度<例如，1/32、7/32、19/32>来调整系数)，而不管小数单位的精度如何，或者可以根据小数单位来选择和应用多个滤波器中的一个(例如，假设滤波器具有用于确定滤波器系数或滤波器抽头的长度的独立方程)。

前一种情况可以是使用整数单位像素作为用于小数单位像素的内插的输入的示例，而后一种情况可以是分阶段不同的输入像素的示例(例如，在1/2单位的情况下，使用整数像素。在1/4单位的情况下，使用整数和1/2单位像素等)，但是不限于此，并且在本发明中，将主要描述前一种情况。

对于参考像素内插，可以执行固定滤波或自适应滤波，并且这可以根据编码/解码设置(例如，图像类型、颜色分量、块位置/尺寸/形状、块宽度/高度比率、预测模式等中的一个或者两个或更多个的组合)来确定。

固定滤波可以使用一个滤波器执行参考像素内插，而自适应滤波可以使用多个滤波器中的一个执行参考像素内插。

在本文中，在自适应滤波的情况下，可以根据编码/解码设置隐式地或显式地确定多个滤波器中的一个。在本文中，滤波器的类型可以由4抽头DCT-IF滤波器、4抽头三次滤波器、4抽头高斯滤波器、6抽头维纳滤波器和8抽头卡尔曼滤波器组成。此外，也可以根据颜色分量定义所支持的不同滤波器候选组(例如，一些类型的滤波器是相同的或不同的，并且滤波器抽头的长度为短或长等)。

出于通过经由编码/解码处理减少剩余劣化来提高预测精度的目的，参考像素滤波器单元可以对参考像素执行滤波。在这种情况下使用的滤波器可以是低通滤波器，但不限于此。可以根据编码/解码设置(其可以从以上描述中得出)来确定是否应用滤波。此外，当应用滤波时，可以应用固定滤波或自适应滤波。

固定滤波意味着不执行参考像素滤波或者使用一个滤波器来应用参考像素滤波。自适应滤波意味着根据编码/解码设置来确定是否应用滤波，并且如果存在两个或更多个所支持的滤波器类型，则可以选择这些滤波器类型中的一个。

在这种情况下，可以支持按照各种滤波器系数(例如，如[1,2,1]/4的3抽头滤波器、如[2,3,6,3,2]/16的5抽头滤波器等)、滤波器抽头长度等分类为滤波器类型的多个滤波器。

在参考像素配置步骤中引入的参考像素内插单元和参考像素滤波器单元可以是用于提高预测精度的必要部件。这两个处理可以独立地执行，但是这两个处理混合的配置也可以是可能的。

预测块生成单元可以根据至少一个预测模式生成预测块，并且基于预测模式使用参考像素。在这种情况下，取决于预测模式，可以在诸如外插的方法(定向模式)中使用参考像素，并且可以在诸如内插、平均(DC)或复制的方法(非定向模式)中使用参考像素。

图9是示出根据本发明的实施方式的与用于帧内预测的目标块相邻的块的概念图。具体地，图9的左侧表示在当前颜色空间中与当前块相邻的块，并且右侧表示在另一颜色空间中的相应块。

以下描述根据预测模式使用的参考像素。

在定向模式的情况下，对于水平模式与一些对角线模式(右上对角线)之间的模式(图4中的模式2至17)，可以使用左下块和左块的参考像素(图9中的Ref_BL、Ref_L)；对于水平模式可以使用左块的参考像素；对于水平模式与垂直模式之间的模式(图4中的模式19至49)可以使用左块、左上块和上块的参考像素(图9中的Ref_L、Ref_TL、Ref_T)；对于垂直模式可以使用上块的参考像素(图9中的Ref_L)；并且对于垂直模式和一些对角线模式(左下对角线)之间的模式(图4中的模式51至66)，可以使用上块和右上块的参考像素(图9中的Ref_T、Ref_TR)。

此外，在非定向模式的情况下，可以使用位于左下块、左块、左上块、上块和右上块(图9中的Ref_BL、Ref_L、Ref_TL、Ref_T、Ref_TR)中的一个或更多个块中的参考像素。例如，参考像素可以以各种参考像素组合(例如左、上、左+上、左+上+左上、左+上+左上+右上和左下等)的形式用于帧内预测，并且这可以根据非定向模式(DC、平面等)来确定。在稍后描述的示例中，假设在DC模式下使用左块+上块，并且在平面模式下使用左块+上块+左上块+右上块作为参考像素进行预测。

此外，在颜色复制模式的情况下，另一颜色空间的重建块(图9中的Ref_C)可以用作参考像素。在稍后描述的示例中，假设使用与当前块对应的块作为参考像素进行预测。

在这种情况下，可以将用于帧内预测的参考像素分类为多个概念(或单元)。例如，可以将用于帧内预测的参考像素分类为一个或更多个类别，例如第一参考像素和第二参考像素。在该示例中，假设将参考像素分类为两个类别。

在这种情况下，第一参考像素可以是直接用于生成当前块的预测值的像素，并且第二参考像素可以是间接用于生成当前块的预测值的像素。

替选地，第一参考像素可以是用于生成当前块的所有像素的预测值的像素，并且第二参考像素可以是用于生成当前块的一些像素的预测值的像素。

替选地，第一参考像素可以是用于生成当前块的第一预测值的像素，并且第二参考像素可以是用于生成当前块的第二预测值的像素。

替选地，第一参考像素可以是通过应用预处理(例如，参考像素滤波等)获得的像素，并且第二参考像素可以是未通过应用预处理获得的像素。

替选地，第一参考像素可以是位于被定位在当前块的预测方向的起始点处的区域中的像素(例如，在垂直模式下，上块对应于预测方向的起始点)，并且第二参考像素可以是位于与当前块的预测方向无关地被定位的区域中的像素(例如，可以或可以不被定位在预测方向的起始点处)。

第一参考像素、第二参考像素等可以是帧内预测所需的数据。详细地，第一参考像素可以是帧内预测基本所需的必要数据，而其他参考像素可以是有助于提高预测精度的可选数据。

在本发明中，预测块生成处理可以基于使用第一参考像素，但是也可以使用附加参考像素执行预测。在这种情况下，使用附加参考像素执行预测可以被称为预测块(或像素)校正。

在本发明中，预测块生成单元可以被配置成还包括预测块校正单元。在本文中，预测块校正单元可以被认为是根据校正设置对预测块执行校正的步骤。在这种情况下，可以通过预测模式、块信息等来确定校正设置。详细地，校正设置可以是预测块校正单元跟随在预测块生成单元之后的配置，但是为了便于描述，假设预测块生成单元包括预测块校正单元。

通过上述示例描述的参考像素可以是第一参考像素，并且此外，第二参考像素可以参与生成预测块。以下是对根据预测模式使用的参考像素的描述。

在定向模式下，除了第一参考像素之外，可以使用第二参考像素。具体地，可以在水平模式与某些对角线模式(右上对角线)之间的模式下另外使用左上块、上块和右上块，并且可以在水平模式下另外使用左下块、左上块、上块和右上块。可以在水平模式与垂直模式之间的模式下另外使用左下块和右上块，并且可以在垂直模式下另外使用左下块、左块、左上块和右上块。可以在垂直模式与某些对角线模式(左下对角线)之间的模式下另外使用左下块、左块和左上块。

此外，在非定向模式下，除了第一参考像素之外，可以使用第二参考像素。具体地，在DC模式下，可以另外使用左下块、左上块和右上块，并且在平面模式下，可以另外使用左上块。

此外，在颜色复制模式的情况下，除了第一参考像素之外，可以使用第二参考像素。详细地，可以另外使用当前块的左块、上块、左上块、右上块和左下块。替选地，可以另外使用不同颜色空间的相应块的左块、右块、上块、下块、左上块、右上块、左下块和右下块。

在以上描述中，当前块的相邻区域和相应块的相邻区域可以是被参考以获得颜色复制模式的相关性信息的区域，并且可以是不直接涉及当前块的预测的区域。然而，出于提高预测的精度的目的执行校正，这意味着该区域可以进一步用于当前块的预测。

例如，由于在应用后处理滤波器之前在其他颜色空间的数据中保留有块边界的劣化，因此，出于提高预测块的精度的目的，可以执行校正。替选地，即使获得参考像素作为当前块的预测数据，由于当前块的相邻区域的不连续特性可能较强，因此出于提高预测块的精度的目的可以执行校正。

在本发明的帧内预测中，第二参考像素可以被认为不仅包括已编码/已解码像素，而且还包括当前块中的像素(在该示例中为预测像素)。即，第一预测值可以是用于生成第二预测值的像素。在本发明中，将集中对已编码/已解码像素被认为是第二参考像素的示例来给出描述，但是可以不限于此，并且使用未完成编码/解码的像素的修改的示例也可以是可能的。

出于补偿现有预测模式的缺点的目的，可以执行使用多个参考像素生成或校正预测块的情况。

例如，定向模式是出于通过使用一些参考像素(第一参考像素)反映相应块的方向性来执行预测的模式，但是定向模式可能不能准确地反映块的方向性并且可能使预测精度降低。在这种情况下，当使用附加参考像素(第二参考像素)生成或校正预测块时，可以提高预测精度。

为此，在以下描述的示例中，将描述使用各种参考像素生成预测块的情况，并且即使当不使用诸如第一参考像素和第二参考像素的术语时，也可以从以上定义中得出和理解这些术语。

根据编码/解码设置隐式地确定是否支持使用附加参考像素(或预测像素或预测块校正)来生成预测块，或者可以将关于是否支持生成预测块的信息显式地包括在诸如序列、图片、片和图块的单元中。当支持预测像素校正时，可以根据编码/解码设置隐式地确定与使用附加参考像素有关的详细设置(例如，关于应用校正的信息、<应用校正时>用于校正的参考像素信息、应用于参考像素的权重设置等。)，或者可以以图片、片，图块、块等为单位显式地确定这些详细设置。替选地，可以根据编码/解码设置来混合显式情况和隐式情况，并且可以确定以上设置。

在这种情况下，可以根据图像类型、颜色分量、块尺寸/形状/位置、块的水平/垂直长度比率、预测模式和(预测)像素位置中的一个或者两个或更多个的组合来定义编码/解码设置。

在以下描述的示例中，将描述隐式处理的情况，但是本发明可以不限于此，并且其他修改的示例(显式情况或混合使用的情况)可以是可能的。

取决于预测模式，可以各种方式生成预测块。将通过以下描述的示例来描述根据预测模式的校正的各种情况。在稍后要描述的示例中，将主要描述在预测处理中使用包括主参考像素(或第一参考像素)的区域以及在校正处理中使用其他参考像素(或第二参考像素)的区域的情况。然而，应当理解，可以不单独提及在预测处理(第一预测)中使用的主参考像素也用于校正处理(第二预测)的情况，而是可以通过在以下描述的示例中进行替换或组合来实现这种情况。

在下文中，将描述根据水平模式的预测。

在左块被用作参考像素(图9中的Ref_L)的水平模式下，可以使用相应块的相邻像素(L0至L3)在水平方向上生成预测块。

此外，可以使用对应于(或平行于)预测方向的、与当前块相邻的参考像素(图9中的Ref_TL、Ref_T、Ref_TR)来生成(或校正)预测块。详细地，可以使用相应块的相邻像素(TL、T0至T3以及R0至R3)来校正预测值。

例如，可以使用与当前像素(f)和第一参考像素(L1)对应的一个或更多个第二参考像素(TL、T1)来执行校正。详细地，可以是从第二参考像素(T1和TL)(例如，T1-TL等)间接获得通过根据当前像素与第一参考像素之间的距离差(f与L1之间的x分量差)的像素值的变化(f-L1)来执行校正的情况。

在这种情况下，第二参考像素之间的距离差可以是一些示例(T1和TL)，并且应用两个或更多个像素的像素值变化(或斜率信息)的各种情况{例如，(T1-TL)/(R0-TL)，(T1×2+T0+T2)-TL等}可以是可能的。

总之，根据当前像素的位置(x和y分量。例如，基于特定坐标＜当前块的左上块例如图9中的a或图9中的TL的坐标>测量的x、y分量值等)和预测模式，在生成当前像素(f)的预测值中涉及的参考像素可以包括一个或更多个预设像素(L1、T1、TL)。在这种情况下，对于应用于每个参考像素的权重，可以考虑各种编码/解码元素以及当前像素的位置和预测模式，并且稍后将描述其一部分。

在垂直模式的情况下，省略详细描述，因为可以通过仅将不同的方向应用于水平模式的预测方法来得出预测方法。

在下文中，将看一下根据某些对角线模式(右上对角线)的预测。如图4的模式2至17所示，本示例的对角线模式是指通过使用左下作为预测的起始点而指向右上的定向模式，并且为了便于描述，假设该模式是模式2。在本示例的对角线模式以及其他对角线模式(左下对角线、右下对角线)中，将集中对仅利用整数单位的像素执行预测和校正的情况给出描述。

对角线模式是使用左块和左下块作为参考像素(图9中的Ref_L、Ref_BL)并且可以使用相应块的相邻像素(L0至L3、B0至B3)在对角线方向上生成预测块的情况。

此外，可以使用对应于预测方向(或与预测方向反向)的、与当前块相邻的参考像素(图9中的Ref_T、Ref_TR)来生成预测块。具体地，可以使用相应块的相邻像素(T0至T3、R0至R3)来校正预测值。

例如，可以使用与当前像素(f)和第一参考像素(L3)对应的一个或更多个第二参考像素(T3)来执行校正。具体地，这可以是通过利用由于第一参考像素(L3)与第二参考像素(T3)之间的线性内插而获得的像素值{例如，L3×w+T3×(1-w)等，其中w是取决于内插位置的权重}来估计当前像素而执行校正的情况。

在这种情况下，以上示例是用于校正的第二参考像素是一个的情况，并且使用两个或更多个第二参考像素的各种情况可以是可能的。例如，除了与第一参考像素对应的第二参考像素(T3)之外，还可以使用另外的第二参考像素(T2、R0)来校正第二参考像素{例如，T2^*。T2^*是(T3×2+T2+R0)等}，并且然后可以用于校正当前像素。

可以将多个第二参考像素的使用理解为在校正之前对相邻像素执行滤波(例如，低通滤波等)，以消除直接用于校正的第二参考像素中包括的量化误差等。在这种情况下，对于第一参考像素，假设在先前的帧内处理(或步骤)中执行类似的操作，例如参考像素滤波，但是此外，应当理解，也可以使用一个或更多个像素。

总之，根据当前像素的位置和预测模式，在生成当前像素(f)的预测值中涉及的参考像素可以包括一个或更多个预设像素(L3、T3)。在这种情况下，稍后将描述应用于每个参考像素的权重。

在上述示例中，使用参考像素(第一参考像素和第二参考像素两者)来进行帧内预测是与整数单位像素的预测模式相关的情况。然而，根据预测模式(例如，图4的第3模式)的方向性，不仅可以使用整数单位像素而且还可以使用小数单位像素来进行预测。

在该示例中，假设通过参考像素内插单元将第一参考像素配置在参考像素存储器中，直到小数像素。如果第二参考像素也能够从通过参考像素内插单元配置的参考像素存储器获得，则第二参考像素可以在与第一参考像素对应的位置处获取一个或更多个整数单位像素或者一个或更多个小数单位像素。

在参考像素内插单元中，如果在存储器中没有配置与预测方向对应的小数参考像素，则可能需要第二参考像素的内插处理。

例如，在图4中的预测模式3的情况下，当前像素(f)中使用的第一参考像素可以是小数单位并且可以具有两个或更多个参考像素之间的内插像素值{例如，L2×w+L3×(1-w)。其中w是取决于内插位置的权重}。相应的第二参考像素也可以是小数单位，并且可以具有两个整数单位参考像素(T3和R0)之间的内插像素值。

由于如以上示例中的第二参考像素的内插可能使得计算量的量增加，因此可以通过以下方法交替地获得第二参考像素。

例如，可以用相邻整数单位像素(T3、R0)中的一个来替换与第一参考像素(L2与L3之间)对应的第二参考像素(T3与R0之间)。具体地，可以用靠近第二参考像素的整数单位像素来替换第二参考像素。替选地，可以将权重分配给两个或更多个相邻的整数单位像素(T3和R0。或T2、T3和R0。或T3、R0和R1等)。详细地，可以将较高的权重分配给靠近第二参考像素的整数单位像素。由于该示例是适用于其他对角线模式的描述，因此在以下描述的示例中省略详细描述。

在某些对角线模式(左下对角线)中，省略了详细描述，因为在以上示例中，可以通过仅将不同的方向应用于对角线模式(右上对角线)的预测方法来得出详细描述。

在下文中，看一下根据一些对角线模式(右下对角线)的预测。本示例的对角线模式是指定向模式，如图4的模式19至49中那样，该定向模式以左上为预测的起始点指向右下，并且为了便于解释，假设该模式是模式34。

对角线模式是使用左块、左上块和上块作为参考像素(图9中的Ref_L、Ref_TL、Ref_T)的情况，并且可以通过使用相应块的相邻像素(TL、L0至L3、T0至T3)在对角线方向上生成预测块。

此外，可以使用对应于预测方向(或与预测方向正交)的、与当前块相邻的参考像素(图9中的Ref_BL、Ref_TR)来生成预测块。详细地，可以通过使用相应块的相邻像素(B0至B3、R0至R3)来校正预测值。

例如，可以使用与当前像素(k)和第一参考像素(TL)对应的一个或更多个第二参考像素(B1、R1)来执行校正。详细地，可以是通过利用由于第二参考像素(B1和R1)之间的线性内插而获得的像素值{例如，B1×w+R1×(1-w)等，其中w是取决于内插位置的权重}来估计当前像素而执行校正的情况。

在这种情况下，该示例是用于校正的第二参考像素之间的内插值的数目为一个的情况，并且使用两个或更多个内插值执行校正的各种情况可以是可能的。例如，可以另外执行参考像素(例如，B0与R1、或B3与T3)之间的线性内插，所述参考像素不与当前像素(k)的预测方向正交但与当前像素彼此对应(或对称)。即，对当前像素的预测产生影响的参考像素对应于第一参考像素(TL)和第二参考像素(B1和R1、B0和R1、B3和T3等)，并且一些第二参考像素(B1和R1、B0和R1、B3和T3)可以位于当前像素的对称位置。

总之，根据当前像素位置和预测模式，在生成当前像素(k)的预测值中涉及的参考像素可以包括一个或更多个预设像素(B1、R1)。在这种情况下，稍后将描述应用于参考像素的权重。

在下文中，将描述根据非定向模式的预测。

DC模式是使用左块和上块作为参考像素(图9中的Ref_L、Ref_T)的情况，可以在使用相应块的相邻像素获取预设值(例如，平均值等)之后生成预测块，但不限于此。

此外，可以使用与当前块相邻的附加参考像素(图9中的Ref_TL、Ref_BL、Ref_TR)来生成预测块。详细地，可以使用相应块的相邻像素(TL、B0至B3、R0至R3)来校正预测值。

例如，可以使用与当前像素相对应(或相邻)的一个或更多个参考像素(第一参考像素和第二参考像素)来执行校正。具体地，可以通过使用最靠近某些当前像素(g)的一个第一参考像素(T2)执行校正，可以通过使用最靠近某些当前像素(f)的两个或更多个第一参考像素(L1、T1)执行校正，可以通过使用与某些当前像素(b)相邻的两个或更多个第一参考像素(T0、T1、T2)执行校正，或者可以通过使用与某些当前像素(a)相邻的一个或更多个第一参考像素(L0、T0)和一个第二参考像素(TL)执行校正。

同时，平面模式是通过左块、右块、上块和下块的线性内插生成预测值的模式，并且在这些块中，左块和上块(图9中的Ref_L、Ref_T)可以使用相应块的相邻像素(L0至L3、T0至T3)作为参考像素。另一方面，可以在现有的参考像素区域(图9中的Ref_TL、Ref_T、Ref_TR、Ref_L、Ref_BL)中获得作为不可用位置的右块和下块，以将参考像素配置在相应位置。

例如，右块和下块可以分别利用一些相邻区域的数据(Ref_TR、Ref_BL)来填充或得出(例如，使用诸如通过原样复制R0、R1的一个像素来填充右块，或者利用通过对R0、R1等应用滤波获得的值来填充右块的方法)，并且可以从两个或更多个区域的数据来得出和填充(例如，使用Ref_TR和Ref_BL的数据来应用内插)。替选地，右块和下块可以按原样填充一些现有区域(Ref_TL、Ref_T、Ref_L)的数据，或者可以从这些数据中得出并填充(例如，在当前块的右下块位置填充位于Ref_TL、Ref_T、Ref_L中的一个或两个或更多个像素的加权平均，并且应用Ref_TR和Ref_BL的数据和内插)。

通过以上处理，可以使用左块、右块、上块和下块作为参考像素(图9中的Ref_T、Ref_L、Ref_TR、Ref_BL)以通过内插处理生成预测块。在这种情况下，在内插处理中，可以在垂直方向上和水平方向上执行第一内插，并且可以通过将加权平均应用于第一内插值来获得最终预测值，但是不限于此。

此外，可以使用与当前块相邻的附加参考像素(图9中的Ref_TL)来生成预测块。具体地，可以通过使用相应块的相邻像素(TL)来校正预测值。

例如，可以使用与当前像素(f)对应的一个或更多个参考像素(第一参考像素和第二参考像素)来执行校正。

详细地，在假设与当前像素对应的参考像素(T1)是虚拟像素的情况下，在水平方向上进行内插(使用TL和R0)之后，可以将获得的内插值与相应的参考像素(T1)进行比较，以根据当前像素的水平方向来校正第一内插值。

此外，在假设与当前像素对应的参考像素(L1)是虚拟像素的情况下，在垂直方向上进行内插(使用TL和B0)之后，可以将获得的内插值与相应的参考像素(L1)进行比较，以根据当前像素的垂直方向校正第一内插值。

可以使用经校正的第一内插值来获得最终预测值。即，通过在假设参考像素是虚拟像素之后获得的值，可以获得对通过在当前块的水平方向上和垂直方向上进行内插获得的最终预测值进行校正的效果。

总之，根据当前像素、预测模式等，在生成当前像素(f)的预测值中涉及的参考像素可以包括一个或更多个预设像素(TL、T1、L1、R0、B0)。在这种情况下，稍后将描述应用于每个参考像素的权重。

在下文中，将描述根据颜色复制模式的预测。

颜色复制模式是使用另一颜色空间中的相应块作为参考像素(图9中的Ref_C)并且可以使用相应块中的像素来生成预测块的情况。

此外，可以使用当前颜色空间中的相邻参考像素(Ref_TL、Ref_T、Ref_TR、Ref_L、Ref_BL)来生成预测块。具体地，可以通过使用相应块的相邻像素(Tl、T0至T3、R0至R3、L0至L3、B0至B3)来校正预测值。

在颜色复制模式的情况下，仅在上述预测模式与预测方法之间存在差异，并且可以以相同或类似的方式使用参考像素来生成(或校正)预测块。应当理解，即使在以下描述的示例中没有提及内容，与上述其他预测模式的校正相关的各种示例也可以以相同或类似的方式应用于颜色复制模式或得出。

例如，可以使用与当前像素对应的一个或更多个第二参考像素执行校正。具体地，可以使用与当前像素相邻的第二参考像素，而且可以使用具有与当前像素的x分量或y分量相同或相似的x分量或y分量的参考像素进行校正。在当前像素位于k处时，可以使用诸如<T2>、<L2>、<T2、L2>、<T1、T2、T3>、<L1、L2、L3>、<T1、T2、T3、L1、L2、L3>的参考像素来进行校正。

替选地，可以使用位于当前像素的水平方向、垂直方向或对角线方向(右下对角线、左下对角线、右上对角线等)的一个或更多个方向上的参考像素(数目为z。z是诸如1、2、3的整数，在每个方向上参考的像素数目可以是z，或者在所有方向上参考的像素数目可以是z)进行校正。具体地，在当前像素位于c处时，可以使用与垂直方向相邻的参考像素(例如，<T2>、<T1、T2、T3>)进行校正。在当前像素位于m处时，可以使用与水平方向相邻的参考像素(例如，<L3>、<L3、B0>)进行校正。在当前像素位于j处时，可以使用与水平方向和垂直方向上相邻的参考像素(例如，<T1，L2>、<T0、T1、T2、L1、L2、L3>)进行校正。此外，在当前像素位于k处时，可以使用一个或更多个对角相邻的参考像素(例如，<R0>、<B0>、<TL>、<R0、B0>、<TL、R0、B0>)进行校正。

总之，根据当前像素、预测模式等，在生成当前像素(f)的预测值中涉及的参考像素可以包括一个或更多个预设像素(ff、T1、L1、TL)。在这种情况下，稍后将描述应用于每个参考像素的权重。

通过以上示例，描述了根据预测模式使用各种参考像素执行预测的情况。尽管在假设应用校正的情况下描述了以上示例，但是可以根据编码/解码设置来确定是否校正当前块。

此外，在假设(当应用校正时)对要校正的像素不存在限制的情况下描述了以上示例，但是可以根据编码/解码设置对当前块中的所有或一些像素执行校正。

在这种情况下，当要校正的像素限于一些像素时，相应的像素可以以单个单位存在，可以以诸如垂直/水平/对角线为行单位存在，或者可以以子块为单位存在。例如，在图9中，校正目标可以被限制为诸如a、b和c的像素。校正目标可以被限制为诸如a到d或a、e、i的行和列(4×1，1×3)中的像素。校正目标可以被限制为诸如a到c以及e到g的矩形单元(3×2)中的像素。为了便于描述，将集中对以下情况给出描述：当要校正的像素限于一部分时，以行为单位确定要对其应用校正的像素。

此外，以上示例已经描述了作为影响预测值的元素的参考像素的数目、位置等是固定的情况，但是可以根据编码/解码设置来确定参考像素设置。此外，尽管以上示例简要描述了应用于影响预测值的每个参考像素的权重设置，但是可以根据编码/解码设置来确定参考像素的权重设置。

可以根据图像类型、颜色分量、预测模式、块尺寸/形状/位置、块宽度/长度比率、块中的像素位置等中的一个或者两个或更多个的组合来定义上述编码/解码设置。

在隐式地确定关于帧内预测(或校正)的详细设置的情况下提及了以上描述，但是可以显式地确定详细设置的情况，并且详细设置可以包括诸如序列、图片、片、图块、块等的单元中的相关信息。

图10是用于说明根据本发明的实施方式的图像编码方法的实现方式示例的流程图。详细地，图10表示假设帧内预测(使用第一参考像素)和校正处理(使用第一参考像素和第二参考像素)是分开的流程图。在该示例中，假设通过上述块划分单元获得具有M×N尺寸作为预测块尺寸的块。

出于选择最佳预测模式的目的，将预测模式候选组中的一个设置为候选预测模式(S1010)。通常，预测模式候选组的配置可以根据颜色分量而不同，并且可以在每个颜色分量中设置固定的一个预测模式候选组，但可以不限于此，并且各种候选组配置可以是可能的。

通过根据经由以上处理选择的候选预测模式执行帧内预测来生成预测块(S1020)。以上已经描述了预测块生成的示例，因此省略对其的描述。

根据当前块的尺寸和候选预测模式来确定用于帧内预测的校正设置(S1030)。在该示例中，假设针对校正设置考虑的编码元素是当前块尺寸和预测模式，但是已经提及可以通过考虑各种编码/解码元素来确定校正设置。

根据所确定的校正设置来执行针对预测块的校正处理(S1040)。在这种情况下，校正设置不仅可以包括是否执行校正，而且还可以包括参考像素的位置和数目、每个参考像素的权重、以及当执行校正时要校正的像素。

考虑到预测模式的每个候选的图像数据的编码成本来选择最佳预测模式(S1050)。此外，生成包括利用确定的最佳预测模式编码的图像数据和关于预测模式的信息的比特流(S1060)。

在这种情况下，图像数据可包括关于当前块的残差分量的数据，并且除了预测模式信息之外，还可以包括关于当前块的尺寸和形状的信息(例如，块划分信息等)。与残差分量相关的数据包括残差分量的扫描信息、预设块(当前块或当前块的子块)中是否存在非零残差系数、残差系数是否为0、残差系数的绝对值、符号信息等。

图11是用于说明根据本发明的实施方式的图像解码方法的实现方式的示例的流程图。

恢复从比特流中提取的图像数据和关于预测模式的信息(S1110)。然后，通过根据恢复的预测模式执行帧内预测来生成预测块(S1120)。根据当前块的尺寸和恢复的预测模式来确定用于帧内预测的校正设置(S1130)。根据通过以上处理确定的校正设置来校正预测块(S1140)。通过将重建的图像数据和预测块相加来重建当前块(S1150)。由于除了一些配置(例如，选择最佳预测模式等)之外，解码方法可以从编码方法中得出详细描述，因此以下描述的示例将集中于编码方法。

以下是用于帧内预测的详细设置的描述。可以考虑各种编码/解码元素以确定是否执行预测块的校正。以下是影响是否执行校准的因素的详细示例。

作为示例(1)，可以根据块的尺寸来确定是否执行校正。块的小尺寸可以是因为与对应块相邻的区域难以作为一个块来预测而执行块划分的情况。因此，由于当前块与相邻区域之间的图像特性可能不同，所以除了使用由相邻像素构成的参考像素的预测之外，附加校正可能不利地影响预测精度。当然，以上情况可能并不总是发生，反之亦然。此外，在显式地确定是否执行校正的情况下，可以不考虑以上情况。然而，在稍后描述的的示例中(包括该示例)，将考虑隐式地确定校正设置的事实来进行描述。

当块的尺寸等于或大于/大于某一尺寸时(M×N。例如2^m×2ⁿ，其中m和n是1或更大的整数，例如2至6)，可以执行校正。在这种情况下，可能存在块尺寸的一个或更多个边界值。

例如，可以不在小于16×16的块中执行校正，而在大于16×16的块中执行校正。其中在这里混用显式情况的配置也是可能的。

例如，可以不在8×8或更小的块中隐式地执行校正，可以在64×64或更大的块中隐式地执行校正，并且可以显式地确定是否在大于8×8至小于64×64的块中执行校正。

作为示例(2)，可以根据块的形状来确定是否执行校正。在本发明中，可以通过二叉树或三叉树的块划分来获得矩形形状(例如，64×8等)的块。在这种情况下，相邻块还具有水平/垂直长度比类似于对应块的高概率，并且除了使用相邻块内的像素进行预测之外，执行校正也可能对预测的精度产生负面影响。

当块形状为矩形时，并且如果水平/垂直长度比等于或大于/大于某一比率(k:1或1:k。k是1或更大的整数，例如2、3、4等)，则可以执行校正，另一方面，如果比率等于或小于/小于该某一比率，则不能执行校正。在此，块的水平/垂直长度比可以有一个或更多个边界值。

例如，在水平/垂直长度比小于4:1或1:4(诸如16×16或32×64)的块中不执行校正。在诸如8×32或64×16的块中，水平/垂直长度比大于4:1或1:4，可以执行校正。其中在这里混用显式情况的配置也是可能的。

例如，在具有诸如16×16(即，1:1)的正方形形状的块中，执行隐式校正。在具有水平/垂直长度比为4:1或1:4(例如64×8)的块中，不隐式地执行校正。在具有矩形形状并且比率小于4:1或1:4的块中，可以显式地决定是否执行校正。

作为示例(3)，可以根据预测模式来确定是否执行校正。应用校正可以旨在提高预测的精度。因此，意图利用在现有预测过程中未被补充的预测块的方向特性，并且一些预测模式可能具有难以利用的预测模式(或方法)。在显式情况下，这也可能是不同的情况，但是该示例也将关注隐式情况。可以以各种组合来配置执行(或允许)校正的预测模式。

例如，可以对定向模式的全部或部分执行校正，并且垂直模式、水平模式和对角线模式(图4中的模式2、模式34和模式66)等可以包括在可校正模式中。具体而言，诸如<垂直+水平>、<垂直+水平+34>、<垂直+水平+2+66>、<垂直+水平+2+34+66>等的配置可以是可能的。

此外，可以基于一些预测模式(垂直、水平、对角线模式等)对某一预定范围内的预测模式执行校正(例如，在模式a中，左侧包括m，右侧包括n。在这种情况下，m和n是1或更大的整数，例如1、2、3等)。作为详细的示例，在垂直模式(50)中，可以在48模式、49模式、51模式和52模式(m和n是2)中执行校正。

替选地，可以对非定向模式的全部或一部分进行校正，并且可以对颜色复制模式的全部或一部分进行校正。

总之，可以在预测模式候选组中以各种组合(一些定向模式+非定向模式、一些定向模式+颜色复制模式、一些定向模式+非定向模式+一些颜色复制模式等)对要校正的预测模式进行分类，并且当预测模式是分类的模式之一时，可以执行校正。此外，其中混用显式情况的配置也是可能的。

例如，在具有某些预测模式(具有类似方向性的模式，在该示例中包括右下对角线)的块中不能执行校正。可以在具有某些预测模式(具有类似方向性的模式，在该示例中包括非定向模式、颜色复制模式、水平和垂直模式)的块中执行校正。在某些预测模式(具有类似方向性的模式，在该示例中包括左下对角线和右上对角线)中，可以显式地确定是否执行校正。

在颜色复制模式的情况下，已经描述了可以获得一个或更多个相关信息，这意味着支持多种颜色复制模式。即，这意味着由于用于获得相关信息的详细设置的差异，可以支持多种颜色复制模式。在这种情况下，可以根据颜色复制模式的设置(即，如何获得相关性信息等)来确定是否执行校正。

图12是根据本发明的实施方式的用于颜色复制模式的详细设置的示例图。详细地，可以根据被参考(或比较)以获得相关性信息的区域(图中的阴影部分)来对图12的a至c进行分类。在该示例中，假定与获得其他相关信息有关的设置相同，并且要比较以获得相关性信息的区域的设置不同，但是可以将颜色复制模式划分为其他详细设置，并且还应当理解，可以对应地确定是否执行校正。

图12中的a至c被设置为这样的区域，在该区域中，与当前块对应的块的左块和上块、上块和右上块、左块和左下块被相互比较。换句话说，这意味着从相邻块获得相关性信息，并且通过将相关性信息应用于与当前块对应的块而获得的数据将被用于当前块的预测块。

参照图12的a，这可能意味着当前块和绑定与当前块相邻的左块和上块的区域以及不同颜色空间的对应块和绑定与对应块相邻的左块和上块的区域彼此具有高相关性。在该示例中，假定用于当前块的校正的参考像素被限制在当前块的左块和上块。

因此，图12中的a，可以预期，当获取另一颜色空间中的预测块并使用相邻块、左块和上块执行校正时，可以帮助提高预测精度。特别地，也可能出现减少在块之间的边界处发生劣化的效果。

参照图12的b和c，这可能意味着当前块和绑定与当前块相邻的上块和右上块的区域以及不同颜色空间的对应块和绑定与对应块相邻的上块和右上块的区域彼此具有高相关性。在这种情况下，使用左块和上块执行校正对于预测的精度可能是相当负面的。特别地，当在支持图12中的所有a、b和c的情况下(三种模式)选择b至c时，不利影响可能大得多。

在这种情况下，使用上块和右上块执行校正可能更有效，但是在该示例中，用于校正的参考像素可能局限于左块和上块，因此具有隐式地确定不执行校正的设置可能是有效的。

总之，可以对颜色复制模式的全部或一部分执行校正，这可以基于关于颜色复制模式的设置信息来确定。在这种情况下，由于设置信息可以在上述颜色复制模式中得出相关描述，因此省略了详细描述。

以上示例(编号1至3)指示通过单个编码/解码元素执行校正的情况，并且包括以上示例的相反情况的各种修改的示例可以是可能的。此外，可以确定是否通过组合两个或更多个元素来执行校正，并且在示例1至示例3中未提及的其他编码/解码元素也可以被认为包括在用于确定是否执行校正的编码/解码设置中。

以下是用于帧内预测的详细设置的描述。当执行预测块的校正时，块中的所有或一些像素可以被认为是校正目标。为了便于描述，假定仅一些像素被认为是校正目标，并且下面将描述影响校正目标像素的确定的元素的详细示例。

图13是示出根据本发明的实施方式的当前块中的要校正的像素的各种配置示例的概念图。参照图13，块中的像素可以由Z_x,y表示，并且块中的行和列可以分别由R_k和C_k表示。假定当要校正的像素被单独表示时，其被表示为Z，并且当被表示为行单位时，其被表示为R和C。

作为示例(1)，可以根据块的尺寸来确定要校正的像素。在诸如64×64的块的情况下，参考像素与块中的像素之间的最大距离可以是63(基于水平/垂直)，而在诸如8×8的块的情况下，其可以是7。从以上示例可以看出，需要考虑块的尺寸来确定要校正的像素。当然，同样，需要搁置并了解显式情况。

可以基于块的尺寸(2^M×2^N)来确定要校正的像素和位置，并且可以设置与块的尺寸成比例的设置。

例如，与块的尺寸成比例(例如，要校正的像素的范围可以与当前块的尺寸成比例，或者当表示为2的指数时可以与2的指数成比例)地获得的某一区域(例如，2^M×2^S、2^T×2^N。在这种情况下，T和S是M和N减去v、w，v和w是诸如0、1、2等的整数)可以被确定为要校正的像素。具体而言，如图13所示，当当前块为4×4时，要校正的像素可以是由R₀和C₀表示的七个像素(当基于块的左上设置时为4×1、1×4)。在这种情况下，可能存在与块的尺寸有关的一个或更多个边界值，这可能影响要校正的像素的确定。

例如，当块的尺寸等于或小于/小于某一尺寸(A×B。例如，2^a×2^b，其中a和b是大于或等于1的整数，例如2到6)时，可以与块的尺寸成比例地将某一区域确定为要校正的像素，并且当尺寸等于或大于/大于某一尺寸时，可以将预设区域确定为要校正的像素。

作为另一示例，当块的尺寸为4×4或更小时，可以根据块的尺寸确定要校正的像素(例如，当尺寸为4×4时，由R₀、R₁和C₀、C₁表示的12个像素)，并且当尺寸为4×4或更大时，可以将要校正的像素确定为预设区域(以与当应用边界值时要校正的像素相同的方式，由R₀、R₁和C₀、C₁表示的12个像素)。在这种情况下，其中混用显式情况的配置也是可能的。对此的描述可能导致上述各种示例中的相关描述。

作为示例(2)，可以根据块形状确定要校正的像素。对于诸如128×16的块，考虑参考像素和基于右下像素的块中的像素。在这种情况下，参考像素与右下像素之间的最大距离可以是垂直方向上为15并且水平方向上为127。以上示例还可以是指示需要根据块的形状来确定要校正的像素的情况。

可以基于块的形状(或者当当前块为2^M×2^N时，块的水平/垂直长度比为2^M:2^N或M:N)来确定要校正的像素和位置，并且可以设置与块的形状成比例的设置。

例如，可以将根据块的水平/垂直长度比(在该示例中与M:N相比)获得的某一区域(M×N或2^S×2^T。在这种情况下，S和T是M和N＜其中M和N是块长度的指数值＞减去v、w。v和w是0、-1、1等的整数。该示例被描述为M×N)确定为要校正的像素。具体地说，尽管图13中未说明，但是当当前块为8×4时，要校正的像素可以是由R0至R2(3行)及C0至C1(2列)表示的26个像素。在这种情况下，可能存在与块的水平/垂直长度比相关的一个或多个边界值，这可能影响对要校正的像素的确定。

例如，当块的水平/垂直长度比等于或小于/小于某一比率(k:1或1:k。k是大于或等于2的整数，3、4等)时，可以与块的水平/垂直长度比成比例地将某一区域确定为要校正的像素，并且当比率等于或大于/大于某一比率时，可以将预设区域确定为要校正的像素。

作为附加示例，当块的水平/垂直长度比为2:1(或1:2)或更小时，可以根据块的水平/垂直长度比确定要校正的像素(与以上示例相同地设置，即，2行和1列或1行和2列)，并且当比率大于2:1(或1:2)时，可以将要校正的像素确定为预设区域(当其对应于边界值时，其应用与要校正的像素设置相同的设置)。在这种情况下，其中混用显式情况的配置也是可能的，并且可以从上述示例中得出相关描述。

作为示例(3)，可以根据预测模式来确定要校正的像素。取决于预测模式(或方法)，可以考虑参考像素与块中的像素之间的距离。当考虑块的右上像素参考时，上像素是参考像素，但是在诸如右上对角线的定向模式的情况下，与预测中实际参考的像素之间可能存在许多距离差。如上所述，可能需要根据预测模式考虑要校正的像素。

可以基于预测模式的详细设置(预测方法、方向性、参考像素位置等)来确定要校正的像素。下面通过对定向模式、非定向模式和颜色复制模式的分类来描述每个预测模式的情况。在稍后描述的示例中，用于指示块内的像素和参考像素的图参照图9，并且用于指示要校正的像素的图参照图13。即使没有提及附图编号，两个图的示例块的尺寸也相同，并且附图标记没有交叠，因此，通过每个图中的对应的附图标记，能够得出详细的示例。

在(用于预测或校正的)定向模式中，可以基于参考像素的位置、要校正的像素与参考像素之间的距离以及预测模式的方向(或角度)来确定要校正的像素。

在一些预测模式(左下对角线)中，用于预测像素m的第一参考像素可以是R0。由于与用于预测的第一参考像素的距离远，因此可以通过与预测方向对应的第二参考像素(在该示例中为B0)来执行校正。同时，在像素d的情况下，由于与对应于预测方向的第二参考像素(在该示例中为B0)的距离远，所以可以不执行校正。即，可以从校正目标中排除与第一参考像素相邻的区域，并且可以在校正目标中包括与第一参考像素不相邻的区域。

例如，在诸如左下对角线的定向模式的情况下，对应于C0和C1(或R2和R3)的参考像素属于校正目标，而其他像素可以从校正目标中排除。通过改变方向和预测模式，可以得出诸如右上对角线的定向模式，因此省略了详细描述。

在一些预测模式(右下对角线)中，用于预测像素a的第一参考像素可以是TL。由于与预测方向对应的第二参考像素(在该示例中为T1、L1)之间的距离近，因此可以通过该距离执行校正。同时，在像素p的情况下，由于与预测方向对应的第二参考像素的距离也远，所以可以不执行校正。即，与第一参考像素相邻并且与第二参考像素相邻的区域可以包括在校正目标中，并且在其他情况下可以从校正目标中排除。

例如，在诸如右下对角线的定向模式中，对应于C₀、C₁、R₀、R₁的参考像素属于校正目标，而其他像素可以从校正目标中排除。

在一些预测模式(水平模式)中，用于预测像素d的第一参考像素可以是L0。当将L0与用作第一参考像素的像素a至c进行比较时，与第一参考像素的距离可能是远的，但是与对应于预测方向的第二参考像素的距离(在该示例中为T3、TL，但是为了比较变化程度，将TL与L0进行比较，并且将T3与像素d进行比较，因此假定与T3的距离)可能是近的。即，与第二参考像素相邻的区域，无论其是否与第一参考像素相邻，都可以包括在校正目标中，并且在其他情况下可以从校正目标中排除。

例如，在诸如水平模式的定向模式中，对应于R₀、R₁的参考像素可以包括在校正目标中，而在其他情况下，参考像素可以从校正目标中排除。由于可以通过改变预测模式和方向来导出得如垂直模式的定向模式，因此省略了详细描述。

在非定向模式中，可以基于参考像素的位置、目标像素与参考像素之间的距离以及预测方法来确定要校正的像素。

在一些预测模式(DC模式)中，可以使用利用从多个相邻像素而不是单个参考像素得出的值来预测像素a至p的方法。在使用单个参考像素的校正的情况下，可以基于目标像素与第二参考像素之间的距离对相邻像素执行校正。即，与第二参考像素相邻的区域可以包括在校正目标中，而其他区域可以从校正目标中排除。

例如，在诸如DC模式的非定向模式的情况下，对应于R₀和C₀的参考像素可以包括在校正目标中，而在其他情况下，参考像素可以从校正目标中排除。

在一些预测模式(平面模式)中，第一参考像素可以被分类成多个类别。在一些类别a(左块和上块)中，它可以是包括可以在实际对应位置中使用的数据的区域。此外，在一些类别b(右块和下块)中，在对应位置处没有可用的数据，因此它可以是包括以各种方式得出的数据的区域。在这种情况下，可以对与包括类别1的区域相邻的像素执行校正。即，与第一参考像素相邻的区域并且与被分类为类别a的类别相邻的区域可以包括在校正目标中，而其他区域可以从校正目标中排除。

例如，在诸如平面模式的非定向模式的情况下，其中R₀、R₁和C₀、C₁交叠的参考像素(Z_0,0、Z_1,0、Z_0,1、Z_1,1)可以包括在校正目标中，而在其他情况下，其可以从校正中排除。作为另一示例，对应于R₀、R₁和C₀、C₁的参考像素可以包括在校正目标中，而在其他情况下可以从校正目标中排除。在这种情况下，交叠参考像素(Z_0,0、Z_1,0、Z_0,1、Z_1,1)可以用于校正，因为与每个像素的左方向和上方向对应的像素对应于第二参考像素，并且非交叠参考像素可以用于校正，因为与每个像素的左(Z_0,2)或上(Z_2,0)方向对应的像素对应于第二参考像素。

在定向/非定向模式的示例中，可以存在基于x分量和y分量的一个或更多个边界值(例如，如果x/y分量等于或大于/大于(或等于或小于/小于)基于某一坐标的p/q<假定它在这里是左上坐标>，则它包括在校正目标中)以区分要校正的像素。此外，可以设置各种边界值以确定要校正的像素。

多个示例限于用于选择要校正的目标的一些示例，并且各种修改的示例可以是可能的，例如其中要校正的像素所在的位置位于块中的相对位置或垂直/水平对称位置处。此外，以上示例可以应用于与稍后描述的颜色复制模式相同或类似的应用。

在颜色复制模式的情况下，可以基于参考像素的位置、像素与参考像素之间的距离以及颜色复制模式的一些设置(例如，颜色复制模式选择信息、相关性信息获取位置等)来确定要校正的像素。

以下，假定通过参考如图12的a所示的左块和上块来获得相关性信息。如果如图12的b和c所示的要比较以获得相关性信息的区域不同，则可以从图12的a得出相关描述。

在颜色复制模式中，可以通过对应于垂直方向的一个或更多个第二参考像素(在该示例中为T3，或T2、T3、R0)来校正像素d。同时，l像素可以对应于在垂直方向上与像素d相同或相似的第二参考像素，但是因为与第二参考像素的距离远，所以可以不执行校正。即，在垂直方向上与第二参考像素相邻的区域可以包括在校正目标中，而与第二参考像素不相邻的区域可以从校正目标中排除。

例如，对应于R₀、R₁的参考像素属于校正目标，而属于R₂、R₃的像素可从校正目标中排除。在该示例中，用于对校正目标进行分类的边界值(R_w中为w。或Z_x,y中为y。在这种情况下，诸如w或y的边界值是等于或大于/大于0的值～等于或小于/小于块的垂直长度的值)可以是2。

在颜色复制模式中，可以通过与水平方向对应的一个或更多个第二参考像素(在该示例中为L3。或者L2、L3、b0)来校正m像素。另一方面，o像素可以与在水平方向上与像素m相同或相似的第二参考像素相对应，但是因为与第二参考像素的距离远，所以可以不执行校正。即，在水平方向上与第二参考像素相邻的区域可以包括在校正目标中，而与第二参考像素不相邻的区域可以从校正目标中排除。

例如，对应于C0、C1的参考像素属于校正目标，而属于C2、C3的像素可从校正目标中排除。在该示例中，用于对校正目标进行分类的边界值(C_w中为w，或Z_x,y中为x。在这种情况下，诸如w或x的边界值是等于或大于/大于0的值～等于或小于/小于块的水平长度的值)可以是2。

在颜色复制模式中，可以通过与垂直方向和水平方向对应的相应的第二参考像素来校正像素f、h、n、和p。在像素f的情况下，由于在垂直方向和水平方向上与第二参考像素(在该示例中为T1和L1)的距离近，所以可以通过垂直方向和水平方向上的对应的第二参考像素执行校正。在像素h的情况下，在垂直方向上与对应的第二参考像素(在该示例中为T3)的距离近，但是由于在水平方向上与对应的第二参考像素(在该示例中为L1)的距离远，因此可以通过在垂直方向上的对应的第二参考像素执行校正。在像素n的情况下，与对应于水平方向的第二参考像素(在该示例中为L3)的距离近，但是由于与对应于垂直方向的第二参考像素(在该示例中为T1)的距离远，所以可以通过对应于水平方向的第二参考像素执行校正。在像素p的情况下，由于在垂直方向和水平方向上与第二参考像素的距离远，所以可以不执行校正。

例如，对应于C₀、C₁和R₀、R₁的参考像素属于校正目标，而其他像素可以从校正目标中排除。在该示例中，用于对校正目标进行分类的边界值(在Z_x,y中为x，y。在这种情况下，x的边界值是等于或大于/大于0的值～等于或小于/小于块的水平长度的值，并且y的边界值是等于或大于/大于0的值～等于或小于/小于块的垂直长度的值)在水平方向和垂直方向上可以分别是2。

在这种情况下，要校正的区域可以被分类为在水平方向和垂直方向上应用的部分(Z_0,0，Z_1,0，Z_0,1，Z_1,1)、仅在水平方向上应用的部分(Z_2,0，Z_2,1，Z_3,0，Z_3,1)以及仅在垂直方向上应用的部分(Z_0,2，Z_0,3，Z_1,2，Z_1,3)。即，可能意味着所有区域属于校正目标，但是可以对用于校正的第二参考像素进行分类。替选地，可以仅将水平方向和垂直方向上共同应用的部分限制为校正目标，并且可以设置各种边界值。

图14是用于说明根据本发明的实施方式的在颜色复制模式中执行校正的情况的示例图。

参照图14，示出了用于对校正目标进行分类的边界值在水平方向和垂直方向上为1的情况的示例。在这种情况下，当仅在水平方向或垂直方向上应用校正时，其意味着图14中的a和c，并且当在水平方向和垂直方向上共同应用校正时，其意味着图14中的b。这表明可以如上所述不同地配置用于校正的第二参考像素。

在颜色复制模式中，可以通过在垂直方向、水平方向和对角线方向中的一个或更多个方向上的对应的第二参考像素(T1、L1、TL、T3、L3)来校正像素f。同时，在像素p的情况下，由于与对应的第二参考像素(在每个示例中为T3、L3、TL、R3、B3)的距离远，所以可以不执行校正。

例如，对应于Z_0,0到Z_3,0、Z_0,1到Z_2,1、Z_0,2、Z_1,2、Z_0,3的参考像素属于校正目标，而其他像素从校正目标中排除。在该示例中，用于对校正目标进行分类的边界值(在w中为Z_x,y。w可以是通过x与y的和进行比较的值。w是等于或大于/大于0的值～等于或小于/小于水平长度与垂直长度的和的值)可以是3。在这种情况下，尽管给出了要校正的区域除以水平长度与垂直长度的和的示例，但是可以设置各种其他边界值。

在颜色复制模式的情况下，与现有的预测模式不同，在除了当前块的相邻区域之外的颜色空间中获得预测值。通常，基于基于当前像素的块扫描顺序可获得的(或参考的)区域可以限于目标像素的左、上、左上、右上以及左下方向。

然而，在颜色复制模式的情况下，由于在不同颜色空间的对应块中获得当前块的所有预测像素，所以也可以在校正过程中使用它们。在这种情况下，可以在当前像素的左、右、上、下、左上、右上、左下以及右下方向获取用于预测的数据。

图15是用于说明根据本发明的实施方式的在颜色复制模式中执行校正的情况的示例图。

参照图15，其示出了使用从不同颜色空间的对应块预测的像素以及当前块的相邻像素来校正当前块的情况。即，对应块是指作为第二参考像素以及第一参考像素用于帧内预测的情况。图15中的a至c示出了对与当前块的上块、左上块以及左块相邻的像素执行校正的情况，并且将主要参考图15中的a来描述。

图15中的a示出了使用在像素c的左、右、上、下、左上、右上、左下、右下等方向上相邻的像素作为第二参考像素来执行校正的情况。其中，T1、T2、T3可以是与当前块相邻的像素，而b、d、f、g、h可以是在不同颜色空间的对应块中存在(或得出)的像素。如图所示，各种第二参考像素配置可以是可能的，并且将在所有方向相邻的像素设置为要校正的像素的第二参考像素。

例如，用于各种校正的第二参考像素配置(例如垂直方向(T2，g)、水平方向(b，d)、十字形(T2，b，d，g)以及X形(T1，T3，f，h))可能以目标像素为中心。在这种情况下，可以考虑各种编码/解码要素，例如在要校正的像素块中的位置，来确定第二参考像素配置。

为了校正，可以不同地设置应用于与目标像素相邻的像素的权重，并且应用于目标像素的权重可以是a，而应用于相邻像素的权重可以是b(当总权重和是1时，<1-a>除以相邻像素的数量)。在这种情况下，可以将应用于相邻像素的权重设置为相同或不同。此外，应用于a的权重可以具有正值，并且应用于b的权重可以具有正值或负值。

在该示例的颜色复制模式中，当对应块的像素以及当前块的相邻区域被用于校正时，相同或类似的配置可以应用于下面描述的示例，并且将省略其详细的描述。

在以上示例中，用于在颜色复制模式中获得相关性信息的区域可以对应于当前块的左块和上块。尽管通过以上示例已经描述了用于校正的第二参考像素的区域不受限制的情况，但是限于当前块的左块和上块的示例也可以是可能的。已经通过图12描述了基于获得相关性信息的位置确定是否校正的情况的示例。在该示例中，假定执行校正，但是继续描述可以自适应地确定要校正的像素的情况。

参照图12的b(或c)，其示出了通过参照当前块的上块、右上(或左、左下)块以及对应块的上块和右上(或左、左下)块来获得相关性信息的颜色复制模式的示例。

在这种情况下，可以基于用于获得相关性信息的相邻区域来确定要校正的像素。

例如，图12中的b，与当前块的上块和右上块相邻的区域(例如，R₀、R₁、C₃、C₂等)可能包括为要校正的像素，而其他区域可能不包括为要校正的像素。同时，图12中的c，与当前块的左块和左下块相邻的区域(例如，C₀、C₁、R₃、R₂等)可能被包括为要校正的像素，而其他区域可能不包括为要校正的像素。

在图12的b中，作为用于选择校正目标的边界值(当选择R₀、R₁时)，R_w中的w可以被设置为小于2，或者作为用于选择校正目标的边界值(当选择C₃、C₂时)，C_w中的w可以被设置为2或更大。图12中的c可以从前面的示例得出，并且因此省略了详细描述。此外，在本示例中，通过上述各种实施方式以及以上示例提及的边界值设置可以应用于相同或相似的情况。

在以上示例的情况下，描述了根据作为颜色复制模式的详细设置之一的相关性信息获取区域的位置来选择要校正的像素的情况，但是根据其他颜色复制模式的详细设置来选择要校正的像素的各种其他情况也可以是可能的。

此外，多个示例限于用于选择要校正的目标的一些示例，并且各种修改的示例可以是可能的，例如其中要校正的像素所在的位置位于块中的相对位置或在垂直/水平对称位置。此外，以上示例可以应用于与上述现有预测模式相同或类似的应用。

通过上述多个示例，考虑根据块的尺寸、形状、预测模式等来确定用于选择要校正的像素的编码/解码设置的情况以及各种其他元素，来确定编码/解码设置。此外，除了如以上示例中那样根据单个编码/解码元素来定义之外，还可以根据两个或更多个元素的组合来定义编码/解码设置。在这种情况下，也可以考虑多个编码/解码元素来确定已经通过以上示例描述的用于选择要校正的像素的边界值设置。即，这意味着可以根据按照一个或更多个编码/解码元素定义的编码/解码设置来确定用于选择要校正的像素的最终边界值设置。

以下，将描述通过第一参考像素生成的预测像素值(或第一预测像素值)与通过第一参考像素或第二参考像素生成的预测校正值(或第二预测像素值或最终预测像素值)的关系设置。在这种情况下，关系设置可能意味着应用于每个像素的权重设置。

以下是使用一个或更多个参考像素执行帧内预测的等式的示例。

[等式3]

pred_sample^*(i,j)

＝pred_sample(i,j)×W_P+ref_sample_a(a_i,a_j)×W_a+ref_sample_b(b_i，b_j)×W_b+ref_sample_c(c_i，c_j)×W_c

在以上等式中，pred_sample(i，j)和pred_sample*(i，j)是指(i，j)处的预测像素值(或第一预测像素值)和预测校正值(或最终预测像素值)，并且ref_sampel_a至ref_sample_c是指在预测像素校正过程中使用的参考像素。在这种情况下，(a_i，a_j)、(b_i，b_j)、(c_i，c_j)指示在校正过程中使用的每个参考像素的位置。此外，w_p、w_a、w_b、w_c意味着在校正预测像素的过程中应用于每个像素的权重。

在预测像素校正过程中使用(或参考)的像素数量是k(k是0或更大的整数，例如1、2、3等)，取决于编码/解码设置，其可以是固定的或自适应的。尽管可以根据各种编码/解码元素来确定在校正过程中使用的参考像素的数量，但是假定在该示例中使用多达三个像素。当使用少于三个参考像素时，假定一些参考像素用零填充或者一些参考像素的权重用零填充。

当对预测块执行校正时，使用以上等式中不为0的至少一个参考像素(除了当实际参考像素值为0时之外)进行校正，并且参考像素的权重可以不为0，并且当不执行校正时，可以在以上等式中用0填充所有参考像素，或者可以针对所有参考像素将权重设置为0。例如，可以根据预测模式获得用于校正的参考像素位置，但是当确定不通过其他编码/解码元素(例如，块的尺寸)执行校正时，这意味着将应用于参考像素的权重设置为0的处理是可能的。即，可以理解，预测像素值(第一预测像素值)被确定为预测校正值(第二预测像素值或最终预测像素值)。

(当对预测块进行校正时)对于包括在要校正的范围中的像素，在以上等式中，可以使用至少一个不为0的参考像素进行校正，并且参考像素的权重可以不为0。对于不包括在要校正的范围中的像素，在以上等式中，所有参考像素可以用零填充，或者所有参考像素的权重可以被设置为零。

虽然该示例对预测块执行校正，并且假定块中的所有像素都包括在校正目标中，但是应当理解，可以将一些像素包括在校正目标中的情况与以下描述的内容组合地应用。

用于校正的参考像素可以根据预测模式而不同地配置。假定基于预测块(M×N)的左上坐标(0,0)来测量(i,j)、(a_i,a_j)、(b_i,b_j)、(c_i,c_j)。以下示出了根据预测模式设置(a_i,a_j)、(b_i,b_j)、(c_i,c_j)的各种情况。

例如，当预测模式是垂直模式时，可以设置(-1,-1)、(-1,j)、(i,-1)或(-1,-1)、(-1,j)、(-1,N-1)。替选地，当预测模式是水平模式时，可以设置(-1,-1)、(i,-1)、(-1,j)或(-1,-1)、(i,-1)、(M-1,-1)。

替选地，当预测模式是右上对角线模式时，可以设置(-1,-1)、(i+j+1,-1)、(-1,i+j+1)或(i+j,-1)、(i+j+1,-1)、(i+j+2,-1)。替选地，当预测模式是左下对角线模式时，可以设置(-1,-1)、(-1,i+j+1)、(i+j+1,-1)或(-1,i+j)、(-1,i+j+1)、(-1,i+j+2)。

替选地，当预测模式是右下对角线模式时，可以设置(-1,-1)、(i+j+1,-1)、(-1,i+j+1)或(i-j-1,-1)、(i+j+1,-1)、(-1,i+j+1)<如果i大于或等于j>或者(-1,j-i-1)、(-1,i+j+1)、(i+j+1,-1)<如果i小于j>。

替选地，当预测模式是DC模式时，可以设置(-1,-1)、(-1,j)、(i,-1)或(-1,-1)、(M,-1)、(-1,N)。替选地，当预测模式是平面模式时，可以设置(-1,-1)、(-1,j)、(i,-1)或(-1,-1)、(M,-1)、(-1,N)。

替选地，当预测模式是颜色复制模式时，可以设置(-1,-1)、(i,-1)、(-1,j)或(i-1,j)、(i,j)、(i+1,j)或(i,j-1)、(i,j)、(i,j+1)或(i-1,j-1)、(i,j)、(i+1,j+1)或(i-1,j+1)、(i,j)、(i+1,j-1)。

以上示例假定根据一些预测模式确定的参考像素位置，并且在与预测模式相邻的模式(例如，定向模式。假定图4中的模式50，相邻的模式49、模式51等)的情况下，与根据预测模式确定的参考像素位置(例如，假定<i,-1>)相邻的参考像素(例如，<i+1,-1>、<i-1,-1>、<i+2,-1>等)可以用于校正过程中。

此外，包括以上示例的各种参考像素配置可以是可能的。在这种情况下，即使在根据每个预测模式配置如以上示例中的参考像素的情况下，也可能不意味着总是将除0之外的权重应用于对应的参考像素(或所有参考像素)。

可以基于预测块(M×N)的水平长度(M)和垂直长度(N)(或者当将长度表示为p的幂时的指数值，p是例如2或4的整数，在该示例中基于长度进行解释)、目标像素的位置以及参考像素的位置，来设置应用于校正过程中所使用的参考像素的权重。替选地，可以基于预测块的水平长度和垂直长度以及目标像素的位置来设置它，并且将基于此开发稍后描述的示例。

在这种情况下，假定基于预测块(M×N)的左上坐标(0,0)来测量像素的位置。即，可以通过从对应的像素减去块中的左上像素的x分量和y分量来测量像素的位置。

在校正过程中使用的参考像素可以属于当前块在水平方向上相邻的块(例如，图9中的Ref_T、Ref_TR等)、在垂直方向上相邻的块(例如，图9中的Ref_L、Ref_BL等)以及在水平方向和垂直方向上相邻的块(例如，图9中的Ref_TL)。

作为设置权重的示例，可以基于当前块的垂直长度(或水平长度与垂直长度的总和或平均值)以及目标像素的y分量来设置应用于水平方向上相邻块中的参考像素的权重，可以基于当前块的水平长度(或水平长度与垂直长度的总和或平均值)以及目标像素的x分量来设置应用于垂直方向上相邻块中的参考像素的权重，并且可以基于当前块的水平长度和垂直长度(或水平长度与垂直长度的总和或平均值)以及目标像素的x分量和y分量来设置应用于与水平方向和垂直方向相邻的块中的参考像素的权重。此外，可以考虑与以上示例相反的情况或其他变化来确定权重设置，并且以下描述了基于示例应用权重设置的情况。

例如，当前块的预测模式是颜色复制模式，尺寸为M×N块，并且当位于(i,j)处的像素被校正时，应用于参考像素的权重可以如下设置。在该示例中，假定w_a至w_c的权重被应用于位置(-1,j)、(i,-1)、(-1,-1)处的参考像素。

S＝((Log₂M+Log₂N-2)>>2)

w_a＝32>>((i<<1)>>S)/w_b＝32>>((j<<1)>>S)

w_c＝(w_a>>4)+(w_b>>4)/w_p＝64-(w_a+w_b-w_c)

在以上等式中，S是基于当前块的水平长度和垂直长度获得的权重调整元素，w_a是基于S和目标像素的x分量获得的权重，w_b是基于S和目标像素的y分量获得的权重，w_c是基于S、w_a和w_b获得的权重。在w_c的情况下，其可能意味着基于当前块的水平长度和垂直长度以及目标像素的x分量和y分量获得的权重。可以通过将通过以上等式获得的权重应用于校正过程等式(然而，在等式中，移位操作必须向右执行6)，来获得预测校正值。

在S的情况下，它可以具有固定的一个值，或者可以自适应地选择多个候选中的一个候选。在这种情况下，在自适应情况下，可以通过对用于获得S的等式应用修改(例如，对S进行减或加1、2等)的方法来获得多个S候选。

尽管已经通过以上示例描述了S的自适应情况，但是可以固定地或自适应地确定各种其他权重设置。在固定的情况下，可能意味着图像中的一个权重设置被用于每个块而不管编码/解码设置，而在自适应的情况下，可能意味着权重设置根据编码/解码设置来确定并且以块为单位来使用。在这种情况下，编码/解码设置可以由诸如图像类型、颜色分量、块尺寸/形状/位置、预测模式等的一个或更多个元素来定义。

此外，对于权重设置，不仅可以支持固定到一个块的一个设置，而且可以支持两个或更多个设置，并且作为修改的示例可以在一个块中自适应地选择。如上所述，可以对块的一些区域执行校正而不对块的另一些区域执行校正。作为扩展的示例，块中的一些区域不被校正，而块中的另一些区域(n，N是大于或等于1的整数)可以根据每个区域的权重设置来校准。

例如，在64×64块的情况下，右下区域(在该示例中为图13中的Z_2,2、Z_3,2、Z_2,3、Z_3,3)与参考像素的距离很长，因此不执行校正。在左上区域(图13中的R₀和C₀)，由于与参考像素的距离短，因此可以根据权重设置A执行校正(例如，使校正的强度更强，使用以上等式中的S)。由于在两个区域的中间区域(图13中的Z_1,1、Z_2,1、Z_3,1、Z_1,2、Z_1,3)中，参考像素距离是中等的，因此可以根据权重设置B来执行校正(例如，将校正强度设置为中间，在以上等式中将S加1)。

替选地，在16×16块的情况下，由于在右下区域中参考像素距离远(与以上示例相同)，因此可以不执行校正。在左上区域(图13中的R₀、R₁、C₀、C₁)中，由于与参考像素的距离短，因此可以执行校正。替选地，在4×4块的情况下，由于所有区域都与参考像素的距离长，所以可以执行校正。

以上示例示出了其中块中的权重设置根据块的尺寸而自适应调整的一些情况，并且各种修改的示例是可能的，而不限于以上示例。此外，在以上示例中，可以存在将每个区域分开的一个或更多个特定边界值条件。此外，根据要校正的像素的位置以及以上示例中提及的S，可以在一个块中自适应地设置其他权重设置(例如，参考像素的数量、参考像素的位置等)。

预测模式确定单元执行用于在多个预测模式候选组中选择最佳模式的处理。通常，可以通过使用考虑块的失真{例如，当前块和重建块的失真，SAD(绝对差的和)、SSD(平方差的和)等}的率失真技术以及根据对应的模式生成的比特量来确定编码成本方面的最佳模式。基于通过以上处理确定的预测模式生成的预测块可以被发送到减法单元和加法单元。

为了确定最佳预测模式，可以搜索存在于预测模式候选组中的所有预测模式，或者可以通过另一决策过程来选择最佳预测模式，以降低计算量/复杂度。例如，在第一步骤中，对于帧内预测模式的所有候选，选择在图像质量劣化方面具有良好性能的一些模式，并且在第二步骤中，可以通过不仅考虑图像质量劣化而且考虑针对在第一步骤中选择的模式生成的比特量来选择最佳预测模式。除了以上方法之外，可以应用各种降低计算量/复杂度的方法。

此外，预测模式确定单元可以是通常仅包括在编码器中的配置，但是也可以是根据编码/解码设置包括在解码器中的配置。例如，在后一种情况下，在模板匹配被包括为预测方法或得出当前块的相邻区域中的帧内预测模式的方法情况下，使用在解码器中隐式获取预测模式的方法。

预测模式编码单元可以对通过预测模式确定单元选择的预测模式进行编码。在预测模式候选组中，可以对与预测模式对应的索引信息进行编码，或者可以通过预测预测模式来对关于预测模式的信息进行编码。前者可以是应用于亮度分量的方法，而后者可以是应用于色度分量的方法，但不限于此。

当预测和编码预测模式时，预测模式的预测值(或预测信息)可以被称为最可能模式(MPM)。MPM可以在一个预测模式中配置或者可以在多个预测模式中配置，并且MPM的数量(k。k为大于或等于1的整数，例如2、3、6)可以根据预测模式候选组的数量来确定。当MPM配置有多个预测模式时，其可以被称为MPM候选组。

MPM是被支持以有效地对预测模式进行编码的概念。实际上，候选组可以被配置为具有被生成为当前块的预测模式的概率高的预测模式。

例如，MPM候选组可以被配置有预设的预测模式(或统计上频繁的预测模式。DC、平面、垂直、水平以及一些对角线模式等)、相邻块(左块、上块、左上块、右上块、左下块等)的预测模式等。在这种情况下，可以从图9中的L0至L3(左块)、T0至T3(上块)、TL(左上块)、R0至R3(右上块)以及B0至B3(左下块)获得相邻块的预测模式。

如果可以从相邻块(例如，左块)中的两个或更多个子块位置(例如，L0、L2等)配置MPM候选组，则可以根据预定义的优先级(例如，L0——L1——L2等)在候选组中配置对应块的预测模式。替选地，如果无法从两个或更多个子块位置配置MPM候选组，则可以在候选组中配置与预定位置(例如，L0等)对应的子块的预测模式。具体而言，在相邻块中，L3、T3、TL、R0和B0位置的预测模式可以被选择作为相邻块的预测模式，并且包括在MPM候选组中。以上描述是其中在候选组中配置了相邻块的预测模式的情况，但是不限于此。在以下描述的示例中，假定在候选组中配置了预定义位置的预测模式。

此外，当一个或更多个预测模式被配置为MPM候选组时，从一个或更多个所包括的预测模式得出的模式也可以被附加地配置为MPM候选组。具体而言，当MPM候选组中包括k模式(定向模式)时，从该模式得出的模式(基于k的间隔为+a，-b的模式。a和b是等于或大于1的整数，例如1、2、3)可以进一步包括在MPM候选组中。

可能存在用于配置MPM候选组的优先级，并且可以按照相邻块的预测模式-预设预测模式-得出的预测模式等的顺序来配置MPM候选组。构造MPM候选组的处理可以通过根据优先级填充最大数量的MPM候选来完成。在与以上处理中先前包括的预测模式匹配的情况下，预测模式可以不被配置在候选组中，并且可以包括冗余检查过程，在该冗余检查过程中，顺序被传递到下一优先级候选。

以下假定MPM候选组由六个预测模式组成。

例如，可以以L-T-TL-TR-BL-平面-DC-垂直-水平-对角线模式的顺序配置候选群组。可能的情况是，在候选群组中优先配置相邻块的预测模式，并且附加地配置预定的预测模式。

替选地，可以按照L-T-平面-DC-<L+1>-<L-1>-<T+1>-<T-1>-垂直-水平-对角线模式的顺序来配置候选组。可能的情况是，优先配置相邻块的一些预测模式和一些预定预测模式，并且附加地配置在假定将出现与相邻块的预测模式类似的方向上的预测模式的情况下导出的模式以及一些预设的预测模式。

以上示例是关于MPM候选组的配置的一些情况，其可以不限于此，并且各种修改的示例可以是可能的。

MPM候选组可以基于候选组中的索引来使用二值化(例如一元二值化(UnaryBinarization)和截断莱斯二值化(Truncated Rice Binarization))。即，可以通过将短位分配给具有小索引的候选而将长位分配给具有大索引的候选来表示模式位。

未包括在MPM候选组中的模式可以被分类为非MPM候选组。此外，可以根据编码/解码设置将非MPM候选组分类成两个或更多个候选组。

以下内容的前提是：预测模式候选组中存在包括定向模式和非定向模式的67种模式，并且支持6个MPM候选，并且在非MPM候选组中配置61个预测模式。

当非MPM候选组被配置为一时，由于保留了未包括在MPM候选组配置过程中的预测模式，所以不需要附加的候选组配置过程。因此，基于非MPM候选组中的索引，可以使用二值化(例如固定长度二值化(Fixed Length Binarization)和截断一元二值化(TruncatedUnary Binarization))。

假定非MPM候选组由两个或更多个候选组组成，在该示例中，非MPM候选组被分类为非MPM_A(在下文中，A候选组)和非MPM_B(在下文中，B候选组)。假定A候选组(p。等于或大于MPM候选组的数量)构成具有以下预测模式的候选组，与候选B组(q。等于或大于A候选组的数量)相比，该预测模式更可能作为当前块的预测模式出现。在这种情况下，可以添加配置A候选组的处理。

例如，可以在A候选组中配置在定向模式之间具有相等间隔的一些预测模式(例如，模式2、4、6等)，或者预定的预测模式(例如，从包括在MPM候选组中的预测模式得出的模式等)。通过MPM候选组配置和A候选组配置的其余预测模式可以由B候选组组成，并且不需要附加的候选组配置过程。可以基于A候选组和B候选组中的索引来使用诸如固定长度二值化和截断一元二值化的二值化。

以上示例是其中配置了两个或更多个非MPM候选组的一些情况，其可以不限于此，并且各种修改的示例可以是可能的。

以下示出了用于预测和编码预测模式的处理。

可以检查关于当前块的预测模式是否与MPM(或MPM候选组中的一些模式)匹配的信息(mpm_flag)。

当其与MPM匹配时，可以根据MPM的配置(1、或2或更多)来附加地确认MPM索引信息(mpm_idx)。此后，完成当前块的编码处理。

当其与MPM不匹配时，如果非MPM候选组被配置为一，则可以检查非MPM索引信息(remaining_idx)。此后，完成当前块的编码处理。

如果非MPM候选组被配置为多个(在该示例中为两个)，则可以检查关于当前块的预测模式是否与A候选组中的一些预测模式匹配的信息(non_mpm_flag)。

如果其与A候选组匹配，则可以检查A候选组索引信息(non_mpm_A_idx)，而如果其与A候选组不匹配，则可以检查B候选组索引信息(remaining_idx)。

当预测模式候选组的配置固定时，由当前块支持的预测模式、由相邻块支持的预测模式以及预设的预测模式可以使用相同的预测编号索引。

同时，当预测模式候选组的配置是自适应的时，由当前块支持的预测模式、由相邻块支持的预测模式以及预设的预测模式可以使用相同的预测编号索引或不同的预测编号索引。参照图4进行以下描述。

在预测模式编码处理中，可以执行用于配置MPM候选组的预测模式候选组统一(或调整)处理。例如，当前块的预测模式可以是-5至61个模式预测模式候选组中的一个，并且相邻块预测模式可以是2至66个模式预测模式候选组中的一个。在这种情况下，相邻块的一些预测模式(模式66)可以是当前块的预测模式不支持的模式，因此可以执行在预测模式编码处理中对其进行统一的过程。即，这可以是在支持固定的帧内预测模式候选组的配置时不需要的过程，并且可以是在支持自适应的帧内预测模式候选组的配置时需要的过程，并且将省略其详细的描述。

与使用MPM的方法不同，可以通过将索引分配给属于预测模式候选组的预测模式来执行编码。

例如，如果根据预定的优先级将索引分配给预测模式，并且选择当前块的预测模式，则对索引进行编码的方法与此对应。这意味着固定地配置预测模式候选组，并且将固定的索引分配给预测模式。

替选地，当适应性地配置预测模式候选组时，固定的索引分配方法可能是不适合的。为此，根据自适应优先级将索引分配给预测模式，并且当选择当前块的预测模式时，可以应用对对应的索引进行编码的方法。这使得能够通过由于预测模式候选组的自适应配置而改变分配给预测模式的索引来有效地对预测模式进行编码。即，自适应优先级可以是将可能被选择作为当前块的预测模式的候选分配给其中出现短模式位的索引。

以下，假定支持包括预测模式候选组中的预设的预测模式(定向模式和非定向模式)、颜色复制模式以及颜色模式的8个预测模式(色度分量)。

例如，假定在平面、DC、水平、垂直和对角线模式(在该示例中为左下对角线)中支持四种预设的预测模式，并且支持一种颜色模式(C)和三种颜色复制模式(CP1、CP2、CP3)。分配给预测模式的索引的基本顺序可以按预设的预测模式-颜色复制模式-颜色模式等给出。

在这种情况下，作为预设的预测模式的定向模式、非定向模式以及颜色复制模式可以被容易地分类为其中区分预测方法的预测模式。然而，在颜色模式的情况下，其可以是定向模式或非定向模式，并且可能存在与预设的预测模式交叠的可能性。例如，当颜色模式是垂直模式时，可能出现作为预设的预测模式之一的垂直模式交叠的情况。

在根据编码/解码设置来自适应地调整预测模式候选组的数量的情况下，当发生交叠情况时，可以调整候选组的数量(8→7)。替选地，如果预测模式候选组的数量保持固定，则当发生交叠情况时，可以通过添加和考虑其他候选来分配索引，稍后将在该设置的假定下进行描述。此外，即使包括诸如颜色模式的可变模式，自适应预测模式候选组也可以是受支持的配置。因此，当执行自适应索引分配时，可以将其视为自适应预测模式候选组的配置的示例。

以下描述根据颜色模式执行自适应索引分配的情况。假设按平面(0)-垂直(1)-水平(2)-DC(3)-CP1(4)-CP2(5)-CP3(6)-C(7)的顺序来分配基本索引。此外，假设当颜色模式与预设的预测模式不匹配时，按以上顺序执行索引分配。

例如，当颜色模式与预设的预测模式之一(平面、垂直、水平、DC模式)匹配时，填充与颜色模式的索引7匹配的预测模式。匹配的预测模式的索引(0到3中之一)填充有预设的预测模式(左下对角线)。具体地，当颜色模式是水平模式时，可以执行诸如平面(0)-垂直(1)-左下对角线(2)-DC(3)-CP1(4)-CP2(5)-CP3(6)-水平(7)的索引分配。

替选地，当颜色模式与预设的预测模式之一匹配时，填充与索引0匹配的预测模式。然后，在颜色模式的索引7中填充预设的预测模式(左下对角线)。在这种情况下，如果填充的预测模式不是现有索引0(即，不是平面模式)，则可以调整现有索引配置。具体地，当颜色模式为DC模式时，可以执行诸如DC(0)-平面(1)-垂直(2)-水平(3)-CP1(4)-CP2(5)-CP3(6)-左下对角线(7)的索引分配。

以上示例是自适应索引分配的一些情况，并且不限于此，并且各种修改的示例是可能的。此外，基于候选组中的索引，可以使用固定长度二值化、一元二值化、截断一元二值化和截断莱斯二值化。

以下，将描述通过将索引分配给属于预测模式候选组的预测模式来执行编码的另一示例。

例如，通过按预测模式、预测方式等进行划分而分类成多个预测模式候选组并且通过向属于用于编码的候选组的预测模式分配索引来进行编码的方法与其对应。在这种情况下，候选组选择信息编码可以先于索引编码。例如，作为用于在相同颜色空间中执行预测的预测模式的定向模式、非定向模式和颜色模式可以属于一个候选组(在下文中称为S候选组)，并且作为用于在另一颜色空间中执行预测的预测模式的颜色复制模式可以属于一个候选组(在下文中称为D候选组)。

以下假设在预测模式候选组(色度分量)中支持包括预设预测模式、颜色复制模式和颜色模式的九种预测模式。

例如，假设在平面模式、DC模式、水平模式、垂直模式和对角线模式中支持四个预设预测模式，以及支持一个颜色模式(C)和四个颜色复制模式(CP1、CP2、CP3、CP4)。S候选组可以具有由预设预测模式和颜色模式组成的五个候选，并且D候选组可以具有由颜色复制模式组成的四个候选。

S候选组是自适应地配置的预测模式候选组的示例，并且以上已经描述了自适应索引分配的示例，因此将省略其详细描述。由于D候选组是固定配置的预测模式候选组的示例，因此可以使用固定的索引分配方法。例如，可以执行诸如CP1(0)-CP2(1)-CP3(2)-CP4(3)的索引分配。

基于候选组中的索引，可以使用诸如固定长度二值化、一元二值化、截断一元二值化和截断莱斯二值化的二值化。此外，各种修改的示例是可能的，而不限于上述示例。

通过预测模式编码单元生成的与预测有关的信息可以被发送至编码单元并且被包括在比特流中。

在根据本发明的实施方式的图像解码方法中，帧内预测可以如下配置。预测单元的帧内预测可以包括预测模式解码步骤、参考像素构造步骤和预测块生成步骤。此外，图像解码设备可以被配置成包括实现预测模式解码步骤、参考像素配置步骤和预测块生成步骤的预测模式解码单元、参考像素配置单元和预测块生成单元。可以省略一些上述处理或者可以添加其他处理，并且可以按照除上述顺序之外的顺序来改变上述处理。

由于图像解码设备的参考像素构造单元和预测块生成单元执行与图像编码设备的对应配置相同的作用，因此省略详细描述。预测模式解码单元可以相反地使用由预测模式编码单元使用的方法来执行。

根据本发明的方法可以以程序指令的形式来实现，该程序指令可以通过各种计算机装置执行并记录在计算机可读介质中。计算机可读介质可以单独地或组合地包括程序指令、数据文件、数据结构等。记录在计算机可读介质上的程序指令可以针对本发明进行专门设计和配置，或者可以由计算机软件领域的技术人员获知并使用。

计算机可读介质的示例可以包括专门配置成存储和执行程序指令的硬件设备，例如ROM、RAM、闪速存储器等。程序指令的示例可以包括机器语言代码(例如由编译器产生的那些机器语言代码)以及可以由计算机使用解释器等执行的高级语言代码。上述硬件设备可以被配置成与至少一个软件模块一起操作以执行本发明的操作，并且反之亦然。

此外，上述方法或装置可以通过组合其配置或功能的全部或一部分来实现，或者可以单独地实现。

尽管以上参考本发明的优选实施方式进行了描述，但是本领域技术人员将理解，可以在不脱离如所附权利要求书中阐述的本发明的精神和范围的情况下对本发明进行各种修改和改变。

工业实用性

本发明可以用于图像编码/解码方法和装置。

Claims (7)

1.一种用于支持色度分量的帧内预测的图像解码方法，所述图像解码方法包括：

生成第一颜色空间的当前块的预测块，所述预测块的像素是通过使用属于第二颜色空间的对应块的多个参考像素生成的；

通过使用与所述第一颜色空间的当前块相邻的第一相邻区域和与所述第二颜色空间的对应块相邻的第二相邻区域，确定所述第一颜色空间的当前块与所述第二颜色空间的对应块之间的相关性信息；

基于所确定的相关性信息来校正所述第一颜色空间的当前块的预测块；以及

通过将所校正的预测块与所述当前块的残差块相加来恢复所述当前块，

其中，生成所述第一颜色空间的当前块的预测块包括：对属于所述第二颜色空间的对应块的参考像素执行滤波，

其中，所述参考像素包括滤波目标像素和所述滤波目标像素的相邻像素，并且

其中，基于从编码设备发信号通知的标志来可变地确定要用于生成所述当前块的预测块的像素的所述参考像素的数量。

2.根据权利要求1所述的图像解码方法，

其中，所述第一相邻区域包括所述第一颜色空间的当前块的顶部区域和右上区域，以及

其中，所述第二相邻区域包括所述第二颜色空间的对应块的顶部区域和右上区域。

3.根据权利要求2所述的图像解码方法，其中，确定所述相关性信息包括：

在属于与所述第二颜色空间的对应块相邻的所述第二相邻区域的像素中，确定多个像素以校正所述当前块的预测块；以及

通过将加权滤波器应用于所确定的多个像素来生成一个像素。

4.根据权利要求1所述的图像解码方法，其中，所述滤波目标像素的相邻像素包括与所述滤波目标像素相邻的右像素、下像素和右下像素。

5.根据权利要求1所述的图像解码方法，其中，当所述标志等于第一值时，要用于生成所述当前块的预测块的像素的所述参考像素的数量为M，并且，当所述标志等于第二值时，要用于生成所述当前块的预测块的像素的所述参考像素的数量为N，以及

其中，M的值大于N的值。

6.一种用于支持色度分量的帧内预测的图像编码方法，所述图像编码方法包括：

生成第一颜色空间的当前块的预测块，所述预测块的像素是通过使用属于第二颜色空间的对应块的多个参考像素生成的；

通过使用与所述第一颜色空间的当前块相邻的第一相邻区域和与所述第二颜色空间的对应块相邻的第二相邻区域，确定所述第一颜色空间的当前块与所述第二颜色空间的对应块之间的相关性信息；

基于所确定的相关性信息来校正所述第一颜色空间的当前块的预测块；以及

基于所校正的预测块对所述第一颜色空间的当前块进行编码，

其中，生成所述第一颜色空间的当前块的预测块包括：对属于所述第二颜色空间的对应块的参考像素执行滤波，

其中，所述参考像素包括滤波目标像素和所述滤波目标像素的相邻像素，并且

其中，基于编码到解码设备中的标志来可变地确定要用于生成所述当前块的预测块的像素的所述参考像素的数量。

7.一种存储通过图像解码方法解码的比特流的非暂时性计算机可读存储介质，所述图像解码方法由图像解码装置执行，所述图像解码方法包括：

生成第一颜色空间的当前块的预测块，所述预测块的像素是通过使用属于第二颜色空间的对应块的多个参考像素生成的；

通过使用与所述第一颜色空间的当前块相邻的第一相邻区域和与所述第二颜色空间的对应块相邻的第二相邻区域，确定所述第一颜色空间的当前块与所述第二颜色空间的对应块之间的相关性信息；

基于所确定的相关性信息来校正所述第一颜色空间的当前块的预测块；以及

通过将所校正的预测块与所述当前块的残差块相加来恢复所述当前块，

其中，生成所述第一颜色空间的当前块的预测块包括：对属于所述第二颜色空间的对应块的参考像素执行滤波，

其中，所述参考像素包括滤波目标像素和所述滤波目标像素的相邻像素，并且

其中，基于从编码设备发信号通知的标志来可变地确定要用于生成所述当前块的预测块的像素的所述参考像素的数量。