CN114747213A - 用于获取关于从画面拆分的子单元的信息的方法和装置 - Google Patents

Abstract

公开了一种用于获取关于从画面拆分的子单元的信息的方法和装置。根据本发明的实施方式，提供了一种用于获取关于从画面拆分的子单元的信息的方法。该方法包括以下步骤：从比特流解码指示画面内的编码树单元(CTU)的大小的CTU大小信息；从比特流中解码以所述CTU大小为单位表示所述画面内的子画面的子画面拆分信息；从比特流解码所述画面内的一个或更多个拼块的拆分信息；以及从比特流解码所述画面内的一个或更多个切片的拆分信息。

Description

用于获取关于从画面拆分的子单元的信息的方法和装置

技术领域

本公开涉及视频编码和解码，更具体地，涉及用于通过高效地获得关于各种子单元的信息来提高编码和解码效率的方法和装置。

背景技术

由于视频数据的体积大于语音数据或静止图像数据的体积，因此存储或传输视频数据而不进行压缩处理需要包括存储器在内的大量硬件资源。

因此，在存储或传输视频数据时，通常使用编码器来压缩视频数据以存储或传输。然后，解码器接收压缩的视频数据，并解压缩和再现视频数据。用于这种视频压缩的技术包括H.264/AVC和高效率视频编码(HEVC)，HEVC相对于H.264/AVC将编码效率提高了大约40％。

然而，视频大小、分辨率和帧速率逐渐增加，且因此要编码的数据量也增加。因此，需要一种具有比现有压缩技术的编码效率好并且图像质量高的新压缩技术。

发明内容

技术问题

本公开的目的是提供一种改进的视频编码和解码技术以满足该需要。具体地，本公开的一个方面涉及用于通过将画面分割为子单元的各种方法来提高编码和解码效率的技术。

技术方案

根据一个方面，本公开提供了一种用于获得关于从画面分割的子单元的信息的方法，所述方法包括：从比特流解码指示画面内的编码树单元(CTU)的大小的CTU大小信息；从所述比特流中解码以所述CTU大小为单位表示所述画面内的子画面的子画面分割信息；从所述比特流解码关于将所述画面分割为一个或更多个拼块的分割信息；以及从所述比特流解码关于将所述画面分割为一个或更多个切片的分割信息。

根据另一方面，本发明提供解码器，所述解码器被配置成从比特流解码关于从画面分割的子单元的信息；以及画面重构器，所述画面重构器被配置成基于关于所述子单元的信息来重构所述画面，其中，所述解码器被配置成从所述比特流解码指示所述画面内的编码树单元(CTU)的大小的CTU大小信息，从所述比特流中解码以CTU大小为单位表示所述画面内的子画面的子画面分割信息，从所述比特流解码关于将所述画面分割为一个或更多个拼块的分割信息；以及从所述比特流解码关于将所述画面分割为一个或更多个切片的分割信息。

技术效果

如上所述，根据本公开的一个实施方式，由于防止了用于将画面分割成子单元的句法元素的重叠，所以可提高比特效率。

此外，根据本公开的另一实施方式，可以基于子单元之间的分割关系来合理地设计是否在子单元边界之间应用环路内滤波。

此外，根据本公开的另一实施方式，由于是以CTU为单位来表示子画面的分割信息，所以可以确保与其它子单元的统一性，通过所述其它子单元可以较高效地表示子画面的分割信息。

附图说明

图1是能够实施本发明的技术的视频编码装置的示意框图。

图2示例性地示出了使用QTBTTT结构的块分割结构。

图3示例性地示出了多个帧内预测模式。

图4是能够实施本发明的技术的视频解码装置的示意框图。

图5至图8示出了切片(slice)、拼块(tile)和子画面。

图9是示出能够实现本公开的技术的方法的一个示例的流程图。

图10是示出用于将画面分割成拼块的方法的一个示例的流程图。

图11是示出用于将画面分割为块(block)的方法的一个示例的流程图。

图12例示了拼块/方块与切片之间的分割关系。

图13是示出用于将画面分割为切片的方法的一个示例的流程图。

图14至图17是例示用于获得关于是否应用切片边界的过滤的信息的方法的各种示例的流程图。

图18是示出用于将画面分割为子画面的方法的一个示例的流程图。

图19是示出用于将画面分割为子画面的特定方法的流程图。

具体实施方式

在下文中，将参照附图详细描述本公开的一些实施方式。应当注意，在将附图标记添加到各个附图中的组成元件时，相同的附图标记表示相同的元件，尽管这些元件在不同的附图中示出。此外，在本公开的以下描述中，将省略在此并入的已知功能和配置的详细描述，以避免模糊本公开的主题。

图1是能够实施本发明的技术的视频编码装置的示意框图。在下文中，将参照图1描述视频编码装置和该装置的元件。

视频编码装置包括块拆分器110、预测器120、减法器130、变换器140、量化器145、编码器150、逆量化器160、逆变换器165、加法器170、滤波器单元180和存储器190。

视频编码装置的各个元件可以用硬件或软件或硬件和软件的组合来实现。各个元件的功能可以以软件实现，并且可以实现微处理器以执行对应于各个元件的软件功能。

一个视频由多个画面组成。各个画面被拆分为多个区域，并且对各个区域执行编码。例如，一个画面被拆分成一个或更多个拼块和/或切片。这里，一个或更多个拼块可以被定义为拼块组。各个拼块或切片被拆分成一个或更多个编码树单元(CTU)。各个CTU通过树结构被拆分成一个或更多个编码单元(CU)。应用于各个CU的信息被编码为CU的句法，而应用于包括在一个共同CTU中的多个CU的信息被编码为CTU的句法。此外，应用于一个共同拼块中的所有块的信息被编码为拼块的句法或被编码为拼块组的句法，拼块组是多个拼块的集合，并且应用于构成一个画面的所有块的信息被编码在画面参数集(PPS)或画面头中。此外，由多个画面共同参考的信息被编码在序列参数集(SPS)中。此外，由一个或更多个公共SPS参考的信息被编码在视频参数集(VPS)中。

块拆分器110确定编码树单元(CTU)的大小。关于CTU大小的信息(CTU大小)被编码为SPS或PPS的句法，并被发送到视频解码装置。

块拆分器110将构成视频的各个画面拆分为具有预定大小的多个CTU，然后使用树结构递归地拆分CTU。在树结构中，叶节点用作编码单元(CU)，其为编码的基本单位。

树结构可以是四叉树(QT)，其中，节点(或父节点)被拆分成具有相同大小的4个子(sub)节点(或子(child)节点)；二叉树(BT)，其中，节点被拆分成两个子节点；三叉树(TT)，其中，节点以1：2：1的比被拆分成3个子节点；或由QT结构、BT结构和TT结构中的两个或更多个的组合形成的结构。例如，可以使用QTBT(四叉树加二叉树)结构或QTBTTT(四叉树加二叉树三叉树)结构。在本文，BTTT可以被统称为多类型树(MTT)。

图2示出了QTBTTT拆分树结构。如图2所示，CTU可以在QT结构中被初始拆分。可以重复QT拆分，直到拆分块的大小达到QT中允许的叶节点的最小块大小(minqtsize)。编码器150对指示QT结构的各个节点是否被拆分为下层的4个节点的第一标志(QT_split_flag)进行编码并用信号通知给视频解码装置。当QT的叶节点不大于BT中允许的根节点的最大块大小(maxbtsize)时，其可以被进一步拆分为BT结构或TT结构中的一者或更多者。在BT结构和/或TT结构中，可以有多个拆分方向。例如，可以有两个方向，即节点块的水平拆分和垂直拆分。如图2所示，当MTT拆分开始时，编码器150对指示节点是否被拆分的第二标志(mtt_split_flag)、指示拆分方向(垂直或水平)的标志、和/或指示拆分类型(二进制或三进制)的标志进行编码并用信号通知给视频解码装置。

作为树结构的另一示例，当使用QTBTTT结构对块进行拆分时，编码器150对关于指示该块已被拆分的CU拆分标志(split_cu_flag)和指示拆分类型是否是QT拆分的QT拆分标志(split_qt_flag)的信息进行编码并用信号通知给视频解码装置。当split_cu_flag的值指示块未被拆分时，该节点的块变成拆分树结构中的叶节点，并被用作编码单元(CU)，该编码单元是编码的基本单位。当split_cu_flag的值指示块已被拆分时，拆分类型是QT还是MTT通过split_qt_flag的值来区分。当拆分类型是QT时，不存在附加信息。当拆分类型是MTT时，指示MTT拆分方向(垂直或水平)的标志(mtt_split_cu_vertical_flag)和/或指示MTT拆分类型(二进制或三进制)的标志(mtt_split_cu_binary_flag)由编码器150编码并用信号通知给视频解码装置。

作为树结构的另一示例，当使用QTBT时，可存在两种拆分类型，即，将节点的块水平拆分(即，对称水平拆分)和垂直拆分(即，对称垂直拆分)为相同大小的两个块。编码器150对指示BT结构的各个节点是否被拆分为下层的块的拆分标志(split_flag)和指示拆分类型的拆分类型信息进行编码并将其发送到视频解码装置。可以有另外的类型，其将节点的块拆分成两个非对称块。非对称拆分类型可以包括以1：3的大小比将块拆分成两个矩形块的类型，以及对角拆分节点的块的类型。

CU可以根据CTU的QTBT或QTBTTT拆分而具有各种大小。在下文，对应于要被编码或解码的CU(即，QTBTTT的叶节点)的块被称为“当前块”。

预测器120预测当前块以生成预测块。预测器120包括帧内预测器122和帧间预测器124。

通常，可以对画面中的各个当前块进行预测编码。可使用帧内预测技术(其基于来自含有当前块的画面的数据而执行)或帧间预测技术(其基于来自在含有当前块的画面之前编码的画面的数据而执行)来执行当前块的预测。帧间预测包括单向预测和双向预测。

帧内预测器122使用位于包括当前块的当前画面中的当前块周围的像素(基准像素)来预测当前块中的像素。根据所述预测方向存在多个帧内预测模式。例如，如图3所示，多个帧内预测模式可包括非定向模式和65个定向模式，非定向模式包括平面模式和DC模式。对于各个预测模式，相邻像素和要使用的算式被不同地定义。

帧内预测器122可确定将用于对当前块进行编码的帧内预测模式。在一些示例中，帧内预测器122可使用多个帧内预测模式对当前块进行编码，并从所测试的模式中选择适当的帧内预测模式来使用。例如，帧内预测器122可使用多个所测试的帧内预测模式的速率失真分析来计算速率失真值，并且可在所测试的模式中选择具有最佳速率失真特性的帧内预测模式。

帧内预测器122从多个帧内预测模式中选择一个帧内预测模式，并使用相邻像素(基准像素)和根据所选择的帧内预测模式确定的算式来预测当前块。关于所选择的帧内预测模式的信息由编码器150编码并被发送到视频解码装置。

帧间预测器124通过运动补偿处理生成针对当前块的预测块。帧间预测器在比当前画面早编码和解码的基准画面中搜索与当前块最相似的块，并基于搜索到的块生成针对当前块的预测块。然后，帧间预测器生成与当前画面中的当前块和基准画面中的预测块之间的位移相对应的运动矢量。通常，对亮度分量执行运动估计，并且基于亮度分量计算的运动矢量用于亮度分量和色度分量两者。编码器150对包括关于用于预测当前块的基准画面的信息和关于运动矢量的信息的运动信息进行编码并将其发送到视频解码装置。

减法器130通过从当前块中减去由帧内预测器122或帧间预测器124生成的预测块来生成残差块。

变换器140将空间域中具有像素值的残差块中的残差信号变换为频率域中的变换系数。变换器140可使用当前块的总大小作为变换单元来变换残差块中的残差信号。另选地，变换器可将残差块拆分成变换区域和非变换区域的子块，并仅使用变换区域的子块作为变换单元来变换残差信号。这里，变换区域子块可以是基于水平轴(或垂直轴)的大小比为1：1的两个矩形块之一。在这种情况下，由编码器150对指示仅子块已被变换的标志(cu_sbt_flag)、方向(垂直/水平)信息(cu_sbt_horizontal_flag)和/或位置信息(cu_sbt_pos_flag)进行编码并用信号通知给视频解码装置。此外，基于水平轴(或垂直轴)，变换区域子块的大小可以具有1：3的大小比。在这种情况下，由编码器150对用于区分拆分的标志(cu_sbt_quad_flag)附加地编码用信号通知给视频解码装置。

量化器145对从变换器140输出的变换系数进行量化，并将量化的变换系数输出到编码器150。

编码器150通过使用诸如基于上下文的自适应二进制算术编码(CABAC)的编码方法对量化的变换系数进行编码来生成比特流。编码器150对与块拆分相关的信息进行编码，信息例如CTU大小、CU拆分标志、QT拆分标志、MTT拆分方向和MTT拆分类型，使得视频解码装置以与视频编码装置相同的方式拆分块。

此外，编码器150对关于指示当前块是通过帧内预测还是通过帧间预测来编码的预测类型的信息进行编码，并根据预测类型对帧内预测信息(即，关于帧内预测模式的信息)或帧间预测信息(关于基准画面和运动矢量的信息)进行编码。

逆量化器160对从量化器145输出的量化的变换系数进行逆量化以生成变换系数。逆变换器165将从逆量化器160输出的变换系数从频率域变换到空间域，并且重构残差块。

加法器170将重构的残差块与预测器120生成的预测块相加，以重构当前块。重构的当前块中的像素被用作对于下一块的帧内预测的基准像素。

滤波器单元180对重构的像素进行滤波，以减少由于基于块的预测和变换/量化而产生的块假象、振铃假象和模糊假象。滤波器单元180可以包括解块滤波器182和采样自适应偏移(SAO)滤波器184。

解块滤波器180对重构块之间的边界进行滤波，以去除由逐块编码/解码引起的块假象，SAO滤波器184还对解块滤波后的视频进行滤波。SAO滤波器184是用于补偿由有损编码引起的重构像素与原始像素之间的差异的滤波器。

通过解块滤波器182和SAO滤波器184滤波的重构块被存储在存储器190中。在重构了一个画面中的所有块时，则重构画面被用作用于要编码的下一画面中的块的帧间预测的基准画面。

同时，画面编码器将画面分割为子单元，并以包括在子单元中的CU为单位对画面进行编码。图片编码器可以包括视频编码装置中包括的组件中除了编码器150之外的其余组件。编码器150对关于从画面分割的子单元的信息进行编码，并将编码的信息用信号通知给视频解码装置。下面将详细描述由编码器150对关于子单元的信息进行编码的方法。

图4是能够实施本发明的技术的视频解码装置的示意功能框图。在下文中，将参照图4描述视频解码装置和该装置的元件。

视频解码装置可包括解码器410、逆量化器420、逆变换器430、预测器440、加法器450、滤波器单元460和存储器470。

与图1的视频编码装置类似，视频解码装置的各个元件可被实现为硬件或软件，或者可被实现为硬件和软件的组合。此外，各个元件的功能可以实现为软件，并且可以实现微处理器以执行对应于各个元件的软件的功能。

解码器410通过对从视频编码装置接收的比特流进行解码并提取与块拆分相关的信息来确定将被解码的当前块，并提取重构当前块所需的预测信息和关于残差信号的信息。

解码器410从序列参数集(SPS)或画面参数集(PPS)中提取关于CTU大小的信息，确定CTU的大小，并将画面拆分为所确定大小的CTU。然后，解码器将CTU确定为最上层，即树结构的根节点，并提取关于CTU的拆分信息以使用树结构拆分CTU。

例如，当使用QTBTTT结构来拆分CTU时，首先提取与QT拆分相关的第一标志(QT_split_flag)，并将各个节点拆分为下层的4个节点。然后，对于与QT的叶节点对应的节点，提取与MTT拆分相关的第二标志(MTT_split_flag)和关于拆分方向(垂直/水平)和/或拆分类型(二进制/三进制)的信息，并在MTT结构中拆分叶节点。这样，QT的叶节点下面的各个节点被递归地以BT结构或TT结构拆分。

作为另一示例，当使用QTBTTT结构拆分CTU时，首先提取指示CU是否被拆分的CU拆分标志(split_cu_flag)。如果相应的块被拆分，则提取QT拆分标志(split_qt_flag)。当拆分类型不是QT而是MTT时，另外提取指示MTT拆分方向(垂直或水平)的标志(mtt_split_cu_vertical_flag)和/或指示MTT拆分类型(二进制或三进制)的标志(mtt_split_cu_binary_flag)。在拆分过程中，各个节点可以经受零次或更多次递归QT拆分，然后经受零次或更多次递归MTT拆分。例如，CTU可以是立即MTT拆分，或者可以仅是多次QT拆分。

作为另一示例，当使用QTBT结构拆分CTU时，第一标志(QT_split_flag)与QT分拆有关，并且各个节点被拆分为下层的4个节点。对于与QT的叶节点相对应的节点，提取指示该节点是否被进一步BT拆分的split_flag和拆分方向信息。

在确定要通过树结构拆分来解码的当前块时，解码器410提取关于指示当前块是经帧内预测还是帧间预测的预测类型的信息。当预测类型信息指示帧内预测时，解码器410提取针对当前块的帧内预测信息(帧内预测模式)的句法元素。当预测类型信息指示帧间预测时，解码器410提取针对帧间预测信息的句法元素，即，指示运动矢量和由运动矢量参考的基准画面的信息。

解码器410提取关于当前块的量化变换系数的信息作为关于残差信号的信息。

逆量化器420对量化的变换系数进行逆量化，并将逆量化的变换系数从频率域逆变换到空间域，以重构残差信号，从而生成针对当前块的残差块。

此外，当逆变换器430仅对变换块的部分区域(子块)进行逆变换时，提取指示变换块的仅子块已被变换的标志(cu_sbt_flag)\以及关于子块的方向信息(垂直/水平)(cu_sbt_horizontal_flag)和/或子块位置信息(cu_sbt_pos_flag)。然后，通过将子块的变换系数从频率域逆变换到空间域来重构残差信号。对于没有被逆变换的区域，用“0”来填充残差信号。由此，创建针对当前块的最终残差块。

预测器440可以包括帧内预测器442和帧间预测器444。当当前块的预测类型是帧内预测时，帧内预测器442被激活，而当当前块的预测类型是帧间预测时，帧间预测器444被激活。

帧内预测器442基于从解码器410提取的针对帧内预测模式的句法元素在多个帧内预测模式中确定当前块的帧内预测模式，并且根据帧内预测模式基于当前块周围的基准像素来预测当前块。

帧间预测器444基于从解码器410提取的针对帧间预测信息的句法元素来确定当前块的运动矢量和由运动矢量参考的基准画面，并基于运动矢量和基准画面来预测当前块。

加法器450通过将从逆变换器输出的残差块与从帧间预测器或帧内预测器输出的预测块相加来重构当前块。重构的当前块中的像素被用作用于稍后将被解码的块的帧内预测的基准像素。

滤波器单元460可以包括解块滤波器462和SAO滤波器464。解块滤波器462对重构块之间的边界执行解块滤波，以去除由逐块解码引起的块假象。SAO滤波器464在解块滤波之后对重构块执行附加滤波，以补偿由有损编码引起的重构像素与原始像素之间的差异。通过解块滤波器462和SAO滤波器464滤波的重构块被存储在存储器470中。当重构了一个画面中的所有块时，重构的画面被用作用于随后要编码的画面中的块的帧间预测的基准画面。

同时，解码器410通过解码比特流获得关于从画面分割的子单元的信息。画面重构器4000基于所获得的关于子单元的信息来重构画面。画面重构器4000可包括视频解码装置中的组件中的除了解码器410之外的其余组件。下面将详细描述由解码器410获得关于子单元的信息的方法。

在HEVC国际标准中，为了并行处理的目的，存在两个类型的分割画面(图像或屏幕)的方法。一种是切片分割方法，另一种是拼块分割方法。

切片分割方法提供了将画面分割为CTU并按照光栅扫描顺序对CTU进行编码/解码的功能。多个切片片段可以存在于一个切片片段中，并且有两种类型的片段。切片片段的类型包括独立切片片段和从属切片片段。

独立切片片段是在帧内预测、帧间预测、编码模式和熵编码时不依赖于另一切片的切片片段。独立切片片段具有头信息。从属切片片段是在帧内预测、帧间预测、编码模式和熵编码时依赖于另一切片(参考另一先前独立切片片段)的切片片段。从属切片片段对于从属切片片段的大部分头信息参考在前独立切片片段的头信息。换言之，用信号通知从属切片片段的头信息的仅一部分。

图5的(a)示出了从画面分割的两个切片，并且这两个切片可以由切片边界分开。一个切片可以包括一个独立切片片段和零个或多个从属切片片段。画面上部的第一切片具有一个独立切片片段和由虚线分开的两个从属切片片段。画面的下部的第二切片仅具有一个独立切片片段(包括零个从属切片片段)。

表1和表2示出了用于切片分割方法的句法结构。

[表1]

[表2]

表1示出了指示是否允许使用从属切片片段的标志(dependent_slice_segments_enabled_flag)。该标志可以由PPS定义。表2示出了切片片段头信息。

如表2所示，对指示特定切片片段是否是画面中的第一切片片段的标志(first_slice_segment_in_pic_flag)进行编码并用信号通知。第一切片片段成为独立切片片段。对于除了第一切片片段之外的片段，对指示该片段是否是从属切片片段的标志(dependent_slice_segment_flag)进行编码并用信号通知。此外，相关切片片段的地址(slice_segment_address)被一起用信号通知。这里，slice_segment_address表示相关切片片段中的第一CTU的索引值。

2)切片分割方法通过基于CTU将画面分段/分割为多个列和行来提供对画面进行编码/解码的功能。可以基于均匀分割方案或单独(非均匀)分割方案将画面分割成拼块。

各个分割拼块在帧内预测和熵编码期间不依赖于其它拼块，并且对环路内滤波的依赖可由PPS中定义的标志来控制。不存在用于拼块的单独头。

图5的(b)示出了画面被分割为3×3个拼块，并且各个块可以由块边界(列边界和行边界)分开。可以按照光栅扫描顺序对多个拼块进行编码/解码，并且还可以按照光栅扫描顺序对一个拼块中的多个CTU进行编码/解码。在各个CTU中所示的数字表示执行编码/解码的顺序。

表3示出了用于拼块分割方法的句法结构。

[表3]

如表3所示，在PPS中定义并用信号通知指示拼块分割的开/关的标志(tiles_enabled_flag)。当相关标志开时，另外用信号通知指定拼块大小的句法元素。

指定拼块大小的句法元素可包括num_tile_columns_minus1、num_tile_rows_minus1和uniform_spacing_flag，num_tile_columns_minus1指示通过从在垂直方向上分割的拼块的数量(拼块列的数量)中减去1而获得的值，num_tile_rows_minus1指示通过从在水平方向上分割的拼块的数量(拼块行的数量)中减去1而获得的值，并且uniform_spacing_flag指示是否在水平和垂直方向上均匀地分割画面。

当画面未被均匀分割(uniform_spacing_flag＝off)时，另外用信号通知拼块列的宽度信息(column_width_minus1)和拼块行的高度信息(row_height_minus1)。此外，用信号通知指示是否在拼块之间的边界处应用环路内滤波的标志(loop_filter_across_tiles_enabled_flag)。

图6示出了上述切片分割方法和拼块分割方法之间的差别。图6的(a)示出了根据切片分割方法分割的切片(总共4个切片)，并且图6的(b)示出了根据拼块分割方法分割的拼块(总共4个拼块)。各个数字表示CTU的数量。

只有水平边界可以存在于分割的切片之间。相反，水平和垂直边界可以存在于分割的拼块之间。

本公开提出了一种用于获得关于从画面分割的子单元的信息的方法。

子单元(子块或子区域)可以包括子画面、切片、拼块/方块和CTU中的一个或更多个。关于子单元的信息可以包括子单元的启用标志和分割信息。

启用标志是指示是否在子单元之间的边界处执行环路内滤波的句法元素。子单元的分割信息对应于用于将画面分割为各种子单元的信息。因此，“获取子单元的分割信息”可以是“将画面分割为子单元”。

本公开提出了基于子单元的分割信息的用于各种目的的画面分割方法。具体地，本公开提出1)用于合成不同序列的子画面分割方法，2)用于比特流封包的切片分割方法，以及3)用于并行处理的拼块/方块分割方法。

拼块/方块、切片和子画面

拼块/方块是指通过将画面分割成子区域以并行处理画面而获得的画面区域。拼块/方块在帧内预测和熵编码期间被独立地处理。换言之，拼块/方块在帧内预测期间不共享基准样本并且在熵编码期间不共享上下文。是否对拼块/方块之间的边界应用环路内滤波可以通过单独的标志来控制。

切片表示配置一个独立网络抽象层(NAL)比特流的数据封包单元。多个拼块/方块可以被包括在一个切片中，或者多个切片可以包括在一个拼块/方块中。

切片可以具有两种类型或模式。第一模式是矩形切片模式，其中具有类似特性的拼块/方块或任意拼块/方块被指定为一个区域，而第二模式是非矩形切片(光栅扫描切片)模式，其中拼块/方块被指定为特定位置处的一个区域，同时拼块/方块的编码/解码以光栅扫描顺序进行。

图7中示出了矩形切片模式和光栅扫描切片模式的示例。在图7中，由虚线分隔的区域表示CTU，由直线分隔的区域表示拼块/方块，并且由点划线分隔的区域表示切片。

如图7的(a)所示，一个画面可被分割为总共216(18×12)个CTU、总共24(6×4)个拼块/方块、以及总共9个矩形切片。如图7的(b)所示，一个画面可被分割为总共216(18×12)个CTU、总共12(3×4)个拼块/方块、以及总共3个光栅扫描切片。

子画面是指被指定用于与其它内容合成的区域。子画面可以包括至少一个切片。

图8示出了以子画面为单位合成不同内容的示例。用右上方向的斜线填充的区表示内容1中的画面。用水平线图案填充的区表示内容2中的画面。用垂直线图案填充的区表示内容3中的画面。

如图8的左侧所示，各个画面可以由4个切片组成，并且可以为各个切片单元生成比特流。此外，各个切片可以被定义为子画面。以切片为单位物理生成的比特流被输入到比特流提取器和合并器，并经历提取和合成处理。这里，提取和合成处理的逻辑单位是子画面。结果，如图8的右侧所示，从合成中产生新的画面，其中左上部分是内容1，左下部分是内容2，而右部分是内容3。

比特流提取器和合并器从不同的内容中提取以切片为单位生成的比特流，并以子画面为单位合成提取的比特流。为此，各个内容的画面被分割为子画面。换言之，子画面是包括用于内容合成的至少一个切片的区。

在下文中，将描述获得关于子单元的信息的方法。图9示出了例示本公开的一个实施方式的流程图。

视频编码装置可将画面分割为各种子单元。在被分割成具有预定大小的多个CTU之后，可通过使用CTU大小作为基本单位来将画面分割成子画面，拼块/方块和切片。

例如，可以基于作为基本单位的CTU大小将画面分割为一个或更多个子画面，并且可以基于作为基本单位的CTU大小将画面分割为一个或更多个拼块/方块。在切片分割的情况下，可以基于作为基本单位的拼块/方块将画面分割为一个或更多个切片。这里，由于基于CTU大小为基本单位来分割拼块/方块，因此基于CTU大小为基本单位来分割切片。

因此，关于子画面分割的信息(子画面分割信息)可以以CTU大小为单位来表示画面内的子画面，关于拼块/方块分割的信息(拼块/方块分割信息)可以以CTU大小为单位来表示画面内的拼块/方块，关于切片分割的信息(切片分割信息)可以以拼块/方块为单位(CTU的大小单位)来表示画面内的切片。

对关于CTU大小的信息(CTU大小信息)、子画面分割信息、拼块/方块分割信息和切片分割信息进行编码并用信号通知给视频解码装置。在SPS级别或PPS级别定义和用信号通知CTU大小信息，在SPS级别定义和用信号通知子画面分割信息，并且在PPS级别定义和用信号通知拼块/方块分割信息和切片分割信息。

此外，视频编码装置确定是否对子单元之间的边界应用环路内滤波，对指示是否应用环路内滤波的启用标志进行编码，并将编码的启用标志用信号通知给视频解码装置。

在SPS级别定义并用信号通知指示是否对子画面之间的边界应用环路内滤波的启用标志；在PPS级定义并用信号通知指示是否对拼块/方块之间的边界应用环路内滤波的启用标志和指示是否对切片之间的边界应用环路内滤波的启用标志。

解码器410从比特流解码子单元的分割信息(S910)。通过从比特流解码来获得包括在子单元的分割信息中的CTU大小信息、子画面分割信息、拼块/方块分割信息和切片分割信息。解码器410基于所获得的分割信息将画面分割为子单元(S930)。具体地，在被分割为具有由CTU大小信息指示的CTU大小的CTU之后，可基于子画面分割信息、拼块/方块分割信息和切片分割信息将画面分割为子画面、拼块/方块和切片。

解码器410从比特流解码指示是否对子单元之间的边界应用环路内滤波的启用标志(S920)。滤波器460基于该启用标志来确定是否对子单元之间的边界应用环路内滤波(S930)。

实施方式1

实施方式1公开了用于获得拼块分割信息的方法和用于获得砖块分割信息的方法。换言之，实施方式1涉及用于将画面分割成拼块的方法和用于将画面分割成方块的方法。

表4示出了与实施方式1相关的句法结构的一个示例。

[表4]

实施方式1-1

实施方式1-1涉及用于将画面分割为拼块的方法(用于获得拼块分割信息的方法)。图10示出了实施方式1-1的示例。

视频编码装置确定画面内是否仅存在一个拼块，并将确定结果设置为single_tile_in_pic_flag句法元素的值。当single_tile_in_pic_flag＝＝1时，其指示在画面中仅存在一个拼块，且当single_tile_in_pic_flag＝＝0时，其指示在画面中存在一个或更多个拼块。

在画面内存在一个或更多个拼块的情况下(single_tile_in_pic_flag＝＝0)，视频编码装置确定相应的一个或更多个拼块是否是均匀地分割的，并将确定结果设置为uniform_tile_spacing_flag句法元素的值。当uniform_tile_spacing_flag＝＝1时，其指示拼块是从画面均匀地分割的，且当uniform_tile_spacing_flag＝＝0时，其指示拼块不是从画面均匀地分割的。

当拼块是均匀地分割的时(uniform_tile_spacing_flag＝＝1)，视频编码装置确定拼块列的宽度和拼块行的高度，并将确定结果分别设置为tile_cols_width_minus1句法元素的值和tile_rows_height_minus1句法元素的值。tile_cols_width_minus1是携带以CTU大小为单位的拼块列的宽度的句法元素，除了画面的最右边的拼块列的宽度之外。tile_rows_height_minus1是携带以CTU大小为单位的拼块行的高度的句法元素，除了画面底部的拼块行的高度之外。

当拼块不是均匀地分割的时(uniform_tile_spacing_flag＝＝0)，视频编码装置确定拼块列的数量和拼块行的数量，并将确定结果分别设置为num_tile_columns_minus1句法元素的值和num_tile_rows_minus1句法元素的值。num_tile_columns_minus1是携带通过从拼块列的数量中减去1而获得的值的句法元素，并且num_tile_rows_minus1是携带通过从拼块行的数量中减去1而获得的值的句法元素。

视频编码装置确定未均匀分割的拼块列的宽度和未均匀分割的拼块行的高度，并将确定结果分别设置为tile_column_width_minus1[i]句法元素的值和tile_row_height_minus1[i]句法元素的值。tile_column_width_minus1[i]是以CTU大小单位指示未均匀分割的拼块列的宽度的句法元素。该句法元素未针对画面的最右边的拼块列的宽度而定义。tile_row_height_minus1[i]是指示未均匀分割的拼块行的高度的句法元素。句法元素未针对画面底部处的拼块行的高度而定义。

视频编码装置对single_tile_in_pic_flag、uniform_tile_spacing_flag、tile_cols_width_minus1、tile_rows_height_minus1、num_tile_columns_minus1、num_tile_rows_minus1、tile_column_width_minus1[i]和tile_row_height_minus1[i]进行编码，并将其用信号通知给视频解码装置。

解码器410从比特流解码single_tile_in_pic_flag(S1010)，并基于single_tile_in_pic_flag的值来确定画面内仅存在一个拼块还是画面中存在一个或更多个拼块(S1020)。

当画面内仅存在一个拼块时(single_tile_in_pic_flag＝＝1)，解码器410将画面视为一个拼块并终止拼块分割处理。在另一方面，当画面中存在一个或更多个拼块时(single_tile_in_pic_flag＝＝0)，解码器410从比特流解码uniform_tile_spacing_flag(S1030)。

解码器410基于解码出的uniform_tile_spacing_flag值来确定画面中的拼块是否是均匀地分割的(S1040)。当拼块是均匀地分割的(uniform_tile_spacing_flag＝＝1)时，解码器410从比特流中解码tile_cols_width_minus1和tile_rows_height_minus1(S1050)。在另一方面，当拼块不是被均匀地分割的(uniform_tile_spacing_flag＝＝0)时，解码器410从比特流中解码num_tile_columns_minus1和num_tile_rows_minus1(S1060)，并且从比特流中解码与分别由num_tile_columns_minus1和num_tile_rows_minus1指示的数量的tile_column_width_minus1[i]和tile_row_height_minus1[i](S1070)。

解码器410可基于num_tile_columns_minus1、num_tile_rows_minus1、tile_column_width_minus1[i]和tile_row_height_minus1[i]的值将画面分割为非均匀拼块，或基于tile_cols_width_minus1和tile_rows_height_minus1的值将画面均匀地分割为拼块。

实施方式1-2

实施方式1-2涉及用于将画面分割为方块的方法(用于获得方块分割信息的方法)。仅在水平方向上允许将画面分割成方块。图11示出了实施方式1-2的一个示例。

视频编码装置可确定画面内的拼块是否被分割为多个方块，并将确定结果设置为brick_splitting_present_flag句法元素的值。当brick_splitting_present_flag＝＝1时，其指示画面中的一个或更多个拼块被分割为多个方块，而当brick_splitting_present_flag＝＝0时，其指示画面中不存在被分割为多个方块的拼块。brick_splitting_present_flag被编码并用信号通知给视频解码装置。

视频编码装置可确定画面中的拼块的数量，并将确定结果设置为num_tiles_in_pic_minus1句法元素的值。当画面中的拼块是均匀地分割的(uniform_tile_spacing_flag＝＝1)且画面中的一个或更多个拼块被分割成多个方块(brick_splitting_present_flag＝＝1)时，num_tile_in_pic_minus1被编码并用信号通知给视频解码装置。

视频编码装置检查第i个拼块的高度(第i个拼块中的CTU行的数量，RowHeight[[i])，并基于结果设置句法元素brick_split_flag[i]、uniform_brick_spacing_flag[i]、brick_height_minus1[i]、num_brick_rows_minus2[i]和brick_row_height_minus1[i][j]的值。

brick_split_flag[i]是指示第i个拼块是否被分割为方块的句法元素。当RowHeight[i]的值超过1时，brick_split_flag[i]可被设置为“1”，其为指示第i个拼块被分割为方块并被编码和用信号通知给视频解码装置的值。这是因为当RowHeight[i]的值超过1时，在水平方向上进行方块分割是可能的。在另一方面，当RowHeight[i]的值为1或更小时，brick_split_flag[i]被设置为“0”并且不被用信号通知给视频解码装置，其为指示第i个拼块未被分割为方块的值。这是因为，当RowHeight[i]的值为1或更小时，不可能在水平方向上分割方块。

uniform_brick_spacing_flag[i]是指示第i个拼块是否被均匀地分割为方块的句法元素。当rowheight[i]的值超过2时，均匀分割和非均匀分割都是可能的，因此，uniform_brick_spacing_flag[i]可被设置为“1”即表示均匀分割的值，或设置为“0”即表示非均匀分割的值。在这种情况下，uniform_brick_spacing_flag[i]可被编码并用信号通知视频解码装置。另一方面，当rowheight[i]的值为2或更小时，仅1：1的均匀分割是可能的，因此，uniform_brick_spacing_flag[i]被设置为“1”并且不被用信号通知给视频解码装置。

brick_height_minus1[i]是以CTU大小为单位指示通过从均匀分割的方块行的高度减去1而获得的值的句法元素。句法元素未针对第i个拼块内底部的方块行的高度定义。当方块被均匀地分割时，在rowheight[i]的值超过3的情况下，brick_height_minus1[i]被编码并用信号通知视频解码装置。相反，当块被均匀地分割并且rowheight[i]的值是3时，仅1：1：1的均匀分割是可能的，因此，brick_height_minus1[i]被设置为0(brick_height_minus1[i]＝＝0)并且不被用信号通知给视频解码装置。

num_brick_rows_minus2[i]是指示通过从不均匀分割的方块的数量中减去2而获得的值的句法元素。当方块被不均匀地分割并且RowHeight[i]的值超过3时，num_brick_rows_minus2[i]被编码并用信号通知给视频解码装置。在另一方面，当块被不均匀地分割并且RowHeight[i]的值是3时，仅1：2或2：1的不均匀分割是可能的，因此，num_brick_rows_minus2[i]被设置为0(num_brick_rows_minus2[i]＝＝0)，并且不被用信号通知给视频解码装置。

brick_row_height_minus1[i][j]是以CTU大小为单位指示通过从不均匀分割的方块行中的第j个方块行的高度减去1而获得的值的句法元素。例如，当不均匀分割的方块的数量为3(num_brick_rows_minus2[i]＝＝1)时，brick_row_height_minus1[i][j]被设置为通过从两个方块的高度中的每一者减去1而获得的值。在另一示例中，当不均匀分割的砖的数量为5(num_brick_rows_minus2[i]＝＝3)时，brick_row_height_minus1[i][j]被设置为通过从4个砖的高度中的每一者减去1而获得的值。brick_row_height_minus1[i][j]被编码并用信号通知所述视频译码装置。

解码器410从比特流解码brick_splitting_present_flag(S1110)，并确定解码出的brick_splitting_present_flag的值(S1120)。

当画面内的拼块是均匀地分割的(uniform_tile_spacing_flag＝＝1)并且画面内的一个或更多个拼块被分割为多个方块(brick_splitting_present_flag＝＝1)时，解码器410从比特流解码num_tile_in_pic_minus1(S1130)。当画面内的拼块是不均匀地分割的时(uniform_tile_spacing_flag＝＝0)或当画面内没有拼块被分割成多个方块时(brick_splitting_present_flag＝＝0)，不用信号通知num_tile_in_pic_minus1，并且num_tile_in_pic_minus1的值被设置为或得出为通过从画面内的拼块的数量中减去1而获得的值。

解码器410检查第i个拼块中的CTU行的数量(RowHeight[i])(S1140)，并且当RowHeight[i]>1时，从比特流解码brick_split_flag(S1150)。当RowHeight[i]的值为1或更小时，不用信号通知brick_split_flag，并且brick_split_flag的值被得出为或设置为0。

当brick_split_flag＝＝0时，解码器410终止方块分割(S1160)，但是当brick_split_flag＝＝1时，解码器410确定RowHeight[i]的值(S1170)。当RowHeight[i]的值超过2时，从比特流解码uniform_brick_spacing_flag(S1180)，但是当RowHeight[i]的值为2或更小时，不解码uniform_brick_spacing_flag，并且将uniform_brick_spacing_flag的值设置为或得出为1。

解码器410基于uniform_brick_spacing_flag的值来确定方块是否是均匀地分割的(S1182)，并确定RowHeight[i]的值(S1184、S1190)。当uniform_brick_spacing_flag＝＝1并且当RowHeight[i]的值超过3时，解码器410从比特流解码brick_height_minus1[i](S1186)。另一方面，当uniform_brick_spacing_flag＝＝1且RowHeight[i]的值不超过3时，不解码brick_height_minus1[i]，且将brick_height_minus1[i]的值设定为或得出为0。当uniform_brick_spacing_flag＝＝0且RowHeight[i]的值超过3时，解码器410从比特流解码num_brick_rows_minus2[i](S1192)。同时，当uniform_brick_spacing_flag＝＝0并且RowHeight[i]的值不超过3时，不解码num_brick_rows_minus2[i]，并且将num_brick_rows_minus2[i]的值设置为或得出为0。解码器410从比特流解码brick_row_height_minus1[i][j](S1194)。

如上所述，在本公开中提出的方块分割方法被配置成仅当RowHeight[i]的值超过3时，用信号通知和解码brick_height_minus1[i]和num_brick_rows_minus2[i]。在另一方面，在传统的方块分割方法中，对于当RowHeight[i]的值超过3时的情况和当RowHeight[i]的值不超过3时(换言之，与rowheight[i]的值是否超过3无关)的情况两者，均用信号通知和解码brick_height_minus1[i]和num_brick_rows_minus2[i]。因此，与传统的方块分割方法相比，本发明的方块分割方法可以提高比特效率。

实施方式2

实施方式2涉及用于将画面分割为切片的方法(用于获得切片分割信息的方法)和用于获得启用标志的方法。

表5示出了与实施方式2相关的句法结构。

[表5]

实施方式2-1

实施方式2-1涉及用于将画面分割成切片的方法。切片分割可以以包括一个或更多个拼块/方块的形式来实现。图12示出了拼块/方块与切片之间的分割关系，图13示出了用于将画面分割为切片的方法。

图12的(a)示出从画面分割的总共9个拼块/方块(3×3)，并且图12的(b)至(d)示出基于图12的(a)的拼块/方块分割的拼块/方块(实线)和切片(点划线)之间的分割关系。如图12的(b)所示，一个拼块/方块可以包括一个切片(1：1分割关系)，并且多个拼块/方块可以包括一个矩形切片，如图12的(c)所示(n：1分割关系，其中n是大于或等于2的自然数)。此外，如图12的(d)所示，整个拼块/方块可以构成一个切片(全：1分割关系)，并且如图12的(e)所示，多个拼块/方块可以形成一个光栅扫描切片。在图12的(e)中，在右上方向上填充有斜线的拼块/方块构成一个光栅扫描切片。此外，在未填充斜线图案的拼块/方块中，画面上部的两个拼块/方块构成另一光栅扫描切片，画面下部和右侧的另外3个拼块/方块构成又一光栅扫描切片。

视频编码装置确定切片是否包括一个或更多个拼块/方块，并将确定结果设置为single_brick_per_slice_flag句法元素的值。当single_brick_per_slice_flag＝＝1时，其指示切片包含一个拼块/方块，且当single_brick_per_slice_flag＝＝0时，其指示切片可包含一个或更多个拼块/方块。single_brick_per_slice_flag被编码并用信号通知给视频解码装置。

当single_brick_per_slice_flag＝＝1时，拼块/方块和切片具有1：1的分割关系；因此，视频编码装置不用信号通知附加的切片分割信息。

视频编码装置确定切片的模式，并将确定结果设置为rect_slice_flag句法元素的值。当rect_slice_flag＝＝0时，指示相关切片的模式是光栅扫描切片模式；当rect_slice_flag＝＝1时，其指示相关切片的模式是矩形切片模式。当single_brick_per_slice_flag＝＝0时，rect_slice_flag被编码并被用信号通知给视频解码装置。

视频编码装置确定画面内的片的数量，并将确定结果设置为num_slices_in_pic_minus1句法元素的值。num_slices_in_pic_minus1是指示通过从画面内的切片的数量减去1而获得的值的句法元素。num_slices_in_pic_minus1被编码并被用信号通知给视频解码装置。

视频编码装置确定位于各个切片的右下部分内的拼块/方块(右下拼块/方块)，并将右下拼块/方块之间的索引值差的绝对值和正负号设置为bottom_right_brick_idx_delta[i]句法元素和brick_idx_delta_sign_flag[i]句法元素的值。

对于画面中的第二切片和后续(i>1)切片，bottom_right_brick_idx_delta[i]表示在前切片中的右下方拼块/方块的索引与在后切片中的右下方拼块/方块的索引之间的差的绝对值。然而，bottom_right_brick_idx_delta[i]在其到达画面中的第一(i＝＝0)切片时指示第一切片中的右下方拼块/方块的索引。当brick_idx_delta_sign_flag[i]＝＝1时，指示bottom_right_brick_idx_delta[i]的正负号为正；当brick_idx_delta_sign_flag[i]＝＝0时，指示bottom_right_brick_idx_delta[i]的正负号为负。对bottom_right_brick_idx_delta[i]和brick_idx_delta_sign_flag[i]被编码并被用信号通知给视频解码装置。

在用信号通知bottom_right_brick_idx_delta[i]和brick_idx_delta_sign_flag[i]之前，bottom_right_brick_idx_length_minus1句法元素被编码并且被用信号通知。bottom_right_brick_idx_length_minus1指示用于表示bottom_right_brick_idx_delta[i]的比特数。

解码器410从比特流解码single_brick_per_slice_flag(S1310)。当single_brick_per_slice_flag在比特流中不存在时，single_brick_per_slice_flag的值被设置为或得出为“1”。

解码器410基于single_brick_per_slice_flag的值来确定是否解码(获得)附加切片分割信息(S1320)。当single_brick_per_slice_flag＝＝1时，不解码附加切片分割信息，并且从拼块/方块分割信息得出切片分割信息。相反，当single_brick_per_slice_flag＝＝0时，解码器410从比特流中解码rect_slice_flag(S1330)。当rect_slice_flag在比特流中不存在时，rect_slice_flag的值被设置为或得出为“1”。

当切片的模式是矩形切片模式(rect_slice_flag＝＝1)并且该切片包括一个或更多个拼块/方块(single_brick_per_slice_flag＝＝0)时(S1340)，解码器410从比特流解码num_slices_in_pic_minus1和bottom_right_brick_idx_length_minus1(S1350)。当num_slices_in_pic_minus1不存在于比特流中并且single_brick_per_slice_flag＝＝1时，num_slices_in_pic_minus1不被解码，并且被设置为或得出为通过从画面中的拼块/方块的数量减去1而获得的值。

当切片的模式是矩形切片模式(rect_slice_flag＝＝1)并且该切片包括一个或更多个拼块/方块(single_brick_per_slice_flag＝＝0)时(S1340)，解码器410从比特流解码bottom_right_brick_idx_delta[i]和brick_idx_delta_sign_flag[i](S1360)。由于当single_brick_per_slice_flag＝＝1时，bottom_right_brick_idx_delta[i]和brick_idx_delta_sign_flag[i]不被用信号通知(解码)，因此bottom_right_brick_idx_delta[i]被设置为或得出为1(bottom_right_brick_idx_delta[i]＝＝1)。

表6示出了应用于图12的拼块与切片之间的分割关系的实施方式2-1的切片分割方法。

[表6]

在图12的(b)的情况下，由于拼块/方块与切片之间的分割关系是相同的(1：1关系)，通过将single_brick_per_slice_flag设置为“1”来用信号通知；在不用信号通知的情况下根据拼块/方块分割信息得出其它切片分割信息。

在图12的(c)的情况下，由于拼块/方块和切片之间的分割关系不相同，通过将single_brick_per_slice_flag设置为“0”来用信号通知；由于切片模式是矩形切片模式，所以通过将rect_slice_flag设置为1来用信号通知。此外，由于画面中的切片的数量是3，所以通过将num_slices_in_pic_minus1设置为2来用信号通知；设置bottom_right_brick_idx_delta[i]并用信号通知，使得bottom_right_brick_idx_delta[0]＝＝2，bottom_right_brick_idx_delta[1]＝＝3，并且bottom_right_brick[2]＝＝3。此外，brick_idx_delta_sign_flag[i]被设置并用信号通知，使得brick_idx_delta_sign_flag[0]＝＝1(+)，brick_idx_delta_sign_flag[1]＝＝1，并且brick_idx_delta_sign_flag[2]＝＝1。

在图12的(d)和(e)的情况下，由于拼块/方块与切片之间的分割关系不相同，通过将single_brick_per_slice_flag设置为“0”来用信号通知；由于切片模式是光栅扫描切片模式，所以通过将rect_slice_flag设置为0来用信号通知。剩余的切片分割信息不被用信号通知。

在不同的实施方式中，图12的(d)的切片模式可以被设置为矩形切片模式(rect_slice_flag＝＝1)，并且画面中的切片的数量可以被设置为1(num_slices_in_pic_minus1＝＝0)。在这种情况下，表7示出了用信号通知的切片分割信息的示例。

[表7]

	图12的(d)
		single_brick_per_slice_flag	0
rect_slice_flag	1
		num_slices_in_pic_minus1	0
bottom_right_brick_idx_length_minus1	0
		bottom_right_brick_idx_delta	-
brick_idx_delta_sign_flag	-

实施方式2-2

实施方式2-2涉及用于获得启用标志(loop_filter_across_slices_enabled_flag)的方法，所述启用标志指示是否对切片之间的边界应用环路内滤波。

可基于预设条件来确定是否用信号通知loop_filter_across_slices_enabled_flag。这是因为，依赖于拼块/方块与切片之间的分割关系，拼块/方块的边界和切片的边界可以部分或完全重叠(或者可以相同)。例如，在图12的(b)的情况下，拼块/方块的边界和切片的边界完全相同；在图12的(c)的情况下，拼块/方块的边界和切片的边界部分地相同；在图12的(d)的情况下，切片的边界变成画面的边界，并且在图12的(e)的情况下，拼块/方块的边界和切片的边界可以部分地相同。

在图14至图17中示出了实施方式2-2的各种示例。

视频编码装置对切片分割信息进行编码，并将编码的信息用信号通知给视频解码装置。解码器410从比特流解码切片分割信息(S1410、S1510、S1610、S1710)，并基于切片分割信息将画面分割为一个或更多个切片。

依赖于预设条件，视频编码装置确定是否用信号通知loop_filter_across_slices_enabled_flag。换言之，当满足预设条件时，对loop_filter_across_slices_enabled_flag被编码并用信号通知给视频解码装置。解码器410确定是否满足预设条件(S1420，S1520，S1620，S1720)，并基于确定结果从比特流解码loop_filter_across_slices_enabled_flag(S1430，S1530，S1630，S1730)。

该预设条件可包括画面中的切片的数量是否为多个(画面是否被分割为多个切片)以及切片模式是否为矩形切片模式的一个或更多个条件。

例如，如图14所示，预设条件可包括画面中的切片的数量是否为多个(num_slices_in_pic_minus1)以及切片的模式是否为矩形切片模式(rect_slice_flag)的条件。在这种情况下，当画面中的切片的数量是多个或者切片模式不是矩形切片模式时(num_slices_in_pic_minus1>0||rect_slice_flag＝＝0)，以信号通知并解码loop_filter_across_slices_enabled_flag。

在图12的(b)和(c)的情况下，由于num_slices_in_pic_minus1>0，所以用信号通知并解码loop_filter_across_slices_enabled_flag，并且在图12的(d)和(e)的情况下，因为rect_slice_flag＝＝0，所以用信号通知并解码loop_filter_across_slices_enabled_flag。

在不同的实施方式中，预设条件可以包括切片模式是否是矩形切片模式，切片中是否包括一个或更多个拼块/方块以及是否对拼块/方块之间的边界应用环路内滤波的一个或更多个条件。

例如，如图15所示，预设条件可包括以下所有条件：切片模式是否是矩形切片模式(rect_slice_flag)、切片中是否包括一个或更多个拼块/方块(single_brick_per_slice_flag)、以及是否对拼块/方块之间的边界应用环路内滤波(loop_filter_across_bricks_enabled_flag)。

在这种情况下，当切片模式是矩形切片模式时，切片包括一个或更多个拼块/方块，并且环路内滤波被应用于拼块/方块之间的边界(rect_slice_flag＝＝1&&single_brick_per_slice_flag＝＝0&&loop_filter_across_bricks_enabled_flag＝＝1)，loop_filter_across_slices_enabled_flag被用信号通知和解码。表5示出了图15所示的预设条件的句法结构。

在图12的(b)的情况下，由于single_brick_per_slice_flag＝＝1，所以loop_filter_across_slices_enabled_flag不被用信号通知和解码。由于拼块/方块与切片之间的分割关系是1：1(即，拼块/方块的所有边界与切片的边界一致)，因此不需要单独地用信号通知用于切片边界的loop_filter_across_slices_enabled_flag。

在图12的(c)的情况下，由于rect_slice_flag＝＝1、single_brick_per_slice_flag＝＝0、并且loop_filter_across_bricks_enabled_flag＝＝1，所以用信号通知loop_filter_across_slices_enabled_flag。在图12的(d)和(e)的情况下，由于rect_slice_flag＝＝0，所以不用信号通知loop_filter_across_slices_enabled_flag。这里，在如图12的(d)所示的全：1分割关系的情况下，切片边界与画面边界一致，因此不需要单独地用信号通知用于切片边界的loop_filter_across_slices_enabled_flag。

在不同的实施方式中，如图16所示，该预设条件可以包括一个或更多个拼块/方块是否被包括在切片中(single_brick_per_slice_flag)以及是否对拼块/方块之间的边界应用环路内滤波(loop_filter_across_bricks_enabled_flag)。

在这种情况下，当一个或更多个拼块/方块被包括在切片中，并且对拼块/方块之间的边界应用环路内滤波(single_brick_per_slice_flag＝＝0&&&loop_filter_across_bricks_enabled_flag＝＝1)时，loop_filter_across_slices_enabled_flag被用信号通知和解码。

表8示出了图16所示的预设条件的句法结构。

[表8]

在图12的(b)的情况下，由于single_brick_per_slice_flag＝＝1，所以不用信号通知loop_filter_across_slices_enabled_flag。在图12的(c)到(e)的情况下，由于single_brick_per_slice_flag＝＝0并且loop_filter_across_bricks_enabled_flag＝＝1，所以用信号通知loop_filter_across_slices_enabled_flag。

在不同的实施方式中，如图17所示，该预设条件可包括画面中的片的数量是否为多个(num_slices_in_pic_minus1)、切片模式是否为矩形切片模式(rect_slice_flag)、切片中是否包括一个或更多个拼块/方块(single_brick_per_slice_flag)，以及是否对拼块/方块之间的边界应用环路内滤波(loop_filter_across_bricks_enabled_flag)。

在这种情况下，当对拼块/方块之间的边界应用环路内滤波、一个或更多个拼块/方块被包括在切片中、并且切片模式不是矩形切片模式(loop_filter_across_bricks_enabled_flag＝＝1&&single_brick_per_slice_flag＝＝0&&rect_slice_flag＝＝0)时，loop_filter_across_slice_enabled_flag被用信号通知和解码。

另选地，当对拼块/方块之间的边界应用环路内滤波，一个或更多个拼块/方块被包括在切片中、切片模式是矩形切片模式、并且画面中的切片数量是多个(loop_filter_across_bricks_enabled_flag＝＝1&&single_brick_per_slice_flag＝＝0&&rect_slice_flag＝＝1&&num_slices_in_pic_minus1>0)时，loop_filter_across_slices_enabled_flag被用信号通知和解码。

表9示出了图17所示的预设条件的句法结构。

[表9]

如果将表7所示的切片设置应用于图17的预设条件，则可以如下确定是否用信号通知启用标志。在图12的(b)的情况下，由于single_brick_per_slice_flag＝＝1，所以不用信号通知loop_filter_across_slices_enabled_flag。在图12的(c)和(e)的情况下，由于loop_filter_across_bricks_enabled_flag＝＝1、single_brick_per_slice_flag＝＝0、rect_slice_flag＝＝1、并且num_slices_in_pic_minus1>0，所以用信号通知loop_filter_across_slices_enabled_flag。在图12的(d)的情况下，由于num_slices_in_pic_minus1＝＝0，所以不用信号通知loop_filter_across_slices_enabled_flag。

实施方式3

实施方式3涉及用于将画面分割为子画面的方法(用于获得子画面分割信息的方法)。图18示出了实施方式3的一个示例。

在将画面分割为具有预定大小的多个CTU之后，视频编码装置对CTU的大小信息(CTU大小信息)进行编码，并将编码的信息用信号通知给视频解码装置。此外，在基于树结构将CTU分割为CU之后，视频编码装置对CU的最小大小信息(MinCb大小信息)进行编码，并将编码的信息用信号通知给视频解码装置。可以在比特流的SPS级别、PPS级别和切片头级别中的一个或更多个位置处定义和用信号通知MinCb大小信息。

视频编码装置将画面分割为多个子画面。可基于根据CTU大小信息得出的CTU大小或基于根据MinCb大小信息得出的MinCb大小将画面分割为子画面。

因此，子画面分割信息可以以CTU大小为单位或以MinCb大小为单位来表示画面内的子画面。子画面分割信息可包括指示各个子画面的位置的子画面位置信息和指示各个子画面的大小的子画面大小信息。子画面位置信息可以以CTU大小为单位或以MinCb大小为单位来表示画面内的子画面的位置。子画面大小信息还可以以CTU大小为单位或以MinCb大小为单位来表示子画面的大小。

解码器410从比特流解码CTU大小信息和MinCb大小信息(S1810)。此外，解码器410从比特流解码子画面分割信息(S1820)。

解码器410基于CTU大小信息将画面分割为CTU，并基于子画面分割信息将画面分割为子画面(S1830)。

传统的子画面分割方法以4个样本为单位来表示子画面。换言之，传统的子画面分割方法使用4的倍数作为子画面分割的单位。然而，如上所述，画面可被分割为多个CTU，被分割为包含一个或更多个CTU的拼块/方块，被分割为包含一个或更多个拼块/方块的切片，以及被分割为包含一个或更多个切片的子画面。因此，以CTU大小为单位(以CTU的倍数为单位)来表示拼块/方块、切片和子画面可以是最高效的。因此，当根据实施方式3以CTU大小为单位表示子画面时，可以实现高效的子画面分割。

基于该实施方式，子画面分割信息可以以CTU大小或MinCb大小为单位直接或间接地表示子画面。这里，间接表示方法通过不同的子单元连接CTU和子画面。不同的子单元可以是网格，并且网格可以以CTU大小为单位来表示，子画面以网格大小为单位来表示，并且结果，子画面可以以CTU大小为单位来表示。

图19示出了间接表示方法的示例，表10示出了间接表示方法的句法结构。

[表10]

视频编码装置确定是否执行子画面分割(比特流中是否存在子画面参数)，并将确定结果设置为subpics_present_flag句法元素的值。当subpics_present_flag＝＝1时，其指示执行子画面分割，而当subpics_present_flag＝＝0时，其指示不执行子画面分割。

当subpics_present_flag＝＝1时，视频编码装置解码max_subpics_minus1和subpic_grid_row_height_minus1，其中，max_subpics_minus1是指示子画面的最大数量的句法元素，subpic_grid_col_width_minus1是指示以CTU大小为单位或以MinCb大小为单位的网格列的宽度的句法元素，subpic_grid_row_height_minus1是以CTU大小为单位或以MinCb大小为单位指示网格行的高度的句法元素，并且编码的句法元素被用信号通知给视频解码装置。

max_subpics_minus1表示通过从子画面的最大数量中减去1而获得的值，subpic_grid_col_width_minus1表示通过从网格列的宽度中减去1而获得的值，并且subpic_grid_row_height_minus1表示通过从网格行的高度中减去1而获得的值。

视频编码装置对子画面索引(subpic_grid_idx[i][j])进行编码，并将编码后的子画面索引用信号通知给视频解码装置。子画面索引指示各个网格所属的子画面的索引，并且可以通过子画面索引来确定哪个网格属于哪个子画面。

解码器410从比特流解码subpics_present_flag(S1910)，并确定subpics_present_flag的值(S1920)。

当subpics_present_flag＝＝1时，解码器410从比特流中解码max_subpics_minus1、subpic_grid_col_width_minus1和subpic_grid_row_height_minus1(S1930)。

由于网格具有固定的宽度和高度，可以基于subpic_grid_col_width_minus1得出网格列的数量(i)，并且可以基于subpic_grid_row_height_minus1得出网格行的数量(j)。结果，可以基于subpic_grid_col_width_minus1和subpic_grid_row_height_minus1将画面分割为网格。

解码器410可从比特流解码子画面索引(S1940)，并通过从多个网格中确定被分配了相同子画面索引的网格作为子画面的处理，来将画面分割为子画面。

虽然出于说明的目的描述了示例性实施方式，但是本领域技术人员将理解，在不脱离实施方式的思想和范围的情况下，各种修改和改变是可能的。为了简洁和清楚起见，已经描述了示例性实施方式。因此，本领域技术人员将理解，实施方式的范围不受以上明确描述的实施方式的限制，而是包括权利要求及其等同物。

相关申请的交叉引用

本申请要求分别于2019年9月27日和2020年9月7日提交的韩国专利申请10-2019-0119353和10-2020-0113632的优先权，其全部内容通过引用并入本文。

Claims (9)

1.一种用于获得关于从画面分割的子单元的信息的方法，所述方法包括：

从比特流解码指示画面内的编码树单元CTU的大小的CTU大小信息；

从所述比特流中解码以所述CTU大小为单位表示所述画面内的子画面的子画面分割信息；

从所述比特流解码关于将所述画面分割为一个或更多个拼块的分割信息；以及

从所述比特流解码关于将所述画面分割为一个或更多个切片的分割信息。

2.根据权利要求1所述的方法，其中，所述子画面分割信息包括以CTU大小为单位表示各个子画面的大小的子画面大小信息。

3.根据权利要求1所述的方法，所述方法还包括基于预设条件从所述比特流解码启用标志，所述启用标志指示是否在所述切片的边界处执行滤波，

其中，所述预设条件包括所述切片的数量是否为多个以及切片模式是否为矩形切片模式的一个或更多个条件。

4.根据权利要求3所述的方法，其中，当所述切片的数量为多个或者所述切片模式不是矩形切片模式时，对所述启用标志进行解码。

5.一种视频解码装置，该视频解码装置包括：

解码器，所述解码器被配置成从比特流解码关于从画面分割的子单元的信息；以及

画面重构器，所述画面重构器被配置成基于关于所述子单元的信息来重构所述画面，

其中，所述解码器被配置成：

从所述比特流解码指示所述画面内的编码树单元CTU的大小的CTU大小信息，

从所述比特流中解码以CTU大小为单位表示所述画面内的子画面的子画面分割信息，

从所述比特流解码关于将所述画面分割为一个或更多个拼块的分割信息；以及

从所述比特流解码关于将所述画面分割为一个或更多个切片的分割信息。

6.根据权利要求5所述的装置，其中，所述子画面分割信息包括以CTU大小为单位表示各个子画面的大小的子画面大小信息。

7.根据权利要求5所述的装置，其中，所述解码器基于预设条件从所述比特流解码启用标志，所述启用标志指示是否在所述切片的边界处执行滤波。

其中，所述预设条件包括所述切片的数量是否为多个以及切片模式是否为矩形切片模式的一个或更多个条件。

8.根据权利要求7所述的装置，其中，当所述切片的数量为多个或者所述切片模式不是矩形切片模式时，所述解码器对所述启用标志进行解码。

9.一种视频编码装置，该视频编码装置包括：

画面编码器，所述画面编码器被配置成将画面分割成子单元以对所述画面进行编码；以及

编码器，所述编码器被配置为对关于所述子单元的信息进行编码；

其中，所述编码器被配置成：

对指示所述画面内的编码树单元CTU的大小的CTU大小信息进行编码，

对以所述CTU大小为单位表示所述画面内的子画面的子画面分割信息进行编码，

对关于将所述画面分割为一个或更多个拼块的分割信息进行编码，以及

对关于将所述画面分割为一个或更多个切片的分割信息进行编码。

Images