CN113302927B - 使用运动补偿的视频信号处理方法和设备 - Google Patents

使用运动补偿的视频信号处理方法和设备 Download PDF

Info

Publication number
CN113302927B
CN113302927B CN202080009653.XA CN202080009653A CN113302927B CN 113302927 B CN113302927 B CN 113302927B CN 202080009653 A CN202080009653 A CN 202080009653A CN 113302927 B CN113302927 B CN 113302927B
Authority
CN
China
Prior art keywords
mode
flag
merge
condition
current block
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202080009653.XA
Other languages
English (en)
Other versions
CN113302927A (zh
Inventor
高建重
金东哲
孙周亨
郑在洪
郭真三
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wilus Institute of Standards and Technology Inc
Original Assignee
Wilus Institute of Standards and Technology Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wilus Institute of Standards and Technology Inc filed Critical Wilus Institute of Standards and Technology Inc
Publication of CN113302927A publication Critical patent/CN113302927A/zh
Application granted granted Critical
Publication of CN113302927B publication Critical patent/CN113302927B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157—Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/137—Motion inside a coding unit, e.g. average field, frame or block difference
    • H04N19/139—Analysis of motion vectors, e.g. their magnitude, direction, variance or reliability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/573—Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Abstract

公开的是一种对视频信号进行编码或解码的视频信号处理方法和设备。特别地，视频信号处理方法可以包括以下步骤：解析第一语法元素，该第一语法元素指示是否将合并模式应用于当前块；在合并模式被应用于当前块时，基于第一预定义条件来确定是否解析第二语法元素，其中，第二语法元素指示第一模式或第二模式是否被应用于当前块；在第一模式和第二模式不被应用于当前块时，基于第二预定义条件来确定是否解析第三语法元素，其中，第三语法元素指示来自第三模式和第四模式之间被应用于当前块的模式；基于第二语法元素或第三语法元素来确定被应用于当前块的模式；基于所确定的模式来导出当前块的运动信息；以及通过使用当前块的运动信息来生成当前块的预测块。

Description

使用运动补偿的视频信号处理方法和设备
技术领域
本发明涉及一种处理视频信号的方法及设备，更具体地，涉及一种用于处理视频信号的方法和设备，其中，通过使用运动补偿来编码或解码视频信号。
背景技术
压缩编译是指一系列信号处理技术，用于通过通信线路发送数字化信息或以适合记录介质的类型存储这些信息。压缩编译的对象包括声音、图像、字符等，以及一种用于执行与图像有关的压缩编译的技术具体地被称为视频图像压缩。考虑到空间相关性、时间相关性、概率相关性等，通过去除冗余信息来执行关于视频信号的压缩编译。然而，各种媒体和数据传输仪器的最近发展产生了对以更高效率处理视频信号的方法和设备的需求。
发明内容
技术问题
本发明的方面是提高视频信号编译效率。本发明的另一方面是提供一种有效的合并模式信令方法。
技术方案
为解决上述问题，本发明提供视频信号处理设备和视频信号处理方法如下。
根据本发明的实施例，提供了一种视频信号处理方法，包括：解析指示是否将合并模式应用于当前块的第一语法元素；在合并模式被应用于当前块时，基于第一预定义条件，确定是否解析第二语法元素，其中，第二语法元素指示是否第一模式或第二模式被应用于当前块；在第一模式和第二模式不被应用于当前块时，基于第二预定义条件，确定是否解析第三语法元素，其中，第三语法元素指示第三模式和第四模式中被应用于当前块的模式；基于第二语法元素或第三语法元素来确定被应用于当前块的模式；基于所确定的模式来导出当前块的运动信息；以及通过使用当前块的运动信息来生成当前块的预测块，其中，第一条件包括可使用第三模式的条件和可使用第四模式的条件中的至少一个。
在实施例中，第三模式和第四模式在合并数据语法中的解码顺序上可以晚于第一模式被定位。
在实施例中，该方法可以进一步包括当满足第一条件时，解析第二语法元素，以及当不满足第一条件时，可以将第二语法元素的值推断为1。
在实施例中，当不满足第一条件时，可以基于指示是否基于子块的合并模式被应用于当前块的第四语法元素来推断第二语法元素。
在实施例中，第二条件可以包括可使用第四模式的条件。
在实施例中，第二条件可以包括与第三模式在当前序列中是否可使用、第四模式在当前序列中是否可使用、第四模式的候选的最大数目是否大于1、当前块的宽度是否小于第一预定义大小，以及当前块的高度是否小于第二预定义大小有关的条件中的至少一个。
在实施例中，该方法可以进一步包括当第二语法元素的值为1时，获得指示被应用于当前块的模式是第一模式还是第二模式的第五语法元素。
根据本发明的实施例，提供了一种视频信号处理装置，包括处理器，其中，处理器被配置为：解析指示是否将合并模式应用于当前块的第一语法元素；当合并模式被应用于当前块时，基于第一预定义条件来确定是否解析第二语法元素，其中，第二语法元素指示是否第一模式或第二模式被应用于当前块；当第一模式和第二模式不被应用于当前块时，基于第二预定义条件来确定是否解析第三语法元素，其中，第三语法元素指示在第三模式和第四模式当中被应用于当前块的模式；基于第二语法元素或第三语法元素来确定被应用于当前块的模式；基于所确定的模式来导出当前块的运动信息；以及通过使用当前块的运动信息，生成当前块的预测块，其中，第一条件包括可使用第三模式的条件和可使用第四模式的条件中的至少一个。
在实施例中，第三模式和第四模式在合并数据语法的解码顺序上可以晚于所述第一模式被定位。
在实施例中，当满足第一条件时，处理器可以解析第二语法元素，以及当不满足第一条件时，第二语法元素的值可以被推断为1。
在实施例中，当不满足第一条件时，可以基于指示是否基于子块的合并模式被应用于当前块的第四语法元素来推断第二语法元素。
在实施例中，第二条件可以包括可使用第四模式的条件。
在实施例中，第二条件可以包括与第三模式在当前序列中是否可使用、第四模式在当前序列中是否可使用、第四模式的候选的最大数目是否大于1、当前块的宽度是否小于第一预定义大小，以及当前块的高度是否小于第二预定义大小有关的条件中的至少一个。
在实施例中，当第二语法元素的值为1时，处理器可以获得指示被应用于当前块的模式是第一模式还是第二模式的第五语法元素。
根据本发明的实施例，提供了一种视频信号处理方法，包括：编码指示是否将合并模式应用于当前块的第一语法元素；当合并模式被应用于当前块时，基于第一预定义条件来确定是否编码第二语法元素，其中，第二语法元素指示是否第一模式或第二模式被应用于当前块；当第一模式和第二模式不被应用于当前块时，基于第二预定义条件来确定是否编码第三语法元素，其中，第三语法元素指示在第三模式或第四模式当被应用于当前块的模式；基于第二语法元素或第三语法元素来确定被应用于当前块的模式；基于所确定的模式来导出当前块的运动信息；以及通过使用当前块的运动信息来生成当前块的预测块，其中，第一条件包括可使用第三模式的条件和可使用第四模式的条件中的至少一个。
有益效果
根据本发明的实施例，可以提高视频信号的编译效率。特别地，根据本发明的实施例，可以通过控制语法解析顺序来减少信令开销并提高压缩效率。
附图说明
图1是示意地图示根据本发明的实施例的用于编码视频信号的装置的框图；
图2是示意性图示根据本发明的实施例的用于解码视频信号的装置的框图；
图3图示在图片内将编译树单元划分为编译单元的实施例；
图4图示发信号告知四叉树和多型树的划分的方法的实施例；
图5图示根据本发明的实施例的帧间预测；
图6图示根据本发明的实施例的发信号告知运动矢量的方法；
图7图示根据本发明的实施例的发信号告知自适应运动矢量分辨率信息的方法；
图8图示根据本发明的实施例的编译单元语法的示例；
图9图示根据本发明的实施例的编译单元语法的示例；
图10图示根据本发明的实施例的合并模式信令方法的示例；
图11图示根据本发明的实施例的合并数据语法结构的示例；
图12图示根据本发明的实施例的合并数据语法；
图13图示根据本发明的实施例的合并数据语法结构的示例；
图14图示根据本发明的实施例的合并数据语法结构的示例；
图15图示根据本发明的实施例的合并数据语法结构；
图16图示根据本发明的实施例的合并数据语法结构；
图17图示根据本发明的实施例的合并数据语法结构；
图18图示根据本发明的实施例的合并数据语法结构；
图19图示根据本发明的实施例的合并数据语法结构的示例；
图20图示根据本发明的实施例的合并数据语法结构的示例；
图21图示根据本发明的实施例的合并数据语法结构的示例；
图22图示根据本发明的实施例的合并数据语法结构的示例；
图23图示根据本发明的实施例的合并数据语法结构的示例；
图24图示根据本发明的实施例的合并数据语法结构；
图25图示根据本发明的实施例的合并数据语法结构的示例；
图26图示根据本发明的实施例的合并数据语法结构；
图27图示根据本发明的实施例的合并数据语法结构；
图28图示根据本发明的实施例的合并数据语法结构的示例；
图29图示根据本发明的实施例的合并模式信令方法的示例；
图30图示根据本发明的实施例的合并数据语法的示例；
图31图示根据本发明的实施例的合并数据语法的示例；
图32图示根据本发明的实施例的几何合并模式；
图33图示根据本发明的实施例的合并数据语法；以及
图34图示根据应用本发明的实施例的视频信号处理方法的示例。
具体实施方式
考虑到本公开中的功能，本说明书中使用的术语可以是当前广泛使用的通用术语，但是可以根据本领域的技术人员的意图、习俗或新技术的出现而改变。另外，在某些情况下，可能存在申请人任意选择的术语，并且在这种情况下，其含义在本公开的相应描述部分中进行了描述。因此，应基于整个说明书中的术语和内容的实质含义来解释本说明书中使用的术语。
在本说明书中，一些术语可以解释如下。在一些情况下，编码可以解释为编码或解码。在本说明书中，通过执行视频信号的编码(编码)来生成视频信号比特流的装置被称为编码装置或编码器，并且执行视频信号比特流的解码(解码)以重构视频信号的装置被称为解码装置或解码器。另外，在本说明书中，视频信号处理装置被用作包括编码器和解码器两者的概念的术语。信息是包括所有值、参数、系数、元素等的术语。在一些情况下，含义被不同地解释，因此本公开不限于此。“单元”被用作指代图像处理的基本单位或图片的特定位置的含义，并且指代包括亮度分量和色度分量两者的图像区域。另外，“块”指代包括亮度分量和色度分量(即，Cb和Cr)当中的特定分量的图像区域。然而，取决于实施例，诸如“单元”、“块”、“分区(partition)”和“区域”的术语可以互换使用。另外，在本说明书中，单元可以用作包括编译单元、预测单元和变换单元的全部的概念。图片指示场或帧，并且根据实施例，这些术语可以互换使用。
图1是根据本公开的实施例的视频信号编码装置的示意性框图。参考图1，本公开的编码装置100包括变换单元110、量化单元115、逆量化单元120、逆变换单元125、滤波单元130、预测单元150和熵编译单元160。
变换单元110通过对残差信号进行变换来获得变换系数的值，该残差信号是输入的视频信号与由预测单元150生成的预测信号之间的差。例如，可以使用离散余弦变换(DCT)、离散正弦变换(DST)或小波变换。DCT和DST通过将输入图像信号分割成多个块来执行变换。在变换中，编码效率可以根据变换区域中的值的分布和特性而变化。量化单元115对从变换单元110输出的变换系数值的值进行量化。
为了改进编码效率，代替照原样对图像信号进行编码的方法，使用一种方法，其使用通过预测单元150已经编码的区域来预测图片，并通过将在原始图片和预测的图片之间的残差值添加到预测的图片来获得重构图像。为了防止编码器和解码器中的不匹配，当在编码器中执行预测时，应该使用可以在解码器中使用的信息。为此，编码器再次执行重构编码的当前块的处理。逆量化单元120对变换系数的值进行逆量化，并且逆变换单元125使用逆量化的变换系数值来重构残差值。同时，滤波单元130执行滤波操作以改善重构图片的质量并改善编码效率。例如，可以包括去块滤波器、样本自适应偏移(SAO)和自适应环路滤波器。滤波后的图片被输出或存储在解码图片缓冲器(DPB)156中，以用作参考图片。
为了提高编译效率，不原样编译图片信号，而是使用通过使用已编译的区域并且将原始图片和预测图片之间的残差值与预测图片相加来经由预测单元150预测图片，从而获得重构图片的方法。帧内预测单元152在当前图片内执行帧内预测，并且帧间预测单元154通过使用存储在解码图片缓冲器156中的参考图片来预测当前图片。帧内预测单元152从当前图片中的重构区域执行帧内预测，并且将帧内编译信息传送到熵编译单元160。帧间预测单元154可以包括运动估计单元154a和运动补偿单元154b。运动估计单元154a通过参考特定的重构区域来获得当前区域的运动矢量值。运动估计单元154a将参考区域的位置信息(参考帧、运动矢量等)传递到熵编译单元160，以使得将该位置信息包括在比特流中。运动补偿单元154b通过使用从运动估计单元154a传递的运动矢量值来执行帧间运动补偿。
预测单元150包括帧内预测单元152和帧间预测单元154。帧内预测单元152在当前图片内执行帧内预测，并且帧间预测单元154执行帧间预测以通过使用存储在DBP 156中的参考图片来预测当前图片。帧内预测单元152从当前图片中的重构样本执行帧内预测，并且将帧内编码信息传送到熵编译单元160。帧内编码信息可以包括帧内预测模式、最可能模式(MPM)标志和MPM索引中的至少一个。帧内编码信息可以包括关于参考样本的信息。帧间预测单元154可以包括运动估计单元154a和运动补偿单元154b。运动估计单元154a通过参考重构参考图片的特定区域来获得当前区域的运动矢量值。运动估计单元154a将用于参考区域的运动信息集(参考图片索引、运动矢量信息等)传递到熵编译单元160。运动补偿单元154b通过使用从运动估计单元154a传递的运动矢量值来执行运动补偿。帧间预测单元154将包括关于参考区域的运动信息的帧间编码信息传递到熵编译单元160。
根据另一实施例，预测单元150可以包括帧内块复制(BC)预测单元(未示出)。帧内BC预测单元基于当前图片中的重构样本来执行帧内BC预测，并将帧内BC编码信息传送到熵编译单元160。帧内BC预测单元获得参考当前图片中的特定区域，指示用于预测当前区域的参考区域的块矢量值。帧内BC预测单元可以使用所获得的块矢量值来执行帧内BC预测。帧内BC预测单元将帧内BC编码信息传送到熵编译单元160。帧内BC编码信息可以包括块矢量信息。
当执行上述图片预测时，变换单元110变换在原始图片和预测图片之间的残差值以获得变换系数值。在这种情况下，可以以图片内的特定块为单位执行变换，并且可以在预设范围内改变特定块的大小。量化单元115对在变换单元110中生成的变换系数值进行量化，并将其发送到熵编译单元160。
熵编译单元160对指示量化的变换系数的信息、帧内编码信息、帧间编码信息等进行熵编译，以生成视频信号比特流。在熵编译单元160中，可以使用可变长度编译(VLC)方案、算术编译方案等。可变长度编译(VLC)方案包括将输入符号变换成连续的码字，并且码字的长度可以是可变的。例如，频繁出现的符号由短码字表示，而很少出现的符号由长码字表示。基于上下文的自适应可变长度编译(CAVLC)方案可以被用作可变长度编译方案。算术编译可以将连续数据符号变换成单个质数，其中，算术编译可以获得表示每个符号所需的最佳比特。基于上下文的自适应二进制算术编译(CABAC)可以被用作算术编译。例如，熵编译单元160可以二值化指示量化的变换系数的信息。熵编译单元160可以通过算术编译二进制信息来生成比特流。
使用网络抽象层(NAL)单元作为基本单位来封装所生成的比特流。NAL单元包括整数个编译的编译树单元。为了在视频解码器中对比特流进行解码，首先，必须将比特流分离成NAL单元，并且然后必须对每个分离的NAL单元进行解码。同时，可以通过诸如图片参数集(PPS)、序列参数集(SPS)、视频参数集(VPS)等等的高层集合的原始字节序列有效载荷(RBSP)来发送对视频信号比特流进行解码所需的信息。
同时，图1的框图示出根据本发明的实施例的编码装置100，并且分开显示的块在逻辑上区分并示出编码装置100的元件。因此，取决于设备的设计上述编码装置100的元件可以被安装为一个芯片或多个芯片。根据实施例，上述编码装置100的每个元件的操作可以由处理器(未示出)执行。
图2是根据本发明的实施例的视频信号解码装置200的示意性框图。参考图2，本发明的解码装置200包括熵解码单元210、逆量化单元220、逆变换单元225、滤波单元230和预测单元250。
熵解码单元210对视频信号比特流进行熵解码，以提取每个区域的变换系数信息、帧内编码信息、帧间编码信息等。例如，熵解码单元210可以从视频信号比特流中获得用于特定区域的变换系数信息的二值化代码。熵解码单元210通过对二进制码进行逆二值化来获得量化的变换系数。逆量化单元220对量化的变换系数进行逆量化，并且逆变换单元225通过使用逆量化的变换系数来重构残差值。视频信号处理设备200通过将由逆变换单元225获得的残差值与由预测单元250获得的预测值相加来重构原始像素值。
同时，滤波单元230对图片执行滤波以改善图像质量。这可以包括用于减少块失真的去块滤波器和/或用于去除整个图片的失真的自适应环路滤波器。滤波后的图片被输出或存储在DPB 256中，以用作下一个图片的参考图片。
预测单元250包括帧内预测单元252和帧间预测单元254。预测单元250通过使用通过上述熵解码单元210解码的编码类型、每个区域的变换系数和帧内/帧间编码信息来生成预测图片。为了重构其中执行解码的当前块，可以使用当前图片或包括当前块的其他图片的解码区域。在重构中，仅将当前图片，即，仅执行帧内预测或者帧内BC预测的图片(或贴片(tile)/切片(slice))称为帧内图片或I图片(或贴片/切片)，并且将能够执行所有帧内预测、帧间预测以及帧内BC预测的图片(或贴片/切片)称为帧间图片(或贴片/切片)。为了预测帧间图片(或贴片/切片)当中的每个块的样本值，使用最多一个运动矢量和参考图片索引的图片(或者贴片/切片)被称为预测图片或P图片(或贴片/切片)，并且使用最多两个运动矢量和参考图片索引的图片(或贴片/切片)称为双向预测图片或B图片(或贴片/切片)。换句话说，P图片(或贴片/切片)使用最多一个运动信息集来预测每个块，并且B图片(或贴片/切片)使用最多两个运动信息集来预测每个块。这里，运动信息集包括一个或多个运动矢量和一个参考图片索引。
帧内预测单元252使用帧内编码信息和当前图片中的重构的样本来生成预测块。如上所述，帧内编码信息可以包括帧内预测模式、最可能模式(MPM)标志和MPM索引中的至少一种。帧内预测单元252通过使用位于当前块的左边和/或上边的重构的样本作为参考样本来预测当前块的样本值。在本公开中，重构的样本、参考样本和当前块的样本可以表示像素。而且，样本值可以表示像素值。
根据实施例，参考样本可以是当前块的邻近块中包括的样本。例如，参考样本可以是与当前块的左边界相邻的样本和/或样本可以是与上边界相邻的样本。而且，参考样本可以是当前块的邻近块的样本当中的位于距当前块的左边界预定距离内的线上的样本和/或位于距当前块的上边界预定距离内的线上的样本。在这种情况下，当前块的邻近块可以包括左(L)块、上(A)块、左下(BL)块、右上(AR)块或左上(AL)块。
帧间预测单元254使用存储在DPB 256中的参考图片和帧间编码信息来生成预测块。帧间编译信息可以包括用于参考块的当前块的运动信息集(参考图片索引、运动矢量信息等)。帧间预测可以包括L0预测、L1预测和双向预测。L0预测意指使用L0图片列表中包括的一个参考图片进行预测，而L1预测意指使用L1图片列表中包括的一个参考图片进行预测。为此，可能需要一个运动信息集合(例如，运动矢量和参考图片索引)。在双向预测方法中，可以使用最多两个参考区域，并且两个参考区域可以存在于同一参考图片中或可以存在于不同图片中。即，在双向预测方法中，可以使用最多两个的运动信息集合(例如，运动矢量和参考图片索引)，并且两个运动矢量可以对应于相同的参考图片索引或不同的参考图片索引。在这种情况下，在时间方面，可以在当前图片之前和之后显示(或输出)参考图片。根据实施例，在双向预测方案中使用的两个参考区域可以是分别从图片列表L0和图片列表L1中选择的区域。
帧间预测单元254可以使用运动矢量和参考图片索引来获得当前块的参考块。参考块在与参考图片索引相对应的参考图片中。而且，由运动矢量指定的块的样本值或其内插值可以用作当前块的预测器。对于具有子像素(sub-pel)单位像素准确度的运动预测，例如，可以使用用于亮度信号的8抽头内插滤波器和用于色度信号的4抽头内插滤波器。然而，以子像素为单位的用于运动预测的内插滤波器不限于此。以这种方式，帧间预测单元254执行运动补偿以根据先前使用运动信息重构的运动图片来预测当前单元的纹理。在这样的情况下，帧间预测单元可以使用运动信息集。
根据另一实施例，预测单元250可以包括帧内BC预测单元(未示出)。帧内BC预测单元可以通过参考包括当前图片内的重构样本的特定区域来重构当前区域。帧内BC预测单元从熵解码单元210获得当前区域的帧内BC编码信息。帧内BC预测单元获得指示当前图片中的特定区域的当前区域的块矢量值。帧内BC预测单元可以通过使用所获得的块矢量值来执行帧内BC预测。帧内BC编码信息可以包括块矢量信息。
通过将从帧内预测单元252或帧间预测单元254输出的预测值与从逆变换单元225输出的残差值相加生成重构的视频图片。即，视频信号解码装置200使用由预测单元250生成的预测块和从逆变换单元225获得的残差来重构当前块。
同时，图2的框图示出根据本发明的实施例的解码装置200，并且分开显示的块在逻辑上区分并示出解码装置200的元件。因此，取决于设备的设计上述解码装置200的元件可以被安装为一个芯片或多个芯片。根据实施例，上述解码装置200的每个元件的操作可以由处理器(未示出)执行。
图3图示其中在图片中编译树单元(CTU)被分割成编译单元(CU)的实施例。在视频信号的编码过程中，可以将图片分割成一系列编译树单元(CTU)。编译树单元由亮度样本的NXN块和与其相对应的色度样本的两个块组成。编译树单元可以被分割成多个编译单元。编译树单元可以不被分割，并且可以是叶节点。在这种情况下，编译树单元本身可以是编译单元。编译单元指代在上述视频信号的处理过程中，即，帧内/帧间预测、变换、量化和/或熵编译中用于处理图片的基本单元。一个图片中编译单元的大小和形状可能不恒定。编译单元可以具有正方形或矩形形状。矩形编译单元(或矩形块)包括垂直编译单元(或垂直块)和水平编译单元(或水平块)。在本说明书中，垂直块是其高度大于宽度的块，并且水平块是其宽度大于高度的块。此外，在本说明书中，非正方形块可以指代矩形块，但是本公开不限于此。
参考图3，首先将编译树单元分割成四叉树(QT)结构。即，在四叉树结构中具有2NX2N大小的一个节点可以被分割成具有NXN大小的四个节点。在本说明书中，四叉树也可以称为四元树。可以递归地执行四叉树分割，并非所有节点都需要以相同的深度分割。
同时，上述四叉树的叶节点可以进一步被分割成多类型树(MTT)结构。根据本发明的实施例，在多类型树结构中，一个节点可以被分割成水平或垂直划分的二叉或三叉树结构。即，在多类型树结构中，存在四个分割结构，诸如垂直二元分割、水平二元分割、垂直三元分割和水平三元分割。根据本发明的实施例，在每个树结构中，节点的宽度和高度都可以具有2的幂。例如，在二叉树(BT)结构中，2NX2N大小的节点可以通过垂直二元分割被分割成两个NX2N节点，并通过水平二元分割将其分割成两个2NXN节点。另外，在三叉树(TT)结构中，将2NX2N大小的节点通过垂直三元分割被分割成(N/2)X2N、NX2N和(N/2)X2N节点，并通过水平三元分割被分割成2NX(N/2)、2NXN和2NX(N/2)节点。可以递归地执行此多类型树分割。
多类型树的叶节点可以是编译单元。如果未指示用于编译单元的分割或针对最大变换长度该编译单元不大，则无需进一步划分就将编译单元用作预测和变换的单元。另一方面，可以通过诸如PPS、SPS、VPS等的高层集合的RBSP来预定义或发送上述四叉树和多类型树中的以下参数中的至少一个。1)CTU大小：四叉树的根节点大小，2)最小QT大小MinQtSize：允许的最小QT叶节点大小，3)最大BT大小MaxBtSize：允许的最大BT根节点大小，4)最大TT大小MaxTtSize：允许的最大TT根节点大小，5)最大MTT深度MaxMttDepth：从QT的叶节点分割而来的MTT的最大允许深度，6)最小BT大小MinBtSize：允许的最小BT叶节点大小，7)最小TT大小MinTtSize：允许的最小TT叶节点大小。
图4示出用于用信号发送四叉树和多类型树的分割的方法的实施例。可以使用预设标志来用信号发送上述四叉树和多类型树的分割。参考图4，指示是否分割四叉树节点的标志“qt_split_flag”、指示是否分割多类型树节点的标志“mtt_split_flag”、指示多类型树节点的分割方向的标志“mtt_split_vertical_flag”或者指示多类型树节点的分割类型的标志“mtt_split_binary_flag”中的至少一个可以被使用。
根据本发明的实施例，编译树单元是四叉树的根节点，并且可以首先被分割成四叉树结构。在四叉树结构中，为每个节点“QT_node”用信号发送“qt_split_flag”。如果“qt_split_flag”的值为1，则将该节点分割成4个正方形节点，并且如果“qt_split_flag”的值为0，则相应的节点成为四叉树的叶节点“QT_leaf_node”。
每个四叉树叶节点“QT_leaf_node”可以进一步被分割成多类型树结构。在多类型树结构中，为每个节点“MTT_node”用信号发送“mtt_split_flag”。当“mtt_split_flag”的值是1时，相应的节点被分割成多个矩形节点，并且当“mtt_split_flag”的值是0时，相应的节点是多类型树的叶节点“MTT_leaf_node”。当将多类型树节点“MTT_node”分割成多个矩形节点时(即，当“mtt_split_flag”的值是1时)，可以附加地用信号发送节点“MTT_node”的“mtt_split_vertical_flag”和“mtt_split_binary_flag”。当“mtt_split_vertical_flag”的值是1时，指示节点“MTT_node”的垂直分割，并且当“mtt_split_vertical_flag”的值是0时，指示节点“MTT_node”的水平分割。另外，当“mtt_split_binary_flag”的值为1时，节点“MTT_node”被分割成2个矩形节点，并且当“mtt_split_binary_flag”的值为0时，节点“MTT_node”被分割成3个矩形节点。
对不再被划分的编译单元(即，编译单元树的叶节点)上执行用于编码的图片预测(运动补偿)。在下文中，用于执行预测的基本单元将被称为“预测单元”或“预测块”。
在下文中，在此，使用的术语“单元”可以代替预测单元，该预测单元是用于执行预测的基本单元。然而，本公开不限于此，并且“单元”可以被理解为广泛地涵盖编译单元的概念。
图5图示根据本发明的实施例的帧间预测。如上所述，解码器可以参考另一个解码的图片的恢复样本来预测当前块。参考图5，解码器基于当前块32的运动信息获取参考图片内的参考块42。在这种情况下，运动信息可以包括参考图片索引和运动矢量50。参考图片索引指示参考图片列表中的当前块的参考图片。此外，运动矢量50指示当前图片内的当前块32的坐标值与参考图片内的参考块42的坐标值之间的偏移。解码器基于参考块42的采样值来获取当前块32的预测器，并且使用该预测器来恢复当前块32。
同时，根据本发明的实施例，可以使用基于子块的运动补偿。即，当前块32可以被划分为多个子块，并且独立的运动矢量可以被用于每个子块。因此，在当前块32内可以使用不同参考块来预测各个子块。根据实施例，子块可以具有诸如4X4或8X8的预设大小。解码器通过每个子块的运动矢量来获取当前块32的每个子块的预测器。通过各个子块的预测器的组合，可以获取当前块32的预测器，并且解码器可以使用所获取的当前块32的预测器来恢复当前块32。
根据本发明的实施例，可以执行通过各种方法的基于子块的运动补偿。基于子块的运动补偿可以包括基于仿射模型的运动补偿(在下文中，称为仿射运动补偿或仿射运动预测)和基于子块的时间运动矢量预测(SbTMVP)。在下文中，参考附图描述了仿射运动补偿和SbTMVP的各种实施例。
图6图示根据本发明的实施例的发信号告知运动矢量的方法。根据本发明的实施例，可以基于运动矢量预测(或预测器)(MVP)来生成运动矢量(MV)。例如，可以通过MVP来确定MV，如下文的[等式1]中所示。换句话说，可以将MV确定(配置或推导)为与MVP相同的值。
[等式1]
MV＝MVP
在另一个示例中，可以基于MVP和运动矢量差(MVD)来确定MV，如下文的[等式2]所示。编码器可以向解码器发信号告知MVD信息以便更准确地指示MV，并且解码器可以通过将所获取的MVD添加到MVP来推导MV。
[等式2]
MV＝MVP+MVD
根据本发明的实施例，编码器可以将所确定的运动信息传送到解码器，并且解码器可以由所接收的运动信息来生成MV，并且基于其来生成(或推导)预测块。例如，运动信息可以包括MVP信息和MVD信息。在这种情况下，运动信息的元素可以取决于帧间预测模式而改变。例如，在合并模式下，运动信息可以包括或可以不包括MVP信息。在另一示例中，在高级运动矢量预测(AMVP)模式下，运动信息可以包括MVP信息和MVD信息。
为了确定、发送和接收关于MVP的信息，编码器和解码器可以以相同的方式来生成MVP候选(或MVP候选列表)。例如，编码器和解码器可以以相同的顺序来生成相同的MVP候选。此外，编码器可以向解码器发送指示(或表示)从生成的MVP候选当中确定的(或选择的)MVP的索引，并且解码器可以基于接收的索引来推导所确定的MVP和/或MV。
根据本发明的实施例，MVP候选可以包括空间候选、时间候选等。当应用合并模式时，MVP候选可以被称为合并候选，并且当应用AMVP模式时，MVP候选可以被称为AMVP候选。空间候选可以是针对位于距当前块的特定位置处的块的MV(或运动信息)。例如，空间候选可以是与当前块相邻或不相邻的块的MV。时间候选可以是与不同于当前图片的图片内的块相对应的MV。此外，例如，MVP候选可以包括仿射MV、ATMVP、STMVP、MV(或候选)的组合、MV(或候选)的平均MV、零MV等。
根据实施例，编码器可以将指示参考图片的信息发信号告知解码器。作为实施例，当MVP候选的参考图片不同于当前块(或当前处理的块)的参考图片时，编码器/解码器可以缩放MVP候选的MV(运动矢量缩放)。在这种情况下，可以基于当前图片的图片顺序号(POC)、当前块的参考图片的POC以及MVP候选的参考图片的POC来执行MV缩放。
在下文中，描述了MVD信令方法的详细实施例。下文的[表1]示出用于MVD信令的语法结构。
[表1]
参考[表1]，根据本发明的实施例，可以分别编译MVD的符号和绝对值。即，MVD的符号和绝对值可以具有不同的语法(或语法元素)。此外，如表1所示，可以直接编译或基于指示绝对值是否大于N的标志来逐步编译MVD的绝对值。如果绝对值大于N，则也可以发信号告知(绝对值-N)的值。具体地，在[表1]的示例中，可以发送指示绝对值是否大于0的abs_mvd_greater0_flag。如果abs_mvd_greater0_flag指示(表示)绝对值不大于0，则可以将MVD的绝对值确定为0。此外，如果abs_mvd_greater0_flag指示绝对值大于0，则可能存在附加语法(或语法元素)。
例如，可以发送指示绝对值大于1的abs_mvd_greater1_flag。如果abs_mvd_greater1_flag指示(表示)绝对值不大于1，则MVD的绝对值可以被确定为1。如果abs_mvd_greater1_flag指示绝对值大于1，则可能存在附加语法。例如，可能存在abs_mvd_minus2。abs_mvd_minus2可以是(绝对值-2)的值。由于根据abs_mvd_greater0_flag和abs_mvd_greater1_flag的值确定了绝对值大于1(即大于或等于2)，因此可以发信号告知(绝对值-2)的值。与二值化和发信号告知绝对值相比，对关于绝对值的信息分层级地执行语法信令，可以使用更少比特数。
根据实施例，可以通过应用可变长度的二进制化方法(诸如指数Golomb、截短一元码、截短莱斯码等)来编译与绝对值有关的语法。此外，可以通过mvd_sign_flag来发信号告知指示MVD的符号的标志。
尽管在上述实施例中已经描述了编译MVD的方法，但是也可以将除了MVD以外的信息的符号和绝对值单独地发信号告知。可以将绝对值编译为指示绝对值是否大于预定的特定值的标志或者编译为通过从绝对值中减去特定值而获得的值。在[表1]中，[0]和[1]可以指示分量索引。例如，[0]和[1]可以是x分量(即，水平分量)和y分量(即，垂直分量)。
图7图示根据本发明的实施例的发信号告知自适应运动矢量分辨率信息的方法。根据本发明的实施例，指示MV或MVD的分辨率可以改变。例如，可以基于像素(或画素(pel))来表达分辨率。例如，可以以1/4(四分之一)、1/2(一半)、1(整数)、2或4个像素为单位发信号告知MV或MVD。编码器可以将MV或MVD的分辨率信息发信号告知解码器。此外，例如，16可以以1/4为单位编译为64(1/4*64＝16)，以1为单位编译为16(1*16＝16)，以及以4为单位编译为4(4*4＝16)。即，可以使用下文的[等式3]来确定MV或MVD值。
[等式3]
valueDetermined＝resolution*valuePerResolution
在[等式3]中，valueDetermined指示MV或MVD值。另外，valuePerResolution是基于所确定的分辨率而发信号告知的值。在这种情况下，当由MV或MVD发信号告知的值不能除以所确定的分辨率时，可以应用舍入处理等。当使用高分辨率时，精度可以增加，但是编译值较大，因此可能使用更多比特数。当使用低分辨率时，精度可能减小，但是编译值较小，因此可以使用较少的比特数。根据实施例，可以以序列、图片、切片、编译树单元(CTU)、编译单元(CU)等为单位来不同地配置分辨率。即，编码器/解码器可以根据上述单位中的预定单位来自适应地确定/应用分辨率。
根据说明书的实施例，可以从编码器向解码器发信号告知分辨率信息。在这种情况下，可以基于可变长度二值化并发信号告知分辨率信息。在这种情况下，当基于与最小值(即，最前值)相对应的索引来执行信令时，可以减少信令开销。作为实施例，可以按照从高分辨率到低分辨率的顺序将分辨率映射到信令索引。
根据本说明书的实施例，图7图示当假设在各种分辨率中使用三种分辨率时的信令方法。在这种情况下，三个信令比特可以是0、10和11，并且三个信令索引可以被称为第一分辨率、第二分辨率和第三分辨率。由于需要1比特来发信号告知第一分辨率并且需要2比特来发信号告知其余的分辨率，所以当发信号告知第一分辨率时，可以相对减少信令开销。在图7的示例中，可以将第一分辨率、第二分辨率和第三分辨率分别定义为1/4、1和4个像素分辨率。在以下实施例中，MV分辨率可以是MVD的分辨率。
在下文中，将描述基于使用运动矢量差的合并模式(MMVD)(或合并MVD)的运动补偿方法。
图8图示根据本发明的实施例的编译单元语法的示例。根据本发明的实施例，可以基于指示是否应用合并模式的语法元素来发信号告知指示是否应用MMVD的语法元素。参考图8，在步骤S801中，当合并标志(merge_flag)为0时(即，在不使用合并模式的情况下)，可以发信号告知MMVD标志(mmvd_flag)。在图8中，MMVD标志指示表示是否应用MMVD的语法元素(或标志)。此外，合并标志指示表示是否应用合并模式的语法元素(或标志)。
根据本发明的实施例，当应用合并模式时，编码器/解码器可以基于运动矢量预测器(MVP)和运动矢量差(MVD)来确定运动矢量(MV)。在本说明书中，MVP可以被称为基本运动矢量(baseMV)。即，编码器/解码器可以通过将基本运动矢量与运动矢量差相加来导出运动矢量(即，最终运动矢量)。然而，本发明不限于这些名称，根据本发明的实施例，MVP可以被称为基本运动矢量、临时运动矢量、初始运动矢量、MMVD候选运动矢量等。MVD可以被表达为用于细化MVP的值，并且可以被称为细化运动矢量(refineMV)或合并运动矢量差。
据本发明的实施例，当应用MMVD时(即，在MMVD模式中)，可以基于基本运动矢量、距离参数(或变量)、方向参数(或变量)来确定MV。此外，根据本发明的实施例，可以从候选列表中确定基本运动矢量。例如，可以从合并候选列表中确定基本运动矢量。此外，编码器/解码器可以从其他候选列表的一部分中确定基本运动矢量。此外，候选列表的一部分可以是候选列表的前面部分。例如，编码器/解码器可以使用合并候选列表的候选当中的第一和第二候选来确定基本运动矢量。为此，可以从编码器向解码器发信号告知指示两个候选当中的特定候选的候选索引。参考图21，可以定义作为用信号告知基本运动矢量的索引的基本候选索引。编码器/解码器可以根据基本候选索引确定候选列表的候选当中应用于当前块的候选，并且将确定的候选的运动矢量确定为基本运动矢量。在本说明书中，基本候选索引的名称不限于此，基本候选索引可以被称为基本候选标志、候选索引、候选标志、MMVD索引、MMVD候选索引、MMVD候选标志等。
根据本发明的实施例，可以存在与图6和7中描述的MVD不同的MVD。例如，MMVD中的MVD可以与图6和7中描述的MVD不同地定义。在本说明书中，MMVD可以指示使用运动矢量差的合并模式(即，运动补偿模式或方法)，或者在应用MMVD的情况下指示运动矢量差。例如，编码器/解码器可以确定是否应用(或使用)MMVD。如果应用了MMVD，则编码器/解码器可以从合并候选列表中推导用于当前块的帧间预测的合并候选，并且通过推导MMVD并将MMVD应用于合并候选的运动矢量(或相加)来确定当前块的运动矢量。
在实施例中，不同的MVD可以是简化的MVD、具有不同(或较小)分辨率的MVD、具有较少可用数量的MVD、具有不同信令方法的MVD等。例如，尽管用在图6和7中描述的常规AMVP、仿射帧间模式等中使用的MVD对于特定信令单元(例如，x-pel)可以在x和y轴(即，水平和垂直方向)上以均匀间隔指示所有区域，例如，基于图片的区域(例如，图片区域或包括图片或周围区域的区域)，但MMVD可以具有相对有限的特定信令的单元。此外，用于发信号告知MMVD的区域(或单元)可以不具有均匀的间隔。MMVD可以仅指示用于特定信令单元的特定方向。
根据本发明的实施例，可以基于距离和方向来确定MMVD。参考图21，可以预设根据指示MMVD的距离的距离索引和指示MMVD的方向的方向索引的MMVD的距离和方向。在实施例中，距离可以指示以特定像素为单位的MMVD大小(例如，绝对值)，而方向可以指示MMVD的方向。编码器/解码器可以通过相对小的索引来发信号告知相对小的距离。也就是说，如果该信令不是通过固定长度二值化的信令，则编码器/解码器可以通过相对较小的比特来发信号告知相对较短的距离。
在本发明的实施例中，当合并标志(即，merge_flag)为0时(即，在不使用合并模式的情况下)，可以发信号告知MMVD相关的语法元素。如上所述，MMVD可以是一种发信号告知基本候选的MVD的方法。关于这方面，MMVD模式可能与诸如MVD信令AMVP和仿射AMVP(或仿射帧间)的模式具有相似性。因此，当合并标志为0时，可以执行信令。在步骤S802中，当将MMVD应用于当前块时，即当MMVD标志为1时，解码器可以解析MMVD相关的语法元素。作为实施例，MMVD相关的语法元素可以包括mmvd_merge_flag、mmvd_distance_idx和mmvd_direction_idx中的至少一个。在此，mmvd_merge_flag指示表示MMVD的基本候选的标志(或语法元素)，mmvd_distance_idx指示表示MVD的距离值的索引(或语法元素)，以及mmvd_direction_idx指示表示MVD的方向的索引(或语法元素)。
此外，参考图8，CuPredMode指示表示当前块的预测模式的变量(或值)。可替代地，当前块的预测模式可以是指示当前块是帧内预测还是帧间预测的值。可替代地，可以基于pred_mode_flag来确定当前块的预测模式。在此，pred_mode_flag指示表示以帧间预测模式还是以帧内预测模式编译当前块的语法元素。如果pred_mode_flag为0，则当前块的预测模式可以被设置为指示使用帧间预测的值。指示使用帧间预测的预测模式值可以是MODE_INTER。如果pred_mode_flag为1，则当前块的预测模式可以被设置为指示使用帧内预测的值。指示使用帧内预测的预测模式值可以是MODE_INTRA。如果不存在pred_mode_flag，则可以将CuPredMode设置为预设值。此外，作为示例，预设值可以是MODE_INTRA。
此外，参考图8，cu_cbf可以是指示是否存在与变换相关的语法的值。与变换相关的语法可以是变换树语法结构。此外，与变换相关的语法可以是通过图28的变换树(transform_tree)发信号告知的语法。此外，当cu_cbf为0时，可能不存在与变换相关的语法。当cu_cbf为1时，可能存在与变换相关的语法。参考图28，在步骤S803中，当cu_cbf为1时，解码器可以调用变换树语法。如果cu_cbf不存在，则可以基于cu_skip_flag确定cu_cbf值。例如，当cu_skip_flag为1时，cu_cbf可以为0。此外，当cu_skip_flag为0时，cu_cbf可以为1。如上所述，cu_skip_flag表示指示是否使用跳过模式的语法元素。此外，当应用跳过模式时，可以不使用残差信号。即，跳过模式可以是在不向预测信号添加残差的情况下进行重构的模式。因此，cu_skip_flag为1的指示可以表示不存在与变换相关的语法。
根据本发明的实施例，在步骤S802中，当不使用帧内预测时，解码器可以解析cu_cbf。此外，当cu_skip_flag为0时，可以解析cu_cbf。此外，当合并标志为0时，解码器可以解析cu_cbf。此外，可以组合并应用这些条件。例如，当当前块的预测模式不是帧内预测模式并且合并标志为0时，解码器可以解析cu_cbf。可替代地，当当前块的预测模式是帧间预测模式并且合并标志为0时，解码器可以解析cu_cbf。由于在非合并模式帧间预测的情况下可以使用或不使用跳过模式，因此这可能会发生。
图9图示了根据本发明的实施例的编译单元语法的示例。根据本发明的实施例，可以将上述的图8的cu_cbf和与变换相关的语法改变为图9所示的那些。即，根据本发明的实施例，当应用特定模式时，可以确定是否使用跳过模式。例如，当应用MMVD时，可以确定是否使用跳过模式。作为实施例，参考图9，在步骤S901中，解码器可以基于是否应用MMVD来确定是否解析cu_cbf。即，由于根据是否应用MMVD来确定是否使用跳过模式，因此可以相应地确定是否解析cu_cbf。当明确了是否使用跳过模式时，解码器可能不会解析cu_cbf。
在实施例中，在使用MMVD的情况下，编码器/解码器可以不使用跳过模式。由于MVD不能像AMVP那样准确地被指示并且只能在如上所述的有限范围内指示，因此可以使用残差来更准确地重构MMVD。因此，通过基于是否使用MMVD来确定是否解析cu_cbf，可以提高预测准确度和压缩效率。例如，在使用MMVD的情况下，解码器可以不解析cu_cbf。如果未使用MMVD，则解码器可以解析cu_cbf。在步骤S901中，当MMVD标志为0时，解码器可以解析cu_cbf，而当MMVD标志为1时，可以不解析cu_cbf。
在本发明的实施例中，当cu_cbf不存在时，解码器可以推断cu_cbf的值。根据参考图8所述的方法，解码器可以基于cu_skip_flag的值来推断cu_cbf。根据本发明的实施例，可以基于合并标志来推断cu_cbf值。如果合并标志为0，则解码器可以将cu_cbf的值推断为1。作为示例，当不使用合并模式时，可以指示存在与变换相关的语法。因此，在图8至9的实施例中使用MMVD的情况下，解码器可以将cu_cbf的值推断为1。作为实施例，1)当合并标志为1且cu_skip_flag为1时，解码器可以将cu_cbf的值推断为0，2)当合并标志为1且cu_skip_flag为0时，解码器可以将cu_cbf的值推断为1，以及3)当合并标志为0时，解码器可以将cu_cbf的值推断为1。可替代地，在如图8所示的实施例中，1)当cu_skip_flag为1时，解码器可以将cu_cbf的值推断为0，以及2)当cu_skip_flag为0时，解码器可以将cu_cbf的值推断为1。
根据本发明的另一实施例，可以基于MMVD标志来推断cu_cbf值。当MMVD标志为1时，cu_cbf可以被推断为1。此外，当MMVD标志为0时，cu_cbf可以被推断为0或1。当与图28所述的推断方法结合时，1)当MMVD标志为1时，可以将cu_cbf的值推断为1，2)当MMVD标志为0且cu_skip_flag为1时，可以将cu_cbf的值推断为0，以及3)当MMVD标志为0且cu_skip_flag为0，可以将cu_cbf的值推断为1。
此外，作为实施例，在图8至9的实施例中，MMVD标志可能不存在于合并数据(merge_data)语法中。合并数据语法可以是图8和9中所示的合并数据语法。
图10图示了根据本发明的实施例的合并模式信令方法的示例。在本发明的实施例中，如图10所示，可以基于语法元素，发信号告知合并模式。参考图10，基于常规标志、MMVD标志、子块标志和/或组合的帧间图片合并和帧内图片预测(CIIP)标志中的至少一个来发信号告知合并模式。在本发明中，CIIP指示将帧间预测(例如，合并模式帧间预测)和帧内预测相结合的预测方法，并且可以被称为多假设预测。
参考图10，图10的表(a)和(b)可以分别指示对应于非跳过合并模式和跳过合并模式的情况。与上述图8和9的合并数据语法不同，在图10的实施例中可以存在常规标志。例如，可能不存在三角标志。常规标志可以是指示使用传统合并模式的语法元素，并且在本发明中，常规标志可以被称为常规合并标志。传统的合并模式可以是与HEVC中使用的合并模式相同的合并模式。此外，传统合并模式可以是使用由合并索引指示的候选并且在不使用MVD的情况下执行运动补偿的合并模式。在实施例中，可以在预设序列中发信号告知常规标志、MMVD标志、子块标志和CIIP标志。MMVD标志表示指示是否使用MMVD的语法元素。子块标志指示表示是否使用执行基于子块的预测的子块模式的语法元素。CIIP标志指示表示是否应用CIIP模式的语法元素。
在本发明的实施例中，用于指示是否使用常规标志、MMVD标志、子块标志和CIIP标志当中的相应模式的信令的值可以为1或以下。因此，当常规标志、MMVD标志、子块标志和CIIP标志当中的一个具有为1的值时，编码器/解码器可以确定稍后在解码序列中获取的标志的值为0。此外，当常规标志、MMVD标志、子块标志和CIIP标志均为0时，可以使用不由常规标志、MMVD标志、子块标志或CIIP标志指示的模式。不由常规标志、MMVD标志、子块标志和CIIP标志指示的模式可以是三角预测。即，作为实施例，当常规标志、MMVD标志、子块标志和CIIP标志均为0时，可以确定应用三角预测模式。
图11图示了根据本发明的实施例的合并数据语法结构的示例。图11图示了语法结构的示例，其中，使用参考图10所述的语法元素。在图11中，“常规合并标志(regular mergeflag)”是指常规合并标志。作为示例，常规合并标志可以是上文参考图10所述的常规标志。
根据本发明的实施例，常规合并标志可能首先出现在合并数据语法中。在步骤S1101中，解码器可以首先解析合并数据语法中的常规合并标志。即，常规合并标志可以是在识别出合并标志为1后解析的第一语法元素。在步骤S1102中，当常规合并标志为0时，解码器可以解析MMVD标志。在步骤S1103、S1106和S1105中，当常规合并标志为0时，解码器可以解析子块合并标志、多假设标志和/或三角合并标志中的至少一种。在图11中，merge_subblock_flag表示指示是否应用子块合并模式的子块合并标志，mh_intra_flag表示指示是否应用多假设预测模式的多假设预测标志，以及merge_triangle_flag表示指示是否应用三角合并模式的三角合并标志。
参考图11，当当前块满足预定义的特定块大小条件时，解码器可以解析MMVD标志。此外，在实施例中，三角合并标志可以被定义为(！regular_merge_flag&&！MMVD flag&&！merge_subbock_flag&&！mh_intra_flag)。即，当常规合并标志、MMVD标志、子块合并标志和多假设预测标志均为0时，三角合并标志为1，而当常规合并标志、MMVD标志、子块合并标志和mh_intra_flag中的至少一个为1时，三角合并标志可能为0。
图12图示了根据本发明的实施例的合并数据语法。图12图示了使用上文参考图10所述的语法元素的语法结构。参考图12，在本发明的实施例中，解码器可以首先解析常规合并标志，并且当所解析的常规合并标志为1时，可以解析合并索引(S1201)。此外，当MaxNumMergeCand大于1时，解码器可以解析合并索引。在此，MaxNumMergeCand是指示合并候选的最大数目的变量。此外，当常规合并标志为0时，解码器可以解析MMVD标志、子块合并标志、多假设标志和/或三角合并标志中的至少一个。在实施例中，三角合并标志的值可以通过上文参考图10和11所述的方法来确定。即，可以基于指示是否应用另一模式的标志值来确定三角合并标志。如果三角合并标志为1，则解码器可以解析与三角预测相关的语法(或语法元素)。例如，当三角合并标志为1时，解码器可以解析三角合并索引(即merge_triangle_idx)。
在图11的实施例的情况下，在合并数据语法的后面存在常规合并模式所需的合并索引，并且由于MMVD标志、子块合并标志、多假设预测标志信令例如可以存在于常规合并标志和合并索引之间，因此，当使用常规合并模式时，信令可能是低效的。然而，在图12的实施例中，当常规合并标志为1时，可以在常规合并标志之后立即解析合并索引，因此不需要解析与常规合并模式无关的其他信令。因此，可以提高压缩效率。
此外，根据本发明的实施例，当使用多种不同的预测模式时，可以基于预测模式应用条件来确定是否解析特定预测模式。这将参考下表2进行描述。
[表2]
参考表2，假设存在模式A、模式B和模式C作为预测模式。此外，假设仅将模式A、模式B和模式C中的一个预测模式用于预测。另外，可以定义使用模式A的条件，并且可以将使用模式A的条件假设为A1、A2和A3。在本实施例中，当条件A1、A2和A3均满足时，编码器/解码器可以应用模式A。另外，假设使用模式B的条件可以是B1、B2和B3。在本实施例中，当所有条件B1、B2和B3均满足时，编码器/解码器可以应用模式B。另外，使用模式C的条件可以是C1、C2和C3，当所有条件C1、C2和C3均满足时，编码器/解码器可以应用模式C。指示是否使用预定预测模式X(模式X)的信令(或语法元素)可以是mode_X_flag。
参考表2，解码器可以解析相关的语法以便按照模式A、模式B和模式C的顺序，确定要应用于当前块的预测模式。可替代地，编码器可以按照mode_A_flag、mode_B_flag和mode_C_flag的顺序执行信令，如表2所示。如果满足使用模式A的条件，则解码器可以解析mode_A_flag。如果mode_A_flag为1，则解码器可以解析与模式A相关的语法，并且可以不解析与其余模式相关的标志及其相关的语法。如果mode_A_flag为0，则可能存在使用模式B或模式C的可能性。因此，如果满足使用模式B的条件，则解码器可以解析mode_B_flag。如果mode_B_flag为1，则解码器可以解析与模式B相关的语法，并且可以不解析与其余模式(即，模式C)相关的mode_X_flag及其相关的语法。如果mode_B_flag为0，则解码器可以确定使用模式C。即，如果不与模式C相对应的所有mode_X_flag均为0，则解码器可以确定使用模式C。另外，解码器可以解析与模式C相关的语法。
另外，根据本发明的实施例，如果使用多种不同的预测模式，可以基于应用预测模式的条件来确定是否解析特定预测模式。这将参考下表3进行描述。
[表3]
参考表3，如上述表2所示，模式A、模式B和模式C可以被定义为预测模式，以及可以定义指示是否使用预测模式的语法元素(即mode_X_flag)和/或指示相关预测模式信息的语法元素。此外，可以定义使用预定模式X的条件X1、X2、X3等。如上述表2所示，确定是否依次应用模式A、模式B和模式C，以及如果应用了所确定的模式，则可以解析与相应的预测模式相关的语法元素。
在此，根据本发明的实施例，当其使用晚于特定预测模式的使用被确定的预测模式均不可使用时，编码器/解码器可以确定使用上述特定预测模式。在此，解码器可以不解析指示是否应用特定预测模式的标志(即，当特定预测模式是模式X时，mode_X_flag)。在实施例中，可以根据是否满足上述使用预测模式的条件来确定预测模式的不可使用性。例如，如果被确定为以相对较低优先级使用的模式B和模式C均不可使用，则解码器可以不解析mode_A_flag并且可以确定(或决定或推断)使用模式A。
在上述表2和表3中，假设了应用模式A、模式B和模式C三个预测模式的情况。然而，本发明不限于该预测模式的数目，并且即使存在更多的预测模式，也可以使用所提出的方法来确定模式。例如，当假设模式A、模式B、模式C和模式D可使用时，如果模式B、模式C和模式D均不可使用，则解码器可以确定使用模式A，而无需执行单独的信令(或解析)。另外，在确定不使用模式A后，当模式C和模式D均不可使用时，解码器可以确定使用模式B。
参考表3，不可使用预定预测模式X(即，模式X)的条件可以是不满足条件X1、X2和X3中的至少一个的情况。也就是说，在！X1||！X2||！X3的情况下，模式X可能不可使用。因此，模式B和模式C均不可使用的情况可能指示满足条件((！B1||！B2||！B3)&&(！C1||！C2||！C3))的情况。当满足该条件时，解码器可以不解析mode_A_flag，并且可以推断mode_A_flag的值为1。即，解码器可以确定使用模式A。当不满足条件((！B1||！B2||！B3)&&(！C1||！C2||！C3))时，解码器可以解析mode_A_flag。在此，解码器还可以考虑使用模式A的条件，即，如果满足条件！((！B1||！B2||！B3)&&(！C1||！C2||！C3))并且在(A1&&A2&&A3)的情况下，解码器可以解析mode_A_flag。换言之，当满足使用模式B的条件和使用模式C的条件中的至少一个时，解码器可以解析mode_A_flag。在(B1&&B2&&B3)或(C1&&C2&&C3)的情况下，解码器可以解析mode_A_flag。
此外，当mode_A_flag不存在时，在(B1&&B2&&B3)或(C1&&C2&&C3)的情况下，解码器可以将mode_A_flag的值推断为0。否则，解码器可以将mode_A_flag的值推断为1。即，如果模式B和模式C均不可使用，当mode_A_flag不存在时，解码器可以将mode_A_flag的值推断为1(即，将应用模式A)。
在上表2和表3中，已经在有选择地应用作为预测模式的模式A、模式B和模式C并且模式A、模式B和模式C可以被定义为在本发明中提出的各种预测模式中的特定预测模式的假设下进行了描述。例如，模式A、模式B和模式C中的每一个可以被定义为常规合并模式、CIIP模式和三角合并模式之一。可替代地，如上所述，即使定义了模式A、模式B、模式C和模式D，也可以应用上述表2和3。例如，可以将模式A、模式B、模式C和模式D中的每一个定义为常规合并模式、MMVD模式、CIIP模式和三角合并模式之一。
图13图示了根据本发明的实施例的合并数据语法结构的示例。根据本发明的实施例，表2和/或表3中所述的方法可以应用于图13，并且将省略相关的重复描述。此外，图13可以是与如在图10和11中描述的常规合并标志有关的实施例。
如上所述，根据本发明的实施例，当其使用按照解码过程的顺序，相对晚于特定模式的使用被确定的模式均不可使用时，解码器可以确定(或决定或推断)使用特定模式而不解析指示是否使用特定模式的信令。例如，当其使用相对晚于子块合并模式的使用被确定的模式均不可使用时，解码器可以不解析指示是否使用子块合并模式的信令(或语法元素)。在此，解码器可以确定使用子块合并模式而不执行语法解析。例如，其使用相对较晚被确定的模式可以包括多假设预测和三角预测。
在实施例中，在步骤S1301中，如果其使用晚于MMVD的使用被确定的模式均不可使用，则解码器可以不解析指示是否使用MMVD的信令，而是可以确定使用MMVD。例如，其使用较晚被确定的模式可以包括子块合并模式、多假设预测和三角预测。
另外，在上述实施例中，可使用多假设预测的条件(即，图13中的mh_intra_conditions)可以包括1)sps_mh_intra_enabled_flag、2)cu_skip_flag[x0][y0]＝＝0以及3)块大小条件中的至少一个。例如，块大小条件可以被定义为((cbWidth*cbHeight)>＝64&&cbWidth<128&&cbHeight<128)。在此，sps_mh_intra_enabled_flag表示指示在当前序列中，多假设预测是否可使用的语法元素，例如，可以通过序列参数集(SPS)发信号告知该语法元素。另外，cbWidth和cbHeight分别是表示当前块(当前编译块)的宽度和高度的变量。
另外，在上述实施例中，可使用三角预测(图13中的merge_triangle_conditions)的条件可以包括1)sps_triangle_enabled_flag、2)tile_group_type(或slice_type)＝＝B以及3)块大小条件中的至少一个。例如，块大小条件可以被定义为(cbWidth*cbHeight>＝64)。在此，sps_triangle_enabled_flag指示表示三角预测在当前序列中是否可使用的语法元素。例如，语法元素可以通过SPS发信号告知。
另外，在上述实施例中，可使用子块合并的条件(图13中的merge_subblock_conditions)可以包括1)MaxNumSubblockMergeCand>0和2)块大小条件中的至少一个。例如，块大小条件可以被定义为(cbWidth>＝8&&cbHeight>＝8)。在此，MaxNumSubblockMergeCand是指示子块合并候选的最大数目的变量。
因此，在实施例中，在(！mh_intra_conditions&&！merge_triangle_conditions)的情况下，解码器可以不解析子块合并标志。另外，当子块合并标志不存在时，在(！mh_intra_conditions&&！merge_triangle_conditions)的情况下，解码器可以将子块合并标志推断为1。否则，解码器可以将子块合并标志推断为0。
此外，在实施例中，在(！merge_subblock_conditions&&！mh_intra_conditions&&！merge_triangle_conditions)的情况下，解码器可以不解析MMVD标志。此外，如果MMVD标志不存在(！merge_subblock_conditions&&！mh_intra_conditions&&！merge_triangle_conditions)，则解码器可以将MMVD标志推断为1。否则解码器可以将MMVD标志推断为0。
此外，在实施例中，在(！sps_mh_intra_enabled_flag&&！sps_triangle_enabled_flag)的情况下，解码器可以不解析子块合并标志，并且可以将子块合并标志的值推断为1。可替代地，当cu_skip_flag为1并且tile_group_type(slice_type)不是B时，解码器可能不解析子块合并标志，并且可以将其值推断为1。可替代地，如果宽度和高度都等于128，并且tile_group_type不是B，则解码器可以不解析子块合并标志，但可以将其值推断为1。
图14图示了根据本发明的实施例的合并数据语法结构的示例。对于参考图14描述的实施例，可以应用上文参考图10至13描述的细节，并且为了便于描述，将省略重复的描述。根据本发明的实施例，合并模式可以包括常规合并模式、MMVD、子块合并模式、CIIP模式、三角合并模式(或三角划分模式(TPM))等。此外，可以有常规合并标志、MMVD标志、子块合并标志、CIIP标志和三角合并标志，它们分别是指示是否使用(或应用)模式的信令(或语法元素)。如上所述，预测模式可以包括MODE_INTRA、MODE_IBC和MODE_INTER。MODE_INTRA和MODE_IBC可以是使用包括当前块的当前图片的预测模式。此外，MODE_INTRA可以是上文所述的帧内预测。MODE_IBC可以是使用运动矢量或块矢量的预测方法。MODE_INTER可以是使用其他图片的预测方法，或者可以是上述的帧间预测。
当当前预测模式为MODE_IBC且合并标志为1时，解码器可以仅使用常规合并模式(S1401)。此外，在此，可以不解析常规合并标志。解码器可以将常规合并标志推断为1。
此外，根据本发明的实施例，可以基于块大小来确定是否解析语法元素。例如，可以基于块大小来确定是否解析语法元素。例如，当按照第一模式、第二模式、第三模式、第四模式和第五模式的顺序发信号告知语法元素时，可使用第三模式、第四模式和第五模式的块大小条件可以包括第三条件、第四条件和第五条件。如果满足条件A，该条件A是不满足第三、第四和第五条件中的任何一个的条件，则解码器可以推断不使用或解析用于第三、第四和第五模式的语法元素。此外，当满足条件A时，解码器可以基于用于第一模式的语法元素进行确定，而无需解析与第二模式相关的语法元素。在此，如果确定并推断为不使用第一模式，则解码器可以确定并推断使用第二模式。此外，基于该确定，解码器可以解析使用第二模式所需的语法元素。
根据本发明的实施例，可以存在可使用子块合并模式、CIIP和三角合并模式的块大小条件。例如，该实施例可以与图13的实施例中描述的那些相同。因此，4x4、8x4和4x8大小的块可能不使用子块合并模式、CIIP或三角合并模式。因此，在4x4、8x4和4x8大小的块的情况下，当合并标志为1时，只有常规合并模式和MMVD可使用。因此，在此，解码器可以不解析MMVD标志。此外，在此，解码器可以基于常规合并标志来确定或推断MMVD标志值。
在实施例中，解码器可以不对4x4块执行帧间预测。因此，在下述实施例中，可以在不包括与4×4块相关的条件的情况下进行描述，但是即使在4×4帧间预测是可能的情况下也可以应用本发明的实施例。
参考图14，当cbWidth和cbHeight分别等于8和4或4和8时，解码器可以不解析MMVD标志、子块合并标志或多假设预测标志(S1402、S1403和S1404)。此外，虽然在图14中未示出，即使cbWidth和cbHeight都等于4，解码器也可以不解析MMVD标志、子块合并标志或多假设预测标志。另外，在此，可以不解析其他MMVD、子块合并模式、CIIP和三角相关的语法元素。
此外，在本发明中，cbWidth和cbHeight可以分别等于4和8，或者8和4，因此cbWidth和cbHeight之和等于12。即，当cbWidth和cbHeight之和等于或小于12时，可以不解析MMVD标志、子块合并标志和mh_intra_flag。此外，当预测模式是MODE_INTER时可以应用本发明。
根据本发明的实施例，可以存在指示MMVD是否可使用的较高级别信令。较高级别信令可以是包括当前块的单元中的信令。例如，当前块的较高级别可以是CTU、序列、图片、切片、贴片、贴片组等。例如，指示MMVD是否可使用的较高级别信令(或语法元素)可以是SPS级别信令。例如，指示MMVD是否可使用的较高级别信令可以是sps_mmvd_enabled_flag。指示MMVD是否可使用的较高级别信令可以指示是否使用MMVD。如果指示MMVD是否可使用的较高级别信令是0，则解码器可以不解析MMVD相关的语法元素。另外，当指示MMVD是否可使用的较高级别信令为0时，解码器可以将MMVD标志推断为0。当指示MMVD是否可使用的较高级别信令为1时，取决于块，MMVD标志可以是1或0。
此外，在实施例中，子块合并模式相关语法元素可以包括子块合并标志和子块合并索引。子块合并模式可以包括基于子块的时间运动矢量(SbTMVP)和仿射运动补偿模式。另外，CIIP相关的语法元素可以包括mh_intra_flag(CIIP标志)和指示CIIP的帧间预测部分的候选的索引。指示CIIP的帧间预测部分的候选的索引可以是合并索引。如上所述，CIIP可以是基于由当前图片生成的预测信号以及由另一参考图片生成的预测信号来执行预测的方法，并且可以被称为多假设预测。
此外，根据实施例，与三角合并模式相关的语法元素可以包括merge_triangle_split_dir、merge_triangle_idx0和merge_triangle_idx1。三角合并模式可以是将当前块分成两个部分并且这两个部分使用不同的运动信息的预测方法(或预测模式)。此外，两个部分中的每一个都可以具有预定的多边形形状而不是矩形形状。本发明不限于这些名称，并且三角合并模式可以具有各种其他名称。此外，merge_triangle_split_dir可以是指示两个部分的划分的语法元素。此外，merge_triangle_idx0和merge_triangle_idx1可以分别是指示两部分使用的运动信息的语法元素。
根据本发明的实施例，可能存在MMVD标志不存在的情况。例如，如参考图14所述，根据指示MMVD是否可使用的较高级别信令、块大小条件等，可能存在MMVD标志不存在的情况。在下面的实施例中，可以描述当MMVD标志不存在时执行推断的方法。根据本发明的实施例，当满足特定条件时，解码器可以将MMVD标志推断为1。此外，当不满足特定条件中的至少一个时，解码器可以将MMVD标志推断为0。
在实施例中，特定条件可以包括指示MMVD是否可使用的较高级别信令(或语法元素)具有值为1的情况。如上所述，较高级别信令可以被包括在SPS、PPS、切片标头、贴片组标头和CTU的一个中。此外，特定条件可以包括块大小条件。例如，特定条件可以包括块大小为4x8、8x4或4x4的情况。即，特定情况可以包括cbWidth和cbHeight之和等于或小于12的情况。如果不允许4x4帧间预测，则可以排除块大小为4x4的情况。此外，特定条件可以包括常规合并标志为0的情况。此外，特定条件可以包括合并标志为1的情况。
此外，在实施例中，在不存在MMVD标志的情况下，如果1)sps_mmvd_enabled_flag为1、2)cbWidth和cbHeight的和等于12以及3)常规合并标志为0，编码器/解码器可以将MMVD标志推断为1。此外，如果不满足1)、2)和3)中的至少一个，编码器/解码器可以将MMVD标志推断为0。
此外，根据本发明的实施例，当不存在常规合并标志时，解码器可以根据预定义条件推断常规合并标志的值。在实施例中，解码器可以基于当前块的预测模式来推断常规合并标志。例如，解码器可以基于CuPredMode值来推断常规合并标志。例如，当CuPredMode值为MODE_IBC时，解码器可以将常规合并标志推断为1。此外，当CuPredMode值为MODE_INTER时，解码器可以将常规合并标志推断为0。
根据附加的实施例，解码器可以基于合并标志来推断常规合并标志的值。例如，当合并标志为1且CuPredMode为MODE_IBC时，解码器可以将常规合并标志值推断为1。此外，当合并标志为0时，可以将常规合并标志值推断为0。
图15图示了根据本发明的实施例的合并数据语法结构。图15的实施例可以是与参考图10至13描述的实施例相关的另一个实施例。如上所述，在本发明的实施例中，可以将多个模式定义为合并模式。此外，在发信号告知将使用的预定模式的情况下，可以基于用于多种模式的信令序列和可使用多种模式的条件来确定是否使用预定模式、是否解析指示是否使用预定模式的信令，或者指示是否使用预定模式的信令推断方法。
根据本发明的实施例，解码器可以基于指示第二模式是否可使用的较高级别信令来确定是否解析指示是否使用第一模式的信令。此外，解码器可以基于指示第二模式是否可使用的较高级别信令来推断指示是否使用第一模式的信令值。在此，第二模式可以是其使用晚于第一模式的使用被确定的模式。
在更具体的实施例中，解码器可以基于指示MMVD是否可使用的较高级别的信令来确定是否解析常规合并标志。此外，解码器可以基于指示MMVD是否可使用的较高级别信令来推断(或确定)常规合并标志值。参考图15，作为示例，当sps_mmvd_enabled_flag为1时，解码器可以解析常规合并标志(S1501)。
此外，在实施例中，可以基于当前块的大小来确定是否解析指示是否使用特定模式的信令。此外，可以基于当前块的大小来推断指示特定模式是否可使用的信令值。根据实施例，即使当基于当前块的大小，不解析指示是否使用特定模式的信令时，也可能存在使用特定模式的情况。即，可以将指示是否使用特定模式的信令值推断为1。
在更具体的实施例中，解码器可以基于当前块的大小来确定是否解析常规合并标志。例如，解码器可以基于关于当前块的大小是否大于4x8或8x4的信息来确定是否解析常规合并标志。大于4x8或8x4的块大小的宽度和高度的总和大于12。参考图15，当cbWidth和cbHeight之和大于12时，可以解析常规合并标志(S1501)。此外，可能存在在块大小为4x8和8x4或更小时，限制其使用的模式。
根据本发明的实施例，当多个条件全部被满足时，可以不解析指示是否使用特定模式的信令。此外，在此，可以将指示是否使用特定模式的信令推断为1。指示是否使用特定模式的信令为1可以指示使用特定模式。作为实施例，多个条件可以包括与指示与第一模式不同的第二模式是否可使用的较高级别信令有关的条件。例如，多个条件可以包括指示与第一模式不同的第二模式是否可使用的较高级别信令具有值0的条件。在此，第二模式可以是其使用晚于第一模式的使用被确定的模式，或者可以是其相关语法元素晚于第一模式的相关语法元素出现的模式。
在更具体的实施例中，指示解码器是否使用特定模式的信令可以是常规合并标志。另外，多个条件可以是指示MMVD是否可使用的较高级别信令值是0的情况。另外，多个条件可以包括与块大小相关的条件。例如，多个条件可以包括块大小等于或小于阈值的条件。在块大小等于或小于阈值的情况下，其使用晚于特定模式的使用被确定或其相关语法元素存在于其后面的一个或多个其他模式可能不可使用。
更具体地，指示是否使用预定模式的信令可以是常规合并标志。此外，多个条件可以包括当前块的宽度和高度的总和为12或更小的情况。可替代地，多个条件可以包括当前块的大小为4x8或8x4的情况。此外，当4x4帧间预测可能时，多个条件可以包括当前块大小是4x8、8x4或4x4的情况。
因此，根据实施例，当指示MMVD是否可使用的较高级别信令值为0并且当前块大小为4x8或8x4时，可以不解析常规合并标志。此外，在此，常规合并标志值可以被推断为1。另外，当指示MMVD是否可使用的较高级别信令值为1或者当前块大小大于4x8或8x4时，可以解析常规合并标志。
在步骤S1501中，如果sps_mmvd_enabled_flag为1或cbWidth+cbHeight>12，则解码器可以解析常规合并标志。此外，如果不是，即，如果sps_mmvd_enalbed_flag为0且cbWidth+cbHeight<＝12，则可以不解析常规合并标志。
如上参考图10至13所述的实施例可以与模式的可用性条件有关，该可用性条件与存在于常规合并标志之后的语法元素相关。例如，当执行信令或者按照常规合并模式、MMVD、子块合并模式、CIIP和三角合并模式的顺序，确定使用的模式时，在上述实施例中指示MMVD是否可使用的较高级别信令为0，因此解码器可能不使用MMVD。此外，当块大小等于或小于阈值时，解码器可能不使用子块合并模式、CIIP或三角合并模式。因此，当满足所有这些条件时，解码器可以确定使用常规合并模式而无需附加信令。另外，本实施例可以应用于MODE_INTER的情况。
在本发明的实施例中，当满足预定的特定条件时，如图15所示，可能存在不解析常规合并标志的情况，在这种情况下，解码器可以将常规合并标志的值推断为1。例如，当指示MMVD是否可使用的较高级别信令值为0且块大小为4x8或8x4时，解码器可以将常规合并标志的值推断为1。此外，这可在合并标志为1时执行。此外，这可以在CuPredMode为MODE_INTER时执行。如果指示MMVD是否可使用的较高级别信令值为1或块大小大于4x8或8x4，则解码器可以将常规合并标志值推断为0。
例如，当常规合并标志不存在时，解码器可以根据下述条件推断常规合并标志。具体地，当sps_mmvd_enabled_flag为0且cbWidth+cbHeight＝＝12时，解码器可以将常规合并标志推断为1。在此，如果允许4x4帧间预测，则cbWidth+cbHeight＝＝12的条件可以被改变为cbWidth+cbHeight<＝12。否则，解码器可以将常规合并标志推断为0。
在本发明的实施例中，当三角合并标志、仿射帧间标志和子块合并标志均为0时，可以将相同的运动信息应用于整个当前块。对于这种情况，可以执行下述运动信息推导过程。此外，在此，如果满足一个或多个条件，则解码器可以将dmvrFlag设置为1。
-如果sps_dmvr_enabled_flag为1
-如果merge_flag[xCb][yCb]为1
-如果predFlagL0[0][0]和predFlagL1[0][0]为1
-当mmvd_flag[xCb][yCb]为1时
-当DiffPicOrderCnt(currPic,RefPicList[0][refIdxL0])和DiffPicOrderCnt(RefPicList[1][refIdxL1],currPic)相同时
-如果cbHeight等于或大于8
-如果cbHeight*cbWidth等于或大于64
此外，可以对大小为4x8或8x4的块执行运动信息推导过程。如果双向预测用于4x8或8x4块，则解码器可以将双向预测切换为单向预测。
此外，在本发明的实施例中，当合并标志为1并且常规合并标志为1时，可以将相同的运动信息用于整个当前块。可替代地，当合并标志为1且MMVD标志为1时，可以将相同的运动信息用于整个当前块。可替代地，当合并标志为1且CIIP标志为1时，可以将相同的运动信息用于整个当前块。可替代地，当合并标志为0且inter_affine_flag为0时，可以将相同的运动信息用于整个当前块。在此，可以执行针对这种情况的运动信息推导过程。此外，在此，如果满足一个或多个预定义条件，则解码器可以将dmvrFlag设置为1。在此，可以应用上述实施例的条件。此外，可以对4x8或8x4块执行运动信息推导过程。如果双向预测用于4x8或8x4块，则解码器可以将双向预测切换为单向预测。
根据本发明的实施例，CIIP可以是合并模式中最后确定或发信号告知的模式。例如，可以按照常规合并模式、MMVD、子块合并模式、三角合并模式和CIIP的顺序进行确定。在此，当不满足可使用CIIP的条件时，解码器可以在不解析指示是否使用解码序列(或语法解析序列)中首先确定的模式的信令的情况下确定相应的模式。例如，在此，解码器可以不解析指示是否使用紧接在CIIP之前的模式的信令。此外，在此，解码器可以确定使用紧接在CIIP之前的模式。例如，该情况可以包括cu_skip_flag为1的情况。可替代地，该情况可以是cbWidth的值为128或以上的情况或者cbHeight的值为128或以上的情况。可替代地，该情况可以包括指示CIIP是否可使用的较高级别信令，例如sps_ciip_enabled_flag为0的情况。
图16图示了根据本发明的实施例的合并数据语法结构。关于图16至19的实施例，可以应用参考图10至13所述的实施例，并且将省略相关的重复描述。如上所述，在合并模式中，CIIP可以是最后确定或发信号告知的模式。因此，解码器可以在不解析CIIP标志的情况下确定是否使用CIIP。例如，如果在CIIP之前发信号告知的模式均未被使用，则解码器可以确定使用CIIP。此外，CIIP标志可以是从另一个信令(或语法元素)导出的值。
根据本发明的实施例，可以存在指示是否使用模式的多条信令。参考图16，指示是否使用模式的信令可以包括常规合并标志、MMVD标志、子块合并标志和三角合并标志。此外，可以存在对常规合并标志、MMVD标志、子块合并标志和三角合并标志的解析。例如，当合并标志值为1时，可以解析指示是否使用该模式的信令。可替代地，当CuPredMode为MODE_INTER时，可以解析指示是否使用该模式的信令。此外，当合并标志值为1时，解码器可以解析常规合并标志。
此外，当常规合并标志值为0时，解码器可以解析MMVD标志。此外，当sps_mmvd_enabled_flag的值为1时，解码器可以解析MMVD标志。此外，当满足块大小条件时，解码器可以解析MMVD标志。例如，如果块大小不是4x8、8x4和4x4，则可以解析MMVD标志。
此外，当常规合并标志值为0时，可以解析子块合并标志。此外，当MMVD标志值为0时，可以解析子块合并标志。此外，当满足块大小条件时，可以解析子块合并标志。例如，当块大小为8x8或更大时，可以解析子块合并标志。此外，当子块合并候选的最大数目大于0时，可以解析子块合并标志。例如，子块合并候选的最大数目大于0的情况可以指示关于是否使用可以被包括在子块合并候选列表中的候选的至少一条较高级别信令可使用。例如，当sps_affine_enabled_flag或sps_sbtmvp_enabled_flag为1时，子块合并候选的最大数目可能大于0。
此外，当常规合并标志值为0时，可以解析三角合并标志。此外，当MMVD标志值为0时，可以解析三角合并标志。此外，当子块合并标志值为0时，可以解析三角合并标志。此外，当满足块大小条件时，可以解析三角合并标志。例如，当块大小满足条件(width*height>＝64)时，可以解析三角合并标志。此外，当切片类型为B时，可以解析三角合并标志。例如，切片类型B可以表示当预测一个样本时，可使用两条或更多条运动信息。此外，当sps_triangle_enabled_flag值为1时，解码器可以解析三角合并标志。此外，如果满足基于三角合并候选的最大数目(MaxNumTriangleMergeCand)的条件，则可以解析三角合并标志。例如，当三角合并候选的最大数目为2或更大时，解码器可以解析三角合并标志。三角合并候选的最大数目可以是三角合并模式中可使用的候选列表中的候选的最大数目(或长度)。
当满足上述解析条件时，解码器可以解析信令。即，除非满足使能解析的上述条件之一，否则可以不解析信令。此外，当未解析信令时，解码器可以执行推断。例如，如果不满足使能解析的上述条件之一，则可以将信令值推断为0。又例如，如果不满足使能解析的上述条件之一，则当关于是否使用第一模式的信令为0时，可以将关于是否使用第二模式的信令的值推断为1。又例如，如果不满足使能解析的上述条件之一，则当关于是否使用第一模式的信令为1时，可以将是否使用第二模式的信令的值推断为0。
此外，根据本发明的实施例，当CIIP标志不存在时，解码器可以推断其值。例如，可以基于关于是否使用一个或多个模式的信令的值来确定要推断的值。关于是否使用模式的信令可以包括关于是否使用在确定是否使用CIIP之前确定的模式的信令。例如，关于是否使用模式的信令可以包括关于是否使用常规合并模式的信令、关于是否使用MMVD的信令、关于是否使用子块合并模式的信令、以及关于是否使用三角合并模式的信令。另外，关于是否使用模式的信令可以包括关于是否使用合并模式的信令。
根据实施例，当关于是否使用一个或多个模式的信令的所有值都为0时，解码器可以将CIIP标志值推断为1。关于是否使用一个或多个模式的信令可以包括常规合并标志、MMVD标志、子块合并标志和三角合并标志。因此，如果常规合并标志＝＝0&&MMVD标志＝＝0&&子块合并标志＝＝0&&三角合并标志＝＝0，则可以将CIIP标志值推断为1。此外，如果不是，则可以将CIIP标志值推断为0。
根据实施例，当关于是否使用一个或多个模式的信令的所有值为0并且合并标志为1时，解码器可以将CIIP标志值推断为1。关于是否使用一个或多个模式的信令可以包括常规合并标志、MMVD标志、子块合并标志和三角合并标志。因此，如果常规合并标志＝＝0&&MMVD标志＝＝0&&子块合并标志＝＝0&&三角合并标志＝＝0&&合并标志＝＝1，则解码器可以将CIIP标志值推断为1。此外，如果不是，则解码器可以将CIIP标志值推断为0。另外，关于是否使用模式的信令的值为1的指示可以指示使用模式，以及关于是否使用模式的信令的值为0可以指示不使用该模式。
图17图示根据本发明的实施例的合并数据语法结构。图17的实施例可以是基于图16的实施例的有效信令方法，并且省略其重复描述。如上所述，CIIP可以是合并模式中最后确定或发信号告知的模式。根据实施例，在此，可以使用参考图10至13所述的信令方法。图17至19的实施例可以是参考图10至13所述的方法的具体实施例。
根据本发明的实施例，当以模式A、模式B、模式C和模式D的顺序确定模式的使用或执行信令时，可能存在不可使用模式D的条件。如果满足不可使用模式D的条件中的至少一个，则解码器可以不解析关于是否使用模式C的信令。另外，如果关于是否使用模式C的信令不存在，则解码器可以推断其值。在此，要推断的值可以基于不可使用模式D的条件、关于是否使用模式A的信令以及关于是否使用模式B的信令。另外，当不满足不可使用模式D的任一条件时，可以解析是否使用模式C的信令。可替代地，当不满足不可使用模式D的一些条件时，解码器可以解析关于是否使用模式C的信令(或语法元素)。当存在不可使用模式D的多个条件时，在本发明的信令方法中仅上述条件中的一些可使用。例如，可以仅使用一些条件，以便减少在确定是否解析关于是否使用模式C的信令时需要检查的条件。
根据一个实施例，模式D可以是CIIP。另外，模式A、模式B和模式C可以分别为MMVD、子块合并模式和三角合并模式，在此，也可以按不同的顺序配置模式A、模式B和模式C。图17至19假设模式A、模式B和模式C分别是MMVD、子块合并模式和三角合并模式。根据实施例，不可使用模式D的条件可以基于指示模式D是否可使用的较高级别信令。此外，不可使用模式D的条件可以基于块大小。此外，不可使用模式D的条件可以基于cu_skip_flag。此外，不可使用模式D的条件可以基于贴片组(或切片)类型。此外，不可使用模式D的条件可以基于模式D中可使用的候选的最大数目。
参考图17，不可使用CIIP的条件可以包括sps_ciip_enabled_flag为0的情况、cu_skip_flag为1的情况、cbWidth具有128或更大的值的情况以及cbHeight具有128或更大的值的情况。因此，根据本发明的实施例，当sps_ciip_enabled_flag为0、cu_skip_flag为1、cbWidth具有128或更大的值或cbHeight具有128或更大的值时，可以不解析关于是否使用模式C的信令。即，在图17的实施例中，当sps_ciip_enabled_flag为0、cu_skip_flag为1、cbWidth具有128或更大的值、cbHeight具有128或更大的值时，可以不解析三角合并标志。另外，当sps_ciip_enabled_flag为1、cu_skip_flag为0、cbWidth具有小于128的值、cbHeight具有小于128的值时，可以解析关于是否使用模式C的信令。即，在图17的实施例中，当sps_ciip_enabled_flag为1、cu_skip_flag为0、cbWidth的值小于128以及cbHeight的值小于128时，可以解析三角合并标志。
另外，当确定是否解析关于是否使用模式C的信令时，可以额外考虑可使用模式C的条件。例如，当满足可使用模式C的条件时，可以解析关于是否使用模式C的信令(或语法元素)。参考图16，可使用三角合并模式的条件可以包括sps_triangle_enabled_flag的值为1的条件、tile_group_type为B的条件以及cbWidth*cbHeight>＝64的条件。
在本发明的实施例中，将描述与参考图17描述的实施例相关的推断方法的示例。本实施例可以是参考图17描述的推断关于是否使用模式C的信令的方法。此外，当关于是否使用模式C的信令不存在时，可以推断关于是否使用模式C的信令。
在图17的实施例中，当不满足不可使用模式D的至少一个条件时，可以不解析关于是否使用模式C的信令。根据本发明的实施例，当满足多个条件时，可以将关于是否使用模式C的信令的值推断为1。例如，值为1可以指示使用模式C，而值为0可以指示不使用模式C。此外，多个条件可以包括满足不可使用模式D的至少一个条件的条件。此外，多个条件可以包括可使用模式C的条件。另外，所述多个条件可以包括基于关于是否使用模式A和模式B的信令的条件。例如，所述多个条件可以包括关于是否使用模式A和模式B的信令指示不使用模式A和模式B中的任何一个的情况。此外，当不满足多个条件中的至少一个时，解码器可以将关于是否使用模式C的信令的值推断为0。
在本发明的实施例中，解码器可以基于预定义的条件来推断三角合并标志值。例如，当sps_ciip_enabled_flag为0、cu_skip_flag为1、cbWidth具有128或更大的值或cbHeight具有128或更大的值时，解码器可以将三角合并标志值推断为1。例如，仅当sps_ciip_enabled_flag为0、cu_skip_flag为1、cbWidth具有128或更大的值或cbHeight具有128或更大的值时，解码器才可以将三角合并标志值推断为1。另外，为了将三角合并标志值推断为1，可能需要满足附加条件。例如，附加条件可以包括常规合并标志为0的条件、MMVD标志为0的条件以及子块合并标志为0的条件。此外，附加条件可以包括合并标志为1的条件。另外，附加条件可以包括sps_triangle_enabled_flag为1的条件、tile_group_type为B的条件以及cbWidth*cbHeight>＝64的条件。此外，当满足所有附加条件时，可以将三角合并标志值推断为1。
在实施例中，当满足所有下述条件时，可以将三角合并标志值推断为1。
1)常规合并标志＝＝0
2)MMVD标志＝＝0
3)子块合并标志＝＝0
4)sps_ciip_enabled_flag＝＝0||cu_skip_flag＝＝1||cbWidth>＝128||cbHeight>＝128
5)sps_triangle_enabled_flag＝＝1&&tile_group_type＝＝B&&cbWidth*cbHeight>＝64
可替代地，在另一个实施例中，当满足所有下述条件时，可以将三角合并标志值推断为1。
1)常规合并标志＝＝0
2)MMVD标志＝＝0
3)子块合并标志＝＝0
4)sps_ciip_enabled_flag＝＝0||cu_skip_flag＝＝1||cbWidth>＝128||cbHeight>＝128
5)sps_triangle_enabled_flag＝＝1&&tile_group_type＝＝B&&cbWidth*cbHeight>＝64
6)合并标志＝＝1
此外，在实施例中，当不满足上述条件之一时，可以将三角合并标志值推断为0。例如，当sps_ciip_enabled_flag为1、cu_skip_flag为0、cbWidth<128，以及cbHeight<128时，可以将三角合并标志值推断为0。可替代地，当常规合并标志为1时，可以将三角合并标志值推断为0。可替代地，当MMVD标志为1时，可以将三角合并标志值推断为0。可替代地，当子块合并标志为1时，可以将三角合并标志值推断为0。可替代地，当sps_triangle_enalbed_flag为0、tile_group_type不为B，或cbWidth*cbHeight<64时，可以将三角合并标志值推断为0。可替代地，当合并标志为0时，可以将三角合并标志值推断为0。
图18图示了根据本发明的实施例的合并数据语法结构。图18的实施例可以是参考图17描述的方法的具体实施例。在图17的描述中，当确定是否解析关于是否使用模式C的信令时，可以仅使用一些条件以便如上所述减少需要检查的条件。例如，图18的实施例可以是不检查图17中的sps_ciip_enabled_flag的方法。
例如，当cu_skip_flag为1、cbWidth>＝128或cbHeight>＝128时，解码器可以不解析三角合并标志。此外，在此，解码器可以将三角合并标志值推断为1。可替代地，仅当满足该条件时，解码器可以将三角合并标志值推断为1。此外，如上所述，当满足附加条件时，解码器可以将三角合并标志值推断为1。此外，当cu_skip_flag为0、cbWidth<128和cbHeight<128时，解码器可以解析三角合并标志。此外，当cu_skip_flag为0、cbWidth<128并且cbHeight<128时，如果不存在三角合并标志，则解码器可以将该值推断为0。
与上述图17的实施例相比，本实施例可以具有在语法元素解析过程中减少检查条件的操作的优点。如上所述，当不同地配置模式信令顺序时，本发明可以应用于其他信令而不是三角合并标志。
图19图示了根据本发明的实施例的合并数据语法结构的示例。图19的实施例可以是参考图17描述的方法的具体实施例。在参考图17的描述中，已经提及使用仅一些条件以便减少当确定是否解析关于是否使用模式C的信令时需要检查的条件，并且图19可以图示与图17相关的描述。例如，图19的实施例可以是不检查图17中的sps_ciip_enabled_flag的方法，以及可以是不检查cbWidth是否小于128以及cbHeight是否小于128的方法。
例如，当cu_skip_flag为1时，解码器可以不解析三角合并标志。此外，在此，解码器可以将三角合并标志值推断为1。可替代地，仅当满足该条件时，解码器可以将三角合并标志值推断为1。此外，如上所述，当满足附加条件时，解码器可将三角合并标志值推断为1。此外，当cu_skip_flag为0时，可以解析三角合并标志。此外，当cu_skip_flag为0时，如果不存在三角合并标志，则解码器可以将该值推断为0。
与上述图17的实施例相比，本实施例可以具有在语法元素解析过程中减少检查条件的操作的优点。如上所述，当不同地配置模式信令顺序时，本发明可以应用于其他信令而不是三角合并标志。
图20图示了根据本发明的实施例的合并数据语法结构的示例。图20的实施例可以是参考图17描述的方法的具体实施例。图20至24可以是上述发明的具体实施例。例如，图20至24的实施例可能与参考图10至13所述的实施例有关，并且将省略相关的重复描述。
参考图20，在参考直到图20描述的本发明中指示是否使用MMVD的信令可以是mmvd_merge_flag。即，在上述实施例中，MMVD标志在以下描述中可以被称为mmvd_merge_flag。此外，在参考直到图20描述的本发明中，指示MMVD的基本候选的信令可以是mmvd_cand_flag。即，前面提到的mmvd_merge_flag可以对应于直到图20的mmvd_cand_flag。此外，关于切片类型的特征可以应用于贴片组类型，反之亦然。此外，指示切片类型和贴片组类型的值可以分别是slice_type和tile_group_type。此外，指示是否使用上述合并模式的信令可以是general_merge_flag。即，与合并标志相关的描述可以与general_merge_flag相关，并且与general_merge_flag相关的描述可以应用于合并标志。
根据本发明的实施例，各种合并模式中的最后发信号告知的模式可以是子块合并模式。如上所述，各种合并模式可以包括常规合并模式、MMVD、CIIP、三角合并模式、子块合并模式等。此外，在各种合并模式中，可以紧接在子块合并模式之前发信号告知三角合并模式。
参考图20，编码器/解码器可以在合并数据语法中，按常规合并模式、MMVD、CIIP、三角合并模式和子块合并模式的顺序执行信令/解析。根据本发明的实施例，可以基于general_merge_flag来确定是否解析常规合并标志。在本说明书中，general_merge_flag可以被称为通用合并标志。根据本发明的实施例，当general_merge_flag为1时，可以解析常规合并标志。在此，可能需要用于解析的附加条件。另外，general_merge_flag为0时，可以不解析常规合并标志。在此，如果general_merge_flag为0，则无论其他条件如何，都可能不解析常规合并标志。根据本发明的实施例，当general_merge_flag为1时，可以解析图20的merge_data结构的一部分。
根据本发明的实施例，解码器可以基于general_merge_flag来确定是否解析mmvd_merge_flag。根据本发明的实施例，当general_merge_flag为1时，可以解析mmvd_merge_flag。在此，可能需要用于解析的附加条件。此外，当general_merge_flag为0时，可以不解析mmvd_merge_flag。在此，如果general_merge_flag为0，则不管其他条件如何，都可以不解析mmvd_merge_flag。
根据本发明的实施例，可以基于general_merge_flag来确定是否解析CIIP标志。根据本发明的实施例，当general_merge_flag为1时，解析CIIP标志是可能的。在此，可能需要用于解析的附加条件。此外，当general_merge_flag为0时，可以不解析CIIP标志。在此，如果general_merge_flag为0，则不管其他条件如何，可以不解析CIIP标志。
根据本发明的实施例，可以基于general_merge_flag来确定是否解析三角合并标志。根据本发明的实施例，当general_merge_flag为1时，解析三角合并标志是可能的。在此，可能需要用于解析的附加条件。此外，当general_merge_flag为0时，可以不解析三角合并标志。在此，如果general_merge_flag为0，则无论其他条件如何，都可以不解析三角合并标志。
根据本发明的实施例，解码器可以基于常规合并标志来确定是否解析mmvd_merge_flag。根据本发明的实施例，当常规合并标志为0时，解析mmvd_merge_flag是可能的。在此，可能需要用于解析的附加条件。此外，当常规合并标志为1时，可以不解析mmvd_merge_flag。在此，如果常规合并标志为1，则无论其他条件如何，都可以不解析mmvd_merge_flag。
根据本发明的实施例，解码器可以基于mmvd_merge_flag来确定是否解析CIIP标志。根据本发明的实施例，当mmvd_merge_flag为0时，解析CIIP标志是可能的。在此，可能需要用于解析的附加条件。此外，当mmvd_merge_flag为1时，可以不解析CIIP标志。在此，当mmvd_merge_flag为1时，无论其他条件如何，都可以不解析CIIP标志。
根据本发明的实施例，可以基于CIIP标志来确定是否解析三角合并标志。根据本发明的实施例，当CIIP标志为0时，解析三角合并标志是可能的。在此，可能需要用于解析的附加条件。此外，当CIIP标志为1时，可以不解析三角合并标志。在此，当CIIP标志为1时，无论其他条件如何，都可以不解析三角合并标志。
根据本发明的实施例，可以基于三角合并标志来确定是否解析子块合并标志。根据本发明的实施例，当三角合并标志为0时，解析子块合并标志是可能的。在此，可能需要用于解析的附加条件。此外，当三角合并标志为1时，可以不解析子块合并标志。在此，当三角合并标志为1时，无论其他条件如何，都可以不解析子块合并标志。
根据本发明的另一实施例，各种合并模式当中的最后发信号告知的模式可以在不解析的情况下确定指示是否使用的值。例如，参考图20，可以在不解析的情况下确定子块合并标志。例如，当满足所有以下条件时，可以将子块合并标志确定为1。
1)general_merge_flag＝＝1
2)当在各种合并模式当中的子块合并模式之前发信号告知的模式都不被使用时
3)当满足可使用子块合并模式的条件时
此外，如果不是(也就是说，当不满足上述条件中的至少一个时)，则可以将子块合并标志确定为0。
例如，在上述条件当中，条件“2)当在各种合并模式当中的子块合并模式之前发信号告知的模式都不被使用时”可以被定义为以下条件(或者可以包括以下条件)。
(regular_merge_flag＝＝0&&mmvd_merge_flag＝＝0&&ciip_flag＝＝0&&merge_triangle_flag＝＝0)
此外，在上述条件当中，条件“3)当满足可使用子块合并模式的条件时”可以如下(或者可以包括以下条件)。
(MaxNumSubblockMergeCand>0&&cbWidth>＝8&&cbHeight>＝8)
可替代地，上述条件中的“3)”可以与以下条件相同(或者可以包括以下条件)。
(能够在子块合并模式中包括的方法中的至少一个被启用&&cbWidth>＝8&&cbHeight>＝8)
另外，可以在子块合并模式中包括的方法可以包括仿射运动补偿和基于子块的时间运动矢量预测。另外，可以将指示仿射运动补偿和基于子块的时间运动矢量预测器是否可使用的较高级别信令分别定义为sps_affine_enabled_flag和sps_sbtmvp_enabled_flag。在本实施例中，上述条件中的宽度和高度的特定值已作为示例被描述，但是本发明不限于此，并且可以包括基于一般块大小的条件。
图21图示根据本发明的实施例的合并数据语法结构的示例。图21可以示出将更高效的信令方法添加到上述图20的实施例的实施例。根据本发明的实施例，如果不满足晚于各种模式当中的预定模式发信号告知的所有一个或多个模式的可使用条件，则可以确定是否使用预定模式，而不用显式地发信号告知该预定模式。例如，可能不解析指示是否使用预定模式的信令。
例如，如果在如图21中所示的那样发信号告知的语法结构中不满足可使用子块合并模式的条件，则可以在没有显式信令的情况下确定是否可使用三角合并模式。例如，如果不满足可使用子块合并模式的条件，则可能不解析三角合并标志。作为实施例，可使用子块合并模式的条件可以与图20的满足可使用子块合并模式的条件的情况相同(或者可使用子块合并模式的条件可以包括以下条件)。
因此，参考图21，如果MaxNumSubblockMergeCand是0，则解码器可以不解析三角合并标志。这里，MaxNumSubblockMergeCand是指示子块合并候选的最大数目的变量。可替代地，解码器可以基于块大小不解析三角合并标志。可替代地，当cbWidth具有小于8的值时，解码器可以不解析三角合并标志。也就是说，当cbWidth的值为4(或4或更小)时，解码器可以不解析三角合并标志。可替代地，当cbHeight具有小于8的值时，解码器可以不解析三角合并标志。也就是说，当cbHeight的值为4(或4或更小)时，解码器可能不解析三角合并标志。
因此，根据本发明的实施例，关于4乘X块或X乘4块(关于宽度或高度为4的块)，解码器可以不解析三角合并标志。在下文中，将描述推断三角合并标志的方法。在本发明的实施例中，cbWidth和cbHeight的最小值可以是4。例如，亮度块的cbWidth和cbHeight的最小值可以是4。此外，可以将cbWidth和cbHeight表达为2的幂。因此，例如，值为8或更大的cbWidth可以具有与具有除4以外的值的cbWdith相同的含义。在附加实施例中，cbWidth和cbHeight的最大值可以是128。
另外，在图21的发明中，已经描述了按三角合并模式和子块合并模式的顺序发信号告知各种合并模式。然而，本发明不限于此，并且可以被应用于按CIIP和子块合并模式的顺序执行信令的情况。也就是说，在上述实施例中，三角合并模式和三角合并标志可以用CIIP和CIIP标志替换。
图21图示根据本发明的实施例的指示是否使用模式的信令确定方法。可以将图20的实施例中描述的方法应用于图21的实施例，并且将省略相关重复描述。参考图21，当三角合并标志不存在时，解码器可以推断其值。
根据本发明的实施例，当关于是否使用各种合并模式当中的预定模式的信令不存在时，可以推断其值。作为实施例，如果1)在各种合并模式当中的预定模式之前发信号告知的模式都不被使用，2)不满足晚于各种合并模式当中的预定模式发信号告知的所有模式的可使用条件，以及3)满足可使用预定模式的条件，则解码器可以将值推断为“1”。此外，如果不是(即，不满足条件1)、2)或3)中的一个)，则解码器可以将值推断为0。此外，这里，不满足条件“2)”中的所有模式的可使用条件可以表示不满足所有模式中的每一个的可使用条件中的至少一个。
另外，这里，可以将4)用于使用各种合并模式中的一个的条件添加到用于将关于是否使用预定模式的信令推断为1的条件。例如，可以向其添加4)如果general_merge_mode是1。
例如，基于图20的实施例，如果1)在各种合并模式当中的三角合并模式之前发信号告知的模式都不被使用，2)不满足晚于各种合并模式当中的三角合并模式发信号告知的所有模式的可使用条件，3)满足可使用三角合并模式的条件，以及4)如果general_merge_mode是1，则可以将三角合并标志推断为1。此外，如果不是(即，不满足条件1)、2)、3)或4)中的一个)，则解码器可以将三角合并标志推断为0。
这里，参考图21，“1)在各种合并模式当中的三角合并模式之前发信号告知的模式都不被使用”可以包括以下条件。
(regular_merge_flag＝＝0&&mmvd_merge_flag＝＝0&&ciip_flag＝＝0)
此外，参考图21，“2)不满足晚于各种合并模式当中的三角合并模式发信号告知的所有模式的可使用条件”可以对应于不满足可使用子块合并模式的条件的情况，并且可以包括以下条件。例如，上述条件2)可以包括块大小的条件。
(MaxNumSubblockMergeCand＝＝0||cbWidth＝＝4||cbHeight＝＝4)
此外，参考图21，“3)满足可使用三角合并模式的条件”可以包括以下条件。
(MaxNumTriangleMergeCand>＝2&&sps_triangle_enabled_flag&&slice_type＝＝B&&cbWidth*cbHeight>＝64)
作为附加实施例，可能不要求检查一些条件以便减少图20和21的实施例中的条件检查所需要的操作。例如，解码器在解析或推断三角合并标志时可能不使用未能满足可使用子块合并模式的条件或可使用子块合并模式的条件中的一些。这里，解析操作中使用的条件和推断条件可以是相同的条件。例如，当解析或推断三角合并标志时，解码器可能不检查MaxNumSubblockMergeCand的条件。也就是说，即使MaxNumSubblockMergeCand是0也可以解析三角合并标志，而如果三角合并标志不存在，则解码器在推断其值时可能不检查关于MaxNumSubblockMergeCand是否为0的条件。
图22图示根据本发明的实施例的合并数据语法结构的示例。图22的实施例可以是在其中一起执行图16至图19的实施例和图20至图21的实施例的详细实施例。根据本发明的实施例，能够减少信令开销。根据本发明的实施例，可以按模式A、模式B、模式C、模式D和模式E的顺序执行信令。这里，当模式D或模式E可使用时，可以解析指示是否使用模式C的信令。如果模式D和模式E都不能被使用，则可以不解析指示是否使用模式C的信令。此外，如果模式D和模式E都不能被使用，并且如果模式A和模式B都不被使用，则可以确定要使用指示是否使用模式C的信令。
参考图22，可以按常规合并模式、MMVD、三角合并模式、子块合并模式和CIIP的顺序发信号告知各种合并模式。这里，根据本发明的实施例，当CIIP不可用时，解码器可以不解析指示是否使用子块合并模式的信令。另外，当CIIP可使用时，解码器可以解析指示是否使用子块合并模式的信令。另外，如果CIIP、常规合并、MMVD、三角合并模式都不被使用，并且general_merge_flag是1，则解码器可以推断为使用指示是否使用子块合并模式的信令。否则，解码器可以推断为不使用信令。
例如，可使用CIIP的条件可以包括以下各项中的至少一个作为&&(与)条件：1)基于指示CIIP是否可使用的较高级别信令的条件，2)基于cu_skip_flag的条件，以及3)基于块大小(宽度或高度)的条件。参考图22，可使用CIIP的条件可以包括以下条件中的至少一个作为&&(与)条件：1)sps_ciip_enabled_flag，2)cu_skip_flag＝＝0，以及3)cbWidth*cbHeight>＝64&&cbWidth<128&&cbHeight<128。参考图22，可以在(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&cbWidth*cbHeight>＝64&&cbWidth<128&&cbHeight<128)的情况下使用CIIP。
另外，根据本发明的实施例，如果子块合并模式和CIIP都不能被使用，则可以不解析指示是否使用三角合并模式的信令。另外，当子块合并模式或CIIP可使用时，可以解析指示是否使用三角合并模式的信令。另外，如果子块合并模式和CIIP都不能被使用，不使用常规合并和MMVD，并且general_merge_flag是1，则可以推断为使用指示是否使用三角合并模式的信令。否则，可以推断为不使用指示是否使用三角合并模式的信令。例如，可以参考前面的描述来描述可使用CIIP的条件或CIIP不可使用的情况。然而，这里，可以从可使用CIIP的条件中省略可使用三角合并模式的条件和可使用CIIP的条件当中的重叠条件(例如，图22中的cbWidth*cbHeight>＝64)。另外，可使用子块mergeonjungko模式的条件可以包括以下各项当中的一个或多个条件作为&&(与)条件：1)基于MaxNumSubblockMergeonjungkoCand的条件和2)基于块大小的条件。
参考图22，可使用子块合并模式的条件可以包括以下各项的一个或多个条件作为&&(与)条件：1)MaxNumSubblockMergeCand>0，和2)cbWdith>＝8&&cbHeight>＝8。参考图22，可使用子块合并模式的条件可以是(MaxNumSubblockMergeCand>0&&cbWdith>＝8&&cbHeight>＝8)。子块合并模式不可使用的情况可以是子块合并模式可使用的情况的非(NOT)条件。
图23图示根据本发明的实施例的合并数据语法结构的示例。图23的实施例可以是与图22类似的另一实施例。根据本发明的实施例，可以按模式A、模式B、模式C、模式D和模式E的顺序执行信令。这里，当模式D或模式E可使用时，可以解析指示是否使用模式C的信令。如果模式D和模式E都不能被使用，则可以不解析指示是否使用模式C的信令。此外，如果模式D和模式E都不能被使用，并且当模式A和模式B都不被使用时，可以确定使用指示是否使用模式C的信令。
参考图23，可以按常规合并模式、MMVD、三角合并模式、CIIP和子块合并模式的顺序发信号告知各种合并模式。这里，根据本发明的实施例，当子块合并模式不可使用时，可以不解析指示是否使用CIIP的信令。另外，当子块合并模式可使用时，可以解析指示是否使用CIIP的信令。另外，当子块合并模式不可使用时，如果不使用常规合并、MMVD和三角合并模式，并且general_merge_flag是1，则可以推断使用指示是否使用CIIP的信令。否则，可以推断不使用指示是否使用CIIP的信令。在这方面，将参考图21的描述。另外，根据本发明的实施例，当CIIP和子块合并模式都不能被使用时，并且如果CIIP或子块合并模式可使用，则将参考图22的描述来描述指示是否使用三角合并模式的信令。
图24图示根据本发明的实施例的合并数据语法结构。图24至图25示出将可使用三角合并模式的条件添加到图17的实施例的实施例。根据本发明的实施例，可使用三角合并模式的条件可以包括三角合并模式候选的最大数目。例如，指示三角合并模式候选的最大数目的值可以是MaxNumTriangleMergeCand。例如，为了使得能够使用三角合并模式，可能需要(MaxNumTriangleMergeCand>＝2)的条件。
因此，参考图24，如果满足(MaxNumTriangleMergeCand>＝2)，则可以解析三角合并标志，而如果不满足(MaxNumTriangleMergeCand>＝2)，则可以不解析三角合并标志。另外，将省略与图17的描述重叠的描述。
因此，当满足所有以下条件时，解码器可以解析三角合并标志。如果不满足以下条件中的至少一个，则可以不解析三角合并标志。
1)MaxNumTriangleMergeCand>＝2
2)sps_triangle_enabled_flag
3)slice_type＝＝B
4)cbWidth*cbHeight>＝64
5)sps_ciip_enabled_flag
6)cu_skip_flag＝＝0
7)cbWidth<128
8)cbHeight<128
在另一实施例中，可以省略上述条件中的一些。这可以减少检查条件所需要的操作。例如，所省略的条件可以是5)、6)、7)和8)中的至少一个。
此外，在本发明的实施例中，可以确定CIIP标志如下。当满足所有以下条件时，可以将CIIP标志设置为1。
a)general_merge_flag＝＝1
b)regular_merge_flag＝＝0
c)mmvd_merge_flag＝＝0
d)merge_subblock_flag＝＝0
e)merge_triangle_flag＝＝0
f)sps_ciip_enabled_flag＝＝1
g)cu_skip_flag＝＝0
h)cbWidth*cbHeight>＝64
i)cbWidth<128
j)cbHeight<128
如果不满足上述条件中的至少一个，则可以将CIIP标志设置为0。例如，条件h)、i)和j)可以用与块大小有关的其他条件替换。
在本发明的实施例中，当三角合并标志不存在时，可以根据以下过程来推断三角合并标志。如果满足所有以下条件，则可以将三角合并标志推断为1。
1)regular_merge_flag＝＝0
2)mmvd_merge_flag＝＝0
3)merge_subblock_flag＝＝0
4)sps_ciip_enabled_flag＝＝0||cu_skip_flag＝＝1||cbWidth>＝128||cbHeight>＝128
5)MaxNumTriangleMergeCand>＝2&&sps_triangle_enabled_flag＝＝1&&tile_group_type＝＝B&&cbWidth*cbHeight>＝64
6)general_merge_flag＝＝1
否则，可以将三角合并标志值推断为0。在上述条件当中，在条件4)中使用||(即，或)连接的那些对应于图22中描述的5)、6)、7)和8)的条件，并且如果在5)、6)、7)和8)的条件当中有任何省略，则在图23的4)的条件下可能发生相同情况。如上面参考图24描述的，可使用三角合并模式的条件可以包括三角合并模式候选的最大数目。在这方面，将省略重复描述。
此外，根据本发明的实施例，各种合并模式当中的至少一个模式可以被用于关于是否使用该模式的信令。例如，当使用合并模式时(当general_merge_flag是“1”时)，可以将各种合并模式当中的至少一个模式指示成使用关于是否使用该模式的信令。根据实施例，至少一个模式可以是预设模式。例如，至少一个模式可以是一个模式。例如，至少一个模式可以是常规合并模式。
根据实施例，当使用合并模式时，如果关于是否使用各种合并模式的信令都不被使用，则关于是否使用预定模式的信令被配置成被使用。根据另一实施例，如果除了关于预定模式的信令之外的关于是否使用各种合并模式的信令都不被使用，则关于是否使用预定模式的信令被配置成被使用。此配置是为了防止发生错误的信令和根据其的操作。
在本发明的实施例中，当满足所有以下条件时，可以将常规合并标志设置为1。
1)regular_merge_flag＝＝0
2)mmvd_merge_flag＝＝0
3)merge_subblock_flag＝＝0
4)ciip_flag＝＝0
5)merge_triangle_flag＝＝0
6)general_merge_flag＝＝1
根据另一实施例，可以省略这些条件中的一些。例如，可以省略上述条件当中的条件1)。
根据本发明的另一实施例，当不满足除了各种合并模式当中的一个特定模式之外的所有模式的可用性条件时，解码器可以将其值推断为1，而不解析关于是否使用特定模式的信令。可替代地，当满足除了各种合并模式当中的一个特定模式之外的模式中的至少一个的可用性条件时，可以解析关于是否使用该一个特定模式的信令。在实施例中，这可以对应于使用合并模式的情况。此外，预定一个模式可以是常规合并模式。
更具体地，如果满足以下条件1)至4)中的至少一个，则解码器可以解析常规合并标志。作为实施例，这可以对应于使用合并模式的情况。
1)sps_mmvd_enabled_flag&&cbWidth*cbHeight！＝32
2)MaxNumSubblockMergeCand>0&&cbWidth>＝8&&cbHeight>＝8
3)sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&cbWidth*cbHeight>＝64&&cbWidth<128&&cbHeight<128
4)MaxNumTriangleMergeCand>＝2&&sps_triangle_enabled_flag&&slice_type＝＝B&&cbWidth*cbHeight>＝64
此外，如果上述条件1)至4)都不满足，则可以不解析常规合并标志，并且可以将其值推断为1。这可以对应于使用合并模式的情况。这里，可以省略上述条件中的一些以减少操作量。
另外，根据本发明的另一实施例，当发生关于是否使用各种合并模式当中的两个或更多个模式的信令的指示时，关于是否使用除了各种合并模式当中的预设模式之外的所有模式的信令被配置成不被使用，并且关于是否使用预设模式的信令可以被配置成被使用。例如，预设模式可以是常规合并模式。作为另一示例，预设模式可以是指示要使用关于是否使用该模式的信令的两个或更多个模式中的一种。这里，可以存在用于确定一个模式的预设方法。例如，确定用于各种合并模式的预设顺序中的第一模式。例如，本实施例可以对应于使用合并模式的情况。
例如，如果regular_merge_flag＝＝1并且merge_subblock_flag＝＝1，则可以将merge_subblock_flag设置为0。可替代地，如果ciip_flag＝＝1并且merge_subblock_flag＝＝1，则可以将ciip_flag和merge_subblock_flag设置为0并且可以将regular_merge_flag设置为1。作为另一示例，如果ciip_flag＝＝1并且merge_subblock_flag＝＝1，则可以将在常规合并模式、MMVD、子块合并模式、CIIP和三角合并模式的预设顺序中首先出现的merge_subblock_flag设置为1，并且可以将CIIP标志设置为1。
图25图示根据本发明的实施例的合并数据语法结构的示例。图25的实施例可以是上述本发明的特定实施例。例如，可以将图10至图13的实施例中描述的方法应用于图25的实施例，并且将省略重复描述。
如上所述，可以按预设顺序发信号告知或确定是否使用多种合并模式。参考图25，多种合并模式可以包括常规合并模式、MMVD、子块合并模式、CIIP和三角合并模式。此外，参考图25，可以按常规合并模式、MMVD、子块合并模式、CIIP和三角1合并模式的顺序发信号告知或确定是否使用多种合并模式。此外，参考图25，指示是否使用常规合并模式、MMVD、子块合并模式、CIIP和三角合并模式的信令分别可以是regular_merge_flag、mmvd_merge_flag、merge_subblock_flag、ciip_flag和MergeTriangleFlag。此外，MergeTriangleFlag可以具有与上述merge_triangle_flag的含义相同的含义。
另外，可能存在需要满足的条件以便启用每个模式的执行。例如，当不满足需要被满足以便启用预定模式的执行的条件时，可以不执行预定模式。此外，这里，可以执行除预定模式以外的模式。可替代地，如果满足需要被满足以便启用预定模式的执行的条件，则可以或可以不执行预定模式。这里，可能存在用于确定是否执行预定模式的附加信令。
例如，需要被满足以便启用预定模式的执行的条件可以基于指示预定模式是否可使用的较高级别信令。较高级别可以包括顺序级别、顺序参数集(SPS)级别、切片级别、贴片级别、贴片组级别、图块(brick)级别、CTU级别等。另外，可以将上述sps_mode_enabled_flag包括在其中。这里，模式可以用预定模式替换。
另外，需要被满足以便能够执行预定模式的条件可以包括与块大小有关的条件。例如，可以将基于当前块的宽度或高度的条件包括在其中。例如，对于宽度可以有上限或下限。可替代地，对于高度可以有上限或下限。可替代地，可以有面积(宽*高)的上限或下限。此外，当前块可以是CU或PU。此外，当前块的宽度和高度分别可以是cbWidth和cbHeight。在本发明中，宽度和高度分别可以与cbWidth和cbHeight互换地使用。
此外，需要被满足以便允许执行预定模式的条件可以基于切片类型或贴片组类型。切片类型和贴片组类型可以具有相同的含义。
此外，需要被满足以便启用预定模式的执行的条件可以基于是否使用另一预定模式。另一预定模式可以包括跳过模式。此外，可以基于cu_skip_flag来确定是否使用跳过模式。此外，另一预定模式可以包括在预定模式之前发信号告知或确定的模式。例如，当不使用另一预定模式时，预定模式的执行是可能的。
此外，需要被满足以便启用预定模式的执行的条件可以基于候选的最大数目。例如，候选可以是与预定模式有关的候选。例如，候选可以是在预定模式下使用的候选。例如，可以在存在超过足够数目的候选时执行预定模式。例如，可以在候选的最大数目等于或大于预设值时执行预定模式。例如，可以通过称为MaxNumModeCand的参数来表示候选的最大数目，并且MaxNumModeCand中的模式可以用要表示的模式替换。例如，可能存用于合并模式的MaxNumMergeCand值。例如，可能存在用于三角合并模式的MaxNumTriangleMergeCand值。例如，可能存在用于子块合并模式的MaxNumSubblockMergeCand值。另外，候选的最大数目可以基于指示要启用的模式的较高级别信令。例如，MaxNumSubblockMergeCand可以基于sps_affine_enabled_flag或sps_sbtmvp_enabled_flag。Sps_sbtmvp_enalbed_flag可以是指示基于子块的时间运动(矢量)预测是否可使用的较高级别信令。
根据本发明的实施例，可能存在需要被满足以便执行常规合并模式的条件。例如，指示使用合并模式的信令需要为真以便启用常规合并模式的执行。指示使用合并模式的信令可以是merge_flag或general_merge_flag。另外，关于在下面描述的其他模式，只有当指示使用合并模式的信令为真时才能够执行其他模式。
可替代地，与其他模式不同，需要被满足以执行常规合并模式的条件可能不存在。这可能是因为常规合并模式可能是最基本模式而发生。如果使用上述合并模式，则可能不需要用于使用常规合并模式的附加条件。
参考图25，当满足第一条件2501时，解码器可以解析常规合并标志(即regular_merge_flag)。第一条件2501可以是sps_mmvd_enabled_flag为1或者通过width*height获得的值不是32的情况。另外，当不满足第一条件2501时，可以不解析regular_merge_flag。这里，解码器可以将其值推断为1。例如，如果sps_mmvd_enabled_flag是0并且width*height＝＝32，则解码器可以将regular_merge_flag推断为1。可替代地，可以将general_merge_flag为1的条件包括在推断其值为1的情况中。这可能是因为，当不满足第一条件2501时，需要被满足以便执行属于合并模式的其他模式的条件都不满足。另外，当regular_merge_flag不存在时，如果不满足用于将值推断为1的上述条件，则解码器可以将值推断为0。此外，可以将宽度或高度表达为2的幂。此外，宽度或高度可以是正数。因此，通过计算width*height获得的值32可以分别指示4和8或8和4的宽度和高度。此外，如果通过width*height获得的值不是32，则宽度和高度分别可能既不是4和8也不是8和4。此外，如果通过width*height获得的值不是32，则宽度或高度可以具有8或更大的值。这种情况可以对应于帧间预测，并且这可能因为例如对于4x4块可能不允许帧间预测而发生。
根据本发明的实施例，可能存在需要被满足以便启用MMVD的执行的条件。例如，条件可以基于指示MMVD是否可使用的较高级别信令。例如，指示MMVD是否可使用的较高级别信令可以是sps_mmvd_enabled_flag。参考图25，当满足第二条件2502时，可以解析mmvd_merge_flag。另外，如果不满足第二条件2502，则可以不解析mmvd_merge_flag并且可以推断其值。第二条件2502可以是(sps_mmvd_enabled_flag&&cbWidth*cbHeight！＝32)。也就是说，当sps_mmvd_enabled_flag是1并且满足块大小条件时，可以解析mmvd_merge_flag，而当sps_mmvd_enabled_flag是0或者不满足块大小条件时，可以不解析mmvd_merge_flag。此外，当sps_mmvd_enabled_flag是1并且不满足块大小时，可以将mmvd_merge_flag推断为1。例如，当sps_mmvd_enabled_flag是1并且width*height是32时，如果regular_merge_flag是0，并且当general_merge_flag是1时，可以将mmvd_merge_flag推断为1。块大小条件可能与不可使用在MMVD之后发信号告知的模式的条件有关。
根据本发明的实施例，可能存在需要被满足以启用子块合并模式的执行的条件。例如，条件可以基于指示子块合并模式是否可使用的较高级别信令。可替代地，条件可以基于指示属于子块合并模式的模式是否可使用的较高级别信令。例如，子块合并模式可以包括仿射运动预测、基于子块的时间运动矢量预测等。因此，可以基于指示仿射运动预测是否可使用的较高级别信令(例如，sps_affine_enabled_flag)来确定是否子块合并模式的执行被启用。
可替代地，可以基于指示基于子块的时间运动矢量预测是否可使用的较高级别信令(例如，sps_sbtmvp_enabled_flag)来确定是否子块合并模式的执行被启用。可替代地，为了启用子块合并模式的执行，可能需要满足基于用于子块合并模式的候选的最大数目的条件。例如，当用于子块合并模式的候选的最大数目大于0时，能够使用子块合并模式。另外，用于子块合并模式的候选的最大数目可以基于指示属于子块合并模式的模式是否可使用的较高级别信令。例如，只有当指示属于多个子块合并模式的模式是否可使用的较高级别信令中的至少一个是1时，用于子块合并模式的候选的最大数目才可能大于0。另外，为了启用子块合并模式的执行，可能需要满足基于块大小的条件。例如，对宽度和高度可能有下限。例如，当宽度是8或更大并且高度是8或更大时，可能能够使用子块合并模式。
参考图25，如果满足第三条件2503，则可以解析子块合并标志。此外，如果不满足第三条件2503，可以不解析merge_subblock_flag，并且可以将其值推断为0。第三条件2503可以是(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8)。
根据本发明的实施例，可能存在需要被满足以便启用CIIP的执行的条件。例如，可以基于指示CIIP是否可使用的较高级别信令(例如，spsXBT_ciip_enabled_flag)来确定是否CIIP的执行被启用。另外，可以基于是否使用跳过模式来确定是否CIIP的执行被启用。例如，当使用跳过模式时，可以不执行CIIP。此外，可以基于块大小来确定是否CIIP的执行被启用。例如，可以基于块大小是否等于或大于下限并且等于或低于上限来确定是否CIIP的执行被启用。例如，当通过width*height获得的值等于或大于下限、宽度的值等于或低于上限、高度的值等于或低于上限时CIIP的执行被启用。例如，当通过width*height获得的值等于或大于64、宽度的值小于128并且高度的值小于128时，CIIP的执行是可能的。
参考图25，可以在满足第四条件2504时解析CIIP标志。此外，当不满足第四条件2504时，可以不解析CIIP标志，并且可以将其值推断为0。第四条件2504可以是(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width*height>＝64&&width<128&&height<128)。
根据本发明的实施例，可能存在需要被满足以便启用三角合并模式的执行的条件。例如，可以基于指示三角合并模式是否可使用的较高级别信令(例如，sps_triangle_enabled_flag)来确定是否三角合并模式的执行被启用。此外，可以基于切片类型来确定是否启用三角合并模式的执行。例如，当切片类型是B时，可能能够执行三角合并模式。这可能是因为执行三角合并模式需要两条或更多条运动信息或两个或更多个参考图片。此外，可以基于用于三角合并模式的候选的最大数目来确定是否三角合并模式的执行被启用。可以将用于三角合并模式的候选的最大数目表达为MaxNumTriangleMergeCand的值。例如，当用于三角合并模式的候选的最大数目是2或更大时，可能能够执行三角合并模式。这可能是因为执行三角合并模式需要两条或更多条运动信息或两个或更多个参考图片。另外，根据本发明的实施例，当指示三角合并模式是否可使用的较高级别信令指示其可用性时，用于三角合并模式的候选的最大数目总是2或更大，而当指示三角合并模式是否可使用的较高级别信令指示其非可用性时，用于三角合并模式的候选的最大数目可以总是小于2或0。
因此，这里，可以基于用于三角合并模式的候选的最大数目而不是基于指示三角合并模式是否可使用的较高级别信令来确定是否三角合并模式的执行被启用。因此，可以减少用于检查条件的操作。此外，可以基于块大小来确定是否三角合并模式的执行被启用。例如，可以基于块大小是否等于或大于下限并且等于或低于上限来确定是否三角合并模式的执行被启用。例如，如果通过width*height获得的值等于或大于下限，宽度的值等于或低于上限，并且高度的值等于或低于上限，则可以执行三角合并模式。例如，如果通过width*height获得的值是64或更大，则可以执行三角合并模式。如果宽度的值小于128并且高度的值小于128，则也可以执行三角合并模式。
参考图25，当满足第五条件2505时，可以使用三角合并模式。此外，当不满足第五条件2505时，可以使用三角合并模式。第五条件2505可以对应于MergeTriangleFlag是1的情况。另外，可能存在需要被满足以便满足第五条件2505的条件。例如，条件可以包括(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2&&width*height>＝64)。如果(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2&&width*height>＝64)是真，则MergeTriangleFlag可以是1或0。这里，可以根据附加条件来确定MergeTriangleFlag是1还是0。附加条件可以包括在三角合并模式之前发信号告知或确定的模式(例如，常规合并模式、MMVD、子块合并模式或CIIP)都不被使用的情况和使用合并模式(例如，general_merge_flag＝＝1)的情况。如果满足附加条件则MergeTriangleFlag可以是1，而如果不满足附加条件则MergeTriangleFlag可以是0。此外，当(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2&&width*height>＝64)是假时，MergeTriangleFlag可以是0。
图26图示根据本发明的实施例的合并数据语法结构。图26可以是参考图12至图13描述的信令方法的特定实施例。
根据本发明的实施例，当能够执行晚于预定模式发信号告知或确定的模式中的至少一个时，可以解析关于是否使用预定模式的信令。另外，当晚于预定模式发信号告知或确定的模式都不能被执行时，可以不解析关于是否使用预定模式的信令。另外，当晚于预定模式发信号告知或确定的模式都不能被执行时，可以确定要使用关于是否使用预定模式的信令的值。
另外，是否晚于预定模式发信号告知或确定的模式的执行被启用或禁用可以取决于是否满足需要被满足以便启用图26中描述的模式的执行的条件。可替代地，是否晚于预定模式发信号告知或确定的模式的执行被启用或禁用可以取决于是否满足需要被满足以便启用图26中描述的模式的执行的条件中的一些。例如，可以在确定用于另一模式的信令时省略需要被满足以便启用模式的执行的条件中的一些。这可能导致减少检查条件的操作，例如，可以省略常常为真的条件。
更具体地，为了使用预定模式，指示可使用模式的较高级别信令需要为真，并且切片类型需要具有特定值。然而，当检查用于使用预定模式的条件以便确定关于是否使用与预定模式不同的模式的信令的解析时，可以基于较高级别信令而不是基于切片类型来确定关于是否使用另一模式的信令的解析。这可以是可能的，因为切片类型常常具有特定值。因此，即使切片类型不具有特定值，如果指示可使用模式的较高级别信令是真，则也可以解析关于是否使用与预定模式不同的模式的信令。
参考图26，可以存在mmvd_condition、subblock_merge_condition、ciip_condition和triangle_merge_condition。例如，mmvd_condition、subblock_merge_condition、ciip_condition和triangle_merge_condition分别可以是参考图25描述的需要被满足以便执行MMVD、子块合并模式、CIIP和三角合并模式的条件。可替代地，mmvd_condition、subblock_merge_condition、ciip_condition和triangle_merge_condition分别可以是参考图25描述的需要被满足以便执行MMVD、子块合并模式、CIIP和三角合并模式的条件的一部分。例如，mmvd_condition、subblock_merge_condition和ciip_condition分别可以是参考图25描述的第二条件2502、第三条件2503和第四条件2504或其一部分。
此外，如果需要被满足以启用晚于预定模式发信号告知或确定的模式的执行的条件以及要被满足以启用预定模式的执行的条件重叠，则需要满足要被满足以便启用预定模式的执行的条件以使得能够使用预定模式。因此，可以从图26的mmvd_condition、subblock_merge_condition、ciip_condition、triangle_merge_condition等中排除重叠条件。
参考图26，当满足triangle_merge_condition时，可以解析ciip_flag。此外，如果不满足triangle_merge_condition，则可以不解析ciip_flag。此外，如果不满足triangle_merge_condition，则可以将ciip_flag推断为1。这里，为了将其值推断为1，需要满足用于执行CIIP的条件，在CIIP之前发信号告知或确定的模式都不被使用(例如，regular_merge_flag＝＝0&&mmvd_merge_flag＝＝0&&merge_subblock_flag＝＝0)，而如果使用合并模式，则需要满足(general_merge_flag＝＝1)的条件。否则，如果不存在ciip_flag，则可以将其值推断为0。
参考图26，如果满足ciip_condition或者满足triangle_merge_condition，则可以解析merge_subblock_flag。此外，如果不满足ciip_condition，并且不满足triangle_merge_coondition，则可以不解析merge_subblock_flag。此外，如果不满足ciip_condition，并且不满足triangle_merge_coondition，可以将merge_subblock_flag推断为1。这里，为了将其值推断为1，需要满足用于执行子块合并模式的条件，在子块合并模式之前发信号告知或确定的模式都不被使用(例如，regular_merge_flag＝＝0&&mmvd_merge_flag＝＝0)，而如果使用合并模式，则需要满足(general_merge_flag＝＝1)的条件。否则，如果不存在merge_subblock_flag，则可以将其值推断为0。
参考图26，当满足subblock_merge_condition、满足ciip_condition或者满足triangle_merge_condition时，可以解析mmvd_merge_flag。此外，如果不满足subblock_merge_condition、不满足ciip_condition并且不满足triangle_merge_coondition，则可能以不解析mmvd_merge_flag。此外，如果不满足subblock_merge_condition、不满足ciip_condition并且不满足triangle_merge_coondition，则可以将mmvd_merge_flag推断为1。这里，需要满足用于执行MMVD的条件，在MMVD之前发信号告知或确定的模式都不被使用(例如，regular_merge_flag＝＝0)，并且如果使用合并模式，则可能需要满足(general_merge_flag＝＝1)的条件，以将mmvd_merge_flag的值推断为1。此外，可能存在参考图26描述的mmvd_merge_flag被推断为1的情况。否则，如果mmvd_merge_flag不存在，则可以将其值推断为0。
参考图26，当满足mmvd_condition、满足subblock_merge_condition、满足ciip_condition或者满足triangle_merge_condition时，可以解析regular_merge_flag。此外，如果不满足mmvd_condition、不满足subblock_merge_condition、不满足ciip_condition并且不满足triangle_merge_coondition，则可以不解析regular_merge_flag。此外，如果不满足mmvd_condition、不满足subblock_merge_condition、不满足ciip_condition并且不满足triangle_merge_coondition，则可以将regular_merge_flag推断为1。这里，为了将其值推断为1，需要满足用于执行常规合并模式的条件(对于常规合并模式此条件可能不存在)，在常规合并模式之前发信号告知或确定的模式都不被使用(对于常规合并模式此条件可能不存在)，并且如果合并模式被使用，则需要满足(general_merge_flag＝＝1)的条件。此外，可能存在参考图25描述的regular_merge_flag被推断为1的情况。否则，如果regular_merge_flag不存在，则可以将其值推断为0。
另外，图26图示根据是否晚于多个模式发信号告知或确定的模式的执行被启用的信令。信令方法仅可用于多个模式中的一些。也就是说，可以使用图25的第一条件2501、第二条件2502、第三条件2503和第四条件2504中的至少一个，并且对于其余条件可以使用图26的方法。也就是说，可以使用图25的第一条件2501以及图26的第二条件2602、第三条件2603和第四条件2604。
图27图示根据本发明的实施例的合并数据语法结构。图27可以是参考图12、图13和图26描述的信令方法的特定实施例。参考图27，可以在(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)时解析ciip_flag。这里，只有当满足用于执行CIIP的条件时，对ciip_flag的解析才是可能的。此外，如果不满足(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)的条件，则可能不解析ciip_flag。此外，如果不满足(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)的条件，则可以将ciip_flag推断为1。这里，可以在使用合并模式，满足用于执行CIIP的条件，并且在CIIP之前发信号告知或确定的模式都不被使用时将ciip_flag推断为1。
例如，在(general_merge_flag＝＝1&&sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width*height>＝64&&width<128&&height<128&&regular_merge_flag＝＝0&&mmvd_triangle_flag＝＝0&&merge_subblock_flag＝＝0)的情况下，并且如果不满足(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)的条件，则可以将ciip_flag推断为1。这里，能够使用仅(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)当中的一些条件。如果使用仅一些条件，则用于确定是否解析的一些条件和在推断时使用的一些条件可能需要匹配。例如，作为不使用slice_type的示例，当满足(sps_triangle_enabled_flag&&MaxNumTriangleMergeCand>＝2)时可以解析ciip_flag，而如果不满足(sps_triangle_enabled_flag&&MaxNumTriangleMergeCand>＝2)则可以不解析ciip_flag。此外，如果不满足(sps_triangle_enabled_flag&&MaxNumTriangleMergeCand>＝2)则使用合并模式，以及当满足用于执行CIIP的条件并且在使用CIIP之前发信号告知或确定的模式都不被使用时，可以将ciip_flag推断为1。
参考图27，在(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128))的情况下，可以解析merge_subblock_flag。这里，只有当满足用于执行子块合并模式的条件时对merge_subblock_flag的解析才可以是可能的。此外，如果不满足(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128))，可以不解析merge_subblock_flag。此外，如果不满足(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128))，则可以将merge_subblock_flag推断为1。这里，可以在使用合并模式，满足用于执行子块合并模式的条件，并且在子块合并模式之前发信号告知或确定的模式都不被使用时将merge_subblock_flag推断为1。
例如，在(general_merge_flag＝＝1&&MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8&&regular_merge_flag＝＝0&&mmvd_merge_flag＝＝0)的情况下，并且如果不满足((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128))，可以将merge_subblock_flag推断为1。这里，能够使用(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)中的仅一些条件并且能够使用(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)中的仅一些条件。当使用仅一些条件时，用于确定是否解析的一些条件和在推断时使用的一些条件可能需要匹配。此外，已经在上文中描述的不满足(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128))的情况可以与不满足(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)的情况(&&)和不满足(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)的情况相同。
参考图27，在((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&height>＝8&&height>＝8))的情况下，可以解析mmvd_merge_flag。这里，只有当满足用于执行MMVD的条件时，对mmvd_merge_flag的解析才是可能的。另外，如果不满足((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&width>＝8))，则可以不解析mmvd_merge_flag。另外，如果不满足((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&width>＝8))，则可以将mmvd_merge_flag推断为1。
这里，当使用合并模式、满足用于执行MMVD的条件并且在MMVD之前发信号告知或确定的模式都不被使用时，可以将mmvd_merge_flag推断为1。例如，在(general_merge_flag＝＝1&&sps_mmvd_enabled_flag&&regular_merge_flag＝＝0)的情况下，并且如果不满足((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128||(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8))，则可以将mmvd_merge_flag推断为1。这里，(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)中的仅一些条件是可使用的，(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)中的仅一些条件是可使用的，并且(MaxNumSubblockMergeCand>＝0&&width>＝8&&height>＝8)中的仅一些条件是可使用的。当使用仅一些条件时，用于确定是否解析的一些条件和在推断时使用的一些条件可能需要匹配。另外，已经在上文中描述的不满足((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8))的情况与不满足(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)的情况(&&)、不满足(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)的情况(&&)和不满足(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8)的情况相同。
如参考图25所描述的，可能存在mmvd_merge_flag被推断为1的情况。例如，在(sps_mmvd_enabled_flag＝＝1&&general_merge_flag＝＝1&&width*height＝＝32&&regular_merge_flag＝＝0))的情况下，可以将mmvd_merge_flag推断为1。另外，如图26中所描述的，在(general_merge_flag＝＝1&&sps_mmvd_enabled_flag&&regular_merge_flag＝＝0)的情况下，并且如果不满足((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8))，则可以将mmvd_merge_flag推断为1。否则，可以将mmvd_merge_flag推断为0。
参考图27，在((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8)||sps_mmvd_enabled_flag)的情况下，可以解析regular_merge_flag。这里，只有当可能的合并模式的不仅仅存在常规合并模式时，对regular_merge_flag的解析才是可能的。另外，如果不满足((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8)||sps_mmvd_enabled_flag)，则可能不解析regular_merge_flag。
另外，如果不满足((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8)||sps_mmvd_enabled_flag)，则可以将regular_merge_flag推断为1。这里，当使用合并模式时，可以将regular_merge_flag推断为1。例如，在(general_merge_flag＝＝1)的情况下，并且如果不满足((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8)||sps_mmvd_enabled_flag)，则可以将regular_merge_flag推断为1。这里，可以使用(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)中的仅一些条件，可以使用(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)中的仅一些条件，并且可以使用(MaxNumSubblockMergeCand>＝0&&width>＝2)8&&height>＝8)中的仅一些条件。当使用仅一些条件时，用于确定是否解析的一些条件和在推断时使用的一些条件可能需要匹配。
更具体地，低复杂度编码器可能不使用各种合并工具，并且对于编码器，如果不满足(sps_triangle_enabled_flag||sps_affine_enabled_flag||sps_sbtmvp_enabled_flag||sps_ciip_enabled_flag||sps_mmvd_enabled_flag)，则可以不解析regular_merge_flag并且可以将其值推断为1。另外，已经在上文中描述的不满足((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8)||sps_mmvd_enabled_flag)的情况可以与不满足(sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)的情况(&&)、不满足(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)的情况(&&)、不满足(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8)的情况(&&)和不满足sps_mmvd_enabled_flag的情况相同。
如参考图25所描述的，可能存在regular_merge_flag被推断为1的情况。例如，在(sps_mmvd_enabled_flag＝＝0&&general_merge_flag＝＝1&&width*height＝＝32)的情况下，可以将regular_merge_flag推断为1。此外，如图25中所描述的，在(general_merge_flag＝＝1)的情况下，并且如果不满足((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8)||sps_mmvd_enabled_flag)，则可以将regular_merge_flag推断为1。否则，可以将regular_merge_flag推断为0。
此外，由于图27的第一条件2701和第二条件2702可以包括(1)width*height>＝64和(2)宽度>＝8并且高度>＝8的条件，所以关于条件(1)或(2)，宽度和高度分别可能既不是4和8也不是8和4。因此，不需要在第一条件2701和第二条件2702下检查width*height是否是32。因此，第二条件2702可以仅包括((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8)||sps_mmvd_enabled_flag)。这里，如果general_merge_flag是1，并且如果不满足((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8)||sps_mmvd_enabled_flag)，则可以将regular_merge_flag推断为1。否则，可以将regular_merge_flag推断为0。
此外，第二条件2702可以包括仅sps_mmvd_enabled_flag&&((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8))。这里，在(general_merge_flag＝＝1&&sps_mmvd_enabled_flag&&regular_merge_flag＝＝0)的情况下，并且如果不满足((sps_triangle_enabled_flag&&slice_type＝＝B&&MaxNumTriangleMergeCand>＝2)||(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)||(MaxNumSubblockMergeCand>0&&width>＝8&&height>＝8))，则可以将mmvd_merge_flag推断为1。否则，可以将mmvd_merge_flag推断为0。
此外，如参考图26所描述的，信令方法可以被仅用于图27中的多个模式中的一些。也就是说，可以使用图25的第一条件2501、第二条件2502、第三条件2503和第四条件2504中的一些，而对于其余条件可以使用图27的方法。也就是说，可以使用图25的第一条件2501、图27的第二条件2702、第三条件2703和第四条件2704。
图28图示根据本发明的实施例的合并数据语法结构的示例。图28可以是参考图12、图13和图26描述的信令方法的特定实施例。另外，在图28的实施例中，可以排除与图27中描述的实施例的条件重叠的条件。
参考图28，与图27相比，第二条件2802可能不包括width*height>＝64的条件。这可能因为如果不满足(width>＝8&&height>＝8)的条件，则不满足width*height>＝64的条件并且因此width*height！＝32的条件已经存在而发生。也就是说，这可能因为根据其他条件可能总是满足width*height>＝64而发生。
此外，如参考图26所描述的，信令方法可以被仅用于图28中的多个模式中的一些。也就是说，可以使用图25的第一条件2501、第二条件2502、第三条件2503和第四条件2504中的一些，而对于其余条件可以使用图28的方法。也就是说，可以使用图25的第一条件2501以及图28的第二条件2802、第三条件2803和第四条件2804。可替代地，可以互换地使用图25至图28的第一条件至第四条件。也就是说，可以使用图27的第一条件2701以及图28的第二条件2802、第三条件2801和第四条件2801。
图29图示根据本发明的实施例的合并模式信令方法的示例。在先前描述的合并模式信令中，已经描述了顺序信令方法。例如，可以使用如图25中所示的顺序信令方法。图29的(a)示出顺序信令方法。在图29中，粗体部分指示要确定的模式，而斜体部分表示信令。此信令可以是标志并且可以具有0或1的值。
另外，可以取决于情况而执行显式信令或隐式信令。例如，在图29的(a)中，可以发信号告知regular_merge_flag，并且基于regular_merge_flag的值，可以确定它是否是常规合并模式。如果根据regular_merge_flag确定它不是常规合并模式，则可以发信号告知mmvd_merge_flag，并且基于mmvd_merge_flag，可以确定它是否是MMVD。如果确定它不是MMVD，则可以发信号告知merge_subblock_flag，并且基于merge_subblock_flag，可以确定它是否是子块合并模式。如果确定它不是子块合并模式，则可以发信号告知ciip_flag，并且可以基于ciip_flag来确定它是否是CIIP。另外，可以基于ciip_flag来确定它是三角合并模式还是三角划分模式(TPM)。图29(a)示出按常规合并模式、MMVD、子块合并模式、CIIP和三角合并模式的顺序执行信令的实施例。然而，本发明不限于此，并且可以按不同的顺序配置信令。前面的图图示按不同的顺序执行信令的实施例。
作为另一合并模式信令方法，可以使用分组方法。图29(b)示出分组方法的实施例。例如，可以发信号告知group_1_flag，并且可以基于group_1_flag确定选择的模式是否属于组1。如果根据group_1_flag确定它不是组1，则可以发信号告知group_2_flag。另外，可以基于group_2_flag确定选择的模式是否属于组2。即使存在多个组，也能够执行这样的操作。此外，可以存在指示组中的模式的信令。与顺序信令相比，分组方法能够减少信令深度。此外，分组方法能够减少信令的最大长度(码字的最大长度)。
根据本发明的实施例，可以存在三个组。此外，可以存在属于预定组的一个模式。例如，可能存在属于组1的一个模式。此外，可以存在属于组2和组3中的每一个的两个模式。参考图29(b)，组1可以包括子块合并模式，组2可以包括常规合并模式和MMVD，并且组3可以包括CIIP和三角合并模式。另外，group_1_flag可以是merge_subblock_flag，并且group_2_flag可以是regular_merge_flag。另外，ciip_flag和mmvd_merge_flag可以作为指示组中的模式的信令而存在。例如，发信号告知merge_subblock_flag，并且基于merge_subblock_flag，可以确定它是否是子块合并模式。如果确定它不是子块合并模式，则可以发信号告知regular_merge_flag。可以基于regular_merge_flag来确定关于它是组2(常规合并模式或MMVD)还是组3(CIIP或三角合并模式)的确定。另外，当确定它是组2时，基于mmvd_merge_flag来确定它是常规合并模式还是MMVD。另外，当确定它是组3时，能够基于ciip_flag来做出它是CIIP还是三角合并模式的确定。也就是说，图29(a)和图29(b)中的merge_subblock_flag、regular_merge_flag、mmvd_merge_flag和ciip_flag可以具有彼此稍微不同的含义。
图30图示根据本发明的实施例的合并数据语法的示例。图30的实施例可以使用参考图29(b)描述的分组方法。在本实施例中，可以省略与上述描述重复的描述。
根据本发明的实施例，可以在使用合并模式时发信号告知merge_subblock_flag。使用合并模式的情况可以与上述情况相同，并且可以对应于general_merge_flag为1的情况。此外，本发明可以对应于CuPredMode不是MODE_IBC的情况或CuPredMode是MODE_INTER的情况。另外，可以基于MaxNumSubblockMergeCand和块大小来确定是否解析merge_subblock_flag，并且能够基于如上所述可使用子块合并模式的条件来做出此确定。如果merge_subblock_flag是1，则可以确定要使用子块合并模式，并且可以基于merge_subblock_idx附加地确定候选索引。
此外，如果merge_subblock_flag是0，则可以解析regular_merge_flag。这里，可能存在用于解析regular_merge_flag的条件。例如，可以在其中包括基于块大小的条件。另外，可以在其中包括基于指示模式是否可使用的较高级别信令的条件。指示模式是否可使用的较高级别信令可以包括sps_ciip_enabled_flag和sps_triangle_enabled_flag。较高级别信令可以包括基于切片类型的条件。此外，可以在其中包括基于cu_skip_flag的条件。参考图30，只有当满足(width*height>＝64&&width<128&&height<128)时才可以解析regular_merge_flag。此外，如果不满足(width*height>＝64&&width<128&&height<128)，则可以不解析regular_merge_flag。
此外，可使用CIIP的条件可以包括(sps_ciip_enabled_flag&&cu_skip_flag＝＝0)。此外，可使用CIIP的块大小条件可以包括(width*height>＝64&&width<128&&height<128)。此外，可使用三角合并模式的条件可以包括(sps_triangle_enabled_flag&&slice_type＝＝B)。此外，可使用三角合并模式的块大小条件可以包括(width*height>＝64&&width<128&&height<128)。如果满足可使用CIIP的条件或可使用三角合并模式的条件，则可以解析regular_merge_flag。此外，当可使用CIIP的条件和可使用三角合并模式的条件都不满足时，可以不解析regular_merge_flag。
根据本发明的实施例，当regular_merge_flag不存在时，可以将其值推断为1。例如，可以总是将值推断为1。这可以对应于在本发明中如果regular_merge_flag是1则使用常规合并模式或MMVD的情况。因此，如果可使用CIIP的块大小条件和可使用三角合并模式的块大小条件都不满足，则常规合并模式和MMVD可以是可使用的，并且可以将其值确定为1，而不用解析regular_merge_flag。在图30中所示的实施例中，可使用CIIP的块大小条件和可使用三角合并模式的块大小条件是相同的。也就是说，对于宽度或高度为128的块，CIIP和三角合并模式都不被使用。
此外，即使可使用CIIP的条件和可使用三角合并模式的条件都不满足，常规合并模式或MMVD也可以如上所述是可使用的，并且因此可以将其值推断为1，而不用解析regular_merge_flag。
参考图30，如果regular_merge_flag是1，则可以基于sps_mmvd_enabled_flag的值来解析语法元素。sps_mmvd_enabled_flag可以是如上所述指示MMVD是否可使用的较高级别信令。当sps_mmvd_enabled_flag是0时，可以不使用MMVD。参考图30，如果sps_mmvd_enabled_flag是0，则可以不解析mmvd_merge_flag、mmvd_cand_flag、mmvd_distance_idx、mmvd_direction_idx和merge_idx。另外，如果mmvd_merge_flag不存在，则可以将其值推断为0。此外，如果merge_idx不存在，则可以根据预先配置的方法来推断其值。例如，如果merge_idx不存在并且mmvd_merge_flag是1，则可以将它推断为mmvd_cand_flag，而如果mmvd_merge_flag是0，则可以将其值推断为0。因此，在图30的实施例中，在sps_mmvd_enabled_flag为0的情况下，如果regular_merge_flag是1，则merge_idx的值可以总是0，并且可以使用合并候选列表的索引0的候选来执行常规合并模式预测。因此，可能没有用于候选选择的自由度，因此编译效率可能降低。此外，如果sps_mmvd_enabled_flag是1，则可以解析mmvd_merge_flag，而如果mmvd_merge_flag是0，则可以基于MaxNumMergeCand来解析merge_idx。
此外，参考图30，如果regular_merge_flag是0，则可以在满足可使用CIIP的条件和可使用三角合并模式的条件中的全部时解析ciip_flag。如果ciip_flag是1，则可以使用CIIP，而如果ciip_flag是0，可以使用三角合并模式。如果满足可使用CIIP的条件或可使用三角合并模式的条件，则可以不解析ciip_flag。如果ciip_flag不存在并且regular_merge_flag是1，则可以将ciip_flag推断为0。如果ciip_flag不存在并且regular_merge_flag是0，则可以将ciip_flag推断为(sps_ciip_enabled_flag&&cu_skip_flag＝＝0)。另外，可以在B切片的情况下将MergeTriangleFlag设置为！ciip_flag。此外，可以在P切片的情况下将MergeTriangleFlag设置为0。
图31图示根据本发明的实施例的合并数据语法的示例。在本实施例中，可以省略与上述细节重复的细节。如图30中所描述的，如果regular_merge_flag是1并且指示MMVD是否可使用的较高级别信令指示MMVD不可使用，则用于候选选择的自由度降低。在图31的实施例中，能够解决此问题。
参考图31，是否解析merge_idx可以与sps_mmvd_enabled_flag无关。也就是说，可以与sps_mmvd_enabled_flag的值无关地确定是否merge_idx被解析。根据本发明的实施例，如果regular_merge_flag是1，mmvd_merge_flag是0，并且MaxNumMergeCand>1，则可以解析merge_idx。此外，如果regular_merge_flag是1并且mmvd_merge_flag是1，则可以不解析merge_idx。此外，如果regular_merge_flag是1并且MaxNumMergeCand是1，则可以不解析merge_idx。例如，如果sps_mmvd_enabled_flag是1，regular_merge_flag是1，mmvd_merge_flag是0，并且MaxNumMergeCand>1，则可以解析merge_idx。类似地，如果sps_mmvd_enabled_flag是0，regular_merge_flag是1，mmvd_merge_flag是0，并且MaxNumMergeCand>1，则可以解析merge_idx。
另外，在图30的实施例中可使用三角合并模式的块大小条件可能是(width*height>＝64&&width<128&&height<128)。然而，如果宽度或高度的值为128，则三角合并模式是可使用的。例如，如果宽度或高度的值为128，则三角合并模式预测能够帮助改善编译效率。在图31中，即使当宽度或高度的值为128时，也可以使用三角合并模式。
在图31中，可使用CIIP的块大小条件可以是(width*height>＝64&&width<128&&height<128)。此外，可使用三角合并模式的块大小条件可以是(width*height>＝64)。因此，参考图31，如果不满足(width*height>＝64)，则可以不解析regular_merge_flag。此外，可以在宽度的值为128(或高度的值为128或更大)或者高度的值为128(或高度的值为128或更大)时解析regular_merge_flag。例如，在(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)的情况下，如果满足(width*height>＝64)，则可以解析regular_merge_flag。此外，在(sps_triangle_enabled_flag&&slice_type＝＝B)的情况下，如果满足(width*height>＝6)，则可以解析regular_merge_flag。此外，如果不满足(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)，并且不满足(sps_triangle_enabled_flag&&slice_type＝＝B)，则可以不解析regular_merge_flag。
此外，参考图31，在确定是否解析ciip_flag时，可能需要基于块大小的条件。例如，如果宽度<128并且高度<128，则解码器可以解析ciip_flag。如果宽度的值为128(或大于128)或者高度的值为128(或大于128)，则可以不解析ciip_flag。这可能因为如果宽度或高度的值为128(或大于128)，则CIIP和三角合并模式中的一个可能是不可使用的，但是另一个可能是可使用的而发生。这可能因为如果宽度或高度的值为128(或大于128)，则CIIP不可使用但是三角合并模式可以是可使用的而发生。在图30的实施例中，如果宽度或高度的值为128(或128以上)，则CIIP和三角合并模式都不是可使用的，因此，regular_merge_flag不被解析并且其值被推断为1。因此，在图30和图31的实施例之间存在差异。
在本发明的实施例中，可以基于merge_subblock_flag来推断regular_merge_flag的值。在本实施例中，regular_merge_flag、merge_subblock_flag和ciip_flag可以对应于参考图29(b)、图30和图31描述的regular_merge_flag、merge_subblock_flag和ciip_flag。
在图30的描述中，如果regular_merge_flag不存在，则其值总是被推断为1，但是可能存在在regular_merge_flag之前发信号告知merge_subblock_flag为1的情况。这里，当基于merge_subblock_flag或regular_merge_flag执行预测时，由于merge_subblock_flag和regular_merge_flag的值都是1，所以关于要执行的预测可能发生歧义。因此，在本实施例中，可以基于merge_subblock_flag来推断regular_merge_flag。例如，如果merge_subblock_flag是1，则可以将regular_merge_flag推断为0。此外，如果merge_subblock_flag是0，则可以将regular_merge_flag推断为1。可替代地，可以向其添加general_merge_flag的条件。例如，当merge_subblock_flag是0并且general_merge_flag是1时，可以将regular_merge_flag推断为1。
另外，在图30中，示出了在ciip_flag不存在时推断ciip_flag的值的方法。在可使用CIIP的块大小条件和可使用三角合并模式的块大小条件不同的情况下，如果使用图30中描述的ciip_flag推断方法，则发信号告知特定模式连同不能使用该特定模式的块大小一起被使用。也就是说，例如，如果宽度或高度的值为128，则CIIP不可使用，但是可以将ciip_flag设置为1。本实施例能够解决此问题。
根据本发明的实施例，如果ciip_flag不存在，则可以基于块大小来推断其值。此外，如果ciip_flag不存在，则可以基于regular_merge_flag来推断其值。例如，如果regular_merge_flag是1，则可以将ciip_flag推断为0。此外，如果regular_merge_flag是0，则可以基于块大小来推断ciip_flag。例如，如果regular_merge_flag是0，则可以基于块大小、sps_ciip_enabled_flag和cu_skip_flag来推断ciip_flag。如果regular_merge_flag是0，则可以将ciip_flag推断为(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)。因此，如果regular_merge_flag是0并且宽度或高度的值为128，则可以将ciip_flag推断为0。此外，为了将ciip_flag的值推断为1，可以包括general_merge_flag为1的条件。如果general_merge_flag是0，则可以将ciip_flag的值推断为0。也就是说，如果regular_merge_flag是0，则可以将ciip_flag推断为(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128&&general_merge_flag＝＝1)。否则，可以将ciip_flag的值推断为0。
可替代地，如果regular_merge_flag是0并且general_merge_flag是1，则可以将ciip_flag推断为(sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&width<128&&height<128)。如果general_merge_flag是0，则可以将ciip_flag的值推断为0。
另外，已经在图30的实施例中描述了与regular_merge_flag的值无关地设置MergeTriangleFlag的方法。因此，可能发生regular_merge_flag为1并且MergeTriangleFlag为1的情况，并且这对于预测方法导致歧义。因此，在本实施例中，可以基于regular_merge_flag来设置MergeTriangleFlag。例如，如果regular_merge_flag是1，则可以将MergeTriangleFlag设置为0。此外，如果regular_merge_flag是0，则可以将MergeTriangleFlag设置为！ciip_flag。附加地，如果regular_merge_flag是0，则可以考虑到可使用三角合并模式的条件来设置MergeTriangleFlag。例如，如果regular_merge_flag是0，则可以将MergeTriangleFlag设置为(！ciip_flag&&sps_triangle_enabled_flag&&slice_type＝＝B)。
因此，当sps_triangle_enabled_flag是0或者slice_type不是B时，能够防止MergeTriangleFlag被设置为1的情形。另外，可以包括general_merge_flag为1的条件以便将MergeTriangleFlag确定为1。如果general_merge_flag是0，则可以将MergeTriangleFlag设置为0。也就是说，如果regular_merge_flag是0，则可以将MergeTriangleFlag设置为(！ciip_flag&&sps_triangle_enabled_flag&&slice_type＝＝B&&general_merge_flag＝＝1)。否则，可以将MergeTriangleFlag设置为0。
可替代地，如果regular_merge_flag是0并且general_merge_flag是1，则可以将MergeTriangleFlag设置为(！ciip_flag&&sps_triangle_enabled_flag&&slice_type＝＝B)。如果general_merge_flag是0，则可以将MergeTriangleFlag设置为0。
图32图示根据本发明的实施例的几何合并模式。根据本发明的实施例，可以将几何合并模式称为各种名称，诸如几何划分模式、GEO模式、GEO合并模式和GEO划分。根据本发明的实施例，几何合并模式可以是分割编译单元(CU)和编译块(CB)的方法。例如，几何合并模式可以是通过使用非方形或非矩形划分来分割正方形或矩形形状的CU或CB的方法。参考图32，示出了几何划分的示例。如图32中所示，可以通过几何划分来将矩形CU分割成三角或梯形分区(或多边形)。此外，对于CU可以发信号告知用于执行几何合并模式的方法的信令。此外，关于几何合并模式，可以基于两条运动信息来执行运动补偿和预测。此外，能够从合并候选获得两条运动信息。根据本发明的实施例，可能存在指示在几何合并模式中使用的两条运动信息的信令。例如，可以发信号告知两个索引以指示在几何合并模式中使用的两条运动信息。更具体地，例如，可以发信号告知两个合并候选索引以指示在几何合并模式中使用的两条运动信息。此外，可以在几何合并模式中混合两个预测器。例如，在几何合并模式中，可以在CU中的内边界附近混合两个预测器。两个预测器的混合可以表示两个预测器的加权求和被执行。
作为实施例，用于指示在几何合并模式中使用的两条运动信息的语法元素可以是merge_triangle_idx0和merge_triangle_idx1。这里，可以从语法元素导出两个索引m和n。例如，能够导出以下等式。
m＝merge_triangle_idx0
n＝merge_triangle_idx1+((merge_triangle_idx1>＝m)？1:0)
也就是说，索引m可以等于merge_triangle_idx0。此外，如果merge_triangle_idx1等于或大于merge_triangle_idx0，则索引n可以是merge_triangle_idx1+1，而如果merge_triangle_idx1小于merge_triangle_idx0，则索引n可以是merge_triangle_idx1。
此外，参考图32，可以通过角度phi和距离偏移rho来表示几何合并模式的分割边界。角度phi可以表示量化角度，并且距离偏移rho可以表示量化偏移。可以通过merge_geo_idx来发信号告知角度和距离偏移。例如，可以基于查找表来定义角度和距离偏移。几何合并模式可以基于两条运动信息从两个预测器生成预测信号。这里，当执行两个预测器的加权求和时，权重可以基于角度和距离偏移。可替代地，当执行两个预测器的加权求和时，权重可以基于块内的位置(坐标)。可替代地，当执行两个预测器的加权求和时，权重可以基于块宽度和高度。
几何合并模式可以具有比TPM的分割类型更多可能的分割类型。例如，在几何合并模式下两个或更多个分割类型是可能的。例如，80个分割类型可以是可能的。几何合并模式可以是一合并模式类型。也就是说，在几何合并模式中general_merge_flag能够具有1的值。
图33图示根据本发明的实施例的合并数据语法。
关于图33的实施例，可以省略参考图29至图32或先前描述的细节。
如上所述，可以存在用于发信号告知多种合并模式的方法。此外，多种合并模式可以包括子块合并模式、常规合并模式、MMVD、CIIP、几何合并模式等。此外，多种合并模式可以不包括三角划分模式。可替代地，三角划分模式可以是在几何合并模式下被包括的形式。另外，当通过使用本实施例的信令方法来发信号告知合并模式时，能够使用不同长度的码字并且对于特定模式能够使用短长度码字，从而能够改善编译效率。此外，本实施例的信令方法能够消除冗余信令并且改善编译效率。另外，能够通过在本实施例的信令中省略不必要的条件检查来降低解析复杂度。
根据本发明的实施例，可能存在可使用CIIP的条件。可以将可使用CIIP的条件称为CIIP_conditions。当满足所有以下条件时，CIIP_conditions可以为真。
条件1.sps_ciip_enabled_flag
条件2.cu_skip_flag＝＝0
条件3.cbWidth*cbHeight>＝64
条件4.cbWidth<128
条件5.cbHeight<128
此外，当不满足上述条件中的至少一个时，CIIP_conditions可以为假。由于已在先前实施例中描述了上述条件，所以这里将省略细节。
根据本发明的实施例，可能存在可使用几何合并模式的条件。可以将可使用几何合并模式的条件称为GEO_conditions。当满足所有以下条件时，GEO_conditions可以为真。
条件1.sps_triangle_enabled_flag
条件2.MaxNumTriangleMergeCand>1
条件3.slice_type＝＝B
条件4.cbWidth>＝8
条件5.cbHeight>＝8
此外，当不满足上述条件中的至少一个时，GEO_conditions可以为假。
在另一实施例中，可能不需要slice_type条件。这是可能的，因为当满足另一条件例如基于MaxNumTriangleMergeCand的条件时，满足基于slice_type的条件。根据本发明的实施例，可能存在可使用几何合并模式的条件。可以将可使用几何合并模式的条件称为GEO_conditions。当满足所有以下条件时，GEO_conditions可以为真。
条件1.sps_triangle_enabled_flag
条件2.MaxNumTriangleMergeCand>1
条件3.cbWidth>＝8
条件4.cbHeight>＝8
此外，当不满足上述条件中的至少一个时，GEO_conditions可以为假。
由于已经在先前实施例中描述了上述条件，所以这里将省略细节。然而，关于sps_triangle_enabled_flag和MaxNumTriangleMergeCand，先前已经针对与TPM有关的值进行了描述，但是在本实施例中，可以考虑与几何合并模式有关的值。也就是说，sps_triangle_enabled_flag可以是指示几何合并模式是否可使用的较高级别信令。此外，MaxNumTriangleMergeCand可以是在几何合并模式中使用的候选列表的最大数目。
根据本发明的实施例，可以在满足CIIP_conditions或GEO_conditions时解析regular_merge_flag。此外，如果既不满足CIIP_conditions又不满足GEO_conditions，则可以不解析regular_merge_flag。参考图33，条件2指示(CIIP_conditions||GEO_conditions)。也就是说，如果满足以下条件中的至少一个，则可以解析regular_merge_flag。
条件1(CIIP_conditions)。sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&cbWidth*cbHeight>＝64&&cbWidth<128&&cbHeight<128
条件2(GEO_conditions)。sps_triangle_enabled_flag&&MaxNumTriangleMergeCand>1&&cbWidth>＝8&&cbHeight>＝8
此外，如果上述条件都不满足，则可以不解析regular_merge_flag。另外，当regular_merge_flag不存在时，可以将其值推断为general_merge_flag&&！merge_subblock_flag。
作为另一实施例，如上所述，条件2(GEO_conditions)可以包括slice_type条件并且被表示如下。
条件2(GEO_conditions)。sps_triangle_enabled_flag&&MaxNumTriangleMergeCand>1&&slice_type＝＝B&&cbWidth>＝8&&cbHeight>＝8
然而，如果在满足其他条件时总是满足slice_type条件，则可能不需要附加地检查切片类型条件以便降低检查解析条件的复杂度。
根据本发明的实施例，如果满足CIIP_conditions和GEO_conditions两者，则可以解析ciip_flag。此外，如果不满足CIIP_conditions或GEO_conditions，则可以不解析ciip_flag。也就是说，如果满足所有以下条件，则可以解析ciip_flag，而如果不满足以下条件中的至少一个，则可以不解析ciip_flag。
条件1(CIIP_conditions)。sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&cbWidth*cbHeight>＝64&&cbWidth<128&&cbHeight<128
条件2(GEO_conditions)。sps_triangle_enabled_flag&&MaxNumTriangleMergeCand>1&&cbWidth>＝8&&cbHeight>＝8
此外，如上所述，可以在条件2(GEO_conditions)中包括基于slice_type的条件。该条件可以如下。
条件2(GEO_conditions)。sps_triangle_enabled_flag&&MaxNumTriangleMergeCand>1&&slice_type＝＝B&&cbWidth>＝8&&cbHeight>＝8
根据本发明的实施例，用于解析ciip_flag的条件可以不同以便降低解析复杂度。例如，可以省略块大小条件中的一些。在本发明中，当满足用于使用几何合并模式的块大小条件时，可以满足用于使用CIIP的块大小条件中的一些。因此，参考图33的条件3并且根据本发明的实施例，如果满足所有以下条件，则可以解析ciip_flag，而如果不满足以下条件中的至少一个，则可能不解析ciip_flag。
条件1(CIIP_conditions)。sps_ciip_enabled_flag&&cu_skip_flag＝＝0&&cbWidth<128&&cbHeight<128
条件2(GEO_conditions)。sps_triangle_enabled_flag&&MaxNumTriangleMergeCand>1&&cbWidth>＝8&&cbHeight>＝8
此外，如果ciip_flag不存在，则当满足所有以下条件时可以将其值推断为1，而当不满足以下条件中的至少一个时可以将其值推断为0。
条件1.sps_ciip_enabled_flag＝＝1
条件2.general_merge_flag＝＝1
条件3.merge_subblock_flag＝＝0
条件4.regular_merge_flag＝＝0
条件5.cu_skip_flag＝＝0
条件6.cbWidth<128
条件7.cbHeight<128
条件8.cbWidth*cbHeight>＝64
也就是说，在解析期间的条件和在推断期间的条件可以是不同的。另外，可以将在解析期间省略的条件(例如，基于块大小的条件)包括在推断条件中。
另外，作为指示是否使用几何合并模式的值的merge_geo_flag在满足所有以下条件的情况下可以被确定为1，而在不满足以下条件中的至少一个的情况下可以被确定为0。
条件1.sps_triangle_enabled_flag＝＝1
条件2.general_merge_flag＝＝1
条件3.merge_subblock_flag＝＝0
条件4.regular_merge_flag＝＝0
条件5.ciip_flag＝＝0
条件6.MaxNumTriangleMergeCand>＝2
条件7.cbWidth>＝8
条件8.cbHeight>＝8
作为附加实施例，可以添加条件9的slice_type＝＝B。
因此，参考图33，可以提供以下信令结构。当满足第一条件3301时，可以解析merge_subblock_flag。如果merge_subblock_flag是1，则可以使用子块合并模式，可以解析merge_subblock_idx，并且可以不解析regular_merge_flag、mmvd_merge_flag和ciip_flag。如果merge_subblock_flag是0并且满足第二条件3302，则可以解析regular_merge_flag。如果regular_merge_flag是1，则能够使用常规合并模式或MMVD，并且附加地能够解析mmvd_merge_flag。在这方面，可以应用参考图29至图32描述的细节。如果regular_merge_flag是0并且满足第二条件3302，则可以解析ciip_flag。如果ciip_flag是1，则可以使用CIIP。当使用CIIP时，如果MaxNumMergeCand大于1则可以解析merge_idx。如果ciip_flag是0，则可以将merge_geo_flag确定为1。此外，如果ciip_flag是0，则可以使用几何合并模式。当使用几何合并模式时，可以解析merge_geo_idx、merge_triangle_idx0和merge_triangle_idx1。可替代地，当使用几何合并模式时，如果MaxNumTriangleMergeCand大于1，则可以解析merge_geo_idx、merge_triangle_idx0、merge_triangle_idx1。
因此，根据本发明的实施例，当宽度或高度为4的块即4xN或Nx4大小的块使用CIIP时，可以执行信令如下。merge_subblock_flag可以是0，由于满足第二条件3302，所以可以解析regular_merge_flag并且其值可以是0，以及由于不满足第三条件3303，所以可以不解析ciip_flag，并且可以根据上述细节将其值推断为1。另外，当使用几何合并模式时，可以执行信令如下。merge_subblock_flag可以是0，regular_merge_flag可以是0，并且ciip_flag可以是0。
在参考图33描述的实施例中，可以存在仅ciip_flag作为指示是否使用几何合并模式的语法元素。另外，已经基于对于宽度或高度小于8的块不能执行几何合并模式描述了图33的实施例。然而，本发明不限于此，并且即使当几何合并模式不可使用于另一块大小时(例如，小于阈值的块大小)时也可以应用该实施例。
图34图示根据本发明被应用于的实施例的视频信号处理方法的示例。参考图34，为了描述的方便主要描述解码器，但是本发明不限于此。此外，能够将根据本实施例的用于基于多假想预测处理视频信号的方法以基本上相同的方式应用于编码器。
解码器解析指示是否合并模式被应用于当前块的第一语法元素(S3401)。
当合并模式被应用于当前块时，解码器基于第一预定义条件来确定是否解析第二语法元素(S3402)。作为实施例，第二语法元素可以指示第一模式或第二模式是否被应用于当前块。
当第一模式和第二模式不被应用于当前块时，解码器基于第二预定义条件来确定是否解析第三语法元素(S3403)。作为实施例，第三语法元素可以指示在第三模式或第四模式当中被应用于当前块的模式。
解码器基于第二语法元素或第三语法元素来确定被应用于当前块的模式(S3404)。
解码器基于所确定的模式来导出当前块的运动信息(S3405)。
解码器通过使用当前块的运动信息来生成当前块的预测块(S3406)。
本发明涉及一种视频信号处理方法，其中第一条件包括可使用第三模式的条件和可使用第四模式的条件中的至少一个。
如上所述，作为实施例，第三模式和第四模式可以在合并数据语法中的解码顺序上晚于第一模式定位。
如上所述，作为实施例，根据本发明的视频信号处理方法包括：在满足第一条件时解析第二语法元素；以及当不满足第一条件时，可以将第二语法元素的值推断为1。
如上所述，作为实施例，当不满足第一条件时，可以基于指示是否基于子块的合并模式被应用于当前块的第四语法元素来推断第二语法元素。
如上所述，作为实施例，第二条件可以包括可使用第四模式的条件。
如上所述，作为实施例，第二条件可以包括与第三模式在当前顺序中是否可使用、第四模式在当前顺序中是否可使用、用于第四模式的候选的最大数目是否大于1、当前块的宽度是否小于第一预定义大小、以及当前块的高度是否小于第二预定义大小有关的条件中的至少一个。
如上所述，作为实施例，根据本发明的视频信号处理方法包括，在第二语法元素的值为1时，获得指示被应用于当前块的模式是第一模式还是第二模式的第五语法元素。
本发明的实施例可以通过各种方式来实现。例如，本发明的实施例可以通过硬件、固件、软件或其组合来实现。
在通过硬件实现时，本发明的实施例可以通过一个或多个专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程设备门阵列(FPGA)、处理器、控制器、微控制器、微处理器等来实现。
在通过固件或软件的实现中，根据本发明的实施例的方法可以以用于执行上述功能或操作的模块、过程、函数等的形式来实现。软件代码可以被存储在存储器中并由处理器执行。存储器可以位于处理器内部或外部，并且可以通过已知的各种方式与处理器交换数据。
一些实施例可以以包括由计算机可执行的指令(诸如由计算机执行的程序模块)的记录介质的形式来实现。计算机可读介质可以是可由计算机访问的随机可用介质，并且包括所有易失性和非易失性介质以及可分离和不可分离的介质。此外，计算机可读介质可以包括所有计算机存储介质和通信介质。计算机存储介质包括通过用于存储信息(诸如计算机可读指令、数据结构，程序模块或其他数据)的随机方法或技术实现的所有易失性、非易失性、可分离和不可分离的介质。通信介质包括计算机可读指令、数据结构、诸如程序模块的所调制的数据信号的其他数据或其他传输机制，并且包括随机信息传输介质。
根据本发明的描述仅是示例性的，并且本领域技术人员可以理解到，在不脱离本发明的技术思想或必要特征的情况下，可以容易地将本发明的实施例改变为其他详细形式。因此，上述实施例在所有方面均应被解释为示例，而不是限制性的。例如，以单数形式提及的每个元素可以以分布式方式实现，并且以分布式形式提及的元素也可以以组合形式实现。
本发明的范围由所附权利要求而不是详细描述限定。权利要求的含义和范围以及从其等同物的概念得出的所有改进或改进形式应被解释为包括在本发明的范围内。
工业适用性
上述本发明的优选实施例是为了图示而提供的，并且本领域的技术人员能够在所附权利要求中公开的本发明的技术思想和技术范围内改善、修改、取代或添加各种其他实施例。

Claims (9)

1.一种视频信号处理方法，包括：
解析第一语法元素，所述第一语法元素指示是否将合并模式应用于当前块；
当所述合并模式被应用于所述当前块时，基于第一预定义条件来确定是否解析第二语法元素，其中，所述第二语法元素指示是否第一模式或第二模式被应用于所述当前块；
当所述第一模式和所述第二模式不被应用于所述当前块时，基于第二预定义条件来确定是否解析第三语法元素，其中，当将第二模式应用于所述当前块时，将所述第三语法元素的值设置为预定值，其中当将第三模式或第四模式应用于所述当前块时，不应用所述第一模式和所述第二模式；
基于所述第二语法元素或所述第三语法元素来确定被应用于所述当前块的模式；
基于所确定的模式来导出所述当前块的运动信息；以及
通过使用所述当前块的运动信息来生成所述当前块的预测块，
其中，
所述第二预定义条件包括可使用所述第三模式的条件和可使用所述第四模式的条件中的至少一个，
所述第一模式、所述第二模式、所述第三模式和所述第四模式中的每一个对应于常规合并模式、MMVD模式、组合帧内预测、CIIP模式和三角模式中的相应一个，
所述MMVD模式是其中应用基于使用运动矢量差的合并模式的运动补偿方法的模式，
所述CIIP模式是组合帧间预测和帧内预测的预测方法的模式，并且
所述三角模式是其中将所述当前块分为两部分并且所述两部分使用不同条数的运动信息的预测方法。
2.根据权利要求1所述的视频信号处理方法，其中，与所述第三模式相关的语法元素和与所述第四模式相关的语法元素在合并数据语法中的解码顺序上晚于所述第一模式被定位。
3.根据权利要求1所述的视频信号处理方法，进一步包括当满足所述第一预定义条件时解析所述第二语法元素，
其中，当不满足所述第一预定义条件时，所述第二语法元素的值不出现在合并数据语法中并且推断所述第二语法元素的值。
4.根据权利要求1所述的视频信号处理方法，其中，所述第二预定义条件包括与所述第三模式在当前序列中是否可使用、所述第四模式在所述当前序列中是否可使用、用于所述第四模式的候选的最大数目是否大于1、所述当前块的宽度是否小于第一预定义大小、以及所述当前块的高度是否小于第二预定义大小有关的条件中的至少一个。
5.一种包括处理器的视频信号处理装置，其中，所述处理器被配置成：
解析第一语法元素，所述第一语法元素指示是否将合并模式应用于当前块；
当所述合并模式被应用于所述当前块时，基于第一预定义条件来确定是否解析第二语法元素，其中，所述第二语法元素指示是否第一模式或第二模式被应用于所述当前块；
当所述第一模式和所述第二模式不被应用于所述当前块时，基于第二预定义条件来确定是否解析第三语法元素，其中，当将第二模式应用于所述当前块时，将所述第三语法元素的值设置为预定值，其中当将第三模式或第四模式应用于所述当前块时，不应用所述第一模式和所述第二模式；
基于所述第二语法元素或所述第三语法元素来确定被应用于所述当前块的模式；
基于所确定的模式来导出所述当前块的运动信息；以及
通过使用所述当前块的运动信息来生成所述当前块的预测块，
其中，
所述第二预定义条件包括可使用所述第三模式的条件和可使用所述第四模式的条件中的至少一个，
所述第一模式、所述第二模式、所述第三模式和所述第四模式中的每一个对应于常规合并模式、MMVD模式、组合帧内预测、CIIP模式和三角模式中的相应一个，
所述MMVD模式是其中应用基于使用运动矢量差的合并模式的运动补偿方法的模式，
所述CIIP模式是组合帧间预测和帧内预测的预测方法的模式，并且
所述三角模式是其中将所述当前块分为两部分并且所述两部分使用不同条数的运动信息的预测方法。
6.根据权利要求5所述的视频信号处理装置，其中，与所述第三模式相关的语法元素和与所述第四模式相关的语法元素在合并数据语法中的解码顺序上晚于所述第一模式被定位。
7.根据权利要求5所述的视频信号处理装置，其中，所述处理器被配置成在满足所述第一预定义条件时解析所述第二语法元素；以及
其中，当不满足所述第一预定义条件时，所述第二语法元素的值不出现在合并数据语法中并且推断所述第二语法元素的值。
8.根据权利要求5所述的视频信号处理装置，其中，所述第二预定义条件包括与所述第三模式在当前序列中是否可使用、所述第四模式在所述当前序列中是否可使用、用于所述第四模式的候选的最大数目是否大于1、所述当前块的宽度是否小于第一预定义大小、以及所述当前块的高度是否小于第二预定义大小有关的条件中的至少一个。
9.一种视频信号处理方法，包括：
对第一语法元素进行编码，所述第一语法元素指示是否将合并模式应用于当前块；
在所述合并模式被应用于所述当前块时，基于第一预定义条件来确定是否对第二语法元素进行编码，其中，所述第二语法元素指示是否第一模式或第二模式被应用于所述当前块；
在所述第一模式和所述第二模式不被应用于所述当前块时，基于第二预定义条件来确定是否对第三语法元素进行编码，其中，当将第二模式应用于所述当前块时，将所述第三语法元素的值设置为预定值，其中当将第三模式或第四模式应用于所述当前块时，不应用所述第一模式和所述第二模式；
基于所述第二语法元素或所述第三语法元素来确定被应用于所述当前块的模式；
基于所确定的模式来导出所述当前块的运动信息；以及
通过使用所述当前块的运动信息来生成所述当前块的预测块，
其中，所述第二预定义条件包括可使用所述第三模式的条件和可使用所述第四模式的条件中的至少一个，
所述第一模式、所述第二模式、所述第三模式和所述第四模式中的每一个对应于常规合并模式、MMVD模式、组合帧内预测、CIIP模式和三角模式中的相应一个，
所述MMVD模式是其中应用基于使用运动矢量差的合并模式的运动补偿方法的模式，
所述CIIP模式是组合帧间预测和帧内预测的预测方法的模式，并且
所述三角模式是其中将所述当前块分为两部分并且所述两部分使用不同条数的运动信息的预测方法。
CN202080009653.XA 2019-01-18 2020-01-20 使用运动补偿的视频信号处理方法和设备 Active CN113302927B (zh)

Applications Claiming Priority (15)

Application Number Priority Date Filing Date Title
KR10-2019-0006511 2019-01-18
KR20190006511 2019-01-18
KR10-2019-0037000 2019-03-29
KR20190037000 2019-03-29
KR10-2019-0040400 2019-04-05
KR20190040400 2019-04-05
KR20190064959 2019-05-31
KR10-2019-0064959 2019-05-31
KR20190075316 2019-06-24
KR10-2019-0075316 2019-06-24
KR20190081764 2019-07-07
KR10-2019-0081764 2019-07-07
KR20190125746 2019-10-11
KR10-2019-0125746 2019-10-11
PCT/KR2020/000964 WO2020149725A1 (ko) 2019-01-18 2020-01-20 모션 보상을 이용한 비디오 신호 처리 방법 및 장치

Publications (2)

Publication Number Publication Date
CN113302927A CN113302927A (zh) 2021-08-24
CN113302927B true CN113302927B (zh) 2024-04-09

Family

ID=71613796

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080009653.XA Active CN113302927B (zh) 2019-01-18 2020-01-20 使用运动补偿的视频信号处理方法和设备

Country Status (6)

Country Link
US (2) US11849106B2 (zh)
EP (1) EP3913918A4 (zh)
JP (2) JP7277590B2 (zh)
KR (1) KR20210107733A (zh)
CN (1) CN113302927B (zh)
WO (1) WO2020149725A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
MX2021012996A (es) * 2019-04-25 2022-01-26 Huawei Tech Co Ltd Método y aparato de predicción de imagen, y medio de almacenamiento legible por computadora.
US11109041B2 (en) * 2019-05-16 2021-08-31 Tencent America LLC Method and apparatus for video coding
US11611759B2 (en) * 2019-05-24 2023-03-21 Qualcomm Incorporated Merge mode coding for video coding
EP3979645A4 (en) * 2019-06-19 2022-08-10 LG Electronics Inc. METHOD AND DEVICE FOR IMAGE CODING BASED ON MOTION PREDICTION
CN114270833A (zh) * 2019-06-19 2022-04-01 Lg 电子株式会社 用于在视频/图像编译系统中移除重叠信令的方法和装置
CN114270824A (zh) * 2019-06-19 2022-04-01 Lg 电子株式会社 用于基于帧间预测编译图像的方法和装置
CN113347435B (zh) * 2019-06-21 2022-03-29 杭州海康威视数字技术股份有限公司 预测模式的解码、编码方法及装置
US20220264142A1 (en) * 2019-07-24 2022-08-18 Sharp Kabushiki Kaisha Image decoding apparatus, image coding apparatus, and image decoding method
WO2023055171A1 (ko) * 2021-10-01 2023-04-06 엘지전자 주식회사 Mdmvr 기반 영상 코딩 방법 및 장치
WO2023200382A1 (en) * 2022-04-12 2023-10-19 Telefonaktiebolaget Lm Ericsson (Publ) Enhanced multi-hypothesis prediction

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1808428A (zh) * 2005-01-22 2006-07-26 鸿富锦精密工业（深圳）有限公司 展现及编辑信息检索条件的系统及方法
KR20130030240A (ko) * 2011-09-16 2013-03-26 한국항공대학교산학협력단 영상 부호화/복호화 방법 및 그 장치
CN104205829A (zh) * 2012-03-28 2014-12-10 高通股份有限公司 合并信令及环路滤波器开/关信令
WO2015192353A1 (en) * 2014-06-19 2015-12-23 Microsoft Technology Licensing, Llc Unified intra block copy and inter prediction modes
CN106797476A (zh) * 2014-10-07 2017-05-31 高通股份有限公司 帧内bc及帧间统一
WO2018062950A1 (ko) * 2016-09-30 2018-04-05 엘지전자(주) 영상 처리 방법 및 이를 위한 장치
WO2018128380A1 (ko) * 2017-01-03 2018-07-12 엘지전자(주) 어파인 예측을 이용하여 비디오 신호를 처리하는 방법 및 장치

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
HUE063103T2 (hu) * 2010-11-04 2023-12-28 Ge Video Compression Llc Blokk összefûzést és átugrási módot támogató képkódolás
US10158884B2 (en) * 2014-03-19 2018-12-18 Qualcomm Incorporated Simplified merge list construction process for 3D-HEVC
US10123028B2 (en) * 2014-09-17 2018-11-06 Mediatek Inc. Syntax parsing apparatus with multiple syntax parsing circuits for processing multiple image regions within same frame or processing multiple frames and related syntax parsing method
KR20160064845A (ko) 2014-11-28 2016-06-08 (주)휴맥스 깊이 부호화를 위한 서브-예측 유닛 레벨 기반 화면간 움직임 예측 방법 및 장치
US10200711B2 (en) * 2015-03-27 2019-02-05 Qualcomm Incorporated Motion vector derivation in video coding
KR102559063B1 (ko) 2017-02-24 2023-07-24 주식회사 케이티 비디오 신호 처리 방법 및 장치
US10609414B2 (en) * 2017-05-08 2020-03-31 Qualcomm Incorporated Context modeling for transform coefficient coding
MX2021008027A (es) 2018-12-31 2021-08-05 Beijing Dajia Internet Information Tech Co Ltd Sistema y metodo de se?alizacion de modos de fusion de movimiento en codificacion de video.
US20220167009A1 (en) * 2019-03-12 2022-05-26 Sharp Kabushiki Kaisha Systems and methods for performing intra prediction coding in video coding
US11611759B2 (en) 2019-05-24 2023-03-21 Qualcomm Incorporated Merge mode coding for video coding

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1808428A (zh) * 2005-01-22 2006-07-26 鸿富锦精密工业（深圳）有限公司 展现及编辑信息检索条件的系统及方法
KR20130030240A (ko) * 2011-09-16 2013-03-26 한국항공대학교산학협력단 영상 부호화/복호화 방법 및 그 장치
CN104205829A (zh) * 2012-03-28 2014-12-10 高通股份有限公司 合并信令及环路滤波器开/关信令
WO2015192353A1 (en) * 2014-06-19 2015-12-23 Microsoft Technology Licensing, Llc Unified intra block copy and inter prediction modes
CN106797476A (zh) * 2014-10-07 2017-05-31 高通股份有限公司 帧内bc及帧间统一
WO2018062950A1 (ko) * 2016-09-30 2018-04-05 엘지전자(주) 영상 처리 방법 및 이를 위한 장치
WO2018128380A1 (ko) * 2017-01-03 2018-07-12 엘지전자(주) 어파인 예측을 이용하여 비디오 신호를 처리하는 방법 및 장치

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
Yi-Wen Chen.Non-CE4: Regular merge flag coding.Joint Video Experts Team (JVET) of ITU-T SG 16 WP 3 and ISO/IEC JTC 1/SC 29/WG 11 13th Meeting: Marrakech, MA, 9–18 Jan. 2019，JVET-M0231.2019,全文. *

Also Published As

Publication number Publication date
US20240048692A1 (en) 2024-02-08
EP3913918A4 (en) 2023-01-18
EP3913918A1 (en) 2021-11-24
CN113302927A (zh) 2021-08-24
US20220086429A1 (en) 2022-03-17
JP2023099155A (ja) 2023-07-11
KR20210107733A (ko) 2021-09-01
JP7277590B2 (ja) 2023-05-19
JP2022518717A (ja) 2022-03-16
US11849106B2 (en) 2023-12-19
WO2020149725A1 (ko) 2020-07-23

Similar Documents

Publication Publication Date Title
CN113302927B (zh) 使用运动补偿的视频信号处理方法和设备
KR102493418B1 (ko) 적응적 모션 벡터 레졸루션을 이용하는 비디오 신호 처리 방법 및 장치
KR102498289B1 (ko) 인터 예측 방법 및 그 장치
CN110710210B (zh) 视频信号处理方法及装置
CN113196751B (zh) 通过使用基于子块的运动补偿处理视频信号的方法和设备
EP4002847A1 (en) Method and device for processing video signal
KR102625145B1 (ko) 예측 모드를 시그널링하는 비디오 신호 처리 방법 및 장치
EP4007282A1 (en) Video signal processing method and device
JP2023164843A (ja) 適応的動きベクトル解像度を利用したビデオ信号処理方法及び装置
CN113454992A (zh) 基于帧内预测的视频信号处理方法和设备
US20210297662A1 (en) Video signal processing method and device using current picture reference
KR20200137326A (ko) 현재 픽쳐 참조를 이용한 비디오 신호 처리 방법 및 장치
KR20240026180A (ko) 인트라 예측을 이용한 비디오 신호 처리 방법 및 이를 위한 장치
KR20200054052A (ko) 화면내 블록 복사를 사용하는 비디오 신호 처리 방법 및 장치

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
TA01 Transfer of patent application right

Effective date of registration: 20220831

Address after: Gyeonggi Do, South Korea

Applicant after: WILUS INSTITUTE OF STANDARDS AND TECHNOLOGY Inc.

Address before: Gyeonggi Do, South Korea

Applicant before: WILUS INSTITUTE OF STANDARDS AND TECHNOLOGY Inc.

Applicant before: HUMAX Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant