CN115623198A - 使用参考样本的视频信号处理方法及设备 - Google Patents

使用参考样本的视频信号处理方法及设备 Download PDF

Info

Publication number
CN115623198A
CN115623198A CN202211073272.5A CN202211073272A CN115623198A CN 115623198 A CN115623198 A CN 115623198A CN 202211073272 A CN202211073272 A CN 202211073272A CN 115623198 A CN115623198 A CN 115623198A
Authority
CN
China
Prior art keywords
reference sample
current block
value
samples
reference samples
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202211073272.5A
Other languages
English (en)
Inventor
金东哲
高建重
郑在洪
孙周亨
郭真三
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Humax Co Ltd
Original Assignee
Humax Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020180054588A external-priority patent/KR20190129641A/ko
Application filed by Humax Co Ltd filed Critical Humax Co Ltd
Publication of CN115623198A publication Critical patent/CN115623198A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/105Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • H04N19/11Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/119Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46Embedding additional information in the video signal during the compression process
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques

Abstract

公开了一种使用参考样本的视频信号处理方法及设备。更具体地,公开了一种视频信号处理方法和用于执行该方法的视频信号处理设备,该视频信号处理方法包括下述步骤:基于邻近当前块的预先恢复的样本获取当前块的第一边上的参考样本以及其第二边上的参考样本;基于由第一边上的参考样本和第二边上的参考样本中的至少一些组成的参考样本集,获取用于预测当前块的直流(DC)值,其中,如果第一边的长度和第二边的长度不同,则参考样本集包括通过排除第一边上的参考样本和第二边上的参考样本中的一些而获得的提升到2的幂的参考样本的数量;以及基于DC值恢复当前块。

Description

使用参考样本的视频信号处理方法及设备
本申请是2020年11月10日提交进入中国专利局的国际申请日为2019年5月13日的申请号为201980031531.8(PCT/KR2019/005750)的,发明名称为“使用参考样本的视频信号处理方法及设备”的专利申请的分案申请。
技术领域
本发明涉及视频信号处理方法和装置,并且更具体地,涉及用于对视频信号进行编码或解码的视频信号处理方法和装置。
背景技术
压缩编译指代用于通过通信线路发送数字化信息或以适合于存储介质的形式存储信息的一系列信号处理技术。压缩编码的对象包括诸如语音、视频和文本的对象,并且特别地,用于对图像执行压缩编码的技术被称为视频压缩。考虑到空间相关性、时间相关性和随机相关性,通过去除过多的信息来执行对视频信号的压缩编译。然而,随着各种媒体和数据传输媒体的最新发展,需要更有效的视频信号处理方法和装置。
发明内容
技术问题
本发明的目的是提高视频信号的编译效率。另外,本发明的目的是使用当前块的参考样本提高与对当前块的预测有关的信令效率。
技术方案
为了解决上述问题,本公开提供了如下的视频信号处理设备和视频信号处理方法。
首先,本公开的实施例提供一种视频信号处理方法,该方法包括:基于当前块周围的预先重构的样本,获得当前块的第一边上的参考样本和第二边上的参考样本;基于包括第一边上的参考样本和第二边上的参考样本中的至少一些的参考样本集,获得用于当前块的预测的直流(DC)值,如果第一边的长度和第二边的长度彼此不同,则该参考样本集包括从第一边上的参考样本和第二边上的参考样本中排除一些参考样本的2n个参考样本;以及基于DC值重构当前块。
另外,本公开的实施例可以提供一种包括处理器的视频信号解码设备,并且该处理器可以被配置成基于当前块周围的预先重构的样本获得当前块的第一边上的参考样本和第二边上的参考样本,基于包括第一边上的参考样本和第二边上的参考样本中的至少一些的参考样本集,获得用于预测当前块的直流(DC)值,如果第一边的长度和第二边的长度彼此不同,则参考样本集包括从第一边上的参考样本和第二边上的参考样本中排除一些参考样本的2n个参考样本,并基于DC值重构当前块。
参考样本集可以包括从第一边上的所有参考样本和第二边上的所有参考样本中排除对应于第一边和第二边中较短边的长度那么多的参考样本的2n个参考样本。
参考样本集可以包括在当前块的第一边和第二边的任一边上的参考样本。
参考样本集可以包括在第一边和第二边中的较长边上的参考样本。
参考样本集可以包括从第一边上的参考样本和第二边上的参考样本中排除第一边和第二边中较短边上的参考样本的剩余参考样本。
处理器可以被配置成:将第一边的长度与第二边的长度进行比较,并且如果作为比较的结果第一边的长度大于第二边的长度,则基于包括第一边上的参考样本的参考样本集获得DC值。
处理器可以被配置成:如果第一边的长度大于第二边的长度,则基于第一边上的参考样本的平均值来获得DC值。
处理器可以被配置成:作为比较的结果,基于第一边和第二边中的较长边的长度来获得DC值。
此外,本公开的实施例可以提供一种包括处理器的视频信号编码设备,并且该处理器可以被配置成基于当前块周围的预先重构的样本获得当前块的第一边上的参考样本和第二边上的参考样本,基于包括第一边上的参考样本和第二边上的参考样本中的至少一些的参考样本集,获得用于预测当前块的直流(DC)值,如果第一边的长度和第二边的长度彼此不同,则参考样本集包括从第一边上的参考样本和第二边上的参考样本中排除一些参考样本的2n个参考样本,基于DC值生成当前块的预测块,基于预测块获得当前块的残差信号,并生成包括当前块的残差信号的比特流。
此外,本公开的实施例可以提供一种存储比特流的计算机可读记录介质,并且比特流可以包括关于通过将组成视频的图片划分成分级结构而获得的块当中的内预测的当前块的内预测模式以及当前块的残差信号的信息。该计算机可读记录介质可以包括通过下述步骤获得的比特流:基于当前块周围的预先重构的样本,获得在当前块的第一边上的参考样本和当前块的第二边上的参考样本,基于包括第一边上的参考样本和第二边上的参考样本中的至少一些的参考样本集获得用于预测当前块的直流(DC)值,如果第一边的长度和第二边的长度彼此不同,则参考样本集包括从第一边上的参考样本和第二边上的参考样本排除一些参考样本的2n个参考样本,以及基于DC值来预测当前块。
此外,本公开的实施例可以提供一种包括处理器的视频信号处理设备,并且处理器可以被配置为基于当前块周围的预先重构的样本获得当前块的第一边上的参考样本和第二边上的参考样本,如果第一边的长度和第二边的长度彼此不同,则基于从多个参考样本中排除第一边和第二边中的任意一边上的参考样本的剩余参考样本,获得用于预测当前块的直流(DC)值,并且基于DC值预测当前块。在这种情况下,第一边和第二边可以彼此垂直。
处理器可以基于一边上的参考样本的平均值来获得DC值。
一边可以是第一边和第二边中的较长边。在这种情况下,处理器可以基于第一边和第二边中的较长边上的参考样本来获得DC值。
处理器可以被配置成:将第一边的长度与第二边的长度进行比较,并且如果作为比较的结果第二边的长度大于第一边的长度,则基于第二边上的参考样本的平均值获得DC值。
在第一边上的参考样本的数量和在第二边上的参考样本的数量可以分别是2的n次幂。在第一边上的参考样本的数量和在第二边上的参考样本的数量的总和可能不等于2的n次幂。
本发明的作用
根据本公开的实施例,能够改善用于对视频信号进行编译的效率。另外,根据本公开的实施例,能够增强当前块的内预测中的预测性能。
根据本公开的实施例,能够减少生成当前块的预测块所需的计算复杂度。
附图说明
图1是根据本发明的实施例的视频信号编码装置的示意性框图。
图2是根据本发明的实施例的视频信号解码装置的示意性框图。
图3示出其中在图片中编译树单元被划分为编译单元的实施例。
图4示出用于用信号发送四叉树和多类型树的划分的方法的实施例。
图5和图6更加详细地图示根据本发明的实施例的内预测方法。
图7是图示在当前块的内预测模式是DC模式的情况下预测当前块的方法的实施例的图。
图8是图示根据本公开的实施例的在当前块的高度和宽度彼此不同的情况下获得当前块的DC值的方法的图。
图9、10和11是图示在当前块的高度和宽度彼此不同的情况下配置参考样本集的方法的实施例的图。
图12是图示在当前块的高度和宽度彼此不同的情况下配置参考样本集的方法的另一实施例的图。
图13是图示根据本公开的实施例的基于当前块的宽度与高度之间的比率获得当前块的DC值的方法的图。
图14是图示根据本公开的实施例的在当前块的高度和宽度彼此不同的情况下配置参考样本集的方法的另一实施例的图。
图15和图16是图示用于在当前块的高度和宽度分别为“4”和“16”的情况下获得当前块的DC值的参考样本集的实施例的图。
图17和图18是图示用于在当前块的高度和宽度分别为“4”和“32”的情况下获得当前块的DC值的参考样本集的实施例的图。
图19、20和21是图示用于在当前块的高度和宽度彼此不同的情况下获得当前块的DC值的参考样本集的另一实施例的图。
图22、图23和图24是图示用于在当前块的高度和宽度彼此不同的情况下获得当前块的DC值的参考样本集的另一实施例的图。
图25和图26是示出用于在当前块的高度和宽度分别为“4”和“32”的情况下获得当前块的DC值的参考样本集的实施例的图。
图27、图28和图29是图示根据本公开的实施例的参考样本集的图,该参考样本集包括在当前块的较短的一边上的一些参考样本和在当前块的较长边上的一些参考样本。
图30是图示根据本公开的实施例的将权重应用于每个参考样本集的平均值的方法的流程图。
图31是图示根据本公开的实施例的在当前块的第一边和第二边中的一个的长度不是2的n次幂的情况下获得DC值的方法的图。
图32示出当前单元的亮度块和色度块的实施例。
图33是图示其中亮度块和色度块以不同形式划分的实施例的图。
图34是图示根据本公开的实施例的按区域分类的内预测模式的图。
图35是图示根据本公开的实施例的在当前单元的亮度块的代表性预测模式不是角度模式的情况下的建模组的图。
图36是图示根据本公开的另一实施例的建模组的图。
图37、图38和图39是图示根据本公开的另一实施例的建模组的图。
图40是图示根据本公开的实施例的基于多个关系模型的重构色度块的方法的图。
图41是图示基于多个关系模型来重构色度块的方法的详细实施例的图。
图42是图示在当前块的预测模式是DC模式的情况下参考样本的实施例的图。
图43和图44是图示在当前块是矩形块的情况下用于获得DC值的参考样本的实施例的图。
具体实施方式
考虑到本发明中的功能,本说明书中使用的术语可以是当前广泛使用的通用术语,但是可以根据本领域的技术人员的意图、习俗或新技术的出现而改变。另外,在某些情况下,可能存在申请人任意选择的术语,并且在这种情况下,其含义在本发明的相应描述部分中进行了描述。因此,应基于整个说明书中的术语和内容的实质含义来解释本说明书中使用的术语。
在本说明书中,一些术语可以解释如下。在一些情况下,编译可以解释为编码或解码。在本说明书中,通过执行视频信号的编码(编译)来生成视频信号比特流的装置被称为编码装置或编码器,并且执行视频信号比特流的解码(解码)以重构视频信号的装置被称为解码装置或解码器。另外,在本说明书中,视频信号处理装置被用作包括编码器和解码器两者的概念的术语。信息是包括所有值、参数、系数、元素等的术语。在一些情况下,含义被不同地解释,因此本发明不限于此。“单元”被用作指代图像处理的基本单位或图片的特定位置的含义,并且指代包括亮度分量和色度分量两者的图像区域。另外,“块”指代包括亮度分量和色度分量(即,Cb和Cr)当中的特定分量的图像区域。然而,取决于实施例,诸如“单元”、“块”、“分区(partition)”和“区域”的术语可以互换使用。另外,在本说明书中,单元可以用作包括编译单元、预测单元和变换单元的全部的概念。图片指示场或帧,并且根据实施例,这些术语可以互换使用。
图1是根据本发明的实施例的视频信号编码装置的示意性框图。参考图1,本发明的编码装置100包括变换单元110、量化单元115、逆量化单元120、逆变换单元125、滤波单元130、预测单元150和熵编译单元160。
变换单元110通过对残差信号进行变换来获得变换系数的值,该残差信号是输入的视频信号与由预测单元150生成的预测信号之间的差。例如,可以使用离散余弦变换(DCT)、离散正弦变换(DST)或小波变换。DCT和DST通过将输入图像信号分割成多个块来执行变换。在变换中,编译效率可以根据变换区域中的值的分布和特性而变化。量化单元115对从变换单元110输出的变换系数值的值进行量化。
为了改进编译效率,代替照原样对图像信号进行编译的方法,使用一种方法,其使用通过预测单元150已经编译的区域来预测图片,并通过将在原始图片和预测的图片之间的残差值添加到预测的图片来获得重构图像。为了防止编码器和解码器中的不匹配,当在编码器中执行预测时,应该使用可以在解码器中使用的信息。为此,编码器再次执行重构编码的当前块的处理。逆量化单元120对变换系数的值进行逆量化,并且逆变换单元125使用逆量化的变换系数值来重构残差值。同时,滤波单元130执行滤波操作以改善重构图片的质量并改善编译效率。例如,可以包括去块滤波器、样本自适应偏移(SAO)和自适应环路滤波器。滤波后的图片被输出或存储在解码图片缓冲器(DPB)156中,以用作参考图片。
预测单元150包括单元152和间预测单元154。内预测单元152在当前图片中执行内预测,并且间预测单元154执行间预测以通过使用存储在DPB 156中的参考图片来预测当前图片。内预测单元152根据当前图片中的重构样本执行内预测,并将内编码信息发送到熵编译单元160。内编码信息可以包括内预测模式、最可能模式(MPM)标记和MPM索引中的至少一种。间预测单元154可以包括运动估计单元154a和运动补偿单元154b。运动估计单元154a参考重构的参考图片的特定区域以获得当前区域的运动矢量值。运动估计单元154a将关于参考区域的运动信息集(参考图片索引、运动矢量信息等)发送到熵编译单元160。运动补偿单元154b使用从运动估计单元154a发送的运动矢量值来执行运动补偿。间预测单元154将包括关于参考区域的运动信息集的间编码信息发送到熵编译单元160。
根据另一实施例,预测单元150可以包括块内复制(BC)预测单元(未示出)。BC内预测单元基于当前图片中的重构样本执行BC内预测,并且将BC内编码信息发送到熵编译单元160。BC内预测单元获得当前图片中的当前区域关于特定区域的块矢量值。BC内预测单元可以使用所获得的块矢量值来执行BC内预测。BC内预测单元将BC内编码信息发送到熵编译单元160。BC内编码信息可以包括块矢量信息。
当执行上述图片预测时,变换单元110变换在原始图片和预测图片之间的残差值以获得变换系数值。在这种情况下,可以以图片内的特定块为单位执行变换,并且可以在预设范围内改变特定块的大小。量化单元115对在变换单元110中生成的变换系数值进行量化,并将其发送到熵编译单元160。
熵编译单元160对量化的变换系数、内编码信息和间编码信息进行熵编译以生成视频信号比特流。在熵编译单元160中,可以使用可变长度编译(VLC)方法、算术编译方法等。VLC方法将输入的符号变换成连续的码字,并且码字的长度可以是可变的。例如,频繁出现的符号被表达为短码字,而不太频繁出现的符号被表达为长码字。作为VLC方法,可以使用基于上下文的自适应可变长度编译(CAVLC)方法。算术编译将连续的数据符号变换成单个小数,并且算术编译可以获得表示每个符号所需的最佳小数比特数。作为算术编译,可以使用基于上下文的自适应算术编译(CABAC)。
使用网络抽象层(NAL)单元作为基本单位来封装所生成的比特流。NAL单元包括整数个编译的编译树单元。为了在视频解码器中对比特流进行解码,首先,必须将比特流分离成NAL单元,并且然后必须对每个分离的NAL单元进行解码。同时,可以通过诸如图片参数集(PPS)、序列参数集(SPS)、视频参数集(VPS)等等的高层集合的原始字节序列有效载荷(RBSP)来发送对视频信号比特流进行解码所需的信息。
同时,图1的框图示出根据本发明的实施例的编码装置100,并且分开显示的块在逻辑上区分并示出编码装置100的元件。因此,取决于设备的设计上述编码装置100的元件可以被安装为一个芯片或多个芯片。根据实施例,上述编码装置100的每个元件的操作可以由处理器(未示出)执行。
图2是根据本发明的实施例的视频信号解码装置200的示意性框图。参考图2,本发明的解码装置200包括熵解码单元210、逆量化单元220、逆变换单元225、滤波单元230和预测单元250。
熵解码单元210对视频信号比特流进行熵解码,并提取每个区域的变换系数、内编码信息和间编码信息。逆量化单元220对熵解码的变换系数进行逆量化,并且逆变换单元225使用逆量化的变换系数来重构残差值。视频信号处理装置200通过将在逆变换单元225中获得的残差值与在预测单元250中获得的预测器相加来重构原始像素值。
同时,滤波单元230对图片执行滤波以改善图像质量。这可以包括用于减少块失真的去块滤波器和/或用于去除整个图片的失真的自适应环路滤波器。滤波后的图片被输出或存储在DPB 256中,以用作下一个图片的参考图片。
预测单元250包括内预测单元252和间预测单元254。预测单元250通过使用通过上述熵解码单元210解码的编码类型、每个区域的变换系数和内/间编码信息来生成预测图片。为了重构其中执行解码的当前块,可以使用当前图片或包括当前块的其他图片的解码区域。在重构中,仅将当前图片,即,仅执行内预测或者BC内预测的图片(或图块/切片)称为内图片或I图片(或图块/切片),并且将能够执行所有内预测、间预测以及BC内预测的图片(或图块/切片)称为间图片(或图块/切片)。为了预测间图片(或图块/切片)当中的每个块的样本值,使用最多一个运动矢量和参考图片索引的图片(或者图块/切片)被称为预测图片或P图片(或图块/切片),并且使用最多两个运动矢量和参考图片索引的图片(或图块/切片)称为双向预测图片或B图片(或图块/切片)。换句话说,P图片(或图块/切片)使用最多一个运动信息集来预测每个块,并且B图片(或图块/切片)使用最多两个运动信息集来预测每个块。这里,运动信息集包括一个或多个运动矢量和一个参考图片索引。
内预测单元252使用内编码信息和当前图片中的重构的样本来生成预测块。如上所述,内编码信息可以包括内预测模式、最可能模式(MPM)标记和MPM索引中的至少一种。内预测单元252通过使用位于当前块的左边和/或上边的重构的样本作为参考样本来预测当前块的样本值。在本公开中,重构的样本、参考样本和当前块的样本可以表示像素。而且,样本值可以表示像素值。
根据实施例,参考样本可以是当前块的邻近块中包括的样本。例如,参考样本可以是与当前块的左边界相邻的线上的样本和/或与其上边界相邻的线上的样本。而且,参考样本可以是当前块的邻近块的样本当中的位于距当前块的左边界预定距离内的线上的样本和/或位于距当前块的上边界预定距离内的线上的样本。在这种情况下,当前块的邻近块可以包括左(L)块、上(A)块、左下(BL)块、右上(AR)块或左上(AL)块。
间预测单元254使用参考图片和存储在DPB 256中的间编码信息来生成预测块。间编码信息可以包括用于参考块的当前块的运动信息集(参考图片索引、运动矢量信息等)。间预测可以包括L0预测、L1预测和双向预测。L0预测意指使用L0图片列表中包括的一个参考图片进行预测,并且L1预测意指使用L1图片列表中包括的一个参考图片进行预测。为此,可能需要一个集合的运动信息(例如,运动矢量和参考图片索引)。在双向预测方法中,可以使用多达两个参考区域,并且两个参考区域可以存在于同一参考图片中或可以存在于不同图片中。即,在双向预测方法中,可以使用多达两个集合的运动信息(例如,运动矢量和参考图片索引),并且两个运动矢量可以对应于相同的参考图片索引或不同的参考图片索引。在这种情况下,参考图片可以在时间方面在当前图片之前和之后显示(或输出)。
间预测单元254可以使用运动矢量和参考图片索引来获得当前块的参考块。参考块在与参考图片索引相对应的参考图片中。而且,由运动矢量指定的块的样本值或其内插值可以用作当前块的预测器。对于具有子像素(sub-pel)单位像素精度的运动预测,例如,可以使用用于亮度信号的8抽头内插滤波器和用于色度信号的4抽头内插滤波器。然而,以子像素为单位的用于运动预测的内插滤波器不限于此。以这种方式,间预测单元254执行运动补偿以根据先前使用运动信息重构的运动图片来预测当前单元的纹理。在这样的情况下,间预测单元可以使用运动信息集。
根据附加的实施例,预测单元250可以包括BC内预测单元(未示出)。BC内预测单元基于当前图片中的重构样本执行BC内预测,并且将BC内编码信息发送到熵编译单元160。BC内预测单元获得当前图片中的当前区域关于特定区域的块矢量值。BC内预测单元可以使用所获得的块矢量值来执行BC内预测。BC内预测单元将BC内编码信息发送到熵编译单元160。BC内编码信息可以包括块矢量信息。
通过将从内预测单元252或间预测单元254输出的预测器与从逆变换单元225输出的残差值相加生成重构的视频图片。即,视频信号解码装置200使用由预测单元250生成的预测块和从逆变换单元225获得的残差来重构当前块。
同时,图2的框图示出根据本发明的实施例的解码装置200,并且分开显示的块在逻辑上区分并示出解码装置200的元件。因此,取决于设备的设计上述解码装置200的元件可以被安装为一个芯片或多个芯片。根据实施例,上述解码装置200的每个元件的操作可以由处理器(未示出)执行。
图3图示其中在图片中编译树单元(CTU)被分割成编译单元(CU)的实施例。在视频信号的编译过程中,可以将图片分割成一系列编译树单元(CTU)。编译树单元由亮度样本的NXN块和与其相对应的色度样本的两个块组成。编译树单元可以被分割成多个编译单元。编译树单元可以不被分割,并且可以是叶节点。在这种情况下,编译树单元本身可以是编译单元。编译单元指代在上述视频信号的处理过程中,即,内/间预测、变换、量化和/或熵编译中用于处理图片的基本单元。一个图片中编译单元的大小和形状可能不恒定。编译单元可以具有正方形或矩形形状。矩形编译单元(或矩形块)包括垂直编译单元(或垂直块)和水平编译单元(或水平块)。在本说明书中,垂直块是其高度大于宽度的块,并且水平块是其宽度大于高度的块。此外,在本说明书中,非正方形块可以指代矩形块,但是本发明不限于此。
参考图3,首先将编译树单元分割成四叉树(QT)结构。即,在四叉树结构中具有2NX2N大小的一个节点可以被分割成具有NXN大小的四个节点。在本说明书中,四叉树也可以称为四元树。可以递归地执行四叉树分割,并非所有节点都需要以相同的深度分割。
同时,上述四叉树的叶节点可以进一步被分割成多类型树(MTT)结构。根据本发明的实施例,在多类型树结构中,一个节点可以被分割成水平或垂直划分的二叉或三叉树结构。即,在多类型树结构中,存在四个分割结构,诸如垂直二元分割、水平二元分割、垂直三元分割和水平三元分割。根据本发明的实施例,在每个树结构中,节点的宽度和高度都可以具有2的幂。例如,在二叉树(BT)结构中,2NX2N大小的节点可以通过垂直二元分割被分割成两个NX2N节点,并通过水平二元分割将其分割成两个2NXN节点。另外,在三叉树(TT)结构中,将2NX2N大小的节点通过垂直三元分割被分割成(N/2)X2N、NX2N和(N/2)X2N节点,并通过水平三元分割被分割成2NX(N/2)、2NXN和2NX(N/2)节点。可以递归地执行此多类型树分割。
多类型树的叶节点可以是编译单元。如果未指示用于编译单元的分割或针对最大变换长度该编译单元不大,则无需进一步划分就将编译单元用作预测和变换的单元。另一方面,可以通过诸如PPS、SPS、VPS等的高层集合的RBSP来预定义或发送上述四叉树和多类型树中的以下参数中的至少一个。1)CTU大小:四叉树的根节点大小,2)最小QT大小MinQtSize:允许的最小QT叶节点大小,3)最大BT大小MaxBtSize:允许的最大BT根节点大小,4)最大TT大小MaxTtSize:允许的最大TT根节点大小,5)最大MTT深度MaxMttDepth:从QT的叶节点分割而来的MTT的最大允许深度,6)最小BT大小MinBtSize:允许的最小BT叶节点大小,7)最小TT大小MinTtSize:允许的最小TT叶节点大小。
图4示出用于用信号发送四叉树和多类型树的分割的方法的实施例。可以使用预设标记来用信号发送上述四叉树和多类型树的分割。参考图4,指示是否分割四叉树节点的标记“qt_split_flag”、指示是否分割多类型树节点的标记“mtt_split_flag”、指示多类型树节点的分割方向的标记“mtt_split_vertical_flag”或者指示多类型树节点的分割类型的标记“mtt_split_binary_flag”中的至少一个可以被使用。
根据本发明的实施例,编译树单元是四叉树的根节点,并且可以首先被分割成四叉树结构。在四叉树结构中,为每个节点“QT_node”用信号发送“qt_split_flag”。如果“qt_split_flag”的值为1,则将该节点分割成4个正方形节点,并且如果“qt_split_flag”的值为0,则相应的节点成为四叉树的叶节点“QT_leaf_node”。
每个四叉树叶节点“QT_leaf_node”可以进一步被分割成多类型树结构。在多类型树结构中,为每个节点“MTT_node”用信号发送“mtt_split_flag”。当“mtt_split_flag”的值是1时,相应的节点被分割成多个矩形节点,并且当“mtt_split_flag”的值是0时,相应的节点是多类型树的叶节点“MTT_leaf_node”。当将多类型树节点“MTT_node”分割成多个矩形节点时(即,当“mtt_split_flag”的值是1时),可以附加地用信号发送节点“MTT_node”的“mtt_split_vertical_flag”和“mtt_split_binary_flag”。当“mtt_split_vertical_flag”的值是1时,指示节点“MTT_node”的垂直分割,并且当“mtt_split_vertical_flag”的值是0时,指示节点“MTT_node”的水平分割。另外,当“mtt_split_binary_flag”的值为1时,节点“MTT_node”被分割成2个矩形节点,并且当“mtt_split_binary_flag”的值为0时,节点“MTT_node”被分割成3个矩形节点。
对不再被划分的编译单元(即,编译单元树的叶节点)上执行用于编译的图片预测(运动补偿)。在下文中,用于执行预测的基本单元将被称为“预测单元”或“预测块”。
在下文中,在此使用的术语“单元”可以代替预测单元,该预测单元是用于执行预测的基本单元。然而,本公开不限于此,并且“单元”可以被理解为广泛地涵盖编译单元的概念。
图5和图6更加具体地图示根据本发明的实施例的内预测方法。如上所述,内预测单元通过使用位于当前块的左边和/或上边的重构的样本作为参考样本来预测当前块的样本值。
首先,图5示出在内预测模式中用于当前块的预测的参考样本的实施例。根据实施例,参考样本可以是与当前块的左边界相邻的样本和/或与上边界相邻的样本。如图5中所示,当当前块的大小是WXH并且与当前块相邻的单个参考线的样本被用于内预测时,可以使用位于当前块的左边和上边的最大2W+2H+1个邻近样本来配置参考样本。
根据本发明的又一实施例,可以将多条参考线上的样本用于当前块的内预测。多条参考线可以由位于距当前块的边界预定距离内的n条线组成。在这种情况下,可以用信号发送指示用于当前块的内预测的至少一条参考线的单独的参考线信息。具体地,参考线信息可以包括指示多条参考线中的任何一条的索引。
在本公开中,当前块的特定边上的参考样本可以是在对应边的参考样本当中的落入当前块的高度或宽度的范围内的参考样本。另外,特定边周围的参考样本可以是多条参考线上的任何一条上的样本。例如,当前块的左边上的参考样本可以是在左边的参考样本当中的落入当前块的高度的范围内的参考样本。当前块的左边上的参考样本可以是在左边周围的参考样本当中的落入当前块的宽度范围内的参考样本。另外,在本公开中,特定边上的参考样本可以被称为对应于特定边的参考样本。
另外,如果尚未重构要用作参考样本的样本中的至少一些,则内预测单元可以执行参考样本填充过程以获得参考样本。另外,内预测单元可以执行参考样本滤波过程以便减少内预测中的误差。即,内预测单元可以对当前块周围的样本和/或通过参考样本填充过程获得的参考样本执行滤波,从而获得滤波后的参考样本。内预测单元使用未滤波的参考样本或滤波后的参考样本来预测当前块的样本。
接下来,图6示出用于内预测的预测模式的实施例。对于内预测,可以用信号发送指示内预测方向的内预测模式信息。内预测模式信息指示被包括在内预测模式集中的多个内预测模式中的一个。当当前块是内预测块时,解码器从比特流接收当前块的内预测模式信息。解码器的内预测单元基于提取的内预测模式信息对当前块执行内预测。
根据本发明的实施例,内预测模式集可以包括在内预测中使用的所有内预测模式(例如,总共67个内预测模式)。更具体地,内预测模式集可以包括平面模式、直流(DC)模式以及多个(例如,65个)角度模式(即,方向模式)。在一些实施例中,内预测模式集可以由所有内预测模式中的一些构成。可以通过预设索引(即,内预测模式索引)来指示每个内预测模式。例如,如图6中所示,内预测模式索引0指示平面模式,并且内预测模式索引1指示DC模式。此外,内预测模式索引2至66可以分别指示不同的角度模式。在这种情况下,内预测模式索引2指示水平对角线(HDIA)模式,内预测模式索引18指示水平(水平,HOR)模式,内预测模式索引34指示对角线(DIA)模式,内预测模式索引50指示垂直(VER)模式,并且内预测模式索引66指示垂直对角线(VDIA)模式。
图7是图示在当前块的内预测模式是DC模式的情况下预测当前块的方法的实施例的图。根据实施例,解码器可以获得用于预测当前块的内预测模式信息。例如,关于当前块的内预测模式信息可以指示内预测模式集合中包括的内预测模式中的任一种。用于当前块的预测的内预测模式信息可以指示DC模式。在这种情况下,解码器可以基于DC模式来重构当前块。
具体地,编码器和解码器可以基于直流(DC)值来获得当前块的预测块。可以基于当前块的参考样本来获得DC值。具体地,可以基于与当前块的上边和左边相对应的多个参考样本来获得当前块的DC值。可以基于与当前块的上边和左边相对应的多个参考样本的值的平均值来获得当前块的DC值。如果当前块的预测模式是DC模式,则可以基于单个DC值获得预测块中的所有预测样本值。解码器可以基于所获得的预测块来重构当前块。
此外,编码器可以基于预测块获得当前块的残差信号。编码器可以对当前块的残差信号进行编码,从而生成包括残差信号的比特流。另外,编码器可以将生成的比特流发送到解码器。解码器可以从编码器接收包括当前块的残差信号的比特流。解码器可以基于所获得的预测块和所接收的残差信号来重构当前块。根据附加的实施例,可以对当前块的预测块执行诸如位置依赖内预测组合(PDPC)的边界滤波。在这种情况下,可以基于编码器滤波的预测块来获得残差信号。另外,解码器可以基于滤波后的预测块来重构当前块。
在下文中,将详细描述根据本公开的实施例的获得当前块的DC值的方法。在本公开中,当前块的DC值表示用于预测当前块的DC值。参考图7,可以基于与当前块701的上边和左边相对应的多个参考样本702来获得用于当前块701的预测的DC值。例如,可以基于当前块701的多个参考样本702的平均值获得DC值。如图7中所示,如果当前块701具有4X4的大小,则可以使用对应于上边的四个参考样本U0、U1、U2和U3以及对应于左边的四个参考样本L0、L1、L2和L3来获得DC值。例如,当前块701的DC值可以是多个参考样本U0、U1、U2、U3、L0、L1、L2和L3的样本值的平均值。
具体地,编码器和解码器可以计算与当前块的上边和左边相对应的参考样本U0、U1、U2、U3、L0、L1、L2和L3的平均值,从而获得当前块701的DC值。在这种情况下,可以执行除法运算以获得样本值的平均值。然而,除法运算可能是在实现硬件或软件时增加处理视频信号时的复杂度和计算量的因素。
同时,如果在除法运算中除数为2的n次幂,则移位运算符可以替换除法运算符。即,如果除数是2的n次幂,则编码器和解码器可以使用移位运算符执行除法运算。因此,如果要计算以获得平均值的参考样本值的数量是2的n次幂,则编码器和解码器可以使用移位运算符获得参考样本值的平均值。在本公开中,移位运算或运算符可以是逐位算术移位运算或运算符。
例如,编码器和解码器可以对与当前块的上边和左边相对应的参考样本的样本值的总和执行移位运算。编码器和解码器可以将样本值的总和移位了移位参数。可以基于当前块的宽度或高度中至少之一的长度来确定移位参数。例如,移位参数可以是当前块的宽度和高度之和。当前块的宽度和高度的总和可以是用于获得DC值的参考样本的数量。因此,编码器和解码器可以在不执行除法运算的情况下获得当前块的DC值。这可以被表达为下面的等式1。
[等式1]
(SUM(W+H)+偏移)>>log2(W+H)
在等式1中,W表示当前块的宽度,而H表示当前块的高度。另外,SUM(W+H)表示与当前块的上边相对应的W个上参考采样和与其左边相对应的H个左参考采样的值的总和。“>>”表示移位运算符。具体地,“>>”表示右移运算符。右移运算符将输入到运算符的因子二值化,并且通过移位参数将二值化的因子右移。
在等式1中,偏移可以是用于舍入平均值的小数部分的参数。根据实施例,可以基于当前块的宽度或高度中的至少一个的长度来确定偏移。具体地,偏移可以是通过将当前块的宽度和高度之和除以2而获得的值。即,偏移可以是通过将用于获得DC值的参考样本的数量除以2而获得的值。例如,偏移可以表达为2^(log2(W+H)-1)。
如图7中所示,如果当前块的高度和宽度相同,则用于获得当前块的DC值的参考样本的数量可以是2的n次幂。如上所述,编码器和解码器可以使用移位运算符来获得2n个参考样本的平均值。编码器和解码器可以仅使用加法运算和移位运算来获得当前块的DC值。因此,与使用除法运算获得DC值的情况相比,根据本公开的实施例的编码器和解码器可以被实现为低复杂度的硬件或软件。
同时,取决于从编译树单元分割当前块的方法,当前块的形状可以不是正方形。如上所述,从编译树单元分割的预测单元的大小和形状可以不是恒定的。例如,当前块可以是矩形块,其中,当前块的高度和宽度彼此不同。如果当前块是矩形块,则与当前块的上边和左边相对应的参考样本的数量可以不是2的n次幂。即,与当前块的上边的长度相对应的样本的数量和与其左边的长度相对应的样本的数量的总和可以不是2的n次幂。
例如,当前块可以是矩形块,其高度和宽度分别是“4”和“8”。在这种情况下,对应于当前块的上边和左边的参考样本的数量是4+8(即,12)。如果用于获得DC值的参考样本的数量不是2的n次幂,则编码器和解码器可能难以通过与图7中相同的方法来获得DC值。即,如果当前块的高度和宽度不同,则编码器和解码器可能执行除法运算。然而,如果处理过程包括除法运算,则由于复杂度的增加而可能减少计算速度。
因此,在当前块的高度和宽度彼此不同的情况下,编码器和解码器可以使用与在当前块的高度和宽度相同的情况不同的方法来获得当前块的DC值。例如,根据本公开的实施例的编码器和解码器可以基于包括与当前块的左边和上边相对应的一些参考采样的参考采样集来获得当前块的DC值。在这种情况下,包括在参考样本集中的参考样本的数量可以是2的n次幂。另外,参考样本集可以包括位于预定位置处的参考样本。参考样本集可以包括满足预定条件的参考样本。
图8是图示根据本公开的实施例的在当前块的高度和宽度彼此不同的情况下获得当前块的DC值的方法的图。根据实施例,编码器和解码器可以比较当前块的第一边的长度和第二边的长度。在本公开中,第一边可以是当前块的上边和左边中的任何一个。另外,第二边可以是当前块的上边和左边中的另一个。如果作为比较的结果第一边的长度和第二边的长度相同,则编码器和解码器可以通过以上参考图7描述的方法来获得当前块的DC值。
另一方面,如果作为比较的结果第一边的长度和第二边的长度彼此不同,则编码器和解码器可以配置包括所有参考样本中的一些的参考样本集。编码器和解码器可以配置包括2n个参考样本的参考样本集,其包括当前块的第一边上的参考样本和第二边上的参考样本中的一些。编码器和解码器可以获得包括2n个参考样本的参考样本集,其从第一边的参考样本和第二边的参考样本中排除一些参考样本。另外,编码器和解码器可以基于参考样本集获得当前块的DC值。编码器和解码器可以基于所获得的DC值来预测当前块。
在图8中,当前块801可以是高度N和宽度M彼此不同的矩形块。在这种情况下,与当前块801的第一边和第二边相对应的DC参考样本的数量可以是M+N。在本公开中,术语“DC参考样本”可以用于指示与当前块的上边和左边相对应的所有多个参考样本。可以基于参考样本集来获得当前块801的DC值,该参考样本集包括作为(M+N)个DC参考样本中的一些的(M'+N')个参考样本。在这种情况下,(M'+N')可以被表达为2^k(其中,k是整数)。另外,(M'+N')可以小于(M+N)。例如,参考样本集可以包括从DC参考样本中排除较短边上的至少一些参考样本的剩余参考样本。另外,参考样本集可以包括从DC参考样本中排除较长边上的至少一些参考样本的剩余参考样本,。在下文中,将详细描述在当前块的高度和宽度彼此不同的情况下获得当前块的DC值的方法。
根据本公开的实施例,可以基于至少一个参考样本集来获得当前块的DC值。根据实施例,编码器和解码器可以基于一个参考样本集获得当前块的DC值。例如,可以基于包括在参考样本集中的参考样本的值的平均值来获得当前块801的DC值。等式2示出基于参考样本集获得DC值的方法。参考等式2,编码器和解码器可以在不执行除法运算的情况下获得当前块的DC值。
[等式2]
(SUM(M’+N’)+偏移)>>log2(M’+N’)
在等式2中,SUM(M'+N')表示在与当前块的上边和左边相对应的参考样本的值之中的包括在参考样本集中的参考样本的值的总和。另外,M'表示在与上边相对应的参考样本当中的包括在参考样本集中的参考样本的数量。N'表示在对应于左边的参考样本中的包括在参考样本集中的参考样本的数量。偏移可以是用于舍入平均值的小数部分的参数。例如,偏移可以是“(M'+N')>>1”。
根据附加的实施例,编码器和解码器可以基于多个参考样本集获得当前块的DC值。将参考图14对此进行详细描述。在下文中,将描述在当前块的高度和宽度彼此不同的情况下配置用于获得当前块的DC值的参考样本集的各种方法。
图9、10和11是图示在当前块的高度和宽度彼此不同的情况下配置参考样本集的方法的实施例的图。参考图9,当前块901是矩形块,其高度和宽度分别是“4”和“8”。在这种情况下,与当前块901的上边和左边相对应的参考样本的总数是4+8(即,12)。如上所述,如果用于获得DC值的参考样本的数量不是2的n次幂,则难以将除法运算符替换为移位运算符。在基于当前块901的所有12个参考样本L0、L1、L2、L3、0、1、2、3、4、5、6和7的平均值获得DC值的情况下,除法运算必须由编码器和解码器执行。
如上所述,可以基于与当前块的上边和左边相对应的一些参考样本来获得当前块901的DC值。在这种情况下,编码器和解码器可以在不执行除法运算的情况下获得当前块的DC值。例如,可以基于包括12个参考样本L0、L1、L2、L3、0、1、2、3、4、5、6以及7中的一些的参考样本集DC0来获得当前块901的DC值。编码器和解码器可以根据在编码器和解码器之间预定义的规则来配置参考样本集。根据实施例,参考样本集DC0可以包括,从与当前块901的上边和左边相对应的参考样本中排除预定数量的样本的剩余参考样本。例如,编码器和解码器可以配置包括剩余参考样本的参考样本集。在这种情况下,剩余参考样本的数量可以是2的n次幂。
根据本公开的实施例,预定数量可以是与特定边的长度相对应的样本的数量。当前块的DC参考样本的总数可以是当前块的宽度和高度的总和。例如,如果当前块的宽度是M并且其高度是N,则参考样本集可以包括M或N个参考样本。如果从所有DC参考样本中排除与特定边的长度相对应的参考样本的数量,则参考样本集中包括的参考样本的数量可以变为2的n次幂。根据实施例,特定边可以是当前块的第一边和第二边中的较短的一边。在这种情况下,参考样本集可以从所有DC参考样本中排除与较短边的长度相对应的多个参考样本的剩余参考样本。即,包括在参考样本集中的参考样本的数量可以是与当前块的第一边和第二边中的较长的一边的长度相对应的样本的数量。如果当前块的宽度大于其高度,则特定边可以是左边。另外,如果当前块的宽度小于其高度,则特定边可以是上边。
根据本公开的实施例,参考样本集可以包括从当前块的DC参考样本中排除与在短边上的参考样本一样多的参考样本的剩余参考样本。在这种情况下,上面参考图8描述的等式2可以被表达为(SUM(剩余参考样本的数量)+(长边的长度>>1))>>log2(长边的长度)。在此,“较长边的长度”可以是当前块的第一边和第二边中的较长边的长度。如以上等式所示,编码器和解码器可基于当前块的第一边和第二边中的较长的长度来获得当前块的DC值。
在图9中,参考样本集DC0可以包括从与当前块901的左边和上边相对应的参考样本L1、L2、L3、L4、0、1、2、3、4、5、6和7中排除与较短边上的样本数量相对应的参考样本的剩余参考样本L1、L2、L3、L4、1、3、5和7。另外,可以基于参考样本集DC0中包括的参考样本值的平均值获得当前块901的DC值。在这种情况下,稍后将描述确定参考样本集中包括的参考样本的位置或参考样本集中不包括的DC参考样本的位置的方法。在本公开中,参考样本的位置可以是相对于当前块的左上样本的位置的相对位置。
根据实施例,参考样本集可以包括在当前块的较长边上的一些参考样本和在当前块的较短边上的所有参考样本。例如,编码器和解码器可以选择当前块的较长边上的一些参考样本。另外,编码器和解码器可以配置参考样本集,该参考样本集包括与其相邻的在较长边上的一些选择的参考样本和在较短边上的一些参考样本。
根据具体实施例,可以排除较长边上的参考样本0、1、2、3、4、5、6和7中的一些。即,参考样本集可以仅包括在较长边上的参考样本0、1、2、3、4、5、6和7中的一些。参考样本集可以包括从较长边的参考样本中排除特定位置的参考样本的剩余参考样本。
例如,可以基于当前块的短边与长边的比率来确定特定位置。具体地,可以基于当前块的较短边与较长边的比率来确定DC参考样本中不包括在参考样本集中的参考样本之间的间隔。在图9的实施例中,短边与长边的比率可以是“8/4”(即,“2”)。在这种情况下,参考样本集可以包括参考样本{1,3,5,7}。可替选地,参考样本集可以包括参考样本{0,2,4,6}。
即,参考样本集可以包括排除与“((参考样本索引%(短边与长边的比率))==(预定余数)”)相对应的参考样本的剩余参考样本。“%”表示模运算。在此,如果当前块901的上边比其左边长,则参考样本索引可以指示参考样本的x坐标。另外,如果当前块901的左边长于当前块901的上边,则参考样本索引可以指示参考样本的y坐标。另外,“预定余数”可以是根据“短边与长边的比率”的任何可能的余数,这是取模运算的余数。可以根据“预定余数”来确定DC参考样本之中未包括在参考样本集中的参考样本的特定位置。
在图10中所示的实施例中,当前块1001的短边与长边的比率可以是“16/4”(即,“4”)。在图10中,参考样本集DC0可以包括参考样本{0,2,3,4,6,7,8,10,11,12,14,15}。图10示出在预定余数为“1”的情况下配置的参考样本集。参考样本集DC0可以包括从对应于当前块的上边的参考样本中排除从左起第二位置处的参考样本开始等间隔排列的参考样本的剩余参考样本。然而,本公开不限于此。如果预定余数的值不是“1”,则排除的参考样本的位置可能会不同。
在图11中所示的实施例中,当前块1101的短边与长边的比率可以是“32/4”(即,“8”)。在这种情况下,参考样本集DC0可以包括从DC参考样本中排除参考样本{0,8,16,24}的剩余参考样本。另外,参考图9和图10的实施例可以以相同或相应的方式应用于图11的实施例。
根据另一特定实施例,参考样本集可以包括从DC参考样本中排除预定数量的连续参考样本的剩余参考样本。图12是图示在当前块1201的高度和宽度彼此不同的情况下配置参考样本集的方法的另一实施例的图。参考图12,参考样本集DC0可以包括排除DC参考样本中的参考样本{0、1、14、15}的剩余参考样本。
在图9至图12中,尽管图示参考样本集包括在当前块的较短边上的所有参考样本和在其较长边上的一些参考样本,但是本公开不限于此。例如,参考样本集可以包括从所有DC参考样本中排除当前块的较短边上的一些参考样本的剩余参考样本。
根据特定实施例,参考样本集可以包括从所有DC参考样本中排除当前块的较短边上的参考样本的剩余参考样本。当前块的较短边可以是当前块的第一边和第二边中的较短的一边。也就是说,参考样本集可以包括在当前块的第一边和第二边中的较长一边上的参考样本。可以基于包括在第一边和第二边中的较长边上的参考样本的参考样本集来获得当前块的DC值。另外,可以基于第一边和第二边中较长的一边的长度来获得当前块的DC值。
例如,编码器和解码器可以将当前块的第一边的长度与第二边的长度进行比较。如果作为比较的结果第一边的长度大于第二边的长度,则编码器和解码器可以获得包括第一边上的参考样本的参考样本集。另外,编码器和解码器可以基于第一边上的参考样本的值的平均值来获得当前块的DC值。另一方面,如果第二边的长度大于第一边的长度,则编码器和解码器可以获得包括第二边上的参考样本的参考样本集。在这种情况下,编码器和解码器可以基于包括第二边上的参考样本的参考样本集来获得当前块的DC值。
根据附加的实施例,即使短边与长边的比率大于或等于参考比,也可以配置参考样本集。图13是图示根据本公开的实施例的基于当前块的宽度与高度之间的比率来确定当前块的DC值的方法的图。参考图13,仅当短边与长边的比率为“4”或更大时,才可以基于参考样本集获得当前块的DC值。
例如,编码器和解码器可以基于当前块的高度和宽度来获得长边与短边的比率。如果当前块的较短边与较长边的比率大于或等于参考比,则编码器和解码器可以配置参考样本集。另外,编码器和解码器可以基于配置的参考样本集获得当前块的DC值。另一方面,如果当前块的较短边与较长边的比率小于参考比率,则编码器和解码器可以以不同的方法获得当前块的DC值。例如,编码器和解码器可以基于取决于当前块的比率的权重来获得当前块的DC值。稍后将参考图30描述在当前块的高度和宽度彼此不同的情况下编码器和解码器基于权重取决于当前块的比率获得当前块的DC值的方法。
图14是图示根据本公开的实施例的在当前块的高度和宽度彼此不同的情况下配置参考样本集的方法的另一实施例的图。根据实施例,构成参考样本集的较长边上的参考样本的数量和较短边上的参考样本的数量可以相同。编码器和解码器可以使较长边上的参考样本的数量与较短边上的参考样本的数量匹配,这些参考样本被包括在参考样本集中,使得参考样本集中包括的参考样本的数量变为2的n的幂。
在图14中,当前块1401的短边的长度可以是“4”,而其长边的长度可以是“8”。在这种情况下,参考样本集可以包括在较长边上的参考样本0、1、2、3、4、5、6和7中的四个特定参考样本。根据特定实施例,参考样本集可以包括左部的一些参考样本0、1、2和3,从较长边上的参考样本0、1、2、3、4、5、6以及7中排除了右部的一些参考样本4、5、6和7。根据另一个实施例,参考样本集可以包括右部的一些参考样本4、5、6和7,从较长边上的参考样本0、1、2、3、4、5、6以及7中排除了左部处的一些参考样本0、1、2和3。然而,本公开不限于此。例如,参考样本集可以包括在当前块的较长边上的参考样本中的相对于最左边的参考样本的奇数编号的参考样本0、2、4和6。可替选地,参考样本集可以包括在当前块的较长边上的参考样本中相对于最左边的参考样本的偶数编号参考样本1、3、5和7。
根据实施例,可以基于第一参考样本集DC0或第二参考样本集DC1中的一个来获得当前块1401的DC值。第一参考样本集DC0可以包括{L0,L1,L2,L3,0,1,2,3}。另外,第二参考样本集DC1可以包括{L0,L1,L2,L3,4,5,6,7}。即,较短边的参考样本L0、L1、L2和L3可以被包括在第一参考样本集DC0和第二参考样本集DC1中。
例如,可以基于包括在第一参考样本集DC0中的参考样本的值的平均值来获得当前块1401的DC值。可替选地,可以基于第二参考样本集DC1中包括的参考样本的值的平均值来获得当前块1401的DC值。
同时,根据本公开的实施例,还可以基于多个参考样本集获得当前块的DC值。例如,可以基于与当前块的上边和左边相对应的参考样本来配置多个参考样本集。在这种情况下,包括在多个参考样本集中的每个参考样本集中的参考样本的数量可以是2的n次幂。在这种情况下,可以基于多个参考样本集中的两个或更多个来获得当前块的DC值。编码器和解码器可以从多个参考样本集中确定两个或更多个参考样本集。另外,编码器和解码器可以针对每个确定的参考样本集获得包括在参考样本集中的参考样本的样本平均值。另外,编码器和解码器可以基于相应参考样本集的平均值之间的最终平均值来获得当前块的DC值。
根据特定实施例,可以基于第一参考样本集DC0和第二参考样本集DC1获得当前块1401的DC值。具体地,编码器和解码器可以获得包括在第一参考样本集DC0中的所有参考样本的值的第一平均值。另外,编码器和解码器可以获得第二参考样本集DC1中包括的所有参考样本的值的第二平均值。接下来,编码器和解码器可以基于第一平均值和第二平均值来获得当前块1401的DC值。可以基于第一平均值和第二平均值之间的最终平均值来获得当前块1401的DC值。等式3示出其中基于多个参考样本集获得当前块的DC值的实施例。
[等式3]
(Average_DC0+Average_DC1+偏移)>>log2(W/H)
在等式3中,Average_DC0和Average_DC1分别表示第一平均值和第二平均值。另外,偏移可以是用于舍入平均值的小数部分的参数。在等式3中,W表示当前块的较长边的长度,并且H表示当前块的较短边的长度。
图15和图16是图示用于在当前块的高度和宽度分别为“4”和“16”的情况下获得当前块的DC值的参考样本集的实施例的图。参考图15,当前块1501是矩形块,其高度和宽度分别为“4”和“16”。在这种情况下,可以基于第一参考样本集DC0、第二参考样本集DC1、第三参考样本集DC2和第四参考样本集DC3中的至少一个来获得当前块1501的DC值。第一参考样本集DC0可以包括{L0,L1,L2,L3,0,1,2,3}。第二参考样本集DC1可以包括{L0,L1,L2,L3,4,5,6,7}。第三参考样本集DC0可以包括{L0,L1,L2,L3,8,9,10,11}。另外,第四参考样本集DC1可以包括{L0,L1,L2,L3,12,13,14,15}。
[等式4]
(Average_DC0+Average_DC1+Average_DC2+Average_DC3+偏移)>>log2(W/H)
在编码器和解码器基于多个参考样本集获得当前块的DC值的情况下,可以如等式4所示执行操作。在等式4中,Average_DC0表示第一参考样本集DC0中包括的参考样本的值的第一平均值。Average_DC1表示第二参考样本集DC1中包括的参考样本的值的第二平均值。Average_DC2表示包括在第三参考样本集DC2中的参考样本的值的第三平均值。Average_DC3表示第四参考样本集DC3中包括的参考样本的值的第四平均值。偏移可以是用于舍入平均值的小数部分的参数。在等式4中,W表示长边的长度,而H表示短边的长度。
根据附加的实施例,第五参考样本集DC4可以被配置为包括排除构成第一参考样本集DC0的参考样本的剩余参考样本。参考图16,可以基于第一参考样本集DC0和第五参考样本集DC4获得当前块1601的DC值。在这种情况下,如参考图14和图15所描述的,可以基于包括在第一参考样本集DC0中的参考样本的值的第一平均值和包括在第五参考样本集DC4中的参考样本的值的第五平均值来获得当前块1601的DC值。尽管为了便于说明已经以示例的方式描述了第一参考样本集DC0,但是本公开不限于此。例如,参考样本集可以被配置为包括排除构成图15中的第二参考样本集DC1的参考样本的参考样本。
图17和图18是图示用于在当前块的高度和宽度分别为“4”和“32”的情况下获得当前块的DC值的参考样本集的实施例的图。参考图17,当前块1701是矩形块,其高度和宽度分别为“4”和“32”。在这种情况下,可以基于第一参考样本集DC0、第二参考样本集DC1、第三参考样本集DC2、第四参考样本集DC3、第五参考样本集DC4、第六参考样本集DC5、第七参考样本集DC6和第八参考样本集DC7中的至少一个来获得当前块1701的DC值。
根据附加的实施例,第九参考样本集DC8可以被配置为包括从当前块1801的较长边上的参考样本中排除第一参考样本集DC0中包括的参考样本的剩余参考样本。参考图18,第九参考样本集DC8可以进一步包括在当前块1701的较短边上的参考样本。在这样的情况下,如参考图14所描述的,可以基于包括在第一参考样本集DC0中的参考样本的值的第一平均值和包括在第九参考样本集DC8中的参考样本的值的第九平均值来获得当前块1801的DC值。
同时,根据本公开的实施例,参考样本集可以包括与当前块的第一边和第二边之一相对应的参考样本。即,参考样本集可以不包括与当前块的第一边和第二边中的任一个相对应的参考样本。在这种情况下,包括在参考样本集中的参考样本的数量可以是2的n次幂。例如,参考样本集可以包括排除当前块的特定边上的参考样本的剩余边上的参考样本。特定边可以是当前块的第一边和第二边之一。
根据实施例,特定边可以是当前块的第一边和第二边中的较短边。在这种情况下,参考样本集可以包括对应于第一边和第二边中的较长变的参考样本。例如,如果当前块的宽度大于其高度,则特定边可以是左边。另外,如果当前块的宽度小于其高度,则特定边可以是上边。
根据特定实施例,编码器和解码器可以将当前块的第一边的长度与第二边的长度进行比较。如果作为比较的结果当前块的第一边比其第二边长,则编码器和解码器可以获得包括第一边上的参考样本的参考样本集。另外,编码器和解码器可以基于包括在第一边上的参考样本的参考样本集来获得当前块的DC值。另一方面,如果第二边的长度大于第一边的长度,则编码器和解码器可以获得包括第二边上的参考样本的参考样本集。在这种情况下,编码器和解码器可以基于包括第二边上的参考样本的参考样本集来获得当前块的DC值。
图19、20和21是图示用于在当前块的高度和宽度彼此不同的情况下获得当前块的DC值的参考样本集的另一实施例的图。参考图19,当前块1901是矩形块,其高度和宽度分别为“4”和“8”。编码器和解码器可以配置第一参考样本集DC0,该第一参考样本集DC0包括在较短边上的参考样本。另外,编码器和解码器可以配置包括在当前块1901的较长边上的至少一些参考样本的参考样本集。
在图19中,第二参考样本集DC1、第三参考样本集DC2和第四参考样本集DC3中的每一个包括在当前块1901的较长边上的至少一些参考样本。在图19中,第二参考样本集DC1、第三参考样本集DC2和第四参考样本集DC3中的每一个包括四个参考样本。然而,本公开不限于此。例如,基于当前块的较长边而包括在参考样本集中的参考样本的数目可以等于或小于较长边的长度,并且可以是2的n次幂。即,参考样本集可以包括2或8个参考样本。根据实施例,编码器和解码器可以基于第一参考样本集DC0、第二参考样本集DC1、第三参考样本集DC2和第四参考样本集DC3中的任何一个来获得当前块的DC值。
同时,在用于获得DC值的参考样本集的数量不等于2的n次幂的情况下,针对从相应参考样本集的平均值中获得最终平均值的过程可能进一步需要除法运算。如上所述,除法运算会增加编码器和解码器的复杂度和计算量。因此,在基于多个参考样本集获得当前块的DC值的情况下,参考样本集的数量可以是2的n次幂。
根据实施例,可以基于一个短边参考样本集和预定数量的长边参考样本集来获得当前块的DC值。在本公开中,短边参考样本集可以表示包括当前块的较短边上的至少一些参考样本的参考样本集。另外,长边参考样本集可以表示包括当前块的较长边上的参考样本集中的至少一些的参考样本集。可以配置长边参考样本集的数量,使得用于获得当前块的DC值的参考样本集的总数是2的n次幂。例如,长边参考样本集的数量可以是((2^n)-1)。在此,“n”可以是整数。
在图19中,第一参考样本集DC0可以被配置为仅包括当前块1901的较短边上的参考样本。另外,三个长边参考样本集可以被配置为包括当前块1901的较长边上的参考样本中的一些。例如,编码器和解码器可以配置第二参考样本集DC1、第三参考样本集DC2和第四参考样本集DC3。在这种情况下,构成第二参考样本集DC1、第三参考样本集DC2和第四参考样本集DC3中的任意两个的一些参考样本可以是重复的。另外,在多个参考样本集之间,参考样本集中包括的参考样本的数量可以不同。例如,DC0可以具有4个参考样本,DC1可以具有8个参考样本,DC2可以具有4个参考样本,而DC3可以具有4个参考样本。
接下来,编码器和解码器可以获得第一参考样本集DC0、第二参考样本集DC1、第三参考样本集DC2和第四参考样本集DC3中相应的平均值。另外,编码器和解码器可以通过在上面参考图8描述的方法基于相应参考样本集的平均值的最终平均值来获得当前块的DC值。上述方法可以以相同或相应的方式应用于图20和图21中的实施例。
参考图20,当前块2001是矩形块,其高度和宽度分别为“4”和“16”。在这种情况下,可以基于一个短边参考样本集(即,第一参考样本集DC0)和三个长边参考样本集(即,第二参考样本集DC1、第三参考样本集DC2和第四参考样本集DC3)的至少一个来获得当前块2001的DC值。
参考图21,当前块2101是矩形块,其高度和宽度分别为“4”和“32”。在这种情况下,可以基于一个短边参考样本集,即,第一参考样本集DC0,和三个长边参考样本集(即,第二参考样本集DC1、第三参考样本集DC2和第四参考样本集DC3)中的至少一个来获得当前块2101的DC值。
根据本公开的实施例,参考样本集可以包括从当前块的较短边和较长边上的总参考样本中排除与较短边的样本的数量相对应的参考样本的剩余参考样本。图22、23和24是图示用于在当前块的高度和宽度分别为“4”和“16”的情况下获得当前块的DC值的参考样本集的另一实施例的图。
在图22中,当前块2201是矩形块,其高度和宽度分别为“4”和“16”。根据实施例,编码器和解码器可以配置包括(16+4-4)个(即,16个)参考样本的参考样本集。例如,编码器和解码器可以配置第一参考样本集DC0,该第一参考样本集DC0包括在当前块的较短边上的参考样本L0、L1、L2和L3以及当前块的较长边上的一些参考样本0、1、2、3、4、5、6、7、8、9、10和11。编码器和解码器可以配置第二参考样本集DC1,该第二参考样本集DC1包括在当前块的较短边上的参考样本L0、L1、L2和L3以及当前块2201的较短边上的一些参考样本4、5、6、7、8、9、10、11、12、13、14和15。然而,本公开不限于此。
例如,参考样本集可以仅包括当前块的较长边上的参考样本0、1、2、3、4、5、6、7、8、9、10、11、12、13、14和15。参考样本集可能不包括当前块较短边的参考样本L0、L1、L2和L3。根据另一个实施例,编码器和解码器可以基于参考样本的样本值来配置参考样本集。例如,参考样本集可以不包括在与当前块的上边和左边相对应的参考样本当中的具有最大样本值的参考样本。另外,参考样本集可以不包括在与当前块的上边和左边相对应的参考样本当中的具有最小样本值的参考样本。
根据附加实施例,第三参考样本集DC2可以被配置为包括与当前块的上边和左边相对应的样本集当中的除了第一参考样本集DC0中包括的参考样本以外的参考样本。参考图23,第一参考样本集DC0可以被配置为包括从与当前块2301的较长边和较短边相对应的参考样本中排除与较长边相对应的一些参考样本的剩余参考样本。在这种情况下,第三参考样本集DC2可以被配置为包括排除的参考样本12、13、14和15。
另外,参考图24,第三参考样本集“DC2”可以进一步包括在较短边上的参考样本。另外,可以基于第一参考样本集DC0和第三参考样本集DC2获得当前块2401的DC值。在这种情况下,如以上参考图14和图15所述,可以基于包括在第一参考样本集DC0中的参考样本的值的第一平均值和包括在第三参考样本集DC2中的参考样本的值的第三平均值来获得当前块2401的DC值。
图25和图26是图示用于在当前块的高度和宽度分别为“4”和“32”的情况下获得当前块的DC值的参考样本集的实施例的图。在图25中,当前块2501是矩形块,其高度和宽度分别是“4”和“32”。参考图22描述的实施例可以应用于图25和图26中的实施例。例如,编码器和解码器可以配置包括(32+4-4)(即,32)个参考样本的参考样本集。具体地,编码器和解码器可以获得第一参考样本集,第一参考样本集包括从与当前块的较长边和较短边相对应的所有参考样本中排除较长边上的一些参考样本28、29、30、31的剩余参考样本。
根据附加的实施例,参考图26,第三参考样本集DC2可以被配置为包括除了第一参考样本集DC0中包括的参考样本之外的参考样本0、1、2和3。另外,可以基于第一参考样本集DC0和第二参考样本集DC1获得当前块2601的DC值。
根据本公开的实施例,可以基于参考样本集获得当前块的DC值,该参考样本集包括在当前块的较短边上的一些参考样本和在当前块的较短边上的一些参考样本。编码器和解码器可以分别确定包括在参考样本集中的短边参考样本的数量和长边参考样本的数量。编码器和解码器可以确定第一数量的短边参考样本和第二数量的长边参考样本,使得包括在参考样本集中的短边参考样本的数量和长边参考样本的数量之和是2的n次幂。编码器和解码器可以基于所确定的第一和第二数量来配置包括2n个参考样本的参考样本集。
图27、28和29是图示根据本公开的实施例的参考样本集的图,该参考样本集包括在当前块的较短边上的一些参考样本和在当前块的较长边上的一些参考样本。在图27中,当前块2701是矩形块,其高度和宽度分别为“4”和“8”。根据实施例,参考样本集可以包括两个短边参考样本和六个长边参考样本。例如,第一参考样本集DC0可以被配置为包括在短边参考样本中的定位在上部处的两个参考样本L0和L1,以及从长边参考样本的左端开始按顺序排列的六个参考样本0、1、2、3、4和5。另外,第二参考样本集DC1可以被配置为包括在短边参考样本中的被定位在下部处的两个参考样本L2和L3,以及从长边参考样本的右端开始按顺序排列的六个参考样本2、3、4、5、6和7。
在图28中,当前块2801是矩形块,其高度和宽度分别是“4”和“8”。根据实施例,参考样本集可以包括一个短边参考样本和三个长边参考样本。例如,第一参考样本集DC0可以被配置为包括短边参考样本中的最上面的参考样本L0和从长边参考样本的左端开始按顺序排列的三个参考样本0、1,和2。另外,第二参考样本集DC1可以被配置为包括从短边参考样本的顶部起被定位在第二地方处的参考样本L1和长边参考样本的三个参考样本2、3和4。
在图29中,当前块2901是矩形块,其高度和宽度分别为“4”和“16”。根据实施例,参考样本集可以包括一个短边参考样本和七个长边参考样本。例如,第一参考样本集DC0可以被配置为包括短边参考样本中的最上面的参考样本L0和从长边参考样本的左端开始按顺序排列的七个参考样本0、1、2、3、4、5和6。
同时,如上所述,可以基于多个参考样本集中的至少一个来获得当前块的DC值。根据特定实施例,多个参考样本集的每一个可以包括与当前块的第一边和第二边中的任一个相对应的参考样本。例如,第一参考样本集可以包括在当前块的第一边和第二边中的较长的一边上的参考样本。另外,第二参考样本集可以包括当前块的第一边和第二边中的较短边上的参考样本。另外,可以基于第一参考样本集和第二参考样本集中的至少一个来获得当前块的DC值。
例如,可以基于第一参考样本集和第二参考样本集两者来获得当前块的DC值。在这种情况下,可以基于如上面参考图14所述的每个参考样本集的平均值来获得当前块的DC值。具体地,可以基于第一平均值和第二平均值的最终平均值来获得当前块的DC值。在这种情况下,第一平均值可以是包括在第一参考样本集中的参考样本的平均值。另外,第二平均值可以是第二参考样本集中包括的参考样本的平均值。同时,包括在第二参考样本集中的参考样本的数量可以小于包括在第一参考样本集中的参考样本的数量。在这种情况下,最终平均值可能受到较短边上的参考样本值的影响大于较长边上的参考样本值的影响。因此,根据本公开的实施例的编码器和解码器可以通过对第一平均值和第二平均值中的每一个应用权重来获得最终平均值。
图30是图示根据本公开的实施例的将权重应用于每个参考样本集的平均值的方法的流程图。在步骤S3002中,编码器和解码器可以基于当前块的较短边与较长边的比率来获得第一整数值和第二整数值。这里,第一整数值可以是应用于当前块的较长边上的参考样本的样本值的第一平均值的整数权重。另外,第二整数值可以是应用于当前块的较短边上的参考样本的样本值的第二平均值的整数权重。例如,编码器和解码器可以基于当前块的较短边与较长边的比率来获得第一权重和第二权重。第一权重和第二权重可以分别是第一平均值和第二平均值的权重。接下来,编码器和解码器可以通过对第一权重和第二权重进行整数化来获得第一整数值和第二整数值。第一权重和第二权重可以被表达为下面的等式5。
[等式5]
第一权重:2*W/(H+W)(较长边)
第二权重:2*H/(H+W)(较短边)
根据特定实施例,根据较短边(H)与较长边(W)的比率的权重可以如下。在这种情况下,每个权重可以表达为浮点值。
1)WxH=1:2
第一权重:1.3333
第二权重:0.66667
2)WxH=1:4
第一权重:1.5873
第二权重:0.4
3)WxH=1:8
第一权重:1.7921
第二权重:0.22222
4)WxH=1:16
第一权重:1.8382
第二权重:0.11765
通过示例提供根据当前块的形状的权重,并且本公开不限于此。另外,小数点后执行舍入的地方可能会变化。例如,可以基于缩放数的精度或大小中的至少一个来确定在小数点后执行舍入的地方。
接下来,编码器和解码器可以基于预定索引值将第一权重和第二权重整数化。编码器和解码器可以通过将第一权重和第二权重中的每一个乘以预定索引值来获得第一整数值和第二整数值。预定索引值可以是2的n次幂。例如,预定索引值可以是2的16次幂。在下文中,将描述在预定索引值是2的16次幂的情况下获得第一整数值和第二整数值的方法。
如果预定的索引值为16,并且如果较短边与较长边的比率为1:2、1:4、1:8、以及1:16,则通过将第一权重乘以预定索引值获得下述结果。
1)WxH=1:2:2/3*2^16=43690.6666666667
2)WxH=1:4:4/5*2^16=52428.8000000000
3)WxH=1:8:8/9*2^16=58254.2222222222
4)WxH=1:16:16/17*2^16=61680.9411764706
用于将相应比率乘以预定索引值的第一权重是包括小数点的实数值。编码器和解码器可以将乘以预定索引值的第一权重进行整数化。在这种情况下,编码器和解码器可以使用舍入、上取整函数和下取整函数中的任何一个来对乘以预定索引值的第一权重进行整数化。根据实施例,可以将相同的方法应用于第一权重和第二权重,或者可以将多种方法应用于第一权重和第二权重。例如,舍入可以应用于第一权重值,并且上取整函数可以应用于第二权重值。
根据实施例,当将舍入应用于乘以预定索引值的第一权重时,编码器和解码器可以获得以下第一整数值。
1)WxH=1:2:43690.6666666667变成43691。
2)WxH=1:4:52428.8000000000变为52429。
3)WxH=1:8:58254.2222222222变为58254。
4)WxH=1:16:61680.9411764706变为61681。
根据另一实施例,当将上取整函数应用于乘以预定索引值的第一权重时,编码器和解码器可以获得下述第一整数值。
1)WxH=1:2:43690.6666666667变为43691。
2)WxH=1:4:52428.8000000000变为52429。
3)WxH=1:8:58254.2222222222变为58255。
4)WxH=1:16:61680.9411764706变为61681。
根据另一实施例,当将下取整函数应用于乘以预定索引值的第一权重时,编码器和解码器可以获得以下第一整数值。
1)WxH=1:2:43690.6666666667变为43690。
2)WxH=1:4:52428.8000000000变为52428。
3)WxH=1:8:58254.2222222222变为58254。
4)WxH=1:16:61680.9411764706变为61680。
在步骤S3004中,编码器和解码器可以获得第一平均值和第二平均值。在此,第一平均值和第二平均值可以是舍入值。在步骤S3006中,编码器和解码器可以基于第一平均值、第二平均值、第一整数值和第二整数值来获得当前块的DC值。例如,编码器和解码器可以通过将第一整数值应用于第一平均值来获得第一中间值。另外,编码器和解码器可以通过将第二整数值应用于第二平均值来获得第二中间值。接下来,编码器和解码器可以基于第一中间值和第二中间值的平均值来获得当前块的DC值。另外,编码器和解码器可以基于获得的DC值来预测当前块。
同时,当前块的宽度和高度中的至少一个可以不等于2的n次幂。在这种情况下,类似于上述实施例,与当前块的上边和左边相对应的参考样本的数量可以不是2的n次幂。图31是图示根据本公开的实施例的在当前块的第一边和第二边中的任一边的长度不是2的n次幂的情况下获得DC值的方法的图。在图31中,当前块3101是矩形块,其高度和宽度分别是“4”和“24”。而且,当前块3101的较短边与较长边的比率可以是“6”。在这种情况下,可以使用参考上面的图30描述的方法来获得当前块3101的DC值。
例如,编码器和解码器可以获得在当前块3101的较长边上的参考样本的值的第一平均值。编码器和解码器可以获得在较短边上的参考样本的值的第二平均值。可以分别基于较短边的长度和较长边的长度获得第一平均值和第二平均值的第二权重和第一权重。编码器和解码器可以基于上述预定索引值来归一化第一权重和第二权重。另外,编码器和解码器可以归一化第一权重和第二权重,从而获得第一整数值和第二整数值。另外,编码器和解码器可以将第一整数值和第二整数值分别应用于第一平均值和第二平均值,从而获得当前块的DC值。
编码器和解码器可以使用上述方法来获得当前块的DC值。另外,在获得DC值的步骤中,编码器可以使用加法和移位运算而无需除法运算来获得DC值。解码器可以从比特流获得对应块的预测模式。另外,在当前块的预测模式是DC模式的情况下,解码器可以使用加法和移位运算而无需除法运算来获得DC值。
同时,如上所述,当前单元可以包括与对应图像区域相对应的亮度分量和色度分量。在下文中,将参考图32至图41描述根据本公开的实施例的预测当前单元的色度块的方法。图32示出当前单元的亮度块和色度块的实施例。根据本公开的实施例,可以使用当前单元的其他分量的重构样本值来获得与当前单元的特定分量相对应的预测块。该方法可以被称为“跨分量线性模型(CCLM)方法”。据此,根据本公开的编码器和解码器可以改善视频信号的压缩性能。
例如,当前单元可以包括第一分量和第二分量。在这种情况下,编码器和解码器可以基于第一分量的重构样本值来获得与第二分量相对应的预测块。根据实施例,编码器和解码器可以获得指示当前单元的第一分量和第二分量之间的关系的关系模型。例如,关系模型可以是数学关系。另外,编码器和解码器可以基于所获得的关系模型从第一分量的重构样本值获得与第二分量相对应的预测块。
根据本公开的实施例,可以基于当前单元的参考样本来获得表示第一分量和第二分量之间的关系的关系模型。例如,当前单元可以包括对应于第一分量的第一块和对应于第二分量的第二块。如图32所示,第一块和第二块可以具有不同的尺寸。另外,编码器和解码器可以基于第一块周围的第一参考样本和第二块周围的第二参考样本来获得指示第一分量和第二分量之间的关系的关系模型。另外,可以使用第一块和所获得的关系模型来预测第二块。根据实施例,第一分量可以是亮度分量和色度分量(即,Cb和Cr)中的任何一个。另外,第二分量可以是亮度分量和色度分量中的与第一分量不同的任何一种。例如,第一分量可以表示亮度分量。另外,第二分量可以表示色度分量中的任何一种。此外,编码器和解码器可以基于两个或更多个分量的重构样本值来预测另一分量。例如,编码器和解码器可以将上述方法用于色度内预测。
在下文中,将描述使用CCLM方法预测当前单元的色度块的方法。根据实施例,在CCLM方法中使用的关系模型可以被表达为等式6中所示的线性模型。在等式6中,predC(i,j)表示在色度块的位置(i,j)处的预测样本值。另外,recL(i,j)表示在当前单元的亮度块中的位置(i,j)处的重构样本值。
[等式6]
predC(i,j)=α·recL(i,j)+β
在这种情况下,色度块中包括的样本数量可以小于亮度块中包括的样本数量。例如,由编码器和解码器处理的视频信号的YCbCr采样率可以是4:2:0。在这种情况下,可以基于下采样的亮度样本值来获得色度块的预测块。另外,可以基于亮度块周围的亮度参考样本与色度块周围的色度参考样本之间的关系来获得参数α和β。
[等式7]
Figure BDA0003830143840000411
[等式8]
Figure BDA0003830143840000421
在等式7中,L(n)表示第n个亮度参考样本,而C(n)表示第n个色度参考样本。另外,在亮度参考样本的数量大于色度参考样本的数量的情况下,可以使用下采样的亮度参考样本。在等式8中,N可以表示色度参考样本的数量。例如,C(n)可以是色度块的上部和左边部上的色度参考样本中的第n个色度参考样本。
根据本公开的实施例,可以以各种方式来配置包括用于获得关系模型的多个参考样本的建模组。建模组可以包括当前块的参考样本中的用于获得关系模型的多个参考样本。另外,建模组可以包括:包括亮度参考样本的亮度建模组和包括色度参考样本的色度建模组。例如,在与预测亮度分量的方向相似的方向上更有可能预测当前单元的色度分量。因此,可以基于亮度块的预测模式来配置建模组。亮度块的预测模式可以是在亮度分量的预测中使用的预测模式。
根据实施例,如果亮度分量的预测模式不是角度模式,则在图35、图36、或者图38中所示的位置处的参考样本可用于获得关系模型。例如,预测模式可以是平面模式和DC模式之一,而不是角度模式。另外,即使亮度分量的预测模式是对角线模式或围绕对角线模式的角度模式,图35、36或38中示出的位置处的参考样本可用于获得关系模型。
根据另一实施例,如果亮度块的预测模式是水平模式或围绕水平模式的角度模式,则在图37中所示的位置处的参考样本可以用于获得关系模型。根据另一实施例,如果亮度块的预测模式是垂直模式或围绕垂直模式的角度模式,则在图39中所示的位置处的参考样本可以用于获得关系模型。
同时,编码器可以用信号发送配置上述建模组的方法。在下文中,将描述一种用于发信号通知配置建模组的方法的方法。根据本公开的实施例,可以基于亮度预测模式来用信号发送配置建模组的方法。根据一个实施例,配置建模组的方法可以包括第一配置方法,第二配置方法和第三配置方法。在这种情况下,可以分别通过第一信令,第二信令和第三信令来信令通知第一配置方法,第二配置方法和第三配置方法。此时,可以基于亮度块的预测模式来用信号通知每种信令方法。
根据实施例,可以使用可变长度比特来用信号发送配置建模组的方法。例如,可以分别通过诸如0、10或11(或1、01或00)的比特来用信号通知第一配置方法、第二配置方法和第三配置方法。在图35、图36或者图38中图示的配置建模组的方法可以是第一配置方法,图37中图示的配置建模组的方法可以是第二配置方法,并且在图39中所图示的配置建模组的方法可以是第三配置方法。在这种情况下,可以基于亮度分量预测模式来确定使用最小比特用信号发送的建模组配置方法。例如,如果亮度块的预测模式是水平模式,则编码器可以使用最少数量的比特来用信号发送第二配置方法。另外,如果亮度块的预测模式是垂直模式,则编码器可以使用最小数量的比特来用信号发送第三配置方法。
同时,在图片(图块或切片)中,亮度块和色度块可以通过彼此独立的方法进行划分。因此,可以存在与色度块相对应的亮度块的多个预测模式。在这种情况下,编码器和解码器可以确定代表性的预测模式,该代表性的预测模式是多个预测模式之一。稍后将参考图33进行其描述。另外,如果存在与当前单元的色度块相对应的亮度块的多个预测模式,则可以将在不同位置处的参考样本用于与多个亮度预测模式相对应的相应子块。
在下文中,将参考图33至图39详细描述根据本公开的实施例的配置建模组的方法。图33是图示其中亮度块和色度块以彼此不同的形式划分的实施例的图。当前单元可以被包括在I图片(图块/切片)中。另外,当前单元的YCbCr的采样比可以为4:2:0。
根据本公开的实施例,配置建模组的方法可以根据亮度块和色度块被划分的结构而变化。在根据单树方法划分当前单元的亮度块和色度块的情况下,当前单元的色度块和亮度块之间可能存在一一对应的关系。单树方法可以表示以相同方式划分当前单元的亮度块和色度块的方法。在这种情况下,可以基于当前单元的亮度块的内预测模式来配置建模组。
另一方面,在根据分割树方法划分当前单元的亮度块和色度块的情况下,可以将当前单元的色度块和亮度块划分为不同的结构,如图33中所示。分割树方法可以表示将当前单元的亮度块和色度块划分为不同结构的方法。在这种情况下,可能难以在当前单元的色度块和亮度块之间进行一一对应。在图33(b)的左部处的色度块3301和与色度块3301相对应的亮度块3302可以通过不同的方法来划分。因此,可能需要确定亮度块的代表性预测模式的方法。
根据实施例,可以基于与包括特定位置的每个亮度子块相对应的内预测模式信息来确定配置建模组的方法。例如,五个预定位置可以是左上(TL)、右上(TR)、右中(CR)、左下(BL)和右下(BR)。编码器和解码器可以确定在包括相应预定位置的亮度子块的内预测模式中的亮度块的代表性预测模式。例如,编码器和解码器可以使用在包括预定位置的亮度子块的内预测模式中的根据预定顺序具有最高优先级的角度模式作为代表性预测模式。
根据另一实施例,可以将包括预定位置的亮度子块的内预测模式用作代表性预测模式。例如,预定位置可以是上述五个预定位置中的任何一个。例如,预定位置可以是BR。BR可能是距参考样本最远的位置。
根据另一实施例,可以基于包括两个或更多个预定位置中的相应位置的亮度子块的内预测模式来获得代表性预测模式。例如,编码器和解码器可以基于分别对应于两个预定位置的第一内预测模式和第二内预测模式的索引的平均值来获得代表性预测模式。
根据另一个实施例,可以基于与图33(a)中的五个预定位置中的相应预定位置相对应的内预测模式的频率来获得代表性预测模式。例如,编码器和解码器可以获得与TL、TR、CR、BL和BR相对应的内预测模式中的每个内预测模式的频率。另外,编码器和解码器可以基于每个内预测模式的频率使用具有高频率的内预测模式作为代表性预测模式。
根据附加的实施例,编码器和解码器可以对内预测模式进行分组,从而获得每个预测模式组的频率。图34是图示根据本公开的实施例的按区域分类的内预测模式的图。图34是图示角度模式被分组为三个预测模式组M0、M1和M2的实施例的图。然而,本公开不限于此,并且编码器和解码器可以根据角度模式的角度获得三个以下或三个以上的预测模式组。
例如,在与五个预定位置相对应的内预测模式中,属于第一预测模式组M0的内预测模式可以是最多的。在这种情况下,编码器和解码器可以使用属于第一预测模式组M0的内预测模式中的任一个作为代表性预测模式。
图35是示出根据本公开的实施例的在当前单元的亮度块的代表性预测模式不是角度模式的情况下的建模组的图。根据实施例,如果当前单元的亮度块的代表性预测模式不是角度模式,则编码器和解码器可以使用与色度块的左边和上边相对应的参考样本来获得亮度块和色度块之间的关系模型。
图36是图示根据本公开的另一实施方式的建模组的图。根据实施例,如果当前单元的亮度块的代表性预测模式是非定向模式,则可以使用扩展建模组,如图36中所示。可替选地,在使用相应亮度子块的不同位置处的参考样本来获得关系模型的情况下,可以使用扩展的建模组,如图36中所示。根据图36中的建模组,与图35所示的建模组相比,编码器和解码器可以使用更大范围的参考样本来获得第一分量和第二分量之间的关系模型。
图37、38和39是图示根据本公开的另一实施方式的建模组的图。图37可以示出在当前单元的亮度块的代表性预测模式属于图34中所示的第一预测模式组M0的情况下用于当前单元的第一分量和第二分量之间的关系模型的建模组。可以使用当前块的左边界上的参考样本来预测属于第一预测模式组M0的内预测模式。因此,与图35中所示的建模组相比,可以基于第一建模组获得关系模型,该第一建模组进一步包括与当前块的左边界相邻的线上的参考样本。
图38可以示出在当前单元的亮度块的代表性预测模式属于图34中所示的第二预测模式组M1的情况下用于当前单元的第一分量和第二分量之间的关系模型的建模组。如果亮度块的内预测模式属于第二预测模式组M1,则当前块的样本的值可以类似于当前块的左上部的样本的值。因此,与图35中所示的建模组相比,可以基于第二建模组获得关系模型,该第二建模组进一步包括被定位在当前块的左上部的样本。在色度参考样本中的左上样本的位置可能会根据子采样方法而变化。
图39可以示出在当前单元的亮度块的代表性预测模式属于图34中所示的第三预测模式组M2的情况下用于当前单元的第一分量和第二分量之间的关系模型的建模组。可以使用当前块的上边界上的参考样本来预测属于第三预测模式组M2的内预测模式。因此,与图35中所示的建模组相比,可以基于第三建模组获得关系模型,该第三建模组进一步包括与当前块的上边界相邻的线上的参考样本。
图40是图示根据本公开的实施例的基于多个关系模型重构色度块的方法的图。如上所述,在通过分割树方法划分当前单元的情况下,可以存在与色度块相对应的亮度块的多个预测模式。在这种情况下,可以将CCLM方法应用于亮度块的预测模式划分为相同区域。
参考图40,当前单元可以被划分为第一区域和第二区域。根据实施例,可以基于亮度块的预测模式将当前单元划分为第一区域和第二区域。另外,可以分别为第一区域和第二区域获得亮度块和色度块之间的关系模型。例如,对应于第一区域的第一关系模型和对应于第二区域的第二关系模型可以彼此独立。另外,编码器和解码器可以以不同的方法获得第一关系模型和第二关系模型。例如,编码器和解码器可以基于第一区域中的预测模式来获得第一关系模型。另外,编码器和解码器可以基于第二区域中的预测模式来获得第二关系模型。接下来,编码器和解码器可以基于第一关系模型在与色度块中的第一区域相对应的位置处重构样本。另外,编码器和解码器可以基于第二关系模型在与色度块中的第二区域相对应的位置处重构样本。
根据实施例,取决于当前单元中的样本的位置,可以使用多个不同的关系模型。例如,可以使用上关系模型来重构被定位在参考对角线的上部处的样本。在这种情况下,参考对角线可以是连接当前单元的左上样本的位置和右下样本的位置的对角线。另外,上关系模型可以是基于被定位在当前单元的上部处的参考样本获得的模型。这里,被定位在当前单元的上部处的参考样本可以是被定位在当前单元的色度和亮度块的上部处的参考样本。可以使用左关系模型来重构被定位在参考对角线的下部处的样本。在这种情况下,左关系模型可以是基于当前单元的左参考样本获得的模型。这里,当前单元的左参考样本可以是当前单元的色度和亮度块的左参考样本。
图41是图示基于多个关系模型来重构色度块的方法的详细实施例的图。参考图41,当前单元可以被划分为第一区域和第二区域。在这种情况下,可以基于如图41(b)中所示配置的建模组来获得用于第一区域的第一关系模型。另外,可以基于如图41(c)中所示配置的建模组来获得第二区域的第二关系模型。
例如,编码器和解码器可以基于被定位在当前单元的上部处的参考样本来获得第一关系模型。另外,编码器和解码器可以基于被定位在当前单元的左部处的参考样本来获得第二关系模型。接下来,编码器和解码器可以基于第一关系模型在与色度块中的第一区域相对应的位置处重构样本。另外,编码器和解码器可以基于第二关系模型在与色度块中的第二区域相对应的位置处重构样本。
同时,如上所述,可以将多条参考线上的样本用于当前块的内预测。图42是图示在当前块的预测模式是DC模式的情况下参考样本的实施例的图。参考图42,当前块是具有4X4大小的正方形块。如果当前块的预测模式是DC模式,则编码器和解码器可以基于在多条参考线refIdx_0、refIdx_1和refIdx_3中的任何一条上的DC参考样本来获得当前块的DC值。
根据实施例,编码器可以用信号发送指示多条参考线中的任何一条的参考线索引。解码器可以获得指示多条参考线中的任何一条的参考线索引。具体地,解码器可以通过解析比特流来获取intra_luma_ref_Idx[x0][y0]。另外,解码器可以从intra_luma_ref_Idx[x0][y0]获得参考线索引IntraLumaRefLineIdx[x0][y0]。例如,如果参考线索引是“0”,则参考线索引可以指示与当前块的边界相邻的参考线。另外,如果参考线索引是“1”,则参考线索引可以指示与当前块的边界分开了一个样本的参考线。此外,如果参考线索引是“3”,则参考线索引可以指示与当前块的边界分开了三个样本的参考线。
根据实施例,如果参考线索引是“refIdx”,则可以基于在x=-1-refIdx和y=0..nTbH-1的位置处的左边上的参考样本和在x=0..nTbW-1和y=-1-refIdx的位置处的上边上的参考样本来获得当前块的DC值。在此,nTbW和nTbH可以分别表示当前块的宽度和高度。
图43和图44是图示在当前块是矩形块的情况下用于获得DC值的参考样本的实施例的图。如果当前块的高度和宽度彼此不同,则可以通过参考图8至图31描述的方法获得当前块的DC值。例如,如图43中所示,如果上边的长度大于当前块的左边,则可以基于包括上边上的参考样本的参考样本集来获得当前块的DC值。如果参考线索引是“refIdx”,则可以基于在x=0..nTbW-1和y=-1-refIdx的位置处的上边上的参考样本来获得当前块的DC值。
如图44中所示,如果左边的长度大于当前块的上边,则可以基于包括左边上的参考样本的参考样本集来获得当前块的DC值。如果参考线索引是“refIdx”,则可以基于在x==-1-refIdx和y=0..nTbH-1的位置处的左边上的参考样本获得当前块的DC值。
可以通过各种手段来实现本发明的上述实施例。例如,可以通过硬件、固件、软件或其组合来实现本发明的实施例。
对于通过硬件实现的情况,可以通过专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑设备(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器等中的一个或多个来实现根据本发明的实施例的方法。
在通过固件或软件实现的情况下,可以以执行上述功能或操作的模块、过程或函数的形式来实现根据本发明的实施例的方法。可以将软件代码存储在存储器中并由处理器驱动。存储器可以位于处理器内部或外部,并且可以通过各种已知的方式与处理器交换数据。
还可以以诸如由计算机执行的程序模块的包括计算机可执行指令的记录介质的形式来实现某些实施例。计算机可读介质可以是可由计算机访问的任何可用介质,并且可以包括所有易失性、非易失性、可移除和不可移除的介质。另外,计算机可读介质可以包括计算机存储介质和通信介质。计算机存储介质包括以任何用于存储诸如计算机可读指令、数据结构、程序模块或其他数据的信息的方法或技术实现的所有易失性、非易失性、可移动和不可移动介质。通常,通信介质包括计算机可读指令、调制数据信号的其他数据(诸如数据结构或程序模块)或其他传输机制,并且包括任何信息传输介质。
本发明的上述描述仅用于说明目的,并且将会理解,本发明所属的本领域的普通技术人员可以在不改变本发明的技术思想或者基本特征的情况下对本发明进行改变,并且本发明可以以其他特定形式容易地被修改。因此,上述实施例是说明性的,并且在所有方面均不受限制。例如,被描述为单个实体的每个组件可以被分布和实现,并且同样,被描述为被分布的组件也可以以关联的方式被实现。
本发明的范围由所附权利要求书而不是上述详细描述来限定,并且从所附权利要求书的含义和范围及其等效物导出的所有改变或修改都应解释为包括在本发明的范围内。

Claims (20)

1.一种视频信号解码设备,包括处理器,
其中,所述处理器被配置成:
获得作为当前块的邻近样本的多个参考样本,
其中,所述多个参考样本包括与所述当前块的上边界相邻的第一参考样本、与所述第一参考样本相邻的第二参考样本、与所述第二参考样本相邻的第三参考样本、与所述当前块的左边界相邻的第四参考样本、与所述第四参考样本的左侧相邻的第五参考样本、以及与所述第五参考样本的左侧相邻的第六参考样本,
获得指示第一参考样本集、第二参考样本集以及第三参考样本集中的任何一个的索引,
其中,所述第一参考样本集包括所述第一参考样本和所述第四参考样本,
其中,所述第二参考样本集包括所述第二参考样本和所述第五参考样本,
其中,所述第三参考样本集包括所述第三参考样本和所述第六参考样本,
基于由所述索引指示的参考样本集获得用于所述当前块的预测的直流(DC)值,
基于所述DC值重构所述当前块,
其中,所述多个参考样本分别以坐标的形式表示,
其中,在所述第一参考样本、所述第二参考样本以及所述第三参考样本的每一个中包括的所述参考样本中的每一个的x轴坐标与所述当前块的样本的x轴坐标相同,
其中,在所述第四参考样本、所述第五参考样本以及所述第六参考样本的每一个中包括的所述参考样本中的每一个的y轴坐标与所述当前块的样本的y轴坐标相同。
2.根据权利要求1所述的视频信号解码设备,
当所述当前块的所述上边界的长度与所述当前块的所述左边界的长度相同时,
其中,所述DC值是通过使用由所述索引指示的所述参考样本集中包括的所有参考样本来获得的。
3.根据权利要求1所述的视频信号解码设备,
当所述当前块的所述上边界的长度大于所述当前块的所述左边界的长度时,
其中,当由所述索引指示的所述参考样本集是所述第一参考样本集时,仅使用所述第一参考样本来获得所述DC值,
其中,当由所述索引指示的所述参考样本集是所述第二参考样本集时,仅使用所述第二参考样本来获得所述DC值,
其中,当由所述索引指示的所述参考样本集是所述第三参考样本集时,仅使用所述第三参考样本来获得所述DC值。
4.根据权利要求1所述的视频信号解码设备,
当所述当前块的所述上边界的长度小于所述当前块的所述左边界的长度时,
其中,当由所述索引指示的所述参考样本集是所述第一参考样本集时,仅使用所述第四参考样本来获得所述DC值,
其中,当由所述索引指示的所述参考样本集是所述第二参考样本集时,仅使用所述第五参考样本来获得所述DC值,
其中,当由所述索引指示的所述参考样本集是所述第三参考样本集时,仅使用所述第六参考样本来获得所述DC值。
5.根据权利要求1所述的视频信号解码设备,
当所述当前块的所述上边界的长度与所述当前块的所述左边界的长度相同时,
其中,所述DC值是基于如下所示的等式来获得的:
[等式]
DC值=(SUM(K个参考样本集的参考样本的值)+所述当前块的所述上边界的长度)>>Log2(所述当前块的所述左边界的长度+所述当前块的所述上边界的长度),
这里,所述K为1、2或3之一。
6.根据权利要求1所述的视频信号解码设备,
当所述当前块的所述上边界的长度与所述当前块的所述左边界的长度不同时,
其中,所述DC值是基于如下所示的等式获得的:
[等式]
DC值=(SUM(K个参考样本的值)+所述当前块的边界的长度>>1)>>Log2(所述当前块的边界的长度),
这里,所述K为1、2、3、4、5或6之一,
当所述K为1、2或3之一时,所述当前块的边界的长度是所述当前块的所述上边界的长度,
当所述K为4、5或6之一时,所述当前块的边界的长度是所述当前块的所述左边界的长度。
7.根据权利要求1所述的视频信号解码设备,
其中,所述多个参考样本中的每一个的样本的数量为2^n。
8.一种视频信号编码设备,包括处理器,
其中,所述处理器被配置成:
获得要由解码器使用解码方法解码的比特流,
其中,所述解码方法包括:
获得作为当前块的邻近样本的多个参考样本,
其中,所述多个参考样本包括与所述当前块的上边界相邻的第一参考样本、与所述第一参考样本相邻的第二参考样本、与所述第二参考样本相邻的第三参考样本、与所述当前块的左边界相邻的第四参考样本、与所述第四参考样本的左侧相邻的第五参考样本、以及与所述第五参考样本的左侧相邻的第六参考样本,
获得指示第一参考样本集、第二参考样本集以及第三参考样本集中的任何一个的索引,
其中,所述第一参考样本集包括所述第一参考样本和所述第四参考样本,
其中,所述第二参考样本集包括所述第二参考样本和所述第五参考样本,
其中,所述第三参考样本集包括所述第三参考样本和所述第六参考样本,
基于由所述索引指示的参考样本集获得用于所述当前块的预测的直流(DC)值,以及
基于所述DC值重构所述当前块,
其中,所述多个参考样本分别以坐标的形式表示,
其中,在所述第一参考样本、所述第二参考样本以及所述第三参考样本的每一个中包括的所述参考样本中的每一个的x轴坐标与所述当前块的样本的x轴坐标相同,
其中,在所述第四参考样本、所述第五参考样本以及所述第六参考样本的每一个中包括的所述参考样本中的每一个的y轴坐标与所述当前块的样本的y轴坐标相同。
9.根据权利要求8所述的视频信号编码设备,
当所述当前块的所述上边界的长度与所述当前块的所述左边界的长度相同时,
其中,所述DC值是通过使用由所述索引指示的所述参考样本集中包括的所有参考样本来获得的。
10.根据权利要求8所述的视频信号编码设备,
当所述当前块的所述上边界的长度大于所述当前块的所述左边界的长度时,
其中,当由所述索引指示的所述参考样本集是所述第一参考样本集时,仅使用所述第一参考样本来获得所述DC值,
其中,当由所述索引指示的所述参考样本集是所述第二参考样本集时,仅使用所述第二参考样本来获得所述DC值,
其中,当由所述索引指示的所述参考样本集是所述第三参考样本集时,仅使用所述第三参考样本来获得所述DC值。
11.根据权利要求8所述的视频信号编码设备,
当所述当前块的所述上边界的长度小于所述当前块的所述左边界的长度时,
其中,当由所述索引指示的所述参考样本集是所述第一参考样本集时,仅使用所述第四参考样本来获得所述DC值,
其中,当由所述索引指示的所述参考样本集是所述第二参考样本集时,仅使用所述第五参考样本来获得所述DC值,
其中,当由所述索引指示的所述参考样本集是所述第三参考样本集时,仅使用所述第六参考样本来获得所述DC值。
12.根据权利要求9所述的视频信号编码设备,
当所述当前块的所述上边界的长度与所述当前块的所述左边界的长度相同时,
其中,所述DC值是基于如下所示的等式来获得的:
[等式]
DC值=(SUM(K个参考样本集的参考样本的值)+所述当前块的所述上边界的长度)>>Log2(所述当前块的所述左边界的长度+所述当前块的所述上边界的长度),
这里,所述K为1、2或3之一。
13.根据权利要求9所述的视频信号编码设备,
当所述当前块的所述上边界的长度与所述当前块的所述左边界的长度不同时,
其中,所述DC值是基于如下所示的等式获得的:
[等式]
DC值=(SUM(K个参考样本的值)+所述当前块的边界的长度>>1)>>Log2(所述当前块的边界的长度),
这里,所述K为1、2、3、4、5或6之一,
当所述K为1、2或3之一时,所述当前块的边界的长度是所述当前块的所述上边界的长度,
当所述K为4、5或6之一时,所述当前块的边界的长度是所述当前块的所述左边界的长度。
14.根据权利要求9所述的视频信号编码设备,
其中,所述多个参考样本中的每一个的样本的数量为2^n。
15.一种存储比特流的非暂时性计算机可读介质,所述比特流通过解码方法被解码,
其中,所述解码方法包括:
获得要由解码器使用解码方法解码的比特流,
其中,所述解码方法包括:
获得作为当前块的邻近样本的多个参考样本,
其中,所述多个参考样本包括与所述当前块的上边界相邻的第一参考样本、与所述第一参考样本相邻的第二参考样本、与所述第二参考样本相邻的第三参考样本、与所述当前块的左边界相邻的第四参考样本、与所述第四参考样本的左侧相邻的第五参考样本、以及与所述第五参考样本的左侧相邻的第六参考样本,
获得指示第一参考样本集、第二参考样本集以及第三参考样本集中的任何一个的索引,
其中,所述第一参考样本集包括所述第一参考样本和所述第四参考样本,
其中,所述第二参考样本集包括所述第二参考样本和所述第五参考样本,
其中,所述第三参考样本集包括所述第三参考样本和所述第六参考样本,
基于由所述索引指示的参考样本集获得用于所述当前块的预测的直流(DC)值,以及
基于所述DC值重构所述当前块,
其中,所述多个参考样本分别以坐标的形式表示,
其中,在所述第一参考样本、所述第二参考样本以及所述第三参考样本的每一个中包括的所述参考样本中的每一个的x轴坐标与所述当前块的样本的x轴坐标相同,
其中,在所述第四参考样本、所述第五参考样本以及所述第六参考样本的每一个中包括的所述参考样本中的每一个的y轴坐标与所述当前块的样本的y轴坐标相同。
16.根据权利要求15所述的存储比特流的非暂时性计算机可读介质,
当所述当前块的所述上边界的长度与所述当前块的所述左边界的长度相同时,
其中,所述DC值是通过使用由所述索引指示的所述参考样本集中包括的所有参考样本来获得的。
17.根据权利要求15所述的存储比特流的非暂时性计算机可读介质,
当所述当前块的所述上边界的长度大于所述当前块的所述左边界的长度时,
其中,当由所述索引指示的所述参考样本集是所述第一参考样本集时,仅使用所述第一参考样本来获得所述DC值,
其中,当由所述索引指示的所述参考样本集是所述第二参考样本集时,仅使用所述第二参考样本来获得所述DC值,
其中,当由所述索引指示的所述参考样本集是所述第三参考样本集时,仅使用所述第三参考样本来获得所述DC值。
18.根据权利要求15所述的存储比特流的非暂时性计算机可读介质,
当所述当前块的所述上边界的长度小于所述当前块的所述左边界的长度时,
其中,当由所述索引指示的所述参考样本集是所述第一参考样本集时,仅使用所述第四参考样本来获得所述DC值,
其中,当由所述索引指示的所述参考样本集是所述第二参考样本集时,仅使用所述第五参考样本来获得所述DC值,
其中,当由所述索引指示的所述参考样本集是所述第三参考样本集时,仅使用所述第六参考样本来获得所述DC值。
19.根据权利要求15所述的存储比特流的非暂时性计算机可读介质,
当所述当前块的所述上边界的长度与所述当前块的所述左边界的长度相同时,
其中,所述DC值是基于如下所示的等式来获得的:
[等式]
DC值=(SUM(K个参考样本集的参考样本的值)+所述当前块的所述上边界的长度)>>Log2(所述当前块的所述左边界的长度+所述当前块的所述上边界的长度),
这里,所述K为1、2或3之一,
当所述当前块的所述上边界的长度与所述当前块的所述左边界的长度不同时,
其中,所述DC值是基于如下所示的等式获得的:
[等式]
DC值=(SUM(K个参考样本的值)+所述当前块的边界的长度>>1)>>Log2(所述当前块的边界的长度),
这里,所述K为1、2、3、4、5或6之一,
当所述K为1、2或3之一时,所述当前块的边界的长度是所述当前块的所述上边界的长度,
当所述K为4、5或6之一时,所述当前块的边界的长度是所述当前块的所述左边界的长度。
20.一种视频信号处理方法,包括:
获得作为当前块的邻近样本的多个参考样本,
其中,所述多个参考样本包括与所述当前块的上边界相邻的第一参考样本、与所述第一参考样本相邻的第二参考样本、与所述第二参考样本相邻的第三参考样本、与所述当前块的左边界相邻的第四参考样本、与所述第四参考样本的左侧相邻的第五参考样本、以及与所述第五参考样本的左侧相邻的第六参考样本,
获得指示第一参考样本集、第二参考样本集以及第三参考样本集中的任何一个的索引,
其中,所述第一参考样本集包括所述第一参考样本和所述第四参考样本,
其中,所述第二参考样本集包括所述第二参考样本和所述第五参考样本,
其中,所述第三参考样本集包括所述第三参考样本和所述第六参考样本,
基于由所述索引指示的参考样本集获得用于所述当前块的预测的直流(DC)值,以及
基于所述DC值重构所述当前块,
其中,所述多个参考样本分别以坐标的形式表示,
其中,在所述第一参考样本、所述第二参考样本以及所述第三参考样本的每一个中包括的所述参考样本中的每一个的x轴坐标与所述当前块的样本的x轴坐标相同,
其中,在所述第四参考样本、所述第五参考样本以及所述第六参考样本的每一个中包括的所述参考样本中的每一个的y轴坐标与所述当前块的样本的y轴坐标相同。
CN202211073272.5A 2018-05-12 2019-05-13 使用参考样本的视频信号处理方法及设备 Pending CN115623198A (zh)

Applications Claiming Priority (10)

Application Number Priority Date Filing Date Title
KR10-2018-0054588 2018-05-12
KR1020180054588A KR20190129641A (ko) 2018-05-12 2018-05-12 참조 샘플의 평균값 구하는 방법을 이용한 비디오 신호 처리 방법 및 장치
KR20180059797 2018-05-25
KR10-2018-0059797 2018-05-25
KR10-2018-0067786 2018-06-12
KR20180067786 2018-06-12
KR20180076740 2018-07-02
KR10-2018-0076740 2018-07-02
CN201980031531.8A CN112106364B (zh) 2018-05-12 2019-05-13 使用参考样本的视频信号处理方法及设备
PCT/KR2019/005750 WO2019221472A1 (ko) 2018-05-12 2019-05-13 참조 샘플을 이용하는 비디오 신호 처리 방법 및 장치

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201980031531.8A Division CN112106364B (zh) 2018-05-12 2019-05-13 使用参考样本的视频信号处理方法及设备

Publications (1)

Publication Number Publication Date
CN115623198A true CN115623198A (zh) 2023-01-17

Family

ID=68540466

Family Applications (5)

Application Number Title Priority Date Filing Date
CN202211073245.8A Pending CN115623197A (zh) 2018-05-12 2019-05-13 使用参考样本的视频信号处理方法及设备
CN202211073320.0A Pending CN115623199A (zh) 2018-05-12 2019-05-13 使用参考样本的视频信号处理方法及设备
CN202211073026.XA Pending CN115623196A (zh) 2018-05-12 2019-05-13 使用参考样本的视频信号处理方法及设备
CN202211073272.5A Pending CN115623198A (zh) 2018-05-12 2019-05-13 使用参考样本的视频信号处理方法及设备
CN201980031531.8A Active CN112106364B (zh) 2018-05-12 2019-05-13 使用参考样本的视频信号处理方法及设备

Family Applications Before (3)

Application Number Title Priority Date Filing Date
CN202211073245.8A Pending CN115623197A (zh) 2018-05-12 2019-05-13 使用参考样本的视频信号处理方法及设备
CN202211073320.0A Pending CN115623199A (zh) 2018-05-12 2019-05-13 使用参考样本的视频信号处理方法及设备
CN202211073026.XA Pending CN115623196A (zh) 2018-05-12 2019-05-13 使用参考样本的视频信号处理方法及设备

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201980031531.8A Active CN112106364B (zh) 2018-05-12 2019-05-13 使用参考样本的视频信号处理方法及设备

Country Status (4)

Country Link
US (2) US11044470B2 (zh)
KR (2) KR102344190B1 (zh)
CN (5) CN115623197A (zh)
WO (1) WO2019221472A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116033149A (zh) * 2018-08-09 2023-04-28 Oppo广东移动通信有限公司 视频图像分量的预测方法和装置、及计算机存储介质
WO2020060185A1 (ko) * 2018-09-19 2020-03-26 한국전자통신연구원 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체
CN117201774A (zh) * 2019-01-13 2023-12-08 Lg 电子株式会社 用于执行基于mrl的帧内预测的图像编译方法和装置
US11277616B2 (en) * 2019-06-20 2022-03-15 Qualcomm Incorporated DC intra mode prediction in video coding
US20220337875A1 (en) * 2021-04-16 2022-10-20 Tencent America LLC Low memory design for multiple reference line selection scheme
WO2024005480A1 (ko) * 2022-06-29 2024-01-04 엘지전자 주식회사 다중 참조 라인에 기반한 영상 부호화/복호화 방법, 비트스트림을 전송하는 방법 및 비트스트림을 저장한 기록 매체

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101348544B1 (ko) * 2011-08-17 2014-01-10 주식회사 케이티 단거리 화면 내 예측 모드에서 화면 내 예측 방법 및 이러한 방법을 사용하는 장치
US9503716B2 (en) * 2011-12-19 2016-11-22 Broadcom Corporation Block size dependent filter selection for motion compensation
WO2016006894A1 (ko) * 2014-07-06 2016-01-14 엘지전자 주식회사 비디오 신호의 처리 방법 및 이를 위한 장치
KR20170066411A (ko) * 2014-10-08 2017-06-14 엘지전자 주식회사 3d 비디오 코딩을 위한 움직임 정보 압축 방법 및 장치
WO2017014412A1 (ko) * 2015-07-20 2017-01-26 엘지전자 주식회사 비디오 코딩 시스템에서 인트라 예측 방법 및 장치
WO2017030270A1 (ko) * 2015-08-17 2017-02-23 엘지전자(주) 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
ES2677193B1 (es) * 2015-08-28 2019-06-19 Kt Corp Procedimiento y dispositivo para procesar señales de vídeo
CN109076241B (zh) * 2016-05-04 2023-06-23 微软技术许可有限责任公司 利用样本值的非相邻参考线进行帧内图片预测
US10230961B2 (en) * 2016-06-03 2019-03-12 Mediatek Inc. Method and apparatus for template-based intra prediction in image and video coding
KR102410032B1 (ko) * 2016-06-24 2022-06-16 주식회사 케이티 비디오 신호 처리 방법 및 장치
JP2019525577A (ja) * 2016-07-18 2019-09-05 エレクトロニクス アンド テレコミュニケーションズ リサーチ インスチチュートElectronics And Telecommunications Research Institute 画像符号化/復号方法、装置、及び、ビットストリームを保存した記録媒体
EP3496399A4 (en) * 2016-08-03 2020-02-19 KT Corporation VIDEO SIGNAL PROCESSING METHOD AND DEVICE
KR20190029732A (ko) * 2016-08-08 2019-03-20 엘지전자 주식회사 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
KR102607660B1 (ko) * 2016-11-03 2023-11-30 삼성전자주식회사 전자 장치 및 이의 제어 방법
US10742975B2 (en) * 2017-05-09 2020-08-11 Futurewei Technologies, Inc. Intra-prediction with multiple reference lines
AU2019286133B2 (en) * 2018-06-15 2023-02-16 Huawei Technologies Co., Ltd. Method and apparatus for intra prediction
CN117201774A (zh) * 2019-01-13 2023-12-08 Lg 电子株式会社 用于执行基于mrl的帧内预测的图像编译方法和装置
US11496748B2 (en) * 2019-03-21 2022-11-08 Tencent America LLC Method and apparatus for improved planar and DC modes for non-zero reference lines

Also Published As

Publication number Publication date
CN115623197A (zh) 2023-01-17
US20210266527A1 (en) 2021-08-26
CN112106364B (zh) 2022-09-30
CN115623196A (zh) 2023-01-17
US20210051319A1 (en) 2021-02-18
KR20200130864A (ko) 2020-11-20
CN112106364A (zh) 2020-12-18
WO2019221472A1 (ko) 2019-11-21
CN115623199A (zh) 2023-01-17
KR20210158432A (ko) 2021-12-30
KR102344190B1 (ko) 2021-12-28
US11044470B2 (en) 2021-06-22

Similar Documents

Publication Publication Date Title
US11553185B2 (en) Method and apparatus for processing a video signal
CN111512628B (zh) 视频信号处理方法和设备
CN109792519B (zh) 基于帧内预测模式的图像处理方法及其装置
CN112106364B (zh) 使用参考样本的视频信号处理方法及设备
JP2022078048A (ja) 画像復号方法及び画像符号化方法
CN110024405B (zh) 图像处理方法及其装置
KR20190090866A (ko) 이차 변환을 이용한 비디오 신호의 인코딩/디코딩 방법 및 장치
CN115941976A (zh) 使用二次变换的视频信号处理方法及装置
CN111373750A (zh) 视频信号处理方法和装置
KR102539354B1 (ko) 인트라 예측 모드 기반 영상 처리 방법 및 이를 위한 장치
CN113196780A (zh) 使用多变换核处理视频信号的方法和设备
WO2020175965A1 (ko) 인트라 예측 기반 비디오 신호 처리 방법 및 장치
CN113966610A (zh) 使用块dpcm预测方法的视频信号处理方法和设备
KR20200104252A (ko) 영상 신호 부호화/복호화 방법 및 이를 위한 장치
AU2020388606A1 (en) Image signal encoding/decoding method and apparatus therefor

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination