CN113170107B - 图像分量间预测方法和使用其的图像编码和解码方法及装置 - Google Patents
图像分量间预测方法和使用其的图像编码和解码方法及装置 Download PDFInfo
- Publication number
- CN113170107B CN113170107B CN201980077062.3A CN201980077062A CN113170107B CN 113170107 B CN113170107 B CN 113170107B CN 201980077062 A CN201980077062 A CN 201980077062A CN 113170107 B CN113170107 B CN 113170107B
- Authority
- CN
- China
- Prior art keywords
- component
- inter
- block
- sample
- prediction
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 144
- 239000013074 reference sample Substances 0.000 claims abstract description 148
- 239000000523 sample Substances 0.000 claims description 178
- 241000023320 Luma <angiosperm> Species 0.000 claims description 11
- OSWPMRLSEDHDFF-UHFFFAOYSA-N methyl salicylate Chemical compound COC(=O)C1=CC=CC=C1O OSWPMRLSEDHDFF-UHFFFAOYSA-N 0.000 claims description 11
- 230000002093 peripheral effect Effects 0.000 description 56
- 238000001914 filtration Methods 0.000 description 23
- 230000005856 abnormality Effects 0.000 description 10
- 238000005070 sampling Methods 0.000 description 10
- 230000002159 abnormal effect Effects 0.000 description 8
- 230000004048 modification Effects 0.000 description 8
- 238000012986 modification Methods 0.000 description 8
- 230000008569 process Effects 0.000 description 8
- 238000009499 grossing Methods 0.000 description 7
- 238000012417 linear regression Methods 0.000 description 7
- 230000003044 adaptive effect Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 6
- 230000008707 rearrangement Effects 0.000 description 6
- 208000037170 Delayed Emergence from Anesthesia Diseases 0.000 description 5
- 238000005192 partition Methods 0.000 description 5
- 238000012545 processing Methods 0.000 description 5
- 230000009466 transformation Effects 0.000 description 5
- 238000012935 Averaging Methods 0.000 description 4
- 230000006835 compression Effects 0.000 description 4
- 238000007906 compression Methods 0.000 description 4
- 230000007717 exclusion Effects 0.000 description 4
- 238000013139 quantization Methods 0.000 description 4
- 230000011664 signaling Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 230000006872 improvement Effects 0.000 description 3
- 230000001131 transforming effect Effects 0.000 description 3
- 229910003460 diamond Inorganic materials 0.000 description 2
- 239000010432 diamond Substances 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 230000011218 segmentation Effects 0.000 description 2
- 102000005717 Myeloma Proteins Human genes 0.000 description 1
- 108010045503 Myeloma Proteins Proteins 0.000 description 1
- 240000007594 Oryza sativa Species 0.000 description 1
- 235000007164 Oryza sativa Nutrition 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000001174 ascending effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 235000009566 rice Nutrition 0.000 description 1
- 238000010845 search algorithm Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/105—Selection of the reference unit for prediction within a chosen coding or prediction mode, e.g. adaptive choice of position and number of pixels used for prediction
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/109—Selection of coding mode or of prediction mode among a plurality of temporal predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/103—Selection of coding mode or of prediction mode
- H04N19/11—Selection of coding mode or of prediction mode among a plurality of spatial predictive coding modes
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
- H04N19/167—Position within a video image, e.g. region of interest [ROI]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/46—Embedding additional information in the video signal during the compression process
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/59—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial sub-sampling or interpolation, e.g. alteration of picture size or resolution
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
- H04N19/593—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Color Television Systems (AREA)
Abstract
图像编码和解码方法包括以下步骤:基于分量间预测模式列表和预定索引信息来确定色度分量块的分量间预测模式;基于所确定的分量间预测模式来确定用于色度分量块的分量间预测的参考样本;通过使用参考样本得到线性预测模型的参数;以及通过使用线性预测模型的参数对色度分量块进行分量间预测。
Description
技术领域
本公开内容涉及图像编码/解码方法和装置。
背景技术
通过去除时空冗余和视图间冗余来对视频图像进行压缩和编码,所述视频图像可以通过通信线路传输或者以适合于存储介质的形式存储。
近来,在各种应用领域中对例如HD(高清)图像和UHD(超高清)图像的高分辨率和高质量图像的需求增加。由于随着图像数据变得高分辨率和高质量,与现有图像数据相比,数据量相对增加,因此在通过使用例如现有有线和无线宽带电路的介质来传输图像数据或者通过使用现有存储介质来存储图像数据时,传输费用和存储费用增加。可以利用高效图像压缩技术来解决由于图像数据变得高分辨率和高质量而生成的这些问题。
存在各种技术,例如利用图像压缩技术根据当前图片的先前或后续图片来预测在当前图片中包括的像素值的帧间预测技术、通过使用当前图片中的像素信息来预测在当前图片中包括的像素值的帧内预测技术、将短符号分配给具有高出现频率的值并且将长符号分配给具有低出现频率的值的熵编码技术等,并且可以通过使用这些图像压缩技术来有效地压缩和传输或者存储图像数据。
另一方面,随着对高分辨率图像的需求的增加,对作为新图像服务的立体图像内容的需求也增加。已经讨论了用于有效地提供高分辨率和超高分辨率立体图像内容的视频压缩技术。
发明内容
技术问题
本公开内容寻求改进视频信号的编码效率。
本公开内容寻求提供以下方法中的至少一种:通过使用在更合适的位置处的亮度分量的参考样本来得到线性预测模型的方法、得到用于在亮度参考样本中排除异常值的线性预测模型的方法、以及用于通过分量间预测和/或相应的块边界而获得的预测块(预测单元)的平滑方法。
本公开内容还寻求提供一种在不发送各种分量间预测模式的索引信息的情况下在解码器中得到分量间预测模式的过程。
在颜色分量间预测编码/解码中,本公开内容寻求通过考虑参考样本的位置和样本值来提供更适合的参考样本,并且通过使用所确定的参考样本来提供更适合的线性预测模型。
本公开内容寻求提供一种得到针对亮度/色度分量块的帧内预测模式的方法。
技术方案
根据本公开内容的图像编码/解码方法和装置可以:基于分量间预测模式列表和预定索引信息来确定色度分量块的分量间预测模式、基于所确定的分量间预测模式来确定用于色度分量块的分量间预测的参考样本、通过使用所述参考样本来得到线性预测模型的参数、以及通过使用线性预测模型的参数对色度分量块执行分量间预测。
在根据本公开内容的图像编码/解码方法和装置中,分量间预测模式列表可以被配置有k个分量间预测模式。
在根据本公开内容的图像编码/解码方法和装置中,确定参考样本可以对用于分量间预测的参考样本进行下采样、通过比较经下采样的参考样本之间的大小将经下采样的参考样本分类成多个组并且计算属于每组的全部或部分参考样本的平均值。
在根据本公开内容的图像编码/解码方法和装置中,可以针对特定位置处的参考样本选择性地执行下采样。
在根据本公开内容的图像编码/解码方法和装置中,可以基于关于色度分量块或与色度分量块对应的亮度分量块中的至少一个的编码信息来确定特定位置。
在根据本公开内容的图像编码/解码方法和装置中,可以通过使用在竖直方向、水平方向或对角线方向中的至少一个方向上与特定位置处的参考样本相邻的邻近样本来执行下采样。
在根据本公开内容的图像编码/解码方法和装置中,可以基于亮度分量块的外围块的可用性、CTU相关参数或预定标志中的至少一个来执行下采样,并且该标志可以表示色度分量块的样本是否具有相对于亮度分量块的相应样本位置偏移了预定距离的位置。
在根据本公开内容的图像编码/解码方法和装置中,可以通过使用亮度分量块的帧内预测模式以及表示色度分量块的帧内预测模式的信息来得到色度分量块的帧内预测模式。
在根据本公开内容的图像编码/解码方法和装置中,可以基于配置有一个或更多个候选模式的帧内预测模式列表来得到亮度分量块的帧内预测模式。
在根据本公开内容的图像编码/解码方法和装置中,可基于配置有一个或更多个候选模式的帧内预测模式列表得到亮度分量块的帧内预测模式。
在根据本公开内容的图像编码/解码方法和装置中,可以限定m个帧内预测模式列表,并且在本文中,m可以是例如2、3或更大的整数。
在根据本公开内容的图像编码/解码方法和装置中,第一帧内预测模式列表的候选模式可以仅配置有默认模式,并且默认模式可以是为非定向模式的平面模式或DC模式中的任何一个。
在根据本公开内容的图像编码/解码方法和装置中,第二帧内预测模式列表的候选模式可以包括以下模式中的至少一种:亮度分量块的外围块的帧内预测模式、通过将值n添加至外围块的帧内预测模式或从外围块的帧内预测模式减去值n而得到的模式、竖直/水平模式或者通过将值n添加至竖直/水平模式或从竖直/水平模式减去值n而得到的模式。
在根据本公开内容的图像编码/解码方法和装置中,可以通过使用多个标志信息来选择性地使用多个帧内预测模式列表中的任何一个。
有利效果
由于本公开内容涉及用于通过使用图像分量间预测来对图像进行编码/解码的方法和装置,所以本公开内容寻求通过执行以下中的至少一个来改进图像分量间预测的性能:1)通过使用在更合适的位置处的亮度分量的参考样本来得到线性预测模型的处理,2)通过使用亮度参考样本中的考虑排除异常值的更合适的参考样本来得到线性预测模型的处理,3)用于通过分量间预测和/或相应的块边界而获得的预测块(预测单元)的平滑处理。平滑处理要增加与外围块的相关性并且去除不连续的边界。另外,本公开内容还可以包括4)在不发送各种分量间预测模式的索引信息的情况下在解码器中得到分量间预测模式的过程,并且本公开内容设法减少用于发送索引信息的信令比特的量。
在颜色分量间预测编码/解码中,可以通过考虑参考样本的位置和样本值来确定更适合的参考样本。可以通过使用所确定的参考样本来得到线性预测模型。通过线性预测模型,可以生成更有效的预测信号。另外,可以通过使用在不发送分量间预测模式的索引信息的情况下在解码器中得到模式的方法来减少由图像分量间预测生成的比特量。另外,通过对块边界的平滑滤波,可以减少视觉伪影并且可以提高编码效率。
关于分量间预测编码技术的性能改进的本公开内容还非常可能被包括在下一代标准中,并且预期被用作用于例如HD/UHD、360视频等的沉浸式媒体应用服务的新的视频编解码器以及相关产品。
附图说明
图1是示出根据本公开内容的实施方式的图像编码装置的框图。
图2是示出根据本公开内容的实施方式的图像解码装置的框图。
图3是与本公开内容有关的分量间预测编码/解码的框图。
图4至图16涉及分量间预测方法和滤波方法。
图17示出了按照应用本公开内容的实施方式的用于色度分量的编码块的帧内预测方法。
最佳实施方式
根据本公开内容的图像编码/解码方法和装置可以:基于分量间预测模式列表和预定索引信息来确定色度分量块的分量间预测模式、基于所确定的分量间预测模式来确定用于色度分量块的分量间预测的参考样本、通过使用所述参考样本来得到线性预测模型的参数、以及对色度分量块执行分量间预测。
在根据本公开内容的图像编码/解码方法和装置中,分量间预测模式列表可以被配置有k个分量间预测模式。
在根据本公开内容的图像编码/解码方法和装置中,确定参考样本可以对用于分量间预测的参考样本进行下采样、通过比较经下采样的参考样本之间的大小将经下采样的参考样本分类成多个组并且计算属于每组的全部或部分参考样本的平均值。
在根据本公开内容的图像编码/解码方法和装置中,可以针对特定位置处的参考样本选择性地执行下采样。
在根据本公开内容的图像编码/解码方法和装置中,可以基于关于色度分量块或与色度分量块对应的亮度分量块中的至少一个的编码信息来确定特定位置。
在根据本公开内容的图像编码/解码方法和装置中,可以通过使用在竖直方向、水平方向或对角线方向中的至少一个方向上与特定位置处的参考样本相邻的邻近样本来执行下采样。
在根据本公开内容的图像编码/解码方法和装置中,可以基于亮度分量块的外围块的可用性、CTU相关参数或预定标志中的至少一个来执行下采样,并且该标志可以表示色度分量块的样本是否具有相对于亮度分量块的相应样本位置偏移了预定距离的位置。
在根据本公开内容的图像编码/解码方法和装置中,可以通过使用亮度分量块的帧内预测模式以及表示色度分量块的帧内预测模式的信息来得到色度分量块的帧内预测模式。
在根据本公开内容的图像编码/解码方法和装置中,可以基于配置有一个或更多个候选模式的帧内预测模式列表来得到亮度分量块的帧内预测模式。
在根据本公开内容的图像编码/解码方法和装置中,可以基于配置有一个或更多个候选模式的帧内预测模式列表来得到亮度分量块的帧内预测模式。
在根据本公开内容的图像编码/解码方法和装置中,可以限定m个帧内预测模式列表,并且在本文中,m可以是例如2、3或更大的整数。
在根据本公开内容的图像编码/解码方法和装置中,第一帧内预测模式列表的候选模式可以仅配置有默认模式,并且默认模式可以是为非定向模式的平面模式或DC模式中的任何一个。
在根据本公开内容的图像编码/解码方法和装置中,第二帧内预测模式列表的候选模式可以包括以下模式中的至少一种:亮度分量块的外围块的帧内预测模式、通过将值n添加至外围块的帧内预测模式或从外围块的帧内预测模式减去值n而得到的模式、竖直/水平模式或者通过将值n添加至竖直/水平模式或从竖直/水平模式减去值n而得到的模式。
在根据本公开内容的图像编码/解码方法和装置中,可以通过使用多个标志信息来选择性地使用多个帧内预测模式列表中的任何一个。
本发明的实施方式
由于本公开内容可以作出各种改变且具有若干实施方式,因此将在图中说明并且详细描述特定实施方式。但并不旨在将本公开内容限于特定实施方式,并且应当理解,本公开内容包括包含在本公开内容的思想和技术范围中的所有变化、等同物或替代物。在描述每个图时,相似的附图标记用于相似的部件。
另外,可能使用诸如第一、第二等的术语来描述各种部件,但是部件不应受该术语限制。术语仅用于区分一个部件与其他部件。例如,在不超出本公开内容的权利的范围的情况下,第一部件可以被称为第二部件,类似地,第二部件也可以被称为第一部件。术语“和/或”包括多个相对输入项目的组合或多个相对输入项目的任何项目。
在部件被称为“链接”或“连接”至其他部件时,应当理解,该部件可以直接链接或连接至其他部件,但是其他部件可以存在于中间。另一方面,在部件被称为“直接链接”或“直接连接”至其他部件时,应当理解,中间不存在其他部件。
因为本申请中使用的术语仅用于描述特定实施方式,所以其不旨在限制本公开内容。单数的表达包括复数的表达,除非其在上下文中清楚地具有不同的含义。在本申请中,应当理解,诸如“包括”或“具有”等术语是指在说明书中输入的特性、数字、阶段,运动、部件、部分或其的组合的存在,但不排除提前添加一个或更多个其他特性、数字、阶段、运动、部件、部分或其组合的存在或可能性。
除非另外限定,否则本文所使用的所有术语——包括技术或科学术语——均与本公开内容所属领域的普通技术人员通常理解的含义相同。通常使用的并且在词典中限定的术语应当被解释为与相关技术具有相同的上下文含义,并且除非在本公开内容中明确限定,否则它们不应被解释为理想的或过于正式的。
在下文中,参照附图,将更详细地描述本公开内容的期望的实施方式。在下文中,在图中相同的附图标记用于相同的部件,并且省略对同一部件的重复描述。
图1示出了按照本公开内容的实施方式的编码装置的粗略框图。
参照图1,编码装置100可以包括:图片划分单元110、预测单元120、125、变换单元130、量化单元135、重排单元160、熵编码单元165、去量化单元140、逆变换单元145、滤波器单元150以及存储器155。
由于图1中所示的每个构建单元被独立地示出为表示图像编码装置中的不同特征功能,因此这可能意味着每个构建单元配置有单独的硬件。但是,由于是因为为了方便描述将每个构建单元列举为每个构建单元而包括每个构建单元,所以各构建单元中的至少两个构建单元可以被组合以构造一个构建单元,或者一个构建单元可以被分成多个构建单元以执行功能,并且每个构建单元的这样的集成实施方式和分开的实施方式也包括在本公开内容的权利的范围中,只要它们不超出本公开内容的实质。
另外,一些部件可以仅是用于改进性能的选择性部件,而不是在本公开内容中执行必要功能的必要组件。本公开内容可以通过仅包括实现本公开内容的实质所必需的构建单元而不包括仅用于性能改善的部件来实现,并且还在本公开内容的权利的范围中包括仅包括必要部件而不包括仅用于性能改善的选择性部件的结构。
图片划分单元110可以将输入图片分割成至少一个块。在这种情况下,块可以意指编码单元(CU)、预测单元(PU)或变换单元(TU)。可以基于四叉树、二叉树或三叉树中的至少一个来执行分割。四叉树是其中较高的块被分割成宽度和高度是较高的块的一半的4个较低的块的方法。二叉树是其中较高的块被分割成宽度或高度中的任何一个是较高的块的一半的2个较低的块。在二叉树中,通过上述(较高的块的高度减半的)基于二叉树的分割,块可以具有非方形形状以及方形形状。
下文中,在本公开内容的实施方式中,编码单元可以用作执行编码的单元,或者可以用作执行解码的单元。
预测单元120和125可以包括执行帧间预测的帧间预测单元120以及执行帧内预测的帧内预测单元125。可以确定针对预测单元是使用帧间预测还是执行帧内预测,并且可以确定根据每种预测方法的具体信息(例如帧内预测模式、运动矢量、参考图片、分量间预测模式的指示符、索引信息等)。在这种情况下,执行预测的处理单元可以不同于确定预测方法和具体内容的处理单元。例如,可以在预测单元中确定预测方法、预测模式等,并且可以在变换单元中执行预测。所生成的预测块与原始块之间的残差值(残差块)可以被输入至变换单元130。另外,可以将用于预测的预测模式信息、运动矢量信息、分量间预测模式的指示符、索引信息等与残差值在熵编码单元165中进行编码,并且发送至解码装置。在使用特定编码模式时,可以在不通过预测单元120和125生成预测块的情况下按原样编码原始块并且将其发送至解码单元。
帧间预测单元120可以基于当前图片的先前图片或后续图片中的至少一个图片的信息来预测预测单元,或者在一些情况下可以基于当前图片中被编码的一些区域的信息来预测预测单元。帧间预测单元120可以包括参考图片插值单元、运动预测单元以及运动补偿单元。
在参考图片插值单元中,可以从存储器155提供参考图片信息,并且可以以参考图片生成等于或小于整像素的像素信息。对于亮度像素,可以使用具有不同滤波器系数的基于DCT的8抽头插值滤波器以1/4像素为单位生成等于或小于整像素的像素信息。对于色度信号,可以使用具有不同滤波器系数的基于DCT的4抽头插值滤波器以1/8像素为单位生成等于或小于整像素的像素信息。
运动预测单元可以基于由参考图片插值单元插值的参考图片来执行运动预测。可以使用例如FBMA(基于全搜索的块匹配算法)、TSS(三步搜索)、NTS(新三步搜索算法)等的各种方法,作为用于计算运动矢量的方法。基于插值像素,运动矢量可以具有以1/2像素或1/4像素为单位的运动矢量值。在运动预测单元中,可以通过使运动预测方法不同来预测当前预测单元。可以使用例如跳过方法、合并方法、AMVP(高级运动矢量预测)方法等各种方法作为运动预测方法。
帧内预测单元125可以基于当前块周围的参考像素信息、当前图片中的像素信息来生成预测单元。在由于当前预测单元中的外围块是执行帧间预测的块,所以参考像素是执行帧间预测的像素时,可以通过替换为执行外围帧内预测的块的参考像素信息来使用在执行帧间预测的块中包括的参考像素。换言之,在参考像素不可用时,可以通过替换为可用参考像素中的至少一个参考像素来使用不可用参考像素信息。
在帧内预测中,预测模式可以具有在执行预测时使用根据预测方向的参考像素信息的定向预测模式和不使用定向信息的非定向模式。用于预测亮度分量的模式可以与用于预测色度分量的模式不同,并且可以通过使用用于预测亮度分量的帧内预测模式或者预测的/重建的亮度分量来预测色度分量。
帧内预测可以通过分量间预测来执行。在通过分量间预测执行帧内预测时,可以不通过预测模式来执行帧内预测。在执行分量间预测时,这可以表示生成了通过使用用于预测的分量(第一分量)来预测的分量(第二分量)的预测单元。在这种情况下,第一分量可以是亮度分量,第二分量可以是色度分量。可以基于分量间预测模式的指示符、索引信息来确定分量间预测。在这种情况下,可以通过熵编码对分量间预测模式的指示符和索引信息进行编码。
通过预测模式执行帧内预测的方法可以包括:在根据帧内预测模式将AIS(自适应帧内平滑)滤波器应用于参考像素之后生成预测块。应用于参考像素的AIS滤波器的类型可以不同。可以根据当前预测单元周围的预测单元中的帧内预测模式来预测当前预测单元中的帧内预测模式,以执行帧内预测方法。在通过使用根据外围预测单元预测的模式信息来预测当前预测单元中的预测模式时,如果当前预测单元的帧内预测模式与外围预测单元的帧内预测模式相同,则可以通过使用预定标志信息来发送当前预测单元的帧内预测模式与外围预测单元的帧内预测模式相同的信息并且如果当前预测单元的帧内预测模式与外围预测单元的帧内预测模式不同,则可以通过执行熵编码来对当前块的帧内预测模式信息进行编码。
另外,可以生成包括残差值信息的残差块,该残差值是在预测单元120和125中生成的预测单元与原始块之间的差值。生成的残差块可以被输入至变换单元130。
变换单元130可以通过使用例如DCT、DST等的变换类型来变换包括残差数据的残差块。在该情况下,可以基于用于生成残差块的预测单元中的帧内预测模式来确定变换类型。
量化单元135可以对在变换单元130中被变换到频域的值进行量化。根据块或者根据图像的重要性,可以改变量化系数。在量化单元135中计算出的值可以被提供给去量化单元140和重排单元160。
重排单元160可以对量化后的残差值的系数值执行重排。重排单元160可以通过系数扫描方法将二维块形式的系数改变为一维矢量形式。例如,在重排单元160中,DC系数到高频域的系数可以通过使用预定的扫描类型来进行扫描,并且可以将其改变为一维矢量形式。
熵编码单元165可以基于由重排单元160计算的值来执行熵编码。例如,熵编码可以使用各种编码方法,例如指数哥伦布(Exponential Golomb)、CAVLC(Context-AdaptiveVariable Length Coding,上下文自适应可变长度编码)和CABAC(Context-AdaptiveBinary Arithmetic Coding,上下文自适应二进制算术编码)。
熵编码单元165可以编码来自重排单元160以及预测单元120和125的各种信息,例如编码单元中的残差系数信息和块类型信息、分量间预测模式的指示符、索引信息、预测模式信息、分割单元信息、预测单元信息和传输单元信息、运动矢量信息、参考帧信息、块的插值信息、滤波信息等。
在熵编码单元165中,可以对在重排单元160中输入的编码单元中的系数值进行熵编码。
在去量化单元140和逆变换单元145中,在量化单元135中量化的值被去量化,并且在变换单元130中变换的值被逆变换。在去量化单元140和逆变换单元145中生成的残差值可以通过与预测单元组合来生成重建块,该预测单元通过在预测单元120和125中包括的运动预测单元、运动补偿单元和帧内预测单元被预测。
滤波器单元150可以包括以下中的至少一个:去块滤波器、偏移修改单元和ALF(Adaptive Loop Filter,自适应环路滤波器)。
去块滤波器可以去除由重建图片中的块之间的边界而生成的块失真。可以基于在块中所包括的若干列或行中包括的像素来确定是否将去块滤波器应用于当前块,以确定是否将执行去块。在将去块滤波器应用于块时,可以根据所需的去块滤波的强度来应用强滤波器或弱滤波器。另外,在应用去块滤波器时,在执行竖直滤波和水平滤波的情况下可以并行地处理水平方向滤波和竖直方向滤波。
对于执行去块的图像,偏移修改单元可以以像素为单位修改与原始图像的偏移。可以使用将包括在图像中的像素划分成一定数目的区域、确定将执行偏移的区域并且将偏移应用于相应区域的方法或者通过考虑每个像素的边缘信息来应用偏移的方法来对特定图片执行偏移修改。
可以基于将经滤波的重建图像与原始图像进行比较的值来执行ALF(自适应环路滤波)。在将包括在图像中的像素划分为预定组并且确定将应用于相应组的一个滤波器之后,可以针对每个组来区分地执行滤波。与是否将应用ALF有关的信息可以针对亮度信号按编码单元(CU)传输,并且将应用的ALF滤波器的形状和滤波器系数可以根据每个块而不同。另外,不管要应用的块的特征如何,都可以应用相同形状(固定形状)的ALF滤波器。
存储器155可以存储在滤波器单元150中计算的重建的块或图片,并且可以在执行帧间预测时将所存储的重建的块或图片提供给预测单元120和125。
图2示出了按照本公开内容的实施方式的解码装置的粗略框图。
参照图2,解码装置200可以包括:熵解码单元210、重排单元215、去量化单元220、逆变换单元225、预测单元230和235、滤波器单元240以及存储器245。
因为图2中所示的每个构建单元被独立地示出为表示解码装置中的不同特征功能,所以这可能意味着每个构建单元被配置有单独的硬件。但是,由于是因为为了方便描述将每个构建单元列举为每个构建单元而包括每个构建单元,所以各构建单元中的至少两个构建单元可以被组合以构造一个构建单元,或者一个构建单元可以被分成多个构建单元以执行功能,并且每个构建单元的这样的集成实施方式和分开的实施方式也包括在本公开内容的权利的范围中,只要它们不超出本公开内容的实质。
熵解码单元210可以对输入比特流执行熵解码。例如,对于熵解码,可以应用例如指数哥伦布(Exponential Golomb)、CAVLC(上下文自适应可变长度编码)和CABAC(上下文自适应二进制算术编码)的各种方法。
在熵解码单元210中,可以对与在编码装置中执行的帧内预测和帧间预测有关的信息进行解码。
重排单元215可以对在熵解码单元210中熵解码的比特流执行重排。以一维矢量形式表示的系数可以被重建为二维块形式的系数,并且可以被重排。在重排单元215中,可以提供与在编码装置中执行的系数扫描有关的信息,并且可以基于在相应的编码装置中执行的扫描次序以逆扫描方法来执行重排。
去量化单元220可基于重排的块的量化参数和系数值来执行去量化。
逆变换单元225可以以预定变换类型对去量化的变换系数进行逆变换。在这种情况下,变换类型可以基于关于以下内容的信息中的至少一个来确定:预测模式(帧间/帧内预测)、块的大小/形状、帧内预测模式、分量类型(亮度/色度分量)、分割类型(QT、BT、TT等)、分量间预测模式的指示符、索引信息等。
预测单元230和235可以基于与熵解码单元210中提供的预测块生成有关的信息以及存储器245中提供的预解码的块或图片信息来生成预测块。
预测单元230和235可以包括:预测单元确定单元、帧间预测单元和帧内预测单元。预测单元确定单元可以:接收从熵解码单元210输入的各种信息,例如预测单元信息、与帧内预测方法的帧内预测模式有关的信息、与帧间预测方法的运动预测有关的信息、分量间预测模式的指示符、索引信息等;对当前编码单元(CU)中的预测单元进行分类、以及确定预测单元执行帧间预测还是帧内预测。通过使用由编码装置提供的当前预测单元的帧间预测所需的信息,帧间预测单元230可以基于包括当前预测单元的当前图片的先前图片或后续图片中的至少一个中包括的信息来对当前预测单元执行帧间预测。替选地,可以基于在包括当前预测单元的当前图片中预重建的一些区域的信息来执行帧间预测。为此,可以将预重建区域的一部分添加至参考图片列表。
为了执行帧间预测,可以基于编码单元来确定在相应编码单元中包括的预测单元中的运动预测方法是跳过模式、合并模式、AMVP模式还是当前图片参考模式。
帧内预测单元235可以基于当前图片中的像素信息来生成预测块。在预测单元是执行帧内预测的预测单元时,可以基于由编码装置提供的预测单元中的分量间预测模式的指示符和索引信息、预测模式信息等来执行帧内预测。帧内预测单元235可以包括自适应帧内平滑(AIS)滤波器、参考像素插值单元和DC滤波器。作为对当前块的参考像素执行滤波的部分,可以通过根据当前预测单元中的预测模式确定是否应用滤波器来应用AIS滤波器。可以通过使用由编码装置提供的预测单元中的预测模式以及AIS滤波器信息来对当前块的参考像素执行AIS滤波。在当前块的预测模式是不执行AIS滤波的模式时,可以不应用AIS滤波器。
在预测单元中的预测模式是基于对参考像素进行插值的像素值执行帧内预测的预测单元时,参考像素插值单元可以对参考像素进行插值以便以等于或小于整数值的像素为单位生成参考像素。在当前预测单元的预测模式是在不对参考像素进行插值的情况下生成预测块的预测模式时,可以不对参考像素进行插值。在当前块的预测模式是DC模式时,DC滤波器可以通过滤波来生成预测块。
可以将重建的块或图片提供至滤波器单元240。滤波器单元240可以包括去块滤波器、偏移修改单元和ALF。
可以由编码装置提供关于是否将去块滤波器应用于相应的块或图片的信息,以及关于在应用去块滤波器时应用强滤波器还是弱滤波器的信息。解码装置的去块滤波器可以接收由编码装置提供的与去块滤波器有关的信息,并且在解码装置中对相应的块执行去块滤波。
偏移修改单元可以基于在编码时应用于图像的偏移修改的类型、偏移值信息等,对重建的图像执行偏移修改。
可以基于由编码器提供的关于是否应用ALF的信息、ALF系数信息等将ALF应用于编码单元。这样的ALF信息可以通过被包括在特定参数集中来提供。
存储器245可以存储重建的图片或块以用作参考图片或参考块,并且还可以将重建的图片提供至输出单元。
图3是与本公开内容有关的分量间预测编码/解码的框图。
参照图3,根据本公开内容的编码和解码方法以及装置可以包括:得到分量间预测模式S310、配置参考样本S320、得到线性预测模型S330、以及生成分量间预测样本S340以对当前块执行图像分量间预测编码或解码。
另一方面,在下述实施方式中,编码信息可以包括块大小/块形状、块的可用性、划分类型、划分的数目、分量类型、预测模式、关于帧内预测模式的信息、帧间模式、运动信息、变换类型、变换跳过模式、关于非零残差系数的信息、扫描次序、颜色格式、环路内滤波器信息等。块大小可以表达为以下中的任何一个:宽度或高度、宽度和高度的最小值/最大值、宽度和高度的和、属于块的样本的数目等。可以通过考虑块位置、并行处理区域的范围、解码顺序等来确定块的可用性。预测模式可以意指表示帧内模式或帧间模式的信息。关于帧内预测模式的信息可以包括关于帧内预测模式是否为非定向模式、帧内预测模式是否为竖直/水平模式、帧内预测模式的方向性、在编码/解码装置中预定义的帧内预测模式的数目等的信息。帧间模式可以意指表示合并/跳过模式、AMVP模式或当前图片参考模式的信息。当前图片参考模式意指通过使用当前图片的预重建区域来预测当前块的方法。当前图片可以是当前块所属的图片。可以将当前图片添加至用于帧间预测的参考图片列表,并且可以将当前图片布置在参考图片列表中的短期参考图片或长期参考图片之后。运动信息可以包括预测方向标志、运动矢量、参考图片索引等。
在编码或解码时,输入和重建的图像可以具有M个分量(通道)。重建的图像可以包括以下中的任何一个:由预测单元预测的图像、将残差图像添加至预测图像/从预测图像中减去残差图像的图像以及在添加/减去之后应用环路内滤波器的图像。M可以是例如1、2、3、4或更大的整数。M的值可以是在编码器/解码器中预定义的固定的值,或者可以基于编码信息可变地或选择性地确定。
例如,输入和重建的图像可以是具有1个分量的灰度图像。
替选地,输入和重建的图像可以是具有3个分量的RGB图像。在这种情况下,第一分量可以是R图像,第二分量可以是G图像,并且第三分量可以是B图像。替选地,输入和重建的图像可以是具有3个分量的YUV图像。在这种情况下,第一分量可以是Y图像,第二分量可以是U图像,并且第三分量可以是V图像。替选地,输入和重建的图像可以是具有4个分量的RGB+深度图像。输入和重建的图像可以是具有4个分量的YUV+深度图像。替选地,输入图像和重建的图像的分量可以被子采样。输入和重建的图像可以是RGB 4:4:4。输入和重建的图像可以是YUV 4:4:4。输入和重建的图像可以是YUV 4:2:2。输入和重建的图像可以是YUV 4:2:0。
图像分量间预测可以通过使用预定的参考样本来得到线性模型,并且通过使用该线性模型根据亮度分量的解码信号生成色度分量的预测信号。本文中,参考样本可以是(1)在图像编码器/解码器中预先约定的固定位置。替选地,(2)可以基于编码信息可变地确定参考样本,或者(3)可以在编码器中对用于指定参考样本的信息进行编码并且用信号表示该信息。可以基于上述(1)至(3)实施方式中的至少两个的组合来确定参考样本。通过上述实施方式,可以确定参考样本的位置、数目、范围、长度等。
另外,在得到线性模型时,还可以使用特定样本的亮度信号与色度信号之间的关系。另外,可能需要关于各种分量间预测模式的索引信息的传输。
在得到分量间预测模式S310中,可以通过使用以下中的至少一种或更多种方法来得到当前块的分量间预测模式:配置分量间预测模式列表、预测模式信息的熵编码和解码以及在解码器中得到分量间预测模式。
具体地,在得到当前块的图像分量间预测模式时,可以配置分量间预测模式列表。可以通过帧内预测模式列表来配置分量间预测模式列表。替选地,可以以在编码/解码装置中预定义的表格形式来配置分量间预测模式列表。
分量间预测模式列表可以包括N(正数)个分量间预测模式。N可以是整数,例如1、2、3、4或更大的整数。N的值可以是在编码器/解码器中预定义的固定的值,或者可以基于上述编码信息可变地或选择性地确定。例如,可以根据当前块和/或外围块的位置、大小/形状、可用性或划分技术等来选择性地或可变地确定N个分量间预测模式。替选地,N可以在编码器中编码并且被用信号表示。用信号表示可以在以下中的至少一个的级别中执行:视频序列、图片、切片、瓦片或预定部分区域(例如,CTU行、CTU、CU、PU、TU)。
在N为3时,分量间预测模式列表可以包括3个分量间预测模式。在各分量间预测模式被称为第一分量间预测模式、第二分量间预测模式、第三分量间预测模式时,可以将第一分量间预测模式分类为使用左外围块的预测模式,可以将第二分量间预测模式分类为使用上外围块的预测模式,并且可以将第三分量间预测模式分类为使用左外围块和上外围块的预测模式。在N小于3时,可以使用第一分量间模式、第二分量间模式和第三分量间模式中的一些来配置分量间预测模式列表。
例如,可以如表1中那样配置具有3个分量间预测模式的分量间预测模式列表。
[表1]
替选地,可以如表2中那样配置具有4个分量间预测模式的分量间预测模式列表。
[表2]
在得到针对当前块的图像分量间预测模式时,可以执行针对预测模式信息的熵编码和/或解码。可以执行针对分量间预测模式的指示符的熵编码和解码。在指示符是“第一值”时,可以执行分量间预测。第一值可以是整数,例如0、1或更大的整数。另一方面,在指示符是“第二值”时,可以不执行分量间预测。本文中,第二值可以是不同于第一值的整数。
可以执行针对索引信息的熵编码和解码。本文中,索引信息可以包括指定分量间预测模式列表中的至少一个分量间预测模式的信息。
分量间预测模式的指示符可以是索引信息。例如,在分量间预测模式列表索引信息是指定分量间预测模式列表中的一个模式的第一索引信息时,这可以意味着分量间预测模式的指示符是第一值。
熵编码和/或解码可以通过基于指示符或索引信息生成二进制符号来执行。二进制符号可以通过二值化方法生成。对于二值化方法,可以使用截断一元二值化、固定长度二值化、截断莱斯(TR)二值化、K阶指数哥伦布二值化或固定长度二值化等。可以通过预先约定的固定二值化方法来选择二值化方法,或者可以基于上述编码信息来可变地或自适应地选择二值化方法。
如表1所示,在3个分量间预测模式的索引信息的情况下,可以通过使用截断一元二值化来生成二进制符号,并且可以对所生成的二进制符号执行熵编码和解码。
替选地,如表2所示,在4个分量间预测模式的索引信息的情况下,可以通过使用固定长度二值化来生成二进制符号,并且可以对所生成的二进制符号执行熵编码和解码。
可以通过以下中的至少一种或更多种方法来执行针对所生成的二进制符号的熵编码和解码:CABAC、CAVLC、霍夫曼编码和旁路编码。
在得到针对当前块的图像分量间预测模式时,可以在解码器中得到分量间预测模式。
在解码器中得到分量间预测模式时,解码器可以选择多个分量间预测模式之一。多个分量间预测模式可以包括在上述分量间预测模式列表中。
本文中,多个分量间预测模式的参考样本的区域可以彼此不同。在参考样本的区域不同时,这可能意味着以下中的至少一个或更多个可以不同:参考样本的位置、数目、大小或形状或者属于参考样本的区域的样本线的数目或范围。参考样本的大小和形状可以表示为:宽度、高度、宽度和高度的比率、宽度和高度的和,或宽度和高度的乘积等。
例如,参照图4,可以预定义3个分量间预测模式,并且分量间预测模式的参考样本区域可以彼此不同。第一分量间预测模式可以是使用左参考样本区域和上参考样本区域的模式,第二分量间预测模式可以是使用左参考样本区域的模式,并且第三分量间预测模式可以是使用上参考样本区域的模式。第一分量间预测模式还可以包括左上参考样本区域。根据第二分量间预测模式的左参考样本区域的长度可以与根据第一分量间预测模式的左参考样本区域的长度相同或比其更长。换言之,除根据第一分量间预测模式的左参考样本区域之外,根据第二分量间预测模式的左参考样本区域还可以包括具有预定长度的附加区域。本文中,可以基于与当前块/相应块相邻的右上区域中的样本是否可用来确定预定长度。类似地,根据第三分量间预测模式的上参考样本区域的长度可以与根据第一分量间预测模式的上参考样本区域的长度相同或比其更长。换言之,除根据第一分量间预测模式的上参考样本区域之外,根据第三分量间预测模式的上参考样本区域还可以包括具有预定长度的附加区域,并且可以基于与当前块/相应块相邻的左下区域中的样本是否可用来确定预定长度。
可以选择多个分量间预测模式之一作为预先约定的固定模式,或者可以基于上述编码信息可变地选择多个分量间预测模式之一。
替选地,可以基于指示符或索引信息中的至少一个来执行选择。例如,可以选择由索引信息指定的模式作为分量间预测模式。在该情况下,编码装置选择多个分量间预测模式中的最优模式,并且可以通过如图4所示的第一分量的相应块的参考样本与第二分量的当前块的参考样本之间的成本比较来执行该选择。在这种情况下,成本计算可以是以下中的一个:SAD(绝对差之和)、SATD(绝对变换差之和)、MR-SAD(均值去除-SAD)和SSIM(结构相似性)。
例如,编码/解码装置可以选择正整数N个分量间预测模式中具有最小MR-SAD的分量间预测模式。替选地,可以选择正整数N个分量间预测模式中具有最小SAD的分量间预测模式。替选地,可以选择正整数N个分量间预测模式中具有最小SATD的分量间预测模式。
在解码器中得到分量间预测模式时,解码装置可以通过使用选择的分量间预测模式来执行分量间预测。可以通过指示符来确定是否执行分量间预测。本文中,如上所述,指示符可以成为分量间预测模式的索引信息。例如,在分量间预测模式列表的索引信息作为指示符起作用时,可以通过由索引信息指定的模式来执行分量间预测。
在对当前块执行图像分量间预测编码和/或解码时,配置参考样本S320可以通过使用以下的至少一种或更多种方法来确定用于分量间预测的参考样本:单个参考样本集,多个参考样本集或下采样。
在分量间预测中,在假定要用于预测的分量是第一分量并且要预测的分量是第二分量时,可以使用第一分量的相应块来预测第二分量的当前块。例如,在第一分量是亮度分量并且第二分量是色度分量时,第一分量的相应块可以是与当前块(色度块)对应的亮度块。
参考样本可以被配置有一条或更多条样本线,或者可以具有例如四边形、三角形、菱形或梯形等形状。在参考样本被配置有多条样本线时,样本线的数目可以是2、3、4或更大。该数目可以是预定义的固定值,或者可以基于上述编码信息而被可变地确定。
图8示出了参考样本以样本线(参考样本集)的形式形成。参照图8,对于分量间预测,当前块可以选择性地使用在左/上方向上相邻的第一参考样本至第四参考样本中的至少一个。替选地,通过将参考样本分类到左侧和上侧,可以选择性地使用在左侧方向或上方方向中的任何一个方向上相邻的第一参考样本至第四参考样本中的至少一个。
该选择可以通过预先约定的固定位置(第一参考样本和第二参考样本、第一参考样本和第三参考样本等)来确定,或者可以根据上述编码信息来可变地确定。例如,根据外围块的可用性,可以存在以下限制:在左外围块不可用时仅使用除与左侧相邻的参考样本之外的参考样本。例如,可以存在以下限制:在上外围块不可用时仅使用除与上方相邻的参考样本之外的参考样本。
替选地,在第一参考样本至第四参考样本中,左侧方向上的可用参考样本的数目可以不同于上方方向上的可用参考样本的数目。例如,可以存在以下限制:在左侧方向上使用n个参考样本(例如,第一参考样本至第三参考样本)并且在上方方向上使用m个参考样本(例如,第一参考样本)。本文中,n可以不限于3并且可以是整数,例如1、2、4或更大的整数。m可以不限于1并且可以是整数,例如2、3、4或更大的整数。但是,n可以大于m,或者相反,m可以设置为大于n。参考样本集可以是用于分量间预测的预定义区域中的参考样本。参考样本集可以包括以下中的至少一个的外围块:第一分量的相应块或第二分量的当前块。外围块可以包括第一分量的相应块或第二分量的当前块的上方、下方、左侧、右侧、左下方、左上方、右上方或右下方中的至少一个。参考样本集的形状可以被配置有一条或更多条样本线,或者可以具有例如四边形、三角形、菱形或梯形等的形状。在被配置有多条样本线时,样本线可以彼此相邻或者可以具有预定的距离t。t可以是自然数,例如1、2、3、4或更大的自然数。t可以是预先约定的固定值或者可以基于上述编码信息而被可变地确定。
在由参考样本集配置参考样本时,参考样本集中的全部或部分样本可以用作参考样本,或者对参考样本集中的全部或部分样本进行滤波的值可以用作参考样本。在这种情况下,可以基于以下中的至少一个来执行滤波:插值滤波器、加权平均滤波器、下采样滤波器。
在仅使用参考样本集的一些样本时,可以通过预先约定的固定方法来选择一些样本,或者可以基于上述编码信息来选择一些样本。例如,可以通过以下来进行确定:第一分量的相应块的宽度或高度与第二分量的当前块的宽度或高度的比率或块大小的比率等。具体地,在比率为1:r或r:1时,可以仅使用参考样本集中具有r或r/2的样本间隔单位的距离的一些样本来配置参考样本。
在配置针对当前块的特定图像分量间预测中的参考样本时,可以通过使用单个参考样本集来配置参考样本。
单个参考样本集可以意指一个参考样本集被用于特定分量间预测。
第一分量的相应块或第二分量的当前块中的至少一个的外围区域可以是单个参考样本集。
例如,图5(GA)所示的参考样本的位置可以是单个参考样本集。替选地,图6(GA)所示的参考样本的位置可以是单个参考样本集。替选地,图7(GA)所示的参考样本的位置可以是单个参考样本集。
与第一分量的相应块或第二分量的当前块中的至少一个隔开一定距离的外围区域可以是单个参考样本集。
例如,图5(NA)所示的参考样本的位置可以是单个参考样本集。替选地,图6(NA)所示的参考样本的位置可以是单个参考样本集。替选地,图7(NA)所示的参考样本的位置可以是单个参考样本集。
在配置针对当前块的特定图像分量间预测中的参考样本时,可以通过使用多个参考样本集来配置参考样本。在这种情况下,多个参考样本集可以意指两个或更多个参考样本集被用于特定分量间预测。
本文中,当在特定分量间预测中通过使用多个参考样本集来配置参考样本时,可以选择性地使用多个参考样本集中的至少一个。可以选择预先约定的固定参考样本集,或者可以基于上述编码信息自适应地选择预先约定的固定参考样本集。例如,可以根据例如块大小、第一分量相应块的帧内预测参考样本的位置等的条件自适应地选择多个参考样本集。
例如,在存在特定分量间预测的2个参考样本集并且它们分别地对应于在图5(GA)和图5(NA)的位置处的参考样本集时,可以选择与第一分量相应块的帧内预测参考样本的位置接近的参考样本集。换言之,在第一分量相应块的帧内预测参考样本为图8所示的第二参考样本时,可以在特定分量间预测中配置图5(NA)的位置处的参考样本。
例如,在存在特定分量间预测的2个参考样本集并且它们分别对应于图6(GA)和图7(GA)的位置处的参考样本集时,当块的宽度大于高度时,可以选择图6(GA)的位置处的参考样本集,否则,可以选择图6(GA)的位置处的参考样本集。
例如,在存在特定分量间预测的2个参考样本集并且它们对应于图6(GA)和图7(GA)的位置处的参考样本集时,当块的宽度大于高度时,可以选择图6(GA)的位置处的参考样本集,否则,可以选择在图7(GA)的位置处的参考样本集。相反,当块的宽度小于高度时,可以选择在图7(GA)的位置处的参考样本集(左参考样本集),否则,可以选择在图6(GA)的位置处的参考样本集(上参考样本集)。当块的宽度与高度相同时,可以使用左参考样本集和上参考样本集。
在配置针对当前块的图像分量间预测中的参考样本时,可以通过使用下采样来配置参考样本。
在这种情况下,在第一分量的相应块的大小与第二分量的当前块的大小不相同时,可以对第一分量的参考样本执行下采样。
可以通过将下采样滤波器应用于特定位置处的参考样本来执行下采样。在本文中,在特定位置处的参考样本可以包括相对于起点的位置处的参考样本以预定的样本间间隔(k)定位的多个参考样本。该样本间间隔(k)可以包括例如1、2、3、4或更大的自然数。
在分量间预测模式是使用上参考样本和左参考样本的模式(在下文中,称为LT模式)时,可以分别在上方和左侧上限定起点的位置。在这种情况下,可以将下采样滤波器应用于相对于上方起点的位置处的参考样本在右方向上以预定的样本间间隔定位的一个或更多个参考样本。类似地,下采样滤波器可以应用于相对于左侧起点的位置处的参考样本在下方向上以预定的样本间间隔定位的一个或更多个参考样本。
在分量间预测模式是使用上参考样本的模式(在下文中,称为T模式)时,可以将下采样滤波器应用于相对于上方起点的位置处的参考样本在右方向上以预定的样本间间隔定位的一个或更多个参考样本。类似地,在分量间预测模式是使用左参考样本的模式(在下文中,称为L模式)时,可以将下采样滤波器应用于相对于左侧起点的位置处的参考样本在下方向上以预定的样本间间隔定位的一个或更多个参考样本。
例如,假设第一分量块的左上样本的位置为(0,0)。在这种情况下,在起点的位置处的参考样本的坐标为(1,-1)并且k为2时,在特定位置处的参考样本可以包括具有例如(1,-1)、(3,-1)、(5,-1)、(7,-1)等的坐标的样本。替选地,在起点的位置处的参考样本的坐标为(-1,2)并且k为4时,特定位置处的参考样本可以包括具有例如(-1,2)、(-1,6)等坐标的样本。
以下中的至少一个可以是在编码/解码装置中预先约定的固定值,或者可以基于上述编码信息被可变地确定:起点的位置、样本间间隔或者应用了下采样滤波器的特定位置处的参考样本的数目。具体地,其可以通过以下中的至少一个来确定:分量块的大小、分量块的外围块的可用性或分量间预测模式。块的大小被可以表达为以下中的任一个:宽度或高度、宽度和高度的最小值/最大值、宽度和高度的和、属于块的样本的数目等。
例如,在分量块的宽度(或高度)为4的情况下,在分量块的左外围块和上外围块中的至少一个不可用或者分量间预测模式为T模式(或L模式)时,待下采样的参考样本可以包括在分量块的上方(或左侧)定位的所有参考样本。另一方面,在分量块的左外围块和上外围块可用并且分量间预测模式是LT模式时,待下采样的参考样本可以包括在起点的位置处的参考样本和相对于起点的位置处的参考样本以预定的样本间间隔定位的一个或更多个参考样本。本文中,在假设第一分量块的左上样本的位置为(0,0)时,上起点的位置可以为以下中的任何一个:(1,-1)、(2,-1)、(3,-1)或(4,-1)(或者,左起点的位置为以下中的任何一个:(-1,1)、(-1,2)、(-1,3)或(-1,4))并且在右方向(或者下方向)上样本间间隔可以是例如2、3、4、5或更大的整数。但是它不限于此,起点的位置的x坐标可以是大于或等于5的整数。
例如,在块的宽度(或高度)为8或更大的情况下,当分量块的左侧和上方外围块中的至少一个不可用或分量间预测模式为T模式(或L模式)时,要被下采样的参考样本可以包括在起点的位置处的参考样本和相对于起点的位置处的参考样本以预定的样本间间隔定位的一个或更多个参考样本。本文中,当假设第一分量块的左上样本的位置是(0,0)时,起点的位置可以是(1,-1)、(2,-1)、(3,-1)或(4,-1)中的任何一个(或者(-1,1)、(-1,2)、(-1,3)或(-1,4)中的任何一个),并且样本间间隔可以是诸如2、3、4、5或更大的整数。但是其并不限于此,并且起点的位置的x坐标可以是大于或等于5的整数。
可替选地,当分量块的左侧和顶部外围块可用并且分量间预测模式为LT模式时,要被下采样的参考样本可以包括在起点的位置处的参考样本和相对于起点的位置处的参考样本以预定的样本间间隔定位的一个或更多个参考样本。本文中,当假设第一分量块的左上样本的位置是(0,0)时,顶部起点的位置可以是(2,-1)、(3,-1)或(4,-1)中的任何一个,左侧起点的位置可以是(-1,2)、(-1,3)或(-1,4)中的任何一个,并且样本间间隔可以是诸如4、5或更大的整数。但是其并不限于此,并且起点的位置的x坐标或y坐标中的至少一个可以是大于或等于5的整数。
在T模式(或L模式)下,可以与LT模式的情况不同地设置起点的位置和/或样本间间隔。例如,T模式(或L模式)的起点的位置可以比LT模式下的起点的位置更靠近第一分量块的左上样本的位置。T模式(或L模式)的样本间间隔可以小于LT模式下的样本间间隔。可替选地,相反地,T模式(或L模式)的起点的位置可以比LT模式下的起点的位置更远离第一分量块的左上样本的位置,并且T模式(或L模式)的样本间间隔可以大于LT模式的样本间间隔。在LT模式下,顶部参考样本的样本间间隔可以与左侧参考样本的样本间间隔不同地确定。例如,当分量块的宽度大于高度时,顶部参考样本的样本间间隔可以被设置为大于左侧参考样本的样本间间隔。
通过上述方法,可以指定应用下采样滤波器的顶部/左侧参考样本的位置,并且在下文中,将描述具体的下采样方法。
可以通过使用要被下采样的样本(下文称为目标样本)和与目标样本相邻的一个或更多个样本(下文称为相邻样本)来执行下采样。换句话说,目标样本可以意指根据上述方法指定的参考样本。相邻样本可以包括在竖直方向、水平方向或对角线方向中的至少一个方向上与目标样本相邻的样本。本文中,相邻样本可以包括分开确定的距离k的样本以及与目标样本相邻并相连的样本。k可以包括诸如1、2、3、4或更大的整数。k可以是预先约定的固定值,或者可以基于编码信息可变地确定。例如,当第一分量相应块的大小与第二分量当前块的大小的比率为r∶1时,预定距离k可以是r或r/2。相邻样本的数量可以是诸如1、2、3、4、5、6或更大的自然数。该数量可以是预先约定的固定值,或者可以基于编码信息可变地确定。
下采样可以通过用于下采样的样本的加权平均值、平均值、最大值、最小值、模式或滤波值中的至少一个来执行。本文中,加权平均值可以意指通过将每个样本乘以权重并对它们进行平均而获得的值。
可以基于要用于下采样的相邻样本的数量来确定要应用于每个样本的权重。
例如,当使用1个相邻样本时,可以以1∶1的权重比率执行目标样本与相邻样本的加权平均。可替选地,当使用2个相邻样本时,可以以2∶1的权重比率执行目标样本与相邻样本的加权平均。可替选地,当使用4个相邻样本时,可以以4∶1的权重比率执行目标样本与相邻样本的加权平均。可替选地,当使用5个相邻样本时,对于加权平均,目标样本的权重可以是2,并且相邻样本的权重可以是1或2中的至少一个。在这种情况下,根据目标样本的位置,相邻样本的权重可以不同。
在下文中,描述根据相邻样本的数量的下采样方法。
1.第一下采样方法
第一下采样是使用4个相邻样本的情况,并且可以通过4个相邻样本与目标样本的加权平均值来执行第一下采样。本文中,目标样本与相邻样本的权重比率可以是4∶1。4个相邻样本可以包括与目标样本在顶部、底部、左侧和右侧方向上相邻的样本。本文中,相邻样本可以与目标样本相邻,或者可以位于以样本的间隔为单位与目标样本间隔1的位置处。
可以通过使用以下等式1来执行第一下采样。
[等式1]
Ds_Sample[x][y]=(1*Sample[SubWidth*x][SubHeight*y-1]+1*Sample[SubWidth*x-1][SubHeight*y]+4*Sample[SubWidth*x][SubHeight*y]+1*Sample[SubWidth*x+1][SubHeight*y]+1*Sample[SubWidth*x][SubHeight*y+1]+4)>>3
本文中,Ds_Sample可以是下采样的样本,Sample可以是要用于下采样的样本,x和y可以是表示样本位置的坐标,以及SubWidth和SubHeight可以是由色度格式确定的值。例如,当色度格式为4∶2∶0时,SubWidth和SubHeight中的每一个的值都可以为2,以及当色度格式为4:2∶2时,SubWidth的值可以为2,以及SubHeight的值可以为1。另外,对于除色度格式为4∶2∶0、4∶2∶2的情况之外的其他情况,SubWidth和SubHeight中的每一个的值都可以为1。
2.第二下采样方法
第二下采样是使用2个相邻样本的情况,并且可以通过2个相邻样本与目标样本的加权平均值来执行第二下采样。本文中,目标样本与相邻样本的权重比率可以是2∶1。2个相邻样本可以在竖直方向或水平方向上与目标样本相邻。具体地,在竖直方向上相邻的情况下,相邻样本可以分别位于目标样本的顶部和底部位置处,以及在水平方向上相邻的情况下,相邻样本可以分别位于目标样本的左侧和右侧位置处。在这种情况下,相邻样本可以与目标样本相邻,或者可以位于以样本的间隔为单位与目标样本间隔1的位置处。
当相邻样本在竖直方向上相邻时,可以通过使用等式2来执行第二下采样。
[等式2]
Ds_Sample[x][y]=(1*Sample[SubWidth*x][SubHeight*y-1]+2*Sample[SubWidth*x][SubHeight*y]+1*Sample[SubWidth*x][SubHeight*y+1]+2)>>2
在这种情况下,由于Ds_Sample、Sample、x、y、SubWidth、SubHeight与上述相同,因此省略详细描述。
当相邻样本在水平方向上相邻时,可以通过使用等式3来执行第二下采样。
[等式3]
Ds_Sample[x][y]=(1*Sample[SubWidth*x-1][SubHeight*y]+2*Sample[SubWidth*x][SubHeight*y]+1*Sample[SubWidth*x+1][SubHeight*y]+2)>>2
在这种情况下,由于Ds_Sample、Sample、x、y、SubWidth、SubHeight与上述相同,因此省略详细描述。
3.第三下采样方法
第三下采样是使用5个相邻样本的情况,并且可以通过5个相邻样本与目标样本的加权平均值来执行第三下采样。本文中,目标样本的权重可以是2,以及相邻样本的权重可以是2或1。在这种情况下,相邻样本可以与目标样本相邻,或者可以位于以样本的间隔为单位与目标样本间隔1的位置处。
第三下采样可以通过使用下面的等式4来执行。
[等式4]
Ds_Sample[x][y]=(1*Sample[SubWidth*x-1][SubHeight*y]+1*Sample[SubWidth*x-1][SubHeight*y+1]+2*Sample[SubWidth*x][SubHeight*y]+2*Sample[SubWidth*x][SubHeight*y+1]+1*Sample[SubWidth*x+1][SubHeight*y]+1*Sample[SubWidth*x+1][SubHeight*y+1]+4)>>3
在这种情况下,由于Ds_Sample、Sample、x、y、SubWidth、SubHeight与上述相同,因此省略详细描述。
4.第四下采样方法
第四下采样是使用1个相邻样本的情况,并且可以通过1个相邻样本与目标样本的加权平均值来执行第四下采样。本文中,目标样本与相邻样本的权重可以是1∶1。
1个相邻样本可以基于目标样本在竖直方向或水平方向上相邻。具体地,在竖直方向上相邻的情况下,相邻样本可以位于目标样本的底部位置处,以及在水平方向上相邻的情况下,相邻样本可以位于目标样本的右侧位置处。在这种情况下,相邻样本可以与目标样本相邻,或者可以位于以样本的间隔为单位与目标样本间隔1的位置处。
当相邻样本在竖直方向上相邻时,可以通过使用以下等式5来执行第四下采样。
[等式5]
Ds_Sample[x][y]=(1*Sample[SubWidth*x][SubHeight*y]+1*Sample[SubWidth*x][SubHeight*y+1]+1)>>1
在这种情况下,由于Ds_Sample、Sample、x、y、SubWidth、SubHeight与上述相同,因此省略详细描述。
当相邻样本在水平方向上相邻时,可以通过使用等式6来执行第四下采样。
[等式6]
Ds_Sample[x][y]=(1*Sample[SubWidth*x][SubHeight*y]+1*Sample[SubWidth*x+1][SubReight*y]+1)>>1
在这种情况下,由于Ds_Sample、Sample、x、y、SubWidth、SubHeight与上述相同,因此省略详细描述。
如上所述,当第一分量的相应块的大小与第二分量的当前块的大小不同时,可以执行下采样。
另一方面,基于预定标志,可以选择性地使用上述下采样方法中的至少一种。本文中,标志可以表示第二分量的样本是否具有相对于对应的第一分量的样本位置以第一分量的样本为单位向下偏移0.5的位置。该标志可以在解码装置中基于编码信息得到,或者可以在编码装置中被编码并用信号表示。在下文中,标志是第一值的情况称为第一情况,否则称为第二情况。
对于每种情况,基于CTU(编码树单元)相关参数或外围块的可用性中的至少一个,可以选择性地使用第一下采样方法至第四下采样方法中的至少一种。
当CTU相关参数是“第一值”时,它可以表示以下任何一种情况:(1)目标样本属于不同于分量块或分量块的外围块的CTU的情况,(2)相邻样本或目标样本位于CTU边界上的情况,或(3)相邻样本或目标样本以样本的间隔为单位与CTU边界分开1的情况。本文中,第一值可以是诸如0、1或更大的整数。例如,当CTU相关参数是第一值时,目标样本可以属于不同于分量块的CTU。
例如当其是第一种情况并且CTU相关参数是第一值时,可以应用第二下采样方法。但是,当左侧和顶部外围块不可用时,可以不应用下采样。
当其是第一种情况并且当CTU相关参数不是第一值时,如果左侧和顶部外围块可用,则可以应用第一下采样方法,以及如果左侧和顶部外围块不可用,则可以应用第四下采样方法或者可以应用根据以下等式7的下采样方法。
[等式7]
Ds_Sample[x][y]=(1*Sample[SubWidth*x][SubHeight*y+1]+2*Sample[SubWidth*x][SubHeight*y]+1*Sample[SubWidth*x][SubHeight*y+1]+2)>>2
根据等式7,可以通过将1个相邻样本的值相加两次来计算加权平均值。本文中,由于Ds_Sample、Sample、x、y、SubWidth、SubHeight与上述相同,因此省略详细描述。
当其是第二种情况并且CTU相关参数是第一值时,可以应用第二下采样。但是,当左侧和顶部外围块不可用时,可以不应用下采样。
当其是第二种情况并且CTU相关参数不是第一值时,如果左侧和顶部外围块可用,则可以应用第三下采样,以及如果左侧和顶部外围块不可用,则可以应用第四下采样。
对于每种情况,可以基于目标样本是否位于块边界上或外围块的可用性中的至少一个来选择性地使用第一下采样方法至第四下采样方法中的至少一个。
例如,当其是第一种情况并且目标样本未位于块边界上时,可以应用第一下采样。
当其是第一种情况并且目标样本位于块边界上时,可以应用第一下采样方法或第二下采样方法,或者可以不应用下采样。可替选地,具体地,当分量块的左侧和顶部外围块可用时,可以应用第一下采样方法,并且当分量块的左侧或顶部外围块中只有任何一个外围块可用时,可以应用第二下采样方法,并且当分量块的左侧和顶部外围块不可用时,可以不应用下采样。
当其是第二种情况并且目标样本未位于块边界上时,可以应用第三下采样方法。
当其是第二种情况并且目标样本位于块边界上时,可以应用第三或第四下采样方法,或者可以不应用下采样。具体地,当分量块的左外围块可用时,可以应用第三下采样方法,以及当分量块的左外围块不可用时,可以应用第四下采样方法。
下采样可以通过使用N抽头滤波器来执行。本文中,N可以是诸如2、3、4、5、6或更大的整数。例如,可以通过使用3抽头滤波器来执行下采样。可替选地,可以通过使用6抽头滤波器来执行下采样。
当执行下采样时,可以在CTU(编码树单元)、切片和瓦片中的至少一个的边界上不同地应用滤波器。例如,当块的顶部边界与CTU边界重合时,第一滤波器可以应用于块的顶部边界,否则,可以应用第二滤波器。
第一滤波器和第二滤波器可以具有不同的下采样方法(加权平均值、平均值、最大值、最小值、模式或滤波值)。另外,当第一滤波器和第二滤波器基于加权平均值时,相邻样本的数量或权重中的至少一个可以不同。另外,当第一滤波器和第二滤波器基于n抽头滤波器时,滤波器的抽头数、系数或强度中的至少一个可以不同。具体地,当第一滤波器是n抽头滤波器并且第二滤波器意指m抽头滤波器时,n可以小于或等于m。例如,n可以是3并且m可以是6。
当在针对当前块的图像分量间预测中配置参考样本时,可以使用下采样的参考样本。要被下采样的参考样本可以通过使用单个参考样本集或多个参考样本集来配置。
在对当前块执行图像分量间预测编码和解码时,得到线性预测模型S330可以通过使用得到以下模型的至少一种或更多种方法来得到分量间预测模式中的线性预测模型:单个线性模型、多个线性模型和异常排除线性模型。
本文中,线性模型可以具有如下等式8中的关系。可以通过使用线性模型来得到线性预测模型,在该线性预测模型中,从第一分量的相应块的解码块生成第二分量的当前块的预测块。
本文中,解码块可以意指已经在用于当前块的编码(或解码)处理中被编码(或解码)的块。
[等式8]
Predc2=α*Recc1+β
在等式中,PredC2是第二分量的当前块的预测块,PredC1是第一分量的相应块的解码块,以及α和β是线性模型的参数。
本文中,线性模型的参数α和β可以通过使用第一分量的相应块的参考样本或第二分量的当前块的参考样本中的至少一个来得到。
在这种情况下,线性回归方程可以用于得到线性模型的参数,并且可以通过下面的等式9得到。
[等式9]
在等式中,C1(n)是第一分量的相应块的参考样本或参考样本集,C2(n)是第二分量的当前块的参考样本或参考样本集,以及N是参考样本的数量。
在这种情况下,直线方程可以用于得到线性模型的参数,并且可以通过以下等式10得到。
[等式10]
在等式中,C2A和C2B是第二分量的当前块的参考样本中的与位置A和B相对应的参考样本的值,以及C1A和C1B是第一分量的参考样本中的与位置A和B相对应的参考样本的值。
在得到针对当前块的图像分量间预测中的线性预测模型时,可以使用单个线性模型。
本文中,单个线性模型可以意指从图像分量间预测的参考样本得到的一个线性模型。
例如,如图10所示,可以从图像分量间预测的参考样本集得到通过线性回归方程的线性模型。
例如,如图11所示,可以从图像分量间预测的参考样本中的与两个位置相对应的样本得到通过直线方程的线性模型。在这种情况下,图像分量间预测的参考样本的两个位置可以是第一分量的参考样本中具有最小值和最大值的位置。
例如,通过直线方程的线性模型可以从图像分量间预测的参考样本中的与两个位置相对应的样本得到。在这种情况下,图像分量间预测的参考样本的两个位置可以是第二分量的参考样本中具有最小值和最大值的位置。
在得到针对当前块的图像分量间预测中的线性预测模型时,可以使用多个线性模型。
本文中,多个线性模型可以意指从图像分量间预测的参考样本得到的两个或更多个线性模型。本文中,在得到多个线性模型时,可以基于参考样本的分量值对参考样本进行分类。
例如,在得到2个线性模型时,可以通过使用两个预定义的第一分量值来对参考样本进行分类。例如,在得到如图12所示的2个线性模型时,可以通过使用第一分量的参考样本的平均值来对参考样本进行分类。在这种情况下,可以通过使用单个线性模型的方法从分离的参考样本得到多个线性模型。
在得到针对当前块的图像分量间预测中的线性预测模型时,可以得到异常排除线性模型。
在得到图像分量间预测中的异常排除线性模型时,可以通过使用异常排除线性回归方程来得到线性模型。在这种情况下,可以排除在用于线性回归方程的参考样本中被判断为异常的参考样本,并且可以使用异常被判断为排除的参考样本,通过线性回归方程来得到线性模型。
本文中,在得到线性模型时,异常排除可以意指如下方法:移除至少一个或更多个可以被判断为异常的参考样本的方法,或者通过使用多个参考样本的操作处理来得到异常可以被判断为排除的参考样本的方法。例如,在用于线性回归方程的参考样本中,在第一分量的值具有最小值和最大值的位置处的参考样本可以被判断为异常。例如,在用于线性回归方程的参考样本中,在第二分量的值具有最小值和最大值的位置处的参考样本可以被判断为异常。
在得到图像分量间预测中的异常排除线性模型时,可以通过使用异常排除直线方程来得到线性模型。在这种情况下,可以排除参考样本中被判断为异常的参考样本,并且可以使用异常被判断为排除的参考样本,通过直线方程来得到线性模型。
例如,如在图13中,参考样本中的第一分量的值具有最小值和最大值的位置处的参考样本可以被判断为异常。例如,参考样本中的第二分量的值具有最小值和最大值的位置处的参考样本可以被判断为异常。
例如,如图14所示,参考样本可以被分类为两个类别,并且可以针对每个类别计算第一分量参考样本值的平均值和第二分量参考样本值的平均值。参考样本的分组可以基于参考样本之间的大小的比较来执行。例如,p个参考样本可以以升序布置,并且在这种情况下,它们可以被分类为配置有(p/2)个较高参考样本的第一组和配置有(p/2)个较低参考样本的第二组。本文中,第一组可以意指配置有相对小的值的最小值组,以及第二组可以意指配置有相对大的值的最大值组。可以通过使用属于第一组和第二组的所有或仅一些参考样本来计算平均值。本文中,一些参考样本可以是属于第一组的参考样本中与相对小的值相对应的n个参考样本,并且可以是属于第二组的参考样本中与相对大的值相对应的n个参考样本。n的值可以是诸如2、3、4或更大的整数。等式10中的线性预测模型的参数可以通过使用来自第一组的平均值和来自第二组的平均值来得到。通过参考样本的这样的分组和平均运算,可以产生排除异常的效果。
可替选地,可以针对每个类别排除被判断为异常的参考样本,并且可以执行平均运算。多个线性模型可以用于分离参考样本。在得到异常排除线性模型时,可以使用单个线性模型或多个线性模型。
在对当前块执行图像分量间预测编码和/或解码时,生成分量间预测样本S340可以通过使用生成分量间预测样本和预测样本滤波的至少一种或更多种方法来生成当前块的预测样本。
在生成针对当前块的分量间预测样本时,可以通过使用线性预测模型的参数和第一分量的相应块来生成第二分量的当前块的预测样本。
当第一分量的相应块的大小不同于第二分量的当前块的大小时,可以执行子采样。可以对第一分量的预解码的相应块执行子采样。
可以通过使用要被子采样的样本(下文称为子目标样本(sub_target sample))和与至少一个子目标样本相邻的样本(下文称为子相邻样本(sub_neighboring sample))来执行子采样。子相邻样本可以包括在竖直、水平或对角线方向的至少一个方向上与子目标样本相邻的样本。本文中,子相邻样本可以包括分开确定的距离k的样本以及与子目标样本相邻并相连的样本。k可以包括诸如1、2、3、4或更大的自然数。k可以是预先约定的固定值,或者可以基于编码信息可变地确定。子相邻样本的数量可以是诸如1、2、3、4、5、6或更大的自然数。该数量可以是预先约定的固定值,或者可以基于编码信息可变地确定。例如,当第一分量相应块的大小与第二分量当前块的大小之比为r:1时,预定距离k可以是r或r/2。
子采样可以通过要用于子采样的样本的加权平均值、平均值、最大值、最小值、模式或滤波值中的至少一个来执行。本文中,加权平均值可以表示通过使用将每个样本与权重相乘的值来计算平均值。
应用于每个样本的权重可以基于要用于子采样的子相邻样本的数量来确定。
例如,当使用1个子相邻样本时,可以以1:1的权重比率执行子目标样本和子相邻样本的加权平均。可替选地,当使用2个子相邻样本时,可以以2:1的权重比率执行子目标样本与子相邻样本的加权平均。可替选地,当使用4个子相邻样本时,可以以4:1的权重比率执行子目标样本和子相邻样本的加权平均。可替选地,当使用5个子相邻样本时,对于加权平均,子目标样本的权重可以是2,以及子相邻样本的权重可以是1或2中的至少一个。在这种情况下,根据子目标样本的位置,子相邻样本的权重可以不同。
子采样与应用于第一分量块的参考样本的下采样方法可以以相同的方式执行,并且在这种情况下,分别地,目标样本可以被视为子目标样本,以及相邻样本可以被视为子相邻块。
图15可以是生成图像分量间预测样本的示例。具体地,示出了因为第一分量相应块的大小与第二分量当前块的大小不同,所以对第一分量相应块执行子采样,并且然后通过将线性预测模型应用于子采样的块来预测第二分量当前块。
在生成针对当前块的分量间预测样本时,可以执行对分量间预测样本的滤波。
可以执行对第二分量的预测块边界的滤波。
当通过分量间预测生成第二分量的当前块时,可以如图16所示对块边界执行平滑滤波。在这种情况下,可以通过使用下面的等式11来执行滤波。
[等式11]
pc2[0][0]=(rc2[-1][0]+2*pc2[0][0]+rc2[0][-1]+2)>>2
pc2[x][0]=(rc2[x][-1]+3*pc2[x][0]+2)>>2
pc2[0][y]=(rc2[-1][y]+3*pc2[0][y]+2)>>2
pc2意指第二分量的预测块,以及rc2意指当前块的外围参考样本。
可以对第二分量的预测块的所有或一些样本执行滤波。滤波可以选择性地仅应用于第二分量的预测块中的顶部样本线或左侧样本线。可以基于上述块属性(例如,大小、形状、宽度和高度的比率等)来执行选择。滤波器只是示例,并且可以不同地确定滤波器的类型。换句话说,滤波器的抽头数、滤波器系数、滤波器强度等可以被不同地确定。可以根据样本在第二分量的分量间预测块中的位置来应用不同的滤波器。滤波器可以应用于第二分量的分量间预测块中的1条、2条或更多条顶部/左侧样本线。第一滤波器和第二滤波器可以分别应用于第一样本线和第二样本线。第一滤波器和第二滤波器具有彼此不同的滤波器抽头数、滤波器强度或滤波器系数中的至少一个。可以通过考虑与第二分量的分量间预测块相邻的外围样本的变化来可变地确定滤波器的滤波器系数。外围参考样本或外围样本可以包括第二分量中的分量间预测块的左侧样本、顶部样本、左上样本或根据待滤波样本的位置(x坐标、y坐标)确定的样本中的至少一个或更多个。
仅当分量间预测模式的指示符是第一值时,才可以执行上述分量间预测。另一方面,当分量间预测模式的指示符是第二值时,可以不执行上述分量间预测,并且在这种情况下,表示色度分量的帧内预测模式的信息可以被分别用信号表示。色度分量的帧内预测模式可以基于用信号表示的信息来得到,并且色度分量的块可以基于得到的帧内预测模式来预测。将参照图17对其进行详细描述。
图17示出了按照应用本公开内容的实施方式的用于色度分量的编码块的帧内预测方法。
参照图17,可以得到亮度分量的编码块(下文称为亮度块)的帧内预测模式S1700。
可以基于帧内预测模式列表和索引信息来得到亮度块的帧内预测模式。本文中,帧内预测模式列表可以包括可以用作当前块的帧内预测模式的候选模式。所有或一些候选模式可以基于当前块的外围块来确定。
外围块可以意指与当前块的左侧、右侧、顶部、左下侧、左上、右下侧或右上侧中的至少一个相邻的块。当存在当前块的多个左侧块时,可以仅使用位于最顶部位置、中心位置或最底部位置中的至少一个的左侧块。可替选地,当存在多个顶部块时,可以仅使用位于最左侧位置、中心位置或最右侧位置中的至少一个的顶部块。外围块的数量可以是1、2、3、4、5或更大。该数量可以是编码器/解码器中预先定义的固定数量。该数量可以基于上述编码信息可变地确定。可替选地,该数量可以在编码器中编码并用信号表示。用信号表示可以以视频序列、图片、切片、瓦片或预定部分区域(例如,CTU行、CTU、CU、PU等)中的至少一个的级别执行。
可以基于以下中的至少一个来确定候选模式:(A)上述相邻块的帧内预测模式是否相同,(B)相邻块的帧内预测模式是否是定向模式,(C)第一相邻块的帧内预测模式是否大于第二相邻块的帧内预测模式,或者(D)相邻块之间的帧内预测模式之间的差异是否与预定阈值相同。阈值可以是属于从1到(NumIntraAngMode-1)的范围的任意自然数。NumIntraAngMode意指在编码/解码装置中预定义的定向模式的总数并且可以是65。
候选模式可以被配置有一个或更多个外围块的帧内预测模式、通过向外围块的帧内预测模式添加值n或从外围块的帧内预测模式减去值n而得到的模式或默认模式中的至少一种。本文中,n的值可以是诸如1、2、3或更大的整数。可以基于上述(A)至(D)中的至少一个来可变地确定n的值。默认模式可以包括平面模式或DC模式中的至少一种。
编码/解码装置可以定义m个帧内预测模式列表。本文中,m可以是1、2、3或更大。例如,假设m为3。在这种情况下,可以通过上述确定候选模式的方法来得到第一帧内预测模式列表。第二帧内预测模式列表可以通过上述确定候选模式的方法来得到,但是它可以不包括属于第一帧内预测模式列表的候选模式。第三帧内预测模式列表可以配置有其余模式,不包括属于第一帧内预测模式列表和第二帧内预测模式列表的候选模式。
亮度块可以选择性地使用多个帧内预测模式列表中的任何一个,并且对于它,可以使用多个标志信息。
例如,当第一标志是第一值时,可以使用第一帧内预测模式列表或第二帧内预测模式列表,以及当第一标志是第二值时,可以使用第三帧内预测模式列表。换句话说,第一标志可以表示是否使用第三帧内预测模式列表。当第一标志是第一值时,可以另外地用信号表示第二标志。当第二标志是第一值时,可以使用第一帧内预测模式列表,否则,可以使用第二帧内预测模式列表。
可替选地,当第一标志是第一值时,可以使用第一帧内预测模式列表,以及当第一标志是第二值时,可以使用第二帧内预测模式列表或第三帧内预测模式列表。换句话说,第一标志可以表示是否使用第一帧内预测模式列表。如果第一标志是第二值,则可以另外地用信号表示第二标志。当第二标志是第一值时,可以使用第二帧内预测模式列表,否则,可以使用第三帧内预测模式列表。
在示例中,根据上述确定候选模式的方法的亮度块的帧内预测模式列表可以被配置如下。
第一帧内预测模式列表可以仅被配置有默认模式。例如,第一帧内预测模式列表可以仅被配置有平面模式或者仅配置有DC模式。
当第一帧内预测模式列表包括多个默认模式时,可以用信号表示指定多个默认模式中的任何一个的第一索引信息。由第一索引信息指定的候选模式可以被设置为亮度块的帧内预测模式。但是,当第一帧内预测模式列表中仅包括一种默认模式时,可以省略用信号表示第一索引信息。在这种情况下,当根据上述标志使用第一帧内预测模式列表时,亮度块的帧内预测模式可以被设置为第一帧内预测模式列表的候选模式。
第二帧内预测模式列表的候选模式可以从编码/解码装置中预定义的帧内预测模式中除默认模式之外的其余模式中选择。本文中,候选模式的数量可以是1、2、3、4、5、6或更大。
具体地,可以通过考虑左侧块的帧内预测模式(candIntraPredModeA)和顶部块的帧内预测模式(candIntraPredModeB)是否相同以及candIntraPredModeA和candIntraPredModeB是否是非定向模式来确定MPM候选。
例如,当candIntraPredModeA和candIntraPredModeB相同并且candIntraPredModeA不是非定向模式时,当前块的MPM候选可以包括candIntraPredModeA、(candIntraPredModeA-n)、(candIntraPredModeA+n)或非定向模式中的至少一个。本文中,n可以是诸如1、2或更大的整数。非定向模式可以包括平面模式或DC模式中的至少一种。在示例中,亮度块的候选模式可以如下面的表3那样确定。表3中的索引指定候选模式的位置或优先级,但其并不限于此。
[表3]
可替选地,当candIntraPredModeA和candIntraPredModeB不相同并且candIntraPredModeA和candIntraPredModeB都不是非定向模式时,当前块的MPM候选可以包括candIntraPredModeA、candIntraPredModeB、(maxAB-n)、(maxAB+n)、(minAB-n)、(minAB+n)或非定向模式中的至少一个。本文中,maxAB和minAB可以分别意指candIntraPredModeA和candIntraPredModeB的最大值和最小值,并且n可以是诸如1、2或更大的整数。非定向模式可以包括平面模式或DC模式中的至少一种。在示例中,候选模式可以基于candIntraPredModeA与candIntraPredModeB之间的差值(D)如下面的表4那样确定。
[表4]
可替选地,当candIntraPredModeA和candIntraPredModeB不相同并且仅candIntraPredModeA和candIntraPredModeB中的任何一个是非定向模式时,亮度块的候选模式可以包括maxAB、(maxAB-n)、(maxAB+n)或非定向模式中的至少一种。本文中,maxAB可以意指candIntraPredModeA和candIntraPredModeB的最大值,以及n可以是诸如1、2或更大的整数。非定向模式可以包括平面模式或DC模式中的至少一种。在示例中,当前块的MPM候选可以如下面的表5那样确定。表5中的索引指定了MPM候选的位置或优先级,但其并不限于此。
[表5]
索引 | MPM候选 |
0 | maxAB |
1 | 2+((maxAB+61)%64) |
2 | 2+((maxAB-1)%64) |
3 | 2+((maxAB+60)%64) |
4 | 2+(maxAB%64) |
可替选地,当candIntraPredModeA和candIntraPredModeB不相同并且candIntraPredModeA和candIntraPredModeB都是非定向模式时,亮度块的候选模式可以包括非定向模式、竖直模式、水平模式、(竖直模式-m)、(竖直模式+m)、(水平模式-m)或(水平模式+m)中的至少一种。本文中,m可以是诸如1、2、3、4或更大的整数。非定向模式可以包括平面模式或DC模式中的至少一种。在示例中,亮度块的候选模式可以如下面的表6那样确定。表6中的索引指定候选模式的位置或优先级,但其并不限于此。例如,索引1或最大索引可以被分配给水平模式。另外,候选模式可以包括对角线模式(例如,模式2、模式34、模式66)、(对角线模式-m)或(对角线模式+m)中的至少一种。
[表6]
索引 | MPM候选 |
0 | INTRA_DC |
1 | 竖直模式 |
2 | 水平模式 |
3 | (竖直模式-4) |
4 | (竖直模式+4) |
如上所述,第二帧内预测模式列表可以包括多个候选模式。可以用信号表示指定多个候选模式中的任何一个的索引信息。由用信号表示的索引信息指定的候选模式可以被设置为亮度块的帧内预测模式。但是,当没有根据上述标志使用第一帧内预测模式列表和第二帧内预测模式列表时,可以另外地用信号表示其余模式信息。其余模式信息可以指定除了属于第一帧内预测模式列表和第二帧内预测模式列表的候选模式之外的其余模式中的任何一种。由其余模式信息指定的模式可以被设置为亮度块的帧内预测模式。
参照图17,可以对表示色度分量的编码块(下文称为色度块)的帧内预测模式的信息进行解码S1710。
可以通过基于CABAC的熵解码来对信息进行解码,并且该信息可以具有0至4中的任何一个的值。本文中,熵解码可以包括如下表7中的逆二值化处理。
[表7]
intra_chroma_pred_mode的值 | 二进制字符串 |
0 | 100 |
1 | 101 |
2 | 110 |
3 | 111 |
4 | 0 |
参照图17,基于亮度块的预先得到的帧内预测模式和解码信息(intra_chroma_pred_mode),可以得到色度块的帧内预测模式S1720。例如,在intra_chroma_pred_mode为0的情况下,当亮度块的帧内预测模式是平面模式时,色度块的帧内预测模式可以被设置为右上方向上的对角线模式(模式66),否则,色度块的帧内预测模式可以被设置为平面模式。
可替选地,在intra_chroma_pred_mode为1的情况下,当亮度块的帧内预测模式是竖直模式(模式50)时,色度块的帧内预测模式可以被设置为右上方向上的对角线模式(模式66),否则,色度块的帧内预测模式可以被设置为竖直模式。
可替选地,在intra_chroma_pred_mode为2的情况下,当亮度块的帧内预测模式是水平模式(模式18)时,色度块的帧内预测模式可以被设置为右上方向上的对角线模式(模式66),否则,色度块的帧内预测模式可以被设置为水平模式。
可替选地,在intra_chroma_pred_mode为3的情况下,当亮度块的帧内预测模式是DC模式时,色度块的帧内预测模式可以被设置为右上方向上的对角线模式(模式66),否则,色度块的帧内预测模式可以被设置为DC模式。
可替选地,当intra_chroma_pred_mode为4时,色度块的帧内预测模式可以被设置为与亮度块的帧内预测模式相同。
参照图17,可以基于色度块的帧内预测模式对色度块进行帧内预测S1730。
具体地,基于色度块的帧内预测模式,可以确定色度块的外围区域中的参考区域。本文中,外围样本可以意指与色度块的左侧、顶部、左上、右上侧或右下侧中的至少一个相邻的区域。参考区域可以包括与色度块相邻的多条连续样本线中的至少一条。色度块可以仅涉及多条样本线中不邻接色度块的样本线。
可以基于所确定的参考区域的预重构样本来预测色度块的样本。
本公开内容的各种实施方式并未列举所有可能的组合,而是描述本公开内容的代表性方面,并且在各种实施方式中描述的事项可以独立地应用或者可以通过两个或更多个组合来应用。
另外,可以通过硬件、固件、软件或其组合等实现本公开内容的各种实施方式。对于通过硬件的实现,可以通过一个或更多个ASIC(专用集成电路)、DSP(数字信号处理器)、DSPD(数字信号处理装置)、PLD(可编程逻辑装置)、FPGA(现场可编程门阵列)、通用处理器、控制器、微控制器、微处理器等来执行所述实现。
本公开内容的范围包括在装置或计算机中执行根据各种实施方式的方法的动作的软件或机器可执行指令(例如,操作系统、应用、固件、程序等),以及存储这样的软件或指令等并且在装置或计算机中可执行的非暂态计算机可读介质。
工业适用性
如上所述的本公开内容的实施方式可以在用于视频或图像的解码/编码装置或方法等中使用。
Claims (10)
1.一种图像解码方法,包括:
基于分量间预测模式列表和预定索引信息来确定色度分量块的分量间预测模式,其中,所述分量间预测模式列表配置有k个分量间预测模式;
基于所述色度分量块的分量间预测模式来对用于所述色度分量块的分量间预测的参考样本进行下采样,所述参考样本属于与所述色度分量块相对应的亮度分量块的左侧相邻块和上侧相邻块中的至少一个;
通过在经下采样的参考样本之间比较样本值的大小,将经下采样的参考样本分类为第一组和第二组;
计算属于所述第一组的经下采样的参考样本的第一平均值以及属于所述第二组的经下采样的参考样本的第二平均值;
基于所述第一平均值和所述第二平均值来得到线性预测模型的参数;以及
基于所述线性预测模型的参数对所述色度分量块执行所述分量间预测。
2.根据权利要求1所述的方法,其中,对特定位置处的参考样本选择性地执行所述下采样。
3.根据权利要求2所述的方法,其中,基于与所述色度分量块或所述亮度分量块中的至少一个有关的编码信息,来确定所述特定位置。
4.根据权利要求3所述的方法,其中,通过使用在竖直方向、水平方向或对角线方向中的至少一个方向上与所述特定位置处的所述参考样本相邻的邻近样本来执行所述下采样。
5.根据权利要求4所述的方法,其中,基于以下中的至少一个来执行所述下采样:所述亮度分量块的相邻块的可用性、CTU相关参数或预定标志,并且
其中,所述标志表示所述色度分量块的样本是否具有相对于所述亮度分量块的相应样本位置偏移了预定距离的位置。
6.一种图像编码方法,包括:
基于分量间预测模式列表来确定色度分量块的分量间预测模式,其中,所述分量间预测模式列表配置有k个分量间预测模式;
基于所述色度分量块的分量间预测模式来对用于所述色度分量块的分量间预测的参考样本进行下采样,所述参考样本属于与所述色度分量块相对应的亮度分量块的左侧相邻块和上侧相邻块中的至少一个;
通过在经下采样的参考样本之间比较样本值的大小,将经下采样的参考样本分类为第一组和第二组;
计算属于所述第一组的经下采样的参考样本的第一平均值以及属于所述第二组的经下采样的参考样本的第二平均值;
基于所述第一平均值和所述第二平均值来得到线性预测模型的参数;以及
基于所述线性预测模型的参数对所述色度分量块执行所述分量间预测。
7.根据权利要求6所述的方法,其中,对特定位置处的参考样本选择性地执行所述下采样。
8.根据权利要求7所述的方法,其中,基于与所述色度分量块或所述亮度分量块中的至少一个有关的编码信息,来确定所述特定位置。
9.根据权利要求8所述的方法,其中,通过使用在竖直方向、水平方向或对角线方向中的至少一个方向上与所述特定位置处的所述参考样本相邻的邻近样本来执行所述下采样。
10.根据权利要求9所述的方法,其中,基于以下中的至少一个来执行所述下采样:所述亮度分量块的相邻块的可用性、CTU相关参数或预定标志,并且
其中,所述标志表示所述色度分量块的样本是否具有相对于所述亮度分量块的相应样本位置偏移了预定距离的位置。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202410416866.4A CN118175297A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
CN202410416561.3A CN118200545A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
CN202410416869.8A CN118200546A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
CN202410416531.2A CN118200544A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2018-0146571 | 2018-11-23 | ||
KR20180146571 | 2018-11-23 | ||
PCT/KR2019/016195 WO2020106117A1 (ko) | 2018-11-23 | 2019-11-22 | 영상 성분 간 예측 방법과 그를 이용한 영상 부호화 및 복호화 방법 및 장치 |
Related Child Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410416561.3A Division CN118200545A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
CN202410416866.4A Division CN118175297A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
CN202410416869.8A Division CN118200546A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
CN202410416531.2A Division CN118200544A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113170107A CN113170107A (zh) | 2021-07-23 |
CN113170107B true CN113170107B (zh) | 2024-04-30 |
Family
ID=70773925
Family Applications (5)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410416866.4A Pending CN118175297A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
CN201980077062.3A Active CN113170107B (zh) | 2018-11-23 | 2019-11-22 | 图像分量间预测方法和使用其的图像编码和解码方法及装置 |
CN202410416561.3A Pending CN118200545A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
CN202410416531.2A Pending CN118200544A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
CN202410416869.8A Pending CN118200546A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410416866.4A Pending CN118175297A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
Family Applications After (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410416561.3A Pending CN118200545A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
CN202410416531.2A Pending CN118200544A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
CN202410416869.8A Pending CN118200546A (zh) | 2018-11-23 | 2019-11-22 | 图像解码方法、图像编码方法和传输图像的比特流的方法 |
Country Status (5)
Country | Link |
---|---|
US (1) | US12081733B2 (zh) |
EP (2) | EP3886432B1 (zh) |
KR (1) | KR20200061309A (zh) |
CN (5) | CN118175297A (zh) |
WO (1) | WO2020106117A1 (zh) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11711528B2 (en) * | 2021-02-22 | 2023-07-25 | Alibaba Group Holding Limited | Systems and methods for liner model derivation |
US20220329813A1 (en) * | 2021-04-12 | 2022-10-13 | FG Innovation Company Limited | Device and method for coding video data |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107211124A (zh) * | 2015-01-27 | 2017-09-26 | 高通股份有限公司 | 适应性跨分量残差预测 |
CN107810635A (zh) * | 2015-06-16 | 2018-03-16 | Lg 电子株式会社 | 图像编译系统中基于照度补偿预测块的方法和设备 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20150048637A (ko) | 2013-10-28 | 2015-05-07 | 한국전자통신연구원 | 색 성분 간 예측 방법 및 장치 |
CN107079166A (zh) | 2014-10-28 | 2017-08-18 | 联发科技(新加坡)私人有限公司 | 用于视频编码的引导交叉分量预测的方法 |
US10455249B2 (en) * | 2015-03-20 | 2019-10-22 | Qualcomm Incorporated | Downsampling process for linear model prediction mode |
US10484712B2 (en) * | 2016-06-08 | 2019-11-19 | Qualcomm Incorporated | Implicit coding of reference line index used in intra prediction |
CN117221588A (zh) | 2016-06-22 | 2023-12-12 | Lx 半导体科技有限公司 | 图像编码/解码方法以及图像数据的传输方法 |
US10652575B2 (en) | 2016-09-15 | 2020-05-12 | Qualcomm Incorporated | Linear model chroma intra prediction for video coding |
KR102422506B1 (ko) | 2016-11-29 | 2022-07-20 | 한국전자통신연구원 | 영상 부호화/복호화 방법, 장치 및 비트스트림을 저장한 기록 매체 |
US10477240B2 (en) * | 2016-12-19 | 2019-11-12 | Qualcomm Incorporated | Linear model prediction mode with sample accessing for video coding |
WO2018116925A1 (ja) * | 2016-12-21 | 2018-06-28 | シャープ株式会社 | イントラ予測画像生成装置、画像復号装置、および画像符号化装置 |
US11025903B2 (en) * | 2017-01-13 | 2021-06-01 | Qualcomm Incorporated | Coding video data using derived chroma mode |
JP2021005741A (ja) * | 2017-09-14 | 2021-01-14 | シャープ株式会社 | 画像符号化装置及び画像復号装置 |
GB2567249A (en) * | 2017-10-09 | 2019-04-10 | Canon Kk | New sample sets and new down-sampling schemes for linear component sample prediction |
KR101956756B1 (ko) * | 2018-06-12 | 2019-03-11 | 광운대학교 산학협력단 | 성분 간 참조 기반의 비디오 신호 처리 방법 및 장치 |
-
2019
- 2019-11-22 EP EP19886160.1A patent/EP3886432B1/en active Active
- 2019-11-22 EP EP23218554.6A patent/EP4319164A3/en active Pending
- 2019-11-22 CN CN202410416866.4A patent/CN118175297A/zh active Pending
- 2019-11-22 CN CN201980077062.3A patent/CN113170107B/zh active Active
- 2019-11-22 KR KR1020190151696A patent/KR20200061309A/ko unknown
- 2019-11-22 CN CN202410416561.3A patent/CN118200545A/zh active Pending
- 2019-11-22 US US17/291,833 patent/US12081733B2/en active Active
- 2019-11-22 WO PCT/KR2019/016195 patent/WO2020106117A1/ko unknown
- 2019-11-22 CN CN202410416531.2A patent/CN118200544A/zh active Pending
- 2019-11-22 CN CN202410416869.8A patent/CN118200546A/zh active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107211124A (zh) * | 2015-01-27 | 2017-09-26 | 高通股份有限公司 | 适应性跨分量残差预测 |
CN107810635A (zh) * | 2015-06-16 | 2018-03-16 | Lg 电子株式会社 | 图像编译系统中基于照度补偿预测块的方法和设备 |
Non-Patent Citations (1)
Title |
---|
《Description of Core Experiment 3: Intra Prediction and Mode Coding》;Geert Van der Auwera等;JVET MEETING;第25-28页 * |
Also Published As
Publication number | Publication date |
---|---|
CN118175297A (zh) | 2024-06-11 |
EP3886432A4 (en) | 2022-08-17 |
EP4319164A2 (en) | 2024-02-07 |
EP4319164A3 (en) | 2024-03-27 |
CN118200545A (zh) | 2024-06-14 |
KR20200061309A (ko) | 2020-06-02 |
EP3886432A1 (en) | 2021-09-29 |
EP3886432B1 (en) | 2024-01-03 |
CN113170107A (zh) | 2021-07-23 |
WO2020106117A1 (ko) | 2020-05-28 |
CN118200544A (zh) | 2024-06-14 |
US20210392321A1 (en) | 2021-12-16 |
CN118200546A (zh) | 2024-06-14 |
US12081733B2 (en) | 2024-09-03 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11785257B2 (en) | Method and apparatus for processing video signal | |
US11700389B2 (en) | Method and apparatus for processing video signal | |
US11095892B2 (en) | Method and apparatus for processing video signal | |
US10904526B2 (en) | Method and apparatus for processing video signal | |
EP3876539B1 (en) | Method for encoding/decoding image signal, and apparatus therefor | |
CN112292863B (zh) | 基于分量之间的参考的视频信号处理方法及装置 | |
CN112740675B (zh) | 用于使用帧内预测对图像进行编码/解码的方法和装置 | |
CN114697679A (zh) | 图像解码方法、图像编码方法和包括比特流的设备 | |
CN113873242A (zh) | 用于对视频进行解码的方法和用于对视频进行编码的方法 | |
CN113965747A (zh) | 对视频进行解码或编码的方法和计算机可读介质 | |
CN111937381A (zh) | 使用帧内预测的图像编码/解码方法和装置 | |
US20230231993A1 (en) | Video encoding/decoding method and device | |
CN113170107B (zh) | 图像分量间预测方法和使用其的图像编码和解码方法及装置 | |
JP2024125421A (ja) | 画像の符号化/復号化方法及び装置 | |
CN112262576A (zh) | 残差系数编码/解码方法和装置 | |
KR102410326B1 (ko) | 영상 부호화/복호화 방법 및 장치 | |
KR20190092930A (ko) | 영상의 부호화/복호화 방법 및 장치 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |