CN117241032A - 采用多种采样格式的图像及其序列、视频压缩方法和装置 - Google Patents

采用多种采样格式的图像及其序列、视频压缩方法和装置 Download PDF

Info

Publication number
CN117241032A
CN117241032A CN202311360929.0A CN202311360929A CN117241032A CN 117241032 A CN117241032 A CN 117241032A CN 202311360929 A CN202311360929 A CN 202311360929A CN 117241032 A CN117241032 A CN 117241032A
Authority
CN
China
Prior art keywords
sampling
format
identification code
decoding
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202311360929.0A
Other languages
English (en)
Inventor
林涛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Tianhe Electronic Information Co ltd
Original Assignee
Shanghai Tianhe Electronic Information Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Tianhe Electronic Information Co ltd filed Critical Shanghai Tianhe Electronic Information Co ltd
Priority to CN202311360929.0A priority Critical patent/CN117241032A/zh
Publication of CN117241032A publication Critical patent/CN117241032A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/132—Sampling, masking or truncation of coding units, e.g. adaptive resampling, frame skipping, frame interpolation or high-frequency transform coefficient masking
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91—Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供了一种动态采用两种采样格式的图像、图像的序列、视频压缩方法和装置：图像、图像的序列、视频和各编码单元CU有两种分别具有两种不同采样格式的版本；在对一个CU进行编解码时，根据所述CU的固有数据特性，选择对所述CU的所述两个版本之一进行编解码。

Description

采用多种采样格式的图像及其序列、视频压缩方法和装置
本申请是下列原申请的的分案申请：
原申请的申请日：2017-03-12
原申请的申请号：2017101438888
原申请的发明创造名称：动态采用多种采样格式的数据压缩方法和装置
技术领域
本发明涉及一种对数据进行有损或无损压缩的编码及解码系统，特别是图像和视频数据的编码及解码的方法和装置。
背景技术
随着人类社会进入大数据、云计算、移动计算、云-移动计算、超高清（4K）和特超高清（8K）视频图像分辨率、4G/5G通讯、虚拟现实的时代，对各种数据，包括大数据、图像数据、视频数据，进行超高压缩比和极高质量的数据压缩成为必不可少的技术。
数据集是由数据元素（例如：字节、比特、像素）组成的集合。对一个排列成一定形状和具有一定元素数目（即具有一定采样格式）的数据集（例如：一个文件、一帧图像、一个视频序列）进行数据压缩的编码（以及相应的解码）时，通常把此数据集划分成若干具有预定形状和大小（即元素数目）的块的子集，称为编码块（从解码的角度也就是解码块，统称为编解码块），以编解码块为单位，一块一块进行编码或者解码。在任一时刻，正在编码中的编码块称为当前编码块。在任一时刻，正在解码中的解码块称为当前解码块。当前编码块或当前解码块统称为当前编解码块或简称为当前块。正在编码或者解码中的数据元素（简称为元素）称为当前编码数据元素或者当前解码数据元素，统称为当前数据元素，简称为当前元素。元素由N个分量（通常1≤N≤5）组成，因此数据集和编解码块也都由N个分量组成。例如，一帧图像的元素即像素排列成矩形形状，具有1920（宽度）x 1080（高度）的大小（分辨率），由3个分量组成：G（绿色）分量，B（蓝色）分量，R（红色）分量或Y（亮度）分量，U（Cb色度）分量，V（Cr色度）分量。
在现有技术中，作为编码对象的数据集和编解码块都只有一种固定的采样格式和大小。例如，对于计算机产生的含图形和文字的图像，通常采用一种称为4:4:4的采样格式，就是数据集的3个分量都具有同样的采样率和大小（即分量样值的数目）。对于摄像机摄取的自然图像和视频，通常采用一种称为4:2:0的采样格式，就是具有矩形形状和3个分量的数据集（如图像或视频）的2个分量（D分量和E分量）的采样率和尺寸分别是另一个分量（F分量）的四分之一。在这种情形，一个D分量D[i][j]和一个E分量E[i][j]对应于四个（2×2个）F分量F[2i][2j]，F[2i+1][2j]，F[2i][2j+1]，F[2i+1][2j+1]。如果F分量的分辨率是2M×2N，即数据集的F分量是F = {F[i][j]：i = 0～2M-1，j = 0～2N-1}，那么D分量和E分量的分辨率分别都是M×N，即数据集的D分量和E分量分别是D = {D[i][j]：i = 0～M-1，j =0～N-1}和E = {E[i][j]：i = 0～M-1，j = 0～N-1}。还有一种称为4:2:2的采样格式，就是具有矩形形状和3个分量的数据集（如图像或视频）的2个分量（D分量和E分量）的采样率和尺寸分别是另一个分量（F分量）的二分之一。在这种情形，在数据集（如图像或视频）的水平方向，一个D分量D[i][j]和一个E分量E[i][j]对应于两个（2×1个）F分量F[2i][j]和F[2i+1][j]。如果F分量的分辨率是2M×N，，即数据集的F分量是F = {F[i][j]：i = 0～2M-1，j =0～N-1}，那么D分量和E分量的分辨率分别都是M×N，即数据集的D分量和E分量分别是D ={D[i][j]：i = 0～M-1，j = 0～N-1}和E = {E[i][j]：i = 0～M-1，j = 0～N-1}。在采用YUV色彩格式的图像和视频中，以上所述F、D、E分量分别是Y、U、V分量。在采用RGB色彩格式的图像和视频中，以上所述F、D、E分量分别是G、B、R分量。
不同的采样格式是指数据集和/或编解码块的至少一个分量具有不同的采样率和大小（即分量样值的数目）。不同的采样率和大小通常通过上采样操作或下采样操作互相转换。上采样操作是增加样值的数目的操作。下采样操作是减少样值的数目的操作。因此，不同的采样格式也就是数据集和/或编解码块的至少一个分量具有不同的样值数目。
例如，4:4:4采样格式，4:2:2采样格式，4:2:0采样格式是三种不同的采样格式。
在现有技术中，即使在某些情形，作为编码对象的数据集和编解码块有多种采样格式和大小，对这些不同采样格式和大小的编码对象进行编码时，采用的是同一种编码方式，或者不同的编码方式，总是对单一采样格式和大小的编码对象进行编码。
对于由多种特性的内容混合而成的数据集，例如由计算机产生的图形和文字与摄像机摄取的自然图像和视频混合而成的屏幕内容图像和视频、虚拟现实的图像和视频，单一的采样格式和大小、本质上单一的编码方式，极大影响了数据压缩效率的提高。
发明内容
为了解决对由多种特性的内容混合而成的数据集的压缩中的这一问题，本发明提供了一种动态采用多种（即两种或以上）采样格式的数据压缩方法和装置：数据集和各编解码块有K（K>1）个分别具有K种不同采样格式的版本；在对一个编解码块进行编解码时，根据所述编解码块的固有数据特性，选择对所述编解码块的所述K个版本之一进行编解码。
本发明的首要技术特征是动态采用多种采样格式（即多种具有不同采样格式的数据版本）之一对一个编解码块进行编解码。
本发明中，优选地，采用两种采样格式之一对一个编解码块进行编解码。
本发明中，优选地，数据集及其元素由3个分量组成。
本发明中，优选地，数据集是具有矩形形状的图像。
本发明中，优选地，数据集是具有矩形形状的图像的序列。
本发明中，优选地，数据集是由3个分量组成的图像。
本发明中，优选地，数据集是由3个分量组成的图像序列。
本发明中，优选地，数据集是由3个分量组成的视频。
本发明中，优选地，数据集是由R分量、G分量、B分量组成的图像。
本发明中，优选地，数据集是由R分量、G分量、B分量组成的视频。
本发明中，优选地，数据集是由Y亮度分量、U色度分量、V色度分量组成的图像。
本发明中，优选地，数据集是由Y亮度分量、U色度分量、V色度分量组成的视频。
本发明中，优选地，两种采样格式是4:4:4采样格式和4:2:0采样格式。
本发明中，优选地，两种采样格式是4:4:4采样格式和4:2:2采样格式。
本发明中，优选地，两种采样格式是4:2:0采样格式和4:2:2采样格式。
本发明中，优选地，多种采样格式中的一种是主采样格式，而其他采样格式则是所述主采样格式经过下采样操作得到的采样格式。
本发明中，优选地，在编解码中产生的一种采样格式的数据版本，经过采样格式转换操作转换为其他采样格式的数据版本。
本发明中，优选地，采样格式转换操作包括重采样操作和/或上采样操作和/或下采样操作。
本发明的编码方法或装置的最基本的特有技术特征是根据一个当前编码块的特性自适应地采用预定的多种采样格式之一对所述当前编码块进行编码，产生至少含采样格式的标识码的信息及其对应的解码时需要的其他信息的压缩数据码流。图1是本发明的编码方法或装置的一个示意图。优选地，采用两种采样格式之一对一个编码块进行编码。优选地，数据集及其元素由3个分量组成。优选地，数据集是具有矩形形状的图像。优选地，数据集是具有矩形形状的图像的序列。优选地，数据集是由3个分量组成的图像。优选地，数据集是由3个分量组成的图像序列。优选地，数据集是由3个分量组成的视频。优选地，数据集是由R分量、G分量、B分量组成的图像。优选地，数据集是由R分量、G分量、B分量组成的视频。优选地，数据集是由Y亮度分量、U色度分量、V色度分量组成的图像。优选地，数据集是由Y亮度分量、U色度分量、V色度分量组成的视频。优选地，两种采样格式是4:4:4采样格式和4:2:0采样格式。优选地，两种采样格式是4:4:4采样格式和4:2:2采样格式。优选地，两种采样格式是4:2:0采样格式和4:2:2采样格式。优选地，多种采样格式中的一种是主采样格式，而其他采样格式则是所述主采样格式经过下采样操作得到的采样格式。优选地，在编码中产生的一种采样格式的数据版本，经过采样格式转换操作转换为其他采样格式的数据版本。优选地，采样格式转换操作包括重采样操作和/或上采样操作和/或下采样操作。
本发明的解码方法或装置的最基本的特有技术特征是解析压缩数据码流，获取采样格式的信息，根据所述采样格式的信息采用预定的多种采样格式之一对一个当前解码块进行解码。图2是本发明的解码方法或装置的一个示意图。优选地，采用两种采样格式之一对一个解码块进行解码。优选地，数据集及其元素由3个分量组成。优选地，数据集是具有矩形形状的图像。优选地，数据集是具有矩形形状的图像的序列。优选地，数据集是由3个分量组成的图像。优选地，数据集是由3个分量组成的图像序列。优选地，数据集是由3个分量组成的视频。优选地，数据集是由R分量、G分量、B分量组成的图像。优选地，数据集是由R分量、G分量、B分量组成的视频。优选地，数据集是由Y亮度分量、U色度分量、V色度分量组成的图像。优选地，数据集是由Y亮度分量、U色度分量、V色度分量组成的视频。优选地，两种采样格式是4:4:4采样格式和4:2:0采样格式。优选地，两种采样格式是4:4:4采样格式和4:2:2采样格式。优选地，两种采样格式是4:2:0采样格式和4:2:2采样格式。优选地，多种采样格式中的一种是主采样格式，而其他采样格式则是所述主采样格式经过下采样操作得到的采样格式。优选地，在解码中产生的一种采样格式的数据版本，经过采样格式转换操作转换为其他采样格式的数据版本。优选地，采样格式转换操作包括重采样操作和/或上采样操作和/或下采样操作。
根据本发明的一个方面，提供了一种对数据进行压缩的编码方法或装置，至少包括完成下列功能和操作的步骤或模块：
动态选择预定的多种采样格式之中的一种采样格式对一个编码块进行编码，产生至少含采样格式的信息及其语法元素的压缩数据码流。
从第一个角度，本发明提供了一种对数据进行压缩的编码方法，其特征在于至少包括下列步骤：
1）动态选择预定的多种采样格式之中的一种采样格式，使用所选择的所述采样格式对一个编码块进行编码，
2）产生至少含采样格式的信息及其语法元素的压缩数据码流。
从第二个角度，本发明提供了一种对数据进行压缩的编码装置，其特征在于至少包括完成下列功能和操作的模块：
1）动态选择预定的多种采样格式之中的一种采样格式，使用所选择的所述采样格式对一个编码块进行编码，
2）产生至少含采样格式的信息及其语法元素的压缩数据码流。
根据本发明的另一个方面，还提供了一种对数据进行压缩的解码方法或装置，至少包括完成下列功能和操作的步骤或模块：
解析压缩数据码流，获取采样格式的信息，根据所述采样格式的信息采用预定的多种采样格式之中的一种采样格式对一个解码块进行解码。
从第三个角度，本发明提供了一种对数据进行压缩的解码方法，其特征在于至少包括下列步骤：
1）解析压缩数据码流，至少获取采样格式的信息，
2）根据所述采样格式的信息选择预定的多种采样格式之中的一种采样格式，使用所选择的所述采样格式对一个解码块进行解码。
从第四个角度，本发明提供了一种对数据进行压缩的解码装置，其特征在于至少包括完成下列功能和操作的模块：
1）解析压缩数据码流，至少获取采样格式的信息，
2）根据所述采样格式的信息选择预定的多种采样格式之中的一种采样格式，使用所选择的所述采样格式对一个解码块进行解码。
本发明适用于对数据进行有损压缩的编码和解码，本发明也同样适用于数据进行无损压缩的编码和解码。本发明适用于一维数据如字符串数据或字节串数据的编码和解码，本发明也同样适用于二维或以上数据如图像或视频数据的编码和解码。
本发明中，数据包括下列类型的数据之一或其组合
1）一维数据；
2）二维数据；
3）多维数据；
4）图像；
5）图像的序列；
6）视频；
7）音频；
8）文件；
9）字节；
10）比特；
11）像素。
本发明中，在数据是图像、图像的序列、视频等的情形，编码块或者解码块是图像的一个编码区域或者一个解码区域，包括以下情形：图像的子图像、宏块、最大编码单元LCU、编码树单元CTU、编码单元CU、CU的子区域、预测单元PU、变换单元TU。
本发明中，所述采样格式是下列采样格式之一：
4:4:4采样格式；
或者
4:2:2采样格式；
或者
4:2:0采样格式。
本发明中，使用预定的多种编解码方式之一对一个编解码块进行编解码，所述编解码方式包括：
1）帧内预测编解码模式；
2）帧间预测编解码模式；
3）串匹配也称串预测或通用串匹配或通用串预测编解码模式；
4）字典编解码模式；
5）调色板编解码模式；
6）帧内块匹配也称帧内块预测或帧内块复制编解码模式；
7）块匹配也称块预测或块复制编解码模式
8）以上各模式的一个子模式。
以上通过若干特定的具体实例说明本发明的技术特征。本领域技术人员可由本说明书所揭示的内容轻易地了解本发明的其他优点与功效。本发明还可以通过另外不同的具体实施方式加以实施或应用，本说明书中的各项细节也可以基于不同观点与应用，在不背离本发明的精神下进行各种修饰或改变。
附图说明
图1是本发明的编码方法或装置的一个示意图。
图2是本发明的解码方法或装置的一个示意图。
实施方式
以下参考附图并结合实施细节或变体来详细说明本发明。需要说明的是，在不冲突的情况下，本申请中的实施例及实施例中的特征可以相互组合。
实施或变体例1
所述编码方法或装置或者解码方法或装置中，所述多种采样格式是下列情形之一：
两种采样格式；
或者
三种采样格式；
或者
四种采样格式。
实施或变体例2
所述编码方法或装置或者解码方法或装置中，所述数据是下列类型的数据之一：
由3个分量组成的数据；
或者
具有矩形形状的图像；
或者
具有矩形形状的图像的序列；
或者
由3个分量组成的图像；
或者
由3个分量组成的图像序列；
或者
由3个分量组成的视频；
或者
由R分量、G分量、B分量组成的图像；
或者
由R分量、G分量、B分量组成的图像序列；
或者
由R分量、G分量、B分量组成的视频；
或者
由Y亮度分量、U色度分量、V色度分量组成的图像；
或者
由Y亮度分量、U色度分量、V色度分量组成的图像序列；
或者
由Y亮度分量、U色度分量、V色度分量组成的视频；
或者
以上种类数据的一个编解码块；
或者
以上种类数据的变体，包括经过下列操作之一或其组合的变体数据：经过预测的预测残差、经过变换的变换域数据、经过差分运算的差分数据、经过量化的量化数据、经过反量化的数据、经过反变换的数据、经过去块效应滤波的数据、经过样值偏移补偿的数据、经过自适应修正滤波的数据。
实施或变体例3
所述编码方法或装置或者解码方法或装置中，所述数据是由3个分量组成的图像，所述多种采样格式是两种采样格式，所述两种采样格式是下列情形之一：
4:4:4采样格式和4:2:0采样格式；
或者
4:4:4采样格式和4:2:2采样格式；
或者
4:2:0采样格式和4:2:2采样格式。
实施或变体例4
所述编码方法或装置或者解码方法或装置中，所述多种采样格式中的一种是主采样格式，而其他采样格式则是所述主采样格式经过下采样操作得到的采样格式。
实施或变体例5
所述编码方法或装置或者解码方法或装置中，在编解码中产生的一种采样格式的数据版本，经过采样格式转换操作转换为其他采样格式的数据版本。
实施或变体例6
实施或变体例5所述编码方法或装置或者解码方法或装置中，所述采样格式转换操作包括对数据或其分量进行重采样操作和/或上采样操作和/或下采样操作。
实施或变体例7
所述编码方法或装置或者解码方法或装置中，所述数据是预测残差，对预测残差进行采样格式转换操作，所述采样格式转换操作包括对色度分量进行下列操作：
重采样操作
和/或
上采样操作
和/或
下采样操作
和/或
对原始预测残差进行下采样操作
和/或
对重构预测残差进行上采样操作。
实施或变体例8
所述编码方法或装置或者解码方法或装置中：
使用预定的多种（两种或以上）编解码方式之一对一个编解码块进行编解码；
对于使用预定的若干种（一种或以上）编解码方式进行编解码的编解码块，采用预定的一组（含两种或以上）采样格式之中的一种采样格式对一个编解码块进行编解码；
对于使用其余的编解码方式进行编解码的编解码块，则
采用预定的一种采样格式对各编解码块进行编解码，
或者
采用预定的第二组（含两种或以上）采样格式之一对一个编解码块进行编解码，
或者
按照预定的其他规则采用所述多种采样格式之一对一个编解码块进行编解码。
实施或变体例9
所述编码方法或装置或者解码方法或装置中：
至少使用帧内预测编解码模式对编解码块进行编解码；
对于使用帧内预测编解码模式进行编解码的编解码块，采用预定的两种采样格式之中的一种采样格式对一个编解码块进行编解码。
实施或变体例10
所述编码方法或装置或者解码方法或装置中：
至少使用帧内预测编解码模式对编解码块进行编解码，
在序列参数集或序列头或图像参数集或图像头或条带头或CTU头或CU头中，存在一个直接或间接或直接间接混合的采样格式标识码，表示一个序列或一帧图像或一个条带或一个CTU或一个CU中使用帧内预测编解码模式的编解码块采用哪一种或哪几种采样格式；
和/或
至少使用帧间预测编解码模式对编解码块进行编解码，
在序列参数集或序列头或图像参数集或图像头或条带头或CTU头或CU头中，存在一个直接或间接或直接间接混合的采样格式标识码，表示一个序列或一帧图像或一个条带或一个CTU或一个CU中使用帧间预测编解码模式的编解码块采用哪一种或哪几种采样格式；
和/或
至少使用串预测编解码模式或其一种子模式对编解码块进行编解码，
在序列参数集或序列头或图像参数集或图像头或条带头或CTU头或CU头中，存在一个直接或间接或直接间接混合的采样格式标识码，表示一个序列或一帧图像或一个条带或一个CTU或一个CU中使用串预测编解码模式或其一种子模式的编解码块采用哪一种或哪几种采样格式；
所述直接的采样格式标识码由压缩数据码流中的一个或多个位串（二元符号串）所组成。所述间接的采样格式标识码是从其他编解码参数和/或压缩数据码流的其他语法元素导出的采样格式标识码或预定的标识码缺省值。所述直接间接混合的采样格式标识码是部分直接（即由压缩数据码流中的一个或多个位串所组成）部分间接（即从其他编解码参数和/或压缩数据码流的其他语法元素导出或预定缺省）混合的采样格式标识码。
实施或变体例11
所述编码方法或装置或者解码方法或装置中，至少使用帧内预测编解码模式对编解码块进行编解码，在序列参数集或序列头中有下列斜体表示的参数或语法元素，用来表示所采用的采样格式：
色度格式chroma_format
如果色度格式的值表示序列的主采样格式是4:4:4采样格式或4:2:2采样格式，则
{
帧内编码采样格式420标志 intra_chroma_format_420_flag
如果帧内编码采样格式420标志的值为1，则
{
序列内使用帧内预测编解码模式的编解码块全部都采用4:2:0采样格式
}
否则
{
帧内编码采样格式自适应标志 intra_chroma_format_adaptive_flag
如果帧内编码采样格式自适应标志的值为0，则
{
序列内使用帧内预测编解码模式的编解码块全部都采用序列的主采样格式
}
否则
{
序列内使用帧内预测编解码模式的编解码块所采用的采样格式由图像参数集或图像头中的图像帧内编码采样格式标志的值来规定
}
}
}。
实施或变体例12
实施或变体例11所述编码方法或装置或者解码方法或装置中，在图像参数集或图像头中有下列斜体表示的参数或语法元素，用来表示所采用的采样格式：
图像帧内编码采样格式标志 intra_chroma_format_flag
如果图像帧内编码采样格式标志的值为1，则
{
图像内使用帧内预测编解码模式的编解码块全部都采用4:2:0采样格式
}
否则
{
图像内使用帧内预测编解码模式的编解码块全部都采用序列的主采样格式
}。
实施或变体例13
所述编码方法或装置或者解码方法或装置中，所述数据是具有矩形形状和3个分量的图像或图像的序列，所述多种采样格式是两种采样格式，所述两种采样格式是4:4:4采样格式和4:2:0采样格式， 4:2:0采样格式的数据版本的D分量D420 = {D420[i][j]：i = 0～M-1，j = 0～N-1}和E分量E420 = {E420[i][j]：i = 0～M-1，j = 0～N-1}，分别经过下列上采样操作转换为4:4:4采样格式的数据版本的D分量D444 = {D444[i][j]：i = 0～2M-1，j = 0～2N-1}和E分量E444 = {E444[i][j]：i = 0～2M-1，j = 0～2N-1}：
D444[2i][2j] = D420[i][j]
D444[2i+1][2j] = D420[i][j]
D444[2i][2j+1] = D420[i][j]
D444[2i+1][2j+1] = D420[i][j]
E444[2i][2j] = E420[i][j]
E444[2i+1][2j] = E420[i][j]
E444[2i][2j+1] = E420[i][j]
E444[2i+1][2j+1] = E420[i][j]
其中，i = 0～M-1，j = 0～N-1； 4:4:4采样格式的数据版本的D分量D444 ={D444[i][j]：i = 0～2M-1，j = 0～2N-1}和E分量E444 = {E444[i][j]：i = 0～2M-1，j =0～2N-1}，分别经过下列下采样操作转换为4:2:0采样格式的数据版本的D分量D420 ={D420[i][j]：i = 0～M-1，j = 0～N-1}和E分量E420 = {E420[i][j]：i = 0～M-1，j = 0～N-1}：
D420[i][j] = (D444[2i][2j] + D444[2i+1][2j] + D444[2i][2j+1] + D444[2i+1][2j+1] + R) >> 2
E420[i][j] = (E444[2i][2j] + E444[2i+1][2j] + E444[2i][2j+1] + E444[2i+1][2j+1] + R) >> 2
其中，i = 0～M-1，j = 0～N-1，R等于0（截断法）或2（四舍五入法）。
实施或变体例14
所述编码方法或装置或者解码方法或装置中，在所述压缩数据码流的下列地方之一或若干处存在表示允许采用多种采样格式进行编解码的标志位：
1）序列参数集；通常是是序列参数集的一个直接存在或隐含推导的语法元素；
2）图像参数集；通常是图像参数集的一个直接存在或隐含推导的语法元素；
3）序列头；通常是序列头的一个直接存在或隐含推导的语法元素；
4）条带头；通常是条带头的一个直接存在或隐含推导的语法元素；
5）图像头；通常是图像头的一个直接存在或隐含推导的语法元素；
6）CTU头；通常是CTU头的一个直接存在或隐含推导的语法元素；
7）CU头；通常是CU头的一个直接存在或隐含推导的语法元素；
8）编解码块头；通常是编解码块头的一个直接存在或隐含推导的语法元素。
实施或变体例15
所述编码方法或装置或者解码方法或装置中，在所述压缩数据码流的下列地方之一或若干处存在表示允许使用采用4:4:4采样格式的编解码块的标志位：
1）序列参数集；通常是是序列参数集的一个直接存在或隐含推导的语法元素；
2）图像参数集；通常是图像参数集的一个直接存在或隐含推导的语法元素；
3）序列头；通常是序列头的一个直接存在或隐含推导的语法元素；
4）条带头；通常是条带头的一个直接存在或隐含推导的语法元素；
5）图像头；通常是图像头的一个直接存在或隐含推导的语法元素。
实施或变体例16
所述编码方法或装置或者解码方法或装置中，所述预定的多种采样格式分别用多个预定的值来表示，一种采样格式对应于一个预定的值k，每个所述编解码块在所述压缩数据码流中都有一个直接或间接或直接间接混合的采样格式标识码，
如果所述采样格式标识码等于k，则
{
采用与k对应的一种采样格式对所述编解码块进行编解码
}
所述直接的采样格式标识码由压缩数据码流中的一个或多个位串（二元符号串）所组成。所述间接的采样格式标识码是从其他编解码参数和/或压缩数据码流的其他语法元素导出的采样格式标识码或预定的标识码缺省值。所述直接间接混合的采样格式标识码是部分直接（即由压缩数据码流中的一个或多个位串所组成）部分间接（即从其他编解码参数和/或压缩数据码流的其他语法元素导出或预定缺省）混合的采样格式标识码。
实施或变体例17
所述编码方法或装置或者解码方法或装置中，用来表示所述编解码块的采样格式的采样格式标识码语法元素以下列形式存在于所述编解码块的压缩数据码流中：
编解码块头信息语法元素、采样格式标识码语法元素、更多的编解码块头信息语法元素、编解码块数据语法元素；
或
编解码块头信息语法元素、部分采样格式标识码语法元素、更多的编解码块头信息语法元素、部分编解码块数据语法元素、另一部分采样格式标识码语法元素、另一部分编解码块数据语法元素；
其中，采样格式标识码取一个值时，采用与所述值对应的那种采样格式对所述编解码块进行编解码。

Claims (10)

1.一种对图像、图像的序列、视频进行压缩的编码方法，其特征在于至少包括下列步骤：
1）动态选择预定的两种采样格式之中的一种采样格式，使用所选择的所述采样格式对一个CU进行编码，
2）产生至少含采样格式的信息及其语法元素的压缩数据码流；
所述步骤1）的具体做法之一如下：
使用预定的两种或以上编码方式之一对一个CU进行编码；
对于使用预定的第一种编码方式进行编码的CU，采用预定的两种采样格式之中的一种采样格式对一个CU进行编码；
对于使用其余的编码方式进行编码的CU，则采用预定的一种采样格式对各CU进行编码；
所述步骤1）还包括：
所述预定的第一种编码方式是帧内预测编码方式；
所述预定的两种采样格式是4:4:4采样格式和4:2:0采样格式；
所述其余的编码方式包括帧间预测编码方式；
所述预定的一种采样格式是4:4:4采样格式；
在序列参数集或序列头中存在下列直接或间接或直接间接混合的标识码，用来表示允许采用多种采样格式进行编码，也就是：
存在允许采用多种采样格式标识码，
如果所述允许采用多种采样格式标识码表示该序列中允许采用多种采样格式，则
{
采用多种采样格式对该序列进行编码；
}
否则
{
采用一种采样格式对该序列进行编码；
}
所述直接的标识码由压缩数据码流中的一个或多个位串即二元符号串所组成，所述间接的标识码是从其他编码参数和/或压缩数据码流的其他语法元素导出的标识码或预定的标识码缺省值，所述直接间接混合的标识码是部分直接部分间接混合的标识码；
在CU头中，存在一个直接或间接或直接间接混合的采样格式标识码，表示一个CU采用所述预定的两种采样格式中的哪一种采样格式：
所述预定的两种采样格式分别用两个预定的值来表示，4:2:0采样格式对应于预定的第一个值，4:4:4采样格式对应于预定的第二个值，
如果所述采样格式标识码等于预定的第一个值，则
{
采用4:2:0采样格式对该CU进行编码；
}
否则
{
采用4:4:4采样格式对该CU进行编码；
}
所述直接的采样格式标识码由压缩数据码流中的一个或多个位串即二元符号串所组成，所述间接的采样格式标识码是从其他编码参数和/或压缩数据码流的其他语法元素导出的采样格式标识码或预定的标识码缺省值，所述直接间接混合的采样格式标识码是部分直接部分间接混合的采样格式标识码。
2.一种对数据进行压缩的编码装置，其特征在于，包括实现如权利要求1所述的编码方法的模块。
3.一种对图像、图像的序列、视频进行压缩的解码方法，其特征在于至少包括下列步骤：
1）解析压缩数据码流，至少获取采样格式的信息，
2）根据所述采样格式的信息选择预定的两种采样格式之中的一种采样格式，使用所选择的所述采样格式对一个CU进行解码；
所述步骤2）的具体做法之一如下：
使用预定的两种或以上解码方式之一对一个CU进行解码；
对于使用预定的第一种解码方式进行解码的CU，采用预定的两种采样格式之中的一种采样格式对一个CU进行解码；
对于使用其余的解码方式进行解码的CU，则采用预定的一种采样格式对各CU进行解码，
所述步骤2）还包括：
所述预定的第一种解码方式是帧内预测解码方式；
所述预定的两种采样格式是4:4:4采样格式和4:2:0采样格式；
所述其余的解码方式包括帧间预测解码方式；
所述预定的一种采样格式是4:4:4采样格式；
在序列参数集或序列头中存在下列直接或间接或直接间接混合的标识码，用来表示允许采用多种采样格式进行解码，也就是：
存在允许采用多种采样格式标识码，
如果所述允许采用多种采样格式标识码表示该序列中允许采用多种采样格式，则
{
采用多种采样格式对该序列进行解码；
}
否则
{
采用一种采样格式对该序列进行解码；
}
所述直接的标识码由压缩数据码流中的一个或多个位串即二元符号串所组成，所述间接的标识码是从其他解码参数和/或压缩数据码流的其他语法元素导出的标识码或预定的标识码缺省值，所述直接间接混合的标识码是部分直接部分间接混合的标识码；
在CU头中，存在一个直接或间接或直接间接混合的采样格式标识码，表示一个CU采用所述预定的两种采样格式中的哪一种采样格式：
所述预定的两种采样格式分别用两个预定的值来表示，4:2:0采样格式对应于预定的第一个值，4:4:4采样格式对应于预定的第二个值，
如果所述采样格式标识码等于预定的第一个值，则
{
采用4:2:0采样格式对该CU进行解码；
}
否则
{
采用4:4:4采样格式对该CU进行解码；
}
所述直接的采样格式标识码由压缩数据码流中的一个或多个位串即二元符号串所组成，所述间接的采样格式标识码是从其他解码参数和/或压缩数据码流的其他语法元素导出的采样格式标识码或预定的标识码缺省值，所述直接间接混合的采样格式标识码是部分直接部分间接混合的采样格式标识码。
4.根据权利要求3所述的解码方法，其特征在于所述图像、图像的序列、视频中的数据是下列类型的数据之一：
由3个分量组成的数据；
或者
具有矩形形状的图像；
或者
具有矩形形状的图像的序列；
或者
由3个分量组成的图像；
或者
由3个分量组成的图像序列；
或者
由3个分量组成的视频；
或者
由R分量、G分量、B分量组成的图像；
或者
由R分量、G分量、B分量组成的图像序列；
或者
由R分量、G分量、B分量组成的视频；
或者
由Y亮度分量、U色度分量、V色度分量组成的图像；
或者
由Y亮度分量、U色度分量、V色度分量组成的图像序列；
或者
由Y亮度分量、U色度分量、V色度分量组成的视频；
或者
以上种类数据的经过包括下列操作之一或其组合的数据：经过预测的预测残差、经过变换的变换域数据、经过差分运算的差分数据、经过量化的量化数据、经过反量化的数据、经过反变换的数据、经过去块效应滤波的数据、经过样值偏移补偿的数据、经过自适应修正滤波的数据。
5.根据权利要求3所述的解码方法，其特征在于所述两种采样格式中的一种是主采样格式，而其他采样格式则是所述主采样格式经过下采样操作得到的采样格式。
6.根据权利要求3所述的解码方法，其特征在于在解码中产生的一种采样格式的数据版本，经过采样格式转换操作转换为其他采样格式的数据版本。
7.根据权利要求6所述的解码方法，其特征在于所述采样格式转换操作包括对数据或其分量进行重采样操作和/或上采样操作和/或下采样操作。
8.根据权利要求3所述的解码方法，其特征在于所述数据是具有矩形形状和3个分量的图像或图像的序列，4:2:0采样格式的数据版本的D分量D420 = {D420[i][j]：i = 0～M-1，j = 0～N-1}和E分量E420 = {E420[i][j]：i = 0～M-1，j = 0～N-1}，分别经过下列上采样操作转换为4:4:4采样格式的数据版本的D分量D444 = {D444[i][j]：i = 0～2M-1，j =0～2N-1}和E分量E444 = {E444[i][j]：i = 0～2M-1，j = 0～2N-1}：
D444[2i][2j] = D420[i][j]
D444[2i+1][2j] = D420[i][j]
D444[2i][2j+1] = D420[i][j]
D444[2i+1][2j+1] = D420[i][j]
E444[2i][2j] = E420[i][j]
E444[2i+1][2j] = E420[i][j]
E444[2i][2j+1] = E420[i][j]
E444[2i+1][2j+1] = E420[i][j]
其中，i = 0～M-1，j = 0～N-1； 4:4:4采样格式的数据版本的D分量D444 = {D444[i][j]：i = 0～2M-1，j = 0～2N-1}和E分量E444 = {E444[i][j]：i = 0～2M-1，j = 0～2N-1}，分别经过下列下采样操作转换为4:2:0采样格式的数据版本的D分量D420 = {D420[i][j]：i = 0～M-1，j = 0～N-1}和E分量E420 = {E420[i][j]：i = 0～M-1，j = 0～N-1}：
D420[i][j] = (D444[2i][2j] + D444[2i+1][2j] + D444[2i][2j+1] + D444[2i+1][2j+1] + R) >> 2
E420[i][j] = (E444[2i][2j] + E444[2i+1][2j] + E444[2i][2j+1] + E444[2i+1][2j+1] + R) >> 2
其中，i = 0～M-1，j = 0～N-1，R等于0或2，分别对应于去尾法或四舍五入法。
9.根据权利要求3所述的解码方法，其特征在于，
所述允许采用多种采样格式标识码是间接的标识码；
所述帧内预测解码方式包括帧内通用串预测解码子模式，CU头中的所述采样格式标识码是间接的标识码。
10.一种对数据进行压缩的解码装置，其特征在于，包括实现如权利要求3－9任一项所述的解码方法的模块。
CN202311360929.0A 2017-03-12 2017-03-12 采用多种采样格式的图像及其序列、视频压缩方法和装置 Pending CN117241032A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202311360929.0A CN117241032A (zh) 2017-03-12 2017-03-12 采用多种采样格式的图像及其序列、视频压缩方法和装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201710143888.8A CN108574845B (zh) 2017-03-12 2017-03-12 动态采用多种采样格式的数据压缩方法和装置
CN202311360929.0A CN117241032A (zh) 2017-03-12 2017-03-12 采用多种采样格式的图像及其序列、视频压缩方法和装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201710143888.8A Division CN108574845B (zh) 2017-03-12 2017-03-12 动态采用多种采样格式的数据压缩方法和装置

Publications (1)

Publication Number Publication Date
CN117241032A true CN117241032A (zh) 2023-12-15

Family

ID=63578009

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201710143888.8A Active CN108574845B (zh) 2017-03-12 2017-03-12 动态采用多种采样格式的数据压缩方法和装置
CN202311360929.0A Pending CN117241032A (zh) 2017-03-12 2017-03-12 采用多种采样格式的图像及其序列、视频压缩方法和装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201710143888.8A Active CN108574845B (zh) 2017-03-12 2017-03-12 动态采用多种采样格式的数据压缩方法和装置

Country Status (1)

Country Link
CN (2) CN108574845B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111385555A (zh) * 2018-12-28 2020-07-07 上海天荷电子信息有限公司 原始和/或残差数据用分量间预测的数据压缩方法和装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1551184A3 (en) * 2003-12-27 2006-06-28 Samsung Electronics Co., Ltd. Residue image downsampling and encoding method
EP2084913B1 (en) * 2006-10-25 2019-02-20 GE Video Compression, LLC Quality scalable coding
US10182241B2 (en) * 2014-03-04 2019-01-15 Microsoft Technology Licensing, Llc Encoding strategies for adaptive switching of color spaces, color sampling rates and/or bit depths
CN105704491B (zh) * 2014-11-28 2020-03-13 同济大学 图像编码方法、解码方法、编码装置和解码装置

Also Published As

Publication number Publication date
CN108574845A (zh) 2018-09-25
CN108574845B (zh) 2024-06-18

Similar Documents

Publication Publication Date Title
CN107483942B (zh) 视频数据压缩码流的解码、视频数据的编码方法及装置
US8977048B2 (en) Method medium system encoding and/or decoding an image using image slices
US8902992B2 (en) Decoder for selectively decoding predetermined data units from a coded bit stream
CN108881913B (zh) 图像编码的方法和装置
WO2017044740A2 (en) Improved colour remapping information supplemental enhancement information message processing
CN104853211A (zh) 使用多种形式的参考像素存储空间的图像压缩方法和装置
IL168511A (en) Apparatus and method for multiple description encoding
CN105847842B (zh) 图像编码方法及装置、图像解码方法及装置
WO2023020560A1 (zh) 视频编解码的方法、装置、电子设备及存储介质
KR20070009486A (ko) 영상 부호화 및 복호화 방법과 장치
EP1397920A1 (en) Resolution downscaling of video images
KR20190020083A (ko) 인코딩 방법 및 장치 및 디코딩 방법 및 장치
EP3310059A1 (en) Image encoding and decoding method, image processing device, and computer storage medium
CA3156849A1 (en) Transform-based image coding method, and apparatus therefor
CN117336481A (zh) 视频解码方法、视频编码方法以及发送数据的方法
CN108574845B (zh) 动态采用多种采样格式的数据压缩方法和装置
US20080095473A1 (en) Wavelet transformation-based image encoder, decoder and method for generating thumbnail image
CN108989819B (zh) 各模式采用各自相应色彩空间的数据压缩方法和装置
CN108989820B (zh) 各阶段采用各自相应色度采样格式的数据压缩方法和装置
CN113518222B (zh) 不同类型串采用不同长度二值化方案的编解码方法及装置
CN113395515B (zh) 对分量下采样格式数据进行点预测的编码解码方法及装置
CN113365074B (zh) 限制点预测常现位置及其点矢量数目的编解码方法及装置
CN115037927A (zh) 融合全色度与混合色度的图像编码和解码方法及其应用
CN115134605A (zh) 使用受限通用串预测编码模式的图像编码解码方法及装置
CN110602501A (zh) 基于自适应分离或捆绑方式的数据压缩、解压方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination