CN101356825A - 使用自适应色彩空间变换的画面编码 - Google Patents

使用自适应色彩空间变换的画面编码 Download PDF

Info

Publication number
CN101356825A
CN101356825A CNA2006800509617A CN200680050961A CN101356825A CN 101356825 A CN101356825 A CN 101356825A CN A2006800509617 A CNA2006800509617 A CN A2006800509617A CN 200680050961 A CN200680050961 A CN 200680050961A CN 101356825 A CN101356825 A CN 101356825A
Authority
CN
China
Prior art keywords
picture
picture block
color space
decoder
image information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2006800509617A
Other languages
English (en)
Other versions
CN101356825B (zh
Inventor
彼得·考夫
德特勒夫·马尔佩
托马斯·威甘德
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GE Video Compression LLC
Original Assignee
Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV filed Critical Fraunhofer Gesellschaft zur Forderung der Angewandten Forschung eV
Priority to CN201310101249.7A priority Critical patent/CN103297769B/zh
Publication of CN101356825A publication Critical patent/CN101356825A/zh
Application granted granted Critical
Publication of CN101356825B publication Critical patent/CN101356825B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/67—Circuits for processing colour signals for matrixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/149—Data rate or code amount at the encoder output by estimating the code amount by means of a model, e.g. mathematical model or statistical model
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/146—Data rate or code amount at the encoder output
    • H04N19/15—Data rate or code amount at the encoder output by monitoring actual compressed data size at the memory before deciding storage at the transmission buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154—Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/19—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding using optimisation based on Lagrange multipliers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/189—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding
    • H04N19/196—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the adaptation method, adaptation tool or adaptation type used for the adaptive coding being specially adapted for the computation of encoding parameters, e.g. by averaging previously computed encoding parameters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Algebra (AREA)
  • General Physics & Mathematics (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)
  • Pure & Applied Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Color Television Systems (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)

Abstract

本发明基于以下发现：当选择具有不同画面块的画面表示时，其中每个画面块携带比画面的整个区域小的画面区域的画面信息，以及当不同的画面块携带以第一色彩空间表示或以第二色彩空间表示的画面信息时，可以高效地对画面或画面流进行编码。由于不同的色彩空间表示在其描述参数方面具有各自固有的特性，为各个画面块选择合适的色彩空间表示，在给定的大小或比特速率时产生对具有更好质量的画面的编码表示。

Description

使用自适应色彩空间变换的画面编码
技术领域
本发明涉及画面编码，更具体地涉及一种允许对画面内容进行更有效的编码的概念，即产生具有更好的R/D比的画面或画面流的编码表示。
背景技术
在许多应用中，必须有效地对画面或画面流进行编码。例如，数字照相机通常使用静止图像压缩来增加可以在给定大小的存储介质上存储的画面的数目。当涉及通过仅提供了有限带宽的传送介质来传送图像序列或完整的电影时，使用允许对画面内容的高压缩的更有效的编解码器(编码器-解码器)变得尤其重要。这一方面是由于需要在提供了低带宽的传输信道中传送，例如视频内容流向移动电话。另一方面，传送高分辨率的视频内容变得越来越流行，这是因为能够显示这样高分辨率画面的显示器在越来越多的消费者中普及。一个主要的趋势是即将出现的高清晰度电视(HDTV)广播。
一般而言，可以区别两种不同的编码方法，第一种的目标是不损失任何信息的编码，第二种接受(适度的)信息和质量的损失，以便实现文件大小的显著减小。尽管存在针对静止图像和运动内容的无损编码技术，但是这些技术通常基于熵编码，无法实现对于所需的应用而言足够的或可接受的文件大小的减小。因此，有损压缩是最优选的，例如用于静止图像压缩的JPEG以及用于电影压缩的MPEG2。
一般而言，有损压缩的问题在于：与底层的原始画面相比，压缩画面的质量降低了。自然地，当压缩率增大时，即当压缩画面的文件大小减小时，画面的质量变差。因此，必须找到压缩图像的期望质量与传送或存储可接受的文件大小之间的折衷。通常，通过对描述画面属性的参数的量化来实现文件大小和信息的损失的减小，因此，量化越粗糙，质量越差，并且压缩画面越小。压缩画面的质量通常可以通过将压缩画面与底层的原始画面进行比较来估计。这允许估计信噪比，其中噪声理解为压缩期间引入的噪声。
在现有的压缩算法中，广泛利用图像的逐块处理。其基本思想在于：对于通常的图像内容，相邻像素的内容(例如色彩和亮度)的改变通常相对小。因此，通过使用一并处理和压缩的相邻像素区域，应该可以实现较高的压缩率，而不显著降低画面的感知质量。从这里开始，这样的画面块也被称为宏块。换言之，宏块在编码中作为一种子画面单元。图7示出了块的子划分，其中画面10被子划分为12个相等大小的画面块12A至12L。子划分为12个不同画面块应理解为仅作为示例。
作为示例，在图7中放大了单个画面块12I，其中将画面块12I子划分为8×8的矩阵显示了构造宏块12I的单个像素元素。同样，这里由8×8个单独像素形成画面块也应理解为仅作为示例。为了表示每个单独像素内的色彩，给每个像素分配在特定色彩空间中占有不同色彩信息的三个参数。
对宏块进行编码的一种简单的方法是对每个单个像素的三个参数进行量化，并在量化后对量化参数进行熵编码。由于量化显著减小了可用于熵编码的参数空间，因而参数的量化已经可以显著地减小用来描述一个宏块所需要的存储空间或比特的量。
然而，为了减小描述具有高能量的画面内容的语法元素的量，一个宏块内的画面信息通常由变换系数来描述，变换系数通过将宏块内的画面内容变换为另一种表示(频域)而产生。一个示例是执行离散余弦变换，最终在子宏块级执行离散余弦变换，并使用变换系数作为图像信息，然后可以对图像信息进行量化，并在量化后对其进行熵编码。
例如，可以对全部像素信息(即画面块12I的每个像素的三个参数值)施加变换。优选地，分别对三个参数/分量进行变换。
为了进一步减小文件大小及实现更高的压缩，也可以利用人眼的特性，在判断编码画面的感知质量时，与色彩信息相比，人眼看起来更重视明亮度信息。因此，一种增强编码性能(与质量和比特速率相关)的可能性是：在一个宏块内，相对于明亮度参数的数目，减小色彩参数的数目。这就是说，基于变换系数的表示所基于的信息基础在画面块内包含的明亮度信息比色彩信息更多。由于存在许多通过一个单个明亮度值和两个色彩值来描述色彩的方式，因此明亮度值应称为亮度值，而色彩值应称为色度值。
图7示出了一种适于变换的、用于构造这样的画面块12I的可能方式。放大的画面块12I具有8×8个单个像素，每个像素通常由一个亮度和两个色度值描述。图12I示意了一种减小色度信息的量的方式，其中只有特定像素的色度信息被用作变换下的数据集。这是通过在每个属于色度数据集的部分的单个像素内标以字母C来表示的。相反地，每个单个像素的最重要的亮度信息都被使用。
应理解，放大的宏块12I所示的情况仅作为示例。也可以进一步减小色度信息的量。例如，这可以通过省略每个第二色度信息来实现，即在变换过程中，对于每8个亮度值可以考虑一个色度值。也可以不是简单地使用图12A所示的像素的色度值，而是通过平均像素的色度值而根据四个相邻的像素计算平均色度值。然后，可以将这样的色度值分配到宏块中位于四个其下的像素中心的位置，如图7中所示的色度值16所示。
一般地，上述编码技术可以用于静止图像以及运动画面。对于运动画面，使用更完善的编码方法，包括运动估计。
在逐宏块的运动估计中，定位了画面流的两个(或更多)画面(所述画面不必须是直接彼此跟随的)，其示出两个图像中的相同画面内容。在最简单的情况下，在当前帧的宏块内的画面内容相比参考帧没有改变。然而，宏块的内容可能出现在与参考帧中略微不同的位置处。在这种情况下，一旦参考画面在解码器侧完全已知，则在转换过程中知道画面内容的运动的运动向量就足够了，所述转换是指从参考画面转换到当前画面的宏块，以便重构或预测当前画面中的画面块的画面信息。当然，通常在从参考画面转换到当前画面的过程中，画面块内有细微的改变。由于这一点，与运动向量一起，也传送预测误差，从而允许重构宏块中画面内容的改变，以允许当前画面中宏块的完整重构。将使用随后带有诸如如变换和熵编码之类的残余编码的运动预测的编解码器称为混合视频编解码器。
根据现有技术，预测编码能够有效地表示画面序列。在预测编码中，首先预测要编码的量的值，接着，仅编码和传送真正可观察到的值与预测值的差别。由于有了可靠预测，差别参数平均而言将小于描述宏块内的画面的绝对参数，因此这也会产生比特速率增益。因此，可以减小随后的熵编码(带有或不带有之前的量化)所基于的符号空间，以允许更短的码字并从而允许比特速率的降低。
尽管为了减小压缩画面或电影的文件大小已经付出了一定努力(使用逐块编码策略对压缩画面或电影进行压缩，而不会不可接受地降低压缩内容的感知质量)，关于画面块的不同参数表示，还没有最优地利用单个画面块的特性。
发明内容
本发明的目的是提供一种编码方案，允许在逐块画面处理中更有效地使用画面块的不同参数表示的固有特性。
该目的是通过根据权利要求1和17的装置、根据权利要求22或23的方法、以及根据权利要求24的参数比特流来实现的
本发明基于以下发现：当选择具有不同画面块的画面表示时，其中每个画面块携带比画面的整个区域小的画面区域的画面信息，以及当不同的画面块携带以第一色彩空间表示或以第二色彩空间表示的画面信息时，可以高效地对画面或画面流进行编码。由于不同的色彩空间表示在其描述参数方面具有各自固有的特性，为各个画面块选择合适的色彩空间表示，在给定的大小或比特速率时产生对具有更好质量的画面的编码表示。
在本发明的一个实施例中，使用了本发明的解码器，该解码器接收具有不同画面块的比特流，该画面块携带以第一色彩空间表示或以第二色彩空间表示的画面信息。该解码器还接收变换标记，其指示是否要将当前操作的画面块的色彩空间表示变换到不同的色彩空间表示。这样的解码器允许在以不同色彩空间表示编码的图像解码处理中重构图像块。因此，该解码器可操作用于对本发明的比特流进行处理，发明的比特流在不降低画面之类的情况下，允许对画面或画面流的更紧凑的表示。
在本发明的另一实施例中，使用了本发明的解码器，该解码器可操作用于以RGB表示和其中色彩和明亮度信息由单独的参数存储(即具有一个亮度参数和两个色度参数)的表示来处理画面块。其优点在于，通常图像素材存在于RGB色彩空间，因此可以由本发明的解码器处理。此外，可以有利地利用不同色彩空间表示的参数值的固有差别，以便以给定的比特速率提供最优的再现质量。
在本发明的另一实施例中，本发明的解码器具有色彩空间变换器，该色彩空间变换器可操作用于对画面块的参数表示进行色彩空间变换，其中参数表示在变换域中描述了画面块，例如在频域中描述了画面块。其显著优点在于：在现有技术的画面处理中，通常在传送之前变换画面数据，以允许有效量化。因此，也可操作用于在变换域中工作的发明的解码器可以容易地在现有技术的设计中实现，以进一步提高这些设计的编码效率。
在本发明的另一实施例中，本发明的解码器集成到画面或视频解码器中，该画面或视频解码器还具有重量化器和熵解码器。因此，在画面或视频解码器内，可以使用本发明的解码器来进一步提高编码效率，以便具有本发明的解码器的画面或视频解码器能够处理发明的高度压缩的比特流。
在本发明的另一实施例中，本发明的解码器可操作用于根据所提供的比特流中出现的变换标记来开启和关闭色彩空间变换。因此，本发明的解码器可以在现有技术的设计中实现，并允许现有技术和本发明二者在一个单一设备内对比特流进行解码。
在本发明的另一实施例中，本发明的编码器具有色彩空间变换器，当变换判决器指示所需的变换时，该色彩空间变换器将画面块的色彩空间表示从“原本的”色彩空间表示(即最初创建该内容时的色彩空间表示)变换为副色彩空间表示。该变换判决器可操作用于：当以原本的色彩空间表示或副色彩空间表示分别对各个块进行编码时，以块为基础，估计编码画面表示的期望质量。因此，本发明的变换判决器也可操作用于：基于所需的最大比特速率，判决变换对于各个块而言是否必要或合适，因此总是选择以给定比特速率的最佳可能的编码质量。其显著优点在于：本发明的概念在保持相同感知质量的同时，允许低于现有技术的比特速率。
附图说明
随后参照附图，描述本发明的优选实施例，其中：
图1示出了本发明的编码器的实施例；
图2示出了比特速率对不同色彩空间表示的质量图；
图3示出了强调本发明概念的色彩空间变换的示例；
图4示出了本发明的编码器的实施例；
图4b示出了用于基于上下文的编码的给定上下文的示例；
图5示出了用于本发明的编码器的实施例的概念思想的示例；
图6示出了本发明的比特流的示例；以及
图7示出了用于随后的画面处理的画面的逐块分解。
具体实施方式
图1示出了本发明的解码器100。解码器100具有色彩空间变换器102，色彩空间变换器102可操作用于将画面块从第一色彩空间表示(A)变换到第二色彩空间表示(B)，反之亦然。该解码器用于画面或电影的重构，该画面或电影以画面内具有第一画面块和第二画面块的表示形式来表示，其中画面块带有其以第一色彩空间表示(A)中或以第二色彩空间表示(B)的画面信息。解码器100接收包括多个画面块104A至104D的比特流104作为输入，其中，画面块104A至104D被以不同的色彩空间表示A或B包括在比特流104中。
解码器100内的色彩空间变换器102接收所选择的画面块，以将画面块从其原始色彩空间表示变换到所需的色彩空间表示。从解码器100的输出比特流106可以看出，在图1中所给出的示例中，色彩空间变换器可操作用于从画面块104C和104B的色彩空间表示(B)变换到色彩空间表示A，以使得在解码之后，输出流106内的所有画面块都以色彩空间表示A表示。
在图1的变体中，解码器100还可以包括标记接收机108，用于接收在比特流中传送的变换信息，该变换信息指示了相应的画面块是否具有应变换的色彩空间表示。根据所接收到的变换指示，标记接收机108可以将画面块送往色彩空间变换器或直接送到解码器100的输出端。
尽管在优选实施例中，本发明的解码器以比特流接收变换指示信号，但是，也可以实现一种通过某种识别算法来识别特定画面块是否需要色彩空间变换的解码器。例如，这可以从画面块元素表示自身获得。
在本发明的另一实施例中，本发明的解码器可操作用于接收附加有效标记，用于针对多个连续帧(片段)或更一般地针对更大的画面块组激活或去激活色彩空间变换器。
本发明的另一优选实施例在视频解码器中实现了本发明的解码器，其可操作用于接收比特流信号，该比特流信号包括利用基于画面块的运动估计的预测编码方案所编码的画面块的画面信息。
在这样的预测编码方案中，为了提高编码效率，只传送画面块的运动补偿预测与画面块的实际内容之间的差别或残余(不同的宏块)。在本发明的一个实施例中，这些有差别的宏块利用主(例如RGB)或副(例如YCoCg)色彩空间表示来传送和解码。因此，还可以通过容易计算的简单色彩变换来减少已经相当紧凑的描述差别画面块的信息。当涉及对差别信号(即，旨在具有描述低的值(及小的数值)的参数的信号)进行编码时，色彩空间变换的效果可以极其有益。这将在下面对图2和3的描述中简要提及。
在残余信号的上下文中，本发明描述了一种用于在主(例如RGB)与副(例如YCoCg)色彩空间表示之间转换的技术，以便使预测残余信号的色彩空间表示适应给定视频源和当前特定编码条件的特性。通过使用本发明的概念和技术，编码器可以以速率失真最优方式，针对每个单一宏块(画面块)，在残余信号的两个备选色彩表示之间进行选择。编码器的选择可以通过基于宏块的标记以信号的方式通知对应的解码器。在本发明的优选实施例中，本发明的概念可以应用于诸如H.264/MPEG4-AVC之类的高级视频编解码器中，并对减小那些高级编解码器的高质量编码场景中所需的比特速率尤其有用。例如，速率失真最优方式可以理解为规定了比特流的最大比特速率，本发明的编码器可操作用于选择残余信号的、以规定的比特速率提供最佳编码质量的色彩空间表示。然而，也可以针对固定质量优化比特速率，或通过使用某种代价函数来优化R/D比。
图2中描绘了针对单个样本帧的质量-比特速率的依赖关系。
可以看出，x轴上给出了规定的最大比特速率(单位Mbits/Sec)，在y轴上描绘出了相应的图像质量(信噪比，单位dB)。图2示出了针对利用两个不同的固定色彩空间表示对单个画面进行编码的两个所谓“速率失真性能曲线”。第一曲线120示出了当选择RGB作为色彩空间表示时的比特速率对画面的依赖关系，以及第二曲线122示出了当选择YCoCg作为色彩空间表示时的速率失真性能。图2示出了已知的效果，即单个色彩空间表示无法对所有不同的源画面特性而言都是最优的(在速率失真意义上)，R、G和B通道之间的相关度高度依赖于信号，并且甚至可能在一个给定的画面内改变。
图2示出了针对典型的仅帧内编码的场景的速率失真(R-D)曲线，其中色彩空间表示在编码之前已经固定。曲线120表示了在原始RGB域内编码所获得的R-D性能，图122示出了在YCoCg色彩空间中对相同的源进行编码所产生的R-D性能。可以注意到，在图中，已经将失真(D)测量为R、G和B画面信噪比峰值的平均值，即通过将原始画面与编码引入的附加噪声进行比较。
可以注意到，图2中的曲线表示完整画面的平均数据。在以下段落中讨论的关于比特速率的作用在观察单个宏块时可能更占主导地位，这是由于接下来不发生平均作用，并且通过在单个宏块级上使用不同的色彩空间表示来实现的质量的差别甚至可能更大。
从图2中的R-D曲线120和122中可以看出，使用YCoCg表示的低比特速率编码的性能明显优于使用相应的RGB表示的性能。另一方面，当随着越来越多的噪声分量被编码而朝着高比特速率移动时，基于RGB的编码带来了越来越好的性能。由此，存在交叉区123，其指示了两种备选表示的次优R-D性能，这是由于在任一种情况下，对于对单个色彩空间表示中的样本进行编码，只能沿着一条或另一条R-D曲线移动。利用本发明的解码器100和相应的本发明的编码器，本发明的概念解决了这个问题，并实现了与曲线124相对应的编码性能，曲线124是基于RGB和基于YCoCg的两条R-D曲线的R-D包络。
此外，在许多编码应用中，预先不知道特定编码条件和源的典型特性。利用本发明的解码器和相应的本发明的编码器，可以自适应地选择在速率失真意义下最优的最优的色彩空间表示。
图3给出了将几乎为灰色的信号从RGB色彩空间变换到YCoCg色彩空间的示例，用于进一步解释导致比特速率的潜在降低的本发明的概念和机制。从RGB到YCoCg的色彩空间表示的色彩变换可以按照可逆的方式、通过对每个(R，G，B)或(Y，Co，Cg)三元组的值分别应用以下操作来进行：
Co = R - B t = B + ( Co > > 1 ) Cg = G - t Y = t + ( Cg > > 1 ) ⇔ t = Y - ( Cg > > 1 ) G = Cg + t B = t - ( Co > > 1 ) R = B + Co .
在上述记号中，运算符(＞＞)表示将其后的比特串逐比特右移，从而等效于除以2。
可以再次注意到，本发明的思想不取决于对其间转换的色彩空间表示的确切选择。在给定的示例中，对所引述的色彩空间表示的限制主要是因为它们被广泛使用的事实。
图3示出了从RGB色彩空间到YCoCg色彩空间的色彩空间变换的图形表示。原始RGB信号140示例性地具有几乎相等的R、G和B参数，即相应的像素几乎为灰色，其强度正比于或取决于RGB值之和。由于所讨论的像素几乎为无色，到YCoCg色彩空间的变换确实为色度参数Co和Cg提供了接近于零的参数值，这与信号几乎无色的事实相似。另一方面，亮度参数Y具有较之色调参数相当大的值。
图3所示的示例示出了主要是次饱和色彩的内容，其中，从RGB到例如YCoCg的解相关色彩变换的使用在总的编码效率方面非常有用，这是由于相应的三色值(在一个色彩空间表示内的单个信息通道的值)接近于彼此相等。如果在一个画面内，色彩饱和度相当低，则各个RGB值可能在某种程度上不同。然后，和(即YCoCg表示的Y参数)可以在图像中平滑地变化，由于低色彩饱和度，Co和Cg参数相当小。这样的平滑或几乎恒定的参数可以被更有效地编码。
因此，色彩变换的有效性可以高度依赖于特定编码条件。对于主通道中包含大量独立于信号、不相关的噪声的源尤其如此。当以矩阵形式写入时，从RGB到YCoCg的色彩变换具有偏离对角线的、具有相当重要数值的矩阵元素。高于量化阈值152(仅作为示例目的示出)的Y通道的“放大”与这些偏离对角线的元素直接相关。因此，对于包含大量独立于信号、不相关的噪声的源，解相关色彩变换的重要的偏离对角线的元素可能导致严重的噪声放大，噪声放大反过来造成高比特速率范围内的编码效率的降低，在高比特速率范围，典型地，噪声分量在量化处理之后仍然存在。
如上所述，对于图2和图3，使色彩表示以一个宏块接着一个宏块(一个画面块接着一个画面块)为基础适应于给定的预测残余信号的特性是极其有利的。因此，在包括预测残余信号的比特流中，可以在比特流中引入新的语法元素。例如，该语法元素在等于一时，可以指示通过调用前述相应的正和反变换操作对给定的宏块进行编码和解码，包括色彩空间变换应用。当等于零或不出现时，所引入的标记还可以意味着按照之前已经指定的相同方式(即基于在编码之前存在的原始色彩空间)进行编码和解码处理。
图4示出了本发明的编码器200，用于产生具有多个画面块的画面的表示，其中画面块携带针对小于整个画面200的区域的画面区域的画面信息。编码器200具有色彩空间变换器202，用于将画面块的画面信息从第一色彩空间表示(A)变换到第二色彩空间表示(B)。
在基于画面块对画面进行编码的情况下，将各个画面块210A至210F输入到本发明的编码器200。该编码器输出以第一色彩空间表示(A)或第二色彩空间表示(B)的画面块。
编码器200还可以包括变换判决器214，其以一个画面块接着一个画面块为基础，判决是否应对处理后的画面块执行变换。例如，变换判决器214可以满足基于最大可允许比特速率的变换判决，以选择以给定比特速率提供最佳可能质量的色彩空间表示。
另一种可能性在于，定义所需的最大质量(与量化的粗糙度紧密相关)，即所需的失真值，变换判决器214基于尝试和出错工作，其中，各个画面块通常以两种色彩空间表示进行编码，并且变换判决器214选择产生低比特速率的色彩空间变换。当然，变换判决器可以使用所有其他判决规则，例如，基于分析表达式或基于先前所制表的样本配置的估计。本发明的编码器200还可操作用于将指示给定画面块所需的变换与也具有画面块信息的比特流结合。这通过信号通知相应的解码器在解码器侧是否进行色彩空间的变换。
在如前面所提出地引入这样的附加标记以通过信号通知是否对所讨论的宏块执行色彩空间的变换时，可以通过对所引入的标记(例如所调用的mb_rct_flag(“宏块残余色彩变换标记”))进行熵编码来进一步节约比特速率。为了实现有效的编码，例如，可以应用算术编码思想来对二进制数据进行编码。因此，所选择的算术编码可以是二进制算术编码思想，其依赖于每个比特(或每个与特定宏块相关的mb_rct_flag)出现0或1值的概率。此外，例如，它可以有利于以自适应的方式实现二进制算术编码，即利用算术编码算法的基本概率分布是根据已经被编码的mb_rct_flag的实际出现来“学习”或更新的方式。这就是说，一旦观察到真实值，则更新单个比特值的出现概率，因此基本概率分布与实际相适应。
此外，自适应二进制算术编码也可以按照对上下文敏感的方式来实现，即对于不同定义的上下文，有不同的概率分布。换言之，mb_rct_flag可能使用多于一个上下文。图4a示出了上下文描述的一个示例，其中，在画面240中示出了三个宏块242a、242b和242c。例如，如果要对宏块242a进行编码，则上下文(即要编码的宏块的环境条件)可以由相邻的左(a)宏块242b和由相邻的上(b)宏块242c获得。基于这些宏块的mb_rct_flag，可以通过以下表达式获得3个不同的上下文ctxIdxInc：
ctxIdxInc(C)＝(mb_rct_flag(A)＝＝0):0？1+(mb_rct_flag(B)＝＝0)？0:1。
根据备选的标记，这可以写为：
ctxIdxInc(C)＝mb_rct_flag(A)+mb_rct_flag(B)。
应注意，如上所述，mb_rct_flag不必对于每一单个宏块都出现。为了给上述方程赋值，当该标记不出现时，则认为其等于0。
例如，一种方式还预见了附加功能，附加功能也通过标记“rct_mode_flag”发信号通知。该标记可以针对更大的宏块样本开启或关闭色彩空间变换，该更大的宏块样本形成了例如一起共享一些其他不同特性的宏块的片段。只有在rct_mode_flag等于1时，mb_rct_flag才应在宏块层中出现。
作为简化的示例，图5示出了使用运动估计和预测残余编码的编码处理。应当基于两个连续的画面250和252简要地说明编码。在画面252中的样本宏块254A的帮助下介绍运动估计。
在画面252中的运动估计步骤期间，也可以找到宏块254A的画面内容，将其称为参考画面。在参考画面中，运动向量256将相应的宏块254B从其在画面252中的位置254A转移。在宏块254B完全没有改变其内容的情况下，用于获得画面252中与宏块254B的位置相对应的画面部分的直接方式是简单地在比特流内传送运动向量256。这使得解码器在拥有前一个画面250的知识时能够在适当的位置处重构画面块254B。
在更一般的场景中，宏块254B的画面内容相对于参考画面250中的对应区域254A的画面内容将发生变化。在预测编码中，只传送预测254A与实际内容254B之间的差别，这是由于残余样本被认为很小从而可以使用低比特速率编码。因此，除了宏块250A和运动向量256之外，还必须计算残余信号258，并将其用于最终传送的信号的表示。根据本发明，最终传送的信号可以根据可用传送信道的比特速率或带宽，以第一色彩空间表示158A传送或者以第二色彩空间表示258B传送。
这里应注意，最简单的情况是，针对所有三个信号分量(例如R、G和B)具有单个运动向量，即参考信息是从相同参考画面的相同块获得的。在更普通的方法中，对每个信号分量可以得到不同的运动向量，即参考信号是从另外源自不同的参考画面的不同的画面块得到的。因此，本发明不必局限于具有一个运动向量的情况，即针对所有三个分量具有相同的预测运算符的情况。作为示例，本发明的优选实施例具有一个单一运动向量。
如上所述，使用预测残余编码的基于宏块的编码方案的应用是优选的应用场景，由此可以通过简单而容易计算的色彩空间变换来进一步有利地减小所需的比特速率。
图6示出了本发明的比特流300，比特流300具有可以以第一色彩空间表示(A)或第二色彩空间表示(B)提供的多个画面块的比特流表示302A至302C。本发明的比特流可由本发明的解码器用于允许通过传送信道高度压缩地传送压缩的画面或压缩的画面序列，传送信道可以是有线、无线或类似的传送信道。当然，本发明的比特流可以存储在计算机可读存储介质上，这具有仅需要很少存储空间的优点。该比特流还可以包括指示信息304，指示画面块320B所需的色彩空间变换。
尽管之前所描述的本发明的实施例主要使用RGB和YCoCg空间进行描述，但是，本发明并不完全局限于使用这些色彩空间。在另外的实施例中，可以使用任意其他色彩空间或其他对色彩间解相关的技术，甚至可以提供能够在3种或更多种不同的色彩空间表示之间变换的本发明的编码器或解码器。
尽管主要关于视频编码对本发明进行描述，但它也可以被有利地用于静止图像的编码。此外，样本的数目可以变化。
根据本发明方法的具体实现要求，本发明的方法可以利用硬件或软件来实现。可以使用数字存储介质(尤其是在其上存储电子可读控制信号的盘、DVD或CD)来执行该实现，该数字存储介质与可编程计算机系统合作，以执行本发明的方法。因此，本发明通常是具有存储在机器可读载体上的程序代码的计算机程序产品，该程序代码可操作用以在计算机上运行该计算机程序产品时执行本发明的方法。换言之，本发明的方法是具有程序代码的计算机程序，该程序代码用于在计算机上运行该计算机程序时执行至少一个本发明的方法。
尽管已经参照本发明的具体实施例具体说明并描述了前述内容，但是，本领域技术人员应理解，在不背离其精神和范围的前提下可以进行形式和细节上的各种其他变化。应理解，在不背离这里所公开的、并由所附权利要求所包含的更宽的概念的前提下，可以为了适应不同的实施例而做出的各种改变。

Claims (25)

1.一种解码器(100)，用于重构以具有第一画面块(104A)和第二画面块(104B)的表示所表示的画面，所述画面块携带针对比所述画面的区域小的画面区域的画面信息，其中，第一画面块(104A)携带以第一色彩空间表示的画面信息，第二画面块(104B)携带以第二色彩空间表示的画面信息，所述解码器包括：
色彩空间变换器(102)，用于将第一画面块(104A)的色彩空间表示变换为第二色彩空间表示，或将第二画面块(104B)的色彩空间表示变换为第一色彩空间表示。
2.如权利要求1所述的解码器(100)，其中，色彩空间变换器(102)还可操作用于对变换指示信息进行处理，所述变换指示信息指示了针对画面块的所需变换；以及
其中所述解码器(100)还具有标记接收机(108)，用于接收变换指示信息。
3.如权利要求1或2所述的解码器(100)，其中，所述色彩空间变换器(102)可操作用于对RGB色彩空间和第二色彩空间表示进行处理，所述第二色彩空间表示包括一个指示信号的明亮度的亮度参数和两个指示信号的色彩组成的色度参数。
4.如权利要求3所述的解码器(100)，其中，所述色彩空间变换器(102)可操作用于根据以下方程，在由R、G和B参数所描述的RGB色彩空间与由亮度参数Y和色度参数Cg和Co所描述的第二色彩空间表示之间进行色彩空间变换：
Co = R - B t = B + ( Co > > 1 ) Cg = G - t Y = t + ( Cg > > 1 ) ⇔ t = Y - ( Cg > > 1 ) G = Cg + t B = t - ( Co > > 1 ) R = B + Co .
5.如之前任一权利要求所述的解码器(100)，其中，所述色彩空间变换器(102)可操作用于基于画面块内的画面信息的参数表示来执行变换，所述参数表示描述了变换域中的画面信息。
6.如权利要求5所述的解码器(100)，其中，所述色彩空间变换器(102)可操作用于基于描述频域中的画面信息的参数表示执行变换。
7.如之前任一权利要求所述的解码器(100)，还具有重量化器，用于从画面信息的量化表示中获得描述第一画面块(104A)和第二画面块(104B)的画面信息。
8.如权利要求7所述的解码器(100)，还具有熵解码器，用于利用解码规则，从画面信息的量化表示的熵编码表示中获得画面信息的量化表示。
9.如权利要求8所述的解码器(100)，其中，所述熵解码器可操作用于使用包括可变长度码本的使用在内的熵解码规则。
10.如权利要求8所述的解码器(100)，其中，所述熵解码器可操作用于使用包括二进制算术编码算法的使用在内的熵解码规则。
11.如权利要求8至10中任一项所述的解码器(100)，其中，所述熵编码器可操作用于使用具有一个或更多个根据解码上下文所选择的子规则的解码规则。
12.如之前任一权利要求所述的解码器(100)，其中，所述解码器可操作用于使用来自画面流的参考画面的信息来重构画面，所述参考画面在画面流中、在时间上在所述画面之前或之后，并使用与所述画面中的画面块相对应的相关画面块来表示，所述相关画面块具有与画面块(104A、104B)相同画面内容的画面信息，其中所述画面块与参考画面中的相应画面块之间的相对于给定的画面块的固定位置的位置改变由运动向量描述。
13.如权利要求12所述的解码器(100)，其中，所述解码器可操作用于使用相应的画面块和差别画面块来重构画面块(104A、104B)，所述差别画面块预测所述画面块的画面信息相对于相应的画面块的改变。
14.如权利要求12或13所述的解码器(100)，还包括输入接口，用于接收具有画面流的单个画面的信息的画面流的比特流表示。
15.如之前任一权利要求所述的视频解码器，还具有画面合成器，用于使用第一画面块(104A)和第二画面块(104B)来重构画面。
16.如之前任一权利要求所述的解码器(100)，其中，所述色彩空间变换器(102)还可操作用于对指示画面块的序列的旁路信息进行处理，以及针对所述旁路信息所指示的画面块序列关闭色彩空间变换。
17.一种编码器(200)，用于产生具有第一画面块(212A)和第二画面块(212B)的画面表示(212)，所述画面块携带以第一色彩空间表示的针对比所述画面(210)的区域小的画面区域的画面信息，所述编码器(200)包括：
色彩空间变换器(202)，用于将第一和第二画面块(212A、212B)之一的画面信息变换为第二色彩空间表示，将所述画面块之一的画面信息结合到第二色彩空间表示的表示中，并将所述另一个画面块的画面信息结合到第一色彩空间表示的表示中。
18.如权利要求17所述的编码器(200)，其中，所述色彩空间变换器(202)可操作用于对指示要变换的画面块的变换信息进行处理；以及
所述色彩空间变换器还包括变换判决器(214)，用于使用判决规则产生变换信息。
19.如权利要求18所述的编码器(200)，其中，所述变换判决器(214)可操作用于使用判决规则，所述判决规则选择在变换为第二色彩空间表示时需要较少信息单元的画面块。
20.如权利要求18所述的编码器(200)，其中，所述变换判决器(214)可操作用于使用判决规则，所述判决规则利用速率失真最优的方式选择画面块。
21.如之前任一权利要求所述的编码器(200)，还包括输出接口，用于输出具有画面信息的比特流(300)，所述画面信息包括第一(214A)和第二画面块(212B)的信息。
22.一种解码方法，用于对以具有第一画面块(104A)和第二画面块(104B)的表示所表示的画面进行解码，所述画面块携带针对比所述画面的区域小的画面区域的画面信息，其中，第一画面块(104A)携带第一色彩空间表示的画面信息，第二画面块(104B)携带第二色彩空间表示的画面信息，所述方法包括：
将第一画面块(104A)的色彩空间表示变换为第二色彩空间表示，或将第二画面块(104B)的色彩空间表示变换为第一色彩空间表示。
23.一种用于产生对具有第一画面块(212A)和第二画面块(212B)的画面的表示的方法，所述画面块携带以第一色彩空间表示的、针对比所述画面的区域小的画面区域的画面信息，所述方法包括：
将第一画面块(212A)或第二画面块(212B)的画面信息变换为第二色彩空间表示。
24.一种参数比特流(300)，具有对画面的表示，所述表示具有第一画面块(302A)和第二画面块(302B)，所述画面块携带针对比所述画面的区域小的画面区域的画面信息，其中，第一画面块(302A)携带第一色彩空间表示的画面信息，第二画面块(302B)携带第二色彩空间表示的画面信息。
25.一种计算机程序，当在计算机上运行时，用于执行权利要求22或23所述的任一方法。
CN2006800509617A 2006-01-13 2006-02-13 使用自适应色彩空间变换的画面编码 Active CN101356825B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201310101249.7A CN103297769B (zh) 2006-01-13 2006-02-13 使用自适应色彩空间变换的画面编码

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EPPCT/EP2006/000286 2006-01-13
EP2006000286 2006-01-13
PCT/EP2006/001292 WO2007079781A1 (en) 2006-01-13 2006-02-13 Picture coding using adaptive colour space transformation

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201310101249.7A Division CN103297769B (zh) 2006-01-13 2006-02-13 使用自适应色彩空间变换的画面编码

Publications (2)

Publication Number Publication Date
CN101356825A true CN101356825A (zh) 2009-01-28
CN101356825B CN101356825B (zh) 2013-06-12

Family

ID=37137399

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201310101249.7A Active CN103297769B (zh) 2006-01-13 2006-02-13 使用自适应色彩空间变换的画面编码
CN2006800509617A Active CN101356825B (zh) 2006-01-13 2006-02-13 使用自适应色彩空间变换的画面编码

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201310101249.7A Active CN103297769B (zh) 2006-01-13 2006-02-13 使用自适应色彩空间变换的画面编码

Country Status (5)

Country Link
US (1) US8446960B2 (zh)
JP (1) JP5101522B2 (zh)
CN (2) CN103297769B (zh)
HK (1) HK1126916A1 (zh)
WO (1) WO2007079781A1 (zh)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102598514A (zh) * 2009-08-21 2012-07-18 汤姆森特许公司 显性更新熵编码器或解码器的码元概率的方法和装置
US9609362B2 (en) 2014-10-06 2017-03-28 Telefonaktiebolaget Lm Ericsson (Publ) Coding and deriving quantization parameters
CN107087185A (zh) * 2011-07-11 2017-08-22 太阳专利托管公司 解码方法及解码装置
CN107454407A (zh) * 2011-04-01 2017-12-08 Lg 电子株式会社 熵解码方法和使用其的解码装置
US10439637B2 (en) 2011-06-30 2019-10-08 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
CN110460848A (zh) * 2013-05-30 2019-11-15 苹果公司 用于解码视频数据的方法、介质和系统
US10595022B2 (en) 2011-06-30 2020-03-17 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
CN110971905A (zh) * 2014-03-14 2020-04-07 Vid拓展公司 用于rgb视频编码增强的系统和方法
US10638164B2 (en) 2011-06-24 2020-04-28 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10652584B2 (en) 2011-06-29 2020-05-12 Sun Patent Trust Image decoding method including determining a context for a current block according to a signal type under which a control parameter for the current block is classified
US10687074B2 (en) 2011-06-27 2020-06-16 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10750184B2 (en) 2011-06-28 2020-08-18 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US11109043B2 (en) 2011-06-24 2021-08-31 Sun Patent Trust Coding method and coding apparatus
USRE48810E1 (en) 2011-06-23 2021-11-02 Sun Patent Trust Image decoding method and apparatus based on a signal type of the control parameter of the current block
US11184613B2 (en) 2013-05-30 2021-11-23 Apple Inc. Adaptive color space transform coding
CN114205586A (zh) * 2021-12-07 2022-03-18 眸芯科技（上海）有限公司 基于多色彩空间进行率失真优化的视频处理方法及应用

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007079781A1 (en) 2006-01-13 2007-07-19 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Picture coding using adaptive colour space transformation
JP4876122B2 (ja) * 2006-03-22 2012-02-15 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ 精度スケーラビリティを可能にする符号化スキーム
KR101345295B1 (ko) * 2007-06-11 2013-12-27 삼성전자주식회사 인트라 픽처만을 이용한 동영상 시퀀스의 부호화시의비트율 제어 방법 및 장치
BRPI0817888A2 (pt) * 2007-10-15 2015-03-31 Mitsubishi Electric Corp Dispositivos e métodos de codificação e de decodificação de imagem.
KR101213704B1 (ko) * 2007-12-05 2012-12-18 삼성전자주식회사 가변 컬러 포맷 기반 동영상 부호화 방법 및 장치, 그복호화 방법 및 장치
US9083986B2 (en) * 2009-05-01 2015-07-14 Broadcom Corporation Method and system for adaptive rate video compression and transmission
WO2012109582A1 (en) * 2011-02-10 2012-08-16 Ncomputing Inc. System and method for multistage optimized jpeg output
CN102364945B (zh) * 2011-11-28 2014-06-11 杭州海康威视数字技术股份有限公司 多画面图像解码显示的方法及其视频监控终端
US8934726B2 (en) 2011-12-19 2015-01-13 Dolby Laboratories Licensing Corporation Video codecs with integrated gamut management
JP5664980B2 (ja) * 2012-06-19 2015-02-04 コニカミノルタ株式会社 画像処理装置及び画像圧縮方法
US10230956B2 (en) 2012-09-26 2019-03-12 Integrated Device Technology, Inc. Apparatuses and methods for optimizing rate-distortion of syntax elements
US10277907B2 (en) * 2012-10-25 2019-04-30 Integrated Device Technology, Inc. Rate-distortion optimizers and optimization techniques including joint optimization of multiple color components
US10708588B2 (en) * 2013-06-19 2020-07-07 Apple Inc. Sample adaptive offset control
US20140376611A1 (en) * 2013-06-21 2014-12-25 Qualcomm Incorporated Adaptive color transforms for video coding
EP2874397A1 (en) 2013-11-15 2015-05-20 Thomson Licensing Method of embedding of an image with a color transform
MX365498B (es) * 2014-03-04 2019-06-05 Microsoft Technology Licensing Llc Conmutacion adaptativa de espacios de color, frecuencias de muestreo de color y/o profundidades de bits.
WO2015131330A1 (en) * 2014-03-04 2015-09-11 Microsoft Technology Licensing, Llc Encoding strategies for adaptive switching of color spaces, color sampling rates and/or bit depths
US9948933B2 (en) * 2014-03-14 2018-04-17 Qualcomm Incorporated Block adaptive color-space conversion coding
CN105432077B (zh) 2014-03-27 2017-12-29 微软技术许可有限责任公司 在切换色彩空间时调整量化/缩放和逆量化/缩放
CN107113431B (zh) 2014-10-03 2020-12-01 日本电气株式会社 视频编码设备、视频解码设备、视频编码方法、视频解码方法和程序
GB2531004A (en) * 2014-10-06 2016-04-13 Canon Kk Residual colour transform signalled at sequence level for specific coding modes
CN105960802B (zh) * 2014-10-08 2018-02-06 微软技术许可有限责任公司 切换色彩空间时对编码和解码的调整
US10225561B2 (en) * 2015-10-08 2019-03-05 Mediatek Inc. Method and apparatus for syntax signaling in image and video compression
US10448024B2 (en) * 2016-01-11 2019-10-15 Qualcomm Incorporated System and methods for calculating distortion in display stream compression (DSC)
US20170310969A1 (en) * 2016-04-20 2017-10-26 Mediatek Inc. Image encoding method and apparatus with color space transform performed upon predictor and associated image decoding method and apparatus
CN106507057A (zh) * 2016-12-02 2017-03-15 深圳市唯科视科技有限公司 一种应用于无人机系统的高速图像传输系统
US10798420B2 (en) 2017-02-28 2020-10-06 Apple Inc. Lossless compression techniques for single-channel images
US10362325B2 (en) 2017-06-04 2019-07-23 Apple Inc. Techniques for compressing multiple-channel images
US10362319B2 (en) 2017-06-04 2019-07-23 Apple Inc. Techniques for compressing multiple-channel images
GB2568261B (en) * 2017-11-08 2022-01-26 Displaylink Uk Ltd System and method for presenting data at variable quality
JP2019176212A (ja) * 2018-03-27 2019-10-10 日本放送協会 色差信号形式判定装置、符号化装置、及びプログラム
US11057634B2 (en) * 2019-05-15 2021-07-06 Disney Enterprises, Inc. Content adaptive optimization for neural data compression

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4974171A (en) * 1989-08-03 1990-11-27 Eastman Kodak Company Page buffer system for an electronic gray-scale color printer
US5144424A (en) * 1991-10-15 1992-09-01 Thomson Consumer Electronics, Inc. Apparatus for video data quantization control
US5533173A (en) * 1991-10-21 1996-07-02 Polaroid Corporation Method and apparatus for processing a color map using discrete cosine transforms
DE4310727C2 (de) * 1992-04-06 1996-07-11 Hell Ag Linotype Verfahren und Einrichtung zur Analyse von Bildvorlagen
US5253055A (en) * 1992-07-02 1993-10-12 At&T Bell Laboratories Efficient frequency scalable video encoding with coefficient selection
US5671298A (en) * 1994-08-30 1997-09-23 Texas Instruments Incorporated Image scaling using cubic filters
JP3600372B2 (ja) 1995-06-27 2004-12-15 株式会社リコー 色再現域補正装置および方法
US6094454A (en) * 1997-06-19 2000-07-25 International Business Machines Corporation Multi-spectral image compression and transformation
JP2002247375A (ja) 2001-02-15 2002-08-30 Canon Inc 画像符号化装置及びその方法並びにプログラムコード、記憶媒体
JP4576770B2 (ja) * 2001-08-03 2010-11-10 セイコーエプソン株式会社 画像ファイルの生成
US7092573B2 (en) * 2001-12-10 2006-08-15 Eastman Kodak Company Method and system for selectively applying enhancement to an image
JP2004112566A (ja) 2002-09-20 2004-04-08 Ricoh Co Ltd 画像処理装置、画像処理方法、画像処理プログラム、及び画像処理プログラムを記憶する記憶媒体
JP4815107B2 (ja) * 2003-07-16 2011-11-16 三星電子株式会社 カラー平面間予測を利用した無損失映像符号化／復号化方法及び装置
US20050129130A1 (en) * 2003-12-10 2005-06-16 Microsoft Corporation Color space coding framework
KR100596705B1 (ko) 2004-03-04 2006-07-04 삼성전자주식회사 비디오 스트리밍 서비스를 위한 비디오 코딩 방법과 비디오 인코딩 시스템, 및 비디오 디코딩 방법과 비디오 디코딩 시스템
US20050259730A1 (en) * 2004-05-18 2005-11-24 Sharp Laboratories Of America, Inc. Video coding with residual color conversion using reversible YCoCg
KR20050113501A (ko) * 2004-05-29 2005-12-02 삼성전자주식회사 에이치 264 비디오 디코더를 위한 구문 분석기
MXPA06014314A (es) 2004-06-07 2007-05-23 Agency Science Tech & Res Sistemas y metodos para codificar y descodificar datos escalablemente.
KR100763178B1 (ko) 2005-03-04 2007-10-04 삼성전자주식회사 색 공간 스케일러블 비디오 코딩 및 디코딩 방법, 이를위한 장치
WO2007079781A1 (en) 2006-01-13 2007-07-19 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Picture coding using adaptive colour space transformation

Cited By (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9654138B2 (en) 2009-08-21 2017-05-16 Thomson Licensing Dtv Methods and apparatus for explicit updates for symbol probabilities of an entropy encoder or decoder
CN102598514B (zh) * 2009-08-21 2015-12-09 汤姆森特许公司 显性更新熵编码器或解码器的码元概率的方法和装置
CN102598514A (zh) * 2009-08-21 2012-07-18 汤姆森特许公司 显性更新熵编码器或解码器的码元概率的方法和装置
US10841622B2 (en) 2011-04-01 2020-11-17 Lg Electronics Inc. Entropy encoding method, entropy decoding method, and apparatus using same
CN107454407A (zh) * 2011-04-01 2017-12-08 Lg 电子株式会社 熵解码方法和使用其的解码装置
CN107454411A (zh) * 2011-04-01 2017-12-08 Lg 电子株式会社 熵解码方法和使用其的解码装置
US11616989B2 (en) 2011-04-01 2023-03-28 Lg Electronics Inc. Entropy decoding method, and decoding apparatus using same
USRE49906E1 (en) 2011-06-23 2024-04-02 Sun Patent Trust Image decoding method and apparatus based on a signal type of the control parameter of the current block
USRE48810E1 (en) 2011-06-23 2021-11-02 Sun Patent Trust Image decoding method and apparatus based on a signal type of the control parameter of the current block
US11758158B2 (en) 2011-06-24 2023-09-12 Sun Patent Trust Coding method and coding apparatus
US11109043B2 (en) 2011-06-24 2021-08-31 Sun Patent Trust Coding method and coding apparatus
US11457225B2 (en) 2011-06-24 2022-09-27 Sun Patent Trust Coding method and coding apparatus
US10638164B2 (en) 2011-06-24 2020-04-28 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10687074B2 (en) 2011-06-27 2020-06-16 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10750184B2 (en) 2011-06-28 2020-08-18 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10652584B2 (en) 2011-06-29 2020-05-12 Sun Patent Trust Image decoding method including determining a context for a current block according to a signal type under which a control parameter for the current block is classified
US10903848B2 (en) 2011-06-30 2021-01-26 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US11792400B2 (en) 2011-06-30 2023-10-17 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10595022B2 (en) 2011-06-30 2020-03-17 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US10439637B2 (en) 2011-06-30 2019-10-08 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US11356666B2 (en) 2011-06-30 2022-06-07 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
CN107087185A (zh) * 2011-07-11 2017-08-22 太阳专利托管公司 解码方法及解码装置
US10575003B2 (en) 2011-07-11 2020-02-25 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
CN107087185B (zh) * 2011-07-11 2020-01-10 太阳专利托管公司 编码方法及编码装置、解码方法及解码装置
US11770544B2 (en) 2011-07-11 2023-09-26 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US12108059B2 (en) 2011-07-11 2024-10-01 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
US11343518B2 (en) 2011-07-11 2022-05-24 Sun Patent Trust Image decoding method, image coding method, image decoding apparatus, image coding apparatus, and image coding and decoding apparatus
CN110460848A (zh) * 2013-05-30 2019-11-15 苹果公司 用于解码视频数据的方法、介质和系统
US11368688B2 (en) 2013-05-30 2022-06-21 Apple Inc. Adaptive color space transform coding
US11368689B2 (en) 2013-05-30 2022-06-21 Apple Inc. Adaptive color space transform coding
CN110460848B (zh) * 2013-05-30 2022-02-18 苹果公司 用于解码视频数据的方法、介质和系统
US11758135B2 (en) 2013-05-30 2023-09-12 Apple Inc. Adaptive color space transform coding
US11184613B2 (en) 2013-05-30 2021-11-23 Apple Inc. Adaptive color space transform coding
CN110971905A (zh) * 2014-03-14 2020-04-07 Vid拓展公司 用于rgb视频编码增强的系统和方法
CN110971905B (zh) * 2014-03-14 2023-11-17 Vid拓展公司 编解码视频内容的方法、装置和存储介质
US10091509B2 (en) 2014-10-06 2018-10-02 Telefonaktiebolaget Lm Ericsson (Publ) Coding and deriving quantization parameters
US9609362B2 (en) 2014-10-06 2017-03-28 Telefonaktiebolaget Lm Ericsson (Publ) Coding and deriving quantization parameters
CN114205586A (zh) * 2021-12-07 2022-03-18 眸芯科技（上海）有限公司 基于多色彩空间进行率失真优化的视频处理方法及应用

Also Published As

Publication number Publication date
HK1126916A1 (en) 2009-09-11
CN103297769B (zh) 2016-09-07
WO2007079781A1 (en) 2007-07-19
CN103297769A (zh) 2013-09-11
JP2009523337A (ja) 2009-06-18
JP5101522B2 (ja) 2012-12-19
US20090168894A1 (en) 2009-07-02
US8446960B2 (en) 2013-05-21
CN101356825B (zh) 2013-06-12

Similar Documents

Publication Publication Date Title
CN101356825B (zh) 使用自适应色彩空间变换的画面编码
CN102144391B (zh) 用于层间残余视频编码和解码的跳过模式
CN112929670B (zh) 自适应色度下采样和色彩空间转换技术
JP5619790B2 (ja) 二層符号化及び単層復号化による階層的ビデオ符号化
CN104885457B (zh) 用于视频信号的向后兼容编码和解码的方法和装置
US5815601A (en) Image encoder and image decoder
CN103428497B (zh) 用于增强层视频编码的适应性量化
JP2018160932A5 (ja) スクリーンコンテンツ符号化のためのパレット符号化
CN102067609B (zh) 利用降低的比特深度更新模式和降低的色度采样更新模式进行视频编码和解码的方法及装置
CN105230023A (zh) 色彩空间、色彩采样率和/或比特深度的自适应切换
CN110301134A (zh) 整合的图像整形和视频编码
CN105264888A (zh) 用于对色彩空间、色彩采样率和/或比特深度自适应切换的编码策略
KR102120571B1 (ko) 넌-4:4:4 크로마 서브-샘플링의 디스플레이 스트림 압축 (dsc) 을 위한 엔트로피 코딩 기법들
CN105432077A (zh) 在切换色彩空间时调整量化/缩放和逆量化/缩放
US20140185674A1 (en) Methods and Systems for Inter-Layer Image Prediction Signaling
JP2008533850A5 (zh)
CN105308960A (zh) 自适应色彩空间变换编码
CN107211152A (zh) 用于对高动态范围（hdr）视频进行编码和解码的方法和装置
CN105122804A (zh) 利用颜色位深缩放的视频压缩
TWI634778B (zh) 用於顯示串流壓縮之複合區域偵測
CN104685878A (zh) 具有颜色空间缩放性的视频压缩
CN102835107A (zh) 高性能视频编码的超块
EP1977602B1 (en) Picture coding using adaptive colour space transformation
GB2363945A (en) Image transmission enabling a lower data rate and less degradation of image quality by shrinking the screen size
CN114205586A (zh) 基于多色彩空间进行率失真优化的视频处理方法及应用

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1126916

Country of ref document: HK

C14 Grant of patent or utility model
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: GR

Ref document number: 1126916

Country of ref document: HK

ASS Succession or assignment of patent right

Owner name: GE VIDEO COMPRESSION, LLC

Free format text: FORMER OWNER: FRAUNHOFER-GESELLSCHAFT ZUR FORDERUNG DER ANGEWANDTEN FORSCHUNG E.V.

Effective date: 20150826

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20150826

Address after: American New York

Patentee after: GE VIDEO COMPRESSION LLC

Address before: Munich, Germany

Patentee before: Fraunhofer Application and Research Promotion Association