CN110971905B - 编解码视频内容的方法、装置和存储介质 - Google Patents

编解码视频内容的方法、装置和存储介质 Download PDF

Info

Publication number
CN110971905B
CN110971905B CN201911127826.3A CN201911127826A CN110971905B CN 110971905 B CN110971905 B CN 110971905B CN 201911127826 A CN201911127826 A CN 201911127826A CN 110971905 B CN110971905 B CN 110971905B
Authority
CN
China
Prior art keywords
color space
coding
residual
space conversion
blocks
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911127826.3A
Other languages
English (en)
Other versions
CN110971905A (zh
Inventor
修晓宇
贺玉文
C-M·蔡
叶琰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vid Scale Inc
Original Assignee
Vid Scale Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vid Scale Inc filed Critical Vid Scale Inc
Priority to CN201911127826.3A priority Critical patent/CN110971905B/zh
Publication of CN110971905A publication Critical patent/CN110971905A/zh
Application granted granted Critical
Publication of CN110971905B publication Critical patent/CN110971905B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44—Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/12—Selection from among a plurality of transforms or standards, e.g. selection between discrete cosine transform [DCT] and sub-band transform or selection between H.263 and H.264
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/174—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a slice, e.g. a line of blocks or a group of blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8451—Structuring of content, e.g. decomposing content into time segments using Advanced Video Coding [AVC]

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Discrete Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

公开了一种用于执行自适应残余色彩空间转换的系统、方法和设备。可接收视频比特流并基于视频比特流确定第一标志。还可基于视频比特流生成残差。可响应于第一标志将残差从第一色彩空间转换到第二色彩空间。

Description

编解码视频内容的方法、装置和存储介质
本申请是申请日为2015年3月14日、申请号为201580014202.4、发明名称为“用于RGB视频编码增强的系统和方法”的中国发明专利申请的分案申请。
背景技术
随着设备和网络能力的强化，屏幕内容共享应用已经变得愈加流行。流行屏幕内容共享应用的实例包括远程桌面应用、视频会议应用以及移动媒体呈现应用。屏幕内容可包括具有一个或多个主色彩和/或锐利边缘的诸多视频和/或图像元素。这种图像和视频元素可包括这种元素内部的相对锐利的曲线和/或文本。尽管可使用多种视频压缩装置和方法来对屏幕内容进行编码和/或将这种内容发送给接收机，但是此类方法和装置可能无法完全地表示屏幕内容特性的一个或多个特征。这种特征的缺失会导致重建图像或视频内容中退化的压缩性能。在这样的实现中，重建的图像或视频内容会受到图像或视频质量问题的负面影响。例如，这种曲线和/或文本可能是模糊的、失真的或者难以在屏幕内容中辨识。
发明内容
公开了一种用于编码和解码视频内容的系统、方法和设备。在一实施例中，系统和方法可被实施为执行自适应残余色彩空间转换。可接收视频比特流并基于所述视频比特流确定第一标志。还可基于所述视频比特流生成残差。可响应于第一标志将所述残差从第一色彩空间转换到第二色彩空间。
在一实施例中，确定第一所述标志可以包括接收以编码单元级别的所述第一标志。可仅在以所述编码单元级别的第二标志表明所述编码单元中存在具有非零值的至少一个残差的情况下，接收所述第一标志。可通过应用色彩空间转换矩阵来执行所述残差从所述第一色彩空间到所述第二色彩空间的转换。该色彩空间转换矩阵可与能够应用于有损编码的不可逆YCgCo到RGB转换矩阵对应。在另一实施例中，所述色彩空间转换矩阵可与能够应用于无损编码的可逆YCgCo到RGB转换矩阵对应。从所述第一色彩空间到所述第二色彩空间的残差转换可包括应用缩放因子矩阵，并且在色彩空间转换矩阵不是归一化的情况下，缩放因子矩阵的每行都可以包括与未归一化色彩空间转换矩阵的对应行的范数相对应的缩放因子。所述色彩空间转换矩阵可包括至少一个定点精度系数。基于所述视频比特流的第二标志可以序列级别、图片级别或切片(slice)级别来用信号发送，并且该第二标志可表明是否分别针对序列级别、图片级别或切片级别分别启用了将所述残差从所述第一色彩空间到所述第二色彩空间的转换过程。
在一实施例中，可在第一色彩空间对编码单元的残差进行编码。可基于对可用色彩空间中的残残差余进行编码的花销来确定编码这种残差的最佳模式。可基于所确定的最佳模式来确定标志，并可将其包含在输出比特流中。下文将阐述所公开的主题的这些以及其他方面。
附图说明
图1是示意性示出根据一实施例的示例性屏幕内容共享系统的框图；
图2是示意性示出根据一实施例的示例性视频编码系统的框图；
图3是示意性示出根据一实施例的示例性视频解码系统的框图；
图4是示意性示出根据一实施例的示例性预测单元模式；
图5是示意性示出根据一实施例的示例性彩色图像；
图6是示意性示出用于实现所公开主题的实施例的示例性方法；
图7是示意性示出用于实现所公开主题的实施例的另一示例性方法；
图8是示意性示出根据一实施例的示例性视频编码系统的框图；
图9是示意性示出根据一实施例的示例性视频解码系统的框图；
图10是示意性示出根据一实施例的将预测单元示例性细分成变换单元的框图；
图11A是其中可实施所公开主题的示例通信系统的系统图；
图11B是图11A中示意的通信系统中可使用的示例无线发送/接收单元(WTRU)的系统图；
图11C是图11A中示意的通信系统中可使用的示例无线电接入网络和示例核心网络的系统图；
图11D是图11A中示意的通信系统中可使用的另一示例无线电接入网络和示例核心网络的系统图；
图11E是图11A中示意的通信系统中可使用的另一示例无线电接入网络和示例核心网络的系统图。
具体实施方式
现在将参考各附图来描述示例性示例的详细描述。虽然该描述提供了对可能的实施的详细示例，但是应当注意的是，这些细节仅仅是意在示例性的而不是以任何方式来限制本申请的范围。
随着更多的人们在使用例如媒体呈现和远程桌面应用时共享设备内容，屏幕内容压缩方法变得重要起来。在一些实施例中，移动设备的显示能力被增强为高清晰或超高清晰度分辨率。例如块编码模式的视频编码工具和变换可能无法被优化用于更高清晰度屏幕内容编码。这样的工具可增加用于发送内容共享应用中的屏幕内容的带宽。
图1示出示例性屏幕内容共享系统191的框图。系统191可包括接收机192、解码器194以及显示器198(也可以称其为“渲染器(renderer)”)。接收机192可向解码器194提供输入比特流193，解码器194可对比特流进行解码以便生成可提供给一个或多个显示图片缓冲器196的解码后的图片195。显示图片缓冲器196可向显示器198提供解码后的图片197用来在设备的一个或多个显示器上显示。
图2示意性示出例如可被实现从而提供比特流给图1的系统191的接收机192的基于块的单层视频编码器200的框图。如图2所示，编码器200可使用诸如空间预测(也可称其为“帧内预测”(intra-prediction))以及时间预测(也可称其为“帧间预测”(inter-prediction)或“运动补偿预测”)的技术，来预测输入视频信号201，以此尝试提高压缩效率。编码器200可包括能够确定预测形式的模式决定和/或其他编码器控制逻辑240。这种确定可以至少部分地基于诸如基于速率的准则、基于失真的准则和/或他们的组合。编码器200可向元件204提供一个或多个预测块206，该元件可生成并向变换元件210提供预测残差205(这可以是输入信号与预测信号之间的差异信号)。编码器200可在变换元件210处对预测残差205进行变换，并在量化元件215处对预测残差205进行量化。量化后的残余与模式信息(例如，帧内或帧间预测)以及预测信息(运动向量、参考图片索引、帧内预测模式等)一起，可以被作为残差系数块222提供给熵编码元件230。熵编码元件230可对量化后的残差进行压缩，并将其提供为输出视频比特流235。熵编码元件230还可以在生成输出视频比特流235的过程中使用或者作为替代使用编码模式、预测模式和/或运动信息208。
在一实施例中，编码器200还可以通过在逆量化元件225处将逆量化应用到残差系数块222以及在逆变换元件220处应用逆变换，来生成或者作为替代生成重建的视频信号，以生成能够在元件209处被加回到预测信号206的重建残差。在一些实施例中，可使用在回路滤波元件250处实现的回路滤波过程(例如通过使用去块滤波、采样自适应偏移和/或自适应回路滤波中的一个或多个)来处理所得到的重建视频信号。在一些实施例中，可在参考图片存储270处存储所得到的以重建块255形式的重建视频信号，在参考图片存储270，重建的视频信号例如通过运动预测(估计和补偿)元件280和/或空间预测元件260，被用来预测未来的视频信号。注意在一些实施例中，在没有诸如回路滤波元件250的元件处理的情况下，元件209生成的所得到的重建视频信号被提供给空间预测元件260。
图3示出可接收视频比特流335的基于块的单层解码器300的框图，其中视频比特流335可以是诸如图2的编码器200生成的比特流235的比特流。解码器300可重建用于在设备上显示的比特流335。解码器300可在熵解码器元件330处对比特流335进行解析，以生成残差系数326。残差系数326可以在去量化元件325处被逆量化，和/或在逆变换元件320处被逆变换，以便获得可提供给元件309的重建的残差。可使用编码模式、预测模式和/或运动模式327来获得预测信号，在一些实施例中，使用空间预测元件360提供的空间预测信息和/或时间预测元件390提供的时间预测信息中的一者或两者。这样的预测信号可作为预测块329而被提供。预测信号以及重建的残差可在元件309处被叠加，以便生成重建的视频信号，该信号可被提供给回路滤波元件350用于回路滤波，并且可被存储在参考图片存储370中用于显示图片和/或解码视频信号。注意可通过熵解码元件330将预测模式328提供给元件309，以便在生成可提供给回路滤波元件350用来回路滤波的重建视频信号的过程中使用。
视频编码标准，例如高效率视频编码(HEVC)，可减小传输带宽和/或存储。在一些实施例中，HEVC实现方式可运行为基于块的混合视频编码，其中所实现的编码器和解码器通常如这里参照图2和3描述的那样运行。HEVC可允许使用更大的视频块，并且可对信号块编码信息使用四元树分割法。在这样的实施例中，图片或图片的一切片可被分割成编码树块(CTB)，每个编码树块都具有相同的大小(例如，64×64)。每个CTB都可被分割成具有四元树分割的码单元(CU)，并且每个CU都可被进一步分割成预测单元(PU)和变换单元(TU)，每个预测单元(PU)和变换单元(TU)也可以使用四元树分割法进行分割。
在一实施例中，对于每个帧间编码(inter-coded)的CU 400，可使用八个示例性分割模式(其实例在图4中被示意性地示为模式410、420、430、440、460、470、480和490)中的一者对关联的PU进行分割。在一些实施例中，可将时间预测应用到重建帧间编码(inter-coded)的PU。可应用线型滤波器以便获得处于分数位置(fractional position)的像素值。在一些此类实施例中使用的插值滤波器对于亮度可具有七阶(tap)或八阶，和/或对于色度可具有四阶。可以使用可以是基于内容的去块滤波器，使得取决于多个因素(其可以包括编码方式差异、运动差异、参考图片差异、像素值差异等中的一个或多个)可在TU和PU的每个边界应用不同的去块滤波操作。在熵编码实施例中，自适应二进制算数编码(CABAC)可用于一个或多个块级别语法元素。在一些实施例中，CABAC可能不用于高级别参数。可在CABAC编码中使用的二进制(bin)可包括基于上下文编码的常规二进制以及不使用上下文的旁路(bypass)编码二进制。
屏幕内容视频可在红绿蓝(RGB)格式中被捕获。RGB信号可包括三个色彩分量之间的冗余。尽管在实现视频压缩的实施例中这样的冗余是低效的，但是对于解码后的屏幕内容视频需要高保真度的应用，可选择使用RGB色彩空间，这是因为色彩空间转换(例如，从RGB编码到YCbCr编码)由于可以用来在不同空间之间转换色彩分量的凑整和剪辑操作，而对原始视频信号引入损耗。在一些实施例中，可通过在三个色彩空间的色彩分量之间使用相关性来改善视频压缩效率。例如，跨分量预测的编码工具可使用G分量的残余来预测B和/或R分量的残余。YCbCr实施例中的Y分量的残余可被用来预测Cb和/或Cr分量的残余。
在一实施例中，运动补偿预测技术可被用来利用时间相邻图片间的冗余。在此类实施例中，可以支持运动向量像Y分量四分之一像素和Cb和/或Cr分量的八分之一像素那样准确。在一实施例中，可使用分数采样插值(fractional sample interpolation)，其可包括可分离的用于半像素位置的8阶滤波器和用于四分之一像素位置的7阶滤波器。下文的表1示出用于Y分量分数插值的示例性滤波器系数。Cb和/或Cr分量的分数插值可使用类似的滤波器系数来实现，除此之外，在一些实施例中，可使用可分离的4阶滤波器，并且运动向量可如4:2:0视频格式实现中八分之一像素那样准确。在4:2:0视频格式实现中，Cb和Cr分量可包含比Y分量少的信息，并且4阶插值滤波器可降低分数插值滤波的复杂度，并且可以不牺牲与8阶插值滤波器实现相比Cb和Cr分量的运动补偿预测中获得的效率。下文的表2示出可用于Cb和Cr分量的分数插值的示例性滤波器系数。
分数位置 滤波器系数
0 {0,0,0,64,0,0,0,0}
2/4 {-1,4,-10,58,17,-5,1,0}
2/4 {-1,4,-11,40,40,-11,4,-1}
3/4 {0,1,-5,17,58,-10,4,-1}
表1用于Y分量分数插值的示例性滤波器系数
分数位置 滤波器系数
0 {0,64,0,0}
1/8 {-2,58,10,-2}
2/8 {-4,54,16,-2}
3/8 {-6,46,28,-4}
4/8 {-4,36,36,-4}
5/8 {-4,28,46,-6}
6/8 {-2,16,54,-4}
7/8 {-2,10,58,-2}
表2用于Cb和Cr分量分数插值的示例性滤波器系数
在一实施例中，在RGB色彩格式中被初始捕获的视频信号可在RGB域中被编码，例如，如果解码后的视频信号希望高保真度。跨分量预测工具可改善编码RGB信号的效率。在一些实施例中，三个色彩分量之间可能存在的冗余可能无法被完全利用，因为在一些实施例中G分量可能被用来预测B和/或R分量，而B和R分量之间的相关性却没有被使用。这种色彩分量的去相关可改善RGB视频编码的编码性能。
分数插值滤波器(fractional interpolation filter)可用来编码RGB视频信号。致力于4:2:0色彩格式中的编码YCbCr视频信号的插值滤波器设计对于编码RGB视频信号而言可能不是优选的。例如，RGB视频的B和R分量可表示更加丰富的色彩信息，并且可拥有与转换的色彩空间的色度分量相比，例如YCbCr色彩空间中的Cb和Cr分量，更高的频率特性。可用于Cb和/或Cr分量的4阶分数滤波器在编码RGB视频时对于B和R分量的运动补偿预测而言可能不足够准确。在无损编码实施例中，参考图片可用于运动补偿预测，其与同这种参考图片相关联的原始图片算数上相同。在这样的实施例中，这种参考图片可包含与使用相同原始图片的有损编码实施例相比更多的边缘(即，高频信号)，在有损编码实施例中，这种参考图片中的高频信息由于量化过程而减少和/或失真。在这样的实施例中，可将能够保留原始图片中的更高频信息的较少阶的插值滤波器用于B和R分量。
在一实施例中，残余色彩转换方法可用于自适应地选择RGB或YCgCro色彩空间，用来对与RGB视频相关联的残余信息进行编码。这样的残余色彩空间转换方法可在不引起编码和/或解码过程期间过高的计算复杂性开销的情况下应用于无损或有损编码或其两者。在另一实施例中，可自适应地选择插值滤波器用于不同色彩分量的运动补偿预测。此类方法可允许在序列、图片和/或CU级别自由地使用不同的分数插值滤波器，并且可改善基于运动补偿的预测编码的效率。
在一实施例中，可在来自原始色彩空间的不同色彩空间中执行残余编码，以便移除原始色彩空间的冗余。可在YCbCr色彩空间而不是RGB色彩空间中执行自然内容(例如，相机捕获视频内容)的视频编码，这是因为YCbCr色彩空间中的编码可提供与RGB色彩空间中的编码相比更加紧凑的原始视频信号表示(例如，YCbCr色彩空间中的跨分量相关性可低于RGB色彩空间中的跨分量)，且YCbCr的编码效率可高于RGB的编码效率。在多数情况下可捕获RGB格式中的源视频，并可能希望高保真度的重建视频。
色彩空间转换并非总是无损的，并且输出色彩空间可能具有与输入色彩空间相同的动态范围。例如，如果RGB视频被转换到具有相同比特深度的ITU-R BT.709YCbCr色彩空间，那么可能存在由于可以在这种色彩空间转换期间执行的凑整和截断操作而引起的一定的损耗。YCgCo可以是可以具有与YCbCr色彩空间类似特性的色彩空间，但是RGB与YCgCo之间的转换过程(即，从RGB到YCgCo及从YCgCo到RGB)在运算上比RGB与YCbCr间的转换过程更加简单，因为在这样的转换期间可仅使用位移(shifting)和加操作。通过增加中间操作的一个比特深度，还可以使得YCgCo完全支持逆转换(即，其中在逆转换之后导出的色彩值在数值上可与原始色彩值相同)。这方面可能是所期望的，因为其可应用于有损和无损实施例两者。
在一实施例中，由于执行YCgCo色彩空间提供的可逆转换的编码效率以及能力，可在残余编码之间将残余从RGB转换到YCgCo。关于是否将RGB应用到YCgCo转换过程的确定可自适应地以序列和/或切片和/或块级别(例如CU级别)来执行。例如，可基于是否应用在速率失真(RD)度量(例如，速率和失真的加权组合)中提供改进的变换，来做出确定。图5示出可以是RGB图片的示例性图像510。图像510可被分解成YCgCo的三个色彩分量。在这样的实施例中，转换矩阵的可逆和不可逆版本两者都可分别特定于无损编码和有损编码。当残余在RGB域中被编码时，编码器可将G分量作为Y分量来对待，而将B和R分量分别作为Cb和Cr分量来对待。在公开的情形中，使用G、B、R顺序而不是R、G、B顺序用来表示RGB视频。注意尽管这里所描述的实施例可能使用了其中执行从RGB到YCgCo的转换的示例来描述，但是本领域技术人员明了也可以使用所公开的实施例来实现RGB与其他色彩空间(例如YCbCr)之间的转换。所有这种实施例都是本示例公开范围内可预见到的。
可使用下文所示的等式(1)和(2)来执行从GBR色彩空间到YCgCo色彩空间的可逆转换。这些等式可用于有损和无损编码两者。等式(1)示出根据一实施例实现从GBR色彩空间到YCgCo的可逆转换的方式：
可以在没有乘法或除法的情况下使用位移来执行，因为：
Co＝R-B
t＝B+(Co>>1)
Cg＝G-t
Y＝t+(Cg>>1)
在这种实施例中，可使用等式(2)来执行从YCgCo到GBR的逆转换：
其可使用位移来执行，因为：
t＝Y-(Cg>>1)
G＝Cg+t
B＝t-(Co>>1)
R＝Co+B
在一实施例中，可使用下文所示的等式(3)和(4)来执行不可逆转换。在一些实施例中，此类不可逆转换可用于有损编码，而不可用于无损编码。等式(3)示出根据一实施例实现从GBR色彩空间到YCgCo的不可逆转换的方式：
根据一实施例，可使用等式(4)来执行从YCgCo到GBR的逆转换：
如等式(3)中所示，可用于有损编码的前向色彩空间变换矩阵可以是没有被归一化的。相比于RGB域中原始残余的量级(magnitude)和/或能量，YCgCo域中的残余信号的量级和/或能量有所减小。YCgCo域中残余信号的这一减小可折中YCgCo域的有损编码性能，这是因为YCgCo残差系数可能通过使用RGB域中已经用过的同一量化参数(QP)而被过度量化。在一实施例中，QP调整方法可用在这样的情形中，其中在应用色彩空间变换以便补偿YCgCo残余信号的量级变化的情况下，增量QP可添加到原始QP值。同一增量QP可应用到Y分量以及Cg和/或Co分量。在实现等式(3)的一些实施例中，前向变换矩阵的不同行可以不具有相同范数(norm)。同一QP调整可能无法确保Y分量以及Cg和/或Co分量都具有与G分量以及B和/或R分量类似的幅度级别。
在一实施例中，为了确保从RGB残余信号转换来的YCgCo残余信号具有与RGB残余信号类似的幅度，一对缩放后的前向和逆变换矩阵可用来转换RGB域和YCgCo域之间的残余信号。更具体地，从RGB域到YCgCo域的前向变换矩阵可通过等式(5)来定义：
其中可表明可处于两个矩阵的相同位置的两项的元素智能(element-wise)矩阵乘法。a、b和c可以是用来补偿原始前向色彩空间变换矩阵中不同行的范数的缩放因子，诸如等式(3)中所使用的，其可使用等式(6)和(7)来推导：
在这样的实施例中，从YCgCo域到RGB域的逆变换可使用等式(8)来实现：
在等式(5)和(8)中，缩放因子可以是实数，其在变换RGB和YCgCo之间的色彩空间时可要求浮点乘法。为了降低实现的复杂性，在一实施例中，缩放因子的乘法可通过具有跟随N比特右移之后的整数M的计算上更高效的乘法来近似。
所公开的色彩空间转换方法和系统可以序列、图片或块(例如CU、TU)级别启用和/或禁用。例如，在一实施例中，预测残余的色彩空间转换可以编码单元级别自适应地启用和/或禁用。编码器可为每个CU选择GBR和YCgCo之间的最优色彩空间。
图6示出用于在此处描述的编码器处使用自适应残余色彩转换的RD最优化过程的示例性方法600。在框605，可使用该实现的“最佳模式”(例如，帧内编码的帧内预测模式，帧间编码的运动向量和参考图片索引)编码对CU的残差进行编码，“最佳模式”可以是预配置的编码模式，其先前被确定为最佳可用的编码模式，或者至少在执行框605的功能的点处已经被确定为具有最低或相对较低的RD花销的另一预确定编码模式。在框610，标志可被设置为“假”(False)(或者被设置为表明假、零等任何其他指示符)，在该示例中被标记为“CU_YCgCo_residual_flag(CU_YCgCo_残差_标志)”，但是也可以使用任何术语或者术语的组合来对其进行标记，表明将不使用YCgCo色彩空间来执行编码单元的残差的编码。响应于在框610处标志被评估为假或等同替换，在框615处，编码器可在GBR色彩空间执行残差编码，并为这种编码计算RD花销(在图6中被标记为“RDCostGBR”，但是在这里再次可使用任何标记或术语来指代这样的花销)。
在框620处，做出关于GBR色彩空间编码的RD花销是否低于最佳模式编码的RD花销(RDCostBestMode)的确定。如果GBR色彩空间编码的RD花销低于最佳模式编码的RD花销，则在框625处，最佳模式的CU_YCgCo_residual_flag可被设置为假或其等同替换(或者可以被保留为设置成假或其等同替换)，最佳模式的RD花销可被设置为GBR色彩空间中残差编码的RD花销。方法600可以进行到框630，其中CU_YCgCo_residual_flag可被设置为真或等效指示符。
在框620处，如果GBR色彩空间的RD花销被确定为高于或等于最佳模式编码的RD花销，则最佳模式编码的RD花销可被保留为框620的评估之前其被设置的值，并绕过框625。方法600可以进行到框630，其中CU_YCgCo_residual_flag可被设置为真或其等效指示符。在框630处CU_YCgCo_residual_flag为真的设置可有助于使用YCgCo色彩空间对编码单元的残差进行编码，因此，下文将描述使用YCgCo色彩空间进行编码的RD花销相比于最佳模式编码的RD花销的估计。
在框635处，可使用YCgCo色彩空间对编码单元的残差进行编码，并确定这种编码的RD花销(图6中这样的花销被标记为“RDCostYCgCo”，但是在这里可再次使用任何标记或术语来指代这样的花销)。
在框640处，做出关于YCgCo色彩空间编码的RD花销是否低于最佳模式编码的RD花销的确定。如果YCgCo色彩空间编码的RD花销低于最佳模式编码的RD花销，则在框645处，最佳模式的CU_YCgCo_residual_flag可被设置为真或其等同替换(或者被保留为设置成真或其等同替换)，最佳模式的RD花销可被设置为YCgCo色彩空间编码中残差编码的RD花销。方法600可在框650结束。
在框640处，如果YCgCo色彩空间的RD花销被确定为高于或等于最佳模式编码的RD花销，则最佳模式编码的RD花销可被保留为框640的评估之前其被设置的值，并可绕过框645。方法600可在框650结束。
本领域技术人员将理解，所公开的实施例，包括方法600及其任何子集，都可允许GBR与YCgCo色彩空间编码及其各自的RD花销的比较，使得可以允许选择具有较低RD花销的色彩空间编码。
图7示出用于在此处描述的编码器处使用自适应残余色彩转换的RD最优化过程的另一示例性方法700。在一实施例中，在当前编码单元中至少一个重建的GBR残差不是零时，编码器可尝试使用YCgCo色彩空间进行残差编码。如果全部重建的残差都是零，则其可表明GBR色彩空间中的预测可以是充分的，并且到YCgCo色彩空间的转换可能不会进一步改善残差编码的效率。在这样的实施例中，可减少RD最优化中所检查的情形的数量，并且可更加有效地执行编码过程。可在系统中使用大量化参数，例如大量化步长大小，来实现这样的实施例。
在框705处，可使用该实现的“最佳模式”(例如，帧内编码的帧内预测模式，帧间编码的运动向量和参考图片索引)编码对CU的残差进行编码，“最佳模式”可以是预配置的编码模式，其先前被确定为最佳可用的编码模式，或者至少在执行框705的功能的点处已经被确定为具有最低或相对较低的RD花销的另一预确定编码模式。在框710，标志可被设置为“假”(False)(或者被设置为表明假、零等任何其他指示符)，在该示例中被标记为“CU_YCgCo_residual_flag”，表明将不使用YCgCo色彩空间来执行编码单元的残差的编码。这里再次需要注意的是，可使用任何术语或者术语的结合来对标志进行标记。响应于在框710处标志被评估为假或等同替换，在框715处，编码器可在GBR色彩空间执行残差编码，并为这种编码计算RD花销(在图7中被标记为“RDCostGBR”，但是在这里可再次使用任何标记或术语来指代这样的花销)。
在框720处，做出关于GBR色彩空间编码的RD花销是否低于最佳模式编码的RD花销的确定。如果GBR色彩空间编码的RD花销低于最佳模式编码的RD花销，则在框725处，最佳模式的CU_YCgCo_residual_flag可被设置为假或其等同替换(或者被保留为设置成假或其等同替换)，并且最佳模式的RD花销被设置为GBR色彩空间中残差编码的RD花销。
在框720处，如果GBR色彩空间的RD花销被确定为高于或等于最佳模式编码的RD花销，则最佳模式编码的RD花销可被保留为框720的评估之前其被设置的值，并绕过框725。
在框730处，做出关于是否重建的GBR系数中的至少一个不是零的确定(即，是否所有重建的GBR系数都等于零)。如果有至少一个重建的GBR系数不是零，则在框735，CU_YCgCo_residual_flag可被设置为真或其等效指示符。在框735处CU_YCgCo_residual_flag为真(或其等效指示符)的设置可有助于使用YCgCo色彩空间对编码单元的残差进行编码，因此，下文将描述使用YCgCo色彩空间进行编码的RD花销相比于最佳模式编码的RD花销的估计。
在至少一个重建的GBR系数不是零的情况下，在框740处，可使用YCgCo色彩空间对编码单元的残差进行编码，并可确定这种编码的RD花销(图7中这样的花销被标记为“RDCostYCgCo”，但是在这里可再次使用任何标记或术语来指代这样的花销)。
在框745处，做出关于YCgCo色彩空间编码的RD花销是否低于最佳模式编码的RD花销的值的确定。如果YCgCo色彩空间编码的RD花销低于最佳模式编码的RD花销，则在框750处，最佳模式的CU_YCgCo_residual_flag可被设置为真或其等同替换(或者被保留为设置成真或其等同替换)，且最佳模式的RD花销可被设置为YCgCo色彩空间编码中残差编码的RD花销。方法700可在框755结束。
在框745处，如果YCgCo色彩空间的RD花销被确定为高于或等于最佳模式编码的RD花销，则最佳模式编码的RD花销可被保留为框745的评估之前其被设置的值，并可以绕过框750。方法700可在框755结束。
本领域技术人员将理解，所公开的实施例，包括方法700及其任何子集，都可允许GBR与YCgCo色彩空间编码及其各自的RD花销的比较，使得可以允许选择具有较低RD花销的色彩空间编码。图7的方法700可提供更加有效的方式来为标志确定合适的设置，例如这里所描述的示例性CU_YCgCo_residual_coding_flag，而图6的方法600则可提供更加深入的方式来为标志确定合适的设置，例如这里所描述的示例性CU_YCgCo_residual_coding_flag。在两个中的任一实施例中，或者任何变型、子集中，或者使用其中的任何一个或多个方面的实现中，全部这些都是本公开示例的范围内可预见到的，这种标志的值可在编码的比特流中传输，例如关于图2所描述的那些比特流以及此处描述的任何其他编码器。
图8示出基于块的单层视频编码器800的框图，其例如根据一实施例可被实现为向图1所示系统191的接收机192提供比特流。如图8所示，诸如编码器800的编码器可使用诸如空间预测(也可被称为“帧内预测”)和时间预测(也可被称为“帧间预测”或“运动补偿预测”)的技术，来预测输入视频信号801，以尝试提高压缩效率。编码器800可包括可确定预测形式的模式决定和/或其他编码器控制逻辑840。这种确定可至少部分地基于诸如基于速率的准则、基于失真的准则和/或其组合的准则。编码器800可向加法器元件804提供一个或多个预测块806，加法器元件804可生成并向变换元件810提供预测残差805(其可以是输入信号和预测信号间差异信号)。编码器800可在变换元件810处对预测残差805进行变换，并在量化元件815处对预测残差805进行量化。量化后的残差与模式信息(例如，帧内或帧间预测)以及预测信息(运动向量、参考图片索引、帧内预测模式等)一起，被作为花销系数块822提供给熵编码元件830。熵编码元件830可对量化后的残差进行压缩，并将其提供为输出视频比特流835。熵编码元件830还可以在生成输出视频比特流835的过程中使用或者作为替代使用编码模式、预测模式和/或运动信息808。
在一实施例中，编码器800还可以通过在逆量化元件825处将逆量化应用到残差系数块822以及在逆变换元件820处应用逆变换，来生成或者作为替代生成重建的视频信号，以便生成能够在加法器元件809处被加回到预测信号806的重建残差。在一实施例中，可通过残差逆转换元件827来生成这种重建残差的残差逆转换，并将其提供给加法器元件809。在这样的实施例中，残差编码元件826可经由控制信号823向控制开关817提供对于CU_YCgCo_residual_coding_flag 891(或者CU_YCgCo_residual_flag，或者用来执行这里关于所描述的CU_YCgCo_residual_coding_flag和/或所描述的CU_YCgCo_residual_flag所提及的功能或提供这里描述的指示的任何其他的一个或多个标志或指示符)的值的指示。控制开关817可响应于接收到表明收到这种标志的控制信号823，将重建的残差导向残差逆转换元件827，用来生成重建残差的残差逆转换。标志891的值和/或控制信号823可表明编码器关于是否应用残差转换过程的决定，该过程可包括前向残差转换824和逆残差转换827。在一些实施例中，随着编码器评估应用或不应用残差转换过程的花销和收益，控制信号823可取不同的值。例如，编码器可评估将花销转换过程应用到部分视频信号的速率失真花销。
在一些实施例中，可使用在回路滤波元件850处实现的回路滤波过程(例如通过使用去块滤波、采样自适应偏移和/或自适应回路滤波中的一个或多个)来处理由加法器809生成的得到的重建视频信号。在一些实施例中，可在参考图片存储870处存储得到的以重建块855形式的重建视频信号，在参考图片存储870，重建的视频信号例如通过运动预测(估计和补偿)元件880和/或空间预测元件860，被用来预测未来的视频信号。注意在一些实施例中，在没有诸如回路滤波元件850处理的情况下，加法器元件809生成的得到的重建视频信号被提供给空间预测元件860。
如图8所示，在一实施例中，诸如编码器800的编码器可在用于残差编码的色彩空间决定元件826处确定CU_YCgCo_residual_coding_flag 891(或者CU_YCgCo_residual_flag，或者用来执行这里关于所描述的CU_YCgCo_residual_coding_flag和/或所描述的CU_YCgCo_residual_flag所提及的功能或提供这里描述的指示的任何其他的一个或多个标志或指示符)的值。用于残差编码的色彩空间决定元件826可经由控制信号823将此类标志的指示提供给控制开关807。作为响应，在接收到表明收到这种标志的控制信号823的情况下，控制开关807可将预测残差805导向残差转换元件824，使得自适应地将RGB到YCgCo的转换过程应用到残差转换元件824处的预测残差805。在一些实施例中，可以在变换元件810和量化元件815处理的编码单元处执行变换和量化之前，执行这一转换过程。在一些实施例中，还可以或者作为替代，在逆变换元件820和逆量化元件825处理的编码单元处执行逆变换和逆量化之前，执行这一转换过程。在一些实施例中，CU_YCgCo_residual_coding_flag891也可以，或者作为替代，被提供给熵编码元件830以便包含在比特流835中。
图9示出可接收视频比特流935的基于块的单层解码器900的框图，视频比特流935是诸如可由图8的编码器800生成的比特流835的比特流。解码器900可重建比特流935以便在设备上显示。解码器900可在熵解码器元件930处对比特流935进行解析，以生成残差系数926。残差系数926可以在去量化元件925处被逆量化，和/或在逆变换元件920处被逆变换，以便获得可提供给加法器元件909的重建的残差。可使用编码模式、预测模式和/或运动模式927来获得预测信号，在一些实施例中，使用空间预测元件960提供的空间预测信息和/或时间预测元件990提供的时间预测信息中的一者或两者。这样的预测信号可作为预测块929而被提供。预测信号以及重建的残差可在加法器元件909处被叠加，以便生成重建的视频信号，该信号可被提供给回路滤波元件950用于回路滤波，并且可被存储在参考图片存储970中用于显示图片和/或解码视频信号。注意可通过熵解码元件930将预测模式928提供给加法器元件909，以便在生成可提供给回路滤波元件350用来回路滤波的重建视频信号的过程中使用。
在一实施例中，解码器900可在熵解码元件930处解码比特流935，以便确定CU_YCgCo_residual_coding_flag 991(或者CU_YCgCo_residual_flag，或者用来执行这里关于所描述的CU_YCgCo_residual_coding_flag和/或所描述的CU_YCgCo_residual_flag所提及的功能或提供这里描述的指示的任何其他的一个或多个标志或指示符)，其可能已经被诸如图8的编码器800之类的编码器编码到比特流935中。CU_YCgCo_residual_coding_flag 991的值可用来确定是否在残差逆转换元件999处，对逆变换元件920生成并被提供给加法器元件909的重建的残差执行YCgCo到RGB的逆转换过程。在一实施例中，标志991或者指示收到其的控制信号可被提供给控制开关917，作为响应，控制开关917将重建的残差导向残差逆转换元件999，以便生成重建残差的残差逆转换。
在一实施例中，通过对预测残差执行自适应色彩空间转换，而不是作为运动补偿预测或帧内预测的一部分，视频编码系统的复杂度可以被降低，这是因为这种实施例可不要求编码器和/或解码器存储两个不同色彩空间中的预测信号。
为了改进残差编码效率，可通过将残余块分割成多个平方变换单元来执行预测残余的变换编码，其中可能的TU大小可以是4×4，8×8，16×16和/或32×32。图10示出PU到TU的示例性分割1000，其中左侧底部PU 1010可表示TU大小等于PU大小的实施例，PU 1020、1030和1040则可表示每个相应的示例性PU可被分成多个TU的实施例。
在一实施例中，可以TU级别自适应地启用和/或禁用预测残差的色彩空间转换。这样的实施例可提供与以CU级别启用和/或禁用自适应色彩变换相比更细粒度的不同色彩空间之间的切换。这样的实施例可再次改善自适应色彩空间转换能达到的编码增益。
再次参考图8的示意性编码器800，为了选择用于CU的残差编码的色彩空间，诸如示意性编码器800的编码器可测试每个编码模式(例如，帧内编码模式、帧间编码模式、块内复制模式)两次，一次使用色彩空间转换，一次不使用色彩空间转换。在一些实施例中，为了改善这种编码复杂度的效率，可以像这里描述的那样使用各种“快速”或更加有效的编码逻辑。
在一实施例中，由于YCgCo可提供比RGB更加紧凑的原始色彩信号的表示，启用色彩空间变换的RD花销可被确定，并与禁用色彩空间变换的RD花销比较。在一些实施例中，如果在启用色彩空间变换时存在至少一个非零系数，则可进行禁用色彩空间变换的RD花销的计算。
为了减少被测试的编码模式的数量，在一些实施例中，相同编码模式可用于RGB和YCgCo色彩空间两者。对于帧内模式，可在RGB和YCgCo空间之间共享所选的亮度和色度帧内预测。对于帧间模式，可在RGB和YCgCo色彩空间之间共享所选的运动向量、参考图片和运动向量预测符。对于块内复制模式，可在RGB和YCgCo色彩空间之间共享所选的块向量和块向量预测符。为了进一步降低编码复杂度，在一些实施例中，TU分割可在RGB和YCgCo色彩空间之间共享。
由于三个色彩分量(YCgCo域中的Y、Cg和Co，以及RGB域中的G、B、和R)之间可能存在相关性，在一些实施例中，可为三个色彩分量选择相同的帧内预测方向。同一帧内预测模式可用于两个色彩空间中的每一个的所有三个色彩分量。
由于在同一区域中CU间可能存在相关性，一个CU可选择与其母体CU相同的色彩空间(例如，或者RGB或者YCgCo)，用于对其残差信号进行编码。可替代地，子CU可从与其母体相关联的信息导出色彩空间，例如所选的色彩空间和/或每个色彩空间的RD花销。在一实施例中，在一个CU的母体CU的残差被编码到YCgCo域的情况下，可通过不检查RGB域中残差编码的RD花销来降低编码复杂度。检查YCgCo域中残差编码的RD花销也可以或者作为替代，被略过，如果子CU的母体CU的残差被编码到RGB域中。在一些实施例中，两个色彩空间中的子CU的母体CU的RD花销被用于子CU，如果在母体CU的编码中测试了这两个色彩空间。可对子CU略过RGB色彩空间，如果子CU的母体CU选择了YCgCo色彩空间，并且YCgCo的RD花销低于RGB，反之亦然。
一些实施例支持许多预测模式，包括可包含许多帧内角预测模式、一个或多个DC模式和/或一个或多个平面预测模式的许多帧内预测模式。针对所有这种帧内预测模式测试使用色彩空间变换的残差编码会增加编码器的复杂度。在一实施例中，不是针对所有支持的帧内预测模式计算全部RD花销，而是在不考虑残差编码的比特的情况下从所支持的模式中选择N个帧内预测候选子集。这N个所选择的帧内预测候选可在转换的色彩空间中通过计算在应用残差编码之后的RD花销来进行测试。具有所支持的模式中最低RD花销的最佳模式被选为转换色彩空间中的帧内预测模式。
这里要注意的是，所公开的色彩空间转换系统和方法可以序列级别和/或图片和/或切片级别被启用和/或禁用。在下文表3中示出的示例性实施例中，可在序列参数集(SPS)中使用语法元素(其示例是表3中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)，以表明是否启用了残差色彩空间转换编码工具。在一些实施例中，随着色彩空间转换被应用到具有相同分辨率的亮度分量和色度分量的视频内容，所公开的自适应色彩空间转换系统和方法可被启用为“444”色度格式。在这样的实施例中，到444色度格式的色彩空间转换可被约束为相对高的级别。在这样的实施例中，可应用比特流一致性约束以便增强在可使用非444色彩格式的情况下禁用色彩空间转换。
表3示例性序列参数集语法
在一实施例中，示例性语法元素“sps_residual_csc_flag(sps_残差_csc_标志)”等于1表明可启用残差色彩空间转换编码工具。示例性语法元素sps_residual_csc_flag等于0表明可禁用残差色彩空间转换，并且CU级别的标志CU_YCgCo_residual_flag被推断为0。在这样的实施例中，当ChromaArrayType(色度阵列类型)语法元素不等于3时，示例性sps_residual_csc_flag语法元素(或其等同替换)的值可以等于0，以便保持比特流一致性。
在另一实施例中，如下文表4中示出的，取决于ChromaArrayType语法元素的值，可用信号发送sps_residual_csc_flag示例性语法元素(其示例是表4中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)。在这样的实施例中，如果输入视频为444色彩格式(即，ChromaArrayType等于3，例如表4中的“ChromaArrayType＝＝3”)，则可用信号发送sps_residual_csc_flag示例性语法元素，以表明色彩空间转换是否被启用。如果这样的输入视频不是444色彩格式(即，ChromaArrayType不等于3)，则可不用信号发送sps_residual_csc_flag示例性语法元素，并且可将其设为等于0。
表4示例性序列参数集语法
在一实施例中，如果启用了残差色彩空间转换编码工具，则可以如这里所描述的那样以CU级别和/或TU级别添加另一标志，以便启用GBR和YCgCo色彩空间之间的色彩空间转换。
在一实施例中，在下文的表5中示意性示出一示例，等于1的示例性编码单元语法元素“cu_ycgco_residual_flag(cu_ycgco_残差_标志)”(其示例是表5中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)表明可在YCgCo色彩空间中编码和/或解码编码单元的残差。在这样的实施例中，cu_ycgco_residual_flag语法元素或其等同替换等于0可表明可在GBR色彩空间中编码编码单元的残差。
表5示例性编码单元语法
在另一实施例中，在下文的表6中示意性示出一示例，等于1的示例性变换单元语法元素“tu_ycgco_residual_flag(tu_ycgco_残差_标志)”(其示例是表6中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)表明可在YCgCo色彩空间中编码和/或解码变换单元的残差。在这样的实施例中，tu_ycgco_residual_flag语法元素或其等同替换等于0可表明可在GBR色彩空间中编码变换单元的残差。
/>
表6示例性变换单元语法
一些实施例中，对于被用在屏幕内容编码中的运动补偿预测而言，一些插值滤波器可以在插值分数像素(interpolating fractional pixel)处是低效的。例如，在编码RGB视频时，4阶滤波器在分数位置对B和R分量进行插值时，可能并非那么准确。在有损编码实施例中，8阶亮度滤波器可能不是用来保留原始亮度分量中包含的有用高频纹理信息的最有效的方式。在一实施例中，插值滤波器的分离的指示可用于不同的色彩分量。
在一个这样的实施例中，一个或多个缺省插值滤波器(例如，一组8阶滤波器，一组4阶滤波器)可用作分数像素插值过程的候选滤波器。在另一实施例中，可在比特流中显式地用信号发送不同于缺省插值滤波器的一组插值滤波器。为了启用针对不同色彩分量的自适应滤波器选择，可使用信令语法元素，其指定为每个色彩分量选择的插值滤波器。所公开的滤波器选择系统和方法可以各种编码级别使用，例如序列级别、图片和/或切片级别、以及CU级别。可基于可用实现的编码效率和/或计算和/或操作复杂度来做出对运算编码级别的选择。
在其中使用了缺省插值滤波器的实施例中，可使用标志来表明可对色彩分量的分数像素插值使用一组8阶滤波器或一组4阶滤波器。一个这样的标志可指示针对Y分量(或RGB色彩空间实施例中的G分量)的滤波器选择，而另一个这种标志可用于Cb和Cr分量(或RGB色彩空间实施例中的B和R分量)。下文的表格提供了可以以序列级别、图片和/或切片级别以及CU级别用信号发送的此类标志的示例。
下文的表7示意性示出这样的实施例，其中，用信号发送此类标志以便允许以序列级别选择缺省插值滤波器。所公开的语法可被应用到任何参数集，包括视频参数集(VPS)、序列参数集(SPS)以及图片参数集(PPS)。表7示意性示出的实施例中，可在SPS用信号发送示例性语法元素。
表7以序列级别选择插值滤波器的示例性信令
在这样的实施例中，等于1的示例性语法元素“sps_luma_use_default_filter_flag(sps_亮度_使用_缺省_滤波器_标志)”(其示例是表7中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)可以表明对于分数像素的插值，与当前序列参数集相关联的所有图片的亮度分量可使用一组相同的亮度插值滤波器(例如，一组缺省亮度滤波器)。在这样的实施例中，等于0的示例性语法元素sps_luma_use_default_filter_flag可表明对于分数像素的插值，与当前序列参数集相关联的所有图片的亮度分量可使用一组相同的色度插值滤波器(例如，一组缺省色度滤波器)。
在这样的实施例中，等于1的示例性语法元素“sps_chroma_use_default_filter_flag(sps_色度_使用_缺省_滤波器_标志)”(其示例是表7中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)可以表明对于分数像素的插值，与当前序列参数集相关联的所有图片的色度分量可使用一组相同的色度插值滤波器(例如，一组缺省色度滤波器)。在这样的实施例中，等于0的示例性语法元素sps_chroma_use_default_filter_flag可表明对于分数像素的插值，与当前序列参数集相关联的所有图片的色度分量可使用一组相同的亮度插值滤波器(例如，一组缺省亮度滤波器)。
在一实施例中，以图片和/或切片级别用信号发送标志，以便有助于以图片和/或切片级别对分数插值滤波器的选择(即，对于给定的色彩分量，图片和/或切片中的所有CU都可以使用相同的插值滤波器)。下文的表8示意性示出根据一实施例切片分段(slicesegment)报头中使用语法元素的信令的示例。
表8以图片和/或切片级别选择插值滤波器的示例性信令
在这样的实施例中，等于1的示例性语法元素“slice_luma_use_default_filter_flag(切片_亮度_使用_缺省_滤波器_标志)”(其示例是表8中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)可以表明对于分数像素的插值，当前切片的亮度分量可使用一组相同的亮度插值滤波器(例如，一组缺省亮度滤波器)。在这样的实施例中，等于0的slice_luma_use_default_filter_flag示例性语法元素可表明对于分数像素的插值，当前切片的亮度分量可使用一组相同的色度插值滤波器(例如，一组缺省色度滤波器)。
在这样的实施例中，等于1的示例性语法元素“slice_chroma_use_default_filter_flag(切片_色度_使用_缺省_滤波器_标志)”(其示例是表8中突出显示的粗体，但其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)可表明对于分数像素的插值，当前切片的色度分量可使用一组相同的色度插值滤波器(例如一组缺省色度滤波器)。在这种实施例中，等于0的示例性语法元素slice_chroma_use_default_filter_flag可表明对于分数像素的插值，当前切片的色度分量可使用一组相同的亮度插值滤波器(例如一组缺省亮度滤波器)。
在一实施例中，其中以CU级别用信号发送标志，以便有助于以CU级别对插值滤波器的选择，可使用如表9中所示的编码单元语法用信号发送此类标志。在这样的实施例中，CU的色彩分量可自适应地选择可为该CU提供预测信号的一个或多个插值滤波器。这样的选择可代表自适应插值滤波器选择可达到的编码改善。
表9以CU级别选择插值滤波器的示例性信令
在这样的实施例中，等于1的示例性语法元素“cu_use_default_filter_flag(cu_使用_缺省_滤波器_标志)”(其示例是表9中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)可以表明对于分数像素的插值，亮度和色度都可以使用缺省插值滤波器。在这样的实施例中，等于0的cu_use_default_filter_flag示例性语法元素或其等同替换可表明对于分数像素的插值，当前CU的亮度分量或色度分量可使用一组不同的插值滤波器。
在这样的实施例中，等于1的示例性语法元素“cu_luma_use_default_filter_flag(cu_亮度_使用_缺省_滤波器_标志)”(其示例是表9中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)可以表明对于分数像素的插值，当前CU的亮度分量可使用一组相同亮度插值滤波器(例如，一组缺省亮度滤波器)。在这样的实施例中，等于0的示例性语法元素cu_luma_use_default_filter_flag可表明对于分数像素的插值，当前CU的亮度分量可使用一组相同色度插值滤波器(例如，一组缺省色度滤波器)。
在这样的实施例中，等于1的示例性语法元素“cu_chroma_use_default_filter_flag(cu_色度_使用_缺省_滤波器_标志)”(其示例是表9中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)可以表明对于分数像素的插值，当前CU的色度分量可使用一组相同色度插值滤波器(例如，一组缺省色度滤波器)。在这样的实施例中，等于0的示例性语法元素cu_chroma_use_default_filter_flag可表明对于分数像素的插值，当前CU的色度分量可使用一组相同亮度插值滤波器(例如，一组缺省亮度滤波器)。
在一实施例中，可在比特流中显式地用信号发送插值滤波器候选的系数。不同于缺省插值滤波器的任意插值滤波器可用于视频序列的分数像素插值处理。在这样的实施例中，为了有助于滤波器系数从编码起到解码器的递送，示例性语法元素“interp_filter_coeff_set()(插值_滤波器_系数_设置())”(其示例是表10中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)可用来在比特流中携带滤波器系数。表10示意性示出用于用信号发送插值滤波器候选的此类系数的语法结构。
表10插值滤波器的示例性信令
在这样的实施例中，示例性语法元素“arbitrary_interp_filter_used_flag(任意_插值_滤波器_使用的_标识)”(其示例是表10中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)可指定是否存在任意插值滤波器。当示例性语法元素arbitrary_interp_filter_used_flag被设为1时，任意插值滤波器可用于插值处理。
再次地，在这样的实施例中，示例性语法元素“num_interp_filter_set(数量_插值_滤波器_集合)”(其示例是表10中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)或其等同替换，可指定比特流中存在的插值滤波器集合数。
且再次地，在这样的实施例中，示例性语法元素“interp_filter_coeff_shifting(插值_滤波器_系数_位移)”(其示例是表10中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)或其等同替换，可指定用于像素插值的右移运算数。
且再次地，在这样的实施例中，示例性语法元素“num_interp_filter[i](数量_插值_滤波器[i])”(其示例是表10中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)或其等同替换，可指定第i个插值滤波器集合中的插值滤波器数。
这里再次地，在这样的实施例中，示例性语法元素“num_interp_filter_coeff[i](数量_插值_滤波器_系数[i])”(其示例是表10中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)或其等同替换，可指定第i个插值滤波器集合中插值滤波器所使用的阶数。
这里再次地，在这样的实施例中，示例性语法元素“interp_filter_coeff_abs[i][j][l](插值_滤波器_系数_abs[i][j][l])”(其示例是表10中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)或其等同替换，可指定第i个插值滤波器集合中第j个插值滤波器的第1个系数的绝对值。
并且这里再次地，在这样的实施例中，示例性语法元素“interp_filter_coeff_sign[i][j][l](插值_滤波器_系数_符号[i][j][l])”(其示例是表10中突出显示的粗体，但是其可以采用任何形式，标签、专门用语或其组合，全部这些都是所公开示例范围内可预见到的)或其等同替换，可指定第i个插值滤波器集合中第j个插值滤波器的第1个系数的符号。
可在任何高级别参数集中，例如VPS、SPS、PPS以及片分段报头，指示所公开的语法元素。还需要注意的是，可以序列级别、图片级别和/或CU级别使用额外的语法元素，以便协助对运算编码级别的插值滤波器的选择。还需要注意的是，所公开的标志可被替换为能够指示所选滤波器集合的变量。注意在能够预见到的实施例中，可在比特流中用信号发送任意数量(例如，两个，三个或更多)的插值滤波器集。
使用所公开的实施例，插值滤波器的任意组合可用来在运动补偿预测过程期间在分数位置对像素进行插值。例如，在一实施例中，其中可执行4:4:4视频信号(以RGB或YCbCr的格式)的有损编码，缺省8阶滤波器可用来生成用于三个色彩分量(即，R、G和B分量)的分数像素。在另一实施例中，其中执行视频信号的无损编码，缺省4阶滤波器可用来生成用于三个色彩分量(即，YCbCr色彩空间中的Y、Cb和Cr分量，以及RGB色彩空间中的R、G和B分量)的分数像素。
图11A是其中可实施一个或多个所公开的实施例的示例通信系统100的图。通信系统100可以是提供诸如语音、数据、视频、消息、广播等内容给多个无线用户的多接入系统。通信系统100能够使得多个无线用户通过包括无线带宽的系统资源共享，来接入这些内容。例如，通信系统100可使用一种或多种信道接入方法，例如码分多址(CDMA)、时分多址(TDMA)、频分多址(FDMA)、正交FDMA(OFDMA)、单载波FDMA(SC-FDMA)等。
如图11A所示，通信系统100可包括无线发送/接收单元(WTRU)102a、102b、102c、和/或102d(可以统称为或共称为WTRU 102)、无线电接入网(RAN)103/104/105、核心网106/107/109、公共交换电话网(PSTN)108、因特网110和其他网络112，但是应当理解，所公开的系统和方法预见了任意数量的WTRU、基站、网络和/或网络元件。WTRU 102a、102b、102c、102d中的每一个都可以是被配置为在无线环境中运行和/或通信的任何类型的设备。举例来说，WTRU 102a、102b、102c、102d可被配置为发送和/或接收无线信号，并且可包括用户设备(UE)、移动站、固定或移动用户单元、寻呼机、蜂窝电话、个人数字助理(PDA)、智能电话、膝上型电脑、上网本、个人电脑、无线传感器、消费类电子产品等。
通信系统100还可包括基站114a和基站114b。基站114a、114b中的每一个都可以是任何类型的被配置为与WTRU 102a、102b、102c、102d中的至少一个进行无线连接以便于接入例如核心网106/107/109、因特网110和/或网络112那样的一个或多个通信网络的设备。作为例子，基站114a、114b可以是基站收发信机站(BTS)、节点B、e节点B、家用节点B、家用e节点B、站点控制器、接入点(AP)、无线路由器等等。虽然基站114a、114b分别被描绘为单个元件，但是可以理解的是，基站114a、114b可以包括任意数量的互连的基站和/或网络元件。
基站114a可以是RAN 103/104/105的一部分，该RAN 103/104/105还可以包括其他基站和/或网络元件(未示出)，例如基站控制器(BSC)、无线电网络控制器(RNC)、中继节点等。基站114a和/或基站114b可以被配置为在特定地理区域内发送和/或接收无线信号，该特定地理区域被称作小区(未示出)。该小区还被进一步分成小区扇区。例如，与基站114a相关联的小区可被分成三个扇区。因此，在一个实施例中，基站114a包括三个收发信机，例如，针对小区的每个扇区的一个收发信机。在另一实施例中，基站114a可以使用多输入多输出(MIMO)技术，并且因此可针对小区的每个扇区使用多个收发信机。
基站114a、114b可以通过空中接口115/116/117与WTRU 102a、102b、102c、102d中的一个或多个通信，所述空中接口115/116/117可以是任何适当的无线通信链路(例如射频(RF)、微波、红外线(IR)、紫外线(UV)、可见光等等)。可以使用任何适当的无线电接入技术(RAT)来建立空中接口115/116/117。
更具体而言，如上所述，通信系统100可以是多接入系统且可采用一种或多种信道接入方案，诸如CDMA、TDMA、FDMA、OFDMA、SC-FDMA等等。例如，RAN 103/104/105中的基站114a和WTRU 102a、102b、102c可以实现诸如通用移动电信系统(UMTS)陆地无线电接入(UTRA)之类的无线电技术，其中该无线电技术可使用宽带CDMA(WCDMA)来建立空中接口115/116/117。WCDMA可包括诸如高速分组接入(HSPA)和/或演进型HSPA(HSPA+)之类的通信协议。HSPA可以包括高速下行链路分组接入(HSDPA)和/或高速上行链路分组接入(HSUPA)。
在另一实施例中，基站114a和WTRU 102a、102b、102c可实现诸如演进型UMTS陆地无线电接入(E-UTRA)之类的无线电技术，其中该无线电技术可使用长期演进(LTE)和/或高级LTE(LTE-A)来建立空中接口115/116/117。
在其他实施例中，基站114a和WTRU 102a、102b、102c可实现诸如IEEE 802.16(例如，全球微波互通接入(WiMAX))、CDMA2000、CDMA2000 1X、CDMA2000 EV-DO、临时标准2000(IS-2000)、临时标准95(IS-95)、临时标准856(IS-856)、全球移动通信系统(GSM)、增强型数据速率GSM演进(EDGE)、GSM EDGE(GERAN)等无线电技术。图11A中的基站114b可以是诸如无线路由器、家用节点B、家用e节点B、或接入点，并且可以利用任何适当的RAT来促进诸如营业场所、家庭、车辆、校园等局部区域中的无线连接。在一个实施例中，基站114b和WTRU102c、102d可以实施诸如IEEE 802.11之类的无线电技术以建立无线局域网(WLAN)。在另一实施例中，基站114b和WTRU 102c、102d可以实施诸如IEEE 802.15之类的无线电技术以建立无线个域网(WPAN)。在另一实施例中，基站114b和WTRU 102c、102d可以利用基于蜂窝的RAT(例如WCDMA、CDMA2000、GSM、LTE、LTE-A等)以建立微微小区或毫微微小区。如图11A中所示，基站114b可以具有到因特网110的直接连接。因此，基站114b可以不需要经由核心网106/107/109来接入因特网110。
RAN 103/104/105可以与核心网106/107/109通信，该核心网106/107/109可以是被配置为向WTRU 102a、102b、102c、102d中的一个或多个提供语音、数据、应用和/或网际协议语音(VoIP)服务的任何类型的网络。例如，核心网106/107/109可以提供呼叫控制、计费服务、基于移动位置的服务、预付费呼叫、因特网连通、视频分发等，和/或执行诸如用户认证等高级安全功能。虽然图11A中未示出，但应理解，RAN 103/104/105和/或核心网106/107/109可以与跟RAN 103/104/105采用相同RAT或不同RAT的其他RAN进行直接或间接通信。例如，除连接到可以利用E-UTRA无线电技术的RAN 103/104/105之外，核心网106/107/109还可以与采用GSM无线电技术的另一RAN(未示出)通信。
核心网106/107/109还可以充当用于WTRU 102a、102b、102c、102d接入PSTN 108、因特网110和/或其他网络112的网关。PSTN 108可包括提供普通老式电话服务(POTS)的电路交换电话网。因特网110可包括使用公共通信协议的互连计算机网络和设备的全局系统，所述公共通信协议例如是传输控制协议(TCP)/网际协议(IP)因特网协议族中的TCP、用户数据报协议(UDP)和IP。网络112可包括由其他服务提供商所拥有和/或运营的有线或无线通信网络。例如，网络112可包括连接到可以与RAN 103/104/105采用相同RAT或不同RAT的一个或多个RAN的另一核心网。
通信系统100中的某些或全部WTRU 102a、102b、102c、102d可以包括多模式能力，例如，WTRU 102a、102b、102c、102d可包括用于通过不同无线链路与不同无线网络通信的多个收发信机。例如，图11A中所示的WTRU 102c可被配置为与可采用基于蜂窝的无线电技术的基站114a通信，且与可采用IEEE 802无线电技术的基站114b通信。
图11B是示例WTRU 102的系统图。如图11B所示，WTRU102可包括处理器118、收发信机120、发送/接收元件122、扬声器/麦克风124、键盘126、显示器/触摸屏128、不可移除存储器130、可移除存储器132、电源134、全球定位系统(GPS)芯片组136及其他外围设备138。应认识到WTRU 102可以在保持与实施例一致的同时，包括前述元件的任何子组合。而且，实施例可以预见到基站114a和114b和/或基站114a和114b可代表的节点(例如但不限于收发信机站(BTS)、节点B、站点控制器、接入点(AP)、家庭节点B、演进型家庭节点B(e节点B)、家庭演进型节点B(HeNB)、家庭演进型节点B网关以及代理节点等等)可以包括图11B中描绘的以及这里描述的一些或所有元件。
处理器118可以是通用处理器、专用处理器、常规处理器、数字信号处理器(DSP)、多个微处理器、与DSP核相关联的一个或多个微处理器、控制器、微控制器、专用集成电路(ASIC)、现场可编程门阵列(FPGA)电路、任何其他类型的集成电路(IC)、状态机等等。处理器118可执行信号编码、数据处理、功率控制、输入/输出处理和/或使得WTRU 102能够在无线环境中运行的任何其他功能。处理器118可以耦合到收发信机120，收发信机120可以耦合到发送/接收元件122。虽然图11B将处理器118和收发信机120描绘为单独的元件，但应认识到处理器118和收发信机120可一起被集成在电子封装或芯片中。
发送/接收元件122可被配置为通过空中接口115/116/117向基站(例如基站114a)发送信号或从其接收信号。例如，在一个实施例中，发送/接收元件122可以是被配置为发送和/或接收RF信号的天线。在另一实施例中，发送/接收元件122可以是被配置为发送和/或接收例如IR、UV或可见光信号的发射器/检测器。在另一实施例中，发送/接收元件122可以被配置为发送和接收RF和光信号两者。应认识到发送/接收元件122可以被配置为发送和/或接收无线信号的任何组合。
另外，虽然发送/接收元件122在图11B中被描绘为单个元件，但WTRU 102可包括任何数目的发送/接收元件122。更具体而言，WTRU 102可以采用MIMO技术。因此，在一个实施例中，WTRU 102可包括用于通过空中接口115/116/117来发送和接收无线信号的两个或更多个发送/接收元件122(例如多个天线)。
收发信机120可以被配置为调制将由发送/接收元件122发送的信号并对发送/接收元件122接收到的信号进行解调。如上所述，WTRU 102可以具有多模式能力。因此，例如，收发信机120可以包括用于使得WTRU 102能够经由诸如UTRA和IEEE 802.11之类的多种RAT进行通信的多个收发信机。
WTRU 102的处理器118可以耦合到扬声器/麦克风124、键盘126和/或显示器/触摸屏128(例如液晶显示器(LCD)显示单元或有机发光二极管(OLED)显示单元)，并且可以从其接收用户输入数据。处理器118还可以向扬声器/麦克风124、键盘126和/或显示器/触摸屏128输出用户数据。另外，处理器118可以访问来自任意类型的合适的存储器(例如不可移除存储器130和/或可移除存储器132)的信息，并将数据存储在其中。不可移除存储器130可以包括随机存取存储器(RAM)、只读存储器(ROM)、硬盘、或任何其他类型的存储器存储设备。可移除存储器132可以包括用户标识模块(SIM)卡、记忆棒、安全数字(SD)存储卡等。在其他实施例中，处理器118可以访问来自物理上不位于WTRU 102上(诸如在服务器或家用计算机上(未示出))的存储器的信息并将数据存储在其中。
处理器118可以从电源134接收电力，并且可以被配置为分配和/或控制电力给WTRU 102中的其他元件。电源134可以是用于为WTRU 102供电的任何适当设备。例如，电源134可以包括一个或多个干电池(例如镍镉(NiCd)、镍锌铁氧体(NiZn)、镍金属氢化物(NiMH)、锂离子(Li)等等)、太阳能电池、燃料电池等等。
处理器118还可以耦合到GPS芯片组136，GPS芯片组136可以被配置为提供关于WTRU 102的当前位置的位置信息(例如，经度和纬度)。除了来自GPS芯片组136的信息之外或作为其替代，WTRU 102可以通过空中接口115/116/117从基站(例如基站114a、114b)接收位置信息，和/或基于从两个或更多个附近的基站接收到信号的时序来确定其位置。应认识到WTRU102可以在保持与实施例一致的同时，通过任何适当的位置确定方法来获取位置信息。
处理器118可以进一步耦合到其他外围设备138，外围设备138可以包括提供附加特征、功能和/或有线或无线连通性的一个或多个软件和/或硬件模块。例如，外围设备138可以包括加速计、电子指南针、卫星收发信机、数码相机(用于拍照或视频)、通用串行总线(USB)端口、振动设备、电视收发信机、免提耳机、模块、调频(FM)无线电单元、数字音乐播放器、媒体播放器、视频游戏机模块、因特网浏览器等等。
图11C是根据一实施例的RAN 103和核心网106的系统图。如上所述，RAN 103可使用UTRA无线电技术通过空中接口115与WTRU 102a、102b、102c通信。该RAN 103还可与核心网106通信。如图11C中所示，RAN 103可包括节点B 140a、140b、140c，其中每个都可包含一个或多个收发信机，用于通过空中接口115与WTRU 102a、102b、102c通信。节点B 140a、140b、140c中的每一个都可与RAN 103内的特定小区(未示出)相关联。RAN 103还可以包括RNC 142a、142b。应当理解，在与实施例保持一致的情况下，RAN 103可以包括任何数量的节点B和RNC。
如图11C中所示，节点B 140a、140b可以与RNC 142a通信。此外，节点B 140c可以与RNC 142b通信。节点B 140a、140b、140c可以经由Iub接口分别与RNC 142a、142b通信。RNC142a、142b可以通过Iur接口彼此通信。RNC 142a、142b中的每一个都可以被配置为分别控制与其连接的节点B 140a、140b、140c。此外，可将RNC 142a、142b中的每一个配置为执行或支持其他功能，例如外环功率控制、负载控制、许可控制、分组调度、切换控制、宏分集、安全功能、数据加密等。
图11C中所示的核心网106可以包括媒体网关(MGW)144、移动交换中心(MSC)146、服务GPRS支持节点(SGSN)148和/或网关GPRS支持节点(GGSN)150。虽然前述组件中的每一个都被描绘为核心网106的一部分，但是应该理解，任意这些组件都可由核心网运营商以外的实体所有和/或运营。
RAN 103中的RNC 142a可经由IuCS接口连接至核心网106中的MSC 146。可将MSC146连接至MGW 144。MSC 146和MGW 144可向WTRU 102a、102b、102c提供对电路交换网络的接入，例如PSTN 108，从而促进WTRU 102a、102b、102c与传统陆线通信设备之间的通信。
还可将RAN 103中的RNC 142a经由IuPS接口连接至核心网106中的SGSN 148。SGSN148可连接至GGSN 150。SGSN 148和GGSN 150可向WTRU 102a、102b、102c提供对分组交换网络的接入，例如互联网110，从而促进WTRU 102a、102b、102c与IP使能设备之间的通信。
如上所述，还可将核心网106连接至网络112，网络112可包括由其他服务提供商所有和/或运营的有线或无线网络。
图11D是根据另一个实施例的RAN 104和核心网107的系统图。如上所述，RAN 104可使用E-UTRA无线电技术通过空中接口116与WTRU 102a、102b和102c通信。RAN 104还可以与核心网107通信。
RAN 104可包括e节点B 160a、160b、160c，但是应当理解的是在保持与实施例的一致性的同时，RAN 104可以包括任意数量的e节点B。e节点B 160a、160b、160c中的每一个都可包括一个或多个收发信机，用于通过空中接口116与WTRU 102a、102b、102c通信。在一个实施例中，e节点B 160a、160b、160c可实施MIMO技术。因此，e节点B 160a例如可使用多天线来向WTRU 102发送无线信号和从其接收无线信号。
e节点B 160a、160b、160c中的每一个都可以与特定小区相关联(未显示)，并且可以被配置为处理无线电资源管理决策、切换决策、上行链路和/或下行链路中的用户调度等等。如图11D中所示，e节点B 160a、160b、160c可通过X2接口彼此通信。
图11D中所示的核心网107可以包括移动性管理实体(MME)162、服务网关164和分组数据网络(PDN)网关166。虽然前述元件中的每一个都被描绘为核心网107的一部分，但是应当理解，任意这些元件都可以由核心网运营商之外的其他实体所有和/或运营。
MME 162可以经由S1接口连接到RAN 104中的e节点B 160a、160b、160c中的每一个，并充当控制节点。例如，MME 162可以负责WTRU 102a、102b、102c的用户认证、承载激活/去激活、在WTRU 102a、102b、102c的初始连接期间选择特定服务网关等等。MME 162还可以提供控制平面功能以用于在RAN 104和使用其他无线电技术例如GSM或者WCDMA的其他RAN(未显示)之间切换。
服务网关164可以经由S1接口连接到RAN 104中的e节点B 160a、160b、160c中的每一个。服务网关164通常可以向/从WTRU 102a、102b、102c路由和转发用户数据分组。服务网关164还可以执行其他功能，例如在e节点B间切换期间锚定用户平面、当下行链路数据对于WTRU 102a、102b、102c可用时触发寻呼、管理和存储WTRU 102a、102b、102c的上下文等等。
服务网关164还可以连接到PDN网关166，PDN网关166可向WTRU 102a、102b、102c提供到分组交换网络(例如因特网110)的接入，以便于WTRU 102a、102b、102c与IP使能设备之间的通信。
核心网107可以便于与其他网络的通信。例如，核心网107可以向WTRU 102a、102b、102c提供到电路交换网络(例如PSTN 108)的接入，以便于WTRU 102a、102b、102c与传统陆线通信设备之间的通信。例如，核心网107可以包括IP网关(例如IP多媒体子系统(IMS)服务器)，或者与之通信，该IP网关充当核心网107与PSTN 108之间的接口。另外，核心网107可以向WTRU 102a、102b、102c提供到网络112的接入，该网络112可以包括其他服务提供商所有和/或运营的其他有线或无线网络。
图11E是根据一个实施例的RAN 105和核心网109的系统图。RAN 105可以是采用IEEE 802.16无线电技术以通过空中接口117与WTRU 102a、102b、102c通信的接入服务网络(ASN)。如下文将进一步讨论的，WTRU 102a、102b、102c、RAN 105的不同功能实体与核心网109之间的通信链路可被定义为参考点。
如图11E中所示，RAN 105可包括基站180a、180b、180c以及ASN网关182，但是应当理解的是，在与实施例保持一致的同时，RAN 105可以包括任意数量的基站和ASN网关。基站180a、180b、180c可以各与RAN 105中的特定小区(未示出)相关联，并且可以每个都包括一个或多个收发信机，以通过空中接口117与WTRU 102a、102b、102c通信。在一个实施例中，基站180a、180b、180c可实施MIMO技术。因此，举例来说，基站180a可使用多个天线来发送无线信号给WTRU 102a，并从其接收无线信号。基站180a、180b、180c还可以提供移动性管理功能，例如切换触发、隧道建立、无线电资源管理、流量分类、服务质量(QoS)策略实施等等。ASN网关182可充当流量汇聚点，并且可负责寻呼、缓存用户简档、路由到核心网109等等。
WTRU 102a、102b、102c与RAN 105之间的空中接口117可以被定义为实施IEEE802.16规范的R1参考点。另外，WTRU 102a、102b、102c中的每个都可以建立与核心网109的逻辑接口(未示出)。WTRU 102a、102b、102c与核心网109之间的逻辑接口可以被定义为R2参考点，该R2参考点可以用于认证、授权、IP主机配置管理和/或移动性管理。
基站180a、180b、180c中的每个基站之间的通信链路可以被定义为R8参考点，该R8参考点可包括用于促进基站之间的WTRU切换和数据传递的协议。基站180a、180b、180c与ASN网关182之间的通信链路可以被定义为R6参考点。R6参考点可包括用于基于与WTRU102a、102b、102c中的每个相关联的移动性事件来促进移动性管理的协议。
如图11E中所示，RAN 105可以连接到核心网109。RAN 105与核心网109之间的通信链路可被定义为R3参考点，该R3参考点包括用于促进例如数据传递和移动性管理性能的协议。核心网109可包括移动IP家用代理(MIP-HA)184、认证、授权、记账(AAA)服务器186以及网关188。虽然前述元件中的每个元件都被描绘为核心网109的一部分，但是可以理解这些元件中的任意一个元件都可以由除核心网运营商之外的实体所有和/或运营。
MIP-HA可以负责IP地址管理，并使得WTRU 102a、102b、102c能够在不同ASN和/或不同核心网之间漫游。MIP-HA 184可以为WTRU 102a、102b、102c提供对分组切换网(例如因特网110)的接入，以促进WTRU 102a、102b、102c与IP使能设备之间的通信。AAA服务器186可以负责用户认证和支持用户服务。网管188可促进与其他网络的互联。例如，网关188可以为WTRU 102a、102b、102c提供对电路交换网络(例如PSTN 108)的接入，以促进WTRU 102a、102b、102c与传统陆线通信设备之间的通信。此外，网关188可为WTRU 102a、102b、102c提供对网络112(其可包括由其他服务提供商所有和/或运营的其他有线或无线网络)的接入。
虽然在图11E中没有示出，但是可以理解的是，RAN 105可以连接到其他ASN，并且核心网109可以连接到其他核心网。RAN 105与其他ASN之间的通信链路可以被定义为R4参考点，该R4参考点可以包括用于协调WTRU 102a、102b、102c在RAN 105与其他RAN之间的移动性的协议。核心网109与其他核心网之间的通信链路可以被定义为R5参考，该R5参考可以包括用于促进家用核心网与被访问核心网之间的互联的协议。
尽管上文以特定组合的方式描述了特征和元件，但是本领域技术人员能够理解的是，每个特征或元件都可以单独使用或与其他特征和元件任意组合。此外，这里描述的方法可在合并到计算机可读介质中以便由计算机或处理器执行的计算机程序、软件或固件中实施。计算机可读介质的例子包括电信号(通过有线或无线连接发送)和计算机可读存储介质。计算机可读存储介质的示例包括但不限于只读存储器(ROM)、随机存取存储器(RAM)、寄存器、高速缓冲存储器、半导体存储器装置、磁介质(诸如内部硬盘和可移动磁盘)、磁光介质和光学介质(诸如CD-ROM磁盘和数字多功能磁盘(DVD))。与软件相关联的处理器可用于实现射频收发信机，以在WTRU、UE、终端、基站、RNC或任意主机中使用。

Claims (21)

1.一种用于解码视频内容的方法，所述方法包括：
获得自适应色彩空间转换启用指示，所述自适应色彩空间转换启用指示被配置为指示自适应色彩空间转换是否被允许用于图片序列；
基于所述自适应色彩空间转换启用指示，确定所述自适应色彩空间转换被允许用于所述图片序列；
确定在与多个编码块中的所述编码块相关联的残差系数中存在至少一个非零系数；
基于确定所述自适应色彩空间转换被允许使用并且在与所述多个编码块中的所述编码块相关联的所述残差系数中存在至少一个非零系数，获得针对所述图片序列中的多个编码块中的编码块的编码单元自适应色彩空间转换指示，所述多个编码块具有不同大小，其中所述编码单元自适应色彩空间转换指示被配置为指示色彩空间转换是否被应用于所述多个编码块中的所述编码块；以及
基于所述编码单元自适应色彩空间转换指示来解码所述多个编码块中的所述编码块。
2.根据权利要求1所述的方法，其中所述自适应色彩空间转换启用指示在序列参数集中被获得。
3.根据权利要求1所述的方法，该方法还包括：
获得与所述多个编码块中的所述编码块相关联的非零残差系数标志，所述非零残差系数标志指示在与所述多个编码块中的所述编码块相关联的所述残差系数之中是否存在至少一个非零系数，其中在与所述多个编码块中的所述编码块相关联的残差系数之中存在至少一个非零系数是基于与所述编码块相关联的所述非零残差系数标志而被确定的。
4.根据权利要求3所述的方法，其中所述非零残差系数标志包括在亮度残差系数之中存在至少一个非零系数的指示。
5.根据权利要求3所述的方法，其中所述非零残差系数标志包括在色度残差系数之中存在至少一个非零系数的指示。
6.一种用于视频编码的装置，包括：
处理器，当执行存储在存储器中的计算机程序时，被配置为至少执行：
获得自适应色彩空间转换启用指示，所述自适应色彩空间转换启用指示被配置为指示自适应色彩空间转换是否被允许用于图片序列；
基于所述自适应色彩空间转换启用指示，确定所述自适应色彩空间转换被允许用于所述图片序列；
确定在与多个编码块中的所述编码块相关联的残差系数中存在至少一个非零系数；
基于确定所述自适应色彩空间转换被允许使用并且在与所述多个编码块中的所述编码块相关联的残差系数中存在至少一个非零系数，获得针对所述图片序列中的多个编码块中的编码块的编码单元自适应色彩空间转换指示，所述多个编码块具有不同大小，其中所述编码单元自适应色彩空间转换指示被配置为指示色彩空间转换是否被应用于所述多个编码块中的所述编码块；以及
基于所述编码单元自适应色彩空间转换指示来解码所述多个编码块中的所述编码块。
7.根据权利要求6所述的装置，其中所述自适应色彩空间转换启用指示在序列参数集中被获得。
8.根据权利要求6所述的装置，其中所述处理器还被配置为：
获得与所述多个编码块中的所述编码块相关联的非零残差系数标志，所述非零残差系数标志指示在与所述多个编码块中的所述编码块相关联的残差系数之中是否存在至少一个非零系数，其中在与所述多个编码块中的所述编码块相关联的残差系数之中存在至少一个非零系数是基于与所述编码块相关联的所述非零残差系数标志而被确定的。
9.根据权利要求8所述的装置，其中所述非零残差系数标志包括在亮度残差系数之中存在至少一个非零系数的指示。
10.根据权利要求8所述的装置，其中所述非零残差系数标志包括在色度残差系数之中存在至少一个非零系数的指示。
11.一种用于编码视频内容的方法，所述方法包括：
获得图片序列中的多个编码块中的编码块的残差，所述多个编码块具有不同大小；
确定在与所述多个编码块中的所述编码块相关联的残差系数中存在至少一个非零系数；
基于速率失真花销比较来确定是否将色彩空间转换应用于所述编码块的所述残差；以及
在确定所述色彩空间转换被应用于所述编码块并且与所述多个编码块中的所述编码块相关联的所述残差系数中存在至少一个非零系数时，将针对所述多个编码块中的所述编码块的编码单元自适应色彩空间转换指示包括在比特流中，所述编码单元自适应色彩空间转换指示被配置为指示色彩空间转换是否被应用于所述编码块。
12.根据权利要求11所述的方法，该方法还包括：
计算与在GBR色彩空间中执行残差编码相关联的速率失真花销；以及
计算与在YCgCo色彩空间中执行残差编码相关联的速率失真花销，其中所述确定所述色彩空间转换被应用于所述多个编码块中的所述编码块是基于：与在所述YCgCo色彩空间中执行残差编码相关联的所述速率失真花销低于与在所述GBR色彩空间中执行残差编码相关联的所述速率失真花销。
13.一种用于视频编码的装置，包括：
处理器，当执行存储在存储器中的计算机程序时，被配置为至少执行：
获得图片序列中的多个编码块中的编码块的残差，所述多个编码块具有不同大小；
确定在与所述多个编码块中的所述编码块相关联的残差系数中存在至少一个非零系数；
基于速率失真花销比较来确定是否将色彩空间转换应用于所述编码块的所述残差；以及
在确定所述色彩空间转换被应用于所述编码块并且在与所述多个编码块中的所述编码块相关联的所述残差系数中存在至少一个非零系数时，将针对所述多个编码块中的所述编码块的编码单元自适应色彩空间转换指示包括在比特流中，所述编码单元自适应色彩空间转换指示被配置为指示色彩空间转换是否被应用于所述多个编码块中的所述编码块。
14.根据权利要求13所述的装置，其中所述处理器还被配置为：
计算与在GBR色彩空间中执行残差编码相关联的速率失真花销；以及
计算与在YCgCo色彩空间中执行残差编码相关联的速率失真花销，其中所述确定所述色彩空间转换被应用于所述多个编码块中的所述编码块是基于：与在所述YCgCo色彩空间中执行残差编码相关联的所述速率失真花销低于与在所述GBR色彩空间中执行残差编码相关联的所述速率失真花销。
15.一种包括存储在其中的指令的计算机可读存储介质，其中一个或多个处理器在执行所述指令时实现至少以下操作：
获得自适应色彩空间转换启用指示，所述自适应色彩空间转换启用指示被配置为指示自适应色彩空间转换是否被允许用于图片序列；
基于所述自适应色彩空间转换启用指示，确定所述自适应色彩空间转换被允许用于所述图片序列；
确定在与多个编码块中的所述编码块相关联的残差系数中存在至少一个非零系数；
基于确定所述自适应色彩空间转换被允许使用并且在与所述多个编码块中的所述编码块相关联的所述残差系数中存在至少一个非零系数，获得针对所述图片序列中的多个编码块中的编码块的编码单元自适应色彩空间转换指示，所述多个编码块具有不同大小，其中所述编码单元自适应色彩空间转换指示被配置为指示色彩空间转换是否被应用于所述多个编码块中的所述编码块；以及
基于所述编码单元自适应色彩空间转换指示来解码所述多个编码块中的所述编码块。
16.根据权利要求15所述的计算机可读存储介质，其中所述自适应色彩空间转换启用指示在序列参数集中被获得。
17.根据权利要求15所述的计算机可读存储介质，还包括用于使所述一个或多个处理器执行以下操作的指令：
获得与所述多个编码块中的所述编码块相关联的非零残差系数标志，所述非零残差系数标志指示在与所述多个编码块中的所述编码块相关联的所述残差系数之中是否存在至少一个非零系数，其中与所述多个编码块中的所述编码块相关联的残差系数之中存在至少一个非零系数是基于与所述编码块相关联的所述非零残差系数标志而被确定的。
18.根据权利要求17所述的计算机可读存储介质，其中所述非零残差系数标志包括在亮度残差系数之中存在至少一个非零系数的指示。
19.根据权利要求17所述的计算机可读存储介质，其中所述非零残差系数标志包括在色度残差系数之中存在至少一个非零系数的指示。
20.一种包括存储在其中的指令的计算机可读存储介质，其中一个或多个处理器在执行所述指令时实现至少以下操作：
获得图片序列中的多个编码块中的编码块的残差，所述多个编码块具有不同大小；
确定在与所述多个编码块中的所述编码块相关联的残差系数中存在至少一个非零系数；
基于速率失真花销比较来确定是否将色彩空间转换应用于所述编码块的所述残差；以及
在确定所述色彩空间转换被应用于所述编码块并且在与所述多个编码块中的所述编码块相关联的所述残差系数中存在至少一个非零系数时，将针对所述多个编码块中的所述编码块的编码单元自适应色彩空间转换指示包括在比特流中，所述编码单元自适应色彩空间转换指示被配置为指示色彩空间转换是否被应用于所述多个编码块中的所述编码块。
21.根据权利要求20所述的计算机可读存储介质，还包括用于使所述一个或多个处理器执行以下操作的指令：
计算与在GBR色彩空间中执行残差编码相关联的速率失真花销；以及
计算与在YCgCo色彩空间中执行残差编码相关联的速率失真花销，其中所述确定所述色彩空间转换被应用于所述多个编码块中的所述编码块是基于：与在所述YCgCo色彩空间中执行残差编码相关联的所述速率失真花销低于与在所述GBR色彩空间中执行残差编码相关联的所述速率失真花销。
CN201911127826.3A 2014-03-14 2015-03-14 编解码视频内容的方法、装置和存储介质 Active CN110971905B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201911127826.3A CN110971905B (zh) 2014-03-14 2015-03-14 编解码视频内容的方法、装置和存储介质

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
US201461953185P 2014-03-14 2014-03-14
US61/953,185 2014-03-14
US201461994071P 2014-05-15 2014-05-15
US61/994,071 2014-05-15
US201462040317P 2014-08-21 2014-08-21
US62/040,317 2014-08-21
PCT/US2015/020628 WO2015139010A1 (en) 2014-03-14 2015-03-14 Systems and methods for rgb video coding enhancement
CN201580014202.4A CN106233726B (zh) 2014-03-14 2015-03-14 用于rgb视频编码增强的系统和方法
CN201911127826.3A CN110971905B (zh) 2014-03-14 2015-03-14 编解码视频内容的方法、装置和存储介质

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201580014202.4A Division CN106233726B (zh) 2014-03-14 2015-03-14 用于rgb视频编码增强的系统和方法

Publications (2)

Publication Number Publication Date
CN110971905A CN110971905A (zh) 2020-04-07
CN110971905B true CN110971905B (zh) 2023-11-17

Family

ID=52781307

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201911127826.3A Active CN110971905B (zh) 2014-03-14 2015-03-14 编解码视频内容的方法、装置和存储介质
CN201580014202.4A Active CN106233726B (zh) 2014-03-14 2015-03-14 用于rgb视频编码增强的系统和方法

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201580014202.4A Active CN106233726B (zh) 2014-03-14 2015-03-14 用于rgb视频编码增强的系统和方法

Country Status (9)

Country Link
US (2) US20150264374A1 (zh)
EP (1) EP3117612A1 (zh)
JP (4) JP6368795B2 (zh)
KR (4) KR102391123B1 (zh)
CN (2) CN110971905B (zh)
AU (1) AU2015228999B2 (zh)
MX (1) MX356497B (zh)
TW (1) TWI650006B (zh)
WO (1) WO2015139010A1 (zh)

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR122019025405B8 (pt) * 2011-01-13 2023-05-02 Canon Kk Aparelho de codificação de imagem, método de codificação de imagem, aparelho de decodificação de imagem, método de decodificação de imagem e meio de armazenamento
MX2017004088A (es) * 2014-10-03 2017-07-07 Nec Corp Dispositivo de codificacion de video, dispositivo de descodificacion de video, metodo de codificacion de video, metodo de descodificacion de video y programa.
GB2531004A (en) * 2014-10-06 2016-04-13 Canon Kk Residual colour transform signalled at sequence level for specific coding modes
WO2017059926A1 (en) * 2015-10-09 2017-04-13 Telefonaktiebolaget Lm Ericsson (Publ) Cross component prediction in video coding
JP6593122B2 (ja) * 2015-11-20 2019-10-23 富士通株式会社 動画像符号化装置、動画像符号化方法、及びプログラム
US10341659B2 (en) * 2016-10-05 2019-07-02 Qualcomm Incorporated Systems and methods of switching interpolation filters
KR20190049197A (ko) * 2017-11-01 2019-05-09 한국전자통신연구원 고해상도 영상을 이용한 업샘플링 및 rgb 합성 방법, 및 이를 수행하는 장치
WO2019135636A1 (ko) * 2018-01-05 2019-07-11 에스케이텔레콤 주식회사 Ycbcr간의 상관 관계를 이용한 영상 부호화/복호화 방법 및 장치
EP3788779A4 (en) * 2018-10-23 2022-03-02 Tencent America LLC VIDEO CODING METHOD AND APPARATUS
CN109714600B (zh) * 2019-01-12 2020-05-26 贵州佰仕佳信息工程有限公司 兼容性大数据采集系统
WO2020185022A1 (ko) * 2019-03-12 2020-09-17 주식회사 엑스리스 영상 신호 부호화/복호화 방법 및 이를 위한 장치
CN113767623B (zh) 2019-04-16 2024-04-02 北京字节跳动网络技术有限公司 用于视频编解码的自适应环路滤波
WO2020228833A1 (en) * 2019-05-16 2020-11-19 Beijing Bytedance Network Technology Co., Ltd. Adaptive resolution change in video coding
KR102414543B1 (ko) 2019-05-16 2022-06-28 엘지전자 주식회사 크로마 포멧에 기반하여 필터 정보를 시그널링하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
WO2020253864A1 (en) 2019-06-21 2020-12-24 Beijing Bytedance Network Technology Co., Ltd. Selective enablement of adaptive in-loop color-space transform in video coding
WO2021051047A1 (en) 2019-09-14 2021-03-18 Bytedance Inc. Chroma quantization parameter in video coding
KR20220138031A (ko) * 2019-09-23 2022-10-12 베이징 다지아 인터넷 인포메이션 테크놀로지 컴퍼니 리미티드 4:4:4 크로마 포맷의 비디오 코딩 방법 및 장치
US11682144B2 (en) * 2019-10-06 2023-06-20 Tencent America LLC Techniques and apparatus for inter-channel prediction and transform for point-cloud attribute coding
CN114651442A (zh) 2019-10-09 2022-06-21 字节跳动有限公司 视频编解码中的跨分量适应性回路滤波
US11412235B2 (en) * 2019-10-10 2022-08-09 Tencent America LLC Color transform for video coding
WO2021072379A1 (en) * 2019-10-11 2021-04-15 Beijing Dajia Internet Information Technology Co., Ltd. Methods and apparatus of video coding in 4:4:4 chroma format
KR20220073746A (ko) 2019-10-14 2022-06-03 바이트댄스 아이엔씨 비디오 처리에서 크로마 양자화 파라미터 사용
WO2021088951A1 (en) 2019-11-07 2021-05-14 Beijing Bytedance Network Technology Co., Ltd. Quantization properties of adaptive in-loop color-space transform for video coding
CN114788279A (zh) 2019-12-09 2022-07-22 字节跳动有限公司 视频编解码中使用的量化组
CN115004707A (zh) 2019-12-19 2022-09-02 抖音视界(北京)有限公司 自适应颜色变换和量化参数之间的相互作用
WO2021138293A1 (en) 2019-12-31 2021-07-08 Bytedance Inc. Adaptive color transform in video coding
KR20220115951A (ko) * 2020-01-01 2022-08-19 바이트댄스 아이엔씨 비디오 코딩을 위한 크로스 컴포넌트 적응형 루프 필터링
CN115211123A (zh) 2020-01-05 2022-10-18 抖音视界有限公司 视频编解码的通用约束信息
CN114946187A (zh) * 2020-01-08 2022-08-26 抖音视界(北京)有限公司 色度残差的联合编解码和自适应颜色变换
WO2021143896A1 (en) 2020-01-18 2021-07-22 Beijing Bytedance Network Technology Co., Ltd. Adaptive colour transform in image/video coding
KR20220127351A (ko) * 2020-02-04 2022-09-19 후아웨이 테크놀러지 컴퍼니 리미티드 하이 레벨 신택스를 시그널링하는 것에 관한 인코더, 디코더 및 대응하는 방법
CN115606183A (zh) 2020-04-07 2023-01-13 抖音视界有限公司（Cn） 参考图片环绕的剪裁操作
JP2023521588A (ja) 2020-04-09 2023-05-25 北京字節跳動網絡技術有限公司 映像コーディングにおけるデブロッキング信号通知
CN115486064A (zh) 2020-04-10 2022-12-16 抖音视界有限公司 标头语法元素和自适应参数集的使用
WO2021209061A1 (en) 2020-04-17 2021-10-21 Beijing Bytedance Network Technology Co., Ltd. Presence of adaptation parameter set units
WO2021213357A1 (en) * 2020-04-20 2021-10-28 Beijing Bytedance Network Technology Co., Ltd. Adaptive color transform in video coding
KR20230002447A (ko) 2020-04-26 2023-01-05 바이트댄스 아이엔씨 비디오 코딩 신택스 요소의 조건적 시그널링

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1829326A (zh) * 2005-03-04 2006-09-06 三星电子株式会社 色彩空间可伸缩性视频编码和解码方法及其设备
CN101090503A (zh) * 2007-07-05 2007-12-19 北京中星微电子有限公司 熵编码控制方法及熵编码电路
CN101356825A (zh) * 2006-01-13 2009-01-28 弗劳恩霍夫应用研究促进协会 使用自适应色彩空间变换的画面编码

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3906630B2 (ja) * 2000-08-08 2007-04-18 ソニー株式会社 画像符号化装置及び方法並びに画像復号装置及び方法
CN1214649C (zh) * 2003-09-18 2005-08-10 中国科学院计算技术研究所 用于视频预测残差系数编码的熵编码方法
US8422803B2 (en) * 2007-06-28 2013-04-16 Mitsubishi Electric Corporation Image encoding device, image decoding device, image encoding method and image decoding method
KR101213704B1 (ko) * 2007-12-05 2012-12-18 삼성전자주식회사 가변 컬러 포맷 기반 동영상 부호화 방법 및 장치, 그복호화 방법 및 장치
JP2011029690A (ja) * 2009-07-21 2011-02-10 Nikon Corp 電子カメラ及び画像符号化方法
KR101457894B1 (ko) * 2009-10-28 2014-11-05 삼성전자주식회사 영상 부호화 방법 및 장치, 복호화 방법 및 장치
BR122014031521B1 (pt) * 2011-02-10 2022-08-23 Velos Media International Limited Dispositivo e método de processamento de imagem
TWI538474B (zh) * 2011-03-15 2016-06-11 杜比實驗室特許公司 影像資料轉換的方法與設備
JP2013131928A (ja) * 2011-12-21 2013-07-04 Toshiba Corp 画像符号化装置および画像符号化方法
US9451252B2 (en) * 2012-01-14 2016-09-20 Qualcomm Incorporated Coding parameter sets and NAL unit headers for video coding
US9380289B2 (en) * 2012-07-20 2016-06-28 Qualcomm Incorporated Parameter sets in video coding
JP6111556B2 (ja) * 2012-08-10 2017-04-12 富士通株式会社 動画像再符号化装置、方法及びプログラム
AU2012232992A1 (en) * 2012-09-28 2014-04-17 Canon Kabushiki Kaisha Method, apparatus and system for encoding and decoding the transform units of a coding unit
US9883180B2 (en) * 2012-10-03 2018-01-30 Avago Technologies General Ip (Singapore) Pte. Ltd. Bounded rate near-lossless and lossless image compression
US10708588B2 (en) * 2013-06-19 2020-07-07 Apple Inc. Sample adaptive offset control
US20140376611A1 (en) * 2013-06-21 2014-12-25 Qualcomm Incorporated Adaptive color transforms for video coding
CN103347170A (zh) * 2013-06-27 2013-10-09 郑永春 用于智能监控的图像处理方法及其应用的高分辨率摄像头
US9948933B2 (en) * 2014-03-14 2018-04-17 Qualcomm Incorporated Block adaptive color-space conversion coding
WO2016050219A1 (en) * 2014-09-30 2016-04-07 Mediatek Inc. Method of adaptive motion vetor resolution for video coding

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1829326A (zh) * 2005-03-04 2006-09-06 三星电子株式会社 色彩空间可伸缩性视频编码和解码方法及其设备
CN101356825A (zh) * 2006-01-13 2009-01-28 弗劳恩霍夫应用研究促进协会 使用自适应色彩空间变换的画面编码
CN101090503A (zh) * 2007-07-05 2007-12-19 北京中星微电子有限公司 熵编码控制方法及熵编码电路

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
Detlev Marpe et al..MB-adaptive residual colour transform for 4:4:4 coding.《Joint Video Team (JVT) of ISO/IEC MPEG & ITU-T VCEG(ISO/IEC JTC1/SC29/WG11 and ITU-T SG16 Q.6》.2006,第1-11页. *
王日霞 等.H.264基于宏块自适应的快速模式选择算法.电视技术.2009,第33卷(第02期),第14-17页. *

Also Published As

Publication number Publication date
JP2018186547A (ja) 2018-11-22
JP2017513335A (ja) 2017-05-25
MX2016011861A (es) 2017-04-27
KR20160132990A (ko) 2016-11-21
JP6684867B2 (ja) 2020-04-22
JP6368795B2 (ja) 2018-08-01
TW201540053A (zh) 2015-10-16
EP3117612A1 (en) 2017-01-18
CN110971905A (zh) 2020-04-07
TWI650006B (zh) 2019-02-01
AU2015228999B2 (en) 2018-02-01
US20210274203A1 (en) 2021-09-02
KR20190015635A (ko) 2019-02-13
KR101947151B1 (ko) 2019-05-10
JP2024029087A (ja) 2024-03-05
US20150264374A1 (en) 2015-09-17
WO2015139010A1 (en) 2015-09-17
CN106233726A (zh) 2016-12-14
CN106233726B (zh) 2019-11-26
WO2015139010A8 (en) 2015-12-10
JP2022046475A (ja) 2022-03-23
AU2015228999A1 (en) 2016-10-06
KR20200014945A (ko) 2020-02-11
KR102391123B1 (ko) 2022-04-27
JP2020115661A (ja) 2020-07-30
KR20210054053A (ko) 2021-05-12
MX356497B (es) 2018-05-31
KR102073930B1 (ko) 2020-02-06

Similar Documents

Publication Publication Date Title
CN110971905B (zh) 编解码视频内容的方法、装置和存储介质
US20220329831A1 (en) Enhanced chroma coding using cross plane filtering
CN107079157B (zh) 用于视频编码的分量间去相关
TWI735424B (zh) 調色編碼模式逃逸色彩編碼
US10484686B2 (en) Palette coding modes and palette flipping
JP6367963B2 (ja) 画面コンテンツ符号化のためのパレット符号化
CN114666582A (zh) 用于利用光流的帧间预测细化的系统、装置和方法
JP7485645B2 (ja) Ｒｇｂビデオコーディングエンハンスメントのためのシステムおよび方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant