CN107079157A - 用于视频编码的分量间去相关 - Google Patents

用于视频编码的分量间去相关 Download PDF

Info

Publication number
CN107079157A
CN107079157A CN201580048952.3A CN201580048952A CN107079157A CN 107079157 A CN107079157 A CN 107079157A CN 201580048952 A CN201580048952 A CN 201580048952A CN 107079157 A CN107079157 A CN 107079157A
Authority
CN
China
Prior art keywords
act
inverse
component
locating depth
original
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580048952.3A
Other languages
English (en)
Other versions
CN107079157B (zh
Inventor
修晓宇
叶琰
贺玉文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vid Scale Inc
Original Assignee
Vid Scale Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vid Scale Inc filed Critical Vid Scale Inc
Publication of CN107079157A publication Critical patent/CN107079157A/zh
Application granted granted Critical
Publication of CN107079157B publication Critical patent/CN107079157B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103Selection of coding mode or of prediction mode
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/43Hardware specially adapted for motion estimation or compensation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

在视频编码系统中可以同时执行跨分量预测(CCP)和自适应色彩变换(ACT)。借助于在比特流中用信号通告的指示符,例如用于CU的ACT使能指示符,可以在相同的等级(例如在变换单元级)启用/禁用CCP和ACT。逆CCP和ACT可以是在相同等级上操作的(例如在变换单元级)。预测残差可被转换至原始色彩空间,而不用等待重建整个预测单元或编码单元的亮度和色度残差。CCP和ACT变换可以组合成一个处理,以便减小编码/解码等待时间。色彩分量的动态范围的差值可以由可变动态范围调整来补偿。亮度与色度之间的位深差值可以通过有选择地禁用ACT编码工具、缩放CCP的分量输出、调整量化参数(QP)和/或移动视频编码系统的逆变换的分量输出来补偿。

Description

用于视频编码的分量间去相关
相关申请的交叉引用
本申请要求享有2014年9月12日提交的美国临时专利申请No.62/049,843以及2015年6月5日提交的美国临时专利申请No.62/171,542的权益,这些申请的内容在这里引入以作为参考。
背景技术
视频编码系统广泛用于压缩数字视频信号,以便减小存储需求和/或传输带宽。不同类型的视频编码系统包括基于分块、基于小波、基于对象以及基于分块的混合视频编码系统。基于分块的视频编码系统可以基于国际视频编码标准,例如MPEG1/2/4的第2部分,H.264/MPEG-4的第10部分高级视频编码(MPEG-4AVC),VC-1,以及高效率视频编码(HEVC)/H.265标准。一些基于分块的视频编码系统可能会具有复杂和/或低效的架构和运作实施方式,并且可能会产生次最优的编码。
发明内容
在诸如HEVC之类的视频编码系统中,跨分量预测(CCP)和自适应颜色变换是可以同时执行的。在变换单元(TU)级上可以自适应地启用和/或禁用ACT。在编码单元(CU)中可以使用多个颜色空间来编码TU的残差。例如,CU中的一些TU可以在原始色彩空间中编码,并且CU中的一些TU可以在变换色彩空间中编码。
诸如解码器之类的视频编码设备可以确定是否为特定的TU执行逆ACT。该确定可以基于是否为TU启用了ACT。如果为TU启用了ACT,则解码器可以为TU应用逆ACT。
是否为TU启用ACT可以基于TU级信令来确定。举例来说,是否为特定TU启用ACT可以是基于一个或多个条件而被确定的,例如与CU或是包含TU的预测单元(PU)相关联的帧内预测模式、分区模式、以及预测模式。作为示例,TU等级信令可以指示是否为第一TU执行逆ACT,并且可以单独指示是否为第二TU执行逆ACT。如果与包含TU的CU相关联的预测模式是帧间预测,那么可以确定为TU启用/禁用ACT。如果分区模式是2Nx2N,并且与包含TU的CU相关联的帧内色度预测模式是预定值,例如4,那么可以确定为TU启用/禁用ACT。如果分区模式是NxN,且包含了与TU相关联的CU的PU的帧内色度预测模式是预定值,例如4,那么可以确定为TU启用/禁用ACT。其他情况下可以确定禁用ACT。
一旦确定为TU启用ACT,则解码器可以识别用于解码TU残差的色彩空间。该识别可以基于与TU相关联的TU色彩空间指示符。解码器可以基于与TU关联的TU色彩空间指示符来确定是在变换色彩空间还是原始色彩空间中编码TU残差,并且可以基于所识别的色彩空间来解码TU残差。该解码器可以为启用ACT的CU中的每一个单独的TU识别出用于解码TU残差的色彩空间。
在去量化过程中,多个TU可以借助于独立的并行处理路径来处理。例如,第一并行处理路径可以执行去量化、逆变换、逆CCP,以及如果TU级信令对第一TU进行了指示,则为第一TU执行逆ACT。第二独立并行处理路径可以执行去量化、逆变换、逆CCP,如果TU级信令对第一TU进行了指示,以及如果TU级信令对第二TU进行了指示,那么该路径还会为第二TU执行逆ACT。这两个处理路径可以是相互独立的,并且是可以并行执行的。
CCP和ACT编码工具可以在同一级启用或禁用,以便进行有损和无损编码。无论在TU级上是否执行了启用/禁用ACT的处理,在TU级上都可以操作逆CCP和逆ACT。TU的预测残差可被转换成原始色彩空间,而不必等待重建整个PU或CU的亮度和色度残差。逆CCP和逆ACT变换可以在组合的解码处理中执行。在TU级执行逆ACT以及组合的CCP和ACT解码处理可以是在有或没有启用/禁用TU级ACT的情况下应用的。
对于自适应的CCP来说,其加权参数的许可范围是可以动态调整的。例如,如果启用了CCP以及ACT,那么可以单独为两个色度分量调节加权参数α的许可范围。αCg和αCo的许可范围可被调整成致使其具有不同的范围。
在YCgCo域中使用的量化参数(QP)值可以基于所选择的CCP参数来调整。通过执行该调整,可以使得在进行过逆CCP和逆色彩空间变换之后的残差信号的失真与YCgCo空间中的残差信号的失真相类似。
当亮度分量和色度分量的位深存在差值时,这时可以有选择地禁用ACT。在残差信号中,亮度和色度分量的位深可以通过缩放残差信号的分量来校准,例如通过对CCP的分量输出施加位元移位来校准。作为示例,在逆色彩变换之前,通过位元左移,可以将位深较小/较低的分量缩放至与其他分量的位深相匹配,由此校准亮度和色度分量的位深。作为示例,亮度分量的位深可以基于亮度分量与色度分量的位深之间的位深差值来调整。例如,色度分量的位深可以基于亮度分量与色度分量的位深之间的位深差值来调整。在逆色彩变幻之后,通过位元右移,可以将经过缩放的分量重新调整和/或重新缩放到其原始的位深。
残差信号分量的QP是可以调整的。在输出之前,经过缩放的分量可被重新调整和/或重新缩放。作为示例,在这里可以对视频编码系统中的逆色彩变换的分量输出应用位元移位。
编码器可以确定是否在TU级启用针对给定CU的ACT。该确定可以以CU中的TU残差是否具有大不相同的统计特性和/或差异度为基础。一旦确定在TU级上启用和/或禁用ACT,则编码器可以通过设置ACT使能指示符的值来指示可以在多个色彩空间中编码当前CU的残差。该编码器可以确定用于编码TU残差的色彩空间。例如,编码器可以为CU中的每一个TU选择一个色彩空间。该编码器可以通过设置TU色彩空间指示符来指示所选择的色彩空间,并且可以在所选择的色彩空间中编码该TU的残差。
解码器可以基于在比特流中通告的指示符来确定是否在TU级为CU启用和/或禁用了ACT。该指示符可以包括所述CU的ACT使能指示符。一旦确定在TU级禁用了ACT,则解码器可以基于与CU关联的CU色彩空间指示符来识别用于解码CU中的TU残差的色彩空间。
这些技术以及其他技术可以采用硬件、软件和/或固件的方式由编码器、解码器之类的包含了处理器和计算机可读存储介质的设备来实施。
附图说明
图1显示了基于分块的例示混合视频编码系统。
图2显示了基于分块的例示视频解码器。
图3显示了具有逆CCP和逆ACT的基于分块的例示视频解码器。
图4示出的是针对CCP参数的例示不均匀量化。
图5A是在TU级应用CCP以及在CU级应用逆ACT的例示解码处理的时序图。
图5B是在TU级应用逆CCP和逆ACT的例示残差解码处理的时序图。
图6A显示了CCP和ACT操作的例示级联。
图6B显示了在TU级将逆CCP和逆ACT组合在一起的例示残差解码处理。
图7显示的是有损编码中用于Co分量的CCP参数的例示编码器端量化。
图8A显示的是无损编码中用于Cg分量的CCP参数的例示编码器端量化。
图8B显示的是无损编码中用于Co分量的CCP参数的例示编码器段量化处理。
图9显示的是用于在有损编码中的亮度和色度的位深存在差值的时候,在对位深进行校准的情况下应用逆ACT的例示解码处理。
图10显示的是用于在有损编码中的亮度和色度位差存在差值的时候,在对量化参数(QP)进行调整的情况下应用逆ACT的例示解码处理。
图11显示的是用于在有损编码中的亮度和色度位深存在差值的时候,在执行了色度逆变换之后通过位元左移来应用逆ACT的例示解码处理。
图12显示的是用于在有损编码中的亮度和色度位深存在差值时在组合的逆CCP和逆ACT中实施的例示解码处理。
图13A是可以实施所公开的一个或多个实施例的例示通信系统的系统图示。
图13B是可以在图13A所示的通信系统内部使用的例示无线发射/接收单元(WTRU)的系统图示。
图13C是可以在图13A所示的通信系统内部使用的例示无线电接入网络以及例示核心网络的系统图示。
图13D是可以在图13A所示的通信系统内部使用的另一个例示无线电接入网络以及例示核心网络的系统图示。
图13E是可以在图13A所示的通信系统内部使用的另一个例示无线电接入网络以及例示核心网络的系统图示。
具体实施方式
现在将参考不同的附图来对说明性的实施例进行详细描述。虽然本说明书提供了关于可能的实施方式的详细示例,然而应该指出的是,这些细节的目的是作为例证,其并未对本申请的范围构成限制。
图1显示了基于分块的例示混合视频编码系统。如所示,输入视频信号2可以以逐个分块的方式处理。这些分块可被称为宏块(MB)。在高效率视频编码(HEVC)中,通过使用名为编码单元(CU)的扩展分块大小,可以压缩具有1080p这类高分辨率以及更高分辨率的视频信号。作为示例,CU可以是64x64像素。CU可被进一步划分成预测单元(PU),其中在所述PU上可以应用单独的预测方法。
如图1所示,输入视频分块(例如MB和/或CU)可以通过空间预测60和/或运动/时间预测62进行分析。空间预测可以减少输入视频信号2中固有的空间冗余度。时间预测可以减少输入视频信号2中固有的时间冗余度。空间预测也被称为帧内预测,其通过使用源于来自诸如参考图片存储器64的相同视频图片/切片中的已编码相邻分块的像素来预测当前视频分块。时间预测也被称为帧间预测或运动补偿预测,其可以使用源于来自诸如参考图片存储器64的已编码视频图片的像素来预测当前视频分块。
关于给定视频分块的时间预测可以用一个或多个运动矢量来通告。运动矢量可以指示当前分块与其参考分块之间的运动的幅度/数量和方向。在支持多个参考图片/分块的时候,例如在MPEG-4AVC或HEVC中,其中可以为视频分块提供参考图片索引,以便识别出使用诸如参考图片存储器64中的哪一个参考图片来执行时间预测。
模式判决部件80可以选择一种用于确定在进一步的处理中使用的预测分块的预测模式(例如空间或时间)。例如,最佳的预测模式可以是基于速率失真优化来选择的。通过从当前视频分块中减去16预测分块,可以生成一个差值或残差。预测残差可以通过变换4而被去相关,并且可以通过量化6而被量化,以便实现目标位速率。经过量化的残差系数分块可被逆量化10以及逆变换12,以便产生重建残差。所述重建残差可以与预测分块相加26,以便形成重建的视频分块。环路滤波器66可被应用于所述重建的视频分块,作为示例,该环路滤波器可以是去块滤波器和自适应环路滤波器(ALF)。参考图片存储器64可以存储经过滤波(或未经滤波)的重建视频分块,并且所述重建视频分块可以用于编码以后的视频分块。
编码模式(帧间或帧内)、预测模式信息。运动信息以及经过量化的残差系数分块可被提供给熵编码单元8。所述熵编码单元8可以提供附加的压缩,以便产生输出视频比特流20。
图2显示了基于分块的例示视频解码器。解码单元208可以接收视频比特流202,并且可以对其执行拆包和熵解码。该解码单元208可以产生残差系数。基于针对比特流202的编码,可以产生预测分块255。如果比特流202是经过帧内编码的,那么可以将编码模式和预测信息提供给空间预测单元260。如果比特流202是经过帧间编码的,那么可以将编码模式和预测信息提供给时间预测单元262。残差变换系数可被提供给逆量化单元210以及逆变换单元212,以便重建该残差分块。该重建分块可以是通过将预测分块255与残差分块相加256而产生的。所述重建分块可以由环路滤波器266进行滤波。经过滤波(或未经滤波)的重建分块可被保存在参考图片存储器264中。空间预测器260和运动补偿预测器262可以使用参考图片存储器264中的重建视频来产生预测分块255。并且参考图片存储器264中的重建视频可被提供给显示设备。
HEVC和其他基于分块的视频编码系统所提供的编码/解码的效率和质量有可能会随内容改变。与计算机生成的内容或屏幕内容相比,诸如摄像机所捕捉的自然视频具有差异明显的属性。相比于通常是由文本和图形之类的计算机生成的内容所构成的屏幕内容视频的编码效率,对于自然视频而言,HEVC的编码效率会好出很多。
屏幕内容视频可以以4:4:4的色度格式来捕捉,其中三个颜色分量(例如亮度分量以及所有的两个色度分量)具有相同的分辨率。与4:2:0的色度格式以及4:2:2的色度格式相比,4:4:4的色度格式由于会产生更大的冗余度而具有相对较低的效率,尽管如此,4:4:4的色度格式仍旧是一些需要高保真度来保持解码屏幕内容视频中诸如锐利边缘之类的色彩信息的屏幕内容应用程序的首选。
举例来说,可供使用的可以是4:4:4色度格式的视频中的三种色彩分量之间的相关性,其中作为示例,该色彩分量可以是YCbCr域中的Y、Cb和Cr以及RGB域中的G、B和R。
对于HEVC中的屏幕内容编码而言,通过使用诸如跨分量预测(CCP)和自适应色彩变换(ACT)之类的编码工具,可以使用4:4:4色度格式的视频中的三种色彩分量间的相关性。例如,ACT和CCP均可以在残差域中工作。CCP可以用于从亮度残差中预测出色度残差。在RGB空间中,G分量的残差可用于预测B和R的残差,并且在YCbCr空间中,Y分量的残差可用于预测Cb和Cr分量的残差。在ACT中,三种分量的残差可以从一个色彩空间转换到另一个色彩空间,以便减小这三种分量之间的相关性(例如冗余度)。
图3显示了基于分块的具有逆CCP和逆ACT的例示视频解码器。在解码过程中,跨分量去相关可以移除4:4:4色度格式的视频中的三个色彩分量之间的冗余度。如图3所示,残差解码处理可以包括逆CCP 350以及逆色彩变换355,例如逆ACT。比特流302可以在熵解码器308中解码。通过提供控制信号,例如提供逆CCP控制和逆色彩变换控制,可以选择应用逆CCP和/或逆ACT变换的逆CCP 350和/或逆色彩变换355。
熵解码器308提供的残差系数330可以由去量化器310以及逆变换器312处理,以便重建残差分块。依照控制信号,可以将逆CCP 350和/或逆色彩变换355应用于残差分块的变换单元(TU)。如果选择了逆CCP,那么可以将TU的残差系数330提供给逆CCP 350。其中一个色度分量(GBR视频格式中的B和R分量)的残差可以从亮度分量(GBR视频格式中的G分量)中预测得到。如果为CU或PU选择了逆ACT,那么CU或PU的残差系数330可以由逆色彩变换355反向转换到原始色彩空间。
环路滤波器366可以对所述重建分块滤波。经过滤波(或未经滤波)的重建分块可以保存在参考图片存储器364中。空间预测362和/或时间预测360可以使用参考图片存储器364中的重建视频来产生预测分块340。参考图片存储器364中的重建视频可被提供给显示设备。
逆CCP 350和逆色彩变换355可以是在不同等级上操作的两个单独的解码处理。例如,逆CCP 350可以在TU级上操作,并且逆色彩变换355可以在CU级或PU级上操作。作为示例,逆CCP 350可以是TU级操作,并且逆色彩变换可以是CU级/PU级操作。
虽然使用了4:4:4视频的编码处理作为示例来描述这里的实施例,然而这里描述的技术适用于能与多种格式协作的多种编码技术。
自适应跨分量预测适用于一个或多个基于分块的编码系统,例如HEVC。在亮度残差和/或色度残差之间可以执行预测。预测器可以是用包括乘法和位元移位在内的简单的运算产生的。根据等式1,在编码器端可以使用亮度残差来预测色度残差。
ΔrC(x,y)=rC(x,y)-α×rL′(x,y) 等式1
根据等式2,在解码器端可以用亮度残差来补偿色度残差。
rC′(x,y)=ΔrC′(x,y)+α×rL′(x,y) 等式2
在等式1和2中,rC表示位置(x,y)的原始色度残差采样;rL′表示重建的亮度分量的残差采样;ΔrC表示预测之后的预测信号;ΔrC′表示在执行了编码和解码了ΔrC之后的重建的色度残差(例如后续跟随了逆变换和/或逆量化的变换和/或量化);rC′表示重建的色度残差信号;α是加权参数,并且该参数是一个实数值数字。
如果可以得到作为具有浮点精度的系数的α,那么可以在执行从编码器到解码器的传输之前将其量化。在一个例示的CCP编码器中,其中可以使用一种不均匀量化方法来量化α的绝对值。
图4示出的是一种针对一个或多个CCP参数的不均匀量化。如图4所示,α的绝对值(α可以为正或为负)被量化到了一个预先定义的值的集合{0,1/8,1/4,1/2,1}中。
表1显示的是原始的α值与使用了例示量化处理的重建值之间的例示映射。
表1将原始α值映射到用于例示量化处理的重建值
原始值范围 重建值 原始值范围 重建值
(-∞,-3/4] -1 [3/4,+∞) 1
(-3/4,-3/8] -1/2 [3/8,3/4) 1/2
(-3/8,-3/16] -1/4 [3/16,3/8) 1/4
(-3/16,-1/16] -1/8 [1/16,3/16) 1/8
(-1/16,1/16) 0
在使用整数运算时,预先定义的实值可以通过与整数缩放比例(integerscaling)β相乘以及通过执行3位元的位元右移来近似。因此,等式1和2分别会变成等式3和4。
ΔrC(x,y)=rC(x,y)-(β×rL′(x,y))>>3 等式3
rC′(x,y)=ΔrC′(x,y)+(β×rL′(x,y))>>3 等式4
在等式3和4中,β是从{-8,-4,-2,-1,0,1,2,4,8}中选择的。如果亮度分量和色度分量的位深存在差值,那么可以在被用作预测器之前缩放亮度残差的幅度,以使其与色度残差的幅度相匹配。
通过执行环路自适应色彩空间变换,可以将残差从一个色彩空间变换到YCgCo空间,以便减小三种色彩分量之间的相关性(例如冗余度)。到YCgCo的色彩空间转换可以在CU级上自适应地应用。依照CU是在无损模式还是有损模式中编码,可以应用不同的色彩空间变换。例如,用于有损模式的前向和逆色彩空间变换可以是根据等式5的YCgCo变换的不可逆版本。
对于无损模式来说,所执行的可以是YCgCo变换的可逆版本。该变换可以是基于以下在等式6中描述的提升操作来执行的。
如等式5所示,在有损模式中使用的前向和逆色彩变换矩阵有可能未被归一化(normalized)。与应用了色彩变换之后的原始信号相比,YCgCo信号的幅度有可能相对较小。为了补偿前向色彩变换所导致的幅度减小,在YCgCo域中可以对残差应用一个经过调整的量化参数。例如,QP值QPY、QPCg以及QPCo可用于量化YCgCo域残差。在应用色彩空间变换时,QP值QPY、QPCg以及QPCo可分别被设置成QP-5、QP-5以及QP-3。QP可以是在原始色彩空间中使用的量化参数。
在不同的等级上可以启用或禁用ACT和CCP。假设在CU级上启用/禁用了ACT工具,并且可以在TU级上应用关于预测残差的变换编码。基于四叉树结构,可以将一个CU的残差划分成多个TU。该TU的残差可以具有与同一CU中的相邻TU的残差不同的特性。CU中的TU可以使用相同的ACT决策(例如在CU级启用或禁用)。
在相同等级上可以启用或禁用ACT和CCP。例如,在TU级上可以启用/禁用ACT。
诸如cu_ycgco_coding_flag(cu_ycgco_编码_标记)之类的ACT信令标记可以指示是否应用色彩空间变换。该ACT信令标记可以在CU级上用信号通告,以便指示是否将色彩空间变换应用于相应的CU,例如当前CU。作为示例,值为1的cu_ycgco_coding_flag可以指示相应CU的残差是在YCgCo空间中编码/解码的。值为0的cu_ycgco_coding_flag可以指示CU的残差是在原始色彩空间中编码/解码的。对于块内拷贝(intra block copy)(IBC)模式和块间模式来说,此类标记可以是在当前CU中具有至少一个非零系数的时候通告的。
在关于预测残差的变换编码中,残差分块可被划分成多个方形TU。可能的TU大小可以包括4x4、8x8、16x16以及32x32。依照视频特性以及所选择的编码模式,CU中的相邻TU有可能具有统计特性存在很大差异的残差信号。在TU级上可以自适应地启用和/或禁用ACT。并且可以使用多个色彩空间来编码CU中的TU的残差。CU中的不同TU可以在不同的色彩空间中被编码。
编码器可以确定在TU级上是否为CU启用和/或禁用ACT。该确定可以是以CU中的TU的残差是否具有差别很大的统计特性为基础的(例如基于差异度)。一旦确定在TU级上启用ACT,则编码器可以通过设置ACT使能指示符的值来指示可以在多个色彩空间中编码当前CU(例如当前CU的残差)。一旦确定在TU级上禁用ACT,则编码器可以通过设置ACT使能指示符的值来指示在单个色彩空间中编码当前CU,并且可以设置一个指示符来指示该色彩空间。解码器可以确定是否在TU级上为所述CU启用和/或禁用了ACT。该确定可以基于所通告的指示符,例如用于CU的ACT使能指示符。一旦确定在TU级上禁用ACT,则解码器可以基于与CU关联的CU色彩空间指示符来识别用于解码该CU中的TU残差的色彩空间。
表2显示的是编码单元语法的非限制性示例。如表2所示,在CU级上可以用信号通告一个指示符,例如ACT使能指示符。该指示符可以指示是否在两个色彩空间(或是多个色彩空间)之间为相应CU中的TU执行选择。该指示符可以包括一个tu_act_enabled_flag(tu_act_使能_标记)。作为示例,如果将tu_act_enabled_flag设置成0,那么它可以指示在一个色彩空间中编码当前CU的残差。该色彩空间可以借助一个CU色彩空间指示符来指示,例如表2所示的cu_ycgco_coding_flag。如果将tu_act_enabled_flag设置成1,那么其可以表明当前CU中的TU可以灵活地在两个色彩空间(或多个色彩空间之间,例如原始色彩空间和变换色彩空间)之间进行选择,以便对其自身的残差进行编码。
表2编码单元语法
作为示例,如果tu_act_enabled_flag等于1,则表明可以不同的色彩空间中编码当前CU中的TU的残差。如果tu_act_enabled_flag等于0,则表明编码单元的残差是在一个由cu_ycgco_residual_flag(cu_ycgco_残差_标记)指定的色彩空间中编码的。
作为示例,如果cu_ycgco_residual_flag等于1,则表明可以在YCgCo色彩空间中编码CU的残差。如果cu_ycgco_residual_flag等于0,则表明可以在原始色彩空间中编码该编码单元的残差。
如果sps_residual_act_flag(sps_残差_act_标记)等于0,那么将不存在cu_ycgco_residual_flag。解码器可以推断出sps_residual_act_flag的值等于0。如果sps_residual_act_flag等于1,并且如果tu_act_enabled_flag等于1,那么cu_ycgco_residual_flag将不复存在。用以编码残差的色彩空间未必是由cu_ycgco_residual_flag指定的。tu_ycgco_residual_flag同样可以指定用于编码残差的色彩空间。
一旦确定在TU级上启用ACT,则编码器可以确定用于编码TU残差的色彩空间。例如,编码器可以为CU中的每一个TU选择一个色彩空间。该编码器可以通过设置TU色彩空间指示符来指示所选择的色彩空间,并且可以在所选择的色彩空间中编码TU的残差。
一旦确定在TU级上启用ACT,则解码器可以基于与TU关联的TU色彩空间指示符来识别用于解码CU中的TU残差的色彩空间。在一个实施例中,解码器可以识别出用于为CU中的每一个单独的TU编码TU残差的色彩空间。该解码器可以基于为该TU识别的色彩空间来解码TU的残差。
表3显示了一个关于传输单元语法的非限制性示例。如表3所示,在transform_unit()中可以包含一个用于指定为相应TU选择的色彩空间的标记,例如tu_ycgco_coding_flag。如果存在关于该TU的至少一个非零系数,那么可以在比特流中用信号通告该标记。在一个实施例中,如果关于TU的一个或多个系数为零,那么可以在比特流中略过该标记。
表3变换单元语法
如表3所示,可以用一个指示符(例如tu_ycgco_residual_flag)来指示是否在YCgCo色彩空间中编码变换残差。作为示例,tu_ycgco_residual_flag等于1可以表明在YCgCo色彩空间中编码变换单元的残差。当tu_ycgco_residual_flag等于0时,其可以指示在原始色彩空间中编码变换单元的残差。当tu_ycgco_residual_flag不存在时,这时可以推断其等于0。
通过用信号通告一个指示符,例如tu_act_enabled_flag,可以指示启用还是禁用ACT。该指示符可以在CU级、TU级和/或别的等级上用信号通告。举例来说,如果该指示符表明在TU级上禁用ACT(例如该标记等于0),那么可以在相同的色彩空间(例如由cu_ycgco_residual_flag指示)中解码当前CU的残差。如果该指示符指示在TU级上启用ACT(例如该标记等于1),那么可以允许CU中的单个TU选择其自身的色彩空间以编码残差。同一CU中的TU的残差可以在不同的色彩空间中编码。
是否为TU启用ACT可以是基于TU级信令确定的。TU级信令可以指示是否为第一TU执行逆ACT,并且可以单独指示是否为第二TU执行逆ACT。举例来说,是否为特定TU启用ACT可以是基于一个或多个条件确定的,例如预测模式、分区模式、以及与CU或包含TU的预测单元相关联的帧内预测模式。表3-1显示了非限制性的例示变换单元语法表格。
如表3-1所示,在与包含TU的CU相关联的预测模式是帧间预测的情况下,可以确定为TU启用/禁用ACT。在分区模式是2NxN、并且与包含TU的CU相关联的帧内色度预测模式是一个预定值(例如4)的情况下,可以确定为TU启用/禁用ACT。在分区模式是NxN、并且用于包含了与TU关联的CU的PU的帧内色度预测模式具有预定值(例如4)的情况下,可以确定为TU启用/禁用ACT。在一个实施例中,在其他情况下可以确定禁用ACT。
表3-1使用了所建议的TU级ACT标记的变换单元语法
一旦确定为TU启用ACT,则解码器可以识别用于解码TU残差的色彩空间。该识别可以基于与TU关联的TU色彩空间指示符。解码器可以基于与TU关联的TU色彩空间指示符来确定是在变换色彩空间还是原始色彩空间中编码TU残差,以及基于所识别的色彩空间解码TU残差。该解码器可以为启用ACT的CU中的每个单独的TU识别用于解码TU残差的色彩空间。
如表3-1所示,可以用一个指示符(例如tu_ycgco_residual_flag)来指示是否在YCgCo色彩空间中编码变换残差。作为示例,tu_ycgco_residual_flag等于1可以表明在YCgCo色彩空间中编码TU残差。在一个实施例中,指示符tu_ycgco_residual_flag等于1表明能为TU启用或禁用ACT。当tu_ycgco_residual_flag等于0时,其可以指示在原始色彩空间中编码TU残差。当tu_ycgco_residual_flag不存在时,这时可以推断其等于0。
举例来说,在变换单元语法表中可以通告一个指示符,例如tu_ycgco_coding_flag,以便能自适应地选择用于TU的色彩空间。例如,在这里可以为每一个TU选择一个色彩空间。该标记可以用信号通告。当编码分块标记(CBF)指示一个TU中的系数为零或者在一个未使用DM模式的一个帧内编码CU中存在一个或多个PU时,这时可以略过该标记。
在这里可以为一个CU选择一个色彩空间。举例来说,一旦确定在TU级上禁用ACT,则编码器可以基于变换色彩空间和原始色彩空间的速率-失真(R-D)性能来选择一个色彩空间。编码器可以测试变换色彩空间和原始色彩空间的速率-失真(R-D)性能。在一些编码情况中,通过应用一个或多个编码加速处理,可以减少被测试的色彩空间的数量。例如,在CU级上可以确定是在变换色彩空间还是原始色彩空间中编码CU中的TU残差。通过使用不同的色彩空间来编码CU中的TU残差,可以对R-D性能进行测试。
出于例证目的,术语“CU级ACT开启”和“CU级ACT关闭”可以分别是指在变换色彩空间(例如启用ACT)和原始色彩空间(例如禁用ACT)中编码CU中的TU残差;术语“TU级ACT”可以是指单独选择用于编码TU残差的一个或多个色彩空间(例如,CU中的每一个TU都具有选择自己的色彩空间的自由度);此外,“CU级ACT”在这里可以是指“CU级ACT启动”或“CU级ACT关闭”。
作为示例,TU级ACT的R-D成本可被确定。例如,关于CU级ACT的R-D成本是可以计算的。在一个非限制性示例中,在检查CU级ACT的R-D成本之前可以检查TU级ACT的R-D成本。对于为CU级ACT测试的色彩空间来说,该色彩空间是依照输入视频的色彩格式选择的。对于RGB序列来说,所测试的可以是CU级开启。对于YUV序列来说,所测试的可以是CU级关闭。在至少存在一个用于TU级ACT的非零系数的情况下,可以执行对CU级ACT的R-D性能的检查。
编码参数可被确定。在一个实施例中,相同的编码参数可以供TU级ACT、CU级ACT和/或别的等级上的ACT使用。例如,对于帧内模式来说,亮度和色度分量的帧内预测方向可以被TU级ACT和CU级ACT共享。作为示例,对于帧间模式来说,运动信息(例如运动矢量,参考图片索引以及运动矢量预测器)可被TU级ACT和CU级ACT共享。
大尺寸(例如64x64和32x32)的CU往往会被选择用于编码图片中那些更有可能会为残差编码选择一个特定色彩空间的单调区域(flat area)。被小CU覆盖的区域更有可能包含具有不同特性的丰富的纹理。就帧内模式而言,关于RGB序列中的8x8CU以及YUV序列中的16x16和8x8CU的TU级ACT都会被检查。在一个实施例中,就帧内模式而言,只有针对RGB序列的8x8CU的TU级ACT以及YUV序列的16x16和8x8CU会被检查。对于IBC模式来说,所检查的可以是用于16x16和8x8CU的TU级ACT。在一个实施例中,就IBC模式而言,只有用于16x16以及8x8CU的TU级ACT会被检查。对于帧间模式来说,所检查的可以是针对8x8CU的TU级ACT。在一个实施例中,就帧间模式而言,所检查的只是用于8x8CU的TU级ACT。
子代YU的色彩空间可以基于其母TU的色彩空间来选择。例如,子代TU的色彩空间可以从其母TU的色彩空间推导得到。对于RGB序列来说,如果其母TU的残差是在YUB空间中编码的,那么可以略过为TU的RGB域中的R-D成本的计算。对于YUV序列来说,在其母TU的残差在RGB空间中编码的情况下,可以跳过为TU的YUV域中的R-D成本的计算。
经过编码的图片可被分类到不同的时间层(TL)中。处于较低TL的图片可以以较好的视频质量编码。与处于较低TL的图片相比,处于较高TL的图片会在整个视频序列中占据较高的比例。依照编码图片的编码配置和/或TL级,可以略过TU级ACT的R-D处理。举个例子,就随机访问(RA)配置而言,对于RGB序列中的TL-3图片来说,用于帧内模式和IBC模式的TU级ACT将不被检查。例如,对于RGB和YUV序列中的TL-0图片来说,用于帧间模式的TU级ACT的检查是可以略过的。作为示例,就低延迟(LD)配置而言,对于RGB序列的TL-0和TL-1图片来说,用于帧内模式和IBC模式的TU级ACT的检查是可以略过的。例如,对于RGB序列的TL-0图片以及YUV序列的TL-0和TL-2图片来说,用于帧间模式的TU级ACT的检查是可以略过的。举例来说,在应用无损编码时,用于帧内和IBC模式的TU级ACT是可以禁用的。
逆CCP和逆ACT可以在不同等级上执行。依照CU是在帧内模式、IBC模式还是帧间模式中编码,可以在不同等级上执行ACT解码处理。对于用帧内模式和IBC模式编码的CU来说,色彩空间变换可以在PU级上执行。对于用帧间模式编码的CU来说,色彩空间变换可以在CU级上执行。结果,在重建一个PU或CU中的TU残差之前是不会调用逆色彩空间变换的。
逆CCP和逆ACT可以在TU级上执行。TU的预测残差可被转换到原始色彩空间,而不用等待重建整个PU或CU的亮度和色度残差。例如,在去量化过程中可以借助独立的并行处理路径来处理多个TU。第一并行处理路径可以执行去量化、逆变换、逆CCP,并且在用于第一TU的TU级信令做出指示的情况下为第一TU执行逆ACT。第二独立并行处理路径可以执行去量化、逆变换、逆CCP,并且可以在用于第二TU的TU级信令做出指示的情况下为第二TU执行逆ACT。这两个处理路径可以相互独立,并且是可以并行执行的。
逆CCP和逆ACT模块可被定义成两个独立的解码处理。逆CCP和逆ACT变换可以在组合的解码处理中执行。这种在组合的CCP+ACT解码处理中在TU级上执行逆ACT是可以在有或没有启用/禁用TU级ACT的情况下应用的。
基于TU的逆色彩变换同样是可以执行的。逆色彩变换可以在不同的等级上执行。对于用帧内模式和IBC模式编码的CU来说,逆色彩变换可以在PU级上执行。对于用帧间模式编码的CU来说,色彩空间变换可以在CU级上执行。逆CCP可以作为TU级操作来执行。
图5A和5B直观地说明了在不同等级执行逆色彩变换的并行编码的影响。图5A是在TU级应用逆CCP以及在CU级应用逆ACT的例示解码处理的时序图。图5A示出的是在同时应用CCP和ACT时针对一个CU中的残差信号的解码处理。为了简化说明,假设CU被分成了四个TU,即TU0、TU1、TU2和TU3,其中每一个TU都具有相同的大小。此外,假设逆CCP被应用于TU0和TU2,但是未被应用于TU1和TU3
在图5A中,方框代表的是去量化和逆变换、逆CCP以及逆色彩变换的解码时间。变量ti inv-transquant(ti 逆-变换量化)和ti iinv-ccp(ti 逆-ccp)分别是用于第i个TU的是去量化和逆变换模块以及逆CCP模块的解码时间,并且tcu inv-act(tcu 逆-act)是整个CU的逆色彩变换的解码时间。由于逆CCP和逆色彩变换是单像素(pixel-wise)操作,因此,相应的解码时间大致与TU中的像素的数量成比例。
如图5A所示,由于逆CCP和逆色彩变换在不同等级操作,因此,逆色彩变换是在针对启用CCP的TU的逆CCP结束之后开始的。作为示例,虽然TU1具有最小的残差重建时间,但其残差未必会在重建TU2的残差之前反向转换到原始色彩空间。在图5A中,CU残差解码的总时间等于等式7。
逆色彩变换可以在TU级上执行。TU的预测残差可以转换到原始色彩空间,而不用等待重建整个CU的亮度和色度残差。
图5B是同时在TU级应用了逆CCP和逆ACT的例示残差解码处理的时序图。图5B示出的是在同时应用CCP和ACT时针对一个CU中的残差信号的解码处理。针对图5A所做的相同假设同样适用于图5B。在图5B中,方框代表的是去量化和逆变换、逆CCP以及逆色彩变换的解码时间,其中ti inv-act(ti 逆-act)是第i个TU的逆色彩变换的解码时间。假设附图中的每一个TU是CU大小的四分之一,那么ti inv-act大致等于tcu inv-act/4。
如图5B所示,在逆CCP之后,TU的残差可以从YCgCo空间立即变换到原始色彩空间。残差解码的相应总时间可以依照等式8来计算。
逆CCP和逆ACT变换可以作为一个组合的解码处理来执行。例如,ACT和CCP可以在残差域中执行,并且可以由一个组合的解码模块来执行。
如等式4所示,逆CCP可被撰写成一个线性运算,该运算可被变换成如等式9中的矩阵乘法。
在等式9中,Y'、Cg'和Co'可以是逆CCP之前的Y、Cg和Co的残差信号。Y、Cg和Co和可以是逆CCP之后的Y、Cg和Co的残差信号。分别可以是Cg和Co的CCP参数。
对于有损编码来说,假设等式9中的逆CCP和等式5中的逆ACT均是线性运算,如等式10所示,逆CCP和逆ACT处理可以通过乘法来组合。
对于无损编码,如图6A所示,在给出了等式6中的基于提升(lifting)的逆ACT的情况下,CCP和ACT的组合解码处理可通过级联这两操作得到。
图6B显示的是在TU级组合逆CCP和逆ACT的例示残差解码处理。图6B示出的是图5B的解码处理,其中逆CCP和逆ACT被组合到一个组合解码模块中。如图6B所示,用于TU的解码处理可以包括去量化和逆变换处理以及组合的逆CCP和ACT处理。如所示,对于TU0来说,其会耗费t0 inv-transquant来执行去量化和逆变换处理,并且会耗费t0 combined(t0 组合)来执行组合的逆CCP和ACT处理。对于TU2来说,其会耗费t2 inv-transquant来执行去量化和逆变换处理,并且会耗费t2 combined来执行组合的逆CCP和ACT处理。与图5B所示的使用了三个模块的例示残差解码处理相比,其解码等待时间将会缩短。
逆CCP和ACT的组合模块可以在关停逆CCP的情况下执行逆ACT。举例来说,如图5B所示,TU1和TU3使用的是逆ACT而不是逆CCP。通过将等式10中的相应的CCP参数设置成零,可以使用组合模块来实施解码处理。假设可以使用组合模块来单独完成逆ACT以及与CCP相结合的逆ACT,那么解码器将可以包含一个组合的模块,而不用实施单独的仅执行逆ACT的模块。
在色彩空间变换之后,三个色彩分量的动态范围有可能是不同的。在色彩空间变换之后,这三种色彩分量的动态范围可能不再相同。如等式1和2以及表1所示,α的值被限制在范围[-1,1]。亮度分量和色度分量可能具有也可能不具有相同的动态范围。如等式5和6所示,在有损编码和无损编码中使用的前向色彩变换未必会归一化。三个分量(Y、Cg和Co)的幅度可能会依照不同的缩放因子而改变。
用于自适应跨分量预测的加权参数的许可范围是可以动态调整的。在启用了CCP以及ACT时,这时可以为两个色度分量单独调整α的许可范围。通过调整αCg和αCo的许可范围,可以允许其具有不同的范围。
举例来说,在启用了CCP以及ACT时,这时可以为两个色度分量单独调整等式1和等式2中的参数α的许可范围。用于Cg分量的加权参数αCg的许可范围以及用于Co的加权参数αCo的许可范围是可以调整的。用于Cg和Co的加权参数可以具有不同的范围。
如等式1和2所示,α的值可被限制在范围[-1,1]。亮度和色度分量具有相同的动态范围。等式5中的前向色彩变换矩阵行可能会显示不同的范数(norm),并且在YCgCo空间中得到的α的动态范围可能变得不同于原始色彩空间。YCgCo色彩空间中的Cg和Co分量的α值的许可范围可以基于分量之间的动态范围差来调整。
如等式5所示,对于有损编码来说,前向色彩变换矩阵中的三个行的范数可以由等式11给出。
设想等式11,在YCgCo空间中,每一个色度分量与亮度分量之间的幅度比可以以等式12所示的方式得到。
假设Cg与Y之间的相对幅度是1,那么可以使用范围[-1,1]来限制用于Cg分量的α值。对于Co分量来说,假设其信号的幅度在ACT之后大于Y分量的幅度,那么其α值的范围可被调整成[-1.15,1.15]。该许可范围可以基于Co分量与Y分量之间的相对幅度比来确定(如等式12所示)。
在应用了范围调整之后,编码器可以量化Co分量的α值。图7显示的是有损编码过程中关于Co分量的例示的编码器端量化。表4显示的是原始的α值与使用了图7所示的量化示例的Co分量的重建值之间的非限制性的例示映射。
表4在有损编码中映射关于Co分量的原始和重建α值
原始值范围 重建值 原始值范围 重建值范围
(-∞,-7/8] -1.15 [7/8,+∞) 1.15
(-7/8,-3/8] -1/2 [3/8,7/8) 1/2
(-3/8,-3/16] -1/4 [3/16,3/8) 1/4
(-3/16,-1/16] -1/8 [1/16,3/16) 1/8
(-1/16,1/16) 0
对于前向和逆CCP来说,实数α值-1.15和1.15可以通过与一个整数缩放比例相乘以及向右移位来近似。举例来说,在使用5位固定点近似的情况下,当α是-1.15或1.15时,等式3和4将会变成等式13和14。
ΔrC(x,y)=rC(x,y)-(37×rL′(x,y))>>5 等式13
rC′(x,y)=ΔrC′(x,y)+(37×rL′(x,y))>>5 等式14
在一个示例中,如等式15和16给出的那样,与3比特精度的定点近似相一致,实数α值-1.15和1.15可以通过与大小为9的缩放比例相乘以及执行3位右移位来近似。
ΔrC(x,y)=rC(x,y)-(9×rL′(x,y))>>3 等式15
rC′(x,y)=ΔrC′(x,y)+(9×rL′(x,y))>>3 等式16
对于无损编码来说,在将等式6中的前向色彩变换的提升运算转换成矩阵运算之后,YCogo空间的色度分量与亮度分量之间的幅度比可以用等式17所示的方式来得到。
对于有损编码中的Co分量来说,在无损编码中,关于Cg和Co分量的α值的许可范围分别可以被调整成[-2,2]以及[-2.3,2.3]。
图8A和8B示出的是用于量化调整了范围的Cg和Co分量的α值的例示的编码器端量化。图8A显示的是无损编码中的Cg分量的例示量化。图8B显示的是无损编码中的Co分量的例示量化。
表5显示的是在将图8A中的量化方法用于无损编码的情况下的Cg分量的原始α值与重建值之间的非限制性的例示映射。
表5在无损编码中映射用于Cg分量的原始α值和重建α值
原始值范围 重建值 原始值范围 重建值
(-∞,-1.25] -2 [1.25,+∞) 2
(-1.25,-3/8] -1/2 [3/8,1.25) 1/2
(-3/8,-3/16] -1/4 [3/16,3/8) 1/4
(-3/16,-1/16] -1/8 [1/16,3/16) 1/8
(-1/16,1/16) 0
表6显示的是在将图8B所示的量化用于无损编码的情况下的Co分量的原始α值与重建值之间的非限制性的例示映射。
表6在无损编码中映射用于Co分量的原始α值和重建α值
根据图8A和8B以及表5和6所示的无损编码示例,表5中的范围限制[-2,2]以及量化处理可以应用于Cg分量的α值,而范围限制[-2.3,2.3]以及表6的量化处理则可应用于Co分量的α值。
在无损编码示例中,表5中的范围限制[-2,2]和量化处理可以同时应用于Cg分量和Co分量的α值。
对于有损编码和无损编码来说,用于色度分量的α值的范围是可以调整的。原始重建值-1和1可以用经过调整的范围边界值来替换。例如,原始重建值-1/1可以用表4中的-1.15/1.15、表5中的-2/2和/或表6中的-2.3/2.3替换。
α值的范围可以通过将经过调整的范围的边界值作为附加元素添加到关于CCP的重建值列表中来调整。以在无损编码中使用Cg分量的CCP为例,表7示出了原始α值与重建值数量增加的重建值之间的映射。
表7在无损编码中映射用于Cg分量且数量增加的原始和重建α值
原始值范围 重建值 原始值范围 重建值
(-∞,-1.5] -2 [1.5,+∞) 2
(-1.5,-3/4] -1 [3/4.1.5) 1
(-3/4,-3/8] -1/2 [3/8,3/4) 1/2
(-3/8,-3/16] -1/4 [3/16,3/8) 1/4
(-3/16,-1/16] -1/8 [1/16,3/16) 1/8
(-1/16,1/16) 0
表5与表7的比较揭示了重建值数量的增多。在表5中有九个重建值。在表7中则有11个重建值。通过将经过调整的边界值-2和2添加到范围调整前的重建值{1-1/2,-1/4,-1/8,0,1/8,1/4,1/2,1}中,表7将重建值列表的大小增大到了11。在无损编码中,当应用ACT时,这种增加了数值映射的范围调整可被同时用于Cg和Co分量。
在YCgCo域中使用的量化参数(QP)值可被设置成不同于在原始色彩空间中使用的量化参数值,例如,其目的是保持YCgCo空间中的量化误差与原始色彩空间中的量化误差相当。CCP处理可能会导致信号幅度改变。
在YCgCo空间中使用的QP值可以基于所选择的参数来调整。通过执行该调整,可以使得逆CCP和逆色彩空间变换之后的残差信号失真与YCgCo空间中的残差信号失真相当。
如图9所示,在应用CCP和ACT时,组合矩阵的范数未必等于1。应用于YCgCo色彩空间的QP可能不同于在原始色彩空间中应用的QP。当应用CCP和ACT时,通过调节QP调整值,可以顾及CCP处理所导致的信号幅度变化。
例如,在YCgCo空间中使用的QP值可以是在考虑了所选择的CCP参数的情况下调整的。组合矩阵的范数可以采用如等式18所示的方式来得到。
量化步长大小是由等式19给出的。
Qstep=2(QP-4)/6 等式19
量化误差涉及原始色彩空间中的信号失真(例如在从YCgCo空间转换回之后)与YCgCo信号可以处于相同的等级。QP调整值可以由等式20给出。
在等式20中,QP0、QP1和QP2可以是应用于原始色彩空间中的三个分量的QP。等式21可被重组成如等式22所示的形式。
QPCg=QP1-3×log23≈QP1-5
QPCo=QP2-3×log22≈QP2-3 等式21
关于QP调整的示例是参考表4所示的先前示例提供的,其中该示例是在有损编码环境中映射Co分量的原始和重建值。在这个先前示例中,具有范围限制[-1,1]和[-1.15,1.15]的CCP范围调整分别应用于Cg和Co分量的CCP参数。表8显示了依照的值使用CCP参数范围调整的Y分量的相应QP调整ΔQPY可以代表Co分量的CCP参数。βCg可以代表Cg分量的CCP参数。
表8 YCgCo空间中使用了不同CCP参数并且对Co分量应用了CCP参数范围调整的亮度QP调节ΔQPY
CCP可以是在未调整范围的情况下应用的。例如,用于Cg分量的CCP参数未必会被调整,并且由此会保持处于[-1,1],和/或不会应用范围调整处理。表9给出的是使用了不同CCP参数且没有应用CCP范围调整的YCgCo色彩空间中的例示的色度QP调整ΔQPY的值全都可以是从{-8,-4,-2,-1,0,1,2,4,8}选择的。表9显示了以的值为基础的关于Y分量的相应QP调整ΔQPY
表9使用了不同的CCP参数且没有应用CCP范围调整的YCgCo色彩空间中的亮度QP调节ΔQPY
表8和表9中列举的QP调整值可以应用于有损编码。对于无损编码来说,如果没有应用量化,那么QP调整是可以略过的。
在ACT中,deduce分量的位深可以不同于亮度分量的一个或多个位深。色度分量的位深可以被表示为BitDepthC。在本文中,亮度分量的位深可以被表示为BitDepthY
当BitDepthY和BitDepthC存在差值时,这时可以略过ACT。ACT工具可被配置成是禁用的,例如由高级信令来配置。作为示例,当BitDepthY和BitDepthC存在差值时,这时可以在序列参数集合(SPS)中将residual_adaptive_colour_transform_enabled_flag(残差_自适应_色彩_变换_使能_标记)设置成0。
作为示例,通过在逆色彩变换之前执行左移位,可以将位深较小/较低的分量缩放成与其他分量的位深相匹配,由此校准亮度分量和色度分量的位深。举例来说,亮度分量的位深可以基于亮度分量与色度分量的位深之间的位深差值来调整。作为示例,色度分量的位深可以基于亮度分量与色度分量的位深之间的差值来调整。通过在逆色彩变换之后执行右移位,可以将经过缩放的分量重新调整和/或重新缩放至其原始位深。
图9显示的是在有损编码中的亮度和色度位深存在差值的时候应用了逆ACP以及位深校准的例示解码处理。如图9所示,可以对诸如亮度分量Y以及色度分量Cg和Co之类的残差系数分别执行逆量化910和逆变换912。这些残差系数可被提供给逆CCP 950。在执行了逆跨分量预测之后,在953可以校准亮度分量和色度分量的位深。
亮度与色度的位深是否存在差值是可以确定的。在亮度和色度的位深存在差值的情况下,则可以执行位深校准操作。亮度分量和色度分量的位深之间的位深差值是可以确定的。对于存在位深差值且位深较低的一个或多个分量来说,其可被应用一个或多个左移位。例如,变量增量位深可以代表该位深差值。当BitDepthY大于BitDepthC时,增量位深变量可被设置成ΔB=BitDepthY-BitDepthC。色度分量的系数可被左移大小为该增量位深的一个值。当BitDepthY小于BitDepthC时,增量位深变量可被设置成ΔB=BitDepthC-BitDepthY。亮度分量的系数可被左移大小为所述增量位深的值。
如图9所示,依照ΔB,可以将左移位应用于色度分量。残差系数可以通过逆色彩变换操作955而被转换回到原始色彩空间。在960,如图9所示,通过执行右移位,诸如色度分量之类的经过缩放的分量可被重新调整和/或重新缩放至其原始位深。
位深校准可以包括移位处理。如图9所示,左移位可被应用于色度分量。在其他示例中,左移位可被应用于亮度分量(例如在BitDepthY小于BitDepthC的时候)。诸如色度分量的逆变换和/或逆CCP之类的解码处理可以以原始的内部位深来执行操作,例如BitDepthC
等式23显示的是通过矩阵乘法来校准位深的带有移位操作的例示的逆色彩变换。
可以补偿亮度与色度分量之间的位深差值,以调整色度分量的QP。举例来说,如果量化步长大小会在每次递增QP的时候增大21/6倍,并且会在每6次递增的时候加倍,那么将QP增大6ΔB可以等价于通过向右移动ΔB位来缩放信号的幅度。大小为6ΔB的QP调整可被应用于色度分量。对于亮度和色度分量来说,逆色彩变换的输入信号可以具有相同的位深。
举例来说,当亮度和色度的位深在有损编码中存在差值时,这时可以基于该位深差值来调整亮度和/或色度分量的QP。图10显示了在调整QP的情况下应用逆ACT的例示解码处理。在1010,色度分量的QP可被调整,以使逆CCP 1050的输入信号对于其亮度和色度分量而言都具有相同的位深。当亮度分量的位深高于一个或多个色度分量的位深时,色度逆变换和逆色彩变换可以在亮度位深上执行。当亮度分量的位深低于一个或多个色度分量时,色度逆变换和逆色彩变换可以操作在其原始位深上。如图10所示,残差系数可被执行逆变换1012。这些残差系数可被提供给CCP 1050。并且这些残差系数可以通过逆色彩空间变换操作1055而被转换回到原始色彩空间。在1060,通过如图10所示的右移位,可以将色度分量之类的经过缩放的分量重新调节和/或重新缩放至其原始位深。
图11显示的是在有损编码中的亮度和色度位深存在差值的时候,在色度逆变换之后通过左移位来应用逆ACT的例示解码处理。所述色度分量的逆变换可以使用原始的较低位深。并且QP调整是可以略过的。
如图11所示,可以对诸如亮度分量Y以及色度分量Cg和Co的残差系数分别执行逆量化1110和逆变换1112。在执行逆跨分量预测1153之前,在1150,亮度分量和色度分量的位深可被校准。在校准了位深之后,可以对残差系数执行逆CCP 1153。通过逆色彩变换操作1155,可以将这些残差系数转换回原始色彩空间。在1160,通过如图11所示的右移位,可以将色度分量之类的经过缩放的分量重新调整和/或重新缩放至其原始位深。
这里描述的技术可以采用任何可以想到的组合方式来组合。并且它们还可以采用任一可以想到的组合方式组合。例如,如果假设逆CCP和逆色彩变换是以相同位深操作的,那么可以构建组合的逆CCP和ACT、CCP参数范围调整、亮度QP调整以及调整色度分量QP的技术。在该组合中,逆CCP和逆色彩变换可以是以较高的亮度和色度分量位深执行的,例如max(BitDepthY,BitDepthC)。
图12显示的是组合的逆CCP和逆ACT中的例示解码处理。如所示,该解码处理可以包括组合的逆CCP和ACT、CCP参数范围调整、亮度QP调节和色度分量的QP调整。此外也可以设想替换方式和其他组合。虽然没有图示,但是作为示例,在针对色度分量的逆变换的输出上可以应用大小为ΔB位的左移位。
如图12所示,可以对亮度分量Y以及色度分量Cg和Co之类的残差系数分别执行逆量化1210。亮度QP调整和色度分量的QP调整可作为逆量化1210的一部分来执行,ΔQY可以代表应用于YCgCo空间中的亮度分量量化的增量QP。其可以基于CCP参数的范围调整通过使用表8或表9来得到。可以对残差系数执行逆变换1212。可以执行组合的逆CCP和逆ACT1254。残差信号可以反向转换到原始色彩空间。在1260,通过如图12所示的右移位,可以将色度分量之类的经过缩放的分量重新调整和/或重新缩放至其原始位深。
图13A是可以实施所公开的一个或多个实施例的例示通信系统100的图示。通信系统100可以是为多个无线用户提供语音、数据、视频、消息、广播等内容的多址接入系统。该通信系统100通过共享包括无线带宽在内的系统资源来允许多个无线用户访问此类内容。作为示例,通信系统100可以使用一种或多种信道接入方法,例如码分多址(CDMA)、时分多址(TDMA)、频分多址(FDMA)、正交FDMA(OFDMA)、单载波FDMA(SC-FDMA)等等。
如图13A所示,通信系统100可以包括无线发射/接收单元(WTRU)102a、102b、102c和/或102d(通称或统称为WTRU 102),无线电接入网络(RAN)103/104/105,核心网络106/107/109,公共交换电话网络(PSTN)108,因特网110以及其他网络112,然而应该认识到的是,所公开的实施例设想了任意数量的WTRU、基站、网络和/或网络部件。每一个WTRU 102a、102b、102c、102d可以是被配置成在无线环境中工作和/或通信的任何类型的设备。例如,WTRU 102a、102b、102c、102d可被配置成发射和/或接收无线信号,并且可以包括用户设备(UE)、移动站、固定或移动订户单元、寻呼机、蜂窝电话、个人数字助理(PDA)、智能电话、膝上型计算机、上网本、个人计算机、无线传感器、消费类电子设备等等。
通信系统100还可以包括基站114a和基站114b。每一个基站114a、114b可以是被配置成通过以无线方式与WTRU 102a、102b、102c、102d中的至少一个相对接来促使其接入一个或多个通信网络的任何类型的设备,其中该网络可以是核心网络106/107/109、因特网110和/或网络112。例如,基站114a、114b可以是基地收发信台(BTS)、节点B、e节点B、家庭节点B、家庭e节点B、站点控制器、接入点(AP)、无线路由器等等。虽然每一个基站114a、114b都被描述成是单个部件,但是应该认识到的是,基站114a、114b可以包括任何数量的互连基站和/或网络部件。
基站114a可以是RAN 103/104/105的一部分,并且所述RAN还可以包括其他基站和/或网络部件(未显示),例如基站控制器(BSC)、无线电网络控制器(RNC)、中继节点等等。基站114a和/或基站114b可被配置成在名为小区(未显示)的特定地理区域内部发射和/或接收无线信号。小区则可以被进一步划分成小区扇区。例如,与基站114a关联的小区可分为三个扇区。由此,在一个实施例中,基站114a可以包括三个收发信机,即每一个收发信机对应于小区的一个扇区。在另一个实施例中,基站114a可以使用多输入多输出(MIMO)技术,由此可以为小区的每个扇区使用多个收发信机。
基站114a、114b可以借助空中接口115/116/117来与一个或多个WTRU102a、102b、102c、102d进行通信,该空中接口可以是任何适当的无线通信链路(例如射频(RF)、微波、红外线(IR)、紫外线(UV)、可见光等等)。空中接口115/116/117可以是用任何适当的无线电接入技术(RAT)建立的。
更具体地说,如上所述,通信系统100可以是多址接入系统,并且可以使用一种或多种信道接入方案,例如CDMA、TDMA、FDMA、OFDMA、SC-FDMA等等。例如,RAN103/104/105中的基站114a与WTRU 102a、102b、102c可以实施诸如通用移动电信系统(UMTS)陆地无线电接入(UTRA)之类的无线电技术,并且该技术可以使用宽带CDMA(WCDMA)来建立空中接口115/116/117。WCDMA可以包括诸如高速分组接入(HSPA)和/或演进型HSPA(HSPA+)之类的通信协议。HSPA则可以包括高速下行链路分组接入(HSDPA)和/或高速上行链路分组接入(HSUPA)。
在一个实施例中,基站114a与WTRU 102a、102b、102c可以实施演进型UMTS陆地无线电接入(E-UTRA)之类的无线电技术,该技术可以使用长期演进(LTE)和/或先进LTE(LTE-A)来建立空中接口115/116/117。
在其他实施例中,基站114a与WTRU 102a、102b、102c可以实施诸如IEEE 802.16(全球微波接入互操作性(WiMAX))、CDMA2000、CDMA20001X、CDMA2000EV-DO、临时标准2000(IS-2000)、临时标准95(IS-95)、临时标准856(IS-856)、全球移动通信系统(GSM)、用于GSM增强数据速率演进(EDGE)、GSM EDGE(GERAN)等无线电接入技术。
作为示例,图13A中的基站114b可以是无线路由器、家庭节点B、家庭e节点B或接入点,并且可以使用任何适当的RAT来促成局部区域中的无线连接,例如营业场所、住宅、交通工具、校园等等。在一个实施例中,基站114b与WTRU 102c、102d可通过实施IEEE 802.11之类的无线电技术来建立无线局域网(WLAN)。在一个实施例中,基站114b与WTRU 102c、102d可以通过实施IEEE 802.15之类的无线电技术来建立无线个人局域网(WPAN)。在再一个实施例中,基站114b和WTRU 102c、102d可通过使用基于蜂窝的RAT(例如WCDMA、CDMA2000、GSM、LTE、LTE-A等等)来建立微微小区或毫微微小区。如图13A所示,基站114b可以直连到因特网110。由此,基站114b并不是必需经由核心网络106/107/109来接入因特网110。
RAN 103/104/105可以与核心网络106/107/109通信,核心网络可以是被配置成向一个或多个WTRU 102a、102b、102c、102d提供语音、数据、应用和/或借助网际协议的语音(VoIP)服务的任何类型的网络。例如,核心网络106/107/109可以提供呼叫控制、记账服务、基于移动位置的服务、预付费呼叫、因特网连接、视频分发等等,和/或执行用户验证之类的高级安全功能。虽然在图13A中没有显示,然而应该认识到的是,RAN103/104/105和/或核心网络106/107/109可以直接或间接地和其他那些与RAN103/104/105使用相同RAT或不同RAT的RAN进行通信。举例来说,除了与使用E-UTRA无线电技术的RAN103/104/105连接之外,核心网络106/107/109还可以与使用GSM无线电技术的RAN(未显示)通信。
核心网络106/107/109还可以充当供WTRU 102a、102b、102c、102d接入PSTN 108、因特网110和/或其他网络112的网关。PSTN 108可以包括提供简易老式电话服务(POTS)的电路交换电话网络。因特网110可以包括使用了公共通信协议的全球性互联计算机网络设备系统,作为示例,该协议可以是TCP/IP网际协议族中的传输控制协议(TCP)、用户数据报协议(UDP)和网际协议(IP)。网络112可以包括由其他服务供应商拥有和/或运营的有线或无线通信网络。例如,网络112可以包括与一个或多个RAN相连的另一个核心网络,所述一个或多个RAN可以与RAN 103/104/105使用相同RAT或不同RAT。
通信系统100中一些或所有WTRU 102a、102b、102c、102d可以包括多模能力,即WTRU 102a、102b、102c、102d可以包括在不同无线链路上与不同无线网络通信的多个收发信机。例如,图13A所示的WTRU 102c可被配置成与使用基于蜂窝的无线电技术的基站114a通信,以及与可以使用IEEE 802无线电技术的基站114b通信。
图13B是例示WTRU 102的系统图示。如图13B所示,WTRU 102可以包括处理器118、收发信机120、发射/接收部件122、扬声器/麦克风124、键盘126、显示器/触摸板128、不可移除存储器130、可移除存储器132、电源134、全球定位系统(GPS)芯片组136以及其他外围设备138。应该了解的是,在保持与实施例相符的同时,WTRU 102还可以包括前述部件的任何子组合。此外,这里的实施例还设想基站114a和114b、和/或基站114a和114b所代表的节点可以包括在图13B中描绘以及在这里描述的一些或所有部件,特别地,基站114a和114b所代表的节点可以是收发信台(BTS)、节点B、站点控制器、接入点(AP)、家庭节点B、演进型家庭节点B(eNodeB)、家庭演进型节点B(HeNB)、家庭演进型节点B网关以及代理节点,但其并不局限于此。
处理器118可以是通用处理器、专用处理器、常规处理器、数字信号处理器(DSP)、多个微处理器、与DSP核心关联的一个或多个微处理器、控制器、微控制器、专用集成电路(ASIC)、现场可编程门阵列(FPGA)电路、其他任何类型的集成电路(IC)、状态机等等。处理器118可以执行信号编码、数据处理、功率控制、输入/输出处理和/或其他任何能使WTRU102在无线环境中工作的功能。处理器118可以耦合至收发信机120,收发信机120可以耦合至发射/接收部件122。虽然图13B将处理器118和收发信机120描述成是独立组件,然而应该认识到的是,处理器118和收发信机120可以集成在一个电子封装或芯片中。
发射/接收部件122可被配置成经由空中接口115/116/117来发射或接收去往或来自基站(例如基站114a)的信号。举个例子,在一个实施例中,发射/接收部件122可以是被配置成发射和/或接收RF信号的天线。在一个实施例中,作为示例,发射/接收部件122可以是被配置成发射和/或接收IR、UV或可见光信号的放射器/检测器。在再一个实施例中,发射/接收部件122可被配置成发射和接收RF和光信号。应该认识到的是,发射/接收部件122可被配置成发射和/或接收无线信号的任何组合。
此外,虽然在图13B中将发射/接收部件122描述成是单个部件,但是WTRU 102可以包括任何数量的发射/接收部件122。更具体地说,WTRU 102可以使用MIMO技术。因此,在一个实施例中,WTRU 102可以包括两个或多个经由空中接口115/116/117来发射和接收无线信号的发射/接收部件122(例如多个天线)。
收发信机120可被配置成调制发射/接收部件122所要发射的信号,以及解调发射/接收部件122所接收的信号。如上所述,WTRU 102可以具有多模能力。因此,收发信机120可以包括允许WTRU 102借助诸如UTRA和IEEE 802.11之类的多种RAT来进行通信的多个收发信机。
WTRU 102的处理器118可以耦合至扬声器/麦克风124、键盘126和/或显示器/触摸板128(例如液晶显示器(LCD)显示单元或有机发光二极管(OLED)显示单元),并且可以接收来自这些部件的用户输入数据。处理器118还可以将用户数据输出到扬声器/麦克风124、键盘126和/或显示器/触摸板128。此外,处理器118可以从任何适当的存储器、例如不可移除存储器106和/或可移除存储器132中存取信息,以及将信息存入这些存储器。所述不可移除存储器106可以包括随机存取存储器(RAM)、只读存储器(ROM)、硬盘或是其他任何类型的记忆存储设备。可移除存储器132可以包括订户身份模块(SIM)卡、记忆棒、安全数字(SD)记忆卡等等。在一个实施例中,处理器118可以从那些并非实际位于WTRU 102的存储器访问信息,以及将数据存入这些存储器,作为示例,此类存储器可以位于服务器或家庭计算机(未显示)。
处理器118可以接收来自电源134的电力,并且可以被配置分发和/或控制用于WTRU 102中的其他组件的电力。电源134可以是为WTRU 102供电的任何适当的设备。举例来说,电源134可以包括一个或多个干电池组(如镍镉(Ni-Cd)、镍锌(Ni-Zn)、镍氢(NiMH)、锂离子(Li-ion)等等)、太阳能电池、燃料电池等等。
处理器118还可以与GPS芯片组136耦合,该芯片组可被配置成提供与WTRU 102的当前位置相关的位置信息(例如经度和纬度)。作为来自GPS芯片组136的信息的补充或替换,WTRU 102可以经由空中接口115/116/117接收来自基站(例如基站114a、114b)的位置信息,和/或根据从两个或多个附近基站接收的信号定时来确定其位置。应该认识到的是,在保持与实施例相符的同时,WTRU 102可以借助任何适当的定位方法来获取位置信息。
处理器118还可以耦合到其他外围设备138,这其中可以包括提供附加特征、功能和/或有线或无线连接的一个或多个软件和/或硬件模块。例如,外围设备138可以包括加速度计、电子指南针、卫星收发信机、数码相机(用于照片和视频)、通用串行总线(USB)端口、振动设备、电视收发信机、免提耳机、模块、调频(FM)无线电单元、数字音乐播放器、媒体播放器、视频游戏机模块、因特网浏览器等等。
图13C是根据一个实施例的RAN 103和核心网络106的系统图示。如上所述,RAN103可以使用E-UTRA无线电技术而在空中接口115上与WTRU 102a、102b、102c通信。此外,RAN 103还可以与核心网络106通信。如图13C所示,RAN 103可以包括节点B 140a、140b、140c,其中每一个节点B都可以包括经由空中接口115与WTRU 102a、102b、102c通信的一个或多个收发信机。节点B 140a、140b、140c中的每一个都可以关联于RAN 103内部的特定小区(未显示)。RAN 103还可以包括RNC 142a、142b。应该了解的是,在保持与实施例相符的同时,RAN 103可以包括任何数量的节点B和RNC。
如图13C所示,节点B 140a、140b可以与RNC 142a进行通信。此外,节点B 140c还可以与RNC 142b进行通信。节点B 140a、140b、140c可以经由Iub接口来与相应的RNC 142a、142b进行通信。RNC 142a、142b彼此则可以经由Iur接口来进行通信。每一个RNC 142a、142b都可以被配置成控制与之相连的相应节点B 140a、140b、140c。另外,每一个RNC 142a、142b都可以被配置成执行或支持其他功能,例如外环功率控制、负载控制、许可控制、分组调度、切换控制、宏分集、安全功能、数据加密等等。
图13C所示的核心网络106可以包括媒体网关(MGW)144、移动交换中心(MSC)146、服务GPRS节点交换中心(SGSN)148和/或网关GPRS支持节点(GGSN)150。虽然前述每个部件都被描述成是核心网络106的一部分,然而应该认识到的是,核心网络运营商之外的其他实体同样可以拥有和/或运营这其中的任一部件。
RAN 103中的RNC 142a可以经由IuCS接口连接到核心网络106中的MSC 146。MSC146可以连接到MGW 144。MSC 146和MGW 144可以为WTRU 102a、102b、102c提供针对PSTN108之类的电路交换网络的接入,以便促成WTRU 102a、102b、102c与传统陆线通信设备间的通信。
RAN 103中的RNC 142a还可以经由IuPS接口连接到核心网络106中的SGSN 148。SGSN 148则可以连接到GGSN 150。SGSN 148和GGSN 150可以为WTRU 102a、102b、102c提供针对因特网110之类的分组交换网络的接入,以便促成WTRU 102a、102b、102c与IP使能设备之间的通信。
如上所述,核心网络106还可以连接到网络112,该网络可以包括其他服务供应商拥有和/或运营的其他有线或无线网络。
图13D是根据一个实施例的RAN 104和核心网络107的系统图示。如上所述,RAN104可以使用E-UTRA无线电技术而在空中接口116上与WTRU 102a、102b、102c通信。此外,RAN 104还可以与核心网络107通信。
RAN 104可以包括e节点B 160a、160b、160c,然而应该认识到的是,在保持与实施例相符的同时,RAN 104可以包括任何数量的e节点B。每一个e节点B 160a、160b、160c可以包括一个或多个收发信机,以便经由空中接口116来与WTRU 102a、102b、102c通信。在一个实施例中,e节点B 160a、160b、160c可以实施MIMO技术。由此,举例来说,e节点B 160a可以使用多个天线来向WTRU 102a发射无线信号,以及接收来自WTRU 102a的无线信号。
每一个e节点B 160a、160b、160c可以关联于特定小区(未显示),并且可以被配置成处理无线电资源管理决策、切换决策、上行链路和/或下行链路中的用户调度等等。如图13D所示,e节点B 160a、160b、160c彼此可以经由X2接口进行通信。
图13D所示的核心网络107可以包括移动性管理网关(MME)162、服务网关164以及分组数据网络(PDN)网关166。虽然前述的每个部件都被描述成是核心网络107的一部分,然而应该认识到的是,核心网络运营商之外的其他实体同样可以拥有和/或运营这其中的任一部件。
MME 162可以经由S1接口连接到RAN 104中的每一个e节点B 160a、160b、160c,并且可以充当控制节点。例如,MME 162可以负责验证WTRU102a、102b、102c的用户,激活/去激活承载,在WTRU 102a、102b、102c的初始附着过程中选择特定服务网关等等。该MME 162还可以提供控制平面功能,以便在RAN 104与使用了GSM或WCDMA之类的其他无线电技术的其他RAN(未显示)之间执行切换。
服务网关164可以经由S1接口连接到RAN 104中的每一个e节点B160a、160b、160c。该服务网关164通常可以路由和转发去往/来自WTRU102a、102b、102c的用户数据分组。此外,服务网关164还可以执行其他功能,例如在e节点B间的切换过程中锚定用户面,在下行链路数据可供WTRU102a、102b、102c使用时触发寻呼,管理和存储WTRU 102a、102b、102c的上下文等等。
服务网关164还可以连接到PDN网关166,PDN网关166可以为WTRU102a、102b、102c提供针对诸如因特网110之类的分组交换网络的接入,以便促成WTRU 102a、102b、102c与IP使能设备之间的通信。
核心网络107可以促成与其他网络的通信。例如,核心网络107可以为WTRU 102a、102b、102c提供针对PSTN 108之类的电路交换网络的接入,以便促成WTRU 102a、102b、102c与传统陆线通信设备之间的通信。作为示例,核心网络107可以包括IP网关(例如IP多媒体子系统(IMS)服务器)或与之通信,其中所述IP网关充当了核心网络107与PSTN 108之间的接口。此外,核心网络107还可以为WTRU 102a、102b、102c提供针对网络112的接入,其中该网络可以包括其他服务供应商拥有和/或运营的其他有线或无线网络。
图13E是根据一个实施例的RAN 105和核心网络109的系统图示。RAN105可以是通过使用IEEE 802.16无线电技术而在空中接口117上与WTRU102a、102b、102c通信的接入服务网络(ASN)。如以下进一步论述的那样,WTRU 102a、102b、102c,RAN 105以及核心网络109的不同功能实体之间的通信链路可被定义成参考点。
如图13E所示,RAN 105可以包括基站180a、180b、180c以及ASN网关182,然而应该认识到的是,在保持与实施例相符的同时,RAN 105可以包括任何数量的基站和ASN网关。每个基站180a、180b、180c都可以关联于RAN 105中的特定小区(未显示),并且每个基站都可以包括一个或多个收发信机,以便在空中接口117上与WTRU 102a、102b、102c通信。在一个实施例中,基站180a、180b、180c可以实施MIMO技术。由此,举例来说,基站180a可以使用多个天线来向WTRU 102a发射无线信号以及接收来自WTRU 102a的无线信号。基站180a、180b、180c还可以提供移动性管理功能,例如切换触发、隧道建立、无线电资源管理、业务量分类、服务质量(QoS)策略实施等等。ASN网关182可以充当业务量聚集点,并且可以负责实施寻呼、订户简档缓存、针对核心网络109的路由等等。
WTRU 102a、102b、102c与RAN 105之间的空中接口117可被定义成是实施IEEE802.16规范的R1参考点。另外,每一个WTRU 102a、102b、102c都可以与核心网络109建立逻辑接口(未显示)。WTRU 102a、102b、102c与核心网络109之间的逻辑接口可被定义成R2参考点,该参考点可以用于验证、授权、IP主机配置管理和/或移动性管理。
每一个基站180a、180b、180c之间的通信链路可被定义成R8参考点,该参考点包含了用于促成WTRU切换以及基站之间的数据传送的协议。基站180a、180b、180c与ASN网关182之间的通信链路可被定义成R6参考点。所述R6参考点可以包括用于促成基于与每一个WTRU102a、102b、102c相关联的移动性事件的移动性管理。
如图13E所示,RAN 105可以连接到核心网络109。RAN 105与核心网络109之间的通信链路可以被定义成R3参考点,作为示例,该参考点包含了用于促成数据传送和移动性管理能力的协议。核心网络109可以包括移动IP家用代理(MIP-HA)184、验证授权记帐(AAA)服务器186以及网关188。虽然前述每个部件都被描述成是核心网络109的一部分,然而应该认识到的是,核心网络运营商以外的实体也可以拥有和/或运营这其中的任一部件。
MIP-HA可以负责实施IP地址管理,并且可以允许WTRU 102a、102b、102c在不同的ASN和/或不同的核心网络之间漫游。MIP-HA 184可以为WTRU 102a、102b、102c提供针对因特网110之类的分组交换网络的接入,以便促成WTRU 102a、102b、102c与IP使能的设备之间的通信。AAA服务器186可以负责实施用户验证以及支持用户服务。网关188可以促成与其他网络的互通。例如,网关188可以为WTRU 102a、102b、102c提供对于PSTN 108之类的电路交换网络的接入,以便促成WTRU 102a、102b、102c与传统陆线通信设备之间的通信。另外,网关188还可以为WTRU 102a、102b、102c提供针对网络112的接入,其中该网络可以包括其他服务供应商拥有和/或运营的其他有线或无线网络。
虽然在图13E中没有显示,然而应该认识到的是,RAN 105可以连接到其他ASN,并且核心网络109可以连接到其他核心网络。RAN 105与其他ASN之间的通信链路可被定义成R4参考点,该参考点可以包括用于协调WTRU 102a、102b、102c在RAN 105与其他ASN之间的移动的协议。核心网络109与其他核心网络之间的通信链路可以被定义成R5参考点,该参考点可以包括用于促成归属核心网络与被访核心网络之间互通的协议。
虽然在上文中描述了采用特定组合的特征和要素,但是本领域普通技术人员将会认识到,每一个特征既可以单独使用,也可以与其他特征和要素进行任何组合。此外,这里描述的方法可以在引入计算机可读介质中以供计算机或处理器运行的计算机程序、软件或固件中实施。关于计算机可读介质的示例包括电信号(经由有线或无线连接传送)以及计算机可读存储介质。关于计算机可读存储媒体的示例包括但不局限于只读存储器(ROM)、随机存取存储器(RAM)、寄存器、缓冲存储器、半导体存储设备、内部硬盘和可拆卸磁盘之类的磁介质、磁光介质、以及CD-ROM碟片和数字多用途碟片(DVD)之类的光介质。与软件关联的处理器可以用于实施在WTRU、UE、终端、基站、RNC或任何计算机主机。

Claims (26)

1.一种视频编码设备,该设备包括:
处理器,被配置成:
接收包含了第一变换单元(TU)和第二TU的编码单元(CU);
确定是否为所述第一TU启用逆自适应色彩变换(ACT),以及是否为所述第二TU启用逆ACT;以及
基于该确定来处理所述第一TU和所述第二TU,其中第一逆色彩变换是在为所述第一TU启用ACT时应用于所述第一TU的,并且在没有为所述第二TU启用ACT时,针对所述第二TU的第二逆色彩变换将被略过。
2.根据权利要求1所述的视频编码设备,其中是否为所述第一TU启用ACT至少基于以下中的至少一者确定:与包含所述第一TU的CU相关联的帧内预测模式、分区模式、以及预测模式。
3.根据权利要求1所述的视频编码设备,其中是否为所述第一TU启用ACT基于与所述第一TU相关联的第一TU ACT使能指示符确定,并且是否为所述第二TU启用ACT基于与所述第二TU相关联的第二TU ACT使能指示符确定。
4.根据权利要求1所述的视频编码设备,其中是否为所述第一TU启用ACT至少部分基于与包含所述第一TU的CU相关联的CU级TU ACT使能指示符确定。
5.根据权利要求1所述的视频编码设备,其中该处理包括:
借助第一并行处理路径来对所述第一TU应用去量化、逆变换、逆跨分量预测(CCP)以及逆ACT;以及
借助第二并行处理路径来应用去量化、逆变换以及逆CCP,所述第二并行处理路径独立于所述第一并行处理路径。
6.根据权利要求1所述的视频编码设备,其中该处理器还被配置成:
在为所述第一TU启用了ACT的情况下,基于与所述第一TU相关联的TU色彩空间指示符来识别用于应用所述第一逆色彩变换的色彩空间。
7.根据权利要求6所述的视频编码设备,其中所述处理器还被配置成:
基于与所述第一TU相关联的TU色彩空间指示符来确定是在变换后的色彩空间还是原始色彩空间中编码所述第一TU的残差。
8.一种视频编码设备,该设备包括:
处理器,被配置成:
接收视频比特流,该视频比特流包含了具有原始亮度分量位深的亮度分量,具有原始色度位深的第一色度分量和第二色度分量;
对所述亮度分量以及所述第一色度分量和所述第二色度分量执行位深校准,以使所述亮度分量以及所述第一色度分量和所述第二色度分量具有相同的校准后的位深;以及
基于具有经过校准的位深的亮度分量以及所述第一色度分量和所述第二色度分量来执行逆色彩变换。
9.根据权利要求8所述的视频编码设备,其中所述处理器还被配置成:
在所述逆色彩变换之后,将所述亮度分量还原至所述原始亮度分量位深,或者将所述第一色度分量和所述第二色度分量还原至所述原始色度位深。
10.根据权利要求8所述的视频编码设备,其中经过校准的位深是所述原始亮度分量亮度位深与所述原始色度分量位深之间较高的位深,并且所述处理器还被配置成:
缩放具有较低原始位深的分量,以便匹配经过校准的位深。
11.根据权利要求8所述的视频编码设备,其中所述处理器还被配置成:
确定所述原始亮度分量位深与所述原始色度分量位深之间的位深差值;以及
将具有较低原始位深的分量的系数左移该位深差值。
12.根据权利要求11所述的视频编码设备,其中所述处理器还被配置成:
在所述逆色彩变换之后,将具有较低原始位深的分量的系数右移该位深差值。
13.根据权利要求8所述的视频编码设备,其中所述亮度分量以及所述第一色度分量和第二色度分量与残差变换分块相关联。
14.一种视频编码方法,该方法包括:
接收包含了第一变换单元(TU)和第二TU的编码单元(CU);
确定是否为所述第一TU启用逆自适应色彩变换(ACT),以及是否为所述第二TU启用逆ACT;以及
基于该确定来处理所述第一TU和第所述二TU,其中基于为所述第一TU启用了ACT的确定,为所述第一TU应用第一逆色彩变换,以及基于没有为所述第二TU启用ACT的确定,略过针对第二TU的第二逆色彩变换。
15.根据权利要求14所述的视频编码方法,其中是否为所述第一TU启用ACT至少是基于以下中的至少一者确定:与包含所述第一TU的CU相关联的帧内预测模式、分区模式、以及预测模式。
16.根据权利要求14所述的视频编码方法,其中是否为所述第一TU启用ACT基于与所述第一TU相关联的第一TU ACT使能指示符确定,并且是否为所述第二TU启用ACT基于与所述第二TU相关联的第二TU ACT使能指示符确定的。
17.根据权利要求14所述的视频编码方法,其中是否为所述第一TU启用ACT至少部分基于与包含所述第一TU的CU相关联的CU级TU ACT使能指示符确定。
18.根据权利要求14所述的视频编码方法,其中该处理包括:
借助第一并行处理路径来对所述第一TU应用去量化、逆变换、逆跨分量预测(CCP)以及逆ACT;以及
借助第二并行处理路径来应用去量化、逆变换以及逆CCP,所述第二并行处理路径独立于所述第一并行处理路径。
19.根据权利要求14所述的视频编码方法,该方法还包括:基于为所述第一TU启用了ACT的确定,基于与所述第一TU相关联的TU色彩空间指示符来识别用于应用所述逆色彩变换的色彩空间。
20.根据权利要求19所述的视频编码方法,该方法还包括:
基于与所述第一TU相关联的TU色彩空间指示符来确定是在变换后的色彩空间还是原始色彩空间中编码所述第一TU的残差。
21.一种视频编码方法,该方法包括:
接收视频比特流,该视频比特流包含了具有原始亮度分量位深的亮度分量,具有原始色度位深的第一色度分量和第二色度分量;
对所述亮度分量以及所述第一色度分量和所述第二色度分量执行位深校准,以使所述亮度分量以及所述第一色度分量和所述第二色度分量具有相同的校准后的位深;以及
基于具有经过校准的位深的亮度分量以及所述第一色度分量和所述第二色度分量来执行逆色彩变换。
22.根据权利要求21所述的视频编码方法,该方法还包括:
在所述逆色彩变换之后执行以下中的至少一者:将所述亮度分量还原至所述原始亮度分量位深,或者将所述第一色度分量和所述第二色度分量还原至所述原始色度位深。
23.根据权利要求21所述的视频编码方法,其中经过校准的位深是原始亮度分量亮度位深与所述原始色度分量位深之间较高的位深,并且该方法还包括:
缩放具有较低原始位深的分量,以便匹配经过校准的位深。
24.根据权利要求21所述的视频编码方法,该方法还包括:
确定所述原始亮度分量位深与所述原始色度分量位深之间的位深差值;以及
将具有较低原始位深的分量的系数左移该位深差值。
25.根据权利要求24所述的视频编码方法,该方法还包括:
在所述逆色彩变换之后,将具有较低原始位深的分量的系数右移该位深差值。
26.根据权利要求21所述的视频编码方法,其中所述亮度分量以及所述第一色度分量和所述第二色度分量与残差变换分块相关联。
CN201580048952.3A 2014-09-12 2015-09-11 用于视频编码的分量间去相关 Active CN107079157B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201462049843P 2014-09-12 2014-09-12
US62/049,843 2014-09-12
US201562171542P 2015-06-05 2015-06-05
US62/171,542 2015-06-05
PCT/US2015/049784 WO2016040865A1 (en) 2014-09-12 2015-09-11 Inter-component de-correlation for video coding

Publications (2)

Publication Number Publication Date
CN107079157A true CN107079157A (zh) 2017-08-18
CN107079157B CN107079157B (zh) 2020-12-22

Family

ID=54238556

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580048952.3A Active CN107079157B (zh) 2014-09-12 2015-09-11 用于视频编码的分量间去相关

Country Status (9)

Country Link
US (1) US10469847B2 (zh)
EP (2) EP3544298A1 (zh)
JP (3) JP2017531382A (zh)
KR (1) KR102051193B1 (zh)
CN (1) CN107079157B (zh)
BR (1) BR112017004886A2 (zh)
RU (1) RU2017112309A (zh)
TW (1) TWI722996B (zh)
WO (1) WO2016040865A1 (zh)

Cited By (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110999299A (zh) * 2017-08-21 2020-04-10 高通股份有限公司 在视频译码中跨分量动态范围调整(cc-dra)的系统及方法
CN111095933A (zh) * 2017-09-15 2020-05-01 索尼公司 图像处理装置和方法
WO2020125795A1 (en) * 2018-12-22 2020-06-25 Beijing Bytedance Network Technology Co., Ltd. Indication of two step cross-component prediction mode
CN111480339A (zh) * 2017-12-19 2020-07-31 高通股份有限公司 具有联合像素/变换为基础的量化的视频译码的量化参数控制
WO2020192085A1 (zh) * 2019-03-25 2020-10-01 Oppo广东移动通信有限公司 图像预测方法、编码器、解码器以及存储介质
CN111742554A (zh) * 2018-02-01 2020-10-02 联发科技股份有限公司 具有视频数据自适应量化的视频编码或解码方法和装置
WO2020211868A1 (en) * 2019-04-18 2020-10-22 Beijing Bytedance Network Technology Co., Ltd. Reduction of latency in cross component mode
WO2021088951A1 (en) * 2019-11-07 2021-05-14 Beijing Bytedance Network Technology Co., Ltd. Quantization properties of adaptive in-loop color-space transform for video coding
WO2021121418A1 (en) * 2019-12-19 2021-06-24 Beijing Bytedance Network Technology Co., Ltd. Joint use of adaptive colour transform and differential coding of video
CN113056920A (zh) * 2018-11-22 2021-06-29 北京字节跳动网络技术有限公司 基于子块的帧间预测的协调方法
CN113395524A (zh) * 2020-03-11 2021-09-14 腾讯美国有限责任公司 视频解码方法、装置和电子设备
US20210321140A1 (en) 2019-03-08 2021-10-14 Beijing Bytedance Network Technology Co., Ltd. Signaling of reshaping information in video processing
CN113545064A (zh) * 2019-03-04 2021-10-22 阿里巴巴集团控股有限公司 用于处理视频内容的方法和系统
CN113678450A (zh) * 2019-03-12 2021-11-19 弗劳恩霍夫应用研究促进协会 用于图像和视频编码的选择性分量间变换(ict)
CN114009050A (zh) * 2019-06-21 2022-02-01 北京字节跳动网络技术有限公司 视频编解码的自适应环内颜色空间变换
CN114128280A (zh) * 2019-07-07 2022-03-01 北京字节跳动网络技术有限公司 色度残差缩放的信令通知
CN114208190A (zh) * 2019-08-03 2022-03-18 北京字节跳动网络技术有限公司 视频编解码中缩减二次变换的矩阵的选择
CN114586370A (zh) * 2019-10-14 2022-06-03 字节跳动有限公司 在视频编解码中使用色度量化参数
CN114731447A (zh) * 2020-04-16 2022-07-08 腾讯美国有限责任公司 用于视频编解码的方法和设备
CN114731438A (zh) * 2019-12-27 2022-07-08 富士通株式会社 自适应颜色变换的编解码方法、装置以及视频编解码设备
CN114846807A (zh) * 2019-12-30 2022-08-02 北京达佳互联信息技术有限公司 色度残差的编解码
US11463713B2 (en) 2019-05-08 2022-10-04 Beijing Bytedance Network Technology Co., Ltd. Conditions for applicability of cross-component coding
US11659164B1 (en) 2019-04-23 2023-05-23 Beijing Bytedance Network Technology Co., Ltd. Methods for cross component dependency reduction
CN116405698A (zh) * 2019-12-05 2023-07-07 阿里巴巴(中国)有限公司 用于色度采样的方法和装置
CN116614625A (zh) * 2020-06-12 2023-08-18 北京达佳互联信息技术有限公司 一种视频编码的方法、装置和介质
US11838523B2 (en) 2020-01-05 2023-12-05 Beijing Bytedance Network Technology Co., Ltd. General constraints information for video coding
US11924469B2 (en) 2019-06-07 2024-03-05 Beijing Bytedance Network Technology Co., Ltd. Conditional signaling of reduced secondary transform in video bitstreams
US11924472B2 (en) 2019-06-22 2024-03-05 Beijing Bytedance Network Technology Co., Ltd. Syntax element for chroma residual scaling
US11943439B2 (en) 2020-01-18 2024-03-26 Beijing Bytedance Network Technology Co., Ltd. Adaptive colour transform in image/video coding
US11973959B2 (en) 2019-09-14 2024-04-30 Bytedance Inc. Quantization parameter for chroma deblocking filtering
US12034942B2 (en) 2019-05-08 2024-07-09 Beijing Bytedance Network Technology Co., Ltd. Conditions for applicability of cross-component coding

Families Citing this family (47)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2017501599A (ja) * 2013-10-07 2017-01-12 ヴィド スケール インコーポレイテッド マルチレイヤビデオコーディングのコンバインドスケーラビリティ処理
US11070810B2 (en) * 2014-03-14 2021-07-20 Qualcomm Incorporated Modifying bit depths in color-space transform coding
US9936199B2 (en) * 2014-09-26 2018-04-03 Dolby Laboratories Licensing Corporation Encoding and decoding perceptually-quantized video content
US9838662B2 (en) * 2014-10-10 2017-12-05 Qualcomm Incorporated Harmonization of cross-component prediction and adaptive color transform in video coding
US10390020B2 (en) * 2015-06-08 2019-08-20 Industrial Technology Research Institute Video encoding methods and systems using adaptive color transform
US20160360205A1 (en) * 2015-06-08 2016-12-08 Industrial Technology Research Institute Video encoding methods and systems using adaptive color transform
JP2018056685A (ja) * 2016-09-27 2018-04-05 株式会社ドワンゴ 画像符号化装置、画像符号化方法、及び画像符号化プログラム、並びに、画像復号装置、画像復号方法、及び画像復号プログラム
CA3055804C (en) 2017-03-10 2022-10-18 Mediatek, Inc. Method and apparatus of implicit intra coding tool settings with intra directional prediction modes for video coding
DE102017204946A1 (de) * 2017-03-23 2018-09-27 Volkswagen Aktiengesellschaft Verfahren zur Bestimmung eines Wertes einer Integer-Skalierung in einer Verknüpfung von Eingangsmengen zu Ausgangsmengen und Computerprogrammprodukt
GB2571313B (en) * 2018-02-23 2022-09-21 Canon Kk New sample sets and new down-sampling schemes for linear component sample prediction
US11146793B2 (en) * 2018-03-27 2021-10-12 Kt Corporation Video signal processing method and device
WO2019229683A1 (en) 2018-05-31 2019-12-05 Beijing Bytedance Network Technology Co., Ltd. Concept of interweaved prediction
CN110719478B (zh) 2018-07-15 2023-02-07 北京字节跳动网络技术有限公司 跨分量帧内预测模式导出
CN110839153B (zh) 2018-08-17 2023-04-07 北京字节跳动网络技术有限公司 一种处理视频数据的方法和装置
WO2020046086A1 (ko) * 2018-09-02 2020-03-05 엘지전자 주식회사 영상 신호를 처리하기 위한 방법 및 장치
WO2020053804A1 (en) 2018-09-12 2020-03-19 Beijing Bytedance Network Technology Co., Ltd. Downsampling in cross-component linear modeling
WO2020058894A1 (en) 2018-09-19 2020-03-26 Beijing Bytedance Network Technology Co., Ltd. Multiple prediction blocks for one intra-coded block
KR20210091304A (ko) * 2018-11-21 2021-07-21 인터디지털 브이씨 홀딩스 인코포레이티드 화상 인코딩 및 디코딩을 위한 방법 및 디바이스
CN113597760A (zh) 2019-01-02 2021-11-02 北京字节跳动网络技术有限公司 视频处理的方法
CN117793346A (zh) 2019-01-31 2024-03-29 北京字节跳动网络技术有限公司 视频编解码中的细化量化步骤
CN113545056A (zh) * 2019-02-28 2021-10-22 交互数字Vc控股公司 用于图片编码和解码的方法及设备
CA3132744A1 (en) * 2019-03-15 2020-09-24 Mediatek, Inc. Method and apparatus of latency reduction for chroma residue scaling
CN113711604B (zh) 2019-04-20 2023-10-27 北京字节跳动网络技术有限公司 视频编解码中色度和亮度语法元素的信令
CN117692630A (zh) 2019-05-11 2024-03-12 北京字节跳动网络技术有限公司 视频处理中编解码工具的选择性使用
CN115567707A (zh) 2019-05-30 2023-01-03 抖音视界有限公司 色度分量的自适应环路滤波
JP7446339B2 (ja) 2019-06-04 2024-03-08 北京字節跳動網絡技術有限公司 幾何学的分割モードコーディングを用いた動き候補リスト
WO2020244571A1 (en) 2019-06-04 2020-12-10 Beijing Bytedance Network Technology Co., Ltd. Motion candidate list construction using neighboring block information
EP3987793A4 (en) * 2019-06-21 2023-07-19 Beijing Dajia Internet Information Technology Co., Ltd. PREDICTION DEPENDENT RESIDUAL SCALING METHODS AND DEVICES FOR VIDEO CODING
CN117354547A (zh) 2019-07-14 2024-01-05 北京字节跳动网络技术有限公司 自适应参数集中的自适应环路滤波的指示
KR20220038060A (ko) 2019-07-27 2022-03-25 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 참조 픽처 유형들에 따른 툴들의 사용의 제한들
CN114342398A (zh) 2019-08-20 2022-04-12 北京字节跳动网络技术有限公司 默认缩放矩阵和用户定义缩放矩阵的使用
WO2021052495A1 (en) * 2019-09-20 2021-03-25 Beijing Bytedance Network Technology Co., Ltd. Adaptive resolution change and scalable coding for screen contents
CN114567786B (zh) * 2019-09-23 2023-08-29 北京达佳互联信息技术有限公司 以4:4:4色度格式进行视频编解码的方法和装置
CN114450959A (zh) 2019-09-28 2022-05-06 北京字节跳动网络技术有限公司 视频编解码中的几何分割模式
KR20220073752A (ko) 2019-10-12 2022-06-03 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 비디오 코딩 툴들을 위한 상위 레벨 신택스
CN115244924A (zh) 2019-10-29 2022-10-25 抖音视界有限公司 跨分量自适应环路滤波器的信令通知
WO2021119337A1 (en) * 2019-12-10 2021-06-17 Beijing Dajia Internet Information Technology Co., Ltd. Methods and apparatus of video coding in 4:4:4 chroma format
KR102619404B1 (ko) 2019-12-11 2023-12-28 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 크로스 컴포넌트 적응적 루프 필터링을 위한 샘플 패딩
KR20230098378A9 (ko) * 2020-01-05 2024-03-25 베이징 다지아 인터넷 인포메이션 테크놀로지 컴퍼니 리미티드 4:4:4 크로마 포맷에서의 비디오 코딩의 방법들 및 장치
US20230103632A1 (en) * 2020-01-25 2023-04-06 Lg Electronics Inc. Act residual-based image or video coding
WO2021150085A1 (ko) * 2020-01-25 2021-07-29 엘지전자 주식회사 색상 공간 변환을 사용하는 레지듀얼을 위한 영상 또는 비디오 코딩
WO2021150084A1 (ko) * 2020-01-25 2021-07-29 엘지전자 주식회사 색상 공간 변환 기반 영상 또는 비디오 코딩
US11146806B2 (en) * 2020-03-11 2021-10-12 Tencent America LLC Coding unit level transform size restriction for adaptive color transform
KR20230029670A (ko) 2020-06-30 2023-03-03 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 적응적 루프 필터링을 위한 경계 위치
US11877011B2 (en) 2020-09-17 2024-01-16 Lemon Inc. Picture dimension indication in decoder configuration record
US11651551B2 (en) * 2020-10-06 2023-05-16 Qualcomm Incorporated Coding of component of color attributes in geometry-based point cloud compression (G-PCC)
US11645812B2 (en) * 2020-10-06 2023-05-09 Qualcomm Incorporated Inter-component residual prediction for color attributes in geometry point cloud compression coding

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100312811A1 (en) * 2009-06-05 2010-12-09 Qualcomm Incorporated 4x4 transform for media coding
US20120177108A1 (en) * 2011-01-10 2012-07-12 Qualcomm Incorporated 32-point transform for media data coding
CN103098473A (zh) * 2010-09-08 2013-05-08 三星电子株式会社 对帧内预测使用自适应dct/dst的低复杂度变换编码
CN103796033A (zh) * 2014-01-24 2014-05-14 同济大学 一种高效视频编码零系数提前检测方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104025038A (zh) * 2011-12-23 2014-09-03 英特尔公司 用于执行置换操作的装置和方法
JP2014116733A (ja) * 2012-12-07 2014-06-26 Canon Inc 画像符号化装置、画像符号化方法及びプログラム、画像復号装置、画像復号方法及びプログラム
US9648330B2 (en) * 2013-07-15 2017-05-09 Qualcomm Incorporated Inter-color component residual prediction
JP2017501599A (ja) * 2013-10-07 2017-01-12 ヴィド スケール インコーポレイテッド マルチレイヤビデオコーディングのコンバインドスケーラビリティ処理
US11070810B2 (en) 2014-03-14 2021-07-20 Qualcomm Incorporated Modifying bit depths in color-space transform coding
US10200700B2 (en) * 2014-06-20 2019-02-05 Qualcomm Incorporated Cross-component prediction in video coding

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100312811A1 (en) * 2009-06-05 2010-12-09 Qualcomm Incorporated 4x4 transform for media coding
CN103098473A (zh) * 2010-09-08 2013-05-08 三星电子株式会社 对帧内预测使用自适应dct/dst的低复杂度变换编码
US20120177108A1 (en) * 2011-01-10 2012-07-12 Qualcomm Incorporated 32-point transform for media data coding
CN103796033A (zh) * 2014-01-24 2014-05-14 同济大学 一种高效视频编码零系数提前检测方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
LI ZHANG ET AL.: "SCCE5 Test3.2.1:In-Loop Color-space transform", 《JCTVC-R0147》 *
RAJAN JOSHI: "High Efficiency Video Coding (HEVC) Screen Content Coding: Draft 1", 《JCTVC-R1005》 *

Cited By (64)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110999299A (zh) * 2017-08-21 2020-04-10 高通股份有限公司 在视频译码中跨分量动态范围调整(cc-dra)的系统及方法
CN110999299B (zh) * 2017-08-21 2024-04-19 高通股份有限公司 在视频译码中跨分量动态范围调整(cc-dra)的系统及方法
CN111095933B (zh) * 2017-09-15 2022-05-13 索尼公司 图像处理装置和方法
CN111095933A (zh) * 2017-09-15 2020-05-01 索尼公司 图像处理装置和方法
US11695941B2 (en) 2017-09-15 2023-07-04 Sony Group Corporation Image processing device and method
CN111480339B (zh) * 2017-12-19 2022-05-24 高通股份有限公司 用于视频译码的方法和装置、计算机可读存储介质、设备
CN111480339A (zh) * 2017-12-19 2020-07-31 高通股份有限公司 具有联合像素/变换为基础的量化的视频译码的量化参数控制
CN111742554A (zh) * 2018-02-01 2020-10-02 联发科技股份有限公司 具有视频数据自适应量化的视频编码或解码方法和装置
CN111742554B (zh) * 2018-02-01 2021-08-06 联发科技股份有限公司 具有视频数据自适应量化的视频编码或解码方法和装置
CN113056920A (zh) * 2018-11-22 2021-06-29 北京字节跳动网络技术有限公司 基于子块的帧间预测的协调方法
CN113056920B (zh) * 2018-11-22 2024-05-24 北京字节跳动网络技术有限公司 基于子块的帧间预测的协调方法
US11805268B2 (en) 2018-12-22 2023-10-31 Beijing Bytedance Network Technology Co., Ltd Two step cross-component prediction mode
US11570458B2 (en) 2018-12-22 2023-01-31 Beijing Bytedance Network Technology Co., Ltd. Indication of two-step cross-component prediction mode
WO2020125795A1 (en) * 2018-12-22 2020-06-25 Beijing Bytedance Network Technology Co., Ltd. Indication of two step cross-component prediction mode
CN113545064B (zh) * 2019-03-04 2024-05-10 阿里巴巴集团控股有限公司 用于处理视频内容的方法和装置及计算机可读存储介质
CN113545064A (zh) * 2019-03-04 2021-10-22 阿里巴巴集团控股有限公司 用于处理视频内容的方法和系统
US11910020B2 (en) 2019-03-08 2024-02-20 Beijing Bytedance Network Technology Co., Ltd Signaling of reshaping information in video processing
US20210321140A1 (en) 2019-03-08 2021-10-14 Beijing Bytedance Network Technology Co., Ltd. Signaling of reshaping information in video processing
CN113678450A (zh) * 2019-03-12 2021-11-19 弗劳恩霍夫应用研究促进协会 用于图像和视频编码的选择性分量间变换(ict)
CN113784128A (zh) * 2019-03-25 2021-12-10 Oppo广东移动通信有限公司 图像预测方法、编码器、解码器以及存储介质
WO2020192085A1 (zh) * 2019-03-25 2020-10-01 Oppo广东移动通信有限公司 图像预测方法、编码器、解码器以及存储介质
US11553194B2 (en) 2019-04-18 2023-01-10 Beijing Bytedance Network Technology Co., Ltd. Parameter derivation in cross component mode
US11616965B2 (en) 2019-04-18 2023-03-28 Beijing Bytedance Network Technology Co., Ltd. Restriction on applicability of cross component mode
WO2020211868A1 (en) * 2019-04-18 2020-10-22 Beijing Bytedance Network Technology Co., Ltd. Reduction of latency in cross component mode
US11463714B2 (en) 2019-04-18 2022-10-04 Beijing Bytedance Network Technology Co., Ltd. Selective use of cross component mode in video coding
CN113692741A (zh) * 2019-04-18 2021-11-23 北京字节跳动网络技术有限公司 跨分量模式中的参数推导
US11750799B2 (en) 2019-04-23 2023-09-05 Beijing Bytedance Network Technology Co., Ltd Methods for cross component dependency reduction
US11659164B1 (en) 2019-04-23 2023-05-23 Beijing Bytedance Network Technology Co., Ltd. Methods for cross component dependency reduction
US12034942B2 (en) 2019-05-08 2024-07-09 Beijing Bytedance Network Technology Co., Ltd. Conditions for applicability of cross-component coding
US11463713B2 (en) 2019-05-08 2022-10-04 Beijing Bytedance Network Technology Co., Ltd. Conditions for applicability of cross-component coding
US11924469B2 (en) 2019-06-07 2024-03-05 Beijing Bytedance Network Technology Co., Ltd. Conditional signaling of reduced secondary transform in video bitstreams
CN114009050A (zh) * 2019-06-21 2022-02-01 北京字节跳动网络技术有限公司 视频编解码的自适应环内颜色空间变换
US11778233B2 (en) 2019-06-21 2023-10-03 Beijing Bytedance Network Technology Co., Ltd Selective use of adaptive in-loop color-space transform and other video coding tools
CN114009050B (zh) * 2019-06-21 2023-12-22 北京字节跳动网络技术有限公司 视频编解码的自适应环内颜色空间变换
US11539981B2 (en) 2019-06-21 2022-12-27 Beijing Bytedance Network Technology Co., Ltd. Adaptive in-loop color-space transform for video coding
US11924472B2 (en) 2019-06-22 2024-03-05 Beijing Bytedance Network Technology Co., Ltd. Syntax element for chroma residual scaling
US11533487B2 (en) 2019-07-07 2022-12-20 Beijing Bytedance Network Technology Co., Ltd. Signaling of chroma residual scaling
CN114128280A (zh) * 2019-07-07 2022-03-01 北京字节跳动网络技术有限公司 色度残差缩放的信令通知
CN114128280B (zh) * 2019-07-07 2023-11-14 北京字节跳动网络技术有限公司 色度残差缩放的信令通知
US11956439B2 (en) 2019-07-07 2024-04-09 Beijing Bytedance Network Technology Co., Ltd. Signaling of chroma residual scaling
US11882274B2 (en) 2019-08-03 2024-01-23 Beijing Bytedance Network Technology Co., Ltd Position based mode derivation in reduced secondary transforms for video
CN114208190A (zh) * 2019-08-03 2022-03-18 北京字节跳动网络技术有限公司 视频编解码中缩减二次变换的矩阵的选择
CN114208190B (zh) * 2019-08-03 2023-12-15 北京字节跳动网络技术有限公司 视频编解码中缩减二次变换的矩阵的选择
US11985329B2 (en) 2019-09-14 2024-05-14 Bytedance Inc. Quantization parameter offset for chroma deblocking filtering
US11973959B2 (en) 2019-09-14 2024-04-30 Bytedance Inc. Quantization parameter for chroma deblocking filtering
CN114586370A (zh) * 2019-10-14 2022-06-03 字节跳动有限公司 在视频编解码中使用色度量化参数
CN114586370B (zh) * 2019-10-14 2024-01-23 字节跳动有限公司 在视频编解码中使用色度量化参数的方法、装置及介质
WO2021088951A1 (en) * 2019-11-07 2021-05-14 Beijing Bytedance Network Technology Co., Ltd. Quantization properties of adaptive in-loop color-space transform for video coding
US11671591B2 (en) 2019-11-07 2023-06-06 Beijing Bytedance Network Technology Co., Ltd Quantization properties of adaptive in-loop color-space transform for video coding
CN116405698B (zh) * 2019-12-05 2023-11-24 阿里巴巴(中国)有限公司 用于色度采样的方法和装置
CN116405698A (zh) * 2019-12-05 2023-07-07 阿里巴巴(中国)有限公司 用于色度采样的方法和装置
US11863715B2 (en) 2019-12-19 2024-01-02 Beijing Bytedance Network Technology Co., Ltd Joint use of adaptive colour transform and differential coding of video
WO2021121419A1 (en) * 2019-12-19 2021-06-24 Beijing Bytedance Network Technology Co., Ltd. Interaction between adaptive color transform and quantization parameters
WO2021121418A1 (en) * 2019-12-19 2021-06-24 Beijing Bytedance Network Technology Co., Ltd. Joint use of adaptive colour transform and differential coding of video
CN114731438A (zh) * 2019-12-27 2022-07-08 富士通株式会社 自适应颜色变换的编解码方法、装置以及视频编解码设备
CN114846807A (zh) * 2019-12-30 2022-08-02 北京达佳互联信息技术有限公司 色度残差的编解码
US11838523B2 (en) 2020-01-05 2023-12-05 Beijing Bytedance Network Technology Co., Ltd. General constraints information for video coding
US11943439B2 (en) 2020-01-18 2024-03-26 Beijing Bytedance Network Technology Co., Ltd. Adaptive colour transform in image/video coding
CN113395524A (zh) * 2020-03-11 2021-09-14 腾讯美国有限责任公司 视频解码方法、装置和电子设备
CN113395524B (zh) * 2020-03-11 2023-04-28 腾讯美国有限责任公司 视频解码方法、装置和电子设备
CN114731447A (zh) * 2020-04-16 2022-07-08 腾讯美国有限责任公司 用于视频编解码的方法和设备
CN116614625B (zh) * 2020-06-12 2024-03-26 北京达佳互联信息技术有限公司 一种视频编码的方法、装置和介质
CN116614625A (zh) * 2020-06-12 2023-08-18 北京达佳互联信息技术有限公司 一种视频编码的方法、装置和介质
CN116614625B9 (zh) * 2020-06-12 2024-07-12 北京达佳互联信息技术有限公司 一种视频编码的方法、装置和介质

Also Published As

Publication number Publication date
WO2016040865A1 (en) 2016-03-17
RU2017112309A (ru) 2018-10-12
RU2017112309A3 (zh) 2018-10-12
TWI722996B (zh) 2021-04-01
CN107079157B (zh) 2020-12-22
JP6709823B2 (ja) 2020-06-17
JP2018160911A (ja) 2018-10-11
KR102051193B1 (ko) 2019-12-02
JP2017531382A (ja) 2017-10-19
JP2020129845A (ja) 2020-08-27
EP3544298A1 (en) 2019-09-25
KR20170056626A (ko) 2017-05-23
US10469847B2 (en) 2019-11-05
TW201613352A (en) 2016-04-01
EP3192261A1 (en) 2017-07-19
BR112017004886A2 (pt) 2017-12-05
US20160080751A1 (en) 2016-03-17

Similar Documents

Publication Publication Date Title
CN107079157A (zh) 用于视频编码的分量间去相关
JP7485645B2 (ja) Rgbビデオコーディングエンハンスメントのためのシステムおよび方法
JP7433019B2 (ja) ビデオコーディングにおけるクロマ信号強調のためのクロスプレーンフィルタリング
CN107836116A (zh) 使用交叉平面滤波的增强色度编码
TW201943276A (zh) 基於編碼及解碼潛時減少之基於模板相互預測技術
KR102612975B1 (ko) 광류를 사용한 인터 예측 개선을 위한 시스템, 장치 및 방법
CN106664410A (zh) 用于基于三维色彩映射模型参数优化的系统和方法
CN105900432A (zh) 用于屏幕内容编码的二维调色板编码
CN107211147A (zh) 用于非4:4:4屏幕内容视频的调色板编码
CN104067621A (zh) 使用偶数-奇数整数变换后台的视频和数据处理
CN105765979A (zh) 用于可缩放视频编码的层间预测
CN105830448A (zh) 用于视频传输系统的错误隐藏模式信令
RU2811563C2 (ru) Системы, устройства и способы для уточнения интерпрогнозирования с помощью оптического потока

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant