CN106464881A - 块自适应颜色空间转换译码 - Google Patents

块自适应颜色空间转换译码 Download PDF

Info

Publication number
CN106464881A
CN106464881A CN201580029269.5A CN201580029269A CN106464881A CN 106464881 A CN106464881 A CN 106464881A CN 201580029269 A CN201580029269 A CN 201580029269A CN 106464881 A CN106464881 A CN 106464881A
Authority
CN
China
Prior art keywords
color component
color
value
skew
equal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580029269.5A
Other languages
English (en)
Other versions
CN106464881B (zh
Inventor
张莉
陈建乐
霍埃尔·索赖·罗哈斯
马尔塔·卡切维奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN106464881A publication Critical patent/CN106464881A/zh
Application granted granted Critical
Publication of CN106464881B publication Critical patent/CN106464881B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/44Decoders specially adapted therefor, e.g. video decoders which are asymmetric with respect to the encoder
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/117Filters, e.g. for pre-processing or post-processing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124Quantisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/157Assigned coding mode, i.e. the coding mode being predefined or preselected to be further used for selection of another element or parameter
    • H04N19/159Prediction type, e.g. intra-frame, inter-frame or bidirectional frame prediction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/513Processing of motion vectors
    • H04N19/517Processing of motion vectors by encoding
    • H04N19/52Processing of motion vectors by encoding by predictive encoding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/573Motion compensation with multiple frame prediction using two or more reference frames in a given prediction direction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51Motion estimation or motion compensation
    • H04N19/577Motion compensation with bidirectional frame interpolation, i.e. using B-pictures
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/593Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving spatial prediction techniques
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/60Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding
    • H04N19/61Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using transform coding in combination with predictive coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/80Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation
    • H04N19/82Details of filtering operations specially adapted for video compression, e.g. for pixel interpolation involving filtering within a prediction loop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/86Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/91Entropy coding, e.g. variable length coding [VLC] or arithmetic coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Color Television Systems (AREA)

Abstract

视频译码器解码视频数据的译码单元CU。在解码所述视频数据时,所述视频译码器确定所述CU是使用颜色空间转换编码。所述视频译码器确定初始量化参数QP,确定等于所述初始QP与QP偏移的和的最终QP,及基于所述最终QP反量化系数块,随后基于所述经反量化系数块重建所述CU。

Description

块自适应颜色空间转换译码
本申请案主张2014年6月4日申请的美国临时申请案第62/007,860号的权益,所述申请案的全部内容以引用的方式并入本文中。
技术领域
本发明涉及视频编码及解码。
背景技术
数字视频能力可并入到广泛范围的装置中,包含数字电视、数字直播系统、无线广播系统、个人数字助理(PDA)、膝上型或桌上型计算机、平板计算机、电子书阅读器、数字摄像机、数字记录装置、数字媒体播放器、视频游戏装置、视频游戏控制台、蜂窝式或卫星无线电电话、所谓的“智能电话”、视频电话会议装置、视频流装置及其类似者。数字视频装置实施视频译码技术,例如在由MPEG-2、MPEG-4、ITU-T H.263、ITU-TH.264/MPEG-4部分10高级视频译码(AVC)所定义的标准、目前正在发展的高效视频译码(HEVC)标准及此些标准的扩展中所描述的那些视频译码技术。视频装置可通过实施此些视频译码技术来更有效率地传输、接收、编码、解码及/或存储数字视频信息。
视频译码技术包含空间(图像内)预测及/或时间(图像间)预测以减少或移除视频序列中固有的冗余。对于基于块的视频译码,可将视频图块(例如,视频帧或视频帧的部分)分割成视频块(其还可被称作树型块)、译码单元(CU)及/或译码节点。使用关于同一图像中的邻近块中的参考样本的空间预测来编码图像的图像内译码(I)的图块中的视频块。图像的图像间译码(P或B)图块中的视频块可使用关于同一图像中的邻近块中的参考样本的空间预测或关于其它参考图像中的参考样本的时间预测。图像可被称作帧,且参考图像可被称作参考帧。
空间或时间预测导致待译码的块的预测性块。残余数据表示待译码的原始块与预测性块之间的像素差。根据指向形成预测性块的参考样本的块的运动矢量及指示经译码块与预测性块之间的差异的残余数据来编码图像间译码块。根据图像内译码模式及残余数据来编码图像内译码块。为进行进一步压缩,可将残余数据从像素域变换到变换域,从而产生残余变换系数,随后可量化残余变换系数。可扫描最初布置成二维数组的经量化变换系数以便产生变换系数的一维矢量,且可应用熵译码以达成甚至较多压缩。
发明内容
一般来说,本发明描述用于使用颜色空间转换工艺来译码视频块的技术。视频编码器编码视频数据的译码单元(CU)。在编码视频数据时,视频编码器确定是否使用颜色空间转换来编码CU。对于颜色分量,视频编码器确定颜色分量的初始量化参数(QP),基于所述CU是使用颜色空间转换编码设置颜色分量的最终QP以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和,且基于颜色分量的最终QP量化CU的系数块,CU的系数块是基于颜色分量的样本值。视频编码器进一步输出包括表示经量化系数块中的每一者的一或多个经熵编码语法元素的视频数据位流。视频解码器解码视频数据的CU。在解码视频数据时,视频解码器确定所述CU是使用颜色空间转换编码。对于颜色分量,视频解码器确定颜色分量的初始QP,确定最终QP,且基于颜色分量的最终QP反量化CU的系数块,CU的系数块是基于颜色分量的样本值。视频解码器基于CU的经反量化系数块重建CU。
在一个实例中,本发明是针对一种解码视频数据的方法,所述方法包括:确定视频数据的译码单元(CU)是使用颜色空间转换编码;确定颜色分量的初始量化参数(QP);基于所述CU是使用颜色空间转换编码,确定颜色分量的最终QP以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和;及基于颜色分量的最终QP反量化CU的系数块,CU的系数块是基于颜色分量的样本值;及基于CU的经反量化系数块重建译码单元。
在另一实例中,本发明是针对一种用于解码视频数据的装置,所述装置包括:存储器,其经配置以存储视频数据;及一或多个处理器,其经配置以:确定视频数据的译码单元(CU)是使用颜色空间转换编码;确定颜色分量的初始量化参数(QP);基于所述CU是使用颜色空间转换编码,确定颜色分量的最终QP以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和;及基于颜色分量的最终QP反量化CU的系数块,CU的系数块是基于颜色分量的样本值;及基于CU的经反量化系数块重建译码单元。
在另一实例中,本发明是针对一种用于解码视频数据的装置,所述装置包括:用于确定视频数据的译码单元(CU)是使用颜色空间转换编码的装置;用于确定颜色分量的初始量化参数(QP)的装置;基于所述CU是使用颜色空间转换编码,用于确定颜色分量的最终QP以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和的装置;及用于基于颜色分量的最终QP反量化CU的系数块的装置,CU的系数块是基于颜色分量的样本值;及用于基于CU的经反量化系数块重建译码单元的装置。
在另一实例中,本发明是针对一种使用指令编码的计算机可读存储媒体,当经执行时,所述指令使一或多个处理器:确定视频数据的译码单元(CU)是使用颜色空间转换编码;确定颜色分量的初始量化参数(QP);基于所述CU是使用颜色空间转换编码,确定颜色分量的最终QP以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和;及基于颜色分量的最终QP反量化CU的系数块,CU的系数块是基于颜色分量的样本值;及基于CU的经反量化系数块重建译码单元。
在另一实例中,本发明是针对一种用于编码视频数据的方法,所述方法包括:确定视频数据的译码单元(CU)是使用颜色空间转换编码;确定颜色分量的初始量化参数(QP);基于所述CU是使用颜色空间转换编码,设置颜色分量的最终QP以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和;及基于颜色分量的最终QP量化CU的系数块,CU的系数块是基于颜色分量的样本值;及输出包括表示经量化系数块中的每一者的一或多个经熵编码语法元素的视频数据位流。
在另一实例中,本发明是针对一种用于编码视频数据的装置,所述装置包括:存储器,其经配置以存储视频数据;及一或多个处理器,其经配置以:确定视频数据的译码单元(CU)是使用颜色空间转换编码;确定颜色分量的初始量化参数(QP);基于所述CU是使用颜色空间转换编码,设置颜色分量的最终QP以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和;及基于颜色分量的最终QP量化CU的系数块,CU的系数块是基于颜色分量的样本值;及输出包括表示经量化系数块中的每一者的一或多个经熵编码语法元素的视频数据位流。
在另一实例中,本发明是针对一种用于编码视频数据的装置,所述装置包括:用于确定视频数据的译码单元(CU)是使用颜色空间转换编码的装置;用于确定颜色分量的初始量化参数(QP)的装置;基于所述CU是使用颜色空间转换编码,用于设置颜色分量的最终QP以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和的装置;及用于基于颜色分量的最终QP量化CU的系数块的装置,CU的系数块是基于颜色分量的样本值;及用于输出包括表示经量化系数块中的每一者的一或多个经熵编码语法元素的视频数据位流的装置。
在另一实例中,本发明是针对一种使用指令编码的计算机可读存储媒体,当经执行时,所述指令使一或多个处理器:确定视频数据的译码单元(CU)是使用颜色空间转换编码;确定颜色分量的初始量化参数(QP);基于所述CU是使用颜色空间转换编码,设置颜色分量的最终QP以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和;及基于颜色分量的最终QP量化CU的系数块,CU的系数块是基于颜色分量的样本值;及输出包括表示经量化系数块中的每一者的一或多个经熵编码语法元素的视频数据位流。
在随附图式及以下描述中阐述本发明的一或多个实例的细节。本发明的其它特征、目标及优势将从描述、图式及权利要求书显而易见。
附图说明
图1为说明可利用本发明中所描述的技术的实例视频编码及解码系统的框图。
图2为说明高效视频译码(HEVC)帧内预测模式的概念图。
图3A及图3B为说明根据本发明的一或多种技术的用于合并及高级运动矢量预测(AMVP)模式的空间相邻运动矢量候选的概念图。
图4为说明根据本发明的一或多种技术的图像内块拷贝(BC)实例的概念图。
图5为说明根据本发明的一或多种技术的目标块及用于图像内8×8块的参考样本的实例的概念图。
图6为说明可实施本发明中所描述的技术的实例视频编码器的框图。
图7为说明可实施本发明中所描述的技术的实例视频解码器的框图。
图8为说明根据本发明的一或多种技术的编码技术的流程图。
图9为说明根据本发明的一或多种技术的解码技术的流程图。
图10为说明根据本发明的一或多种技术的编码技术的流程图。
图11为说明根据本发明的一或多种技术的解码技术的流程图。
具体实施方式
本发明描述视频译码技术,包含与屏幕内容译码(SCC)及范围扩展(RCEx)相关的技术。SCC及范围扩展包含可能较高位深度(超过8位)或高色度采样格式的支持。更具体来说,在本发明中,提出当使用颜色空间转换时与确定量化参数(QP)相关的技术。
根据本发明的技术,视频译码器使用颜色分量的最终QP来量化颜色分量的残余数据的块。视频译码器使用颜色分量的delta QP来导出颜色分量的最终QP。在具有3个颜色分量的实例中,3个颜色分量的delta QP可指示为deltaQPC0、deltaQPC1及deltaQPC2。在以上实例中,deltaQPC0可等于deltaQPC1,两者均小于deltaQPC2。举例来说,deltaQPC0及deltaQPC1可各自等于-5且deltaQPC2可等于-3。在其它情况下,当未使用颜色空间转换译码CU时,视频译码器可在不将任何偏移添加到确定的量化参数(即,经初始化/初步量化参数)的情况下解码CU。
如果视频译码器使用环路内颜色空间变换来译码残余数据的块,那么对于每一颜色分量,视频译码器可将delta QP添加到颜色分量的初步QP。颜色分量的初步QP可指示为Qp'y、Qp'cb及Qp'cr。视频译码器可使用常规QP导出过程导出颜色分量的初步QP。如果视频译码器未使用环路内颜色空间变换来译码特定颜色分量的残余数据的块,那么视频译码器不将特定颜色分量的delta QP添加到特定颜色分量的初步QP。
一般来说,本发明描述用于使用颜色空间转换过程译码视频块以译码视频数据的技术。本文所述的技术可改进环路内颜色空间变换的译码性能且可降低解码器复杂度。视频编码器编码视频数据的译码单元(CU)。在编码视频数据时,视频编码器确定是否使用颜色空间转换编码CU。视频编码器可确定颜色分量的初始QP,且可基于所述CU是使用颜色空间转换编码来设置颜色分量的最终QP以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和。视频编码器可基于颜色分量的最终QP来量化CU的系数块,CU的系数块是基于颜色分量的样本值。一旦每一系数已经量化,视频编码器即进一步基于经编码位流中的CU的经量化系数块来输出CU。
此外,根据本发明的技术,视频解码器解码视频数据的CU。在解码视频数据时,视频解码器确定所述CU是使用颜色空间转换编码。对于多个颜色分量中的颜色分量,视频解码器可确定颜色分量的初始QP且确定最终QP。视频解码器可基于颜色分量的最终QP来反量化CU的系数块,CU的系数块是基于颜色分量的样本值。一旦每一系数块已经反量化,视频解码器即基于CU的经反量化系数块重建CU。
图1为说明可利用用于屏幕内容译码的技术的实例视频编码及解码系统10的框图。如图1中所展示,系统10包含源装置12,其提供待在稍后时间由目的地装置14解码的经编码视频数据。特定来说,源装置12经由计算机可读媒体16将视频数据提供到目的地装置14。源装置12及目的地装置14可包括广泛范围的装置中的任一者,包含桌上型计算机、笔记型(即,膝上型)计算机、平板计算机、机顶盒、例如所谓的“智能型”电话的电话手机、所谓的“智能型板”、电视、摄像机、显示装置、数字媒体播放器、视频游戏控制台、视频流装置或类似者。在一些情况下,源装置12及目的地装置14可经装备以进行无线通信。
目的地装置14可经由计算机可读媒体16接收待解码的经编码视频数据。计算机可读媒体16可包括能够将经编码视频数据从源装置12移动到目的地装置14的任一类型的媒体或装置。在一个实例中,计算机可读媒体16可包括通信媒体以使源装置12能够实时地将经编码视频数据直接传输到目的地装置14。可根据通信标准(例如,无线通信协议)调制经编码视频数据,且将经编码视频数据传输到目的地装置14。通信媒体可包括任何无线或有线通信媒体,例如射频(RF)频谱或一或多个物理传输线。通信媒体可形成基于数据包的网络(例如局域网、广域网或例如因特网的全球网络)的部分。通信媒体可包含路由器、交换器、基站或可用于促进从源装置12到目的地装置14的通信的任何其它设备。
在一些实例中,源装置12可将经编码数据输出到存储装置。类似地,输入接口可存取来自存储装置的经编码数据。存储装置可包含多种分布式或本地存取式数据存储媒体中的任一者,例如硬盘驱动器、蓝光光盘、DVD、CD-ROM、快闪存储器、易失性或非易失性存储器或用于存储经编码视频数据的任何其它合适的数字存储媒体。在再一实例中,存储装置可对应于文件服务器或可存储由源装置12产生的经编码视频的另一中间存储装置。目的地装置14可经由流或下载存取来自存储装置的所存储视频数据。文件服务器可为能够存储经编码视频数据且将所述经编码视频数据传输到目的地装置14的任何类型的服务器。实例文件服务器包含网页服务器(例如,用于网站)、FTP服务器、网络附接存储(NAS)装置或本地磁盘驱动器。目的地装置14可经由任何标准数据连接(包含因特网连接)而存取经编码视频数据。此数据连接可包含适合于存取存储于文件服务器上的经编码视频数据的无线频道(例如,Wi-Fi连接)、有线连接(例如,DSL、电缆调制解调器等),或两者的组合。经编码视频数据从存储装置的传输可为流传输、下载传输或其组合。
本发明的技术不必限于无线应用或设置。所述技术可应用于支持多种多媒体应用中的任一者的视频译码,例如空中电视广播、有线电视传输、卫星电视传输、因特网流视频传输(例如,经由HTTP的动态自适应流(DASH))、经编码到数据存储媒体上的数字视频、存储在数据存储媒体上的数字视频的解码或其它应用。在一些实例中,系统10可经配置以支持单向或双向视频传输以支持例如视频流、视频播放、视频广播及/或视频电话的应用。
在图1的实例中,源装置12包含视频源18、视频编码器20及输出接口22。目的地装置14包含输入接口28、视频解码器30及显示装置32。根据本发明,源装置12的视频编码器20可经配置以应用用于使用颜色空间转换过程编码视频块的技术。在其它实例中,源装置及目的地装置可包含其它组件或布置。举例来说,源装置12可从外部视频源18(例如,外部摄像机)接收视频数据。同样地,目的地装置14可与外部显示装置介接,而非包含集成式显示装置。
图1的所说明系统10仅为一个实例。可通过任何数字视频编码及/或解码装置来执行用于使用颜色空间转换过程译码视频块的技术。尽管本发明的技术一般由视频编码装置执行,但所述技术还可由视频编码器/解码器(通常被称作“编解码器(CODEC)”)执行。源装置12及目的地装置14仅为源装置12产生经译码视频数据用于传输到目的地装置14的此些译码装置的实例。在一些实例中,装置12、14可以基本上对称的方式操作,使得装置12、14中的每一者包含视频编码及解码组件。因此,系统10可支持视频装置12、14之间的单向或双向视频传播以(例如)用于视频流、视频播放、视频广播或视频电话。
源装置12的视频源18可包含视频俘获装置,例如视频摄像机、含有先前俘获的视频的视频存档及/或用以从视频内容提供商接收视频的视频馈送接口。作为再一替代例,视频源18可产生基于计算机图形的数据,作为源视频,或实况视频、存档视频及计算机产生的视频的组合。在一些情况下,如果视频源18为视频摄像机,那么源装置12及目的地装置14可形成所谓的摄像机电话或视频电话。然而,如上文所提及,本发明所描述的技术一般可适用于视频译码,且可适用于无线及/或有线应用。在每一情况下,俘获、预先俘获或计算机产生的视频可由视频编码器20编码。经编码视频信息可接着由输出接口22输出到计算机可读媒体16上。
计算机可读媒体16可包含瞬时媒体,例如无线广播或有线网络传输,或存储媒体(即,非暂时性存储媒体),例如硬盘、快闪驱动器、光盘、数字视频光盘、Blu-ray光盘或其它计算机可读媒体。在一些实例中,网络服务器(未展示)可从源装置12接收经编码视频数据,且(例如)经由网络传输将经编码视频数据提供到目的地装置14。类似地,媒体生产设施(例如,光盘冲压设施)的计算装置可从源装置12接收经编码视频数据且生产含有经编码视频数据的光盘。因此,在各种实例中,可理解计算机可读媒体16包含各种形式的一或多个计算机可读媒体。
目的地装置14的输入接口28从计算机可读媒体16接收信息。计算机可读媒体16的信息可包含由视频编码器20定义的语法信息,其亦由视频解码器30使用,其包含描述块及其它经译码单元(例如,图像组(GOP))的特性及/或处理的语法元素。显示装置32将经解码视频数据显示给用户,且可包括多种显示装置中的任一者,例如阴极射线管(CRT)、液晶显示器(LCD)、等离子显示器、有机发光二极管(OLED)显示器或另一类型的显示装置。
视频编码器20及视频解码器30各自可实施为多种合适编码器电路中的任一者,例如一或多个微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、场可编程门阵列(FPGA)、离散逻辑、软件、硬件、固件或其任何组合。当所述技术部分地在软件中实施时,装置可将用于软件的指令存储于合适的非暂时性计算机可读媒体中,且在硬件中使用一或多个处理器来执行所述指令以执行本发明的技术。视频编码器20及视频解码器30中的每一者可包含在一或多个编码器或解码器中,编码器或解码器中的任一者可整合为装置中的组合式编码器/解码器(编解码器(CODEC))的部分。包含视频编码器20及/或视频解码器30的装置可包括集成电路、微处理器及/或无线通信装置(例如蜂窝式电话)。
视频译码标准包含ITU-T H.261、ISO/IEC MPEG-1Visual、ITU-T H.262或ISO/IECMPEG-2Visual、ITU-T H.263、ISO/IEC MPEG-4Visual及ITU-T H.264(也称为ISO/IECMPEG-4AVC),包含其可调式视频译码(SVC)及多视图视频译码(MVC)扩展。已由ITU-T视频译码专家组(VCEG)及ISO/IEC动画专家组(MPEG)的视频译码联合协作小组(JCT-VC)完成新的视频译码标准(即,高效率视频译码(HEVC))的设计。视频编码器20及视频解码器30可根据例如HEVC的视频译码标准来操作,且可符合HEVC测试模型(HM)。替代地,视频编码器20及视频解码器30可根据其它专属或行业标准(例如ITU-TH.264标准,替代地被称作MPEG-4,第10部分,高级视频译码(AVC))或此些标准的扩展而操作。然而,本发明的技术不限于任何特定译码标准。视频译码标准的其它实例包含MPEG-2及ITU-T H.263。
ITU-T H.264/MPEG-4(AVC)标准由ITU-T视频译码专家组(VCEG)连同ISO/IEC运动图像专家组(MPEG)一起制定为被称为联合视频小组(JVT)的集体合作的产品。在一些方面中,本发明中所描述的技术可适用于大体符合H.264标准的装置。H.264标准由ITU-T研究小组且在日期为2005年3月描述于ITU-T推荐H.264(用于一般视听服务的高级视频译码)中,其在本文中可被称作H.264标准或H.264规格或H.264/AVC标准或规格。联合视频小组(JVT)持续致力于扩展H.264/MPEG-4AVC。
JCT-VC开发了HEVC标准。HEVC标准化努力是基于视频译码装置的演进型模型(被称作HEVC测试模型(HM))。HM根据(例如)ITU-T H.264/AVC假定视频译码装置相对于现存装置的若干额外能力。举例来说,H.264提供九个图像内预测编码模式,而HM可提供多达三十三个图像内预测编码模式。
一般来说,HM的工作模型描述视频帧或图像可分成一连串译码树单元(CTU)。CTU也可被称作树型块或最大译码单元(LCU)。CTU中的每一者可包括明度样本的译码树型块、色度样本的两个对应译码树型块,及用于译码译码树型块的样本的语法结构。在单色图像或具有三个单独彩色平面的图像中,CTU可包括单一译码树型块及用于译码所述译码树型块的样本的语法结构。译码树型块可为样本的N×N块。位流内的语法数据可定义LCU的大小,LCU就像素的数目来说为最大译码单元。
在HEVC中,图块中的最大译码单元被称为译码树型块(CTB)。CTB含有四分树,四分树的节点被称为译码单元(CU)。CTB的大小在HEVC主轮廓中范围可为16×16到64×64,而还可支持更小大小(例如8×8CTB大小)及更大大小。
本发明可使用术语“视频单元”或“视频块”或“块”以指代一或多个样本块及用于译码样本的所述一或多个块的样本的语法结构。视频单元的实例类型可包含CTU、CU、PU、变换单元(TU)、宏块、宏块分区等等。在一些情形中,PU的论述可与宏块或宏块分区的论述互换。
图块包含按译码次序的数个连续树型块。可将视频帧或图像分割成一或多个图块。每一树型块可根据四分树而分裂成译码单元(CU)。一般来说,四分树数据结构每CU包含一个节点,其中根节点对应于树型块。如果将CU分裂成四个子CU,那么对应于所述CU的节点包含四个叶节点,所述四个叶节点中的每一者对应于所述子CU中的一者。
所述四分树数据结构中的每一节点可提供针对对应CU的语法数据。举例来说,所述四分树中的节点可包含分裂旗标,从而指示是否将对应于所述节点的CU分裂成子CU。可递归地定义针对CU的语法元素,且针对CU的语法元素可取决于是否将所述CU分裂成子CU。如果CU未进一步分裂,那么其被称作叶CU。在本发明中,即使不存在原始叶CU的明显分裂,叶CU的四个子CU也将被称作叶CU。举例来说,如果16×16大小的CU未进一步分裂,那么四个8×8子CU也将被称作叶CU,尽管所述16×16CU从未分裂。
CU可与CTB大小相同且可小到8×8。使用一个预测模式译码每一CU。当使用图像间预测模式译码CU时(即,当CU经图像间译码时),CU可进一步分割成两个或多于两个预测单元(PU)。在其它实例中,当进一步分割不适用时,CU可包含仅一个PU。在CU分割成两个PU的实例中,每一PU可为大小等于CU的一半的矩形,或大小为CU的1/4或3/4的两个矩形。在HEVC中,最小PU大小为8×4及4×8。
除CU不具有大小区别外,CU具有与H.264标准的宏块类似的用途。举例来说,可将树型块分裂成四个子节点(也称作子CU),且每一子节点又可为上代节点且可被分裂成另外四个子节点。被称作四分树的叶节点的最终的未分裂子节点包括译码节点,所述译码节点也被称作叶CU。与经译码位流相关联的语法数据可定义可分裂树型块的最大次数(其被称作最大CU深度),且还可定义所述译码节点的最小大小。因此,位流还可定义最小译码单元(SCU)。本发明使用术语“块”来指HEVC的上下文中的CU、PU或TU中的任一者或其它标准的上下文中的类似数据结构(例如,H.264/AVC中的宏块及其子块)。
CU包含译码节点以及与所述译码节点相关联的预测单元(PU)及变换单元(TU)。CU的大小对应于译码节点的大小,且形状必须为正方形。CU的大小可在从8×8像素高达具有最大64×64像素或大于64×64像素的树型块的大小的范围内。每一CU可含有一或多个PU及一或多个TU。与CU相关联的语法数据可描述(例如)CU到一或多个PU的分割。分割模式可在CU经跳过或直接模式编码、图像内预测模式编码还是图像间预测模式编码之间有区别。PU可经分割成非正方形形状。与CU相关联的语法数据还可描述(例如)CU根据四分树到一或多个TU的分割。TU的形状可为正方形或非正方形(例如,矩形)。
HEVC标准允许根据TU进行变换,所述变换对于不同CU可不同。通常基于针对经分割LCU所定义的给定CU内的PU的大小来对TU设置大小,但可能情况并非总是如此。TU通常与PU大小相同或小于PU。在一些实例中,可使用被称为“残余四分树”(RQT)的四分树结构而将对应于CU的残余样本再分为更小的单元。可将RQT的叶节点称作变换单元(TU)。与TU相关联的像素差值可经变换以产生可加以量化的变换系数。
叶CU可包含一或多个预测单元(PU)。一般来说,PU表示对应于对应CU的所有或一部分的空间区域,且可包含用于检索PU的参考样本的数据。此外,PU包含与预测有关的数据。举例来说,当PU经图像内模式编码时,PU的数据可包含于残余四分树(RQT)中,所述RQT可包含描述用于对应于所述PU的TU的图像内预测模式的数据。作为另一实例,当PU经图像间模式编码时,PU可包含定义PU的一或多个运动矢量的数据。定义PU的运动矢量的数据可描述(例如)运动矢量的水平分量、运动矢量的垂直分量、运动矢量的分辨率(例如,四分之一像素精度或八分之一像素精度)、运动矢量所指向的参考图像,及/或运动矢量的参考图像列表(例如,列表0、列表1或列表C)。
作为一实例,HM支持以各种PU大小的预测。假定特定CU的大小为2N×2N,那么HM支持以2N×2N或N×N的PU大小的图像内预测,及以2N×2N、2N×N、N×2N或N×N的对称PU大小的图像间预测。HM还支持以2N×nU、2N×nD、nL×2N及nR×2N的PU大小的图像间预测的不对称分割。在不对称分割中,CU的一方向未分割,而另一方向分割成25%及75%。CU的对应于25%分割的部分由“n”其后接着“上(Up)”、“下(Down)”、“左(Left)”或“右(Right)”的指示来指示。因此,举例来说,“2N×nU”是指水平上以顶部的2N×0.5N PU及底部的2N×1.5N PU分割的2N×2N CU。
在本发明中,“N×N”与“N乘N”可互换地使用以指视频块在垂直维度与水平维度方面的像素尺寸,例如,16×16像素或16乘16像素。大体来说,16×16块在垂直方向上将具有16个像素(y=16)且在水平方向上将具有16个像素(x=16)。同样地,N×N块通常在垂直方向上具有N个像素且在水平方向上具有N个像素,其中N表示非负整数值。可按列及行来排列块中的像素。此外,块未必需要在水平方向上与在垂直方向上具有相同数目个像素。举例来说,块可包括N×M像素,其中M未必等于N。
具有一或多个PU的叶CU还可包含一或多个变换单元(TU)。如上文所论述,可使用RQT(也称作TU四分树结构)来指定所述变换单元。举例来说,分裂旗标可指示叶CU是否分裂成四个变换单元。接着,可将每一变换单元进一步分裂为进一步的子TU。当TU未进一步分裂时,可将其称作叶TU。大体来说,对于图像内译码来说,属于叶CU的所有叶TU共享相同的图像内预测模式。即,一般应用相同图像内预测模式来计算叶CU的所有TU的预测值。对于图像内译码,视频编码器可使用图像内预测模式将每一叶TU的残余值计算为在CU的对应于所述TU的部分与原始块之间的差。TU不必限于PU的大小。因此,TU可大于或小于PU。对于图像内译码,PU可与用于同一CU的对应叶TU共置。在一些实例中,叶TU的最大大小可对应于对应叶CU的大小。
HEVC指定4×4、8×8、16×16及32×32的四个变换单元(TU)大小以译码预测残余。CU可递归地分割成4个或4个以上TU。TU可使用类似于离散余弦变换(DCT)的整数基函数。此外,在一些实例中,可使用从离散正弦变换(DST)导出的整数变换来变换属于经图像内译码区域的4×4明度变换块。色度变换块可使用与明度变换块相同的TU大小。
此外,叶CU的TU还可与四分树数据结构(称作残余四分树(RQT))相关联。即,叶CU可包含指示所述叶CU如何被分割成TU的四分树。TU四分树的根节点大体对应于叶CU,而CU四分树的根节点大体对应于树型块(或LCU)。将RQT的未被分裂的TU称作叶TU。一般来说,除非另有指示,否则本发明分别使用术语CU及TU来指代叶CU及叶TU。
当CU经图像间译码时,可针对每一PU提供运动信息的一个集合。在一些实例中,例如当PU位于B图块中时,可针对每一PU提供运动信息的两个集合。此外,可使用唯一图像间预测模式来译码每一PU以针对每一PU导出运动信息的集合。
视频序列通常包含一系列视频帧或图像。图像组(GOP)大体上包括一系列视频图像中的一或多者。GOP可包含GOP的标头中、图像中的一或多者的标头中或别处的语法数据,所述语法数据描述包含于GOP中的图像的数目。图像的每一图块可包含描述所述图块的编码模式的图块语法数据。视频编码器20通常对个别视频图块内的视频块进行操作,以便编码视频数据。视频块可对应于CU内的译码节点。视频块可具有固定或变化的大小,且可根据指定译码标准而在大小方面不同。
图2为说明HEVC图像内预测模式的概念图250。对于每一PU的明度分量,图像内预测方法采用33种角图像内预测模式(从2到34索引)、DC模式(使用1索引)及平面模式(使用0索引),如关于图2所描述。
除了以上35种图像内预测模式之外,还由HEVC采用被称为图像内脉码调制(I-PCM)的再一个图像内预测模式。在I-PCM模式中,绕过预测、变换、量化及熵译码,而由预定义数目的位来译码预测样本。I-PCM模式的主要目的为处理不能由其它图像内预测模式有效译码信号的情况。
在使用CU的PU的图像内预测性或图像间预测性译码之后,视频编码器20可计算CU的TU的残余数据。PU可包括描述在空间域(也称为像素域)中产生预测性像素数据的方法或模式的语法数据,且TU可包括在对残余视频数据应用变换(例如离散余弦变换(DCT)、整数变换、小波变换或概念上类似的变换)之后变换域中的系数。所述残余数据可对应于未经编码的图像的像素与对应于PU的预测值之间的像素差。视频编码器20可形成包含CU的残余数据的TU,且接着变换所述TU以产生CU的变换系数。
在任何变换以产生变换系数之后,视频编码器20可执行变换系数的量化。量化大体上是指量化变换系数以可能地减少用以表示系数的数据量从而提供进一步压缩的过程。量化过程可减少与系数中的一些或所有相关联的位深度。举例来说,可在量化期间将n位值降值舍位到m位值,其中n大于m。
在量化之后,视频编码器20可扫描变换系数,从而从包含经量化变换系数的二维矩阵产生一维矢量。所述扫描可经设计以将较高能量(且因此较低频率)系数置于数组前部,及将较低能量(且因此较高频率)系数置于数组后部。在一些实例中,视频编码器20可使用预定义扫描次序来扫描经量化变换系数以产生可经熵编码的经串行化矢量。在其它实例中,视频编码器20可执行自适应性扫描。在扫描经量化变换系数以形成一维矢量后,视频编码器20可(例如)根据上下文自适应性可变长度译码(CAVLC)、上下文自适应性二进制算术译码(CABAC)、基于语法的上下文从适应性二进制算术译码(SBAC)、机率区间分割熵(PIPE)译码或另一熵译码技术熵编码表示一维矢量中的变换系数的语法元素。视频编码器20还可熵编码与经编码的视频数据相关联的供由视频解码器30用于解码视频数据的语法元素。
视频编码器20可输出包含形成经译码图像及相关联数据的表示的一连串位的位流。因此,位流包括视频数据的经编码表示。位流可包括一连串网络抽象层(NAL)单元。NAL单元为含有NAL单元中的数据的类型的指示及含有所述数据的呈按需要穿插有仿真阻止位的原始字节序列有效负载(RBSP)的形式的字节的语法结构。NAL单元中的每一者包含NAL单元标头且囊封RBSP。NAL单元标头可包含指示NAL单元类型码的语法元素。由NAL单元的NAL单元标头指定的NAL单元类型码指示NAL单元的类型。RBSP可为含有囊封于NAL单元内的整数数目个字节的语法结构。在一些情况下,RBSP包含零位。
不同类型的NAL单元可囊封不同类型的RBSP。举例来说,不同类型的NAL单元可囊封用于视频参数集(VPS)、序列参数集(SPS)、图像参数集(PPS)、经译码图块、补充增强信息(SEI)等的不同RBSP。囊封视频译码数据的RBSP(相反于参数集及SEI讯息的RBSP)的NAL单元可被称作视频译码层(VCL)NAL单元。在HEVC(即,非多层HEVC)中,存取单元可为解码次序连续且精确地含有一个经译码图像的NAL单元的集合。除经译码图像的经译码图块NAL单元之外,存取单元还可含有不含经译码图像的图块的其它NAL单元。在一些实例中,存取单元的解码总是产生经解码图像。补充增强信息(SEI)含有不必解码来自VCL NAL单元的经译码图像的样本的信息。SEI RBSP含有一或多个SEI讯息。
如上文简要指出,NAL单元可囊封VPS、SPS及PPS的RBSP。VPS为包括适用于零或多个全部经译码视频序列(CVS)的语法元素的语法结构。SPS还为包括适用于零或多个全部CVS的语法元素的语法结构。SPS可包含识别VPS在SPS在作用中时在作用中的语法元素。因此,VPS的语法元素可比SPS的语法元素更一般化地可适用。PPS为包括适用于零或多个经译码图像的语法元素的语法结构。PPS可包含识别SPS在PPS在作用中时在作用中的语法元素。图块的图块标头可包含指示PPS在图块正被译码时在作用中的语法元素。
视频解码器30可接收由视频编码器20产生的位流。此外,视频解码器30可剖析所述位流以从所述位流获得语法元素。视频解码器30可至少部分基于从位流获得的语法元素重建视频数据的图像。重建视频数据的过程可与由视频编码器20执行的过程大体互逆。举例来说,视频解码器30可使用PU的运动矢量确定当前CU的PU的预测性块。此外,视频解码器30可反量化当前CU的TU的系数块。视频解码器30可对系数块执行反变换,以重建当前CU的TU的变换块。通过将当前CU的PU的预测性块的样本添加到当前CU的TU的变换块的对应样本,视频解码器30可重建当前CU的译码块。通过重建图像的每一CU的译码块,视频解码器30可重建图像。
在HEVC标准中,存在两种图像间预测模式。这些图像间预测模式分别为针对预测单元(PU)的合并模式(注意跳过模式被认为是合并模式的特殊情况)及高级运动矢量预测(AMVP)模式。在AMVP模式或合并模式中,可针对多个运动矢量预测因子维持运动矢量(MV)候选列表。可通过从MV候选列表获取一个候选来产生当前PU的运动矢量以及合并模式中的参考索引。
在一些情况下,MV候选列表可含有针对合并模式的多达5个候选及针对AMVP模式的仅两个候选。合并候选可含有运动信息的集合,例如,对应于参考图像列表(例如列表0及列表1)的运动矢量及参考索引。如果由合并索引来识别合并候选,那么参考图像用于当前块的预测,以及确定相关联的运动矢量。然而,针对从列表0或列表1的每一潜在预测方向的AMVP模式,需要明确地将参考索引连同MVP索引发信到MV候选列表,原因是AMVP候选可含有仅运动矢量。在AMVP模式中,可进一步改进经预测运动矢量。
合并候选可对应于运动信息的完整集合,而AMVP候选可含有针对特定预测方向的仅一个运动矢量及参考索引。两种模式的候选可类似地从相同空间及时间邻近块导出。
图3A及图3B为说明根据本发明的一或多种技术的用于合并及高级运动矢量预测(AMVP)模式的空间相邻运动矢量候选的概念图。如关于图3A及图3B所描述,空间MV候选从针对特定PU(PU0)的图3A及图3B中所示的邻近块导出,而产生来自块的候选的方法对于合并模式及AMVP模式不同。
在合并模式中,可使用图3A中所示的具有数字的次序导出高达四个空间MV候选,且次序如下:左(0)、上(1)、右上(2)、左下(3)及左上(4),如图3A所示。
在AMVP模式中,邻近块分成两个群组:由块0及1组成的左群组310及由块2、3及4组成的上群组320,如图3B所示。针对每一群组310及320,参照与由经发信的参考索引指示的相同参考图像的邻近块中的潜在候选具有待选择的最高优先权以形成群组的最终候选。有可能所有邻近块均不含指向相同参考图像的运动矢量。因此,如果不能发现此候选,那么缩放第一可用候选以形成最终候选,因此可补偿瞬时距离差异。
诸多应用(例如远程桌上型、远程游戏、无线显示器、车用信息娱乐、云计算等)在日常生活中正变得常规。这些应用中的视频内容通常为自然内容、文本、人工图形等的组合。在文本及人工图形区域中,重复图案(例如字符、图标、符号等)通常存在。图像内块拷贝(图像内BC)为可使视频译码器移除此冗余且改进图像内图像译码效率的技术。在一些情况下,图像内BC替代地可被称作图像内运动补偿(MC)。
根据一些图像内BC技术,视频译码器可使用与视频数据的当前块相同的图像内的先前译码的视频数据的块,其在针对当前块的预测的相同图像中的视频数据的当前块(待译码)正上方或直接与其水平地成直线。即,如果视频数据的图像强加于2-D网格上,那么视频数据的每一块将占据x值及y值的唯一范围。因此,一些视频译码器可基于仅共享相同x值集合(即,与当前块垂直成直线)或相同y值集合(即,与当前块水平成直线)的先前译码的视频数据的块来预测视频数据的当前块。
图4为说明根据本发明的一或多种技术的图像内块拷贝(BC)实例的概念图。如关于图4所描述,图像内BC已包含在RExt中。图像内BC的实例如图4中所示,其中从当前图像/图块的已经解码的块404预测当前CU 402。当前图像内BC块大小可与CU大小一样大,范围为从8×8到64×64,而在一些应用中,可另外应用其它限制。
在传统视频译码中,图像可假定为连续色调且在空间上平滑。基于这些假定,已开发出各种工具,例如基于块的变换、滤波等,且这些工具已展示针对具有自然内容的视频的良好性能。然而,在例如远程桌上型、协同工作及无线显示器等的某些应用中,计算机产生的屏幕内容可为待压缩的主要内容。此类型的内容倾向于为离散色调的且其特征为具有高对比度对象边界的清晰线条。然而,连续色调及平滑度的假定不再能适用。因此,传统的视频译码技术可能无法有效工作。
为了调整此效率损失,视频译码器可使用调色板模式译码。2013年4月10日申请的美国临时申请案第61/810,649号描述调色板译码技术的实例。针对每一CU,可导出调色板,其包含当前CU中的最主要像素值。首先传输调色板的大小及元素。随后根据特定扫描次序编码CU中的像素。针对每一位置,视频编码器20可首先传输语法元素(例如旗标、palette_flag)以指示像素值在调色板中(“串数模式(run mode)”)或不在调色板中(“像素模式(pixel mode)”)。
在“串数模式”中,视频编码器20可发信调色板索引,紧接着发信“串数”。串数(run)为指示具有与当前正经译码的像素相同的调色板索引值的以扫描次序的连续像素的数目的语法元素。如果以扫描次序的实时连续中的多个像素具有相同调色板索引值,那么“串数模式”可由语法元素(例如,palette_flag)指示。可确定计数器值,其等于接续具有与当前像素相同的调色板索引值的当前像素的像素的数目,且串数经设置为等于计数器值。视频编码器20不需要传输palette_flag或由“串数”涵盖的后续位置的调色板索引,因为在当前像素之后的像素中的每一者具有相同像素值。在解码器侧,仅将解码当前像素的第一调色板索引值,且将针对在“串数”语法元素中指示的像素的“串数”中的每一像素拷贝结果。在“像素模式”中,视频编码器20传输此位置的像素样本值。如果例如palette_flag的语法元素指示“像素模式”,那么仅针对正经解码的当前像素确定调色板索引值。
针对4:4:4色度格式的序列提出残余信号的环路内色彩空间变换。环路内色彩空间变换过程将RGB/YUV色度格式的预测误差信号(即,残余信号)变换为次佳颜色空间中的那些信号。环路内色彩空间变换可进一步减少颜色分量当中的相关性。可由奇异值分解(SVD)从每一CU的像素样本值导出变换矩阵。颜色空间变换可应用于图像内模式及图像间模式两者的预测误差。
当颜色空间变换应用于图像间模式时,首先将残余转换到具有经导出的变换矩阵的不同域。在颜色空间转换之后,按顺序执行常规译码步骤(例如DCT/DST、量化及熵译码)。
当颜色空间变换应用于使用图像内模式译码的CU时,首先将预测块及当前块分别转换到具有经导出的变换矩阵的不同域。在颜色空间变换之后,进一步使用DCT/DST、量化及熵译码变换当前块与当前块的预测因子之间的残余。
视频编码装置(例如视频编码器20)执行正向操作,其中包括变换值a、b、c、d、e、f、g、h及i的颜色空间变换矩阵应用于三个平面G、B及R以导出颜色分量P、Q及S的值,如下:
所得值可在HEVC规格的范围内经剪辑,原因是在最坏情况下所述值可增大到倍。视频解码装置(例如视频解码器30)执行反向操作,其中包括转换值at、bt、ct、dt、et、ft、gt、ht及it的颜色空间变换矩阵应用于三个颜色分量P'、Q'及R'以导出三个平面G'、B'及R',如下,
图5为说明根据本发明的一或多种技术的目标块及用于图像内8×8块的参考样本的实例的概念图。可使用奇异值分解(SVD)从参考样本值导出变换矩阵。视频译码装置可针对图像内情况及图像间情况使用不同参考样本。针对经图像内译码块的情况,目标块及参考样本可如图5中所示。在图5中,目标块由8×8个交叉影线样本组成,且参考样本为条纹及点状样本。
针对经图像间译码块的情况,用于矩阵导出的参考样本可与用于运动补偿的参考样本相同。高级运动预测(AMP)中的参考样本可经子采样以减少参考样本的数目。举例来说,12×16块中的参考样本的数目减少2/3。
在以上方法的一些实例中,可始终应用颜色空间变换过程。因此,可能不需要发信是否调用颜色空间变换过程。另外,视频编码器20及视频解码器30两者可使用相同方法导出变换矩阵以避免用于发信变换矩阵的额外负荷。
视频编码器20及视频解码器30可使用各种颜色空间变换矩阵。举例来说,视频编码器20及视频解码器30可针对不同颜色空间应用不同颜色空间变换矩阵。举例来说,视频编码器20及视频解码器30可使用一对YCbCr变换矩阵以将样本值从RGB颜色空间转换到YCbCr颜色空间及返回。以下等式展示YCbCr变换矩阵的一个实例集:
正向:
反向:
在另一实例中,视频编码器20及视频解码器30可使用一对YCoCg变换矩阵以将样本值从RGB颜色空间转换到YCoCg颜色空间及返回。以下等式展示YCoCg变换矩阵的一个实例集:
正向:
反向:
另一此矩阵可为YCoCg-R矩阵,其为由因子2缩放Co及Cg分量的YCoCg矩阵的可修正版本。通过使用提升技术,视频编码器20及视频解码器30可通过以下等式达成正向及反向变换:
正向:
反向:
在以上等式及矩阵中,可(例如,由视频编码器)在编码过程之前执行正向变换。相反地,可(例如,由视频解码器)在解码过程之后执行反向变换。
图块的图块标头含有关于图块的信息。举例来说,图块的图块标头可含有语法元素,视频解码器30可从所述语法元素导出图块的量化参数。在HEVC中,图块片段标头语法结构对应于图块标头。下表展示如所定义的图块片段标头的部分:
在以上实例及本发明的其它语法表中,具有u(n)形式(其中n为非负整数)的描述符的语法元素为具有长度n的无符号值。此外,描述符se(v)指示首先具有左位的带符号整数第0次序指数哥伦布译码语法元素。
在上表中,slice_qp_delta语法元素指定待用于图块中的译码块直到由CU层中的CuQpDeltaVal的值修改的QpY的初始值。图块的QpY为图块的块的明度分量的QP。图块的QpY量化参数的初始值(SliceQpY)可经导出如下:
SliceQpY=26+init_qp_minus26+slice_qp_delta
在以上等式中,init_qp_minus26为PPS中发信的语法元素。init_qp_minus26语法元素指定每一图块的SliceQpY的初始值减26。SliceQpY的值可在-QpBdOffsetY到+51的范围内,包含端点。QpBdOffsetY为等于bit_depth_luma_minus8语法元素乘6的变量。bit_depth_luma_minus8语法元素指定明度数组的样本的位深度及明度量化参数范围偏移QpBdOffsetY的值。视频编码器20可发信SPS中的bit_depth_luma_minus8语法元素。
另一语法元素(slice_cb_qp_offset)指定当确定Qp'Cb量化参数的值时待添加到pps_cb_qp_offset(或明度量化参数偏移)的值。slice_cb_qp_offset的值可在-12到+12的范围内,包含端点。当slice_cb_qp_offset不存在时,推断slice_cb_qp_offset等于0。pps_cb_qp_offset+slice_cb_qp_offset的值可在-12到+12的范围内,包含端点。
语法元素slice_cr_qp_offset指定当确定Qp'Cr量化参数的值时待添加到pps_cr_qp_offset(或明度量化参数偏移)的值。slice_cr_qp_offset的值可在-12到+12的范围内,包含端点。当slice_cr_qp_offset不存在时,可推断slice_cr_qp_offset等于0。pps_cr_qp_offset+slice_cr_qp_offset的值可在-12到+12的范围内,包含端点。
当语法元素cu_chroma_qp_offset_enabled_flag等于1时,cu_chroma_qp_offset_flag可存在于变换单元语法中。当cu_chroma_qp_offset_enabled_flag等于0时,cu_chroma_qp_offset_flag可不存在于变换单元语法中。当不存在时,推断cu_chroma_qp_offset_enabled_flag的值等于0。
变换单元可具有语法如下:
语法元素cu_qp_delta_abs指定当前译码单元的明度量化参数与其预测之间的差值CuQpDeltaVal的绝对值。在上表中,描述符ae(v)指定上下文自适应性算术熵译码语法元素。
语法元素cu_qp_delta_sign_flag指定CuQpDeltaVal的符号。如果cu_qp_delta_sign_flag等于0,那么对应CuQpDeltaVal具有正值。否则(cu_qp_delta_sign_flag等于1),对应CuQpDeltaVal具有负值。当cu_qp_delta_sign_flag不存在时,推断cu_qp_delta_sign_flag等于0。
当cu_qp_delta_abs存在时,可导出变量IsCuQpDeltaCoded及CuQpDeltaVal。
IsCuQpDeltaCoded=1
CuQpDeltaVal=cu_qp_delta_abs*(1-2*cu_qp_delta_sign_flag)
CuQpDeltaVal的值可在-(26+QpBdOffsetY/2)到+(25+QpBdOffsetY/2)的范围内,包含端点。
语法元素cu_chroma_qp_offset_flag(当存在且等于1时)指定cb_qp_offset_list[]中的条目用于确定CuQpOffsetCb的值且cr_qp_offset_list[]中的对应条目用于确定CuQpOffsetCr的值。当变量cu_chroma_qp_offset_flag等于0时,这些列表不用于确定CuQpOffsetCb及CuQpOffsetCr的值。
语法元素cu_chroma_qp_offset_idx(当存在时)指定到用于确定CuQpOffsetCb及CuQpOffsetCr的值的cb_qp_offset_list[]及cr_qp_offset_list[]中的索引。当存在时,cu_chroma_qp_offset_idx的值应在0到chroma_qp_offset_list_len_minus1的范围内,包含端点。当不存在时,推断cu_chroma_qp_offset_idx的值等于0。
可检查由于cu_chroma_qp_offset_flag已存在于相同群组的某一其它CU中因此不存在cu_chroma_qp_offset_flag的情况以及由于列表仅含有一条目因此flag等于1但索引不存在的情况。当cu_chroma_qp_offset_flag存在时,设置变量IsCuChromaQpOffsetCoded等于1。随后导出变量CuQpOffsetCb及CuQpOffsetCr。如果cu_chroma_qp_offset_flag等于1,那么CuQpOffsetCb=cb_qp_offset_list[cu_chroma_qp_offset_idx],且CuQpOffsetCr=cr_qp_offset_list[cu_chroma_qp_offset_idx]。否则(cu_chroma_qp_offset_flag等于0),CuQpOffsetCb及CuQpOffsetCr两者均设置为等于0。
在解码过程中,针对量化参数的导出过程,此过程的输入为指定相对于当前图像的左上方明度样本的当前明度译码块的左上方样本的明度位置(xCb,yCb)。在此过程中,导出变量QpY、明度量化参数Qp'Y及色度量化参数Qp'Cb及Qp'Cr
根据本发明的技术,量化群组为CU的TU的集合,其中TU中的每一者共享相同QP值。明度位置(xQg,yQg)指定相对于当前图像的左上方明度样本的当前量化群组的左上方明度样本。水平位置xQg及垂直位置yQg分别设置为等于xCb-(xCb&((1<<Log2MinCuQpDeltaSize)-1))及yCb-(yCb&((1<<Log2MinCuQpDeltaSize)-1))。量化群组的明度大小Log2MinCuQpDeltaSize确定共享相同qPY_PRED的译码树型块内的最小区域的明度大小。
视频译码器可由以下有序步骤导出经预测的明度量化参数qPY_PRED
1)可导出变量qPY_PREV。如果以下条件中的一或多者为真实的,那么视频译码器设置qPY_PREV等于SliceQpY:当前量化群组为图块中的第一量化群组,当前量化群组为色砖中的第一量化群组,或当前量化群组为译码树型块列中的第一量化群组,且entropy_coding_sync_enabled_flag等于1。否则,qPY_PREV设置为等于以解码次序的先前量化群组中的最后译码单元的明度量化参数QpY。
2)调用以z扫描次序的块的可用性导出过程,位置(xCurr,yCurr)设置为等于(xCb,yCb)且相邻位置(xNbY,yNbY)设置为等于(xQg-1,yQg)作为输入,且将输出指派给availableA。变量qPY_A导出如下:如果以下条件中的一或多者为真实的,那么qPY_A设置为等于qPY_PREV:availableA等于FALSE或含有覆盖明度位置(xQg-1,yQg)的明度译码块的译码树型块的译码树型块地址ctbAddrA不等于CtbAddrInTs,其中ctbAddrA导出如下:
xTmp=(xQg-1)>>Log2MinTrafoSize
yTmp=yQg>>Log2MinTrafoSize
minTbAddrA=MinTbAddrZs[xTmp][yTmp]
ctbAddrA=(minTbAddrA>>2)*(CtbLog2SizeY-Log2MinTrafoSize)
否则,qPY_A设置为等于含有覆盖(xQg-1,yQg)的明度译码块的译码单元的明度量化参数QpY
3)调用以z扫描次序的块的可用性导出过程,位置(xCurr,yCurr)设置为等于(xCb,yCb)且相邻位置(xNbY,yNbY)设置为等于(xQg,yQg-1)作为输入。将输出指派给availableB。导出变量qPY_B。如果以下条件中的一或多者为真实的,那么qPY_B设置为等于qPY_PREV:availableB等于FALSE或含有覆盖明度位置(xQg,yQg-1)的明度译码块的译码树型块的译码树型块地址ctbAddrB不等于CtbAddrInTs,其中ctbAddrB导出如下:
xTmp=xQg>>Log2MinTrafoSize
yTmp=(yQg-1)>>Log2MinTrafoSize
minTbAddrB=MinTbAddrZs[xTmp][yTmp]
ctbAddrB=(minTbAddrB>>2)*(CtbLog2SizeY-Log2MinTrafoSize)
否则,qPY_B设置为等于含有覆盖(xQg,yQg-1)的明度译码块的CU的明度量化参数QpY
经预测的明度量化参数qPY_PRED可导出如下:
qPY_PRED=(qPY_A+qPY_B+1)>>1
变量QpY可导出如下:
QpY=((qPY_PRED+CuQpDeltaVal+52+2*QpBdOffsetY)%(52+QpBdOffsetY))-QpBdOffsetY
明度量化参数Qp'Y可导出如下:
Qp'Y=QpY+QpBdOffsetY
当ChromaArrayType不等于0时,变量qPiCb及qPiCr导出如下:
qPiCb=Clip3(-QpBdOffsetC,57,QpY+pps_cb_qp_offset+slice_cb_qp_offset+CuQpOffsetCb)
qPiCr=Clip3(-QpBdOffsetC,57,QpY+pps_cr_qp_offset+slice_cr_qp_offset+CuQpOffsetCr)
如果ChromaArrayType等于1,那么变量qPCb及qPCr基于等于qPiCb及qPiCr的索引qPi分别设置为等于QpC的值。否则,变量qPCb及qPCr基于等于qPiCb及qPiCr的索引qPi分别设置为等于Min(qPi,51)。
Cb及Cr分量的色度量化参数Qp'Cb及Qp'Cr导出如下:
Qp'Cb=qPCb+QpBdOffsetC
Qp'Cr=qPCr+QpBdOffsetC
依等于1的ChromaArrayType的qPi而变化的Qpc的规格如下:
qPi <30 30 31 32 33 34 35 36 37 38 39 40 41 42 43 >43
QpC =qPi 29 30 31 32 33 33 34 34 35 35 36 36 37 37 =qPi-6
在解量化过程中,导出每一分量索引(cIdx)的量化参数qP。如果cIdx等于0,那么qP=Qp'Y。否则,如果cIdx等于1,那么qP=Qp'Cb。否则(如果cIdx等于2),那么qP=Qp'C。在解块滤波器过程中,首先确定明度/色度边缘,其取决于QpY。HEVC的子条款8.7.2.5.3及8.7.2.5.5提供解块滤波器过程的细节。
2014年4月18日申请的美国临时专利申请案第61/981,645号定义环路内颜色变换公式,例如具有位深度delta的标准化YCgCo变换及YCgCo变换。另外,美国临时专利申请案第61/981,645描述颜色变换可应用于图像内模式的残值域,即,在常规变换/量化过程之前的预测过程之后。此外,美国临时专利申请案第61/981,645号指出不同颜色分量可使用块的不同delta QP,基于变换的标准使用颜色变换译码所述块。
可以若干方式改进美国临时专利申请案第61/981,645号的视频译码技术。举例来说,三个颜色分量的固定delta QP设置可能并非在所有情况下都最佳,例如所有图像内/随机存取/低延迟。此外,当使用具有位深度delta的非标准化YCgCo变换时,变换导致正常变换的位宽度增加,其增加了硬件实施方案的成本。相反地,如果正常变换保持不变,那么归因于输入残余数据的增加精度,其可在一些情况下导致溢位。
本发明的技术相较于先前设计提供改进环路内颜色空间变换的译码性能及减少解码器复杂度的解决方案。例如视频编码器20或视频解码器30的视频译码器可执行如关于图1到11描述的技术中的任一者。
在一些实例中,经解码的三个颜色分量的QP的delta值的设置由(deltaQPC0、deltaQPC1、deltaQPC2)表示,其指示相较使用常规方式确定的qP具有赋能的颜色变换的块的QP的偏移。针对使用赋能的颜色变换译码的块,解量化过程中使用的最终QP针对具有分别等于0、1、2的分量索引cIdx的三个颜色分量设置为qP+deltaQPC0、qP+deltaQPC1、qP+deltaQPC2。qP为常规QP导出过程的输出。在一些实例中,deltaQPC0等于deltaQPC1,而deltaQPC0及deltaQPC1两者均小于deltaQPC2
举例来说,视频编码器20可编码视频数据的CU。在编码视频数据时,视频编码器20可确定使用颜色空间转换编码CU。视频编码器20可确定颜色分量的初始QP,且基于所述CU是使用颜色空间转换编码来设置颜色分量的最终QP以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和。视频编码器20可基于颜色分量的最终QP来量化CU的系数块,CU的所述系数块是基于所述颜色分量的样本值。一旦每一系数已经量化,视频编码器20即可基于经编码位流中的CU的经量化系数块输出经编码的CU。
在另一实例中,视频解码器30可解码视频数据的CU。在解码视频数据时,视频解码器30可确定使用颜色空间转换来编码CU。视频解码器30可确定颜色分量的初始QP,且基于所述CU是使用颜色空间转换编码来确定颜色分量的最终QP,以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和。视频解码器30可基于颜色分量的最终QP来反量化CU的系数块,CU的系数块是基于颜色分量的样本值。一旦每一系数块已经量化,视频解码器30即可基于CU的经反量化系数块来重建CU。
在一些实例中,针对一或多个颜色分量的颜色分量,可在PPS、SPS或图块标头中的一者中发信颜色分量的QP偏移。在一些其它实例中,多个颜色分量可包括三个颜色分量。在此些实例中,第一颜色分量的第一量化参数的第一QP偏移等于第二颜色分量的第二QP的第二QP偏移,第一QP偏移(及第二量化参数偏移)小于第三颜色分量的第三QP的第三QP偏移。
因此,在一些实例中,所述CU为第一CU。在此些实例中,视频编码器20可编码第二CU。在编码第二CU时,视频编码器20可确定颜色分量的第二QP,基于未使用颜色空间转换编码第二CU来设置颜色分量的最终QP值以使得颜色分量的第二最终QP值等于颜色分量的第二初始QP值,及基于颜色分量的第二最终QP量化第二CU的系数块,第二CU的系数块是基于颜色分量的样本值。视频编码器20可进一步输出包括表示经量化第二系数块中的每一者的一或多个经熵编码语法元素的第二集合的视频数据位流。
在解码此实例时,视频解码器30可解码第二CU。在解码第二CU时,视频解码器30可针对多个颜色分量中的颜色分量确定颜色分量的第二QP,基于未使用颜色空间转换编码第二CU来确定颜色分量的第二最终QP值以使得颜色分量的第二最终QP值等于颜色分量的第二初始QP值,及基于颜色分量的最终QP反量化第二CU的系数块,第二CU的系数块是基于颜色分量的样本值。视频解码器30可基于第二CU的一或多个经反量化系数块中的每一者来重建第二CU。
代替使用所有模式的delta QP的一个固定集合,三个颜色分量的delta QP的设置可为模式有关的。在一个实例中,图像内及图像内BC模式可共享(deltaQPC0、deltaQPC1、deltaQPC2)的相同集合,而图像间模式可共享(deltaQPC0、deltaQPC1、deltaQPC2)的另一集合,其不等同于图像内模式及图像内BC模式使用的一者。在另一实例中,图像内模式可共享(deltaQPC0、deltaQPC1、deltaQPC2)的相同集合,而图像内BC模式及图像间模式可共享(deltaQPC0、deltaQPC1、deltaQPC2)的另一集合,其不等同于图像内模式使用的一者。在一些实例中,delta QP(deltaQPC0、deltaQPC1、deltaQPC2)的集合可为(-4+6*BitInc、-4+6*BitInc、-3+6*BitInc)、(-4+6*BitInc、-4+6*BitInc、-2+6*BitInc)、(-5+6*BitInc、-5+6*BitInc、-3+6*BitInc)或(-5+6*BitInc、-5+6*BitInc、-2+6*BitInc),其中BitInc可为0、1、2。
换句话说,在一些实例中,多个颜色分量包括三个颜色分量。在此些实例中,量化参数偏移可等于(-5+6*BitInc、-5+6*BitInc、-3+6*BitInc)。在其它此些实例中,量化参数偏移可等于其它值,例如(-4+6*BitInc、-4+6*BitInc、-3+6*BitInc)、(-4+6*BitInc、-4+6*BitInc、-2+6*BitInc)或(-5+6*BitInc、-5+6*BitInc、-2+6*BitInc)。在任何情况下,BitInc可等于0、1或2。
I图块为可仅含有图像内译码块或图像内BC译码块的图块。P图块为仅含有图像内译码及单向图像间预测块的图块。B图块为可含有图像内预测块、单向图像间预测块及双向图像间预测块的图块。在一些实例中,代替使用所有模式的delta QP的一个固定集合,三个颜色分量的delta QP的设置可取决于图块类型。在一个实例中,I图块可共享相同集合,而P/B图块共享相同集合。在另一实例中,不同集合可应用于I/P/B图块。此外,在一些实例中,可在SPS、PPS或图块标头中发信delta QP的集合。
换句话说,在一些实例中,颜色分量的QP偏移可取决于CU的图块类型为I图块类型、P图块类型还是B图块类型。在此些实例中,针对颜色分量,视频编码器20可确定颜色分量的QP偏移在CU的图块类型为I图块类型时等于第一值,且在CU的图块类型为P图块类型或B图块类型时等于第二值,所述第一值不同于所述第二值。在其它此些实例中,针对颜色分量,视频编码器20可确定颜色分量的QP偏移在CU的图块类型为I图块类型时等于第一值,在CU的所述图块类型为P图块类型时等于第二值,且在CU的图块类型为B图块类型时等于第三值,所述第一值不同于所述第二值,所述第二值不同于所述第三值,且所述第一值不同于所述第三值。
在其它实例中,颜色分量的QP偏移可取决于CU的图块类型为I图块类型、P图块类型还是B图块类型。在此些实例中,针对颜色分量,视频解码器30可确定颜色分量的QP偏移在CU的图块类型为I图块类型时等于第一值,且在CU的图块类型为P图块类型或B图块类型时等于第二值,所述第一值不同于所述第二值。在其它此些实例中,针对颜色分量,视频解码器30可确定颜色分量的QP偏移在CU的图块类型为I图块类型时等于第一值,在CU的所述图块类型为P图块类型时等于第二值,且在CU的图块类型为B图块类型时等于第三值,所述第一值不同于所述第二值,所述第二值不同于所述第三值,且所述第一值不同于所述第三值。
在一些实例中,当归因于颜色变换增加数据动态范围时,视频译码器可将经变换的残值剪辑到与颜色变换之前的那些残值相同的范围中。举例来说,如果输入数据在N位精度中,那么图像内/图像间预测之后的残值可在[-2N,2N-1]的范围内(或更精确地,在[-2N-1,2N-1]的范围内)。在应用颜色变换后,经变换的残值还可经剪辑到相同范围。在一些实例中,当三个颜色分量的译码块旗标均等于0时,可跳过反向颜色变换。
在一些实例中,当应用颜色变换时,使用常规方式导出的QpY可进一步调整为(QpY+deltaQPC0)。因此,在解块滤波器过程中,可首先确定明度/色度边缘的边界强度,其取决于经调整的QpY。替代地,未经调整的QpY可用于解块滤波器过程的明度/色度边缘的边界强度中。
换句话说,在一些实例中,多个颜色分量包括明度分量及色度分量。在此些实例中,视频编码器20可至少部分基于明度分量的最终QP进一步确定明度边缘的边界强度。视频编码器20可至少部分基于色度分量的最终QP进一步确定色度边缘的边界强度。响应于确定明度边缘的边界强度不满足第一阈值,视频编码器20可对明度边缘执行解块滤波过程。此外,响应于确定色度边缘的边界强度不满足第二阈值,视频编码器20可对色度边缘执行解块滤波过程。
在其它实例中,多个颜色分量包括明度分量及色度分量。在此些实例中,视频解码器30可至少部分基于明度分量的最终QP进一步确定明度边缘的边界强度。视频解码器30可至少部分基于色度分量的最终QP进一步确定色度边缘的边界强度。响应于确定明度边缘的边界强度不满足第一阈值,视频解码器30可对明度边缘执行解块滤波过程。此外,响应于确定色度边缘的边界强度不满足第二阈值,视频解码器30可对色度边缘执行解块滤波过程。
在一些实例中,可在当针对一个CU赋能颜色变换且使用图像内模式译码CU时CU内的所有PU将使用直接模式(DM)的标准中加入约束条件。当使用直接模式编码PU时,视频编码器20不发信运动信息语法元素,但可发信表示残余数据的语法元素。即,色度预测模式可与明度预测模式相同。替代地,此外,当针对一个CU赋能颜色变换时,pcm_flag将等于0。
换句话说,在一些实例中,颜色空间变换的输入数据具有N位精度。在此些实例中,图像内/图像间预测之后CU的残余数据可在[-2N,2N-1]的范围内。在一些其它实例中,响应于确定所述CU是使用图像内译码模式译码,视频编码器20可使用相同色度预测模式进一步预测CU的所有色度块。在此些实例中,视频编码器20可使用相同明度预测模式进一步预测CU的所有明度块。相同明度预测模式可与相同色度预测模式相同。在另一实例中,一个CU可含有四个明度块。在此些实例中,可使用其自身明度预测模式译码每一明度块,且CU内的左上方明度块的明度预测模式可与相同色度预测模式相同。
在其它实例中,颜色空间转换的输入数据具有N位精度。在此些实例中,图像内/图像间预测之后CU的残余数据可在[-2N,2N-1]的范围内。在一些其它实例中,响应于确定使用图像内译码模式来译码CU,视频解码器30可使用相同色度预测模式进一步预测CU的所有色度块。在此些实例中,视频解码器30可使用相同明度预测模式进一步预测CU的所有明度块。相同明度预测模式可与相同色度预测模式相同。在另一实例中,一个CU可含有四个明度块。在此些实例中,可使用其自身明度预测模式译码每一明度块,且CU内的左上方明度块的明度预测模式可与相同色度预测模式相同。
视频编码器20可(例如)在帧标头、块标头、图块标头或GOP标头中进一步将语法数据(例如,基于块的语法数据、基于帧的语法数据,及基于GOP的语法数据)发送到视频解码器30。GOP语法数据可描述GOP中的帧数目,且帧语法数据可指示用以编码对应帧的编码/预测模式。
图6为说明可使用颜色空间转换过程实施用于编码视频块的技术的视频编码器20的实例的框图。视频编码器20可执行视频图块内的视频块的图像内译码及图像间译码。图像内译码依赖于空间预测以减小或移除给定视频帧或图像内的视频的空间冗余。图像间译码依赖于时间预测以减小或移除视频序列的邻近帧或图像内的视频的时间冗余。图像内模式(I模式)可指若干基于空间的译码模式中的任一者。图像间模式(例如,单向预测(P模式)或双向预测(B模式))可指代若干基于时间的译码模式中的任一者。
如图6中所示,视频编码器20接收待编码的视频图图像内的当前视频块。在图6的实例中,视频编码器20包含模式选择单元40、参考图像存储器64、求和器50、变换处理单元52、量化单元54及熵编码单元56。模式选择单元40又包含运动补偿单元44、运动估计单元42、图像内预测单元46及分割单元48。模式选择单元40还可包含基于所选择模式的其它单元,例如图像内BC模式模块。用于视频块重建,视频编码器20亦包含反量化单元58、反变换单元60及求和器62。还可包含去块滤波器(图6中未展示)以对块边界进行滤波以从重建的视频移除块效应伪影。在典型实例中,求和器62接收解块滤波器的输出。还可使用除去块滤波器以外的额外滤波器(环路中或环路后)。为简洁起见未展示此些滤波器,但如果需要,此些滤波器可滤波求和器50的输出(作为环路内滤波器)。
在编码过程期间,视频编码器20接收待编码的视频帧或图块。可将所述帧或图块划分成多个视频块。运动估计单元42及运动补偿单元44基于一或多个参考帧中的一或多个块执行视频块的图像间预测性译码以提供时间预测。视频编码器20可执行多个译码遍次,(例如)以选择用于视频数据的每一块的适当译码模式。
运动估计单元42及运动补偿单元44可高度整合,但为概念目的而分开说明。由运动估计单元42执行的运动估计为产生运动矢量的过程,运动矢量估计视频块的运动。举例来说,运动矢量可指示在当前视频帧或图像内的视频块的PU相对于在参考帧(或其它经译码单元)内的预测性块(其相对于在所述当前帧(或其它经译码单元)内正经译码的当前块)的位移。预测性块为就像素差来说被发现紧密地匹配待译码的块的块,所述像素差可通过绝对差和(SAD)、平方差和(SSD)或其它偏移度确定。在一些实例中,视频编码器20可计算存储于参考图像存储器64中的参考图像的次整数像素位置的值。举例来说,视频编码器20可内插参考图像的四分之一像素位置、八分之一像素位置或其它分数像素位置的值。因此,运动估计单元42可执行相对于全像素位置及分数像素位置的运动搜寻且输出具有分数像素精度的运动矢量。
运动估计单元42通过比较PU的位置与参考图像的预测性块的位置而计算图像间译码图块中的视频块的PU的运动矢量。参考图像可是选自第一参考图像列表(列表0)或第二参考图像列表(列表1),其中的每一者识别存储于参考图像存储器64中的一或多个参考图像。运动估计单元42将所计算运动矢量发送到熵编码单元56及运动补偿单元44。
由运动补偿单元44执行的运动补偿可涉及基于由运动估计单元42确定的运动矢量来检索或产生预测性块。再次,在一些实例中,运动估计单元42与运动补偿单元44可在功能上整合。在接收到当前视频块的PU的运动矢量之后,运动补偿单元44可在参考图像列表中的一者中定位运动矢量所指向的预测性块。求和器50通过从正被译码的当前视频块的像素值减去预测性块的像素值来形成残余视频块,从而形成像素差值,如下文所论述。一般来说,运动估计单元42相对于明度分量而执行运动估计,且运动补偿单元44将基于所述明度分量所计算的运动矢量用于色度分量与明度分量两者。模式选择单元40还可产生与视频块及视频图块相关联的语法元素以供视频解码器30在解码视频图块的视频块时使用。
如上文所描述,作为由运动估计单元42及运动补偿单元44执行的图像间预测的替代,图像内预测单元46可对当前块进行图像内预测。特定来说,图像内预测单元46可确定待用以编码当前块的图像内预测模式。在一些实例中,图像内预测单元46可例如在分开的编码遍次期间使用各种图像内预测模式编码当前块,且图像内预测单元46(或在一些实例中为模式选择单元40)可从所测试的模式中选择适当图像内预测模式来使用。
举例来说,图像内预测单元46可使用对于各种所测试的图像内预测模式的速率-失真分析来计算速率-失真值,且在所测试的模式的中选择具有最佳速率-失真特性的图像内预测模式。速率-失真分析大体上确定经编码块与原始、未编码块(其经编码以产生经编码块)之间的失真(或误差)量,以及用以产生经编码块的比特率(即,位的数目)。图像内预测单元46可根据各种经编码块的失真及速率来计算比率以确定哪一图像内预测模式展现所述块的最佳速率-失真值。
在选择用于块的图像内预测模式后,图像内预测单元46可将指示用于块的所选图像内预测的信息提供到熵编码单元56。熵编码单元56可编码指示所选图像内预测模式的信息。视频编码器20可在所传输的位流中包含配置数据,其可包含以下各者:多个图像内预测模式索引表及多个经修改的图像内预测模式索引表(也称作码字映射表);各种块的编码上下文的定义;及待用于所述上下文中的每一者的最有可能的图像内预测模式、图像内预测模式索引表及经修改的图像内预测模式索引表的指示。
图像内预测单元46可基于与待译码的块相同的帧或图块中的一或多个邻近块执行视频块的图像内预测性译码以提供空间预测。此外,分割单元48可基于对先前译码遍次中的先前分割方案的评估而将视频数据的块分割为子块。举例来说,分割单元48可起初将帧或图块分割成LCU,并且基于速率-失真分析(例如,速率-失真优化)将LCU中的每一者分割成子CU。模式选择单元40可进一步产生指示将LCU分割为子CU的四分树数据结构。四分树的叶节点CU可包含一或多个PU及一或多个TU。
模式选择单元40可(例如,基于误差结果)选择图像内或图像间译码模式中的一者,且可将所得图像内或图像间译码块提供到求和器50以产生残余块数据且提供到求和器62以重建用作参考帧的经编码的块。模式选择单元40还将语法元素(例如图像内模式指示符、分割信息及其它此类语法信息)提供到熵编码单元56。
视频编码器20可通过从正被译码的原始视频块减去来自模式选择单元40的预测数据而形成残余视频块。求和器50表示执行此减法运算的一或多个组件。变换处理单元52将变换(例如离散余弦变换(DCT)或概念上类似的变换)应用于残余块,从而产生包括残余变换系数值的视频块。变换处理单元52可执行概念上类似于DCT的其它变换。还可使用小波变换、整数变换、子频带变换或其它类型的变换。在任何状况下,变换处理单元52将变换应用于残余块,从而产生残余变换系数块。所述变换可将残余信息从像素值域转换到变换域,例如频域。变换处理单元52可将所得变换系数发送到量化单元54。量化单元54量化变换系数以进一步减少比特率。所述量化过程可减小与所述系数中的一些或所有相关联的位深度。可通过调整量化参数来修改量化程度。在一些实例中,量化单元54可接着执行对包含经量化变换系数的矩阵的扫描。替代性地,熵编码单元56可执行扫描。
在量化之后,熵编码单元56熵译码经量化的变换系数。举例来说,熵编码单元56可执行上下文自适应性可变长度译码(CAVLC)、上下文自适应性二进制算术译码(CABAC)、基于语法的上下文自适应性二进制算术译码(SBAC)、机率区间分割熵(PIPE)译码或另一熵译码技术。在基于上下文的熵译码的状况下,上下文可基于邻近块。在由熵译码单元56进行熵译码之后,可将经编码位流传输到另一装置(例如,视频解码器30)或加以存档以供稍后传输或检索。
根据本发明的技术,视频编码器20的熵编码单元56可执行本发明的一或多种技术。举例来说,视频编码器20的熵编码单元56可编码视频数据的CU。在编码视频数据时,颜色空间转换单元51可确定是否使用颜色空间转换编码CU。针对颜色分量,量化单元54可确定颜色分量的初始QP,及基于所述CU是使用颜色空间转换编码来设置颜色分量的最终QP以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和。量化单元54可基于颜色分量的最终QP来量化CU的系数块,CU的系数块是基于颜色分量的样本值。一旦每一系数已经量化,熵编码单元56即可进一步输出包括表示经量化系数块中的每一者的一或多个经熵编码语法元素的视频数据位流。
反量化单元58及反变换单元60分别应用反量化及反变换以在像素域中重建残余块(例如)以供稍后用作参考块。运动补偿单元44可通过将残余块添加到参考图像存储器64的帧中的一者的预测性块来计算参考块。运动补偿单元44还可将一或多个内插滤波器应用到经重建的残余块以计算用于在运动估计中使用的子整数像素值。求和器62将经重建的残余块添加到由运动补偿单元44产生的经运动补偿的预测块,以产生经重建的视频块以用于存储于参考图像存储器64中。经重建的视频块可由运动估计单元42及运动补偿单元44用作一参考块以图像间译码后续视频帧中的块。
以此方式,视频编码器20可执行本发明的一或多种技术。举例来说,视频编码器20的熵编码单元56可编码视频数据的译码单元(CU)。在编码视频数据时,视频编码器20的颜色空间转换单元51可确定使用颜色空间转换来编码CU。视频编码器20的量化单元54可确定颜色分量的初始量化参数(QP),及基于所述CU是使用颜色空间转换编码来设置颜色分量的最终QP以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和。视频编码器20的量化单元54可基于颜色分量的最终QP来量化CU的系数块,CU的所述系数块是基于颜色分量的样本值。一旦每一系数已经量化,视频编码器20的量化单元54即可进一步输出包括表示经量化系数块中的每一者的一或多个经熵编码语法元素的视频数据位流。
在一些实例中,可用PPS、SPS或图块标头中的一者发信颜色分量的QP偏移。在一些其它实例中,多个颜色分量可包括三个颜色分量。在此些实例中,第一颜色分量的第一QP的第一QP偏移等于第二颜色分量的第二QP的第二QP偏移,第一QP偏移(及第二QP偏移)小于第三颜色分量的第三QP的第三QP偏移。在一些实例中,可进一步对CU执行解块滤波过程。在此些实例中,视频编码器20可使用每一颜色分量的初始QP而非最终QP。
在一些实例中,多个颜色分量包括明度分量及色度分量。在此些实例中,视频编码器20的量化单元54可至少部分基于明度分量的最终QP进一步确定明度边缘的边界强度。视频编码器20的量化单元54可至少部分基于色度分量的最终QP确定色度边缘的边界强度。响应于确定明度边缘的边界强度不满足第一阈值,视频编码器20的量化单元54可对明度边缘执行解块滤波过程。此外,响应于确定色度边缘的边界强度不满足第二阈值,视频编码器20的量化单元54可对色度边缘执行解块滤波过程。
在一些其它实例中,所述CU为第一CU。在此些实例中,视频编码器20的熵编码单元56可编码第二CU。在编码第二CU时,视频编码器20的量化单元54可针对颜色分量确定颜色分量的QP,基于未使用颜色空间转换编码第二CU来设置颜色分量的最终QP值以使得颜色分量的最终QP值等于颜色分量的初始QP值,及基于颜色分量的最终QP量化第二CU的系数块,第二CU的系数块是基于颜色分量的样本值。视频编码器20的量化单元54可进一步输出包括表示经量化第二系数块中的每一者的一或多个经熵编码语法元素的视频数据位流。
在一些实例中,针对颜色分量,颜色分量的QP偏移取决于CU的编码模式。在一些此些实例中,针对颜色分量,视频编码器20的量化单元54可确定所述分量的QP偏移,以使得所述QP偏移在CU的编码模式为图像内模式或图像内块拷贝(BC)模式时等于第一值,且在CU的编码模式为图像间模式时等于第二值,所述第一值不同于所述第二值。在其它此些实例中,针对颜色分量,视频编码器20的量化单元54可确定所述分量的QP偏移,以使得所述QP偏移在CU的编码模式为图像内模式时等于第一值,且在CU的编码模式为图像内块拷贝(BC)模式时等于第二值,所述第一值不同于所述第二值。
在一些实例中,多个颜色分量包括三个颜色分量。在此些实例中,量化参数偏移可等于(-5+6*BitInc、-5+6*BitInc、-3+6*BitInc)。在其它此些实例中,量化参数偏移可等于其它值,例如(-4+6*BitInc、-4+6*BitInc、-3+6*BitInc)、(-4+6*BitInc、-4+6*BitInc、-2+6*BitInc)或(-5+6*BitInc、-5+6*BitInc、-2+6*BitInc)。在任何情况下,BitInc可等于0、1或2。
在一些实例中,针对多个颜色分量中的颜色分量,颜色分量的QP偏移可取决于CU的图块类型为I图块类型、P图块类型还是B图块类型。在此些实例中,针对颜色分量,视频编码器20的量化单元54可确定颜色分量的QP偏移在CU的图块类型为I图块类型时等于第一值,且在CU的图块类型为P图块类型或B图块类型时等于第二值,所述第一值不同于所述第二值。在其它此些实例中,针对颜色分量,视频编码器20的量化单元54可确定颜色分量的QP偏移在CU的图块类型为I图块类型时等于第一值,在CU的所述图块类型为P图块类型时等于第二值,且在CU的图块类型为B图块类型时等于第三值,所述第一值不同于所述第二值,所述第二值不同于所述第三值,且所述第一值不同于所述第三值。
在一些实例中,颜色空间转换的输入数据具有N位精度。在此些实例中,图像内/图像间预测之后CU的残余数据可在[-2N,2N-1]的范围内。在一些其它实例中,响应于确定所述CU是使用图像内译码模式译码,视频编码器20的量化单元54可进一步使用相同色度预测模式来预测CU的所有色度块。在此些实例中,视频编码器20的图像内预测单元46可进一步使用相同明度预测模式来预测CU的所有明度块。相同明度预测模式可与相同色度预测模式相同。
图7为说明可实施用于解码视频块的技术的视频解码器30的实例的框图,其中一些块是使用颜色空间转换过程来编码。在图7的实例中,视频解码器30包含熵解码单元70、运动补偿单元72、图像内预测单元74、反量化单元76、反变换单元78、参考图像存储器82及求和器80。视频解码器30还可包含例如图像内BC单元的其它单元。在一些实例中,视频解码器30可执行大体上与关于视频编码器20(图2)所描述的编码遍次互逆的解码遍次。运动补偿单元72可基于从接收来自熵解码单元70的语法元素确定的运动矢量产生预测数据,而图像内预测单元74可基于接收来自熵解码单元70的图像内预测模式指示符产生预测数据。在一些实例中,图像内预测单元74可推断一些图像内预测模式指示符。
在解码过程期间,视频解码器30接收表示经编码视频图块的视频块及相关联语法元素的经编码视频位流。视频解码器30的熵解码单元70熵解码位流以产生经量化系数、运动矢量或图像内预测模式指示符及其它语法元素。熵解码单元70将语法元素转发到运动补偿单元72。
根据本发明的技术,视频解码器30可执行本发明的一或多种技术。举例来说,视频解码器30的熵解码单元70可解码视频数据的译码单元(CU)。在解码视频数据时,视频解码器30的反颜色空间转换单元79可确定使用颜色空间转换来编码CU。针对颜色分量,视频解码器30的反量化单元76可确定颜色分量的初始量化参数(QP),及基于所述CU是使用颜色空间转换编码来确定颜色分量的最终QP,以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和。视频解码器30的反量化单元76可基于颜色分量的最终QP来反量化CU的系数块,CU的系数块是基于颜色分量的样本值。一旦每一系数块已经反量化,视频解码器30的求和器80即可基于CU的经反量化系数块重建译码单元。
当图块为I图块、P图块或B图块时,图像内预测单元74可使用图像内预测模式来产生预测性块。换句话说,可在允许单向或双向图像间预测的图块中具有图像内预测块。当视频帧经译码为经图像间译码(即,B、P或GPB)图块时,运动补偿单元72基于运动矢量及从熵解码单元70接收的其它语法元素产生用于当前视频图块的视频块的预测性块。可从参考图像列表中的一者内的参考图像中的一者产生预测性块。视频解码器30可基于存储于参考图像存储器82中的参考图像使用默认建构技术来建构参考图像列表(列表0及列表1)。运动补偿单元72通过剖析运动矢量及其它语法元素来确定当前视频图块的视频块的预测信息,且使用所述预测信息产生正经解码的当前视频块的预测性块。举例来说,运动补偿单元72使用一些所接收的语法元素以确定用以译码视频图块的视频块的预测模式(例如,图像内预测或图像间预测)、图像间预测图块类型(例如,B图块、P图块或GPB图块)、图块的参考图像列表中的一或多者的建构信息、图块的每一图像间编码视频块的运动矢量、图块的每一图像间译码视频块的图像间预测状态,及用以解码当前视频图块中的视频块的其它信息。
反量化单元76反量化(即,解量化)位流中所提供并由熵解码单元70解码的经量化变换系数。反量化过程可包含使用视频解码器30针对视频图块中的每一视频块计算的量化参数QPY以确定应应用的量化程度和同样反量化程度。
根据本发明的技术,视频解码器30可执行本发明的一或多种技术。举例来说,视频解码器30可解码视频数据的译码单元(CU)。在解码视频数据时,视频解码器30的反颜色空间转换单元79可确定是否使用颜色空间转换来编码CU。针对颜色分量,视频解码器30的反量化单元76可确定颜色分量的初始QP,及基于所述CU是使用颜色空间转换编码来确定颜色分量的最终QP,以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和。视频解码器30的反量化单元76可基于颜色分量的最终QP来反量化CU的系数块,CU的系数块是基于颜色分量的样本值。一旦每一系数块已经反量化,视频解码器30的求和器80即可基于CU的经反量化系数块重建译码单元。
反变换单元78将反变换(例如,反DCT、反整数变换或概念地类似的反变换处理)应用于变换系数,以便在像素域中产生残余块。
在运动补偿单元72基于运动矢量及其它语法元素产生当前视频块的预测性块后,视频解码器30通过对来自反变换处理单元78的残余块与由运动补偿单元72产生的对应预测性块求和而形成经解码视频块。求和器80表示执行此求和运算的所述或所述组件。如果需要,还可应用解块滤波器来对经解码块滤波以便移除块效应假影。还可使用其它环路滤波器(在译码环路中或在译码环路之后)使像素转变平滑,或另外改进视频质量。接着将给定帧或图像中的经解码视频块存储于参考图像存储器82中,所述参考图像存储器存储用于后续运动补偿的参考图像。参考图像存储器82亦存储经解码视频以用于稍后在显示装置(例如,图1的显示装置32)上呈现。
以此方式,视频解码器30可执行本发明的一或多种技术。举例来说,视频解码器30的熵解码单元70可解码视频数据的CU。在解码视频数据时,视频解码器30的反颜色空间变换单元79可确定CU是使用颜色空间转换来编码。针对颜色分量,视频解码器30的反量化单元76可确定颜色分量的初始QP,及基于CU是使用颜色空间转换来编码而确定颜色分量的最终QP,以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和。视频解码器30的反量化单元76可基于颜色分量的最终QP来反量化CU的系数块,CU的系数块是基于颜色分量的样本值。一旦每一系数块已经反量化,视频解码器30的求和器80即可基于CU的经反量化系数块重建译码单元。
在一些实例中,针对一或多个颜色分量的颜色分量,可在图像参数集、序列参数集或图块标头中的一者中发信颜色分量的QP偏移。在一些其它实例中,多个颜色分量可包括三个颜色分量。在此些实例中,第一颜色分量的第一量化参数的第一量化参数偏移等于第二颜色分量的第二量化参数的第二量化参数偏移,第一量化参数偏移(及第二量化参数偏移)小于第三颜色分量的第三量化参数的第三量化参数偏移。在一些实例中,可进一步对CU执行解块滤波过程。在此些实例中,视频解码器30可使用每一颜色分量的初始QP而非最终QP。
在一些实例中,多个颜色分量包括明度分量及色度分量。在此些实例中,视频解码器30的解块单元(未图标)可至少部分基于明度分量的最终QP进一步确定明度边缘的边界强度。视频解码器30的解块单元可至少部分基于色度分量的最终QP确定色度边缘的边界强度。响应于确定明度边缘的边界强度不满足第一阈值,视频解码器30的解块单元可对明度边缘执行解块滤波过程。此外,响应于确定色度边缘的边界强度不满足第二阈值,视频解码器30的解块单元可对色度边缘执行解块滤波过程。
在一些其它实例中,所述CU为第一CU。在此些实例中,视频解码器30的反量化单元76可解码第二CU。在解码第二CU时,视频解码器30的反量化单元76可针对颜色分量确定颜色分量的QP,基于未使用颜色空间转换编码第二CU来设置颜色分量的最终QP值以使得颜色分量的最终QP值等于颜色分量的初始QP值,及基于颜色分量的最终QP反量化第二CU的系数块,第二CU的系数块是基于颜色分量的样本值。视频解码器30可进一步基于第二CU的一或多个经反量化系数块中的每一者来重建第二CU。
在一些实例中,针对颜色分量,颜色分量的QP偏移取决于CU的编码模式。在一些此些实例中,针对颜色分量,视频解码器30的反量化单元76可确定所述分量的QP偏移,以使得所述QP偏移在CU的编码模式为图像内模式或图像内BC模式时等于第一值,且在CU的编码模式为图像间模式时等于第二值,所述第一值不同于所述第二值。在其它此些实例中,针对颜色分量,视频解码器30的反量化单元76可确定所述分量的QP偏移,以使得所述QP偏移在CU的编码模式为图像内模式时等于第一值,且在CU的编码模式为图像内BC模式时等于第二值,所述第一值不同于所述第二值。
在一些实例中,多个颜色分量包括三个颜色分量。在此些实例中,量化参数偏移可等于(-5+6*BitInc、-5+6*BitInc、-3+6*BitInc)。在其它此些实例中,量化参数偏移可等于其它值,例如(-4+6*BitInc、-4+6*BitInc、-3+6*BitInc)、(-4+6*BitInc、-4+6*BitInc、-2+6*BitInc)或(-5+6*BitInc、-5+6*BitInc、-2+6*BitInc)。在任何情况下,BitInc可等于0、1或2。
在一些实例中,针对多个颜色分量中的颜色分量,颜色分量的QP偏移可取决于CU的图块类型为I图块类型、P图块类型还是B图块类型。在此些实例中,针对颜色分量,视频解码器30的反量化单元76可确定颜色分量的QP偏移在CU的图块类型为I图块类型时等于第一值,且在CU的图块类型为P图块类型或B图块类型时等于第二值,所述第一值不同于所述第二值。在其它此些实例中,针对颜色分量,反量化单元76可确定颜色分量的QP偏移在CU的图块类型为I图块类型时等于第一值,在CU的图块类型为P图块类型时等于第二值,且在CU的图块类型为B图块类型时等于第三值,所述第一值不同于所述第二值,所述第二值不同于所述第三值,且所述第一值不同于所述第三值。
在一些实例中,颜色空间转换的输入数据具有N位精度。在此些实例中,图像内/图像间预测之后CU的残余数据可在[-2N,2N-1]的范围内。在一些其它实例中,响应于确定使用图像内译码模式来译码CU,视频解码器30的图像内预测单元74可进一步使用相同色度预测模式来预测CU的所有色度块。在此些实例中,图像内预测单元74可进一步使用相同明度预测模式来预测CU的所有明度块。相同明度预测模式可与相同色度预测模式相同。
在以上技术的一些实例实施方案中,可在序列参数集中发现必需的语法元素。在下表中,斜体文本表示相对于HEVC标准的当前草案的附加物。粗体文本表示语法元素。在一些实例中,序列参数集RBSP可具有以下语法:
在此实例中,等于1的color_transform_enabled_flag指示赋能颜色变换。当语法元素color_transform_enabled_flag等于0时,不赋能颜色变换。当语法元素lossless_enable_flag等于1时,应用无损译码。另外,当color_transform_enabled_flag等于1时,使用初始YCoCg-R变换。当语法元素lossless_enable_flag等于0时,应用有损译码。另外,当color_transform_enabled_flag等于1时,使用初始YCoCg变换。
替代地,可仅在当chroma_format_idc等于3时发信最新引入的旗标。
替代地,可仅在chroma_format_idc等于3时发信最新引入的旗标,且不单独译码4:4:4色度格式的三个颜色分量。因此,以上条件‘if(chroma_format_idc==3)’可被‘if(chroma_format_idc==3&&!separate_colour_plane_flag)’替代。
此外,当color_transform_enabled_flag等于1,chroma_format_idc可等于3时,可应用约束条件。替代地,此外,当color_transform_enabled_flag等于1时,separate_colour_plane_flag可等于0。
在一些实例中,译码单元可具有以下语法:
在以上实例中,针对图像内模式,首先发信颜色变换旗标。当此旗标等于1时,可跳过intra_chroma_pred_mode的发信,其中色度分量共享与明度相同的模式。
替代地,在一些实例中,译码单元可具有以下语法:
替代地,当图像内BC模式被视为图像内模式时,即,对应CuPredMode[x0][y0]等于MODE_INTRA时,以上突出条件‘if(color_transform_enabled_flag&&(CuPredMode[x0][y0]==MODE_INTER||!intra_chroma_pred_mode[x0][y0])’可被‘if(color_transform_enabled_flag&&(CuPredMode[x0][y0]==MODE_INTER||intra_bc_flag[x0][y0]||!intra_chroma_pred_mode[x0][y0])’替代。替代地,在所有以上实例中,CuPredMode[x0][y0]==MODE_INTER可被CuPredMode[x0][y0]!=MODE_INTRA替代。
替代地,以上条件‘if(color_transform_enabled_flag&&(CuPredMode[x0][y0]==MODE_INTER||!intra_chroma_pred_mode[x0][y0])’可被‘if(color_transform_enabled_flag)’简单地替代。在此情况下,可满足当color_transform_enabled_flag等于1且当前CU为经图像内译码时色度模式及明度模式相同的约束条件。
在当前CU/PU/TU并非经无损译码(即,当cu_transquant_bypass_flag等于0时),可调用以下变化。在一个实例中,当应用颜色变换时,解量化过程中使用的QP可变化。然而,解块过程中使用的QpY可能不变,即,不考虑delta QP(deltaQPC0)。
在解码过程中,针对量化参数的导出过程,此过程的输入为指定相对于当前图像的左上方明度样本的当前明度译码块的左上方样本的明度位置(xCb,yCb)。在此过程中,导出变量QpY、明度量化参数Qp'Y及色度量化参数Qp'Cb及Qp'Cr
明度位置(xQg,yQg)指定当前量化群组的左上方明度样本相对于当前图像的左上方明度样本。水平位置xQg及垂直位置yQg分别设置为等于xCb-(xCb&((1<<Log2MinCuQpDeltaSize)-1))及yCb-(yCb&((1<<Log2MinCuQpDeltaSize)-1))。量化群组的明度大小Log2MinCuQpDeltaSize确定共享相同qPY_PRED的译码树型块内的最小区域的明度大小。
可由以下有序步骤导出经预测明度量化参数qPY_PRED:1)可导出变量qPY_PREV。如果以下条件中的一或多者为真实的,那么qPY_PREV设置为等于SliceQpY:当前量化群组为图块中的第一量化群组,当前量化群组为色砖中的第一量化群组,或当前量化群组为译码树型块列中的第一量化群组,且entropy_coding_sync_enabled_flag等于1。否则,qPY_PREV设置为等于在解码次序中的先前量化群组中的最后译码单元的明度量化参数QpY
2)调用以z扫描次序的块的可用性导出过程,位置(xCurr,yCurr)设置为等于(xCb,yCb)且相邻位置(xNbY,yNbY)设置为等于(xQg-1,yQg)作为输入,且将输出指派给availableA。变量qPY_A导出如下:如果以下条件中的一或多者为真实的,那么qPY_A设置为等于qPY_PREV:availableA等于FALSE或含有覆盖明度位置(xQg-1,yQg)的明度译码块的译码树型块的译码树型块地址ctbAddrA不等于CtbAddrInTs,其中ctbAddrA导出如下:
xTmp=(xQg-1)>>Log2MinTrafoSize
yTmp=yQg>>Log2MinTrafoSize
minTbAddrA=MinTbAddrZs[xTmp][yTmp]
ctbAddrA=(minTbAddrA>>2)*(CtbLog2SizeY-Log2MinTrafoSize)
否则,qPY_A设置为等于含有覆盖(xQg-1,yQg)的明度译码块的译码单元的明度量化参数QpY
3)调用以z扫描次序的块的可用性导出过程,位置(xCurr,yCurr)设置为等于(xCb,yCb)且相邻位置(xNbY,yNbY)设置为等于(xQg,yQg-1)作为输入。将输出指派给availableB。导出变量qPY_B。如果以下条件中的一或多者为真实的,那么qPY_B设置为等于qPY_PREV:availableB等于FALSE或含有覆盖明度位置(xQg,yQg-1)的明度译码块的译码树型块的译码树型块地址ctbAddrB不等于CtbAddrInTs,其中ctbAddrB导出如下:
xTmp=xQg>>Log2MinTrafoSize
yTmp=(yQg-1)>>Log2MinTrafoSize
minTbAddrB=MinTbAddrZs[xTmp][yTmp]
ctbAddrB=(minTbAddrB>>2)*(CtbLog2SizeY-Log2MinTrafoSize)
否则,qPY_B设置为等于含有覆盖(xQg,yQg-1)的明度译码块的译码单元的明度量化参数QpY。
经预测的明度量化参数qPY_PRED可导出如下:
qPY_PRED=(qPY_A+qPY_B+1)>>1
变量QpY可导出如下:
QpY=((qPY_PRED+CuQpDeltaVal+52+2*QpBdOffsetY)%(52+QpBdOffsetY))-QpBdOffsetY
明度量化参数Qp'Y可导出如下:
Qp'Y=QpY+QpBdOffsetY
当ChromaArrayType不等于0时,变量qPiCb及qPiCr导出如下:
qPiCb=Clip3(-QpBdOffsetC,57,QpY+pps_cb_qp_offset+slice_cb_qp_offset+CuQpOffsetCb)
qPiCr=Clip3(-QpBdOffsetC,57,QpY+pps_cr_qp_offset+slice_cr_qp_offset+CuQpOffsetCr)
如果ChromaArrayType等于1,那么变量qPCb及qPCr基于等于qPiCb及qPiCr的索引qPi分别设置为等于QpC的值。否则,变量qPCb及qPCr基于等于qPiCb及qPiCr的索引qPi分别设置为等于Min(qPi,51)。
Cb及Cr分量的色度量化参数Qp'Cb及Qp'Cr导出如下:
Qp'Cb=qPCb+QpBdOffsetC
Qp'Cr=qPCr+QpBdOffsetC
依等于1的ChromaArrayType的qPi而变化的Qpc的规格如下:
qPi <30 30 31 32 33 34 35 36 37 38 39 40 41 42 43 >43
QpC =qPi 29 30 31 32 33 33 34 34 35 35 36 36 37 37 =qPi-6
在解量化过程中,可导出每一分量索引(cIdx)的量化参数qP。此过程的输入可为指定相对于当前图像的左上方明度样本的当前明度变换块的左上方样本的明度位置(xTbY,yTbY)、指定相对于译码块的当前块的层级深度的变量trafoDepth、指定当前块的颜色分量的变量cIdx及指定当前变换块的大小的变量nTbS。此过程的输出可为具有元素r[x][y]的残余样本的(nTbS)x(nTbS)数组。
可导出量化参数qP。如果cIdx等于0,
qP=Qp'Y+(color_transform_flag[xTbY][yTbY]?deltaQPC0:0)
否则,如果cIdx等于1,
qP=Qp'Cb+(color_transform_flag[xTbY][yTbY]?deltaQPC1:0)
否则(cIdx等于2),
qP=Qp'C+(color_transform_flag[xTbY][yTbY]?deltaQPC2:0)
在一个实例中,deltaQPC0、deltaQPC1及deltaQPC2可分别设置为-5、-5及-3。在另一实例中,解块过程中使用的QpY不变,即,将delta QP(deltaQPC0)考虑在内。在解码过程中,针对量化参数的导出过程,此过程的输入可为指定相对于当前图像的左上方明度样本的当前明度译码块的左上方样本的明度位置(xCb,yCb)。在此过程中,可导出变量QpY、明度量化参数Qp'Y及色度量化参数Qp'Cb及Qp'Cr
明度位置(xQg,yQg)指定相对于当前图像的左上方明度样本的当前量化群组的左上方明度样本。水平位置xQg及垂直位置yQg分别设置为等于xCb-(xCb&((1<<Log2MinCuQpDeltaSize)-1))及yCb-(yCb&((1<<Log2MinCuQpDeltaSize)-1))。量化群组的明度大小Log2MinCuQpDeltaSize确定共享相同qPY_PRED的译码树型块内的最小区域的明度大小。
可由以下有序步骤导出经预测明度量化参数qPY_PRED:1)可导出变量qPY_PREV。如果以下条件中的一或多者为真实的,那么qPY_PREV设置为等于SliceQpY:当前量化群组为图块中的第一量化群组,当前量化群组为色砖中的第一量化群组,或当前量化群组为译码树型块列中的第一量化群组,且entropy_coding_sync_enabled_flag等于1。否则,qPY_PREV设置为等于在解码次序中的先前量化群组中的最后译码单元的明度量化参数QpY
2)调用以z扫描次序的块的可用性导出过程,位置(xCurr,yCurr)设置为等于(xCb,yCb)且相邻位置(xNbY,yNbY)设置为等于(xQg-1,yQg)作为输入,且将输出指派给availableA。变量qPY_A导出如下:如果以下条件中的一或多者为真实的,那么qPY_A设置为等于qPY_PREV:availableA等于FALSE或含有覆盖明度位置(xQg-1,yQg)的明度译码块的译码树型块的译码树型块地址ctbAddrA不等于CtbAddrInTs,其中ctbAddrA导出如下:
xTmp=(xQg-1)>>Log2MinTrafoSize
yTmp=yQg>>Log2MinTrafoSize
minTbAddrA=MinTbAddrZs[xTmp][yTmp]
ctbAddrA=(minTbAddrA>>2)*(CtbLog2SizeY-Log2MinTrafoSize)
否则,qPY_A设置为等于含有覆盖(xQg-1,yQg)的明度译码块的译码单元的明度量化参数QpY
3)调用以z扫描次序的块的可用性导出过程,位置(xCurr,yCurr)设置为等于(xCb,yCb)且相邻位置(xNbY,yNbY)设置为等于(xQg,yQg-1)作为输入。将输出指派给availableB。导出变量qPY_B。如果以下条件中的一或多者为真实的,那么qPY_B设置为等于qPY_PREV:availableB等于FALSE或含有覆盖明度位置(xQg,yQg-1)的明度译码块的译码树型块的译码树型块地址ctbAddrB不等于CtbAddrInTs,其中ctbAddrB导出如下:
xTmp=xQg>>Log2MinTrafoSize
yTmp=(yQg-1)>>Log2MinTrafoSize
minTbAddrB=MinTbAddrZs[xTmp][yTmp]
ctbAddrB=(minTbAddrB>>2)*(CtbLog2SizeY-Log2MinTrafoSize)
否则,qPY_B设置为等于含有覆盖(xQg,yQg-1)的明度译码块的译码单元的明度量化参数QpY
经预测的明度量化参数qPY_PRED可导出如下:
qPY_PRED=(qPY_A+qPY_B+1)>>1
变量QpY可导出如下:
QpY=((qPY_PRED+CuQpDeltaVal+52+2*QpBdOffsetY)%(52+QpBdOffsetY))-QpBdOffsetY
QpY=QpY+(color_transform_flag[xCb][yCb]?deltaQPC0:0)
明度量化参数Qp'Y可导出如下:
Qp'Y=QpY+QpBdOffsetY
当ChromaArrayType不等于0时,变量qPiCb及qPiCr可导出如下:
qPiCb=Clip3(-QpBdOffsetC,57,QpY+pps_cb_qp_offset+slice_cb_qp_offset+CuQpOffsetCb)
qPiCr=Clip3(-QpBdOffsetC,57,QpY+pps_cr_qp_offset+slice_cr_qp_offset+CuQpOffsetCr)
如果ChromaArrayType等于1,那么变量qPCb及qPCr可基于等于qPiCb及qPiCr的索引qPi分别经设置等于QpC的值。否则,变量qPCb及qPCr可基于等于qPiCb及qPiCr的索引qPi分别设置为等于Min(qPi,51)。Cb及Cr分量的色度量化参数Qp'Cb及Qp'Cr可导出如下:
Qp'Cb=qPCb+QpBdOffsetC
Qp'Cr=qPCr+QpBdOffsetC
依等于1的ChromaArrayType的qPi而变化的Qpc的规格如下:
qPi <30 30 31 32 33 34 35 36 37 38 39 40 41 42 43 >43
QpC =qPi 29 30 31 32 33 33 34 34 35 35 36 36 37 37 =qPi-6
Qp'Cb=Qp'Cb+(color_transform_flag[xCb][yCb]?deltaQPC1:0)
Qp'Cr=Qp'Cr+(color_transform_flag[xCb][yCb]?deltaQPC2:0)
在解量化过程中,每一分量索引(cIdx)的量化参数qP可导出如下。如果cIdx等于0,
qP=Qp'Y+(color_transform_flag[xTbY][yTbY]?deltaQPC0:0)
否则,如果cIdx等于1,
qP=Qp'Cb+(color_transform_flag[xTbY][yTbY]?deltaQPC1:0)
否则(cIdx等于2),
qP=Qp'C+(color_transform_flag[xTbY][yTbY]?deltaQPC2:0)
在一个实例中,deltaQPC0、deltaQPC1及deltaQPC2可分别设置为-5、-5及-3。
图8为说明根据本发明的技术的用于编码当前块的实例方法的流程图。当前块可包括当前CU或当前CU的部分。尽管关于视频编码器20(图1及6)加以描述,但应理解,其它装置可经配置以执行类似于图8的方法的方法。
在此实例中,视频编码器20初始地产生当前CU的PU的一或多个预测性块(150)。在一些实例中,视频编码器20使用图像间预测、图像内预测或图像内BC预测来产生一或多个预测性块。视频编码器20可随后计算当前CU的每一TU的一或多个残余块(152)。视频编码器20可计算当前CU的TU的残余块,以使得残余块的每一相应样本值等于当前CU的初始、未经编码的译码块的相应样本值与当前CU的PU的预测性块的对应相应样本值之间的差值。
另外,视频编码器20可确定是否使用颜色空间转换来编码当前CU(154)。针对多个颜色分量中的相应颜色分量(例如,明度分量及一或多个色度分量),视频编码器20可确定相应颜色分量的相应初始QP(156)。此外,视频编码器20可基于当前CU是使用颜色空间转换编码来设置相应颜色分量的最终QP,以使得相应颜色分量的最终QP等于相应颜色分量的初始QP与相应颜色分量的相应非零QP偏移的和(158)。即,在一些实例中,响应于确定使用颜色空间转换来编码当前CU,视频编码器20设置相应颜色分量的最终QP以使得相应颜色分量的最终QP等于相应颜色分量的初始QP与相应颜色分量的相应非零QP偏移的和。视频编码器20可基于相应颜色分量的最终QP来量化CU的相应系数块,CU的相应系数块是基于相应颜色分量的样本值(160)。
视频编码器20可扫描残余块的经量化变换系数(162)。在扫描期间或扫描之后,视频编码器20可熵编码表示系数的各种语法元素(164)。举例来说,视频编码器20可使用CAVLC或CABAC编码表示系数的语法元素。视频编码器20可进一步输出包括表示经量化系数块中的每一者的一或多个经熵编码语法元素的视频数据位流(166)。
在一些实例中,针对颜色分量,可在图像参数集、序列参数集或图块标头中的一者中发信颜色分量的QP偏移。在一些其它实例中,多个颜色分量可包括三个颜色分量。在此些实例中,第一颜色分量的第一量化参数的第一量化参数偏移等于第二颜色分量的第二量化参数的第二量化参数偏移,第一量化参数偏移(及第二量化参数偏移)小于第三颜色分量的第三量化参数的第三量化参数偏移。在一些实例中,可进一步对CU执行解块滤波过程。在此些实例中,视频编码器20可使用每一颜色分量的初始QP而非最终QP。
在一些实例中,所述CU包含多个颜色分量,所述多个颜色分量包括明度分量及色度分量。在此些实例中,视频编码器20可至少部分基于明度分量的最终QP进一步确定明度边缘的边界强度。视频编码器20可至少部分基于色度分量的最终QP进一步确定色度边缘的边界强度。响应于确定明度边缘的边界强度不满足第一阈值,视频编码器20可对明度边缘执行解块滤波过程。此外,响应于确定色度边缘的边界强度不满足第二阈值,视频编码器20可对色度边缘执行解块滤波过程。
在一些其它实例中,所述CU为第一CU。在此些实例中,视频编码器20可编码第二CU。在编码第二CU时,视频编码器20可基于未使用颜色空间转换编码第二CU来确定第二QP值,及基于颜色分量的第二QP值量化第二CU的系数块,第二CU的系数块是基于颜色分量的样本值。视频编码器20可进一步输出包括表示经量化第二系数块中的每一者的一或多个经熵编码语法元素的第二集合的视频数据位流。
在一些实例中,针对颜色分量,颜色分量的QP偏移取决于CU的编码模式。在一些此些实例中,针对颜色分量,视频编码器20可确定所述分量的QP偏移,以使得所述QP偏移在CU的编码模式为图像内模式或图像内块拷贝(BC)模式时等于第一值,且在CU的编码模式为图像间模式时等于第二值,所述第一值不同于所述第二值。在其它此些实例中,针对颜色分量,视频编码器20可确定所述分量的QP偏移,以使得所述QP偏移在CU的编码模式为图像内模式时等于第一值,且在CU的编码模式为图像内块拷贝(BC)模式时等于第二值,所述第一值不同于所述第二值。
在一些实例中,多个颜色分量包括三个颜色分量。在此些实例中,量化参数偏移可等于(-5+6*BitInc、-5+6*BitInc、-3+6*BitInc)。在其它此些实例中,量化参数偏移可等于其它值,例如(-4+6*BitInc、-4+6*BitInc、-3+6*BitInc)、(-4+6*BitInc、-4+6*BitInc、-2+6*BitInc)或(-5+6*BitInc、-5+6*BitInc、-2+6*BitInc)。在任何情况下,BitInc可等于0、1或2。
在一些实例中,针对颜色分量,颜色分量的QP偏移可取决于CU的图块类型为I图块类型、P图块类型还是B图块类型。在此些实例中,针对颜色分量,视频编码器20可确定颜色分量的QP偏移在CU的图块类型为I图块类型时等于第一值,且在CU的图块类型为P图块类型或B图块类型时等于第二值,所述第一值不同于所述第二值。在其它此些实例中,针对多个颜色分量中的颜色分量,视频编码器20可确定颜色分量的QP偏移在CU的图块类型为I图块类型时等于第一值,在CU的所述图块类型为P图块类型时等于第二值,且在CU的图块类型为B图块类型时等于第三值,所述第一值不同于所述第二值,所述第二值不同于所述第三值,且所述第一值不同于所述第三值。
在一些实例中,颜色空间转换的输入数据具有N位精度。在此些实例中,图像内/图像间预测之后CU的残余数据可在[-2N,2N-1]的范围内。在一些其它实例中,响应于确定所述CU是使用图像内译码模式译码,视频编码器20可使用相同色度预测模式进一步预测CU的所有色度块。在此些实例中,视频编码器20可使用相同明度预测模式进一步预测CU的所有明度块。相同明度预测模式可与相同色度预测模式相同。
图9为说明用于解码视频数据的当前块的实例方法的流程图。本发明描述参照当前CU的图9的实例方法。然而,类似实例可能具有其它类型的视频块。此外,尽管关于视频解码器30(图1及7)加以描述,但应理解,其它装置可经配置以执行类似于图9的方法的方法。
视频解码器30可(例如)使用图像内或图像间预测模式产生当前CU的PU的一或多个预测性块(200)以计算CU的经预测块。视频解码器30还可接收表示当前CU的TU的变换系数块的变换系数的经熵编码语法元素(202)。视频解码器30可熵解码经熵编码数据以重建当前CU的TU的变换系数块的变换系数(204)。视频解码器30可随后反扫描经重建的变换系数以重建当前CU的TU的变换系数块(206)。
视频解码器30可确定使用颜色空间转换来编码CU(210)。针对多个颜色分量中的颜色分量,视频解码器30可确定颜色分量的初始QP(212)。另外,视频解码器30可基于当前CU是使用颜色空间转换编码来确定颜色分量的最终QP,以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和(214)。举例来说,响应于使用颜色空间转换来编码当前CU,视频解码器30可设置颜色分量的最终QP,以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和。视频解码器30可基于颜色分量的最终QP来反量化当前CU的系数块,当前CU的系数块是基于颜色分量的样本值(216)。一旦每一系数块已经反量化,视频解码器30即可基于当前CU的经反量化系数块重建当前CU(218)。
在一些实例中,针对一或多个颜色分量的颜色分量,可在图像参数集、序列参数集或图块标头中的一者中发信颜色分量的QP偏移。在一些其它实例中,多个颜色分量可包括三个颜色分量。在此些实例中,第一颜色分量的第一量化参数的第一量化参数偏移等于第二颜色分量的第二量化参数的第二量化参数偏移,第一量化参数偏移(及第二量化参数偏移)小于第三颜色分量的第三量化参数的第三量化参数偏移。在一些实例中,可进一步对CU执行解块滤波过程。在此些实例中,视频解码器30可使用每一颜色分量的初始QP而非最终QP。
在一些实例中,多个颜色分量包括明度分量及色度分量。在此些实例中,视频解码器30可至少部分基于明度分量的最终QP进一步确定明度边缘的边界强度。视频解码器30可至少部分基于色度分量的最终QP进一步确定色度边缘的边界强度。响应于确定明度边缘的边界强度不满足第一阈值,视频解码器30可对明度边缘执行解块滤波过程。此外,响应于确定色度边缘的边界强度不满足第二阈值,视频解码器30可对色度边缘执行解块滤波过程。
在一些其它实例中,所述CU为第一CU。在此些实例中,视频解码器30可解码第二CU。在解码第二CU时,视频解码器30可针对颜色分量确定颜色分量的QP,基于未使用颜色空间转换编码第二CU来设置颜色分量的最终QP值以使得颜色分量的最终QP值等于颜色分量的初始QP值,及基于颜色分量的最终QP反量化第二CU的系数块,第二CU的系数块是基于颜色分量的样本值。视频解码器30可进一步基于第二CU的一或多个经反量化系数块中的每一者来重建第二CU。
在一些实例中,针对颜色分量,颜色分量的QP偏移取决于CU的编码模式。在一些此些实例中,针对颜色分量,视频解码器30可确定所述分量的QP偏移,以使得所述QP偏移在CU的编码模式为图像内模式或图像内BC模式时等于第一值,且在CU的编码模式为图像间模式时等于第二值,所述第一值不同于所述第二值。在其它此些实例中,针对颜色分量,视频解码器30可确定所述分量的QP偏移,以使得所述QP偏移在CU的编码模式为图像内模式时等于第一值,且在CU的编码模式为图像内BC模式时等于第二值,所述第一值不同于所述第二值。
在一些实例中,多个颜色分量包括三个颜色分量。在此些实例中,量化参数偏移可等于(-5+6*BitInc、-5+6*BitInc、-3+6*BitInc)。在其它此些实例中,量化参数偏移可等于其它值,例如(-4+6*BitInc、-4+6*BitInc、-3+6*BitInc)、(-4+6*BitInc、-4+6*BitInc、-2+6*BitInc)或(-5+6*BitInc、-5+6*BitInc、-2+6*BitInc)。在任何情况下,BitInc可等于0、1或2。
在一些实例中,针对颜色分量,颜色分量的QP偏移可取决于CU的图块类型为I图块类型、P图块类型还是B图块类型。在此些实例中,针对颜色分量,视频解码器30可确定颜色分量的QP偏移在CU的图块类型为I图块类型时等于第一值,且在CU的图块类型为P图块类型或B图块类型时等于第二值,所述第一值不同于所述第二值。在其它此些实例中,针对颜色分量,视频解码器30可确定颜色分量的QP偏移在CU的图块类型为I图块类型时等于第一值,在CU的所述图块类型为P图块类型时等于第二值,且在CU的图块类型为B图块类型时等于第三值,所述第一值不同于所述第二值,所述第二值不同于所述第三值,且所述第一值不同于所述第三值。
在一些实例中,颜色空间转换的输入数据具有N位精度。在此些实例中,图像内/图像间预测之后CU的残余数据可在[-2N,2N-1]的范围内。在一些其它实例中,响应于确定使用图像内译码模式来译码CU,视频解码器30可使用相同色度预测模式进一步预测CU的所有色度块。在此些实例中,视频解码器30可使用相同明度预测模式进一步预测CU的所有明度块。相同明度预测模式可与相同色度预测模式相同。
图10为说明根据本发明的技术的用于编码CU的实例方法的流程图。当前块可包括当前CU或当前CU的一部分。尽管关于视频编码器20(图1及2)加以描述,但应理解,其它装置可经配置以执行类似于图10的方法的方法。
在编码CU时,视频编码器20可确定是否使用颜色空间转换来编码当前CU(254)。针对颜色分量(例如,明度分量或色度分量),视频编码器20可确定颜色分量的初始QP(256)。此外,视频编码器20可基于当前CU是使用颜色空间转换编码来设置颜色分量的最终QP,以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和(258)。换句话说,在一些实例中,响应于确定使用颜色空间转换来编码当前CU,视频编码器20设置颜色分量的最终QP以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和。视频编码器20可基于颜色分量的最终QP来量化CU的系数块,CU的系数块是基于所述颜色分量的样本值(260)。视频编码器20可进一步输出包括表示经量化系数块中的每一者的一或多个经熵编码语法元素的视频数据位流(266)。
图11为说明用于解码视频数据的块的实例方法的流程图。本发明描述参照当前CU的图9的实例方法。然而,类似实例可能具有其它类型的视频块。此外,尽管关于视频解码器30(图1及7)加以描述,但应理解,其它装置可经配置以执行类似于图11的方法的方法。
在解码CU时,视频解码器30可确定使用颜色空间转换来编码CU(270)。视频解码器30可确定颜色分量的初始QP(272)。另外,视频解码器30可基于当前CU是使用颜色空间转换编码来确定颜色分量的最终QP,以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和(274)。举例来说,响应于使用颜色空间转换来编码当前CU,视频解码器30可设置颜色分量的最终QP,以使得颜色分量的最终QP等于颜色分量的初始QP与颜色分量的非零QP偏移的和。视频解码器30可基于颜色分量的最终QP来反量化当前CU的系数块,当前CU的系数块是基于颜色分量的样本值(276)。视频解码器30可基于当前CU的经反量化系数块重建当前CU(280)。
应认识到,取决于实例,本文中所描述的技术中的任一者的某些动作或事件可以不同序列执行、可添加、合并或完全省略(例如,对于实践所述技术来说并非所有所描述的动作或实践皆为必要的)。此外,在某些实例中,动作或事件可(例如)经由多线程处理、中断处理或多个处理器同时而非顺序地执行。
在一或多项实例中,所描述功能可以硬件、软件、固件或其任何组合来实施。如果以软件实施,那么所述功能可作为一或多个指令或程序代码存储于计算机可读媒体上或经由计算机可读媒体进行传输,且由基于硬件的处理单元执行。计算机可读媒体可包含计算机可读存储媒体,其对应于有形媒体(例如数据存储媒体),或包含有助于将计算机程序从一处传送到另一处(例如,根据通信协议)的任何媒体的通信媒体。以此方式,计算机可读媒体大体上可对应于(1)非暂时性的有形计算机可读存储媒体,或(2)例如信号或载波的通信媒体。数据存储媒体可为可由一或多个计算机或一或多个处理器存取以检索用于实施本发明中所描述的技术的指令、码及/或数据结构的任何可用媒体。计算机程序产品可包含计算机可读媒体。
通过实例而非限制,此些计算机可读存储媒体可包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储器、磁盘存储器或其它磁性存储装置、快闪存储器或可用于存储呈指令或数据结构形式的所要程序代码且可由计算机存取的任何其它媒体。又,任何连接被适当地称为计算机可读媒体。举例来说,如果使用同轴电缆、光纤电缆、双绞线、数字用户线(DSL)或无线技术(例如红外线、无线电及微波)从网站、服务器或其它远程源传输指令,那么同轴电缆、光纤电缆、双绞线、DSL或无线技术(例如红外线、无线电及微波)包含于媒体的定义中。然而,应理解,计算机可读存储媒体及数据存储媒体不包含连接、载波、信号或其它暂时性媒体,而是针对非暂时性有形存储媒体。如本文所使用,磁盘及光盘包含光盘(CD)、激光光盘、光学光盘、数字多功能光盘(DVD)、软性磁盘及蓝光(Blu-ray)光盘,其中磁盘通常以磁性方式再现数据,而光盘用激光以光学方式再现数据。以上各物的组合也应包含于计算机可读媒体的范围内。
指令可由一或多个处理器执行,所述一或多个处理器例如一或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、场可编程逻辑数组(FPGA)或其它等效的整合或离散逻辑电路。因此,如本文中所使用的术语“处理器”可指前述结构或适合于实施本文中所描述的技术的任何其它结构中的任一者。另外,在一些方面中,可在经配置用于编码及解码的专用硬件及/或软件模块内提供本文中所描述的功能性,或将本文中所描述的功能性并入于组合式编解码器中。又,所述技术可完全实施于一或多个电路或逻辑组件中。
本发明的技术可实施于广泛多种装置或装备中,包含无线手机、集成电路(IC)或一组IC(例如,芯片组)。本发明中描述各种组件、模块或单元以强调经配置以执行所揭示技术的装置的功能方面,但未必要求由不同硬件单元来实现。实情为,如上文所描述,可将各种单元组合于编解码器硬件单元中,或由互操作性硬件单元(包含如上文所描述的一或多个处理器)的集合而结合合适软件及/或固件来提供所述单元。
已描述本发明的各种实例。涵盖所描述的系统、操作或功能的任何组合。这些及其它实例处于以下权利要求书的范围内。

Claims (74)

1.一种解码视频数据的方法,所述方法包括:
确定所述视频数据的译码单元CU是使用颜色空间转换编码;
确定颜色分量的初始量化参数QP;
基于所述CU是使用所述颜色空间转换编码,确定所述颜色分量的最终QP以使得所述颜色分量的所述最终QP等于所述颜色分量的所述初始QP与所述颜色分量的非零QP偏移的和;及
基于所述颜色分量的所述最终QP,反量化所述CU的系数块,所述CU的所述系数块是基于所述颜色分量的样本值;及
基于所述CU的所述经反量化系数块重建所述CU。
2.根据权利要求1所述的方法,其中所述颜色分量的所述QP偏移用以下中的一者发信:图像参数集、序列参数集及图块标头。
3.根据权利要求1所述的方法,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述量化参数偏移为第一量化参数偏移,其中所述量化参数为第一量化参数,且其中所述第一颜色分量的所述第一量化参数的所述第一量化参数偏移等于第二颜色分量的第二量化参数的第二量化参数偏移,且其中所述第一量化参数偏移小于第三颜色分量的第三量化参数的第三量化参数偏移。
4.根据权利要求1所述的方法,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述多个颜色分量包括明度分量及色度分量,所述方法进一步包括:
至少部分基于所述明度分量的所述最终QP确定明度边缘的边界强度;
至少部分基于所述色度分量的所述最终QP确定色度边缘的边界强度;
响应于确定所述明度边缘的所述边界强度不满足第一阈值,对所述明度边缘执行解块滤波过程;及
响应于确定所述色度边缘的所述边界强度不满足第二阈值,对所述色度边缘执行所述解块滤波过程。
5.根据权利要求1所述的方法,其进一步包括:
使用所述颜色分量的所述初始QP对所述CU执行解块滤波过程。
6.根据权利要求1所述的方法,其中所述CU为第一CU,所述方法进一步包括:
确定第二CU的颜色分量的第二QP;及
响应于未使用所述颜色空间转换编码所述第二CU,基于所述颜色分量的所述第二QP反量化所述第二CU的系数块,所述第二CU的所述系数块是基于所述颜色分量的样本值;及
基于所述第二CU的所述一或多个经反量化系数块中的每一者重建所述第二CU。
7.根据权利要求1所述的方法,其中所述颜色分量的所述QP偏移取决于所述CU的编码模式。
8.根据权利要求7所述的方法,其进一步包括确定所述分量的所述QP偏移,以使得所述颜色分量的所述QP偏移在所述CU的所述编码模式为图像内模式或图像内块拷贝BC模式时等于第一值,且在所述CU的所述编码模式为图像间模式时等于第二值,所述第一值不同于所述第二值。
9.根据权利要求7所述的方法,其进一步包括确定所述分量的所述QP偏移,以使得所述颜色分量的所述QP偏移在所述CU的所述编码模式为图像内模式时等于第一值,且在所述CU的所述编码模式为图像内块拷贝BC模式或图像间模式时等于第二值,所述第一值不同于所述第二值。
10.根据权利要求1所述的方法,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述多个颜色分量包括三个颜色分量,其中所述三个颜色分量中的每一者与相应QP偏移相关联,且其中所述相应QP偏移等于(-5+6*BitInc、-5+6*BitInc、-3+6*BitInc),其中BitInc等于0、1或2中的一者。
11.根据权利要求1所述的方法,其中所述颜色分量的所述QP偏移取决于所述CU的图块类型为I图块类型、P图块类型还是B图块类型。
12.根据权利要求11所述的方法,其进一步包括:确定所述颜色分量的所述QP偏移在所述CU的所述图块类型为所述I图块类型时等于第一值,且在所述CU的所述图块类型为所述P图块类型或所述B图块类型时等于第二值,所述第一值不同于所述第二值。
13.根据权利要求11所述的方法,其进一步包括:
确定所述颜色分量的所述QP偏移在所述CU的所述图块类型为所述I图块类型时等于第一值,在所述CU的所述图块类型为所述P图块类型时等于第二值,且在所述CU的所述图块类型为所述B图块类型时等于第三值,所述第一值不同于所述第二值,所述第二值不同于所述第三值,且所述第一值不同于所述第三值。
14.根据权利要求1所述的方法,其中所述颜色空间转换的输入数据具有N位精度,且图像内/图像间预测之后所述CU的残余数据在[-2N,2N-1]的范围内,所述方法进一步包括:
在执行所述颜色空间转换过程之后,剪辑经变换残余数据以使得所述经变换残余数据在所述范围内。
15.根据权利要求1所述的方法,其进一步包括:
响应于确定所述CU是使用图像内译码模式译码:
使用相同色度预测模式预测所述CU的所有色度块;
响应于所述CU仅具有一个预测单元PU,使用相同明度预测模式预测所述CU的所有明度块,其中所述相同明度预测模式与所述相同色度预测模式相同;及
响应于所述CU具有多个PU,使用所述相同明度预测模式预测所述多个PU中的第一PU的第一明度块。
16.一种用于解码视频数据的装置,所述装置包括:
存储器,其经配置以存储所述视频数据;及
一或多个处理器,其经配置以:
确定所述视频数据的译码单元CU是使用颜色空间转换编码;
确定所述颜色分量的初始量化参数QP;
基于所述CU是使用所述颜色空间转换编码,确定所述颜色分量的最终QP以使得所述颜色分量的所述最终QP等于所述颜色分量的所述初始QP与所述颜色分量的非零QP偏移的和;及
基于所述颜色分量的所述最终QP,反量化所述CU的系数块,所述CU的所述系数块是基于所述颜色分量的样本值;及
基于所述CU的所述经反量化系数块重建所述译码单元。
17.根据权利要求16所述的装置,其中所述颜色分量的所述QP偏移用以下中的一者发信:图像参数集、序列参数集及图块标头。
18.根据权利要求16所述的装置,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述量化参数偏移为第一量化参数偏移,其中所述量化参数为第一量化参数,且其中所述第一颜色分量的所述第一量化参数的所述第一量化参数偏移等于第二颜色分量的第二量化参数的第二量化参数偏移,且其中所述第一量化参数偏移小于第三颜色分量的第三量化参数的第三量化参数偏移。
19.根据权利要求16所述的装置,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述多个颜色分量包括明度分量及色度分量,其中所述一或多个处理器经进一步配置以:
至少部分基于所述明度分量的所述最终QP确定明度边缘的边界强度;
至少部分基于所述色度分量的所述最终QP确定色度边缘的边界强度;
响应于确定所述明度边缘的所述边界强度不满足第一阈值,对所述明度边缘执行解块滤波过程;及
响应于确定所述色度边缘的所述边界强度不满足第二阈值,对所述色度边缘执行所述解块滤波过程。
20.根据权利要求16所述的装置,其中所述一或多个处理器经进一步配置以:
使用所述颜色分量的所述初始QP对所述CU执行解块滤波过程。
21.根据权利要求16所述的装置,其中所述CU为第一CU,其中所述一或多个处理器经进一步配置以:
确定第二CU的颜色分量的第二QP;及
响应于未使用所述颜色空间转换编码所述第二CU,基于所述颜色分量的所述第二QP反量化所述第二CU的系数块,所述第二CU的所述系数块是基于所述颜色分量的样本值;及
基于所述第二CU的所述一或多个经反量化系数块中的每一者重建所述第二CU。
22.根据权利要求16所述的装置,其中所述颜色分量的所述QP偏移取决于所述CU的编码模式。
23.根据权利要求22所述的装置,其中所述一或多个处理器经进一步配置以确定所述颜色分量的所述QP偏移,以使得所述颜色分量的所述QP偏移在所述CU的所述编码模式为图像内模式或图像内块拷贝BC模式时等于第一值,且在所述CU的所述编码模式为图像间模式时等于第二值,所述第一值不同于所述第二值。
24.根据权利要求22所述的装置,其中所述一或多个处理器经进一步配置以确定所述颜色分量的所述QP偏移,以使得所述颜色分量的所述QP偏移在所述CU的所述编码模式为图像内模式时等于第一值,且在所述CU的所述编码模式为图像内块拷贝BC模式或图像间模式时等于第二值,所述第一值不同于所述第二值。
25.根据权利要求16所述的装置,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述多个颜色分量包括三个颜色分量,其中所述三个颜色分量中的每一者与相应QP偏移相关联,且其中所述相应QP偏移等于(-5+6*BitInc、-5+6*BitInc、-3+6*BitInc),其中BitInc等于0、1或2中的一者。
26.根据权利要求16所述的装置,其中所述颜色分量的所述QP偏移取决于所述CU的图块类型为I图块类型、P图块类型还是B图块类型。
27.根据权利要求26所述的装置,其中所述一或多个处理器经进一步配置以:
确定所述颜色分量的所述QP偏移在所述CU的所述图块类型为所述I图块类型时等于第一值,且在所述CU的所述图块类型为所述P图块类型或所述B图块类型时等于第二值,所述第一值不同于所述第二值。
28.根据权利要求26所述的装置,其中所述一或多个处理器经进一步配置以:
确定所述颜色分量的所述QP偏移在所述CU的所述图块类型为所述I图块类型时等于第一值,在所述CU的所述图块类型为所述P图块类型时等于第二值,且在所述CU的所述图块类型为所述B图块类型时等于第三值,所述第一值不同于所述第二值,所述第二值不同于所述第三值,且所述第一值不同于所述第三值。
29.根据权利要求16所述的装置,其中所述颜色空间转换的输入数据具有N位精度,且图像内/图像间预测之后所述CU的残余数据在[-2N,2N-1]的范围内,其中所述一或多个处理器经进一步配置以:
在执行所述颜色空间转换过程之后,剪辑经变换残余数据以使得所述经变换残余数据在所述范围内。
30.根据权利要求16所述的装置,其中所述一或多个处理器经进一步配置以:
响应于确定所述CU是使用图像内译码模式译码:
使用相同色度预测模式预测所述CU的所有色度块;
响应于所述CU仅具有一个预测单元PU,使用相同明度预测模式预测所述CU的所有明度块,其中所述相同明度预测模式与所述相同色度预测模式相同;及
响应于所述CU具有多个PU,使用所述相同明度预测模式预测所述多个PU中的第一PU的第一明度块。
31.根据权利要求16所述的装置,其中所述装置包括以下中的至少一者:
集成电路;
微处理器;或
无线通信装置。
32.根据权利要求16所述的装置,其进一步包括显示器,所述显示器经配置以显示所述视频数据的经解码图像。
33.一种用于解码视频数据的装置,所述装置包括:
用于确定所述视频数据的译码单元CU是使用颜色空间转换编码的装置;
用于确定所述颜色分量的初始量化参数QP的装置;
基于所述CU是使用所述颜色空间转换编码,用于确定所述颜色分量的最终QP以使得所述颜色分量的所述最终QP等于所述颜色分量的所述初始QP与所述颜色分量的非零QP偏移的和的装置;及
用于基于所述颜色分量的所述最终QP反量化所述CU的系数块的装置,所述CU的所述系数块是基于所述颜色分量的样本值;及
用于基于所述CU的所述经反量化系数块重建所述译码单元的装置。
34.根据权利要求33所述的装置,其中所述颜色分量的所述QP偏移用以下中的一者发信:图像参数集、序列参数集及图块标头。
35.根据权利要求33所述的装置,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述多个颜色分量包括明度分量及色度分量,所述装置进一步包括:
用于至少部分基于所述明度分量的所述最终QP确定明度边缘的边界强度的装置;
用于至少部分基于所述色度分量的所述最终QP确定色度边缘的边界强度的装置;
响应于确定所述明度边缘的所述边界强度不满足第一阈值,用于对所述明度边缘执行解块滤波过程的装置;及
响应于确定所述色度边缘的所述边界强度不满足第二阈值,用于对所述色度边缘执行所述解块滤波过程的装置。
36.根据权利要求33所述的装置,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述多个颜色分量包括三个颜色分量,其中所述三个颜色分量中的每一者与相应QP偏移相关联,且其中所述相应QP偏移等于(-5+6*BitInc、-5+6*BitInc、-3+6*BitInc),其中BitInc等于0、1或2中的一者。
37.根据权利要求33所述的装置,其进一步包括:
响应于确定所述CU是使用图像内译码模式译码:
用于使用相同色度预测模式预测所述CU的所有色度块的装置;及
响应于所述CU仅具有一个预测单元PU,用于使用相同明度预测模式预测所述CU的所有明度块的装置,其中所述相同明度预测模式与所述相同色度预测模式相同;及
响应于所述CU具有多个PU,用于使用所述相同明度预测模式预测所述多个PU中的第一PU的第一明度块的装置。
38.根据权利要求33所述的装置,其进一步包括:
用于使用所述颜色分量的所述初始QP对所述CU执行解块滤波过程的装置。
39.一种使用指令编码的计算机可读存储媒体,当经执行时,所述指令使一或多个处理器:
确定视频数据的译码单元CU是使用颜色空间转换编码;
确定颜色分量的初始量化参数QP;
基于所述CU是使用所述颜色空间转换编码,确定所述颜色分量的最终QP以使得所述颜色分量的所述最终QP等于所述颜色分量的所述初始QP与所述颜色分量的非零QP偏移的和;及
基于所述颜色分量的所述最终QP,反量化所述CU的系数块,所述CU的所述系数块是基于所述颜色分量的样本值;及
基于所述CU的所述经反量化系数块重建所述译码单元。
40.根据权利要求39所述的计算机可读存储媒体,其中所述颜色分量的所述QP偏移用以下中的一者发信:图像参数集、序列参数集及图块标头。
41.根据权利要求39所述的计算机可读存储媒体,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述多个颜色分量包括明度分量及色度分量,其中所述指令进一步使所述一或多个处理器:
至少部分基于所述明度分量的所述最终QP确定明度边缘的边界强度;
至少部分基于所述色度分量的所述最终QP确定色度边缘的边界强度;
响应于确定所述明度边缘的所述边界强度不满足第一阈值,对所述明度边缘执行解块滤波过程;及
响应于确定所述色度边缘的所述边界强度不满足第二阈值,对所述色度边缘执行所述解块滤波过程。
42.根据权利要求39所述的计算机可读存储媒体,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述多个颜色分量包括三个颜色分量,其中所述三个颜色分量中的每一者与相应QP偏移相关联,且其中所述相应QP偏移等于(-5+6*BitInc、-5+6*BitInc、-3+6*BitInc),其中BitInc等于0、1或2中的一者。
43.根据权利要求39所述的计算机可读存储媒体,其中所述指令进一步使所述一或多个处理器:
响应于确定所述CU是使用图像内译码模式译码:
使用相同色度预测模式预测所述CU的所有色度块;及
响应于所述CU仅具有一个预测单元PU,使用相同明度预测模式预测所述CU的所有明度块,其中所述相同明度预测模式与所述相同色度预测模式相同;及
响应于所述CU具有多个PU,使用所述相同明度预测模式预测所述多个PU中的第一PU的第一明度块。
44.根据权利要求39所述的计算机可读存储媒体,其中所述指令进一步使所述一或多个处理器:
使用所述颜色分量的所述初始QP对所述CU执行解块滤波过程。
45.一种编码视频数据的方法,所述方法包括:
确定使用颜色空间转换编码所述视频数据的译码单元CU;
确定颜色分量的初始量化参数QP;
基于所述CU是使用所述颜色空间转换编码,设置所述颜色分量的最终QP以使得所述颜色分量的所述最终QP等于所述颜色分量的所述初始QP与所述颜色分量的非零QP偏移的和;及
基于所述颜色分量的所述最终QP,量化所述CU的系数块,所述CU的所述系数块是基于所述颜色分量的样本值;及
输出包括表示所述经量化系数块中的每一者的一或多个经熵编码语法元素的视频数据位流。
46.根据权利要求45所述的方法,其中所述颜色分量的所述QP偏移用以下中的一者发信:图像参数集、序列参数集及图块标头。
47.根据权利要求45所述的方法,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述量化参数偏移为第一量化参数偏移,其中所述量化参数为第一量化参数,且其中所述第一颜色分量的所述第一量化参数的所述第一量化参数偏移等于第二颜色分量的第二量化参数的第二量化参数偏移,且其中所述第一量化参数偏移小于第三颜色分量的第三量化参数的第三量化参数偏移。
48.根据权利要求45所述的方法,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述多个颜色分量包括明度分量及色度分量,所述方法进一步包括:
至少部分基于所述明度分量的所述最终QP确定明度边缘的边界强度;
至少部分基于所述色度分量的所述最终QP确定色度边缘的边界强度;
响应于确定所述明度边缘的所述边界强度不满足第一阈值,对所述明度边缘执行解块滤波过程;及
响应于确定所述色度边缘的所述边界强度不满足第二阈值,对所述色度边缘执行所述解块滤波过程。
49.根据权利要求45所述的方法,其进一步包括:
使用所述颜色分量的所述初始QP对所述CU执行解块滤波过程。
50.根据权利要求45所述的方法,其中所述CU为第一CU,所述方法进一步包括:
确定第二CU的颜色分量的第二QP;
响应于未使用所述颜色空间转换编码所述第二CU,基于所述颜色分量的所述第二QP量化所述第二CU的系数块,所述第二CU的所述系数块是基于所述颜色分量的样本值;及
输出包括表示所述经量化第二系数块中的每一者的一或多个经熵编码语法元素的第二集合的所述视频数据位流。
51.根据权利要求45所述的方法,其中所述颜色分量的所述QP偏移取决于所述CU的编码模式。
52.根据权利要求51所述的方法,其进一步包括确定所述分量的所述QP偏移,以使得所述QP偏移在所述CU的所述编码模式为图像内模式或图像内块拷贝BC模式时等于第一值,且在所述CU的所述编码模式为图像间模式时等于第二值,所述第一值不同于所述第二值。
53.根据权利要求51所述的方法,其进一步包括确定所述分量的所述QP偏移,以使得所述QP偏移在所述CU的所述编码模式为图像内模式时等于第一值,且在所述CU的所述编码模式为图像内块拷贝BC模式或图像间模式时等于第二值,所述第一值不同于所述第二值。
54.根据权利要求45所述的方法,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述多个颜色分量包括三个颜色分量,其中所述三个颜色分量中的每一者与相应QP偏移相关联,且其中所述相应QP偏移等于(-5+6*BitInc、-5+6*BitInc、-3+6*BitInc),其中BitInc等于0、1或2中的一者。
55.根据权利要求45所述的方法,其中,对于所述颜色分量,所述颜色分量的所述QP偏移取决于所述CU的图块类型为I图块类型、P图块类型还是B图块类型。
56.根据权利要求45所述的方法,其中所述颜色空间转换的输入数据具有N位精度,且图像内/图像间预测之后所述CU的残余数据在[-2N,2N-1]的范围内,所述方法进一步包括:
在执行所述颜色空间转换过程之后,剪辑经变换残余数据以使得所述经变换残余数据在所述范围内。
57.根据权利要求45所述的方法,其进一步包括:
响应于确定所述CU是使用图像内译码模式译码:
使用相同色度预测模式预测所述CU的所有色度块;
响应于所述CU仅具有一个预测单元PU,使用相同明度预测模式预测所述CU的所有明度块,其中所述相同明度预测模式与所述相同色度预测模式相同;及
响应于所述CU具有多个PU,使用所述相同明度预测模式预测所述多个PU中的第一PU的第一明度块。
58.一种用于编码视频数据的装置,所述装置包括:
数据存储媒体,其经配置以存储所述视频数据;及
一或多个处理器,其经配置以:
确定使用颜色空间转换编码所述视频数据的译码单元CU;
确定所述颜色分量的初始量化参数QP;
基于所述CU是使用所述颜色空间转换编码,设置所述颜色分量的最终QP以使得所述颜色分量的所述最终QP等于所述颜色分量的所述初始QP与所述颜色分量的非零QP偏移的和;及
基于所述颜色分量的所述最终QP,量化所述CU的系数块,所述CU的所述系数块是基于所述颜色分量的样本值;及
输出包括表示所述经量化系数块中的每一者的一或多个经熵编码语法元素的视频数据位流。
59.根据权利要求58所述的装置,其中所述颜色分量的所述QP偏移用以下中的一者发信:图像参数集、序列参数集及图块标头。
60.根据权利要求58所述的装置,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述量化参数偏移为第一量化参数偏移,其中所述量化参数为第一量化参数,且其中所述第一颜色分量的所述第一量化参数的所述第一量化参数偏移等于第二颜色分量的第二量化参数的第二量化参数偏移,且其中所述第一量化参数偏移小于第三颜色分量的第三量化参数的第三量化参数偏移。
61.根据权利要求58所述的装置,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述多个颜色分量包括明度分量及色度分量,其中所述一或多个处理器经进一步配置以:
至少部分基于所述明度分量的所述最终QP确定明度边缘的边界强度;
至少部分基于所述色度分量的所述最终QP确定色度边缘的边界强度;
响应于确定所述明度边缘的所述边界强度不满足第一阈值,对所述明度边缘执行解块滤波过程;及
响应于确定所述色度边缘的所述边界强度不满足第二阈值,对所述色度边缘执行所述解块滤波过程。
62.根据权利要求58所述的装置,其中所述一或多个处理器经进一步配置以:
使用所述颜色分量的所述初始QP对所述CU执行解块滤波过程。
63.根据权利要求58所述的装置,其中所述CU为第一CU,其中所述一或多个处理器经进一步配置以:
确定第二CU的颜色分量的第二QP;及
响应于未使用所述颜色空间转换编码所述第二CU,基于所述颜色分量的所述第二QP量化所述第二CU的系数块,所述第二CU的所述系数块是基于所述颜色分量的样本值;及
输出包括表示所述经量化第二系数块中的每一者的一或多个经熵编码语法元素的第二集合的所述视频数据位流。
64.根据权利要求58所述的装置,其中所述颜色分量的所述QP偏移取决于所述CU的编码模式。
65.根据权利要求64所述的装置,其中所述一或多个处理器经进一步配置以确定所述分量的所述QP偏移,以使得所述QP偏移在所述CU的所述编码模式为图像内模式或图像内块拷贝BC模式时等于第一值,且在所述CU的所述编码模式为图像间模式时等于第二值,所述第一值不同于所述第二值。
66.根据权利要求64所述的装置,其中所述一或多个处理器经进一步配置以确定所述分量的所述QP偏移,以使得所述QP偏移在所述CU的所述编码模式为图像内模式时等于第一值,且在所述CU的所述编码模式为图像内块拷贝BC模式时等于第二值,所述第一值不同于所述第二值。
67.根据权利要求58所述的装置,其中所述颜色分量为多个颜色分量中的第一颜色分量,其中所述多个颜色分量包括三个颜色分量,其中所述三个颜色分量中的每一者与相应QP偏移相关联,且其中所述相应QP偏移等于(-5+6*BitInc、-5+6*BitInc、-3+6*BitInc),其中BitInc等于0、1或2中的一者。
68.根据权利要求58所述的装置,其中所述一或多个处理器经进一步配置以:
确定所述颜色分量的所述QP偏移在所述CU的图块类型为I图块类型时等于第一值,在所述CU的所述图块类型为P图块类型时等于第二值,且在所述CU的所述图块类型为B图块类型时等于第三值,所述第一值不同于所述第二值,所述第二值不同于所述第三值,且所述第一值不同于所述第三值。
69.根据权利要求58所述的装置,其中所述颜色空间转换的输入数据具有N位精度,且图像内/图像间预测之后所述CU的残余数据在[-2N,2N-1]的范围内,其中所述一或多个处理器经进一步配置以:
在执行所述颜色空间转换过程之后,剪辑经变换残余数据以使得所述经变换残余数据在所述范围内。
70.根据权利要求58所述的装置,其中所述一或多个处理器经进一步配置以:
响应于确定所述CU是使用图像内译码模式译码:
使用相同色度预测模式预测所述CU的所有色度块;
响应于所述CU仅具有一个预测单元PU,使用相同明度预测模式预测所述CU的所有明度块,其中所述相同明度预测模式与所述相同色度预测模式相同;及
响应于所述CU具有多个PU,使用所述相同明度预测模式预测所述多个PU中的第一PU的第一明度块。
71.根据权利要求58所述的装置,其中所述装置包括以下中的至少一者:
集成电路;
微处理器;或
无线通信装置。
72.根据权利要求58所述的装置,其进一步包括摄像机,所述摄像机经配置以捕获所述视频数据。
73.一种用于编码视频数据的装置,所述装置包括:
用于确定使用颜色空间转换编码所述视频数据的译码单元CU的装置;
用于确定颜色分量的初始量化参数QP的装置;
基于所述CU是使用所述颜色空间转换编码,用于设置所述颜色分量的最终QP以使得所述颜色分量的所述最终QP等于所述颜色分量的所述初始QP与所述颜色分量的非零QP偏移的和的装置;及
用于基于所述颜色分量的所述最终QP量化所述CU的系数块的装置,所述CU的所述系数块是基于所述颜色分量的样本值;及
用于输出包括表示所述经量化系数块中的每一者的一或多个经熵编码语法元素的视频数据位流的装置。
74.一种使用指令编码的计算机可读存储媒体,当经执行时,所述指令使一或多个处理器:
确定使用颜色空间转换编码视频数据的译码单元CU;
确定所述颜色分量的初始量化参数QP;
基于所述CU是使用所述颜色空间转换编码,设置所述颜色分量的最终QP以使得所述颜色分量的所述最终QP等于所述颜色分量的所述初始QP与所述颜色分量的非零QP偏移的和;及
基于所述颜色分量的所述最终QP,量化所述CU的系数块,所述CU的所述系数块是基于所述颜色分量的样本值;及
输出包括表示所述经量化系数块中的每一者的一或多个经熵编码语法元素的视频数据位流。
CN201580029269.5A 2014-06-04 2015-06-04 块自适应颜色空间转换译码的方法和装置 Active CN106464881B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201462007860P 2014-06-04 2014-06-04
US62/007,860 2014-06-04
US14/729,486 2015-06-03
US14/729,486 US10142642B2 (en) 2014-06-04 2015-06-03 Block adaptive color-space conversion coding
PCT/US2015/034249 WO2015187978A1 (en) 2014-06-04 2015-06-04 Block adaptive color-space conversion coding

Publications (2)

Publication Number Publication Date
CN106464881A true CN106464881A (zh) 2017-02-22
CN106464881B CN106464881B (zh) 2019-07-05

Family

ID=53488454

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580029269.5A Active CN106464881B (zh) 2014-06-04 2015-06-04 块自适应颜色空间转换译码的方法和装置

Country Status (18)

Country Link
US (1) US10142642B2 (zh)
EP (1) EP3152902A1 (zh)
JP (1) JP6640119B2 (zh)
KR (1) KR102032603B1 (zh)
CN (1) CN106464881B (zh)
AU (1) AU2015269334B2 (zh)
BR (1) BR112016028547A2 (zh)
CA (1) CA2948011C (zh)
CL (1) CL2016003118A1 (zh)
MX (1) MX363422B (zh)
NZ (1) NZ725617A (zh)
PH (1) PH12016502373A1 (zh)
RU (1) RU2698760C2 (zh)
SA (1) SA516380422B1 (zh)
SG (1) SG11201608822YA (zh)
TW (1) TWI663869B (zh)
WO (1) WO2015187978A1 (zh)
ZA (1) ZA201608338B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112806017A (zh) * 2018-10-05 2021-05-14 Lg电子株式会社 用于编码变换系数的方法和设备
WO2021088951A1 (en) * 2019-11-07 2021-05-14 Beijing Bytedance Network Technology Co., Ltd. Quantization properties of adaptive in-loop color-space transform for video coding
CN113574877A (zh) * 2019-03-12 2021-10-29 现代自动车株式会社 用于有效地对残差块编码的方法和装置
CN114270841A (zh) * 2019-08-23 2022-04-01 高通股份有限公司 视频编解码的色度量化参数(qp)推导
US11539981B2 (en) 2019-06-21 2022-12-27 Beijing Bytedance Network Technology Co., Ltd. Adaptive in-loop color-space transform for video coding

Families Citing this family (90)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10334253B2 (en) * 2013-04-08 2019-06-25 Qualcomm Incorporated Sample adaptive offset scaling based on bit-depth
US9466305B2 (en) 2013-05-29 2016-10-11 Qualcomm Incorporated Performing positional analysis to code spherical harmonic coefficients
US20140355769A1 (en) 2013-05-29 2014-12-04 Qualcomm Incorporated Energy preservation for decomposed representations of a sound field
US9489955B2 (en) 2014-01-30 2016-11-08 Qualcomm Incorporated Indicating frame parameter reusability for coding vectors
US9922656B2 (en) 2014-01-30 2018-03-20 Qualcomm Incorporated Transitioning of ambient higher-order ambisonic coefficients
EP3114835B1 (en) 2014-03-04 2020-04-22 Microsoft Technology Licensing, LLC Encoding strategies for adaptive switching of color spaces
US10171833B2 (en) * 2014-03-04 2019-01-01 Microsoft Technology Licensing, Llc Adaptive switching of color spaces, color sampling rates and/or bit depths
WO2015143671A1 (en) 2014-03-27 2015-10-01 Microsoft Technology Licensing, Llc Adjusting quantization/scaling and inverse quantization/scaling when switching color spaces
US9852737B2 (en) 2014-05-16 2017-12-26 Qualcomm Incorporated Coding vectors decomposed from higher-order ambisonics audio signals
US10770087B2 (en) 2014-05-16 2020-09-08 Qualcomm Incorporated Selecting codebooks for coding vectors decomposed from higher-order ambisonic audio signals
US9620137B2 (en) 2014-05-16 2017-04-11 Qualcomm Incorporated Determining between scalar and vector quantization in higher order ambisonic coefficients
US20170280140A1 (en) * 2014-09-19 2017-09-28 Lg Electronics Inc. Method and apparatus for adaptively encoding, decoding a video signal based on separable transform
KR101794817B1 (ko) * 2014-09-26 2017-11-07 돌비 레버러토리즈 라이쎈싱 코오포레이션 지각적으로 양자화된 비디오 콘텐츠를 인코딩 및 디코딩하는 방법
US9747910B2 (en) 2014-09-26 2017-08-29 Qualcomm Incorporated Switching between predictive and non-predictive quantization techniques in a higher order ambisonics (HOA) framework
WO2016051643A1 (ja) 2014-10-03 2016-04-07 日本電気株式会社 映像符号化装置、映像復号装置、映像符号化方法、映像復号方法及びプログラム
EP3205098B1 (en) 2014-10-06 2020-01-08 Telefonaktiebolaget LM Ericsson (publ) Coding and deriving quantization parameters
WO2016054765A1 (en) 2014-10-08 2016-04-14 Microsoft Technology Licensing, Llc Adjustments to encoding and decoding when switching color spaces
WO2017045101A1 (en) * 2015-09-14 2017-03-23 Mediatek Singapore Pte. Ltd. Advanced deblocking filter in video coding
US20170105012A1 (en) * 2015-10-08 2017-04-13 Mediatek Inc. Method and Apparatus for Cross Color Space Mode Decision
US10356408B2 (en) * 2015-11-27 2019-07-16 Canon Kabushiki Kaisha Image encoding apparatus and method of controlling the same
WO2017173593A1 (en) * 2016-04-06 2017-10-12 Mediatek Singapore Pte. Ltd. Separate coding secondary transform syntax elements for different color components
US10944976B2 (en) * 2016-07-22 2021-03-09 Sharp Kabushiki Kaisha Systems and methods for coding video data using adaptive component scaling
WO2018018486A1 (en) * 2016-07-28 2018-02-01 Mediatek Inc. Methods of reference quantization parameter derivation for signaling of quantization parameter in quad-tree plus binary tree structure
WO2018070914A1 (en) * 2016-10-12 2018-04-19 Telefonaktiebolaget Lm Ericsson (Publ) Residual refinement of color components
EP3425911A1 (en) * 2017-07-06 2019-01-09 Thomson Licensing A method and a device for picture encoding and decoding
US11019339B2 (en) * 2017-07-12 2021-05-25 Futurewei Technologies, Inc. Fractional quantization parameter offset in video compression
CN111149359B (zh) * 2017-09-20 2023-11-17 韩国电子通信研究院 用于对图像进行编码/解码的方法和装置以及存储有比特流的记录介质
RU2020131227A (ru) * 2018-03-29 2022-03-22 Сони Корпорейшн Устройство обработки изображения и способ обработки изображения
EP3777151A1 (en) 2018-03-30 2021-02-17 InterDigital VC Holdings, Inc. Chroma quantization parameter adjustment in video encoding and decoding
CN116320455A (zh) * 2018-04-01 2023-06-23 Lg电子株式会社 编码设备、解码设备及数据发送设备
US10448025B1 (en) 2018-05-11 2019-10-15 Tencent America LLC Method and apparatus for video coding
BR112021004984A2 (pt) * 2018-09-21 2021-06-08 Huawei Technologies Co., Ltd. aparelho e método para quantização inversa
US10554975B1 (en) 2018-09-30 2020-02-04 Tencent America LLC Method and apparatus for video coding
WO2020096848A1 (en) * 2018-11-06 2020-05-14 Interdigital Vc Holdings, Inc. Parameter grouping among plural coding units for video encoding and decoding
CN117319670A (zh) * 2018-12-13 2023-12-29 华为技术有限公司 色度块的预测方法和装置
JP7448549B2 (ja) * 2019-01-16 2024-03-12 シャープ株式会社 ビデオ符号化におけるビデオブロックのための量子化パラメータを導出するシステム及び方法
WO2020156515A1 (en) 2019-01-31 2020-08-06 Beijing Bytedance Network Technology Co., Ltd. Refined quantization steps in video coding
CN113545070B (zh) 2019-03-08 2023-10-03 北京字节跳动网络技术有限公司 视频处理中整形信息的信令通知
CN113615188B (zh) * 2019-03-08 2024-08-02 北京字节跳动网络技术有限公司 调色板模式使用指示的联合编解码
WO2020189960A1 (ko) 2019-03-15 2020-09-24 엘지전자 주식회사 크로마 포맷에 대한 정보를 시그널링 하는 방법 및 장치
WO2020207421A1 (en) * 2019-04-09 2020-10-15 Beijing Bytedance Network Technology Co., Ltd. Entry construction for palette mode coding
CN113678440B (zh) * 2019-04-12 2023-12-15 北京字节跳动网络技术有限公司 基于矩阵的帧内预测与其它编码工具之间的交互
MX2021012472A (es) * 2019-04-18 2021-11-12 Beijing Bytedance Network Tech Co Ltd Restriccion de la aplicabilidad del modo de componentes cruzados.
KR20210133299A (ko) 2019-04-20 2021-11-05 엘지전자 주식회사 Bdpcm에 기반한 영상 코딩 방법 및 그 장치
BR112021019675A2 (pt) 2019-04-23 2021-12-07 Beijing Bytedance Network Tech Co Ltd Método para processamento de mídia visual, aparelho codificador de vídeo, aparelho decodificador de vídeo, e, mídia legível por computador
WO2020224581A1 (en) 2019-05-05 2020-11-12 Beijing Bytedance Network Technology Co., Ltd. Chroma deblocking harmonization for video coding
CN117221558A (zh) 2019-05-08 2023-12-12 北京字节跳动网络技术有限公司 跨分量编解码的适用性条件
BR112021017506A2 (pt) 2019-05-28 2021-11-16 Dolby Laboratories Licensing Corp Sinalização de parâmetros de quantização
CN114051735B (zh) 2019-05-31 2024-07-05 北京字节跳动网络技术有限公司 基于矩阵的帧内预测中的一步下采样过程
KR20220024006A (ko) 2019-06-22 2022-03-03 베이징 바이트댄스 네트워크 테크놀로지 컴퍼니, 리미티드 크로마 잔차 스케일링을 위한 신택스 요소
WO2020264456A1 (en) 2019-06-28 2020-12-30 Bytedance Inc. Chroma intra mode derivation in screen content coding
JP7460748B2 (ja) 2019-07-07 2024-04-02 北京字節跳動網絡技術有限公司 クロマ残差スケーリングのシグナリング
EP3987806A4 (en) 2019-07-20 2022-08-31 Beijing Bytedance Network Technology Co., Ltd. CONDITIONAL CODING OF PALETTE MODE USE INDICATION
CN114145013B (zh) * 2019-07-23 2023-11-14 北京字节跳动网络技术有限公司 调色板模式编解码的模式确定
CN114208188A (zh) 2019-07-29 2022-03-18 北京字节跳动网络技术有限公司 调色板模式编解码的扫描顺序改进
CN114208183A (zh) 2019-08-03 2022-03-18 北京字节跳动网络技术有限公司 视频的缩减二次变换中基于位置的模式导出
JP7343596B6 (ja) * 2019-08-23 2024-02-26 華為技術有限公司 合同クロマ符号化を使用するブロックについてクロマ・ブロッキング解除を実行するためのエンコーダ、デコーダおよび対応する方法
CN114342369A (zh) * 2019-09-02 2022-04-12 北京字节跳动网络技术有限公司 用于视频编解码的色度去方块调谐
KR20220058534A (ko) * 2019-09-14 2022-05-09 바이트댄스 아이엔씨 크로마 디블로킹 필터링을 위한 양자화 파라미터
US11509910B2 (en) * 2019-09-16 2022-11-22 Tencent America LLC Video coding method and device for avoiding small chroma block intra prediction
EP4026336A4 (en) * 2019-10-05 2022-12-07 Beijing Bytedance Network Technology Co., Ltd. LEVEL-BASED SIGNALING OF VIDEO CODING TOOLS
CN114651442A (zh) 2019-10-09 2022-06-21 字节跳动有限公司 视频编解码中的跨分量适应性回路滤波
US11412235B2 (en) * 2019-10-10 2022-08-09 Tencent America LLC Color transform for video coding
EP4029264A4 (en) 2019-10-14 2022-11-23 ByteDance Inc. JOINT CODING OF CHROMINANCE RESIDUE AND FILTERING IN VIDEO PROCESSING
CN114902665A (zh) * 2019-10-28 2022-08-12 Lg电子株式会社 使用自适应变换的图像编码/解码方法和设备以及发送比特流的方法
CN117579823A (zh) * 2019-10-28 2024-02-20 北京字节跳动网络技术有限公司 基于颜色分量的语法信令通知和解析
WO2021086023A1 (ko) * 2019-10-28 2021-05-06 엘지전자 주식회사 적응적 변환을 이용하여 레지듀얼 처리를 수행하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
WO2021086024A1 (ko) 2019-10-28 2021-05-06 엘지전자 주식회사 적응적 색공간 변환을 이용하여 레지듀얼 처리를 수행하는 영상 부호화/복호화 방법, 장치 및 비트스트림을 전송하는 방법
CN114902669A (zh) * 2019-10-28 2022-08-12 Lg电子株式会社 使用颜色空间转换对图像编码/解码的方法和装置及发送比特流的方法
CN114902666A (zh) * 2019-10-28 2022-08-12 Lg电子株式会社 使用自适应颜色变换的图像编码/解码方法和装置以及发送比特流的方法
CN114930827A (zh) 2019-11-22 2022-08-19 Lg电子株式会社 使用无损颜色变换的图像编码/解码方法和装置及比特流发送方法
CN114731437B (zh) * 2019-11-26 2024-04-23 韦勒斯标准与技术协会公司 通过使用自适应颜色空间变换处理视频信号的方法和设备
WO2021118977A1 (en) 2019-12-09 2021-06-17 Bytedance Inc. Using quantization groups in video coding
CN115004705A (zh) * 2019-12-10 2022-09-02 北京达佳互联信息技术有限公司 以4:4:4色度格式进行视频编解码的方法和装置
CN114731438A (zh) * 2019-12-27 2022-07-08 富士通株式会社 自适应颜色变换的编解码方法、装置以及视频编解码设备
MX2022007503A (es) 2019-12-27 2022-07-04 Beijing Bytedance Network Tech Co Ltd Se?alizacion de tipos de corte en encabezados de imagenes de video.
WO2021138293A1 (en) 2019-12-31 2021-07-08 Bytedance Inc. Adaptive color transform in video coding
WO2021145691A1 (ko) * 2020-01-14 2021-07-22 현대자동차주식회사 적응적 색상 변환을 이용하는 비디오 부호화 및 복호화
WO2021150085A1 (ko) * 2020-01-25 2021-07-29 엘지전자 주식회사 색상 공간 변환을 사용하는 레지듀얼을 위한 영상 또는 비디오 코딩
WO2021150084A1 (ko) * 2020-01-25 2021-07-29 엘지전자 주식회사 색상 공간 변환 기반 영상 또는 비디오 코딩
CN115299060A (zh) * 2020-01-25 2022-11-04 Lg电子株式会社 基于act残差的图像或视频编码
US11303936B2 (en) * 2020-02-21 2022-04-12 Tencent America LLC Method and apparatus for filtering
EP4094438A4 (en) 2020-02-24 2023-03-29 ByteDance Inc. SUB-IMAGE HEIGHT DERIVATION
WO2021178504A1 (en) * 2020-03-03 2021-09-10 Bytedance Inc. Low frequency non-separable transform signaling in video coding
JP7490803B2 (ja) * 2020-03-31 2024-05-27 テレフオンアクチーボラゲット エルエム エリクソン(パブル) シンタックスエレメントを使用するビデオ処理
US11381820B2 (en) 2020-04-13 2022-07-05 Tencent America LLC Method and apparatus for video coding
US11445206B2 (en) * 2020-04-16 2022-09-13 Tencent America LLC Method and apparatus for video coding
KR20240051251A (ko) * 2021-09-30 2024-04-19 바이트댄스 아이엔씨 비디오 처리를 위한 방법, 장치 및 매체
KR20240068711A (ko) * 2021-10-08 2024-05-17 바이트댄스 아이엔씨 동영상을 처리하는 방법, 장치 및 매체
WO2023171940A1 (ko) * 2022-03-08 2023-09-14 현대자동차주식회사 적응적 크로마컨버전을 이용하는 비디오 코딩을 위한 방법과 장치

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1318258A (zh) * 1998-09-17 2001-10-17 通用仪器公司 改进的用于数字视频简单形状编码的色度键控技术
EP1986440A1 (en) * 2006-02-13 2008-10-29 Kabushi Kaisha Toshiba Moving image encoding/decoding method and device and program
CN101442674A (zh) * 2007-11-19 2009-05-27 三星电子株式会社 使用图像分辨率调整对运动图像编码和解码的方法和设备
WO2013108688A1 (ja) * 2012-01-18 2013-07-25 ソニー株式会社 画像処理装置および方法
US20130329785A1 (en) * 2011-03-03 2013-12-12 Electronics And Telecommunication Research Institute Method for determining color difference component quantization parameter and device using the method

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9001899B2 (en) * 2006-09-15 2015-04-07 Freescale Semiconductor, Inc. Video information processing system with selective chroma deblock filtering
US7907789B2 (en) * 2007-01-05 2011-03-15 Freescale Semiconductor, Inc. Reduction of block effects in spatially re-sampled image information for block-based image coding
US8401071B2 (en) * 2007-12-19 2013-03-19 Sony Corporation Virtually lossless video data compression
US8279924B2 (en) * 2008-10-03 2012-10-02 Qualcomm Incorporated Quantization parameter selections for encoding of chroma and luma video blocks
US20120170648A1 (en) * 2011-01-05 2012-07-05 Qualcomm Incorporated Frame splitting in video coding
US9848197B2 (en) * 2011-03-10 2017-12-19 Qualcomm Incorporated Transforms in video coding
US9167269B2 (en) * 2011-10-25 2015-10-20 Qualcomm Incorporated Determining boundary strength values for deblocking filtering for video coding
EP2810440A1 (en) * 2012-02-04 2014-12-10 General Instrument Corporation Devices and methods for context reduction in last significant coefficient position coding
US9451258B2 (en) 2012-04-03 2016-09-20 Qualcomm Incorporated Chroma slice-level QP offset and deblocking
GB2501535A (en) 2012-04-26 2013-10-30 Sony Corp Chrominance Processing in High Efficiency Video Codecs
US9414054B2 (en) 2012-07-02 2016-08-09 Microsoft Technology Licensing, Llc Control and use of chroma quantization parameter values
US9654777B2 (en) 2013-04-05 2017-05-16 Qualcomm Incorporated Determining palette indices in palette-based video coding
US9294766B2 (en) 2013-09-09 2016-03-22 Apple Inc. Chroma quantization in video coding
US9736481B2 (en) 2014-03-14 2017-08-15 Qualcomm Incorporated Quantization parameters for color-space conversion coding
WO2015143671A1 (en) 2014-03-27 2015-10-01 Microsoft Technology Licensing, Llc Adjusting quantization/scaling and inverse quantization/scaling when switching color spaces

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1318258A (zh) * 1998-09-17 2001-10-17 通用仪器公司 改进的用于数字视频简单形状编码的色度键控技术
EP1986440A1 (en) * 2006-02-13 2008-10-29 Kabushi Kaisha Toshiba Moving image encoding/decoding method and device and program
CN101442674A (zh) * 2007-11-19 2009-05-27 三星电子株式会社 使用图像分辨率调整对运动图像编码和解码的方法和设备
US20130329785A1 (en) * 2011-03-03 2013-12-12 Electronics And Telecommunication Research Institute Method for determining color difference component quantization parameter and device using the method
WO2013108688A1 (ja) * 2012-01-18 2013-07-25 ソニー株式会社 画像処理装置および方法

Non-Patent Citations (5)

* Cited by examiner, † Cited by third party
Title
ALEXIS MICHAEL TOURAPIS等: ""H.264/14496-10 AVC Reference Software Manual"", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11 AND ITU-T SG16 Q.6》 *
BIN LI等: ""Fix for adaptive color space coding in JCTVC-Q0035"", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11》 *
JIANLE CHEN等: ""CE6.a: Chroma intra prediction by reconstructed luma samples"", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11》 *
TOMOHIRO IKAI等: ""CE5 related: Simplified residual prediction with luma clipping and chroma removal"", 《JOINT COLLABORATIVE TEAM ON 3D VIDEO CODING EXTENSIONS OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11》 *
XIANG LI等: ""CE4 Subtest3: Adaptive De-Quantization Offset"", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11》 *

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112806017A (zh) * 2018-10-05 2021-05-14 Lg电子株式会社 用于编码变换系数的方法和设备
CN112806017B (zh) * 2018-10-05 2024-03-15 Tcl王牌电器(惠州)有限公司 用于编码变换系数的方法和设备
CN113574877A (zh) * 2019-03-12 2021-10-29 现代自动车株式会社 用于有效地对残差块编码的方法和装置
CN113574877B (zh) * 2019-03-12 2024-06-28 现代自动车株式会社 用于有效地对残差块解码的方法和装置
US11539981B2 (en) 2019-06-21 2022-12-27 Beijing Bytedance Network Technology Co., Ltd. Adaptive in-loop color-space transform for video coding
US11778233B2 (en) 2019-06-21 2023-10-03 Beijing Bytedance Network Technology Co., Ltd Selective use of adaptive in-loop color-space transform and other video coding tools
CN114270841A (zh) * 2019-08-23 2022-04-01 高通股份有限公司 视频编解码的色度量化参数(qp)推导
WO2021088951A1 (en) * 2019-11-07 2021-05-14 Beijing Bytedance Network Technology Co., Ltd. Quantization properties of adaptive in-loop color-space transform for video coding
US11671591B2 (en) 2019-11-07 2023-06-06 Beijing Bytedance Network Technology Co., Ltd Quantization properties of adaptive in-loop color-space transform for video coding

Also Published As

Publication number Publication date
SA516380422B1 (ar) 2020-10-18
NZ725617A (en) 2020-08-28
CL2016003118A1 (es) 2017-10-06
CA2948011C (en) 2020-08-11
RU2698760C2 (ru) 2019-08-29
RU2016147170A (ru) 2018-07-16
PH12016502373A1 (en) 2017-02-20
TW201611578A (zh) 2016-03-16
US10142642B2 (en) 2018-11-27
SG11201608822YA (en) 2016-12-29
WO2015187978A1 (en) 2015-12-10
US20150358631A1 (en) 2015-12-10
EP3152902A1 (en) 2017-04-12
AU2015269334B2 (en) 2019-10-24
KR20170013274A (ko) 2017-02-06
JP2017520991A (ja) 2017-07-27
TWI663869B (zh) 2019-06-21
CA2948011A1 (en) 2015-12-10
RU2016147170A3 (zh) 2019-01-16
ZA201608338B (en) 2019-08-28
MX2016015649A (es) 2017-04-25
JP6640119B2 (ja) 2020-02-05
MX363422B (es) 2019-03-22
KR102032603B1 (ko) 2019-10-15
CN106464881B (zh) 2019-07-05
AU2015269334A1 (en) 2016-11-17
BR112016028547A2 (pt) 2017-08-22

Similar Documents

Publication Publication Date Title
CN106464881B (zh) 块自适应颜色空间转换译码的方法和装置
CN106464885A (zh) 块自适应颜色空间转换译码
CN105580365B (zh) 处理视频数据的方法、装置及存储媒体
CN105580364B (zh) 一种处理视频数据的方法,装置及计算机可读存储媒体
CN106797479B (zh) 对于并行处理的帧内块复制预测限制
CN105874797B (zh) 视频数据的编解码方法、装置、设备和存储媒体
CN106797466B (zh) 一种处理视频数据的方法及装置
CN105379266B (zh) 停用帧内预测滤波
CN106464919B (zh) 用于编码和解码具有视频数据的多层位流的方法和装置
CN105814893B (zh) 在多层视频译码中信息用于色域可扩展性的3d查找表的发信分区
CN105122812B (zh) 用于三维(3d)视频译码的高级合并模式
CN105393536B (zh) 使用位移向量从预测性块的帧内预测
CN105284113B (zh) 分量间滤波
CN105052147B (zh) 用于3d-hevc的深度数据的深度译码模式信令
CN104025602B (zh) 三维视频译码中用信号通知视图合成预测支持
CN104205846B (zh) 用于三维视频译码的视图合成模式
CN110169064A (zh) 具有减低复杂性的视频译码中的双边滤波器
CN106664425A (zh) 视频译码中的跨分量预测
CN107787583A (zh) 在块内复制模式中的参考图片列表构建
CN105814892B (zh) 视频编解码的方法、装置以及相应的计算机可读存储媒体
CN108353167A (zh) 译码视频数据的正负号信息
CN108028940A (zh) 调色板模式视频译码中转义像素信号值的限制
CN107592972A (zh) 用于视频数据中特定图片内的帧间译码的搜索区域确定
CN106464902A (zh) 多层编解码器中的时间运动向量预测(tmvp)指示
CN107771393A (zh) 帧内预测及帧内模式译码

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1229979

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant