CN110234010B - 视频编码方法/装置以及视频解码方法/装置 - Google Patents

视频编码方法/装置以及视频解码方法/装置 Download PDF

Info

Publication number
CN110234010B
CN110234010B CN201910372926.6A CN201910372926A CN110234010B CN 110234010 B CN110234010 B CN 110234010B CN 201910372926 A CN201910372926 A CN 201910372926A CN 110234010 B CN110234010 B CN 110234010B
Authority
CN
China
Prior art keywords
color
color gamut
coding unit
current coding
encoding
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910372926.6A
Other languages
English (en)
Other versions
CN110234010A (zh
Inventor
陈立恒
吴东兴
周汉良
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaTek Inc
Original Assignee
MediaTek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Inc filed Critical MediaTek Inc
Publication of CN110234010A publication Critical patent/CN110234010A/zh
Application granted granted Critical
Publication of CN110234010B publication Critical patent/CN110234010B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供一种视频编码方法/装置以及视频解码方法/装置。视频编码方法使用具有多个色彩空间的多个编码模式，包含：接收当前图像单元中的当前编码单元的多个输入像素，其中当前图像单元被分为多个编码单元；自编码模式群中选择与一个相应色域相关联的编码模式，且相应色域自包含至少两个不同色域的色域群中选出；使用编码模式编码相应色域中的当前编码单元；以及将相应色域的语法在多个当前编码单元语法中标示。本发明的视频编码方法/装置以及视频解码方法/装置可以实现有效率的压缩。

Description

视频编码方法/装置以及视频解码方法/装置
【交叉引用】
本申请要求申请日为2015年10月8日，美国临时申请号为62/238,859的美国临时申请案和申请日为2015年12月28日，美国临时申请号为62/271,503 的美国临时申请案的优先权，上述临时申请案的内容一并并入本申请。
【技术领域】
本发明有关于画面或视频编码系统的语法标示(Syntax Signaling)。更具体来说，本发明有关于标示可压缩视频以通过显示链接传输的压缩系统的语法的视频编码方法/装置以及视频解码方法/装置。
【背景技术】
各种视频编码标准已经被开发出来，以减少视频传输所需的比特率或存储所需的容量。举例来说，MPEG-2、MPEG-4和AVC/H.264已经被广泛用于各种应用中。近来，在较新的视频压缩格式(例如，VP8，VP9和新兴的高效视频编码 (High Efficiency Video Coding，简写为HEVC)标准)中的编码效率被显著提高。
在涉及视频显示的各种设备中，存在需要数据压缩的另一种应用。更具体来说，连接计算机和显示器、机顶盒和电视机，以及应用处理器和显示面板的显示链接是广泛用于业界的数字接口格式。显示链接使用数字接口。随着对更高显示分辨率和更高帧速率的需求的不断增加，通过显示链接发送的数据的数量变得非常大。举例来说，120Hz帧速率下，机顶盒设备和1080p HDTV之间的显示链接将需要多于7千兆比特位/秒(7Gbits/sec)。对于超高清(Ultra High Definition，简写为UHD)TV，所需数据将为四倍高。从而，显示链接通常为压缩格式。举例来说，显示流压缩(Display Stream Compression，简写为DSC) 标准已被由视频电子标准协会(Video Electronics Standards Association，简写为VESA)和MIPI联盟共同开发出来以解决显示应用中的数据压缩的需求。
由于不同的需求，DSC标准不同于一般的视频编码标准，例如MPEG-2/4、 AVC/H.264和HEVC。举例来说，用于显示应用中的压缩的色彩空间(color space) 可为YCoCg色彩空间，而非YUV色彩空间。此外，DSC仅包含帧内压缩，而不包含帧间压缩，以最小化处理延迟以及避免对于参考画面缓冲器的需求。图1是范例的DSC编码器的方框图。如图1所示，DSC视频编码器100包含色彩空间变换器(converter)110、缓冲器115、预测/量化/重构单元120、VLC熵编码单元125、子流复用单元130、速率缓冲器135、平坦度确定单元140、速率控制单元145、行缓冲器150和索引颜色历史(indexed color history，简写为 ICH)单元155。色彩空间变换器110接收图像输入，平坦度确定单元140提供平坦度指示给VLC熵编码单元125，重建值自预测/量化/重构单元120提供至行缓冲器150，DSC编码器输出处理后的比特流输出。若输入视频数据是RGB颜色格式，色彩空间变换器110对应于RGB至YCoCg颜色格式变换器。来自于平坦度确定单元140的信息可被用于调整速率控制单元145中的量化参数(QP)。如图1所示，平坦度指示被使用VLC熵编码单元125熵编码，并被合并入比特流中。在该揭露中，色彩空间也被视为色域(color domain)。
在对于支持更高的显示分辨率和更高的比特位深度颜色分量的显示链接的不断增长的需求下，VESA启动了建立高级显示流压缩(Advanced Display StreamCompression，简写为ADSC)标准的开发工作。此外，ADSC支持原始的4:2:0 和4:2:2编码，以消除将像素变换为RGB分量的需要。举例来说，ADSC允许更有效的YCbCr 4:2:0色彩取样格式压缩。此外，ADSC还支持高动态范围(High Dynamic Range，简写为HDR)，以适应在较新的电视节目和电影中更高的色深度。
显示链接的处理通常使用基于块的压缩，其中画面被分为多个块，且压缩被应用到每个块。此外，压缩设置可被用于小于画面的图像单元。举例来说，正在开发中的先进DSC(ADSC)被用于每一画面的片，且目标比特率被施加到每一片上。每一片被分为多个编码单元(即，块)，且每一编码单元由一个N*M像素的块组成，其中N对应于块宽度，而M对应于块高度。依据ADSC，各块的特性以“平坦度(flatness)”来评估，其中各块的平坦度被分类为如下的五种平坦度类型：
·类型：-1表示“复杂块”
·类型：0表示“平坦区域”
·类型：1表示“平坦区域(比类型0稍微不平)”
·类型：2表示“复杂至平块”
·类型：3表示“平至复杂块”
平坦度类型依据各块及其邻接块的复杂度信息确定。平坦度类型影响各块中的速率控制表现。依据现存的ADSC标准草案，平坦度类型的语法在每一编码单元中被标示(signaled)。
依据ADSC，各种编码模式被用于依据ADSC编码多个块。编码模式包含变换模式、DPCM模式、块预测(block prediction，简写为BP)模式、模板(Pattern) 模式、中点预测(midpoint prediction，简写为MPP)模式，和MPPF(MPP后备(fallback))模式。中点预测(MPP)模式使用一个中点值作为每个块中的预测值(predictor)。举例来说，中点值可以通过像素的动态范围的一半，或当前块的左侧的重建块的平均值确定。
存在进一步提高ADSC的压缩效率的需求。
【发明内容】
依据本发明的示范性实施例，提出一种视频编码方法/装置以及视频解码方法/装置以解决上述问题。
依据本发明的一个实施例，提出一种视频编码方法，使用具有多个色彩空间的多个编码模式，所述视频编码方法包含：接收当前图像单元中的当前编码单元的多个输入像素，其中所述当前图像单元被分为多个编码单元；自编码模式群中选择一个编码模式，其中一个相应色域与所述编码模式相关联，且所述相应色域自包含至少两个不同色域的色域群中选出；使用所述编码模式编码所述相应色域中的所述当前编码单元；以及将相应色域的语法在多个当前编码单元语法中标示。
依据本发明的另一实施例，提出一种视频编码装置，使用具有多个色彩空间的多个编码模式，其特征在于，视频编码装置包含一个或多个电子电路或处理器用于：接收当前图像单元中的当前编码单元的多个输入像素，其中当前图像单元被分为多个编码单元；自编码模式群中选择一个编码模式，其中一个相应色域与编码模式相关联，且相应色域自包含至少两个不同色域的色域群中选出；使用编码模式编码相应色域中的当前编码单元；以及将相应色域的语法在多个当前编码单元语法中标示。
依据本发明的另一实施例，提出一种视频解码方法，使用具有多个色彩空间的多个编码模式，其特征在于，视频解码方法包含：接收相应于压缩视频数据的比特流，其中比特流包含当前图像单元中的当前编码单元的多个输入像素，其中当前图像单元被分为多个编码单元；自比特流解码当前编码单元的编码模式；自比特流确定当前编码单元的相应色域，其中相应色域自包含至少两个不同色域的色域群中选出；以及使用解码的编码模式在相应色域中自比特流解码当前编码单元。
依据本发明的另一实施例，提出一种视频解码装置，使用具有多个色彩空间的多个编码模式，其特征在于，视频解码装置包含一个或多个电子电路或处理器用于：接收相应于压缩视频数据的比特流，其中比特流包含当前图像单元中的当前编码单元的多个输入像素，其中当前图像单元被分为多个编码单元；自比特流解码当前编码单元的编码模式；自比特流确定当前编码单元的相应色域；以及使用解码的编码模式在相应色域中自比特流解码当前编码单元。
依据本发明的另一实施例，提出一种视频编码方法，使用具有多个色彩空间的多个编码模式，其特征在于，视频编码方法包含：接收当前图像单元中的当前编码单元的多个输入像素，其中当前图像单元被分为多个编码单元，且当前编码单元的多个输入像素在第一色域中；自编码模式群中选择一个编码模式，其中编码模式群包含中点预测模式；以及若中点预测模式被选择来编码当前编码单元的多个输入像素：应用色彩变换，以将当前编码单元的多个输入像素转换为第二色域中的色彩变换块，其中第二色域不同于第一色域；自色彩变换块的动态范围的一个或多个中点值或第二色域中的邻接的重建块的一个或多个平均值中导出预测值；自色彩变换块和预测值导出当前编码单元的每一色彩通道的残值；以及编码多个残值以包含入数据流中。
依据本发明的另一实施例，提出一种视频解码方法，使用具有多个色彩空间的多个编码模式，其特征在于，视频解码方法包含：接收相应于压缩视频数据的比特流，其中比特流包含当前图像单元中的当前编码单元的多个输入像素，其中当前图像单元被分为多个编码单元，且当前编码单元的多个输入像素在第一色域中；自比特流解码当前编码单元的编码模式，其中编码模式属于包含中点预测模式的编码模式群；若被解码的编码模式是中点预测模式：自比特流导出第二色域中的当前编码单元的每一色彩通道的多个残值，用于当前编码单元；导出相应于色彩变换块的动态范围的一个或多个中点值或第二色域中的邻接的重建块的一个或多个平均值的预测值；基于导出的当前编码单元的每一色彩通道的多个残值和预测值重建色彩变换块；以及应用反向色彩变换，以将第二色域中的色彩变换块转换为第一色域中的当前编码单元的多个输入像素，其中第一色域不同于第二色域。
依据本发明的另一实施例，提出一种视频编码方法，使用多个编码模式，其特征在于，视频编码方法包含：接收当前图像单元中的当前编码单元的多个输入像素，其中当前图像单元被分为多个编码单元；确定当前编码单元的平坦度信息；自编码模式群中选择一个编码模式；为当前编码单元确定关于是否将当前编码单元的平坦度信息的语法合并到多个当前块语法中的条件；使用所选择的编码模式编码当前编码单元；以及有条件地基于条件将当前编码单元的平坦度信息的语法在多个当前块语法中标示。
依据本发明的另一实施例，提出一种视频解码方法，使用多个编码模式，其特征在于，视频解码方法包含：接收相应于压缩视频数据的比特流，其中比特流包含当前图像单元中的当前编码单元的多个输入像素，其中当前图像单元被分为多个编码单元；自比特流解码当前编码单元的编码模式；若编码模式属于选定的编码模式群，依据比特流中标示的平坦度类型，自比特流导出当前编码块的平坦度类型；以及若编码模式不属于选定的编码模式群，基于默认平坦度类型导出当前编码块的平坦度类型。
本发明的视频编码方法/装置以及视频解码方法/装置可以实现有效率的压缩。
【附图说明】
图1是范例的DSC编码器的方框图。
图2是依据第一方法的实施例的编码比特流的范例。
图3A是依据第三方法的实施例的编码比特流的范例的示意图。
图3B是依据第三方法的实施例的编码比特流的范例的示意图。
图4是使用具有多个色彩空间的多个编码模式的视频编码器的方法范例的流程图。
图5是使用具有多个色彩空间的多个编码模式的视频编码器的方法范例的流程图。
图6是使用多个编码模式的视频编码器的方法范例的流程图。
【具体实施方式】
在说明书及权利要求书当中使用了某些词汇来指称特定的组件。所属领域中的技术人员应可理解，制造商可能会用不同的名词来称呼同样的组件。本说明书及权利要求书并不以名称的差异来作为区分组件的方式，而是以组件在功能上的差异来作为区分的基准。在通篇说明书及权利要求书当中所提及的「包含」是开放式的用语，故应解释成「包含但不限定于」。另外，「耦接」一词在此包含任何直接及间接的电气连接手段。因此，若文中描述第一装置耦接于第二装置，则代表第一装置可直接电气连接于第二装置，或透过其它装置或连接手段间接地电气连接至第二装置。
虽然本发明已以较佳实施例揭露，然其并非用以限定本发明，任何本领域技术人员，在不脱离本发明的精神和范围内，当可作些许的更动与润饰，因此本发明的保护范围当视所附的权利要求范围所界定者为准。
依据现有的高级显示流压缩(Advanced Display Stream Compression，简写为ADSC)标准，平坦度类型的语法在给每一编码单元中被标示。换言之，部分带宽将被要求用于每一编码单元中的平坦度类型的语法标示。可能存在平坦度类型是隐含的依据一定预测模式或一定编码条件的情况。因此，若块是以这样的模式或这样的编解码条件被编码，编码模式或编解码条件已经指示了平坦度类型。标示以所述模式编码的编码单元的平坦度类型就成为多余的。此外，可能有其他情况需要平坦度类型的信息。
对于ADSC，通常使用可逆的色彩转换，其中色彩变换和反向色彩变换的系数可以用一个小数目的比特位来实现。举例来说，YCoCg色彩格式可使用色彩变换系数(用0、1、1/2和1/4表示)自RGB色彩格式转换。尽管转换的色彩格式( 例如，YCoCg)适用于自然风光的图像，转换的色彩格式可能并不总是其他类型图像内容的最佳格式。举例来说，相比于对应于自然场景的图像，RGB格式可导致人工图像具有较低交叉色彩相关(cross-colorcorrelation)。相应地，使用不同色彩格式的多个编码模式可被用于编码像素块。举例来说，MPP模式和 MPPF模式可以在444色彩取样格式中使用RGB色域以及在422/420色彩取样格式中使用YCbCr色域。
依据第一方法的实施例，用于当前编码单元的，与选定的编码模式相关的色彩空间或者色域的语法在当前编码单元语法中被标示。采用该第一方法的编码器可使用片(slice)作为应用编码参数(例如，比特率)的图像单元。输入图像被分为一个或多个片，且每一片独立于其他片编码。每一片被分为多个编码单元(即，块)，其中每一块由N*M个像素组成，其中N代表块宽度，M代表画面高度。一个编码模式被从一组编码模式中选出，其中该组编码模式中的每一编码模式与自一群色域中选出的一个相应色域相关。选定的编码模式被随后用于在当前色域中编码当前块。相应色域的语法在当前编码单元语法中被标示。
采用本发明的第一方法的解码器可解码片中包含编码单元语法的比特流，其中编码单元语法与编码单元相关联。解码器自编码单元语法解码当前编码单元的当前编码模式，其中当前编码模式与相应色域相关联。解码器随后自当前编码单元语法中确定当前编码单元的色域。解码器随后在相应色域中使用解码的当前编码模式解码当前编码单元的像素。
图2是依据第一方法的实施例的编码比特流的范例，其中当前编码单元的色域语法被合并至当前编码单元语法中。在图2中，编码比特流210包含多个编码单元语法，包含当前编码单元语法212。编码单元语法212包含模式报头214。色域语法216与当前编码单元的其他语法218被一起发送。色域可对应于RGB色域或 YCoCg色域。
在现有ADSC方法中，MPP模式被用于输入像素的色域中的输入像素的一个块中。编码单元的预测值自相邻的重建块导出。色彩通道的所确定的预测值介于[ 中间值，中间值+2*偏差]之间，其中所述中间值和输入块的比特位深度和输入像素的色域的色彩通道有关，而偏差和到量化参数(quantization parameter ，简写为QP)和输入像素的色彩通道有关。通过减少一个色彩通道的残值的比特位深度，残值被随后量化，其中所减少的比特位深度为N比特位，且N和QP值和色彩通道有关。对于一个色彩通道，已截短的残值(clippedresidues)是通过将量化残值截短至(M-N)比特位的动态范围产生，其中M是色彩通道的比特位深度。已截短的残值被编码至比特流中。
依据本发明的第二方法，当MPP模式被选择来用于当前编码块时，色彩变换被应用到当前编码单元中的输入像素。如果输入像素是在第一色域中，而色彩变换将要把输入像素转换到第二色域，其中第二色域不同于第一色域。举例来说，输入像素可能在RGB色域中，其中每一RGB色彩通道具有8个比特位。若当MPP 模式被选择后，YCoCg被选择作为色域，色彩变换将转换RGB色域中的输入像素为YCoCg域。Y色彩通道的比特位深度可为8，而Co和Cg色彩通道的比特位深度可为9。中点值可自YCoCg-转换色域的左重建块的平均值导出。残值通过自输入块中减去预测值(即，中点值)计算出，且预测过程在YCoCg-转换色域中执行。若QP被设置为2，且对于量化过程中的Y/Co/Cg通道，减少的比特位深度N分别是2/3/3，MPP模式的剩余的编码过程描述如下。
Y通道的中间值是128，而Co/Cg通道的中间值是0。MPY的计算出的中点值介于[128,128+2*biasY]之间，MPCo的计算出的中点值介于[0,0+2*biasCo]之间， MPCg的计算出的中点值介于[0,0+2*biasCg]之间，其中MPX代表色彩通道的中点值。偏差值与N有关，其中在上述情况下，biasY等于2，而biasCo和biasCg等于4。Y 的残值的动态范围是[(0-(128+2*biasY)),(255-128)]＝[-132,127]，Co 的残值的动态范围是[(-256-(0+2*biasCo)),(255-0)]＝[-264,255]，Cg的残值的动态范围也是[-264,255]。通过分别移除Y的两个最不显著比特位(least significant bit)及Co和Cg的三个最不显著比特位，残值被量化。量化的残值随后被截短为(M-N)＝6比特位以适应动态范围[-32,31]。截短的6比特位残值被编码至比特流中。
依据本发明的第三方法，取决于测试条件，平坦度类型语法自适应地包含于编码单元语法中。若条件为第一状态，平坦度类型语法在编码单元语法中被跳过(即，不被包含)。若条件为第二状态，平坦度类型语法被包含编码单元语法中。举例来说，第一状态可对应于“真”，而第二状态可对应于“假”。可选地，第一状态可对应于“假”，而第二状态可对应用“真”。
采用该第三方法的编码器可使用片作为应用编码参数(例如，比特率)的图像单元。输入图像被分为一个或多个片，且每一片独立于其他片编码。每一片被分为多个编码单元(即，块)，其中每一块由N*M个像素组成，其中N代表块宽度，M代表画面高度。一个编码模式被从一组编码模式中选出，且该选定的编码模式随后被用于编码当前块。条件被确定，若所述条件为真，与平坦度类型相关联的语法不被包含在被标示在当前编码单元中的编码单元语法中。否则 (即，条件为“假”)，与平坦度类型相关联的语法包含在被标示在当前编码单元中的编码单元语法中。
条件可以与当前编码单元(即，块)的平坦度相关。举例来说，若编码单元的平坦度类型不影响重建像素值，条件可被设置为“真”。在另一个范例中，若编码单元的平坦度类型不影响解码像素值，条件可被设置为“真”。在又一个范例中，若编码单元的平坦度类型是固定类型，条件可被设置为“真”。在另一个情况下，条件可以与编码单元的编码模式相关。
采用本发明的第三方法的解码器可解码片中包含编码单元语法的比特流，其中编码单元语法与编码单元相关联。解码器自编码单元语法决定当前编码单元的编码模式。解码器随后依据解码的编码模式解码当前编码单元的平坦度类型语法。若解码的编码模式属于被选定的模式群，平坦度类型被自比特流中标示的平坦度语法中导出。若解码的编码模式不属于被选定的模式群，平坦度类型被确定为默认平坦度类型。
被选定的模式群包含一个或多个编码模式，该一个或多个编码模式要求编码器标示编码单元的额外的平坦度语法。默认的平坦度类型可对应于解码当前编码单元之前的预定平坦度类型。举例来说，默认平坦度类型可被设置为类型：-1用于解码图像。
图3A和图3B是依据第三方法的实施例的编码比特流的范例的示意图，其中当前编码单元的平坦度语法被自适应的并入。在图3A中，编码比特流310包含多个编码单元语法，包含当前编码单元语法312。编码单元语法312包含模式报头 314。图3A对应于条件为假的情况。因此，平坦度语法316与当前编码单元的其他语法318被一起标示。在图3B中，编码比特流320包含多个编码单元语法，包含当前编码单元语法322。编码单元语法322包含模式报头324。图3B对应于条件为真的情况。因此，仅有当前编码单元的其他语法326被标示，平坦度语法不被标示。
图4是使用具有多个色彩空间的多个编码模式的视频编码器的范例的流程图，其中色域的语法标示在比特流中。在步骤410，编码器接收当前图像单元中的当前编码单元的输入像素，其中当前图像单元被分为多个编码单元。在步骤 420，一个编码模式被自编码模式群中选出，其中一个相应色域与该编码模式相关联，且该相应色域自包含至少两个不同色域的色域群中选出。在步骤430中，使用该编码模式在相应色域中编码当前编码单元。在步骤440中，相应色域的语法在当前编码单元语法中被标示。阅读完关于编码器的流程图之后，相应解码器的流程图可以被本领域技术人员类似地开发。
图5是使用具有多个色彩空间的多个编码模式的视频编码器的范例的流程图，其中色域的语法标示在比特流中。在步骤510，编码器接收当前图像单元中的当前编码单元的输入像素，其中当前图像单元被分为多个编码单元，且当前编码单元的输入像素在第一色域中。在步骤520，一个编码模式被从包含中点预测模式的编码模式群中选出。在步骤530中，检查中点预测模式是否被选来编码当前编码单元的输入像素。若检查结果为“是”，执行步骤540、550、560和570 。若检查结果为“否”，执行步骤580。在步骤540，色彩变换被用来将当前编码单元的输入像素转换为第二色域中的色彩变换块，其中第二色域不同于第一色域。在步骤550中，自第二色域中的色彩变换块的动态范围的一个或多个中点值或邻接的重建块的一个或多个平均值导出预测值。在步骤560，自色彩变换块和预测值导出当前编码单元的每一色彩通道的残值。在步骤570，残值被编码以包含在比特流中。在步骤580，当前编码单元的输入像素使用来自于编码模式群，且并非为该中点预测模式的编码模式编码。阅读完关于编码器的流程图之后，相应解码器的流程图可以被本领域技术人员类似地开发。
当使用本发明的具有多个色彩空间的多个编码模式的视频解码器时，视频解码器接收相应于压缩视频数据的比特流，其中比特流包含当前图像单元中的当前编码单元的多个输入像素，其中当前图像单元被分为多个编码单元，且当前编码单元的所述多个输入像素在第一色域中；自比特流解码当前编码单元的编码模式，其中编码模式属于包含中点预测模式的编码模式群；若被解码的编码模式是中点预测模式，视频解码器执行以下操作：自比特流导出第二色域中的当前编码单元的每一色彩通道的多个残值，用于当前编码单元；导出相应于色彩变换块的动态范围的一个或多个中点值或第二色域中的邻接的重建块的一个或多个平均值的预测值；基于导出的当前编码单元的每一色彩通道的多个残值和预测值重建色彩变换块；以及应用反向色彩变换，以将第二色域中的色彩变换块转换为第一色域中的当前编码单元的多个输入像素，其中第一色域不同于第二色域。
图6是使用多个编码模式的视频编码器的范例的流程图，其中取决于条件，平坦度类型的语法自适应地在比特流中标示。在步骤610中，编码器接收当前图像单元中的当前编码单元的输入像素，其中当前图像单元被分为多个编码单元。在步骤620中，当前编码单元的平坦度信息被确定，而在步骤630，一个编码模式被从编码模式群中选出。在步骤640中，确定当前编码单元的关于是否将当前编码单元的平坦度信息的语法合并至当前块语法的条件。在步骤650，使用选定的编码模式编码当前编码单元。在步骤660，当前编码单元的平坦度信息的语法被有条件基于所述条件，标示在当前块语法中。阅读完关于编码器的流程图之后，相应解码器的流程图可以被本领域技术人员类似地开发。
上面所示的流程图用于说明结合本发明的实施例的视频编码。本领域技术人员可以修改每个步骤，重新排列步骤，分割步骤，或组合各步骤来实施本发明而不脱离本发明的精神实质。
上述描述用于使得本领域技术人员能够实现并使用本发明。对本领域的专业技术人员来说，将这些实施例进行的多种修改将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本申请所公开的原理和新颖特点相一致的最宽的范围。在上述细节描述中，阐述了多种特定细节来提供对本发明的彻底了解。而本领域技术人员可理解本发明可以实现。
上述本发明的实施例可通过多种硬件、软件码或其组合实现。举例来说，本发明的一实施例可为集成到视频压缩芯片的电路，或者集成到视频压缩系统的程序码进行相应处理。本发明的另一实施例可为在数字信号处理器(Digital Signal Processor,DSP)上执行的程序码进行相应处理。本发明还可包括一系列功能，并由电脑处理器、数字信号处理器、微处理器、现场可编程门阵列(Field Programmable Gate Array,FPGA)执行。通过执行定义本发明实施例中特定方法的机器可读软件码或韧件码，上述处理器可根据本发明执行特定任务。软件码或韧件码可在不同程序语言和不同格式或方式中进行。软件码可针对不同的目标平台进行编译。不过，软件码不同的编码格式、方式和语言，以及配置码执行与本发明有关的任务的其它方法均符合本发明的精神，落入本发明的保护范围。
在不脱离精神或实质特性的前提下，本发明可以其他方式实现。上述示范例仅用于说明的目的，并非用以限制本发明。因此，本发明的保护范围当视之前的权利要求书所界定为准。凡在本发明权利要求书的等同定义和范围之内，所作的任何修改，均应包括在本发明的保护范围之内。
以上所述仅为本发明的较佳实施例，本领域相关的技术人员依据本发明的精神所做的等效变化与修改，都应当涵盖在权利要求内。

Claims (4)

1.一种视频编码方法，使用具有多个色彩空间的多个编码模式，其特征在于，所述视频编码方法包含：
接收当前图像单元中的当前编码单元的多个输入像素，其中所述当前图像单元被分为多个编码单元，且所述当前编码单元的所述多个输入像素在第一色域中；
自编码模式群中选择一个编码模式，其中所述编码模式群包含中点预测模式；以及
若所述中点预测模式被选择来编码所述当前编码单元的所述多个输入像素：
应用色彩变换，以将所述当前编码单元的所述多个输入像素转换为第二色域中的色彩变换块，其中所述第二色域不同于所述第一色域；
自所述第二色域中的所述色彩变换块的动态范围的一个或多个中点值或邻接的重建块的一个或多个平均值中导出预测值；
自所述色彩变换块和所述预测值导出所述当前编码单元的每一色彩通道的残值；以及
编码所述多个残值以包含入数据流中。
2.根据权利要求1所述的视频编码方法，其特征在于，所述第一色域对应于RGB色域，且所述第二色域对应于YCoCg色域。
3.一种视频解码方法，使用具有多个色彩空间的多个编码模式，其特征在于，所述视频解码方法包含：
接收相应于压缩视频数据的比特流，其中所述比特流包含当前图像单元中的当前编码单元的多个输入像素，其中所述当前图像单元被分为多个编码单元，且所述当前编码单元的所述多个输入像素在第一色域中；
自所述比特流解码所述当前编码单元的编码模式，其中所述编码模式属于包含中点预测模式的编码模式群；
若被解码的所述编码模式是所述中点预测模式：
自所述比特流导出第二色域中的所述当前编码单元的每一色彩通道的多个残值，用于所述当前编码单元；
导出相应于色彩变换块的动态范围的一个或多个中点值或所述第二色域中的邻接的重建块的一个或多个平均值的预测值；
基于导出的所述当前编码单元的所述每一色彩通道的所述多个残值和所述预测值重建所述色彩变换块；以及
应用反向色彩变换，以将所述第二色域中的所述色彩变换块转换为第一色域中的所述当前编码单元的所述多个输入像素，其中所述第一色域不同于所述第二色域。
4.根据权利要求3所述的视频解码方法，其特征在于，所述第一色域对应于RGB色域，且所述第二色域对应于YCoCg色域。
CN201910372926.6A 2015-10-08 2016-09-27 视频编码方法/装置以及视频解码方法/装置 Active CN110234010B (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201562238859P 2015-10-08 2015-10-08
US62/238,859 2015-10-08
US201562271503P 2015-12-28 2015-12-28
US62/271,503 2015-12-28
US15/210,903 2016-07-15
US15/210,903 US10225561B2 (en) 2015-10-08 2016-07-15 Method and apparatus for syntax signaling in image and video compression
CN201610852884.2A CN106973295B (zh) 2015-10-08 2016-09-27 视频编码方法/装置以及视频解码方法/装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201610852884.2A Division CN106973295B (zh) 2015-10-08 2016-09-27 视频编码方法/装置以及视频解码方法/装置

Publications (2)

Publication Number Publication Date
CN110234010A CN110234010A (zh) 2019-09-13
CN110234010B true CN110234010B (zh) 2021-06-18

Family

ID=58500316

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201910372247.9A Withdrawn CN110139103A (zh) 2015-10-08 2016-09-27 视频编码方法/装置以及视频解码方法/装置
CN201910372926.6A Active CN110234010B (zh) 2015-10-08 2016-09-27 视频编码方法/装置以及视频解码方法/装置
CN201610852884.2A Active CN106973295B (zh) 2015-10-08 2016-09-27 视频编码方法/装置以及视频解码方法/装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910372247.9A Withdrawn CN110139103A (zh) 2015-10-08 2016-09-27 视频编码方法/装置以及视频解码方法/装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201610852884.2A Active CN106973295B (zh) 2015-10-08 2016-09-27 视频编码方法/装置以及视频解码方法/装置

Country Status (2)

Country Link
US (1) US10225561B2 (zh)
CN (3) CN110139103A (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108989819B (zh) * 2017-06-03 2023-04-07 上海天荷电子信息有限公司 各模式采用各自相应色彩空间的数据压缩方法和装置
WO2019105536A1 (en) 2017-11-28 2019-06-06 Huawei Technologies Co., Ltd. Syntax prediction using reconstructed samples
CN108289223B (zh) * 2018-02-06 2021-09-21 上海通途半导体科技有限公司 一种用于液晶屏过驱动装置中的图像压缩方法及装置
US10970881B2 (en) * 2018-12-21 2021-04-06 Samsung Display Co., Ltd. Fallback modes for display compression
CN117579830A (zh) 2019-06-21 2024-02-20 北京字节跳动网络技术有限公司 自适应环内颜色空间转换和其他编解码工具的选择性使用
CN115361554A (zh) * 2022-08-18 2022-11-18 视梵微电子(深圳)有限公司 一种图像解压的方法和装置

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101160970A (zh) * 2005-04-18 2008-04-09 三星电子株式会社 运动图像编码和解码方法以及设备

Family Cites Families (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1538826A3 (en) * 2003-12-05 2007-03-07 Samsung Electronics Co., Ltd. Color transformation method and apparatus
US20050259730A1 (en) * 2004-05-18 2005-11-24 Sharp Laboratories Of America, Inc. Video coding with residual color conversion using reversible YCoCg
KR100723408B1 (ko) * 2004-07-22 2007-05-30 삼성전자주식회사 컬러영상의 변환/역변환 및 양자화/역양자화 방법 및장치와, 이를 이용한 컬러영상의 부호화/복호화 방법 및장치
US7903306B2 (en) * 2005-07-22 2011-03-08 Samsung Electronics Co., Ltd. Sensor image encoding and/or decoding system, medium, and method
JP5101522B2 (ja) * 2006-01-13 2012-12-19 フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー．ファオ 適応色空間変換を用いた画像符号化
US20110211636A1 (en) * 2008-11-07 2011-09-01 Yoshihisa Yamada Image encoder and image decoder
KR101452713B1 (ko) * 2009-10-30 2014-10-21 삼성전자주식회사 픽처 경계의 부호화 단위를 부호화, 복호화 하는 방법 및 장치
JP5520122B2 (ja) * 2010-04-14 2014-06-11 キヤノン株式会社 データ変換装置
KR101668093B1 (ko) * 2010-06-17 2016-10-21 삼성전자주식회사 데이터 인코딩 및 디코딩 방법 및 장치
JP5850214B2 (ja) * 2011-01-11 2016-02-03 ソニー株式会社 画像処理装置および方法、プログラム、並びに記録媒体
BR112013020069A2 (pt) * 2011-01-28 2016-10-25 Eye Io Llc codificador e métodos para conversão de cor baseada no modelo hvs
EP2685719B1 (en) * 2011-03-09 2019-10-30 Panasonic Intellectual Property Corporation of America Video image decoding device
US9414054B2 (en) * 2012-07-02 2016-08-09 Microsoft Technology Licensing, Llc Control and use of chroma quantization parameter values
US9883180B2 (en) * 2012-10-03 2018-01-30 Avago Technologies General Ip (Singapore) Pte. Ltd. Bounded rate near-lossless and lossless image compression
US10277907B2 (en) * 2012-10-25 2019-04-30 Integrated Device Technology, Inc. Rate-distortion optimizers and optimization techniques including joint optimization of multiple color components
US20140376611A1 (en) * 2013-06-21 2014-12-25 Qualcomm Incorporated Adaptive color transforms for video coding
KR20150027530A (ko) * 2013-09-04 2015-03-12 한국전자통신연구원 Hevc 부호화 장치 및 이를 이용한 부호화 방법
US10390034B2 (en) * 2014-01-03 2019-08-20 Microsoft Technology Licensing, Llc Innovations in block vector prediction and estimation of reconstructed sample values within an overlap area
US11070810B2 (en) * 2014-03-14 2021-07-20 Qualcomm Incorporated Modifying bit depths in color-space transform coding
US20160173906A1 (en) * 2014-12-11 2016-06-16 Intel Corporation Partition mode and transform size determination based on flatness of video
US10321162B2 (en) * 2015-06-08 2019-06-11 Qualcomm Incorporated Derivation of color gamut scalability parameters and tables in scalable video coding
US10200701B2 (en) * 2015-10-14 2019-02-05 Qualcomm Incorporated HDR and WCG coding architecture with SDR backwards compatibility in a single bitstream for video coding
US11102495B2 (en) * 2016-05-17 2021-08-24 Qualcomm Incorporated Methods and systems for generating and processing content color volume messages for video
US10855989B2 (en) * 2016-06-09 2020-12-01 Qualcomm Incorporated Substream multiplexing for display stream compression
US10979729B2 (en) * 2016-11-30 2021-04-13 Qualcomm Incorporated Systems and methods for signaling and constraining a high dynamic range (HDR) video system with dynamic metadata
US10567803B2 (en) * 2017-04-12 2020-02-18 Qualcomm Incorporated Midpoint prediction error diffusion for display stream compression

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101160970A (zh) * 2005-04-18 2008-04-09 三星电子株式会社 运动图像编码和解码方法以及设备

Also Published As

Publication number Publication date
CN110139103A (zh) 2019-08-16
CN106973295B (zh) 2021-01-01
CN106973295A (zh) 2017-07-21
US20170105011A1 (en) 2017-04-13
US10225561B2 (en) 2019-03-05
CN110234010A (zh) 2019-09-13

Similar Documents

Publication Publication Date Title
CN110234010B (zh) 视频编码方法/装置以及视频解码方法/装置
US20230276061A1 (en) Scalable video coding system with parameter signaling
US10200690B2 (en) Video decoder conformance for high dynamic range (HDR) video coding using a core video standard
EP3632114B1 (en) Substream multiplexing for display stream compression
KR102158418B1 (ko) 개선된 컬러 재맵핑 정보 보충 강화 정보 메시지 프로세싱
KR102120571B1 (ko) 넌-4:4:4 크로마 서브-샘플링의 디스플레이 스트림 압축 (dsc) 을 위한 엔트로피 코딩 기법들
EP3284253B1 (en) Rate-constrained fallback mode for display stream compression
CN107040785B (zh) 图像解码和图像编码的方法
JP6921873B2 (ja) ディスプレイストリーム圧縮のためのサブストリーム多重化
TW201931853A (zh) 具有聯合像素/變換為基礎之量化之視頻寫碼之量化參數控制
CN114287133B (zh) 帧内模式中的预测样点滤波的加权因子
CN107454414B (zh) 图像编码/解码方法及相关装置
US10142629B2 (en) Method and apparatus for entropy coding in image compression
US10491906B2 (en) Method and apparatus for block prediction using variable block-size in image compression
KR20180122354A (ko) 디스플레이 스트림 압축에서의 양자화 파라미터들의 적응적 계산을 위한 장치 및 방법들
EP3562165B1 (en) Custom data indicating nominal range of samples of media content
TWI686078B (zh) 用於在顯示串流壓縮(dsc)中計算失真之系統及方法
JP2018515015A (ja) ディスプレイストリーム圧縮（ｄｓｃ）のための量子化パラメータ（ｑｐ）更新分類
CN106028031B (zh) 视频编码装置和方法、视频解码装置和方法
EP3026908A1 (en) Method and device for quantizing and de-quantizing a picture using scaling factors for chrominance based on luminance
EP3096520B1 (en) A method for encoding/decoding a picture block
EP3272124B1 (en) Scalable video coding system with parameter signaling
KR20230123984A (ko) 교차 성분 스케일링을 갖는 루마 맵핑을 위한 방법 및 디바이스
CN118743213A (zh) 视频图像数据的编码/解码

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant