CN111480339B - 用于视频译码的方法和装置、计算机可读存储介质、设备 - Google Patents

用于视频译码的方法和装置、计算机可读存储介质、设备 Download PDF

Info

Publication number
CN111480339B
CN111480339B CN201880078538.0A CN201880078538A CN111480339B CN 111480339 B CN111480339 B CN 111480339B CN 201880078538 A CN201880078538 A CN 201880078538A CN 111480339 B CN111480339 B CN 111480339B
Authority
CN
China
Prior art keywords
block
video data
hdr
wcg video
parameters
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201880078538.0A
Other languages
English (en)
Other versions
CN111480339A (zh
Inventor
D·鲁萨诺夫斯基
A·K·瑞玛苏布雷蒙尼安
M·卡切维奇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN111480339A publication Critical patent/CN111480339A/zh
Application granted granted Critical
Publication of CN111480339B publication Critical patent/CN111480339B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/124—Quantisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/90—Dynamic range modification of images or parts thereof
    • G06T5/94—Dynamic range modification of images or parts thereof based on local image properties, e.g. for local contrast enhancement
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/18—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a set of transform coefficients
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10024—Color image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20021—Dividing image into blocks, subimages or windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明提供一种用于处理高动态范围及/或广色域HDR/WCG视频数据的装置，其可经配置以：确定用于所述HDR/WCG视频数据的块的经量化变换系数的量化参数；基于所述经确定量化参数对所述经量化变换系数进行逆量化以确定经解量化变换系数；基于所述经解量化变换系数，确定所述HDR/WCG视频数据的所述块的残余值块；基于所述残余值块，确定所述HDR/WCG视频数据的所述块的经重建块；确定用于所述HDR/WCG视频数据的所述块的一或多个动态范围调整DRA参数；基于所述经确定量化参数调整所述一或多个DRA参数以确定经调整DRA参数；及使用所述经调整DRA参数对所述经重建块执行DRA。

Description

用于视频译码的方法和装置、计算机可读存储介质、设备
本申请案请求2018年12月18日提交的美国申请案第16/224,320号的优先权，所述申请案请求2017年12月19日提交的美国临时申请案62/607,887的权益，以上所列申请案中的每一者的全部内容以引用的方式并入。
技术领域
本发明涉及视频编码及视频解码。
背景技术
数字视频能力可并入到广泛范围的装置中，包含数字电视、数字直播系统、无线广播系统、个人数字助理(PDA)、膝上型或台式计算机、平板电脑、电子书阅读器、数码相机、数字记录装置、数字媒体播放器、视频游戏装置、视频游戏控制台、蜂窝式或卫星无线电电话(所谓的“智能电话”)、视频电话会议装置、视频流式传输装置及其类似者。数字视频装置实施视频压缩技术，例如，由MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4第10部分高级视频译码(AVC)定义的标准、最近定案的高效视频译码 (HEVC)标准及这些标准的扩展中所描述的技术。视频装置可通过实施这些视频压缩技术而更有效地发射、接收、编码、解码及/或存储数字视频信息。
视频压缩技术执行空间(图片内)预测及/或时间(图片间)预测来减少或去除视频序列中固有的冗余。对于基于块的视频译码，可将视频切片(即，视频帧或视频帧的一部分)分割成视频块，其也可被称作树型块、译码单元(CU)及/或译码节点。图片的经帧内译码(I)切片中的视频块是使用关于同一图片中的邻近块中的参考样本的空间预测来编码的。图片的经帧间译码(P或B)切片中的视频块可使用关于同一图片中的邻近块中的参考样本的空间预测或关于其它参考图片中的参考样本的时间预测。图片可被称作帧，且参考图片可被称作参考帧。
空间或时间预测产生用于待译码的块的预测性块。残余数据表示待译码的原始块与预测性块之间的像素差。经帧间译码块根据指向形成预测性块的参考样本的块的运动向量来编码，且残余数据指示经译码块与预测性块之间的差异。经帧内译码块根据帧内译码模式及残余数据编码。为进行进一步压缩，可将残余数据从像素域变换到变换域，从而产生残余变换系数，随后可量化残余变换系数。可扫描最初布置成二维阵列的经量化变换系数以便产生变换系数的一维向量，且可应用熵译码以实现更多压缩。
发明内容
本发明的一或多个方面涉及用高动态范围(HDR)及广色域(WCG)表示对视频信号，例如视频数据进行译码的领域。
根据一个实例，一种用于处理高动态范围及/或广色域(HDR/WCG)视频数据的方法包含：确定用于所述HDR/WCG视频数据的块的经量化变换系数的量化参数；基于所述经确定量化参数对所述经量化变换系数进行逆量化以确定经解量化变换系数；基于所述经解量化变换系数，确定所述HDR/WCG视频数据的所述块的残余值块；基于所述残余值块，确定所述HDR/WCG视频数据的所述块的经重建块；确定用于所述HDR/WCG视频数据的所述块的一或多个动态范围调整(DRA)参数；基于所述经确定量化参数调整所述一或多个DRA参数以确定一或多个经调整DRA参数；及使用所述一或多个经调整 DRA参数对所述HDR/WCG视频数据的所述经重建块执行DRA。
根据另一实例，一种用于处理高动态范围及/或广色域(HDR/WCG)视频数据的装置包含：存储器，其经配置以存储视频数据；及一或多个处理器，其耦合到所述存储器且经配置以：确定用于所述HDR/WCG视频数据的块的经量化变换系数的量化参数；基于所述经确定量化参数对所述经量化变换系数进行逆量化以确定经解量化变换系数；基于所述经解量化变换系数，确定所述HDR/WCG视频数据的所述块的残余值块；基于所述残余值块，确定所述HDR/WCG视频数据的所述块的经重建块；确定用于所述HDR/WCG 视频数据的所述块的一或多个动态范围调整(DRA)参数；基于所述经确定量化参数调整所述一或多个DRA参数以确定一或多个经调整DRA参数；及使用所述一或多个经调整 DRA参数对所述HDR/WCG视频数据的所述经重建块执行DRA。
根据另一实例，一种计算机可读媒体存储在由一或多个处理器执行时使得所述一或多个处理器进行以下操作的指令：确定用于所述高动态范围及/或广色域(HDR/WCG)视频数据的块的经量化变换系数的量化参数；基于所述经确定量化参数对所述经量化变换系数进行逆量化以确定经解量化变换系数；基于所述经解量化变换系数，确定所述 HDR/WCG视频数据的所述块的残余值块；基于所述残余值块，确定所述HDR/WCG视频数据的所述块的经重建块；确定用于所述HDR/WCG视频数据的所述块的一或多个动态范围调整(DRA)参数；基于所述经确定量化参数调整所述一或多个DRA参数以确定一或多个经调整DRA参数；及使用所述一或多个经调整DRA参数对所述HDR/WCG视频数据的所述经重建块执行DRA。
根据另一实例，一种用于处理高动态范围及/或广色域(HDR/WCG)视频数据的设备包含：用于确定用于所述HDR/WCG视频数据的块的经量化变换系数的量化参数的装置；用于基于所述经确定量化参数对所述经量化变换系数进行逆量化以确定经解量化变换系数的装置；用于基于所述经解量化变换系数确定所述HDR/WCG视频数据的所述块的残余值块的装置；用于基于所述残余值块确定所述HDR/WCG视频数据的所述块的经重建块的装置；用于确定用于所述HDR/WCG视频数据的所述块的一或多个动态范围调整(DRA)参数的装置；用于基于所述经确定量化参数调整所述一或多个DRA参数以确定一或多个经调整DRA参数的装置；及用于使用所述一或多个经调整DRA参数对所述 HDR/WCG视频数据的所述经重建块执行DRA的装置。
在附图及以下描述中阐述本发明的一或多个实例的细节。其它特征、目标及优点将从实施方式、图式及权利要求书显而易见。
附图说明
图1为说明可利用本发明中所描述的技术的实例视频编码及解码系统的框图。
图2为说明HDR数据的概念的概念图。
图3为说明实例色域的概念图。
图4为说明HDR/WCG表示转换的实例的流程图。
图5为说明HDR/WCG逆转换的实例的流程图。
图6为说明用于从感知上均匀的码层级到线性明度的视频数据转换(包含SDR及HDR)的电光转移函数(EOTF)的实例的概念图。
图7展示PQ TF(ST2084 EOTF)的实例观测。
图8展示LCS函数的实例。
图9展示具有DRA的视频译码系统的实例。
图10为说明可实施本发明中所描述的技术的实例视频编码器的框图。
图11为说明可实施本发明中所描述的技术的实例视频解码器的框图。
图12为说明根据本发明的技术的用于解码视频数据的视频解码器的实例操作的流程图。
具体实施方式
本发明描述与使用高动态范围(HDR)及广色域(WCG)表示对视频信号进行译码的领域相关的技术。更具体地说，本发明描述应用于某些色彩空间中的视频数据以实现HDR及WCG视频数据的更有效压缩的传信及操作。本发明的技术可改进用于对HDR及WCG 视频数据进行译码的混合型视频译码系统的压缩效率。
如将在下文更详细地解释，HDR视频一般指代动态范围大于标准动态范围(SDR)视频的动态范围的视频。WCG一般指代用可包含更鲜明色彩(例如更红的红色、更绿的绿色、更蓝的蓝色等)的更宽色域表示的视频。HDR及WCG均可使视频看起来更逼真。虽然使视频看起来更逼真，但HDR及WCG也可增加与编码及解码视频数据相关联的复杂度。本发明的技术可帮助降低与编码及解码HDR及WCG视频数据相关联的复杂度，且更具体地说，可通过协调在量化变换系数时在变换域中执行的量化与在执行动态范围调整(DRA)时在像素域中执行的缩放及量化来降低与编码及解码HDR及WCG视频数据相关联的复杂度。
图1为说明可处理HDR/WCG视频数据且利用本发明中所描述的DRA技术的实例视频编码及解码系统10的框图。如图1中所展示，系统10包含源装置12，其提供稍后将由目的地装置14解码的经编码视频数据。特定地说，源装置12通过计算机可读媒体 16将视频数据提供到目的地装置14。源装置12及目的地装置14可包括广泛范围的装置中的任一者，包含台式计算机、笔记型计算机(即，膝上型计算机)、平板电脑、机顶盒、例如所谓的“智能”电话的电话手机、所谓的“智能”平板、电视机、相机、显示装置、数字媒体播放器、视频游戏控制台、视频流式传输装置或类似者。在一些情况下，源装置12及目的地装置14可经装备以用于无线通信。
目的地装置14可通过计算机可读媒体16接收待解码的经编码视频数据。计算机可读媒体16可包括任何类型的能够将经编码视频数据从源装置12移动到目的地装置14 的媒体或装置。在一个实例中，计算机可读媒体16可包括使得源装置12能够实时将经编码视频数据直接发射到目的地装置14的通信媒体。经编码视频数据可根据通信标准 (例如有线或无线通信协议)进行调制，且发射到目的地装置14。通信媒体可包括任何无线或有线通信媒体，例如射频(RF)频谱或一或多个物理发射线。通信媒体可形成基于包的网络(例如，局域网、广域网或例如因特网的全域网络)的部分。通信媒体可包含路由器、交换器、基站或可用于促进从源装置12到目的地装置14的通信的任何其它设备。
在其它实例中，计算机可读媒体16可包含非暂时性存储媒体，例如硬盘、闪存驱动器、压缩光盘、数字视频光盘、蓝光光盘或其它计算机可读媒体。在一些实例中，网络服务器(未展示)可例如通过网络发射从源装置12接收经编码视频数据且将经编码视频数据提供到目的地装置14。类似地，例如光盘冲压设施的媒体生产设施的计算装置可从源装置12接收经编码视频数据且生产含有经编码视频数据的光盘。因此，在各种实例中，计算机可读媒体16可理解为包含各种形式的一或多个计算机可读媒体。
在一些实例中，经编码数据可从输出接口22输出到存储装置。类似地，经编码数据可通过输入接口从存储装置存取。存储装置可包含多种分布式或本地存取的数据存储媒体中的任一者，例如硬盘驱动器、蓝光光盘、DVD、CD-ROM、闪存存储器、易失性或非易失性存储器或用于存储经编码视频数据的任何其它合适数字存储媒体。在另一实例中，存储装置可对应于文件服务器或可存储由源装置12产生的经编码视频的另一中间存储装置。目的地装置14可通过流式传输或下载从存储装置存取所存储的视频数据。文件服务器可为能够存储经编码视频数据且将经编码视频数据发射到目的地装置14的任何类型的服务器。实例文件服务器包含网页服务器(例如，用于网站)、FTP服务器、网络附接存储(NAS)装置或本地磁盘驱动器。目的地装置14可通过任何标准数据连接(包含因特网连接)而存取经编码视频数据。这可包含无线通道(例如，Wi-Fi连接)、有线连接(例如，DSL、有线电视调制解调器等)或适用于存取存储于文件服务器上的经编码视频数据的两者的组合。经编码视频数据从存储装置的发射可为流式传输发射、下载发射或其组合。
本发明的技术不必限于无线应用或设定。所述技术可应用于支持多种多媒体应用中的任一者的视频译码，所述多媒体应用例如空中电视广播、有线电视发射、卫星电视发射、因特网流式传输视频发射(例如，HTTP动态适应性流式传输(DASH))、经编码到数据存储媒体上的数字视频、存储于数据存储媒体上的数字视频的解码或其它应用。在一些实例中，系统10可经配置以支持单向或双向视频发射，从而支持例如视频流式传输、视频播放、视频广播及/或视频电话的应用。
在图1的实例中，源装置12包含视频源18、视频编码器20及输出接口22。目的地装置14包含输入接口28、预处理单元19、视频解码器30及显示装置32。根据本发明，源装置12的预处理单元19可经配置以实施本发明的技术，包含应用于某些色彩空间中的视频数据以实现HDR及WCG视频数据的更有效压缩的传信及相关操作。在一些实例中，预处理单元19可与视频编码器20分离。在其它实例中，预处理单元19可为视频编码器20的部分。在其它实例中，源装置及目的地装置可包含其它组件或布置。举例来说，源装置12可从外部视频源18(例如，外部相机)接收视频数据。同样地，目的地装置14可与外部显示装置介接，而非包含集成式显示装置。
图1的所说明系统10仅为一个实例。用于对HDR及WCG视频数据进行处理及译码的技术可由任何数字视频编码及/或视频解码装置执行。此外，本发明的技术也可由视频预处理器及/或视频后处理器执行。视频预处理器可为经配置以在编码(例如，在HEVC 或其它编码)之前对视频数据进行处理的任何装置。视频后处理器可为经配置以在解码 (例如，在HEVC或其它解码)之后对视频数据进行处理的任何装置。源装置12及目的地装置14仅为源装置12产生经译码视频数据以供发射到目的地装置14的这类译码装置的实例。在一些实例中，装置12、14可以大体上对称的方式操作，使得装置12、14中的每一者包含视频编码及解码组件，以及视频预处理器及视频后处理器(例如，分别为预处理单元及后处理单元31)。因此，系统10可支持视频装置12、14之间的单向或双向视频发射以用于例如视频流式传输、视频播放、视频广播或视频电话。
源装置12的视频源18可包含视频捕捉装置，例如摄像机、含有先前捕捉的视频的视频存档及/或用以从视频内容提供者接收视频的视频馈送接口。作为另一替代，视频源18可产生基于计算机图形的数据作为源视频，或实况视频、存档视频及计算机产生的视频的组合。在一些情况下，如果视频源18为摄像机，那么源装置12及目的地装置14 可形成所谓的相机电话或视频电话。然而，如上文所提及，本发明中所描述的技术可适用于视频译码及视频处理，一般来说，且可应用于无线及/或有线应用。在各种情况下，可由视频编码器20编码所捕捉、经预先捕捉或计算机产生的视频。经编码视频信息随后可通过输出接口22输出到计算机可读媒体16上。
目的地装置14的输入接口28从计算机可读媒体16接收信息。计算机可读媒体16的信息可包含由视频编码器20定义的语法信息(其也供视频解码器30使用)，所述语法信息包含描述块及其它经经译码单元(例如，图片群组(GOP))的特征及/或处理的语法元素。显示装置32向用户显示经解码视频数据，且可包括多种显示装置中的任一者，例如阴极射线管(CRT)、液晶显示器(LCD)、等离子体显示器、有机发光二极管(OLED)显示器或另一类型的显示装置。
视频编码器20及视频解码器30可各自实施为多种合适编码器或编码器电路中的任一者，例如，一或多个微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、离散逻辑、软件、硬件、固件或其任何组合。当所述技术部分实施于软件中时，装置可将用于软件的指令存储于合适的非暂时性计算机可读媒体中，且在硬件中使用一或多个处理器执行所述指令，从而执行本发明的技术。视频编码器20 及视频解码器30中的每一者可包含在一或多个编码器或解码器中，编码器或解码器中的任一者可集成为各别装置中的组合式编码器/解码器(编码解码器(CODEC))的部分。
预处理单元19及后处理单元31可各自实施为多种合适的编码器电路中的任一者，例如一或多个微处理器、DSP、ASIC、FPGA、离散逻辑、软件、硬件、固件或其任何组合。当所述技术部分实施于软件中时，装置可将用于软件的指令存储于合适的非暂时性计算机可读媒体中，且在硬件中使用一或多个处理器执行所述指令，从而执行本发明的技术。
视频编码器20及视频解码器30可根据视频压缩标准(例如，最近定案的高效视频译码(HEVC)标准)来操作，且可符合HEVC测试模型(HM)。视频编码器20及视频解码器 30可另外根据HEVC扩展(例如范围扩展、多视图扩展(MV-HEVC)，或已由视频译码联合合作小组(JCT-VC)以及ITU-T视频译码专家组(VCEG)及ISO/IEC动画专家组(MPEG) 的3D视频译码扩展开发联合合作小组(JCT-3V)开发的可缩放扩展(SHVC))来操作。
视频编码器20及视频解码器30也可根据其它专有或行业标准(例如ITU-T H.264标准，被替代地称作ISO/IEC MPEG-4第10部分高级视频译码(AVC))或这些标准的扩展(例如可缩放视频译码(SVC)及多视图视频译码(MVC)扩展)来操作。然而，本发明的技术不限于任何特定译码标准。视频压缩标准的其它实例包含ITU-T H.261、ISO/IEC MPEG-1 Visual、ITU-T H.262或ISO/IEC MPEG-2Visual、ITU-T H.263及ISO/IEC MPEG-4Visual。
ITU-T VCEG(Q6/16)及ISO/IEC MPEG(JTC 1/SC 29/WG 11)现正研究对于将具有显著超过当前HEVC标准(包含其当前扩展及针对屏幕内容译码及高动态范围译码的近期扩展)的压缩能力的未来视频译码技术标准化的潜在需要。所述群组一起从事于的联合合作工作中的这种探索活动(被称为联合视频探索小组(JVET))以评估所提出的压缩技术设计。JVET在2015年10月19日到21日期间第一次会面且开发了被称作联合探索模型 (JEM)的参考软件的若干不同版本。这些参考软件的一个实例被称为JEM 7且描述于J. Chen、E.Alshina、G.J.Sullivan、J.-R.Ohm、J.Boyce，“联合探索测试模型7的算法描述(Algorithm Description of Joint Exploration Test Model 7)”，JVET-G1001,2017年7月 13日到21日。
基于ITU-T VCEG(Q6/16)及ISO/IEC MPEG(JTC 1/SC 29/WG 11)的工作，被称作通用视频译码(VVC)标准的新视频译码标准正由VCEG及MPEG的联合视频专家小组 (JVET)开发。VVC的早期草案可在文件JVET-J1001“通用视频译码(草案1)”中获得且其算法描述可在文件JVET-J1002“关于通用视频译码及测试模型1(VTM 1)的算法描述 (Algorithmdescription for Versatile Video Coding and Test Model 1(VTM 1))”中获得。VVC 的另一早期草案可在文件JVET-L1001“通用视频译码(草案3)”中获得且其算法描述可在文件JVET-L1002“关于通用视频译码及测试模型3(VTM 3)的算法描述(Algorithm descriptionfor Versatile Video Coding and Test Model 3(VTM 3))”中获得。
本发明的技术可利用HEVC术语，以易于解释。然而，不应假定本发明的技术受限于HEVC，而实际上，明确预期本发明的技术可实施于HEVC的后续标准及其扩展中。
在HEVC及其它视频实例译码标准中，视频序列可包含一系列图片。图片也可被称作“帧”。图片可包含三个样本阵列，标示为SL、SCb及SCr。SL为明度样本的二维阵列(即，块)。SCb为Cb彩度样本的二维阵列。SCr为Cr彩度样本的二维阵列。彩度样本也可在本文中被称作“色度(chroma)”样本。在其它情况下，图片可为单色的且可仅包含明度样本阵列。
视频编码器20可产生一组译码树单元(CTU)。CTU中的每一者可包括明度样本的译码树型块、色度样本的两个对应译码树型块，及用以对所述译码树型块的样本进行译码的语法结构。在单色图片或具有三个单独色彩平面的图片中，CTU可包括单一译码树型块及用于对所述译码树型块的样本进行译码的语法结构。译码树型块可为样本的N×N 块。CTU也可被称作“树型块”或“最大译码单元(LCU)”。HEVC的CTU可大致类似于例如H.264/AVC的其它视频译码标准的宏块。然而，CTU未必限于特定大小，且可包含一或多个译码单元(CU)。切片可包含在光栅扫描中连续排序的整数数目个CTU。
本发明可使用术语“视频单元”或“视频块”以指代样本的一或多个块，及用于对一或多个样本块的样本进行译码的语法结构。视频单元的实例类型可包含HEVC中的 CTU、CU、PU、变换单元(TU)，或其它视频译码标准中的宏块、宏块分割区等等。
为产生经译码CTU，视频编码器20可对CTU的译码树型块递归地执行四叉树分割，以将译码树型块划分成译码块，之后命名为“译码树型单元”。译码块为样本的N×N块。 CU可包括具有明度样本阵列、Cb样本阵列及Cr样本阵列的图片的明度样本的译码块及色度样本的两个对应的译码块，及用于对所述译码块的样本进行译码的语法结构。在单色图片或具有三个单独色彩平面的图片中，CU可包括单一译码块及用以对所述译码块的样本进行译码的语法结构。
视频编码器20可将CU的译码块分割成一或多个预测块。预测块可为应用相同预测的样本的矩形(即，正方形或非正方形)块。CU的预测单元(PU)可包括图片的明度样本的预测块、图片的色度样本的两个对应的预测块及用以对预测块样本进行预测的语法结构。在单色图片或具有三个单独色彩平面的图片中，PU可包括单一预测块，及用以对预测块样本进行预测的语法结构。视频编码器20可针对CU的每一PU的明度、Cb及 Cr预测块产生预测性明度、Cb及Cr块。
视频编码器20可使用帧内预测或帧间预测来产生PU的预测性块。如果视频编码器20使用帧内预测产生PU的预测性块，那么视频编码器20可基于与PU相关联的图片的经解码样本产生PU的预测性块。
如果视频编码器20使用帧间预测来产生PU的预测性块，那么视频编码器20可基于不同于与PU相关联的图片的一或多个图片的经解码样本而产生PU的预测性块。帧间预测可为单向帧间预测(即，单向预测)或双向帧间预测(即，双向预测)。为执行单向预测或双向预测，视频编码器20可产生当前切片的第一参考图片列表(RefPicList0)及第二参考图片列表(RefPicList1)。
参考图片列表中的每一者可包含一或多个参考图片。当使用单向预测时，视频编码器20可搜索RefPicList0及RefPicList1中的任一者或两者中的参考图片，以确定参考图片内的参考位置。此外，当使用单向预测时，视频编码器20可至少部分基于对应于参考位置的样本产生PU的预测性样本块。此外，当使用单向预测时，视频编码器20可产生指示PU的预测块与参考位置之间的空间位移的单一运动向量。为了指示PU的预测块与参考位置之间的空间位移，运动向量可包含指定PU的预测块与参考位置之间的水平位移的水平分量且可包含指定PU的预测块与参考位置之间的垂直位移的垂直分量。
当使用双向预测来编码PU时，视频编码器20可确定RefPicList0中的参考图片中的第一参考位置及RefPicList1中的参考图片中的第二参考位置。视频编码器20随后可至少部分基于对应于第一及第二参考位置的样本而产生PU的预测性块。此外，当使用双向预测编码PU时，视频编码器20可产生指示PU的样本块与第一参考位置之间的空间位移的第一运动，及指示PU的预测块与第二参考位置之间的空间位移的第二运动。
在视频编码器20产生CU的一或多个PU的预测性明度、Cb及Cr块之后，视频编码器20可产生CU的明度残余块。CU的明度残余块中的每一样本指示CU的预测性明度块中的一者中的明度样本与CU的原始明度译码块中的对应样本之间的差异。另外，视频编码器20可产生CU的Cb残余块。CU的Cb残余块中的每一样本可指示CU的预测性Cb块中的一者中的Cb样本与CU的原始Cb译码块中的对应样本之间的差异。视频编码器20也可产生CU的Cr残余块。CU的Cr残余块中的每一样本可指示CU的预测性Cr块中的一者中的Cr样本与CU的原始Cr译码块中的对应样本之间的差异。
此外，视频编码器20可使用四叉树分割将CU的明度、Cb及Cr残余块分解成一或多个明度、Cb及Cr变换块。变换块可为对其应用相同变换的样本的矩形块。CU的变换单元(TU)可包括明度样本的变换块、色度样本的两个对应变换块及用以对变换块样本进行变换的语法结构。在单色图片或具有三个单独色彩平面的图片中，TU可包括单一变换块，及用以对变换块样本进行变换的语法结构。因此，CU的每一TU可与明度变换块、Cb变换块及Cr变换块相关联。与TU相关联的明度变换块可为CU的明度残余块的子块。Cb变换块可为CU的Cb残余块的子块。Cr变换块可为CU的Cr残余块的子块。
视频编码器20可将一或多个变换应用于TU的明度变换块以产生TU的明度系数块。系数块可为变换系数的二维阵列。变换系数可为纯量。视频编码器20可将一或多个变换应用于TU的Cb变换块以产生TU的Cb系数块。视频编码器20可将一或多个变换应用于TU的Cr变换块以产生用于TU的Cr系数块。
在JEM7中，可使用四叉树二叉树(QTBT)分割结构而非使用上文所描述的HEVC的四叉树分割结构。QTBT结构去除多个分割区类型的概念。即，QTBT结构去除CU、PU 及TU概念的分离，且支持CU分割区形状的更大灵活性。在QTBT块结构中，CU可具有正方形或矩形形状。在一个实例中，CU为按四叉树结构的第一分割区。四叉树叶节点通过二叉树结构进一步分割。
在一些实例中，存在两种拆分类型：对称水平拆分及对称竖直拆分。二叉树叶节点被称作CU，且所述分段(即，CU)用于预测及变换处理而无需任何进一步分割。这意味着CU、PU及TU在QTBT译码块结构中具有相同块大小。在JEM中，CU有时由具有不同色彩分量的译码块(CB)组成。举例来说，在4:2:0色度格式的P及B切片的情况下，一个CU含有一个明度CB及两个色度CB，且有时由具有单一分量的CB组成。举例来说，在I切片的情况下，一个CU含有仅一个明度CB或仅两个色度CB。
在产生系数块(例如，明度系数块、Cb系数块或Cr系数块)之后，视频编码器20可量化系数块。量化一般指代变换系数经量化以可能减少用以表示变换系数的数据的量从而提供进一步压缩的过程。此外，视频编码器20可对变换系数进行逆量化，且将逆变换应用于变换系数，以便重建图片的CU的TU的变换块。视频编码器20可使用CU的 TU的经重建变换块及CU的PU的预测性块来重建CU的译码块。通过重建图片的每一 CU的译码块，视频编码器20可重建图片。视频编码器20可将经重建图片存储于经解码图片缓冲器(DPB)中。视频编码器20可将DPB中的经重建图片用于帧间预测及帧内预测。
在视频编码器20量化系数块之后，视频编码器20可熵编码指示经量化变换系数的语法元素。举例来说，视频编码器20可对指示经量化变换系数的语法元素执行上下文适应性二进制算术译码(CABAC)。视频编码器20可在位流中输出经熵编码的语法元素。
视频编码器20可输出包含形成经译码图片及相关联数据的表示的位序列的位流。所述位流可包括网络抽象层(NAL)单元的序列。NAL单元中的每一者包含NAL单元标头，且封装原始字节序列有效负载(RBSP)。NAL单元标头可包含指示NAL单元类型码的语法元素。由NAL单元的NAL单元标头指定的NAL单元类型码指示NAL单元的类型。RBSP可为封装在NAL单元内的含有整数数目个字节的语法结构。在一些情况下， RBSP包含零个位。
不同类型的NAL单元可封装不同类型的RBSP。举例来说，第一类型的NAL单元可封装图片参数集(PPS)的RBSP，第二类型的NAL单元可封装经译码切片的RBSP，第三类型的NAL单元可封装补充增强信息(SEI)的RBSP等等。PPS为可含有适用于零或多个完整经译码图片的语法元素的语法结构。封装视频译码数据的RBSP(与参数集及 SEI消息的RBSP相对)的NAL单元可被称作视频译码层(VCL)NAL单元。封装经译码切片的NAL单元在本文中可被称作经译码切片NAL单元。用于经译码切片的RBSP可包含切片标头及切片数据。
视频解码器30可接收位流。另外，视频解码器30可剖析位流以从位流解码语法元素。视频解码器30可至少部分基于从位流解码的语法元素重建视频数据的图片。重建视频数据的过程可大体上与由视频编码器20执行的过程互逆。举例来说，视频解码器 30可使用PU的运动向量确定当前CU的PU的预测性块。视频解码器30可使用PU的一或多个运动向量产生PU的预测性块。
另外，视频解码器30可对与当前CU的TU相关联的系数块进行逆量化。视频解码器30可对系数块执行逆变换以重建与当前CU的TU相关联的变换块。通过将当前CU 的PU的预测性样本块的样本新增到当前CU的TU的变换块的对应样本，视频解码器 30可重构当前CU的译码块。通过重建图片的每一CU的译码块，视频解码器30可重建图片。视频解码器30可将经解码图片存储于经解码图片缓冲器中以供输出及/或供用于解码其它图片。
预期下一代视频应用使用表示具有HDR及WCG的经捕捉景物的视频数据来操作。所利用的动态范围及色域的参数为视频内容的两个独立属性，且出于数字电视及多媒体服务的目的，其规格由若干国际标准定义。举例来说，ITU-R Rec.709定义例如标准动态范围及标准色域的用于HDTV的参数，且ITU-R Rec.2020指定UHDTV参数，例如高动态范围及广色域。还存在指定其它系统中的所述属性的其它SDO文件，例如P3色域在SMPTE-231-2中进行定义，且HDR的一些参数在STMPTE-2084中进行定义。在下文中提供视频数据的动态范围及色域的简要描述。
视频编码器20及视频解码器30，分别结合例如预处理单元19及后处理单元31的其它组件，可实施动态范围译码。动态范围通常经定义为视频信号的最小与最大亮度之间的比率。动态范围还依据“光圈值(f-stop)”测量，其中一个光圈值对应于所述信号动态范围的倍增。在MPEG的定义中，高动态范围内容为以大于16个光圈值的亮度变化为特征的这类内容。在一些术语中，10个光圈值与16个光圈值之间的层级被视为中间动态范围，但在其它定义中可被视为HDR。同时，人类视觉系统能够感知大得多的动态范围且包含适应机制以使所谓的同步范围变窄。
当前视频应用及服务由Rec.709调节且提供SDR，其通常支持每平米大约0.1烛光到100烛光(cd)的范围的亮度(或明度)(通常被称作“尼特(nit)”)，从而导致小于10个光圈值。预期下一代视频服务提供达16个光圈值的动态范围，且尽管详细规范目前尚处于开发中，但其一些初始参数已在SMPTE-2084及Rec.2020中经指定。
图2展示人类视觉及显示能力的实例。对由HDTV的SDR提供的动态范围、UHDTV 的经预期HDR及HVS动态范围的观测展示于图2中。
图3展示色域的实例。除HDR以外更逼真的视频体验的另一方面为色彩维度，其常规地由色域定义。图3展示SDR色域(基于BT.709红色、绿色及蓝色原色的三角形 100)以及UHDTV的较宽色域(基于BT.2020红色、绿色及蓝色原色的三角形102)。图3 也描绘所谓的频谱轨迹(形状104)，其表示天然色彩的界限。如通过图3所说明，从BT.709 到BT.2020移动原色旨在提供具有多约70％色彩的UHDTV服务。D65为给定规范指定白色。
色域规范的实例展示于表1中。
表1用于所选色彩空间的比色参数
Figure BDA0002524157080000121
视频编码器20及视频解码器30可执行HDR视频数据的压缩。HDR/WCG通常以每分量(甚至浮点)的极高精度获取及存储，具有4:4:4色度格式及极宽色彩空间(例如， XYZ)。这表示以高精确度为目标且在数学上(几乎)无损。然而，这种格式以大量冗余为特征且对于压缩目的并非最优。具有基于HVS的假定的较低精确度格式通常用于目前先进技术的视频应用。出于压缩目的的典型HDR视频数据格式转换由如图4中所展示的三个主要要素组成：(1)用于动态范围压缩的非线性转移函数(TF)，(2)到更紧密或稳固色彩空间的色彩转换，及(3)浮点到整数表示转换(量化)。
出于压缩目的的视频数据格式转换过程的一个实例包含三个主要过程，如图4中所展示。图4的技术可由源装置12执行。线性RGB数据110可为HDR/WCG视频数据且可以浮点表示存储。可使用用于动态范围压缩的非线性转移函数(TF)112来压缩线性 RGB数据110。转移函数112可使用任何数目的非线性转移函数(例如，如SMPTE-2084 中所定义的PQ TF)来压缩线性RGB数据110。在一些实例中，色彩转换过程114将经压缩数据转换成较适用于由混合型视频编码器压缩的更紧密或稳固的色彩空间(例如， YUV或YCrCb色彩空间)。随后使用浮点到整数表示量化单元116对所述数据进行量化以产生经转换HDR的数据118。在这个实例中，HDR的数据118呈整数表示。HDR的数据现呈较适用于由混合型视频编码器(例如应用HEVC技术的视频编码器20)来压缩的格式。图4中所描绘的过程的次序是作为实例给出对，且在其它应用中可改变。举例来说，色彩转换可先于TF过程。另外，例如空间次采样的额外处理可应用于色彩分量。
在解码器(例如，视频解码器30)处的逆转换描绘于图5中。图5的技术可由视频解码器30及/或后处理单元31在目的地装置14处执行。经转换HDR的数据120可在目的地装置14处通过使用混合型视频解码器(例如，应用HEVC技术的视频解码器30)解码视频数据而获得。HDR的数据120随后可由逆量化单元122来进行逆量化。随后可将逆向色彩转换过程124应用于经逆量化HDR的数据。逆向色彩转换过程124可为色彩转换过程114的逆向。举例来说，逆向色彩转换过程124可将HDR的数据从YCrCb格式转换回到RGB格式。接下来，可将逆转移函数126应用于数据以新增回到通过转移函数112压缩的动态范围，从而重建线性RGB数据128。
线性及浮点表示中的输入RGB数据的高动态范围通过所利用的非线性转移函数TF(例如，如SMPTE-2084中所定义的PQ TF)来压缩，之后其经转换成较适用于压缩的目标色彩空间(例如，YCbCr)，且随后经量化以实现整数表示。这些元素的次序是作为实例给出的，且可在真实世界应用中改变，例如，色彩转换可先于TF模块以及额外处理(例如空间次采样)可应用于色彩分量。更详细地描述这些三个分量。
视频编码器20及视频解码器30可利用转移函数(TF)。将TF应用于数据以压缩数据的动态范围且使得可使用有限数目个位表示数据。所述函数通常为一维(1D)非线性函数，其反映终端用户显示器的电光转移函数(EOTF)的逆向转移函数，如Rec.709中的SDR 所指定；或近似于对亮度变化的HVS感知，如HDR的SMPTE-2084中所指定的PQ TF。 OETF的逆向过程为EOTF(电光转移函数)，其将码层级映射回到明度。图6展示TF的若干实例。
ST2084的规范如下定义EOTF应用。将TF应用于正规化线性R、G、B值，这产生R'G'B'的非线性表示。ST2084通过NORM＝10000定义正规化，其与10000尼特(cd/m2) 的峰值亮度相关联。
Figure BDA0002524157080000141
其中
Figure BDA0002524157080000142
Figure BDA0002524157080000143
Figure BDA0002524157080000144
Figure BDA0002524157080000145
Figure BDA0002524157080000146
Figure BDA0002524157080000147
图7展示PQ TF(ST2084 EOTF)的实例观测。在输入值(线性色彩值)经正规化到范围0..1的情况下，在图7中观测PQ EOTF的正规化输出值(非线性色彩值)。如从曲线可见，输入信号的动态范围的1％(低照明)转换成输出信号的动态范围的50％。
通常，EOTF经定义为具有浮点准确度的函数，因此如果应用逆向TF(所谓的OETF)，那么不会将误差引入到具有这种非线性的信号。ST2084中所指定的逆向TF(OETF)经定义为inversePQ函数：
Figure BDA0002524157080000148
其中
Figure BDA0002524157080000149
Figure BDA00025241570800001410
Figure BDA00025241570800001411
Figure BDA00025241570800001412
Figure BDA00025241570800001413
Figure BDA00025241570800001414
通过浮点准确度，依序应用EOTF及OETF提供不具有误差的完美重建。然而，对于流式传输或广播服务，这种表示并非最优的。在以下章节中描述具有非线性R'G'B'数据的固定位准确度的更紧密表示。应注意，EOTF及OETF为当前非常活跃的研究的主题，且一些HDR视频译码系统中所利用的TF可不同于ST2084。
视频编码器20及视频解码器30可经配置以实施色彩变换。RGB数据通常用作输入，这是因为RGB数据由图像捕捉传感器产生。然而，所述色彩空间在组件当中具有高冗余且对于紧密表示而言并非最优的。为实现更紧密及更稳固的表示，RGB分量通常转换成更适用于压缩(例如YCbCr)的更不相关的色彩空间。所述色彩空间将呈明度形式的亮度及呈不同的不相关分量的色彩信息分离。
对于现代视频译码系统，通常使用的色彩空间为YCbCr，如ITU-R BT.709或ITU-RBT.709中所指定。BT.709标准中的YCbCr色彩空间指定从R'G'B'到Y'CbCr的以下转换过程(非恒定明度表示)：
Figure BDA0002524157080000151
以上过程也可使用避免Cb及Cr分量的除法的以下近似转换来实施：
Figure BDA0002524157080000152
ITU-R BT.2020标准指定从R'G'B'到Y'CbCr(非恒定明度表示)的以下转换过程：
Figure BDA0002524157080000153
以上过程也可使用避免Cb及Cr分量的除法的以下近似转换来实施：
Figure BDA0002524157080000154
应注意，两个色彩空间均保持正规化；因此，对于在0...1范围内正规化的输入值，所得值将映射到0…1的范围。一般来说，通过浮点准确度所实施的色彩变换提供完美的重建，因此所述过程无损。
视频编码器20及视频解码器30可实施量化/固定点转换。上文所描述的处理阶段通常以浮点准确度表示实施，因此可被视为无损。然而，对于大多数消费型电子装置应用，这种类型的准确度可被视为冗余且昂贵的。对于这类应用，通常将目标色彩空间中的输入数据转换成目标位深度固定点准确度。某些研究展示，10位到12位准确度结合PQ TF 足以提供具有低于恰可辨差异的失真的16个光圈值的HDR数据。以10位准确度表示的数据可通过大部分目前先进技术视频译码解决方案进一步进行译码。这个转换过程包含信号量化且为有损译码元素并且是经引入到经转换数据的不准确度的来源。
应用于目标色彩空间(在这个实例中，YCbCr)中的码字的这类量化的实例展示于下文中。将以浮点准确度表示的输入值YCbCr转换成Y值的固定位深度BitDepthY及色度值(Cb、Cr)的固定位深度BitDepthC的信号。
Figure BDA0002524157080000161
其中
Round(x)＝Sign(x)*Floor(Abs(x)+0.5)
如果x<0，那么Sign(x)＝-1，如果x＝0，那么Sign(x)＝0，如果x>0，那么 Sign(x)＝1
Floor(x)小于或等于x的最大整数
如果x>＝0，那么Abs(x)＝x，如果x<0，那么Abs(x)＝-x
Clip1Y(x)＝Clip3(0,(1<<BitDepthY)-1,x)
Clip1C(x)＝Clip3(0,(1<<BitDepthC)-1,x)
如果z<x，那么Clip3(x,y,z)＝x，如果z>y，那么Clip3(x,y,z)＝y，否则Clip3(x,y,z) ＝z
视频编码器20及视频解码器30可实施DRA。DRA最初在《实现具有向后兼容能力的高动态范围视频译码的动态范围调整SEI(Dynamic Range Adjustment SEI to enableHigh Dynamic Range video coding with Backward-Compatible Capability)》，D.Rusanovskyy、A.K.Ramasubramonian、D.Bugdayci、S.Lee、J.Sole、M.Karczewicz,VCEG 文件COM16-C 1027-E,2015年9月(下文的参考文献1)中提出。作者提出以针对输入值 x的非重叠动态范围分割区(范围){Ri}的群所定义的分段线性函数f(x)的形式实施DRA，其中i为范围指数，其中范围为0到N-1(包含端点)，且其中N为用于定义DRA函数在范围{Ri}的总数目。假定DRA的范围由属于范围Ri的最小x值及最大x值定义(例如 [xi,xi+1-1])，其中xi及xi+1分别表示范围Ri及Ri+1的最小值。应用于视频的Y色彩分量(明度)，DRA函数Sy通过应用于每一x∈[xi,xi+1-1]的比例Sy,i及偏移Oy,i定义，因此 Sy＝{Sy,i,Oy,i}。
在这种情况下，对于任一Ri，及每一x∈[xi,xi+1-1]，输出值X计算如下：
X＝Sy,i*(x-Oy,i) (8)
对于在解码器处进行的用于明度分量Y的逆向DRA映射过程，DRA函数Sy由应用于每一X∈[Xi,Xi+1-1]的比例Sy,i及偏移Oy,i值的逆向定义。
在这种情况下，对于任一Ri，及每一X∈[Xi,Xi+1-1]，经重建值x计算如下：
x＝X/Sy,i+Oy,i (9)
用于色度分量Cb及Cr的正向DRA映射过程定义如下。实例是通过表示Cb色彩分量的样本的项“u”给出对，“u”属于范围Ri，u∈[ui,ui+1-1]，因此Su＝{Su,i,Ou,i}：
U＝Su,i*(u-Oy,i)+Offset (10)
其中等于2(bitdepth-1)的Offset表示双极Cb、Cr信号偏移。
在解码器处针对色度分量Cb及Cr进行的逆向DRA映射过程定义如下。实例是通过表示经再映射Cb色彩分量的样本的U项给出，U属于范围Ri，U∈[Ui,Ui+1-1]：
u＝(U-Offset)/Su,i+Oy,i (11)
其中等于2(bitdepth-1)的Offset表示双极Cb、Cr信号偏移。
视频编码器20及视频解码器30也可实施明度驱动色度缩放(LCS)。LCS最初在《JCTVC-W0101 HDR CE2：关于CE2.a-1LCS的报告(JCTVC-W0101 HDR CE2:Report onCE2.a-1LCS)》,A.K.Ramasubramonian、J.Sole、D.Rusanovskyy、D.Bugdayci、M.Karczewicz(下文的参考文献2)中提出。在参考文献2中，提出通过采用与经处理色度样本相关联的亮度信息调整色度信息(例如Cb及Cr)的技术。类似于参考文献1的DRA 方法，其经提出以Cb的缩放因数Su及Cr的缩放因数Sv,i应用于色度样本。然而，代替针对方程式(3)及(4)中可通过色度值u或v获得的范围集合{Ri}以分段线性函数 Su＝{Su,i,Ou,i}的形式定义DRA，LCS方法提出利用明度值Y导出用于色度样本的缩放因数。在这种情况下，色度样本u(或v)的正向LCS映射如下进行：
U＝Su,i(Y)*(u-Offset)+Offset (12)
在解码器侧处进行的逆向LCS过程定义如下：
u＝(U-Offset)/Su,i(Y)+Offset (13)
更详细地，对于位于(x,y)处的给定像素，色度样本Cb(x,y)或Cr(x,y)以从通过对应明度值Y'(x,y)所确定的LCS函数SCb(或SCr)导出的因数来缩放。
在色度样本的正向LCS处，Cb(或Cr)值及相关联明度值Y'被视为到色度缩放函数SCb(或SCr)的输入，且Cb或Cr如方程式9中所展示经转换成Cb'及Cr'。在解码器侧处，应用逆向LCS，经重建Cb'或Cr'如方程式(10)中所展示经转换成Cb或Cr。
Figure BDA0002524157080000181
Figure BDA0002524157080000182
图8展示LCS函数的实例，关于实例中的LCS函数，将具有较小明度值的像素的色度分量乘以较小缩放因数。
现将论述DRA样本缩放与量化参数之间的关系。为了调整压缩比，视频编码器20利用基于块变换的视频译码方案，例如HEVC，其利用应用于变换系数的纯量量化器。视频编码器20可基于量化参数(QP)控制纯量量化器，其中QP与纯量量化器之间的关系定义如下：
scaler＝exp(QP/6)*log(2.0)) (16)
逆函数如下定义HEVC中纯量量化器与QP之间的关系：
QP＝log2(scaler)*6； (17)
当实施DRA时，视频编码器20及视频解码器30有效地缩放像素数据且考虑变换特性，其可针对一大类信号经映射到应用于变换域中的纯量。因此，定义以下关系：
dQP＝log2(scaleDRA)*6； (18)
其中dQP为通过HEVC(例如通过针对输入数据部署DRA)引入的近似QP偏移。
用于现代视频译码系统中的非线性(例如应用转移函数SMPTE 2084)及色彩表示(例如ITU-R BT.2020或BT.22100)中的一些可导致以在信号表示的动态范围及色彩分量内的所感知失真或恰可辨差异(JND)阈值的显著变化为特征的视频数据表示。这可经感知为经处理数据范围内的不等信噪比。为解决这个问题及线性化信号的动态范围中的译码 (量化)误差分布，提出参考文献1的DRA方法。
参考文献1提出在应用混合型基于变换的视频译码方案H.265/HEVC之前应用DRA以实现ST 2084/BT.2020容器中的码字重新分布，如图9中所展示。
通过DRA实现的重新分布以动态范围内的感知失真(信噪比)的线性化为目标。为在解码器侧处补偿所述重新分布，及将数据转换成原始ST 2084/BT.2020表示，在视频解码之后将逆向DRA过程应用于数据。
所述DRA方案的另一实例在《JCTVC-W0101 HDR CE2：关于CE2.a-1LCS的报告中的HDR中的明度驱动色度缩放(LCS)(Luma-driven chroma scaling(LCS)design in HDR inJCTVC-W0101 HDR CE2:Report on CE2.a-1LCS)》，A.K.Ramasubramonian、J. Sole、D.Rusanovskyy、D.Bugdayci、M.Karczewicz(下文的参考文献2)中提出。
参考文献2提出通过采用与经处理色度样本相关联的亮度信息调整色度信息(例如 Cb及Cr)的技术。类似于参考文献1的DRA方法，其经提出以Cb的缩放因数Su及Cr 的缩放因数Sv,i应用于色度样本。然而，代替针对方程式(3)及(4)中可通过色度值u或v 获得的范围集合{Ri}以分段线性函数Su＝{Su,i,Ou,i}的形式定义DRA，LCS方法提出利用明度值Y导出用于色度样本的缩放因数。
应用于通过每样本有限数目个位(例如，10个位)表示的视频信号的DRA技术可按像素层级量化分类。与在变换域中部署基于块的纯量量化的视频译码(例如， H.265/HEVC)组合产生具有像素及变换域中的联合信号量化的视频译码系统。
一些视频译码方案的设计可并有基于量化误差的假定/估计而引入经译码信号的视频译码工具、标准化决策制定逻辑及参数。在这些工具的实例当中，可列举解码器侧处的H.265/HEVC解块滤波器(例如，HEVC第8.7.2项)及QP导出过程(例如，HEVC第8.6.1 项)。
在像素层级处应用DRA可引入无法正确估计的量化误差，其可导致在解码器处利用的决策逻辑为非最优译码决策。作为一实例，HEVC规范的表8-10定义在QP导出期间于编码器及解码器两者处利用的色度QP转变，其可产生通过不反映应用于当前色度块的样本的像素量化/缩放的方程式8-259/8-260导出的QP指数。
本发明描述用于具有联合像素/变换为基础的量化的视频译码的量化参数控制的技术。这些系统的实例为利用变换域中的量化的常规混合视频译码及在前/后处理阶段或在视频译码的编码循环内在像素域中执行缩放/量化的DRA的组合。
视频编码器20及视频解码器30可执行用于解码器QP处置的DRA比例补偿。用于三个色彩分量的DRA比例经调整以补偿视频编码解码器中的QP处置。
假定用于3个色彩分量(例如，Y、Cb、Cr)的DRA的参数通过以下变量定义：
Figure BDA0002524157080000191
进行像素处理的DRA参数通过经译码位流传信或在解码器侧从位流中所传信的语法元素导出。所述DRA参数通过考虑描述变换系数的量化的信息来进一步调整。
DRA′y＝fun(DRAy,QPx)
DRA′Cb＝fun(DRACb,QPx)
DRA′Cr＝fun(DRACr,QPx)
(19b)
QPx表示由视频编码器20针对给定像素块进行及以位流传信到视频解码器30或以旁侧信息的形式(例如以预列表信息的形式)提供到视频解码器30的QP调整或操纵。这个过程的输出为将应用于经解码样本(Ydec,Cbdec,Crdec)的经调整DRA参数 (DRA′y,DRA′Cb,DRA′Cr)。
Yo＝fun(DRA′y,Ydec)
Cbo＝fun(DRA′Cb,Cbdec)
Cro＝fun(DRA′Cr,Crdec) (20)
视频编码器20及视频解码器30可调整QP信息以反映应用于像素的DRA的影响。改变在解码器侧处做出的决策中所利用的QP信息以反映应用于经解码图片的像素的 DRA的影响。
QP′y＝fun(QPx,DRAy)
QP′Cb＝fun(QPx,DRACb)
QP′Cr＝fun(QPx,DRACr)
(21)
QPx为由解码器在不考虑通过DRA处理对当前经处理像素实施的缩放的情况下导出的QP参数。
这个过程的输出为在解码器侧处的决策制定过程中所利用的经调整QP (QP′y,QP′Cb,QP′cr)。在一些实例中，仅解码算法中的方法的子集将在决策制定过程中使用经调整QP。
将在下文描述本发明的所提出技术的实施的若干非限制性实例。
现将描述用于色度QP转变表格的DRA比例补偿。在一些实例中，解码器的参数的导出可基于从经位流的语法元素导出及通过解码器侧处可用的旁侧信息进一步改变的本地QP信息。
所述处理的实例在HEVC规范中的第8.6.1项：
–变量qPCb及qPCr分别经设定为等于如在表8-9中基于等于qPiCb及qPiCr的指数qPi指定的QpC值，且qPiCb及qPiCr导出如下：
qPiCb＝Clip3(-QpBdOffsetC,57,QpY+pps_cb_qp_offset+slice_cb_qp_offset)
(8-257)
qPiCr＝Clip3(-QpBdOffsetC,57,QpY+pps_cr_qp_offset+slice_cr_qp_offset)
(8-258)
–如果ChromaArrayType等于1，那么变量qPCb及qPCr分别经设定为等于如在表 8-10中基于等于qPiCb及qPiCr的指数qPi指定的QpC值。
–否则，变量qPCb及qPCr分别基于等于qPiCb及qPiCr的指数qPi经设定等于 Min(qPi,51)。
–Cb及Cr分量的色度量化参数Qp'Cb及Qp'Cr导出如下：
Qp'Cb＝qPCb+QpBdOffsetC (8-259)
Qp'Cr＝qPCr+QpBdOffsetC (8-260)
表8-9-作为qPi的函数的QpC的规范
qPi <30 30 31 32 33 34 35 36 37 38 39 40 41 42 43 >43
Qp<sub>C</sub> ＝qPi 29 30 31 32 33 33 34 34 35 35 36 36 37 37 ＝qPi-6
在这个实例中，用于色度分量的DRA比例参数可经改变以反映由所述处理引入的QP转变。以下实例是针对Cb分量给出的，Cr分量的导出是类似的。
视频解码器30可通过表8-10导出用于Cb分量的色度量化参数。QP信息经估计：
Figure BDA0002524157080000211
变量updatedQP1进一步用于解码处理序，且shiftQP1提供关于对通过表8-10引入的QP的影响的估计。
为了协调解码器中通过DRA及QP处置进行的像素层级量化，DRA缩放函数改变如下：
estimateQP2＝qPcb+QpBdPffsetC+scale2QP(DRACb) (23)
其中scale2QP(DRACb)进行从比例到QP进行转换，类似地展示于方程式18中
updatedQP2＝fun(Table8-10,estimateQP2) (24)
shiftQP2＝updatedQP2-estimateQP2；
在一些实例中，尤其就跨分量DRA实施(例如，LCS)而言，方程式(23)将包含根据 Y分量的DRA比例估计的QP偏移项及根据用以产生Cb分量的DRA的色度比例(addnDRACbScale)估计的额外QP偏移项。例如
estimateQP2＝qPcb+QpBdPffsetC+scale2QP(DRAY)+scale2QP(addnDRACbScale)
变量UpdatedQP2提供在DRA将通过变换域缩放进行的情况下的QP的估计，且shfitQP2提供对通过表8-10引入的QP的影响的估计。
在某些情况下，估计的shiftQP1将不等于shiftQP2。为了补偿这种差异，DRA的比例可如下随乘数变化：
shiftScale＝Qp2Scale(shiftQP2-shiftQP1) (25)
DRACb'＝shiftScale*DRACb
其中函数Qp2Scale将QP变量转换成如方程式16中所展示的相关联量化器比例。
这个过程的输出为应用于经解码样本Cbdec的经调整DRA比例。
在一些实例中，比例到QP转换函数scale2QP的输出(DRACb)及所得estimateQP2为非整数值。为了定址表8-10的要素，到表8-10的输入及输出QP值可如下经内插于整数条目之间：
qp1＝fun(Table8-10,(Int)estimateQP2；
qp2＝fun(Table8-10,(Int)(estimateQP2+1.0))； (26)
shiftQP2＝qp1+(qp2-qp1)*(estimateQP2-(Int)estimateQP2)；
在另外其它实例中，表8-10的条目(或类似列表信息)可通过分析性函数定义或明确地在位流中传信。
在另一实例中，shiftScale可如下经计算以补偿表8-10shiftQP1的影响：
shiftScale＝Qp2Scale(shiftQP1)
在一些实例中，用于初始化方程式22及23的QP指数可通过位流传信以便避免剖析及处理相依性。在一些实例中，视频编码器20可估计用于本文所描述的经提出技术的参数且通过位流将那些参数传信到视频解码器30(后设数据、SEI消息、VUI或SPS PPS或切片标头等)。视频解码器30随后接收来自位流的参数。在一些实例中，视频编码器20可导出所提出技术的参数。视频解码器30可根据输入信号或根据与输入信号相关联的其它可用参数实施指定过程且执行相同导出。在一些实例中，视频编码器20可明确地将所提出技术的参数传信到视频解码器30。在另一实例中，视频编码器20及视频解码器30可根据其它输入信号参数(例如输入色域及目标色彩容器(色彩原色)的参数导出所述参数。
图10为说明可实施本发明中所描述的技术的实例视频编码器20的框图。视频编码器20可执行视频切片内的视频块的帧内译码及帧间译码。帧内译码依赖于空间预测以减少或去除给定视频帧或图片内的视频中的空间冗余。帧间译码依赖于时间预测以减小或去除视频序列的邻近帧或图片内的视频中的时间冗余。帧内模式(I模式)可指代若干基于空间的压缩模式中的任一者。帧间模式(例如，单向预测(P模式)或双向预测(B模式)) 可指代若干基于时间的压缩模式中的任一者。
在图10的实例中，视频编码器20包含视频数据存储器33、分割单元35、预测处理单元41、求和器50、变换处理单元52、量化单元54、熵编码单元56。预测处理单元41包含运动估计单元(MEU)42、运动补偿单元(MCU)44及帧内预测处理单元46。对于视频块重建，视频编码器20还包含逆量化单元58、逆变换处理单元60、求和器62、滤波器单元64及经解码图片缓冲器(DPB)66。
如图10中所展示，视频编码器20接收视频数据且将所接收的视频数据存储于视频数据存储器33中。视频数据存储器33可存储待由视频编码器20的组件编码的视频数据。存储于视频数据存储器33中的视频数据可例如从视频源18获得。DPB 66可为存储供视频编码器20例如以帧内或帧间译码模式编码视频数据的参考视频数据的参考图片存储器。视频数据存储器33及DPB 66可由例如动态随机存取存储器(DRAM)(包含同步DRAM(SDRAM))、磁阻式RAM(MRAM)、电阻式RAM(RRAM)或其它类型的存储器装置的多种存储器装置中的任一者形成。视频数据存储器33及DPB 66可由同一存储器装置或单独的存储器装置提供。在各种实例中，视频数据存储器33可与视频编码器20的其它组件一起在芯片上，或相对于那些组件在芯片外。
分割单元35从视频数据存储器33检索视频数据且将视频数据分割成视频块。这种分割也可包含分割成切片、单元片或其它较大单元以及例如根据LCU及CU的四叉树结构分割的视频块。视频编码器20大体上说明对待编码视频切片内的视频块进行编码的组件。切片可划分成多个视频块(且可能划分成被称作单元片的视频块集合)。预测处理单元41可基于误差结果(例如，译码速率及失真程度)为当前视频块选择多个可能译码模式中的一者，例如多个帧内译码模式中的一者或多个帧间译码模式中的一者。预测处理单元41可将所得经帧内或帧间译码块提供到求和器50以产生残余块数据且提供到求和器62以重建经编码块以用作参考图片。
预测处理单元41内的帧内预测处理单元46可执行当前视频块相对于与待译码的当前块相同的帧或切片中的一或多个相邻块的帧内预测性译码以提供空间压缩。预测处理单元41内的运动估计单元42及运动补偿单元44执行当前视频块相对于一或多个参考图片中的一或多个预测性块的帧间预测性译码以提供时间压缩。
运动估计单元42可经配置以根据视频序列的预定图案来确定用于视频切片的帧间预测模式。预定图案可将序列中的视频切片指定为P切片或B切片。运动估计单元42 及运动补偿单元44可高度集成，但出于概念目的而分开说明。由运动估计单元42执行的运动估计为产生运动向量的过程，所述运动向量估计视频块的运动。举例来说，运动向量可指示当前视频帧或图片内的视频块的PU相对于参考图片内的预测性块的位移。
预测性块为就像素差而言被发现紧密地匹配待译码视频块的PU的块，所述像素差可由绝对差总和(sum of absolute difference；SAD)、平方差总和(sum of squaredifference； SSD)或其它差异度量确定。在一些实例中，视频编码器20可计算存储于DPB66中的参考图片的子整数像素位置的值。举例来说，视频编码器20可内插参考图片的四分之一像素位置、八分之一像素位置或其它分数像素位置的值。因此，运动估计单元42可执行关于全像素位置及分数像素位置的运动搜索且输出具有分数像素精确度的运动向量。
运动估计单元42通过比较PU的位置与参考图片的预测性块的位置来计算经帧间译码切片中的视频块的PU的运动向量。参考图片可选自第一参考图片列表(列表0)或第二参考图片列表(列表1)，所述列表中的每一者识别存储于DPB 66中的一或多个参考图片。运动估计单元42将所计算的运动向量发送到熵编码单元56及运动补偿单元44。
由运动补偿单元44执行的运动补偿可涉及基于由运动估计(可能执行到子像素精确度的内插)确定的运动向量而提取或产生预测性块。在接收到当前视频块的PU的运动向量之后，运动补偿单元44可在参考图片列表中的一者中定位运动向量所指向的预测性块。视频编码器20通过从正在译码的当前视频块的像素值减去预测性块的像素值来形成残余视频块，从而形成像素差值。像素差形成用于块的残余数据，且可包含明度及色度差异分量两者。求和器50表示执行这种减法运算的一或多个组件。运动补偿单元44 也可产生与视频块及视频切片相关联的语法元素以供视频解码器30在解码视频切片的视频块时使用。
在预测处理单元41通过帧内预测或帧间预测产生当前视频块的预测性块之后，视频编码器20通过从当前视频块减去预测性块而形成残余视频块。残余块中的残余视频数据可包含于一或多个TU中且应用于变换处理单元52。变换处理单元52使用例如离散余弦变换(DCT)或概念上类似的变换将残余视频数据变换为残余变换系数。变换处理单元52可将残余视频数据从像素域转换到变换域(例如，频域)。
变换处理单元52可将所得变换系数发送到量化单元54。量化单元54对变换系数进行量化以进一步降低位速率。量化过程可减小与一些或所有系数相关联的位深度。可通过调整量化参数来修改量化程度。在一些实例中，量化单元54随后可执行对包含经量化的变换系数的矩阵的扫描。在另一实例中，熵编码单元56可执行所述扫描。
在量化之后，熵编码单元56对经量化变换系数进行熵编码。举例来说，熵编码单元56可执行上下文适应性可变长度译码(CAVLC)、上下文适应性二进制算术译码 (CABAC)、基于语法的上下文适应性二进制算术译码(SBAC)、概率区间分割熵(PIPE) 译码或另一熵编码方法或技术。在由熵编码单元56熵编码之后，经编码位流可发射到视频解码器30，或经存档以供视频解码器30稍后发射或检索。熵编码单元56也可熵编码正译码的当前视频切片的运动向量及其它语法元素。
逆量化单元58及逆变换处理单元60分别应用逆量化及逆变换以重建像素域中的残余块以供稍后用作参考图片的参考块。运动补偿单元44可通过将残余块新增到参考图片列表中的一者内的参考图片中的一者的预测性块来计算参考块。运动补偿单元44也可将一或多个内插滤波器应用到经重建残余块，以计算用于运动估计的子整数像素值。求和器62将重建残余块新增到通过运动补偿单元44产生的经运动补偿预测块以产生经重建块。
滤波器单元64对经重构块(例如，求和器62的输出)进行滤波且将经滤波的经重构块存储于DPB 66中以供用作参考块。参考块可由运动估计单元42及运动补偿单元44 用作参考块以对后续视频帧或图片中的块进行帧间预测。滤波器单元64旨在表示解块滤波器、样本适应性偏移滤波器及适应性回路滤波器或其它类型的滤波器中的一或多者。解块滤波器可例如将解块滤波应用于滤波器块边界，以从经重建视频去除块效应伪影。样本适应性偏移滤波器可将偏移应用到经重建像素值以便改进总体译码质量。也可使用额外回路滤波器(回路内或回路后)。
本发明中所描述的各种技术可由视频编码器20及/或预处理单元19单独地或彼此组合地执行。举例来说，视频编码器20及/或预处理单元19可经配置以处理HDR/WCG 视频数据。视频编码器20及/或预处理单元19可经配置以：确定用于HDR/WCG视频数据的块的经量化变换系数的量化参数；基于经确定量化参数对经量化变换系数进行逆量化以确定经解量化变换系数；基于经解量化变换系数，确定HDR/WCG视频数据的块的残余值块；基于残余值块，确定HDR/WCG视频数据的块的经重建块；确定用于 HDR/WCG视频数据的块的一或多个DRA参数；基于经确定量化参数调整一或多个DRA 参数以确定一或多个经调整DRA参数；及使用一或多个经调整DRA参数对HDR/WCG 视频数据的经重建块执行DRA。
视频编码器20及/或预处理单元19可另外或替代地经配置以：确定用于HDR/WCG视频数据的块的经量化变换系数的量化参数；基于经确定量化参数对经量化变换系数进行量化以确定经量化变换系数；基于经确定量化参数确定用于HDR/WCG视频数据的块的一或多个参数；及基于经确定量化参数调整一或多个DRA参数以确定一或多个经调整DRA参数。
图11为说明可实施本发明中所描述的技术的实例视频解码器30的框图。图11的视频解码器30可例如经配置以接收上文关于图10的视频编码器20所描述的传信。在图11的实例中，视频解码器30包含视频数据存储器78、熵解码单元80、预测处理单元81、逆量化单元86、逆变换处理单元88、求和器90、滤波器单元92及DPB 94。预测处理单元81包含运动补偿单元82及帧内预测单元84。在一些实例中，视频解码器 30可执行与关于来自图10的视频编码器20所描述的编码遍次互逆的解码遍次。
在解码过程期间，视频解码器30从视频编码器20接收表示经编码视频切片的视频块及相关联语法元素的经编码视频位流。视频解码器30将所接收的经编码视频位流存储于视频数据存储器78中。视频数据存储器78可存储待由视频解码器30的组件解码的视频数据，例如经编码视频位流。存储于视频数据存储器78中的视频数据可例如通过链路16从存储装置26或从本地视频源(例如相机)或通过存取物理数据存储媒体而获得。视频数据存储器78可形成存储来自经编码视频位流的经编码视频数据的经译码图片缓冲器(CPB)。DPB94可为存储供视频解码器30用于例如以帧内或帧间译码模式解码视频数据的参考视频数据的参考图片存储器。视频数据存储器78及DPB 94可由例如 DRAM、SDRAM、MRAM、RRAM或其它类型的存储器装置的多种存储器装置中的任一者形成。视频数据存储器78及DPB 94可由同一存储器装置或单独的存储器装置提供。在各种实例中，视频数据存储器78可与视频解码器30的其它组件一起在芯片上，或相对于那些组件在芯片外。
视频解码器30的熵解码单元80对存储于视频数据存储器78中的视频数据进行熵解码以产生经量化系数、运动向量及其它语法元素。熵解码单元80将运动向量及其它语法元素转发到预测处理单元81。视频解码器30可在视频切片层级及/或视频块层级处接收语法元素。
当视频切片经译码为经帧内译码(I)切片时，预测处理单元81的帧内预测处理单元 84可基于来自当前帧或图片的先前经解码块的经传信帧内预测模式及数据来产生用于当前视频切片的视频块的预测数据。当视频帧经译码为经帧间译码切片(例如，B切片或 P切片)时，预测处理单元81的运动补偿单元82基于从熵解码单元80接收的运动向量及其它语法元素产生用于当前视频切片的视频块的预测性块。预测性块可从参考图片列表中的一者内的参考图片中的一者产生。视频解码器30可基于存储于DPB 94中的参考图片使用默认构建技术来构建参考帧列表，列表0及列表1。
运动补偿单元82通过剖析运动向量及其它语法元素来确定当前视频切片的视频块的预测信息，且使用所述预测信息产生用于正解码的当前视频块的预测性块。举例来说，运动补偿单元82使用所接收语法元素中的一些确定用于译码视频切片的视频块的预测模式(例如，帧内或帧间预测)、帧间预测切片类型(例如，B切片或P切片)、切片的参考图片列表中的一或多者的构建信息、切片的每一经帧间编码视频块的运动向量、切片的每一经帧间译码视频块的帧间预测状态及用以解码当前视频切片中的视频块的其它信息。
运动补偿单元82也可执行基于内插滤波器的内插。运动补偿单元82可使用如由视频编码器20在视频块的编码期间所使用的内插滤波器，以计算参考块的子整数像素的内插值。在这种情况下，运动补偿单元82可从所接收语法元素确定由视频编码器20所使用的内插滤波器且使用所述内插滤波器产生预测性块。
逆量化单元86对位流中所提供且由熵解码单元80解码的经量化变换系数进行逆量化，即解量化。逆量化过程可包含使用由视频编码器20针对视频切片中的每一视频块计算的量化参数，以确定量化程度及(同样地)应该应用的逆量化程度。逆变换处理单元 88将逆变换(例如，逆向DCT、逆向整数变换或概念上类似的逆变换过程)应用于变换系数，以便产生像素域中的残余块。
在预测处理单元使用例如帧内或帧间预测产生当前视频块的预测性块之后，视频解码器30通过对来自逆变换处理单元88的残余块与由运动补偿单元82产生的对应预测性块进行求和而形成经重建视频块。求和器90表示执行所述求和运算的一或多个组件。
滤波器单元92使用例如解块滤波、SAO滤波、适应性回路滤波或其它类型的滤波器中的一或多者对经重建视频块进行滤波。也可使用其它回路滤波器(在译码回路内或在译码回路之后)使像素转变平滑，或以其它方式改进视频质量。给定帧或图片中的经解码视频块随后存储于DPB 94中，所述DPB存储用于后续运动补偿的参考图片。DPB 94 可为额外存储器的部分或与其分离，所述额外存储器存储用于稍后呈现于显示装置(例如图1的显示装置32)上的经解码视频。
本发明中所描述的各种技术可由视频解码器30及/或后处理单元31单独地或彼此组合地执行。举例来说，视频解码器30及/或后处理单元31可经配置以处理HDR/WCG 视频数据。视频解码器30及/或后处理单元31可经配置以：确定用于HDR/WCG视频数据的块的经量化变换系数的量化参数；基于经确定量化参数对经量化变换系数进行逆量化以确定经解量化变换系数；基于经解量化变换系数，确定HDR/WCG视频数据的块的残余值块；基于残余值块，确定HDR/WCG视频数据的块的经重建块；确定用于 HDR/WCG视频数据的块的一或多个DRA参数；基于经确定量化参数调整一或多个DRA 参数以确定一或多个经调整DRA参数；及使用一或多个经调整DRA参数对HDR/WCG 视频数据的经重建块执行DRA。
图12为说明根据本发明的技术的用于解码视频数据的视频解码器的实例操作的流程图。举例来说，关于图12所描述的视频解码器可为用于输出可显示经解码视频的例如视频解码器30的视频解码器，或可为实施于视频编码器，例如视频编码器20的解码回路中的视频解码器，所述解码回路包含预测处理单元41、逆量化单元58、逆变换处理单元60、滤波器单元64及DPB 66。图12的技术中的一些可由与视频解码器分离的实体(例如预处理单元19或后处理单元31)执行，但为简单起见，图12的所有技术将描述为由视频解码器执行。
视频解码器确定用于HDR/WCG视频数据的块的经量化变换系数的量化参数(200)。视频解码器基于经确定量化参数对经量化变换系数进行逆量化以确定经解量化变换系数(210)。基于经解量化变换系数，视频解码器确定HDR/WCG视频数据的块的残余值块 (220)。基于残余值块，视频解码器确定HDR/WCG视频数据的块的经重建块(230)。视频解码器确定用于HDR/WCG视频数据的块的一或多个DRA参数(240)。为了确定用于 HDR/WCG视频数据的块的一或多个DRA参数，视频解码器可接收对一或多个DRA参数的指示作为HDR/WCG视频数据中的语法元素或可以其它方式导出一或多个DRA参数。
视频解码器基于经确定量化参数调整一或多个DRA参数以确定一或多个经调整DRA参数(250)。用于HDR/WCG视频数据的块的一或多个DRA参数可包含用于 HDR/WCG视频数据的块的明度分量的缩放参数及用于HDR/WCG视频数据的块的明度分量的偏移参数，且用于HDR/WCG视频数据的块的一或多个经调整DRA参数可包含用于HDR/WCG视频数据的块的明度分量的经调整缩放参数及用于HDR/WCG视频数据的块的明度分量的经调整偏移参数。用于HDR/WCG视频数据的块的一或多个DRA参数可包含用于HDR/WCG视频数据的块的色度分量的缩放参数及用于HDR/WCG视频数据的块的色度分量的偏移参数，且用于HDR/WCG视频数据的块的一或多个经调整DRA 参数可包含用于HDR/WCG视频数据的块的色度分量的经调整缩放参数及用于 HDR/WCG视频数据的块的色度分量的经调整偏移参数。一或多个经调整DRA参数可包含用于HDR/WCG视频数据的块的第一色度分量的经调整DRA参数及用于 HDR/WCG视频数据的块的第二色度分量的经调整DRA参数。一或多个经调整DRA参数可包含用于HDR/WCG视频数据的块的明度分量的经调整DRA参数、用于HDR/WCG 视频数据的块的第一色度分量的经调整DRA参数及用于HDR/WCG视频数据的块的第二色度分量的经调整DRA参数。
视频解码器使用一或多个经调整DRA参数对HDR/WCG视频数据的经重建块执行DRA(260)。视频解码器也可输出由执行DRA产生的经调整视频数据。视频解码器可例如输出经调整视频数据以供显示或可通过存储经调整视频数据来输出经调整视频数据。视频解码器可存储经调整视频数据以供将来显示或可存储经调整视频数据以供编码或解码视频数据的将来块。
在一或多个实例中，所描述功能可实施于硬件、软件、固件或其任何组合中。如果实施于软件中，那么所述功能可作为一或多个指令或代码存储在计算机可读媒体上或通过计算机可读媒体发射，且由基于硬件的处理单元执行。计算机可读媒体可包含：计算机可读存储媒体，其对应于例如数据存储媒体的有形媒体；或通信媒体，其包含例如根据通信协议促进计算机程序从一处转移到另一处的任何媒体。以这种方式，计算机可读媒体大体上可对应于(1)非暂时性的有形计算机可读存储媒体，或(2)例如信号或载波的通信媒体。数据存储媒体可为可由一或多个计算机或一或多个处理器存取以检索指令、代码及/或数据结构以用于实施本发明所描述的技术的任何可用媒体。计算机程序产品可包含计算机可读媒体。
作为实例而非限制，这些计算机可读存储媒体可包括RAM、ROM、EEPROM、 CD-ROM或其它光盘存储装置、磁盘存储装置或其它磁性存储装置、闪存存储器或可用于存储呈指令或数据结构形式的所要程序码且可由计算机存取的任何其它媒体。而且，将任何连接适当地称为计算机可读媒体。举例来说，如果使用同轴缆线、光缆、双绞线、数字订户线(DSL)或无线技术(例如红外线、无线电及微波)从网站、服务器或其它远程源发射指令，那么同轴缆线、光缆、双绞线、DSL或无线技术(例如红外线、无线电及微波)包含于媒体的定义中。然而，应理解，计算机可读存储媒体及数据存储媒体不包含连接、载波、信号或其它暂时性媒体，而是实际上有关非暂时性有形存储媒体。如本文所用，磁盘及光盘包含压缩光盘(CD)、激光光盘、光学光盘、数字影音光盘(DVD)、软盘及蓝光光盘，其中磁盘通常以磁性方式再生数据，而光盘通过激光以光学方式再生数据。以上各者的组合也应包含于计算机可读媒体的范围内。
指令可由例如一或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、场可编程逻辑阵列(FPGA)或其它等效集成或离散逻辑电路的一或多个处理器执行。因此，如本文所用的术语“处理器”可指代前述结构或适用于实施本文中所描述的技术的任何其它结构中的任一者。另外，在一些方面中，可将本文中所描述的功能性提供在经配置以用于编码及解码的专用硬件及/或软件模块内，或并入于组合式编码解码器中。而且，所述技术可完全实施于一或多个电路或逻辑元件中。
本发明的技术可实施于广泛多种装置或设备中，包含无线手持机、集成电路(IC)或 IC集合(例如，芯片组)。在本发明中描述各种组件、模块或单元以强调经配置以执行所揭示技术的装置的功能方面，但未必需要通过不同硬件单元来实现。相反地，如上文所描述，各种单元可组合于编码解码器硬件单元中，或由互操作性硬件单元(包含如上文所描述的一或多个处理器)的集合结合合适软件及/或固件来提供。
各种实例已予以描述。这些及其它实例在以下权利要求书的范围内。

Claims (30)

1. 一种处理高动态范围及/或广色域 HDR/WCG 视频数据的方法，所述方法包括：
确定用于所述 HDR/WCG 视频数据的块的经量化变换系数的量化参数；
基于所述经确定量化参数对所述经量化变换系数进行逆量化以确定经解量化变换系数；
基于所述经解量化变换系数，确定所述 HDR/WCG 视频数据的所述块的残余值块；
基于所述残余值块，确定所述 HDR/WCG 视频数据的所述块的经重建块；
确定用于所述 HDR/WCG 视频数据的所述块的一或多个动态范围调整 DRA 参数；
基于所述经确定量化参数调整所述一或多个 DRA 参数以确定一或多个经调整DRA 参数；及
使用所述一或多个经调整 DRA 参数对所述 HDR/WCG 视频数据的所述经重建块执行DRA。
2. 根据权利要求 1 所述的方法，其中用于所述 HDR/WCG 视频数据的所述块的所述一或多个 DRA 参数包括用于所述 HDR/WCG 视频数据的所述块的明度分量的缩放参数及用于所述 HDR/WCG 视频数据的所述块的所述明度分量的偏移参数，且其中用于所述 HDR/WCG 视频数据的所述块的所述一或多个经调整 DRA 参数包括用于所述 HDR/WCG 视频数据的所述块的所述明度分量的经调整缩放参数及用于所述 HDR/WCG 视频数据的所述块的所述明度分量的经调整偏移参数。
3. 根据权利要求 1 所述的方法，其中用于所述 HDR/WCG 视频数据的所述块的所述一或多个 DRA 参数包括用于所述 HDR/WCG 视频数据的所述块的色度分量的缩放参数及用于所述 HDR/WCG 视频数据的所述块的所述色度分量的偏移参数，且其中用于所述 HDR/WCG 视频数据的所述块的所述一或多个经调整 DRA 参数包括用于所述 HDR/WCG 视频数据的所述块的所述色度分量的经调整缩放参数及用于所述 HDR/WCG 视频数据的所述块的所述色度分量的经调整偏移参数。
4. 根据权利要求 1 所述的方法，其中所述一或多个经调整 DRA 参数包括用于所述HDR/WCG 视频数据的所述块的第一色度分量的经调整 DRA 参数及用于所述HDR/WCG 视频数据的所述块的第二色度分量的经调整 DRA 参数。
5. 根据权利要求 1 所述的方法，其中所述一或多个经调整 DRA 参数包括用于所述HDR/WCG 视频数据的所述块的明度分量的经调整 DRA 参数、用于所述 HDR/WCG 视频数据的所述块的第一色度分量的经调整 DRA 参数及用于所述 HDR/WCG 视频数据的所述块的第二色度分量的经调整 DRA 参数。
6. 根据权利要求 1 所述的方法，其中确定用于所述 HDR/WCG 视频数据的所述块的所述一或多个 DRA 参数包括接收对所述一或多个 DRA 参数的指示作为所述HDR/WCG 视频数据中的语法元素。
7. 根据权利要求 1 所述的方法，其中所述 HDR/WCG 视频数据的所述经重建块包括所述经重建块的经滤波版本。
8. 根据权利要求 1 所述的方法，其中确定用于所述 HDR/WCG 视频数据的所述块的所述一或多个 DRA 参数包括基于用于所述 HDR/WCG 视频数据的所述块的明度分量的量化参数与用于所述 HDR/WCG 视频数据的所述块的色度分量的量化参数之间的相依性导出用于所述 HDR/WCG 视频数据的所述块的所述一或多个 DRA 参数中的至少一者。
9. 根据权利要求 8 所述的方法，其中基于用于所述 HDR/WCG 视频数据的所述块的所述明度分量的所述量化参数与用于所述 HDR/WCG 视频数据的所述块的所述色度分量的所述量化参数之间的所述相依性导出用于所述 HDR/WCG 视频数据的所述块的所述一或多个 DRA 参数中的所述至少一者包括通过执行 QP 到 DRA 比例转换导出所述一或多个DRA 参数中的所述至少一者。
10.根据权利要求 8 所述的方法，其中基于用于所述 HDR/WCG 视频数据的所述块的所述明度分量的所述量化参数与用于所述 HDR/WCG 视频数据的所述块的所述色度分量的所述量化参数之间的所述相依性导出用于所述 HDR/WCG 视频数据的所述块的所述一或多个 DRA 参数中的所述至少一者包括通过执行 DRA 比例到 QP 转换导出所述一或多个DRA 参数中的所述至少一者。
11. 根据权利要求 8 所述的方法，其中用于所述明度分量的所述量化参数与用于所述色度分量的所述量化参数之间的所述相依性是由编码解码器定义的。
12.根据权利要求 8 所述的方法，所述方法进一步包括：
接收所述 HDR/WCG 视频数据中的语法元素，其中所述语法元素的值定义用于所述HDR/WCG 视频数据的所述块的所述明度分量的所述量化参数与用于所述HDR/WCG 视频数据的所述块的所述色度分量的所述量化参数之间的所述相依性。
13. 一种用于处理高动态范围及/或广色域 HDR/WCG 视频数据的装置，所述装置包括：
存储器，其经配置以存储视频数据；及
一或多个处理器，其耦合到所述存储器且经配置以：
确定用于所述 HDR/WCG 视频数据的块的经量化变换系数的量化参数；
基于所述经确定量化参数对所述经量化变换系数进行逆量化以确定经解量化变换系数；
基于所述经解量化变换系数，确定所述 HDR/WCG 视频数据的所述块的残余值块；
基于所述残余值块，确定所述 HDR/WCG 视频数据的所述块的经重建块；
确定用于所述 HDR/WCG 视频数据的所述块的一或多个动态范围调整 DRA 参数；
基于所述经确定量化参数调整所述一或多个 DRA 参数以确定一或多个经调整DRA 参数；及
使用所述一或多个经调整 DRA 参数对所述 HDR/WCG 视频数据的所述经重建块执行DRA。
14.根据权利要求 13 所述的装置，其中用于所述 HDR/WCG 视频数据的所述块的所述一或多个 DRA 参数包括用于所述 HDR/WCG 视频数据的所述块的明度分量的缩放参数及用于所述 HDR/WCG 视频数据的所述块的所述明度分量的偏移参数，且其中用于所述 HDR/WCG 视频数据的所述块的所述一或多个经调整 DRA 参数包括用于所述 HDR/WCG 视频数据的所述块的所述明度分量的经调整缩放参数及用于所述 HDR/WCG 视频数据的所述块的所述明度分量的经调整偏移参数。
15.根据权利要求 13 所述的装置，其中用于所述 HDR/WCG 视频数据的所述块的所述一或多个 DRA 参数包括用于所述 HDR/WCG 视频数据的所述块的色度分量的缩放参数及用于所述 HDR/WCG 视频数据的所述块的所述色度分量的偏移参数，且其中用于所述 HDR/WCG 视频数据的所述块的所述一或多个经调整 DRA 参数包括用于所述 HDR/WCG 视频数据的所述块的所述色度分量的经调整缩放参数及用于所述 HDR/WCG 视频数据的所述块的所述色度分量的经调整偏移参数。
16.根据权利要求 13 所述的装置，其中所述一或多个经调整 DRA 参数包括用于所述HDR/WCG 视频数据的所述块的第一色度分量的经调整 DRA 参数及用于所述HDR/WCG 视频数据的所述块的第二色度分量的经调整 DRA 参数。
17.根据权利要求 13 所述的装置，其中所述一或多个经调整 DRA 参数包括用于所述HDR/WCG 视频数据的所述块的明度分量的经调整 DRA 参数、用于所述 HDR/WCG 视频数据的所述块的第一色度分量的经调整 DRA 参数及用于所述 HDR/WCG 视频数据的所述块的第二色度分量的经调整 DRA 参数。
18.根据权利要求 13 所述的装置，其中为了确定用于所述 HDR/WCG 视频数据的所述块的所述一或多个 DRA 参数，所述一或多个处理器经配置以接收对所述一或多个DRA 参数的指示作为所述 HDR/WCG 视频数据中的语法元素。
19. 根据权利要求 13 所述的装置，其中所述 HDR/WCG 视频数据的所述经重建块包括所述经重建块的经滤波版本。
20. 根据权利要求 13 所述的装置，其中为了确定用于所述 HDR/WCG 视频数据的所述块的所述一或多个 DRA 参数， 所述一或多个处理器经配置以基于用于所述HDR/WCG 视频数据的所述块的明度分量的量化参数与用于所述 HDR/WCG 视频数据的所述块的色度分量的量化参数之间的相依性导出用于所述 HDR/WCG 视频数据的所述块的所述一或多个DRA 参数中的至少一者。
21.根据权利要求 20 所述的装置，其中为了基于用于所述 HDR/WCG 视频数据的所述块的所述明度分量的所述量化参数与用于所述 HDR/WCG 视频数据的所述块的所述色度分量的所述量化参数之间的所述相依性导出用于所述 HDR/WCG 视频数据的所述块的所述一或多个 DRA 参数中的所述至少一者，所述一或多个处理器经配置以通过执行 QP 到 DRA比例转换导出所述一或多个 DRA 参数中的所述至少一者。
22. 根据权利要求 20 所述的装置，其中为了基于用于所述 HDR/WCG 视频数据的所述块的所述明度分量的所述量化参数与用于所述 HDR/WCG 视频数据的所述块的所述色度分量的所述量化参数之间的所述相依性导出用于所述 HDR/WCG 视频数据的所述块的所述一或多个 DRA 参数中的所述至少一者，所述一或多个处理器经配置以通过执行 DR 比例到 QP 转换导出所述一或多个 DRA 参数中的所述至少一者。
23. 根据权利要求 20 所述的装置，其中用于所述明度分量的所述量化参数与用于所述色度分量的所述量化参数之间的所述相依性是由编码解码器定义的。
24.根据权利要求 20 所述的装置，其中所述一或多个处理器经进一步配置以：
接收所述 HDR/WCG 视频数据中的语法元素，其中所述语法元素的值定义用于所述HDR/WCG 视频数据的所述块的所述明度分量的所述量化参数与用于所述HDR/WCG 视频数据的所述块的所述色度分量的所述量化参数之间的所述相依性。
25. 根据权利要求 13 所述的装置，其中所述装置包括无线通信装置，其进一步包括经配置以接收经编码视频数据的接收器。
26. 根据权利要求 25 所述的装置，其中所述无线通信装置包括电话手机，且其中所述接收器经配置以根据无线通信标准解调包括所述经编码视频数据的信号。
27.根据权利要求 13 所述的装置，其中所述装置包括无线通信装置，其进一步包括经配置以发射经编码视频数据的发射器。
28.根据权利要求 27 所述的装置，其中所述无线通信装置包括电话手机，且其中所述发射器经配置以根据无线通信标准调制包括所述经编码视频数据的信号。
29.一种计算机可读介质，其存储在由一或多个处理器执行时使所述一或多个处理器进行以下操作的指令：
确定用于高动态范围及/或广色域 HDR/WCG 视频数据的块的经量化变换系数的量化参数；
基于所述经确定量化参数对所述经量化变换系数进行逆量化以确定经解量化变换系数；
基于所述经解量化变换系数，确定所述 HDR/WCG 视频数据的所述块的残余值块；
基于所述残余值块，确定所述 HDR/WCG 视频数据的所述块的经重建块；
确定用于所述 HDR/WCG 视频数据的所述块的一或多个动态范围调整 DRA 参数；
基于所述经确定量化参数调整所述一或多个 DRA 参数以确定一或多个经调整DRA 参数；及
使用所述一或多个经调整 DRA 参数对所述 HDR/WCG 视频数据的所述经重建块执行DRA。
30.一种用于处理高动态范围及/或广色域 HDR/WCG 视频数据的设备，所述设备包括：
用于确定用于所述 HDR/WCG 视频数据的块的经量化变换系数的量化参数的装置；
用于基于所述经确定量化参数对所述经量化变换系数进行逆量化以确定经解量化变换系数的装置；
用于基于所述经解量化变换系数确定所述 HDR/WCG 视频数据的所述块的残余值块的装置；
用于基于所述残余值块确定所述 HDR/WCG 视频数据的所述块的经重建块的装置；
用于确定用于所述 HDR/WCG 视频数据的所述块的一或多个动态范围调整 DRA参数的装置；
用于基于所述经确定量化参数调整所述一或多个 DRA 参数以确定一或多个经调整DRA 参数的装置；及
用于使用所述一或多个经调整 DRA 参数对所述 HDR/WCG 视频数据的所述经重建块执行 DRA 的装置。
CN201880078538.0A 2017-12-19 2018-12-19 用于视频译码的方法和装置、计算机可读存储介质、设备 Active CN111480339B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762607887P 2017-12-19 2017-12-19
US62/607,887 2017-12-19
US16/224,320 2018-12-18
US16/224,320 US10681358B2 (en) 2017-12-19 2018-12-18 Quantization parameter control for video coding with joined pixel/transform based quantization
PCT/US2018/066476 WO2019126307A1 (en) 2017-12-19 2018-12-19 Quantization parameter control for video coding with joined pixel/transform based quantization

Publications (2)

Publication Number Publication Date
CN111480339A CN111480339A (zh) 2020-07-31
CN111480339B true CN111480339B (zh) 2022-05-24

Family

ID=66816609

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880078538.0A Active CN111480339B (zh) 2017-12-19 2018-12-19 用于视频译码的方法和装置、计算机可读存储介质、设备

Country Status (9)

Country Link
US (2) US10681358B2 (zh)
EP (1) EP3729806A1 (zh)
JP (1) JP7369124B2 (zh)
KR (1) KR20200099535A (zh)
CN (1) CN111480339B (zh)
BR (1) BR112020012101A2 (zh)
SG (1) SG11202004176SA (zh)
TW (1) TWI800580B (zh)
WO (1) WO2019126307A1 (zh)

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016120209A1 (en) * 2015-01-30 2016-08-04 Thomson Licensing A method and apparatus of encoding and decoding a color picture
US10244249B2 (en) 2015-09-21 2019-03-26 Qualcomm Incorporated Fixed point implementation of range adjustment of components in video coding
US10129558B2 (en) * 2015-09-21 2018-11-13 Qualcomm Incorporated Supplement enhancement information (SEI) messages for high dynamic range and wide color gamut video coding
US10681358B2 (en) 2017-12-19 2020-06-09 Qualcomm Incorporated Quantization parameter control for video coding with joined pixel/transform based quantization
CN111937383B (zh) * 2018-03-30 2023-08-01 交互数字Vc控股公司 视频编码和解码中的色度量化参数调整
EP3550837A1 (en) * 2018-04-06 2019-10-09 Comcast Cable Communications LLC Method for generating quantization matrices based on viewing conditions
CN113545064B (zh) * 2019-03-04 2024-05-10 阿里巴巴集团控股有限公司 用于处理视频内容的方法和装置及计算机可读存储介质
WO2020246790A1 (ko) * 2019-06-03 2020-12-10 엘지전자 주식회사 맵핑된 루마 성분 및 스케일링된 크로마 성분 기반 비디오 또는 영상 코딩
CN111083475B (zh) * 2019-12-31 2022-04-01 上海富瀚微电子股份有限公司 量化变换系数管理装置及适用于hevc标准的编码器
US11558616B2 (en) * 2020-03-05 2023-01-17 Qualcomm Incorporated Methods for quantization parameter control for video coding with joined pixel/transform based quantization
US11375212B2 (en) * 2020-04-18 2022-06-28 Qualcomm Incorporated Flexible chroma processing for dynamic range adjustment
CN113489983A (zh) * 2021-06-11 2021-10-08 浙江智慧视频安防创新中心有限公司 一种基于相关度比较确定分块编码参数的方法及装置
WO2023140952A1 (en) * 2022-01-20 2023-07-27 Dolby Laboratories Licensing Corporation Data structure for multimedia applications

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102333223A (zh) * 2011-10-25 2012-01-25 北京华兴宏视技术发展有限公司 视频数据编码方法、解码方法、编码系统和解码系统
CN107079157A (zh) * 2014-09-12 2017-08-18 Vid拓展公司 用于视频编码的分量间去相关

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120307889A1 (en) * 2011-06-01 2012-12-06 Sharp Laboratories Of America, Inc. Video decoder with dynamic range adjustments
US20160309154A1 (en) 2015-04-17 2016-10-20 Qualcomm Incorporated Dynamic range adjustment for high dynamic range and wide color gamut video coding
US10244249B2 (en) 2015-09-21 2019-03-26 Qualcomm Incorporated Fixed point implementation of range adjustment of components in video coding
US10200701B2 (en) * 2015-10-14 2019-02-05 Qualcomm Incorporated HDR and WCG coding architecture with SDR backwards compatibility in a single bitstream for video coding
KR20180074150A (ko) * 2016-12-23 2018-07-03 삼성전자주식회사 Sao 필터링을 포함하는 비디오 데이터의 부호화를 위한 방법 및 장치
US10681358B2 (en) 2017-12-19 2020-06-09 Qualcomm Incorporated Quantization parameter control for video coding with joined pixel/transform based quantization

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102333223A (zh) * 2011-10-25 2012-01-25 北京华兴宏视技术发展有限公司 视频数据编码方法、解码方法、编码系统和解码系统
CN107079157A (zh) * 2014-09-12 2017-08-18 Vid拓展公司 用于视频编码的分量间去相关

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
高辐射分辨率遥感影像的特性分析与处理;王兰;《海洋测绘》;20100725;全文 *

Also Published As

Publication number Publication date
US20200260092A1 (en) 2020-08-13
KR20200099535A (ko) 2020-08-24
TWI800580B (zh) 2023-05-01
EP3729806A1 (en) 2020-10-28
WO2019126307A1 (en) 2019-06-27
JP2021507614A (ja) 2021-02-22
BR112020012101A2 (pt) 2020-11-17
TW201931853A (zh) 2019-08-01
US20190191172A1 (en) 2019-06-20
US11190779B2 (en) 2021-11-30
US10681358B2 (en) 2020-06-09
SG11202004176SA (en) 2020-07-29
JP7369124B2 (ja) 2023-10-25
CN111480339A (zh) 2020-07-31

Similar Documents

Publication Publication Date Title
CN111480339B (zh) 用于视频译码的方法和装置、计算机可读存储介质、设备
CN109643531B (zh) 用于具有反馈信道的色域自适应的方法和装置
TWI801432B (zh) 利用內容適應性空間變化量化之視訊寫碼
CN109155848B (zh) 用于高动态范围及宽色域视频译码的环路内样本处理
US10284863B2 (en) Adaptive constant-luminance approach for high dynamic range and wide color gamut video coding
EP3354025B1 (en) Fixed point implementation of range adjustment of components in video coding
CN107710758B (zh) 用于处理视频数据的方法和装置
US20160309154A1 (en) Dynamic range adjustment for high dynamic range and wide color gamut video coding
KR20200107965A (ko) 비디오 코딩을 위한 동일 범위들 및 다른 dra 파라미터들에 대한 시그널링 메커니즘들
US20200029096A1 (en) Combined inverse dynamic range adjustment (dra) and loop filter technique
TWI765903B (zh) 用於循環樣本處理之視訊寫碼工具
KR102670598B1 (ko) 비디오 코딩을 위한 하이 다이내믹 레인지 및 와이드 컬러 가무트 비디오 데이터의 프로세싱

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant