CN109479150A - 用于显示器调适的色彩重映射信息sei消息发信号 - Google Patents

用于显示器调适的色彩重映射信息sei消息发信号 Download PDF

Info

Publication number
CN109479150A
CN109479150A CN201780045985.1A CN201780045985A CN109479150A CN 109479150 A CN109479150 A CN 109479150A CN 201780045985 A CN201780045985 A CN 201780045985A CN 109479150 A CN109479150 A CN 109479150A
Authority
CN
China
Prior art keywords
video
color
sei message
message
remap
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780045985.1A
Other languages
English (en)
Other versions
CN109479150B (zh
Inventor
霍埃尔·索莱·罗哈斯
德内·布达伊哲·桑斯利
阿达许·克里许纳·瑞玛苏布雷蒙尼安
德米特罗·鲁萨诺夫斯基
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Qualcomm Inc
Original Assignee
Qualcomm Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Qualcomm Inc filed Critical Qualcomm Inc
Publication of CN109479150A publication Critical patent/CN109479150A/zh
Application granted granted Critical
Publication of CN109479150B publication Critical patent/CN109479150B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/503—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding involving temporal prediction
    • H04N19/51—Motion estimation or motion compensation
    • H04N19/513—Processing of motion vectors
    • H04N19/517—Processing of motion vectors by encoding
    • H04N19/52—Processing of motion vectors by encoding by predictive encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/50—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding
    • H04N19/597—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using predictive coding specially adapted for multi-view video sequence encoding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

在一个实例中，一种方法包含：由视频解码单元确定当前显示器的亮度峰值；由所述视频解码单元且针对视频数据的图片，获得各自对应于亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息；由所述视频解码单元且基于所述当前显示器的所述亮度峰值，选择所述一或多个色彩重映射消息中的色彩重映射消息；由所述视频解码单元且基于所述所选色彩重映射消息，对视频数据的所述图片的样本进行色彩重映射；和由所述视频解码单元且针对在所述当前显示器处的显示，输出视频数据的所述图片的所述经色彩重映射样本。

Description

用于显示器调适的色彩重映射信息SEI消息发信号
本申请案主张于2016年8月9日申请的美国临时申请案第62/372,692号的权益，所述申请案的全部内容以引用的方式并入本文中。
技术领域
本发明涉及视频译码。
背景技术
数字视频能力可并入到广泛范围的装置中，所述装置包含数字电视、数字直播系统、无线广播系统、个人数字助理(PDA)、膝上型或台式计算机、平板计算机、电子书阅读器、数码相机、数字记录装置、数字媒体播放器、视频游戏装置、视频游戏控制台、蜂窝式或卫星无线电电话(所谓的“智能型电话”)、视频电话会议装置、视频流式传输装置等。数字视频装置实施视频译码技术，例如由MPEG-2、MPEG-4、ITU-T H.263、ITU-T H.264/MPEG-4第10部分(先进视频译码(AVC))、ITU-T H.265(高效率视频译码(HEVC))所定义的标准和所述标准的扩展中所描述的那些技术。视频装置可通过实施此类视频译码技术来更有效地发射、接收、编码、解码和/或存储数字视频信息。
视频译码技术包含空间(图片内)预测和/或时间(图片间)预测以减少或去除视频序列中固有的冗余。对于基于块的视频译码，视频图块(例如，视频帧或视频帧的一部分)可分割成视频块(其也可被称作树型块)、译码单元(CU)和/或译码节点。图片的经帧内译码(I)图块中的视频块是使用相对于同一图片中的相邻块中的参考样本的空间预测来编码。图片的经帧间译码(P或B)图块中的视频块可使用相对于同一图片中的相邻块中的参考样本的空间预测或相对于其它参考图片中的参考样本的时间预测。图片可被称作帧，且参考图片可被称作参考帧。
空间或时间预测产生待译码块的预测性块。残余数据表示待译码的原始块与预测性块之间的像素差。根据指向形成预测性块的参考样本的块的运动向量和指示经译码块与预测性块之间的差的残余数据来编码经帧间译码块。经帧内译码块是根据帧内译码模式和残余数据编码。为进行进一步压缩，残余数据可从像素域变换到变换域，从而产生残余变换系数，其随后可经量化。最初布置成二维阵列的经量化变换系数可经扫描以便产生变换系数的一维向量，且熵译码可适用于达成甚至更多压缩。
发明内容
在一个实例中，一种处理经解码视频数据的方法包含：由视频解码单元确定当前显示器的亮度峰值；由视频解码单元且针对视频数据的图片获得各自对应于亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息；由视频解码单元且基于当前显示器的亮度峰值选择所述一或多个色彩重映射消息中的色彩重映射消息；由视频解码单元且基于所选色彩重映射消息对视频数据的图片的样本进行色彩重映射；和由视频解码单元且针对在当前显示器处的显示输出视频数据的图片的经色彩重映射样本。
在另一实例中，一种编码视频数据的方法包含：由视频编码器且在位流中编码视频数据的图片的样本值；由视频编码器且在位流中编码用于视频数据的图片的一或多个色彩重映射消息，所述色彩重映射消息中的每一个对应于亮度峰值集合中的相应亮度峰值；且由视频编码器输出位流。
在另一实例中，一种用于处理经解码视频数据的装置包含：存储器，其经配置以存储视频数据；和视频解码单元。在此实例中，所述视频解码单元经配置以：确定当前显示器的亮度峰值；针对视频数据的图片获得各自对应于亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息；基于当前显示器的亮度峰值选择所述一或多个色彩重映射消息中的色彩重映射消息；基于所选色彩重映射消息对视频数据的图片的样本进行色彩重映射；和针对在当前显示器处的显示输出视频数据的图片的经色彩重映射样本。
在另一实例中，一种用于编码视频数据的装置包含：存储器，其经配置以存储视频数据；和视频编码单元。在此实例中，所述视频解码单元经配置以：在位流中编码视频数据的图片的样本值；在位流中编码用于视频数据的图片的一或多个色彩重映射消息，所述色彩重映射消息中的每一个对应于亮度峰值集合中的相应亮度峰值；和输出位流。
在另一实例中，一种用于处理经解码视频数据的装置包含：用于确定当前显示器的亮度峰值的装置；用于针对视频数据的图片获得各自对应于亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息的装置；用于基于当前显示器的亮度峰值选择所述一或多个色彩重映射消息中的色彩重映射消息的装置；用于基于所选色彩重映射消息对视频数据的图片的样本进行色彩重映射的装置；和用于针对在当前显示器处的显示输出视频数据的图片的经色彩重映射样本的装置。
在另一实例中，一种用于编码视频数据的装置包含：用于在位流中编码视频数据的图片的样本值的装置；用于在位流中编码视频数据的图片的一或多个色彩重映射消息的装置，所述色彩重映射消息中的每一个对应于亮度峰值集合中的相应亮度峰值；和用于输出位流的装置。
在另一实例中，一种计算机可读存储媒体存储指令，所述指令在执行时使得视频处理装置的一或多个处理器：确定当前显示器的亮度峰值；针对视频数据的图片获得各自对应于亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息；基于当前显示器的亮度峰值选择所述一或多个色彩重映射消息中的色彩重映射消息；基于所选色彩重映射消息对视频数据的图片的样本进行色彩重映射；和针对在当前显示器处的显示输出视频数据的图片的经色彩重映射样本。
在另一实例中，一种计算机可读存储媒体存储指令，所述指令在执行时使得视频编码装置的一或多个处理器：在位流中编码视频数据的图片的样本值；在位流中编码用于视频数据的图片的一或多个色彩重映射消息，所述色彩重映射消息中的每一个对应于亮度峰值集合中的相应亮度峰值；和输出位流。
在以下随附图式和描述中阐述一或多个实例的细节。其它特征、目标和优点将从所述描述和图式以及权利要求书显而易见。
附图说明
图1为说明经配置以实施本发明的技术的实例视频编码和解码系统的框图。
图2为说明高动态范围(HDR)数据的概念的图式。
图3为比较高清晰度电视(HDTV)(BT.709)与超高清晰度电视(UHDTV)(BT.2020)的视频信号的色域的概念图。
图4为展示HDR/WCG表示转换的概念图。
图5为展示HDR/WCG逆转换的概念图。
图6为展示转移函数的若干实例的概念图。
图7为展示在应用CRI SEI消息时供视频解码器使用的色彩重映射信息/过程的典型结构的概念图。
图8为说明根据本发明的技术用于使用一或多个色彩重映射消息编码视频数据的图片的实例方法的流程图。
图9为说明根据本发明的技术用于使用一或多个色彩重映射消息解码视频数据的图片的实例方法的流程图。
具体实施方式
本发明与具有高动态范围(HDR)和宽色域(WCG)表示的视频信号的译码的领域有关。更明确地说，本发明的技术包含用以改善本申请案的以H.265/HEVC视频译码标准规定的色彩重映射信息(CRI)SEI消息的若干方法。本发明包含用以使得能够将用于对具有不同能力的目标显示器进行显示器调适的CRI SEI发信号的手段。
包含混合式视频译码标准的视频译码标准包含ITU-T H.261、ISO/IEC MPEG-1Visual、ITU-T H.262或ISO/IEC MPEG-2 Visual、ITU-T H.263、ISO/IEC MPEG-4 Visual和ITU-T H.264(也被称作ISO/IEC MPEG-4AVC)，包含其可调式视频译码(SVC)和多视图视频译码(MVC)扩展。新的视频译码标准(即HEVC)的设计已由ITU-T视频译码专家组(VCEG)和ISO/IEC动画专家组(MPEG)的视频译码联合协作小组(JCT-VC)定案。布罗斯(Bross)等人的被称作HEVC工作草案10(WD10)的HEVC草案规范“高效视频译码(HEVC)文本规范草案10(针对FDIS及上次呼叫)(High efficiency video coding(HEVC)text specification draft10(for FDIS&Last Call))”(ITU-T SG16 WP3与ISO/IEC JTC1/SC29/WG11的视频译码联合协作小组(JCT-VC)，第12次会议：瑞士日内瓦，2013年1月14日到23日，JCTVC-L1003v34)可从http://phenix.int-evry.fr/jct/doc_end_user/documents/12_Geneva/wg11/JCTVC-L1003-v34.zip获得。定案的HEVC标准被称作HEVC版本1。
王(Wang)等人的瑕疵报告“高效视频译码(HEVC)瑕疵报告(High efficiencyvideo coding(HEVC)Defect Report)”(ITU-T SG16 WP3与ISO/IEC JTC1/SC29/WG11的视频译码联合协作小组(JCT-VC)，第14次会议：奥地利维也纳，2013年7月25日到8月2日，JCTVC-N1003v1)可从http://phenix.int-evry.fr/jct/doc_end_user/documents/14_Vienna/wg11/JCTVC-N1003-v1.zip获得。定案的HEVC标准文献在2013年4月公布为ITU-TH.265，H系列：视听和多媒体系统，视听服务的基础结构—移动视频的译码、高效率视频译码，国际电信联盟(ITU)的电信标准化部门，且在2014年10月公布另一版本。
图1为说明可利用本发明的技术的实例视频编码和解码系统10的框图。如图1中所示，系统10包含源装置12，其提供稍后将由目的地装置14解码的经编码视频数据。明确地说，源装置12经由计算机可读媒体16将视频数据提供到目的地装置14。源装置12和目的地装置14可包括广泛范围的装置中的任一个，包含台式计算机、笔记型(即，膝上型)计算机、平板计算机、机顶盒、电话手持机(例如，所谓的“智能型”电话)、所谓的“智能型”平板、电视、摄影机、显示装置、数字媒体播放器、视频游戏控制台、视频流式传输装置等。在一些情况下，源装置12和目的地装置14可经配备以用于无线通信。
目的地装置14可经由计算机可读媒体16接收待解码的经编码视频数据。计算机可读媒体16可包括能够将经编码视频数据从源装置12移动到目的地装置14的任一类型的媒体或装置。在一个实例中，计算机可读媒体16可包括通信媒体以使源装置12能够实时地将经编码视频数据直接传输到目的地装置14。可根据通信标准(例如，无线通信协议)调制经编码视频数据，且将其传输到目的地装置14。通信媒体可包括任何无线或有线通信媒体，例如，射频(RF)频谱或一或多个物理传输线。通信媒体可形成基于分组的网络(例如，局域网、广域网或例如因特网的全球网络)的一部分。通信媒体可包含路由器、交换器、基站或任何其它可用于有助于从源装置12到目的地装置14的通信的装备。
在一些实例中，经编码数据可从输出接口22输出到存储装置。类似地，经编码数据可通过输入接口从存储装置存取。存储装置可包含多种分布式或本地存取的数据存储媒体中的任一个，例如硬盘机、蓝光光盘、DVD、CD-ROM、快闪存储器、易失性或非易失性存储器或用于存储经编码视频数据的任何其它合适的数字存储媒体。在另一实例中，存储装置可对应于文件服务器或可存储由源装置12产生的经编码视频的另一中间存储装置。目的地装置14可经由流式传输或下载从存储装置存取存储的视频数据。文件服务器可为能够存储经编码视频数据且将彼经编码视频数据传输到目的地装置14的任何类型的服务器。实例文件服务器包含网页服务器(例如，用于网站)、FTP服务器、网络附接存储(NAS)装置或本机磁盘机。目的地装置14可通过任何标准数据连接(包含因特网连接)来存取经编码视频数据。此可包含适合于存取存储于文件服务器上的经编码视频数据的无线信道(例如，Wi-Fi连接)、有线连接(例如，DSL、缆线调制解调器等)或两者的组合。来自存储装置的经编码视频数据的传输可为流式传输、下载传输，或其组合。
本发明的技术不必限于无线应用或设定。所述技术可应用于视频译码以支持多种多媒体应用中的任一个，例如，空中电视广播、有线电视传输、卫星电视传输、因特网流式传输视频传输(例如，通过HTTP的动态自适应流式传输(DASH))、经编码到数据存储媒体上的数字视频、存储于数据存储媒体上的数字视频的解码或其它应用。在一些实例中，系统10可经配置以支持单向或双向视频传输以支持例如视频流式传输、视频播放、视频广播和/或视频电话的应用。
在图1的实例中，源装置12包含视频源18、视频编码单元21(其包含视频预处理器19和视频编码器20)以及输出接口22。目的地装置14包含输入接口28、视频解码单元29(其包含视频解码器30和视频后处理器31)以及显示装置32。根据本发明，视频预处理器19和视频后处理器31可经配置以应用本发明中所描述的实例技术。举例来说，视频预处理器19和视频后处理器31可包含经配置以应用静态转移函数的静态转移函数单元，还具有可调适信号特性的预处理和后处理单元。
在其它实例中，源装置和目的地装置可包含其它组件或布置。举例来说，源装置12可从外部视频源18(例如，外部摄影机)接收视频数据。同样地，目的地装置14可与外部显示装置介接，而不包含集成式显示装置。
图1的所说明的系统10仅为一个实例。用于处理视频数据的技术可由任何数字视频编码和/或解码装置来执行。尽管本发明的技术通常由视频编码装置执行，但所述技术也可由视频编码器/解码器(通常被称为“CODEC”)执行。为了易于描述，关于在源装置12和目的地装置14中的相应者中执行本发明中所描述的实例技术的视频预处理器19和视频后处理器31来描述本发明。源装置12和目的地装置14仅为其中源装置12产生用于传输到目的地装置14的经译码视频数据的所述译码装置的实例。在一些实例中，装置12、14可以大体上对称的方式操作，使得装置12、14中的每一个包含视频编码和解码组件。因此，系统10可支持视频装置12、14之间的单向或双向视频传输，例如以用于视频流式传输、视频播放、视频广播或视频电话。
源装置12的视频源18可包含视频捕捉装置，例如摄像机、含有先前捕捉的视频的视频文件库和/或用以从视频内容提供者接收视频的视频馈入接口。作为另一替代，视频源18可产生基于计算机图形的数据作为源视频，或实况视频、经存档视频和计算机产生的视频的组合。在一些情况下，如果视频源18为摄像机，那么源装置12和目的地装置14可形成所谓的摄影机电话或视频电话。然而，如上文所提及，本发明中所描述的技术一般可适用于视频译码，且可适用于无线和/或有线应用。在每一情况下，经捕捉、经预捕捉或计算机产生的视频可由视频编码单元21编码。经编码视频信息可随后通过输出接口22输出到计算机可读媒体16上。
计算机可读媒体16可包含暂态媒体，例如无线广播或有线网络传输，或存储媒体(即，非暂时性存储媒体)，例如硬盘、快闪驱动器、压缩光盘、数字视频光盘、蓝光光盘或其它计算机可读媒体。在一些实例中，网络服务器(未图示)可(例如)经由网络传输从源装置12接收经编码视频数据和将经编码视频数据提供到目的地装置14。类似地，媒体产生设施(例如光盘冲压设施)的计算装置可从源装置12接收经编码视频数据且产生含有经编码视频数据的光盘。因此，在各种实例中，计算机可读媒体16可理解为包含各种形式的一或多个计算机可读媒体。
目的地装置14的输入接口28从计算机可读媒体16接收信息。计算机可读媒体16的信息可包含由视频编码单元21的视频编码器20限定的语法信息，其也供视频解码单元29的视频解码器30使用，所述语法信息包含描述块和其它经译码单元(例如，图片群组(GOP))的特性和/或处理的语法元素。显示装置32向用户显示经解码视频数据，且可包括多种显示装置中的任一个，例如，阴极射线管(CRT)、液晶显示器(LCD)、等离子显示器、有机发光二极管(OLED)显示器或另一类型的显示装置。
如所说明，视频预处理器19从视频源18接收视频数据。视频预处理器19可经配置以处理视频数据以将其转换成适合于视频编码器20编码的形式。举例来说，视频预处理器19可执行动态范围压紧(例如，使用非线性转移函数)、到更紧密或稳固的色彩空间的色彩转换，和/或浮点到整数表示转换。视频编码器20可对由视频预处理器19输出的视频数据执行视频编码。视频解码器30可执行视频编码器20的逆向以解码视频数据，且视频后处理器31可执行视频预处理器19的逆向以将视频数据转换成适用于显示器的形式。举例来说，视频后处理器31可执行整数到浮点转换、从紧密或稳固色彩空间的色彩转换和/或动态范围压紧的逆向以产生适用于显示器的视频数据。
视频编码单元21和视频解码单元29各自可实施为各种固定功能和可编程电路中的任一个，例如一或多个微处理器、数字信号处理器(DSP)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、离散逻辑、软件、硬件、固件或其任何组合。当所述技术部分以软件实施时，装置可将用于软件的指令存储于合适的非暂时性计算机可读媒体中，且在硬件中使用一或多个处理器执行指令以执行本发明的技术。视频编码单元21和视频解码单元29中的每一个可包含于一或多个编码器或解码器中，编码器或解码器中的任一个可集成为相应装置中的组合式编码器/解码器(CODEC)的部分。
尽管视频预处理器19和视频编码器20经说明为视频编码单元21内的独立单元且视频后处理器31和视频解码器30经说明为视频解码单元29内的独立单元，但本发明中所描述的技术并不限于此。视频预处理器19和视频编码器20可形成为共同装置(例如，同一集成电路或容纳在同一芯片或芯片封装内)。类似地，视频后处理器31和视频解码器30可形成为共同装置(例如，同一集成电路或容纳在同一芯片或芯片封装内)。
在一些实例中，视频编码器20和视频解码器30根据例如以下的视频压缩标准操作：ISO/IEC MPEG-4 Visual和ITU－T H.264(也称为ISO/IEC MPEG－4AVC)，包含其可调式视频译码(SVC)扩展、多视图视频译码(MVC)扩展和基于MVC的三维视频(3DV)扩展。在一些情况下，遵守基于MVC的3DV的任何位流始终含有与MVC简档(例如，立体声高简档)一致的子位流。此外，存在持续努力以产生H.264/AVC的3DV译码扩展，即基于AVC的3DV。视频译码标准的其它实例包含ITU-T H.261、ISO/IEC MPEG-1 Visual、ITU-T H.262或ISO/IEC MPEG-2Visual、ITU-T H.263、ISO/IEC MPEG-4 Visual和ITU-T H.264、ISO/IEC Visual。在其它实例中，视频编码器20和视频解码器30可经配置以根据ITU-T H.265、HEVC标准操作。
在HEVC和其它视频译码标准中，视频序列通常包含一系列图片。图片也可被称为“帧”。图片可包含三个样本阵列，表示为SL、SCb和SCr。SL为明度样本的二维阵列(即，块)。SCb为Cb色讯样本的二维阵列。SCr为Cr色讯样本的二维阵列。色讯样本在本文中也可被称作“色度”样本。在其它情况下，图片可为单色的，且可仅包含明度样本阵列。
视频编码器20可产生一组译码树型单元(CTU)。CTU中的每一个可包括明度样本的译码树型块、色度样本的两个对应译码树型块，和用于译码所述译码树型块的样本的语法结构。在单色图片或具有三个单独色彩平面的图片中，CTU可包括单一译码树型块和用于译码所述译码树型块的样本的语法结构。译码树型块可为样本的N×N块。CTU也可被称作“树型块”或“最大译码单元”(LCU)。HEVC的CTU可广泛地类似于例如H.264/AVC的其它视频译码标准的宏块。然而，CTU未必限于特定大小，且可包含一或多个译码单元(CU)。图块可包含在光栅扫描中连续排序的整数数目个CTU。
本发明可使用术语“视频单元”或“视频块”来指代一或多个样本块，和用于译码一或多个样本块的样本的语法结构。视频单元的实例类型可包含HEVC中的CTU、CU、PU、变换单元(TU)，或其它视频译码标准中的宏块、宏块分割区等等。
视频编码器20可将CU的译码块分割成一或多个预测块。预测块可为在其上应用相同预测的样本的矩形(即，正方形或非正方形)块。CU的预测单元(PU)可包括图片的明度样本的预测块、色度样本的两个对应预测块和用于对预测块样本进行预测的语法结构。在单色图片或具有三个单独色彩平面的图片中，PU可包括单一预测块，和用以对预测块样本进行预测的语法结构。视频编码器20可针对CU的每一PU的明度预测块、Cb预测块和Cr预测块产生预测性明度块、预测性Cb块和预测性Cr块。
视频编码器20可使用帧内预测或帧间预测来产生PU的预测性块。如果视频编码器20使用帧内预测产生PU的预测性块，那么视频编码器20可基于与PU相关联的图片的经解码样本产生PU的预测性块。
在视频编码器20产生CU的一或多个PU的预测性明度块、预测性Cb块和预测性Cr块之后，视频编码器20可产生CU的明度残余块。CU的明度残余块中的每一样本指示CU的预测性明度块中的一个中的明度样本与CU的原始明度译码块中的对应样本之间的差异。另外，视频编码器20可产生CU的Cb残余块。CU的Cb残余块中的每一样本可指示CU的预测性Cb块中的一个中的Cb样本与CU的原始Cb译码块中的对应样本之间的差异。视频编码器20也可产生CU的Cr残余块。CU的Cr残余块中的每一样本可指示CU的预测性Cr块中的一个中的Cr样本与CU的原始Cr译码块中的对应样本之间的差异。
此外，视频编码器20可使用四分树分割将CU的明度残余块、Cb残余块和Cr残余块分解成一或多个明度变换块、Cb变换块和Cr变换块。变换块可为在其上应用相同变换的样本的矩形块。CU的变换单元(TU)可包括明度样本的变换块、色度样本的两个对应变换块和用于对变换块样本进行变换的语法结构。在单色图片或具有三个单独色彩平面的图片中，TU可包括单一变换块，和用于对变换块样本进行变换的语法结构。因此，CU的每一TU可与明度变换块、Cb变换块和Cr变换块相关联。与TU相关联的明度变换块可为CU的明度残余块的子块。Cb变换块可为CU的Cb残余块的子块。Cr变换块可为CU的Cr残差块的子块。
视频编码器20可将一或多个变换应用于TU的明度变换块以产生TU的明度系数块。系数块可为变换系数的二维阵列。变换系数可为纯量。视频编码器20可将一或多个变换应用于TU的Cb变换块以产生TU的Cb系数块。视频编码器20可将一或多个变换应用于TU的Cr变换块以产生TU的Cr系数块。
在产生系数块(例如，明度系数块、Cb系数块或Cr系数块)之后，视频编码器20可量化系数块。量化大体上指变换系数经量化而有可能减少用于表示变换系数的数据的量从而提供进一步压缩的过程。此外，视频编码器20可逆量化变换系数，并将逆变换应用于变换系数，以便重构建图片的CU的TU的变换块。视频编码器20可使用CU的TU的经重构建变换块和CU的PU的预测性块来重构建CU的译码块。通过重构建图片的每一CU的译码块，视频编码器20可重构建图片。视频编码器20可将经重构建图片存储于经解码图片缓冲器(DPB)中。视频编码器20可将DPB中的经重构建的图片用于帧间预测和帧内预测。
在视频编码器20量化系数块之后，视频编码器20可熵编码指示经量化变换系数的语法元素。举例来说，视频编码器20可对指示经量化变换系数的语法元素执行上下文自适应性二进制算术译码(CABAC)。视频编码器20可在位流中输出经熵编码的语法元素。
视频编码器20可输出包含形成经译码图片和相关联数据的表示的位序列的位流。位流可包括网络抽象层(NAL)单元的序列。所述NAL单元中的每一个包含NAL单元标头且囊封原始字节序列酬载(RBSP)。NAL单元标头可包含指示NAL单元类型代码的语法元素。由NAL单元的NAL单元标头指定的NAL单元类型代码指示NAL单元的类型。RBSP可为含有囊封在NAL单元内的整数数目个字节的语法结构。在一些情况下，RBSP包含零个位。
不同类型的NAL单元可囊封不同类型的RBSP。举例来说，第一类型的NAL单元可囊封图片参数集(PPS)的RBSP，第二类型的NAL单元可囊封经译码图块的RBSP，第三类型的NAL单元可囊封补充增强信息(SEI)的RBSP，等等。举例来说，NAL单元可囊封CRI SEI消息的RBSP。PPS为可含有适用于零或多于零个完整经译码图片的语法元素的语法结构。囊封视频译码数据的RBSP(与参数集和SEI消息的RBSP相反)的NAL单元可被称作视频编码层(VCL)NAL单元。囊封经译码图块的NAL单元在本文中可被称作经译码图块NAL单元。用于经译码图块的RBSP可包含图块标头和图块数据。
视频解码器30可接收位流。另外，视频解码器30可剖析位流以从所述位流解码语法元素。视频解码器30可至少部分基于从位流解码的语法元素而重构建视频数据的图片。重构建视频数据的过程可与由视频编码器20执行的过程大体互逆。举例来说，视频解码器30可使用PU的运动向量确定当前CU的PU的预测性块。视频解码器30可使用PU的一或多个运动向量来产生PU的预测性块。
另外，视频解码器30可逆量化与当前CU的TU相关联的系数块。视频解码器30可对系数块执行逆变换以重构建与当前CU的TU相关联的变换块。通过将当前CU的PU的预测性样本块的样本添加到当前CU的TU的变换块的对应样本，视频解码器30可重构建当前CU的译码块。通过重构建图片的每一CU的译码块，视频解码器30可重构建图片。视频解码器30可将经解码图片存储于经解码图片缓冲器中，以用于输出和/或用于解码其它图片。
预期下一代视频应用通过具有HDR(高动态范围)和WCG(宽色域)的表示经捕捉景物的视频数据来操作。所利用的动态范围和色域的参数为视频内容的两个独立属性，且其用于数字电视和多媒体服务目的的规格由若干国际标准定义。举例来说，ITU-R Rec.709定义HDTV(高清晰度电视)的参数，例如标准动态范围(SDR)和标准色域，且ITU-R Rec.2020指定UHDTV(超高清晰度电视)参数，例如HDR和WCG。也存在其它标准开发组织(SDO)的文献，其指定其它系统中的动态范围和色域属性，例如于SMPTE-231-2(美国电影电视工程师协会)中定义P3色域，且于STMPTE-2084中定义HDR的一些参数。在下文中提供对视频数据的动态范围和色域的简要描述。
动态范围通常经定义为视频信号的最小亮度与最大亮度之间的比率。动态范围也可就‘f光圈’来测量，其中一个f光圈对应于所述信号动态范围的倍增。在MPEG的定义中，HDR内容为以大于16个f光圈的亮度变化为特征的此类内容。在一些术语中，10个f光圈与16个f光圈之间的等级被视为中间动态范围，但在其它定义中可被视为HDR。在一些实例中，HDR视频内容可为相比于传统使用的具有标准动态范围的视频内容(例如，如由ITU-RRec.BT.709所指定的视频内容)具有较高动态范围的任何视频内容。同时，人类视觉系统(HVS)能够感知大得多的动态范围。然而，HVS包含用以窄化所谓的同时范围的调试机制。对由HDTV的SDR提供的动态范围、UHDTV的经预期HDR和HVS动态范围的可视化展示于图2中。
当前视频应用和服务由Rec.709调控且提供通常支持大约每平方米(m2)0.1到100烛光(cd)(通常被称作“尼特”)的亮度(或明度)范围的SDR，得到小于10个f光圈。预期下一代视频服务提供高达16个f光圈的动态范围。尽管详细规格当前正在开发中，但在SMPTE-2084和Rec.2020中已指定一些初始参数。
除HDR以外更真实的视频体验的另一方面为色彩维度，其常规地由色域定义。图3为展示SDR色域(基于BT.709红色、绿色和蓝色原色的三角形)以及UHDTV的较宽色域(基于BT.2020红色、绿色和蓝色原色的三角形)的概念图。图3也描绘所谓的频谱轨迹(由舌状区域定界)，从而表示天然色的界限。如由图3所说明，从BT.709色彩原色移动到BT.2020色彩原色旨在提供具有多约70％的色彩的UHDTV服务。D65指定给定规格(例如，BT.709和/或BT.2020规格)的白色。
色域规格的几个实例展示于下表1中。
表1.色域参数
如可参见表1，色域可由白点的x值和y值限定，且由所述原色(例如，红色(R)、绿色(G)和蓝色(B))的x值和y值限定。x值和y值从X、Y和Z坐标得出，其中X和Z表示色度，而Y表示所述色彩的亮度，如由CIE 1931色彩空间限定。CIE 1931色彩空间限定纯色(例如，就波长来说)之间的连接和人眼如何感知此类色彩。
通常在每分量(甚至浮点)极高精度下获取并存储HDR/WCG，具有4:4:4色度格式和极宽色彩空间(例如，CIE 1931XYZ色彩空间)。此表示以高精度为目标且在数学上(几乎)无损。然而，此格式特征可包含许多冗余且对于压缩目的来说并非最佳。具有基于HVS的假定的较低精度格式通常用于目前先进技术的视频应用。
用于压缩目的的典型视频数据格式转换由三个主要过程构成，如图4中所展示。图4的所述技术可由视频预处理器19执行。线性RGB数据110可为HDR/WCG视频数据且可以浮点表示存储。线性RGB数据110可使用用于动态范围压紧的非线性转移函数(TF)来压紧。举例来说，视频预处理器19可包含经配置以使用用于动态范围压紧的非线性转移函数的转移函数单元(TF)单元112。
TF单元112的输出可为码字的集合，其中每一码字表示色彩值(例如，照明等级)的范围。TF单元112应用非线性函数，使得信号的一些范围可扩展且一些部分可收缩；若干因素可确定经扩展且经压紧的范围-HVS和在不同明度等级下对色彩的感知为所述因素中的一些。举例来说，一些范围中的值在HVS(相对地)对那个范围内的损失更易察觉时可经扩展，且在HVC(相对地)对那些区域内的改变不易察觉时经压紧。在TF单元112的输出处，当样本仍存储于浮点中时，理想地，这种压紧将不导致所述值的精确度的任何损失，这是因为由TF所应用的逆操作(如果逆操作存在)会将输入恢复到TF单元112。然而，在最实用的系统中，浮点数目也以某一有限精度经存储且通过TF单元112的压紧将具有一定效果。在其它实例中，动态范围压紧可意味着线性RGB数据110的动态范围可为第一动态范围(例如，如图2中所说明的人类视觉范围)。所得码字的动态范围可为第二动态范围(例如，如在图2中所说明的HDR显示范围)。因此，码字相比线性RGB数据110捕捉较小动态范围，且因此，TF单元112执行动态范围压紧。
TF单元112在码字与输入的色彩值之间的映射并非相等地间隔开(例如，码字为非线性码字)的意义下执行非线性函数。非线性码字意味着输入的色彩值的改变并不显现为输出码字的线性比例改变，而是显现为码字的非线性改变。举例来说，如果色彩值表示低照明，那么输入的色彩值的较小改变会导致由TF单元112输出的码字的较小改变。然而，如果色彩值表示高照明，那么码字的较小改变将需要输入的色彩值的相对较大的改变。由每一码字表示的照明范围并非恒定的(例如，第一码字对于第一照明范围为相同的，且第二码字对于第二照明范围为相同的，且第一范围与第二范围不同)。
如更详细地描述，技术可缩放和偏移TF单元112接收的线性RGB数据110，和/或缩放和偏移TF单元112输出的码字，以较好地利用码字空间。TF单元112可使用任何数目个非线性转移函数(例如，如SMPTE-2084中所定义的PQ(感知量化器)TF)来压紧线性RGB数据110(或经缩放和偏移的RGB数据)。
在一些实例中，色彩转换单元114将经压紧的数据转换到较适合由视频编码器20压缩的较紧密或稳固的色彩空间(例如，经由色彩转换单元转换到YUV或Y'CbCr色彩空间)。如更详细地描述，在一些实例中，在色彩转换单元114执行色彩转换之前，所述技术可缩放和偏移由TF单元112通过TF应用输出的码字。色彩转换单元114可接收这些经缩放和偏移的码字。在一些实例中，一些经缩放和偏移的码字可大于或小于相应阈值；对于这些码字，所述技术可将相应设定分配给码字。
此数据随后使用浮点到整数表示转换(例如，经由量化单元116)经量化以产生发射到视频编码器20以待编码的视频数据(例如，HDR数据118)。在此实例中，HDR数据118为整数表示。HDR数据118现在可为更适合于由视频编码器20压缩的格式。应理解，作为实例，图4中所描绘的过程的次序经给定，且在其它应用中可改变。举例来说，色彩转换可先于TF过程。另外，视频预处理器19可对色彩分量施加更多处理(例如，空间次采样)。
因此，在图4中，由TF单元112藉所利用的非线性转移函数(例如，如SMPTE-2084中所定义的PQ TF)来压紧呈线性和浮点表示的输入RGB数据110的高动态范围，之后将其转换(例如，通过色彩转换单元114)到较适合压缩的目标色彩空间(例如，Y'CbCr)，且随后经量化(例如，量化单元116)以达成整数表示。作为实例，这些要素的次序经给定，且可在现实世界的应用中改变，例如，色彩转换可先于TF模块(例如TF单元112)。如此类空间次采样的额外处理可在TF单元112应用转移函数之前施加到色彩分量。
解码器侧处的逆转换经描绘于图5中。图5的所述技术可由视频后处理器31执行。举例来说，视频后处理器31从视频解码器30接收视频数据(例如，HDR数据120)，且逆量化单元122可逆量化所述数据，逆向色彩转换单元124执行逆向色彩转换，且逆向非线性转移函数单元126执行逆向非线性转移以产生线性RGB数据128。
逆向色彩转换单元124执行的逆向色彩转换过程可为色彩转换单元114执行的色彩转换过程的逆向过程。举例来说，逆向色彩转换单元124可将HDR数据从Y'CrCb格式转换回到RGB格式。逆向转移函数单元126可将逆向转移函数应用于数据以添加回由TF单元112压紧的动态范围，从而重建线性RGB数据128。
在本发明中所描述的实例技术中，在逆向转移函数单元126执行逆向转移函数之前，视频后处理器31可施加逆向后处理，且在逆向转移函数单元126执行逆向转移函数之后，视频后处理器可应用逆向预处理。举例来说，如上文所描述，在一些实例中，视频预处理器19可在TF单元112之前应用预处理(例如，缩放和偏移)且可在TF单元112之后应用后处理(例如，缩放和偏移)。为补偿预处理和后处理，视频后处理器31可在逆向TF单元126执行逆向转移函数之前应用逆向后处理且在逆向TF单元126执行逆向转移函数之后应用逆向预处理。应用预处理和后处理以及逆向后处理和逆向预处理两者可以是可选的。在一些实例中，视频预处理器19可应用预处理和后处理中的一个而非两者，且对于此类实例，视频后处理器31可应用由视频预处理器19所应用的处理的逆向处理。
进一步详细地描述图4中所说明的实例视频预处理器19，同时理解图5中所说明的实例视频后处理器31执行大体互逆过程。将转移函数应用于数据(例如，HDR/WCG RGB视频数据)以压紧其动态范围且使其可用有限数目个位表示数据。表示数据的这些有限数目个位被称为码字。这个函数通常为一维(1D)非线性函数，其反映终端用户显示器的电光转移函数(EOTF)的逆向转移函数，如Rec.709中的SDR所指定；或近似于对亮度改变的HVS感知，如HDR的SMPTE-2084中所指定的PQ TF。OETF的逆向过程(例如，如由视频后处理器31所执行)为EOTF(电光转移函数)，其将代码级映射回到明度。图6展示非线性TF的若干实例。这些转移函数也可单独地应用于每一R、G和B分量。
在本发明的上下文中，术语“信号值”或“色彩值”可用于描述对应于图像元素的特定色彩分量(例如，R、G、B或Y)的值的明度等级。信号值通常代表线性光阶(明度值)。术语“代码级”、“数字码值”或“码字”可指代图像信号值的数字表示。通常，此数字表示代表非线性信号值。EOTF表示提供到显示装置(例如，显示装置32)的非线性信号值与由显示装置产生的线性色彩值之间的关系。
例如线性RGB数据110的RGB数据可用作输入，这是因为其由图像捕捉传感器产生。然而，此色彩空间(即RGB色彩空间)在其分量中具有高冗余且对于紧密表示可能未必最佳。为达成更紧密和更坚固的表示，RGB分量可经转换到更适合压缩的更不相关的色彩空间(例如Y'CbCr)。此色彩空间将呈明度形式的亮度和不同较少相关分量中的色彩信息分离。
如上文所论述，由色彩转换单元114进行处理之后，仍以高位深度(例如浮点准确度)表示的可存在于目标色彩空间中的输入数据经转换到目标位深度。某些研究展示，10个位到12个位准确度结合PQ TF足以提供具有低于恰可辨差异的失真的16个f光圈的HDR数据。以10个位准确度表示的数据可进一步通过目前先进技术视频译码解决方案的大部分译码。此量化为有损译码的元素且可为引入到经转换数据的不准确度的来源。
补充增强信息(SEI)消息包含于视频位流中，通常携带对由解码器解码位流可能并非必需的信息。此信息可用于改善经解码输出的显示或处理；例如，此信息可由解码器侧实体用以改善内容的可视性。
某些应用标准(例如，DVB、ATSC)也有可能授权所述SEI消息在位流中的存在，使得可对符合所述应用标准的所有装置进行质量的改善(针对帧兼容的平立体3DTV视频格式的帧填充SEI消息的携带，其中为视频的每一帧携带SEI消息(参看ETSI—TS 101 547-2，数位视频广播(DVB)平立体3DTV(Digital Video Broadcasting(DVB)Plano-stereoscopic3DTV))；第2部分：帧兼容的平立体3DTV(Frame compatible plano-stereoscopic 3DTV))，3GPP TS 26.114 v13.0.0中对恢复点SEI消息的操纵，第三代合作伙伴计划；技术规范群组服务和系统方面(Technical Specification Group Services and System Aspects)；IP多媒体子系统(IMS)(IP Multimedia Subsystem(IMS))；多媒体电话(MultimediaTelephony)；媒体处置和交互(Media handling and interaction)(版本13)，DVB中对拉移式扫描矩形SEI消息的使用(参看ETSI-TS 101 154，数字视频广播(DVB)；用于基于MPEG-2输送流在广播应用中之视频和音频译码的使用之规范(Digital Video Broadcasting(DVB)；Specification for the use of Video and Audio Coding in BroadcastingApplications based on the MPEG-2 Transport Stream)))。
HEVC标准中所定义的色彩重映射信息SEI消息用于传送用以将一个色彩空间中的图片映射到另一色彩空间的信息。CRI SEI消息的语法包含三个部分：第一组三个1-D查找表(前LUT)，继之以3×3矩阵，继之以第二组三个1-D查找表(后LUT)。对于每一色彩分量(例如R、G、B或Y、Cb、Cr)，独立的LUT经定义用于前LUT和后LUT两者。
CRI SEI消息包含称作colour_remap_id的语法元素，其不同值可用于指示SEI消息的不同目的。图7展示CRI SEI消息所使用的色彩重映射信息/过程的典型结构。CRI SEI消息的实例语法表重现于下表2中。
表2—CRI SEI消息
有助于本文中的描述的CRI SEI消息的一些语意描述如下。完整语意可在HEVC标准的章节D.3.32(可在H.265：高效视频译码(HEVC)，http://www.itu.int/rec/T-REC-H.265-201504-I/en处获得)中获得。
色彩重映射信息SEI消息提供用以使得能够重映射输出图片的经重构建色彩样本的信息。色彩重映射信息可直接应用于经解码样本值，不管其是在明度域和色度域抑或RGB域中。在色彩重映射信息SEI消息中使用的色彩重映射模型由以下构成：应用于每一色彩分量的第一分段线性函数(由本文中的“前”语法元素集合指定)、应用于三个色彩分量的三乘三矩阵、和应用于每一色彩分量的第二分段线性函数(由本文中的“后”语法元素集合指定)。
colour_remap_id含有可用于识别色彩重映射信息的目的的识别数字。colour_remap_id的值应在0到232-2(包含端值)的范围内。
colour_remap_id的0到255和512到231-1的值可如应用所确定的来进行使用。保留colour_remap_id的256到511(包含端值)和231到232-2(包含端值)的值以供ITU-T|ISO/IEC未来使用。解码器应忽略含有在256到511(包含端值)的范围内或231到232-2(包含端值)的范围内的colour_remap_id的值的全部色彩重映射信息SEI消息，且位流不应含有所述值。
colour_remap_id可用以支持适合于不同显示情境的不同色彩重映射过程。举例来说，colour_remap_id的不同值可对应于由显示器支持的不同的经重映射色彩空间。
colour_remap_matrix_coefficients具有与条项E.3.1中针对matrix_coeffs语法元素所指定相同的语意，不同之处在于colour_remap_matrix_coefficients指定重映射的经重构建图片的色彩空间而非用于CLVS的色彩空间。当不存在时，推断colour_remap_matrix_coefficients的值等于matrix_coeffs的值。
出于解译色彩重映射信息SEI消息的目的，colour_remap_input_bit_depth指定相关联图片的明度和色度分量或RGB分量的位深度。当存在colour_remap_input_bit_depth的值不等于经译码明度和色度分量或经译码RGB分量的位深度的任何色彩重映射信息SEI消息时，SEI消息指经执行以将经译码视频转化成位深度等于colour_remap_input_bit_depth的经转换视频的转码操作的假设结果。
colour_remap_input_bit_depth的值将在8到16(包含端值)的范围内。保留colour_remap_input_bit_depth的0到7(包含端值)和17到255(包含端值)的值以供ITU-T|ISO/IEC未来使用。解码器应忽略含有在0到7(包含端值)的范围内或17到255(包含端值)的范围内的colour_remap_input_bit_depth的全部色彩重映射信息SEI消息，且位流不应含有所述值。
colour_remap_bit_depth指定由色彩重映射信息SEI消息所描述的色彩重映射函数的输出的位深度。
colour_remap_bit_depth的值应在8到16(包含端值)的范围内。保留colour_remap_bit_depth的0到7(包含端值)和在17到255(包含端值)的范围内的值以供ITU-T|ISO/IEC未来使用。解码器应忽略含有0到7(包含端值)或在17到255(包含端值)的范围内的colour_remap_bit_depth的值的全部色彩重映射SEI消息。
pre_lut_num_val_minus1[c]加1指定关于第c分量的分段线性重映射函数中的枢轴点的数目，其中c等于0指明度或G分量，c等于1指Cb或B分量，且c等于2指Cr或R分量。对于第c分量，当pre_lut_num_val_minus1[c]等于0时，输入值的默认端点为0与2colour _remap_input_bit_depth-1，且输出值的对应默认端点为0与2colour_remap_bit_depth-1。在符合本说明书的此版本的位流中，pre_lut_num_val_minus1[c]的值将在0到32(包含端值)的范围内。
pre_lut_coded_value[c][i]指定第c分量的第i枢轴点的值。用于表示pre_lut_coded_value[c][i]的位的数目为((colour_remap_input_bit_depth+7)>>3)<<3。
pre_lut_target_value[c][i]指定第c分量的第i枢轴点的值。用于表示pre_lut_target_value[c][i]的位的数目为((colour_remap_bit_depth+7)>>3)<<3。
post_lut_num_val_minus[]、post_lut_coded_value[][]和post_lut_target_value[][]的语意分别类似于pre_lut_num_val_minus[]、pre_lut_coded_value[][]和pre_lut_target_value[][]的语意；用于表示post_lut_coded_value[][]和post_lut_target_value[][]的位的数目等于colour_remap_bit_depth。
然而，上文所描述的色彩重映射信息SEI消息可存在一或多个缺点。作为一个实例，CRI SEI消息的过程(例如查找表)可在解量化、过滤/升频采样经解码样本之后或执行经解码样本的色彩空间转换之后加以应用。如HEVC中所定义，关于在处理链中的何处应用CRI SEI消息，解码器并未受到指示。此指令缺乏可导致不同视频解码器输出不同结果，此可能不合乎期望。
作为另一实例，CRI SEI消息的规范包含用以指示SEI消息的目的的语法元素colour_remap_id，然而，其语意未限定具有不同ID的并行或依序CRI SEI消息的处理，和这些SEI消息是否可经携带，和/或这些并行或依序的CRI SEI消息是否可加以应用。
作为另一实例，CRI SEI可应用于使解码器的输出适用于特定显示器。即，CRI SEI可用于对目标显示器的显示器调试。显示器可由其峰值亮度和色域(除其它特性外)限定。然而，CRI SEI并未指示目标显示器的一些这些特征中，特别是峰值亮度。CRI SEI指示输出的容器(即，像素值的意义)，但不指示彼输出的预期使用，且明确地说，关于输出是什么类别的显示。
根据本发明的一或多种技术，CRI SEI消息发信号可用于显示器调适。如同DVB和ATSC的应用标准可修改或进一步限定SEI消息的方面以便使得这些SEI消息更适用于其使用情况。本发明根据这些应用标准的视角描述使用CRI SEI消息发信号的技术，但本发明的技术可与其它标准一起使用。本发明的技术中的一或多个可独立地加以应用，或与其它应用组合来加以应用。
单一视频位流可由视频解码器用以针对不同显示器显现视频数据。所述显示器可被认为不同之处在于其可具有不同显示特性。实例显示特性包含(但不限于)峰值亮度(例如峰值明度)、色彩空间等。举例来说，第一显示器可具有300尼特的峰值亮度，而第二显示器可具有1000尼特的峰值亮度。
根据本发明的一或多种技术，视频译码单元(即，视频编码单元21和/或视频解码单元29)可将各自对应于不同目标显示器的一或多个色彩重映射消息(例如，CRI SEI消息)发信号。出于本发明的目的，目标显示器可不必为特定物理显示器，而是实际上可指代具有某些显示特性的理论显示器。作为一个实例，视频编码单元21可输出位流，所述位流包含各自对应于亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息。亮度峰值中的每一个可指示目标显示器的相应亮度峰值。在一些实例中，色彩重映射消息可为CRI SEI消息。举例来说，视频编码单元21可输出位流，所述位流包含对应于第一亮度峰值(例如，300尼特)的第一CRI SEI消息和对应于第二亮度峰值(例如，700尼特)的第二CRI SEI消息。视频解码单元29可基于待显示视频数据的显示器(例如，图1的显示装置32)的显示特性来选择色彩重映射消息中的消息。视频解码单元29可用以选择消息的一些显示特性包含色域、峰值亮度和所支持转移函数。因而，视频解码单元29可基于colour_remap_id语法元素、colour_remap_primaries语法元素和/或colour_remap_transfer_function语法元素选择CRI SEI消息。
以此方式，本发明的技术使得视频解码单元能够以一种针对待显示视频数据的显示器的显示特性而定制的方式来执行视频数据的色彩重映射。
CRI SEI消息可各自包含指示CRI SEI消息所对应的亮度峰值的语法元素。举例来说，视频译码单元可将具有以下值的CRI SEI消息的colour_remap_id语法元素发信号：所述值指示对应于所述CRI SEI消息的目标显示器的峰值明度的以尼特(cd/m2)为单位的值。作为一个实例，视频译码单元可将第一CRI SEI消息和第二CRI SEI消息发信号，所述第一CRI SEI消息具有指示第一CRI SEI消息对应于第一亮度峰值(例如，300尼特)的colour_remap_id语法元素，所述第二CRI SEI消息具有指示第二CRI SEI消息对应于第二亮度峰值(例如，700尼特)的colour_remap_id语法元素。
在一些实例中，亮度峰值的发信号可受到限制。作为一个实例，亮度峰值可受限而介于下限(例如，50尼特、100尼特等)与上限(例如，10,000尼特、15,000尼特等)之间。作为另一实例，亮度峰值可按50尼特、100尼特等的分级发信号。
在CRI SEI消息包含指示CRI SEI消息所对应的亮度峰值的语法元素的情况下，所述语法元素的值可根据以下公式表示：
其中Tml为对应于CRI SEI消息的亮度峰值(例如，目标显示器的最大明度)，colour_remap_id为包含于CRI SEI消息中的colour_remap_id语法元素，且ceil为升值舍位函数。
根据本发明的一或多种技术，视频译码单元可将色彩重映射消息(例如，CRI SEI消息)发信号，所述色彩重映射消息指示色彩重映射消息的信息是直接应用于视频数据的经解码样本抑或在某一处理之后应用于样本(例如，视频解码单元待将色彩重映射过程直接应用于视频数据的经解码样本抑或在某一处理之后应用于所述样本)。举例来说，colour_remap_id语法元素的语意可经改变，使得此语法元素也传送消息是直接应用于经解码样本抑或在某一处理之后(例如，在经解码样本从Y'CbCr域转换到RGB域之后)应用于样本的信息。作为一个实例，视频译码单元可将具有第一值(例如，0或偶数)的colour_remap_id元素发信号，所述第一值用以指示色彩重映射消息的信息待应用于Y'CbCr域中的视频数据的经解码样本。作为另一实例，视频译码单元可将具有第二值(例如，1或奇数)的colour_remap_id元素发信号，所述第二值用以指示色彩重映射消息的信息待在转换到RGB域中之后应用于视频数据的经解码样本。
另外或替代地，CRI SEI的输入的色彩空间可经强加为与输出的色彩空间相同，例如，如由CRI SEI消息的语法元素colour_remap、colour_remap_matrix_coefficients和colour_remap_transfer_function发信号。在这些方式中的任一个或两个中，解码器(例如视频解码单元29)可确定将在处理链中的何处应用CRI SEI。
如上文所论述，在一些实例中，CRI SEI消息的colour_remap_id语法元素可指示CRI SEI消息所对应的目标显示器的峰值亮度。也如上文所论述，在一些实例中，同一colour_remap_id语法元素可指示CRI SEI的信息是直接经应用于视频数据的经解码样本抑或在某一处理之后应用于所述样本。因而，在一些实例中，CRI SEI消息中的colour_remap_id语法元素可指示对应于CRI SEI消息的目标显示器的峰值亮度和视频解码器待将所选CRI SEI消息的信息直接应用于视频数据的经解码样本抑或在某一处理之后应用于所述样本两个。
根据本发明的一或多种技术，视频译码单元可确保用于特定目标显示器的色彩重映射消息在位流中的存留。发信号可授权如果关于特定目标显示器的CRI SEI存在于随机存取图片(RAP)处，例如帧内随机存取图片(IRAP)，那么其应也存在于之后的RAP中。因而，如果视频译码单元针对位流中的当前IRAP将色彩重映射集合发信号，所述色彩重映射集合包含各自对应于亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息，那么视频译码单元也将针对所述位流中之后续IRAP将相应色彩重映射消息集合发信号，所述相应色彩重映射消息集合包含各自对应于同一亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息。
在一些实例中，“目标显示器”可基于以下CRI SEI语法元素中的一或多个的值经确定：colour_remap_id、colour_remap_primaries和colour_remap_transfer_function。另外或替代地，目标显示器可通过其它语法元素的值来确定。以此方式，视频解码单元可依赖于用于位流的显示器调适的元数据。
根据本发明的一或多种技术，视频译码单元可限制色彩映射过程的输入/输出的位深。例如，视频译码单元可强加使colour_remap_input_bit_depth和colour_remap_bit_depth应被设定成“8”、“10”或“12”。在一个特定实例中，视频译码单元可强加使colour_remap_input_bit_depth应被设定成“10”。以此方式，色彩重映射过程的复杂度(例如，存储器和处理要求)可受到限制。
上文所描述的实例可以若干方法组合。举例来说，在DVB(TS 101 154)的上下文中，可建议使用PQ10的HEVC HDR UHDTV位流含有如规范ITU-T H.265/ISO/IEC 23008-2[35]第D.3.32项中所指定的色彩重映射信息SEI消息。如果存在色彩重映射信息SEI消息，那么以下约束条件中的一或多个适用：
●所述CRI SEI消息应至少以每一HEVC DVB_RAP传输。
●语法元素colour_remap_video_signal_info_present_flag应设定成“1”，使得colour_remap_full_range_flag、colour_remap_primaries、colour_remap_transfer_function、colour_remap_matrix_coefficients存在。
●colour_remap_primaries应设定成“1”或“9”。
●colour_remap_matrix_coefficients应设定成“0”、“1”、或“9”。
●colour_remap_transfer_function应设定成“1”、“14”或“16”。
●colour_remap_input_bit_depth和colour_remap_output_bit_depth应设定成“8”、“10”或“12”。
●语法元素colour_remap_full_range_flag、colour_remap_primaries、colour_remap_transfer_function、colour_remap_matrix_coefficients、colour_remap_input_bit_depth和colour_remap_output_bit_depth中的任一个的改变应仅发生在HEVC DVB_RAP处。
●colour_remap_id应设定成小于“256”。
●输入色彩系数应通过colour_remap_id语法元素值如下确定：
○当colour_remap_id为偶数时，输入在Y'CbCr中
○当colour_remap_id为奇数时，输入在GBR中
●重映射之后的目标最大明度(以cd/m2为单位)应通过colour_remap_id语法元素如下确定：
○Tml＝100*ceil((colour_remap_id+1)/2)
●当HEVC DVB_RAP图片中存在用于特定目标显示器的色彩重映射信息SEI消息时，至少针对每一后续HEVC DVB_RAP应存在用于同一目标显示器的色彩重映射信息SEI消息。“目标显示器”通过语法元素colour_remap_id、colour_remap_primaries和colour_remap_transfer_function的值确定。
图8为说明根据本发明的技术用于使用一或多个色彩重映射消息编码视频数据的图片的实例方法的流程图。出于解释的目的，图8的方法在下文经描述为由视频编码单元21和其组件(例如，图1中所说明)执行，但图8的方法可由其它视频编码单元执行。
视频编码单元21可接收视频数据的图片(802)。举例来说，视频编码器20可从视频预处理器19接收视频数据的当前图片的样本。视频编码单元21可在位流中编码视频数据的图片的样本值(804)。举例来说，视频编码器20可使用帧间和帧内编码模式的任何组合来编码视频数据的当前图片的样本/像素值。在一些实例中，视频编码器20可使用H.265/HEVC编码所述样本。
视频编码单元21可在位流中且针对视频数据的图片编码各自对应于亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息(806)。举例来说，视频编码单元21可编码各自对应于亮度峰值集合中的相应亮度峰值的一或多个CRI SEI消息。作为一个实例，视频编码单元21可输出包含对应于第一亮度峰值(例如，300尼特)的第一CRI SEI消息和对应于第二亮度峰值(例如，700尼特)的第二CRI SEI消息的位流。以此方式，视频编码单元21可使得视频解码单元能够以一种针对待显示视频数据的显示器的显示特性而定制的方式来执行视频数据的色彩重映射。
在一些情况下，对应于相应峰值亮度的色彩重映射消息可由视频编码单元21使用预定算法确定。视频编码单元21可输入视频、分析内容且使用预定算法确定待应用于所述内容的映射参数。此算法可能已基于显示特性和视频的特性之间的关系推导出。在其它情况下，视频编码单元21处的色彩重映射消息的产生/导出可由使用能够推导参数的另一装置提供到视频编码单元21的所述参数或由发生于视频编码单元21外部的过程进行辅助。举例来说，内容创建的产生后工作流程中的若干过程可能能够产生使得能够推导出色彩重映射参数的参数。提供到视频编码单元21的参数随后可供预定算法用以推导色彩重映射消息。在其它情况下，色彩重映射参数可完全在视频编码单元21外部推导出，且经提供到视频编码单元21，而视频编码单元21仅可按视频位流的语法将那些参数翻译成色彩重映射消息。这些为视频编码单元21可如何产生色彩重映射消息的一些实例；必须理解，可存在此产生的其它方法，且本文中所描述的所述技术也适用于那些方法。
在一些实例中，如果视频编码单元21针对位流中的当前IRAP编码包含各自对应于亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息的色彩重映射消息集合，那么视频编码单元21也将针对位流中的后续IRAP编码包含各自对应于同一亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息的相应色彩重映射消息集合。举例来说，如果视频编码单元21针对位流中的当前IRAP编码对应于第一亮度峰值(例如，300尼特)的第一CRISEI消息和对应于第二亮度峰值(例如，700尼特)的第二CRI SEI消息，那么视频编码单元21也将针对所述位流中的所有后续IRAP编码对应于第一亮度峰值(例如，300尼特)的相应第一CRI SEI消息和对应于第二亮度峰值(例如，700尼特)的相应第二CRI SEI消息。以此方式，视频解码单元可依赖于用于位流的显示器调适的元数据。
如上文所论述，在一些实例中，CRI SEI消息可包含指示对应亮度峰值的语法元素。举例来说，视频编码单元21可输出包含第一CRI SEI消息和第二CRI SEI消息的位流，所述第一CRI SEI消息具有值表示第一亮度峰值(例如，300尼特)的colour_remap_id语法元素，所述第二CRI SEI消息具有值表示第二亮度峰值(例如，700尼特)的colour_remap_id语法元素。在一些实例中，CRI SEI消息中的每一个可进一步包含指定输入视频数据的位深度(即，colour_remap_input_bit_depth)和/或输出视频数据的位深度(即，colour_remap_bit_depth)的一或多个语法元素。在一些实例中，指定输入视频数据的位深度的语法元素和指定输出视频数据的位深度的语法元素两者可经设定成特定值，例如“8”、“10”、或“12”。以此方式，色彩重映射过程的复杂度(例如，存储器和处理要求)可受到限制。
图9为说明根据本发明的技术用于使用一或多个色彩重映射消息解码视频数据的图片的实例方法的流程图。出于解释的目的，图9的方法在下文经描述为由视频解码单元29和其组件(例如，图1中所说明)执行，但图9的方法可由其它视频解码单元执行。
视频解码单元29可接收包含视频数据的当前图片的经编码表示的位流(902)且解码视频数据的当前图片的样本(904)。举例来说，视频解码器30可接收位流且使用帧间和帧内预测模式的任何组合解码所述样本。在一些实例中，视频解码器30可使用H.265/HEVC解码所述样本。
视频解码单元29可确定当前显示器的亮度峰值(906)。举例来说，视频解码单元29可确定显示装置32的亮度峰值。作为一个实例，例如在显示器32经集成到与视频解码单元29相同的装置中的情况下，显示器32的亮度峰值可为存储于存储器中可由视频解码单元29存取的变量。作为另一实例，视频解码单元29可从显示器32接收指示显示器32的亮度峰值的数据(例如，经由扩充显示器识别数据(EDID)数据信道)。
视频解码单元29可从位流且针对视频数据的当前图片获得各自对应于亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息(908)。举例来说，视频解码单元29可获得对应于第一亮度峰值(例如，300尼特)的第一CRI SEI消息、对应于第二亮度峰值(例如，500尼特)的第二CRI SEI消息和对应于第三亮度峰值(例如，1000尼特)的第三CRI SEI消息。如上文所论述，在一些实例中，CRI SEI消息可包含指示对应亮度峰值的colour_remap_id语法元素。
视频解码单元29可基于当前显示器的亮度峰值选择一或多个色彩重映射消息中的色彩重映射消息(910)。作为一个实例，视频解码单元29可选择对应于最紧密匹配当前显示器的亮度峰值的亮度峰值的色彩重映射消息。作为另一实例，视频解码单元29可选择具有小于或等于当前显示器的亮度峰值的最大对应亮度峰值的色彩重映射消息。在其它实例中，视频解码单元29可基于某一预定算法或查找表以显示器的峰值亮度为基础选择对应于特定峰值亮度的色彩重映射消息。
在一些实例中，除了和/或替代当前显示器的峰值亮度，视频解码单元29可基于当前显示器的色域和/或当前显示器所支持的转移函数选择多个色彩重映射消息中的色彩重映射消息。换句话说，视频解码单元29可基于colour_remap_id语法元素、colour_remap_primaries语法元素和/或colour_remap_transfer_function语法元素选择CRI SEI消息。举例来说，视频解码单元29可接收：具有指示100尼特的峰值亮度的colour_remap_id语法元素、指示BT.709色域的colour_remap_primaries语法元素和指示HLG转移函数的colour_remap_transfer_function语法元素的第一消息MSG1；和具有指示100尼特的峰值亮度的colour_remap_id语法元素、指示BT.2020色域的colour_remap_primaries语法元素和指示PQ转移函数的colour_remap_transfer_function语法元素的第二消息MSG2。在此实例中，如果当前显示器支持BT.2020/PQ，那么视频解码单元29可选择MSG2。然而，如果当前显示器支持BT.709/HLG，那么视频解码单元29可选择MSG1。
在一些实例中，视频解码单元29
视频解码单元29可基于所选色彩重映射消息对视频数据的当前图片的样本进行色彩重映射(912)。举例来说，如上文参考图5所描述，视频后处理器31可执行逆量化、逆向色彩转换且使用包含于所选色彩重映射消息中的信息(例如，基于包含于所选CRI SEI消息中的以下语法元素中的一或多个的值：colour_remap_full_range_flag、colour_remap_primaries、colour_remap_transfer_function和colour_remap_matrix_coefficients)应用逆向转移函数。
在一些实例中，视频后处理器31可在不同点处应用色彩重映射消息的信息。举例来说，视频后处理器31可将色彩重映射消息的信息直接应用于视频数据的经解码样本抑或在某一处理之后应用于所述样本。在一些实例中，色彩重映射消息可包含指示色彩重映射消息的信息将应用于何处的语法元素。举例来说，colour_remap_id语法元素的语意可改变，使得此语法元素也传送消息是直接经应用于经解码样本抑或在某一处理之后(例如，在经解码样本从Y'CbCr域转换到RGB域中之后)应用于样本的信息。作为一个实例，视频译码单元可将具有第一值(例如，0或偶数)的colour_remap_id元素发信号，所述第一值用以指示色彩重映射消息的信息待应用于Y'CbCr域中的视频数据的经解码样本。作为另一实例，视频译码单元可将具有第二值(例如，1或奇数)的colour_remap_id元素发信号，所述第二值用以指示色彩重映射消息的信息待在转换到RGB域中之后应用于视频数据的经解码样本。
如上文所论述，在一些实例中，CRI SEI消息的colour_remap_id语法元素可指示CRI SEI消息所对应的目标显示器的峰值亮度。还如上文所论述，在一些实例中，同一colour_remap_id语法元素可指示CRI SEI的信息是直接经应用于视频数据的经解码样本抑或在某一处理之后应用于所述样本。因而，在一些实例中，CRI SEI消息中的colour_remap_id语法元素可指示对应于CRI SEI消息的目标显示器的峰值亮度和视频解码器待将所选CRI SEI消息的信息直接应用于视频数据的经解码样本抑或在某一处理之后应用于所述样本两者。
视频解码单元29可针对当前显示器处的显示输出视频数据的当前图片的色彩重映射样本(914)。举例来说，视频解码单元29可使得显示装置32显示视频数据的当前图片的经色彩重映射样本。
在一些实例中，如果视频解码单元29针对位流中的当前IRAP解码包含各自对应于亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息的色彩重映射消息集合，那么视频解码单元29也将能够针对位流中之后续IRAP解码包含各自对应于同一亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息的相应色彩重映射消息集合。举例来说，如果视频解码单元29针对位流中的当前IRAP解码对应于第一峰值亮度(例如，300尼特)的第一CRI SEI消息和对应于第二峰值亮度(例如，700尼特)的第二CRI SEI消息，那么视频解码单元29也将针对所述位流中的所有后续IRAP解码对应于第一峰值亮度(例如，300尼特)的相应第一CRI SEI消息和对应于第二峰值亮度(例如，700尼特)的相应第二CRI SEI消息。以此方式，视频解码单元29可依赖于用于位流的显示器调适的元数据。
在一些实例中，CRI SEI消息中的每一个可进一步包含指定输入视频数据的位深度(即，colour_remap_input_bit_depth)和/或输出视频数据的位深度(即，colour_remap_bit_depth)的一或多个语法元素。在一些实例中，指定输入视频数据的位深度的语法元素和指定输出视频数据的位深度的语法元素两者可始终经设定成特定值，例如“8”、“10”或“12”。以此方式，色彩重映射过程的复杂度(例如，存储器和处理要求)可受到限制。
应认识到，取决于实例，本文中所描述的技术中的任一个的某些动作或事件可按不同顺序执行，可添加、合并或完全省略所述动作或事件(例如，并非全部所描述的动作或事件对于所述技术的实践都是必要的)。此外，在某些实例中，可例如通过多线程处理、中断处理或多个处理器同时而非依序执行动作或事件。
在一或多个实例中，所描述功能可以硬件、软件、固件或其任何组合来实施。如果以软件实施，那么所述功能可作为一或多个指令或代码而存储于计算机可读媒体上或经由计算机可读媒体进行发射，且由基于硬件的处理单元执行。计算机可读媒体可包含：计算机可读存储媒体，其对应于例如数据存储媒体的有形媒体；或通信媒体，其包含(例如)根据通信协议有助于计算机程序从一处转移到另一处的任何媒体。以此方式，计算机可读媒体一般可对应于(1)非暂时性的有形计算机可读存储媒体，或(2)例如信号或载波的通信媒体。数据存储媒体可为可由一或多个计算机或一或多个处理器存取以检索用于实施本发明中所描述的技术的指令、代码和/或数据结构的任何可用媒体。计算机程序产品可包含计算机可读媒体。
通过实例而非限制，这些计算机可读存储媒体可包括RAM、ROM、EEPROM、CD-ROM或其它光盘存储装置、磁盘存储装置或其它磁性存储装置、快闪存储器或可用于存储呈指令或数据结构形式的所要程序代码且可由计算机存取的任何其它媒体。并且，任何连接被恰当地称为计算机可读媒体。举例来说，如果使用同轴缆线、光缆、双绞线、数字用户线(DSL)或无线技术(例如红外线、无线电和微波)从网站、服务器或其它远程源发射指令，那么同轴缆线、光缆、双绞线、DSL或无线技术(例如红外线、无线电和微波)包含于媒体的定义中。然而，应理解，计算机可读存储媒体和数据存储媒体不包含连接、载波、信号或其它暂时性媒体，而实情为关于非暂时性有形存储媒体。如本文中所使用，磁盘和光盘包含压缩光盘(CD)、激光光盘、光学光盘、数字影音光盘(DVD)、软碟和蓝光光盘，其中磁盘通常以磁性方式再现数据，而光盘使用激光以光学方式再现数据。以上各者的组合也应包含于计算机可读媒体的范围内。
可由例如一或多个数字信号处理器(DSP)、通用微处理器、专用集成电路(ASIC)、现场可编程逻辑阵列(FPGA)或其它等效集成式或离散逻辑电路的一或多个处理器来执行指令。因此，如本文中所使用的术语“处理器”可指代前述结构或适合于实施本文中所描述的技术的任何其它结构中的任一个。另外，在一些方面中，本文中所描述的功能性可提供于经配置用于编码和解码的专用硬件和/或软件模块内，或并入组合式编解码器中。并且，所述技术可完全实施于一或多个电路或逻辑元件中。
本发明的技术可实施于包含无线手持机、集成电路(IC)或IC集合(例如，芯片集合)的各种装置或设备中。在本发明中描述各种组件、模块或单元以强调经配置以执行所揭示技术的装置的功能方面，但未必要求由不同硬件单元来实现。确切来说，如上文所描述，可将各种单元组合于编解码器硬件单元中，或通过互操作性硬件单元(包含如上文所描述的一或多个处理器)的集合结合合适的软件和/或固件来提供所述单元。
各种实例已予以描述。这些和其它实例在以下权利要求书的范围内。

Claims (33)

1.一种处理经解码视频数据的方法，所述方法包括：
由视频解码单元确定当前显示器的亮度峰值；
由所述视频解码单元且针对视频数据的图片获得各自对应于亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息；
由所述视频解码单元且基于所述当前显示器的所述亮度峰值选择所述一或多个色彩重映射消息中的色彩重映射消息；
由所述视频解码单元且基于所述所选色彩重映射消息对视频数据的所述图片的样本进行色彩重映射；以及
由所述视频解码单元且针对在所述当前显示器处的显示输出视频数据的所述图片的所述经色彩重映射样本。
2.根据权利要求1所述的方法，其中所述一或多个色彩重映射消息包括色彩重映射信息CRI补充增强信息SEI消息。
3.根据权利要求2所述的方法，其中所述CRI SEI消息中的每一相应CRI SEI消息包含指示所述相应亮度峰值的相应colour_remap_id语法元素，所述方法进一步包括：
针对所述CRI SEI消息中的每一相应CRI SEI消息基于包含于所述相应CRI SEI消息中的所述相应colour_remap_id语法元素的值确定所述相应亮度峰值。
4.根据权利要求3所述的方法，其进一步包括：
根据以下公式确定对应于所述一或多个CRI SEI消息中的特定CRI SEI消息的所述亮度峰值：
其中TmlN为对应于所述特定CRI SEI消息的所述亮度峰值，colour_remap_idN为包含于所述特定CRI SEI消息中的所述colour_remap_id语法元素，且ceil为升值舍位函数。
5.根据权利要求1所述的方法，其中所述相应亮度峰值具有介于最大明度100尼特与最大明度10000尼特之间的相应值。
6.根据权利要求1所述的方法，其中视频数据的所述图片包括经译码视频位流中的视频数据的当前帧内随机存取点IRAP图片，所述方法进一步包括：
由所述视频解码单元且针对所述经译码视频位流中的视频数据的每一后续IRAP图片获得包含一或多个色彩重映射消息的相应色彩重映射消息集合，所述一或多个色彩重映射消息各自对应于所述同一亮度峰值集合中的相应亮度峰值。
7.根据权利要求6所述的方法，其中所述一或多个色彩重映射消息包括色彩重映射信息CRI补充增强信息SEI消息，其中所述CRI SEI消息中的每一相应CRI SEI消息包含：
相应colour_remap_id语法元素，其指示对应于所述相应CRI SEI消息的所述相应亮度峰值；以及
相应colour_remap_input_bit_depth语法元素，其具有值10。
8.根据权利要求1所述的方法，其进一步包括：
基于所述所选色彩重映射消息确定所述消息的信息待应用于视频数据的所述图片的经解码样本抑或在所述经解码样本的处理后应用于所述经解码样本。
9.根据权利要求8所述的方法，其中所述一或多个色彩重映射消息包括色彩重映射信息CRI补充增强信息SEI消息，其中所述CRI SEI消息中的每一相应CRI SEI消息包含指示对应于所述相应CRI SEI消息的所述相应亮度峰值的相应colour_remap_id语法元素，所述方法进一步包括：
基于所述所选CRI SEI消息的所述相应colour_remap_id语法元素确定所述所选CRISEI消息的信息待应用于Y'CbCr域中的视频数据的所述图片的经解码样本抑或在所述经解码样本转换到所述RGB域之后应用于所述经解码样本。
10.根据权利要求1所述的方法，其中选择所述色彩重映射消息包括：
由所述视频解码单元，且基于所述当前显示器的所述亮度峰值以及所述当前显示器的色域和所述当前显示器所支持的转移函数中的一或两者，选择所述色彩重映射消息。
11.一种编码视频数据的方法，所述方法包括：
由视频编码器且在位流中编码视频数据的图片的样本值；
由所述视频编码器且在所述位流中编码用于视频数据的所述图片的一或多个色彩重映射消息，所述色彩重映射消息中的每一个对应于亮度峰值集合中的相应亮度峰值；以及
由所述视频编码器输出所述位流。
12.根据权利要求11所述的方法，其中编码所述一或多个色彩重映射消息包括编码一或多个色彩重映射信息CRI补充增强信息SEI消息。
13.根据权利要求12所述的方法，其中编码所述CRI SEI消息中的每一相应CRI SEI消息包括：
编码指示所述相应CRI SEI消息所对应的所述亮度峰值的相应colour_remap_id语法元素。
14.根据权利要求13所述的方法，其中编码所述一或多个CRI SEI消息中的特定CRISEI消息的colour_remap_id语法元素包括根据以下关系编码所述特定colour_remap_id语法元素的值：
其中TmlN为对应于所述特定CRI SEI消息的所述亮度峰值，colour_remap_idN为包含于所述特定CRI SEI消息中的所述colour_remap_id语法元素，且ceil为升值舍位函数。
15.根据权利要求11所述的方法，其中所述相应亮度峰值具有介于最大明度100尼特与最大明度10000尼特之间的相应值。
16.根据权利要求11所述的方法，其中视频数据的所述图片包括视频数据的当前帧内随机存取点IRAP图片，所述方法进一步包括：
由所述视频编码器且针对视频数据的每一后续IRAP图片编码包含一或多个色彩重映射消息的相应色彩重映射消息集合，所述一或多个色彩重映射消息各自对应于所述同一亮度峰值集合中的相应亮度峰值。
17.根据权利要求16所述的方法，其中所述一或多个色彩重映射消息包括色彩重映射信息CRI补充增强信息SEI消息，其中所述CRI SEI消息中的每一相应CRI SEI消息包含：
相应colour_remap_id语法元素，其指示对应于所述相应CRI SEI消息的所述相应亮度峰值；以及
相应colour_remap_input_bit_depth语法元素，其具有值10。
18.根据权利要求11所述的方法，其进一步包括：
在所述一或多个色彩重映射消息中的每一相应消息中编码对于视频解码单元待将所述相应消息的信息应用于视频数据的所述图片的经解码样本抑或在所述经解码样本的处理后将所述信息应用于所述经解码样本的指示。
19.根据权利要求18所述的方法，其中所述一或多个色彩重映射消息包括色彩重映射信息CRI补充增强信息SEI消息，其中所述CRI SEI消息中的每一相应CRI SEI消息包含指示对应于所述相应CRI SEI消息的所述亮度峰值的相应colour_remap_id语法元素，且其中编码对于特定CEI SEI消息的所述指示包括：
编码所述特定CRI SEI消息的具有值的所述colour_remap_id语法元素，所述值指示对应于所述相应CRI SEI消息的所述亮度峰值和所述视频解码单元待将所述所选CRI SEI消息的所述信息应用于所述Y'CbCr域中的视频数据的所述图片的经解码样本抑或在所述经解码样本转换到所述RGB域中之后应用于所述经解码样本两者。
20.一种用于处理经解码视频数据的装置，所述装置包括：
存储器，其经配置以存储所述视频数据；以及
视频解码单元，其经配置以：
确定当前显示器的亮度峰值；
针对所述视频数据的图片获得各自对应于亮度峰值集合中的相应亮度峰值的一或多个色彩重映射消息；
基于所述当前显示器的所述亮度峰值选择所述一或多个色彩重映射消息中的色彩重映射消息；
基于所述所选色彩重映射消息对视频数据的所述图片的样本进行色彩重映射；
以及
针对在所述当前显示器处的显示，输出视频数据的所述图片的所述经色彩重映射样本。
21.根据权利要求20所述的装置，其中所述一或多个色彩重映射消息包括色彩重映射信息CRI补充增强信息SEI消息。
22.根据权利要求21所述的装置，其中所述CRI SEI消息中的每一相应CRI SEI消息包含指示所述相应亮度峰值的相应colour_remap_id语法元素，所述视频解码单元进一步经配置以：
针对所述CRI SEI消息中的每一相应CRI SEI消息，基于包含于所述相应CRI SEI消息中的所述相应colour_remap_id语法元素的值确定所述相应亮度峰值。
23.根据权利要求20所述的装置，其中所述相应亮度峰值具有介于最大明度100尼特与最大明度10000尼特之间的相应值。
24.根据权利要求20所述的装置，其中视频数据的所述图片包括经译码视频位流中的视频数据的当前帧内随机存取点IRAP图片，所述视频解码单元进一步经配置以：
针对所述经译码视频位流中的视频数据的每一后续IRAP图片，获得包含一或多个色彩重映射消息的相应色彩重映射消息集合，所述一或多个色彩重映射消息各自对应于所述同一亮度峰值集合中的相应亮度峰值。
25.根据权利要求24所述的装置，其中所述一或多个色彩重映射消息包括色彩重映射信息CRI补充增强信息SEI消息，其中所述CRI SEI消息中的每一相应CRI SEI消息包含：
相应colour_remap_id语法元素，其指示对应于所述相应CRI SEI消息的所述相应亮度峰值；以及
相应colour_remap_input_bit_depth语法元素，其具有值10。
26.根据权利要求20所述的装置，其中所述装置包括以下中的至少一个：
集成电路；
微处理器；或
无线通信装置，其包含所述视频解码单元。
27.一种用于编码视频数据的装置，所述装置包括：
存储器，其经配置以存储视频数据；以及
视频编码单元，其经配置以：
在位流中编码视频数据的图片的样本值；
在所述位流中编码用于视频数据的所述图片的一或多个色彩重映射消息，所述色彩重映射消息中的每一个对应于亮度峰值集合中的相应亮度峰值；以及
输出所述位流。
28.根据权利要求27所述的装置，其中，为编码所述一或多个色彩重映射消息，所述视频编码单元经配置以编码一或多个色彩重映射信息CRI补充增强信息SEI消息。
29.根据权利要求28所述的装置，其中，为编码所述CRI SEI消息中的每一相应CRI SEI消息，所述视频编码单元经配置以：
编码指示所述相应CRI SEI消息所对应的所述亮度峰值的相应colour_remap_id语法元素。
30.根据权利要求27所述的装置，其中所述相应亮度峰值具有介于最大明度100尼特与最大明度10000尼特之间的相应值。
31.根据权利要求27所述的装置，其中视频数据的所述图片包括视频数据的当前帧内随机存取点IRAP图片，所述视频编码单元进一步经配置以：
针对视频数据的每一后续IRAP图片，编码包含一或多个色彩重映射消息的相应色彩重映射消息集合，所述一或多个色彩重映射消息各自对应于所述同一亮度峰值集合中的相应亮度峰值。
32.根据权利要求31所述的装置，其中所述一或多个色彩重映射消息包括色彩重映射信息CRI补充增强信息SEI消息，其中，为编码所述CRI SEI消息中的每一相应CRI SEI消息，所述视频编码单元经配置以编码：
相应colour_remap_id语法元素，其指示对应于所述相应CRI SEI消息的所述相应亮度峰值；以及
相应colour_remap_input_bit_depth语法元素，其具有值10。
33.根据权利要求27所述的装置，其中所述装置包括以下中的至少一个：
集成电路；
微处理器；或
无线通信装置，其包含所述视频编码单元。
CN201780045985.1A 2016-08-09 2017-08-08 用于显示器调适的色彩重映射信息sei消息发信号 Active CN109479150B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201662372692P 2016-08-09 2016-08-09
US62/372,692 2016-08-09
US15/670,832 2017-08-07
US15/670,832 US10368099B2 (en) 2016-08-09 2017-08-07 Color remapping information SEI message signaling for display adaptation
PCT/US2017/045947 WO2018031572A1 (en) 2016-08-09 2017-08-08 Color remapping information sei message signaling for display adaptation

Publications (2)

Publication Number Publication Date
CN109479150A true CN109479150A (zh) 2019-03-15
CN109479150B CN109479150B (zh) 2021-04-23

Family

ID=61160461

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780045985.1A Active CN109479150B (zh) 2016-08-09 2017-08-08 用于显示器调适的色彩重映射信息sei消息发信号

Country Status (10)

Country Link
US (1) US10368099B2 (zh)
EP (1) EP3497934B1 (zh)
JP (1) JP6982060B2 (zh)
KR (1) KR102094650B1 (zh)
CN (1) CN109479150B (zh)
AU (1) AU2017308831B2 (zh)
BR (1) BR112019001880A2 (zh)
ES (1) ES2907000T3 (zh)
TW (1) TWI713354B (zh)
WO (1) WO2018031572A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10368099B2 (en) * 2016-08-09 2019-07-30 Qualcomm Incorporated Color remapping information SEI message signaling for display adaptation
WO2018054269A1 (en) * 2016-09-22 2018-03-29 Mediatek Inc. Method and apparatus for video coding using decoder side intra prediction derivation
US10728559B2 (en) * 2017-07-07 2020-07-28 Qualcomm Incorporated Precision of computation and signaling of dynamic range adjustment and color remapping information
IL280223B2 (en) * 2018-07-20 2024-02-01 Interdigital Vc Holdings Inc Method and apparatus for processing a dynamic medium range video signal in the SL-HDR2 format
TWI734501B (zh) * 2019-05-31 2021-07-21 聯發科技股份有限公司 視訊編解碼的方法和裝置
CN114175647A (zh) * 2019-07-30 2022-03-11 杜比实验室特许公司 电光传递函数转换和信号合法化

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130162666A1 (en) * 2010-09-13 2013-06-27 Dolby Laboratories Licensing Corporation Data Transmission Using Out-Of-Gamut Color Coordinates
CN103493487A (zh) * 2011-04-28 2014-01-01 皇家飞利浦有限公司 用于hdr图像编码和解码的装置和方法
US20150103919A1 (en) * 2013-10-15 2015-04-16 Sony Corporation Decoding device and decoding method, and coding device and coding method
CN104919802A (zh) * 2013-01-07 2015-09-16 高通股份有限公司 在视频译码中的非嵌套式补充增强信息消息
CN105009580A (zh) * 2013-02-21 2015-10-28 杜比实验室特许公司 高动态范围视频的显示管理
CN105308971A (zh) * 2013-06-03 2016-02-03 高通股份有限公司 假设的参考解码器模型和跨层随机存取跳过图片的一致性

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3010231A1 (en) 2014-10-17 2016-04-20 Thomson Licensing Method for color mapping a video signal based on color mapping data and method of encoding a video signal and color mapping data and corresponding devices
US10547844B2 (en) * 2014-12-04 2020-01-28 Lg Electronics Inc. Broadcasting signal transmission and reception method and device
EP3051486A1 (en) * 2015-01-30 2016-08-03 Thomson Licensing Method and apparatus for encoding and decoding high dynamic range (HDR) videos
US10368099B2 (en) * 2016-08-09 2019-07-30 Qualcomm Incorporated Color remapping information SEI message signaling for display adaptation

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130162666A1 (en) * 2010-09-13 2013-06-27 Dolby Laboratories Licensing Corporation Data Transmission Using Out-Of-Gamut Color Coordinates
CN103493487A (zh) * 2011-04-28 2014-01-01 皇家飞利浦有限公司 用于hdr图像编码和解码的装置和方法
CN104919802A (zh) * 2013-01-07 2015-09-16 高通股份有限公司 在视频译码中的非嵌套式补充增强信息消息
CN105009580A (zh) * 2013-02-21 2015-10-28 杜比实验室特许公司 高动态范围视频的显示管理
CN105308971A (zh) * 2013-06-03 2016-02-03 高通股份有限公司 假设的参考解码器模型和跨层随机存取跳过图片的一致性
US20150103919A1 (en) * 2013-10-15 2015-04-16 Sony Corporation Decoding device and decoding method, and coding device and coding method

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
RAJAN JOSHI: "High Efficiency Video Coding (HEVC) Screen Content Coding: Draft 6", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC)》 *
SALLY HATTORI: "HLS: SEI message for Knee Function Information", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC)》 *

Also Published As

Publication number Publication date
AU2017308831A1 (en) 2019-01-17
JP6982060B2 (ja) 2021-12-17
US20180048913A1 (en) 2018-02-15
EP3497934A1 (en) 2019-06-19
TW201806390A (zh) 2018-02-16
JP2019527996A (ja) 2019-10-03
WO2018031572A1 (en) 2018-02-15
ES2907000T3 (es) 2022-04-21
EP3497934B1 (en) 2022-01-26
KR102094650B1 (ko) 2020-03-30
CN109479150B (zh) 2021-04-23
US10368099B2 (en) 2019-07-30
AU2017308831B2 (en) 2020-10-29
KR20190031495A (ko) 2019-03-26
BR112019001880A2 (pt) 2019-05-07
TWI713354B (zh) 2020-12-11

Similar Documents

Publication Publication Date Title
CN107690803B (zh) 用于高动态范围及广色域视频译码的自适应常量照度方法
AU2016320902B2 (en) Improved colour remapping information supplemental enhancement information message processing
CN108028944B (zh) 用于处理经解码视频数据的方法、系统和存储介质
CN109643531A (zh) 具有反馈信道的色域自适应
CN107439013A (zh) 用于高动态范围和宽色域视频译码的动态范围调整
CN108028936A (zh) 视频译码中成分的范围调整的固定点实施
CN109479150A (zh) 用于显示器调适的色彩重映射信息sei消息发信号
CN109155848A (zh) 用于高动态范围及宽色域视频译码的环路内样本处理
TW201729594A (zh) 用於高動態範圍及廣色域視訊寫碼之補充增強資訊（ｓｅｉ）訊息
CN107736024A (zh) 到高动态范围和/或广色域视频数据的固定转移函数的内容自适应应用
TW201931853A (zh) 具有聯合像素/變換為基礎之量化之視頻寫碼之量化參數控制
JP6768516B2 (ja) 色域スケーラビリティのための３ｄ色予測のために参照レイヤを信号伝達すること
CN109691111A (zh) 在补充增强信息消息中传信色彩重新映射信息的目标显示参数
CN109644277A (zh) 用于回路内样本处理的视频译码工具

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant