CN108293141A - 用于高动态范围视频数据的发送装置、发送方法、接收装置以及接收方法 - Google Patents

用于高动态范围视频数据的发送装置、发送方法、接收装置以及接收方法 Download PDF

Info

Publication number
CN108293141A
CN108293141A CN201680069606.8A CN201680069606A CN108293141A CN 108293141 A CN108293141 A CN 108293141A CN 201680069606 A CN201680069606 A CN 201680069606A CN 108293141 A CN108293141 A CN 108293141A
Authority
CN
China
Prior art keywords
hdr
video
sdr
video data
dynamic range
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201680069606.8A
Other languages
English (en)
Other versions
CN108293141B (zh
Inventor
塚越郁夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN108293141A publication Critical patent/CN108293141A/zh
Application granted granted Critical
Publication of CN108293141B publication Critical patent/CN108293141B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/845—Structuring of content, e.g. decomposing content into time segments
    • H04N21/8451—Structuring of content, e.g. decomposing content into time segments using Advanced Video Coding [AVC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/103—Selection of coding mode or of prediction mode
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/186—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a colour or a chrominance component
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/30—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using hierarchical techniques, e.g. scalability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/46—Embedding additional information in the video signal during the compression process
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/90—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using coding techniques not provided for in groups H04N19/10-H04N19/85, e.g. fractals
    • H04N19/98—Adaptive-dynamic-range coding [ADRC]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234309—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by transcoding between formats or standards, e.g. from MPEG-2 to MPEG-4 or from Quicktime to Realvideo
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • H04N21/234327—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by decomposing into layers, e.g. base layer and one or more enhancement layers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • H04N21/2353—Processing of additional data, e.g. scrambling of additional data or processing content descriptors specifically adapted to content descriptors, e.g. coding, compressing or processing of metadata
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236—Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/2365—Multiplexing of several video streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/654—Transmission by server directed to the client
    • H04N21/6547—Transmission by server directed to the client comprising parameters, e.g. for client setup

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Picture Signal Circuits (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Abstract

一种发送装置，包括被配置为对高动态范围(HDR)视频数据执行HDR光电转换以获取HDR传输视频数据的电路。编码器接收至少HDR传输视频数据的输入并且输出包含编码视频数据的视频流，并且发送器发送视频流。该电路进一步被配置为将HDR转换特性元信息插入视频流中，HDR转换特性元信息指示HDR转换特性。

Description

用于高动态范围视频数据的发送装置、发送方法、接收装置以 及接收方法
相关申请的交叉引证
本申请要求于2015年12月28日提交的日本在先专利申请JP2015-257206的权益，其全部内容通过引用结合于此。
技术领域
本技术涉及一种发送装置、发送方法、接收装置、以及接收方法，并且更具体地，涉及例如发送通过对高动态范围视频数据执行高动态范围光电转换获得的传输视频数据的发送装置。
背景技术
过去，已考虑发送通过对高动态范围视频数据执行高动态范围光电转换获得的传输视频数据。例如，NPL1描述了，对于传统接收器的接收，包含了与传统光电转换特性(γ特性)相兼容的区的高动态范围光电转换特性(新γ特性)。
[引用列表][非专利文献][NPL 1]
Tim Borer，“高动态范围电视的非线性光电转换功能(Non-Linear Opto-Electrical Transfer Functions for High Dynamic Range Television)”，研究&发展白皮书WHP 283,2014年7月
发明内容
[技术问题]
例如，在使用包含与传统光电转换特性兼容的区的高动态范围光电转换特性获得的上述传输视频数据的情况下，传统接收器需要判断光电转换特性与传统光电转换特性相同并且高动态范围兼容的接收器可以判断光电转换特性是高动态范围光电转换特性。
已作出本技术，用于使高动态范围兼容的接收器能对从高动态范围光电转换得到的传输视频数据适当地执行电光转换处理。
[问题的解决方案]
根据本技术的实施方式，提供一种发送装置，包括：
光电转换器，被配置为对高动态范围视频数据执行高动态范围光电转换以获得高动态范围传输视频数据；
编码器，被配置为接收至少所述高动态范围传输视频数据的输入并且输出包含编码视频数据的视频流；
发送器，被配置为发送视频流；以及
信息插入件，被配置为将高动态范围转换特性元信息插入到视频流的补充增强信息(SEI)网络抽象层(NAL)单元的区中，高动态范围转换特性元信息指示高动态范围光电转换的特性或与高动态范围光电转换的特性相对应的高动态范围电光转换的特性。
在本技术的实施方式中，光电转换器对高动态范围视频数据执行高动态范围光电转换以获得高动态范围传输视频数据。例如，高动态范围光电转换的特性包括各种特性，诸如，STD-B67(混合对数γ)和ST2084(PQ曲线)。编码部分接收至少高动态范围传输视频数据的输入并且输出包含编码视频数据的视频流。发送器发送视频流。信息插入件将高动态范围转换特性元信息插入到视频流的SEI NAL单元的区中。高动态范围转换特性元信息指示高动态范围光电转换的特性或与高动态范围光电转换的特性相对应的高动态范围电光转换的特性。
如上所述，在本技术的实施方式中，将高动态范围转换特性元信息插入视频流的SEI NAL单元的区中。因此，高动态范围兼容的接收器可以基于高动态范围转换特性元信息对高动态范围传输视频数据合适地执行电光转换处理。
应当注意，在本技术的实施方式中，例如，编码器可以进一步被配置为接收通过对标准动态范围视频数据执行标准动态范围光电转换获得的标准动态范围传输视频数据以及高动态范围传输视频数据的输入，并且输出包含标准动态范围传输视频数据的编码视频数据的基本视频流和包含高动态范围传输视频数据与标准动态范围传输视频数据之间的差异的编码视频数据的扩展视频流。信息插入件可以进一步被配置为将高动态范围转换特性元信息插入到扩展视频流的SEI NAL单元的区中，并且将标准动态范围转换特性元信息插入基本视频流的序列参数集集SPS)NAL单元的区中，标准动态范围转换特性元信息指示标准动态范围光电转换的特性。本文中使用的术语“扩展”还指“增强”。
在这种情况下，高动态范围兼容的接收器可以从基本视频流和扩展视频流获得高动态范围传输视频数据。然后，高动态范围兼容的接收器可以基于插入到扩展视频流的SEINAL单元的区中的高动态范围转换特性元信息对高动态范围传输视频数据适当地执行电光转换处理以获得用于显示的视频数据。此外，标准动态范围兼容的接收器可以从基本视频流获得标准动态范围传输视频数据。然后，标准动态范围兼容的接收器可以基于插入到基本视频流的SEI NAL单元的区中的标准动态范围转换特性元信息对标准动态范围传输视频数据适当地执行电光转换处理以获得用于显示的视频数据。
此外，在本技术的实施方式中，例如，信息插入件可以进一步被配置为将用于显示控制的元信息连同高动态范围转换特性元信息一起插入到SEI NAL单元的区中。在这种情况下，例如，用于显示控制的元信息可以包括峰值亮度信息。此外，例如，用于显示控制的元信息进一步可以包括指示允许进行亮度转换的区的区信息。在这种情况下，高动态范围兼容的接收器可以使用用于显示控制的元信息适当地控制显示亮度。
此外，根据本技术的另一实施方式，提供一种接收装置，包括：
接收器，被配置为接收视频流；
解码器，被配置为解码视频流以获得高动态范围传输视频数据，视频流包含其中插入有高动态范围转换特性元信息的SEI NAL单元的区，高动态范围转换特性元信息指示高动态范围光电转换的特性或者与高动态范围光电转换的特性相对应的高动态范围电光转换的特性；以及
电光转换器，被配置为基于指示高动态范围转换特性的元信息对高动态范围传输视频数据执行高动态范围电光转换以获得视频数据显示。
在本技术的实施方式中，接收器接收视频流。解码部分解码视频流以获得高动态范围传输视频数据。将高动态范围转换特性元信息插入到视频流的SEI NAL单元的区中。高动态范围转换特性元信息指示高动态范围光电转换的特性或与高动态范围光电转换的特性相对应的高动态范围电光转换的特性。电光转换器基于高动态范围转换特性元信息对高动态范围传输视频数据执行高动态范围电光转换以获得用于显示的视频数据。
例如，接收器可以进一步被配置为接收包含标准动态范围传输视频数据的编码视频数据的基本(本文中，术语“基本(basic)”和“基础(base)”可互换使用)视频流和包含高动态范围传输视频数据与标准动态范围传输视频数据之间的差异的编码视频数据的扩展视频流。解码器可以进一步被配置为解码基本视频流以获得标准动态范围传输视频数据，并且使用标准动态范围传输视频数据解码扩展视频流以获得高动态范围传输视频数据。可以将高动态范围转换特性元信息插入扩展视频流的SEI NAL单元的区中。
如上所述，在本技术的实施方式中，基于插入到视频流的SEI NAL单元的区中的高动态范围转换特性元信息，对高动态范围传输视频数据执行电光转换以获得用于显示的视频数据。因此，可以对高动态范围传输视频数据适当地执行电光转换以获得有利的高动态范围视频数据作为用于显示的视频数据。
应当注意，在本技术的实施方式中，例如，可以将峰值亮度信息进一步插入到SEINAL单元的区中。接收装置可以进一步包括被配置为基于峰值亮度信息调整视频数据的显示亮度用于显示的亮度调整器。基于峰值亮度信息对显示亮度进行的这种调整使得能够根据监控器的显示亮度能力适当调整显示亮度。
此外，在这种情况下，例如，可以将指示允许进行亮度转换的区的区信息进一步插入到SEI NAL单元的区中，并且亮度调整器可以进一步被配置为基于指示允许进行亮度转换的区的区信息调整允许进行亮度转换的该区中的显示亮度。允许进行亮度转换的该区中的显示亮度的这种调整使得能够有利地再现具有制造商预期的亮度的视频。
[本发明的有益效果]
根据本技术的实施方式，可通过高动态范围兼容的接收器对从高动态范围光电转换得到的传输视频数据适当地执行电光转换处理。应注意，本文中描述的效果仅是示例性的并且不是限制性的而且可以提供另外的效果。
附图说明
图1是示出根据实施方式的发送接收系统的配置实例的框图。
图2是示出构成发送接收系统的发送装置的配置实例的框图。
图3是示出生成SDR视频数据V1和HDR视频数据V2的视频数据生成器的配置实例的框图。
图4是示出SDR和HDR的光电转换特性的实例的示图。
图5是示出动态范围SEI消息的结构实例的示图。
图6是示出在动态范围SEI消息的结构实例中的主要信息的内容的示图。
图7是示出传输流TS的配置实例的示图。
图8是示出与SDR兼容(与HDR不兼容)的构成发送接收系统的传统接收装置的配置实例的框图。
图9是示出构成发送接收系统的HDR兼容的接收装置的配置实例的框图。
图10是示出HDR显示映射器中的显示亮度的调整的实例的示图。
具体实施方式
在下文中，将描述实施方式。应注意，将按以下列顺序对其进行描述。
1.实施方式
2.变形例
1.实施方式
发送接收系统的配置实例
图1示出了根据实施方式的发送接收系统10的配置实例。发送接收系统10由发送装置100和接收装置200、300组成。接收装置200是与传统标准动态范围(SDR)兼容但与高动态范围(HDR)不兼容的接收装置。接收装置300是HDR兼容的接收装置。
发送装置100通过广播波或网络分组发送MPEG-2传输流(在下文中，仅称为“传输流TS”)。传输流TS是容器流(复用流)。传输流TS包括视频流，诸如，HEVC和AVC视频流，在这个实施方式中，传输流包括两个视频流，即，基本视频流和扩展视频流。
基本视频流包括通过对SDR传输视频数据进行预测编码而获得的编码视频数据。通过对SDR视频数据执行SDR光电转换获得SDR传输视频数据。扩展视频流包括通过使用SDR传输视频数据对HDR传输视频数据进行预测编码获得的编码视频数据。通过对HDR视频数据执行HDR光电转换获得HDR传输视频数据。
将HDR转换特性元信息插入视频流中，在这个实施方式中，插入扩展视频流的SEINAL单元的区中。HDR转换特性元信息指示HDR电光转换的特性(例如，STD-B67、ST2084)或与HDR光电转换的特性对应的HDR电光转换的特性。然后，将SDR转换特性元信息插入视频流中，在这个实施方式中，插入基本视频流的SPS NAL单元的区中。SDR转换特性元信息指示SDR光电转换的特性(BT.709:γ特性)。
此外，将用于显示控制的元信息插入视频流中，在这个实施方式中，将其与HDR转换特性元信息一起插入扩展视频流的SEI NAL单元的区中。用于显示控制的元信息包括峰值亮度信息以及指示允许进行亮度转换的区的区信息等。
接收装置200接收通过广播波或网络分组从发送装置100发送的传输流TS。如上所述，传输流TS包括视频流，在这个实施方式中，传输流包括两个视频流，即，基本视频流和扩展视频流。然后，将SDR转换特性元信息插入所接收的视频流中，在这个实施方式中，插入基本视频流的SPS NAL单元的区中。
接收装置200从传输流TS提取所需的视频流(这里，为基本视频流)并且解码所提取的流以获得SDR传输视频数据。接收装置200基于SDR转换特性元信息对SDR传输视频数据适当地执行电光转换处理以获得用于显示的SDR视频数据(即，视频数据)。此外，接收装置200基于峰值亮度(100cd/m2)、监视器的最大显示亮度等对用于显示的视频数据执行显示映射(即，显示亮度的调整)。
接收装置300接收通过广播波或网络分组从发送装置100发送的传输流TS。如上所述，传输流TS包括视频流，在这个实施方式中，传输流包括两个视频流，即，基本视频流和扩展视频流。然后，将HDR转换特性元信息插入所接收的视频流中，在这个实施方式中，插入扩展视频流的SEI NAL单元的区中。
接收装置300从传输流TS提取所需视频流(这里，为基本视频流和扩展视频流两者)并且解码所提取的流以获得HDR传输视频数据。接收装置300基于HDR转换特性元信息对HDR传输视频数据适当地执行电光转换处理以获得用于显示的HDR视频数据(即，视频数据)。此外，接收装置300基于与HDR转换特性元信息一起插入的用于显示控制的元信息、监视器的最大显示亮度等对用于显示的视频数据执行显示映射(即，显示亮度的调整)。
发送装置的配置实例
图2示出了发送装置100的配置实例。发送装置100处理SDR视频数据V1和HDR视频数据V2。假设传统SDR图像的白色峰值亮度为100％，则HDR视频数据V2的亮度范围为从0到100％*N，例如，0到1000％以上。
图3示出了生成SDR视频数据V1和HDR视频数据V2的视频数据生成器150的配置实例。视频数据生成器150包括HDR照相机151和动态范围转换器153。HDR照相机151使对象成像并且输出HDR视频数据V2。动态范围转换器153将从HDR照相机151输出的HDR视频数据V2从HDR转换为SDR。然后，动态范围转换器153输出SDR视频数据V1。
参考回图2，发送装置100包括控制器101、SDR光电转换器102、HDR光电转换器103、视频编码器104、系统编码器105、以及发送器106。控制器101包括中央处理单元(CPU)并且根据控制程序控制发送装置100的相应部分的操作。
SDR光电转换器102将SDR光电转换特性(BT.709：γ特性)应用于SDR视频数据V1以获得SDR视频数据(即SDR传输视频数据V1’)用以发送。HDR光电转换器103将HDR光电转换特性(例如，STD-B67、ST2084)应用于HDR视频数据V2以获得HDR视频数据(即，HDR传输视频数据V2’)用以发送。图4是示出SDR和HDR的光电转换特性的实例。在该图中，横轴指示输入亮度等级并且纵轴指示发送代码值。虚线“a”指示SDR光电转换特性(BT.709：γ特性)。实线“b”指示STD-B67(HLG)特性，其是HDR光电转换的特性。点划线“c”指示ST2084(PQ曲线)特性，其是HDR光电转换的特性。
STD-B67(HLG)特性包括与SDR光电转换特性(BT.709：γ特性)兼容的区。即，两种特性的曲线匹配直至输入亮度等级达到两种特性的兼容限值。当输入亮度等级是兼容限值时，则发送代码值是兼容性等级SP。ST2084(PQ曲线)是适于人眼的量化级的曲线。在HDR光电转换特性中，当输入亮度等级是峰值亮度PL时，发送代码值是峰值等级MP。
HDR显示参考阈值CL指示其亮度要与显示在接收器中的监视器(CE监视器)上的亮度匹配的区与取决于CE监视器的区之间的边界。当输入亮度等级是兼容限值CL时，发送代码值是阈值等级CP。应当注意，在SDR光电转换特性中，当输入亮度等级是SDR特性表示限值亮度SL时，发送代码值是峰值等级MP。在此，SL是100cd/m2。
参考回图2，视频编码器104包括编码部分104b和编码部分104e。编码部分104b对SDR传输视频数据V1’执行预测编码诸如H.264/AVC和H.265/HEVC以获得编码视频数据。在这种情况下，编码部分104b预测SDR传输视频数据V1’。此外，编码部分104b通过利用在后续阶段的流格式器(未示出)生成视频流，即包含编码视频数据的基本视频流STb。
这时，编码部分104b将指示SDR光电转换的特性的SDR转换特性元信息插入到基本视频流STb的一个层中。即，编码部分104b将指示SDR光电转换特性(BT.709：γ特性)的SDR转换特性元信息“传输特性1”插入接入单元(AU)的SPS NAL单元的视频可用性信息(VUI)的区中。
编码部分104e对HDR传输视频数据V2’执行预测编码诸如H.264/AVC和H.265/HEVC以获得编码视频数据。在这种情况下，为了减少预测残差，编码部分104e为每个编码块选择性地预测HDR传输视频数据V2’或SDR传输视频数据V1’。此外，编码部分104e通过利用在后续阶段的流格式器(未示出)生成视频流，即包含编码视频数据的扩展视频流STe。
这时，编码部分104e将指示HDR光电转换(例如，STD-B67、ST2084)的特性或对应于HDR光电转换的特性的HDR电光转换的特性的HDR转换特性元信息以及用于显示控制的元信息插入扩展视频流Ste的一个层中。即，例如，编码部分104e将新定义的动态范围SEI消息(包含HDR转换特性元信息“transfer_characteristics2”和用于显示控制的元信息)插入接入单元(AU)的一部分“Suffix_SEI”中。
图5示出动态范围SEI消息的结构实例(语法)。图6示出结构实例中的主要信息的内容(语义)。八位字段“transfer_characteristics2”指示HDR光电转换的特性或对应于HDR光电转换的特性的HDR电光转换的特性。如果存在元信息“transfer_characteristics2”，则HDR兼容的接收装置300优先参考元信息“transfer_characteristics2”而不是在显示时被插入VUI的区中的元信息“传输特性1”。
八位字段“number_of_bits”指示编码像素的位数。十六位字段“minimum_brightness_value”指示最低等级的亮度(cd/m2)。十六位字段“peak_level”指示最高等级的相对值(％)。十六位字段“peak_level_brightness”指示最大等级的亮度(cd/m2)并且对应于图4中的峰值亮度PL。“peak_level_brightness”的“peak_level”使得能够在确定例如要执行的图像的柱状图之后选择用于形成适于显示能力的显示图像的图像处理方法。
十六位字段“compliant_threshold_level”指示显示等级映射中的阈值(％)。十六位字段“compliant_threshold_level_value”指示亮度(cd/m2)，即显示等级映射中的阈值，并且对应于图4中的HDR显示参考阈值CL。
参考回图2，系统编码器105生成包含通过视频编码器104生成的基本视频流STb和扩展视频流STe的传输流TS。发送器106通过广播波或网络分组将传输流TS发送至接收装置200、300。
将简要描述图2所示的发送装置100的操作。将SDR视频数据V1提供至SDR光电转换器102。SDR光电转换器102将SDR光电转换特性(BT.709：γ特性)应用于SDR视频数据V1以获得SDR传输视频数据V1’(即，SDR视频数据)用以发送。
此外，将HDR视频数据V2提供至HDR光电转换器103。HDR光电转换器103将HDR光电转换特性(例如，STD-B67、ST2084)应用于HDR视频数据V2以获得HDR传输视频数据V2’(即，HDR视频数据)用以发送。
将通过SDR光电转换器102获得的SDR传输视频数据V1’提供至编码器104的编码部分104b和编码部分104e。编码部分104b对SDR传输视频数据V1’执行预测编码诸如H.264/AVC和H.265/HEVC以获得编码视频数据。生成包含该编码视频数据的基本视频流STb(即，视频流)。
这时，编码部分104b将指示SDR光电转换特性的SDR转换特性元信息插入基本视频流STb的一个层中。在这种情况下，将包含SDR光电转换特性(BT.709：γ特性)的SDR转换特性元信息“传输特性1”插入接入单元(AU)的SPS NAL单元的VUI的区中。
将通过HDR光电转换器103获得的HDR传输视频数据V2’提供至编码器104的编码部分104e。使用相对于HDR传输视频数据V2’的SDR传输视频数据V1’，编码部分104e执行预测编码(诸如，H.264/AVC和H.265/HEVC)以获得编码视频数据。生成包含该编码视频数据的扩展视频流STe(即，视频流)。
这时，编码部分104e将指示HDR光电转换特性(例如，STD-B67、ST2084)或对应于HDR光电转换特性的HDR电光转换特性的HDR转换特性元信息和用于显示控制的元信息插入扩展视频流Ste的一个层中。在这种情况下，例如，将包含HDR转换特性元信息“transfer_characteristics2”和用于显示控制的元信息的动态范围SEI消息插入接入单元(AU)的部分“Suffix_SEI”中。
将通过视频编码器104的编码部分104b生成的基本视频流STb提供至系统编码器105。进一步的，将通过视频编码器104的编码部分104e生成的扩展视频流STe提供至系统编码器105。
系统编码器105PES分组化、发送分组化、并且复用基本视频流STb和扩展视频流STe中的每一个以获得作为容器流(复用流)的传输流TS。通过广播波或网络分组由发送器106将传输流TS发送至接收装置200、300。
传输流TS的配置
图7示出了传输流TS的配置示例。传输流TS包括两个视频流，即，基本视频流STb和扩展视频流STe。在该配置实例中，存在每个视频流的PES分组“视频PES”。
例如，基本视频流STb的数据包标识符(PID)是PID1。基本视频流STb包括通过对SDR传输视频数据V1’进行预测编码获得的编码视频数据。在基本视频流的每个接入单元中，存在NAL单元，诸如，STb、AUD、VPS、SPS、PPS、PSEI、SLICE、SSEI、以及EOS。
例如，在每个NAL单元的报头中的“Nuh_layer_id”是“0”，根据编码视频数据“0”指示其是基本视频流STb。此外，将指示SDR光电转换的特性(BT.709：γ特性)的SDR转换特性元信息“传输特性1”插入NAL单元(即SPS)的VUI的区中。
此外，例如，扩展视频流STe的数据包标识符(PID)是PID2。扩展视频流STe包括通过使用SDR传输视频数据V1’对HDR传输视频数据V2’进行预测编码获得的编码视频数据。在该扩展视频流STe的每个接入单元中，存在NAL单元，诸如，AUD、PPS、PSEI、SLICE、SSEI、以及EOS。
例如，在每个NAL单元的报头中的“Nuh_layer_id”是“1”，根据编码视频数据“1”指示其是扩展视频流STe。将其中描述了HDR转换特性元信息“传输特性2”和用于显示控制的元信息的动态范围SEI消息插入接入单元。
此外，传输流TS包括节目映射表(PMT)作为节目特定信息(PSI)。PSI是描述传输流的每个基本流所属的节目的信息。
PMT中存在描述与整个节目有关的信息的节目循环。此外，PMT中存在包含与每个基本流有关的信息的基本流循环。在该配置实例中，存在与两个视频流(即，基本视频流STb和扩展视频流STe)对应的两个视频基本流循环(视频ES循环)。
在与基本视频流STb相对应的视频基本流循环中提供有关流类型(ST0)、数据包标识符(PID1)等的信息。此外，在与扩展视频流STe相对应的视频基本流循环中提供有关流类型(ST1)、数据包标识符(PID2)等的信息。
SDR兼容的接收装置的配置实例
图8示出了接收装置200的配置实例。如上所述，接收装置200是SDR兼容的接收装置。接收装置200包括控制器201、接收器202、系统解码器203、视频解码器204、SDR电光转换器205、SDR显示映射器206、以及CE监视器207。控制器201包括中央处理单元(CPU)并且根据控制程序控制接收装置200的相应部分的操作。
接收器202通过广播波或网络分组接收从发送装置100发送的传输流TS。传输流TS包括两个视频流，即，基本视频流STb和扩展视频流STe。
基本视频流STb包括通过对SDR传输视频数据进行预测编码获得的编码视频数据。通过对SDR视频数据执行SDR光电转换获得SDR传输视频数据。扩展视频流STe包括通过使用SDR传输视频数据对HDR传输视频数据进行预测编码获得的编码视频数据。通过对HDR视频数据执行HDR光电转换获得HDR传输视频数据。
将指示SDR光电转换特性的SDR转换特性元信息插入基本视频流的SPS NAL单元的区中。此外，将指示HDR光电转换的特性或与HDR光电转换的特性相对应的HDR电光转换特性的HDR转换特性元信息插入扩展视频流的SEI NAL单元的区中。
系统解码器203从传输流TS中提取基本视频流STb。视频解码器204包括解码部分204b。解码部分204b解码通过系统解码器203提取的基本视频流STb以获得SDR传输视频数据V1’。在这种情况下，解码部分204b执行与图2的视频编码器104的编码部分104b的处理相反的处理。
此外，解码部分204b提取被插入基本视频流STb的每个接入单元中的参数组和SEI消息，并且将参数组和SEI消息发送至控制器201。控制器201基于SPS的视频可用信息(VUI)中的SDR转换特性元信息“传输特性1”识别SDR光电转换特性(BT.709：伽马特性)。控制器201在SDR电光转换器205设置SDR电光转换特性，即与SDR光电转换特性相反的特性。
SDR电光转换器205将SDR电光转换特性应用于从视频解码器204输出的传输视频数据V1’以获得SDR视频数据V1。SDR显示映射器206调整通过SDR电光转换器205获得的SDR视频数据V1的显示亮度。即，如果与CE监视器207的最大亮度显示能力相对应的亮度高于SDR特性表示极限亮度SL(参见图4)，SDR显示映射器206执行显示映射(即，亮度转换)使得最大显示亮度等级等于与CE监视器207的最大亮度显示能力对应的亮度等级。
将简要描述图8所示的接收装置200的操作。接收器202通过广播波或网络分组接收从发送装置100发送的传输流TS。将传送流TS供应至系统解码器203。系统解码器203从传输流TS中提取基本视频流STb。
将通过系统解码器203提取的基本视频流STb提供至视频解码器204的解码部分204b。解码部分204b解码基本视频流STb以获得SDR传输视频数据V1’。此外，解码部分204b提取被插入到基本视频流STb的参数组和SEI消息，并且将参数组和SEI消息发送至控制器201。
控制器201基于SPS的视频可用性信息(VUI)中的SDR转换特性元信息“传输特性1”识别SDR光电转换特性(BT.709：伽马特性)。然后，在控制器201的控制下，将SDR电光转换特性(即与SDR光电转换特性相反的特性)插入SDR电光转换器205。
将通过视频解码器204(解码部分204b)获得的SDR传输视频数据V1’提供至SDR电光转换器205。SDR电光转换器205将SDR电光转换特性应用于SDR传输视频数据V1’以获得用于显示的SDR视频数据V1(即视频数据)。
将通过SDR电光转换器205获得的SDR视频数据V1提供至SDR显示映射器206。SDR显示映射器206调整SDR视频数据V1的显示亮度。即，如果与CE监视器207的最大亮度显示能力相对应的亮度高于SDR特性表示极限亮度SL，SDR显示映射器206执行显示映射(即，亮度转换)使得最大显示亮度等级等于与CE监视器207的最大亮度显示能力对应的亮度等级。
将SDR显示映射器206的输出视频数据提供至CE监视器207。使用其显示亮度已调整的SDR视频数据在CE监视器207上显示SDR图像。
HDR兼容的接收装置的配置实例
图9示出了接收装置300的配置实例。如上所述，接收装置300是HDR兼容的接收装置。接收装置300包括控制器301、接收器302、系统解码器303、视频解码器304、HDR电光转换器305、HDR显示映射器306、以及CE监视器307。控制器301包括中央处理单元(CPU)并且根据控制程序控制接收装置300的相应部分的操作。
接收器302通过广播波或网络分组接收从发送装置100发送的传输流TS。传输流TS包括两个视频流，即，基本视频流STb和扩展视频流STe。
基本视频流STb包括通过对SDR传输视频数据进行预测编码获得的编码视频数据。通过对SDR视频数据执行SDR光电转换获得SDR传输视频数据。扩展视频流STe包括通过使用SDR传输视频数据对HDR传输视频数据进行预测编码获得的编码视频数据。通过对HDR视频数据执行HDR光电转换获得HDR传输视频数据。
将指示SDR光电转换的特性的SDR转换特性元信息插入基本视频流的SPS NAL单元的区中。此外，将指示HDR光电转换的特性或与HDR光电转换的特性相对应的HDR电光转换的特性的HDR转换特性元信息插入扩展视频流的SEI NAL单元的区中。
系统解码器303从传输流TS中提取基本视频流STb和扩展视频流STe。视频解码器304包括解码部分304b、304e。解码部分304b解码通过系统解码器303提取的基本视频流STb以获得SDR传输视频数据V1’。在这种情况下，解码部分304b执行与图2的视频编码器104的编码部分104b的处理相反的处理。此外，解码部分304b提取被插入到基本视频流STb的每个接入单元中的参数组和SEI消息，并且将参数组和SEI消息发送至控制器301。
使用SDR传输视频数据V1’，解码部分304e解码通过系统解码器303提取的扩展视频流STe以获得HDR传输视频数据V2’。在这种情况下，解码部分304e执行与图2的视频编码器104的编码部分104e的处理相反的处理。此外，解码部分304e提取被插入扩展视频流STe的每个接入单元中的参数组和SEI消息，并且将参数组和SEI消息发送至控制器301。
控制器301基于动态范围SEI消息中的HDR转换特性元信息“传输特性2”识别HDR光电转换特性(例如，STD-B67、ST2084)。控制器301在HDR电光转换器305中设置HDR电光转换特性，即与HDR光电转换特性相反的特性。HDR电光转换器305将HDR电光转换特性应用于从视频解码器304(解码部分304e)输出的HDR传输视频数据V2’以获得用于显示的HDR视频数据V2(即视频数据)。
HDR显示映射器306在控制器301的控制下基于动态范围SEI消息中用于显示控制的元信息调整通过HDR电光转换器305获得的HDR视频数据V2的显示亮度。将描述显示亮度的这种调整。
图10示出显示亮度的调整的实例。在本附图中，与图4的纵轴相对应的横轴指示传输代码值。纵轴指示与图4的横轴相对应的输出亮度等级(显示亮度等级)。在本附图中，实线“a”是指示HDR电光转换特性的EOTF曲线。当传输代码值是峰值水平MP时，输出亮度等级是PL。此外，当传输代码值是阈值水平CP时，输出亮度等级是CL。
在此，如果与CE监视器307的最大亮度显示能力相对应的亮度高于发射器中的主监视器假定的最大亮度PL，则通过HDR显示映射器306中的处理(提高亮度的处理)为CE监视器307的最大显示亮度等级DP1的范围赋予与值(即大于阈值水平CP的传输代码值)相对应的输出亮度等级CE。在本附图中，双点划线“b”示出在这种情况下的亮度转换的实例。
另一方面，如果与CE监视器307的最大亮度显示能力相对应的亮度低于发射器中的主监视器假定的最大亮度PL，则通过HDR显示映射器306中的处理(减小亮度的处理)为CE监视器307的最大显示亮度等级DP2的范围赋予与值(即大于阈值水平CP的传输代码值)相对应的输出亮度等级。在本附图中，点划线“c”示出在这种情况下的亮度转换的实例。
将简要描述图9所示的接收装置300的操作。接收器302接收通过广播波或网络分组从发送装置100发送的传输流TS。将传送流TS供应至系统解码器303。系统解码器303从传输流TS中提取基本视频流STb和扩展视频流STe。
将通过系统解码器303提取的基本视频流STb提供至视频解码器304的解码部分304b。解码部分304b解码基本视频流STb以获得SDR传输视频数据V1’。此外，解码部分304b提取被插入到基本视频流STb的参数组和SEI消息，并且将参数组和SEI消息发送至控制器301。
此外，将通过系统解码器303提取的扩展视频流STe提供至视频解码器304的解码部分304e。使用SDR传输视频数据V1’，解码部分304e解码扩展视频流STe以获得HDR传输视频数据V2’。此外，解码部分304e提取被插入到扩展视频流STe的每个接入单元中的参数组和SEI消息，并且将参数组和SEI消息发送至控制器301。
控制器301基于动态范围SEI消息中的HDR转换特性元信息“传输特性2”识别HDR光电转换特性(例如，STD-B67、ST2084)。然后，将HDR电光转换特性(即与HDR光电转换特性相反的特性)插入HDR电光转换器305中。
将通过视频解码器304(解码部分304e)获得的HDR传输视频数据V2’提供至HDR电光转换器305。HDR电光转换器305将HDR电光转换特性应用于HDR传输视频数据V2’以获得用于显示的HDR视频数据V2(即视频数据)。
将通过HDR电光转换器305获得的HDR视频数据V2提供至HDR显示映射器306。HDR显示映射器306基于在动态范围SEI消息中的用于显示控制的元信息调整HDR视频数据V2的显示亮度(参见图10)。
将HDR显示映射器306的输出视频数据提供至CE监视器307。使用其显示亮度已调整的HDR视频数据在CE监视器307上显HDR图像。
如上所述，在图1所示的传输和接收系统10中，将HDR转换特性元信息插入到扩展视频流STe的SEI NAL单元的区中并且发送。因此，HDR兼容的接收器可以基于HDR转换特性元信息对通过处理基本视频流STb和扩展视频流STe获得的HDR传输视频数据V2’适当执行电光转换处理。
此外，在图1所示的传输和接收系统10中，将SDR转换特性元信息插入到基本视频流STb的SPS NAL单元的区中并且发送。因此，SDR兼容的接收器可以基于SDR转换特性元信息对通过处理基本视频流STb获得的SDR传输视频数据V1’适当执行电光转换处理。
此外，在图1所示的传输和接收系统10中，将用于显示控制的元信息与HDR转换特性元信息一起插入到扩展视频流STe的SEI NAL单元的区中并且发送。因此，HDR兼容的接收器可以使用用于显示控制的元信息适当控制显示亮度。在这种情况下，用于显示控制的元信息包括指示允许进行亮度转换的区的区信息。例如，仅在允许进行亮度转换的区中执行根据CE监视器的显示亮度能力的亮度转换。因此，变得可以有利地再现具有制造商预期的亮度的视频。
2.变形例
应当注意，在上述实施方式中，已示出将指示HDR光电转换的特性的元信息插入扩展视频流STe的SEI NAL单元的区中的实例。然而，还可想到将指示HDR光电转换的特性的元信息插入到基本视频流STb的SEI NAL单元的区中。同样在这种情况下，HDR兼容的接收器可以基于指示HDR光电转换的特性的元信息对HDR传输视频数据V2’适当执行电光转换处理。
例如，本技术还可适用于通过将HDR光电转换的特性(即，混合对数伽马(例如，STD-B67))应用于HDR视频数据作为与SDR向下兼容的视频流获得的根据HDR传输视频数据V2’发送视频流的情况。此外在这种情况下，将指示HDR光电转换的特性的元信息插入视频流的SEI NAL单元的区中。因此，HDR兼容的接收器可以基于指示HDR光电转换的特性的元信息对HDR传输视频数据V2’适当执行电光转换处理。
此外，在上述实施方式中，已示出在接收装置200、300中通过电光转换器205、305执行电光转换处理并且通过显示映射器206、306执行根据CE监视器207、307的最大亮度显示能力对显示亮度的调整的实例。然而，通过反映电光转换特性(EOTF)的亮度转换特性，可仅通过电光转换器205、305同时执行电光转换处理和显示亮度调整。
此外，在上述实施方式中，已经示出了容器为传输流(MPEG-2TS)的实例。然而，本技术不限于TS用作传输的情况。同样在使用其他数据包诸如ISO基媒体文件格式(ISOBMFF)和MPEG媒体传输(MMT)的情况下，可通过相同的方法实现视频层。
应该注意的是，本技术也可以采用下面的配置。
(1)一种发送装置，包括：
光电转换器，被配置为对高动态范围视频数据执行高动态范围光电转换以获得高动态范围传输视频数据；
编码器，被配置为接收至少高动态范围传输视频数据的输入并且输出包含编码视频数据的视频流；
发送器，被配置为发送视频流；以及
信息插入件，被配置为将高动态范围转换特性元信息插入到视频流的补充增强信息(SEI)网络抽象层(NAL)单元的区中，高动态范围转换特性元信息指示高动态范围光电转换的特性或与高动态范围光电转换的特性对应的高动态范围电光转换的特性。
(2).根据(1)所述的发送装置，其中
编码器进一步被配置为
接收通过对标准动态范围视频数据执行标准动态范围光电转换获得的标准动态范围传输视频数据以及高动态范围传输视频数据的输入，并且输出
基本视频流，包含通过对标准动态范围传输视频数据进行预测编码获得的编码视频数据，以及扩展视频流，包含通过使用标准动态范围传输视频数据对高动态范围传输视频数据进行预测编码获得的编码视频数据，并且
信息插入件进一步被配置为
将高动态范围转换特性元信息插入到扩展视频流的SEI NAL单元的区中，并且
将标准动态范围转换特性元信息插入到基本视频流的序列参数集(SPS)NAL单元的区中，标准动态范围转换特性元信息表示标准动态范围光电转换的特性。
(3)根据(1)或(2)所述的发送装置，其中
信息插入件进一步被配置为将用于显示控制的元信息连同高动态范围转换特性元信息一起插入到SEI NAL单元的区中。
(4)根据(3)所述的发送装置，其中
用于显示控制的元信息包括峰值亮度信息。
(5)根据(4)所述的发送装置，其中
用于显示控制的元信息进一步包括指示允许进行亮度转换的区的区信息。
(6)一种发送方法，包括：
对高动态范围视频数据执行高动态范围光电转换以获得高动态范围传输视频数据；
输入至少高动态范围传输视频数据并且输出包含编码视频数据的视频流；
通过发送器发送视频流；以及
将高动态范围转换特性元信息插入到视频流的SEI NAL单元的区中，高动态范围转换特性元信息指示高动态范围光电转换的特性或与高动态范围光电转换的特性相对应的高动态范围电光转换的特性。
(7)一种接收装置，包括：
接收器，被配置为接收视频流；
解码器，被配置为解码视频流以获得高动态范围传输视频数据，视频流包含插入有高动态范围转换特性元信息的SEI NAL单元的区，高动态范围转换特性元信息指示高动态范围光电转换的特性或与高动态范围光电转换的特性相对应的高动态范围电光转换的特性；以及
电光转换器，被配置为基于高动态范围转换特性元信息对高动态范围传输视频数据执行高动态范围电光转换以获得用于显示的视频数据。
(8)根据(7)所述的接收装置，其中，
接收器进一步被配置为接收
包含通过对标准动态范围传输视频数据进行预测编码获得的编码视频数据的基本视频流，以及
包含通过使用标准动态范围传输视频数据对高动态范围传输视频数据进行预测编码获得的编码视频数据的扩展视频流，
解码器进一步被配置为
解码基本视频流以获得标准动态范围传输视频数据，并且
使用标准动态范围传输视频数据解码扩展视频流以获得高动态范围传输视频数据，并且
将高动态范围转换特性元信息到插入扩展视频流的SEI NAL单元的区中。
(9)根据(7)或(8)所述的接收装置，其中
将峰值亮度信息进一步插入到SEI NAL单元的区中，
还包括
亮度调节器，被配置为基于峰值亮度信息调整用于显示的视频数据的显示亮度。
(10)根据(9)所述的接收装置，其中
将指示允许进行亮度转换的区的区信息进一步插入到SEI NAL单元的区中，并且
亮度调整器进一步被配置为基于指示允许进行亮度转换的区的区信息调整允许进行亮度转换的该区中的显示亮度。
(11)一种接收方法，包括：
通过接收器接收视频流；
解码视频流以获得高动态范围传输视频数据，视频流包含插入有高动态范围转换特性元信息的SEI NAL单元的区，高动态范围转换特性元信息指示高动态范围光电转换的特性或与高动态范围光电转换的特性相对应的高动态范围电光转换的特性；并且
基于高动态范围转换特性元信息对高动态范围传输视频数据执行高动态范围电光转换以获得用于显示的视频数据。
(12)一种发送装置，包括
电路，被配置为对HDR视频数据执行高动态范围(HDR)光电转换以获得HDR传输视频数据；
编码器，被配置为接收至少HDR传输视频数据的输入并且输出包含编码视频数据的视频流；以及
发送器，被配置为发送视频流，其中，
电路被配置为将HDR转换特性元信息插入到视频流中，HDR转换特性元信息指示HDR转换的特性。
(13)根据12所述的发送装置，其中，
编码器进一步被配置为
接收通过对标准动态范围(SDR)视频数据执行SDR光电转换获得的SDR传输视频数据以及HDR传输视频数据作为输入，并且
输出包含通过对SDR传输视频数据进行预测编码获得的编码视频数据的基本视频流，以及包含通过使用SDR传输视频数据对HDR传输视频数据进行预测编码获得的编码视频数据的扩展视频流，其中，
电路进一步被配置为
将HDR转换特性元信息插入到扩展视频流的补充增强信息(SEI)网络抽象层(NAL)部分，并且
将SDR转换特性元信息插入到基本视频流的序列参数集(SPS)NAL部分中，SDR转换特性元信息指示SDR光电转换的特性。
(14)一种根据12所述的发送装置，其中，
电路进一步被配置为将用于显示控制的元信息连同HDR转换特性元信息一起插入到SEI NAL部分中。
(15)根据14所述的发送装置，其中，
用于显示控制的元信息包括峰值亮度信息。
(16)根据权利要求15所述的发送装置，其中，
用于显示控制的元信息进一步包括指示允许进行亮度转换的区的区信息。
(17)根据12所述的发送装置，其中，
HDR光电转换包括光电转换和电光转换中的至少一种。
(18)一种发送方法，包括：
利用电路对高动态范围(HDR)视频数据执行HDR光电转换以获得HDR传输视频数据；
接收至少HDR传输视频数据作为输入并且输出包含编码视频数据的视频流；
将HDR转换特性元信息插入到视频流中，HDR转换特性元信息指示HDR转换的特性；以及
通过发送器发送视频流。
(19)根据(18)所述的发送方法，进一步包括：
接收通过对标准动态范围(SDR)视频数据执行SDR光电转换获得的SDR传输视频数据以及HDR传输视频数据；
输出包含通过对SDR传输视频数据进行预测编码获得的编码视频数据的基本视频流并且输出包含通过使用SDR传输视频数据对HDR传输视频数据进行预测编码获得的编码视频数据的扩展视频流；
将HDR转换特性元信息插入到扩展视频流的补充增强信息(SEI)网络抽象层(NAL)部分；以及
将SDR转换特性元信息插入到基本视频流的序列参数集(SPS)NAL部分中，SDR转换特性元信息指示SDR光电转换的特性。
(20)根据(18)所述的发送方法，其中，
HDR光电转换包括光电转换和电光转换中的至少一种。
(21)一种接收装置，包括
接收器，被配置为接收视频流；
解码器，被配置为解码视频流以获得高动态范围(HDR)传输视频数据，视频流包含指示HDR转换的特性的HDR转换特性元信息；以及
电路，被配置为基于HDR转换特性元信息对HDR传输视频数据执行HDR电光转换以获得用于显示的视频数据。
(22)根据(21)所述的接收装置，进一步包括：
显示器，被配置为显示与视频数据相对应的图像。
(23)根据(21)所述的接收装置，其中，
视频流包括
基本视频流，包含通过对标准动态范围(SDR)传输视频数据进行预测编码获得的编码视频数据，以及
扩展视频流，包含通过使用SDR传输视频数据对HDR传输视频数据进行预测编码获得的编码视频数据，
解码器进一步被配置为
解码基本视频流以获得SDR传输视频数据，并且
解码扩展视频流以获得HDR传输视频数据，其中，HDR转换特性元信息包含在扩展视频流的补充增强信息(SEI)网络抽象层(NAL)部分中。
(24)根据(23)所述的接收装置，其中，
电路被配置为基于包含在SEI NAL中的峰值亮度信息调整用于显示的视频数据的显示亮度。
(25)根据(24)所述的接收装置，其中，
电路进一步被配置为
获得指示允许从SEI NAL进行亮度转换的区的区信息，并且
基于区信息调整允许进行亮度转换的区中的显示亮度。
(26)一种接收方法，包括：
利用接收器接收视频流；
利用解码器解码视频流以获得高动态范围(HDR)传输视频数据，视频流包含含有HDR转换特性元信息的补充增强信息(SEI)网络抽象层(NAL)部分，HDR转换特性元信息指示HDR转换的特性；以及
基于HDR转换特性元信息对HDR传输视频数据执行HDR电光转换以获得用于显示的视频数据。
(27)根据(26)所述的接收方法，进一步包括：
在显示器上显示视频数据。
(28)根据(26)所述的接收方法，其中：
视频流包括
基本视频流，包含通过对标准动态范围(SDR)传输视频数据进行预测编码获得的编码视频数据，以及
扩展视频流：包含通过使用SDR传输视频数据对HDR传输视频数据进行预测编码获得的编码视频数据，并且
解码包括解码基本视频流以获得SDR传输视频数据，以及
解码扩展视频流以获得HDR传输视频数据，其中，HDR转换特性元信息包含在扩展视频流的补充增强信息(SEI)网络抽象层(NAL)部分中。
(29)根据(28)所述的接收方法，进一步包括：
基于包含在SEI NAL中的峰值亮度信息调整用于显示的视频数据的显示亮度。
(30)根据(29)所述的接收方法，进一步包括：
获得指示允许根据SEI NAL进行亮度转换的区的区信息，并且
基于区信息调整允许进行亮度转换的区中的显示亮度。
(31)根据(26)所述的接收方法，其中
HDR电光转换包括光电转换和电光转换中的至少一种。
本技术的主要特点是将HDR转换特性元信息插入到视频流的SEI NAL单元的区中并且发送，使得HDR兼容的接收器可以基于HDR转换特性元信息对HDR传输视频数据适当执行电光转换处理(参见图5和图7)，HDR转换特性元信息指示HDR光电转换的特性或与HDR光电转换的特性相对应的HDR电光转换的特性。
本领域技术人员应当理解，根据设计要求和其他因素，可发生各种修改、组合、子组合和更改，只要它们落在所附权利要求或其等同物的范围内。
[参照符号列表]
10发送和接收系统100发送装置101控制器102SDR光电转换器103HDR光电转换器104视频编码器104b、104e编码部分105系统编码器106发送器200、300接收装置201、301控制器202、302接收器203、303系统解码器204、304视频解码器204b解码部分205SDR电光转换器206SDR显示映射器207、307CE监视器304b、304e解码部分305HDR电光转换器306HDR显示映射器。

Claims (20)

1.一种发送装置，包括：
电路，被配置为对高动态范围(HDR)视频数据执行HDR光电转换以获得HDR传输视频数据；
编码器，被配置为接收至少所述HDR传输视频数据的输入并且输出包含编码视频数据的视频流；以及
发送器，被配置为发送所述视频流，其中，
所述电路被配置为将HDR转换特性元信息插入到所述视频流中，所述HDR转换特性元信息指示HDR转换的特性。
2.根据权利要求1所述的发送装置，其中，
所述编码器进一步被配置为
接收通过对标准动态范围(SDR)视频数据执行SDR光电转换获得的SDR传输视频数据以及所述HDR传输视频数据作为输入；并且
输出包含通过对所述SDR传输视频数据进行预测编码获得的编码视频数据的基本视频流，以及包含通过使用所述SDR传输视频数据对所述HDR传输视频数据进行预测编码获得的编码视频数据的扩展视频流，其中，
所述电路进一步被配置为
将所述HDR转换特性元信息插入到所述扩展视频流的补充增强信息(SEI)网络抽象层(NAL)部分，并且
将SDR转换特性元信息插入到所述基本视频流的序列参数集(SPS)NAL部分中，所述SDR转换特性元信息指示所述SDR光电转换的特性。
3.根据权利要求1所述的发送装置，其中，
所述电路进一步被配置为将用于显示控制的元信息连同所述HDR转换特性元信息一起插入到所述SEI NAL部分中。
4.根据权利要求3所述的发送装置，其中，
所述用于显示控制的元信息包括峰值亮度信息。
5.根据权利要求4所述的发送装置，其中，
用于显示控制的元信息进一步包括指示允许进行亮度转换的区的区信息。
6.根据权利要求1所述的发送装置，其中，
所述HDR光电转换包括光电转换和电光转换中的至少一种。
7.一种发送方法，包括：
利用电路对高动态范围(HDR)视频数据执行HDR光电转换以获得HDR传输视频数据；
接收至少所述HDR传输视频数据作为输入并且输出包含编码视频数据的视频流；
将HDR转换特性元信息插入到所述视频流中，所述HDR转换特性元信息指示HDR转换的特性；以及
通过发送器发送所述视频流。
8.根据权利要求7所述的发送方法，进一步包括：
接收通过对标准动态范围(SDR)视频数据执行SDR光电转换获得的SDR传输视频数据以及所述HDR传输视频数据；
输出包含通过对所述SDR传输视频数据进行预测编码获得的编码视频数据的基本视频流，并且输出包含通过使用所述SDR传输视频数据对所述HDR传输视频数据进行预测编码获得的编码视频数据的扩展视频流；
将所述HDR转换特性元信息插入到所述扩展视频流的补充增强信息(SEI)网络抽象层(NAL)部分；以及
将SDR转换特性元信息插入到所述基本视频流的序列参数集(SPS)NAL部分中，所述SDR转换特性元信息指示所述SDR光电转换的特性。
9.根据权利要求7所述的发送方法，其中，
所述HDR光电转换包括光电转换和电光转换中的至少一种。
10.一种接收装置，包括：
接收器，被配置为接收视频流；
解码器，被配置为解码所述视频流以获得高动态范围(HDR)传输视频数据，所述视频流包含指示HDR转换的特性的HDR转换特性元信息；以及
电路，被配置为基于所述HDR转换特性元信息对所述HDR传输视频数据执行HDR电光转换以获得用于显示的视频数据。
11.根据权利要求10所述的接收装置，进一步包括：
显示器，被配置为显示与所述视频数据相对应的图像。
12.根据权利要求10所述的接收装置，其中，
所述视频流包括
基本视频流，包含通过对标准动态范围(SDR)传输视频数据进行预测编码获得的编码视频数据，以及
扩展视频流，包含通过使用所述SDR传输视频数据对所述HDR传输视频数据进行预测编码获得的编码视频数据，
所述解码器进一步被配置为
解码所述基本视频流以获得所述SDR传输视频数据，并且
解码所述扩展视频流以获得所述HDR传输视频数据，其中，所述HDR转换特性元信息包含在所述扩展视频流的补充增强信息(SEI)网络抽象层(NAL)部分中。
13.根据权利要求12所述的接收装置，其中，
所述电路被配置为基于包含在所述SEI NAL中的峰值亮度信息调整用于显示的所述视频数据的显示亮度。
14.根据权利要求13所述的接收装置，其中，
所述电路进一步被配置为
获得指示允许根据所述SEI NAL进行亮度转换的区的区信息，并且
基于所述区信息调整允许进行亮度转换的区中的显示亮度。
15.一种接收方法，包括：
利用接收器接收视频流；
利用解码器解码所述视频流以获得高动态范围(HDR)传输视频数据，所述视频流包含含有HDR转换特性元信息的补充增强信息(SEI)网络抽象层(NAL)部分，所述HDR转换特性元信息指示HDR转换的特性；以及
基于所述HDR转换特性元信息对所述HDR传输视频数据执行HDR电光转换以获得用于显示的视频数据。
16.根据权利要求15所述的接收方法，进一步包括：
在显示器上显示所述视频数据。
17.根据权利要求15所述的接收方法，其中：
所述视频流包括
基本视频流，包含通过对标准动态范围(SDR)传输视频数据进行预测编码获得的编码视频数据，以及
扩展视频流，包含通过使用所述SDR传输视频数据对所述HDR传输视频数据进行预测编码获得的编码视频数据，并且
所述解码包括解码所述基本视频流以获得所述SDR传输视频数据，以及
解码所述扩展视频流以获得所述HDR传输视频数据，其中，所述HDR转换特性元信息包含在所述扩展视频流的补充增强信息(SEI)网络抽象层(NAL)部分中。
18.根据权利要求17所述的接收方法，进一步包括：
基于包含在所述SEI NAL中的峰值亮度信息调整用于显示的所述视频数据的显示亮度。
19.根据权利要求18所述的接收方法，进一步包括：
获得指示允许根据所述SEI NAL进行亮度转换的区的区信息，并且
基于所述区信息调整允许进行亮度转换的区中的显示亮度。
20.根据权利要求15所述的接收方法，其中：
所述HDR电光转换包括光电转换和电光转换中的至少一种。
CN201680069606.8A 2015-12-28 2016-12-19 用于高动态范围视频数据的发送装置、发送方法、接收装置以及接收方法 Active CN108293141B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2015257206A JP6710970B2 (ja) 2015-12-28 2015-12-28 送信装置および送信方法
JP2015-257206 2015-12-28
PCT/JP2016/087719 WO2017115678A1 (en) 2015-12-28 2016-12-19 Transmission apparatus, transmission method, reception apparatus, and reception method for high dynamic range video data

Publications (2)

Publication Number Publication Date
CN108293141A true CN108293141A (zh) 2018-07-17
CN108293141B CN108293141B (zh) 2021-05-25

Family

ID=57838446

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680069606.8A Active CN108293141B (zh) 2015-12-28 2016-12-19 用于高动态范围视频数据的发送装置、发送方法、接收装置以及接收方法

Country Status (5)

Country Link
US (2) US10887670B2 (zh)
EP (2) EP3726840A1 (zh)
JP (1) JP6710970B2 (zh)
CN (1) CN108293141B (zh)
WO (1) WO2017115678A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115293994A (zh) * 2022-09-30 2022-11-04 腾讯科技（深圳）有限公司 图像处理方法、装置、计算机设备和存储介质
WO2023040753A1 (zh) * 2021-09-15 2023-03-23 华为技术有限公司 一种视频编码、解码方法及装置

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6968678B2 (ja) * 2017-08-23 2021-11-17 キヤノン株式会社 表示装置及びその制御方法、記憶媒体、プログラム
JP7022544B2 (ja) * 2017-09-13 2022-02-18 キヤノン株式会社 画像処理装置及び方法、及び撮像装置
CN108174164A (zh) * 2018-01-16 2018-06-15 北京三体云联科技有限公司 一种实时视频处理方法及装置
KR20200095651A (ko) 2019-02-01 2020-08-11 삼성전자주식회사 고 동적 범위 콘텐트를 재생하는 전자 장치 및 그 방법
WO2021202387A1 (en) 2020-03-30 2021-10-07 Bytedance Inc. Slice type in video coding

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1330265A (zh) * 2000-06-27 2002-01-09 华为技术有限公司 用于高动态范围的光时域反射仪的光模块
JP2015026910A (ja) * 2013-07-24 2015-02-05 キヤノン株式会社 撮像装置及びその制御方法
WO2015072754A1 (ko) * 2013-11-13 2015-05-21 엘지전자 주식회사 Hdr 방송 서비스 제공을 위한 방송 신호 송수신 방법 및 장치
WO2015125719A1 (ja) * 2014-02-21 2015-08-27 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
WO2015190246A1 (ja) * 2014-06-13 2015-12-17 ソニー株式会社 送信装置、送信方法、受信装置および受信方法

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101449586B (zh) 2006-05-25 2012-08-29 汤姆逊许可证公司 用于加权编码的方法和系统
ES2974956T3 (es) 2011-05-10 2024-07-02 Koninklijke Philips Nv Generación y procesamiento de señales de imágenes de alto rango dinámico
EP2745290A1 (en) 2011-09-27 2014-06-25 Koninklijke Philips N.V. Apparatus and method for dynamic range transforming of images
US9712781B2 (en) 2013-09-06 2017-07-18 Lg Electronics Inc. Method and apparatus for transmitting and receiving ultra-high definition broadcasting signal for high dynamic range representation in digital broadcasting system
CN105981391B (zh) * 2014-02-07 2020-04-10 索尼公司 发送装置、发送方法、接收装置、接收方法、显示装置及显示方法
JP6571073B2 (ja) 2014-05-20 2019-09-04 エルジー エレクトロニクス インコーポレイティド ディスプレイ適応的映像再生のためのビデオデータ処理方法及び装置
JP6601729B2 (ja) * 2014-12-03 2019-11-06 パナソニックＩｐマネジメント株式会社 データ生成方法、データ再生方法、データ生成装置及びデータ再生装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1330265A (zh) * 2000-06-27 2002-01-09 华为技术有限公司 用于高动态范围的光时域反射仪的光模块
JP2015026910A (ja) * 2013-07-24 2015-02-05 キヤノン株式会社 撮像装置及びその制御方法
WO2015072754A1 (ko) * 2013-11-13 2015-05-21 엘지전자 주식회사 Hdr 방송 서비스 제공을 위한 방송 신호 송수신 방법 및 장치
WO2015125719A1 (ja) * 2014-02-21 2015-08-27 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
WO2015190246A1 (ja) * 2014-06-13 2015-12-17 ソニー株式会社 送信装置、送信方法、受信装置および受信方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
MATTEO NACCARI ET AL.: "High dynamic range compatibility information SEI message", 《JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11 21ST MEETING: WARSAW, PL, 19–26 JUNE 2015; NO. JCTVC-U0033》 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2023040753A1 (zh) * 2021-09-15 2023-03-23 华为技术有限公司 一种视频编码、解码方法及装置
CN115293994A (zh) * 2022-09-30 2022-11-04 腾讯科技（深圳）有限公司 图像处理方法、装置、计算机设备和存储介质
CN115293994B (zh) * 2022-09-30 2022-12-16 腾讯科技（深圳）有限公司 图像处理方法、装置、计算机设备和存储介质

Also Published As

Publication number Publication date
WO2017115678A1 (en) 2017-07-06
EP3726840A1 (en) 2020-10-21
US11368767B2 (en) 2022-06-21
JP6710970B2 (ja) 2020-06-17
EP3398338A1 (en) 2018-11-07
US10887670B2 (en) 2021-01-05
CN108293141B (zh) 2021-05-25
JP2017121010A (ja) 2017-07-06
US20210092495A1 (en) 2021-03-25
US20190253771A1 (en) 2019-08-15

Similar Documents

Publication Publication Date Title
CN108293141A (zh) 用于高动态范围视频数据的发送装置、发送方法、接收装置以及接收方法
US20230104968A1 (en) Transmitting device, transmitting method, receiving device, and receiving method
US20210168365A1 (en) Method and device for transmission of video data of different dynamic ranges
CN111372097B (zh) 接收装置、显示设备及接收方法
JP7103475B2 (ja) 送信装置、送信方法、受信装置および受信方法
CN106031174B (zh) 传输装置、传输方法、接收装置以及接收方法
CN108353196B (zh) 发送设备、发送方法、接收设备、以及接收方法
JP7113746B2 (ja) 送信装置、送信方法、受信装置および受信方法
CN108476330B (zh) 发送设备、发送方法、接收设备和接收方法
JP7092162B2 (ja) 受信装置および受信方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant