CN107148780A - 发送装置、发送方法、接收装置和接收方法 - Google Patents

发送装置、发送方法、接收装置和接收方法 Download PDF

Info

Publication number
CN107148780A
CN107148780A CN201580058817.7A CN201580058817A CN107148780A CN 107148780 A CN107148780 A CN 107148780A CN 201580058817 A CN201580058817 A CN 201580058817A CN 107148780 A CN107148780 A CN 107148780A
Authority
CN
China
Prior art keywords
hdr
information
video
video data
metadata information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580058817.7A
Other languages
English (en)
Other versions
CN107148780B (zh
Inventor
塚越郁夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN107148780A publication Critical patent/CN107148780A/zh
Application granted granted Critical
Publication of CN107148780B publication Critical patent/CN107148780B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/235Processing of additional data, e.g. scrambling of additional data or processing content descriptors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
    • H04N21/2343Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/25Arrangements specific to fibre transmission
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B6/00Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
    • G02B6/24Coupling light guides
    • G02B6/42Coupling light guides with opto-electronic elements
    • G02B6/4201Packages, e.g. shape, construction, internal or external details
    • G02B6/4204Packages, e.g. shape, construction, internal or external details the coupling comprising intermediate optical elements, e.g. lenses, holograms
    • G02B6/4214Packages, e.g. shape, construction, internal or external details the coupling comprising intermediate optical elements, e.g. lenses, holograms the intermediate optical element having redirecting reflective means, e.g. mirrors, prisms for deflecting the radiation from horizontal to down- or upward direction toward a device
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B6/00Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
    • G02B6/24Coupling light guides
    • G02B6/42Coupling light guides with opto-electronic elements
    • G02B6/4201Packages, e.g. shape, construction, internal or external details
    • G02B6/4219Mechanical fixtures for holding or positioning the elements relative to each other in the couplings; Alignment methods for the elements, e.g. measuring or observing methods especially used therefor
    • G02B6/422Active alignment, i.e. moving the elements in response to the detected degree of coupling or position of the elements
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B6/00Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
    • G02B6/24Coupling light guides
    • G02B6/42Coupling light guides with opto-electronic elements
    • G02B6/4201Packages, e.g. shape, construction, internal or external details
    • G02B6/4246Bidirectionally operating package structures
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B6/00Light guides; Structural details of arrangements comprising light guides and other optical elements, e.g. couplings
    • G02B6/24Coupling light guides
    • G02B6/42Coupling light guides with opto-electronic elements
    • G02B6/4292Coupling light guides with opto-electronic elements the light guide being disconnectable from the opto-electronic element, e.g. mutually self aligning arrangements
    • HELECTRICITY
    • H01ELECTRIC ELEMENTS
    • H01SDEVICES USING THE PROCESS OF LIGHT AMPLIFICATION BY STIMULATED EMISSION OF RADIATION [LASER] TO AMPLIFY OR GENERATE LIGHT; DEVICES USING STIMULATED EMISSION OF ELECTROMAGNETIC RADIATION IN WAVE RANGES OTHER THAN OPTICAL
    • H01S5/00Semiconductor lasers
    • H01S5/02Structural details or components not essential to laser action
    • H01S5/022Mountings; Housings
    • H01S5/0225Out-coupling of light
    • H01S5/02251Out-coupling of light using optical fibres
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04BTRANSMISSION
    • H04B10/00Transmission systems employing electromagnetic waves other than radio-waves, e.g. infrared, visible or ultraviolet light, or employing corpuscular radiation, e.g. quantum communication
    • H04B10/27Arrangements for networking
    • H04B10/272Star-type networks or tree-type networks
    • H04B10/2725Star-type networks without a headend
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23605Creation or processing of packetized elementary streams [PES]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/236Assembling of a multiplex stream, e.g. transport stream, by combining a video stream with other content or additional data, e.g. inserting a URL [Uniform Resource Locator] into a video stream, multiplexing software data into a video stream; Remultiplexing of multiplex streams; Insertion of stuffing bits into the multiplex stream, e.g. to obtain a constant bit-rate; Assembling of a packetised elementary stream
    • H04N21/23614Multiplexing of additional data and video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H04N21/4355Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reformatting operations of additional data, e.g. HTML pages on a television screen
    • H04N21/4358Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream involving reformatting operations of additional data, e.g. HTML pages on a television screen for generating different versions, e.g. for different peripheral devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/50Control of the SSIS exposure
    • H04N25/57Control of the dynamic range
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/14Picture signal circuitry for video frequency region
    • H04N5/20Circuitry for controlling amplitude response

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Electromagnetism (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computing Systems (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Picture Signal Circuits (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Studio Devices (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)

Abstract

本发明的目的是能够以传统接收器和高动态范围(HDR)兼容接收器很好地执行电光变换处理,其是对使用HDR光电变换特性而获得的发送视频数据执行的。因此,在本发明中,高动态范围视频数据受到高动态范围光电转换处理以获得发送视频数据,该发送视频数据受到编码处理以获得视频流,并且发送包括该视频流的预定格式的容器。指示标准动态范围光电变换特性的元信息被插入到视频流层中,并且指示高动态范围光电变换特性的元信息被插入到视频流层或容器层的至少一个中。

Description

发送装置、发送方法、接收装置和接收方法
技术领域
本技术涉及一种发送装置、发送方法、接收装置和接收方法,并且具体地涉及发送通过将高动态范围光电变换应用于高动态范围视频数据而获得的发送视频数据的发送装置等。
背景技术
照惯例,将考虑发送通过将高动态范围光电转换应用于高动态范围视频数据而获得的发送视频数据。在下文中,酌情将高动态范围称为“HDR”。例如,非专利文献1描述了一种HDR光电转换特性(新伽马特性),其包括与考虑到通过传统接收器来接收的传统光电转换特性(伽马特性)兼容的区域。
引用列表
非专利文献
非专利文献1:Tim Borer“Non-Linear Opto-Electrical Transfer Functionsfor High Dynamic Range Television”,Research&Development White Paper WHP 283,2014年7月
发明内容
本发明要解决的问题
例如,当发送通过使用包括与传统光电转换特性兼容的区域的上述HDR光电转换特性而获得的发送视频数据时,必要的是传统接收器应当能够确定该光电转换特性类似于传统光电转换特性,并且HDR兼容接收器应该能够确定该光电转换特性是HDR光电转换特性。
本技术的目的是使传统接收器和HDR兼容接收器两者能够很好地对通过使用HDR光电转换特性而获得的发送视频数据进行电光转换处理。问题解决方案
本技术的概念在于:
发送装置,包括:
光电变换单元,被配置为对高动态范围视频数据执行高动态范围光电变换以获得发送视频数据;
编码单元,被配置为对发送视频数据执行编码处理以获得视频流;
发送单元,被配置为发送包括视频流的预定格式的容器;以及
信息插入单元,被配置为以将指示标准动态范围光电转换特性的元数据信息插入到视频流的层中,并且将指示高动态范围光电转换特性的元数据信息插入到视频流的层和容器的层的至少一个中。
在本技术中,光电转换单元对高动态范围视频数据进行高动态范围光电转换以获得发送视频数据。在这种情况下,例如,可以使用包括与传统光电转换特性(伽玛特性)兼容的区域的高动态范围光电转换特性(新伽马特性)。
编码单元对发送视频数据执行编码处理以获得视频流。发送单元发送包括该视频流的预定格式的容器。例如,容器可以是由数字广播标准采用的传送流(MPEG-2TS0)。另外,例如,容器可以是用于在因特网等上分布的MP4格式的容器,或者是除了MP4之外的格式的容器。
信息插入单元将指示标准动态范围光电转换特性的元数据信息插入到视频流的层中,并且将指示高动态范围光电转换特性的元数据信息插入到视频流的层和容器的层的至少一个中。
例如,当将指示高动态范围光电转换特性的元数据信息插入到视频流的层中时,信息插入单元可以将指示标准动态范围光电转换特性的元数据信息插入到视频流中的第一区域中,并且将指示高动态范围光电转换特性的元数据信息插入到视频流中的与第一区域不同的第二区域中。在这种情况下,例如,第一区域可以是SPS NAL单元的区域,并且第二区域可以是SEI NAL单元的区域。
另外,例如,容器可以是传送流,并且当将指示高动态范围光电转换特性的元数据信息插入到容器的层中时,信息插入单元可以将该元数据信息插入到程序映射表下。另外,例如,容器可以是传送流,并且当将指示高动态范围光电转换特性的元数据信息插入到容器的层中时,信息插入单元可以将该元数据信息插入到事件信息表下。
在本技术中,以这种方式将指示标准动态范围光电转换特性的元数据信息插入到视频流的层中,并且将指示高动态范围光电转换特性的元数据信息插入到视频流的层和容器的层的至少一个中。
因此,传统接收器和HDR兼容接收器两者都可以很好地对通过使用HDR光电转换特性而获得的发送视频数据进行电光转换处理。也就是说,传统接收器可以基于指示标准动态范围光电转换特性的元数据信息来确定光电转换特性与传统光电转换特性类似。另外,HDR兼容接收器可以基于指示高动态范围光电转换特性的元数据信息来确定该光电转换特性是HDR光电转换特性。
另外,在本技术中,例如,信息插入单元可以将用于显示控制的元数据信息与指示高动态范围光电转换特性的元数据信息一起插入。在这种情况下,例如,用于显示控制的元数据信息可以包括峰值亮度信息。另外,例如,用于显示控制的元数据信息可以包括指示在其中允许亮度变换的区域的区域信息。在这种情况下,HDR兼容接收器可以通过使用这种用于显示控制的元数据信息来适当地进行显示亮度控制。
另外,本技术的另一个概念在于:
接收装置,包括:
接收单元,被配置为接收包括通过对发送视频数据进行编码而获得的视频流的容器;
解码单元,被配置为对视频流进行解码处理以获得发送视频数据;以及
电光变换单元,被配置为对发送视频数据进行电光变换以获得用于显示的视频数据,
其中,当指示标准动态范围光电转换特性的元数据信息被插入到视频流的层中并且指示高动态范围光电转换特性的元数据信息被插入到视频流的层和容器的层的至少一个中时,电光变换单元基于指示高动态范围光电转换特性的元数据信息对发送视频数据执行具有与高动态范围光电转换特性相反的特性的高动态范围电光变化以获得用于显示的视频数据。
在本技术中,接收单元接收包括通过对发送视频数据进行编码而获得的视频流的容器。解码单元对视频流执行解码处理以获得发送视频数据。然后,电光变换单元对发送视频数据执行电光变换以获得用于显示的视频数据。
当指示标准动态范围光电转换特性的元数据信息被插入到视频流的层中并且元数据信息被插入到视频流的层和容器的层的至少一个中时,电光变换单元基于指示高动态范围光电转换特性的该元数据信息对发送视频数据执行具有与高动态范围光电转换特性相反的特性的高动态范围电光变换以获得用于显示的视频数据。
以这种方式,本技术使得能够对使用高动态范围光电转换特性而获得的发送视频数据适当地进行高动态范围电光变换,以获得好的作为用于显示的视频数据的高动态范围视频数据。
注意,本技术进一步可以包括例如亮度调整单元,被配置为对用于显示的视频数据进行显示亮度调整。当将用于显示控制的元数据信息与指示高动态范围光电转换特性的元数据信息一起插入时,亮度调整单元可以基于用于显示控制的元数据信息对用于显示的视频数据进行显示亮度调整。在这种情况下,例如,用于显示控制的元数据信息可以包括指示在其中允许进行亮度变换的区域的区域信息,并且亮度调整单元可以在其中允许亮度变换的区域中执行显示亮度调整。在这种情况下,可以适当地执行显示亮度调整。
本发明的效果
本技术使得传统接收器和HDR兼容接收器能够很好地对通过使用HDR光电转换特性而获得的发送视频数据执行电光变换处理。应当注意,在本说明书中所描述的效果仅是说明性的而不是限制性的,并且可以具有附加的效果。
附图说明
图1是示出了作为实施方式的发送和接收系统的配置示例的框图。
图2是示出了构成发送和接收系统的发送装置的配置示例的框图。
图3是用于描述HDR光电转换特性的示图。
图4是示出了当编码方法是HEVC时访问GOP的头部的单元的示图。
图5是示出了当编码方法是HEVC时除了GOP的头部之外的访问单元的示图。
图6是示出了动态范围SEI消息的结构示例的示图。
图7是示出了动态范围SEI消息的结构示例中的主要信息的内容的示图。
图8是示出了视频动态范围描述符的结构示例的示图。
图9是示出了传送流TS的配置示例的示图。
图10是示出了构成发送和接收系统的传统HDR非兼容接收装置的配置示例的框图。
图11是示出了构成发送和接收系统的HDR兼容接收装置的配置示例的框图。
图12是用于描述SDR电光转换特性、SDR显示映射处理、HDR电光转换特性、HDR显示映射处理等的示图。
图13是示出了发送和接收系统的另一配置示例的框图。
图14是示出了当与SDR兼容时待从机顶盒发送到监视器的“供应商特定的信息帧”的数据包的第七字节和随后字节的结构示例的示图。
图15是示出了当与HDR兼容时待从机顶盒发送到监视器的“供应商特定的信息帧”的数据包的第七字节和随后字节的结构示例的示图。
图16是示出了在“供应商特定的信息帧”的数据包的每个结构示例中的主要信息的内容的示图。
具体实施方式
在下文中,将对实施本发明的方式(以下称为“实施方式”)进行说明。注意,将按照以下顺序提供描述。
1.实施方式
2.变形例
<1.实施方式>
[发送和接收系统的配置示例]
图1示出了作为实施方式的发送和接收系统10的配置示例。该发送和接收系统10包括发送装置100和接收装置200、接收装置300。接收装置200是与传统标准动态范围(SDR)兼容并且与高动态范围(HDR)不兼容的接收装置。接收装置300是HDR兼容接收装置。
发送装置100生成作为容器的MPEG2的传送流TS,并将该传送流TS放置在广播波或网络数据包上,并发送该传送流TS。该传送流TS包括通过对HDR视频数据执行HDR光电变换而获得的发送视频数据执行编码处理而获得的视频流。
指示SDR光电转换特性(伽马特性)的元数据信息被插入到视频流的层中。此外,指示HDR光电转换特性(新伽玛特性)的元数据信息被插入到视频流的层和容器的层的至少一个中。此外,在本实施方式中,将用于显示控制的元数据信息与指示HDR光电转换特性的该元数据信息一起插入。用于显示控制的元数据信息包括峰值亮度信息以及指示在其中允许亮度变换的区域的区域信息。
接收装置200对包括在所接收的容器中的视频流执行解码处理以获得发送视频数据。接收装置200可以基于指示插入到视频流中的SDR光电转换特性的元数据信息来确定该光电转换特性与传统光电转换特性类似。接收装置200对发送视频数据执行具有与SDR光电转换特性相反的特性SDR电光变换以获得用于显示的视频数据。此外,接收装置200基于监视器的峰值亮度(100cd/m2)、显示最大亮度等对用于显示的视频数据执行显示映射处理,即,显示亮度调整。
接收装置300对包括在所接收的容器中的视频流执行解码处理以获得发送视频数据。接收装置300可以基于指示插入到视频流的层和容器的层的至少一个中的HDR光电转换特性的元数据信息来确定该光电转换特性是HDR光电转换特性。接收装置300对发送视频数据执行具有与HDR光电转换特性相反的特性的HDR电光变换以获得用于显示的视频数据。另外,接收装置300基于与指示HDR光电转换特性的元数据信息一起被插入的用于显示控制的元数据信息对用于显示的视频数据执行显示映射处理,即,显示亮度调整。
“发送装置的配置示例”
图2示出了发送装置100的配置示例。该发送装置100包括控制单元101、HDR摄像机102、HDR光电变换单元103、视频编码器104、系统编码器105以及发送单元106。控制单元101包括中央处理单元(CPU),并且基于控制程序来控制发送装置100的每个单元的操作。
HDR摄像机102捕获对象并输出高动态范围(HDR)视频数据。该HDR视频数据具有0至100%×N(N是大于1的数字)的对比度比率,其超过传统SDR图像的白色峰值的亮度,例如,0至1000%。这里,100%的级对应于例如白色的亮度值100cd/m2
主监视器103a是用于对由HDR摄像机102所获得的HDR视频数据执行分级的监视器。该主监视器103a具有与HDR视频数据兼容或适于对HDR视频数据执行分级的显示亮度级。
HDR光电变换单元103将HDR光电转换特性应用于由HDR摄像机102所获得的HDR视频数据以获得发送视频数据V1。图3的实线a是指示HDR光电转换特性的HDR OETF曲线。另外,图3的虚线b是指示SDR光电转换特性的SDR OETF曲线。在该示图中,水平轴表示输入亮度级,而垂直轴表示发送代码值。
HDR光电转换特性包括与SDR光电转换特性兼容的区域。也就是说,两种特性的曲线匹配直到输入亮度级变为两种特性的兼容性限定值。当输入亮度级是兼容性限定值时,发送代码值是兼容性级SP。在HDR光电转换特性中,当输入亮度级是峰值亮度PL时,发送代码值是峰值级MP。
HDR显示参考阈值CL指示区域之间的边界,其中执行匹配的区域作为要在接收器侧的监视器(CE监视器)上显示的亮度和CE监视器相依区域。当输入亮度级是兼容性限定值CL时,发送代码值是阈值级CP。注意,在SDR光电转换特性中,当输入亮度级是SDR特性表现极限亮度SL时,发送代码值是峰值级MP。这里,SL为100cd/m2
返回图2,视频编码器104对发送视频数据V1执行例如MPEG4-AVC或HEVC等的编码,以获得编码视频数据。另外,该视频编码器104通过设置在后续级中的流格式化器(未示出)来生成包括该编码视频数据(视频基本流)的视频流。
此时,视频编码器104将指示SDR光电转换特性的元数据信息插入到视频流的层中。也就是说,视频编码器104将元数据信息“转换特性1”插入到访问单元(AU)的SPS NAL单元的视频可用性信息(VUI)的区域中。
另外,视频编码器104将指示HDR光电转换特性的元数据信息以及用于显示控制的元数据信息插入到视频流的层中。也就是说,视频编码器104将新定义的动态范围SEI消息插入到访问单元(AU)的“SEI”部分中。
图4示出了当编码方法是HEVC时访问图片组(GOP)的头部的单元。另外,图5示出当编码方法是HEVC时访问除了GOP的头部之外的单元。对于HEVC编码方法,在编码像素数据的片之前布置用于解码“Prefix_SEIs”的SEI消息组,并且在这些片之后,布置用于显示“Suffix_SEIs”的SEI消息组。如图4、图5所示,动态范围SEI消息被布置为SEI消息组“Suffix_SEIs”。
图6示出了动态范围SEI消息的结构示例(语法)。图7示出了结构示例中的主要信息(语义)的内容。“transfer_characteristics2”的八位字段表示HDR光电转换特性。“number_of_bits”的八位字段表示编码像素的位数。
“minimum_brightness_value”的16位字段表示最小级亮度(cd/m2)。“peak_level”的16位字段表示最大级相对值(%)。“peak_level_brightness”的16位字段表示最大级亮度(cd/m2),并且对应于图3中的峰值亮度PL。
“compliant_threshold_level”的16位字段表示显示级映射时的阈值(%)。“compliant_threshold_level_value”的16位字段表示在显示级映射时用作阈值的亮度(cd/m2),并且对应于图3中的HDR显示参考阈值CL。
返回图2,系统编码器105生成包括由视频编码器104所生成的视频流VS的传送流TS。然后,发送单元106将该传送流TS放置在广播波或网络数据包上,并将传送流TS发送到接收装置200、接收装置300。
将简要描述图2中所示的发送装置100的操作。通过HDR摄像机102的拍摄所获得的HDR视频数据被供应给HDR光电变换单元103。由HDR摄像机102所获得的HDR视频数据使用主监视器103a进行分级。该HDR光电变换单元103将HDR光电转换特性(HDR OETF曲线)应用于该HDR视频数据以进行光电转换,并获得发送视频数据V1。该发送视频数据V1被供应给视频编码器104。
视频编码器104对发送视频数据V1执行诸如例如MPEG4-AVC或HEVC的编码以获得编码视频数据。另外,该视频编码器104通过在后续阶段中所提供的流格式化器来生成包括该编码视频数据的视频流。
此时,视频编码器104将指示SDR光电转换特性的元数据信息插入到视频流的层中。也就是说,视频编码器104将元数据信息“转换特性1”插入到访问单元(AU)的SPS NAL单元的VUI区域中。
另外,视频编码器104将指示HDR光电转换特性的元数据信息,以及用于显示控制的元数据信息插入到视频流的层中。也就是说,视频编码器104将新定义的动态范围SEI消息插入到访问单元(AU)的“SEI”部分中。
由视频编码器104所生成的视频流VS被供应给系统编码器105。该系统编码器105生成包括视频流的MPEG-2传送流TS。发送单元106将该传送流TS放置在广播波或网络数据包上,并将传送流TS发送到接收装置200、接收装置300。
注意,上述描述已经示出了其中将指示HDR光电转换特性的元数据信息,以及用于显示控制的元数据信息插入到视频流的层中的示例。由于可以在最常见的情况下为每个图像发送动态范围SEI消息,所以还可以改变每个图像的元数据信息。另选地,动态范围SEI消息可以例如在场景中或在粗糙单元中发送一次。另选地,即使为每个图像发送动态范围SEI消息,静态操作也是可能的,除非元数据信息的值改变。
指示HDR光电转换特性的元数据信息以及用于显示控制的元数据信息可以被插入到容器的层中,而不是视频流的层中,或者与视频流的层一起。例如,系统编码器105在程序映射表(PMT)下插入新定义的视频动态范围描述符。如果静态操作足够则这是足够的。
另选地,如果足以知道指示HDR光电转换特性的元数据信息以及用于逐节目地进行显示控制的元数据信息,则也可以将视频动态范围描述符插入事件信息表(EIT)。
图8示出了视频动态范围描述符的结构示例(语法)。“descriptor_tag”的八位字段表示描述符类型。这里,这表示描述符是视频动态范围描述符。“descriptor_length”的八位字段表示描述符的长度(大小),并且表示随后的字节的数目作为描述符长度。注意,尽管省略了详细描述,但是该视频动态范围描述符的内容与上述动态范围SEI消息的内容相同。
[传送流TS的配置]
图9示出传送流TS的配置示例。在该配置示例中,存在由PID1“视频PES1”所标识的视频流的PES数据包。将指示SDR光电转换特性(伽马特性)的元数据信息“转换特性1”插入到访问单元的SPS的VUI区域中。此外,将描述指示HDR光电转换特性“转换特性2”的元数据信息的动态范围SEI消息,以及用于显示控制的元数据信息“峰值级、阈值级”插入到访问单元中。
另外,传送流TS包括作为节目特定信息(PSI)的程序映射表(PMT)。PSI是描述包括在传送流中的每个基本流属于哪个节目的信息。在PMT中,存在描述与总体程序相关的信息的程序循环。
在PMT中,存在具有与每个基本流相关的信息的基本流循环。在该配置示例中,存在对应于视频流(视频ES循环)的视频基本流循环。在视频基本流循环(视频ES循环)中,对应于视频流所布置诸如流类型和数据包标识符(PID)的信息,并且还布置描述与视频流有关的信息的描述符。
该视频流的“Stream_type”的值被设置为例如指示HEVC视频流的值,并且PID信息指示附加到视频流的PES数据包“视频PES”的PID1。作为一个描述符,可以插入描述指示HDR光电转换特性“转换特性2”的元数据信息,以及用于显示控制的元数据信息的视频动态范围描述符“峰值级、阈值级”。该描述符被插入以代替动态范围SEI消息或与动态范围SEI消息一起。
另外,传送流TS包括事件信息表(EIT)作为用于逐个事件(逐节目)地执行管理的服务信息(SI)。可以将描述指示HDR光电转换特性“转换特性2”的元数据信息,以及用于显示控制的元数据信息“峰值级,阈值级”的视频动态范围描述符插入到该EIT中。该描述符被插入以代替动态范围SEI消息或与动态范围SEI消息一起。
“传统HDR不兼容接收装置的配置示例”
图10示出了接收装置200的配置示例。如上所述,该接收装置200是HDR不兼容接收装置。该接收装置200包括控制单元201、接收单元202、系统解码器203、视频解码器204、SDR电光变换单元206、SDR显示映射单元206和CE监视器207。控制单元201包括中央处理单元(CPU),并且基于控制程序来控制接收装置200的每个单元的操作。
接收单元202接收放置在广播波或网络数据包上并从发送装置100发送的传送流TS。系统解码器203从该传送流TS中提取视频流(基本流)VS。另外,系统解码器203提取插入到容器(传送流)的层中的各条信息,并将该信息发送到控制单元201。注意,当视频动态范围描述符插入到容器的层,由于接收装置200与HDR不兼容,因此跳过描述符。
视频解码器204对由系统解码器203所提取的视频流VS执行解码处理,然后输出发送视频数据V1。另外,视频解码器204提取插入到构成视频流VS的每个访问单元中的参数集或SEI消息,然后将参数集或SEI消息发送到控制单元201。注意,当动态范围SEI消息插入到视频流的层中,由于接收装置200与HDR不兼容,因此跳过SEI消息。
控制单元201基于指示SPS的视频可用性信息(VUI)中的SDR光电转换特性“转换特性1”的元数据信息,来识别SDR光电转换特性(伽马特性),并且设置具有与SDR电光变换单元205中的SDR光电转换特性相反的特性的SDR电光转换特性。SDR电光变换单元205将SDR电光转换特性应用于从视频解码器204所输出的发送视频数据V1,并且获得用于显示SDR图像的显示视频数据。
图12的虚线b是表示SDR电光转换特性的SDR EOTF曲线。在该图中,横轴表示发送代码值,且对应于上述图3的纵轴。另外,在该图中,纵轴表示显示亮度级(输出亮度级),且相当于上述图3的横轴。在SDR电光转换特性中,当发送代码值是峰值级MP时,显示亮度级是SL。该SL是如上所述的SDR特性表现极限亮度,为100cd/m2
SDR显示映射单元206对由SDR电光变换单元205所获得的显示视频数据执行显示亮度调整。也就是说,当CE监视器207的最大亮度显示能力是比SL高的DP时,SDR显示映射单元206执行显示映射处理,即,亮度变换处理,以便使显示最大亮度级为DP。图12的交替的长短虚线b'表示这种情况下的亮度变换处理的一个示例。
将简要描述图10所示的接收装置200的操作。接收单元202接收放置在广播波或网络数据包上并从发送装置100发送的传送流TS。该传送流TS被供应给系统解码器203。系统解码器203从该传送流TS提取视频流VS。
另外,系统解码器203提取插入到容器的层中的各条信息,并将该信息发送到控制单元201。注意,当视频动态范围描述符插入到容器的层中时,由于接收装置200与HDR不兼容,因此跳过描述符。
由系统解码器203所提取的视频流VS被供应给视频解码器204。视频解码器204对由系统解码器203所提取的视频流VS执行解码处理,以获得发送视频数据V1。
另外,视频解码器204提取插入到构成视频流VS的每个访问单元中的参数集或SEI消息,然后将该参数集或SEI消息发送到控制单元201。注意,当动态范围SEI消息插入到视频流的层中,由于接收装置200与HDR不兼容,因此跳过SEI消息。
控制单元201基于指示SPS的视频可用性信息(VUI)中的SDR光电转换特性“转换特性1”的元数据信息,来识别SDR光电转换特性(伽马特性),并且设置具有与SDR电光变换单元205中的SDR光电转换特性相反的特性的SDR电光转换特性。
由视频解码器203所获得的发送视频数据V1被供应给SDR电光变换单元205。SDR电光变换单元205将SDR电光转换特性应用于从视频解码器204所输出的发送视频数据V1,并获得用于显示SDR图像的显示视频数据。
由SDR电光变换单元205所获得的显示视频数据被供应给SDR显示映射单元206。SDR显示映射单元206对显示视频数据执行显示亮度调整。也就是说,当CE监视器207的最大亮度显示能力是比SL高的DP时,SDR显示映射单元206执行显示映射处理,即,亮度变换处理,以便使显示最大亮度水平是DP(参考图12的交替长短虚线b')。
显示映射单元206的输出视频数据被供应给CE监视器207。该CE监视器207显示经历显示亮度调整的SDR图像。
“HDR兼容接收装置的配置示例”
图11示出了接收装置300的配置示例。如上所述,该接收装置300是HDR兼容接收装置。该接收装置300包括控制单元301、接收单元302、系统解码器303、视频解码器304、HDR电光变换单元305、HDR显示映射单元306和CE监视器307。控制单元301包括中央处理单元(CPU),并且基于控制程序来控制接收装置300的每个单元的操作。
接收单元302接收放置在广播波或网络数据包上并从发送装置100发送的传送流TS。系统解码器303从该传送流TS中提取视频流(基本流)VS。另外,系统解码器303提取插入到容器(传送流)的层中的各条信息,并将该信息发送到控制单元301。当视频动态范围描述符插入到容器的层中时,由于接收设备300与HDR兼容,所提取的信息还包括关于描述符的信息。
视频解码器304对由系统解码器303所提取的视频流VS执行解码处理,然后输出发送视频数据V1。另外,视频解码器304提取插入到构成视频流VS的每个访问单元中的参数集或SEI消息,然后将该参数集或SEI消息发送到控制单元301。注意,当动态范围SEI消息被插入到视频流的层中,由于接收装置300与HDR兼容,所以还提取SEI消息。
控制单元301基于指示动态范围SEI消息或视频动态范围描述符中的HDR光电转换特性“转换特性2”的元数据信息,来识别HDR光电转换特性(新的伽马特性),以及将HDR电光转换特性设置为具有与HDR电光变换单元305中的HDR光电转换特性相反的特性。HDR电光变换单元305将HDR电光转换特性应用于从视频解码器304所输出的发送视频数据V1,并获得用于显示HDR图像的显示视频数据。
图12的实线a是指示HDR电光转换特性的HDR EOTF曲线。在HDR电光转换特性中,当发送代码值是峰值级MP时,显示亮度级是PL。另外,当发送代码值是阈值级CP时,输出亮度级是HDR显示参考阈值CL。如上所述,该阈值CL指示区域之间的边界,其中执行匹配的区域作为要在接收器侧的监视器(CE监视器)上显示的亮度和CE监视器相依区域。
PL和CL的亮度信息被包括作为元数据信息,其用于在插入到视频流的层中的动态范围SEI消息中的显示控制,以及插入在容器的层中的视频动态范围描述符(参考图6至图8)。
HDR显示映射单元306基于用于显示控制的元数据信息,对由HDR电光变换单元305所获得的显示视频数据执行显示亮度调整。也就是说,当CE监视器307的最大亮度显示能力是比PL高的EP时,HDR显示映射单元306还可以执行显示映射处理,即,对HDR电光变换单元305的输出亮度级中超过亮度CL的级执行亮度变换处理,以使显示最大亮度级为EP,作为显示功能的一种方法。图12的双点划线a'指示这种情况下的亮度变换处理的一个示例。
将简要描述图11所示的接收装置300的操作。接收单元302接收放置在广播波或网络数据包上并从发送装置100发送的传送流TS。该传送流TS被提供给系统解码器303。系统解码器303从该传送流TS提取视频流VS。
另外,系统解码器303提取插入到容器的层中的各种信息,并将该信息发送到控制单元301。注意,当视频动态范围描述符插入到容器的层中时,由于接收装置300与HDR兼容,所提取的信息还包括关于描述符的信息。
由系统解码器303所提取的视频流VS被供应给视频解码器304。视频解码器304对由系统解码器303所提取的视频流VS执行解码处理,以获得发送视频数据V1。
另外,视频解码器304提取插入到构成视频流VS的每个访问单元中的参数集或SEI消息,并且将该参数集或SEI消息发送到控制单元301。注意,当动态范围SEI消息被插入视频流的层,由于接收装置300与HDR兼容,所以还提取SEI消息。
控制单元301基于指示动态范围SEI消息或视频动态范围描述符中的HDR光电转换特性“转换特性2”的元数据信息,来识别HDR光电转换特性(新的伽马特性),以及将HDR电光转换特性设置为具有与HDR电光变换单元305中的HDR光电转换特性相反的特性。HDR电光变换单元305将HDR电光转换特性应用于从视频解码器304所输出的发送视频数据V1,然后获得用于显示HDR图像的显示视频数据。
由HDR电光变换单元305所获得的显示视频数据被供应给HDR显示映射单元306。HDR显示映射单元306基于用于显示控制的元数据信息对显示视频数据执行显示亮度调整。也就是说,当CE监视器307的最大亮度显示能力是比PL高的EP时,HDR显示映射单元306进行显示映射处理,即,对HDR电光变换单元305的输出亮度级中超过亮度CL的级执行亮度变换处理,以使显示最大亮度级为EP(参照图12的双点划线a')。
显示映射单元306的输出视频数据被供应给CE监视器307。该CE监视器307显示经历显示亮度调整的HDR图像。
如上所述,在图1所示的发送和接收系统10中,将指示SDR光电转换特性(伽马特性)的元数据信息插入到视频流的层中,并且将指示HDR光电转换特性(新伽玛特性)的元数据信息插入到视频流的层和容器的层中的至少一个中。因此,传统接收器和HDR兼容接收器两者都可以很好地对通过使用HDR光电转换特性而获得的发送视频数据V1执行电光变换处理。
也就是说,传统接收器(接收装置200)可以基于指示SDR光电转换特性的元数据信息,来确定该光电转换特性与传统光电转换特性类似。此外,HDR兼容接收器(接收装置300)可以基于指示HDR光电转换特性的元数据信息,来确定光电转换特性是HDR光电转换特性。因此,传统接收器和HDR兼容接收器两者都可以很好地对通过使用HDR光电转换特性而获得的发送视频数据V1执行电光转换处理。
另外,在图1所示的发送和接收系统10中,用于显示控制的元数据信息与指示HDR光电转换特性的元数据信息一起插入。因此,HDR兼容接收器可以通过使用用于显示控制的该元数据信息来适当地执行显示亮度控制。在这种情况下,用于显示控制的元数据信息包括指示允许亮度变换的区域的区域信息,并且例如,仅在允许亮度变换的区域中执行根据CE监视器307的显示亮度能力的亮度变换,这使得可以良好地再现由生产方所期望的亮度气氛。
<2.变形例>
注意,上述实施方式已经描述了示例,其中在接收装置200、接收装置300中,电光变换单元205、电光变换单元305执行电光变换处理,并且显示映射单元206、显示映射单元306根据CE监视器207、监视器307的最大亮度显示能力执行亮度变换处理。然而,可以通过将亮度转换特性反映在电光转换特性(EOTF)上,仅使电光变换单元205、电光变换单元305执行电光变换处理和亮度变换处理。
另外,上述实施方式已经描述了包括发送装置100和接收装置200、接收装置300的发送和接收系统10;然而,本技术可应用的发送和接收系统的配置不限于该配置。例如,在如图13所示的发送和接收系统10A中,接收装置200、接收装置300的一部分可以包括,例如通过诸如(高清晰度多媒体接口(HDMI))的数字接口所连接的机顶盒(STB)200A、机顶盒300A以及监视器200B,注意,“HDMI”是注册商标。
在这种情况下,视频解码器204、视频解码器304和上游部分包括在机顶盒200A、机顶盒300A中,而电光变换单元205、电光变换单元305和下游部分包括在监视器200B、监视器300B中。HDR不兼容机顶盒200A例如通过使用“供应商特定信息帧”的数据包,向监视器200B发送指示SDR光电转换特性(伽玛特性)的元数据信息。另外,HDR兼容机顶盒300A例如通过使用“供应商特定信息帧”的数据包,将指示HDR光电转换特性(伽马特性)的元数据信息以及用于显示控制的元数据信息发送到监视器300B。
图14示出要从机顶盒200A发送到监视器200B的“供应商特定信息帧”的数据包的第七字节和后续字节的结构示例。另外,图15示出要从机顶盒300A发送到监视器300B的“供应商特定信息帧”的数据包的第七字节和后续字节的结构示例。另外,图16示出了每个结构示例中的主要信息的内容。
首先,将描述图14得结构示例。在第七字节的第七位至第五位中,布置了“Display_control_type”的三位信息。这三位信息表示一种显示类型。数值“001”表示SD显示控制,而数值“010”表示HDR显示控制。这里,设置“001”。
在第七字节的第四位至第零位中,布置了五位信息“Display_control_metadata_length”。该五位信息表示随后以字节数排列的“Display_control_metadata”的大小。这里,设置“2”。
在第八字节中,布置了“转换特性”的八位信息。该八位信息表示光电转换特性。利用该信息,检测用于显示的电光转换特性。“0x01”表示SDR光电转换特性(伽马特性),而“0x10”表示HDR光电转换特性(新伽马特性)。这里,设置“0x01”。在第(8+1)字节中,布置了“位数”的八位信息。该八位信息表示编码像素的位数。
接下来,将描述图15的配置示例。在第七字节的第七位至第五位中,布置了“Display_control_type”的三位信息。这三位信息表示一种显示类型。数值“001”表示SD显示控制,而数值“010”表示HDR显示控制。这里,设置“010”。
在第七字节的第四位至第零位中,布置了五位信息“Display_control_metadata_length”。该五位信息表示随后以字节数排列的“Display_control_metadata”的大小。这里,设置为“12”。
在第八字节中,布置了“转换特性”的八位信息。该八位信息表示光电转换特性。利用该信息,检测用于显示的电光转换特性。“0x01”表示SDR光电转换特性(伽马特性),而“0x10”表示HDR光电转换特性(新伽马特性)。这里,设置“0x10”。在第(8+1)字节中,布置了“位数”的八位信息。该八位信息表示编码像素的位数。
在第(8+2)字节到第(8+3)字节中,布置了“最小亮度值”的16位信息。这16位信息表示最小级亮度(cd/m2)。在第(8+4)字节到第(8+5)字节中,布置了“峰值级”的16位信息。该16位信息表示最大级相对值(%)。
在第(8+6)字节至第(8+7)字节中,布置了“峰值亮度”的16位信息。该16位信息表示最大级亮度(cd/m2)。在第(8+8)字节到第(8+9)字节中,布置了“Compliant_threshold_level”的16位信息。该16位信息表示显示级映射时的阈值(%)。在第(8+10)字节到第(8+11)字节中,布置了“Compliant_threshold_level_value”的16位信息。该16位信息表示作为显示级映射时的阈值的亮度(cd/m2)。
另外,上述实施方式已经描述了容器是传送流(MPEG-2TS)的示例。然而,在本技术中,传送不限于TS,并且即使对于其它数据包,例如ISOBMFF和MMT,也可以通过相同的方法来实现视频层。因此,本技术还可类似地应用于具有使用诸如因特网的网络而分布给接收终端的配置的系统。在通过因特网的分布中,分布通常在MP4或其他格式的容器上执行。也就是说,作为容器,可应用各种格式的容器,诸如在数字广播标准(MPEG-2TS)中所使用的传送流以及用于因特网分布的MP4。
另外,本技术还可以具有以下配置。
(1)一种发送装置,其包括:
光电转换单元,被配置为对高动态范围视频数据执行高动态范围光电转换以获得发送视频数据;
编码单元,被配置为对发送视频数据执行编码处理以获得视频流;
发送单元,被配置为发送包括视频流的预定格式的容器;以及
信息插入单元,被配置为将指示标准动态范围光电转换特性的元数据信息插入到视频流的层中,并且将指示高动态范围光电转换特性的元数据信息插入到视频流的层和容器的层的至少一个中。
(2)根据(1)所述的发送装置,其中,信息插入单元将用于显示控制的元数据信息与指示高动态范围光电转换特性的元数据信息一起插入。
(3)根据(2)所述的发送装置,其中,用于显示控制的元数据信息包括峰值亮度信息。
(4)根据(2)或(3)所述的发送装置,其中,用于显示控制的元数据信息包括指示在其中允许亮度变换的区域的区域信息。
(5)根据(1)至(4)中任一项所述的发送装置,其中,当将指示高动态范围光电转换特性的元数据信息插入到视频流的层中时,信息插入单元将指示标准动态范围光电转换特性的元数据信息插入到视频流中的第一区域中,并且将指示高动态范围光电转换特性的元数据信息插入到视频流中的与第一区域不同的第二区域中。
(6)根据(5)的发送装置,其中,第一区域是SPS NAL单元的区域,并且第二区域是SEI NAL单元的区域。
(7)根据(1)至(6)中任一项所述的发送装置,其中
容器是传送流,并且
当将指示高动态范围光电转换特性的元数据信息插入到容器的层中时,信息插入单元将元数据信息插入到程序映射表下。
(8)根据(1)至(6)中任一项所述的发送装置,其中
容器是传送流,并且
当将指示高动态范围光电转换特性的元数据信息插入到容器的层中时,信息插入单元将元数据信息插入到事件信息表下。
(9)一种发送方法,包括以下步骤:
光电转换步骤,对高动态范围视频数据执行高动态范围光电转换以获得发送视频数据;
编码步骤,对发送视频数据执行编码处理以获得视频流;
发送步骤,由发送单元发送包括视频流的预定格式的容器;以及
信息插入步骤,用于将指示标准动态范围光电转换特性的元数据信息插入到视频流的层中,并且将指示高动态范围光电转换特性的元数据信息插入到视频流的层和容器的层中的至少一个中。
(10)一种接收装置,包括:
接收单元,被配置为接收包括通过对发送视频数据进行编码而获得的视频流的容器;
解码单元,被配置为对视频流进行解码处理以获得发送视频数据;以及
电光转换单元,被配置为对发送视频数据进行电光转换以获得用于显示的视频数据,
其中,当指示标准动态范围光电转换特性的元数据信息被插入到视频流的层中并且指示所述高动态范围光电转换特性的元数据信息被插入到视频流的层和容器的层的至少一个中,电光转换单元基于指示高动态范围光电转换特性的元数据信息用与高动态范围光电转换特性相反的特性对发送视频数据执行高动态范围电光转换以获得用于显示的视频数据。
(11)根据(10)所述的接收装置,进一步包括亮度调整单元,被配置为对用于显示的视频数据进行显示亮度调整,
其中,当用于显示控制的元数据信息与指示高动态范围光电转换特性的元数据信息被一起插入时,亮度调整单元基于用于显示控制的元数据信息对用于显示的视频数据进行显示亮度调整。
(12)根据(11)所述的接收装置,其中,
用于显示控制的元数据信息包括指示在其中允许亮度变换的区域的区域信息,以及
亮度调整单元在其中允许亮度变换的区域中执行显示亮度调整。
(13)一种接收方法,包括以下步骤:
接收步骤,由接收单元接收包括通过对发送视频数据进行编码而获得的视频流的容器;
解码步骤,对视频流执行解码处理以获得发送视频数据;以及
电光转换步骤,对发送视频数据进行电光转换以获得用于显示的视频数据;
其中,当指示标准动态范围光电转换特性的元数据信息被插入到视频流的层中并且指示所述高动态范围光电转换特性的元数据信息被插入到视频流的层和容器的层的至少一个中时,电光转换步骤包括:基于指示高动态范围光电转换特性的元数据信息用与高动态范围光电转换特性相反的特性对发送视频数据执行高动态范围电光转换以获得用于显示的视频数据。
本技术的主要特征在于,传统接收器和HDR兼容接收器都能够对通过使用HDR光电转换特性而获得的发送视频数据执行电光转换处理,通过将指示SDR光电转换特性(伽马特性)插入到视频流的层中,并且通过将指示HDR光电转换特性(新伽马特性)的元数据信息插入到视频流的层和容器的层中的至少一个中(参考图9)。
符号说明
10、10A 发送和接收系统
100 发送装置
101 控制单元
102 HDR摄像机
103 HDR光电变换单元
103a 主监视器
104 视频编码器
105 系统编码器
106 发送单元
200、300 接收装置
200A、300A 机顶盒
200B、300B 监视器
201、301 控制单元
202、302 接收单元
203、303 系统解码器
204、304 视频解码器
205 SDR电光变换单元
206 SDR显示映射单元
207,307 CE监视器
305 HDR电光变换单元
306 HDR显示映射单元。

Claims (13)

1.一种发送装置,包括:
光电变换单元,被配置为对高动态范围视频数据执行高动态范围光电变换以获得发送视频数据;
编码单元,被配置为对所述发送视频数据执行编码处理以获得视频流;
发送单元,被配置为发送包括所述视频流的预定格式的容器;
以及
信息插入单元,被配置为将指示标准动态范围光电转换特性的元数据信息插入到所述视频流的层中,并且将指示所述高动态范围光电转换特性的元数据信息插入到所述视频流的层和所述容器的层的至少一个中。
2.根据权利要求1所述的发送装置,其中,所述信息插入单元将用于显示控制的元数据信息与指示所述高动态范围光电转换特性的元数据信息一起插入。
3.根据权利要求2所述的发送装置,其中,所述用于显示控制的元数据信息包括峰值亮度信息。
4.根据权利要求2所述的发送装置,其中,所述用于显示控制的元数据信息包括指示在其中允许亮度变换的区域的区域信息。
5.根据权利要求1所述的发送装置,其中,当将指示所述高动态范围光电转换特性的元数据信息插入到所述视频流的层中时,所述信息插入单元将指示所述标准动态范围光电转换特性的元数据信息插入到所述视频流中的第一区域中,并且将指示所述高动态范围光电转换特性的元数据信息插入到所述视频流中的与所述第一区域不同的第二区域中。
6.根据权利要求5所述的发送装置,其中,所述第一区域是SPS NAL单元的区域,并且所述第二区域是SEI NAL单元的区域。
7.根据权利要求1所述的发送装置,其中,
所述容器是传送流,并且
当将指示所述高动态范围光电转换特性的元数据信息插入到所述容器的层中时,所述信息插入单元将该元数据信息插入到程序映射表下。
8.根据权利要求1所述的发送装置,其中,
所述容器是传送流,并且
当将指示所述高动态范围光电转换特性的元数据信息插入到所述容器的层中时,所述信息插入单元将该元数据信息插入到事件信息表下。
9.一种发送方法,包括以下步骤:
光电变换步骤,对高动态范围视频数据执行高动态范围光电变换以获得发送视频数据;
编码步骤,对所述发送视频数据执行编码处理以获得视频流;
发送步骤,由发送单元发送包括所述视频流的预定格式的容器;
以及
信息插入步骤,将指示标准动态范围光电转换特性的元数据信息插入到所述视频流的层中,并且将指示所述高动态范围光电转换特性的元数据信息插入到所述视频流的层和所述容器的层中的至少一个中。
10.一种接收装置,包括:
接收单元,被配置为接收包括通过对发送视频数据进行编码而获得的视频流的容器;
解码单元,被配置为对所述视频流进行解码处理以获得所述发送视频数据;以及
电光变换单元,被配置为对所述发送视频数据进行电光变换以获得用于显示的视频数据,
其中,当指示标准动态范围光电转换特性的元数据信息被插入到所述视频流的层中并且指示高动态范围光电转换特性的元数据信息被插入到所述视频流的层和所述容器的层中的至少一个中时,所述电光变换单元基于指示所述高动态范围光电转换特性的元数据信息对所述发送视频数据执行具有与所述高动态范围光电转换特性相反的特性的高动态范围电光变换以获得所述用于显示的视频数据。
11.根据权利要求10所述的接收装置,进一步包括亮度调整单元,被配置为对所述用于显示的视频数据进行显示亮度调整,
其中,当用于显示控制的元数据信息与指示所述高动态范围光电转换特性的元数据信息被一起插入时,所述亮度调整单元基于用于显示控制的元数据信息对所述用于显示的视频数据进行所述显示亮度调整。
12.根据权利要求11所述的接收装置,其中,
所述用于显示控制的元数据信息包括指示在其中允许亮度变换的区域的区域信息,并且
所述亮度调整单元在其中允许所述亮度变换的所述区域中执行所述显示亮度调整。
13.一种接收方法,包括:
接收步骤,由接收单元接收包括通过对发送视频数据进行编码而获得的视频流的容器;
解码步骤,对所述视频流执行解码处理以获得所述发送视频数据;以及
电光变换步骤,对所述发送视频数据进行电光变换以获得用于显示的视频数据;
其中,当指示标准动态范围光电转换特性的元数据信息被插入到所述视频流的层中并且指示高动态范围光电转换特性的元数据信息被插入到所述视频流的层和所述容器的层中的至少一个中时,所述电光变换步骤包括:基于指示所述高动态范围光电转换特性的所述元数据信息对所述发送视频数据执行具有与所述高动态范围光电转换特性相反的特性的高动态范围电光变换以获得所述用于显示的视频数据。
CN201580058817.7A 2014-11-07 2015-10-29 发送装置、发送方法、接收装置和接收方法 Active CN107148780B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014227297 2014-11-07
JP2014-227297 2014-11-07
PCT/JP2015/080541 WO2016072347A1 (ja) 2014-11-07 2015-10-29 送信装置、送信方法、受信装置および受信方法

Publications (2)

Publication Number Publication Date
CN107148780A true CN107148780A (zh) 2017-09-08
CN107148780B CN107148780B (zh) 2020-06-16

Family

ID=55909073

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580058817.7A Active CN107148780B (zh) 2014-11-07 2015-10-29 发送装置、发送方法、接收装置和接收方法

Country Status (12)

Country Link
US (3) US10924184B2 (zh)
EP (2) EP3217672B1 (zh)
JP (1) JP6614156B2 (zh)
KR (1) KR102360613B1 (zh)
CN (1) CN107148780B (zh)
CA (1) CA2964723C (zh)
ES (1) ES2865376T3 (zh)
HU (1) HUE053609T2 (zh)
MX (1) MX2017005590A (zh)
PL (1) PL3217672T3 (zh)
PT (1) PT3217672T (zh)
WO (1) WO2016072347A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111183651A (zh) * 2017-10-12 2020-05-19 索尼公司 图像处理设备、图像处理方法、发送设备、发送方法和接收设备

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6601729B2 (ja) * 2014-12-03 2019-11-06 パナソニックIpマネジメント株式会社 データ生成方法、データ再生方法、データ生成装置及びデータ再生装置
JP6863271B2 (ja) * 2015-02-16 2021-04-21 ソニーグループ株式会社 情報処理装置、情報記録媒体、および情報処理方法、並びにプログラム
JP6820507B2 (ja) 2015-09-14 2021-01-27 パナソニックIpマネジメント株式会社 映像受信方法、映像送信方法、映像受信装置及び映像送信装置
CA3004793A1 (en) * 2015-11-09 2017-05-18 Thomson Licensing Method and device for adapting the video content decoded from elementary streams to the characteristics of a display
US10264196B2 (en) 2016-02-12 2019-04-16 Contrast, Inc. Systems and methods for HDR video capture with a mobile device
US10257394B2 (en) 2016-02-12 2019-04-09 Contrast, Inc. Combined HDR/LDR video streaming
JP2018006877A (ja) * 2016-06-28 2018-01-11 シャープ株式会社 映像伝送装置、表示装置、映像表示システム、映像配信装置、映像配信システム、映像送受信システム、プログラム、記録媒体、および映像伝送方法
WO2018003643A1 (ja) * 2016-07-01 2018-01-04 シャープ株式会社 映像表示装置、テレビジョン受像機、送信装置、制御プログラム及び記録媒体
EP3497925B1 (en) 2016-08-09 2022-11-23 Contrast, Inc. Real-time hdr video for vehicle control
KR102308192B1 (ko) 2017-03-09 2021-10-05 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
JP6948173B2 (ja) * 2017-06-28 2021-10-13 キヤノン株式会社 画像処理装置及び方法、撮像装置、及び、撮像システム
WO2019014057A1 (en) 2017-07-10 2019-01-17 Contrast, Inc. STEREOSCOPIC CAMERA
CN108200441B (zh) * 2018-01-22 2020-10-13 海信视像科技股份有限公司 一种图像亮度处理方法及装置、电子设备
US10951888B2 (en) 2018-06-04 2021-03-16 Contrast, Inc. Compressed high dynamic range video
KR102373833B1 (ko) * 2020-01-09 2022-03-14 엘지전자 주식회사 포인트 클라우드 데이터 송신 장치, 포인트 클라우드 데이터 송신 방법, 포인트 클라우드 데이터 수신 장치 및 포인트 클라우드 데이터 수신 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013039730A2 (en) * 2011-09-15 2013-03-21 Dolby Laboratories Licensing Corporation Method and system for backward compatible, extended dynamic range encoding of video
WO2013046095A1 (en) * 2011-09-27 2013-04-04 Koninklijke Philips Electronics N.V. Apparatus and method for dynamic range transforming of images
WO2014178286A1 (ja) * 2013-04-30 2014-11-06 ソニー株式会社 送信装置、送信方法、受信装置および受信方法

Family Cites Families (28)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009531940A (ja) * 2006-03-24 2009-09-03 韓國電子通信研究院 Fgsレイヤーの動きデータを利用してインターレイヤーリダンダンシを除去するコーディング方法及びその装置
JP5285159B2 (ja) 2008-08-20 2013-09-11 トムソン ライセンシング 透かし処理におけるブロックノイズおよび忠実度
WO2010021694A1 (en) 2008-08-20 2010-02-25 Thomson Licensing Selection of watermarks for the watermarking of compressed video
US8428128B2 (en) * 2008-12-30 2013-04-23 Korea Electronics Technology Institute Method for prediction coding using scalable video codec
TWI559779B (zh) * 2010-08-25 2016-11-21 杜比實驗室特許公司 擴展影像動態範圍
KR20120089391A (ko) * 2010-11-10 2012-08-10 에스케이하이닉스 주식회사 내부전압 테스트 장치 및 이를 구비하는 이미지 센서
US9445136B2 (en) * 2011-09-21 2016-09-13 Qualcomm Incorporated Signaling characteristics of segments for network streaming of media data
JP5905610B2 (ja) * 2012-03-12 2016-04-20 ドルビー ラボラトリーズ ライセンシング コーポレイション 3d視覚的ダイナミックレンジ符号化
WO2014012680A1 (fr) * 2012-07-18 2014-01-23 Thomson Licensing Procede et dispositif de conversion d'une sequence d'image dont les valeurs de luminance appartiennent a une plage de valeurs de dynamique elevee
US8826325B2 (en) * 2012-12-08 2014-09-02 Joao Redol Automated unobtrusive ancilliary information insertion into a video
JP6571314B2 (ja) * 2013-06-18 2019-09-04 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 送信方法
EP3013040A4 (en) * 2013-06-20 2016-12-28 Sony Corp PLAYING DEVICE, PLAYING METHOD AND RECORDING MEDIUM
JP2015008360A (ja) * 2013-06-24 2015-01-15 ソニー株式会社 再生装置、再生方法、および記録媒体
MX352400B (es) * 2013-07-12 2017-11-23 Sony Corp Dispositivo de reproducción, método de reproducción y medio de grabación.
US9578328B2 (en) * 2013-07-15 2017-02-21 Qualcomm Incorporated Cross-layer parallel processing and offset delay parameters for video coding
JP6294489B2 (ja) * 2013-09-06 2018-03-14 エルジー エレクトロニクス インコーポレイティド デジタル放送システムにおける広域明るさ表現のための超高画質放送信号送受信方法及び装置
US9854333B2 (en) * 2013-10-29 2017-12-26 Lg Electronics Inc. Method and apparatus for transmitting and receiving broadcast signal for providing HEVC based IP broadcast service
KR101797505B1 (ko) * 2013-11-13 2017-12-12 엘지전자 주식회사 Hdr 방송 서비스 제공을 위한 방송 신호 송수신 방법 및 장치
EP3748975A1 (en) * 2014-02-07 2020-12-09 Sony Corporation Transmission device, transmission method, reception device, reception method, display device, and display method
US10674181B2 (en) * 2014-02-21 2020-06-02 Sony Corporation Transmission device, transmission method, reception device, and reception method
CN106105047B (zh) * 2014-03-14 2018-10-26 夏普株式会社 具有颜色空间可缩放性的视频压缩
US9402083B2 (en) * 2014-04-24 2016-07-26 Vidyo, Inc. Signaling conformance points using profile space
US10419718B2 (en) * 2014-07-11 2019-09-17 Lg Electronics Inc. Method and device for transmitting and receiving broadcast signal
EP4044180A1 (en) * 2014-10-01 2022-08-17 Dolby International AB Decoding an encoded audio signal using drc profiles
KR102190233B1 (ko) * 2014-10-06 2020-12-11 삼성전자주식회사 영상 처리 장치 및 이의 영상 처리 방법
HUE056171T2 (hu) * 2014-12-29 2022-01-28 Sony Group Corp Adókészülék, adási eljárás, vevõkészülék és vételi eljárás
WO2019017362A1 (ja) * 2017-07-20 2019-01-24 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
US10609424B2 (en) * 2018-03-09 2020-03-31 Dolby Laboratories Licensing Corporation Single-layer progressive coding for supporting multi-capability HDR composition

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013039730A2 (en) * 2011-09-15 2013-03-21 Dolby Laboratories Licensing Corporation Method and system for backward compatible, extended dynamic range encoding of video
WO2013046095A1 (en) * 2011-09-27 2013-04-04 Koninklijke Philips Electronics N.V. Apparatus and method for dynamic range transforming of images
US20140225941A1 (en) * 2011-09-27 2014-08-14 Koninklijke Philips N.V. Apparatus and method for dynamic range transforming of images
WO2014178286A1 (ja) * 2013-04-30 2014-11-06 ソニー株式会社 送信装置、送信方法、受信装置および受信方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111183651A (zh) * 2017-10-12 2020-05-19 索尼公司 图像处理设备、图像处理方法、发送设备、发送方法和接收设备
US11244635B2 (en) 2017-10-12 2022-02-08 Saturn Licensing Llc Image processing apparatus, image processing method, transmission apparatus, transmission method, and reception apparatus
US11948519B2 (en) 2017-10-12 2024-04-02 Saturn Licensing Llc Image processing apparatus, image processing method, transmission apparatus, transmission method, and reception apparatus

Also Published As

Publication number Publication date
WO2016072347A1 (ja) 2016-05-12
HUE053609T2 (hu) 2021-07-28
US20170279530A1 (en) 2017-09-28
EP3833033A1 (en) 2021-06-09
US11916594B2 (en) 2024-02-27
EP3217672A1 (en) 2017-09-13
KR20170084035A (ko) 2017-07-19
CN107148780B (zh) 2020-06-16
PL3217672T3 (pl) 2021-08-16
US11563490B2 (en) 2023-01-24
US20230163849A1 (en) 2023-05-25
ES2865376T3 (es) 2021-10-15
EP3217672A4 (en) 2018-06-13
US10924184B2 (en) 2021-02-16
KR102360613B1 (ko) 2022-02-09
PT3217672T (pt) 2021-04-19
JPWO2016072347A1 (ja) 2017-08-17
EP3217672B1 (en) 2021-04-07
JP6614156B2 (ja) 2019-12-04
CA2964723A1 (en) 2016-05-12
US20210119701A1 (en) 2021-04-22
CA2964723C (en) 2023-04-04
EP3833033B1 (en) 2023-03-29
MX2017005590A (es) 2017-06-23

Similar Documents

Publication Publication Date Title
CN107148780A (zh) 发送装置、发送方法、接收装置和接收方法
US11057547B2 (en) Transmitting device, transmitting method, receiving device, and receiving method
CN105165001B (zh) 发送设备、发送方法、接收设备、以及接收方法
JP6265285B2 (ja) 受信装置および受信方法
CN105981391A (zh) 发送装置、发送方法、接收装置、接收方法、显示装置及显示方法
CN107113457B (zh) 发送装置、发送方法、接收装置和接收方法
CN106416261A (zh) 传输设备、传输方法、接收设备以及接收方法
CN106031174A (zh) 传输装置、传输方法、接收装置以及接收方法
JP6519441B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP6658944B2 (ja) 送信装置、送信方法、受信装置および受信方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant