WO2015190246A1 - 送信装置、送信方法、受信装置および受信方法 - Google Patents

送信装置、送信方法、受信装置および受信方法 Download PDF

Info

Publication number
WO2015190246A1
WO2015190246A1 PCT/JP2015/064384 JP2015064384W WO2015190246A1 WO 2015190246 A1 WO2015190246 A1 WO 2015190246A1 JP 2015064384 W JP2015064384 W JP 2015064384W WO 2015190246 A1 WO2015190246 A1 WO 2015190246A1
Authority
WO
WIPO (PCT)
Prior art keywords
video data
luminance
transmission
information
level
Prior art date
Application number
PCT/JP2015/064384
Other languages
English (en)
French (fr)
Inventor
塚越　郁夫
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to RU2016147783A priority Critical patent/RU2696216C2/ru
Priority to CN201580030229.2A priority patent/CN106416261B/zh
Priority to EP15806088.9A priority patent/EP3157257A4/en
Priority to US15/308,155 priority patent/US11418753B2/en
Priority to JP2016527715A priority patent/JP6531759B2/ja
Publication of WO2015190246A1 publication Critical patent/WO2015190246A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/57—Control of contrast or brightness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/70—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by syntax aspects related to video coding, e.g. related to compression standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/426—Internal components of the client ; Characteristics thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454—Content or additional data filtering, e.g. blocking advertisements
    • H04N21/4545—Input to filtering algorithms, e.g. filtering a region of the image
    • H04N21/45455—Input to filtering algorithms, e.g. filtering a region of the image applied to a region of the image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4854—End-user interface for client configuration for modifying image parameters, e.g. image brightness, contrast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division

Definitions

  • the present technology relates to a transmission device, a transmission method, a reception device, and a reception method, and more particularly to a transmission device that transmits transmission video data obtained by applying predetermined photoelectric conversion characteristics to input video data.
  • Video services based on HDR reflect the intentions of the production side, provide video services with a wide luminance range, and reproduce them on the receiver side, thereby recognizing the natural human eye. This makes it possible to achieve close display reproduction.
  • HDR High Dynamic Range
  • Non-Patent Document 1 is generated by encoding transmission video data obtained by applying a gamma curve to input video data having a level of 0 to 100% * N (N is greater than 1). For example, transmitting a video stream is described.
  • the peak luminance of the monitor (CE monitor) on the receiver side varies greatly depending on the device characteristics of the display panel, the backlight arrangement, and the design method, and the peak luminance of the CE monitor is brighter than that of the master monitor used during program production. It is too dark or darker than the master monitor. Therefore, it may happen that the brightness atmosphere intended by the production side cannot be correctly reproduced.
  • High Efficiency Video Coding (HEVC) text specification draft 10 for FDIS & Last Call
  • the purpose of this technology is to make it possible to satisfactorily reproduce the brightness atmosphere intended by the production side on the reception side.
  • the concept of this technology is A processing unit for obtaining transmission video data by applying predetermined photoelectric conversion characteristics to input video data;
  • the transmission apparatus includes: a transmission unit that transmits the transmission video data together with area information indicating an area allowing luminance conversion.
  • transmission video data is obtained by applying predetermined photoelectric conversion characteristics to input video data by the processing unit.
  • the input video data is HDR (High Dynamic Range) having a contrast ratio of 0% to 100% * N (N is a number greater than 1) exceeding the brightness of the white peak of a conventional LDR (Low Dynamic Range) image.
  • N is a number greater than 1
  • This is video data of an image.
  • the transmission video data is transmitted together with area information indicating an area allowing luminance conversion by the transmission unit.
  • the transmission unit may further include an information insertion unit that transmits a video stream obtained by encoding transmission video data and inserts region information into a layer of the video stream.
  • the information insertion unit may insert metadata indicating a region allowing luminance conversion as region information.
  • the information insertion unit may insert specification information of a predetermined photoelectric conversion characteristic associated with a region allowing luminance conversion as the region information.
  • the area information may include information on a plurality of areas having different allowable levels of luminance conversion.
  • transmission video data is transmitted together with area information indicating an area where luminance conversion is allowed. Therefore, it is possible to satisfactorily reproduce the luminance atmosphere intended by the production side on the reception side.
  • a receiving unit that receives transmission video data obtained by applying predetermined photoelectric conversion characteristics to input video data together with area information indicating an area allowing luminance conversion;
  • a receiving apparatus includes: a processing unit that applies electro-optic conversion characteristics corresponding to the predetermined photoelectric conversion characteristics to the transmission video data, and performs luminance conversion processing based on the region information to obtain output video data.
  • the transmission unit receives the transmission video data together with area information indicating an area that allows luminance conversion.
  • This transmission video data is obtained by applying predetermined photoelectric conversion characteristics to input video data.
  • the input video data is HDR (High Dynamic Range) having a contrast ratio of 0% to 100% * N (N is a number greater than 1) exceeding the brightness of the white peak of a conventional LDR (Low Dynamic Range) image.
  • N is a number greater than 1
  • the processing unit applies, for example, reverse electro-optic conversion characteristics corresponding to predetermined photoelectric conversion characteristics to the transmission video data, and performs luminance conversion processing based on the region information to obtain output video data. .
  • the receiving unit may receive a video stream obtained by encoding transmission video data, and the region information may be inserted in a layer of the video stream.
  • the region information may be inserted as the region information.
  • designation information of a predetermined photoelectric conversion characteristic associated with an area allowing luminance conversion may be inserted.
  • the area information may include information on a plurality of areas having different allowable levels of luminance conversion.
  • the transmission video data is received together with the area information indicating the area allowing the luminance conversion, and the output video data is obtained by performing the luminance conversion processing based on the area information. Therefore, it is possible to satisfactorily reproduce the luminance atmosphere intended by the production side.
  • OETF photoelectric conversion characteristic
  • OETF photoelectric conversion characteristic
  • CE monitor the display luminance characteristic of a CE monitor.
  • EOTF electro-optical conversion characteristic
  • FIG. 1 shows a configuration example of a transmission / reception system 10 as an embodiment.
  • the transmission / reception system 10 includes a transmission device 100 and a reception device 200.
  • the transmission apparatus 100 generates an MPEG2 transport stream TS as a container, and transmits the transport stream TS on a broadcast wave or a net packet.
  • This transport stream TS has a video stream obtained by encoding transmission video data obtained by applying predetermined photoelectric conversion characteristics to input video data.
  • the input video data is HDR (High Dynamic Range) having a contrast ratio of 0% to 100% * N (N is a number greater than 1) exceeding the brightness of the white peak of a conventional LDR (Low Dynamic Range) image.
  • N is a number greater than 1
  • This is video data of an image.
  • a level of 100% is premised on a luminance level corresponding to a white luminance value of 100 cd / m 2.
  • the area information indicating the area that allows the luminance conversion is inserted into the layer of the video stream.
  • metadata indicating an area where luminance conversion is allowed is inserted into a video stream layer.
  • the transmission method 2 is adopted, the above-mentioned predetermined photoelectric conversion characteristic designation information associated with an area allowing luminance conversion is inserted. Details of this area information will be described later.
  • the receiving device 200 receives the transport stream TS transmitted from the transmitting device 100 on broadcast waves or net packets.
  • the transport stream TS has a video stream including encoded video data.
  • area information indicating an area where luminance conversion is allowed is inserted.
  • the receiving apparatus 200 applies to the transmission video data, for example, a reverse photoelectric conversion characteristic corresponding to the predetermined photoelectric conversion characteristic on the transmission side described above, and performs luminance conversion processing based on the region information to output video data To get.
  • luminance conversion depending on, for example, the peak luminance of the monitor is performed only in the region that allows luminance conversion.
  • FIG. 2 shows a configuration example of the transmission device 100.
  • the transmission apparatus 100 includes a control unit 101, an HDR camera 102, an HDR photoelectric conversion unit 103, a video encoder 104, a system encoder 105, and a transmission unit 106.
  • the control unit 101 includes a CPU (Central Processing Unit), and controls the operation of each unit of the transmission device 100 based on a control program stored in a storage (not shown).
  • a CPU Central Processing Unit
  • the HDR camera 102 images a subject and outputs HDR (High Dynamic Range) video data.
  • This HDR video data has a contrast ratio of 0 to 100% * N (N is a number greater than 1) exceeding the brightness of the white peak of a conventional LDR (Low Dynamic Range) image, for example, 0 to 1000%.
  • the level of 100% corresponds to, for example, a white luminance value of 100 cd / m 2.
  • “Cd / m2” represents “cd / square meter”.
  • the master monitor 103a is a monitor for grading HDR video data obtained by the HDR camera 102.
  • the master monitor 103a has a display luminance level corresponding to the HDR video data or suitable for grading the HDR video data.
  • FIG. 3 shows the display luminance characteristics of the master monitor 103a.
  • the horizontal axis indicates the input luminance level
  • the vertical axis indicates the display luminance level.
  • the display luminance level is a relative reference level (%), for example, 100% corresponding to a white luminance value of 100 cd / m2.
  • the display luminance level is a relative peak level (%).
  • the threshold luminance CL is newly defined in this embodiment, and indicates the boundary between the region to be matched as the luminance displayed on the monitor (CE monitor) on the receiver side and the region dependent on the CE monitor.
  • the monitor input luminance level is the threshold luminance CL
  • the display luminance level is a relative threshold level (%).
  • the HDR photoelectric conversion unit 103 applies the HDR image photoelectric conversion characteristics (HDR OETF curve) to the HDR video data obtained by the HDR camera 102 to obtain transmission video data V1.
  • HDR image photoelectric conversion characteristics HDR OETF curve
  • FIG. 4 shows an example of photoelectric conversion characteristics (OETF).
  • the horizontal axis indicates the input luminance level
  • the vertical axis indicates the transmission code value, similarly to the horizontal axis of the above-described master monitor display luminance characteristic (see FIG. 3).
  • the transmission code value is the reference level RP.
  • the transmission code value is the peak level MP.
  • the transmission code value is the threshold level THP.
  • the range of the transmission code value on the vertical axis corresponds to the input pixel data range of the video encoder 104 (Encoder input pixel data range). For example, in the case of 10-bit encoding, the range is “64” to “940”, or “4” to “1019” when the extended area is used.
  • the video encoder 104 performs encoding such as MPEG4-AVC, MPEG2 video, or HEVC (high-efficiency-video coding) on the transmission video data V1 to obtain encoded video data. Further, the video encoder 104 generates a video stream (video elementary stream) including the encoded video data by a stream formatter (not shown) provided in the subsequent stage.
  • encoding such as MPEG4-AVC, MPEG2 video, or HEVC (high-efficiency-video coding) on the transmission video data V1 to obtain encoded video data. Further, the video encoder 104 generates a video stream (video elementary stream) including the encoded video data by a stream formatter (not shown) provided in the subsequent stage.
  • the video encoder 104 inserts area information indicating an area allowing luminance conversion depending on the display side into the layer of the video stream.
  • area information indicating an area allowing luminance conversion depending on the display side into the layer of the video stream.
  • metadata indicating an area where luminance conversion is allowed is inserted into a video stream layer.
  • the transmission method 2 the designation information of the photoelectric conversion characteristics applied in the above-described HDR photoelectric conversion unit 103, which is associated with the area allowing the luminance conversion, is inserted.
  • FIG. 5 shows the top access unit of GOP (Group Of Pictures) when the encoding method is HEVC.
  • FIG. 6 shows access units other than the head of the GOP when the encoding method is HEVC.
  • a decoding SEI message group “Prefix_SEIs” is arranged before a slice (slices) in which pixel data is encoded, and a display SEI message group “ “Suffix_SEIs” is arranged.
  • the level mapping SEI message is arranged as a SEI message group “Suffix_SEIs”.
  • FIG. 7 shows a structure example (Syntax) of the level mapping SEI message.
  • FIG. 8 shows the contents (Semantics) of main information in the structural example.
  • “Level_mapping_cancel_flag” is 1-bit flag information. “1” indicates that the message state of the previous level mapping (Level_mapping) is cancelled. “0” indicates that each element is transmitted, so that the previous state is refreshed.
  • the 8-bit field of “coded_data_bit_depth” indicates the bit length of the encoded data, and for example, 8 to 14 bits are used.
  • a 16-bit field of “reference_white_level” indicates an input luminance value when the master monitor 103a is 100%, that is, a reference luminance RL.
  • a 16-bit field of “reference_white_level_code_value” indicates a level code value with a luminance of 100% and a value with bit precision indicated by “coded_data_bit_depth”, that is, a reference level RP.
  • the 8-bit field of“ number_of_thresholds ” indicates the number of threshold divisions for display mapping.
  • the 16-bit field of “compliant_threshold_level” and the 16-bit field of “compliant_threshold_level_value” exist as many times as the number of threshold divisions. In this embodiment, it is “1”.
  • the field of “compliant_threshold_level” indicates a threshold level (percentage) assuming display mapping, and indicates a relative level with respect to 100% luminance, that is, threshold luminance CL.
  • the field of “compliant_threshold_level_value” indicates a code value for transmitting a threshold value that assumes display mapping, that is, a threshold level THP. This value is the maximum luminance value that the production side expects to match in the CE monitor display, and a level exceeding this value is an area (range) that can be changed depending on the display capability of the CE monitor. .
  • these threshold values are information on a plurality of areas (area division information) with different permissible levels of luminance conversion.
  • the 8-bit field of “peak_percentage” indicates a value representing the maximum luminance level as a percentage of 100% on the production side. For example, “peak_percentage” with a peak luminance of 1000 cd / m 2 is 1000%.
  • the 16-bit field of “peak_percentage_value” indicates the maximum code value representing “peak_percentage”, that is, the peak level MP when transmitting with the bit precision indicated by “coded_data_bit_depth”. For example, when “peak_percentage” is 1000%, the maximum value “1019” during 10-bit transmission represents 1000%.
  • the information of “compliant_threshold_level” and “compliant_threshold_level_value” constitutes area information indicating an area where luminance conversion is allowed.
  • the receiving side can detect area information indicating an area allowing luminance conversion from the level, mapping, and SEI message.
  • this transmission method 1 an area where luminance conversion is allowed can be designated for each picture, each scene, or each program.
  • the transmission method 1 it is assumed that the target OETF (photoelectric conversion characteristic) type is transmitted in the video usability information (VUI) to the NPS unit of SPS (sequence parameter set).
  • VUI video usability information
  • VUI video usability information
  • VUI designates parameters related to display control after decoding, in addition to buffer management timing information, among header information encoded in sequence units as SPS.
  • the VUI specifies the screen aspect ratio, color gamut, OETF (photoelectric conversion). (Contains information indicating the control method leading to image display, such as the type of characteristic) and the type of RGB conversion matrix.
  • the transfer functions of these two types of OETF are equal and are as follows:
  • the receiving side is assumed to convert the above inverse function as EOTF or inverse OETF.
  • the OETF applied by the HDR photoelectric conversion unit 103 is any one of OETFs associated with areas that allow luminance conversion in advance.
  • the following pieces of information are defined as specifications for each OETF.
  • the information of “compliant_threshold_level” and “compliant_threshold_level_value” constitutes area information indicating an area where luminance conversion is allowed.
  • the contents of each information are the same as the corresponding information of the above-described level mapping SEI message.
  • FIGS. 9A and 9B show an example of an OETF (photoelectric conversion characteristic) in which a region allowing luminance conversion is associated in advance.
  • the peak luminance is PL1
  • the corresponding transmission code value is MP1.
  • a threshold luminance CL1 and a threshold level THP1 are defined as region information indicating a region where luminance conversion is allowed.
  • the peak luminance is PL2, and the corresponding transmission code value is MP2.
  • a threshold luminance CL2 and a threshold level THP2 are defined as area information indicating areas where luminance conversion is allowed.
  • an OETF applied by the HDR photoelectric conversion unit 103 that is, an OETF associated with an area that allows luminance conversion in advance is specified.
  • the receiving side can uniquely detect the area information indicating the area where the luminance conversion is allowed from the OETF specified by the VUI.
  • EOTF electro-optical conversion characteristics
  • OETF photo-electric conversion characteristics
  • the display side can be represented by defining region information (information of “compliant_threshold_level” or “compliant_threshold_level_value”) indicating a region where luminance conversion is allowed as OETF specifications.
  • the system encoder 105 generates a transport stream TS including the video stream VS generated by the video encoder 104. Then, the transmission unit 106 transmits this transport stream TS to the reception device 200 by placing it on a broadcast wave or a network packet.
  • HDR video data obtained by imaging with the HDR camera 102 is supplied to the HDR photoelectric conversion unit 103.
  • the HDR video data obtained by the HDR camera 102 is graded using the master monitor 103a.
  • HDR video photoelectric conversion characteristics LDR OETF curve
  • the transmission video data V1 is supplied to the video encoder 104.
  • the transmission video data V1 is encoded by, for example, MPEG4-AVC, MPEG2 video, HEVC, or the like to obtain encoded video data.
  • a video stream (video elementary stream) VS including the encoded video data is generated by a stream formatter (not shown) provided in the subsequent stage.
  • the video encoder 104 inserts area information indicating an area allowing luminance conversion into the layer of the video stream.
  • area information indicating an area allowing luminance conversion into the layer of the video stream.
  • metadata indicating an area allowing luminance conversion is inserted into the layer of the video stream.
  • the transmission method 2 is adopted, as described above, the designation information of the photoelectric conversion characteristics applied in the above-described HDR photoelectric conversion unit 103, which is associated with the area where the luminance conversion is allowed, is inserted.
  • the video stream VS generated by the video encoder 104 is supplied to the system encoder 105.
  • This system encoder 105 generates an MPEG2 transport stream TS including a video stream.
  • the transport stream TS is transmitted to the receiving apparatus 200 by the transmitting unit 106 on a broadcast wave or a net packet.
  • FIG. 10 shows a configuration example of the receiving device 200.
  • the receiving apparatus 200 includes a control unit 201, a receiving unit 202, a system decoder 203, a video decoder 204, an HDR electro-optic conversion unit 205, a display mapping unit 206, and a CE monitor 207.
  • the control unit 201 includes a CPU (Central Processing Unit), and controls the operation of each unit of the receiving device 200 based on a control program stored in a storage (not shown).
  • CPU Central Processing Unit
  • the receiving unit 202 receives the transport stream TS transmitted from the transmitting device 100 on broadcast waves or net packets.
  • the system decoder 203 extracts a video stream (elementary stream) VS from the transport stream TS. Further, the system decoder 203 extracts various information inserted in the container (transport stream) layer and sends it to the control unit 201.
  • the video decoder 204 performs a decoding process on the video stream VS extracted by the system decoder 203 and outputs transmission video data V1. In addition, the video decoder 204 extracts a parameter set or SEI message inserted in each access unit constituting the video stream VS and sends it to the control unit 201.
  • the control unit 201 recognizes the OETF (photoelectric conversion characteristics) applied on the transmission side by specifying the OETF type in the video usability information (VUI) of the SPS, and the HDR electro-optic conversion unit 205 corresponds to the OETF.
  • OETF photoelectric conversion characteristics
  • VUI video usability information
  • EOTF electro-optic conversion characteristic having reverse characteristics
  • control unit 201 obtains region information (“compliant_threshold_level” and “compliant_threshold_level_value” information) indicating a region where luminance conversion is permitted from the OETF specified by the VUI. It can be detected uniquely.
  • the level mapping SEI message described above is included as one of the SEI messages extracted by the video decoder 204 and sent to the control unit 201.
  • the control unit 201 can acquire area information (information of “compliant_threshold_level” and “compliant_threshold_level_value”) indicating an area for which luminance conversion is allowed from the level mapping SEI message.
  • the HDR electro-optical conversion unit 205 corresponds to the transmission video data V1 output from the video decoder 204, for example, an EOTF (electro-optical conversion) corresponding to the OETF (photo-electric conversion characteristic) in the HDR photoelectric conversion unit 103 of the transmission device 100 described above. To obtain output video data for displaying HDR images.
  • FIG. 11 shows an example of electro-optic conversion characteristics (EOTF).
  • the horizontal axis indicates a transmission code value corresponding to the vertical axis in FIG.
  • the vertical axis represents the output luminance level (display luminance level) corresponding to the horizontal axis in FIG.
  • a solid line a is an EOTF curve.
  • the transmission code value is the peak level MP
  • the output luminance level is PL.
  • the transmission code value is the threshold level THP
  • the output luminance level is CL.
  • the output luminance level corresponding to the value of the transmission code value larger than the threshold level THP is the display mapping unit.
  • the range is allocated to the range up to the maximum display luminance level DP1 of the CE monitor 207 (high luminance processing).
  • an alternate long and two short dashes line b shows an example of luminance conversion processing in that case.
  • the output luminance level corresponding to a value whose transmission code value is larger than the threshold level THP is the display mapping unit 206. Is assigned to the range up to the display maximum brightness level DP2 of the CE monitor 207 (low brightness processing).
  • an alternate long and short dash line c indicates an example of luminance conversion processing in that case.
  • the display mapping unit 206 converts the level exceeding the luminance CL among the output luminance levels of the HDR electro-optic conversion unit 205 according to the maximum luminance display capability of the CE monitor 207 as described above.
  • the transmission code value is equal to or less than the threshold level THP, that is, the output luminance level is equal to or less than CL
  • the luminance of the reception level is faithfully reproduced without depending on the CE monitor 207. Intent is expressed correctly.
  • the CE monitor 207 displays an HDR image based on the output video data from the display mapping unit 206.
  • the display mapping processing unit 206 sets the level exceeding the luminance CL to the peak luminance DP.
  • the brightness enhancement process assigned by a predetermined algorithm is performed within the above range.
  • FIG. 12 shows the display luminance characteristics of the CE monitor 207 in that case.
  • This characteristic includes the luminance conversion characteristic of the display mapping unit 206.
  • the horizontal axis indicates the input luminance level
  • the vertical axis indicates the display luminance level.
  • the input luminance level is the threshold luminance CL
  • the relative threshold level (%) is obtained.
  • the display luminance level is the relative peak level (%) of the CE monitor 207.
  • the display mapping processing unit 206 When the maximum luminance display capability DP of the CE monitor 207 is lower than the maximum luminance PL assumed by the master monitor 103a, that is, when DP ⁇ PL, the display mapping processing unit 206 peaks the level exceeding the luminance CL. Luminance reduction processing assigned by a predetermined algorithm is performed in a range up to the luminance DP.
  • FIG. 13 shows the display luminance characteristics of the CE monitor 207 in that case.
  • This characteristic includes the luminance conversion characteristic of the display mapping unit 206.
  • the horizontal axis indicates the input luminance level
  • the vertical axis indicates the display luminance level.
  • the input luminance level is the threshold luminance CL
  • the relative threshold level (%) is obtained.
  • the display luminance level is the relative peak level (%) of the CE monitor 207.
  • the display mapping processing unit 206 performs luminance conversion at a level exceeding the luminance CL. Output as is without processing. In this case, the display on the CE monitor 207 is displayed with the production-side luminance assigned as it is in the entire area up to the peak level of the master monitor 103a.
  • the reception unit 202 receives the transport stream TS transmitted from the transmission device 100 on broadcast waves or net packets.
  • This transport stream TS is supplied to the system decoder 203.
  • the system decoder 203 extracts a video stream (elementary stream) VS from the transport stream TS.
  • the video stream VS extracted by the system decoder 203 is supplied to the video decoder 204.
  • the video decoder 204 performs a decoding process on the video stream VS extracted by the system decoder 203 to obtain transmission video data V1. Further, the video decoder 204 extracts a parameter set and SEI message inserted in each access unit constituting the video stream VS and sends the extracted parameter set and SEI message to the control unit 201.
  • the control unit 201 acquires area information (information of “compliant_threshold_level” and “compliant_threshold_level_value”) indicating an area that allows luminance conversion from the level mapping SEI message.
  • area information information of “compliant_threshold_level” and “compliant_threshold_level_value”
  • the control unit 201 uniquely identifies region information (“compliant_threshold_level” and “compliant_threshold_level_value” information) indicating a region where luminance conversion is allowed from the OETF specified by the VUI. Detected.
  • Transmission video data V1 obtained by the video decoder 204 is supplied to the HDR electro-optic conversion unit 205.
  • an EOTF electro-optic conversion characteristic
  • OETF photo-electric conversion characteristic
  • Transmission video data V1 obtained by the video decoder 204 is supplied to the HDR electro-optic conversion unit 205.
  • an EOTF electro-optic conversion characteristic having a reverse characteristic corresponding to the OETF (photo-electric conversion characteristic) in the HDR photoelectric conversion unit 103 in the transmission device 100
  • the output video data for displaying is obtained. This output video data is supplied to the display mapping unit 206.
  • the level exceeding the luminance CL among the output luminance levels of the HDR electro-optic conversion unit 205 is converted according to the maximum luminance display capability of the CE monitor 207.
  • the output video data of the display mapping unit 206 is supplied to the CE monitor 207.
  • An HDR image is displayed on the CE monitor 207.
  • the transmission video data V1 obtained by photoelectrically converting the HDR video data includes region information (“compliant_threshold_level” or “compliant_threshold_level_value” indicating a region where luminance conversion is allowed. ”)"). Therefore, on the receiving side, for example, the luminance conversion corresponding to the display luminance capability of the CE monitor 207 is performed only in the area where the luminance conversion is allowed, so that the luminance atmosphere intended by the production side can be reproduced well.
  • FIG. 14 shows an example of the relationship between the electro-optic conversion characteristics (EOTF) in the HDR electro-optic converter 205 of the receiving apparatus 200 and a plurality of sets of threshold information. This example shows a case where two pieces of threshold information are sent.
  • a solid line a is an EOTF curve.
  • the transmission code value is the peak level MP
  • the output luminance level is PL.
  • the transmission code values are threshold levels THP0 and THP1
  • the output luminance levels are CL0 and CL1, respectively.
  • the two sets of threshold information (CL0, THP0) and (CL1, THP1) are given by the level mapping SEI message.
  • the region where the transmission code value is 0 to THP0 is a region where luminance conversion is not permitted, and is a region where the display luminance level is the same on any type of CE monitor. Therefore, regarding the output luminance level of this area, the display mapping unit 206 does not perform luminance conversion processing.
  • the area where the transmission code value is THP 0 to MP is an area where luminance conversion is allowed. Therefore, regarding the output luminance level of this region, the display mapping unit 206 performs luminance conversion processing according to the maximum display capability of the CE monitor 207, for example.
  • the THP 0 to THP 1 area and the THP 1 to MP area have different luminance conversion allowable levels. For example, in the THP0 to THP1 areas, luminance conversion can be performed within a range where the texture is stored. In addition, the luminance conversion is possible for the THP1 to MP regions without any limitation.
  • a plurality of threshold information can be inserted and transmitted in the level mapping SEI message.
  • one threshold information that is basic as the specification of the OETF (photoelectric conversion characteristics) specified by the VUI is sent, and for the other threshold information, for example, a level mapping SEI message is used. And send it.
  • the threshold luminance CL is defined and used in addition to the reference luminance RL.
  • the reference luminance RL is synonymous with the threshold luminance CL.
  • information on the reference luminance RL and the reference level RP is also sent as threshold information.
  • the reference luminance RL and the reference level RP are not necessarily limited to the luminance of 100%, and it is possible to define another percentage value as a level that matches on the transmission / reception side.
  • FIG. 15 shows a structure example (Syntax) of a level mapping SEI message that is inserted into the “SEIs” portion of the access unit (AU) and transmitted when the transmission method 1 is adopted.
  • the contents (Semantics) of the main information in this structural example are the same as the level mapping SEI message shown in FIG.
  • the 16-bit field of “reference_white_level” indicates an input luminance value at 100% in the master monitor 103a, that is, a reference luminance RL, and also indicates a luminance value at a threshold level assuming display mapping.
  • FIGS. 16A and 16B show an example of OETF (photoelectric conversion characteristics) in which a region that allows luminance conversion is associated in advance when the transmission method 2 is employed.
  • the peak luminance is PL1
  • the corresponding transmission code value is MP1.
  • a reference luminance RL1 and a reference level RP1 are defined as region information indicating a region where luminance conversion is allowed.
  • the peak luminance is PL2, and the corresponding transmission code value is MP2.
  • a reference luminance RL2 and a reference level RP2 are defined as region information indicating a region where luminance conversion is allowed.
  • the HDR light-to-light conversion unit 205 performs light-light conversion processing
  • the display mapping unit 206 performs luminance conversion processing according to the maximum luminance display capability of the CE monitor 207. Indicated.
  • the electro-optical conversion process and the luminance conversion process can be performed simultaneously only by the HDR electro-optical conversion unit 205.
  • the transmission / reception system 10 including the transmission device 100 and the receiver 200 is shown, but the configuration of the transmission / reception system to which the present technology can be applied is not limited thereto.
  • the television receiver 200 has a configuration including a set top box 200A and a monitor 200B connected by a digital interface such as (High-Definition Multimedia Interface (HDMI)).
  • HDMI High-Definition Multimedia Interface
  • the set top box 200A can determine the maximum luminance level of the monitor 200B based on information obtained from the EDID of the monitor 200B via HDMI.
  • the level / mapping / SEI message, the EOTF type, and the VUI information are defined in meta information such as “Vender Specific Info ⁇ Frame”. It can be shared with the monitor 200B.
  • the container is a transport stream (MPEG-2 TS)
  • MPEG-2 TS transport stream
  • the transport is not limited to the TS, and the video layer can be realized by the same method even in the case of other packets such as ISOBMFF and MMT. Therefore, the present technology can be similarly applied to a system configured to be distributed to receiving terminals using a network such as the Internet.
  • the Internet distribution it is often distributed in a container of MP4 or other formats.
  • containers of various formats such as transport stream (MPEG-2 TS) adopted in the digital broadcasting standard and MP4 used in Internet distribution correspond to the container.
  • this technique can also take the following structures.
  • a processing unit that obtains transmission video data by applying predetermined photoelectric conversion characteristics to input video data;
  • a transmission device comprising: a transmission unit configured to transmit the transmission video data together with area information indicating an area allowing luminance conversion.
  • the transmission unit transmits a video stream obtained by encoding the transmission video data, The transmission device according to (1), further including an information insertion unit that inserts the region information into a layer of the video stream.
  • the information insertion unit The transmission apparatus according to (2), wherein metadata indicating a region that permits the luminance conversion is inserted as the region information.
  • the information insertion unit The transmission apparatus according to (2), wherein the specified information of the predetermined photoelectric conversion characteristic associated with the area allowing the luminance conversion is inserted as the area information.
  • a receiving unit that receives transmission video data obtained by applying predetermined photoelectric conversion characteristics to input video data together with area information indicating an area allowing luminance conversion; And a processing unit that applies electro-optic conversion characteristics corresponding to the predetermined photoelectric conversion characteristics to the transmission video data, and performs luminance conversion processing based on the region information to obtain output video data.
  • the reception unit receives a video stream obtained by encoding the transmission video data, The receiving apparatus according to (7), wherein the region information is inserted in a layer of the video stream.
  • the receiving device according to (8), wherein metadata indicating a region allowing the luminance conversion is inserted as the region information.
  • the receiving device (10) The receiving device according to (8), wherein the predetermined information of the predetermined photoelectric conversion characteristic associated with the area allowing the luminance conversion is inserted as the area information.
  • the reception apparatus according to any one of (7) to (10), wherein the area information includes information on a plurality of areas having different luminance conversion allowable levels.
  • a receiving step of receiving transmission video data obtained by applying predetermined photoelectric conversion characteristics to input video data together with area information indicating an area allowing luminance conversion;
  • a receiving method comprising: applying an electro-optic conversion characteristic corresponding to the predetermined photoelectric conversion characteristic to the transmission video data, and performing luminance conversion processing based on the region information to obtain output video data.
  • the main feature of this technology is that transmission video data obtained by performing photoelectric conversion on HDR video data is transmitted together with area information indicating an area where luminance conversion is allowed, thereby allowing luminance conversion on the receiving side.
  • the luminance conversion is performed only in the area to be reproduced, and the luminance atmosphere intended by the production side can be reproduced well (see FIGS. 4 and 7).

Abstract

　受信側において制作側が意図する輝度雰囲気を良好に再現する。　入力ビデオデータに所定の光電変換特性を適用して伝送ビデオデータを得る。この伝送ビデオデータを、輝度変換を許容する領域を示す領域情報と共に送信する。例えば、送信部は、伝送ビデオデータが符号化されて得られたビデオストリームを送信し、このビデオストリームのレイヤに、領域情報を挿入する。受信側では、伝送ビデオデータに所定の光電変換特性に対応する電光変換特性を適用し、さらに、領域情報に基づいて輝度変換処理を施して表示用ビデオデータを得る。

Description

送信装置、送信方法、受信装置および受信方法
　本技術は、送信装置、送信方法、受信装置および受信方法に関し、詳しくは、入力ビデオデータに所定の光電変換特性を適用して得られた伝送ビデオデータを送信する送信装置等に関する。
　ＨＤＲ（High Dynamic Range）による映像サービスは、制作側の意図を反映し、広い輝度範囲を持った映像サービスを供給して受信機側でそれを再現することによって、自然界の人間の眼の知覚に近づけた表示再生を実現するものである。
　例えば、非特許文献１には、０～１００％＊Ｎ（Ｎは１より大きい）のレベルを持つ入力ビデオデータにガンマカーブを適用して得られた伝送ビデオデータを符号化することで生成されたビデオストリームを送信することなどが記載されている。
　受信機側のモニタ（ＣＥモニタ）のピーク輝度は、表示パネルのデバイス特性やバックライト配置、設計手法によって千差万別であり、番組制作時に用いるマスターモニタに比べ、ＣＥモニタのピーク輝度は明る過ぎたり、逆にマスターモニタよりも暗かったりする。そのため、制作側の意図する輝度雰囲気の再現を正しく行えないことが起こり得る。
High Efficiency Video Coding (HEVC) text specification draft 10 (for FDIS & Last Call)
　本技術の目的は、受信側において制作側が意図する輝度雰囲気を良好に再現可能とすることにある。
　本技術の概念は、
　入力ビデオデータに所定の光電変換特性を適用して伝送ビデオデータを得る処理部と、
　上記伝送ビデオデータを、輝度変換を許容する領域を示す領域情報と共に送信する送信部とを備える
　送信装置にある。
　本技術において、処理部により、入力ビデオデータに所定の光電変換特性が適用されて伝送ビデオデータが得られる。例えば、入力ビデオデータは、従来のＬＤＲ（Low Dynamic Range）画像の白ピークの明るさを超える０％から１００％＊Ｎ（Ｎは１より大きい数）のコントラスト比を持つＨＤＲ（High Dynamic Range）画像のビデオデータである。
　送信部により、伝送ビデオデータが、輝度変換を許容する領域を示す領域情報と共に送信される。例えば、送信部は、伝送ビデオデータが符号化されて得られたビデオストリームを送信し、このビデオストリームのレイヤに、領域情報を挿入する情報挿入部をさらに備える、ようにされてよい。
　この場合、例えば、情報挿入部は、領域情報として、輝度変換を許容する領域を示すメタデータを挿入する、ようにされてもよい。また、例えば、情報挿入部は、領域情報として、輝度変換を許容する領域が関連づけられた所定の光電変換特性の指定情報を挿入する、ようにされてもよい。また、例えば、領域情報は、輝度変換の許容レベルを異にする複数の領域の情報を含む、ようにされてもよい。
　このように本技術においては、伝送ビデオデータが、輝度変換を許容する領域を示す領域情報と共に送信されるものである。そのため、受信側において、制作側が意図する輝度雰囲気を良好に再現することが可能となる。
　また、本技術の他の概念は、
　入力ビデオデータに所定の光電変換特性を適用して得られた伝送ビデオデータを、輝度変換を許容する領域を示す領域情報と共に受信する受信部と、
　上記伝送ビデオデータに上記所定の光電変換特性に対応する電光変換特性を適用すると共に、上記領域情報に基づいて輝度変換処理を施して出力ビデオデータを得る処理部とを備える
　受信装置にある。
　受信部により、伝送ビデオデータが、輝度変換を許容する領域を示す領域情報と共に、受信される。この伝送ビデオデータは、入力ビデオデータに所定の光電変換特性を適用して得られたものである。例えば、入力ビデオデータは、従来のＬＤＲ（Low Dynamic Range）画像の白ピークの明るさを超える０％から１００％＊Ｎ（Ｎは１より大きい数）のコントラスト比を持つＨＤＲ（High Dynamic Range）画像のビデオデータである。そして、処理部により、伝送ビデオデータに所定の光電変換特性に対応する、例えば逆特性の電光変換特性が適用されると共に、領域情報に基づいて輝度変換処理が施されて出力ビデオデータが得られる。
　例えば、受信部は、伝送ビデオデータが符号化されて得られるビデオストリームを受信し、領域情報は、ビデオストリームのレイヤに挿入されている、ようにされてもよい。この場合、例えば、領域情報として、輝度変換を許容する領域を示すメタデータが挿入されている、ようにされてもよい。また、例えば、領域情報として、輝度変換を許容する領域が関連づけられた所定の光電変換特性の指定情報が挿入されている、ようにされてもよい。また、例えば、領域情報は、輝度変換の許容レベルを異にする複数の領域の情報を含む、ようにされてもよい。
　このように本技術においては、伝送ビデオデータが輝度変換を許容する領域を示す領域情報と共に受信され、この領域情報に基づいて輝度変換処理が施されて出力ビデオデータが得られるものである。そのため、制作側が意図する輝度雰囲気を良好に再現することが可能となる。
　本技術によれば、受信側において制作側が意図する輝度雰囲気を良好に再現することが可能となる。なお、本明細書に記載された効果はあくまで例示であって限定されるものではなく、また付加的な効果があってもよい。
実施の形態としての送受信システムの構成例を示すブロック図である。 送受信システムを構成する送信装置の構成例を示すブロック図である。 マスターモニタの表示輝度特性の一例を示す図である。 光電変換特性（ＯＥＴＦ）の一例を示す図である。 符号化方式がＨＥＶＣである場合におけるＧＯＰの先頭のアクセスユニットを示す図である。 符号化方式がＨＥＶＣである場合におけるＧＯＰの先頭以外のアクセスユニットを示す図である。 レベル・マッピング・ＳＥＩメッセージの構造例を示す図である。 レベル・マッピング・ＳＥＩメッセージの構造例における主要な情報の内容を示す図である。 予め輝度変換を許容する領域が関連づけられているＯＥＴＦ（光電変換特性)の一例を示す図である。 送受信システムを構成する受信装置の構成例を示すブロック図である。 電光変換特性（ＥＯＴＦ）の一例を示す図である。 ＣＥモニタの表示輝度特性の一例を示す図である。 ＣＥモニタの表示輝度特性の一例を示す図である。 受信装置のＨＤＲ電光変換部における電光変換特性（ＥＯＴＦ）と、複数組の閾値情報との関係の一例を示す図である。 伝送方法１が採用される場合に送信されるレベル・マッピング・ＳＥＩメッセージの構造例を示す図である。 伝送方法２が採用される場合において、予め輝度変換を許容する領域が関連づけられているＯＥＴＦ（光電変換特性)の一例を示す図である。 送受信システムの他の構成例を示すブロック図である。
　以下、発明を実施するための形態（以下、「実施の形態」とする）について説明する。なお、説明を以下の順序で行う。
　１．実施の形態
　２．変形例
　＜１．実施の形態＞
　［送受信システムの構成例］
　図１は、実施の形態としての送受信システム１０の構成例を示している。この送受信システム１０は、送信装置１００および受信装置２００により構成されている。
　送信装置１００は、コンテナとしてのＭＰＥＧ２のトランスポートストリームＴＳを生成し、このトランスポートストリームＴＳを放送波あるいはネットのパケットに載せて送信する。このトランスポートストリームＴＳは、入力ビデオデータに所定の光電変換特性を適用して得られた伝送ビデオデータが符号化されて得られたビデオストリームを有するものである。
　例えば、入力ビデオデータは、従来のＬＤＲ（Low Dynamic Range）画像の白ピークの明るさを超える０％から１００％＊Ｎ（Ｎは１より大きい数）のコントラスト比を持つＨＤＲ（High Dynamic Range）画像のビデオデータである。ここで、１００％のレベルは、白の輝度値１００cd/m2に相当する輝度レベルを前提とする。
　ビデオストリームのレイヤに、輝度変換を許容する領域を示す領域情報が挿入される。伝送方法１を採用する場合、ビデオストリームのレイヤに、輝度変換を許容する領域を示すメタデータが挿入される。一方、伝送方法２を採用する場合、輝度変換を許容する領域が関連づけられた上述の所定の光電変換特性の指定情報が挿入される。この領域情報の詳細については、後述する。
　受信装置２００は、送信装置１００から放送波あるいはネットのパケットに載せて送られてくるトランスポートストリームＴＳを受信する。このトランスポートストリームＴＳは、符号化ビデオデータを含むビデオストリームを有している。このビデオストリームには、上述したように、輝度変換を許容する領域を示す領域情報が挿入されている。
　受信装置２００は、伝送ビデオデータに、上述した送信側における所定の光電変換特性に対応する、例えば逆特性の電光変換特性を適用すると共に、領域情報に基づいて輝度変換処理を施して出力ビデオデータを取得する。この場合、輝度変換を許容する領域のみ、例えばモニタのピーク輝度に依存した輝度変換がなされる。
　「送信装置の構成例」
　図２は、送信装置１００の構成例を示している。この送信装置１００は、制御部１０１と、ＨＤＲカメラ１０２と、ＨＤＲ光電変換部１０３と、ビデオエンコーダ１０４と、システムエンコーダ１０５と、送信部１０６を有している。制御部１０１は、ＣＰＵ（Central Processing Unit）を備えて構成され、図示しないストレージに格納されている制御プログラムに基づいて、送信装置１００の各部の動作を制御する。
　ＨＤＲカメラ１０２は、被写体を撮像して、ＨＤＲ（High Dynamic Range）ビデオデータを出力する。このＨＤＲビデオデータは、従来のＬＤＲ（Low Dynamic Range）画像の白ピークの明るさを超える０～１００％＊Ｎ（Ｎは１より大きい数）、例えば０～１０００％などのコントラスト比を持つ。ここで、１００％のレベルは、例えば、白の輝度値１００cd/m2に相当する。なお、「cd/m2」は、「cd/平方メートル」を表している。
　マスターモニタ１０３ａは、ＨＤＲカメラ１０２で得られるＨＤＲビデオデータをグレーディングするためのモニタである。このマスターモニタ１０３ａは、ＨＤＲビデオデータに対応した、あるいは、ＨＤＲビデオデータをグレーディングするのに適した表示輝度レベルを持っている。
　図３は、マスターモニタ１０３ａの表示輝度特性を示している。この図において、横軸は入力輝度レベルを示し、縦軸は表示輝度レベルを示す。入力輝度レベルがリファレンス輝度ＲＬであるとき、表示輝度レベルは相対リファレンスレベル（％）、例えば白の輝度値１００cd/m2に相当する１００％となる。また、入力輝度レベルがピーク輝度ＰＬであるとき、表示輝度レベルは相対ピークレベル（％）となる。
　なお、閾値輝度ＣＬは、この実施の形態において新規定義するものであり、受信機側のモニタ（ＣＥモニタ）で表示する輝度として一致させる領域と、ＣＥモニタ依存とする領域との境界を示す。モニタ入力輝度レベルが閾値輝度ＣＬであるとき、表示輝度レベルは相対閾値レベル（％）となる。
　図２に戻って、ＨＤＲ光電変換部１０３は、ＨＤＲカメラ１０２で得られるＨＤＲビデオデータに対して、ＨＤＲ画像用の光電変換特性（ＨＤＲ ＯＥＴＦカーブ）を適用して、伝送ビデオデータＶ１を得る。
　図４は、光電変換特性（ＯＥＴＦ）の一例を示している。この図において、横軸は、上述のマスターモニタ表示輝度特性（図３参照）の横軸と同じく、入力輝度レベルを示し、縦軸は伝送符号値を示す。入力輝度レベルがリファレンス輝度ＲＬであるとき、伝送符号値はリファレンスレベルＲＰとなる。また、入力輝度レベルがピーク輝度ＰＬであるとき、伝送符号値はピークレベルＭＰとなる。また、入力輝度レベルが閾値輝度ＣＬであるとき、伝送符号値は閾値レベルＴＨＰとなる。
　なお、縦軸の伝送符号値の範囲は、ビデオエンコーダ１０４の入力ピクセルデータレンジ（Encoder input pixel data range）に対応する。例えば、１０ビット符号化の場合は、「６４」～「９４０」、あるいは拡張領域を利用すると「４」～「１０１９」の範囲となる。
　図２に戻って、ビデオエンコーダ１０４は、伝送ビデオデータＶ１に対して、例えば、ＭＰＥＧ４－ＡＶＣ、ＭＰＥＧ２ｖｉｄｅｏ、あるいはＨＥＶＣ（high Efficiency Video Coding）などの符号化を施して、符号化ビデオデータを得る。また、このビデオエンコーダ１０４は、後段に備えるストリームフォーマッタ（図示せず）により、この符号化ビデオデータを含むビデオストリーム（ビデオエレメンタリストリーム）を生成する。
　この際、ビデオエンコーダ１０４は、ビデオストリームのレイヤに、表示側に依存した輝度変換を許容する領域を示す領域情報を挿入する。伝送方法１を採用する場合、ビデオストリームのレイヤに、輝度変換を許容する領域を示すメタデータを挿入する。伝送方法２を採用する場合、輝度変換を許容する領域が関連づけられた、上述のＨＤＲ光電変換部１０３で適用される光電変換特性の指定情報を挿入する。
　［領域情報の挿入］
　輝度変換を許容する領域を示す領域情報の挿入の詳細を説明する。
　「伝送方法１を採用する場合」
　最初に伝送方法１を採用する場合について説明する。アクセスユニット（ＡＵ）の“ＳＥＩｓ”の部分に、新規定義する、レベル・マッピング・ＳＥＩメッセージ（Level_mapping SEI message）を挿入する。
　図５は、符号化方式がＨＥＶＣである場合におけるＧＯＰ（Group Of Pictures）の先頭のアクセスユニットを示している。また、図６は、符号化方式がＨＥＶＣである場合におけるＧＯＰの先頭以外のアクセスユニットを示している。ＨＥＶＣの符号化方式の場合、画素データが符号化されているスライス（slices）の前にデコード用のＳＥＩメッセージ群「Prefix_SEIs」が配置され、このスライス（slices）の後に表示用のＳＥＩメッセージ群「Suffix_SEIs」が配置される。図５、図６に示すように、レベル・マッピング・ＳＥＩメッセージは、ＳＥＩメッセージ群「Suffix_SEIs」として配置される。
　図７は、レベル・マッピング・ＳＥＩメッセージの構造例(Syntax)を示している。図８は、その構造例における主要な情報の内容（Semantics）を示している。「level_mapping_cancel_flag」は、１ビットのフラグ情報である。“１”は、それまでのレベル・マッピング(Level_mapping）のメッセージ状態をキャンセルすることを示す。“０”は、各要素を伝送し、それで以前の状態をリフレッシュすることを示す。
　「coded_data_bit_depth」の８ビットフィールドは、符号化データのビット長を示し、例えば８～１４ビットが使用される。「reference_white_level」の１６ビットフィールドは、マスターモニタ１０３ａにおける１００％のときの入力輝度値、つまりリファレンス輝度ＲＬを示す。「reference_white_level_code_value」の１６ビットフィールドは、輝度１００％のレベル符号値で「coded_data_bit_depth」で示されるビット精度での値、つまりリファレンスレベルＲＰを示す。
　「number_of_thresholds」の８ビットフィールドは、表示マッピングの閾値分割の数を示す。この閾値分割の数だけ、「compliant_threshold_level」の１６ビットフィールドおよび「compliant_threshold_level_value」の１６ビットフィールドが繰り返し存在する。この実施の形態では「１」である。
　「compliant_threshold_level」のフィールドは、表示マッピングを想定する閾値レベル（パーセンテージ）を示すもので、輝度１００％に対する相対的なレベル、つまり閾値輝度ＣＬを示す。「compliant_threshold_level_value」のフィールドは、表示マッピングを想定する閾値を伝送する符号値、つまり閾値レベルＴＨＰを示す。この値は、制作側が想定するＣＥモニタ表示において一致させたい輝度の最大値で、この値を超えるレベルはＣＥモニタの表示能力に依存して変えることを許容する領域（範囲）であることを示す。
　なお、この定義は、一個目の閾値に対するものである。この閾値より大きな値の二個目以降の閾値が存在する場合には、それらの閾値は、輝度変換の許容レベルを異にする複数の領域の情報（領域分割情報）となる。
　「peak_percentage」の８ビットフィールドは、制作側で最大輝度レベルを１００％に対する割合で表した値を示す。例えば、ピーク輝度１０００cd/m2の「peak_percentage」は１０００％となる。「peak_percentage_value」の１６ビットフィールドは、「coded_data_bit_depth」で示されるビット精度で伝送する場合の「peak_percentage」を表現する最大符号値、つまりピークレベルＭＰを示す。例えば、「peak_percentage」が１０００％の場合、１０ビット伝送時の最大値「１０１９」が１０００％を表現することになる。
　上述のレベル・マッピング・ＳＥＩメッセージにおいて、「compliant_threshold_level」や「compliant_threshold_level_value」の情報は、輝度変換を許容する領域を示す領域情報を構成している。これにより、受信側では、レベル・マッピング・ＳＥＩメッセージから、輝度変換を許容する領域を示す領域情報を検知できる。この伝送方法１を採用する場合、輝度変換を許容する領域を、ピクチャ毎、あるいはシーン毎、あるいは番組毎などに指定できる。なお、伝送方法１を採用する場合、対象となるＯＥＴＦ（光電変換特性)のタイプは、ＳＰＳ（sequence parameter set）のＮＡＬユニットに、ビデオ・ユーザビリティ情報（ＶＵＩ）の中で伝送されることを前提とする。
　「伝送方法２を採用する場合」
　次に、伝送方法２を採用する場合について説明する。図５に示すように、ＧＯＰの先頭のアクセスユニットのＳＰＳ（sequence parameter set）のＮＡＬユニットに、ビデオ・ユーザビリティ情報（ＶＵＩ）が挿入されている。
　ＶＵＩは、ＳＰＳとしてシーケンス単位で符号化されるヘッダ情報の中でも、バッファ管理のタイミング情報の他、デコード後の表示制御に関するパラメータを指定するもので、画面のアスペクト比、色域、ＯＥＴＦ（光電変換特性)のタイプ、ＲＧＢ変換マトリクスのタイプ、などの画像の表示へ至る制御方法を示す情報をコンテナする。
　このうちＯＥＴＦのタイプについては、現状では、「Type = 1」として、“Rec. ITU-R BT.709-5”を、また、「Type = 14」として、“Rec. ITU-R BT.2020 for 10 bit”を、指定可能となっている。これらの２つのタイプのＯＥＴＦの伝達関数は等しく、以下の通りである。
　V = 1.099 * Lc0.45 ? 0.099　　　 for 1 > = Lc >= 0.018
　V = 4.500 * Lc　　　　　　　　　　　　for 0.018 > Lc >= 0
　受信側は、上記の逆関数をＥＯＴＦ、あるいは逆ＯＥＴＦとして変換することが前提となる。
　この実施の形態において、ＨＤＲ光電変換部１０３で適用されるＯＥＴＦは、予め輝度変換を許容する領域が関連づけられているＯＥＴＦのうちのいずれかとされる。具体的には、個々のＯＥＴＦ毎に、例えば、以下の各情報が、その仕様として定義されている。ここで、「compliant_threshold_level」や「compliant_threshold_level_value」の情報は、輝度変換を許容する領域を示す領域情報を構成している。なお、詳細説明は省略するが、各情報の内容は、上述のレベル・マッピング・ＳＥＩメッセージの対応する情報と同じである。
　「coded_data_bit_depth」
　「reference_white_level」
　「reference_white_level_code_value」
　「compliant_threshold_level」
　「compliant_threshold_level_value」
　「peak_percentage」
　「peak_percentage_value」
　図９（ａ），（ｂ）は、予め輝度変換を許容する領域が関連づけられているＯＥＴＦ（光電変換特性)の一例を示している。図９（ａ）に示すタイプ１のＯＥＴＦでは、ピーク輝度がＰＬ１であり、それに対応する伝送符号値はＭＰ１とされている。このタイプ１のＯＥＴＦには、輝度変換を許容する領域を示す領域情報として、閾値輝度ＣＬ１と、閾値レベルＴＨＰ１が定義されている。また、図９（ｂ）に示すタイプ２のＯＥＴＦでは、ピーク輝度がＰＬ２であり、それに対応する伝送符号値はＭＰ２とされている。このタイプ２のＯＥＴＦには、輝度変換を許容する領域を示す領域情報として、閾値輝度ＣＬ２と、閾値レベルＴＨＰ２が定義されている。
　そして、ＶＵＩで、ＨＤＲ光電変換部１０３で適用されるＯＥＴＦ、つまり予め輝度変換を許容する領域が関連づけられているＯＥＴＦが指定される。これにより、受信側では、ＶＵＩで指定されているＯＥＴＦから、輝度変換を許容する領域を示す領域情報を一意に検知できる。
　なお、ＥＯＴＦ（電光変換特性）は、ＯＥＴＦ（光電変換特性）の逆の変換式となる場合が多い。そのため、輝度変換を許容する領域を示す領域情報（「compliant_threshold_level」や「compliant_threshold_level_value」の情報）をＯＥＴＦの仕様として定義することで、表示側も代表させることができる。
　図２に戻って、システムエンコーダ１０５は、ビデオエンコーダ１０４で生成されたビデオストリームＶＳを含むトランスポートストリームＴＳを生成する。そして、送信部１０６は、このトランスポートストリームＴＳを、放送波あるいはネットのパケットに載せて、受信装置２００に送信する。
　図２に示す送信装置１００の動作を簡単に説明する。ＨＤＲカメラ１０２で撮像されて得られたＨＤＲビデオデータは、ＨＤＲ光電変換部１０３に供給される。ＨＤＲカメラ１０２で得られるＨＤＲビデオデータは、マスターモニタ１０３ａを用いてグレーディングされる。このＨＤＲ光電変換部１０３では、このＨＤＲビデオデータに対してＨＤＲ画像用の光電変換特性（ＬＤＲ ＯＥＴＦカーブ）が適用されて、伝送ビデオデータＶ１が得られる。この伝送ビデオデータＶ１は、ビデオエンコーダ１０４に供給される。
　ビデオエンコーダ１０４では、伝送ビデオデータＶ１に対して、例えば、ＭＰＥＧ４－ＡＶＣ、ＭＰＥＧ２ｖｉｄｅｏ、あるいはＨＥＶＣなどの符号化が施されて、符号化ビデオデータが得られる。また、このビデオエンコーダ１０４では、後段に備えるストリームフォーマッタ（図示せず）により、この符号化ビデオデータを含むビデオストリーム（ビデオエレメンタリストリーム）ＶＳが生成される。
　この際、ビデオエンコーダ１０４では、ビデオストリームのレイヤに、輝度変換を許容する領域を示す領域情報が挿入される。伝送方法１が採用される場合、上述したように、ビデオストリームのレイヤに、輝度変換を許容する領域を示すメタデータが挿入される。また、伝送方法２が採用される場合、上述したように、輝度変換を許容する領域が関連づけられた、上述のＨＤＲ光電変換部１０３で適用される光電変換特性の指定情報が挿入される。
　ビデオエンコーダ１０４で生成されたビデオストリームＶＳは、システムエンコーダ１０５に供給される。このシステムエンコーダ１０５では、ビデオストリームを含むＭＰＥＧ２のトランスポートストリームＴＳが生成される。このトランスポートストリームＴＳは、送信部１０６により、放送波あるいはネットのパケットに載せて、受信装置２００に送信される。
　「受信装置の構成例」
　図１０は、受信装置２００の構成例を示している。この受信装置２００は、制御部２０１と、受信部２０２と、システムデコーダ２０３と、ビデオデコーダ２０４と、ＨＤＲ電光変換部２０５と、表示マッピング部２０６と、ＣＥモニタ２０７を有している。制御部２０１は、ＣＰＵ（Central Processing Unit）を備えて構成され、図示しないストレージに格納されている制御プログラムに基づいて、受信装置２００の各部の動作を制御する。
　受信部２０２は、送信装置１００から放送波あるいはネットのパケットに載せて送られてくるトランスポートストリームＴＳを受信する。システムデコーダ２０３は、このトランスポートストリームＴＳからビデオストリーム（エレメンタリストリーム）ＶＳを抽出する。また、システムデコーダ２０３は、コンテナ（トランスポートストリーム）のレイヤに挿入されている種々の情報を抽出し、制御部２０１に送る。
　ビデオデコーダ２０４は、システムデコーダ２０３で抽出されるビデオストリームＶＳに対して復号化処理を行って、伝送ビデオデータＶ１を出力する。また、ビデオデコーダ２０４は、ビデオストリームＶＳを構成する各アクセスユニットに挿入されているパラメータセットやＳＥＩメッセージを抽出し、制御部２０１に送る。
　制御部２０１は、ＳＰＳのビデオ・ユーザビリティ情報（ＶＵＩ）におけるＯＥＴＦのタイプ指定によって、送信側で適用されているＯＥＴＦ（光電変換特性）を認識し、ＨＤＲ電光変換部２０５に、そのＯＥＴＦに対応する、例えば逆特性のＥＯＴＦ（電光変換特性）を設定する。
　また、制御部２０１は、上述の伝送方法２が採用されている場合、ＶＵＩで指定されているＯＥＴＦから、輝度変換を許容する領域を示す領域情報（「compliant_threshold_level」や「compliant_threshold_level_value」の情報）を一意に検知できる。
　また、上述の伝送方法１が採用されている場合、ビデオデコーダ２０４で抽出されて制御部２０１に送られるＳＥＩメッセージの一つして、上述したレベル・マッピング・ＳＥＩメッセージが含まる。制御部２０１は、このレベル・マッピング・ＳＥＩメッセージから、輝度変換を許容する領域を示す領域情報（「compliant_threshold_level」や「compliant_threshold_level_value」の情報）を取得できる。
　ＨＤＲ電光変換部２０５は、ビデオデコーダ２０４から出力される伝送ビデオデータＶ１に、上述した送信装置１００のＨＤＲ光電変換部１０３におけるＯＥＴＦ（光電変換特性）に対応する、例えば逆特性のＥＯＴＦ（電光変換特性）を適用して、ＨＤＲ画像を表示するための出力ビデオデータを得る。
　図１１は、電光変換特性（ＥＯＴＦ）の一例を示している。この図において、横軸は、図４の縦軸に対応した、伝送符号値を示す。縦軸は、図４の横軸に対応した、出力輝度レベル（表示輝度レベル）を示す。この図において、実線ａは、ＥＯＴＦカーブである。伝送符号値がピークレベルＭＰであるとき、出力輝度レベルはＰＬとなる。また、伝送符号値が閾値レベルＴＨＰであるとき、出力輝度レベルはＣＬとなる。
　ここで、ＣＥモニタ２０７の最大輝度表示能力が、マスターモニタ１０３ａの想定する最大輝度ＰＬよりも上の場合、伝送符号値が閾値レベルＴＨＰよりも大きい値に対応した出力輝度レベルは、表示マッピング部２０６における処理によって、ＣＥモニタ２０７の表示最大輝度レベルＤＰ１までの範囲に、割り当てられる（高輝度化処理）。この図において、二点鎖線ｂは、その場合における、輝度変換処理の一例を示している。
　一方、ＣＥモニタ２０７の最大輝度表示能力が、マスターモニタ１０３ａの想定する最大輝度ＰＬよりも下の場合、伝送符号値が閾値レベルＴＨＰよりも大きい値に対応した出力輝度レベルは、表示マッピング部２０６における処理によって、ＣＥモニタ２０７の表示最大輝度レベルＤＰ２までの範囲に、割り当てられる（低輝度化処理）。この図において、一点鎖線ｃは、その場合における、輝度変換処理の一例を示している。
　図１０に戻って、表示マッピング部２０６は、ＨＤＲ電光変換部２０５の出力輝度レベルのうち、輝度ＣＬを越えるレベルを、上述したようにＣＥモニタ２０７の最大輝度表示能力に応じて変換する。この場合、伝送符号値が閾値レベルＴＨＰ以下、つまり出力輝度レベルがＣＬ以下では、ＣＥモニタ２０７に依存せずに、受信レベルの輝度が忠実に再現されることから、テクスチャー表現などは制作側の意図が正しく表現される。ＣＥモニタ２０７は、表示マッピング部２０６の出力ビデオデータに基づいて、ＨＤＲ画像を表示する。
　ＣＥモニタ２０７の最大輝度表示能力ＤＰが、マスターモニタ１０３ａの想定する最大輝度ＰＬよりも上の場合、つまりＤＰ＞ＰＬの場合、表示マッピング処理部２０６では、輝度ＣＬを越えるレベルを、ピーク輝度ＤＰまでの範囲に、所定のアルゴリズムにより割り当てる高輝度化処理が行われる。
　図１２は、その場合におけるＣＥモニタ２０７の表示輝度特性を示している。この特性は、表示マッピング部２０６の輝度変換特性も含めたものである。この図において、横軸は入力輝度レベルを示し、縦軸は表示輝度レベルを示す。入力輝度レベルが閾値輝度ＣＬであるとき、相対閾値レベル（％）となる。また、入力輝度レベルがピーク輝度ＰＬであるとき、表示輝度レベルはＣＥモニタ２０７の相対ピークレベル（％）となる。
　また、ＣＥモニタ２０７の最大輝度表示能力ＤＰが、マスターモニタ１０３ａの想定する最大輝度ＰＬよりも下の場合、つまりＤＰ＜ＰＬの場合、表示マッピング処理部２０６では、輝度ＣＬを越えるレベルを、ピーク輝度ＤＰまでの範囲に、所定のアルゴリズムにより割り当てる低輝度化処理が行われる。
　図１３は、その場合におけるＣＥモニタ２０７の表示輝度特性を示している。この特性は、表示マッピング部２０６の輝度変換特性も含めたものである。この図において、横軸は入力輝度レベルを示し、縦軸は表示輝度レベルを示す。入力輝度レベルが閾値輝度ＣＬであるとき、相対閾値レベル（％）となる。また、入力輝度レベルがピーク輝度ＰＬであるとき、表示輝度レベルはＣＥモニタ２０７の相対ピークレベル（％）となる。
　また、ＣＥモニタ２０７の最大輝度表示能力ＤＰが、マスターモニタ１０３ａの想定する最大輝度ＰＬと同じである場合、つまりＤＰ＝ＰＬの場合、表示マッピング処理部２０６では、輝度ＣＬを越えるレベルの輝度変換処理を行わずに、そのまま出力する。この場合、ＣＥモニタ２０７の表示は、マスターモニタ１０３ａのピークレベルまでの全域において、制作側の輝度がそのまま割り当てられて表示される。
　図１０に示す受信装置２００の動作を簡単に説明する。受信部２０２では、送信装置１００から放送波あるいはネットのパケットに載せて送られてくるトランスポートストリームＴＳが受信される。このトランスポートストリームＴＳは、システムデコーダ２０３に供給される。システムデコーダ２０３では、このトランスポートストリームＴＳからビデオストリーム（エレメンタリストリーム）ＶＳが抽出される。
　システムデコーダ２０３で抽出されたビデオストリームＶＳは、ビデオデコーダ２０４に供給される。ビデオデコーダ２０４では、システムデコーダ２０３で抽出されるビデオストリームＶＳに対して復号化処理が行われて、伝送ビデオデータＶ１が得られる。また、ビデオデコーダ２０４では、ビデオストリームＶＳを構成する各アクセスユニットに挿入されているパラメータセットやＳＥＩメッセージが抽出され、制御部２０１に送られる。
　制御部２０１では、伝送方法１が採用されている場合、レベル・マッピング・ＳＥＩメッセージから、輝度変換を許容する領域を示す領域情報（「compliant_threshold_level」や「compliant_threshold_level_value」の情報）が取得される。また、制御部２０１では、伝送方法２が採用されている場合、ＶＵＩで指定されているＯＥＴＦから、輝度変換を許容する領域を示す領域情報（「compliant_threshold_level」や「compliant_threshold_level_value」の情報）が一意に検知される。
　ビデオデコーダ２０４で得られる伝送ビデオデータＶ１は、ＨＤＲ電光変換部２０５に供給される。ＨＤＲ電光変換部２０５では、伝送ビデオデータＶ１に、送信装置１００におけるＨＤＲ光電変換部１０３におけるＯＥＴＦ（光電変換特性）に対応する、例えば逆特性のＥＯＴＦ（電光変換特性）が適用されて、ＨＤＲ画像を表示するための出力ビデオデータが得られる。この出力ビデオデータは、表示マッピング部２０６に供給される。
　表示マッピング部２０６では、ＨＤＲ電光変換部２０５の出力輝度レベルのうち、輝度ＣＬを越えるレベルが、ＣＥモニタ２０７の最大輝度表示能力に応じて変換される。表示マッピング部２０６の出力ビデオデータはＣＥモニタ２０７に供給される。このＣＥモニタ２０７に、ＨＤＲ画像が表示される。
　上述したように、図１に示す送受信システム１０において、ＨＤＲビデオデータに光電変換が施されて得られた伝送ビデオデータＶ１が、輝度変換を許容する領域を示す領域情報（「compliant_threshold_level」や「compliant_threshold_level_value」の情報）と共に送信されるものである。従って、受信側では、輝度変換を許容する領域でのみ、例えばＣＥモニタ２０７の表示輝度能力に応じた輝度変換が行われるため、制作側が意図する輝度雰囲気を良好に再現することが可能となる。
　＜２．変形例＞
　なお、上述実施の形態において、伝送方法１が採用される場合は、アクセスユニット（ＡＵ）の“ＳＥＩｓ”の部分に、新規定義する、レベル・マッピング・ＳＥＩメッセージ（図７参照）が挿入される。上述実施の形態では、このレベル・マッピング・ＳＥＩメッセージで、「compliant_threshold_level」および「compliant_threshold_level_value」の情報（閾値情報）を一つだけ送る例を示したが、この閾値情報を複数送ることも考えられる。
　図１４は、受信装置２００のＨＤＲ電光変換部２０５における電光変換特性（ＥＯＴＦ）と、複数組の閾値情報との関係の一例を示している。この例は、２つの閾値情報が送られる場合を示している。この図において、実線ａは、ＥＯＴＦカーブである。伝送符号値がピークレベルＭＰであるとき、出力輝度レベルはＰＬとなる。
　また、伝送符号値が閾値レベルＴＨＰ０，ＴＨＰ１であるとき、それぞれ、出力輝度レベルはＣＬ０，ＣＬ１となる。ここで、（ＣＬ０，ＴＨＰ０）、（ＣＬ１，ＴＨＰ１）の２組の閾値情報は、レベル・マッピング・ＳＥＩメッセージで与えられたものである。この場合、伝送符号値が０～ＴＨＰ０の領域は、輝度変換を許容しない領域とされ、どのようなタイプのＣＥモニタでも表示輝度レベルが一致する領域とされる。そのため、この領域の出力輝度レベルに関しては、表示マッピング部２０６で輝度変換の処理はされない。
　伝送符号値がＴＨＰ０～ＭＰの領域は、輝度変換を許容する領域とされる。そのため、この領域の出力輝度レベルに関しては、表示マッピング部２０６で、例えばＣＥモニタ２０７の最大表示能力に応じて輝度変換の処理がされる。ただし、ＴＨＰ０～ＴＨＰ１の領域とＴＨＰ１～ＭＰの領域とは、輝度変換の許容レベルを異なるものとされる。例えば、ＴＨＰ０～ＴＨＰ１の領域はテクスチャーが保存される範囲で輝度変換が可能とされる。また、ＴＨＰ１～ＭＰの領域は何ら制限なく輝度変換が可能とされる。
　このように、閾値情報を複数送ることで、受信側における表示マッピング処理にバリエーションを持たせることが可能となり、制作側の画像の雰囲気を、より柔軟に、多様なＣＥモニタ２０７に対して再現することが可能となる。
　上述したように伝送方法１が採用される場合は、レベル・マッピング・ＳＥＩメッセージに複数の閾値情報を挿入して送ることができる。伝送方法２が採用される場合は、ＶＵＩで指定されるＯＥＴＦ（光電変換特性）の仕様として基本となる１つの閾値情報を送り、その他の閾値情報に関しては、例えばレベル・マッピング・ＳＥＩメッセージを利用して送ることが考えられる。
　また、上述実施の形態においては、リファレンス輝度ＲＬの他に、閾値輝度ＣＬを定義して用いる例を示した。しかし、リファレンス輝度ＲＬを閾値輝度ＣＬと同義にし、運用することも考えられる。この場合、リファレンス輝度ＲＬとリファレンスレベルＲＰ（図４参照）の情報が閾値情報としても送られることとなる。この場合、閾値輝度ＣＬと閾値レベルＴＨＰの情報を送ることは不要となる。その場合、リファレンス輝度ＲＬとリファレンスレベルＲＰとは、必ずしも輝度１００％に限定されるものではなく、別のパーセント値を送受信側で一致したレベルと定義することが可能である。
　図１５は、伝送方法１が採用される場合にアクセスユニット（ＡＵ）の“ＳＥＩｓ”の部分に挿入して送信するレベル・マッピング・ＳＥＩメッセージの構造例(Syntax)を示している。この構造例における主要な情報の内容（Semantics）は、上述の図７に示すレベル・マッピング・ＳＥＩメッセージと同様である。ただし、「reference_white_level」の１６ビットフィールドは、マスターモニタ１０３ａにおける１００％のときの入力輝度値、つまりリファレンス輝度ＲＬを示すと同時に、表示マッピングを想定する閾値レベルの輝度値も示す。
　図１６（ａ），（ｂ）は、伝送方法２が採用される場合において、予め輝度変換を許容する領域が関連づけられているＯＥＴＦ（光電変換特性)の一例を示している。図１６（ａ）に示すタイプ１のＯＥＴＦでは、ピーク輝度がＰＬ１であり、それに対応する伝送符号値はＭＰ１とされている。このタイプ１のＯＥＴＦには、輝度変換を許容する領域を示す領域情報として、リファレンス輝度ＲＬ１と、リファレンスレベルＲＰ１が定義されている。また、図１６（ｂ）に示すタイプ２のＯＥＴＦでは、ピーク輝度がＰＬ２であり、それに対応する伝送符号値はＭＰ２とされている。このタイプ２のＯＥＴＦには、輝度変換を許容する領域を示す領域情報として、リファレンス輝度ＲＬ２と、リファレンスレベルＲＰ２が定義されている。
　また、上述の実施の形態において、受信装置２００では、ＨＤＲ電光変換部２０５で電光変換処理を行うと共に、表示マッピング部２０６でＣＥモニタ２０７の最大輝度表示能力に応じた輝度変換処理を行う例を示した。しかし、電光変換特性（ＥＯＴＦ）に輝度変換特性を反映させておくことで、ＨＤＲ電光変換部２０５のみで電光変換処理と輝度変換処理とを同時に行わせることができる。
　また、上述実施の形態においては、送信装置１００と受信機２００からなる送受信システム１０を示したが、本技術を適用し得る送受信システムの構成は、これに限定されるものではない。例えば、図１７に示すように、テレビ受信機２００の部分が、例えば、（ＨＤＭＩ（High-Definition Multimedia Interface）などのデジタルインタフェースで接続されたセットトップボックス２００Ａおよびモニタ２００Ｂからなる構成などであってもよい。なお、「ＨＤＭＩ」は、登録商標である。
　この場合、セットトップボックス２００Ａは、表示マッピング処理を行う場合、モニタ２００Ｂの最大輝度レベルを、ＨＤＭＩ経由で、モニタ２００ＢのＥＤＩＤから得る情報に基づいて判断することが可能である。あるいは、表示マッピング処理をモニタ２００Ｂが行う場合、レベル・マッピング・ＳＥＩメッセージ、ＥＯＴＦのタイプ、そしてＶＵＩの情報は、“Vender Specific Info Frame”などのメタ情報に定義することにより、セットトップボックス２００Ａとモニタ２００Ｂとで共有することが可能である。
　また、上述実施の形態においては、コンテナがトランスポートストリーム（ＭＰＥＧ－２　ＴＳ）である例を示した。しかし、本技術は、トランスポートがＴＳと限定されるものではなく、他のパケット、例えばＩＳＯＢＭＦＦやＭＭＴなどの場合でも、ビデオのレイヤは同一の方法で実現できる。よって、本技術は、インターネット等のネットワークを利用して受信端末に配信される構成のシステムにも同様に適用できる。インターネットの配信では、ＭＰ４やそれ以外のフォーマットのコンテナで配信されることが多い。つまり、コンテナとしては、デジタル放送規格で採用されているトランスポートストリーム（ＭＰＥＧ－２　ＴＳ）、インターネット配信で使用されているＭＰ４などの種々のフォーマットのコンテナが該当する。
　また、本技術は、以下のような構成を取ることもできる。
　（１）入力ビデオデータに所定の光電変換特性を適用して伝送ビデオデータを得る処理部と、
　上記伝送ビデオデータを、輝度変換を許容する領域を示す領域情報と共に送信する送信部とを備える
　送信装置。
　（２）上記送信部は、上記伝送ビデオデータが符号化されて得られたビデオストリームを送信し、
　上記ビデオストリームのレイヤに、上記領域情報を挿入する情報挿入部をさらに備える
　前記（１）に記載の送信装置。
　（３）上記情報挿入部は、
　上記領域情報として、上記輝度変換を許容する領域を示すメタデータを挿入する
　前記（２）に記載の送信装置。
　（４）上記情報挿入部は、
　上記領域情報として、上記輝度変換を許容する領域が関連づけられた上記所定の光電変換特性の指定情報を挿入する
　前記（２）に記載の送信装置。
　（５）上記領域情報は、輝度変換の許容レベルを異にする複数の領域の情報を含む
　前記（１）から（４）のいずれかに記載の送信装置。
　（６）入力ビデオデータに所定の光電変換特性を適用して伝送ビデオデータを得る処理ステップと、
　送信部により、上記伝送ビデオデータを、輝度変換を許容する領域を示す領域情報と共に送信する送信ステップとを有する
　送信方法。
　（７）入力ビデオデータに所定の光電変換特性を適用して得られた伝送ビデオデータを、輝度変換を許容する領域を示す領域情報と共に受信する受信部と、
　上記伝送ビデオデータに上記所定の光電変換特性に対応する電光変換特性を適用すると共に、上記領域情報に基づいて輝度変換処理を施して出力ビデオデータを得る処理部とを備える
　受信装置。
　（８）上記受信部は、上記伝送ビデオデータが符号化されて得られるビデオストリームを受信し、
　上記領域情報は、上記ビデオストリームのレイヤに挿入されている
　前記（７）に記載の受信装置。
　（９）上記領域情報として、上記輝度変換を許容する領域を示すメタデータが挿入されている
　前記（８）に記載の受信装置。
　（１０）上記領域情報として、上記輝度変換を許容する領域が関連づけられた上記所定の光電変換特性の指定情報が挿入されている
　前記（８）に記載の受信装置。
　（１１）上記領域情報は、輝度変換の許容レベルを異にする複数の領域の情報を含む
　前記（７）から（１０）のいずれかに記載の受信装置。
　（１２）受信部により、入力ビデオデータに所定の光電変換特性を適用して得られた伝送ビデオデータを、輝度変換を許容する領域を示す領域情報と共に受信する受信ステップと、
　上記伝送ビデオデータに上記所定の光電変換特性に対応する電光変換特性を適用すると共に、上記領域情報に基づいて輝度変換処理を施して出力ビデオデータを得る処理ステップとを有する
　受信方法。
　本技術の主な特徴は、ＨＤＲビデオデータに光電変換が施されて得られた伝送ビデオデータを、輝度変換を許容する領域を示す領域情報と共に送信することで、受信側において、輝度変換を許容する領域でのみ輝度変換が行われるようにし、制作側が意図する輝度雰囲気を良好に再現することを可能としたことである（図４、図７参照）。
　１０，１０Ａ・・・送受信システム
　１００・・・送信装置
　１０１・・・制御部
　１０２・・・ＨＤＲカメラ
　１０３・・・ＨＤＲ光電変換部
　１０３ａ・・・マスターモニタ
　１０４・・・ビデオエンコーダ
　１０５・・・システムエンコーダ
　１０６・・・送信部
　２００・・・受信装置
　２００Ａ・・・セットアップボックス
　２００Ｂ・・・モニタ
　２０１・・・制御部
　２０２・・・受信部
　２０３・・・システムデコーダ
　２０４・・・ビデオデコーダ
　２０５・・・ＨＤＲ電光変換部
　２０６・・・表示マッピング部
　２０７・・・ＣＥモニタ

Claims (12)

  1. 　入力ビデオデータに所定の光電変換特性を適用して伝送ビデオデータを得る処理部と、
    　上記伝送ビデオデータを、輝度変換を許容する領域を示す領域情報と共に送信する送信部とを備える
    　送信装置。
  2. 　上記送信部は、上記伝送ビデオデータが符号化されて得られたビデオストリームを送信し、
    　上記ビデオストリームのレイヤに、上記領域情報を挿入する情報挿入部をさらに備える
    　請求項１に記載の送信装置。
  3. 　上記情報挿入部は、
    　上記領域情報として、上記輝度変換を許容する領域を示すメタデータを挿入する
    　請求項２に記載の送信装置。
  4. 　上記情報挿入部は、
    　上記領域情報として、上記輝度変換を許容する領域が関連づけられた上記所定の光電変換特性の指定情報を挿入する
    　請求項２に記載の送信装置。
  5. 　上記領域情報は、輝度変換の許容レベルを異にする複数の領域の情報を含む
    　請求項１に記載の送信装置。
  6. 　入力ビデオデータに所定の光電変換特性を適用して伝送ビデオデータを得る処理ステップと、
    　送信部により、上記伝送ビデオデータを、輝度変換を許容する領域を示す領域情報と共に送信する送信ステップとを有する
    　送信方法。
  7. 　入力ビデオデータに所定の光電変換特性を適用して得られた伝送ビデオデータを、輝度変換を許容する領域を示す領域情報と共に受信する受信部と、
    　上記伝送ビデオデータに上記所定の光電変換特性に対応する電光変換特性を適用すると共に、上記領域情報に基づいて輝度変換処理を施して出力ビデオデータを得る処理部とを備える
    　受信装置。
  8. 　上記受信部は、上記伝送ビデオデータが符号化されて得られるビデオストリームを受信し、
    　上記領域情報は、上記ビデオストリームのレイヤに挿入されている
    　請求項７に記載の受信装置。
  9. 　上記領域情報として、上記輝度変換を許容する領域を示すメタデータが挿入されている
    　請求項８に記載の受信装置。
  10. 　上記領域情報として、上記輝度変換を許容する領域が関連づけられた上記所定の光電変換特性の指定情報が挿入されている
    　請求項８に記載の受信装置。
  11. 　上記領域情報は、輝度変換の許容レベルを異にする複数の領域の情報を含む
    　請求項７に記載の受信装置。
  12. 　受信部により、入力ビデオデータに所定の光電変換特性を適用して得られた伝送ビデオデータを、輝度変換を許容する領域を示す領域情報と共に受信する受信ステップと、
    　上記伝送ビデオデータに上記所定の光電変換特性に対応する電光変換特性を適用すると共に、上記領域情報に基づいて輝度変換処理を施して出力ビデオデータを得る処理ステップとを有する
    　受信方法。
PCT/JP2015/064384 2014-06-13 2015-05-19 送信装置、送信方法、受信装置および受信方法 WO2015190246A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
RU2016147783A RU2696216C2 (ru) 2014-06-13 2015-05-19 Передающее устройство, способ передачи, приемное устройство и способ приема
CN201580030229.2A CN106416261B (zh) 2014-06-13 2015-05-19 传输设备、传输方法、接收设备以及接收方法
EP15806088.9A EP3157257A4 (en) 2014-06-13 2015-05-19 Transmission device, transmission method, reception device, and reception method
US15/308,155 US11418753B2 (en) 2014-06-13 2015-05-19 Transmission device, transmission method, reception device, and reception method
JP2016527715A JP6531759B2 (ja) 2014-06-13 2015-05-19 送信装置、送信方法、受信装置および受信方法

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2014-122910 2014-06-13
JP2014122910 2014-06-13

Publications (1)

Publication Number Publication Date
WO2015190246A1 true WO2015190246A1 (ja) 2015-12-17

Family

ID=54833351

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/064384 WO2015190246A1 (ja) 2014-06-13 2015-05-19 送信装置、送信方法、受信装置および受信方法

Country Status (6)

Country Link
US (1) US11418753B2 (ja)
EP (1) EP3157257A4 (ja)
JP (2) JP6531759B2 (ja)
CN (1) CN106416261B (ja)
RU (1) RU2696216C2 (ja)
WO (1) WO2015190246A1 (ja)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016088344A1 (ja) * 2014-12-03 2016-06-09 パナソニックＩｐマネジメント株式会社 データ生成方法、データ再生方法、データ生成装置及びデータ再生装置
JP2016111692A (ja) * 2014-12-03 2016-06-20 パナソニックＩｐマネジメント株式会社 データ生成方法、データ再生方法、データ生成装置及びデータ再生装置
JP2017121010A (ja) * 2015-12-28 2017-07-06 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
JP2017163536A (ja) * 2016-03-02 2017-09-14 シャープ株式会社 受信装置および放送システム
CN107395950A (zh) * 2016-05-16 2017-11-24 西安电子科技大学 媒体数据处理方法和装置及系统
WO2018062022A1 (ja) * 2016-09-28 2018-04-05 パナソニックＩｐマネジメント株式会社 調整装置、調整方法およびプログラム
JP2018093320A (ja) * 2016-12-01 2018-06-14 日本放送協会 映像信号変換装置およびそのプログラム、ならびに、映像表示装置
JPWO2018062022A1 (ja) * 2016-09-28 2019-08-29 パナソニックＩｐマネジメント株式会社 調整装置、調整方法およびプログラム
JP2020025333A (ja) * 2015-09-25 2020-02-13 マクセル株式会社 表示装置
JP7367806B2 (ja) 2020-05-22 2023-10-24 ソニーグループ株式会社 送信装置、送信方法、受信装置および受信方法

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110489073B (zh) * 2014-06-10 2023-09-01 松下知识产权经营株式会社 变换方法及变换装置
US11244635B2 (en) 2017-10-12 2022-02-08 Saturn Licensing Llc Image processing apparatus, image processing method, transmission apparatus, transmission method, and reception apparatus

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013046095A1 (en) * 2011-09-27 2013-04-04 Koninklijke Philips Electronics N.V. Apparatus and method for dynamic range transforming of images
WO2014002901A1 (ja) * 2012-06-29 2014-01-03 ソニー株式会社 画像処理装置および方法
WO2014178286A1 (ja) * 2013-04-30 2014-11-06 ソニー株式会社 送信装置、送信方法、受信装置および受信方法

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4372747B2 (ja) * 2005-01-25 2009-11-25 シャープ株式会社 輝度レベル変換装置、輝度レベル変換方法、固体撮像装置、輝度レベル変換プログラム、および記録媒体
KR101511130B1 (ko) * 2008-07-25 2015-04-13 삼성디스플레이 주식회사 표시영상의 부스팅 방법, 이를 수행하기 위한 콘트롤러유닛 및 이를 갖는 표시장치
JP2011040998A (ja) * 2009-08-11 2011-02-24 Mitsubishi Electric Corp 画像表示装置
EP2504829A4 (en) * 2009-11-27 2012-10-31 Canon Kk IMAGE DISPLAY DEVICE
JP5577415B2 (ja) * 2010-02-22 2014-08-20 ドルビー ラボラトリーズ ライセンシング コーポレイション ビットストリームに埋め込まれたメタデータを用いたレンダリング制御を備えるビデオ表示
JP2012014628A (ja) * 2010-07-05 2012-01-19 Mitsubishi Electric Corp 画像表示装置
US8624960B2 (en) * 2010-07-30 2014-01-07 Silicon Image, Inc. Multi-view display system
TWI479898B (zh) * 2010-08-25 2015-04-01 Dolby Lab Licensing Corp 擴展影像動態範圍
JP5761946B2 (ja) * 2010-09-02 2015-08-12 キヤノン株式会社 画像処理装置、画像処理方法及び記憶媒体
JP2012199897A (ja) * 2011-03-04 2012-10-18 Sony Corp 画像データ送信装置、画像データ送信方法、画像データ受信装置および画像データ受信方法
CN103891294B (zh) * 2011-04-28 2017-09-01 皇家飞利浦有限公司 用于hdr图像编码和解码的装置与方法
JP6234920B2 (ja) * 2011-05-10 2017-11-22 コーニンクレッカ フィリップス エヌ ヴェＫｏｎｉｎｋｌｉｊｋｅ Ｐｈｉｌｉｐｓ Ｎ．Ｖ． ハイダイナミックレンジ画像信号生成及び処理
CN102497490B (zh) * 2011-12-16 2014-08-13 上海富瀚微电子有限公司 实现图像高动态范围压缩的系统及其方法
KR101998892B1 (ko) * 2012-03-01 2019-07-10 소니 주식회사 송신 장치, 송신 방법 및 수신 장치
US10110890B2 (en) 2012-07-02 2018-10-23 Sony Corporation Video coding system with low delay and method of operation thereof
EP2819414A3 (en) * 2013-06-28 2015-02-25 Samsung Electronics Co., Ltd Image processing device and image processing method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013046095A1 (en) * 2011-09-27 2013-04-04 Koninklijke Philips Electronics N.V. Apparatus and method for dynamic range transforming of images
WO2014002901A1 (ja) * 2012-06-29 2014-01-03 ソニー株式会社 画像処理装置および方法
WO2014178286A1 (ja) * 2013-04-30 2014-11-06 ソニー株式会社 送信装置、送信方法、受信装置および受信方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
SALLY HATTORI ET AL.: "HLS: SEI message for Knee Function Information", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, JCTVC-P0050-V2, 16TH MEETING, January 2014 (2014-01-01), San Jose, US, pages 1 - 21, XP030115514 *
SALLY HATTORI ET AL.: "HLS: SEI message for transfer function information", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT- VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, JCTVC-00064, 15TH MEETING, October 2013 (2013-10-01), Geneva, CH, pages 1 - 4, XP030115040 *
SALLY HATTORI ET AL.: "Signalling of Luminance Dynamic Range in Tone mapping information SEI", JOINT COLLABORATIVE TEAM ON VIDEO CODING (JCT-VC) OF ITU-T SG 16 WP 3 AND ISO/IEC JTC 1/SC 29/WG 11, JCTVC-J0149, 10TH MEETING, July 2012 (2012-07-01), Stockholm, SE, pages 1 - 7, XP030112511 *
See also references of EP3157257A4 *

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2021036714A (ja) * 2014-12-03 2021-03-04 パナソニックＩｐマネジメント株式会社 データ生成方法及び復号装置
JP2020025277A (ja) * 2014-12-03 2020-02-13 パナソニックＩｐマネジメント株式会社 データ符号化方法、データ復号方法、データ符号化装置及びデータ復号装置
JP2020096393A (ja) * 2014-12-03 2020-06-18 パナソニックＩｐマネジメント株式会社 データ生成装置
JP2020096392A (ja) * 2014-12-03 2020-06-18 パナソニックＩｐマネジメント株式会社 データ生成装置
JP2021036713A (ja) * 2014-12-03 2021-03-04 パナソニックＩｐマネジメント株式会社 データ生成方法及び復号装置
WO2016088344A1 (ja) * 2014-12-03 2016-06-09 パナソニックＩｐマネジメント株式会社 データ生成方法、データ再生方法、データ生成装置及びデータ再生装置
JP2020102884A (ja) * 2014-12-03 2020-07-02 パナソニックＩｐマネジメント株式会社 データ生成装置
JP2016111692A (ja) * 2014-12-03 2016-06-20 パナソニックＩｐマネジメント株式会社 データ生成方法、データ再生方法、データ生成装置及びデータ再生装置
JP2021036716A (ja) * 2014-12-03 2021-03-04 パナソニックＩｐマネジメント株式会社 データ生成方法及び復号装置
JP2021036715A (ja) * 2014-12-03 2021-03-04 パナソニックＩｐマネジメント株式会社 データ生成方法及び復号装置
JP2020127208A (ja) * 2014-12-03 2020-08-20 パナソニックＩｐマネジメント株式会社 データ生成装置
JP2020025333A (ja) * 2015-09-25 2020-02-13 マクセル株式会社 表示装置
JP2021121126A (ja) * 2015-09-25 2021-08-19 マクセル株式会社 映像表示装置および映像出力装置
JP7196227B2 (ja) 2015-09-25 2022-12-26 マクセル株式会社 映像表示装置および映像出力装置
CN108293141A (zh) * 2015-12-28 2018-07-17 索尼公司 用于高动态范围视频数据的发送装置、发送方法、接收装置以及接收方法
CN108293141B (zh) * 2015-12-28 2021-05-25 索尼公司 用于高动态范围视频数据的发送装置、发送方法、接收装置以及接收方法
US10887670B2 (en) 2015-12-28 2021-01-05 Sony Corporation Transmission apparatus, transmission method, reception apparatus, and reception method
JP2017121010A (ja) * 2015-12-28 2017-07-06 ソニー株式会社 送信装置、送信方法、受信装置および受信方法
US20190253771A1 (en) 2015-12-28 2019-08-15 Sony Corporation Transmission apparatus, transmission method, reception apparatus, and reception method
US11368767B2 (en) 2015-12-28 2022-06-21 Sony Corporation Transmission apparatus, transmission method, reception apparatus, and reception method
JP2017163536A (ja) * 2016-03-02 2017-09-14 シャープ株式会社 受信装置および放送システム
US11165944B2 (en) 2016-05-16 2021-11-02 Xi'an Zhongxing New Software Co., Ltd. Media data processing method, apparatus and system
CN107395950A (zh) * 2016-05-16 2017-11-24 西安电子科技大学 媒体数据处理方法和装置及系统
JPWO2018062022A1 (ja) * 2016-09-28 2019-08-29 パナソニックＩｐマネジメント株式会社 調整装置、調整方法およびプログラム
WO2018062022A1 (ja) * 2016-09-28 2018-04-05 パナソニックＩｐマネジメント株式会社 調整装置、調整方法およびプログラム
JP2018093320A (ja) * 2016-12-01 2018-06-14 日本放送協会 映像信号変換装置およびそのプログラム、ならびに、映像表示装置
JP7367806B2 (ja) 2020-05-22 2023-10-24 ソニーグループ株式会社 送信装置、送信方法、受信装置および受信方法

Also Published As

Publication number Publication date
US11418753B2 (en) 2022-08-16
CN106416261A (zh) 2017-02-15
CN106416261B (zh) 2020-06-26
RU2696216C2 (ru) 2019-07-31
EP3157257A1 (en) 2017-04-19
EP3157257A4 (en) 2018-01-17
JP2019193269A (ja) 2019-10-31
RU2016147783A (ru) 2018-06-06
JPWO2015190246A1 (ja) 2017-04-20
RU2016147783A3 (ja) 2018-12-19
US20170064242A1 (en) 2017-03-02
JP6531759B2 (ja) 2019-06-19
JP6849011B2 (ja) 2021-03-24

Similar Documents

Publication Publication Date Title
JP6849011B2 (ja) 送信装置、送信方法、受信装置および受信方法
US11418820B2 (en) Transmission device, transmission method, reception device, reception method, display device, and display method
EP3192256B1 (en) Image processing apparatus and image processing method
JP6614156B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP2020188495A (ja) 受信装置、受信方法および表示装置
JP6686438B2 (ja) 送信装置、送信方法、受信装置および受信方法
US11272149B2 (en) Transmitting apparatus, transmitting method, receiving apparatus, and receiving method
JP7205590B2 (ja) 送信装置、送信方法、受信装置および受信方法
JP6652153B2 (ja) 送信装置、送信方法、受信装置および受信方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15806088

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016527715

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 15308155

Country of ref document: US

REEP Request for entry into the european phase

Ref document number: 2015806088

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2015806088

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 2016147783

Country of ref document: RU

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE